JP7100468B2 - Terminal devices and programs - Google Patents

Terminal devices and programs Download PDF

Info

Publication number
JP7100468B2
JP7100468B2 JP2018043639A JP2018043639A JP7100468B2 JP 7100468 B2 JP7100468 B2 JP 7100468B2 JP 2018043639 A JP2018043639 A JP 2018043639A JP 2018043639 A JP2018043639 A JP 2018043639A JP 7100468 B2 JP7100468 B2 JP 7100468B2
Authority
JP
Japan
Prior art keywords
content
iot
unit
acquisition unit
terminal device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2018043639A
Other languages
Japanese (ja)
Other versions
JP2019161374A (en
Inventor
展夢 小川
寿之 大亦
寛 藤沢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Broadcasting Corp filed Critical Japan Broadcasting Corp
Priority to JP2018043639A priority Critical patent/JP7100468B2/en
Publication of JP2019161374A publication Critical patent/JP2019161374A/en
Application granted granted Critical
Publication of JP7100468B2 publication Critical patent/JP7100468B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、コンテンツと当該コンテンツを再生する機器とを関連付ける端末装置及びプログラムに関する。 The present invention relates to a terminal device and a program for associating a content with a device for reproducing the content.

従来、放送局は、映像、音声、テキスト等の多様な種類のコンテンツを保持しており、これらのコンテンツを、テレビ、スマートフォン（登録商標）等の機器を通じて、視聴者へ提供している。 Conventionally, broadcasting stations hold various types of contents such as video, audio, and text, and provide these contents to viewers through devices such as televisions and smartphones (registered trademarks).

一方で、ＩｏＴ（Internet of Things）機器に関する研究開発が盛んに行われており、映像、音声、テキスト等のコンテンツを再生可能な様々なＩｏＴ機器が開発されている。ＩｏＴ機器は、インターネットに接続された機器をいい、例えばパーソナルコンピュータ、スマートフォン（登録商標）、テレビ、デジタルカメラ、ＤＶＤプレーヤー、センサー類等である。放送局等のコンテンツ提供者は、これらのＩｏＴ機器を利用することにより、多様な方法で、コンテンツを提供することができる。 On the other hand, research and development on IoT (Internet of Things) devices are being actively carried out, and various IoT devices capable of reproducing contents such as video, audio, and text have been developed. IoT devices refer to devices connected to the Internet, such as personal computers, smartphones (registered trademarks), televisions, digital cameras, DVD players, sensors, and the like. Content providers such as broadcasting stations can provide content in various ways by using these IoT devices.

スマートフォン（登録商標）等の端末装置において、ＩｏＴ機器がコンテンツを再生可能であるか否かについて機械的に判断する手法として、ＩｏＴ機器のシングディスクリプション（Thing Description、以下、「ＴＤ」という。）のデータを参照する方法がある（例えば、非特許文献１を参照）。すなわち、端末装置に保持されたアプリケーションソフトウェア（以下、「アプリ」という。）は、ＩｏＴ機器のＴＤを参照することにより、当該ＩｏＴ機器が所定のコンテンツを再生可能であるか否かについて判断することができる。 As a method for mechanically determining whether or not an IoT device can play content in a terminal device such as a smartphone (registered trademark), the Thing Description of the IoT device (hereinafter referred to as "TD"). There is a method of referencing the data of (see, for example, Non-Patent Document 1). That is, the application software held in the terminal device (hereinafter referred to as "application") determines whether or not the IoT device can play a predetermined content by referring to the TD of the IoT device. Can be done.

ＴＤは、ＩｏＴ機器の機能等を示すメタデータである。アプリは、ＩｏＴ機器のＴＤを参照することにより、例えばＩｏＴ機器がテレビの場合、当該ＩｏＴ機器が映像コンテンツを再生可能であることを判断することができる。また、アプリは、例えばＩｏＴ機器がスマートスピーカの場合、当該ＩｏＴ機器が音声コンテンツを再生可能であることを判断することができる。また、アプリは、例えばＩｏＴ機器がテキスト読み上げ機能を有するコミュニケーションロボットの場合、当該ＩｏＴ機器がテキストコンテンツを再生可能であることを判断することができる。 TD is metadata indicating the function of the IoT device and the like. By referring to the TD of the IoT device, the application can determine, for example, that the IoT device can play video content when the IoT device is a television. Further, for example, when the IoT device is a smart speaker, the application can determine that the IoT device can play audio content. Further, the application can determine that the IoT device can reproduce the text content, for example, when the IoT device is a communication robot having a text reading function.

“Web of Things(WoT) Thing Description, W3C Editor’s Draft 26 February 2018”、［online］、平成３０年２月２６日、Ｗ３Ｃ、［平成３０年２月２８日検索］、インターネット＜https://w3c.github.io/wot-thing-description/＞"Web of Things (WoT) Thing Description, W3C Editor's Draft 26 February 2018", [online], February 26, 2018, W3C, [Search February 28, 2018], Internet <https: // w3c .github.io/wot-thing-description/>

前述のとおり、端末装置に保持されたアプリは、ＩｏＴ機器のＴＤを参照することにより、当該ＩｏＴ機器がどのような種類のコンテンツを再生可能であるかについて機械的に判断することができる。 As described above, the application held in the terminal device can mechanically determine what kind of content the IoT device can play by referring to the TD of the IoT device.

しかしながら、端末装置に保持されたアプリは、コンテンツを取得した場合に、当該コンテンツがどのような種類のＩｏＴ機器にて再生可能であるかについて、ＩｏＴ機器のＴＤを参照するのみでは判断することができない。 However, when the content is acquired, the application held in the terminal device can determine what kind of IoT device the content can be played back by only referring to the TD of the IoT device. Can not.

このような従来の端末装置では、取得したコンテンツを基準にして、当該コンテンツを再生可能なＩｏＴ機器について容易に特定することができず、様々なコンテンツを様々なＩｏＴ機器にて再生させることが困難であった。このため、端末装置の機能として、様々なコンテンツに対し様々なＩｏＴ機器を関連付けるための簡易な仕組みが所望されていた。 With such a conventional terminal device, it is not possible to easily identify an IoT device capable of playing the content based on the acquired content, and it is difficult to play various contents on various IoT devices. Met. Therefore, as a function of the terminal device, a simple mechanism for associating various IoT devices with various contents has been desired.

そこで、本発明は前記課題を解決するためになされたものであり、その目的は、映像、音声、テキスト、制御プログラム、クーポン等の様々なコンテンツを、様々なＩｏＴ機器にて簡易な仕組みで再生させることが可能な端末装置及びプログラムを提供することにある。 Therefore, the present invention has been made to solve the above-mentioned problems, and an object thereof is to reproduce various contents such as video, audio, text, control program, coupon, etc. on various IoT devices by a simple mechanism. It is to provide a terminal device and a program which can be made.

前記課題を解決するために、請求項１の端末装置は、コンテンツサーバからコンテンツを取得し、ＩｏＴ（Internet of Things）機器に、当該コンテンツに関する再生処理を行わせる端末装置において、当該端末装置との間で通信にて接続される前記ＩｏＴ機器を探索し、接続可能な全ての前記ＩｏＴ機器のそれぞれについて、所定のサーバまたは前記探索に伴う応答から、当該ＩｏＴ機器の種類を示す機器種類、当該ＩｏＴ機器がどのような種類の前記コンテンツを再生できるかを示す機器機能、及び当該ＩｏＴ機器が再生する前記コンテンツのファイルの種類を示す属性のデータを含むＴＤ（Thing Description）を取得するＴＤ取得部と、所定のサーバまたは前記コンテンツから、当該コンテンツの種類を示すコンテンツ種類、当該コンテンツの内容が属する分野を示すジャンル、及び当該コンテンツを再生可能な前記ＩｏＴ機器の種類を示す再生可能な機器のデータを含むＣＤ（Content Description）を取得するＣＤ取得部と、前記ＴＤ取得部により取得された前記機器種類、前記機器機能及び前記属性のデータを含む前記ＴＤ、及び、前記ＣＤ取得部により取得された前記コンテンツ種類、前記ジャンル及び前記再生可能な機器のデータを含む前記ＣＤに基づいて、接続可能な全ての前記ＩｏＴ機器のうち、前記コンテンツを実際に再生する前記ＩｏＴ機器を決定する機器決定部と、前記機器決定部により決定された前記ＩｏＴ機器に、前記コンテンツに関する再生処理を行わせるコンテンツ処理部と、を備えたことを特徴とする。 In order to solve the above-mentioned problem, the terminal device according to claim 1 is a terminal device that acquires content from a content server and causes an IoT (Internet of Things) device to perform playback processing related to the content. The IoT device connected by communication between them is searched, and for each of the connectable IoT devices, the device type indicating the type of the IoT device and the IoT from the response accompanying the search from the predetermined server or the search. A device function that indicates what kind of content the device can play, and a TD acquisition unit that acquires TD (Thing Description) that includes attribute data that indicates the type of file of the content that the IoT device plays. , The data of the content type indicating the type of the content, the genre indicating the field to which the content of the content belongs, and the data of the playable device indicating the type of the IoT device capable of reproducing the content from the predetermined server or the content. The CD acquisition unit that acquires the included CD (Content Description), the TD that includes the device type, the device function, and the attribute data acquired by the TD acquisition unit, and the CD acquisition unit. A device determination unit that determines the IoT device that actually reproduces the content among all connectable IoT devices based on the CD including the content type, the genre, and the data of the playable device. The IoT device determined by the device determination unit is provided with a content processing unit for performing reproduction processing related to the content.

また、請求項２の端末装置は、請求項１に記載の端末装置において、前記コンテンツサーバから複数のコンテンツを取得するコンテンツ取得部を備え、前記ＴＤ取得部が、接続可能な全ての前記ＩｏＴ機器について、当該ＩｏＴ機器の前記機器種類、前記機器機能及び前記属性を含む使用可能機器情報を生成し、前記ＣＤ取得部が、前記コンテンツ取得部により取得された全ての前記コンテンツについて、当該コンテンツの前記コンテンツ種類、前記ジャンル及び前記再生可能な機器を含む使用可能コンテンツ情報を生成し、前記機器決定部が、前記ＴＤ取得部により生成された前記使用可能機器情報に含まれる前記機器種類、前記機器機能及び前記属性と、前記ＣＤ取得部により取得された前記使用可能コンテンツ情報に含まれる前記コンテンツ種類、前記ジャンル及び前記再生可能な機器とに基づいて、前記コンテンツ取得部により取得された全ての前記コンテンツのそれぞれについて、接続可能な全ての前記ＩｏＴ機器のうち、当該コンテンツを再生可能な前記ＩｏＴ機器を再生可能ＩｏＴ機器として判定し、前記コンテンツ取得部により取得された全ての前記コンテンツのうち、ユーザにより選択された前記コンテンツについて、前記再生可能ＩｏＴ機器のうち、実際に再生するＩｏＴ機器を決定する、ことを特徴とする。 Further, the terminal device according to claim 2 includes a content acquisition unit for acquiring a plurality of contents from the content server in the terminal device according to claim 1, and all the IoT devices to which the TD acquisition unit can be connected. The CD acquisition unit generates the usable device information including the device type, the device function, and the attribute of the IoT device, and the CD acquisition unit obtains all the contents acquired by the content acquisition unit. The device type and the device function included in the usable device information generated by the TD acquisition unit are generated by the device determination unit, which generates usable content information including the content type , the genre, and the playable device. And all the contents acquired by the content acquisition unit based on the attributes and the content type , the genre, and the reproducible device included in the usable content information acquired by the CD acquisition unit. Of all the connectable IoT devices, the IoT device capable of reproducing the content is determined as a playable IoT device, and among all the contents acquired by the content acquisition unit, the user Among the reproducible IoT devices, the IoT device to be actually reproduced is determined for the selected content.

また、請求項３の端末装置は、請求項２に記載の端末装置において、当該端末装置のみが前記コンテンツを再生することを示す特定機器データを含むＣＤを、ダミーＣＤとして生成するダミーＣＤ生成部を備え、前記ＣＤ取得部が、前記コンテンツ取得部により取得されたコンテンツについて、前記所定のサーバ及び前記コンテンツの両方から前記ＣＤを取得できない場合、前記ダミーＣＤ生成部から前記ダミーＣＤを入力し、前記コンテンツの前記特定機器データを含む前記使用可能コンテンツ情報を生成し、前記機器決定部が、前記コンテンツ取得部により取得された全ての前記コンテンツのうち、ユーザにより選択された前記コンテンツについて、前記使用可能コンテンツ情報に前記特定機器データが含まれる場合、当該端末装置を、前記コンテンツを実際に再生する機器として決定する、ことを特徴とする。 Further, the terminal device according to claim 3 is a dummy CD generation unit that generates, as a dummy CD, a CD containing specific device data indicating that only the terminal device reproduces the content in the terminal device according to claim 2. When the CD acquisition unit cannot acquire the CD from both the predetermined server and the content for the content acquired by the content acquisition unit, the dummy CD is input from the dummy CD generation unit. The usable content information including the specific device data of the content is generated, and the device determination unit uses the content selected by the user among all the contents acquired by the content acquisition unit. When the specific device data is included in the possible content information, the terminal device is determined as a device that actually reproduces the content.

また、請求項４の端末装置は、請求項２に記載の端末装置において、接続可能な全ての前記ＩｏＴ機器には、所定の映像コンテンツを再生しているテレビが含まれており、前記コンテンツ取得部が、前記テレビにより再生されている前記所定の映像コンテンツに関連する関連コンテンツを、前記コンテンツサーバから取得し、前記ＣＤ取得部が、前記コンテンツ取得部により取得された前記関連コンテンツについて、当該関連コンテンツの前記コンテンツ種類、前記ジャンル及び前記再生可能な機器を含む前記使用可能コンテンツ情報を生成し、前記機器決定部が、前記ユーザにより前記関連コンテンツが選択された場合、当該関連コンテンツについて、前記再生可能ＩｏＴ機器のうち、当該関連コンテンツを実際に再生するＩｏＴ機器を決定し、前記コンテンツ処理部が、前記テレビが前記所定の映像コンテンツを再生している状態で、前記機器決定部により決定された前記ＩｏＴ機器にて、前記関連コンテンツに関する再生処理を行わせる、ことを特徴とする。 Further, in the terminal device according to claim 4, in the terminal device according to claim 2, all the connectable IoT devices include a television playing a predetermined video content, and the content acquisition. The unit acquires the related content related to the predetermined video content being played by the television from the content server, and the CD acquisition unit obtains the related content acquired by the content acquisition unit. When the usable content information including the content type , the genre, and the playable device of the content is generated, and the device determination unit selects the related content by the user, the playback of the related content is performed. Among the possible IoT devices, the IoT device that actually reproduces the related content is determined, and the content processing unit is determined by the device determination unit in a state where the television is playing the predetermined video content. The IoT device is characterized in that a reproduction process related to the related content is performed.

さらに、請求項５のプログラムは、コンピュータを、請求項１から４までのいずれか一項に記載の端末装置として機能させることを特徴とする。 Further, the program of claim 5 is characterized in that the computer functions as the terminal device according to any one of claims 1 to 4.

以上のように、本発明によれば、映像、音声、テキスト、制御プログラム、クーポン等の様々なコンテンツを、様々なＩｏＴ機器にて簡易な仕組みで再生させることが可能となる。 As described above, according to the present invention, various contents such as video, audio, text, control program, coupon, etc. can be reproduced by various IoT devices by a simple mechanism.

本発明の実施形態の端末装置に保持されたマッチングアプリによるサービスを説明する概略図である。It is a schematic diagram explaining the service by the matching application held in the terminal apparatus of embodiment of this invention. 端末装置のハードウェア構成例を示す概略図である。It is a schematic diagram which shows the hardware configuration example of a terminal apparatus. 制御部の構成例を示すブロック図である。It is a block diagram which shows the structural example of a control part. 制御部の処理例を示すフローチャートである。It is a flowchart which shows the processing example of a control part. 端末装置の画面表示例を説明する図である。It is a figure explaining the screen display example of a terminal apparatus. ＴＤのデータ構造例を示す図である。It is a figure which shows the example of the data structure of TD. ＣＤのデータ構造例を示す図である。It is a figure which shows the data structure example of a CD. ＴＤ取得部の構成例を示すブロック図である。It is a block diagram which shows the structural example of the TD acquisition part. ＴＤ取得部の処理例を示すフローチャートである。It is a flowchart which shows the processing example of the TD acquisition part. ＣＤ取得部の構成例を示すブロック図である。It is a block diagram which shows the structural example of the CD acquisition part. コンテンツ取得部及びＣＤ取得部の処理例を示すフローチャートである。It is a flowchart which shows the processing example of the content acquisition part and the CD acquisition part. 機器決定部及びコンテンツ処理部の構成例を示すブロック図である。It is a block diagram which shows the structural example of a device determination part and a content processing part. 機器決定部及びコンテンツ処理部の処理例を示すフローチャートである。It is a flowchart which shows the processing example of a device determination part and a content processing part. マッチングアプリの記述例を説明する図である。It is a figure explaining the description example of the matching application.

以下、本発明を実施するための形態について図面を用いて詳細に説明する。本発明は、コンテンツの種類等を示すメタデータであるコンテンツディスクリプション（Content Description、以下、「ＣＤ」という。）と、ＩｏＴ機器の機能等を示すメタデータであるＴＤとを用いて、コンテンツがどのような種類のＩｏＴ機器にて再生可能であるかについて判断することを特徴とする。これにより、１つのコンテンツに対し、１以上のＩｏＴ機器を関連付けることができ、結果として、様々なコンテンツを、様々なＩｏＴ機器にて簡易な仕組みで再生させることが可能となる。 Hereinafter, embodiments for carrying out the present invention will be described in detail with reference to the drawings. The present invention uses a content description (Content Description, hereinafter referred to as "CD"), which is metadata indicating the type of content, and a TD, which is metadata indicating the function of an IoT device, to provide content. It is characterized by determining what kind of IoT device can be reproduced. As a result, one or more IoT devices can be associated with one content, and as a result, various contents can be reproduced by various IoT devices by a simple mechanism.

また、ＣＤ及びＴＤを用いて、コンテンツにＩｏＴ機器を関連付けるためのソフトウェアをアプリとして提供することにより、様々なコンテンツを、その種類に依存することなく、統一されたアプリの記述にて扱うことが可能となる。つまり、簡易な仕組みにて、１つのコンテンツに対し１以上のＩｏＴ機器を関連付けることが可能となる。 In addition, by providing software for associating IoT devices with content using CDs and TDs, various contents can be handled in a unified application description without depending on the type. It will be possible. That is, it is possible to associate one or more IoT devices with one content by a simple mechanism.

〔本発明の概要〕
まず、本発明の実施形態の端末装置１によるサービスの概要について説明する。図１は、端末装置１に保持されたマッチングアプリによるサービスを説明する概略図である。 [Outline of the present invention]
First, an outline of the service by the terminal device 1 according to the embodiment of the present invention will be described. FIG. 1 is a schematic diagram illustrating a service by a matching application held in the terminal device 1.

図示しない放送局またはコンテンツサーバは、映像、音声、テキスト等のコンテンツを、放送／通信網６を介して端末装置１及びＩｏＴ機器２－１～２－３等へ配信する。 A broadcasting station or content server (not shown) distributes content such as video, audio, and text to the terminal device 1 and IoT devices 2-1 to 2-3 via the broadcasting / communication network 6.

端末装置１は、例えばスマートフォン（登録商標）等の携帯端末やパーソナルコンピュータ等、コンテンツと他の機器を繋ぐゲートウェイとしての機能を持つ機器である。端末装置１は、マッチングアプリを動作させることにより、各コンテンツのＣＤ及びＩｏＴ機器２－１～２－３のＴＤに基づいて、コンテンツを所望のＩｏＴ機器２－１～２－３にて再生させるための制御を行う。つまり、端末装置１は、放送局またはコンテンツサーバからコンテンツを取得し、ＷｏＴ（Web of Things）の通信プロトコル等を用いて、近傍のＩｏＴ機器２－１～２－３を探索すると共に、所望のＩｏＴ機器２－１～２－３に対し、取得したコンテンツに関する再生処理を行わせる。 The terminal device 1 is a device having a function as a gateway for connecting contents and other devices, such as a mobile terminal such as a smartphone (registered trademark) or a personal computer. By operating the matching application, the terminal device 1 reproduces the content on the desired IoT devices 2-1 to 2-3 based on the CD of each content and the TD of the IoT devices 2-1 to 2-3. Control for. That is, the terminal device 1 acquires content from a broadcasting station or a content server, searches for nearby IoT devices 2-1 to 2-3 using a communication protocol of WoT (Web of Things), and desires it. Have the IoT devices 2-1 to 2-3 perform the reproduction processing related to the acquired contents.

ＩｏＴ機器２－１は、音声コンテンツを再生するスマートスピーカであり、ＩｏＴ機器２－２は、映像コンテンツを再生するテレビであり、ＩｏＴ機器２－３は、テキストコンテンツを再生するスマートミラーである。 The IoT device 2-1 is a smart speaker that reproduces audio content, the IoT device 2-2 is a television that reproduces video content, and the IoT device 2-3 is a smart mirror that reproduces text content.

端末装置１とＩｏＴ機器２－１～２－３とは、Wi-Fi（登録商標）またはBluetooth（登録商標）等の規格に従い、通信により接続される。 The terminal device 1 and the IoT devices 2-1 to 2-3 are connected by communication in accordance with a standard such as Wi-Fi (registered trademark) or Bluetooth (registered trademark).

例えば、ユーザは、携帯型の端末装置１を所持しており、リビングに設置されたＩｏＴ機器２－２のテレビにて映像コンテンツを視聴しているものとする。端末装置１は、マッチングアプリを動作させることで、放送／通信網６を介して、視聴中の映像コンテンツ、当該映像コンテンツに関連する音声コンテンツ及びテキストコンテンツを取得すると共に、ＩｏＴ機器２－１～２－３を探索する。そして、端末装置１は、各コンテンツのＣＤ及びＩｏＴ機器２－１～２－３のＴＤを取得し、ＣＤ及びＴＤに基づいて、各コンテンツに対してＩｏＴ機器２－１～２－３を関連付ける。これにより、音声コンテンツはＩｏＴ機器２－１に関連付けられ、映像コンテンツはＩｏＴ機器２－２に関連付けられ、テキストコンテンツはＩｏＴ機器２－３に関連付けられる。 For example, it is assumed that the user has a portable terminal device 1 and is viewing video content on the television of the IoT device 2-2 installed in the living room. By operating the matching application, the terminal device 1 acquires the video content being viewed, the audio content and the text content related to the video content via the broadcast / communication network 6, and the IoT device 2-1 to Search for 2-3. Then, the terminal device 1 acquires the CD of each content and the TD of the IoT devices 2-1 to 2-3, and associates the IoT devices 2-1 to 2-3 with each content based on the CD and TD. .. As a result, the audio content is associated with the IoT device 2-1 and the video content is associated with the IoT device 2-2, and the text content is associated with the IoT device 2-3.

ユーザがリビングから台所へ移動すると、端末装置１は、所定の手段にてその移動を検出し、ＩｏＴ機器２－２のテレビが再生している映像コンテンツに関連する音声コンテンツを、台所に設置されたＩｏＴ機器２－１のスマートスピーカに再生させる。ＩｏＴ機器２－２は、端末装置１からの指示に従い、例えばコンテンツサーバから音声コンテンツを受信し、受信した音声コンテンツを再生するか、または既に受信済みの音声コンテンツを再生する。 When the user moves from the living room to the kitchen, the terminal device 1 detects the movement by a predetermined means, and the audio content related to the video content being played by the television of the IoT device 2-2 is installed in the kitchen. Play back on the smart speaker of the IoT device 2-1. The IoT device 2-2 receives the audio content from, for example, the content server and reproduces the received audio content, or reproduces the already received audio content according to the instruction from the terminal device 1.

これにより、ユーザは、ＩｏＴ機器２－２のテレビにて視聴していた映像コンテンツに対応して、その音声コンテンツによる音声を台所で継続的に聞くことができる。 As a result, the user can continuously listen to the audio of the audio content in the kitchen in response to the video content that was being viewed on the television of the IoT device 2-2.

さらに、ユーザが台所から洗面所へ移動すると、端末装置１は、所定の手段にてその移動を検出し、ＩｏＴ機器２－２のテレビが再生している映像コンテンツに関連するテキストコンテンツを、洗面所に設置されたＩｏＴ機器２－３のスマートミラーに再生させる。ＩｏＴ機器２－３は、端末装置１からの指示に従い、例えばコンテンツサーバからテキストコンテンツを受信し、受信したテキストコンテンツを再生するか、または既に受信済みのテキストコンテンツを再生する。 Further, when the user moves from the kitchen to the washroom, the terminal device 1 detects the movement by a predetermined means, and the text content related to the video content being played by the television of the IoT device 2-2 is washed. Play it back on the smart mirror of the IoT device 2-3 installed in the place. The IoT device 2-3 receives the text content from, for example, the content server and reproduces the received text content, or reproduces the text content that has already been received, according to the instruction from the terminal device 1.

これにより、ユーザは、ＩｏＴ機器２－２のテレビにて視聴していた映像コンテンツに対応して、そのテキストコンテンツによるテキストを洗面所で継続的に読むことができる。 As a result, the user can continuously read the text of the text content in the washroom in response to the video content that was being viewed on the television of the IoT device 2-2.

このように、ユーザは空間を移動しても、移動先にあるＩｏＴ機器２－１，２－３を利用して、その出力機能に見合った手段で、視聴中の映像コンテンツと同種の内容のコンテンツを継続的に視聴することができる。 In this way, even if the user moves in space, he / she can use the IoT devices 2-1, 2-3 at the destination and use the means suitable for the output function to provide the same kind of content as the video content being viewed. You can watch the content continuously.

尚、図１では、端末装置１がマッチングアプリを保持して動作させる例を示したが、端末装置１が存在しない場合、ＩｏＴ機器２－１～２－３のいずれかがマッチングアプリを保持して動作させるようにしてもよい。また、マッチングアプリは、放送／通信網６のクラウド上に存在するようにしてもよい。この場合、クラウド（クラウド上の装置）がマッチングアプリを動作させる。また、ＩｏＴ機器２－１～２－３は、コンテンツを、端末装置１を介して取得するようにしてもよいし、放送局またはコンテンツサーバから直接取得するようにしてもよい。 Although FIG. 1 shows an example in which the terminal device 1 holds and operates the matching application, when the terminal device 1 does not exist, any one of the IoT devices 2-1 to 2-3 holds the matching application. It may be operated. Further, the matching application may exist on the cloud of the broadcasting / communication network 6. In this case, the cloud (device on the cloud) operates the matching application. Further, the IoT devices 2-1 to 2-3 may acquire the content via the terminal device 1, or may acquire the content directly from the broadcasting station or the content server.

〔ハードウェア構成〕
次に、本発明の実施形態による端末装置１のハードウェア構成について説明する。図２は、端末装置１のハードウェア構成例を示す概略図である。この端末装置１は、ＣＰＵ１１と、プログラム及びテーブル等を記憶するＲＯＭ及びＲＡＭからなる記憶部１２と、プログラム、テーブル及びデータ等を記憶する記憶装置（例えばハードディスク装置）１３と、当該端末装置１を使用するユーザによるタッチパネル等の操作に伴い、所定のデータを入力制御する操作／入力部１４と、ユーザに対しデータ入力操作等を促すための画面情報を表示する表示出力インタフェース部１５と、インターネット等の放送／通信網６、及びWi-Fi（登録商標）等の規格に従う無線通信を介してコンテンツ、プログラム及びデータ等を送受信する通信部１６と、を備えて構成され、これらの構成部はシステムバス１７を介して相互に接続される。 [Hardware configuration]
Next, the hardware configuration of the terminal device 1 according to the embodiment of the present invention will be described. FIG. 2 is a schematic diagram showing a hardware configuration example of the terminal device 1. The terminal device 1 includes a CPU 11, a storage unit 12 including a ROM and a RAM for storing programs, tables, and the like, a storage device (for example, a hard disk device) 13 for storing programs, tables, data, and the like, and the terminal device 1. An operation / input unit 14 that inputs and controls predetermined data according to an operation of a touch panel or the like by a user, a display output interface unit 15 that displays screen information for prompting the user to perform a data input operation, the Internet, or the like. The broadcasting / communication network 6 and the communication unit 16 for transmitting / receiving contents, programs, data, etc. via wireless communication conforming to a standard such as Wi-Fi (registered trademark) are provided, and these components are a system. They are connected to each other via the bus 17.

記憶装置１３には、端末装置１の基本的な機能を提供するＯＳ（オペレーティングシステム）プログラム、マッチングアプリのプログラム及びＷｅｂブラウザのプログラム、これらのプログラムにて使用する各種テーブル及びデータ等が記憶されている。 The storage device 13 stores an OS (operating system) program that provides the basic functions of the terminal device 1, a matching application program, a Web browser program, various tables and data used in these programs, and the like. There is.

マッチングアプリは、コンテンツのＣＤ及びＩｏＴ機器２のＴＤを用いて、コンテンツがどのような種類のＩｏＴ機器２にて再生可能であるかを判断し、所望のコンテンツを所望のＩｏＴ機器２にて再生させるためのプログラムである。 The matching application uses the content CD and the TD of the IoT device 2 to determine what kind of IoT device 2 the content can be played on, and plays the desired content on the desired IoT device 2. It is a program to make it.

尚、マッチングアプリは、当該端末装置１が処理を行うときに、ＣＰＵ１１により記憶装置１３から記憶部１２のＲＡＭに読み出されて実行される。また、各種テーブル及びデータは、マッチングアプリの実行に伴い生成され、ＣＰＵ１１によって記憶部１２のＲＡＭから記憶装置１３へ書き込まれ、また、マッチングアプリの実行に伴い、ＣＰＵ１１によって記憶装置１３から記憶部１２のＲＡＭに読み出される。Ｗｅｂブラウザについても同様である。 The matching application is read from the storage device 13 to the RAM of the storage unit 12 by the CPU 11 and executed when the terminal device 1 performs processing. Further, various tables and data are generated by the execution of the matching application, are written from the RAM of the storage unit 12 to the storage device 13 by the CPU 11, and are written from the storage device 13 to the storage unit 12 by the CPU 11 with the execution of the matching application. Is read into the RAM of. The same applies to the Web browser.

ここで、ＯＳプログラムは、ＣＰＵ１１により実行され、端末装置１の基本的な機能として、記憶部１２、記憶装置１３、操作／入力部１４、表示出力インタフェース部１５及び通信部１６を管理する。そして、このＯＳプログラムがＣＰＵ１１によって実行された状態で、前述のマッチングアプリ及びＷｅｂブラウザが実行される。 Here, the OS program is executed by the CPU 11, and manages the storage unit 12, the storage device 13, the operation / input unit 14, the display output interface unit 15, and the communication unit 16 as basic functions of the terminal device 1. Then, while this OS program is executed by the CPU 11, the above-mentioned matching application and Web browser are executed.

制御部１０は、ＣＰＵ１１及び記憶部１２により構成され、ＣＰＵ１１が記憶装置１３に記憶されたマッチングアプリ及びＷｅｂブラウザ等を記憶部１２に読み出して実行することにより、端末装置１全体を統括制御する。図１は、マッチングアプリ及びＷｅｂブラウザ等が記憶装置１３から記憶部１２に読み出された状態を示している。このように、端末装置１は、図１に示したハードウェア構成により、制御部１０がマッチングアプリ及びブラウザ等に従って各種処理を行う。 The control unit 10 is composed of a CPU 11 and a storage unit 12, and the CPU 11 collectively controls the entire terminal device 1 by reading the matching application and the Web browser stored in the storage device 13 into the storage unit 12 and executing the control unit 10. FIG. 1 shows a state in which a matching application, a Web browser, or the like is read from the storage device 13 to the storage unit 12. As described above, in the terminal device 1, the control unit 10 performs various processes according to the matching application, the browser, and the like according to the hardware configuration shown in FIG.

〔制御部１０（マッチングアプリが動作したときの制御部１０）〕
次に、マッチングアプリが動作したときの制御部１０について説明する。図３は、制御部１０（端末装置１）の構成例を示すブロック図であり、マッチングアプリが動作したときの機能構成を示している。図４は、制御部１０の処理例を示すフローチャートであり、図５は、端末装置１の画面表示例を説明する図である。 [Control unit 10 (Control unit 10 when the matching application operates)]
Next, the control unit 10 when the matching application operates will be described. FIG. 3 is a block diagram showing a configuration example of the control unit 10 (terminal device 1), and shows a functional configuration when the matching application is operated. FIG. 4 is a flowchart showing a processing example of the control unit 10, and FIG. 5 is a diagram illustrating a screen display example of the terminal device 1.

図３を参照して、この制御部１０は、ＴＤ取得部２０、ＴＤ記憶部２１、コンテンツ取得部２２、コンテンツ記憶部２３、ＣＤ取得部２４、ＣＤ記憶部２５、機器決定部２６及びコンテンツ処理部２７を備えている。以下、図３～図５を参照して、制御部１０について説明する。 With reference to FIG. 3, the control unit 10 includes a TD acquisition unit 20, a TD storage unit 21, a content acquisition unit 22, a content storage unit 23, a CD acquisition unit 24, a CD storage unit 25, a device determination unit 26, and content processing. It has a part 27. Hereinafter, the control unit 10 will be described with reference to FIGS. 3 to 5.

端末装置１を操作するユーザがマッチングアプリを選択すると、端末装置１は、マッチングアプリを起動する（ステップＳ４０１）。 When the user who operates the terminal device 1 selects the matching application, the terminal device 1 activates the matching application (step S401).

制御部１０のＴＤ取得部２０は、接続可能なＩｏＴ機器２を探索し（ステップＳ４０２）、接続可能なＩｏＴ機器２またはＴＤサーバ３からＴＤを取得する（ステップＳ４０３）。そして、ＴＤ取得部２０は、取得したＴＤをＴＤ記憶部２１に格納する。 The TD acquisition unit 20 of the control unit 10 searches for the connectable IoT device 2 (step S402), and acquires the TD from the connectable IoT device 2 or the TD server 3 (step S403). Then, the TD acquisition unit 20 stores the acquired TD in the TD storage unit 21.

ＴＤ取得部２０は、接続可能なＩｏＴ機器２毎に、そのＴＤを取得してＴＤ記憶部２１に格納する。これにより、ＴＤ記憶部２１には、端末装置１が接続可能な全てのＩｏＴ機器２について、それぞれのＴＤが格納される。 The TD acquisition unit 20 acquires the TD for each connectable IoT device 2 and stores it in the TD storage unit 21. As a result, the TD storage unit 21 stores the TDs of all the IoT devices 2 to which the terminal device 1 can be connected.

図６は、ＴＤのデータ構造例を示す図である。このＴＤは、モノ（Thing）がどのように構成されているかを記述した、ＩｏＴ機器の機能等を示すメタデータである。ＴＤには、機器ＩＤ（id）、機器種類（model）、機器機能（actions）、属性(properties)等のデータが含まれる。 FIG. 6 is a diagram showing an example of a TD data structure. This TD is metadata showing the functions and the like of the IoT device, which describes how the thing (Thing) is configured. The TD includes data such as a device ID (id), a device type (model), a device function (actions), and an attribute (properties).

機器ＩＤは、ＩｏＴ機器２の識別子を示す。機器種類は、ＩｏＴ機器２の種類を示し、例えば、スピーカ（speaker）、スマートスピーカ（smart speaker）、テレビ（television）、スマートミラー（smart mirror）、ロボット（robot）、ゲートウェイ（geteway）等である。機器機能は、ＩｏＴ機器２がコンテンツを再生する機能、すなわち、どのような種類のコンテンツを再生できるかを示し、例えば、音声再生（audio play）、映像再生（movie play）等である。属性は、ＩｏＴ機器２が再生するコンテンツのファイルの種類を示し、例えば、音声ファイル（audio file）、映像ファイル（movie file）等である。 The device ID indicates an identifier of the IoT device 2. The device type indicates the type of the IoT device 2, and is, for example, a speaker, a smart speaker, a television, a smart mirror, a robot, a gateway, or the like. .. The device function indicates a function of the IoT device 2 to play back content, that is, what kind of content can be played back, and is, for example, audio play (audio play), video play (movie play), and the like. The attribute indicates the type of the content file to be played by the IoT device 2, and is, for example, an audio file, a video file, or the like.

図３～図５に戻って、ＴＤ取得部２０は、ＴＤ記憶部２１から、接続可能な全てのＩｏＴ機器２のＴＤを読み出し、ＴＤから機器ＩＤ、機器種類及び機器機能等を抽出し、ＩｏＴ機器２毎のこれらの情報を使用可能機器情報として生成する（ステップＳ４０４）。そして、ＴＤ取得部２０は、接続可能（使用可能）な全てのＩｏＴ機器２の機器機能等を含む使用可能機器情報を機器決定部２６に出力する。 Returning to FIGS. 3 to 5, the TD acquisition unit 20 reads the TDs of all connectable IoT devices 2 from the TD storage unit 21, extracts the device ID, device type, device function, etc. from the TD, and IoT. These information for each device 2 are generated as usable device information (step S404). Then, the TD acquisition unit 20 outputs usable device information including the device functions and the like of all connectable (usable) IoT devices 2 to the device determination unit 26.

このように、ＴＤ取得部２０によるステップＳ４０２～ステップＳ４０４の処理にて、接続可能な全てのＩｏＴ機器２のＴＤが取得され、これらのＴＤのデータを含む使用可能機器情報が生成される。ＴＤ取得部２０の処理の詳細については後述する。 In this way, in the processes of steps S402 to S404 by the TD acquisition unit 20, the TDs of all connectable IoT devices 2 are acquired, and the usable device information including the data of these TDs is generated. The details of the processing of the TD acquisition unit 20 will be described later.

一方、ステップＳ４０１におけるマッチングアプリの起動に伴い、コンテンツ取得部２２は、コンテンツサーバ４からコンテンツを取得する（ステップＳ４０５）。そして、コンテンツ取得部２２は、取得したコンテンツをコンテンツ記憶部２３に格納すると共に、ＣＤ取得部２４及びコンテンツ処理部２７に出力する。 On the other hand, with the activation of the matching application in step S401, the content acquisition unit 22 acquires the content from the content server 4 (step S405). Then, the content acquisition unit 22 stores the acquired content in the content storage unit 23 and outputs the acquired content to the CD acquisition unit 24 and the content processing unit 27.

さらに、コンテンツ取得部２２は、取得した全てのコンテンツの名称を画面表示する。例えば、図５のステップＳ４０５，ステップＳ４０６の箇所に示すように、コンテンツ取得部２２により取得されたコンテンツの名称であるコンテンツＡ，Ｂ，Ｃが画面表示される。これにより、ユーザは、当該端末装置１が取得した全てのコンテンツＡ，Ｂ，Ｃを認識することができる。 Further, the content acquisition unit 22 displays the names of all the acquired contents on the screen. For example, as shown in steps S405 and S406 of FIG. 5, the contents A, B, and C, which are the names of the contents acquired by the content acquisition unit 22, are displayed on the screen. As a result, the user can recognize all the contents A, B, and C acquired by the terminal device 1.

尚、コンテンツ取得部２２は、コンテンツ記憶部２３から既に格納済みのコンテンツを読み出し、読み出したコンテンツをＣＤ取得部２４及びコンテンツ処理部２７に出力するようにしてもよい。 The content acquisition unit 22 may read the content already stored from the content storage unit 23 and output the read content to the CD acquisition unit 24 and the content processing unit 27.

ＣＤ取得部２４は、コンテンツ取得部２２からコンテンツを入力し、コンテンツのＣＤを、当該コンテンツまたはＣＤサーバ５等から取得する（ステップＳ４０６）。そして、ＣＤ取得部２４は、取得したＣＤをＣＤ記憶部２５に格納する。 The CD acquisition unit 24 inputs content from the content acquisition unit 22, and acquires a CD of the content from the content or the CD server 5 or the like (step S406). Then, the CD acquisition unit 24 stores the acquired CD in the CD storage unit 25.

ＣＤ取得部２４は、コンテンツ取得部２２から入力したコンテンツ毎に、そのＣＤを取得してＣＤ記憶部２５に格納する。これにより、ＣＤ記憶部２５には、コンテンツ取得部２２から入力した全てのコンテンツについて、それぞれのＣＤが格納される。 The CD acquisition unit 24 acquires the CD for each content input from the content acquisition unit 22 and stores it in the CD storage unit 25. As a result, the CD storage unit 25 stores each CD for all the contents input from the content acquisition unit 22.

図７は、ＣＤのデータ構造例を示す図である。このＣＤは、コンテンツがどのように構成されているかを記述した、コンテンツの種類等を示すメタデータである。ＣＤには、コンテンツＩＤ（id）、コンテンツ種類（media type）、ジャンル（genre）、再生可能な機器（device）等のデータが含まれる。 FIG. 7 is a diagram showing an example of a data structure of a CD. This CD is metadata indicating the type of content and the like, which describes how the content is organized. The CD includes data such as a content ID (id), a content type (media type), a genre (genre), and a playable device (device).

コンテンツＩＤは、コンテンツの識別子を示す。コンテンツ種類は、コンテンツの種類を示し、例えば、音声（audio）、映像（movie）、テキスト（text）、制御プログラム（control program）等である。ジャンルは、コンテンツの内容が属する分野を示し、例えば、スポーツ（sport）、ドキュメンタリー（documentary）等である。再生可能な機器は、コンテンツを再生可能なＩｏＴ機器２に関するデータを示し、図６に示したＴＤの機器種類に相当する。例えば、コンテンツが当該端末装置１のみにて再生され、他のＩｏＴ機器２にて再生されない場合、または、コンテンツが当該端末装置１及び特定のＩｏＴ機器２のみにて再生され、他のＩｏＴ機器２にて再生されない場合には、再生対象の機器を特定するためのデータが設定される。 The content ID indicates an identifier of the content. The content type indicates the type of content, and is, for example, audio (audio), video (movie), text (text), control program (control program), and the like. The genre indicates the field to which the content belongs, for example, sports, documentary, and the like. The playable device shows data related to the IoT device 2 capable of playing the content, and corresponds to the device type of the TD shown in FIG. For example, when the content is played only on the terminal device 1 and not played on the other IoT device 2, or when the content is played only on the terminal device 1 and the specific IoT device 2, the other IoT device 2 If it is not played back, data for specifying the device to be played back is set.

図３～図５に戻って、ＣＤ取得部２４は、ＣＤ記憶部２５から、コンテンツ取得部２２が取得した全てのコンテンツのＣＤを読み出し、ＣＤからコンテンツ種類、再生可能な機器等を抽出する。そして、ＣＤ取得部２４は、取得した全てのコンテンツのコンテンツ種類等を含む使用可能コンテンツ情報を生成し（ステップＳ４０７）、これを機器決定部２６に出力する。 Returning to FIGS. 3 to 5, the CD acquisition unit 24 reads the CD of all the contents acquired by the content acquisition unit 22 from the CD storage unit 25, and extracts the content type, playable device, and the like from the CD. Then, the CD acquisition unit 24 generates usable content information including the content types of all the acquired contents (step S407), and outputs this to the device determination unit 26.

このように、コンテンツ取得部２２によるステップＳ４０５の処理にて、コンテンツが取得され、ＣＤ取得部２４によるステップＳ４０６及びステップＳ４０７の処理にて、取得済みの全てのコンテンツのＣＤが取得される。そして、これらのＣＤから、取得済みの全てのコンテンツのコンテンツ種類等が抽出され、使用可能コンテンツ情報が生成される。ＣＤ取得部２４の処理の詳細については後述する。 In this way, the content is acquired by the process of step S405 by the content acquisition unit 22, and the CDs of all the acquired contents are acquired by the process of step S406 and step S407 by the CD acquisition unit 24. Then, the content types and the like of all the acquired contents are extracted from these CDs, and usable content information is generated. The details of the processing of the CD acquisition unit 24 will be described later.

機器決定部２６は、ステップＳ４０４及びステップＳ４０７から移行して、ＴＤ取得部２０から、使用可能な全てのＩｏＴ機器２の機器機能等を含む使用可能機器情報を入力すると共に、ＣＤ取得部２４から、取得した全てのコンテンツのコンテンツ種類等を含む使用可能コンテンツ情報を入力する。 The device determination unit 26 shifts from step S404 and step S407, inputs usable device information including device functions of all usable IoT devices 2 from the TD acquisition unit 20, and also from the CD acquisition unit 24. , Enter the usable content information including the content type of all the acquired contents.

機器決定部２６は、コンテンツ毎に、使用可能機器情報及び使用可能コンテンツ情報に基づいて、当該コンテンツを再生可能なＩｏＴ機器２を判定する（ステップＳ４０８）。具体的には、機器決定部２６は、使用可能機器情報に含まれるＩｏＴ機器２の機器機能等と、使用可能コンテンツ情報に含まれる当該コンテンツのコンテンツ種類等とを比較し、ＩｏＴ機器２が当該コンテンツを再生可能であるかを判断する。そして、機器決定部２６は、使用可能機器情報に含まれる全ての機器ＩＤのＩｏＴ機器２から、当該コンテンツを再生可能なＩｏＴ機器２を判定する。 The device determination unit 26 determines the IoT device 2 that can reproduce the content based on the usable device information and the usable content information for each content (step S408). Specifically, the device determination unit 26 compares the device function and the like of the IoT device 2 included in the usable device information with the content type and the like of the content included in the usable content information, and the IoT device 2 is the relevant one. Determine if the content is playable. Then, the device determination unit 26 determines the IoT device 2 capable of reproducing the content from the IoT devices 2 having all the device IDs included in the usable device information.

例えば、機器決定部２６は、使用可能機器情報に含まれるＩｏＴ機器２の機器機能が音声再生であり、使用可能コンテンツ情報に含まれる当該コンテンツのコンテンツ種類が音声である場合、当該ＩｏＴ機器２が当該コンテンツを再生可能であると判定する。また、機器決定部２６は、使用可能機器情報に含まれるＩｏＴ機器２の機器機能が映像再生であり、使用可能コンテンツ情報に含まれる当該コンテンツのコンテンツ種類が映像である場合、当該ＩｏＴ機器２が当該コンテンツを再生可能であると判定する。また、機器決定部２６は、使用可能機器情報に含まれるＩｏＴ機器２の機器機能が音声再生であり、使用可能コンテンツ情報に含まれる当該コンテンツのコンテンツ種類が制御プログラムである場合、当該ＩｏＴ機器２が当該コンテンツを再生できないと判定する。 For example, in the device determination unit 26, when the device function of the IoT device 2 included in the usable device information is voice reproduction and the content type of the content included in the usable content information is voice, the IoT device 2 is used. It is determined that the content can be played. Further, in the device determination unit 26, when the device function of the IoT device 2 included in the usable device information is video reproduction and the content type of the content included in the usable content information is video, the IoT device 2 is used. It is determined that the content can be played. Further, when the device function of the IoT device 2 included in the usable device information is voice reproduction and the content type of the content included in the usable content information is a control program, the device determination unit 26 determines the IoT device 2. Determines that the content cannot be played.

機器決定部２６は、コンテンツ毎に、当該コンテンツを再生可能なＩｏＴ機器２を判定した後、再生可能なＩｏＴ機器２が判定された（存在する）コンテンツと、再生可能なＩｏＴ機器２が判定されなかった（存在しない）コンテンツとを特定する。そして、機器決定部２６は、取得した全てのコンテンツのそれぞれについて、再生可能であるか否かを画面表示する。 The device determination unit 26 determines the IoT device 2 capable of reproducing the content for each content, and then determines the content for which the reproducible IoT device 2 is determined (existing) and the reproducible IoT device 2. Identify non-existent (non-existent) content. Then, the device determination unit 26 displays on the screen whether or not each of the acquired contents can be reproduced.

例えば、図５のステップＳ４０５，ステップＳ４０６の箇所に示すように、取得したコンテンツＡ，Ｂ，Ｃのうち再生可能なＩｏＴ機器２が存在するコンテンツＡ，Ｂについては、再生可能を意味する白丸印が表示され、再生可能なＩｏＴ機器２が存在しないコンテンツＣについては、再生不可能を意味するバツ印が表示される。これにより、ユーザは、当該端末装置１が取得した全てのコンテンツＡ，Ｂ，Ｃのうち、再生可能なコンテンツＡ，Ｂ及び再生不可能なコンテンツＣを認識することができる。 For example, as shown in steps S405 and S406 of FIG. 5, among the acquired contents A, B, and C, the contents A and B in which the reproducible IoT device 2 exists are marked with white circles meaning reproducible. Is displayed, and for the content C in which the reproducible IoT device 2 does not exist, a cross mark indicating that reproducibility is not possible is displayed. As a result, the user can recognize the reproducible contents A, B and the non-reproducible contents C among all the contents A, B, C acquired by the terminal device 1.

ユーザが、再生可能なコンテンツのうち実際に再生するコンテンツを選択すると、機器決定部２６は、ユーザにより選択されたコンテンツを画面上に明示する。例えば、図５の右上の箇所に示すように、ユーザより、再生可能なコンテンツＡ，ＢのうちコンテンツＡが選択されると、コンテンツＡが選択されたことを示す黒丸印が表示される。これにより、ユーザは、再生可能なコンテンツＡ，ＢのうちコンテンツＡを選択したことを確認することができる。 When the user selects the content to be actually played from the playable contents, the device determination unit 26 clearly indicates the content selected by the user on the screen. For example, as shown in the upper right part of FIG. 5, when the content A is selected from the playable contents A and B by the user, a black circle indicating that the content A is selected is displayed. As a result, the user can confirm that the content A has been selected from the playable contents A and B.

機器決定部２６は、ユーザにより選択されたコンテンツについて、再生可能なＩｏＴ機器２のうち、実際に再生を行うＩｏＴ機器２を決定する（ステップＳ４０９）。具体的には、機器決定部２６は、ユーザによる選択操作または所定のアルゴリズムに従い、実際に再生を行うＩｏＴ機器２を決定する。そして、機器決定部２６は、決定したＩｏＴ機器２に関する情報を再生機器情報としてコンテンツ処理部２７に出力する。 The device determination unit 26 determines the IoT device 2 that actually reproduces the content selected by the user among the playable IoT devices 2 (step S409). Specifically, the device determination unit 26 determines the IoT device 2 that is actually reproduced according to a selection operation by the user or a predetermined algorithm. Then, the device determination unit 26 outputs the determined information about the IoT device 2 to the content processing unit 27 as the reproduction device information.

例えば、図５の右上の箇所に示すように、ユーザによりコンテンツＡが選択されると、図５のステップＳ４０８の箇所に示すように、コンテンツＡについて再生可能なＩｏＴ機器２である端末装置１及びＩｏＴ機器αについて、再生可能を意味する白丸印が表示され、コンテンツＡについて再生不可能なＩｏＴ機器２であるＩｏＴ機器βについて、再生不可能を意味するバツ印が表示される。ＩｏＴ機器α，βは、当該端末装置１に接続されているＩｏＴ機器２である。これにより、ユーザは、コンテンツＡについて、再生可能な端末装置１及びＩｏＴ機器αを認識することができる。 For example, as shown in the upper right part of FIG. 5, when the content A is selected by the user, as shown in the part of step S408 of FIG. 5, the terminal device 1 and the IoT device 2 that can reproduce the content A A white circle indicating that the IoT device α can be reproduced is displayed, and a cross mark indicating that the content A cannot be reproduced is displayed for the IoT device β which is the IoT device 2 that cannot be reproduced. The IoT devices α and β are IoT devices 2 connected to the terminal device 1. As a result, the user can recognize the reproducible terminal device 1 and the IoT device α for the content A.

そして、図５のステップＳ４０９の箇所に示すように、ユーザにより、実際に再生を行う端末装置１及びＩｏＴ機器αが選択されると、端末装置１及びＩｏＴ機器αが選択されたことを示す黒丸印が表示される。これにより、ユーザは、実際に再生を行う端末装置１及びＩｏＴ機器αが選択されたことを確認することができる。 Then, as shown in step S409 of FIG. 5, when the user actually selects the terminal device 1 and the IoT device α for reproduction, the black circle indicating that the terminal device 1 and the IoT device α are selected. The mark is displayed. As a result, the user can confirm that the terminal device 1 and the IoT device α that actually perform reproduction have been selected.

コンテンツ処理部２７は、コンテンツ取得部２２から、ユーザが選択したコンテンツを入力すると共に、機器決定部２６から、当該コンテンツを実際に再生する機器に関する再生機器情報を入力する。そして、コンテンツ処理部２７は、コンテンツを実行し、制御メッセージを、再生機器情報の示すＩｏＴ機器２（ステップＳ４０９にて決定したＩｏＴ機器２）へ送信する（ステップＳ４１０）。尚、コンテンツ処理部２７は、ユーザが選択したコンテンツをコンテンツ記憶部２３から読み出すようにしてもよい。 The content processing unit 27 inputs the content selected by the user from the content acquisition unit 22, and inputs the playback device information regarding the device that actually reproduces the content from the device determination unit 26. Then, the content processing unit 27 executes the content and transmits the control message to the IoT device 2 (IoT device 2 determined in step S409) indicated by the playback device information (step S410). The content processing unit 27 may read the content selected by the user from the content storage unit 23.

ＩｏＴ機器２は、制御メッセージを受信すると、制御メッセージに従って動作し、制御メッセージの示す再生を行ったり、必要なコンテンツをコンテンツサーバ４からダウンロードして再生したりする。つまり、コンテンツ処理部２７は、ユーザが選択したコンテンツを、当該端末装置１にて実行すると共に、機器決定部２６により決定されたＩｏＴ機器２に対し、当該コンテンツに関する再生処理を行わせることができる。 Upon receiving the control message, the IoT device 2 operates according to the control message, performs reproduction indicated by the control message, and downloads and reproduces necessary contents from the content server 4. That is, the content processing unit 27 can execute the content selected by the user on the terminal device 1 and cause the IoT device 2 determined by the device determination unit 26 to perform reproduction processing related to the content. ..

例えば、図５のステップＳ４１０の箇所に示すように、端末装置１の画面にコンテンツＡの映像が再生される。図５の例の場合、コンテンツＡが端末装置１にて再生され、コンテンツＡに関する再生処理が、コンテンツＡの制御メッセージに従ってＩｏＴ機器αにて行われる。 For example, as shown in step S410 of FIG. 5, the video of the content A is reproduced on the screen of the terminal device 1. In the case of the example of FIG. 5, the content A is played back on the terminal device 1, and the playback process related to the content A is performed on the IoT device α according to the control message of the content A.

このように、機器決定部２６によるステップＳ４０８及びステップＳ４０９の処理にて、実際に再生するＩｏＴ機器２が決定され、コンテンツ処理部２７によるステップＳ４１０の処理にて、コンテンツが、実際に再生を行うＩｏＴ機器２にて再生される。機器決定部２６及びコンテンツ処理部２７の処理の詳細については後述する。 In this way, the IoT device 2 to be actually reproduced is determined by the processing of step S408 and step S409 by the device determination unit 26, and the content is actually reproduced by the processing of step S410 by the content processing unit 27. It is reproduced by the IoT device 2. The details of the processing of the device determination unit 26 and the content processing unit 27 will be described later.

（ＴＤ取得部２０）
次に、ＴＤ取得部２０によるステップＳ４０２～ステップＳ４０４の処理について詳細に説明する。図８は、ＴＤ取得部２０の構成例を示すブロック図であり、図９は、ＴＤ取得部２０の処理例を示すフローチャートである。 (TD acquisition unit 20)
Next, the processing of steps S402 to S404 by the TD acquisition unit 20 will be described in detail. FIG. 8 is a block diagram showing a configuration example of the TD acquisition unit 20, and FIG. 9 is a flowchart showing a processing example of the TD acquisition unit 20.

ＴＤ取得部２０は、機器管理部３０、機器通信部３１及びＴＤ処理部３２を備えている。機器管理部３０は、接続可能なＩｏＴ機器２の情報を管理するために、定期的に、接続可能なＩｏＴ機器２の探索依頼を機器通信部３１に出力する（ステップＳ９０１）。 The TD acquisition unit 20 includes a device management unit 30, a device communication unit 31, and a TD processing unit 32. The device management unit 30 periodically outputs a search request for the connectable IoT device 2 to the device communication unit 31 in order to manage the information of the connectable IoT device 2 (step S901).

機器通信部３１は、ＴＤ取得部２０から探索依頼を入力し、ＩｏＴ機器２に応じた所定の通信プロトコルに従い、接続可能なＩｏＴ機器２の探索を実行し、接続可能なＩｏＴ機器２から応答を受信する（ステップＳ９０２）。 The device communication unit 31 inputs a search request from the TD acquisition unit 20, executes a search for a connectable IoT device 2 according to a predetermined communication protocol corresponding to the IoT device 2, and receives a response from the connectable IoT device 2. Receive (step S902).

ここで、ＩｏＴ機器２には、ＷｏＴ機器及び非ＷｏＴ機器の２種類があるものとする。ＷｏＴ機器は、ＷｏＴの規格に準拠した機器であり、Ｗｅｂブラウザ及びＷｅｂサーバを備えている。また、ＷｏＴ機器は、当該ＷｏＴ機器を紐付けるＴＤを保持しているか、またはＴＤを一意に決定するＴＤＩＤ（ＴＤ識別子、例えばＴＤが格納されているＴＤサーバ３のＵＲＬ）を保持している。機器通信部３１は、ＷｏＴ機器との間でＷｏＴの規格に準拠した方法で通信を行い、ＷｏＴの機器発見プロトコルにより、ＷｏＴ機器との間を接続する。 Here, it is assumed that there are two types of IoT devices 2, a WoT device and a non-WoT device. The WoT device is a device conforming to the WoT standard, and includes a Web browser and a Web server. Further, the WoT device holds a TD associated with the WoT device, or holds a TDID (TD identifier, for example, the URL of the TD server 3 in which the TD is stored) that uniquely determines the TD. The device communication unit 31 communicates with the WoT device by a method compliant with the WoT standard, and connects to the WoT device by the WoT device discovery protocol.

一方、非ＷｏＴ機器は、ＴＤ及びＴＤＩＤを保持していない。機器通信部３１は、例えば、非ＷｏＴ機器のＩＰアドレスを予め保持しており、非ＷｏＴ機器のＩＰアドレスを直接指定することで、非ＷｏＴ機器との間を接続する。 On the other hand, non-WoT devices do not hold TDs and TDIDs. The device communication unit 31 holds, for example, the IP address of the non-WoT device in advance, and by directly designating the IP address of the non-WoT device, the device communication unit 31 connects to the non-WoT device.

機器通信部３１は、接続可能なＩｏＴ機器２から応答を受信した場合、当該応答を機器管理部３０及びＴＤ処理部３２に出力する。機器管理部３０は、機器通信部３１から応答を入力し、応答を返してきたＩｏＴ機器２を接続可能な機器として管理する。 When the device communication unit 31 receives a response from the connectable IoT device 2, the device communication unit 31 outputs the response to the device management unit 30 and the TD processing unit 32. The device management unit 30 inputs a response from the device communication unit 31, and manages the IoT device 2 that has returned the response as a connectable device.

ＴＤ処理部３２は、機器通信部３１から応答を入力し、応答にＴＤが含まれているか、応答にＴＤのＵＲＬ（ＴＤＩＤ）が含まれているか、または、応答にＴＤ及びＵＲＬの両方が含まれていないかを判定する（ステップＳ９０３）。 The TD processing unit 32 inputs a response from the device communication unit 31, and the response includes the TD, the response includes the URL (TDID) of the TD, or the response contains both the TD and the URL. It is determined whether or not the URL has been removed (step S903).

ＴＤ処理部３２は、応答にＴＤが含まれていると判定した場合（ステップＳ９０３：ＴＤ）、応答からＴＤを抽出し（ステップＳ９０４）、当該ＴＤを、当該応答を返してきたＩｏＴ機器２のＴＤであると判断する。 When the TD processing unit 32 determines that the response includes TD (step S903: TD), the TD processing unit 32 extracts the TD from the response (step S904), and uses the TD of the IoT device 2 that has returned the response. Judge that it is TD.

一方、ＴＤ処理部３２は、応答にＴＤが含まれておらず、ＴＤのＵＲＬが含まれていると判定した場合（ステップＳ９０３：ＵＲＬ）、当該ＵＲＬのＴＤサーバ３からＴＤを受信する（ステップＳ９０５）。そして、ＴＤ処理部３２は、当該ＴＤを、当該応答を返してきたＩｏＴ機器２のＴＤであると判断する。 On the other hand, when the TD processing unit 32 determines that the response does not include the TD and includes the URL of the TD (step S903: URL), the TD processing unit 32 receives the TD from the TD server 3 of the URL (step S903: URL). S905). Then, the TD processing unit 32 determines that the TD is the TD of the IoT device 2 that has returned the response.

さらに、ＴＤ処理部３２は、応答にＴＤ及びＵＲＬの両方が含まれていないと判定した場合（ステップＳ９０３：無し）、ステップＳ９０６へ移行する。 Further, when the TD processing unit 32 determines that the response does not include both the TD and the URL (step S903: none), the process proceeds to step S906.

ＴＤ処理部３２は、ステップＳ９０３（なし）、ステップＳ９０４またはステップＳ９０５から移行して、ＩｏＴ機器２のＴＤをＴＤ記憶部２１に格納する（ステップＳ９０６）。 The TD processing unit 32 shifts from step S903 (none), step S904 or step S905, and stores the TD of the IoT device 2 in the TD storage unit 21 (step S906).

ＴＤ処理部３２は、接続可能な全てのＩｏＴ機器２について、ステップＳ９０３～ステップＳ９０６の処理を行う。これにより、ステップＳ９０３（無し）の場合を除き、接続可能な全てのＩｏＴ機器２のＴＤが取得され、ＴＤ記憶部２１に格納される。 The TD processing unit 32 performs the processing of steps S903 to S906 for all connectable IoT devices 2. As a result, except for the case of step S903 (none), the TDs of all connectable IoT devices 2 are acquired and stored in the TD storage unit 21.

尚、ＩｏＴ機器２が非ＷｏＴ機器の場合、非ＷｏＴ機器は、ＴＤ及びＴＤＩＤを保持していないから、非ＷｏＴ機器は接続可能なＩｏＴ機器２となり得るが、そのＴＤは取得されない。 When the IoT device 2 is a non-WoT device, the non-WoT device does not hold the TD and the TDID, so that the non-WoT device can be a connectable IoT device 2, but the TD is not acquired.

ＴＤ処理部３２は、ＴＤ記憶部２１から、接続可能な全てのＩｏＴ機器２のＴＤを読み出す。そして、ＴＤ処理部３２は、ＴＤに基づいて、使用可能機器情報を生成し機器決定部２６に出力する（ステップＳ９０７）。具体的には、ＴＤ処理部３２は、ＴＤから機器ＩＤ、機器種類及び機器機能等を抽出し、接続可能なＩｏＴ機器２毎に、これらの情報を使用可能機器情報として生成する。 The TD processing unit 32 reads out the TDs of all connectable IoT devices 2 from the TD storage unit 21. Then, the TD processing unit 32 generates usable device information based on the TD and outputs it to the device determination unit 26 (step S907). Specifically, the TD processing unit 32 extracts the device ID, the device type, the device function, and the like from the TD, and generates these information as usable device information for each connectable IoT device 2.

このように、ＴＤ取得部２０により、端末装置１との間で接続可能なＩｏＴ機器２のＴＤが取得され、ＴＤの各種データを含む使用可能機器情報が生成される。尚、端末装置１はＩｏＴ機器２の一種であるため、ＴＤ処理部３２は、端末装置１のＴＤもＴＤ記憶部２１に格納し、端末装置１のＴＤのデータを含む使用可能機器情報を生成するものとする。 In this way, the TD acquisition unit 20 acquires the TD of the IoT device 2 that can be connected to the terminal device 1, and generates usable device information including various TD data. Since the terminal device 1 is a kind of IoT device 2, the TD processing unit 32 also stores the TD of the terminal device 1 in the TD storage unit 21 and generates usable device information including the TD data of the terminal device 1. It shall be.

（ＣＤ取得部２４）
次に、コンテンツ取得部２２によるステップＳ４０５の処理、及びＣＤ取得部２４によるステップＳ４０６及びステップＳ４０７の処理について詳細に説明する。図１０は、ＣＤ取得部２４の構成例を示すブロック図であり、図１１は、コンテンツ取得部２２及びＣＤ取得部２４の処理例を示すフローチャートである。 (CD acquisition unit 24)
Next, the processing of step S405 by the content acquisition unit 22 and the processing of steps S406 and S407 by the CD acquisition unit 24 will be described in detail. FIG. 10 is a block diagram showing a configuration example of the CD acquisition unit 24, and FIG. 11 is a flowchart showing a processing example of the content acquisition unit 22 and the CD acquisition unit 24.

ＣＤ取得部２４は、コンテンツ解釈部４０及びダミーＣＤ生成部４３を備えている。コンテンツ解釈部４０は、ＣＤ解釈部（ＣＤ処理部）４１及びＷｅｂブラウザ４２を備えている。Ｗｅｂブラウザ４２は、既に動作しているものとする。 The CD acquisition unit 24 includes a content interpretation unit 40 and a dummy CD generation unit 43. The content interpretation unit 40 includes a CD interpretation unit (CD processing unit) 41 and a Web browser 42. It is assumed that the Web browser 42 is already in operation.

マッチングアプリの起動に伴い、コンテンツ取得先のＵＲＬがコンテンツ解釈部４０に通知される。例えばＩｏＴ機器２－２のテレビから、当該テレビが再生しているコンテンツに関するＵＲＬがコンテンツ解釈部４０へ通知される。また、端末装置１がコンテンツサーバ４からコンテンツ一覧情報を取得する動作のときに、コンテンツ取得先のＵＲＬが通知される。 With the activation of the matching application, the URL of the content acquisition destination is notified to the content interpretation unit 40. For example, the TV of the IoT device 2-2 notifies the content interpretation unit 40 of the URL related to the content being played by the TV. Further, when the terminal device 1 operates to acquire the content list information from the content server 4, the URL of the content acquisition destination is notified.

コンテンツ解釈部４０は、コンテンツ取得先のＵＲＬを取得すると（ステップＳ１１０１）、ＵＲＬをコンテンツ取得部２２に出力する。 When the content interpretation unit 40 acquires the URL of the content acquisition destination (step S1101), the content interpretation unit 40 outputs the URL to the content acquisition unit 22.

コンテンツ取得部２２は、コンテンツ解釈部４０からコンテンツ取得先のＵＲＬを入力し、当該ＵＲＬのコンテンツサーバ４からコンテンツを受信し（ステップＳ１１０２）、コンテンツ記憶部２３に格納する。そして、コンテンツ取得部２２は、受信したコンテンツをコンテンツ解釈部４０に出力する。または、コンテンツ取得部２２は、コンテンツ記憶部２３からコンテンツを読み出し、読み出したコンテンツをコンテンツ解釈部４０に出力する。 The content acquisition unit 22 inputs the URL of the content acquisition destination from the content interpretation unit 40, receives the content from the content server 4 of the URL (step S1102), and stores the content in the content storage unit 23. Then, the content acquisition unit 22 outputs the received content to the content interpretation unit 40. Alternatively, the content acquisition unit 22 reads the content from the content storage unit 23 and outputs the read content to the content interpretation unit 40.

ここで、コンテンツは、ＣＤ及びコンテンツ本文により構成され、またはＣＤを一意に決定するＣＤＩＤ（ＣＤ識別子、例えばＣＤが格納されているＣＤサーバ５のＵＲＬ）及びコンテンツ本文により構成される。ＣＤ及びＣＤＩＤを有さないコンテンツも存在する。つまり、コンテンツは、当該コンテンツを紐付けるＣＤを保持しているか、またはＣＤを一意に決定するＣＤＩＤを保持しているか、またはＣＤ及びＣＤＩＤのいずれも保持していない。 Here, the content is composed of a CD and the content text, or is composed of a CDID (CD identifier, for example, the URL of the CD server 5 in which the CD is stored) and the content text that uniquely determine the CD. Some content does not have a CD or CDID. That is, the content holds a CD associated with the content, a CDID that uniquely determines the CD, or neither a CD nor a CDID.

コンテンツが、例えばＷｅｂブラウザ４２にて実行可能なＨＴＭＬコンテンツの場合、ＣＤを有しており、ＣＤには当該コンテンツが対象とする（そのコンテンツに従って動作する）ＷｏＴ機器または非ＷｏＴ機器の種類に対応したコンテンツ種類が記述されている。この場合のコンテンツ本文は、ＨＴＭＬコンテンツ（いわゆるＷｅｂアプリ）である。 If the content is, for example, HTML content that can be executed by the Web browser 42, the CD has a CD, and the CD corresponds to the type of WoT device or non-WoT device that the content targets (operates according to the content). The type of content that has been created is described. The content text in this case is HTML content (so-called Web application).

コンテンツ解釈部４０のＣＤ解釈部４１は、コンテンツのＣＤを取得する処理を行う。具体的には、ＣＤ解釈部４１は、コンテンツ取得部２２からコンテンツを入力し、コンテンツにＣＤが含まれているか、コンテンツにＣＤのＵＲＬ（ＣＤＩＤ）が含まれているか、または、コンテンツにＣＤ及びＵＲＬの両方が含まれていないかを判定する（ステップＳ１１０３）。 The CD interpretation unit 41 of the content interpretation unit 40 performs a process of acquiring a CD of the content. Specifically, the CD interpretation unit 41 inputs the content from the content acquisition unit 22, and whether the content includes a CD, the content includes a CD URL (CDID), or the content includes a CD and a CD. It is determined whether both of the URLs are included (step S1103).

ＣＤ解釈部４１は、コンテンツにＣＤが含まれていると判定した場合（ステップＳ１１０３：ＣＤ）、コンテンツからＣＤを抽出する（ステップＳ１１０４）。 When the CD interpreting unit 41 determines that the content includes a CD (step S1103: CD), the CD interpreting unit 41 extracts the CD from the content (step S1104).

一方、ＣＤ解釈部４１は、コンテンツにＣＤが含まれておらず、ＣＤのＵＲＬが含まれていると判定した場合（ステップＳ１１０３：ＵＲＬ）、当該ＵＲＬのＣＤサーバ５からＣＤを受信する（ステップＳ１１０５）。 On the other hand, when the CD interpreting unit 41 determines that the content does not include the CD and contains the URL of the CD (step S1103: URL), the CD interpreting unit 41 receives the CD from the CD server 5 of the URL (step S1103: URL). S1105).

さらに、ＣＤ解釈部４１は、コンテンツにＣＤ及びＵＲＬの両方が含まれていないと判定した場合（ステップＳ１１０３：無し）、ダミーＣＤ生成部４３からダミーＣＤを取得する（ステップＳ１１０６）。 Further, when the CD interpreting unit 41 determines that the content does not include both the CD and the URL (step S1103: none), the CD interpreting unit 41 acquires a dummy CD from the dummy CD generation unit 43 (step S1106).

ダミーＣＤ生成部４３は、当該端末装置１のみがコンテンツを再生することを示すデータを含むＣＤをダミーＣＤとして生成し、ＣＤ解釈部４１からの要求に応じて、ダミーＣＤをＣＤ解釈部４１に出力する。例えば、図７に示したＣＤにおいて、再生可能な機器として、当該端末装置１のデータが設定される。この場合のダミーＣＤは、再生可能な機器のみにデータが設定され、その他の項目にはヌルが設定される。そして、ＣＤ解釈部４１は、ダミーＣＤ生成部４３から取得したダミーＣＤを、コンテンツのＣＤとして扱う。 The dummy CD generation unit 43 generates a CD containing data indicating that only the terminal device 1 reproduces the content as a dummy CD, and in response to a request from the CD interpretation unit 41, the dummy CD is sent to the CD interpretation unit 41. Output. For example, in the CD shown in FIG. 7, the data of the terminal device 1 is set as a playable device. For the dummy CD in this case, data is set only for the playable device, and null is set for the other items. Then, the CD interpretation unit 41 treats the dummy CD acquired from the dummy CD generation unit 43 as a content CD.

尚、ダミーＣＤ生成部４３は、当該端末装置１に加え、特定のＩｏＴ機器２のみがコンテンツを再生することを示すデータを含むＣＤをダミーＣＤとして生成するようにしてもよい。この場合のダミーＣＤには、再生可能な機器として、当該端末装置１及び特定のＩｏＴ機器２のデータが設定される。 In addition to the terminal device 1, the dummy CD generation unit 43 may generate a CD including data indicating that only the specific IoT device 2 reproduces the content as a dummy CD. In the dummy CD in this case, the data of the terminal device 1 and the specific IoT device 2 are set as playable devices.

これにより、ＣＤ及びＵＲＬの両方が含まれていないコンテンツは、ダミーＣＤに設定された再生可能な機器のみにて、再生処理が行われる。 As a result, the content that does not include both the CD and the URL is reproduced only by the playable device set in the dummy CD.

ＣＤ解釈部４１は、ステップＳ１１０４、ステップＳ１１０５またはステップＳ１１０６から移行して、コンテンツのＣＤをＣＤ記憶部２５に格納する（ステップＳ１１０７）。 The CD interpreting unit 41 shifts from step S1104, step S1105 or step S1106, and stores the CD of the content in the CD storage unit 25 (step S1107).

ＣＤ解釈部４１は、コンテンツサーバ４から取得した全てのコンテンツについて、ステップＳ１１０３～ステップＳ１１０７の処理を行う。これにより、取得した全てのコンテンツのＣＤが取得され、ＣＤ記憶部２５に格納される。 The CD interpretation unit 41 performs the processes of steps S1103 to S1107 for all the contents acquired from the content server 4. As a result, CDs of all the acquired contents are acquired and stored in the CD storage unit 25.

ＣＤ解釈部４１は、ＣＤ記憶部２５から、取得した全てのコンテンツのＣＤを読み出す。そして、ＣＤ解釈部４１は、ＣＤからコンテンツ種類、再生可能な機器等を抽出し、取得した全てのコンテンツのコンテンツ種類等を含む使用可能コンテンツ情報を生成し、これを機器決定部２６に出力する（ステップＳ１１０８）。 The CD interpretation unit 41 reads the CDs of all the acquired contents from the CD storage unit 25. Then, the CD interpretation unit 41 extracts the content type, playable device, etc. from the CD, generates usable content information including the content type, etc. of all the acquired contents, and outputs this to the device determination unit 26. (Step S1108).

このように、ＣＤ取得部２４により、取得した全てのコンテンツのＣＤが取得され、取得した全てのコンテンツのコンテンツ種類等を含む使用可能コンテンツ情報が生成及び出力される。 In this way, the CD acquisition unit 24 acquires CDs of all the acquired contents, and generates and outputs usable content information including the content types of all the acquired contents.

（機器決定部２６及びコンテンツ処理部２７）
次に、機器決定部２６によるステップＳ４０８及びステップＳ４０９の処理、及びコンテンツ処理部２７によるステップＳ４１０の処理について詳細に説明する。図１２は、機器決定部２６及びコンテンツ処理部２７の構成例を示すブロック図であり、図１３は、機器決定部２６及びコンテンツ処理部２７の処理例を示すフローチャートである。 (Device determination unit 26 and content processing unit 27)
Next, the processing of steps S408 and S409 by the device determination unit 26 and the processing of step S410 by the content processing unit 27 will be described in detail. FIG. 12 is a block diagram showing a configuration example of the device determination unit 26 and the content processing unit 27, and FIG. 13 is a flowchart showing a processing example of the device determination unit 26 and the content processing unit 27.

機器決定部２６は、再生可能機器判定部５０、再生機器決定部５１、ユーザ選択部５２及び機器選択部５３を備えている。コンテンツ処理部２７は、コンテンツ解釈部４０及びＷｅｂサーバ部６０を備え、コンテンツ解釈部４０は、ＣＤ解釈部４１及びＷｅｂブラウザ４２を備えている。コンテンツ解釈部４０は、図１０に示したＣＤ取得部２４に備えたコンテンツ解釈部４０と同じである。図１０に示したＣＤ取得部２４では、コンテンツ解釈部４０のＣＤ解釈部４１のみが機能し、Ｗｅｂブラウザ４２が機能しないが、このコンテンツ処理部２７では、ＣＤ解釈部４１が機能せず、Ｗｅｂブラウザ４２のみが機能する。 The device determination unit 26 includes a reproducible device determination unit 50, a reproduction device determination unit 51, a user selection unit 52, and a device selection unit 53. The content processing unit 27 includes a content interpretation unit 40 and a Web server unit 60, and the content interpretation unit 40 includes a CD interpretation unit 41 and a Web browser 42. The content interpretation unit 40 is the same as the content interpretation unit 40 provided in the CD acquisition unit 24 shown in FIG. In the CD acquisition unit 24 shown in FIG. 10, only the CD interpretation unit 41 of the content interpretation unit 40 functions and the Web browser 42 does not function, but in the content processing unit 27, the CD interpretation unit 41 does not function and the Web. Only the browser 42 works.

機器決定部２６の再生可能機器判定部５０は、ＴＤ取得部２０から使用可能機器情報を入力すると共に、ＣＤ取得部２４から使用可能コンテンツ情報を入力する（ステップＳ１３０１）。そして、再生可能機器判定部５０は、使用可能機器情報及び使用可能コンテンツ情報に基づいて、取得した全てのコンテンツのそれぞれについて、再生可能機器を判定する（ステップＳ１３０２）。 The reproducible device determination unit 50 of the device determination unit 26 inputs the usable device information from the TD acquisition unit 20, and also inputs the usable content information from the CD acquisition unit 24 (step S1301). Then, the reproducible device determination unit 50 determines the reproducible device for each of the acquired contents based on the usable device information and the usable content information (step S1302).

具体的には、再生可能機器判定部５０は、コンテンツ毎に、使用可能機器情報に含まれるＩｏＴ機器２の機器機能（音声再生、映像再生等）と、当該コンテンツの使用可能コンテンツ情報に含まれるコンテンツ種類（音声、映像等）とを比較し、ＩｏＴ機器２が当該コンテンツを再生可能であるかを判断する。そして、再生可能機器判定部５０は、使用可能機器情報に含まれる全ての機器ＩＤのＩｏＴ機器２から、当該コンテンツについての再生可能機器を判定し、再生可能機器情報を生成する。 Specifically, the playable device determination unit 50 is included in the device functions (audio playback, video playback, etc.) of the IoT device 2 included in the usable device information and the usable content information of the content for each content. By comparing with the content type (audio, video, etc.), it is determined whether the IoT device 2 can reproduce the content. Then, the reproducible device determination unit 50 determines the reproducible device for the content from the IoT devices 2 of all the device IDs included in the usable device information, and generates the reproducible device information.

例えば、使用可能機器情報が、ＩｏＴ機器２－１の機器機能「音声再生」、ＩｏＴ機器２－２の機器機能「映像再生」、ＩｏＴ機器２－３の機器機能「テキスト再生」、ＩｏＴ機器２－４の機器機能「映像再生」のデータを含み、使用可能コンテンツ情報が、コンテンツＡのコンテンツ種類「映像」のデータを含むとする。そうすると、再生可能機器判定部５０は、コンテンツＡについて、使用可能機器情報に含まれるこれらの機器機能と、使用可能コンテンツ情報に含まれるコンテンツＡのコンテンツ種類とを比較する。再生可能機器判定部５０は、ＩｏＴ機器２－２，２－４の機器機能「映像再生」とコンテンツＡのコンテンツ種類「映像」とが対応するとして、ＩｏＴ機器２－２，２－４がコンテンツＡを再生可能であると判断し、再生可能機器情報を生成する。 For example, the usable device information includes the device function "voice playback" of the IoT device 2-1 and the device function "video playback" of the IoT device 2-2, the device function "text playback" of the IoT device 2-3, and the IoT device 2. It is assumed that the data of the device function "video reproduction" of -4 is included and the usable content information includes the data of the content type "video" of the content A. Then, the reproducible device determination unit 50 compares these device functions included in the usable device information with the content type of the content A included in the usable content information for the content A. The playable device determination unit 50 assumes that the device function "video reproduction" of the IoT device 2-2, 2-4 corresponds to the content type "video" of the content A, and the content of the IoT device 2-2, 2-4. It is determined that A is reproducible, and reproducible device information is generated.

また、再生可能機器判定部５０は、使用可能コンテンツ情報に、当該端末装置１のみがコンテンツを再生することを示すデータが含まれる場合（例えば、再生可能な機器として当該端末装置１が設定されている場合）、端末装置１が当該コンテンツを再生可能であると判断し、再生可能機器情報を生成する。 Further, when the reproducible device determination unit 50 includes data indicating that only the terminal device 1 reproduces the content in the usable content information (for example, the terminal device 1 is set as a reproducible device). If), the terminal device 1 determines that the content can be reproduced, and generates reproducible device information.

ユーザが、実際に再生する所望のコンテンツを選択すると、再生可能機器判定部５０は、当該コンテンツの再生可能機器情報を再生機器決定部５１に出力する。再生可能機器情報には、当該コンテンツを再生可能な全てのＩｏＴ機器２等に関する情報が含まれる。 When the user selects the desired content to be actually reproduced, the reproducible device determination unit 50 outputs the reproducible device information of the content to the reproduction device determination unit 51. The playable device information includes information on all IoT devices 2 and the like that can play the content.

再生機器決定部５１は、再生可能機器判定部５０から再生可能機器情報を入力し、実際に使用する再生機器を決定する手段がユーザの操作選択によるのか、またはアルゴリズムに基づいた自動選択によるのかを判定する（ステップＳ１３０３）。 The playback device determination unit 51 inputs playable device information from the playable device determination unit 50, and determines whether the means for determining the playback device to be actually used is by the user's operation selection or by automatic selection based on the algorithm. Determination (step S1303).

再生機器決定部５１は、ステップＳ１３０３において、決定手段がユーザの操作選択によると判定した場合（ステップＳ１３０３：ユーザ）、再生可能機器情報を含む選択指示をユーザ選択部５２に出力する。そして、再生機器決定部５１は、ユーザ選択部５２からユーザによる選択結果を入力し、選択結果の機器を再生機器として決定する（ステップＳ１３０４）。この場合、ユーザ選択部５２は、再生機器決定部５１から選択指示を入力すると、再生可能機器情報の示す機器を含む機器選択画面の提示及び音声によるアナウンス等により、ユーザの選択を促し、ユーザが選択した機器を含む選択結果を再生機器決定部５１に出力する。 When the determination means determines in step S1303 that the determination means is based on the user's operation selection (step S1303: user), the reproduction device determination unit 51 outputs a selection instruction including the reproducible device information to the user selection unit 52. Then, the playback device determination unit 51 inputs the selection result by the user from the user selection unit 52, and determines the device of the selection result as the playback device (step S1304). In this case, when the user selection unit 52 inputs a selection instruction from the playback device determination unit 51, the user selects the user by presenting a device selection screen including the device indicated by the playable device information and making an announcement by voice. The selection result including the selected device is output to the playback device determination unit 51.

一方、再生機器決定部５１は、ステップＳ１３０３において、決定手段がアルゴリズムに基づいた自動選択によると判定した場合（ステップＳ１３０３：アルゴリズム）、再生可能機器情報を含む選択指示を機器選択部５３に出力する。そして、再生機器決定部５１は、機器選択部５３からアルゴリズムによる選択結果を入力し、選択結果の機器を再生機器として決定する（ステップＳ１３０５）。この場合、機器選択部５３は、再生機器決定部５１から選択指示を入力すると、予め設定されたアルゴリズムにより、再生可能機器情報の示す機器の中から所望の機器を自動的に選択し、アルゴリズムが選択した機器を含む選択結果を再生機器決定部５１に出力する。 On the other hand, when the determination means determines in step S1303 that the determination means is based on automatic selection based on the algorithm (step S1303: algorithm), the reproduction device determination unit 51 outputs a selection instruction including the reproducible device information to the device selection unit 53. .. Then, the playback device determination unit 51 inputs the selection result by the algorithm from the device selection unit 53, and determines the device of the selection result as the playback device (step S1305). In this case, when the device selection unit 53 inputs a selection instruction from the playback device determination unit 51, the device selection unit 53 automatically selects a desired device from the devices indicated by the playable device information by a preset algorithm, and the algorithm is used. The selection result including the selected device is output to the playback device determination unit 51.

再生機器決定部５１は、決定した機器に関する情報を再生機器情報として生成し、再生機器情報をコンテンツ処理部２７のコンテンツ解釈部４０に出力する。 The playback device determination unit 51 generates information about the determined device as playback device information, and outputs the playback device information to the content interpretation unit 40 of the content processing unit 27.

コンテンツ解釈部４０のＷｅｂブラウザ４２は、再生機器決定部５１から再生機器情報を入力する。Ｗｅｂブラウザ４２は、既にコンテンツ取得部２２から入力済みの、ユーザにより選択されたコンテンツ（または、コンテンツ記憶部２３から読み出した、ユーザにより選択されたコンテンツ）について、コンテンツ本文の解釈を行い実行する。そして、Ｗｅｂブラウザ４２は、コンテンツ本文の解釈及び実行に伴い、コンテンツ本文中にＩｏＴ機器２に対する制御が記述されている場合、当該制御に関する制御メッセージを、再生機器情報に含まれる再生機器へ送信する（ステップＳ１３０６）。 The Web browser 42 of the content interpretation unit 40 inputs the reproduction device information from the reproduction device determination unit 51. The Web browser 42 interprets and executes the content text of the content selected by the user (or the content read from the content storage unit 23 and selected by the user) that has already been input from the content acquisition unit 22. Then, when the control for the IoT device 2 is described in the content text as the content text is interpreted and executed, the Web browser 42 transmits a control message related to the control to the playback device included in the playback device information. (Step S1306).

再生機器情報に含まれる再生機器が当該端末装置１である場合、Ｗｅｂブラウザ４２は、制御メッセージをＷｏＴ処理部であるＷｅｂサーバ部６０に出力する。Ｗｅｂサーバ部６０は、Ｗｅｂブラウザ４２から制御メッセージを入力し、制御メッセージに従った処理を行う。これにより、当該端末装置１にてコンテンツが再生される。 When the playback device included in the playback device information is the terminal device 1, the Web browser 42 outputs a control message to the Web server unit 60, which is a WoT processing unit. The Web server unit 60 inputs a control message from the Web browser 42 and performs processing according to the control message. As a result, the content is reproduced on the terminal device 1.

また、再生機器が当該端末装置１以外のＷｏＴ機器（ＷｏＴのＩｏＴ機器２）である場合、Ｗｅｂブラウザ４２は、制御メッセージをそのＩｏＴ機器２のＷｅｂサーバへ送信する。ＩｏＴ機器２は、Ｗｅｂブラウザ４２から制御メッセージを受信し、制御メッセージに従って動作し、制御メッセージの示す再生を行ったり、必要なコンテンツをコンテンツサーバ４からダウンロードして再生したりする。これにより、ＷｏＴのＩｏＴ機器２にて、コンテンツに関する再生処理が行われる。 When the playback device is a WoT device (WoT IoT device 2) other than the terminal device 1, the Web browser 42 transmits a control message to the Web server of the IoT device 2. The IoT device 2 receives a control message from the Web browser 42, operates according to the control message, performs reproduction indicated by the control message, and downloads and reproduces necessary contents from the content server 4. As a result, the IoT device 2 of WoT performs the reproduction processing related to the content.

また、再生機器が非ＷｏＴ機器（非ＷｏＴのＩｏＴ機器２）である場合、Ｗｅｂブラウザ４２は、制御メッセージを、ＩＰアドレス等のコンテンツ本文中に記述された情報に従ってＩｏＴ機器２へ送信する。ここで、制御メッセージは、再生機器が非ＷｏＴ機器である場合、コンテンツ本文に送信先を特定する手段が記述されていることを前提として送信される。ＩｏＴ機器２は、Ｗｅｂブラウザ４２から制御メッセージを受信し、制御メッセージに従って動作し、制御メッセージの示す再生を行ったり、必要なコンテンツをコンテンツサーバ４からダウンロードして再生したりする。これにより、非ＷｏＴのＩｏＴ機器２にて、コンテンツに関する再生処理が行われる。 When the playback device is a non-WoT device (non-WoT IoT device 2), the Web browser 42 transmits the control message to the IoT device 2 according to the information described in the content text such as the IP address. Here, when the playback device is a non-WoT device, the control message is transmitted on the premise that the means for specifying the destination is described in the content text. The IoT device 2 receives a control message from the Web browser 42, operates according to the control message, performs reproduction indicated by the control message, and downloads and reproduces necessary contents from the content server 4. As a result, the non-WoT IoT device 2 performs the reproduction processing related to the content.

尚、Ｗｅｂブラウザ４２が、ＩｏＴ機器２との間の通信に失敗する等して、制御メッセージをＩｏＴ機器２へ送信できないと判定した場合、コンテンツ解釈部４０は、機器決定部２６の再生可能機器判定部５０に、再生可能機器の再度の判定を依頼するか、または、これを無視してコンテンツ本体の実行を継続する。 If the Web browser 42 determines that the control message cannot be transmitted to the IoT device 2 due to a failure in communication with the IoT device 2, the content interpretation unit 40 may use the reproducible device of the device determination unit 26. The determination unit 50 is requested to determine the reproducible device again, or ignores this and continues the execution of the content main body.

このように、機器決定部２６により、取得した全てのコンテンツのそれぞれについて、実際に再生が行われる再生機器が決定され、コンテンツ処理部２７により、当該再生機器にてコンテンツの再生が行われる。 In this way, the device determination unit 26 determines the playback device that is actually reproduced for each of the acquired contents, and the content processing unit 27 reproduces the content on the reproduction device.

例えば、ＩｏＴ機器２－２のテレビが所定の映像コンテンツを再生している場合、機器決定部２６により、その映像コンテンツに関連するコンテンツ（関連コンテンツ）について、実際に再生が行われるＩｏＴ機器２－１，２－３であるスマートスピーカ及びスマートミラーの再生機器が決定される。そして、コンテンツ処理部２７により、コンテンツ本体の記述に従い制御メッセージが、ＩｏＴ機器２－１，２－３へ送信される。 For example, when the television of the IoT device 2-2 is playing a predetermined video content, the device determination unit 26 actually plays back the content (related content) related to the video content of the IoT device 2-. Playback devices for smart speakers and smart mirrors, which are 1, 2 and 3, are determined. Then, the content processing unit 27 transmits a control message to the IoT devices 2-1 and 2-3 according to the description of the content body.

つまり、コンテンツ処理部２７は、ＩｏＴ機器２－２のテレビが所定の映像コンテンツを再生している状態で、関連コンテンツに従った再生処理として、ＩｏＴ機器２－１のスマートスピーカにて音声コンテンツを再生させ、ＩｏＴ機器２－３のスマートミラーにてテキストコンテンツを再生させる。これにより、ＩｏＴ機器２－１のスマートスピーカにて映像に対応した音声が出力され、ＩｏＴ機器２－３のスマートミラーにて映像に対応したテキストが表示される。 That is, the content processing unit 27 uses the smart speaker of the IoT device 2-1 to play the audio content as the playback process according to the related content while the television of the IoT device 2-2 is playing the predetermined video content. Play it back and play the text content on the smart mirror of the IoT device 2-3. As a result, the voice corresponding to the image is output by the smart speaker of the IoT device 2-1 and the text corresponding to the image is displayed by the smart mirror of the IoT device 2-3.

以上のように、本発明の実施形態の端末装置１によれば、ＴＤ取得部２０は、接続可能なＩｏＴ機器２を探索し、接続可能な全てのＩｏＴ機器２のＴＤを取得する。そして、ＴＤ取得部２０は、ＴＤから機器機能等を抽出し、接続可能な全てのＩｏＴ機器２の機器機能等を含む使用可能機器情報を生成する。 As described above, according to the terminal device 1 of the embodiment of the present invention, the TD acquisition unit 20 searches for the connectable IoT device 2 and acquires the TDs of all the connectable IoT devices 2. Then, the TD acquisition unit 20 extracts the device functions and the like from the TD, and generates usable device information including the device functions and the like of all connectable IoT devices 2.

ＣＤ取得部２４は、コンテンツ取得部２２が取得した全てのコンテンツについて、それぞれのＣＤを取得し、ＣＤからコンテンツ種類等を抽出し、取得した全てのコンテンツのコンテンツ種類等を含む使用可能コンテンツ情報を生成する。 The CD acquisition unit 24 acquires each CD for all the contents acquired by the content acquisition unit 22, extracts the content types and the like from the CDs, and obtains usable content information including the content types and the like of all the acquired contents. Generate.

機器決定部２６は、使用可能機器情報と使用可能コンテンツ情報とを比較する。そして、機器決定部２６は、取得した全てのコンテンツのそれぞれについて、当該コンテンツを再生可能なＩｏＴ機器２を判定する。 The device determination unit 26 compares the usable device information and the usable content information. Then, the device determination unit 26 determines the IoT device 2 that can reproduce the content for each of the acquired contents.

ユーザが、実際に再生する所望のコンテンツを選択すると、機器決定部２６は、当該コンテンツを再生可能なＩｏＴ機器２のうち、実際に再生を行う所望のＩｏＴ機器２を、ユーザによる選択操作または所定のアルゴリズムに従い決定する。 When the user selects the desired content to be actually played back, the device determination unit 26 selects or determines the desired IoT device 2 to be actually played back among the IoT devices 2 capable of playing the content. Determined according to the algorithm of.

コンテンツ処理部２７は、ユーザにより選択されたコンテンツを実行し、コンテンツ本体の記述に従い、制御メッセージを、機器決定部２６により決定されたＩｏＴ機器２へ送信する。 The content processing unit 27 executes the content selected by the user, and sends a control message to the IoT device 2 determined by the device determination unit 26 according to the description of the content body.

これにより、ＩｏＴ機器２は、制御メッセージに従って動作し、必要なコンテンツをコンテンツサーバ４からダウンロードする等して再生を行う。つまり、コンテンツ処理部２７は、ユーザにより選択されたコンテンツを当該端末装置１にて再生すると共に、機器決定部２６により決定されたＩｏＴ機器２に対し、ユーザにより選択されたコンテンツに関する再生処理を行わせることができる。 As a result, the IoT device 2 operates according to the control message, downloads necessary contents from the content server 4, and performs playback. That is, the content processing unit 27 reproduces the content selected by the user on the terminal device 1, and also performs reproduction processing on the content selected by the user for the IoT device 2 determined by the device determination unit 26. Can be made.

したがって、端末装置１により、１つのコンテンツに対し１以上のＩｏＴ機器２を、簡易な仕組みにて関連付けることができる。その結果、簡易な仕組みにて、ユーザが所望する様々なコンテンツを、ユーザが所望する様々なＩｏＴ機器２にて再生させることが可能となる。 Therefore, the terminal device 1 can associate one or more IoT devices 2 with one content by a simple mechanism. As a result, various contents desired by the user can be reproduced by various IoT devices 2 desired by the user by a simple mechanism.

また、ＣＤ及びＴＤを用いて、コンテンツにＩｏＴ機器２を関連付けるソフトウェアをアプリとして提供することにより、様々なコンテンツを、その種類に依存することなく、統一されたアプリの記述にて扱うことが可能となる。 In addition, by providing software that associates the IoT device 2 with the content as an application using a CD and TD, it is possible to handle various contents with a unified description of the application without depending on the type. Will be.

〔マッチングアプリの記述例〕
次に、図３に示した制御部１０の構成の下で図４に示した処理例を実現するマッチングアプリの記述例について説明する。図１４は、マッチングアプリの記述例を説明する図であり、図４に示した処理例のうち主要な処理のみを示している。 [Description example of matching application]
Next, a description example of a matching application that realizes the processing example shown in FIG. 4 under the configuration of the control unit 10 shown in FIG. 3 will be described. FIG. 14 is a diagram for explaining a description example of the matching application, and shows only the main processing among the processing examples shown in FIG.

コンテンツＡのＣＤは、コンテンツ種類「音声」のデータを含み、コンテンツＢのＣＤは、コンテンツ種類「映像」のデータを含み、ＩｏＴ機器２－１のＴＤは、機器種類「音声再生」を含んでいるものとする。つまり、コンテンツＡは音声コンテンツであり、コンテンツＢは映像コンテンツであり、ＩｏＴ機器２－１はスマートスピーカであるものとする。 The CD of the content A includes the data of the content type "audio", the CD of the content B includes the data of the content type "video", and the TD of the IoT device 2-1 includes the device type "audio reproduction". It is assumed that there is. That is, it is assumed that the content A is audio content, the content B is video content, and the IoT device 2-1 is a smart speaker.

マッチングアプリの（ａ）の記述により、ＴＤ取得部２０は、接続可能なＩｏＴ機器２を探索することで、接続可能な機器がＩｏＴ機器２－１のスマートスピーカのみであると判断し、ＩｏＴ機器２－１のＴＤを取得する。 According to the description of (a) of the matching application, the TD acquisition unit 20 searches for the connectable IoT device 2, determines that the connectable device is only the smart speaker of the IoT device 2-1 and determines that the IoT device is the only smart speaker. Get 2-1 TD.

マッチングアプリの（ｂ）の記述により、ＣＤ取得部２４は、コンテンツＡ，ＢのＣＤを取得する。また、機器決定部２６は、ＩｏＴ機器２－１のＴＤに含まれる機器種類「音声再生」に基づいて、当該ＩｏＴ機器２－１が「音声」の種類のコンテンツを再生する機能を有することを判断する。さらに、機器決定部２６は、コンテンツＡ，ＢのＣＤに含まれるコンテンツ種類「音声」「映像」に基づいて、当該コンテンツＡ，Ｂがそれぞれ音声コンテンツ及び映像コンテンツであることを判断する。 According to the description of (b) of the matching application, the CD acquisition unit 24 acquires the CDs of the contents A and B. Further, the device determination unit 26 has a function of reproducing the content of the "voice" type of the IoT device 2-1 based on the device type "voice reproduction" included in the TD of the IoT device 2-1. to decide. Further, the device determination unit 26 determines that the contents A and B are audio contents and video contents, respectively, based on the content types "audio" and "video" included in the CDs of the contents A and B.

そして、機器決定部２６は、コンテンツＡを再生可能な機器がＩｏＴ機器２－１であると判定し、コンテンツＢを再生可能な機器が存在しないと判定する。 Then, the device determination unit 26 determines that the device capable of reproducing the content A is the IoT device 2-1 and determines that there is no device capable of reproducing the content B.

マッチングアプリの（ｃ）の記述により、コンテンツ処理部２７は、例えばユーザにより選択されたコンテンツＡに関する再生処理を、ＩｏＴ機器２－１にて行わせる。 According to the description of (c) of the matching application, the content processing unit 27 causes the IoT device 2-1 to perform the reproduction processing for the content A selected by the user, for example.

このように、マッチングアプリを用いることで、所望のコンテンツを、接続可能なＩｏＴ機器２にて再生させることができる。つまり、本発明によれば、映像、音声、テキスト、制御プログラム、クーポン等の様々なコンテンツを、その種類に依存することなく、統一されたマッチングアプリの記述で扱うことができ、様々なＩｏＴ機器にて簡易な仕組みで再生させることが可能となる。 In this way, by using the matching application, the desired content can be played back on the connectable IoT device 2. That is, according to the present invention, various contents such as video, audio, text, control program, coupon, etc. can be handled by a unified matching application description without depending on the type, and various IoT devices can be used. It is possible to play with a simple mechanism.

尚、本発明の実施形態による端末装置１のハードウェア構成としては、通常のコンピュータを使用することができる。端末装置１は、ＣＰＵ、ＲＡＭ等の揮発性の記憶媒体、ＲＯＭ等の不揮発性の記憶媒体、及びインタフェース等を備えたコンピュータによって構成される。 As the hardware configuration of the terminal device 1 according to the embodiment of the present invention, a normal computer can be used. The terminal device 1 is composed of a computer including a volatile storage medium such as a CPU and RAM, a non-volatile storage medium such as ROM, and an interface.

端末装置１に備えたＴＤ取得部２０、ＴＤ記憶部２１、コンテンツ取得部２２、コンテンツ記憶部２３、ＣＤ取得部２４、ＣＤ記憶部２５、機器決定部２６及びコンテンツ処理部２７の各機能は、これらの機能を記述したプログラムをＣＰＵに実行させることによりそれぞれ実現される。 The functions of the TD acquisition unit 20, the TD storage unit 21, the content acquisition unit 22, the content storage unit 23, the CD acquisition unit 24, the CD storage unit 25, the device determination unit 26, and the content processing unit 27 provided in the terminal device 1 are Each of these is realized by having the CPU execute a program that describes these functions.

これらのプログラムは、前記記憶媒体に格納されており、ＣＰＵに読み出されて実行される。また、これらのプログラムは、磁気ディスク（フロッピー（登録商標）ディスク、ハードディスク等）、光ディスク（ＣＤ－ＲＯＭ、ＤＶＤ等）、半導体メモリ等の記憶媒体に格納して頒布することもでき、ネットワークを介して送受信することもできる。 These programs are stored in the storage medium, read by the CPU, and executed. In addition, these programs can be stored and distributed in storage media such as magnetic disks (floppy (registered trademark) disks, hard disks, etc.), optical disks (CD-ROM, DVD, etc.), semiconductor memories, etc., and can be distributed via a network. You can also send and receive.

１ 端末装置
２ ＩｏＴ機器
３ ＴＤサーバ
４ コンテンツサーバ
５ ＣＤサーバ
６ 放送／通信網
１０ 制御部
１１ ＣＰＵ
１２ 記憶部
１３ 記憶装置
１４ 操作／入力部
１５ 表示出力インタフェース部
１６ 通信部
１７ システムバス
２０ ＴＤ取得部
２１ ＴＤ記憶部
２２ コンテンツ取得部
２３ コンテンツ記憶部
２４ ＣＤ取得部
２５ ＣＤ記憶部
２６ 機器決定部
２７ コンテンツ処理部
３０ 機器管理部
３１ 機器通信部
３２ ＴＤ処理部
４０ コンテンツ解釈部
４１ ＣＤ解釈部
４２ Ｗｅｂブラウザ
４３ ダミーＣＤ生成部
５０ 再生可能機器判定部
５１ 再生機器決定部
５２ ユーザ選択部
５３ 機器選択部
６０ Ｗｅｂサーバ部 1 Terminal device 2 IoT device 3 TD server 4 Content server 5 CD server 6 Broadcasting / communication network 10 Control unit 11 CPU
12 Storage unit 13 Storage device 14 Operation / input unit 15 Display / output interface unit 16 Communication unit 17 System bus 20 TD acquisition unit 21 TD storage unit 22 Content acquisition unit 23 Content storage unit 24 CD acquisition unit 25 CD storage unit 26 Device determination unit 27 Content processing unit 30 Equipment management unit 31 Equipment communication unit 32 TD processing unit 40 Content interpretation unit 41 CD interpretation unit 42 Web browser 43 Dummy CD generation unit 50 Reproducible device judgment unit 51 Playback device determination unit 52 User selection unit 53 Device selection Part 60 Web server part

Claims (5)

コンテンツサーバからコンテンツを取得し、ＩｏＴ（Internet of Things）機器に、当該コンテンツに関する再生処理を行わせる端末装置において、
当該端末装置との間で通信にて接続される前記ＩｏＴ機器を探索し、接続可能な全ての前記ＩｏＴ機器のそれぞれについて、所定のサーバまたは前記探索に伴う応答から、当該ＩｏＴ機器の種類を示す機器種類、当該ＩｏＴ機器がどのような種類の前記コンテンツを再生できるかを示す機器機能、及び当該ＩｏＴ機器が再生する前記コンテンツのファイルの種類を示す属性のデータを含むＴＤ（Thing Description）を取得するＴＤ取得部と、
所定のサーバまたは前記コンテンツから、当該コンテンツの種類を示すコンテンツ種類、当該コンテンツの内容が属する分野を示すジャンル、及び当該コンテンツを再生可能な前記ＩｏＴ機器の種類を示す再生可能な機器のデータを含むＣＤ（Content Description）を取得するＣＤ取得部と、
前記ＴＤ取得部により取得された前記機器種類、前記機器機能及び前記属性のデータを含む前記ＴＤ、及び、前記ＣＤ取得部により取得された前記コンテンツ種類、前記ジャンル及び前記再生可能な機器のデータを含む前記ＣＤに基づいて、接続可能な全ての前記ＩｏＴ機器のうち、前記コンテンツを実際に再生する前記ＩｏＴ機器を決定する機器決定部と、
前記機器決定部により決定された前記ＩｏＴ機器に、前記コンテンツに関する再生処理を行わせるコンテンツ処理部と、
を備えたことを特徴とする端末装置。 In a terminal device that acquires content from a content server and causes an IoT (Internet of Things) device to perform playback processing related to the content.
The IoT device connected by communication with the terminal device is searched, and for each of all the connectable IoT devices, the type of the IoT device is shown from the predetermined server or the response accompanying the search. Acquires a TD (Thing Description) including device type, device function indicating what kind of content the IoT device can play, and attribute data indicating the file type of the content played by the IoT device. TD acquisition department and
From a predetermined server or the content, the content type indicating the type of the content, the genre indicating the field to which the content belongs, and the data of the reproducible device indicating the type of the IoT device capable of reproducing the content are included. A CD acquisition unit that acquires a CD (Content Description),
The device type acquired by the TD acquisition unit, the TD including the device function and the attribute data , and the content type , the genre, and the reproducible device data acquired by the CD acquisition unit. A device determination unit that determines the IoT device that actually reproduces the content among all the connectable IoT devices based on the CD including the CD.
A content processing unit that causes the IoT device determined by the device determination unit to perform playback processing related to the content.
A terminal device characterized by being equipped with. 請求項１に記載の端末装置において、
前記コンテンツサーバから複数のコンテンツを取得するコンテンツ取得部を備え、
前記ＴＤ取得部は、
接続可能な全ての前記ＩｏＴ機器について、当該ＩｏＴ機器の前記機器種類、前記機器機能及び前記属性を含む使用可能機器情報を生成し、
前記ＣＤ取得部は、
前記コンテンツ取得部により取得された全ての前記コンテンツについて、当該コンテンツの前記コンテンツ種類、前記ジャンル及び前記再生可能な機器を含む使用可能コンテンツ情報を生成し、
前記機器決定部は、
前記ＴＤ取得部により生成された前記使用可能機器情報に含まれる前記機器種類、前記機器機能及び前記属性と、前記ＣＤ取得部により取得された前記使用可能コンテンツ情報に含まれる前記コンテンツ種類、前記ジャンル及び前記再生可能な機器とに基づいて、前記コンテンツ取得部により取得された全ての前記コンテンツのそれぞれについて、接続可能な全ての前記ＩｏＴ機器のうち、当該コンテンツを再生可能な前記ＩｏＴ機器を再生可能ＩｏＴ機器として判定し、
前記コンテンツ取得部により取得された全ての前記コンテンツのうち、ユーザにより選択された前記コンテンツについて、前記再生可能ＩｏＴ機器のうち、実際に再生するＩｏＴ機器を決定する、ことを特徴とする端末装置。 In the terminal device according to claim 1,
It is equipped with a content acquisition unit that acquires a plurality of contents from the content server.
The TD acquisition unit
For all the connectable IoT devices, the usable device information including the device type, the device function, and the attribute of the IoT device is generated.
The CD acquisition unit
For all the contents acquired by the content acquisition unit, usable content information including the content type , the genre, and the playable device of the content is generated.
The device determination unit
The device type, the device function and the attribute included in the usable device information generated by the TD acquisition unit, and the content type and the genre included in the usable content information acquired by the CD acquisition unit. And, for each of all the contents acquired by the content acquisition unit based on the playable device, the IoT device capable of reproducing the contents can be reproduced among all the connectable IoT devices. Judged as an IoT device,
A terminal device for determining an IoT device that is actually reproduced among the playable IoT devices for the content selected by the user among all the contents acquired by the content acquisition unit. 請求項２に記載の端末装置において、
当該端末装置のみが前記コンテンツを再生することを示す特定機器データを含むＣＤを、ダミーＣＤとして生成するダミーＣＤ生成部を備え、
前記ＣＤ取得部は、
前記コンテンツ取得部により取得されたコンテンツについて、前記所定のサーバ及び前記コンテンツの両方から前記ＣＤを取得できない場合、前記ダミーＣＤ生成部から前記ダミーＣＤを入力し、前記コンテンツの前記特定機器データを含む前記使用可能コンテンツ情報を生成し、
前記機器決定部は、
前記コンテンツ取得部により取得された全ての前記コンテンツのうち、ユーザにより選択された前記コンテンツについて、前記使用可能コンテンツ情報に前記特定機器データが含まれる場合、当該端末装置を、前記コンテンツを実際に再生する機器として決定する、ことを特徴とする端末装置。 In the terminal device according to claim 2,
It is provided with a dummy CD generation unit that generates a CD containing specific device data indicating that only the terminal device reproduces the content as a dummy CD.
The CD acquisition unit
When the CD cannot be acquired from both the predetermined server and the content for the content acquired by the content acquisition unit, the dummy CD is input from the dummy CD generation unit and includes the specific device data of the content. Generate the available content information and
The device determination unit
When the specific device data is included in the usable content information for the content selected by the user among all the contents acquired by the content acquisition unit, the terminal device actually reproduces the content. A terminal device characterized in that it is determined as a device to be used. 請求項２に記載の端末装置において、
接続可能な全ての前記ＩｏＴ機器には、所定の映像コンテンツを再生しているテレビが含まれており、
前記コンテンツ取得部は、
前記テレビにより再生されている前記所定の映像コンテンツに関連する関連コンテンツを、前記コンテンツサーバから取得し、
前記ＣＤ取得部は、
前記コンテンツ取得部により取得された前記関連コンテンツについて、当該関連コンテンツの前記コンテンツ種類、前記ジャンル及び前記再生可能な機器を含む前記使用可能コンテンツ情報を生成し、
前記機器決定部は、
前記ユーザにより前記関連コンテンツが選択された場合、当該関連コンテンツについて、前記再生可能ＩｏＴ機器のうち、当該関連コンテンツを実際に再生するＩｏＴ機器を決定し、
前記コンテンツ処理部は、
前記テレビが前記所定の映像コンテンツを再生している状態で、前記機器決定部により決定された前記ＩｏＴ機器にて、前記関連コンテンツに関する再生処理を行わせる、ことを特徴とする端末装置。 In the terminal device according to claim 2,
All connectable IoT devices include a television playing a given video content.
The content acquisition unit
The related content related to the predetermined video content being played on the television is acquired from the content server, and the content is obtained from the content server.
The CD acquisition unit
For the related content acquired by the content acquisition unit, the usable content information including the content type , the genre, and the playable device of the related content is generated.
The device determination unit
When the related content is selected by the user, the IoT device that actually plays the related content is determined among the playable IoT devices for the related content.
The content processing unit
A terminal device characterized in that, in a state where the television is playing the predetermined video content, the IoT device determined by the device determination unit performs a reproduction process related to the related content. コンピュータを、請求項１から４までのいずれか一項に記載の端末装置として機能させるためのプログラム。 A program for operating a computer as the terminal device according to any one of claims 1 to 4.
JP2018043639A 2018-03-09 2018-03-09 Terminal devices and programs Active JP7100468B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018043639A JP7100468B2 (en) 2018-03-09 2018-03-09 Terminal devices and programs

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018043639A JP7100468B2 (en) 2018-03-09 2018-03-09 Terminal devices and programs

Publications (2)

Publication Number Publication Date
JP2019161374A JP2019161374A (en) 2019-09-19
JP7100468B2 true JP7100468B2 (en) 2022-07-13

Family

ID=67995038

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018043639A Active JP7100468B2 (en) 2018-03-09 2018-03-09 Terminal devices and programs

Country Status (1)

Country Link
JP (1) JP7100468B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7426851B2 (en) * 2020-02-25 2024-02-02 日本放送協会 Terminal device and program

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007306088A (en) 2006-05-09 2007-11-22 Sharp Corp Controller and control method
JP2009049498A (en) 2007-08-14 2009-03-05 Sony Corp Control terminal, information apparatus, content providing device, apparatus control system, apparatus selecting method, and program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007306088A (en) 2006-05-09 2007-11-22 Sharp Corp Controller and control method
JP2009049498A (en) 2007-08-14 2009-03-05 Sony Corp Control terminal, information apparatus, content providing device, apparatus control system, apparatus selecting method, and program

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
小川 展夢, 外3名，放送コンテンツを基点としたＩｏＴ機器連係動作のためのアーキテクチャの検討，第７９回（平成２９年）全国大会講演論文集（３），日本，一般社団法人情報処理学会，2017年03月，3-15 - 3-16

Also Published As

Publication number Publication date
JP2019161374A (en) 2019-09-19

Similar Documents

Publication Publication Date Title
US11445261B2 (en) Multiple household management
JP6084261B2 (en) Web-based music partner system and method
CN105022786B (en) Information processing unit, method and system and information receiver and method
KR20100081868A (en) Method and apparatus for playing contents by integrated channel management
US9055193B2 (en) System and method of a remote conference
JP2014150519A (en) Preview and reproduction method of video stream and system of the same
KR101702563B1 (en) Method and apparatus for accessing device based on intuitive selection
JP5314840B2 (en) Content playback apparatus and content playback method
JP5359199B2 (en) Comment distribution system, terminal, comment output method and program
CN102707914B (en) Messaging device and method
JP5644472B2 (en) Transfer device, client device, server device, playback device, and transfer method
JP7100468B2 (en) Terminal devices and programs
WO2010140202A1 (en) Copy supporting device, terminal device, copy supporting method, and copy supporting program
JP2015049770A (en) Terminal recommendation device, terminal recommendation method, and terminal recommendation program
JP2013068754A (en) Audio output device and its program
JP2011232961A (en) Content specification apparatus and program of the same
WO2015129738A1 (en) Server device, program, memory medium, and system
TW201427410A (en) Media information provision system and method thereof
TW201427406A (en) Media information service system and method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210201

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211115

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20211207

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220608

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220701

R150 Certificate of patent or registration of utility model

Ref document number: 7100468

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150