端末装置、表示装置、端末装置連動システム、端末装置連動方法、及びプログラム
【課題】コンテンツを表示する表示装置と携帯電話などの端末装置とを連動するシステムを提供する。
【解決手段】端末装置（携帯電話２００）は、音声と映像とを含むコンテンツを表示する表示装置と通信可能であり、表示装置と情報を送受信する送受信部２０８と、コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部２０７と、入力部２０７が受け付けた設定情報を記憶する記憶領域２０６と、設定情報を表示装置へ送信した後、設定情報に指定された要素を、コンテンツの表示に連動させて出力するための制御データを表示装置から受信するように制御する制御部２０５と、コンテンツの表示に連動させて、制御データを用いて、要素を出力する出力制御部２１１と、を備える。表示装置は、設定情報に基づいて、制御データを生成し、端末装置へ送信する。
【解決手段】端末装置（携帯電話２００）は、音声と映像とを含むコンテンツを表示する表示装置と通信可能であり、表示装置と情報を送受信する送受信部２０８と、コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部２０７と、入力部２０７が受け付けた設定情報を記憶する記憶領域２０６と、設定情報を表示装置へ送信した後、設定情報に指定された要素を、コンテンツの表示に連動させて出力するための制御データを表示装置から受信するように制御する制御部２０５と、コンテンツの表示に連動させて、制御データを用いて、要素を出力する出力制御部２１１と、を備える。表示装置は、設定情報に基づいて、制御データを生成し、端末装置へ送信する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置が表示するコンテンツ情報を、端末装置が連動して表示する技術に関する。
【背景技術】
【０００２】
テレビなどの表示装置で、映画などを複数人と見ている時に、ある人は字幕を見ながら英語の音声で、他のある人は日本語などの他の言語に吹き替えで見たいという場合がある。このように、同じ映画を同時に見る場合に、異なるタイプの音声等で映画を視聴したいというように、個々人の要望が異なることがある。
【０００３】
しかし、従来の表示装置ではこれらの要望を同時に満たすことができなかった。例えば、一般的なテレビでは、映像を表示する画面がひとつであり、複数のタイプの音声のうち、選択したひとつを出力するものであった。そのため、字幕が挿入された映像や他のタイプの音声を視聴したい場合には、外部に表示装置や音声出力装置を用意する必要がある。
これに関して、例えば、特許文献１には、ユーザから離れた位置に配置された大画面で映像を見ることを可能にしながら、文字などについてはユーザの近傍でみることを可能にすることができる親子連携型表示システムが提案されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１−２４３５１２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に開示された親子連携型表示システムでは、専用のデバイスを用意する必要があった。
本発明は、コンテンツを表示する表示装置と、携帯電話などの端末装置とを連動させてコンテンツを視聴するシステムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明に係る端末装置の一態様は、音声と映像とを含むコンテンツを表示する表示装置と通信可能な端末装置であって、前記表示装置と情報を送受信する送受信部と、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、前記入力部が受け付けた設定情報を記憶する記憶領域と、前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える。
【０００７】
本発明に係る表示装置の一態様は、音声と映像とを含むコンテンツを表示する表示装置であって、任意の端末装置と情報を送受信する送受信部と、前記端末装置から受信した、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を記憶する記憶領域と、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える。
【０００８】
本発明に係る端末装置連動システムの一態様は、音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動システムであって、前記端末装置は、前記表示装置と情報を送受信する送受信部と、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、前記入力部が受け付けた設定情報を記憶する記憶領域と、前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える。前記表示装置は、前記端末装置と情報を送受信する送受信部と、前記端末装置から受信した、前記設定情報を記憶する記憶領域と、前記設定情報を用いて、前記制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える。
【０００９】
本発明に係る端末装置連動方法の一態様は、端末装置が、音声と映像とを含むコンテンツを表示する表示装置を連動させる端末装置連動方法がであって、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、前記受け付けた設定情報を記憶領域に記憶し、前記設定情報を前記表示装置へ送信し、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する。
【００１０】
本発明に係る端末装置連動方法の一態様は、音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置と連動する端末装置連動方法であって、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置〜受信し、受信した設定情報を記憶領域に記憶し、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、生成した制御データを前記端末装置へ送信する。
【００１１】
本発明に係る端末装置連動方法の一態様は、音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動方法であって、前記端末装置は、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、受け付けた設定情報を記憶領域に記憶し、前記設定情報を前記表示装置へ送信し、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する。前記表示装置は、前記設定情報を、前記端末装置から受信し、前記設定情報を記憶領域に記憶し、前記設定情報を用いて、前記制御データを生成し、生成した制御データを前記端末装置へ送信する。
【００１２】
本発明に係るプログラムの一態様は、端末装置を、音声と映像とを含むコンテンツを表示する表示装置と連動して動作させるプログラムであって、コンピュータに、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける処理と、前記受け付けた設定情報を記憶領域に記憶する処理と、前記設定情報を前記表示装置へ送信する処理と、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信する処理と、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する処理と、を実行させる。
【００１３】
本発明に係る端末装置連動方法の一態様は、音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置を連動して動作させるプログラムであって、コンピュータに、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置から受信する処理と、前記設定情報を記憶領域に記憶する処理と、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成する処理と、生成した制御データを、前記端末装置へ送信する処理と、を実行させる。
【発明の効果】
【００１４】
本発明によれば、コンテンツを表示する表示装置と、携帯電話などの端末装置とを連動させてコンテンツを視聴するシステムを提供することが可能となる。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施形態１に係る表示装置の構成例の要部を示すブロック図である。
【図２】本発明の実施形態１に係る端末装置の構成例の要部を示すブロック図である。
【図３】実施形態１の表示装置（テレビ）の動作例を表すフローチャートである。
【図４】実施形態１の端末装置（携帯電話）の動作例を表すフローチャートである。
【図５】表示装置が動作するときの情報の流れを説明する図である。
【図６】端末装置がユーザから設定情報を受け付けるときの動作を説明する図である。
【図７】ユーザが設定情報を入力するときの表示画面の一例を示す図である。
【図８】設定情報の一例を示す図である。
【図９】端末装置が制御データを用いて各要素を出力するときの動作を説明する図である。
【図１０】制御データに含まれる連動振動データの具体例を示す図である。
【図１１】制御データに含まれる連動点灯データの具体例を示す図である。
【図１２】端末装置で字幕や異なるタイプの音声を出力する具体例を示す図である。
【図１３】表示装置と端末装置とで異なるタイプの音声を出力する具体例を示す図である。
【図１４】表示装置で音声を、端末装置で字幕を出力する具体例を示す図である。
【図１５】端末装置を振動させる具体例を示す図である。
【図１６】端末装置を点灯させる具体例を示す図である。
【発明を実施するための形態】
【００１６】
以下、本発明の実施形態について、図面を参照しながら説明する。説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。各図面において同一の構成または機能を有する構成要素および相当部分には、同一の符号を付し、その説明は省略する。
【００１７】
本発明では、コンテンツ情報を視聴することができる表示装置と、端末装置とを連動するシステム（端末装置連動システム）を提供する。本発明の端末装置連動システムは、音声と映像とを含むコンテンツを表示する表示装置（例えば、テレビ）と、携帯端末などの通信機能を備える端末装置とから構成されるシステムに適用することができる。ます、各装置の機能の概略を説明する。
【００１８】
端末装置は、次の機能を備える。
表示装置と情報を送受信する機能。
設定情報を受け付ける入力機能。
入力機能によって受け付けた設定情報を記憶する機能。
設定情報を前記表示装置へ送信する機能。
送信した設定情報に応じて、表示装置から制御データを受信する機能。
制御データに従って、設定した要素を出力する機能。
【００１９】
また、表示装置は、次の機能を備える。
端末装置と情報を送受信する機能。
設定情報を端末装置から受信し、記憶領域に記憶する機能。
設定情報を用いて制御データを生成し、端末装置へ送信する機能。
【００２０】
ここで、「設定情報」とは、コンテンツの表示に連動させて出力する要素を指定する情報である。
端末装置が出力する「要素」としては、例えば、どのタイプ（日本語、英語など）の音声を出力するかあるいは音声を出力しないか、どのタイプの字幕を表示するかあるいは字幕を表示しないか、自装置の振動の有無、自装置の点灯の有無などがある。各要素の設定に関する情報を、例えば、音声情報、字幕情報、振動情報、点灯情報とする。設定情報はこれらの情報のうち少なくとも一つを含む。また、要素はこれらに限られることなく、端末装置がコンテンツの表示に連動して出力できるものであれば他のものであってもよい。
「制御データ」（「連動制御データ」ともいう）とは、設定情報に指定された要素を、コンテンツの表示に連動させて出力するためのデータである。制御データのうち、各要素個別の制御データを指すときに、連動音声データ、連動字幕データ、連動振動データ、連動点灯データということもある。制御データは、これらのデータの少なくとも一つを含む。
【００２１】
以下の実施形態では、表示装置としてテレビを用い、端末装置として携帯電話を用いる場合を一例として説明する。携帯電話において、テレビの音声を再生する、あるいは、字幕で表示するなどを行う、テレビと携帯電話の連動システムを提供する。
【００２２】
実施形態１
図１は、本発明の実施形態１に係る表示装置の構成例の要部を示すブロック図である。ここでは、表示装置（映像音声出力装置）としてのテレビ１００の部品構成の要部を表したものである。ここでは、表示制御部１０１、音声出力部１０２、番組再生部１０３、制御部（連動制御部）１０４、記憶領域１０５、及び送受信部１０６を示す。
【００２３】
表示制御部１０１は映像情報を画面に表示する制御を行う。
音声出力部１０２は音声情報を出力する制御を行う。
番組再生部１０３は放送された番組などを含むコンテンツの再生を制御する部分であり、表示制御部１０１、音声出力部１０２、制御部１０４に対して再生するコンテンツ情報を提供する。
制御部１０４は各種の処理や制御を行う。
記憶領域１０５は情報を記憶する領域であり、例えば、携帯電話から受信した設定情報（後述する）を記憶する。記憶領域１０５は、例えば、読み書き可能なＲＡＭ（random access memory）で構成される。
【００２４】
送受信部１０６は携帯電話とデータを送受信する。通信方法はＢｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）など携帯電話に備えられている無線通信方式であり、テレビで対応可能であれば他の通信方法であっても構わない。送受信部１０６は、送信部１０７と受信部１０８とを有する。
本実施形態に用いるテレビは上述した構成を有するが、一般的なテレビに携帯電話連動システムユニット１１０を追加することによって実現してもかまわない。携帯電話連動システムユニット１１０は、番組再生部１０３の一部の機能、制御部１０４、記憶領域１０５、及び送受信部１０６が備える機能により実現する機能である。
【００２５】
図２は本発明の実施形態１に係る端末装置の構成例の要部を示すブロック図である。図２では、端末装置として、本発明に係わる機能を実現する携帯電話２００の部品構成の要部を表したものであり、携帯電話が備える通信機能などの構成については省略している。ここでは、表示制御部２０１、音声出力部２０２、振動制御部２０３、点灯制御部２０４、制御部（連動制御部）２０５、記憶領域２０６、入力部２０７、及び送受信部２０８を示す。
【００２６】
表示制御部２０１は、映像情報を画面に表示する制御を行う。
音声出力部２０２は音声を出力する制御を行う。
振動制御部２０３は携帯電話のバイブレーションなどの振動制御を行う。
点灯制御部２０４は携帯電話に搭載されているＬＥＤ（light-emitting diode）や有機ＥＬ（electroluminescence）などのイルミネーションの点灯制御を行う。
制御部２０５は各種の処理や制御を行う。
記憶領域２０６は情報を記憶する領域であり、例えば、入力部２０７から入力された設定情報やテレビから受信した制御データを記憶する。記憶領域２０６は、例えば、ＲＡＭで構成されている。
【００２７】
入力部２０７は、キーやタッチパネルなどを介してユーザからの入力を受け付ける入力回路である。
送受信部２０８はテレビ１００とデータを送受信する部分である。通信方法はＢｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）など携帯電話が備える無線通信方式であって、テレビで対応可能な無線通信方式であれば他の通信方法であっても構わない。送受信部２０８は、送信部２０９と受信部２１０とを有する。
なお、携帯電話２００において、コンテンツの表示に連動させて制御データを出力する、表示制御部２０１、音声出力部２０２、振動制御部２０３、及び点灯制御部２０４を出力制御部２２１１ということもある。
【００２８】
続いて、図面を参照して端末装置連動システムの動作を説明する。
図３は、実施形態１のテレビの動作例を表すフローチャートである。図４は、実施形態１の携帯電話の動作例を表すフローチャートである。
まず、テレビ１００の動作について説明する。図５は、テレビが動作するときの情報の流れを説明する図である。テレビ１００と携帯電話２とを連動させる場合（ステップＳ１１：Ｙ）には、制御部１０４は、送受信部１０６を用いて、テレビ１００と連動する携帯電話２００を探す（ステップＳ１２）。どのようにして連動する携帯電話２００を探すかについては、a例えば、相互の送受信部によって、予め決めた初期情報を交換することによって、連動可能であることを確認すればよい。携帯電話２００が見つかった場合（ステップＳ１３：Ｙ）は、受信部１０８にて携帯電話２００から設定情報４０２を受信する（ステップＳ１４）。受信した設定情報４０２は記憶領域１０５に保存される（ステップＳ１５）。制御部１０４は、この設定情報とコンテンツ情報とを用いて制御データ３０２を生成（ステップＳ１６）する。制御データ３０２については、後述する。制御部１０４は、生成した制御データを、送信部１０７を介して携帯電話２００に送信する（ステップＳ１７）。その後テレビ１００ではコンテンツ情報３０１からコンテンツを再生する（ステップＳ１８）。
【００２９】
次に携帯電話２００の動作について説明する。図６は、携帯電話がユーザ操作により設定情報を受け付けるときの情報の流れを説明する図である。携帯電話２００をテレビ１００と連動させる場合（ステップＳ２１：Ｙ）には、入力部２０７が、携帯電話２００とテレビ１００をどのように連動させるかの情報（設定情報）をユーザ操作４０１によって受け付け（ステップＳ２２）、入力された設定情報を記憶領域２０６に保存する（ステップＳ２３）。その時の携帯電話２００の表示画面は例えば図７のような画面でキー入力やタッチパネルの入力によって設定を行う。
その後、制御部２０５は、送受信部２０８を用いて、携帯電話２００と連動するテレビ１００を探す（ステップＳ２４）。テレビ１００が見つかった場合（ステップＳ２５：Ｙ）、制御部２０５は、記憶領域２０６に保存された設定情報４０２を、送信部２０９を介してテレビ１００に送信する。
【００３０】
テレビ１００に設定情報４０２を送信すると、テレビ１００から制御データ３０２が生成され送られてくるため、携帯電話２００の受信部２１０で受信を行う（ステップＳ２７）。
受信した制御データ３０２は記憶領域２０６に保存され、制御部２０５は、保存された制御データ３０２を用いて、テレビ１００が表示するコンテンツにあわせて表示制御部２０１、音声出力部２０２、振動制御部２０３、点灯制御部２０４の制御を行う（ステップＳ２８）。
【００３１】
携帯電話２００から送信される設定情報４０２はテレビ１００の記憶領域１０５に保存される。図８は、記憶領域１０５に記憶される設定情報４０２ａの一例を示す。設定情報４０２ａでは、連動する携帯電話２００ごとに、携帯電話２００を識別するＩＤと対応づけて、字幕、音声、振動、及び点灯に関する情報が記憶されている。図８では、音声情報として、出力する音声タイプ（日本語、英語など）か、あるいは、音声を出力しないか（ＯＦＦ）を指定する。字幕情報として、表示する字幕のタイプか、あるいは、字幕を表示しないかを指定する。振動情報として、自装置の振動の有無（ＯＮ／ＯＦＦ）を指定する。点灯情報として、自装置の画面の点灯の有無（ＯＮ／ＯＦＦ）を指定する。
【００３２】
図９に、携帯電話２００が制御データ３０２に従って音声、字幕、振動、点灯の各要素を出力する場合の情報の流れを示す。テレビ１００から受信した制御データ３０２は、記憶領域２０６に記憶される。制御部２０５は、記憶した制御データ３０２を解析し、対応する出力制御部へ制御データ３０２を渡す。表示制御部２０１は、連動字幕データを出力する。音声出力部２０２は、連動音声データを出力する。振動制御部２０３は、連動振動データに従って、自装置を振動させる。点灯制御部２０４は、連動振動データに従ってＬＥＤを点灯させる。
【００３３】
テレビ１００で生成される制御データ３０２は、字幕や音声のデータ、また振動を生じさせるタイミングや点灯するタイミングを示すデータが含まれている。制御データ３０２に含まれる、連動字幕データは、携帯電話２００がコンテンツの表示に連動させて表示する字幕データであり、連動音声データは、携帯電話２００がコンテンツの表示に連動させて出力する音声データである。また、振動や点灯の制御データは例えば図１０や図１１のような形で保存されている。図１０は、制御データ３０２に含まれる連動振動データ３０２ａの一例を示し、図１１は、連動点灯データ３０２ｂの一例を示す。制御データ３０２は、テレビ１００が表示するコンテンツと同期して出力することによって、各要素がコンテンツの表示内容と対応して出力される。例えば、コンテンツの表示を開始するタイミングがテレビから携帯電話に通知されることによって、コンテンツの表示と制御データの要素の出力との同期をとることができる。
他の方法等ございましたら、追加をお願いいたします。
【００３４】
これらのデータは、コンテンツ情報から自動的に生成する方法もあるし、人が手作業で付与することも可能である。コンテンツ情報から生成する場合には、例えば雷のシーンでは輝度の変化が大きくなることを利用することで振動や点灯のデータを付与するといったことが考えられる。
上記ではテレビ１００と携帯電話２００とが１対１で連動する場合を説明したが、テレビ１００ひとつに対して複数の携帯電話２００を連動させることもできる。
この連動の設定を行い、番組を再生するとテレビ１００から携帯電話２００が必要とする音声、字幕、振動、ＬＥＤ点灯の制御データを無線通信によって送信する。その制御データを携帯電話２００が受信し、制御データを用いて携帯電話２００が処理を行う。
【００３５】
図１２から図１６に端末装置連動システムを適用した場合のコンテンツを視聴する具体例を示す。図１２は、端末装置で字幕や異なるタイプの音声を出力する具体例を示す。図１３は、表示装置と端末装置とで異なるタイプの音声を出力する具体例を示す図である。図１４は、表示装置で音声を、端末装置で字幕を出力する具体例を示す。図１５は、端末装置を振動させる具体例を示す。図１６は、端末装置を点灯させる具体例を示す。
【００３６】
図１２において番組を視聴している時に、テレビ１では画面に映像をスピーカから英語音声を出力し、携帯電話２−１では画面に日本語字幕を出力し、別の携帯電話２−２ではスピーカ（またはイヤホンなど）から日本語音声を出力し、それぞれの視聴したいスタイルで番組を楽しむことが可能となっている。テレビ１と携帯電話２−１、２−２との間は無線通信３により情報を送受信する。
また、別の例では、図１３に示すように、テレビ１からは日本語音声を、携帯電話２からは英語音声を出力することが可能になる。図１４に示すようにテレビ１からは英語音声が、携帯電話２には日本語字幕が表示されたり、図１５に示すようにテレビ１の状態に連動して携帯電話２を振動（例えば、バイブレーション機能を用いる）させたり、図１６に示すようにテレビ１の状態に連動して携帯電話２のＬＥＤを点灯させたりすることができる。
【００３７】
以上説明したように、本実施形態によれば、コンテンツを表示する表示装置と端末装置とを連動させて、コンテンツを視聴することができる。これにより、映画などのコンテンツ情報を、ユーザが希望する形態で視聴することを可能にする。例えば、複数人でコンテンツを表示装置から視聴する際に個人の所持している携帯電話を用いることで、各々の望むスタイルでコンテンツを視聴することが可能となる。
【００３８】
実施形態２
実施形態１では、端末装置として携帯電話を用いる場合を説明したが、携帯電話の代わりに、無線機能を備えた携帯ゲーム機器にも置き換えることができる。
また、音声のみを聴く場合には携帯電話ではなく、無線機能を備えたＤＡＰ（Digital Audio Player）など音楽再生機器を用いてもよい。
更に本発明を３Ｄ番組について応用させてもよい。例えば、複数人で３Ｄ番組をテレビで視聴するときに、３Ｄに酔ってしまうため３Ｄ映像で見たくない人がいるということがある、その場合、携帯電話で２Ｄ映像を見るということが可能である。また、テレビが３Ｄ映像に対応していない場合に、携帯電話に制御データとして映像データを送信することによって、３Ｄ映像に対応した携帯電話で３Ｄ映像を視聴することが可能である。
また、表示措置はテレビに限られることはなく、コンテンツを表示（再生）できる装置であればよい。
【００３９】
その他の実施形態
上記各実施形態では、端末装置として、携帯電話等であって、表示機構、音声出力機構、振動機構、点灯機構を具備する装置を用いて説明したが、これらの各機構の一部を備える端末装置に本発明を適用することも可能である。また、これらの各機能のうち、一部を利用する場合にも本発明を適用することができる。例えば、振動機構を利用しない場合であってもよい。
【００４０】
また、上記各実施形態では、表示装置と端末装置とは、無線通信を用いて通信する場合を説明したが、有線通信の場合であっても本発明を適用することができる。
【００４１】
さらに、上記各実施形態で説明した端末装置連動方法の各処理は、コンピュータに各手段を実行させるプログラムによって実現することができる。プログラムは、コンピュータ内のメモリにロードされ、ＣＰＵ（Central Processing Unit）の制御のもとで実行される。
端末装置に搭載されるプログラムは、少なくとも次の処理をコンピュータに実行させる。コンテンツの表示に連動させて出力する要素（音声の出力、字幕の表示、自装置の振動、及び自装置の点灯の少なくとも一つ）を指定する情報である設定情報を受け付ける処理。受け付けた設定情報を記憶領域に記憶する処理。設定情報を表示装置へ送信する処理。設定情報を表示装置へ送信した後、制御データを表示装置から受信する処理。コンテンツの表示に連動させて、制御データに従って、要素を出力する処理。
【００４２】
表示装置に搭載されるプログラムは、少なくとも以下の処理をコンピュータに実行させる。設定情報を、端末装置から受信する処理。設定情報を記憶領域に記憶する処理。記憶した設定情報に基づいて、制御データを生成する処理。生成した制御データを、端末装置へ送信する処理。
【００４３】
上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory）を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【００４４】
なお、本発明は上記に示す実施形態に限定されるものではない。本発明の範囲において、上記実施形態の各要素を、当業者であれば容易に考えうる内容に変更、追加、変換することが可能である。
【００４５】
上記の実施形態の一部または全部は、以下の付記のようにも記載され得るが、以下には限られない。
【００４６】
付記１
音声と映像とを含むコンテンツを表示する表示装置と通信可能な端末装置であって、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える端末装置。
【００４７】
付記２
前記出力制御部は、
前記音声を出力する音声出力部を有し、
前記設定情報は、異なるタイプの音声のうち、どのタイプの音声を出力するか指定する音声情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記音声出力部から出力する連動音声データを含むことを特徴とする付記１記載の端末装置。
【００４８】
付記３
前記出力制御部は、さらに、
前記映像を表示する表示制御部を有し、
前記設定情報は、字幕を表示するか否かを指定する字幕情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記表示制御部へ表示する連動字幕データを含むことを特徴とする付記２記載の端末装置。
【００４９】
付記４
前記出力制御部は、さらに、
自装置を振動させる振動制御部を有し、
前記設定情報は、自装置を振動させることを指定する振動情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を振動させるタイミングを指定する連動振動データを含むことを特徴とする付記２または３記載の端末装置。
【００５０】
付記５
前記出力制御部は、さらに、
自装置を点灯させる点灯制御部を有し、
前記設定情報は、自装置を点灯させることを指定する点灯情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を点灯させるタイミングを指定する連動点灯データを含むことを特徴とする付記２乃至４のいずれか一つ記載の端末装置。
【００５１】
付記６
音声と映像とを含むコンテンツを表示する表示装置であって、
任意の端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を記憶する記憶領域と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える表示装置。
【００５２】
付記７
前記設定情報は、異なるタイプの音声のうち、どのタイプの音声を出力するか指定する音声情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて出力する連動音声データを含む制御データを生成することを特徴とする付記６記載の表示装置。
【００５３】
付記８
前記設定情報は、字幕を表示するか否かを指定する字幕情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて表示する連動字幕データを含む制御データを生成することを特徴とする付記６または７記載の表示装置。
【００５４】
付記９
前記設定情報は、前記端末装置を振動させることを指定する振動情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて振動させるタイミングを指定する連動振動データを含む制御データを生成することを特徴とする付記６乃至８のいずれか一つに記載の表示装置。
【００５５】
付記１０
前記設定情報は、前記端末装置を点灯させることを指定する点灯情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて前記画面を点灯させるタイミングを指定する連動点灯データを含む制御データを生成することを特徴とする付記６乃至９のいずれか一項に記載の表示装置。
【００５６】
付記１１
音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動システムであって、
前記端末装置は、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備え、
前記表示装置は、
前記端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記設定情報を記憶する記憶領域と、
前記設定情報を用いて、前記制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える端末装置連動システム。
【００５７】
付記１２
端末装置が、音声と映像とを含むコンテンツを表示する表示装置を連動させる端末装置連動方法がであって、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、
前記受け付けた設定情報を記憶領域に記憶し、
前記設定情報を前記表示装置へ送信し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する端末装置連動方法。
【００５８】
付記１３
音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置と連動する端末装置連動方法であって、
前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置〜受信し、
受信した設定情報を記憶領域に記憶し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、
生成した制御データを前記端末装置へ送信する端末装置連動方法。
【００５９】
付記１４
音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動方法であって、
前記端末装置は、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、
受け付けた設定情報を記憶領域に記憶し、
前記設定情報を前記表示装置へ送信し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力し、
前記表示装置は、
前記設定情報を、前記端末装置から受信し、
前記設定情報を記憶領域に記憶し、
前記設定情報を用いて、前記制御データを生成し、
生成した制御データを前記端末装置へ送信する、端末装置連動方法。
【００６０】
付記１５
端末装置を、音声と映像とを含むコンテンツを表示する表示装置と連動して動作させるプログラムであって、
コンピュータに、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける処理と、
前記受け付けた設定情報を記憶領域に記憶する処理と、
前記設定情報を前記表示装置へ送信する処理と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信する処理と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する処理と、を実行させるプログラム。
【００６１】
付記１６
音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置を連動して動作させるプログラムであって、
コンピュータに、
前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置から受信する処理と、
前記設定情報を記憶領域に記憶する処理と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成する処理と、
生成した制御データを、前記端末装置へ送信する処理と、を実行させるプログラム。
【符号の説明】
【００６２】
１、１００ テレビ
２、２−１、２−２、２００ 携帯電話
１０１、２０１ 表示制御部
１０２、２０２ 音声出力部
１０３ 番組再生部
１０４、２０５ 制御部（連動制御部）
１０５、２０６ 記憶領域
１０６、２０８ 送受信部
１０７、２０９ 送信部
１０８、２１０ 受信部
１１０ 携帯電話連動システムユニット
２０３ 振動制御部
２０４ 点灯制御部
２０７ 入力部
【技術分野】
【０００１】
本発明は、表示装置が表示するコンテンツ情報を、端末装置が連動して表示する技術に関する。
【背景技術】
【０００２】
テレビなどの表示装置で、映画などを複数人と見ている時に、ある人は字幕を見ながら英語の音声で、他のある人は日本語などの他の言語に吹き替えで見たいという場合がある。このように、同じ映画を同時に見る場合に、異なるタイプの音声等で映画を視聴したいというように、個々人の要望が異なることがある。
【０００３】
しかし、従来の表示装置ではこれらの要望を同時に満たすことができなかった。例えば、一般的なテレビでは、映像を表示する画面がひとつであり、複数のタイプの音声のうち、選択したひとつを出力するものであった。そのため、字幕が挿入された映像や他のタイプの音声を視聴したい場合には、外部に表示装置や音声出力装置を用意する必要がある。
これに関して、例えば、特許文献１には、ユーザから離れた位置に配置された大画面で映像を見ることを可能にしながら、文字などについてはユーザの近傍でみることを可能にすることができる親子連携型表示システムが提案されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１−２４３５１２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に開示された親子連携型表示システムでは、専用のデバイスを用意する必要があった。
本発明は、コンテンツを表示する表示装置と、携帯電話などの端末装置とを連動させてコンテンツを視聴するシステムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明に係る端末装置の一態様は、音声と映像とを含むコンテンツを表示する表示装置と通信可能な端末装置であって、前記表示装置と情報を送受信する送受信部と、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、前記入力部が受け付けた設定情報を記憶する記憶領域と、前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える。
【０００７】
本発明に係る表示装置の一態様は、音声と映像とを含むコンテンツを表示する表示装置であって、任意の端末装置と情報を送受信する送受信部と、前記端末装置から受信した、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を記憶する記憶領域と、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える。
【０００８】
本発明に係る端末装置連動システムの一態様は、音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動システムであって、前記端末装置は、前記表示装置と情報を送受信する送受信部と、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、前記入力部が受け付けた設定情報を記憶する記憶領域と、前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える。前記表示装置は、前記端末装置と情報を送受信する送受信部と、前記端末装置から受信した、前記設定情報を記憶する記憶領域と、前記設定情報を用いて、前記制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える。
【０００９】
本発明に係る端末装置連動方法の一態様は、端末装置が、音声と映像とを含むコンテンツを表示する表示装置を連動させる端末装置連動方法がであって、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、前記受け付けた設定情報を記憶領域に記憶し、前記設定情報を前記表示装置へ送信し、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する。
【００１０】
本発明に係る端末装置連動方法の一態様は、音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置と連動する端末装置連動方法であって、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置〜受信し、受信した設定情報を記憶領域に記憶し、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、生成した制御データを前記端末装置へ送信する。
【００１１】
本発明に係る端末装置連動方法の一態様は、音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動方法であって、前記端末装置は、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、受け付けた設定情報を記憶領域に記憶し、前記設定情報を前記表示装置へ送信し、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する。前記表示装置は、前記設定情報を、前記端末装置から受信し、前記設定情報を記憶領域に記憶し、前記設定情報を用いて、前記制御データを生成し、生成した制御データを前記端末装置へ送信する。
【００１２】
本発明に係るプログラムの一態様は、端末装置を、音声と映像とを含むコンテンツを表示する表示装置と連動して動作させるプログラムであって、コンピュータに、前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける処理と、前記受け付けた設定情報を記憶領域に記憶する処理と、前記設定情報を前記表示装置へ送信する処理と、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信する処理と、前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する処理と、を実行させる。
【００１３】
本発明に係る端末装置連動方法の一態様は、音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置を連動して動作させるプログラムであって、コンピュータに、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置から受信する処理と、前記設定情報を記憶領域に記憶する処理と、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成する処理と、生成した制御データを、前記端末装置へ送信する処理と、を実行させる。
【発明の効果】
【００１４】
本発明によれば、コンテンツを表示する表示装置と、携帯電話などの端末装置とを連動させてコンテンツを視聴するシステムを提供することが可能となる。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施形態１に係る表示装置の構成例の要部を示すブロック図である。
【図２】本発明の実施形態１に係る端末装置の構成例の要部を示すブロック図である。
【図３】実施形態１の表示装置（テレビ）の動作例を表すフローチャートである。
【図４】実施形態１の端末装置（携帯電話）の動作例を表すフローチャートである。
【図５】表示装置が動作するときの情報の流れを説明する図である。
【図６】端末装置がユーザから設定情報を受け付けるときの動作を説明する図である。
【図７】ユーザが設定情報を入力するときの表示画面の一例を示す図である。
【図８】設定情報の一例を示す図である。
【図９】端末装置が制御データを用いて各要素を出力するときの動作を説明する図である。
【図１０】制御データに含まれる連動振動データの具体例を示す図である。
【図１１】制御データに含まれる連動点灯データの具体例を示す図である。
【図１２】端末装置で字幕や異なるタイプの音声を出力する具体例を示す図である。
【図１３】表示装置と端末装置とで異なるタイプの音声を出力する具体例を示す図である。
【図１４】表示装置で音声を、端末装置で字幕を出力する具体例を示す図である。
【図１５】端末装置を振動させる具体例を示す図である。
【図１６】端末装置を点灯させる具体例を示す図である。
【発明を実施するための形態】
【００１６】
以下、本発明の実施形態について、図面を参照しながら説明する。説明の明確化のため、以下の記載及び図面は、適宜、省略、及び簡略化がなされている。各図面において同一の構成または機能を有する構成要素および相当部分には、同一の符号を付し、その説明は省略する。
【００１７】
本発明では、コンテンツ情報を視聴することができる表示装置と、端末装置とを連動するシステム（端末装置連動システム）を提供する。本発明の端末装置連動システムは、音声と映像とを含むコンテンツを表示する表示装置（例えば、テレビ）と、携帯端末などの通信機能を備える端末装置とから構成されるシステムに適用することができる。ます、各装置の機能の概略を説明する。
【００１８】
端末装置は、次の機能を備える。
表示装置と情報を送受信する機能。
設定情報を受け付ける入力機能。
入力機能によって受け付けた設定情報を記憶する機能。
設定情報を前記表示装置へ送信する機能。
送信した設定情報に応じて、表示装置から制御データを受信する機能。
制御データに従って、設定した要素を出力する機能。
【００１９】
また、表示装置は、次の機能を備える。
端末装置と情報を送受信する機能。
設定情報を端末装置から受信し、記憶領域に記憶する機能。
設定情報を用いて制御データを生成し、端末装置へ送信する機能。
【００２０】
ここで、「設定情報」とは、コンテンツの表示に連動させて出力する要素を指定する情報である。
端末装置が出力する「要素」としては、例えば、どのタイプ（日本語、英語など）の音声を出力するかあるいは音声を出力しないか、どのタイプの字幕を表示するかあるいは字幕を表示しないか、自装置の振動の有無、自装置の点灯の有無などがある。各要素の設定に関する情報を、例えば、音声情報、字幕情報、振動情報、点灯情報とする。設定情報はこれらの情報のうち少なくとも一つを含む。また、要素はこれらに限られることなく、端末装置がコンテンツの表示に連動して出力できるものであれば他のものであってもよい。
「制御データ」（「連動制御データ」ともいう）とは、設定情報に指定された要素を、コンテンツの表示に連動させて出力するためのデータである。制御データのうち、各要素個別の制御データを指すときに、連動音声データ、連動字幕データ、連動振動データ、連動点灯データということもある。制御データは、これらのデータの少なくとも一つを含む。
【００２１】
以下の実施形態では、表示装置としてテレビを用い、端末装置として携帯電話を用いる場合を一例として説明する。携帯電話において、テレビの音声を再生する、あるいは、字幕で表示するなどを行う、テレビと携帯電話の連動システムを提供する。
【００２２】
実施形態１
図１は、本発明の実施形態１に係る表示装置の構成例の要部を示すブロック図である。ここでは、表示装置（映像音声出力装置）としてのテレビ１００の部品構成の要部を表したものである。ここでは、表示制御部１０１、音声出力部１０２、番組再生部１０３、制御部（連動制御部）１０４、記憶領域１０５、及び送受信部１０６を示す。
【００２３】
表示制御部１０１は映像情報を画面に表示する制御を行う。
音声出力部１０２は音声情報を出力する制御を行う。
番組再生部１０３は放送された番組などを含むコンテンツの再生を制御する部分であり、表示制御部１０１、音声出力部１０２、制御部１０４に対して再生するコンテンツ情報を提供する。
制御部１０４は各種の処理や制御を行う。
記憶領域１０５は情報を記憶する領域であり、例えば、携帯電話から受信した設定情報（後述する）を記憶する。記憶領域１０５は、例えば、読み書き可能なＲＡＭ（random access memory）で構成される。
【００２４】
送受信部１０６は携帯電話とデータを送受信する。通信方法はＢｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）など携帯電話に備えられている無線通信方式であり、テレビで対応可能であれば他の通信方法であっても構わない。送受信部１０６は、送信部１０７と受信部１０８とを有する。
本実施形態に用いるテレビは上述した構成を有するが、一般的なテレビに携帯電話連動システムユニット１１０を追加することによって実現してもかまわない。携帯電話連動システムユニット１１０は、番組再生部１０３の一部の機能、制御部１０４、記憶領域１０５、及び送受信部１０６が備える機能により実現する機能である。
【００２５】
図２は本発明の実施形態１に係る端末装置の構成例の要部を示すブロック図である。図２では、端末装置として、本発明に係わる機能を実現する携帯電話２００の部品構成の要部を表したものであり、携帯電話が備える通信機能などの構成については省略している。ここでは、表示制御部２０１、音声出力部２０２、振動制御部２０３、点灯制御部２０４、制御部（連動制御部）２０５、記憶領域２０６、入力部２０７、及び送受信部２０８を示す。
【００２６】
表示制御部２０１は、映像情報を画面に表示する制御を行う。
音声出力部２０２は音声を出力する制御を行う。
振動制御部２０３は携帯電話のバイブレーションなどの振動制御を行う。
点灯制御部２０４は携帯電話に搭載されているＬＥＤ（light-emitting diode）や有機ＥＬ（electroluminescence）などのイルミネーションの点灯制御を行う。
制御部２０５は各種の処理や制御を行う。
記憶領域２０６は情報を記憶する領域であり、例えば、入力部２０７から入力された設定情報やテレビから受信した制御データを記憶する。記憶領域２０６は、例えば、ＲＡＭで構成されている。
【００２７】
入力部２０７は、キーやタッチパネルなどを介してユーザからの入力を受け付ける入力回路である。
送受信部２０８はテレビ１００とデータを送受信する部分である。通信方法はＢｌｕｅｔｏｏｔｈ（登録商標）やＷｉ−Ｆｉ（登録商標）など携帯電話が備える無線通信方式であって、テレビで対応可能な無線通信方式であれば他の通信方法であっても構わない。送受信部２０８は、送信部２０９と受信部２１０とを有する。
なお、携帯電話２００において、コンテンツの表示に連動させて制御データを出力する、表示制御部２０１、音声出力部２０２、振動制御部２０３、及び点灯制御部２０４を出力制御部２２１１ということもある。
【００２８】
続いて、図面を参照して端末装置連動システムの動作を説明する。
図３は、実施形態１のテレビの動作例を表すフローチャートである。図４は、実施形態１の携帯電話の動作例を表すフローチャートである。
まず、テレビ１００の動作について説明する。図５は、テレビが動作するときの情報の流れを説明する図である。テレビ１００と携帯電話２とを連動させる場合（ステップＳ１１：Ｙ）には、制御部１０４は、送受信部１０６を用いて、テレビ１００と連動する携帯電話２００を探す（ステップＳ１２）。どのようにして連動する携帯電話２００を探すかについては、a例えば、相互の送受信部によって、予め決めた初期情報を交換することによって、連動可能であることを確認すればよい。携帯電話２００が見つかった場合（ステップＳ１３：Ｙ）は、受信部１０８にて携帯電話２００から設定情報４０２を受信する（ステップＳ１４）。受信した設定情報４０２は記憶領域１０５に保存される（ステップＳ１５）。制御部１０４は、この設定情報とコンテンツ情報とを用いて制御データ３０２を生成（ステップＳ１６）する。制御データ３０２については、後述する。制御部１０４は、生成した制御データを、送信部１０７を介して携帯電話２００に送信する（ステップＳ１７）。その後テレビ１００ではコンテンツ情報３０１からコンテンツを再生する（ステップＳ１８）。
【００２９】
次に携帯電話２００の動作について説明する。図６は、携帯電話がユーザ操作により設定情報を受け付けるときの情報の流れを説明する図である。携帯電話２００をテレビ１００と連動させる場合（ステップＳ２１：Ｙ）には、入力部２０７が、携帯電話２００とテレビ１００をどのように連動させるかの情報（設定情報）をユーザ操作４０１によって受け付け（ステップＳ２２）、入力された設定情報を記憶領域２０６に保存する（ステップＳ２３）。その時の携帯電話２００の表示画面は例えば図７のような画面でキー入力やタッチパネルの入力によって設定を行う。
その後、制御部２０５は、送受信部２０８を用いて、携帯電話２００と連動するテレビ１００を探す（ステップＳ２４）。テレビ１００が見つかった場合（ステップＳ２５：Ｙ）、制御部２０５は、記憶領域２０６に保存された設定情報４０２を、送信部２０９を介してテレビ１００に送信する。
【００３０】
テレビ１００に設定情報４０２を送信すると、テレビ１００から制御データ３０２が生成され送られてくるため、携帯電話２００の受信部２１０で受信を行う（ステップＳ２７）。
受信した制御データ３０２は記憶領域２０６に保存され、制御部２０５は、保存された制御データ３０２を用いて、テレビ１００が表示するコンテンツにあわせて表示制御部２０１、音声出力部２０２、振動制御部２０３、点灯制御部２０４の制御を行う（ステップＳ２８）。
【００３１】
携帯電話２００から送信される設定情報４０２はテレビ１００の記憶領域１０５に保存される。図８は、記憶領域１０５に記憶される設定情報４０２ａの一例を示す。設定情報４０２ａでは、連動する携帯電話２００ごとに、携帯電話２００を識別するＩＤと対応づけて、字幕、音声、振動、及び点灯に関する情報が記憶されている。図８では、音声情報として、出力する音声タイプ（日本語、英語など）か、あるいは、音声を出力しないか（ＯＦＦ）を指定する。字幕情報として、表示する字幕のタイプか、あるいは、字幕を表示しないかを指定する。振動情報として、自装置の振動の有無（ＯＮ／ＯＦＦ）を指定する。点灯情報として、自装置の画面の点灯の有無（ＯＮ／ＯＦＦ）を指定する。
【００３２】
図９に、携帯電話２００が制御データ３０２に従って音声、字幕、振動、点灯の各要素を出力する場合の情報の流れを示す。テレビ１００から受信した制御データ３０２は、記憶領域２０６に記憶される。制御部２０５は、記憶した制御データ３０２を解析し、対応する出力制御部へ制御データ３０２を渡す。表示制御部２０１は、連動字幕データを出力する。音声出力部２０２は、連動音声データを出力する。振動制御部２０３は、連動振動データに従って、自装置を振動させる。点灯制御部２０４は、連動振動データに従ってＬＥＤを点灯させる。
【００３３】
テレビ１００で生成される制御データ３０２は、字幕や音声のデータ、また振動を生じさせるタイミングや点灯するタイミングを示すデータが含まれている。制御データ３０２に含まれる、連動字幕データは、携帯電話２００がコンテンツの表示に連動させて表示する字幕データであり、連動音声データは、携帯電話２００がコンテンツの表示に連動させて出力する音声データである。また、振動や点灯の制御データは例えば図１０や図１１のような形で保存されている。図１０は、制御データ３０２に含まれる連動振動データ３０２ａの一例を示し、図１１は、連動点灯データ３０２ｂの一例を示す。制御データ３０２は、テレビ１００が表示するコンテンツと同期して出力することによって、各要素がコンテンツの表示内容と対応して出力される。例えば、コンテンツの表示を開始するタイミングがテレビから携帯電話に通知されることによって、コンテンツの表示と制御データの要素の出力との同期をとることができる。
他の方法等ございましたら、追加をお願いいたします。
【００３４】
これらのデータは、コンテンツ情報から自動的に生成する方法もあるし、人が手作業で付与することも可能である。コンテンツ情報から生成する場合には、例えば雷のシーンでは輝度の変化が大きくなることを利用することで振動や点灯のデータを付与するといったことが考えられる。
上記ではテレビ１００と携帯電話２００とが１対１で連動する場合を説明したが、テレビ１００ひとつに対して複数の携帯電話２００を連動させることもできる。
この連動の設定を行い、番組を再生するとテレビ１００から携帯電話２００が必要とする音声、字幕、振動、ＬＥＤ点灯の制御データを無線通信によって送信する。その制御データを携帯電話２００が受信し、制御データを用いて携帯電話２００が処理を行う。
【００３５】
図１２から図１６に端末装置連動システムを適用した場合のコンテンツを視聴する具体例を示す。図１２は、端末装置で字幕や異なるタイプの音声を出力する具体例を示す。図１３は、表示装置と端末装置とで異なるタイプの音声を出力する具体例を示す図である。図１４は、表示装置で音声を、端末装置で字幕を出力する具体例を示す。図１５は、端末装置を振動させる具体例を示す。図１６は、端末装置を点灯させる具体例を示す。
【００３６】
図１２において番組を視聴している時に、テレビ１では画面に映像をスピーカから英語音声を出力し、携帯電話２−１では画面に日本語字幕を出力し、別の携帯電話２−２ではスピーカ（またはイヤホンなど）から日本語音声を出力し、それぞれの視聴したいスタイルで番組を楽しむことが可能となっている。テレビ１と携帯電話２−１、２−２との間は無線通信３により情報を送受信する。
また、別の例では、図１３に示すように、テレビ１からは日本語音声を、携帯電話２からは英語音声を出力することが可能になる。図１４に示すようにテレビ１からは英語音声が、携帯電話２には日本語字幕が表示されたり、図１５に示すようにテレビ１の状態に連動して携帯電話２を振動（例えば、バイブレーション機能を用いる）させたり、図１６に示すようにテレビ１の状態に連動して携帯電話２のＬＥＤを点灯させたりすることができる。
【００３７】
以上説明したように、本実施形態によれば、コンテンツを表示する表示装置と端末装置とを連動させて、コンテンツを視聴することができる。これにより、映画などのコンテンツ情報を、ユーザが希望する形態で視聴することを可能にする。例えば、複数人でコンテンツを表示装置から視聴する際に個人の所持している携帯電話を用いることで、各々の望むスタイルでコンテンツを視聴することが可能となる。
【００３８】
実施形態２
実施形態１では、端末装置として携帯電話を用いる場合を説明したが、携帯電話の代わりに、無線機能を備えた携帯ゲーム機器にも置き換えることができる。
また、音声のみを聴く場合には携帯電話ではなく、無線機能を備えたＤＡＰ（Digital Audio Player）など音楽再生機器を用いてもよい。
更に本発明を３Ｄ番組について応用させてもよい。例えば、複数人で３Ｄ番組をテレビで視聴するときに、３Ｄに酔ってしまうため３Ｄ映像で見たくない人がいるということがある、その場合、携帯電話で２Ｄ映像を見るということが可能である。また、テレビが３Ｄ映像に対応していない場合に、携帯電話に制御データとして映像データを送信することによって、３Ｄ映像に対応した携帯電話で３Ｄ映像を視聴することが可能である。
また、表示措置はテレビに限られることはなく、コンテンツを表示（再生）できる装置であればよい。
【００３９】
その他の実施形態
上記各実施形態では、端末装置として、携帯電話等であって、表示機構、音声出力機構、振動機構、点灯機構を具備する装置を用いて説明したが、これらの各機構の一部を備える端末装置に本発明を適用することも可能である。また、これらの各機能のうち、一部を利用する場合にも本発明を適用することができる。例えば、振動機構を利用しない場合であってもよい。
【００４０】
また、上記各実施形態では、表示装置と端末装置とは、無線通信を用いて通信する場合を説明したが、有線通信の場合であっても本発明を適用することができる。
【００４１】
さらに、上記各実施形態で説明した端末装置連動方法の各処理は、コンピュータに各手段を実行させるプログラムによって実現することができる。プログラムは、コンピュータ内のメモリにロードされ、ＣＰＵ（Central Processing Unit）の制御のもとで実行される。
端末装置に搭載されるプログラムは、少なくとも次の処理をコンピュータに実行させる。コンテンツの表示に連動させて出力する要素（音声の出力、字幕の表示、自装置の振動、及び自装置の点灯の少なくとも一つ）を指定する情報である設定情報を受け付ける処理。受け付けた設定情報を記憶領域に記憶する処理。設定情報を表示装置へ送信する処理。設定情報を表示装置へ送信した後、制御データを表示装置から受信する処理。コンテンツの表示に連動させて、制御データに従って、要素を出力する処理。
【００４２】
表示装置に搭載されるプログラムは、少なくとも以下の処理をコンピュータに実行させる。設定情報を、端末装置から受信する処理。設定情報を記憶領域に記憶する処理。記憶した設定情報に基づいて、制御データを生成する処理。生成した制御データを、端末装置へ送信する処理。
【００４３】
上述の例において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（Random Access Memory）を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
【００４４】
なお、本発明は上記に示す実施形態に限定されるものではない。本発明の範囲において、上記実施形態の各要素を、当業者であれば容易に考えうる内容に変更、追加、変換することが可能である。
【００４５】
上記の実施形態の一部または全部は、以下の付記のようにも記載され得るが、以下には限られない。
【００４６】
付記１
音声と映像とを含むコンテンツを表示する表示装置と通信可能な端末装置であって、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える端末装置。
【００４７】
付記２
前記出力制御部は、
前記音声を出力する音声出力部を有し、
前記設定情報は、異なるタイプの音声のうち、どのタイプの音声を出力するか指定する音声情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記音声出力部から出力する連動音声データを含むことを特徴とする付記１記載の端末装置。
【００４８】
付記３
前記出力制御部は、さらに、
前記映像を表示する表示制御部を有し、
前記設定情報は、字幕を表示するか否かを指定する字幕情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記表示制御部へ表示する連動字幕データを含むことを特徴とする付記２記載の端末装置。
【００４９】
付記４
前記出力制御部は、さらに、
自装置を振動させる振動制御部を有し、
前記設定情報は、自装置を振動させることを指定する振動情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を振動させるタイミングを指定する連動振動データを含むことを特徴とする付記２または３記載の端末装置。
【００５０】
付記５
前記出力制御部は、さらに、
自装置を点灯させる点灯制御部を有し、
前記設定情報は、自装置を点灯させることを指定する点灯情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を点灯させるタイミングを指定する連動点灯データを含むことを特徴とする付記２乃至４のいずれか一つ記載の端末装置。
【００５１】
付記６
音声と映像とを含むコンテンツを表示する表示装置であって、
任意の端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を記憶する記憶領域と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える表示装置。
【００５２】
付記７
前記設定情報は、異なるタイプの音声のうち、どのタイプの音声を出力するか指定する音声情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて出力する連動音声データを含む制御データを生成することを特徴とする付記６記載の表示装置。
【００５３】
付記８
前記設定情報は、字幕を表示するか否かを指定する字幕情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて表示する連動字幕データを含む制御データを生成することを特徴とする付記６または７記載の表示装置。
【００５４】
付記９
前記設定情報は、前記端末装置を振動させることを指定する振動情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて振動させるタイミングを指定する連動振動データを含む制御データを生成することを特徴とする付記６乃至８のいずれか一つに記載の表示装置。
【００５５】
付記１０
前記設定情報は、前記端末装置を点灯させることを指定する点灯情報を含み、
前記連動制御部は、前記端末装置が前記コンテンツの表示に連動させて前記画面を点灯させるタイミングを指定する連動点灯データを含む制御データを生成することを特徴とする付記６乃至９のいずれか一項に記載の表示装置。
【００５６】
付記１１
音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動システムであって、
前記端末装置は、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備え、
前記表示装置は、
前記端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記設定情報を記憶する記憶領域と、
前記設定情報を用いて、前記制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える端末装置連動システム。
【００５７】
付記１２
端末装置が、音声と映像とを含むコンテンツを表示する表示装置を連動させる端末装置連動方法がであって、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、
前記受け付けた設定情報を記憶領域に記憶し、
前記設定情報を前記表示装置へ送信し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する端末装置連動方法。
【００５８】
付記１３
音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置と連動する端末装置連動方法であって、
前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置〜受信し、
受信した設定情報を記憶領域に記憶し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、
生成した制御データを前記端末装置へ送信する端末装置連動方法。
【００５９】
付記１４
音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動方法であって、
前記端末装置は、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、
受け付けた設定情報を記憶領域に記憶し、
前記設定情報を前記表示装置へ送信し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力し、
前記表示装置は、
前記設定情報を、前記端末装置から受信し、
前記設定情報を記憶領域に記憶し、
前記設定情報を用いて、前記制御データを生成し、
生成した制御データを前記端末装置へ送信する、端末装置連動方法。
【００６０】
付記１５
端末装置を、音声と映像とを含むコンテンツを表示する表示装置と連動して動作させるプログラムであって、
コンピュータに、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける処理と、
前記受け付けた設定情報を記憶領域に記憶する処理と、
前記設定情報を前記表示装置へ送信する処理と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信する処理と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する処理と、を実行させるプログラム。
【００６１】
付記１６
音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置を連動して動作させるプログラムであって、
コンピュータに、
前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置から受信する処理と、
前記設定情報を記憶領域に記憶する処理と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成する処理と、
生成した制御データを、前記端末装置へ送信する処理と、を実行させるプログラム。
【符号の説明】
【００６２】
１、１００ テレビ
２、２−１、２−２、２００ 携帯電話
１０１、２０１ 表示制御部
１０２、２０２ 音声出力部
１０３ 番組再生部
１０４、２０５ 制御部（連動制御部）
１０５、２０６ 記憶領域
１０６、２０８ 送受信部
１０７、２０９ 送信部
１０８、２１０ 受信部
１１０ 携帯電話連動システムユニット
２０３ 振動制御部
２０４ 点灯制御部
２０７ 入力部
【特許請求の範囲】
【請求項１】
音声と映像とを含むコンテンツを表示する表示装置と通信可能な端末装置であって、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える端末装置。
【請求項２】
前記出力制御部は、
前記音声を出力する音声出力部を有し、
前記設定情報は、異なるタイプの音声のうち、どのタイプの音声を出力するか指定する音声情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記音声出力部から出力する連動音声データを含むことを特徴とする請求項１記載の端末装置。
【請求項３】
前記出力制御部は、さらに、
前記映像を表示する表示制御部を有し、
前記設定情報は、字幕を表示するか否かを指定する字幕情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記表示制御部へ表示する連動字幕データを含むことを特徴とする請求項２記載の端末装置。
【請求項４】
前記出力制御部は、さらに、
自装置を振動させる振動制御部を有し、
前記設定情報は、自装置を振動させることを指定する振動情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を振動させるタイミングを指定する連動振動データを含むことを特徴とする請求項２または３記載の端末装置。
【請求項５】
前記出力制御部は、さらに、
自装置を点灯させる点灯制御部を有し、
前記設定情報は、自装置を点灯させることを指定する点灯情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を点灯させるタイミングを指定する連動点灯データを含むことを特徴とする請求項２乃至４のいずれか一項に記載の端末装置。
【請求項６】
音声と映像とを含むコンテンツを表示する表示装置であって、
任意の端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を記憶する記憶領域と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える表示装置。
【請求項７】
音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動システムであって、
前記端末装置は、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備え、
前記表示装置は、
前記端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記設定情報を記憶する記憶領域と、
前記設定情報を用いて、前記制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える端末装置連動システム。
【請求項８】
端末装置が、音声と映像とを含むコンテンツを表示する表示装置を連動させる端末装置連動方法がであって、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、
前記受け付けた設定情報を記憶領域に記憶し、
前記設定情報を前記表示装置へ送信し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する端末装置連動方法。
【請求項９】
音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置と連動する端末装置連動方法であって、
前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置〜受信し、
受信した設定情報を記憶領域に記憶し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、
生成した制御データを前記端末装置へ送信する端末装置連動方法。
【請求項１０】
端末装置を、音声と映像とを含むコンテンツを表示する表示装置と連動して動作させるプログラムであって、
コンピュータに、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける処理と、
前記受け付けた設定情報を記憶領域に記憶する処理と、
前記設定情報を前記表示装置へ送信する処理と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信する処理と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する処理と、を実行させるプログラム。
【請求項１】
音声と映像とを含むコンテンツを表示する表示装置と通信可能な端末装置であって、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備える端末装置。
【請求項２】
前記出力制御部は、
前記音声を出力する音声出力部を有し、
前記設定情報は、異なるタイプの音声のうち、どのタイプの音声を出力するか指定する音声情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記音声出力部から出力する連動音声データを含むことを特徴とする請求項１記載の端末装置。
【請求項３】
前記出力制御部は、さらに、
前記映像を表示する表示制御部を有し、
前記設定情報は、字幕を表示するか否かを指定する字幕情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、前記表示制御部へ表示する連動字幕データを含むことを特徴とする請求項２記載の端末装置。
【請求項４】
前記出力制御部は、さらに、
自装置を振動させる振動制御部を有し、
前記設定情報は、自装置を振動させることを指定する振動情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を振動させるタイミングを指定する連動振動データを含むことを特徴とする請求項２または３記載の端末装置。
【請求項５】
前記出力制御部は、さらに、
自装置を点灯させる点灯制御部を有し、
前記設定情報は、自装置を点灯させることを指定する点灯情報を含み、
前記制御データは、前記コンテンツの表示に連動させて、自装置を点灯させるタイミングを指定する連動点灯データを含むことを特徴とする請求項２乃至４のいずれか一項に記載の端末装置。
【請求項６】
音声と映像とを含むコンテンツを表示する表示装置であって、
任意の端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を記憶する記憶領域と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える表示装置。
【請求項７】
音声と映像とを含むコンテンツを表示する表示装置と、端末装置とを連動させて前記コンテンツを視聴する端末装置連動システムであって、
前記端末装置は、
前記表示装置と情報を送受信する送受信部と、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける入力部と、
前記入力部が受け付けた設定情報を記憶する記憶領域と、
前記設定情報を前記表示装置へ送信した後、前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信するように制御する連動制御部と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する出力制御部と、を備え、
前記表示装置は、
前記端末装置と情報を送受信する送受信部と、
前記端末装置から受信した、前記設定情報を記憶する記憶領域と、
前記設定情報を用いて、前記制御データを生成し、前記制御データを、前記送受信部を介して前記端末装置へ送信させる連動制御部と、を備える端末装置連動システム。
【請求項８】
端末装置が、音声と映像とを含むコンテンツを表示する表示装置を連動させる端末装置連動方法がであって、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付け、
前記受け付けた設定情報を記憶領域に記憶し、
前記設定情報を前記表示装置へ送信し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信し、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する端末装置連動方法。
【請求項９】
音声と映像とを含むコンテンツを表示する表示装置が、任意の端末装置と連動する端末装置連動方法であって、
前記コンテンツの表示に連動させて、前記端末装置が出力する要素を指定する情報である設定情報を、前記端末装置〜受信し、
受信した設定情報を記憶領域に記憶し、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを生成し、
生成した制御データを前記端末装置へ送信する端末装置連動方法。
【請求項１０】
端末装置を、音声と映像とを含むコンテンツを表示する表示装置と連動して動作させるプログラムであって、
コンピュータに、
前記コンテンツの表示に連動させて出力する要素を指定する情報である設定情報を受け付ける処理と、
前記受け付けた設定情報を記憶領域に記憶する処理と、
前記設定情報を前記表示装置へ送信する処理と、
前記設定情報に指定された要素を、前記コンテンツの表示に連動させて出力するための制御データを前記表示装置から受信する処理と、
前記コンテンツの表示に連動させて、前記制御データを用いて、前記要素を出力する処理と、を実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【公開番号】特開２０１２−１７５３６４（Ｐ２０１２−１７５３６４Ａ）
【公開日】平成２４年９月１０日（２０１２．９．１０）
【国際特許分類】
【出願番号】特願２０１１−３４９０７（Ｐ２０１１−３４９０７）
【出願日】平成２３年２月２１日（２０１１．２．２１）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
【公開日】平成２４年９月１０日（２０１２．９．１０）
【国際特許分類】
【出願日】平成２３年２月２１日（２０１１．２．２１）
【出願人】（３１０００６８５５）ＮＥＣカシオモバイルコミュニケーションズ株式会社 (1,081)
【Ｆターム（参考）】
[ Back to top ]