映像表示システム及びその制御方法
【課題】コンテンツを提示する装置を視聴者が切り換える際に、視聴者の視点移動に要する期間に提示されるコンテンツを見逃さないように防止すること。
【解決手段】映像表示システムは、主端末部１００から副端末部１１０へと映像表示を切り換える移行期間にて、両装置で映像を時間的に重複して表示させる。主端末部１００は、映像表示のために映像信号を出力する映像出力部１０２と、副端末部１１０への映像信号の送信部を備え、映像出力部１０２による映像信号の出力後に遅延時間をもって当該信号を副端末部１１０に送信する。例えば、主端末部１００は蓄積部からデータを読み出す第１及び第２の読み出し部を有し、第２の読み出し部は第１の読み出し部の読み出し位置よりも一定時間遡った再生位置からデータを読み出して送信部に送る。副端末部１１０は映像信号を受信し、移行期間にて、主端末部１００の表示映像に比して時間的に遅れて映像を表示する。
【解決手段】映像表示システムは、主端末部１００から副端末部１１０へと映像表示を切り換える移行期間にて、両装置で映像を時間的に重複して表示させる。主端末部１００は、映像表示のために映像信号を出力する映像出力部１０２と、副端末部１１０への映像信号の送信部を備え、映像出力部１０２による映像信号の出力後に遅延時間をもって当該信号を副端末部１１０に送信する。例えば、主端末部１００は蓄積部からデータを読み出す第１及び第２の読み出し部を有し、第２の読み出し部は第１の読み出し部の読み出し位置よりも一定時間遡った再生位置からデータを読み出して送信部に送る。副端末部１１０は映像信号を受信し、移行期間にて、主端末部１００の表示映像に比して時間的に遅れて映像を表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像、音声、データ放送、アプリケーションなどのコンテンツを提示する映像表示システム及びその制御方法に関するものである。ここでアプリケーションは、マイクロプロセッサにより実行されることで映像や音声を生成することができるコンピュータプログラムを含む。
【背景技術】
【０００２】
現在では放送、ネットワークを経由したダウンロードや、ＤＶＤ等の記録媒体を含む様々な媒体を介して、映像及び音声、データ放送、アプリケーションを含む様々なコンテンツが提供されている。多種多様なコンテンツを視聴者に利便性よく提供するため、大画面及び大型スピーカを備える主端末装置と、小画面及び小型スピーカを備える副端末装置を用いたコンテンツ提供システムが知られている。
【０００３】
コンテンツ提供形態には以下に示す形態が考えられる。
・主端末装置及び副端末装置において同時に同じコンテンツを提供する形態。
・主端末装置及び副端末装置においてそれぞれ別のコンテンツを提供する形態。
・主端末装置又は副端末装置の一方のみでコンテンツを提供する形態。
【０００４】
これら様々な形態を切り換えるため、主端末装置で提示していたコンテンツを副端末装置に切り換えて提示する必要性や、逆に副端末装置で提示していたコンテンツを主端末装置に切り換えて提示する必要性が生じる。液晶投影装置を用いて静止画を投影するプレゼンテーション環境において、最新画像とプレゼンテーション切り換え直前の画像を同時に表示する技術が開示されている（特許文献１参照）。すなわち、液晶投影装置への入力画像信号が切り換わると、液晶投影装置は最新画像を表示し、液晶投影装置が備える画像信号出力へ切り換わる直前の画像を出力し、画像信号出力へ接続された別の液晶投影装置が切り換え直前の画像を表示する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−０４９４２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１に開示されている技術を動画映像や動的グラフィック描画を伴うアプリケーションなどのコンテンツに適用すると、視聴者がコンテンツを見逃す虞がある。つまり、コンテンツ映像を表示する液晶投影装置を切り換える際、切り換えに対する視聴者の視覚反応が遅れると、切り換え時に提示されているコンテンツ映像を見逃してしまう。静止画を表示するプレゼンテーションにおいては、視聴者の反応が遅れても、同じ内容が表示され続けるため、見逃しが生じる虞はない。しかし、動画映像や動的グラフィック描画を伴うアプリケーションなどのコンテンツの場合、表示内容が常に変化するため、見逃しの可能性が高まる。
【０００７】
特に、コンテンツを提示する端末装置を切り換える際、視聴者の視点移動が大きい環境において、視点移動に要する期間中に提示されるコンテンツ映像を視聴者が見逃す虞があった。視聴者の視点移動が大きい環境としては、例えば、視聴者の前方に大画面で大型スピーカを備えるコンテンツ提示端末装置が位置し、視聴者が手元に小画面で小型スピーカを備えるコンテンツ提示端末装置を持っている状況が挙げられる。
【０００８】
そこで、コンテンツ提示端末装置の切り換え時に、切り換え先の装置において切り換え元よりも時間的に遅れてコンテンツを提示すれば、両装置において切り換え時のコンテンツを時間的に重複して提示できる。本発明は、視聴者の視点移動に要する期間に提示されるコンテンツ映像を視聴者が見逃さないように防止することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、本発明に係る映像表示システムは、第１の装置及び第２の装置を備え、前記第１の装置から前記第２の装置へと映像の表示を切り換える際の移行期間にて前記第１の装置及び前記第２の装置で映像を時間的に重複して表示させる。前記第１の装置は、映像を表示させるために映像信号を出力する映像出力手段と、映像信号を前記第２の装置に送信する送信手段と、前記映像出力手段が映像信号を出力した後で遅延時間をもって当該映像信号を前記第２の装置に送信するように前記送信手段を制御する制御手段と、を備える。前記第２の装置は前記送信手段からの映像信号を受信し、前記移行期間にて、前記第１の装置で表示される映像よりも時間的に遅れて映像を表示する。
【発明の効果】
【００１０】
本発明は、視聴者の視点移動に要する期間中に提示される映像を視聴者が見逃さないように防止できる。
【図面の簡単な説明】
【００１１】
【図１】図２乃至６と併せて本発明の第１実施形態を説明するために、装置の構成例を概略的に示すブロック図である。
【図２】図１の蓄積再生部１０１の構成例を示すブロック図である。
【図３】図１の映像音声提示部１１１の構成例を示すブロック図である。
【図４】主端末部１００及び副端末部１１０にて実行される処理を説明するフローチャートである。
【図５】主端末部１００及び副端末部１１０における映像輝度、音声音量の推移を例示した図である。
【図６】主端末部１００及び副端末部１１０における再生位置の時間的変化を例示した図である。
【図７】図８乃至１２と併せて本発明の第２実施形態を説明するために、装置の構成例を概略的に示すブロック図である。
【図８】図７の放送受信部８０１の構成例を示すブロック図である。
【図９】図７のプログラム提示部８１１の構成例を示すブロック図である。
【図１０】主端末部８００及び副端末部８１０にて実行される処理を説明するフローチャートである。
【図１１】プログラム映像透過率、プログラム音量、効果音音量の推移を例示した図である。
【図１２】主端末部８００及び副端末部８１０にてプログラムの実行を開始した時点からの時間経過を例示した図である。
【発明を実施するための形態】
【００１２】
[第１実施形態]
以下、本発明の第１実施形態に係る映像表示システムとして、第１の装置（以下、主端末部という）にて提示していた映像及び音声を、視聴者の操作指示により第２の装置（以下、副端末部という）にて提示する例を説明する。
図１は、本実施形態に係るシステムの構成例を概略的に示す図であり、主端末部１００及び副端末部１１０で構成され、例えば主端末部１００が映像表示装置であって、副端末部１１０が遠隔操作装置である。
【００１３】
主端末部１００は、蓄積再生部１０１、映像出力部１０２、音声出力部１０３を備える。蓄積再生部１０１は蓄積装置及び復号装置などから構成され、符号化された映像データ及び音声データを蓄積する。以下、符号化された映像データ及び音声データをコンテンツと称する場合がある。蓄積再生部１０１は、副端末部１１０の操作部１１４から操作信号１２５を受信し、操作信号１２５に応じて蓄積装置に蓄積された映像データ及び音声データを復号して再生する。また主端末部１００は副端末部１１０に対し、符号化された映像情報及び音声情報を含む符号化映像音声信号１２０を無線方式で送信する。映像出力部１０２はディスプレイ装置などで構成され、蓄積再生部１０１が出力した映像信号１０５を受けて映像を出力する。また音声出力部１０３は、音声アンプ及びスピーカなどで構成され、蓄積再生部１０１が出力した音声信号１０６を受けて音声を出力する。
【００１４】
副端末部１１０は、映像音声提示部１１１、映像出力部１１２、音声出力部１１３、操作部１１４を備える。映像音声提示部１１１は、復号装置などで構成され、主端末部１００から受信した符号化映像音声信号１２０を復号する。映像出力部１１２はディスプレイ装置などで構成され、映像音声提示部１１１が出力した映像信号１１５を受けて映像を出力する。音声出力部１１３は音声アンプ及びスピーカなどで構成され、映像音声提示部１１１が出力した音声信号１１６を受けて音声を出力する。操作部１１４は操作ボタンやスイッチなどを有し、視聴者の操作指示を受け付けると、赤外線などの操作信号１２５に変換して該信号を主端末部１００へ送信する。
【００１５】
図２は、図１に示した蓄積再生部１０１の構成例のブロック図である。図中の映像信号１０５、音声信号１０６、符号化映像音声信号１２０、操作信号１２５は、既述の通りである。蓄積再生部１０１は符号化映像音声蓄積部２００、符号化映像音声読み出し部２０１、デマックス部２０２、映像復号部２０３、輝度調整部２０４、音声復号部２０５、音量調整部２０６を備える。さらには符号化映像音声読み出し部２１０、符号化映像音声送信部２１１、提示制御部２２０、操作信号受信部２２１が設けられている。なお符号化映像音声読み出し部２０１は符号化映像音声蓄積部２００に対する第１の読み出し手段を構成し、符号化映像音声読み出し部２１０は符号化映像音声蓄積部２００に対する第２の読み出し手段を構成する。なお以下では、符号化映像音声読み出し部を単に読み出し部という。
【００１６】
符号化映像音声蓄積部２００は、ハードディスクドライブ装置などで構成され、符号化された映像データ及び音声データを蓄積する。映像符号化方式としては、例えば、MPEG-2 Video（ISO/IEC 13818-2）方式を用いることができる。これは、“Information technology -- Generic coding of moving pictures and associated audio information :Video”の規格による。また音声符号化方式としては、例えば、AAC（ISO/IEC 13818-7）方式を用いることができる。これは“Information technology -- Generic coding of moving pictures and associated audio information -- Part 7: Advanced Audio Coding(AAC)”の規格による。符号化映像音声蓄積部２００は、符号化した映像及び音声のデータをMPEG-2 Systems（ISO/IEC 13818-1）にて規定されているTransport Stream（以下、MPEG-2 TSという）方式により多重化する。なお符号化した映像及び音声のデータとは、MPEG-2 Video方式で符号化した映像及びAAC方式で符号化した音声のデータである。符号化映像音声蓄積部２００は、多重化した一体のデータをハードディスクドライブ装置に蓄積する。なおMPEG-2 Systemsの規格は、“Information technology -- Generic coding of moving pictures and associated audio information: Systems”である。映像符号化方式、音声符号化方式、多重化方式については本例に限らず、他の方式を用いてもよい。
【００１７】
第１の読み出し部２０１は、視聴者に提示すべき再生位置に応じた符号化映像音声のデータを、符号化映像音声蓄積部２００から読み出す。デマックス部２０２は、符号化映像音声信号を、PID（Packet Identifier）に従って符号化映像信号と符号化音声信号に分離し、各信号を映像復号部２０３と音声復号部２０５にそれぞれ出力する。なおPIDはMPEG-2 Systemsにて定義されている。
【００１８】
映像復号部２０３は、MPEG-2 Video方式などで符号化された映像信号を復号し、輝度調整部２０４に出力する。輝度調整部２０４は、映像信号の輝度を調整し、映像信号１０５を出力する。また音声復号部２０５は、AAC方式などで符号化された符号化音声信号を復号し、音量調整部２０６に出力する。音量調整部２０６は音声ボリュームなどにより構成され、音量を調整して音声信号１０６を出力する。
【００１９】
第２の読み出し部２１０は、第１の読み出し部２０１と同様、符号化映像音声蓄積部２００から、視聴者に提示すべき再生位置に応じた符号化映像音声のデータを読み出す。読み出し部２０１及び２１０は、互いに無関係な独立した再生位置に応じて符号化映像音声信号を読み出すことができる。これは、符号化映像音声蓄積部２００をランダムアクセス可能なハードディスクドライブ装置などで構成することにより実現できる。読み出し部２１０が符号化映像音声蓄積部２００から読み出した符号化映像音声信号は符号化映像音声送信部２１１に送られ、ここで該送信部は電波方式にて符号化映像音声信号１２０を送信する。電波方式としては、IEEE802.11（IEEE：The Institute of Electrical and Electronics Engineers, Inc.）方式が知られている。RTP（Real-time Transport Protocol）方式において、MPEG-2 TSを伝送する方式が規定されている。IEEE802.11とRTPを組み合わせることで、本実施形態に適用できる。
【００２０】
操作信号受信部２２１は赤外線などの操作信号１２５を受信し、操作指示を提示制御部２２０へ伝える。提示制御部２２０は、操作信号受信部２２１を介して視聴者の操作指令を受け付け、読み出し部２０１及び２１０、輝度調整部２０４、音量調整部２０６を制御する。つまり、提示制御部２２０は読み出し部２０１，２１０に対して読み出し位置をそれぞれに指示し、輝度調整部２０４に対して映像輝度を指示する。また、提示制御部２２０は音量調整部２０６に対して音量を指示する。これにより映像信号１０５、音声信号１０６、符号化映像音声信号１２０の内容が制御される。
【００２１】
図３は、図１に示す映像音声提示部１１１の構成例を示す。なお符号化映像音声信号１２０、映像信号１１５、音声信号１１６については既述の通りである。映像音声提示部１１１は、符号化映像音声受信部３１１、デマックス部３０２、映像復号部３０３、輝度調整部３０４、音声復号部３０５、音量調整部３０６、提示制御部３２０を備える。
【００２２】
符号化映像音声受信部３１１は、符号化映像音声送信部２１１が送信した符号化映像音声信号１２０を受信してデマックス部３０２に出力するとともに、符号化映像音声信号１２０の受信開始を提示制御部３２０へ通知する。デマックス部３０２、映像復号部３０３、輝度調整部３０４、音声復号部３０５、音量調整部３０６の各機能に関しては、図２に示すデマックス部２０２、映像復号部２０３、輝度調整部２０４、音声復号部２０５、音量調整部２０６と同様である。よって、それらの説明を省略する。
提示制御部３２０は、輝度調整部３０４に対して映像輝度を指示し、音量調整部３０６に対して音量を指示することで、映像信号１１５及び音声信号１１６の内容を制御する。
【００２３】
図４の左側のフローチャートは、映像及び音声を提示する装置が、主端末部１００から副端末部１１０へと切り換わる際、主端末部１００にて実行される処理の流れを示す。
主端末部１００が再生処理を開始する（Ｓ４００）。その際、読み出し部２０１は、操作信号受信部２２１及び提示制御部２２０を介して視聴者の操作指示を受け付け、指示された再生位置に応じた符号化映像音声信号を符号化映像音声蓄積部２００より読み出す。デマックス部２０２は、符号化映像音声信号のデマックス処理を実行する。そして映像復号部２０３は符号化映像信号の復号処理を実行し、音声復号部２０５は符号化音声信号の復号処理を実行する。
【００２４】
次に輝度調整部２０４は、映像の輝度が最大となるように輝度調整し（Ｓ４０１）、音量調整部２０６は、音量が最大となるように音声出力を調整する（Ｓ４０２）。そして視聴者が操作部１１４を用いて、コンテンツの提示端末装置の切り換え操作を行うと、その操作指示が操作信号受信部２２１から提示制御部２２０に通知される（Ｓ４０３）。輝度調整部２０４は映像の輝度を中間レベルに調整し（Ｓ４０４）、音量調整部２０６は音量が中間レベルとなるように音声出力を調整する（Ｓ４０５）。
【００２５】
提示制御部２２０は、読み出し部２１０が読み出すべき、読出し位置を算出する（Ｓ４０６）。この読み出し位置は、読み出し部２０１が現時点で読み出している位置よりも所定時間（以下、Ｎ秒と記す）だけ遡った位置である。この時間（Ｎ値）は１秒程度でよく、設定により視聴者が操作し易い範囲で変化させることができる。以下では、符号化映像音声蓄積部２００をＬＢＡ（Logical Block Addressing）方式に準拠したハードディスクドライブ装置を用いて構成する例について、読み出し位置の算出方法を説明する。ハードディスクドライブ装置は、その記録領域が５１２バイトを単位とするセクタに分かれており、セクタアドレスを指定することにより、５１２バイトごとにデータの読み書きが可能であるものとする。また、ハードディスクドライブ装置には、セクタアドレスが増加する順序に従って、符号化映像音声信号が時間的に連続して記録されているものとする。読み出し部２１０の読み出し位置に対応するセクタアドレスは、下式により算出される。
【数１】
【００２６】
上式中のＳＡ２は、読み出し部２１０が読み出すべき位置に対応するセクタアドレスであり、ＳＡ１は、読み出し部２０１が読み出している位置に対応するセクタアドレスである。ＢＲは、符号化映像音声信号のビットレート（符号化映像音声信号が１秒間当たりに占めるデータ容量）である。なおＳＡ２の値が整数でない場合は、切り捨て処理又は切り上げ処理を行えばよく、得られる値は、読み出し部２１０が読み出す位置に対応するセクタアドレスとなる。
上式において、ＳＡ２が負値になる場合や、ＳＡ２が、読み出し部２０１の読み出しているコンテンツの記録範囲外のセクタアドレスになる場合には、セクタアドレスの変更を要する。つまり、読み出し部２０１が読み出しているコンテンツの先頭位置に対応するセクタアドレスを、読み出し部２１０の読み出し位置に対応するセクタアドレスＳＡ２とする。また、この場合、提示制御部２２０は下式によりＮの値を変更する。
【数２】
【００２７】
こうして読み出し部２１０は、読み出し部２０１に比してＮ秒の遅延時間をもって符号化映像音声蓄積部２００から符号化映像音声信号を読み出す。この読み出し位置は、Ｓ４０６にて算出した読み出し位置である。符号化映像音声送信部２１１は、符号化映像音声信号１２０の送信を開始する（Ｓ４０７）。そしてＮ秒が経過するまでの時間待ち処理（Ｓ４０８）の後、輝度調整部２０４は、映像の輝度が最小となるように輝度調整する（Ｓ４０９）。音量調整部２０６は、音量が最小となるように音声出力を調整する（Ｓ４１０）。
主端末部１００が再生を停止し（Ｓ４１１）、その際、読み出し部２０１は符号化映像音声の読み出しを停止する。デマックス部２０２は、デマックス処理を停止し、映像復号部２０３や音声復号部２０５は復号処理を停止する。
【００２８】
符号化映像音声送信部２１１は、符号化映像音声信号１２０の送信を停止する（Ｓ４１２）。その際、読み出し部２１０は符号化映像音声の読み出しを停止する。送信停止の原因には、提示対象であるコンテンツが終端に到達した場合や、視聴者の停止操作指示による場合などが挙げられるが、その如何は問わない。
【００２９】
図４の右側のフローチャートは、映像及び音声を提示する装置が、主端末部１００から副端末部１１０へ切り換わる際、副端末部１１０にて実行される処理の流れを示す。先ず、符号化映像音声受信部３１１は、符号化映像音声信号１２０の受信を検知し、該信号をデマックス部３０２に出力するとともに、符号化映像音声信号１２０の受信を開始した旨を提示制御部３２０に通知する（Ｓ５００）。本ステップＳ５００は前記Ｓ４０７に対応しており、主端末部１００が符号化映像音声信号１２０の送信を開始することにより、副端末部１１０は符号化映像音声信号１２０の受信を開始する。
【００３０】
副端末部１１０が再生を開始し（Ｓ５０１）、その際、デマックス部３０２は、符号化映像音声信号のデマックス処理を実行する。映像復号部３０３は符号化映像信号の復号処理を実行し、音声復号部３０５は符号化音声信号の復号処理を実行する。そして輝度調整部３０４は、映像の輝度が中間レベルとなるように輝度調整し（Ｓ５０２）、音量調整部３０６は、音量が中間レベルとなるように音声出力を調整する（Ｓ５０３）。そして、Ｎ秒が経過するまでの時間待ち処理（Ｓ５０４）の後、輝度調整部３０４は、映像の輝度が最大となるように輝度調整する（Ｓ５０５）。音量調整部３０６は、音量が最大となるように音声出力を調整する（Ｓ５０６）。
【００３１】
符号化映像音声受信部３１１は符号化映像音声信号１２０の受信を停止する（Ｓ５０７）。本ステップＳ５０７は前記Ｓ４１２に対応しており、主端末部１００が符号化映像音声信号１２０の送信を停止することにより、副端末部１１０は符号化映像音声信号１２０の受信を停止する。
副端末部１１０が再生を停止し（Ｓ５０８）。その際、デマックス部３０２はデマックス処理を停止する。映像復号部３０３、音声復号部３０５は復号処理を停止する。
【００３２】
図５は、主端末部１００の映像輝度、音声音量、及び副端末部１１０の映像輝度、音声音量の時間的な推移例を示す。横軸は経過時間を表し、T600乃至603が時刻を示す。また上方に主端末部１００の映像輝度レベルと音声音量レベルの時間的変化を示し、下方に副端末部１１０の映像輝度レベルと音声音量レベルの時間的変化を示している。
時刻T600にて主端末部１００は再生を開始する（図４のＳ４００参照）。このとき、主端末部１００により提示される映像の輝度は最大であり（Ｓ４０１参照）、主端末部１００による音声出力の音量は最大である（Ｓ４０２参照）。
【００３３】
時刻T600から時刻T601までの期間中、主端末部１００はコンテンツの映像及び音声を提示する。一方、副端末部１１０では、映像輝度及び音声音量ともに最小である。
時刻T601にて視聴者によって端末切り換え操作が行われる（Ｓ４０３参照）。主端末部１００では、映像輝度が中間レベルとなり（Ｓ４０４参照）、音量が中間レベルとなる（Ｓ４０５参照）。
主端末部１００が符号化映像音声信号１２０の送信を開始し（Ｓ４０７参照）、副端末部１１０は符号化映像音声信号１２０の受信を開始する（Ｓ５００参照）。そして副端末部１１０は再生を開始する（Ｓ５０１参照）。その際、副端末部１１０では、映像輝度が中間レベルであり（Ｓ５０２参照）、音量レベルが中間レベルである（Ｓ５０３参照）。
時刻T601からＮ秒間経過すると時刻T602となる（Ｓ４０８及びＳ５０４参照）。時刻T601から時刻T602までの移行期間中、主端末部１００及び副端末部１１０はともにコンテンツの映像及び音声を提示する。
【００３４】
時刻T602にて、主端末部１００の映像輝度は最小となり（Ｓ４０９参照）、主端末部１００の音声音量も最小となる（Ｓ４１０参照）。その後、主端末部１００は再生を停止する（Ｓ４１１参照）。一方、副端末部１１０では映像輝度が最大となり（Ｓ５０５参照）、音声音量が最大となる（Ｓ５０６参照）。
時刻T602から時刻T603までの期間中、副端末部１１０はコンテンツの映像及び音声を提示する。一方、主端末部１００では、映像輝度及び音声音量ともに最小である。
時刻T603にて、主端末部１００は符号化映像音声信号１２０の送信を停止する（Ｓ４１２参照）。副端末部１１０は符号化映像音声信号１２０の受信を停止する（Ｓ５０７参照）。副端末部１１０は再生を停止する（Ｓ５０８参照）。
【００３５】
図６は横軸に時刻を示し、縦軸に主端末部１００及び副端末部１１０における再生位置の時間的変化を示したグラフである。図中の時刻T600乃至603は図５に示す時刻と同一時刻である。
主端末部１００における再生位置は、時刻T600での位置（点Ｐ０参照）と時刻T602での位置（点Ｐ２参照）とを繋いだ右上がりの線分に従って時間的に変化する。また、副端末部１１０における再生位置は、時刻T601での位置（点Ｐ１参照）と時刻T603での位置（点Ｐ３参照）とを繋いだ右上がりの線分に従って時間的に変化する。
【００３６】
時刻T600にて主端末部１００は再生を開始する（図４のＳ４００参照）。そして時刻T601にて端末切り換え操作が行われ（Ｓ４０３参照）、副端末部１１０が再生を開始する（Ｓ５０１参照）。読み出し部２１０は、読み出し部２０１が読み出している位置よりも、Ｎ秒分だけ時間的に遡った位置のデータを読み出す。したがって、図示のように、副端末部１１０が再生する位置は、主端末部１００が再生する位置に対して、Ｎ秒遡った位置となる。
時刻T601からＮ秒が経過すると時刻T602となり（Ｓ４０８及びＳ５０４参照）、時刻T602にて主端末部１００は再生を停止する（Ｓ４１１参照）。副端末部１１０はその後も再生を続行し、時刻T603にて再生を停止する（Ｓ５０８参照）。
【００３７】
第１実施形態によれば、コンテンツを提示する装置が切り換わる際、切り換え先の装置は切り換え元の装置よりも時間的に遅れてコンテンツを提示する。これにより、両装置においてコンテンツが時間的に重複して提示されるので、視聴者の視点移動に要する期間中に提示されるコンテンツ映像を視聴者が見逃さないように防止できる。
【００３８】
[第２実施形態]
次に本発明の第２実施形態について説明する。第２実施形態では、主端末部にて提示していたプログラムコンテンツを、副端末部へと切り換えて提示する例を説明する。ここで、プログラムコンテンツとは、プログラムの実行により生成される映像および音声を含むコンテンツを指す。
図７は、第２実施形態に係るシステムの概略構成を示し、主端末部８００及び副端末部８１０から構成される。主端末部８００は、放送受信部８０１、映像出力部８０２、音声出力部８０３を備える。放送受信部８０１はチューナ及び復号装置などで構成され、副端末部８１０の操作部８１４から操作信号８２５を受信する。放送受信部８０１は、操作信号８２５に応じて放送波８３０を受信し、復調及び復号したデータに基づき、映像出力部８０２及び音声出力部８０３を用いて放送番組を提示する。また、主端末部８００は、復号された映像音声信号８２０、プログラム信号８２１、及びプログラム提示制御信号８２２を副端末部８１０へ無線送信する。映像出力部８０２はディスプレイ装置などで構成され、放送受信部８０１が出力した映像信号８０５を受けて映像を出力する。また音声出力部８０３は音声アンプ及びスピーカなどで構成され、放送受信部８０１が出力した音声信号８０６を受けて音声を出力する。
【００３９】
副端末部８１０は、プログラム提示部８１１、映像出力部８１２、音声出力部８１３、操作部８１４を備える。プログラム提示部８１１はプログラムを実行するマイクロプロセッサなどで構成され、主端末部８００から復号された映像音声信号８２０、プログラム信号８２１、及びプログラム提示制御信号８２２を受信する。プログラム提示部８１１は、主端末部８００から受けとったプログラムを実行し、映像出力部８１２及び音声出力部８１３を用いて映像及び音声をそれぞれ出力する。映像出力部８１２はディスプレイ装置などで構成され、プログラム提示部８１１が出力した映像信号８１５を受けて映像を出力する。また、音声出力部８１３は音声アンプ及びスピーカなどで構成され、プログラム提示部８１１が出力した音声信号８１６を受けて音声を出力する。操作部８１４は操作ボタンやスイッチなどを有しており、視聴者の操作指示を受け付け、赤外線通信などにより操作信号８２５を主端末部８００に送信する。
【００４０】
図８は、放送受信部８０１の構成例を示しており、図中の放送波８３０や、各信号８０５、８０６、８２０乃至８２２、８２５については既述の通りである。放送受信部８０１は、チューナ部９００、デマックス部９０１、映像復号部９０２、映像合成部９０３、音声復号部９０４、音声合成部９０５、映像音声送信部９０６を備える。放送受信部８０１はさらに、プログラム復号部９０７、第１のプログラム実行部９０８、プログラム映像生成部９０９、プログラム映像透過率調整部９１０、プログラム音声生成部９１１、プログラム音量調整部９１２、遅延処理部９２０を備える。さらにはプログラム送信部９２１、プログラム提示制御部９３０、番組情報取得部９４０、選局制御部９４１、操作信号受信部９４２が設けられている。
【００４１】
チューナ部９００は、ISDB-T（Integrated Services Digital Broadcasting for Terrestrial）方式などで変調された放送波８３０を復調し、符号化映像音声信号を出力する。後段のデマックス部９０１は、符号化映像音声信号をPIDに従って分離する。分離後の符号化映像信号は映像復号部９０２へ送られ、符号化音声信号は音声復号部９０４へ送られ、符号化プログラム信号はプログラム復号部９０７へ送られ、番組情報信号は番組情報取得部９４０へ送られる。映像復号部９０２は、MPEG-2 Video方式などに従う符号化映像信号を復号し、映像信号を出力する。音声復号部９０４は、AAC方式などに従う符号化音声信号を復号し、音声信号を出力する。映像音声送信部９０６は、映像復号部９０２からの映像信号、及び音声復号部９０４からの音声信号を無線方式で副端末部８１０に送信する。無線方式としては、Wireless HD（登録商標）やWHDI（登録商標）が提案されており、一般にWireless HDMI（登録商標）と呼ばれている。なおWHDIは“Wireless Home Digital Interface”の略号であり、HDMIは“High-Definition Multimedia Interface”の略号であり、両方式とも本実施形態に適用可能である。
【００４２】
プログラム復号部９０７は符号化されたプログラム信号を復号する。放送波８３０を介してプログラムを送信する方法としては、例えば、MHP（ETSI ES 201 812）方式が知られており、本実施形態に適用可能である。これは、“Multimedia Home Platform”の規格による。MHP方式にて放送局は、Sun Microsystems社が開発したプログラミング言語Java（登録商標）のバイトコードをDSM-CC（ISO/IEC 13818-10）方式を用いて符号化して送信する。これは、“Information technology -- Generic coding of moving pictures and associated audio information -- Part 10: Conformance extensions for Digital Storage Media Command and Control (DSM-CC) ”の規格による。受信機は符号化されたプログラム信号を受信して復号し、受信機内のJVMにより実行する。なおJVMは“Java（登録商標） Virtual Machine”の略号である。
【００４３】
プログラム実行部９０８は、図示しないマイクロプロセッサによりプログラムを実行する。前述のようにJVMによってJava（登録商標）バイトコードが解釈されて実行される。後段のプログラム映像生成部９０９は、点・線・矩形などの図形描画機能を組み合わせて、プログラム実行部９０８が指示したグラフィックを描画し、プログラム映像信号として出力する。プログラム映像透過率調整部９１０はプログラム映像生成部９０９からのプログラム映像信号を受けて、後述のプログラム提示制御部９３０からの指令に従い、プログラム映像信号に透過率情報を付加することでプログラム映像の透過率を調整する。つまり、ここでは映像合成部９０３が映像信号とプログラム映像信号を合成する際に使用するプログラム映像の透過率を調整する処理が実行される。なおプログラム映像透過率調整部を以下、単に透過率調整部という。
映像合成部９０３は、映像復号部９０２が出力した映像信号と、透過率調整部９１０が出力したプログラム映像信号を合成する。この際、プログラム映像信号の透過率に従い、映像信号とプログラム映像信号が合成される。例えば透過率を百分率で表すものとし、０％のとき（以下、プログラム映像が「不透明」であると表現する）、映像復号部９０２による映像がプログラム映像により遮られるため、プログラム映像信号だけが映像合成部９０３より出力される。透過率が５０％のとき（以下、プログラム映像が「半透明」であると表現する）、映像復号部９０２による映像とプログラム映像が半々に混合された状態の映像信号が映像合成部９０３より出力される。透過率が１００％のとき（以下、プログラム映像が「透明」であると表現する）、映像復号部９０２による映像がプログラム映像により遮られずに、その映像信号だけが映像合成部９０３より出力される。
【００４４】
プログラム音声生成部９１１は、プログラム実行部９０８が指示した音声信号を生成する。生成方法としては、例えば、AAC方式により符号化された音声をプログラム中に埋め込み、音声復号部（図示せず）により音声データを復号する方法がある。プログラム音量調整部９１２は音声ボリュームなどを用いて構成され、音声出力の音量調整を行う。音声合成部９０５は、音声復号部９０４が出力する音声信号と、プログラム音量調整部９１２が出力するプログラム音声信号とを合成する。遅延処理部９２０は、プログラム復号部９０７が出力したプログラム信号を図示しないメモリに一時記憶し、プログラム提示制御部９３０からその出力を命じられた場合、プログラムを読み出してプログラム送信部９２１へ出力する。プログラム送信部９２１は、遅延処理部９２０が出力したプログラム信号を所定の電波方式で副端末部８１０に送信する。電波方式としては、例えば、IEEE802.11方式とFTP（File Transfer Protocol）方式を組み合わせて、本実施形態に適用できる。
【００４５】
プログラム提示制御部９３０は、透過率調整部９１０に対して透過率を指示し、プログラム音量調整部９１２に対して音量を指示し、遅延処理部９２０に対してプログラム送信開始タイミングを指示する。これにより映像信号８０５、音声信号８０６、プログラム信号８２１の内容がそれぞれ制御される。また、プログラム提示制御部９３０は、プログラム提示制御信号８２２、つまり副端末部８１０におけるプログラム提示のタイミングを制御する信号を出力する。プログラム提示制御信号８２２の送受信方式としては、例えば、IEEE802.11方式とRFC854（TELNET PROTOCOL SPECIFICATION）方式を組み合わせて、本実施形態に適用できる。
【００４６】
番組情報取得部９４０は、デマックス部９０１からの番組情報、例えばEIT（Event Information Table）などで構成される番組情報を取得する。操作信号受信部９４２は、赤外線通信などで操作信号８２５を受信し、操作指示を選局制御部９４１へ伝える。選局制御部９４１は、操作信号受信部９４２を介して受け付けた視聴者の操作指示に従って選局制御を行う。具体的には、選局すべきチャンネルを、チューナ部９００へ伝える処理が行われる。さらに、選局すべきチャンネルの映像情報を伝送するPIDを、番組情報取得部９４０より読み出して映像復号部９０２へ伝える処理が行われる。同様に、音声情報を伝送するPIDを音声復号部９０４へ伝えるとともに、プログラム情報を伝送するPIDをプログラム復号部９０７へ伝える処理が実行される。なおPIDにより多重化したデータを取り扱う方法は、MPEG-2 Systemsの規格に詳述されている。
【００４７】
図９は、プログラム提示部８１１の構成例を示し、図中の各信号８１５、８１６、８２０乃至８２２は既述の通りである。プログラム提示部８１１は、映像音声受信部１００６、プログラム受信部１０２１、第２のプログラム実行部１００８、プログラム映像生成部１００９、プログラム映像透過率調整部１０１０、映像合成部１００３を備える。さらには、プログラム音声生成部１０１１、プログラム音量調整部１０１２、効果音生成部１０４０、効果音音量調整部１０４１、音声合成部１００５、プログラム提示制御部１０３０が設けられている。
【００４８】
映像音声受信部１００６は、映像音声送信部９０６が送信した映像音声信号８２０を電波方式で受信する。プログラム受信部１０２１は、プログラム送信部９２１からプログラム信号８２１を電波方式で受信し、受信したプログラム信号をプログラム実行部１００８に出力する。なおプログラム実行部１００８、プログラム映像生成部１００９、透過率調整部１０１０、プログラム音声生成部１０１１、プログラム音量調整部１０１２の機能に関しては、図８にて説明した各部９０８乃至９１２と同様であるため、それらの説明を省略する。
【００４９】
効果音生成部１０４０は効果音信号を生成して、これを効果音音量調整部１０４１に出力し、音声合成部１００５を介して音声出力部８１３から効果音を発生させる。生成方法としては、例えば、AAC方式により予め音声データを作成し不揮発性メモリ（図示せず）に格納しておき、音声復号部（図示せず）により音声データを復号する方法がある。効果音については視聴者の注意を喚起する音声であれば、その如何は問わない。効果音音量調整部１０４１は、音声ボリュームなどを用いて構成され、効果音の音量調整を行う。
【００５０】
映像合成部１００３は、映像音声受信部１００６が出力する映像信号と、透過率調整部１０１０が出力するプログラム映像信号を合成する。透過率調整部１０１０が出力するプログラム映像信号は透過率の情報を含む。透過率を映像合成に適用する方法は、前述した通りである。音声合成部１００５は、映像音声受信部１００６が出力する音声信号と、プログラム音量調整部１０１２が出力するプログラム音声信号と、効果音音量調整部１０４１が出力する効果音信号を合成する。
【００５１】
プログラム提示制御部１０３０は、プログラム提示制御信号８２２を受けて、透過率調整部１０１０に対して透過率を指示し、プログラム音量調整部１０１２に対してプログラム音量を指示し、効果音音量調整部１０４１に対して音量を指示する。これにより、映像信号８１５及び音声信号８１６の内容がそれぞれ制御される。
図１０の左側のフローチャートは、プログラム映像及びプログラム音声を提示する端末部が主端末部８００から副端末部８１０へ切り換わる際、主端末部８００にて実行される処理の流れを示す。
【００５２】
放送受信部８０１は予めプログラムを受信している状態にあるものとする。遅延処理部９２０は、内部のメモリにプログラムを記憶させる（Ｓ１１００）。主端末部８００において、プログラム提示制御部９３０の指示により、プログラム実行部９０８がプログラムの実行を開始する（Ｓ１１０１）。プログラム映像生成部９０９は、プログラム実行部９０８の指示に従い、プログラム映像信号を生成する。プログラム音声生成部９１１は、プログラム実行部９０８の指示に従い、プログラム音声信号を生成する。
【００５３】
透過率調整部９１０は、プログラム映像が不透明となるよう透過率を０％に調整する（Ｓ１１０２）。プログラム音量調整部９１２は、プログラム音量が最大となるように調整する（Ｓ１１０３）。そしてＮ秒の時間経過待ちとなる（Ｓ１１０４）。Ｎ値は１０程度でよく、この値は視聴者が操作し易い範囲で変化させることができる。プログラム提示制御部９３０の指示により、遅延処理部９２０はプログラムをプログラム送信部９２１へ出力し、プログラム送信部９２１は副端末部８１０に対してプログラム信号８２１を送信する（Ｓ１１０５）。そしてＭ秒の時間経過待ちとなる（Ｓ１１０６）。Ｍは正値であればよい。
【００５４】
プログラム提示制御部９３０は、副端末部８１０へプログラム提示制御信号８２２（この場合、プログラム提示開始命令）を送信する（Ｓ１１０７）。透過率調整部９１０は、プログラム映像が半透明となるよう透過率を５０％に調整する（Ｓ１１０８）。プログラム音量調整部９１２は、プログラム音量を最小に調整する（Ｓ１１０９）。そしてＮ秒の時間経過待ちとなる（Ｓ１１１０）。
透過率調整部９１０は、プログラム映像が透明となるよう透過率を１００％に調整する（Ｓ１１１１）。主端末部８００において、プログラム実行部９０８が、プログラムの実行を停止する（Ｓ１１１２）。
【００５５】
図１０の右側のフローチャートは、プログラム映像及びプログラム音声を提示する装置が主端末部８００から副端末部８１０へ切り換わる際、副端末部８１０にて実行される処理の流れを示す。
プログラム受信部１０２１は、主端末部８００からプログラム信号８２１を受信し、プログラム実行部１００８へプログラムを出力する（Ｓ１２００）。本ステップＳ１２００は前記Ｓ１１０５に対応しており、主端末部８００がプログラムを送信し、副端末部８１０はプログラムを受信する。プログラム実行部１００８はプログラムの実行を開始する（Ｓ１２０１）。その際、プログラム映像生成部１００９は、プログラム実行部１００８の指示に従い、プログラム映像信号を生成する。プログラム音声生成部１０１１は、プログラム実行部１００８の指示に従い、プログラム音声信号を生成する。
【００５６】
透過率調整部１０１０はプログラム映像が透明となるよう透過率を１００％に調整する（Ｓ１２０２）。プログラム音量調整部１０１２はプログラム音量を最小に調整する（Ｓ１２０３）。効果音音量調整部１０４１は効果音音量を最小に調整する（Ｓ１２０４）。
プログラム提示制御部１０３０は前記プログラム提示開始命令を受信する（Ｓ１２０５）。本ステップＳ１２０５は前記Ｓ１１０７に対応しており、主端末部８００がプログラム提示開始命令を送信し、これを副端末部８１０が受信する。透過率調整部１０１０はプログラム映像が半透明となるよう透過率を５０％に調整する（Ｓ１２０６）。効果音音量調整部１０４１は効果音の音量を最大に調整する（Ｓ１２０７）。そしてＮ秒の時間経過待ちとなる（Ｓ１２０８）。透過率調整部１０１０はプログラム映像が不透明となるよう透過率を０％に調整する（Ｓ１２０９）。プログラム音量調整部１０１２はプログラム音量を最大に調整する（Ｓ１２１０）。効果音音量調整部１０４１は効果音の音量を最小に調整する（Ｓ１２１１）。
【００５７】
プログラム実行部１００８はプログラムの実行を停止する（Ｓ１２１２）。プログラムの実行停止については、視聴者が操作部８１４を介して実行停止の操作をしたとき、あるいはプログラムによる処理が完了したときなどが挙げられるが、本実施形態にて停止条件の如何は問わない。
図１１は、主端末部８００のプログラム映像透過率、プログラム音量、及び副端末部８１０のプログラム映像透過率、プログラム音量、効果音音量の時間的な推移例を示す。横軸は経過時間を表し、T1300乃至1304が時刻を示す。また上方に主端末部８００のプログラム映像透過率、プログラム音量レベルの時間的変化を示し、下方に副端末部８１０のプログラム映像透過率、プログラム音量レベル、効果音の音量レベルの時間的変化を示している。
【００５８】
時刻T1300にて、主端末部８００はプログラムの実行を開始する（図１０のＳ１１０１参照）。この際、主端末部８００のプログラム映像透過率は最小（プログラム映像が不透明：０％）であり（Ｓ１１０２参照）、主端末部８００のプログラム音量は最大である（Ｓ１１０３参照）。
時刻T1300からＮ秒が経過すると時刻T1301となる（Ｓ１１０４参照）。この時点で主端末部８００はプログラムを副端末部８１０に送信する（Ｓ１１０５参照）。副端末部８１０はプログラムを受信し（Ｓ１２００参照）、その実行を開始する（Ｓ１２０１参照）。この際、副端末部８１０のプログラム映像透過率は最大（プログラム映像が透明：１００％）である（Ｓ１２０２参照）。副端末部８１０のプログラム音量は最小であり（Ｓ１２０３参照）、副端末部８１０の効果音の音量は最小である（Ｓ１２０４参照）。
【００５９】
時刻T1301からＭ秒が経過すると時刻T1302となる（Ｓ１１０６参照）。時刻T1300から時刻T1302までの期間中、主端末部８００はプログラムコンテンツを提示するが、副端末部８１０はプログラムコンテンツを提示しない。時刻T1302にて、主端末部８００はプログラム提示開始命令を副端末部８１０に送信する（Ｓ１１０７参照）。時刻T1302から時刻T1303までの移行期間中、主端末部８００のプログラム映像は半透明となり（Ｓ１１０８参照）、主端末部８００のプログラム音量は最小となる（Ｓ１１０９参照）。なお、本例ではプログラム音量調整部１０１２により、移行期間中にプログラム音量が最小となるように調整しているが、移行期間中にプログラム音声を出力しない形態でもよい。つまり、この場合にはプログラム音量調整部１０１２により、移行期間中にプログラム音声のミュート処理が行われる。
【００６０】
副端末部８１０は主端末部８００からプログラム提示開始命令を受信し（Ｓ１２０５参照）、プログラムの提示を開始する。この際、副端末部８１０のプログラム映像は半透明であり（Ｓ１２０６参照）、副端末部８１０の効果音の音量は最大である（Ｓ１２０７参照）。副端末部８１０のプログラム音量は、引き続き最小である。
時刻T1302からＮ秒が経過すると時刻T1303となる（Ｓ１１１０及びＳ１２０８参照）。時刻T1302から時刻T1303までの期間中、主端末部８００及び副端末部８１０はともにプログラムコンテンツを提示する。
【００６１】
時刻T1303から、主端末部８００のプログラム映像は透明となる（Ｓ１１１１参照）。主端末部８００はプログラムの実行を停止する（Ｓ１１１２参照）。副端末部８１０のプログラム映像は不透明となり（Ｓ１２０９参照）、副端末部８１０のプログラム音量は最大となり（Ｓ１２１０参照）、副端末部８１０の効果音の音量は最小となる（Ｓ１２１１参照）。時刻T1303から時刻T1304までの期間中、副端末部８１０はプログラムコンテンツを提示するが、主端末部８００はプログラムコンテンツを提示しない。そして時刻T1304にて、副端末部８１０はプログラムの実行を停止する（Ｓ１２１２参照）。
図１２は、横軸に時刻を示し、縦軸には主端末部８００及び副端末部８１０がプログラムの実行を開始した時点からの経過時間を示したグラフである。図中の時刻T1300乃至1304は図１１に示す時刻と同一時刻である。
【００６２】
主端末部８００のプログラム実行に係る時間経過は、時刻T1300の時点を始点（点Ｑ０参照）とし、時刻T1303の時点を終点（点Ｑ３参照）する右上がりの線分に従って変化する。また、副端末部８１０のプログラム実行に係る時間経過は、時刻T1301の時点を始点（点Ｑ１参照）とし、時刻T1304の時点を終点（点Ｑ４参照）とする右上がりの線分に従って変化する。
【００６３】
時刻T1300にて主端末部８００はプログラムの実行を開始する（Ｓ１１０１参照）。時刻T1300からＮ秒が経過すると時刻T1301となり（Ｓ１１０４参照）、副端末部８１０がプログラムの実行を開始する（Ｓ１２０１参照）。時刻T1301からＭ秒が経過すると、時刻T1302となり（Ｓ１１０６参照）、主端末部８００から副端末部８１０へプログラム提示開始命令が送信され（Ｓ１１０７参照）、副端末部８１０はプログラム映像の提示を開始する。
【００６４】
時刻T1302からＮ秒が経過すると時刻T1303となり（Ｓ１１１０及びＳ１２０８参照）、主端末部８００はプログラムの実行を停止する（Ｓ１１１２参照）。その後、時刻T1304にて、副端末部８１０はプログラムの実行を停止する（Ｓ１２１２参照）。
以上のように、副端末部８１０は、主端末部８００よりもＮ秒の遅延時間後にプログラムの実行を開始する。従って、時刻T1303にて副端末部８１０が提示するプログラム内容は、時刻T1302にて主端末部８００が提示するプログラム内容に相当する。
【００６５】
第２実施形態によれば、端末装置を切り換える際に、切り換え先の装置は、切り換え元の装置よりも時間的に遅れてプログラムコンテンツを提示する。両装置においてプログラム映像が時間的に重複して提示されるため、視聴者の視点移動に要する期間に提示されるプログラム映像を視聴者が見逃さないように防止できる。また第２実施形態によると、切り換え先の装置から効果音を発することにより、視聴者に注意を喚起することができる。すなわち、プログラムコンテンツの提示装置が切り換わったことに視聴者が気づかず、映像を見逃してしまうといった事態が起きないように防止できる。
【符号の説明】
【００６６】
１００，８００ 主端末部（第１の装置）
１０２，８０２ 映像出力部
１１０，８１０ 副端末部（第２の装置）
２００ 符号化映像音声蓄積部
２０１，２１０ 符号化映像音声読み出し部
２０４，３０４ 輝度調整部
２１１ 符号化映像音声送信部
２２０，３２０ 提示制御部
９０６ 映像音声送信部
９０８，１００８ プログラム実行部
９１０，１０１０ プログラム映像透過率調整部
９２０ 遅延処理部
９２１ プログラム送信部
９３０，１０３０ プログラム提示制御部
１０１２ プログラム音量調整部
１０４０ 効果音生成部
【技術分野】
【０００１】
本発明は、映像、音声、データ放送、アプリケーションなどのコンテンツを提示する映像表示システム及びその制御方法に関するものである。ここでアプリケーションは、マイクロプロセッサにより実行されることで映像や音声を生成することができるコンピュータプログラムを含む。
【背景技術】
【０００２】
現在では放送、ネットワークを経由したダウンロードや、ＤＶＤ等の記録媒体を含む様々な媒体を介して、映像及び音声、データ放送、アプリケーションを含む様々なコンテンツが提供されている。多種多様なコンテンツを視聴者に利便性よく提供するため、大画面及び大型スピーカを備える主端末装置と、小画面及び小型スピーカを備える副端末装置を用いたコンテンツ提供システムが知られている。
【０００３】
コンテンツ提供形態には以下に示す形態が考えられる。
・主端末装置及び副端末装置において同時に同じコンテンツを提供する形態。
・主端末装置及び副端末装置においてそれぞれ別のコンテンツを提供する形態。
・主端末装置又は副端末装置の一方のみでコンテンツを提供する形態。
【０００４】
これら様々な形態を切り換えるため、主端末装置で提示していたコンテンツを副端末装置に切り換えて提示する必要性や、逆に副端末装置で提示していたコンテンツを主端末装置に切り換えて提示する必要性が生じる。液晶投影装置を用いて静止画を投影するプレゼンテーション環境において、最新画像とプレゼンテーション切り換え直前の画像を同時に表示する技術が開示されている（特許文献１参照）。すなわち、液晶投影装置への入力画像信号が切り換わると、液晶投影装置は最新画像を表示し、液晶投影装置が備える画像信号出力へ切り換わる直前の画像を出力し、画像信号出力へ接続された別の液晶投影装置が切り換え直前の画像を表示する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−０４９４２４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１に開示されている技術を動画映像や動的グラフィック描画を伴うアプリケーションなどのコンテンツに適用すると、視聴者がコンテンツを見逃す虞がある。つまり、コンテンツ映像を表示する液晶投影装置を切り換える際、切り換えに対する視聴者の視覚反応が遅れると、切り換え時に提示されているコンテンツ映像を見逃してしまう。静止画を表示するプレゼンテーションにおいては、視聴者の反応が遅れても、同じ内容が表示され続けるため、見逃しが生じる虞はない。しかし、動画映像や動的グラフィック描画を伴うアプリケーションなどのコンテンツの場合、表示内容が常に変化するため、見逃しの可能性が高まる。
【０００７】
特に、コンテンツを提示する端末装置を切り換える際、視聴者の視点移動が大きい環境において、視点移動に要する期間中に提示されるコンテンツ映像を視聴者が見逃す虞があった。視聴者の視点移動が大きい環境としては、例えば、視聴者の前方に大画面で大型スピーカを備えるコンテンツ提示端末装置が位置し、視聴者が手元に小画面で小型スピーカを備えるコンテンツ提示端末装置を持っている状況が挙げられる。
【０００８】
そこで、コンテンツ提示端末装置の切り換え時に、切り換え先の装置において切り換え元よりも時間的に遅れてコンテンツを提示すれば、両装置において切り換え時のコンテンツを時間的に重複して提示できる。本発明は、視聴者の視点移動に要する期間に提示されるコンテンツ映像を視聴者が見逃さないように防止することを目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、本発明に係る映像表示システムは、第１の装置及び第２の装置を備え、前記第１の装置から前記第２の装置へと映像の表示を切り換える際の移行期間にて前記第１の装置及び前記第２の装置で映像を時間的に重複して表示させる。前記第１の装置は、映像を表示させるために映像信号を出力する映像出力手段と、映像信号を前記第２の装置に送信する送信手段と、前記映像出力手段が映像信号を出力した後で遅延時間をもって当該映像信号を前記第２の装置に送信するように前記送信手段を制御する制御手段と、を備える。前記第２の装置は前記送信手段からの映像信号を受信し、前記移行期間にて、前記第１の装置で表示される映像よりも時間的に遅れて映像を表示する。
【発明の効果】
【００１０】
本発明は、視聴者の視点移動に要する期間中に提示される映像を視聴者が見逃さないように防止できる。
【図面の簡単な説明】
【００１１】
【図１】図２乃至６と併せて本発明の第１実施形態を説明するために、装置の構成例を概略的に示すブロック図である。
【図２】図１の蓄積再生部１０１の構成例を示すブロック図である。
【図３】図１の映像音声提示部１１１の構成例を示すブロック図である。
【図４】主端末部１００及び副端末部１１０にて実行される処理を説明するフローチャートである。
【図５】主端末部１００及び副端末部１１０における映像輝度、音声音量の推移を例示した図である。
【図６】主端末部１００及び副端末部１１０における再生位置の時間的変化を例示した図である。
【図７】図８乃至１２と併せて本発明の第２実施形態を説明するために、装置の構成例を概略的に示すブロック図である。
【図８】図７の放送受信部８０１の構成例を示すブロック図である。
【図９】図７のプログラム提示部８１１の構成例を示すブロック図である。
【図１０】主端末部８００及び副端末部８１０にて実行される処理を説明するフローチャートである。
【図１１】プログラム映像透過率、プログラム音量、効果音音量の推移を例示した図である。
【図１２】主端末部８００及び副端末部８１０にてプログラムの実行を開始した時点からの時間経過を例示した図である。
【発明を実施するための形態】
【００１２】
[第１実施形態]
以下、本発明の第１実施形態に係る映像表示システムとして、第１の装置（以下、主端末部という）にて提示していた映像及び音声を、視聴者の操作指示により第２の装置（以下、副端末部という）にて提示する例を説明する。
図１は、本実施形態に係るシステムの構成例を概略的に示す図であり、主端末部１００及び副端末部１１０で構成され、例えば主端末部１００が映像表示装置であって、副端末部１１０が遠隔操作装置である。
【００１３】
主端末部１００は、蓄積再生部１０１、映像出力部１０２、音声出力部１０３を備える。蓄積再生部１０１は蓄積装置及び復号装置などから構成され、符号化された映像データ及び音声データを蓄積する。以下、符号化された映像データ及び音声データをコンテンツと称する場合がある。蓄積再生部１０１は、副端末部１１０の操作部１１４から操作信号１２５を受信し、操作信号１２５に応じて蓄積装置に蓄積された映像データ及び音声データを復号して再生する。また主端末部１００は副端末部１１０に対し、符号化された映像情報及び音声情報を含む符号化映像音声信号１２０を無線方式で送信する。映像出力部１０２はディスプレイ装置などで構成され、蓄積再生部１０１が出力した映像信号１０５を受けて映像を出力する。また音声出力部１０３は、音声アンプ及びスピーカなどで構成され、蓄積再生部１０１が出力した音声信号１０６を受けて音声を出力する。
【００１４】
副端末部１１０は、映像音声提示部１１１、映像出力部１１２、音声出力部１１３、操作部１１４を備える。映像音声提示部１１１は、復号装置などで構成され、主端末部１００から受信した符号化映像音声信号１２０を復号する。映像出力部１１２はディスプレイ装置などで構成され、映像音声提示部１１１が出力した映像信号１１５を受けて映像を出力する。音声出力部１１３は音声アンプ及びスピーカなどで構成され、映像音声提示部１１１が出力した音声信号１１６を受けて音声を出力する。操作部１１４は操作ボタンやスイッチなどを有し、視聴者の操作指示を受け付けると、赤外線などの操作信号１２５に変換して該信号を主端末部１００へ送信する。
【００１５】
図２は、図１に示した蓄積再生部１０１の構成例のブロック図である。図中の映像信号１０５、音声信号１０６、符号化映像音声信号１２０、操作信号１２５は、既述の通りである。蓄積再生部１０１は符号化映像音声蓄積部２００、符号化映像音声読み出し部２０１、デマックス部２０２、映像復号部２０３、輝度調整部２０４、音声復号部２０５、音量調整部２０６を備える。さらには符号化映像音声読み出し部２１０、符号化映像音声送信部２１１、提示制御部２２０、操作信号受信部２２１が設けられている。なお符号化映像音声読み出し部２０１は符号化映像音声蓄積部２００に対する第１の読み出し手段を構成し、符号化映像音声読み出し部２１０は符号化映像音声蓄積部２００に対する第２の読み出し手段を構成する。なお以下では、符号化映像音声読み出し部を単に読み出し部という。
【００１６】
符号化映像音声蓄積部２００は、ハードディスクドライブ装置などで構成され、符号化された映像データ及び音声データを蓄積する。映像符号化方式としては、例えば、MPEG-2 Video（ISO/IEC 13818-2）方式を用いることができる。これは、“Information technology -- Generic coding of moving pictures and associated audio information :Video”の規格による。また音声符号化方式としては、例えば、AAC（ISO/IEC 13818-7）方式を用いることができる。これは“Information technology -- Generic coding of moving pictures and associated audio information -- Part 7: Advanced Audio Coding(AAC)”の規格による。符号化映像音声蓄積部２００は、符号化した映像及び音声のデータをMPEG-2 Systems（ISO/IEC 13818-1）にて規定されているTransport Stream（以下、MPEG-2 TSという）方式により多重化する。なお符号化した映像及び音声のデータとは、MPEG-2 Video方式で符号化した映像及びAAC方式で符号化した音声のデータである。符号化映像音声蓄積部２００は、多重化した一体のデータをハードディスクドライブ装置に蓄積する。なおMPEG-2 Systemsの規格は、“Information technology -- Generic coding of moving pictures and associated audio information: Systems”である。映像符号化方式、音声符号化方式、多重化方式については本例に限らず、他の方式を用いてもよい。
【００１７】
第１の読み出し部２０１は、視聴者に提示すべき再生位置に応じた符号化映像音声のデータを、符号化映像音声蓄積部２００から読み出す。デマックス部２０２は、符号化映像音声信号を、PID（Packet Identifier）に従って符号化映像信号と符号化音声信号に分離し、各信号を映像復号部２０３と音声復号部２０５にそれぞれ出力する。なおPIDはMPEG-2 Systemsにて定義されている。
【００１８】
映像復号部２０３は、MPEG-2 Video方式などで符号化された映像信号を復号し、輝度調整部２０４に出力する。輝度調整部２０４は、映像信号の輝度を調整し、映像信号１０５を出力する。また音声復号部２０５は、AAC方式などで符号化された符号化音声信号を復号し、音量調整部２０６に出力する。音量調整部２０６は音声ボリュームなどにより構成され、音量を調整して音声信号１０６を出力する。
【００１９】
第２の読み出し部２１０は、第１の読み出し部２０１と同様、符号化映像音声蓄積部２００から、視聴者に提示すべき再生位置に応じた符号化映像音声のデータを読み出す。読み出し部２０１及び２１０は、互いに無関係な独立した再生位置に応じて符号化映像音声信号を読み出すことができる。これは、符号化映像音声蓄積部２００をランダムアクセス可能なハードディスクドライブ装置などで構成することにより実現できる。読み出し部２１０が符号化映像音声蓄積部２００から読み出した符号化映像音声信号は符号化映像音声送信部２１１に送られ、ここで該送信部は電波方式にて符号化映像音声信号１２０を送信する。電波方式としては、IEEE802.11（IEEE：The Institute of Electrical and Electronics Engineers, Inc.）方式が知られている。RTP（Real-time Transport Protocol）方式において、MPEG-2 TSを伝送する方式が規定されている。IEEE802.11とRTPを組み合わせることで、本実施形態に適用できる。
【００２０】
操作信号受信部２２１は赤外線などの操作信号１２５を受信し、操作指示を提示制御部２２０へ伝える。提示制御部２２０は、操作信号受信部２２１を介して視聴者の操作指令を受け付け、読み出し部２０１及び２１０、輝度調整部２０４、音量調整部２０６を制御する。つまり、提示制御部２２０は読み出し部２０１，２１０に対して読み出し位置をそれぞれに指示し、輝度調整部２０４に対して映像輝度を指示する。また、提示制御部２２０は音量調整部２０６に対して音量を指示する。これにより映像信号１０５、音声信号１０６、符号化映像音声信号１２０の内容が制御される。
【００２１】
図３は、図１に示す映像音声提示部１１１の構成例を示す。なお符号化映像音声信号１２０、映像信号１１５、音声信号１１６については既述の通りである。映像音声提示部１１１は、符号化映像音声受信部３１１、デマックス部３０２、映像復号部３０３、輝度調整部３０４、音声復号部３０５、音量調整部３０６、提示制御部３２０を備える。
【００２２】
符号化映像音声受信部３１１は、符号化映像音声送信部２１１が送信した符号化映像音声信号１２０を受信してデマックス部３０２に出力するとともに、符号化映像音声信号１２０の受信開始を提示制御部３２０へ通知する。デマックス部３０２、映像復号部３０３、輝度調整部３０４、音声復号部３０５、音量調整部３０６の各機能に関しては、図２に示すデマックス部２０２、映像復号部２０３、輝度調整部２０４、音声復号部２０５、音量調整部２０６と同様である。よって、それらの説明を省略する。
提示制御部３２０は、輝度調整部３０４に対して映像輝度を指示し、音量調整部３０６に対して音量を指示することで、映像信号１１５及び音声信号１１６の内容を制御する。
【００２３】
図４の左側のフローチャートは、映像及び音声を提示する装置が、主端末部１００から副端末部１１０へと切り換わる際、主端末部１００にて実行される処理の流れを示す。
主端末部１００が再生処理を開始する（Ｓ４００）。その際、読み出し部２０１は、操作信号受信部２２１及び提示制御部２２０を介して視聴者の操作指示を受け付け、指示された再生位置に応じた符号化映像音声信号を符号化映像音声蓄積部２００より読み出す。デマックス部２０２は、符号化映像音声信号のデマックス処理を実行する。そして映像復号部２０３は符号化映像信号の復号処理を実行し、音声復号部２０５は符号化音声信号の復号処理を実行する。
【００２４】
次に輝度調整部２０４は、映像の輝度が最大となるように輝度調整し（Ｓ４０１）、音量調整部２０６は、音量が最大となるように音声出力を調整する（Ｓ４０２）。そして視聴者が操作部１１４を用いて、コンテンツの提示端末装置の切り換え操作を行うと、その操作指示が操作信号受信部２２１から提示制御部２２０に通知される（Ｓ４０３）。輝度調整部２０４は映像の輝度を中間レベルに調整し（Ｓ４０４）、音量調整部２０６は音量が中間レベルとなるように音声出力を調整する（Ｓ４０５）。
【００２５】
提示制御部２２０は、読み出し部２１０が読み出すべき、読出し位置を算出する（Ｓ４０６）。この読み出し位置は、読み出し部２０１が現時点で読み出している位置よりも所定時間（以下、Ｎ秒と記す）だけ遡った位置である。この時間（Ｎ値）は１秒程度でよく、設定により視聴者が操作し易い範囲で変化させることができる。以下では、符号化映像音声蓄積部２００をＬＢＡ（Logical Block Addressing）方式に準拠したハードディスクドライブ装置を用いて構成する例について、読み出し位置の算出方法を説明する。ハードディスクドライブ装置は、その記録領域が５１２バイトを単位とするセクタに分かれており、セクタアドレスを指定することにより、５１２バイトごとにデータの読み書きが可能であるものとする。また、ハードディスクドライブ装置には、セクタアドレスが増加する順序に従って、符号化映像音声信号が時間的に連続して記録されているものとする。読み出し部２１０の読み出し位置に対応するセクタアドレスは、下式により算出される。
【数１】
【００２６】
上式中のＳＡ２は、読み出し部２１０が読み出すべき位置に対応するセクタアドレスであり、ＳＡ１は、読み出し部２０１が読み出している位置に対応するセクタアドレスである。ＢＲは、符号化映像音声信号のビットレート（符号化映像音声信号が１秒間当たりに占めるデータ容量）である。なおＳＡ２の値が整数でない場合は、切り捨て処理又は切り上げ処理を行えばよく、得られる値は、読み出し部２１０が読み出す位置に対応するセクタアドレスとなる。
上式において、ＳＡ２が負値になる場合や、ＳＡ２が、読み出し部２０１の読み出しているコンテンツの記録範囲外のセクタアドレスになる場合には、セクタアドレスの変更を要する。つまり、読み出し部２０１が読み出しているコンテンツの先頭位置に対応するセクタアドレスを、読み出し部２１０の読み出し位置に対応するセクタアドレスＳＡ２とする。また、この場合、提示制御部２２０は下式によりＮの値を変更する。
【数２】
【００２７】
こうして読み出し部２１０は、読み出し部２０１に比してＮ秒の遅延時間をもって符号化映像音声蓄積部２００から符号化映像音声信号を読み出す。この読み出し位置は、Ｓ４０６にて算出した読み出し位置である。符号化映像音声送信部２１１は、符号化映像音声信号１２０の送信を開始する（Ｓ４０７）。そしてＮ秒が経過するまでの時間待ち処理（Ｓ４０８）の後、輝度調整部２０４は、映像の輝度が最小となるように輝度調整する（Ｓ４０９）。音量調整部２０６は、音量が最小となるように音声出力を調整する（Ｓ４１０）。
主端末部１００が再生を停止し（Ｓ４１１）、その際、読み出し部２０１は符号化映像音声の読み出しを停止する。デマックス部２０２は、デマックス処理を停止し、映像復号部２０３や音声復号部２０５は復号処理を停止する。
【００２８】
符号化映像音声送信部２１１は、符号化映像音声信号１２０の送信を停止する（Ｓ４１２）。その際、読み出し部２１０は符号化映像音声の読み出しを停止する。送信停止の原因には、提示対象であるコンテンツが終端に到達した場合や、視聴者の停止操作指示による場合などが挙げられるが、その如何は問わない。
【００２９】
図４の右側のフローチャートは、映像及び音声を提示する装置が、主端末部１００から副端末部１１０へ切り換わる際、副端末部１１０にて実行される処理の流れを示す。先ず、符号化映像音声受信部３１１は、符号化映像音声信号１２０の受信を検知し、該信号をデマックス部３０２に出力するとともに、符号化映像音声信号１２０の受信を開始した旨を提示制御部３２０に通知する（Ｓ５００）。本ステップＳ５００は前記Ｓ４０７に対応しており、主端末部１００が符号化映像音声信号１２０の送信を開始することにより、副端末部１１０は符号化映像音声信号１２０の受信を開始する。
【００３０】
副端末部１１０が再生を開始し（Ｓ５０１）、その際、デマックス部３０２は、符号化映像音声信号のデマックス処理を実行する。映像復号部３０３は符号化映像信号の復号処理を実行し、音声復号部３０５は符号化音声信号の復号処理を実行する。そして輝度調整部３０４は、映像の輝度が中間レベルとなるように輝度調整し（Ｓ５０２）、音量調整部３０６は、音量が中間レベルとなるように音声出力を調整する（Ｓ５０３）。そして、Ｎ秒が経過するまでの時間待ち処理（Ｓ５０４）の後、輝度調整部３０４は、映像の輝度が最大となるように輝度調整する（Ｓ５０５）。音量調整部３０６は、音量が最大となるように音声出力を調整する（Ｓ５０６）。
【００３１】
符号化映像音声受信部３１１は符号化映像音声信号１２０の受信を停止する（Ｓ５０７）。本ステップＳ５０７は前記Ｓ４１２に対応しており、主端末部１００が符号化映像音声信号１２０の送信を停止することにより、副端末部１１０は符号化映像音声信号１２０の受信を停止する。
副端末部１１０が再生を停止し（Ｓ５０８）。その際、デマックス部３０２はデマックス処理を停止する。映像復号部３０３、音声復号部３０５は復号処理を停止する。
【００３２】
図５は、主端末部１００の映像輝度、音声音量、及び副端末部１１０の映像輝度、音声音量の時間的な推移例を示す。横軸は経過時間を表し、T600乃至603が時刻を示す。また上方に主端末部１００の映像輝度レベルと音声音量レベルの時間的変化を示し、下方に副端末部１１０の映像輝度レベルと音声音量レベルの時間的変化を示している。
時刻T600にて主端末部１００は再生を開始する（図４のＳ４００参照）。このとき、主端末部１００により提示される映像の輝度は最大であり（Ｓ４０１参照）、主端末部１００による音声出力の音量は最大である（Ｓ４０２参照）。
【００３３】
時刻T600から時刻T601までの期間中、主端末部１００はコンテンツの映像及び音声を提示する。一方、副端末部１１０では、映像輝度及び音声音量ともに最小である。
時刻T601にて視聴者によって端末切り換え操作が行われる（Ｓ４０３参照）。主端末部１００では、映像輝度が中間レベルとなり（Ｓ４０４参照）、音量が中間レベルとなる（Ｓ４０５参照）。
主端末部１００が符号化映像音声信号１２０の送信を開始し（Ｓ４０７参照）、副端末部１１０は符号化映像音声信号１２０の受信を開始する（Ｓ５００参照）。そして副端末部１１０は再生を開始する（Ｓ５０１参照）。その際、副端末部１１０では、映像輝度が中間レベルであり（Ｓ５０２参照）、音量レベルが中間レベルである（Ｓ５０３参照）。
時刻T601からＮ秒間経過すると時刻T602となる（Ｓ４０８及びＳ５０４参照）。時刻T601から時刻T602までの移行期間中、主端末部１００及び副端末部１１０はともにコンテンツの映像及び音声を提示する。
【００３４】
時刻T602にて、主端末部１００の映像輝度は最小となり（Ｓ４０９参照）、主端末部１００の音声音量も最小となる（Ｓ４１０参照）。その後、主端末部１００は再生を停止する（Ｓ４１１参照）。一方、副端末部１１０では映像輝度が最大となり（Ｓ５０５参照）、音声音量が最大となる（Ｓ５０６参照）。
時刻T602から時刻T603までの期間中、副端末部１１０はコンテンツの映像及び音声を提示する。一方、主端末部１００では、映像輝度及び音声音量ともに最小である。
時刻T603にて、主端末部１００は符号化映像音声信号１２０の送信を停止する（Ｓ４１２参照）。副端末部１１０は符号化映像音声信号１２０の受信を停止する（Ｓ５０７参照）。副端末部１１０は再生を停止する（Ｓ５０８参照）。
【００３５】
図６は横軸に時刻を示し、縦軸に主端末部１００及び副端末部１１０における再生位置の時間的変化を示したグラフである。図中の時刻T600乃至603は図５に示す時刻と同一時刻である。
主端末部１００における再生位置は、時刻T600での位置（点Ｐ０参照）と時刻T602での位置（点Ｐ２参照）とを繋いだ右上がりの線分に従って時間的に変化する。また、副端末部１１０における再生位置は、時刻T601での位置（点Ｐ１参照）と時刻T603での位置（点Ｐ３参照）とを繋いだ右上がりの線分に従って時間的に変化する。
【００３６】
時刻T600にて主端末部１００は再生を開始する（図４のＳ４００参照）。そして時刻T601にて端末切り換え操作が行われ（Ｓ４０３参照）、副端末部１１０が再生を開始する（Ｓ５０１参照）。読み出し部２１０は、読み出し部２０１が読み出している位置よりも、Ｎ秒分だけ時間的に遡った位置のデータを読み出す。したがって、図示のように、副端末部１１０が再生する位置は、主端末部１００が再生する位置に対して、Ｎ秒遡った位置となる。
時刻T601からＮ秒が経過すると時刻T602となり（Ｓ４０８及びＳ５０４参照）、時刻T602にて主端末部１００は再生を停止する（Ｓ４１１参照）。副端末部１１０はその後も再生を続行し、時刻T603にて再生を停止する（Ｓ５０８参照）。
【００３７】
第１実施形態によれば、コンテンツを提示する装置が切り換わる際、切り換え先の装置は切り換え元の装置よりも時間的に遅れてコンテンツを提示する。これにより、両装置においてコンテンツが時間的に重複して提示されるので、視聴者の視点移動に要する期間中に提示されるコンテンツ映像を視聴者が見逃さないように防止できる。
【００３８】
[第２実施形態]
次に本発明の第２実施形態について説明する。第２実施形態では、主端末部にて提示していたプログラムコンテンツを、副端末部へと切り換えて提示する例を説明する。ここで、プログラムコンテンツとは、プログラムの実行により生成される映像および音声を含むコンテンツを指す。
図７は、第２実施形態に係るシステムの概略構成を示し、主端末部８００及び副端末部８１０から構成される。主端末部８００は、放送受信部８０１、映像出力部８０２、音声出力部８０３を備える。放送受信部８０１はチューナ及び復号装置などで構成され、副端末部８１０の操作部８１４から操作信号８２５を受信する。放送受信部８０１は、操作信号８２５に応じて放送波８３０を受信し、復調及び復号したデータに基づき、映像出力部８０２及び音声出力部８０３を用いて放送番組を提示する。また、主端末部８００は、復号された映像音声信号８２０、プログラム信号８２１、及びプログラム提示制御信号８２２を副端末部８１０へ無線送信する。映像出力部８０２はディスプレイ装置などで構成され、放送受信部８０１が出力した映像信号８０５を受けて映像を出力する。また音声出力部８０３は音声アンプ及びスピーカなどで構成され、放送受信部８０１が出力した音声信号８０６を受けて音声を出力する。
【００３９】
副端末部８１０は、プログラム提示部８１１、映像出力部８１２、音声出力部８１３、操作部８１４を備える。プログラム提示部８１１はプログラムを実行するマイクロプロセッサなどで構成され、主端末部８００から復号された映像音声信号８２０、プログラム信号８２１、及びプログラム提示制御信号８２２を受信する。プログラム提示部８１１は、主端末部８００から受けとったプログラムを実行し、映像出力部８１２及び音声出力部８１３を用いて映像及び音声をそれぞれ出力する。映像出力部８１２はディスプレイ装置などで構成され、プログラム提示部８１１が出力した映像信号８１５を受けて映像を出力する。また、音声出力部８１３は音声アンプ及びスピーカなどで構成され、プログラム提示部８１１が出力した音声信号８１６を受けて音声を出力する。操作部８１４は操作ボタンやスイッチなどを有しており、視聴者の操作指示を受け付け、赤外線通信などにより操作信号８２５を主端末部８００に送信する。
【００４０】
図８は、放送受信部８０１の構成例を示しており、図中の放送波８３０や、各信号８０５、８０６、８２０乃至８２２、８２５については既述の通りである。放送受信部８０１は、チューナ部９００、デマックス部９０１、映像復号部９０２、映像合成部９０３、音声復号部９０４、音声合成部９０５、映像音声送信部９０６を備える。放送受信部８０１はさらに、プログラム復号部９０７、第１のプログラム実行部９０８、プログラム映像生成部９０９、プログラム映像透過率調整部９１０、プログラム音声生成部９１１、プログラム音量調整部９１２、遅延処理部９２０を備える。さらにはプログラム送信部９２１、プログラム提示制御部９３０、番組情報取得部９４０、選局制御部９４１、操作信号受信部９４２が設けられている。
【００４１】
チューナ部９００は、ISDB-T（Integrated Services Digital Broadcasting for Terrestrial）方式などで変調された放送波８３０を復調し、符号化映像音声信号を出力する。後段のデマックス部９０１は、符号化映像音声信号をPIDに従って分離する。分離後の符号化映像信号は映像復号部９０２へ送られ、符号化音声信号は音声復号部９０４へ送られ、符号化プログラム信号はプログラム復号部９０７へ送られ、番組情報信号は番組情報取得部９４０へ送られる。映像復号部９０２は、MPEG-2 Video方式などに従う符号化映像信号を復号し、映像信号を出力する。音声復号部９０４は、AAC方式などに従う符号化音声信号を復号し、音声信号を出力する。映像音声送信部９０６は、映像復号部９０２からの映像信号、及び音声復号部９０４からの音声信号を無線方式で副端末部８１０に送信する。無線方式としては、Wireless HD（登録商標）やWHDI（登録商標）が提案されており、一般にWireless HDMI（登録商標）と呼ばれている。なおWHDIは“Wireless Home Digital Interface”の略号であり、HDMIは“High-Definition Multimedia Interface”の略号であり、両方式とも本実施形態に適用可能である。
【００４２】
プログラム復号部９０７は符号化されたプログラム信号を復号する。放送波８３０を介してプログラムを送信する方法としては、例えば、MHP（ETSI ES 201 812）方式が知られており、本実施形態に適用可能である。これは、“Multimedia Home Platform”の規格による。MHP方式にて放送局は、Sun Microsystems社が開発したプログラミング言語Java（登録商標）のバイトコードをDSM-CC（ISO/IEC 13818-10）方式を用いて符号化して送信する。これは、“Information technology -- Generic coding of moving pictures and associated audio information -- Part 10: Conformance extensions for Digital Storage Media Command and Control (DSM-CC) ”の規格による。受信機は符号化されたプログラム信号を受信して復号し、受信機内のJVMにより実行する。なおJVMは“Java（登録商標） Virtual Machine”の略号である。
【００４３】
プログラム実行部９０８は、図示しないマイクロプロセッサによりプログラムを実行する。前述のようにJVMによってJava（登録商標）バイトコードが解釈されて実行される。後段のプログラム映像生成部９０９は、点・線・矩形などの図形描画機能を組み合わせて、プログラム実行部９０８が指示したグラフィックを描画し、プログラム映像信号として出力する。プログラム映像透過率調整部９１０はプログラム映像生成部９０９からのプログラム映像信号を受けて、後述のプログラム提示制御部９３０からの指令に従い、プログラム映像信号に透過率情報を付加することでプログラム映像の透過率を調整する。つまり、ここでは映像合成部９０３が映像信号とプログラム映像信号を合成する際に使用するプログラム映像の透過率を調整する処理が実行される。なおプログラム映像透過率調整部を以下、単に透過率調整部という。
映像合成部９０３は、映像復号部９０２が出力した映像信号と、透過率調整部９１０が出力したプログラム映像信号を合成する。この際、プログラム映像信号の透過率に従い、映像信号とプログラム映像信号が合成される。例えば透過率を百分率で表すものとし、０％のとき（以下、プログラム映像が「不透明」であると表現する）、映像復号部９０２による映像がプログラム映像により遮られるため、プログラム映像信号だけが映像合成部９０３より出力される。透過率が５０％のとき（以下、プログラム映像が「半透明」であると表現する）、映像復号部９０２による映像とプログラム映像が半々に混合された状態の映像信号が映像合成部９０３より出力される。透過率が１００％のとき（以下、プログラム映像が「透明」であると表現する）、映像復号部９０２による映像がプログラム映像により遮られずに、その映像信号だけが映像合成部９０３より出力される。
【００４４】
プログラム音声生成部９１１は、プログラム実行部９０８が指示した音声信号を生成する。生成方法としては、例えば、AAC方式により符号化された音声をプログラム中に埋め込み、音声復号部（図示せず）により音声データを復号する方法がある。プログラム音量調整部９１２は音声ボリュームなどを用いて構成され、音声出力の音量調整を行う。音声合成部９０５は、音声復号部９０４が出力する音声信号と、プログラム音量調整部９１２が出力するプログラム音声信号とを合成する。遅延処理部９２０は、プログラム復号部９０７が出力したプログラム信号を図示しないメモリに一時記憶し、プログラム提示制御部９３０からその出力を命じられた場合、プログラムを読み出してプログラム送信部９２１へ出力する。プログラム送信部９２１は、遅延処理部９２０が出力したプログラム信号を所定の電波方式で副端末部８１０に送信する。電波方式としては、例えば、IEEE802.11方式とFTP（File Transfer Protocol）方式を組み合わせて、本実施形態に適用できる。
【００４５】
プログラム提示制御部９３０は、透過率調整部９１０に対して透過率を指示し、プログラム音量調整部９１２に対して音量を指示し、遅延処理部９２０に対してプログラム送信開始タイミングを指示する。これにより映像信号８０５、音声信号８０６、プログラム信号８２１の内容がそれぞれ制御される。また、プログラム提示制御部９３０は、プログラム提示制御信号８２２、つまり副端末部８１０におけるプログラム提示のタイミングを制御する信号を出力する。プログラム提示制御信号８２２の送受信方式としては、例えば、IEEE802.11方式とRFC854（TELNET PROTOCOL SPECIFICATION）方式を組み合わせて、本実施形態に適用できる。
【００４６】
番組情報取得部９４０は、デマックス部９０１からの番組情報、例えばEIT（Event Information Table）などで構成される番組情報を取得する。操作信号受信部９４２は、赤外線通信などで操作信号８２５を受信し、操作指示を選局制御部９４１へ伝える。選局制御部９４１は、操作信号受信部９４２を介して受け付けた視聴者の操作指示に従って選局制御を行う。具体的には、選局すべきチャンネルを、チューナ部９００へ伝える処理が行われる。さらに、選局すべきチャンネルの映像情報を伝送するPIDを、番組情報取得部９４０より読み出して映像復号部９０２へ伝える処理が行われる。同様に、音声情報を伝送するPIDを音声復号部９０４へ伝えるとともに、プログラム情報を伝送するPIDをプログラム復号部９０７へ伝える処理が実行される。なおPIDにより多重化したデータを取り扱う方法は、MPEG-2 Systemsの規格に詳述されている。
【００４７】
図９は、プログラム提示部８１１の構成例を示し、図中の各信号８１５、８１６、８２０乃至８２２は既述の通りである。プログラム提示部８１１は、映像音声受信部１００６、プログラム受信部１０２１、第２のプログラム実行部１００８、プログラム映像生成部１００９、プログラム映像透過率調整部１０１０、映像合成部１００３を備える。さらには、プログラム音声生成部１０１１、プログラム音量調整部１０１２、効果音生成部１０４０、効果音音量調整部１０４１、音声合成部１００５、プログラム提示制御部１０３０が設けられている。
【００４８】
映像音声受信部１００６は、映像音声送信部９０６が送信した映像音声信号８２０を電波方式で受信する。プログラム受信部１０２１は、プログラム送信部９２１からプログラム信号８２１を電波方式で受信し、受信したプログラム信号をプログラム実行部１００８に出力する。なおプログラム実行部１００８、プログラム映像生成部１００９、透過率調整部１０１０、プログラム音声生成部１０１１、プログラム音量調整部１０１２の機能に関しては、図８にて説明した各部９０８乃至９１２と同様であるため、それらの説明を省略する。
【００４９】
効果音生成部１０４０は効果音信号を生成して、これを効果音音量調整部１０４１に出力し、音声合成部１００５を介して音声出力部８１３から効果音を発生させる。生成方法としては、例えば、AAC方式により予め音声データを作成し不揮発性メモリ（図示せず）に格納しておき、音声復号部（図示せず）により音声データを復号する方法がある。効果音については視聴者の注意を喚起する音声であれば、その如何は問わない。効果音音量調整部１０４１は、音声ボリュームなどを用いて構成され、効果音の音量調整を行う。
【００５０】
映像合成部１００３は、映像音声受信部１００６が出力する映像信号と、透過率調整部１０１０が出力するプログラム映像信号を合成する。透過率調整部１０１０が出力するプログラム映像信号は透過率の情報を含む。透過率を映像合成に適用する方法は、前述した通りである。音声合成部１００５は、映像音声受信部１００６が出力する音声信号と、プログラム音量調整部１０１２が出力するプログラム音声信号と、効果音音量調整部１０４１が出力する効果音信号を合成する。
【００５１】
プログラム提示制御部１０３０は、プログラム提示制御信号８２２を受けて、透過率調整部１０１０に対して透過率を指示し、プログラム音量調整部１０１２に対してプログラム音量を指示し、効果音音量調整部１０４１に対して音量を指示する。これにより、映像信号８１５及び音声信号８１６の内容がそれぞれ制御される。
図１０の左側のフローチャートは、プログラム映像及びプログラム音声を提示する端末部が主端末部８００から副端末部８１０へ切り換わる際、主端末部８００にて実行される処理の流れを示す。
【００５２】
放送受信部８０１は予めプログラムを受信している状態にあるものとする。遅延処理部９２０は、内部のメモリにプログラムを記憶させる（Ｓ１１００）。主端末部８００において、プログラム提示制御部９３０の指示により、プログラム実行部９０８がプログラムの実行を開始する（Ｓ１１０１）。プログラム映像生成部９０９は、プログラム実行部９０８の指示に従い、プログラム映像信号を生成する。プログラム音声生成部９１１は、プログラム実行部９０８の指示に従い、プログラム音声信号を生成する。
【００５３】
透過率調整部９１０は、プログラム映像が不透明となるよう透過率を０％に調整する（Ｓ１１０２）。プログラム音量調整部９１２は、プログラム音量が最大となるように調整する（Ｓ１１０３）。そしてＮ秒の時間経過待ちとなる（Ｓ１１０４）。Ｎ値は１０程度でよく、この値は視聴者が操作し易い範囲で変化させることができる。プログラム提示制御部９３０の指示により、遅延処理部９２０はプログラムをプログラム送信部９２１へ出力し、プログラム送信部９２１は副端末部８１０に対してプログラム信号８２１を送信する（Ｓ１１０５）。そしてＭ秒の時間経過待ちとなる（Ｓ１１０６）。Ｍは正値であればよい。
【００５４】
プログラム提示制御部９３０は、副端末部８１０へプログラム提示制御信号８２２（この場合、プログラム提示開始命令）を送信する（Ｓ１１０７）。透過率調整部９１０は、プログラム映像が半透明となるよう透過率を５０％に調整する（Ｓ１１０８）。プログラム音量調整部９１２は、プログラム音量を最小に調整する（Ｓ１１０９）。そしてＮ秒の時間経過待ちとなる（Ｓ１１１０）。
透過率調整部９１０は、プログラム映像が透明となるよう透過率を１００％に調整する（Ｓ１１１１）。主端末部８００において、プログラム実行部９０８が、プログラムの実行を停止する（Ｓ１１１２）。
【００５５】
図１０の右側のフローチャートは、プログラム映像及びプログラム音声を提示する装置が主端末部８００から副端末部８１０へ切り換わる際、副端末部８１０にて実行される処理の流れを示す。
プログラム受信部１０２１は、主端末部８００からプログラム信号８２１を受信し、プログラム実行部１００８へプログラムを出力する（Ｓ１２００）。本ステップＳ１２００は前記Ｓ１１０５に対応しており、主端末部８００がプログラムを送信し、副端末部８１０はプログラムを受信する。プログラム実行部１００８はプログラムの実行を開始する（Ｓ１２０１）。その際、プログラム映像生成部１００９は、プログラム実行部１００８の指示に従い、プログラム映像信号を生成する。プログラム音声生成部１０１１は、プログラム実行部１００８の指示に従い、プログラム音声信号を生成する。
【００５６】
透過率調整部１０１０はプログラム映像が透明となるよう透過率を１００％に調整する（Ｓ１２０２）。プログラム音量調整部１０１２はプログラム音量を最小に調整する（Ｓ１２０３）。効果音音量調整部１０４１は効果音音量を最小に調整する（Ｓ１２０４）。
プログラム提示制御部１０３０は前記プログラム提示開始命令を受信する（Ｓ１２０５）。本ステップＳ１２０５は前記Ｓ１１０７に対応しており、主端末部８００がプログラム提示開始命令を送信し、これを副端末部８１０が受信する。透過率調整部１０１０はプログラム映像が半透明となるよう透過率を５０％に調整する（Ｓ１２０６）。効果音音量調整部１０４１は効果音の音量を最大に調整する（Ｓ１２０７）。そしてＮ秒の時間経過待ちとなる（Ｓ１２０８）。透過率調整部１０１０はプログラム映像が不透明となるよう透過率を０％に調整する（Ｓ１２０９）。プログラム音量調整部１０１２はプログラム音量を最大に調整する（Ｓ１２１０）。効果音音量調整部１０４１は効果音の音量を最小に調整する（Ｓ１２１１）。
【００５７】
プログラム実行部１００８はプログラムの実行を停止する（Ｓ１２１２）。プログラムの実行停止については、視聴者が操作部８１４を介して実行停止の操作をしたとき、あるいはプログラムによる処理が完了したときなどが挙げられるが、本実施形態にて停止条件の如何は問わない。
図１１は、主端末部８００のプログラム映像透過率、プログラム音量、及び副端末部８１０のプログラム映像透過率、プログラム音量、効果音音量の時間的な推移例を示す。横軸は経過時間を表し、T1300乃至1304が時刻を示す。また上方に主端末部８００のプログラム映像透過率、プログラム音量レベルの時間的変化を示し、下方に副端末部８１０のプログラム映像透過率、プログラム音量レベル、効果音の音量レベルの時間的変化を示している。
【００５８】
時刻T1300にて、主端末部８００はプログラムの実行を開始する（図１０のＳ１１０１参照）。この際、主端末部８００のプログラム映像透過率は最小（プログラム映像が不透明：０％）であり（Ｓ１１０２参照）、主端末部８００のプログラム音量は最大である（Ｓ１１０３参照）。
時刻T1300からＮ秒が経過すると時刻T1301となる（Ｓ１１０４参照）。この時点で主端末部８００はプログラムを副端末部８１０に送信する（Ｓ１１０５参照）。副端末部８１０はプログラムを受信し（Ｓ１２００参照）、その実行を開始する（Ｓ１２０１参照）。この際、副端末部８１０のプログラム映像透過率は最大（プログラム映像が透明：１００％）である（Ｓ１２０２参照）。副端末部８１０のプログラム音量は最小であり（Ｓ１２０３参照）、副端末部８１０の効果音の音量は最小である（Ｓ１２０４参照）。
【００５９】
時刻T1301からＭ秒が経過すると時刻T1302となる（Ｓ１１０６参照）。時刻T1300から時刻T1302までの期間中、主端末部８００はプログラムコンテンツを提示するが、副端末部８１０はプログラムコンテンツを提示しない。時刻T1302にて、主端末部８００はプログラム提示開始命令を副端末部８１０に送信する（Ｓ１１０７参照）。時刻T1302から時刻T1303までの移行期間中、主端末部８００のプログラム映像は半透明となり（Ｓ１１０８参照）、主端末部８００のプログラム音量は最小となる（Ｓ１１０９参照）。なお、本例ではプログラム音量調整部１０１２により、移行期間中にプログラム音量が最小となるように調整しているが、移行期間中にプログラム音声を出力しない形態でもよい。つまり、この場合にはプログラム音量調整部１０１２により、移行期間中にプログラム音声のミュート処理が行われる。
【００６０】
副端末部８１０は主端末部８００からプログラム提示開始命令を受信し（Ｓ１２０５参照）、プログラムの提示を開始する。この際、副端末部８１０のプログラム映像は半透明であり（Ｓ１２０６参照）、副端末部８１０の効果音の音量は最大である（Ｓ１２０７参照）。副端末部８１０のプログラム音量は、引き続き最小である。
時刻T1302からＮ秒が経過すると時刻T1303となる（Ｓ１１１０及びＳ１２０８参照）。時刻T1302から時刻T1303までの期間中、主端末部８００及び副端末部８１０はともにプログラムコンテンツを提示する。
【００６１】
時刻T1303から、主端末部８００のプログラム映像は透明となる（Ｓ１１１１参照）。主端末部８００はプログラムの実行を停止する（Ｓ１１１２参照）。副端末部８１０のプログラム映像は不透明となり（Ｓ１２０９参照）、副端末部８１０のプログラム音量は最大となり（Ｓ１２１０参照）、副端末部８１０の効果音の音量は最小となる（Ｓ１２１１参照）。時刻T1303から時刻T1304までの期間中、副端末部８１０はプログラムコンテンツを提示するが、主端末部８００はプログラムコンテンツを提示しない。そして時刻T1304にて、副端末部８１０はプログラムの実行を停止する（Ｓ１２１２参照）。
図１２は、横軸に時刻を示し、縦軸には主端末部８００及び副端末部８１０がプログラムの実行を開始した時点からの経過時間を示したグラフである。図中の時刻T1300乃至1304は図１１に示す時刻と同一時刻である。
【００６２】
主端末部８００のプログラム実行に係る時間経過は、時刻T1300の時点を始点（点Ｑ０参照）とし、時刻T1303の時点を終点（点Ｑ３参照）する右上がりの線分に従って変化する。また、副端末部８１０のプログラム実行に係る時間経過は、時刻T1301の時点を始点（点Ｑ１参照）とし、時刻T1304の時点を終点（点Ｑ４参照）とする右上がりの線分に従って変化する。
【００６３】
時刻T1300にて主端末部８００はプログラムの実行を開始する（Ｓ１１０１参照）。時刻T1300からＮ秒が経過すると時刻T1301となり（Ｓ１１０４参照）、副端末部８１０がプログラムの実行を開始する（Ｓ１２０１参照）。時刻T1301からＭ秒が経過すると、時刻T1302となり（Ｓ１１０６参照）、主端末部８００から副端末部８１０へプログラム提示開始命令が送信され（Ｓ１１０７参照）、副端末部８１０はプログラム映像の提示を開始する。
【００６４】
時刻T1302からＮ秒が経過すると時刻T1303となり（Ｓ１１１０及びＳ１２０８参照）、主端末部８００はプログラムの実行を停止する（Ｓ１１１２参照）。その後、時刻T1304にて、副端末部８１０はプログラムの実行を停止する（Ｓ１２１２参照）。
以上のように、副端末部８１０は、主端末部８００よりもＮ秒の遅延時間後にプログラムの実行を開始する。従って、時刻T1303にて副端末部８１０が提示するプログラム内容は、時刻T1302にて主端末部８００が提示するプログラム内容に相当する。
【００６５】
第２実施形態によれば、端末装置を切り換える際に、切り換え先の装置は、切り換え元の装置よりも時間的に遅れてプログラムコンテンツを提示する。両装置においてプログラム映像が時間的に重複して提示されるため、視聴者の視点移動に要する期間に提示されるプログラム映像を視聴者が見逃さないように防止できる。また第２実施形態によると、切り換え先の装置から効果音を発することにより、視聴者に注意を喚起することができる。すなわち、プログラムコンテンツの提示装置が切り換わったことに視聴者が気づかず、映像を見逃してしまうといった事態が起きないように防止できる。
【符号の説明】
【００６６】
１００，８００ 主端末部（第１の装置）
１０２，８０２ 映像出力部
１１０，８１０ 副端末部（第２の装置）
２００ 符号化映像音声蓄積部
２０１，２１０ 符号化映像音声読み出し部
２０４，３０４ 輝度調整部
２１１ 符号化映像音声送信部
２２０，３２０ 提示制御部
９０６ 映像音声送信部
９０８，１００８ プログラム実行部
９１０，１０１０ プログラム映像透過率調整部
９２０ 遅延処理部
９２１ プログラム送信部
９３０，１０３０ プログラム提示制御部
１０１２ プログラム音量調整部
１０４０ 効果音生成部
【特許請求の範囲】
【請求項１】
第１の装置及び第２の装置を備え、前記第１の装置から前記第２の装置へと映像の表示を切り換える際の移行期間にて前記第１の装置及び前記第２の装置で映像を時間的に重複して表示させる映像表示システムであって、
前記第１の装置は、映像を表示させるために映像信号を出力する映像出力手段と、映像信号を前記第２の装置に送信する送信手段と、前記映像出力手段が映像信号を出力した後で遅延時間をもって当該映像信号を前記第２の装置に送信するように前記送信手段を制御する制御手段と、を備え、
前記第２の装置は前記送信手段からの映像信号を受信し、前記移行期間にて、前記第１の装置で表示される映像よりも時間的に遅れて映像を表示することを特徴とする映像表示システム。
【請求項２】
前記第１の装置は、
映像データを蓄積する蓄積手段と、
前記蓄積手段から映像データを読み出す第１の読み出し手段と、
前記第１の読み出し手段が前記蓄積手段から映像データを読み出した時点よりも時間的に遅れて当該映像データを読み出す第２の読み出し手段と、を備え、
前記映像出力手段は前記第１の読み出し手段が読み出した映像データを処理して前記第１の装置の表示手段に映像を表示させ、
前記第２の装置は、前記第２の読み出し手段が読み出した映像データを処理して前記第２の装置の表示手段で映像を表示することを特徴とする、請求項１記載の映像表示システム。
【請求項３】
前記移行期間にて前記第１の装置及び前記第２の装置にて表示される映像がプログラムの実行によって生成される映像データに基づく映像であり、
前記第１の装置は、前記プログラムを実行して該プログラムに従って生成される映像データを前記映像出力手段に出力する第１のプログラム実行手段と、前記プログラムを前記第２の装置に送信するプログラム送信手段と、を備え、
前記第２の装置は、前記プログラム送信手段から受信した前記プログラムの実行を前記第１のプログラム実行手段よりも時間的に遅れて開始する第２のプログラム実行手段を備え、前記プログラムに従って生成される映像データに基づいて映像を表示することを特徴とする、請求項１記載の映像表示システム。
【請求項４】
前記第１の装置は、前記プログラムの実行を前記第１のプログラム実行手段よりも遅らせるための遅延処理手段を備え、該遅延処理手段から前記プログラム送信手段を介して前記プログラムが前記第２の装置に送信されることを特徴とする、請求項３記載の映像表示システム。
【請求項５】
前記第２の装置は、前記移行期間にて映像の表示が前記第１の装置から前記第２の装置へ切り換わることを知らせる効果音を発生させる効果音生成手段を備えることを特徴とする、請求項１から４のいずれか１項に記載の映像表示システム。
【請求項６】
前記第１の装置又は前記第２の装置は、前記移行期間にて表示される映像の輝度又は透過率を調整する調整手段を備えることを特徴とする、請求項１から５のいずれか１項に記載の映像表示システム。
【請求項７】
前記制御手段は、前記移行期間では音声を出力しないように音量調整手段を制御することを特徴とする、請求項１から６のいずれか１項に記載の映像表示システム。
【請求項８】
第１の装置及び第２の装置を備え、前記第１の装置から前記第２の装置へと映像の表示を切り換える際の移行期間にて前記第１の装置及び前記第２の装置で映像を時間的に重複して表示させる映像表示システムの制御方法であって、
前記第１の装置にて映像を表示させるために映像信号を出力するステップと、
前記ステップにて映像信号を出力した後で遅延時間をもって当該映像信号を前記第２の装置に送信するステップと、
前記第２の装置にて前記映像信号を受信し、前記移行期間にて、前記第１の装置で表示される映像よりも時間的に遅れて映像を表示させるステップと、を有することを特徴とする映像表示システムの制御方法。
【請求項１】
第１の装置及び第２の装置を備え、前記第１の装置から前記第２の装置へと映像の表示を切り換える際の移行期間にて前記第１の装置及び前記第２の装置で映像を時間的に重複して表示させる映像表示システムであって、
前記第１の装置は、映像を表示させるために映像信号を出力する映像出力手段と、映像信号を前記第２の装置に送信する送信手段と、前記映像出力手段が映像信号を出力した後で遅延時間をもって当該映像信号を前記第２の装置に送信するように前記送信手段を制御する制御手段と、を備え、
前記第２の装置は前記送信手段からの映像信号を受信し、前記移行期間にて、前記第１の装置で表示される映像よりも時間的に遅れて映像を表示することを特徴とする映像表示システム。
【請求項２】
前記第１の装置は、
映像データを蓄積する蓄積手段と、
前記蓄積手段から映像データを読み出す第１の読み出し手段と、
前記第１の読み出し手段が前記蓄積手段から映像データを読み出した時点よりも時間的に遅れて当該映像データを読み出す第２の読み出し手段と、を備え、
前記映像出力手段は前記第１の読み出し手段が読み出した映像データを処理して前記第１の装置の表示手段に映像を表示させ、
前記第２の装置は、前記第２の読み出し手段が読み出した映像データを処理して前記第２の装置の表示手段で映像を表示することを特徴とする、請求項１記載の映像表示システム。
【請求項３】
前記移行期間にて前記第１の装置及び前記第２の装置にて表示される映像がプログラムの実行によって生成される映像データに基づく映像であり、
前記第１の装置は、前記プログラムを実行して該プログラムに従って生成される映像データを前記映像出力手段に出力する第１のプログラム実行手段と、前記プログラムを前記第２の装置に送信するプログラム送信手段と、を備え、
前記第２の装置は、前記プログラム送信手段から受信した前記プログラムの実行を前記第１のプログラム実行手段よりも時間的に遅れて開始する第２のプログラム実行手段を備え、前記プログラムに従って生成される映像データに基づいて映像を表示することを特徴とする、請求項１記載の映像表示システム。
【請求項４】
前記第１の装置は、前記プログラムの実行を前記第１のプログラム実行手段よりも遅らせるための遅延処理手段を備え、該遅延処理手段から前記プログラム送信手段を介して前記プログラムが前記第２の装置に送信されることを特徴とする、請求項３記載の映像表示システム。
【請求項５】
前記第２の装置は、前記移行期間にて映像の表示が前記第１の装置から前記第２の装置へ切り換わることを知らせる効果音を発生させる効果音生成手段を備えることを特徴とする、請求項１から４のいずれか１項に記載の映像表示システム。
【請求項６】
前記第１の装置又は前記第２の装置は、前記移行期間にて表示される映像の輝度又は透過率を調整する調整手段を備えることを特徴とする、請求項１から５のいずれか１項に記載の映像表示システム。
【請求項７】
前記制御手段は、前記移行期間では音声を出力しないように音量調整手段を制御することを特徴とする、請求項１から６のいずれか１項に記載の映像表示システム。
【請求項８】
第１の装置及び第２の装置を備え、前記第１の装置から前記第２の装置へと映像の表示を切り換える際の移行期間にて前記第１の装置及び前記第２の装置で映像を時間的に重複して表示させる映像表示システムの制御方法であって、
前記第１の装置にて映像を表示させるために映像信号を出力するステップと、
前記ステップにて映像信号を出力した後で遅延時間をもって当該映像信号を前記第２の装置に送信するステップと、
前記第２の装置にて前記映像信号を受信し、前記移行期間にて、前記第１の装置で表示される映像よりも時間的に遅れて映像を表示させるステップと、を有することを特徴とする映像表示システムの制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１１−１１４３７８（Ｐ２０１１−１１４３７８Ａ）
【公開日】平成２３年６月９日（２０１１．６．９）
【国際特許分類】
【出願番号】特願２００９−２６６３２５（Ｐ２００９−２６６３２５）
【出願日】平成２１年１１月２４日（２００９．１１．２４）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２３年６月９日（２０１１．６．９）
【国際特許分類】
【出願日】平成２１年１１月２４日（２００９．１１．２４）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]