映像表示装置及び映像表示方法
【課題】 マルチビューコンテンツの各ビュー画面の表示位置を反映した音声システムを提供する。
【解決手段】 メインビュー画面の表示位置情報に基き、マルチチャンネル音声データを処理することにより、複数のスピーカから出力されるメインビュー音声の音量を調節し、メインビュー音声の音像の位置をメインビュー画面の中心位置に一致させる。
【解決手段】 メインビュー画面の表示位置情報に基き、マルチチャンネル音声データを処理することにより、複数のスピーカから出力されるメインビュー音声の音量を調節し、メインビュー音声の音像の位置をメインビュー画面の中心位置に一致させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の映像とそれに対応する複数の音声とから構成されるマルチビューコンテンツをマルチ画面表示する際に、再生される音声の音像位置を制御した映像表示装置及び映像表示方法に関する。
【背景技術】
【０００２】
マルチビューコンテンツの配信は、日本のデジタル放送規格であるＡＲＩＢ規格において、マルチビューテレビ（ＭＶＴＶ）として運用規定されている。
【０００３】
非特許文献１では、ＭＶＴＶとは放送事業者の意図した複数の映像・音声の組み合わせによって、１つの放送コンテンツを構成する放送形態として定義されている。
【０００４】
特許文献１には、マルチビューテレビを構成する複数の映像に係る映像信号群の構成パターンに応じて、複数の映像を１画面上に同時表示するための最適レイアウトパターンを決定することが記載されている。
【０００５】
特許文献２には、ディスプレイ上に表示された複数の画像の表示情報を検出し、表示状態に応じて各画像に同期した音信号の音量調節を行うことが記載されている。
【０００６】
特許文献３には、複数の音声チャンネルを用いて音声が送られてくる放送において、
画面中に表示されたポインタ内の基準位置と選択された音声チャンネルポイントとの相対距離に基いて音声チャンネルの音声合成比率を決定することが記載されている。
【特許文献１】特開２００４−１２８７７８号公報
【特許文献２】特開平０５−０１９７２９号公報
【特許文献３】特開平０８−２９８６３５号公報
【非特許文献１】ＡＲＩＢ ＴＲ−Ｂ１４第二分冊第四編 ２５マルチビューテレビ（ＭＶＴＶ）
【発明の開示】
【発明が解決しようとする課題】
【０００７】
従来の映像表示装置での、マルチビューコンテンツのマルチウィンドウ（マルチ画面）表示による視聴では、各ウィンドウに表示されている映像に対応する音声が選択的に出力されていた。また複数の音声が同時に出力される場合であっても、各音声の音量のみが、画像の表示状態に応じて制御されているに過ぎなかった。即ち、従来の映像表示装置においては、１画面内での各ウインドウの表示位置とは無関係に、映像表示装置に配置されたスピーカから、各ウインドウに対応する音声が選択的又は音量調節されて出力されていた。そのため、各ウィンドウに表示される映像と対応する音声との関連性が知覚しにくく、マルチビューコンテンツとしての臨場感に欠けていた。
【課題を解決するための手段】
【０００８】
上記課題を解決するため、本発明の映像表示装置は、メインビュー映像とサブビュー映像とからなる複数の映像と、前記メインビュー映像に対応するメインビュー音声と前記サブビュー映像に対応するサブビュー音声とからなる複数の音声とから構成されるマルチビューコンテンツを、前記メインビュー映像を表示するメインビュー画面と、前記サブビュー映像を表示するサブビュー画面とからなるマルチ画面で表示する映像表示装置であって、前記メインビュー音声の音像の位置が前記メインビュー画面の中心位置に対応していることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、マルチウィンドウ表示の各ウィンドウで表示される映像に対応する音声の音像の位置を、ウィンドウ表示画面の中心に一致させることで、映像と音声の関連性が知覚しやすい臨場感のあるマルチビューコンテンツの視聴が可能になる。
【発明を実施するための最良の形態】
【００１０】
＜実施例１＞
前述したＡＲＩＢ規格によれば、番組情報に含まれるＥＩＴ（Ｅｖｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）にはマルチビューコンテンツであることを示すフラグが存在する。選択した番組がマルチビューコンテンツか否かは、このフラグの有無を検出することにより決定される。同じくＥＩＴには、番組データを構成する各ストリームがメインビューのものであるかサブビューのものであるかを示すフラグも存在する。このフラグを参照することにより、マルチビューコンテンツを構成する各映像・音声がメインビューに対応する映像・音声（メインビュー映像・メインビュー音声）なのか、サブビューに対応する映像・音声（サブビュー映像・サブビュー音声）なのかが識別される。
【００１１】
図１は、本発明の映像表示装置の構成を示すブロック図である。
【００１２】
また図２は、映像メモリ７及び音声メモリ８のバッファ構成を示すブロック図である。
【００１３】
デジタル放送信号はチューナ１２により受信され、復調・デマックス部１０による復調・デマックス処理及びデスクランブル処理の後、映像音声ストリームとして映像音声デコーダ６に出力される。
【００１４】
映像音声デコーダ６は映像音声ストリームをデコード処理する。
【００１５】
デジタル放送コンテンツが、マルチビューコンテンツの場合、デコード処理された映像ストリームは、表示プロセッサ３の制御により、ビデオデータとして映像メモリ７のそれぞれのビュー映像バッファ４２〜４４に格納される。
【００１６】
映像音声デコーダ６は、マルチビューコンテンツの複数の符号化音声ストリームを同時にデコードする。音声プロセッサ４は、デコード処理された複数の音声ストリームを、多チャンネル音声データとして音声メモリ８の該当する音声バッファ１８〜２０に連続的に書き込む。
【００１７】
表示プロセッサ３は、映像メモリ７に格納されたビデオデータ、背景静止画像データ、文字データ、ＧＵＩデータをそれぞれ読み出して合成し、合成ビデオデータを出力する。表示部１は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＰＤＰ（Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）、ＥＬＤ（Ｅｌｅｃｔｒｏ−ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）等の表示デバイスを有する。合成ビデオデータに基く合成映像が表示デバイス上の画面に表示される。
【００１８】
表示部１の画面上には、図１に示すように、メインビュー画面が中央部に配置され、サブビュー画面が周辺部に配置されたマルチ画面として映像表示される。また、ＧＵＩ画面がサブビュー画面に重ならないように周辺部に配置される。
【００１９】
表示プロセッサ３は表示部１と映像メモリ７とを連携制御する。
表示プロセッサ３は、表示部１で表示される映像の表示位置情報と、その映像に対応するビデオデータの映像メモリ７のメモリアドレス情報とを関連付けてそれぞれの情報を保持している。
【００２０】
表示部１の表示画面上の表示位置がメインビュー画面及びサブビュー画面の表示矩形領域の位置に対しては、表示位置情報に基いて、ビュー映像バッファ４２〜４４のメモリアドレスに該当するビデオデータが読み出される。メインビュー画面にはメインビュー映像が表示され、サブビュー画面にはサブビュー映像が表示される。メインビュー映像に対応した音声であるメインビュー音声と、サブビュー映像に対応した音声であるサブビュー音声とがビュー画面のレイアウトに応じてミキシングされてスピーカシステム２より出力される。
【００２１】
同様に表示位置が文書画面の表示領域に対しては、グラフィックバッファ４５における文字データメモリ領域のメモリアドレスに該当する文字データが読み出される。表示位置がＧＵＩ画面の表示領域に対しては、グラフィックバッファ４５のＧＵＩデータメモリ領域のメモリアドレスに該当するＧＵＩデータが読み出される。
【００２２】
表示画面上には、ビュー画面及び文書画面、ＧＵＩ画面の背景として、静止画像を表示することができる。
【００２３】
静止画像データは、グラフィックバッファ４５における静止画像データメモリ領域から読み出される。
【００２４】
表示プロセッサ３は、ビデオデータ及び文字データ、ＧＵＩデータを各々の表示位置に対応付けて合成する。
【００２５】
また、ビュー画面及び文書画面、ＧＵＩ画面を、背景の静止画像に所定の透過率で合成したアルファブレンド合成画像として表示画面上に映像表示することもできる。
【００２６】
ビュー画面及び文書画面、ＧＵＩ画面の表示位置の移動は、表示プロセッサ３内部の表示位置情報の設定情報を変更することで可能である。
【００２７】
音声プロセッサ４は、スピーカシステム２と音声メモリ８を連携制御する。
【００２８】
表示プロセッサ３は、表示部１で表示される映像の表示位置情報からビュー画面の表示位置情報を音声プロセッサ４に出力する。
【００２９】
音声プロセッサ４は、表示プロセッサ３から取得した各ビュー画面の表示位置情報から、各ビュー画面に対応する音声の音像の定位と音量制御とを実行する。音声プロセッサ４は、音声バッファ１８〜２０から読み出した音声データを、音像位置情報と音量情報とに基いてミキシング処理し、スピーカシステム２へ出力する。
【００３０】
各ビュー画面に対応する音像位置の移動は、音声プロセッサ４内部の音像位置情報の設定情報を変更することで可能である。ビュー画面のレイアウト変更は、瞬時に音像位置レイアウトに反映される。音声プロセッサ４は、メインビュー画面の表示位置情報から、メインビュー音声の音像の位置がメインビュー画面の中心と一致するようにミキシング条件を決定する。
【００３１】
メインビュー画面が、表示画面の上部にある場合は、上部に配置されたスピーカから出力される音が、下部に配置されたスピーカから出力される音よりも大きくなるように各スピーカに出力される音量情報が設定される。
【００３２】
横方向に関しても同様に、メインビュー画面の表示画面上の横位置に応じて右部に配置されたスピーカと左部に配置されたスピーカから出力される音の大きさが調整される。
【００３３】
音像の位置は必ずしもメインビュー画面の中心位置に一致していなくとも、メインビュー画面の中心から所定範囲に入るように対応付けされてミキシング条件が設定されてもよい。
【００３４】
また、サブビュー画面についても同様に音声処理される。音声プロセッサ４は、サブビュー画面の表示位置情報から、サブビュー音声の音像の位置がサブビュー画面の中心と一致するように、又はサブビュー画面の中心から所定範囲に入るように対応付けされてミキシング条件を決定することができる。
【００３５】
メインビュー音声とサブビュー音声とは、ユーザ操作により切り換え可能に出力されてもよいし、同時に出力されてもよい。
【００３６】
同時に出力される場合には、メインビュー音声の音量とサブビュー音声の音量とは、メインビュー画面の面積とサブビュー画面の面積とにそれぞれ対応付けされて出力されてもよい。即ち、面積が大きい画面に対応する音声程、大きな音量とすることができる。
【００３７】
音声メモリ８（記憶手段）は、メインビュー音声の音声データを格納する音声バッファ１８とサブビュー音声の音声データを格納する音声バッファ１９、２０とからなる。
【００３８】
さらに音声バッファ１８〜２０は、それぞれ５チャンネルのスピーカバッファ２１〜２５、２６〜３０、３１〜３５からなる。即ち、メインビュー音声データとサブビュー音声データとは、それぞれチャンネル毎に格納されている。スピーカは、図３に示すように、表示部１の上下左側に配置された中高域スピーカ４８、４と、上下右側に配置された中高域スピーカ５０、５１と、中央部下側に配置された低域スピーカ５２からなる。
【００３９】
それぞれのスピーカ４８〜５２に対応する音声データが、音声バッファ１８〜２０のスピーカバッファに格納されている。
【００４０】
各ビュー画面に対応するビュー音声の音像の位置は、各音声バッファ内の各チャンネルに格納されている音声データの大きさ（音量）を調整して出力することで制御される。音声バッファ１８〜２０の音声データは出力用音声バッファ３６に転送する際に、ミキシング条件に基く演算が行われ、ミキシング後の音声データがスピーカバッファ３７〜４１に保持される。各スピーカ４８〜５１からは、音声出力バッファ３６内のスピーカバッファ３７〜４１に保持された音声データに基いた音声が出力される。
【００４１】
＜実施例２＞
本実施例でも、映像表示装置の構成及びメモリの構成、スピーカの配置は実施例１と同様である。
【００４２】
本実施例では、メインビュー音声の音像位置は、メインビュー画面の中心位置に一致させ、サブビュー音声の音像位置は、サブビュー画面の中心位置より外側に配置させる。サブビュー画面は、メインビュー画面の周辺に配置されている。
【００４３】
即ち、サブビュー音声の人間の両耳への到達の時間差が大きくなるようにする。音声の両耳への到達の時間差は、表示される映像の距離感を助長するので、より臨場感に富むマルチビューコンテンツの視聴が可能となる。
【００４４】
サブビュー音声の音像位置を画面の縁を越えた外側に配置させるとより効果的である。
音像位置の設定に関しては、実施例１と同様である。
【図面の簡単な説明】
【００４５】
【図１】本発明の映像表示装置のブロック図である。
【図２】本発明のメモリの構成を説明するための説明図である。
【図３】本発明のスピーカシステムの構成を示す模式図である。
【符号の説明】
【００４６】
１ 表示部
２ スピーカシステム
３ 表示プロセッサ
４ 音声プロセッサ
５ メインプロセッサ
６ 映像音声デコーダ
７ 映像メモリ
８ 音声メモリ
９ 入出力プロセッサ
１０ 復調・デマックス
１１ 複合入出力装置
１２ チューナ
１３ 不揮発記憶装置
１４ 放送波
１５ インターネット
１６ ヒューマンインターフェース
１７ 地域情報処理装置
１８〜２０ 音声バッファ
２１〜３５ スピーカバッファ
３６ 音声出力バッファ
３７〜４１ スピーカバッファ
４２〜４４ 各ビュー映像バッファ
４５ グラフィックバッファ
４６ メインＣＰＵワークエリア
４７ 映像音声デコーダエリア
４８ 中高域スピーカ１
４９ 中高域スピーカ２
５０ 中高域スピーカ３
５１ 中高域スピーカ４
５２ 低域スピーカ
【技術分野】
【０００１】
本発明は、複数の映像とそれに対応する複数の音声とから構成されるマルチビューコンテンツをマルチ画面表示する際に、再生される音声の音像位置を制御した映像表示装置及び映像表示方法に関する。
【背景技術】
【０００２】
マルチビューコンテンツの配信は、日本のデジタル放送規格であるＡＲＩＢ規格において、マルチビューテレビ（ＭＶＴＶ）として運用規定されている。
【０００３】
非特許文献１では、ＭＶＴＶとは放送事業者の意図した複数の映像・音声の組み合わせによって、１つの放送コンテンツを構成する放送形態として定義されている。
【０００４】
特許文献１には、マルチビューテレビを構成する複数の映像に係る映像信号群の構成パターンに応じて、複数の映像を１画面上に同時表示するための最適レイアウトパターンを決定することが記載されている。
【０００５】
特許文献２には、ディスプレイ上に表示された複数の画像の表示情報を検出し、表示状態に応じて各画像に同期した音信号の音量調節を行うことが記載されている。
【０００６】
特許文献３には、複数の音声チャンネルを用いて音声が送られてくる放送において、
画面中に表示されたポインタ内の基準位置と選択された音声チャンネルポイントとの相対距離に基いて音声チャンネルの音声合成比率を決定することが記載されている。
【特許文献１】特開２００４−１２８７７８号公報
【特許文献２】特開平０５−０１９７２９号公報
【特許文献３】特開平０８−２９８６３５号公報
【非特許文献１】ＡＲＩＢ ＴＲ−Ｂ１４第二分冊第四編 ２５マルチビューテレビ（ＭＶＴＶ）
【発明の開示】
【発明が解決しようとする課題】
【０００７】
従来の映像表示装置での、マルチビューコンテンツのマルチウィンドウ（マルチ画面）表示による視聴では、各ウィンドウに表示されている映像に対応する音声が選択的に出力されていた。また複数の音声が同時に出力される場合であっても、各音声の音量のみが、画像の表示状態に応じて制御されているに過ぎなかった。即ち、従来の映像表示装置においては、１画面内での各ウインドウの表示位置とは無関係に、映像表示装置に配置されたスピーカから、各ウインドウに対応する音声が選択的又は音量調節されて出力されていた。そのため、各ウィンドウに表示される映像と対応する音声との関連性が知覚しにくく、マルチビューコンテンツとしての臨場感に欠けていた。
【課題を解決するための手段】
【０００８】
上記課題を解決するため、本発明の映像表示装置は、メインビュー映像とサブビュー映像とからなる複数の映像と、前記メインビュー映像に対応するメインビュー音声と前記サブビュー映像に対応するサブビュー音声とからなる複数の音声とから構成されるマルチビューコンテンツを、前記メインビュー映像を表示するメインビュー画面と、前記サブビュー映像を表示するサブビュー画面とからなるマルチ画面で表示する映像表示装置であって、前記メインビュー音声の音像の位置が前記メインビュー画面の中心位置に対応していることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、マルチウィンドウ表示の各ウィンドウで表示される映像に対応する音声の音像の位置を、ウィンドウ表示画面の中心に一致させることで、映像と音声の関連性が知覚しやすい臨場感のあるマルチビューコンテンツの視聴が可能になる。
【発明を実施するための最良の形態】
【００１０】
＜実施例１＞
前述したＡＲＩＢ規格によれば、番組情報に含まれるＥＩＴ（Ｅｖｅｎｔ Ｉｎｆｏｒｍａｔｉｏｎ Ｔａｂｌｅ）にはマルチビューコンテンツであることを示すフラグが存在する。選択した番組がマルチビューコンテンツか否かは、このフラグの有無を検出することにより決定される。同じくＥＩＴには、番組データを構成する各ストリームがメインビューのものであるかサブビューのものであるかを示すフラグも存在する。このフラグを参照することにより、マルチビューコンテンツを構成する各映像・音声がメインビューに対応する映像・音声（メインビュー映像・メインビュー音声）なのか、サブビューに対応する映像・音声（サブビュー映像・サブビュー音声）なのかが識別される。
【００１１】
図１は、本発明の映像表示装置の構成を示すブロック図である。
【００１２】
また図２は、映像メモリ７及び音声メモリ８のバッファ構成を示すブロック図である。
【００１３】
デジタル放送信号はチューナ１２により受信され、復調・デマックス部１０による復調・デマックス処理及びデスクランブル処理の後、映像音声ストリームとして映像音声デコーダ６に出力される。
【００１４】
映像音声デコーダ６は映像音声ストリームをデコード処理する。
【００１５】
デジタル放送コンテンツが、マルチビューコンテンツの場合、デコード処理された映像ストリームは、表示プロセッサ３の制御により、ビデオデータとして映像メモリ７のそれぞれのビュー映像バッファ４２〜４４に格納される。
【００１６】
映像音声デコーダ６は、マルチビューコンテンツの複数の符号化音声ストリームを同時にデコードする。音声プロセッサ４は、デコード処理された複数の音声ストリームを、多チャンネル音声データとして音声メモリ８の該当する音声バッファ１８〜２０に連続的に書き込む。
【００１７】
表示プロセッサ３は、映像メモリ７に格納されたビデオデータ、背景静止画像データ、文字データ、ＧＵＩデータをそれぞれ読み出して合成し、合成ビデオデータを出力する。表示部１は、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、ＰＤＰ（Ｐｌａｓｍａ Ｄｉｓｐｌａｙ Ｐａｎｅｌ）、ＥＬＤ（Ｅｌｅｃｔｒｏ−ｌｕｍｉｎｅｓｃｅｎｃｅ Ｄｉｓｐｌａｙ）等の表示デバイスを有する。合成ビデオデータに基く合成映像が表示デバイス上の画面に表示される。
【００１８】
表示部１の画面上には、図１に示すように、メインビュー画面が中央部に配置され、サブビュー画面が周辺部に配置されたマルチ画面として映像表示される。また、ＧＵＩ画面がサブビュー画面に重ならないように周辺部に配置される。
【００１９】
表示プロセッサ３は表示部１と映像メモリ７とを連携制御する。
表示プロセッサ３は、表示部１で表示される映像の表示位置情報と、その映像に対応するビデオデータの映像メモリ７のメモリアドレス情報とを関連付けてそれぞれの情報を保持している。
【００２０】
表示部１の表示画面上の表示位置がメインビュー画面及びサブビュー画面の表示矩形領域の位置に対しては、表示位置情報に基いて、ビュー映像バッファ４２〜４４のメモリアドレスに該当するビデオデータが読み出される。メインビュー画面にはメインビュー映像が表示され、サブビュー画面にはサブビュー映像が表示される。メインビュー映像に対応した音声であるメインビュー音声と、サブビュー映像に対応した音声であるサブビュー音声とがビュー画面のレイアウトに応じてミキシングされてスピーカシステム２より出力される。
【００２１】
同様に表示位置が文書画面の表示領域に対しては、グラフィックバッファ４５における文字データメモリ領域のメモリアドレスに該当する文字データが読み出される。表示位置がＧＵＩ画面の表示領域に対しては、グラフィックバッファ４５のＧＵＩデータメモリ領域のメモリアドレスに該当するＧＵＩデータが読み出される。
【００２２】
表示画面上には、ビュー画面及び文書画面、ＧＵＩ画面の背景として、静止画像を表示することができる。
【００２３】
静止画像データは、グラフィックバッファ４５における静止画像データメモリ領域から読み出される。
【００２４】
表示プロセッサ３は、ビデオデータ及び文字データ、ＧＵＩデータを各々の表示位置に対応付けて合成する。
【００２５】
また、ビュー画面及び文書画面、ＧＵＩ画面を、背景の静止画像に所定の透過率で合成したアルファブレンド合成画像として表示画面上に映像表示することもできる。
【００２６】
ビュー画面及び文書画面、ＧＵＩ画面の表示位置の移動は、表示プロセッサ３内部の表示位置情報の設定情報を変更することで可能である。
【００２７】
音声プロセッサ４は、スピーカシステム２と音声メモリ８を連携制御する。
【００２８】
表示プロセッサ３は、表示部１で表示される映像の表示位置情報からビュー画面の表示位置情報を音声プロセッサ４に出力する。
【００２９】
音声プロセッサ４は、表示プロセッサ３から取得した各ビュー画面の表示位置情報から、各ビュー画面に対応する音声の音像の定位と音量制御とを実行する。音声プロセッサ４は、音声バッファ１８〜２０から読み出した音声データを、音像位置情報と音量情報とに基いてミキシング処理し、スピーカシステム２へ出力する。
【００３０】
各ビュー画面に対応する音像位置の移動は、音声プロセッサ４内部の音像位置情報の設定情報を変更することで可能である。ビュー画面のレイアウト変更は、瞬時に音像位置レイアウトに反映される。音声プロセッサ４は、メインビュー画面の表示位置情報から、メインビュー音声の音像の位置がメインビュー画面の中心と一致するようにミキシング条件を決定する。
【００３１】
メインビュー画面が、表示画面の上部にある場合は、上部に配置されたスピーカから出力される音が、下部に配置されたスピーカから出力される音よりも大きくなるように各スピーカに出力される音量情報が設定される。
【００３２】
横方向に関しても同様に、メインビュー画面の表示画面上の横位置に応じて右部に配置されたスピーカと左部に配置されたスピーカから出力される音の大きさが調整される。
【００３３】
音像の位置は必ずしもメインビュー画面の中心位置に一致していなくとも、メインビュー画面の中心から所定範囲に入るように対応付けされてミキシング条件が設定されてもよい。
【００３４】
また、サブビュー画面についても同様に音声処理される。音声プロセッサ４は、サブビュー画面の表示位置情報から、サブビュー音声の音像の位置がサブビュー画面の中心と一致するように、又はサブビュー画面の中心から所定範囲に入るように対応付けされてミキシング条件を決定することができる。
【００３５】
メインビュー音声とサブビュー音声とは、ユーザ操作により切り換え可能に出力されてもよいし、同時に出力されてもよい。
【００３６】
同時に出力される場合には、メインビュー音声の音量とサブビュー音声の音量とは、メインビュー画面の面積とサブビュー画面の面積とにそれぞれ対応付けされて出力されてもよい。即ち、面積が大きい画面に対応する音声程、大きな音量とすることができる。
【００３７】
音声メモリ８（記憶手段）は、メインビュー音声の音声データを格納する音声バッファ１８とサブビュー音声の音声データを格納する音声バッファ１９、２０とからなる。
【００３８】
さらに音声バッファ１８〜２０は、それぞれ５チャンネルのスピーカバッファ２１〜２５、２６〜３０、３１〜３５からなる。即ち、メインビュー音声データとサブビュー音声データとは、それぞれチャンネル毎に格納されている。スピーカは、図３に示すように、表示部１の上下左側に配置された中高域スピーカ４８、４と、上下右側に配置された中高域スピーカ５０、５１と、中央部下側に配置された低域スピーカ５２からなる。
【００３９】
それぞれのスピーカ４８〜５２に対応する音声データが、音声バッファ１８〜２０のスピーカバッファに格納されている。
【００４０】
各ビュー画面に対応するビュー音声の音像の位置は、各音声バッファ内の各チャンネルに格納されている音声データの大きさ（音量）を調整して出力することで制御される。音声バッファ１８〜２０の音声データは出力用音声バッファ３６に転送する際に、ミキシング条件に基く演算が行われ、ミキシング後の音声データがスピーカバッファ３７〜４１に保持される。各スピーカ４８〜５１からは、音声出力バッファ３６内のスピーカバッファ３７〜４１に保持された音声データに基いた音声が出力される。
【００４１】
＜実施例２＞
本実施例でも、映像表示装置の構成及びメモリの構成、スピーカの配置は実施例１と同様である。
【００４２】
本実施例では、メインビュー音声の音像位置は、メインビュー画面の中心位置に一致させ、サブビュー音声の音像位置は、サブビュー画面の中心位置より外側に配置させる。サブビュー画面は、メインビュー画面の周辺に配置されている。
【００４３】
即ち、サブビュー音声の人間の両耳への到達の時間差が大きくなるようにする。音声の両耳への到達の時間差は、表示される映像の距離感を助長するので、より臨場感に富むマルチビューコンテンツの視聴が可能となる。
【００４４】
サブビュー音声の音像位置を画面の縁を越えた外側に配置させるとより効果的である。
音像位置の設定に関しては、実施例１と同様である。
【図面の簡単な説明】
【００４５】
【図１】本発明の映像表示装置のブロック図である。
【図２】本発明のメモリの構成を説明するための説明図である。
【図３】本発明のスピーカシステムの構成を示す模式図である。
【符号の説明】
【００４６】
１ 表示部
２ スピーカシステム
３ 表示プロセッサ
４ 音声プロセッサ
５ メインプロセッサ
６ 映像音声デコーダ
７ 映像メモリ
８ 音声メモリ
９ 入出力プロセッサ
１０ 復調・デマックス
１１ 複合入出力装置
１２ チューナ
１３ 不揮発記憶装置
１４ 放送波
１５ インターネット
１６ ヒューマンインターフェース
１７ 地域情報処理装置
１８〜２０ 音声バッファ
２１〜３５ スピーカバッファ
３６ 音声出力バッファ
３７〜４１ スピーカバッファ
４２〜４４ 各ビュー映像バッファ
４５ グラフィックバッファ
４６ メインＣＰＵワークエリア
４７ 映像音声デコーダエリア
４８ 中高域スピーカ１
４９ 中高域スピーカ２
５０ 中高域スピーカ３
５１ 中高域スピーカ４
５２ 低域スピーカ
【特許請求の範囲】
【請求項１】
メインビュー映像とサブビュー映像とからなる複数の映像と、前記メインビュー映像に対応するメインビュー音声と前記サブビュー映像に対応するサブビュー音声とからなる複数の音声とから構成されるマルチビューコンテンツを、前記メインビュー映像を表示するメインビュー画面と、前記サブビュー映像を表示するサブビュー画面とからなるマルチ画面で表示する映像表示装置であって、前記メインビュー音声の音像の位置が前記メインビュー画面の中心位置に対応していることを特徴とする映像表示装置。
【請求項２】
前記サブビュー音声の音像の位置が、前記サブビュー画面の中心位置に対応していることを特徴とする請求項１記載の映像表示装置。
【請求項３】
前記マルチ画面は、前記メインビュー画面が中央部に、前記サブビュー画面が周辺部になるように配置され、前記サブビュー音声の音像の位置が前記サブビュー画面の中心位置よりも外側に位置することを特徴とする請求項１記載の映像表示装置。
【請求項４】
前記メインビュー音声と前記サブビュー音声とはそれぞれ切り換え可能に出力されることを特徴とする請求項１乃至３記載の映像表示装置。
【請求項５】
前記メインビュー音声と前記サブビュー音声とが同時に出力されることを特徴とする請求項１乃至３記載の映像表示装置。
【請求項６】
前記メインビュー音声の音量と、前記サブビュー音声の音量とは、前記メインビュー画面の面積と前記サブビュー画面の面積とにそれぞれ対応していることを特徴とする請求項５記載の映像表示装置。
【請求項７】
前記複数の音声に対応した音声データを格納する記憶手段を有し、
前記記憶手段は、前記メインビュー音声に対応した音声データと、前記サブビュー音声に対応する音声データとを、各々複数のチャンネル毎に格納していることを特徴とする請求項１記載の映像表示装置。
【請求項８】
メインビュー映像とサブビュー映像とからなる複数の映像と、前記メインビュー映像に対応するメインビュー音声と前記サブビュー映像に対応するサブビュー音声とからなる複数の音声とから構成されるマルチビューコンテンツを、前記メインビュー映像を表示するメインビュー画面と、前記サブビュー映像を表示するサブビュー画面とからなるマルチ画面で表示する映像表示方法であって、前記メインビュー音声の音像の位置が前記メインビュー画面の中心位置に対応していることを特徴とする映像表示方法。
【請求項１】
メインビュー映像とサブビュー映像とからなる複数の映像と、前記メインビュー映像に対応するメインビュー音声と前記サブビュー映像に対応するサブビュー音声とからなる複数の音声とから構成されるマルチビューコンテンツを、前記メインビュー映像を表示するメインビュー画面と、前記サブビュー映像を表示するサブビュー画面とからなるマルチ画面で表示する映像表示装置であって、前記メインビュー音声の音像の位置が前記メインビュー画面の中心位置に対応していることを特徴とする映像表示装置。
【請求項２】
前記サブビュー音声の音像の位置が、前記サブビュー画面の中心位置に対応していることを特徴とする請求項１記載の映像表示装置。
【請求項３】
前記マルチ画面は、前記メインビュー画面が中央部に、前記サブビュー画面が周辺部になるように配置され、前記サブビュー音声の音像の位置が前記サブビュー画面の中心位置よりも外側に位置することを特徴とする請求項１記載の映像表示装置。
【請求項４】
前記メインビュー音声と前記サブビュー音声とはそれぞれ切り換え可能に出力されることを特徴とする請求項１乃至３記載の映像表示装置。
【請求項５】
前記メインビュー音声と前記サブビュー音声とが同時に出力されることを特徴とする請求項１乃至３記載の映像表示装置。
【請求項６】
前記メインビュー音声の音量と、前記サブビュー音声の音量とは、前記メインビュー画面の面積と前記サブビュー画面の面積とにそれぞれ対応していることを特徴とする請求項５記載の映像表示装置。
【請求項７】
前記複数の音声に対応した音声データを格納する記憶手段を有し、
前記記憶手段は、前記メインビュー音声に対応した音声データと、前記サブビュー音声に対応する音声データとを、各々複数のチャンネル毎に格納していることを特徴とする請求項１記載の映像表示装置。
【請求項８】
メインビュー映像とサブビュー映像とからなる複数の映像と、前記メインビュー映像に対応するメインビュー音声と前記サブビュー映像に対応するサブビュー音声とからなる複数の音声とから構成されるマルチビューコンテンツを、前記メインビュー映像を表示するメインビュー画面と、前記サブビュー映像を表示するサブビュー画面とからなるマルチ画面で表示する映像表示方法であって、前記メインビュー音声の音像の位置が前記メインビュー画面の中心位置に対応していることを特徴とする映像表示方法。
【図１】
【図２】
【図３】
【図２】
【図３】
【公開番号】特開２００９−２７３０７４（Ｐ２００９−２７３０７４Ａ）
【公開日】平成２１年１１月１９日（２００９．１１．１９）
【国際特許分類】
【出願番号】特願２００８−１２４２２９（Ｐ２００８−１２４２２９）
【出願日】平成２０年５月１２日（２００８．５．１２）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２１年１１月１９日（２００９．１１．１９）
【国際特許分類】
【出願日】平成２０年５月１２日（２００８．５．１２）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]