映像処理装置及びその制御方法
【課題】任意視点映像データを含む映像コンテンツデータの再生時に任意視点映像の視点を移動させる操作をユーザが行った場合に再生中の任意視点映像において生じる視点移動を区域毎に制御する。
【解決手段】視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置であって、複数の映像データに基づいて生成されるユーザに指定された任意の視点での任意視点映像データを取得する取得手段と、ユーザに指定された視点での任意視点映像データを再生する制御を行う再生手段と、ユーザに視点を移動させる指示を入力させる入力手段と、視聴可能エリア、視聴可能エリア内に定められる区域、及び区域毎に定められる視点移動レベルの情報を取得する手段と、視点を移動させる指示が入力された場合に、再生中の任意視点映像に映る区域の視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動手段と、を有する。
【解決手段】視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置であって、複数の映像データに基づいて生成されるユーザに指定された任意の視点での任意視点映像データを取得する取得手段と、ユーザに指定された視点での任意視点映像データを再生する制御を行う再生手段と、ユーザに視点を移動させる指示を入力させる入力手段と、視聴可能エリア、視聴可能エリア内に定められる区域、及び区域毎に定められる視点移動レベルの情報を取得する手段と、視点を移動させる指示が入力された場合に、再生中の任意視点映像に映る区域の視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動手段と、を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ視点をユーザが指示できる任意視点映像に対応した映像処理装置及びその制御方法に関するものである。
【背景技術】
【０００２】
デジタル放送が開始され、デジタル放送を受信可能なテレビ（デジタルテレビ）が普及している。現在、本格的なデジタル放送時代を迎え、様々な次世代放送システムの研究・開発が多数行われている。その中のひとつとして、カメラ視点をユーザが自由に指示できる任意視点映像を含む映像コンテンツの放送、受信、及び再生システムが注目されている。
【０００３】
任意視点映像は、複数の異なる視点（視点位置及び視線方向）の映像データに基づいて生成される、ユーザに指定された任意の視点での映像を視聴することができる映像である。複数の異なる視点の映像データは、例えば複数のカメラで撮影された映像データや、複数の視点からのアニメーション映像データやＣＧ映像データなどが考えられる。任意視点映像を含む映像コンテンツを再生可能な映像処理装置により、ユーザは、実際にはカメラの存在しない視点にカメラを置いて撮影したかのような映像を視聴することができる。
【０００４】
任意視点映像では、ユーザが設定した視点によっては、撮影機材や制作スタッフなど番組制作者が視聴者に見せたくないものが写ってしまう場合がある。また、被写体に近すぎる視点や地面の下に潜ってしまう視点など、任意視点映像の生成がそもそも困難な視点が指定されることも考えられる。
【０００５】
特許文献１には、任意視点映像の視点位置及び視線方向を制限又は許可する情報を映像データに付加して伝送又は記録するシステムが記載されている。このシステムによれば、任意視点映像において、番組制作者にとって視聴者に見せたくないものが写ってしまう位置や視線方向にユーザが仮想カメラを位置させたり向けたりすることを禁止するように、番組制作者側にて設定できる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７―１９５０９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
前記特許文献１の技術は、任意視点映像を含む映像コンテンツにおいて、制作者側の意図により視聴者による視聴を禁止したい被写体が存在する視聴禁止エリアや視聴者による視聴を許容する被写体が存在する視聴可能エリアを設定する場合において有効である。
【０００８】
ところで、任意視点映像を含む映像コンテンツにおいては、制作者側の意図として、視聴可能エリア内で、視聴者によく見て欲しい区域（範囲）や、逆にそれほど重要でない区域が存在することが考えられる。
【０００９】
例えば、テレビショッピング番組において、商品の映像は視聴者によく見て欲しいが司会者の映像はそれほど重要ではないという番組制作意図がある場合、スタジオ内で商品が陳列されている区域はよく見て欲しい区域、司会者がいる区域は重要ではない区域となる。同様に、テレビショッピング番組を任意視点映像で視聴するユーザにとっても、商品の
映像は、司会者やスタジオセット等よりも、詳細に様々な視点から見たいという要求があることが考えられる。
【００１０】
上記特許文献１の技術では、視聴可能エリア内の区域毎の重要度に応じて任意視点映像の表示（再生）を制御することは想定されていない。
【００１１】
本発明は、任意視点映像データを含む映像コンテンツデータの再生時に任意視点映像の視点を移動させる操作をユーザが行った場合に再生中の任意視点映像において生じる視点移動を区域毎に制御することができる映像処理装置を提供することを目的とする。
【課題を解決するための手段】
【００１２】
本発明は、視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された任意の視点での任意視点映像データを取得する取得手段と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生手段と、
ユーザに、前記再生手段が再生中の任意視点映像において視点を移動させる指示を入力させる入力手段と、
映像コンテンツデータから、前記再生手段が再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する手段と、
再生中の任意視点映像に映る区域を特定する特定手段と、
入力手段において視点を移動させる指示が入力された場合に、前記特定手段により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動手段と、
を有する映像処理装置である。
【００１３】
本発明は、視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置の制御方法であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された視点での任意視点映像データを取得する取得工程と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生工程と、
ユーザに、前記再生工程で再生中の任意視点映像において視点を移動させる指示を入力させる入力工程と、
映像コンテンツデータから、前記再生工程で再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する工程と、
再生中の任意視点映像に映る区域を特定する特定工程と、
入力工程において視点を移動させる指示が入力された場合に、前記特定工程により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動工程と、
を有する映像処理装置の制御方法である。
【発明の効果】
【００１４】
本発明によれば、任意視点映像データを含む映像コンテンツデータの再生時に任意視点映像の視点を移動させる操作をユーザが行った場合に再生中の任意視点映像において生じる視点移動を区域毎に制御することができる映像処理装置を提供することができる。
【図面の簡単な説明】
【００１５】
【図１】実施例に係るデジタル放送受信装置の接続構成例を示す図
【図２】実施例に係るデジタル放送受信装置の機能ブロック構成例を示す図
【図３】任意視点映像の再生処理シーケンスを示す図
【図４】任意視点映像の視聴可能エリアデータ取得処理のシーケンスを示す図
【図５】任意視点映像の視聴可能エリアの一例を示す図
【図６】任意視点映像の視聴可能エリアデータのデータ構造例を示す図
【図７】視聴可能エリアの各区域の視点移動レベル取得処理シーケンスを示す図
【図８】任意視点映像の区域指定の一例を示す図
【図９】任意視点映像の任意視点移動レベルデータのデータ構造例を示す図
【図１０】視点移動レベルに応じて視点移動度を決定する処理のフローチャート
【図１１】視点移動度設定メニューのＧＵＩの一例
【図１２】視点移動レベルに対応する視点移動度の可変幅の一例
【図１３】任意視点映像の視点情報を取得する処理のフローチャート
【図１４】視点移動度に応じて任意視点移動を制御する処理のフローチャート
【図１５】視点移動度に応じた任意視点視聴時の視点移動の一例を示す図
【図１６】視点移動ボタン長押し時に実行される処理のフローチャート
【図１７】視聴可能エリアの区域と視点移動レベルを設定する処理のフローチャート
【図１８】視点移動レベル設定メニューのＧＵＩの一例
【発明を実施するための形態】
【００１６】
（実施例１）
以下に図面、フローチャート、及びシーケンス図を参照して、この発明を実施するための最良の形態を説明する。実施例１では、デジタル放送受信装置がデジタル放送波により放送映像を受信し、インターネット経由により任意視点映像を生成するための任意視点映像生成用データ（任意視点映像データ）を取得する例を説明する。
【００１７】
放送映像は、任意視点映像ではない通常の標準的な番組映像であり、ユーザが任意視点映像での番組視聴を選択しなかった場合や、任意視点映像に非対応のデジタルテレビで番組を視聴する場合に表示される映像である。任意視点映像生成用データは、複数の異なる視点で撮影された映像データや、該映像データからユーザの指定する任意の視点での映像を生成するために必要な各種データ（カメラ位置、視線方向、画角などの情報を格納するデータ）を含む。なお、任意視点映像生成用データは、複数の異なる視点の映像データであれば、カメラで撮影された映像データに限らず、アニメーション映像データやＣＧ映像データ等でも良い。
【００１８】
本実施例では、放送映像データが放送により送信され、任意視点映像データが通信（インターネット）により送信（配信）される構成を例に説明するが、任意視点映像データも放送により送信されても良い。本実施例における「デジタル放送番組データ」は、本発明における、任意視点映像データを含む映像コンテンツデータの一例である。本発明における任意視点映像データを含む映像コンテンツデータは、放送により送信されるデータに限らず、例えば録画機器に蓄積された映像コンテンツデータや、ＤＶＤやＢＤ等のメディアに記録された映像コンテンツデータ等も含む概念を表すものとする。従って、本発明における映像処理装置も、デジタル放送受信装置に限らず、ＤＶＤレコーダやＨＤＤレコーダ等の録画機器、ＤＶＤプレーヤやＢＤプレーヤ等の再生機器、パーソナルコンピュータ（ＰＣ）やＰＣ用拡張ボードや拡張機器等を含む概念である。
【００１９】
なお、本実施例ではカメラの視点（位置及び視線方向）や撮影エリアなどが二次元座標系で表現及び特定される場合を例に説明するが、それに限定する必要はない。
【００２０】
図１は、本実施例におけるデジタル放送受信装置を含む各種機器の接続構成例を示した図である。
デジタル放送受信装置１００は、ＰＣやＤＶＤプレーヤなどの家電機器を含むネットワーク接続可能な各種機器１０２とローカルエリアネットワーク１０１を介して接続され、互いに通信可能となっている。このローカルエリアネットワーク１０１に繋がったデジタル放送受信装置１００は、ルータ１０３を介してインターネット１０４への接続が可能である。デジタル放送受信装置１００と各種機器１０２やルータ１０３との接続形態としては、無線ＬＡＮ等を含む各種の有線及び／又は無線による接続形態を取り得る。
また、デジタル放送受信装置１００は、アンテナ１０５からデジタル放送波を受信し、デジタル放送番組の再生（表示）が可能である。特に、デジタル放送受信装置１００は、視点が異なる複数の映像データを含む映像コンテンツデータを含むデジタル放送番組データを再生可能である。
【００２１】
図２は、本実施例におけるデジタル放送受信装置及びデジタル放送を放送する放送局のシステム構成例を示した図である。
【００２２】
放送局２５０は、放送カメラ２４０で撮影した放送映像を、デジタル放送送信システム２４１によりデジタル放送波に変換し、送信する。放送局２５０は、複数の固定カメラ２５２で撮影した映像データやそれに基づき任意視点映像を作成するための種々のデータ（任意視点映像生成用データ）を、任意視点映像生成用データサーバ２５１に格納する。任意視点映像生成用データサーバ２５１は、任意視点映像生成用データを、クライアント（デジタル放送受信装置１００）からの要求に応じて、インターネット１０４経由で、クライアントへ配信する。
【００２３】
デジタル放送受信装置１００は、テレビの基本機能、任意視点映像データの再生機能、視聴可能エリアの取得機能、視点移動レベルの取得機能、視点移動度の決定機能、及び視点移動度に応じた任意視点の移動制御機能、の各種機能を実現するブロックを有する。
【００２４】
放送映像を受信するテレビ基本機能ブロックについて説明する。
図２において、アンテナ１０５により受信されたデジタル放送波は、チューナ部２１０に入力される。チューナ部は、デジタル放送波を復調してトランスポートストリームデータ（以下、ＴＳと記す）を生成する。ＴＳには、複数チャンネル分の映像データ、音声データ、及び番組情報データ等が多重化されている。
【００２５】
チューナ部２１０は、前記ＴＳを、デスクランブラ２１１を経て、データ分離部２１２へ出力する。データ分離部２１２は、前記ＴＳの中から、リモコン２０１により選択された番組の音声データ、映像データ及び番組情報データを取り出し、それぞれを音声デコード部２１３、映像デコード部２１４、番組情報デコード部２１５へ出力する。
【００２６】
音声デコード部２１３は、データ分離部２１２から入力された音声データに対して復号化処理を施し、音声制御部２１９へ出力する。
音声制御部２１９は、音声データに対して、Ｄ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換処理等を施し、音声出力部２２１へ出力する。
【００２７】
映像デコード部２１４は、データ分離部２１２から入力された映像データに対して、ＭＰＥＧ等の復号化処理を施し、復号した映像データを映像処理部２１７に出力する。
番組情報デコード部２１５は、データ分離部２１２から入力された番組情報データから所望の情報を取得し、番組情報処理２１６、映像処理部２１７、及びＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）処理部２１８へ出力する。
【００２８】
番組情報データには、ＳＩ（Ｓｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ）データ、ＰＳＩ（Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）データが含まれている。
映像処理部２１７は、映像デコード部２１４から入力された映像データと、番組情報デコード部２１５から入力された番組情報とに基づいて、映像データに対し映像調整処理を施し、調整した映像データを表示制御部２２０へ出力する。
【００２９】
表示制御部２２０は、映像処理部２１７、ＧＵＩ処理部２１８から入力された映像データや画面データをリモコン２０１からの操作に応じて切り替えたり、合成するなどしたりして、表示部２２２へ出力する。ユーザがリモコン２０１を操作すると、リモコン２０１は操作に応じた信号を送信し、受光部２０２がリモコン２０１からの信号を受信する。システム制御部２２６は、受光部２０２が受信した信号に基づき、各機能部に対し動作指令を出す。
【００３０】
デジタル放送受信装置１００は、選局に関わる処理を行う選局処理部２２３、時間に関わる処理を行う時間処理部２２４、メモリ管理に関わる処理を行うメモリ管理部２２５を有する。
システム制御部２２６は、各構成要素を統括的にコントロールする。
【００３１】
次に、任意視点映像作成用データを放送局のサーバから取得し、任意視点映像を再生（生成）する処理（任意視点映像再生処理）について説明する。
図３は、本実施例における任意視点映像再生処理についてのシーケンス図である。図３は、任意視点映像をデジタル放送受信装置１００内で生成する処理を示す。
【００３２】
デジタル放送受信装置１００は、インターネット１０４経由で、放送局２５０の任意視点映像生成用データサーバ２５１と接続する。なお、任意視点映像生成用データを保持（保存）する任意視点映像生成用データサーバ２５１は、放送局２５０内にある必要はなく、放送局２５０外にあってもかまわない。「任意視点映像生成用データ」とは、デジタル放送受信装置１００がユーザの指定した視点の任意視点映像を生成するために必要なデータである。任意視点映像生成用データには、例えば、複数の固定カメラ２５２により撮影された映像データ、各固定カメラの視点情報（設置位置、視線方向、画角など）のデータなどが含まれる。任意視点映像生成用データには、これら以外のデータが含まれても良いし、逆に、ここに例示的に列挙したデータを全て含んでいる必要もない。
【００３３】
図２、図３において、デジタル放送受信装置１００の任意視点情報処理部２３２は、リモコン２０１（入力手段）からのユーザの視点移動指示（Ｓ３００）を受けて、移動先の視点の任意視点映像生成用データ取得要求を作成する（Ｓ３０１）。
【００３４】
任意視点情報処理部２３２は、作成した移動先の視点の任意視点映像生成用データ取得要求を要求データ処理部２３１、通信制御部２２７を経て放送局２５０の任意視点映像生成用データサーバ２５１に送信する（Ｓ３０２）。
【００３５】
任意視点映像生成用データサーバ２５１は、デジタル放送受信装置１００から受信した任意視点映像生成用データ取得要求を解析し（Ｓ３０３）、複数の固定カメラ２５２による映像データや撮影データ等から任意視点映像生成用データを作成する（Ｓ３０４）。ここで、任意視点映像生成用データは、固定カメラにより撮影される映像データから特別に
作成したデータでもよいし、複数の固定カメラ２５２により撮影される映像データ及び視点情報でもよい。
【００３６】
任意視点映像生成用データサーバ２５１は、作成した任意視点映像生成用データをデジタル放送受信装置１００へ送信する（Ｓ３０５）。
【００３７】
デジタル放送受信装置１００内の受信データ解析部２３０は、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から送信された任意視点映像生成用データを受信・解析し（Ｓ３０６）、解析結果を任意視点情報処理部２３２に出力する。
【００３８】
任意視点情報処理部２３２は、入力された任意視点映像生成用データをもとにユーザの指定した視点での任意視点映像データを生成し（Ｓ３０７）、表示制御部２２０へ出力する。
【００３９】
表示制御部２２０は、入力される任意視点映像データ、又は必要に応じてＧＵＩ処理部２１８から入力されるＧＵＩと合成した映像データを、表示部２２２へ出力し、任意視点映像を表示する（Ｓ３０８）。
【００４０】
以上の処理の繰り返しにより、デジタル放送受信装置１００は、ユーザの指示した視点の任意視点映像データを再生（生成、合成）し表示することができる（再生手段）。
本実施例では、デジタル放送受信装置１００の外部に設置される任意視点映像生成用データサーバ２５１から取得した任意視点映像生成用データを用いて、デジタル放送受信装置１００が、ユーザに指定された視点の任意視点映像データを生成する例を説明した。
しかしながら、ユーザに指定された視点の任意視点映像データを生成する機能部がデジタル放送受信装置１００に備わっている必要はかならずしも無い。例えば、任意視点映像生成用データサーバ２５１と同様に、デジタル放送受信装置１００の外部に、任意視点映像データを生成する装置を配置し、デジタル放送受信装置１００は、該外部装置で生成された任意視点映像データを通信等で取得するようにしても良い。その場合、デジタル放送受信装置１００は、ユーザに指定された視点の情報をインターネット１０４等の通信手段により外部の任意視点映像生成装置に送信する。外部の任意視点映像生成装置は、デジタル放送受信装置１００から受信した視点情報に基づき、当該視点の任意視点映像データを生成し、デジタル放送受信装置１００へ送信する。
【００４１】
次に、任意視点映像の視聴可能エリアをサーバから取得する処理について説明する。
図４は、本実施例における任意視点映像の視聴可能エリアのデータをサーバから取得する処理（視聴可能エリアデータ取得処理）についてのシーケンス図である。
【００４２】
図５は、本実施例における任意視点映像の視聴可能エリアの概要図である。「視聴可能エリア」とは、デジタル放送受信装置１００により再生可能な任意視点映像に映る被写体の存在範囲を示す。例えば、図５に示すようなスタジオ収録番組であれば、任意視点映像の収録が行われるスタジオ内の、任意視点映像により視聴可能な領域（範囲）を表す。「視聴可能エリア」は、図５に示すスタジオ内のうち、複数の固定カメラ２５２によって撮影された映像データから生成可能な任意視点映像に映り得るエリアである。
【００４３】
図５において、視聴可能エリアは、５つの点（座標（ｘ１、ｙ１）、（ｘ２、ｙ２）、（ｘ３、ｙ３）、（ｘ４、ｙ４）、及び（ｘ５、ｙ５））を頂点とする領域であるが、これは一例である。視聴可能エリアは、番組によって、或いは番組内のシーンによって、変化する場合もある。
【００４４】
図６は、本実施例における任意視点映像の視聴可能エリアデータのデータ構造例である
。視聴可能エリアデータは、指定座標数データと、指定座標数分の座標データにより構成される。「指定座標数」とは、本実施例では、視聴可能エリアの頂点の数を表す。図５に例示する視聴可能エリアは５つの頂点を有する領域であるので、指定座標数＝５である。「指定座標数データ」とは、指定座標数の値を格納するデータである。
【００４５】
図２、図４において、デジタル放送受信装置１００の任意視点情報処理部２３２は、リモコン２０１からの任意視点映像番組の選局指示（Ｓ４００）を受けて、視聴可能エリアデータの取得要求を作成する（Ｓ４０１）。
【００４６】
任意視点情報処理部２３２は、作成した視聴可能エリアデータの取得要求を要求データ処理部２３１、通信制御部２２７を経て放送局２５０の任意視点映像生成用データサーバ２５１に送信する（Ｓ４０２）。
【００４７】
任意視点映像生成用データサーバ２５１は、デジタル放送受信装置１００から受信した視聴可能エリアデータ取得要求を解析し（Ｓ４０３）、視聴可能エリアデータを作成する（Ｓ４０４）。
【００４８】
任意視点映像生成用データサーバ２５１は、作成した視聴可能エリアデータをデジタル放送受信装置１００へ送信する（Ｓ４０５）。
【００４９】
デジタル放送受信装置１００の受信データ解析部２３０は、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から送信された視聴可能エリアデータを受信・解析し（Ｓ４０６）、解析結果を任意視点情報処理部２３２に出力する。
【００５０】
任意視点情報処理部２３２は、入力された視聴可能エリアデータを視点エリア情報管理部２３４に保存する（Ｓ４０７）。
【００５１】
前記視点エリア情報管理部２３４に保存された視聴可能エリアデータにアクセスすることで、視聴可能エリアの情報を取得することができる。以上の処理を実行する任意視点情報処理部２３２は、本発明の「取得手段」として機能している。
視点エリア情報管理部２３４に保存された視聴可能エリアは、例えば図５に示すように、座標（ｘ１、ｙ１）、（ｘ２、ｙ２）、（ｘ３、ｙ３）、（ｘ４、ｙ４）、（ｘ５、ｙ５）を線で囲んだ領域である。
【００５２】
前記視聴可能エリアデータ取得処理にて取得した視聴可能エリア内の各区域における視点移動レベルをサーバから取得する処理（視点移動レベルデータ取得処理）について説明する。
【００５３】
「視点移動レベル」とは、ユーザが視点移動指示を入力したときの視点移動の度合を視聴可能エリア内の各区域において相対的に定義したものであり、番組制作者側（放送局）が任意視点映像データに付随させて送信するデータである。視点移動レベルとは、ユーザが、視聴する任意視点映像の視点を移動させる指示を入力する操作を行った場合に、デジタル放送受信装置１００が再生中の任意視点映像において当該ユーザ操作に応じて視点を移動させる際の、視点移動量の度合いである。視点移動量は、視点位置の移動距離や視線方向の角度変化量などである。任意視点映像の視点移動指示をデジタル放送受信装置１００に入力するための操作は、例えば、ユーザがリモコンのボタンを押下するなどにより行うことができる。視点移動レベルとは、ユーザによる視点移動操作に応じて生じる、再生中の任意視点映像における視点移動（任意視点映像に映る範囲の変化）の感度と言うこともできる。
【００５４】
例えば、リモコンの視点移動指示入力用ボタンをユーザが１回押下した場合に、視点移動レベルが小さい区域では視点が小さく移動し、視点移動レベルが大きい区域では視点が大きく移動するように、再生中の任意視点映像において視点が変化させられる。つまり、同一の視点移動操作を行った場合でも、実際に再生中の任意視点映像において生じる視点移動量が、視点移動レベルに応じて異なる。視点移動レベルは、番組制作者が決定することができる。つまり、視聴可能エリア内の区域毎に視点移動レベルを設定することにより、１単位の視点移動操作（例えばボタン１回押下）に応じて任意視点映像において生じる視点移動量を、視聴可能エリア内の区域毎に異ならせることができる。
【００５５】
例えば、番組制作者側で視聴者によく見てもらいたいと考えている、例えば重要な被写体が存在するエリアでは、番組制作者は、視点移動レベルを小さく設定することができる。再生中の任意視点映像に当該エリアが写っているときは、ユーザが視点移動ボタンを操作して視点を移動させると、再生中の任意視点映像の視点は少しずつ移動していくことになるので、ユーザに、当該エリアに存在する被写体を重点的に見てもらうことができる。
【００５６】
逆に、番組制作者側で、それほど重要でない被写体が存在するエリアでは、番組制作者は、視点移動レベルを大きく設定することができる。再生中の任意視点映像に当該エリアが写っているときは、ユーザが視点移動ボタンを操作して視点を移動させると、再生中の任意視点映像の視点は大きく移動することになるので、当該エリアに存在する被写体が映る任意視点映像が再生される機会が減ることになる。
【００５７】
視点移動レベルの情報は、放送局が、放送波及び／又はインターネット等を介した通信手段により、任意視点映像番組データ（ＴＳ）に付随させて及び／又は独立に、デジタル放送受信装置１００に提供する。視点移動レベルは、例えば１〜５の５段階で示される。
【００５８】
「視点移動量」は、例えば、移動前の視点の任意視点映像に写る領域（移動前視聴エリア）と、移動後の視点の任意視点映像に写る領域（移動後視聴エリア）と、の距離や重なり度合（例えば面積など）に基づいて算出できる。移動前視聴エリアと移動後視聴エリアとの距離とは、例えば、移動前視聴エリアと移動後視聴エリアの代表点（例えば中央の座標や最も左上の座標など）の間の距離とすることができる。移動前視聴エリアと移動後視聴エリアとの重なり度合が大きい場合、視点がそれほど移動しないことを表し、重なり度合が小さい場合、視点が大きく移動することを表す。視点移動量の定義や算出方法は上記の例示に限らない。
【００５９】
図７は、本実施例において、視聴可能エリア内の各区域における視点移動レベルデータをサーバから取得する処理（視点移動レベルデータ取得処理）についてのシーケンス図である。
【００６０】
図２、図７において、デジタル放送受信装置１００の任意視点情報処理部２３２は、リモコン２０１からの任意視点映像番組選局指示（Ｓ７００）を受けて、視点移動レベルデータ取得要求を作成する（Ｓ７０１）。
【００６１】
任意視点情報処理部２３２は、作成した視点移動レベルデータ取得要求を要求データ処理部２３１、通信制御部２２７を経て放送局２５０の任意視点映像生成用データサーバ２５１に送信する（Ｓ７０２）。
【００６２】
任意視点映像生成用データサーバ２５１は、デジタル放送受信装置１００から受信した視点移動レベルデータ取得要求を解析し（Ｓ７０３）、視点移動レベルデータを作成する（Ｓ７０４）。
【００６３】
任意視点映像生成用データサーバ２５１は、作成した視点移動レベルデータをデジタル放送受信装置１００へ送信する（Ｓ７０５）。
【００６４】
デジタル放送受信装置１００の受信データ解析部２３０は、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から送信された視点移動レベルデータを受信・解析し（Ｓ７０６）、解析結果を任意視点情報処理部２３２に出力する。
【００６５】
任意視点情報処理部２３２は、入力された視点移動レベルデータを視聴可能エリアの各区域データと関連付けて視点エリア情報管理部２３４に保存する（Ｓ７０７）。
【００６６】
前記視点エリア情報管理部２３４に保存された視点移動レベルデータにアクセスすることで、視聴可能エリアの各区域に応じた視点移動レベルを取得することができる。以上の処理を実行する任意視点情報処理部２３２は、本発明における「取得手段」として機能している。
【００６７】
図８は、本実施例における、視聴可能エリア内の視点移動レベルが設定された区域の一例である。図８の例では、座標（ｘ１１、ｙ１１）、（ｘ１２、ｙ１２）、（ｘ１３、ｙ１３）、（ｘ１４、ｙ１４）に囲まれた領域を区域１、座標（ｘ２１、ｙ２１）、（ｘ２２、ｙ２２）、（ｘ２３、ｙ２３）、（ｘ２４、ｙ２４）に囲まれた領域を区域２とする。
【００６８】
例えば、この任意視点映像番組はテレビショッピング番組であり、区域１は司会者がいるエリア、区域２は商品が陳列されたエリアである。番組製作者は、視聴者に、司会者よりも商品をより詳細に見てもらいたい場合に、区域１の視点移動レベルを大きい値に設定し、区域２の視点移動レベルを小さい値に設定することができる。
【００６９】
図９は、本実施例における視点移動レベルデータのデータ構造例である。視点移動レベルは、視聴可能エリア内の各区域の情報と関連付けて記載される。図９は、図８に例示した、視点移動レベルが設定された各区域及び各区域の視点移動レベルの情報を格納する視点移動レベルデータの一例である。視点移動レベルデータのデータ構造は、視聴可能エリア内の区域の情報と、区域に関連付けられた視点移動レベルの情報と、を格納できれば、図９に例示する構造に限らない。
【００７０】
視点移動レベルに応じて視点移動度を決定する処理について説明する。
図１０は、本実施例において視点移動レベルに応じて視点移動度を決定する処理（視点移動度決定処理）についてのフローチャートである。
図１１は、本実施例においてユーザが視点移動度の設定を行うための設定メニューのＧＵＩの一例である。
【００７１】
視点移動度管理部２３３は、前記視点移動レベルデータ取得処理により視点エリア情報管理部２３４に保存された視点移動レベルデータを取得する（Ｓ１００１）。
【００７２】
視点移動度管理部２３３は、前記取得した視点移動レベルデータから基準視点移動レベルを取得する（Ｓ１００２）。
【００７３】
「基準視点移動レベル」とは、特に視点移動レベルが設定されていない区域の任意視点映像の再生時に、ユーザが視点移動指示ボタンを押下した場合に、デフォルトで適用される視点移動レベルである。図１１の例では、基準視点移動レベルは５段階のうちの中央値である「レベル３」に設定されている。
【００７４】
視点移動度管理部２３３は、前記取得した視点移動レベルデータから基準視点移動レベルに対応づけられた視点移動度（基準視点移動度）を取得する（Ｓ１００３）。
【００７５】
「視点移動度」とは、ユーザが視点移動ボタンを押下したときに、再生中の任意視点映像において生じる視点移動の移動加減（移動量）であり、前記取得した視点移動レベル毎に規定されている。視点移動レベル毎の視点移動度は、デジタル放送受信装置１００により設定され、記憶されるデータである。視点移動度は、具体的には、操作ボタンを押下したときの視点移動距離（ピクセル）、視点移動角度、視点移動速度など、である。
【００７６】
「基準視点移動度」は、基準視点移動レベル（図１１の例では「レベル３」）に対してデフォルトで設定された視点移動度である（図１１の例では「６」）。
【００７７】
視点移動度管理部２３３は、前記取得した視点移動レベルデータから区域数（Ｎとする。図８の例ではＮ＝２）を取得する（Ｓ１００４）。
【００７８】
視点移動度管理部２３３は、ｉ番目の区域（区域（ｉ）とする。ｉ＝１、２、・・・、Ｎ）における視点移動レベルを、前記取得した視点移動レベルデータ（図９の「移動レベル」に格納された値）から取得する。視点移動度管理部２３３は、取得した視点移動レベルと、図１２に示す、各視点移動レベルと視点移動度とを対応づけたテーブルと、に基づき、取得した視点移動レベルに応じたデフォルトの視点移動度を取得する。この処理をステップＳ１００４で取得した区域数分行う（Ｓ１００５、Ｓ１００６）
図１２は、各視点移動レベルに対応する視点移動度の範囲を規定したテーブルである。図１２に示すように、１つの視点移動レベルに対し、所定範囲内に含まれる複数の視点移動度を対応づけることもできる。１つの視点移動レベルに対し１つの視点移動度を対応づけることもできる。
図１２に示す視点移動レベルと視点移動度との対応を規定したテーブルにおいて、１つの視点移動レベルに対し複数の視点移動度が対応づけられている場合は、各視点移動レベルに対してデフォルトの視点移動度が設定されているようにしても良い。図１２の例では、所定の範囲１〜２に含まれる複数の視点移動度が対応づけられている視点移動レベル１に対応するデフォルトの視点移動度は１、同様に視点移動レベル３に対応するデフォルトの視点移動度は７、というように設定されているようにしても良い。
また、視点移動レベルと視点移動度との対応づけは、図１２に示すようなテーブルに限らない。例えば、視点移動レベルｎに対応する視点移動度は、視点移動レベルｎ＋１に対応する視点移動度より小さく且つ視点移動レベルｎ−１に対応する視点移動度より大きい値になるように設定されていれば良い。
【００７９】
視点移動度管理部２３３は、ステップＳ１００６で取得した視点移動度をそれぞれの区域における視点移動度として保存する（Ｓ１００７）。
【００８０】
以上の処理により、デジタル放送受信装置１００は、取得した視聴可能エリア内の各区域における視点移動レベルに応じた視点移動度を決定する。以上の処理を実行する視点移動度管理部２３３は、本発明における「取得手段」として機能している。
【００８１】
図１１の例では、区域１（司会者エリア）では、視点移動レベル４、視点移動度１０、区域２（商品陳列エリア）では、視点移動レベル１、視点移動度２に設定されているが、図１２に示すように、視点移動度は視点移動レベルに応じてある範囲内で可変にできる。例えば、図１２の例では、例えば視点移動レベル３に対応する視点移動度は、５〜８の値が設定可能である。
【００８２】
決定した視点移動度に応じた視点移動制御は、現在再生（表示）している任意視点映像
の視点情報を取得する処理と、現在の視聴区域の視点移動度に基づき、ユーザ操作に応じて視点移動を制御する処理とで構成される。
【００８３】
現在表示している任意視点映像の視点情報を取得する処理について説明する。
図１３は、本実施例における、現在再生（表示）している任意視点映像の視点情報を取得する処理（現在視点情報取得処理）についてのフローチャートである。
【００８４】
図１３において、任意視点情報処理部２３２は、システム制御部２２６から現在の再生状態（デジタル放送映像再生中、任意視点映像再生中、外部入力映像再生中など）を取得する（Ｓ１２０１）。
【００８５】
取得した現在の再生状態が任意視点映像再生中の場合（Ｓ１２０２のＹｅｓ）、任意視点情報処理部２３２は、要求データ処理部２３１、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から任意視点映像の視点情報を取得する（Ｓ１２０３）。
【００８６】
取得した任意視点映像の視点情報が、既に保存してある視点情報に対し差異があった場合（Ｓ１２０４のＹｅｓ）、任意視点情報処理部２３２は、任意視点映像の視点情報を更新する（Ｓ１２０５）。
【００８７】
デジタル放送受信装置１００において任意視点映像データを含む番組データが再生されている間、一定時間おきに（例えば１秒間隔）以上の処理を繰り返し行う。これにより、任意視点情報処理部２３２は、現在再生している任意視点映像の視点情報を取得することが可能となる。
【００８８】
次に、現在の再生（表示）している任意視点映像に映っている区域の視点移動度に応じて視点移動を制御する処理（視点移動処理）について説明する。
図１４は、本実施例における視点移動処理についてのフローチャートである。図１４のフローチャートで表される視点移動処理は、ユーザがリモコンの視点移動ボタンを押下してデジタル放送受信装置１００に対し、現在再生（表示）中の任意視点映像の視点を移動させる指示が入力された場合に、実行される。
【００８９】
任意視点情報処理部２３２は、前記現在視点情報取得処理により、現在再生している任意視点映像の視点情報を取得する（Ｓ１３０１）。
【００９０】
任意視点情報処理部２３２は、前記視点移動レベルデータ取得処理により、前記取得した現在再生している視点の任意視点映像に対応する区域（再生中の任意視点映像に映っている区域）の視点移動レベルを取得する（Ｓ１３０２）。
前記現在視点情報取得処理により取得した現在再生している（表示している）任意視点映像の視点の情報に基づき、任意視点情報処理部２３２は、当該任意視点映像に映る区域を特定する。ここで、「任意視点映像に映る区域」とは、例えば番組（映像）が収録されるロケーション（スタジオや舞台など）において、任意視点映像により視聴可能なエリア（範囲）をいう。任意視点映像に映る区域は、番組収録がされるロケーションの情報や任意視点映像の視点（仮想カメラの視点）の情報に基づき特定することができる。ロケーションの情報は、例えば、スタジオの形状、広さ、スタジオセットや出演者などの大きさや配置位置の座標などである。任意視点映像の視点の情報は、例えば、視点位置、視線方向、画角、ズーム倍率、焦点距離などである。この処理を実行する任意視点情報処理部２３２は、本発明における「特定手段」として機能している。
【００９１】
任意視点情報処理部２３２は、前記視点移動度決定処理により、前記特定した現在再生中の任意視点映像に映っている区域に定められている視点移動レベルに応じた視点移動度
を決定する（Ｓ１３０３）。図８に示すように、視聴可能エリア内の一部の区域について視点移動レベルが定められている場合、前記特定した任意視点映像に映る区域と、視点移動レベルが定められた区域とが共通部分を有するときに、当該視点移動レベルに基づき視点移動度を決定しても良い。或いは、前記特定した任意視点映像に映る区域に、視点移動レベルが定められた区域が含まれる場合に、当該視点移動レベルに基づき視点移動度を決定しても良い。また、前記特定した任意視点映像に映る区域に、異なる視点移動レベルが定められた複数の区域が含まれる場合は、前記特定した任意視点映像に映る区域との共通部分の大きさが最大の区域に定められた視点移動レベルに基づき視点移動度を決定しても良い。或いは、この場合、複数の異なる視点移動レベルのうち最も小さい値又は最も大きい値に基づき、視点移動度を決定するようにしても良い。
【００９２】
任意視点情報処理部２３２は、前記決定した視点移動度を、移動先の視点の任意視点映像作成用データ取得要求と供に任意視点映像生成用データサーバ２５１に送信し、視点移動度に応じた移動先の視点の任意視点映像生成用データを取得する（Ｓ１３０４）。
【００９３】
任意視点情報処理部２３２は、取得した移動先の視点の任意視点映像生成用データを元に、任意視点映像再生処理を行う（Ｓ１３０５）。
【００９４】
以上により、前記視点移動度決定処理により決定した視点移動度に応じた視点移動処理を実現する。以上の処理を実行する任意視点情報処理部２３２が、本発明における「視点移動手段」として機能している。
【００９５】
図１５は、図８、図９、図１１及び図１２に例示した任意視点映像を含む番組（スタジオ収録のテレビショッピング番組）において、本実施例における視点移動度に応じた視点移動制御が行われた場合の、視点移動の一例を示す図である。
【００９６】
図１１に示すように、区域１は出演者エリアであり、視点移動レベルは４に設定され、区域２は品物エリアであり、視点移動レベルは１に設定されている。図１２に基づき、視点移動レベル４に対応する視点移動度は１０に設定されるとともに、視点移動レベル１に対応する視点移動度は２に設定される。
図１５に示すように、視点移動度が１０に設定された区域１と、視点移動度が２に設定された区域２では、ユーザによる視点移動操作に対して再生中の任意視点映像において生じる視点の移動の仕方が異なる。同じリモコン操作を行った場合でも、任意視点映像に区域１が映っているときより区域２が映っているときの方がより細かく視点を移動させることが出来る。そのため、ユーザは区域２に存在する被写体に関しては種々の視点からより詳細に見ることができる。例えば、興味のある商品を様々な角度から見ることができる。映像コンテンツデータの制作者は、ユーザに詳細に見てほしい被写体やユーザにとって詳細に見たいという要求があると考えられる被写体が存在する区域の視点移動レベルの値を小さく設定することにより、当該区域における視点移動度が小さくなるようにできる。
【００９７】
本実施例では、視点移動レベルデータを放送局から取得する例を説明したが、デジタル放送受信装置側で視点移動レベルデータを作成してもよい。例えば、デジタル放送受信装置１００が、再生（表示）中の映像を解析して被写体（出演者や物体）の密度（空間周波数）を検出し、密度が高いエリア（細かい被写体が多く映っているエリア）に対して高い視点移動レベル及び視点移動度を割り当ててもよい。
【００９８】
また、本実施例では、任意視点映像作成用データをインターネット経由で放送局のサーバから取得する構成例を説明したが、任意視点映像作成用データは放送映像データとともにＴＳに多重化されてもよい。また、本実施例ではデジタル放送受信装置１００においてユーザの指定した視点の任意視点映像を合成（生成）する例を説明したが、視点情報を元
に放送局のサーバその他のデジタル放送受信装置１００の外部の装置で任意視点映像を生成する構成でもよい。その場合、デジタル放送受信装置１００は、インターネット等の通信手段を介して、外部装置で生成された任意視点映像データを取得する。
【００９９】
本実施例のデジタル放送受信装置１００によれば、番組制作者が視聴可能エリア内の区域毎に設定した視点移動レベルに応じて、ユーザが視点を移動させる操作を行った際に再生中の任意視点映像において生じる視点移動が制御される。従って、任意視点映像の視聴中にユーザが視点を移動させる場合に、番組制作者の意図に沿わない視点移動をしてしまうことを抑制できる。
【０１００】
（実施例２）
本実施例では、前記実施例１において、任意視点映像の再生時にユーザが視点移動ボタンを長押しした場合に実行される視点移動制御について説明する。
【０１０１】
実施例１では、視点移動の指示をデジタル放送受信装置１００に送信（入力）するための操作ボタンが、ユーザにより１回（１単位）操作された場合に、再生（表示）中の任意視点映像に生じさせる視点の移動量を、視聴中（表示中）の区域によって異ならせた。
【０１０２】
リモコン等に設けられる操作ボタンをユーザが押下し続けた場合（長押しした場合）、当該操作ボタンの１回の押下に対応付けられた指示が連続的に装置に送信（入力）されるように構成されていることが多い。
本実施例では、視点移動の指示送信（指示入力）に割り当てられた操作ボタンが長押しされた場合に、連続的な視点移動指示を送信（入力）することができるようリモコン２０１及びデジタル放送受信装置１００が構成されているものとする。
【０１０３】
視点の連続的な移動とは、再生中の任意視点映像に対して、カメラの視線方向を変化させるパン操作やチルト操作、カメラの位置を移動させるドリー操作、ズーム操作などを行った場合に撮影される映像と同様の変化をもたらすような、視点の移動である。
【０１０４】
図１６は、本実施例における、ユーザが視点移動ボタンを長押しして連続的な視点移動指示を入力した場合に、再生中の任意視点映像に映っている区域の視点移動度に応じて任意視点映像の再生を制御する処理についてのフローチャートである。
【０１０５】
任意視点情報処理部２３２は、視点移動ボタンが押下状態かどうかを判定する（Ｓ１５０１）。
【０１０６】
前記視点移動ボタンの状態が押下状態の場合（Ｓ１５０１のＹｅｓ）、前記現在視点情報取得処理により、現在再生している任意視点映像の視点の情報を取得する（Ｓ１５０２）。
【０１０７】
任意視点情報処理部２３２は、前記視点移動レベルデータ取得処理により、前記取得した現在再生している視点の任意視点映像に映る区域を特定し、当該区域に定められた視点移動レベルを取得する（Ｓ１５０３）。
【０１０８】
任意視点情報処理部２３２は、前記視点移動度決定処理により、前記特定した現在再生中の任意視点映像に映る区域に定められている視点移動レベルに応じた視点移動度を決定する（Ｓ１５０４）。
【０１０９】
任意視点情報処理部２３２は、前記決定した視点移動度を、移動先の視点の任意視点映像生成用データ取得要求と供に任意視点映像生成用データサーバ２５１に送信し、視点移
動度に応じた任意視点映像再生処理を行う（Ｓ１５０５）。
【０１１０】
以上の一連の処理が終了した後、任意視点情報処理部２３２は再度、視点移動ボタンの押下状態を判定し、押下状態でなかったら（Ｓ１５０１のＮｏ）、処理を終了する。
【０１１１】
以上の処理を視点移動ボタンが押下状態の場合に連続して行うことによって、視点移動ボタンが長押しされた場合に、再生（表示）中の任意視点映像に映っている区域に設定された視点移動レベルに応じた連続的な視点移動処理を行うことができる。
【０１１２】
本実施例によれば、ユーザが視点移動ボタンを長押しして連続的な視点移動の指示を入力した場合に、視点移動レベルとして小さい値が設定された区域では、視点移動が細かくなる（視点移動速度が遅くなる）。一方、視点移動レベルとして大きい値が設定された区域では、視点移動が粗くなる（視点移動速度が速くなる）。つまり、本実施例では、視点移動レベルは、任意視点映像の再生時にユーザが視点を連続的に移動させる指示を入力した場合に、該再生中の任意視点映像において生じる視点の移動の速度の度合を示す。
【０１１３】
従って、番組制作者は、視聴者によく見てもらいたい被写体が存在する区域に対し小さい視点移動レベルの値を設定することができる。ユーザが、例えば、仮想カメラに対しパン操作を行って番組収録スタジオ内を見渡すべく、視点移動ボタンを長押しした場合、小さい視点移動レベルが設定された区域では、他の区域よりも、パン速度が遅くなる。よって、番組制作者が視聴者によく見てもらいたい被写体を、ユーザによく見せることができる。
【０１１４】
（実施例３）
本実施例では、前記実施例１において、任意視点映像の再生時に、視聴可能エリア内の区域とその視点移動レベルを受信機（デジタル放送受信装置１００）で設定する例について説明する。
【０１１５】
実施例１及び２では、視聴可能エリア内に設定された区域の情報と、区域毎に設定された視点移動レベルの情報が、放送局からインターネットや放送波によりデジタル放送受信装置１００へ提供される例について説明した。つまり、視聴可能エリア内のどの区域をどの視点移動レベルに設定するかは、放送局側すなわち番組制作者が決定し、デジタル放送受信装置１００は当該番組制作者による設定に従って動作する。これにより、番組制作者の意図に沿った任意視点映像の視聴体験をユーザに提供できるという効果を奏した。
【０１１６】
これに対し本実施例では、視聴可能エリア内のどの区域をどの視点移動レベルに設定するかを、ユーザ側が決定できる構成例について説明する。
図１７は、本実施例において視聴可能エリア内の区域とその視点移動レベルを受信機で設定する処理についてのフローチャートである。
図１８は、本実施例において視聴可能エリア内の区域とその視点移動レベルを設定するための設定メニューのＧＵＩの一例である。
【０１１７】
ユーザは、視点移動レベルを設定したい区域が再生中の任意視点映像に映っているときに、視点移動レベル設定要求をデジタル放送受信装置１００に送信する。視点移動レベル設定要求の送信は、例えば、リモコンに設けられる専用ボタンを押下することにより実現することができるが、これに限定されない。
【０１１８】
視点移動レベル設定要求を受信した任意視点情報処理部２３２は、前記視点移動レベル取得処理により取得された視点移動レベルデータから、視点移動レベルの最小値及び最大値を取得する（Ｓ１６０１、Ｓ１６０２）。
【０１１９】
また、任意視点情報処理部２３２は、現在表示している任意視点映像に映っている区域の座標を求め（Ｓ１６０３）、視点移動レベル設定の対象となる区域を決定する（Ｓ１６０４）。
【０１２０】
その後、任意視点情報処理部２３２は、視点移動レベル設定メニューの表示を行い（Ｓ１６０５）、ユーザに視点移動レベルの設定操作を行わせる。
【０１２１】
ユーザは表示された視点移動レベル設定メニューにより、指定した区域（現在再生中の任意視点映像に映っている区域）の視点移動レベルを設定する（Ｓ１６０６）。このとき、設定できる視点移動レベルの範囲は、前記取得した視点移動レベルの最小値及び最大値によって制限される。
【０１２２】
ユーザが視点移動レベル設定メニューにより、視点移動レベルを設定した場合、任意視点情報処理部２３２は、視点エリア情報管理部２３４の視点移動レベルデータを更新する（Ｓ１６０７）。以上の処理を実行する任意視点情報処理部２３２、ユーザの入力を受け付けるリモコン２０１、視点移動レベル設定メニューのＧＵＩを構成するＧＵＩ処理部２１８が、本発明における「設定手段」として機能している。
【０１２３】
本実施例のデジタル放送受信装置によれば、ユーザは、任意視点映像を視聴しながら、例えば、よく見たい区域に対して小さい視点移動レベルを設定したり、逆に、自分にとって関心が低い区域に対して大きい視点移動レベルを設定したりできる。これにより、ユーザは、自分の興味などに応じて、任意視点映像の視点移動を行うことができるので、より一層快適な任意視点映像の視聴体験を提供することが可能になる。
【０１２４】
以上述べた実施例では、ユーザが視点移動をデジタル放送受信装置１００へ入力するための操作を行う手段は、リモコン２０１に設けられる視点移動ボタンだが、ユーザが視点移動指示を入力する入力手段これに限らない。例えばタッチパッド、ジョグダイヤル、カーソルキー、ジョイスティックなどにより入力手段を構成することもできる。
【符号の説明】
【０１２５】
１００ デジタル放送受信装置、２０１ リモコン、２３２ 任意視点情報処理部、２３３ 視点移動度管理部
【技術分野】
【０００１】
本発明は、カメラ視点をユーザが指示できる任意視点映像に対応した映像処理装置及びその制御方法に関するものである。
【背景技術】
【０００２】
デジタル放送が開始され、デジタル放送を受信可能なテレビ（デジタルテレビ）が普及している。現在、本格的なデジタル放送時代を迎え、様々な次世代放送システムの研究・開発が多数行われている。その中のひとつとして、カメラ視点をユーザが自由に指示できる任意視点映像を含む映像コンテンツの放送、受信、及び再生システムが注目されている。
【０００３】
任意視点映像は、複数の異なる視点（視点位置及び視線方向）の映像データに基づいて生成される、ユーザに指定された任意の視点での映像を視聴することができる映像である。複数の異なる視点の映像データは、例えば複数のカメラで撮影された映像データや、複数の視点からのアニメーション映像データやＣＧ映像データなどが考えられる。任意視点映像を含む映像コンテンツを再生可能な映像処理装置により、ユーザは、実際にはカメラの存在しない視点にカメラを置いて撮影したかのような映像を視聴することができる。
【０００４】
任意視点映像では、ユーザが設定した視点によっては、撮影機材や制作スタッフなど番組制作者が視聴者に見せたくないものが写ってしまう場合がある。また、被写体に近すぎる視点や地面の下に潜ってしまう視点など、任意視点映像の生成がそもそも困難な視点が指定されることも考えられる。
【０００５】
特許文献１には、任意視点映像の視点位置及び視線方向を制限又は許可する情報を映像データに付加して伝送又は記録するシステムが記載されている。このシステムによれば、任意視点映像において、番組制作者にとって視聴者に見せたくないものが写ってしまう位置や視線方向にユーザが仮想カメラを位置させたり向けたりすることを禁止するように、番組制作者側にて設定できる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７―１９５０９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
前記特許文献１の技術は、任意視点映像を含む映像コンテンツにおいて、制作者側の意図により視聴者による視聴を禁止したい被写体が存在する視聴禁止エリアや視聴者による視聴を許容する被写体が存在する視聴可能エリアを設定する場合において有効である。
【０００８】
ところで、任意視点映像を含む映像コンテンツにおいては、制作者側の意図として、視聴可能エリア内で、視聴者によく見て欲しい区域（範囲）や、逆にそれほど重要でない区域が存在することが考えられる。
【０００９】
例えば、テレビショッピング番組において、商品の映像は視聴者によく見て欲しいが司会者の映像はそれほど重要ではないという番組制作意図がある場合、スタジオ内で商品が陳列されている区域はよく見て欲しい区域、司会者がいる区域は重要ではない区域となる。同様に、テレビショッピング番組を任意視点映像で視聴するユーザにとっても、商品の
映像は、司会者やスタジオセット等よりも、詳細に様々な視点から見たいという要求があることが考えられる。
【００１０】
上記特許文献１の技術では、視聴可能エリア内の区域毎の重要度に応じて任意視点映像の表示（再生）を制御することは想定されていない。
【００１１】
本発明は、任意視点映像データを含む映像コンテンツデータの再生時に任意視点映像の視点を移動させる操作をユーザが行った場合に再生中の任意視点映像において生じる視点移動を区域毎に制御することができる映像処理装置を提供することを目的とする。
【課題を解決するための手段】
【００１２】
本発明は、視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された任意の視点での任意視点映像データを取得する取得手段と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生手段と、
ユーザに、前記再生手段が再生中の任意視点映像において視点を移動させる指示を入力させる入力手段と、
映像コンテンツデータから、前記再生手段が再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する手段と、
再生中の任意視点映像に映る区域を特定する特定手段と、
入力手段において視点を移動させる指示が入力された場合に、前記特定手段により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動手段と、
を有する映像処理装置である。
【００１３】
本発明は、視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置の制御方法であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された視点での任意視点映像データを取得する取得工程と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生工程と、
ユーザに、前記再生工程で再生中の任意視点映像において視点を移動させる指示を入力させる入力工程と、
映像コンテンツデータから、前記再生工程で再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する工程と、
再生中の任意視点映像に映る区域を特定する特定工程と、
入力工程において視点を移動させる指示が入力された場合に、前記特定工程により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動工程と、
を有する映像処理装置の制御方法である。
【発明の効果】
【００１４】
本発明によれば、任意視点映像データを含む映像コンテンツデータの再生時に任意視点映像の視点を移動させる操作をユーザが行った場合に再生中の任意視点映像において生じる視点移動を区域毎に制御することができる映像処理装置を提供することができる。
【図面の簡単な説明】
【００１５】
【図１】実施例に係るデジタル放送受信装置の接続構成例を示す図
【図２】実施例に係るデジタル放送受信装置の機能ブロック構成例を示す図
【図３】任意視点映像の再生処理シーケンスを示す図
【図４】任意視点映像の視聴可能エリアデータ取得処理のシーケンスを示す図
【図５】任意視点映像の視聴可能エリアの一例を示す図
【図６】任意視点映像の視聴可能エリアデータのデータ構造例を示す図
【図７】視聴可能エリアの各区域の視点移動レベル取得処理シーケンスを示す図
【図８】任意視点映像の区域指定の一例を示す図
【図９】任意視点映像の任意視点移動レベルデータのデータ構造例を示す図
【図１０】視点移動レベルに応じて視点移動度を決定する処理のフローチャート
【図１１】視点移動度設定メニューのＧＵＩの一例
【図１２】視点移動レベルに対応する視点移動度の可変幅の一例
【図１３】任意視点映像の視点情報を取得する処理のフローチャート
【図１４】視点移動度に応じて任意視点移動を制御する処理のフローチャート
【図１５】視点移動度に応じた任意視点視聴時の視点移動の一例を示す図
【図１６】視点移動ボタン長押し時に実行される処理のフローチャート
【図１７】視聴可能エリアの区域と視点移動レベルを設定する処理のフローチャート
【図１８】視点移動レベル設定メニューのＧＵＩの一例
【発明を実施するための形態】
【００１６】
（実施例１）
以下に図面、フローチャート、及びシーケンス図を参照して、この発明を実施するための最良の形態を説明する。実施例１では、デジタル放送受信装置がデジタル放送波により放送映像を受信し、インターネット経由により任意視点映像を生成するための任意視点映像生成用データ（任意視点映像データ）を取得する例を説明する。
【００１７】
放送映像は、任意視点映像ではない通常の標準的な番組映像であり、ユーザが任意視点映像での番組視聴を選択しなかった場合や、任意視点映像に非対応のデジタルテレビで番組を視聴する場合に表示される映像である。任意視点映像生成用データは、複数の異なる視点で撮影された映像データや、該映像データからユーザの指定する任意の視点での映像を生成するために必要な各種データ（カメラ位置、視線方向、画角などの情報を格納するデータ）を含む。なお、任意視点映像生成用データは、複数の異なる視点の映像データであれば、カメラで撮影された映像データに限らず、アニメーション映像データやＣＧ映像データ等でも良い。
【００１８】
本実施例では、放送映像データが放送により送信され、任意視点映像データが通信（インターネット）により送信（配信）される構成を例に説明するが、任意視点映像データも放送により送信されても良い。本実施例における「デジタル放送番組データ」は、本発明における、任意視点映像データを含む映像コンテンツデータの一例である。本発明における任意視点映像データを含む映像コンテンツデータは、放送により送信されるデータに限らず、例えば録画機器に蓄積された映像コンテンツデータや、ＤＶＤやＢＤ等のメディアに記録された映像コンテンツデータ等も含む概念を表すものとする。従って、本発明における映像処理装置も、デジタル放送受信装置に限らず、ＤＶＤレコーダやＨＤＤレコーダ等の録画機器、ＤＶＤプレーヤやＢＤプレーヤ等の再生機器、パーソナルコンピュータ（ＰＣ）やＰＣ用拡張ボードや拡張機器等を含む概念である。
【００１９】
なお、本実施例ではカメラの視点（位置及び視線方向）や撮影エリアなどが二次元座標系で表現及び特定される場合を例に説明するが、それに限定する必要はない。
【００２０】
図１は、本実施例におけるデジタル放送受信装置を含む各種機器の接続構成例を示した図である。
デジタル放送受信装置１００は、ＰＣやＤＶＤプレーヤなどの家電機器を含むネットワーク接続可能な各種機器１０２とローカルエリアネットワーク１０１を介して接続され、互いに通信可能となっている。このローカルエリアネットワーク１０１に繋がったデジタル放送受信装置１００は、ルータ１０３を介してインターネット１０４への接続が可能である。デジタル放送受信装置１００と各種機器１０２やルータ１０３との接続形態としては、無線ＬＡＮ等を含む各種の有線及び／又は無線による接続形態を取り得る。
また、デジタル放送受信装置１００は、アンテナ１０５からデジタル放送波を受信し、デジタル放送番組の再生（表示）が可能である。特に、デジタル放送受信装置１００は、視点が異なる複数の映像データを含む映像コンテンツデータを含むデジタル放送番組データを再生可能である。
【００２１】
図２は、本実施例におけるデジタル放送受信装置及びデジタル放送を放送する放送局のシステム構成例を示した図である。
【００２２】
放送局２５０は、放送カメラ２４０で撮影した放送映像を、デジタル放送送信システム２４１によりデジタル放送波に変換し、送信する。放送局２５０は、複数の固定カメラ２５２で撮影した映像データやそれに基づき任意視点映像を作成するための種々のデータ（任意視点映像生成用データ）を、任意視点映像生成用データサーバ２５１に格納する。任意視点映像生成用データサーバ２５１は、任意視点映像生成用データを、クライアント（デジタル放送受信装置１００）からの要求に応じて、インターネット１０４経由で、クライアントへ配信する。
【００２３】
デジタル放送受信装置１００は、テレビの基本機能、任意視点映像データの再生機能、視聴可能エリアの取得機能、視点移動レベルの取得機能、視点移動度の決定機能、及び視点移動度に応じた任意視点の移動制御機能、の各種機能を実現するブロックを有する。
【００２４】
放送映像を受信するテレビ基本機能ブロックについて説明する。
図２において、アンテナ１０５により受信されたデジタル放送波は、チューナ部２１０に入力される。チューナ部は、デジタル放送波を復調してトランスポートストリームデータ（以下、ＴＳと記す）を生成する。ＴＳには、複数チャンネル分の映像データ、音声データ、及び番組情報データ等が多重化されている。
【００２５】
チューナ部２１０は、前記ＴＳを、デスクランブラ２１１を経て、データ分離部２１２へ出力する。データ分離部２１２は、前記ＴＳの中から、リモコン２０１により選択された番組の音声データ、映像データ及び番組情報データを取り出し、それぞれを音声デコード部２１３、映像デコード部２１４、番組情報デコード部２１５へ出力する。
【００２６】
音声デコード部２１３は、データ分離部２１２から入力された音声データに対して復号化処理を施し、音声制御部２１９へ出力する。
音声制御部２１９は、音声データに対して、Ｄ／Ａ（Ｄｉｇｉｔａｌ／Ａｎａｌｏｇ）変換処理等を施し、音声出力部２２１へ出力する。
【００２７】
映像デコード部２１４は、データ分離部２１２から入力された映像データに対して、ＭＰＥＧ等の復号化処理を施し、復号した映像データを映像処理部２１７に出力する。
番組情報デコード部２１５は、データ分離部２１２から入力された番組情報データから所望の情報を取得し、番組情報処理２１６、映像処理部２１７、及びＧＵＩ（Ｇｒａｐｈｉｃ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）処理部２１８へ出力する。
【００２８】
番組情報データには、ＳＩ（Ｓｅｒｖｉｃｅ Ｉｎｆｏｒｍａｔｉｏｎ）データ、ＰＳＩ（Ｐｒｏｇｒａｍ Ｓｐｅｃｉｆｉｃ Ｉｎｆｏｒｍａｔｉｏｎ）データが含まれている。
映像処理部２１７は、映像デコード部２１４から入力された映像データと、番組情報デコード部２１５から入力された番組情報とに基づいて、映像データに対し映像調整処理を施し、調整した映像データを表示制御部２２０へ出力する。
【００２９】
表示制御部２２０は、映像処理部２１７、ＧＵＩ処理部２１８から入力された映像データや画面データをリモコン２０１からの操作に応じて切り替えたり、合成するなどしたりして、表示部２２２へ出力する。ユーザがリモコン２０１を操作すると、リモコン２０１は操作に応じた信号を送信し、受光部２０２がリモコン２０１からの信号を受信する。システム制御部２２６は、受光部２０２が受信した信号に基づき、各機能部に対し動作指令を出す。
【００３０】
デジタル放送受信装置１００は、選局に関わる処理を行う選局処理部２２３、時間に関わる処理を行う時間処理部２２４、メモリ管理に関わる処理を行うメモリ管理部２２５を有する。
システム制御部２２６は、各構成要素を統括的にコントロールする。
【００３１】
次に、任意視点映像作成用データを放送局のサーバから取得し、任意視点映像を再生（生成）する処理（任意視点映像再生処理）について説明する。
図３は、本実施例における任意視点映像再生処理についてのシーケンス図である。図３は、任意視点映像をデジタル放送受信装置１００内で生成する処理を示す。
【００３２】
デジタル放送受信装置１００は、インターネット１０４経由で、放送局２５０の任意視点映像生成用データサーバ２５１と接続する。なお、任意視点映像生成用データを保持（保存）する任意視点映像生成用データサーバ２５１は、放送局２５０内にある必要はなく、放送局２５０外にあってもかまわない。「任意視点映像生成用データ」とは、デジタル放送受信装置１００がユーザの指定した視点の任意視点映像を生成するために必要なデータである。任意視点映像生成用データには、例えば、複数の固定カメラ２５２により撮影された映像データ、各固定カメラの視点情報（設置位置、視線方向、画角など）のデータなどが含まれる。任意視点映像生成用データには、これら以外のデータが含まれても良いし、逆に、ここに例示的に列挙したデータを全て含んでいる必要もない。
【００３３】
図２、図３において、デジタル放送受信装置１００の任意視点情報処理部２３２は、リモコン２０１（入力手段）からのユーザの視点移動指示（Ｓ３００）を受けて、移動先の視点の任意視点映像生成用データ取得要求を作成する（Ｓ３０１）。
【００３４】
任意視点情報処理部２３２は、作成した移動先の視点の任意視点映像生成用データ取得要求を要求データ処理部２３１、通信制御部２２７を経て放送局２５０の任意視点映像生成用データサーバ２５１に送信する（Ｓ３０２）。
【００３５】
任意視点映像生成用データサーバ２５１は、デジタル放送受信装置１００から受信した任意視点映像生成用データ取得要求を解析し（Ｓ３０３）、複数の固定カメラ２５２による映像データや撮影データ等から任意視点映像生成用データを作成する（Ｓ３０４）。ここで、任意視点映像生成用データは、固定カメラにより撮影される映像データから特別に
作成したデータでもよいし、複数の固定カメラ２５２により撮影される映像データ及び視点情報でもよい。
【００３６】
任意視点映像生成用データサーバ２５１は、作成した任意視点映像生成用データをデジタル放送受信装置１００へ送信する（Ｓ３０５）。
【００３７】
デジタル放送受信装置１００内の受信データ解析部２３０は、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から送信された任意視点映像生成用データを受信・解析し（Ｓ３０６）、解析結果を任意視点情報処理部２３２に出力する。
【００３８】
任意視点情報処理部２３２は、入力された任意視点映像生成用データをもとにユーザの指定した視点での任意視点映像データを生成し（Ｓ３０７）、表示制御部２２０へ出力する。
【００３９】
表示制御部２２０は、入力される任意視点映像データ、又は必要に応じてＧＵＩ処理部２１８から入力されるＧＵＩと合成した映像データを、表示部２２２へ出力し、任意視点映像を表示する（Ｓ３０８）。
【００４０】
以上の処理の繰り返しにより、デジタル放送受信装置１００は、ユーザの指示した視点の任意視点映像データを再生（生成、合成）し表示することができる（再生手段）。
本実施例では、デジタル放送受信装置１００の外部に設置される任意視点映像生成用データサーバ２５１から取得した任意視点映像生成用データを用いて、デジタル放送受信装置１００が、ユーザに指定された視点の任意視点映像データを生成する例を説明した。
しかしながら、ユーザに指定された視点の任意視点映像データを生成する機能部がデジタル放送受信装置１００に備わっている必要はかならずしも無い。例えば、任意視点映像生成用データサーバ２５１と同様に、デジタル放送受信装置１００の外部に、任意視点映像データを生成する装置を配置し、デジタル放送受信装置１００は、該外部装置で生成された任意視点映像データを通信等で取得するようにしても良い。その場合、デジタル放送受信装置１００は、ユーザに指定された視点の情報をインターネット１０４等の通信手段により外部の任意視点映像生成装置に送信する。外部の任意視点映像生成装置は、デジタル放送受信装置１００から受信した視点情報に基づき、当該視点の任意視点映像データを生成し、デジタル放送受信装置１００へ送信する。
【００４１】
次に、任意視点映像の視聴可能エリアをサーバから取得する処理について説明する。
図４は、本実施例における任意視点映像の視聴可能エリアのデータをサーバから取得する処理（視聴可能エリアデータ取得処理）についてのシーケンス図である。
【００４２】
図５は、本実施例における任意視点映像の視聴可能エリアの概要図である。「視聴可能エリア」とは、デジタル放送受信装置１００により再生可能な任意視点映像に映る被写体の存在範囲を示す。例えば、図５に示すようなスタジオ収録番組であれば、任意視点映像の収録が行われるスタジオ内の、任意視点映像により視聴可能な領域（範囲）を表す。「視聴可能エリア」は、図５に示すスタジオ内のうち、複数の固定カメラ２５２によって撮影された映像データから生成可能な任意視点映像に映り得るエリアである。
【００４３】
図５において、視聴可能エリアは、５つの点（座標（ｘ１、ｙ１）、（ｘ２、ｙ２）、（ｘ３、ｙ３）、（ｘ４、ｙ４）、及び（ｘ５、ｙ５））を頂点とする領域であるが、これは一例である。視聴可能エリアは、番組によって、或いは番組内のシーンによって、変化する場合もある。
【００４４】
図６は、本実施例における任意視点映像の視聴可能エリアデータのデータ構造例である
。視聴可能エリアデータは、指定座標数データと、指定座標数分の座標データにより構成される。「指定座標数」とは、本実施例では、視聴可能エリアの頂点の数を表す。図５に例示する視聴可能エリアは５つの頂点を有する領域であるので、指定座標数＝５である。「指定座標数データ」とは、指定座標数の値を格納するデータである。
【００４５】
図２、図４において、デジタル放送受信装置１００の任意視点情報処理部２３２は、リモコン２０１からの任意視点映像番組の選局指示（Ｓ４００）を受けて、視聴可能エリアデータの取得要求を作成する（Ｓ４０１）。
【００４６】
任意視点情報処理部２３２は、作成した視聴可能エリアデータの取得要求を要求データ処理部２３１、通信制御部２２７を経て放送局２５０の任意視点映像生成用データサーバ２５１に送信する（Ｓ４０２）。
【００４７】
任意視点映像生成用データサーバ２５１は、デジタル放送受信装置１００から受信した視聴可能エリアデータ取得要求を解析し（Ｓ４０３）、視聴可能エリアデータを作成する（Ｓ４０４）。
【００４８】
任意視点映像生成用データサーバ２５１は、作成した視聴可能エリアデータをデジタル放送受信装置１００へ送信する（Ｓ４０５）。
【００４９】
デジタル放送受信装置１００の受信データ解析部２３０は、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から送信された視聴可能エリアデータを受信・解析し（Ｓ４０６）、解析結果を任意視点情報処理部２３２に出力する。
【００５０】
任意視点情報処理部２３２は、入力された視聴可能エリアデータを視点エリア情報管理部２３４に保存する（Ｓ４０７）。
【００５１】
前記視点エリア情報管理部２３４に保存された視聴可能エリアデータにアクセスすることで、視聴可能エリアの情報を取得することができる。以上の処理を実行する任意視点情報処理部２３２は、本発明の「取得手段」として機能している。
視点エリア情報管理部２３４に保存された視聴可能エリアは、例えば図５に示すように、座標（ｘ１、ｙ１）、（ｘ２、ｙ２）、（ｘ３、ｙ３）、（ｘ４、ｙ４）、（ｘ５、ｙ５）を線で囲んだ領域である。
【００５２】
前記視聴可能エリアデータ取得処理にて取得した視聴可能エリア内の各区域における視点移動レベルをサーバから取得する処理（視点移動レベルデータ取得処理）について説明する。
【００５３】
「視点移動レベル」とは、ユーザが視点移動指示を入力したときの視点移動の度合を視聴可能エリア内の各区域において相対的に定義したものであり、番組制作者側（放送局）が任意視点映像データに付随させて送信するデータである。視点移動レベルとは、ユーザが、視聴する任意視点映像の視点を移動させる指示を入力する操作を行った場合に、デジタル放送受信装置１００が再生中の任意視点映像において当該ユーザ操作に応じて視点を移動させる際の、視点移動量の度合いである。視点移動量は、視点位置の移動距離や視線方向の角度変化量などである。任意視点映像の視点移動指示をデジタル放送受信装置１００に入力するための操作は、例えば、ユーザがリモコンのボタンを押下するなどにより行うことができる。視点移動レベルとは、ユーザによる視点移動操作に応じて生じる、再生中の任意視点映像における視点移動（任意視点映像に映る範囲の変化）の感度と言うこともできる。
【００５４】
例えば、リモコンの視点移動指示入力用ボタンをユーザが１回押下した場合に、視点移動レベルが小さい区域では視点が小さく移動し、視点移動レベルが大きい区域では視点が大きく移動するように、再生中の任意視点映像において視点が変化させられる。つまり、同一の視点移動操作を行った場合でも、実際に再生中の任意視点映像において生じる視点移動量が、視点移動レベルに応じて異なる。視点移動レベルは、番組制作者が決定することができる。つまり、視聴可能エリア内の区域毎に視点移動レベルを設定することにより、１単位の視点移動操作（例えばボタン１回押下）に応じて任意視点映像において生じる視点移動量を、視聴可能エリア内の区域毎に異ならせることができる。
【００５５】
例えば、番組制作者側で視聴者によく見てもらいたいと考えている、例えば重要な被写体が存在するエリアでは、番組制作者は、視点移動レベルを小さく設定することができる。再生中の任意視点映像に当該エリアが写っているときは、ユーザが視点移動ボタンを操作して視点を移動させると、再生中の任意視点映像の視点は少しずつ移動していくことになるので、ユーザに、当該エリアに存在する被写体を重点的に見てもらうことができる。
【００５６】
逆に、番組制作者側で、それほど重要でない被写体が存在するエリアでは、番組制作者は、視点移動レベルを大きく設定することができる。再生中の任意視点映像に当該エリアが写っているときは、ユーザが視点移動ボタンを操作して視点を移動させると、再生中の任意視点映像の視点は大きく移動することになるので、当該エリアに存在する被写体が映る任意視点映像が再生される機会が減ることになる。
【００５７】
視点移動レベルの情報は、放送局が、放送波及び／又はインターネット等を介した通信手段により、任意視点映像番組データ（ＴＳ）に付随させて及び／又は独立に、デジタル放送受信装置１００に提供する。視点移動レベルは、例えば１〜５の５段階で示される。
【００５８】
「視点移動量」は、例えば、移動前の視点の任意視点映像に写る領域（移動前視聴エリア）と、移動後の視点の任意視点映像に写る領域（移動後視聴エリア）と、の距離や重なり度合（例えば面積など）に基づいて算出できる。移動前視聴エリアと移動後視聴エリアとの距離とは、例えば、移動前視聴エリアと移動後視聴エリアの代表点（例えば中央の座標や最も左上の座標など）の間の距離とすることができる。移動前視聴エリアと移動後視聴エリアとの重なり度合が大きい場合、視点がそれほど移動しないことを表し、重なり度合が小さい場合、視点が大きく移動することを表す。視点移動量の定義や算出方法は上記の例示に限らない。
【００５９】
図７は、本実施例において、視聴可能エリア内の各区域における視点移動レベルデータをサーバから取得する処理（視点移動レベルデータ取得処理）についてのシーケンス図である。
【００６０】
図２、図７において、デジタル放送受信装置１００の任意視点情報処理部２３２は、リモコン２０１からの任意視点映像番組選局指示（Ｓ７００）を受けて、視点移動レベルデータ取得要求を作成する（Ｓ７０１）。
【００６１】
任意視点情報処理部２３２は、作成した視点移動レベルデータ取得要求を要求データ処理部２３１、通信制御部２２７を経て放送局２５０の任意視点映像生成用データサーバ２５１に送信する（Ｓ７０２）。
【００６２】
任意視点映像生成用データサーバ２５１は、デジタル放送受信装置１００から受信した視点移動レベルデータ取得要求を解析し（Ｓ７０３）、視点移動レベルデータを作成する（Ｓ７０４）。
【００６３】
任意視点映像生成用データサーバ２５１は、作成した視点移動レベルデータをデジタル放送受信装置１００へ送信する（Ｓ７０５）。
【００６４】
デジタル放送受信装置１００の受信データ解析部２３０は、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から送信された視点移動レベルデータを受信・解析し（Ｓ７０６）、解析結果を任意視点情報処理部２３２に出力する。
【００６５】
任意視点情報処理部２３２は、入力された視点移動レベルデータを視聴可能エリアの各区域データと関連付けて視点エリア情報管理部２３４に保存する（Ｓ７０７）。
【００６６】
前記視点エリア情報管理部２３４に保存された視点移動レベルデータにアクセスすることで、視聴可能エリアの各区域に応じた視点移動レベルを取得することができる。以上の処理を実行する任意視点情報処理部２３２は、本発明における「取得手段」として機能している。
【００６７】
図８は、本実施例における、視聴可能エリア内の視点移動レベルが設定された区域の一例である。図８の例では、座標（ｘ１１、ｙ１１）、（ｘ１２、ｙ１２）、（ｘ１３、ｙ１３）、（ｘ１４、ｙ１４）に囲まれた領域を区域１、座標（ｘ２１、ｙ２１）、（ｘ２２、ｙ２２）、（ｘ２３、ｙ２３）、（ｘ２４、ｙ２４）に囲まれた領域を区域２とする。
【００６８】
例えば、この任意視点映像番組はテレビショッピング番組であり、区域１は司会者がいるエリア、区域２は商品が陳列されたエリアである。番組製作者は、視聴者に、司会者よりも商品をより詳細に見てもらいたい場合に、区域１の視点移動レベルを大きい値に設定し、区域２の視点移動レベルを小さい値に設定することができる。
【００６９】
図９は、本実施例における視点移動レベルデータのデータ構造例である。視点移動レベルは、視聴可能エリア内の各区域の情報と関連付けて記載される。図９は、図８に例示した、視点移動レベルが設定された各区域及び各区域の視点移動レベルの情報を格納する視点移動レベルデータの一例である。視点移動レベルデータのデータ構造は、視聴可能エリア内の区域の情報と、区域に関連付けられた視点移動レベルの情報と、を格納できれば、図９に例示する構造に限らない。
【００７０】
視点移動レベルに応じて視点移動度を決定する処理について説明する。
図１０は、本実施例において視点移動レベルに応じて視点移動度を決定する処理（視点移動度決定処理）についてのフローチャートである。
図１１は、本実施例においてユーザが視点移動度の設定を行うための設定メニューのＧＵＩの一例である。
【００７１】
視点移動度管理部２３３は、前記視点移動レベルデータ取得処理により視点エリア情報管理部２３４に保存された視点移動レベルデータを取得する（Ｓ１００１）。
【００７２】
視点移動度管理部２３３は、前記取得した視点移動レベルデータから基準視点移動レベルを取得する（Ｓ１００２）。
【００７３】
「基準視点移動レベル」とは、特に視点移動レベルが設定されていない区域の任意視点映像の再生時に、ユーザが視点移動指示ボタンを押下した場合に、デフォルトで適用される視点移動レベルである。図１１の例では、基準視点移動レベルは５段階のうちの中央値である「レベル３」に設定されている。
【００７４】
視点移動度管理部２３３は、前記取得した視点移動レベルデータから基準視点移動レベルに対応づけられた視点移動度（基準視点移動度）を取得する（Ｓ１００３）。
【００７５】
「視点移動度」とは、ユーザが視点移動ボタンを押下したときに、再生中の任意視点映像において生じる視点移動の移動加減（移動量）であり、前記取得した視点移動レベル毎に規定されている。視点移動レベル毎の視点移動度は、デジタル放送受信装置１００により設定され、記憶されるデータである。視点移動度は、具体的には、操作ボタンを押下したときの視点移動距離（ピクセル）、視点移動角度、視点移動速度など、である。
【００７６】
「基準視点移動度」は、基準視点移動レベル（図１１の例では「レベル３」）に対してデフォルトで設定された視点移動度である（図１１の例では「６」）。
【００７７】
視点移動度管理部２３３は、前記取得した視点移動レベルデータから区域数（Ｎとする。図８の例ではＮ＝２）を取得する（Ｓ１００４）。
【００７８】
視点移動度管理部２３３は、ｉ番目の区域（区域（ｉ）とする。ｉ＝１、２、・・・、Ｎ）における視点移動レベルを、前記取得した視点移動レベルデータ（図９の「移動レベル」に格納された値）から取得する。視点移動度管理部２３３は、取得した視点移動レベルと、図１２に示す、各視点移動レベルと視点移動度とを対応づけたテーブルと、に基づき、取得した視点移動レベルに応じたデフォルトの視点移動度を取得する。この処理をステップＳ１００４で取得した区域数分行う（Ｓ１００５、Ｓ１００６）
図１２は、各視点移動レベルに対応する視点移動度の範囲を規定したテーブルである。図１２に示すように、１つの視点移動レベルに対し、所定範囲内に含まれる複数の視点移動度を対応づけることもできる。１つの視点移動レベルに対し１つの視点移動度を対応づけることもできる。
図１２に示す視点移動レベルと視点移動度との対応を規定したテーブルにおいて、１つの視点移動レベルに対し複数の視点移動度が対応づけられている場合は、各視点移動レベルに対してデフォルトの視点移動度が設定されているようにしても良い。図１２の例では、所定の範囲１〜２に含まれる複数の視点移動度が対応づけられている視点移動レベル１に対応するデフォルトの視点移動度は１、同様に視点移動レベル３に対応するデフォルトの視点移動度は７、というように設定されているようにしても良い。
また、視点移動レベルと視点移動度との対応づけは、図１２に示すようなテーブルに限らない。例えば、視点移動レベルｎに対応する視点移動度は、視点移動レベルｎ＋１に対応する視点移動度より小さく且つ視点移動レベルｎ−１に対応する視点移動度より大きい値になるように設定されていれば良い。
【００７９】
視点移動度管理部２３３は、ステップＳ１００６で取得した視点移動度をそれぞれの区域における視点移動度として保存する（Ｓ１００７）。
【００８０】
以上の処理により、デジタル放送受信装置１００は、取得した視聴可能エリア内の各区域における視点移動レベルに応じた視点移動度を決定する。以上の処理を実行する視点移動度管理部２３３は、本発明における「取得手段」として機能している。
【００８１】
図１１の例では、区域１（司会者エリア）では、視点移動レベル４、視点移動度１０、区域２（商品陳列エリア）では、視点移動レベル１、視点移動度２に設定されているが、図１２に示すように、視点移動度は視点移動レベルに応じてある範囲内で可変にできる。例えば、図１２の例では、例えば視点移動レベル３に対応する視点移動度は、５〜８の値が設定可能である。
【００８２】
決定した視点移動度に応じた視点移動制御は、現在再生（表示）している任意視点映像
の視点情報を取得する処理と、現在の視聴区域の視点移動度に基づき、ユーザ操作に応じて視点移動を制御する処理とで構成される。
【００８３】
現在表示している任意視点映像の視点情報を取得する処理について説明する。
図１３は、本実施例における、現在再生（表示）している任意視点映像の視点情報を取得する処理（現在視点情報取得処理）についてのフローチャートである。
【００８４】
図１３において、任意視点情報処理部２３２は、システム制御部２２６から現在の再生状態（デジタル放送映像再生中、任意視点映像再生中、外部入力映像再生中など）を取得する（Ｓ１２０１）。
【００８５】
取得した現在の再生状態が任意視点映像再生中の場合（Ｓ１２０２のＹｅｓ）、任意視点情報処理部２３２は、要求データ処理部２３１、通信制御部２２７を経て、任意視点映像生成用データサーバ２５１から任意視点映像の視点情報を取得する（Ｓ１２０３）。
【００８６】
取得した任意視点映像の視点情報が、既に保存してある視点情報に対し差異があった場合（Ｓ１２０４のＹｅｓ）、任意視点情報処理部２３２は、任意視点映像の視点情報を更新する（Ｓ１２０５）。
【００８７】
デジタル放送受信装置１００において任意視点映像データを含む番組データが再生されている間、一定時間おきに（例えば１秒間隔）以上の処理を繰り返し行う。これにより、任意視点情報処理部２３２は、現在再生している任意視点映像の視点情報を取得することが可能となる。
【００８８】
次に、現在の再生（表示）している任意視点映像に映っている区域の視点移動度に応じて視点移動を制御する処理（視点移動処理）について説明する。
図１４は、本実施例における視点移動処理についてのフローチャートである。図１４のフローチャートで表される視点移動処理は、ユーザがリモコンの視点移動ボタンを押下してデジタル放送受信装置１００に対し、現在再生（表示）中の任意視点映像の視点を移動させる指示が入力された場合に、実行される。
【００８９】
任意視点情報処理部２３２は、前記現在視点情報取得処理により、現在再生している任意視点映像の視点情報を取得する（Ｓ１３０１）。
【００９０】
任意視点情報処理部２３２は、前記視点移動レベルデータ取得処理により、前記取得した現在再生している視点の任意視点映像に対応する区域（再生中の任意視点映像に映っている区域）の視点移動レベルを取得する（Ｓ１３０２）。
前記現在視点情報取得処理により取得した現在再生している（表示している）任意視点映像の視点の情報に基づき、任意視点情報処理部２３２は、当該任意視点映像に映る区域を特定する。ここで、「任意視点映像に映る区域」とは、例えば番組（映像）が収録されるロケーション（スタジオや舞台など）において、任意視点映像により視聴可能なエリア（範囲）をいう。任意視点映像に映る区域は、番組収録がされるロケーションの情報や任意視点映像の視点（仮想カメラの視点）の情報に基づき特定することができる。ロケーションの情報は、例えば、スタジオの形状、広さ、スタジオセットや出演者などの大きさや配置位置の座標などである。任意視点映像の視点の情報は、例えば、視点位置、視線方向、画角、ズーム倍率、焦点距離などである。この処理を実行する任意視点情報処理部２３２は、本発明における「特定手段」として機能している。
【００９１】
任意視点情報処理部２３２は、前記視点移動度決定処理により、前記特定した現在再生中の任意視点映像に映っている区域に定められている視点移動レベルに応じた視点移動度
を決定する（Ｓ１３０３）。図８に示すように、視聴可能エリア内の一部の区域について視点移動レベルが定められている場合、前記特定した任意視点映像に映る区域と、視点移動レベルが定められた区域とが共通部分を有するときに、当該視点移動レベルに基づき視点移動度を決定しても良い。或いは、前記特定した任意視点映像に映る区域に、視点移動レベルが定められた区域が含まれる場合に、当該視点移動レベルに基づき視点移動度を決定しても良い。また、前記特定した任意視点映像に映る区域に、異なる視点移動レベルが定められた複数の区域が含まれる場合は、前記特定した任意視点映像に映る区域との共通部分の大きさが最大の区域に定められた視点移動レベルに基づき視点移動度を決定しても良い。或いは、この場合、複数の異なる視点移動レベルのうち最も小さい値又は最も大きい値に基づき、視点移動度を決定するようにしても良い。
【００９２】
任意視点情報処理部２３２は、前記決定した視点移動度を、移動先の視点の任意視点映像作成用データ取得要求と供に任意視点映像生成用データサーバ２５１に送信し、視点移動度に応じた移動先の視点の任意視点映像生成用データを取得する（Ｓ１３０４）。
【００９３】
任意視点情報処理部２３２は、取得した移動先の視点の任意視点映像生成用データを元に、任意視点映像再生処理を行う（Ｓ１３０５）。
【００９４】
以上により、前記視点移動度決定処理により決定した視点移動度に応じた視点移動処理を実現する。以上の処理を実行する任意視点情報処理部２３２が、本発明における「視点移動手段」として機能している。
【００９５】
図１５は、図８、図９、図１１及び図１２に例示した任意視点映像を含む番組（スタジオ収録のテレビショッピング番組）において、本実施例における視点移動度に応じた視点移動制御が行われた場合の、視点移動の一例を示す図である。
【００９６】
図１１に示すように、区域１は出演者エリアであり、視点移動レベルは４に設定され、区域２は品物エリアであり、視点移動レベルは１に設定されている。図１２に基づき、視点移動レベル４に対応する視点移動度は１０に設定されるとともに、視点移動レベル１に対応する視点移動度は２に設定される。
図１５に示すように、視点移動度が１０に設定された区域１と、視点移動度が２に設定された区域２では、ユーザによる視点移動操作に対して再生中の任意視点映像において生じる視点の移動の仕方が異なる。同じリモコン操作を行った場合でも、任意視点映像に区域１が映っているときより区域２が映っているときの方がより細かく視点を移動させることが出来る。そのため、ユーザは区域２に存在する被写体に関しては種々の視点からより詳細に見ることができる。例えば、興味のある商品を様々な角度から見ることができる。映像コンテンツデータの制作者は、ユーザに詳細に見てほしい被写体やユーザにとって詳細に見たいという要求があると考えられる被写体が存在する区域の視点移動レベルの値を小さく設定することにより、当該区域における視点移動度が小さくなるようにできる。
【００９７】
本実施例では、視点移動レベルデータを放送局から取得する例を説明したが、デジタル放送受信装置側で視点移動レベルデータを作成してもよい。例えば、デジタル放送受信装置１００が、再生（表示）中の映像を解析して被写体（出演者や物体）の密度（空間周波数）を検出し、密度が高いエリア（細かい被写体が多く映っているエリア）に対して高い視点移動レベル及び視点移動度を割り当ててもよい。
【００９８】
また、本実施例では、任意視点映像作成用データをインターネット経由で放送局のサーバから取得する構成例を説明したが、任意視点映像作成用データは放送映像データとともにＴＳに多重化されてもよい。また、本実施例ではデジタル放送受信装置１００においてユーザの指定した視点の任意視点映像を合成（生成）する例を説明したが、視点情報を元
に放送局のサーバその他のデジタル放送受信装置１００の外部の装置で任意視点映像を生成する構成でもよい。その場合、デジタル放送受信装置１００は、インターネット等の通信手段を介して、外部装置で生成された任意視点映像データを取得する。
【００９９】
本実施例のデジタル放送受信装置１００によれば、番組制作者が視聴可能エリア内の区域毎に設定した視点移動レベルに応じて、ユーザが視点を移動させる操作を行った際に再生中の任意視点映像において生じる視点移動が制御される。従って、任意視点映像の視聴中にユーザが視点を移動させる場合に、番組制作者の意図に沿わない視点移動をしてしまうことを抑制できる。
【０１００】
（実施例２）
本実施例では、前記実施例１において、任意視点映像の再生時にユーザが視点移動ボタンを長押しした場合に実行される視点移動制御について説明する。
【０１０１】
実施例１では、視点移動の指示をデジタル放送受信装置１００に送信（入力）するための操作ボタンが、ユーザにより１回（１単位）操作された場合に、再生（表示）中の任意視点映像に生じさせる視点の移動量を、視聴中（表示中）の区域によって異ならせた。
【０１０２】
リモコン等に設けられる操作ボタンをユーザが押下し続けた場合（長押しした場合）、当該操作ボタンの１回の押下に対応付けられた指示が連続的に装置に送信（入力）されるように構成されていることが多い。
本実施例では、視点移動の指示送信（指示入力）に割り当てられた操作ボタンが長押しされた場合に、連続的な視点移動指示を送信（入力）することができるようリモコン２０１及びデジタル放送受信装置１００が構成されているものとする。
【０１０３】
視点の連続的な移動とは、再生中の任意視点映像に対して、カメラの視線方向を変化させるパン操作やチルト操作、カメラの位置を移動させるドリー操作、ズーム操作などを行った場合に撮影される映像と同様の変化をもたらすような、視点の移動である。
【０１０４】
図１６は、本実施例における、ユーザが視点移動ボタンを長押しして連続的な視点移動指示を入力した場合に、再生中の任意視点映像に映っている区域の視点移動度に応じて任意視点映像の再生を制御する処理についてのフローチャートである。
【０１０５】
任意視点情報処理部２３２は、視点移動ボタンが押下状態かどうかを判定する（Ｓ１５０１）。
【０１０６】
前記視点移動ボタンの状態が押下状態の場合（Ｓ１５０１のＹｅｓ）、前記現在視点情報取得処理により、現在再生している任意視点映像の視点の情報を取得する（Ｓ１５０２）。
【０１０７】
任意視点情報処理部２３２は、前記視点移動レベルデータ取得処理により、前記取得した現在再生している視点の任意視点映像に映る区域を特定し、当該区域に定められた視点移動レベルを取得する（Ｓ１５０３）。
【０１０８】
任意視点情報処理部２３２は、前記視点移動度決定処理により、前記特定した現在再生中の任意視点映像に映る区域に定められている視点移動レベルに応じた視点移動度を決定する（Ｓ１５０４）。
【０１０９】
任意視点情報処理部２３２は、前記決定した視点移動度を、移動先の視点の任意視点映像生成用データ取得要求と供に任意視点映像生成用データサーバ２５１に送信し、視点移
動度に応じた任意視点映像再生処理を行う（Ｓ１５０５）。
【０１１０】
以上の一連の処理が終了した後、任意視点情報処理部２３２は再度、視点移動ボタンの押下状態を判定し、押下状態でなかったら（Ｓ１５０１のＮｏ）、処理を終了する。
【０１１１】
以上の処理を視点移動ボタンが押下状態の場合に連続して行うことによって、視点移動ボタンが長押しされた場合に、再生（表示）中の任意視点映像に映っている区域に設定された視点移動レベルに応じた連続的な視点移動処理を行うことができる。
【０１１２】
本実施例によれば、ユーザが視点移動ボタンを長押しして連続的な視点移動の指示を入力した場合に、視点移動レベルとして小さい値が設定された区域では、視点移動が細かくなる（視点移動速度が遅くなる）。一方、視点移動レベルとして大きい値が設定された区域では、視点移動が粗くなる（視点移動速度が速くなる）。つまり、本実施例では、視点移動レベルは、任意視点映像の再生時にユーザが視点を連続的に移動させる指示を入力した場合に、該再生中の任意視点映像において生じる視点の移動の速度の度合を示す。
【０１１３】
従って、番組制作者は、視聴者によく見てもらいたい被写体が存在する区域に対し小さい視点移動レベルの値を設定することができる。ユーザが、例えば、仮想カメラに対しパン操作を行って番組収録スタジオ内を見渡すべく、視点移動ボタンを長押しした場合、小さい視点移動レベルが設定された区域では、他の区域よりも、パン速度が遅くなる。よって、番組制作者が視聴者によく見てもらいたい被写体を、ユーザによく見せることができる。
【０１１４】
（実施例３）
本実施例では、前記実施例１において、任意視点映像の再生時に、視聴可能エリア内の区域とその視点移動レベルを受信機（デジタル放送受信装置１００）で設定する例について説明する。
【０１１５】
実施例１及び２では、視聴可能エリア内に設定された区域の情報と、区域毎に設定された視点移動レベルの情報が、放送局からインターネットや放送波によりデジタル放送受信装置１００へ提供される例について説明した。つまり、視聴可能エリア内のどの区域をどの視点移動レベルに設定するかは、放送局側すなわち番組制作者が決定し、デジタル放送受信装置１００は当該番組制作者による設定に従って動作する。これにより、番組制作者の意図に沿った任意視点映像の視聴体験をユーザに提供できるという効果を奏した。
【０１１６】
これに対し本実施例では、視聴可能エリア内のどの区域をどの視点移動レベルに設定するかを、ユーザ側が決定できる構成例について説明する。
図１７は、本実施例において視聴可能エリア内の区域とその視点移動レベルを受信機で設定する処理についてのフローチャートである。
図１８は、本実施例において視聴可能エリア内の区域とその視点移動レベルを設定するための設定メニューのＧＵＩの一例である。
【０１１７】
ユーザは、視点移動レベルを設定したい区域が再生中の任意視点映像に映っているときに、視点移動レベル設定要求をデジタル放送受信装置１００に送信する。視点移動レベル設定要求の送信は、例えば、リモコンに設けられる専用ボタンを押下することにより実現することができるが、これに限定されない。
【０１１８】
視点移動レベル設定要求を受信した任意視点情報処理部２３２は、前記視点移動レベル取得処理により取得された視点移動レベルデータから、視点移動レベルの最小値及び最大値を取得する（Ｓ１６０１、Ｓ１６０２）。
【０１１９】
また、任意視点情報処理部２３２は、現在表示している任意視点映像に映っている区域の座標を求め（Ｓ１６０３）、視点移動レベル設定の対象となる区域を決定する（Ｓ１６０４）。
【０１２０】
その後、任意視点情報処理部２３２は、視点移動レベル設定メニューの表示を行い（Ｓ１６０５）、ユーザに視点移動レベルの設定操作を行わせる。
【０１２１】
ユーザは表示された視点移動レベル設定メニューにより、指定した区域（現在再生中の任意視点映像に映っている区域）の視点移動レベルを設定する（Ｓ１６０６）。このとき、設定できる視点移動レベルの範囲は、前記取得した視点移動レベルの最小値及び最大値によって制限される。
【０１２２】
ユーザが視点移動レベル設定メニューにより、視点移動レベルを設定した場合、任意視点情報処理部２３２は、視点エリア情報管理部２３４の視点移動レベルデータを更新する（Ｓ１６０７）。以上の処理を実行する任意視点情報処理部２３２、ユーザの入力を受け付けるリモコン２０１、視点移動レベル設定メニューのＧＵＩを構成するＧＵＩ処理部２１８が、本発明における「設定手段」として機能している。
【０１２３】
本実施例のデジタル放送受信装置によれば、ユーザは、任意視点映像を視聴しながら、例えば、よく見たい区域に対して小さい視点移動レベルを設定したり、逆に、自分にとって関心が低い区域に対して大きい視点移動レベルを設定したりできる。これにより、ユーザは、自分の興味などに応じて、任意視点映像の視点移動を行うことができるので、より一層快適な任意視点映像の視聴体験を提供することが可能になる。
【０１２４】
以上述べた実施例では、ユーザが視点移動をデジタル放送受信装置１００へ入力するための操作を行う手段は、リモコン２０１に設けられる視点移動ボタンだが、ユーザが視点移動指示を入力する入力手段これに限らない。例えばタッチパッド、ジョグダイヤル、カーソルキー、ジョイスティックなどにより入力手段を構成することもできる。
【符号の説明】
【０１２５】
１００ デジタル放送受信装置、２０１ リモコン、２３２ 任意視点情報処理部、２３３ 視点移動度管理部
【特許請求の範囲】
【請求項１】
視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された任意の視点での任意視点映像データを取得する取得手段と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生手段と、
ユーザに、前記再生手段が再生中の任意視点映像において視点を移動させる指示を入力させる入力手段と、
映像コンテンツデータから、前記再生手段が再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する手段と、
再生中の任意視点映像に映る区域を特定する特定手段と、
入力手段において視点を移動させる指示が入力された場合に、前記特定手段により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動手段と、
を有する映像処理装置。
【請求項２】
視点移動レベルは、視点位置の移動距離の度合及び視線方向の角度の変化量の度合の少なくとも一方を示す請求項１に記載の映像処理装置。
【請求項３】
入力手段は、ユーザに、前記再生手段が再生中の任意視点映像において視点を連続的に移動させる指示を入力させ、
視点移動レベルは、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を連続的に移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の速度の度合を示し、
視点移動手段は、入力手段において視点を連続的に移動させる指示が入力された場合に、前記特定手段により特定される区域に定められる視点移動レベルに基づいて決定される移動速度で、再生中の任意視点映像の視点を連続的に移動させる請求項１又は２に記載の映像処理装置。
【請求項４】
ユーザに、視聴可能エリア内に一又は複数の区域を設定させるとともに、区域毎に、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルを設定させる設定手段を有する請求項１から３のいずれか１項に記載の映像処理装置。
【請求項５】
ユーザに、視聴可能エリア内に一又は複数の区域を設定させるとともに、区域毎に、その区域が映る任意視点映像の再生時にユーザが視点を連続的に移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の速度を示す視点移動レベルを設定させる設定手段を有する請求項１から４のいずれか１項に記載の映像処理装置。
【請求項６】
視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置の制御方法であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された視点での任意視点映像データを取得する取得工程と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生工程と、
ユーザに、前記再生工程で再生中の任意視点映像において視点を移動させる指示を入力させる入力工程と、
映像コンテンツデータから、前記再生工程で再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する工程と、
再生中の任意視点映像に映る区域を特定する特定工程と、
入力工程において視点を移動させる指示が入力された場合に、前記特定工程により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動工程と、
を有する映像処理装置の制御方法。
【請求項１】
視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された任意の視点での任意視点映像データを取得する取得手段と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生手段と、
ユーザに、前記再生手段が再生中の任意視点映像において視点を移動させる指示を入力させる入力手段と、
映像コンテンツデータから、前記再生手段が再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する手段と、
再生中の任意視点映像に映る区域を特定する特定手段と、
入力手段において視点を移動させる指示が入力された場合に、前記特定手段により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動手段と、
を有する映像処理装置。
【請求項２】
視点移動レベルは、視点位置の移動距離の度合及び視線方向の角度の変化量の度合の少なくとも一方を示す請求項１に記載の映像処理装置。
【請求項３】
入力手段は、ユーザに、前記再生手段が再生中の任意視点映像において視点を連続的に移動させる指示を入力させ、
視点移動レベルは、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を連続的に移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の速度の度合を示し、
視点移動手段は、入力手段において視点を連続的に移動させる指示が入力された場合に、前記特定手段により特定される区域に定められる視点移動レベルに基づいて決定される移動速度で、再生中の任意視点映像の視点を連続的に移動させる請求項１又は２に記載の映像処理装置。
【請求項４】
ユーザに、視聴可能エリア内に一又は複数の区域を設定させるとともに、区域毎に、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルを設定させる設定手段を有する請求項１から３のいずれか１項に記載の映像処理装置。
【請求項５】
ユーザに、視聴可能エリア内に一又は複数の区域を設定させるとともに、区域毎に、その区域が映る任意視点映像の再生時にユーザが視点を連続的に移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の速度を示す視点移動レベルを設定させる設定手段を有する請求項１から４のいずれか１項に記載の映像処理装置。
【請求項６】
視点が異なる複数の映像データを含む映像コンテンツデータを再生可能な映像処理装置の制御方法であって、
映像コンテンツデータに含まれる視点が異なる複数の映像データに基づいて生成される、ユーザに指定された視点での任意視点映像データを取得する取得工程と、
前記ユーザに指定された視点での任意視点映像データを再生する制御を行う再生工程と、
ユーザに、前記再生工程で再生中の任意視点映像において視点を移動させる指示を入力させる入力工程と、
映像コンテンツデータから、前記再生工程で再生可能な任意視点映像に映る被写体の存在範囲を示す視聴可能エリアの情報と、視聴可能エリア内に定められる一又は複数の区域の情報と、区域毎に定められる、その区域が映る任意視点映像の再生時にユーザが視点を移動させる指示を入力した場合に該再生中の任意視点映像において生じる視点の移動の度合を示す視点移動レベルの情報と、を取得する工程と、
再生中の任意視点映像に映る区域を特定する特定工程と、
入力工程において視点を移動させる指示が入力された場合に、前記特定工程により特定される区域に定められる視点移動レベルに基づいて、再生中の任意視点映像の視点を移動させる視点移動工程と、
を有する映像処理装置の制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【公開番号】特開２０１２−１０９７１９（Ｐ２０１２−１０９７１９Ａ）
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願番号】特願２０１０−２５５８３０（Ｐ２０１０−２５５８３０）
【出願日】平成２２年１１月１６日（２０１０．１１．１６）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願日】平成２２年１１月１６日（２０１０．１１．１６）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]