表示制御装置および方法、並びにプログラム
【課題】多視点の画像を表示するディスプレイの消費電力を低減させる。
【解決手段】複数の視点の画像を表示する画像表示装置において、位置特定部は、画像を観賞するユーザの位置を特定し、画像決定部は、位置特定部によって特定されたユーザの位置に基づいて、複数の視点の画像から、ユーザに視認される視点の画像を決定し、表示制御部は、画像決定部によって決定された画像のディスプレイへの表示を制御する。本技術は、例えば、裸眼立体視を行わせるディスプレイに適用することができる。
【解決手段】複数の視点の画像を表示する画像表示装置において、位置特定部は、画像を観賞するユーザの位置を特定し、画像決定部は、位置特定部によって特定されたユーザの位置に基づいて、複数の視点の画像から、ユーザに視認される視点の画像を決定し、表示制御部は、画像決定部によって決定された画像のディスプレイへの表示を制御する。本技術は、例えば、裸眼立体視を行わせるディスプレイに適用することができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、表示制御装置および方法、並びにプログラムに関し、特に、多視点の画像を表示するディスプレイの消費電力を低減させることができるようにする表示制御装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来、パララックスバリア方式（視差バリア方式）や、レンチキュラーレンズ方式などにより、特殊な眼鏡を必要とせずに立体画像を表示させる表示装置が知られている。
【０００３】
このように、特殊な眼鏡を必要とせずに立体画像を表示させる、いわゆる裸眼立体視を行わせる表示装置において、立体映像を観賞する観賞者の頭部位置を検出し、立体視可能範囲を変更させる制御を行うものがある（例えば、特許文献１，２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−３００６１０号公報
【特許文献２】特開平１０−３３３０９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、裸眼立体視を行わせる表示装置おいては、左眼用画像と右眼用画像、すなわち２視点の画像が、それぞれ観賞者の左右の眼で観賞されるように表示される。３視点以上の視点である多視点で裸眼立体視を行わせる表示装置においては、観賞者の視点（位置）に応じて、観賞される左眼用画像と右眼用画像が変わってくるが、観賞されない画像について消費される電力が無駄であった。
【０００６】
本技術は、このような状況に鑑みてなされたものであり、多視点の画像を表示するディスプレイの消費電力を低減させることができるようにするものである。
【課題を解決するための手段】
【０００７】
本技術の一側面の表示制御装置は、複数の視点の画像を表示する画像表示装置を制御する表示制御装置であって、ユーザの位置を特定する位置特定部と、前記位置特定部によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定部と、前記画像決定部によって決定された前記画像の表示を制御する表示制御部とを備える。
【０００８】
前記画像表示装置は、ピクセル単位で発光する発光素子を備え、前記表示制御部には、前記画像決定部によって決定された前記画像に対応する前記発光素子の発光を制御することで、前記画像の表示を制御させることができる。
【０００９】
前記位置特定部には、前記ユーザの位置の変化に基づいて、前記ユーザの移動距離を算出させ、前記画像決定部には、前記位置特定部によって算出された前記ユーザの移動距離に応じて、前記ユーザに視認される２以上の視点の前記画像を決定させることができる。
【００１０】
前記画像表示装置は、複数の視点の前記画像からなる立体画像を表示するようにすることができる。
【００１１】
本技術の一側面の表示制御方法は、複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示制御方法であって、ユーザの位置を特定する位置特定ステップと、前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップとを含む。
【００１２】
本技術の一側面のプログラムは、複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示処理をコンピュータに実行させるプログラムであって、ユーザの位置を特定する位置特定ステップと、前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像のうちの、前記ユーザの位置から前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップとを含む処理をコンピュータに実行させる。
【００１３】
本技術の一側面においては、ユーザの位置が特定され、特定されたユーザの位置に基づいて、画像表示装置に表示される複数の視点の画像のうちの、ユーザの位置からユーザに視認される視点の画像が決定され、決定された画像の表示が制御される。
【発明の効果】
【００１４】
本技術の一側面によれば、多視点の画像を表示するディスプレイの消費電力を低減させることが可能となる。
【図面の簡単な説明】
【００１５】
【図１】本技術を適用した多視点画像表示システムの一実施の形態の外観構成を示す図である。
【図２】パララックスバリア方式について説明する図である。
【図３】パララックスバリア方式について説明する図である。
【図４】画像表示装置の機能構成例を示すブロック図である。
【図５】ディスプレイ表示制御処理について説明するフローチャートである。
【図６】ディスプレイについて設定される座標系について説明する図である。
【図７】ユーザに視認される入力画像について説明する図である。
【図８】コンピュータのハードウェアの構成例を示すブロック図である。
【発明を実施するための形態】
【００１６】
以下、本技術の実施の形態について図を参照して説明する。なお、説明は以下の順序で行う。
１．多視点画像表示システムの外観構成
２．パララックスバリア方式の説明
３．画像表示装置の機能構成
４．ディスプレイ表示制御処理
【００１７】
＜１．多視点画像表示システムの外観構成＞
図１は、本技術を適用した多視点画像表示システムの一実施の形態の外観構成を示している。
【００１８】
図１の多視点画像表示システム１は、複数の視点、すなわち多視点の画像を表示することで、ユーザ２に対して立体画像を提供する。ユーザ２は、多視点画像表示システム１に対するユーザ２自身の位置に応じた立体画像を観賞することができる。ここで、多視点とは、３視点以上の視点である。
【００１９】
多視点画像表示システム１は、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３から構成される。
【００２０】
画像再生装置１１は、多視点の画像を再生することで、多視点の画像それぞれを画像表示装置１３に入力する。多視点の画像の数がＮである場合、すなわち、Ｎ視点の画像が再生される場合、そのＮ視点の画像のそれぞれは、例えば、Ｎ台のデジタルビデオカメラで撮像された画像であったり、Ｎ台より少ないデジタルビデオカメラで撮影された画像を補間した画像であったりする。
【００２１】
ステレオカメラ１２は、左右に配置された２台のカメラからなり、所定のタイミングで、被写体としてのユーザ２を撮像し、撮像の結果得られた２枚の画像（カメラ画像）を、画像再生装置１１に供給する。
【００２２】
画像表示装置１３は、例えば、テレビジョン受像機等として構成される。画像表示装置１３は、ピクセル単位で発光する有機EL(Electro Luminescent)素子等の発光素子から構成されるディスプレイを備えており、パララックスバリア方式を用いて、画像再生装置１１からの多視点の画像を表示する。
【００２３】
また、画像表示装置１３は、ステレオカメラ１２からの２枚のカメラ画像に基づいて、ステレオマッチング法により、画像表示装置１３の奥行き方向に対するユーザ２の位置を特定する。
【００２４】
すなわち、ステレオマッチング法によれば、ステレオカメラ１２の左側のカメラで撮像されたカメラ画像が、右側のカメラで撮像されたカメラ画像のどの部分に対応するかを面積相関の演算により求めて、その対応関係に基づく三角測量の原理を用いることにより、ユーザ２の奥行き方向の位置が求められる。
【００２５】
そして、画像表示装置１３は、ユーザ２の奥行き方向の位置に応じて、ディスプレイに表示される多視点の画像のうちの、ユーザ２に視認される視点の画像のみを表示するように、ディスプレイを構成する発光素子（有機EL素子）の発光を制御する。
【００２６】
＜２．パララックスバリア方式の説明＞
例えば、画像表示装置１３が４視点の画像を表示する場合、画像表示装置１３のディスプレイにおいては、図２に示されるように、図中「１」乃至「４」の数字が記されている、４視点分の画像それぞれに対応する発光素子（以下、発光素子「１」乃至「４」という）が発光する。ディスプレイにおいて、発光素子の前面側（ユーザ２側）には、垂直方向のスリットを有するパララックスバリア（視差バリア）が設けられており、ユーザ２は、パララックスバリアのスリットを透過してきた発光素子の光を、そのユーザの視点「１」乃至「４」のうちの隣接する２つの視点で捉えることで、立体画像を観賞することができる。このとき、画像表示装置１３は、ユーザ２に視認されない視点の画像に対応する発光素子、すなわち、パララックスバリアにより遮蔽され、ユーザの視点で捉えられない光に対応する発光素子を発光させないようにする。
【００２７】
具体的には、図３に示されるように、ユーザ２の左眼が視点「２」にあり、ユーザ２の右眼が視点「３」にある場合、図２における発光素子「１」および「４」の光は、ユーザの視点で捉えられない光となる。したがって、この場合、図２における発光素子「２」および「３」は発光するように制御され、発光素子「１」および「４」は発光しないように制御される。
【００２８】
＜３．画像表示装置の機能構成＞
次に、図３を参照して、図１の多視点画像表示システムにおける画像表示装置１３の機能構成例について説明する。
【００２９】
なお、以下においては、画像再生装置１１は、９視点の画像を再生し、それぞれの画像を、入力画像１乃至９として画像表示装置１３に入力するものとする。
【００３０】
図３の画像表示装置１３は、位置特定部３１、入力画像決定部３２、表示制御部３３、およびディスプレイ３４を備えている。
【００３１】
位置特定部３１は、ステレオカメラ１２からのカメラ画像を取得し、そのカメラ画像に基づいて、上述したステレオマッチング法により、画像表示装置１３の奥行き方向に対するユーザ２の位置を特定する。
【００３２】
入力画像決定部３２は、画像再生装置１１からの入力画像１乃至９の入力を受け付け、位置特定部３１によって特定されたユーザ２の位置に基づいて、入力画像１乃至９から、ユーザ２に視認される視点の入力画像、すなわち、ディスプレイ３４に出力する入力画像を決定する。
【００３３】
表示制御部３３は、入力画像決定部３２によって決定された入力画像をディスプレイ３４に表示させるようディスプレイ３４の表示を制御する。
【００３４】
ディスプレイ３４は、ピクセル単位で発光する有機EL素子等の自発光素子から構成され、表示制御部３３の制御の下、パララックスバリア方式を用いて、画像再生装置１１からの９視点の入力画像１乃至９のうちの、入力画像決定部３２によって決定された入力画像を表示する。具体的には、ディスプレイ３４においては、表示制御部３３によって、入力画像決定部３２によって決定された入力画像に対応する有機EL素子の発光が制御される。
【００３５】
なお、画像表示装置１３をディスプレイ３４のみから構成されるようにして、画像表示装置１３の表示を制御する表示制御装置として、位置特定部３１、入力画像決定部３２、および表示制御部３３を備える表示制御装置を設けるようにしてもよい。
【００３６】
＜４．ディスプレイ表示制御処理＞
ここで、図５のフローチャートを参照して、画像表示装置１３におけるディスプレイ表示制御処理について説明する。図５のディスプレイ表示制御処理は、図１の多視点画像表示システム１を構成する画像再生装置１１、ステレオカメラ１２、および画像表示装置１３全ての電源がオンされ、ユーザ２の操作により、画像再生装置１１における画像の再生が指示されると開始される。
【００３７】
ステップＳ１１において、位置特定部３１は、ステレオカメラ１２からのカメラ画像を取得する。
【００３８】
ステップＳ１２において、位置特定部３１は、ステレオカメラ１２から取得したカメラ画像に基づいて、上述したステレオマッチング法により、画像表示装置１３の奥行き方向に対するユーザ２の位置を特定する。
【００３９】
ここで、例えば、図６に示されるように、画像表示装置１３のディスプレイ３４の中央（中心）を原点Ｏとし、ディスプレイ３４表面を含む平面上の水平方向（図中左方向）をｘ軸方向、ディスプレイ３４表面を含む平面上の垂直方向（図中上方向）をｙ軸方向、ディスプレイ３４表面の鉛直方向（ユーザ２のいる方向）をｚ軸方向とする座標系を設定する。
【００４０】
このような場合、位置特定部３１は、ステレオマッチング法により、xz平面上のユーザ２の位置(Px,Pz)を求め、その位置（座標）を表す位置情報を、内部に記憶するとともに入力画像決定部３２に供給する。
【００４１】
ステップＳ１３において、位置特定部３１は、内部に記憶した位置情報のうちの直前の位置情報（以下、直前位置情報という）と、その時に特定された位置情報（以下、現在位置情報という）とに基づいて、ユーザ２の位置の変化を判定し、そのユーザ２の位置の変化に基づいて、ユーザ２の移動距離を算出する。
【００４２】
例えば、現在位置情報で表わされるユーザ２の位置（現在位置）を(Px,Pz)とし、直前位置情報で表わされるユーザ２の位置（直前位置）を(Px_pre,Pz_pre)とすると、xz平面上でのユーザ２の移動距離Ｄは、以下の式（１）で表わされる。
【００４３】
【数１】
・・・（１）
【００４４】
位置特定部３１は、算出したユーザ２の移動距離を表す移動距離情報を、入力画像決定部３２に供給する。
【００４５】
ステップＳ１４において、入力画像決定部３２は、位置特定部３１からの位置情報（現在位置情報）で表わされるユーザ２の現在位置(Px,Pz)に基づいて、入力画像１乃至９のうちの、ディスプレイ３４に出力される入力画像を示す入力番号を決定する。言い換えると、入力画像決定部３２は、ユーザ２の現在位置(Px,Pz)に基づいて、入力画像１乃至９から、ユーザ２に視認される視点の入力画像の入力番号を決定する。
【００４６】
ここで、図７を参照して、ユーザ２の視点と、ユーザ２に視認される入力画像について説明する。なお、図７においては、図中、右方向がｘ軸方向、上方向がｚ軸方向となる。
【００４７】
図７の右上側に示されるように、ユーザ２の現在位置(Px,Pz)を、ユーザ２の両眼の中心とし、左眼と右眼との間の眼間距離をＥとすると、xz平面における、ユーザ２の左眼の位置(Px_left,Pz_left)は、(Px_left,Pz_left)=(Px+E/2,Pz)で表わされ、ユーザ２の右眼の位置(Px_right,Pz_right)は、(Px_right,Pz_right)=(Px-E/2,Pz)で表わされるようになる。なお、ユーザ２の両眼は、ディスプレイ３４表面に対して平行に位置しているものとする。
【００４８】
また、図７の下側には、ディスプレイ３４を構成する発光素子（有機EL素子）のうち、原点Ｏ=(0,0)にあるパララックスバリアのスリットを透過する光を発光する、入力画像１乃至９に対応する発光素子「１」乃至「９」が示されている。
【００４９】
なお、図７においては、眼間距離Ｅに対して、ディスプレイ３４の発光素子の幅が略同等の幅で示されているが、実際には、ディスプレイ３４の発光素子の幅は、眼間距離Ｅに対して十分小さい。
【００５０】
ここで、図７において、パララックスバリアのスリットの幅を点とみなし、ディスプレイ３４の発光素子の面とパララックスバリアと距離が既知であるとした場合、入力画像決定部３２は、ユーザ２の左眼に視認される入力画像は、ユーザ２の左眼の位置(Px_left,Pz_left)と原点Ｏを通る直線の延長線上にある発光素子「４」に対応する入力画像４であると判定する。また、入力画像決定部３２は、ユーザ２の右眼に視認される入力画像（発光素子）は、ユーザ２の右眼の位置(Px_right,Pz_right)と原点Ｏを通る直線の延長線上にある発光素子「５」に対応する入力画像５であると判定する。
【００５１】
すなわち、図７の例においては、ユーザ２に視認される入力画像は、入力画像４，５となり、入力画像決定部３２は、その入力画像を表す入力番号(I,J)を(I,J)=(4,5)とする。入力番号(I,J)は、隣接する発光素子に対応する２つの入力画像を表す。
【００５２】
このようにして、そのときのユーザ２の位置に応じて、ディスプレイ３４に出力される２つの入力画像が決定されるようになる。
【００５３】
しかしながら、ユーザ２に動きがありその動きが速い場合、ユーザ２の両眼は、決定された２つの入力画像に対応する発光素子以外の発光素子の光を視認してしまうことが考えられる。
【００５４】
そこで、入力画像決定部３２は、位置特定部３１からの位置情報で表わされるユーザ２の位置に加え、位置特定部３１からの移動距離情報で表わされるユーザ２の移動距離に基づいて、入力画像１乃至９のうちの、ディスプレイ３４に出力される入力画像の入力番号を決定するようにする。
【００５５】
ユーザ２の移動距離Ｄを短いと判定するための閾値をD_lowとし、ユーザ２の移動距離を長いと判定するための閾値をD_highとすると、ディスプレイ３４に出力される入力画像を表す入力番号は、ユーザ２の移動距離Ｄに応じて、以下のように決定される。
【００５６】
（１）０＜Ｄ＜D_lowの場合
ディスプレイ３４に出力される入力画像の入力番号：(I,J)
（２）D_low≦Ｄ＜D_highの場合
ディスプレイ３４に出力される入力画像の入力番号：(I-1,I,J,J+1)
（３）D_high≦Ｄの場合
ディスプレイ３４に出力される入力画像の入力番号：(1,2,3,4,5,6,7,8,9)
【００５７】
すなわち、例えば、図７の例において、ユーザ２の移動距離Ｄが閾値D_lowより小さい場合、ディスプレイ３４に出力される入力画像を表す入力番号は(4,5)となり、２つの入力画像４，５がディスプレイ３４に出力されるようになる。
【００５８】
また、図７の例において、ユーザ２の移動距離Ｄが閾値D_low以上で、かつ、閾値D_highより小さい場合、ディスプレイ３４に出力される入力画像を表す入力番号は(3,4,5,6)となり、４つの入力画像３乃至６がディスプレイ３４に出力されるようになる。
【００５９】
そして、図７の例において、ユーザ２の移動距離Ｄが閾値D_high以上である場合、ディスプレイ３４に出力される入力画像を表す入力番号は(1,2,3,4,5,6,7,8,9)となり、全ての入力画像１乃至９がディスプレイ３４に出力されるようになる。
【００６０】
図７のフローチャートの説明に戻り、ステップＳ１５において、表示制御部３３は、入力画像決定部３２によって決定された入力番号の入力画像をディスプレイ３４に表示させるようディスプレイ３４の表示を制御する。すなわち、表示制御部３３は、ディスプレイ３４における、入力画像決定部３２によって決定された入力番号の入力画像に対応する発光素子の発光を制御する。
【００６１】
ステップＳ１５の後、処理はステップＳ１６に進み、画像表示装置１３は、多視点画像表示システム１を構成する画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源が全てオンであるか否かを判定する。
【００６２】
ステップＳ１６において、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源が全てオンであると判定された場合、ステップＳ１１に戻り、ステップＳ１１乃至Ｓ１６の処理が、例えば0.5秒毎に繰り返される。
【００６３】
一方、ステップＳ１６において、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源が全てオンでない、すなわち、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源のいずれかがオフであると判定された場合、ディスプレイ表示制御処理は終了する。なお、ステップＳ１６において、ユーザ２の操作によって、画像再生装置１１における画像の再生が停止された否かを判定し、再生が停止されたと判定された場合にディスプレイ表示制御処理が終了するようにしてもよい。
【００６４】
以上の処理によれば、ディスプレイ３４に対するユーザ２の位置に基づいて、ユーザ２に視認される入力画像に対応する発光素子のみが発光されるようになり、ユーザ２に視認されない入力画像に対応する発光素子は消灯されるようになる。したがって、ユーザに視認されない画像に対応する発光素子についての電力は消費されないようになり、多視点の画像を表示するディスプレイの消費電力を低減させることができる。具体的には、Ｎ視点の多視点の画像を表示するディスプレイにおいては、最大で、全ての発光素子を発光させた場合の消費電力の2/N倍まで、消費電力を低減させることが可能となる。
【００６５】
また、ユーザに動きがある場合であっても、例えば、0.5秒間等の所定の時間における移動距離、すなわち移動速度に応じて、ディスプレイ３４に表示されると決定された入力画像に対応する発光素子以外の発光素子が発光されるようになるので、移動しながら画像を観賞するユーザに違和感を与えないようにすることができる。
【００６６】
なお、以上においては、画像を観賞するユーザが１人である場合の構成について説明したが、ユーザが複数人である場合には、それぞれのユーザの位置を特定して、それぞれのユーザに視認される画像に対応する発光素子を発光するようにすればよい。
【００６７】
また、以上においては、ユーザ位置特定部３１が、ステレオカメラ１２からのカメラ画像に基づいてユーザ２の位置を特定するようにしたが、例えば、ステレオカメラ１２の代わりに所定の手法でユーザ２の位置を測定する測定部を設け、その測定部による測定結果をユーザ２の位置としてもよい。
【００６８】
さらに、以上においては、例えば図２に示されるように、ディスプレイ３４のパララックスバリアには垂直方向のスリットが設けられているものとしたが、水平方向のスリットを設けるようにしたり、グリッド状のスリットを設けるようにして、ユーザの位置に応じて、そのようなスリットを透過する光を発光する発光素子のみを発光させるようにしてもよい。
【００６９】
また、以上においては、ディスプレイ３４は、パララックスバリア方式により立体画像を表示させるものとしたが、レンチキュラーレンズ方式によって立体画像を表示させるようにしてもよい。
【００７０】
さらに、以上においては、多視点画像表示システム１は、多視点の画像を表示することで、ユーザ２に対して立体画像を提供するものとしたが、立体画像に限らず、視点によって異なる複数の画像を提供することが可能である。
【００７１】
また、以上においては、本技術をテレビジョン受像機に適用するようにしたが、ユーザの位置を特定し、多視点の画像を再生し表示する機能を備えた電子機器、例えば、測距用のカメラと裸眼立体視を行わせるディスプレイとを備えた携帯可能なモバイル機器等に適用することもできる。
【００７２】
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータ等に、プログラム記録媒体からインストールされる。
【００７３】
図８は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
【００７４】
コンピュータにおいて、CPU（Central Processing Unit）９０１，ROM（Read Only Memory）９０２，RAM（Random Access Memory）９０３は、バス９０４により相互に接続されている。
【００７５】
バス９０４には、さらに、入出力インタフェース９０５が接続されている。入出力インタフェース９０５には、キーボード、マウス、マイクロホン等よりなる入力部９０６、ディスプレイ、スピーカ等よりなる出力部９０７、ハードディスクや不揮発性のメモリ等よりなる記憶部９０８、ネットワークインタフェース等よりなる通信部９０９、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等のリムーバブルメディア９１１を駆動するドライブ９１０が接続されている。
【００７６】
以上のように構成されるコンピュータでは、CPU９０１が、例えば、記憶部９０８に記憶されているプログラムを、入出力インタフェース９０５およびバス９０４を介して、RAM９０３にロードして実行することにより、上述した一連の処理が行われる。
【００７７】
コンピュータ（CPU９０１）が実行するプログラムは、例えば、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等）、光磁気ディスク、もしくは半導体メモリ等よりなるパッケージメディアであるリムーバブルメディア９１１に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供される。
【００７８】
そして、プログラムは、リムーバブルメディア９１１をドライブ９１０に装着することにより、入出力インタフェース９０５を介して、記憶部９０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部９０９で受信し、記憶部９０８にインストールすることができる。その他、プログラムは、ROM９０２や記憶部９０８に、あらかじめインストールしておくことができる。
【００７９】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【００８０】
また、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【００８１】
さらに、本技術は以下のような構成をとることができる。
（１） 複数の視点の画像を表示する画像表示装置を制御する表示制御装置であって、
ユーザの位置を特定する位置特定部と、
前記位置特定部によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定部と、
前記画像決定部によって決定された前記画像の表示を制御する表示制御部と
を備える表示制御装置。
（２） 前記画像表示装置は、ピクセル単位で発光する発光素子を備え、
前記表示制御部は、前記画像決定部によって決定された前記画像に対応する前記発光素子の発光を制御することで、前記画像の表示を制御する
（１）に記載の表示制御装置。
（３） 前記位置特定部は、前記ユーザの位置の変化に基づいて、前記ユーザの移動距離を算出し、
前記画像決定部は、前記位置特定部によって算出された前記ユーザの移動距離に応じて、前記ユーザに視認される２以上の視点の前記画像を決定する
（１）または（２）に記載の表示制御装置。
（４） 前記画像表示装置は、複数の視点の前記画像からなる立体画像を表示する
（１）乃至（３）のいずれかに記載の表示制御装置。
（５） 複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示制御方法であって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む表示制御方法。
（６） 複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示処理をコンピュータに実行させるプログラムであって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像のうちの、前記ユーザの位置から前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【符号の説明】
【００８２】
１３ 画像表示装置， ３１ 位置特定部， ３２ 入力画像決定部， ３３ 表示制御部， ３４ ディスプレイ
【技術分野】
【０００１】
本技術は、表示制御装置および方法、並びにプログラムに関し、特に、多視点の画像を表示するディスプレイの消費電力を低減させることができるようにする表示制御装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来、パララックスバリア方式（視差バリア方式）や、レンチキュラーレンズ方式などにより、特殊な眼鏡を必要とせずに立体画像を表示させる表示装置が知られている。
【０００３】
このように、特殊な眼鏡を必要とせずに立体画像を表示させる、いわゆる裸眼立体視を行わせる表示装置において、立体映像を観賞する観賞者の頭部位置を検出し、立体視可能範囲を変更させる制御を行うものがある（例えば、特許文献１，２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−３００６１０号公報
【特許文献２】特開平１０−３３３０９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、裸眼立体視を行わせる表示装置おいては、左眼用画像と右眼用画像、すなわち２視点の画像が、それぞれ観賞者の左右の眼で観賞されるように表示される。３視点以上の視点である多視点で裸眼立体視を行わせる表示装置においては、観賞者の視点（位置）に応じて、観賞される左眼用画像と右眼用画像が変わってくるが、観賞されない画像について消費される電力が無駄であった。
【０００６】
本技術は、このような状況に鑑みてなされたものであり、多視点の画像を表示するディスプレイの消費電力を低減させることができるようにするものである。
【課題を解決するための手段】
【０００７】
本技術の一側面の表示制御装置は、複数の視点の画像を表示する画像表示装置を制御する表示制御装置であって、ユーザの位置を特定する位置特定部と、前記位置特定部によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定部と、前記画像決定部によって決定された前記画像の表示を制御する表示制御部とを備える。
【０００８】
前記画像表示装置は、ピクセル単位で発光する発光素子を備え、前記表示制御部には、前記画像決定部によって決定された前記画像に対応する前記発光素子の発光を制御することで、前記画像の表示を制御させることができる。
【０００９】
前記位置特定部には、前記ユーザの位置の変化に基づいて、前記ユーザの移動距離を算出させ、前記画像決定部には、前記位置特定部によって算出された前記ユーザの移動距離に応じて、前記ユーザに視認される２以上の視点の前記画像を決定させることができる。
【００１０】
前記画像表示装置は、複数の視点の前記画像からなる立体画像を表示するようにすることができる。
【００１１】
本技術の一側面の表示制御方法は、複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示制御方法であって、ユーザの位置を特定する位置特定ステップと、前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップとを含む。
【００１２】
本技術の一側面のプログラムは、複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示処理をコンピュータに実行させるプログラムであって、ユーザの位置を特定する位置特定ステップと、前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像のうちの、前記ユーザの位置から前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップとを含む処理をコンピュータに実行させる。
【００１３】
本技術の一側面においては、ユーザの位置が特定され、特定されたユーザの位置に基づいて、画像表示装置に表示される複数の視点の画像のうちの、ユーザの位置からユーザに視認される視点の画像が決定され、決定された画像の表示が制御される。
【発明の効果】
【００１４】
本技術の一側面によれば、多視点の画像を表示するディスプレイの消費電力を低減させることが可能となる。
【図面の簡単な説明】
【００１５】
【図１】本技術を適用した多視点画像表示システムの一実施の形態の外観構成を示す図である。
【図２】パララックスバリア方式について説明する図である。
【図３】パララックスバリア方式について説明する図である。
【図４】画像表示装置の機能構成例を示すブロック図である。
【図５】ディスプレイ表示制御処理について説明するフローチャートである。
【図６】ディスプレイについて設定される座標系について説明する図である。
【図７】ユーザに視認される入力画像について説明する図である。
【図８】コンピュータのハードウェアの構成例を示すブロック図である。
【発明を実施するための形態】
【００１６】
以下、本技術の実施の形態について図を参照して説明する。なお、説明は以下の順序で行う。
１．多視点画像表示システムの外観構成
２．パララックスバリア方式の説明
３．画像表示装置の機能構成
４．ディスプレイ表示制御処理
【００１７】
＜１．多視点画像表示システムの外観構成＞
図１は、本技術を適用した多視点画像表示システムの一実施の形態の外観構成を示している。
【００１８】
図１の多視点画像表示システム１は、複数の視点、すなわち多視点の画像を表示することで、ユーザ２に対して立体画像を提供する。ユーザ２は、多視点画像表示システム１に対するユーザ２自身の位置に応じた立体画像を観賞することができる。ここで、多視点とは、３視点以上の視点である。
【００１９】
多視点画像表示システム１は、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３から構成される。
【００２０】
画像再生装置１１は、多視点の画像を再生することで、多視点の画像それぞれを画像表示装置１３に入力する。多視点の画像の数がＮである場合、すなわち、Ｎ視点の画像が再生される場合、そのＮ視点の画像のそれぞれは、例えば、Ｎ台のデジタルビデオカメラで撮像された画像であったり、Ｎ台より少ないデジタルビデオカメラで撮影された画像を補間した画像であったりする。
【００２１】
ステレオカメラ１２は、左右に配置された２台のカメラからなり、所定のタイミングで、被写体としてのユーザ２を撮像し、撮像の結果得られた２枚の画像（カメラ画像）を、画像再生装置１１に供給する。
【００２２】
画像表示装置１３は、例えば、テレビジョン受像機等として構成される。画像表示装置１３は、ピクセル単位で発光する有機EL(Electro Luminescent)素子等の発光素子から構成されるディスプレイを備えており、パララックスバリア方式を用いて、画像再生装置１１からの多視点の画像を表示する。
【００２３】
また、画像表示装置１３は、ステレオカメラ１２からの２枚のカメラ画像に基づいて、ステレオマッチング法により、画像表示装置１３の奥行き方向に対するユーザ２の位置を特定する。
【００２４】
すなわち、ステレオマッチング法によれば、ステレオカメラ１２の左側のカメラで撮像されたカメラ画像が、右側のカメラで撮像されたカメラ画像のどの部分に対応するかを面積相関の演算により求めて、その対応関係に基づく三角測量の原理を用いることにより、ユーザ２の奥行き方向の位置が求められる。
【００２５】
そして、画像表示装置１３は、ユーザ２の奥行き方向の位置に応じて、ディスプレイに表示される多視点の画像のうちの、ユーザ２に視認される視点の画像のみを表示するように、ディスプレイを構成する発光素子（有機EL素子）の発光を制御する。
【００２６】
＜２．パララックスバリア方式の説明＞
例えば、画像表示装置１３が４視点の画像を表示する場合、画像表示装置１３のディスプレイにおいては、図２に示されるように、図中「１」乃至「４」の数字が記されている、４視点分の画像それぞれに対応する発光素子（以下、発光素子「１」乃至「４」という）が発光する。ディスプレイにおいて、発光素子の前面側（ユーザ２側）には、垂直方向のスリットを有するパララックスバリア（視差バリア）が設けられており、ユーザ２は、パララックスバリアのスリットを透過してきた発光素子の光を、そのユーザの視点「１」乃至「４」のうちの隣接する２つの視点で捉えることで、立体画像を観賞することができる。このとき、画像表示装置１３は、ユーザ２に視認されない視点の画像に対応する発光素子、すなわち、パララックスバリアにより遮蔽され、ユーザの視点で捉えられない光に対応する発光素子を発光させないようにする。
【００２７】
具体的には、図３に示されるように、ユーザ２の左眼が視点「２」にあり、ユーザ２の右眼が視点「３」にある場合、図２における発光素子「１」および「４」の光は、ユーザの視点で捉えられない光となる。したがって、この場合、図２における発光素子「２」および「３」は発光するように制御され、発光素子「１」および「４」は発光しないように制御される。
【００２８】
＜３．画像表示装置の機能構成＞
次に、図３を参照して、図１の多視点画像表示システムにおける画像表示装置１３の機能構成例について説明する。
【００２９】
なお、以下においては、画像再生装置１１は、９視点の画像を再生し、それぞれの画像を、入力画像１乃至９として画像表示装置１３に入力するものとする。
【００３０】
図３の画像表示装置１３は、位置特定部３１、入力画像決定部３２、表示制御部３３、およびディスプレイ３４を備えている。
【００３１】
位置特定部３１は、ステレオカメラ１２からのカメラ画像を取得し、そのカメラ画像に基づいて、上述したステレオマッチング法により、画像表示装置１３の奥行き方向に対するユーザ２の位置を特定する。
【００３２】
入力画像決定部３２は、画像再生装置１１からの入力画像１乃至９の入力を受け付け、位置特定部３１によって特定されたユーザ２の位置に基づいて、入力画像１乃至９から、ユーザ２に視認される視点の入力画像、すなわち、ディスプレイ３４に出力する入力画像を決定する。
【００３３】
表示制御部３３は、入力画像決定部３２によって決定された入力画像をディスプレイ３４に表示させるようディスプレイ３４の表示を制御する。
【００３４】
ディスプレイ３４は、ピクセル単位で発光する有機EL素子等の自発光素子から構成され、表示制御部３３の制御の下、パララックスバリア方式を用いて、画像再生装置１１からの９視点の入力画像１乃至９のうちの、入力画像決定部３２によって決定された入力画像を表示する。具体的には、ディスプレイ３４においては、表示制御部３３によって、入力画像決定部３２によって決定された入力画像に対応する有機EL素子の発光が制御される。
【００３５】
なお、画像表示装置１３をディスプレイ３４のみから構成されるようにして、画像表示装置１３の表示を制御する表示制御装置として、位置特定部３１、入力画像決定部３２、および表示制御部３３を備える表示制御装置を設けるようにしてもよい。
【００３６】
＜４．ディスプレイ表示制御処理＞
ここで、図５のフローチャートを参照して、画像表示装置１３におけるディスプレイ表示制御処理について説明する。図５のディスプレイ表示制御処理は、図１の多視点画像表示システム１を構成する画像再生装置１１、ステレオカメラ１２、および画像表示装置１３全ての電源がオンされ、ユーザ２の操作により、画像再生装置１１における画像の再生が指示されると開始される。
【００３７】
ステップＳ１１において、位置特定部３１は、ステレオカメラ１２からのカメラ画像を取得する。
【００３８】
ステップＳ１２において、位置特定部３１は、ステレオカメラ１２から取得したカメラ画像に基づいて、上述したステレオマッチング法により、画像表示装置１３の奥行き方向に対するユーザ２の位置を特定する。
【００３９】
ここで、例えば、図６に示されるように、画像表示装置１３のディスプレイ３４の中央（中心）を原点Ｏとし、ディスプレイ３４表面を含む平面上の水平方向（図中左方向）をｘ軸方向、ディスプレイ３４表面を含む平面上の垂直方向（図中上方向）をｙ軸方向、ディスプレイ３４表面の鉛直方向（ユーザ２のいる方向）をｚ軸方向とする座標系を設定する。
【００４０】
このような場合、位置特定部３１は、ステレオマッチング法により、xz平面上のユーザ２の位置(Px,Pz)を求め、その位置（座標）を表す位置情報を、内部に記憶するとともに入力画像決定部３２に供給する。
【００４１】
ステップＳ１３において、位置特定部３１は、内部に記憶した位置情報のうちの直前の位置情報（以下、直前位置情報という）と、その時に特定された位置情報（以下、現在位置情報という）とに基づいて、ユーザ２の位置の変化を判定し、そのユーザ２の位置の変化に基づいて、ユーザ２の移動距離を算出する。
【００４２】
例えば、現在位置情報で表わされるユーザ２の位置（現在位置）を(Px,Pz)とし、直前位置情報で表わされるユーザ２の位置（直前位置）を(Px_pre,Pz_pre)とすると、xz平面上でのユーザ２の移動距離Ｄは、以下の式（１）で表わされる。
【００４３】
【数１】
・・・（１）
【００４４】
位置特定部３１は、算出したユーザ２の移動距離を表す移動距離情報を、入力画像決定部３２に供給する。
【００４５】
ステップＳ１４において、入力画像決定部３２は、位置特定部３１からの位置情報（現在位置情報）で表わされるユーザ２の現在位置(Px,Pz)に基づいて、入力画像１乃至９のうちの、ディスプレイ３４に出力される入力画像を示す入力番号を決定する。言い換えると、入力画像決定部３２は、ユーザ２の現在位置(Px,Pz)に基づいて、入力画像１乃至９から、ユーザ２に視認される視点の入力画像の入力番号を決定する。
【００４６】
ここで、図７を参照して、ユーザ２の視点と、ユーザ２に視認される入力画像について説明する。なお、図７においては、図中、右方向がｘ軸方向、上方向がｚ軸方向となる。
【００４７】
図７の右上側に示されるように、ユーザ２の現在位置(Px,Pz)を、ユーザ２の両眼の中心とし、左眼と右眼との間の眼間距離をＥとすると、xz平面における、ユーザ２の左眼の位置(Px_left,Pz_left)は、(Px_left,Pz_left)=(Px+E/2,Pz)で表わされ、ユーザ２の右眼の位置(Px_right,Pz_right)は、(Px_right,Pz_right)=(Px-E/2,Pz)で表わされるようになる。なお、ユーザ２の両眼は、ディスプレイ３４表面に対して平行に位置しているものとする。
【００４８】
また、図７の下側には、ディスプレイ３４を構成する発光素子（有機EL素子）のうち、原点Ｏ=(0,0)にあるパララックスバリアのスリットを透過する光を発光する、入力画像１乃至９に対応する発光素子「１」乃至「９」が示されている。
【００４９】
なお、図７においては、眼間距離Ｅに対して、ディスプレイ３４の発光素子の幅が略同等の幅で示されているが、実際には、ディスプレイ３４の発光素子の幅は、眼間距離Ｅに対して十分小さい。
【００５０】
ここで、図７において、パララックスバリアのスリットの幅を点とみなし、ディスプレイ３４の発光素子の面とパララックスバリアと距離が既知であるとした場合、入力画像決定部３２は、ユーザ２の左眼に視認される入力画像は、ユーザ２の左眼の位置(Px_left,Pz_left)と原点Ｏを通る直線の延長線上にある発光素子「４」に対応する入力画像４であると判定する。また、入力画像決定部３２は、ユーザ２の右眼に視認される入力画像（発光素子）は、ユーザ２の右眼の位置(Px_right,Pz_right)と原点Ｏを通る直線の延長線上にある発光素子「５」に対応する入力画像５であると判定する。
【００５１】
すなわち、図７の例においては、ユーザ２に視認される入力画像は、入力画像４，５となり、入力画像決定部３２は、その入力画像を表す入力番号(I,J)を(I,J)=(4,5)とする。入力番号(I,J)は、隣接する発光素子に対応する２つの入力画像を表す。
【００５２】
このようにして、そのときのユーザ２の位置に応じて、ディスプレイ３４に出力される２つの入力画像が決定されるようになる。
【００５３】
しかしながら、ユーザ２に動きがありその動きが速い場合、ユーザ２の両眼は、決定された２つの入力画像に対応する発光素子以外の発光素子の光を視認してしまうことが考えられる。
【００５４】
そこで、入力画像決定部３２は、位置特定部３１からの位置情報で表わされるユーザ２の位置に加え、位置特定部３１からの移動距離情報で表わされるユーザ２の移動距離に基づいて、入力画像１乃至９のうちの、ディスプレイ３４に出力される入力画像の入力番号を決定するようにする。
【００５５】
ユーザ２の移動距離Ｄを短いと判定するための閾値をD_lowとし、ユーザ２の移動距離を長いと判定するための閾値をD_highとすると、ディスプレイ３４に出力される入力画像を表す入力番号は、ユーザ２の移動距離Ｄに応じて、以下のように決定される。
【００５６】
（１）０＜Ｄ＜D_lowの場合
ディスプレイ３４に出力される入力画像の入力番号：(I,J)
（２）D_low≦Ｄ＜D_highの場合
ディスプレイ３４に出力される入力画像の入力番号：(I-1,I,J,J+1)
（３）D_high≦Ｄの場合
ディスプレイ３４に出力される入力画像の入力番号：(1,2,3,4,5,6,7,8,9)
【００５７】
すなわち、例えば、図７の例において、ユーザ２の移動距離Ｄが閾値D_lowより小さい場合、ディスプレイ３４に出力される入力画像を表す入力番号は(4,5)となり、２つの入力画像４，５がディスプレイ３４に出力されるようになる。
【００５８】
また、図７の例において、ユーザ２の移動距離Ｄが閾値D_low以上で、かつ、閾値D_highより小さい場合、ディスプレイ３４に出力される入力画像を表す入力番号は(3,4,5,6)となり、４つの入力画像３乃至６がディスプレイ３４に出力されるようになる。
【００５９】
そして、図７の例において、ユーザ２の移動距離Ｄが閾値D_high以上である場合、ディスプレイ３４に出力される入力画像を表す入力番号は(1,2,3,4,5,6,7,8,9)となり、全ての入力画像１乃至９がディスプレイ３４に出力されるようになる。
【００６０】
図７のフローチャートの説明に戻り、ステップＳ１５において、表示制御部３３は、入力画像決定部３２によって決定された入力番号の入力画像をディスプレイ３４に表示させるようディスプレイ３４の表示を制御する。すなわち、表示制御部３３は、ディスプレイ３４における、入力画像決定部３２によって決定された入力番号の入力画像に対応する発光素子の発光を制御する。
【００６１】
ステップＳ１５の後、処理はステップＳ１６に進み、画像表示装置１３は、多視点画像表示システム１を構成する画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源が全てオンであるか否かを判定する。
【００６２】
ステップＳ１６において、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源が全てオンであると判定された場合、ステップＳ１１に戻り、ステップＳ１１乃至Ｓ１６の処理が、例えば0.5秒毎に繰り返される。
【００６３】
一方、ステップＳ１６において、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源が全てオンでない、すなわち、画像再生装置１１、ステレオカメラ１２、および画像表示装置１３の電源のいずれかがオフであると判定された場合、ディスプレイ表示制御処理は終了する。なお、ステップＳ１６において、ユーザ２の操作によって、画像再生装置１１における画像の再生が停止された否かを判定し、再生が停止されたと判定された場合にディスプレイ表示制御処理が終了するようにしてもよい。
【００６４】
以上の処理によれば、ディスプレイ３４に対するユーザ２の位置に基づいて、ユーザ２に視認される入力画像に対応する発光素子のみが発光されるようになり、ユーザ２に視認されない入力画像に対応する発光素子は消灯されるようになる。したがって、ユーザに視認されない画像に対応する発光素子についての電力は消費されないようになり、多視点の画像を表示するディスプレイの消費電力を低減させることができる。具体的には、Ｎ視点の多視点の画像を表示するディスプレイにおいては、最大で、全ての発光素子を発光させた場合の消費電力の2/N倍まで、消費電力を低減させることが可能となる。
【００６５】
また、ユーザに動きがある場合であっても、例えば、0.5秒間等の所定の時間における移動距離、すなわち移動速度に応じて、ディスプレイ３４に表示されると決定された入力画像に対応する発光素子以外の発光素子が発光されるようになるので、移動しながら画像を観賞するユーザに違和感を与えないようにすることができる。
【００６６】
なお、以上においては、画像を観賞するユーザが１人である場合の構成について説明したが、ユーザが複数人である場合には、それぞれのユーザの位置を特定して、それぞれのユーザに視認される画像に対応する発光素子を発光するようにすればよい。
【００６７】
また、以上においては、ユーザ位置特定部３１が、ステレオカメラ１２からのカメラ画像に基づいてユーザ２の位置を特定するようにしたが、例えば、ステレオカメラ１２の代わりに所定の手法でユーザ２の位置を測定する測定部を設け、その測定部による測定結果をユーザ２の位置としてもよい。
【００６８】
さらに、以上においては、例えば図２に示されるように、ディスプレイ３４のパララックスバリアには垂直方向のスリットが設けられているものとしたが、水平方向のスリットを設けるようにしたり、グリッド状のスリットを設けるようにして、ユーザの位置に応じて、そのようなスリットを透過する光を発光する発光素子のみを発光させるようにしてもよい。
【００６９】
また、以上においては、ディスプレイ３４は、パララックスバリア方式により立体画像を表示させるものとしたが、レンチキュラーレンズ方式によって立体画像を表示させるようにしてもよい。
【００７０】
さらに、以上においては、多視点画像表示システム１は、多視点の画像を表示することで、ユーザ２に対して立体画像を提供するものとしたが、立体画像に限らず、視点によって異なる複数の画像を提供することが可能である。
【００７１】
また、以上においては、本技術をテレビジョン受像機に適用するようにしたが、ユーザの位置を特定し、多視点の画像を再生し表示する機能を備えた電子機器、例えば、測距用のカメラと裸眼立体視を行わせるディスプレイとを備えた携帯可能なモバイル機器等に適用することもできる。
【００７２】
上述した一連の処理は、ハードウェアにより実行することもできるし、ソフトウェアにより実行することもできる。一連の処理をソフトウェアにより実行する場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータ等に、プログラム記録媒体からインストールされる。
【００７３】
図８は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。
【００７４】
コンピュータにおいて、CPU（Central Processing Unit）９０１，ROM（Read Only Memory）９０２，RAM（Random Access Memory）９０３は、バス９０４により相互に接続されている。
【００７５】
バス９０４には、さらに、入出力インタフェース９０５が接続されている。入出力インタフェース９０５には、キーボード、マウス、マイクロホン等よりなる入力部９０６、ディスプレイ、スピーカ等よりなる出力部９０７、ハードディスクや不揮発性のメモリ等よりなる記憶部９０８、ネットワークインタフェース等よりなる通信部９０９、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等のリムーバブルメディア９１１を駆動するドライブ９１０が接続されている。
【００７６】
以上のように構成されるコンピュータでは、CPU９０１が、例えば、記憶部９０８に記憶されているプログラムを、入出力インタフェース９０５およびバス９０４を介して、RAM９０３にロードして実行することにより、上述した一連の処理が行われる。
【００７７】
コンピュータ（CPU９０１）が実行するプログラムは、例えば、磁気ディスク（フレキシブルディスクを含む）、光ディスク（CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等）、光磁気ディスク、もしくは半導体メモリ等よりなるパッケージメディアであるリムーバブルメディア９１１に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供される。
【００７８】
そして、プログラムは、リムーバブルメディア９１１をドライブ９１０に装着することにより、入出力インタフェース９０５を介して、記憶部９０８にインストールすることができる。また、プログラムは、有線または無線の伝送媒体を介して、通信部９０９で受信し、記憶部９０８にインストールすることができる。その他、プログラムは、ROM９０２や記憶部９０８に、あらかじめインストールしておくことができる。
【００７９】
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。
【００８０】
また、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。
【００８１】
さらに、本技術は以下のような構成をとることができる。
（１） 複数の視点の画像を表示する画像表示装置を制御する表示制御装置であって、
ユーザの位置を特定する位置特定部と、
前記位置特定部によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定部と、
前記画像決定部によって決定された前記画像の表示を制御する表示制御部と
を備える表示制御装置。
（２） 前記画像表示装置は、ピクセル単位で発光する発光素子を備え、
前記表示制御部は、前記画像決定部によって決定された前記画像に対応する前記発光素子の発光を制御することで、前記画像の表示を制御する
（１）に記載の表示制御装置。
（３） 前記位置特定部は、前記ユーザの位置の変化に基づいて、前記ユーザの移動距離を算出し、
前記画像決定部は、前記位置特定部によって算出された前記ユーザの移動距離に応じて、前記ユーザに視認される２以上の視点の前記画像を決定する
（１）または（２）に記載の表示制御装置。
（４） 前記画像表示装置は、複数の視点の前記画像からなる立体画像を表示する
（１）乃至（３）のいずれかに記載の表示制御装置。
（５） 複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示制御方法であって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む表示制御方法。
（６） 複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示処理をコンピュータに実行させるプログラムであって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像のうちの、前記ユーザの位置から前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【符号の説明】
【００８２】
１３ 画像表示装置， ３１ 位置特定部， ３２ 入力画像決定部， ３３ 表示制御部， ３４ ディスプレイ
【特許請求の範囲】
【請求項１】
複数の視点の画像を表示する画像表示装置を制御する表示制御装置であって、
ユーザの位置を特定する位置特定部と、
前記位置特定部によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定部と、
前記画像決定部によって決定された前記画像の表示を制御する表示制御部と
を備える表示制御装置。
【請求項２】
前記画像表示装置は、ピクセル単位で発光する発光素子を備え、
前記表示制御部は、前記画像決定部によって決定された前記画像に対応する前記発光素子の発光を制御することで、前記画像の表示を制御する
請求項１に記載の表示制御装置。
【請求項３】
前記位置特定部は、前記ユーザの位置の変化に基づいて、前記ユーザの移動距離を算出し、
前記画像決定部は、前記位置特定部によって算出された前記ユーザの移動距離に応じて、前記ユーザに視認される２以上の視点の前記画像を決定する
請求項１に記載の表示制御装置。
【請求項４】
前記画像表示装置は、複数の視点の前記画像からなる立体画像を表示する
請求項１に記載の表示制御装置。
【請求項５】
複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示制御方法であって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む表示制御方法。
【請求項６】
複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示処理をコンピュータに実行させるプログラムであって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像のうちの、前記ユーザの位置から前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【請求項１】
複数の視点の画像を表示する画像表示装置を制御する表示制御装置であって、
ユーザの位置を特定する位置特定部と、
前記位置特定部によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定部と、
前記画像決定部によって決定された前記画像の表示を制御する表示制御部と
を備える表示制御装置。
【請求項２】
前記画像表示装置は、ピクセル単位で発光する発光素子を備え、
前記表示制御部は、前記画像決定部によって決定された前記画像に対応する前記発光素子の発光を制御することで、前記画像の表示を制御する
請求項１に記載の表示制御装置。
【請求項３】
前記位置特定部は、前記ユーザの位置の変化に基づいて、前記ユーザの移動距離を算出し、
前記画像決定部は、前記位置特定部によって算出された前記ユーザの移動距離に応じて、前記ユーザに視認される２以上の視点の前記画像を決定する
請求項１に記載の表示制御装置。
【請求項４】
前記画像表示装置は、複数の視点の前記画像からなる立体画像を表示する
請求項１に記載の表示制御装置。
【請求項５】
複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示制御方法であって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像から、前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む表示制御方法。
【請求項６】
複数の視点の画像を表示する画像表示装置を制御する表示制御装置の表示処理をコンピュータに実行させるプログラムであって、
ユーザの位置を特定する位置特定ステップと、
前記位置特定ステップの処理によって特定された前記ユーザの位置に基づいて、複数の視点の前記画像のうちの、前記ユーザの位置から前記ユーザに視認される視点の前記画像を決定する画像決定ステップと、
前記画像決定ステップの処理によって決定された前記画像の表示を制御する表示制御ステップと
を含む処理をコンピュータに実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１２−２２２３８６（Ｐ２０１２−２２２３８６Ａ）
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願番号】特願２０１１−８２４６７（Ｐ２０１１−８２４６７）
【出願日】平成２３年４月４日（２０１１．４．４）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願日】平成２３年４月４日（２０１１．４．４）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]