画像処理装置、画像処理方法及びプログラム
【課題】本発明は、リアリティ性を向上し得る画像処理装置、画像処理方法及びプログラムを提案する。
【解決手段】右眼用画像と左眼用画像とを交互に投影し、右眼用画像の投影像と左眼用画像の投影像とを分離することで３次元像を観測者に提示する。この際、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出し、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する。
【解決手段】右眼用画像と左眼用画像とを交互に投影し、右眼用画像の投影像と左眼用画像の投影像とを分離することで３次元像を観測者に提示する。この際、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出し、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像処理装置、画像処理方法及びプログラムに関し、例えば３次元像を提示する場合に適用して好適なものである。
【背景技術】
【０００２】
従来、視差を有する右眼用画像と左眼用画像とを、対応する観察者の眼に交互に与えることで、該観察者に対して３次元像を提示するといった技術がある（特許文献１，特許文献２参照）。この技術では、映像内の人物が立体的に見ることができるためリアリティ性が高まる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１０−１１７３６２号公報
【特許文献２】特開２０１０−１９３４０９公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところでゲームに関する映像など、ユーザの視点を画像に見立て表示する場合がある。このような場合に、リアリティ性を向上させる一環として、ユーザの視点を画像に見立てたままで、該ユーザがあたかもその場にいるかのような臨場感を与えるといった要請があった。
【０００５】
本発明は以上の点を考慮してなされたもので、リアリティ性を向上し得る画像処理装置、画像処理方法及びプログラムを提案しようとするものである。
【課題を解決するための手段】
【０００６】
かかる課題を解決するため本発明は、画像処理装置であって、右眼用画像と左眼用画像とを交互に投影する投影手段と、右眼用画像の投影像と左眼用画像の投影像とを分離する分離手段と、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出する視線検出手段と、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整手段とを有する。
【０００７】
また本発明は、画像処理方法であって、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出する視線検出ステップと、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整ステップと、調整される右眼用画像と左眼用画像とを交互に投影する投影ステップと、右眼用画像の投影像と左眼用画像の投影像とを分離する分離ステップとを有する。
【０００８】
また本発明は、プログラムであって、コンピュータに対して、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出すること、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整すること、調整される右眼用画像と左眼用画像とを交互に投影すること、右眼用画像の投影像と左眼用画像の投影像とを分離することを実行させる。
【発明の効果】
【０００９】
以上のように本発明によれば、観測者に対して、視線方向を中心として着目領域が制限され、夜などの暗い場所などでの実際の視野と近似した３次元像を提示することが可能となり、この結果、リアリティ性を向上し得る画像処理装置、画像処理方法及びプログラムが実現される。
【図面の簡単な説明】
【００１０】
【図１】映像提示システムの構成を示す概略図である。
【図２】メガネの構成を示す概略図である。
【図３】メガネの装着状態を示す概略図である。
【図４】画像処理装置の構成を示す概略図である。
【図５】ＣＰＵの機能的構成を示す概略図である。
【図６】視線と、電位差の符号及び大きさとの関係を示す概略図である。
【図７】投影像の提示状態例（１）を示す概略図である。
【図８】投影像の提示状態例（２）を示す概略図である。
【図９】映像提示処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１１】
以下、発明を実施するための形態について説明する。なお、説明は以下の順序とする。
＜１．実施の形態＞
＜２．他の実施の形態＞
【００１２】
＜１．実施の形態＞
３次元映像の提示方式は、時分割方式と偏光方式とに大別される。時分割方式は、視差を有する右眼用画像と左眼用画像とを時系列に沿って交互に投影し、左右の眼に割り当てられる液晶シャッターに対する透過タイミングを切り換えて３次元画像を提示させる方式である。
【００１３】
一方、偏光方式は、互いに偏光方向の異なる右眼用画像と左眼用画像とを時系列に沿って交互に投影し、左右の眼に対して偏光方向が異なる状態として割り当てられるレンズを介して３次元映像を提示させる方式である。
【００１４】
実施の形態として、時分割方式を用いた映像提示システムを一例として挙げる。
【００１５】
［１−１．映像提示システムの構成］
図１に示すように、映像提示システム１は、メガネ１０と画像処理装置２０とを含む構成とされる。メガネ１０と画像処理装置２０とは有線又は無線によりデータを授受し得るようになされている。
【００１６】
［１−２．メガネの構成］
メガネ１０は、図２又は図３に示すように、フレーム（以下、これをメガネフレームとも呼ぶ）１１を有し、該メガネフレーム１１の所定位置には、左眼に割り当てるべき液晶シャッターＬＬと、右眼に割り当てるべき液晶シャッターＬＲとが設けられる。
【００１７】
メガネフレーム１１のうち、液晶シャッターＬＬ，ＬＲに介在するブリッジ部１２の上側には投影部１３が取り付けられる。投影部１３は、液晶面と直交する前方向に向けて像を投影する。またブリッジ部ＢＬＰには３軸のジャイロスコープ１４が内蔵される。
【００１８】
メガネフレーム１１のうち、顔面と対向される側には、左眼の左上側部位に接触される電極（以下、これを左上電極とも呼ぶ）１５と、右眼の右下側部位に接触される電極（以下、これを右下電極とも呼ぶ）１６とが設けられる。
【００１９】
左上電極１５が接触されるべき位置として、メガネフレーム１１を装着した装着者の左眉毛の眉尻周辺がより好ましい。一方、右下電極１６が接触されるべき位置として、メガネフレーム１１を装着した装着者の右眼尻下方が好ましい。
【００２０】
またメガネフレーム１１のうち、耳かけ部の内側には、耳付近に接触される電極（以下、これを耳電極とも呼ぶ）１６が設けられる。耳電極１７が接触されるべき位置として、メガネフレーム１１を装着した装着者の右又は左の下方が好ましい。耳朶であればより好ましい。
【００２１】
なお、メガネフレーム１１を装着したユーザの各部位に電極１５〜１７が接触可能であれば、メガネフレーム１１と電極１５〜１７との設置形態は図示した形態に限定されるものではない。
【００２２】
［１−３．画像処理装置の構成］
画像処理装置２０は、図４に示すように、該画像処理装置２０全体の制御を司るＣＰＵ(Central Processing Unit)２１に対して各種ハードウェアを接続することにより構成される。
【００２３】
具体的にはＲＯＭ(Read Only Memory)２２、ＣＰＵ２１のワークメモリとなるＲＡＭ(Random Access Memory)２３、操作部２４及びインターフェース２５などがバス２６を介して接続される。
【００２４】
ＲＯＭ２２には、液晶シャッターＬＬ，ＬＲ、投影部１３、ジャイロスコープ１４及び電極１５〜１７を適宜用いて、３次元像をユーザに提示させるためのプログラムが格納される。
【００２５】
操作部２４は、各種操作子を有し、該操作子に対するユーザの操作に応じた命令をＣＰＵ２１に与えるものである。この命令は、例えば、３次元像に含まれる人又は３次元像自体を奥、手前、左又は右に移動させる、あるいは、３次元像の状態を変更するなど、該３次元像の制御に関する命令である。
【００２６】
インターフェイス２５には、液晶シャッターＬＬ，ＬＲ、投影部１３、ジャイロスコープ１４、電極１５〜１７、記録媒体ＭＲがそれぞれ接続される。記録媒体ＭＲは、例えば、Ｂｌｕ−ｒａｙ（ブルーレイディスクアソシエーション:登録商標）ディスク、ハードディスク又はメモリカードなどである。
【００２７】
［１−４．映像提示処理］
ＣＰＵ２１は、映像を提示すべき命令が与えられた場合、ＲＯＭ２２に格納されたプログラムをＲＡＭ２３に展開する。この場合、ＣＰＵ２１は、図５に示すように、プログラムに基づいて映像取得部３１、同期信号生成部３２、投影制御部３３、シャッター制御部３４、視線検出部３５、輝度調整部３６及び傾き調整部３７として機能し、３次元像をユーザに提示させる処理を実行する。
【００２８】
映像取得部３１は、インターフェイス２５を用いて、記憶媒体ＭＲから有線又は無線の通信路を介して映像データを取得し、これを投影制御部３３に送出する。この映像データは、視差の異なる右眼用画像と左眼用画像と単位として、時系列に沿った複数の画像をもつデータである。
【００２９】
同期信号生成部３２は、同期の制御に関する信号（以下、これを同期信号と呼ぶ）を生成し、これを投影制御部３３、シャッター制御部３４、輝度調整部３６及び傾き調整部３７に送出する。
【００３０】
投影制御部３３は、同期信号生成部３２から与えられる同期信号にしたがって、映像取得部３１から与えられる映像データを構成する複数の右眼用画像と左眼用画像とを、時系列に沿って交互に投影部１３から投影させる。
【００３１】
シャッター制御部３４は、右眼用画像が右眼に与えられ左眼用画像が左眼に与えられるよう、同期信号生成部３２から与えられる同期信号にしたがって、液晶シャッターＬＬ，ＬＲの開閉を交互に切り替える。
【００３２】
視線検出部３５では、耳電極１７を基準とする左上電極１５との電位差および右下電極１６との電位差から、視線方向が検出される。
【００３３】
ここで、左の耳朶に基準電極を配置し、左眼の左上及び右眼の右下に電極を配置し、様々な方向に視線を移動させた際の、各電極と基準電極との電位差、及び電極間の電位差を測定した実験結果を図６に示す。
【００３４】
この測定では、視線を正面から左上、右下、上中央、下中央、右上、左下、右中央、左中央、正面の順に移動させ、それぞれの位置で所定時間だけ視線が停止された。図４に示すように、それぞれの方向で視線が停止している際、左上電極と基準電極との電位差、右下電極と基準電極との電位差、及び左上電極と右下電極との電位差は、視線が停止している方向によって符号及び大きさが異なる。
【００３５】
なお、図６において、視線の移動時にそれぞれの電位差（眼電位に相当）が大きく変化しているのは、視線を移動させているときの筋電位が測定されるためである。筋電位は眼電位に対して約１０００倍の大きさであるため、筋電位と眼電位とは容易に区別がつくものである。
【００３６】
視線検出部３５は、基準とされる耳電極１７と左上電極１５との電位差を増幅するとともに、該耳電極１７と右下電極１６との電位差を増幅し、所定間隔ごとに、増幅した電位差の値と、筋電位とみなすべき最低の値として規定される閾値とを比較する。
【００３７】
耳電極１７と左上電極１５との電位差（以下、これを左電位差とも呼ぶ）及び耳電極１７と右下電極１６（以下、これを右電位差とも呼ぶ）との電位差の値がそれぞれ閾値以上であった場合、視線検出部３５は視線を検出すべきではないものと判断する。
【００３８】
一方、左電位差及び右電位差の値が閾値未満であった場合、視線検出部３５は視線を検出すべきであると判断する。この場合、視線検出部３５は、左電位差及び右電位差の符号及び大きさに対応する視線方向を、テーブルを参照して検出する。
【００３９】
具体的には、例えば、９種類の視線方向を検出対象として設定された３段階の大きさである「大」、「中」及び「小」のいずれであるかがそれぞれ判断され、その判断結果と、図４に示したような９方向の視線方向での符号及び大きさを示したテーブルとが比較される。因みに９方向とは、「正面」、「上中央」、「下中央」、「右中央」、「左中央」、「右上」、「右下」、「左上」、「左下」である。
【００４０】
視線検出部３５は、視線方向を検出した場合、該視線方向を示すデータ（以下、これを視線データとも呼ぶ）を生成し、これを輝度調整部３６に送出する。
【００４１】
輝度調整部３６は、視線検出部３５から視線データが与えられた場合、同期信号生成部３２から与えられる同期信号及び内蔵時計に基づいて、その視線データに示される視線方向が検出された時点に対応する右眼用画像及び左眼用画像を調整対象として認識する。
【００４２】
そして輝度調整部３６は、調整対象として認識した右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう、該部分における画素の輝度値を所定値未満の値に変更する。
【００４３】
また輝度調整部３６は、設定した範囲がその中心から徐々に暗くなるよう、該範囲内における画素の輝度値を、中心から離れるほど当該輝度値に対する引き下げ割合を大きく変更する。
【００４４】
この結果、図７に示すように、ユーザに対して、視線方向を中心として着目領域が制限され、夜などの暗い場所などでの実際の視野と近似した３次元像が提示されることとなる。
【００４５】
傾き調整部３７は、メガネフレーム１１が適正に装着された状態におけるジャイロスコープ１４での計測値を基準データとして取得する。この基準データの取得手法には、例えば、予め記憶されたＲＯＭ等などから読み出して取得する手法や、メガネフレーム１１の装着されたことを検出した時点におけるジャイロスコープ１４での計測値を基準データとして生成して取得する手法がある。
【００４６】
傾き調整部３７は、基準データを取得すると、該基準データを、ジャイロスコープ１４から出力される計測値と定期的に比較し、その比較結果から基準面に対する傾き角を検出する。
【００４７】
ここで、検出した傾き角が、傾きがあるものとして設定される最低値以上となる場合、傾き調整部３７は、同期信号生成部３２から与えられる同期信号及び内蔵時計に基づいて、その検出した時点に対応する右眼用画像及び左眼用画像を調整対象として認識する。
【００４８】
そして傾き調整部３７は、調整対象の右眼用画像及び左眼用画像の傾きを、傾き角が所定の角度未満となるよう補正する。
【００４９】
この結果、図８に示すように、メガネフレーム１１を装着するユーザにおける頭の傾きに応じて投影像も傾いてしまうといった事態が回避され、該ユーザに対して、実際の視界状態と一致した３次元像が提示されることとなる。
【００５０】
このようにＣＰＵ２１は、電極１５〜１７及びジャイロスコープ１４を用いて、暗い場所での実際の視野と近似し、かつ実際の視界状態と一致するよう右眼用画像及び左眼用画像を補正した上で、３次元像を提示できるようになされている。
【００５１】
［１−５．３次元像提示処理手順］
次に上述した３次元像提示処理の手順について図９に示すフローチャートを用いて説明する。ＣＰＵ２１は、映像を提示すべき命令が与えられと、３次元像提示処理を開始しステップＳＰ１に進む。
【００５２】
ＣＰＵ２１は、ステップＳＰ１では、電極１５〜１７を用いて視線方向を検出するとともに、ジャイロスコープ１４を用いて基準面に対する傾き角を検出し、ステップＳＰ２に進む。
【００５３】
ＣＰＵ２１は、ステップＳＰ２では、記録媒体ＭＲから、映像データを構成する１組の右眼用画像と左眼用画像を取得し、ステップＳＰ３に進む。
【００５４】
ＣＰＵ２１は、ステップＳＰ３では、ステップＳＰ１で検出した視線方向と、基準面に対する傾き角に基づいて、ステップＳＰ２で取得した右眼用画像と左眼用画像を補正し、ステップＳＰ４に進む。具体的には、右眼用画像と左眼用画像の輝度値が、ステップＳＰ１で検出した視線方向を基準とする所定範囲が可視化されるよう補正され、右眼用画像と左眼用画像の傾きが、ステップＳＰ１で検出した基準面に対する傾き角との差が所定未満となるよう補正される。
【００５５】
ＣＰＵ２１は、ステップＳＰ４では、ステップＳＰ３で補正した右眼用画像と左眼用画像を交互に投影させるとともに、該投影時期に対応させて液晶シャッターＬＬ，ＬＲの開閉を切り替え、ステップＳＰ５に進む。
【００５６】
ＣＰＵ２１は、ステップＳＰ５では、ステップＳＰ１の検出時点から所定の期間が経過したか否かを判定する。この期間が未経過である場合、ＣＰＵ２１は、ステップＳＰ２に戻って、記録媒体ＭＲから、新たな１組の右眼用画像と左眼用画像を取得する。
【００５７】
これに対して、ステップＳＰ１の検出時点から所定の期間が経過した場合、ＣＰＵ２１はステップＳＰ１に戻って、視線方向と、基準面に対する傾き角を再検出する。
【００５８】
このようにしてＣＰＵ２１は、映像の提示を終了すべき命令が当てられるまで、記録媒体ＭＲに記憶される映像データに基づいて３次元像を提示するようになされている。
【００５９】
なお、視線が移動していることなどに起因して、ステップＳＰ１において視線方向が非検出となる場合がある。この場合、ステップＳＰ３では、現取得対象である右眼用画像と左眼用画像の輝度値は、当該画像よりも前に取得された右眼用画像と左眼用画像に対して補正された輝度値と同様に補正される。
【００６０】
また、ステップＳＰ１において基準面に対する傾き角が、傾きがあるものとして設定される最低値未満であった場合、ステップＳＰ３では、現取得対象である右眼用画像と左眼用画像の傾きは、当該画像よりも前に取得された右眼用画像と左眼用画像に対して補正された傾きと同様に補正される。
【００６１】
［１−６．効果等］
以上の構成においてこの画像処理装置２０は、３次元像を提示すべきユーザの視線方向を検出し、該ユーザの右眼に与えられる右眼用画像と、左眼に与えられる左眼用画像とに対して視線方向を基準とする範囲を設定する。そして画像処理装置２０は、設定した範囲外の部分が不可視状態となるよう、該部分における画素の輝度値を調整する。
【００６２】
したがってこの画像処理装置２０は、ユーザに対して、視線方向を中心として着目領域が制限され、夜などの暗い場所などでの実際の視野と近似した３次元像を提示することが可能となる。このことは、ゲームに関する３次元像など、画面をユーザの視界と捉えて３次元像を提示する場合などでは特に有用である。
【００６３】
これに加えてこの画像処理装置２０は、ジャイロスコープでの計測値に基づいて基準面に対する傾き角を検出し、該傾き角が所定の角度未満となるよう右眼用画像及び左眼用画像の傾きを調整する。
【００６４】
したがってこの画像処理装置２０は、メガネフレーム１１を装着するユーザにおける頭の傾きに応じて投影像も傾いてしまうといった事態が回避され、該ユーザに対して、実際の視界状態と一致した３次元像が提示することが可能となる。このことは、観測者に装着されるメガネフレーム１１等の装具に対して、該観測者に観測させるべき像を投影する投影部１３が設けられている形態の場合、特に有用である。
【００６５】
以上の構成によれば、実際の視野と近似した３次元像や実際の視界状態と一致した３次元像を提示することができるようにしたことにより、リアリティ性を向上し得る画像処理装置２０が実現できる。
【００６６】
＜２．他の実施の形態＞
上述の実施の形態では、右眼用画像と左眼用画像との投影像を対応する眼に分離する手段として、液晶シャッターＬＬ，ＬＲが適用された。しかしながら分離手段はこの実施の形態に限定されるものではない。例えばレンチキュラースクリーンなどの適用が可能である。また時分割方式代えて偏光方式が適用される場合、液晶シャッターＬＬ，ＬＲに代えて液晶レンズ（偏光フィルター）などの適用が可能である。
【００６７】
なお、時分割方式では、投影前の右眼用画像及び左眼用画像の輝度値及び傾きが補正されたが、偏光方式では、液晶レンズの偏光方向を調整することで、投影される右眼用画像及び左眼用画像の輝度値及び傾きが補正される。
【００６８】
また上述の実施の形態では、電極１５，１６と電極１７との電位差から視線方向が検出された。しかしながら視線方向の検出手段はこの実施の形態に限定されるものではない。例えば、右眼用画像及び左眼用画像を与えるべきユーザの眼を撮像する撮像部での撮像結果として得られる画像から視線方向が検出されてもよい。画像からの視線方向の検出手法は、具体例には、例えば瞼に挟まれる眼球領域の中心に対する瞳の中心のずれ量に基づいて視線方向を検出する手法などがある。
【００６９】
また上述の実施の形態では、視線方向を検出対象として、「正面」、「上中央」、「下中央」、「右中央」、「左中央」、「右上」、「右下」、「左上」、「左下」の９方向が適用された。しかしながら視線方向を検出対象はこの実施の形態に限らず、様々な数を適用することができる。
【００７０】
また上述の実施の形態では、左電位差及び右電位差の大きさが３段階に分類された。しかしながら大きさを分類すべき段数はこの実施の形態に限らず、様々な段数を適用することができる。
【００７１】
また上述の実施の形態では、視線方向を基準とする範囲の形状が円とされた。しかしながら範囲の形状は円に限らず、様々な形状を適用することができる。
【００７２】
また上述した実施の形態では、左電位差及び右電位差の符号及び大きさと、９方向の視線方向での符号及び大きさを示したテーブルとを比較して視線方向が検出された。しかしながら視線方向の検出手法はこの実施の形態に限らず、例えば、左電位差及び右電位差の符号及び大きさから演算により直接的に視線方向を検出する手法などを適用するようにしてもよい。
【００７３】
また上述の実施の形態では、ユーザに装着可能な装着手段（装具）として、メガネフレーム１１が適用された。しかしながら装着手段はこの実施の形態に限定されるものではない。例えば、ヘアバンド又は帽子など、様々なものを適用することができる。
【００７４】
また上述した実施の形態では、電極を接触させるべき部位として、左眼の左上及び右眼の右下が適用された。しかしながら電極を接触させるべき部位は、上下方向及び左右方向の視線を検出することができるのであれば、左眼の左上及び右眼の右下に限るものではない。また、眼の近傍に接触させるべき電極数は、左右に１つずつとされたが、２以上とされてもよい。
【００７５】
また上述した実施の形態では、映像提示処理を実行するためのプログラムがＲＯＭに格納された。しかしながらプログラムの格納場所はこの実施の形態に限定されるものではない。画像処理装置２０の外部又は内部における様々な記憶媒体が適用可能である。
【産業上の利用可能性】
【００７６】
本発明は、ゲーム産業、医療産業などに利用可能性がある。
【符号の説明】
【００７７】
１……映像提示システム、１０……メガネ、１１……メガネフレーム、１２……ブリッジ部、１３……投影部、１４……ジャイロスコープ、２０……画像処理装置、２１……ＣＰＵ、２２……ＲＯＭ、２３……ＲＡＭ、２４……操作部、２５……インターフェース、３１……映像取得部、３２……同期信号生成部、３３……投影制御部、３４……シャッター制御部、３５……視線検出部、３６……輝度調整部、３７……傾き調整部、ＬＬ，ＬＲ……液晶シャッター。
【技術分野】
【０００１】
本発明は画像処理装置、画像処理方法及びプログラムに関し、例えば３次元像を提示する場合に適用して好適なものである。
【背景技術】
【０００２】
従来、視差を有する右眼用画像と左眼用画像とを、対応する観察者の眼に交互に与えることで、該観察者に対して３次元像を提示するといった技術がある（特許文献１，特許文献２参照）。この技術では、映像内の人物が立体的に見ることができるためリアリティ性が高まる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１０−１１７３６２号公報
【特許文献２】特開２０１０−１９３４０９公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところでゲームに関する映像など、ユーザの視点を画像に見立て表示する場合がある。このような場合に、リアリティ性を向上させる一環として、ユーザの視点を画像に見立てたままで、該ユーザがあたかもその場にいるかのような臨場感を与えるといった要請があった。
【０００５】
本発明は以上の点を考慮してなされたもので、リアリティ性を向上し得る画像処理装置、画像処理方法及びプログラムを提案しようとするものである。
【課題を解決するための手段】
【０００６】
かかる課題を解決するため本発明は、画像処理装置であって、右眼用画像と左眼用画像とを交互に投影する投影手段と、右眼用画像の投影像と左眼用画像の投影像とを分離する分離手段と、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出する視線検出手段と、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整手段とを有する。
【０００７】
また本発明は、画像処理方法であって、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出する視線検出ステップと、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整ステップと、調整される右眼用画像と左眼用画像とを交互に投影する投影ステップと、右眼用画像の投影像と左眼用画像の投影像とを分離する分離ステップとを有する。
【０００８】
また本発明は、プログラムであって、コンピュータに対して、右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出すること、右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整すること、調整される右眼用画像と左眼用画像とを交互に投影すること、右眼用画像の投影像と左眼用画像の投影像とを分離することを実行させる。
【発明の効果】
【０００９】
以上のように本発明によれば、観測者に対して、視線方向を中心として着目領域が制限され、夜などの暗い場所などでの実際の視野と近似した３次元像を提示することが可能となり、この結果、リアリティ性を向上し得る画像処理装置、画像処理方法及びプログラムが実現される。
【図面の簡単な説明】
【００１０】
【図１】映像提示システムの構成を示す概略図である。
【図２】メガネの構成を示す概略図である。
【図３】メガネの装着状態を示す概略図である。
【図４】画像処理装置の構成を示す概略図である。
【図５】ＣＰＵの機能的構成を示す概略図である。
【図６】視線と、電位差の符号及び大きさとの関係を示す概略図である。
【図７】投影像の提示状態例（１）を示す概略図である。
【図８】投影像の提示状態例（２）を示す概略図である。
【図９】映像提示処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１１】
以下、発明を実施するための形態について説明する。なお、説明は以下の順序とする。
＜１．実施の形態＞
＜２．他の実施の形態＞
【００１２】
＜１．実施の形態＞
３次元映像の提示方式は、時分割方式と偏光方式とに大別される。時分割方式は、視差を有する右眼用画像と左眼用画像とを時系列に沿って交互に投影し、左右の眼に割り当てられる液晶シャッターに対する透過タイミングを切り換えて３次元画像を提示させる方式である。
【００１３】
一方、偏光方式は、互いに偏光方向の異なる右眼用画像と左眼用画像とを時系列に沿って交互に投影し、左右の眼に対して偏光方向が異なる状態として割り当てられるレンズを介して３次元映像を提示させる方式である。
【００１４】
実施の形態として、時分割方式を用いた映像提示システムを一例として挙げる。
【００１５】
［１−１．映像提示システムの構成］
図１に示すように、映像提示システム１は、メガネ１０と画像処理装置２０とを含む構成とされる。メガネ１０と画像処理装置２０とは有線又は無線によりデータを授受し得るようになされている。
【００１６】
［１−２．メガネの構成］
メガネ１０は、図２又は図３に示すように、フレーム（以下、これをメガネフレームとも呼ぶ）１１を有し、該メガネフレーム１１の所定位置には、左眼に割り当てるべき液晶シャッターＬＬと、右眼に割り当てるべき液晶シャッターＬＲとが設けられる。
【００１７】
メガネフレーム１１のうち、液晶シャッターＬＬ，ＬＲに介在するブリッジ部１２の上側には投影部１３が取り付けられる。投影部１３は、液晶面と直交する前方向に向けて像を投影する。またブリッジ部ＢＬＰには３軸のジャイロスコープ１４が内蔵される。
【００１８】
メガネフレーム１１のうち、顔面と対向される側には、左眼の左上側部位に接触される電極（以下、これを左上電極とも呼ぶ）１５と、右眼の右下側部位に接触される電極（以下、これを右下電極とも呼ぶ）１６とが設けられる。
【００１９】
左上電極１５が接触されるべき位置として、メガネフレーム１１を装着した装着者の左眉毛の眉尻周辺がより好ましい。一方、右下電極１６が接触されるべき位置として、メガネフレーム１１を装着した装着者の右眼尻下方が好ましい。
【００２０】
またメガネフレーム１１のうち、耳かけ部の内側には、耳付近に接触される電極（以下、これを耳電極とも呼ぶ）１６が設けられる。耳電極１７が接触されるべき位置として、メガネフレーム１１を装着した装着者の右又は左の下方が好ましい。耳朶であればより好ましい。
【００２１】
なお、メガネフレーム１１を装着したユーザの各部位に電極１５〜１７が接触可能であれば、メガネフレーム１１と電極１５〜１７との設置形態は図示した形態に限定されるものではない。
【００２２】
［１−３．画像処理装置の構成］
画像処理装置２０は、図４に示すように、該画像処理装置２０全体の制御を司るＣＰＵ(Central Processing Unit)２１に対して各種ハードウェアを接続することにより構成される。
【００２３】
具体的にはＲＯＭ(Read Only Memory)２２、ＣＰＵ２１のワークメモリとなるＲＡＭ(Random Access Memory)２３、操作部２４及びインターフェース２５などがバス２６を介して接続される。
【００２４】
ＲＯＭ２２には、液晶シャッターＬＬ，ＬＲ、投影部１３、ジャイロスコープ１４及び電極１５〜１７を適宜用いて、３次元像をユーザに提示させるためのプログラムが格納される。
【００２５】
操作部２４は、各種操作子を有し、該操作子に対するユーザの操作に応じた命令をＣＰＵ２１に与えるものである。この命令は、例えば、３次元像に含まれる人又は３次元像自体を奥、手前、左又は右に移動させる、あるいは、３次元像の状態を変更するなど、該３次元像の制御に関する命令である。
【００２６】
インターフェイス２５には、液晶シャッターＬＬ，ＬＲ、投影部１３、ジャイロスコープ１４、電極１５〜１７、記録媒体ＭＲがそれぞれ接続される。記録媒体ＭＲは、例えば、Ｂｌｕ−ｒａｙ（ブルーレイディスクアソシエーション:登録商標）ディスク、ハードディスク又はメモリカードなどである。
【００２７】
［１−４．映像提示処理］
ＣＰＵ２１は、映像を提示すべき命令が与えられた場合、ＲＯＭ２２に格納されたプログラムをＲＡＭ２３に展開する。この場合、ＣＰＵ２１は、図５に示すように、プログラムに基づいて映像取得部３１、同期信号生成部３２、投影制御部３３、シャッター制御部３４、視線検出部３５、輝度調整部３６及び傾き調整部３７として機能し、３次元像をユーザに提示させる処理を実行する。
【００２８】
映像取得部３１は、インターフェイス２５を用いて、記憶媒体ＭＲから有線又は無線の通信路を介して映像データを取得し、これを投影制御部３３に送出する。この映像データは、視差の異なる右眼用画像と左眼用画像と単位として、時系列に沿った複数の画像をもつデータである。
【００２９】
同期信号生成部３２は、同期の制御に関する信号（以下、これを同期信号と呼ぶ）を生成し、これを投影制御部３３、シャッター制御部３４、輝度調整部３６及び傾き調整部３７に送出する。
【００３０】
投影制御部３３は、同期信号生成部３２から与えられる同期信号にしたがって、映像取得部３１から与えられる映像データを構成する複数の右眼用画像と左眼用画像とを、時系列に沿って交互に投影部１３から投影させる。
【００３１】
シャッター制御部３４は、右眼用画像が右眼に与えられ左眼用画像が左眼に与えられるよう、同期信号生成部３２から与えられる同期信号にしたがって、液晶シャッターＬＬ，ＬＲの開閉を交互に切り替える。
【００３２】
視線検出部３５では、耳電極１７を基準とする左上電極１５との電位差および右下電極１６との電位差から、視線方向が検出される。
【００３３】
ここで、左の耳朶に基準電極を配置し、左眼の左上及び右眼の右下に電極を配置し、様々な方向に視線を移動させた際の、各電極と基準電極との電位差、及び電極間の電位差を測定した実験結果を図６に示す。
【００３４】
この測定では、視線を正面から左上、右下、上中央、下中央、右上、左下、右中央、左中央、正面の順に移動させ、それぞれの位置で所定時間だけ視線が停止された。図４に示すように、それぞれの方向で視線が停止している際、左上電極と基準電極との電位差、右下電極と基準電極との電位差、及び左上電極と右下電極との電位差は、視線が停止している方向によって符号及び大きさが異なる。
【００３５】
なお、図６において、視線の移動時にそれぞれの電位差（眼電位に相当）が大きく変化しているのは、視線を移動させているときの筋電位が測定されるためである。筋電位は眼電位に対して約１０００倍の大きさであるため、筋電位と眼電位とは容易に区別がつくものである。
【００３６】
視線検出部３５は、基準とされる耳電極１７と左上電極１５との電位差を増幅するとともに、該耳電極１７と右下電極１６との電位差を増幅し、所定間隔ごとに、増幅した電位差の値と、筋電位とみなすべき最低の値として規定される閾値とを比較する。
【００３７】
耳電極１７と左上電極１５との電位差（以下、これを左電位差とも呼ぶ）及び耳電極１７と右下電極１６（以下、これを右電位差とも呼ぶ）との電位差の値がそれぞれ閾値以上であった場合、視線検出部３５は視線を検出すべきではないものと判断する。
【００３８】
一方、左電位差及び右電位差の値が閾値未満であった場合、視線検出部３５は視線を検出すべきであると判断する。この場合、視線検出部３５は、左電位差及び右電位差の符号及び大きさに対応する視線方向を、テーブルを参照して検出する。
【００３９】
具体的には、例えば、９種類の視線方向を検出対象として設定された３段階の大きさである「大」、「中」及び「小」のいずれであるかがそれぞれ判断され、その判断結果と、図４に示したような９方向の視線方向での符号及び大きさを示したテーブルとが比較される。因みに９方向とは、「正面」、「上中央」、「下中央」、「右中央」、「左中央」、「右上」、「右下」、「左上」、「左下」である。
【００４０】
視線検出部３５は、視線方向を検出した場合、該視線方向を示すデータ（以下、これを視線データとも呼ぶ）を生成し、これを輝度調整部３６に送出する。
【００４１】
輝度調整部３６は、視線検出部３５から視線データが与えられた場合、同期信号生成部３２から与えられる同期信号及び内蔵時計に基づいて、その視線データに示される視線方向が検出された時点に対応する右眼用画像及び左眼用画像を調整対象として認識する。
【００４２】
そして輝度調整部３６は、調整対象として認識した右眼用画像及び左眼用画像に対して視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう、該部分における画素の輝度値を所定値未満の値に変更する。
【００４３】
また輝度調整部３６は、設定した範囲がその中心から徐々に暗くなるよう、該範囲内における画素の輝度値を、中心から離れるほど当該輝度値に対する引き下げ割合を大きく変更する。
【００４４】
この結果、図７に示すように、ユーザに対して、視線方向を中心として着目領域が制限され、夜などの暗い場所などでの実際の視野と近似した３次元像が提示されることとなる。
【００４５】
傾き調整部３７は、メガネフレーム１１が適正に装着された状態におけるジャイロスコープ１４での計測値を基準データとして取得する。この基準データの取得手法には、例えば、予め記憶されたＲＯＭ等などから読み出して取得する手法や、メガネフレーム１１の装着されたことを検出した時点におけるジャイロスコープ１４での計測値を基準データとして生成して取得する手法がある。
【００４６】
傾き調整部３７は、基準データを取得すると、該基準データを、ジャイロスコープ１４から出力される計測値と定期的に比較し、その比較結果から基準面に対する傾き角を検出する。
【００４７】
ここで、検出した傾き角が、傾きがあるものとして設定される最低値以上となる場合、傾き調整部３７は、同期信号生成部３２から与えられる同期信号及び内蔵時計に基づいて、その検出した時点に対応する右眼用画像及び左眼用画像を調整対象として認識する。
【００４８】
そして傾き調整部３７は、調整対象の右眼用画像及び左眼用画像の傾きを、傾き角が所定の角度未満となるよう補正する。
【００４９】
この結果、図８に示すように、メガネフレーム１１を装着するユーザにおける頭の傾きに応じて投影像も傾いてしまうといった事態が回避され、該ユーザに対して、実際の視界状態と一致した３次元像が提示されることとなる。
【００５０】
このようにＣＰＵ２１は、電極１５〜１７及びジャイロスコープ１４を用いて、暗い場所での実際の視野と近似し、かつ実際の視界状態と一致するよう右眼用画像及び左眼用画像を補正した上で、３次元像を提示できるようになされている。
【００５１】
［１−５．３次元像提示処理手順］
次に上述した３次元像提示処理の手順について図９に示すフローチャートを用いて説明する。ＣＰＵ２１は、映像を提示すべき命令が与えられと、３次元像提示処理を開始しステップＳＰ１に進む。
【００５２】
ＣＰＵ２１は、ステップＳＰ１では、電極１５〜１７を用いて視線方向を検出するとともに、ジャイロスコープ１４を用いて基準面に対する傾き角を検出し、ステップＳＰ２に進む。
【００５３】
ＣＰＵ２１は、ステップＳＰ２では、記録媒体ＭＲから、映像データを構成する１組の右眼用画像と左眼用画像を取得し、ステップＳＰ３に進む。
【００５４】
ＣＰＵ２１は、ステップＳＰ３では、ステップＳＰ１で検出した視線方向と、基準面に対する傾き角に基づいて、ステップＳＰ２で取得した右眼用画像と左眼用画像を補正し、ステップＳＰ４に進む。具体的には、右眼用画像と左眼用画像の輝度値が、ステップＳＰ１で検出した視線方向を基準とする所定範囲が可視化されるよう補正され、右眼用画像と左眼用画像の傾きが、ステップＳＰ１で検出した基準面に対する傾き角との差が所定未満となるよう補正される。
【００５５】
ＣＰＵ２１は、ステップＳＰ４では、ステップＳＰ３で補正した右眼用画像と左眼用画像を交互に投影させるとともに、該投影時期に対応させて液晶シャッターＬＬ，ＬＲの開閉を切り替え、ステップＳＰ５に進む。
【００５６】
ＣＰＵ２１は、ステップＳＰ５では、ステップＳＰ１の検出時点から所定の期間が経過したか否かを判定する。この期間が未経過である場合、ＣＰＵ２１は、ステップＳＰ２に戻って、記録媒体ＭＲから、新たな１組の右眼用画像と左眼用画像を取得する。
【００５７】
これに対して、ステップＳＰ１の検出時点から所定の期間が経過した場合、ＣＰＵ２１はステップＳＰ１に戻って、視線方向と、基準面に対する傾き角を再検出する。
【００５８】
このようにしてＣＰＵ２１は、映像の提示を終了すべき命令が当てられるまで、記録媒体ＭＲに記憶される映像データに基づいて３次元像を提示するようになされている。
【００５９】
なお、視線が移動していることなどに起因して、ステップＳＰ１において視線方向が非検出となる場合がある。この場合、ステップＳＰ３では、現取得対象である右眼用画像と左眼用画像の輝度値は、当該画像よりも前に取得された右眼用画像と左眼用画像に対して補正された輝度値と同様に補正される。
【００６０】
また、ステップＳＰ１において基準面に対する傾き角が、傾きがあるものとして設定される最低値未満であった場合、ステップＳＰ３では、現取得対象である右眼用画像と左眼用画像の傾きは、当該画像よりも前に取得された右眼用画像と左眼用画像に対して補正された傾きと同様に補正される。
【００６１】
［１−６．効果等］
以上の構成においてこの画像処理装置２０は、３次元像を提示すべきユーザの視線方向を検出し、該ユーザの右眼に与えられる右眼用画像と、左眼に与えられる左眼用画像とに対して視線方向を基準とする範囲を設定する。そして画像処理装置２０は、設定した範囲外の部分が不可視状態となるよう、該部分における画素の輝度値を調整する。
【００６２】
したがってこの画像処理装置２０は、ユーザに対して、視線方向を中心として着目領域が制限され、夜などの暗い場所などでの実際の視野と近似した３次元像を提示することが可能となる。このことは、ゲームに関する３次元像など、画面をユーザの視界と捉えて３次元像を提示する場合などでは特に有用である。
【００６３】
これに加えてこの画像処理装置２０は、ジャイロスコープでの計測値に基づいて基準面に対する傾き角を検出し、該傾き角が所定の角度未満となるよう右眼用画像及び左眼用画像の傾きを調整する。
【００６４】
したがってこの画像処理装置２０は、メガネフレーム１１を装着するユーザにおける頭の傾きに応じて投影像も傾いてしまうといった事態が回避され、該ユーザに対して、実際の視界状態と一致した３次元像が提示することが可能となる。このことは、観測者に装着されるメガネフレーム１１等の装具に対して、該観測者に観測させるべき像を投影する投影部１３が設けられている形態の場合、特に有用である。
【００６５】
以上の構成によれば、実際の視野と近似した３次元像や実際の視界状態と一致した３次元像を提示することができるようにしたことにより、リアリティ性を向上し得る画像処理装置２０が実現できる。
【００６６】
＜２．他の実施の形態＞
上述の実施の形態では、右眼用画像と左眼用画像との投影像を対応する眼に分離する手段として、液晶シャッターＬＬ，ＬＲが適用された。しかしながら分離手段はこの実施の形態に限定されるものではない。例えばレンチキュラースクリーンなどの適用が可能である。また時分割方式代えて偏光方式が適用される場合、液晶シャッターＬＬ，ＬＲに代えて液晶レンズ（偏光フィルター）などの適用が可能である。
【００６７】
なお、時分割方式では、投影前の右眼用画像及び左眼用画像の輝度値及び傾きが補正されたが、偏光方式では、液晶レンズの偏光方向を調整することで、投影される右眼用画像及び左眼用画像の輝度値及び傾きが補正される。
【００６８】
また上述の実施の形態では、電極１５，１６と電極１７との電位差から視線方向が検出された。しかしながら視線方向の検出手段はこの実施の形態に限定されるものではない。例えば、右眼用画像及び左眼用画像を与えるべきユーザの眼を撮像する撮像部での撮像結果として得られる画像から視線方向が検出されてもよい。画像からの視線方向の検出手法は、具体例には、例えば瞼に挟まれる眼球領域の中心に対する瞳の中心のずれ量に基づいて視線方向を検出する手法などがある。
【００６９】
また上述の実施の形態では、視線方向を検出対象として、「正面」、「上中央」、「下中央」、「右中央」、「左中央」、「右上」、「右下」、「左上」、「左下」の９方向が適用された。しかしながら視線方向を検出対象はこの実施の形態に限らず、様々な数を適用することができる。
【００７０】
また上述の実施の形態では、左電位差及び右電位差の大きさが３段階に分類された。しかしながら大きさを分類すべき段数はこの実施の形態に限らず、様々な段数を適用することができる。
【００７１】
また上述の実施の形態では、視線方向を基準とする範囲の形状が円とされた。しかしながら範囲の形状は円に限らず、様々な形状を適用することができる。
【００７２】
また上述した実施の形態では、左電位差及び右電位差の符号及び大きさと、９方向の視線方向での符号及び大きさを示したテーブルとを比較して視線方向が検出された。しかしながら視線方向の検出手法はこの実施の形態に限らず、例えば、左電位差及び右電位差の符号及び大きさから演算により直接的に視線方向を検出する手法などを適用するようにしてもよい。
【００７３】
また上述の実施の形態では、ユーザに装着可能な装着手段（装具）として、メガネフレーム１１が適用された。しかしながら装着手段はこの実施の形態に限定されるものではない。例えば、ヘアバンド又は帽子など、様々なものを適用することができる。
【００７４】
また上述した実施の形態では、電極を接触させるべき部位として、左眼の左上及び右眼の右下が適用された。しかしながら電極を接触させるべき部位は、上下方向及び左右方向の視線を検出することができるのであれば、左眼の左上及び右眼の右下に限るものではない。また、眼の近傍に接触させるべき電極数は、左右に１つずつとされたが、２以上とされてもよい。
【００７５】
また上述した実施の形態では、映像提示処理を実行するためのプログラムがＲＯＭに格納された。しかしながらプログラムの格納場所はこの実施の形態に限定されるものではない。画像処理装置２０の外部又は内部における様々な記憶媒体が適用可能である。
【産業上の利用可能性】
【００７６】
本発明は、ゲーム産業、医療産業などに利用可能性がある。
【符号の説明】
【００７７】
１……映像提示システム、１０……メガネ、１１……メガネフレーム、１２……ブリッジ部、１３……投影部、１４……ジャイロスコープ、２０……画像処理装置、２１……ＣＰＵ、２２……ＲＯＭ、２３……ＲＡＭ、２４……操作部、２５……インターフェース、３１……映像取得部、３２……同期信号生成部、３３……投影制御部、３４……シャッター制御部、３５……視線検出部、３６……輝度調整部、３７……傾き調整部、ＬＬ，ＬＲ……液晶シャッター。
【特許請求の範囲】
【請求項１】
右眼用画像と左眼用画像とを交互に投影する投影手段と、
右眼用画像の投影像と左眼用画像の投影像とを分離する分離手段と、
上記右眼用画像及び上記左眼用画像を与えるべき観測者の視線方向を検出する視線検出手段と、
上記右眼用画像及び上記左眼用画像に対して上記視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整手段と
を有する画像処理装置。
【請求項２】
上記観測者に装着可能な装着手段と、
上記装着手段に設けられるジャイロスコープと、
上記ジャイロスコープでの計測値に基づいて基準面に対する傾き角を検出し、該傾き角が所定の角度未満となるよう上記右眼用画像及び上記左眼用画像の傾きを調整する傾き調整手段と
をさらに有する請求項１に記載の画像処理装置。
【請求項３】
上記輝度調整手段は、
上記範囲が上記基準から徐々に暗くなるよう、該範囲内における画素の輝度値を調整する
請求項１又は請求項２に記載の画像処理装置。
【請求項４】
上記分離手段は１対の液晶シャッターであり、上記装着手段はメガネフレームであり、
上記投影手段は、上記メガネフレームが装着されるユーザの前方向が投影方向となるよう該装着手段に設けられ、
上記液晶シャッターは、上記メガネフレームが装着されるユーザにおける一方の眼の前方に配されるよう該装着手段に設けられる
請求項２又は請求項３に記載の画像処理装置。
【請求項５】
上記メガネフレームに設けられ、該メガネフレームが装着されるユーザの一方の眼と、他方の眼とで上下方向及び左右方向の異なる位置に配される２つの電極と、
基準とされる電位を測定する基準電極と
をさらに具え、
上記視線検出部は、
上記電極と上記基準電極との電位差から上記ユーザの視線方向を検出する
請求項４に記載の画像処理装置。
【請求項６】
右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出する視線検出ステップと、
上記右眼用画像及び上記左眼用画像に対して上記視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整ステップと、
調整される右眼用画像と左眼用画像とを交互に投影する投影ステップと、
右眼用画像の投影像と左眼用画像の投影像とを分離する分離ステップと
を有する画像処理方法。
【請求項７】
コンピュータに対して、
右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出すること、
上記右眼用画像及び上記左眼用画像に対して上記視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整すること、
調整される右眼用画像と左眼用画像とを交互に投影すること、
右眼用画像の投影像と左眼用画像の投影像とを分離すること
を実行させるプログラム。
【請求項１】
右眼用画像と左眼用画像とを交互に投影する投影手段と、
右眼用画像の投影像と左眼用画像の投影像とを分離する分離手段と、
上記右眼用画像及び上記左眼用画像を与えるべき観測者の視線方向を検出する視線検出手段と、
上記右眼用画像及び上記左眼用画像に対して上記視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整手段と
を有する画像処理装置。
【請求項２】
上記観測者に装着可能な装着手段と、
上記装着手段に設けられるジャイロスコープと、
上記ジャイロスコープでの計測値に基づいて基準面に対する傾き角を検出し、該傾き角が所定の角度未満となるよう上記右眼用画像及び上記左眼用画像の傾きを調整する傾き調整手段と
をさらに有する請求項１に記載の画像処理装置。
【請求項３】
上記輝度調整手段は、
上記範囲が上記基準から徐々に暗くなるよう、該範囲内における画素の輝度値を調整する
請求項１又は請求項２に記載の画像処理装置。
【請求項４】
上記分離手段は１対の液晶シャッターであり、上記装着手段はメガネフレームであり、
上記投影手段は、上記メガネフレームが装着されるユーザの前方向が投影方向となるよう該装着手段に設けられ、
上記液晶シャッターは、上記メガネフレームが装着されるユーザにおける一方の眼の前方に配されるよう該装着手段に設けられる
請求項２又は請求項３に記載の画像処理装置。
【請求項５】
上記メガネフレームに設けられ、該メガネフレームが装着されるユーザの一方の眼と、他方の眼とで上下方向及び左右方向の異なる位置に配される２つの電極と、
基準とされる電位を測定する基準電極と
をさらに具え、
上記視線検出部は、
上記電極と上記基準電極との電位差から上記ユーザの視線方向を検出する
請求項４に記載の画像処理装置。
【請求項６】
右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出する視線検出ステップと、
上記右眼用画像及び上記左眼用画像に対して上記視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整する輝度調整ステップと、
調整される右眼用画像と左眼用画像とを交互に投影する投影ステップと、
右眼用画像の投影像と左眼用画像の投影像とを分離する分離ステップと
を有する画像処理方法。
【請求項７】
コンピュータに対して、
右眼用画像及び左眼用画像を与えるべき観測者の視線方向を検出すること、
上記右眼用画像及び上記左眼用画像に対して上記視線方向を基準とする範囲を設定し、その範囲外の部分が不可視状態となるよう画素の輝度値を調整すること、
調整される右眼用画像と左眼用画像とを交互に投影すること、
右眼用画像の投影像と左眼用画像の投影像とを分離すること
を実行させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−８５１０６（Ｐ２０１２−８５１０６Ａ）
【公開日】平成２４年４月２６日（２０１２．４．２６）
【国際特許分類】
【出願番号】特願２０１０−２２９７７０（Ｐ２０１０−２２９７７０）
【出願日】平成２２年１０月１２日（２０１０．１０．１２）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年４月２６日（２０１２．４．２６）
【国際特許分類】
【出願日】平成２２年１０月１２日（２０１０．１０．１２）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]