観察用光学機器
【課題】画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の単眼内に複数の視差画像を呈示する超多眼表示を行うことが可能な観察用光学機器を提供する。
【解決手段】片方の目に複数の視差画像を入射させる観察用光学機器であって、開口が形成される領域を変更可能な開口形成手段（６）と、前記複数の視差画像を時系列で表示する画像表示手段（１）と前記開口形成手段との同期をとる信号同期手段（４，９，７，８）と、前記信号同期手段からの信号に基づいて、前記開口形成手段の前記開口が形成される領域と該開口の水平方向幅を制御する制御手段（７）と、観察者の視線を検出する視線検出手段（１０〜１２）と、を有し、前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の水平方向幅を制御する。
【解決手段】片方の目に複数の視差画像を入射させる観察用光学機器であって、開口が形成される領域を変更可能な開口形成手段（６）と、前記複数の視差画像を時系列で表示する画像表示手段（１）と前記開口形成手段との同期をとる信号同期手段（４，９，７，８）と、前記信号同期手段からの信号に基づいて、前記開口形成手段の前記開口が形成される領域と該開口の水平方向幅を制御する制御手段（７）と、観察者の視線を検出する視線検出手段（１０〜１２）と、を有し、前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の水平方向幅を制御する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、観察者の視覚疲労が少ない立体像を提供可能な観察用光学機器に関する発明である。
【背景技術】
【０００２】
両眼視差画像を観察者の左右眼に独立に呈示して立体画像を表示する装置は、様々な方式のものが提案されている。このうち観察者の左右眼の眼前に何らかの画像分離用メガネを装着させて観察者に両眼立体視を行わせる方式のものは、一般的に「メガネ式立体表示装置」と呼ばれる。さらに上記の画像分離用メガネの分離方法によっても方式分別され、色情報を利用して左右眼用画像を分離するものは「アナグリフ方式」、偏光を利用して分離するものは「偏光メガネ方式」と呼ばれる。また、時間交互に左右眼領域の透過と遮蔽を高速に切り替え、これと同期して左右眼用画像表示を行うものは「時分割シャッターメガネ方式」と呼ばれる。
【０００３】
特許文献１には上記「時分割シャッターメガネ方式」のうち、「超多眼表示」を実現して視覚疲労を低減する新技術を適用した例が開示されている。「超多眼表示」とは、例えば非特許文献１に示されている表示方法のことである。非特許文献１では、立体像の視差画像の視差間隔を観察者の単眼内に複数の視差画像が同時に入射するほどに小さくしていくと、通常の両眼視差を用いた立体視では実現しない「立体像観察時の眼の調節と輻輳の一致」という現象が実現されるとされている。また、この現象により、観察者の視覚疲労が低減する可能性があるとされている。特許文献１では、観察者の単眼内に複数の視差画像を同時に入射させるために、複数の視差画像を高速に切り替える表示部と同期して各メガネ枠内にて時系列的に変位可能なスリットを有する画像分離用メガネを構成している。そして、特許文献１では、この画像分離用メガネを用いて、単眼内に複数の視差画像を呈示する「超多眼表示」を行い、観察者に自然な立体視を行わせる技術を開示している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１‐１９４２９９号公報
【非特許文献】
【０００５】
【非特許文献１】梶木善裕：“超多眼領域を用いた３Ｄディスプレイ”，光技術コンタクト，３６，ｐｐ．６２４‐６３１（１９９８）
【非特許文献２】鈴木謙二：“ＳＬＲカメラの視線入力オートフォーカス”，オプトロニクス、Ｎｏ．８，ｐｐ．１０１−１０５（１９９４）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１の発明において観察者が広画角で画像観察を行えるようにするためには、上述したスリットの変位範囲が眼球の中心視野から周辺視野までをカバーするように構成する必要がある。しかしながら、そのような構成をとるとスリット数が増大し、ひいてはスリット形成に同期して観察者に呈示すべき視差画像数も増大してしまう。上述した「超多眼表示」を行うためには、上記のスリット形成と視差画像呈示の一連の動作は観察者の残像許容時間内に完了させる必要がある。したがって、観察者に呈示すべき視差画像数が増大すると、その分視差画像を呈示する表示部はより高速フレームレートでの画像切り替え表示が要求されるようになる。例えばスリット数が片眼あたり１０、両眼あわせて２０となる場合、表示部に要求されるフレームレートは通常ディスプレイの２０倍となる。このような高速表示ディスプレイを用意することは容易ではない。
【０００７】
そこで、本発明は、画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の単眼内に複数の視差画像を呈示する超多眼表示を行うことが可能な観察用光学機器を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の一側面としての観察光学用光学機器は、片方の目に複数の視差画像を入射させる観察用光学機器であって、開口が形成される領域を変更可能な開口形成手段と、前記複数の視差画像を時系列で表示する画像表示手段と前記開口形成手段との同期をとる信号同期手段と、前記信号同期手段からの信号に基づいて、前記開口形成手段の前記開口が形成される領域と該開口の水平方向幅を制御する制御手段と、観察者の視線を検出する視線検出手段と、を有し、前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の水平方向幅を制御することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の単眼内に複数の視差画像を呈示する超多眼表示を行うことが可能な観察用光学機器を提供できる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施例１における観察用光学機器の平面図である。
【図２】本発明の実施例１における画像分離用メガネの斜視図である。
【図３】図３（ａ）は、本発明の実施例１における画像分離用メガネの空間変調器上に形成される開口の正面図である。図３（ｂ）は、本発明の実施例１における画像分離用メガネの空間変調器上に形成される開口の位置が時系列的に変化していく様子を示す図である。
【図４】図４（ａ）は、図３（ｂ）の各開口の位置における可視光透過率を表すグラフである。図４（ｂ）は、本発明の画像表示部上の画像表示タイミングを表すグラフである。
【図５】視差画像取得方法を説明するための図である。
【図６】図６（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が領域２の開口を通して視差画像２を観察する様子を示す図である。図６（ｂ）は、本発明の実施例１における画像分離用メガネを用いて観察者が領域３の開口を通して視差画像３を観察する様子を示す図である。
【図７】図７（ａ）は、画像分離用メガネの空間変調器上に形成される開口の幅がすべて小さい幅に統一された場合の光束指向性との関係を示す図である。図７（ｂ）は、画像分離用メガネの空間変調器上に形成される開口の幅がすべて大きい幅に統一された場合の光束指向性との関係を示す図である。
【図８】画像分離用メガネの空間変調器上の開口の幅がすべて小さい幅に統一された場合の正面図である。
【図９】図９（ａ）は、観察者の瞳が正面を向いているときの視線を検出している様子を表す図である。図９（ｂ）は、観察者の瞳が正面以外の方向を向いているときの視線を検出している様子を表す図である。
【図１０】本発明のキャリブレーションモードでの呈示画像の一例を示す図である。
【図１１】図１１（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が表示画像の中心点を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１１（ｂ）は、図１１（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。
【図１２】図１２（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が表示画像の周辺領域を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１２（ｂ）は、図１２（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。
【図１３】図１３（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が表示画像の中心点を注視している状態と開口の状態が観察者の視線に追従している場合の視差画像光が瞳に入射する様子を示す図である。図１３（ｂ）は、観察者が表示画像の周辺領域に視線を移したときに、開口の状態が観察者の視線に追従しなかった場合の視差画像光が瞳に入射する様子を示す図である。図１３（ｃ）は、観察者が表示画像の周辺領域に視線を移したときに、開口の状態が観察者の視線に追従した場合の視差画像光が瞳に入射する様子を示す図である。
【図１４】図１４（ａ）は、本発明の実施例２における画像分離用メガネを用いて観察者が表示画像の中心点を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１４（ｂ）は、図１４（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。
【図１５】図１５（ａ）は、本発明の実施例２における画像分離用メガネを用いて観察者が表示画像の周辺領域を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１５（ｂ）は、図１５（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。図１５（ｃ）は、図１４（ａ）において観察者が表示画像の周辺領域に視線を移したときに、開口の状態が観察者の視線に追従しなかった場合の視差画像光が瞳に入射する様子を示す図である。
【発明を実施するための形態】
【００１１】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。
【実施例１】
【００１２】
図１は本発明を適用した観察用光学機器の第１実施例の平面図である。本装置は主要な構成として画像表示部１（画像表示手段）と画像分離用メガネ５とを有している。画像表示部１は画像表示部制御手段３に接続され、そこから送信される画像信号を画像情報光に変換して画面上に表示画像Ｉを表示する。画像表示部１は、後述するように複数の視差画像を時系列で表示することが可能である。画像表示部制御手段３は同期信号発生手段４とも接続されており、同期信号発生手段４が画像表示の同期信号を発生して同期用無線信号発信部９（信号同期手段）から無線の同期信号を発信する。
【００１３】
一方、画像分離用メガネ５は以下のような構成を有している。メガネ装着者（観察者）の眼前にあたる部分に空間変調器６Ｒ，６Ｌ（開口形成手段）を有している。ここでは右眼用の空間変調器を６Ｒ、左眼用の空間変調器を６Ｌと記載している（以下、同様にして右眼用の部品には“Ｒ”、左眼用の部品には“Ｌ”の添字を用いる。）。これらの空間変調器６Ｒ，６Ｌは光を透過する領域（以下、光透過領域、又は、開口とも呼ぶ。）と非透過の領域とを入力される電気信号に応じて制御することが可能で、空間変調器駆動部７Ｒ，７Ｌ（制御手段）によって駆動される。空間変調器６Ｒ，６Ｌは、この空間変調器駆動部７Ｒ，７Ｌにより駆動されることで、開口が形成される領域を変更可能である。
【００１４】
また、同期用無線信号受信部８（信号同期手段）を有しているので、前述した同期用無線信号発信部９から発せられる画像表示の同期無線信号を受信することができ、この信号を使用して空間変調器６Ｒ，６Ｌの同期駆動を行うことができる。この同期駆動について、図２〜４を用いて説明する。
【００１５】
図２は画像分離用メガネ５において空間変調器６Ｒ上に形成される光透過領域の様子を示している。開口ＳＬ−６Ｒは水平方向に狭く縦方向に長いスリット形状となっており、開口ＳＬ−６Ｒ以外の領域は光を遮断する構造となっている。開口ＳＬ−６Ｒは前述の同期無線信号に同期して時系列的にその形成位置を変化させていく。
【００１６】
図３（ａ）は開口形成領域を正面から観察した図である。空間変調器６Ｒ、６Ｌは複数の位置にスリット開口を形成することができるが、本実施例においてはそのうち、左右４つずつの開口形成領域を形成しており、時刻ｔの経過に応じて左右合計８つのうち１つの領域のみが透過状態となるよう制御される。
【００１７】
１つの開口形成時間をΔとするとき、図３（ａ）の領域１〜８が順次透過状態となっていき、時間８Δで開口形成が一巡する。この様子をさらに詳しく図３（ｂ）を用いて説明する。図３（ｂ）において時刻ｔ＝０〜１Δのとき領域１が透過状態となり、その他の領域は非透過となっている。同様にして時刻ｔ＝１Δ〜２Δのときは領域２のみが、時刻ｔ＝２Δ〜３Δのときは領域３のみが・・・という要領で開口形成動作が時間８Δ周期で繰り返される。各領域の可視光透過率をグラフで表すと図４（ａ）のようになる。グラフ横軸の時刻ｔの変化に伴って、開口形成位置が順次切り替わっていくことが示されている。
【００１８】
なお、空間変調器６Ｒ，６Ｌ上に形成される開口の幅は領域によって異なっている。この効果については後ほど詳しく述べる。ここではまず、開口形成と視差画像表示の同期表示について説明する。
【００１９】
本発明においては上記空間変調器６Ｒ，６Ｌ上での開口形成のタイミングと画像表示部１における画像表示のタイミングを同期させる制御を行っている。図４（ｂ）は画像表示部１上の画像表示タイミングのグラフである。領域１に開口が形成されるときは視差画像１が、領域２に開口が形成されるときは視差画像２が、領域３に開口が形成されるときは視差画像３が・・・という要領で開口位置に対応した視差画像表示が行われる。なお、これら一連の開口形成サイクルはすべて観察者の残像許容時間内（一般に、１／６０秒以内といわれる。）に行われるため観察者は開口の変位を認識することができず、領域１〜４、領域５〜８がそれぞれ大きな開口として認識される。換言すれば、複数の視差画像の時系列的な順次表示の一周期と、開口の時系列的な順次形成の一周期とは、共に観察者の残像許容時間内で行っている。
【００２０】
次に、上記視差画像１〜８の取得方法について説明する。図５は視差画像取得方法の説明図である。良好な立体画像を再生するためには、撮像時の空間と再生時の空間との相対的位置関係を一致させることが望ましい。つまり、撮像空間において、再生したい物体、再生時の画像表示部、観察者の視点の３者の相対的位置関係を仮想的に決めておき、観察者視点位置に撮像カメラを配置して物体を撮像する。その後、再生時の画像表示部の画面範囲でトリミングを行えば、適切な視差画像を取得することができる。
【００２１】
図５で示す撮像空間においては仮想的な立体画像表示部位置を図中１’の位置に、仮想的な観察者視点位置をＲ１、Ｒ２、Ｒ３、Ｒ４、Ｌ１、Ｌ２、Ｌ３、Ｌ４に定めている。このとき、観察者視点Ｒ１〜４、Ｌ１〜４はそれぞれ、画像再生時の空間変調器６Ｒ、６Ｌの開口形成領域１〜８の中心点と対応している。
【００２２】
したがって、前述した視差画像１〜８を取得するには上記観察者視点Ｒ１〜４、Ｌ１〜４に撮像カメラ３１を配置して、それぞれの視点位置から物体３２を撮像すればよい。ただし、再生時に画像表示部１の画面上に表示する画像範囲は、撮像時の仮想的な画像表示部１’の画面領域と一致していることが望ましいので、各視差画像を図中のクロスハッチング部で示された空間との共通領域に限定するトリミングをおこなうとよい。
【００２３】
このようにして得られた８つの視差画像をそれぞれに対応する視点位置から独立に観察すれば観察者は立体視を行うことができる。図６はこの様子を説明する本装置の平面図である。図６（ａ）は、図３（ｂ）、図４（ａ）、（ｂ）における時刻ｔ＝１Δ〜２Δのときの状態を示している。空間変調器６Ｒ，６Ｌの各領域のうち領域２のみが光透過状態となっており観察者はこの領域２の開口を通して表示画像Ｉを観察できるが、このとき表示画像Ｉには領域２の中心点Ｒ２を視点として取得した視差画像２が表示される。同様にして、時刻ｔ＝２Δ〜３Δのときには図６（ｂ）に示すように領域３のみが光透過状態となっており、観察者はこの領域３の開口を通して領域３の中心点Ｒ３を視点として取得した視差画像３を観察する。上記の所作を繰り返すと、観察者は領域１〜８の開口を通して、視差画像１〜８をそれぞれ独立に観察することができる。
【００２４】
このとき例えば視差画像１〜４は右眼に呈示され視差画像５〜８は左眼に呈示されることになるが、このうち右眼用視差画像１枚と左眼用視差画像１枚のペア、例えば視差画像２と視差画像６を観察することで観察者は両眼視差による立体視を行うことができる。
【００２５】
さらに視差画像１〜４はいずれも観察者の右眼のみに、視差画像５〜８はいずれも観察者の左眼のみにほぼ同時に表示されており、先に述べた単眼内視差呈示による「超多眼表示」の状態が達成されることになる。その結果「立体像観察時の眼の調節と輻輳の一致」という現象が実現して観察者の視覚疲労が低減するという効果が生まれる。
【００２６】
次に空間変調器６Ｒ、６Ｌ上に形成される開口の幅と「超多眼表示」の効果の関係について図７を用いて説明する。図７（ａ）と図７（ｂ）は、それぞれ本実施例の構成において、空間変調器６上に形成する開口の幅が小さい場合と大きい場合の観察者の単眼に入射する光束の状態を示した図である。
【００２７】
図７（ａ）において表示画像Ｉ上に画素Ａが表示されているときは開口Ａが、画素Ｂが表示されているときは開口Ｂが形成される。各開口の幅は画素と同程度に小さく設定されているため、開口を通して観察者の単眼に入射する光束（図中、網掛けで表示）はいずれも指向性の高い光束となっている。上記の開口形成と画像表示は観察者の残像許容時間内にすべて完了するので、観察者からは指向性の高い２本の光束が同時に片眼に入射するように見える。このとき、２つの光束は図中の交点（１）の位置で交わっているが、光束の指向性が高いため交点（１）の断面積は画素Ａ、画素Ｂの面積とほとんど変わらない。つまり観察者はこの光束の光源面がどこであるかを特定しにくい状態となっている。この状態で観察者が眼の水晶体２２を調節して眼のピントを変化させると、画像表示面Ｐｉに合焦したときは二重像が観察されるのに対し、交点面Ｐｃに合焦したときは１つの点像として認識される。そのため、観察者の眼の調節は光束の交点面Ｐｃに誘導されるといわれている。
【００２８】
一方、図７（ｂ）のように開口の幅が画素の数倍程度に大きい場合を図７（ａ）と比較して見てみると、各開口を通して観察者の単眼に入射する光束（図中、網掛けで表示）は、図７（ａ）の場合よりもやや指向性の低い、拡散光気味の光束となっている。このとき、２つの光束は図中の交点（２）の位置で交わっているが、光束の指向性が低いため交点（２）の断面積は画素Ａ、画素Ｂの面積よりも大きくなっている。この状態で観察者が眼の水晶体２２を調節して眼のピントを変化させると、画像表示面Ｐｉに合焦したときよりも交点面Ｐｃに合焦したときのほうが光束断面積は大きくなったように認識される。そのため、図７（ａ）の状態と比べて観察者の眼の調節は画像表示面Ｐｉに誘導されやすくなると推測できる。
【００２９】
このように、空間変調器６上に形成する開口の幅が小さい方が、超多眼表示の効果である「立体像観察時の眼の調節と輻輳の一致」状態は、より発生しやすくなると考えられる。
【００３０】
しかしながら、１個の開口の幅をより小さくすると形成すべき開口の数の増加を招く。なぜなら、空間変調器６上の開口形成領域は観察者が表示画像Ｉを観察する画角をカバーするものでなくてはならないため、開口形成可能範囲の面積は不変のまま開口幅が小さくなる分、分割割数が増加することを意味するからである。また、前述したように開口形成サイクル（＝視差画像表示サイクル）は観察者の残像許容時間内に行われるべきなので、もし形成すべき開口の数が増加すると画像表示部１はより高いフレームレートで画像を表示しなくてはならなくなる。
【００３１】
そこで、本実施例では形成される開口の幅を観察者の片眼の「中心視野」では小さく「周辺視野」では大きくなるよう設定して呈示する視差画像数を抑制し、画像表示部１に要求される表示フレームレートを低く抑えている。これは、一般に眼の中心視野ほど空間分解能は高く、眼の視線方向から２度ずれると視力は１／３ほどに低下するといわれているので、「超多眼表示」を行う対象範囲を「中心視野」優先としても問題ないと考えたからである。つまり、立体像の奥行き知覚に最も寄与すると思われる「中心視野」のみ指向性の高い光束を入射させ、「周辺視野」では入射する光束の指向性を低下させるという方法を本実施例では採用している。この方法は、既に図３でも示している。図３に示されるように、観察者左右眼の直前位置に相当する領域２、３、６、７の開口幅は小さく、その周辺部の領域１、４、５、８の開口幅は大きく設定されている。このように、本発明は、空間変調器６の片方の目に対応する領域２、３（６、７）の周辺部の領域１、４（５、８）に形成される開口の水平方向幅が、中心部の領域２、３（６、７）に形成される開口の水平方向幅よりも広い幅を持つ。したがって、本発明は例えば後述する図８に示されるように領域１〜６（７〜１２）に形成される各開口の水平方向幅が物理的に等しい幅を有する構成であっても、空間変調器駆動部７によって開口が狭い幅や広い幅を持つように制御されることでも達成される。つまり、例えば、空間変調器駆動部７は、図８の領域１、２、５、６（７、８、１１、１２）に形成される開口の水平方向幅が領域３、４（９、１０）に形成される開口の水平方向幅よりも広い幅を持つように制御するものであればよい。
【００３２】
上記の本発明のような「不等開口幅」を適用した場合とそうでない場合とで、画像表示部１に要求される性能が大きく異なることを確認しておく。例えば図８のように形成する開口の幅がすべて等しく、片眼あたり６、両眼あわせて１２の開口を形成する場合、画像表示部１に要求されるフレームレートは通常ディスプレイの１２倍となる。通常ディスプレイの表示フレームレートは６０Ｈｚ程度なので、特許文献１の発明を実施するには表示フレームレート７２０Ｈｚのディスプレイデバイスが必要となる。一方、本実施例の場合図３（ａ）に示したように、観察者の画角は図８の場合と同じであるにもかかわらず、形成する開口数が片眼あたり４、両眼あわせて８となっている。したがって、画像表示部１に要求されるフレームレートは通常ディスプレイの８倍で済み、表示フレームレートが４８０Ｈｚ程度のディスプレイデバイスで実現可能となる。つまり「不等開口幅」を適用した場合、そうでない場合と比べて約３３％も要求フレームレートを低減化することが出来た。
【００３３】
次に、本実施例のもう一つの特徴である視線検出機能について説明する。図１において画像分離用メガネ５は装着者の視線を検出するための部品として瞳孔照明手段１０（１０Ｒ，１０Ｌ）と瞳孔画像取得手段１１（１１Ｒ，１１Ｌ）を有している。瞳孔画像取得手段１１Ｒ，１１Ｌで得られた瞳孔画像は視線検出処理部１２Ｒ、１２Ｌに送られ、画像処理によって観察者の視線方向を検出する。本発明では、これら瞳孔照明手段１０、瞳孔画像取得手段１１、視線検出処理部１２が視線検出手段として機能している。視線検出方法については各種方法があるが、ここでは非特許文献２に示されている方法を用いている。瞳孔照明手段１０は水平方向に並んだ２個の赤外ＬＥＤ（発光ダイオード）で構成されている。これらで眼を照明し、その時の瞳孔の様子を瞳孔画像取得手段１１によって撮影する。瞳孔画像取得手段１１は撮像光学系とＣＣＤなどのエリアセンサで構成され、２次元の画像情報として瞳孔画像を取得することができる。
【００３４】
図９（ａ）は眼が正面を向いているときの瞳孔画像、図９（ｂ）は眼が正面以外の方向を向いているときの瞳孔画像を示している。これらの瞳孔画像は視線検出処理部１２に送られ、画像情報から視線方向の情報を抽出するために画像処理される。瞳孔画像には眼の虹彩２１と瞳孔２２が異なる画像濃度で表現されているので、視線検出処理部１２ではまず画像濃度差から瞳孔輪郭を抽出することができる。次に、視線検出処理部１２では赤外ＬＥＤ光源の角膜面反射による虚像である「プルキンエ像」２３を抽出する。こちらも画像濃度差が顕著なので画像処理によって抽出することができる。図９（ａ）と図９（ｂ）を比較してみると、視線方向が変化し眼球が回転した場合に瞳孔２２の位置は変化しているにもかかわらず、プルキンエ像２３の位置は変化しない。したがって、瞳孔２２とプルキンエ像２３との相対的位置関係を求めれば眼球の回転量を導出でき、ひいては視線方向を検出することができる。
【００３５】
ただし、眼球の形状などの個人差により視線方向と眼球回転量の関係も個人によってばらつく。つまり瞳孔２２とプルキンエ像２３との相対的位置関係を視線方向に変換するアルゴリズムは個人毎に変更しなくてはならない。そこで個人毎のキャリブレーションが必要となる。
【００３６】
キャリブレーションは通常の画像表示とは別の動作モードで行う。モードの切り替え（識別）には同期用無線信号を用いるとよい。例えば、キャリブレーション用画像を５種類用意してキャリブレーションを行う場合、通常の同期用無線信号とは変調周波数の異なる５種類の信号を同期用無線信号発信部９から発信する。そして、それを受信した画像分離用メガネ側はそれぞれの「キャリブレーションモード」に移行して専用動作を行う。このように、本実施例では、複数のキャリブレーションモードの識別を信号同期手段８を使って行っている。具体的には、まず空間変調器６Ｒ，６Ｌの開口形成可能な領域すべてが「透過」状態となる。そして画像表示部制御手段３は画面内の右上、右下、左上、左下、中心の５つの位置を注視させる指標画像を画像表示部１に順次表示する。図１０は「左上」を注視させるキャリブレーション用指標画像の例である。観察者には、画面に正対したまま首を動かさずに眼だけを動かして、それらの指標を注視した状態でキャリブレーションボタン１３を押下してもらい、視線検出部１２はそのときの瞳孔２２とプルキンエ像２３との相対的位置関係を順次取得する。視線検出部１２内のＣＰＵはそれらの情報を元に、その観察者用の視線方向変換アルゴリズムを構築して、その後の視線検出動作に活用すればよい。なお、こうした「キャリブレーションモード」は立体映像コンテンツの冒頭部などに設定するとよい。
【００３７】
上記の通り本実施例では観察者の視線方向検出が可能であるが、この視線方向の情報に基づき観察者の視線方向に追従した開口形成を行う方法について図１１及び図１２を用いて説明する。なお、空間変調器６Ｒ，６Ｌはそれぞれ６つの領域に分割され、６ＲはＲａ、Ｒｂ、Ｒｃ、Ｒｄ、Ｒｅ、Ｒｆの６つの領域の光透過／遮蔽を制御できるものとする。また、６ＬはＬａ、Ｌｂ、Ｌｃ、Ｌｄ、Ｌｅ、Ｌｆの６つの領域の光透過／遮蔽を制御できるものとする。図１１（ａ）、図１１（ｂ）は観察者が表示画像Ｉの中心点Ｏを注視している状態を示している。このとき観察者の視線は左右の眼球中心と点Ｏを結ぶ直線（図中の破線）で表現できる。これらの視線と空間変調器６Ｒ、６Ｌとの交点の水平方向位置をＶＸ＿Ｒ、ＶＸ＿Ｌと表すと、ＶＸ＿Ｒ、ＶＸ＿Ｌはこの場合、図１１（ａ）におけるＲｃ領域とＬｄ領域内に存在する。本実施例では、前述したとおり呈示すべき視差画像を８つのみとし、形成する開口数も８と定めている。したがって、「各眼前領域のうち、ＶＸ＿ＲまたはＶＸ＿Ｌからの距離が近い少なくとも２つの領域を幅の小さい開口、それ以外の端部に至る領域を幅の大きい開口として形成する」というアルゴリズムで開口位置の制御を行うことにしている。したがって、この場合は図１１（ａ）のＲｃ、Ｒｄ領域とＬｃ、Ｌｄ領域（第１の領域）には幅の小さい開口（第１の幅の開口）が形成され、その他の領域（第１の領域以外の第２の領域）は幅の広い開口（第１の幅よりも大きい第２の幅の開口）となる。そのため、ＲａとＲｂ領域、ＲｅとＲｆ領域、ＬａとＬｂ領域、ＬｅとＬｆ領域はそれぞれ一つのまとまった幅の広い開口として形成される。上記の要領で形成される開口を正面から見ると、図１１（ｂ）のようになる。
【００３８】
次に観察者が表示画像Ｉの周辺領域の点Ｐを注視したときの本装置の視線追従動作について、図１２を用いて説明する。このとき観察者の視線は左右の眼球中心と点Ｐを結ぶ直線（図１２（ａ）中の破線）で表現できる。これらの視線と空間変調器６Ｒ，６Ｌとの交点の水平方向位置ＶＸ＿Ｒ、ＶＸ＿Ｌはこの場合、図１２（ａ）におけるＲｂ領域とＬｂ領域内に存在する。前述したとおり本実施例では「各眼前領域のうち、ＶＸ＿ＲまたはＶＸ＿Ｌからの距離が近い少なくとも２つの領域を幅の小さい開口、それ以外の端部に至る領域を幅の大きい開口として形成する」というアルゴリズムで開口位置の制御を行うことにしている。ただし、上記の「それ以外の端部に至る領域」が端部に寄っているときは開口幅を広く取ることができないので、幅の狭い開口として形成する。
【００３９】
したがって、この場合は図１２（ａ）のＲａ、Ｒｂ、Ｒｃ領域とＬａ、Ｌｂ、Ｌｃ領域には幅の狭い開口が形成され、その他の領域は幅の広い開口となる。そのため、ＲｄとＲｅとＲｆ領域、ＬｄとＬｅとＬｆ領域がそれぞれ一つのまとまった幅の広い開口として形成される。上記の要領で形成される開口を正面から見ると、図１２（ｂ）のようになる。図１１（ｂ）と比較すると、観察者の視線方向変化に追従して開口形成範囲が変化しているのがわかる。
【００４０】
上記の視線追従動作には「観察者の視線方向が変化しても質の高い超多眼表示状態が維持できる」という効果が存在する。図１３を用いてこのことを説明する。図１３（ａ）において観察者の視線は点Ｏで交差しており、空間変調器上に形成する開口位置は上記視線に正しく追従して配置されている。このとき両眼に入射する視差画像光の方向を図中太線の右矢印で示している。片眼あたり４つの視差画像光が開口を通過するが、観察者が注視している点Ｏ周辺からの光はいずれも観察者の瞳孔に入射するような角度となっている。なぜなら、上記の視線追従動作により開口形成範囲が常に観察者の瞳孔に最も近い位置に配置されるからである。
【００４１】
一方、図１３（ｂ）では比較のために、観察者の視線は点Ｐで交差しているにもかかわらず、空間変調器上に形成する開口位置は図１３（ａ）と同じ状態、つまり視線追従動作を行っていない状態を示している。このとき両眼に入射する視差画像光のうち観察者が注視している点Ｐ周辺からの光には、観察者瞳孔に入射しないものが発生する。特に図１３（ｂ）では右眼には視差画像光１しか入射しない。このことは単眼内に複数の視差画像が入射せず、「超多眼表示状態」を維持できないということを意味する。また、前述したとおり幅の狭い開口からは指向性の高い光束が、幅の広い開口からは指向性の低い光束が入射する。したがって、図１３（ｂ）の状態においては指向性の低い視差画像光１や視差画像光５が観察者の「中心視野」に入射しており、「超多眼表示状態」が比較的発生しにくい条件となってしまっている。
【００４２】
図１３（ｃ）は上記の不具合を解消すべく空間変調器上に形成する開口位置を、点Ｐを注視する観察者の視線に正しく追従して配置した場合を示している。具体的には幅の狭い開口をＲａ、Ｒｂ、Ｒｃ領域とＬａ、Ｌｂ、Ｌｃ領域に形成している。この場合、観察者が注視している点Ｐ周辺からの視差画像光のうち指向性の高い光束はいずれも観察者の「中心視野」に入射するような角度となっている。上記より、本発明において観察者の視線に追従して開口形成範囲を変位させることは、単眼内に複数の視差画像が入射する状態を維持するだけでなく、常に最も効果的に「超多眼表示状態」を発生させる効果があることがわかる。
【実施例２】
【００４３】
次に本発明の第２の実施例について説明する。本実施例においては、上記の発明をさらに拡張して、開口形成領域を右眼と左眼それぞれ２つずつにまで低減化している。本発明は単眼に複数の視差画像を呈示することで超多眼表示効果を狙っているので、呈示画像数が左右それぞれ２つというのは呈示すべき視差画像数の最小値となる。図１４（ａ）、図１４（ｂ）はこの構成例の説明図である。図１４（ａ）は、観察者が表示画像Ｉの中心点Ｏを注視しているときの開口形成の様子を示している。図１４（ｂ）は、形成される開口の様子を正面から見た図であるが、右眼側の開口は領域１、２の２つ、左眼側の開口は領域３、４の２つとなっている。図１４（ａ）に平面図を示す。なお、この２つの開口の水平方向幅の和は開口形成手段６の開口形成可能範囲の全幅に等しくなるよう制御されている。
【００４４】
なお上記の構成の場合、各開口の幅は表示画像Ｉの画素幅に対して大きくなってしまっている。そのため、図７（ａ）と図７（ｂ）で説明した通り観察者単眼に入射する光束の指向性が低くなり、超多眼表示の効果である「立体像観察時の眼の調節と輻輳の一致」状態が、比較的発生しにくくなると推測される。ただし、眼の焦点調節機能は必ずしも光束の断面積のみから合焦判断されるわけではなく、複数呈示された視差画像同士が二重像に見えるか否かという、脳内の視覚画像処理も合焦判断の要因となる。したがって上記のように幅の広い２つの開口で単眼に２つの視差画像を入射させる構成でも、超多眼効果を発生させるのに有効であると考えられる。
【００４５】
本実施例では実施例１で適用している「視線に追従した開口形成制御」を上記の開口数＝２の構成において適用することで、良好な超多眼表示状態を維持するのに役立てている。
【００４６】
図１５はこのことを説明する図である。観察者が表示画像Ｉの中心点Ｏを注視している状態に最適化された開口形成の様子は既に図１４（ａ）と図１４（ｂ）に示したので、ここでは観察者が表示画像Ｉの周辺点Ｐを注視しているときの開口形成の様子を示している。図１５（ａ）においてＶＸ＿Ｒは領域１と領域２の境界と一致するように、ＶＸ＿Ｌは領域３と領域４の境界と一致するように制御されている。このような制御を行えば、観察者の単眼に２つの視差画像光が同時に入射することがわかる。図１５（ｂ）はこのときの開口状態の正面図である。
【００４７】
一方図１５（ｃ）では比較のために、観察者の視線は点Ｐで交差しているにもかかわらず、空間変調器上に形成する開口位置は図１４（ａ）と同じ状態、つまり視線追従動作を行っていない状態を示している。このとき図１５（ｃ）では右眼には視差画像光１、左眼には視差画像光３しか入射しない。このことは単眼内に複数の視差画像が入射せず、「超多眼表示状態」を維持できないということを意味する。つまり、「開口形成領域を右眼と左眼それぞれ２つずつにまで低減化する構成例」において観察者の視線方向が変化しても「超多眼表示状態」を維持するためには、視線に追従した開口形成制御が必要であることがわかる。
【００４８】
これまで述べた実施例１、２の構成によれば、従来技術とは異なる以下の効果が発生する。すなわち、画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の視線方向が変化しても、常に「単眼内に複数視差画像光が入射する状態」つまり「超多眼表示状態」を保つことができる。
【００４９】
以上説明した各実施例は代表的な例にすぎず、本発明の実施に際しては各実施例に対して種々の変形や変更が可能である。
【産業上の利用可能性】
【００５０】
本発明は立体画像を扱うすべての産業分野において利用可能であり、特に立体テレビ、立体映画、医療分野やデザイン分野などの産業用立体画像表示装置、イベントや教育現場での立体コンテンツ上映などへの応用が考えられる。
【符号の説明】
【００５１】
１ 画像表示部
４ 同期信号発生手段
５ 画像分離用メガネ
６ 空間変調器
７ 空間変調器駆動部
８ 同期用無線信号受信部
９ 同期用無線信号発信部
１０ 瞳孔照明手段
１１ 瞳孔画像取得手段
１２ 視線検知処理部
【技術分野】
【０００１】
本発明は、観察者の視覚疲労が少ない立体像を提供可能な観察用光学機器に関する発明である。
【背景技術】
【０００２】
両眼視差画像を観察者の左右眼に独立に呈示して立体画像を表示する装置は、様々な方式のものが提案されている。このうち観察者の左右眼の眼前に何らかの画像分離用メガネを装着させて観察者に両眼立体視を行わせる方式のものは、一般的に「メガネ式立体表示装置」と呼ばれる。さらに上記の画像分離用メガネの分離方法によっても方式分別され、色情報を利用して左右眼用画像を分離するものは「アナグリフ方式」、偏光を利用して分離するものは「偏光メガネ方式」と呼ばれる。また、時間交互に左右眼領域の透過と遮蔽を高速に切り替え、これと同期して左右眼用画像表示を行うものは「時分割シャッターメガネ方式」と呼ばれる。
【０００３】
特許文献１には上記「時分割シャッターメガネ方式」のうち、「超多眼表示」を実現して視覚疲労を低減する新技術を適用した例が開示されている。「超多眼表示」とは、例えば非特許文献１に示されている表示方法のことである。非特許文献１では、立体像の視差画像の視差間隔を観察者の単眼内に複数の視差画像が同時に入射するほどに小さくしていくと、通常の両眼視差を用いた立体視では実現しない「立体像観察時の眼の調節と輻輳の一致」という現象が実現されるとされている。また、この現象により、観察者の視覚疲労が低減する可能性があるとされている。特許文献１では、観察者の単眼内に複数の視差画像を同時に入射させるために、複数の視差画像を高速に切り替える表示部と同期して各メガネ枠内にて時系列的に変位可能なスリットを有する画像分離用メガネを構成している。そして、特許文献１では、この画像分離用メガネを用いて、単眼内に複数の視差画像を呈示する「超多眼表示」を行い、観察者に自然な立体視を行わせる技術を開示している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１‐１９４２９９号公報
【非特許文献】
【０００５】
【非特許文献１】梶木善裕：“超多眼領域を用いた３Ｄディスプレイ”，光技術コンタクト，３６，ｐｐ．６２４‐６３１（１９９８）
【非特許文献２】鈴木謙二：“ＳＬＲカメラの視線入力オートフォーカス”，オプトロニクス、Ｎｏ．８，ｐｐ．１０１−１０５（１９９４）
【発明の概要】
【発明が解決しようとする課題】
【０００６】
特許文献１の発明において観察者が広画角で画像観察を行えるようにするためには、上述したスリットの変位範囲が眼球の中心視野から周辺視野までをカバーするように構成する必要がある。しかしながら、そのような構成をとるとスリット数が増大し、ひいてはスリット形成に同期して観察者に呈示すべき視差画像数も増大してしまう。上述した「超多眼表示」を行うためには、上記のスリット形成と視差画像呈示の一連の動作は観察者の残像許容時間内に完了させる必要がある。したがって、観察者に呈示すべき視差画像数が増大すると、その分視差画像を呈示する表示部はより高速フレームレートでの画像切り替え表示が要求されるようになる。例えばスリット数が片眼あたり１０、両眼あわせて２０となる場合、表示部に要求されるフレームレートは通常ディスプレイの２０倍となる。このような高速表示ディスプレイを用意することは容易ではない。
【０００７】
そこで、本発明は、画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の単眼内に複数の視差画像を呈示する超多眼表示を行うことが可能な観察用光学機器を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の一側面としての観察光学用光学機器は、片方の目に複数の視差画像を入射させる観察用光学機器であって、開口が形成される領域を変更可能な開口形成手段と、前記複数の視差画像を時系列で表示する画像表示手段と前記開口形成手段との同期をとる信号同期手段と、前記信号同期手段からの信号に基づいて、前記開口形成手段の前記開口が形成される領域と該開口の水平方向幅を制御する制御手段と、観察者の視線を検出する視線検出手段と、を有し、前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の水平方向幅を制御することを特徴とする。
【発明の効果】
【０００９】
本発明によれば、画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の単眼内に複数の視差画像を呈示する超多眼表示を行うことが可能な観察用光学機器を提供できる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施例１における観察用光学機器の平面図である。
【図２】本発明の実施例１における画像分離用メガネの斜視図である。
【図３】図３（ａ）は、本発明の実施例１における画像分離用メガネの空間変調器上に形成される開口の正面図である。図３（ｂ）は、本発明の実施例１における画像分離用メガネの空間変調器上に形成される開口の位置が時系列的に変化していく様子を示す図である。
【図４】図４（ａ）は、図３（ｂ）の各開口の位置における可視光透過率を表すグラフである。図４（ｂ）は、本発明の画像表示部上の画像表示タイミングを表すグラフである。
【図５】視差画像取得方法を説明するための図である。
【図６】図６（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が領域２の開口を通して視差画像２を観察する様子を示す図である。図６（ｂ）は、本発明の実施例１における画像分離用メガネを用いて観察者が領域３の開口を通して視差画像３を観察する様子を示す図である。
【図７】図７（ａ）は、画像分離用メガネの空間変調器上に形成される開口の幅がすべて小さい幅に統一された場合の光束指向性との関係を示す図である。図７（ｂ）は、画像分離用メガネの空間変調器上に形成される開口の幅がすべて大きい幅に統一された場合の光束指向性との関係を示す図である。
【図８】画像分離用メガネの空間変調器上の開口の幅がすべて小さい幅に統一された場合の正面図である。
【図９】図９（ａ）は、観察者の瞳が正面を向いているときの視線を検出している様子を表す図である。図９（ｂ）は、観察者の瞳が正面以外の方向を向いているときの視線を検出している様子を表す図である。
【図１０】本発明のキャリブレーションモードでの呈示画像の一例を示す図である。
【図１１】図１１（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が表示画像の中心点を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１１（ｂ）は、図１１（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。
【図１２】図１２（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が表示画像の周辺領域を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１２（ｂ）は、図１２（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。
【図１３】図１３（ａ）は、本発明の実施例１における画像分離用メガネを用いて観察者が表示画像の中心点を注視している状態と開口の状態が観察者の視線に追従している場合の視差画像光が瞳に入射する様子を示す図である。図１３（ｂ）は、観察者が表示画像の周辺領域に視線を移したときに、開口の状態が観察者の視線に追従しなかった場合の視差画像光が瞳に入射する様子を示す図である。図１３（ｃ）は、観察者が表示画像の周辺領域に視線を移したときに、開口の状態が観察者の視線に追従した場合の視差画像光が瞳に入射する様子を示す図である。
【図１４】図１４（ａ）は、本発明の実施例２における画像分離用メガネを用いて観察者が表示画像の中心点を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１４（ｂ）は、図１４（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。
【図１５】図１５（ａ）は、本発明の実施例２における画像分離用メガネを用いて観察者が表示画像の周辺領域を注視している状態とその視線に追従して設けられた開口の状態を示す図である。図１５（ｂ）は、図１５（ａ）における画像分離用メガネの空間変調器上に形成される開口の正面図である。図１５（ｃ）は、図１４（ａ）において観察者が表示画像の周辺領域に視線を移したときに、開口の状態が観察者の視線に追従しなかった場合の視差画像光が瞳に入射する様子を示す図である。
【発明を実施するための形態】
【００１１】
以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。
【実施例１】
【００１２】
図１は本発明を適用した観察用光学機器の第１実施例の平面図である。本装置は主要な構成として画像表示部１（画像表示手段）と画像分離用メガネ５とを有している。画像表示部１は画像表示部制御手段３に接続され、そこから送信される画像信号を画像情報光に変換して画面上に表示画像Ｉを表示する。画像表示部１は、後述するように複数の視差画像を時系列で表示することが可能である。画像表示部制御手段３は同期信号発生手段４とも接続されており、同期信号発生手段４が画像表示の同期信号を発生して同期用無線信号発信部９（信号同期手段）から無線の同期信号を発信する。
【００１３】
一方、画像分離用メガネ５は以下のような構成を有している。メガネ装着者（観察者）の眼前にあたる部分に空間変調器６Ｒ，６Ｌ（開口形成手段）を有している。ここでは右眼用の空間変調器を６Ｒ、左眼用の空間変調器を６Ｌと記載している（以下、同様にして右眼用の部品には“Ｒ”、左眼用の部品には“Ｌ”の添字を用いる。）。これらの空間変調器６Ｒ，６Ｌは光を透過する領域（以下、光透過領域、又は、開口とも呼ぶ。）と非透過の領域とを入力される電気信号に応じて制御することが可能で、空間変調器駆動部７Ｒ，７Ｌ（制御手段）によって駆動される。空間変調器６Ｒ，６Ｌは、この空間変調器駆動部７Ｒ，７Ｌにより駆動されることで、開口が形成される領域を変更可能である。
【００１４】
また、同期用無線信号受信部８（信号同期手段）を有しているので、前述した同期用無線信号発信部９から発せられる画像表示の同期無線信号を受信することができ、この信号を使用して空間変調器６Ｒ，６Ｌの同期駆動を行うことができる。この同期駆動について、図２〜４を用いて説明する。
【００１５】
図２は画像分離用メガネ５において空間変調器６Ｒ上に形成される光透過領域の様子を示している。開口ＳＬ−６Ｒは水平方向に狭く縦方向に長いスリット形状となっており、開口ＳＬ−６Ｒ以外の領域は光を遮断する構造となっている。開口ＳＬ−６Ｒは前述の同期無線信号に同期して時系列的にその形成位置を変化させていく。
【００１６】
図３（ａ）は開口形成領域を正面から観察した図である。空間変調器６Ｒ、６Ｌは複数の位置にスリット開口を形成することができるが、本実施例においてはそのうち、左右４つずつの開口形成領域を形成しており、時刻ｔの経過に応じて左右合計８つのうち１つの領域のみが透過状態となるよう制御される。
【００１７】
１つの開口形成時間をΔとするとき、図３（ａ）の領域１〜８が順次透過状態となっていき、時間８Δで開口形成が一巡する。この様子をさらに詳しく図３（ｂ）を用いて説明する。図３（ｂ）において時刻ｔ＝０〜１Δのとき領域１が透過状態となり、その他の領域は非透過となっている。同様にして時刻ｔ＝１Δ〜２Δのときは領域２のみが、時刻ｔ＝２Δ〜３Δのときは領域３のみが・・・という要領で開口形成動作が時間８Δ周期で繰り返される。各領域の可視光透過率をグラフで表すと図４（ａ）のようになる。グラフ横軸の時刻ｔの変化に伴って、開口形成位置が順次切り替わっていくことが示されている。
【００１８】
なお、空間変調器６Ｒ，６Ｌ上に形成される開口の幅は領域によって異なっている。この効果については後ほど詳しく述べる。ここではまず、開口形成と視差画像表示の同期表示について説明する。
【００１９】
本発明においては上記空間変調器６Ｒ，６Ｌ上での開口形成のタイミングと画像表示部１における画像表示のタイミングを同期させる制御を行っている。図４（ｂ）は画像表示部１上の画像表示タイミングのグラフである。領域１に開口が形成されるときは視差画像１が、領域２に開口が形成されるときは視差画像２が、領域３に開口が形成されるときは視差画像３が・・・という要領で開口位置に対応した視差画像表示が行われる。なお、これら一連の開口形成サイクルはすべて観察者の残像許容時間内（一般に、１／６０秒以内といわれる。）に行われるため観察者は開口の変位を認識することができず、領域１〜４、領域５〜８がそれぞれ大きな開口として認識される。換言すれば、複数の視差画像の時系列的な順次表示の一周期と、開口の時系列的な順次形成の一周期とは、共に観察者の残像許容時間内で行っている。
【００２０】
次に、上記視差画像１〜８の取得方法について説明する。図５は視差画像取得方法の説明図である。良好な立体画像を再生するためには、撮像時の空間と再生時の空間との相対的位置関係を一致させることが望ましい。つまり、撮像空間において、再生したい物体、再生時の画像表示部、観察者の視点の３者の相対的位置関係を仮想的に決めておき、観察者視点位置に撮像カメラを配置して物体を撮像する。その後、再生時の画像表示部の画面範囲でトリミングを行えば、適切な視差画像を取得することができる。
【００２１】
図５で示す撮像空間においては仮想的な立体画像表示部位置を図中１’の位置に、仮想的な観察者視点位置をＲ１、Ｒ２、Ｒ３、Ｒ４、Ｌ１、Ｌ２、Ｌ３、Ｌ４に定めている。このとき、観察者視点Ｒ１〜４、Ｌ１〜４はそれぞれ、画像再生時の空間変調器６Ｒ、６Ｌの開口形成領域１〜８の中心点と対応している。
【００２２】
したがって、前述した視差画像１〜８を取得するには上記観察者視点Ｒ１〜４、Ｌ１〜４に撮像カメラ３１を配置して、それぞれの視点位置から物体３２を撮像すればよい。ただし、再生時に画像表示部１の画面上に表示する画像範囲は、撮像時の仮想的な画像表示部１’の画面領域と一致していることが望ましいので、各視差画像を図中のクロスハッチング部で示された空間との共通領域に限定するトリミングをおこなうとよい。
【００２３】
このようにして得られた８つの視差画像をそれぞれに対応する視点位置から独立に観察すれば観察者は立体視を行うことができる。図６はこの様子を説明する本装置の平面図である。図６（ａ）は、図３（ｂ）、図４（ａ）、（ｂ）における時刻ｔ＝１Δ〜２Δのときの状態を示している。空間変調器６Ｒ，６Ｌの各領域のうち領域２のみが光透過状態となっており観察者はこの領域２の開口を通して表示画像Ｉを観察できるが、このとき表示画像Ｉには領域２の中心点Ｒ２を視点として取得した視差画像２が表示される。同様にして、時刻ｔ＝２Δ〜３Δのときには図６（ｂ）に示すように領域３のみが光透過状態となっており、観察者はこの領域３の開口を通して領域３の中心点Ｒ３を視点として取得した視差画像３を観察する。上記の所作を繰り返すと、観察者は領域１〜８の開口を通して、視差画像１〜８をそれぞれ独立に観察することができる。
【００２４】
このとき例えば視差画像１〜４は右眼に呈示され視差画像５〜８は左眼に呈示されることになるが、このうち右眼用視差画像１枚と左眼用視差画像１枚のペア、例えば視差画像２と視差画像６を観察することで観察者は両眼視差による立体視を行うことができる。
【００２５】
さらに視差画像１〜４はいずれも観察者の右眼のみに、視差画像５〜８はいずれも観察者の左眼のみにほぼ同時に表示されており、先に述べた単眼内視差呈示による「超多眼表示」の状態が達成されることになる。その結果「立体像観察時の眼の調節と輻輳の一致」という現象が実現して観察者の視覚疲労が低減するという効果が生まれる。
【００２６】
次に空間変調器６Ｒ、６Ｌ上に形成される開口の幅と「超多眼表示」の効果の関係について図７を用いて説明する。図７（ａ）と図７（ｂ）は、それぞれ本実施例の構成において、空間変調器６上に形成する開口の幅が小さい場合と大きい場合の観察者の単眼に入射する光束の状態を示した図である。
【００２７】
図７（ａ）において表示画像Ｉ上に画素Ａが表示されているときは開口Ａが、画素Ｂが表示されているときは開口Ｂが形成される。各開口の幅は画素と同程度に小さく設定されているため、開口を通して観察者の単眼に入射する光束（図中、網掛けで表示）はいずれも指向性の高い光束となっている。上記の開口形成と画像表示は観察者の残像許容時間内にすべて完了するので、観察者からは指向性の高い２本の光束が同時に片眼に入射するように見える。このとき、２つの光束は図中の交点（１）の位置で交わっているが、光束の指向性が高いため交点（１）の断面積は画素Ａ、画素Ｂの面積とほとんど変わらない。つまり観察者はこの光束の光源面がどこであるかを特定しにくい状態となっている。この状態で観察者が眼の水晶体２２を調節して眼のピントを変化させると、画像表示面Ｐｉに合焦したときは二重像が観察されるのに対し、交点面Ｐｃに合焦したときは１つの点像として認識される。そのため、観察者の眼の調節は光束の交点面Ｐｃに誘導されるといわれている。
【００２８】
一方、図７（ｂ）のように開口の幅が画素の数倍程度に大きい場合を図７（ａ）と比較して見てみると、各開口を通して観察者の単眼に入射する光束（図中、網掛けで表示）は、図７（ａ）の場合よりもやや指向性の低い、拡散光気味の光束となっている。このとき、２つの光束は図中の交点（２）の位置で交わっているが、光束の指向性が低いため交点（２）の断面積は画素Ａ、画素Ｂの面積よりも大きくなっている。この状態で観察者が眼の水晶体２２を調節して眼のピントを変化させると、画像表示面Ｐｉに合焦したときよりも交点面Ｐｃに合焦したときのほうが光束断面積は大きくなったように認識される。そのため、図７（ａ）の状態と比べて観察者の眼の調節は画像表示面Ｐｉに誘導されやすくなると推測できる。
【００２９】
このように、空間変調器６上に形成する開口の幅が小さい方が、超多眼表示の効果である「立体像観察時の眼の調節と輻輳の一致」状態は、より発生しやすくなると考えられる。
【００３０】
しかしながら、１個の開口の幅をより小さくすると形成すべき開口の数の増加を招く。なぜなら、空間変調器６上の開口形成領域は観察者が表示画像Ｉを観察する画角をカバーするものでなくてはならないため、開口形成可能範囲の面積は不変のまま開口幅が小さくなる分、分割割数が増加することを意味するからである。また、前述したように開口形成サイクル（＝視差画像表示サイクル）は観察者の残像許容時間内に行われるべきなので、もし形成すべき開口の数が増加すると画像表示部１はより高いフレームレートで画像を表示しなくてはならなくなる。
【００３１】
そこで、本実施例では形成される開口の幅を観察者の片眼の「中心視野」では小さく「周辺視野」では大きくなるよう設定して呈示する視差画像数を抑制し、画像表示部１に要求される表示フレームレートを低く抑えている。これは、一般に眼の中心視野ほど空間分解能は高く、眼の視線方向から２度ずれると視力は１／３ほどに低下するといわれているので、「超多眼表示」を行う対象範囲を「中心視野」優先としても問題ないと考えたからである。つまり、立体像の奥行き知覚に最も寄与すると思われる「中心視野」のみ指向性の高い光束を入射させ、「周辺視野」では入射する光束の指向性を低下させるという方法を本実施例では採用している。この方法は、既に図３でも示している。図３に示されるように、観察者左右眼の直前位置に相当する領域２、３、６、７の開口幅は小さく、その周辺部の領域１、４、５、８の開口幅は大きく設定されている。このように、本発明は、空間変調器６の片方の目に対応する領域２、３（６、７）の周辺部の領域１、４（５、８）に形成される開口の水平方向幅が、中心部の領域２、３（６、７）に形成される開口の水平方向幅よりも広い幅を持つ。したがって、本発明は例えば後述する図８に示されるように領域１〜６（７〜１２）に形成される各開口の水平方向幅が物理的に等しい幅を有する構成であっても、空間変調器駆動部７によって開口が狭い幅や広い幅を持つように制御されることでも達成される。つまり、例えば、空間変調器駆動部７は、図８の領域１、２、５、６（７、８、１１、１２）に形成される開口の水平方向幅が領域３、４（９、１０）に形成される開口の水平方向幅よりも広い幅を持つように制御するものであればよい。
【００３２】
上記の本発明のような「不等開口幅」を適用した場合とそうでない場合とで、画像表示部１に要求される性能が大きく異なることを確認しておく。例えば図８のように形成する開口の幅がすべて等しく、片眼あたり６、両眼あわせて１２の開口を形成する場合、画像表示部１に要求されるフレームレートは通常ディスプレイの１２倍となる。通常ディスプレイの表示フレームレートは６０Ｈｚ程度なので、特許文献１の発明を実施するには表示フレームレート７２０Ｈｚのディスプレイデバイスが必要となる。一方、本実施例の場合図３（ａ）に示したように、観察者の画角は図８の場合と同じであるにもかかわらず、形成する開口数が片眼あたり４、両眼あわせて８となっている。したがって、画像表示部１に要求されるフレームレートは通常ディスプレイの８倍で済み、表示フレームレートが４８０Ｈｚ程度のディスプレイデバイスで実現可能となる。つまり「不等開口幅」を適用した場合、そうでない場合と比べて約３３％も要求フレームレートを低減化することが出来た。
【００３３】
次に、本実施例のもう一つの特徴である視線検出機能について説明する。図１において画像分離用メガネ５は装着者の視線を検出するための部品として瞳孔照明手段１０（１０Ｒ，１０Ｌ）と瞳孔画像取得手段１１（１１Ｒ，１１Ｌ）を有している。瞳孔画像取得手段１１Ｒ，１１Ｌで得られた瞳孔画像は視線検出処理部１２Ｒ、１２Ｌに送られ、画像処理によって観察者の視線方向を検出する。本発明では、これら瞳孔照明手段１０、瞳孔画像取得手段１１、視線検出処理部１２が視線検出手段として機能している。視線検出方法については各種方法があるが、ここでは非特許文献２に示されている方法を用いている。瞳孔照明手段１０は水平方向に並んだ２個の赤外ＬＥＤ（発光ダイオード）で構成されている。これらで眼を照明し、その時の瞳孔の様子を瞳孔画像取得手段１１によって撮影する。瞳孔画像取得手段１１は撮像光学系とＣＣＤなどのエリアセンサで構成され、２次元の画像情報として瞳孔画像を取得することができる。
【００３４】
図９（ａ）は眼が正面を向いているときの瞳孔画像、図９（ｂ）は眼が正面以外の方向を向いているときの瞳孔画像を示している。これらの瞳孔画像は視線検出処理部１２に送られ、画像情報から視線方向の情報を抽出するために画像処理される。瞳孔画像には眼の虹彩２１と瞳孔２２が異なる画像濃度で表現されているので、視線検出処理部１２ではまず画像濃度差から瞳孔輪郭を抽出することができる。次に、視線検出処理部１２では赤外ＬＥＤ光源の角膜面反射による虚像である「プルキンエ像」２３を抽出する。こちらも画像濃度差が顕著なので画像処理によって抽出することができる。図９（ａ）と図９（ｂ）を比較してみると、視線方向が変化し眼球が回転した場合に瞳孔２２の位置は変化しているにもかかわらず、プルキンエ像２３の位置は変化しない。したがって、瞳孔２２とプルキンエ像２３との相対的位置関係を求めれば眼球の回転量を導出でき、ひいては視線方向を検出することができる。
【００３５】
ただし、眼球の形状などの個人差により視線方向と眼球回転量の関係も個人によってばらつく。つまり瞳孔２２とプルキンエ像２３との相対的位置関係を視線方向に変換するアルゴリズムは個人毎に変更しなくてはならない。そこで個人毎のキャリブレーションが必要となる。
【００３６】
キャリブレーションは通常の画像表示とは別の動作モードで行う。モードの切り替え（識別）には同期用無線信号を用いるとよい。例えば、キャリブレーション用画像を５種類用意してキャリブレーションを行う場合、通常の同期用無線信号とは変調周波数の異なる５種類の信号を同期用無線信号発信部９から発信する。そして、それを受信した画像分離用メガネ側はそれぞれの「キャリブレーションモード」に移行して専用動作を行う。このように、本実施例では、複数のキャリブレーションモードの識別を信号同期手段８を使って行っている。具体的には、まず空間変調器６Ｒ，６Ｌの開口形成可能な領域すべてが「透過」状態となる。そして画像表示部制御手段３は画面内の右上、右下、左上、左下、中心の５つの位置を注視させる指標画像を画像表示部１に順次表示する。図１０は「左上」を注視させるキャリブレーション用指標画像の例である。観察者には、画面に正対したまま首を動かさずに眼だけを動かして、それらの指標を注視した状態でキャリブレーションボタン１３を押下してもらい、視線検出部１２はそのときの瞳孔２２とプルキンエ像２３との相対的位置関係を順次取得する。視線検出部１２内のＣＰＵはそれらの情報を元に、その観察者用の視線方向変換アルゴリズムを構築して、その後の視線検出動作に活用すればよい。なお、こうした「キャリブレーションモード」は立体映像コンテンツの冒頭部などに設定するとよい。
【００３７】
上記の通り本実施例では観察者の視線方向検出が可能であるが、この視線方向の情報に基づき観察者の視線方向に追従した開口形成を行う方法について図１１及び図１２を用いて説明する。なお、空間変調器６Ｒ，６Ｌはそれぞれ６つの領域に分割され、６ＲはＲａ、Ｒｂ、Ｒｃ、Ｒｄ、Ｒｅ、Ｒｆの６つの領域の光透過／遮蔽を制御できるものとする。また、６ＬはＬａ、Ｌｂ、Ｌｃ、Ｌｄ、Ｌｅ、Ｌｆの６つの領域の光透過／遮蔽を制御できるものとする。図１１（ａ）、図１１（ｂ）は観察者が表示画像Ｉの中心点Ｏを注視している状態を示している。このとき観察者の視線は左右の眼球中心と点Ｏを結ぶ直線（図中の破線）で表現できる。これらの視線と空間変調器６Ｒ、６Ｌとの交点の水平方向位置をＶＸ＿Ｒ、ＶＸ＿Ｌと表すと、ＶＸ＿Ｒ、ＶＸ＿Ｌはこの場合、図１１（ａ）におけるＲｃ領域とＬｄ領域内に存在する。本実施例では、前述したとおり呈示すべき視差画像を８つのみとし、形成する開口数も８と定めている。したがって、「各眼前領域のうち、ＶＸ＿ＲまたはＶＸ＿Ｌからの距離が近い少なくとも２つの領域を幅の小さい開口、それ以外の端部に至る領域を幅の大きい開口として形成する」というアルゴリズムで開口位置の制御を行うことにしている。したがって、この場合は図１１（ａ）のＲｃ、Ｒｄ領域とＬｃ、Ｌｄ領域（第１の領域）には幅の小さい開口（第１の幅の開口）が形成され、その他の領域（第１の領域以外の第２の領域）は幅の広い開口（第１の幅よりも大きい第２の幅の開口）となる。そのため、ＲａとＲｂ領域、ＲｅとＲｆ領域、ＬａとＬｂ領域、ＬｅとＬｆ領域はそれぞれ一つのまとまった幅の広い開口として形成される。上記の要領で形成される開口を正面から見ると、図１１（ｂ）のようになる。
【００３８】
次に観察者が表示画像Ｉの周辺領域の点Ｐを注視したときの本装置の視線追従動作について、図１２を用いて説明する。このとき観察者の視線は左右の眼球中心と点Ｐを結ぶ直線（図１２（ａ）中の破線）で表現できる。これらの視線と空間変調器６Ｒ，６Ｌとの交点の水平方向位置ＶＸ＿Ｒ、ＶＸ＿Ｌはこの場合、図１２（ａ）におけるＲｂ領域とＬｂ領域内に存在する。前述したとおり本実施例では「各眼前領域のうち、ＶＸ＿ＲまたはＶＸ＿Ｌからの距離が近い少なくとも２つの領域を幅の小さい開口、それ以外の端部に至る領域を幅の大きい開口として形成する」というアルゴリズムで開口位置の制御を行うことにしている。ただし、上記の「それ以外の端部に至る領域」が端部に寄っているときは開口幅を広く取ることができないので、幅の狭い開口として形成する。
【００３９】
したがって、この場合は図１２（ａ）のＲａ、Ｒｂ、Ｒｃ領域とＬａ、Ｌｂ、Ｌｃ領域には幅の狭い開口が形成され、その他の領域は幅の広い開口となる。そのため、ＲｄとＲｅとＲｆ領域、ＬｄとＬｅとＬｆ領域がそれぞれ一つのまとまった幅の広い開口として形成される。上記の要領で形成される開口を正面から見ると、図１２（ｂ）のようになる。図１１（ｂ）と比較すると、観察者の視線方向変化に追従して開口形成範囲が変化しているのがわかる。
【００４０】
上記の視線追従動作には「観察者の視線方向が変化しても質の高い超多眼表示状態が維持できる」という効果が存在する。図１３を用いてこのことを説明する。図１３（ａ）において観察者の視線は点Ｏで交差しており、空間変調器上に形成する開口位置は上記視線に正しく追従して配置されている。このとき両眼に入射する視差画像光の方向を図中太線の右矢印で示している。片眼あたり４つの視差画像光が開口を通過するが、観察者が注視している点Ｏ周辺からの光はいずれも観察者の瞳孔に入射するような角度となっている。なぜなら、上記の視線追従動作により開口形成範囲が常に観察者の瞳孔に最も近い位置に配置されるからである。
【００４１】
一方、図１３（ｂ）では比較のために、観察者の視線は点Ｐで交差しているにもかかわらず、空間変調器上に形成する開口位置は図１３（ａ）と同じ状態、つまり視線追従動作を行っていない状態を示している。このとき両眼に入射する視差画像光のうち観察者が注視している点Ｐ周辺からの光には、観察者瞳孔に入射しないものが発生する。特に図１３（ｂ）では右眼には視差画像光１しか入射しない。このことは単眼内に複数の視差画像が入射せず、「超多眼表示状態」を維持できないということを意味する。また、前述したとおり幅の狭い開口からは指向性の高い光束が、幅の広い開口からは指向性の低い光束が入射する。したがって、図１３（ｂ）の状態においては指向性の低い視差画像光１や視差画像光５が観察者の「中心視野」に入射しており、「超多眼表示状態」が比較的発生しにくい条件となってしまっている。
【００４２】
図１３（ｃ）は上記の不具合を解消すべく空間変調器上に形成する開口位置を、点Ｐを注視する観察者の視線に正しく追従して配置した場合を示している。具体的には幅の狭い開口をＲａ、Ｒｂ、Ｒｃ領域とＬａ、Ｌｂ、Ｌｃ領域に形成している。この場合、観察者が注視している点Ｐ周辺からの視差画像光のうち指向性の高い光束はいずれも観察者の「中心視野」に入射するような角度となっている。上記より、本発明において観察者の視線に追従して開口形成範囲を変位させることは、単眼内に複数の視差画像が入射する状態を維持するだけでなく、常に最も効果的に「超多眼表示状態」を発生させる効果があることがわかる。
【実施例２】
【００４３】
次に本発明の第２の実施例について説明する。本実施例においては、上記の発明をさらに拡張して、開口形成領域を右眼と左眼それぞれ２つずつにまで低減化している。本発明は単眼に複数の視差画像を呈示することで超多眼表示効果を狙っているので、呈示画像数が左右それぞれ２つというのは呈示すべき視差画像数の最小値となる。図１４（ａ）、図１４（ｂ）はこの構成例の説明図である。図１４（ａ）は、観察者が表示画像Ｉの中心点Ｏを注視しているときの開口形成の様子を示している。図１４（ｂ）は、形成される開口の様子を正面から見た図であるが、右眼側の開口は領域１、２の２つ、左眼側の開口は領域３、４の２つとなっている。図１４（ａ）に平面図を示す。なお、この２つの開口の水平方向幅の和は開口形成手段６の開口形成可能範囲の全幅に等しくなるよう制御されている。
【００４４】
なお上記の構成の場合、各開口の幅は表示画像Ｉの画素幅に対して大きくなってしまっている。そのため、図７（ａ）と図７（ｂ）で説明した通り観察者単眼に入射する光束の指向性が低くなり、超多眼表示の効果である「立体像観察時の眼の調節と輻輳の一致」状態が、比較的発生しにくくなると推測される。ただし、眼の焦点調節機能は必ずしも光束の断面積のみから合焦判断されるわけではなく、複数呈示された視差画像同士が二重像に見えるか否かという、脳内の視覚画像処理も合焦判断の要因となる。したがって上記のように幅の広い２つの開口で単眼に２つの視差画像を入射させる構成でも、超多眼効果を発生させるのに有効であると考えられる。
【００４５】
本実施例では実施例１で適用している「視線に追従した開口形成制御」を上記の開口数＝２の構成において適用することで、良好な超多眼表示状態を維持するのに役立てている。
【００４６】
図１５はこのことを説明する図である。観察者が表示画像Ｉの中心点Ｏを注視している状態に最適化された開口形成の様子は既に図１４（ａ）と図１４（ｂ）に示したので、ここでは観察者が表示画像Ｉの周辺点Ｐを注視しているときの開口形成の様子を示している。図１５（ａ）においてＶＸ＿Ｒは領域１と領域２の境界と一致するように、ＶＸ＿Ｌは領域３と領域４の境界と一致するように制御されている。このような制御を行えば、観察者の単眼に２つの視差画像光が同時に入射することがわかる。図１５（ｂ）はこのときの開口状態の正面図である。
【００４７】
一方図１５（ｃ）では比較のために、観察者の視線は点Ｐで交差しているにもかかわらず、空間変調器上に形成する開口位置は図１４（ａ）と同じ状態、つまり視線追従動作を行っていない状態を示している。このとき図１５（ｃ）では右眼には視差画像光１、左眼には視差画像光３しか入射しない。このことは単眼内に複数の視差画像が入射せず、「超多眼表示状態」を維持できないということを意味する。つまり、「開口形成領域を右眼と左眼それぞれ２つずつにまで低減化する構成例」において観察者の視線方向が変化しても「超多眼表示状態」を維持するためには、視線に追従した開口形成制御が必要であることがわかる。
【００４８】
これまで述べた実施例１、２の構成によれば、従来技術とは異なる以下の効果が発生する。すなわち、画像表示部に要求されるフレームレートを抑制するとともに、広画角化を達成し、観察者の視線方向が変化しても、常に「単眼内に複数視差画像光が入射する状態」つまり「超多眼表示状態」を保つことができる。
【００４９】
以上説明した各実施例は代表的な例にすぎず、本発明の実施に際しては各実施例に対して種々の変形や変更が可能である。
【産業上の利用可能性】
【００５０】
本発明は立体画像を扱うすべての産業分野において利用可能であり、特に立体テレビ、立体映画、医療分野やデザイン分野などの産業用立体画像表示装置、イベントや教育現場での立体コンテンツ上映などへの応用が考えられる。
【符号の説明】
【００５１】
１ 画像表示部
４ 同期信号発生手段
５ 画像分離用メガネ
６ 空間変調器
７ 空間変調器駆動部
８ 同期用無線信号受信部
９ 同期用無線信号発信部
１０ 瞳孔照明手段
１１ 瞳孔画像取得手段
１２ 視線検知処理部
【特許請求の範囲】
【請求項１】
片方の目に複数の視差画像を入射させる観察用光学機器であって、
開口が形成される領域を変更可能な開口形成手段と、
前記複数の視差画像を時系列で表示する画像表示手段と前記開口形成手段との同期をとる信号同期手段と、
前記信号同期手段からの信号に基づいて、前記開口形成手段の前記開口が形成される領域と該開口の水平方向幅を制御する制御手段と、
観察者の視線を検出する視線検出手段と、を有し、
前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の水平方向幅を制御することを特徴とする観察用光学機器。
【請求項２】
前記制御手段は、前記視線検出手段により検出された前記視線と前記開口形成手段との交点を含む第１の領域の前記開口の水平方向幅を第１の幅に制御し、前記第１の領域以外の第２の領域の前記開口の水平方向の幅を前記第１の幅よりも大きい第２の幅に制御することを特徴とする請求項１に記載の観察用光学機器。
【請求項３】
前記制御手段は、前記開口形成手段に形成される開口の数を２つに制御し、前記視線検出手段により検出された視線と前記開口形成手段との交点を該２つの開口の境界と一致するように前記開口の水平方向幅を制御することを特徴とする請求項１に記載の観察用光学機器。
【請求項４】
前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の形成位置を制御することを特徴とする請求項１乃至３のいずれか１項に記載の観察用光学機器。
【請求項５】
前記制御手段は、前記第１の幅を前記画像表示手段に表示される前記複数の視差画像の画素の水平方向幅と同じ幅に設定することを特徴とする請求項２に記載の観察用光学機器。
【請求項６】
前記制御手段は、前記２つの開口の水平方向幅の和は前記開口形成手段の開口形成可能範囲の全幅に等しくなるよう制御することを特徴とする請求項３に記載の観察用光学機器。
【請求項７】
前記複数の視差画像の時系列的な順次表示の一周期と、前記開口の時系列的な順次形成の一周期とは、共に１／６０秒以内であることを特徴とする請求項１乃至６のいずれか１項に記載の観察用光学機器。
【請求項８】
前記視線検出手段は、観察者の眼球回転量を視線方向に変換するためのアルゴリズムを導出するための動作モードとして複数のキャリブレーションモードを有し、
前記信号同期手段は、該複数のキャリブレーションモードの識別を行うことを特徴とする請求項１乃至７のいずれか１項に記載の観察用光学機器。
【請求項１】
片方の目に複数の視差画像を入射させる観察用光学機器であって、
開口が形成される領域を変更可能な開口形成手段と、
前記複数の視差画像を時系列で表示する画像表示手段と前記開口形成手段との同期をとる信号同期手段と、
前記信号同期手段からの信号に基づいて、前記開口形成手段の前記開口が形成される領域と該開口の水平方向幅を制御する制御手段と、
観察者の視線を検出する視線検出手段と、を有し、
前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の水平方向幅を制御することを特徴とする観察用光学機器。
【請求項２】
前記制御手段は、前記視線検出手段により検出された前記視線と前記開口形成手段との交点を含む第１の領域の前記開口の水平方向幅を第１の幅に制御し、前記第１の領域以外の第２の領域の前記開口の水平方向の幅を前記第１の幅よりも大きい第２の幅に制御することを特徴とする請求項１に記載の観察用光学機器。
【請求項３】
前記制御手段は、前記開口形成手段に形成される開口の数を２つに制御し、前記視線検出手段により検出された視線と前記開口形成手段との交点を該２つの開口の境界と一致するように前記開口の水平方向幅を制御することを特徴とする請求項１に記載の観察用光学機器。
【請求項４】
前記制御手段は、前記視線検出手段により検出された結果に応じて、前記開口の形成位置を制御することを特徴とする請求項１乃至３のいずれか１項に記載の観察用光学機器。
【請求項５】
前記制御手段は、前記第１の幅を前記画像表示手段に表示される前記複数の視差画像の画素の水平方向幅と同じ幅に設定することを特徴とする請求項２に記載の観察用光学機器。
【請求項６】
前記制御手段は、前記２つの開口の水平方向幅の和は前記開口形成手段の開口形成可能範囲の全幅に等しくなるよう制御することを特徴とする請求項３に記載の観察用光学機器。
【請求項７】
前記複数の視差画像の時系列的な順次表示の一周期と、前記開口の時系列的な順次形成の一周期とは、共に１／６０秒以内であることを特徴とする請求項１乃至６のいずれか１項に記載の観察用光学機器。
【請求項８】
前記視線検出手段は、観察者の眼球回転量を視線方向に変換するためのアルゴリズムを導出するための動作モードとして複数のキャリブレーションモードを有し、
前記信号同期手段は、該複数のキャリブレーションモードの識別を行うことを特徴とする請求項１乃至７のいずれか１項に記載の観察用光学機器。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１４】
【図１５】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１４】
【図１５】
【図１１】
【図１２】
【図１３】
【公開番号】特開２０１３−２４９１０（Ｐ２０１３−２４９１０Ａ）
【公開日】平成２５年２月４日（２０１３．２．４）
【国際特許分類】
【出願番号】特願２０１１−１５６５６６（Ｐ２０１１−１５６５６６）
【出願日】平成２３年７月１５日（２０１１．７．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２５年２月４日（２０１３．２．４）
【国際特許分類】
【出願日】平成２３年７月１５日（２０１１．７．１５）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]