情報処理システム、情報処理装置及び方法、並びにプログラム
【課題】別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示することが実現可能になる。
【解決手段】網膜表示画像生成部６４は、右目用画像及び左目用画像の各データに基づいて、右目用画像及び左目用画像の各々のネガ画像のデータを生成する。通常表示制御部６２は、右目用画像と左目用画像とを通常表示装置１１の表示部２１に交互に表示させる。網膜表示装置１２は、右目用画像が表示部２１に表示されているときには、右目用画像のネガ画像を網膜表示装置１２からユーザの左目の網膜に直接表示させ、左目用画像が表示部２１に表示されているときには、左目用画像のネガ画像を網膜表示装置１２からユーザの右目の網膜に直接表示させる。
【解決手段】網膜表示画像生成部６４は、右目用画像及び左目用画像の各データに基づいて、右目用画像及び左目用画像の各々のネガ画像のデータを生成する。通常表示制御部６２は、右目用画像と左目用画像とを通常表示装置１１の表示部２１に交互に表示させる。網膜表示装置１２は、右目用画像が表示部２１に表示されているときには、右目用画像のネガ画像を網膜表示装置１２からユーザの左目の網膜に直接表示させ、左目用画像が表示部２１に表示されているときには、左目用画像のネガ画像を網膜表示装置１２からユーザの右目の網膜に直接表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理システム、情報処理装置及び方法、並びにプログラムに関し、特に、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示できる技術に関する。
【背景技術】
【０００２】
従来より、立体画像（3-Dimensional Picture、以下、「３Ｄ画像」とも呼ぶ）を表示可能な表示装置の需要が高まりつつある。
ここで、従来型の表示装置、例えばCRT（Cathode Ray Tub）や液晶型表示装置等、各画素を発光することで画像を表示する表示装置を、以下、「通常表示装置」と呼ぶ。
このような通常表示装置を用いて３Ｄ画像を表示する従来の技術として、左目用画像と右目用画像とを交互に表示する液晶ディスプレイと、液晶ディスプレイの交互表示に同期して左右の切り替えが可能なシャッタ眼鏡と、により３Ｄ画像の表示を実現する技術が存在する（特許文献１参照）。
しかしながら、特許文献１に記載の技術では、３Ｄ画像を見るためだけに、ユーザはわざわざ眼鏡をかけなければならないという煩わしさが生じていた。
このため、近年、別途眼鏡を必要とせずに、表示精度が高い３Ｄ画像を表示できる技術の研究開発が進んでいる。
【０００３】
別途眼鏡を必要としない３Ｄ画像の表示を実現可能にし得る技術の１つとして、人間の目の瞳孔に向けてレーザビームを照射し、網膜に直接ラスタ走査を行う技術が存在する（特許文献２参照）。
このように、網膜に直接ラスタ走査して画像を表示する装置を、以下「網膜表示装置」と呼ぶ。即ち、特許文献２には、網膜表示装置が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２４３７０５号公報
【特許文献２】特開平８−２０５０５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献２に記載の技術をそのまま適用しても、離れた場所から小さな瞳孔を通して網膜にラスタ走査するので、網膜上で走査可能な領域はそれほど広く取れず、従って、視野全体の小さな部分にしか結像することができない。
即ち、ユーザにとっては、狭い視野（小画面の通常表示装置と等価な小さな空間サイズ）でしか３Ｄ画像を鑑賞することができない。
これでは、別途眼鏡が必要となる点を考慮したとしても、広い視野で迫力ある３Ｄ画像を鑑賞可能な大画面の通常表示装置に太刀打ちすることはできない。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示可能にすることを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一態様によると、
画像を表示する第１表示装置と、
ユーザの網膜上に画像を結像させて前記画像を表示させる第２表示装置と、
前記第１表示装置及び前記第２表示装置を制御する表示制御装置と、
を備える情報処理システムであって、
前記表示制御装置は、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成し、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させ、
前記右目用画像を前記第１表示装置に表示させているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、
前記左目用画像を前記第１表示装置に表示させているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる、
制御を実行することを特徴とする画像処理システムを提供する。
【０００８】
本発明の別の態様によると、上述した本発明の一態様に係る情報処理システムの表示制御装置に対応する情報処理装置を提供し、さらに、当該情報処理装置に対応する方法及びプログラムを提供する。
【発明の効果】
【０００９】
本発明によれば、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示することが実現可能になる。
【図面の簡単な説明】
【００１０】
【図１】本発明の情報処理システムの一実施形態に係る画像処理システムの外観構成例を示す側面図である。
【図２】図１の画像処理システムの機能的構成を示す機能ブロック図である。
【図３】図２の画像処理システムのうち網膜表示装置の外観構成を示す斜視図である。
【図４】図３の網膜表示装置の視線追尾部の外観構成を示す斜視図である。
【図５】図３の網膜表示装置のビーム出力部の断面図である。
【図６】図２の画像処理システムのうち、通常表示装置に表示される通常画像（ポジ画像）と、網膜表示装置からユーザの両眼の中心視野に直接表示される網膜画像（ネガ画像）と、の表示の関係を示す図である。
【図７】図２の画像処理システムによって表示される、ポジ画像とネガ画像との関係を示す図である。
【図８】図５の画像処理システムが実行する動画像再生処理の流れの一例を説明するフローチャートである。
【図９】図５の画像表示処理のうち、再生処理の詳細な流れの一例を説明するフローチャートである。
【図１０】図９の再生処理のうち、３Ｄ表示処理の詳細な流れにの一例を説明するフローチャートである。
【図１１】図２の画像処理システムのうち、画像表示制御装置のハードウェア構成を示すブロック図である。
【発明を実施するための形態】
【００１１】
以下、本発明の一実施形態を図面に基づいて説明する。
【００１２】
図１は、本発明の情報処理システムの一実施形態に係る画像処理システムの外観構成例を示す側面図である。
【００１３】
図１に示すように、画像処理システム１は、通常表示装置１１と、網膜表示装置１２と、画像表示制御装置１３と、を備えている。
通常表示装置１１は、例えば４２インチ以上の表示領域を有する表示部２１を備えている。
網膜表示装置１２は、通常表示装置１１の上方に配置され、画像表示制御装置１３は、通常表示装置１１の背面に配置されている。
【００１４】
ユーザＵは、通常表示装置１１の表示部２１を注視している。このとき、網膜表示装置１２から、ユーザＵの左右の瞳孔に向かって微弱なレーザビームが照射される。
その結果、表示部２１の表示面を構成する各画素から発光された光束と、網膜表示装置１２からユーザＵの左右の瞳孔に直接照射されたレーザビームとによって、ユーザＵは所定の３Ｄ画像を視認することが可能になる。
【００１５】
即ち、通常表示装置１１と網膜表示装置１２との各々を単体で用いても、３Ｄ画像の表示自体は可能になる。
しかしながら、通常表示装置１１は、視野の広い３Ｄ画像の表示（いわゆる大画面表示）は実現可能という長所を有するが、別途眼鏡を必要としな３Ｄ画像の表示の実現は困難であるという欠点を有する。一方で、網膜表示装置１２は、別途眼鏡を必要としな３Ｄ画像の表示は実現可能であるという長所を有するが、視野の広い３Ｄ画像の表示（いわゆる大画面表示）の実現は困難であるという欠点を有する。
このため、通常表示装置１１と網膜表示装置１２との長所を生かし決定を補い合うようにして、３Ｄ画像の表示を実現すべく、画像表示制御装置１３が画像処理システム１に設けられている。
【００１６】
このような通常表示装置１１と網膜表示装置１２との長所を生かし欠点を補い合う組み合わせは、本発明人らが人間の視野の性質を考察することによってはじめて可能になったものである。
即ち、人間は、左右の眼球の網膜全体を用いることにより、左右で180度以上にも及ぶ広い視野を持つ。しかし、人間にとって、鮮明に見えている部分は、網膜の中心領域を用いる狭い範囲の中心視野のみであって、それ以外の周辺視野は常にぼんやりとしか見えていない。
特に、網膜上で最も解像度の高い領域は、直径0.2mmの中心領域に過ぎないといわれている。
それにも係らず、人間が広い視野を鮮明に見ていると感じるのは、無意識のうちに視線を移動させているためである。即ち、人間にとって、ある時点で鮮明に見えているのは視線の向かう注目点の近傍を映す中心視野だけである。しかしながら、人間は、網膜残像と呼ばれる特性を有しているため、当該注目点が広い範囲を次々に移動する結果として、当該範囲全体が鮮明に見えていると感じることができるのである。
【００１７】
それゆえ、次のような機能分担が可能となる。
即ち、網膜表示装置１２の欠点は、換言すると、限られた視野にしか画像を表示できないということである。しかしながら、網膜表示装置１２が中心視野への表示を主に分担するならば、その欠点が問題にならない。
一方、通常表示装置１１の欠点、即ち、別途眼鏡を必要としない３Ｄ画像の表示の実現は困難であるという欠点は、通常表示装置１１が左目用画像と右目用画像とを同時に表示することが実質上できないことに起因する。しかしながら、通常表示装置１１が周辺視野への表示を主に分担するならば、左目用画像と右目用画像とが重なって表示されても、細かい差異は気付かれないので、その欠点が問題にならない。
画像表示制御装置１３は、このような機能分担を制御することにより、通常表示装置１１の長所である視野の広い３Ｄ画像の表示（大画面表示）と、網膜表示装置１２の長所である別途眼鏡を必要としない３Ｄ画像の表示と、を同時に実現する。
即ち、本発明に係る情報処理装置の一実施形態として、画像表示制御装置１３が設けられている。
【００１８】
図２は、このような外観構成を有する画像処理システム１の機能のうち、３Ｄ画像を表示する機能を実現する機能的構成を示す機能ブロック図である。
【００１９】
通常表示装置１１は、上述した表示部２１に加えて、スピーカ等で構成される音声出力部２２を備えている。
網膜表示装置１２は、ビーム出力部３１と、視線追尾部３２と、を備えている。
画像表示制御装置１３は、主制御部５１と、左右画像記憶部５２と、操作部５３と、を備えている。
主制御部５１は、左右画像取得部６１と、通常表示制御部６２と、音声制御部６３と、網膜表示画像生成部６４と、網膜表示制御部６５と、を備えている。
【００２０】
以下、通常表示装置１１については、従来の一般的なものをそのまま流用できるためその説明は省略し、網膜表示装置１２と、画像表示制御装置１３との各々について、その順番で個別に説明していく。
【００２１】
図３は、網膜表示装置１２の外観構成を示す斜視図である。
網膜表示装置１２は、ユーザの左の瞳孔に向かってレーザビームを出射するビーム出力部３１Ｌと、ユーザの右の瞳孔に向かってレーザビームを出射するビーム出力部３１Ｒと、を備えている。
なお、図２に示すビーム出力部３１は、ビーム出力部３１Ｌ，３１Ｒをまとめたものである。従って、以下、ビーム出力部３１Ｌ，３１Ｒを個々に区別する必要がない場合、これらをまとめたものを、「ビーム出力部３１」と呼ぶ。
【００２２】
図４は、網膜表示装置１２の視線追尾部３２の外観構成を示す斜視図である。
なお、図４に示す視線追尾部３２は、網膜表示装置１２の筺体内に搭載されているため、図３には図示されていない。
図４に示すように、ビーム出力部３１の下部には、視線追尾部３２が接続されている。
視線追尾部３２は、２軸サーボモータを備えており、公知の技術によりユーザの視線を追尾し、ビーム出力部３１の出力方向をユーザの瞳孔に向けるように、当該ビーム出力部３１を駆動する。
視線追尾部３２はまた、通常表示装置１１に表示される画像のうち、ユーザの中心視野に映っている画素の範囲を特定する位置情報を検出する機能を有する。
【００２３】
図５は、網膜表示装置１２のビーム出力部３１の断面図である。
ビーム出力部３１は、レーザビーム光源７１と、水平偏向板７２と、垂直偏向板７３と、収束用レンズ７４と、を備えている。
レーザビーム光源７１は、ユーザの網膜に表示すべき画像（以下、「網膜画像」と呼ぶ）を水平方向と垂直方向にスキャンしたデータに基づいて、各画素値に対応する三原色のレーザビームを発生する。
レーザビーム光源７１から発生されたレーザビームは、水平偏向板７２と垂直偏向板７３とによって水平方向及び垂直方向に偏向され、収束用レンズ７４によって、ユーザの眼球の瞳孔に焦点を結ぶように出射される。
その結果、網膜に到達したレーザビームは、網膜の中心領域の上でラスタ走査されて、その結果、網膜画像がユーザの中心視野に対して直接表示されることになる。
なお、網膜表示装置１２のさらなる詳細については、特許文献１を参照すればよい。
【００２４】
図２に戻り、画像表示制御装置１３において、主制御部５１は、当該画像表示制御装置１３の全体を制御する。主制御部５１を構成する各機能ブロックの説明は後述する。
【００２５】
左右画像記憶部５２は、動画像のデータを記憶する。
ここで、動画像は、所定の時点における静止画像が、時間的に連続して複数枚配置されることによって構成される。動画像のデータの記録や再生の処理は、このような静止画像の少なくとも一部分が処理単位となって実行される。このような動画像に対する画像処理において、処理単位となる画像を、以下、「単位画像」と呼ぶ。例えばフレームやフィールドが単位画像の一例である。そこで、単位画像としてフレームが採用された場合を例として、以下の説明を行う。
ここでは、前提として、フレーム毎に、右目用画像と左目用画像の各データは既に生成されているものとする。
このような動画像を構成する各フレーム（１フレーム分の右目用画像と左目用画像）は、通常表示装置１１の表示部２１に通常に表示されるため、以下「通常画像」と呼ぶ。
【００２６】
操作部５３は、電源釦、モードＳＷ（Ｓｗｉｔｃｈ）釦等各種釦等で構成され、ユーザの指示操作を受け付ける。
【００２７】
さらに、以下、画像表示制御装置１３の機能的構成のうち、特に主制御部５１の機能的構成の詳細について説明する。
【００２８】
左右画像取得部６１は、フレームを単位として、通常画像のデータを左右画像記憶部５２から取得し、通常表示制御部６２及び網膜表示画像生成部６４に供給する。
ここで、網膜表示装置１２のビーム出力部３１からレーザビームとして出力されてユーザの左目又は右目に映る網膜画像は、後述するように、通常画像のネガ画像として生成される。即ち、通常画像と網膜画像との関係は、ポジ画像とネガ画像との関係になる。従って、以下、通常画像をポジ画像と呼ぶこともあるし、同様に網膜画像をネガ画像と呼ぶこともある。
【００２９】
通常表示制御部６２は、左右画像取得部６１から供給された通常画像のデータにより表わされる画像、即ち左目用画像のデータにより表わされる画像（以下、「左通常画像」と呼ぶ）と、右目用画像のデータにより表わされる画像（以下、「右通常画像」と呼ぶ）とを、表示部２１に時分割表示する制御を実行する。
ここで、時分割表示とは、いわゆる１フレーム周期において、前半の期間に例えば左通常画像を表示し、後半の期間に例えば右通常画像を表示することを意味する。
具体的には例えば、左右画像記憶部５２に記録されている動画像のデータの記録レートが、60fps（Frames Per Second）であるものとする。この場合、1/60秒が１フレーム周期になる。従って、１フレーム周期（1/60秒）が２分割され、前半の1/120秒の期間では左通常画像が表示され、後半の1/120秒の期間では右通常画像が表示されることが、時分割表示の一例である。
なお、通常表示制御部６２は、このような時分割表示を実現するために、少なくとも倍速で動画像を表示する機能（上述の例では120fpsの再生レートで動画像を表示する機能）を有しているものとする。
【００３０】
ここで、一般的には、動画像のデータには、対応する音声のデータが付加されている。即ち、左右画像取得部６１は、通常画像のデータを左右画像記憶部５２から取得するとき、当該通常画像に対応する音声のデータも左右画像記憶部５２から取得して、音声制御部６３に供給する。
音声制御部６３は、このようにして左右画像取得部６１からデータとして供給された音声を、通常表示装置１１の音声出力部２２から出力させる制御を実行する。
【００３１】
網膜表示画像生成部６４は、左右画像取得部６１から供給された通常画像のデータに基づいて、網膜画像のデータとして、通常画像のネガ画像のデータを生成する。
具体的には、網膜表示画像生成部６４は、右通常画像のネガ画像をユーザの左目に表示すべき網膜画像として、左通常画像のネガ画像をユーザの右目に表示すべき網膜画像として、それぞれのデータを生成する。ここで、左右の目と、左右のネガ画像とは左右が交叉した関係になっている点に注意すべきである。
なお、ネガ画像とは、通常画像（ポジ画像）の各画素の色に対して、補色の関係にある色を対応する画素に割り当てた画像であって、ポジ画像とネガ画像とを網膜上で重ねると、重ねた部分が白として視認される画像をいう。
ただし、本実施形態では、ネガ画像の有効画素の範囲は、ネガ画像を表示すべき時点における、ユーザの中心視野に対応する領域であるものとする。
このようなユーザの中心視野は、網膜表示装置１２の視線追尾部３２によって得られる視線位置情報に基づいて特定される。視線位置情報とは、表示部２１に表示された通常画像に視線を向けているユーザの中心視野に映っている、通常画像（ポジ画像）の範囲を特定する位置情報である。
網膜表示画像生成部６４は、このようにして生成した網膜画像のデータを、網膜表示制御部６５に供給する。
【００３２】
網膜表示制御部６５は、ビーム出力部３１を制御して、ユーザの網膜を直接ラスタ走査することにより、網膜表示画像生成部６４によりデータとして生成された網膜画像（ネガ画像）を、ユーザの網膜の中心領域（中心視野に対応する領域）に直接表示させる。
【００３３】
このようにして、ユーザは、通常画像（ポジ画像）と網膜画像（ネガ画像）とを同時に見ることになり、両者が重なった部分は白くなって何も見えなくなる。つまり、ネガ画像はポジ画像を隠す働きをする。
【００３４】
さらに以下、実際にどのようなタイミングで、このようなネガ画像を表示するのかについて詳細に説明する。
【００３５】
上述のように、通常表示装置１１の表示部２１には、左通常画像と右通常画像とが時分割表示されているが、３Ｄ表示を実現するためには、左通常画像が表示部２１に表示されている間は、当該左通常画像を右目に対して隠さなければならない。
そのために、ビーム出力部３１Ｒは、左通常画像のネガ画像を網膜画像として、ユーザの右目の中心視野に対して表示する。これにより、右目の中心視野においては、左通常画像（ポジ画像）が、網膜画像（左通常画像のネガ画像）と合成されて白くなり隠されることになる。
一方で、この間、ビーム出力部３１Ｌからは、ビームの出力を停止する。これにより、ユーザの左目は、ネガ画像に妨害されずに左通常画像をそのまま正しく視認することができる。
【００３６】
逆に、右通常画像が表示部２１に表示されている間は、当該右通常画像を左目に対して隠さなければならない。
そのために、ビーム出力部３１Ｌは、右通常画像のネガ画像を網膜画像として、ユーザの左目の中心視野に対して表示する。これにより、左目の中心視野においては、右通常画像（ポジ画像）が、網膜画像（右通常画像のネガ画像）と合成されて白くなり隠されることになる。
一方で、この間、ビーム出力部３１Ｒからは、ビームの出力を停止する。これにより、ユーザの右目は、ネガ画像に妨害されずに右通常画像をそのまま正しく視認することができる。
【００３７】
このように、ユーザは、左目の中心視野に映る左通常画像（右目の中心視野はネガ画像により白くなっている）と、右目の中心視野に映る右通常画像（左目の中心視野はネガ画像により白くなっている）と、を時分割で交互に視認できる。即ち、ユーザは、別途眼鏡を必要とせずに、広い視野（通常表示装置１１の表示部２１の画面サイズ）で３Ｄ画像を視認できる。
【００３８】
図６は、通常表示装置１１に表示される通常画像（ポジ画像）と、網膜表示装置１２からユーザの両眼の中心視野に直接表示される網膜画像（ネガ画像）と、の表示の関係を示す図である。
図６に示す表は行列構造を有しているため、以下、図６中横方向の項目の集合体を「行」と呼び、同図中縦方向の項目の集合体を「列」と呼ぶ。
図６のテーブルでは、所定の２つの連続する行の組には、所定の１つのフレームが対応付けられており、当該フレームに関する情報として、「フレーム番号」、「表示順番」、「通常画像（ポジ画像）」、「左目に表示する網膜画像（ネガ画像）」、「右目に表示する網膜画像（ネガ画像）」、「左目の中心視野が認識する画像」、及び「右目の中心視野が認識する画像」の各項目の情報が表記されている。
ここで、動画像を構成するフレームの総数をｎとし、ｎ枚のフレームの各々に対して、一意の番号（以下、「フレーム番号」と呼ぶ）が表示順番でそれぞれ付されているとする。
この場合、「フレーム番号」がｉ番目のフレームには、第（２ｉ−１）行と、第（２ｉ）行とが対応している。
【００３９】
第（２ｉ−１）行には、「表示順番」が（２ｉ−１）番目に表示される内容が表記されている。
即ち、「表示順番」が（２ｉ−１）番目になると、通常表示装置１１に表示される「通常画像（ポジ画像）」として、「フレーム番号」がｉ番目のフレームについての左通常画像（ポジ画像、図６には「Ｌ＋」と表記されている）が表示される。これと同時に、網膜表示装置１２からユーザの「右目に表示する網膜画像（ネガ画像）」として、左通常画像のネガ画像（図６には「Ｌ−」と表記されている）が表示される。なお、網膜表示装置１２からユーザの「左目に表示する網膜画像（ネガ画像）」は表示されない。
従って、「左目の中心視野が認識する画像」として、左通常画像（ポジ画像、図６には「Ｌ＋」と表記されている）が正常に認識される。一方で、「右目の中心視野が認識する画像」は、左通常画像（ポジ画像であるＬ＋）と、当該左通常画像のネガ画像（Ｌ−）とが打ち消し合うので、白い画像が表示される。即ち、右目の中心視野は隠されることになる。
【００４０】
図７は、ポジ画像とネガ画像との関係を示す図である。
なお、説明の便宜上、ポジ画像とネガ画像とは３×３画素の画像とされている。また、各画素の色は、説明の簡略上、黒（図７中斜線で表記）と、その補色の白との２種類のみが存在するものとする。ただし、実際の画素の色は、補色の関係となっていれば足り、赤とシアン、緑とマゼンタ、青と黄色等各種各様の補色の関係となる色が採用される。
「表示順番」が（２ｉ−１）番目の時点では、左通常画像（図６では「Ｌ＋」と表記）がポジ画像として通常表示装置１１に表示される。
この時点では、左通常画像のネガ画像（図６では「Ｌ−」と表記）として、ポジ画像と同一の解像度であって、対応する画素同士は補色の関係になっている画像が、網膜表示装置１２からのレーザビームによってユーザの右目に直接表示される。
すると、ユーザの「右目の中心視野が認識する画像」は、図７に示すような合成画像、即ち、白い画像が表示される。このようにして、右目の中心視野は隠されることになる。
【００４１】
図６に戻り、第（２ｉ）行には、「表示順番」が（２ｉ）番目に表示される内容が表記されている。
即ち、「表示順番」が（２ｉ）番目になると、通常表示装置１１に表示される「通常画像（ポジ画像）」として、「フレーム番号」がｉ番目のフレームについての右通常画像（ポジ画像、図６には「Ｒ＋」と表記されている）が表示される。これと同時に、網膜表示装置１２からユーザの「左目に表示する網膜画像（ネガ画像）」として、右通常画像のネガ画像（図６には「Ｒ−」と表記されている）が表示される。なお、網膜表示装置１２からユーザの「右目に表示する網膜画像（ネガ画像）」は表示されない。
従って、「右目の中心視野が認識する画像」として、右通常画像（ポジ画像、図６には「Ｒ＋」と表記されている）が正常に認識される。一方で、「左目の中心視野が認識する画像」は、右通常画像（ポジ画像であるＲ＋）と、当該右通常画像のネガ画像（Ｒ＋）とが打ち消し合うので、白い画像が表示される。即ち、左目の中心視野は隠されることになる。
【００４２】
即ち、図７の例で説明すると、「表示順番」が（２ｉ）番目の時点では、右通常画像（図６では「Ｒ＋」と表記）がポジ画像として通常表示装置１１に表示される。
この時点では、右通常画像のネガ画像（図６では「Ｒ−」と表記）として、ポジ画像と同一の解像度であって、対応する画素同士は補色の関係になっている画像が、網膜表示装置１２からのレーザビームによってユーザの左目に直接表示される。
すると、ユーザの「左目の中心視野が認識する画像」は、図７に示すような合成画像、即ち、白い画像が表示される。このようにして、左目の中心視野は隠されることになる。
【００４３】
このような第（２ｉ−１）行の関係の表示状態と第（２ｉ）行の関係の表示状態との繰り返しにより、３Ｄ表示が実現される。
【００４４】
以上、画像処理システム１の機能的構成について説明した。
ただし、上述した図２の機能的構成は例示に過ぎず、通常表示装置１１と網膜表示装置１２の機能分担による３Ｄ表示を実行可能であれば、画像処理システム１は任意の機能的構成を取ることができる。
【００４５】
次に、図８乃至図１０を参照して、図２の機能的構成を有する画像処理システム１が実行する処理のうち、動画像を再生するまでの一連の処理（以下、「動画像再生処理」と呼ぶ）の流れについて説明する。
【００４６】
図８は、図５の画像処理システム１が実行する動画像再生処理の流れの一例を説明するフローチャートである。
動画像再生処理は、例えば、画像処理システム１を構成する各装置、即ち、通常表示装置１１、網膜表示装置１２、及び画像表示制御装置１３の各々の電源が投入されている状態で、ユーザによる操作部５３に対する所定の操作がなされたことを契機として開始する。
【００４７】
ステップＳ１において、主制御部５１は、画像処理システム１全体を初期設定するためのイニシャライズを行う。
【００４８】
ステップＳ２において、主制御部５１は、動画選択処理を実行する。
動画選択処理とは、主制御部５１が通常表示制御部６２を介して表示部２１に表示させる対象の動画像を選択する操作を受け付ける処理である。
即ち、図２には図示しないが、選択可能な１以上の動画像のメニュー（例えば各動画像のサムネイル画像のリスト）が表示部２１に表示されると、ユーザは、操作部５３を操作して、所望の動画を選択することができる。主制御部５１は、当該ユーザの操作を受け付ける。
なお、本実施形態では、ユーザが動画の再生を希望しない場合、上記メニューの選択肢の一つとして、動画像再生処理の終了を指示することもできる。
【００４９】
ステップＳ３において、主制御部５１は、処理の終了が指示されたか否かを判定する。
処理の終了の指示は、上述したようにステップＳ２の処理で表示されるメニューによる指示の他、例えば画像処理システム１の電源が遮断される等、各種各様の指示を採用することができる。
処理の終了が指示された場合、ステップＳ３においてＹＥＳであると判定されて、動画像再生処理の全体が終了となる。
【００５０】
これに対して、処理の終了が未だ指示されていない場合、ステップＳ３においてＮＯであると判定されて、処理はステップＳ４に進む。
【００５１】
ステップＳ４において、主制御部５１は、ステップＳ２の処理で選択を受け付けた動画像を再生する処理（以下、「再生処理」と呼ぶ）を実行する。
なお、再生処理のさらなる詳細については、図９のフローチャートを参照して後述する。
【００５２】
ステップＳ４の再生処理の終了後、処理はステップＳ２に戻され、それ以降の処理が繰り返される。即ち、処理の終了が指示されるまで、ステップＳ２乃至Ｓ４のループ処理が繰り返し実行され、各種各様の動画像がその都度再生される。
【００５３】
以上、図８を参照して、動画像再生処理の流れについて説明した。
次に、このような画像表示処理のうち、ステップＳ４の再生処理の詳細な流れについて説明する。
図９は、再生処理の詳細な流れを説明するフローチャートである。
【００５４】
ステップＳ２１において、主制御部５１は、再生処理に伴う初期設定をすべく、イニシャライズ処理を実行する。
例えば、主制御部５１は、イニシャライズ処理として、後述する再生フラグをＯＮに初期設定し、停止フラグをＯＦＦに初期設定する。
【００５５】
ステップＳ２２において、主制御部５１は、スイッチ処理を実行する。
スイッチ処理とは、複数の選択肢が存在するモードについて所定の選択肢を選択したり、複数の状態が存在するフラグの状態を設定する処理をいう。
例えば、主制御部５１は、スイッチ処理の一部として、ユーザの操作部５３に対する表示モードの選択指示操作に基づいて、表示モードとして通常モード又は３Ｄモードを選択する。
また例えば、主制御部５１は、スイッチ処理の一部として、再生フラグや停止フラグをＯＮ又はＯＦＦに設定する。具体的には例えば、主制御部５１は、ユーザの操作部５３に対する再生指示操作に基づいて、再生フラグをＯＮに設定する。また例えば、主制御部５１は、ユーザの操作部５３に対する一時停止指示操作に基づいて、再生フラグをＯＦＦに設定する。さらに例えば、主制御部５１は、ユーザの操作部５３に対する停止指示操作、又は、動画像の最後のフレームの再生終了の検出に基づいて、再生フラグをＯＦＦに設定すると共に停止フラグをＯＮに設定する。
なお、スイッチ処理には、ユーザによる指示操作が特になされていない場合、各種モードや各種フラグの設定は維持されること（特に切替が行われないこと）も含むものとする。
【００５６】
ステップＳ２３において、主制御部５１は、再生フラグがＯＮに設定されているか否かを判定する。
【００５７】
再生フラグがＯＦＦに設定されている場合、即ち、ユーザによる一時停止指示操作又は停止指示操作がなされた場合、ステップＳ２３においてＮＯであると判定され、後述するステップＳ２５の通常表示処理やステップＳ２６の３Ｄ表示処理が実行されずに、処理はステップＳ２７に進む。なお、ステップＳ２７以降の処理は後述する。
【００５８】
これに対して、再生フラグがＯＮである場合、即ち、ユーザによる再生指示がなされている場合、ステップＳ２３においてＹＥＳであると判定され、処理はステップＳ２４に進む。
【００５９】
ステップＳ２４において、主制御部５１は、表示モードとして３Ｄモードが設定されている否かを判定する。
【００６０】
３Ｄモードが設定されていない場合、即ち通常モードが設定されている場合、ステップＳ２４においてＮＯであると判定され、処理はステップＳ２５に進む。
ステップＳ２５において、主制御部５１は、通常表示処理を実行する。
通常表示処理とは、動画選択処理により選択された動画像を構成する各フレームのうち、表示対象の１フレームについて、通常の２次元画像を１フレーム周期に通常表示装置１１に表示させる処理をいう。
【００６１】
これに対して、３Ｄモードが設定されている場合、ステップＳ２４においてＹＥＳであると判定され、処理はステップＳ２６に進む。
ステップＳ２６において、主制御部５１は、３Ｄ表示処理を実行する。
３Ｄ表示処理とは、動画選択処理により選択された動画像を構成する各フレームのうち、表示対象の１フレームについて３Ｄ表示をするための処理をいう。具体的には、表示対象の１フレームについての左目用画像と右目用画像とをポジ画像として、１フレーム周期に時分割で順次通常表示装置１１に表示させると共に、当該ポジ画像に対するネガ画像を網膜表示装置１２からレーザビームにより網膜に直接表示させることで、３Ｄ表示を実現する処理が、３Ｄ表示処理である。
なお、本実施形態の３Ｄ表示処理のさらなる詳細については、図１０のフローチャートを参照して後述する。
【００６２】
このようにしてステップＳ２５の通常表示処理又はステップＳ２６の３Ｄ表示処理により、表示対象の１フレームが表示されると、処理はステップＳ２７に進む。
ステップＳ２７において、主制御部５１は、停止フラグがＯＮに設定されたか否かを判定する。
停止フラグがＯＦＦである場合、即ち、動画像の再生途中であって、ユーザの停止指示操作がなされていない場合、ステップＳ２７においてＮＯであると判定され、処理はステップＳ２２に戻され、それ以降の処理が繰り返される。
即ち、動画像の再生が終了するか、又は、ユーザの停止指示操作がなされるまでの間、ステップＳ２２乃至Ｓ２７のループ処理が繰り返し実行されることによって、動画像を構成する各フレームが順次表示されていく。
【００６３】
ここで、ステップＳ２５の通常処理及びステップＳ２６の３Ｄ表示処理の処理単位は、上述の如く、１フレームとされている。この場合、同一の動画像のデータを再生中に、フレーム毎に、通常表示と３Ｄ表示とを適宜切り換えることが容易に可能になる。
なお、ステップＳ２５の通常処理及びステップＳ２６の３Ｄ表示処理の処理単位は、特にフレームに限定されず、動画像を構成するフレームの総数よりも小さい単位であれば足りる。このような場合も、同一の動画像のデータを再生中に、処理単位毎に、通常表示と３Ｄ表示とを適宜切り換えることが容易に可能になる。
【００６４】
その後、動画像の再生途中にユーザの停止指示操作がなされるか、動画像の再生が終了すると、ステップＳ２２のスイッチ処理で停止フラグがＯＮになるため、次のステップＳ２７においてＹＥＳであると判定され、再生処理は終了する。即ち、図８のステップＳ４の処理は終了し、処理はステップＳ２に戻され、次に再生される動画像が選択される。
【００６５】
以上、図９を参照して、図８の画像表示処理のうち、ステップＳ４の再生処理の流れについて説明した。
次に、図１０を参照して、図９の再生処理のうち、ステップＳ２６の３Ｄ表示処理の詳細な流れについて説明する。
図１０は、３Ｄ表示処理の詳細な流れを説明するフローチャートである。
【００６６】
ステップＳ４１において、左右画像取得部６１は、１フレーム分の通常画像（左通常画像と右通常画像）のデータを取得する。
【００６７】
ステップＳ４２において、網膜表示画像生成部６４は、ユーザの視線位置情報を取得する。
【００６８】
ステップＳ４３において、網膜表示画像生成部６４は、ステップＳ４１の処理で取得された通常画像のデータと、ステップＳ４２の処理で取得された視線位置情報に基づいて、網膜画像（左通常画像のネガ画像と右通常画像のネガ画像）のデータを生成する。
【００６９】
ステップＳ４４において、通常表示制御部６２と網膜表示制御部６５は、互いに同期して、左通常画像を表示部２１に、当該左通常画像のネガ画像を網膜表示装置１２からユーザの右目の網膜に、同時に表示させる。
即ち、通常表示制御部６２は、ステップＳ４１の処理で取得された通常画像のデータに基づいて、当該通常画像のうち左通常画像を通常表示装置１１の表示部２１に表示させる。これと同期して、網膜表示制御部６５は、当該左通常画像のネガ画像を構成する各画素に対応するレーザビームを、網膜表示装置１２のビーム出力部３１Ｒから出力させる。すると、ユーザの右目の網膜においては、表示部２１に表示された左通常画像（ポジ画像）と、ビーム出力部３１Ｒからレーザビームとして出力された当該左通常画像のネガ画像とが合成され、その結果、白色の合成画像（図７参照）が映ることになる。これにより、ユーザは、右目の中心視野が視認できなくなる。
この時、ビーム出力部３１Ｌからは何も出力されないため、ユーザの左目の網膜には、表示部２１に表示された左通常画像のみが映る。
従って、ユーザは、左目に映った左通常画像のみを視認することになる。
【００７０】
ステップＳ４５において、通常表示制御部６２と網膜表示制御部６５は、互いに同期して、右通常画像を表示部２１に、当該右通常画像のネガ画像を網膜表示装置１２からユーザの左目の網膜に、同時に表示させる。
即ち、通常表示制御部６２は、ステップＳ４１の処理で取得された通常画像のデータに基づいて、当該通常画像のうち右通常画像を通常表示装置１１の表示部２１に表示させる。これと同期して、網膜表示制御部６５は、当該右通常画像のネガ画像を構成する各画素に対応するレーザビームを、網膜表示装置１２のビーム出力部３１Ｌから出力させる。すると、ユーザの左目の網膜においては、表示部２１に表示された右通常画像（ポジ画像）と、ビーム出力部３１Ｌからレーザビームとして出力された当該右通常画像のネガ画像とが合成され、その結果、白色の合成画像（図７参照）が映ることになる。これにより、ユーザは、左目の中心視野が視認できなくなる。
この時、ビーム出力部３１Ｒからは何も出力されないため、ユーザの右目の網膜には、表示部２１に表示された右通常画像のみが映る。
従って、ユーザは、右目に映った右通常画像のみを視認することになる。
【００７１】
このようにして３Ｄ表示処理が実行されると、表示対象の１フレームが３Ｄ表示されることになる。これにより、図９のステップＳ２６の３Ｄ表示処理は終了して、処理はステップＳ２７に進む。
即ち、ユーザによる指示操作が特に行われていなければ、ステップＳ２２乃至Ｓ２７のループ処理が繰り返し実行されて、動画像を構成する各フレームが順次３Ｄ表示されていく。
【００７２】
以上説明したように、本実施形態に係る画像処理システム１は、各画素を発光することで画像を表示する通常表示装置１１と、ユーザの網膜に画像を直接表示する網膜表示装置１２と、通常表示装置１１及び網膜表示装置１２に対する画像の表示を制御する画像表示制御装置１３と、を備える。
画像表示制御装置１３は、通常表示制御部６２と、網膜表示画像生成部６４と、網膜表示制御部６５と、を備える。
網膜表示画像生成部６４は、右目用画像（右通常画像）及び左目用画像（左通常画像）の各データに基づいて、右目用画像及び左目用画像の各々のネガ画像のデータを生成する。通常表示制御部６２は、右目用画像と左目用画像とを通常表示装置１１の表示部２１に交互に表示させる。網膜表示装置１２は、右目用画像が表示部２１に表示されているときには、右目用画像のネガ画像を網膜表示装置１２からユーザの左目の網膜に直接表示させ、左目用画像が表示部２１に表示されているときには、左目用画像のネガ画像を網膜表示装置１２からユーザの右目の網膜に直接表示させる。
これにより、右目用画像が表示部２１に表示されているときには、ユーザの右目には右目用画像（右通常画像）が映る一方、ユーザの左目には、右目用画像（ポジ画像）とそのネガ画像との合成画像、即ち白い画像（図７参照）が映る。従って、ユーザは、右目に映った右通常画像のみを視認することになる。
一方、左目用画像が表示部２１に表示されているときには、ユーザの左目には左目用画像（左通常画像）が映る一方、ユーザの右目には、左目用画像（ポジ画像）とそのネガ画像との合成画像、即ち白い画像（図７参照）が映る。従って、ユーザは、左目に映った左通常画像のみを視認することになる。
その結果、ユーザは、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を視認できる。
【００７３】
ここで、通常表示装置１１は、従来から存在する一般のテレビジョン受像機をそのまま流用することができる。従って、ユーザは、網膜表示装置１２と画像表示制御装置１３とを後から追加するだけで、本実施形態の画像処理システム１を容易に構成して使用することが可能になる。
【００７４】
なお、本発明は上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
【００７５】
例えば、上述の実施形態では、左右の画像を時分割表示する手法と、ポジ画像とネガ画像とを同時に表示する手法とを採用したが、本発明に適用可能な３Ｄ表示の手法はこれに限定されず、通常表示装置１１と網膜表示装置１２とを機能分担させて３Ｄ表示できる手法であれば足る。
具体的には例えば、通常表示装置１１には周辺視野画像のみを表示させ、網膜表示装置１２には中心視野画像のみを表示させる代替手法を採用することもできる。
ここで、中心視野画像とは、左通常画像及び右通常画像のそれぞれにおいて、視線位置情報により特定される中心視野に対応する画素のみを残した画像をいう。
また、周辺視野画像とは、図９のステップＳ２５の通常表示処理で用いられた２次元表示用の画像において、視線位置情報により特定される中心視野に対応する画素を全て黒くして、周辺視野に対応する画素のみを残した画像をいう。
また、中心視野画像と周辺視野画像の境界は、中心視野よりも周辺視野の方に入った領域への設定がなされれば足り、厳密な設定は不要である。ただし、両画像の境界が乖離して黒い境界線が生じてしまうよりは、両画像が境界領域で重複して表示された方が好適である。
この境界領域以外では、中心視野画像と周辺視野画像は、全く重複せずに認識されるので、それぞれの解像度は厳密に一致している必要はない。むしろ、周辺視野画像は常にぼやけて認識されるので、低い解像度でも構わないことになる。
【００７６】
その他例えば、上述の実施形態では、３Ｄ画像専用の眼鏡が不要となることを強調したが、特にこれに限定されず、眼鏡を網膜表示装置１２の代替装置として使う手法を採用することもできる。
即ち、左右のレンズに左右それぞれのネガ画像を表示できる機能を有する眼鏡を採用することで、上述の実施形態の画像処理システム１と同様の効果を奏することができる。
【００７７】
また例えば、上述の実施形態では、左右画像取得部６１は通常画像のデータを左右画像記憶部５２から取得するものとして説明したが、特にこれに限定されず、例えば、放送局から３Ｄ放映された通常画像のデータを受信して取得するようにしてもよい。
【００７８】
ところで、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
【００７９】
図１１は、上述した一連の処理をソフトウェアにより実行させる場合の、画像表示制御装置１３のハードウェア構成を示すブロック図である。
【００８０】
画像表示制御装置１３は、CPU（Central Processing Unit）１０１と、ROM（Read Only Memory）１０２と、RAM（Random Access Memory）１０３と、バス１０４と、入出力インターフェース１０５と、操作部５３と、記憶部１０６と、通信部１０７と、ドライブ１０８と、を備えている。
【００８１】
CPU１０１は、ROM１０２に記録されているプログラム、又は、記憶部１０６からRAM１０３にロードされたプログラムに従って各種の処理を実行する。
RAM１０３にはまた、CPU１０１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００８２】
例えば、上述した図２の主制御部５１は、CPU１０１というハードウェアと、ROM１０２等に記憶されたプログラム（ソフトウェア）との組み合わせとして構成することができる。
【００８３】
CPU１０１、ROM１０２、及びRAM１０３は、バス１０４を介して相互に接続されている。このバス１０４にはまた、入出力インターフェース１０５も接続されている。入出力インターフェース１０５には、上述した操作部４１の他、記憶部１０６、通信部１０７、及びドライブ１０８が接続されている。
【００８４】
記憶部１０６は、ハードディスク等で構成され、再生候補となる動画像のデータ等を記憶する。即ち、上述した図２の左右画像記憶部５２は、記憶部１０６の一領域として構成される。また、記憶部１０６は、各種情報処理に必要な各種データ、例えば、画像のデータ、各種フラグの値、閾値等も記憶する。
通信部１０９は、他の装置との間で行う通信を制御する。例えば本実施形態では、通信部１０９は、通常表示装置１１及び網膜表示装置１２（図２）の各々との間で行う通信を制御する。通信部１０９はまた、図示せぬインターネット等を介して図示せぬ他の装置との間で行う通信を制御する。
【００８５】
ドライブ１０８には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなるリムーバブルメディア１１１が適宜装着される。ドライブ１０８によって読み出されたコンピュータプログラムは、必要に応じて記憶部１０６等にインストールされる。
【００８６】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
【００８７】
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布されるリムーバブルメディア１１１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディアは、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、CD-ROM（Compact Disk-Read Only Memory），DVD（Digital Versatile Disk）等により構成される。光磁気ディスクは、MD（Mini-Disk）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されているROM１０２や、記憶部１０６に含まれるハードディスク等で構成される。
【００８８】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【００８９】
また、本発明が適用される情報処理装置として、図１１のコンピュータの構成を有する画像表示制御装置１３を例として説明した。
しかしながら、本発明は、特にこれに限定されず、通常表示装置１１及び網膜表示装置１２と通信可能で、上述の情報処理を実行可能な電子機器一般に適用することができる。具体的には例えば、本発明は、各種録画再生装置、携帯型ナビゲーション装置、ポータブルゲーム機等に幅広く適用可能である。
【符号の説明】
【００９０】
１・・・画像処理システム、１１・・・通常表示装置、１２・・・網膜表示装置、１３・・・画像表示制御装置、２１・・・表示部、２２・・・音声出力部、３１・・・ビーム出力部、３２・・・視線追尾部、５１・・・主制御部、５２・・・左右画像記憶部、５３・・・操作部、６１・・・左右画像取得部、６２・・・通常表示制御部、６３・・・音声制御部、６４・・・網膜表示画像生成部、６５・・・網膜表示制御部、１０１・・・CPU、１０２・・・ROM、１０３・・・RAM、１０４・・・バス、１０５・・・入出力インターフェース、１０６・・・記憶部、１０７・・・通信部、１０８・・・ドライブ
【技術分野】
【０００１】
本発明は、情報処理システム、情報処理装置及び方法、並びにプログラムに関し、特に、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示できる技術に関する。
【背景技術】
【０００２】
従来より、立体画像（3-Dimensional Picture、以下、「３Ｄ画像」とも呼ぶ）を表示可能な表示装置の需要が高まりつつある。
ここで、従来型の表示装置、例えばCRT（Cathode Ray Tub）や液晶型表示装置等、各画素を発光することで画像を表示する表示装置を、以下、「通常表示装置」と呼ぶ。
このような通常表示装置を用いて３Ｄ画像を表示する従来の技術として、左目用画像と右目用画像とを交互に表示する液晶ディスプレイと、液晶ディスプレイの交互表示に同期して左右の切り替えが可能なシャッタ眼鏡と、により３Ｄ画像の表示を実現する技術が存在する（特許文献１参照）。
しかしながら、特許文献１に記載の技術では、３Ｄ画像を見るためだけに、ユーザはわざわざ眼鏡をかけなければならないという煩わしさが生じていた。
このため、近年、別途眼鏡を必要とせずに、表示精度が高い３Ｄ画像を表示できる技術の研究開発が進んでいる。
【０００３】
別途眼鏡を必要としない３Ｄ画像の表示を実現可能にし得る技術の１つとして、人間の目の瞳孔に向けてレーザビームを照射し、網膜に直接ラスタ走査を行う技術が存在する（特許文献２参照）。
このように、網膜に直接ラスタ走査して画像を表示する装置を、以下「網膜表示装置」と呼ぶ。即ち、特許文献２には、網膜表示装置が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−２４３７０５号公報
【特許文献２】特開平８−２０５０５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献２に記載の技術をそのまま適用しても、離れた場所から小さな瞳孔を通して網膜にラスタ走査するので、網膜上で走査可能な領域はそれほど広く取れず、従って、視野全体の小さな部分にしか結像することができない。
即ち、ユーザにとっては、狭い視野（小画面の通常表示装置と等価な小さな空間サイズ）でしか３Ｄ画像を鑑賞することができない。
これでは、別途眼鏡が必要となる点を考慮したとしても、広い視野で迫力ある３Ｄ画像を鑑賞可能な大画面の通常表示装置に太刀打ちすることはできない。
【０００６】
本発明は、このような状況に鑑みてなされたものであり、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示可能にすることを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一態様によると、
画像を表示する第１表示装置と、
ユーザの網膜上に画像を結像させて前記画像を表示させる第２表示装置と、
前記第１表示装置及び前記第２表示装置を制御する表示制御装置と、
を備える情報処理システムであって、
前記表示制御装置は、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成し、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させ、
前記右目用画像を前記第１表示装置に表示させているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、
前記左目用画像を前記第１表示装置に表示させているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる、
制御を実行することを特徴とする画像処理システムを提供する。
【０００８】
本発明の別の態様によると、上述した本発明の一態様に係る情報処理システムの表示制御装置に対応する情報処理装置を提供し、さらに、当該情報処理装置に対応する方法及びプログラムを提供する。
【発明の効果】
【０００９】
本発明によれば、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を表示することが実現可能になる。
【図面の簡単な説明】
【００１０】
【図１】本発明の情報処理システムの一実施形態に係る画像処理システムの外観構成例を示す側面図である。
【図２】図１の画像処理システムの機能的構成を示す機能ブロック図である。
【図３】図２の画像処理システムのうち網膜表示装置の外観構成を示す斜視図である。
【図４】図３の網膜表示装置の視線追尾部の外観構成を示す斜視図である。
【図５】図３の網膜表示装置のビーム出力部の断面図である。
【図６】図２の画像処理システムのうち、通常表示装置に表示される通常画像（ポジ画像）と、網膜表示装置からユーザの両眼の中心視野に直接表示される網膜画像（ネガ画像）と、の表示の関係を示す図である。
【図７】図２の画像処理システムによって表示される、ポジ画像とネガ画像との関係を示す図である。
【図８】図５の画像処理システムが実行する動画像再生処理の流れの一例を説明するフローチャートである。
【図９】図５の画像表示処理のうち、再生処理の詳細な流れの一例を説明するフローチャートである。
【図１０】図９の再生処理のうち、３Ｄ表示処理の詳細な流れにの一例を説明するフローチャートである。
【図１１】図２の画像処理システムのうち、画像表示制御装置のハードウェア構成を示すブロック図である。
【発明を実施するための形態】
【００１１】
以下、本発明の一実施形態を図面に基づいて説明する。
【００１２】
図１は、本発明の情報処理システムの一実施形態に係る画像処理システムの外観構成例を示す側面図である。
【００１３】
図１に示すように、画像処理システム１は、通常表示装置１１と、網膜表示装置１２と、画像表示制御装置１３と、を備えている。
通常表示装置１１は、例えば４２インチ以上の表示領域を有する表示部２１を備えている。
網膜表示装置１２は、通常表示装置１１の上方に配置され、画像表示制御装置１３は、通常表示装置１１の背面に配置されている。
【００１４】
ユーザＵは、通常表示装置１１の表示部２１を注視している。このとき、網膜表示装置１２から、ユーザＵの左右の瞳孔に向かって微弱なレーザビームが照射される。
その結果、表示部２１の表示面を構成する各画素から発光された光束と、網膜表示装置１２からユーザＵの左右の瞳孔に直接照射されたレーザビームとによって、ユーザＵは所定の３Ｄ画像を視認することが可能になる。
【００１５】
即ち、通常表示装置１１と網膜表示装置１２との各々を単体で用いても、３Ｄ画像の表示自体は可能になる。
しかしながら、通常表示装置１１は、視野の広い３Ｄ画像の表示（いわゆる大画面表示）は実現可能という長所を有するが、別途眼鏡を必要としな３Ｄ画像の表示の実現は困難であるという欠点を有する。一方で、網膜表示装置１２は、別途眼鏡を必要としな３Ｄ画像の表示は実現可能であるという長所を有するが、視野の広い３Ｄ画像の表示（いわゆる大画面表示）の実現は困難であるという欠点を有する。
このため、通常表示装置１１と網膜表示装置１２との長所を生かし決定を補い合うようにして、３Ｄ画像の表示を実現すべく、画像表示制御装置１３が画像処理システム１に設けられている。
【００１６】
このような通常表示装置１１と網膜表示装置１２との長所を生かし欠点を補い合う組み合わせは、本発明人らが人間の視野の性質を考察することによってはじめて可能になったものである。
即ち、人間は、左右の眼球の網膜全体を用いることにより、左右で180度以上にも及ぶ広い視野を持つ。しかし、人間にとって、鮮明に見えている部分は、網膜の中心領域を用いる狭い範囲の中心視野のみであって、それ以外の周辺視野は常にぼんやりとしか見えていない。
特に、網膜上で最も解像度の高い領域は、直径0.2mmの中心領域に過ぎないといわれている。
それにも係らず、人間が広い視野を鮮明に見ていると感じるのは、無意識のうちに視線を移動させているためである。即ち、人間にとって、ある時点で鮮明に見えているのは視線の向かう注目点の近傍を映す中心視野だけである。しかしながら、人間は、網膜残像と呼ばれる特性を有しているため、当該注目点が広い範囲を次々に移動する結果として、当該範囲全体が鮮明に見えていると感じることができるのである。
【００１７】
それゆえ、次のような機能分担が可能となる。
即ち、網膜表示装置１２の欠点は、換言すると、限られた視野にしか画像を表示できないということである。しかしながら、網膜表示装置１２が中心視野への表示を主に分担するならば、その欠点が問題にならない。
一方、通常表示装置１１の欠点、即ち、別途眼鏡を必要としない３Ｄ画像の表示の実現は困難であるという欠点は、通常表示装置１１が左目用画像と右目用画像とを同時に表示することが実質上できないことに起因する。しかしながら、通常表示装置１１が周辺視野への表示を主に分担するならば、左目用画像と右目用画像とが重なって表示されても、細かい差異は気付かれないので、その欠点が問題にならない。
画像表示制御装置１３は、このような機能分担を制御することにより、通常表示装置１１の長所である視野の広い３Ｄ画像の表示（大画面表示）と、網膜表示装置１２の長所である別途眼鏡を必要としない３Ｄ画像の表示と、を同時に実現する。
即ち、本発明に係る情報処理装置の一実施形態として、画像表示制御装置１３が設けられている。
【００１８】
図２は、このような外観構成を有する画像処理システム１の機能のうち、３Ｄ画像を表示する機能を実現する機能的構成を示す機能ブロック図である。
【００１９】
通常表示装置１１は、上述した表示部２１に加えて、スピーカ等で構成される音声出力部２２を備えている。
網膜表示装置１２は、ビーム出力部３１と、視線追尾部３２と、を備えている。
画像表示制御装置１３は、主制御部５１と、左右画像記憶部５２と、操作部５３と、を備えている。
主制御部５１は、左右画像取得部６１と、通常表示制御部６２と、音声制御部６３と、網膜表示画像生成部６４と、網膜表示制御部６５と、を備えている。
【００２０】
以下、通常表示装置１１については、従来の一般的なものをそのまま流用できるためその説明は省略し、網膜表示装置１２と、画像表示制御装置１３との各々について、その順番で個別に説明していく。
【００２１】
図３は、網膜表示装置１２の外観構成を示す斜視図である。
網膜表示装置１２は、ユーザの左の瞳孔に向かってレーザビームを出射するビーム出力部３１Ｌと、ユーザの右の瞳孔に向かってレーザビームを出射するビーム出力部３１Ｒと、を備えている。
なお、図２に示すビーム出力部３１は、ビーム出力部３１Ｌ，３１Ｒをまとめたものである。従って、以下、ビーム出力部３１Ｌ，３１Ｒを個々に区別する必要がない場合、これらをまとめたものを、「ビーム出力部３１」と呼ぶ。
【００２２】
図４は、網膜表示装置１２の視線追尾部３２の外観構成を示す斜視図である。
なお、図４に示す視線追尾部３２は、網膜表示装置１２の筺体内に搭載されているため、図３には図示されていない。
図４に示すように、ビーム出力部３１の下部には、視線追尾部３２が接続されている。
視線追尾部３２は、２軸サーボモータを備えており、公知の技術によりユーザの視線を追尾し、ビーム出力部３１の出力方向をユーザの瞳孔に向けるように、当該ビーム出力部３１を駆動する。
視線追尾部３２はまた、通常表示装置１１に表示される画像のうち、ユーザの中心視野に映っている画素の範囲を特定する位置情報を検出する機能を有する。
【００２３】
図５は、網膜表示装置１２のビーム出力部３１の断面図である。
ビーム出力部３１は、レーザビーム光源７１と、水平偏向板７２と、垂直偏向板７３と、収束用レンズ７４と、を備えている。
レーザビーム光源７１は、ユーザの網膜に表示すべき画像（以下、「網膜画像」と呼ぶ）を水平方向と垂直方向にスキャンしたデータに基づいて、各画素値に対応する三原色のレーザビームを発生する。
レーザビーム光源７１から発生されたレーザビームは、水平偏向板７２と垂直偏向板７３とによって水平方向及び垂直方向に偏向され、収束用レンズ７４によって、ユーザの眼球の瞳孔に焦点を結ぶように出射される。
その結果、網膜に到達したレーザビームは、網膜の中心領域の上でラスタ走査されて、その結果、網膜画像がユーザの中心視野に対して直接表示されることになる。
なお、網膜表示装置１２のさらなる詳細については、特許文献１を参照すればよい。
【００２４】
図２に戻り、画像表示制御装置１３において、主制御部５１は、当該画像表示制御装置１３の全体を制御する。主制御部５１を構成する各機能ブロックの説明は後述する。
【００２５】
左右画像記憶部５２は、動画像のデータを記憶する。
ここで、動画像は、所定の時点における静止画像が、時間的に連続して複数枚配置されることによって構成される。動画像のデータの記録や再生の処理は、このような静止画像の少なくとも一部分が処理単位となって実行される。このような動画像に対する画像処理において、処理単位となる画像を、以下、「単位画像」と呼ぶ。例えばフレームやフィールドが単位画像の一例である。そこで、単位画像としてフレームが採用された場合を例として、以下の説明を行う。
ここでは、前提として、フレーム毎に、右目用画像と左目用画像の各データは既に生成されているものとする。
このような動画像を構成する各フレーム（１フレーム分の右目用画像と左目用画像）は、通常表示装置１１の表示部２１に通常に表示されるため、以下「通常画像」と呼ぶ。
【００２６】
操作部５３は、電源釦、モードＳＷ（Ｓｗｉｔｃｈ）釦等各種釦等で構成され、ユーザの指示操作を受け付ける。
【００２７】
さらに、以下、画像表示制御装置１３の機能的構成のうち、特に主制御部５１の機能的構成の詳細について説明する。
【００２８】
左右画像取得部６１は、フレームを単位として、通常画像のデータを左右画像記憶部５２から取得し、通常表示制御部６２及び網膜表示画像生成部６４に供給する。
ここで、網膜表示装置１２のビーム出力部３１からレーザビームとして出力されてユーザの左目又は右目に映る網膜画像は、後述するように、通常画像のネガ画像として生成される。即ち、通常画像と網膜画像との関係は、ポジ画像とネガ画像との関係になる。従って、以下、通常画像をポジ画像と呼ぶこともあるし、同様に網膜画像をネガ画像と呼ぶこともある。
【００２９】
通常表示制御部６２は、左右画像取得部６１から供給された通常画像のデータにより表わされる画像、即ち左目用画像のデータにより表わされる画像（以下、「左通常画像」と呼ぶ）と、右目用画像のデータにより表わされる画像（以下、「右通常画像」と呼ぶ）とを、表示部２１に時分割表示する制御を実行する。
ここで、時分割表示とは、いわゆる１フレーム周期において、前半の期間に例えば左通常画像を表示し、後半の期間に例えば右通常画像を表示することを意味する。
具体的には例えば、左右画像記憶部５２に記録されている動画像のデータの記録レートが、60fps（Frames Per Second）であるものとする。この場合、1/60秒が１フレーム周期になる。従って、１フレーム周期（1/60秒）が２分割され、前半の1/120秒の期間では左通常画像が表示され、後半の1/120秒の期間では右通常画像が表示されることが、時分割表示の一例である。
なお、通常表示制御部６２は、このような時分割表示を実現するために、少なくとも倍速で動画像を表示する機能（上述の例では120fpsの再生レートで動画像を表示する機能）を有しているものとする。
【００３０】
ここで、一般的には、動画像のデータには、対応する音声のデータが付加されている。即ち、左右画像取得部６１は、通常画像のデータを左右画像記憶部５２から取得するとき、当該通常画像に対応する音声のデータも左右画像記憶部５２から取得して、音声制御部６３に供給する。
音声制御部６３は、このようにして左右画像取得部６１からデータとして供給された音声を、通常表示装置１１の音声出力部２２から出力させる制御を実行する。
【００３１】
網膜表示画像生成部６４は、左右画像取得部６１から供給された通常画像のデータに基づいて、網膜画像のデータとして、通常画像のネガ画像のデータを生成する。
具体的には、網膜表示画像生成部６４は、右通常画像のネガ画像をユーザの左目に表示すべき網膜画像として、左通常画像のネガ画像をユーザの右目に表示すべき網膜画像として、それぞれのデータを生成する。ここで、左右の目と、左右のネガ画像とは左右が交叉した関係になっている点に注意すべきである。
なお、ネガ画像とは、通常画像（ポジ画像）の各画素の色に対して、補色の関係にある色を対応する画素に割り当てた画像であって、ポジ画像とネガ画像とを網膜上で重ねると、重ねた部分が白として視認される画像をいう。
ただし、本実施形態では、ネガ画像の有効画素の範囲は、ネガ画像を表示すべき時点における、ユーザの中心視野に対応する領域であるものとする。
このようなユーザの中心視野は、網膜表示装置１２の視線追尾部３２によって得られる視線位置情報に基づいて特定される。視線位置情報とは、表示部２１に表示された通常画像に視線を向けているユーザの中心視野に映っている、通常画像（ポジ画像）の範囲を特定する位置情報である。
網膜表示画像生成部６４は、このようにして生成した網膜画像のデータを、網膜表示制御部６５に供給する。
【００３２】
網膜表示制御部６５は、ビーム出力部３１を制御して、ユーザの網膜を直接ラスタ走査することにより、網膜表示画像生成部６４によりデータとして生成された網膜画像（ネガ画像）を、ユーザの網膜の中心領域（中心視野に対応する領域）に直接表示させる。
【００３３】
このようにして、ユーザは、通常画像（ポジ画像）と網膜画像（ネガ画像）とを同時に見ることになり、両者が重なった部分は白くなって何も見えなくなる。つまり、ネガ画像はポジ画像を隠す働きをする。
【００３４】
さらに以下、実際にどのようなタイミングで、このようなネガ画像を表示するのかについて詳細に説明する。
【００３５】
上述のように、通常表示装置１１の表示部２１には、左通常画像と右通常画像とが時分割表示されているが、３Ｄ表示を実現するためには、左通常画像が表示部２１に表示されている間は、当該左通常画像を右目に対して隠さなければならない。
そのために、ビーム出力部３１Ｒは、左通常画像のネガ画像を網膜画像として、ユーザの右目の中心視野に対して表示する。これにより、右目の中心視野においては、左通常画像（ポジ画像）が、網膜画像（左通常画像のネガ画像）と合成されて白くなり隠されることになる。
一方で、この間、ビーム出力部３１Ｌからは、ビームの出力を停止する。これにより、ユーザの左目は、ネガ画像に妨害されずに左通常画像をそのまま正しく視認することができる。
【００３６】
逆に、右通常画像が表示部２１に表示されている間は、当該右通常画像を左目に対して隠さなければならない。
そのために、ビーム出力部３１Ｌは、右通常画像のネガ画像を網膜画像として、ユーザの左目の中心視野に対して表示する。これにより、左目の中心視野においては、右通常画像（ポジ画像）が、網膜画像（右通常画像のネガ画像）と合成されて白くなり隠されることになる。
一方で、この間、ビーム出力部３１Ｒからは、ビームの出力を停止する。これにより、ユーザの右目は、ネガ画像に妨害されずに右通常画像をそのまま正しく視認することができる。
【００３７】
このように、ユーザは、左目の中心視野に映る左通常画像（右目の中心視野はネガ画像により白くなっている）と、右目の中心視野に映る右通常画像（左目の中心視野はネガ画像により白くなっている）と、を時分割で交互に視認できる。即ち、ユーザは、別途眼鏡を必要とせずに、広い視野（通常表示装置１１の表示部２１の画面サイズ）で３Ｄ画像を視認できる。
【００３８】
図６は、通常表示装置１１に表示される通常画像（ポジ画像）と、網膜表示装置１２からユーザの両眼の中心視野に直接表示される網膜画像（ネガ画像）と、の表示の関係を示す図である。
図６に示す表は行列構造を有しているため、以下、図６中横方向の項目の集合体を「行」と呼び、同図中縦方向の項目の集合体を「列」と呼ぶ。
図６のテーブルでは、所定の２つの連続する行の組には、所定の１つのフレームが対応付けられており、当該フレームに関する情報として、「フレーム番号」、「表示順番」、「通常画像（ポジ画像）」、「左目に表示する網膜画像（ネガ画像）」、「右目に表示する網膜画像（ネガ画像）」、「左目の中心視野が認識する画像」、及び「右目の中心視野が認識する画像」の各項目の情報が表記されている。
ここで、動画像を構成するフレームの総数をｎとし、ｎ枚のフレームの各々に対して、一意の番号（以下、「フレーム番号」と呼ぶ）が表示順番でそれぞれ付されているとする。
この場合、「フレーム番号」がｉ番目のフレームには、第（２ｉ−１）行と、第（２ｉ）行とが対応している。
【００３９】
第（２ｉ−１）行には、「表示順番」が（２ｉ−１）番目に表示される内容が表記されている。
即ち、「表示順番」が（２ｉ−１）番目になると、通常表示装置１１に表示される「通常画像（ポジ画像）」として、「フレーム番号」がｉ番目のフレームについての左通常画像（ポジ画像、図６には「Ｌ＋」と表記されている）が表示される。これと同時に、網膜表示装置１２からユーザの「右目に表示する網膜画像（ネガ画像）」として、左通常画像のネガ画像（図６には「Ｌ−」と表記されている）が表示される。なお、網膜表示装置１２からユーザの「左目に表示する網膜画像（ネガ画像）」は表示されない。
従って、「左目の中心視野が認識する画像」として、左通常画像（ポジ画像、図６には「Ｌ＋」と表記されている）が正常に認識される。一方で、「右目の中心視野が認識する画像」は、左通常画像（ポジ画像であるＬ＋）と、当該左通常画像のネガ画像（Ｌ−）とが打ち消し合うので、白い画像が表示される。即ち、右目の中心視野は隠されることになる。
【００４０】
図７は、ポジ画像とネガ画像との関係を示す図である。
なお、説明の便宜上、ポジ画像とネガ画像とは３×３画素の画像とされている。また、各画素の色は、説明の簡略上、黒（図７中斜線で表記）と、その補色の白との２種類のみが存在するものとする。ただし、実際の画素の色は、補色の関係となっていれば足り、赤とシアン、緑とマゼンタ、青と黄色等各種各様の補色の関係となる色が採用される。
「表示順番」が（２ｉ−１）番目の時点では、左通常画像（図６では「Ｌ＋」と表記）がポジ画像として通常表示装置１１に表示される。
この時点では、左通常画像のネガ画像（図６では「Ｌ−」と表記）として、ポジ画像と同一の解像度であって、対応する画素同士は補色の関係になっている画像が、網膜表示装置１２からのレーザビームによってユーザの右目に直接表示される。
すると、ユーザの「右目の中心視野が認識する画像」は、図７に示すような合成画像、即ち、白い画像が表示される。このようにして、右目の中心視野は隠されることになる。
【００４１】
図６に戻り、第（２ｉ）行には、「表示順番」が（２ｉ）番目に表示される内容が表記されている。
即ち、「表示順番」が（２ｉ）番目になると、通常表示装置１１に表示される「通常画像（ポジ画像）」として、「フレーム番号」がｉ番目のフレームについての右通常画像（ポジ画像、図６には「Ｒ＋」と表記されている）が表示される。これと同時に、網膜表示装置１２からユーザの「左目に表示する網膜画像（ネガ画像）」として、右通常画像のネガ画像（図６には「Ｒ−」と表記されている）が表示される。なお、網膜表示装置１２からユーザの「右目に表示する網膜画像（ネガ画像）」は表示されない。
従って、「右目の中心視野が認識する画像」として、右通常画像（ポジ画像、図６には「Ｒ＋」と表記されている）が正常に認識される。一方で、「左目の中心視野が認識する画像」は、右通常画像（ポジ画像であるＲ＋）と、当該右通常画像のネガ画像（Ｒ＋）とが打ち消し合うので、白い画像が表示される。即ち、左目の中心視野は隠されることになる。
【００４２】
即ち、図７の例で説明すると、「表示順番」が（２ｉ）番目の時点では、右通常画像（図６では「Ｒ＋」と表記）がポジ画像として通常表示装置１１に表示される。
この時点では、右通常画像のネガ画像（図６では「Ｒ−」と表記）として、ポジ画像と同一の解像度であって、対応する画素同士は補色の関係になっている画像が、網膜表示装置１２からのレーザビームによってユーザの左目に直接表示される。
すると、ユーザの「左目の中心視野が認識する画像」は、図７に示すような合成画像、即ち、白い画像が表示される。このようにして、左目の中心視野は隠されることになる。
【００４３】
このような第（２ｉ−１）行の関係の表示状態と第（２ｉ）行の関係の表示状態との繰り返しにより、３Ｄ表示が実現される。
【００４４】
以上、画像処理システム１の機能的構成について説明した。
ただし、上述した図２の機能的構成は例示に過ぎず、通常表示装置１１と網膜表示装置１２の機能分担による３Ｄ表示を実行可能であれば、画像処理システム１は任意の機能的構成を取ることができる。
【００４５】
次に、図８乃至図１０を参照して、図２の機能的構成を有する画像処理システム１が実行する処理のうち、動画像を再生するまでの一連の処理（以下、「動画像再生処理」と呼ぶ）の流れについて説明する。
【００４６】
図８は、図５の画像処理システム１が実行する動画像再生処理の流れの一例を説明するフローチャートである。
動画像再生処理は、例えば、画像処理システム１を構成する各装置、即ち、通常表示装置１１、網膜表示装置１２、及び画像表示制御装置１３の各々の電源が投入されている状態で、ユーザによる操作部５３に対する所定の操作がなされたことを契機として開始する。
【００４７】
ステップＳ１において、主制御部５１は、画像処理システム１全体を初期設定するためのイニシャライズを行う。
【００４８】
ステップＳ２において、主制御部５１は、動画選択処理を実行する。
動画選択処理とは、主制御部５１が通常表示制御部６２を介して表示部２１に表示させる対象の動画像を選択する操作を受け付ける処理である。
即ち、図２には図示しないが、選択可能な１以上の動画像のメニュー（例えば各動画像のサムネイル画像のリスト）が表示部２１に表示されると、ユーザは、操作部５３を操作して、所望の動画を選択することができる。主制御部５１は、当該ユーザの操作を受け付ける。
なお、本実施形態では、ユーザが動画の再生を希望しない場合、上記メニューの選択肢の一つとして、動画像再生処理の終了を指示することもできる。
【００４９】
ステップＳ３において、主制御部５１は、処理の終了が指示されたか否かを判定する。
処理の終了の指示は、上述したようにステップＳ２の処理で表示されるメニューによる指示の他、例えば画像処理システム１の電源が遮断される等、各種各様の指示を採用することができる。
処理の終了が指示された場合、ステップＳ３においてＹＥＳであると判定されて、動画像再生処理の全体が終了となる。
【００５０】
これに対して、処理の終了が未だ指示されていない場合、ステップＳ３においてＮＯであると判定されて、処理はステップＳ４に進む。
【００５１】
ステップＳ４において、主制御部５１は、ステップＳ２の処理で選択を受け付けた動画像を再生する処理（以下、「再生処理」と呼ぶ）を実行する。
なお、再生処理のさらなる詳細については、図９のフローチャートを参照して後述する。
【００５２】
ステップＳ４の再生処理の終了後、処理はステップＳ２に戻され、それ以降の処理が繰り返される。即ち、処理の終了が指示されるまで、ステップＳ２乃至Ｓ４のループ処理が繰り返し実行され、各種各様の動画像がその都度再生される。
【００５３】
以上、図８を参照して、動画像再生処理の流れについて説明した。
次に、このような画像表示処理のうち、ステップＳ４の再生処理の詳細な流れについて説明する。
図９は、再生処理の詳細な流れを説明するフローチャートである。
【００５４】
ステップＳ２１において、主制御部５１は、再生処理に伴う初期設定をすべく、イニシャライズ処理を実行する。
例えば、主制御部５１は、イニシャライズ処理として、後述する再生フラグをＯＮに初期設定し、停止フラグをＯＦＦに初期設定する。
【００５５】
ステップＳ２２において、主制御部５１は、スイッチ処理を実行する。
スイッチ処理とは、複数の選択肢が存在するモードについて所定の選択肢を選択したり、複数の状態が存在するフラグの状態を設定する処理をいう。
例えば、主制御部５１は、スイッチ処理の一部として、ユーザの操作部５３に対する表示モードの選択指示操作に基づいて、表示モードとして通常モード又は３Ｄモードを選択する。
また例えば、主制御部５１は、スイッチ処理の一部として、再生フラグや停止フラグをＯＮ又はＯＦＦに設定する。具体的には例えば、主制御部５１は、ユーザの操作部５３に対する再生指示操作に基づいて、再生フラグをＯＮに設定する。また例えば、主制御部５１は、ユーザの操作部５３に対する一時停止指示操作に基づいて、再生フラグをＯＦＦに設定する。さらに例えば、主制御部５１は、ユーザの操作部５３に対する停止指示操作、又は、動画像の最後のフレームの再生終了の検出に基づいて、再生フラグをＯＦＦに設定すると共に停止フラグをＯＮに設定する。
なお、スイッチ処理には、ユーザによる指示操作が特になされていない場合、各種モードや各種フラグの設定は維持されること（特に切替が行われないこと）も含むものとする。
【００５６】
ステップＳ２３において、主制御部５１は、再生フラグがＯＮに設定されているか否かを判定する。
【００５７】
再生フラグがＯＦＦに設定されている場合、即ち、ユーザによる一時停止指示操作又は停止指示操作がなされた場合、ステップＳ２３においてＮＯであると判定され、後述するステップＳ２５の通常表示処理やステップＳ２６の３Ｄ表示処理が実行されずに、処理はステップＳ２７に進む。なお、ステップＳ２７以降の処理は後述する。
【００５８】
これに対して、再生フラグがＯＮである場合、即ち、ユーザによる再生指示がなされている場合、ステップＳ２３においてＹＥＳであると判定され、処理はステップＳ２４に進む。
【００５９】
ステップＳ２４において、主制御部５１は、表示モードとして３Ｄモードが設定されている否かを判定する。
【００６０】
３Ｄモードが設定されていない場合、即ち通常モードが設定されている場合、ステップＳ２４においてＮＯであると判定され、処理はステップＳ２５に進む。
ステップＳ２５において、主制御部５１は、通常表示処理を実行する。
通常表示処理とは、動画選択処理により選択された動画像を構成する各フレームのうち、表示対象の１フレームについて、通常の２次元画像を１フレーム周期に通常表示装置１１に表示させる処理をいう。
【００６１】
これに対して、３Ｄモードが設定されている場合、ステップＳ２４においてＹＥＳであると判定され、処理はステップＳ２６に進む。
ステップＳ２６において、主制御部５１は、３Ｄ表示処理を実行する。
３Ｄ表示処理とは、動画選択処理により選択された動画像を構成する各フレームのうち、表示対象の１フレームについて３Ｄ表示をするための処理をいう。具体的には、表示対象の１フレームについての左目用画像と右目用画像とをポジ画像として、１フレーム周期に時分割で順次通常表示装置１１に表示させると共に、当該ポジ画像に対するネガ画像を網膜表示装置１２からレーザビームにより網膜に直接表示させることで、３Ｄ表示を実現する処理が、３Ｄ表示処理である。
なお、本実施形態の３Ｄ表示処理のさらなる詳細については、図１０のフローチャートを参照して後述する。
【００６２】
このようにしてステップＳ２５の通常表示処理又はステップＳ２６の３Ｄ表示処理により、表示対象の１フレームが表示されると、処理はステップＳ２７に進む。
ステップＳ２７において、主制御部５１は、停止フラグがＯＮに設定されたか否かを判定する。
停止フラグがＯＦＦである場合、即ち、動画像の再生途中であって、ユーザの停止指示操作がなされていない場合、ステップＳ２７においてＮＯであると判定され、処理はステップＳ２２に戻され、それ以降の処理が繰り返される。
即ち、動画像の再生が終了するか、又は、ユーザの停止指示操作がなされるまでの間、ステップＳ２２乃至Ｓ２７のループ処理が繰り返し実行されることによって、動画像を構成する各フレームが順次表示されていく。
【００６３】
ここで、ステップＳ２５の通常処理及びステップＳ２６の３Ｄ表示処理の処理単位は、上述の如く、１フレームとされている。この場合、同一の動画像のデータを再生中に、フレーム毎に、通常表示と３Ｄ表示とを適宜切り換えることが容易に可能になる。
なお、ステップＳ２５の通常処理及びステップＳ２６の３Ｄ表示処理の処理単位は、特にフレームに限定されず、動画像を構成するフレームの総数よりも小さい単位であれば足りる。このような場合も、同一の動画像のデータを再生中に、処理単位毎に、通常表示と３Ｄ表示とを適宜切り換えることが容易に可能になる。
【００６４】
その後、動画像の再生途中にユーザの停止指示操作がなされるか、動画像の再生が終了すると、ステップＳ２２のスイッチ処理で停止フラグがＯＮになるため、次のステップＳ２７においてＹＥＳであると判定され、再生処理は終了する。即ち、図８のステップＳ４の処理は終了し、処理はステップＳ２に戻され、次に再生される動画像が選択される。
【００６５】
以上、図９を参照して、図８の画像表示処理のうち、ステップＳ４の再生処理の流れについて説明した。
次に、図１０を参照して、図９の再生処理のうち、ステップＳ２６の３Ｄ表示処理の詳細な流れについて説明する。
図１０は、３Ｄ表示処理の詳細な流れを説明するフローチャートである。
【００６６】
ステップＳ４１において、左右画像取得部６１は、１フレーム分の通常画像（左通常画像と右通常画像）のデータを取得する。
【００６７】
ステップＳ４２において、網膜表示画像生成部６４は、ユーザの視線位置情報を取得する。
【００６８】
ステップＳ４３において、網膜表示画像生成部６４は、ステップＳ４１の処理で取得された通常画像のデータと、ステップＳ４２の処理で取得された視線位置情報に基づいて、網膜画像（左通常画像のネガ画像と右通常画像のネガ画像）のデータを生成する。
【００６９】
ステップＳ４４において、通常表示制御部６２と網膜表示制御部６５は、互いに同期して、左通常画像を表示部２１に、当該左通常画像のネガ画像を網膜表示装置１２からユーザの右目の網膜に、同時に表示させる。
即ち、通常表示制御部６２は、ステップＳ４１の処理で取得された通常画像のデータに基づいて、当該通常画像のうち左通常画像を通常表示装置１１の表示部２１に表示させる。これと同期して、網膜表示制御部６５は、当該左通常画像のネガ画像を構成する各画素に対応するレーザビームを、網膜表示装置１２のビーム出力部３１Ｒから出力させる。すると、ユーザの右目の網膜においては、表示部２１に表示された左通常画像（ポジ画像）と、ビーム出力部３１Ｒからレーザビームとして出力された当該左通常画像のネガ画像とが合成され、その結果、白色の合成画像（図７参照）が映ることになる。これにより、ユーザは、右目の中心視野が視認できなくなる。
この時、ビーム出力部３１Ｌからは何も出力されないため、ユーザの左目の網膜には、表示部２１に表示された左通常画像のみが映る。
従って、ユーザは、左目に映った左通常画像のみを視認することになる。
【００７０】
ステップＳ４５において、通常表示制御部６２と網膜表示制御部６５は、互いに同期して、右通常画像を表示部２１に、当該右通常画像のネガ画像を網膜表示装置１２からユーザの左目の網膜に、同時に表示させる。
即ち、通常表示制御部６２は、ステップＳ４１の処理で取得された通常画像のデータに基づいて、当該通常画像のうち右通常画像を通常表示装置１１の表示部２１に表示させる。これと同期して、網膜表示制御部６５は、当該右通常画像のネガ画像を構成する各画素に対応するレーザビームを、網膜表示装置１２のビーム出力部３１Ｌから出力させる。すると、ユーザの左目の網膜においては、表示部２１に表示された右通常画像（ポジ画像）と、ビーム出力部３１Ｌからレーザビームとして出力された当該右通常画像のネガ画像とが合成され、その結果、白色の合成画像（図７参照）が映ることになる。これにより、ユーザは、左目の中心視野が視認できなくなる。
この時、ビーム出力部３１Ｒからは何も出力されないため、ユーザの右目の網膜には、表示部２１に表示された右通常画像のみが映る。
従って、ユーザは、右目に映った右通常画像のみを視認することになる。
【００７１】
このようにして３Ｄ表示処理が実行されると、表示対象の１フレームが３Ｄ表示されることになる。これにより、図９のステップＳ２６の３Ｄ表示処理は終了して、処理はステップＳ２７に進む。
即ち、ユーザによる指示操作が特に行われていなければ、ステップＳ２２乃至Ｓ２７のループ処理が繰り返し実行されて、動画像を構成する各フレームが順次３Ｄ表示されていく。
【００７２】
以上説明したように、本実施形態に係る画像処理システム１は、各画素を発光することで画像を表示する通常表示装置１１と、ユーザの網膜に画像を直接表示する網膜表示装置１２と、通常表示装置１１及び網膜表示装置１２に対する画像の表示を制御する画像表示制御装置１３と、を備える。
画像表示制御装置１３は、通常表示制御部６２と、網膜表示画像生成部６４と、網膜表示制御部６５と、を備える。
網膜表示画像生成部６４は、右目用画像（右通常画像）及び左目用画像（左通常画像）の各データに基づいて、右目用画像及び左目用画像の各々のネガ画像のデータを生成する。通常表示制御部６２は、右目用画像と左目用画像とを通常表示装置１１の表示部２１に交互に表示させる。網膜表示装置１２は、右目用画像が表示部２１に表示されているときには、右目用画像のネガ画像を網膜表示装置１２からユーザの左目の網膜に直接表示させ、左目用画像が表示部２１に表示されているときには、左目用画像のネガ画像を網膜表示装置１２からユーザの右目の網膜に直接表示させる。
これにより、右目用画像が表示部２１に表示されているときには、ユーザの右目には右目用画像（右通常画像）が映る一方、ユーザの左目には、右目用画像（ポジ画像）とそのネガ画像との合成画像、即ち白い画像（図７参照）が映る。従って、ユーザは、右目に映った右通常画像のみを視認することになる。
一方、左目用画像が表示部２１に表示されているときには、ユーザの左目には左目用画像（左通常画像）が映る一方、ユーザの右目には、左目用画像（ポジ画像）とそのネガ画像との合成画像、即ち白い画像（図７参照）が映る。従って、ユーザは、左目に映った左通常画像のみを視認することになる。
その結果、ユーザは、別途眼鏡を必要とせずに、広い視野で３Ｄ画像を視認できる。
【００７３】
ここで、通常表示装置１１は、従来から存在する一般のテレビジョン受像機をそのまま流用することができる。従って、ユーザは、網膜表示装置１２と画像表示制御装置１３とを後から追加するだけで、本実施形態の画像処理システム１を容易に構成して使用することが可能になる。
【００７４】
なお、本発明は上述の実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
【００７５】
例えば、上述の実施形態では、左右の画像を時分割表示する手法と、ポジ画像とネガ画像とを同時に表示する手法とを採用したが、本発明に適用可能な３Ｄ表示の手法はこれに限定されず、通常表示装置１１と網膜表示装置１２とを機能分担させて３Ｄ表示できる手法であれば足る。
具体的には例えば、通常表示装置１１には周辺視野画像のみを表示させ、網膜表示装置１２には中心視野画像のみを表示させる代替手法を採用することもできる。
ここで、中心視野画像とは、左通常画像及び右通常画像のそれぞれにおいて、視線位置情報により特定される中心視野に対応する画素のみを残した画像をいう。
また、周辺視野画像とは、図９のステップＳ２５の通常表示処理で用いられた２次元表示用の画像において、視線位置情報により特定される中心視野に対応する画素を全て黒くして、周辺視野に対応する画素のみを残した画像をいう。
また、中心視野画像と周辺視野画像の境界は、中心視野よりも周辺視野の方に入った領域への設定がなされれば足り、厳密な設定は不要である。ただし、両画像の境界が乖離して黒い境界線が生じてしまうよりは、両画像が境界領域で重複して表示された方が好適である。
この境界領域以外では、中心視野画像と周辺視野画像は、全く重複せずに認識されるので、それぞれの解像度は厳密に一致している必要はない。むしろ、周辺視野画像は常にぼやけて認識されるので、低い解像度でも構わないことになる。
【００７６】
その他例えば、上述の実施形態では、３Ｄ画像専用の眼鏡が不要となることを強調したが、特にこれに限定されず、眼鏡を網膜表示装置１２の代替装置として使う手法を採用することもできる。
即ち、左右のレンズに左右それぞれのネガ画像を表示できる機能を有する眼鏡を採用することで、上述の実施形態の画像処理システム１と同様の効果を奏することができる。
【００７７】
また例えば、上述の実施形態では、左右画像取得部６１は通常画像のデータを左右画像記憶部５２から取得するものとして説明したが、特にこれに限定されず、例えば、放送局から３Ｄ放映された通常画像のデータを受信して取得するようにしてもよい。
【００７８】
ところで、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
【００７９】
図１１は、上述した一連の処理をソフトウェアにより実行させる場合の、画像表示制御装置１３のハードウェア構成を示すブロック図である。
【００８０】
画像表示制御装置１３は、CPU（Central Processing Unit）１０１と、ROM（Read Only Memory）１０２と、RAM（Random Access Memory）１０３と、バス１０４と、入出力インターフェース１０５と、操作部５３と、記憶部１０６と、通信部１０７と、ドライブ１０８と、を備えている。
【００８１】
CPU１０１は、ROM１０２に記録されているプログラム、又は、記憶部１０６からRAM１０３にロードされたプログラムに従って各種の処理を実行する。
RAM１０３にはまた、CPU１０１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００８２】
例えば、上述した図２の主制御部５１は、CPU１０１というハードウェアと、ROM１０２等に記憶されたプログラム（ソフトウェア）との組み合わせとして構成することができる。
【００８３】
CPU１０１、ROM１０２、及びRAM１０３は、バス１０４を介して相互に接続されている。このバス１０４にはまた、入出力インターフェース１０５も接続されている。入出力インターフェース１０５には、上述した操作部４１の他、記憶部１０６、通信部１０７、及びドライブ１０８が接続されている。
【００８４】
記憶部１０６は、ハードディスク等で構成され、再生候補となる動画像のデータ等を記憶する。即ち、上述した図２の左右画像記憶部５２は、記憶部１０６の一領域として構成される。また、記憶部１０６は、各種情報処理に必要な各種データ、例えば、画像のデータ、各種フラグの値、閾値等も記憶する。
通信部１０９は、他の装置との間で行う通信を制御する。例えば本実施形態では、通信部１０９は、通常表示装置１１及び網膜表示装置１２（図２）の各々との間で行う通信を制御する。通信部１０９はまた、図示せぬインターネット等を介して図示せぬ他の装置との間で行う通信を制御する。
【００８５】
ドライブ１０８には、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなるリムーバブルメディア１１１が適宜装着される。ドライブ１０８によって読み出されたコンピュータプログラムは、必要に応じて記憶部１０６等にインストールされる。
【００８６】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
【００８７】
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布されるリムーバブルメディア１１１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディアは、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、CD-ROM（Compact Disk-Read Only Memory），DVD（Digital Versatile Disk）等により構成される。光磁気ディスクは、MD（Mini-Disk）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されているROM１０２や、記憶部１０６に含まれるハードディスク等で構成される。
【００８８】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【００８９】
また、本発明が適用される情報処理装置として、図１１のコンピュータの構成を有する画像表示制御装置１３を例として説明した。
しかしながら、本発明は、特にこれに限定されず、通常表示装置１１及び網膜表示装置１２と通信可能で、上述の情報処理を実行可能な電子機器一般に適用することができる。具体的には例えば、本発明は、各種録画再生装置、携帯型ナビゲーション装置、ポータブルゲーム機等に幅広く適用可能である。
【符号の説明】
【００９０】
１・・・画像処理システム、１１・・・通常表示装置、１２・・・網膜表示装置、１３・・・画像表示制御装置、２１・・・表示部、２２・・・音声出力部、３１・・・ビーム出力部、３２・・・視線追尾部、５１・・・主制御部、５２・・・左右画像記憶部、５３・・・操作部、６１・・・左右画像取得部、６２・・・通常表示制御部、６３・・・音声制御部、６４・・・網膜表示画像生成部、６５・・・網膜表示制御部、１０１・・・CPU、１０２・・・ROM、１０３・・・RAM、１０４・・・バス、１０５・・・入出力インターフェース、１０６・・・記憶部、１０７・・・通信部、１０８・・・ドライブ
【特許請求の範囲】
【請求項１】
画像を表示する第１表示装置と、
ユーザの網膜上に画像を結像させて前記画像を表示させる第２表示装置と、
前記第１表示装置及び前記第２表示装置を制御する表示制御装置と、
を備える情報処理システムであって、
前記表示制御装置は、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成し、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させ、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、
前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる、
制御を実行することを特徴とする画像処理システム。
【請求項２】
画像を表示する第１表示装置、及びユーザの網膜に画像を結像させて前記画像を表示させる第２表示装置を制御する情報処理装置であって、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成するネガ画像生成手段と、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させる制御を実行する第１表示制御手段と、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる制御を実行する第２表示制御手段と、
を備えることを特徴とする情報処理装置。
【請求項３】
画像を表示する第１表示装置、及びユーザの網膜に画像を結像させて前記画像を表示させる第２表示装置を制御する情報処理装置が実行する情報処理方法であって、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成するネガ画像生成ステップと、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させる制御を実行する第１表示制御ステップと、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる制御を実行する第２表示制御ステップと、
を含むことを特徴とする情報処理方法。
【請求項４】
画像を表示する第１表示装置、及びユーザの網膜に画像を結像させて前記画像を表示させる第２表示装置を制御するコンピュータに、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成するネガ画像生成機能と、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させる制御を実行する第１表示制御機能と、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる制御を実行する第２表示制御機能と、
を実現させるプログラム。
【請求項１】
画像を表示する第１表示装置と、
ユーザの網膜上に画像を結像させて前記画像を表示させる第２表示装置と、
前記第１表示装置及び前記第２表示装置を制御する表示制御装置と、
を備える情報処理システムであって、
前記表示制御装置は、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成し、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させ、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、
前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる、
制御を実行することを特徴とする画像処理システム。
【請求項２】
画像を表示する第１表示装置、及びユーザの網膜に画像を結像させて前記画像を表示させる第２表示装置を制御する情報処理装置であって、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成するネガ画像生成手段と、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させる制御を実行する第１表示制御手段と、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる制御を実行する第２表示制御手段と、
を備えることを特徴とする情報処理装置。
【請求項３】
画像を表示する第１表示装置、及びユーザの網膜に画像を結像させて前記画像を表示させる第２表示装置を制御する情報処理装置が実行する情報処理方法であって、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成するネガ画像生成ステップと、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させる制御を実行する第１表示制御ステップと、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる制御を実行する第２表示制御ステップと、
を含むことを特徴とする情報処理方法。
【請求項４】
画像を表示する第１表示装置、及びユーザの網膜に画像を結像させて前記画像を表示させる第２表示装置を制御するコンピュータに、
右目用画像及び左目用画像の各データに基づいて、前記右目用画像及び前記左目用画像の各々のネガ画像のデータを生成するネガ画像生成機能と、
前記右目用画像と前記左目用画像とを前記第１表示装置に交互に表示させる制御を実行する第１表示制御機能と、
前記右目用画像が前記第１表示装置に表示されているときには、前記右目用画像のネガ画像を前記第２表示装置から前記ユーザの左目の網膜に直接表示させ、前記左目用画像が前記第１表示装置に表示されているときには、前記左目用画像のネガ画像を前記第２表示装置から前記ユーザの右目の網膜に直接表示させる制御を実行する第２表示制御機能と、
を実現させるプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１３７６５３（Ｐ２０１２−１３７６５３Ａ）
【公開日】平成２４年７月１９日（２０１２．７．１９）
【国際特許分類】
【出願番号】特願２０１０−２９０４４８（Ｐ２０１０−２９０４４８）
【出願日】平成２２年１２月２７日（２０１０．１２．２７）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
【公開日】平成２４年７月１９日（２０１２．７．１９）
【国際特許分類】
【出願日】平成２２年１２月２７日（２０１０．１２．２７）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
[ Back to top ]