表示装置
【課題】使用者に手と操作部との位置関係を視認させることにより操作性を向上させた表示装置を提供する。
【解決手段】使用者の頭部に固定する頭部固定部８と、前記頭部固定部に配置された操作部１０と、使用者の目に入力する映像を表示する表示部１６と、前記操作部に近づけられた使用者の手の位置を検出する検出部１３と、前記検出部により検出された前記使用者の手の位置に基づいて、前記操作部と前記使用者の手との位置関係を示す画像を生成する画像生成部３０と、前記画像生成部により生成された前記画像を前記表示部に表示させる表示制御部４２とを備える。
【解決手段】使用者の頭部に固定する頭部固定部８と、前記頭部固定部に配置された操作部１０と、使用者の目に入力する映像を表示する表示部１６と、前記操作部に近づけられた使用者の手の位置を検出する検出部１３と、前記検出部により検出された前記使用者の手の位置に基づいて、前記操作部と前記使用者の手との位置関係を示す画像を生成する画像生成部３０と、前記画像生成部により生成された前記画像を前記表示部に表示させる表示制御部４２とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、表示装置に関するものである。
【背景技術】
【０００２】
従来、操作部をヘッドホンの側面に配置したヘッドマウントディスプレイ（以下、ＨＭＤという。）が知られている（例えば、特許文献１参照）。このＨＭＤにおいては、操作部の表面に凹凸が設けられており、この凹凸によって使用者は操作部に設けられたボタンの位置を確認している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−３２９６４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述のＨＭＤにおいては、使用者が操作部を操作するとき、自身の手と操作部との位置関係を視覚的に把握できないので、手探りで操作部を探してから操作部を操作する必要が有り、操作性が悪いという問題があった。
【０００５】
本発明の目的は、使用者に自身の手と操作部との位置関係を視認させることにより操作性を向上させた表示装置を提供することである。
【課題を解決するための手段】
【０００６】
本発明の表示装置は、使用者の頭部に固定する頭部固定部と、前記頭部固定部に配置された操作部と、使用者の目に入力する映像を表示する表示部と、前記操作部に近づけられた使用者の手の位置を検出する検出部と、前記検出部により検出された前記使用者の手の位置に基づいて、前記操作部と前記使用者の手との位置関係を示す画像を生成する画像生成部と、前記画像生成部により生成された前記画像を前記表示部に表示させる表示制御部とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、使用者に手と操作部との位置関係を認識させることができ、表示装置の操作性を向上させることができる。
【図面の簡単な説明】
【０００８】
【図１】第１の実施の形態に係るＨＭＤの外観を示す図である。
【図２】第１の実施の形態に係るＨＭＤのシステム構成を示すブロック図である。
【図３】第１の実施の形態に係るＨＭＤを装着した使用者を示す図である。
【図４】第１の実施の形態に係るＨＭＤによって使用者に提供される映像を示す図である。
【図５】使用者が操作部に指を近づけている様子を示す図である。
【図６】操作部に指が近づけられたときに表示部に表示される画面を示す図である。
【図７】使用者が操作部に２本の指を近づけている様子を示す図である。
【図８】操作部に２本の指が近づけられたときに表示部に表示される画面を示す図である。
【図９】右側に操作部が位置するようにＨＭＤを装着した使用者を示す図である。
【図１０】右側に操作部が位置するようにＨＭＤが装着されたときに表示部に表示される画面を示す図である。
【図１１】第２の実施の形態に係るＨＭＤの外観を示す図である。
【図１２】第３の実施の形態に係るＨＭＤを室内で利用する様子を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、本発明の実施の形態に係る表示装置としての単眼式のＨＭＤについて説明する。図１は第１の実施の形態に係るＨＭＤの外観を示す図である。図１に示すようにＨＭＤ２は、音声を出力する２つのヘッドホン４、６を有し、これらは頭部固定部８により結合されている。ヘッドホン４、６にはそれぞれ後述するスピーカ３２、３４（図２参照）が収納されている。頭部固定部８は、弾性を有してその弾性力によってヘッドホン４、６を使用者の左右の耳を押圧し、これによってＨＭＤ２が使用者の頭部に固定される。
【００１０】
また、ヘッドホン４の外側には操作部１０と、カメラ１３が設けられている。操作部１０は中央部に位置する回転型セレクタ１１と、回転型セレクタ１１の周りを囲むように上ボタン、下ボタン、右ボタン、左ボタンを配置した十字キー１２から構成されている。カメラ１３は操作部１０の上部に撮影方向を斜め下に向けて設けられている。これによりカメラ１３は、操作部１０の近傍を含んだ領域の撮影を行う。ヘッドホン６の外側にはディスプレイアーム１４が図示しない回転部を介して回転可能に設けられる。ディスプレイアーム１４の先端部には画像や映像を表示する表示部１６が設けられている。
【００１１】
表示部１６の内部には、画像や映像等の映像情報を電気的に表示するＬＣＤ１８、ＬＣＤ１８の背面に配置されたバックライト３８（図２参照）、反射鏡２０及び接眼レンズ２２が設けられ、バックライト３８から射出された照明光によってＬＣＤ１８に表示された映像情報を照明する。ＬＣＤ１８に表示された映像情報は、反射鏡２０により反射された後、接眼レンズ２２によりサイズが変更されて使用者の眼に入力される。
【００１２】
図２は第１の実施の形態に係るＨＭＤのシステム構成を示すブロック図である。図２に示すようにＨＭＤ２はＣＰＵ３０を備え、ＣＰＵ３０には操作部１０、ヘッドホン４、６に収納されたスピーカ３２、３４、表示部１６の内部に設けられたバックライト３８の制御を行うバックライトドライバ４０、ＬＣＤ１８に表示する映像の出力制御を行う表示制御部４２、ディスプレイアーム１４の回転方向を検知するセンサ４４、カメラ１３の制御を行うカメラドライバ４６、メモリ４８が接続されている。
【００１３】
メモリ４８には、カメラ１３によって撮影された映像が記憶される他、ＨＭＤ２を装着した頭部を示す頭部のイメージ画像の情報、操作部１０を操作する手のイメージ画像の情報、及び使用者の手と操作部１０との位置関係を示す画像を生成するための情報が記憶される。頭部のイメージ画像の情報は、操作部１０が右側頭部に位置する場合に対応した頭部のイメージ画像、及び操作部１０が左側頭部に位置する場合に対応した頭部のイメージ画像の情報である。手のイメージ画像の情報は、右手及び左手の人差し指だけを伸ばした手の形状や、人差し指と中指とを伸ばした手の形状等の手のイメージ画像の情報である。
【００１４】
次に、図面を参照して第１の実施の形態に係るＨＭＤ２における手と操作部との位置関係を示した画像の表示について説明する。図３は第１の実施の形態に係るＨＭＤを装着した使用者を示す図である。この実施の形態においては図３に示すように表示部１６が使用者の右眼前方にあり、かつ操作部１０が左側頭部に位置する向きでＨＭＤ２が使用者の頭部に装着されているものとする。使用者が図示しない電源スイッチをオンするとＣＰＵ３０が起動してカメラ１３によって撮影された画像に基づいて使用者の手と操作部１０との位置関係を示す画像である位置画像を生成し、その位置画像を含んだ映像を表示部１６のＬＣＤ１８に表示して使用者の右眼に入力することによって映像情報を提供する。
【００１５】
図４は第１の実施の形態に係るＨＭＤによって使用者に提供される映像を示す図である。ＣＰＵ３０は表示制御部４２を制御して図４に示すように文字入力画面６０と位置画像６２とを分割表示した映像を表示部１６に表示させる。なお、文字入力画面６０は、入力する文字を選択させる選択文字欄６０ａ、選択文字欄６０ａにおいて入力対象を示すカーソル６０ｂ、入力された文字を表示する文字入力欄６０ｃからなり、使用者が文字入力を行う画面である。
【００１６】
ＣＰＵ３０は、使用者の左側頭部に操作部１０が位置することに対応させて文字入力画面６０を右側、位置画像６２を左側に配置した映像を生成し、表示制御部４２を制御して生成した映像を表示部１６に表示させる。ここで位置画像６２の生成について説明する。先ずＣＰＵ３０は、起動時にセンサ４４により検出されたディスプレイアーム１４の回転方向の検知によって、頭部固定部８が使用者の頭部に装着された向きを認識する。ＣＰＵ３０は頭部固定部８が装着された向きに基づき、操作部１０が左側頭部に位置する頭部のイメージ画像の情報をメモリ４８から読み出す。
【００１７】
次に、ＣＰＵ３０は、カメラ１３により撮影された画像に使用者の手が映っているか否かを検出する。そして撮影された画像に手が映っていないとき、ＣＰＵ３０は、頭部のイメージ画像の情報だけを用いて位置画像６２を生成する。そして表示部１６に表示される位置画像６２には、図４に示すようにＨＭＤ２を装着した頭部のイメージ画像だけが示される。表示される頭部のイメージ画像は、操作部１０を示す箇所が前面で表示されるように横向き、つまり本実施の形態においては左向きとなっている。
【００１８】
一方、撮影された画像に手が映っているとき、ＣＰＵ３０は、撮影された画像に基づいて操作部１０に近づけられた使用者の手の位置を検出する。即ちＣＰＵ３０は、使用者の指先の位置を検出し、その検出した位置を後述する手のイメージ画像の配置場所として定める。またＣＰＵ３０は、撮影された画像に基づいて伸びている指の本数を検出する。
【００１９】
ＣＰＵ３０は、映っている手が左手または右手の何れであるかを頭部固定部８が装着された向きに基づいて特定する。ここでは、操作部１０が使用者の左側頭部に位置するため、ＣＰＵ３０は、映っている手を左手として特定する。ＣＰＵ３０は、検出した指の本数と特定した手とに基づいてメモリ４８に記憶されている手のイメージ画像の情報を検索し、該当する手のイメージ画像の情報を読み出す。例えば指を１本伸ばした手が映っていた場合、ＣＰＵ３０は左手の人差し指を伸ばした手のイメージ画像の情報を読み出し、指を２本伸ばした手が映っていた場合、左手の人差し指と中指とを伸ばした手のイメージ画像の情報を読み出す。
【００２０】
ＣＰＵ３０は、読み出した頭部のイメージ画像の情報と手のイメージ画像の情報及び定めた配置場所に基づいて手のイメージ画像を頭部のイメージ画像に重畳させた位置画像６２を生成する。例えば使用者の指先が回転型セレクタ１１に近接した位置にある場合、ＣＰＵ３０は、回転型セレクタ１１の場所に指先が重なるように頭部のイメージ画像に手のイメージ画像を重畳させた位置画像６２を生成する。また、ＣＰＵ３０は、使用者が操作部１０に近づけている手を動かしたときに、その実際の手の移動に対応して手のイメージ画像が移動するように、配置場所を定める処理を継続して行いその処理結果に応じて位置画像６２を更新する。
【００２１】
そのため、表示部１６に表示される位置画像６２は、例えば使用者が図５に示すように指を１本伸ばした手を操作部１０に近づけた場合には、図６に示すように人差し指だけが伸びている手のイメージ画像が頭部のイメージ画像に重畳した画像となる。そして使用者が操作部１０に近づけている手を動かした場合、位置画像６２は、頭部のイメージ画像に重畳する手のイメージ画像が実際の使用者の手の動きに応じた場所へと移動する画像となる。
【００２２】
本実施の形態によれば、使用者は表示部１６に表示された位置画像６２によって自身の手と操作部１０との位置関係を視認することができるため、操作部１０の操作性が向上する。
【００２３】
なお、上述の実施の形態においては、使用者が指を１本伸ばした手を操作部１０に近づけたときの位置画像６２を生成しているが、図７に示すように２本の指が操作部１０に近づけられたとき、ＣＰＵ３０は、図８に示すように人差し指と中指が伸びる手のイメージ画像を頭部のイメージ画像に重畳させた位置画像６２を生成する。このときＣＰＵ３０は、２本の指先の位置と、手のイメージ画像の人差し指及び中指の指先の位置とが対応するように手のイメージ画像の配置場所を定め、位置画像６２を生成する。これにより使用者は２本の指で操作部１０を操作するときに、各指と操作部１０との位置関係を視認することができるため、操作部１０の操作性が向上する。
【００２４】
また、上述の実施の形態においては、指を1本伸ばした手が映っていた場合、ＣＰＵ３０は左手の人差し指を伸ばした手のイメージ画像の情報を読み出していたが、そうでなくてもよい。例えば、あらかじめ全ての指において、指を1本だけを伸ばした手の形状のイメージ画像をメモリ４８に記憶させておく。そして、操作部１０を操作する使用者の手をカメラ１３で撮影し、使用者が伸ばしている指と対応する手の形状の画像を手のイメージ画像として使用してもよい。また指を２本以上伸ばした手が映っていた場合も同様に、あらかじ様々な指を伸ばした手の形状のイメージ画像をメモリ４８に記憶させておき、使用者が伸ばした指と同じ指を伸ばした手の形状の画像をイメージ画像として使用してもよい。また、指を3本以上伸ばした指先の位置と、手のイメージ画像の指先の位置とが対応するように手のイメージ画像の配置場所を定め、位置画像６２を生成してもよい。これにより使用者は、各指と操作部１０との位置関係がわかりやすくなり、操作部１０の操作性が向上する。
【００２５】
また、上述の実施の形態においては、使用者の左側頭部に操作部１０を位置させているが、図９に示すように操作部１０を右側頭部に位置させる場合、ＣＰＵ３０は、図１０に示すように右向きの頭部のイメージ画像に右手のイメージ画像を重畳させた位置画像６２を生成する。また右側頭部に操作部１０が位置しているので、ＣＰＵ３０は、表示制御部４２を制御して文字入力画面６０を左側、位置画像６２を右側に配置した映像を表示部１６に表示させる。
【００２６】
また、上述の実施の形態においては、カメラ１３によって撮影した画像に基づいて操作部１０から手まで距離を検出し、その距離に応じて手のイメージ画像の大きさを変更するようにしてもよい。例えば手と操作部１０との間隔が広くなると手のイメージ画像を小さくし、手と操作部１０との間隔が狭くなると手のイメージ画像を大きくする。最終的に手が操作部１０に接触したときには、指先が十字キーの各ボタンと略同一の大きさになるように手のイメージ画像の大きさを決定する。これにより使用者は手が操作部１０からどの程度離れているかを認識することができる。
【００２７】
さらに、上述の実施の形態においては、カメラ１３を操作部１０の上部に設けたが、操作部１０から回転型セレクタ１１を取り除いてその部分にカメラ１３を配置してもよい。このようにすればカメラ１３が操作部１０の中央部に配置されるため、ＣＰＵ３０は操作部１０と使用者の手との位置関係をより正確に検出できる。また操作部１０の表面を移動する指の動きをカメラ１３で撮影し、その指の動きを回転型セレクタ１１を操作する動きとして認識するようにしてもよい。
【００２８】
また、カメラ１３の代わりに、赤外線カメラを設けてもよい。この場合には操作部１０の表面を赤外線のみを透過するフィルタによって形成し、操作部１０の内部に赤外線カメラを配置する。このようにすれば、操作部１０に近づけられる指から出る赤外線を赤外線カメラによって撮影し、使用者の手を検知することができ、更にカメラが操作部１０の内部に隠れるのでＨＭＤの外観が向上する。
【００２９】
また、上述の実施の形態においては、カメラ１３を操作部１０の上部に設けているが、ＨＭＤ２の前後方向に向いたヘッドホン４の側面のどちらか一方にカメラ１３を設けてもよい。この場合には操作部１０に近づけられた使用者の手がカメラ１３による撮影視野内に入るようにカメラ１３を広角が撮影できるカメラとする。
【００３０】
次に第２の実施の形態に係るＨＭＤ２について説明する。本実施の形態に係るＨＭＤ２は、第１の実施の形態のカメラ１３の代わりに近接センサ７０を設けたものである。なお第１の実施の形態と同一の構成については同一の符号を付してその説明を省略する。図１１は第２の実施の形態に係るＨＭＤの外観を示す図である。図１１に示す近接センサ７０は、可撓性を有するパネルを備えた静電容量方式のセンサであり、操作部１０に近づけられた使用者の手を検知する。
【００３１】
近接センサ７０のパネルは、操作部１０の表面に重ねて取り付けられ、使用者による回転型セレクタ１１の操作を妨げないように回転型セレクタ１１に重なる部分が切り取られた形状となっている。なお近接センサ７０に可撓性を有するパネルを用いているため、使用者が十字キー１２のボタン入力のためにパネルの表面を押圧したとき、ボタンを押下した感覚が使用者に伝わるようになっている。
【００３２】
次に第２の実施の形態における位置画像の生成について説明する。ＣＰＵ３０は、頭部のイメージ画像の情報を第１の実施の形態と同様の方法によってメモリ４８から読み出す。またＣＰＵ３０は使用者が操作部１０をどちらの手で操作しているかを第１の実施の形態と同様の方法によって特定する。
【００３３】
図１１に示すように使用者が操作部１０に手を近づけたとき、ＣＰＵ３０は、近接センサ７０により使用者の手を検知する。例えば使用者が指を１本伸ばして操作部１０に近づけた場合、ＣＰＵ３０は、近接センサ７０による検知結果に基づいて指を１本伸ばした手が近づけられたことを検出し、メモリ４８に記憶されている手のイメージ画像の情報から使用者が操作部１０の操作に用いている右手または左手の人差し指を１本伸ばした手のイメージ画像を読み出す。
【００３４】
さらにＣＰＵ３０は、近接センサ７０による検知結果に基づいて使用者の手の指先の位置を特定し、手のイメージ画像の配置場所を定める。ＣＰＵ３０は、頭部のイメージ画像の情報と手のイメージ画像の情報及び定めた配置場所に基づいて、頭部のイメージ画像に手のイメージ画像を重畳させた位置画像６２を生成する。
【００３５】
この第２の実施の形態によれば、使用者は位置画像６２によって自身の手と操作部１０との位置関係を視認することができるため操作部１０の操作性が向上する。
【００３６】
次に第３の実施の形態に係るＨＭＤ２について説明する。ここでは特定の空間内でＨＭＤ２を利用する使用者を外部カメラ８２により撮影し、ＣＰＵ３０は、撮影された画像に基づいて位置画像６２を生成する。そのため図１２に示すように使用者は特定の空間内としての部屋８０の中でＨＭＤ２を利用する。部屋８０内には、中央部に机８１、机８１の左右両側に外部カメラ８２が配置されている。ＨＭＤ２と外部カメラ８２は、互いに無線通信を行う通信機能を備えており、これにより外部カメラ８２によって撮影された画像はＨＭＤ２に送信され、ＨＭＤ２により受信される。外部カメラ８２が使用者の左右両側に配置されていることから、外部カメラ８２により使用者が操作部１０に手を近づける様子を確実に撮影することができる。
【００３７】
次に第３の実施の形態における位置画像の生成について説明する。ＣＰＵ３０は、頭部のイメージ画像の情報を第１の実施の形態と同様の方法によってメモリ４８から読み出す。またＣＰＵ３０は使用者が操作部１０をどちらの手で操作しているかを第１の実施の形態と同様の方法によって特定する。ＣＰＵ３０は、外部カメラ８２から画像を受信し、その画像に基づいて使用者が操作部１０に手を近づけているか否かを検出する。
【００３８】
使用者が手を操作部１０に近づけた場合、ＣＰＵ３０は、外部カメラ８２によって撮影された画像に基づき操作部１０に近づけられている使用者の手の位置と、操作部１０に近づけられた指の本数とを検出する。ＣＰＵ３０は、特定した使用者が操作部１０の操作に用いている手と、検出した指の本数とに基づいてメモリ４６を検索し、該当する手のイメージ画像の情報を読み出す。ＣＰＵ３０は検出した使用者の手の位置に基づいて手のイメージ画像の配置場所を定める。そしてＣＰＵ３０は、読み出した頭部のイメージ画像の情報と手のイメージ画像の情報及び定めた配置場所に従って手のイメージ画像を頭部のイメージ画像に重畳させた位置画像６２を生成する。
【００３９】
このように第３の実施の形態によれば、特定の空間内でＨＭＤ２が使用されるときにはカメラ１３や近接センサ７０を利用しなくても、外部カメラ８２で撮影した画像によって位置画像６２を生成することができる。使用者は位置画像６２によって自身の手と操作部１０との位置関係を視認できるため操作部１０の操作性が向上する。
【００４０】
なお、上述の各実施の形態においては、文字入力画面６０と位置画像６２とを分割表示した映像を表示する場合を例に説明したが、動画の表示中に動画と位置画像６２とを分割表示すると動画が小さくなり使用者にとって見難くなる。そのため動画を表示しているときは位置画像６２を半透明にして表示中の動画に重畳させて表示させてもよい。このように文字入力画面６０や動画等の映像の種類に応じて位置画像６２の表示方法を変更すれば、使用者による映像の鑑賞を妨げることがない。
【００４１】
また、位置画像６２を動画に重畳させる場合、使用者が手を操作部１０に近づけている間だけ位置画像６２を表示させるようにすれば、位置画像６２が使用者の動画鑑賞の妨げになるのを防止することができる。同様に、分割表示した映像を表示する場合においても、使用者が手を操作部１０に近づけている間だけ位置画像６２を表示させるようにすれば位置画像６２が使用者の映像の鑑賞の妨げになるのを防止することができる。
【００４２】
また、位置画像６２を半透明にして動画に重畳させる場合に、ＨＭＤ２の電源スイッチをオンした回数や、回転型セレクタ１１の操作回数や十字キー１２の押下回数等の操作部１０の操作回数に基づく熟練度を設定し、使用者の熟練度に応じて位置画像６２の透過率を変化させてもよい。そして熟練度が高い程、動画の透過率が高くなるようにして最終的に位置画像６２を表示させないようにすれば、操作に慣れて位置画像６２を必要としない使用者にとってはより快適に動画を鑑賞することができ、利便性が向上する。
【００４３】
さらに、上述したカメラ１３と近接センサ７０の両方をＨＭＤ２に設けて操作部１０と使用者の手との位置関係を検出してもよい。このようにすれば近接センサ７０が検知できない程度に手が操作部１０から離れているときはカメラ１３によって撮影した映像に基づいて手の位置を検出し、手が近づきすぎてカメラ１３により撮影される画像に指先が映らないときは近接センサ７０による検知に基づいて手の位置を検出する。これにより更に正確に操作部１０と手との位置関係を検出することができる。
【００４４】
また、上述の各実施の形態においては、ヘッドホンを備えたＨＭＤにカメラ１３や近接センサ７０を設けたが、これに限らず眼鏡型でつるの部分に操作部を設けたＨＭＤにカメラ１３や近接センサ７０を設け、カメラ１３によって撮影した画像や、近接センサ７０による検知結果に基づいて位置画像６２を生成すれば、上述した各実施例と同様に使用者は位置画像６２によって自身の手と操作部１０との位置関係を視認できるため操作部１０の操作性が向上する。
【符号の説明】
【００４５】
２…ＨＭＤ、１０…操作部、１３…カメラ、１１…回転型セレクタ、１２…十字キー、１６…表示部、３０…ＣＰＵ、４２…表示制御部、４８…メモリ、７０…近接センサ、８２…外部カメラ。
【技術分野】
【０００１】
本発明は、表示装置に関するものである。
【背景技術】
【０００２】
従来、操作部をヘッドホンの側面に配置したヘッドマウントディスプレイ（以下、ＨＭＤという。）が知られている（例えば、特許文献１参照）。このＨＭＤにおいては、操作部の表面に凹凸が設けられており、この凹凸によって使用者は操作部に設けられたボタンの位置を確認している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−３２９６４０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述のＨＭＤにおいては、使用者が操作部を操作するとき、自身の手と操作部との位置関係を視覚的に把握できないので、手探りで操作部を探してから操作部を操作する必要が有り、操作性が悪いという問題があった。
【０００５】
本発明の目的は、使用者に自身の手と操作部との位置関係を視認させることにより操作性を向上させた表示装置を提供することである。
【課題を解決するための手段】
【０００６】
本発明の表示装置は、使用者の頭部に固定する頭部固定部と、前記頭部固定部に配置された操作部と、使用者の目に入力する映像を表示する表示部と、前記操作部に近づけられた使用者の手の位置を検出する検出部と、前記検出部により検出された前記使用者の手の位置に基づいて、前記操作部と前記使用者の手との位置関係を示す画像を生成する画像生成部と、前記画像生成部により生成された前記画像を前記表示部に表示させる表示制御部とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、使用者に手と操作部との位置関係を認識させることができ、表示装置の操作性を向上させることができる。
【図面の簡単な説明】
【０００８】
【図１】第１の実施の形態に係るＨＭＤの外観を示す図である。
【図２】第１の実施の形態に係るＨＭＤのシステム構成を示すブロック図である。
【図３】第１の実施の形態に係るＨＭＤを装着した使用者を示す図である。
【図４】第１の実施の形態に係るＨＭＤによって使用者に提供される映像を示す図である。
【図５】使用者が操作部に指を近づけている様子を示す図である。
【図６】操作部に指が近づけられたときに表示部に表示される画面を示す図である。
【図７】使用者が操作部に２本の指を近づけている様子を示す図である。
【図８】操作部に２本の指が近づけられたときに表示部に表示される画面を示す図である。
【図９】右側に操作部が位置するようにＨＭＤを装着した使用者を示す図である。
【図１０】右側に操作部が位置するようにＨＭＤが装着されたときに表示部に表示される画面を示す図である。
【図１１】第２の実施の形態に係るＨＭＤの外観を示す図である。
【図１２】第３の実施の形態に係るＨＭＤを室内で利用する様子を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して、本発明の実施の形態に係る表示装置としての単眼式のＨＭＤについて説明する。図１は第１の実施の形態に係るＨＭＤの外観を示す図である。図１に示すようにＨＭＤ２は、音声を出力する２つのヘッドホン４、６を有し、これらは頭部固定部８により結合されている。ヘッドホン４、６にはそれぞれ後述するスピーカ３２、３４（図２参照）が収納されている。頭部固定部８は、弾性を有してその弾性力によってヘッドホン４、６を使用者の左右の耳を押圧し、これによってＨＭＤ２が使用者の頭部に固定される。
【００１０】
また、ヘッドホン４の外側には操作部１０と、カメラ１３が設けられている。操作部１０は中央部に位置する回転型セレクタ１１と、回転型セレクタ１１の周りを囲むように上ボタン、下ボタン、右ボタン、左ボタンを配置した十字キー１２から構成されている。カメラ１３は操作部１０の上部に撮影方向を斜め下に向けて設けられている。これによりカメラ１３は、操作部１０の近傍を含んだ領域の撮影を行う。ヘッドホン６の外側にはディスプレイアーム１４が図示しない回転部を介して回転可能に設けられる。ディスプレイアーム１４の先端部には画像や映像を表示する表示部１６が設けられている。
【００１１】
表示部１６の内部には、画像や映像等の映像情報を電気的に表示するＬＣＤ１８、ＬＣＤ１８の背面に配置されたバックライト３８（図２参照）、反射鏡２０及び接眼レンズ２２が設けられ、バックライト３８から射出された照明光によってＬＣＤ１８に表示された映像情報を照明する。ＬＣＤ１８に表示された映像情報は、反射鏡２０により反射された後、接眼レンズ２２によりサイズが変更されて使用者の眼に入力される。
【００１２】
図２は第１の実施の形態に係るＨＭＤのシステム構成を示すブロック図である。図２に示すようにＨＭＤ２はＣＰＵ３０を備え、ＣＰＵ３０には操作部１０、ヘッドホン４、６に収納されたスピーカ３２、３４、表示部１６の内部に設けられたバックライト３８の制御を行うバックライトドライバ４０、ＬＣＤ１８に表示する映像の出力制御を行う表示制御部４２、ディスプレイアーム１４の回転方向を検知するセンサ４４、カメラ１３の制御を行うカメラドライバ４６、メモリ４８が接続されている。
【００１３】
メモリ４８には、カメラ１３によって撮影された映像が記憶される他、ＨＭＤ２を装着した頭部を示す頭部のイメージ画像の情報、操作部１０を操作する手のイメージ画像の情報、及び使用者の手と操作部１０との位置関係を示す画像を生成するための情報が記憶される。頭部のイメージ画像の情報は、操作部１０が右側頭部に位置する場合に対応した頭部のイメージ画像、及び操作部１０が左側頭部に位置する場合に対応した頭部のイメージ画像の情報である。手のイメージ画像の情報は、右手及び左手の人差し指だけを伸ばした手の形状や、人差し指と中指とを伸ばした手の形状等の手のイメージ画像の情報である。
【００１４】
次に、図面を参照して第１の実施の形態に係るＨＭＤ２における手と操作部との位置関係を示した画像の表示について説明する。図３は第１の実施の形態に係るＨＭＤを装着した使用者を示す図である。この実施の形態においては図３に示すように表示部１６が使用者の右眼前方にあり、かつ操作部１０が左側頭部に位置する向きでＨＭＤ２が使用者の頭部に装着されているものとする。使用者が図示しない電源スイッチをオンするとＣＰＵ３０が起動してカメラ１３によって撮影された画像に基づいて使用者の手と操作部１０との位置関係を示す画像である位置画像を生成し、その位置画像を含んだ映像を表示部１６のＬＣＤ１８に表示して使用者の右眼に入力することによって映像情報を提供する。
【００１５】
図４は第１の実施の形態に係るＨＭＤによって使用者に提供される映像を示す図である。ＣＰＵ３０は表示制御部４２を制御して図４に示すように文字入力画面６０と位置画像６２とを分割表示した映像を表示部１６に表示させる。なお、文字入力画面６０は、入力する文字を選択させる選択文字欄６０ａ、選択文字欄６０ａにおいて入力対象を示すカーソル６０ｂ、入力された文字を表示する文字入力欄６０ｃからなり、使用者が文字入力を行う画面である。
【００１６】
ＣＰＵ３０は、使用者の左側頭部に操作部１０が位置することに対応させて文字入力画面６０を右側、位置画像６２を左側に配置した映像を生成し、表示制御部４２を制御して生成した映像を表示部１６に表示させる。ここで位置画像６２の生成について説明する。先ずＣＰＵ３０は、起動時にセンサ４４により検出されたディスプレイアーム１４の回転方向の検知によって、頭部固定部８が使用者の頭部に装着された向きを認識する。ＣＰＵ３０は頭部固定部８が装着された向きに基づき、操作部１０が左側頭部に位置する頭部のイメージ画像の情報をメモリ４８から読み出す。
【００１７】
次に、ＣＰＵ３０は、カメラ１３により撮影された画像に使用者の手が映っているか否かを検出する。そして撮影された画像に手が映っていないとき、ＣＰＵ３０は、頭部のイメージ画像の情報だけを用いて位置画像６２を生成する。そして表示部１６に表示される位置画像６２には、図４に示すようにＨＭＤ２を装着した頭部のイメージ画像だけが示される。表示される頭部のイメージ画像は、操作部１０を示す箇所が前面で表示されるように横向き、つまり本実施の形態においては左向きとなっている。
【００１８】
一方、撮影された画像に手が映っているとき、ＣＰＵ３０は、撮影された画像に基づいて操作部１０に近づけられた使用者の手の位置を検出する。即ちＣＰＵ３０は、使用者の指先の位置を検出し、その検出した位置を後述する手のイメージ画像の配置場所として定める。またＣＰＵ３０は、撮影された画像に基づいて伸びている指の本数を検出する。
【００１９】
ＣＰＵ３０は、映っている手が左手または右手の何れであるかを頭部固定部８が装着された向きに基づいて特定する。ここでは、操作部１０が使用者の左側頭部に位置するため、ＣＰＵ３０は、映っている手を左手として特定する。ＣＰＵ３０は、検出した指の本数と特定した手とに基づいてメモリ４８に記憶されている手のイメージ画像の情報を検索し、該当する手のイメージ画像の情報を読み出す。例えば指を１本伸ばした手が映っていた場合、ＣＰＵ３０は左手の人差し指を伸ばした手のイメージ画像の情報を読み出し、指を２本伸ばした手が映っていた場合、左手の人差し指と中指とを伸ばした手のイメージ画像の情報を読み出す。
【００２０】
ＣＰＵ３０は、読み出した頭部のイメージ画像の情報と手のイメージ画像の情報及び定めた配置場所に基づいて手のイメージ画像を頭部のイメージ画像に重畳させた位置画像６２を生成する。例えば使用者の指先が回転型セレクタ１１に近接した位置にある場合、ＣＰＵ３０は、回転型セレクタ１１の場所に指先が重なるように頭部のイメージ画像に手のイメージ画像を重畳させた位置画像６２を生成する。また、ＣＰＵ３０は、使用者が操作部１０に近づけている手を動かしたときに、その実際の手の移動に対応して手のイメージ画像が移動するように、配置場所を定める処理を継続して行いその処理結果に応じて位置画像６２を更新する。
【００２１】
そのため、表示部１６に表示される位置画像６２は、例えば使用者が図５に示すように指を１本伸ばした手を操作部１０に近づけた場合には、図６に示すように人差し指だけが伸びている手のイメージ画像が頭部のイメージ画像に重畳した画像となる。そして使用者が操作部１０に近づけている手を動かした場合、位置画像６２は、頭部のイメージ画像に重畳する手のイメージ画像が実際の使用者の手の動きに応じた場所へと移動する画像となる。
【００２２】
本実施の形態によれば、使用者は表示部１６に表示された位置画像６２によって自身の手と操作部１０との位置関係を視認することができるため、操作部１０の操作性が向上する。
【００２３】
なお、上述の実施の形態においては、使用者が指を１本伸ばした手を操作部１０に近づけたときの位置画像６２を生成しているが、図７に示すように２本の指が操作部１０に近づけられたとき、ＣＰＵ３０は、図８に示すように人差し指と中指が伸びる手のイメージ画像を頭部のイメージ画像に重畳させた位置画像６２を生成する。このときＣＰＵ３０は、２本の指先の位置と、手のイメージ画像の人差し指及び中指の指先の位置とが対応するように手のイメージ画像の配置場所を定め、位置画像６２を生成する。これにより使用者は２本の指で操作部１０を操作するときに、各指と操作部１０との位置関係を視認することができるため、操作部１０の操作性が向上する。
【００２４】
また、上述の実施の形態においては、指を1本伸ばした手が映っていた場合、ＣＰＵ３０は左手の人差し指を伸ばした手のイメージ画像の情報を読み出していたが、そうでなくてもよい。例えば、あらかじめ全ての指において、指を1本だけを伸ばした手の形状のイメージ画像をメモリ４８に記憶させておく。そして、操作部１０を操作する使用者の手をカメラ１３で撮影し、使用者が伸ばしている指と対応する手の形状の画像を手のイメージ画像として使用してもよい。また指を２本以上伸ばした手が映っていた場合も同様に、あらかじ様々な指を伸ばした手の形状のイメージ画像をメモリ４８に記憶させておき、使用者が伸ばした指と同じ指を伸ばした手の形状の画像をイメージ画像として使用してもよい。また、指を3本以上伸ばした指先の位置と、手のイメージ画像の指先の位置とが対応するように手のイメージ画像の配置場所を定め、位置画像６２を生成してもよい。これにより使用者は、各指と操作部１０との位置関係がわかりやすくなり、操作部１０の操作性が向上する。
【００２５】
また、上述の実施の形態においては、使用者の左側頭部に操作部１０を位置させているが、図９に示すように操作部１０を右側頭部に位置させる場合、ＣＰＵ３０は、図１０に示すように右向きの頭部のイメージ画像に右手のイメージ画像を重畳させた位置画像６２を生成する。また右側頭部に操作部１０が位置しているので、ＣＰＵ３０は、表示制御部４２を制御して文字入力画面６０を左側、位置画像６２を右側に配置した映像を表示部１６に表示させる。
【００２６】
また、上述の実施の形態においては、カメラ１３によって撮影した画像に基づいて操作部１０から手まで距離を検出し、その距離に応じて手のイメージ画像の大きさを変更するようにしてもよい。例えば手と操作部１０との間隔が広くなると手のイメージ画像を小さくし、手と操作部１０との間隔が狭くなると手のイメージ画像を大きくする。最終的に手が操作部１０に接触したときには、指先が十字キーの各ボタンと略同一の大きさになるように手のイメージ画像の大きさを決定する。これにより使用者は手が操作部１０からどの程度離れているかを認識することができる。
【００２７】
さらに、上述の実施の形態においては、カメラ１３を操作部１０の上部に設けたが、操作部１０から回転型セレクタ１１を取り除いてその部分にカメラ１３を配置してもよい。このようにすればカメラ１３が操作部１０の中央部に配置されるため、ＣＰＵ３０は操作部１０と使用者の手との位置関係をより正確に検出できる。また操作部１０の表面を移動する指の動きをカメラ１３で撮影し、その指の動きを回転型セレクタ１１を操作する動きとして認識するようにしてもよい。
【００２８】
また、カメラ１３の代わりに、赤外線カメラを設けてもよい。この場合には操作部１０の表面を赤外線のみを透過するフィルタによって形成し、操作部１０の内部に赤外線カメラを配置する。このようにすれば、操作部１０に近づけられる指から出る赤外線を赤外線カメラによって撮影し、使用者の手を検知することができ、更にカメラが操作部１０の内部に隠れるのでＨＭＤの外観が向上する。
【００２９】
また、上述の実施の形態においては、カメラ１３を操作部１０の上部に設けているが、ＨＭＤ２の前後方向に向いたヘッドホン４の側面のどちらか一方にカメラ１３を設けてもよい。この場合には操作部１０に近づけられた使用者の手がカメラ１３による撮影視野内に入るようにカメラ１３を広角が撮影できるカメラとする。
【００３０】
次に第２の実施の形態に係るＨＭＤ２について説明する。本実施の形態に係るＨＭＤ２は、第１の実施の形態のカメラ１３の代わりに近接センサ７０を設けたものである。なお第１の実施の形態と同一の構成については同一の符号を付してその説明を省略する。図１１は第２の実施の形態に係るＨＭＤの外観を示す図である。図１１に示す近接センサ７０は、可撓性を有するパネルを備えた静電容量方式のセンサであり、操作部１０に近づけられた使用者の手を検知する。
【００３１】
近接センサ７０のパネルは、操作部１０の表面に重ねて取り付けられ、使用者による回転型セレクタ１１の操作を妨げないように回転型セレクタ１１に重なる部分が切り取られた形状となっている。なお近接センサ７０に可撓性を有するパネルを用いているため、使用者が十字キー１２のボタン入力のためにパネルの表面を押圧したとき、ボタンを押下した感覚が使用者に伝わるようになっている。
【００３２】
次に第２の実施の形態における位置画像の生成について説明する。ＣＰＵ３０は、頭部のイメージ画像の情報を第１の実施の形態と同様の方法によってメモリ４８から読み出す。またＣＰＵ３０は使用者が操作部１０をどちらの手で操作しているかを第１の実施の形態と同様の方法によって特定する。
【００３３】
図１１に示すように使用者が操作部１０に手を近づけたとき、ＣＰＵ３０は、近接センサ７０により使用者の手を検知する。例えば使用者が指を１本伸ばして操作部１０に近づけた場合、ＣＰＵ３０は、近接センサ７０による検知結果に基づいて指を１本伸ばした手が近づけられたことを検出し、メモリ４８に記憶されている手のイメージ画像の情報から使用者が操作部１０の操作に用いている右手または左手の人差し指を１本伸ばした手のイメージ画像を読み出す。
【００３４】
さらにＣＰＵ３０は、近接センサ７０による検知結果に基づいて使用者の手の指先の位置を特定し、手のイメージ画像の配置場所を定める。ＣＰＵ３０は、頭部のイメージ画像の情報と手のイメージ画像の情報及び定めた配置場所に基づいて、頭部のイメージ画像に手のイメージ画像を重畳させた位置画像６２を生成する。
【００３５】
この第２の実施の形態によれば、使用者は位置画像６２によって自身の手と操作部１０との位置関係を視認することができるため操作部１０の操作性が向上する。
【００３６】
次に第３の実施の形態に係るＨＭＤ２について説明する。ここでは特定の空間内でＨＭＤ２を利用する使用者を外部カメラ８２により撮影し、ＣＰＵ３０は、撮影された画像に基づいて位置画像６２を生成する。そのため図１２に示すように使用者は特定の空間内としての部屋８０の中でＨＭＤ２を利用する。部屋８０内には、中央部に机８１、机８１の左右両側に外部カメラ８２が配置されている。ＨＭＤ２と外部カメラ８２は、互いに無線通信を行う通信機能を備えており、これにより外部カメラ８２によって撮影された画像はＨＭＤ２に送信され、ＨＭＤ２により受信される。外部カメラ８２が使用者の左右両側に配置されていることから、外部カメラ８２により使用者が操作部１０に手を近づける様子を確実に撮影することができる。
【００３７】
次に第３の実施の形態における位置画像の生成について説明する。ＣＰＵ３０は、頭部のイメージ画像の情報を第１の実施の形態と同様の方法によってメモリ４８から読み出す。またＣＰＵ３０は使用者が操作部１０をどちらの手で操作しているかを第１の実施の形態と同様の方法によって特定する。ＣＰＵ３０は、外部カメラ８２から画像を受信し、その画像に基づいて使用者が操作部１０に手を近づけているか否かを検出する。
【００３８】
使用者が手を操作部１０に近づけた場合、ＣＰＵ３０は、外部カメラ８２によって撮影された画像に基づき操作部１０に近づけられている使用者の手の位置と、操作部１０に近づけられた指の本数とを検出する。ＣＰＵ３０は、特定した使用者が操作部１０の操作に用いている手と、検出した指の本数とに基づいてメモリ４６を検索し、該当する手のイメージ画像の情報を読み出す。ＣＰＵ３０は検出した使用者の手の位置に基づいて手のイメージ画像の配置場所を定める。そしてＣＰＵ３０は、読み出した頭部のイメージ画像の情報と手のイメージ画像の情報及び定めた配置場所に従って手のイメージ画像を頭部のイメージ画像に重畳させた位置画像６２を生成する。
【００３９】
このように第３の実施の形態によれば、特定の空間内でＨＭＤ２が使用されるときにはカメラ１３や近接センサ７０を利用しなくても、外部カメラ８２で撮影した画像によって位置画像６２を生成することができる。使用者は位置画像６２によって自身の手と操作部１０との位置関係を視認できるため操作部１０の操作性が向上する。
【００４０】
なお、上述の各実施の形態においては、文字入力画面６０と位置画像６２とを分割表示した映像を表示する場合を例に説明したが、動画の表示中に動画と位置画像６２とを分割表示すると動画が小さくなり使用者にとって見難くなる。そのため動画を表示しているときは位置画像６２を半透明にして表示中の動画に重畳させて表示させてもよい。このように文字入力画面６０や動画等の映像の種類に応じて位置画像６２の表示方法を変更すれば、使用者による映像の鑑賞を妨げることがない。
【００４１】
また、位置画像６２を動画に重畳させる場合、使用者が手を操作部１０に近づけている間だけ位置画像６２を表示させるようにすれば、位置画像６２が使用者の動画鑑賞の妨げになるのを防止することができる。同様に、分割表示した映像を表示する場合においても、使用者が手を操作部１０に近づけている間だけ位置画像６２を表示させるようにすれば位置画像６２が使用者の映像の鑑賞の妨げになるのを防止することができる。
【００４２】
また、位置画像６２を半透明にして動画に重畳させる場合に、ＨＭＤ２の電源スイッチをオンした回数や、回転型セレクタ１１の操作回数や十字キー１２の押下回数等の操作部１０の操作回数に基づく熟練度を設定し、使用者の熟練度に応じて位置画像６２の透過率を変化させてもよい。そして熟練度が高い程、動画の透過率が高くなるようにして最終的に位置画像６２を表示させないようにすれば、操作に慣れて位置画像６２を必要としない使用者にとってはより快適に動画を鑑賞することができ、利便性が向上する。
【００４３】
さらに、上述したカメラ１３と近接センサ７０の両方をＨＭＤ２に設けて操作部１０と使用者の手との位置関係を検出してもよい。このようにすれば近接センサ７０が検知できない程度に手が操作部１０から離れているときはカメラ１３によって撮影した映像に基づいて手の位置を検出し、手が近づきすぎてカメラ１３により撮影される画像に指先が映らないときは近接センサ７０による検知に基づいて手の位置を検出する。これにより更に正確に操作部１０と手との位置関係を検出することができる。
【００４４】
また、上述の各実施の形態においては、ヘッドホンを備えたＨＭＤにカメラ１３や近接センサ７０を設けたが、これに限らず眼鏡型でつるの部分に操作部を設けたＨＭＤにカメラ１３や近接センサ７０を設け、カメラ１３によって撮影した画像や、近接センサ７０による検知結果に基づいて位置画像６２を生成すれば、上述した各実施例と同様に使用者は位置画像６２によって自身の手と操作部１０との位置関係を視認できるため操作部１０の操作性が向上する。
【符号の説明】
【００４５】
２…ＨＭＤ、１０…操作部、１３…カメラ、１１…回転型セレクタ、１２…十字キー、１６…表示部、３０…ＣＰＵ、４２…表示制御部、４８…メモリ、７０…近接センサ、８２…外部カメラ。
【特許請求の範囲】
【請求項１】
使用者の頭部に固定する頭部固定部と、
前記頭部固定部に配置された操作部と、
映像を表示する表示部と、
前記操作部に近づいた使用者の手の位置を検出する検出部と、
前記検出部により検出された前記使用者の手の位置に基づいて、前記操作部と前記使用者の手との位置関係を示す画像を生成する画像生成部と、
前記画像生成部により生成された前記画像を前記表示部に表示させる表示制御部と、
を備えることを特徴とする表示装置。
【請求項２】
前記検出部は、前記操作部の近傍を撮影するカメラを備えることを特徴とする請求項１に記載の表示装置。
【請求項３】
前記検出部は、前記操作部に近づけられた前記使用者の手を検出する近接センサを備えることを特徴とする請求項１または請求項２に記載の表示装置。
【請求項４】
前記検出部は、外部カメラにより撮影された前記操作部と使用者の手との位置関係を示す画像に基づいて前記操作部に対する使用者の手の位置を検出することを特徴とする請求項１に記載の表示装置。
【請求項５】
前記頭部固定部が使用者の頭部に装着された向きに基づいて前記操作部を操作する使用者の左右の手を特定する手特定部を備え、
前記画像生成部は、前記手特定部により左右の手の何れが特定されたかに基づいて手のイメージ画像を含む前記画像を生成することを特徴とする請求項１〜４の何れか一項に記載の表示装置。
【請求項６】
前記検出部は、前記操作部に近づけられた指の本数を検出し、
前記画像生成部は、前記検出部により検出された指の本数に基づいて手のイメージ画像を含む前記画像を生成することを特徴とする請求項１〜請求項５の何れか一項に記載の表示装置。
【請求項７】
前記画像生成部は、使用者の手が前記検出部に近づくに従って前記手のイメージ画像の大きさを変化させていくことを特徴とする請求項５または請求項６に記載の表示装置。
【請求項８】
前記表示制御部は、前記表示部に表示中の映像の種類に基づいて、前記画像の表示方法を変更することを特徴とする請求項１〜請求項７の何れか一項に記載の表示装置。
【請求項９】
前記表示方法は、前記画像を半透明状にして前記映像に重畳させて表示することを特徴とする請求項８に記載の表示装置。
【請求項１０】
前記表示方法は、使用者の熟練度に応じて、前記画像の透過率を変化させることを特徴とする請求項９に記載の表示装置。
【請求項１１】
前記熟練度は、使用者による前記操作部の操作回数に基づいて定めることを特徴とする請求項１０に記載の表示装置。
【請求項１２】
前記表示方法は、前記画像と前記映像とを分割して表示することを特徴とする請求項８に記載の表示装置。
【請求項１３】
前記表示制御部は、使用者の手が前記検出部に検出されている間のみ前記画像を前記表示部に表示することを特徴とする請求項１〜請求項１２の何れか一項に記載の表示装置。
【請求項１】
使用者の頭部に固定する頭部固定部と、
前記頭部固定部に配置された操作部と、
映像を表示する表示部と、
前記操作部に近づいた使用者の手の位置を検出する検出部と、
前記検出部により検出された前記使用者の手の位置に基づいて、前記操作部と前記使用者の手との位置関係を示す画像を生成する画像生成部と、
前記画像生成部により生成された前記画像を前記表示部に表示させる表示制御部と、
を備えることを特徴とする表示装置。
【請求項２】
前記検出部は、前記操作部の近傍を撮影するカメラを備えることを特徴とする請求項１に記載の表示装置。
【請求項３】
前記検出部は、前記操作部に近づけられた前記使用者の手を検出する近接センサを備えることを特徴とする請求項１または請求項２に記載の表示装置。
【請求項４】
前記検出部は、外部カメラにより撮影された前記操作部と使用者の手との位置関係を示す画像に基づいて前記操作部に対する使用者の手の位置を検出することを特徴とする請求項１に記載の表示装置。
【請求項５】
前記頭部固定部が使用者の頭部に装着された向きに基づいて前記操作部を操作する使用者の左右の手を特定する手特定部を備え、
前記画像生成部は、前記手特定部により左右の手の何れが特定されたかに基づいて手のイメージ画像を含む前記画像を生成することを特徴とする請求項１〜４の何れか一項に記載の表示装置。
【請求項６】
前記検出部は、前記操作部に近づけられた指の本数を検出し、
前記画像生成部は、前記検出部により検出された指の本数に基づいて手のイメージ画像を含む前記画像を生成することを特徴とする請求項１〜請求項５の何れか一項に記載の表示装置。
【請求項７】
前記画像生成部は、使用者の手が前記検出部に近づくに従って前記手のイメージ画像の大きさを変化させていくことを特徴とする請求項５または請求項６に記載の表示装置。
【請求項８】
前記表示制御部は、前記表示部に表示中の映像の種類に基づいて、前記画像の表示方法を変更することを特徴とする請求項１〜請求項７の何れか一項に記載の表示装置。
【請求項９】
前記表示方法は、前記画像を半透明状にして前記映像に重畳させて表示することを特徴とする請求項８に記載の表示装置。
【請求項１０】
前記表示方法は、使用者の熟練度に応じて、前記画像の透過率を変化させることを特徴とする請求項９に記載の表示装置。
【請求項１１】
前記熟練度は、使用者による前記操作部の操作回数に基づいて定めることを特徴とする請求項１０に記載の表示装置。
【請求項１２】
前記表示方法は、前記画像と前記映像とを分割して表示することを特徴とする請求項８に記載の表示装置。
【請求項１３】
前記表示制御部は、使用者の手が前記検出部に検出されている間のみ前記画像を前記表示部に表示することを特徴とする請求項１〜請求項１２の何れか一項に記載の表示装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１２−１９４６２６（Ｐ２０１２−１９４６２６Ａ）
【公開日】平成２４年１０月１１日（２０１２．１０．１１）
【国際特許分類】
【出願番号】特願２０１１−５６２５０（Ｐ２０１１−５６２５０）
【出願日】平成２３年３月１５日（２０１１．３．１５）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２４年１０月１１日（２０１２．１０．１１）
【国際特許分類】
【出願日】平成２３年３月１５日（２０１１．３．１５）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]