画像処理装置および方法、並びにプログラム
【課題】アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができるようにする。
【解決手段】近接判定部１８１は、近接パネルから出力される近接検知信号に基づいて、タッチスクリーンに対するユーザの指などの近接の度合を判定する。視差調整部１８２は、ユーザの指などの近接の度合に基づいて３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。また、３Ｄ表示させるべきオブジェクトが特定され中心位置に基準点を設定する。３Ｄ画像生成部１８３は、視差に対応して定まる距離であって、上述した基準点から同一距離だけ離間している左右の領域の各データを、左目用画像のデータ、および右目用画像のデータとして生成する。選択実行指令部１８４は、当該オブジェクトに対応する機能の実行を指令する。
【解決手段】近接判定部１８１は、近接パネルから出力される近接検知信号に基づいて、タッチスクリーンに対するユーザの指などの近接の度合を判定する。視差調整部１８２は、ユーザの指などの近接の度合に基づいて３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。また、３Ｄ表示させるべきオブジェクトが特定され中心位置に基準点を設定する。３Ｄ画像生成部１８３は、視差に対応して定まる距離であって、上述した基準点から同一距離だけ離間している左右の領域の各データを、左目用画像のデータ、および右目用画像のデータとして生成する。選択実行指令部１８４は、当該オブジェクトに対応する機能の実行を指令する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置および方法、並びにプログラムに関し、特に、アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができるようにする画像処理装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来より、ＧＵＩ（Graphical User Interface）の機能の拡充が図られている。
【０００３】
例えば、アイコンを採用するＧＵＩとしては、例えば、アイコン等を表示する液晶パネル等の表示パネルと、ユーザの指等のタッチを検出するタッチパネルとが一体的に構成されたタッチスクリーンに表示されるＧＵＩがある。
【０００４】
タッチスクリーンを用いたＧＵＩでは、タッチスクリーンに表示されたアイコンに、タッチがされると、そのアイコンに割り当てられた機能が実行される。
【０００５】
また、例えば、表示画面と指の近接を感知し、アイコンを拡大表示することができるようにする技術も提案されている（例えば、特許文献１、特許文献２参照）。
【０００６】
【特許文献１】特開２００６−２３６１４３号公報
【特許文献２】特開２００５−５１８７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１および特許文献２では、アイコンに割り当てられた機能を選択、実行するためには、そのアイコンが表示されている表示画面に触れる必要があった。
【０００８】
このように、液晶パネルなどの表示画面に指を触れるなどすると、表面に皮脂などの汚れが付きやすい。あるいはまた、何度も強く押下されることで液晶パネルなどが破損することもあった。
【０００９】
一方で、表示画面に触れさせることなく、アイコンに割り当てられた機能が実行されるようにした場合、例えば、ユーザがアイコンの選択などを実感するためのフィードバックを返すことが難しいという問題があった。
【００１０】
本発明は、このような状況に鑑みてなされたものであり、アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができるようにするものである。
【課題を解決するための手段】
【００１１】
本発明の一側面は、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部とを備える画像処理装置である。
【００１２】
前記画像データ生成部は、前記物体が前記表示部に近接した度合に応じて、前記表示部の奥行き表示を制御するための前記画像データを生成するようにすることができる。
【００１３】
前記近接の度合を予め設定された閾値と比較することで、前記比較の結果に対応して前記表示部の奥行き表示の制御に用いられる視差が設定されるようにすることができる。
【００１４】
前記画像データ生成部は、特定された前記ＧＵＩ部品が拡大表示されるように、前記画像データを生成するようにすることができる。
【００１５】
前記画像データ生成部は、特定された前記ＧＵＩ部品の色が変化するように、前記画像データを生成するようにすることができる。
【００１６】
前記画像データ生成部により前記画像データが生成された後、特定された前記ＧＵＩ部品に割り当てられた機能を実行する機能実行部をさらに備えるようにすることができる。
【００１７】
前記表示は、視差バリア方式を採用した３Ｄディスプレイであるようにすることができる。
【００１８】
前記近接検知部は、タッチスクリーンであるようにすることができる。
【００１９】
前記画像データ生成部は、前記ＧＵＩ部品の表示位置に対応する基準点に基づいて、所定の視差を有する左目用画像のデータ、および右目用画像のデータを生成することで、前記画像データを生成するようにすることができる。
【００２０】
本発明の一側面は、近接検知部が、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知し、部品特定部が、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定し、画像データ生成部が、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成するステップを含む操作画面表示方法である。
【００２１】
本発明の一側面は、コンピュータを、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部とを備える画像処理装置として機能させるプログラムである。
【００２２】
本発明の一側面においては、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かが検知され、前記物体が近接した場合、操作される前記ＧＵＩ部品が特定され、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データが生成される。
【発明の効果】
【００２３】
本発明によれば、アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができる。
【図面の簡単な説明】
【００２４】
【図１】３Ｄ画像の生成手法について説明する図である。
【図２】３Ｄ画像を表示するディスプレイの構成例を示す図である。
【図３】視差バリアをＯＮにして画像を表示した場合の例を示す図である。
【図４】視差バリアをＯＦＦにして画像を表示した場合の例を示す図である。
【図５】本技術が適用される画像処理装置の一実施の形態としての撮像装置の外観構成例を示す図である。
【図６】図５の撮像装置の内部構成例を示すブロック図である。
【図７】ＣＰＵにより実行されるソフトウェアの機能的構成例を示すブロック図である。
【図８】タッチスクリーンに表示される画像の例を示す図である。
【図９】アイコンが選択される場合のタッチスクリーンの表示画面の遷移を説明する図である。
【図１０】アイコンが選択される場合のタッチスクリーンの表示画面の遷移を説明する図である。
【図１１】アイコンが選択される場合のタッチスクリーンの表示画面の遷移を説明する図である。
【図１２】アイコン選択表示制御処理の例を説明する図である。
【図１３】アイコン選択表示制御処理の別の例を説明する図である。
【図１４】パーソナルコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２５】
以下、図面を参照して、本発明の実施の形態について説明する。
【００２６】
以下に説明する実施の形態は、３Ｄ画像（３次元で表現された画像）を表示する。そこで、本発明の実施の形態の理解を容易なものとすべく、本発明の実施形態の説明の前に、左目用画像及び右目用画像から構成される３Ｄ画像の生成手法の概略について説明する。
【００２７】
図１は、３Ｄ画像の生成手法について説明する図である。
【００２８】
第１の生成手法は、２つのレンズが設けられた撮像装置を用いる手法である。すなわち、第１の生成手法では、ユーザ等は、このような撮像装置を、２つのレンズが略水平方向に配置されるように保持して、撮影を１度行う。すると、２つのレンズのうち、左側に位置するレンズを透過した光によって左目用画像のデータが生成され、右側に位置するレンズを透過した光によって右目用画像のデータが生成される。
【００２９】
なお、撮像装置などを用いずに、ＣＧ（Computer Graphics）により生成された画像に対応させて、左目用画像のデータ、および右目用画像のデータが生成されるようにしてもよい。
【００３０】
このようにして生成された左目用画像及び右目用画像の各々には、対応するオブジェクトが、撮像装置の２つのレンズ間の距離に応じた分だけ離間した位置にそれぞれ含まれる。ここで、左目用画像及び右目用画像の各々に含まれる対応するオブジェクトの略水平方向の配置位置の差分（すなわち、距離）を、以下、視差と称する。このような、視差が大きくなるほど、３Ｄ表示されるオブジェクトの奥行きが深くなる、すなわち、凹凸の度合いが強くなる、という特徴がある。従って、かかる特徴を有する視差は、３Ｄ表示されるオブジェクトの凹凸の度合いを決定づけるパラメータとして使用することができる。
【００３１】
図２は、上述したような３Ｄ画像を表示するディスプレイの構成例を示す図である。同図に示されるディスプレイは、いわゆる視差バリア方式と称される方式で３Ｄ画像を表示する３Ｄディスプレイ３０であり、ユーザに３Ｄディスプレイ３０を裸眼で観察させることにより、３Ｄ表示されるオブジェクトの凹凸を感じさせることができる。
【００３２】
図２に示されるように、３Ｄディスプレイ３０は、表示層３１と視差バリア層３２により構成されている。表示層３１には、水平方向に単位画素数（１列）毎に左目用の画像と右目用の画像が交互に表示されるようになされている。同図において、表示層３１の左目用の画像が表示されている列は「Ｌ」と表示されており、右目用の画像が表示されている列は「Ｒ」と表示されている。
【００３３】
視差バリア層３２は、表示層３１の画像の列と同じ周期の列を有する格子状のバリアとされ、バリアの開口部の幅が表示層３１の１列の画像の幅と等しく設定されている。ユーザが、視差バリア層３２を介して表示層３１に表示された画像を所定の距離から見ると、ユーザの左右の目に「Ｌ」と「Ｒ」の画像をそれぞれ分離して提示することができるので視差が発生する。
【００３４】
例えば、図３に示されるように、ユーザ４０が、視差バリア層３２を介して表示層３１に表示された画像を所定の距離から見ると、ユーザ４０の左目には、左目用の画像の列のみにより構成される画像が提示され、ユーザ４０の右目には、右目用の画像の列のみにより構成される画像が提示される。同図の例では、ユーザ４０の左目には、「Ｌ１（左目用の画像の第１列目を表している）」、・・・「Ｌｎ（左目用の画像の第ｎ列目を表している）」、・・・「ＬＮ（左目用の画像の第Ｎ列目を表している）」の各列により構成される画像が提示されている。また、ユーザ４０の右目には、「Ｒ１（右目用の画像の第１列目を表している）」、・・・「Ｒｎ（右目用の画像の第ｎ列目を表している）」、・・・「ＲＮ（右目用の画像の第Ｎ列目を表している）」の各列により構成される画像が提示されている。
【００３５】
このように、ユーザ４０に３Ｄディスプレイ３０を裸眼で観察させることで、３Ｄ表示されるオブジェクトの凹凸を感じさせることができる。なお、視差バリア層３２を介して観察される画像は、表示層３１が本来有する水平方向の解像度の１／２の解像度しか表現することはできない。このため、３Ｄディスプレイ３０は、図３に示されるように視差バリアをＯＮにして画像を表示させることができるとともに、図４に示されるように視差バリアをＯＦＦにして画像を表示させることもできるようになされている。
【００３６】
図４は、視差バリアをＯＦＦにして画像を表示した場合の例を示す図である。図４の例の場合、表示層３１の各列に表示された画像が、ユーザ４０の左目および右目にそれぞれ提示されるようになされている。従って、視差バリアをＯＦＦして画像を表示する場合、表示層３１の各列に、左右の両目に提示させる画像「ＬＲ１」、「ＬＲ２」、・・・を表示させることで、表示層３１が本来有する水平方向の解像度で画像を表示させることができる。ただし、図４に示される場合、ユーザに、視差を有する画像を提示することができないので、画像を３Ｄ表示させることはできず、２次元での表示（２Ｄ表示）のみさせることができる。
【００３７】
このように、３Ｄディスプレイ３０は、図３に示されるように画像を３Ｄ表示させたり、図４に示されるように画像を２Ｄ表示させたりすることができるようになされている。
【００３８】
図５は、本技術が適用される画像処理装置の一実施の形態としての撮像装置５０の外観構成例を示す図である。
【００３９】
図５Ａは、撮像装置５０の正面を、図５Ｂは、その背面をそれぞれ示している。
【００４０】
図５Ａに示されるように、例えばデジタルカメラとして構成される撮像装置５０の正面の向かって右側には、レンズ部１１１が設けられている。レンズ部１１１は、被写体からの光を集光するレンズやフォーカス（ピント）の調整をするためのフォーカスレンズ、絞り等の光学系その他から構成されている（いずれも図示せず）。レンズ部１１１は、撮像装置５０の電源がオンにされたときに撮像装置５０の筐体から突出し、撮像装置５０の電源がオフにされたときに、撮像装置５０の筐体内部に収納されるようになっている。図５Ａでは、レンズ部１１１は、撮像装置５０の筐体内部に収納された状態になっている。
【００４１】
撮像装置５０の正面の、レンズ部１１１の右上には、ＡＦ(Auto Focus)補助光投光部１１２が設けられている。ＡＦ補助光投光部１１２は、レンズ部１１１の光学系の光軸方向に向かって、ＡＦ補助光としての光を照射することにより、被写体を照明する。これにより、例えば、暗い場所でも、被写体の画像を撮像して、その画像に基づいて、被写体にフォーカス（ピント）を合わせる、いわゆるオートフォーカス機能が働くようになっている。
【００４２】
撮像装置５０の正面の中央上方には、ストロボ１１３が配置されている。
【００４３】
撮像装置５０の上面の、正面側から見て右側には、電源をオン／オフするときに操作される電源ボタン１１４が設けられ、正面側から見て左側には、撮像されている画像を記録するときに操作されるシャッタボタン（レリーズボタン）１１５とが設けられている。
【００４４】
図５Ｂに示されるように、撮像装置５０の背面の右上には、ズームボタン１１６が設けられている。
【００４５】
例えば、ユーザが、撮像装置５０を用いて被写体を撮像する場合、望遠（Tele）の指示を行うときには、ズームボタン１１６のうちの「Ｔ」と印字された部分（以下、Ｔボタンと称する）を押下する。一方、ユーザは、広角（Wide）の指示を行うときには、ズームボタン１１６のうちの「Ｗ」と印字された部分（以下、Ｗボタンと称する）を押下する。なお、ユーザは、Ｔボタン又はＷボタンの押下状態を継続することによって、望遠（Tele）又は広角（Wide）の連続指示を行うことができる。
【００４６】
ズームボタン１１６の下方には、モードダイヤル１１７が設けられている。モードダイヤル１１７は、撮像装置５０の各種モードを選択するとき等に操作される。撮像装置５０の動作モードとしては、例えば、被写体を撮影する撮影モードや、被写体が撮影された結果得られる撮影画像を表示させる画像表示モードが存在する。また、撮影モード時の各種操作に関連するモードとして、ストロボ１１３の発光を強制的にオン又はオフにするモードや、セルフタイマを使用するモード、後述する液晶パネル１２０にメニュー画面を表示するモード等が存在する。
【００４７】
モードダイヤル１１７の下方には、操作ボタン１１８が設けられている。操作ボタン１１８は、予め割り当てられた指示操作をユーザが行う場合に用いられる。
【００４８】
例えば、ユーザは、操作ボタン１１８を操作することで、メニュー画面におけるカーソルを移動させ、カーソルの配置位置に存在する項目を選択することができる。
【００４９】
タッチスクリーン１１９は、液晶パネル１２０とその上に配置された近接パネル１２１とが一体的になったもので、液晶パネル１２０によって各種の画像を表示するとともに、近接パネル１２１によって、ユーザの操作を受け付けることができる。
【００５０】
液晶パネル１２０は、例えば、図２乃至図４を参照して上述した３Ｄディスプレイ３０と同様の構成を有するディスプレイとされ、必要に応じて画像を３Ｄ表示または２Ｄ表示することができるようになされている。
【００５１】
近接パネル１２１は、例えば、静電容量方式のタッチスクリーンと同様の方式により、静電容量の変化を検出し、ユーザの指などが近接したことを検出するようになされている。近接パネル１２１は、パネル上の所定の位置における静電容量の変化を検出し、その位置において、ユーザの指などがどの程度近接しているのかを表す信号を出力するようになされている。
【００５２】
図６は、図５の撮像装置５０の内部構成例を示すブロック図である。
【００５３】
なお、図６では、図５のＡＦ補助光投光部１１２、及びストロボ１１３の図示は、省略してある。
【００５４】
ＣＣＤ(Charge Coupled Device)１３１は、タイミングジェネレータ(TG)１４１から供給されるタイミング信号に従って動作することにより、レンズ部１１１を介して入射する被写体からの光を受光して光電変換を行い、受光量に応じた電気信号としてのアナログの画像信号を、アナログ信号処理部１３２に供給する。
【００５５】
アナログ信号処理部１３２は、ＣＰＵ(Central Processing Unit)１３６の制御にしたがい、ＣＣＤ１３１からのアナログの画像信号を増幅等するアナログ信号処理を行い、そのアナログ信号処理の結果得られる画像信号を、Ａ/Ｄ(Analog/Digital)変換部１３３に供給する。
【００５６】
Ａ/Ｄ変換部１３３は、ＣＰＵ１３６の制御にしたがい、アナログ信号処理部１３２からのアナログ信号の画像信号をＡ/Ｄ変換し、その結果得られるデジタル信号の画像のデータを、デジタル信号処理部１３４に供給する。
【００５７】
デジタル信号処理部１３４は、ＣＰＵ１３６の制御にしたがい、Ａ/Ｄ変換部１３３からの画像のデータに対し、ノイズ除去処理等のデジタル信号処理を施し、処理後の画像のデータを液晶パネル１２０に供給する。これにより、液晶パネル１２０には、供給された画像のデータに対応する画像、すなわち、撮影中の撮影画像（以下、スルー画と称する）が表示される。また、デジタル信号処理部１３４は、Ａ/Ｄ変換部１３３からの画像のデータを、例えば、ＪＰＥＧ(Joint Photographic Experts Group)方式等で圧縮符号化し、その結果得られる圧縮符号化データを、記録デバイス１３５に供給して記録させる。さらに、デジタル信号処理部１３４は、記録デバイス１３５に記録された圧縮符号化データを伸張復号し、その結果得られる画像のデータを液晶パネル１２０に供給する。これにより、液晶パネル１２０には、供給された画像のデータに対応する画像、すなわち、記録された撮影画像が表示される。
【００５８】
また、デジタル信号処理部１３４は、ＣＰＵ１３６の制御にしたがい、液晶パネル１２０に表示させるＧＵＩ（例えば、後述するメニュー画面）の表示を制御する。
【００５９】
記録デバイス１３５は、例えば、ＤＶＤ(Digital Versatile Disc)等のディスクや、メモリカード等の半導体メモリその他のリムーバブルなリムーバブル記録媒体であり、撮像装置５０に対して、容易に着脱可能になっている。記録デバイス１３５には、撮影画像のデータが記録される。
【００６０】
ＣＰＵ１３６は、プログラムＲＯＭ(Read Only Memory)１３９に記録されているプログラムを実行することにより、撮像装置５０を構成する各部を制御し、また、近接パネル１２１からの信号や、操作部１３７からの信号に応じて、各種の処理を行う。
【００６１】
操作部１３７は、ユーザによって操作され、その操作に対応した信号を、ＣＰＵ１３６に供給する。なお、操作部１３７には、図５に示した、電源ボタン１１４、シャッタボタン１１５、ズームボタン１１６、モードダイヤル１１７、操作ボタン１１８等が含まれる。
【００６２】
ＥＥＰＲＯＭ(Electrically Erasable Programmable ROM)１３８は、ＣＰＵ１３６の制御にしたがい、撮像装置５０に設定された各種の情報その他の、撮像装置５０の電源がオフにされたときも保持しておく必要があるデータ等を記憶する。
【００６３】
プログラムＲＯＭ１３９は、ＣＰＵ１３６が実行するプログラム、さらには、ＣＰＵ１３６がプログラムを実行する上で必要なデータを記憶している。ＲＡＭ(Read Only Memory)１４０は、ＣＰＵ１３６が各種の処理を行う上で必要なプログラムやデータを一時記憶する。
【００６４】
タイミングジェネレータ１４１は、ＣＰＵ１３６の制御にしたがい、タイミング信号を、ＣＣＤ１３１に供給する。タイミングジェネレータ１４１からＣＣＤ１３１に供給されるタイミング信号によって、ＣＣＤ１３１における露出時間（シャッタスピード）等が制御される。
【００６５】
モータドライバ１４２は、ＣＰＵ１３６の制御にしたがい、モータにより構成されるアクチュエータ１４３を駆動する。アクチュエータ１４３が駆動されることにより、レンズ部１１１は、撮像装置５０の筐体から突出し、あるいは、撮像装置５０の筐体内部に収納される。また、アクチュエータ１４３が駆動されることにより、レンズ部１１１を構成する絞りの調整や、レンズ部１１１を構成するフォーカスレンズの移動が行われる。
【００６６】
以上のように構成される撮像装置５０においては、ＣＣＤ１３１が、レンズ部１１１を介して入射する被写体からの光を受光して光電変換を行い、その結果得られるアナログの画像信号を出力する。ＣＣＤ１３１が出力するアナログの画像信号は、アナログ信号処理部１３２及びＡ/Ｄ変換部１３３を介することにより、デジタル信号の画像のデータとされ、デジタル信号処理部１３４に供給される。
【００６７】
デジタル信号処理部３４は、Ａ/Ｄ変換部１３３からの画像のデータを、液晶パネル１２０に供給し、これにより、液晶パネル１２０では、いわゆるスルー画が表示される。
【００６８】
その後、ユーザが、シャッタボタン１１５（図５）を操作すると、その操作に応じた信号が、操作部１３７からＣＰＵ１３６に供給される。ＣＰＵ１３６は、操作部１３７から、シャッタボタン１１５の操作に応じた信号が供給されると、デジタル信号処理部１３４を制御し、そのときＡ/Ｄ変換部１３３からデジタル信号処理部１３４に供給された画像のデータを圧縮させ、その結果得られる圧縮画像のデータを、記録デバイス１３５に記録させる。
【００６９】
以上のようにして、いわゆる写真撮影が行われる。
【００７０】
また、ＣＰＵ１３６は、所定のプログラムを実行することにより、３Ｄ画像の画像データを生成するようになされている。
【００７１】
３Ｄ画像を生成する場合、ＣＰＵ１３６は、視差ｄを設定する。視差ｄが大きい値として設定された場合、視差を有する画像に表示されるオブジェクトの遠近感（３Ｄ表示されるオブジェクトの凹凸の度合い）も大きくなる。例えば、視差ｄが大きい値として設定された場合、画面を観察するユーザから見て、オブジェクトが画面から手前に大きく飛び出している（または画面の奥深くに引き込まれている）ように感じられる。
【００７２】
一方、視差ｄが小さい値として設定された場合、視差を有する画像に表示されるオブジェクトの遠近感（３Ｄ表示されるオブジェクトの凹凸の度合い）も小さくなる。例えば、視差ｄが小さい値として設定された場合、画面を観察するユーザから見て、オブジェクトが画面とほぼ同じ位置にあるように感じられる。
【００７３】
ＣＰＵ１３６は、３Ｄ画像の生成の元となる画像のデータを取得し、３Ｄ表示させるべきオブジェクトが表示された処理対象領域を設定し、処理対象領域の水平方向の所定位置に基準点Ｐを設定する。そして、ＣＰＵ１３６は、基準点Ｐに対して視差ｄに対応して定まる距離であって、同一距離だけ離間している左右の領域の各データを、左目用画像のデータ、および右目用画像のデータとして生成する。
【００７４】
このようにして生成された視差ｄを有する左目用画像のデータ、および右目用画像のデータに対応する画像を、タッチスクリーン１１９に表示させることにより、ユーザに３Ｄ画像を観察させることができる。
【００７５】
図７は、ＣＰＵ１３６により実行されるプログラムなどのソフトウェアの機能的構成例を示すブロック図である。
【００７６】
近接判定部１８１は、近接パネル１２１から出力される近接検知信号に基づいて、タッチスクリーン１１９に対するユーザの指などの近接の度合を判定する。近接判定部１８１は、例えば、タッチスクリーン１１９からの距離が所定の閾値未満となるまでユーザの指などが近接した場合、近接判定部１８１はその旨を表す所定のデータを生成して出力する。また、近接していたユーザの指などがタッチスクリーン１１９からの距離が所定の閾値以上となるまで遠ざかった場合、近接判定部１８１はその旨を表すデータを生成して出力する。なお、近接判定部１８１により生成されるデータには、タッチスクリーン１１９（近接パネル１２１）のどの部分において、ユーザの指などが近接しているのかを表す情報も含まれている。
【００７７】
視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。３Ｄ画像の視差は、例えば、近接判定部１８１から出力されるデータに基づいて、ユーザの指などの近接の度合が特定され、その近接の度合に基づいて設定される。例えば、ユーザの指が第１の閾値未満の距離まで近接していると特定された場合、視差ｄ１が設定され、ユーザの指が第１の閾値より小さい第２の閾値未満の距離まで近接していると特定された場合、視差ｄ１より大きい視差ｄ２が設定される。
【００７８】
また、視差調整部１８２は、３Ｄ画像の生成の元となる画像（例えば、後述するメニュー画面の画像）のデータを取得し、３Ｄ表示させるべきオブジェクトが表示された処理対象領域を特定する。このとき、例えば、近接判定部１８１から出力されたデータに含まれるタッチスクリーン１１９のどの部分において、ユーザの指などが近接しているのかを表す情報に基づいて３Ｄ表示させるべきオブジェクト（例えば、後述するメニュー画面に表示されるアイコン）が特定される。そして、視差調整部１８２は、例えば、３Ｄ表示させるべきオブジェクトの中心位置に基準点Ｐを設定する。
【００７９】
３Ｄ画像生成部１８３は、上述したように、視差に対応して定まる距離であって、上述した基準点から同一距離だけ離間している左右の領域の各データを、左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成されたことになる。
【００８０】
選択実行指令部１８４は、近接判定部１８１から出力されるデータに基づいて、３Ｄ表示させるべきオブジェクトとユーザの指などの近接の度合が特定され、その近接の度合に基づいて、当該オブジェクトが選択されたものとし、当該オブジェクトに対応する機能の実行を指令する。例えば、後述するメニュー画面に表示された所定のアイコンが選択されたものとし、当該アイコンに対応する機能の実行が指令される。
【００８１】
図８は、タッチスクリーン１１９に表示される画像の例を示している。同図は、例えば、撮像装置５０において、上述したモードダイヤル１１７によりメニュー画面を表示するモードが選択されているときに表示されるメニュー画面とされる。
【００８２】
このメニュー画面には、各種のアイコンが表示されている。例えば、「かんたんモード」と表示されたアイコン２０１、「スマイルシャッター」と表示されたアイコン２０２、・・・「表示設定」と表示されたアイコン２０８が表示されている。
【００８３】
ユーザは、タッチスクリーン１１９に表示されたアイコンに指を近接することで、所望のアイコンを選択することができる。アイコンが選択されると、そのアイコンに対応する機能が実行されたり、所定の設定が行われたりするようになされている。
【００８４】
例えば、ユーザがアイコン２０７に指を近接させた場合、当該アイコンが選択されて「顔検出」の機能が実行される。ここで、「顔検出」は、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能とされる。
【００８５】
図９乃至図１１を参照して、ユーザによりアイコン２０７が選択される場合のタッチスクリーン１１９の表示画面の遷移について説明する。
【００８６】
図９Ａは、ユーザの視線からタッチスクリーン１１９を見た画像の例を示す図である。図９Ａに示されるように、ユーザが指２２１をタッチスクリーン１１９のアイコン２０７が表示されている部分に近接させる。いまの場合、まだ、指２２１は、タッチスクリーン１１９に十分に近接していないものとする。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１以上であるものとする。
【００８７】
図９Ｂは、ユーザがタッチスクリーン１１９を観察した結果感じられる、タッチスクリーン１１９のアイコン２０７と指２２１との仮想的な距離の感覚を説明する図であり、タッチスクリーン１１９を図９Ａの図中左方向から見た図である。なお、同図は、３Ｄ画像によりユーザが感じる遠近感を説明するものであり、実際には、アイコン２０７は、タッチスクリーン１１９の表面に表示されている画像（すなわち、厚みや奥行がない平面的存在）にすぎない。
【００８８】
図９Ｂに示されるように、アイコン２０７は、タッチスクリーン１１９から飛び出していない。すなわち、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１以上であるため、視差のある画像が生成されず、ユーザから見たアイコン２０７は、タッチスクリーン１１９の表面上に位置しているように見えるのである。
【００８９】
図１０Ａは、ユーザの視線からタッチスクリーン１１９を見た画像の別の例を示す図である。図１０Ａに示されるように、ユーザが指２２１をタッチスクリーン１１９のアイコン２０７が表示されている部分にさらに近接させる。いまの場合、例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満、閾値Ｔｈ２以上であるものとする。
【００９０】
図１０Ｂは、ユーザがタッチスクリーン１１９を観察した結果感じられる、タッチスクリーン１１９のアイコン２０７と指２２１との仮想的な距離の感覚を説明する図であり、タッチスクリーン１１９を図１０Ａの図中左方向から見た図である。なお、同図は、３Ｄ画像によりユーザが感じる遠近感を説明するものであり、実際には、アイコン２０７は、タッチスクリーン１１９の表面に表示されている画像（すなわち、厚みや奥行がない平面的存在）にすぎない。
【００９１】
図１０Ｂに示されるように、アイコン２０７が、タッチスクリーン１１９から飛び出し、指２２１に近づいている。すなわち、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となったため、視差のある画像が生成され、ユーザから見たアイコン２０７は、タッチスクリーン１１９から飛び出しているように見えるのである。
【００９２】
図１１Ａは、ユーザの視線からタッチスクリーン１１９を見た画像のさらに別の例を示す図である。図１１Ａに示されるように、ユーザが指２２１をタッチスクリーン１１９のアイコン２０７が表示されている部分にさらに近接させる。いまの場合、例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ２未満であるものとする。
【００９３】
図１１Ｂは、ユーザがタッチスクリーン１１９を観察した結果感じられる、タッチスクリーン１１９のアイコン２０７と指２２１との仮想的な距離の感覚を説明する図であり、タッチスクリーン１１９を図１１Ａの図中左方向から見た図である。なお、同図は、３Ｄ画像によりユーザが感じる遠近感を説明するものであり、実際には、アイコン２０７は、タッチスクリーン１１９の表面に表示されている画像（すなわち、厚みや奥行がない平面的存在）にすぎない。
【００９４】
図１１Ｂに示されるように、アイコン２０７が、タッチスクリーン１１９から飛び出し、指２２１と接触している。すなわち、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ２未満となったため、さらに大きい視差のある画像が生成され、ユーザから見たアイコン２０７は、タッチスクリーン１１９からさらに飛び出しているように見えるのである。
【００９５】
なお、図１０Ａ、図１１Ａに示されるアイコン２０７が拡大して表示されるようにしてもよい。つまり、ユーザにとって、アイコン２０７がタッチスクリーン１１９から飛び出しているように見えるとともに、アイコン２０７が他のアイコンより大きくなっているように見えるようにしてもよい。このようにすることで、ユーザに、アイコン２０７が選択されることを確実に実感させることができる。
【００９６】
図１１に示される状態となったとき、アイコン２０７に割り当てられた機能が実行される。すなわち、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能（「顔検出」）が実行されることになる。
【００９７】
また、アイコン２０７に割り当てられた機能が実行された場合、例えば、アイコン２０７の色が変化するようにしてもよい。あるいはまた、アイコン２０７に割り当てられた機能が実行された場合、例えば、アイコン２０７が徐々に消えていくように（フェードアウト）アニメーション表示されるようにしてもよい。このようにすることで、ユーザは、アイコン２０７が選択されることを確実に実感することができる。このようにすることで、ユーザに対してアイコンの選択操作をフィードバックさせることができ、アイコン２０７が選択されることを確実に実感させることができる。
【００９８】
さらに、メニュー画面が３Ｄ表示される際、または、アイコンの機能が実行される際に、所定の効果音などが出力されるようにしてもよい。
【００９９】
次に、図１２のフローチャートを参照して、撮像装置５０によるアイコン選択表示制御処理の例について説明する。この処理は、例えば、撮像装置５０が、タッチスクリーン１１９を介してユーザの操作を受け付けるとき実行される。
【０１００】
ステップＳ２１において、ＣＰＵ１３６は、デジタル信号処理部１３４を制御して、液晶パネル１２０（タッチスクリーン１１９）にメニュー画面を表示させる。
【０１０１】
これにより、例えば、図８を参照して上述したようなメニュー画面が表示される。
【０１０２】
ステップＳ２２において、近接判定部１８１は、ユーザの指２２１の近接を検知したか否かを判定し、まだ、近接していないと判定された場合、処理は、ステップＳ２１に戻る。例えば、図９に示されるような状態の場合、ユーザの指２２１がまだ近接していないと判定される。
【０１０３】
ステップＳ２２において、ユーザの指２２１の近接を検知したと判定された場合、処理は、ステップＳ２３に進む。例えば、図１０に示されるような状態の場合、ユーザの指２２１の近接を検知したと判定される。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となった場合、ユーザの指２２１の近接を検知したと判定される。
【０１０４】
ステップＳ２３において、視差調整部１８２は、３Ｄ表示させるアイコンを特定する。このとき、例えば、近接判定部１８１から出力されたデータに含まれる情報であって、タッチスクリーン１１９のどの部分において、ユーザの指２２１が近接しているのかを表す情報に基づいて３Ｄ表示させるべきアイコンが特定される。そして、例えば、３Ｄ表示させるべきアイコンの中心位置に基準点Ｐが設定される。
【０１０５】
ステップＳ２４において、視差調整部１８２は、タッチスクリーン１１９と指２２１との距離を特定する。タッチスクリーン１１９と指２２１との距離は、例えば、近接判定部１８１から出力されるデータに基づいて得られる近接の度合に基づいて特定される。
【０１０６】
ステップＳ２５において、視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。このとき、例えば、ステップＳ２４で特定された距離に対応する視差が設定される。例えば、ユーザの指が第１の閾値未満の距離まで近接していると特定された場合、視差ｄ１が設定され、ユーザの指が第１の閾値より小さい第２の閾値未満の距離まで近接していると特定された場合、視差ｄ１より大きい視差ｄ２が設定される。
【０１０７】
ステップＳ２６において、３Ｄ画像生成部１８３は、ステップＳ２５の処理で設定された視差と、ステップＳ２３の処理にともなって設定された基準点に基づいて、左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成されたことになる。そして、３Ｄ画像のデータに基づいて、タッチスクリーン１１９のメニュー画面が３Ｄ表示される。
【０１０８】
ステップＳ２７において、視差調整部１８２は、タッチスクリーン１１９と指２２１との距離が変化したか否かを判定し、タッチスクリーン１１９と指２２１との距離が変化していないと判定された場合、処理は、ステップＳ２６に戻る。
【０１０９】
ステップＳ２７において、タッチスクリーン１１９と指２２１との距離が変化したと判定された場合、処理は、ステップＳ２８に進む。
【０１１０】
ステップＳ２８において、視差調整部１８２は、タッチスクリーン１１９と指２２１との距離が十分小さいか否かを判定する。例えば、タッチスクリーン１１９と指２２１との距離が閾値Ｔｈ２未満であった場合、ステップＳ２８では、タッチスクリーン１１９と指２２１との距離が十分小さいと判定される。
【０１１１】
ステップＳ２８において、タッチスクリーン１１９と指２２１との距離が十分小さくないと判定された場合、処理は、ステップＳ２２に戻る。一方、ステップＳ２８において、タッチスクリーン１１９と指２２１との距離が十分小さいと判定された場合、処理は、ステップＳ２９に進む。
【０１１２】
例えば、図１１に示されるような状態である場合、ステップＳ２８において、タッチスクリーン１１９と指２２１との距離が十分小さいと判定される。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ２未満となった場合、ユーザの指２２１との距離が十分小さいと判定される。
【０１１３】
ステップＳ２９において、視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差として、より大きい視差を設定する。
【０１１４】
ステップＳ３０において、３Ｄ画像生成部１８３は、ステップＳ２９の処理で設定された視差に対応して左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成され、タッチスクリーン１１９のメニュー画面が３Ｄ表示される。
【０１１５】
ステップＳ３１において、選択実行指令部１８４は、ステップＳ２３の処理で特定されたアイコンの選択を確定させる。
【０１１６】
ステップＳ３２において、選択実行指令部１８４は、ステップＳ３１で選択が確定されたアイコンの機能を実行する。このとき、例えば、図１１に示されるように、アイコン２０７が選択され、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能（「顔検出」）が実行されることになる。
【０１１７】
このようにして、アイコン選択表示制御処理が実行される。このようにすることで、例えば、図９乃至図１１を参照して上述したように、ユーザが指２２１を近接させるとアイコン２０７がタッチスクリーン１１９から飛び出すように感じられる。そして、ユーザが指２２１をさらに近接させると、アイコン２０７がタッチスクリーン１１９からさらに飛び出して指２２１に接触するように感じられる。
【０１１８】
従って、指２２１をタッチスクリーン１１９に触れさせることなく、ユーザにアイコン２０７が選択されたこと、および、そのアイコンの機能が実行されたとこを実感させることができる。
【０１１９】
なお、上述した例では、指を近接させるとタッチスクリーンからアイコンが飛び出して見えるように表示させる例について説明したが、別の方式で表示されるようにしてもよい。例えば、タッチスクリーンの奥に沈んでいるように見えたアイコンが、指を近接させると浮き上がってくるように見えるように表示させてもよい。要は、指を近接させるとアイコンが近づいてくるように見える表示データが生成されるようにすればよい。
【０１２０】
ところで、図１２を参照して上述した例においては、例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となった場合、近接が検知され、閾値Ｔｈ２未満となった場合、アイコンの選択が確定されるものとした。つまり、指２２１のタッチスクリーン１１９からの距離の判定を２段階行うようにした。
【０１２１】
しかし、指２２１のタッチスクリーン１１９からの距離の判定は、３段階以上で行われるようにしてもよい。このようにすれば、よりリアリティーのある３Ｄ表示を行うことができる。
【０１２２】
また、指２２１のタッチスクリーン１１９からの距離の判定は、単一の閾値を用いて判定されるようにしてもよい。このようにすることで、アイコン選択表示制御処理をより簡素化することができる。
【０１２３】
図１３は、撮像装置５０によるアイコン選択表示制御処理の別の例を説明するフローチャートである。この処理は、例えば、図１２のアイコン選択表示制御処理をより簡素化したものとされる。
【０１２４】
ステップＳ５１において、ＣＰＵ１３６は、デジタル信号処理部１３４を制御して、液晶パネル１２０（タッチスクリーン１１９）にメニュー画面を表示させる。
【０１２５】
ステップＳ５２において、近接判定部１８１は、ユーザの指２２１の近接を検知したか否かを判定し、まだ、近接していないと判定された場合、処理は、ステップＳ５１に戻る。例えば、図９に示されるような状態の場合、ユーザの指２２１がまだ近接していないと判定される。
【０１２６】
ステップＳ５２において、ユーザの指２２１の近接を検知したと判定された場合、処理は、ステップＳ５３に進む。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となった場合、ユーザの指２２１の近接を検知したと判定される。
【０１２７】
ステップＳ５３において、視差調整部１８２は、３Ｄ表示させるアイコンを特定する。このとき、例えば、近接判定部１８１から出力されたデータに含まれるタッチスクリーン１１９のどの部分において、ユーザの指２２１が近接しているのかを表す情報に基づいて３Ｄ表示させるべきアイコンが特定される。そして、例えば、３Ｄ表示させるべきアイコンの中心位置に基準点Ｐが設定される。
【０１２８】
ステップＳ５４において、視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。このとき、例えば、予め定められた視差が設定される。
【０１２９】
ステップＳ５５において、３Ｄ画像生成部１８３は、ステップＳ５４の処理で設定された視差と、ステップＳ５３の処理にともなって設定された基準点に基づいて、左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成されたことになる。そして、３Ｄ画像のデータに基づいて、タッチスクリーン１１９のメニュー画面が３Ｄ表示される。
【０１３０】
ステップＳ５６において、選択実行指令部１８４は、ステップＳ５３の処理で特定されたアイコンの選択を確定させる。
【０１３１】
ステップＳ５７において、選択実行指令部１８４は、ステップＳ３１で選択が確定されたアイコンの機能を実行する。このとき、例えば、図１１に示されるように、アイコン２０７が選択され、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能（「顔検出」）が実行されることになる。
【０１３２】
このようにして、アイコン選択表示制御処理が実行されるようにしてもよい。
【０１３３】
以上においては、本技術を撮像装置５０に適用する例について説明したが、撮像装置以外の別の電子機器に本技術を適用してもよい。タッチスクリーンなどを用いた操作を行う機器であれば、本技術を適用することが可能である。
【０１３４】
また、以上においては、指でタッチスクリーンに表示されたアイコンなどを操作する例について説明したが、例えば、スタイラスペンなどを用いてタッチスクリーンに表示されたアイコンなどを操作する場合であっても、本技術を適用することができる。
【０１３５】
さらに、以上においては、タッチスクリーンに表示されたメニュー画面の中のアイコンが選択される際に３Ｄ表示が行われる例について説明したが、本技術の適用はこれに限られるものではない。要は、タッチスクリーンに何等かのＧＵＩが表示されており、ＧＵＩの部品が操作されるものであれば、本技術を適用することが可能である。
【０１３６】
また、以上においては、視差バリア方式が採用された３Ｄディスプレイを有するタッチスクリーンにより３Ｄ表示させる場合の例について説明したが、視差バリア方式以外の方式で３Ｄ表示させる場合であっても、本発明を適用することができる。例えば、レンチキュラー方式を採用した３Ｄディスプレイを有するタッチスクリーンが用いられるようにしてもよい。
【０１３７】
あるいはまた、ユーザに裸眼で観察させる３Ｄディスプレイではなく、ユーザに特殊なメガネなどを装着させて観察させる３Ｄディスプレイを有するタッチスクリーンが用いられるようにしてもよい。
【０１３８】
なお、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば図１４に示されるような汎用のパーソナルコンピュータ７００などに、ネットワークや記録媒体からインストールされる。
【０１３９】
図１４において、ＣＰＵ（Central Processing Unit）７０１は、ＲＯＭ（Read Only Memory）７０２に記憶されているプログラム、または記憶部７０８からＲＡＭ（Random Access Memory）７０３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ７０３にはまた、ＣＰＵ７０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１４０】
ＣＰＵ７０１、ＲＯＭ７０２、およびＲＡＭ７０３は、バス７０４を介して相互に接続されている。このバス７０４にはまた、入出力インタフェース７０５も接続されている。
【０１４１】
入出力インタフェース７０５には、キーボード、マウスなどよりなる入力部７０６、ＬＣＤ(Liquid Crystal display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部７０７、ハードディスクなどより構成される記憶部７０８、モデム、LANカードなどのネットワークインタフェースカードなどより構成される通信部７０９が接続されている。通信部７０９は、インターネットを含むネットワークを介しての通信処理を行う。
【０１４２】
入出力インタフェース７０５にはまた、必要に応じてドライブ７１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア７１１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部７０８にインストールされる。
【０１４３】
上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、インターネットなどのネットワークや、リムーバブルメディア７１１などからなる記録媒体からインストールされる。
【０１４４】
なお、この記録媒体は、図１４に示される、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスク（フロッピディスク（登録商標）を含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク（MD（Mini-Disk）（登録商標）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア７１１により構成されるものだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているＲＯＭ７０２や、記憶部７０８に含まれるハードディスクなどで構成されるものも含む。
【０１４５】
なお、本明細書において上述した一連の処理は、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１４６】
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０１４７】
５０ 撮像装置， １１９ タッチスクリーン， １２０ 液晶パネル， １２１ 近接パネル １３４ デジタル信号処理部， １３６ ＣＰＵ， １３７ 操作部， １３８ ＥＥＰＲＯＭ， １３９ プログラムＲＯＭ， １４０ ＲＡＭ， １８１ 近接判定部， １８２ 視差調整部， １８３ ３Ｄ画像生成部， １８４ 選択実行部 ２０１乃至２０８ アイコン
【技術分野】
【０００１】
本発明は、画像処理装置および方法、並びにプログラムに関し、特に、アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができるようにする画像処理装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来より、ＧＵＩ（Graphical User Interface）の機能の拡充が図られている。
【０００３】
例えば、アイコンを採用するＧＵＩとしては、例えば、アイコン等を表示する液晶パネル等の表示パネルと、ユーザの指等のタッチを検出するタッチパネルとが一体的に構成されたタッチスクリーンに表示されるＧＵＩがある。
【０００４】
タッチスクリーンを用いたＧＵＩでは、タッチスクリーンに表示されたアイコンに、タッチがされると、そのアイコンに割り当てられた機能が実行される。
【０００５】
また、例えば、表示画面と指の近接を感知し、アイコンを拡大表示することができるようにする技術も提案されている（例えば、特許文献１、特許文献２参照）。
【０００６】
【特許文献１】特開２００６−２３６１４３号公報
【特許文献２】特開２００５−５１８７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１および特許文献２では、アイコンに割り当てられた機能を選択、実行するためには、そのアイコンが表示されている表示画面に触れる必要があった。
【０００８】
このように、液晶パネルなどの表示画面に指を触れるなどすると、表面に皮脂などの汚れが付きやすい。あるいはまた、何度も強く押下されることで液晶パネルなどが破損することもあった。
【０００９】
一方で、表示画面に触れさせることなく、アイコンに割り当てられた機能が実行されるようにした場合、例えば、ユーザがアイコンの選択などを実感するためのフィードバックを返すことが難しいという問題があった。
【００１０】
本発明は、このような状況に鑑みてなされたものであり、アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができるようにするものである。
【課題を解決するための手段】
【００１１】
本発明の一側面は、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部とを備える画像処理装置である。
【００１２】
前記画像データ生成部は、前記物体が前記表示部に近接した度合に応じて、前記表示部の奥行き表示を制御するための前記画像データを生成するようにすることができる。
【００１３】
前記近接の度合を予め設定された閾値と比較することで、前記比較の結果に対応して前記表示部の奥行き表示の制御に用いられる視差が設定されるようにすることができる。
【００１４】
前記画像データ生成部は、特定された前記ＧＵＩ部品が拡大表示されるように、前記画像データを生成するようにすることができる。
【００１５】
前記画像データ生成部は、特定された前記ＧＵＩ部品の色が変化するように、前記画像データを生成するようにすることができる。
【００１６】
前記画像データ生成部により前記画像データが生成された後、特定された前記ＧＵＩ部品に割り当てられた機能を実行する機能実行部をさらに備えるようにすることができる。
【００１７】
前記表示は、視差バリア方式を採用した３Ｄディスプレイであるようにすることができる。
【００１８】
前記近接検知部は、タッチスクリーンであるようにすることができる。
【００１９】
前記画像データ生成部は、前記ＧＵＩ部品の表示位置に対応する基準点に基づいて、所定の視差を有する左目用画像のデータ、および右目用画像のデータを生成することで、前記画像データを生成するようにすることができる。
【００２０】
本発明の一側面は、近接検知部が、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知し、部品特定部が、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定し、画像データ生成部が、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成するステップを含む操作画面表示方法である。
【００２１】
本発明の一側面は、コンピュータを、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部とを備える画像処理装置として機能させるプログラムである。
【００２２】
本発明の一側面においては、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かが検知され、前記物体が近接した場合、操作される前記ＧＵＩ部品が特定され、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データが生成される。
【発明の効果】
【００２３】
本発明によれば、アイコンなどに割り当てられた機能を表示画面に触れることなく選択、実行することができる。
【図面の簡単な説明】
【００２４】
【図１】３Ｄ画像の生成手法について説明する図である。
【図２】３Ｄ画像を表示するディスプレイの構成例を示す図である。
【図３】視差バリアをＯＮにして画像を表示した場合の例を示す図である。
【図４】視差バリアをＯＦＦにして画像を表示した場合の例を示す図である。
【図５】本技術が適用される画像処理装置の一実施の形態としての撮像装置の外観構成例を示す図である。
【図６】図５の撮像装置の内部構成例を示すブロック図である。
【図７】ＣＰＵにより実行されるソフトウェアの機能的構成例を示すブロック図である。
【図８】タッチスクリーンに表示される画像の例を示す図である。
【図９】アイコンが選択される場合のタッチスクリーンの表示画面の遷移を説明する図である。
【図１０】アイコンが選択される場合のタッチスクリーンの表示画面の遷移を説明する図である。
【図１１】アイコンが選択される場合のタッチスクリーンの表示画面の遷移を説明する図である。
【図１２】アイコン選択表示制御処理の例を説明する図である。
【図１３】アイコン選択表示制御処理の別の例を説明する図である。
【図１４】パーソナルコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２５】
以下、図面を参照して、本発明の実施の形態について説明する。
【００２６】
以下に説明する実施の形態は、３Ｄ画像（３次元で表現された画像）を表示する。そこで、本発明の実施の形態の理解を容易なものとすべく、本発明の実施形態の説明の前に、左目用画像及び右目用画像から構成される３Ｄ画像の生成手法の概略について説明する。
【００２７】
図１は、３Ｄ画像の生成手法について説明する図である。
【００２８】
第１の生成手法は、２つのレンズが設けられた撮像装置を用いる手法である。すなわち、第１の生成手法では、ユーザ等は、このような撮像装置を、２つのレンズが略水平方向に配置されるように保持して、撮影を１度行う。すると、２つのレンズのうち、左側に位置するレンズを透過した光によって左目用画像のデータが生成され、右側に位置するレンズを透過した光によって右目用画像のデータが生成される。
【００２９】
なお、撮像装置などを用いずに、ＣＧ（Computer Graphics）により生成された画像に対応させて、左目用画像のデータ、および右目用画像のデータが生成されるようにしてもよい。
【００３０】
このようにして生成された左目用画像及び右目用画像の各々には、対応するオブジェクトが、撮像装置の２つのレンズ間の距離に応じた分だけ離間した位置にそれぞれ含まれる。ここで、左目用画像及び右目用画像の各々に含まれる対応するオブジェクトの略水平方向の配置位置の差分（すなわち、距離）を、以下、視差と称する。このような、視差が大きくなるほど、３Ｄ表示されるオブジェクトの奥行きが深くなる、すなわち、凹凸の度合いが強くなる、という特徴がある。従って、かかる特徴を有する視差は、３Ｄ表示されるオブジェクトの凹凸の度合いを決定づけるパラメータとして使用することができる。
【００３１】
図２は、上述したような３Ｄ画像を表示するディスプレイの構成例を示す図である。同図に示されるディスプレイは、いわゆる視差バリア方式と称される方式で３Ｄ画像を表示する３Ｄディスプレイ３０であり、ユーザに３Ｄディスプレイ３０を裸眼で観察させることにより、３Ｄ表示されるオブジェクトの凹凸を感じさせることができる。
【００３２】
図２に示されるように、３Ｄディスプレイ３０は、表示層３１と視差バリア層３２により構成されている。表示層３１には、水平方向に単位画素数（１列）毎に左目用の画像と右目用の画像が交互に表示されるようになされている。同図において、表示層３１の左目用の画像が表示されている列は「Ｌ」と表示されており、右目用の画像が表示されている列は「Ｒ」と表示されている。
【００３３】
視差バリア層３２は、表示層３１の画像の列と同じ周期の列を有する格子状のバリアとされ、バリアの開口部の幅が表示層３１の１列の画像の幅と等しく設定されている。ユーザが、視差バリア層３２を介して表示層３１に表示された画像を所定の距離から見ると、ユーザの左右の目に「Ｌ」と「Ｒ」の画像をそれぞれ分離して提示することができるので視差が発生する。
【００３４】
例えば、図３に示されるように、ユーザ４０が、視差バリア層３２を介して表示層３１に表示された画像を所定の距離から見ると、ユーザ４０の左目には、左目用の画像の列のみにより構成される画像が提示され、ユーザ４０の右目には、右目用の画像の列のみにより構成される画像が提示される。同図の例では、ユーザ４０の左目には、「Ｌ１（左目用の画像の第１列目を表している）」、・・・「Ｌｎ（左目用の画像の第ｎ列目を表している）」、・・・「ＬＮ（左目用の画像の第Ｎ列目を表している）」の各列により構成される画像が提示されている。また、ユーザ４０の右目には、「Ｒ１（右目用の画像の第１列目を表している）」、・・・「Ｒｎ（右目用の画像の第ｎ列目を表している）」、・・・「ＲＮ（右目用の画像の第Ｎ列目を表している）」の各列により構成される画像が提示されている。
【００３５】
このように、ユーザ４０に３Ｄディスプレイ３０を裸眼で観察させることで、３Ｄ表示されるオブジェクトの凹凸を感じさせることができる。なお、視差バリア層３２を介して観察される画像は、表示層３１が本来有する水平方向の解像度の１／２の解像度しか表現することはできない。このため、３Ｄディスプレイ３０は、図３に示されるように視差バリアをＯＮにして画像を表示させることができるとともに、図４に示されるように視差バリアをＯＦＦにして画像を表示させることもできるようになされている。
【００３６】
図４は、視差バリアをＯＦＦにして画像を表示した場合の例を示す図である。図４の例の場合、表示層３１の各列に表示された画像が、ユーザ４０の左目および右目にそれぞれ提示されるようになされている。従って、視差バリアをＯＦＦして画像を表示する場合、表示層３１の各列に、左右の両目に提示させる画像「ＬＲ１」、「ＬＲ２」、・・・を表示させることで、表示層３１が本来有する水平方向の解像度で画像を表示させることができる。ただし、図４に示される場合、ユーザに、視差を有する画像を提示することができないので、画像を３Ｄ表示させることはできず、２次元での表示（２Ｄ表示）のみさせることができる。
【００３７】
このように、３Ｄディスプレイ３０は、図３に示されるように画像を３Ｄ表示させたり、図４に示されるように画像を２Ｄ表示させたりすることができるようになされている。
【００３８】
図５は、本技術が適用される画像処理装置の一実施の形態としての撮像装置５０の外観構成例を示す図である。
【００３９】
図５Ａは、撮像装置５０の正面を、図５Ｂは、その背面をそれぞれ示している。
【００４０】
図５Ａに示されるように、例えばデジタルカメラとして構成される撮像装置５０の正面の向かって右側には、レンズ部１１１が設けられている。レンズ部１１１は、被写体からの光を集光するレンズやフォーカス（ピント）の調整をするためのフォーカスレンズ、絞り等の光学系その他から構成されている（いずれも図示せず）。レンズ部１１１は、撮像装置５０の電源がオンにされたときに撮像装置５０の筐体から突出し、撮像装置５０の電源がオフにされたときに、撮像装置５０の筐体内部に収納されるようになっている。図５Ａでは、レンズ部１１１は、撮像装置５０の筐体内部に収納された状態になっている。
【００４１】
撮像装置５０の正面の、レンズ部１１１の右上には、ＡＦ(Auto Focus)補助光投光部１１２が設けられている。ＡＦ補助光投光部１１２は、レンズ部１１１の光学系の光軸方向に向かって、ＡＦ補助光としての光を照射することにより、被写体を照明する。これにより、例えば、暗い場所でも、被写体の画像を撮像して、その画像に基づいて、被写体にフォーカス（ピント）を合わせる、いわゆるオートフォーカス機能が働くようになっている。
【００４２】
撮像装置５０の正面の中央上方には、ストロボ１１３が配置されている。
【００４３】
撮像装置５０の上面の、正面側から見て右側には、電源をオン／オフするときに操作される電源ボタン１１４が設けられ、正面側から見て左側には、撮像されている画像を記録するときに操作されるシャッタボタン（レリーズボタン）１１５とが設けられている。
【００４４】
図５Ｂに示されるように、撮像装置５０の背面の右上には、ズームボタン１１６が設けられている。
【００４５】
例えば、ユーザが、撮像装置５０を用いて被写体を撮像する場合、望遠（Tele）の指示を行うときには、ズームボタン１１６のうちの「Ｔ」と印字された部分（以下、Ｔボタンと称する）を押下する。一方、ユーザは、広角（Wide）の指示を行うときには、ズームボタン１１６のうちの「Ｗ」と印字された部分（以下、Ｗボタンと称する）を押下する。なお、ユーザは、Ｔボタン又はＷボタンの押下状態を継続することによって、望遠（Tele）又は広角（Wide）の連続指示を行うことができる。
【００４６】
ズームボタン１１６の下方には、モードダイヤル１１７が設けられている。モードダイヤル１１７は、撮像装置５０の各種モードを選択するとき等に操作される。撮像装置５０の動作モードとしては、例えば、被写体を撮影する撮影モードや、被写体が撮影された結果得られる撮影画像を表示させる画像表示モードが存在する。また、撮影モード時の各種操作に関連するモードとして、ストロボ１１３の発光を強制的にオン又はオフにするモードや、セルフタイマを使用するモード、後述する液晶パネル１２０にメニュー画面を表示するモード等が存在する。
【００４７】
モードダイヤル１１７の下方には、操作ボタン１１８が設けられている。操作ボタン１１８は、予め割り当てられた指示操作をユーザが行う場合に用いられる。
【００４８】
例えば、ユーザは、操作ボタン１１８を操作することで、メニュー画面におけるカーソルを移動させ、カーソルの配置位置に存在する項目を選択することができる。
【００４９】
タッチスクリーン１１９は、液晶パネル１２０とその上に配置された近接パネル１２１とが一体的になったもので、液晶パネル１２０によって各種の画像を表示するとともに、近接パネル１２１によって、ユーザの操作を受け付けることができる。
【００５０】
液晶パネル１２０は、例えば、図２乃至図４を参照して上述した３Ｄディスプレイ３０と同様の構成を有するディスプレイとされ、必要に応じて画像を３Ｄ表示または２Ｄ表示することができるようになされている。
【００５１】
近接パネル１２１は、例えば、静電容量方式のタッチスクリーンと同様の方式により、静電容量の変化を検出し、ユーザの指などが近接したことを検出するようになされている。近接パネル１２１は、パネル上の所定の位置における静電容量の変化を検出し、その位置において、ユーザの指などがどの程度近接しているのかを表す信号を出力するようになされている。
【００５２】
図６は、図５の撮像装置５０の内部構成例を示すブロック図である。
【００５３】
なお、図６では、図５のＡＦ補助光投光部１１２、及びストロボ１１３の図示は、省略してある。
【００５４】
ＣＣＤ(Charge Coupled Device)１３１は、タイミングジェネレータ(TG)１４１から供給されるタイミング信号に従って動作することにより、レンズ部１１１を介して入射する被写体からの光を受光して光電変換を行い、受光量に応じた電気信号としてのアナログの画像信号を、アナログ信号処理部１３２に供給する。
【００５５】
アナログ信号処理部１３２は、ＣＰＵ(Central Processing Unit)１３６の制御にしたがい、ＣＣＤ１３１からのアナログの画像信号を増幅等するアナログ信号処理を行い、そのアナログ信号処理の結果得られる画像信号を、Ａ/Ｄ(Analog/Digital)変換部１３３に供給する。
【００５６】
Ａ/Ｄ変換部１３３は、ＣＰＵ１３６の制御にしたがい、アナログ信号処理部１３２からのアナログ信号の画像信号をＡ/Ｄ変換し、その結果得られるデジタル信号の画像のデータを、デジタル信号処理部１３４に供給する。
【００５７】
デジタル信号処理部１３４は、ＣＰＵ１３６の制御にしたがい、Ａ/Ｄ変換部１３３からの画像のデータに対し、ノイズ除去処理等のデジタル信号処理を施し、処理後の画像のデータを液晶パネル１２０に供給する。これにより、液晶パネル１２０には、供給された画像のデータに対応する画像、すなわち、撮影中の撮影画像（以下、スルー画と称する）が表示される。また、デジタル信号処理部１３４は、Ａ/Ｄ変換部１３３からの画像のデータを、例えば、ＪＰＥＧ(Joint Photographic Experts Group)方式等で圧縮符号化し、その結果得られる圧縮符号化データを、記録デバイス１３５に供給して記録させる。さらに、デジタル信号処理部１３４は、記録デバイス１３５に記録された圧縮符号化データを伸張復号し、その結果得られる画像のデータを液晶パネル１２０に供給する。これにより、液晶パネル１２０には、供給された画像のデータに対応する画像、すなわち、記録された撮影画像が表示される。
【００５８】
また、デジタル信号処理部１３４は、ＣＰＵ１３６の制御にしたがい、液晶パネル１２０に表示させるＧＵＩ（例えば、後述するメニュー画面）の表示を制御する。
【００５９】
記録デバイス１３５は、例えば、ＤＶＤ(Digital Versatile Disc)等のディスクや、メモリカード等の半導体メモリその他のリムーバブルなリムーバブル記録媒体であり、撮像装置５０に対して、容易に着脱可能になっている。記録デバイス１３５には、撮影画像のデータが記録される。
【００６０】
ＣＰＵ１３６は、プログラムＲＯＭ(Read Only Memory)１３９に記録されているプログラムを実行することにより、撮像装置５０を構成する各部を制御し、また、近接パネル１２１からの信号や、操作部１３７からの信号に応じて、各種の処理を行う。
【００６１】
操作部１３７は、ユーザによって操作され、その操作に対応した信号を、ＣＰＵ１３６に供給する。なお、操作部１３７には、図５に示した、電源ボタン１１４、シャッタボタン１１５、ズームボタン１１６、モードダイヤル１１７、操作ボタン１１８等が含まれる。
【００６２】
ＥＥＰＲＯＭ(Electrically Erasable Programmable ROM)１３８は、ＣＰＵ１３６の制御にしたがい、撮像装置５０に設定された各種の情報その他の、撮像装置５０の電源がオフにされたときも保持しておく必要があるデータ等を記憶する。
【００６３】
プログラムＲＯＭ１３９は、ＣＰＵ１３６が実行するプログラム、さらには、ＣＰＵ１３６がプログラムを実行する上で必要なデータを記憶している。ＲＡＭ(Read Only Memory)１４０は、ＣＰＵ１３６が各種の処理を行う上で必要なプログラムやデータを一時記憶する。
【００６４】
タイミングジェネレータ１４１は、ＣＰＵ１３６の制御にしたがい、タイミング信号を、ＣＣＤ１３１に供給する。タイミングジェネレータ１４１からＣＣＤ１３１に供給されるタイミング信号によって、ＣＣＤ１３１における露出時間（シャッタスピード）等が制御される。
【００６５】
モータドライバ１４２は、ＣＰＵ１３６の制御にしたがい、モータにより構成されるアクチュエータ１４３を駆動する。アクチュエータ１４３が駆動されることにより、レンズ部１１１は、撮像装置５０の筐体から突出し、あるいは、撮像装置５０の筐体内部に収納される。また、アクチュエータ１４３が駆動されることにより、レンズ部１１１を構成する絞りの調整や、レンズ部１１１を構成するフォーカスレンズの移動が行われる。
【００６６】
以上のように構成される撮像装置５０においては、ＣＣＤ１３１が、レンズ部１１１を介して入射する被写体からの光を受光して光電変換を行い、その結果得られるアナログの画像信号を出力する。ＣＣＤ１３１が出力するアナログの画像信号は、アナログ信号処理部１３２及びＡ/Ｄ変換部１３３を介することにより、デジタル信号の画像のデータとされ、デジタル信号処理部１３４に供給される。
【００６７】
デジタル信号処理部３４は、Ａ/Ｄ変換部１３３からの画像のデータを、液晶パネル１２０に供給し、これにより、液晶パネル１２０では、いわゆるスルー画が表示される。
【００６８】
その後、ユーザが、シャッタボタン１１５（図５）を操作すると、その操作に応じた信号が、操作部１３７からＣＰＵ１３６に供給される。ＣＰＵ１３６は、操作部１３７から、シャッタボタン１１５の操作に応じた信号が供給されると、デジタル信号処理部１３４を制御し、そのときＡ/Ｄ変換部１３３からデジタル信号処理部１３４に供給された画像のデータを圧縮させ、その結果得られる圧縮画像のデータを、記録デバイス１３５に記録させる。
【００６９】
以上のようにして、いわゆる写真撮影が行われる。
【００７０】
また、ＣＰＵ１３６は、所定のプログラムを実行することにより、３Ｄ画像の画像データを生成するようになされている。
【００７１】
３Ｄ画像を生成する場合、ＣＰＵ１３６は、視差ｄを設定する。視差ｄが大きい値として設定された場合、視差を有する画像に表示されるオブジェクトの遠近感（３Ｄ表示されるオブジェクトの凹凸の度合い）も大きくなる。例えば、視差ｄが大きい値として設定された場合、画面を観察するユーザから見て、オブジェクトが画面から手前に大きく飛び出している（または画面の奥深くに引き込まれている）ように感じられる。
【００７２】
一方、視差ｄが小さい値として設定された場合、視差を有する画像に表示されるオブジェクトの遠近感（３Ｄ表示されるオブジェクトの凹凸の度合い）も小さくなる。例えば、視差ｄが小さい値として設定された場合、画面を観察するユーザから見て、オブジェクトが画面とほぼ同じ位置にあるように感じられる。
【００７３】
ＣＰＵ１３６は、３Ｄ画像の生成の元となる画像のデータを取得し、３Ｄ表示させるべきオブジェクトが表示された処理対象領域を設定し、処理対象領域の水平方向の所定位置に基準点Ｐを設定する。そして、ＣＰＵ１３６は、基準点Ｐに対して視差ｄに対応して定まる距離であって、同一距離だけ離間している左右の領域の各データを、左目用画像のデータ、および右目用画像のデータとして生成する。
【００７４】
このようにして生成された視差ｄを有する左目用画像のデータ、および右目用画像のデータに対応する画像を、タッチスクリーン１１９に表示させることにより、ユーザに３Ｄ画像を観察させることができる。
【００７５】
図７は、ＣＰＵ１３６により実行されるプログラムなどのソフトウェアの機能的構成例を示すブロック図である。
【００７６】
近接判定部１８１は、近接パネル１２１から出力される近接検知信号に基づいて、タッチスクリーン１１９に対するユーザの指などの近接の度合を判定する。近接判定部１８１は、例えば、タッチスクリーン１１９からの距離が所定の閾値未満となるまでユーザの指などが近接した場合、近接判定部１８１はその旨を表す所定のデータを生成して出力する。また、近接していたユーザの指などがタッチスクリーン１１９からの距離が所定の閾値以上となるまで遠ざかった場合、近接判定部１８１はその旨を表すデータを生成して出力する。なお、近接判定部１８１により生成されるデータには、タッチスクリーン１１９（近接パネル１２１）のどの部分において、ユーザの指などが近接しているのかを表す情報も含まれている。
【００７７】
視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。３Ｄ画像の視差は、例えば、近接判定部１８１から出力されるデータに基づいて、ユーザの指などの近接の度合が特定され、その近接の度合に基づいて設定される。例えば、ユーザの指が第１の閾値未満の距離まで近接していると特定された場合、視差ｄ１が設定され、ユーザの指が第１の閾値より小さい第２の閾値未満の距離まで近接していると特定された場合、視差ｄ１より大きい視差ｄ２が設定される。
【００７８】
また、視差調整部１８２は、３Ｄ画像の生成の元となる画像（例えば、後述するメニュー画面の画像）のデータを取得し、３Ｄ表示させるべきオブジェクトが表示された処理対象領域を特定する。このとき、例えば、近接判定部１８１から出力されたデータに含まれるタッチスクリーン１１９のどの部分において、ユーザの指などが近接しているのかを表す情報に基づいて３Ｄ表示させるべきオブジェクト（例えば、後述するメニュー画面に表示されるアイコン）が特定される。そして、視差調整部１８２は、例えば、３Ｄ表示させるべきオブジェクトの中心位置に基準点Ｐを設定する。
【００７９】
３Ｄ画像生成部１８３は、上述したように、視差に対応して定まる距離であって、上述した基準点から同一距離だけ離間している左右の領域の各データを、左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成されたことになる。
【００８０】
選択実行指令部１８４は、近接判定部１８１から出力されるデータに基づいて、３Ｄ表示させるべきオブジェクトとユーザの指などの近接の度合が特定され、その近接の度合に基づいて、当該オブジェクトが選択されたものとし、当該オブジェクトに対応する機能の実行を指令する。例えば、後述するメニュー画面に表示された所定のアイコンが選択されたものとし、当該アイコンに対応する機能の実行が指令される。
【００８１】
図８は、タッチスクリーン１１９に表示される画像の例を示している。同図は、例えば、撮像装置５０において、上述したモードダイヤル１１７によりメニュー画面を表示するモードが選択されているときに表示されるメニュー画面とされる。
【００８２】
このメニュー画面には、各種のアイコンが表示されている。例えば、「かんたんモード」と表示されたアイコン２０１、「スマイルシャッター」と表示されたアイコン２０２、・・・「表示設定」と表示されたアイコン２０８が表示されている。
【００８３】
ユーザは、タッチスクリーン１１９に表示されたアイコンに指を近接することで、所望のアイコンを選択することができる。アイコンが選択されると、そのアイコンに対応する機能が実行されたり、所定の設定が行われたりするようになされている。
【００８４】
例えば、ユーザがアイコン２０７に指を近接させた場合、当該アイコンが選択されて「顔検出」の機能が実行される。ここで、「顔検出」は、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能とされる。
【００８５】
図９乃至図１１を参照して、ユーザによりアイコン２０７が選択される場合のタッチスクリーン１１９の表示画面の遷移について説明する。
【００８６】
図９Ａは、ユーザの視線からタッチスクリーン１１９を見た画像の例を示す図である。図９Ａに示されるように、ユーザが指２２１をタッチスクリーン１１９のアイコン２０７が表示されている部分に近接させる。いまの場合、まだ、指２２１は、タッチスクリーン１１９に十分に近接していないものとする。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１以上であるものとする。
【００８７】
図９Ｂは、ユーザがタッチスクリーン１１９を観察した結果感じられる、タッチスクリーン１１９のアイコン２０７と指２２１との仮想的な距離の感覚を説明する図であり、タッチスクリーン１１９を図９Ａの図中左方向から見た図である。なお、同図は、３Ｄ画像によりユーザが感じる遠近感を説明するものであり、実際には、アイコン２０７は、タッチスクリーン１１９の表面に表示されている画像（すなわち、厚みや奥行がない平面的存在）にすぎない。
【００８８】
図９Ｂに示されるように、アイコン２０７は、タッチスクリーン１１９から飛び出していない。すなわち、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１以上であるため、視差のある画像が生成されず、ユーザから見たアイコン２０７は、タッチスクリーン１１９の表面上に位置しているように見えるのである。
【００８９】
図１０Ａは、ユーザの視線からタッチスクリーン１１９を見た画像の別の例を示す図である。図１０Ａに示されるように、ユーザが指２２１をタッチスクリーン１１９のアイコン２０７が表示されている部分にさらに近接させる。いまの場合、例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満、閾値Ｔｈ２以上であるものとする。
【００９０】
図１０Ｂは、ユーザがタッチスクリーン１１９を観察した結果感じられる、タッチスクリーン１１９のアイコン２０７と指２２１との仮想的な距離の感覚を説明する図であり、タッチスクリーン１１９を図１０Ａの図中左方向から見た図である。なお、同図は、３Ｄ画像によりユーザが感じる遠近感を説明するものであり、実際には、アイコン２０７は、タッチスクリーン１１９の表面に表示されている画像（すなわち、厚みや奥行がない平面的存在）にすぎない。
【００９１】
図１０Ｂに示されるように、アイコン２０７が、タッチスクリーン１１９から飛び出し、指２２１に近づいている。すなわち、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となったため、視差のある画像が生成され、ユーザから見たアイコン２０７は、タッチスクリーン１１９から飛び出しているように見えるのである。
【００９２】
図１１Ａは、ユーザの視線からタッチスクリーン１１９を見た画像のさらに別の例を示す図である。図１１Ａに示されるように、ユーザが指２２１をタッチスクリーン１１９のアイコン２０７が表示されている部分にさらに近接させる。いまの場合、例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ２未満であるものとする。
【００９３】
図１１Ｂは、ユーザがタッチスクリーン１１９を観察した結果感じられる、タッチスクリーン１１９のアイコン２０７と指２２１との仮想的な距離の感覚を説明する図であり、タッチスクリーン１１９を図１１Ａの図中左方向から見た図である。なお、同図は、３Ｄ画像によりユーザが感じる遠近感を説明するものであり、実際には、アイコン２０７は、タッチスクリーン１１９の表面に表示されている画像（すなわち、厚みや奥行がない平面的存在）にすぎない。
【００９４】
図１１Ｂに示されるように、アイコン２０７が、タッチスクリーン１１９から飛び出し、指２２１と接触している。すなわち、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ２未満となったため、さらに大きい視差のある画像が生成され、ユーザから見たアイコン２０７は、タッチスクリーン１１９からさらに飛び出しているように見えるのである。
【００９５】
なお、図１０Ａ、図１１Ａに示されるアイコン２０７が拡大して表示されるようにしてもよい。つまり、ユーザにとって、アイコン２０７がタッチスクリーン１１９から飛び出しているように見えるとともに、アイコン２０７が他のアイコンより大きくなっているように見えるようにしてもよい。このようにすることで、ユーザに、アイコン２０７が選択されることを確実に実感させることができる。
【００９６】
図１１に示される状態となったとき、アイコン２０７に割り当てられた機能が実行される。すなわち、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能（「顔検出」）が実行されることになる。
【００９７】
また、アイコン２０７に割り当てられた機能が実行された場合、例えば、アイコン２０７の色が変化するようにしてもよい。あるいはまた、アイコン２０７に割り当てられた機能が実行された場合、例えば、アイコン２０７が徐々に消えていくように（フェードアウト）アニメーション表示されるようにしてもよい。このようにすることで、ユーザは、アイコン２０７が選択されることを確実に実感することができる。このようにすることで、ユーザに対してアイコンの選択操作をフィードバックさせることができ、アイコン２０７が選択されることを確実に実感させることができる。
【００９８】
さらに、メニュー画面が３Ｄ表示される際、または、アイコンの機能が実行される際に、所定の効果音などが出力されるようにしてもよい。
【００９９】
次に、図１２のフローチャートを参照して、撮像装置５０によるアイコン選択表示制御処理の例について説明する。この処理は、例えば、撮像装置５０が、タッチスクリーン１１９を介してユーザの操作を受け付けるとき実行される。
【０１００】
ステップＳ２１において、ＣＰＵ１３６は、デジタル信号処理部１３４を制御して、液晶パネル１２０（タッチスクリーン１１９）にメニュー画面を表示させる。
【０１０１】
これにより、例えば、図８を参照して上述したようなメニュー画面が表示される。
【０１０２】
ステップＳ２２において、近接判定部１８１は、ユーザの指２２１の近接を検知したか否かを判定し、まだ、近接していないと判定された場合、処理は、ステップＳ２１に戻る。例えば、図９に示されるような状態の場合、ユーザの指２２１がまだ近接していないと判定される。
【０１０３】
ステップＳ２２において、ユーザの指２２１の近接を検知したと判定された場合、処理は、ステップＳ２３に進む。例えば、図１０に示されるような状態の場合、ユーザの指２２１の近接を検知したと判定される。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となった場合、ユーザの指２２１の近接を検知したと判定される。
【０１０４】
ステップＳ２３において、視差調整部１８２は、３Ｄ表示させるアイコンを特定する。このとき、例えば、近接判定部１８１から出力されたデータに含まれる情報であって、タッチスクリーン１１９のどの部分において、ユーザの指２２１が近接しているのかを表す情報に基づいて３Ｄ表示させるべきアイコンが特定される。そして、例えば、３Ｄ表示させるべきアイコンの中心位置に基準点Ｐが設定される。
【０１０５】
ステップＳ２４において、視差調整部１８２は、タッチスクリーン１１９と指２２１との距離を特定する。タッチスクリーン１１９と指２２１との距離は、例えば、近接判定部１８１から出力されるデータに基づいて得られる近接の度合に基づいて特定される。
【０１０６】
ステップＳ２５において、視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。このとき、例えば、ステップＳ２４で特定された距離に対応する視差が設定される。例えば、ユーザの指が第１の閾値未満の距離まで近接していると特定された場合、視差ｄ１が設定され、ユーザの指が第１の閾値より小さい第２の閾値未満の距離まで近接していると特定された場合、視差ｄ１より大きい視差ｄ２が設定される。
【０１０７】
ステップＳ２６において、３Ｄ画像生成部１８３は、ステップＳ２５の処理で設定された視差と、ステップＳ２３の処理にともなって設定された基準点に基づいて、左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成されたことになる。そして、３Ｄ画像のデータに基づいて、タッチスクリーン１１９のメニュー画面が３Ｄ表示される。
【０１０８】
ステップＳ２７において、視差調整部１８２は、タッチスクリーン１１９と指２２１との距離が変化したか否かを判定し、タッチスクリーン１１９と指２２１との距離が変化していないと判定された場合、処理は、ステップＳ２６に戻る。
【０１０９】
ステップＳ２７において、タッチスクリーン１１９と指２２１との距離が変化したと判定された場合、処理は、ステップＳ２８に進む。
【０１１０】
ステップＳ２８において、視差調整部１８２は、タッチスクリーン１１９と指２２１との距離が十分小さいか否かを判定する。例えば、タッチスクリーン１１９と指２２１との距離が閾値Ｔｈ２未満であった場合、ステップＳ２８では、タッチスクリーン１１９と指２２１との距離が十分小さいと判定される。
【０１１１】
ステップＳ２８において、タッチスクリーン１１９と指２２１との距離が十分小さくないと判定された場合、処理は、ステップＳ２２に戻る。一方、ステップＳ２８において、タッチスクリーン１１９と指２２１との距離が十分小さいと判定された場合、処理は、ステップＳ２９に進む。
【０１１２】
例えば、図１１に示されるような状態である場合、ステップＳ２８において、タッチスクリーン１１９と指２２１との距離が十分小さいと判定される。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ２未満となった場合、ユーザの指２２１との距離が十分小さいと判定される。
【０１１３】
ステップＳ２９において、視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差として、より大きい視差を設定する。
【０１１４】
ステップＳ３０において、３Ｄ画像生成部１８３は、ステップＳ２９の処理で設定された視差に対応して左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成され、タッチスクリーン１１９のメニュー画面が３Ｄ表示される。
【０１１５】
ステップＳ３１において、選択実行指令部１８４は、ステップＳ２３の処理で特定されたアイコンの選択を確定させる。
【０１１６】
ステップＳ３２において、選択実行指令部１８４は、ステップＳ３１で選択が確定されたアイコンの機能を実行する。このとき、例えば、図１１に示されるように、アイコン２０７が選択され、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能（「顔検出」）が実行されることになる。
【０１１７】
このようにして、アイコン選択表示制御処理が実行される。このようにすることで、例えば、図９乃至図１１を参照して上述したように、ユーザが指２２１を近接させるとアイコン２０７がタッチスクリーン１１９から飛び出すように感じられる。そして、ユーザが指２２１をさらに近接させると、アイコン２０７がタッチスクリーン１１９からさらに飛び出して指２２１に接触するように感じられる。
【０１１８】
従って、指２２１をタッチスクリーン１１９に触れさせることなく、ユーザにアイコン２０７が選択されたこと、および、そのアイコンの機能が実行されたとこを実感させることができる。
【０１１９】
なお、上述した例では、指を近接させるとタッチスクリーンからアイコンが飛び出して見えるように表示させる例について説明したが、別の方式で表示されるようにしてもよい。例えば、タッチスクリーンの奥に沈んでいるように見えたアイコンが、指を近接させると浮き上がってくるように見えるように表示させてもよい。要は、指を近接させるとアイコンが近づいてくるように見える表示データが生成されるようにすればよい。
【０１２０】
ところで、図１２を参照して上述した例においては、例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となった場合、近接が検知され、閾値Ｔｈ２未満となった場合、アイコンの選択が確定されるものとした。つまり、指２２１のタッチスクリーン１１９からの距離の判定を２段階行うようにした。
【０１２１】
しかし、指２２１のタッチスクリーン１１９からの距離の判定は、３段階以上で行われるようにしてもよい。このようにすれば、よりリアリティーのある３Ｄ表示を行うことができる。
【０１２２】
また、指２２１のタッチスクリーン１１９からの距離の判定は、単一の閾値を用いて判定されるようにしてもよい。このようにすることで、アイコン選択表示制御処理をより簡素化することができる。
【０１２３】
図１３は、撮像装置５０によるアイコン選択表示制御処理の別の例を説明するフローチャートである。この処理は、例えば、図１２のアイコン選択表示制御処理をより簡素化したものとされる。
【０１２４】
ステップＳ５１において、ＣＰＵ１３６は、デジタル信号処理部１３４を制御して、液晶パネル１２０（タッチスクリーン１１９）にメニュー画面を表示させる。
【０１２５】
ステップＳ５２において、近接判定部１８１は、ユーザの指２２１の近接を検知したか否かを判定し、まだ、近接していないと判定された場合、処理は、ステップＳ５１に戻る。例えば、図９に示されるような状態の場合、ユーザの指２２１がまだ近接していないと判定される。
【０１２６】
ステップＳ５２において、ユーザの指２２１の近接を検知したと判定された場合、処理は、ステップＳ５３に進む。例えば、指２２１のタッチスクリーン１１９からの距離が閾値Ｔｈ１未満となった場合、ユーザの指２２１の近接を検知したと判定される。
【０１２７】
ステップＳ５３において、視差調整部１８２は、３Ｄ表示させるアイコンを特定する。このとき、例えば、近接判定部１８１から出力されたデータに含まれるタッチスクリーン１１９のどの部分において、ユーザの指２２１が近接しているのかを表す情報に基づいて３Ｄ表示させるべきアイコンが特定される。そして、例えば、３Ｄ表示させるべきアイコンの中心位置に基準点Ｐが設定される。
【０１２８】
ステップＳ５４において、視差調整部１８２は、３Ｄ画像生成部１８３により生成される３Ｄ画像の視差を設定する。このとき、例えば、予め定められた視差が設定される。
【０１２９】
ステップＳ５５において、３Ｄ画像生成部１８３は、ステップＳ５４の処理で設定された視差と、ステップＳ５３の処理にともなって設定された基準点に基づいて、左目用画像のデータ、および右目用画像のデータとして生成する。これにより、３Ｄ画像のデータが生成されたことになる。そして、３Ｄ画像のデータに基づいて、タッチスクリーン１１９のメニュー画面が３Ｄ表示される。
【０１３０】
ステップＳ５６において、選択実行指令部１８４は、ステップＳ５３の処理で特定されたアイコンの選択を確定させる。
【０１３１】
ステップＳ５７において、選択実行指令部１８４は、ステップＳ３１で選択が確定されたアイコンの機能を実行する。このとき、例えば、図１１に示されるように、アイコン２０７が選択され、ＣＣＤ１３１から出力される画像信号に対応する画像に写った被写体の中の人間の顔を自動的に検出し、さらに検出された顔にピントが合うようにオートフォーカスさせる機能（「顔検出」）が実行されることになる。
【０１３２】
このようにして、アイコン選択表示制御処理が実行されるようにしてもよい。
【０１３３】
以上においては、本技術を撮像装置５０に適用する例について説明したが、撮像装置以外の別の電子機器に本技術を適用してもよい。タッチスクリーンなどを用いた操作を行う機器であれば、本技術を適用することが可能である。
【０１３４】
また、以上においては、指でタッチスクリーンに表示されたアイコンなどを操作する例について説明したが、例えば、スタイラスペンなどを用いてタッチスクリーンに表示されたアイコンなどを操作する場合であっても、本技術を適用することができる。
【０１３５】
さらに、以上においては、タッチスクリーンに表示されたメニュー画面の中のアイコンが選択される際に３Ｄ表示が行われる例について説明したが、本技術の適用はこれに限られるものではない。要は、タッチスクリーンに何等かのＧＵＩが表示されており、ＧＵＩの部品が操作されるものであれば、本技術を適用することが可能である。
【０１３６】
また、以上においては、視差バリア方式が採用された３Ｄディスプレイを有するタッチスクリーンにより３Ｄ表示させる場合の例について説明したが、視差バリア方式以外の方式で３Ｄ表示させる場合であっても、本発明を適用することができる。例えば、レンチキュラー方式を採用した３Ｄディスプレイを有するタッチスクリーンが用いられるようにしてもよい。
【０１３７】
あるいはまた、ユーザに裸眼で観察させる３Ｄディスプレイではなく、ユーザに特殊なメガネなどを装着させて観察させる３Ｄディスプレイを有するタッチスクリーンが用いられるようにしてもよい。
【０１３８】
なお、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば図１４に示されるような汎用のパーソナルコンピュータ７００などに、ネットワークや記録媒体からインストールされる。
【０１３９】
図１４において、ＣＰＵ（Central Processing Unit）７０１は、ＲＯＭ（Read Only Memory）７０２に記憶されているプログラム、または記憶部７０８からＲＡＭ（Random Access Memory）７０３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ７０３にはまた、ＣＰＵ７０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１４０】
ＣＰＵ７０１、ＲＯＭ７０２、およびＲＡＭ７０３は、バス７０４を介して相互に接続されている。このバス７０４にはまた、入出力インタフェース７０５も接続されている。
【０１４１】
入出力インタフェース７０５には、キーボード、マウスなどよりなる入力部７０６、ＬＣＤ(Liquid Crystal display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部７０７、ハードディスクなどより構成される記憶部７０８、モデム、LANカードなどのネットワークインタフェースカードなどより構成される通信部７０９が接続されている。通信部７０９は、インターネットを含むネットワークを介しての通信処理を行う。
【０１４２】
入出力インタフェース７０５にはまた、必要に応じてドライブ７１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア７１１が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部７０８にインストールされる。
【０１４３】
上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、インターネットなどのネットワークや、リムーバブルメディア７１１などからなる記録媒体からインストールされる。
【０１４４】
なお、この記録媒体は、図１４に示される、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスク（フロッピディスク（登録商標）を含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク（MD（Mini-Disk）（登録商標）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア７１１により構成されるものだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているＲＯＭ７０２や、記憶部７０８に含まれるハードディスクなどで構成されるものも含む。
【０１４５】
なお、本明細書において上述した一連の処理は、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１４６】
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０１４７】
５０ 撮像装置， １１９ タッチスクリーン， １２０ 液晶パネル， １２１ 近接パネル １３４ デジタル信号処理部， １３６ ＣＰＵ， １３７ 操作部， １３８ ＥＥＰＲＯＭ， １３９ プログラムＲＯＭ， １４０ ＲＡＭ， １８１ 近接判定部， １８２ 視差調整部， １８３ ３Ｄ画像生成部， １８４ 選択実行部 ２０１乃至２０８ アイコン
【特許請求の範囲】
【請求項１】
ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、
前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、
特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部と
を備える画像処理装置。
【請求項２】
前記画像データ生成部は、
前記物体が前記表示部に近接した度合に応じて、前記表示部の奥行き表示を制御するための前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項３】
前記近接の度合を予め設定された閾値と比較することで、前記比較の結果に対応して前記表示部の奥行き表示の制御に用いられる視差が設定される
請求項２に記載の画像処理装置。
【請求項４】
前記画像データ生成部は、
特定された前記ＧＵＩ部品が拡大表示されるように、前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項５】
前記画像データ生成部は、
特定された前記ＧＵＩ部品の色が変化するように、前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項６】
前記画像データ生成部により前記画像データが生成された後、特定された前記ＧＵＩ部品に割り当てられた機能を実行する機能実行部をさらに備える
請求項１に記載の画像処理装置。
【請求項７】
前記表示は、視差バリア方式を採用した３Ｄディスプレイである
請求項１に記載の画像処理装置。
【請求項８】
前記近接検知部は、タッチスクリーンである
請求項１に記載の画像処理装置。
【請求項９】
前記画像データ生成部は、
前記ＧＵＩ部品の表示位置に対応する基準点に基づいて、所定の視差を有する左目用画像のデータ、および右目用画像のデータを生成することで、前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項１０】
近接検知部が、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知し、
部品特定部が、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定し、
画像データ生成部が、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成するステップ
を含む操作画面表示方法。
【請求項１１】
コンピュータを、
ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、
前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、
特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部とを備える画像処理装置として機能させる
プログラム。
【請求項１】
ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、
前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、
特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部と
を備える画像処理装置。
【請求項２】
前記画像データ生成部は、
前記物体が前記表示部に近接した度合に応じて、前記表示部の奥行き表示を制御するための前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項３】
前記近接の度合を予め設定された閾値と比較することで、前記比較の結果に対応して前記表示部の奥行き表示の制御に用いられる視差が設定される
請求項２に記載の画像処理装置。
【請求項４】
前記画像データ生成部は、
特定された前記ＧＵＩ部品が拡大表示されるように、前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項５】
前記画像データ生成部は、
特定された前記ＧＵＩ部品の色が変化するように、前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項６】
前記画像データ生成部により前記画像データが生成された後、特定された前記ＧＵＩ部品に割り当てられた機能を実行する機能実行部をさらに備える
請求項１に記載の画像処理装置。
【請求項７】
前記表示は、視差バリア方式を採用した３Ｄディスプレイである
請求項１に記載の画像処理装置。
【請求項８】
前記近接検知部は、タッチスクリーンである
請求項１に記載の画像処理装置。
【請求項９】
前記画像データ生成部は、
前記ＧＵＩ部品の表示位置に対応する基準点に基づいて、所定の視差を有する左目用画像のデータ、および右目用画像のデータを生成することで、前記画像データを生成する
請求項１に記載の画像処理装置。
【請求項１０】
近接検知部が、ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知し、
部品特定部が、前記物体が近接した場合、操作される前記ＧＵＩ部品を特定し、
画像データ生成部が、特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成するステップ
を含む操作画面表示方法。
【請求項１１】
コンピュータを、
ＧＵＩ部品を表示する表示部に対して、前記ＧＵＩ部品を操作するための物体が近接したか否かを検知する近接検知部と、
前記物体が近接した場合、操作される前記ＧＵＩ部品を特定する部品特定部と、
特定された前記ＧＵＩ部品が前記物体へ近づいて見えるように、前記表示部の奥行き表示を制御するための画像データを生成する画像データ生成部とを備える画像処理装置として機能させる
プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１２−１９０１８３（Ｐ２０１２−１９０１８３Ａ）
【公開日】平成２４年１０月４日（２０１２．１０．４）
【国際特許分類】
【出願番号】特願２０１１−５２０８５（Ｐ２０１１−５２０８５）
【出願日】平成２３年３月９日（２０１１．３．９）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年１０月４日（２０１２．１０．４）
【国際特許分類】
【出願日】平成２３年３月９日（２０１１．３．９）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]