車載機器入力装置
【課題】手元にタッチパネルのような座標入力ができるデバイスを設置し、操作しているユーザの手を撮影して、その手形状をディスプレイに重畳させる入力装置があった。しかし、ディスプレイ全体に手形状が表示されていたため、ユーザが走行中に操作する場合において、画面を注視してしまう可能性があった。
【解決手段】車載機器入力装置１は、座標入力部１００を操作しているユーザの手形状画像を作成する手形状画像作成部１０３と、車の走行状態を判定する走行強制状態判定部１０２と、走行強制状態判定部１０２の判定結果に基づいて、手形状画像を表示する大きさを決定する表示比率決定部１０４と、決定された大きさの手形状画像の表示位置を決定する表示位置決定部１０５と、メイン画面に、決定された大きさと表示位置で、手形状画像を重畳する手形状画像重畳部１０６と、重畳された画像を表示する表示部１０１を備える。
【解決手段】車載機器入力装置１は、座標入力部１００を操作しているユーザの手形状画像を作成する手形状画像作成部１０３と、車の走行状態を判定する走行強制状態判定部１０２と、走行強制状態判定部１０２の判定結果に基づいて、手形状画像を表示する大きさを決定する表示比率決定部１０４と、決定された大きさの手形状画像の表示位置を決定する表示位置決定部１０５と、メイン画面に、決定された大きさと表示位置で、手形状画像を重畳する手形状画像重畳部１０６と、重畳された画像を表示する表示部１０１を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作しているユーザの手形状をディスプレイ上に重畳表示し、車載機器への入力操作を行う車載機器入力装置に関するものである。
【背景技術】
【０００２】
近年、車内で操作する機器の対象としてカーナビゲーション装置が普及してきている。
【０００３】
従来、これら機器を操作するために、画面とタッチパネルを分離して操作する車載機器入力装置が提案されている（例えば特許文献１）。これは、タッチパネルをユーザの近くに設置して、ユーザの操作している手をカメラで撮影して、撮影した手画像を画面に重畳するという手法を用いている。これにより、ユーザは姿勢を崩すことなくタッチパネルの操作を行うことができる。また、車速やサイドブレーキなどの状態を検出して、走行強制状態（カーナビゲーション装置の機能を一部制限する状態）時には、画面上に表示されているボタンが走行強制の対象機能であった場合、重畳した手画像とボタンの重なり部分を検知し、当該重なり部分の手画像を表示しないといった手法を用いて、走行中の操作を規制している。
【特許文献１】特開２００７−２７６６１５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の車載機器入力装置においては、走行中、画面上にカメラで撮影した手画像を画面全体に表示しているため、表示されている手画像にユーザの注意が向きやすかった。
【０００５】
本発明は、従来の問題を解決するためになされたもので、手画像を画面に重畳しながら、走行中でも安全に車載機器を操作することができる車載機器入力装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の車載入力装置は、ユーザにより接触された位置の座標を取得する座標入力部と、座標入力部を操作しているユーザの手形状画像を作成する手形状画像作成部と、車の走行状態を判定する走行強制状態判定部と、走行強制状態判定部の判定結果に基づいて、手形状画像を表示する大きさを決定する表示比率決定部と、表示比率決定部により決定された大きさの手形状画像の表示位置を決定する表示位置決定部と、メイン画面に、決定された大きさで、決定された表示位置に、手形状画像を重畳する手形状画像重畳部と、手形状重畳部で手形状画像が重畳されたメイン画面を表示する表示部とを備える
この構成により、画面全体に手形状を表示せずに操作できるため、走行中、手形状が画面に重畳されていても運転に集中することができる。
【０００７】
また、手形状画像の各指と前記メイン画面内の各操作対象の機能とを関連付ける機能割当部をさらに備える。
【０００８】
この構成により、メイン画面に表示されているボタンを選択し、当該ボタンに対応している機能を実行することができる。
【０００９】
また、座標入力部を操作するユーザが運転者か助手席の同乗者かを判定する操作者判定部を更に備え、表示位置決定部は、操作者判定部の判定結果に基づいて、手形状画像の表示位置を変更する。
【００１０】
この構成により、操作しているユーザに応じて手形状を重畳する場所を変更することができ、これにより、明示的に誰が操作しているのかを示すことができる。
【００１１】
また、機能割当部によって関連付けられた各指と各操作対象の機能との対応関係を表示部に表示する割当機能表示部をさらに備える。
【００１２】
この構成により、各指に割り当てられた機能を明示的に示すことができる。
【００１３】
さらに、割当機能表示部は、各指と対応している各操作対象とを線で結ぶことで対応関係を表す。
【００１４】
この構成により、各指に割り当てられた機能を明示的に示すことができる。
【００１５】
また、割当機能表示部は、各指と対応している各操作対象とを同じ色にすることで対応関係を表す。
【００１６】
この構成により、メイン画面上に特別な表示をすることなく各機能と各指との対応関係を表すことができるので、メイン画面を煩雑にすることがない。
【００１７】
また、割当機能表示部は、各操作対象に、対応している各指の種類を示すＧＵＩを表示することで対応関係を表す。
【００１８】
この構成により、メイン画面の各機能を見るだけで、対応している指を判別することが可能になる。
【００１９】
また、走行強制状態判定部によって車が走行中であると判定されると、割当機能表示部は、走行中の操作を制限された操作対象に対応している指を強調表示する。
【００２０】
この構成により、どの指が現在機能を実行できないかをあらかじめ知ることができる。
【００２１】
また、走行強制状態判定部によって車が走行中であると判定されると、割当機能表示部は、走行中の操作を制限された操作対象と対応している指との対応関係を表す線を削除する。
【００２２】
この構成により、対応関係を示す線を削除するため、対応関係が切れていることを明示的に示すことができる。
【００２３】
また、機能割当部は、座標入力部が取得した座標に基づいて、各指に関連付けられる各操作対象の機能を変更する。
【００２４】
この構成により、メイン画面に表示されているボタンとの相対的な位置で、各指に割り当てる機能を変更することができるため、多くの機能を各指に割り当てることができる。
【００２５】
また、機能割当部は、座標入力部が取得した座標に基づいて、各指に関連付けられる各操作対象の機能を変更し、割当機能表示部は、変更する基準を表す境界情報を、表示部の手形状画像を表示する領域内に表示する。
【００２６】
この構成により、どの位置に指先を移動すれば所望する機能を実行できるかを、ユーザは容易に判断することができるようになる。
【発明の効果】
【００２７】
本発明の車載機器入力装置によれば、メイン画面全体に手形状画像を表示せずに操作できるため、走行中、手形状画像が画面に重畳表示されていても運転に集中することができるという効果を有する。
【発明を実施するための最良の形態】
【００２８】
以下、本発明の実施の形態の車載機器入力装置について、図面を用いて説明する。
【００２９】
図１に本実施形態の車載機器入力装置１の機能ブロック図を示す。本実施形態の車載機器入力装置１は、座標入力部１００、表示部１０１、走行強制状態判定部１０２、手形状画像作成部１０３、表示比率決定部１０４、表示位置決定部１０５、手形状画像重畳部１０６から構成される。
【００３０】
座標入力部１００は、ユーザが操作する対象であり、ユーザの指の接触を検知し、その接触した位置の座標を出力する。この座標入力部１００の一般的な例としては、透明なタッチパネルや不透明なタッチスクリーン等が挙げられる。また、最近では、同時に複数の接触座標を出力できるタッチパネル、タッチスクリーンなど、様々な方式が開発されてきている。
【００３１】
手形状画像作成部１０３は、座標入力部１００を操作しているユーザの手形状の画像を作成する。、手形状画像作成部１０３としては、カメラを用いてユーザの手形状を撮影し、その映像から手形状画像を取得することが考えられる。また、別の方法としては、座標入力部１００が同時に複数の接触座標を検知可能なものであれば、接触座標から手形状をインバース・キネマティクス法を用いて、あらかじめ用意している手形状モデルとのマッチングを行って手形状を推定し、コンピュータグラフィックス（今後ＣＧと呼ぶ）で描いた手形状画像を作成する方式なども考えられる。この方式の場合は、カメラで撮影する場合と比べて、コストを安く抑えることができ、また、サイズとしてもカメラ分のスペースを確保する必要がないため、薄型化、小型化が可能になるため、本実施形態では、こちらの方式を用いて説明する。
【００３２】
表示比率決定部１０４は、メイン画面に対して手形状画像作成部１０３で作成された手形状画像の表示サイズを決定する。
【００３３】
表示位置決定部１０５は、表示比率決定部１０４で表示サイズが決定された手形状画像を、メイン画面上のどの位置に表示するかを決定する。
【００３４】
手形状画像重畳部１０６は、表示位置決定部１０５で表示位置が決定された手形状画像を、表示部１０１に表示されているメイン画面（またはアプリケーション）に重畳する処理を行う。このメイン画面とは、本実施の形態ではカーナビゲーション装置のメニュー画面や地図画面を想定している。
【００３５】
表示部１０１は、カーナビゲーション装置のメイン画面と手形状画像重畳部１０６で重畳した手形状画像を表示する画面であり、例えば液晶ディスプレイや、有機ＥＬディスプレイなどが考えられる。
【００３６】
走行強制状態判定部１０２は、車の車速やサイドブレーキの少なくとも一方をトリガとして、車の走行状態を判定する。
【００３７】
以上のように構成された本実施形態の車載機器入力装置１について、図２を用いて全体の基本的な処理の流れを説明する。
【００３８】
まず、ステップＳ２０にて、座標入力部１００を操作しているユーザの指の接触位置から手形状画像作成部１０３でＣＧの手形状画像を作成する。次に、ステップＳ２１で、走行強制状態判定部１０２は、車速やＧＰＳ、ギヤ位置もしくはサイドブレーキの状態などに連動して、自車が走行中であるか否かを判定する。この判定結果が走行中であった場合は（ステップＳ２１でＹｅｓ）、ステップＳ２２に進み、表示比率決定部１０４はＣＧの手形状画像の表示サイズを決定する。この際、手形状画像のサイズはメイン画面の大きさに対して一定の大きさより小さくする。また、速度が早くなったときは、手形状画像の大きさをさらに小さくすること等が考えられる。
【００３９】
一方、ステップＳ２１の判定結果が走行中でなかった場合には、ステップＳ２６に進み、従来技術と同様に、手形状画像の大きさと表示位置を設定し、ステップＳ２４に進む。
【００４０】
ステップＳ２２の後、ステップＳ２３では、表示位置決定部１０５はＣＧの手形状画像を表示部１０１のどの位置に重畳させるかを決定する。これは、メイン画面に表示している内容に従って決定することが考えられる。
【００４１】
例えば、図３のように、メイン画面が地図だった場合に、一般的なカーナビゲーション装置の機能として、２つの異なる地図の表示形態（左側画面３１、右側画面３２）を表示するものがある。この画面の操作対象が仮に左側画面３１のみであった場合は、操作対象となる画面側に表示位置決定部１０５は手形状画像３０を重畳する。これにより、ユーザは操作できる画面を簡単に判別でき、かつ操作時に画面全体に手形状画像を表示しないため、手形状画像３０が画面上で動いていても、画面に気を取られることなく操作することができる。なお、このときの操作としては、２本の指を開いたり閉じたりするジェスチャーなどによって、地図を拡大もしくは縮小するなどの操作が考えられる。なお、本実施形態では、手形状画像３０が表示されている手形状画像描画領域３３と座標入力部１００の操作領域とは１対１で対応している。
【００４２】
次に、手形状画像重畳部１０６はステップＳ２０で作成された手形状画像を、ステップＳ２２で決定された表示サイズで、ステップ２３で決定された位置に重畳し（ステップＳ２４）、表示部１０１は手形状画像が重畳された画像を表示する（ステップＳ２５）。
【００４３】
（変形例）
次に、本実施形態の変形例の車載機器入力装置について、図４に示す機能ブロック図を用いて説明する。本実施形態の車載機器入力装置４と、図１に示す構成と異なるところは、機能割当部４０７、割当機能表示部４０８、操作者判定部４０９をさらに備えている点である。図１と同じ構成要素については、同じ符号を付してその説明を省略する。
【００４４】
操作者判定部４０９は、別途センサを設けて、座標入力部１００に対してユーザがどの方向から手を差し込んでいるかを判定することで、操作しているユーザの手の左右を判定する。センサとしては、赤外線センサ、光センサなどを用いることができる。例えば、センターコンソールに座標入力部１００が設置されている場合は、国産車では右の座席が運転席のため、右方向からの入力をセンサで判定した場合は、左手と判定する。逆に左ハンドルの外国産車の場合には、左方向からの入力をセンサで判定した場合は、右手と判定する。操作者判定部４０９は、左右どちらの座席が運転席であるかが予め分かっていれば、座標入力部１００に対してユーザがどの方向から手を差し込んでいるかを判定することで、ユーザが運転者か助手席の同乗者かを判定できる。
【００４５】
また別の判定方法として、あらかじめ、座標入力部１００を操作する前に手を識別するためのルール（例えば、左手で操作する場合は、操作を開始する前に、親指を座標入力部１００の右下の隅を押下し、その他の指を座標入力部１００に自然な形で接触させるなど）を設けて、センサを使わずに左右を判定する方法なども考えられる。これらの判定方法を用いて左右を判別したときに、本実施形態のように、座標入力部１００の接触座標から手形状画像を作成する場合は、左右を正しくモデリングすることができ、違和感のない表示をすることができる。
【００４６】
また、表示位置決定部１０５は、操作者判定部４０９の判定結果に基づいてメイン画面上のどの位置に手形状画像を重畳するかを決定する。例えば、右手が入力されていると判定された場合には、助手席からの入力と判断し、手形状画像を重畳する位置を左側にするなどが考えられる。これにより、ユーザは表示部１０１の自分に近い方に手形状画像が表示されるため視認性が良くなり、違和感が少ない。
【００４７】
次に、機能割当部４０７について説明する。機能割当部４０７は、メイン画面上の各機能を表しているボタン（操作対象）に対応して、手形状画像の各指に機能を割り当てる。
【００４８】
例えば、図５に示す各ボタン（ボタン５１〜５５）に表示されている機能を、手形状画像５０のそれぞれの指（親指、人指し指、中指、薬指、小指）に、各ボタンを並び順通りに対応させる。つまり、手形状画像５０が左手であった場合は、小指にボタン５５のＡという機能、薬指にボタン５４のＢという機能、中指にボタン５３のＣという機能、人指し指にボタン５２のＤという機能、親指にボタン５１のＥという機能を対応させる。これにより、ユーザは実行したい機能が対応している指を、その場でダブルタップなどをすることにより、その機能を実行させることができる。そのため、ユーザはその対応関係を覚えてしまえば画面を見なくてもその機能を選択することができるので、車載機器の入力装置として効果が大きい。
【００４９】
次に、メイン画面上に指の本数よりも多くボタンが存在していた場合（操作対象が多い場合）の操作方法について、図６（ａ）、（ｂ）を用いて説明する。
【００５０】
図６（ａ）では、ユーザの指が座標入力部１００の上部の領域に接触している状態で、図６（ｂ）では下部の領域に接触している状態を表している。そして両図とも、メイン画面の上部に４つのボタン（６１Ａ〜６４Ａ、６１Ｂ〜６４Ｂ）がそれぞれ並び、下部に４つのボタン（６５Ａ〜６８Ａ、６５Ｂ〜６８Ｂ）がそれぞれ配置されている状態を表している。ユーザの指が座標入力部１００の上部の領域か、下部の領域に接触しているかは、座標入力部１００が取得した各座標に基づいて判定することができる。
【００５１】
図６（ａ）では、ユーザの指が座標入力部１００の上部の領域を操作するのに対応して、上側の各ボタン６１Ａ〜６４Ａの機能を機能割当部４０７が各指に対応させる。具体的には、手形状画像６０は左手のため、小指にボタン６１ＡのＡという機能、薬指にボタン６２ＡのＢという機能、中指にボタン６３ＡのＣという機能、人差し指にボタン６４ＡのＤという機能を割り当てる。また、図６（ｂ）では、ユーザの指が座標入力部１００の下部の領域を操作しているため、機能割当部４０７は、小指にボタン６５ＢのＥという機能、薬指にボタン６６ＢのＦという機能、中指にボタン６７ＢのＧという機能、人差し指にボタン６８ＡのＨという機能を割り当てる。
【００５２】
このように、手形状画像６０の指先座標とメイン画面に配置されている各ボタンの座標に対応して、機能割当部４０７はそれぞれ各指に割り当てる機能を変更することによって、複数の機能を各指に割り当て、実行することが可能になり、かつ、ユーザも割り当てられた機能を直感的に把握することができる。
【００５３】
次に、割当機能表示部４０８について説明する。割当機能表示部４０８は、機能割当部４０７によって関連付けられた、手形状画像の各指と対応する各ボタンの機能との対応関係を表示部１０１に表示する。これらを図７、図８、図９、図１０、図１１、図１２を用いて説明する。
【００５４】
図７は手形状画像の各指と各ボタン（ボタン７５〜ボタン７８）の対応関係を、線で結ぶことによって表している一例を示す図である。つまり、この例の場合は、ボタン７５と小指については線７５Ｌ、ボタン７６と薬指については線７６Ｌ、ボタン７７と中指については線７７Ｌ、ボタン７８と人差し指については線７８Ｌが、それぞれの対応関係を表している。これにより、メイン画面を煩雑にすることなく、対応関係を図示でき、かつ分かりやすく表示することができる。
【００５５】
また、図８（ａ）、（ｂ）のように、現在実行可能な各ボタンをまとめて対応関係を表すことも考えられる。図８は、ボタンと手形状画像の指との対応関係を表した表示画面の一例を示す図で、図８（ａ）では、ユーザの指が座標入力部１００の上部の領域に接触している状態で、図８（ｂ）では下部の領域に接触している状態を表している。図８（ａ）では、上側のボタン８１Ａ〜８４Ａを囲む線８９Ａが、手形状画像描画領域３３と結ばれており、手形状画像の各指が上側のボタン８１Ａ〜８４Ａにそれぞれ対応していることが分かる。図８（ｂ）では、下側のボタン８１Ｂ〜８４Ｂを囲む線８９Ｂが、手形状画像描画領域３３と結ばれており、手形状画像の各指が下側のボタン８１Ｂ〜８４Ｂにそれぞれ対応していることが分かる。これにより、線８９Ａ、８９Ｂで対応関係がひとつにまとまるため、メイン画面を煩雑さを防ぐことができる。
【００５６】
また、図９は、走行中に操作を制限しているボタンが存在した場合の各ボタンと各指との対応関係を表した表示画面の一例を示す図である。走行強制状態判定部１０２により車が走行中であると判定されると、走行中の操作を制限されているボタンが実行不可能な状態に変更される。一般的に操作が制限されているボタンはグレーアウト（灰色系の色でトーンダウンすること）され、押下してもその機能は実行されない。このような実行不可能ボタン９８が存在した場合、割当機能表示部４０８は、この実行不可能ボタン９８と指（手形状画像６０の人指し指）との対応関係を表す線を削除する。これにより、対応関係が切れていることを明示できるため、実行不可能ボタン９８の機能を実行することができないことが分かりやすく表示できる。
【００５７】
また、実行不可能なボタンがあった場合の別の例を図１３に示す。走行強制状態判定部１０２により車が走行中であると判定されると、走行中の操作を制限されているボタンが実行不可能な状態に変更される。このような実行不可能ボタン１３０３が存在した場合、割当機能表示部４０８は、手形状画像６０のボタン１３０３に対応する指（図１３の場合は、人指し指）もグレーアウトなどの強調表示を行う。これにより、どの指が現在機能を実行できないかをあらかじめ知ることができる。
【００５８】
図１０は、各指と各ボタン（ボタン１００１〜ボタン１００８）の対応関係を、それぞれ異なる色で表したときの一例を示す図である（ここで、図１０では色を使えないため、変りに色の違いをパターンで表示している）。この例の場合、ボタン１００５の機能Ｅが小指、ボタン１００６の機能Ｆが薬指、ボタン１００７の機能Ｇが中指、ボタン１００８の機能Ｈが人指し指に対応していることを表している。このように同じ色で対応付けることによって、メイン画面に各指と各ボタンの対応関係を示す線を特別に描画するなどの処理を必要とせず、かつ直感的にその対応関係を把握することができる。
【００５９】
次に図１１に、各指と各ボタン（ボタン１１０１〜ボタン１１０８）との対応関係を、各ボタンの近傍に各指の種類を示すＧＵＩ（１１０５Ｆ〜１１０８Ｆ）を表示する例を示す。この例の場合は、ボタン１１０５の機能Ｅが小指と対応していることを表すために、ボタン１１０５の近傍のＧＵＩ１１０５Ｆに小指を表す「小」という文字を示す。この他にも薬指、中指、人差し指を表すＧＵＩ１１０６Ｆ〜１１０８Ｆが、それぞれ対応しているボタン１１０６〜１１０８の近傍に表示されている。これにより、ユーザはメイン画面を見るだけで、どの指で座標入力部１００を押下すれば所望の機能が実行できるかを知ることができる。また、別途操作者判定部４０９により、操作している手の左右が判定できる場合は、各指の種類を示すＧＵＩの並び順を左右逆にして表示し、割り当てる指を変更することによって、違和感をなくすこともできる。
【００６０】
また、図１２では、メイン画面上の各ボタンの配置に応じて、機能割当部４０７が各指に割り当てる機能を変更する境界座標をもとに、手形状画像描画領域３３内に境界情報となる境界線１２０９を表示する。本実施形態の場合、機能割当部４０７は上下方向に応じて、各指に対する各機能の割り当てを変更する。境界線１２０９より上側に手形状画像がある場合は、各指にメイン画面上の上側の各ボタン（ボタン１２０１〜１２０４）の機能を割り当て、図１２に示すように境界線１２０９より下側に手形状画像がある場合は、各指にメイン画面上の下側の各ボタン（ボタン１２０５〜１２０８）の機能を割り当てる。手形状画像描画領域３３内に上下方向を分割するような境界線１２０９を表示することにより、どの位置に指先を移動すれば所望するボタンを選択することができるかを、ユーザは容易に判断することができるようになる。
【００６１】
なお、図１２では手形状画像描画領域３３を上下に分ける境界線により境界情報を表示したが、上下に色分けするなどによっても境界情報を示すことができる。
【００６２】
また、図１２ではメイン画面上のボタン群は上側と下側に配置されていたが、ボタン群がメイン画面上の左右に配置されている場合には、手形状画像描画領域３３内を左右方向に分割する境界線を表示してもよい。ただし、この場合は、各指と各ボタンとの対応関係を図７の様に線で表示したり、図１０の様に同じ色で表示するのが好ましい。
【産業上の利用可能性】
【００６３】
以上のように、本発明にかかる車載機器入力装置は、画面全体に手形状画像を表示せずに操作できるため、走行中、手形状画像が画面に重畳されていても運転に集中することができるという効果を有し、カーナビゲーション装置、オーディオ機器、カーエアコンなどの車載機器への入力操作を行う車載機器入力装置等として有用である。
【図面の簡単な説明】
【００６４】
【図１】本発明の実施の形態における車載機器入力装置の機能ブロック図
【図２】本発明の実施の形態における車載機器入力装置の処理の流れを示すフローチャート
【図３】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図４】本発明の実施の形態における車載機器入力装置の機能ブロック図
【図５】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図６】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図で、（ａ）ユーザの指が座標入力部１００の上部の領域に接触している状態を表す図、（ｂ）ユーザの指が座標入力部１００の下部の領域に接触している状態を表す図
【図７】本発明の実施の形態における車載機器入力装置の各ボタンと各指との対応関係を表した表示画面の一例を示す図
【図８】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図で、（ａ）ユーザの指が座標入力部１００の上部の領域に接触している状態を表す図、（ｂ）ユーザの指が座標入力部１００の下部の領域に接触している状態を表す図
【図９】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１０】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１１】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１２】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１３】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【符号の説明】
【００６５】
１、４ 車載機器入力装置
３０、５０、６０ 手形状画像
３３ 手形状画像描画領域
５１〜５５、６１Ａ〜６８Ａ、６１Ｂ〜６８Ｂ、７１〜７８、８１Ａ〜８８Ａ、８１Ｂ〜８８Ｂ、９１〜９８、１００１〜１００８、１１０１〜１１０８、１３００〜１３０２、１３０４ ボタン
７５Ｌ〜７８Ｌ、９５Ｌ〜９７Ｌ 各ボタンと各指との対応関係を表した線
８９Ａ、８９Ｂ ボタンを囲む線
９８、１３０３ 実行不可能ボタン
１００ 座標入力部
１０１ 表示部
１０２ 走行強制状態判定部
１０３ 手形状画像作成部
１０４ 表示比率決定部
１０５ 表示位置決定部
１０６ 手形状画像重畳部
４０７ 機能割当部
４０８ 割当機能表示部
４０９ 操作者判定部
１１０５Ｆ〜１１０８Ｆ ＧＵＩ
１２０９ 境界線
【技術分野】
【０００１】
本発明は、操作しているユーザの手形状をディスプレイ上に重畳表示し、車載機器への入力操作を行う車載機器入力装置に関するものである。
【背景技術】
【０００２】
近年、車内で操作する機器の対象としてカーナビゲーション装置が普及してきている。
【０００３】
従来、これら機器を操作するために、画面とタッチパネルを分離して操作する車載機器入力装置が提案されている（例えば特許文献１）。これは、タッチパネルをユーザの近くに設置して、ユーザの操作している手をカメラで撮影して、撮影した手画像を画面に重畳するという手法を用いている。これにより、ユーザは姿勢を崩すことなくタッチパネルの操作を行うことができる。また、車速やサイドブレーキなどの状態を検出して、走行強制状態（カーナビゲーション装置の機能を一部制限する状態）時には、画面上に表示されているボタンが走行強制の対象機能であった場合、重畳した手画像とボタンの重なり部分を検知し、当該重なり部分の手画像を表示しないといった手法を用いて、走行中の操作を規制している。
【特許文献１】特開２００７−２７６６１５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の車載機器入力装置においては、走行中、画面上にカメラで撮影した手画像を画面全体に表示しているため、表示されている手画像にユーザの注意が向きやすかった。
【０００５】
本発明は、従来の問題を解決するためになされたもので、手画像を画面に重畳しながら、走行中でも安全に車載機器を操作することができる車載機器入力装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の車載入力装置は、ユーザにより接触された位置の座標を取得する座標入力部と、座標入力部を操作しているユーザの手形状画像を作成する手形状画像作成部と、車の走行状態を判定する走行強制状態判定部と、走行強制状態判定部の判定結果に基づいて、手形状画像を表示する大きさを決定する表示比率決定部と、表示比率決定部により決定された大きさの手形状画像の表示位置を決定する表示位置決定部と、メイン画面に、決定された大きさで、決定された表示位置に、手形状画像を重畳する手形状画像重畳部と、手形状重畳部で手形状画像が重畳されたメイン画面を表示する表示部とを備える
この構成により、画面全体に手形状を表示せずに操作できるため、走行中、手形状が画面に重畳されていても運転に集中することができる。
【０００７】
また、手形状画像の各指と前記メイン画面内の各操作対象の機能とを関連付ける機能割当部をさらに備える。
【０００８】
この構成により、メイン画面に表示されているボタンを選択し、当該ボタンに対応している機能を実行することができる。
【０００９】
また、座標入力部を操作するユーザが運転者か助手席の同乗者かを判定する操作者判定部を更に備え、表示位置決定部は、操作者判定部の判定結果に基づいて、手形状画像の表示位置を変更する。
【００１０】
この構成により、操作しているユーザに応じて手形状を重畳する場所を変更することができ、これにより、明示的に誰が操作しているのかを示すことができる。
【００１１】
また、機能割当部によって関連付けられた各指と各操作対象の機能との対応関係を表示部に表示する割当機能表示部をさらに備える。
【００１２】
この構成により、各指に割り当てられた機能を明示的に示すことができる。
【００１３】
さらに、割当機能表示部は、各指と対応している各操作対象とを線で結ぶことで対応関係を表す。
【００１４】
この構成により、各指に割り当てられた機能を明示的に示すことができる。
【００１５】
また、割当機能表示部は、各指と対応している各操作対象とを同じ色にすることで対応関係を表す。
【００１６】
この構成により、メイン画面上に特別な表示をすることなく各機能と各指との対応関係を表すことができるので、メイン画面を煩雑にすることがない。
【００１７】
また、割当機能表示部は、各操作対象に、対応している各指の種類を示すＧＵＩを表示することで対応関係を表す。
【００１８】
この構成により、メイン画面の各機能を見るだけで、対応している指を判別することが可能になる。
【００１９】
また、走行強制状態判定部によって車が走行中であると判定されると、割当機能表示部は、走行中の操作を制限された操作対象に対応している指を強調表示する。
【００２０】
この構成により、どの指が現在機能を実行できないかをあらかじめ知ることができる。
【００２１】
また、走行強制状態判定部によって車が走行中であると判定されると、割当機能表示部は、走行中の操作を制限された操作対象と対応している指との対応関係を表す線を削除する。
【００２２】
この構成により、対応関係を示す線を削除するため、対応関係が切れていることを明示的に示すことができる。
【００２３】
また、機能割当部は、座標入力部が取得した座標に基づいて、各指に関連付けられる各操作対象の機能を変更する。
【００２４】
この構成により、メイン画面に表示されているボタンとの相対的な位置で、各指に割り当てる機能を変更することができるため、多くの機能を各指に割り当てることができる。
【００２５】
また、機能割当部は、座標入力部が取得した座標に基づいて、各指に関連付けられる各操作対象の機能を変更し、割当機能表示部は、変更する基準を表す境界情報を、表示部の手形状画像を表示する領域内に表示する。
【００２６】
この構成により、どの位置に指先を移動すれば所望する機能を実行できるかを、ユーザは容易に判断することができるようになる。
【発明の効果】
【００２７】
本発明の車載機器入力装置によれば、メイン画面全体に手形状画像を表示せずに操作できるため、走行中、手形状画像が画面に重畳表示されていても運転に集中することができるという効果を有する。
【発明を実施するための最良の形態】
【００２８】
以下、本発明の実施の形態の車載機器入力装置について、図面を用いて説明する。
【００２９】
図１に本実施形態の車載機器入力装置１の機能ブロック図を示す。本実施形態の車載機器入力装置１は、座標入力部１００、表示部１０１、走行強制状態判定部１０２、手形状画像作成部１０３、表示比率決定部１０４、表示位置決定部１０５、手形状画像重畳部１０６から構成される。
【００３０】
座標入力部１００は、ユーザが操作する対象であり、ユーザの指の接触を検知し、その接触した位置の座標を出力する。この座標入力部１００の一般的な例としては、透明なタッチパネルや不透明なタッチスクリーン等が挙げられる。また、最近では、同時に複数の接触座標を出力できるタッチパネル、タッチスクリーンなど、様々な方式が開発されてきている。
【００３１】
手形状画像作成部１０３は、座標入力部１００を操作しているユーザの手形状の画像を作成する。、手形状画像作成部１０３としては、カメラを用いてユーザの手形状を撮影し、その映像から手形状画像を取得することが考えられる。また、別の方法としては、座標入力部１００が同時に複数の接触座標を検知可能なものであれば、接触座標から手形状をインバース・キネマティクス法を用いて、あらかじめ用意している手形状モデルとのマッチングを行って手形状を推定し、コンピュータグラフィックス（今後ＣＧと呼ぶ）で描いた手形状画像を作成する方式なども考えられる。この方式の場合は、カメラで撮影する場合と比べて、コストを安く抑えることができ、また、サイズとしてもカメラ分のスペースを確保する必要がないため、薄型化、小型化が可能になるため、本実施形態では、こちらの方式を用いて説明する。
【００３２】
表示比率決定部１０４は、メイン画面に対して手形状画像作成部１０３で作成された手形状画像の表示サイズを決定する。
【００３３】
表示位置決定部１０５は、表示比率決定部１０４で表示サイズが決定された手形状画像を、メイン画面上のどの位置に表示するかを決定する。
【００３４】
手形状画像重畳部１０６は、表示位置決定部１０５で表示位置が決定された手形状画像を、表示部１０１に表示されているメイン画面（またはアプリケーション）に重畳する処理を行う。このメイン画面とは、本実施の形態ではカーナビゲーション装置のメニュー画面や地図画面を想定している。
【００３５】
表示部１０１は、カーナビゲーション装置のメイン画面と手形状画像重畳部１０６で重畳した手形状画像を表示する画面であり、例えば液晶ディスプレイや、有機ＥＬディスプレイなどが考えられる。
【００３６】
走行強制状態判定部１０２は、車の車速やサイドブレーキの少なくとも一方をトリガとして、車の走行状態を判定する。
【００３７】
以上のように構成された本実施形態の車載機器入力装置１について、図２を用いて全体の基本的な処理の流れを説明する。
【００３８】
まず、ステップＳ２０にて、座標入力部１００を操作しているユーザの指の接触位置から手形状画像作成部１０３でＣＧの手形状画像を作成する。次に、ステップＳ２１で、走行強制状態判定部１０２は、車速やＧＰＳ、ギヤ位置もしくはサイドブレーキの状態などに連動して、自車が走行中であるか否かを判定する。この判定結果が走行中であった場合は（ステップＳ２１でＹｅｓ）、ステップＳ２２に進み、表示比率決定部１０４はＣＧの手形状画像の表示サイズを決定する。この際、手形状画像のサイズはメイン画面の大きさに対して一定の大きさより小さくする。また、速度が早くなったときは、手形状画像の大きさをさらに小さくすること等が考えられる。
【００３９】
一方、ステップＳ２１の判定結果が走行中でなかった場合には、ステップＳ２６に進み、従来技術と同様に、手形状画像の大きさと表示位置を設定し、ステップＳ２４に進む。
【００４０】
ステップＳ２２の後、ステップＳ２３では、表示位置決定部１０５はＣＧの手形状画像を表示部１０１のどの位置に重畳させるかを決定する。これは、メイン画面に表示している内容に従って決定することが考えられる。
【００４１】
例えば、図３のように、メイン画面が地図だった場合に、一般的なカーナビゲーション装置の機能として、２つの異なる地図の表示形態（左側画面３１、右側画面３２）を表示するものがある。この画面の操作対象が仮に左側画面３１のみであった場合は、操作対象となる画面側に表示位置決定部１０５は手形状画像３０を重畳する。これにより、ユーザは操作できる画面を簡単に判別でき、かつ操作時に画面全体に手形状画像を表示しないため、手形状画像３０が画面上で動いていても、画面に気を取られることなく操作することができる。なお、このときの操作としては、２本の指を開いたり閉じたりするジェスチャーなどによって、地図を拡大もしくは縮小するなどの操作が考えられる。なお、本実施形態では、手形状画像３０が表示されている手形状画像描画領域３３と座標入力部１００の操作領域とは１対１で対応している。
【００４２】
次に、手形状画像重畳部１０６はステップＳ２０で作成された手形状画像を、ステップＳ２２で決定された表示サイズで、ステップ２３で決定された位置に重畳し（ステップＳ２４）、表示部１０１は手形状画像が重畳された画像を表示する（ステップＳ２５）。
【００４３】
（変形例）
次に、本実施形態の変形例の車載機器入力装置について、図４に示す機能ブロック図を用いて説明する。本実施形態の車載機器入力装置４と、図１に示す構成と異なるところは、機能割当部４０７、割当機能表示部４０８、操作者判定部４０９をさらに備えている点である。図１と同じ構成要素については、同じ符号を付してその説明を省略する。
【００４４】
操作者判定部４０９は、別途センサを設けて、座標入力部１００に対してユーザがどの方向から手を差し込んでいるかを判定することで、操作しているユーザの手の左右を判定する。センサとしては、赤外線センサ、光センサなどを用いることができる。例えば、センターコンソールに座標入力部１００が設置されている場合は、国産車では右の座席が運転席のため、右方向からの入力をセンサで判定した場合は、左手と判定する。逆に左ハンドルの外国産車の場合には、左方向からの入力をセンサで判定した場合は、右手と判定する。操作者判定部４０９は、左右どちらの座席が運転席であるかが予め分かっていれば、座標入力部１００に対してユーザがどの方向から手を差し込んでいるかを判定することで、ユーザが運転者か助手席の同乗者かを判定できる。
【００４５】
また別の判定方法として、あらかじめ、座標入力部１００を操作する前に手を識別するためのルール（例えば、左手で操作する場合は、操作を開始する前に、親指を座標入力部１００の右下の隅を押下し、その他の指を座標入力部１００に自然な形で接触させるなど）を設けて、センサを使わずに左右を判定する方法なども考えられる。これらの判定方法を用いて左右を判別したときに、本実施形態のように、座標入力部１００の接触座標から手形状画像を作成する場合は、左右を正しくモデリングすることができ、違和感のない表示をすることができる。
【００４６】
また、表示位置決定部１０５は、操作者判定部４０９の判定結果に基づいてメイン画面上のどの位置に手形状画像を重畳するかを決定する。例えば、右手が入力されていると判定された場合には、助手席からの入力と判断し、手形状画像を重畳する位置を左側にするなどが考えられる。これにより、ユーザは表示部１０１の自分に近い方に手形状画像が表示されるため視認性が良くなり、違和感が少ない。
【００４７】
次に、機能割当部４０７について説明する。機能割当部４０７は、メイン画面上の各機能を表しているボタン（操作対象）に対応して、手形状画像の各指に機能を割り当てる。
【００４８】
例えば、図５に示す各ボタン（ボタン５１〜５５）に表示されている機能を、手形状画像５０のそれぞれの指（親指、人指し指、中指、薬指、小指）に、各ボタンを並び順通りに対応させる。つまり、手形状画像５０が左手であった場合は、小指にボタン５５のＡという機能、薬指にボタン５４のＢという機能、中指にボタン５３のＣという機能、人指し指にボタン５２のＤという機能、親指にボタン５１のＥという機能を対応させる。これにより、ユーザは実行したい機能が対応している指を、その場でダブルタップなどをすることにより、その機能を実行させることができる。そのため、ユーザはその対応関係を覚えてしまえば画面を見なくてもその機能を選択することができるので、車載機器の入力装置として効果が大きい。
【００４９】
次に、メイン画面上に指の本数よりも多くボタンが存在していた場合（操作対象が多い場合）の操作方法について、図６（ａ）、（ｂ）を用いて説明する。
【００５０】
図６（ａ）では、ユーザの指が座標入力部１００の上部の領域に接触している状態で、図６（ｂ）では下部の領域に接触している状態を表している。そして両図とも、メイン画面の上部に４つのボタン（６１Ａ〜６４Ａ、６１Ｂ〜６４Ｂ）がそれぞれ並び、下部に４つのボタン（６５Ａ〜６８Ａ、６５Ｂ〜６８Ｂ）がそれぞれ配置されている状態を表している。ユーザの指が座標入力部１００の上部の領域か、下部の領域に接触しているかは、座標入力部１００が取得した各座標に基づいて判定することができる。
【００５１】
図６（ａ）では、ユーザの指が座標入力部１００の上部の領域を操作するのに対応して、上側の各ボタン６１Ａ〜６４Ａの機能を機能割当部４０７が各指に対応させる。具体的には、手形状画像６０は左手のため、小指にボタン６１ＡのＡという機能、薬指にボタン６２ＡのＢという機能、中指にボタン６３ＡのＣという機能、人差し指にボタン６４ＡのＤという機能を割り当てる。また、図６（ｂ）では、ユーザの指が座標入力部１００の下部の領域を操作しているため、機能割当部４０７は、小指にボタン６５ＢのＥという機能、薬指にボタン６６ＢのＦという機能、中指にボタン６７ＢのＧという機能、人差し指にボタン６８ＡのＨという機能を割り当てる。
【００５２】
このように、手形状画像６０の指先座標とメイン画面に配置されている各ボタンの座標に対応して、機能割当部４０７はそれぞれ各指に割り当てる機能を変更することによって、複数の機能を各指に割り当て、実行することが可能になり、かつ、ユーザも割り当てられた機能を直感的に把握することができる。
【００５３】
次に、割当機能表示部４０８について説明する。割当機能表示部４０８は、機能割当部４０７によって関連付けられた、手形状画像の各指と対応する各ボタンの機能との対応関係を表示部１０１に表示する。これらを図７、図８、図９、図１０、図１１、図１２を用いて説明する。
【００５４】
図７は手形状画像の各指と各ボタン（ボタン７５〜ボタン７８）の対応関係を、線で結ぶことによって表している一例を示す図である。つまり、この例の場合は、ボタン７５と小指については線７５Ｌ、ボタン７６と薬指については線７６Ｌ、ボタン７７と中指については線７７Ｌ、ボタン７８と人差し指については線７８Ｌが、それぞれの対応関係を表している。これにより、メイン画面を煩雑にすることなく、対応関係を図示でき、かつ分かりやすく表示することができる。
【００５５】
また、図８（ａ）、（ｂ）のように、現在実行可能な各ボタンをまとめて対応関係を表すことも考えられる。図８は、ボタンと手形状画像の指との対応関係を表した表示画面の一例を示す図で、図８（ａ）では、ユーザの指が座標入力部１００の上部の領域に接触している状態で、図８（ｂ）では下部の領域に接触している状態を表している。図８（ａ）では、上側のボタン８１Ａ〜８４Ａを囲む線８９Ａが、手形状画像描画領域３３と結ばれており、手形状画像の各指が上側のボタン８１Ａ〜８４Ａにそれぞれ対応していることが分かる。図８（ｂ）では、下側のボタン８１Ｂ〜８４Ｂを囲む線８９Ｂが、手形状画像描画領域３３と結ばれており、手形状画像の各指が下側のボタン８１Ｂ〜８４Ｂにそれぞれ対応していることが分かる。これにより、線８９Ａ、８９Ｂで対応関係がひとつにまとまるため、メイン画面を煩雑さを防ぐことができる。
【００５６】
また、図９は、走行中に操作を制限しているボタンが存在した場合の各ボタンと各指との対応関係を表した表示画面の一例を示す図である。走行強制状態判定部１０２により車が走行中であると判定されると、走行中の操作を制限されているボタンが実行不可能な状態に変更される。一般的に操作が制限されているボタンはグレーアウト（灰色系の色でトーンダウンすること）され、押下してもその機能は実行されない。このような実行不可能ボタン９８が存在した場合、割当機能表示部４０８は、この実行不可能ボタン９８と指（手形状画像６０の人指し指）との対応関係を表す線を削除する。これにより、対応関係が切れていることを明示できるため、実行不可能ボタン９８の機能を実行することができないことが分かりやすく表示できる。
【００５７】
また、実行不可能なボタンがあった場合の別の例を図１３に示す。走行強制状態判定部１０２により車が走行中であると判定されると、走行中の操作を制限されているボタンが実行不可能な状態に変更される。このような実行不可能ボタン１３０３が存在した場合、割当機能表示部４０８は、手形状画像６０のボタン１３０３に対応する指（図１３の場合は、人指し指）もグレーアウトなどの強調表示を行う。これにより、どの指が現在機能を実行できないかをあらかじめ知ることができる。
【００５８】
図１０は、各指と各ボタン（ボタン１００１〜ボタン１００８）の対応関係を、それぞれ異なる色で表したときの一例を示す図である（ここで、図１０では色を使えないため、変りに色の違いをパターンで表示している）。この例の場合、ボタン１００５の機能Ｅが小指、ボタン１００６の機能Ｆが薬指、ボタン１００７の機能Ｇが中指、ボタン１００８の機能Ｈが人指し指に対応していることを表している。このように同じ色で対応付けることによって、メイン画面に各指と各ボタンの対応関係を示す線を特別に描画するなどの処理を必要とせず、かつ直感的にその対応関係を把握することができる。
【００５９】
次に図１１に、各指と各ボタン（ボタン１１０１〜ボタン１１０８）との対応関係を、各ボタンの近傍に各指の種類を示すＧＵＩ（１１０５Ｆ〜１１０８Ｆ）を表示する例を示す。この例の場合は、ボタン１１０５の機能Ｅが小指と対応していることを表すために、ボタン１１０５の近傍のＧＵＩ１１０５Ｆに小指を表す「小」という文字を示す。この他にも薬指、中指、人差し指を表すＧＵＩ１１０６Ｆ〜１１０８Ｆが、それぞれ対応しているボタン１１０６〜１１０８の近傍に表示されている。これにより、ユーザはメイン画面を見るだけで、どの指で座標入力部１００を押下すれば所望の機能が実行できるかを知ることができる。また、別途操作者判定部４０９により、操作している手の左右が判定できる場合は、各指の種類を示すＧＵＩの並び順を左右逆にして表示し、割り当てる指を変更することによって、違和感をなくすこともできる。
【００６０】
また、図１２では、メイン画面上の各ボタンの配置に応じて、機能割当部４０７が各指に割り当てる機能を変更する境界座標をもとに、手形状画像描画領域３３内に境界情報となる境界線１２０９を表示する。本実施形態の場合、機能割当部４０７は上下方向に応じて、各指に対する各機能の割り当てを変更する。境界線１２０９より上側に手形状画像がある場合は、各指にメイン画面上の上側の各ボタン（ボタン１２０１〜１２０４）の機能を割り当て、図１２に示すように境界線１２０９より下側に手形状画像がある場合は、各指にメイン画面上の下側の各ボタン（ボタン１２０５〜１２０８）の機能を割り当てる。手形状画像描画領域３３内に上下方向を分割するような境界線１２０９を表示することにより、どの位置に指先を移動すれば所望するボタンを選択することができるかを、ユーザは容易に判断することができるようになる。
【００６１】
なお、図１２では手形状画像描画領域３３を上下に分ける境界線により境界情報を表示したが、上下に色分けするなどによっても境界情報を示すことができる。
【００６２】
また、図１２ではメイン画面上のボタン群は上側と下側に配置されていたが、ボタン群がメイン画面上の左右に配置されている場合には、手形状画像描画領域３３内を左右方向に分割する境界線を表示してもよい。ただし、この場合は、各指と各ボタンとの対応関係を図７の様に線で表示したり、図１０の様に同じ色で表示するのが好ましい。
【産業上の利用可能性】
【００６３】
以上のように、本発明にかかる車載機器入力装置は、画面全体に手形状画像を表示せずに操作できるため、走行中、手形状画像が画面に重畳されていても運転に集中することができるという効果を有し、カーナビゲーション装置、オーディオ機器、カーエアコンなどの車載機器への入力操作を行う車載機器入力装置等として有用である。
【図面の簡単な説明】
【００６４】
【図１】本発明の実施の形態における車載機器入力装置の機能ブロック図
【図２】本発明の実施の形態における車載機器入力装置の処理の流れを示すフローチャート
【図３】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図４】本発明の実施の形態における車載機器入力装置の機能ブロック図
【図５】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図６】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図で、（ａ）ユーザの指が座標入力部１００の上部の領域に接触している状態を表す図、（ｂ）ユーザの指が座標入力部１００の下部の領域に接触している状態を表す図
【図７】本発明の実施の形態における車載機器入力装置の各ボタンと各指との対応関係を表した表示画面の一例を示す図
【図８】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図で、（ａ）ユーザの指が座標入力部１００の上部の領域に接触している状態を表す図、（ｂ）ユーザの指が座標入力部１００の下部の領域に接触している状態を表す図
【図９】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１０】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１１】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１２】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【図１３】本発明の実施の形態における車載機器入力装置の表示画面の一例を示す図
【符号の説明】
【００６５】
１、４ 車載機器入力装置
３０、５０、６０ 手形状画像
３３ 手形状画像描画領域
５１〜５５、６１Ａ〜６８Ａ、６１Ｂ〜６８Ｂ、７１〜７８、８１Ａ〜８８Ａ、８１Ｂ〜８８Ｂ、９１〜９８、１００１〜１００８、１１０１〜１１０８、１３００〜１３０２、１３０４ ボタン
７５Ｌ〜７８Ｌ、９５Ｌ〜９７Ｌ 各ボタンと各指との対応関係を表した線
８９Ａ、８９Ｂ ボタンを囲む線
９８、１３０３ 実行不可能ボタン
１００ 座標入力部
１０１ 表示部
１０２ 走行強制状態判定部
１０３ 手形状画像作成部
１０４ 表示比率決定部
１０５ 表示位置決定部
１０６ 手形状画像重畳部
４０７ 機能割当部
４０８ 割当機能表示部
４０９ 操作者判定部
１１０５Ｆ〜１１０８Ｆ ＧＵＩ
１２０９ 境界線
【特許請求の範囲】
【請求項１】
ユーザにより接触された位置の座標を取得する座標入力部と、
前記座標入力部を操作しているユーザの手形状画像を作成する手形状画像作成部と、
車の走行状態を判定する走行強制状態判定部と、
前記走行強制状態判定部の判定結果に基づいて、前記手形状画像を表示する大きさを決定する表示比率決定部と、
前記表示比率決定部により決定された大きさの手形状画像の表示位置を決定する表示位置決定部と、
メイン画面に、前記決定された大きさで、前記決定された表示位置に、前記手形状画像を重畳する手形状画像重畳部と、
前記手形状重畳部で手形状画像が重畳されたメイン画面を表示する表示部と、
を備えることを特徴とする車載機器入力装置。
【請求項２】
前記手形状画像の各指と前記メイン画面内の各操作対象の機能とを関連付ける機能割当部を、さらに備えることを特徴とする請求項1記載の車載機器入力装置。
【請求項３】
前記座標入力部を操作するユーザが運転者か助手席の同乗者かを判定する操作者判定部を更に備え、
前記表示位置決定部は、前記操作者判定部の判定結果に基づいて、前記手形状画像の表示位置を変更することを特徴とする請求項１に記載の車載機器入力装置。
【請求項４】
前記機能割当部によって関連付けられた前記各指と前記各操作対象の機能との対応関係を前記表示部に表示する割当機能表示部を、さらに備えることを特徴とする請求項２に記載の車載機器入力装置。
【請求項５】
前記割当機能表示部は、前記各指と対応している前記各操作対象とを線で結ぶことで前記対応関係を表すこと特徴とする請求項４記載の車載機器入力装置。
【請求項６】
前記割当機能表示部は、前記各指と対応している前記各操作対象とを同じ色にすることで対応関係を表すことを特徴とする請求項４に記載の車載機器入力装置。
【請求項７】
前記割当機能表示部は、前記各操作対象に、対応している各指の種類を示すＧＵＩを表示することで対応関係を表すことを特徴とする請求項４に記載の車載機器入力装置。
【請求項８】
前記走行強制状態判定部によって前記車が走行中であると判定されると、前記割当機能表示部は、走行中の操作を制限された操作対象に対応している指を強調表示することを特徴とする請求項４に記載の車載機器入力装置。
【請求項９】
前記走行強制状態判定部によって前記車が走行中であると判定されると、前記割当機能表示部は、走行中の操作を制限された操作対象と対応している指との対応関係を表す前記線を削除することを特徴とする請求項５に記載の車載機器入力装置。
【請求項１０】
前記機能割当部は、前記座標入力部が取得した座標に基づいて、前記各指に関連付けられる前記各操作対象の機能を変更することを特徴とする請求項２に記載の車載機器入力装置。
【請求項１１】
前記機能割当部は、前記座標入力部が取得した座標に基づいて、前記各指に関連付けられる前記各操作対象の機能を変更し、
前記割当機能表示部は、前記変更する基準を表す境界情報を、前記表示部の前記手形状画像を表示する領域内に表示することを特徴とする請求項４に記載の車載機器入力装置。
【請求項１】
ユーザにより接触された位置の座標を取得する座標入力部と、
前記座標入力部を操作しているユーザの手形状画像を作成する手形状画像作成部と、
車の走行状態を判定する走行強制状態判定部と、
前記走行強制状態判定部の判定結果に基づいて、前記手形状画像を表示する大きさを決定する表示比率決定部と、
前記表示比率決定部により決定された大きさの手形状画像の表示位置を決定する表示位置決定部と、
メイン画面に、前記決定された大きさで、前記決定された表示位置に、前記手形状画像を重畳する手形状画像重畳部と、
前記手形状重畳部で手形状画像が重畳されたメイン画面を表示する表示部と、
を備えることを特徴とする車載機器入力装置。
【請求項２】
前記手形状画像の各指と前記メイン画面内の各操作対象の機能とを関連付ける機能割当部を、さらに備えることを特徴とする請求項1記載の車載機器入力装置。
【請求項３】
前記座標入力部を操作するユーザが運転者か助手席の同乗者かを判定する操作者判定部を更に備え、
前記表示位置決定部は、前記操作者判定部の判定結果に基づいて、前記手形状画像の表示位置を変更することを特徴とする請求項１に記載の車載機器入力装置。
【請求項４】
前記機能割当部によって関連付けられた前記各指と前記各操作対象の機能との対応関係を前記表示部に表示する割当機能表示部を、さらに備えることを特徴とする請求項２に記載の車載機器入力装置。
【請求項５】
前記割当機能表示部は、前記各指と対応している前記各操作対象とを線で結ぶことで前記対応関係を表すこと特徴とする請求項４記載の車載機器入力装置。
【請求項６】
前記割当機能表示部は、前記各指と対応している前記各操作対象とを同じ色にすることで対応関係を表すことを特徴とする請求項４に記載の車載機器入力装置。
【請求項７】
前記割当機能表示部は、前記各操作対象に、対応している各指の種類を示すＧＵＩを表示することで対応関係を表すことを特徴とする請求項４に記載の車載機器入力装置。
【請求項８】
前記走行強制状態判定部によって前記車が走行中であると判定されると、前記割当機能表示部は、走行中の操作を制限された操作対象に対応している指を強調表示することを特徴とする請求項４に記載の車載機器入力装置。
【請求項９】
前記走行強制状態判定部によって前記車が走行中であると判定されると、前記割当機能表示部は、走行中の操作を制限された操作対象と対応している指との対応関係を表す前記線を削除することを特徴とする請求項５に記載の車載機器入力装置。
【請求項１０】
前記機能割当部は、前記座標入力部が取得した座標に基づいて、前記各指に関連付けられる前記各操作対象の機能を変更することを特徴とする請求項２に記載の車載機器入力装置。
【請求項１１】
前記機能割当部は、前記座標入力部が取得した座標に基づいて、前記各指に関連付けられる前記各操作対象の機能を変更し、
前記割当機能表示部は、前記変更する基準を表す境界情報を、前記表示部の前記手形状画像を表示する領域内に表示することを特徴とする請求項４に記載の車載機器入力装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００９−１８４５５１（Ｐ２００９−１８４５５１Ａ）
【公開日】平成２１年８月２０日（２００９．８．２０）
【国際特許分類】
【出願番号】特願２００８−２７４６４（Ｐ２００８−２７４６４）
【出願日】平成２０年２月７日（２００８．２．７）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２１年８月２０日（２００９．８．２０）
【国際特許分類】
【出願日】平成２０年２月７日（２００８．２．７）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]