車載装置
【課題】車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる。
【解決手段】車両に搭載される車載装置であって、車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を車載装置が認証する。また、認証された操作許可者の着座位置を車載装置が特定し、特定された着座位置に対応する映像に基づいて操作許可者のジェスチャーを車載装置が受け付けるように構成する。
【解決手段】車両に搭載される車載装置であって、車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を車載装置が認証する。また、認証された操作許可者の着座位置を車載装置が特定し、特定された着座位置に対応する映像に基づいて操作許可者のジェスチャーを車載装置が受け付けるように構成する。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、車両に搭載される車載装置に関する。
【背景技術】
【０００２】
従来、音声やジェスチャーによって車内機器に対して所定の操作を行うことができる車載装置が知られている。たとえば、特許文献１には、マイクロフォンによって入力された音声による操作指示を実行する車載装置が開示されている。
【０００３】
具体的には、特許文献１の車載装置は、予め記憶されている声紋の情報と乗車者によって入力された音声の声紋情報とが一致した場合に、入力された音声による操作指示、たとえば、エアコンのスイッチＯＮの指示に対する実行を許可する。
【０００４】
また、特許文献２には、音声とジェスチャーとの組み合わせによって車内機器に対する所定の操作指示を行うことができる車載装置と車内機器とのインターフェースが開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−３３３５２６号公報
【特許文献２】特開２００５−１７８４７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の車載装置は、入力された音声認識を行う場合に、エンジン音や外気の騒音が大きいとノイズが混入することとなり、操作の受付精度が低下するという問題があった。
【０００７】
また、特許文献２に記載のインターフェースを適用した車載装置によると、意図しない乗車者から車内機器に対して操作指示が行われたり、子供のいたずら等による誤操作を受け付けてしまうという問題があった。
【０００８】
これらのことから、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる車載装置をいかにして実現するかが大きな課題となっている。
【０００９】
この発明は、上述した従来技術による問題点を解消するためになされたものであり、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる車載装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述した課題を解決し、目的を達成するため、本発明は、車両に搭載される車載装置であって、車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を認証する認証手段と、前記認証手段によって認証された前記操作許可者の着座位置を特定する位置特定手段と、前記位置特定手段によって特定された前記着座位置に対応する映像に基づいて前記操作許可者の前記ジェスチャーを受け付けるジェスチャー受付手段とを備えたことを特徴とする。
【発明の効果】
【００１１】
本発明によれば、車両に搭載される車載装置が、車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を認証し、認証された操作許可者の着座位置を特定し、特定された着座位置に対応する映像に基づいて操作許可者のジェスチャーを受け付けることとしたので、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができるという効果を奏する。
【図面の簡単な説明】
【００１２】
【図１】図１は、本実施例に係る車載装置の概要を示す図である。
【図２】図２は、本実施例に係る車載装置の構成を示すブロック図である。
【図３】図３は、認証手法の一例を示す図である。
【図４】図４は、認証情報の一例その１を示す図である。
【図５】図５は、認証情報の一例その２を示す図である。
【図６】図６は、位置情報の一例を示す図である。
【図７】図７は、カメラの設置位置の一例を示す図である。
【図８】図８は、ジェスチャー検知手法を説明するための図である。
【図９】図９は、車載装置が実行する操作許可者認証処理手順の概要を示すフローチャートである。
【図１０】図１０は、車載装置が実行するジェスチャー受付処理手順の概要を示すフローチャートである。
【図１１】図１１は、車載装置が実行する操作許可者監視処理手順の概要を示すフローチャートである。
【発明を実施するための形態】
【実施例】
【００１３】
以下に添付図面を参照して、本発明に係る車載装置の好適な実施例を詳細に説明する。なお、以下では、本発明に係る車載装置の概要について図１を用いて説明した後に、本発明に係る車載装置についての実施例を図２〜図１１を用いて説明することとする。
【００１４】
まず、本発明に係る車載装置の概要について図１を用いて説明する。図１は、本発明に係る車載装置の概要を示す図である。本発明に係る車載装置では、ジェスチャーによって車内機器の所定の操作指示を行う。
【００１５】
ここで、本発明に係る車載装置では、車内機器の所定の操作を行うことを許可された者（以下、「操作許可者」と記載する）として認証された乗車者の着座位置を特定し、特定された着座位置方向からのジェスチャーのみを受け付ける点に主たる特徴がある。
【００１６】
図１に示すように、本発明に係る車載装置には、車内機器の操作許可者が個人ごとに予め登録されている。具体的には、個人Ａおよび個人Ｂに対してのみに操作が許可されていると認証情報へ登録されているものとする。
【００１７】
ここで、車両へＡ、ＢおよびＣが乗車した際に、本発明に係る車載装置は、認証情報に基づいて操作許可者の認証を行う（図１の（１）参照）。なお、認証手法については、指紋や顔による生体認証やＩＣ（integrated circuit）カード等による個体識別認証等が挙げられるが、認証手法の詳細については後述することとする。
【００１８】
つづいて、本発明に係る車載装置は、車内に設置される図示しないセンサから操作許可者までの相対位置や相対距離から、操作許可者の着座位置を特定し、その旨を位置情報として記憶しておくこととする（図１の（２）参照）。
【００１９】
たとえば、本発明に係る車載装置は、乗車者Ａの着座位置はドライバ席であり、乗車者Ｂの着座位置は、車両前方に設置されたカメラ側から見て後席右であると特定し、着座位置を位置情報として記憶する。
【００２０】
そして、本発明に係る車載装置は、車内のカメラ映像を取得し（図１の（３）参照）、取得したカメラ映像のうち、特定した操作許可者の着座位置を示すエリア（ここでは、後席右）に撮像されているジェスチャーを受け付ける（図１の（４）参照）。
【００２１】
なお、ジェスチャーは、車内機器に対する所定の操作指示に対応付けられているジェスチャーである。たとえば、図１の（４）に示したように、「人差し指を左右に振る」というジェスチャーには、車内オーディオをＯＮにする操作指示が対応付けられているものとする。
【００２２】
一方、本発明に係る車載装置は、特定した操作許可者の着座位置を示すエリア外（ここでは、後席左）に撮像されているジェスチャーは受け付けないことから、操作許可者以外の乗車者からのジェスチャー操作は無効となる（図１の（５）参照）。
【００２３】
このように、本発明に係る車載装置は、操作許可者として認証された乗車者の着座位置を特定し、特定した着座位置方向からのジェスチャーのみを受け付けることにした。これによって、本発明に係る車載装置は、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる。
【００２４】
なお、車内機器に対する所定の操作とは、ナビゲーション機能に対する操作や、ＣＤ、ＤＶＤおよびＴＶ等の車内オーディオに対する操作であってもよいし、エアコンに対する操作やサンルーフの開閉操作であってもよい。
【００２５】
以下では、図１を用いて説明した本発明に係る車載装置１０についての実施例を詳細に説明する。まず、本実施例に係る車載装置１０の構成について図２を用いて説明する。図２は、本実施例に係る車載装置１０の構成を示すブロック図である。なお、図２では、車載装置１０の特徴点を説明するために必要な構成要素についてのみ記載している。
【００２６】
図２に示すように、車載装置１０は、センサ１１と、カメラ１２と、ＤＡ（Display Audio）１３と、記憶部１４と、制御部１５とを備えている。また、制御部１５は、画像取得部１５ａと、認証部１５ｂと、位置特定部１５ｃと、位置情報登録部１５ｄと、ジェスチャー受付部１５ｅと、操作指示部１５ｆとをさらに備えており、記憶部１４は、認証情報１４ａと、位置情報１４ｂと、ジェスチャー情報１４ｃとを記憶する。
【００２７】
センサ１１は、操作許可者の認証を行う際に、認証対象に関する情報を検知する計測機器である。たとえば、センサ１１は、認証対象が指紋や顔の場合は、光学センサや画像センサであり、認証対象が静脈や虹彩の場合は、近赤外光センサである。なお、認証手法の詳細については後述することとする。
【００２８】
カメラ１２は、車両に搭載されたカメラであり、車内の映像を撮像し、撮像した映像をジェスチャー受付部１５ｅへ送信する。なお、カメラの設置位置の詳細については後述することとする。
【００２９】
ＤＡ１３は、映像表示機能やオーディオ再生機能を備える装置であり、ジェスチャーによる操作指示により所定の操作を行うことができる車内機器である。なお、ＤＡ１３は、車載装置１０に備える構成としたが、車載装置１０とは別体とする構成としてもよい。
【００３０】
記憶部１４は、不揮発性メモリやハードディスクドライブといった記憶デバイスで構成される記憶部である。この記憶部１４は、予め登録される操作許可者の認証対象に関する情報を認証情報１４ａとして記憶する。
【００３１】
また、記憶部１４は、位置情報登録部１５ｄによって特定された操作許可者の着座位置を位置情報１４ｂとして記憶し、車内機器に対する所定の操作に対応したジェスチャーをジェスチャー情報１４ｃとして記憶する。なお、認証情報１４ａおよび位置情報１４ｂの詳細については後述することとする。
【００３２】
制御部１５は、車載装置１０の全体制御を行う制御部である。画像取得部１５ａは、センサ１１によって検知された認証対象に関する情報、ここでは画像を取得し、認証部１５ｂへ渡す処理を行う処理部である。
【００３３】
認証部１５ｂは、画像取得部１５ａから受け付けた画像と認証情報１４ａとに基づいて操作許可者として認証するか否かを判定する処理を行う処理部である。また、認証部１５ｂは、操作許可者として認証すると判定した場合に、その旨を位置特定部１５ｃへ通知する処理を併せて行う。
【００３４】
位置特定部１５ｃは、認証部１５ｂによって操作許可者として認証された乗車者の着座位置を特定し、操作許可者の着座位置を位置情報登録部１５ｄへ通知する処理を行う処理部である。
【００３５】
位置情報登録部１５ｄは、位置特定部１５ｃから受け付けた操作許可者の着座位置を位置情報１４ｂへ登録させる処理を行う処理部である。
【００３６】
ジェスチャー受付部１５ｅは、カメラ１２からの映像を取得し、位置情報１４ｂに記憶されている操作許可者の着座位置を示すエリアに撮像されているジェスチャーを検知し、操作指示部１５ｆへ渡す処理を行う処理部である。
【００３７】
操作指示部１５ｆは、ジェスチャー受付部１５ｅによって検知されたジェスチャーに対応する操作をジェスチャー情報１４ｃから検索し、対応する車内機器、ここでは、ＤＡ１３へ操作指示を行う処理部である。
【００３８】
また、図示しないが、制御部１５は、バックグラウンド処理として、操作許可者の認証を解除するか否かを監視する処理を行う。たとえば、制御部１５は、エンジンＯＮまたはエンジンＯＦＦを検知した場合には、位置情報１４ｂをすべてクリアして初期化する。
また、制御部１５は、操作許可者の座席移動を検知した場合には、かかる操作許可者の位置情報１４ｂを削除する。なお、位置情報１４ｂを初期化するタイミングについては、エンジンＯＮ／ＯＦＦに限定されるものではなく、車両のドアの開閉時やその他のタイミングとしてもよい。
【００３９】
つぎに、認証部１５ｂが行う認証手法の詳細について図３を用いて説明する。図３は、認証手法の一例を示す図である。なお、ここでは、認証部１５ｂが個人ごとに操作許可者であるか否かを認証する際に行う認証手法について説明する。
【００４０】
認証部１５ｂが行う認証手法には、認証対象ごとに取得する情報が異なるため使用されるセンサも異なる。図３には、センサに対応する認証対象を、所定の分類に分けて例示することとした。
【００４１】
ここでは、認証対象が「指紋」や「顔」の身体部分である「生体認証その１」と、認証対象が「まばたき」や「唇の動き」等の行動である「生体認証その２」と、認証対象が所有物である「個体識別」とに分類した。分類が「生体認証その１」である認証対象は、「静脈」や「虹彩」であってもよく、「生体認証その２」である認証対象は、個人ごとに異なる「手の振りの癖」や個人を特定しないで「手をひらく」等のジェスチャーであってもよい。
【００４２】
また、分類が「個体識別」である認証対象のＲＦＩＤ（Radio Frequency Identification）やＩＣカードには、唯一の識別子をもつタグ（以下、「ＩＣチップ」と記載する）が内蔵されている。
【００４３】
近年では、ＩＣチップが内蔵されている携帯端末も多く利用されていることから、認証部１５ｂは、乗車者の所有する携帯端末によって操作許可者の認証を行うこととしてもよい。
【００４４】
つぎに、認証情報１４ａおよび位置情報１４ｂの詳細について図４〜図６を用いて説明する。図４は、認証情報１４ａの一例その１を示す図であり、図５は、認証情報１４ａの一例その２を示す図である。また、図６は、位置情報１４ｂの一例を示す図である。
【００４５】
図４の（Ａ）に示すように、認証情報１４ａは、「識別ＩＤ」項目と、「認証対象」項目と、「認証条件」項目とを含んでいる。なお、認証情報１４ａは、かかる項目で構成される情報を１レコードとしたレコードの集合体である。
【００４６】
「識別ＩＤ」項目は、個人を識別する識別子であり、個体識別の場合は、ＩＣチップの識別子であってもよい。「認証対象」項目は認証対象名であり、「認証条件」項目は、識別ＩＤに対応付けられた認証対象の特徴となる画像や映像である。認証情報１４ａは、操作許可者として予め登録される個人の識別ＩＤに対応付けて認証対象と認証条件とが記憶される。
【００４７】
また、図４の（Ｂ）に示すように、認証情報１４ａは、「許可レベル」項目を含むこととしてもよい。この場合、車内機器に対する操作ごとに「許可レベル」としてレベルを設定することによって、個人に対して許可される操作の許可範囲を設定することができる。
【００４８】
たとえば、許可レベル１は、ナビゲーション操作、車内オーディオに対する操作、エアコン操作やサンルーフの開閉操作を許可し、許可レベル２は、ナビゲーション操作以外の操作を許可するというように、操作の許可範囲を設定する。これにより、車内へ乗車する子供に対して、ＣＤ再生等の操作を許可する一方で、ナビゲーション機能に対する誤操作を防止することができる。
【００４９】
なお、これまでは、認証部１５ｂが特定した個人が操作許可者であるか否かを認証する認証手法について説明したが、これに限定されるものではない。たとえば、認証部１５ｂでは、操作許可者の認証を行う際に、個人を特定せず、いずれの乗車者も同じ認証条件によって認証されることとしてもよい。
【００５０】
図５に示すように、認証情報１４ａは、識別ＩＤを含まない構成とし、認証対象が「手の振り（順番）」に対する認証条件には「手をグーからパーへ手を振る」ジェスチャーである場合について説明する。
【００５１】
この場合、車内機器の所定の操作が許可される乗車者のみに対してかかるジェスチャーを通知しておくことによって、認証部１５ｂは、操作許可者の認証を行うことができる。たとえば、車両へ乗車する大人のみへかかるジェスチャーを通知し、車両へ乗車する子供へは通知しないこととする。これによって、認証部１５ｂでは、操作許可者として大人のみ認証することができ、子供による車内機器に対する誤操作を防止することができる。
【００５２】
つづいて、位置情報１４ｂの詳細について図６を用いて説明する。図６の（Ａ）に示すように、位置情報１４ｂは、「識別ＩＤ」項目と、「着座位置」項目とを含んでいる。なお、位置情報１４ｂは、かかる項目で構成される情報を１レコードとしたレコードの集合体である。
【００５３】
「識別ＩＤ」項目は、個人を識別する識別子であり、「着座位置」項目は、操作許可者として認証された乗車者の着座位置である。なお、制御部１５では、バックグラウンド処理として、操作許可者の認証を解除するか否かを監視しており、所定の条件に基づいて位置情報１４ｂの削除や登録を行っている。
【００５４】
たとえば、位置情報１４ｂへ登録されている操作許可者（識別ＩＤ：ＣＣＣ）が、車内で席を移動した場合の、位置情報１４ｂの遷移を図６の（Ａ−１）〜（Ａ−３）を用いて説明する。
【００５５】
まず、認証部１５ｂによって認証された個人の識別ＩＤが、ＡＡＡおよびＣＣＣであり、位置特定部１５ｃによって特定された着座位置が、それぞれドライバ席および後席左であった場合に、位置情報１４ｂは、図６の（Ａ−１）に示したように記憶される。
【００５６】
そして、制御部１５は、識別ＩＤがＣＣＣである操作許可者の座席移動を検知した場合、位置情報１４ｂから識別ＩＤがＣＣＣであるレコードを削除する（図６の（Ａ−２）参照）。
【００５７】
その後、位置特定部１５ｃによって識別ＩＤがＣＣＣである操作許可者の着座位置が後席右と特定されたならば、位置情報登録部１５ｄは、新たに「ＣＣＣ：後席右」と位置情報１４ｂへ登録する（図６の（Ａ−３）参照）。
【００５８】
また、認証部１５ｂは、ＩＣチップが内蔵されている外部装置、たとえば、乗車者の所有する携帯装置によって認証を行う場合には、図示しないＩＣ読取機によって読み取られたＩＣチップの識別子に基づいて操作許可者として認証するか否かを判定する。なお、ＩＣチップ内に、操作許可者として認証するか否かの情報を予め記憶させておいてもよい。
【００５９】
そして、位置特定部１５ｃは、認証部１５ｂによって操作許可者として認証された乗車者の着座位置を特定し、操作許可者の着座位置を位置情報１４ｂへ登録させることとしてもよい。ここで、携帯装置によって認証された操作許可者が座席移動した場合には、再度位置特定部１５ｃでは乗車者の着座位置を特定することとなる。
【００６０】
なお、図６の（Ａ）では、認証部１５ｂが操作許可者の認証を行う際に、個人を特定した場合について説明した。しかし、図６の（Ｂ）に示したように、位置情報１４ｂは、個人を特定しない場合には、識別ＩＤを含まない構成としてもよい。
【００６１】
つぎに、カメラ１２の設置位置の詳細について図７を用いて説明する。図７の（Ａ）は、カメラ映像の一例を示す図であり、図７の（Ｂ）は、カメラの設置位置の一例を示す図である。
【００６２】
まず、図７の（Ａ）に示したように、車両前方の中央、たとえば、ダッシュボード中央部やルームミラーの近傍等に設置され、車両前方から車両後方側を撮像する１台のカメラ１２によって撮像されたカメラ映像である。かかるカメラ映像には、エリアごとに着座位置が割り当てられているものとする。
【００６３】
そして、ジェスチャー受付部１５ｅは、位置情報１４ｂに記憶されている操作許可者の着座位置に対応するエリアを検索し、検索したエリアに撮像されているジェスチャーを検知し、車内機器に対する操作として受け付ける。
【００６４】
たとえば、カメラ映像の着座位置１のエリアには、カメラ１２側から見て後席右に着座した乗車者が割り当てられているとする。また、カメラ映像の着座位置２のエリアは前席右、着座位置３のエリアは後席左、着座位置４のエリアは前席左、すなわちドライバ席に着座した乗車者が割り当てられているとする。
【００６５】
ここで、位置情報１４ｂに記憶されている操作許可者の着座位置が後席右である場合に、ジェスチャー受付部１５ｅは、着座位置１のエリアを操作許可者のジェスチャーを検知する範囲とする。
【００６６】
一方、ジェスチャー受付部１５ｅは、操作許可者の着座位置に対応するエリア以外、すなわち、着座位置２、３および４に撮像されているジェスチャーを検知した場合には、検知されたジェスチャーの操作を無効とする。
【００６７】
なお、図７の（Ａ）に示したカメラ映像を撮像するカメラ１２の設置位置は、車内全体を見わたせる位置であれば上記位置に限定されず、その他の位置にも設置可能である。たとえば、天井部中央、たとえば、ルームランプ近傍にカメラ１２を設置してもよい。かかる場合、使用するレンズに魚眼レンズなどを用いて、各乗車者を確認しやすくするとより好ましい。
【００６８】
また、図７の（Ａ）では、１台のカメラ１２によってカメラ映像を撮像する場合について説明したが、つづいて、４台のカメラ１２によってカメラ映像を撮像する場合について説明する。
【００６９】
図７の（Ｂ）に示すように、着座位置１に着座する乗車者を撮像するカメラ１、着座位置２に着座する乗車者を撮像するカメラ２というように、車内には、着座位置に着座する乗車者を撮像するカメラがそれぞれ設置されているとする。
【００７０】
具体的には、カメラ２およびカメラ４は、ダッシュボードやフロントウィンドウの近傍などに設置され、また、カメラ１およびカメラ３は着座位置２や着座位置４の背面、たとえば、運転席および助手席のヘッドレストの背面などに設置されるものとする。
【００７１】
この場合、ジェスチャー受付部１５ｅは、位置情報１４ｂに記憶されている操作許可者の着座位置に設置されたカメラによって撮像されたカメラ映像からジェスチャーを検知し、車内機器に対する操作として受け付けることとなる。これにより、カメラ映像から操作許可者の着座位置に対応するエリアを検索することなく、操作許可者のジェスチャーを検知することができる。
【００７２】
さてこれまでは、操作許可者の着座位置に対応するエリア以外に撮像されているジェスチャーを検知した場合に、検知されたジェスチャーでの操作を無効とすることとした。しかし、例外処理として、ジェスチャー受付部１５ｅは、以下に説明するジェスチャー検知手法を行うこととしてもよい。ジェスチャー受付部１５ｅが行うジェスチャー検知手法の例外処理の詳細について図８を用いて説明する。
【００７３】
図８は、ジェスチャー検知手法を説明するための図である。図８の（Ａ）および（Ｂ）は、カメラ１２によって撮像されたカメラ映像であり、着座位置１で示したエリアは、操作許可者の着座位置を示し、また、着座位置２で示したエリアは、操作許可者以外の乗車者の着座位置を示す。
【００７４】
ここで、図８の（Ａ）に示したように、操作許可者以外の着座位置２内にジェスチャーを検知した場合、ジェスチャー受付部１５ｅは、検知されたジェスチャーの手が操作許可者の手であるか否かを判定する。
【００７５】
具体的には、ジェスチャー受付部１５ｅは、所定の画像処理を行い、着座位置１内の操作許可者の映像と着座位置２に映るジェスチャーの手とが繋がっているか否かを、判定する。
【００７６】
そして、ジェスチャー受付部１５ｅは、着座位置１内の操作許可者と着座位置２に映るジェスチャーの手とが繋がっていると判定した場合、かかるジェスチャーを操作許可者のジェスチャーとして受け付けることとする。
【００７７】
一方、図８の（Ｂ）に示したように、ジェスチャー受付部１５ｅは、操作許可者の着座位置１内にジェスチャーを検知した場合であっても、着座位置１内の操作許可者とジェスチャーの手とが繋がっていないと判定したならば、ジェスチャーの操作を無効とする。このようにすることによって、車載装置１０は、高精度に操作許可者のジェスチャーを検知することができる。
【００７８】
つぎに、本実施例に係る車載装置１０が実行するジェスチャー操作処理手順の詳細について図９〜図１１を用いて説明する。図９は、車載装置１０が実行する操作許可者認証処理手順の概要を示すフローチャートであり、図１０は、車載装置１０が実行するジェスチャー受付処理手順の概要を示すフローチャートであり、図１１は、車載装置１０が実行する操作許可者監視処理手順の概要を示すフローチャートである。
【００７９】
まず、図９に示すように、画像取得部１５ａは、認証対象者の認証用画像を取得し（ステップＳ１０１）、認証部１５ｂは、画像取得部１５ａによって取得された認証用画像を認証情報１４ａに記憶される認証条件と比較する（ステップＳ１０２）。
【００８０】
そして、認証部１５ｂは、認証用画像と認証情報１４ａに記憶される認証条件とが一致するか否かを判定し（ステップＳ１０３）、一致すると判定した場合（ステップＳ１０３，Ｙｅｓ）に、操作許可者であると認証する（ステップＳ１０４）。
【００８１】
その後、位置特定部１５ｃは、認証部１５ｂによって認証された操作許可者の着座位置を特定し（ステップＳ１０５）、位置情報登録部１５ｄは、操作許可者の識別ＩＤと特定された着座位置を位置情報１４ｂへ登録し（ステップＳ１０６）、一連の操作許可者認証処理を終了する。
【００８２】
一方、認証部１５ｂは、ステップＳ１０３で、認証用画像と認証情報１４ａに記憶される認証条件とが一致しないと判定した場合（ステップＳ１０３，Ｎｏ）、操作許可者と認証しないで（ステップＳ１０７）、一連の操作許可者認証処理を終了する。
【００８３】
なお、図６の（Ｂ）で説明したように、ステップＳ１０２において認証部１５ｂが個人を特定しないで認証処理を行う場合には、ステップＳ１０６では、着座位置のみを位置情報１４ｂへ登録することとする。
【００８４】
つづいて、車載装置１０が実行するジェスチャー受付処理手順の詳細について図１０を用いて説明する。図１０に示すように、ジェスチャー受付部１５ｅは、カメラ１２によって撮像されたカメラ映像を取得する（ステップＳ２０１）。
【００８５】
そして、ジェスチャー受付部１５ｅは、取得したカメラ映像からジェスチャーを検知し（ステップＳ２０２）、ジェスチャーの検知位置が位置情報１４ｂに記憶される着座位置の範囲であるか否かを判定する（ステップＳ２０３）。
【００８６】
ジェスチャー受付部１５ｅは、ジェスチャーの検知位置が位置情報１４ｂに記憶される着座位置の範囲であると判定した場合（ステップＳ２０３，Ｙｅｓ）、検知されたジェスチャーによる操作を許可する（ステップＳ２０４）。
【００８７】
一方、ジェスチャー受付部１５ｅは、ジェスチャーの検知位置が位置情報１４ｂに記憶される着座位置の範囲ではないと判定した場合（ステップＳ２０３，Ｎｏ）、検知されたジェスチャーによる操作を無効として（ステップＳ２０８）、一連のジェスチャー受付処理を終了する。
【００８８】
そして、ジェスチャー受付部１５ｅは、検知されたジェスチャーをジェスチャー情報１４ｃに記憶されるジェスチャーと比較して（ステップＳ２０５）、一致するか否かを判定する（ステップＳ２０６）。
【００８９】
ジェスチャー受付部１５ｅは、ステップＳ２０６で一致すると判定した場合（ステップＳ２０６，Ｙｅｓ）、操作指示部１５ｆは、検知されたジェスチャーに対応した車内機器に対する操作指示をＤＡ１３へ送信して（ステップＳ２０７）、一連のジェスチャー受付処理を終了する。
【００９０】
一方、ジェスチャー受付部１５ｅは、ステップＳ２０６で一致しないと判定した場合（ステップＳ２０６，Ｎｏ）、対応する操作がないため、その旨を報知する等を行って処理を終了する。
【００９１】
つづいて、車載装置１０がバックグラウンド処理として実行する操作許可者監視処理手順の詳細について図１１を用いて説明する。図１１に示すように、制御部１５は、エンジンＯＮの動作が行われたか否かを判定する（ステップＳ３０１）。
【００９２】
制御部１５は、エンジンＯＮの動作が行われていないと判定した場合（ステップＳ３０１，Ｎｏ）、エンジンＯＦＦの動作が行われたか否かを判定する（ステップＳ３０２）。
【００９３】
そして、制御部１５は、エンジンＯＦＦの動作が行われていないと判定した場合（ステップＳ３０２，Ｎｏ）、操作許可者の席移動を検知したか否かを判定し（ステップＳ３０３）、操作許可者の席移動を検知していない場合（ステップＳ３０３，Ｎｏ）、一連の操作許可者監視処理を終了する。
【００９４】
一方、制御部１５は、ステップＳ３０１で、エンジンＯＮの動作が行われたと判定した場合（ステップＳ３０１，Ｙｅｓ）、位置情報１４ｂを初期化して（ステップＳ３０４）、一連の操作許可者監視処理を終了する。
【００９５】
また、制御部１５は、ステップＳ３０２で、エンジンＯＦＦの動作が行われたと判定した場合（ステップＳ３０２，Ｙｅｓ）、位置情報１４ｂを初期化して（ステップＳ３０４）、一連の操作許可者監視処理を終了する。
【００９６】
さらに、制御部１５は、ステップＳ３０３で、操作許可者の席移動を検知した場合（ステップＳ３０３，Ｙｅｓ）、当該操作許可者の位置情報１４ｂを削除して（ステップＳ３０５）、一連の操作許可者監視処理を終了する。
【００９７】
制御部１５は、一連の操作許可者監視処理を終了したならば、ステップＳ３０１〜ステップＳ３０５までの処理を繰り返す。
【００９８】
このように、本発明に係る車載装置は、ジェスチャーによって車内機器の所定の操作指示を行うことができ、操作許可者として認証された乗車者の着座位置を特定し、特定された着座位置方向からのジェスチャーのみを受け付けることとした。
【００９９】
これによって、本発明に係る車載装置は、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができるとともに、環境の変化といった影響に左右されず、運転の安全性を確保することができる。
【符号の説明】
【０１００】
１０ 車載装置
１１ センサ
１２ カメラ
１３ ＤＡ
１４ 記憶部
１４ａ 認証情報
１４ｂ 位置情報
１４ｃ ジェスチャー情報
１５ 制御部
１５ａ 画像取得部
１５ｂ 認証部
１５ｃ 位置特定部
１５ｄ 位置情報登録部
１５ｅ ジェスチャー受付部
１５ｆ 操作指示部
【技術分野】
【０００１】
この発明は、車両に搭載される車載装置に関する。
【背景技術】
【０００２】
従来、音声やジェスチャーによって車内機器に対して所定の操作を行うことができる車載装置が知られている。たとえば、特許文献１には、マイクロフォンによって入力された音声による操作指示を実行する車載装置が開示されている。
【０００３】
具体的には、特許文献１の車載装置は、予め記憶されている声紋の情報と乗車者によって入力された音声の声紋情報とが一致した場合に、入力された音声による操作指示、たとえば、エアコンのスイッチＯＮの指示に対する実行を許可する。
【０００４】
また、特許文献２には、音声とジェスチャーとの組み合わせによって車内機器に対する所定の操作指示を行うことができる車載装置と車内機器とのインターフェースが開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００７−３３３５２６号公報
【特許文献２】特開２００５−１７８４７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の車載装置は、入力された音声認識を行う場合に、エンジン音や外気の騒音が大きいとノイズが混入することとなり、操作の受付精度が低下するという問題があった。
【０００７】
また、特許文献２に記載のインターフェースを適用した車載装置によると、意図しない乗車者から車内機器に対して操作指示が行われたり、子供のいたずら等による誤操作を受け付けてしまうという問題があった。
【０００８】
これらのことから、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる車載装置をいかにして実現するかが大きな課題となっている。
【０００９】
この発明は、上述した従来技術による問題点を解消するためになされたものであり、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる車載装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上述した課題を解決し、目的を達成するため、本発明は、車両に搭載される車載装置であって、車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を認証する認証手段と、前記認証手段によって認証された前記操作許可者の着座位置を特定する位置特定手段と、前記位置特定手段によって特定された前記着座位置に対応する映像に基づいて前記操作許可者の前記ジェスチャーを受け付けるジェスチャー受付手段とを備えたことを特徴とする。
【発明の効果】
【００１１】
本発明によれば、車両に搭載される車載装置が、車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を認証し、認証された操作許可者の着座位置を特定し、特定された着座位置に対応する映像に基づいて操作許可者のジェスチャーを受け付けることとしたので、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができるという効果を奏する。
【図面の簡単な説明】
【００１２】
【図１】図１は、本実施例に係る車載装置の概要を示す図である。
【図２】図２は、本実施例に係る車載装置の構成を示すブロック図である。
【図３】図３は、認証手法の一例を示す図である。
【図４】図４は、認証情報の一例その１を示す図である。
【図５】図５は、認証情報の一例その２を示す図である。
【図６】図６は、位置情報の一例を示す図である。
【図７】図７は、カメラの設置位置の一例を示す図である。
【図８】図８は、ジェスチャー検知手法を説明するための図である。
【図９】図９は、車載装置が実行する操作許可者認証処理手順の概要を示すフローチャートである。
【図１０】図１０は、車載装置が実行するジェスチャー受付処理手順の概要を示すフローチャートである。
【図１１】図１１は、車載装置が実行する操作許可者監視処理手順の概要を示すフローチャートである。
【発明を実施するための形態】
【実施例】
【００１３】
以下に添付図面を参照して、本発明に係る車載装置の好適な実施例を詳細に説明する。なお、以下では、本発明に係る車載装置の概要について図１を用いて説明した後に、本発明に係る車載装置についての実施例を図２〜図１１を用いて説明することとする。
【００１４】
まず、本発明に係る車載装置の概要について図１を用いて説明する。図１は、本発明に係る車載装置の概要を示す図である。本発明に係る車載装置では、ジェスチャーによって車内機器の所定の操作指示を行う。
【００１５】
ここで、本発明に係る車載装置では、車内機器の所定の操作を行うことを許可された者（以下、「操作許可者」と記載する）として認証された乗車者の着座位置を特定し、特定された着座位置方向からのジェスチャーのみを受け付ける点に主たる特徴がある。
【００１６】
図１に示すように、本発明に係る車載装置には、車内機器の操作許可者が個人ごとに予め登録されている。具体的には、個人Ａおよび個人Ｂに対してのみに操作が許可されていると認証情報へ登録されているものとする。
【００１７】
ここで、車両へＡ、ＢおよびＣが乗車した際に、本発明に係る車載装置は、認証情報に基づいて操作許可者の認証を行う（図１の（１）参照）。なお、認証手法については、指紋や顔による生体認証やＩＣ（integrated circuit）カード等による個体識別認証等が挙げられるが、認証手法の詳細については後述することとする。
【００１８】
つづいて、本発明に係る車載装置は、車内に設置される図示しないセンサから操作許可者までの相対位置や相対距離から、操作許可者の着座位置を特定し、その旨を位置情報として記憶しておくこととする（図１の（２）参照）。
【００１９】
たとえば、本発明に係る車載装置は、乗車者Ａの着座位置はドライバ席であり、乗車者Ｂの着座位置は、車両前方に設置されたカメラ側から見て後席右であると特定し、着座位置を位置情報として記憶する。
【００２０】
そして、本発明に係る車載装置は、車内のカメラ映像を取得し（図１の（３）参照）、取得したカメラ映像のうち、特定した操作許可者の着座位置を示すエリア（ここでは、後席右）に撮像されているジェスチャーを受け付ける（図１の（４）参照）。
【００２１】
なお、ジェスチャーは、車内機器に対する所定の操作指示に対応付けられているジェスチャーである。たとえば、図１の（４）に示したように、「人差し指を左右に振る」というジェスチャーには、車内オーディオをＯＮにする操作指示が対応付けられているものとする。
【００２２】
一方、本発明に係る車載装置は、特定した操作許可者の着座位置を示すエリア外（ここでは、後席左）に撮像されているジェスチャーは受け付けないことから、操作許可者以外の乗車者からのジェスチャー操作は無効となる（図１の（５）参照）。
【００２３】
このように、本発明に係る車載装置は、操作許可者として認証された乗車者の着座位置を特定し、特定した着座位置方向からのジェスチャーのみを受け付けることにした。これによって、本発明に係る車載装置は、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができる。
【００２４】
なお、車内機器に対する所定の操作とは、ナビゲーション機能に対する操作や、ＣＤ、ＤＶＤおよびＴＶ等の車内オーディオに対する操作であってもよいし、エアコンに対する操作やサンルーフの開閉操作であってもよい。
【００２５】
以下では、図１を用いて説明した本発明に係る車載装置１０についての実施例を詳細に説明する。まず、本実施例に係る車載装置１０の構成について図２を用いて説明する。図２は、本実施例に係る車載装置１０の構成を示すブロック図である。なお、図２では、車載装置１０の特徴点を説明するために必要な構成要素についてのみ記載している。
【００２６】
図２に示すように、車載装置１０は、センサ１１と、カメラ１２と、ＤＡ（Display Audio）１３と、記憶部１４と、制御部１５とを備えている。また、制御部１５は、画像取得部１５ａと、認証部１５ｂと、位置特定部１５ｃと、位置情報登録部１５ｄと、ジェスチャー受付部１５ｅと、操作指示部１５ｆとをさらに備えており、記憶部１４は、認証情報１４ａと、位置情報１４ｂと、ジェスチャー情報１４ｃとを記憶する。
【００２７】
センサ１１は、操作許可者の認証を行う際に、認証対象に関する情報を検知する計測機器である。たとえば、センサ１１は、認証対象が指紋や顔の場合は、光学センサや画像センサであり、認証対象が静脈や虹彩の場合は、近赤外光センサである。なお、認証手法の詳細については後述することとする。
【００２８】
カメラ１２は、車両に搭載されたカメラであり、車内の映像を撮像し、撮像した映像をジェスチャー受付部１５ｅへ送信する。なお、カメラの設置位置の詳細については後述することとする。
【００２９】
ＤＡ１３は、映像表示機能やオーディオ再生機能を備える装置であり、ジェスチャーによる操作指示により所定の操作を行うことができる車内機器である。なお、ＤＡ１３は、車載装置１０に備える構成としたが、車載装置１０とは別体とする構成としてもよい。
【００３０】
記憶部１４は、不揮発性メモリやハードディスクドライブといった記憶デバイスで構成される記憶部である。この記憶部１４は、予め登録される操作許可者の認証対象に関する情報を認証情報１４ａとして記憶する。
【００３１】
また、記憶部１４は、位置情報登録部１５ｄによって特定された操作許可者の着座位置を位置情報１４ｂとして記憶し、車内機器に対する所定の操作に対応したジェスチャーをジェスチャー情報１４ｃとして記憶する。なお、認証情報１４ａおよび位置情報１４ｂの詳細については後述することとする。
【００３２】
制御部１５は、車載装置１０の全体制御を行う制御部である。画像取得部１５ａは、センサ１１によって検知された認証対象に関する情報、ここでは画像を取得し、認証部１５ｂへ渡す処理を行う処理部である。
【００３３】
認証部１５ｂは、画像取得部１５ａから受け付けた画像と認証情報１４ａとに基づいて操作許可者として認証するか否かを判定する処理を行う処理部である。また、認証部１５ｂは、操作許可者として認証すると判定した場合に、その旨を位置特定部１５ｃへ通知する処理を併せて行う。
【００３４】
位置特定部１５ｃは、認証部１５ｂによって操作許可者として認証された乗車者の着座位置を特定し、操作許可者の着座位置を位置情報登録部１５ｄへ通知する処理を行う処理部である。
【００３５】
位置情報登録部１５ｄは、位置特定部１５ｃから受け付けた操作許可者の着座位置を位置情報１４ｂへ登録させる処理を行う処理部である。
【００３６】
ジェスチャー受付部１５ｅは、カメラ１２からの映像を取得し、位置情報１４ｂに記憶されている操作許可者の着座位置を示すエリアに撮像されているジェスチャーを検知し、操作指示部１５ｆへ渡す処理を行う処理部である。
【００３７】
操作指示部１５ｆは、ジェスチャー受付部１５ｅによって検知されたジェスチャーに対応する操作をジェスチャー情報１４ｃから検索し、対応する車内機器、ここでは、ＤＡ１３へ操作指示を行う処理部である。
【００３８】
また、図示しないが、制御部１５は、バックグラウンド処理として、操作許可者の認証を解除するか否かを監視する処理を行う。たとえば、制御部１５は、エンジンＯＮまたはエンジンＯＦＦを検知した場合には、位置情報１４ｂをすべてクリアして初期化する。
また、制御部１５は、操作許可者の座席移動を検知した場合には、かかる操作許可者の位置情報１４ｂを削除する。なお、位置情報１４ｂを初期化するタイミングについては、エンジンＯＮ／ＯＦＦに限定されるものではなく、車両のドアの開閉時やその他のタイミングとしてもよい。
【００３９】
つぎに、認証部１５ｂが行う認証手法の詳細について図３を用いて説明する。図３は、認証手法の一例を示す図である。なお、ここでは、認証部１５ｂが個人ごとに操作許可者であるか否かを認証する際に行う認証手法について説明する。
【００４０】
認証部１５ｂが行う認証手法には、認証対象ごとに取得する情報が異なるため使用されるセンサも異なる。図３には、センサに対応する認証対象を、所定の分類に分けて例示することとした。
【００４１】
ここでは、認証対象が「指紋」や「顔」の身体部分である「生体認証その１」と、認証対象が「まばたき」や「唇の動き」等の行動である「生体認証その２」と、認証対象が所有物である「個体識別」とに分類した。分類が「生体認証その１」である認証対象は、「静脈」や「虹彩」であってもよく、「生体認証その２」である認証対象は、個人ごとに異なる「手の振りの癖」や個人を特定しないで「手をひらく」等のジェスチャーであってもよい。
【００４２】
また、分類が「個体識別」である認証対象のＲＦＩＤ（Radio Frequency Identification）やＩＣカードには、唯一の識別子をもつタグ（以下、「ＩＣチップ」と記載する）が内蔵されている。
【００４３】
近年では、ＩＣチップが内蔵されている携帯端末も多く利用されていることから、認証部１５ｂは、乗車者の所有する携帯端末によって操作許可者の認証を行うこととしてもよい。
【００４４】
つぎに、認証情報１４ａおよび位置情報１４ｂの詳細について図４〜図６を用いて説明する。図４は、認証情報１４ａの一例その１を示す図であり、図５は、認証情報１４ａの一例その２を示す図である。また、図６は、位置情報１４ｂの一例を示す図である。
【００４５】
図４の（Ａ）に示すように、認証情報１４ａは、「識別ＩＤ」項目と、「認証対象」項目と、「認証条件」項目とを含んでいる。なお、認証情報１４ａは、かかる項目で構成される情報を１レコードとしたレコードの集合体である。
【００４６】
「識別ＩＤ」項目は、個人を識別する識別子であり、個体識別の場合は、ＩＣチップの識別子であってもよい。「認証対象」項目は認証対象名であり、「認証条件」項目は、識別ＩＤに対応付けられた認証対象の特徴となる画像や映像である。認証情報１４ａは、操作許可者として予め登録される個人の識別ＩＤに対応付けて認証対象と認証条件とが記憶される。
【００４７】
また、図４の（Ｂ）に示すように、認証情報１４ａは、「許可レベル」項目を含むこととしてもよい。この場合、車内機器に対する操作ごとに「許可レベル」としてレベルを設定することによって、個人に対して許可される操作の許可範囲を設定することができる。
【００４８】
たとえば、許可レベル１は、ナビゲーション操作、車内オーディオに対する操作、エアコン操作やサンルーフの開閉操作を許可し、許可レベル２は、ナビゲーション操作以外の操作を許可するというように、操作の許可範囲を設定する。これにより、車内へ乗車する子供に対して、ＣＤ再生等の操作を許可する一方で、ナビゲーション機能に対する誤操作を防止することができる。
【００４９】
なお、これまでは、認証部１５ｂが特定した個人が操作許可者であるか否かを認証する認証手法について説明したが、これに限定されるものではない。たとえば、認証部１５ｂでは、操作許可者の認証を行う際に、個人を特定せず、いずれの乗車者も同じ認証条件によって認証されることとしてもよい。
【００５０】
図５に示すように、認証情報１４ａは、識別ＩＤを含まない構成とし、認証対象が「手の振り（順番）」に対する認証条件には「手をグーからパーへ手を振る」ジェスチャーである場合について説明する。
【００５１】
この場合、車内機器の所定の操作が許可される乗車者のみに対してかかるジェスチャーを通知しておくことによって、認証部１５ｂは、操作許可者の認証を行うことができる。たとえば、車両へ乗車する大人のみへかかるジェスチャーを通知し、車両へ乗車する子供へは通知しないこととする。これによって、認証部１５ｂでは、操作許可者として大人のみ認証することができ、子供による車内機器に対する誤操作を防止することができる。
【００５２】
つづいて、位置情報１４ｂの詳細について図６を用いて説明する。図６の（Ａ）に示すように、位置情報１４ｂは、「識別ＩＤ」項目と、「着座位置」項目とを含んでいる。なお、位置情報１４ｂは、かかる項目で構成される情報を１レコードとしたレコードの集合体である。
【００５３】
「識別ＩＤ」項目は、個人を識別する識別子であり、「着座位置」項目は、操作許可者として認証された乗車者の着座位置である。なお、制御部１５では、バックグラウンド処理として、操作許可者の認証を解除するか否かを監視しており、所定の条件に基づいて位置情報１４ｂの削除や登録を行っている。
【００５４】
たとえば、位置情報１４ｂへ登録されている操作許可者（識別ＩＤ：ＣＣＣ）が、車内で席を移動した場合の、位置情報１４ｂの遷移を図６の（Ａ−１）〜（Ａ−３）を用いて説明する。
【００５５】
まず、認証部１５ｂによって認証された個人の識別ＩＤが、ＡＡＡおよびＣＣＣであり、位置特定部１５ｃによって特定された着座位置が、それぞれドライバ席および後席左であった場合に、位置情報１４ｂは、図６の（Ａ−１）に示したように記憶される。
【００５６】
そして、制御部１５は、識別ＩＤがＣＣＣである操作許可者の座席移動を検知した場合、位置情報１４ｂから識別ＩＤがＣＣＣであるレコードを削除する（図６の（Ａ−２）参照）。
【００５７】
その後、位置特定部１５ｃによって識別ＩＤがＣＣＣである操作許可者の着座位置が後席右と特定されたならば、位置情報登録部１５ｄは、新たに「ＣＣＣ：後席右」と位置情報１４ｂへ登録する（図６の（Ａ−３）参照）。
【００５８】
また、認証部１５ｂは、ＩＣチップが内蔵されている外部装置、たとえば、乗車者の所有する携帯装置によって認証を行う場合には、図示しないＩＣ読取機によって読み取られたＩＣチップの識別子に基づいて操作許可者として認証するか否かを判定する。なお、ＩＣチップ内に、操作許可者として認証するか否かの情報を予め記憶させておいてもよい。
【００５９】
そして、位置特定部１５ｃは、認証部１５ｂによって操作許可者として認証された乗車者の着座位置を特定し、操作許可者の着座位置を位置情報１４ｂへ登録させることとしてもよい。ここで、携帯装置によって認証された操作許可者が座席移動した場合には、再度位置特定部１５ｃでは乗車者の着座位置を特定することとなる。
【００６０】
なお、図６の（Ａ）では、認証部１５ｂが操作許可者の認証を行う際に、個人を特定した場合について説明した。しかし、図６の（Ｂ）に示したように、位置情報１４ｂは、個人を特定しない場合には、識別ＩＤを含まない構成としてもよい。
【００６１】
つぎに、カメラ１２の設置位置の詳細について図７を用いて説明する。図７の（Ａ）は、カメラ映像の一例を示す図であり、図７の（Ｂ）は、カメラの設置位置の一例を示す図である。
【００６２】
まず、図７の（Ａ）に示したように、車両前方の中央、たとえば、ダッシュボード中央部やルームミラーの近傍等に設置され、車両前方から車両後方側を撮像する１台のカメラ１２によって撮像されたカメラ映像である。かかるカメラ映像には、エリアごとに着座位置が割り当てられているものとする。
【００６３】
そして、ジェスチャー受付部１５ｅは、位置情報１４ｂに記憶されている操作許可者の着座位置に対応するエリアを検索し、検索したエリアに撮像されているジェスチャーを検知し、車内機器に対する操作として受け付ける。
【００６４】
たとえば、カメラ映像の着座位置１のエリアには、カメラ１２側から見て後席右に着座した乗車者が割り当てられているとする。また、カメラ映像の着座位置２のエリアは前席右、着座位置３のエリアは後席左、着座位置４のエリアは前席左、すなわちドライバ席に着座した乗車者が割り当てられているとする。
【００６５】
ここで、位置情報１４ｂに記憶されている操作許可者の着座位置が後席右である場合に、ジェスチャー受付部１５ｅは、着座位置１のエリアを操作許可者のジェスチャーを検知する範囲とする。
【００６６】
一方、ジェスチャー受付部１５ｅは、操作許可者の着座位置に対応するエリア以外、すなわち、着座位置２、３および４に撮像されているジェスチャーを検知した場合には、検知されたジェスチャーの操作を無効とする。
【００６７】
なお、図７の（Ａ）に示したカメラ映像を撮像するカメラ１２の設置位置は、車内全体を見わたせる位置であれば上記位置に限定されず、その他の位置にも設置可能である。たとえば、天井部中央、たとえば、ルームランプ近傍にカメラ１２を設置してもよい。かかる場合、使用するレンズに魚眼レンズなどを用いて、各乗車者を確認しやすくするとより好ましい。
【００６８】
また、図７の（Ａ）では、１台のカメラ１２によってカメラ映像を撮像する場合について説明したが、つづいて、４台のカメラ１２によってカメラ映像を撮像する場合について説明する。
【００６９】
図７の（Ｂ）に示すように、着座位置１に着座する乗車者を撮像するカメラ１、着座位置２に着座する乗車者を撮像するカメラ２というように、車内には、着座位置に着座する乗車者を撮像するカメラがそれぞれ設置されているとする。
【００７０】
具体的には、カメラ２およびカメラ４は、ダッシュボードやフロントウィンドウの近傍などに設置され、また、カメラ１およびカメラ３は着座位置２や着座位置４の背面、たとえば、運転席および助手席のヘッドレストの背面などに設置されるものとする。
【００７１】
この場合、ジェスチャー受付部１５ｅは、位置情報１４ｂに記憶されている操作許可者の着座位置に設置されたカメラによって撮像されたカメラ映像からジェスチャーを検知し、車内機器に対する操作として受け付けることとなる。これにより、カメラ映像から操作許可者の着座位置に対応するエリアを検索することなく、操作許可者のジェスチャーを検知することができる。
【００７２】
さてこれまでは、操作許可者の着座位置に対応するエリア以外に撮像されているジェスチャーを検知した場合に、検知されたジェスチャーでの操作を無効とすることとした。しかし、例外処理として、ジェスチャー受付部１５ｅは、以下に説明するジェスチャー検知手法を行うこととしてもよい。ジェスチャー受付部１５ｅが行うジェスチャー検知手法の例外処理の詳細について図８を用いて説明する。
【００７３】
図８は、ジェスチャー検知手法を説明するための図である。図８の（Ａ）および（Ｂ）は、カメラ１２によって撮像されたカメラ映像であり、着座位置１で示したエリアは、操作許可者の着座位置を示し、また、着座位置２で示したエリアは、操作許可者以外の乗車者の着座位置を示す。
【００７４】
ここで、図８の（Ａ）に示したように、操作許可者以外の着座位置２内にジェスチャーを検知した場合、ジェスチャー受付部１５ｅは、検知されたジェスチャーの手が操作許可者の手であるか否かを判定する。
【００７５】
具体的には、ジェスチャー受付部１５ｅは、所定の画像処理を行い、着座位置１内の操作許可者の映像と着座位置２に映るジェスチャーの手とが繋がっているか否かを、判定する。
【００７６】
そして、ジェスチャー受付部１５ｅは、着座位置１内の操作許可者と着座位置２に映るジェスチャーの手とが繋がっていると判定した場合、かかるジェスチャーを操作許可者のジェスチャーとして受け付けることとする。
【００７７】
一方、図８の（Ｂ）に示したように、ジェスチャー受付部１５ｅは、操作許可者の着座位置１内にジェスチャーを検知した場合であっても、着座位置１内の操作許可者とジェスチャーの手とが繋がっていないと判定したならば、ジェスチャーの操作を無効とする。このようにすることによって、車載装置１０は、高精度に操作許可者のジェスチャーを検知することができる。
【００７８】
つぎに、本実施例に係る車載装置１０が実行するジェスチャー操作処理手順の詳細について図９〜図１１を用いて説明する。図９は、車載装置１０が実行する操作許可者認証処理手順の概要を示すフローチャートであり、図１０は、車載装置１０が実行するジェスチャー受付処理手順の概要を示すフローチャートであり、図１１は、車載装置１０が実行する操作許可者監視処理手順の概要を示すフローチャートである。
【００７９】
まず、図９に示すように、画像取得部１５ａは、認証対象者の認証用画像を取得し（ステップＳ１０１）、認証部１５ｂは、画像取得部１５ａによって取得された認証用画像を認証情報１４ａに記憶される認証条件と比較する（ステップＳ１０２）。
【００８０】
そして、認証部１５ｂは、認証用画像と認証情報１４ａに記憶される認証条件とが一致するか否かを判定し（ステップＳ１０３）、一致すると判定した場合（ステップＳ１０３，Ｙｅｓ）に、操作許可者であると認証する（ステップＳ１０４）。
【００８１】
その後、位置特定部１５ｃは、認証部１５ｂによって認証された操作許可者の着座位置を特定し（ステップＳ１０５）、位置情報登録部１５ｄは、操作許可者の識別ＩＤと特定された着座位置を位置情報１４ｂへ登録し（ステップＳ１０６）、一連の操作許可者認証処理を終了する。
【００８２】
一方、認証部１５ｂは、ステップＳ１０３で、認証用画像と認証情報１４ａに記憶される認証条件とが一致しないと判定した場合（ステップＳ１０３，Ｎｏ）、操作許可者と認証しないで（ステップＳ１０７）、一連の操作許可者認証処理を終了する。
【００８３】
なお、図６の（Ｂ）で説明したように、ステップＳ１０２において認証部１５ｂが個人を特定しないで認証処理を行う場合には、ステップＳ１０６では、着座位置のみを位置情報１４ｂへ登録することとする。
【００８４】
つづいて、車載装置１０が実行するジェスチャー受付処理手順の詳細について図１０を用いて説明する。図１０に示すように、ジェスチャー受付部１５ｅは、カメラ１２によって撮像されたカメラ映像を取得する（ステップＳ２０１）。
【００８５】
そして、ジェスチャー受付部１５ｅは、取得したカメラ映像からジェスチャーを検知し（ステップＳ２０２）、ジェスチャーの検知位置が位置情報１４ｂに記憶される着座位置の範囲であるか否かを判定する（ステップＳ２０３）。
【００８６】
ジェスチャー受付部１５ｅは、ジェスチャーの検知位置が位置情報１４ｂに記憶される着座位置の範囲であると判定した場合（ステップＳ２０３，Ｙｅｓ）、検知されたジェスチャーによる操作を許可する（ステップＳ２０４）。
【００８７】
一方、ジェスチャー受付部１５ｅは、ジェスチャーの検知位置が位置情報１４ｂに記憶される着座位置の範囲ではないと判定した場合（ステップＳ２０３，Ｎｏ）、検知されたジェスチャーによる操作を無効として（ステップＳ２０８）、一連のジェスチャー受付処理を終了する。
【００８８】
そして、ジェスチャー受付部１５ｅは、検知されたジェスチャーをジェスチャー情報１４ｃに記憶されるジェスチャーと比較して（ステップＳ２０５）、一致するか否かを判定する（ステップＳ２０６）。
【００８９】
ジェスチャー受付部１５ｅは、ステップＳ２０６で一致すると判定した場合（ステップＳ２０６，Ｙｅｓ）、操作指示部１５ｆは、検知されたジェスチャーに対応した車内機器に対する操作指示をＤＡ１３へ送信して（ステップＳ２０７）、一連のジェスチャー受付処理を終了する。
【００９０】
一方、ジェスチャー受付部１５ｅは、ステップＳ２０６で一致しないと判定した場合（ステップＳ２０６，Ｎｏ）、対応する操作がないため、その旨を報知する等を行って処理を終了する。
【００９１】
つづいて、車載装置１０がバックグラウンド処理として実行する操作許可者監視処理手順の詳細について図１１を用いて説明する。図１１に示すように、制御部１５は、エンジンＯＮの動作が行われたか否かを判定する（ステップＳ３０１）。
【００９２】
制御部１５は、エンジンＯＮの動作が行われていないと判定した場合（ステップＳ３０１，Ｎｏ）、エンジンＯＦＦの動作が行われたか否かを判定する（ステップＳ３０２）。
【００９３】
そして、制御部１５は、エンジンＯＦＦの動作が行われていないと判定した場合（ステップＳ３０２，Ｎｏ）、操作許可者の席移動を検知したか否かを判定し（ステップＳ３０３）、操作許可者の席移動を検知していない場合（ステップＳ３０３，Ｎｏ）、一連の操作許可者監視処理を終了する。
【００９４】
一方、制御部１５は、ステップＳ３０１で、エンジンＯＮの動作が行われたと判定した場合（ステップＳ３０１，Ｙｅｓ）、位置情報１４ｂを初期化して（ステップＳ３０４）、一連の操作許可者監視処理を終了する。
【００９５】
また、制御部１５は、ステップＳ３０２で、エンジンＯＦＦの動作が行われたと判定した場合（ステップＳ３０２，Ｙｅｓ）、位置情報１４ｂを初期化して（ステップＳ３０４）、一連の操作許可者監視処理を終了する。
【００９６】
さらに、制御部１５は、ステップＳ３０３で、操作許可者の席移動を検知した場合（ステップＳ３０３，Ｙｅｓ）、当該操作許可者の位置情報１４ｂを削除して（ステップＳ３０５）、一連の操作許可者監視処理を終了する。
【００９７】
制御部１５は、一連の操作許可者監視処理を終了したならば、ステップＳ３０１〜ステップＳ３０５までの処理を繰り返す。
【００９８】
このように、本発明に係る車載装置は、ジェスチャーによって車内機器の所定の操作指示を行うことができ、操作許可者として認証された乗車者の着座位置を特定し、特定された着座位置方向からのジェスチャーのみを受け付けることとした。
【００９９】
これによって、本発明に係る車載装置は、車内機器に対して所定の操作指示を行うことを許可された乗車者からの操作指示のみを精度良く受け付けることができるとともに、環境の変化といった影響に左右されず、運転の安全性を確保することができる。
【符号の説明】
【０１００】
１０ 車載装置
１１ センサ
１２ カメラ
１３ ＤＡ
１４ 記憶部
１４ａ 認証情報
１４ｂ 位置情報
１４ｃ ジェスチャー情報
１５ 制御部
１５ａ 画像取得部
１５ｂ 認証部
１５ｃ 位置特定部
１５ｄ 位置情報登録部
１５ｅ ジェスチャー受付部
１５ｆ 操作指示部
【特許請求の範囲】
【請求項１】
車両に搭載される車載装置であって、
車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を認証する認証手段と、
前記認証手段によって認証された前記操作許可者の着座位置を特定する位置特定手段と、
前記位置特定手段によって特定された前記着座位置に対応する映像に基づいて前記操作許可者の前記ジェスチャーを受け付けるジェスチャー受付手段と
を備えたことを特徴とする車載装置。
【請求項２】
前記認証手段は、
前記操作許可者それぞれを個人として認証し、
前記位置特定手段は、
個人の前記着座位置を特定することを特徴とする請求項１に記載の車載装置。
【請求項３】
前記認証手段は、
予め記憶された動作と認証対象者のジェスチャーとが一致すると判定された場合に、前記認証対象者を前記操作許可者として認証することを特徴とする請求項１または２に記載の車載装置。
【請求項４】
前記認証手段によって認証された前記操作許可者を所定のタイミングによって解除する解除手段
をさらに備えたことを特徴とする請求項１、２または３に記載の車載装置。
【請求項５】
記録媒体の媒体識別子を取得する識別子取得手段
をさらに備え、
前記認証手段は、
予め記憶された識別子と前記識別子取得手段によって取得された前記媒体識別子とが一致すると判定された場合に、前記認証対象者を前記操作許可者として認証することを特徴とする請求項１〜４のいずれか一つに記載の車載装置。
【請求項１】
車両に搭載される車載装置であって、
車内機器に対して所定のジェスチャーによる操作を許可された操作許可者を認証する認証手段と、
前記認証手段によって認証された前記操作許可者の着座位置を特定する位置特定手段と、
前記位置特定手段によって特定された前記着座位置に対応する映像に基づいて前記操作許可者の前記ジェスチャーを受け付けるジェスチャー受付手段と
を備えたことを特徴とする車載装置。
【請求項２】
前記認証手段は、
前記操作許可者それぞれを個人として認証し、
前記位置特定手段は、
個人の前記着座位置を特定することを特徴とする請求項１に記載の車載装置。
【請求項３】
前記認証手段は、
予め記憶された動作と認証対象者のジェスチャーとが一致すると判定された場合に、前記認証対象者を前記操作許可者として認証することを特徴とする請求項１または２に記載の車載装置。
【請求項４】
前記認証手段によって認証された前記操作許可者を所定のタイミングによって解除する解除手段
をさらに備えたことを特徴とする請求項１、２または３に記載の車載装置。
【請求項５】
記録媒体の媒体識別子を取得する識別子取得手段
をさらに備え、
前記認証手段は、
予め記憶された識別子と前記識別子取得手段によって取得された前記媒体識別子とが一致すると判定された場合に、前記認証対象者を前記操作許可者として認証することを特徴とする請求項１〜４のいずれか一つに記載の車載装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１２１３８６（Ｐ２０１２−１２１３８６Ａ）
【公開日】平成２４年６月２８日（２０１２．６．２８）
【国際特許分類】
【出願番号】特願２０１０−２７２０５７（Ｐ２０１０−２７２０５７）
【出願日】平成２２年１２月６日（２０１０．１２．６）
【出願人】（０００２３７５９２）富士通テン株式会社 (3,383)
【Ｆターム（参考）】
【公開日】平成２４年６月２８日（２０１２．６．２８）
【国際特許分類】
【出願日】平成２２年１２月６日（２０１０．１２．６）
【出願人】（０００２３７５９２）富士通テン株式会社 (3,383)
【Ｆターム（参考）】
[ Back to top ]