色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラム
【課題】色弱者であっても運転が可能な色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムを提供する。
【解決手段】車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置において、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する画面表示手段と、色弱者が識別可能に設定された補正色を組み合わせて提示する色の組み合わせ手段と、を有する。
【解決手段】車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置において、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する画面表示手段と、色弱者が識別可能に設定された補正色を組み合わせて提示する色の組み合わせ手段と、を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムに関する。
【背景技術】
【０００２】
近年、画像処理技術の進展に伴い、車両にカーナビゲーション装置やデジタルテレビジョン装置を搭載することが行われるようになった。この種の装置には駐車場に駐車する際に車両後方の撮影画像を表示するものがある（例えば、特許文献１〜４参照。）。
【０００３】
特許文献１に記載の発明は、車両の後方に搭載されたカメラにて車両後方を撮影した画像を表示する装置において、車両後方画像を鉛直方向から見下ろし鳥瞰画像に変換し、モニタに表示させるものである。
【０００４】
特許文献２に記載の発明は、車載カメラの視野から離れる車両に近い領域を過去の画像から抽出し、視野外の画像と領域内の画像を鳥瞰画像にマッチングし、合体した画像をモニタに表示させるものである。
【０００５】
特許文献３に記載の発明は、認識した駐車枠線を用いて、駐車枠線と車両の前後方向とのなす角度を算出し、この角度から車両を駐車枠内に駐車させるための駐車支援情報としてハンドル操作の回転すべき方向を決定し、この方向を画面に表示させるものである。
【０００６】
特許文献４に記載の発明は、信号灯認識機が車両に搭載され、信号灯の色を正しく認識するようにしたものである。
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上述した画像表示装置では、色弱の運転者に視覚に応じた表示設定を行わないことがあり、また、一般色覚者と色弱者の双方ユーザーが環境の変化により画面の表示内容を見にくい問題点があった。
【０００８】
そこで本発明の目的は、色弱者であっても運転が可能な色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
上記課題を解決するため、請求項１記載の発明は、車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置において、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する画面表示手段と、色弱者が識別可能に設定された補正色を組み合わせて提示する色の組み合わせ手段と、を有することを特徴とする。
【００１０】
請求項２記載の発明は、請求項１記載の発明において、前記色の組み合わせ手段は、前記車載カメラにて撮影された画像のうちの前記色弱者が見やすい色の組み合わせが選択可能な選択手段を有することを特徴とする。
【００１１】
請求項３記載の発明は、請求項１記載の発明において、信号灯の輪郭と色度情報を用いて信号灯を検出する信号灯検出手段と、前記信号灯検出手段により検出された信号灯の色情報を前記色弱者に提示する信号灯提示手段を有することを特徴とする。
【００１２】
請求項４記載の発明は、請求項１記載の発明において、前記車載カメラからの画面上における駐車場の駐車枠と車両とがなす角によるハンドルを切る方向を決定するハンドル方向決定手段と、前記ハンドルの操作ミスを判断する操作ミス判断手段と、前記操作ミスを前記運転者にフィードバックするためのフィードバッグ表示手段と、を有することを特徴とする。
【００１３】
請求項５記載の発明は、請求項４記載の発明において、前記フィードバッグ表示手段は、矢印と点滅の矢印とで前記画面上に表示する操作ヒントガイド表示手段を有することを特徴とする。
【００１４】
請求項６記載の発明は、車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援方法において、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示し、色弱者が識別可能に設定された補正色を組み合わせて提示することを特徴とする。
【００１５】
請求項７記載の発明は、車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置の制御用のプログラムにおいて、コンピュータに、画面表示手段が、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する手順、色の組み合わせ手段が、色弱者が識別可能に設定された補正色を組み合わせて提示する手順、を実行させることを特徴とする。
【発明の効果】
【００１６】
本発明によれば、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示し、色弱者が識別可能に設定された補正色を組み合わせて提示することにより、色弱者が状況を識別することが可能となるので、色弱者であっても運転が可能な色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムの提供を実現することができる。
【図面の簡単な説明】
【００１７】
【図１】（ａ）は、本発明に係る色弱者向け駐車支援装置を適用した乗用車の概念図の一例であり、（ｂ）は、（ａ）に示した駐車支援装置のブロック図の一例である。
【図２】図１（ａ）、（ｂ）に示した駐車支援装置の動作を説明するためのフローチャートの一例である。
【図３】図１（ａ）、（ｂ）に示した駐車支援装置の動作を説明するためのフローチャートの一例である。
【図４】図１に示した駐車支援装置の切替動作を示すフローチャートの一例である。
【図５】車庫入れの際に図１（ａ）、（ｂ）に示したディスプレー２に表示される画像の一例である。
【図６】（ａ）は、図１（ａ）に示したディスプレー２の画面であり、（ｂ）は（ａ）に示した画面の色組合せガイドの領域Ｌ１の拡大図の一例であり、（ｃ）は、（ｂ）の他の一例である。
【図７】図１（ａ）、（ｂ）に示したディスプレー２に表示される背景の色、矢印とハンドルの色との組合せの一例である。
【図８】信号灯を認識する際のフローチャートの一例である。
【図９】信号灯の一例である。
【図１０】（ａ）は、図１（ａ）に示したディスプレー２に表示される画面であり、（ｂ）は、（ａ）の領域Ｌ１の拡大図である。
【発明を実施するための形態】
【００１８】
＜実施の形態１＞
（構 成）
図１（ａ）は、本発明に係る色弱者向け駐車支援装置を適用した乗用車の概念図の一例であり、図１（ｂ）は、図１（ａ）に示した駐車支援装置のブロック図の一例である。
図１（ａ）において、乗用車の後方（図の右側）に、斜め下方を俯瞰して撮影するように配置された撮影手段としての車載カメラ（例えば、ＣＣＤ(charge-coupled device)カメラ）１が搭載され、車載カメラ１で撮影された画像は乗用車に内蔵された画像処理装置３で画像処理され運転席側前面に設置されたディスプレー２に表示されるようになっている。これら、車載カメラ１、ディスプレー２、及び画像処理装置３で色弱者向け駐車支援装置が構成されている。
【００１９】
図１（ｂ）において、画像処理装置３は、ＣＰＵ(central processing unit)４、ＲＯＭ(read only memory)５、ＲＡＭ(random access memory)６、Ｉ／Ｆ（inter face）７、及びバスライン９を有する。
画面表示手段としてのディスプレー２は、車載カメラ１で撮影した画像や必要な情報を表示する機能を有し、例えば液晶パネル（またはプラズマパネル、もしくは有機ＥＬ(electro luminescence)パネル）が挙げられる。
ＣＰＵ４は、色弱者向け駐車支援装置を統括制御する機能を有し、例えばマイクロプロセッサが挙げられる。
ＲＯＭ５は、動作プログラムが格納された記憶媒体であり、例えばマスクＲＯＭが挙げられる。
ＲＡＭ６は、車載カメラ１で撮影した画像を一時的に記憶するための記憶媒体であり、例えば、フラッシュメモリが挙げられる。
Ｉ／Ｆ７は、車載カメラ１と画像処理装置３との間のデータの仲介を行う機能を有する。
操作部８は、リモコンスイッチが挙げられるが、ここでは、ディスプレー２に設けられたタッチパネルの場合で説明する。
バスライン９は、車載カメラ１、ディスプレー２、ＣＰＵ４、ＲＯＭ５、ＲＡＭ６、及び操作部８間のデータや制御信号を授受する機能を有する。
【００２０】
（動 作）
図３は、図１に示した駐車支援装置の動作を説明するためのフローチャートの一例である。
乗用車の駐車時に撮影が開始されると、ＣＰＵ４は、車載カメラ１にて乗用車の後方を撮影した画像の各画素の輝度によって画像輝度平均値を求める（ステップＳ３００）。
ＣＰＵ４は、平均輝度値が閾値の範囲内か否かを判断し（ステップS310）、平均輝度値が閾値の範囲内であると判断すると（ステップS310／YES）、モニタにディスプレー２に表示し（ステップS320）、平均輝度値が閾値の範囲内でないと判断すると（ステップS310／NO）、平均輝度値を調整し（ステップS330）、ステップS310に戻る。すなわち、平均輝度値は、事前に設定された最適な閾値の範囲と比較し、表示された画像のコントラストを閾値の範囲内に調整するようになっている。
【００２１】
図４は、図１に示した駐車支援装置の切替動作を示すフローチャートの一例である。
ＣＰＵ４は、ディスプレー２のカラーの画面上に必要なメッセージ（例えば、「色支援モードに切り替えますか？ はい いいえ」もしくは「カラーモードに切替ますか？ はい いいえ」）を表示し（ステップS400）、色弱者用の認識しやすい画面へ切り替えるボタンを表示する（ステップS410）。
ＣＰＵ４は、タッチパネルの切替ボタンが押されたか否かを判断し（ステップＳ４１０）、切替ボタン（「色支援モードに切り替えますか」の場合の「はい」）が押されたと判断すると（ステップS410／YES）、色弱者用の色支援モードで表示し（ステップS420）、切替ボタン（「色支援モードに切り替えますか」の場合の「いいえ」）が押されたと判断すると（ステップS410／NO）、一般色覚者用のカラーモードで表示する（ステップS430）。
【００２２】
ここで、本システムは、一般色覚者用のカラー色画面と、色弱者が識別しやすいカラー画面との二つの画面に切り替えて表示できるようになっている。
運転者が一般色覚者の場合、そのままの画面背景と既定色のハンドルで案内する。
運転者が色弱者の場合、車載カメラ１から撮影された画像の色によって、色弱者が認識しやすいガイドの色組みあわせを選ぶことができる。
【００２３】
ここで、色弱等について説明する。
色弱とは、色覚異常のうち程度の軽いものであり、特定の色について識別が困難とされている。
色弱者は、我が国内に推計約３００万人いるとされ、そのうち男性の２０人に１人、女性の５００人に１人いるとされている。全世界では２億人を超すとされている。遺伝子変異のタイプにより、色の見え方が異なり（完全な白黒はほとんどおらず、特定の色の識別が困難な人が多い。）、治療法が見つかっていない。また、白内障等の疾患により色覚が変わる人もいる。
色弱者は、赤い文字と黒い文字との見分けがつかない場合が多く、特に紫色と青色、赤色と緑色等も混同しやすく、濃い赤色は黒色と混同しやすく、桃色と水色も混同しやすいとされている。
【００２４】
このため、色弱者が識別しやすい色の例として明度を対比すると共に暖色寒色の対比をしたり（例えば、青色と黄色）、はっきりした色とパステル調を対比したり（薄オレンジ色と緑色と桃色）することが挙げられる。また、色弱者が区別しやすい色の例として例えば、黄色と黒色、黄色と青色、白色と黒色、白色と青色、白色と緑色、白色と赤色、赤色と青色の組合せが挙げられる。
【００２５】
図６（ａ）は、図１（ａ）に示したディスプレー２の画面であり、図６（ｂ）は図６（ａ）に示した画面の色組合せガイドの領域Ｌ１の拡大図の一例であり、図６（ｃ）は、図６（ｂ）の他の一例である。
図６（ｂ）にはハンドル（ステアリング）１０ａ、ハンドル１０ａを切る方向を示す矢印１１ａ、ガイド領域Ｌ２〜Ｌ６が示されている。運転者は、操作部８を操作することによりガイド領域Ｌ２〜Ｌ６の何れかを選択することができる。
矢印１１ａとハンドル１１ａとは同色であり、領域Ｌ１における背景の色とは異なるようになっている。
【００２６】
図７は、図１（ａ）、（ｂ）に示したディスプレー２に表示される背景の色、矢印とハンドルの色との組合せの一例である。
例えば、運転者が操作部８を操作してディスプレー２の領域Ｌ１内のガイド領域Ｌ２を選択すると、領域Ｌ１の色（背景色）は黄色となり、矢印１１ａとハンドル１０ａの色は黒色となる（図６（ａ））。運転者が操作部８を操作してディスプレー２の領域Ｌ１内のガイド領域Ｌ３を選択すると、領域Ｌ１の色は黒色となり、矢印１１ｂとハンドル１０ｂの色は黄色となる（図６（ｂ））。
このように背景の色と、矢印とハンドルの色とが色弱者にとって識別しやすい色で表示されるので、運転手が色弱者であってもハンドルを切る方向を瞬時に把握することができ、駐車場への車庫入れが容易になる。領域Ｌ１内の表示は操作ヒントガイド表示手段である。また、ガイド領域Ｌ２〜Ｌ６が色の組み合わせ手段である。
【００２７】
ここで、車載カメラ１の視野内の領域の鳥瞰画像は特許文献１に開示された装置と同様の座標変換処理によって得られる。また、車載カメラ１の視野外の領域の合成画像は特許文献２に開示された処理と同様の処理によって得られる。さらに、特許文献３に開示された処理によって、駐車枠線を検出できる。
【００２８】
次に本発明に係る色弱者向け駐車支援装置の動作について、図２、図３、及び図５を参照して説明する。
図２、及び図３は、図１（ａ）、（ｂ）に示した駐車支援装置の動作を説明するためのフローチャートの一例であり、図５は、車庫入れの際に図１（ａ）、（ｂ）に示したディスプレー２に表示される画像の一例である。
画像処理装置３は、車載カメラ１で撮影された画像のデータをＲＡＭ６へ格納し、画像の描写に応じてＲＡＭ６から画像データが車載ディスプレー２に出力される。
ＣＰＵ４は、シフト位置がバックか否かを判断し（ステップS110）、シフト位置がバックでないと判断した場合（ステップS110／NO）、待機し、シフト位置がバックであると判断した場合（ステップS110／YES）、背景画像のコントラストの最適地を決定し、調整する（ステップS120）。
ＣＰＵ４は、切替ボタンの選択を行い（ステップS130）、鳥瞰図画像を作成し（ステップS140）、カメラ視野外領域を合成し（ステップS150）、駐車枠線の検出処理を行う（ステップS160）。
ＣＰＵ４は、図５に示したように検出された駐車枠Ｌ１０と乗用車の前後方向とのなす角θを算出する（ステップS170）。
【００２９】
次にＣＰＵ４は、ステップS170で算出したなす角θが０に近づくようにハンドルを回すべき方向を決定する（ステップS180）。
ＣＰＵ４は、ハンドルを回すべき方向を矢印で画面上に案内する（ステップS190）。この時のなす角θがＲＡＭ６に格納される。乗用車の移動に従ってなす角θがＲＡＭ６に格納されたなす角θと比較し、更新する（ステップS200）。
ただし、なす角θが増大する場合、操作ミスとなっている。その時、ディスプレー２の画面の領域Ｌ１上に表示された矢印（図６（ａ）の矢印１１ａ、もしくは図６（ｂ）の矢印１１ｂ）が点滅の状態に変更される（ステップS210）。
次に、ＣＰＵ４は、なす角θが±１°以内になるか否かを判断し（ステップS220）、なす角θが±１°以内でないと判断した場合（ステップS220／NO）、ステップS110に戻り、±１°以内であると判断した場合（ステップS220／YES）、駐車決定となり(ステップS230)、ステップS110に戻る。
【００３０】
矢印と点滅の矢印の色表示について、前述の手順（ステップS400〜ステップS430）に従って行う。切り替えボタンを選択したら、モニタ画面上に図６（ｂ）、もしくは図６（ｃ）に示すガイドが表示される。
【００３１】
以上の説明したように本発明によれば、駐車枠と車両前後方向とのなす角θの変化に従って、操作ヒントガイド表示手段からハンドルの操作動作を色弱者と一般色覚者の双方のユーザーに報知でき、車両を駐車枠内に駐車することできる。
【００３２】
また、画像の背景の色よる色弱者のユーザーが見やすいガイドの色組み合わせを選択できるので車載カメラの撮像画像と操作ヒントガイドの両方をモニタ画面上で見やすく表示することができる。
【００３３】
＜実施の形態２＞
図８は、信号灯を認識する際のフローチャートの一例である。
時間ごとに撮影された画像を用いて処理を行ってもよい（特許文献４参照。）。信号灯探索の流れは図８のフローチャートに示すように、気候や太陽や街灯の位置などの影響を受けて、色飽和を生じてしまうことがある。
具体的には、ＣＰＵ４は、画像を入力すると（ステップ800）、無関係色を排除し（ステップS810）、飽和色閾値以上の画素を除去し（ステップS820）、画像を微分化し（ステップS830）、ハフ変換により輪郭を検出し（ステップS840）、信号灯を認識し（ステップS850）、信号灯色を認識し（ステップS860）、信号灯画像を決定するものである（ステップS870）。
【００３４】
ここで、色を正しく認識するため、画像に対して、RGB(Red Green Blue)のうち二つの値が250以上かつ残りの一つの値が180以上である画素を色飽和画素として除去する。また処理を軽くするため、撮影された画像の色を赤系、青系、黄系以外に除去する。画像微分とハフ処理などの画像処理によって、信号灯（横型交通信号機）の輪郭を認識できる。信号灯のサンプルの輪郭は図９のように示した。
図９は、信号灯の一例である。
【００３５】
気候と環境の変化による誤差を避けるために、あらかじめ様々な環境下で撮影した信号灯の画像を用いて、黄系、青系、赤系のヒストグラムテーブルを作成し、記憶する。記憶された各色のヒストグラムを比較対照し、抽出された信号灯の色を決定することができる。
【００３６】
図１０（ａ）は、図１（ａ）に示したディスプレー２に表示される画面であり、図１０（ｂ）は、図１０（ａ）の領域Ｌ１の拡大図である。
操作部８の切り替えボタンを操作することにより、図１０（ｂ）に示すように、ハンドルを切る方向を示す画面から信号灯検出画面に切り替えることができる。
但し、信号灯を画面に表示させる構成の場合は、車載カメラ１は後部だけでなく、運転席の前か車両の前端に搭載されているものとする。
図１０（ｂ）において、領域Ｌ２〜Ｌ６は、図６（ｂ）、（ｃ）に示した領域と同様に色弱者にとって識別しやすい色の組合せを表示するようになっている。
信号灯の色の配置は、左側通行の日本では、右から赤、黄、青と決められている。
例えば、図１０（ｂ）では右側が点灯しているので、「赤」を意味する。この場合、色組合せガイド信号灯の点灯部２０〜２２の輪郭、支持部２３の輪郭、及び点灯部２２の内側は黒色で表示され、支持部２３の内側、及び点灯していない点灯部２０、２１は黄色で表示される。
【００３７】
以上において、本実施の形態によれば、色弱者であっても信号灯の点灯状態を容易に把握することができる。
【００３８】
＜プログラム及び記憶媒体＞
以上で説明した本発明にかかる色弱者向け駐車支援装置は、コンピュータで処理を実行させるプログラムによって実現されている。コンピュータとしては、例えばマイクロプロセッサなどの汎用的なものが挙げられるが、本発明はこれに限定されるものではない。よって、一例として、プログラムにより本発明を実現する場合の説明を以下で行う。
【００３９】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置の制御用のプログラムにおいて、
コンピュータに、
(1)画面表示手段が、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する手順、
(2)色の組み合わせ手段が、色弱者が識別可能に設定された補正色を組み合わせて提示する手順、を実行させるプログラムが挙げられる。
【００４０】
これにより、プログラムが実行可能なコンピュータ環境さえあれば、どこにおいても本発明にかかる色弱者向け駐車支援装置を実現することができる。
このようなプログラムは、コンピュータに読み取り可能な記憶媒体に記憶されていてもよい。
【００４１】
ここで、記憶媒体としては、例えば、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ（CD Recordable）、ＤＶＤ（Digital Versatile Disk）などのコンピュータで読み取り可能な記憶媒体、フラッシュメモリ、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ＦｅＲＡＭ（強誘電体メモリ）等の半導体メモリやＨＤＤ（Hard Disc Drive）が挙げられる。
【００４２】
なお、上述した実施の形態は、本発明の好適な実施の形態の一例を示すものであり、本発明はそれに限定されることなく、その要旨を逸脱しない範囲内において、種々変形実施が可能である。
【符号の説明】
【００４３】
１ 車載カメラ
２ ディスプレー
３ 画像処理部
４ ＣＰＵ
５ ＲＯＭ
６ ＲＡＭ
７ Ｉ／Ｆ
８ 操作部
９ バスライン
１０ａ、１０ｂ ハンドル（ステアリング）
１１ａ、１１ｂ 矢印
１２ 支持部
２０〜２２ 点灯部
【先行技術文献】
【特許文献】
【００４４】
【特許文献１】特許第３６６３８０１号公報
【特許文献２】特許第３６７７４５８号公報
【特許文献３】特開２００７−１６１１９３号公報
【特許文献４】特開２００９−１５７５９号公報
【技術分野】
【０００１】
本発明は、色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムに関する。
【背景技術】
【０００２】
近年、画像処理技術の進展に伴い、車両にカーナビゲーション装置やデジタルテレビジョン装置を搭載することが行われるようになった。この種の装置には駐車場に駐車する際に車両後方の撮影画像を表示するものがある（例えば、特許文献１〜４参照。）。
【０００３】
特許文献１に記載の発明は、車両の後方に搭載されたカメラにて車両後方を撮影した画像を表示する装置において、車両後方画像を鉛直方向から見下ろし鳥瞰画像に変換し、モニタに表示させるものである。
【０００４】
特許文献２に記載の発明は、車載カメラの視野から離れる車両に近い領域を過去の画像から抽出し、視野外の画像と領域内の画像を鳥瞰画像にマッチングし、合体した画像をモニタに表示させるものである。
【０００５】
特許文献３に記載の発明は、認識した駐車枠線を用いて、駐車枠線と車両の前後方向とのなす角度を算出し、この角度から車両を駐車枠内に駐車させるための駐車支援情報としてハンドル操作の回転すべき方向を決定し、この方向を画面に表示させるものである。
【０００６】
特許文献４に記載の発明は、信号灯認識機が車両に搭載され、信号灯の色を正しく認識するようにしたものである。
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、上述した画像表示装置では、色弱の運転者に視覚に応じた表示設定を行わないことがあり、また、一般色覚者と色弱者の双方ユーザーが環境の変化により画面の表示内容を見にくい問題点があった。
【０００８】
そこで本発明の目的は、色弱者であっても運転が可能な色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００９】
上記課題を解決するため、請求項１記載の発明は、車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置において、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する画面表示手段と、色弱者が識別可能に設定された補正色を組み合わせて提示する色の組み合わせ手段と、を有することを特徴とする。
【００１０】
請求項２記載の発明は、請求項１記載の発明において、前記色の組み合わせ手段は、前記車載カメラにて撮影された画像のうちの前記色弱者が見やすい色の組み合わせが選択可能な選択手段を有することを特徴とする。
【００１１】
請求項３記載の発明は、請求項１記載の発明において、信号灯の輪郭と色度情報を用いて信号灯を検出する信号灯検出手段と、前記信号灯検出手段により検出された信号灯の色情報を前記色弱者に提示する信号灯提示手段を有することを特徴とする。
【００１２】
請求項４記載の発明は、請求項１記載の発明において、前記車載カメラからの画面上における駐車場の駐車枠と車両とがなす角によるハンドルを切る方向を決定するハンドル方向決定手段と、前記ハンドルの操作ミスを判断する操作ミス判断手段と、前記操作ミスを前記運転者にフィードバックするためのフィードバッグ表示手段と、を有することを特徴とする。
【００１３】
請求項５記載の発明は、請求項４記載の発明において、前記フィードバッグ表示手段は、矢印と点滅の矢印とで前記画面上に表示する操作ヒントガイド表示手段を有することを特徴とする。
【００１４】
請求項６記載の発明は、車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援方法において、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示し、色弱者が識別可能に設定された補正色を組み合わせて提示することを特徴とする。
【００１５】
請求項７記載の発明は、車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置の制御用のプログラムにおいて、コンピュータに、画面表示手段が、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する手順、色の組み合わせ手段が、色弱者が識別可能に設定された補正色を組み合わせて提示する手順、を実行させることを特徴とする。
【発明の効果】
【００１６】
本発明によれば、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示し、色弱者が識別可能に設定された補正色を組み合わせて提示することにより、色弱者が状況を識別することが可能となるので、色弱者であっても運転が可能な色弱者向け駐車支援装置、色弱者向け駐車支援方法、及びプログラムの提供を実現することができる。
【図面の簡単な説明】
【００１７】
【図１】（ａ）は、本発明に係る色弱者向け駐車支援装置を適用した乗用車の概念図の一例であり、（ｂ）は、（ａ）に示した駐車支援装置のブロック図の一例である。
【図２】図１（ａ）、（ｂ）に示した駐車支援装置の動作を説明するためのフローチャートの一例である。
【図３】図１（ａ）、（ｂ）に示した駐車支援装置の動作を説明するためのフローチャートの一例である。
【図４】図１に示した駐車支援装置の切替動作を示すフローチャートの一例である。
【図５】車庫入れの際に図１（ａ）、（ｂ）に示したディスプレー２に表示される画像の一例である。
【図６】（ａ）は、図１（ａ）に示したディスプレー２の画面であり、（ｂ）は（ａ）に示した画面の色組合せガイドの領域Ｌ１の拡大図の一例であり、（ｃ）は、（ｂ）の他の一例である。
【図７】図１（ａ）、（ｂ）に示したディスプレー２に表示される背景の色、矢印とハンドルの色との組合せの一例である。
【図８】信号灯を認識する際のフローチャートの一例である。
【図９】信号灯の一例である。
【図１０】（ａ）は、図１（ａ）に示したディスプレー２に表示される画面であり、（ｂ）は、（ａ）の領域Ｌ１の拡大図である。
【発明を実施するための形態】
【００１８】
＜実施の形態１＞
（構 成）
図１（ａ）は、本発明に係る色弱者向け駐車支援装置を適用した乗用車の概念図の一例であり、図１（ｂ）は、図１（ａ）に示した駐車支援装置のブロック図の一例である。
図１（ａ）において、乗用車の後方（図の右側）に、斜め下方を俯瞰して撮影するように配置された撮影手段としての車載カメラ（例えば、ＣＣＤ(charge-coupled device)カメラ）１が搭載され、車載カメラ１で撮影された画像は乗用車に内蔵された画像処理装置３で画像処理され運転席側前面に設置されたディスプレー２に表示されるようになっている。これら、車載カメラ１、ディスプレー２、及び画像処理装置３で色弱者向け駐車支援装置が構成されている。
【００１９】
図１（ｂ）において、画像処理装置３は、ＣＰＵ(central processing unit)４、ＲＯＭ(read only memory)５、ＲＡＭ(random access memory)６、Ｉ／Ｆ（inter face）７、及びバスライン９を有する。
画面表示手段としてのディスプレー２は、車載カメラ１で撮影した画像や必要な情報を表示する機能を有し、例えば液晶パネル（またはプラズマパネル、もしくは有機ＥＬ(electro luminescence)パネル）が挙げられる。
ＣＰＵ４は、色弱者向け駐車支援装置を統括制御する機能を有し、例えばマイクロプロセッサが挙げられる。
ＲＯＭ５は、動作プログラムが格納された記憶媒体であり、例えばマスクＲＯＭが挙げられる。
ＲＡＭ６は、車載カメラ１で撮影した画像を一時的に記憶するための記憶媒体であり、例えば、フラッシュメモリが挙げられる。
Ｉ／Ｆ７は、車載カメラ１と画像処理装置３との間のデータの仲介を行う機能を有する。
操作部８は、リモコンスイッチが挙げられるが、ここでは、ディスプレー２に設けられたタッチパネルの場合で説明する。
バスライン９は、車載カメラ１、ディスプレー２、ＣＰＵ４、ＲＯＭ５、ＲＡＭ６、及び操作部８間のデータや制御信号を授受する機能を有する。
【００２０】
（動 作）
図３は、図１に示した駐車支援装置の動作を説明するためのフローチャートの一例である。
乗用車の駐車時に撮影が開始されると、ＣＰＵ４は、車載カメラ１にて乗用車の後方を撮影した画像の各画素の輝度によって画像輝度平均値を求める（ステップＳ３００）。
ＣＰＵ４は、平均輝度値が閾値の範囲内か否かを判断し（ステップS310）、平均輝度値が閾値の範囲内であると判断すると（ステップS310／YES）、モニタにディスプレー２に表示し（ステップS320）、平均輝度値が閾値の範囲内でないと判断すると（ステップS310／NO）、平均輝度値を調整し（ステップS330）、ステップS310に戻る。すなわち、平均輝度値は、事前に設定された最適な閾値の範囲と比較し、表示された画像のコントラストを閾値の範囲内に調整するようになっている。
【００２１】
図４は、図１に示した駐車支援装置の切替動作を示すフローチャートの一例である。
ＣＰＵ４は、ディスプレー２のカラーの画面上に必要なメッセージ（例えば、「色支援モードに切り替えますか？ はい いいえ」もしくは「カラーモードに切替ますか？ はい いいえ」）を表示し（ステップS400）、色弱者用の認識しやすい画面へ切り替えるボタンを表示する（ステップS410）。
ＣＰＵ４は、タッチパネルの切替ボタンが押されたか否かを判断し（ステップＳ４１０）、切替ボタン（「色支援モードに切り替えますか」の場合の「はい」）が押されたと判断すると（ステップS410／YES）、色弱者用の色支援モードで表示し（ステップS420）、切替ボタン（「色支援モードに切り替えますか」の場合の「いいえ」）が押されたと判断すると（ステップS410／NO）、一般色覚者用のカラーモードで表示する（ステップS430）。
【００２２】
ここで、本システムは、一般色覚者用のカラー色画面と、色弱者が識別しやすいカラー画面との二つの画面に切り替えて表示できるようになっている。
運転者が一般色覚者の場合、そのままの画面背景と既定色のハンドルで案内する。
運転者が色弱者の場合、車載カメラ１から撮影された画像の色によって、色弱者が認識しやすいガイドの色組みあわせを選ぶことができる。
【００２３】
ここで、色弱等について説明する。
色弱とは、色覚異常のうち程度の軽いものであり、特定の色について識別が困難とされている。
色弱者は、我が国内に推計約３００万人いるとされ、そのうち男性の２０人に１人、女性の５００人に１人いるとされている。全世界では２億人を超すとされている。遺伝子変異のタイプにより、色の見え方が異なり（完全な白黒はほとんどおらず、特定の色の識別が困難な人が多い。）、治療法が見つかっていない。また、白内障等の疾患により色覚が変わる人もいる。
色弱者は、赤い文字と黒い文字との見分けがつかない場合が多く、特に紫色と青色、赤色と緑色等も混同しやすく、濃い赤色は黒色と混同しやすく、桃色と水色も混同しやすいとされている。
【００２４】
このため、色弱者が識別しやすい色の例として明度を対比すると共に暖色寒色の対比をしたり（例えば、青色と黄色）、はっきりした色とパステル調を対比したり（薄オレンジ色と緑色と桃色）することが挙げられる。また、色弱者が区別しやすい色の例として例えば、黄色と黒色、黄色と青色、白色と黒色、白色と青色、白色と緑色、白色と赤色、赤色と青色の組合せが挙げられる。
【００２５】
図６（ａ）は、図１（ａ）に示したディスプレー２の画面であり、図６（ｂ）は図６（ａ）に示した画面の色組合せガイドの領域Ｌ１の拡大図の一例であり、図６（ｃ）は、図６（ｂ）の他の一例である。
図６（ｂ）にはハンドル（ステアリング）１０ａ、ハンドル１０ａを切る方向を示す矢印１１ａ、ガイド領域Ｌ２〜Ｌ６が示されている。運転者は、操作部８を操作することによりガイド領域Ｌ２〜Ｌ６の何れかを選択することができる。
矢印１１ａとハンドル１１ａとは同色であり、領域Ｌ１における背景の色とは異なるようになっている。
【００２６】
図７は、図１（ａ）、（ｂ）に示したディスプレー２に表示される背景の色、矢印とハンドルの色との組合せの一例である。
例えば、運転者が操作部８を操作してディスプレー２の領域Ｌ１内のガイド領域Ｌ２を選択すると、領域Ｌ１の色（背景色）は黄色となり、矢印１１ａとハンドル１０ａの色は黒色となる（図６（ａ））。運転者が操作部８を操作してディスプレー２の領域Ｌ１内のガイド領域Ｌ３を選択すると、領域Ｌ１の色は黒色となり、矢印１１ｂとハンドル１０ｂの色は黄色となる（図６（ｂ））。
このように背景の色と、矢印とハンドルの色とが色弱者にとって識別しやすい色で表示されるので、運転手が色弱者であってもハンドルを切る方向を瞬時に把握することができ、駐車場への車庫入れが容易になる。領域Ｌ１内の表示は操作ヒントガイド表示手段である。また、ガイド領域Ｌ２〜Ｌ６が色の組み合わせ手段である。
【００２７】
ここで、車載カメラ１の視野内の領域の鳥瞰画像は特許文献１に開示された装置と同様の座標変換処理によって得られる。また、車載カメラ１の視野外の領域の合成画像は特許文献２に開示された処理と同様の処理によって得られる。さらに、特許文献３に開示された処理によって、駐車枠線を検出できる。
【００２８】
次に本発明に係る色弱者向け駐車支援装置の動作について、図２、図３、及び図５を参照して説明する。
図２、及び図３は、図１（ａ）、（ｂ）に示した駐車支援装置の動作を説明するためのフローチャートの一例であり、図５は、車庫入れの際に図１（ａ）、（ｂ）に示したディスプレー２に表示される画像の一例である。
画像処理装置３は、車載カメラ１で撮影された画像のデータをＲＡＭ６へ格納し、画像の描写に応じてＲＡＭ６から画像データが車載ディスプレー２に出力される。
ＣＰＵ４は、シフト位置がバックか否かを判断し（ステップS110）、シフト位置がバックでないと判断した場合（ステップS110／NO）、待機し、シフト位置がバックであると判断した場合（ステップS110／YES）、背景画像のコントラストの最適地を決定し、調整する（ステップS120）。
ＣＰＵ４は、切替ボタンの選択を行い（ステップS130）、鳥瞰図画像を作成し（ステップS140）、カメラ視野外領域を合成し（ステップS150）、駐車枠線の検出処理を行う（ステップS160）。
ＣＰＵ４は、図５に示したように検出された駐車枠Ｌ１０と乗用車の前後方向とのなす角θを算出する（ステップS170）。
【００２９】
次にＣＰＵ４は、ステップS170で算出したなす角θが０に近づくようにハンドルを回すべき方向を決定する（ステップS180）。
ＣＰＵ４は、ハンドルを回すべき方向を矢印で画面上に案内する（ステップS190）。この時のなす角θがＲＡＭ６に格納される。乗用車の移動に従ってなす角θがＲＡＭ６に格納されたなす角θと比較し、更新する（ステップS200）。
ただし、なす角θが増大する場合、操作ミスとなっている。その時、ディスプレー２の画面の領域Ｌ１上に表示された矢印（図６（ａ）の矢印１１ａ、もしくは図６（ｂ）の矢印１１ｂ）が点滅の状態に変更される（ステップS210）。
次に、ＣＰＵ４は、なす角θが±１°以内になるか否かを判断し（ステップS220）、なす角θが±１°以内でないと判断した場合（ステップS220／NO）、ステップS110に戻り、±１°以内であると判断した場合（ステップS220／YES）、駐車決定となり(ステップS230)、ステップS110に戻る。
【００３０】
矢印と点滅の矢印の色表示について、前述の手順（ステップS400〜ステップS430）に従って行う。切り替えボタンを選択したら、モニタ画面上に図６（ｂ）、もしくは図６（ｃ）に示すガイドが表示される。
【００３１】
以上の説明したように本発明によれば、駐車枠と車両前後方向とのなす角θの変化に従って、操作ヒントガイド表示手段からハンドルの操作動作を色弱者と一般色覚者の双方のユーザーに報知でき、車両を駐車枠内に駐車することできる。
【００３２】
また、画像の背景の色よる色弱者のユーザーが見やすいガイドの色組み合わせを選択できるので車載カメラの撮像画像と操作ヒントガイドの両方をモニタ画面上で見やすく表示することができる。
【００３３】
＜実施の形態２＞
図８は、信号灯を認識する際のフローチャートの一例である。
時間ごとに撮影された画像を用いて処理を行ってもよい（特許文献４参照。）。信号灯探索の流れは図８のフローチャートに示すように、気候や太陽や街灯の位置などの影響を受けて、色飽和を生じてしまうことがある。
具体的には、ＣＰＵ４は、画像を入力すると（ステップ800）、無関係色を排除し（ステップS810）、飽和色閾値以上の画素を除去し（ステップS820）、画像を微分化し（ステップS830）、ハフ変換により輪郭を検出し（ステップS840）、信号灯を認識し（ステップS850）、信号灯色を認識し（ステップS860）、信号灯画像を決定するものである（ステップS870）。
【００３４】
ここで、色を正しく認識するため、画像に対して、RGB(Red Green Blue)のうち二つの値が250以上かつ残りの一つの値が180以上である画素を色飽和画素として除去する。また処理を軽くするため、撮影された画像の色を赤系、青系、黄系以外に除去する。画像微分とハフ処理などの画像処理によって、信号灯（横型交通信号機）の輪郭を認識できる。信号灯のサンプルの輪郭は図９のように示した。
図９は、信号灯の一例である。
【００３５】
気候と環境の変化による誤差を避けるために、あらかじめ様々な環境下で撮影した信号灯の画像を用いて、黄系、青系、赤系のヒストグラムテーブルを作成し、記憶する。記憶された各色のヒストグラムを比較対照し、抽出された信号灯の色を決定することができる。
【００３６】
図１０（ａ）は、図１（ａ）に示したディスプレー２に表示される画面であり、図１０（ｂ）は、図１０（ａ）の領域Ｌ１の拡大図である。
操作部８の切り替えボタンを操作することにより、図１０（ｂ）に示すように、ハンドルを切る方向を示す画面から信号灯検出画面に切り替えることができる。
但し、信号灯を画面に表示させる構成の場合は、車載カメラ１は後部だけでなく、運転席の前か車両の前端に搭載されているものとする。
図１０（ｂ）において、領域Ｌ２〜Ｌ６は、図６（ｂ）、（ｃ）に示した領域と同様に色弱者にとって識別しやすい色の組合せを表示するようになっている。
信号灯の色の配置は、左側通行の日本では、右から赤、黄、青と決められている。
例えば、図１０（ｂ）では右側が点灯しているので、「赤」を意味する。この場合、色組合せガイド信号灯の点灯部２０〜２２の輪郭、支持部２３の輪郭、及び点灯部２２の内側は黒色で表示され、支持部２３の内側、及び点灯していない点灯部２０、２１は黄色で表示される。
【００３７】
以上において、本実施の形態によれば、色弱者であっても信号灯の点灯状態を容易に把握することができる。
【００３８】
＜プログラム及び記憶媒体＞
以上で説明した本発明にかかる色弱者向け駐車支援装置は、コンピュータで処理を実行させるプログラムによって実現されている。コンピュータとしては、例えばマイクロプロセッサなどの汎用的なものが挙げられるが、本発明はこれに限定されるものではない。よって、一例として、プログラムにより本発明を実現する場合の説明を以下で行う。
【００３９】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置の制御用のプログラムにおいて、
コンピュータに、
(1)画面表示手段が、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する手順、
(2)色の組み合わせ手段が、色弱者が識別可能に設定された補正色を組み合わせて提示する手順、を実行させるプログラムが挙げられる。
【００４０】
これにより、プログラムが実行可能なコンピュータ環境さえあれば、どこにおいても本発明にかかる色弱者向け駐車支援装置を実現することができる。
このようなプログラムは、コンピュータに読み取り可能な記憶媒体に記憶されていてもよい。
【００４１】
ここで、記憶媒体としては、例えば、ＣＤ−ＲＯＭ（Compact Disc Read Only Memory）、フレキシブルディスク（ＦＤ）、ＣＤ−Ｒ（CD Recordable）、ＤＶＤ（Digital Versatile Disk）などのコンピュータで読み取り可能な記憶媒体、フラッシュメモリ、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、ＦｅＲＡＭ（強誘電体メモリ）等の半導体メモリやＨＤＤ（Hard Disc Drive）が挙げられる。
【００４２】
なお、上述した実施の形態は、本発明の好適な実施の形態の一例を示すものであり、本発明はそれに限定されることなく、その要旨を逸脱しない範囲内において、種々変形実施が可能である。
【符号の説明】
【００４３】
１ 車載カメラ
２ ディスプレー
３ 画像処理部
４ ＣＰＵ
５ ＲＯＭ
６ ＲＡＭ
７ Ｉ／Ｆ
８ 操作部
９ バスライン
１０ａ、１０ｂ ハンドル（ステアリング）
１１ａ、１１ｂ 矢印
１２ 支持部
２０〜２２ 点灯部
【先行技術文献】
【特許文献】
【００４４】
【特許文献１】特許第３６６３８０１号公報
【特許文献２】特許第３６７７４５８号公報
【特許文献３】特開２００７−１６１１９３号公報
【特許文献４】特開２００９−１５７５９号公報
【特許請求の範囲】
【請求項１】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置において、
一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する画面表示手段と、
色弱者が識別可能に設定された補正色を組み合わせて提示する色の組み合わせ手段と、を有することを特徴とする色弱者向け駐車支援装置。
【請求項２】
前記色の組み合わせ手段は、前記車載カメラにて撮影された画像のうちの前記色弱者が見やすい色の組み合わせが選択可能な選択手段を有することを特徴とする請求項１記載の色弱者向け駐車支援装置。
【請求項３】
信号灯の輪郭と色度情報を用いて信号灯を検出する信号灯検出手段と、
前記信号灯検出手段により検出された信号灯の色情報を前記色弱者に提示する信号灯提示手段を有することを特徴とする請求項１記載の色弱者向け駐車支援装置。
【請求項４】
前記車載カメラからの画面上における駐車場の駐車枠と車両とがなす角によるハンドルを切る方向を決定するハンドル方向決定手段と、
前記ハンドルの操作ミスを判断する操作ミス判断手段と、
前記操作ミスを前記運転者にフィードバックするためのフィードバッグ表示手段と、を有することを特徴とする請求項１記載の色弱者向け駐車支援装置。
【請求項５】
前記フィードバッグ表示手段は、矢印と点滅の矢印とで前記画面上に表示する操作ヒントガイド表示手段を有することを特徴とする請求項４記載の色弱者向け駐車支援装置。
【請求項６】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援方法において、
一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示し、
色弱者が識別可能に設定された補正色を組み合わせて提示することを特徴とする色弱者向け駐車支援方法。
【請求項７】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置の制御用のプログラムにおいて、
コンピュータに、
画面表示手段が、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する手順、
色の組み合わせ手段が、色弱者が識別可能に設定された補正色を組み合わせて提示する手順、を実行させることを特徴とするプログラム。
【請求項１】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置において、
一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する画面表示手段と、
色弱者が識別可能に設定された補正色を組み合わせて提示する色の組み合わせ手段と、を有することを特徴とする色弱者向け駐車支援装置。
【請求項２】
前記色の組み合わせ手段は、前記車載カメラにて撮影された画像のうちの前記色弱者が見やすい色の組み合わせが選択可能な選択手段を有することを特徴とする請求項１記載の色弱者向け駐車支援装置。
【請求項３】
信号灯の輪郭と色度情報を用いて信号灯を検出する信号灯検出手段と、
前記信号灯検出手段により検出された信号灯の色情報を前記色弱者に提示する信号灯提示手段を有することを特徴とする請求項１記載の色弱者向け駐車支援装置。
【請求項４】
前記車載カメラからの画面上における駐車場の駐車枠と車両とがなす角によるハンドルを切る方向を決定するハンドル方向決定手段と、
前記ハンドルの操作ミスを判断する操作ミス判断手段と、
前記操作ミスを前記運転者にフィードバックするためのフィードバッグ表示手段と、を有することを特徴とする請求項１記載の色弱者向け駐車支援装置。
【請求項５】
前記フィードバッグ表示手段は、矢印と点滅の矢印とで前記画面上に表示する操作ヒントガイド表示手段を有することを特徴とする請求項４記載の色弱者向け駐車支援装置。
【請求項６】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援方法において、
一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示し、
色弱者が識別可能に設定された補正色を組み合わせて提示することを特徴とする色弱者向け駐車支援方法。
【請求項７】
車載カメラによる画像を用いて運転者への駐車支援を行う駐車支援装置の制御用のプログラムにおいて、
コンピュータに、
画面表示手段が、一般色覚者用の画像と色弱者用の画像とを切り替え自在に表示する手順、
色の組み合わせ手段が、色弱者が識別可能に設定された補正色を組み合わせて提示する手順、を実行させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１０−２６４７７７（Ｐ２０１０−２６４７７７Ａ）
【公開日】平成２２年１１月２５日（２０１０．１１．２５）
【国際特許分類】
【出願番号】特願２００９−１１５３４５（Ｐ２００９−１１５３４５）
【出願日】平成２１年５月１２日（２００９．５．１２）
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
【公開日】平成２２年１１月２５日（２０１０．１１．２５）
【国際特許分類】
【出願日】平成２１年５月１２日（２００９．５．１２）
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
[ Back to top ]