車両用背景画像収集装置
【課題】車両における障害物検知を行なう際の基準となる背景画像を適切に収集すること。
【解決手段】車両周辺を定期的に撮像する撮像手段（１０）と、前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる背景画像記憶制御手段（５２）と、前記背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除する不要画像削除手段（５６）と、を備える車両用背景画像収集装置（１）。
【解決手段】車両周辺を定期的に撮像する撮像手段（１０）と、前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる背景画像記憶制御手段（５２）と、前記背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除する不要画像削除手段（５６）と、を備える車両用背景画像収集装置（１）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両における障害物検知を行なう際の基準となる背景画像を収集する車両用背景画像収集装置に関する。
【背景技術】
【０００２】
従来、車載カメラやレーダー装置等において認識された障害物との衝突を回避するように、又は衝突時の衝撃を和らげるように種々の車両制御を行なう制御システムが、ＰＣＳ（Pre-crush Safety System）等の名称で知られている。
【０００３】
車載カメラを用いて障害物や道路の陥没等、車両が回避すべき物体を認識する際に困難を伴うのが、撮像画像の所定領域に存在する障害物等を、当該領域に当然に存在するもの（道路に描画された白線等）と判別して認識を行なうことである。係る判別のために、白線等以外に何も写っていない背景画像を予め用意し、撮像画像と比較すると好適である。
【０００４】
これに関連し、検知領域の画像を撮像する監視カメラと、その監視カメラにて撮像された画像データに基づいて検知領域内の車両の有無を検知する画像処理ユニットを備え、監視カメラにて順次撮像される画像データを濃淡投影処理にて画像処理し、現時点の投影処理データとその前の投影処理データとの差分値の最大値を求めるとともに、車両検出をしていないときの投影差分最大値の移動平均処理を行って背景データを求め、それら投影処理データの差分最大値と背景データに基づいて車両の有無を判定する走行車両検知システムについての発明が開示されている（例えば、特許文献１参照）。
【特許文献１】特開２００４−１８５５３７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
上記特許文献１には、監視車線において、車両を検知していないときの投影差分最大値に対して移動平均を求めることにより背景データを求める旨が記載されている（段落「００２８」）。しかしながら、当該システムは、固定カメラによって車両を検知することを想定したものであり、必ずしもそのまま車載装置に適用可能な技術ではない。車両の走行軌跡は、基本的に同一車線を走行している場合であっても障害物を回避したりする行動によってブレが生じるため、径路上の各地点における背景画像として用いるのに適さない画像を撮像する場合があるからである。
【０００６】
本発明はこのような課題を解決するためのものであり、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することが可能な車両用背景画像収集装置を提供することを、主たる目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するための本発明の第１の態様は、
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる背景画像記憶制御手段と、
前記背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除する不要画像削除手段と、
を備える車両用背景画像収集装置である。
【０００８】
この本発明の第１の態様によれば、背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除するため、対応する車両の移動経路が正常であると判定された撮像画像のみが記憶手段に残されることとなる。従って、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、不要となった撮像画像を削除するため、記憶手段の使用領域を節約することができる。しかも、何度も繰り返し不要画像削除処理を行なうことで、背景画像として不適切な画像が混入する可能性を低減することができ、精度の向上を図ることができる。
【０００９】
本発明の第１の態様において、
前記不要画像削除手段は、前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、基準径路記憶手段に記憶された基準径路と乖離していない場合に該車両の移動径路が正常であると判定し、前記基準径路と乖離している場合に該車両の移動径路が正常でないと判定する手段であるものとしてもよい。
【００１０】
この場合、
前記記憶手段に記憶された車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段を備えるものとしてもよい。
【００１１】
更にこの場合、
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段である、
また、本発明の第１の態様において、
車両挙動を検出する車両挙動検出手段を備え、
前記不要画像削除手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段であるものとしてもよい。
【００１２】
また、本発明の第１の態様において、
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記不要画像削除手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路正常であるか否かを判定する手段であるものとしてもよい。
【００１３】
本発明の第２の態様は、
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる撮像画像記憶制御手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、前記基準径路記憶手段に記憶された基準径路と乖離していない場合に、該車両の移動径路に付随する撮像画像を背景画像として背景画像記憶手段に記憶させる背景画像記憶制御手段と、
を備え、前記撮像画像記憶制御が記憶手段に記憶させた情報を、前記背景画像記憶制御手段の処理に拘わらず残存させることを特徴とする、車両用背景画像収集装置である。
【００１４】
本発明の第２の態様によれば、各撮像画像に対応付けられている車両の移動径路が基準径路と乖離していない場合に、この車両の移動径路に対応する撮像画像を背景画像として背景画像記憶手段に記憶させるため、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、背景画像として採用されなかった撮像画像を削除せずに残存させるため、後に、採用されなかった撮像画像に対応する車両の移動径路が基準径路の一部とされたような場合に、当該撮像画像を背景画像として採用する途を残すことができる。
【００１５】
本発明の第２の態様において、
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段であるものとしてもよい。
【００１６】
また、本発明の第２の態様において、
車両挙動を検出する車両挙動検出手段を備え、
前記背景画像記憶制御手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段であるものとしてもよい。
【００１７】
また、本発明の第２の態様において、
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記背景画像記憶制御手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路が正常であるか否かを判定する手段であるものとしてもよい。
【発明の効果】
【００１８】
本発明によれば、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することが可能な車両用背景画像収集装置を提供することができる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明を実施するための最良の形態について、添付図面を参照しながら実施例を挙げて説明する。
【実施例】
【００２０】
＜第１実施例＞
以下、本発明の第１実施例に係る車両用背景画像収集装置１について説明する。本実施例の車両用背景画像収集装置１は、車両に搭載される装置であって、各撮像位置に関して障害物の位置等を検知するための基準画像となる背景画像を収集するための装置である。なお、これに限らず、本発明は所定の移動径路を周回移動する移動ロボット等に適用されてもよい。
【００２１】
［構成］
図１は、第１実施例に係る車両用背景画像収集装置１の全体構成の一例を示す図である。車両用背景画像収集装置１は、車載カメラ１０と、記憶装置２０と、車速センサー３０と、ナビゲーション装置４０と、ＥＣＵ（Electronic Control Unit）５０と、を備える。
【００２２】
車載カメラ１０は、例えば、ウインドシールド中央上部に配設されたＣＣＤ（Charge-Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を利用したカメラであり、車両前方を撮像領域とし、数［ｍｓ］毎に繰り返し撮像を行なう。図２は、車載カメラ１０のハードウエア構成の一例を示す図である。カメラ１０は、例えば、撮像レンズ１２と、イメージセンサー１４と、電子制御部１６と、を備える。以下、カメラ２０がＣＣＤカメラであるものとして説明する。
【００２３】
イメージセンサー１４は、例えばインターライン型イメージセンサーであり、光電変換を行なう受光素子であるフォトダイオードと、これに対応するＣＣＤとをそれぞれ２次元平面状に配列し、フォトダイオードとＣＣＤの間にアナログスイッチとして機能するトランスファゲートを有する。各フォトダイオードの前側（撮像レンズ１２側）には、集光のためのマイクロレンズが取り付けられている。なお、こうした構造は、あくまでイメージセンサー１４の機能を簡易に説明するために模式的に例示したものであり、機能性向上等のための如何なる設計変更も許容される。また、インターライン型イメージセンサーに限らず、ＣＣＤ自体が受光素子として機能するフルフレームトランスファ型やフレームトランスファ型のイメージセンサーを用いてもよい。
【００２４】
電子制御部１６は、例えば、マイクロコンピューターや電子回路等が用いられ、イメージセンサー１４が有するトランスファゲートの開閉タイミングを制御することによりカメラ１０のシャッタースピードや撮像周期（例えば、１秒間に数十回程度）を調節する。そして、電子制御部１６は、イメージセンサー１４の出力回路から出力されるデータに対して所定のゲインによる増幅等を行なって、入力画像データとしてＥＣＵ５０に出力する。
【００２５】
記憶装置２０は、ＨＤＤ（Hard Disc Drive）やＤＶＤ（Digital Versatile Disk）ドライブ、ＣＤドライブ、フラッシュメモリ等の記憶装置、或いはこれらの組み合わせである。記憶装置２０の記憶媒体には、背景画像情報２２及び基準径路情報２４が記憶される。
【００２６】
車速センサー３０は、例えば、車両の各車輪に取り付けられた車輪速センサーとスキッドコントロールコンピューターからなり、車輪速センサーが出力する車輪速パルス信号をスキッドコントロールコンピューターが車速矩形波パルス信号（車速信号）に変換してＥＣＵ５０に出力する。なお、係る情報通信は、専用通信線を用いて行なわれてもよいが、複数の制御装置が情報を参照可能な多重通信線に情報が出力される態様であってもよい。
【００２７】
ナビゲーション装置４０は、例えば、ＧＰＳ（Global Positioning System）受信機４２と、地図データ４５を格納した記憶装置４４と、ディスプレイ装置や音声入出力装置を含む入出力装置４６と、ナビゲーション制御用コンピューター４８と、を備える。地図データ４５は、例えば交差点等を示すノードと、ノードを接続するリンクとにより道路形状を表現したものであり、各リンクに付随して車線数や道路曲率、道路幅員等の情報が記憶されている。ナビゲーション制御用コンピューター４８は、ＧＰＳ受信機４２が受信したＧＰＳ衛星からの電波に含まれる信号に基づく演算により、車両の現在位置（緯度、経度、高度）を特定する。そして、地図データ４５を参照して入出力装置４６に対して入力された目的地に至るまでの推奨径路を生成し、ナビゲーション表示や音声案内を行なうように入出力装置４６を制御する。ナビゲーション制御用コンピューター４８が特定した車両の現在位置は、ＥＣＵ５０に出力される。
【００２８】
ＥＣＵ５０は、例えば、ＣＰＵ（Central Processing Unit）を中心としてＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等がバスを介して相互に接続されたコンピューターユニットであり、その他、ＨＤＤ（Hard Disc Drive）やＤＶＤ（Digital Versatile Disk）ドライブ、ＣＤ（Compact Disc）ドライブ、フラッシュメモリ等の記憶装置やＩ／Ｏポート、タイマー、カウンター等を備える。ＲＯＭには、ＣＰＵが実行するプログラムやデータが格納されている。また、ＥＣＵ５０は、ＲＯＭに記憶されたプログラムをＣＰＵが実行することにより機能する主要な機能ブロックとして、背景画像記憶制御部５２と、基準径路生成部５４と、不要画像削除部５６と、を備える。なお、これらの機能ブロックが明確に別のプログラムに基づくものである必要はなく、同一プログラムの中に各機能ブロックを実現する複数の部分が含まれていてもよい。
【００２９】
［背景画像記憶処理］
背景画像記憶制御部５２は、車載カメラ１０が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて背景画像情報２２として記憶装置２０に記憶させる。なお、「車両の移動径路と対応付けて記憶させる」とは、撮像画像と車両の現在位置とが対応付けられたデータセットを、撮像順に並べて記憶させることを意味する。また、「サンプリングされた各撮像タイミング」とは、車載カメラ１０が１秒間に数十回程度撮像する各撮像タイミングから、所定走行距離毎、或いは所定時間毎にサンプリングした撮像タイミングをいう。以下の説明では、車両が１［ｍ］走行する度に、車載カメラ１０が撮像した画像を抽出し、その画像が撮像されたタイミングについて、上記の判定を行なうものとする。車両の走行距離は、車速センサー３０の出力を積分すること、又は出力パルス数をカウントすることにより把握することができる。
【００３０】
［基準径路生成処理］
基準径路生成部５４は、上記撮像画像と移動径路が対応付けられたデータがある程度蓄積された所定のタイミングで、記憶装置２０に記憶された車両の移動径路（前述の如く、車両の現在位置が撮像順に並べられたものをいう）のうち類似する移動径路を抽出し、抽出した移動径路に基づいて基準径路を生成して基準径路情報２４として記憶手段２０に記憶させる。具体的には、複数の移動径路の平均を求めたり、高頻度に発生する移動径路を基準径路とする等の手法により、基準径路を生成する。また、サンプル数が十分でない場合や、特異な径路が出現した等の場合は、地図データ４５に含まれるリンク毎の形状（曲率やリンク長等）を参照して、基準径路を生成してもよい。
【００３１】
このようにして生成される基準径路は、その道路を走行した際に通過した標準的ないし平均的な径路をいい、特段の障害物回避行動等を行なわずに走行した径路を意味する。
【００３２】
［不要画像削除処理］
不要画像削除部５６は、背景画像情報２２において各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を背景画像情報２２から削除する。
【００３３】
より具体的には、各撮像画像に対応付けられている車両の移動径路（現在位置）が、基準径路記憶手段に記憶された基準径路と乖離していない場合に車両の移動径路が正常であると判定し、基準径路と乖離している場合に車両の移動径路が正常でないと判定する。
【００３４】
例えば、ある撮像タイミングにおいて基準径路との車線幅方向の乖離が所定値以下である場合に、その撮像タイミングにおいて車両の移動径路が基準径路から乖離していないと判定する（図３参照）。
【００３５】
また、ある撮像タイミングにおいてその前後の移動径路（例えば数［ｍ］前から数［ｍ］後までの車両の現在位置を抽出したもの）の、当該位置における基準径路との類似度を所定の評価量で評価して、車両の移動径路が基準径路から乖離しているか否かを判定してもよい（図４参照）。
【００３６】
これらの処理によって、車両が障害物の回避走行を行なった際等、特殊な径路を走行した際に撮像した画像は削除され、車両がその道路における標準的ないし平均的な径路を走行している過程で撮像された画像のみが背景画像情報２２として記憶装置２０に残されることとなる。従って、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。なお、背景画像の利用態様については後述する。
【００３７】
また、これに限らず、ヨーレートセンサーの出力及び車速から導出される車両の移動径路と、基準径路とを比較して判定を行なってもよい。すなわち、曲率が大きくない道路において湾曲した径路を走行した場合、その付近で障害物の回避、路側設備の利用等が行なわれたと判断し、その付近で撮像された撮像画像を背景画像から除外する。
【００３８】
また、同様の理由により、ステアリング操舵角センサーやブレーキ踏量センサー等、運転者の運転操作量を検出するセンサー類の出力に基づいて、車両の移動径路が基準径路と乖離しているか否かを判定するものとしてもよい。
【００３９】
本実施例の車両用背景画像収集装置１によれば、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、不要となった撮像画像を削除するため、記憶装置２０の使用領域を節約することができる。しかも、何度も繰り返し不要画像削除処理を行なうことで、背景画像として不適切な画像が混入する可能性を低減することができ、精度の向上を図ることができる。
【００４０】
＜第２実施例＞
以下、本発明の第２実施例に係る車両用背景画像収集装置２について説明する。本実施例の車両用背景画像収集装置２は、車両に搭載される装置であって、各撮像位置に関して障害物の位置等を検知するための基準画像となる背景画像を収集するための装置である。なお、これに限らず、本発明は所定の移動径路を周回移動する移動ロボット等に適用されてもよい。
【００４１】
［構成］
図５は、第２実施例に係る車両用背景画像収集装置２の全体構成の一例を示す図である。本実施例において、記憶装置２０の記憶媒体には、撮像画像情報２１、背景画像情報２２及び基準径路情報２４が記憶される。また、本実施例のＥＣＵ５０は、背景画像記憶制御部５２に代えて撮像画像記憶制御部５３を、不要画像削除部５６に代えて背景画像記憶制御部５７（第１実施例の背景画像記憶制御部５２とは機能が異なる）をそれぞれ備える点で第１実施例と異なる。
【００４２】
［撮像画像記憶処理］
撮像画像記憶制御部５３は、背景画像記憶制御部５２と同様の処理を行なうが、背景画像情報２２としてではなく、撮像画像情報２１として記憶装置２０の記憶媒体に記憶させる。
【００４３】
［基準径路生成処理］については第１実施例と同様であるため、説明を省略する。
【００４４】
［背景画像記憶処理］
本実施例における背景画像記憶制御部５７は、撮像画像情報２１において各撮像画像に対応付けられている車両の移動径路が基準径路情報２４に含まれる基準径路と乖離していない場合に、この車両の移動径路に付随する撮像画像を背景画像情報２２として記憶装置２０に記憶させる。なお、基準径路との乖離の定義については第１実施例において図３や図４に即して説明したものと同様であってよい。
【００４５】
また、本実施例では、背景画像記憶処理を行なう際に、背景画像として採用されなかった撮像画像を削除せず、撮像画像情報２１の一部として残存させる。
【００４６】
これらの処理によって、車両が障害物の回避走行を行なった際等、特殊な径路を走行した際に撮像した画像は背景画像として採用されないこととなり、車両がその道路における標準的ないし平均的な径路を走行している過程で撮像された画像のみが背景画像情報２２として記憶装置２０に記憶されることとなる。従って、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。なお、背景画像の利用態様については後述する。
【００４７】
また、第１実施例と同様、ヨーレートセンサーの出力及び車速から導出される車両の移動径路と、基準径路とを比較して判定を行なってもよい。すなわち、曲率が大きくない道路において湾曲した径路を走行した場合、その付近で障害物の回避、路側設備の利用等が行なわれたと判断し、その付近で撮像された撮像画像を背景画像から除外する。また、ステアリング操舵角センサーやブレーキ踏量センサー等、運転者の運転操作量を検出するセンサー類の出力に基づいて、車両の移動径路が基準径路と乖離しているか否かを判定するものとしてもよい。
【００４８】
本実施例の車両用背景画像収集装置２によれば、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、背景画像として採用されなかった撮像画像を削除せずに残存させるため、後に、採用されなかった撮像画像に対応する車両の移動径路が基準径路の一部とされたような場合に、当該撮像画像を背景画像として採用する途を残すことができる。
【００４９】
なお、背景画像記憶処理を行なうタイミングではなく、記憶装置２０の記憶容量の問題が生じた際等の所望のタイミングで、撮像画像情報２１を圧縮、一部削除等しても構わない。
【００５０】
＜背景画像の利用態様＞
以下、背景画像の利用態様の一例について述べる。背景画像は、ＳＯＢＥＬフィルター等を適用することにより、隣接画素との輝度差や画素値差が大きいエッジ点が抽出された背景エッジ画像に変換され、その中から道路区画線等の輪郭を示す一連のエッジ点が抽出される。そして、車載カメラ１０が車両の走行に応じて撮像する撮像画像も同様にエッジ画像に変換され、変換後のエッジ画像から道路区画線等の輪郭を示すエッジ点が削除されることにより、歩行者や車両等の障害物の輪郭を示すエッジ点が抽出されることとなる。
【００５１】
この抽出されたエッジ点で画成される画像上の位置領域を２次元平面上の位置に変換すると、障害物との距離や相対速度が算出可能となる。そして、算出された障害物との距離や相対速度を用いて、種々の衝突安全制御が行なわれる。
【００５２】
衝突安全制御は、例えば、障害物との距離や相対速度等に対して所定の閾値を適用することにより衝突可能性を判定し、その判定結果に応じて、音声や表示による警報制御、ブレーキペダルの操作量に対する制動力のブースト率を高める制御、操舵比を大きくする制御、シートベルトを自動的に巻き上げ、適切な力で乗員をシートに拘束する制御、自動的に制動力を出力する制御等を行なう。なお、実施例に係るＥＣＵ５０は、係る衝突安全制御を行なう制御装置に統合されてもよい。
【００５３】
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【産業上の利用可能性】
【００５４】
本発明は、自動車製造業や自動車部品製造業等に利用可能である。
【図面の簡単な説明】
【００５５】
【図１】第１実施例に係る車両用背景画像収集装置１の全体構成の一例を示す図である。
【図２】車載カメラ１０のハードウエア構成の一例を示す図である。
【図３】車両の移動径路が基準径路から乖離しているか否かを判定する様子を示す図である。
【図４】車両の移動径路が基準径路から乖離しているか否かを判定する他の様子を示す図である。
【図５】第２実施例に係る車両用背景画像収集装置２の全体構成の一例を示す図である。
【符号の説明】
【００５６】
１ 車両用背景画像収集装置
１０ 車載カメラ
１２ 撮像レンズ
１４ イメージセンサー
１６ 電子制御部
２０ 記憶装置
２１ 撮像画像情報
２２ 背景画像情報
２４ 基準径路情報
３０ 車速センサー
４０ ナビゲーション装置
４２ ＧＰＳ受信機
４４ 記憶装置
４５ 地図データ
４６ 入出力装置
４８ ナビゲーション制御用コンピューター
５０ ＥＣＵ
５２、５７ 背景画像記憶制御部
５３ 撮像画像記憶制御部
５４ 基準径路生成部
５６ 不要画像削除部
【技術分野】
【０００１】
本発明は、車両における障害物検知を行なう際の基準となる背景画像を収集する車両用背景画像収集装置に関する。
【背景技術】
【０００２】
従来、車載カメラやレーダー装置等において認識された障害物との衝突を回避するように、又は衝突時の衝撃を和らげるように種々の車両制御を行なう制御システムが、ＰＣＳ（Pre-crush Safety System）等の名称で知られている。
【０００３】
車載カメラを用いて障害物や道路の陥没等、車両が回避すべき物体を認識する際に困難を伴うのが、撮像画像の所定領域に存在する障害物等を、当該領域に当然に存在するもの（道路に描画された白線等）と判別して認識を行なうことである。係る判別のために、白線等以外に何も写っていない背景画像を予め用意し、撮像画像と比較すると好適である。
【０００４】
これに関連し、検知領域の画像を撮像する監視カメラと、その監視カメラにて撮像された画像データに基づいて検知領域内の車両の有無を検知する画像処理ユニットを備え、監視カメラにて順次撮像される画像データを濃淡投影処理にて画像処理し、現時点の投影処理データとその前の投影処理データとの差分値の最大値を求めるとともに、車両検出をしていないときの投影差分最大値の移動平均処理を行って背景データを求め、それら投影処理データの差分最大値と背景データに基づいて車両の有無を判定する走行車両検知システムについての発明が開示されている（例えば、特許文献１参照）。
【特許文献１】特開２００４−１８５５３７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
上記特許文献１には、監視車線において、車両を検知していないときの投影差分最大値に対して移動平均を求めることにより背景データを求める旨が記載されている（段落「００２８」）。しかしながら、当該システムは、固定カメラによって車両を検知することを想定したものであり、必ずしもそのまま車載装置に適用可能な技術ではない。車両の走行軌跡は、基本的に同一車線を走行している場合であっても障害物を回避したりする行動によってブレが生じるため、径路上の各地点における背景画像として用いるのに適さない画像を撮像する場合があるからである。
【０００６】
本発明はこのような課題を解決するためのものであり、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することが可能な車両用背景画像収集装置を提供することを、主たる目的とする。
【課題を解決するための手段】
【０００７】
上記目的を達成するための本発明の第１の態様は、
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる背景画像記憶制御手段と、
前記背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除する不要画像削除手段と、
を備える車両用背景画像収集装置である。
【０００８】
この本発明の第１の態様によれば、背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除するため、対応する車両の移動経路が正常であると判定された撮像画像のみが記憶手段に残されることとなる。従って、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、不要となった撮像画像を削除するため、記憶手段の使用領域を節約することができる。しかも、何度も繰り返し不要画像削除処理を行なうことで、背景画像として不適切な画像が混入する可能性を低減することができ、精度の向上を図ることができる。
【０００９】
本発明の第１の態様において、
前記不要画像削除手段は、前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、基準径路記憶手段に記憶された基準径路と乖離していない場合に該車両の移動径路が正常であると判定し、前記基準径路と乖離している場合に該車両の移動径路が正常でないと判定する手段であるものとしてもよい。
【００１０】
この場合、
前記記憶手段に記憶された車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段を備えるものとしてもよい。
【００１１】
更にこの場合、
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段である、
また、本発明の第１の態様において、
車両挙動を検出する車両挙動検出手段を備え、
前記不要画像削除手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段であるものとしてもよい。
【００１２】
また、本発明の第１の態様において、
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記不要画像削除手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路正常であるか否かを判定する手段であるものとしてもよい。
【００１３】
本発明の第２の態様は、
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる撮像画像記憶制御手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、前記基準径路記憶手段に記憶された基準径路と乖離していない場合に、該車両の移動径路に付随する撮像画像を背景画像として背景画像記憶手段に記憶させる背景画像記憶制御手段と、
を備え、前記撮像画像記憶制御が記憶手段に記憶させた情報を、前記背景画像記憶制御手段の処理に拘わらず残存させることを特徴とする、車両用背景画像収集装置である。
【００１４】
本発明の第２の態様によれば、各撮像画像に対応付けられている車両の移動径路が基準径路と乖離していない場合に、この車両の移動径路に対応する撮像画像を背景画像として背景画像記憶手段に記憶させるため、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、背景画像として採用されなかった撮像画像を削除せずに残存させるため、後に、採用されなかった撮像画像に対応する車両の移動径路が基準径路の一部とされたような場合に、当該撮像画像を背景画像として採用する途を残すことができる。
【００１５】
本発明の第２の態様において、
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段であるものとしてもよい。
【００１６】
また、本発明の第２の態様において、
車両挙動を検出する車両挙動検出手段を備え、
前記背景画像記憶制御手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段であるものとしてもよい。
【００１７】
また、本発明の第２の態様において、
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記背景画像記憶制御手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路が正常であるか否かを判定する手段であるものとしてもよい。
【発明の効果】
【００１８】
本発明によれば、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することが可能な車両用背景画像収集装置を提供することができる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明を実施するための最良の形態について、添付図面を参照しながら実施例を挙げて説明する。
【実施例】
【００２０】
＜第１実施例＞
以下、本発明の第１実施例に係る車両用背景画像収集装置１について説明する。本実施例の車両用背景画像収集装置１は、車両に搭載される装置であって、各撮像位置に関して障害物の位置等を検知するための基準画像となる背景画像を収集するための装置である。なお、これに限らず、本発明は所定の移動径路を周回移動する移動ロボット等に適用されてもよい。
【００２１】
［構成］
図１は、第１実施例に係る車両用背景画像収集装置１の全体構成の一例を示す図である。車両用背景画像収集装置１は、車載カメラ１０と、記憶装置２０と、車速センサー３０と、ナビゲーション装置４０と、ＥＣＵ（Electronic Control Unit）５０と、を備える。
【００２２】
車載カメラ１０は、例えば、ウインドシールド中央上部に配設されたＣＣＤ（Charge-Coupled Device）やＣＭＯＳ（Complementary Metal Oxide Semiconductor）等の撮像素子を利用したカメラであり、車両前方を撮像領域とし、数［ｍｓ］毎に繰り返し撮像を行なう。図２は、車載カメラ１０のハードウエア構成の一例を示す図である。カメラ１０は、例えば、撮像レンズ１２と、イメージセンサー１４と、電子制御部１６と、を備える。以下、カメラ２０がＣＣＤカメラであるものとして説明する。
【００２３】
イメージセンサー１４は、例えばインターライン型イメージセンサーであり、光電変換を行なう受光素子であるフォトダイオードと、これに対応するＣＣＤとをそれぞれ２次元平面状に配列し、フォトダイオードとＣＣＤの間にアナログスイッチとして機能するトランスファゲートを有する。各フォトダイオードの前側（撮像レンズ１２側）には、集光のためのマイクロレンズが取り付けられている。なお、こうした構造は、あくまでイメージセンサー１４の機能を簡易に説明するために模式的に例示したものであり、機能性向上等のための如何なる設計変更も許容される。また、インターライン型イメージセンサーに限らず、ＣＣＤ自体が受光素子として機能するフルフレームトランスファ型やフレームトランスファ型のイメージセンサーを用いてもよい。
【００２４】
電子制御部１６は、例えば、マイクロコンピューターや電子回路等が用いられ、イメージセンサー１４が有するトランスファゲートの開閉タイミングを制御することによりカメラ１０のシャッタースピードや撮像周期（例えば、１秒間に数十回程度）を調節する。そして、電子制御部１６は、イメージセンサー１４の出力回路から出力されるデータに対して所定のゲインによる増幅等を行なって、入力画像データとしてＥＣＵ５０に出力する。
【００２５】
記憶装置２０は、ＨＤＤ（Hard Disc Drive）やＤＶＤ（Digital Versatile Disk）ドライブ、ＣＤドライブ、フラッシュメモリ等の記憶装置、或いはこれらの組み合わせである。記憶装置２０の記憶媒体には、背景画像情報２２及び基準径路情報２４が記憶される。
【００２６】
車速センサー３０は、例えば、車両の各車輪に取り付けられた車輪速センサーとスキッドコントロールコンピューターからなり、車輪速センサーが出力する車輪速パルス信号をスキッドコントロールコンピューターが車速矩形波パルス信号（車速信号）に変換してＥＣＵ５０に出力する。なお、係る情報通信は、専用通信線を用いて行なわれてもよいが、複数の制御装置が情報を参照可能な多重通信線に情報が出力される態様であってもよい。
【００２７】
ナビゲーション装置４０は、例えば、ＧＰＳ（Global Positioning System）受信機４２と、地図データ４５を格納した記憶装置４４と、ディスプレイ装置や音声入出力装置を含む入出力装置４６と、ナビゲーション制御用コンピューター４８と、を備える。地図データ４５は、例えば交差点等を示すノードと、ノードを接続するリンクとにより道路形状を表現したものであり、各リンクに付随して車線数や道路曲率、道路幅員等の情報が記憶されている。ナビゲーション制御用コンピューター４８は、ＧＰＳ受信機４２が受信したＧＰＳ衛星からの電波に含まれる信号に基づく演算により、車両の現在位置（緯度、経度、高度）を特定する。そして、地図データ４５を参照して入出力装置４６に対して入力された目的地に至るまでの推奨径路を生成し、ナビゲーション表示や音声案内を行なうように入出力装置４６を制御する。ナビゲーション制御用コンピューター４８が特定した車両の現在位置は、ＥＣＵ５０に出力される。
【００２８】
ＥＣＵ５０は、例えば、ＣＰＵ（Central Processing Unit）を中心としてＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）等がバスを介して相互に接続されたコンピューターユニットであり、その他、ＨＤＤ（Hard Disc Drive）やＤＶＤ（Digital Versatile Disk）ドライブ、ＣＤ（Compact Disc）ドライブ、フラッシュメモリ等の記憶装置やＩ／Ｏポート、タイマー、カウンター等を備える。ＲＯＭには、ＣＰＵが実行するプログラムやデータが格納されている。また、ＥＣＵ５０は、ＲＯＭに記憶されたプログラムをＣＰＵが実行することにより機能する主要な機能ブロックとして、背景画像記憶制御部５２と、基準径路生成部５４と、不要画像削除部５６と、を備える。なお、これらの機能ブロックが明確に別のプログラムに基づくものである必要はなく、同一プログラムの中に各機能ブロックを実現する複数の部分が含まれていてもよい。
【００２９】
［背景画像記憶処理］
背景画像記憶制御部５２は、車載カメラ１０が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて背景画像情報２２として記憶装置２０に記憶させる。なお、「車両の移動径路と対応付けて記憶させる」とは、撮像画像と車両の現在位置とが対応付けられたデータセットを、撮像順に並べて記憶させることを意味する。また、「サンプリングされた各撮像タイミング」とは、車載カメラ１０が１秒間に数十回程度撮像する各撮像タイミングから、所定走行距離毎、或いは所定時間毎にサンプリングした撮像タイミングをいう。以下の説明では、車両が１［ｍ］走行する度に、車載カメラ１０が撮像した画像を抽出し、その画像が撮像されたタイミングについて、上記の判定を行なうものとする。車両の走行距離は、車速センサー３０の出力を積分すること、又は出力パルス数をカウントすることにより把握することができる。
【００３０】
［基準径路生成処理］
基準径路生成部５４は、上記撮像画像と移動径路が対応付けられたデータがある程度蓄積された所定のタイミングで、記憶装置２０に記憶された車両の移動径路（前述の如く、車両の現在位置が撮像順に並べられたものをいう）のうち類似する移動径路を抽出し、抽出した移動径路に基づいて基準径路を生成して基準径路情報２４として記憶手段２０に記憶させる。具体的には、複数の移動径路の平均を求めたり、高頻度に発生する移動径路を基準径路とする等の手法により、基準径路を生成する。また、サンプル数が十分でない場合や、特異な径路が出現した等の場合は、地図データ４５に含まれるリンク毎の形状（曲率やリンク長等）を参照して、基準径路を生成してもよい。
【００３１】
このようにして生成される基準径路は、その道路を走行した際に通過した標準的ないし平均的な径路をいい、特段の障害物回避行動等を行なわずに走行した径路を意味する。
【００３２】
［不要画像削除処理］
不要画像削除部５６は、背景画像情報２２において各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を背景画像情報２２から削除する。
【００３３】
より具体的には、各撮像画像に対応付けられている車両の移動径路（現在位置）が、基準径路記憶手段に記憶された基準径路と乖離していない場合に車両の移動径路が正常であると判定し、基準径路と乖離している場合に車両の移動径路が正常でないと判定する。
【００３４】
例えば、ある撮像タイミングにおいて基準径路との車線幅方向の乖離が所定値以下である場合に、その撮像タイミングにおいて車両の移動径路が基準径路から乖離していないと判定する（図３参照）。
【００３５】
また、ある撮像タイミングにおいてその前後の移動径路（例えば数［ｍ］前から数［ｍ］後までの車両の現在位置を抽出したもの）の、当該位置における基準径路との類似度を所定の評価量で評価して、車両の移動径路が基準径路から乖離しているか否かを判定してもよい（図４参照）。
【００３６】
これらの処理によって、車両が障害物の回避走行を行なった際等、特殊な径路を走行した際に撮像した画像は削除され、車両がその道路における標準的ないし平均的な径路を走行している過程で撮像された画像のみが背景画像情報２２として記憶装置２０に残されることとなる。従って、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。なお、背景画像の利用態様については後述する。
【００３７】
また、これに限らず、ヨーレートセンサーの出力及び車速から導出される車両の移動径路と、基準径路とを比較して判定を行なってもよい。すなわち、曲率が大きくない道路において湾曲した径路を走行した場合、その付近で障害物の回避、路側設備の利用等が行なわれたと判断し、その付近で撮像された撮像画像を背景画像から除外する。
【００３８】
また、同様の理由により、ステアリング操舵角センサーやブレーキ踏量センサー等、運転者の運転操作量を検出するセンサー類の出力に基づいて、車両の移動径路が基準径路と乖離しているか否かを判定するものとしてもよい。
【００３９】
本実施例の車両用背景画像収集装置１によれば、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、不要となった撮像画像を削除するため、記憶装置２０の使用領域を節約することができる。しかも、何度も繰り返し不要画像削除処理を行なうことで、背景画像として不適切な画像が混入する可能性を低減することができ、精度の向上を図ることができる。
【００４０】
＜第２実施例＞
以下、本発明の第２実施例に係る車両用背景画像収集装置２について説明する。本実施例の車両用背景画像収集装置２は、車両に搭載される装置であって、各撮像位置に関して障害物の位置等を検知するための基準画像となる背景画像を収集するための装置である。なお、これに限らず、本発明は所定の移動径路を周回移動する移動ロボット等に適用されてもよい。
【００４１】
［構成］
図５は、第２実施例に係る車両用背景画像収集装置２の全体構成の一例を示す図である。本実施例において、記憶装置２０の記憶媒体には、撮像画像情報２１、背景画像情報２２及び基準径路情報２４が記憶される。また、本実施例のＥＣＵ５０は、背景画像記憶制御部５２に代えて撮像画像記憶制御部５３を、不要画像削除部５６に代えて背景画像記憶制御部５７（第１実施例の背景画像記憶制御部５２とは機能が異なる）をそれぞれ備える点で第１実施例と異なる。
【００４２】
［撮像画像記憶処理］
撮像画像記憶制御部５３は、背景画像記憶制御部５２と同様の処理を行なうが、背景画像情報２２としてではなく、撮像画像情報２１として記憶装置２０の記憶媒体に記憶させる。
【００４３】
［基準径路生成処理］については第１実施例と同様であるため、説明を省略する。
【００４４】
［背景画像記憶処理］
本実施例における背景画像記憶制御部５７は、撮像画像情報２１において各撮像画像に対応付けられている車両の移動径路が基準径路情報２４に含まれる基準径路と乖離していない場合に、この車両の移動径路に付随する撮像画像を背景画像情報２２として記憶装置２０に記憶させる。なお、基準径路との乖離の定義については第１実施例において図３や図４に即して説明したものと同様であってよい。
【００４５】
また、本実施例では、背景画像記憶処理を行なう際に、背景画像として採用されなかった撮像画像を削除せず、撮像画像情報２１の一部として残存させる。
【００４６】
これらの処理によって、車両が障害物の回避走行を行なった際等、特殊な径路を走行した際に撮像した画像は背景画像として採用されないこととなり、車両がその道路における標準的ないし平均的な径路を走行している過程で撮像された画像のみが背景画像情報２２として記憶装置２０に記憶されることとなる。従って、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。なお、背景画像の利用態様については後述する。
【００４７】
また、第１実施例と同様、ヨーレートセンサーの出力及び車速から導出される車両の移動径路と、基準径路とを比較して判定を行なってもよい。すなわち、曲率が大きくない道路において湾曲した径路を走行した場合、その付近で障害物の回避、路側設備の利用等が行なわれたと判断し、その付近で撮像された撮像画像を背景画像から除外する。また、ステアリング操舵角センサーやブレーキ踏量センサー等、運転者の運転操作量を検出するセンサー類の出力に基づいて、車両の移動径路が基準径路と乖離しているか否かを判定するものとしてもよい。
【００４８】
本実施例の車両用背景画像収集装置２によれば、車両における障害物検知を行なう際の基準となる背景画像を適切に収集することができる。また、背景画像として採用されなかった撮像画像を削除せずに残存させるため、後に、採用されなかった撮像画像に対応する車両の移動径路が基準径路の一部とされたような場合に、当該撮像画像を背景画像として採用する途を残すことができる。
【００４９】
なお、背景画像記憶処理を行なうタイミングではなく、記憶装置２０の記憶容量の問題が生じた際等の所望のタイミングで、撮像画像情報２１を圧縮、一部削除等しても構わない。
【００５０】
＜背景画像の利用態様＞
以下、背景画像の利用態様の一例について述べる。背景画像は、ＳＯＢＥＬフィルター等を適用することにより、隣接画素との輝度差や画素値差が大きいエッジ点が抽出された背景エッジ画像に変換され、その中から道路区画線等の輪郭を示す一連のエッジ点が抽出される。そして、車載カメラ１０が車両の走行に応じて撮像する撮像画像も同様にエッジ画像に変換され、変換後のエッジ画像から道路区画線等の輪郭を示すエッジ点が削除されることにより、歩行者や車両等の障害物の輪郭を示すエッジ点が抽出されることとなる。
【００５１】
この抽出されたエッジ点で画成される画像上の位置領域を２次元平面上の位置に変換すると、障害物との距離や相対速度が算出可能となる。そして、算出された障害物との距離や相対速度を用いて、種々の衝突安全制御が行なわれる。
【００５２】
衝突安全制御は、例えば、障害物との距離や相対速度等に対して所定の閾値を適用することにより衝突可能性を判定し、その判定結果に応じて、音声や表示による警報制御、ブレーキペダルの操作量に対する制動力のブースト率を高める制御、操舵比を大きくする制御、シートベルトを自動的に巻き上げ、適切な力で乗員をシートに拘束する制御、自動的に制動力を出力する制御等を行なう。なお、実施例に係るＥＣＵ５０は、係る衝突安全制御を行なう制御装置に統合されてもよい。
【００５３】
以上、本発明を実施するための最良の形態について実施例を用いて説明したが、本発明はこうした実施例に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【産業上の利用可能性】
【００５４】
本発明は、自動車製造業や自動車部品製造業等に利用可能である。
【図面の簡単な説明】
【００５５】
【図１】第１実施例に係る車両用背景画像収集装置１の全体構成の一例を示す図である。
【図２】車載カメラ１０のハードウエア構成の一例を示す図である。
【図３】車両の移動径路が基準径路から乖離しているか否かを判定する様子を示す図である。
【図４】車両の移動径路が基準径路から乖離しているか否かを判定する他の様子を示す図である。
【図５】第２実施例に係る車両用背景画像収集装置２の全体構成の一例を示す図である。
【符号の説明】
【００５６】
１ 車両用背景画像収集装置
１０ 車載カメラ
１２ 撮像レンズ
１４ イメージセンサー
１６ 電子制御部
２０ 記憶装置
２１ 撮像画像情報
２２ 背景画像情報
２４ 基準径路情報
３０ 車速センサー
４０ ナビゲーション装置
４２ ＧＰＳ受信機
４４ 記憶装置
４５ 地図データ
４６ 入出力装置
４８ ナビゲーション制御用コンピューター
５０ ＥＣＵ
５２、５７ 背景画像記憶制御部
５３ 撮像画像記憶制御部
５４ 基準径路生成部
５６ 不要画像削除部
【特許請求の範囲】
【請求項１】
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる背景画像記憶制御手段と、
前記背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除する不要画像削除手段と、
を備える車両用背景画像収集装置。
【請求項２】
前記不要画像削除手段は、前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、基準径路記憶手段に記憶された基準径路と乖離していない場合に該車両の移動径路が正常であると判定し、前記基準径路と乖離している場合に該車両の移動径路が正常でないと判定する手段である、
請求項１に記載の車両用背景画像収集装置。
【請求項３】
前記記憶手段に記憶された車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段を備える、
請求項２に記載の車両用背景画像収集装置。
【請求項４】
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段である、
請求項３に記載の車両用背景画像収集装置。
【請求項５】
車両挙動を検出する車両挙動検出手段を備え、
前記不要画像削除手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段である、
請求項１ないし４のいずれか１項に記載の車両用背景画像収集装置。
【請求項６】
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記不要画像削除手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路正常であるか否かを判定する手段である、
請求項１ないし５のいずれか１項に記載の車両用背景画像収集装置。
【請求項７】
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる撮像画像記憶制御手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、前記基準径路記憶手段に記憶された基準径路と乖離していない場合に、該車両の移動径路に対応する撮像画像を背景画像として背景画像記憶手段に記憶させる背景画像記憶制御手段と、
を備え、前記撮像画像記憶制御が記憶手段に記憶させた情報を、前記背景画像記憶制御手段の処理に拘わらず残存させることを特徴とする、車両用背景画像収集装置。
【請求項８】
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段である、
請求項７に記載の車両用背景画像収集装置。
【請求項９】
車両挙動を検出する車両挙動検出手段を備え、
前記背景画像記憶制御手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段である、
請求項７又は８に記載の車両用背景画像収集装置。
【請求項１０】
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記背景画像記憶制御手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路が正常であるか否かを判定する手段である、
請求項７ないし９のいずれか１項に記載の車両用背景画像収集装置。
【請求項１】
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる背景画像記憶制御手段と、
前記背景画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が正常であるか否かを判定し、正常でないと判定した場合に当該撮像画像を前記記憶手段から削除する不要画像削除手段と、
を備える車両用背景画像収集装置。
【請求項２】
前記不要画像削除手段は、前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、基準径路記憶手段に記憶された基準径路と乖離していない場合に該車両の移動径路が正常であると判定し、前記基準径路と乖離している場合に該車両の移動径路が正常でないと判定する手段である、
請求項１に記載の車両用背景画像収集装置。
【請求項３】
前記記憶手段に記憶された車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段を備える、
請求項２に記載の車両用背景画像収集装置。
【請求項４】
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段である、
請求項３に記載の車両用背景画像収集装置。
【請求項５】
車両挙動を検出する車両挙動検出手段を備え、
前記不要画像削除手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段である、
請求項１ないし４のいずれか１項に記載の車両用背景画像収集装置。
【請求項６】
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記不要画像削除手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路正常であるか否かを判定する手段である、
請求項１ないし５のいずれか１項に記載の車両用背景画像収集装置。
【請求項７】
車両周辺を定期的に撮像する撮像手段と、
前記撮像手段が撮像した各撮像タイミング又はサンプリングされた各撮像タイミングについて、撮像画像を車両の移動径路と対応付けて記憶手段に記憶させる撮像画像記憶制御手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路のうち類似する移動径路を抽出し、該抽出した移動径路に基づいて前記基準径路を生成して前記基準径路記憶手段に記憶させる基準径路生成手段と、
前記撮像画像記憶手段に記憶された各撮像画像に対応付けられている車両の移動径路が、前記基準径路記憶手段に記憶された基準径路と乖離していない場合に、該車両の移動径路に対応する撮像画像を背景画像として背景画像記憶手段に記憶させる背景画像記憶制御手段と、
を備え、前記撮像画像記憶制御が記憶手段に記憶させた情報を、前記背景画像記憶制御手段の処理に拘わらず残存させることを特徴とする、車両用背景画像収集装置。
【請求項８】
前記基準径路生成手段は、道路形状記憶手段に記憶された道路形状を参照して前記基準径路を生成する手段である、
請求項７に記載の車両用背景画像収集装置。
【請求項９】
車両挙動を検出する車両挙動検出手段を備え、
前記背景画像記憶制御手段は、前記車両挙動検出手段により検出された車両挙動に基づいて、車両の移動径路が正常であるか否かを判定する手段である、
請求項７又は８に記載の車両用背景画像収集装置。
【請求項１０】
運転者の運転操作量を検出する運転操作量検出手段を備え、
前記背景画像記憶制御手段は、前記運転操作量検出手段により検出された運転操作量に基づいて、車両の移動径路が正常であるか否かを判定する手段である、
請求項７ないし９のいずれか１項に記載の車両用背景画像収集装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２００９−２１０４０１（Ｐ２００９−２１０４０１Ａ）
【公開日】平成２１年９月１７日（２００９．９．１７）
【国際特許分類】
【出願番号】特願２００８−５３２７３（Ｐ２００８−５３２７３）
【出願日】平成２０年３月４日（２００８．３．４）
【出願人】（０００００３２０７）トヨタ自動車株式会社 (59,920)
【Ｆターム（参考）】
【公開日】平成２１年９月１７日（２００９．９．１７）
【国際特許分類】
【出願日】平成２０年３月４日（２００８．３．４）
【出願人】（０００００３２０７）トヨタ自動車株式会社 (59,920)
【Ｆターム（参考）】
[ Back to top ]