車両周辺監視装置
【課題】微分フィルタによるフィルタ処理を行った場合に生じ得る弊害を抑制した車両周辺監視装置を提供する。
【解決手段】赤外線カメラ１により撮像された原画像Ｉm1に対して、微分フィルタによるフィルタ処理を施するフィルタ処理部１３と、外気温Ｔsが温度範囲Ｔw内であるとき及び原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th以下であるときは、原画像Ｉm1に対してフィルタ処理部１３によりフィルタ処理を実施して、フィルタ処理後画像Ｉm2から歩行者の画像を検知し、外気温Ｔsが温度範囲Ｔwから外れ且つ原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_thを超えているときには、フィルタ処理を禁止して原画像Ｉm1から歩行者の画像を検知する対象物検知部１４とを備える。
【解決手段】赤外線カメラ１により撮像された原画像Ｉm1に対して、微分フィルタによるフィルタ処理を施するフィルタ処理部１３と、外気温Ｔsが温度範囲Ｔw内であるとき及び原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th以下であるときは、原画像Ｉm1に対してフィルタ処理部１３によりフィルタ処理を実施して、フィルタ処理後画像Ｉm2から歩行者の画像を検知し、外気温Ｔsが温度範囲Ｔwから外れ且つ原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_thを超えているときには、フィルタ処理を禁止して原画像Ｉm1から歩行者の画像を検知する対象物検知部１４とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両に取り付けられた赤外線カメラの撮像画像により、車両周辺を監視する車両周辺監視装置に関する。
【背景技術】
【０００２】
従来より、赤外線カメラにより車両の周辺を撮像し、その撮像画像から歩行者等の監視対象物を検知して運転者に報知するようにした車両周辺監視装置が知られている（例えば、特許文献１参照）。
【０００３】
そして、撮像画像からの監視対象物の画像の抽出を容易にするために、温度を輝度で表した撮像画像（原画像）に対して、微分フィルタによるフィルタ処理を実施することにより、監視対象物の画像とその背景画像との境界エッジを強調した画像を生成し、このように境界エッジを強調した画像から監視対象物の画像を抽出する処理が行われている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００３−２８４０５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本願発明者らは、上述した微分フィルタによるフィルタ処理を行った場合に、以下の弊害が生じて、歩行者等の検知が却って困難になる場合があることを知見した。
（１）原画像では温度が異なる物体として撮像された画像（例えば、歩行者と電柱の画像）とその背景の画像との境界エッジが、同じように強調されて、フィルタ処理後画像での輝度差が減少する。
（２）原画像で高輝度であった画像（例えば、歩行者の画像）について、フィルタ処理後画像では、この画像の周囲の輝度が不自然に低下する。
【０００６】
そこで、本発明は、微分フィルタによるフィルタ処理を行うことにより、監視対象物の検知が却って困難になることを抑制した車両周辺監視装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は上記目的を達成するためになされたものであり、車両に搭載された赤外線カメラにより撮像されたグレースケール画像に基づいて、車両周辺を監視する車両周辺監視装置に関する。
【０００８】
そして、前記赤外線カメラにより撮像されたグレースケールの原画像に対して、微分フィルタによるフィルタ処理を施するフィルタ処理部と、前記原画像が所定の低コントラスト状態であるか否かを判断し、前記原画像が低コントラスト状態であるときは、前記原画像に対して前記フィルタ処理部により前記フィルタ処理を実施して、フィルタ処理後画像から監視対象物の画像を検知し、前記原画像が低コントラスト状態でないときには、前記原画像に対する前記フィルタ処理の実施を禁止して、前記原画像から監視対象物の画像を検知する対象物検知部とを備えたことを特徴とする。
【０００９】
かかる本発明によれば、前記対象物検知部は、前記原画像が低コントラスト状態であるときに限定して、前記原画像に対する前記フィルタ処理部によるフィルタ処理を実施する。そして、これにより、前記原画像が高コントラスト状態であるときに、前記原画像に対して微分フィルタによるフィルタ処理が実施されて、高コントラストな画像のエッジがさらに強調され、監視対象物の検知が却って困難になることを抑制することができる。
【００１０】
なお、前記原画像は前記フィルタ処理部によりフィルタ処理が実施されていない撮像画像を意味し、ノイズ除去処理等がなされた撮像画像も含むものである。
【００１１】
また、外気温を検出する外気温センサを備え、前記対象物検知部は、前記外気温センサの検出温度が、生体の温度を想定した温度範囲内であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする。
【００１２】
かかる本発明によれば、前記外気温センサの検出温度が生体の温度を想定した前記温度範囲内であって、前記原画像において生体の画像とその周囲画像との輝度差が小さいときに限って、前記フィルタ処理を実施して、エッジ強調により監視対象物である生体の画像の検知を容易にすることができる。
【００１３】
また、前記対象物検知部は、前記原画像の輝度分散が所定値以下であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする。
【００１４】
かかる本発明によれば、前記原画像の輝度分散が所定値以下であって、前記原画像の全体的な輝度差が小さいときに限って、前記フィルタ処理を実施して、エッジ強調により監視対象物の画像の検知を容易にすることができる。
【図面の簡単な説明】
【００１５】
【図１】車両周辺監視装置の構成図。
【図２】微分フィルタによるフィルタ処理の効果の説明図。
【図３】微分フィルタによるフィルタ処理の弊害の説明図。
【図４】微分フィルタによるフィルタ処理を実施する外気温の範囲の説明図。
【図５】車両周辺監視装置の作動フローチャート。
【発明を実施するための形態】
【００１６】
本発明の実施の形態について、図１〜図５を参照して説明する。図１を参照して、本実施の形態の車両周辺監視装置は車両に搭載して使用され、赤外線の入射レベルにより検出した被撮像物の温度を輝度信号に変換して出力する赤外線カメラ１と、画像処理ユニット１０と、外気温を検出する外気温センサ２と、表示部３と、スピーカ４とにより構成されている。
【００１７】
画像処理ユニット１０は、ＣＰＵ、メモリ等により構成された電子ユニットであり、赤外線カメラ１から出力される映像信号（被撮像物の温度を輝度に変換した信号）を、画像メモリ１２に書込む画像入力回路１１と、画像メモリ１２に書込まれた画像（原画像Ｉm1）に対して、微分フィルタによるフィルタ処理を実施するフィルタ処理部１３と、原画像Ｉm1又はフィルタ処理後画像Ｉm2から監視対象物（歩行者等）の画像を検知する対象物検知部１４とを備えている。
【００１８】
なお、ＣＰＵは、メモリに保持された車両周辺監視用の制御プログラムを実行することによって、フィルタ処理部１３及び対象物検知部１４として機能する。
【００１９】
次に、図２（ａ）及び図２（ｂ）を参照して、フィルタ処理部１３により、微分フィルタによるフィルタ処理を実施することの効果について説明する。図２（ａ）は、輝度が異なる画像部分Ａ，Ｂを含む原画像Ｉm1の、垂直座標がｙ1である画素の輝度プロファイルを示したものである。図２（ａ）原画像Ｉm1では、画像部分Ａ，Ｂ間の輝度差がＬw1になっている。
【００２０】
また、図２（ｂ）は、図２（ａ）に示した原画像Ｉm1に対して、フィルタ処理部１３により、微分フィルタによるフィルタ処理を実施したフィルタ処理後画像Ｉm2の、垂直座標がｙ1である画素の輝度プロファイルを示したものである。図２（ｂ）に示したように、微分フィルタによるフィルタ処理を施すことによって、原画像Ｉm1の画像部分Ｂとその周囲部分（背景部分）Ａとの境界エッジが強調され、画像部分Ｂ'とその周囲部分Ａとの輝度差がＬw2に拡大している。このように、画像部分Ｂとその周囲部分Ａとの輝度差を拡大（Ｌw1→Ｌw2）することによって、画像部分Ｂの抽出を容易にすることができる。
【００２１】
しかしながら、原画像Ｉm1の輝度プロファイルが、図３（ａ）に示したように、原画像Ｉm1の画像部分Ａ，Ｂとその周囲部分との輝度差が同程度であるときには、原画像Ｉm1に微分フィルタによるフィルタ処理を実施したときに、フィルタ処理後画像Ｉm2の輝度プロファイルが図３（ｂ）に示したような態様となって、画像部分Ａ，Ｂの輝度差が無くなる場合がある。そして、この場合には、フィルタ処理後画像Ｉm2において、画像部分Ａ，Ｂを識別することが却って困難になるという不都合がある。
【００２２】
そこで、対象物検知部１４は、微分フィルタによるフィルタ処理を実施することによるエッジ強調の効果が有効である場合に限って、原画像Ｉm1に微分フィルタによるフィルタ処理を実施するようにし、これにより、上記不都合が生じることを抑制している。
【００２３】
以下、図５に示したフローチャートに従って、対象物検知部１４により、歩行者を監視対象物として検知する場合の処理について説明する。
【００２４】
図５のＳＴＥＰ１で、対象物検知部１４は、外気温センサ２により検出される外気温Ｔsのデータを取得し、続くＳＴＥＰ２で、外気温Ｔsが温度範囲Ｔw内であるか否かを判断する。
【００２５】
ここで、温度範囲Ｔwは、図４に示したように、歩行者の温度付近を想定した例えば３１℃〜３９℃の範囲に設定される。図４は、縦軸を赤外線カメラ１の出力（被撮像物の温度に応じた輝度）に設定し、横軸を外気温に設定して、歩行者（図中ａ）及び人工構造物（図中ｂ、例えばコンクリート電柱）の画像の輝度を示したものである。
【００２６】
図４から、歩行者の画像の輝度は外気温が変化しても殆ど変化しないが、人工構造物の画像の輝度は外気温に比例して変化していることがわかる。なお、樹木の画像の輝度も、人口構造物と同様に外気温に比例して変化する。
【００２７】
そして、外気温Ｔsが温度範囲Ｔwから外れているとき（Ｔs＜３１℃、３９℃＜Ｔs）、すなわち、歩行者と人工構造物及び樹木（以下、人工構造物等という）との温度差が大きいときは、原画像Ｉm1における歩行者の画像と人工構造物等の画像との輝度差が大きくなるため、両者の識別は容易である。そのため、原画像Ｉm1に対して、微分フィルタによるフィルタ処理を実施してエッジ強調を行う必要性は低い。
【００２８】
それに対して、外気温Ｔsが温度範囲Ｔw内であるとき（３１℃≦Ｔs≦３９℃）、すなわち、歩行者と人工構造物等との温度差が小さいときには、原画像Ｉm1における歩行者の画像と人工構造物等の画像及び背景画像との輝度差が小さくなるため、歩行者の画像の検知が困難になる。そのため、原画像Ｉm1に対して、微分フィルタによるフィルタ処理を実施して、歩行者の画像のエッジを強調することで、歩行者の画像を背景から抽出し易くすることが有効である。
【００２９】
そこで、対象物検知部１４は、ＳＴＥＰ２で外気温Ｔsが温度範囲Ｔw内であったときはＳＴＥＰ１０に分岐し、フィルタ処理部１３により、微分フィルタによるフィルタ処理を実施する。そして、次のＳＴＥＰ１１で、フィルタ処理後画像Ｉm2から歩行者の画像を探知し、車両と接触する可能性がある歩行者を検知したときには、表示部３への表示及びスピーカ４による音声出力によって歩行者の存在を運転者に報知し、ＳＴＥＰ６に進んで処理を終了する。
【００３０】
一方、ＳＴＥＰ２で外気温Ｔsが温度範囲Ｔw外であったときにはＳＴＥＰ３に進み、対象物検知部１４は、原画像Ｉm1の輝度分散Ｌvを算出する。ここで、原画像Ｉm1の輝度分散Ｌvが小さいほど、原画像Ｉm1は輝度変化が少ない低コントラストの画像になっていると推定される。そして、この場合には、原画像Ｉm1に微分フィルタによるフィルタ処理を実施して、歩行者の画像とその背景画像との境界エッジを強調することにより、歩行者の画像部分の抽出が容易になることが期待できる。
【００３１】
そこで、対象物検知部１４は、ＳＴＥＰ４で原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th（実験等により決定される）以下であるか否かを判断する。そして、原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th以下であるときはＳＴＥＰ１０に分岐し、対象物検知部１４は上述したＳＴＥＰ１０〜ＳＴＥＰ１１の処理により、フィルタ処理後画像Ｉm2から歩行者の画像を探索する。
【００３２】
また、ＳＴＥＰ４で原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_thを超えているときには、ＳＴＥＰ５に進み、対象物検知部１４は、フィルタ処理部１３によるフィルタ処理を禁止して、原画像Ｉm1から歩行者の画像を探知する。そして、対象物検知部１４は、自車両と接触する可能性がある歩行者を検知したときには、表示部３への表示及びスピーカ４による音声出力によって歩行者の存在を運転者に報知し、ＳＴＥＰ６に進んで処理を終了する。
【００３３】
なお、ＳＴＥＰ２における外気温Ｔsが温度範囲Ｔw内であるか否かの判断、及び、ＳＴＥＰ４における原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th以下であるか否かの判断は、本発明の原画像が所定の低コントラスト状態であるか否かの判断に相当する。
【００３４】
また、本実施の形態では、外気温及び原画像の輝度分散という二つの要素により、フィルタ処理部１３によるフィルタ処理を実施するか否かを判断したが、いずれか一方の要素のみによって、フィルタ処理部１３によるフィルタ処理を実施するか否かを判断するようにしてもよい。また、他の要素により原画像が低コントラスト状態であるか否かを判断して、フィルタ処理部１３によるフィルタ処理を実施するか否かを判断してもよい。
【００３５】
また、原画像Ｉm1による監視対象物の検知とフィルタ処理後画像Ｉm2による監視対象物の検知を並行して行い、各検知の結果を外気温や画像のコントラスト等に応じた重み付けをして用いるようにしてもよい。
【００３６】
また、外気温及び輝度分散の他に、所定時間内における原画像Ｉm1中の生体の画像と想定される高輝度部の数又は割合の変化度合いに応じて、フィルタ処理部１３によるフィルタ処理を実施するか否かを切換えるようにしてもよい。例えば、所定時間内での高輝度部の数又は割合が減少したときには、撮像画像のコントラストの低下等が生じる可能性があるため、フィルタ処理部１３によるフィルタ処理を実施してフィルタ処理後画像から監視対象物を検知することが有効である。
【符号の説明】
【００３７】
１…赤外線カメラ、２…外気温センサ、３…表示部、４…スピーカ、１０…画像処理ユニット、１１…画像入力回路、１２…画像メモリ、１３…フィルタ処理部、１４…対処物検知部。
【技術分野】
【０００１】
本発明は、車両に取り付けられた赤外線カメラの撮像画像により、車両周辺を監視する車両周辺監視装置に関する。
【背景技術】
【０００２】
従来より、赤外線カメラにより車両の周辺を撮像し、その撮像画像から歩行者等の監視対象物を検知して運転者に報知するようにした車両周辺監視装置が知られている（例えば、特許文献１参照）。
【０００３】
そして、撮像画像からの監視対象物の画像の抽出を容易にするために、温度を輝度で表した撮像画像（原画像）に対して、微分フィルタによるフィルタ処理を実施することにより、監視対象物の画像とその背景画像との境界エッジを強調した画像を生成し、このように境界エッジを強調した画像から監視対象物の画像を抽出する処理が行われている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００３−２８４０５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本願発明者らは、上述した微分フィルタによるフィルタ処理を行った場合に、以下の弊害が生じて、歩行者等の検知が却って困難になる場合があることを知見した。
（１）原画像では温度が異なる物体として撮像された画像（例えば、歩行者と電柱の画像）とその背景の画像との境界エッジが、同じように強調されて、フィルタ処理後画像での輝度差が減少する。
（２）原画像で高輝度であった画像（例えば、歩行者の画像）について、フィルタ処理後画像では、この画像の周囲の輝度が不自然に低下する。
【０００６】
そこで、本発明は、微分フィルタによるフィルタ処理を行うことにより、監視対象物の検知が却って困難になることを抑制した車両周辺監視装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明は上記目的を達成するためになされたものであり、車両に搭載された赤外線カメラにより撮像されたグレースケール画像に基づいて、車両周辺を監視する車両周辺監視装置に関する。
【０００８】
そして、前記赤外線カメラにより撮像されたグレースケールの原画像に対して、微分フィルタによるフィルタ処理を施するフィルタ処理部と、前記原画像が所定の低コントラスト状態であるか否かを判断し、前記原画像が低コントラスト状態であるときは、前記原画像に対して前記フィルタ処理部により前記フィルタ処理を実施して、フィルタ処理後画像から監視対象物の画像を検知し、前記原画像が低コントラスト状態でないときには、前記原画像に対する前記フィルタ処理の実施を禁止して、前記原画像から監視対象物の画像を検知する対象物検知部とを備えたことを特徴とする。
【０００９】
かかる本発明によれば、前記対象物検知部は、前記原画像が低コントラスト状態であるときに限定して、前記原画像に対する前記フィルタ処理部によるフィルタ処理を実施する。そして、これにより、前記原画像が高コントラスト状態であるときに、前記原画像に対して微分フィルタによるフィルタ処理が実施されて、高コントラストな画像のエッジがさらに強調され、監視対象物の検知が却って困難になることを抑制することができる。
【００１０】
なお、前記原画像は前記フィルタ処理部によりフィルタ処理が実施されていない撮像画像を意味し、ノイズ除去処理等がなされた撮像画像も含むものである。
【００１１】
また、外気温を検出する外気温センサを備え、前記対象物検知部は、前記外気温センサの検出温度が、生体の温度を想定した温度範囲内であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする。
【００１２】
かかる本発明によれば、前記外気温センサの検出温度が生体の温度を想定した前記温度範囲内であって、前記原画像において生体の画像とその周囲画像との輝度差が小さいときに限って、前記フィルタ処理を実施して、エッジ強調により監視対象物である生体の画像の検知を容易にすることができる。
【００１３】
また、前記対象物検知部は、前記原画像の輝度分散が所定値以下であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする。
【００１４】
かかる本発明によれば、前記原画像の輝度分散が所定値以下であって、前記原画像の全体的な輝度差が小さいときに限って、前記フィルタ処理を実施して、エッジ強調により監視対象物の画像の検知を容易にすることができる。
【図面の簡単な説明】
【００１５】
【図１】車両周辺監視装置の構成図。
【図２】微分フィルタによるフィルタ処理の効果の説明図。
【図３】微分フィルタによるフィルタ処理の弊害の説明図。
【図４】微分フィルタによるフィルタ処理を実施する外気温の範囲の説明図。
【図５】車両周辺監視装置の作動フローチャート。
【発明を実施するための形態】
【００１６】
本発明の実施の形態について、図１〜図５を参照して説明する。図１を参照して、本実施の形態の車両周辺監視装置は車両に搭載して使用され、赤外線の入射レベルにより検出した被撮像物の温度を輝度信号に変換して出力する赤外線カメラ１と、画像処理ユニット１０と、外気温を検出する外気温センサ２と、表示部３と、スピーカ４とにより構成されている。
【００１７】
画像処理ユニット１０は、ＣＰＵ、メモリ等により構成された電子ユニットであり、赤外線カメラ１から出力される映像信号（被撮像物の温度を輝度に変換した信号）を、画像メモリ１２に書込む画像入力回路１１と、画像メモリ１２に書込まれた画像（原画像Ｉm1）に対して、微分フィルタによるフィルタ処理を実施するフィルタ処理部１３と、原画像Ｉm1又はフィルタ処理後画像Ｉm2から監視対象物（歩行者等）の画像を検知する対象物検知部１４とを備えている。
【００１８】
なお、ＣＰＵは、メモリに保持された車両周辺監視用の制御プログラムを実行することによって、フィルタ処理部１３及び対象物検知部１４として機能する。
【００１９】
次に、図２（ａ）及び図２（ｂ）を参照して、フィルタ処理部１３により、微分フィルタによるフィルタ処理を実施することの効果について説明する。図２（ａ）は、輝度が異なる画像部分Ａ，Ｂを含む原画像Ｉm1の、垂直座標がｙ1である画素の輝度プロファイルを示したものである。図２（ａ）原画像Ｉm1では、画像部分Ａ，Ｂ間の輝度差がＬw1になっている。
【００２０】
また、図２（ｂ）は、図２（ａ）に示した原画像Ｉm1に対して、フィルタ処理部１３により、微分フィルタによるフィルタ処理を実施したフィルタ処理後画像Ｉm2の、垂直座標がｙ1である画素の輝度プロファイルを示したものである。図２（ｂ）に示したように、微分フィルタによるフィルタ処理を施すことによって、原画像Ｉm1の画像部分Ｂとその周囲部分（背景部分）Ａとの境界エッジが強調され、画像部分Ｂ'とその周囲部分Ａとの輝度差がＬw2に拡大している。このように、画像部分Ｂとその周囲部分Ａとの輝度差を拡大（Ｌw1→Ｌw2）することによって、画像部分Ｂの抽出を容易にすることができる。
【００２１】
しかしながら、原画像Ｉm1の輝度プロファイルが、図３（ａ）に示したように、原画像Ｉm1の画像部分Ａ，Ｂとその周囲部分との輝度差が同程度であるときには、原画像Ｉm1に微分フィルタによるフィルタ処理を実施したときに、フィルタ処理後画像Ｉm2の輝度プロファイルが図３（ｂ）に示したような態様となって、画像部分Ａ，Ｂの輝度差が無くなる場合がある。そして、この場合には、フィルタ処理後画像Ｉm2において、画像部分Ａ，Ｂを識別することが却って困難になるという不都合がある。
【００２２】
そこで、対象物検知部１４は、微分フィルタによるフィルタ処理を実施することによるエッジ強調の効果が有効である場合に限って、原画像Ｉm1に微分フィルタによるフィルタ処理を実施するようにし、これにより、上記不都合が生じることを抑制している。
【００２３】
以下、図５に示したフローチャートに従って、対象物検知部１４により、歩行者を監視対象物として検知する場合の処理について説明する。
【００２４】
図５のＳＴＥＰ１で、対象物検知部１４は、外気温センサ２により検出される外気温Ｔsのデータを取得し、続くＳＴＥＰ２で、外気温Ｔsが温度範囲Ｔw内であるか否かを判断する。
【００２５】
ここで、温度範囲Ｔwは、図４に示したように、歩行者の温度付近を想定した例えば３１℃〜３９℃の範囲に設定される。図４は、縦軸を赤外線カメラ１の出力（被撮像物の温度に応じた輝度）に設定し、横軸を外気温に設定して、歩行者（図中ａ）及び人工構造物（図中ｂ、例えばコンクリート電柱）の画像の輝度を示したものである。
【００２６】
図４から、歩行者の画像の輝度は外気温が変化しても殆ど変化しないが、人工構造物の画像の輝度は外気温に比例して変化していることがわかる。なお、樹木の画像の輝度も、人口構造物と同様に外気温に比例して変化する。
【００２７】
そして、外気温Ｔsが温度範囲Ｔwから外れているとき（Ｔs＜３１℃、３９℃＜Ｔs）、すなわち、歩行者と人工構造物及び樹木（以下、人工構造物等という）との温度差が大きいときは、原画像Ｉm1における歩行者の画像と人工構造物等の画像との輝度差が大きくなるため、両者の識別は容易である。そのため、原画像Ｉm1に対して、微分フィルタによるフィルタ処理を実施してエッジ強調を行う必要性は低い。
【００２８】
それに対して、外気温Ｔsが温度範囲Ｔw内であるとき（３１℃≦Ｔs≦３９℃）、すなわち、歩行者と人工構造物等との温度差が小さいときには、原画像Ｉm1における歩行者の画像と人工構造物等の画像及び背景画像との輝度差が小さくなるため、歩行者の画像の検知が困難になる。そのため、原画像Ｉm1に対して、微分フィルタによるフィルタ処理を実施して、歩行者の画像のエッジを強調することで、歩行者の画像を背景から抽出し易くすることが有効である。
【００２９】
そこで、対象物検知部１４は、ＳＴＥＰ２で外気温Ｔsが温度範囲Ｔw内であったときはＳＴＥＰ１０に分岐し、フィルタ処理部１３により、微分フィルタによるフィルタ処理を実施する。そして、次のＳＴＥＰ１１で、フィルタ処理後画像Ｉm2から歩行者の画像を探知し、車両と接触する可能性がある歩行者を検知したときには、表示部３への表示及びスピーカ４による音声出力によって歩行者の存在を運転者に報知し、ＳＴＥＰ６に進んで処理を終了する。
【００３０】
一方、ＳＴＥＰ２で外気温Ｔsが温度範囲Ｔw外であったときにはＳＴＥＰ３に進み、対象物検知部１４は、原画像Ｉm1の輝度分散Ｌvを算出する。ここで、原画像Ｉm1の輝度分散Ｌvが小さいほど、原画像Ｉm1は輝度変化が少ない低コントラストの画像になっていると推定される。そして、この場合には、原画像Ｉm1に微分フィルタによるフィルタ処理を実施して、歩行者の画像とその背景画像との境界エッジを強調することにより、歩行者の画像部分の抽出が容易になることが期待できる。
【００３１】
そこで、対象物検知部１４は、ＳＴＥＰ４で原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th（実験等により決定される）以下であるか否かを判断する。そして、原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th以下であるときはＳＴＥＰ１０に分岐し、対象物検知部１４は上述したＳＴＥＰ１０〜ＳＴＥＰ１１の処理により、フィルタ処理後画像Ｉm2から歩行者の画像を探索する。
【００３２】
また、ＳＴＥＰ４で原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_thを超えているときには、ＳＴＥＰ５に進み、対象物検知部１４は、フィルタ処理部１３によるフィルタ処理を禁止して、原画像Ｉm1から歩行者の画像を探知する。そして、対象物検知部１４は、自車両と接触する可能性がある歩行者を検知したときには、表示部３への表示及びスピーカ４による音声出力によって歩行者の存在を運転者に報知し、ＳＴＥＰ６に進んで処理を終了する。
【００３３】
なお、ＳＴＥＰ２における外気温Ｔsが温度範囲Ｔw内であるか否かの判断、及び、ＳＴＥＰ４における原画像Ｉm1の輝度分散Ｌvが閾値Ｌv_th以下であるか否かの判断は、本発明の原画像が所定の低コントラスト状態であるか否かの判断に相当する。
【００３４】
また、本実施の形態では、外気温及び原画像の輝度分散という二つの要素により、フィルタ処理部１３によるフィルタ処理を実施するか否かを判断したが、いずれか一方の要素のみによって、フィルタ処理部１３によるフィルタ処理を実施するか否かを判断するようにしてもよい。また、他の要素により原画像が低コントラスト状態であるか否かを判断して、フィルタ処理部１３によるフィルタ処理を実施するか否かを判断してもよい。
【００３５】
また、原画像Ｉm1による監視対象物の検知とフィルタ処理後画像Ｉm2による監視対象物の検知を並行して行い、各検知の結果を外気温や画像のコントラスト等に応じた重み付けをして用いるようにしてもよい。
【００３６】
また、外気温及び輝度分散の他に、所定時間内における原画像Ｉm1中の生体の画像と想定される高輝度部の数又は割合の変化度合いに応じて、フィルタ処理部１３によるフィルタ処理を実施するか否かを切換えるようにしてもよい。例えば、所定時間内での高輝度部の数又は割合が減少したときには、撮像画像のコントラストの低下等が生じる可能性があるため、フィルタ処理部１３によるフィルタ処理を実施してフィルタ処理後画像から監視対象物を検知することが有効である。
【符号の説明】
【００３７】
１…赤外線カメラ、２…外気温センサ、３…表示部、４…スピーカ、１０…画像処理ユニット、１１…画像入力回路、１２…画像メモリ、１３…フィルタ処理部、１４…対処物検知部。
【特許請求の範囲】
【請求項１】
車両に搭載された赤外線カメラにより撮像されたグレースケール画像に基づいて、車両周辺を監視する車両周辺監視装置であって、
前記赤外線カメラにより撮像されたグレースケールの原画像に対して、微分フィルタによるフィルタ処理を実施するフィルタ処理部と、
前記原画像が所定の低コントラスト状態であるか否かを判断し、前記原画像が低コントラスト状態であるときは、前記原画像に対して前記フィルタ処理部により前記フィルタ処理を実施して、フィルタ処理後画像から監視対象物の画像を検知し、前記原画像が低コントラスト状態でないときには、前記原画像に対する前記フィルタ処理の実施を禁止して、前記原画像から監視対象物の画像を検知する対象物検知部と
を備えたことを特徴とする車両周辺監視装置。
【請求項２】
請求項１記載の車両周辺監視装置において、
外気温を検出する外気温センサを備え、
前記対象物検知部は、前記外気温センサの検出温度が生体の温度を想定した温度範囲内であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする車両周辺監視装置。
【請求項３】
請求項１記載の車両周辺監視装置において、
前記対象物検知部は、前記原画像の輝度分散が所定値以下であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする車両周辺監視装置。
【請求項１】
車両に搭載された赤外線カメラにより撮像されたグレースケール画像に基づいて、車両周辺を監視する車両周辺監視装置であって、
前記赤外線カメラにより撮像されたグレースケールの原画像に対して、微分フィルタによるフィルタ処理を実施するフィルタ処理部と、
前記原画像が所定の低コントラスト状態であるか否かを判断し、前記原画像が低コントラスト状態であるときは、前記原画像に対して前記フィルタ処理部により前記フィルタ処理を実施して、フィルタ処理後画像から監視対象物の画像を検知し、前記原画像が低コントラスト状態でないときには、前記原画像に対する前記フィルタ処理の実施を禁止して、前記原画像から監視対象物の画像を検知する対象物検知部と
を備えたことを特徴とする車両周辺監視装置。
【請求項２】
請求項１記載の車両周辺監視装置において、
外気温を検出する外気温センサを備え、
前記対象物検知部は、前記外気温センサの検出温度が生体の温度を想定した温度範囲内であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする車両周辺監視装置。
【請求項３】
請求項１記載の車両周辺監視装置において、
前記対象物検知部は、前記原画像の輝度分散が所定値以下であるときに、前記原画像が低コントラスト状態であると判断することを特徴とする車両周辺監視装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１１−１６０１０９（Ｐ２０１１−１６０１０９Ａ）
【公開日】平成２３年８月１８日（２０１１．８．１８）
【国際特許分類】
【出願番号】特願２０１０−１８９２７（Ｐ２０１０−１８９２７）
【出願日】平成２２年１月２９日（２０１０．１．２９）
【出願人】（０００００５３２６）本田技研工業株式会社 (23,863)
【Ｆターム（参考）】
【公開日】平成２３年８月１８日（２０１１．８．１８）
【国際特許分類】
【出願日】平成２２年１月２９日（２０１０．１．２９）
【出願人】（０００００５３２６）本田技研工業株式会社 (23,863)
【Ｆターム（参考）】
[ Back to top ]