物体検知方法及び装置
【課題】本発明は物体検知方法及び装置に関し、物体の検知と物体の画像の認識を簡易に行なうことができる物体検知方法及び装置を提供することを目的としている。
【解決手段】撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうように構成する。
【解決手段】撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうように構成する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は物体検知方法及び装置に関する。例えばＩＴＶカメラ等の監視カメラから得られた画像を用いてカメラの視野内に映っている物体を検知するための装置に関するものである。
【０００２】
雨天や降雪等の悪天候時にカメラによって物体を撮影する場合、太陽光が遮蔽されて暗くなるため、カメラの視野内を照らす照明を別途用意する必要がある。しかしながら、雨天や降雪等の悪天候時に照明すると、雨粒や雪粒の照明による乱反射光がカメラに映りこんでしまう。この反射光の映り込みと物体の区別がうまくつかないと、映り込みを物体と勘違いして誤検知したり、対象物体の検知もれが生じたりする。そこで、雨粒や雪粒の影響をなるべく少なくして物体を認識する必要がある。
【背景技術】
【０００３】
カメラの視野内に雨粒や雪粒等の外乱物体がある場合、照明による反射光のカメラへの映り込みによって検出したい物体との区別がつかなくなってしまう。例えば図２に示すように、悪天候時に照明を使用すると、雨粒や雪粒の照明に対する乱反射光が画像に映り込んでしまう。図２の（ａ）は照明がついている場合の映像を、図２の（ｂ）は照明がついていない場合の映像をそれぞれ示している。
【０００４】
（ａ）において、１が雨粒や雪粒を示している。図２は実施例におけるディスプレイ上に表示した表示画面中のメインの画像の一例を中間調画像の写真で示す図である。そのため、例えば背景差分処理やオプティカルフロー（対象となる物体の時間的移動方向）の算出等の画像処理による物体検知処理（“コンピュータビジョン”，谷内田正彦著，丸善株式会社出版）では、乱反射光と物体との区別がつきにくいため、検知対象の物体がいない場合に物体を検知したり、検知対象の物体がいるのに検知しなかったりしてしまう。
【０００５】
そのため、従来は次のような技術を用いていた。例えば、雨粒や雪粒等の外乱物体は、画像中をランダムに移動するノイズであると考え、画像中の各画素に対して、時間軸方向に中央値フィルタをかけることで、雨粒や雪粒を除去している（第１の方法）。また、物体検出にミリ波レーダ等のセンサを追加することで、雨粒や雪粒を無視して物体のみ検出している（例えば特許文献１参照：第２の方法）。
【特許文献１】特開２００１−８４４８５号公報（段落００１０〜００１４、図１、図２）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
前記第１の方法の場合、画像中をある程度高速で移動している物体の情報も消失してしまうという問題がある。また、前記第２の方法の場合、カメラのほかに別途センサの追加が必要であったり、カメラの映像とセンサの出力結果を統合する必要があったりする。この結果、装置の価格が高くなったり、装置の構成が煩雑になったりする。
【０００７】
本発明はこのような課題に鑑みてなされたものであって、物体の検知と物体の画像の認識を容易に行なうことができる物体検知方法及び装置を提供することを目的としている。
【課題を解決するための手段】
【０００８】
（１）請求項１記載の発明は、物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする。
【０００９】
（２）請求項２記載の発明は、物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする。
【発明の効果】
【００１０】
（１）請求項１記載の発明によれば、雨粒や雪粒の影響を排除して物体を検知することができ、物体が検知されたら、照明をあてて物体を撮影し、得られた画像を用いて保存或いは対象の認識処理に用いることができる。
（２）請求項２記載の発明によれば、雨粒や雪粒の影響を排除して物体を検知することができ、物体が検知されたら、照明をあてて物体を撮影し、得られた画像を用いて保存或いは対象の認識処理に用いることができる。
【発明を実施するための最良の形態】
【００１１】
以下、図面を参照して本発明の実施の形態例を詳細に説明する。図１は本発明の原理ブロック図である。図において、３は物体を撮影する撮影手段、４は該撮影手段３により撮影した画像を取り込む画像取り込み手段、５は該画像取り込み手段４の出力を受けて物体を検知する物体検知手段、６は物体検知手段５により検知された物体検知信号を受けてオンになる照明手段である。このように構成された装置の動作を説明すれば、以下の通りである。
【００１２】
本発明の物体検知装置は、図１に示すように、撮影手段３と、照明手段６と、画像取り込み手段４と、物体検知手段５により構成されている。先ず、撮影手段３により物体を撮影し、得られた画像内に検知対象となる物体がいるかどうかの判定処理を行なう。判定の結果、物体がいると判定された場合には、物体が映った画像を保存したり、物体の認識
処理を行なったりする。
【００１３】
前述したように、悪天候時に照明を使用すると、雨粒や雪粒の照明に対する乱反射光の画像への映り込みにより、物体検知に失敗してしまう。そこで、照明を消して物体を撮影することを考える。照明を消すと、雨粒や雪粒の画像への映り込みがなくなり、物体検知が行ないやすくなる。しかしながら、照明を消してしまうと映り込みは減るが、物体そのものが暗くなってしまい、物体の詳細な情報が得られなくなり、物体認識等の処理が行なえなくなってしまう。
【００１４】
そこで、物体検知と画像保存や物体認識を各々別の状態で撮影した画像を用いて行なう方法を考えた。具体的には、物体検知は照明の影響を受けていない状態で撮影された画像を用いる。そして、物体が検知された場合に、照明の影響を受けた状態で撮影された画像を用いて画像の保存や物体認識を行なう。
【００１５】
例えば、通常は照明を消しておき、その状態で物体検知を行なう。そして、物体が検知された場合に、照明をつけて物体を撮影し、照明があたっている画像を保存、或いは物体認識処理に用いる。これによって、悪天候時であっても、雨粒や雪粒の照明に対する乱反射光の映り込みが発生せず、物体検知が良好に行なえる。
【００１６】
また、物体認識に照明の影響を受けて物体が明瞭に映っている画像を保存して、後で目視で物体を判別したり、コンピュータによる画像処理によって自動的に物体認識を行なったりできる。コンピュータによる物体認識については、例えば、“斎藤文彦，“ブロック照合投票処理を用いた遮蔽に強い画像マッチング”，電子情報通信学会論文誌，Ｄ−II，Ｖｏｌ．Ｊ８４−Ｄ−II，Ｎｏ．１０，ｐｐ．２２７０−２２７９（２００１．１０）”を用いれば、乱反射光による物体の遮蔽が多少あっても、物体認識を行なうことができる。
【００１７】
本発明では、周波数特性の異なる物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする。
【００１８】
このように構成すれば、雨粒や雪粒の影響を排除して物体を検知することができ、物体が検知されたら、照明をあてて物体を撮影し、得られた画像を用いて保存或いは対象の認識処理に用いることができる。
【００１９】
先ず、図１の構成を用いた詳細について説明する。先ず撮影手段としてのカメラ３等の映像入力装置からは、撮影された映像出力が画像取り込み手段としての映像取り込み装置４に送られる。映像取り込み装置４では、カメラ３から送られてきた映像出力をフレームメモリ等の画像保存用のメモリへ画像情報として取り込む。そして、映像取り込み装置４で取り込まれた画像情報は、物体検知手段としての物体検知装置５に送られる。
【００２０】
物体検知装置５では、映像取り込み装置４から送られてきた画像情報から物体の物体検出処理によって物体の有無を判定する。ここで、物体検出処理としては既存の方法を用いることができる。例えば、背景差分処理を用いる。背景差分処理では、予め物体が映っていない状態を背景画像として撮影し、保持しておく。そして、現在の画像との差分処理を行ない、現在の画像と背景画像とで違いのある部分を物体として検知する。或いはまた、物体検知用に赤外線を用いることもできる。熱源を有する物体であれば、良好に物体を検知することができる。
【００２１】
物体検知装置５で物体が検知された場合は、物体検知信号を照明手段としての照明装置６と映像取り込み装置４に送る。照明装置６では、画像検知装置５から物体検知信号が送られてくると、照明をオンにする。映像取り込み装置４では、物体検知信号が送られてきた場合、取り込んだ画像情報を画像保存装置や物体認識装置へ送る。
【００２２】
ここで、画像保存装置とは、例えば磁気ディスク装置等の記録媒体によって構成されているものをいう。また、物体認識装置では、検出対象である物体の認識を行なう。例えば、検出対象が車であった場合には、車種の認識処理を行なう。このように、本発明によれば、照明装置６をオフの状態で物体検知装置５により物体を検知するので、物体を確実に検出することができ、そして、物体が検知されたら、物体検知装置５によって照明装置６をオンにして物体を照らし、撮影装置３により物体を撮影することができる。そして、撮影された画像を基に画像の保存をし、物体の認識を行なうことができる。
【００２３】
図３は本発明の一実施の形態例を示すブロック図である。図１と同一のものは、同一の符号を付して示す。この実施の形態では、物体検知を行なうための映像を取得するカメラと、画像保存或いは物体認識を行なうためのカメラを分けた例を示している。図において、３ａは物体検知用のカメラ、３ｂは物体認識用のカメラである。４ａはカメラ３ａの映像信号を取り込む映像取り込み装置、４ｂはカメラ３ｂの映像信号を取り込む映像取り込み装置である。
【００２４】
５は映像取り込み装置４ａからの画像情報を受けて物体を検知する物体検知装置である。該物体検知装置５の出力は、画像取り込み装置４ｂに物体検知信号として与えられる。物体を検知するカメラ３ａは、照明の影響を受けない方がよい。また、物体認識を行なうカメラ３ｂは、照明があたっている方がよい。そこで、カメラで撮影できる光の周波数特性が異なるカメラを用いる。そして、照明装置６は物体認識用のカメラ３ｂの周波数特性に適した照明を用いる。該照明装置６は、例えば常時点灯している。この照明装置６は、物体検知用のカメラ３ａに対して照明効果はない。
【００２５】
カメラ３ａの映像出力は、映像取り込み装置４ａに入り、カメラ３ｂの映像出力は映像取り込み装置４ｂに入る。映像取り込み装置４ａの出力は物体検知装置５に入る。そして、該物体検知装置５の出力は、映像取り込み装置４ｂに物体検知信号として与えられる。そして、映像取り込み装置４ｂからは、画像保存装置或いは物体認識装置等へ送られる。このように構成された装置の動作を説明すれば、以下の通りである。
【００２６】
この実施の形態例では、物体検知を行なうのは、可視光を撮影できるカメラを用いる。また、物体認識を行なうカメラは、近赤外光を撮影できるカメラを用いる。この場合、物体検知を行なうための可視光を撮影できるカメラ３ａは、近赤外光の照明の影響を受けない。そのため、悪天候の場合であっても、雨粒や雪粒の影響を受けない。一方、物体認識を行なう近赤外光を撮影できるカメラでは、照明によって照らされた画像を得ることができる。
【００２７】
具体的には、カメラ等の映像入力装置３ａからは、撮影された映像出力が映像取り込み装置４ａに送られる。映像取り込み装置４ａでは、カメラから送られてきた映像信号をフレームメモリ等の画像保存用のメモリへ画像情報として取り込む。そして、映像取り込み装置４ａで取り込まれた画像情報は、物体検知装置５へ送られる。そして、該物体検知装置５で物体が検知された場合には、物体検知信号を映像取り込み装置４ｂに送る。
【００２８】
該映像取り込み装置４ｂでは、物体検知信号が送られてきた場合、映像入力装置（カメラ）３ｂから送られてきた映像信号を取り込む。そして、取り込んだ画像情報を画像保存装置や物体認識装置へ送る。この場合、照明を映像取り込み装置や物体検知装置５と連動させる必要はない。照明装置６は、常に点灯しておいてもよいし、定期的に点灯するようにしてもよい。
【００２９】
この実施の形態例によれば、第１の撮影手段（カメラ３ａ）を用いて照明のあたっていない状態で物体を検知し、物体を検知したら、照明をあてて第２の撮影手段（カメラ３ｂ）により画像を撮影することができる。この場合において、カメラ３ａとカメラ３ｂの光の周波数特性が異なるものを用いることで、物体検知を行なうカメラ３ａは近赤外光の照明の影響を受けず、そのため、悪天候の場合であっても、雨粒や雪粒の影響を受けない。一方、物体認識を行なう近赤外光を撮影できるカメラ３ｂでは、照明によって照らされた画像を得ることができる。
【００３０】
以上、説明したように、本発明によれば、降雨や降雪等の悪天候時に、照明の影響のない画像で物体を検知することで、雨粒や雪粒の照明に対する乱反射の影響を受けることなく対象となる物体の検出を行なうことができる。また、物体が検出された場合には、照明の影響を受けている画像を保存或いは物体認識処理することで、画像の記録や物体認識を良好に行なうことができる。
【図面の簡単な説明】
【００３１】
【図１】本発明の原理ブロック図である。
【図２】照明による映り込みの説明図である。 照明による映り込みの説明図である。
【図３】本発明の一実施の形態例を示すブロック図である。
【符号の説明】
【００３２】
３ａ ＩＴＶカメラ
３ｂ ＩＴＶカメラ
４ａ 映像取り込み装置１
４ｂ 映像取り込み装置２
５ 物体検知装置
６ 照明装置
【技術分野】
【０００１】
本発明は物体検知方法及び装置に関する。例えばＩＴＶカメラ等の監視カメラから得られた画像を用いてカメラの視野内に映っている物体を検知するための装置に関するものである。
【０００２】
雨天や降雪等の悪天候時にカメラによって物体を撮影する場合、太陽光が遮蔽されて暗くなるため、カメラの視野内を照らす照明を別途用意する必要がある。しかしながら、雨天や降雪等の悪天候時に照明すると、雨粒や雪粒の照明による乱反射光がカメラに映りこんでしまう。この反射光の映り込みと物体の区別がうまくつかないと、映り込みを物体と勘違いして誤検知したり、対象物体の検知もれが生じたりする。そこで、雨粒や雪粒の影響をなるべく少なくして物体を認識する必要がある。
【背景技術】
【０００３】
カメラの視野内に雨粒や雪粒等の外乱物体がある場合、照明による反射光のカメラへの映り込みによって検出したい物体との区別がつかなくなってしまう。例えば図２に示すように、悪天候時に照明を使用すると、雨粒や雪粒の照明に対する乱反射光が画像に映り込んでしまう。図２の（ａ）は照明がついている場合の映像を、図２の（ｂ）は照明がついていない場合の映像をそれぞれ示している。
【０００４】
（ａ）において、１が雨粒や雪粒を示している。図２は実施例におけるディスプレイ上に表示した表示画面中のメインの画像の一例を中間調画像の写真で示す図である。そのため、例えば背景差分処理やオプティカルフロー（対象となる物体の時間的移動方向）の算出等の画像処理による物体検知処理（“コンピュータビジョン”，谷内田正彦著，丸善株式会社出版）では、乱反射光と物体との区別がつきにくいため、検知対象の物体がいない場合に物体を検知したり、検知対象の物体がいるのに検知しなかったりしてしまう。
【０００５】
そのため、従来は次のような技術を用いていた。例えば、雨粒や雪粒等の外乱物体は、画像中をランダムに移動するノイズであると考え、画像中の各画素に対して、時間軸方向に中央値フィルタをかけることで、雨粒や雪粒を除去している（第１の方法）。また、物体検出にミリ波レーダ等のセンサを追加することで、雨粒や雪粒を無視して物体のみ検出している（例えば特許文献１参照：第２の方法）。
【特許文献１】特開２００１−８４４８５号公報（段落００１０〜００１４、図１、図２）
【発明の開示】
【発明が解決しようとする課題】
【０００６】
前記第１の方法の場合、画像中をある程度高速で移動している物体の情報も消失してしまうという問題がある。また、前記第２の方法の場合、カメラのほかに別途センサの追加が必要であったり、カメラの映像とセンサの出力結果を統合する必要があったりする。この結果、装置の価格が高くなったり、装置の構成が煩雑になったりする。
【０００７】
本発明はこのような課題に鑑みてなされたものであって、物体の検知と物体の画像の認識を容易に行なうことができる物体検知方法及び装置を提供することを目的としている。
【課題を解決するための手段】
【０００８】
（１）請求項１記載の発明は、物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする。
【０００９】
（２）請求項２記載の発明は、物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする。
【発明の効果】
【００１０】
（１）請求項１記載の発明によれば、雨粒や雪粒の影響を排除して物体を検知することができ、物体が検知されたら、照明をあてて物体を撮影し、得られた画像を用いて保存或いは対象の認識処理に用いることができる。
（２）請求項２記載の発明によれば、雨粒や雪粒の影響を排除して物体を検知することができ、物体が検知されたら、照明をあてて物体を撮影し、得られた画像を用いて保存或いは対象の認識処理に用いることができる。
【発明を実施するための最良の形態】
【００１１】
以下、図面を参照して本発明の実施の形態例を詳細に説明する。図１は本発明の原理ブロック図である。図において、３は物体を撮影する撮影手段、４は該撮影手段３により撮影した画像を取り込む画像取り込み手段、５は該画像取り込み手段４の出力を受けて物体を検知する物体検知手段、６は物体検知手段５により検知された物体検知信号を受けてオンになる照明手段である。このように構成された装置の動作を説明すれば、以下の通りである。
【００１２】
本発明の物体検知装置は、図１に示すように、撮影手段３と、照明手段６と、画像取り込み手段４と、物体検知手段５により構成されている。先ず、撮影手段３により物体を撮影し、得られた画像内に検知対象となる物体がいるかどうかの判定処理を行なう。判定の結果、物体がいると判定された場合には、物体が映った画像を保存したり、物体の認識
処理を行なったりする。
【００１３】
前述したように、悪天候時に照明を使用すると、雨粒や雪粒の照明に対する乱反射光の画像への映り込みにより、物体検知に失敗してしまう。そこで、照明を消して物体を撮影することを考える。照明を消すと、雨粒や雪粒の画像への映り込みがなくなり、物体検知が行ないやすくなる。しかしながら、照明を消してしまうと映り込みは減るが、物体そのものが暗くなってしまい、物体の詳細な情報が得られなくなり、物体認識等の処理が行なえなくなってしまう。
【００１４】
そこで、物体検知と画像保存や物体認識を各々別の状態で撮影した画像を用いて行なう方法を考えた。具体的には、物体検知は照明の影響を受けていない状態で撮影された画像を用いる。そして、物体が検知された場合に、照明の影響を受けた状態で撮影された画像を用いて画像の保存や物体認識を行なう。
【００１５】
例えば、通常は照明を消しておき、その状態で物体検知を行なう。そして、物体が検知された場合に、照明をつけて物体を撮影し、照明があたっている画像を保存、或いは物体認識処理に用いる。これによって、悪天候時であっても、雨粒や雪粒の照明に対する乱反射光の映り込みが発生せず、物体検知が良好に行なえる。
【００１６】
また、物体認識に照明の影響を受けて物体が明瞭に映っている画像を保存して、後で目視で物体を判別したり、コンピュータによる画像処理によって自動的に物体認識を行なったりできる。コンピュータによる物体認識については、例えば、“斎藤文彦，“ブロック照合投票処理を用いた遮蔽に強い画像マッチング”，電子情報通信学会論文誌，Ｄ−II，Ｖｏｌ．Ｊ８４−Ｄ−II，Ｎｏ．１０，ｐｐ．２２７０−２２７９（２００１．１０）”を用いれば、乱反射光による物体の遮蔽が多少あっても、物体認識を行なうことができる。
【００１７】
本発明では、周波数特性の異なる物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする。
【００１８】
このように構成すれば、雨粒や雪粒の影響を排除して物体を検知することができ、物体が検知されたら、照明をあてて物体を撮影し、得られた画像を用いて保存或いは対象の認識処理に用いることができる。
【００１９】
先ず、図１の構成を用いた詳細について説明する。先ず撮影手段としてのカメラ３等の映像入力装置からは、撮影された映像出力が画像取り込み手段としての映像取り込み装置４に送られる。映像取り込み装置４では、カメラ３から送られてきた映像出力をフレームメモリ等の画像保存用のメモリへ画像情報として取り込む。そして、映像取り込み装置４で取り込まれた画像情報は、物体検知手段としての物体検知装置５に送られる。
【００２０】
物体検知装置５では、映像取り込み装置４から送られてきた画像情報から物体の物体検出処理によって物体の有無を判定する。ここで、物体検出処理としては既存の方法を用いることができる。例えば、背景差分処理を用いる。背景差分処理では、予め物体が映っていない状態を背景画像として撮影し、保持しておく。そして、現在の画像との差分処理を行ない、現在の画像と背景画像とで違いのある部分を物体として検知する。或いはまた、物体検知用に赤外線を用いることもできる。熱源を有する物体であれば、良好に物体を検知することができる。
【００２１】
物体検知装置５で物体が検知された場合は、物体検知信号を照明手段としての照明装置６と映像取り込み装置４に送る。照明装置６では、画像検知装置５から物体検知信号が送られてくると、照明をオンにする。映像取り込み装置４では、物体検知信号が送られてきた場合、取り込んだ画像情報を画像保存装置や物体認識装置へ送る。
【００２２】
ここで、画像保存装置とは、例えば磁気ディスク装置等の記録媒体によって構成されているものをいう。また、物体認識装置では、検出対象である物体の認識を行なう。例えば、検出対象が車であった場合には、車種の認識処理を行なう。このように、本発明によれば、照明装置６をオフの状態で物体検知装置５により物体を検知するので、物体を確実に検出することができ、そして、物体が検知されたら、物体検知装置５によって照明装置６をオンにして物体を照らし、撮影装置３により物体を撮影することができる。そして、撮影された画像を基に画像の保存をし、物体の認識を行なうことができる。
【００２３】
図３は本発明の一実施の形態例を示すブロック図である。図１と同一のものは、同一の符号を付して示す。この実施の形態では、物体検知を行なうための映像を取得するカメラと、画像保存或いは物体認識を行なうためのカメラを分けた例を示している。図において、３ａは物体検知用のカメラ、３ｂは物体認識用のカメラである。４ａはカメラ３ａの映像信号を取り込む映像取り込み装置、４ｂはカメラ３ｂの映像信号を取り込む映像取り込み装置である。
【００２４】
５は映像取り込み装置４ａからの画像情報を受けて物体を検知する物体検知装置である。該物体検知装置５の出力は、画像取り込み装置４ｂに物体検知信号として与えられる。物体を検知するカメラ３ａは、照明の影響を受けない方がよい。また、物体認識を行なうカメラ３ｂは、照明があたっている方がよい。そこで、カメラで撮影できる光の周波数特性が異なるカメラを用いる。そして、照明装置６は物体認識用のカメラ３ｂの周波数特性に適した照明を用いる。該照明装置６は、例えば常時点灯している。この照明装置６は、物体検知用のカメラ３ａに対して照明効果はない。
【００２５】
カメラ３ａの映像出力は、映像取り込み装置４ａに入り、カメラ３ｂの映像出力は映像取り込み装置４ｂに入る。映像取り込み装置４ａの出力は物体検知装置５に入る。そして、該物体検知装置５の出力は、映像取り込み装置４ｂに物体検知信号として与えられる。そして、映像取り込み装置４ｂからは、画像保存装置或いは物体認識装置等へ送られる。このように構成された装置の動作を説明すれば、以下の通りである。
【００２６】
この実施の形態例では、物体検知を行なうのは、可視光を撮影できるカメラを用いる。また、物体認識を行なうカメラは、近赤外光を撮影できるカメラを用いる。この場合、物体検知を行なうための可視光を撮影できるカメラ３ａは、近赤外光の照明の影響を受けない。そのため、悪天候の場合であっても、雨粒や雪粒の影響を受けない。一方、物体認識を行なう近赤外光を撮影できるカメラでは、照明によって照らされた画像を得ることができる。
【００２７】
具体的には、カメラ等の映像入力装置３ａからは、撮影された映像出力が映像取り込み装置４ａに送られる。映像取り込み装置４ａでは、カメラから送られてきた映像信号をフレームメモリ等の画像保存用のメモリへ画像情報として取り込む。そして、映像取り込み装置４ａで取り込まれた画像情報は、物体検知装置５へ送られる。そして、該物体検知装置５で物体が検知された場合には、物体検知信号を映像取り込み装置４ｂに送る。
【００２８】
該映像取り込み装置４ｂでは、物体検知信号が送られてきた場合、映像入力装置（カメラ）３ｂから送られてきた映像信号を取り込む。そして、取り込んだ画像情報を画像保存装置や物体認識装置へ送る。この場合、照明を映像取り込み装置や物体検知装置５と連動させる必要はない。照明装置６は、常に点灯しておいてもよいし、定期的に点灯するようにしてもよい。
【００２９】
この実施の形態例によれば、第１の撮影手段（カメラ３ａ）を用いて照明のあたっていない状態で物体を検知し、物体を検知したら、照明をあてて第２の撮影手段（カメラ３ｂ）により画像を撮影することができる。この場合において、カメラ３ａとカメラ３ｂの光の周波数特性が異なるものを用いることで、物体検知を行なうカメラ３ａは近赤外光の照明の影響を受けず、そのため、悪天候の場合であっても、雨粒や雪粒の影響を受けない。一方、物体認識を行なう近赤外光を撮影できるカメラ３ｂでは、照明によって照らされた画像を得ることができる。
【００３０】
以上、説明したように、本発明によれば、降雨や降雪等の悪天候時に、照明の影響のない画像で物体を検知することで、雨粒や雪粒の照明に対する乱反射の影響を受けることなく対象となる物体の検出を行なうことができる。また、物体が検出された場合には、照明の影響を受けている画像を保存或いは物体認識処理することで、画像の記録や物体認識を良好に行なうことができる。
【図面の簡単な説明】
【００３１】
【図１】本発明の原理ブロック図である。
【図２】照明による映り込みの説明図である。 照明による映り込みの説明図である。
【図３】本発明の一実施の形態例を示すブロック図である。
【符号の説明】
【００３２】
３ａ ＩＴＶカメラ
３ｂ ＩＴＶカメラ
４ａ 映像取り込み装置１
４ｂ 映像取り込み装置２
５ 物体検知装置
６ 照明装置
【特許請求の範囲】
【請求項１】
物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、
前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする物体検知装置。
【請求項２】
物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、
前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、
物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする物体検知方法。
【請求項１】
物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、
前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする物体検知装置。
【請求項２】
物体を撮影する撮影手段と、該撮影手段により撮影した画像を取り込む画像取り込み手段と、該画像取り込み手段の出力を受けて物体を検知する物体検知手段と、物体を照明する照明手段とを有し、前記撮影手段と照明手段とを連動させて動作させて、照明のあたっている画像とあたっていない画像を撮影し、照明のあたっていない画像で物体を検知し、物体が検知された場合は、照明のあたっている画像を保存或いは認識処理に用いるものにおいて、
前記撮影手段として周波数特性の異なる、物体を検知するための第１の撮影手段と、物体を認識するための第２の撮影手段とを設け、前記第１の撮影手段により照明のあたっていない状態で物体を検知し、
物体を検知したら照明をあてて第２の撮影手段を用いて物体を撮影し、取得した画像に対して保存或いは認識処理を行なうことを特徴とする物体検知方法。
【図１】
【図３】
【図２】
【図３】
【図２】
【公開番号】特開２００７−２８８８０３（Ｐ２００７−２８８８０３Ａ）
【公開日】平成１９年１１月１日（２００７．１１．１）
【国際特許分類】
【出願番号】特願２００７−１６５２０１（Ｐ２００７−１６５２０１）
【出願日】平成１９年６月２２日（２００７．６．２２）
【分割の表示】特願２００２−２３００１０（Ｐ２００２−２３００１０）の分割
【原出願日】平成１４年８月７日（２００２．８．７）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
【公開日】平成１９年１１月１日（２００７．１１．１）
【国際特許分類】
【出願日】平成１９年６月２２日（２００７．６．２２）
【分割の表示】特願２００２−２３００１０（Ｐ２００２−２３００１０）の分割
【原出願日】平成１４年８月７日（２００２．８．７）
【出願人】（０００００５２２３）富士通株式会社 (25,993)
【Ｆターム（参考）】
[ Back to top ]