車載撮像システム及び撮像装置
【課題】判定用及び表示用の撮像装置を個別に設ける事なく、撮像装置が撮像した画像を基にした判定処理を精度よく行うことができると共に、表示手段に視認性の高い画像を表示することができる車載撮像システム、及びこのシステムを構成する撮像装置を提供する。
【解決手段】ＥＣＵ３は、撮像装置１が撮像した画像をディスプレイ５に表示するか否かを撮像装置１へ通知する。画像を表示すると通知された場合には、撮像装置１は信号処理部１１にてゲイン調整及びエッジ強調の画像処理を施してＥＣＵ３へ送信する。画像を表示しないと通知された場合には、信号処理部１１にてカラーの画像を白黒の画像に変換するカラー変換の画像処理を施してＥＣＵ３へ送信する。ＥＣＵ３は、撮像装置１にてゲイン調整及びエッジ強調の画像処理が施された画像をディスプレイ５に表示することができ、カラー変換の画像処理が施された画像を基に種々の判定処理を行うことができる。
【解決手段】ＥＣＵ３は、撮像装置１が撮像した画像をディスプレイ５に表示するか否かを撮像装置１へ通知する。画像を表示すると通知された場合には、撮像装置１は信号処理部１１にてゲイン調整及びエッジ強調の画像処理を施してＥＣＵ３へ送信する。画像を表示しないと通知された場合には、信号処理部１１にてカラーの画像を白黒の画像に変換するカラー変換の画像処理を施してＥＣＵ３へ送信する。ＥＣＵ３は、撮像装置１にてゲイン調整及びエッジ強調の画像処理が施された画像をディスプレイ５に表示することができ、カラー変換の画像処理が施された画像を基に種々の判定処理を行うことができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車輌に搭載した撮像装置にて撮像を行い、撮像した画像に適切な画像処理を施して車輌内の表示手段に表示することができる車載撮像システム、及びこのシステムの構成要素をなす撮像装置に関する。
【背景技術】
【０００２】
従来、車輌に撮像装置を搭載して車輌の外界を撮像し、撮像により取得した画像を車内に設けられたディスプレイに表示することによって、運転者へ種々の情報を提供する車載撮像システムが実用化されている。例えば、車輌の運転席から死角となる部分を撮像することによって、運転者が直接的に目視できない部分をディスプレイに表示できるため、事故を未然に防ぐことが可能となる。ディスプレイに表示する画像は、運転者の視認性を高めるためエッジ強調及びゲイン調整等の画像処理が施される場合が多く、カラーの画像であることが好ましい。
【０００３】
また、車輌にはカーナビゲーション装置及びテレビジョン装置等が搭載され、走行に係る案内画像又はテレビ番組等をディスプレイに表示することができる。しかし、各装置のために別のディスプレイを車輌に搭載することは少なく、車輌に搭載されるディスプレイは１つ程度である場合が多い。よって、撮像装置、カーナビゲーション装置及びテレビジョン装置等がそれぞれ出力する画像の全てをディスプレイに表示することはできず、いずれかの画像を選択してディスプレイに表示する必要がある。更に、近年では車輌に複数の撮像装置を搭載して車輌の周囲を広範囲に亘って撮像し、撮像により得られる複数の画像から一又は複数の画像を選択してディスプレイに表示することができる車載撮像システムが実用化されている。
【０００４】
このように、複数の画像から一又は複数の画像を選択してディスプレイに表示する場合、運転者がスイッチなどを操作して選択する構成とすることもできるが、近年では撮像装置が撮像した画像を基に車輌に搭載されたＥＣＵ（Electronic Control Unit）が判定を行って、ディスプレイに表示する画像を自動的に選択するシステムが研究・開発され、実用化されている。この場合、例えば撮像装置が撮像した画像に歩行者又は他車輌等の移動物体が写されているか否か、又は撮像装置が撮像した画像に駐車場の枠を示す白線が写されているか否か等の判定をＥＣＵが行って表示する画像を選択している。これらの判定に用いる画像は、エッジ強調及びゲイン調整等が行われていない画像であることが好ましく、白黒の画像であることが好ましい場合もある。
【０００５】
特許文献１においては、表示用に適した画質のフレーム画像と、画像処理用に適したフレーム画像とを取得することができる撮像装置が提案されている。この撮像装置は、撮像を行うときに奇数番目のフレームに対しては、表示用の明るさレベルの映像信号が得られるように露光条件を設定し、設定した露光条件で撮像を行って画像を出力する。また、偶数番目のフレームに対しては、画像処理に適した明るさレベルの映像信号が得られるように露光条件を設定し、設定した露光条件で撮像を行って画像を出力する。これにより、１つの撮像装置から表示に適したフレーム画像と、画像処理に適したフレーム画像とを、時系列的に交互に出力することができる。
【特許文献１】特開２００７−１３７７７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上述のように、撮像装置が撮像した画像をディスプレイに表示する場合に適した画像処理と、判定の際に用いる画像に適した画像処理とは異なる場合が多いが、これらの画像処理はＥＣＵの処理負荷の低減のため撮像装置にて行うことが好ましい。表示用の画像を撮像する撮像装置と、判定用の画像を撮像する撮像装置とをそれぞれ車輌に搭載することで、各撮像装置にて最適な画像処理を施すことができるが、撮像装置の搭載数が増すため車載撮像システムのコストが増加するという問題がある。
【０００７】
特許文献１に記載の撮像装置はこの問題を解決することを目的とするものである。しかしながら、奇数番目のフレームと偶数番目のフレームとで露光条件を変更する必要があるため処理が繁雑であり、高速な条件変更を行う必要があるため撮像装置が高コスト化する虞がある。また、奇数番目のフレームのみが表示用の画像であるため、表示用の画像の数が減少し、ディスプレイに動画として表示される画像の画質が低下するという問題がある。この問題を解決するために、撮像装置が撮像するフレーム数を増加させることが考えられるが、撮像装置が高コスト化するという問題が生じる。
【０００８】
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、撮像装置が撮像した画像を車輌内の表示手段に表示する表示制御装置が、撮像装置が撮像した画像を表示するか否かを判定して撮像装置に通知すると共に、撮像装置が表示制御装置から画像を表示すると通知された場合に、表示用の画像処理を施して送信する構成とすることにより、撮像装置が撮像した画像を表示する場合にのみ表示に適した画像処理を施すことができる車載撮像システムを提供することにある。
【０００９】
また本発明の他の目的とするところは、撮像装置が表示制御装置から画像を表示すると通知された場合には、撮像した画像にエッジ強調及びゲイン調整の画像処理を施して送信する構成とすることにより、表示に適した画像処理を施して表示手段に表示することができる車載撮像システムを提供することにある。
【００１０】
また本発明の他の目的とするところは、撮像装置が表示制御装置から画像を表示しないと通知された場合に、判定用の画像処理を施して送信すると共に、表示制御装置がこの画像を基に判定を行う構成とすることにより、表示制御装置が判定に適した画像処理を施された画像を基に判定を行うことができる車載撮像システムを提供することにある。
【００１１】
また本発明の他の目的とするところは、撮像装置が表示制御装置から画像を表示しないと通知された場合には、撮像したカラーの画像を白黒の画像に変換する画像処理を施して送信する構成とすることにより、判定に適した画像処理を施して撮像装置から表示制御装置へ送信することができる車載撮像システムを提供することにある。
【００１２】
また本発明の他の目的とするところは、表示制御装置などの他の装置から特定の通知を受信した場合には、表示用の画像処理を施した画像を送信すると共に、他の通知を受信した場合には、判定用の画像処理を施した画像を送信する構成とすることにより、他の装置から与えられる通知に応じて撮像した画像に施す画像処理を変更して送信することができる撮像装置を提供することにある。
【課題を解決するための手段】
【００１３】
第１発明に係る車載撮像システムは、車輌に搭載された撮像装置と、該撮像装置が撮像した画像を前記車輌内に設けられた表示手段に表示させる表示制御装置とを備える車載撮像システムにおいて、前記表示制御装置は、前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定する判定手段と、該判定手段の判定結果を前記撮像装置へ通知する通知手段と、前記撮像装置から送信された画像を受信する受信手段とを有し、前記撮像装置は、前記表示制御装置から画像を表示すると通知された場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、該表示用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信する送信手段とを有することを特徴とする。
【００１４】
本発明においては、車載撮像システムは、撮像装置が撮像した画像を表示制御装置へ送信し、表示制御装置がこの画像を受信してディスプレイなどの表示手段に表示させる構成である。表示制御装置は、撮像装置が撮像した画像を表示手段に表示するか否かの判定を行って、判定結果を撮像装置へ通知する。これにより表示制御装置は撮像装置が行う画像処理を変更することができる。撮像装置は、表示制御装置から画像を表示すると通知された場合には、撮像した画像に表示用の画像処理を施して表示制御装置へ送信する。表示制御装置は、表示に適した画像処理が施された画像を受信して表示手段に表示させることができる。また、表示制御装置は、撮像装置が撮像した画像を表示しない場合には、判定の妨げとなる虞のある表示用の画像処理が施されていない画像を取得することができ、この画像を基に移動物体の有無又は白線の有無等の判定を行うことができる。
【００１５】
また、第２発明に係る車載撮像システムは、前記表示用画像処理手段が、撮像した画像にエッジ強調及び／又はゲイン調整の画像処理を施すようにしてあることを特徴とする。
【００１６】
本発明においては、撮像装置が表示用の画像処理として、撮像した画像にエッジ強調及び／又はゲイン調整の画像処理を施す。画像を表示手段に表示する場合には、これらの画像処理を施すことにより視認性を向上することができる。また、表示制御装置が判定を行う際の画像では、これらの画像処理が精度低下の要因となるため、画像を表示する場合にのみこれらの画像処理を行うことによって、判定精度の低下を防止することができる。
【００１７】
また、第３発明に係る車載撮像システムは、前記撮像装置が、前記表示制御装置から画像を表示しないと通知された場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段を有し、前記送信手段が、前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信するようにしてあり、前記表示制御装置は、前記判定手段が、前記判定用画像処理手段により画像処理を施された画像を基に、前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定するようにしてあることを特徴とする。
【００１８】
本発明においては、表示制御装置から画像を表示しないと通知された場合には、撮像装置は撮像した画像に判定用の画像処理を施して表示制御装置へ送信する。表示制御装置は、判定に適した画像処理が施された画像を基に、撮像装置が撮像した画像を表示手段に表示させるか否かの判定を行うことができる。判定に適した画像処理を施すことにより画像の視認性が低下する虞があるが、表示手段に画像を表示しない場合にのみこの画像処理を施すことによって、表示手段に表示される画像の視認性の低下を防止できる。
【００１９】
また、第４発明に係る車載撮像システムは、前記判定用画像処理手段が、撮像したカラーの画像を白黒の画像に変換する画像処理を施すようにしてあることを特徴とする。
【００２０】
本発明においては、撮像装置が判定用の画像処理として、カラーの画像を白黒の画像に変換する画像処理を施す。撮像した画像を基に表示制御装置が例えば移動物体の有無の判定又は白線の有無の判定等を行う場合には、白黒の画像が好ましい場合がある。逆に、表示手段に表示する画像はカラーの画像であることが好ましい。よって、表示手段に画像を表示しない場合には、撮像装置が白黒の画像を表示制御装置へ送信し、画像を表示する場合には、撮像装置がカラーの画像を表示制御装置へ送信することによって、表示及び判定にそれぞれ適した画像を表示制御装置が取得することができる。
【００２１】
また、第５発明に係る撮像装置は、車輌に搭載され、通信機能を備える撮像装置において、特定の通知を受信した場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、他の通知を受信した場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段とを備え、前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を送信するようにしてあることを特徴とする。
【００２２】
本発明においては、表示制御装置などの他の装置から特定の通知、即ち画像を表示する通知を受信した場合には、表示用の画像処理を施した画像を送信する。また、他の通知、即ち画像を表示しない通知を受信した場合には、判定用の画像処理を施した画像を送信する。他の装置からの通知に応じて適切な画像処理を施し、この画像を他の装置へ送信することができる。よって、通知を送信した他の装置が、処理に適した画像を撮像装置から受信して処理を行うことができる。
【発明の効果】
【００２３】
第１発明による場合は、撮像装置が撮像した画像を表示手段に表示するか否かの判定を表示制御装置が行って撮像装置へ通知し、撮像装置が表示制御装置から画像を表示すると通知された場合に、表示用の画像処理を施して送信する構成とすることにより、表示制御装置が表示に適した画像処理が施された画像を受信して表示手段に表示させることができる。また、撮像装置が撮像した画像を表示しない場合には、表示制御装置が判定の妨げとなる虞のある表示用の画像処理が施されていない画像を取得して判定を行うことができる。よって、表示用及び判定用にそれぞれ撮像装置を設けることなく、表示制御装置が表示及び判定に適した画像を一の撮像装置から受信することができるため、車載撮像システムのコストの増加を抑制して、表示手段に視認性の高い画像を表示することができ、撮像した画像を表示するか否かを高精度に判定することができる。
【００２４】
また、第２発明による場合は、表示用の画像処理として、撮像装置がエッジ強調及び／又はゲイン調整の画像処理を施す構成とすることにより、撮像した画像を表示手段に表示する場合には、表示制御装置が表示に適した画像処理を施された画像を取得できるため、表示する画像の視認性を向上することができる。また、これらの画像処理は表示制御装置の判定の妨げとなる虞があるが、画像を表示する場合にのみこれらの画像処理を行うため、判定精度の低下を防止することができる。よって、表示制御装置が表示及び判定に適した画像を確実に取得することができ、表示品質及び判定制度の高い高品質な車載撮像システムを提供できる。
【００２５】
また、第３発明による場合は、表示制御装置から画像を表示しないと通知された場合に、撮像装置は撮像した画像に判定用の画像処理を施して表示制御装置へ送信すると共に、表示制御装置がこの画像を基に判定を行う構成とすることにより、表示制御装置は判定に適した画像処理が施された画像を基に、撮像装置が撮像した画像を表示手段に表示させるか否かの判定を行うことができる。また、撮像した画像を表示する場合には、画像の視認性を妨げる虞のある画像処理が施されていない画像を取得して表示手段に表示させることができる。よって、表示用及び判定用にそれぞれ撮像装置を設ける事なく、表示制御装置が表示及び判定に適した画像をより確実に一の撮像装置からのみ取得することができるため、車載撮像システムのコストの増加を確実に抑制して、表示手段に視認性の高い画像を確実に表示することができ、撮像した画像を表示するか否かをより高精度に判定することができる。
【００２６】
また、第４発明による場合は、判定用の画像処理として、撮像装置がカラーの画像を白黒の画像に変換する画像処理を施す構成とすることにより、撮像した画像を表示手段に表示しない場合には、表示制御装置が判定に適した画像処理を施された画像を取得できるため、判定の精度を向上することができる。また、白黒の画像は視認性が低い虞があるが、画像を表示しない場合にのみカラーの画像を白黒の画像に変換するため、視認性の低下を防止することができる。よって、表示制御装置が表示及び判定に適した画像をより確実に取得することができ、表示品質及び判定制度の高い高品質な車載撮像システムを提供できる。
【００２７】
また、第５発明による場合は、他の装置から特定の通知を受信した場合には、表示用の画像処理を施した画像を送信し、他の通知を受信した場合には、判定用の画像処理を施した画像を送信する構成とすることにより、他の装置からの通知に応じて適切な画像処理を施し、この画像を他の装置へ送信することができる。撮像した画像に施す画像処理を変更して、一の撮像装置を種々の目的に利用することができるため、この撮像装置を備えるシステムのコストを低減できる。
【発明を実施するための最良の形態】
【００２８】
以下、本発明をその実施の形態を示す図面に基づき具体的に説明する。図１及び図２は、本発明に係る車載撮像システムの構成を示すブロック図であり、図１に車載撮像システムを構成する撮像装置１の詳細を示し、図２に車載撮像システムを構成するＥＣＵ３の詳細を示してある。本発明に係る車載撮像システムは、図示しない車輌のバンパー近傍又はサイドミラー内部等に搭載されて車輌の外界を撮像する撮像装置１と、車輌の運転席近傍に配設されたディスプレイ５と、撮像装置１から与えられる画像又はカーナビゲーション装置７などの他の装置から与えられる画像から一の画像を選択してディスプレイ５に表示させる制御処理を主として行うＥＣＵ３とを備えている。
【００２９】
撮像装置１は、撮像素子１０、信号処理部１１、送信部１５及び受信部１９と、これらの各部を制御する制御部１７とを有している（図１参照）。撮像素子１０は、ＣＣＤ（Charge Coupled Devices）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によるものであり、撮像装置１に備えられたレンズ（図示は省略する）にて集光された光を受光することにより１秒間に３０回程度の頻度で撮像を行い、受光した光に応じた画像信号を出力するようにしてある。なお、撮像素子１０が撮像を行う際の露光時間及びシャッタースピード等は制御部１７の制御に基づいて行われる。撮像素子１０は、撮像により取得した画像を画像信号として信号処理部１１へ与えるようにしてある。
【００３０】
信号処理部１１は、制御部１７の制御に従って、撮像素子１０が撮像した画像に種々の画像処理を施して出力するものであり、露出・ゲイン調整部１２、エッジ強調部１３及びカラー変換部１４等の画像処理を行うための機能ブロックを有している。露出・ゲイン調整部１２は、撮像素子１０から与えられた画像信号の例えば明るさに応じて自動的に露出及びゲイン（利得、増幅率）を調整し、調整した露出及びゲインにより画像信号を増幅して出力する画像処理を行うようにしてある。エッジ強調部１３は、撮像素子１０から与えられた画像信号に係る画像のエッジ部分を強調する画像処理を行うようにしてある。また、撮像素子１０はＲＧＢによるカラーの画像を撮像するが、カラー変換部１４は撮像素子１０から与えられたカラーの画像を白黒の画像に変換する画像処理を行うようにしてある。信号処理部１１が備えるこれらの各部による画像処理を行うか否かは、制御部１７の制御により決定される。信号処理部１１は、画像処理を施した画像を送信部１５へ与えるようにしてある。
【００３１】
送信部１５は、接続ケーブルを接続するための接続ポートを有しており、接続ケーブルを介してＥＣＵ３に接続されている。送信部１５は、信号処理部１１から与えられた画像をＬＶＤＳ（Low Voltage Differential Signaling）方式又はＮＴＳＣ（National TV Standards Committee）方式等の信号に変換し、接続ケーブルを介してＥＣＵ３へ画像の送信を行うようにしてある。
【００３２】
また、受信部１９は、ＥＣＵ３から送信される種々の制御命令及びメッセージ等を受信するためのものである。受信部１９には、送信部１５と同様に接続ケーブルを接続するための接続ポートが設けてあり、接続ケーブルを介してＥＣＵ３に接続するようにしてある。ただし、撮像装置１及びＥＣＵ３の間で制御命令及びメッセージ等の送受信をＰＬＣ（Power Line Communication）により行う場合には、受信部１９には電力線が接続され、電力線に重畳された信号を抽出する機能が受信部１９には備えられる。受信部１９が受信した制御命令及びメッセージ等は制御部１７へ与えられる。
【００３３】
制御部１７は、ＥＣＵ３から与えられる制御命令及びメッセージ等に応じて、撮像装置１の各部の制御処理及び各種の演算処理等を行うものである。例えば、制御部１７は撮像素子１０が撮像した画像に対して、信号処理部１１が露出・ゲイン調整部１２、エッジ強調部１３及びカラー変換部１４による画像処理を行うか否かを制御することができる。制御部１７は信号処理部１１に対する制御モードを規定するレジスタ１８を有しており、制御モードとして表示モード又は判定モードを設定することができるようにしてある。レジスタ１８の制御モードの設定は、ＥＣＵ３が制御命令及びメッセージ等を撮像装置１に与えることにより行うことができるようにしてある。
【００３４】
ＥＣＵ３は、撮像装置１が撮像した画像をディスプレイ５に表示する場合に、制御部１７の制御モードを表示モードに設定するようにしてある。また、撮像装置１が撮像した画像をディスプレイ５に表示しない場合には、制御モードを判定モードに設定するようにしてある。図３は、制御モードと画像処理との対応関係を示す図表である。制御部１７の制御モードが表示モードに設定された場合、制御部１７は、撮像素子１０が撮像した画像にゲイン調整及びエッジ強調の画像処理を行い、カラー変換の画像処理は行わないように信号処理部１１を制御するようにしてある。また、制御モードが判定モードに設定された場合、カラー変換の画像処理を行い、ゲイン調整及びエッジ強調の画像処理を行わないように制御部１７が信号処理部１１を制御するようにしてある。
【００３５】
このように、ＥＣＵ３は制御命令又はメッセージ等を撮像装置１へ送信することにより、撮像装置１が行う画像処理を変更することができる。このＥＣＵ３は、送信部３０、制御部３１、操作部３２、受信部３３、画像処理部３４、出力部３５及び画像メモリ３６等を備えている。操作部３２は、車輌の運転席近傍の例えばインストルメントパネルなどに配された複数のスイッチ又はボタン等を有して運転者の操作を受け付けるものである。例えば、運転者は操作部３２を操作することによって、ディスプレイ５の表示切替を行うことができ、撮像装置１による車輌外部の画像又はカーナビゲーション装置７による走行経路を案内する地図画像を切り替えて表示させることができる。ただし、本実施の形態に係る車載撮像システムは、カーナビゲーション装置７による画像をディスプレイ５に表示している場合であっても、車輌の周辺に歩行者又は他車輌等の移動物体が存在し、この移動物体が撮像装置１の撮像範囲内に存在する場合には、自動的にディスプレイ５の表示を撮像装置１による画像に切り替えて運転者に警告を与える機能を有している。また、操作部３２にはディスプレイ５の表示をオフにするオフスイッチが設けてあり、運転者がオフスイッチを操作することによってディスプレイ５を非表示の状態とすることも可能である。操作部３２が受け付けた操作内容は制御部３１へ通知される。
【００３６】
制御部３１は、ＥＣＵ３内の各部の制御処理及び種々の演算処理等を行うものであり、具体的にはＣＰＵ（Central Processing Unit）又はＭＰＵ（Micro Processing Unit）等により構成してある。制御部３１は、操作部３２から与えられた操作内容に応じて出力部３５の制御を行い、ディスプレイ５に表示する画像の切り替えを行うことができるようにしてある。また、制御部３１は、画像処理部３４と連携して、撮像装置１からの画像に移動物体が移されているか否かを判定する処理を行い、判定結果に応じてディスプレイ５に表示する画像を自動的に切り替える処理を行うようにしてある。
【００３７】
更に制御部３１は、送信部３０から撮像装置１へメッセージとして表示通知を送信することにより撮像装置１の制御部１７のレジスタ１８に表示モードを設定することができ、また、非表示通知を送信することにより撮像装置１のレジスタ１８に判定モードを設定することができる。これにより、撮像装置１の信号処理部１１にて行われる画像処理が制御部１７により変更されるため、ＥＣＵ３の制御部３１は撮像装置１が行う画像処理の変更を行うことができる。更に、撮像装置１へ終了通知をメッセージとして送信することによって、撮像装置１による撮像を終了させることも可能である。
【００３８】
送信部３０は、接続ケーブルを接続するための接続ポートを有し、接続ケーブルを介して撮像装置１に接続され、制御部３１から与えられた制御命令又はメッセージ等を撮像装置１へ送信する処理を行うものである。ただし、撮像装置１及びＥＣＵ３の間で制御命令及びメッセージ等の送受信をＰＬＣにより行う場合には、送信部３０には電力線が接続され、制御部３１から与えられた制御命令又はメッセージ等に係る信号を電力線に重畳して撮像装置１へ送信する。
【００３９】
受信部３３は、接続ケーブルを接続するための接続ポートを有しており、接続ケーブルを介して撮像装置１に接続されている。受信部３３は、撮像装置１から送信されるＬＶＤＳ方式又はＮＴＳＣ方式等の信号を受信し、受信した信号をデジタルデータの画像に変換して画像処理部３４へ与えるようにしてある。
【００４０】
画像処理部３４は、撮像装置１が撮像した画像をディスプレイ５に表示する場合には、受信部３３から与えられた画像を出力部３５へ与えてディスプレイ５に表示する。このときに、画像処理部３４にて画像の視点変換、一部拡大、又はメッセージ若しくはアイコン等の重畳などの画像処理を行ってもよい。
【００４１】
また、撮像装置１が撮像した画像をディスプレイ５に表示しない場合、即ちカーナビゲーション装置７からの画像をディスプレイ５に表示する場合には、画像処理部３４は撮像装置１が異なる時点で撮像した２つの画像を基に、画像中に移動物体が写されているか否かを判定する移動物体判定処理を行うようにしてある。移動物体判定処理は、既知の技術であるため詳細な説明は省略するが、例えば異なる時点で撮像された２つの画像の各画素値の差分を算出し、算出した差分が閾値を超えた場合に移動物体が写されていると判定することができる。また、２つの画像について対応点の探索を行ってオプティカルフローを算出することにより移動物体の判定を行うこともできる。画像処理部３４は、移動物体判定処理による判定結果を制御部３１に通知するようにしてある。
【００４２】
画像処理部３４から移動物体判定処理の判定結果を通知された制御部３１は、移動物体が存在すると判定された場合、撮像装置１へ表示通知をメッセージとして送信すると共に、出力部３５を制御してディスプレイ５に表示する画像をカーナビゲーション装置７の画像から撮像装置１が撮像した画像に切り替えるようにしてある。制御部３１は内部にタイマ（図示は省略する）を有しており、ディスプレイ５に表示する画像を撮像装置１が撮像した画像に切り替えたときにタイマによる計時を開始し、所定時間経過後にディスプレイ５の表示をカーナビゲーション装置７の画像に戻すようにしてある。また、画像処理部３４にて移動物体が存在しないと判定された場合には、制御部３１は表示の切り替えを行わず、カーナビゲーション装置７の画像の表示を継続して行うようにしてある。
【００４３】
なお、上述の自動切換が行われるのは、運転者が操作部３２を操作してカーナビゲーション装置７の画像をディスプレイ５に表示する設定とした場合である。運転者が操作部３２を操作して撮像装置１が撮像した画像をディスプレイ５に表示する設定とした場合には、自動切換は行われず、撮像装置１が撮像した画像が継続的にディスプレイ５に表示される。
【００４４】
また、画像処理部３４が移動物体検出処理又は種々の画像処理等を行う際には、画像メモリ３６に一時的に画像を蓄積することができるようにしてある。画像メモリ３６は、ＳＲＡＭ又はＤＲＡＭ等の書き換え可能な大容量のメモリ素子で構成してあり、受信部３３が受信した画像を一時的に蓄積する受信バッファとしても利用できる。撮像装置１が撮像した画像をディスプレイ５に表示する場合には、画像処理部３４は受信部３３から与えられた画像を、場合によっては種々の画像処理を施した後で、出力部３５へ与えるようにしてある。
【００４５】
出力部３５は、画像処理部３４からの画像とカーナビゲーション装置７からの画像とが与えられており、これらの画像のうちのいずれか一方を制御部３１による制御に応じて選択するようにしてある。出力部３５は、選択した画像をディスプレイ５に適した信号に変換し、この信号をディスプレイ５へ出力するようにしてある。これにより、ディスプレイ５に撮像装置１が撮像した画像又はカーナビゲーション装置７の画像のいずれかが表示される。
【００４６】
図４は、本発明に係る車載撮像システムのＥＣＵ３が行う画像表示制御処理の手順を示すフローチャートである。まず、ＥＣＵ３の制御部３１は、デフォルト表示として、カーナビゲーション装置７の案内画像をディスプレイ５に表示する処理を行う（ステップＳ１）。これは、制御部３１が送信部３０から撮像装置１に非表示通知をメッセージ送信すると共に、出力部３５にカーナビゲーション装置７から与えられる画像をディスプレイ５へ出力するように制御することで行うことができる。
【００４７】
次いで、制御部３１は、運転者により操作部３２のオフスイッチが操作されることにより、ディスプレイ５の表示をオフにする操作がなされたか否かを調べる（ステップＳ２）。表示をオフにする操作がなされた場合（Ｓ２：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ終了通知をメッセージ送信し（ステップＳ３）、撮像装置１の動作を終了させ、ディスプレイ５を非表示として処理を終了する。
【００４８】
表示をオフにする操作がなされていない場合（Ｓ２：ＮＯ）、制御部３１は撮像装置１が撮像した画像を受信部３３にて受信したか否かを調べる（ステップＳ４）。画像を受信していない場合（Ｓ４：ＮＯ）、ステップＳ１へ戻り、制御部３１は上述の処理を繰り返し行う。撮像装置１が撮像した画像を受信した場合には（Ｓ４：ＹＥＳ）、制御部３１は画像処理部３４にて移動物体判定処理を行って（ステップＳ５）、受信した画像中に移動物体が存在するか否かを調べる（ステップＳ６）。移動物体が存在しない場合には（Ｓ６：ＮＯ）、ステップＳ１へ戻り、制御部３１は上述の処理を繰り返し行う。
【００４９】
移動物体判定処理により移動物体が存在すると判定された場合（Ｓ６：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ表示通知をメッセージとして送信する（ステップＳ７）。これにより、撮像装置１を表示モードに設定することができる。次いで、制御部３１は撮像装置１が撮像した画像をディスプレイ５に表示する処理を行う（ステップＳ８）。これは、受信部３３にて受信された画像を画像処理部３４から出力部３５へ与えると共に、出力部３５に画像処理部３４から与えられる画像をディスプレイ５へ出力するように制御することで行うことができる。なお、このときに制御部３１はタイマによる計時を開始するようにしてある。
【００５０】
次いで、制御部３１は運転者により操作部３２のオフスイッチが操作されることにより、ディスプレイ５の表示をオフにする操作がなされたか否かを調べる（ステップＳ９）。表示をオフにする操作がなされた場合（Ｓ９：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ終了通知をメッセージ送信し（ステップＳ１０）、撮像装置１の動作を終了させ、ディスプレイ５を非表示として処理を終了する。
【００５１】
表示をオフにする操作がなされていない場合（Ｓ９：ＮＯ）、制御部３１はタイマの計時により、撮像装置１が撮像した画像をディスプレイ５に表示するように表示切替を行った後、所定の時間が経過したか否かを調べる（ステップＳ１１）。所定時間を経過していない場合（Ｓ１１：ＮＯ）、ステップＳ８へ戻り、制御部３１は所定時間が経過するまで撮像装置１が撮像した画像の表示を継続して行う。所定時間を経過した場合（Ｓ１１：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ非表示通知をメッセージとして送信する（ステップＳ１２）。これにより、制御部３１は撮像装置１を判定モードに設定することができる。その後、ステップＳ１へ戻り、制御部３１はカーナビゲーション装置７の案内画像を表示する処理を行って、ステップＳ２又はＳ９にて表示をオフにする操作がなされるまで、ステップＳ１〜Ｓ１２の処理を繰り返し行う。
【００５２】
図５は、本発明に係る車載撮像システムの撮像装置１が行う撮像処理の手順を示すフローチャートである。まず、撮像装置１の制御部１７は、デフォルトの制御モードとして、判定モードが設定される（ステップＳ２１）。次いで、制御部１７は受信部１９がＥＣＵ３からの終了通知をメッセージとして受信したか否かを調べ（ステップＳ２２）、終了通知を受信した場合には（Ｓ２２：ＹＥＳ）、撮像処理を終了する。
【００５３】
受信部１９にて終了通知を受信していない場合には（Ｓ２２：ＮＯ）、制御部１７は更に受信部１９にて表示通知をメッセージとして受信したか否かを調べる（ステップＳ２３）。また、表示通知を受信していない場合には（Ｓ２３：ＮＯ）、制御部１７は更に受信部１９にて非表示通知をメッセージとして受信したか否かを調べる（ステップＳ２４）。受信部１９にて非表示通知を受信していない場合（Ｓ２４：ＮＯ）、即ちいずれの通知も受信していない場合には、ステップＳ２７へ進む。受信部１９にて表示通知を受信した場合には（Ｓ２３：ＹＥＳ）、制御部１７は制御モードを表示モードに設定して（ステップＳ２５）、ステップＳ２７へ進む。受信部１９にて非表示通知を受信した場合には（Ｓ２４：ＹＥＳ）、制御部１７は制御モードを判定モードに設定して（ステップＳ２６）、ステップＳ２７へ進む。
【００５４】
次いで、撮像素子１０による撮像を行い（ステップＳ２７）、制御部１７は制御モードが表示モードであるか否かを調べる（ステップＳ２８）。制御モードが表示モードの場合（Ｓ２８：ＹＥＳ）、制御部１７は信号処理部１１にて撮像素子１０が撮像した画像にゲイン調整の画像処理を行うと共に（ステップＳ２９）、エッジ強調の画像処理を行う（ステップＳ３０）。制御モードが表示モードでない場合（Ｓ２８：ＮＯ）、即ち制御モードが判定モードの場合には、制御部１７は信号処理部１１にて撮像素子１０が撮像したカラーの画像を白黒の画像に変換するカラー変換の画像処理を行う（ステップＳ３１）。信号処理部１１による画像処理が終了した後、制御部１７は画像処理を施した画像を送信部１５からＥＣＵ３へ送信し（ステップＳ３２）、ステップＳ２２へ戻る。その後、ＥＣＵ３からの終了通知を受信するまで制御部１７はステップＳ２２〜Ｓ３２の処理を繰り返し行う。
【００５５】
以上の構成の車載撮像システムにおいては、撮像装置１が撮像した画像をディスプレイ５に表示するか否かに応じて、撮像装置１が信号処理部１１にてそれぞれ異なる画像処理を施してＥＣＵ３へ送信する構成とすることにより、ＥＣＵ３は表示又は判定に最適な画像処理を施された画像を取得することができる。よって、表示用及び判定用にそれぞれ別の撮像装置を車輌に搭載する事なく、ディスプレイ５に視認性の高い画像を表示することができると共に、ＥＣＵ３が行う移動物体判定処理の精度を高めることができるため、利便性が高く高品質な車載撮像システムを低コストで提供することができる。
【００５６】
なお、本実施の形態においては、ディスプレイ５に撮像装置１が撮像した画像又はカーナビゲーション装置７の画像のいずれかを選択して表示する構成としたが、車輌に搭載する装置はカーナビゲーション装置７に限るものではなく、その他の装置（例えばテレビジョン装置）を搭載した場合には、この装置からの画像又は撮像装置１からの画像のいずれかを選択して表示する構成であってもよい。また、その他の装置は１つに限らず、複数であってもよい。
【００５７】
また、車輌に撮像装置１を１つ搭載する構成としたが、これに限るものではなく、複数の撮像装置１を車輌に搭載する構成であってもよい。この場合には、ＥＣＵ３は複数の撮像装置１からの画像とその他の装置からの画像との複数の画像からディスプレイ５に表示する画像を選択する。また、一の撮像装置１からの画像をディスプレイ５に表示する場合には、ＥＣＵ３は一の撮像装置１のみを表示モードに設定し、他の撮像装置１を判定モードに設定し、他の撮像装置１からの画像を受信して各撮像装置１について移動物体判定処理を行う。
【００５８】
また、撮像装置１が撮像した画像をディスプレイ５に表示するか否かを移動物体判定処理により決定する構成としたが、これに限るものではなく、例えば撮像装置１から与えられた画像から白線の抽出を行って、画像中に駐車場又は車道等が写されているか否かに応じて決定する構成としてもよく、その他の方法で決定してもよい。また、撮像装置１の信号処理部１１にて行う画像処理をゲイン調整、エッジ強調及びカラー変換の３種としたが、これに限るものではなく、その他の画像処理を行う構成であってもよい。
【００５９】
また、図４及び図５にて示した手順では、ＥＣＵ３の操作部３２にて表示をオフにする操作がなされた場合に、ディスプレイ５への画像の表示を終了する構成としたが、これに限るものではなく、車輌のエンジンが停止された場合などの他の場合にも表示を終了する構成としてもよい。また、表示をオフにする操作がなされた場合であっても、ディスプレイ５に画像を表示する事なく移動物体判定処理は継続して行い、移動物体が存在すると判定された場合にはディスプレイ５の表示をオンにして撮像装置１が撮像した画像を表示する構成としてもよい。また、ディスプレイ５の表示を自動的に切り替えて撮像装置１が撮像した画像を表示した後、所定時間が経過した場合に表示を元に戻す構成としたが、これに限るものではなく、その他の条件で表示を元に戻す構成としてもよい。例えば、所定時間が経過した場合に移動物体判定処理を再度行い、移動物体が存在しない場合にのみ表示を戻す構成とすることができる。
【図面の簡単な説明】
【００６０】
【図１】本発明に係る車載撮像システムの構成を示すブロック図である。
【図２】本発明に係る車載撮像システムの構成を示すブロック図である。
【図３】制御モードと画像処理との対応関係を示す図表である。
【図４】本発明に係る車載撮像システムのＥＣＵが行う画像表示制御処理の手順を示すフローチャートである。
【図５】本発明に係る車載撮像システムの撮像装置が行う撮像処理の手順を示すフローチャートである。
【符号の説明】
【００６１】
１ 撮像装置
３ ＥＣＵ（表示制御装置）
５ ディスプレイ（表示手段）
７ カーナビゲーション装置
１０ 撮像素子
１１ 信号処理部
１２ 露出・ゲイン調整部（表示用画像処理手段）
１３ エッジ強調部（表示用画像処理手段）
１４ カラー変換部（判定用画像処理手段）
１５ 送信部（送信手段）
１７ 制御部
１９ 受信部
３０ 送信部（通知手段）
３１ 制御部（判定手段）
３３ 受信部（受信手段）
３４ 画像処理部
３５ 出力部
【技術分野】
【０００１】
本発明は、車輌に搭載した撮像装置にて撮像を行い、撮像した画像に適切な画像処理を施して車輌内の表示手段に表示することができる車載撮像システム、及びこのシステムの構成要素をなす撮像装置に関する。
【背景技術】
【０００２】
従来、車輌に撮像装置を搭載して車輌の外界を撮像し、撮像により取得した画像を車内に設けられたディスプレイに表示することによって、運転者へ種々の情報を提供する車載撮像システムが実用化されている。例えば、車輌の運転席から死角となる部分を撮像することによって、運転者が直接的に目視できない部分をディスプレイに表示できるため、事故を未然に防ぐことが可能となる。ディスプレイに表示する画像は、運転者の視認性を高めるためエッジ強調及びゲイン調整等の画像処理が施される場合が多く、カラーの画像であることが好ましい。
【０００３】
また、車輌にはカーナビゲーション装置及びテレビジョン装置等が搭載され、走行に係る案内画像又はテレビ番組等をディスプレイに表示することができる。しかし、各装置のために別のディスプレイを車輌に搭載することは少なく、車輌に搭載されるディスプレイは１つ程度である場合が多い。よって、撮像装置、カーナビゲーション装置及びテレビジョン装置等がそれぞれ出力する画像の全てをディスプレイに表示することはできず、いずれかの画像を選択してディスプレイに表示する必要がある。更に、近年では車輌に複数の撮像装置を搭載して車輌の周囲を広範囲に亘って撮像し、撮像により得られる複数の画像から一又は複数の画像を選択してディスプレイに表示することができる車載撮像システムが実用化されている。
【０００４】
このように、複数の画像から一又は複数の画像を選択してディスプレイに表示する場合、運転者がスイッチなどを操作して選択する構成とすることもできるが、近年では撮像装置が撮像した画像を基に車輌に搭載されたＥＣＵ（Electronic Control Unit）が判定を行って、ディスプレイに表示する画像を自動的に選択するシステムが研究・開発され、実用化されている。この場合、例えば撮像装置が撮像した画像に歩行者又は他車輌等の移動物体が写されているか否か、又は撮像装置が撮像した画像に駐車場の枠を示す白線が写されているか否か等の判定をＥＣＵが行って表示する画像を選択している。これらの判定に用いる画像は、エッジ強調及びゲイン調整等が行われていない画像であることが好ましく、白黒の画像であることが好ましい場合もある。
【０００５】
特許文献１においては、表示用に適した画質のフレーム画像と、画像処理用に適したフレーム画像とを取得することができる撮像装置が提案されている。この撮像装置は、撮像を行うときに奇数番目のフレームに対しては、表示用の明るさレベルの映像信号が得られるように露光条件を設定し、設定した露光条件で撮像を行って画像を出力する。また、偶数番目のフレームに対しては、画像処理に適した明るさレベルの映像信号が得られるように露光条件を設定し、設定した露光条件で撮像を行って画像を出力する。これにより、１つの撮像装置から表示に適したフレーム画像と、画像処理に適したフレーム画像とを、時系列的に交互に出力することができる。
【特許文献１】特開２００７−１３７７７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上述のように、撮像装置が撮像した画像をディスプレイに表示する場合に適した画像処理と、判定の際に用いる画像に適した画像処理とは異なる場合が多いが、これらの画像処理はＥＣＵの処理負荷の低減のため撮像装置にて行うことが好ましい。表示用の画像を撮像する撮像装置と、判定用の画像を撮像する撮像装置とをそれぞれ車輌に搭載することで、各撮像装置にて最適な画像処理を施すことができるが、撮像装置の搭載数が増すため車載撮像システムのコストが増加するという問題がある。
【０００７】
特許文献１に記載の撮像装置はこの問題を解決することを目的とするものである。しかしながら、奇数番目のフレームと偶数番目のフレームとで露光条件を変更する必要があるため処理が繁雑であり、高速な条件変更を行う必要があるため撮像装置が高コスト化する虞がある。また、奇数番目のフレームのみが表示用の画像であるため、表示用の画像の数が減少し、ディスプレイに動画として表示される画像の画質が低下するという問題がある。この問題を解決するために、撮像装置が撮像するフレーム数を増加させることが考えられるが、撮像装置が高コスト化するという問題が生じる。
【０００８】
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、撮像装置が撮像した画像を車輌内の表示手段に表示する表示制御装置が、撮像装置が撮像した画像を表示するか否かを判定して撮像装置に通知すると共に、撮像装置が表示制御装置から画像を表示すると通知された場合に、表示用の画像処理を施して送信する構成とすることにより、撮像装置が撮像した画像を表示する場合にのみ表示に適した画像処理を施すことができる車載撮像システムを提供することにある。
【０００９】
また本発明の他の目的とするところは、撮像装置が表示制御装置から画像を表示すると通知された場合には、撮像した画像にエッジ強調及びゲイン調整の画像処理を施して送信する構成とすることにより、表示に適した画像処理を施して表示手段に表示することができる車載撮像システムを提供することにある。
【００１０】
また本発明の他の目的とするところは、撮像装置が表示制御装置から画像を表示しないと通知された場合に、判定用の画像処理を施して送信すると共に、表示制御装置がこの画像を基に判定を行う構成とすることにより、表示制御装置が判定に適した画像処理を施された画像を基に判定を行うことができる車載撮像システムを提供することにある。
【００１１】
また本発明の他の目的とするところは、撮像装置が表示制御装置から画像を表示しないと通知された場合には、撮像したカラーの画像を白黒の画像に変換する画像処理を施して送信する構成とすることにより、判定に適した画像処理を施して撮像装置から表示制御装置へ送信することができる車載撮像システムを提供することにある。
【００１２】
また本発明の他の目的とするところは、表示制御装置などの他の装置から特定の通知を受信した場合には、表示用の画像処理を施した画像を送信すると共に、他の通知を受信した場合には、判定用の画像処理を施した画像を送信する構成とすることにより、他の装置から与えられる通知に応じて撮像した画像に施す画像処理を変更して送信することができる撮像装置を提供することにある。
【課題を解決するための手段】
【００１３】
第１発明に係る車載撮像システムは、車輌に搭載された撮像装置と、該撮像装置が撮像した画像を前記車輌内に設けられた表示手段に表示させる表示制御装置とを備える車載撮像システムにおいて、前記表示制御装置は、前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定する判定手段と、該判定手段の判定結果を前記撮像装置へ通知する通知手段と、前記撮像装置から送信された画像を受信する受信手段とを有し、前記撮像装置は、前記表示制御装置から画像を表示すると通知された場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、該表示用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信する送信手段とを有することを特徴とする。
【００１４】
本発明においては、車載撮像システムは、撮像装置が撮像した画像を表示制御装置へ送信し、表示制御装置がこの画像を受信してディスプレイなどの表示手段に表示させる構成である。表示制御装置は、撮像装置が撮像した画像を表示手段に表示するか否かの判定を行って、判定結果を撮像装置へ通知する。これにより表示制御装置は撮像装置が行う画像処理を変更することができる。撮像装置は、表示制御装置から画像を表示すると通知された場合には、撮像した画像に表示用の画像処理を施して表示制御装置へ送信する。表示制御装置は、表示に適した画像処理が施された画像を受信して表示手段に表示させることができる。また、表示制御装置は、撮像装置が撮像した画像を表示しない場合には、判定の妨げとなる虞のある表示用の画像処理が施されていない画像を取得することができ、この画像を基に移動物体の有無又は白線の有無等の判定を行うことができる。
【００１５】
また、第２発明に係る車載撮像システムは、前記表示用画像処理手段が、撮像した画像にエッジ強調及び／又はゲイン調整の画像処理を施すようにしてあることを特徴とする。
【００１６】
本発明においては、撮像装置が表示用の画像処理として、撮像した画像にエッジ強調及び／又はゲイン調整の画像処理を施す。画像を表示手段に表示する場合には、これらの画像処理を施すことにより視認性を向上することができる。また、表示制御装置が判定を行う際の画像では、これらの画像処理が精度低下の要因となるため、画像を表示する場合にのみこれらの画像処理を行うことによって、判定精度の低下を防止することができる。
【００１７】
また、第３発明に係る車載撮像システムは、前記撮像装置が、前記表示制御装置から画像を表示しないと通知された場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段を有し、前記送信手段が、前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信するようにしてあり、前記表示制御装置は、前記判定手段が、前記判定用画像処理手段により画像処理を施された画像を基に、前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定するようにしてあることを特徴とする。
【００１８】
本発明においては、表示制御装置から画像を表示しないと通知された場合には、撮像装置は撮像した画像に判定用の画像処理を施して表示制御装置へ送信する。表示制御装置は、判定に適した画像処理が施された画像を基に、撮像装置が撮像した画像を表示手段に表示させるか否かの判定を行うことができる。判定に適した画像処理を施すことにより画像の視認性が低下する虞があるが、表示手段に画像を表示しない場合にのみこの画像処理を施すことによって、表示手段に表示される画像の視認性の低下を防止できる。
【００１９】
また、第４発明に係る車載撮像システムは、前記判定用画像処理手段が、撮像したカラーの画像を白黒の画像に変換する画像処理を施すようにしてあることを特徴とする。
【００２０】
本発明においては、撮像装置が判定用の画像処理として、カラーの画像を白黒の画像に変換する画像処理を施す。撮像した画像を基に表示制御装置が例えば移動物体の有無の判定又は白線の有無の判定等を行う場合には、白黒の画像が好ましい場合がある。逆に、表示手段に表示する画像はカラーの画像であることが好ましい。よって、表示手段に画像を表示しない場合には、撮像装置が白黒の画像を表示制御装置へ送信し、画像を表示する場合には、撮像装置がカラーの画像を表示制御装置へ送信することによって、表示及び判定にそれぞれ適した画像を表示制御装置が取得することができる。
【００２１】
また、第５発明に係る撮像装置は、車輌に搭載され、通信機能を備える撮像装置において、特定の通知を受信した場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、他の通知を受信した場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段とを備え、前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を送信するようにしてあることを特徴とする。
【００２２】
本発明においては、表示制御装置などの他の装置から特定の通知、即ち画像を表示する通知を受信した場合には、表示用の画像処理を施した画像を送信する。また、他の通知、即ち画像を表示しない通知を受信した場合には、判定用の画像処理を施した画像を送信する。他の装置からの通知に応じて適切な画像処理を施し、この画像を他の装置へ送信することができる。よって、通知を送信した他の装置が、処理に適した画像を撮像装置から受信して処理を行うことができる。
【発明の効果】
【００２３】
第１発明による場合は、撮像装置が撮像した画像を表示手段に表示するか否かの判定を表示制御装置が行って撮像装置へ通知し、撮像装置が表示制御装置から画像を表示すると通知された場合に、表示用の画像処理を施して送信する構成とすることにより、表示制御装置が表示に適した画像処理が施された画像を受信して表示手段に表示させることができる。また、撮像装置が撮像した画像を表示しない場合には、表示制御装置が判定の妨げとなる虞のある表示用の画像処理が施されていない画像を取得して判定を行うことができる。よって、表示用及び判定用にそれぞれ撮像装置を設けることなく、表示制御装置が表示及び判定に適した画像を一の撮像装置から受信することができるため、車載撮像システムのコストの増加を抑制して、表示手段に視認性の高い画像を表示することができ、撮像した画像を表示するか否かを高精度に判定することができる。
【００２４】
また、第２発明による場合は、表示用の画像処理として、撮像装置がエッジ強調及び／又はゲイン調整の画像処理を施す構成とすることにより、撮像した画像を表示手段に表示する場合には、表示制御装置が表示に適した画像処理を施された画像を取得できるため、表示する画像の視認性を向上することができる。また、これらの画像処理は表示制御装置の判定の妨げとなる虞があるが、画像を表示する場合にのみこれらの画像処理を行うため、判定精度の低下を防止することができる。よって、表示制御装置が表示及び判定に適した画像を確実に取得することができ、表示品質及び判定制度の高い高品質な車載撮像システムを提供できる。
【００２５】
また、第３発明による場合は、表示制御装置から画像を表示しないと通知された場合に、撮像装置は撮像した画像に判定用の画像処理を施して表示制御装置へ送信すると共に、表示制御装置がこの画像を基に判定を行う構成とすることにより、表示制御装置は判定に適した画像処理が施された画像を基に、撮像装置が撮像した画像を表示手段に表示させるか否かの判定を行うことができる。また、撮像した画像を表示する場合には、画像の視認性を妨げる虞のある画像処理が施されていない画像を取得して表示手段に表示させることができる。よって、表示用及び判定用にそれぞれ撮像装置を設ける事なく、表示制御装置が表示及び判定に適した画像をより確実に一の撮像装置からのみ取得することができるため、車載撮像システムのコストの増加を確実に抑制して、表示手段に視認性の高い画像を確実に表示することができ、撮像した画像を表示するか否かをより高精度に判定することができる。
【００２６】
また、第４発明による場合は、判定用の画像処理として、撮像装置がカラーの画像を白黒の画像に変換する画像処理を施す構成とすることにより、撮像した画像を表示手段に表示しない場合には、表示制御装置が判定に適した画像処理を施された画像を取得できるため、判定の精度を向上することができる。また、白黒の画像は視認性が低い虞があるが、画像を表示しない場合にのみカラーの画像を白黒の画像に変換するため、視認性の低下を防止することができる。よって、表示制御装置が表示及び判定に適した画像をより確実に取得することができ、表示品質及び判定制度の高い高品質な車載撮像システムを提供できる。
【００２７】
また、第５発明による場合は、他の装置から特定の通知を受信した場合には、表示用の画像処理を施した画像を送信し、他の通知を受信した場合には、判定用の画像処理を施した画像を送信する構成とすることにより、他の装置からの通知に応じて適切な画像処理を施し、この画像を他の装置へ送信することができる。撮像した画像に施す画像処理を変更して、一の撮像装置を種々の目的に利用することができるため、この撮像装置を備えるシステムのコストを低減できる。
【発明を実施するための最良の形態】
【００２８】
以下、本発明をその実施の形態を示す図面に基づき具体的に説明する。図１及び図２は、本発明に係る車載撮像システムの構成を示すブロック図であり、図１に車載撮像システムを構成する撮像装置１の詳細を示し、図２に車載撮像システムを構成するＥＣＵ３の詳細を示してある。本発明に係る車載撮像システムは、図示しない車輌のバンパー近傍又はサイドミラー内部等に搭載されて車輌の外界を撮像する撮像装置１と、車輌の運転席近傍に配設されたディスプレイ５と、撮像装置１から与えられる画像又はカーナビゲーション装置７などの他の装置から与えられる画像から一の画像を選択してディスプレイ５に表示させる制御処理を主として行うＥＣＵ３とを備えている。
【００２９】
撮像装置１は、撮像素子１０、信号処理部１１、送信部１５及び受信部１９と、これらの各部を制御する制御部１７とを有している（図１参照）。撮像素子１０は、ＣＣＤ（Charge Coupled Devices）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）等によるものであり、撮像装置１に備えられたレンズ（図示は省略する）にて集光された光を受光することにより１秒間に３０回程度の頻度で撮像を行い、受光した光に応じた画像信号を出力するようにしてある。なお、撮像素子１０が撮像を行う際の露光時間及びシャッタースピード等は制御部１７の制御に基づいて行われる。撮像素子１０は、撮像により取得した画像を画像信号として信号処理部１１へ与えるようにしてある。
【００３０】
信号処理部１１は、制御部１７の制御に従って、撮像素子１０が撮像した画像に種々の画像処理を施して出力するものであり、露出・ゲイン調整部１２、エッジ強調部１３及びカラー変換部１４等の画像処理を行うための機能ブロックを有している。露出・ゲイン調整部１２は、撮像素子１０から与えられた画像信号の例えば明るさに応じて自動的に露出及びゲイン（利得、増幅率）を調整し、調整した露出及びゲインにより画像信号を増幅して出力する画像処理を行うようにしてある。エッジ強調部１３は、撮像素子１０から与えられた画像信号に係る画像のエッジ部分を強調する画像処理を行うようにしてある。また、撮像素子１０はＲＧＢによるカラーの画像を撮像するが、カラー変換部１４は撮像素子１０から与えられたカラーの画像を白黒の画像に変換する画像処理を行うようにしてある。信号処理部１１が備えるこれらの各部による画像処理を行うか否かは、制御部１７の制御により決定される。信号処理部１１は、画像処理を施した画像を送信部１５へ与えるようにしてある。
【００３１】
送信部１５は、接続ケーブルを接続するための接続ポートを有しており、接続ケーブルを介してＥＣＵ３に接続されている。送信部１５は、信号処理部１１から与えられた画像をＬＶＤＳ（Low Voltage Differential Signaling）方式又はＮＴＳＣ（National TV Standards Committee）方式等の信号に変換し、接続ケーブルを介してＥＣＵ３へ画像の送信を行うようにしてある。
【００３２】
また、受信部１９は、ＥＣＵ３から送信される種々の制御命令及びメッセージ等を受信するためのものである。受信部１９には、送信部１５と同様に接続ケーブルを接続するための接続ポートが設けてあり、接続ケーブルを介してＥＣＵ３に接続するようにしてある。ただし、撮像装置１及びＥＣＵ３の間で制御命令及びメッセージ等の送受信をＰＬＣ（Power Line Communication）により行う場合には、受信部１９には電力線が接続され、電力線に重畳された信号を抽出する機能が受信部１９には備えられる。受信部１９が受信した制御命令及びメッセージ等は制御部１７へ与えられる。
【００３３】
制御部１７は、ＥＣＵ３から与えられる制御命令及びメッセージ等に応じて、撮像装置１の各部の制御処理及び各種の演算処理等を行うものである。例えば、制御部１７は撮像素子１０が撮像した画像に対して、信号処理部１１が露出・ゲイン調整部１２、エッジ強調部１３及びカラー変換部１４による画像処理を行うか否かを制御することができる。制御部１７は信号処理部１１に対する制御モードを規定するレジスタ１８を有しており、制御モードとして表示モード又は判定モードを設定することができるようにしてある。レジスタ１８の制御モードの設定は、ＥＣＵ３が制御命令及びメッセージ等を撮像装置１に与えることにより行うことができるようにしてある。
【００３４】
ＥＣＵ３は、撮像装置１が撮像した画像をディスプレイ５に表示する場合に、制御部１７の制御モードを表示モードに設定するようにしてある。また、撮像装置１が撮像した画像をディスプレイ５に表示しない場合には、制御モードを判定モードに設定するようにしてある。図３は、制御モードと画像処理との対応関係を示す図表である。制御部１７の制御モードが表示モードに設定された場合、制御部１７は、撮像素子１０が撮像した画像にゲイン調整及びエッジ強調の画像処理を行い、カラー変換の画像処理は行わないように信号処理部１１を制御するようにしてある。また、制御モードが判定モードに設定された場合、カラー変換の画像処理を行い、ゲイン調整及びエッジ強調の画像処理を行わないように制御部１７が信号処理部１１を制御するようにしてある。
【００３５】
このように、ＥＣＵ３は制御命令又はメッセージ等を撮像装置１へ送信することにより、撮像装置１が行う画像処理を変更することができる。このＥＣＵ３は、送信部３０、制御部３１、操作部３２、受信部３３、画像処理部３４、出力部３５及び画像メモリ３６等を備えている。操作部３２は、車輌の運転席近傍の例えばインストルメントパネルなどに配された複数のスイッチ又はボタン等を有して運転者の操作を受け付けるものである。例えば、運転者は操作部３２を操作することによって、ディスプレイ５の表示切替を行うことができ、撮像装置１による車輌外部の画像又はカーナビゲーション装置７による走行経路を案内する地図画像を切り替えて表示させることができる。ただし、本実施の形態に係る車載撮像システムは、カーナビゲーション装置７による画像をディスプレイ５に表示している場合であっても、車輌の周辺に歩行者又は他車輌等の移動物体が存在し、この移動物体が撮像装置１の撮像範囲内に存在する場合には、自動的にディスプレイ５の表示を撮像装置１による画像に切り替えて運転者に警告を与える機能を有している。また、操作部３２にはディスプレイ５の表示をオフにするオフスイッチが設けてあり、運転者がオフスイッチを操作することによってディスプレイ５を非表示の状態とすることも可能である。操作部３２が受け付けた操作内容は制御部３１へ通知される。
【００３６】
制御部３１は、ＥＣＵ３内の各部の制御処理及び種々の演算処理等を行うものであり、具体的にはＣＰＵ（Central Processing Unit）又はＭＰＵ（Micro Processing Unit）等により構成してある。制御部３１は、操作部３２から与えられた操作内容に応じて出力部３５の制御を行い、ディスプレイ５に表示する画像の切り替えを行うことができるようにしてある。また、制御部３１は、画像処理部３４と連携して、撮像装置１からの画像に移動物体が移されているか否かを判定する処理を行い、判定結果に応じてディスプレイ５に表示する画像を自動的に切り替える処理を行うようにしてある。
【００３７】
更に制御部３１は、送信部３０から撮像装置１へメッセージとして表示通知を送信することにより撮像装置１の制御部１７のレジスタ１８に表示モードを設定することができ、また、非表示通知を送信することにより撮像装置１のレジスタ１８に判定モードを設定することができる。これにより、撮像装置１の信号処理部１１にて行われる画像処理が制御部１７により変更されるため、ＥＣＵ３の制御部３１は撮像装置１が行う画像処理の変更を行うことができる。更に、撮像装置１へ終了通知をメッセージとして送信することによって、撮像装置１による撮像を終了させることも可能である。
【００３８】
送信部３０は、接続ケーブルを接続するための接続ポートを有し、接続ケーブルを介して撮像装置１に接続され、制御部３１から与えられた制御命令又はメッセージ等を撮像装置１へ送信する処理を行うものである。ただし、撮像装置１及びＥＣＵ３の間で制御命令及びメッセージ等の送受信をＰＬＣにより行う場合には、送信部３０には電力線が接続され、制御部３１から与えられた制御命令又はメッセージ等に係る信号を電力線に重畳して撮像装置１へ送信する。
【００３９】
受信部３３は、接続ケーブルを接続するための接続ポートを有しており、接続ケーブルを介して撮像装置１に接続されている。受信部３３は、撮像装置１から送信されるＬＶＤＳ方式又はＮＴＳＣ方式等の信号を受信し、受信した信号をデジタルデータの画像に変換して画像処理部３４へ与えるようにしてある。
【００４０】
画像処理部３４は、撮像装置１が撮像した画像をディスプレイ５に表示する場合には、受信部３３から与えられた画像を出力部３５へ与えてディスプレイ５に表示する。このときに、画像処理部３４にて画像の視点変換、一部拡大、又はメッセージ若しくはアイコン等の重畳などの画像処理を行ってもよい。
【００４１】
また、撮像装置１が撮像した画像をディスプレイ５に表示しない場合、即ちカーナビゲーション装置７からの画像をディスプレイ５に表示する場合には、画像処理部３４は撮像装置１が異なる時点で撮像した２つの画像を基に、画像中に移動物体が写されているか否かを判定する移動物体判定処理を行うようにしてある。移動物体判定処理は、既知の技術であるため詳細な説明は省略するが、例えば異なる時点で撮像された２つの画像の各画素値の差分を算出し、算出した差分が閾値を超えた場合に移動物体が写されていると判定することができる。また、２つの画像について対応点の探索を行ってオプティカルフローを算出することにより移動物体の判定を行うこともできる。画像処理部３４は、移動物体判定処理による判定結果を制御部３１に通知するようにしてある。
【００４２】
画像処理部３４から移動物体判定処理の判定結果を通知された制御部３１は、移動物体が存在すると判定された場合、撮像装置１へ表示通知をメッセージとして送信すると共に、出力部３５を制御してディスプレイ５に表示する画像をカーナビゲーション装置７の画像から撮像装置１が撮像した画像に切り替えるようにしてある。制御部３１は内部にタイマ（図示は省略する）を有しており、ディスプレイ５に表示する画像を撮像装置１が撮像した画像に切り替えたときにタイマによる計時を開始し、所定時間経過後にディスプレイ５の表示をカーナビゲーション装置７の画像に戻すようにしてある。また、画像処理部３４にて移動物体が存在しないと判定された場合には、制御部３１は表示の切り替えを行わず、カーナビゲーション装置７の画像の表示を継続して行うようにしてある。
【００４３】
なお、上述の自動切換が行われるのは、運転者が操作部３２を操作してカーナビゲーション装置７の画像をディスプレイ５に表示する設定とした場合である。運転者が操作部３２を操作して撮像装置１が撮像した画像をディスプレイ５に表示する設定とした場合には、自動切換は行われず、撮像装置１が撮像した画像が継続的にディスプレイ５に表示される。
【００４４】
また、画像処理部３４が移動物体検出処理又は種々の画像処理等を行う際には、画像メモリ３６に一時的に画像を蓄積することができるようにしてある。画像メモリ３６は、ＳＲＡＭ又はＤＲＡＭ等の書き換え可能な大容量のメモリ素子で構成してあり、受信部３３が受信した画像を一時的に蓄積する受信バッファとしても利用できる。撮像装置１が撮像した画像をディスプレイ５に表示する場合には、画像処理部３４は受信部３３から与えられた画像を、場合によっては種々の画像処理を施した後で、出力部３５へ与えるようにしてある。
【００４５】
出力部３５は、画像処理部３４からの画像とカーナビゲーション装置７からの画像とが与えられており、これらの画像のうちのいずれか一方を制御部３１による制御に応じて選択するようにしてある。出力部３５は、選択した画像をディスプレイ５に適した信号に変換し、この信号をディスプレイ５へ出力するようにしてある。これにより、ディスプレイ５に撮像装置１が撮像した画像又はカーナビゲーション装置７の画像のいずれかが表示される。
【００４６】
図４は、本発明に係る車載撮像システムのＥＣＵ３が行う画像表示制御処理の手順を示すフローチャートである。まず、ＥＣＵ３の制御部３１は、デフォルト表示として、カーナビゲーション装置７の案内画像をディスプレイ５に表示する処理を行う（ステップＳ１）。これは、制御部３１が送信部３０から撮像装置１に非表示通知をメッセージ送信すると共に、出力部３５にカーナビゲーション装置７から与えられる画像をディスプレイ５へ出力するように制御することで行うことができる。
【００４７】
次いで、制御部３１は、運転者により操作部３２のオフスイッチが操作されることにより、ディスプレイ５の表示をオフにする操作がなされたか否かを調べる（ステップＳ２）。表示をオフにする操作がなされた場合（Ｓ２：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ終了通知をメッセージ送信し（ステップＳ３）、撮像装置１の動作を終了させ、ディスプレイ５を非表示として処理を終了する。
【００４８】
表示をオフにする操作がなされていない場合（Ｓ２：ＮＯ）、制御部３１は撮像装置１が撮像した画像を受信部３３にて受信したか否かを調べる（ステップＳ４）。画像を受信していない場合（Ｓ４：ＮＯ）、ステップＳ１へ戻り、制御部３１は上述の処理を繰り返し行う。撮像装置１が撮像した画像を受信した場合には（Ｓ４：ＹＥＳ）、制御部３１は画像処理部３４にて移動物体判定処理を行って（ステップＳ５）、受信した画像中に移動物体が存在するか否かを調べる（ステップＳ６）。移動物体が存在しない場合には（Ｓ６：ＮＯ）、ステップＳ１へ戻り、制御部３１は上述の処理を繰り返し行う。
【００４９】
移動物体判定処理により移動物体が存在すると判定された場合（Ｓ６：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ表示通知をメッセージとして送信する（ステップＳ７）。これにより、撮像装置１を表示モードに設定することができる。次いで、制御部３１は撮像装置１が撮像した画像をディスプレイ５に表示する処理を行う（ステップＳ８）。これは、受信部３３にて受信された画像を画像処理部３４から出力部３５へ与えると共に、出力部３５に画像処理部３４から与えられる画像をディスプレイ５へ出力するように制御することで行うことができる。なお、このときに制御部３１はタイマによる計時を開始するようにしてある。
【００５０】
次いで、制御部３１は運転者により操作部３２のオフスイッチが操作されることにより、ディスプレイ５の表示をオフにする操作がなされたか否かを調べる（ステップＳ９）。表示をオフにする操作がなされた場合（Ｓ９：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ終了通知をメッセージ送信し（ステップＳ１０）、撮像装置１の動作を終了させ、ディスプレイ５を非表示として処理を終了する。
【００５１】
表示をオフにする操作がなされていない場合（Ｓ９：ＮＯ）、制御部３１はタイマの計時により、撮像装置１が撮像した画像をディスプレイ５に表示するように表示切替を行った後、所定の時間が経過したか否かを調べる（ステップＳ１１）。所定時間を経過していない場合（Ｓ１１：ＮＯ）、ステップＳ８へ戻り、制御部３１は所定時間が経過するまで撮像装置１が撮像した画像の表示を継続して行う。所定時間を経過した場合（Ｓ１１：ＹＥＳ）、制御部３１は送信部３０から撮像装置１へ非表示通知をメッセージとして送信する（ステップＳ１２）。これにより、制御部３１は撮像装置１を判定モードに設定することができる。その後、ステップＳ１へ戻り、制御部３１はカーナビゲーション装置７の案内画像を表示する処理を行って、ステップＳ２又はＳ９にて表示をオフにする操作がなされるまで、ステップＳ１〜Ｓ１２の処理を繰り返し行う。
【００５２】
図５は、本発明に係る車載撮像システムの撮像装置１が行う撮像処理の手順を示すフローチャートである。まず、撮像装置１の制御部１７は、デフォルトの制御モードとして、判定モードが設定される（ステップＳ２１）。次いで、制御部１７は受信部１９がＥＣＵ３からの終了通知をメッセージとして受信したか否かを調べ（ステップＳ２２）、終了通知を受信した場合には（Ｓ２２：ＹＥＳ）、撮像処理を終了する。
【００５３】
受信部１９にて終了通知を受信していない場合には（Ｓ２２：ＮＯ）、制御部１７は更に受信部１９にて表示通知をメッセージとして受信したか否かを調べる（ステップＳ２３）。また、表示通知を受信していない場合には（Ｓ２３：ＮＯ）、制御部１７は更に受信部１９にて非表示通知をメッセージとして受信したか否かを調べる（ステップＳ２４）。受信部１９にて非表示通知を受信していない場合（Ｓ２４：ＮＯ）、即ちいずれの通知も受信していない場合には、ステップＳ２７へ進む。受信部１９にて表示通知を受信した場合には（Ｓ２３：ＹＥＳ）、制御部１７は制御モードを表示モードに設定して（ステップＳ２５）、ステップＳ２７へ進む。受信部１９にて非表示通知を受信した場合には（Ｓ２４：ＹＥＳ）、制御部１７は制御モードを判定モードに設定して（ステップＳ２６）、ステップＳ２７へ進む。
【００５４】
次いで、撮像素子１０による撮像を行い（ステップＳ２７）、制御部１７は制御モードが表示モードであるか否かを調べる（ステップＳ２８）。制御モードが表示モードの場合（Ｓ２８：ＹＥＳ）、制御部１７は信号処理部１１にて撮像素子１０が撮像した画像にゲイン調整の画像処理を行うと共に（ステップＳ２９）、エッジ強調の画像処理を行う（ステップＳ３０）。制御モードが表示モードでない場合（Ｓ２８：ＮＯ）、即ち制御モードが判定モードの場合には、制御部１７は信号処理部１１にて撮像素子１０が撮像したカラーの画像を白黒の画像に変換するカラー変換の画像処理を行う（ステップＳ３１）。信号処理部１１による画像処理が終了した後、制御部１７は画像処理を施した画像を送信部１５からＥＣＵ３へ送信し（ステップＳ３２）、ステップＳ２２へ戻る。その後、ＥＣＵ３からの終了通知を受信するまで制御部１７はステップＳ２２〜Ｓ３２の処理を繰り返し行う。
【００５５】
以上の構成の車載撮像システムにおいては、撮像装置１が撮像した画像をディスプレイ５に表示するか否かに応じて、撮像装置１が信号処理部１１にてそれぞれ異なる画像処理を施してＥＣＵ３へ送信する構成とすることにより、ＥＣＵ３は表示又は判定に最適な画像処理を施された画像を取得することができる。よって、表示用及び判定用にそれぞれ別の撮像装置を車輌に搭載する事なく、ディスプレイ５に視認性の高い画像を表示することができると共に、ＥＣＵ３が行う移動物体判定処理の精度を高めることができるため、利便性が高く高品質な車載撮像システムを低コストで提供することができる。
【００５６】
なお、本実施の形態においては、ディスプレイ５に撮像装置１が撮像した画像又はカーナビゲーション装置７の画像のいずれかを選択して表示する構成としたが、車輌に搭載する装置はカーナビゲーション装置７に限るものではなく、その他の装置（例えばテレビジョン装置）を搭載した場合には、この装置からの画像又は撮像装置１からの画像のいずれかを選択して表示する構成であってもよい。また、その他の装置は１つに限らず、複数であってもよい。
【００５７】
また、車輌に撮像装置１を１つ搭載する構成としたが、これに限るものではなく、複数の撮像装置１を車輌に搭載する構成であってもよい。この場合には、ＥＣＵ３は複数の撮像装置１からの画像とその他の装置からの画像との複数の画像からディスプレイ５に表示する画像を選択する。また、一の撮像装置１からの画像をディスプレイ５に表示する場合には、ＥＣＵ３は一の撮像装置１のみを表示モードに設定し、他の撮像装置１を判定モードに設定し、他の撮像装置１からの画像を受信して各撮像装置１について移動物体判定処理を行う。
【００５８】
また、撮像装置１が撮像した画像をディスプレイ５に表示するか否かを移動物体判定処理により決定する構成としたが、これに限るものではなく、例えば撮像装置１から与えられた画像から白線の抽出を行って、画像中に駐車場又は車道等が写されているか否かに応じて決定する構成としてもよく、その他の方法で決定してもよい。また、撮像装置１の信号処理部１１にて行う画像処理をゲイン調整、エッジ強調及びカラー変換の３種としたが、これに限るものではなく、その他の画像処理を行う構成であってもよい。
【００５９】
また、図４及び図５にて示した手順では、ＥＣＵ３の操作部３２にて表示をオフにする操作がなされた場合に、ディスプレイ５への画像の表示を終了する構成としたが、これに限るものではなく、車輌のエンジンが停止された場合などの他の場合にも表示を終了する構成としてもよい。また、表示をオフにする操作がなされた場合であっても、ディスプレイ５に画像を表示する事なく移動物体判定処理は継続して行い、移動物体が存在すると判定された場合にはディスプレイ５の表示をオンにして撮像装置１が撮像した画像を表示する構成としてもよい。また、ディスプレイ５の表示を自動的に切り替えて撮像装置１が撮像した画像を表示した後、所定時間が経過した場合に表示を元に戻す構成としたが、これに限るものではなく、その他の条件で表示を元に戻す構成としてもよい。例えば、所定時間が経過した場合に移動物体判定処理を再度行い、移動物体が存在しない場合にのみ表示を戻す構成とすることができる。
【図面の簡単な説明】
【００６０】
【図１】本発明に係る車載撮像システムの構成を示すブロック図である。
【図２】本発明に係る車載撮像システムの構成を示すブロック図である。
【図３】制御モードと画像処理との対応関係を示す図表である。
【図４】本発明に係る車載撮像システムのＥＣＵが行う画像表示制御処理の手順を示すフローチャートである。
【図５】本発明に係る車載撮像システムの撮像装置が行う撮像処理の手順を示すフローチャートである。
【符号の説明】
【００６１】
１ 撮像装置
３ ＥＣＵ（表示制御装置）
５ ディスプレイ（表示手段）
７ カーナビゲーション装置
１０ 撮像素子
１１ 信号処理部
１２ 露出・ゲイン調整部（表示用画像処理手段）
１３ エッジ強調部（表示用画像処理手段）
１４ カラー変換部（判定用画像処理手段）
１５ 送信部（送信手段）
１７ 制御部
１９ 受信部
３０ 送信部（通知手段）
３１ 制御部（判定手段）
３３ 受信部（受信手段）
３４ 画像処理部
３５ 出力部
【特許請求の範囲】
【請求項１】
車輌に搭載された撮像装置と、該撮像装置が撮像した画像を前記車輌内に設けられた表示手段に表示させる表示制御装置とを備える車載撮像システムにおいて、
前記表示制御装置は、
前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定する判定手段と、
該判定手段の判定結果を前記撮像装置へ通知する通知手段と、
前記撮像装置から送信された画像を受信する受信手段と
を有し、
前記撮像装置は、
前記表示制御装置から画像を表示すると通知された場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、
該表示用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信する送信手段と
を有すること
を特徴とする車載撮像システム。
【請求項２】
前記表示用画像処理手段は、撮像した画像にエッジ強調及び／又はゲイン調整の画像処理を施すようにしてあること
を特徴とする請求項１に記載の車載撮像システム。
【請求項３】
前記撮像装置は、
前記表示制御装置から画像を表示しないと通知された場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段を有し、
前記送信手段が、前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信するようにしてあり、
前記表示制御装置は、
前記判定手段が、前記判定用画像処理手段により画像処理を施された画像を基に、前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定するようにしてあること
を特徴とする請求項１又は請求項２に記載の車載撮像システム。
【請求項４】
前記判定用画像処理手段は、撮像したカラーの画像を白黒の画像に変換する画像処理を施すようにしてあること
を特徴とする請求項３に記載の車載撮像システム。
【請求項５】
車輌に搭載され、通信機能を備える撮像装置において、
特定の通知を受信した場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、
他の通知を受信した場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段と
を備え、
前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を送信するようにしてあること
を特徴とする撮像装置。
【請求項１】
車輌に搭載された撮像装置と、該撮像装置が撮像した画像を前記車輌内に設けられた表示手段に表示させる表示制御装置とを備える車載撮像システムにおいて、
前記表示制御装置は、
前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定する判定手段と、
該判定手段の判定結果を前記撮像装置へ通知する通知手段と、
前記撮像装置から送信された画像を受信する受信手段と
を有し、
前記撮像装置は、
前記表示制御装置から画像を表示すると通知された場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、
該表示用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信する送信手段と
を有すること
を特徴とする車載撮像システム。
【請求項２】
前記表示用画像処理手段は、撮像した画像にエッジ強調及び／又はゲイン調整の画像処理を施すようにしてあること
を特徴とする請求項１に記載の車載撮像システム。
【請求項３】
前記撮像装置は、
前記表示制御装置から画像を表示しないと通知された場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段を有し、
前記送信手段が、前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を前記表示制御装置へ送信するようにしてあり、
前記表示制御装置は、
前記判定手段が、前記判定用画像処理手段により画像処理を施された画像を基に、前記撮像装置が撮像した画像を前記表示手段に表示するか否かを判定するようにしてあること
を特徴とする請求項１又は請求項２に記載の車載撮像システム。
【請求項４】
前記判定用画像処理手段は、撮像したカラーの画像を白黒の画像に変換する画像処理を施すようにしてあること
を特徴とする請求項３に記載の車載撮像システム。
【請求項５】
車輌に搭載され、通信機能を備える撮像装置において、
特定の通知を受信した場合に、撮像した画像に表示用の画像処理を施す表示用画像処理手段と、
他の通知を受信した場合に、撮像した画像に判定用の画像処理を施す判定用画像処理手段と
を備え、
前記表示用画像処理手段又は前記判定用画像処理手段が画像処理を施した画像を送信するようにしてあること
を特徴とする撮像装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２００８−３０６４９６（Ｐ２００８−３０６４９６Ａ）
【公開日】平成２０年１２月１８日（２００８．１２．１８）
【国際特許分類】
【出願番号】特願２００７−１５２０６０（Ｐ２００７−１５２０６０）
【出願日】平成１９年６月７日（２００７．６．７）
【出願人】（３９５０１１６６５）株式会社オートネットワーク技術研究所 (2,668)
【出願人】（０００１８３４０６）住友電装株式会社 (6,135)
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【Ｆターム（参考）】
【公開日】平成２０年１２月１８日（２００８．１２．１８）
【国際特許分類】
【出願日】平成１９年６月７日（２００７．６．７）
【出願人】（３９５０１１６６５）株式会社オートネットワーク技術研究所 (2,668)
【出願人】（０００１８３４０６）住友電装株式会社 (6,135)
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【Ｆターム（参考）】
[ Back to top ]