車両周辺視認装置
【課題】車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる車両周辺視認装置を提供する。
【解決手段】画像処理装置３が、撮像装置１の撮像によって得られる車両周辺の原画像に対してレンズ歪み補正等を施すとともに、ステアリングセンサ５の検出結果に基づいて車両又は車両周辺に設けられた基準点が車両の走行に伴って通過してゆく予測軌跡を予測し、その予測した予測軌跡を、補正処理を施した画像上に重ねて表示する。
【解決手段】画像処理装置３が、撮像装置１の撮像によって得られる車両周辺の原画像に対してレンズ歪み補正等を施すとともに、ステアリングセンサ５の検出結果に基づいて車両又は車両周辺に設けられた基準点が車両の走行に伴って通過してゆく予測軌跡を予測し、その予測した予測軌跡を、補正処理を施した画像上に重ねて表示する。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、車両周辺を撮像し、その画像を歪み補正等を施して車室内の表示装置に表示する車両周辺視認装置に関する。
【０００２】
【従来の技術】
この種の従来技術としては、例えば特許文献１に記載のものがある。この従来技術では、車両周辺の画像に対して、撮像カメラの撮像特性の影響により生じる画像の歪み（カメラ光学的歪み）を補正する補正処理を施すとともに、所定の視点変換を施し、その結果に基づいて車両周辺の様子を示す合成画像を作成して表示するようになっている。
【０００３】
なお、本願発明に関連する発明としては、例えば特許文献２に記載のものがある。
【０００４】
【特許文献１】
特開２００１−３３９７１６公報（請求項１〜３、図５等）
【特許文献２】
特開２００２−２１８４５１公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上述の従来技術では、車両周辺の様子を示す合成画像を合成して表示するのみであるため、合成画像に基づいて自車とその周辺の各地点との位置関係、距離感や、走行に伴う自車位置の推移等が認識しにくい。
【０００６】
また、上述の従来技術では、画像に基づいて合成した合成画像が表示されるため、車両周辺の状況が合成画像に十分に反映されず、表示画像に基づく車両周辺の視認性が低下する場合がある。
【０００７】
そこで、本発明は、車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる車両周辺視認装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】
前記目的を達成するための技術的手段は、車両周辺を撮像し、その画像を車室内において表示する車両周辺視認装置において、車両前端側における左側又は右側のコーナ部の周辺を含む撮像領域を撮像する撮像カメラと、車室内に設けられた表示部と、車両のステアリングの舵角を検出するステアリングセンサと、前記撮像カメラの撮像によって得られた画像に対し、前記撮像カメラの撮像特性の影響により生じる歪みを補正する歪み補正処理を施してその画像を前記表示部に表示させるとともに、車両又は車両周辺に設けられた所定の基準点が車両の走行に伴って通過してゆく予測軌跡を前記ステアリングセンサの検出結果に基づいて予測し、その予測軌跡を前記画像上の対応する位置に重ねた状態で前記表示部に表示させる処理部と、を備えている。
【０００９】
また、好ましくは、前記処理部は、さらに、前記歪み補正処理が施された前記画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理を施し、その第１の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１０】
さらに、好ましくは、前記処理部は、さらに、前記歪み補正処理及び前記第１の視点変換処理が施された前記画像に対し、その画像上における車両の直進方向が画像の縦方向と平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理を施し、その回転変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１１】
また、好ましくは、前記処理部は、さらに、前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理が施された前記画像に対し、前記撮像領域をあたかも車窓から顔を出して視認したような画像に変換するための第２の視点変換処理を施し、その第２の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１２】
さらに、好ましくは、前記処理部は、車両の左端部又は右端部に対応する地面上の地点に対応して設けられた第１の基準点、及び前記左端部又は右端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点のうちの少なくともいずれか一方に対応する前記予測軌跡を前記画像に重ねて前記表示部に表示させるのがよい。
【００１３】
また、好ましくは、前記画像に施す処理のモードを切り替えるための第１の操作入力を受け付ける第１の入力受付部をさらに備え、前記処理部は、さらに、前記撮像カメラの撮像によって得られた前記画像に施す処理のモードを、前記第１の入力受付部が受け付けた第１の操作入力に応じて以下の第１ないし第４の処理モードのいずれかに切り替え、そのいずれかの処理モードに対応する処理を前記画像に施し、前記表示装置に表示させ、前記第１の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対し、前記歪み補正処理を施し、前記第２の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理をさらに施し、前記第３の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理及び前記第１の視点変換処理を施し、その画像に対し、その画像上における車両の直進方向と画像の縦方向とが平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理をさらに施し、前記第４の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理を施し、その画像に対し、前記撮像領域をあたかも車窓から頭を出して視認したような画像に変換するための第２の視点変換処理をさらに施すのがよい。
【００１４】
さらに、好ましくは、前記画像に重ねて表示する前記予測軌跡の表示の有無をオン、オフ切り替えするための第２の操作入力を受け付ける第２の入力受付部をさらに備え、前記処理部は、さらに、前記画像に重ねて表示する前記予測軌跡の表示の有無を、前記第２の入力受付部が受け付けた前記第２の操作入力に応じてオン、オフ切り替えするのがよい。
【００１５】
また、好ましくは、前記撮像領域内における自車から第１の基準距離の範囲内に自車と接触の可能性のある障害物があるか否かを検出する障害物センサをさらに備え、前記処理部は、さらに、前記表示部が前記撮像カメラの撮像によって得られた前記画像の表示を行っていない状態において、前記障害物センサが前記障害物の存在を検出した場合には、それに応じて前記画像を前記表示部に表示させるのがよい。
【００１６】
さらに、好ましくは、前記撮像領域内における自車と接触の可能性のある障害物と自車との距離を検出する距離センサをさらに備え、前記処理部は、さらに、前記距離センサが検出した前記距離が第２の基準距離を上回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかも前記撮像カメラの視点以外の視点から見たような画像に変換するための視点変換処理をさらに施し、その上に前記予測軌跡を重ねて前記表示部に表示させる一方、前記距離センサが検出した前記距離が前記第２の基準距離を下回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、前記視点変換処理を施すことなく、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１７】
【発明の実施の形態】
＜第１実施形態＞
図１は、本発明の第１実施形態に係る車両周辺視認装置のブロック図である。この車両周辺視認装置は、図１に示すように、撮像装置（撮像カメラ）１と、画像処理装置（処理部）３と、ステアリングセンサ５と、表示装置（表示部）７と、入力装置（第１及び第２の入力受付部）９とを備えている。
【００１８】
撮像装置１は、図２に示すように、車両前端部における左側のコーナ部１１等に設置され、そのコーナ部１１の周辺を含む車両周辺の撮像領域Ａを撮像する。なお、本実施形態では、撮像装置１を車両の左側のコーナ部１１等に設置し、そのコーナ部１１の周辺を撮像するようにしたが、撮像装置１を車両前端側における右側のコーナ部１３等に設置し、そのコーナ部１３の周辺を撮像するようにしてもよい。本実施形態では、撮像装置１の撮像方向は、車両の直進方向に対してはその撮像光軸が斜め左前方を向くように設定され、水平方向に対してはその撮像光軸が斜め下方を向くように設定されている。
【００１９】
撮像装置１の構成としては任意の構成を採用できる。例えば、上向き方向に撮像素子及び撮像レンズ系を設置し、撮像レンズ系の上方にミラーを設け、ケースに設けた小窓を介して導入した撮像領域Ａからの光をミラーで反射させて結像レンズ系を介して撮像素子に入射させて撮像を行う構成（ミラー型）を採用してもよく、あるいは、ミラーを使用せずに、撮像素子及び撮像レンズ系を撮像領域Ａに向けて設置し、ケースの小窓から導入した撮像領域Ａからの光を結像レンズ系を介して撮像素子に入射させて撮像を行う構成（直視型）を採用してもよい。また、撮像装置１の車両への設置場所や設置形態としてもに任意の形態を採用でき、例えば、フロントバンパやヘッドライト内に撮像装置１を埋め込んでもよい。なお、撮像装置１の車両への搭載手法は、意匠性、設置の容易性、耐久性等を検討した上で最適な手法を採用する必要がある。
【００２０】
ステアリングセンサ５は、車両のステアリングの舵角を検出する。表示装置７は、車室内における運転席の周辺に設置され、撮像装置１の画像等を表示する。入力装置９は、運転者等からの操作入力を受け付ける。この入力装置９には、画像処理装置３が撮像装置１の画像に対して行う処理の内容を切り替えるための操作入力（第１の操作入力）、及び画像上に重ね合わされて表示される後述する予測軌跡Ｒ１，Ｒ２（図１３参照）の表示のオン、オフ切り替えを行うための操作入力（第２の操作入力）が入力される。
【００２１】
画像処理装置３は、撮像装置１の画像に対して、入力装置９を介した入力された第１の操作入力に対応する処理を施し、その処理後の撮像装置を表示装置７に表示させる機能（画像処理機能）と、予測軌跡Ｒ１，Ｒ２を予測して車両周辺の画像上に重ねて表示する機能（予測軌跡表示機能）とを有している。この画像処理装置３の機能及び動作について以下に詳述する。
【００２２】
まず、画像処理装置３の画像処理機能について説明する。この画像処理機能には、後述する第１ないし第４の処理モードが切替可能に備えられている。また、画像処理機能には、撮像装置１の撮像によって得られた原画像Ｉ１（図３参照）に対して第１ないし第４のいずれの処理モードによる処理を施して表示装置７に表示させるかを、入力装置９を介した操作入力に応じて切り替える機能、及び、原画像Ｉ１を第１ないし第４の処理モードによる処理を施して表示するか、それとも施さずに表示するかを、入力装置９を介した操作入力に応じて切り替える機能が含まれる。
【００２３】
第１の処理モードによる処理から順に説明する。図３は、撮像装置１の撮像によって得られた原画像を示す図である。この図３に示す原画像Ｉ１は、図２に示す撮像領域Ａを撮像して得られたものである。すなわち、図３の原画像Ｉ１上における符号Ｂ１，Ｂ２，Ｂ３で示す部分は、図２内の道路Ｃ１、植木Ｃ２、歩道Ｃ３にそれぞれ対応している。また、原画像Ｉ１上における符号Ｂ４で示す部分は、車体の一部が映り込んだものである。
【００２４】
このような原画像Ｉ１は、撮像装置１を用いた撮像によって生じるカメラ光学的歪みにより歪みが生じている。図３上における矢印Ｄ１〜Ｄ４は、原画像Ｉ１上の各点Ｅ１〜Ｅ４に対応する景色が車両の直進に伴って移動する軌跡を示しており、この矢印Ｄ１〜Ｄ４に示す軌跡の様子からも、原画像Ｉ１に歪みが生じていることが分かる。
【００２５】
そこで、本実施形態では第１の処理モードによる処理として、原画像Ｉ１に対して一般に知られているレンズ歪み補正処理を施すことにより、原画像Ｉ１の歪みを補正するようになっている。具体的には、図４に示すように、原画像Ｉ１上にｘｙ座標系を設定し、そのｘｙ座標系の各点に対応する画像データ（画素データ等）の位置（座標）を所定の関係式に従って補正することにより歪み補正が行われる。
【００２６】
図４に示される補正前の原画像Ｉ１上の点Ｐ１の座標（ｘ１，ｙ１）と、図５に示される補正後の画像Ｉ２上の点Ｐ２の座標（ｘ２，ｙ２）との間には、３次多項式で近似した場合、一般に下記の関係式が成り立つ。
【００２７】
【数１】
【００２８】
ここで、上記式（１）のＣｘ，Ｃｙは原画像Ｉ１上に設定したｘｙ座標系の原点に対するレンズ歪みの中心座標（Ｃｘ，Ｃｙ）の座標値に対応しており、ｋはレンズ歪み係数に対応しており、αは撮像装置１における撮像素子の縦横比に対応し、縦：横＝２：１であればα＝２となる。なお、図４及び図５の設定例では、レンズ歪みの中心座標（Ｃｘ，Ｃｙ）とｘｙ座標系の原点とが一致している。
【００２９】
そして、上記式（１）を補正後の座標値ｘ２，ｙ２について解くと下記の関係式が得られる。
【００３０】
【数２】
【００３１】
これより、例えば、原画像Ｉ１上の各点の画像データ（画素データ等）の位置（座標）を、その補正前の座標値ｘ１，ｙ１を上記式（２）に代入して得られる座標点（ｘ２，ｙ２）に補正することにより、レンズ歪みが補正される。なお、原画像Ｉ１の各点の座標点（ｘ１，ｙ１）と対応する補正後の座標点（ｘ２，ｙ２）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００３２】
図６は、図３の原画像Ｉ１に対して歪み補正処理を施して得られる画像を示す図である。図６に示されるように、歪み補正後の画像Ｉ２はカメラ光学的歪みが補正されていることが分かる。
【００３３】
次に、第２の処理モードによる処理について説明する。この第２の処理モードでは、原画像Ｉ１に対して上述の歪み補正処理を施した上に、その処理後の画像Ｉ２に対して第１の視点変換処理が行われる。この第１の視点変換処理とは、画像Ｉ２を、対応する撮像領域Ａをあたかもその真上から見たような画像に変換するものである。
【００３４】
第１の視点変換処理の具体的内容について、図７を参照して説明する。図７中におけるｘｙ座標系は、レンズ歪み補正処理後の画像Ｉ２に対応したカメラ座標系に対応し、ＸＹＺ座標系は世界座標系に対応している。ｘｙ座標系とＸＹＺ座標系との関係は、撮像装置１の撮像光軸ＧがＸＹＺ座標系の原点Ｏを通り、かつ、撮像光軸ＧがＹＺ面と平行をなし、かつ、ｘｙ座標系の原点ｏとＸＹＺ座標系の原点Ｏとの間の距離が撮像装置１の焦点距離Ｆと等しくなるように設定されている。
【００３５】
また、図７中の仮想平面Ｐは、地面に対応しており、ＸＹＺ座標系においてＸＹ面と平行をなし、Ｚ＝−Ｈを通る。このＨは撮像装置１の地面からの取付高さに対応している。また、撮像光軸ＧとＹ軸とのなす角θは、撮像装置１の斜め下向きに設定された撮像光軸Ｇが水平面となす角（カメラ取付角）に対応している。
【００３６】
そして、第１の視点変換処理は、カメラ座標系（ｘｙ座標系）の画像Ｉ２を、世界座標系（ＸＹＺ座標系）に設定した仮想平面Ｐに原点Ｏに関して対称になるように投影（写像）することにより行われる。この写像において、カメラ座標系の点Ｐ２（ｘ２，ｙ２）と世界座標系の点Ｐ３（ｘ３，ｙ３，−Ｈ）との間には、幾何学的な関係より、下記の関係式が成り立つ。
【００３７】
【数３】
【００３８】
上記式（３）を用いれば、座標点（ｘ３，ｙ３）に対応するカメラ座標系の座標点（ｘ２，ｙ２）が求まる。これにより、例えば、構成すべき画像上の各座標点（ｘ３，ｙ３）に対応する画像Ｉ２上の座標点（ｘ２，ｙ２）の画像データ（画素データ等）を割り当てて画像を変換することにより、画像Ｉ２を、撮像領域Ａをあたかもその真上から見たような画像に変換することができる。なお、原画像Ｉ１に対してレンズ歪み補正処理及び第１の視点変換処理を施して得られる画像上における各座標点（ｘ３，ｙ３）と原画像Ｉ１上の各座標点（ｘ１，ｙ１）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正及び第１の視点変換処理を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００３９】
次に、第３の処理モードによる処理について説明する。図８に示すように、撮像装置１の撮像光軸方向Ｊが車両の直進方向Ｋと平行でなく、直進方向Ｋと所定角度ψを成している。このため、原画像Ｉ１あるいはレンズ歪み補正処理等を施した画像を表示装置７に表示した際に、図６に示すように、表示画像上における車両の直進方向Ｌが画像の縦方向Ｍと平行になっていないため、運転者等がその表示画像中の景色と自車との位置関係を直感的に視認しにくい場合がある。
【００４０】
そこで、本実施形態では、第３の処理モードの処理では、原画像Ｉ１に対して上述の歪み補正処理及び第１の視点変換処理を施した上に、その処理後の画像に対して所定の回転変換処理を行うようになっている。
【００４１】
具体的には、回転変換処理は、図９に示すように、その画像上における車両の直進方向Ｌが画像の縦方向Ｍと平行な関係になるように、画像上の各点Ｐ３（ｘ３，ｙ３）の画像データ（画素データ等）を画像と平行な面内で角度ψだけ回転座標変換した点Ｐ４（ｘ４，ｙ４）に回転させることにより行われる。
【００４２】
すなわち、点Ｐ３（ｘ３，ｙ３）から点Ｐ４（ｘ４，ｙ４）への座標変換（アフィン変換）は、下記の関係式で与えられる。
【００４３】
【数４】
【００４４】
上記式（４）による変換の逆変換は、
【００４５】
【数５】
【００４６】
の関係式で与えられる。この式（５）を用いれば、構成すべき画像上における各点（ｘ４，ｙ４）に対応する回転処理前の画像の各点（ｘ３，ｙ３）が求まる。これにより、例えば、構成すべき画像上の各座標点（ｘ４，ｙ４）に対応する回転処理前のもとの画像の座標点（ｘ３，ｙ３）の画像データ（画素データ等）を割り当てて画像を変換することにより、画像上における車両の直進方向Ｌと画像の縦方向Ｍとが平行な関係にある画像を得ることができる。なお、原画像Ｉ１に対してレンズ歪み補正処理、第１の視点変換処理及び回転変換処理を施して得られる画像上における各座標点（ｘ４，ｙ４）と原画像Ｉ１上の各座標点（ｘ１，ｙ１）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正、第１の視点変換処理及び回転変換処理を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００４７】
次に、第４の処理モードによる処理について説明する。この第４の処理モードでは、原画像Ｉ１に対して上述の歪み補正処理、第１の視点変換処理及び回転変換処理を施した上に、その処理後の画像に対して第２の視点変換処理が行われる。この第２の視点変換処理とは、画像を、対応する撮像領域Ａをあたかも助手席の窓から顔を出して見下ろすようにして視認したような画像に変換するものである。
【００４８】
第２の視点変換処理の具体的内容について、図１０を参照して説明する。図１０中におけるＸＹＺ座標系は世界座標系に対応している。また、ｘｙ座標系は、視認者が助手席の窓から顔を出して撮像領域Ａを視認する際の視点位置を仮想的に設定し、その視点位置から撮像領域Ａの撮像を行って得られる画像の座標系（仮想視点座標系）に対応している。ｘｙ座標系とＸＹＺ座標系との関係は、上記視点位置に仮想的に設置された撮像装置１の撮像光軸ＮがＸＹＺ座標系の原点Ｏを通り、かつ、撮像光軸ＮがＹＺ面と平行をなし、かつ、ｘｙ座標系の原点ｏとＸＹＺ座標系の原点Ｏとの間の距離が撮像装置１の焦点距離Ｆと等しくなるように設定されている。
【００４９】
また、図１０中の仮想平面Ｐ’は、地面に対応しており、ＸＹＺ座標系においてＸＹ面と平行をなし、Ｚ＝−Ｈ’を通る。このＨ’は前記視点位置の地面からの取付高さに対応している。また、撮像光軸ＮとＹ軸とのなす角φは、前記視点位置から撮像領域Ａを見下ろす方向の水平面となす角に対応している。
【００５０】
そして、第２の視点変換処理は、前述の歪み補正処理、第１の視点変換処理及び回転変換処理が施された仮想平面Ｐ’上の画像（もとの画像）を、仮想視点座標系（ｘｙ座標系）に原点Ｏに関して対称となるように投影（写像）することにより行われる。この写像において、仮想平面Ｐ’上のもとの画像上の点Ｐ４（ｘ４，ｙ４，−Ｈ’）と仮想視点座標系の点Ｐ５（ｘ５，ｙ５）との間には、幾何学的な関係より、下記の関係式が成り立つ。
【００５１】
【数６】
【００５２】
上記式（６）を用いれば、座標点（ｘ５，ｙ５）に対応する座標点（ｘ４，ｙ４）が求まる。これにより、例えば、構成すべき画像上の各座標点（ｘ５，ｙ５）に対応するもとの画像上の座標点（ｘ４，ｙ４）の画像データ（画素データ等）を割り当てて画像を変換することにより、助手席の窓から顔を出して撮像領域Ａを見下ろしたときに視認されるような画像を得ることができる。なお、原画像Ｉ１に対してレンズ歪み補正処理、第１の視点変換処理、回転変換処理及び第２の視点変換処理を施して得られる画像上における各座標点（ｘ５，ｙ５）と原画像Ｉ１上の各座標点（ｘ１，ｙ１）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正、第１の視点変換処理、回転変換処理及び第２の視点変換処理を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００５３】
図１１は、図３の原画像Ｉ１に対して第４の処理モードによる歪み補正処理、第１の視点変換処理、回転変換処理及び第２の視点変換処理を施して得られる画像を示す図である。図１１に示されるように、処理後の画像Ｉ３は、カメラ光学的歪みが補正され、画像Ｉ３上における車両の直進方向Ｌと画像の縦方向Ｍとが平行な関係にあり、しかも、あたかも助手席の窓から顔を出して撮像領域Ａを見下ろしたときに視認されるような画像に変換されていることが分かる。ここで、図１１の画像Ｉ３は、図１２に示す略矩形の領域Ａ１からハッチングを付して示す領域Ａ２，Ａ３を除いた領域を撮像領域Ａとして撮像して得られた画像である。また、画像Ｉ３上におけるハッチングを付して示す部分Ｂ５，Ｂ６は、変換処理に伴って画像の欠けが生じた部分を示しており、所定の色（例えば、黒色）によるベタ画像が表示される。
【００５４】
次に、上述の第１ないし第４の処理モードの切り替え動作等について説明する。撮像装置１の撮像によって得られた原画像Ｉ１に対して第１ないし第４のいずれの処理モードによる処理を施して表示装置７に表示させるかは、運転者等が入力装置９を介して操作入力を行うことにより切り替えられるようになっている。すなわち、例えば、第１の処理モードが選択された場合には、原画像Ｉ１に対してレンズ歪み補正処理が施され、その処理後の画像Ｉ２が表示装置７に表示され、第４の処理モードが選択された場合には、原画像Ｉ１に対してレンズ歪み補正処理、第１の視点変換処理、回転変換処理及び第２の視点変換処理が施され、その処理後の画像Ｉ３が表示装置７に表示される。
【００５５】
また、原画像Ｉ１を第１ないし第４の処理モードによる処理を施して表示するか、それともその処理を施さずに表示するかについても、運転者等が入力装置９を介して操作入力を行うことにより切り替えられるようになっている。すなわち、原画像Ｉ１を処理を施して表示するモードが選択されている場合には、第１ないし第４の処理モードのうちのその時点で選択されている処理モードによる処理が原画像Ｉ１に施され、その処理後の画像が表示装置７に表示され、原画像Ｉ１をそのまま表示装置７に表示させるモードが選択されている場合には、原画像Ｉ１ががそのまま表示装置７に表示される。
【００５６】
次に、画像処理装置３の予測軌跡表示機能について説明する。画像処理装置３は、車両又は車両周辺に設けられた基準点が車両の走行に伴って通過してゆく予測軌跡Ｒ１，Ｒ２（図１３参照）をステアリングセンサ５の検出結果に基づいて予測し、その予測軌跡Ｒ１，Ｒ２を、表示装置７に表示する撮像領域Ａの撮像画像上の対応する位置に重ねた状態で表示する。本実施形態では、前記基準点としては、車両の左端部（ここでは、車両前端側における左側のコーナ部１１の端部）に対応する地面上の地点に対応して設けられた第１の基準点と、その左端部（例えば、コーナ部１１の端部）から左方向に所定距離（例えば、５０ｃｍ）だけ離れた地面上の地点に対応して設けられた第２の基準点とが設定されている。そして、予測軌跡Ｒ１は第１の基準点に対応しており、予測軌跡Ｒ２は第２の基準点に対応している。
【００５７】
予測軌跡Ｒ１，Ｒ２の導出方法としては種々の方法が考えられる。例えば、一例として次の方法が考えられる。すなわち、予め第１及び第２の基準点に対応する撮像画像Ｉ１上の各座標点（基準座標点）をメモリに登録しておき、ステアリングセンサ５の検出信号が示すその時点のステアリングの舵角に基づいて、撮像画像Ｉ１上においてその各基準座標点が車両の進行に伴って移動する軌跡を計算する。そして、算出された予測軌跡Ｒ１，Ｒ２の描画像を作成し、撮像画像Ｉ１上の対応する位置に重ね合わせて、重畳画像を作成し、その撮像画像と予測軌跡Ｒ１，Ｒ２の描画像とに対して一緒に上述の第１ないし第４の処理モードによる処理を施して表示を行う。
【００５８】
ここで、図１３及び図１４は原画像Ｉ１に対して第４の処理モードによる処理を施して得られた画像Ｉ３上に予測軌跡Ｒ１，Ｒ２が重ねて表示された例を示し、図１３はステアリングの舵角が０のときの予測軌跡Ｒ１，Ｒ２の状態を示し、図１４はステアリングが右に切られているときの予測軌跡Ｒ１，Ｒ２の状態を示している。また、図１５は原画像Ｉ１に対して第１の処理モードによる処理を施して得られた画像Ｉ２上にステアリングの舵角が０のときの予測軌跡Ｒ１，Ｒ２が重ねて表示された例を示し、図１６は原画像Ｉ１上にステアリングの舵角が０のときの予測軌跡Ｒ１，Ｒ２が重ねて表示された例を示している。
【００５９】
また、画像処理装置３の機能には、予測軌跡Ｒ１，Ｒ２の表示のオン、オフ切り替えを行う機能が含まれている。すなわち、運転者等が入力装置９に対して所定の操作入力を行うと、それに応答して、画像処理装置３が、予測軌跡Ｒ１，Ｒ２を撮像画像上に重ねて表示するか否かのオン、オフ切り替えを行うようになっている。
【００６０】
なお、図１３等に示す例では、２つの予測軌跡Ｒ１，Ｒ２の両方を表示しているが、いずれか一方のみを表示するようにしてもよく、あるいは、入力装置９からの操作入力によりいずれの予測軌跡Ｒ１，Ｒ２を表示させるかを選択できるようにしてもよい。
【００６１】
また、本実施形態では第１及び第２の基準点に対応する２つの予測軌跡Ｒ１，Ｒ２を表示するようにしたが、３つ以上の基準点を設け、それらに対応する３つ以上の予測軌跡を表示するようにしてもよい。また、第２の基準点についても、コーナ部１１の端部から５０ｃｍ以上（例えば、１ｍ）離れた地面上の地点に設定してもよい。
【００６２】
このようにして得られた表示画像を参照することによって、図１７に示すように他の車両等の障害物の近傍をすり抜ける際や、図１８に示すように道路の側縁部等の仮想線で示すスペースＳに幅寄せして駐車する際や、図１９に示すように駐車場の狭い駐車スペースに駐車する際などにおいて、車両周辺の障害物等の状況を的確に認識することができる。
【００６３】
以上のように、本実施形態よれば、上述の第１ないし第４のいずれかの処理モードによる処理を原画像Ｉ１に施して得られる画像上に、車両又はその周辺に設けられた基準点の車両の走行に伴って通過してゆく予測軌跡Ｒ１，Ｒ２を重ねて表示することができるため、車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる。
【００６４】
さらに、本実施形態では、車両の左端部に対応する地面上の地点に対応して設けられた第１の基準点、及び左端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点に対応する予測軌跡Ｒ１，Ｒ２を画像に重ねて表示するため、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等により容易に認識させることができる。
【００６５】
また、上述の第２又は第３の処理モードによる処理では、原画像Ｉ１を、その対応する撮像領域Ａをあたかも真上から見たような画像に変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００６６】
さらに、上述の第３又は第４の処理モードによる処理では、原画像Ｉ１を、その画像Ｉ１上における車両の直進方向が画像の縦方向と平行な関係になるように変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００６７】
また、上述の第４の処理モードによる処理では、撮像領域Ａの原画像Ｉ１を、その撮像領域Ａをあたかも助手席の窓から顔を出して見下ろすようにして視認したような画像Ｉ３に変換して表示するため、画像Ｉ３を直感的に分かりやすい状態で表示することができる。
【００６８】
さらに、原画像Ｉ１に上述の第１ないし４の処理モードによる処理を施すか否か、及び、処理を施す場合に第１ないし第４のいずれの処理モードによる処理を施すかを運転者等が自由に選択することができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００６９】
また、撮像画像に重ねて表示する予測軌跡Ｒ１，Ｒ２の表示の有無を運転者等が自由に切り替えることができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００７０】
＜第２実施形態＞
図２０は、本発明の第２実施形態に係る車両周辺視認装置のブロック図である。本実施形態に係る車両周辺視認装置が前述の第１実施形態に係る車両周辺視認装置と実質的に異なる点は、図２０に示すようにクリアランスセンサ２１を追加した点、及びそのクリアランスセンサ２１の追加に伴って動作内容が一部変更された点のみであり、互いに対応する部分には同一の参照符号を付して説明を省略する。
【００７１】
本実施形態において追加されたクリアランスセンサ２１は、本発明に係る障害物センサに相当するものであり、超音波センサ等により構成され、撮像装置１に対応して車両のコーナ部１１等に設けられ、撮像装置１の自車と接触の可能性のある障害物の有無、及び撮像領域Ａ内に存在する障害物と自車との間の距離を検出する。より詳細には、クリアランスセンサ２１は、撮像領域Ａ内における自車から第１の基準距離の範囲内に自車と接触する可能性のある障害物があるか否かを検出し、その検出結果を画像処理装置３に与える。
【００７２】
画像処理装置３は、表示装置７が撮像装置１の撮像画像の表示を行っていない状態において（例えば、カーナビゲーションのための画像が表示されている場合など）、クリアランスセンサ２１が前記障害物の存在を検出した場合には、それに応じて撮像装置１の撮像画像を表示装置７に表示させるようになっている。このときの撮像画像の表示モード（第１ないし第４の処理モードの処理を行うか否か、処理を行う場合にいずれの処理モードの処理を行うか、及び、予測軌跡Ｒ１，Ｒ２の重ね合わせ表示の有無）は、その時点で設定されているモードが採用されて、撮像画像の表示が行われる。なお、撮像装置１の撮像画像の表示装置７による表示が行われているときに、クリアランスセンサ２１による前記障害物の検出が行われた際には、その撮像画像の表示が継続される。
【００７３】
これによって、表示装置７によってナビゲーション画像等が表示されるなどして、撮像装置１の撮像画像の表示が行われていないときに、撮像領域Ａ内における自車から第１の基準距離の範囲内に自車と接触の可能性がある障害物が検出された場合には、それに伴って、表示装置７の表示状態が切り替えられて、撮像装置１の撮像画像が自動的に表示されるようになっている。
【００７４】
したがって、本実施形態においても、前述の第１実施形態とほぼ同様な効果が得られるとともに、表示装置７が撮像装置１の撮像画像の表示を行っていない状態においても、障害物の接近に伴って表示装置１の表示状態が自動的に切り替えられて、撮像装置１の撮像画像が表示されるため、撮像領域Ａの画像の表示を適切なタイミングで自動的に行わせることができる。
【００７５】
＜第３実施形態＞
本発明の第３実施形態に係る車両周辺視認装置のブロック構成は、前述の図２０に示す第２実施形態に係る構成と同様であるため、図示を省略する。本実施形態に係る車両周辺視認装置が前述の第１実施形態に係る車両周辺視認装置と実質的に異なる点は、図２０に示すようにクリアランスセンサ２１を追加した点、及びそのクリアランスセンサ２１の追加に伴って動作内容が一部変更された点のみであり、互いに対応する部分には同一の参照符号を付して説明を省略する。
【００７６】
本実施形態において追加されたクリアランスセンサ２１は、本発明に係る距離センサに相当するものであり、超音波センサ等により構成され、撮像装置１に対応して車両のコーナ部１１等に設けられ、撮像領域Ａ内に存在するにおける自車と接触の可能性のある障害物と自車との距離を検出し、その検出結果を画像処理装置３に与える。
【００７７】
画像処理装置３は、クリアランスセンサ２１が検出した前記障害物との距離が第２の基準距離を上回っている場合には、上述の第１ないし第４の処理モードのうちのその時点で運転者等により選択されている処理モードによる処理を撮像装置１が撮像した原画像Ｉ１に対して施して、その処理後の画像を表示装置７に表示させる。
【００７８】
一方、クリアランスセンサ２１が検出した前記障害物との距離が前記第２の基準距離を下回っている場合には、画像処理装置３による以下の動作が行われる。この場合には、第２ないし第４の処理モードのよる処理が禁止され、第１の処理モードによる処理が選択可能な状態とされる。そして、前記障害物との距離が前記第２の基準距離を下回った時点で、運転者等により第２ないし第４の処理モードが選択されている場合には、処理モードが第２ないし第４の処理モードから第１の処理モードに強制的に切り替えられ、原画像Ｉ１に対して第１の処理モードによる処理（レンズ歪み補正処理のみ）が施されて、その処理後の画像Ｉ２が表示装置７に表示される。このように処理モードの強制的な切り替えが行われている場合には、前記障害物が前記第２の基準距離の範囲外に遠ざかるのに伴って、処理モードが第１の処理モードから運転者等によって選択されている第２ないし第４の処理モードに自動的に切り替えられる。なお、処理モードとして第１の処理モードが選択されている場合には、前記障害物との距離が前記第２の基準距離を下回っても、そのまま第１の処理モードによる処理が継続される。
【００７９】
ここで、運転者等によって第１ないし第４の処理モードの処理を行わずに原画像１を表示するモードが選択されている場合には、前記障害物との距離が前記第２の基準距離を下回ったか否かにかかわらず、そのモードがそのまま保持される。また、予測軌跡Ｒ１，Ｒ２の表示の有無についての切り替えは、前記障害物との距離が前記第２の基準距離を下回ったか否かにかかわらず、運転者等の操作に基づいて行われる。
【００８０】
このように原画像Ｉ１に対する処理内容を前記障害物との距離に応じて制限するのは、次のような理由による。すなわち、撮像領域Ａ内に障害物等が存在しない場合には、実質的に平らな地面を撮像していることと等価であるため、原画像Ｉ１に対して上述の第１及び第２の視点変換処理を施しても、視点変換処理による画像の歪みの影響は小さなものとなる。しかし、撮像領域Ａ内に障害物等が存在した場合には、障害物は高さを有しているため、視点変換処理により原画像Ｉ１中の障害物等の画像に歪みが生じてしまい、視認性が低下する。そして、その視点変換処理により生じる歪みは、障害物と自車（撮像装置１）との距離が小さくなるほど大きくなる。
【００８１】
そこで、本実施形態では、障害物と自車との距離が一定の水準以下になった場合には、処理内容に視点変換処理を含む第２ないし第４の処理モードの処理が行われないように制限している。
【００８２】
以上のように、本実施形態においても、前述の第１実施形態とほぼ同様な効果が得られるとともに、一定以上の高さを有する障害物が自車の至近距離に存在しているのにもかかわらず、原画像Ｉ１に対して視点変換処理を含む第２なしい第４の処理モードによる処理が行われて画像の歪みが生じ、表示画像の視認性が低下するのを防止することができる。
【００８３】
【発明の効果】
請求項１に記載の発明によれば、カメラ光学的歪みを補正した車両周辺の画像上に、車両又は車両周辺に設けられた基準点が車両の走行に伴って通過してゆく予測軌跡を重ねて表示することができるため、車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる。
【００８４】
請求項２に記載の発明によれば、車両周辺の画像を、その対応する撮像領域をあたかも真上から見たような画像に変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００８５】
請求項３に記載の発明によれば、車両周辺の画像を、その画像上における車両の直進方向が画像の縦方向と平行な関係になるように変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００８６】
請求項４に記載の発明によれば、車両周辺の撮像領域の画像を、その撮像領域をあたかも車窓から顔を出して視認したような画像に変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００８７】
請求項５に記載の発明によれば、車両の左端部又は右端部に対応する地面上の地点に対応して設けられた第１の基準点、及び左端部又は右端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点のうちの少なくともいずれか一方に対応する前記予測軌跡を画像に重ねて表示するため、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等により容易に認識させることができる。
【００８８】
請求項６に記載の発明によれば、車両周辺の画像に対して行う処理の内容を運転者等が自由に切り替えることができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００８９】
請求項７に記載の発明によれば、画像に重ねて表示する前記予測軌跡の表示の有無を運転者等が自由に切り替えることができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００９０】
請求項８に記載の発明によれば、表示部が撮像カメラの画像の表示を行っていない状態において、自車から第１の基準距離の範囲内に障害物があることが障害物センサによって検出された場合には、処理部が撮像カメラの画像を表示部に表示させるようになっているため、車両周辺の画像の表示を適切なタイミングで自動的に行わせることができる。
【００９１】
請求項９に記載の発明によれば、自車と障害物との距離が第２の基準距離を下回っているか否かに応じて、車両周辺の画像に対して視点変換処理を施すか否かを切り替える構成であるため、一定以上の高さを有する障害物が自車の至近距離に存在しているのにもかかわらず、画像に対して視点変換処理が行われて画像の歪みが生じ、表示画像の視認性が低下するのを防止することができる。
【図面の簡単な説明】
【図１】本発明の第１実施形態に係る車両周辺視認装置のブロック図である。
【図２】撮像装置の設置位置及びその撮像領域を示す平面図である。
【図３】撮像装置によって撮像された原画像を示す図である。
【図４】撮像装置の撮像によって生じるカメラ光学的歪みの様子を示す図である。
【図５】歪み補正処理によってカメラ光学的歪みが補正された様子を示す図である。
【図６】図３の原画像に対して歪み補正処理を施して得られる画像を示す図である。
【図７】第１の視点変換処理の説明図である。
【図８】撮像装置の撮像光軸と車両の直進方向との関係を示す図である。
【図９】回転変換処理の説明図である。
【図１０】第２の視点変換処理の説明図である。
【図１１】図３の画像に対して第１の視点変換処理、回転変換処理及び第２の視点変換処理を施して得られる画像を示す図である。
【図１２】撮像装置の撮像領域と図１１の画像との関係を説明するための図である。
【図１３】図１１の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１４】図１１の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１５】図６の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１６】図３の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１７】停車中の他の車両の側方をすり抜ける際の様子を示す図である。
【図１８】道路の側縁部等に幅寄せして駐車する際の様子を示す図である。
【図１９】駐車場での駐車時の様子を示す図である。
【図２０】本発明の第２及び第３実施形態に係る車両周辺視認装置のブロック図である。
【符号の説明】
１ 撮像装置
３ 画像処理装置
５ ステアリングセンサ
７ 表示装置
９ 入力装置
２１ クリアランスソナー
Ａ 撮像領域
Ｉ１ 原画像
Ｉ２，Ｉ３ 画像
Ｌ 直進方向
Ｍ 縦方向
Ｒ１，Ｒ２ 予測軌跡
【０００１】
【発明の属する技術分野】
本発明は、車両周辺を撮像し、その画像を歪み補正等を施して車室内の表示装置に表示する車両周辺視認装置に関する。
【０００２】
【従来の技術】
この種の従来技術としては、例えば特許文献１に記載のものがある。この従来技術では、車両周辺の画像に対して、撮像カメラの撮像特性の影響により生じる画像の歪み（カメラ光学的歪み）を補正する補正処理を施すとともに、所定の視点変換を施し、その結果に基づいて車両周辺の様子を示す合成画像を作成して表示するようになっている。
【０００３】
なお、本願発明に関連する発明としては、例えば特許文献２に記載のものがある。
【０００４】
【特許文献１】
特開２００１−３３９７１６公報（請求項１〜３、図５等）
【特許文献２】
特開２００２−２１８４５１公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上述の従来技術では、車両周辺の様子を示す合成画像を合成して表示するのみであるため、合成画像に基づいて自車とその周辺の各地点との位置関係、距離感や、走行に伴う自車位置の推移等が認識しにくい。
【０００６】
また、上述の従来技術では、画像に基づいて合成した合成画像が表示されるため、車両周辺の状況が合成画像に十分に反映されず、表示画像に基づく車両周辺の視認性が低下する場合がある。
【０００７】
そこで、本発明は、車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる車両周辺視認装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】
前記目的を達成するための技術的手段は、車両周辺を撮像し、その画像を車室内において表示する車両周辺視認装置において、車両前端側における左側又は右側のコーナ部の周辺を含む撮像領域を撮像する撮像カメラと、車室内に設けられた表示部と、車両のステアリングの舵角を検出するステアリングセンサと、前記撮像カメラの撮像によって得られた画像に対し、前記撮像カメラの撮像特性の影響により生じる歪みを補正する歪み補正処理を施してその画像を前記表示部に表示させるとともに、車両又は車両周辺に設けられた所定の基準点が車両の走行に伴って通過してゆく予測軌跡を前記ステアリングセンサの検出結果に基づいて予測し、その予測軌跡を前記画像上の対応する位置に重ねた状態で前記表示部に表示させる処理部と、を備えている。
【０００９】
また、好ましくは、前記処理部は、さらに、前記歪み補正処理が施された前記画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理を施し、その第１の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１０】
さらに、好ましくは、前記処理部は、さらに、前記歪み補正処理及び前記第１の視点変換処理が施された前記画像に対し、その画像上における車両の直進方向が画像の縦方向と平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理を施し、その回転変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１１】
また、好ましくは、前記処理部は、さらに、前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理が施された前記画像に対し、前記撮像領域をあたかも車窓から顔を出して視認したような画像に変換するための第２の視点変換処理を施し、その第２の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１２】
さらに、好ましくは、前記処理部は、車両の左端部又は右端部に対応する地面上の地点に対応して設けられた第１の基準点、及び前記左端部又は右端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点のうちの少なくともいずれか一方に対応する前記予測軌跡を前記画像に重ねて前記表示部に表示させるのがよい。
【００１３】
また、好ましくは、前記画像に施す処理のモードを切り替えるための第１の操作入力を受け付ける第１の入力受付部をさらに備え、前記処理部は、さらに、前記撮像カメラの撮像によって得られた前記画像に施す処理のモードを、前記第１の入力受付部が受け付けた第１の操作入力に応じて以下の第１ないし第４の処理モードのいずれかに切り替え、そのいずれかの処理モードに対応する処理を前記画像に施し、前記表示装置に表示させ、前記第１の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対し、前記歪み補正処理を施し、前記第２の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理をさらに施し、前記第３の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理及び前記第１の視点変換処理を施し、その画像に対し、その画像上における車両の直進方向と画像の縦方向とが平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理をさらに施し、前記第４の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理を施し、その画像に対し、前記撮像領域をあたかも車窓から頭を出して視認したような画像に変換するための第２の視点変換処理をさらに施すのがよい。
【００１４】
さらに、好ましくは、前記画像に重ねて表示する前記予測軌跡の表示の有無をオン、オフ切り替えするための第２の操作入力を受け付ける第２の入力受付部をさらに備え、前記処理部は、さらに、前記画像に重ねて表示する前記予測軌跡の表示の有無を、前記第２の入力受付部が受け付けた前記第２の操作入力に応じてオン、オフ切り替えするのがよい。
【００１５】
また、好ましくは、前記撮像領域内における自車から第１の基準距離の範囲内に自車と接触の可能性のある障害物があるか否かを検出する障害物センサをさらに備え、前記処理部は、さらに、前記表示部が前記撮像カメラの撮像によって得られた前記画像の表示を行っていない状態において、前記障害物センサが前記障害物の存在を検出した場合には、それに応じて前記画像を前記表示部に表示させるのがよい。
【００１６】
さらに、好ましくは、前記撮像領域内における自車と接触の可能性のある障害物と自車との距離を検出する距離センサをさらに備え、前記処理部は、さらに、前記距離センサが検出した前記距離が第２の基準距離を上回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかも前記撮像カメラの視点以外の視点から見たような画像に変換するための視点変換処理をさらに施し、その上に前記予測軌跡を重ねて前記表示部に表示させる一方、前記距離センサが検出した前記距離が前記第２の基準距離を下回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、前記視点変換処理を施すことなく、その上に前記予測軌跡を重ねて前記表示部に表示させるのがよい。
【００１７】
【発明の実施の形態】
＜第１実施形態＞
図１は、本発明の第１実施形態に係る車両周辺視認装置のブロック図である。この車両周辺視認装置は、図１に示すように、撮像装置（撮像カメラ）１と、画像処理装置（処理部）３と、ステアリングセンサ５と、表示装置（表示部）７と、入力装置（第１及び第２の入力受付部）９とを備えている。
【００１８】
撮像装置１は、図２に示すように、車両前端部における左側のコーナ部１１等に設置され、そのコーナ部１１の周辺を含む車両周辺の撮像領域Ａを撮像する。なお、本実施形態では、撮像装置１を車両の左側のコーナ部１１等に設置し、そのコーナ部１１の周辺を撮像するようにしたが、撮像装置１を車両前端側における右側のコーナ部１３等に設置し、そのコーナ部１３の周辺を撮像するようにしてもよい。本実施形態では、撮像装置１の撮像方向は、車両の直進方向に対してはその撮像光軸が斜め左前方を向くように設定され、水平方向に対してはその撮像光軸が斜め下方を向くように設定されている。
【００１９】
撮像装置１の構成としては任意の構成を採用できる。例えば、上向き方向に撮像素子及び撮像レンズ系を設置し、撮像レンズ系の上方にミラーを設け、ケースに設けた小窓を介して導入した撮像領域Ａからの光をミラーで反射させて結像レンズ系を介して撮像素子に入射させて撮像を行う構成（ミラー型）を採用してもよく、あるいは、ミラーを使用せずに、撮像素子及び撮像レンズ系を撮像領域Ａに向けて設置し、ケースの小窓から導入した撮像領域Ａからの光を結像レンズ系を介して撮像素子に入射させて撮像を行う構成（直視型）を採用してもよい。また、撮像装置１の車両への設置場所や設置形態としてもに任意の形態を採用でき、例えば、フロントバンパやヘッドライト内に撮像装置１を埋め込んでもよい。なお、撮像装置１の車両への搭載手法は、意匠性、設置の容易性、耐久性等を検討した上で最適な手法を採用する必要がある。
【００２０】
ステアリングセンサ５は、車両のステアリングの舵角を検出する。表示装置７は、車室内における運転席の周辺に設置され、撮像装置１の画像等を表示する。入力装置９は、運転者等からの操作入力を受け付ける。この入力装置９には、画像処理装置３が撮像装置１の画像に対して行う処理の内容を切り替えるための操作入力（第１の操作入力）、及び画像上に重ね合わされて表示される後述する予測軌跡Ｒ１，Ｒ２（図１３参照）の表示のオン、オフ切り替えを行うための操作入力（第２の操作入力）が入力される。
【００２１】
画像処理装置３は、撮像装置１の画像に対して、入力装置９を介した入力された第１の操作入力に対応する処理を施し、その処理後の撮像装置を表示装置７に表示させる機能（画像処理機能）と、予測軌跡Ｒ１，Ｒ２を予測して車両周辺の画像上に重ねて表示する機能（予測軌跡表示機能）とを有している。この画像処理装置３の機能及び動作について以下に詳述する。
【００２２】
まず、画像処理装置３の画像処理機能について説明する。この画像処理機能には、後述する第１ないし第４の処理モードが切替可能に備えられている。また、画像処理機能には、撮像装置１の撮像によって得られた原画像Ｉ１（図３参照）に対して第１ないし第４のいずれの処理モードによる処理を施して表示装置７に表示させるかを、入力装置９を介した操作入力に応じて切り替える機能、及び、原画像Ｉ１を第１ないし第４の処理モードによる処理を施して表示するか、それとも施さずに表示するかを、入力装置９を介した操作入力に応じて切り替える機能が含まれる。
【００２３】
第１の処理モードによる処理から順に説明する。図３は、撮像装置１の撮像によって得られた原画像を示す図である。この図３に示す原画像Ｉ１は、図２に示す撮像領域Ａを撮像して得られたものである。すなわち、図３の原画像Ｉ１上における符号Ｂ１，Ｂ２，Ｂ３で示す部分は、図２内の道路Ｃ１、植木Ｃ２、歩道Ｃ３にそれぞれ対応している。また、原画像Ｉ１上における符号Ｂ４で示す部分は、車体の一部が映り込んだものである。
【００２４】
このような原画像Ｉ１は、撮像装置１を用いた撮像によって生じるカメラ光学的歪みにより歪みが生じている。図３上における矢印Ｄ１〜Ｄ４は、原画像Ｉ１上の各点Ｅ１〜Ｅ４に対応する景色が車両の直進に伴って移動する軌跡を示しており、この矢印Ｄ１〜Ｄ４に示す軌跡の様子からも、原画像Ｉ１に歪みが生じていることが分かる。
【００２５】
そこで、本実施形態では第１の処理モードによる処理として、原画像Ｉ１に対して一般に知られているレンズ歪み補正処理を施すことにより、原画像Ｉ１の歪みを補正するようになっている。具体的には、図４に示すように、原画像Ｉ１上にｘｙ座標系を設定し、そのｘｙ座標系の各点に対応する画像データ（画素データ等）の位置（座標）を所定の関係式に従って補正することにより歪み補正が行われる。
【００２６】
図４に示される補正前の原画像Ｉ１上の点Ｐ１の座標（ｘ１，ｙ１）と、図５に示される補正後の画像Ｉ２上の点Ｐ２の座標（ｘ２，ｙ２）との間には、３次多項式で近似した場合、一般に下記の関係式が成り立つ。
【００２７】
【数１】
【００２８】
ここで、上記式（１）のＣｘ，Ｃｙは原画像Ｉ１上に設定したｘｙ座標系の原点に対するレンズ歪みの中心座標（Ｃｘ，Ｃｙ）の座標値に対応しており、ｋはレンズ歪み係数に対応しており、αは撮像装置１における撮像素子の縦横比に対応し、縦：横＝２：１であればα＝２となる。なお、図４及び図５の設定例では、レンズ歪みの中心座標（Ｃｘ，Ｃｙ）とｘｙ座標系の原点とが一致している。
【００２９】
そして、上記式（１）を補正後の座標値ｘ２，ｙ２について解くと下記の関係式が得られる。
【００３０】
【数２】
【００３１】
これより、例えば、原画像Ｉ１上の各点の画像データ（画素データ等）の位置（座標）を、その補正前の座標値ｘ１，ｙ１を上記式（２）に代入して得られる座標点（ｘ２，ｙ２）に補正することにより、レンズ歪みが補正される。なお、原画像Ｉ１の各点の座標点（ｘ１，ｙ１）と対応する補正後の座標点（ｘ２，ｙ２）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００３２】
図６は、図３の原画像Ｉ１に対して歪み補正処理を施して得られる画像を示す図である。図６に示されるように、歪み補正後の画像Ｉ２はカメラ光学的歪みが補正されていることが分かる。
【００３３】
次に、第２の処理モードによる処理について説明する。この第２の処理モードでは、原画像Ｉ１に対して上述の歪み補正処理を施した上に、その処理後の画像Ｉ２に対して第１の視点変換処理が行われる。この第１の視点変換処理とは、画像Ｉ２を、対応する撮像領域Ａをあたかもその真上から見たような画像に変換するものである。
【００３４】
第１の視点変換処理の具体的内容について、図７を参照して説明する。図７中におけるｘｙ座標系は、レンズ歪み補正処理後の画像Ｉ２に対応したカメラ座標系に対応し、ＸＹＺ座標系は世界座標系に対応している。ｘｙ座標系とＸＹＺ座標系との関係は、撮像装置１の撮像光軸ＧがＸＹＺ座標系の原点Ｏを通り、かつ、撮像光軸ＧがＹＺ面と平行をなし、かつ、ｘｙ座標系の原点ｏとＸＹＺ座標系の原点Ｏとの間の距離が撮像装置１の焦点距離Ｆと等しくなるように設定されている。
【００３５】
また、図７中の仮想平面Ｐは、地面に対応しており、ＸＹＺ座標系においてＸＹ面と平行をなし、Ｚ＝−Ｈを通る。このＨは撮像装置１の地面からの取付高さに対応している。また、撮像光軸ＧとＹ軸とのなす角θは、撮像装置１の斜め下向きに設定された撮像光軸Ｇが水平面となす角（カメラ取付角）に対応している。
【００３６】
そして、第１の視点変換処理は、カメラ座標系（ｘｙ座標系）の画像Ｉ２を、世界座標系（ＸＹＺ座標系）に設定した仮想平面Ｐに原点Ｏに関して対称になるように投影（写像）することにより行われる。この写像において、カメラ座標系の点Ｐ２（ｘ２，ｙ２）と世界座標系の点Ｐ３（ｘ３，ｙ３，−Ｈ）との間には、幾何学的な関係より、下記の関係式が成り立つ。
【００３７】
【数３】
【００３８】
上記式（３）を用いれば、座標点（ｘ３，ｙ３）に対応するカメラ座標系の座標点（ｘ２，ｙ２）が求まる。これにより、例えば、構成すべき画像上の各座標点（ｘ３，ｙ３）に対応する画像Ｉ２上の座標点（ｘ２，ｙ２）の画像データ（画素データ等）を割り当てて画像を変換することにより、画像Ｉ２を、撮像領域Ａをあたかもその真上から見たような画像に変換することができる。なお、原画像Ｉ１に対してレンズ歪み補正処理及び第１の視点変換処理を施して得られる画像上における各座標点（ｘ３，ｙ３）と原画像Ｉ１上の各座標点（ｘ１，ｙ１）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正及び第１の視点変換処理を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００３９】
次に、第３の処理モードによる処理について説明する。図８に示すように、撮像装置１の撮像光軸方向Ｊが車両の直進方向Ｋと平行でなく、直進方向Ｋと所定角度ψを成している。このため、原画像Ｉ１あるいはレンズ歪み補正処理等を施した画像を表示装置７に表示した際に、図６に示すように、表示画像上における車両の直進方向Ｌが画像の縦方向Ｍと平行になっていないため、運転者等がその表示画像中の景色と自車との位置関係を直感的に視認しにくい場合がある。
【００４０】
そこで、本実施形態では、第３の処理モードの処理では、原画像Ｉ１に対して上述の歪み補正処理及び第１の視点変換処理を施した上に、その処理後の画像に対して所定の回転変換処理を行うようになっている。
【００４１】
具体的には、回転変換処理は、図９に示すように、その画像上における車両の直進方向Ｌが画像の縦方向Ｍと平行な関係になるように、画像上の各点Ｐ３（ｘ３，ｙ３）の画像データ（画素データ等）を画像と平行な面内で角度ψだけ回転座標変換した点Ｐ４（ｘ４，ｙ４）に回転させることにより行われる。
【００４２】
すなわち、点Ｐ３（ｘ３，ｙ３）から点Ｐ４（ｘ４，ｙ４）への座標変換（アフィン変換）は、下記の関係式で与えられる。
【００４３】
【数４】
【００４４】
上記式（４）による変換の逆変換は、
【００４５】
【数５】
【００４６】
の関係式で与えられる。この式（５）を用いれば、構成すべき画像上における各点（ｘ４，ｙ４）に対応する回転処理前の画像の各点（ｘ３，ｙ３）が求まる。これにより、例えば、構成すべき画像上の各座標点（ｘ４，ｙ４）に対応する回転処理前のもとの画像の座標点（ｘ３，ｙ３）の画像データ（画素データ等）を割り当てて画像を変換することにより、画像上における車両の直進方向Ｌと画像の縦方向Ｍとが平行な関係にある画像を得ることができる。なお、原画像Ｉ１に対してレンズ歪み補正処理、第１の視点変換処理及び回転変換処理を施して得られる画像上における各座標点（ｘ４，ｙ４）と原画像Ｉ１上の各座標点（ｘ１，ｙ１）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正、第１の視点変換処理及び回転変換処理を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００４７】
次に、第４の処理モードによる処理について説明する。この第４の処理モードでは、原画像Ｉ１に対して上述の歪み補正処理、第１の視点変換処理及び回転変換処理を施した上に、その処理後の画像に対して第２の視点変換処理が行われる。この第２の視点変換処理とは、画像を、対応する撮像領域Ａをあたかも助手席の窓から顔を出して見下ろすようにして視認したような画像に変換するものである。
【００４８】
第２の視点変換処理の具体的内容について、図１０を参照して説明する。図１０中におけるＸＹＺ座標系は世界座標系に対応している。また、ｘｙ座標系は、視認者が助手席の窓から顔を出して撮像領域Ａを視認する際の視点位置を仮想的に設定し、その視点位置から撮像領域Ａの撮像を行って得られる画像の座標系（仮想視点座標系）に対応している。ｘｙ座標系とＸＹＺ座標系との関係は、上記視点位置に仮想的に設置された撮像装置１の撮像光軸ＮがＸＹＺ座標系の原点Ｏを通り、かつ、撮像光軸ＮがＹＺ面と平行をなし、かつ、ｘｙ座標系の原点ｏとＸＹＺ座標系の原点Ｏとの間の距離が撮像装置１の焦点距離Ｆと等しくなるように設定されている。
【００４９】
また、図１０中の仮想平面Ｐ’は、地面に対応しており、ＸＹＺ座標系においてＸＹ面と平行をなし、Ｚ＝−Ｈ’を通る。このＨ’は前記視点位置の地面からの取付高さに対応している。また、撮像光軸ＮとＹ軸とのなす角φは、前記視点位置から撮像領域Ａを見下ろす方向の水平面となす角に対応している。
【００５０】
そして、第２の視点変換処理は、前述の歪み補正処理、第１の視点変換処理及び回転変換処理が施された仮想平面Ｐ’上の画像（もとの画像）を、仮想視点座標系（ｘｙ座標系）に原点Ｏに関して対称となるように投影（写像）することにより行われる。この写像において、仮想平面Ｐ’上のもとの画像上の点Ｐ４（ｘ４，ｙ４，−Ｈ’）と仮想視点座標系の点Ｐ５（ｘ５，ｙ５）との間には、幾何学的な関係より、下記の関係式が成り立つ。
【００５１】
【数６】
【００５２】
上記式（６）を用いれば、座標点（ｘ５，ｙ５）に対応する座標点（ｘ４，ｙ４）が求まる。これにより、例えば、構成すべき画像上の各座標点（ｘ５，ｙ５）に対応するもとの画像上の座標点（ｘ４，ｙ４）の画像データ（画素データ等）を割り当てて画像を変換することにより、助手席の窓から顔を出して撮像領域Ａを見下ろしたときに視認されるような画像を得ることができる。なお、原画像Ｉ１に対してレンズ歪み補正処理、第１の視点変換処理、回転変換処理及び第２の視点変換処理を施して得られる画像上における各座標点（ｘ５，ｙ５）と原画像Ｉ１上の各座標点（ｘ１，ｙ１）との対応関係を示す変換テーブルを予めＲＯＭに内蔵しておき、その変換テーブルを用いて歪み補正、第１の視点変換処理、回転変換処理及び第２の視点変換処理を行うのが望ましい。これによって、座標値についての計算を逐次行う必要がなくなるという利点がある。
【００５３】
図１１は、図３の原画像Ｉ１に対して第４の処理モードによる歪み補正処理、第１の視点変換処理、回転変換処理及び第２の視点変換処理を施して得られる画像を示す図である。図１１に示されるように、処理後の画像Ｉ３は、カメラ光学的歪みが補正され、画像Ｉ３上における車両の直進方向Ｌと画像の縦方向Ｍとが平行な関係にあり、しかも、あたかも助手席の窓から顔を出して撮像領域Ａを見下ろしたときに視認されるような画像に変換されていることが分かる。ここで、図１１の画像Ｉ３は、図１２に示す略矩形の領域Ａ１からハッチングを付して示す領域Ａ２，Ａ３を除いた領域を撮像領域Ａとして撮像して得られた画像である。また、画像Ｉ３上におけるハッチングを付して示す部分Ｂ５，Ｂ６は、変換処理に伴って画像の欠けが生じた部分を示しており、所定の色（例えば、黒色）によるベタ画像が表示される。
【００５４】
次に、上述の第１ないし第４の処理モードの切り替え動作等について説明する。撮像装置１の撮像によって得られた原画像Ｉ１に対して第１ないし第４のいずれの処理モードによる処理を施して表示装置７に表示させるかは、運転者等が入力装置９を介して操作入力を行うことにより切り替えられるようになっている。すなわち、例えば、第１の処理モードが選択された場合には、原画像Ｉ１に対してレンズ歪み補正処理が施され、その処理後の画像Ｉ２が表示装置７に表示され、第４の処理モードが選択された場合には、原画像Ｉ１に対してレンズ歪み補正処理、第１の視点変換処理、回転変換処理及び第２の視点変換処理が施され、その処理後の画像Ｉ３が表示装置７に表示される。
【００５５】
また、原画像Ｉ１を第１ないし第４の処理モードによる処理を施して表示するか、それともその処理を施さずに表示するかについても、運転者等が入力装置９を介して操作入力を行うことにより切り替えられるようになっている。すなわち、原画像Ｉ１を処理を施して表示するモードが選択されている場合には、第１ないし第４の処理モードのうちのその時点で選択されている処理モードによる処理が原画像Ｉ１に施され、その処理後の画像が表示装置７に表示され、原画像Ｉ１をそのまま表示装置７に表示させるモードが選択されている場合には、原画像Ｉ１ががそのまま表示装置７に表示される。
【００５６】
次に、画像処理装置３の予測軌跡表示機能について説明する。画像処理装置３は、車両又は車両周辺に設けられた基準点が車両の走行に伴って通過してゆく予測軌跡Ｒ１，Ｒ２（図１３参照）をステアリングセンサ５の検出結果に基づいて予測し、その予測軌跡Ｒ１，Ｒ２を、表示装置７に表示する撮像領域Ａの撮像画像上の対応する位置に重ねた状態で表示する。本実施形態では、前記基準点としては、車両の左端部（ここでは、車両前端側における左側のコーナ部１１の端部）に対応する地面上の地点に対応して設けられた第１の基準点と、その左端部（例えば、コーナ部１１の端部）から左方向に所定距離（例えば、５０ｃｍ）だけ離れた地面上の地点に対応して設けられた第２の基準点とが設定されている。そして、予測軌跡Ｒ１は第１の基準点に対応しており、予測軌跡Ｒ２は第２の基準点に対応している。
【００５７】
予測軌跡Ｒ１，Ｒ２の導出方法としては種々の方法が考えられる。例えば、一例として次の方法が考えられる。すなわち、予め第１及び第２の基準点に対応する撮像画像Ｉ１上の各座標点（基準座標点）をメモリに登録しておき、ステアリングセンサ５の検出信号が示すその時点のステアリングの舵角に基づいて、撮像画像Ｉ１上においてその各基準座標点が車両の進行に伴って移動する軌跡を計算する。そして、算出された予測軌跡Ｒ１，Ｒ２の描画像を作成し、撮像画像Ｉ１上の対応する位置に重ね合わせて、重畳画像を作成し、その撮像画像と予測軌跡Ｒ１，Ｒ２の描画像とに対して一緒に上述の第１ないし第４の処理モードによる処理を施して表示を行う。
【００５８】
ここで、図１３及び図１４は原画像Ｉ１に対して第４の処理モードによる処理を施して得られた画像Ｉ３上に予測軌跡Ｒ１，Ｒ２が重ねて表示された例を示し、図１３はステアリングの舵角が０のときの予測軌跡Ｒ１，Ｒ２の状態を示し、図１４はステアリングが右に切られているときの予測軌跡Ｒ１，Ｒ２の状態を示している。また、図１５は原画像Ｉ１に対して第１の処理モードによる処理を施して得られた画像Ｉ２上にステアリングの舵角が０のときの予測軌跡Ｒ１，Ｒ２が重ねて表示された例を示し、図１６は原画像Ｉ１上にステアリングの舵角が０のときの予測軌跡Ｒ１，Ｒ２が重ねて表示された例を示している。
【００５９】
また、画像処理装置３の機能には、予測軌跡Ｒ１，Ｒ２の表示のオン、オフ切り替えを行う機能が含まれている。すなわち、運転者等が入力装置９に対して所定の操作入力を行うと、それに応答して、画像処理装置３が、予測軌跡Ｒ１，Ｒ２を撮像画像上に重ねて表示するか否かのオン、オフ切り替えを行うようになっている。
【００６０】
なお、図１３等に示す例では、２つの予測軌跡Ｒ１，Ｒ２の両方を表示しているが、いずれか一方のみを表示するようにしてもよく、あるいは、入力装置９からの操作入力によりいずれの予測軌跡Ｒ１，Ｒ２を表示させるかを選択できるようにしてもよい。
【００６１】
また、本実施形態では第１及び第２の基準点に対応する２つの予測軌跡Ｒ１，Ｒ２を表示するようにしたが、３つ以上の基準点を設け、それらに対応する３つ以上の予測軌跡を表示するようにしてもよい。また、第２の基準点についても、コーナ部１１の端部から５０ｃｍ以上（例えば、１ｍ）離れた地面上の地点に設定してもよい。
【００６２】
このようにして得られた表示画像を参照することによって、図１７に示すように他の車両等の障害物の近傍をすり抜ける際や、図１８に示すように道路の側縁部等の仮想線で示すスペースＳに幅寄せして駐車する際や、図１９に示すように駐車場の狭い駐車スペースに駐車する際などにおいて、車両周辺の障害物等の状況を的確に認識することができる。
【００６３】
以上のように、本実施形態よれば、上述の第１ないし第４のいずれかの処理モードによる処理を原画像Ｉ１に施して得られる画像上に、車両又はその周辺に設けられた基準点の車両の走行に伴って通過してゆく予測軌跡Ｒ１，Ｒ２を重ねて表示することができるため、車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる。
【００６４】
さらに、本実施形態では、車両の左端部に対応する地面上の地点に対応して設けられた第１の基準点、及び左端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点に対応する予測軌跡Ｒ１，Ｒ２を画像に重ねて表示するため、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等により容易に認識させることができる。
【００６５】
また、上述の第２又は第３の処理モードによる処理では、原画像Ｉ１を、その対応する撮像領域Ａをあたかも真上から見たような画像に変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００６６】
さらに、上述の第３又は第４の処理モードによる処理では、原画像Ｉ１を、その画像Ｉ１上における車両の直進方向が画像の縦方向と平行な関係になるように変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００６７】
また、上述の第４の処理モードによる処理では、撮像領域Ａの原画像Ｉ１を、その撮像領域Ａをあたかも助手席の窓から顔を出して見下ろすようにして視認したような画像Ｉ３に変換して表示するため、画像Ｉ３を直感的に分かりやすい状態で表示することができる。
【００６８】
さらに、原画像Ｉ１に上述の第１ないし４の処理モードによる処理を施すか否か、及び、処理を施す場合に第１ないし第４のいずれの処理モードによる処理を施すかを運転者等が自由に選択することができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００６９】
また、撮像画像に重ねて表示する予測軌跡Ｒ１，Ｒ２の表示の有無を運転者等が自由に切り替えることができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００７０】
＜第２実施形態＞
図２０は、本発明の第２実施形態に係る車両周辺視認装置のブロック図である。本実施形態に係る車両周辺視認装置が前述の第１実施形態に係る車両周辺視認装置と実質的に異なる点は、図２０に示すようにクリアランスセンサ２１を追加した点、及びそのクリアランスセンサ２１の追加に伴って動作内容が一部変更された点のみであり、互いに対応する部分には同一の参照符号を付して説明を省略する。
【００７１】
本実施形態において追加されたクリアランスセンサ２１は、本発明に係る障害物センサに相当するものであり、超音波センサ等により構成され、撮像装置１に対応して車両のコーナ部１１等に設けられ、撮像装置１の自車と接触の可能性のある障害物の有無、及び撮像領域Ａ内に存在する障害物と自車との間の距離を検出する。より詳細には、クリアランスセンサ２１は、撮像領域Ａ内における自車から第１の基準距離の範囲内に自車と接触する可能性のある障害物があるか否かを検出し、その検出結果を画像処理装置３に与える。
【００７２】
画像処理装置３は、表示装置７が撮像装置１の撮像画像の表示を行っていない状態において（例えば、カーナビゲーションのための画像が表示されている場合など）、クリアランスセンサ２１が前記障害物の存在を検出した場合には、それに応じて撮像装置１の撮像画像を表示装置７に表示させるようになっている。このときの撮像画像の表示モード（第１ないし第４の処理モードの処理を行うか否か、処理を行う場合にいずれの処理モードの処理を行うか、及び、予測軌跡Ｒ１，Ｒ２の重ね合わせ表示の有無）は、その時点で設定されているモードが採用されて、撮像画像の表示が行われる。なお、撮像装置１の撮像画像の表示装置７による表示が行われているときに、クリアランスセンサ２１による前記障害物の検出が行われた際には、その撮像画像の表示が継続される。
【００７３】
これによって、表示装置７によってナビゲーション画像等が表示されるなどして、撮像装置１の撮像画像の表示が行われていないときに、撮像領域Ａ内における自車から第１の基準距離の範囲内に自車と接触の可能性がある障害物が検出された場合には、それに伴って、表示装置７の表示状態が切り替えられて、撮像装置１の撮像画像が自動的に表示されるようになっている。
【００７４】
したがって、本実施形態においても、前述の第１実施形態とほぼ同様な効果が得られるとともに、表示装置７が撮像装置１の撮像画像の表示を行っていない状態においても、障害物の接近に伴って表示装置１の表示状態が自動的に切り替えられて、撮像装置１の撮像画像が表示されるため、撮像領域Ａの画像の表示を適切なタイミングで自動的に行わせることができる。
【００７５】
＜第３実施形態＞
本発明の第３実施形態に係る車両周辺視認装置のブロック構成は、前述の図２０に示す第２実施形態に係る構成と同様であるため、図示を省略する。本実施形態に係る車両周辺視認装置が前述の第１実施形態に係る車両周辺視認装置と実質的に異なる点は、図２０に示すようにクリアランスセンサ２１を追加した点、及びそのクリアランスセンサ２１の追加に伴って動作内容が一部変更された点のみであり、互いに対応する部分には同一の参照符号を付して説明を省略する。
【００７６】
本実施形態において追加されたクリアランスセンサ２１は、本発明に係る距離センサに相当するものであり、超音波センサ等により構成され、撮像装置１に対応して車両のコーナ部１１等に設けられ、撮像領域Ａ内に存在するにおける自車と接触の可能性のある障害物と自車との距離を検出し、その検出結果を画像処理装置３に与える。
【００７７】
画像処理装置３は、クリアランスセンサ２１が検出した前記障害物との距離が第２の基準距離を上回っている場合には、上述の第１ないし第４の処理モードのうちのその時点で運転者等により選択されている処理モードによる処理を撮像装置１が撮像した原画像Ｉ１に対して施して、その処理後の画像を表示装置７に表示させる。
【００７８】
一方、クリアランスセンサ２１が検出した前記障害物との距離が前記第２の基準距離を下回っている場合には、画像処理装置３による以下の動作が行われる。この場合には、第２ないし第４の処理モードのよる処理が禁止され、第１の処理モードによる処理が選択可能な状態とされる。そして、前記障害物との距離が前記第２の基準距離を下回った時点で、運転者等により第２ないし第４の処理モードが選択されている場合には、処理モードが第２ないし第４の処理モードから第１の処理モードに強制的に切り替えられ、原画像Ｉ１に対して第１の処理モードによる処理（レンズ歪み補正処理のみ）が施されて、その処理後の画像Ｉ２が表示装置７に表示される。このように処理モードの強制的な切り替えが行われている場合には、前記障害物が前記第２の基準距離の範囲外に遠ざかるのに伴って、処理モードが第１の処理モードから運転者等によって選択されている第２ないし第４の処理モードに自動的に切り替えられる。なお、処理モードとして第１の処理モードが選択されている場合には、前記障害物との距離が前記第２の基準距離を下回っても、そのまま第１の処理モードによる処理が継続される。
【００７９】
ここで、運転者等によって第１ないし第４の処理モードの処理を行わずに原画像１を表示するモードが選択されている場合には、前記障害物との距離が前記第２の基準距離を下回ったか否かにかかわらず、そのモードがそのまま保持される。また、予測軌跡Ｒ１，Ｒ２の表示の有無についての切り替えは、前記障害物との距離が前記第２の基準距離を下回ったか否かにかかわらず、運転者等の操作に基づいて行われる。
【００８０】
このように原画像Ｉ１に対する処理内容を前記障害物との距離に応じて制限するのは、次のような理由による。すなわち、撮像領域Ａ内に障害物等が存在しない場合には、実質的に平らな地面を撮像していることと等価であるため、原画像Ｉ１に対して上述の第１及び第２の視点変換処理を施しても、視点変換処理による画像の歪みの影響は小さなものとなる。しかし、撮像領域Ａ内に障害物等が存在した場合には、障害物は高さを有しているため、視点変換処理により原画像Ｉ１中の障害物等の画像に歪みが生じてしまい、視認性が低下する。そして、その視点変換処理により生じる歪みは、障害物と自車（撮像装置１）との距離が小さくなるほど大きくなる。
【００８１】
そこで、本実施形態では、障害物と自車との距離が一定の水準以下になった場合には、処理内容に視点変換処理を含む第２ないし第４の処理モードの処理が行われないように制限している。
【００８２】
以上のように、本実施形態においても、前述の第１実施形態とほぼ同様な効果が得られるとともに、一定以上の高さを有する障害物が自車の至近距離に存在しているのにもかかわらず、原画像Ｉ１に対して視点変換処理を含む第２なしい第４の処理モードによる処理が行われて画像の歪みが生じ、表示画像の視認性が低下するのを防止することができる。
【００８３】
【発明の効果】
請求項１に記載の発明によれば、カメラ光学的歪みを補正した車両周辺の画像上に、車両又は車両周辺に設けられた基準点が車両の走行に伴って通過してゆく予測軌跡を重ねて表示することができるため、車両周辺の画像をそのカメラ光学的歪みを補正して見やすくした状態で表示することができるとともに、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等に容易に認識させることができ、表示画像に基づく車両周辺の視認性の向上が図れる。
【００８４】
請求項２に記載の発明によれば、車両周辺の画像を、その対応する撮像領域をあたかも真上から見たような画像に変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００８５】
請求項３に記載の発明によれば、車両周辺の画像を、その画像上における車両の直進方向が画像の縦方向と平行な関係になるように変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００８６】
請求項４に記載の発明によれば、車両周辺の撮像領域の画像を、その撮像領域をあたかも車窓から顔を出して視認したような画像に変換して表示するため、画像を直感的に分かりやすい状態で表示することができる。
【００８７】
請求項５に記載の発明によれば、車両の左端部又は右端部に対応する地面上の地点に対応して設けられた第１の基準点、及び左端部又は右端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点のうちの少なくともいずれか一方に対応する前記予測軌跡を画像に重ねて表示するため、表示画像に基づいて自車とその周辺の各地点との位置関係及び距離感や、走行に伴う自車位置の推移等を運転者等により容易に認識させることができる。
【００８８】
請求項６に記載の発明によれば、車両周辺の画像に対して行う処理の内容を運転者等が自由に切り替えることができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００８９】
請求項７に記載の発明によれば、画像に重ねて表示する前記予測軌跡の表示の有無を運転者等が自由に切り替えることができるため、運転者の好みや車両の走行状況の変化等に柔軟に対応することができる。
【００９０】
請求項８に記載の発明によれば、表示部が撮像カメラの画像の表示を行っていない状態において、自車から第１の基準距離の範囲内に障害物があることが障害物センサによって検出された場合には、処理部が撮像カメラの画像を表示部に表示させるようになっているため、車両周辺の画像の表示を適切なタイミングで自動的に行わせることができる。
【００９１】
請求項９に記載の発明によれば、自車と障害物との距離が第２の基準距離を下回っているか否かに応じて、車両周辺の画像に対して視点変換処理を施すか否かを切り替える構成であるため、一定以上の高さを有する障害物が自車の至近距離に存在しているのにもかかわらず、画像に対して視点変換処理が行われて画像の歪みが生じ、表示画像の視認性が低下するのを防止することができる。
【図面の簡単な説明】
【図１】本発明の第１実施形態に係る車両周辺視認装置のブロック図である。
【図２】撮像装置の設置位置及びその撮像領域を示す平面図である。
【図３】撮像装置によって撮像された原画像を示す図である。
【図４】撮像装置の撮像によって生じるカメラ光学的歪みの様子を示す図である。
【図５】歪み補正処理によってカメラ光学的歪みが補正された様子を示す図である。
【図６】図３の原画像に対して歪み補正処理を施して得られる画像を示す図である。
【図７】第１の視点変換処理の説明図である。
【図８】撮像装置の撮像光軸と車両の直進方向との関係を示す図である。
【図９】回転変換処理の説明図である。
【図１０】第２の視点変換処理の説明図である。
【図１１】図３の画像に対して第１の視点変換処理、回転変換処理及び第２の視点変換処理を施して得られる画像を示す図である。
【図１２】撮像装置の撮像領域と図１１の画像との関係を説明するための図である。
【図１３】図１１の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１４】図１１の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１５】図６の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１６】図３の画像に予測軌跡を重ねて表示した状態を示す図である。
【図１７】停車中の他の車両の側方をすり抜ける際の様子を示す図である。
【図１８】道路の側縁部等に幅寄せして駐車する際の様子を示す図である。
【図１９】駐車場での駐車時の様子を示す図である。
【図２０】本発明の第２及び第３実施形態に係る車両周辺視認装置のブロック図である。
【符号の説明】
１ 撮像装置
３ 画像処理装置
５ ステアリングセンサ
７ 表示装置
９ 入力装置
２１ クリアランスソナー
Ａ 撮像領域
Ｉ１ 原画像
Ｉ２，Ｉ３ 画像
Ｌ 直進方向
Ｍ 縦方向
Ｒ１，Ｒ２ 予測軌跡
【特許請求の範囲】
【請求項１】
車両周辺を撮像し、その画像を車室内において表示する車両周辺視認装置において、
車両前端側における左側又は右側のコーナ部の周辺を含む撮像領域を撮像する撮像カメラと、
車室内に設けられた表示部と、
車両のステアリングの舵角を検出するステアリングセンサと、
前記撮像カメラの撮像によって得られた画像に対し、前記撮像カメラの撮像特性の影響により生じる歪みを補正する歪み補正処理を施してその画像を前記表示部に表示させるとともに、車両又は車両周辺に設けられた所定の基準点が車両の走行に伴って通過してゆく予測軌跡を前記ステアリングセンサの検出結果に基づいて予測し、その予測軌跡を前記画像上の対応する位置に重ねた状態で前記表示部に表示させる処理部と、
を備える、車両周辺視認装置。
【請求項２】
請求項１に記載の車両周辺視認装置において、
前記処理部は、さらに、
前記歪み補正処理が施された前記画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理を施し、その第１の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項３】
請求項２に記載の車両周辺視認装置において、
前記処理部は、さらに、
前記歪み補正処理及び前記第１の視点変換処理が施された前記画像に対し、その画像上における車両の直進方向が画像の縦方向と平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理を施し、その回転変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項４】
請求項３に記載の車両周辺視認装置において、
前記処理部は、さらに、
前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理が施された前記画像に対し、前記撮像領域をあたかも車窓から顔を出して視認したような画像に変換するための第２の視点変換処理を施し、その第２の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項５】
請求項１ないし４のいずれかに記載の車両周辺視認装置において、
前記処理部は、
車両の左端部又は右端部に対応する地面上の地点に対応して設けられた第１の基準点、及び前記左端部又は右端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点のうちの少なくともいずれか一方に対応する前記予測軌跡を前記画像に重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項６】
請求項１に記載の車両周辺視認装置において、
前記画像に施す処理のモードを切り替えるための第１の操作入力を受け付ける第１の入力受付部をさらに備え、
前記処理部は、さらに、
前記撮像カメラの撮像によって得られた前記画像に施す処理のモードを、前記第１の入力受付部が受け付けた第１の操作入力に応じて以下の第１ないし第４の処理モードのいずれかに切り替え、そのいずれかの処理モードに対応する処理を前記画像に施し、前記表示装置に表示させ、
前記第１の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対し、前記歪み補正処理を施し、
前記第２の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理をさらに施し、
前記第３の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理及び前記第１の視点変換処理を施し、その画像に対し、その画像上における車両の直進方向と画像の縦方向とが平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理をさらに施し、
前記第４の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理を施し、その画像に対し、前記撮像領域をあたかも車窓から頭を出して視認したような画像に変換するための第２の視点変換処理をさらに施す、車両周辺視認装置。
【請求項７】
請求項１に記載の車両周辺視認装置において、
前記画像に重ねて表示する前記予測軌跡の表示の有無をオン、オフ切り替えするための第２の操作入力を受け付ける第２の入力受付部をさらに備え、
前記処理部は、さらに、
前記画像に重ねて表示する前記予測軌跡の表示の有無を、前記第２の入力受付部が受け付けた前記第２の操作入力に応じてオン、オフ切り替えする、車両周辺視認装置。
【請求項８】
請求項１に記載の車両周辺視認装置において、
前記撮像領域内における自車から第１の基準距離の範囲内に自車と接触の可能性のある障害物があるか否かを検出する障害物センサをさらに備え、
前記処理部は、さらに、
前記表示部が前記撮像カメラの撮像によって得られた前記画像の表示を行っていない状態において、前記障害物センサが前記障害物の存在を検出した場合には、それに応じて前記画像を前記表示部に表示させる、車両周辺視認装置。
【請求項９】
請求項１に記載の車両周辺視認装置において、
前記撮像領域内における自車と接触の可能性のある障害物と自車との距離を検出する距離センサをさらに備え、
前記処理部は、さらに、
前記距離センサが検出した前記距離が第２の基準距離を上回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかも前記撮像カメラの視点以外の視点から見たような画像に変換するための視点変換処理をさらに施し、その上に前記予測軌跡を重ねて前記表示部に表示させる一方、前記距離センサが検出した前記距離が前記第２の基準距離を下回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、前記視点変換処理を施すことなく、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項１】
車両周辺を撮像し、その画像を車室内において表示する車両周辺視認装置において、
車両前端側における左側又は右側のコーナ部の周辺を含む撮像領域を撮像する撮像カメラと、
車室内に設けられた表示部と、
車両のステアリングの舵角を検出するステアリングセンサと、
前記撮像カメラの撮像によって得られた画像に対し、前記撮像カメラの撮像特性の影響により生じる歪みを補正する歪み補正処理を施してその画像を前記表示部に表示させるとともに、車両又は車両周辺に設けられた所定の基準点が車両の走行に伴って通過してゆく予測軌跡を前記ステアリングセンサの検出結果に基づいて予測し、その予測軌跡を前記画像上の対応する位置に重ねた状態で前記表示部に表示させる処理部と、
を備える、車両周辺視認装置。
【請求項２】
請求項１に記載の車両周辺視認装置において、
前記処理部は、さらに、
前記歪み補正処理が施された前記画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理を施し、その第１の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項３】
請求項２に記載の車両周辺視認装置において、
前記処理部は、さらに、
前記歪み補正処理及び前記第１の視点変換処理が施された前記画像に対し、その画像上における車両の直進方向が画像の縦方向と平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理を施し、その回転変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項４】
請求項３に記載の車両周辺視認装置において、
前記処理部は、さらに、
前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理が施された前記画像に対し、前記撮像領域をあたかも車窓から顔を出して視認したような画像に変換するための第２の視点変換処理を施し、その第２の視点変換処理を施した前記画像を、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項５】
請求項１ないし４のいずれかに記載の車両周辺視認装置において、
前記処理部は、
車両の左端部又は右端部に対応する地面上の地点に対応して設けられた第１の基準点、及び前記左端部又は右端部から所定距離だけ離れた地面上の地点に対応して設けられた第２の基準点のうちの少なくともいずれか一方に対応する前記予測軌跡を前記画像に重ねて前記表示部に表示させる、車両周辺視認装置。
【請求項６】
請求項１に記載の車両周辺視認装置において、
前記画像に施す処理のモードを切り替えるための第１の操作入力を受け付ける第１の入力受付部をさらに備え、
前記処理部は、さらに、
前記撮像カメラの撮像によって得られた前記画像に施す処理のモードを、前記第１の入力受付部が受け付けた第１の操作入力に応じて以下の第１ないし第４の処理モードのいずれかに切り替え、そのいずれかの処理モードに対応する処理を前記画像に施し、前記表示装置に表示させ、
前記第１の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対し、前記歪み補正処理を施し、
前記第２の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかもその真上から見たような画像に変換するための第１の視点変換処理をさらに施し、
前記第３の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理及び前記第１の視点変換処理を施し、その画像に対し、その画像上における車両の直進方向と画像の縦方向とが平行な関係になるように、前記画像と平行な面内で所定回転角度だけ回転変換処理をさらに施し、
前記第４の処理モードでは、前記処理部は、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理、前記第１の視点変換処理及び前記回転変換処理を施し、その画像に対し、前記撮像領域をあたかも車窓から頭を出して視認したような画像に変換するための第２の視点変換処理をさらに施す、車両周辺視認装置。
【請求項７】
請求項１に記載の車両周辺視認装置において、
前記画像に重ねて表示する前記予測軌跡の表示の有無をオン、オフ切り替えするための第２の操作入力を受け付ける第２の入力受付部をさらに備え、
前記処理部は、さらに、
前記画像に重ねて表示する前記予測軌跡の表示の有無を、前記第２の入力受付部が受け付けた前記第２の操作入力に応じてオン、オフ切り替えする、車両周辺視認装置。
【請求項８】
請求項１に記載の車両周辺視認装置において、
前記撮像領域内における自車から第１の基準距離の範囲内に自車と接触の可能性のある障害物があるか否かを検出する障害物センサをさらに備え、
前記処理部は、さらに、
前記表示部が前記撮像カメラの撮像によって得られた前記画像の表示を行っていない状態において、前記障害物センサが前記障害物の存在を検出した場合には、それに応じて前記画像を前記表示部に表示させる、車両周辺視認装置。
【請求項９】
請求項１に記載の車両周辺視認装置において、
前記撮像領域内における自車と接触の可能性のある障害物と自車との距離を検出する距離センサをさらに備え、
前記処理部は、さらに、
前記距離センサが検出した前記距離が第２の基準距離を上回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、その画像に対し、前記撮像領域をあたかも前記撮像カメラの視点以外の視点から見たような画像に変換するための視点変換処理をさらに施し、その上に前記予測軌跡を重ねて前記表示部に表示させる一方、前記距離センサが検出した前記距離が前記第２の基準距離を下回っている場合には、前記撮像カメラの撮像によって得られた前記画像に対して前記歪み補正処理を施し、前記視点変換処理を施すことなく、その上に前記予測軌跡を重ねて前記表示部に表示させる、車両周辺視認装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２００４−３２０５２５（Ｐ２００４−３２０５２５Ａ）
【公開日】平成１６年１１月１１日（２００４．１１．１１）
【国際特許分類】
【出願番号】特願２００３−１１２８０７（Ｐ２００３−１１２８０７）
【出願日】平成１５年４月１７日（２００３．４．１７）
【出願人】（３９５０１１６６５）株式会社オートネットワーク技術研究所 (2,668)
【出願人】（０００１８３４０６）住友電装株式会社 (6,135)
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【Ｆターム（参考）】
【公開日】平成１６年１１月１１日（２００４．１１．１１）
【国際特許分類】
【出願日】平成１５年４月１７日（２００３．４．１７）
【出願人】（３９５０１１６６５）株式会社オートネットワーク技術研究所 (2,668)
【出願人】（０００１８３４０６）住友電装株式会社 (6,135)
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【Ｆターム（参考）】
[ Back to top ]