移動体を表示するための表示システム、車載装置、画像送信装置及び表示方法
【課題】 自車両のドライバが移動体との相対関係を容易に把握できる移動体の表示システムを提供する。
【解決手段】 本発明は、移動体７を車両６内の画面に表示するための移動体７の表示システム１であって、移動体７を含む道路４の交通状況を撮像するカメラ１０と、カメラ１０で撮像された画像とカメラ１０の位置及び向きを含む送信情報を送信する画像送信装置１１と、車両６に搭載された車載装置１２とを備えている。この車載装置１２は、撮像画像とカメラの位置及び向きを受信する受信部２９と、この受信部２９で受信した画像とカメラの位置及び向きを当該車両６内の画面に同時に表示する表示部３０とを有する。
【解決手段】 本発明は、移動体７を車両６内の画面に表示するための移動体７の表示システム１であって、移動体７を含む道路４の交通状況を撮像するカメラ１０と、カメラ１０で撮像された画像とカメラ１０の位置及び向きを含む送信情報を送信する画像送信装置１１と、車両６に搭載された車載装置１２とを備えている。この車載装置１２は、撮像画像とカメラの位置及び向きを受信する受信部２９と、この受信部２９で受信した画像とカメラの位置及び向きを当該車両６内の画面に同時に表示する表示部３０とを有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、交差点などの見通しの悪い場所に設置したカメラや他車両の車載カメラで移動体（車両、二輪車、人等）を含む道路の交通状況を撮像し、これから得た画像を路車間通信又は車々間通信を通じて、交差点などに別の道路から進入する自車両で受信し、当該自車両から死角となる移動体の画像を、ドライバが理解しやすいように提供する移動体の表示システム、車載装置、画像送信装置及び表示方法に関するものである。
【背景技術】
【０００２】
従来、車両の出合い頭衝突の防止のための表示装置として、優先道路に車両感知器を設置し、当該優先道路の交差点に警告表示板を設置し、車両感知器で優先道路を走行する車両を検知したときに、前記警告表示板に警報を表示する装置がある（特許文献１参照）。これにより、交差点における出合い頭事故の可能性をドライバに予告することができる。
また、交差点にカメラを設置し、このカメラにより、自車両から死角となる直角道路から交差点に接近してくる他車両の画像を撮像し、この画像を自車両で受信する装置がある（特許文献２参照）。この装置によれば、カメラから見た実際の他車両の画像を自車両内で観察することができる。
【特許文献１】特開平５−２８４００号公報
【特許文献２】特開２００３−１０９１９９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
前記特許文献１の技術では、交差点に近づいた自車両は、優先道路から何らかの車両が近づいてくることは認識できるものの、その車両が今どの位置にいて、どのような速度で近づいてくるのか、などの詳しい情報はわからない。したがって、警告表示板の警報を軽視して、一旦停止をしないで進んでしまう可能性もあり、事故の防止に万全とはいえない。
【０００４】
前記特許文献２の技術では、交差点に近づいた自車両は、優先道路から近づいてくる他車両を画面上で認識することはできる。しかし、この技術は、あくまでもカメラから見た画像だけを画面上に表示するものであるから、自車両と他車両の相対位置や相対速度が分かり難く、また、表示された画像がどこの画像か、何が危険なのかをドライバが瞬時に判断しにくい。したがって、誤認識、錯覚の原因となる可能性がある。
【０００５】
そこで、本発明は、自車両から死角となる移動体の画像をドライバに提供する場合に、自車両のドライバがその移動体との相対関係を容易に把握できる移動体の表示システム、車載装置、画像送信装置及び表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の移動体の表示システムは、移動体を車両内の画面に表示するための移動体の表示システムであって、前記移動体を含む道路の交通状況を撮像するカメラと、前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を送信する画像送信装置と、前記車両に搭載された車載装置とを備え、
前記車載装置が、前記画像と前記カメラの位置及び向きを受信する受信部と、この受信部で受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する表示部とを有するものである（請求項１）。
【０００７】
この表示システムでは、車載装置の表示部が、カメラで撮像された移動体を含む道路の交通状況の画像だけでなく、ドライバが理解可能な表示形式でそのカメラの位置及び向きを車両内の画面に表示するので、画面に表示された画像がどこの画像であるかや、画像に写っている交通状況の中で何が危険なのかを、車両内のドライバが判断し易くなる。
従って、画像に移動体が写っている場合に、自車両のドライバがその移動体との相対関係を容易に把握することができ、ドライバに対する安全運転の支援をより確実に行うことができる。
【０００８】
なお、本発明において、カメラの向きとは、そのカメラが何処を撮像しているかをドライバが実質的に理解できる程度の方向性のことを意味し、例えば、カメラの撮像方向（レンズの光軸方向）やカメラの撮像領域（画角範囲内の領域）を車両内の画面に表示することでカメラの向きを表現することができる。また、カメラの向きは、そのカメラの撮像対象となるエリアを地図上に直接的に提示することによって表現することもできる。
【０００９】
本発明の表示システムにおいて、前記画像送信装置が送信する送信情報には、前記車両から見て前記道路の交通状況から想定される事故原因となり得る危険性の種類を特定した警告情報を含ませることができ、前記車載装置が、前記受信部で受信した前記警告情報を前記車両のドライバに認知可能に出力する出力手段を備えているものを採用することが好ましい（請求項２）。
上記警告情報は、カメラの設置位置等によって異なる、交通状況の撮像目的と対応して特定されるものであり、例えば、右直事故注意、出会い頭注意、カーブ死角注意、飛び出し死角注意、道路進入時死角注意などの情報よりなる。
【００１０】
この場合、車載装置の出力手段が上記警告情報をドライバに認知可能に出力するので、カメラの位置及び撮像方向が表示部の画面に表示されることと相まって、画面に表示される画像の危険性をドライバがより確実に察知することができ、ドライバに対する安全運転の支援が更に確実になる。
なお、上記出力手段による出力は、ヘッドアップディスプレイ等の表示部を用いた文字による警告情報の表示や、スピーカ等の音声手段によって警告情報を音声で報知することによって行うことができる。
【００１１】
本発明の表示システムにおいて、前記画像送信装置は、前記移動体の認識手段を有し、この認識手段が当該移動体を認識したときに前記画像と前記送信情報を送信するものであることが好ましい（請求項３）。
この場合、移動体が認識された場合にだけ画像と送信情報が送信され、事故原因となり得る移動体がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。
【００１２】
また、本発明の表示システムにおいて、前記移動体又は前記車載装置を搭載した前記車両若しくはこれらの双方が前記カメラに接近していることを検出する接近感知器を更に備えていることが好ましい（請求項４）。
この場合、前記画像送信装置が、前記接近感知器が前記移動体又は前記車両若しくはこれらの双方を検出したときに前記画像と前記送信情報を送信するようにすれば（請求項４）、移動体や車両が検出された場合にだけ画像と送信情報が送信され、事故原因となり得る移動体がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。
【００１３】
更に、本発明の表示システムにおいて、前記画像送信装置として、前記車載装置からの送信要求を受信した場合に前記画像と前記送信情報を送信するものを採用することもできる（請求項５）。
この場合、車載装置からの送信要求に基づいて画像送信装置が画像と送信情報を送信するので、その送信要求の有無に関係なく交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減することができる。
【００１４】
また、本発明の表示システムにおいて、前記車載装置が、前記カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算する演算部を有する場合には、前記表示部は、前記演算された位置及び向きデータを前記道路地図の道路図形に重ねて表示する車載ディスプレイより構成することができる（請求項６）。
この場合、車両内のドライバは、道路地図の道路図形に重ねて表示されたカメラの位置及び向きデータにより、実際のカメラの位置及び向きを把握することができる。
【００１５】
更に、本発明の表示システムにおいて、前記車載装置が、前記カメラの位置及び向きに基づいて前記車両に搭乗しているドライバから見た場合の位置及び向きデータを演算する演算部を有する場合には、前記表示部は、前記演算された位置及び向きデータを前記車両のフロントガラス面に表示するヘッドアップディスプレイより構成することができる（請求項７）。
この場合、車両内のドライバは、フロントガラス面に表示されたカメラの位置及び向きデータにより、実際のカメラの位置及び向きを把握することができる。
【００１６】
本発明の車載装置は、移動体を車両内の画面に表示するための車載装置であって、前記移動体を含む道路の交通状況を撮像して得られた画像と、前記カメラの位置及び向きを含む送信情報を受信する受信部と、この受信部で受信した前記画像と前記カメラの位置及び
向きを当該車両内の前記画面に同時に表示する表示部とを有するものである（請求項８）。
この車載装置を使えば、当該車載装置の表示部が、カメラで撮像された移動体を含む道路の交通状況の画像だけでなく、ドライバが理解可能な表示形式でそのカメラの位置及び向きを車両内の画面に表示するので、画面に表示された画像がどこの画像であるかや、画像に写っている交通状況の中で何が危険なのかを、車両内のドライバが判断し易くなる。
【００１７】
本発明の移動体の表示方法は、前記移動体を含む道路の交通状況をカメラで撮像し、前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を前記車両の車載装置に送信し、前記車載装置が受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する方法である（請求項９）。
この方法によって、カメラで撮像された移動体を含む道路の交通状況の画像だけでなく、そのカメラの位置及び向きを車両内の画面に表示することができる。このため、画面に表示された画像がどこの画像であるかや、画像に写っている交通状況の中で何が危険なのかを、車両内のドライバが判断し易くなる。従って、出合い頭衝突等の事故をより確実に防止することができる。
【００１８】
本発明は、移動体を含む道路の交通状況の画像と、カメラの位置及び向きを車両内の画面に同時に表示するものであるから、前記画像送信装置としては、交通状況の画像を取り込んで送信する機能と、演算又は記憶されたカメラの位置及び向きを含む送信情報を送信する機能を備えていれば足りる。
しかるに、この画像送信装置において、カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算するとともに、その演算された位置及び向きデータを道路地図の道路図形に重ねた合成図形を作成してから、交通状況の画像と合成画像を含む送信情報を車載装置に送信するシステム構成とすることもできる。
この場合には、上記データの演算と合成図形の作成を車載装置で行う必要がなくなるので、車載装置の演算負荷が小さくなって当該装置をより廉価にできるという利点がある。
【発明の効果】
【００１９】
以上の通り、本発明によれば、自車両から死角となる移動体の画像だけでなく、その画像を撮像したカメラの位置と向きが表示されるので、ドライバは違和感や錯覚なく移動体を認知することが可能となる。この結果、出合い頭衝突（交差側車両との衝突）や右直（右折時の死角となる直進バイク等との衝突）の事故などがより確実に防止ないし抑制され、安全運転の支援がより確実になる。
【発明を実施するための最良の形態】
【００２０】
以下、本発明の実施の形態を、添付図面を参照しながら詳細に説明する。
図１〜図４は、移動体の画像を自車両のディスプレイに表示する本発明の実施形態に係る表示システムの全体構成を示している。
〔システムの概略構成〕
図１〜図４に示すシステム１のうち、図１に示す表示システム１は、いわゆる右直事故防止用のものであり、自車線２と対向車線３を有する対向二車線の道路４の交差点５を右折しようとする自車両６のドライバに、対向車線３を走行する移動体７（特に、右直事故の原因となる直進バイク等の二輪車７Ｂ）を表示するものである。
【００２１】
従って、この表示システム１は、対向車線３における交差点５の手前を走行する移動体７を撮像すべく交差点５の近傍に設置されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を路車間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
なお、図１では、自車線２と対向車線３とを有する対向二車線の道路４を例示しているが、対向一車線や対向三車線以上の道路４であってもよい。
【００２２】
図１の例では、カメラ１０は、交差点５の対向車線３の歩道部分に立設した電柱１３の上部に設置されている。なお、このカメラ１０の設置場所は、電柱１３の他に、陸橋、歩道橋及びビル等の地上設備上の任意の場所でよい。また、カメラ１０をワイヤに吊り下げ状に設けて真上から撮像するようにしてもよい。
このカメラ１０の設置位置は、対向車線３を交差点５に向かって走行する対向車両７Ａ，７Ｂの前面や左側面部分を撮像できる位置である。従って、図１に示す電柱１３だけでなく、この電柱１３の交差道路１４側に位置する地上設備１５に設置することもできる。
【００２３】
図２に示す表示システム１は、交差点５での出合い頭事故防止用のものであり、自車線２を交差点５に向かって走行する自車両６のドライバに、交差道路１４を交差点５に向かって走行する移動体７（特に、トラックや乗用車等の車両７Ａ）を表示するものである。
従って、この表示システム１は、交差道路１４を走行する移動体７を撮像すべく交差点５の近傍に設置されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を路車間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
【００２４】
上記カメラ１０の設置位置は、交差道路１４を交差点５に向かって走行する車両７Ａを前方から撮像できる位置である。
従って、図２の表示システム１においても、カメラ１０を、電柱１３だけでなく、交差点５に近接するその他の地上設備に設置することもできる。例えば、電柱１３の他に、陸橋、歩道橋及びビル等の地上設備上の任意の場所でよい。また、カメラ１０をワイヤに吊り下げ状に設けて真上から撮像するようにしてもよい。
【００２５】
図３に示す表示システム１は、カーブ事故防止用のものであり、自車線２のカーブ部分８に向かって走行する自車両６のドライバに、そのカーブ部分８に向かって対向車線３を走行する移動体７（特に、トラックや乗用車等の車両７Ａ）を表示するものである。
従って、この表示システム１は、カーブ部分８に向かって対向車線３を走行する移動体７を撮像すべく当該カーブ部分８に設置されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を路車間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
【００２６】
上記カメラ１０の設置位置は、道路４のカーブ部分８に向かって走行する車両７Ａを前方から撮像できる位置である。
従って、図３の表示システム１においても、カメラ１０を、電柱１３だけでなく、カーブ部分８に近接するその他の地上設備に設置することもできる。例えば、電柱１３の他に、陸橋、歩道橋及びビル等の地上設備上の任意の場所でよい。また、カメラ１０をワイヤに吊り下げ状に設けて真上から撮像するようにしてもよい。
【００２７】
図４に示す表示システム１は、飛び出し事故防止用のものであり、自車線２を走行する自車両６のドライバに、自車両６の前方を走行又は停止している前方車両９によって死角となる移動体７（特に、前方車両９に隠れた歩行者７Ｃや自転車７Ｄ）を表示するものである。
従って、この表示システム１は、前方車両９に搭載されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を車々間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
【００２８】
図５は、本実施形態の表示システム１の機能ブロック図である。
〔カメラ〕
本実施形態の表示システム１を構成する各装置１０，１１，１２のうち、前記カメラ１０は、移動体７を含む道路の交通状況を撮像するものであり、その交通状況の静止画像を繰り返し撮像するデジタルカメラや、その交通状況の映像（動画）を撮像するデジタルビデオカメラよりなる。なお、このカメラ１０は、単眼カメラ、ステレオカメラの何れを用いてもよい。
【００２９】
〔画像送信装置〕
画像送信装置１１は、カメラ１０で撮像された画像と、そのカメラ１０の位置及び撮像方向を車載装置１２に送信するものであり、カメラ１０と同じ筐体に収納されており、カメラ１０とともに電柱１３等の地上設備や前方車両９に設置されている。もっとも、路車間通信の場合（図１〜図３）、画像送信装置１１は、カメラ１０とは別体でかつ他の場所に設置してもよく、この場合にはカメラ１０と通信回線で結ばれる。
この画像送信装置１１は、カメラ１０からの画像から移動体７の認識処理等を行う処理コンピュータ１７と、この処理コンピュータ１７からの指令に基づいて路車間通信又は車々間通信を行う通信装置１８とを備えている。以下、この画像送信装置１１の処理コンピュータ１７が行う処理内容を説明する。
【００３０】
〔処理コンピュータの処理内容〕
（１） 画像の取り込み及び送信
処理コンピュータ１７は、記憶領域にフレームバッファを備えており、カメラ１０で撮像された交通状況の画像を常時このバッファに取り込んでいる。
処理コンピュータ１７は、後述する移動体の認識処理を行い、この認識処理において所望の移動体７の存在を認識した場合には、フレームバッファに取り込まれた画像データをリアルタイムで通信装置１８に送信させる。
【００３１】
（２） カメラの位置及び撮像方向
また、処理コンピュータ１７は、カメラ１０の位置及び撮像方向を常時把握している。図１〜図３に示す路車間通信による表示システム１の場合には、カメラ１０の位置及び撮像方向は処理コンピュータ１７の記憶領域に予め記憶させてある。このカメラ１０の位置は、予め装置に定数設定しておくか、ＧＰＳ等の位置検出機能によって得ることができ、カメラ１０の経緯度の絶対位置データから構成される。また、カメラの撮像方向は、予め装置に定数設定しておくか、画像認識で道路等を認識し、道路地図等と比較して自動的に求めることができ、カメラ１０の撮像方向のベクトルデータから構成される。
他方、図４に示す車々間通信の場合には、カメラ１０は前方車両９に搭載されているので、処理コンピュータ１７は、時々刻々と変化する当該カメラ１０の位置及び撮像方向を前方車両９のＧＰＳ機能等によって取得し、通信装置１８に送信させる。
【００３２】
なお、カメラ１０の撮像方向は、通常、カメラレンズの光軸方向によって定義されるが、所望の交通状況の画像が得られる限りにおいて、その光軸方向と厳密に一致している必要はない。
以上のようにカメラ１０の位置（座標）とその撮像方向（ベクトル）が特定できれば、自車両６の位置検出機能等によって当該自車両６の位置を特定することにより、自車両６から見たカメラ１０の相対位置と撮像の相対方向を算出でき、自車両６の車載装置１２のディスプレイ（表示部）に移動体７を表示することができる。
【００３３】
（３） 特徴点による移動体の認識
図８は、特徴点及び特徴線による移動体の認識処理の方法を示す図である。
ここで、カメラ１０としてステレオカメラが使用されているとすると、左右の画像の車両の特徴点や特徴線を対応付けし、その３次元位置を算出することができる。この場合、例えば、図８（ａ）に示すような移動体Ｃの実画像から、図８（ｂ）に示すような特徴点と特徴線とからなる認識データが得られる。
このため、上記認識データと別途用意された車種のテンプレートとを比較すること等により、抽出された車両が乗用車やトラック等であるか、自転車やバイク等の二輪車であるか、或いは歩行者であるかを判定することができる。
【００３４】
図８に示す例では、特徴点ａ〜ｉは、移動体Ｃの各角部に対応付けられた特徴点であり、線分ａｅ、線分ｃｇ、線分ｄｉ及び線分ｅｈ等は、移動体Ｃの外形線に対応付けられた特徴線であり、これにより、当該移動体Ｃの３次元位置を特定することができる。なお、この特徴点は、移動体Ｃを代表する点であり、その位置座標としては、道路４の進行方向、これと垂直に交差する水平方向である横断方向及び高さ方向の３次元であるが、道路４の進行方向だけでもよいし、道路の進行方向と横断方向だけであってもよい。
【００３５】
なお、移動体Ｃの特徴点は使用せず、車両の画像上の大きさから車種を求める簡単な方法や、或いは、これとテンプレートマッチングの結果から移動体Ｃの車種を求める方法も考えられる。
これらの場合には、例えば、移動体Ｃの画像の地面に近い下方の切り出し部分の適当な左端点と右端点（図８（ｂ）における点ａ及び点ｈ）を特徴点として、道路４の進行方向と横断方向の位置座標を求めればよい。
【００３６】
（４） 撮像画像及び送信情報の送信
上記の認識処理により、交通状況の画像中に車両７Ａ等よりなる移動体７の存在が判明すると、処理コンピュータ１７は、前記カメラ１０で得られた撮像画像と、そのカメラ１０の位置及び撮像方向とを、路車間通信又は車々間通信によって通信装置１８に送信させる。
また、処理コンピュータ１７は、自車両６から見て道路４の交通状況から想定される、事故原因となり得る危険性の種類を特定した警告情報を記憶しており、この警告情報を前記送信情報に含めて通信装置１８に送信させる。
【００３７】
処理コンピュータ１７が記憶している警告情報は、カメラ１０の設置位置や撮像方向によって異なる、カメラ１０による交通状況の撮像目的と対応して特定されるものであり、図１に示す右直事故防止用の表示システム１の場合には、例えば「右直事故注意」という文字情報で構成される。
また、上記警告情報は、図２に示す出合い頭事故防止用の表示システム１の場合には、例えば「出会い頭注意」や「道路進入時死角注意」という文字情報で構成され、図３に示すカーブ事故防止用の表示システム１の場合には、例えば「カーブ死角注意」という文字情報で構成され、図４に示す飛び出し事故防止用の表示システム１の場合には、例えば「飛び出し死角注意」という文字情報で構成される。
【００３８】
〔情報通信方式〕
図９は、画像送信装置１１による路車間通信の場合の通信方式を示す概念図である。
図９（ａ）に示す通信方式は、交差点５の近辺を感知エリアとする無線ＬＡＮ等の中域の無線通信方式を示しており、この場合には、画像送信装置１１の通信装置１８から、交差点５を含む一定のエリアに通信電波１９が送信される。
もっとも、かかる無線通信方式を採用する場合には、自車線２から交差点５に進入する自車両６が受信した送信情報が、どの画像送信装置１１から送信されたものであるかを識別する機能を車載装置１２が有している必要がある。
【００３９】
他方、図９（ｂ）に示す通信方式は、ＤＳＲＣ等の狭域無線や、光ビーコン等のスポット通信方式といった狭域無線通信方式を示している。
この場合、ＤＳＲＣ等の狭域通信装置２０は、自車線２における交差点５の手前に走行方向に沿って複数台並設されており、これら複数の狭域通信装置２０を介して、移動体７の画像を含む送信情報が送信される。
なお、この場合には、画像送信装置１１と狭域通信装置２０とを例えば有線によって通信可能に接続する必要がある。
【００４０】
〔車載装置〕
図５に戻り、車載装置１２は、画像送信装置１１の通信装置１８から受信した移動体７の画像をドライバに表示するとともに、送信情報に含まれるカメラ１０の位置と撮像方向を視認可能に架空に表示することにより、当該車載装置１２が搭載された自車両６のドライバに対して移動体７の存在を報知するものである。
この車載装置１２は、画像処理機能やマンマシン機能を持った車載コンピュータ２６と、このコンピュータ２６によって駆動制御される時計装置２７、位置方位検出装置２８、通信装置２９、ディスプレイ３０及びスピーカ３１等から構成されている。
【００４１】
上記通信装置２９は、画像送信装置１１ら送信されたデータ（送信情報）を受信するものであり、復調方式や復号化方式は画像送信装置１１の通信装置１８と対応している。時計装置２７は、例えば現在時刻が正確に得られる電波時計からなるが、これに限られない。
画像送信装置１１から時刻データが送られてくるのであれば、この時刻データを参照してもよいし、この他ＧＰＳ、放送媒体、公衆通信媒体などから時刻が分かるのであれば、これを参照してもよい。
【００４２】
位置方位検出装置２８は、当該車両の位置と方位を検出するための装置である。なお、車載装置１２の位置検出は、例えばＧＰＳを利用することができる。ＧＰＳを利用する以外にも、車両が道路上を走行することを前提としたマップマッチング、車載搭載センサ等、車載ナビゲーションで使用される諸技術を利用してもよい。
また、直前で交信した路側装置、例えば光ビーコンから絶対位置を取得し、これと自車両の距離計を利用して、現在位置を検出してもよい。なお位置の表現は、経緯度による絶対的表現と、交差点５からの距離のような相対的表現があり、どちらを利用してもよい。
【００４３】
更に、位置方位検出装置２８は、車両の位置とともに車両の方位を検出する。この車両の方位は、地磁気方位センサ、ジャイロセンサなど車載ナビゲーションで使用される技術を利用可能である。また、現在の位置と直近に検出した位置との差分をとることで方位を検出してもよい。
ディスプレイ３０は、車載のナビゲーション装置やテレビジョン装置の画像表示部を構成する車載ディスプレイ３０Ａ、或いは、自車両６のフロントガラス面に図形を架空表示するフロントディスプレイ（或いは、ヘッドアップディスプレイ）３０Ｂよりなる。このディスプレイ３０は、移動体７の画像とその撮像位置及び撮像方向をドライバに視認可能に表示する表示手段であり、この表示によって移動体７の存在をドライバに報知する報知手段として機能する。
【００４４】
なお、上記ヘッドアップディスプレイ３０Ｂは画像投影装置を用いて、運転席の近くのガラスに図形等の画像を表示するものである。車両のフロントガラスに図形等の画像を表示する技術は公知である（例えば、特開平8-108773号公報参照）。
スピーカ３１は、画像送信装置１１に含まれる警告情報を音声にてドライバにアナウンスするためのものである。
車載コンピュータ２６は、画像送信装置１１から送信されてくる警告情報に基づいて、必要に応じて移動体７の存在をドライバに気付かせるために、その警告情報のディスプレイ３０による画面表示用データと、スピーカ３１による音声出力用のデータを作成する。
【００４５】
以下、この車載装置１２の車載コンピュータ２６が行う処理内容を説明する。
〔車載コンピュータの処理内容〕
（１） 自車両の位置評定と移動体の表示開始タイミング
カメラ１０の位置をディスプレイ３０に表示する場合、自車両６の位置との相対位置が判明している必要がある。
そこで、車載コンピュータ２６は、画像送信装置１１から送信されるカメラ１０の位置が経緯度等の絶対位置である場合には、自車両６の位置を表示時点において評定している。すなわち、自車両６の車載コンピュータ２６は、前記位置方位検出装置２８により、常時、絶対位置の評定を別途正確に行っている。
【００４６】
一方、車載コンピュータ２６は、無線ＬＡＮのような中域無線通信の場合には、交差点５の直前や右折位置等の、予め定められた位置に到着したときに、ディスプレイ３０による移動体７の画像表示を開始させる。スポット通信による場合は、データを受信したときに移動体７の表示を開始してもよいし、予め定められた位置に到着したときにその表示を開始してもよい。
なお、位置方位検出装置２８による自車両６の位置検出の精度が悪い場合でも、前記スポット通信による場合には、二輪車７Ｂの位置としてスポット通信位置からの相対位置で得ることができれば、その時点で表示を開始すればよい。
【００４７】
（２） カメラの位置及び撮像方向の表示用データの作成
また、自車両６の車載コンピュータ２６は、自車両６の位置と、通信装置２９で受信したカメラ１０の位置及び撮像方向とに基づいて、その位置と方向をディスプレイ３０に表示する場合の位置及び方向データを演算する。
例えば、ディスプレイ３０がヘッドアップディスプレイ３０Ｂである場合には、車載コンピュータ２６は、図１０（ｃ）に示すように、フロントガラス面３２におけるカメラ１０の表示位置（ｗ’，ｈ’）と、カメラ１０の撮像方向の表示ベクトルα’を以下の通り算出する。
【００４８】
ここで、図１０（ａ）に示すように、ドライバの目の地上からの高さをｈ、フロントガラス面（表示面）までの距離をｘ、前方の二輪車までの距離をｙとすると、カメラ１０の表示面の高さ（縦方向の位置）ｈ’は、ｈ’＝（ｙ−ｘ）・ｈ／ｙ となる。ｙ≫ｘであるため、ｈ’＝ｈとしてもよい。なお、ｈは、ドライバにより変わるため、システムとしては平均的な数値を入れておき、使用時にマンマシンで容易に変更できるようにしておけばよい。
また、自車両６が道路方向に進行している場合には、図１０（ｂ）に示すように、その自車両６の位置とカメラ１０の位置及び道路方位から、カメラ１０の当該車両位置からの横方向の位置ｗと、フロントガラス面での横方向の位置ｗ’を計算することができる。車両に搭載されたセンサ等で車両の進行方位が検出できる場合には、これを用いてもよい。
【００４９】
更に、車載コンピュータ２６は、撮像方向のベクトルαの始端点の座標（ｘ，ｙ）と同様に、当該ベクトルαの終端点に関しても上記した座標変換の演算を行い、その始端点と終端点の表示位置の座標から、カメラ１０の撮像方向をフロントガラス面３２に表示する場合の表示ベクトルα’を演算する。
他方、ディスプレイ３０が車載ディスプレイ３０Ａである場合には、車載コンピュータ２６は、画像送信装置１１から受信したカメラ１０の位置及び撮像方向を、ディスプレイ３０Ａに表示される道路地図の座標系に変換し、その位置及び方向データを演算する。
【００５０】
〔ディスプレイによる表示例〕
（１） ヘッドアップディスプレイを利用する場合
図１１は、右直事故防止用の表示システム（図１）の場合のヘッドアップディスプレイを利用した表示例を示している。
この場合、車載コンピュータ２６は、カメラ１０で得られた撮像画像３４を車載ディスプレイ３０Ａに表示するとともに、パターン化されたカメラ位置表示３５と撮像方向表示３６を、ヘッドアップディスプレイ３０Ｂを構成するフロントガラス面３２の所定の表示位置に表示する。
【００５１】
このように、自車両６に搭乗しているドライバは、カメラ１０の位置と撮像方向をフロントガラス面３２に表示された仮想表示３５，３６によって把握できるので、カメラ１０の撮像画像３４がどこの画像であるかや、撮像画像３４に写っている交通状況の中で何が危険なのかを判断し易くなり、右直事故の防止がより確実となる。
また、図１１の表示例では、車載コンピュータ２６により、カメラ１０に関する仮想表示３５，３６だけでなく、ドライバに対する警告情報（この場合は、「右直事故注意」よりなる注意喚起表示３７）がフロントガラス面３２に表示される。更に、車載コンピュータ２６は、同時に、上記注意喚起文をスピーカ３１から音声出力させる。なお、図１１に仮想線で示すように、カメラ１０の撮像画像３４についても、フロントガラス面３２の任意位置に表示させるようにしてもよい。
【００５２】
図１２は、出合い頭事故防止用の表示システム（図２）の場合のヘッドアップディスプレイを利用した表示例を示し、図１３は、カーブ事故防止用の表示システム（図３）の場合のヘッドアップディスプレイを利用した表示例を示し、図１４は、飛び出し事故防止用の表示システム（図４）の場合のヘッドアップディスプレイを利用した表示例を示している。
これら図１２〜図１４に示す表示例は、図１１の表示例と撮像目的が異なるだけで、構成及び機能は図１１の表示例と同様である。従って、図１２〜図１４に同じ符号を付することにより詳細な説明を省略する。
【００５３】
（２） 車載ディスプレイを利用する場合
図１５は、右直事故防止用の表示システム（図１）の場合の車載ディスプレイを利用した表示例を示している。
この場合、車載コンピュータ２６は、カメラ１０で得られた撮像画像３４を車載ディスプレイ３０Ａの左側部分に表示するとともに、パターン化されたカメラ位置表示３５と撮像方向表示３６を、車載ディスプレイ３０Ａの道路地図上に表示する。
【００５４】
この場合も、自車両６に搭乗しているドライバは、カメラ１０の位置と撮像方向を撮像画像３４の隣の仮想表示３５，３６によって把握できるので、カメラ１０の撮像画像３４がどこの画像であるかや、撮像画像３４に写っている交通状況の中で何が危険なのかを判断し易くなり、右直事故の防止がより確実となる。
なお、図１５に示す表示例では、自車両６をパターン化した車両表示３８も併せて道路地図上に表示されており、これによって自車両６とカメラ１０の相対位置をドライバが把握し易くなっている。
【００５５】
図１６は、出合い頭事故防止用の表示システム（図２）の場合の車載ディスプレイを利用した表示例を示し、図１７は、カーブ事故防止用の表示システム（図３）の場合の車載ディスプレイを利用した表示例を示し、図１８は、飛び出し事故防止用の表示システム（図４）の場合の車載ディスプレイを利用した表示例を示している。
これら図１６〜図１８に示す表示例は、図１５の表示例と撮像目的が異なるだけで、構成及び機能は図１２の表示例と同様である。従って、図１６〜図１８に同じ符号を付することにより詳細な説明を省略する。
【００５６】
次に、図６及び図７を参照しつつ、画像送信装置１１の処理コンピュータ１７と、車載装置１２の車載コンピュータ２６とで行われる周期的な処理フローについて説明する。
〔処理コンピュータの周期的フロー〕
画像送信装置１１の処理コンピュータ１７は、図６に示す処理フローを所定の処理周期で行う。
図６に示すように、まず、処理コンピュータ１７は、カメラ１０で撮像された交通状況の画像を取り込み（図６のＳ１）、そこに写っている被写体について前記した特徴点処理によって車両等の移動体７を認識する（図６のＳ２）。
【００５７】
次に、処理コンピュータ１７は、移動体７を認識すると（図６のＳ２でＹｅｓ）、カメラ１０による撮像画像と、カメラの位置及び撮像方向と、撮像目的に対応した警告情報を通信装置１８を介して送信する（図６のＳ３）。なお、処理コンピュータ１７は、移動体７を認識しない場合には、それらの情報を送信せずに処理を終了する（図３のＳ２でＮｏ）。
【００５８】
〔車載コンピュータの周期的フロー〕
一方、車載装置１２の車載コンピュータ２６は、図７に示す処理フローを所定の処理周期で行う。
図７に示すように、まず、車載コンピュータ２６は、画像送信装置１１からの送信データに撮像画像があるかどうかをチェックし（図７のＳ１）、その画像がある場合には（図４のＳ２でＹｅｓ）、自車両６の位置と、前記送信情報に含まれているカメラの位置及び撮像方向とから、自車両６から見たカメラ１０の相対的な位置及び方向（前記表示位置（ｗ’，ｈ’）及び表示ベクトルα’）を演算し（図７のＳ３）、交通状況の撮像画像３４とともにその相対的な位置及び方向をディスプレイ３０に表示させる（図７のＳ４）。
【００５９】
また、車載コンピュータ２６は、撮像目的に対応する警告情報が画像送信装置１１からの送信情報に含まれているか否かを判定し（図７のＳ５）、含まれている場合には、その警告情報をディスプレイ３０又はスピーカ３１若しくはこれらの双方を用いて、自車両６のドライバに認知可能に報知する（図７のＳ６）。
以上の通り、本実施形態に係る表示システム１によれば、カメラ１０で撮像された移動体７を含む道路４の交通状況の画像だけでなく、そのカメラ１０の位置及び撮像方向を自車両６内の画面に表示するので、自車両６のドライバがその移動体７との相対関係を容易に把握することができ、ドライバに対する安全運転の支援をより確実に行うことができる。
【００６０】
また、本実施形態の表示システム１では、カメラ１０での撮像目的に対応する警告情報が車載装置１２のディスプレイ３０やスピーカ３１を通じてドライバに認知可能に出力されるので、カメラ１０の位置及び撮像方向がディスプレイ３０の画面に表示されることと相まって、画面に表示される画像の危険性をドライバがより確実に察知することができ、ドライバに対する安全運転の支援が更に確実になる。
【００６１】
更に、本発明の表示システム１では、画像送信装置１１が移動体７を認識したときに、カメラ１０による撮像画像と送信情報を送信するので、事故原因となり得る移動体７がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。
また、この場合、交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減することができるという利点もある。
【００６２】
図１９は、本発明の他の実施形態に係る表示システム１を示している。
本実施形態の表示システム１は、カメラ１０、画像送信装置１１及び車載装置１２に加えて、移動体７がカメラ１０に接近していることを検出する第一接近感知器４０と、車載装置１２を搭載した自車両５がカメラ１０に接近していることを検出する第二接近感知器４１とを備えている。
これらの感知器４０，４１はいずれも画像送信装置１１の処理コンピュータ１７と有線によって通信可能に接続されており、その処理コンピュータ１７は、これらの感知器４０，４１の双方又はいずれか一方が移動体７や自車両６を検出したときに、撮像画像及び送信情報を送信するようになっている。
【００６３】
従って、移動体７や自車両６が検出された場合にだけ、画像送信装置１１から画像と送信情報が送信され、事故原因となり得る移動体７がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置１２に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。また、本実施形態においても、交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減することができるという利点もある。
なお、図１９の例では、移動体７検出用と自車両６検出用の二種類の接近感知器４０，４１を道路に設置しているが、これらのいずれか一つだけを設けることにしてもよい。
【００６４】
以上説明した実施形態では、カメラ１０の向きをドライバに理解させるためにカメラ１０の撮像方向をディスプレイ３０に表示しているが、カメラ１０の向きはその他の表現形式でもドライバに提示することができる。図２０〜図２２は、カメラ２０の向きの他の表現形式をそれぞれ示している。
このうち、図２０は、車載ディスプレイ３０Ａにカメラ１０の撮像領域を表示させる場合の表示例を示しており、この場合の撮像領域表示４３は、カメラ位置表示３５からカメラ１０の画角に相当する開き角度で広がる扇形形状となっている。
【００６５】
また、図２１は、ヘッドアップディスプレイ３０Ｂにカメラ１０の撮像領域を表示させる場合の表示例を示しており、この場合の撮像領域表示４３は、カメラ位置表示３５からカメラ１０の画角に相当する開き角度で広がる円錐形状となっている。
更に、カメラ１０の向きは、そのカメラ１０の撮像対象であるエリアを地図上に直接的に提示することによって表現することもできる。
例えば、図２２は、ＶＩＣＳを利用した簡易型の道路図形４４に対して、カメラ１０の撮像対象をそのまま表示した表示例を示している。
【００６６】
図２２において、道路図形４４に含まれている各道路のうち、カメラ１０の撮像対象となっている道路部分には着色や網掛け等によって表現された撮像対象表示４５が施されており、この撮像対象表示４５をカメラ位置表示３５とともに道路図形４４に描くことにより、カメラ１０の向きをドライバに提示するようにしている。
【００６７】
本発明は上記した各実施形態に限定されるものではない。
例えば、上記各実施形態において、画像送信装置１１は、必ずしも１台ではなく複数存在してもよい。また、同じ道路にカメラ１０を複数台設置し、複数の撮像データを利用することにより、移動体７の認識精度を高めてもよい。
また、本発明の表示システム１を適用できるその他の見通しの悪い場所としては、駐車場から幹線道路にでる場所は、逆に幹線道路から駐車場に入る場所などがある。
【００６８】
更に、画像送信装置１１としては、車載装置１２からの送信要求を受信した場合に画像と送信情報を送信するものを採用することにしてもよい。この場合には、送信要求の有無に関係なく交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減できるという利点がある。
また、上記した各実施形態では、カメラ１０の位置及び向きデータの演算や道路図形への合成はすべて車載装置１２において行っているが、これを画像送信装置１１に行わせるシステム構成とすることもできる。
【００６９】
すなわち、このシステム構成の画像送信装置１１は、カメラ１０の位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算するとともに、その演算された位置及び向きデータを道路地図の道路図形に重ねた合成図形を作成してから、交通状況の画像と合成画像を含む送信情報を車載装置１２に送信することになる。
従って、この場合には、上記データの演算と合成図形の作成を車載装置１２で行う必要がなくなるので、車載装置１２の演算負荷が小さくなって当該装置をより廉価にできる。
【図面の簡単な説明】
【００７０】
【図１】右直事故防止用の表示システムの全体構成を示す斜視図である。
【図２】出合い頭事故防止用の表示システムの全体構成を示す斜視図である。
【図３】カーブ事故防止用の表示システムの全体構成を示す斜視図である。
【図４】飛び出し事故防止用の表示システムの全体構成を示す斜視図である。
【図５】上記表示システムの機能ブロック図である。
【図６】画像送信装置の処理フローを示すフローチャートである。
【図７】車載装置の処理フローを示すフローチャートである。
【図８】特徴点及び特徴線による移動体の認識方法を示す図である。
【図９】路車間通信の通信方法を示す概念図である
【図１０】（ａ）はフロントガラス面でのカメラの高さ位置を示す図であり、（ｂ）はフロントガラス面でのカメラの横方向位置を示す図であり、（ｃ）はカメラが表示されたフロントガラス面の正面図である。
【図１１】右直事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１２】出合い頭事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１３】カーブ事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１４】飛び出し事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１５】右直事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１６】出合い頭事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１７】カーブ事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１８】飛び出し事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１９】他の実施形態に係る表示システムの全体構成を示す斜視図である。
【図２０】カメラの撮像領域を表示させる場合の、車載ディスプレイに対する表示例を示す図である。
【図２１】カメラの撮像領域を表示させる場合の、ヘッドアップディスプレイに対する表示例を示す図である。
【図２２】カメラの撮像対象を表示させる場合の、車載ディスプレイに対する表示例を示す図である。
【００７１】
１ 表示システム
２ 自車線
３ 対向車線
４ 道路
５ 交差点
６ 自車両
７ 移動体
８ カーブ部分
９ 前方車両
１０ カメラ
１１ 画像送信装置
１２ 車載装置
１７ 処理コンピュータ（認識手段）
１８ 通信装置（送信手段）
２６ 車載コンピュータ（演算部）
２８ 位置方位検出装置
２９ 通信装置（受信部）
３０ ディスプレイ（表示部、出力手段）
３０Ａ 車載ディスプレイ
３０Ｂ ヘッドアップディスプレイ
３１ スピーカ（出力手段）
３２ フロントガラス面
４０ 第一接近感知器
４１ 第二接近感知器
【技術分野】
【０００１】
本発明は、交差点などの見通しの悪い場所に設置したカメラや他車両の車載カメラで移動体（車両、二輪車、人等）を含む道路の交通状況を撮像し、これから得た画像を路車間通信又は車々間通信を通じて、交差点などに別の道路から進入する自車両で受信し、当該自車両から死角となる移動体の画像を、ドライバが理解しやすいように提供する移動体の表示システム、車載装置、画像送信装置及び表示方法に関するものである。
【背景技術】
【０００２】
従来、車両の出合い頭衝突の防止のための表示装置として、優先道路に車両感知器を設置し、当該優先道路の交差点に警告表示板を設置し、車両感知器で優先道路を走行する車両を検知したときに、前記警告表示板に警報を表示する装置がある（特許文献１参照）。これにより、交差点における出合い頭事故の可能性をドライバに予告することができる。
また、交差点にカメラを設置し、このカメラにより、自車両から死角となる直角道路から交差点に接近してくる他車両の画像を撮像し、この画像を自車両で受信する装置がある（特許文献２参照）。この装置によれば、カメラから見た実際の他車両の画像を自車両内で観察することができる。
【特許文献１】特開平５−２８４００号公報
【特許文献２】特開２００３−１０９１９９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
前記特許文献１の技術では、交差点に近づいた自車両は、優先道路から何らかの車両が近づいてくることは認識できるものの、その車両が今どの位置にいて、どのような速度で近づいてくるのか、などの詳しい情報はわからない。したがって、警告表示板の警報を軽視して、一旦停止をしないで進んでしまう可能性もあり、事故の防止に万全とはいえない。
【０００４】
前記特許文献２の技術では、交差点に近づいた自車両は、優先道路から近づいてくる他車両を画面上で認識することはできる。しかし、この技術は、あくまでもカメラから見た画像だけを画面上に表示するものであるから、自車両と他車両の相対位置や相対速度が分かり難く、また、表示された画像がどこの画像か、何が危険なのかをドライバが瞬時に判断しにくい。したがって、誤認識、錯覚の原因となる可能性がある。
【０００５】
そこで、本発明は、自車両から死角となる移動体の画像をドライバに提供する場合に、自車両のドライバがその移動体との相対関係を容易に把握できる移動体の表示システム、車載装置、画像送信装置及び表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の移動体の表示システムは、移動体を車両内の画面に表示するための移動体の表示システムであって、前記移動体を含む道路の交通状況を撮像するカメラと、前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を送信する画像送信装置と、前記車両に搭載された車載装置とを備え、
前記車載装置が、前記画像と前記カメラの位置及び向きを受信する受信部と、この受信部で受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する表示部とを有するものである（請求項１）。
【０００７】
この表示システムでは、車載装置の表示部が、カメラで撮像された移動体を含む道路の交通状況の画像だけでなく、ドライバが理解可能な表示形式でそのカメラの位置及び向きを車両内の画面に表示するので、画面に表示された画像がどこの画像であるかや、画像に写っている交通状況の中で何が危険なのかを、車両内のドライバが判断し易くなる。
従って、画像に移動体が写っている場合に、自車両のドライバがその移動体との相対関係を容易に把握することができ、ドライバに対する安全運転の支援をより確実に行うことができる。
【０００８】
なお、本発明において、カメラの向きとは、そのカメラが何処を撮像しているかをドライバが実質的に理解できる程度の方向性のことを意味し、例えば、カメラの撮像方向（レンズの光軸方向）やカメラの撮像領域（画角範囲内の領域）を車両内の画面に表示することでカメラの向きを表現することができる。また、カメラの向きは、そのカメラの撮像対象となるエリアを地図上に直接的に提示することによって表現することもできる。
【０００９】
本発明の表示システムにおいて、前記画像送信装置が送信する送信情報には、前記車両から見て前記道路の交通状況から想定される事故原因となり得る危険性の種類を特定した警告情報を含ませることができ、前記車載装置が、前記受信部で受信した前記警告情報を前記車両のドライバに認知可能に出力する出力手段を備えているものを採用することが好ましい（請求項２）。
上記警告情報は、カメラの設置位置等によって異なる、交通状況の撮像目的と対応して特定されるものであり、例えば、右直事故注意、出会い頭注意、カーブ死角注意、飛び出し死角注意、道路進入時死角注意などの情報よりなる。
【００１０】
この場合、車載装置の出力手段が上記警告情報をドライバに認知可能に出力するので、カメラの位置及び撮像方向が表示部の画面に表示されることと相まって、画面に表示される画像の危険性をドライバがより確実に察知することができ、ドライバに対する安全運転の支援が更に確実になる。
なお、上記出力手段による出力は、ヘッドアップディスプレイ等の表示部を用いた文字による警告情報の表示や、スピーカ等の音声手段によって警告情報を音声で報知することによって行うことができる。
【００１１】
本発明の表示システムにおいて、前記画像送信装置は、前記移動体の認識手段を有し、この認識手段が当該移動体を認識したときに前記画像と前記送信情報を送信するものであることが好ましい（請求項３）。
この場合、移動体が認識された場合にだけ画像と送信情報が送信され、事故原因となり得る移動体がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。
【００１２】
また、本発明の表示システムにおいて、前記移動体又は前記車載装置を搭載した前記車両若しくはこれらの双方が前記カメラに接近していることを検出する接近感知器を更に備えていることが好ましい（請求項４）。
この場合、前記画像送信装置が、前記接近感知器が前記移動体又は前記車両若しくはこれらの双方を検出したときに前記画像と前記送信情報を送信するようにすれば（請求項４）、移動体や車両が検出された場合にだけ画像と送信情報が送信され、事故原因となり得る移動体がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。
【００１３】
更に、本発明の表示システムにおいて、前記画像送信装置として、前記車載装置からの送信要求を受信した場合に前記画像と前記送信情報を送信するものを採用することもできる（請求項５）。
この場合、車載装置からの送信要求に基づいて画像送信装置が画像と送信情報を送信するので、その送信要求の有無に関係なく交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減することができる。
【００１４】
また、本発明の表示システムにおいて、前記車載装置が、前記カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算する演算部を有する場合には、前記表示部は、前記演算された位置及び向きデータを前記道路地図の道路図形に重ねて表示する車載ディスプレイより構成することができる（請求項６）。
この場合、車両内のドライバは、道路地図の道路図形に重ねて表示されたカメラの位置及び向きデータにより、実際のカメラの位置及び向きを把握することができる。
【００１５】
更に、本発明の表示システムにおいて、前記車載装置が、前記カメラの位置及び向きに基づいて前記車両に搭乗しているドライバから見た場合の位置及び向きデータを演算する演算部を有する場合には、前記表示部は、前記演算された位置及び向きデータを前記車両のフロントガラス面に表示するヘッドアップディスプレイより構成することができる（請求項７）。
この場合、車両内のドライバは、フロントガラス面に表示されたカメラの位置及び向きデータにより、実際のカメラの位置及び向きを把握することができる。
【００１６】
本発明の車載装置は、移動体を車両内の画面に表示するための車載装置であって、前記移動体を含む道路の交通状況を撮像して得られた画像と、前記カメラの位置及び向きを含む送信情報を受信する受信部と、この受信部で受信した前記画像と前記カメラの位置及び
向きを当該車両内の前記画面に同時に表示する表示部とを有するものである（請求項８）。
この車載装置を使えば、当該車載装置の表示部が、カメラで撮像された移動体を含む道路の交通状況の画像だけでなく、ドライバが理解可能な表示形式でそのカメラの位置及び向きを車両内の画面に表示するので、画面に表示された画像がどこの画像であるかや、画像に写っている交通状況の中で何が危険なのかを、車両内のドライバが判断し易くなる。
【００１７】
本発明の移動体の表示方法は、前記移動体を含む道路の交通状況をカメラで撮像し、前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を前記車両の車載装置に送信し、前記車載装置が受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する方法である（請求項９）。
この方法によって、カメラで撮像された移動体を含む道路の交通状況の画像だけでなく、そのカメラの位置及び向きを車両内の画面に表示することができる。このため、画面に表示された画像がどこの画像であるかや、画像に写っている交通状況の中で何が危険なのかを、車両内のドライバが判断し易くなる。従って、出合い頭衝突等の事故をより確実に防止することができる。
【００１８】
本発明は、移動体を含む道路の交通状況の画像と、カメラの位置及び向きを車両内の画面に同時に表示するものであるから、前記画像送信装置としては、交通状況の画像を取り込んで送信する機能と、演算又は記憶されたカメラの位置及び向きを含む送信情報を送信する機能を備えていれば足りる。
しかるに、この画像送信装置において、カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算するとともに、その演算された位置及び向きデータを道路地図の道路図形に重ねた合成図形を作成してから、交通状況の画像と合成画像を含む送信情報を車載装置に送信するシステム構成とすることもできる。
この場合には、上記データの演算と合成図形の作成を車載装置で行う必要がなくなるので、車載装置の演算負荷が小さくなって当該装置をより廉価にできるという利点がある。
【発明の効果】
【００１９】
以上の通り、本発明によれば、自車両から死角となる移動体の画像だけでなく、その画像を撮像したカメラの位置と向きが表示されるので、ドライバは違和感や錯覚なく移動体を認知することが可能となる。この結果、出合い頭衝突（交差側車両との衝突）や右直（右折時の死角となる直進バイク等との衝突）の事故などがより確実に防止ないし抑制され、安全運転の支援がより確実になる。
【発明を実施するための最良の形態】
【００２０】
以下、本発明の実施の形態を、添付図面を参照しながら詳細に説明する。
図１〜図４は、移動体の画像を自車両のディスプレイに表示する本発明の実施形態に係る表示システムの全体構成を示している。
〔システムの概略構成〕
図１〜図４に示すシステム１のうち、図１に示す表示システム１は、いわゆる右直事故防止用のものであり、自車線２と対向車線３を有する対向二車線の道路４の交差点５を右折しようとする自車両６のドライバに、対向車線３を走行する移動体７（特に、右直事故の原因となる直進バイク等の二輪車７Ｂ）を表示するものである。
【００２１】
従って、この表示システム１は、対向車線３における交差点５の手前を走行する移動体７を撮像すべく交差点５の近傍に設置されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を路車間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
なお、図１では、自車線２と対向車線３とを有する対向二車線の道路４を例示しているが、対向一車線や対向三車線以上の道路４であってもよい。
【００２２】
図１の例では、カメラ１０は、交差点５の対向車線３の歩道部分に立設した電柱１３の上部に設置されている。なお、このカメラ１０の設置場所は、電柱１３の他に、陸橋、歩道橋及びビル等の地上設備上の任意の場所でよい。また、カメラ１０をワイヤに吊り下げ状に設けて真上から撮像するようにしてもよい。
このカメラ１０の設置位置は、対向車線３を交差点５に向かって走行する対向車両７Ａ，７Ｂの前面や左側面部分を撮像できる位置である。従って、図１に示す電柱１３だけでなく、この電柱１３の交差道路１４側に位置する地上設備１５に設置することもできる。
【００２３】
図２に示す表示システム１は、交差点５での出合い頭事故防止用のものであり、自車線２を交差点５に向かって走行する自車両６のドライバに、交差道路１４を交差点５に向かって走行する移動体７（特に、トラックや乗用車等の車両７Ａ）を表示するものである。
従って、この表示システム１は、交差道路１４を走行する移動体７を撮像すべく交差点５の近傍に設置されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を路車間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
【００２４】
上記カメラ１０の設置位置は、交差道路１４を交差点５に向かって走行する車両７Ａを前方から撮像できる位置である。
従って、図２の表示システム１においても、カメラ１０を、電柱１３だけでなく、交差点５に近接するその他の地上設備に設置することもできる。例えば、電柱１３の他に、陸橋、歩道橋及びビル等の地上設備上の任意の場所でよい。また、カメラ１０をワイヤに吊り下げ状に設けて真上から撮像するようにしてもよい。
【００２５】
図３に示す表示システム１は、カーブ事故防止用のものであり、自車線２のカーブ部分８に向かって走行する自車両６のドライバに、そのカーブ部分８に向かって対向車線３を走行する移動体７（特に、トラックや乗用車等の車両７Ａ）を表示するものである。
従って、この表示システム１は、カーブ部分８に向かって対向車線３を走行する移動体７を撮像すべく当該カーブ部分８に設置されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を路車間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
【００２６】
上記カメラ１０の設置位置は、道路４のカーブ部分８に向かって走行する車両７Ａを前方から撮像できる位置である。
従って、図３の表示システム１においても、カメラ１０を、電柱１３だけでなく、カーブ部分８に近接するその他の地上設備に設置することもできる。例えば、電柱１３の他に、陸橋、歩道橋及びビル等の地上設備上の任意の場所でよい。また、カメラ１０をワイヤに吊り下げ状に設けて真上から撮像するようにしてもよい。
【００２７】
図４に示す表示システム１は、飛び出し事故防止用のものであり、自車線２を走行する自車両６のドライバに、自車両６の前方を走行又は停止している前方車両９によって死角となる移動体７（特に、前方車両９に隠れた歩行者７Ｃや自転車７Ｄ）を表示するものである。
従って、この表示システム１は、前方車両９に搭載されたカメラ１０と、このカメラ１０による撮像画像（静止画及び動画のいずれでもよい。）を車々間通信にて送信する画像送信装置１１と、この画像送信装置１１からの送信データを受けて自車両６のドライバに撮像画像を表示する車載装置１２とから構成されている。
【００２８】
図５は、本実施形態の表示システム１の機能ブロック図である。
〔カメラ〕
本実施形態の表示システム１を構成する各装置１０，１１，１２のうち、前記カメラ１０は、移動体７を含む道路の交通状況を撮像するものであり、その交通状況の静止画像を繰り返し撮像するデジタルカメラや、その交通状況の映像（動画）を撮像するデジタルビデオカメラよりなる。なお、このカメラ１０は、単眼カメラ、ステレオカメラの何れを用いてもよい。
【００２９】
〔画像送信装置〕
画像送信装置１１は、カメラ１０で撮像された画像と、そのカメラ１０の位置及び撮像方向を車載装置１２に送信するものであり、カメラ１０と同じ筐体に収納されており、カメラ１０とともに電柱１３等の地上設備や前方車両９に設置されている。もっとも、路車間通信の場合（図１〜図３）、画像送信装置１１は、カメラ１０とは別体でかつ他の場所に設置してもよく、この場合にはカメラ１０と通信回線で結ばれる。
この画像送信装置１１は、カメラ１０からの画像から移動体７の認識処理等を行う処理コンピュータ１７と、この処理コンピュータ１７からの指令に基づいて路車間通信又は車々間通信を行う通信装置１８とを備えている。以下、この画像送信装置１１の処理コンピュータ１７が行う処理内容を説明する。
【００３０】
〔処理コンピュータの処理内容〕
（１） 画像の取り込み及び送信
処理コンピュータ１７は、記憶領域にフレームバッファを備えており、カメラ１０で撮像された交通状況の画像を常時このバッファに取り込んでいる。
処理コンピュータ１７は、後述する移動体の認識処理を行い、この認識処理において所望の移動体７の存在を認識した場合には、フレームバッファに取り込まれた画像データをリアルタイムで通信装置１８に送信させる。
【００３１】
（２） カメラの位置及び撮像方向
また、処理コンピュータ１７は、カメラ１０の位置及び撮像方向を常時把握している。図１〜図３に示す路車間通信による表示システム１の場合には、カメラ１０の位置及び撮像方向は処理コンピュータ１７の記憶領域に予め記憶させてある。このカメラ１０の位置は、予め装置に定数設定しておくか、ＧＰＳ等の位置検出機能によって得ることができ、カメラ１０の経緯度の絶対位置データから構成される。また、カメラの撮像方向は、予め装置に定数設定しておくか、画像認識で道路等を認識し、道路地図等と比較して自動的に求めることができ、カメラ１０の撮像方向のベクトルデータから構成される。
他方、図４に示す車々間通信の場合には、カメラ１０は前方車両９に搭載されているので、処理コンピュータ１７は、時々刻々と変化する当該カメラ１０の位置及び撮像方向を前方車両９のＧＰＳ機能等によって取得し、通信装置１８に送信させる。
【００３２】
なお、カメラ１０の撮像方向は、通常、カメラレンズの光軸方向によって定義されるが、所望の交通状況の画像が得られる限りにおいて、その光軸方向と厳密に一致している必要はない。
以上のようにカメラ１０の位置（座標）とその撮像方向（ベクトル）が特定できれば、自車両６の位置検出機能等によって当該自車両６の位置を特定することにより、自車両６から見たカメラ１０の相対位置と撮像の相対方向を算出でき、自車両６の車載装置１２のディスプレイ（表示部）に移動体７を表示することができる。
【００３３】
（３） 特徴点による移動体の認識
図８は、特徴点及び特徴線による移動体の認識処理の方法を示す図である。
ここで、カメラ１０としてステレオカメラが使用されているとすると、左右の画像の車両の特徴点や特徴線を対応付けし、その３次元位置を算出することができる。この場合、例えば、図８（ａ）に示すような移動体Ｃの実画像から、図８（ｂ）に示すような特徴点と特徴線とからなる認識データが得られる。
このため、上記認識データと別途用意された車種のテンプレートとを比較すること等により、抽出された車両が乗用車やトラック等であるか、自転車やバイク等の二輪車であるか、或いは歩行者であるかを判定することができる。
【００３４】
図８に示す例では、特徴点ａ〜ｉは、移動体Ｃの各角部に対応付けられた特徴点であり、線分ａｅ、線分ｃｇ、線分ｄｉ及び線分ｅｈ等は、移動体Ｃの外形線に対応付けられた特徴線であり、これにより、当該移動体Ｃの３次元位置を特定することができる。なお、この特徴点は、移動体Ｃを代表する点であり、その位置座標としては、道路４の進行方向、これと垂直に交差する水平方向である横断方向及び高さ方向の３次元であるが、道路４の進行方向だけでもよいし、道路の進行方向と横断方向だけであってもよい。
【００３５】
なお、移動体Ｃの特徴点は使用せず、車両の画像上の大きさから車種を求める簡単な方法や、或いは、これとテンプレートマッチングの結果から移動体Ｃの車種を求める方法も考えられる。
これらの場合には、例えば、移動体Ｃの画像の地面に近い下方の切り出し部分の適当な左端点と右端点（図８（ｂ）における点ａ及び点ｈ）を特徴点として、道路４の進行方向と横断方向の位置座標を求めればよい。
【００３６】
（４） 撮像画像及び送信情報の送信
上記の認識処理により、交通状況の画像中に車両７Ａ等よりなる移動体７の存在が判明すると、処理コンピュータ１７は、前記カメラ１０で得られた撮像画像と、そのカメラ１０の位置及び撮像方向とを、路車間通信又は車々間通信によって通信装置１８に送信させる。
また、処理コンピュータ１７は、自車両６から見て道路４の交通状況から想定される、事故原因となり得る危険性の種類を特定した警告情報を記憶しており、この警告情報を前記送信情報に含めて通信装置１８に送信させる。
【００３７】
処理コンピュータ１７が記憶している警告情報は、カメラ１０の設置位置や撮像方向によって異なる、カメラ１０による交通状況の撮像目的と対応して特定されるものであり、図１に示す右直事故防止用の表示システム１の場合には、例えば「右直事故注意」という文字情報で構成される。
また、上記警告情報は、図２に示す出合い頭事故防止用の表示システム１の場合には、例えば「出会い頭注意」や「道路進入時死角注意」という文字情報で構成され、図３に示すカーブ事故防止用の表示システム１の場合には、例えば「カーブ死角注意」という文字情報で構成され、図４に示す飛び出し事故防止用の表示システム１の場合には、例えば「飛び出し死角注意」という文字情報で構成される。
【００３８】
〔情報通信方式〕
図９は、画像送信装置１１による路車間通信の場合の通信方式を示す概念図である。
図９（ａ）に示す通信方式は、交差点５の近辺を感知エリアとする無線ＬＡＮ等の中域の無線通信方式を示しており、この場合には、画像送信装置１１の通信装置１８から、交差点５を含む一定のエリアに通信電波１９が送信される。
もっとも、かかる無線通信方式を採用する場合には、自車線２から交差点５に進入する自車両６が受信した送信情報が、どの画像送信装置１１から送信されたものであるかを識別する機能を車載装置１２が有している必要がある。
【００３９】
他方、図９（ｂ）に示す通信方式は、ＤＳＲＣ等の狭域無線や、光ビーコン等のスポット通信方式といった狭域無線通信方式を示している。
この場合、ＤＳＲＣ等の狭域通信装置２０は、自車線２における交差点５の手前に走行方向に沿って複数台並設されており、これら複数の狭域通信装置２０を介して、移動体７の画像を含む送信情報が送信される。
なお、この場合には、画像送信装置１１と狭域通信装置２０とを例えば有線によって通信可能に接続する必要がある。
【００４０】
〔車載装置〕
図５に戻り、車載装置１２は、画像送信装置１１の通信装置１８から受信した移動体７の画像をドライバに表示するとともに、送信情報に含まれるカメラ１０の位置と撮像方向を視認可能に架空に表示することにより、当該車載装置１２が搭載された自車両６のドライバに対して移動体７の存在を報知するものである。
この車載装置１２は、画像処理機能やマンマシン機能を持った車載コンピュータ２６と、このコンピュータ２６によって駆動制御される時計装置２７、位置方位検出装置２８、通信装置２９、ディスプレイ３０及びスピーカ３１等から構成されている。
【００４１】
上記通信装置２９は、画像送信装置１１ら送信されたデータ（送信情報）を受信するものであり、復調方式や復号化方式は画像送信装置１１の通信装置１８と対応している。時計装置２７は、例えば現在時刻が正確に得られる電波時計からなるが、これに限られない。
画像送信装置１１から時刻データが送られてくるのであれば、この時刻データを参照してもよいし、この他ＧＰＳ、放送媒体、公衆通信媒体などから時刻が分かるのであれば、これを参照してもよい。
【００４２】
位置方位検出装置２８は、当該車両の位置と方位を検出するための装置である。なお、車載装置１２の位置検出は、例えばＧＰＳを利用することができる。ＧＰＳを利用する以外にも、車両が道路上を走行することを前提としたマップマッチング、車載搭載センサ等、車載ナビゲーションで使用される諸技術を利用してもよい。
また、直前で交信した路側装置、例えば光ビーコンから絶対位置を取得し、これと自車両の距離計を利用して、現在位置を検出してもよい。なお位置の表現は、経緯度による絶対的表現と、交差点５からの距離のような相対的表現があり、どちらを利用してもよい。
【００４３】
更に、位置方位検出装置２８は、車両の位置とともに車両の方位を検出する。この車両の方位は、地磁気方位センサ、ジャイロセンサなど車載ナビゲーションで使用される技術を利用可能である。また、現在の位置と直近に検出した位置との差分をとることで方位を検出してもよい。
ディスプレイ３０は、車載のナビゲーション装置やテレビジョン装置の画像表示部を構成する車載ディスプレイ３０Ａ、或いは、自車両６のフロントガラス面に図形を架空表示するフロントディスプレイ（或いは、ヘッドアップディスプレイ）３０Ｂよりなる。このディスプレイ３０は、移動体７の画像とその撮像位置及び撮像方向をドライバに視認可能に表示する表示手段であり、この表示によって移動体７の存在をドライバに報知する報知手段として機能する。
【００４４】
なお、上記ヘッドアップディスプレイ３０Ｂは画像投影装置を用いて、運転席の近くのガラスに図形等の画像を表示するものである。車両のフロントガラスに図形等の画像を表示する技術は公知である（例えば、特開平8-108773号公報参照）。
スピーカ３１は、画像送信装置１１に含まれる警告情報を音声にてドライバにアナウンスするためのものである。
車載コンピュータ２６は、画像送信装置１１から送信されてくる警告情報に基づいて、必要に応じて移動体７の存在をドライバに気付かせるために、その警告情報のディスプレイ３０による画面表示用データと、スピーカ３１による音声出力用のデータを作成する。
【００４５】
以下、この車載装置１２の車載コンピュータ２６が行う処理内容を説明する。
〔車載コンピュータの処理内容〕
（１） 自車両の位置評定と移動体の表示開始タイミング
カメラ１０の位置をディスプレイ３０に表示する場合、自車両６の位置との相対位置が判明している必要がある。
そこで、車載コンピュータ２６は、画像送信装置１１から送信されるカメラ１０の位置が経緯度等の絶対位置である場合には、自車両６の位置を表示時点において評定している。すなわち、自車両６の車載コンピュータ２６は、前記位置方位検出装置２８により、常時、絶対位置の評定を別途正確に行っている。
【００４６】
一方、車載コンピュータ２６は、無線ＬＡＮのような中域無線通信の場合には、交差点５の直前や右折位置等の、予め定められた位置に到着したときに、ディスプレイ３０による移動体７の画像表示を開始させる。スポット通信による場合は、データを受信したときに移動体７の表示を開始してもよいし、予め定められた位置に到着したときにその表示を開始してもよい。
なお、位置方位検出装置２８による自車両６の位置検出の精度が悪い場合でも、前記スポット通信による場合には、二輪車７Ｂの位置としてスポット通信位置からの相対位置で得ることができれば、その時点で表示を開始すればよい。
【００４７】
（２） カメラの位置及び撮像方向の表示用データの作成
また、自車両６の車載コンピュータ２６は、自車両６の位置と、通信装置２９で受信したカメラ１０の位置及び撮像方向とに基づいて、その位置と方向をディスプレイ３０に表示する場合の位置及び方向データを演算する。
例えば、ディスプレイ３０がヘッドアップディスプレイ３０Ｂである場合には、車載コンピュータ２６は、図１０（ｃ）に示すように、フロントガラス面３２におけるカメラ１０の表示位置（ｗ’，ｈ’）と、カメラ１０の撮像方向の表示ベクトルα’を以下の通り算出する。
【００４８】
ここで、図１０（ａ）に示すように、ドライバの目の地上からの高さをｈ、フロントガラス面（表示面）までの距離をｘ、前方の二輪車までの距離をｙとすると、カメラ１０の表示面の高さ（縦方向の位置）ｈ’は、ｈ’＝（ｙ−ｘ）・ｈ／ｙ となる。ｙ≫ｘであるため、ｈ’＝ｈとしてもよい。なお、ｈは、ドライバにより変わるため、システムとしては平均的な数値を入れておき、使用時にマンマシンで容易に変更できるようにしておけばよい。
また、自車両６が道路方向に進行している場合には、図１０（ｂ）に示すように、その自車両６の位置とカメラ１０の位置及び道路方位から、カメラ１０の当該車両位置からの横方向の位置ｗと、フロントガラス面での横方向の位置ｗ’を計算することができる。車両に搭載されたセンサ等で車両の進行方位が検出できる場合には、これを用いてもよい。
【００４９】
更に、車載コンピュータ２６は、撮像方向のベクトルαの始端点の座標（ｘ，ｙ）と同様に、当該ベクトルαの終端点に関しても上記した座標変換の演算を行い、その始端点と終端点の表示位置の座標から、カメラ１０の撮像方向をフロントガラス面３２に表示する場合の表示ベクトルα’を演算する。
他方、ディスプレイ３０が車載ディスプレイ３０Ａである場合には、車載コンピュータ２６は、画像送信装置１１から受信したカメラ１０の位置及び撮像方向を、ディスプレイ３０Ａに表示される道路地図の座標系に変換し、その位置及び方向データを演算する。
【００５０】
〔ディスプレイによる表示例〕
（１） ヘッドアップディスプレイを利用する場合
図１１は、右直事故防止用の表示システム（図１）の場合のヘッドアップディスプレイを利用した表示例を示している。
この場合、車載コンピュータ２６は、カメラ１０で得られた撮像画像３４を車載ディスプレイ３０Ａに表示するとともに、パターン化されたカメラ位置表示３５と撮像方向表示３６を、ヘッドアップディスプレイ３０Ｂを構成するフロントガラス面３２の所定の表示位置に表示する。
【００５１】
このように、自車両６に搭乗しているドライバは、カメラ１０の位置と撮像方向をフロントガラス面３２に表示された仮想表示３５，３６によって把握できるので、カメラ１０の撮像画像３４がどこの画像であるかや、撮像画像３４に写っている交通状況の中で何が危険なのかを判断し易くなり、右直事故の防止がより確実となる。
また、図１１の表示例では、車載コンピュータ２６により、カメラ１０に関する仮想表示３５，３６だけでなく、ドライバに対する警告情報（この場合は、「右直事故注意」よりなる注意喚起表示３７）がフロントガラス面３２に表示される。更に、車載コンピュータ２６は、同時に、上記注意喚起文をスピーカ３１から音声出力させる。なお、図１１に仮想線で示すように、カメラ１０の撮像画像３４についても、フロントガラス面３２の任意位置に表示させるようにしてもよい。
【００５２】
図１２は、出合い頭事故防止用の表示システム（図２）の場合のヘッドアップディスプレイを利用した表示例を示し、図１３は、カーブ事故防止用の表示システム（図３）の場合のヘッドアップディスプレイを利用した表示例を示し、図１４は、飛び出し事故防止用の表示システム（図４）の場合のヘッドアップディスプレイを利用した表示例を示している。
これら図１２〜図１４に示す表示例は、図１１の表示例と撮像目的が異なるだけで、構成及び機能は図１１の表示例と同様である。従って、図１２〜図１４に同じ符号を付することにより詳細な説明を省略する。
【００５３】
（２） 車載ディスプレイを利用する場合
図１５は、右直事故防止用の表示システム（図１）の場合の車載ディスプレイを利用した表示例を示している。
この場合、車載コンピュータ２６は、カメラ１０で得られた撮像画像３４を車載ディスプレイ３０Ａの左側部分に表示するとともに、パターン化されたカメラ位置表示３５と撮像方向表示３６を、車載ディスプレイ３０Ａの道路地図上に表示する。
【００５４】
この場合も、自車両６に搭乗しているドライバは、カメラ１０の位置と撮像方向を撮像画像３４の隣の仮想表示３５，３６によって把握できるので、カメラ１０の撮像画像３４がどこの画像であるかや、撮像画像３４に写っている交通状況の中で何が危険なのかを判断し易くなり、右直事故の防止がより確実となる。
なお、図１５に示す表示例では、自車両６をパターン化した車両表示３８も併せて道路地図上に表示されており、これによって自車両６とカメラ１０の相対位置をドライバが把握し易くなっている。
【００５５】
図１６は、出合い頭事故防止用の表示システム（図２）の場合の車載ディスプレイを利用した表示例を示し、図１７は、カーブ事故防止用の表示システム（図３）の場合の車載ディスプレイを利用した表示例を示し、図１８は、飛び出し事故防止用の表示システム（図４）の場合の車載ディスプレイを利用した表示例を示している。
これら図１６〜図１８に示す表示例は、図１５の表示例と撮像目的が異なるだけで、構成及び機能は図１２の表示例と同様である。従って、図１６〜図１８に同じ符号を付することにより詳細な説明を省略する。
【００５６】
次に、図６及び図７を参照しつつ、画像送信装置１１の処理コンピュータ１７と、車載装置１２の車載コンピュータ２６とで行われる周期的な処理フローについて説明する。
〔処理コンピュータの周期的フロー〕
画像送信装置１１の処理コンピュータ１７は、図６に示す処理フローを所定の処理周期で行う。
図６に示すように、まず、処理コンピュータ１７は、カメラ１０で撮像された交通状況の画像を取り込み（図６のＳ１）、そこに写っている被写体について前記した特徴点処理によって車両等の移動体７を認識する（図６のＳ２）。
【００５７】
次に、処理コンピュータ１７は、移動体７を認識すると（図６のＳ２でＹｅｓ）、カメラ１０による撮像画像と、カメラの位置及び撮像方向と、撮像目的に対応した警告情報を通信装置１８を介して送信する（図６のＳ３）。なお、処理コンピュータ１７は、移動体７を認識しない場合には、それらの情報を送信せずに処理を終了する（図３のＳ２でＮｏ）。
【００５８】
〔車載コンピュータの周期的フロー〕
一方、車載装置１２の車載コンピュータ２６は、図７に示す処理フローを所定の処理周期で行う。
図７に示すように、まず、車載コンピュータ２６は、画像送信装置１１からの送信データに撮像画像があるかどうかをチェックし（図７のＳ１）、その画像がある場合には（図４のＳ２でＹｅｓ）、自車両６の位置と、前記送信情報に含まれているカメラの位置及び撮像方向とから、自車両６から見たカメラ１０の相対的な位置及び方向（前記表示位置（ｗ’，ｈ’）及び表示ベクトルα’）を演算し（図７のＳ３）、交通状況の撮像画像３４とともにその相対的な位置及び方向をディスプレイ３０に表示させる（図７のＳ４）。
【００５９】
また、車載コンピュータ２６は、撮像目的に対応する警告情報が画像送信装置１１からの送信情報に含まれているか否かを判定し（図７のＳ５）、含まれている場合には、その警告情報をディスプレイ３０又はスピーカ３１若しくはこれらの双方を用いて、自車両６のドライバに認知可能に報知する（図７のＳ６）。
以上の通り、本実施形態に係る表示システム１によれば、カメラ１０で撮像された移動体７を含む道路４の交通状況の画像だけでなく、そのカメラ１０の位置及び撮像方向を自車両６内の画面に表示するので、自車両６のドライバがその移動体７との相対関係を容易に把握することができ、ドライバに対する安全運転の支援をより確実に行うことができる。
【００６０】
また、本実施形態の表示システム１では、カメラ１０での撮像目的に対応する警告情報が車載装置１２のディスプレイ３０やスピーカ３１を通じてドライバに認知可能に出力されるので、カメラ１０の位置及び撮像方向がディスプレイ３０の画面に表示されることと相まって、画面に表示される画像の危険性をドライバがより確実に察知することができ、ドライバに対する安全運転の支援が更に確実になる。
【００６１】
更に、本発明の表示システム１では、画像送信装置１１が移動体７を認識したときに、カメラ１０による撮像画像と送信情報を送信するので、事故原因となり得る移動体７がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。
また、この場合、交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減することができるという利点もある。
【００６２】
図１９は、本発明の他の実施形態に係る表示システム１を示している。
本実施形態の表示システム１は、カメラ１０、画像送信装置１１及び車載装置１２に加えて、移動体７がカメラ１０に接近していることを検出する第一接近感知器４０と、車載装置１２を搭載した自車両５がカメラ１０に接近していることを検出する第二接近感知器４１とを備えている。
これらの感知器４０，４１はいずれも画像送信装置１１の処理コンピュータ１７と有線によって通信可能に接続されており、その処理コンピュータ１７は、これらの感知器４０，４１の双方又はいずれか一方が移動体７や自車両６を検出したときに、撮像画像及び送信情報を送信するようになっている。
【００６３】
従って、移動体７や自車両６が検出された場合にだけ、画像送信装置１１から画像と送信情報が送信され、事故原因となり得る移動体７がない場合にはそれらの情報が送信されない。このため、危険でないのに車載装置１２に画像等を送信し続けることに伴う、ドライバの混乱を未然に防止することができる。また、本実施形態においても、交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減することができるという利点もある。
なお、図１９の例では、移動体７検出用と自車両６検出用の二種類の接近感知器４０，４１を道路に設置しているが、これらのいずれか一つだけを設けることにしてもよい。
【００６４】
以上説明した実施形態では、カメラ１０の向きをドライバに理解させるためにカメラ１０の撮像方向をディスプレイ３０に表示しているが、カメラ１０の向きはその他の表現形式でもドライバに提示することができる。図２０〜図２２は、カメラ２０の向きの他の表現形式をそれぞれ示している。
このうち、図２０は、車載ディスプレイ３０Ａにカメラ１０の撮像領域を表示させる場合の表示例を示しており、この場合の撮像領域表示４３は、カメラ位置表示３５からカメラ１０の画角に相当する開き角度で広がる扇形形状となっている。
【００６５】
また、図２１は、ヘッドアップディスプレイ３０Ｂにカメラ１０の撮像領域を表示させる場合の表示例を示しており、この場合の撮像領域表示４３は、カメラ位置表示３５からカメラ１０の画角に相当する開き角度で広がる円錐形状となっている。
更に、カメラ１０の向きは、そのカメラ１０の撮像対象であるエリアを地図上に直接的に提示することによって表現することもできる。
例えば、図２２は、ＶＩＣＳを利用した簡易型の道路図形４４に対して、カメラ１０の撮像対象をそのまま表示した表示例を示している。
【００６６】
図２２において、道路図形４４に含まれている各道路のうち、カメラ１０の撮像対象となっている道路部分には着色や網掛け等によって表現された撮像対象表示４５が施されており、この撮像対象表示４５をカメラ位置表示３５とともに道路図形４４に描くことにより、カメラ１０の向きをドライバに提示するようにしている。
【００６７】
本発明は上記した各実施形態に限定されるものではない。
例えば、上記各実施形態において、画像送信装置１１は、必ずしも１台ではなく複数存在してもよい。また、同じ道路にカメラ１０を複数台設置し、複数の撮像データを利用することにより、移動体７の認識精度を高めてもよい。
また、本発明の表示システム１を適用できるその他の見通しの悪い場所としては、駐車場から幹線道路にでる場所は、逆に幹線道路から駐車場に入る場所などがある。
【００６８】
更に、画像送信装置１１としては、車載装置１２からの送信要求を受信した場合に画像と送信情報を送信するものを採用することにしてもよい。この場合には、送信要求の有無に関係なく交通状況の撮像画像を常時送信し続ける場合に比べて、路車間通信や車々間通信におけるデータ送信量を低減できるという利点がある。
また、上記した各実施形態では、カメラ１０の位置及び向きデータの演算や道路図形への合成はすべて車載装置１２において行っているが、これを画像送信装置１１に行わせるシステム構成とすることもできる。
【００６９】
すなわち、このシステム構成の画像送信装置１１は、カメラ１０の位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算するとともに、その演算された位置及び向きデータを道路地図の道路図形に重ねた合成図形を作成してから、交通状況の画像と合成画像を含む送信情報を車載装置１２に送信することになる。
従って、この場合には、上記データの演算と合成図形の作成を車載装置１２で行う必要がなくなるので、車載装置１２の演算負荷が小さくなって当該装置をより廉価にできる。
【図面の簡単な説明】
【００７０】
【図１】右直事故防止用の表示システムの全体構成を示す斜視図である。
【図２】出合い頭事故防止用の表示システムの全体構成を示す斜視図である。
【図３】カーブ事故防止用の表示システムの全体構成を示す斜視図である。
【図４】飛び出し事故防止用の表示システムの全体構成を示す斜視図である。
【図５】上記表示システムの機能ブロック図である。
【図６】画像送信装置の処理フローを示すフローチャートである。
【図７】車載装置の処理フローを示すフローチャートである。
【図８】特徴点及び特徴線による移動体の認識方法を示す図である。
【図９】路車間通信の通信方法を示す概念図である
【図１０】（ａ）はフロントガラス面でのカメラの高さ位置を示す図であり、（ｂ）はフロントガラス面でのカメラの横方向位置を示す図であり、（ｃ）はカメラが表示されたフロントガラス面の正面図である。
【図１１】右直事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１２】出合い頭事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１３】カーブ事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１４】飛び出し事故防止用の表示システムの場合の、フロントガラス面に対する表示例を示す図である。
【図１５】右直事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１６】出合い頭事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１７】カーブ事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１８】飛び出し事故防止用の表示システムの場合の、車載ディスプレイに対する表示例を示す図である。
【図１９】他の実施形態に係る表示システムの全体構成を示す斜視図である。
【図２０】カメラの撮像領域を表示させる場合の、車載ディスプレイに対する表示例を示す図である。
【図２１】カメラの撮像領域を表示させる場合の、ヘッドアップディスプレイに対する表示例を示す図である。
【図２２】カメラの撮像対象を表示させる場合の、車載ディスプレイに対する表示例を示す図である。
【００７１】
１ 表示システム
２ 自車線
３ 対向車線
４ 道路
５ 交差点
６ 自車両
７ 移動体
８ カーブ部分
９ 前方車両
１０ カメラ
１１ 画像送信装置
１２ 車載装置
１７ 処理コンピュータ（認識手段）
１８ 通信装置（送信手段）
２６ 車載コンピュータ（演算部）
２８ 位置方位検出装置
２９ 通信装置（受信部）
３０ ディスプレイ（表示部、出力手段）
３０Ａ 車載ディスプレイ
３０Ｂ ヘッドアップディスプレイ
３１ スピーカ（出力手段）
３２ フロントガラス面
４０ 第一接近感知器
４１ 第二接近感知器
【特許請求の範囲】
【請求項１】
移動体を車両内の画面に表示するための移動体の表示システムであって、
前記移動体を含む道路の交通状況を撮像するカメラと、
前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を送信する画像送信装置と、
前記車両に搭載された車載装置とを備え、
前記車載装置は、前記画像と前記カメラの位置及び向きを受信する受信部と、この受信部で受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する表示部とを有すること特徴とする移動体の表示システム。
【請求項２】
前記画像送信装置が送信する送信情報には、前記車両から見て前記道路の交通状況から想定される事故原因となり得る危険性の種類を特定した警告情報が含まれており、
前記車載装置は、前記受信部で受信した前記警告情報を前記車両のドライバに認知可能に警告する出力手段を備えている請求項１に記載の移動体の表示システム。
【請求項３】
前記画像送信装置は、前記移動体の認識手段を有し、この認識手段が当該移動体を認識したときに前記画像と前記送信情報を送信する請求項１又は２に記載の移動体の表示システム。
【請求項４】
前記移動体又は前記車載装置を搭載した前記車両若しくはこれらの双方が前記カメラに接近していることを検出する接近感知器を更に備えており、
前記画像送信装置は、前記接近感知器が前記移動体又は前記車両若しくはこれらの双方を検出したときに前記画像と前記送信情報を送信する請求項１又は２に記載の移動体の表示システム。
【請求項５】
前記画像送信装置は、前記車載装置からの送信要求を受信した場合に前記画像と前記送信情報を送信する請求項１又は２に記載の移動体の表示システム。
【請求項６】
前記車載装置は、前記カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算する演算部を有し、
前記表示部は、前記演算された位置及び向きデータを前記道路地図の道路図形に重ねて表示する車載ディスプレイよりなる請求項１〜５のいずれか１項に記載の移動体の表示システム。
【請求項７】
前記車載装置は、前記カメラの位置及び向きに基づいて前記車両に搭乗しているドライバから見た場合の位置及び向きデータを演算する演算部を有し、
前記表示部は、前記演算された位置及び向きデータを前記車両のフロントガラス面に表示するヘッドアップディスプレイよりなる請求項１〜５のいずれか１項に記載の移動体の表示システム。
【請求項８】
移動体を車両内の画面に表示するための車載装置であって、
前記移動体を含む道路の交通状況を撮像して得られた画像と、前記カメラの位置及び向きを含む送信情報を受信する受信部と、
この受信部で受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する表示部と
を有することを特徴とする車載装置。
【請求項９】
移動体を車両内の画面に表示するための移動体の表示方法であって、
前記移動体を含む道路の交通状況をカメラで撮像し、
前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を前記車両の車載装置に送信し、
前記車載装置が受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示することを特徴とする移動体の表示方法。
【請求項１０】
移動体を車両内の画面に表示させるために、前記移動体を含む画像を当該車両内に搭載された車載装置に送信する画像送信装置であって、
移動体を含む道路の交通状況を撮像するカメラで撮像された画像を取得する手段と、
前記カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算する演算手段と、
前記演算された位置及び向きデータを前記道路地図の道路図形に重ねた合成図形を作成する手段と、
前記画像と前記合成画像を含む送信情報を前記車載装置に送信する手段と
を有することを特徴とする画像送信装置。
【請求項１】
移動体を車両内の画面に表示するための移動体の表示システムであって、
前記移動体を含む道路の交通状況を撮像するカメラと、
前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を送信する画像送信装置と、
前記車両に搭載された車載装置とを備え、
前記車載装置は、前記画像と前記カメラの位置及び向きを受信する受信部と、この受信部で受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する表示部とを有すること特徴とする移動体の表示システム。
【請求項２】
前記画像送信装置が送信する送信情報には、前記車両から見て前記道路の交通状況から想定される事故原因となり得る危険性の種類を特定した警告情報が含まれており、
前記車載装置は、前記受信部で受信した前記警告情報を前記車両のドライバに認知可能に警告する出力手段を備えている請求項１に記載の移動体の表示システム。
【請求項３】
前記画像送信装置は、前記移動体の認識手段を有し、この認識手段が当該移動体を認識したときに前記画像と前記送信情報を送信する請求項１又は２に記載の移動体の表示システム。
【請求項４】
前記移動体又は前記車載装置を搭載した前記車両若しくはこれらの双方が前記カメラに接近していることを検出する接近感知器を更に備えており、
前記画像送信装置は、前記接近感知器が前記移動体又は前記車両若しくはこれらの双方を検出したときに前記画像と前記送信情報を送信する請求項１又は２に記載の移動体の表示システム。
【請求項５】
前記画像送信装置は、前記車載装置からの送信要求を受信した場合に前記画像と前記送信情報を送信する請求項１又は２に記載の移動体の表示システム。
【請求項６】
前記車載装置は、前記カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算する演算部を有し、
前記表示部は、前記演算された位置及び向きデータを前記道路地図の道路図形に重ねて表示する車載ディスプレイよりなる請求項１〜５のいずれか１項に記載の移動体の表示システム。
【請求項７】
前記車載装置は、前記カメラの位置及び向きに基づいて前記車両に搭乗しているドライバから見た場合の位置及び向きデータを演算する演算部を有し、
前記表示部は、前記演算された位置及び向きデータを前記車両のフロントガラス面に表示するヘッドアップディスプレイよりなる請求項１〜５のいずれか１項に記載の移動体の表示システム。
【請求項８】
移動体を車両内の画面に表示するための車載装置であって、
前記移動体を含む道路の交通状況を撮像して得られた画像と、前記カメラの位置及び向きを含む送信情報を受信する受信部と、
この受信部で受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示する表示部と
を有することを特徴とする車載装置。
【請求項９】
移動体を車両内の画面に表示するための移動体の表示方法であって、
前記移動体を含む道路の交通状況をカメラで撮像し、
前記カメラで撮像された画像と、前記カメラの位置及び向きを含む送信情報を前記車両の車載装置に送信し、
前記車載装置が受信した前記画像と前記カメラの位置及び向きを当該車両内の前記画面に同時に表示することを特徴とする移動体の表示方法。
【請求項１０】
移動体を車両内の画面に表示させるために、前記移動体を含む画像を当該車両内に搭載された車載装置に送信する画像送信装置であって、
移動体を含む道路の交通状況を撮像するカメラで撮像された画像を取得する手段と、
前記カメラの位置及び向きに基づいて道路地図上で見た場合の位置及び向きデータを演算する演算手段と、
前記演算された位置及び向きデータを前記道路地図の道路図形に重ねた合成図形を作成する手段と、
前記画像と前記合成画像を含む送信情報を前記車載装置に送信する手段と
を有することを特徴とする画像送信装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【公開番号】特開２００８−７０９５５（Ｐ２００８−７０９５５Ａ）
【公開日】平成２０年３月２７日（２００８．３．２７）
【国際特許分類】
【出願番号】特願２００６−２４６８０８（Ｐ２００６−２４６８０８）
【出願日】平成１８年９月１２日（２００６．９．１２）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＶＩＣＳ
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【Ｆターム（参考）】
【公開日】平成２０年３月２７日（２００８．３．２７）
【国際特許分類】
【出願日】平成１８年９月１２日（２００６．９．１２）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＶＩＣＳ
【出願人】（０００００２１３０）住友電気工業株式会社 (12,747)
【Ｆターム（参考）】
[ Back to top ]