作業車両の周辺監視装置
【課題】本発明の課題は、作業車両の走行時に作業車両の位置をオペレータが容易に認識することができる作業車両の周辺監視装置を提供することにある。
【解決手段】周辺監視装置の俯瞰画像作成部は、作業車両１が停止状態であるときには、第１仮想投影面３１を用いて俯瞰画像を作成する。第１仮想投影面３１の少なくとも外縁部は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。作業車両１が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面３２を用いて俯瞰画像を作成する。第２仮想投影面３２の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。
【解決手段】周辺監視装置の俯瞰画像作成部は、作業車両１が停止状態であるときには、第１仮想投影面３１を用いて俯瞰画像を作成する。第１仮想投影面３１の少なくとも外縁部は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。作業車両１が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面３２を用いて俯瞰画像を作成する。第２仮想投影面３２の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、作業車両の周辺監視装置に関する。
【背景技術】
【０００２】
従来、超大型の作業車両として、鉱山等で砕石を運搬するためのダンプトラックが広く用いられている。このようなダンプトラックは、一般的な車両に比較して著しく車幅が広く、また前後長が長いため、サイドミラー等によって作業車両周辺の状況を運転者が把握することは困難である。
【０００３】
一方、車両周辺の状況を運転者に簡便に把握させることを目的として、周辺監視装置が提案されている。周辺監視装置は、車両に装着されたカメラなどの撮像部を含む。周辺監視装置は、撮像部によって撮像された画像を合成することにより、作業車両の周囲を示す俯瞰画像を作成する。例えば、特許文献１に示されている自動車の周辺監視装置では、俯瞰画像は、撮像部によって撮像された画像を仮想投影面上に投影することにより作成される。一般的に、仮想投影面が平坦な形状である場合、俯瞰画像では、車両から遠くにある物体ほど大きく表示される。このため、上記の俯瞰画像では、車両の進行方向に向かって画像が広がって表示される。そこで、特許文献１の周辺監視装置では、仮想投影面は、車両の進行方向に向かって徐々に立ち上がる形状を有する。これにより、車両の進行方向に向かって画像が広がって表示されることが抑えられる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４-２１３０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記のように、仮想投影面が、車両の進行方向に向かって徐々に立ち上がる形状である場合、俯瞰画像の外縁部において、地面が歪んで表示される。従って、車両の周囲の道路も、俯瞰画像において歪んで表示される。このため、車両の走行時には、車両が道路上のどの位置を走っているのかオペレータが認識し難いという問題がある。超大型のダンプトラックのように作業車両ではオペレータが直接的に目視できない領域が作業車両の周囲に多く存在するため、このような問題は特に顕著となる。
【０００６】
本発明の課題は、作業車両の走行時に作業車両の位置をオペレータが容易に認識することができる作業車両の周辺監視装置を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の第１の態様に係る作業車両の周辺監視装置は、撮像部と、俯瞰画像作成部と、表示部と、走行状態判定部と、を備える。撮像部は、作業車両に装着され、作業車両の周囲の領域を撮像して画像データを得る。俯瞰画像作成部は、画像データを仮想投影面に投影することにより、作業車両の周囲の俯瞰画像を作成する。表示部は、俯瞰画像を表示する。走行状態判定部は、作業車両が走行状態であるのか停止状態であるのかを判定する。作業車両が停止状態であるときには、俯瞰画像作成部は、第１仮想投影面を用いて俯瞰画像を作成する。第１仮想投影面の少なくとも外縁部は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。作業車両が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面を用いて俯瞰画像を作成する。第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。
【０００８】
本発明の第２の態様に係る作業車両の周辺監視装置は、第１の態様の作業車両の周辺監視装置であって、仮想投影面は、第１範囲と第２範囲とを含む。第１範囲は、作業車両の周囲に位置する。第２範囲は、第１範囲よりも作業車両から離れている。第１仮想投影面の第１範囲は、地面からの高さが一定の平坦な形状である。第１仮想投影面の第２範囲は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。第２仮想投影面の第１範囲及び第２範囲は、地面からの高さが一定の平坦な形状である。
【０００９】
本発明の第３の態様に係る作業車両の周辺監視装置は、第２の態様の作業車両の周辺監視装置であって、第１仮想投影面の第２範囲は、複数の湾曲面と、複数の球面とを含む。複数の湾曲面は、作業車両の外形に対応する矩形の各辺に平行な仮想軸を中心に湾曲している。複数の球面は、隣接する一対の湾曲面の間にそれぞれ配置されて、一対の湾曲面と連続的につながっている。
【００１０】
本発明の第４の態様に係る作業車両の周辺監視装置は、第１から第３の態様のいずれかの作業車両の周辺監視装置であって、第２仮想投影面の全体が、地面からの高さが一定の平坦な形状である。
【００１１】
本発明の第５の態様に係る作業車両の周辺監視装置は、第１から第４の態様のいずれかの作業車両の周辺監視装置であって、車速検知部をさらに備える。車速検知部は、作業車両の車速を検知する。走行状態判定部は、車速が所定の閾値以上であるときに、作業車両が走行状態であると判定する。走行状態判定部は、車速が所定の閾値より小さいときに、作業車両が停止状態であると判定する。
【００１２】
本発明の第６の態様に係る作業車両は、第１から第５の態様のいずれかの周辺監視装置を備える。
【発明の効果】
【００１３】
本発明の第１の態様に係る作業車両の周辺監視装置では、作業車両が停止状態であるときには、俯瞰画像作成部は、第１仮想投影面を用いて俯瞰画像を作成する。第１仮想投影面の少なくとも外縁部は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。従って、作業車両から遠くに位置する物体ほど、俯瞰画像において大きく表示される現象を抑えることができる。このため、オペレータは、俯瞰画像によって物体の形状と大きさとを把握しやすい。また、作業車両が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面を用いて俯瞰画像を作成する。第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。このため、俯瞰画像の外縁部における地面の歪みが抑えられる。従って、作業車両の周囲の道路が俯瞰画像において歪んで表示されることが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【００１４】
本発明の第２の態様に係る作業車両の周辺監視装置では、第１仮想投影面の第１範囲は、地面からの高さが一定の平坦な形状である。また、第１仮想投影面の第２範囲は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。このため、第２範囲よりも作業車両に近い第１範囲では、あたかも作業車両の上方から地面を撮像しているかのように自然な俯瞰画像を作成することができる。また、第１範囲よりも作業車両から離れた第２範囲では、作業車両から遠くに位置する物体ほど、俯瞰画像において大きく表示される現象を抑えることができる。このため、作業車両が停止状態であるときには、オペレータは、俯瞰画像によって物体の形状と大きさとを把握しやすい。さらに、第２仮想投影面の第１範囲及び第２範囲は、地面からの高さが一定の平坦な形状である。このため、作業車両が走行状態であるときには、俯瞰画像の外縁部における地面の歪みが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【００１５】
本発明の第３の態様に係る作業車両の周辺監視装置では、第１仮想投影面では、複数の湾曲面と複数の球面とが連続的につながっている。このため、オペレータに与える違和感が少ない滑らかな俯瞰画像が作成される。
【００１６】
本発明の第４の態様に係る作業車両の周辺監視装置では、第２仮想投影面の全体が、地面からの高さが一定の平坦な形状である。このため、俯瞰画像の外縁部における地面の歪みが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【００１７】
本発明の第５の態様に係る作業車両の周辺監視装置では、では、走行状態判定部は、車速が所定の閾値より小さいときに、作業車両が停止状態であると判定する。このため、作業車両が低速で走行しているときにも、作業車両が停止状態にあると判断される。これにより、オペレータは、作業車両が低速で走行しているときに、俯瞰画像によって物体の形状と大きさとを容易に把握することができる。
【００１８】
本発明の第６の態様に係る作業車両では、作業車両が停止状態であるときには、俯瞰画像作成部は、第１仮想投影面を用いて俯瞰画像を作成する。第１仮想投影面の少なくとも外縁部は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。従って、作業車両から遠くに位置する物体ほど、俯瞰画像において大きく表示される現象を抑えることができる。このため、オペレータは、俯瞰画像によって物体の形状と大きさとを把握しやすい。また、作業車両が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面を用いて俯瞰画像を作成する。第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。このため、俯瞰画像の外縁部における地面の歪みが抑えられる。従って、作業車両の周囲の道路が俯瞰画像において歪んで表示されることが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態に係る作業車両の全体構成を示す斜視図。
【図２】本発明の一実施形態に係る周辺監視装置の構成を示すブロック図。
【図３】周辺監視装置の複数の撮像部の装着位置を示す作業車両の斜視図。
【図４】周辺監視装置の複数の撮像部の装着位置と撮像範囲とを示す上面図。
【図５】仮想投影面を用いた画像変換の手法を示す図。
【図６】第１仮想投影面の一例を示す模式図。
【図７】第２仮想投影面の一例を示す模式図。
【図８】仮想投影面に含まれる第１〜近接範囲の位置を示す上面図。
【図９】周辺監視装置のコントローラが実行する処理を示すフローチャート。
【図１０】停止状態での俯瞰画像の例を示す模式図。
【図１１】走行状態での俯瞰画像の例を示す模式図。
【図１２】他の実施形態に係る第２仮想投影面の一例を示す模式図。
【発明を実施するための形態】
【００２０】
以下、本発明の実施形態について、図面を参照しながら説明する。なお、以下の説明において、「前」「後」「左」「右」とは、運転席に着座した運転者を基準とする用語であり、「車幅方向」は、「左右方向」と同義である。
【００２１】
図１は、本発明の一実施形態に係る作業車両１を示す斜視図である。作業車両１は、鉱山作業などに用いられる自走式の超大型のダンプトラックである。
【００２２】
作業車両１は主に、車体フレーム２と、キャブ３と、ベッセル４と、前輪５と、後輪６とを備える。また、作業車両１は、作業車両１の周囲を監視して、その結果を表示する周辺監視装置１０（図２参照）を備える。周辺監視装置１０の詳細については後述する。
【００２３】
車体フレーム２は、図示しないディーゼルエンジンやトランスミッション等の動力機構と、その他の補機類とを支持している。また、車体フレーム２の前部には、左右の前輪５（図１では右前輪のみ図示）が支持されている。車体フレーム２の後部に左右の後輪６（図１では右後輪のみ図示）が支持されている。車体フレーム２は、ロアデッキ２ａと、アッパデッキ２ｂとを有する。ロアデッキ２ａは、車体フレーム２の前面の下部に取り付けられている。アッパデッキ２ｂは、ロアデッキ２ａの上方に配置されている。ロアデッキ２ａと地面との間には例えば可動式ラダー２ｃが配置されている。また、ロアデッキ２ａとアッパデッキ２ｂとの間には斜めラダー２ｄが配置されている。アッパデッキ２ｂ上には、柵状の手すり２ｅが配置されている。
【００２４】
キャブ３は、アッパデッキ２ｂ上に配置されている。キャブ３は、アッパデッキ２ｂ上において車幅方向の中央よりも車幅方向における一方側に偏っては位置されている。具体的には、キャブ３は、アッパデッキ２ｂ上において車幅方向の中央よりも左側方に位置している。キャブ３内には、運転席、ハンドル、シフトレバー、アクセルペダル、ブレーキペダル等の操作部材（図示せず）が配置されている。
【００２５】
ベッセル４は、砕石等の重量物を積載するための容器である。ベッセル４の底面の後部は、回動ピン（図示せず）を介して、車体フレーム２の後部に回動可能に連結されている。ベッセル４は、図示しない油圧シリンダ等のアクチュエータによって、積載姿勢と起立姿勢とを取り得る。積載姿勢は、図１に示すようにベッセル４の前部がキャブ３の上部に位置する姿勢である。起立姿勢は、積載物を排出する姿勢であり、ベッセル４が後方且つ下方へ向かった傾斜した状態となる。ベッセル４の前部が上方に回動することにより、ベッセル４は積載姿勢から起立姿勢に変化する。
【００２６】
図２は、作業車両１が備える周辺監視装置１０の構成を示すブロック図である。周辺監視装置１０は、複数の撮像部１１−１６と、車速検知部１７と、表示部１８と、コントローラ１９と、を有する。
【００２７】
撮像部１１−１６は、作業車両１に装着される。撮像部１１−１６は、作業車両１の周囲の領域を撮像して画像データを取得する。撮像部１１−１６は、それぞれカメラ１１ａ−１６ａとフレームメモリ１１ｂ−１６ｂとを有する。フレームメモリ１１ｂ−１６ｂはカメラ１１ａ−１６ａによって撮像された画像データを一時的に保存する。複数の撮像部１１−１６は、第１〜第６撮像部１１−１６を有する。図３は、第１〜第６撮像部１１−１６の装着位置を示す作業車両１の斜視図である。図４は、第１〜第６撮像部１１−１６の装着位置と撮像範囲とを示す作業車両１の上面図である。
【００２８】
図３に示すように、第１撮像部１１は、作業車両１の前面に取り付けられる。具体的には、第１撮像部１１は、斜めラダー２ｄの上端部に配置される。図４に示すように、第１撮像部１１は、作業車両１の周囲の第１領域１１Ｒを撮像して第１画像データを得る。第１領域１１Ｒは、作業車両１の前方に位置する。
【００２９】
図３に示すように、第２撮像部１２は、作業車両１の前面の一方の側部に取り付けられる。具体的には、第２撮像部１２は、アッパデッキ２ｂの前面の左側部に配置される。図４に示すように、第２撮像部１２は、作業車両１の周囲の第２領域１２Ｒを撮像して第２画像データを得る。第２領域１２Ｒは、作業車両１の左斜め前方に位置する。図３に示すように、第３撮像部１３は、作業車両１の前面の他方の側部に取り付けられる。具体的には、第３撮像部１３は、第２撮像部１２と左右対称位置に配置される。すなわち、第３撮像部１３は、アッパデッキ２ｂの前面の右側部に配置される。図４に示すように、第３撮像部１３は、作業車両１の周囲の第３領域１３Ｒを撮像して第３画像データを得る。第３領域１３Ｒは、作業車両１の右斜め前方に位置する。
【００３０】
図３に示すように、第４撮像部１４は、作業車両１の一方の側面に取り付けられる。具体的には、第４撮像部１４は、アッパデッキ２ｂの左側面の前部に配置される。図４に示すように、第４撮像部１４は、作業車両１の周囲の第４領域１４Ｒを撮像して、第４画像データを得る。第４領域１４Ｒは、作業車両１の左斜め後方に位置する。図３に示すように、第５撮像部１５は、作業車両１の他方の側面に取り付けられる。具体的には、第５撮像部１５は、第４撮像部１４と左右対称位置に配置される。すなわち、第５撮像部１５は、アッパデッキ２ｂの右側面の前部に配置される。図４に示すように、第５撮像部１５は、作業車両１の周囲の第５領域１５Ｒを撮像して第５画像データを得る。第５領域１５Ｒは、作業車両１の右斜め後方に位置する。
【００３１】
図３に示すように、第６撮像部１６は、作業車両１の後部に取り付けられる。具体的には、第６撮像部１６は、２つの後輪６を連結するアクスル軸（図示せず）の上方であって、ベッセル４の回動軸付近に配置される。図４に示すように、第６撮像部１６は、作業車両１の周囲の第６領域１６Ｒを撮像して第６画像データを得る。第６領域１６Ｒは、作業車両１の後方に位置する。
【００３２】
以上の６台の撮像部１１−１６によれば、図４の中央図に示すように、作業車両１のほぼ全周囲の画像を取得することができる。図４の中央図に示すように、第１〜第６領域１６Ｒのうち隣接する２つの領域は、部分的に互いに重なっている。具体的には、第１領域１１Ｒは、第１重複領域ＯＡ１において第２領域１２Ｒと部分的に重なっている。また、第１領域１１Ｒは、第２重複領域ＯＡ２において第３領域１３Ｒと部分的に重なっている。第２領域１２Ｒは、第３重複領域ＯＡ３において第４領域１４Ｒと部分的に重なっている。第３領域１３Ｒは、第４重複領域ＯＡ４において第５領域１５Ｒと部分的に重なっている。第４領域１４Ｒは、第５重複領域ＯＡ５において第６領域１６Ｒと部分的に重なっている。また、第５領域１５Ｒは、第６重複領域ＯＡ６において第６領域１６Ｒと部分的に重なっている。第１〜第６撮像部１１−１６は、それぞれ撮像した画像を示す画像データをコントローラ１９に送信する。
【００３３】
車速検知部１７は、作業車両１の車速を検知する。車速検知部１７は、例えばトランスミッションの出力軸の回転速度などに基づいて作業車両１の車速を検知する。車速検知部１７は、検知した車速を示す車速データをコントローラ１９に送信する。
【００３４】
表示部１８は、キャブ３内に配置されるモニタである。表示部１８は、キャブ３内において運転席の前方に配置される。表示部１８は、コントローラ１９の制御に応じて画像を表示する。
【００３５】
コントローラ１９は、撮像部１１−１６からの画像データに基づき、作業車両１の周囲を示す俯瞰画像を作成する。コントローラ１９は、作成した俯瞰画像を示す出力信号を表示部１８に出力する。表示部１８は、コントローラ１９からの出力信号により俯瞰画像を表示する。図２に示すように、コントローラ１９は、走行状態判定部２１と、記憶部２２と、俯瞰画像作成部２３とを有する。
【００３６】
走行状態判定部２１は、車速検知部１７からの車速データに基づいて、作業車両１の走行状態を判定する。走行状態判定部２１は、車速が所定の閾値以上であるときには、作業車両１が走行状態であると判定する。走行状態判定部２１は、車速が所定の閾値より小さいときには、作業車両１が停止状態であると判定する。従って、車速がゼロであるときだけではなく、車速の小さい低速走行状態も上記の停止状態に含まれる。
【００３７】
記憶部２２は、コントローラ１９が俯瞰画像を作成するために必要な各種の情報を記憶している。具体的には、記憶部２２は、後述する第１変換情報と第２変換情報と合成比率とを記憶している。
【００３８】
俯瞰画像作成部２３は、撮像部１１−１６のそれぞれから画像データを受信する。俯瞰画像作成部２３は、複数の画像データによって示される複数の画像に基づいて、作業車両１の周囲の俯瞰画像を作成する。具体的には、俯瞰画像作成部２３は、記憶部２２に保存されている変換情報を用いて画像データの座標変換を行う。変換情報は、入力画像の各画素の位置座標と出力画像の各画素の位置座標との対応を示す情報である。ここで、入力画像は、各撮像部１１−１６によって撮像された画像である。また、出力画像は、表示部１８に表示される俯瞰画像である。俯瞰画像作成部２３は、変換情報を用いて、撮像部１１−１６によって撮像された画像を、作業車両１の上方に位置する所定の仮想視点から見た画像に変換する。具体的には、図５に示すように、撮像部１１−１６によって撮像された画像は、所定の仮想投影面３０上に投影されることにより、作業車両１の上方に位置する仮想視点２０から見た画像に変換される。変換情報は、この仮想投影面３０を表している。俯瞰画像作成部２３は、複数の撮像部１１−１６からの画像データを所定の仮想投影面に投影して合成することにより、作業車両１の周囲の俯瞰画像を作成する。すなわち、第１〜第６画像データを所定の仮想投影面に投影して合成することにより、作業車両１の周囲の俯瞰画像を作成する。
【００３９】
上述したように、各撮像部１１−１６が撮像する作業車両１の周囲の領域は、第１〜第６重複領域ＯＡ１−ＯＡ６において重複している。俯瞰画像作成部２３は、俯瞰画像において、各重複領域ＯＡ１−ＯＡ６において互いに隣接する２つの撮像部１１−１６からの画像データの画像を重ねて表示する。具体的には、俯瞰画像作成部２３は、第１重複領域ＯＡ１では、第１撮像部１１からの第１画像データの画像と、第２撮像部１２からの第２画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第２重複領域ＯＡ２では、第１撮像部１１からの第１画像データの画像と、第３撮像部１３からの第３画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第３重複領域ＯＡ３では、第２撮像部１２からの第２画像データの画像と、第４撮像部１４からの第４画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第４重複領域ＯＡ４では、第３撮像部１３からの第３画像データの画像と、第５撮像部１５からの第５画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第５重複領域ＯＡ５では、第４撮像部１４からの第４画像データの画像と、第６撮像部１６からの第６画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第６重複領域ＯＡ６では、第５撮像部１５からの第５画像データの画像と、第６撮像部１６からの第６画像データの画像とを重ねて表示する。このように重複領域ＯＡ１−ＯＡ６において２つの画像データを重ねて合成する場合には、各画像データの値に合成比率を乗じた値が足し合わされる。合成比率は、各画像データに対応した値であり、記憶部２２に記憶されている。例えば、第１画像データの合成比率が０．５であり、第２画像データの合成比率が０．５であるなど、画像データごとに合成比率が定められている。このように合成比率が用いられることにより、重複領域ＯＡ１−ＯＡ６において複数の画像データが平均化されて表示される。これにより、色やコントラストの急激な変化が抑えられ、自然な俯瞰画像を作成することができる。俯瞰画像作成部２３は、上記のように合成された俯瞰画像を示す俯瞰画像データを生成して、俯瞰画像データを表示部１８に送信する。
【００４０】
俯瞰画像作成部２３は、複数の仮想投影面を選択的に用いて、俯瞰画像を作成する。具体的には、俯瞰画像作成部２３は、図６に示す第１仮想投影面３１と、図７に示す第２仮想投影面３２とを用いて俯瞰画像を作成する。図６（ａ）は、第１仮想投影面３１の斜視図である。図６（ｂ）は、図６（ａ）における第１仮想投影面３１のＡ１−Ａ１断面図である。図６（ｃ）は、図６（ａ）における第１仮想投影面３１のＢ１−Ｂ１断面図である。図７（ａ）は、第２仮想投影面３２の斜視図である。図７（ｂ）は、図７（ａ）における第２仮想投影面３２のＡ２−Ａ２断面図である。図７（ｃ）は、図７（ａ）における第２仮想投影面３２のＢ２−Ｂ２断面図である。上述したように、記憶部２２は、第１変換情報と第２変換情報とを記憶している。第１変換情報は、第１仮想投影面３１を示すデータである。第２変換情報は、第２仮想投影面３２を示すデータである。俯瞰画像作成部２３は、第１変換情報を用いて画像データの座標変換を行うことにより、各撮像部１１−１６が撮像した画像を第１仮想投影面３１に投影した俯瞰画像を作成する。俯瞰画像作成部２３は、第２変換情報を用いて画像データの座標変換を行うことにより、各撮像部１１−１６が撮像した画像を第２仮想投影面３２に投影した俯瞰画像を作成する。
【００４１】
図６に示すように、第１仮想投影面３１は、作業車両１に近づくほど地面からの高さが高くなる形状を含む。第１仮想投影面３１の中央部は、作業車両１に近づくほど地面からの高さが高くなる形状である。第１仮想投影面３１の外縁部は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。ここで、図８に示すように、仮想投影面３１，３２上において、作業車両１の前後方向及び車幅方向の中心Ｃ１（以下、「車両中心Ｃ１」と呼ぶ）から作業車両１の前方、左側方、右側方、後方にそれぞれ所定距離、離れた位置までの範囲を近接範囲Ｒ０と規定する。近接範囲Ｒ０に隣接して近接範囲Ｒ０よりも作業車両１から離れた範囲を第１範囲Ｒ１と規定する。また、第１範囲Ｒ１に隣接して第１範囲Ｒ１よりも作業車両１から離れた範囲を第２範囲Ｒ２と規定する。第２範囲Ｒ２は、各仮想投影面３１，３２の外縁部を含む。
【００４２】
図６に示すように、第１仮想投影面３１は、第１変化部３３と、平坦部３４と、第２変化部３５とを含む。第１変化部３３は、図８に示す近接範囲Ｒ０に位置する。第１変化部３３の地面からの高さは、車両中心Ｃ１に近づくほど高くなる。すなわち、第１変化部３３の地面からの高さは、作業車両１に近づくほど高くなる。従って、第１仮想投影面３１の近接範囲Ｒ０は、地面からの高さが作業車両１に近づくほど高くなる形状である。第１変化部３３は、車両中心Ｃ１に向かって上方に傾斜した形状である。第１変化部３３の頂点は、作業車両１の内部に相当する位置に位置している。第１変化部３３は、複数の撮像部１１−１６のうち最も低い位置に設置されている撮像部よりも下方に位置している。平坦部３４は、第１仮想投影面３１の第１範囲Ｒ１に位置する。平坦部３４は、第１変化部３３よりも作業車両１から離れた位置において第１変化部３３に連続的に繋がっている。第１変化部３３と平坦部３４との接続部分は、地面上に位置する。平坦部３４の地面からの高さは一定である。従って、第１仮想投影面３１の第１範囲Ｒ１は、地面からの高さが一定の平坦な形状である。具体的には、平坦部３４は、地面と同じ高さの平面である。従って、第１仮想投影面３１の第１範囲Ｒ１は、地面と同じ高さの平坦な形状である。第２変化部３５は、第１仮想投影面３１の第２範囲Ｒ２に位置している。第２変化部３５は、平坦部３４よりも作業車両１から離れた位置において、平坦部３４に連続的に繋がっている。第２変化部３５の地面からの高さは、作業車両１から遠ざかるほど高くなる。従って、第１仮想投影面３１の第２範囲Ｒ２は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。第２変化部３５は、作業車両１から離れる方向に向かって上方に傾斜した形状である。第２変化部３５と平坦部３４との接続部分は、地面上に位置する。
【００４３】
第１仮想投影面３１の第２範囲Ｒ２すなわち第２変化部３５は、複数の湾曲面３５ａ−３５ｄと、複数の球面３５ｅ−３５ｈとを含む。湾曲面３５ａ−３５ｄは、作業車両１の外形に対応する矩形の各辺に平行な仮想軸を中心に湾曲している。球面３５ｅ−３５ｈは、隣接する一対の湾曲面３５ａ−３５ｄの間にそれぞれ配置されている。球面３５ｅ−３５ｈは、隣接する一対の湾曲面３５ａ−３５ｄと連続的につながっている。具体的には、第２変化部３５は、第１〜第４湾曲面３５ａ−３５ｄと、第１〜第４球面３５ｅ−３５ｈとを含む。第１湾曲面３５ａは、作業車両１の前方に位置する。図６（ａ）に示すように、第１湾曲面３５ａは、仮想軸Ｃ２を中心に湾曲している。仮想軸Ｃ２は、作業車両１の外形に対応する矩形の前面の辺に平行な軸線である。第２湾曲面３５ｂは、作業車両１の後方に位置する。図６（ａ）に示すように、第２湾曲面３５ｂは、仮想軸Ｃ３を中心に湾曲している。仮想軸Ｃ３は、作業車両１の外形に対応する矩形の後面の辺に平行な軸線である。第３湾曲面３５ｃは、作業車両１の左側方に位置する。図６（ｂ）に示すように、第３湾曲面３５ｃは、仮想軸Ｃ４を中心に湾曲している。仮想軸Ｃ４は、作業車両１の外形に対応する矩形の左側面の辺に平行な軸線である。第４湾曲面３５ｄは、作業車両１の右側方に位置する。図６（ｂ）に示すように、第４湾曲面３５ｄは、仮想軸Ｃ５を中心に湾曲している。仮想軸Ｃ５は、作業車両１の外形に対応する矩形の右側面の辺に平行な軸線である。
【００４４】
第１球面３５ｅは、第１湾曲面３５ａと第３湾曲面３５ｃとの間に配置されている。第１球面３５ｅは、第１湾曲面３５ａと第３湾曲面３５ｃとに連続的につながっている。第２球面３５ｆは、第１湾曲面３５ａと第４湾曲面３５ｄとの間に配置されている。第２球面３５ｆは、第１湾曲面３５ａと第４湾曲面３５ｄとに連続的につながっている。第３球面３５ｇは、第２湾曲面３５ｂと第３湾曲面３５ｃとの間に配置されている。第３球面３５ｇは、第２湾曲面３５ｂと第３湾曲面３５ｃとに連続的につながっている。第４球面３５ｈは、第２湾曲面３５ｂと第４湾曲面３５ｄとの間に配置されている。第４球面３５ｈは、第２湾曲面３５ｂと第４湾曲面３５ｄとに連続的につながっている。
【００４５】
図７に示すように、第２仮想投影面３２は平坦な形状を有する。詳細には、第２仮想投影面３２の外縁部を含む全体が、地面からの高さが一定の平坦な形状である。従って、第２仮想投影面３２の第１範囲Ｒ１と第２範囲Ｒ２と近接範囲Ｒ０は、地面からの高さが一定の平坦な形状である。具体的には、第２仮想投影面３２の全体が、地面と同じ高さに位置する平坦な形状を有する。
【００４６】
図９は、周辺監視装置１０のコントローラ１９によって実行される処理を示すフローチャートである。以下、図９に基づいて、周辺監視装置１０が俯瞰画像を表示するための処理について説明する。
【００４７】
まず、ステップＳ１において、画像の取り込みが実行される。ここでは、各撮像部１１−１６のカメラ１１ａ−１６ａによって画像が撮像され、画像データが各撮像部１１−１６のフレームメモリ１１ｂ−１６ｂに保存される。
【００４８】
ステップＳ２では、作業車両１が走行状態であるのか否かが判定される。ここでは、走行状態判定部２１が、車速に基づいて作業車両１が走行状態であるのか否かを判定する。上述したように、走行状態判定部２１は、車速が所定の閾値以上であるときに、作業車両１が走行状態であると判定する。また、走行状態判定部２１は、車速が所定の閾値より小さいときに、作業車両１が停止状態であると判定する。作業車両１が走行状態ではないときにはステップＳ３に進む。すなわち、作業車両１が停止状態であるときには、ステップＳ３に進む。
【００４９】
ステップＳ３では、第１仮想投影面３１にて俯瞰画像が作成される。ここでは、俯瞰画像作成部２３は、図６に示す第１仮想投影面３１を用いて、俯瞰画像を作成する。具体的には、各撮像部１１−１６からの画像データを第１仮想投影面３１上に投影して合成することにより、俯瞰画像を作成する。図１０は、第１仮想投影面３１を用いて作成された俯瞰画像（以下、「第１俯瞰画像４１」と呼ぶ）の一例である。第１俯瞰画像４１の外枠は長方形の形状を有する。第１俯瞰画像４１は、上面視における作業車両１を示すモデル図５０と、上面視における作業車両１の周囲の画像５１とを含む。また、第１俯瞰画像４１は、作業車両１からの距離を示す複数の基準線５２−５４を含む。基準線５２−５４は、第１基準線５２と第２基準線５３と第３基準線５４とを含む。例えば、第１基準線５２は、作業車両１から１０ｍ離れた位置を示す。第２基準線５３は、作業車両１から１５ｍ離れた位置を示す。第３基準線５４は、作業車両１から２０ｍ離れた位置を示す。上述したように、第１仮想投影面３１の外縁部を含む第２範囲Ｒ２は湾曲面３５ａ−３５ｄ及び球面３５ｅ−３５ｈによって構成されている。このため、第１俯瞰画像４１の外枠に近い部分では、画像５１が湾曲して表示される。
【００５０】
ステップＳ２において、作業車両１が走行状態であると判定されたときには、ステップＳ４に進む。すなわち、車速の所定の閾値以上であるときには、ステップＳ４に進む。ステップＳ４では、第２仮想投影面３２にて俯瞰画像が作成される。図１１は、第２仮想投影面３２を用いて作成された俯瞰画像（以下、「第２俯瞰画像４２」と呼ぶ）の一例である。第２俯瞰画像４２は、第１俯瞰画像４１と同様に、上面視における作業車両１を示すモデル図５０と、上面視における作業車両１の周囲の画像５１とを含む。また、第２俯瞰画像４２は、第１俯瞰画像４１と同様に、複数の基準線５２−５４を含む。上述したように、第２仮想投影面３２は全体的に平坦な形状である。このため、第２俯瞰画像４２では、外枠に近い部分であっても、第１俯瞰画像４１のように、画像５１が湾曲して表示されることが防止される。
【００５１】
ステップＳ５では、俯瞰画像が表示部１８に表示される。ここでは、上述した第１俯瞰画像４１又は第２俯瞰画像４２が表示部１８に表示される。具体的には、作業車両１が停止状態であるときには、第１俯瞰画像４１が表示部１８に表示される。作業車両１が走行状態であるときには、第２俯瞰画像４２が表示部１８に表示される。
【００５２】
次に、本実施形態に係る作業車両１の周辺監視装置１０の特徴について説明する。
【００５３】
本実施形態に係る作業車両１の周辺監視装置１０では、作業車両１が停止状態であるときには、俯瞰画像作成部２３は、第１仮想投影面３１を用いて俯瞰画像を作成する。第１仮想投影面３１の外縁部を含む第２範囲Ｒ２には、第２変化部３５が配置されている。第２変化部３５は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。このため、第１俯瞰画像４１において、作業車両１から遠くに位置する物体ほど大きく表示される現象が抑えられる。このため、作業車両１が停止状態であるときには、オペレータは、第１俯瞰画像４１によって物体の形状と大きさとを把握しやすい。
【００５４】
また、作業車両１が走行状態であるときには、俯瞰画像作成部２３は、第２仮想投影面３２を用いて俯瞰画像を作成する。第２仮想投影面３２は、全体的に、地面からの高さが一定の平坦な形状である。このため、第２俯瞰画像４２の外縁部における地面の歪みが抑えられる。従って、作業車両１の周囲の道路が第２俯瞰画像４２において歪んで表示されることが抑えられる。これにより、オペレータは、作業車両１の走行時に作業車両１がどこを走っているのかを容易に認識することができる。
【００５５】
第１仮想投影面３１では、複数の湾曲面３５ａ−３５ｄと複数の球面３５ｅ−３５ｈとが連続的につながっている。このため、オペレータに与える違和感が少ない滑らかな第１俯瞰画像４１が作成される。
【００５６】
第２仮想投影面３２の全体が、地面からの高さが一定の平坦な形状である。このため、歪みの少ない第２俯瞰画像４２が作成される。これにより、オペレータは、作業車両１の走行時に作業車両１がどこを走っているのかを容易に認識することができる。
【００５７】
走行状態判定部２１は、車速が所定の閾値より小さいときに、作業車両１が停止状態であると判定する。このため、作業車両１が低速で走行しているときにも、作業車両１が停止状態にあると判断される。これにより、オペレータは、作業車両１が低速で走行しているときに、第１俯瞰画像４１によって物体の形状と大きさとを容易に把握することができる。
【００５８】
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。
【００５９】
上記の実施形態では、作業車両１の一例としてダンプトラックが挙げられているが、本発明は、例えばブルドーザーなどの他の種類の作業車両にも適用することができる。
【００６０】
第２仮想投影面３２は、第２範囲Ｒ２を除く領域において地面からの高さが変化する形状を有してもよい。例えば、図１２に示す第２仮想投影面３２のように、変化部６１と平坦部６２とによって構成されてもよい。変化部６１は、上記の実施形態の第１変化部３３と同様の形状である。従って、変化部６１は、作業車両１に近づくほど地面からの高さが高くなる形状である。変化部６１は、近接範囲Ｒ０に位置する。平坦部６２は、変化部６１よりも作業車両１から離れており、第２仮想投影面３２の外枠まで延びている。すなわち、平坦部６２は、第１範囲Ｒ１と第２範囲Ｒ２とを合わせた範囲に位置する。さらに言い換えれば、第２仮想投影面３２の第１範囲Ｒ１及び第２範囲Ｒ２は、地面からの高さが一定の平坦な形状である
本発明の撮像部の数は上記の実施形態のように６台に限られない。また、本発明の撮像部の配置は上記の実施形態の撮像部１１−１６の配置に限られない。上記の実施形態では、第１仮想投影面３１の第１変化部３３は、地面からの高さが連続的に変化する傾斜面であるが、第１変化部３３の地面からの高さが階段状に変化してもよい。同様に、第２変化部３５の地面からの高さが階段状に変化してもよい。ただし、違和感の少ない自然な俯瞰画像を形成する観点からは、第１変化部３３は、地面からの高さが連続的に変化する傾斜面であることが好ましい。同様に、違和感の少ない自然な俯瞰画像を形成する観点からは、第２変化部３５は、地面からの高さが連続的に変化する傾斜面であることが好ましい。また、第１変化部３３の傾斜面は、直線状であっても、曲線状であってもよい。同様に、第２変化部３５の傾斜面は、直線状であっても、曲線状であってもよい。また、第１仮想投影面３１の平坦部３４は、地面と同じ高さに限らず、地面と異なる高さに位置してもよい。
【００６１】
上記の実施形態では、車速が所定の閾値以上であるときに作業車両が走行状態と判定されている。この閾値は０より大きい値に限らず、０であってもよい。すなわち、車速が０であるときに作業車両が停止状態であると判定され、車速が０より大きいときに作業車両が走行状態であると判定されてもよい。或いは、車速以外のパラメータによって、作業車両の走行状態と停止状態とが判定されてもよい。例えば、アクセルの操作量が所定の閾値以上であるときに作業車両が走行状態であると判定され、アクセルの操作量が所定の閾値より小さいときに作業車両が停止状態であると判定されてもよい。
【産業上の利用可能性】
【００６２】
本発明は、作業車両の走行時に作業車両の位置をオペレータが容易に認識することができる作業車両の周辺監視装置を提供することができる。
【符号の説明】
【００６３】
１ 作業車両
１０ 周辺監視装置
１１−１６ 第１〜第６撮像部
１７ 車速検知部
１８ 表示部
２３ 俯瞰画像作成部
３１ 第１仮想投影面
３２ 第２仮想投影面
Ｒ１ 第１範囲
Ｒ２ 第２範囲
【技術分野】
【０００１】
本発明は、作業車両の周辺監視装置に関する。
【背景技術】
【０００２】
従来、超大型の作業車両として、鉱山等で砕石を運搬するためのダンプトラックが広く用いられている。このようなダンプトラックは、一般的な車両に比較して著しく車幅が広く、また前後長が長いため、サイドミラー等によって作業車両周辺の状況を運転者が把握することは困難である。
【０００３】
一方、車両周辺の状況を運転者に簡便に把握させることを目的として、周辺監視装置が提案されている。周辺監視装置は、車両に装着されたカメラなどの撮像部を含む。周辺監視装置は、撮像部によって撮像された画像を合成することにより、作業車両の周囲を示す俯瞰画像を作成する。例えば、特許文献１に示されている自動車の周辺監視装置では、俯瞰画像は、撮像部によって撮像された画像を仮想投影面上に投影することにより作成される。一般的に、仮想投影面が平坦な形状である場合、俯瞰画像では、車両から遠くにある物体ほど大きく表示される。このため、上記の俯瞰画像では、車両の進行方向に向かって画像が広がって表示される。そこで、特許文献１の周辺監視装置では、仮想投影面は、車両の進行方向に向かって徐々に立ち上がる形状を有する。これにより、車両の進行方向に向かって画像が広がって表示されることが抑えられる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４-２１３０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記のように、仮想投影面が、車両の進行方向に向かって徐々に立ち上がる形状である場合、俯瞰画像の外縁部において、地面が歪んで表示される。従って、車両の周囲の道路も、俯瞰画像において歪んで表示される。このため、車両の走行時には、車両が道路上のどの位置を走っているのかオペレータが認識し難いという問題がある。超大型のダンプトラックのように作業車両ではオペレータが直接的に目視できない領域が作業車両の周囲に多く存在するため、このような問題は特に顕著となる。
【０００６】
本発明の課題は、作業車両の走行時に作業車両の位置をオペレータが容易に認識することができる作業車両の周辺監視装置を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の第１の態様に係る作業車両の周辺監視装置は、撮像部と、俯瞰画像作成部と、表示部と、走行状態判定部と、を備える。撮像部は、作業車両に装着され、作業車両の周囲の領域を撮像して画像データを得る。俯瞰画像作成部は、画像データを仮想投影面に投影することにより、作業車両の周囲の俯瞰画像を作成する。表示部は、俯瞰画像を表示する。走行状態判定部は、作業車両が走行状態であるのか停止状態であるのかを判定する。作業車両が停止状態であるときには、俯瞰画像作成部は、第１仮想投影面を用いて俯瞰画像を作成する。第１仮想投影面の少なくとも外縁部は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。作業車両が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面を用いて俯瞰画像を作成する。第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。
【０００８】
本発明の第２の態様に係る作業車両の周辺監視装置は、第１の態様の作業車両の周辺監視装置であって、仮想投影面は、第１範囲と第２範囲とを含む。第１範囲は、作業車両の周囲に位置する。第２範囲は、第１範囲よりも作業車両から離れている。第１仮想投影面の第１範囲は、地面からの高さが一定の平坦な形状である。第１仮想投影面の第２範囲は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。第２仮想投影面の第１範囲及び第２範囲は、地面からの高さが一定の平坦な形状である。
【０００９】
本発明の第３の態様に係る作業車両の周辺監視装置は、第２の態様の作業車両の周辺監視装置であって、第１仮想投影面の第２範囲は、複数の湾曲面と、複数の球面とを含む。複数の湾曲面は、作業車両の外形に対応する矩形の各辺に平行な仮想軸を中心に湾曲している。複数の球面は、隣接する一対の湾曲面の間にそれぞれ配置されて、一対の湾曲面と連続的につながっている。
【００１０】
本発明の第４の態様に係る作業車両の周辺監視装置は、第１から第３の態様のいずれかの作業車両の周辺監視装置であって、第２仮想投影面の全体が、地面からの高さが一定の平坦な形状である。
【００１１】
本発明の第５の態様に係る作業車両の周辺監視装置は、第１から第４の態様のいずれかの作業車両の周辺監視装置であって、車速検知部をさらに備える。車速検知部は、作業車両の車速を検知する。走行状態判定部は、車速が所定の閾値以上であるときに、作業車両が走行状態であると判定する。走行状態判定部は、車速が所定の閾値より小さいときに、作業車両が停止状態であると判定する。
【００１２】
本発明の第６の態様に係る作業車両は、第１から第５の態様のいずれかの周辺監視装置を備える。
【発明の効果】
【００１３】
本発明の第１の態様に係る作業車両の周辺監視装置では、作業車両が停止状態であるときには、俯瞰画像作成部は、第１仮想投影面を用いて俯瞰画像を作成する。第１仮想投影面の少なくとも外縁部は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。従って、作業車両から遠くに位置する物体ほど、俯瞰画像において大きく表示される現象を抑えることができる。このため、オペレータは、俯瞰画像によって物体の形状と大きさとを把握しやすい。また、作業車両が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面を用いて俯瞰画像を作成する。第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。このため、俯瞰画像の外縁部における地面の歪みが抑えられる。従って、作業車両の周囲の道路が俯瞰画像において歪んで表示されることが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【００１４】
本発明の第２の態様に係る作業車両の周辺監視装置では、第１仮想投影面の第１範囲は、地面からの高さが一定の平坦な形状である。また、第１仮想投影面の第２範囲は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。このため、第２範囲よりも作業車両に近い第１範囲では、あたかも作業車両の上方から地面を撮像しているかのように自然な俯瞰画像を作成することができる。また、第１範囲よりも作業車両から離れた第２範囲では、作業車両から遠くに位置する物体ほど、俯瞰画像において大きく表示される現象を抑えることができる。このため、作業車両が停止状態であるときには、オペレータは、俯瞰画像によって物体の形状と大きさとを把握しやすい。さらに、第２仮想投影面の第１範囲及び第２範囲は、地面からの高さが一定の平坦な形状である。このため、作業車両が走行状態であるときには、俯瞰画像の外縁部における地面の歪みが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【００１５】
本発明の第３の態様に係る作業車両の周辺監視装置では、第１仮想投影面では、複数の湾曲面と複数の球面とが連続的につながっている。このため、オペレータに与える違和感が少ない滑らかな俯瞰画像が作成される。
【００１６】
本発明の第４の態様に係る作業車両の周辺監視装置では、第２仮想投影面の全体が、地面からの高さが一定の平坦な形状である。このため、俯瞰画像の外縁部における地面の歪みが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【００１７】
本発明の第５の態様に係る作業車両の周辺監視装置では、では、走行状態判定部は、車速が所定の閾値より小さいときに、作業車両が停止状態であると判定する。このため、作業車両が低速で走行しているときにも、作業車両が停止状態にあると判断される。これにより、オペレータは、作業車両が低速で走行しているときに、俯瞰画像によって物体の形状と大きさとを容易に把握することができる。
【００１８】
本発明の第６の態様に係る作業車両では、作業車両が停止状態であるときには、俯瞰画像作成部は、第１仮想投影面を用いて俯瞰画像を作成する。第１仮想投影面の少なくとも外縁部は、作業車両から遠ざかるほど地面からの高さが高くなる形状である。従って、作業車両から遠くに位置する物体ほど、俯瞰画像において大きく表示される現象を抑えることができる。このため、オペレータは、俯瞰画像によって物体の形状と大きさとを把握しやすい。また、作業車両が走行状態であるときには、俯瞰画像作成部は、第２仮想投影面を用いて俯瞰画像を作成する。第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である。このため、俯瞰画像の外縁部における地面の歪みが抑えられる。従って、作業車両の周囲の道路が俯瞰画像において歪んで表示されることが抑えられる。これにより、オペレータは、作業車両の走行時に作業車両の位置を容易に認識することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明の一実施形態に係る作業車両の全体構成を示す斜視図。
【図２】本発明の一実施形態に係る周辺監視装置の構成を示すブロック図。
【図３】周辺監視装置の複数の撮像部の装着位置を示す作業車両の斜視図。
【図４】周辺監視装置の複数の撮像部の装着位置と撮像範囲とを示す上面図。
【図５】仮想投影面を用いた画像変換の手法を示す図。
【図６】第１仮想投影面の一例を示す模式図。
【図７】第２仮想投影面の一例を示す模式図。
【図８】仮想投影面に含まれる第１〜近接範囲の位置を示す上面図。
【図９】周辺監視装置のコントローラが実行する処理を示すフローチャート。
【図１０】停止状態での俯瞰画像の例を示す模式図。
【図１１】走行状態での俯瞰画像の例を示す模式図。
【図１２】他の実施形態に係る第２仮想投影面の一例を示す模式図。
【発明を実施するための形態】
【００２０】
以下、本発明の実施形態について、図面を参照しながら説明する。なお、以下の説明において、「前」「後」「左」「右」とは、運転席に着座した運転者を基準とする用語であり、「車幅方向」は、「左右方向」と同義である。
【００２１】
図１は、本発明の一実施形態に係る作業車両１を示す斜視図である。作業車両１は、鉱山作業などに用いられる自走式の超大型のダンプトラックである。
【００２２】
作業車両１は主に、車体フレーム２と、キャブ３と、ベッセル４と、前輪５と、後輪６とを備える。また、作業車両１は、作業車両１の周囲を監視して、その結果を表示する周辺監視装置１０（図２参照）を備える。周辺監視装置１０の詳細については後述する。
【００２３】
車体フレーム２は、図示しないディーゼルエンジンやトランスミッション等の動力機構と、その他の補機類とを支持している。また、車体フレーム２の前部には、左右の前輪５（図１では右前輪のみ図示）が支持されている。車体フレーム２の後部に左右の後輪６（図１では右後輪のみ図示）が支持されている。車体フレーム２は、ロアデッキ２ａと、アッパデッキ２ｂとを有する。ロアデッキ２ａは、車体フレーム２の前面の下部に取り付けられている。アッパデッキ２ｂは、ロアデッキ２ａの上方に配置されている。ロアデッキ２ａと地面との間には例えば可動式ラダー２ｃが配置されている。また、ロアデッキ２ａとアッパデッキ２ｂとの間には斜めラダー２ｄが配置されている。アッパデッキ２ｂ上には、柵状の手すり２ｅが配置されている。
【００２４】
キャブ３は、アッパデッキ２ｂ上に配置されている。キャブ３は、アッパデッキ２ｂ上において車幅方向の中央よりも車幅方向における一方側に偏っては位置されている。具体的には、キャブ３は、アッパデッキ２ｂ上において車幅方向の中央よりも左側方に位置している。キャブ３内には、運転席、ハンドル、シフトレバー、アクセルペダル、ブレーキペダル等の操作部材（図示せず）が配置されている。
【００２５】
ベッセル４は、砕石等の重量物を積載するための容器である。ベッセル４の底面の後部は、回動ピン（図示せず）を介して、車体フレーム２の後部に回動可能に連結されている。ベッセル４は、図示しない油圧シリンダ等のアクチュエータによって、積載姿勢と起立姿勢とを取り得る。積載姿勢は、図１に示すようにベッセル４の前部がキャブ３の上部に位置する姿勢である。起立姿勢は、積載物を排出する姿勢であり、ベッセル４が後方且つ下方へ向かった傾斜した状態となる。ベッセル４の前部が上方に回動することにより、ベッセル４は積載姿勢から起立姿勢に変化する。
【００２６】
図２は、作業車両１が備える周辺監視装置１０の構成を示すブロック図である。周辺監視装置１０は、複数の撮像部１１−１６と、車速検知部１７と、表示部１８と、コントローラ１９と、を有する。
【００２７】
撮像部１１−１６は、作業車両１に装着される。撮像部１１−１６は、作業車両１の周囲の領域を撮像して画像データを取得する。撮像部１１−１６は、それぞれカメラ１１ａ−１６ａとフレームメモリ１１ｂ−１６ｂとを有する。フレームメモリ１１ｂ−１６ｂはカメラ１１ａ−１６ａによって撮像された画像データを一時的に保存する。複数の撮像部１１−１６は、第１〜第６撮像部１１−１６を有する。図３は、第１〜第６撮像部１１−１６の装着位置を示す作業車両１の斜視図である。図４は、第１〜第６撮像部１１−１６の装着位置と撮像範囲とを示す作業車両１の上面図である。
【００２８】
図３に示すように、第１撮像部１１は、作業車両１の前面に取り付けられる。具体的には、第１撮像部１１は、斜めラダー２ｄの上端部に配置される。図４に示すように、第１撮像部１１は、作業車両１の周囲の第１領域１１Ｒを撮像して第１画像データを得る。第１領域１１Ｒは、作業車両１の前方に位置する。
【００２９】
図３に示すように、第２撮像部１２は、作業車両１の前面の一方の側部に取り付けられる。具体的には、第２撮像部１２は、アッパデッキ２ｂの前面の左側部に配置される。図４に示すように、第２撮像部１２は、作業車両１の周囲の第２領域１２Ｒを撮像して第２画像データを得る。第２領域１２Ｒは、作業車両１の左斜め前方に位置する。図３に示すように、第３撮像部１３は、作業車両１の前面の他方の側部に取り付けられる。具体的には、第３撮像部１３は、第２撮像部１２と左右対称位置に配置される。すなわち、第３撮像部１３は、アッパデッキ２ｂの前面の右側部に配置される。図４に示すように、第３撮像部１３は、作業車両１の周囲の第３領域１３Ｒを撮像して第３画像データを得る。第３領域１３Ｒは、作業車両１の右斜め前方に位置する。
【００３０】
図３に示すように、第４撮像部１４は、作業車両１の一方の側面に取り付けられる。具体的には、第４撮像部１４は、アッパデッキ２ｂの左側面の前部に配置される。図４に示すように、第４撮像部１４は、作業車両１の周囲の第４領域１４Ｒを撮像して、第４画像データを得る。第４領域１４Ｒは、作業車両１の左斜め後方に位置する。図３に示すように、第５撮像部１５は、作業車両１の他方の側面に取り付けられる。具体的には、第５撮像部１５は、第４撮像部１４と左右対称位置に配置される。すなわち、第５撮像部１５は、アッパデッキ２ｂの右側面の前部に配置される。図４に示すように、第５撮像部１５は、作業車両１の周囲の第５領域１５Ｒを撮像して第５画像データを得る。第５領域１５Ｒは、作業車両１の右斜め後方に位置する。
【００３１】
図３に示すように、第６撮像部１６は、作業車両１の後部に取り付けられる。具体的には、第６撮像部１６は、２つの後輪６を連結するアクスル軸（図示せず）の上方であって、ベッセル４の回動軸付近に配置される。図４に示すように、第６撮像部１６は、作業車両１の周囲の第６領域１６Ｒを撮像して第６画像データを得る。第６領域１６Ｒは、作業車両１の後方に位置する。
【００３２】
以上の６台の撮像部１１−１６によれば、図４の中央図に示すように、作業車両１のほぼ全周囲の画像を取得することができる。図４の中央図に示すように、第１〜第６領域１６Ｒのうち隣接する２つの領域は、部分的に互いに重なっている。具体的には、第１領域１１Ｒは、第１重複領域ＯＡ１において第２領域１２Ｒと部分的に重なっている。また、第１領域１１Ｒは、第２重複領域ＯＡ２において第３領域１３Ｒと部分的に重なっている。第２領域１２Ｒは、第３重複領域ＯＡ３において第４領域１４Ｒと部分的に重なっている。第３領域１３Ｒは、第４重複領域ＯＡ４において第５領域１５Ｒと部分的に重なっている。第４領域１４Ｒは、第５重複領域ＯＡ５において第６領域１６Ｒと部分的に重なっている。また、第５領域１５Ｒは、第６重複領域ＯＡ６において第６領域１６Ｒと部分的に重なっている。第１〜第６撮像部１１−１６は、それぞれ撮像した画像を示す画像データをコントローラ１９に送信する。
【００３３】
車速検知部１７は、作業車両１の車速を検知する。車速検知部１７は、例えばトランスミッションの出力軸の回転速度などに基づいて作業車両１の車速を検知する。車速検知部１７は、検知した車速を示す車速データをコントローラ１９に送信する。
【００３４】
表示部１８は、キャブ３内に配置されるモニタである。表示部１８は、キャブ３内において運転席の前方に配置される。表示部１８は、コントローラ１９の制御に応じて画像を表示する。
【００３５】
コントローラ１９は、撮像部１１−１６からの画像データに基づき、作業車両１の周囲を示す俯瞰画像を作成する。コントローラ１９は、作成した俯瞰画像を示す出力信号を表示部１８に出力する。表示部１８は、コントローラ１９からの出力信号により俯瞰画像を表示する。図２に示すように、コントローラ１９は、走行状態判定部２１と、記憶部２２と、俯瞰画像作成部２３とを有する。
【００３６】
走行状態判定部２１は、車速検知部１７からの車速データに基づいて、作業車両１の走行状態を判定する。走行状態判定部２１は、車速が所定の閾値以上であるときには、作業車両１が走行状態であると判定する。走行状態判定部２１は、車速が所定の閾値より小さいときには、作業車両１が停止状態であると判定する。従って、車速がゼロであるときだけではなく、車速の小さい低速走行状態も上記の停止状態に含まれる。
【００３７】
記憶部２２は、コントローラ１９が俯瞰画像を作成するために必要な各種の情報を記憶している。具体的には、記憶部２２は、後述する第１変換情報と第２変換情報と合成比率とを記憶している。
【００３８】
俯瞰画像作成部２３は、撮像部１１−１６のそれぞれから画像データを受信する。俯瞰画像作成部２３は、複数の画像データによって示される複数の画像に基づいて、作業車両１の周囲の俯瞰画像を作成する。具体的には、俯瞰画像作成部２３は、記憶部２２に保存されている変換情報を用いて画像データの座標変換を行う。変換情報は、入力画像の各画素の位置座標と出力画像の各画素の位置座標との対応を示す情報である。ここで、入力画像は、各撮像部１１−１６によって撮像された画像である。また、出力画像は、表示部１８に表示される俯瞰画像である。俯瞰画像作成部２３は、変換情報を用いて、撮像部１１−１６によって撮像された画像を、作業車両１の上方に位置する所定の仮想視点から見た画像に変換する。具体的には、図５に示すように、撮像部１１−１６によって撮像された画像は、所定の仮想投影面３０上に投影されることにより、作業車両１の上方に位置する仮想視点２０から見た画像に変換される。変換情報は、この仮想投影面３０を表している。俯瞰画像作成部２３は、複数の撮像部１１−１６からの画像データを所定の仮想投影面に投影して合成することにより、作業車両１の周囲の俯瞰画像を作成する。すなわち、第１〜第６画像データを所定の仮想投影面に投影して合成することにより、作業車両１の周囲の俯瞰画像を作成する。
【００３９】
上述したように、各撮像部１１−１６が撮像する作業車両１の周囲の領域は、第１〜第６重複領域ＯＡ１−ＯＡ６において重複している。俯瞰画像作成部２３は、俯瞰画像において、各重複領域ＯＡ１−ＯＡ６において互いに隣接する２つの撮像部１１−１６からの画像データの画像を重ねて表示する。具体的には、俯瞰画像作成部２３は、第１重複領域ＯＡ１では、第１撮像部１１からの第１画像データの画像と、第２撮像部１２からの第２画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第２重複領域ＯＡ２では、第１撮像部１１からの第１画像データの画像と、第３撮像部１３からの第３画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第３重複領域ＯＡ３では、第２撮像部１２からの第２画像データの画像と、第４撮像部１４からの第４画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第４重複領域ＯＡ４では、第３撮像部１３からの第３画像データの画像と、第５撮像部１５からの第５画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第５重複領域ＯＡ５では、第４撮像部１４からの第４画像データの画像と、第６撮像部１６からの第６画像データの画像とを重ねて表示する。俯瞰画像作成部２３は、第６重複領域ＯＡ６では、第５撮像部１５からの第５画像データの画像と、第６撮像部１６からの第６画像データの画像とを重ねて表示する。このように重複領域ＯＡ１−ＯＡ６において２つの画像データを重ねて合成する場合には、各画像データの値に合成比率を乗じた値が足し合わされる。合成比率は、各画像データに対応した値であり、記憶部２２に記憶されている。例えば、第１画像データの合成比率が０．５であり、第２画像データの合成比率が０．５であるなど、画像データごとに合成比率が定められている。このように合成比率が用いられることにより、重複領域ＯＡ１−ＯＡ６において複数の画像データが平均化されて表示される。これにより、色やコントラストの急激な変化が抑えられ、自然な俯瞰画像を作成することができる。俯瞰画像作成部２３は、上記のように合成された俯瞰画像を示す俯瞰画像データを生成して、俯瞰画像データを表示部１８に送信する。
【００４０】
俯瞰画像作成部２３は、複数の仮想投影面を選択的に用いて、俯瞰画像を作成する。具体的には、俯瞰画像作成部２３は、図６に示す第１仮想投影面３１と、図７に示す第２仮想投影面３２とを用いて俯瞰画像を作成する。図６（ａ）は、第１仮想投影面３１の斜視図である。図６（ｂ）は、図６（ａ）における第１仮想投影面３１のＡ１−Ａ１断面図である。図６（ｃ）は、図６（ａ）における第１仮想投影面３１のＢ１−Ｂ１断面図である。図７（ａ）は、第２仮想投影面３２の斜視図である。図７（ｂ）は、図７（ａ）における第２仮想投影面３２のＡ２−Ａ２断面図である。図７（ｃ）は、図７（ａ）における第２仮想投影面３２のＢ２−Ｂ２断面図である。上述したように、記憶部２２は、第１変換情報と第２変換情報とを記憶している。第１変換情報は、第１仮想投影面３１を示すデータである。第２変換情報は、第２仮想投影面３２を示すデータである。俯瞰画像作成部２３は、第１変換情報を用いて画像データの座標変換を行うことにより、各撮像部１１−１６が撮像した画像を第１仮想投影面３１に投影した俯瞰画像を作成する。俯瞰画像作成部２３は、第２変換情報を用いて画像データの座標変換を行うことにより、各撮像部１１−１６が撮像した画像を第２仮想投影面３２に投影した俯瞰画像を作成する。
【００４１】
図６に示すように、第１仮想投影面３１は、作業車両１に近づくほど地面からの高さが高くなる形状を含む。第１仮想投影面３１の中央部は、作業車両１に近づくほど地面からの高さが高くなる形状である。第１仮想投影面３１の外縁部は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。ここで、図８に示すように、仮想投影面３１，３２上において、作業車両１の前後方向及び車幅方向の中心Ｃ１（以下、「車両中心Ｃ１」と呼ぶ）から作業車両１の前方、左側方、右側方、後方にそれぞれ所定距離、離れた位置までの範囲を近接範囲Ｒ０と規定する。近接範囲Ｒ０に隣接して近接範囲Ｒ０よりも作業車両１から離れた範囲を第１範囲Ｒ１と規定する。また、第１範囲Ｒ１に隣接して第１範囲Ｒ１よりも作業車両１から離れた範囲を第２範囲Ｒ２と規定する。第２範囲Ｒ２は、各仮想投影面３１，３２の外縁部を含む。
【００４２】
図６に示すように、第１仮想投影面３１は、第１変化部３３と、平坦部３４と、第２変化部３５とを含む。第１変化部３３は、図８に示す近接範囲Ｒ０に位置する。第１変化部３３の地面からの高さは、車両中心Ｃ１に近づくほど高くなる。すなわち、第１変化部３３の地面からの高さは、作業車両１に近づくほど高くなる。従って、第１仮想投影面３１の近接範囲Ｒ０は、地面からの高さが作業車両１に近づくほど高くなる形状である。第１変化部３３は、車両中心Ｃ１に向かって上方に傾斜した形状である。第１変化部３３の頂点は、作業車両１の内部に相当する位置に位置している。第１変化部３３は、複数の撮像部１１−１６のうち最も低い位置に設置されている撮像部よりも下方に位置している。平坦部３４は、第１仮想投影面３１の第１範囲Ｒ１に位置する。平坦部３４は、第１変化部３３よりも作業車両１から離れた位置において第１変化部３３に連続的に繋がっている。第１変化部３３と平坦部３４との接続部分は、地面上に位置する。平坦部３４の地面からの高さは一定である。従って、第１仮想投影面３１の第１範囲Ｒ１は、地面からの高さが一定の平坦な形状である。具体的には、平坦部３４は、地面と同じ高さの平面である。従って、第１仮想投影面３１の第１範囲Ｒ１は、地面と同じ高さの平坦な形状である。第２変化部３５は、第１仮想投影面３１の第２範囲Ｒ２に位置している。第２変化部３５は、平坦部３４よりも作業車両１から離れた位置において、平坦部３４に連続的に繋がっている。第２変化部３５の地面からの高さは、作業車両１から遠ざかるほど高くなる。従って、第１仮想投影面３１の第２範囲Ｒ２は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。第２変化部３５は、作業車両１から離れる方向に向かって上方に傾斜した形状である。第２変化部３５と平坦部３４との接続部分は、地面上に位置する。
【００４３】
第１仮想投影面３１の第２範囲Ｒ２すなわち第２変化部３５は、複数の湾曲面３５ａ−３５ｄと、複数の球面３５ｅ−３５ｈとを含む。湾曲面３５ａ−３５ｄは、作業車両１の外形に対応する矩形の各辺に平行な仮想軸を中心に湾曲している。球面３５ｅ−３５ｈは、隣接する一対の湾曲面３５ａ−３５ｄの間にそれぞれ配置されている。球面３５ｅ−３５ｈは、隣接する一対の湾曲面３５ａ−３５ｄと連続的につながっている。具体的には、第２変化部３５は、第１〜第４湾曲面３５ａ−３５ｄと、第１〜第４球面３５ｅ−３５ｈとを含む。第１湾曲面３５ａは、作業車両１の前方に位置する。図６（ａ）に示すように、第１湾曲面３５ａは、仮想軸Ｃ２を中心に湾曲している。仮想軸Ｃ２は、作業車両１の外形に対応する矩形の前面の辺に平行な軸線である。第２湾曲面３５ｂは、作業車両１の後方に位置する。図６（ａ）に示すように、第２湾曲面３５ｂは、仮想軸Ｃ３を中心に湾曲している。仮想軸Ｃ３は、作業車両１の外形に対応する矩形の後面の辺に平行な軸線である。第３湾曲面３５ｃは、作業車両１の左側方に位置する。図６（ｂ）に示すように、第３湾曲面３５ｃは、仮想軸Ｃ４を中心に湾曲している。仮想軸Ｃ４は、作業車両１の外形に対応する矩形の左側面の辺に平行な軸線である。第４湾曲面３５ｄは、作業車両１の右側方に位置する。図６（ｂ）に示すように、第４湾曲面３５ｄは、仮想軸Ｃ５を中心に湾曲している。仮想軸Ｃ５は、作業車両１の外形に対応する矩形の右側面の辺に平行な軸線である。
【００４４】
第１球面３５ｅは、第１湾曲面３５ａと第３湾曲面３５ｃとの間に配置されている。第１球面３５ｅは、第１湾曲面３５ａと第３湾曲面３５ｃとに連続的につながっている。第２球面３５ｆは、第１湾曲面３５ａと第４湾曲面３５ｄとの間に配置されている。第２球面３５ｆは、第１湾曲面３５ａと第４湾曲面３５ｄとに連続的につながっている。第３球面３５ｇは、第２湾曲面３５ｂと第３湾曲面３５ｃとの間に配置されている。第３球面３５ｇは、第２湾曲面３５ｂと第３湾曲面３５ｃとに連続的につながっている。第４球面３５ｈは、第２湾曲面３５ｂと第４湾曲面３５ｄとの間に配置されている。第４球面３５ｈは、第２湾曲面３５ｂと第４湾曲面３５ｄとに連続的につながっている。
【００４５】
図７に示すように、第２仮想投影面３２は平坦な形状を有する。詳細には、第２仮想投影面３２の外縁部を含む全体が、地面からの高さが一定の平坦な形状である。従って、第２仮想投影面３２の第１範囲Ｒ１と第２範囲Ｒ２と近接範囲Ｒ０は、地面からの高さが一定の平坦な形状である。具体的には、第２仮想投影面３２の全体が、地面と同じ高さに位置する平坦な形状を有する。
【００４６】
図９は、周辺監視装置１０のコントローラ１９によって実行される処理を示すフローチャートである。以下、図９に基づいて、周辺監視装置１０が俯瞰画像を表示するための処理について説明する。
【００４７】
まず、ステップＳ１において、画像の取り込みが実行される。ここでは、各撮像部１１−１６のカメラ１１ａ−１６ａによって画像が撮像され、画像データが各撮像部１１−１６のフレームメモリ１１ｂ−１６ｂに保存される。
【００４８】
ステップＳ２では、作業車両１が走行状態であるのか否かが判定される。ここでは、走行状態判定部２１が、車速に基づいて作業車両１が走行状態であるのか否かを判定する。上述したように、走行状態判定部２１は、車速が所定の閾値以上であるときに、作業車両１が走行状態であると判定する。また、走行状態判定部２１は、車速が所定の閾値より小さいときに、作業車両１が停止状態であると判定する。作業車両１が走行状態ではないときにはステップＳ３に進む。すなわち、作業車両１が停止状態であるときには、ステップＳ３に進む。
【００４９】
ステップＳ３では、第１仮想投影面３１にて俯瞰画像が作成される。ここでは、俯瞰画像作成部２３は、図６に示す第１仮想投影面３１を用いて、俯瞰画像を作成する。具体的には、各撮像部１１−１６からの画像データを第１仮想投影面３１上に投影して合成することにより、俯瞰画像を作成する。図１０は、第１仮想投影面３１を用いて作成された俯瞰画像（以下、「第１俯瞰画像４１」と呼ぶ）の一例である。第１俯瞰画像４１の外枠は長方形の形状を有する。第１俯瞰画像４１は、上面視における作業車両１を示すモデル図５０と、上面視における作業車両１の周囲の画像５１とを含む。また、第１俯瞰画像４１は、作業車両１からの距離を示す複数の基準線５２−５４を含む。基準線５２−５４は、第１基準線５２と第２基準線５３と第３基準線５４とを含む。例えば、第１基準線５２は、作業車両１から１０ｍ離れた位置を示す。第２基準線５３は、作業車両１から１５ｍ離れた位置を示す。第３基準線５４は、作業車両１から２０ｍ離れた位置を示す。上述したように、第１仮想投影面３１の外縁部を含む第２範囲Ｒ２は湾曲面３５ａ−３５ｄ及び球面３５ｅ−３５ｈによって構成されている。このため、第１俯瞰画像４１の外枠に近い部分では、画像５１が湾曲して表示される。
【００５０】
ステップＳ２において、作業車両１が走行状態であると判定されたときには、ステップＳ４に進む。すなわち、車速の所定の閾値以上であるときには、ステップＳ４に進む。ステップＳ４では、第２仮想投影面３２にて俯瞰画像が作成される。図１１は、第２仮想投影面３２を用いて作成された俯瞰画像（以下、「第２俯瞰画像４２」と呼ぶ）の一例である。第２俯瞰画像４２は、第１俯瞰画像４１と同様に、上面視における作業車両１を示すモデル図５０と、上面視における作業車両１の周囲の画像５１とを含む。また、第２俯瞰画像４２は、第１俯瞰画像４１と同様に、複数の基準線５２−５４を含む。上述したように、第２仮想投影面３２は全体的に平坦な形状である。このため、第２俯瞰画像４２では、外枠に近い部分であっても、第１俯瞰画像４１のように、画像５１が湾曲して表示されることが防止される。
【００５１】
ステップＳ５では、俯瞰画像が表示部１８に表示される。ここでは、上述した第１俯瞰画像４１又は第２俯瞰画像４２が表示部１８に表示される。具体的には、作業車両１が停止状態であるときには、第１俯瞰画像４１が表示部１８に表示される。作業車両１が走行状態であるときには、第２俯瞰画像４２が表示部１８に表示される。
【００５２】
次に、本実施形態に係る作業車両１の周辺監視装置１０の特徴について説明する。
【００５３】
本実施形態に係る作業車両１の周辺監視装置１０では、作業車両１が停止状態であるときには、俯瞰画像作成部２３は、第１仮想投影面３１を用いて俯瞰画像を作成する。第１仮想投影面３１の外縁部を含む第２範囲Ｒ２には、第２変化部３５が配置されている。第２変化部３５は、作業車両１から遠ざかるほど地面からの高さが高くなる形状である。このため、第１俯瞰画像４１において、作業車両１から遠くに位置する物体ほど大きく表示される現象が抑えられる。このため、作業車両１が停止状態であるときには、オペレータは、第１俯瞰画像４１によって物体の形状と大きさとを把握しやすい。
【００５４】
また、作業車両１が走行状態であるときには、俯瞰画像作成部２３は、第２仮想投影面３２を用いて俯瞰画像を作成する。第２仮想投影面３２は、全体的に、地面からの高さが一定の平坦な形状である。このため、第２俯瞰画像４２の外縁部における地面の歪みが抑えられる。従って、作業車両１の周囲の道路が第２俯瞰画像４２において歪んで表示されることが抑えられる。これにより、オペレータは、作業車両１の走行時に作業車両１がどこを走っているのかを容易に認識することができる。
【００５５】
第１仮想投影面３１では、複数の湾曲面３５ａ−３５ｄと複数の球面３５ｅ−３５ｈとが連続的につながっている。このため、オペレータに与える違和感が少ない滑らかな第１俯瞰画像４１が作成される。
【００５６】
第２仮想投影面３２の全体が、地面からの高さが一定の平坦な形状である。このため、歪みの少ない第２俯瞰画像４２が作成される。これにより、オペレータは、作業車両１の走行時に作業車両１がどこを走っているのかを容易に認識することができる。
【００５７】
走行状態判定部２１は、車速が所定の閾値より小さいときに、作業車両１が停止状態であると判定する。このため、作業車両１が低速で走行しているときにも、作業車両１が停止状態にあると判断される。これにより、オペレータは、作業車両１が低速で走行しているときに、第１俯瞰画像４１によって物体の形状と大きさとを容易に把握することができる。
【００５８】
以上、本発明の一実施形態について説明したが、本発明は上記実施形態に限定されるものではなく、発明の要旨を逸脱しない範囲で種々の変更が可能である。
【００５９】
上記の実施形態では、作業車両１の一例としてダンプトラックが挙げられているが、本発明は、例えばブルドーザーなどの他の種類の作業車両にも適用することができる。
【００６０】
第２仮想投影面３２は、第２範囲Ｒ２を除く領域において地面からの高さが変化する形状を有してもよい。例えば、図１２に示す第２仮想投影面３２のように、変化部６１と平坦部６２とによって構成されてもよい。変化部６１は、上記の実施形態の第１変化部３３と同様の形状である。従って、変化部６１は、作業車両１に近づくほど地面からの高さが高くなる形状である。変化部６１は、近接範囲Ｒ０に位置する。平坦部６２は、変化部６１よりも作業車両１から離れており、第２仮想投影面３２の外枠まで延びている。すなわち、平坦部６２は、第１範囲Ｒ１と第２範囲Ｒ２とを合わせた範囲に位置する。さらに言い換えれば、第２仮想投影面３２の第１範囲Ｒ１及び第２範囲Ｒ２は、地面からの高さが一定の平坦な形状である
本発明の撮像部の数は上記の実施形態のように６台に限られない。また、本発明の撮像部の配置は上記の実施形態の撮像部１１−１６の配置に限られない。上記の実施形態では、第１仮想投影面３１の第１変化部３３は、地面からの高さが連続的に変化する傾斜面であるが、第１変化部３３の地面からの高さが階段状に変化してもよい。同様に、第２変化部３５の地面からの高さが階段状に変化してもよい。ただし、違和感の少ない自然な俯瞰画像を形成する観点からは、第１変化部３３は、地面からの高さが連続的に変化する傾斜面であることが好ましい。同様に、違和感の少ない自然な俯瞰画像を形成する観点からは、第２変化部３５は、地面からの高さが連続的に変化する傾斜面であることが好ましい。また、第１変化部３３の傾斜面は、直線状であっても、曲線状であってもよい。同様に、第２変化部３５の傾斜面は、直線状であっても、曲線状であってもよい。また、第１仮想投影面３１の平坦部３４は、地面と同じ高さに限らず、地面と異なる高さに位置してもよい。
【００６１】
上記の実施形態では、車速が所定の閾値以上であるときに作業車両が走行状態と判定されている。この閾値は０より大きい値に限らず、０であってもよい。すなわち、車速が０であるときに作業車両が停止状態であると判定され、車速が０より大きいときに作業車両が走行状態であると判定されてもよい。或いは、車速以外のパラメータによって、作業車両の走行状態と停止状態とが判定されてもよい。例えば、アクセルの操作量が所定の閾値以上であるときに作業車両が走行状態であると判定され、アクセルの操作量が所定の閾値より小さいときに作業車両が停止状態であると判定されてもよい。
【産業上の利用可能性】
【００６２】
本発明は、作業車両の走行時に作業車両の位置をオペレータが容易に認識することができる作業車両の周辺監視装置を提供することができる。
【符号の説明】
【００６３】
１ 作業車両
１０ 周辺監視装置
１１−１６ 第１〜第６撮像部
１７ 車速検知部
１８ 表示部
２３ 俯瞰画像作成部
３１ 第１仮想投影面
３２ 第２仮想投影面
Ｒ１ 第１範囲
Ｒ２ 第２範囲
【特許請求の範囲】
【請求項１】
作業車両に装着され、前記作業車両の周囲の領域を撮像して画像データを得る撮像部と、
前記画像データを仮想投影面に投影することにより、前記作業車両の周囲の俯瞰画像を作成する俯瞰画像作成部と、
前記俯瞰画像を表示する表示部と、
前記作業車両が走行状態であるのか停止状態であるのかを判定する走行状態判定部と、
を備え、
前記作業車両が停止状態であるときには、前記俯瞰画像作成部は、第１仮想投影面を用いて前記俯瞰画像を作成し、
前記第１仮想投影面の少なくとも外縁部は、前記作業車両から遠ざかるほど地面からの高さが高くなる形状であり、
前記作業車両が走行状態であるときには、前記俯瞰画像作成部は、第２仮想投影面を用いて前記俯瞰画像を作成し、
前記第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である、
作業車両の周辺監視装置。
【請求項２】
前記仮想投影面は、前記作業車両の周囲の第１範囲と、前記第１範囲よりも前記作業車両から離れた第２範囲とを含み、
前記第１仮想投影面の前記第１範囲は、地面からの高さが一定の平坦な形状であり、
前記第１仮想投影面の前記第２範囲は、前記作業車両から遠ざかるほど地面からの高さが高くなる形状であり、
前記第２仮想投影面の前記第１範囲及び前記第２範囲は、地面からの高さが一定の平坦な形状である、
請求項１に記載の作業車両の周辺監視装置。
【請求項３】
前記第１仮想投影面の前記第２範囲は、前記作業車両の外形に対応する矩形の各辺に平行な仮想軸を中心に湾曲した複数の湾曲面と、隣接する一対の前記湾曲面の間にそれぞれ配置されて前記一対の湾曲面と連続的につながった複数の球面とを含む、
請求項２に記載の作業車両の周辺監視装置。
【請求項４】
前記第２仮想投影面の全体が、地面からの高さが一定の平坦な形状である、
請求項１から３のいずれかに記載の作業車両の周辺監視装置。
【請求項５】
前記作業車両の車速を検知する車速検知部をさらに備え、
前記走行状態判定部は、前記車速が所定の閾値以上であるときに、前記作業車両が走行状態であると判定し、前記車速が前記所定の閾値より小さいときに、前記作業車両が停止状態であると判定する、
請求項１から４のいずれかに記載の作業車両の周辺監視装置。
【請求項６】
請求項１から５のいずれかに記載の周辺監視装置を備える作業車両。
【請求項１】
作業車両に装着され、前記作業車両の周囲の領域を撮像して画像データを得る撮像部と、
前記画像データを仮想投影面に投影することにより、前記作業車両の周囲の俯瞰画像を作成する俯瞰画像作成部と、
前記俯瞰画像を表示する表示部と、
前記作業車両が走行状態であるのか停止状態であるのかを判定する走行状態判定部と、
を備え、
前記作業車両が停止状態であるときには、前記俯瞰画像作成部は、第１仮想投影面を用いて前記俯瞰画像を作成し、
前記第１仮想投影面の少なくとも外縁部は、前記作業車両から遠ざかるほど地面からの高さが高くなる形状であり、
前記作業車両が走行状態であるときには、前記俯瞰画像作成部は、第２仮想投影面を用いて前記俯瞰画像を作成し、
前記第２仮想投影面の少なくとも外縁部は、地面からの高さが一定の平坦な形状である、
作業車両の周辺監視装置。
【請求項２】
前記仮想投影面は、前記作業車両の周囲の第１範囲と、前記第１範囲よりも前記作業車両から離れた第２範囲とを含み、
前記第１仮想投影面の前記第１範囲は、地面からの高さが一定の平坦な形状であり、
前記第１仮想投影面の前記第２範囲は、前記作業車両から遠ざかるほど地面からの高さが高くなる形状であり、
前記第２仮想投影面の前記第１範囲及び前記第２範囲は、地面からの高さが一定の平坦な形状である、
請求項１に記載の作業車両の周辺監視装置。
【請求項３】
前記第１仮想投影面の前記第２範囲は、前記作業車両の外形に対応する矩形の各辺に平行な仮想軸を中心に湾曲した複数の湾曲面と、隣接する一対の前記湾曲面の間にそれぞれ配置されて前記一対の湾曲面と連続的につながった複数の球面とを含む、
請求項２に記載の作業車両の周辺監視装置。
【請求項４】
前記第２仮想投影面の全体が、地面からの高さが一定の平坦な形状である、
請求項１から３のいずれかに記載の作業車両の周辺監視装置。
【請求項５】
前記作業車両の車速を検知する車速検知部をさらに備え、
前記走行状態判定部は、前記車速が所定の閾値以上であるときに、前記作業車両が走行状態であると判定し、前記車速が前記所定の閾値より小さいときに、前記作業車両が停止状態であると判定する、
請求項１から４のいずれかに記載の作業車両の周辺監視装置。
【請求項６】
請求項１から５のいずれかに記載の周辺監視装置を備える作業車両。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１２−２５６９６０（Ｐ２０１２−２５６９６０Ａ）
【公開日】平成２４年１２月２７日（２０１２．１２．２７）
【国際特許分類】
【出願番号】特願２０１１−１２７３０７（Ｐ２０１１−１２７３０７）
【出願日】平成２３年６月７日（２０１１．６．７）
【出願人】（０００００１２３６）株式会社小松製作所 (1,686)
【Ｆターム（参考）】
【公開日】平成２４年１２月２７日（２０１２．１２．２７）
【国際特許分類】
【出願日】平成２３年６月７日（２０１１．６．７）
【出願人】（０００００１２３６）株式会社小松製作所 (1,686)
【Ｆターム（参考）】
[ Back to top ]