表示制御装置、表示制御方法、プログラム、および記録媒体
【課題】撮像された画像の撮像領域に存在する交通標識の意味およびその位置を、容易かつ直感的に把握させること。
【解決手段】取得部１０６は、撮像部１０４によって撮像された画像を取得する。認識部１０８は、取得部１０６が取得した画像における第一国の交通標識を認識する。制御部１１０は、認識部１０８によって認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部１０２から抽出し、抽出した第二国の交通標識の画像を、取得部１０６が取得した画像上に表示するように、表示部１１２による表示を制御する。
【解決手段】取得部１０６は、撮像部１０４によって撮像された画像を取得する。認識部１０８は、取得部１０６が取得した画像における第一国の交通標識を認識する。制御部１１０は、認識部１０８によって認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部１０２から抽出し、抽出した第二国の交通標識の画像を、取得部１０６が取得した画像上に表示するように、表示部１１２による表示を制御する。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、表示部による画像の表示を制御する表示制御装置、表示制御方法、プログラム、および記録媒体に関する。ただし、この発明の利用は、上述した表示制御装置、表示制御方法、プログラム、および記録媒体には限られない。
【背景技術】
【０００２】
カメラによって撮像された画像から道路標識を認識し、認識した道路標識に対応付けられている母国の道路標識の画像を表示装置で表示する技術が考案されている（たとえば、下記特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１０９４０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来技術では、ユーザーに対し、画像から認識した道路標識の意味を認識させることができたとしても、その道路標識が示されている位置までは把握させることができない。
【課題を解決するための手段】
【０００５】
上述した課題を解決し、目的を達成するため、請求項１の発明にかかる表示制御装置は、撮像部によって撮像された画像を取得する取得部と、前記取得部が取得した画像における第一国の交通標識を認識する認識部と、認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得部が取得した画像上において、前記第一国の交通標識と対応付けて表示するように、表示部による表示を制御する制御部と、を備えることを特徴とする。
【０００６】
また、請求項６の発明にかかる表示制御方法は、撮像部によって撮像された画像を取得する取得工程と、前記取得工程で取得された画像における第一国の交通標識を認識する認識工程と、認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得工程で取得された画像上に表示するように、表示部による表示を制御する制御工程と、を含んだことを特徴とする。
【０００７】
また、請求項７の発明にかかるプログラムは、請求項６に記載の表示制御方法をコンピュータに実行させることを特徴とする。
【０００８】
また、請求項８の発明にかかる記録媒体は、請求項７に記載のプログラムをコンピュータで読み取り可能に記録したことを特徴とする。
【図面の簡単な説明】
【０００９】
【図１】表示制御装置１００の機能的構成を示すブロック図である。
【図２】表示制御装置１００による表示制御処理の手順を示すフローチャートである。
【図３】ナビゲーション装置３００のハードウエア構成を示すブロック図である。
【図４】ナビゲーション装置３００による表示制御処理の手順を示すフローチャートである。
【図５】ナビゲーション装置３００によって撮像された画像の一例を示す説明図である。
【図６】ナビゲーション装置３００による第二国の交通標識の表示例を示す説明図である。
【図７】ナビゲーション装置３００による第二国の交通標識の表示例を示す説明図である。
【図８】ナビゲーション装置３００による第二国の交通標識の他の表示例を示す説明図である。
【図９】ナビゲーション装置３００による、第二国の交通標識の画像を表示するか否かの判断方法の一例を示す説明図である。
【発明を実施するための形態】
【００１０】
以下に添付図面を参照して、この発明にかかる表示制御装置、表示制御方法、プログラム、および記録媒体の好適な実施の形態を詳細に説明する。
【００１１】
（実施の形態）
（表示制御装置１００の機能的構成）
まず、本実施の形態にかかる表示制御装置１００の機能的構成について説明する。図１は、表示制御装置１００の機能的構成を示すブロック図である。図１において、表示制御装置１００は、格納部１０２、撮像部１０４、取得部１０６、認識部１０８、制御部１１０、表示部１１２、決定部１１４、特定部１１６を備えて構成されている。
【００１２】
格納部１０２は、第一国の交通標識に対応付けて、第二国の交通標識の画像を格納する。具体的には、格納部１０２には、第一国の交通標識が複数格納されている。そして、格納部１０２には、複数の第一国の交通標識のそれぞれに対して、これと同じ意味を示す第二国の交通標識の画像が、対応付けて格納されている。ここで、第一国とは、表示制御装置１００が認識すべき交通標識の国を示す。たとえば、第一国は、表示制御装置１００が使用される国である。一方、第二国とは、第一国とは異なる国であって、表示部１１２に表示させるべき交通標識の国を示す。たとえば、第二国は、表示制御装置１００を使用するユーザーの母国である。第一国および第二国は、予め決定されていてもよく、予め用意されている複数の国の中から、ユーザーがそれぞれを選択的に決定してもよい。
【００１３】
撮像部１０４は、撮像対象の画像を撮像する。たとえば、表示制御装置１００が四輪車、二輪車、自転車などの車両に搭載されている場合、撮像部１０４は、車両の進行方向の画像を撮像する。他の例として、表示制御装置１００をユーザーが保持している場合、撮像部１０４は、ユーザーの進行方向の画像を撮像する。撮像部１０４は、静止画像を撮像するものであってもよく、動画像を撮像するものであってもよい。取得部１０６は、撮像部１０４によって撮像された画像を取得する。本実施の形態では、撮像部１０４は、表示制御装置１００に設けられている。これに限らず、撮像部１０４は、表示制御装置１００の外部に設けられていてもよい。この場合、取得部１０６は、表示制御装置１００の外部に設けられている撮像部１０４から、無線通信、有線通信、または記録媒体を介して、画像を取得してもよい。
【００１４】
認識部１０８は、取得部１０６が取得した画像における第一国の交通標識を認識する。たとえば、認識部１０８は、取得部１０６が取得した画像に対して、既知のエッジ抽出処理、パターンマッチング処理などをおこなう。これにより、認識部１０８は、取得部１０６が取得した画像における第一国の交通標識を認識する。
【００１５】
制御部１１０は、認識部１０８によって認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部１０２から抽出する。そして、制御部１１０は、抽出した第二国の交通標識の画像を、取得部１０６が取得した画像上において、認識部１０８によって認識された第一国の交通標識と対応付けて表示するように、表示部１１２による表示を制御する。
【００１６】
たとえば、制御部１１０は、取得部１０６が取得した画像における、第一国の交通標識の画像に重畳して、第二国の交通標識の画像を表示させる。他の例として、取得部１０６は、取得部１０６が取得した画像における、第一国の交通標識の画像に並べて、第二国の交通標識の画像を表示させる。これに限らず、制御部１１０は、第一国の交通標識の画像が表示されていた位置と、表示された第二国の交通標識の画像との対応付けが容易に認識できるような形態であれば、上記以外の形態で、画像および第二国の交通標識の画像を表示部１１２に表示させてもよい。
【００１７】
本実施の形態では、格納部１０２は、表示制御装置１００に設けられている。これに限らず、格納部１０２は、表示制御装置１００の外部に設けられていてもよい。この場合、制御部１１０は、表示制御装置１００の外部に設けられている格納部１０２から、無線通信、有線通信、または記録媒体を介して、第二国の交通標識の画像を抽出してもよい。
【００１８】
また、本実施の形態では、表示部１１２は、表示制御装置１００に設けられている。これに限らず、表示部１１２は、表示制御装置１００の外部に設けられていてもよい。この場合、制御部１１０は、表示制御装置１００の外部に設けられている表示部１１２に対し、無線通信または有線通信を介して、画像および第二国の交通標識の画像を表示させてもよい。
【００１９】
決定部１１４は、目的地までの経路を決定する。たとえば、決定部１１４は、表示制御装置１００が有する経路探索機能を利用して、目的地までの走行経路を探索することによって、目的地までの経路を決定する。他の例として、決定部１１４は、目的地までの経路が示された走行経路情報を、表示制御装置１００の内部または外部から取得することによって、目的地までの経路を決定してもよい。
【００２０】
取得部１０６は、決定部１１４によって決定された経路に関する経路情報をさらに取得してもよい。この場合、制御部１１０は、取得部１０６が取得した経路情報に基づいて、取得部１０６が取得した画像における第一国の交通標識のうち、経路上にないものについては、この第一国の交通標識に対応付けられている第二国の交通標識の画像を表示しないように、表示部１１２による表示を制御してもよい。
【００２１】
特定部１１６は、取得部１０６が取得した画像の撮像領域内に存在する第一国の交通標識およびその位置を特定する。たとえば、表示制御装置１００内部または外部のデータベースに対し、第一国の交通標識ごとにその位置情報を対応付けて格納しておく。特定部１１６は、表示制御装置１００の現在位置、撮像部１０４の撮像方向、および撮像部１０４の画角などに基づいて、取得部１０６が取得した画像の撮像領域を特定する。
【００２２】
そして、特定部１１６は、上記データベースを参照することにより、撮像領域内に存在する第一国の交通標識およびその位置を特定する。制御部１１０は、特定部１１６によって特定された第一国の交通標識に対応付けられている第二国の交通標識の画像を格納部１０２から抽出し、抽出した第二国の交通標識の画像を、取得部１０６が取得した画像上において、特定部１１６によって特定された位置に対応させて表示するように、表示部１１２による表示を制御してもよい。
【００２３】
（表示制御装置１００による表示制御処理の手順）
つぎに、表示制御装置１００による表示制御処理の手順について説明する。図２は、本実施の形態にかかる表示制御装置１００による表示制御処理の手順を示すフローチャートである。
【００２４】
まず、撮像部１０４が、画像を撮像する（ステップＳ２０２）。つぎに、取得部１０６が、ステップＳ２０２で撮像された画像を取得する（ステップＳ２０４）。つぎに、認識部１０８が、ステップＳ２０４で取得された画像における第一国の交通標識を認識する（ステップＳ２０６）。そして、制御部１１０が、ステップＳ２０６で認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部１０２から抽出する（ステップＳ２０８）。さらに、制御部１１０が、ステップＳ２０８で抽出した第二国の交通標識の画像を、ステップＳ２０２で撮像された画像上において、ステップＳ２０６で認識された第一国の交通標識と対応付けて表示するように、表示部１１２による表示を制御し（ステップＳ２１０）、表示制御装置１００は、一連の表示制御処理を終了する。
【００２５】
以上説明したように、本実施の形態にかかる表示制御装置１００は、撮像部１０４によって撮像された画像において第一国の交通標識を認識し、これに対応付けられている第二国の交通標識の画像を、撮像部１０４によって撮像された画像上において、認識された第一国の交通標識に対応付けて表示する構成とした。これにより、表示制御装置１００は、ユーザーに対し、撮像部１０４が撮像した画像の撮像領域内に存在する交通標識の意味だけでなく、その交通標識が示されている位置までも、容易かつ直感的に把握させることができる。
【実施例】
【００２６】
以下に添付図面を参照して、この発明にかかる表示制御装置、表示制御方法、プログラム、および記録媒体の好適な実施例を詳細に説明する。本実施例では、四輪車、二輪車、自転車などの車両に搭載され、またはユーザーに保持され、現在位置検出処理、経路探索処理、経路誘導処理などの各種処理をおこなうナビゲーション装置３００によって、本発明にかかる表示制御装置、表示制御方法、プログラム、および記録媒体を実施した場合について説明する。
【００２７】
（ナビゲーション装置３００のハードウエア構成）
まず、ナビゲーション装置３００のハードウエア構成について説明する。図３は、ナビゲーション装置３００のハードウエア構成を示すブロック図である。
【００２８】
図３において、ナビゲーション装置３００は、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、磁気ディスクドライブ３０４、磁気ディスク３０５、光ディスクドライブ３０６、光ディスク３０７、音声Ｉ／Ｆ（インターフェース）３０８、スピーカ３０９、入力デバイス３１０、映像Ｉ／Ｆ３１１、ディスプレイ３１２、通信Ｉ／Ｆ３１３、ＧＰＳユニット３１４、各種センサ３１５、およびカメラ３１６を備えている。これら各構成部３０１〜３１６はバス３２０によってそれぞれ接続されている。
【００２９】
ＣＰＵ３０１は、ナビゲーション装置３００の全体の制御を司る。ＲＯＭ３０２は、ナビゲーション装置３００が備える各種機能を実現するためのブートプログラム、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）プログラム、ナビゲーションプログラムなどの各種プログラムを記録している。ＲＡＭ３０３は、ＣＰＵ３０１のワークエリアとして使用される。
【００３０】
ＣＰＵ３０１は、ＲＯＭ３０２、磁気ディスク３０５、光ディスク３０７などに記録されているナビゲーションプログラムを実行することにより、現在位置検出処理、経路探索処理、経路誘導処理などの各種処理をおこなう。たとえば、ＣＰＵ３０１は、ＧＰＳユニット３１４および各種センサ３１５の出力情報に基づいて、車両の現在位置（ナビゲーション装置３００の現在位置）を検出する。また、ＣＰＵ３０１は、ナビゲーションプログラムに含まれた地図データなどを利用して、出発地から目的地までの走行経路を探索する。また、ＣＰＵ３０１は、探索した走行経路を示す経路情報や、探索した走行経路を案内する案内情報などを、映像Ｉ／Ｆ３１１を介してディスプレイ３１２に表示させる。また、ＣＰＵ３０１は、探索された走行経路を案内する案内情報などを、音声Ｉ／Ｆ３０８を介してスピーカ３０９から音声出力させる。
【００３１】
磁気ディスクドライブ３０４は、ＣＰＵ３０１の制御にしたがって磁気ディスク３０５に対するデータの読み取り／書き込みを制御する。磁気ディスク３０５は、磁気ディスクドライブ３０４の制御で書き込まれたデータを記録する。磁気ディスク３０５としては、たとえば、ＨＤ（ハードディスク）やＦＤ（フレキシブルディスク）を用いることができる。
【００３２】
光ディスクドライブ３０６は、ＣＰＵ３０１の制御にしたがって光ディスク３０７に対するデータの読み取り／書き込みを制御する。光ディスク３０７は、光ディスクドライブ３０６の制御にしたがってデータが読み出される着脱自在な記録媒体である。光ディスク３０７は、書き込み可能な記録媒体を利用することもできる。また、この着脱自在な記録媒体として、光ディスク３０７のほか、ＭＯ、メモリカードなどであってもよい。
【００３３】
音声Ｉ／Ｆ３０８は、音声出力用のスピーカ３０９に接続される。スピーカ３０９は、音声を出力する。入力デバイス３１０は、文字、数値、各種指示などの入力のための複数のキーを備えたリモコン、キーボード、マウス、タッチパネルなどが挙げられる。入力デバイス３１０は、リモコン、キーボード、マウス、タッチパネルのうち、いずれか一つの形態によって実現してもよいし、複数の形態によって実現してもよい。
【００３４】
映像Ｉ／Ｆ３１１は、ディスプレイ３１２に接続される。映像Ｉ／Ｆ３１１は、具体的には、たとえば、ディスプレイ３１２全体の制御をおこなうグラフィックコントローラと、即時表示可能な画像情報を一時的に記録するＶＲＡＭ（Ｖｉｄｅｏ ＲＡＭ）などのバッファメモリと、グラフィックコントローラから出力される画像データに基づいてディスプレイ３１２を制御する制御ＩＣなどによって構成される。
【００３５】
ディスプレイ３１２は、たとえば、液晶ディスプレイ、有機ＥＬディスプレイなどを採用することができる。ディスプレイ３１２は、たとえば、車両のダッシュボード付近に設置される。ディスプレイ３１２は、車両のダッシュボード付近のほか、車両の後部座席周辺などに設置するなどして、車両内に複数設置してもよい。
【００３６】
通信Ｉ／Ｆ３１３は、外部（通信ネットワーク、情報処理装置、記録媒体など）と有線または無線によって接続され、接続された外部に対するデータの入出力を制御する。たとえば、カメラ３１６またはディスプレイ３１２が外部に設けられている場合、通信Ｉ／Ｆ３１３は、外部のカメラ３１６またはディスプレイ３１２と接続され、接続された外部のカメラ３１６またはディスプレイ３１２に対するデータの入出力を制御する。
【００３７】
ＧＰＳユニット３１４は、ＧＰＳ衛星からの電波を受信し、車両の現在位置を示す情報を出力する。ＧＰＳユニット３１４の出力情報は、後述する各種センサ３１５の出力値とともに、ＣＰＵ３０１による車両の現在位置の算出に際して利用される。現在位置を示す情報は、たとえば緯度・経度、高度などの、地図データ上の１点を特定する情報である。
【００３８】
各種センサ３１５は、車速センサ、加速度センサ、角速度センサなどの、車両の位置や挙動を判断することが可能な情報を出力する。各種センサ３１５の出力値は、ＣＰＵ３０１による車両の現在位置の算出や、速度や方位の変化量の測定などに用いられる。
【００３９】
カメラ３１６は、撮像対象の画像を撮像する。カメラ３１６は、ＣＣＤ、ＣＭＯＳなどの撮像素子によって撮像対象からの光を受光し、受光した光から撮像対象の画像データを生成する。
【００４０】
本実施例のナビゲーション装置３００は、ＲＯＭ３０２、磁気ディスク３０５、光ディスク３０７などの記録媒体によって、図１に示した格納部１０２の機能を実現することができる。また、本実施例のナビゲーション装置３００は、カメラ３１６によって、図１に示した撮像部１０４の機能を実現することができる。また、本実施例のナビゲーション装置３００は、ＲＯＭ３０２、磁気ディスク３０５、光ディスク３０７などに記録されている充電制御プログラムをＣＰＵ３０１が実行することによって、図１に示した取得部１０６、認識部１０８、および制御部１１０の機能を実現することができる。また、本実施例のナビゲーション装置３００は、ディスプレイ３１２によって、図１に示した表示部１１２の機能を実現することができる。
【００４１】
（ナビゲーション装置３００による表示制御処理の手順）
つぎに、ナビゲーション装置３００による表示制御処理の手順について説明する。図４は、ナビゲーション装置３００による表示制御処理の手順を示すフローチャートである。
【００４２】
まず、ナビゲーション装置３００は、目的地までの車両の走行経路を決定する（ステップＳ４０１）。たとえば、ナビゲーション装置３００は、地図情報、ユーザによって入力された出発地、経由地、目的地、各種条件（たとえば、時間優先／距離優先、一般道路優先／高速道路優先、など）に基づいて、目的地までの車両の走行経路を探索する。
【００４３】
つぎに、ナビゲーション装置３００は、車両の進行方向の画像を撮像する（ステップＳ４０２）。つぎに、ナビゲーション装置３００は、ステップＳ４０２で撮像された画像を取得する（ステップＳ４０４）。つぎに、ナビゲーション装置３００は、ステップＳ４０４で取得された画像を表示する（ステップＳ４０６）。
【００４４】
つぎに、ナビゲーション装置３００は、ステップＳ４０４で取得された画像から第一国の交通標識を認識する（ステップＳ４０８）。ステップＳ４０８において、第一国の交通標識を認識した場合（ステップＳ４０８：Ｙｅｓ）、ステップＳ４０８で認識された第一国の交通標識が、ステップＳ４０１で決定された走行経路上のものか否かを判断する（ステップＳ４１０）。
【００４５】
ステップＳ４１０において、走行経路上のものであると判断した場合（ステップＳ４１０：Ｙｅｓ）、ナビゲーション装置３００は、ステップＳ４０８で認識された第一国の交通標識に対応付けられている第二国の交通標識の画像を抽出する（ステップＳ４１１）。そして、ナビゲーション装置３００は、ステップＳ４１１で抽出された第二国の交通標識の画像を、ステップＳ４０６で表示された画像上において、ステップＳ４０８で認識された第一国の交通標識に対応付けて表示して（ステップＳ４１２）、ステップＳ４０２へ処理を戻す。
【００４６】
一方、ステップＳ４０８において、第一国の交通標識を認識しない場合（ステップＳ４０８：Ｎｏ）、ナビゲーション装置３００は、ステップＳ４０９へ処理を進める。
【００４７】
ステップＳ４０９では、ナビゲーション装置３００は、取得部１０６が取得した画像の撮像領域内に存在する第一国の交通標識およびその位置を特定できるか否かを判断する（ステップＳ４０９）。これは、カメラ３１６の撮像領域内に第一国の交通標識が存在するにもかかわらず前方車両や街路樹などの障害物に遮られてその交通標識が認識できない場合が考えられるからである。そのため、ナビゲーション装置３００は、第一国の交通標識ごとの位置情報および高さ情報のデータベースを磁気ディスク３０５などに格納しておき、カメラ３１６で撮像した画像から第一国の交通標識を認識しない場合に、当該データベースを参照して、カメラ３１６の撮像領域内に第一国の交通標識が存在するか否か判断する。なお、ＧＰＳユニット３１４や各種センサ３１５の測位精度によっては、実際の車両の位置とナビゲーション装置３００が認識する位置とに誤差が生じる可能性があるので、画像から交通標識が認識できない場合のみデータベースを参照している。
【００４８】
ステップＳ４０９において、第一国の交通標識を特定した場合（ステップＳ４０９：Ｙｅｓ）、ナビゲーション装置３００は、ステップＳ４０９で特定された第一国の交通標識が、ステップＳ４０１で決定された走行経路上のものか否かを判断する（ステップＳ４１０）。そして、ステップＳ４１０において、走行経路上のものであると判断した場合（ステップＳ４１０：Ｙｅｓ）、特定された第一国の交通標識に対応付けられている第二国の交通標識の画像を抽出する（ステップＳ４１１）。そして、ナビゲーション装置３００は、ステップＳ４１１で抽出された第二国の交通標識の画像を表示して（ステップＳ４１２）、ステップＳ４０２へ処理を戻す。なお、ステップＳ４１２において、第二国の標識を画像上のどこに表示するかについては後述する。
【００４９】
一方、ステップＳ４０９において、第一国の交通標識を特定できない場合（ステップＳ４０９：Ｎｏ）、すなわち、カメラ３１６の撮像領域内に第一国の交通標識が存在しないと判断した場合、および、ステップＳ４１０において、走行経路上の交通標識でないと判断した場合（ステップＳ４１０：Ｎｏ）、ナビゲーション装置３００は、ステップＳ４０２へ処理を戻す。
【００５０】
たとえば、ナビゲーション装置３００は、車両が目的地に到着するまでの間、車両の進行方向の画像を連続して撮像する。そして、ナビゲーション装置３００は、撮像した画像毎に、ステップＳ４０２からステップＳ４１２までの処理をおこなう。これにより、ナビゲーション装置３００は、車両が目的地に到着するまでの間、常に最新の車両の進行方向の画像を表示することができるうえ、撮像された画像の撮像領域に存在する第一国の交通標識に対応付けて、第二国の交通標識の画像を撮像された画像上に表示することができる。
【００５１】
（ナビゲーション装置３００による第二国の交通標識の表示例）
つぎに、ナビゲーション装置３００による第二国の交通標識の表示例について説明する。図５は、ナビゲーション装置３００によって撮像された画像の一例を示す説明図である。図５に示す画像５００は、ナビゲーション装置３００によって撮像された、車両の進行方向の画像である。画像５００には、第一国の交通標識の画像５０２が含まれている。このような画像５００が撮像された場合、ナビゲーション装置３００は、画像５００から、第一国の交通標識を認識し、認識した第一国の交通標識に対応付けられている第二国の交通標識の画像を、画像５００上に表示する。
【００５２】
図６および図７は、ナビゲーション装置３００による第二国の交通標識の表示例を示す説明図である。図６に示す例では、画像５００には、第二国の交通標識の画像である画像５０４が、画像５００上において、第一国の交通標識の画像５０２に重畳されて表示されている。一方、図７に示す例では、画像５００には、第二国の交通標識の画像５０４が、画像５００上において、第一国の交通標識の画像５０２に並べて表示されている。このように、ナビゲーション装置３００は、第一国の交通標識の画像に置き換えて第二国の交通標識の画像を表示してもよく、第一国の交通標識の画像と第二国の交通標識の画像とを並べて同時に表示してもよく、一方を点滅させてもよく、交互に表示してもよい。
【００５３】
（ナビゲーション装置３００による第二国の交通標識の他の表示例）
つぎに、ナビゲーション装置３００による第二国の交通標識の他の表示例について説明する。図８は、ナビゲーション装置３００による第二国の交通標識の他の表示例を示す説明図である。図８に示す例では、画像５００には、第二国の交通標識の画像である画像５０６が、画像５００上に表示されている。ここで、画像５０６が表示されている位置は、画像５０６の元となる第一国の交通標識が設置されている位置である。画像５００の撮像領域には、障害物５１０が存在しているため、画像５００には、この第一国の交通標識が写し出されていない。このため、ナビゲーション装置３００は、画像５００からこの第一国の交通標識を認識することができない。
【００５４】
しかしながら、ナビゲーション装置３００は、画像５００の撮像範囲を特定して、磁気ディスク３０５などに格納されている第一国の交通標識ごとの位置情報および高さ情報のデータベースを参照することで、特定した撮像範囲に存在する第一国の交通標識およびその位置と高さを特定することができる。そして、ナビゲーション装置３００は、特定した第一国の交通標識に対応付けられている第二国の交通標識の画像を抽出し、第一国の交通標識をカメラ３１６で撮像すれば投影されるはずの画像５００上の位置に対応させて表示することができる。なお、上記のデータベースに第一国の交通標識ごとの位置情報しかない場合、ナビゲーション装置３００は、第一国の交通標識が地表面に存在するとして、それをカメラ３１６で撮像すれば投影されるはずの画像５００上の位置に対応する第二国の交通標識の画像を表示してもよい。このようにして、ナビゲーション装置３００は、図８に示す例のように、画像５００には第一国の交通標識が写し出されなかった場合でも、この第一国の交通標識に対応付けられている第二国の交通標識の画像を、画像５００上に表示することができる。
【００５５】
ここで、ナビゲーション装置３００は、画像５０６を、透過させて表示することが好ましい。これにより、ユーザーは、交通標識および障害物の双方を、容易かつ直感的に把握することができる。
【００５６】
（第二国の交通標識の画像を表示するか否かの判断方法の一例）
つぎに、ナビゲーション装置３００による、第二国の交通標識の画像を表示するか否かの判断方法の一例について説明する。図９は、ナビゲーション装置３００による、第二国の交通標識の画像を表示するか否かの判断方法の一例を示す説明図である。
【００５７】
図９は、ナビゲーション装置３００の周辺の地図を模式的に示したものである。図９において、車両９００は、ナビゲーション装置３００を搭載している車両を示す。また、領域９１０は、ナビゲーション装置３００による撮像領域を示す。また、経路９２０は、車両９００の目的地までの経路を示す。
【００５８】
ここで、領域９１０内には、第一国の交通標識９０２、９０４、９０６、および９０８が存在する。ここで、ナビゲーション装置３００は、車両９００にとって必要な交通標識のみを対象として、当該交通標識に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。たとえば、車両９００の経路９２０上に存在する交通標識のみを対象として、当該交通標識に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。図９に示す例では、交差点を左折する経路９２０上に存在するのは、第一国の交通標識９０２のみである。この場合、ナビゲーション装置３００は、経路９２０上に存在する第一国の交通標識９０２のみを対象として、当該第一国の交通標識９０２に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。仮に車両９００の経路が交差点を直進するものであれば、この経路上に存在する第一国の交通標識９０２，９０４，９０６，９０８のそれぞれを対象として、当該第一国の交通標識９０２，９０４，９０６，９０８に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。
【００５９】
以上説明したように、本実施例にかかるナビゲーション装置３００は、撮像した画像において第一国の交通標識を認識し、これに対応付けられている第二国の交通標識の画像を、撮像した画像上において、認識された第一国の交通標識と対応付けて表示する構成とした。これにより、ナビゲーション装置３００は、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識の意味だけでなく、その交通標識が示されている位置までも、容易かつ直感的に把握させることができる。
【００６０】
特に、本実施例にかかるナビゲーション装置３００は、撮像した画像に写し出されている第一国の交通標識の画像に置き換えて、または並べて、第二国の交通標識の画像を表示する構成とした。これにより、ナビゲーション装置３００は、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識の位置を、より容易かつ直感的に把握させることができる。
【００６１】
さらに、本実施例にかかるナビゲーション装置３００は、撮像した画像の撮像領域内に存在する第一国の交通標識を特定し、特定した第一国の交通標識に対応付けられている第二国の交通標識の画像を、撮像した画像上における、特定した位置に対応させて表示する構成とした。これにより、ナビゲーション装置３００は、障害物や撮影の不具合などにより、撮像した画像から第一国の交通標識を認識できなかった場合であっても、この第一国の交通標識に対応付けられている第二国の交通標識の画像を、適切な位置に表示することができる。このため、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識の意味およびその位置を、容易かつ直感的に把握させることができる。
【００６２】
さらに、本実施例にかかるナビゲーション装置３００は、撮像した画像の撮像領域内に存在する第一国の交通標識のうち、経路上にないものについては、この第一国の交通標識に対応付けられている第二国の交通標識の画像を表示しない構成とした。これにより、ナビゲーション装置３００は、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識のうち、ユーザーにとって必要な交通標識を注視させ、この交通標識の意味および位置を、容易かつ直感的に把握させることができる。
【００６３】
なお、本実施例で説明した表示制御方法は、予め用意されたプログラムをコンピュータで実行することにより実現することができる。このプログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また、このプログラムは、インターネットなどのネットワークを介して配布することが可能な伝送媒体であってもよい。
【符号の説明】
【００６４】
１００ 表示制御装置
１０２ 格納部
１０４ 撮像部
１０６ 取得部
１０８ 認識部
１１０ 制御部
１１２ 表示部
１１４ 決定部
１１６ 特定部
３００ ナビゲーション装置
５００ 画像
５０２ 第一国の交通標識の画像
５０４ 第二国の交通標識の画像
【技術分野】
【０００１】
この発明は、表示部による画像の表示を制御する表示制御装置、表示制御方法、プログラム、および記録媒体に関する。ただし、この発明の利用は、上述した表示制御装置、表示制御方法、プログラム、および記録媒体には限られない。
【背景技術】
【０００２】
カメラによって撮像された画像から道路標識を認識し、認識した道路標識に対応付けられている母国の道路標識の画像を表示装置で表示する技術が考案されている（たとえば、下記特許文献１参照。）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−１０９４０４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来技術では、ユーザーに対し、画像から認識した道路標識の意味を認識させることができたとしても、その道路標識が示されている位置までは把握させることができない。
【課題を解決するための手段】
【０００５】
上述した課題を解決し、目的を達成するため、請求項１の発明にかかる表示制御装置は、撮像部によって撮像された画像を取得する取得部と、前記取得部が取得した画像における第一国の交通標識を認識する認識部と、認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得部が取得した画像上において、前記第一国の交通標識と対応付けて表示するように、表示部による表示を制御する制御部と、を備えることを特徴とする。
【０００６】
また、請求項６の発明にかかる表示制御方法は、撮像部によって撮像された画像を取得する取得工程と、前記取得工程で取得された画像における第一国の交通標識を認識する認識工程と、認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得工程で取得された画像上に表示するように、表示部による表示を制御する制御工程と、を含んだことを特徴とする。
【０００７】
また、請求項７の発明にかかるプログラムは、請求項６に記載の表示制御方法をコンピュータに実行させることを特徴とする。
【０００８】
また、請求項８の発明にかかる記録媒体は、請求項７に記載のプログラムをコンピュータで読み取り可能に記録したことを特徴とする。
【図面の簡単な説明】
【０００９】
【図１】表示制御装置１００の機能的構成を示すブロック図である。
【図２】表示制御装置１００による表示制御処理の手順を示すフローチャートである。
【図３】ナビゲーション装置３００のハードウエア構成を示すブロック図である。
【図４】ナビゲーション装置３００による表示制御処理の手順を示すフローチャートである。
【図５】ナビゲーション装置３００によって撮像された画像の一例を示す説明図である。
【図６】ナビゲーション装置３００による第二国の交通標識の表示例を示す説明図である。
【図７】ナビゲーション装置３００による第二国の交通標識の表示例を示す説明図である。
【図８】ナビゲーション装置３００による第二国の交通標識の他の表示例を示す説明図である。
【図９】ナビゲーション装置３００による、第二国の交通標識の画像を表示するか否かの判断方法の一例を示す説明図である。
【発明を実施するための形態】
【００１０】
以下に添付図面を参照して、この発明にかかる表示制御装置、表示制御方法、プログラム、および記録媒体の好適な実施の形態を詳細に説明する。
【００１１】
（実施の形態）
（表示制御装置１００の機能的構成）
まず、本実施の形態にかかる表示制御装置１００の機能的構成について説明する。図１は、表示制御装置１００の機能的構成を示すブロック図である。図１において、表示制御装置１００は、格納部１０２、撮像部１０４、取得部１０６、認識部１０８、制御部１１０、表示部１１２、決定部１１４、特定部１１６を備えて構成されている。
【００１２】
格納部１０２は、第一国の交通標識に対応付けて、第二国の交通標識の画像を格納する。具体的には、格納部１０２には、第一国の交通標識が複数格納されている。そして、格納部１０２には、複数の第一国の交通標識のそれぞれに対して、これと同じ意味を示す第二国の交通標識の画像が、対応付けて格納されている。ここで、第一国とは、表示制御装置１００が認識すべき交通標識の国を示す。たとえば、第一国は、表示制御装置１００が使用される国である。一方、第二国とは、第一国とは異なる国であって、表示部１１２に表示させるべき交通標識の国を示す。たとえば、第二国は、表示制御装置１００を使用するユーザーの母国である。第一国および第二国は、予め決定されていてもよく、予め用意されている複数の国の中から、ユーザーがそれぞれを選択的に決定してもよい。
【００１３】
撮像部１０４は、撮像対象の画像を撮像する。たとえば、表示制御装置１００が四輪車、二輪車、自転車などの車両に搭載されている場合、撮像部１０４は、車両の進行方向の画像を撮像する。他の例として、表示制御装置１００をユーザーが保持している場合、撮像部１０４は、ユーザーの進行方向の画像を撮像する。撮像部１０４は、静止画像を撮像するものであってもよく、動画像を撮像するものであってもよい。取得部１０６は、撮像部１０４によって撮像された画像を取得する。本実施の形態では、撮像部１０４は、表示制御装置１００に設けられている。これに限らず、撮像部１０４は、表示制御装置１００の外部に設けられていてもよい。この場合、取得部１０６は、表示制御装置１００の外部に設けられている撮像部１０４から、無線通信、有線通信、または記録媒体を介して、画像を取得してもよい。
【００１４】
認識部１０８は、取得部１０６が取得した画像における第一国の交通標識を認識する。たとえば、認識部１０８は、取得部１０６が取得した画像に対して、既知のエッジ抽出処理、パターンマッチング処理などをおこなう。これにより、認識部１０８は、取得部１０６が取得した画像における第一国の交通標識を認識する。
【００１５】
制御部１１０は、認識部１０８によって認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部１０２から抽出する。そして、制御部１１０は、抽出した第二国の交通標識の画像を、取得部１０６が取得した画像上において、認識部１０８によって認識された第一国の交通標識と対応付けて表示するように、表示部１１２による表示を制御する。
【００１６】
たとえば、制御部１１０は、取得部１０６が取得した画像における、第一国の交通標識の画像に重畳して、第二国の交通標識の画像を表示させる。他の例として、取得部１０６は、取得部１０６が取得した画像における、第一国の交通標識の画像に並べて、第二国の交通標識の画像を表示させる。これに限らず、制御部１１０は、第一国の交通標識の画像が表示されていた位置と、表示された第二国の交通標識の画像との対応付けが容易に認識できるような形態であれば、上記以外の形態で、画像および第二国の交通標識の画像を表示部１１２に表示させてもよい。
【００１７】
本実施の形態では、格納部１０２は、表示制御装置１００に設けられている。これに限らず、格納部１０２は、表示制御装置１００の外部に設けられていてもよい。この場合、制御部１１０は、表示制御装置１００の外部に設けられている格納部１０２から、無線通信、有線通信、または記録媒体を介して、第二国の交通標識の画像を抽出してもよい。
【００１８】
また、本実施の形態では、表示部１１２は、表示制御装置１００に設けられている。これに限らず、表示部１１２は、表示制御装置１００の外部に設けられていてもよい。この場合、制御部１１０は、表示制御装置１００の外部に設けられている表示部１１２に対し、無線通信または有線通信を介して、画像および第二国の交通標識の画像を表示させてもよい。
【００１９】
決定部１１４は、目的地までの経路を決定する。たとえば、決定部１１４は、表示制御装置１００が有する経路探索機能を利用して、目的地までの走行経路を探索することによって、目的地までの経路を決定する。他の例として、決定部１１４は、目的地までの経路が示された走行経路情報を、表示制御装置１００の内部または外部から取得することによって、目的地までの経路を決定してもよい。
【００２０】
取得部１０６は、決定部１１４によって決定された経路に関する経路情報をさらに取得してもよい。この場合、制御部１１０は、取得部１０６が取得した経路情報に基づいて、取得部１０６が取得した画像における第一国の交通標識のうち、経路上にないものについては、この第一国の交通標識に対応付けられている第二国の交通標識の画像を表示しないように、表示部１１２による表示を制御してもよい。
【００２１】
特定部１１６は、取得部１０６が取得した画像の撮像領域内に存在する第一国の交通標識およびその位置を特定する。たとえば、表示制御装置１００内部または外部のデータベースに対し、第一国の交通標識ごとにその位置情報を対応付けて格納しておく。特定部１１６は、表示制御装置１００の現在位置、撮像部１０４の撮像方向、および撮像部１０４の画角などに基づいて、取得部１０６が取得した画像の撮像領域を特定する。
【００２２】
そして、特定部１１６は、上記データベースを参照することにより、撮像領域内に存在する第一国の交通標識およびその位置を特定する。制御部１１０は、特定部１１６によって特定された第一国の交通標識に対応付けられている第二国の交通標識の画像を格納部１０２から抽出し、抽出した第二国の交通標識の画像を、取得部１０６が取得した画像上において、特定部１１６によって特定された位置に対応させて表示するように、表示部１１２による表示を制御してもよい。
【００２３】
（表示制御装置１００による表示制御処理の手順）
つぎに、表示制御装置１００による表示制御処理の手順について説明する。図２は、本実施の形態にかかる表示制御装置１００による表示制御処理の手順を示すフローチャートである。
【００２４】
まず、撮像部１０４が、画像を撮像する（ステップＳ２０２）。つぎに、取得部１０６が、ステップＳ２０２で撮像された画像を取得する（ステップＳ２０４）。つぎに、認識部１０８が、ステップＳ２０４で取得された画像における第一国の交通標識を認識する（ステップＳ２０６）。そして、制御部１１０が、ステップＳ２０６で認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部１０２から抽出する（ステップＳ２０８）。さらに、制御部１１０が、ステップＳ２０８で抽出した第二国の交通標識の画像を、ステップＳ２０２で撮像された画像上において、ステップＳ２０６で認識された第一国の交通標識と対応付けて表示するように、表示部１１２による表示を制御し（ステップＳ２１０）、表示制御装置１００は、一連の表示制御処理を終了する。
【００２５】
以上説明したように、本実施の形態にかかる表示制御装置１００は、撮像部１０４によって撮像された画像において第一国の交通標識を認識し、これに対応付けられている第二国の交通標識の画像を、撮像部１０４によって撮像された画像上において、認識された第一国の交通標識に対応付けて表示する構成とした。これにより、表示制御装置１００は、ユーザーに対し、撮像部１０４が撮像した画像の撮像領域内に存在する交通標識の意味だけでなく、その交通標識が示されている位置までも、容易かつ直感的に把握させることができる。
【実施例】
【００２６】
以下に添付図面を参照して、この発明にかかる表示制御装置、表示制御方法、プログラム、および記録媒体の好適な実施例を詳細に説明する。本実施例では、四輪車、二輪車、自転車などの車両に搭載され、またはユーザーに保持され、現在位置検出処理、経路探索処理、経路誘導処理などの各種処理をおこなうナビゲーション装置３００によって、本発明にかかる表示制御装置、表示制御方法、プログラム、および記録媒体を実施した場合について説明する。
【００２７】
（ナビゲーション装置３００のハードウエア構成）
まず、ナビゲーション装置３００のハードウエア構成について説明する。図３は、ナビゲーション装置３００のハードウエア構成を示すブロック図である。
【００２８】
図３において、ナビゲーション装置３００は、ＣＰＵ３０１、ＲＯＭ３０２、ＲＡＭ３０３、磁気ディスクドライブ３０４、磁気ディスク３０５、光ディスクドライブ３０６、光ディスク３０７、音声Ｉ／Ｆ（インターフェース）３０８、スピーカ３０９、入力デバイス３１０、映像Ｉ／Ｆ３１１、ディスプレイ３１２、通信Ｉ／Ｆ３１３、ＧＰＳユニット３１４、各種センサ３１５、およびカメラ３１６を備えている。これら各構成部３０１〜３１６はバス３２０によってそれぞれ接続されている。
【００２９】
ＣＰＵ３０１は、ナビゲーション装置３００の全体の制御を司る。ＲＯＭ３０２は、ナビゲーション装置３００が備える各種機能を実現するためのブートプログラム、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）プログラム、ナビゲーションプログラムなどの各種プログラムを記録している。ＲＡＭ３０３は、ＣＰＵ３０１のワークエリアとして使用される。
【００３０】
ＣＰＵ３０１は、ＲＯＭ３０２、磁気ディスク３０５、光ディスク３０７などに記録されているナビゲーションプログラムを実行することにより、現在位置検出処理、経路探索処理、経路誘導処理などの各種処理をおこなう。たとえば、ＣＰＵ３０１は、ＧＰＳユニット３１４および各種センサ３１５の出力情報に基づいて、車両の現在位置（ナビゲーション装置３００の現在位置）を検出する。また、ＣＰＵ３０１は、ナビゲーションプログラムに含まれた地図データなどを利用して、出発地から目的地までの走行経路を探索する。また、ＣＰＵ３０１は、探索した走行経路を示す経路情報や、探索した走行経路を案内する案内情報などを、映像Ｉ／Ｆ３１１を介してディスプレイ３１２に表示させる。また、ＣＰＵ３０１は、探索された走行経路を案内する案内情報などを、音声Ｉ／Ｆ３０８を介してスピーカ３０９から音声出力させる。
【００３１】
磁気ディスクドライブ３０４は、ＣＰＵ３０１の制御にしたがって磁気ディスク３０５に対するデータの読み取り／書き込みを制御する。磁気ディスク３０５は、磁気ディスクドライブ３０４の制御で書き込まれたデータを記録する。磁気ディスク３０５としては、たとえば、ＨＤ（ハードディスク）やＦＤ（フレキシブルディスク）を用いることができる。
【００３２】
光ディスクドライブ３０６は、ＣＰＵ３０１の制御にしたがって光ディスク３０７に対するデータの読み取り／書き込みを制御する。光ディスク３０７は、光ディスクドライブ３０６の制御にしたがってデータが読み出される着脱自在な記録媒体である。光ディスク３０７は、書き込み可能な記録媒体を利用することもできる。また、この着脱自在な記録媒体として、光ディスク３０７のほか、ＭＯ、メモリカードなどであってもよい。
【００３３】
音声Ｉ／Ｆ３０８は、音声出力用のスピーカ３０９に接続される。スピーカ３０９は、音声を出力する。入力デバイス３１０は、文字、数値、各種指示などの入力のための複数のキーを備えたリモコン、キーボード、マウス、タッチパネルなどが挙げられる。入力デバイス３１０は、リモコン、キーボード、マウス、タッチパネルのうち、いずれか一つの形態によって実現してもよいし、複数の形態によって実現してもよい。
【００３４】
映像Ｉ／Ｆ３１１は、ディスプレイ３１２に接続される。映像Ｉ／Ｆ３１１は、具体的には、たとえば、ディスプレイ３１２全体の制御をおこなうグラフィックコントローラと、即時表示可能な画像情報を一時的に記録するＶＲＡＭ（Ｖｉｄｅｏ ＲＡＭ）などのバッファメモリと、グラフィックコントローラから出力される画像データに基づいてディスプレイ３１２を制御する制御ＩＣなどによって構成される。
【００３５】
ディスプレイ３１２は、たとえば、液晶ディスプレイ、有機ＥＬディスプレイなどを採用することができる。ディスプレイ３１２は、たとえば、車両のダッシュボード付近に設置される。ディスプレイ３１２は、車両のダッシュボード付近のほか、車両の後部座席周辺などに設置するなどして、車両内に複数設置してもよい。
【００３６】
通信Ｉ／Ｆ３１３は、外部（通信ネットワーク、情報処理装置、記録媒体など）と有線または無線によって接続され、接続された外部に対するデータの入出力を制御する。たとえば、カメラ３１６またはディスプレイ３１２が外部に設けられている場合、通信Ｉ／Ｆ３１３は、外部のカメラ３１６またはディスプレイ３１２と接続され、接続された外部のカメラ３１６またはディスプレイ３１２に対するデータの入出力を制御する。
【００３７】
ＧＰＳユニット３１４は、ＧＰＳ衛星からの電波を受信し、車両の現在位置を示す情報を出力する。ＧＰＳユニット３１４の出力情報は、後述する各種センサ３１５の出力値とともに、ＣＰＵ３０１による車両の現在位置の算出に際して利用される。現在位置を示す情報は、たとえば緯度・経度、高度などの、地図データ上の１点を特定する情報である。
【００３８】
各種センサ３１５は、車速センサ、加速度センサ、角速度センサなどの、車両の位置や挙動を判断することが可能な情報を出力する。各種センサ３１５の出力値は、ＣＰＵ３０１による車両の現在位置の算出や、速度や方位の変化量の測定などに用いられる。
【００３９】
カメラ３１６は、撮像対象の画像を撮像する。カメラ３１６は、ＣＣＤ、ＣＭＯＳなどの撮像素子によって撮像対象からの光を受光し、受光した光から撮像対象の画像データを生成する。
【００４０】
本実施例のナビゲーション装置３００は、ＲＯＭ３０２、磁気ディスク３０５、光ディスク３０７などの記録媒体によって、図１に示した格納部１０２の機能を実現することができる。また、本実施例のナビゲーション装置３００は、カメラ３１６によって、図１に示した撮像部１０４の機能を実現することができる。また、本実施例のナビゲーション装置３００は、ＲＯＭ３０２、磁気ディスク３０５、光ディスク３０７などに記録されている充電制御プログラムをＣＰＵ３０１が実行することによって、図１に示した取得部１０６、認識部１０８、および制御部１１０の機能を実現することができる。また、本実施例のナビゲーション装置３００は、ディスプレイ３１２によって、図１に示した表示部１１２の機能を実現することができる。
【００４１】
（ナビゲーション装置３００による表示制御処理の手順）
つぎに、ナビゲーション装置３００による表示制御処理の手順について説明する。図４は、ナビゲーション装置３００による表示制御処理の手順を示すフローチャートである。
【００４２】
まず、ナビゲーション装置３００は、目的地までの車両の走行経路を決定する（ステップＳ４０１）。たとえば、ナビゲーション装置３００は、地図情報、ユーザによって入力された出発地、経由地、目的地、各種条件（たとえば、時間優先／距離優先、一般道路優先／高速道路優先、など）に基づいて、目的地までの車両の走行経路を探索する。
【００４３】
つぎに、ナビゲーション装置３００は、車両の進行方向の画像を撮像する（ステップＳ４０２）。つぎに、ナビゲーション装置３００は、ステップＳ４０２で撮像された画像を取得する（ステップＳ４０４）。つぎに、ナビゲーション装置３００は、ステップＳ４０４で取得された画像を表示する（ステップＳ４０６）。
【００４４】
つぎに、ナビゲーション装置３００は、ステップＳ４０４で取得された画像から第一国の交通標識を認識する（ステップＳ４０８）。ステップＳ４０８において、第一国の交通標識を認識した場合（ステップＳ４０８：Ｙｅｓ）、ステップＳ４０８で認識された第一国の交通標識が、ステップＳ４０１で決定された走行経路上のものか否かを判断する（ステップＳ４１０）。
【００４５】
ステップＳ４１０において、走行経路上のものであると判断した場合（ステップＳ４１０：Ｙｅｓ）、ナビゲーション装置３００は、ステップＳ４０８で認識された第一国の交通標識に対応付けられている第二国の交通標識の画像を抽出する（ステップＳ４１１）。そして、ナビゲーション装置３００は、ステップＳ４１１で抽出された第二国の交通標識の画像を、ステップＳ４０６で表示された画像上において、ステップＳ４０８で認識された第一国の交通標識に対応付けて表示して（ステップＳ４１２）、ステップＳ４０２へ処理を戻す。
【００４６】
一方、ステップＳ４０８において、第一国の交通標識を認識しない場合（ステップＳ４０８：Ｎｏ）、ナビゲーション装置３００は、ステップＳ４０９へ処理を進める。
【００４７】
ステップＳ４０９では、ナビゲーション装置３００は、取得部１０６が取得した画像の撮像領域内に存在する第一国の交通標識およびその位置を特定できるか否かを判断する（ステップＳ４０９）。これは、カメラ３１６の撮像領域内に第一国の交通標識が存在するにもかかわらず前方車両や街路樹などの障害物に遮られてその交通標識が認識できない場合が考えられるからである。そのため、ナビゲーション装置３００は、第一国の交通標識ごとの位置情報および高さ情報のデータベースを磁気ディスク３０５などに格納しておき、カメラ３１６で撮像した画像から第一国の交通標識を認識しない場合に、当該データベースを参照して、カメラ３１６の撮像領域内に第一国の交通標識が存在するか否か判断する。なお、ＧＰＳユニット３１４や各種センサ３１５の測位精度によっては、実際の車両の位置とナビゲーション装置３００が認識する位置とに誤差が生じる可能性があるので、画像から交通標識が認識できない場合のみデータベースを参照している。
【００４８】
ステップＳ４０９において、第一国の交通標識を特定した場合（ステップＳ４０９：Ｙｅｓ）、ナビゲーション装置３００は、ステップＳ４０９で特定された第一国の交通標識が、ステップＳ４０１で決定された走行経路上のものか否かを判断する（ステップＳ４１０）。そして、ステップＳ４１０において、走行経路上のものであると判断した場合（ステップＳ４１０：Ｙｅｓ）、特定された第一国の交通標識に対応付けられている第二国の交通標識の画像を抽出する（ステップＳ４１１）。そして、ナビゲーション装置３００は、ステップＳ４１１で抽出された第二国の交通標識の画像を表示して（ステップＳ４１２）、ステップＳ４０２へ処理を戻す。なお、ステップＳ４１２において、第二国の標識を画像上のどこに表示するかについては後述する。
【００４９】
一方、ステップＳ４０９において、第一国の交通標識を特定できない場合（ステップＳ４０９：Ｎｏ）、すなわち、カメラ３１６の撮像領域内に第一国の交通標識が存在しないと判断した場合、および、ステップＳ４１０において、走行経路上の交通標識でないと判断した場合（ステップＳ４１０：Ｎｏ）、ナビゲーション装置３００は、ステップＳ４０２へ処理を戻す。
【００５０】
たとえば、ナビゲーション装置３００は、車両が目的地に到着するまでの間、車両の進行方向の画像を連続して撮像する。そして、ナビゲーション装置３００は、撮像した画像毎に、ステップＳ４０２からステップＳ４１２までの処理をおこなう。これにより、ナビゲーション装置３００は、車両が目的地に到着するまでの間、常に最新の車両の進行方向の画像を表示することができるうえ、撮像された画像の撮像領域に存在する第一国の交通標識に対応付けて、第二国の交通標識の画像を撮像された画像上に表示することができる。
【００５１】
（ナビゲーション装置３００による第二国の交通標識の表示例）
つぎに、ナビゲーション装置３００による第二国の交通標識の表示例について説明する。図５は、ナビゲーション装置３００によって撮像された画像の一例を示す説明図である。図５に示す画像５００は、ナビゲーション装置３００によって撮像された、車両の進行方向の画像である。画像５００には、第一国の交通標識の画像５０２が含まれている。このような画像５００が撮像された場合、ナビゲーション装置３００は、画像５００から、第一国の交通標識を認識し、認識した第一国の交通標識に対応付けられている第二国の交通標識の画像を、画像５００上に表示する。
【００５２】
図６および図７は、ナビゲーション装置３００による第二国の交通標識の表示例を示す説明図である。図６に示す例では、画像５００には、第二国の交通標識の画像である画像５０４が、画像５００上において、第一国の交通標識の画像５０２に重畳されて表示されている。一方、図７に示す例では、画像５００には、第二国の交通標識の画像５０４が、画像５００上において、第一国の交通標識の画像５０２に並べて表示されている。このように、ナビゲーション装置３００は、第一国の交通標識の画像に置き換えて第二国の交通標識の画像を表示してもよく、第一国の交通標識の画像と第二国の交通標識の画像とを並べて同時に表示してもよく、一方を点滅させてもよく、交互に表示してもよい。
【００５３】
（ナビゲーション装置３００による第二国の交通標識の他の表示例）
つぎに、ナビゲーション装置３００による第二国の交通標識の他の表示例について説明する。図８は、ナビゲーション装置３００による第二国の交通標識の他の表示例を示す説明図である。図８に示す例では、画像５００には、第二国の交通標識の画像である画像５０６が、画像５００上に表示されている。ここで、画像５０６が表示されている位置は、画像５０６の元となる第一国の交通標識が設置されている位置である。画像５００の撮像領域には、障害物５１０が存在しているため、画像５００には、この第一国の交通標識が写し出されていない。このため、ナビゲーション装置３００は、画像５００からこの第一国の交通標識を認識することができない。
【００５４】
しかしながら、ナビゲーション装置３００は、画像５００の撮像範囲を特定して、磁気ディスク３０５などに格納されている第一国の交通標識ごとの位置情報および高さ情報のデータベースを参照することで、特定した撮像範囲に存在する第一国の交通標識およびその位置と高さを特定することができる。そして、ナビゲーション装置３００は、特定した第一国の交通標識に対応付けられている第二国の交通標識の画像を抽出し、第一国の交通標識をカメラ３１６で撮像すれば投影されるはずの画像５００上の位置に対応させて表示することができる。なお、上記のデータベースに第一国の交通標識ごとの位置情報しかない場合、ナビゲーション装置３００は、第一国の交通標識が地表面に存在するとして、それをカメラ３１６で撮像すれば投影されるはずの画像５００上の位置に対応する第二国の交通標識の画像を表示してもよい。このようにして、ナビゲーション装置３００は、図８に示す例のように、画像５００には第一国の交通標識が写し出されなかった場合でも、この第一国の交通標識に対応付けられている第二国の交通標識の画像を、画像５００上に表示することができる。
【００５５】
ここで、ナビゲーション装置３００は、画像５０６を、透過させて表示することが好ましい。これにより、ユーザーは、交通標識および障害物の双方を、容易かつ直感的に把握することができる。
【００５６】
（第二国の交通標識の画像を表示するか否かの判断方法の一例）
つぎに、ナビゲーション装置３００による、第二国の交通標識の画像を表示するか否かの判断方法の一例について説明する。図９は、ナビゲーション装置３００による、第二国の交通標識の画像を表示するか否かの判断方法の一例を示す説明図である。
【００５７】
図９は、ナビゲーション装置３００の周辺の地図を模式的に示したものである。図９において、車両９００は、ナビゲーション装置３００を搭載している車両を示す。また、領域９１０は、ナビゲーション装置３００による撮像領域を示す。また、経路９２０は、車両９００の目的地までの経路を示す。
【００５８】
ここで、領域９１０内には、第一国の交通標識９０２、９０４、９０６、および９０８が存在する。ここで、ナビゲーション装置３００は、車両９００にとって必要な交通標識のみを対象として、当該交通標識に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。たとえば、車両９００の経路９２０上に存在する交通標識のみを対象として、当該交通標識に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。図９に示す例では、交差点を左折する経路９２０上に存在するのは、第一国の交通標識９０２のみである。この場合、ナビゲーション装置３００は、経路９２０上に存在する第一国の交通標識９０２のみを対象として、当該第一国の交通標識９０２に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。仮に車両９００の経路が交差点を直進するものであれば、この経路上に存在する第一国の交通標識９０２，９０４，９０６，９０８のそれぞれを対象として、当該第一国の交通標識９０２，９０４，９０６，９０８に対応付けられている第二国の交通標識の画像を、ナビゲーション装置３００が撮像した画像上に表示してもよい。
【００５９】
以上説明したように、本実施例にかかるナビゲーション装置３００は、撮像した画像において第一国の交通標識を認識し、これに対応付けられている第二国の交通標識の画像を、撮像した画像上において、認識された第一国の交通標識と対応付けて表示する構成とした。これにより、ナビゲーション装置３００は、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識の意味だけでなく、その交通標識が示されている位置までも、容易かつ直感的に把握させることができる。
【００６０】
特に、本実施例にかかるナビゲーション装置３００は、撮像した画像に写し出されている第一国の交通標識の画像に置き換えて、または並べて、第二国の交通標識の画像を表示する構成とした。これにより、ナビゲーション装置３００は、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識の位置を、より容易かつ直感的に把握させることができる。
【００６１】
さらに、本実施例にかかるナビゲーション装置３００は、撮像した画像の撮像領域内に存在する第一国の交通標識を特定し、特定した第一国の交通標識に対応付けられている第二国の交通標識の画像を、撮像した画像上における、特定した位置に対応させて表示する構成とした。これにより、ナビゲーション装置３００は、障害物や撮影の不具合などにより、撮像した画像から第一国の交通標識を認識できなかった場合であっても、この第一国の交通標識に対応付けられている第二国の交通標識の画像を、適切な位置に表示することができる。このため、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識の意味およびその位置を、容易かつ直感的に把握させることができる。
【００６２】
さらに、本実施例にかかるナビゲーション装置３００は、撮像した画像の撮像領域内に存在する第一国の交通標識のうち、経路上にないものについては、この第一国の交通標識に対応付けられている第二国の交通標識の画像を表示しない構成とした。これにより、ナビゲーション装置３００は、ユーザーに対し、撮像した画像の撮像領域内に存在する交通標識のうち、ユーザーにとって必要な交通標識を注視させ、この交通標識の意味および位置を、容易かつ直感的に把握させることができる。
【００６３】
なお、本実施例で説明した表示制御方法は、予め用意されたプログラムをコンピュータで実行することにより実現することができる。このプログラムは、ハードディスク、フレキシブルディスク、ＣＤ−ＲＯＭ、ＭＯ、ＤＶＤなどのコンピュータで読み取り可能な記録媒体に記録され、コンピュータによって記録媒体から読み出されることによって実行される。また、このプログラムは、インターネットなどのネットワークを介して配布することが可能な伝送媒体であってもよい。
【符号の説明】
【００６４】
１００ 表示制御装置
１０２ 格納部
１０４ 撮像部
１０６ 取得部
１０８ 認識部
１１０ 制御部
１１２ 表示部
１１４ 決定部
１１６ 特定部
３００ ナビゲーション装置
５００ 画像
５０２ 第一国の交通標識の画像
５０４ 第二国の交通標識の画像
【特許請求の範囲】
【請求項１】
撮像部によって撮像された画像を取得する取得部と、
前記取得部が取得した画像における第一国の交通標識を認識する認識部と、
認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得部が取得した画像上において、前記第一国の交通標識と対応付けて表示するように、表示部による表示を制御する制御部と、
を備えることを特徴とする表示制御装置。
【請求項２】
前記制御部は、
前記取得部が取得した画像における、前記第一国の交通標識の画像に重畳して、前記第二国の交通標識の画像を表示させることを特徴とする請求項１に記載の表示制御装置。
【請求項３】
前記制御部は、
前記取得部が取得した画像における、前記第一国の交通標識の画像に並べて、前記第二国の交通標識の画像を表示させることを特徴とする請求項１に記載の表示制御装置。
【請求項４】
前記撮像部の撮像領域内に存在する前記第一国の交通標識を前記認識部が認識しない場合、前記第一国の交通標識およびその位置を特定する特定部をさらに備え、
前記制御部は、
前記特定部によって特定された第一国の交通標識に対応付けられている第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得部が取得した画像上における、前記特定部が特定した位置に対応させて表示するように、表示部による表示を制御することを特徴とする請求項１〜３のいずれか一つに記載の表示制御装置。
【請求項５】
前記取得部は、
目的地までの経路に関する経路情報をさらに取得し、
前記制御部は、
前記取得部が取得した画像における第一国の交通標識のうち、前記経路上にないものについては、この第一国の標識に対応付けられている第二国の交通標識の画像を表示しないように、表示部による表示を制御することを特徴とする請求項１〜４のいずれか一つに記載の表示制御装置。
【請求項６】
撮像部によって撮像された画像を取得する取得工程と、
前記取得工程で取得された画像における第一国の交通標識を認識する認識工程と、
認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得工程で取得された画像上に表示するように、表示部による表示を制御する制御工程と、
を含んだことを特徴とする表示制御方法。
【請求項７】
請求項６に記載の表示制御方法をコンピュータに実行させることを特徴とするプログラム。
【請求項８】
請求項７に記載のプログラムを記録したことを特徴とするコンピュータに読み取り可能な記録媒体。
【請求項１】
撮像部によって撮像された画像を取得する取得部と、
前記取得部が取得した画像における第一国の交通標識を認識する認識部と、
認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得部が取得した画像上において、前記第一国の交通標識と対応付けて表示するように、表示部による表示を制御する制御部と、
を備えることを特徴とする表示制御装置。
【請求項２】
前記制御部は、
前記取得部が取得した画像における、前記第一国の交通標識の画像に重畳して、前記第二国の交通標識の画像を表示させることを特徴とする請求項１に記載の表示制御装置。
【請求項３】
前記制御部は、
前記取得部が取得した画像における、前記第一国の交通標識の画像に並べて、前記第二国の交通標識の画像を表示させることを特徴とする請求項１に記載の表示制御装置。
【請求項４】
前記撮像部の撮像領域内に存在する前記第一国の交通標識を前記認識部が認識しない場合、前記第一国の交通標識およびその位置を特定する特定部をさらに備え、
前記制御部は、
前記特定部によって特定された第一国の交通標識に対応付けられている第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得部が取得した画像上における、前記特定部が特定した位置に対応させて表示するように、表示部による表示を制御することを特徴とする請求項１〜３のいずれか一つに記載の表示制御装置。
【請求項５】
前記取得部は、
目的地までの経路に関する経路情報をさらに取得し、
前記制御部は、
前記取得部が取得した画像における第一国の交通標識のうち、前記経路上にないものについては、この第一国の標識に対応付けられている第二国の交通標識の画像を表示しないように、表示部による表示を制御することを特徴とする請求項１〜４のいずれか一つに記載の表示制御装置。
【請求項６】
撮像部によって撮像された画像を取得する取得工程と、
前記取得工程で取得された画像における第一国の交通標識を認識する認識工程と、
認識された第一国の交通標識に対応付けられている、第二国の交通標識の画像を格納部から抽出し、抽出した第二国の交通標識の画像を、前記取得工程で取得された画像上に表示するように、表示部による表示を制御する制御工程と、
を含んだことを特徴とする表示制御方法。
【請求項７】
請求項６に記載の表示制御方法をコンピュータに実行させることを特徴とするプログラム。
【請求項８】
請求項７に記載のプログラムを記録したことを特徴とするコンピュータに読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１１−１７９９２０（Ｐ２０１１−１７９９２０Ａ）
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願番号】特願２０１０−４３４０２（Ｐ２０１０−４３４０２）
【出願日】平成２２年２月２６日（２０１０．２．２６）
【出願人】（０００００５０１６）パイオニア株式会社 (3,620)
【Ｆターム（参考）】
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願日】平成２２年２月２６日（２０１０．２．２６）
【出願人】（０００００５０１６）パイオニア株式会社 (3,620)
【Ｆターム（参考）】
[ Back to top ]