端末装置、端末装置によって実行される画像表示方法及び画像表示プログラム
【課題】カメラの撮影方向と車両の進行方向との関係に基づいて、実写案内画像及び地図案内画像のいずれを優先して表示させるかを適切に切り替えることが可能な端末装置を提供する。
【解決手段】移動体に取り付けられる端末装置は、撮影手段と、撮影手段の撮影方向と移動体の進行方向との関係に基づいて、撮影手段によって撮影された撮影画像を用いた実写案内画像と、地図情報を用いた地図案内画像とのいずれを優先して表示させるかの判定を行う判定手段と、判定手段による判定に基づいて、実写案内画像及び地図案内画像のうちの一方の画像を表示させる制御を行う表示制御手段と、を備える。これにより、実写案内画像及び地図案内画像のいずれを優先して表示させるかを適切に切り替えることができる。
【解決手段】移動体に取り付けられる端末装置は、撮影手段と、撮影手段の撮影方向と移動体の進行方向との関係に基づいて、撮影手段によって撮影された撮影画像を用いた実写案内画像と、地図情報を用いた地図案内画像とのいずれを優先して表示させるかの判定を行う判定手段と、判定手段による判定に基づいて、実写案内画像及び地図案内画像のうちの一方の画像を表示させる制御を行う表示制御手段と、を備える。これにより、実写案内画像及び地図案内画像のいずれを優先して表示させるかを適切に切り替えることができる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、移動体に搭載され、当該移動体の外部を撮影する撮影手段を有する端末装置に関する。
【背景技術】
【０００２】
この種の技術が、例えば特許文献１に記載されている。特許文献１には、車載カメラによる撮影画像内においてリアバンパ等が本来観測されるべき位置をテンプレート画像として予め格納しておき、車載カメラによる実際の撮影画像内におけるリアバンパ等の位置とテンプレート画像内におけるリアバンパ等の位置との間に所定値以上のずれが生じている場合に、車載カメラの光軸ずれが生じていると判定する技術が記載されている。また、特許文献１には、光軸ずれが生じている場合に、ずれ量に応じてアクチュエータを駆動させることでカメラ位置を自動調整することが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１６５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来から、「スマートフォン」と呼ばれる高機能携帯電話などの携帯型端末装置を、「クレードル」と呼ばれる保持装置を介して車両に設置し、利用する技術が提案されている。また、スマートフォンのカメラによる実写画像を用いた「ＡＲナビ（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）」などと呼ばれるナビゲーションが提案されている。ＡＲナビは、カメラによる実写画像の上に、目的地までの方向や距離などの経路案内のための画像を重ねて表示するものである。そのため、ＡＲナビを利用する場合には、カメラの撮影方向が車両の進行方向に一致していることが望ましいと言える。
【０００５】
しかしながら、ユーザは、車両内の任意の位置にクレードルを設置すると共に、任意の向きにてスマートフォンを設置する傾向にある。したがって、当初の設置状態においては、カメラの撮影方向が車両の進行方向に一致しない傾向にある。よって、このような設置が行われた後に、カメラの撮影方向が車両の進行方向に一致するように調整することが望ましいと言える。
【０００６】
ここで、上記した特許文献１に記載された技術では、予めテンプレート画像を用意して処理を行っていたため、当該技術を、スマートフォン及びクレードルを有するシステムに好適に適用することが困難であった。というのは、上記したようにユーザは任意の位置にクレードルを設置する傾向にあるため、望ましいテンプレート画像を予め用意しておくことが困難であるからである。なお、特許文献１には、ユーザが手動で撮影方向の調整を行う場合に、当該調整を補助するような技術については記載されていない。
【０００７】
本発明が解決しようとする課題としては、上記のものが一例として挙げられる。本発明は、適切な調整用画像を表示することで、ユーザがカメラの撮影方向の調整を容易に行うことが可能な端末装置、端末装置によって実行される画像表示方法及び画像表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
請求項１に記載の発明では、移動体に取り付け可能な端末装置は、前記移動体に取り付けられた状態で、当該移動体の進行方向前方を撮影可能な撮影手段と、前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段と、前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段と、を備え、前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる。
【０００９】
請求項５に記載の発明では、移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段を有する端末装置によって実行される画像表示方法は、前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内工程と、前記移動体に取り付けられた後であって、かつ前記経路案内工程による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御工程と、を備え、前記表示制御工程は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる。
【００１０】
請求項６に記載の発明では、移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段と、コンピュータとを有する端末装置によって実行される画像表示プログラムは、前記コンピュータを、前記撮影手段によって撮影された画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段、前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段、として機能させ、前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる。
【図面の簡単な説明】
【００１１】
【図１】端末保持装置に保持された状態にある端末装置を示す。
【図２】端末ホルダを回転させた状態の例を示す。
【図３】端末装置の概略構成を示す。
【図４】第１の例に係る調整用画像例を示す。
【図５】第１の例に係る調整用画面例を示す。
【図６】第２の例に係る調整用画像例及び調整用画面例を示す。
【図７】第１実施例における全体処理を示すフローチャートである。
【図８】第１実施例における調整用画面表示処理を示すフローチャートである。
【図９】第２実施例における全体処理を示すフローチャートである。
【発明を実施するための形態】
【００１２】
本発明の１つの観点では、移動体に取り付けられた保持装置に対して脱着可能な端末装置は、撮影手段と、前記端末装置が前記保持装置に取り付けられた状態において前記撮影手段によって撮影された撮影画像を記憶する記憶手段と、前記記憶手段に記憶された前記撮影画像に基づいて、前記撮影手段の撮影方向を調整するための調整用画像を生成する調整用画像生成手段と、前記調整用画像生成手段によって生成された前記調整用画像を、前記撮影手段によって撮影された前記撮影画像と相互に対比可能な態様で表示する表示制御手段と、を備える。
【００１３】
上記の端末装置は、脱着可能な保持装置を介して移動体に取り付けられ、カメラなどの撮影手段によって移動体の前方を撮影する。記憶手段は、端末装置が保持装置に取り付けられた状態において撮影された撮影画像を記憶する。調整用画像生成手段は、記憶手段に記憶された撮影画像に基づいて、撮影手段の撮影方向を調整するための調整用画像を生成する。つまり、調整用画像生成手段は、ユーザによる撮影方向の調整をアシストするための画像を生成する。表示制御手段は、こうして生成された調整用画像を、撮影手段による実際の撮影画像と相互に対比可能な態様で表示する。
【００１４】
このように、上記の端末装置は、端末装置が保持装置に取り付けられた際に撮影方向の調整が一度行われれば、次に端末装置が保持装置に取り付けられた際には、当該調整が行われた際の撮影画像により生成された調整用画像を現在の撮影画像と相互に対比可能な態様で表示する。そのため、ユーザは、調整用画像が表示された画面を参照することで、容易に、撮影手段の撮影方向を望ましい方向に調整することができる。
【００１５】
上記の端末装置の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の少なくとも一部分の画像を半透明にした画像を、前記調整用画像として生成する。
【００１６】
この態様では、撮影画像の少なくとも一部分の画像を透かし絵で表示させる。これにより、ユーザは、実際の撮影画像と調整用画像とを容易に比較することができ、撮影方向の調整を容易に行うことが可能となる。
【００１７】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の一部分の画像によって形成される画像を、前記調整用画像として生成する。
【００１８】
この態様では、調整用画像生成手段は、例えば撮影画像の一部分の輪郭のみを示す画像を、調整用画像として生成する。このような調整用画像を表示することによっても、ユーザは、実際の撮影画像と調整用画像とを容易に比較することができ、撮影方向の調整を容易に行うことが可能となる。
【００１９】
上記の端末装置の他の一態様では、前記撮影手段は、前記移動体の一部を含む範囲を撮影し、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の中の前記移動体の一部に対応する画像を抽出し、抽出した前記画像を前記一部分の画像として用いる。
【００２０】
この態様では、移動体が移動することで撮影手段により撮影される前方の風景が変化しても撮影画像において変化しない移動体の一部に対応する画像を少なくとも抽出し、抽出した画像に基づいて調整用画像を生成する。このような調整用画像を表示することにより、端末装置が保持装置に取り外された時点から端末装置が保持装置に取り付けられた時点で移動体が移動していても、撮影方向の調整を適切に行うことが可能となる。
【００２１】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の下部に位置する所定範囲内の画像を、前記一部分の画像として用いる。
【００２２】
こうして生成される調整用画像を表示することによっても、端末装置が保持装置に取り外された時点から端末装置が保持装置に取り付けられた時点で移動体が移動していても、撮影方向の調整を適切に行うことが可能となる。また、当該態様によれば、撮像画像から所定範囲内の画像を抽出する処理を行えば足りるため、簡便な処理にて調整用画像を生成することができる。
【００２３】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像において前記移動体の前方の風景を少なくとも含む画像に基づいて前記調整用画像を生成し、前記表示制御手段は、前記端末装置が前記保持装置に取り付けられた地点が、前記端末装置が前記保持装置から取り外された地点に略一致する場合に、前記調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００２４】
この態様では、端末装置が取り付けられた地点が、端末装置が取り外された地点に略一致する場合には、撮影手段により撮影される前方の風景がほとんど変化しないものとして、移動体の前方の風景を少なくとも含む画像に基づいて生成された調整用画像を表示する。これによっても、ユーザは撮影方向の調整を容易に行うことができる。また、当該態様によれば、簡便な処理にて調整用画像を生成することができる。
【００２５】
上記の端末装置の他の一態様では、前記表示制御手段は、前記端末装置が前記保持装置に取り付けられた際に、前記調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００２６】
この態様によれば、主に走行開始時において撮影方向の調整をユーザに行わせることが可能となる。つまり、走行開始後の走行中や停止中などにおいて撮影方向の調整が行われることを抑制することが可能となる。
【００２７】
上記の端末装置の他の一態様では、前記撮影手段によって撮影された撮影画像を用いて経路案内を行う経路案内手段を更に備え、前記記憶手段は、前記経路案内手段によって前記経路案内が行われている際に、前記撮影手段によって撮影された前記撮影画像を順次記憶する。
【００２８】
この態様では、経路案内が行われている際には撮影方向の調整が適切に行われた状態にあるものとして、この際の撮影画像を順次記憶する。これにより、撮影方向の調整が適切に行われた状態にある撮影画像に基づいて、調整用画像を適切に生成することが可能となる。
【００２９】
上記の端末装置において好適には、前記調整用画像生成手段は、前記経路案内手段による前記経路案内が終了された際に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成する。また、好適には、前記調整用画像生成手段は、前記端末装置が前記保持装置から取り外された際に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成する。このような際に調整用画像を生成することで、撮影方向の調整が適切に行われた状態にある撮影画像に基づいて、調整用画像を適切に生成することができる。
【００３０】
上記の端末装置の他の一態様では、前記撮影手段によって撮影された撮影画像を用いて経路案内を行う経路案内手段と、前記調整用画像を生成するか否かの決定をユーザから取得する取得手段と、を更に備え、前記取得手段は、前記経路案内手段による前記経路案内が終了された際に、前記調整用画像を生成するか否かの決定をユーザから取得し、前記記憶手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記撮影手段によって撮影された前記撮影画像を記憶し、前記調整用画像生成手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成する。
【００３１】
この態様によれば、調整用画像を生成するか否かをユーザの意思により決定させることができる。また、当該態様によれば、撮影画像を順次記憶するような処理を行わないため、処理負荷を軽減することが可能となる。
【００３２】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記調整用画像として、前記端末装置が縦長に配置された場合に前記調整に用いるための第１調整用画像と、前記端末装置が横長に配置された場合に前記調整に用いるための第２調整用画像とを生成し、前記表示制御手段は、前記端末装置が縦長に配置された場合には、前記第１調整用画像を前記撮影画像と相互に対比可能な態様で表示し、前記端末装置が横長に配置された場合には、前記第２調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００３３】
この態様によれば、端末装置が縦長に配置された場合及び端末装置が横長に配置された場合の両方について、適切な調整用画像を生成することができると共に、適切な調整用画面を表示させることができる。
【００３４】
上記の端末装置の他の一態様では、前記端末装置は、複数の移動体に前記保持装置を介して取り付けられ、前記複数の移動体ごとに前記調整用画像生成手段によって生成された前記調整用画像を、前記複数の移動体に対応付けて記憶する調整用画像記憶手段を更に備え、前記表示制御手段は、前記複数の移動体の中で前記端末装置が取り付けられている移動体に対応する前記調整用画像を前記調整用画像記憶手段から取得し、取得した前記調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００３５】
この態様によれば、端末装置を複数の移動体に取り付けて利用する場合にも、それぞれの移動体に応じた調整用画面を適切に表示させることができる。
【００３６】
本発明の他の観点では、移動体に取り付けられた保持装置に対して脱着可能であり、撮影手段を有する端末装置によって実行される画像表示方法は、前記端末装置が前記保持装置に取り付けられた状態において前記撮影手段によって撮影された撮影画像を記憶する記憶工程と、前記記憶工程によって記憶された前記撮影画像に基づいて、前記撮影手段の撮影方向を調整するための調整用画像を生成する調整用画像生成工程と、前記調整用画像生成工程によって生成された前記調整用画像を、前記撮影手段によって撮影された前記撮影画像と相互に対比可能な態様で表示する表示制御工程と、を備える。
【００３７】
また、本発明の他の観点では、移動体に取り付けられた保持装置に対して脱着可能であり、撮影手段を有すると共にコンピュータを有する端末装置によって実行される画像表示プログラムは、前記コンピュータを、前記端末装置が前記保持装置に取り付けられた状態において前記撮影手段によって撮影された撮影画像を記憶する記憶手段、前記記憶手段によって記憶された前記撮影画像に基づいて、前記撮影手段の撮影方向を調整するための調整用画像を生成する調整用画像生成手段、前記調整用画像生成手段によって生成された前記調整用画像を、前記撮影手段によって撮影された前記撮影画像と相互に対比可能な態様で表示する表示制御手段、として機能させる。
【００３８】
上記の画像表示方法及び画像表示プログラムによっても、ユーザは、調整用画面を参照することで、撮影方向の調整を容易に行うことができる。
【実施例】
【００３９】
以下、図面を参照して本発明の好適な実施例について説明する。
【００４０】
［装置構成］
まず、本実施例に係る端末装置の構成について説明する。
【００４１】
図１は、端末保持装置１に保持された状態にある端末装置２を示している。図１（ａ）は正面図を示しており、図１（ｂ）は側面図を示しており、図１（ｃ）は背面図を示している。
【００４２】
端末保持装置１は、主に、ベース１１と、ヒンジ１２と、アーム１３と、基板ホルダ１５と、端末ホルダ１６とを備える。端末保持装置１は、いわゆるクレードルとして機能し、スマートフォンなどの端末装置２が取り付けられる。
【００４３】
ベース１１は、端末保持装置１を車両などの移動体に取り付ける際の土台として機能する。例えば、ベース１１の下面には吸盤や粘着テープなどが設けられ、ベース１１はその粘着テープにより車両のダッシュボードなどの設置面５に固定される。
【００４４】
ヒンジ１２は、アーム１２に固定されるとともに、ベース１１に対して回転可能に取り付けられている。ヒンジ１２の回転により、アーム１２は端末装置２の前後方向、つまり図１（ｂ）の矢印４１及び４２の方向に回動する。つまり、車両の設置面５に固定されたベース１１に対してヒンジ１２を介してアーム１２を回転させることにより、設置面５に対する基板ホルダ１５及び端末ホルダ１６の設置角度が調整可能となっている。
【００４５】
基板ホルダ１５は、カバー１５ａと、ボールリンク１５ｂと、センサ基板１５ｃと、センサ１５ｄとを備える。ボールリンク１５ｂは、アーム１３の上端に取り付けられており、アーム１３に対して基板ホルダ１５を任意の角度で保持する。カバー１５ａは、基板ホルダ１５の下端に設けられており、アーム１３に対する基板ホルダ１５の回転を規制する役割を有する。基板ホルダ１５の内部にはセンサ基板１５ｃが設けられており、センサ基板１５ｃにはセンサ１５ｄが設けられている。
【００４６】
端末ホルダ１６は、端末装置２を保持するホルダである。端末ホルダ１６は、コネクタ１６ａ及び配線１６ｂを有する。コネクタ１６ａは、端末ホルダ１６の前面、即ち端末装置２が設置される面の底部に設けられ、端末装置２を端末ホルダ１６に設置する際に、端末装置２のコネクタと接続される。コネクタ１６ａは、配線１６ｂによりセンサ基板１５ｃと電気的に接続されている。よって、センサ１５ｄによる検出信号は、センサ基板１５ｃ、配線１６ｂ及びコネクタ１６ａを通じて端末装置２へ供給される。
【００４７】
端末装置２は、端末装置２本体の前面側であり液晶表示パネルなどの表示部２５を有する前面２ａと、端末装置２本体の背面側の背面２ｂとを備える。通常、端末装置２は矩形の平板形状に構成されており、前面２ａと背面２ｂとが略平行に構成されている。
【００４８】
端末ホルダ１６は前面側に接触面１６ｃを有する。端末装置２を端末ホルダ１６に取り付けた際、接触面１６ｃは、端末装置２の背面２ｂに当接し、端末装置２の背面２ｂを支持する。なお、図１に示す例では、端末ホルダ１６の接触面１６ｃは、その全面が端末装置２の背面２ｂと接触するように構成されている。この代わりに、接触面１６ｃのうちの１カ所又は数カ所を部分的に突出させ、その突出した部分のみが端末装置２の背面２ｂに当接する構造としても構わない。
【００４９】
端末装置２の背面２ｂには、カメラ２９が設けられている。また、端末保持装置１の端末ホルダ１６には、端末装置２が端末保持装置１に保持された状態においてカメラ２９の対向する位置に、孔部１７が形成されている。孔部１７は、カメラ２９のレンズの径よりも大きな径に構成されている。これにより、端末装置２が端末保持装置１に保持された状態において、カメラ２９は、端末ホルダ１６の外壁に阻害されることなく、端末ホルダ１６の後ろ側を撮影することができる。具体的には、カメラ２９は車両の外部などを撮影する。
【００５０】
なお、図１に示す例では、端末ホルダ１６は、端末装置２の背面２ｂの略全面を覆うように構成され、端末装置２のカメラ２９の対向する位置に孔部１７が形成されている。この代わりに、端末装置２が端末保持装置１に保持された状態にて、端末装置２においてカメラ２９が設けられた位置よりも下方の面のみを覆うように、端末ホルダ１６を構成することができる。１つの例では、端末ホルダ１６の接触面１６ｃを、端末装置２のカメラ２９が設けられた位置よりも下方の位置まで延在するような形状（言い換えると、端末装置２のカメラ２９が設けられた位置よりも上方に接触面１６ｃが存在しないような形状）に構成することができる。このような他の例では、端末保持装置１に孔部１７を形成する必要はない。
【００５１】
また、図１に示す例では、端末装置２の背面２ｂの左右方向における略中心線上にカメラ２９が設けられているが、このような位置にカメラ２９を設けることに限定はされない。例えば、背面２ｂの左右方向における中心線からある程度離れた位置にカメラ２９を設けても良い。この場合には、端末ホルダ１６に孔部１７を形成する代わりに、端末装置２が端末保持装置１に保持された状態にて、端末装置２においてカメラ２９が設けられた位置を含む部分に切り欠き部を形成することとしても良い。
【００５２】
次に、基板ホルダ１５に対する端末ホルダ１６の回転機能について説明する。端末装置２を保持する端末ホルダ１６は、基板ホルダ１５に対して、９０度単位で回転可能である。即ち、図１（ａ）の状態を回転角０度とした場合、端末ホルダ１６は、時計回り又は反時計回りに０度、９０度、１８０度、２７０度の４つの角度に回転した状態で固定することが可能である。なお、回転角９０度毎に固定可能とした理由は、通常、端末装置２を見る際に、ユーザは表示部２５を縦長又は横長に配置した状態で使用するためである。なお、前述のように、端末装置２は通常、矩形の平板形状を有しており、「縦長に配置」とは、表示部２５の長手方向が縦となるような配置であり、「横長に配置」とは、表示部２５の長手方向が横となるような配置である。
【００５３】
図２に端末ホルダ１６を回転させた状態の例を示す。端末保持装置１を正面側から見た場合、図２（ａ）の状態から矢印の方向に端末ホルダ１６を９０度回転させると、図２（ｂ）に示す状態となる。また、端末保持装置１を背面側から見た場合、図２（ｃ）の状態から矢印の方向に端末ホルダを９０度回転させると、図２（ｄ）に示す状態となる。
【００５４】
構造的には、例えば基板ホルダ１５の略中央に回転軸（図示せず）を設け、この回転軸に対して端末ホルダ１６を固定することにより、基板ホルダ１５に対して端末ホルダ１６を回転可能とすることができる。また、基板ホルダ１５と端末ホルダ１６が相互に当接する面において、回転角９０度毎に相互にはまり合う凹凸又は溝と突起などを設けることにより、９０度毎の回転角位置において端末ホルダ１６を固定することができる。なお、このような構造は単なる一例であり、センサ基板１５ｃに対して端末ホルダ１６を回転角９０度毎に固定できれば、他の構造を採用しても構わない。
【００５５】
次に、図３は、端末装置２の構成を概略的に示している。図３に示すように、端末装置２は、主に、ＣＰＵ２１と、ＲＯＭ２２と、ＲＡＭ２３と、通信部２４と、表示部２５と、スピーカ２６と、マイク２７と、操作部２８と、カメラ２９とを有する。端末装置２は、スマートフォンなどの通話機能を有する携帯型端末装置である。例えば、端末装置２は、端末保持装置１に保持された状態で、車両の運転者が表示部２５を視認できるようなダッシュボード上の位置に設置される。
【００５６】
ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２１は、端末装置２全体についての制御を行う。ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２２は、端末装置２を制御するための制御プログラム等が格納された図示しない不揮発性メモリ等を有する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２３は、操作部２６を介してユーザにより設定されたデータを読み出し可能に格納したり、ＣＰＵ２１に対してワーキングエリアを提供したりする。
【００５７】
通信部２４は、通信網を介して他の端末装置２と無線通信を行うことが可能に構成されている。表示部２５は、例えば液晶ディスプレイなどにより構成され、ユーザに対して文字、画像などを表示する。スピーカ２６は、ユーザに対する音声出力を行う。マイク２７は、ユーザによって発せられた音声などを集音する。
【００５８】
操作部２８は、端末装置２の筐体に設けられた操作ボタンやタッチパネル式入力装置などにより構成することができ、ユーザによる各種の選択、指示が入力される。なお、表示部２５がタッチパネル方式である場合には、表示部２５の表示画面上に設けられたタッチパネルも操作部２８として機能する。
【００５９】
カメラ２９は、例えばＣＣＤカメラにより構成され、図１に示したように端末装置２の背面２ｂに設けられている。基本的には、カメラ２９の光軸（レンズの中心から垂直方向に伸びる軸）の方向は、端末装置２の背面２ｂの垂直方向（言い換えると法線方向）に一致する。なお、カメラ２９を、端末装置２の背面２ｂだけでなく、端末装置２の前面２ａにも設けても良い。
【００６０】
なお、カメラ２９は本発明における撮影手段の一例に相当し、ＲＯＭ２２は本発明における記憶手段の一例に相当し、ＣＰＵ２１は本発明における調整用画像生成手段、表示制御手段、経路案内手段、取得手段、及び調整用画像記憶手段の一例に相当する（詳細は後述する）。
【００６１】
［撮影方向の調整方法］
次に、本実施例に係る、カメラ２９の撮影方向の調整方法について説明する。
【００６２】
まず、撮影方向の調整を行う理由などについて簡単に説明する。前述したように、端末保持装置１を介して端末装置２を車両に設置した状態で、端末装置２のカメラ２９によって撮影された車両前方の画像を用いて経路案内を行うＡＲナビが知られている。ＡＲナビは、カメラ２９による撮影画像の上に、目的地までの方向や距離などの経路案内のための画像を重ねて表示するものである。そのため、ＡＲナビを行う場合には、カメラ２９の撮影方向（具体的にはカメラ２９内のレンズの光軸の方向）が車両の進行方向に一致していることが望ましいと言える。しかしながら、ユーザは、車両内の任意の位置に端末保持装置１を設置すると共に、任意の向きにて端末装置２を設置する傾向にある。したがって、当初の設置状態においては、カメラ２９の撮影方向が車両の進行方向に一致しない傾向にある。よって、端末装置２が設置された後に、カメラ２９の撮影方向が車両の進行方向に一致するように調整されることが望ましいと言える。
【００６３】
本実施例では、このようなことを勘案して、ユーザが手動でカメラ２９の撮影方向の調整を行う際のアシストを行う。具体的には、本実施例では、ユーザによる撮影方向の調整をアシストするための調整用画像を表示部２５に表示する。より具体的には、本実施例では、端末装置２内のＣＰＵ２１が、撮影方向の調整が適切に行われた状態にあるカメラ２９の撮影画像に基づいて調整用画像を生成しておき、ユーザによる撮影方向の調整が行われるような状況において、当該調整用画像を実際の撮影画像と相互に対比可能な態様で表示部２５に表示させることで、ユーザによる撮影方向の調整をアシストする。
【００６４】
なお、カメラ２９の「撮影方向」は、カメラ２９が向いている方向を意味し、より詳しくはカメラ２９のレンズにおける光軸の方向に相当する。また、車両の「進行方向」とは、車両の前後方向（具体的には前方方向）を意味するものとする。
【００６５】
より詳しくは、ＣＰＵ２１は、端末装置２が端末保持装置１から取り外された際やＡＲナビが終了された際などにおいて、その直前に表示されていた撮影画像に基づいて調整用画像を生成し、当該調整用画像をＲＯＭ２２などに記憶させておく。そして、この後に端末装置２が端末保持装置１に取り付けられた際に、ＣＰＵ２１は、記憶されている調整用画像を撮影画像に重畳した画面（以下では「調整用画面」と呼ぶ。）を表示部２５に表示させる。ユーザは、このような調整用画面を参照して、カメラ２９による実際の撮影画像と調整用画像とを比較することで、カメラ２９の撮影方向の調整（言い換えると端末装置２の向きの調整）を行う。
【００６６】
以上説明したように、本実施例では、端末装置２が端末保持装置１に取り付けられた際に撮影方向の調整が一度行われれば、次に端末装置２が端末保持装置１に取り付けられた際には、当該調整が行われた際の撮影画像により生成された調整用画像を現在の撮影画像と重畳して表示する。そのため、ユーザは、調整用画面を参照することで、容易に、カメラ２９の撮影方向を望ましい方向に調整することができる。
【００６７】
以下で、本実施例に係る調整用画像の生成方法の具体例について説明する。本実施例では、端末装置２内のＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられた状態においてカメラ２９によって撮影された撮影画像を記憶させておき、記憶された撮影画像に基づいて調整用画像を生成する。この場合、ＣＰＵ２１は、記憶された撮影画像内において撮影方向の調整を行う際にガイドとなるような部分を、画像処理を行うことで抽出して、抽出した部分に対応する画像に基づいて調整用画像を生成する。例えば、ＣＰＵ２１は、車両が移動することでカメラ２９に取り込まれる車両前方の風景が変化しても、カメラ２９による撮影画像において変化しないような部分を少なくとも抽出する。車両前方の風景が変化しても撮影画像において変化しない部分の例としては、車両のボンネットやバンパーやＡピラーなどの車両の一部に対応する画像が挙げられる。また、ＣＰＵ２１は、例えば２値化処理や輪郭抽出や複数の画像の差分に応じた処理などの画像処理を行うことで、撮影画像から上記のような画像を抽出する。
【００６８】
ここで、調整用画像の生成方法に関する第１の例及び第２の例について説明する。
【００６９】
第１の例では、ＣＰＵ２１は、少なくとも撮影画像から抽出された部分を半透明にした画像を調整用画像として生成する、言い換えると抽出された部分を「透かし絵」とした画像を調整用画像として生成する。具体的には、ＣＰＵ２１は、撮影画像において車両の一部などを少なくとも含む部分を半透明にした画像を調整用画像として生成する。そして、ＣＰＵ２１は、こうして生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を表示部２５に表示させる。
【００７０】
図４は、第１の例に係る調整用画像の一例を示す図である。図４（ａ）は、カメラ２９による撮影画像の一例を示している。この撮影画像は、カメラ２９によって撮影された車両前方の画像例を示している。端末装置２内のＣＰＵ２１は、図４（ａ）に示すような撮影画像に対して２値化処理を行うことで、図４（ｂ）に示すような画像を生成する。そして、ＣＰＵ２１は、図４（ｂ）に示すような画像の上部に位置する画像５０をグラデーションでその中身を消すことで、図４（ｃ）に示すような画像を生成する。これにより、車両のボンネット部分に対応する画像などが主に抽出され、その他の部分が消されたような画像が生成される。この後、ＣＰＵ２１は、図４（ｃ）に示すような画像を半透明にした画像を調整用画像として用いる。
【００７１】
図５は、第１の例に係る調整用画面の一例を示す図である。具体的には、図５は、図４で示した方法により生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を例示している。図５に示すように、調整用画面では、半透明にされた調整用画像を透して、実際の撮影画像が視認されるように構成されている。なお、調整用画像を無彩色で表示することに限定はされず、調整用画像を所定の有彩色で表示しても良い。
【００７２】
ユーザは、図５に示すような調整用画面を参照することで、カメラ２９の撮影方向の調整（言い換えると端末装置２の向きの調整）を行う。具体的には、ユーザは、カメラ２９による実際の撮影画像においてボンネット部分に対応する画像の位置が、調整用画像においてボンネット部分に対応する画像の位置に一致するように、カメラ２９の撮影方向の調整を行う。
【００７３】
次に、第２の例では、ＣＰＵ２１は、撮影画像から抽出された画像によって形成される画像を調整用画像として生成する、つまり抽出された画像以外の画像を撮影画像から取り除いた画像に基づいて調整用画像を生成する。具体的には、ＣＰＵ２１は、撮影画像において車両の一部の輪郭を示す画像を調整用画像として生成する。そして、ＣＰＵ２１は、こうして生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を表示部２５に表示させる。
【００７４】
図６は、第２の例に係る調整用画像及び調整用画面の一例を示す図である。図６（ａ）は、図４（ａ）と同様の撮影画像の一例を示している。図６（ｂ）は、第２の例に係る調整用画像の一例を示す。端末装置２内のＣＰＵ２１は、図６（ａ）に示すような撮影画像から車両の一部に対応する画像を抽出するための画像処理を行うことで、図６（ｂ）に示すような調整用画像を生成する。この調整用画像は、車両のボンネット部分の輪郭を示す画像６０のみから構成されている。例えば、ＣＰＵ２１は、カメラ２９によって撮影された複数の撮影画像を比較して、当該複数の撮影画像において変化していない部分を抽出することで（言い換えると変化する部分を取り除くことで）、このような調整用画像を生成する。
【００７５】
図６（ｃ）は、第２の例に係る調整用画面の一例を示す図である。具体的には、図６（ｃ）は、図６（ｂ）で示した方法により生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を例示している。この調整用画面では、車両のボンネット部分の輪郭を示す画像６０が、実際の撮影画像上に重畳されている。なお、画像６０を無彩色で表示することに限定はされず、画像６０を所定の有彩色で表示しても良い。
【００７６】
ユーザは、このような調整用画面を参照することで、カメラ２９の撮影方向の調整（言い換えると端末装置２の向きの調整）を行う。具体的には、ユーザは、カメラ２９による実際の撮影画像においてボンネット部分に対応する画像の位置が、調整用画像における画像６０が示すボンネット部分に対応する位置に一致するように、カメラ２９の撮影方向の調整を行う。
【００７７】
以上に例示したような方法で調整用画像を生成することにより、ユーザによる撮影方向の調整を効果的にアシストすることが可能な調整用画像を適切に生成することができる。また、例示したような調整用画面を表示することで、ユーザは、撮影方向の調整を容易に行うことができる。
【００７８】
なお、上記では、撮影画像から車両の一部に対応する画像を抽出することで調整用画像を生成する例を示したが、このような調整用画像を用いることに限定はされない。他の例では、撮影画像の下部に位置する所定範囲内の画像を、調整用画像として用いることができる。こうしているのは、撮影画像の下部には、車両前方の風景が変化しても撮影画像において変化しないような、車両のボンネットやバンパーやＡピラーなどの車両の一部に対応する画像が含まれる傾向にあるからである。つまり、他の例では、撮影画像から車両の一部に対応する画像を抽出するための画像処理を行わずに、撮影画像の下部には車両の一部に対応する画像が含まれているとの想定に基づき、撮影画像の下部に位置する所定範囲内の画像を調整用画像として用いる。例えば、「撮影画像の下部に位置する所定範囲」とは、撮影画像において車両の一部が少なくとも含まれるような予め設定した範囲を用いることができる。
【００７９】
また、このような他の例を実施する場合、上記した第１の例を適用することができる。具体的には、撮影画像の下部に位置する所定範囲内の画像を半透明にした画像を、調整用画像として生成することができる。
【００８０】
［第１実施例に係るフロー］
次に、上記した実施例に関する第１実施例について説明する。具体的には、図７及び図８を参照して、第１実施例において調整用画像の生成及び調整用画面の表示を行う際に実行される処理について説明する。
【００８１】
図７は、第１実施例における全体処理を示すフローチャートである。当該処理では、主に、端末装置２が端末保持装置１に取り付けられた際に調整用画面を表示する処理、及び、端末装置２が端末保持装置１から取り外された際及びＡＲナビが終了された際に、その直前に表示されていた撮影画像に基づいて調整用画像を生成する処理が実行される。なお、当該処理は、端末装置２内のＣＰＵ２１がＲＯＭ２２などに記憶されたプログラムを実行することにより実現される。
【００８２】
まず、ステップＳ１０１では、ＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられたか否かを判定する。例えば、端末装置２の取り付け及び取り外しを検出するセンサを端末保持装置１などに設けておき、ＣＰＵ２１は、当該センサからの出力信号を取得して、ステップＳ１０１の判定を行うことができる。端末装置２が端末保持装置１に取り付けられた場合（ステップＳ１０１；Ｙｅｓ）、処理はステップＳ１０２に進み、端末装置２が端末保持装置１に取り付けられていない場合（ステップＳ１０１；Ｎｏ）、処理はステップＳ１０１に戻る。
【００８３】
ステップＳ１０２では、ＣＰＵ２１は、調整用画面を表示する処理（以下、「調整用画面表示処理」と呼ぶ。調整用画面表示処理の詳細は後述する。）を行う。このように端末装置２が端末保持装置１に取り付けられた際に調整用画面を表示するのは、主に走行開始時において撮影方向の調整をユーザに行わせるためである。言い換えると、走行開始後の走行中や停止中などにおいて撮影方向の調整が行われることを抑制するためである。ステップＳ１０２の処理後、処理はステップＳ１０３に進む。
【００８４】
ステップＳ１０３では、ＣＰＵ２１は、ＡＲナビを起動する。そして、処理はステップＳ１０４に進む。ステップＳ１０４では、撮影画像を前回記憶してから、所定時間が経過したか否かを判定する。当該判定は、所定時間ごとに繰り返し、撮影画像を記憶するために行っている。所定時間経過している場合（ステップＳ１０４；Ｙｅｓ）、処理はステップＳ１０５に進み、所定時間経過していない場合（ステップＳ１０４；Ｎｏ）、処理はステップＳ１０４に戻る。
【００８５】
ステップＳ１０５では、ＣＰＵ２１は、カメラ２９によって現在撮影された撮影画像を、ＲＯＭ２２などに記憶させる。この場合、ＣＰＵ２１は、前回記憶された撮影画像を、今回撮影された撮影画像によって上書きする。そして、処理はステップＳ１０６に進む。
【００８６】
ステップＳ１０６では、ＣＰＵ２１は、端末装置２が端末保持装置１から取り外されたか否かを判定する。この判定も、ステップＳ１０１と同様に、例えば端末保持装置１に設けられたセンサからの出力信号に基づいて実行することができる。端末装置２が端末保持装置１から取り外された場合（ステップＳ１０６；Ｙｅｓ）、処理はステップＳ１０８に進み、端末装置２が端末保持装置１から取り外されていない場合（ステップＳ１０６；Ｎｏ）、処理はステップＳ１０７に進む。
【００８７】
ステップＳ１０７では、ＣＰＵ２１は、ＡＲナビが終了したか否かを判定する。ＡＲナビが終了した場合（ステップＳ１０７；Ｙｅｓ）、処理はステップＳ１０８に進み、ＡＲナビが終了していない場合（ステップＳ１０７；Ｎｏ）、処理はステップＳ１０４に戻る。
【００８８】
ステップＳ１０８では、ＣＰＵ２１は、ステップＳ１０５で記憶された撮影画像に基づいて調整用画像を生成する。具体的には、ＣＰＵ２１は、前述したような方法により、記憶された撮影画像に基づいて調整用画像を生成し、生成した調整用画像をＲＯＭ２２などに記憶させる。例えば、ＣＰＵ２１は、前回生成した調整用画像を、今回生成した調整用画像によって上書きする。
【００８９】
ステップＳ１０８の処理は、端末装置２が端末保持装置１から取り外された際又はＡＲナビが終了した際に実行されるため、端末装置２が取り外される直前に記憶された撮影画像又はＡＲナビが終了する直前に記憶された撮影画像に基づいて、調整用画像が生成されることとなる。第１実施例では、端末装置２が取り外された際及びＡＲナビが終了した際においては、撮影方向の調整が適切に行われた状態にあるものとして、この際の撮影画像に基づいて調整用画像を生成することとしている。以上のステップＳ１０８の処理後、処理は終了する。
【００９０】
図８は、上記のステップＳ１０２で行われる調整用画面表示処理を示すフローチャートである。当該処理も、端末装置２内のＣＰＵ２１がＲＯＭ２２などに記憶されたプログラムを実行することにより実現される。
【００９１】
まず、ステップＳ２０１では、ＣＰＵ２１は、調整用画像が存在するか否かを判定する。つまり、ＣＰＵ２１は、ＲＯＭ２２などに調整用画像が記憶されているか否かを判定する。調整用画像がある場合には（ステップＳ２０１；Ｙｅｓ）、処理はステップＳ２０２に進み、調整用画像がない場合には（ステップＳ２０１；Ｎｏ）、処理はステップＳ２０５に進む。後者の場合には、調整用画像が未だ生成されていないため、調整用画面は表示されない。
【００９２】
ステップＳ２０２では、ＣＰＵ２１は、ＲＯＭ２２などに記憶されている調整用画像を撮影画像に重畳した調整用画面を表示部２５に表示させる。この後、ユーザにより、調整用画面を参照した撮影方向の調整が行われる。そして、処理はステップＳ２０３に進む。
【００９３】
ステップＳ２０３では、ＣＰＵ２１は、ユーザから調整用画面の表示を終了するとの指示が取得されたか否かを判定する。この場合、ＣＰＵ２１は、操作部２８やマイク２７などを介してユーザの指示を取得することで、当該判定を行う。調整用画面の表示を終了するとの指示が取得された場合（ステップＳ２０３；Ｙｅｓ）、処理はステップＳ２０４に進み、調整用画面の表示を終了するとの指示が取得されていない場合（ステップＳ２０３；Ｎｏ）、処理はステップＳ２０３に戻る。
【００９４】
ステップＳ２０４では、ＣＰＵ２１は、ユーザからの指示に従って、調整用画面の表示を終了させる。そして、処理はステップＳ２０５に進む。ステップＳ２０５では、ＣＰＵ２１は、カメラ２９による撮影画像を表示部２５に表示させる。つまり、ＣＰＵ２１は、この後にＡＲナビを行うために撮影画像を表示させる。そして、処理は終了する。
【００９５】
以上説明した第１実施例によれば、撮影方向の調整をアシストするための調整用画像を適切に生成することができると共に、当該調整用画像を重畳した調整用画面を表示することで、撮影方向の調整をユーザに容易に行わせることができる。
【００９６】
なお、上記したようなＡＲナビの実行中において、端末装置２の電源がオフにされた場合には、この後に端末装置２の電源がオンにされた際に、電源がオフにされる直前に記憶された撮影画像に基づいて調整用画像を生成すれば良い。
【００９７】
［第２実施例に係るフロー］
次に、第２実施例について説明する。具体的には、第２実施例において調整用画像の生成を行う際に実行される処理について説明する。
【００９８】
上記した第１実施例では、端末装置２が端末保持装置１から取り外された際及びＡＲナビが終了された際に、調整用画像を生成していた。第２実施例では、ＡＲナビが終了された際に調整用画像を生成するか否かをユーザに問い合わせ、ユーザが調整用画像を生成すると決定した場合に調整用画像を生成する点で、第１実施例と異なる。より具体的には、第１実施例では、端末装置２が端末保持装置１から取り外されるまで及びＡＲナビが終了されるまで、調整用画像を生成するために用いる撮影画像を順次記憶していたが、第２実施例では、このように撮影画像を順次記憶しない。第２実施例では、ＡＲナビが終了された際にユーザが調整用画像を生成すると決定した場合に、調整用画像を生成するために用いる撮影画像を記憶し、当該撮影画像に基づいて調整用画像を生成する。
【００９９】
図９は、第２実施例における全体処理を示すフローチャートである。当該処理は、端末装置２内のＣＰＵ２１がＲＯＭ２２などに記憶されたプログラムを実行することにより実現される。
【０１００】
ステップＳ３０１〜Ｓ３０３の処理は、図８に示したステップＳ１０１〜Ｓ１０３の処理と同様であるため、その説明を省略する。ここでは、ステップＳ３０４以降の処理について説明する。
【０１０１】
ステップＳ３０４では、ＣＰＵ２１は、ＡＲナビが終了したか否かを判定する。ＡＲナビが終了した場合（ステップＳ３０４；Ｙｅｓ）、処理はステップＳ３０５に進み、ＡＲナビが終了していない場合（ステップＳ３０４；Ｎｏ）、処理はステップＳ３０４に戻る。
【０１０２】
ステップＳ３０５では、ＣＰＵ２１は、調整用画像を生成するか否かをユーザに問い合わる。例えば、ＣＰＵ２１は、調整用画像を生成するか否かの決定をユーザに求めるための情報を、表示部２５に表示させたり、スピーカ２６より出力させたりする。そして、処理はステップＳ３０６に進む。
【０１０３】
ステップＳ３０６では、ＣＰＵ２１は、ステップＳ３０５の問い合わせにより、ユーザから調整用画像を生成するとの決定が取得されたか否かを判定する。この場合、ＣＰＵ２１は、操作部２８やマイク２７などを介してユーザの決定を取得することで、当該判定を行う。調整用画像を生成するとの決定が取得された場合（ステップＳ３０６；Ｙｅｓ）、処理はステップＳ３０７に進み、調整用画像を生成するとの決定が取得されなかった場合（ステップＳ３０６；Ｎｏ）、処理は終了する。
【０１０４】
ステップＳ３０７では、ＣＰＵ２１は、カメラ２９によって現在撮影された撮影画像をＲＯＭ２２などに記憶させ、記憶された撮影画像に基づいて調整用画像を生成する。この場合、ＣＰＵ２１は、前述したような方法により調整用画像を生成し、生成した調整用画像をＲＯＭ２２などに記憶させる。例えば、ＣＰＵ２１は、前回生成した調整用画像を、今回生成した調整用画像によって上書きする。
【０１０５】
第２実施例では、ユーザから調整用画像を生成するとの決定が得られた状況においては撮影方向の調整が適切に行われた状態にあるものとして、この際の撮影画像を記憶し、当該撮影画像に基づいて調整用画像を生成することとしている。以上のステップＳ３０７の処理後、処理は終了する。
【０１０６】
以上説明した第２実施例によれば、調整用画像を生成するか否かをユーザの意思により決定させることができる。そのため、例えば端末装置２が適切に設置されていないとユーザが判断できるような状況において、不要な撮影画像の記憶や調整用画像の生成を抑制することができる。また、第２実施例によれば、第１実施例と比較して、撮影画像を順次記憶するような処理を行わないため、処理負荷を軽減することが可能となる。
【０１０７】
なお、第１実施例では、ＡＲナビの実行中に所定時間ごとに撮影画像を順次記憶させるため、端末装置２が端末保持装置１から取り外された場合や端末装置２の電源がオフにされた場合にも、記憶している撮影画像に基づいて適切な調整用画像を生成することができる。
【０１０８】
［変形例］
次に、変形例について説明する。
【０１０９】
（第１変形例）
上記では、撮影画像の一部に対応する画像に基づいて調整用画像を生成する実施例を示したが、第１変形例では、撮影画像の概ね全体の画像に基づいて調整用画像を生成する。具体的には、第１変形例では、ＣＰＵ２１は、車両前方の風景を少なくとも含む画像に基づいて調整用画像を生成する。例えば、ＣＰＵ２１は、撮影画像の全体を半透明にすることで調整用画像を生成する。
【０１１０】
１つの例では、ＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられた地点が、その前に端末装置２が端末保持装置１から取り外された地点に一致する場合にのみ、第１変形例に係る調整用画像を表示させることができる。こうするのは、端末装置２が取り付けられた地点が、その前に端末装置２が取り外された地点に一致する場合には（例えば駐車場にて端末装置２の脱着が行われた場合）、端末装置２が取り外された際と端末装置２が取り付けられた際とで、車両前方の風景はほとんど変化しておらず、上記のような第１変形例に係る調整用画像を用いて適切に撮影方向の調整を行うことができると考えられるからである。なお、ＣＰＵ２１は、例えば端末装置２内のＧＰＳ受信機が受信する電波に基づいて、端末装置２が取り外された地点と端末装置２が取り付けられた地点とが一致するか否かの判定を行うことができる。
【０１１１】
他の例では、ＣＰＵ２１は、端末装置２が取り付けられた地点が、その前に端末装置２が取り外された地点に一致する場合には、第１変形例に係る調整用画像を表示させることとし、端末装置２が取り付けられた地点が、その前に端末装置２が取り外された地点に一致しない場合には、上記の実施例で示したような、撮影画像の一部に基づいて生成される調整用画像を表示させることができる。つまり、ＣＰＵ２１は、２つの場合にて、表示させる調整用画像を切り替えることができる。
【０１１２】
このような第１変形例に係る調整用画像を表示させた場合にも、撮影方向の調整をユーザに容易に行わせることができる。特に、第１変形例に係る方法は、端末装置２が取り外された地点と端末装置２が取り付けられた地点とが一致する場合に、撮影方向の調整を容易に行わせることができる。
【０１１３】
（第２変形例）
第２変形例では、ＣＰＵ２１は、端末装置２が縦長に配置された場合と横長に配置された場合とで異なる調整用画像を生成して記憶させる。具体的には、ＣＰＵ２１は、端末装置２が縦長に配置されているか横長に配置されているかを判断し、端末装置２が縦長に配置されている場合に生成された調整用画像（以下、「第１調整用画像」と呼ぶ。）と、端末装置２が横長に配置されている場合に生成された調整用画像（以下、「第２調整用画像」と呼ぶ。）とを別個にＲＯＭ２２などに記憶させる。つまり、第１調整用画像及び第２調整用画像の両方について、最新の画像を別々に記憶させる。
【０１１４】
そして、ＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられた際に、端末装置２が縦長に配置されているか横長に配置されているかを判断し、端末装置２が縦長に配置されている場合には第１調整用画像を読み出して表示させ、端末装置２が横長に配置されている場合には第２調整用画像を読み出して表示させる。例えば、ＣＰＵ２１は、端末装置２内又は端末保持装置１内に設けられた、端末装置２の配置状態を検出可能に構成されたセンサの出力より、端末装置２が縦長に配置されているか横長に配置されているかを判断する。
【０１１５】
このような第２変形例によれば、端末装置２が縦長に配置された場合及び端末装置２が横長に配置された場合の両方について、適切な調整用画像を生成して記憶させることができると共に、適切な調整用画面を表示させることができる。
【０１１６】
（第３変形例）
第３変形例では、ＣＰＵ２１は、調整用画像が生成された際に端末装置２が取り付けられていた車種ごとに、当該調整用画像を対応付けて記憶させる。つまり、ＣＰＵ２１は、ユーザが使用する複数の車両のそれぞれで生成された調整用画像を、当該複数の車両に対応付けて別々にＲＯＭ２２などに記憶させる。そして、ＣＰＵ２１は、当該複数の車両の中で端末装置２が現在取り付けられている車両に対応する調整用画像をＲＯＭ２２などから読み出して、読み出した調整用画像を表示させる。例えば、ＣＰＵ２１は、車両に設けられている診断用のポートなどを介して車種や車両情報などを取得することで、端末装置２が取り付けられている車両を特定する。
【０１１７】
このような第３変形例によれば、端末装置２を複数の車両に取り付けて利用する場合にも、それぞれの車両に応じた調整用画面を適切に表示させることができる。
【０１１８】
（その他の変形例）
上記では調整用画像を撮影画像に重畳して表示させる例を示したが、調整用画像と撮影画像とを相互に対比可能な態様であれば、このように重畳して表示させることに限定はされない。他の例では、調整用画像と撮影画像とを並べて表示させることができる。
【０１１９】
上記では、撮影画像の一部又は全部を半透明にすることで生成した画像、及び、撮影画像内の画像の輪郭に基づいて生成した画像を、調整用画像の例として挙げたが、調整のためのガイドとなる画像となるように撮影画像を加工した画像であれば、これらに限られない。
【０１２０】
上記では本発明を車両に適用する例を示したが、本発明の適用はこれに限定されない。本発明は、車両の他に、船や、ヘリコプターや、飛行機などの種々の移動体に適用することができる。
【０１２１】
以上に述べたように、実施例は、上述した実施例に限られるものではなく、特許請求の範囲及び明細書全体から読み取れる発明の要旨あるいは思想に反しない範囲で適宜変更可能である。
【産業上の利用可能性】
【０１２２】
本発明は、通話機能を有する携帯電話や、経路案内を行うナビゲーション装置に利用することができる。
【符号の説明】
【０１２３】
１ 端末保持装置
２ 端末装置
１５ 基板ホルダ
１６ 端末ホルダ
２１ ＣＰＵ
２５ 表示部
２８ 操作部
２９ カメラ
【技術分野】
【０００１】
本発明は、移動体に搭載され、当該移動体の外部を撮影する撮影手段を有する端末装置に関する。
【背景技術】
【０００２】
この種の技術が、例えば特許文献１に記載されている。特許文献１には、車載カメラによる撮影画像内においてリアバンパ等が本来観測されるべき位置をテンプレート画像として予め格納しておき、車載カメラによる実際の撮影画像内におけるリアバンパ等の位置とテンプレート画像内におけるリアバンパ等の位置との間に所定値以上のずれが生じている場合に、車載カメラの光軸ずれが生じていると判定する技術が記載されている。また、特許文献１には、光軸ずれが生じている場合に、ずれ量に応じてアクチュエータを駆動させることでカメラ位置を自動調整することが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１６５８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来から、「スマートフォン」と呼ばれる高機能携帯電話などの携帯型端末装置を、「クレードル」と呼ばれる保持装置を介して車両に設置し、利用する技術が提案されている。また、スマートフォンのカメラによる実写画像を用いた「ＡＲナビ（ＡＲ：Ａｕｇｍｅｎｔｅｄ Ｒｅａｌｉｔｙ）」などと呼ばれるナビゲーションが提案されている。ＡＲナビは、カメラによる実写画像の上に、目的地までの方向や距離などの経路案内のための画像を重ねて表示するものである。そのため、ＡＲナビを利用する場合には、カメラの撮影方向が車両の進行方向に一致していることが望ましいと言える。
【０００５】
しかしながら、ユーザは、車両内の任意の位置にクレードルを設置すると共に、任意の向きにてスマートフォンを設置する傾向にある。したがって、当初の設置状態においては、カメラの撮影方向が車両の進行方向に一致しない傾向にある。よって、このような設置が行われた後に、カメラの撮影方向が車両の進行方向に一致するように調整することが望ましいと言える。
【０００６】
ここで、上記した特許文献１に記載された技術では、予めテンプレート画像を用意して処理を行っていたため、当該技術を、スマートフォン及びクレードルを有するシステムに好適に適用することが困難であった。というのは、上記したようにユーザは任意の位置にクレードルを設置する傾向にあるため、望ましいテンプレート画像を予め用意しておくことが困難であるからである。なお、特許文献１には、ユーザが手動で撮影方向の調整を行う場合に、当該調整を補助するような技術については記載されていない。
【０００７】
本発明が解決しようとする課題としては、上記のものが一例として挙げられる。本発明は、適切な調整用画像を表示することで、ユーザがカメラの撮影方向の調整を容易に行うことが可能な端末装置、端末装置によって実行される画像表示方法及び画像表示プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
請求項１に記載の発明では、移動体に取り付け可能な端末装置は、前記移動体に取り付けられた状態で、当該移動体の進行方向前方を撮影可能な撮影手段と、前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段と、前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段と、を備え、前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる。
【０００９】
請求項５に記載の発明では、移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段を有する端末装置によって実行される画像表示方法は、前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内工程と、前記移動体に取り付けられた後であって、かつ前記経路案内工程による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御工程と、を備え、前記表示制御工程は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる。
【００１０】
請求項６に記載の発明では、移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段と、コンピュータとを有する端末装置によって実行される画像表示プログラムは、前記コンピュータを、前記撮影手段によって撮影された画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段、前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段、として機能させ、前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる。
【図面の簡単な説明】
【００１１】
【図１】端末保持装置に保持された状態にある端末装置を示す。
【図２】端末ホルダを回転させた状態の例を示す。
【図３】端末装置の概略構成を示す。
【図４】第１の例に係る調整用画像例を示す。
【図５】第１の例に係る調整用画面例を示す。
【図６】第２の例に係る調整用画像例及び調整用画面例を示す。
【図７】第１実施例における全体処理を示すフローチャートである。
【図８】第１実施例における調整用画面表示処理を示すフローチャートである。
【図９】第２実施例における全体処理を示すフローチャートである。
【発明を実施するための形態】
【００１２】
本発明の１つの観点では、移動体に取り付けられた保持装置に対して脱着可能な端末装置は、撮影手段と、前記端末装置が前記保持装置に取り付けられた状態において前記撮影手段によって撮影された撮影画像を記憶する記憶手段と、前記記憶手段に記憶された前記撮影画像に基づいて、前記撮影手段の撮影方向を調整するための調整用画像を生成する調整用画像生成手段と、前記調整用画像生成手段によって生成された前記調整用画像を、前記撮影手段によって撮影された前記撮影画像と相互に対比可能な態様で表示する表示制御手段と、を備える。
【００１３】
上記の端末装置は、脱着可能な保持装置を介して移動体に取り付けられ、カメラなどの撮影手段によって移動体の前方を撮影する。記憶手段は、端末装置が保持装置に取り付けられた状態において撮影された撮影画像を記憶する。調整用画像生成手段は、記憶手段に記憶された撮影画像に基づいて、撮影手段の撮影方向を調整するための調整用画像を生成する。つまり、調整用画像生成手段は、ユーザによる撮影方向の調整をアシストするための画像を生成する。表示制御手段は、こうして生成された調整用画像を、撮影手段による実際の撮影画像と相互に対比可能な態様で表示する。
【００１４】
このように、上記の端末装置は、端末装置が保持装置に取り付けられた際に撮影方向の調整が一度行われれば、次に端末装置が保持装置に取り付けられた際には、当該調整が行われた際の撮影画像により生成された調整用画像を現在の撮影画像と相互に対比可能な態様で表示する。そのため、ユーザは、調整用画像が表示された画面を参照することで、容易に、撮影手段の撮影方向を望ましい方向に調整することができる。
【００１５】
上記の端末装置の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の少なくとも一部分の画像を半透明にした画像を、前記調整用画像として生成する。
【００１６】
この態様では、撮影画像の少なくとも一部分の画像を透かし絵で表示させる。これにより、ユーザは、実際の撮影画像と調整用画像とを容易に比較することができ、撮影方向の調整を容易に行うことが可能となる。
【００１７】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の一部分の画像によって形成される画像を、前記調整用画像として生成する。
【００１８】
この態様では、調整用画像生成手段は、例えば撮影画像の一部分の輪郭のみを示す画像を、調整用画像として生成する。このような調整用画像を表示することによっても、ユーザは、実際の撮影画像と調整用画像とを容易に比較することができ、撮影方向の調整を容易に行うことが可能となる。
【００１９】
上記の端末装置の他の一態様では、前記撮影手段は、前記移動体の一部を含む範囲を撮影し、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の中の前記移動体の一部に対応する画像を抽出し、抽出した前記画像を前記一部分の画像として用いる。
【００２０】
この態様では、移動体が移動することで撮影手段により撮影される前方の風景が変化しても撮影画像において変化しない移動体の一部に対応する画像を少なくとも抽出し、抽出した画像に基づいて調整用画像を生成する。このような調整用画像を表示することにより、端末装置が保持装置に取り外された時点から端末装置が保持装置に取り付けられた時点で移動体が移動していても、撮影方向の調整を適切に行うことが可能となる。
【００２１】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像の下部に位置する所定範囲内の画像を、前記一部分の画像として用いる。
【００２２】
こうして生成される調整用画像を表示することによっても、端末装置が保持装置に取り外された時点から端末装置が保持装置に取り付けられた時点で移動体が移動していても、撮影方向の調整を適切に行うことが可能となる。また、当該態様によれば、撮像画像から所定範囲内の画像を抽出する処理を行えば足りるため、簡便な処理にて調整用画像を生成することができる。
【００２３】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記記憶手段に記憶された前記撮影画像において前記移動体の前方の風景を少なくとも含む画像に基づいて前記調整用画像を生成し、前記表示制御手段は、前記端末装置が前記保持装置に取り付けられた地点が、前記端末装置が前記保持装置から取り外された地点に略一致する場合に、前記調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００２４】
この態様では、端末装置が取り付けられた地点が、端末装置が取り外された地点に略一致する場合には、撮影手段により撮影される前方の風景がほとんど変化しないものとして、移動体の前方の風景を少なくとも含む画像に基づいて生成された調整用画像を表示する。これによっても、ユーザは撮影方向の調整を容易に行うことができる。また、当該態様によれば、簡便な処理にて調整用画像を生成することができる。
【００２５】
上記の端末装置の他の一態様では、前記表示制御手段は、前記端末装置が前記保持装置に取り付けられた際に、前記調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００２６】
この態様によれば、主に走行開始時において撮影方向の調整をユーザに行わせることが可能となる。つまり、走行開始後の走行中や停止中などにおいて撮影方向の調整が行われることを抑制することが可能となる。
【００２７】
上記の端末装置の他の一態様では、前記撮影手段によって撮影された撮影画像を用いて経路案内を行う経路案内手段を更に備え、前記記憶手段は、前記経路案内手段によって前記経路案内が行われている際に、前記撮影手段によって撮影された前記撮影画像を順次記憶する。
【００２８】
この態様では、経路案内が行われている際には撮影方向の調整が適切に行われた状態にあるものとして、この際の撮影画像を順次記憶する。これにより、撮影方向の調整が適切に行われた状態にある撮影画像に基づいて、調整用画像を適切に生成することが可能となる。
【００２９】
上記の端末装置において好適には、前記調整用画像生成手段は、前記経路案内手段による前記経路案内が終了された際に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成する。また、好適には、前記調整用画像生成手段は、前記端末装置が前記保持装置から取り外された際に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成する。このような際に調整用画像を生成することで、撮影方向の調整が適切に行われた状態にある撮影画像に基づいて、調整用画像を適切に生成することができる。
【００３０】
上記の端末装置の他の一態様では、前記撮影手段によって撮影された撮影画像を用いて経路案内を行う経路案内手段と、前記調整用画像を生成するか否かの決定をユーザから取得する取得手段と、を更に備え、前記取得手段は、前記経路案内手段による前記経路案内が終了された際に、前記調整用画像を生成するか否かの決定をユーザから取得し、前記記憶手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記撮影手段によって撮影された前記撮影画像を記憶し、前記調整用画像生成手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成する。
【００３１】
この態様によれば、調整用画像を生成するか否かをユーザの意思により決定させることができる。また、当該態様によれば、撮影画像を順次記憶するような処理を行わないため、処理負荷を軽減することが可能となる。
【００３２】
上記の端末装置の他の一態様では、前記調整用画像生成手段は、前記調整用画像として、前記端末装置が縦長に配置された場合に前記調整に用いるための第１調整用画像と、前記端末装置が横長に配置された場合に前記調整に用いるための第２調整用画像とを生成し、前記表示制御手段は、前記端末装置が縦長に配置された場合には、前記第１調整用画像を前記撮影画像と相互に対比可能な態様で表示し、前記端末装置が横長に配置された場合には、前記第２調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００３３】
この態様によれば、端末装置が縦長に配置された場合及び端末装置が横長に配置された場合の両方について、適切な調整用画像を生成することができると共に、適切な調整用画面を表示させることができる。
【００３４】
上記の端末装置の他の一態様では、前記端末装置は、複数の移動体に前記保持装置を介して取り付けられ、前記複数の移動体ごとに前記調整用画像生成手段によって生成された前記調整用画像を、前記複数の移動体に対応付けて記憶する調整用画像記憶手段を更に備え、前記表示制御手段は、前記複数の移動体の中で前記端末装置が取り付けられている移動体に対応する前記調整用画像を前記調整用画像記憶手段から取得し、取得した前記調整用画像を前記撮影画像と相互に対比可能な態様で表示する。
【００３５】
この態様によれば、端末装置を複数の移動体に取り付けて利用する場合にも、それぞれの移動体に応じた調整用画面を適切に表示させることができる。
【００３６】
本発明の他の観点では、移動体に取り付けられた保持装置に対して脱着可能であり、撮影手段を有する端末装置によって実行される画像表示方法は、前記端末装置が前記保持装置に取り付けられた状態において前記撮影手段によって撮影された撮影画像を記憶する記憶工程と、前記記憶工程によって記憶された前記撮影画像に基づいて、前記撮影手段の撮影方向を調整するための調整用画像を生成する調整用画像生成工程と、前記調整用画像生成工程によって生成された前記調整用画像を、前記撮影手段によって撮影された前記撮影画像と相互に対比可能な態様で表示する表示制御工程と、を備える。
【００３７】
また、本発明の他の観点では、移動体に取り付けられた保持装置に対して脱着可能であり、撮影手段を有すると共にコンピュータを有する端末装置によって実行される画像表示プログラムは、前記コンピュータを、前記端末装置が前記保持装置に取り付けられた状態において前記撮影手段によって撮影された撮影画像を記憶する記憶手段、前記記憶手段によって記憶された前記撮影画像に基づいて、前記撮影手段の撮影方向を調整するための調整用画像を生成する調整用画像生成手段、前記調整用画像生成手段によって生成された前記調整用画像を、前記撮影手段によって撮影された前記撮影画像と相互に対比可能な態様で表示する表示制御手段、として機能させる。
【００３８】
上記の画像表示方法及び画像表示プログラムによっても、ユーザは、調整用画面を参照することで、撮影方向の調整を容易に行うことができる。
【実施例】
【００３９】
以下、図面を参照して本発明の好適な実施例について説明する。
【００４０】
［装置構成］
まず、本実施例に係る端末装置の構成について説明する。
【００４１】
図１は、端末保持装置１に保持された状態にある端末装置２を示している。図１（ａ）は正面図を示しており、図１（ｂ）は側面図を示しており、図１（ｃ）は背面図を示している。
【００４２】
端末保持装置１は、主に、ベース１１と、ヒンジ１２と、アーム１３と、基板ホルダ１５と、端末ホルダ１６とを備える。端末保持装置１は、いわゆるクレードルとして機能し、スマートフォンなどの端末装置２が取り付けられる。
【００４３】
ベース１１は、端末保持装置１を車両などの移動体に取り付ける際の土台として機能する。例えば、ベース１１の下面には吸盤や粘着テープなどが設けられ、ベース１１はその粘着テープにより車両のダッシュボードなどの設置面５に固定される。
【００４４】
ヒンジ１２は、アーム１２に固定されるとともに、ベース１１に対して回転可能に取り付けられている。ヒンジ１２の回転により、アーム１２は端末装置２の前後方向、つまり図１（ｂ）の矢印４１及び４２の方向に回動する。つまり、車両の設置面５に固定されたベース１１に対してヒンジ１２を介してアーム１２を回転させることにより、設置面５に対する基板ホルダ１５及び端末ホルダ１６の設置角度が調整可能となっている。
【００４５】
基板ホルダ１５は、カバー１５ａと、ボールリンク１５ｂと、センサ基板１５ｃと、センサ１５ｄとを備える。ボールリンク１５ｂは、アーム１３の上端に取り付けられており、アーム１３に対して基板ホルダ１５を任意の角度で保持する。カバー１５ａは、基板ホルダ１５の下端に設けられており、アーム１３に対する基板ホルダ１５の回転を規制する役割を有する。基板ホルダ１５の内部にはセンサ基板１５ｃが設けられており、センサ基板１５ｃにはセンサ１５ｄが設けられている。
【００４６】
端末ホルダ１６は、端末装置２を保持するホルダである。端末ホルダ１６は、コネクタ１６ａ及び配線１６ｂを有する。コネクタ１６ａは、端末ホルダ１６の前面、即ち端末装置２が設置される面の底部に設けられ、端末装置２を端末ホルダ１６に設置する際に、端末装置２のコネクタと接続される。コネクタ１６ａは、配線１６ｂによりセンサ基板１５ｃと電気的に接続されている。よって、センサ１５ｄによる検出信号は、センサ基板１５ｃ、配線１６ｂ及びコネクタ１６ａを通じて端末装置２へ供給される。
【００４７】
端末装置２は、端末装置２本体の前面側であり液晶表示パネルなどの表示部２５を有する前面２ａと、端末装置２本体の背面側の背面２ｂとを備える。通常、端末装置２は矩形の平板形状に構成されており、前面２ａと背面２ｂとが略平行に構成されている。
【００４８】
端末ホルダ１６は前面側に接触面１６ｃを有する。端末装置２を端末ホルダ１６に取り付けた際、接触面１６ｃは、端末装置２の背面２ｂに当接し、端末装置２の背面２ｂを支持する。なお、図１に示す例では、端末ホルダ１６の接触面１６ｃは、その全面が端末装置２の背面２ｂと接触するように構成されている。この代わりに、接触面１６ｃのうちの１カ所又は数カ所を部分的に突出させ、その突出した部分のみが端末装置２の背面２ｂに当接する構造としても構わない。
【００４９】
端末装置２の背面２ｂには、カメラ２９が設けられている。また、端末保持装置１の端末ホルダ１６には、端末装置２が端末保持装置１に保持された状態においてカメラ２９の対向する位置に、孔部１７が形成されている。孔部１７は、カメラ２９のレンズの径よりも大きな径に構成されている。これにより、端末装置２が端末保持装置１に保持された状態において、カメラ２９は、端末ホルダ１６の外壁に阻害されることなく、端末ホルダ１６の後ろ側を撮影することができる。具体的には、カメラ２９は車両の外部などを撮影する。
【００５０】
なお、図１に示す例では、端末ホルダ１６は、端末装置２の背面２ｂの略全面を覆うように構成され、端末装置２のカメラ２９の対向する位置に孔部１７が形成されている。この代わりに、端末装置２が端末保持装置１に保持された状態にて、端末装置２においてカメラ２９が設けられた位置よりも下方の面のみを覆うように、端末ホルダ１６を構成することができる。１つの例では、端末ホルダ１６の接触面１６ｃを、端末装置２のカメラ２９が設けられた位置よりも下方の位置まで延在するような形状（言い換えると、端末装置２のカメラ２９が設けられた位置よりも上方に接触面１６ｃが存在しないような形状）に構成することができる。このような他の例では、端末保持装置１に孔部１７を形成する必要はない。
【００５１】
また、図１に示す例では、端末装置２の背面２ｂの左右方向における略中心線上にカメラ２９が設けられているが、このような位置にカメラ２９を設けることに限定はされない。例えば、背面２ｂの左右方向における中心線からある程度離れた位置にカメラ２９を設けても良い。この場合には、端末ホルダ１６に孔部１７を形成する代わりに、端末装置２が端末保持装置１に保持された状態にて、端末装置２においてカメラ２９が設けられた位置を含む部分に切り欠き部を形成することとしても良い。
【００５２】
次に、基板ホルダ１５に対する端末ホルダ１６の回転機能について説明する。端末装置２を保持する端末ホルダ１６は、基板ホルダ１５に対して、９０度単位で回転可能である。即ち、図１（ａ）の状態を回転角０度とした場合、端末ホルダ１６は、時計回り又は反時計回りに０度、９０度、１８０度、２７０度の４つの角度に回転した状態で固定することが可能である。なお、回転角９０度毎に固定可能とした理由は、通常、端末装置２を見る際に、ユーザは表示部２５を縦長又は横長に配置した状態で使用するためである。なお、前述のように、端末装置２は通常、矩形の平板形状を有しており、「縦長に配置」とは、表示部２５の長手方向が縦となるような配置であり、「横長に配置」とは、表示部２５の長手方向が横となるような配置である。
【００５３】
図２に端末ホルダ１６を回転させた状態の例を示す。端末保持装置１を正面側から見た場合、図２（ａ）の状態から矢印の方向に端末ホルダ１６を９０度回転させると、図２（ｂ）に示す状態となる。また、端末保持装置１を背面側から見た場合、図２（ｃ）の状態から矢印の方向に端末ホルダを９０度回転させると、図２（ｄ）に示す状態となる。
【００５４】
構造的には、例えば基板ホルダ１５の略中央に回転軸（図示せず）を設け、この回転軸に対して端末ホルダ１６を固定することにより、基板ホルダ１５に対して端末ホルダ１６を回転可能とすることができる。また、基板ホルダ１５と端末ホルダ１６が相互に当接する面において、回転角９０度毎に相互にはまり合う凹凸又は溝と突起などを設けることにより、９０度毎の回転角位置において端末ホルダ１６を固定することができる。なお、このような構造は単なる一例であり、センサ基板１５ｃに対して端末ホルダ１６を回転角９０度毎に固定できれば、他の構造を採用しても構わない。
【００５５】
次に、図３は、端末装置２の構成を概略的に示している。図３に示すように、端末装置２は、主に、ＣＰＵ２１と、ＲＯＭ２２と、ＲＡＭ２３と、通信部２４と、表示部２５と、スピーカ２６と、マイク２７と、操作部２８と、カメラ２９とを有する。端末装置２は、スマートフォンなどの通話機能を有する携帯型端末装置である。例えば、端末装置２は、端末保持装置１に保持された状態で、車両の運転者が表示部２５を視認できるようなダッシュボード上の位置に設置される。
【００５６】
ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２１は、端末装置２全体についての制御を行う。ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２２は、端末装置２を制御するための制御プログラム等が格納された図示しない不揮発性メモリ等を有する。ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２３は、操作部２６を介してユーザにより設定されたデータを読み出し可能に格納したり、ＣＰＵ２１に対してワーキングエリアを提供したりする。
【００５７】
通信部２４は、通信網を介して他の端末装置２と無線通信を行うことが可能に構成されている。表示部２５は、例えば液晶ディスプレイなどにより構成され、ユーザに対して文字、画像などを表示する。スピーカ２６は、ユーザに対する音声出力を行う。マイク２７は、ユーザによって発せられた音声などを集音する。
【００５８】
操作部２８は、端末装置２の筐体に設けられた操作ボタンやタッチパネル式入力装置などにより構成することができ、ユーザによる各種の選択、指示が入力される。なお、表示部２５がタッチパネル方式である場合には、表示部２５の表示画面上に設けられたタッチパネルも操作部２８として機能する。
【００５９】
カメラ２９は、例えばＣＣＤカメラにより構成され、図１に示したように端末装置２の背面２ｂに設けられている。基本的には、カメラ２９の光軸（レンズの中心から垂直方向に伸びる軸）の方向は、端末装置２の背面２ｂの垂直方向（言い換えると法線方向）に一致する。なお、カメラ２９を、端末装置２の背面２ｂだけでなく、端末装置２の前面２ａにも設けても良い。
【００６０】
なお、カメラ２９は本発明における撮影手段の一例に相当し、ＲＯＭ２２は本発明における記憶手段の一例に相当し、ＣＰＵ２１は本発明における調整用画像生成手段、表示制御手段、経路案内手段、取得手段、及び調整用画像記憶手段の一例に相当する（詳細は後述する）。
【００６１】
［撮影方向の調整方法］
次に、本実施例に係る、カメラ２９の撮影方向の調整方法について説明する。
【００６２】
まず、撮影方向の調整を行う理由などについて簡単に説明する。前述したように、端末保持装置１を介して端末装置２を車両に設置した状態で、端末装置２のカメラ２９によって撮影された車両前方の画像を用いて経路案内を行うＡＲナビが知られている。ＡＲナビは、カメラ２９による撮影画像の上に、目的地までの方向や距離などの経路案内のための画像を重ねて表示するものである。そのため、ＡＲナビを行う場合には、カメラ２９の撮影方向（具体的にはカメラ２９内のレンズの光軸の方向）が車両の進行方向に一致していることが望ましいと言える。しかしながら、ユーザは、車両内の任意の位置に端末保持装置１を設置すると共に、任意の向きにて端末装置２を設置する傾向にある。したがって、当初の設置状態においては、カメラ２９の撮影方向が車両の進行方向に一致しない傾向にある。よって、端末装置２が設置された後に、カメラ２９の撮影方向が車両の進行方向に一致するように調整されることが望ましいと言える。
【００６３】
本実施例では、このようなことを勘案して、ユーザが手動でカメラ２９の撮影方向の調整を行う際のアシストを行う。具体的には、本実施例では、ユーザによる撮影方向の調整をアシストするための調整用画像を表示部２５に表示する。より具体的には、本実施例では、端末装置２内のＣＰＵ２１が、撮影方向の調整が適切に行われた状態にあるカメラ２９の撮影画像に基づいて調整用画像を生成しておき、ユーザによる撮影方向の調整が行われるような状況において、当該調整用画像を実際の撮影画像と相互に対比可能な態様で表示部２５に表示させることで、ユーザによる撮影方向の調整をアシストする。
【００６４】
なお、カメラ２９の「撮影方向」は、カメラ２９が向いている方向を意味し、より詳しくはカメラ２９のレンズにおける光軸の方向に相当する。また、車両の「進行方向」とは、車両の前後方向（具体的には前方方向）を意味するものとする。
【００６５】
より詳しくは、ＣＰＵ２１は、端末装置２が端末保持装置１から取り外された際やＡＲナビが終了された際などにおいて、その直前に表示されていた撮影画像に基づいて調整用画像を生成し、当該調整用画像をＲＯＭ２２などに記憶させておく。そして、この後に端末装置２が端末保持装置１に取り付けられた際に、ＣＰＵ２１は、記憶されている調整用画像を撮影画像に重畳した画面（以下では「調整用画面」と呼ぶ。）を表示部２５に表示させる。ユーザは、このような調整用画面を参照して、カメラ２９による実際の撮影画像と調整用画像とを比較することで、カメラ２９の撮影方向の調整（言い換えると端末装置２の向きの調整）を行う。
【００６６】
以上説明したように、本実施例では、端末装置２が端末保持装置１に取り付けられた際に撮影方向の調整が一度行われれば、次に端末装置２が端末保持装置１に取り付けられた際には、当該調整が行われた際の撮影画像により生成された調整用画像を現在の撮影画像と重畳して表示する。そのため、ユーザは、調整用画面を参照することで、容易に、カメラ２９の撮影方向を望ましい方向に調整することができる。
【００６７】
以下で、本実施例に係る調整用画像の生成方法の具体例について説明する。本実施例では、端末装置２内のＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられた状態においてカメラ２９によって撮影された撮影画像を記憶させておき、記憶された撮影画像に基づいて調整用画像を生成する。この場合、ＣＰＵ２１は、記憶された撮影画像内において撮影方向の調整を行う際にガイドとなるような部分を、画像処理を行うことで抽出して、抽出した部分に対応する画像に基づいて調整用画像を生成する。例えば、ＣＰＵ２１は、車両が移動することでカメラ２９に取り込まれる車両前方の風景が変化しても、カメラ２９による撮影画像において変化しないような部分を少なくとも抽出する。車両前方の風景が変化しても撮影画像において変化しない部分の例としては、車両のボンネットやバンパーやＡピラーなどの車両の一部に対応する画像が挙げられる。また、ＣＰＵ２１は、例えば２値化処理や輪郭抽出や複数の画像の差分に応じた処理などの画像処理を行うことで、撮影画像から上記のような画像を抽出する。
【００６８】
ここで、調整用画像の生成方法に関する第１の例及び第２の例について説明する。
【００６９】
第１の例では、ＣＰＵ２１は、少なくとも撮影画像から抽出された部分を半透明にした画像を調整用画像として生成する、言い換えると抽出された部分を「透かし絵」とした画像を調整用画像として生成する。具体的には、ＣＰＵ２１は、撮影画像において車両の一部などを少なくとも含む部分を半透明にした画像を調整用画像として生成する。そして、ＣＰＵ２１は、こうして生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を表示部２５に表示させる。
【００７０】
図４は、第１の例に係る調整用画像の一例を示す図である。図４（ａ）は、カメラ２９による撮影画像の一例を示している。この撮影画像は、カメラ２９によって撮影された車両前方の画像例を示している。端末装置２内のＣＰＵ２１は、図４（ａ）に示すような撮影画像に対して２値化処理を行うことで、図４（ｂ）に示すような画像を生成する。そして、ＣＰＵ２１は、図４（ｂ）に示すような画像の上部に位置する画像５０をグラデーションでその中身を消すことで、図４（ｃ）に示すような画像を生成する。これにより、車両のボンネット部分に対応する画像などが主に抽出され、その他の部分が消されたような画像が生成される。この後、ＣＰＵ２１は、図４（ｃ）に示すような画像を半透明にした画像を調整用画像として用いる。
【００７１】
図５は、第１の例に係る調整用画面の一例を示す図である。具体的には、図５は、図４で示した方法により生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を例示している。図５に示すように、調整用画面では、半透明にされた調整用画像を透して、実際の撮影画像が視認されるように構成されている。なお、調整用画像を無彩色で表示することに限定はされず、調整用画像を所定の有彩色で表示しても良い。
【００７２】
ユーザは、図５に示すような調整用画面を参照することで、カメラ２９の撮影方向の調整（言い換えると端末装置２の向きの調整）を行う。具体的には、ユーザは、カメラ２９による実際の撮影画像においてボンネット部分に対応する画像の位置が、調整用画像においてボンネット部分に対応する画像の位置に一致するように、カメラ２９の撮影方向の調整を行う。
【００７３】
次に、第２の例では、ＣＰＵ２１は、撮影画像から抽出された画像によって形成される画像を調整用画像として生成する、つまり抽出された画像以外の画像を撮影画像から取り除いた画像に基づいて調整用画像を生成する。具体的には、ＣＰＵ２１は、撮影画像において車両の一部の輪郭を示す画像を調整用画像として生成する。そして、ＣＰＵ２１は、こうして生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を表示部２５に表示させる。
【００７４】
図６は、第２の例に係る調整用画像及び調整用画面の一例を示す図である。図６（ａ）は、図４（ａ）と同様の撮影画像の一例を示している。図６（ｂ）は、第２の例に係る調整用画像の一例を示す。端末装置２内のＣＰＵ２１は、図６（ａ）に示すような撮影画像から車両の一部に対応する画像を抽出するための画像処理を行うことで、図６（ｂ）に示すような調整用画像を生成する。この調整用画像は、車両のボンネット部分の輪郭を示す画像６０のみから構成されている。例えば、ＣＰＵ２１は、カメラ２９によって撮影された複数の撮影画像を比較して、当該複数の撮影画像において変化していない部分を抽出することで（言い換えると変化する部分を取り除くことで）、このような調整用画像を生成する。
【００７５】
図６（ｃ）は、第２の例に係る調整用画面の一例を示す図である。具体的には、図６（ｃ）は、図６（ｂ）で示した方法により生成された調整用画像を、カメラ２９による実際の撮影画像に重畳した調整用画面を例示している。この調整用画面では、車両のボンネット部分の輪郭を示す画像６０が、実際の撮影画像上に重畳されている。なお、画像６０を無彩色で表示することに限定はされず、画像６０を所定の有彩色で表示しても良い。
【００７６】
ユーザは、このような調整用画面を参照することで、カメラ２９の撮影方向の調整（言い換えると端末装置２の向きの調整）を行う。具体的には、ユーザは、カメラ２９による実際の撮影画像においてボンネット部分に対応する画像の位置が、調整用画像における画像６０が示すボンネット部分に対応する位置に一致するように、カメラ２９の撮影方向の調整を行う。
【００７７】
以上に例示したような方法で調整用画像を生成することにより、ユーザによる撮影方向の調整を効果的にアシストすることが可能な調整用画像を適切に生成することができる。また、例示したような調整用画面を表示することで、ユーザは、撮影方向の調整を容易に行うことができる。
【００７８】
なお、上記では、撮影画像から車両の一部に対応する画像を抽出することで調整用画像を生成する例を示したが、このような調整用画像を用いることに限定はされない。他の例では、撮影画像の下部に位置する所定範囲内の画像を、調整用画像として用いることができる。こうしているのは、撮影画像の下部には、車両前方の風景が変化しても撮影画像において変化しないような、車両のボンネットやバンパーやＡピラーなどの車両の一部に対応する画像が含まれる傾向にあるからである。つまり、他の例では、撮影画像から車両の一部に対応する画像を抽出するための画像処理を行わずに、撮影画像の下部には車両の一部に対応する画像が含まれているとの想定に基づき、撮影画像の下部に位置する所定範囲内の画像を調整用画像として用いる。例えば、「撮影画像の下部に位置する所定範囲」とは、撮影画像において車両の一部が少なくとも含まれるような予め設定した範囲を用いることができる。
【００７９】
また、このような他の例を実施する場合、上記した第１の例を適用することができる。具体的には、撮影画像の下部に位置する所定範囲内の画像を半透明にした画像を、調整用画像として生成することができる。
【００８０】
［第１実施例に係るフロー］
次に、上記した実施例に関する第１実施例について説明する。具体的には、図７及び図８を参照して、第１実施例において調整用画像の生成及び調整用画面の表示を行う際に実行される処理について説明する。
【００８１】
図７は、第１実施例における全体処理を示すフローチャートである。当該処理では、主に、端末装置２が端末保持装置１に取り付けられた際に調整用画面を表示する処理、及び、端末装置２が端末保持装置１から取り外された際及びＡＲナビが終了された際に、その直前に表示されていた撮影画像に基づいて調整用画像を生成する処理が実行される。なお、当該処理は、端末装置２内のＣＰＵ２１がＲＯＭ２２などに記憶されたプログラムを実行することにより実現される。
【００８２】
まず、ステップＳ１０１では、ＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられたか否かを判定する。例えば、端末装置２の取り付け及び取り外しを検出するセンサを端末保持装置１などに設けておき、ＣＰＵ２１は、当該センサからの出力信号を取得して、ステップＳ１０１の判定を行うことができる。端末装置２が端末保持装置１に取り付けられた場合（ステップＳ１０１；Ｙｅｓ）、処理はステップＳ１０２に進み、端末装置２が端末保持装置１に取り付けられていない場合（ステップＳ１０１；Ｎｏ）、処理はステップＳ１０１に戻る。
【００８３】
ステップＳ１０２では、ＣＰＵ２１は、調整用画面を表示する処理（以下、「調整用画面表示処理」と呼ぶ。調整用画面表示処理の詳細は後述する。）を行う。このように端末装置２が端末保持装置１に取り付けられた際に調整用画面を表示するのは、主に走行開始時において撮影方向の調整をユーザに行わせるためである。言い換えると、走行開始後の走行中や停止中などにおいて撮影方向の調整が行われることを抑制するためである。ステップＳ１０２の処理後、処理はステップＳ１０３に進む。
【００８４】
ステップＳ１０３では、ＣＰＵ２１は、ＡＲナビを起動する。そして、処理はステップＳ１０４に進む。ステップＳ１０４では、撮影画像を前回記憶してから、所定時間が経過したか否かを判定する。当該判定は、所定時間ごとに繰り返し、撮影画像を記憶するために行っている。所定時間経過している場合（ステップＳ１０４；Ｙｅｓ）、処理はステップＳ１０５に進み、所定時間経過していない場合（ステップＳ１０４；Ｎｏ）、処理はステップＳ１０４に戻る。
【００８５】
ステップＳ１０５では、ＣＰＵ２１は、カメラ２９によって現在撮影された撮影画像を、ＲＯＭ２２などに記憶させる。この場合、ＣＰＵ２１は、前回記憶された撮影画像を、今回撮影された撮影画像によって上書きする。そして、処理はステップＳ１０６に進む。
【００８６】
ステップＳ１０６では、ＣＰＵ２１は、端末装置２が端末保持装置１から取り外されたか否かを判定する。この判定も、ステップＳ１０１と同様に、例えば端末保持装置１に設けられたセンサからの出力信号に基づいて実行することができる。端末装置２が端末保持装置１から取り外された場合（ステップＳ１０６；Ｙｅｓ）、処理はステップＳ１０８に進み、端末装置２が端末保持装置１から取り外されていない場合（ステップＳ１０６；Ｎｏ）、処理はステップＳ１０７に進む。
【００８７】
ステップＳ１０７では、ＣＰＵ２１は、ＡＲナビが終了したか否かを判定する。ＡＲナビが終了した場合（ステップＳ１０７；Ｙｅｓ）、処理はステップＳ１０８に進み、ＡＲナビが終了していない場合（ステップＳ１０７；Ｎｏ）、処理はステップＳ１０４に戻る。
【００８８】
ステップＳ１０８では、ＣＰＵ２１は、ステップＳ１０５で記憶された撮影画像に基づいて調整用画像を生成する。具体的には、ＣＰＵ２１は、前述したような方法により、記憶された撮影画像に基づいて調整用画像を生成し、生成した調整用画像をＲＯＭ２２などに記憶させる。例えば、ＣＰＵ２１は、前回生成した調整用画像を、今回生成した調整用画像によって上書きする。
【００８９】
ステップＳ１０８の処理は、端末装置２が端末保持装置１から取り外された際又はＡＲナビが終了した際に実行されるため、端末装置２が取り外される直前に記憶された撮影画像又はＡＲナビが終了する直前に記憶された撮影画像に基づいて、調整用画像が生成されることとなる。第１実施例では、端末装置２が取り外された際及びＡＲナビが終了した際においては、撮影方向の調整が適切に行われた状態にあるものとして、この際の撮影画像に基づいて調整用画像を生成することとしている。以上のステップＳ１０８の処理後、処理は終了する。
【００９０】
図８は、上記のステップＳ１０２で行われる調整用画面表示処理を示すフローチャートである。当該処理も、端末装置２内のＣＰＵ２１がＲＯＭ２２などに記憶されたプログラムを実行することにより実現される。
【００９１】
まず、ステップＳ２０１では、ＣＰＵ２１は、調整用画像が存在するか否かを判定する。つまり、ＣＰＵ２１は、ＲＯＭ２２などに調整用画像が記憶されているか否かを判定する。調整用画像がある場合には（ステップＳ２０１；Ｙｅｓ）、処理はステップＳ２０２に進み、調整用画像がない場合には（ステップＳ２０１；Ｎｏ）、処理はステップＳ２０５に進む。後者の場合には、調整用画像が未だ生成されていないため、調整用画面は表示されない。
【００９２】
ステップＳ２０２では、ＣＰＵ２１は、ＲＯＭ２２などに記憶されている調整用画像を撮影画像に重畳した調整用画面を表示部２５に表示させる。この後、ユーザにより、調整用画面を参照した撮影方向の調整が行われる。そして、処理はステップＳ２０３に進む。
【００９３】
ステップＳ２０３では、ＣＰＵ２１は、ユーザから調整用画面の表示を終了するとの指示が取得されたか否かを判定する。この場合、ＣＰＵ２１は、操作部２８やマイク２７などを介してユーザの指示を取得することで、当該判定を行う。調整用画面の表示を終了するとの指示が取得された場合（ステップＳ２０３；Ｙｅｓ）、処理はステップＳ２０４に進み、調整用画面の表示を終了するとの指示が取得されていない場合（ステップＳ２０３；Ｎｏ）、処理はステップＳ２０３に戻る。
【００９４】
ステップＳ２０４では、ＣＰＵ２１は、ユーザからの指示に従って、調整用画面の表示を終了させる。そして、処理はステップＳ２０５に進む。ステップＳ２０５では、ＣＰＵ２１は、カメラ２９による撮影画像を表示部２５に表示させる。つまり、ＣＰＵ２１は、この後にＡＲナビを行うために撮影画像を表示させる。そして、処理は終了する。
【００９５】
以上説明した第１実施例によれば、撮影方向の調整をアシストするための調整用画像を適切に生成することができると共に、当該調整用画像を重畳した調整用画面を表示することで、撮影方向の調整をユーザに容易に行わせることができる。
【００９６】
なお、上記したようなＡＲナビの実行中において、端末装置２の電源がオフにされた場合には、この後に端末装置２の電源がオンにされた際に、電源がオフにされる直前に記憶された撮影画像に基づいて調整用画像を生成すれば良い。
【００９７】
［第２実施例に係るフロー］
次に、第２実施例について説明する。具体的には、第２実施例において調整用画像の生成を行う際に実行される処理について説明する。
【００９８】
上記した第１実施例では、端末装置２が端末保持装置１から取り外された際及びＡＲナビが終了された際に、調整用画像を生成していた。第２実施例では、ＡＲナビが終了された際に調整用画像を生成するか否かをユーザに問い合わせ、ユーザが調整用画像を生成すると決定した場合に調整用画像を生成する点で、第１実施例と異なる。より具体的には、第１実施例では、端末装置２が端末保持装置１から取り外されるまで及びＡＲナビが終了されるまで、調整用画像を生成するために用いる撮影画像を順次記憶していたが、第２実施例では、このように撮影画像を順次記憶しない。第２実施例では、ＡＲナビが終了された際にユーザが調整用画像を生成すると決定した場合に、調整用画像を生成するために用いる撮影画像を記憶し、当該撮影画像に基づいて調整用画像を生成する。
【００９９】
図９は、第２実施例における全体処理を示すフローチャートである。当該処理は、端末装置２内のＣＰＵ２１がＲＯＭ２２などに記憶されたプログラムを実行することにより実現される。
【０１００】
ステップＳ３０１〜Ｓ３０３の処理は、図８に示したステップＳ１０１〜Ｓ１０３の処理と同様であるため、その説明を省略する。ここでは、ステップＳ３０４以降の処理について説明する。
【０１０１】
ステップＳ３０４では、ＣＰＵ２１は、ＡＲナビが終了したか否かを判定する。ＡＲナビが終了した場合（ステップＳ３０４；Ｙｅｓ）、処理はステップＳ３０５に進み、ＡＲナビが終了していない場合（ステップＳ３０４；Ｎｏ）、処理はステップＳ３０４に戻る。
【０１０２】
ステップＳ３０５では、ＣＰＵ２１は、調整用画像を生成するか否かをユーザに問い合わる。例えば、ＣＰＵ２１は、調整用画像を生成するか否かの決定をユーザに求めるための情報を、表示部２５に表示させたり、スピーカ２６より出力させたりする。そして、処理はステップＳ３０６に進む。
【０１０３】
ステップＳ３０６では、ＣＰＵ２１は、ステップＳ３０５の問い合わせにより、ユーザから調整用画像を生成するとの決定が取得されたか否かを判定する。この場合、ＣＰＵ２１は、操作部２８やマイク２７などを介してユーザの決定を取得することで、当該判定を行う。調整用画像を生成するとの決定が取得された場合（ステップＳ３０６；Ｙｅｓ）、処理はステップＳ３０７に進み、調整用画像を生成するとの決定が取得されなかった場合（ステップＳ３０６；Ｎｏ）、処理は終了する。
【０１０４】
ステップＳ３０７では、ＣＰＵ２１は、カメラ２９によって現在撮影された撮影画像をＲＯＭ２２などに記憶させ、記憶された撮影画像に基づいて調整用画像を生成する。この場合、ＣＰＵ２１は、前述したような方法により調整用画像を生成し、生成した調整用画像をＲＯＭ２２などに記憶させる。例えば、ＣＰＵ２１は、前回生成した調整用画像を、今回生成した調整用画像によって上書きする。
【０１０５】
第２実施例では、ユーザから調整用画像を生成するとの決定が得られた状況においては撮影方向の調整が適切に行われた状態にあるものとして、この際の撮影画像を記憶し、当該撮影画像に基づいて調整用画像を生成することとしている。以上のステップＳ３０７の処理後、処理は終了する。
【０１０６】
以上説明した第２実施例によれば、調整用画像を生成するか否かをユーザの意思により決定させることができる。そのため、例えば端末装置２が適切に設置されていないとユーザが判断できるような状況において、不要な撮影画像の記憶や調整用画像の生成を抑制することができる。また、第２実施例によれば、第１実施例と比較して、撮影画像を順次記憶するような処理を行わないため、処理負荷を軽減することが可能となる。
【０１０７】
なお、第１実施例では、ＡＲナビの実行中に所定時間ごとに撮影画像を順次記憶させるため、端末装置２が端末保持装置１から取り外された場合や端末装置２の電源がオフにされた場合にも、記憶している撮影画像に基づいて適切な調整用画像を生成することができる。
【０１０８】
［変形例］
次に、変形例について説明する。
【０１０９】
（第１変形例）
上記では、撮影画像の一部に対応する画像に基づいて調整用画像を生成する実施例を示したが、第１変形例では、撮影画像の概ね全体の画像に基づいて調整用画像を生成する。具体的には、第１変形例では、ＣＰＵ２１は、車両前方の風景を少なくとも含む画像に基づいて調整用画像を生成する。例えば、ＣＰＵ２１は、撮影画像の全体を半透明にすることで調整用画像を生成する。
【０１１０】
１つの例では、ＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられた地点が、その前に端末装置２が端末保持装置１から取り外された地点に一致する場合にのみ、第１変形例に係る調整用画像を表示させることができる。こうするのは、端末装置２が取り付けられた地点が、その前に端末装置２が取り外された地点に一致する場合には（例えば駐車場にて端末装置２の脱着が行われた場合）、端末装置２が取り外された際と端末装置２が取り付けられた際とで、車両前方の風景はほとんど変化しておらず、上記のような第１変形例に係る調整用画像を用いて適切に撮影方向の調整を行うことができると考えられるからである。なお、ＣＰＵ２１は、例えば端末装置２内のＧＰＳ受信機が受信する電波に基づいて、端末装置２が取り外された地点と端末装置２が取り付けられた地点とが一致するか否かの判定を行うことができる。
【０１１１】
他の例では、ＣＰＵ２１は、端末装置２が取り付けられた地点が、その前に端末装置２が取り外された地点に一致する場合には、第１変形例に係る調整用画像を表示させることとし、端末装置２が取り付けられた地点が、その前に端末装置２が取り外された地点に一致しない場合には、上記の実施例で示したような、撮影画像の一部に基づいて生成される調整用画像を表示させることができる。つまり、ＣＰＵ２１は、２つの場合にて、表示させる調整用画像を切り替えることができる。
【０１１２】
このような第１変形例に係る調整用画像を表示させた場合にも、撮影方向の調整をユーザに容易に行わせることができる。特に、第１変形例に係る方法は、端末装置２が取り外された地点と端末装置２が取り付けられた地点とが一致する場合に、撮影方向の調整を容易に行わせることができる。
【０１１３】
（第２変形例）
第２変形例では、ＣＰＵ２１は、端末装置２が縦長に配置された場合と横長に配置された場合とで異なる調整用画像を生成して記憶させる。具体的には、ＣＰＵ２１は、端末装置２が縦長に配置されているか横長に配置されているかを判断し、端末装置２が縦長に配置されている場合に生成された調整用画像（以下、「第１調整用画像」と呼ぶ。）と、端末装置２が横長に配置されている場合に生成された調整用画像（以下、「第２調整用画像」と呼ぶ。）とを別個にＲＯＭ２２などに記憶させる。つまり、第１調整用画像及び第２調整用画像の両方について、最新の画像を別々に記憶させる。
【０１１４】
そして、ＣＰＵ２１は、端末装置２が端末保持装置１に取り付けられた際に、端末装置２が縦長に配置されているか横長に配置されているかを判断し、端末装置２が縦長に配置されている場合には第１調整用画像を読み出して表示させ、端末装置２が横長に配置されている場合には第２調整用画像を読み出して表示させる。例えば、ＣＰＵ２１は、端末装置２内又は端末保持装置１内に設けられた、端末装置２の配置状態を検出可能に構成されたセンサの出力より、端末装置２が縦長に配置されているか横長に配置されているかを判断する。
【０１１５】
このような第２変形例によれば、端末装置２が縦長に配置された場合及び端末装置２が横長に配置された場合の両方について、適切な調整用画像を生成して記憶させることができると共に、適切な調整用画面を表示させることができる。
【０１１６】
（第３変形例）
第３変形例では、ＣＰＵ２１は、調整用画像が生成された際に端末装置２が取り付けられていた車種ごとに、当該調整用画像を対応付けて記憶させる。つまり、ＣＰＵ２１は、ユーザが使用する複数の車両のそれぞれで生成された調整用画像を、当該複数の車両に対応付けて別々にＲＯＭ２２などに記憶させる。そして、ＣＰＵ２１は、当該複数の車両の中で端末装置２が現在取り付けられている車両に対応する調整用画像をＲＯＭ２２などから読み出して、読み出した調整用画像を表示させる。例えば、ＣＰＵ２１は、車両に設けられている診断用のポートなどを介して車種や車両情報などを取得することで、端末装置２が取り付けられている車両を特定する。
【０１１７】
このような第３変形例によれば、端末装置２を複数の車両に取り付けて利用する場合にも、それぞれの車両に応じた調整用画面を適切に表示させることができる。
【０１１８】
（その他の変形例）
上記では調整用画像を撮影画像に重畳して表示させる例を示したが、調整用画像と撮影画像とを相互に対比可能な態様であれば、このように重畳して表示させることに限定はされない。他の例では、調整用画像と撮影画像とを並べて表示させることができる。
【０１１９】
上記では、撮影画像の一部又は全部を半透明にすることで生成した画像、及び、撮影画像内の画像の輪郭に基づいて生成した画像を、調整用画像の例として挙げたが、調整のためのガイドとなる画像となるように撮影画像を加工した画像であれば、これらに限られない。
【０１２０】
上記では本発明を車両に適用する例を示したが、本発明の適用はこれに限定されない。本発明は、車両の他に、船や、ヘリコプターや、飛行機などの種々の移動体に適用することができる。
【０１２１】
以上に述べたように、実施例は、上述した実施例に限られるものではなく、特許請求の範囲及び明細書全体から読み取れる発明の要旨あるいは思想に反しない範囲で適宜変更可能である。
【産業上の利用可能性】
【０１２２】
本発明は、通話機能を有する携帯電話や、経路案内を行うナビゲーション装置に利用することができる。
【符号の説明】
【０１２３】
１ 端末保持装置
２ 端末装置
１５ 基板ホルダ
１６ 端末ホルダ
２１ ＣＰＵ
２５ 表示部
２８ 操作部
２９ カメラ
【特許請求の範囲】
【請求項１】
移動体に取り付け可能な端末装置であって、
前記移動体に取り付けられた状態で、当該移動体の進行方向前方を撮影可能な撮影手段と、
前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段と、
前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段と、
を備え、
前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる、ことを特徴とする端末装置。
【請求項２】
前記過去の経路案内に用いられていた撮影画像を記憶する記録手段と、
前記記憶手段に記憶された前記撮影画像に基づいて、前記調整用画像を生成する調整用画像生成手段と、備えることを特徴とする請求項１に記載の端末装置。
【請求項３】
前記調整用画像生成手段は、前記経路案内手段による前記経路案内が終了された際に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成することを特徴とする請求項２に記載の端末装置。
【請求項４】
前記調整用画像を生成するか否かの決定をユーザから取得する取得手段を更に備え、
前記取得手段は、前記経路案内手段による前記経路案内が終了された際に、前記調整用画像を生成するか否かの決定をユーザから取得し、
前記記憶手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記撮影手段によって撮影された前記撮影画像を記憶し、
前記調整用画像生成手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成することを特徴とする請求項２に記載の端末装置。
【請求項５】
移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段を有する端末装置によって実行される画像表示方法であって、
前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内工程と、
前記移動体に取り付けられた後であって、かつ前記経路案内工程による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御工程と、
を備え、
前記表示制御工程は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる、ことを特徴とする画像表示方法。
【請求項６】
移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段と、コンピュータとを有する端末装置によって実行される画像表示プログラムであって、
前記コンピュータを、
前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段、
前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段、
として機能させ、
前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる、ことを特徴とする画像表示プログラム。
【請求項１】
移動体に取り付け可能な端末装置であって、
前記移動体に取り付けられた状態で、当該移動体の進行方向前方を撮影可能な撮影手段と、
前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段と、
前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段と、
を備え、
前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる、ことを特徴とする端末装置。
【請求項２】
前記過去の経路案内に用いられていた撮影画像を記憶する記録手段と、
前記記憶手段に記憶された前記撮影画像に基づいて、前記調整用画像を生成する調整用画像生成手段と、備えることを特徴とする請求項１に記載の端末装置。
【請求項３】
前記調整用画像生成手段は、前記経路案内手段による前記経路案内が終了された際に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成することを特徴とする請求項２に記載の端末装置。
【請求項４】
前記調整用画像を生成するか否かの決定をユーザから取得する取得手段を更に備え、
前記取得手段は、前記経路案内手段による前記経路案内が終了された際に、前記調整用画像を生成するか否かの決定をユーザから取得し、
前記記憶手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記撮影手段によって撮影された前記撮影画像を記憶し、
前記調整用画像生成手段は、前記取得手段がユーザから前記調整用画像を生成するとの決定を取得した場合に、前記記憶手段に記憶された前記撮影画像に基づいて前記調整用画像を生成することを特徴とする請求項２に記載の端末装置。
【請求項５】
移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段を有する端末装置によって実行される画像表示方法であって、
前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内工程と、
前記移動体に取り付けられた後であって、かつ前記経路案内工程による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御工程と、
を備え、
前記表示制御工程は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる、ことを特徴とする画像表示方法。
【請求項６】
移動体に取り付け可能であり、前記移動体に取り付けられた状態で当該移動体の進行方向前方を撮影可能な撮影手段と、コンピュータとを有する端末装置によって実行される画像表示プログラムであって、
前記コンピュータを、
前記撮影手段によって撮影された撮影画像に、前記移動体を経路案内するための画像を重ねて表示することにより当該経路案内を行う経路案内手段、
前記移動体に取り付けられた後であって、かつ前記経路案内手段による経路案内が開始される前において、前記撮影手段の撮影方向の調整を可能とする表示制御手段、
として機能させ、
前記表示制御手段は、過去の経路案内に用いられていた撮影画像を調整用画像とし、前記撮影方向の調整を可能とするように前記移動体に取り付けられた後の撮影画像と重ねて表示させる、ことを特徴とする画像表示プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−９５２８３（Ｐ２０１２−９５２８３Ａ）
【公開日】平成２４年５月１７日（２０１２．５．１７）
【国際特許分類】
【出願番号】特願２０１１−１９９５０５（Ｐ２０１１−１９９５０５）
【出願日】平成２３年９月１３日（２０１１．９．１３）
【分割の表示】特願２０１１−５２０４７４（Ｐ２０１１−５２０４７４）の分割
【原出願日】平成２２年１０月２２日（２０１０．１０．２２）
【出願人】（０００００５０１６）パイオニア株式会社 (3,620)
【Ｆターム（参考）】
【公開日】平成２４年５月１７日（２０１２．５．１７）
【国際特許分類】
【出願日】平成２３年９月１３日（２０１１．９．１３）
【分割の表示】特願２０１１−５２０４７４（Ｐ２０１１−５２０４７４）の分割
【原出願日】平成２２年１０月２２日（２０１０．１０．２２）
【出願人】（０００００５０１６）パイオニア株式会社 (3,620)
【Ｆターム（参考）】
[ Back to top ]