ナビゲーションシステム、携帯端末装置、ナビゲーション方法及びナビゲーションプログラム
【課題】 位置方向センサ類が使用できない場合でも正確なナビゲーションを行う。
【解決手段】 内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置１０と、携帯端末装置１０からの案内要請に基づいて音声案内を出力する案内端末３０と、案内端末３０の音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して携帯端末装置１０に送信する音声解析変換手段を含む音声解析変換サーバ３０とを含むナビゲーションシステムを提供する。
【解決手段】 内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置１０と、携帯端末装置１０からの案内要請に基づいて音声案内を出力する案内端末３０と、案内端末３０の音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して携帯端末装置１０に送信する音声解析変換手段を含む音声解析変換サーバ３０とを含むナビゲーションシステムを提供する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ナビゲーション技術に関し、特に、第３者による音声案内を可視化して表示することが可能なナビゲーションシステム、携帯端末装置、ナビゲーション方法及びナビゲーションプログラムに関する。
【背景技術】
【０００２】
現在位置や目的地への経路案内を行うナビゲーション技術については、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）測位情報などの位置方向センサ類により位置情報を取得し、該位置情報に基づきガイド情報を表示出力してナビゲーションを行う技術が一般的に知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−２９６７４３号公報
【特許文献２】特開２００４−２９７２５０号公報
【特許文献３】特開２００５−２７７６８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、このような位置方向センサ類だけによるナビゲーション技術は、精度が不足するごみごみした都心や、高低のあるビル内などでは、利用者に正しい情報を提供する事が難しいという課題があった。
【０００５】
また、ＧＰＳが利用不可な環境にいる、或いは位置情報自体に誤差があるなどの場合においては、ナビゲーションそのものの精度が低下する可能性もあり、利用者にとって信頼でき、安心して使える環境が望まれていた。
【０００６】
（発明の目的）
本発明の目的は、上述した課題を解決し、位置方向センサ類が使用できない場合でも正確なナビゲーションを行うことができるナビゲーションシステム、携帯端末装置、ナビゲーション方法及びナビゲーションプログラムを提供することである。
【課題を解決するための手段】
【０００７】
本発明の第１のナビゲーションシステムは、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置と、携帯端末装置からの案内要請に基づいて音声案内を出力する案内端末と、案内端末の音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して携帯端末装置に送信する音声解析変換手段を含む音声解析変換サーバとを含む。
【０００８】
本発明の第１の携帯端末装置は、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して案内要請として送信する案内要請手段と、音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバからの指示画像情報を受信する手段とを含む。
【０００９】
本発明の第１のナビゲーション方法は、携帯端末装置が、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信し、案内端末が、携帯端末装置からの案内要請に基づいて音声案内を出力し、音声解析変換サーバが、案内端末の音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して携帯端末装置に送信する。
【００１０】
本発明の第１のナビゲーションプログラムは、携帯端末装置に、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して案内要請として送信する処理と、音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバから指示画像情報を受信する処理と、を実行させる。
【発明の効果】
【００１１】
本発明によれば、位置方向センサ類が使用できない場合でも正確なナビゲーションを行うことができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の第１の実施の形態によるナビゲーションシステムの構成を示すブロック図である。
【図２】第１の実施の形態による携帯電話端末の動作を示すフローチャートである。
【図３】第１の実施の形態による案内端末及び音声解析変換サーバの動作を示すフローチャートである。
【図４】第１の実施の形態による２Ｄの俯瞰視点、カメラ映像拡張現実視点の例を示す図である。
【図５】本発明の音声解析変換サーバ２０のハードウェア構成例を示すブロック図である。
【発明を実施するための形態】
【００１３】
次に、本発明の実施の形態について、図面を参照して詳細に説明する。なお、すべての図面において、同様な構成要素には同様の符号を付し，適宜説明を省略する。
【００１４】
（第１の実施の形態）
まず、本発明の第１の実施の形態について、図面を参照して詳細に説明する。以下の図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。
【００１５】
図１は、本発明の第１の実施の形態によるナビゲーションシステム１００の構成を示すブロック図である。図１を参照すると、本実施の形態のナビゲーションシステム１００は、携帯電話端末１０と、音声解析変換サーバ２０と、案内端末３０とから構成される。
【００１６】
携帯電話端末１０は、無線通信部１１０と、表示部１２０と、操作部１３０と、内蔵カメラ１４０と、測位部１５０と、音声通信部１７０と、制御部１６０とを含む。
【００１７】
図１では、本発明に必要な構成要素のみを示し、一般的な携帯電話端末が備える他の構成要素については図示を省略している。また、本実施の形態においては、携帯端末装置として携帯電話端末を用いる例を示しているが、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄａｔａ Ａｓｓｉｓｔａｎｃｅ）、ノートＰＣ等を含む携帯可能でカメラ機能と通信・通話機能を備える他の情報端末機器にも適用することが可能である。
【００１８】
無線通信部１１０は、アンテナを介して図示しない無線基地局装置との間で無線により情報の送受を行う機能を有する。
【００１９】
表示部１２０は、画像、図形、文字、記号などの情報表示出力（映像信号処理）を行う機能を有する。
【００２０】
操作部１３０は、ユーザが文字入力や操作入力を行うためのテンキー、スクロールキー、十字キー、決定キー等から構成される。
【００２１】
内蔵カメラ１４０は、通常の携帯電話端末１０に備えられているカメラと同様、対象の静止画や動画を撮影し、その画像を保存する機能を有する。
【００２２】
測位部１５０は、ＧＰＳ衛星から発射された電波が携帯電話端末１０に到達するまでの時間を測定し、この時間差からＧＰＳ衛星と携帯電話端末１０との距離を求め、この距離を利用して位置座標を求める機能を有する。
【００２３】
音声通信部１７０は、図示しない送話部１７１及び受話部１７２を介して入出力される音声信号の処理を行う機能を有する。
【００２４】
制御部１６０は、上記各部の制御を行う機能を有し、各種処理の実行を行う制御手段１６１と、表示部１２０への表示するガイド情報を生成するガイド情報生成手段１６２と、案内端末３０へ案内要請を行う案内要請手段１６３とを含む。
【００２５】
制御手段１６１は、操作部１３０によるユーザの指示を処理する機能を有する。制御手段１６１は、ユーザが操作部１３０によりナビゲーション用のアプリケーションプログラム（以下ナビゲーションアプリと称する）の起動を指示すると、該ナビゲーションアプリを起動する。また、ユーザが操作部１３０により案内端末３０への通話発信の指示を行った場合、案内端末３０へ発信を行う。
【００２６】
また、制御手段１６１は、ナビゲーションアプリがカメラ映像拡張現実視点による表示を行う場合は、内蔵カメラ１４０にて取得した周囲の画像情報（周囲画像情報）をガイド情報生成手段１６２に渡す。なお、カメラ映像拡張現実視点とは、画像情報に案内のための情報を重畳した案内モードである。
【００２７】
ガイド情報生成手段１６２は、制御手段１６１を介して内蔵カメラ１４０から受け取ったの周囲画像情報と、案内端末３０から音声解析変換サーバ２０を介して受け取った指示画像情報とを合成して、ユーザが認識可能なガイド情報を生成して表示部１２０に表示する機能を有する。
【００２８】
案内要請手段１６３は、操作部１３０によるユーザの指示に基づき、制御手段１６１を介して内蔵カメラ１４０から受け取った周囲画像情報を、無線通信部１１０を介して案内端末３０へ送信する。また、測位部１５０からの位置情報を合わせて送信しても良い。なお、該周囲画像情報は静止画であっても動画による映像であっても良い。本実施の形態においては、静止画として説明を行う。
【００２９】
案内端末３０は、一般的なコンピュータ装置を想定とし、携帯電話端末１０から案内要請を受け取る案内要請受信部３１０と、案内者が発した音声による案内（音声案内）を音声解析変換サーバ２０を送信する音声案内送信部３２０とを有する。案内端末３０そのものについては本発明の本質には関わらないためその詳細については省略する。
【００３０】
案内要請受信部３１０は、案内要請を受信すると、ナビゲーションを行うための所定のアプリケーション（以下、案内指示用アプリと称する）を起動する機能を有する。
【００３１】
音声解析変換サーバ２０は、案内端末３０からの音声案内の内容を画像化した指示画像情報を生成して携帯電話端末１０へ送信する音声解析変換部２１０を備える。音声解析変換部２１０は、案内端末３０から受け取った音声案内を音声解析し、音声案内の内容を画像化した指示画像情報を生成して携帯電話端末１０へ送信する。
【００３２】
指示画像情報とは、音声案内の内容を解析して情報分解し画像化した画像情報であり、例えば、音声案内が「３つ目の角までまっすぐ進んでください」であった場合、「まっすぐ」「３つめの角」「進んでください」のように、進行方向（まっすぐ）・目標、距離（３つめの角）・行動（進む）に情報分解したものである。指示画像情報は、テキスト画像であってもよいし、例えば「まっすぐ」の場合、直進方向の矢印等のアイコン画像であってもよく、自由に設定可能である。
【００３３】
なお、音声解析については、本発明の技術分野における当業者にとってよく知られており、方式そのものは本発明の本質には関わらないため、その詳細については省略する。なお、音声解析変換サーバ２０の機能を、後述する案内端末３０が備えていても良い。
【００３４】
（第１の実施の形態の動作の説明）
次に、本実施の形態によるナビゲーションシステム１００の動作について、図面を参照して詳細に説明する。
【００３５】
まず、携帯電話端末１０の動作について、図２のフローチャートを参照して説明する。
【００３６】
まず、携帯電話端末１０のユーザが操作部１３０によりナビゲーションアプリの起動を指示すると、制御手段１６１がナビゲーションアプリを起動する（ステップＳ２０１）。ナビゲーションアプリは、２Ｄの俯瞰視点、カメラ映像拡張現実視点などが選択できる。
【００３７】
ここで、２Ｄの俯瞰視点、カメラ映像拡張現実視点の例を図４に示す。カメラによる拡張現実視点は、内蔵カメラ１４０を通した周囲画像情報を表示する方式である。
【００３８】
次いで、ユーザが、操作部１３０により案内端末３０へ通話発信を行う指示をすると、制御手段１６１が、案内端末３０へ発信を行い、携帯電話端末１０と案内端末３０を通話状態にする（ステップＳ２０２）。なお、ステップＳ２０２とステップＳ２０１の動作順序を逆として、先に通話状態にしたあとでナビゲーション用アプリケーションを起動しても良い。
【００３９】
次いで、ユーザが、カメラによる拡張現実視点を選択すると（ステップＳ２０３”ＹＥＳ”）、案内要請手段１６３が、内蔵カメラ１４０による周囲画像情報を、無線通信部１１０を介して案内端末３０へ案内要請として送信する（ステップＳ２０４）。このとき、合わせて測位部１５０からの位置情報を合わせて送信しても良い。なお、案内要請手段１６３による情報送信を、案内端末３０は案内要請として受け取る。
【００４０】
そして、案内端末３０から音声解析変換サーバ２０を介した指示画像情報を受け取ると、ガイド情報生成手段１６２が、制御手段１６１を介して内蔵カメラ１４０から受け取った周囲画像情報と、該指示画像情報とを合成して、ユーザが認識可能なガイド情報を生成し、表示部１２０に表示する（ステップＳ２０５）。
【００４１】
ここで、ガイド情報生成手段１６２によるガイド情報は、カメラによる拡張現実視点のみならず、２Ｄの俯瞰視点等でも良い。この場合は、測位部１５０による位置情報と、所定の地図情報、指示画像情報を合成する。ただしこれに限定されない。
【００４２】
ユーザが、カメラによる拡張現実視点以外を選択した場合は（ステップＳ２０３”ＮＯ”）、案内要請手段１６１は、測位部１５０からの位置情報を送信する（ステップＳ２０６）。そして、該位置情報とに基づき案内端末３０から音声解析変換サーバ２０を介して送られた指示画像情報と、測位部１５０からの位置情報と、ナビゲーションアプリが予め有する地図情報とを合成して、ガイド情報を生成して表示部１２０に表示する（ステップＳ２０７）。なお、測位部１５０からの位置情報は案内端末３０へは送信せず、通話によって現在位置を知らせる等でもよい。
【００４３】
次に、案内端末３０及び音声解析変換サーバ２０の動作について、図３のフローチャートを参照して説明する。なお、以下においては、ユーザがカメラによる拡張現実視点を選択した場合について説明するが、ユーザがカメラによる拡張現実視点以外以外を選択した場合も、本発明の技術分野における当業者であれば以下の説明から容易に想到できるものである。
【００４４】
まず、案内端末３０の案内者は、携帯電話端末１０のユーザと通話状態である場合に、該ユーザから案内要請があった場合、案内要請受信部３１０が該案内要請を受信すると、案内指示用アプリを起動する（ステップＳ３０１）。そして、携帯電話端末１０から送られた周囲画像情報は案内指示用アプリによって、案内端末３０の図示しない表示部に表示される（ステップＳ３０２）。
【００４５】
次いで、案内端末３０は、該周囲画像情報に基づく案内者の音声案内を、音声案内送信部３２０にて音声解析変換サーバ２０へ送る（ステップＳ３０３）。なお、指示を出す際は音声混入を避けるためにＰｏＣ（Ｐｕｓｈ−ｔｏ−Ｔａｌｋ ｏｖｅｒ Ｃｅｌｌｕｌａｒ）のように、ボタンを押しながら一方通行による単信通信の音声案内を送る。
【００４６】
次いで、案内端末３０から送られた音声案内は、音声解析変換サーバ２０の音声解析変換部２１０により、指示画像情報へと変換され、携帯電話端末１０へ送られる（ステップＳ３０４）。
【００４７】
（第１の実施の形態による効果）
次に本実施の形態の効果について説明する。
【００４８】
本実施の形態によれば、ナビゲーションに際し、ＧＰＳ等の位置方向センサ類による位置情報だけでなく、第３者（案内者）の音声案内を解析して変換した指示画像情報を用いるので、例えば、建物内などセンサ類の利用に難があるシーン、あるいはセンサ類が使用不可のシーンでも正確なナビゲーションを行うことができる。
【００４９】
また、本実施の形態によれば、第３者（案内者）の音声案内を解析して変換した指示画像情報を用いるため、目的地の場所が分からない、分かり難い、設定できない等の場合であっても、現在地からどのように進めばよいかを案内できる。更に、利用シーンに合わせた効果的な探索方法が提供できる。
【００５０】
また、本実施の形態によれば、携帯電話端末１０は、ガイド情報の表示出力として、上空俯瞰からの２Ｄ視点だけでなく、内蔵カメラ１４０を通して表示したＡＲ（拡張現実）上に進行方向などを切替えて表示することも可能であり、上空視点では進み方がわからないシーンでも自分の視点で進行方向などが確認できる。
【００５１】
また、本実施の形態によれば、携帯電話端末１０は、音声通話をしている案内者に携帯電話端末１０のカメラ映像を提供することにより、携帯電話端末１０のユーザが現在何を見ているか、どう進んだかの視点が共有することができる。
【００５２】
次に、本発明の音声解析変換サーバ２０のハードウェア構成例について、図５を参照して説明する。図５は音声解析変換サーバ２０のハードウェア構成例を示すブロック図である。
【００５３】
図５を参照すると、音声解析変換サーバ２０は、一般的なコンピュータ装置と同様のハードウェア構成であり、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８０１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等のメモリからなる、データの作業領域やデータの一時退避領域に用いられる主記憶部８０２、ネットワークを介してデータの送受信を行う通信部８０３、入力装置８０５や出力装置８０６及び記憶装置８０７と接続してデータの送受信を行う入出力インタフェース部８０４、上記各構成要素を相互に接続するシステムバス８０８を備えている。記憶装置８０７は、例えば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、磁気ディスク、半導体メモリ等の不揮発性メモリから構成されるハードディスク装置等で実現される。
【００５４】
本発明の音声解析変換サーバ２０の音声解析変換部２１０は、プログラムを組み込んだ、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）等のハードウェア部品である回路部品を実装することにより、その動作をハードウェア的に実現することは勿論として、その機能を提供するプログラムを、記憶装置８０７に格納し、そのプログラムを主記憶部８０２にロードしてＣＰＵ８０１で実行することにより、ソフトウェア的に実現することも可能である。
【００５５】
なお、案内端末３０が上述のような構成を有し、上述した各機能をハードウェア的又はソフトウェア的に実現しても良い。
【００５６】
以上好ましい実施の形態をあげて本発明を説明したが、本発明は必ずしも、上記実施の形態に限定されるものでなく、その技術的思想の範囲内において様々に変形して実施することができる。
【００５７】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【００５８】
また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。
【００５９】
また、本発明の方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明の方法およびコンピュータプログラムを実施する時には、その複数の手順の順番は内容的に支障しない範囲で変更することができる。
【００６０】
さらに、本発明の方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。
【００６１】
上記実施形態の一部又は全部は、以下の付記のようにも記載されうるが、これに限定されない。
【００６２】
（付記１）
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置と、
前記携帯端末装置からの案内要請に基づいて音声案内を出力する案内端末と、
前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する音声解析変換サーバと
を含むことを特徴とするナビゲーションシステム。
【００６３】
（付記２）
前記携帯端末装置が、自端末の位置情報を取得する測位手段を含み、
前記案内要請手段は、
前記周囲画像情報と、前記位置情報とを案内要請として送信することを特徴とする付記１に記載のナビゲーションシステム。
【００６４】
（付記３）
前記案内要請手段は、
前記ユーザが画像情報に案内のための情報を重畳した案内モードであるカメラ映像拡張現実視点を選択した場合に、前記周囲画像情報と、前記位置情報とを、前記案内要請として送信することを特徴とする付記２に記載のナビゲーションシステム。
【００６５】
（付記４）
前記案内要請手段は、
前記ユーザが前記カメラ映像拡張現実視点を選択した場合に、前記周囲画像情報を送信し、ユーザが俯瞰視点を選択した場合に、前記位置情報を送信することを特徴とする付記２に記載のナビゲーションシステム。
【００６６】
（付記５）
前記携帯端末装置は、
前記周囲画像情報と、前記指示画像情報とを合成してガイド情報を生成して提示するガイド情報生成手段を含むことを特徴とする付記１から付記４の何れか１項に記載のナビゲーションシステム。
【００６７】
（付記６）
前記ガイド情報生成手段は、
前記位置情報と、予め保持する地図情報と、前記指示画像情報とを合成してガイド情報を生成することを特徴とする付記５に記載のナビゲーションシステム。
【００６８】
（付記７）
前記案内端末は、
前記携帯端末装置の前記案内要請手段からの情報送信を、案内要請として受信する案内要請受信手段と、
前記案内要請手段からの情報に基づく案内者の音声案内を前記音声解析変換サーバへ送信する音声案内送信手段と
を備えることを特徴とする付記１から付記６の何れか１項に記載のナビゲーションシステム。
【００６９】
（付記８）
前記音声案内送信手段は、
単信通信により前記音声案内を送信することを特徴とする付記７に記載のナビゲーションシステム。
【００７０】
（付記９）
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する案内要請手段と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバからの前記指示画像情報を受信する手段と
を含むことを特徴とする携帯端末装置。
【００７１】
（付記１０）
自端末の位置情報を取得する測位手段を含み、
前記案内要請手段は、
前記周囲画像情報と、前記位置情報とを案内要請として送信することを特徴とする付記９に記載の携帯端末装置。
【００７２】
（付記１１）
前記案内要請手段は、
前記ユーザが画像情報に案内のための情報を重畳した案内モードであるカメラ映像拡張現実視点を選択した場合に、前記周囲画像情報と、前記位置情報とを、前記案内要請として送信することを特徴とする付記１０に記載の携帯端末装置。
【００７３】
（付記１２）
前記案内要請手段は、
前記ユーザが前記カメラ映像拡張現実視点を選択した場合に、前記周囲画像情報を送信し、ユーザが俯瞰視点を選択した場合に、前記位置情報を送信することを特徴とする付記１０に記載の携帯端末装置。
【００７４】
（付記１３）
前記携帯端末装置は、
前記周囲画像情報と、前記指示画像情報とを合成してガイド情報を生成して提示するガイド情報生成手段を含むことを特徴とする付記９から付記１２の何れか１項に記載の携帯端末装置。
【００７５】
（付記１４）
前記ガイド情報生成手段は、
前記位置情報と、予め保持する地図情報と、前記指示画像情報とを合成してガイド情報を生成することを特徴とする付記１３に記載の携帯端末装置。
【００７６】
（付記１５）
携帯端末装置が、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信し、
案内端末が、
前記携帯端末装置からの案内要請に基づいて音声案内を出力し、
音声解析変換サーバが、前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する
ことを特徴とするナビゲーション方法。
【００７７】
（付記１６）
携帯端末装置に、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する処理と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバから前記指示画像情報を受信する処理と、を実行させることを特徴とするナビゲーションプログラム。
【符号の説明】
【００７８】
１００：ナビゲーションシステム
１０：携帯電話端末
１１０：無線通信部
１２０：表示部
１３０：操作部
１４０：内蔵カメラ
１５０：測位部
１６０：制御部
１６１：制御手段
１６２：ガイド情報生成手段
１６３：案内要請手段
１７０：音声通信部
１７１：送話部
１７２：受話部
２０：音声解析変換サーバ
２１０：音声解析変換部
３０：案内端末
３１０：案内要請受信部
３２０：音声案内送信部
８０１：ＣＰＵ
８０２：主記憶部
８０３：通信部
８０４：入出力インタフェース部
８０５：入力装置
８０６：出力装置
８０７：記憶装置
８０８：システムバス
【技術分野】
【０００１】
本発明は、ナビゲーション技術に関し、特に、第３者による音声案内を可視化して表示することが可能なナビゲーションシステム、携帯端末装置、ナビゲーション方法及びナビゲーションプログラムに関する。
【背景技術】
【０００２】
現在位置や目的地への経路案内を行うナビゲーション技術については、例えば、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）測位情報などの位置方向センサ類により位置情報を取得し、該位置情報に基づきガイド情報を表示出力してナビゲーションを行う技術が一般的に知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−２９６７４３号公報
【特許文献２】特開２００４−２９７２５０号公報
【特許文献３】特開２００５−２７７６８１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、このような位置方向センサ類だけによるナビゲーション技術は、精度が不足するごみごみした都心や、高低のあるビル内などでは、利用者に正しい情報を提供する事が難しいという課題があった。
【０００５】
また、ＧＰＳが利用不可な環境にいる、或いは位置情報自体に誤差があるなどの場合においては、ナビゲーションそのものの精度が低下する可能性もあり、利用者にとって信頼でき、安心して使える環境が望まれていた。
【０００６】
（発明の目的）
本発明の目的は、上述した課題を解決し、位置方向センサ類が使用できない場合でも正確なナビゲーションを行うことができるナビゲーションシステム、携帯端末装置、ナビゲーション方法及びナビゲーションプログラムを提供することである。
【課題を解決するための手段】
【０００７】
本発明の第１のナビゲーションシステムは、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置と、携帯端末装置からの案内要請に基づいて音声案内を出力する案内端末と、案内端末の音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して携帯端末装置に送信する音声解析変換手段を含む音声解析変換サーバとを含む。
【０００８】
本発明の第１の携帯端末装置は、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して案内要請として送信する案内要請手段と、音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバからの指示画像情報を受信する手段とを含む。
【０００９】
本発明の第１のナビゲーション方法は、携帯端末装置が、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信し、案内端末が、携帯端末装置からの案内要請に基づいて音声案内を出力し、音声解析変換サーバが、案内端末の音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して携帯端末装置に送信する。
【００１０】
本発明の第１のナビゲーションプログラムは、携帯端末装置に、内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して案内要請として送信する処理と、音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバから指示画像情報を受信する処理と、を実行させる。
【発明の効果】
【００１１】
本発明によれば、位置方向センサ類が使用できない場合でも正確なナビゲーションを行うことができる。
【図面の簡単な説明】
【００１２】
【図１】本発明の第１の実施の形態によるナビゲーションシステムの構成を示すブロック図である。
【図２】第１の実施の形態による携帯電話端末の動作を示すフローチャートである。
【図３】第１の実施の形態による案内端末及び音声解析変換サーバの動作を示すフローチャートである。
【図４】第１の実施の形態による２Ｄの俯瞰視点、カメラ映像拡張現実視点の例を示す図である。
【図５】本発明の音声解析変換サーバ２０のハードウェア構成例を示すブロック図である。
【発明を実施するための形態】
【００１３】
次に、本発明の実施の形態について、図面を参照して詳細に説明する。なお、すべての図面において、同様な構成要素には同様の符号を付し，適宜説明を省略する。
【００１４】
（第１の実施の形態）
まず、本発明の第１の実施の形態について、図面を参照して詳細に説明する。以下の図において、本発明の本質に関わらない部分の構成については省略してあり、図示されていない。
【００１５】
図１は、本発明の第１の実施の形態によるナビゲーションシステム１００の構成を示すブロック図である。図１を参照すると、本実施の形態のナビゲーションシステム１００は、携帯電話端末１０と、音声解析変換サーバ２０と、案内端末３０とから構成される。
【００１６】
携帯電話端末１０は、無線通信部１１０と、表示部１２０と、操作部１３０と、内蔵カメラ１４０と、測位部１５０と、音声通信部１７０と、制御部１６０とを含む。
【００１７】
図１では、本発明に必要な構成要素のみを示し、一般的な携帯電話端末が備える他の構成要素については図示を省略している。また、本実施の形態においては、携帯端末装置として携帯電話端末を用いる例を示しているが、スマートフォン、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄａｔａ Ａｓｓｉｓｔａｎｃｅ）、ノートＰＣ等を含む携帯可能でカメラ機能と通信・通話機能を備える他の情報端末機器にも適用することが可能である。
【００１８】
無線通信部１１０は、アンテナを介して図示しない無線基地局装置との間で無線により情報の送受を行う機能を有する。
【００１９】
表示部１２０は、画像、図形、文字、記号などの情報表示出力（映像信号処理）を行う機能を有する。
【００２０】
操作部１３０は、ユーザが文字入力や操作入力を行うためのテンキー、スクロールキー、十字キー、決定キー等から構成される。
【００２１】
内蔵カメラ１４０は、通常の携帯電話端末１０に備えられているカメラと同様、対象の静止画や動画を撮影し、その画像を保存する機能を有する。
【００２２】
測位部１５０は、ＧＰＳ衛星から発射された電波が携帯電話端末１０に到達するまでの時間を測定し、この時間差からＧＰＳ衛星と携帯電話端末１０との距離を求め、この距離を利用して位置座標を求める機能を有する。
【００２３】
音声通信部１７０は、図示しない送話部１７１及び受話部１７２を介して入出力される音声信号の処理を行う機能を有する。
【００２４】
制御部１６０は、上記各部の制御を行う機能を有し、各種処理の実行を行う制御手段１６１と、表示部１２０への表示するガイド情報を生成するガイド情報生成手段１６２と、案内端末３０へ案内要請を行う案内要請手段１６３とを含む。
【００２５】
制御手段１６１は、操作部１３０によるユーザの指示を処理する機能を有する。制御手段１６１は、ユーザが操作部１３０によりナビゲーション用のアプリケーションプログラム（以下ナビゲーションアプリと称する）の起動を指示すると、該ナビゲーションアプリを起動する。また、ユーザが操作部１３０により案内端末３０への通話発信の指示を行った場合、案内端末３０へ発信を行う。
【００２６】
また、制御手段１６１は、ナビゲーションアプリがカメラ映像拡張現実視点による表示を行う場合は、内蔵カメラ１４０にて取得した周囲の画像情報（周囲画像情報）をガイド情報生成手段１６２に渡す。なお、カメラ映像拡張現実視点とは、画像情報に案内のための情報を重畳した案内モードである。
【００２７】
ガイド情報生成手段１６２は、制御手段１６１を介して内蔵カメラ１４０から受け取ったの周囲画像情報と、案内端末３０から音声解析変換サーバ２０を介して受け取った指示画像情報とを合成して、ユーザが認識可能なガイド情報を生成して表示部１２０に表示する機能を有する。
【００２８】
案内要請手段１６３は、操作部１３０によるユーザの指示に基づき、制御手段１６１を介して内蔵カメラ１４０から受け取った周囲画像情報を、無線通信部１１０を介して案内端末３０へ送信する。また、測位部１５０からの位置情報を合わせて送信しても良い。なお、該周囲画像情報は静止画であっても動画による映像であっても良い。本実施の形態においては、静止画として説明を行う。
【００２９】
案内端末３０は、一般的なコンピュータ装置を想定とし、携帯電話端末１０から案内要請を受け取る案内要請受信部３１０と、案内者が発した音声による案内（音声案内）を音声解析変換サーバ２０を送信する音声案内送信部３２０とを有する。案内端末３０そのものについては本発明の本質には関わらないためその詳細については省略する。
【００３０】
案内要請受信部３１０は、案内要請を受信すると、ナビゲーションを行うための所定のアプリケーション（以下、案内指示用アプリと称する）を起動する機能を有する。
【００３１】
音声解析変換サーバ２０は、案内端末３０からの音声案内の内容を画像化した指示画像情報を生成して携帯電話端末１０へ送信する音声解析変換部２１０を備える。音声解析変換部２１０は、案内端末３０から受け取った音声案内を音声解析し、音声案内の内容を画像化した指示画像情報を生成して携帯電話端末１０へ送信する。
【００３２】
指示画像情報とは、音声案内の内容を解析して情報分解し画像化した画像情報であり、例えば、音声案内が「３つ目の角までまっすぐ進んでください」であった場合、「まっすぐ」「３つめの角」「進んでください」のように、進行方向（まっすぐ）・目標、距離（３つめの角）・行動（進む）に情報分解したものである。指示画像情報は、テキスト画像であってもよいし、例えば「まっすぐ」の場合、直進方向の矢印等のアイコン画像であってもよく、自由に設定可能である。
【００３３】
なお、音声解析については、本発明の技術分野における当業者にとってよく知られており、方式そのものは本発明の本質には関わらないため、その詳細については省略する。なお、音声解析変換サーバ２０の機能を、後述する案内端末３０が備えていても良い。
【００３４】
（第１の実施の形態の動作の説明）
次に、本実施の形態によるナビゲーションシステム１００の動作について、図面を参照して詳細に説明する。
【００３５】
まず、携帯電話端末１０の動作について、図２のフローチャートを参照して説明する。
【００３６】
まず、携帯電話端末１０のユーザが操作部１３０によりナビゲーションアプリの起動を指示すると、制御手段１６１がナビゲーションアプリを起動する（ステップＳ２０１）。ナビゲーションアプリは、２Ｄの俯瞰視点、カメラ映像拡張現実視点などが選択できる。
【００３７】
ここで、２Ｄの俯瞰視点、カメラ映像拡張現実視点の例を図４に示す。カメラによる拡張現実視点は、内蔵カメラ１４０を通した周囲画像情報を表示する方式である。
【００３８】
次いで、ユーザが、操作部１３０により案内端末３０へ通話発信を行う指示をすると、制御手段１６１が、案内端末３０へ発信を行い、携帯電話端末１０と案内端末３０を通話状態にする（ステップＳ２０２）。なお、ステップＳ２０２とステップＳ２０１の動作順序を逆として、先に通話状態にしたあとでナビゲーション用アプリケーションを起動しても良い。
【００３９】
次いで、ユーザが、カメラによる拡張現実視点を選択すると（ステップＳ２０３”ＹＥＳ”）、案内要請手段１６３が、内蔵カメラ１４０による周囲画像情報を、無線通信部１１０を介して案内端末３０へ案内要請として送信する（ステップＳ２０４）。このとき、合わせて測位部１５０からの位置情報を合わせて送信しても良い。なお、案内要請手段１６３による情報送信を、案内端末３０は案内要請として受け取る。
【００４０】
そして、案内端末３０から音声解析変換サーバ２０を介した指示画像情報を受け取ると、ガイド情報生成手段１６２が、制御手段１６１を介して内蔵カメラ１４０から受け取った周囲画像情報と、該指示画像情報とを合成して、ユーザが認識可能なガイド情報を生成し、表示部１２０に表示する（ステップＳ２０５）。
【００４１】
ここで、ガイド情報生成手段１６２によるガイド情報は、カメラによる拡張現実視点のみならず、２Ｄの俯瞰視点等でも良い。この場合は、測位部１５０による位置情報と、所定の地図情報、指示画像情報を合成する。ただしこれに限定されない。
【００４２】
ユーザが、カメラによる拡張現実視点以外を選択した場合は（ステップＳ２０３”ＮＯ”）、案内要請手段１６１は、測位部１５０からの位置情報を送信する（ステップＳ２０６）。そして、該位置情報とに基づき案内端末３０から音声解析変換サーバ２０を介して送られた指示画像情報と、測位部１５０からの位置情報と、ナビゲーションアプリが予め有する地図情報とを合成して、ガイド情報を生成して表示部１２０に表示する（ステップＳ２０７）。なお、測位部１５０からの位置情報は案内端末３０へは送信せず、通話によって現在位置を知らせる等でもよい。
【００４３】
次に、案内端末３０及び音声解析変換サーバ２０の動作について、図３のフローチャートを参照して説明する。なお、以下においては、ユーザがカメラによる拡張現実視点を選択した場合について説明するが、ユーザがカメラによる拡張現実視点以外以外を選択した場合も、本発明の技術分野における当業者であれば以下の説明から容易に想到できるものである。
【００４４】
まず、案内端末３０の案内者は、携帯電話端末１０のユーザと通話状態である場合に、該ユーザから案内要請があった場合、案内要請受信部３１０が該案内要請を受信すると、案内指示用アプリを起動する（ステップＳ３０１）。そして、携帯電話端末１０から送られた周囲画像情報は案内指示用アプリによって、案内端末３０の図示しない表示部に表示される（ステップＳ３０２）。
【００４５】
次いで、案内端末３０は、該周囲画像情報に基づく案内者の音声案内を、音声案内送信部３２０にて音声解析変換サーバ２０へ送る（ステップＳ３０３）。なお、指示を出す際は音声混入を避けるためにＰｏＣ（Ｐｕｓｈ−ｔｏ−Ｔａｌｋ ｏｖｅｒ Ｃｅｌｌｕｌａｒ）のように、ボタンを押しながら一方通行による単信通信の音声案内を送る。
【００４６】
次いで、案内端末３０から送られた音声案内は、音声解析変換サーバ２０の音声解析変換部２１０により、指示画像情報へと変換され、携帯電話端末１０へ送られる（ステップＳ３０４）。
【００４７】
（第１の実施の形態による効果）
次に本実施の形態の効果について説明する。
【００４８】
本実施の形態によれば、ナビゲーションに際し、ＧＰＳ等の位置方向センサ類による位置情報だけでなく、第３者（案内者）の音声案内を解析して変換した指示画像情報を用いるので、例えば、建物内などセンサ類の利用に難があるシーン、あるいはセンサ類が使用不可のシーンでも正確なナビゲーションを行うことができる。
【００４９】
また、本実施の形態によれば、第３者（案内者）の音声案内を解析して変換した指示画像情報を用いるため、目的地の場所が分からない、分かり難い、設定できない等の場合であっても、現在地からどのように進めばよいかを案内できる。更に、利用シーンに合わせた効果的な探索方法が提供できる。
【００５０】
また、本実施の形態によれば、携帯電話端末１０は、ガイド情報の表示出力として、上空俯瞰からの２Ｄ視点だけでなく、内蔵カメラ１４０を通して表示したＡＲ（拡張現実）上に進行方向などを切替えて表示することも可能であり、上空視点では進み方がわからないシーンでも自分の視点で進行方向などが確認できる。
【００５１】
また、本実施の形態によれば、携帯電話端末１０は、音声通話をしている案内者に携帯電話端末１０のカメラ映像を提供することにより、携帯電話端末１０のユーザが現在何を見ているか、どう進んだかの視点が共有することができる。
【００５２】
次に、本発明の音声解析変換サーバ２０のハードウェア構成例について、図５を参照して説明する。図５は音声解析変換サーバ２０のハードウェア構成例を示すブロック図である。
【００５３】
図５を参照すると、音声解析変換サーバ２０は、一般的なコンピュータ装置と同様のハードウェア構成であり、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８０１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等のメモリからなる、データの作業領域やデータの一時退避領域に用いられる主記憶部８０２、ネットワークを介してデータの送受信を行う通信部８０３、入力装置８０５や出力装置８０６及び記憶装置８０７と接続してデータの送受信を行う入出力インタフェース部８０４、上記各構成要素を相互に接続するシステムバス８０８を備えている。記憶装置８０７は、例えば、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、磁気ディスク、半導体メモリ等の不揮発性メモリから構成されるハードディスク装置等で実現される。
【００５４】
本発明の音声解析変換サーバ２０の音声解析変換部２１０は、プログラムを組み込んだ、ＬＳＩ（Ｌａｒｇｅ Ｓｃａｌｅ Ｉｎｔｅｇｒａｔｉｏｎ）等のハードウェア部品である回路部品を実装することにより、その動作をハードウェア的に実現することは勿論として、その機能を提供するプログラムを、記憶装置８０７に格納し、そのプログラムを主記憶部８０２にロードしてＣＰＵ８０１で実行することにより、ソフトウェア的に実現することも可能である。
【００５５】
なお、案内端末３０が上述のような構成を有し、上述した各機能をハードウェア的又はソフトウェア的に実現しても良い。
【００５６】
以上好ましい実施の形態をあげて本発明を説明したが、本発明は必ずしも、上記実施の形態に限定されるものでなく、その技術的思想の範囲内において様々に変形して実施することができる。
【００５７】
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体、コンピュータプログラムなどの間で変換したものもまた、本発明の態様として有効である。
【００５８】
また、本発明の各種の構成要素は、必ずしも個々に独立した存在である必要はなく、複数の構成要素が一個の部材として形成されていること、一つの構成要素が複数の部材で形成されていること、ある構成要素が他の構成要素の一部であること、ある構成要素の一部と他の構成要素の一部とが重複していること、等でもよい。
【００５９】
また、本発明の方法およびコンピュータプログラムには複数の手順を順番に記載してあるが、その記載の順番は複数の手順を実行する順番を限定するものではない。このため、本発明の方法およびコンピュータプログラムを実施する時には、その複数の手順の順番は内容的に支障しない範囲で変更することができる。
【００６０】
さらに、本発明の方法およびコンピュータプログラムの複数の手順は個々に相違するタイミングで実行されることに限定されない。このため、ある手順の実行中に他の手順が発生すること、ある手順の実行タイミングと他の手順の実行タイミングとの一部ないし全部が重複していること、等でもよい。
【００６１】
上記実施形態の一部又は全部は、以下の付記のようにも記載されうるが、これに限定されない。
【００６２】
（付記１）
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置と、
前記携帯端末装置からの案内要請に基づいて音声案内を出力する案内端末と、
前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する音声解析変換サーバと
を含むことを特徴とするナビゲーションシステム。
【００６３】
（付記２）
前記携帯端末装置が、自端末の位置情報を取得する測位手段を含み、
前記案内要請手段は、
前記周囲画像情報と、前記位置情報とを案内要請として送信することを特徴とする付記１に記載のナビゲーションシステム。
【００６４】
（付記３）
前記案内要請手段は、
前記ユーザが画像情報に案内のための情報を重畳した案内モードであるカメラ映像拡張現実視点を選択した場合に、前記周囲画像情報と、前記位置情報とを、前記案内要請として送信することを特徴とする付記２に記載のナビゲーションシステム。
【００６５】
（付記４）
前記案内要請手段は、
前記ユーザが前記カメラ映像拡張現実視点を選択した場合に、前記周囲画像情報を送信し、ユーザが俯瞰視点を選択した場合に、前記位置情報を送信することを特徴とする付記２に記載のナビゲーションシステム。
【００６６】
（付記５）
前記携帯端末装置は、
前記周囲画像情報と、前記指示画像情報とを合成してガイド情報を生成して提示するガイド情報生成手段を含むことを特徴とする付記１から付記４の何れか１項に記載のナビゲーションシステム。
【００６７】
（付記６）
前記ガイド情報生成手段は、
前記位置情報と、予め保持する地図情報と、前記指示画像情報とを合成してガイド情報を生成することを特徴とする付記５に記載のナビゲーションシステム。
【００６８】
（付記７）
前記案内端末は、
前記携帯端末装置の前記案内要請手段からの情報送信を、案内要請として受信する案内要請受信手段と、
前記案内要請手段からの情報に基づく案内者の音声案内を前記音声解析変換サーバへ送信する音声案内送信手段と
を備えることを特徴とする付記１から付記６の何れか１項に記載のナビゲーションシステム。
【００６９】
（付記８）
前記音声案内送信手段は、
単信通信により前記音声案内を送信することを特徴とする付記７に記載のナビゲーションシステム。
【００７０】
（付記９）
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する案内要請手段と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバからの前記指示画像情報を受信する手段と
を含むことを特徴とする携帯端末装置。
【００７１】
（付記１０）
自端末の位置情報を取得する測位手段を含み、
前記案内要請手段は、
前記周囲画像情報と、前記位置情報とを案内要請として送信することを特徴とする付記９に記載の携帯端末装置。
【００７２】
（付記１１）
前記案内要請手段は、
前記ユーザが画像情報に案内のための情報を重畳した案内モードであるカメラ映像拡張現実視点を選択した場合に、前記周囲画像情報と、前記位置情報とを、前記案内要請として送信することを特徴とする付記１０に記載の携帯端末装置。
【００７３】
（付記１２）
前記案内要請手段は、
前記ユーザが前記カメラ映像拡張現実視点を選択した場合に、前記周囲画像情報を送信し、ユーザが俯瞰視点を選択した場合に、前記位置情報を送信することを特徴とする付記１０に記載の携帯端末装置。
【００７４】
（付記１３）
前記携帯端末装置は、
前記周囲画像情報と、前記指示画像情報とを合成してガイド情報を生成して提示するガイド情報生成手段を含むことを特徴とする付記９から付記１２の何れか１項に記載の携帯端末装置。
【００７５】
（付記１４）
前記ガイド情報生成手段は、
前記位置情報と、予め保持する地図情報と、前記指示画像情報とを合成してガイド情報を生成することを特徴とする付記１３に記載の携帯端末装置。
【００７６】
（付記１５）
携帯端末装置が、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信し、
案内端末が、
前記携帯端末装置からの案内要請に基づいて音声案内を出力し、
音声解析変換サーバが、前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する
ことを特徴とするナビゲーション方法。
【００７７】
（付記１６）
携帯端末装置に、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する処理と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバから前記指示画像情報を受信する処理と、を実行させることを特徴とするナビゲーションプログラム。
【符号の説明】
【００７８】
１００：ナビゲーションシステム
１０：携帯電話端末
１１０：無線通信部
１２０：表示部
１３０：操作部
１４０：内蔵カメラ
１５０：測位部
１６０：制御部
１６１：制御手段
１６２：ガイド情報生成手段
１６３：案内要請手段
１７０：音声通信部
１７１：送話部
１７２：受話部
２０：音声解析変換サーバ
２１０：音声解析変換部
３０：案内端末
３１０：案内要請受信部
３２０：音声案内送信部
８０１：ＣＰＵ
８０２：主記憶部
８０３：通信部
８０４：入出力インタフェース部
８０５：入力装置
８０６：出力装置
８０７：記憶装置
８０８：システムバス
【特許請求の範囲】
【請求項１】
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置と、
前記携帯端末装置からの案内要請に基づいて音声案内を出力する案内端末と、
前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する音声解析変換手段を含む音声解析変換サーバと
を含むことを特徴とするナビゲーションシステム。
【請求項２】
前記携帯端末装置が、自端末の位置情報を取得する測位手段を含み、
前記案内要請手段は、
前記周囲画像情報と、前記位置情報とを案内要請として送信することを特徴とする請求項１に記載のナビゲーションシステム。
【請求項３】
前記案内要請手段は、
前記ユーザが画像情報に案内のための情報を重畳した案内モードであるカメラ映像拡張現実視点を選択した場合に、前記周囲画像情報と、前記位置情報とを、前記案内要請として送信することを特徴とする請求項２に記載のナビゲーションシステム。
【請求項４】
前記案内要請手段は、
前記ユーザが前記カメラ映像拡張現実視点を選択した場合に、前記周囲画像情報を送信し、ユーザが俯瞰視点を選択した場合に、前記位置情報を送信することを特徴とする請求項２に記載のナビゲーションシステム。
【請求項５】
前記携帯端末装置は、
前記周囲画像情報と、前記指示画像情報とを合成してガイド情報を生成して提示するガイド情報生成手段を含むことを特徴とする請求項１から請求項４の何れか１項に記載のナビゲーションシステム。
【請求項６】
前記ガイド情報生成手段は、
前記位置情報と、予め保持する地図情報と、前記指示画像情報とを合成してガイド情報を生成することを特徴とする請求項５に記載のナビゲーションシステム。
【請求項７】
前記案内端末は、
前記携帯端末装置の前記案内要請手段からの情報送信を、案内要請として受信する案内要請受信手段と、
前記案内要請手段からの情報に基づく案内者の音声案内を前記音声解析変換サーバへ送信する音声案内送信手段と
を備えることを特徴とする請求項１から請求項６の何れか１項に記載のナビゲーションシステム。
【請求項８】
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する案内要請手段と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバからの前記指示画像情報を受信する手段と
を含むことを特徴とする携帯端末装置。
【請求項９】
携帯端末装置が、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信し、
案内端末が、
前記携帯端末装置からの案内要請に基づいて音声案内を出力し、
音声解析変換サーバが、前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する
ことを特徴とするナビゲーション方法。
【請求項１０】
携帯端末装置に、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する処理と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバから前記指示画像情報を受信する処理と、を実行させることを特徴とするナビゲーションプログラム。
【請求項１】
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信する案内要請手段を含む携帯端末装置と、
前記携帯端末装置からの案内要請に基づいて音声案内を出力する案内端末と、
前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する音声解析変換手段を含む音声解析変換サーバと
を含むことを特徴とするナビゲーションシステム。
【請求項２】
前記携帯端末装置が、自端末の位置情報を取得する測位手段を含み、
前記案内要請手段は、
前記周囲画像情報と、前記位置情報とを案内要請として送信することを特徴とする請求項１に記載のナビゲーションシステム。
【請求項３】
前記案内要請手段は、
前記ユーザが画像情報に案内のための情報を重畳した案内モードであるカメラ映像拡張現実視点を選択した場合に、前記周囲画像情報と、前記位置情報とを、前記案内要請として送信することを特徴とする請求項２に記載のナビゲーションシステム。
【請求項４】
前記案内要請手段は、
前記ユーザが前記カメラ映像拡張現実視点を選択した場合に、前記周囲画像情報を送信し、ユーザが俯瞰視点を選択した場合に、前記位置情報を送信することを特徴とする請求項２に記載のナビゲーションシステム。
【請求項５】
前記携帯端末装置は、
前記周囲画像情報と、前記指示画像情報とを合成してガイド情報を生成して提示するガイド情報生成手段を含むことを特徴とする請求項１から請求項４の何れか１項に記載のナビゲーションシステム。
【請求項６】
前記ガイド情報生成手段は、
前記位置情報と、予め保持する地図情報と、前記指示画像情報とを合成してガイド情報を生成することを特徴とする請求項５に記載のナビゲーションシステム。
【請求項７】
前記案内端末は、
前記携帯端末装置の前記案内要請手段からの情報送信を、案内要請として受信する案内要請受信手段と、
前記案内要請手段からの情報に基づく案内者の音声案内を前記音声解析変換サーバへ送信する音声案内送信手段と
を備えることを特徴とする請求項１から請求項６の何れか１項に記載のナビゲーションシステム。
【請求項８】
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する案内要請手段と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバからの前記指示画像情報を受信する手段と
を含むことを特徴とする携帯端末装置。
【請求項９】
携帯端末装置が、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請として送信し、
案内端末が、
前記携帯端末装置からの案内要請に基づいて音声案内を出力し、
音声解析変換サーバが、前記案内端末の前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換して前記携帯端末装置に送信する
ことを特徴とするナビゲーション方法。
【請求項１０】
携帯端末装置に、
内蔵するカメラによって自端末の現在位置の周囲の環境を撮影した周囲画像情報を、案内要請に基づいて音声案内を出力する案内端末に対して前記案内要請として送信する処理と、
前記音声案内を音声案内の内容を画像化した情報である指示画像情報に変換する音声解析変換サーバから前記指示画像情報を受信する処理と、を実行させることを特徴とするナビゲーションプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１１−１７９９４３（Ｐ２０１１−１７９９４３Ａ）
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願番号】特願２０１０−４３９０１（Ｐ２０１０−４３９０１）
【出願日】平成２２年３月１日（２０１０．３．１）
【出願人】（０００００４２３７）日本電気株式会社 (19,353)
【Ｆターム（参考）】
【公開日】平成２３年９月１５日（２０１１．９．１５）
【国際特許分類】
【出願日】平成２２年３月１日（２０１０．３．１）
【出願人】（０００００４２３７）日本電気株式会社 (19,353)
【Ｆターム（参考）】
[ Back to top ]