携帯端末装置、無線通信システム、及び無線通信方法
【課題】ユーザが煩わしい入力操作をすることなく、訪れた未知の場所の情報を容易に収集できるようにすること。
【解決手段】被写体を撮像する撮像部３５０と、撮像部３５０が撮像している被写体映像を表示する表示部３３０と、無線通信により外部のサーバと通信して、表示部３３０に表示されている被写体映像中の被写体の関連データを前記サーバより取得する通信部３１０と、表示部３３０に表示されている被写体映像に、前記サーバより取得した前記関連データをアドオンして、前記被写体映像中の被写体に情報を追加する映像処理部３２１と、を具備する。
【解決手段】被写体を撮像する撮像部３５０と、撮像部３５０が撮像している被写体映像を表示する表示部３３０と、無線通信により外部のサーバと通信して、表示部３３０に表示されている被写体映像中の被写体の関連データを前記サーバより取得する通信部３１０と、表示部３３０に表示されている被写体映像に、前記サーバより取得した前記関連データをアドオンして、前記被写体映像中の被写体に情報を追加する映像処理部３２１と、を具備する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ付き携帯電話機などの携帯端末装置、この携帯端末装置を用いた無線通信システム、及び無線通信方法に関する。
【背景技術】
【０００２】
従来、この種の携帯端末装置の撮像機能を利用した技術として、特許文献１に記載の「映像・音声記録方法」、特許文献２に記載の「映像発信装置」、特許文献３に記載の「画像データの管理システム」などが知られている。
【０００３】
特許文献１に記載の「映像・音声記録方法」は、携帯端末装置に搭載されたカメラで撮影した被写体映像の特定箇所に関連付けてコメントを音声入力し、且つこれら映像情報と音声情報を関連させながら記録再生できるようにしている。この「映像・音声記録方法」では、例えば、住宅のキッチンの仕様に関し、顧客から「シンク横の壁をベージュに変えて欲しい」との要望があった場合に、業者が、カメラで撮影したキッチンの映像の中の「シンク横の壁部分」をタッチペンで指定し、マイクで「この壁はベージュに仕上げる」とのコメントを音声入力し、「シンク横の壁部分」の映像情報と、「この壁はベージュに仕上げる」との音声情報をデータリンクさせてＩＣカードに記録（又は無線で送信）するようにしている。
【０００４】
特許文献２に記載の「映像発信装置」は、クライアント側で動作しているビューワから重畳合成させようとする画像の選択指示により、サーバに対して重畳画像を要求し格納するようにしている。また、カメラで撮影された映像は、デジタルデータに変換され、キャプチャした映像データを重畳画像として合成し、それを圧縮符号化してビューワに発信するようにしている。つまり、この「映像発信装置」では、ユーザがサーバに格納されている多数の映像データの中から好みの映像データや状況に応じて必要とされる映像データを選択し、選択した映像データと、カメラで撮影した映像をキャプチャした映像データとを合成するようにしている。
【０００５】
特許文献３に記載の「画像データの管理システム」は、コンピュータ内で管理される地図又は図形情報等の位置データに、デジタルカメラ等によって撮像した実写画像を一義的にリンクさせて管理し、前記地図又は図形情報上で対象物を特定することで、該当する対象物の実写画像を登録したり呼び出したりするようにしている。この「画像データの管理システム」では、例えば、料理店の実写画像を地図データにリンクさせて管理し、ユーザが前記料理店の詳細を知りたいと思った場合に、画面に表示された地図の中から前記料理店を特定指示することで、前記料理店の詳細情報である料理のメニュー等を表示できるようにしている。
【０００６】
ところで、ある人が未知の場所を訪れた場合には、通常、訪れた場所に関する地名や周辺の施設名などの情報を知りたいという要求が生じる。このような場合には、一般に、自分の居場所や行きたい施設までの順路を地域住民に尋ねたり、地域のガイドブックやガイドマップ等で現在地の地名や周辺の施設名などの情報収集を行ったりしている。
【０００７】
しかしながら、このような情報収集の方法では、必要な情報の入手に手間が掛かったり、地理に明るくない人の場合には目的地に到達するまでに時間を要したりするという問題がある。
【０００８】
このような問題を解消する方法として、前記従来の画像合成技術を利用して、ユーザが訪れた未知の場所を携帯端末装置の搭載カメラで写し、その被写体映像と、この被写体映像に関する情報とを、表示部に合成表示することが考えられる。
【特許文献１】特開平９−２００６８２号公報
【特許文献２】特開平１１−１９６４０４号公報
【特許文献３】特開２０００−５７３０２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかしながら、特許文献１に記載の「映像・音声記録方法」では、カメラで撮影した被写体映像に関する情報を、ユーザが音声入力する必要がある。このため、この「映像・音声記録方法」では、カメラで撮影した被写体映像に関する情報、つまりユーザが訪れた場所に関する情報を予め知っていなければならず、上述した問題の解決方法とはなり得ない。また、この「映像・音声記録方法」では、カメラで撮影した被写体映像の情報を知りたい特定箇所を、ユーザが指定しなければならないため、被写体映像の特定箇所を指定するための新たな機能やユーザ操作が必要になってしまう。
【００１０】
同様に、特許文献２に記載の「映像発信装置」では、サーバに格納されている多数の映像データの中から必要とされる映像データをユーザが選択する必要がある。このため、この「映像発信装置」では、サーバに格納されている多数の映像データの中の必要とされる映像データに関する情報、つまりユーザが訪れた場所に関する情報を予め知っている必要があり、上述した問題の解決方法とはなり得ない。また、この「映像発信装置」では、サーバから必要とされる映像データをユーザが選択するための新たな機能やユーザ操作が必要になってしまう。
【００１１】
同様に、特許文献３に記載の「画像データの管理システム」では、画面に表示された地図又は図形情報上で、情報を得たい対象物をユーザが特定する必要がある。このため、この「画像データの管理システム」では、画面に表示された地図又は図形情報上の対象物の情報、つまりユーザが訪れた場所に関する情報を予め知っていなければならず、上述した問題の解決方法とはなり得ない。また、この「画像データの管理システム」では、情報を得たい対象物をユーザが特定するための新たな機能やユーザ操作が必要になってしまう。
【００１２】
また、ある人が未知の場所を訪れた場合には、自分の現在位置や向いている方角を正しく認識できないと、仮にガイドブックやガイドマップを手にしていても、それを上手に活用することは難しい。
【００１３】
本発明は、かかる点に鑑みてなされたもので、ユーザが煩わしい入力操作をすることなく、訪れた未知の場所の情報を容易に収集することができる携帯端末装置、無線通信システム、及び無線通信方法を提供することを目的とする。
【課題を解決するための手段】
【００１４】
かかる課題を解決するため、本発明の携帯端末装置は、被写体を撮像する撮像部と、前記撮像部が撮像している被写体映像を表示する表示部と、無線通信により外部のサーバと通信して、前記表示部に表示されている被写体映像中の被写体に関連する関連データを前記サーバより取得する通信部と、前記表示部に表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づいた情報を追加する映像処理部と、を具備する構成を採る。
【発明の効果】
【００１５】
本発明によれば、前記撮像部で前記被写体を撮像して前記通信部が無線通信により外部のサーバと通信することにより、前記表示部に表示されている前記被写体映像中の被写体の前記関連データを前記サーバより取得することができる。そして、前記映像処理部により、前記サーバより取得した前記関連データを、前記表示部に表示されている前記被写体映像にアドオンして、前記被写体映像中の被写体に関連する情報を追加することができる。従って、本発明によれば、ユーザが煩わしい入力操作をすることなく、前記撮像部が撮像している被写体映像に追加された被写体の情報から、訪れた未知の場所の情報を容易に収集することができる。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、各図において同一の構成または機能を有する構成要素及び相当部分には、同一の符号を付してその説明は繰り返さない。
【００１７】
（実施の形態１）
図１は、本発明の実施の形態に係る携帯端末装置を用いる無線通信システムの構成を示す概略構成図である。無線通信システム１００は、サーバ２００、携帯端末装置３００、基地局装置４００、全地球測位システム（ＧＰＳ：Global Positioning System）のＧＰＳ衛星５００などで構成されている。
【００１８】
図２は、無線通信システム１００で用いるサーバ２００の構成を示すブロック図である。本例のサーバ２００は、通信部２１０、制御部２２０、ハードディスク２３０、検索エンジン２４０、メモリ２５０を備えている。通信部２１０は、受信部２１１と送信部２１２からなる。制御部２２０は、映像解析部２２１を備えている。ハードディスク２３０は、ＧＩＳ（Geographical Information System）などのデータベースである地図データ２３１と、地図データ２３１上の地名や施設名などに関連する関連データ２３２を格納している。メモリ２５０は、携帯端末装置３００の現在位置を示す端末現在位置データ２５１と、携帯端末装置３００の所有者の公表データである端末所有者公表データ２５２を格納している。なお、ハードディスク２３０は、図１に示すような外付けタイプ、あるいは図２に示すような内蔵タイプの何れであってもよい。
【００１９】
図３は、本発明の実施の形態１に係る携帯端末装置３００の構成を示すブロック図である。本例の携帯端末装置３００は、通信部３１０、制御部３２０、表示部３３０、操作部３４０、撮像部３５０を備えている。通信部３１０は、受信部３１１と送信部３１２からなる。制御部３２０は、映像処理部３２１を備えている。
【００２０】
ところで、前述したように、ある人が未知の場所を訪れた場合、ガイドブックやガイドマップ等で現在地の地名や周辺の施設名などの情報収集を行うと、必要な情報の入手に手間が掛かったり、目的地に到達するまでに時間を要したりするという問題がある。
【００２１】
そこで、このような未知の場所を訪れた場合、本例の無線通信システム１００では、まず、図４に示すように、ユーザＡは、携帯端末装置３００の操作部３４０を操作して撮像部３５０を起動し、撮像部３５０のカメラ（ＣＣＤカメラ）３５１（図１参照）で、ユーザＡが訪れた場所の光景Ｂを撮像する。
【００２２】
撮像部３５０のカメラ３５１は、撮像した光景Ｂの映像データを制御部３２０の映像処理部３２１に送る。映像処理部３２１は、カメラ３５１から送られる映像データを、表示部３３０及び通信部３１０の送信部３１２に送る。表示部３３０は、映像処理部３２１から送られる映像データを画像信号に変換し、これを、図４及び図５に示すように、カメラ３５１が撮像している光景Ｂの被写体映像Ｃとして、携帯端末装置３００の液晶パネル３３１（図１参照）上に表示する。ここで、カメラ３５１が撮像している被写体映像Ｃは、メモリに格納する必要はなく、液晶パネル３３１上に表示するだけでよい。
【００２３】
一方、携帯端末装置３００の送信部３１２は、映像処理部３２１から送られる映像データを無線信号に変調し、これを、基地局装置４００に送信する（図１参照）。基地局装置４００は、携帯端末装置３００の送信部３１２から送信される無線信号を受信し、これをサーバ２００に送信する。
【００２４】
サーバ２００は、基地局装置４００を介して携帯端末装置３００の送信部３１２から送信される無線信号を、通信部２１０の受信部２１１で受信する（図２参照）。受信部２１１は、基地局装置４００を介して受信した前記無線信号を被写体映像Ｃの映像データに復調し、これを制御部２２０の映像解析部２２１に送る。
【００２５】
サーバ２００の映像解析部２２１は、受信部２１１で復調された被写体映像Ｃの映像データを解析して、被写体映像Ｃに映し出されている被写体（例えば、道路、ビルや店舗などの施設）の位置、方向、形状、及びそれらの相互位置関係などを認識して数値化する。また、映像解析部２２１は、数値化した映像データを、ハードディスク２３０に格納されている地図データ２３１と照合し、地図データ２３１の中から被写体映像Ｃに映し出されている被写体に該当する被写体データを、検索エンジン２４０により検索する。そして、映像解析部２２１は、検索エンジン２４０により検索された被写体データに関連付けられてハードディスク２３０に格納されている被写体の関連データ２３２の中から被写体映像Ｃに映し出されている被写体に該当する被写体関連データを抽出し、抽出した被写体関連データを送信部２１２に送る。送信部２１２は、映像解析部２２１から送られる被写体関連データを、被写体映像Ｃ中に映し出されている被写体データに関連付けて基地局装置４００に送信する。
【００２６】
基地局装置４００は、サーバ２００の送信部２１２から送られる被写体関連データを無線信号に変調し、これを無線通信により携帯端末装置３００に送信する。携帯端末装置３００は、基地局装置４００から送信される無線信号を、通信部３１０の受信部３１１で受信する。受信部３１１は、基地局装置４００から受信した無線信号を、被写体関連データに復調し、これを制御部３２０の映像処理部３２１に送る。
【００２７】
携帯端末装置３００の映像処理部３２１は、受信部３１１から送られる被写体関連データを文字データに変換し、これを、撮像部３５０のカメラ３５１から送られる被写体映像Ｃの映像データにアドオンして表示部３３０に送る。表示部３３０は、被写体映像Ｃの映像データに前記文字データがアドオンされて映像処理部３２１から送られる画像データを、携帯端末装置３００の液晶パネル３３１上に表示する。
【００２８】
これにより、本例の携帯端末装置３００の液晶パネル３３１上には、図６に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５が追加された映像が表示される。
【００２９】
上述のように、本例の携帯端末装置３００は、ユーザＡが未知の場所を訪れた場合に、カメラ３５１で訪れた場所の光景Ｂを撮像し（図４参照）、サーバ２００と通信するだけで、その液晶パネル３３１上に表示されている被写体映像Ｃ中の被写体に該当する被写体関連データをサーバ２００から取得することができる。そして、本例の携帯端末装置３００は、その映像処理部３２１により、サーバ２００から取得した被写体関連データを、液晶パネル３３１上に表示されている被写体映像Ｃにアドオンして、図６に示すように、被写体映像Ｃ中の被写体に関連情報を追加することができる。
【００３０】
従って、本例の携帯端末装置３００では、ユーザＡが煩わしい入力操作をすることなく、その撮像部３５０を「虫眼鏡」的なツールとして使用して、カメラ３５１が撮像している被写体映像Ｃにアドオンされて液晶パネル３３１上に表示された被写体の関連情報から、訪れた未知の場所の情報を容易に収集することができる。
【００３１】
また、本例の携帯端末装置３００では、カメラ３５１が撮像している被写体映像Ｃをメモリに格納する必要はなく、液晶パネル３３１上に表示するだけでよいので、ユーザＡは訪れた場所の光景Ｂをカメラ３５１で撮り続けながら、自分のいる場所や周辺の施設などの関連情報を随時確認することができる。
【００３２】
このように、本例の携帯端末装置３００では、ユーザＡが未知の場所を訪れた場合でも、ユーザＡは、液晶パネル３３１上に表示されている被写体映像Ｃにより自分の現在位置や向いている方角を、該当場所の案内図などを参照して正しく認識することができるので、訪れた場所の情報を容易且つ正確に収集でき、また、ガイドブックやガイドマップを持参している場合には、それを上手に活用できるようになる。
【００３３】
（実施の形態２）
図７は、本発明の実施の形態２に係る携帯端末装置７００の構成を示すブロック図である。本例の携帯端末装置７００は、前述した携帯端末装置３００の構成に加えて、ＧＰＳ受信部７１０、ジャイロセンサ７２０を備えている。また、本例の携帯端末装置７００の制御部３２０は、前述した映像処理部３２１の他に、測位処理部３２２、到達距離演算部３２３を備えている。その他の構成は、前述した携帯端末装置３００の構成と同じであるので、その説明は省略する。
【００３４】
本例の携帯端末装置７００は、ＧＰＳ受信部７１０で、ＧＰＳ衛星５００（図１参照）が発信する位置情報を無線通信により受信する。ＧＰＳ受信部７１０は、ＧＰＳ衛星５００から受信した位置情報を、制御部３２０の測位処理部３２２に送る。測位処理部３２２は、ＧＰＳ受信部７１０により受信したＧＰＳ衛星５００が発信する位置情報に基づいて、携帯端末装置７００の現在位置を測位し、測位した自端末の現在位置を示す測位データを制御部３２０の映像処理部３２１に送る。
【００３５】
また、本例の携帯端末装置７００は、カメラ３５１が撮像している被写体映像Ｃ中の被写体に対する自端末の向きを、ジャイロセンサ７２０で検出する。ジャイロセンサ７２０は、検出した自端末の向きの検出データを、制御部３２０の到達距離演算部３２３に送る。
【００３６】
到達距離演算部３２３は、ジャイロセンサ７２０で検出した自端末の向きの検出データと、測位処理部３２２で測位した自端末の現在位置を示す測位データとに基づいて、自端末から前記被写体までの到達距離を算出する。この到達距離演算部３２３により算出された到達距離データは、制御部３２０の映像処理部３２１に送られる。
【００３７】
本例の携帯端末装置７００の映像処理部３２１は、到達距離演算部３２３で算出した前記到達距離の到達距離データを数値データに変換し、これを、撮像部３５０のカメラ３５１から送られる被写体映像Ｃの映像データにアドオンして表示部３３０に送る。表示部３３０は、被写体映像Ｃの映像データに前記数値データがアドオンされて映像処理部３２１から送られる画像データを、携帯端末装置３００の液晶パネル３３１上に表示する。
【００３８】
これにより、本例の携帯端末装置７００の液晶パネル３３１上には、図８に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５とともに、自端末から各被写体までの到達距離を示す数値Ｅ１，Ｅ２，Ｅ３，Ｅ４，Ｅ５が追加された映像が表示される。
【００３９】
上述のように、本例の携帯端末装置７００は、前述の携帯端末装置３００と同様、ユーザＡが煩わしい入力操作をすることなく、カメラ３５１が撮像している被写体映像Ｃ中に被写体の情報をアドオンできるとともに、自端末から各被写体までの到達距離を示す数値Ｅ１，Ｅ２，Ｅ３，Ｅ４，Ｅ５が追加された映像を液晶パネル３３１上に表示できるので、訪れた未知の場所のより詳しい情報を容易に収集することができる。
【００４０】
また、本例の携帯端末装置７００では、例えば、ユーザＡが訪れた未知の場所の名産品を購入する際に、被写体映像Ｃ中の被写体の情報から同じ名産品を扱っている商店が複数あるとわかった場合、各商店までの到達距離を容易に知ることができるので、ユーザＡが名産品を購入する際の所要時間などを瞬時に判断することができる。
【００４１】
（実施の形態３）
図９は、本発明の実施の形態３に係る携帯端末装置９００の構成を示すブロック図である。本例の携帯端末装置９００は、前述した携帯端末装置３００の構成に加えて、到来波検出部９１０を備えている。その他の構成は、前述した携帯端末装置３００の構成と同じであるので、その説明は省略する。
【００４２】
本例の携帯端末装置９００は、到来波検出部９１０で、サーバ２００との交信を中継する基地局装置４００からの到来波を検出する。到来波検出部９１０は、基地局装置４００からの到来波を検出すると、検出した到来波の到来波データを制御部３２０の映像処理部３２１に送る。
【００４３】
本例の携帯端末装置９００の映像処理部３２１は、到来波検出部９１０で検出した前記到来波の到来波データを、前記到来波の到来方向を示す到来波情報マークデータに変換し、これを、液晶パネル３３１上に表示されている被写体映像Ｃにアドオンして、表示部３３０に送る。表示部３３０は、被写体映像Ｃの映像データに前記到来波情報マークデータがアドオンされて映像処理部３２１から入力される画像データを、携帯端末装置３００の液晶パネル３３１上に表示する。
【００４４】
これにより、本例の携帯端末装置９００の液晶パネル３３１上には、図１０に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５とともに、被写体映像Ｃに、基地局装置４００から到来する到来波の到来方向を示す到来波情報マークＦが表示される。
【００４５】
上述のように、本例の携帯端末装置９００は、前述の携帯端末装置３００と同様、ユーザＡが煩わしい入力操作をすることなく、カメラ３５１が撮像している被写体映像Ｃ中に被写体の情報をアドオンできるとともに、基地局装置４００から到来する到来波の到来方向を示す到来波情報マークＦを液晶パネル３３１上に表示できるので、ユーザＡが良好に通信できる場所を容易に見つけだすことができる。
【００４６】
ここで、本例の携帯端末装置９００の液晶パネル３３１上に表示する到来波情報マークＦは、前記到来波の到来順序を表す到来順序情報と、前記到来波の電波強度を表す電波強度情報を有していることが好ましい。これにより、本例の携帯端末装置９００のユーザＡは、液晶パネル３３１上に表示された到来波情報マークＦから、基地局装置４００から到来する到来波の到来順序情報及び電波強度を容易に知ることができるので、より良好に通信できる場所を容易に見つけだすことができる。
【００４７】
（実施の形態４）
図１１は、本発明の実施の形態４に係る携帯端末装置１１００の構成を示すブロック図である。本例の携帯端末装置１１００は、前述した携帯端末装置３００，７００，９００の構成に加えて、記憶部１１１０を備えている。その他の構成は、前述した携帯端末装置３００，７００，９００の構成と同じであるので、その説明は省略する。
【００４８】
本例の携帯端末装置１１００は、前述した携帯端末装置３００，７００，９００の全ての構成を備えているので、例えば、携帯端末装置３００と同様、その液晶パネル３３１上に、図１２に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５が追加された映像を表示できる。
【００４９】
また、本例の携帯端末装置１１００は、携帯端末装置７００と同様に、その液晶パネル３３１上に、図１２に示すように、自端末から各被写体までの到達距離を示す数値Ｅ１，Ｅ２，Ｅ３，Ｅ４，Ｅ５が追加された映像を表示できる。
【００５０】
また、本例の携帯端末装置１１００は、携帯端末装置９００と同様に、その液晶パネル３３１上に、図１２に示すように、被写体映像Ｃに、基地局装置４００から到来する到来波の到来方向を示す到来波情報マークＦを表示できる。
【００５１】
また、本例の携帯端末装置１１００は、その記憶部１１１０に、所有者の公表データである端末所有者公表データを格納したり、これを制御部３２０で呼び出したりできる。そして、本例の携帯端末装置１１００は、記憶部１１１０から制御部３２０で呼び出した端末所有者公表データを、通信部３１０の送信部３１２でサーバ２００に送信して、サーバ２００のメモリ２５０に端末所有者公表データ２５２として登録することができる。
【００５２】
これにより、本例の携帯端末装置１１００を用いた無線通信システムでは、サーバ２００にアクセス可能な他端末が、サーバ２００のメモリ２５０に登録してある携帯端末装置１１００の端末所有者公表データ２５２を得ることができる。
【００５３】
従って、本例の携帯端末装置１１００では、例えば、ユーザＡが、他端末の所有者と待ち合わせを行う場合などに、図１２に示すように、自分の居場所や周囲の光景Ｂをカメラ３５１で撮像し、その被写体映像Ｃ中に「待ち合わせ場所」という公表情報Ｇをアドオンして他端末に送信することにより、ユーザＡは他端末の所有者とより正確且つ迅速にコミュニケーションを取ることができる。
【００５４】
本発明に係る携帯端末装置の１つの態様は、被写体を撮像する撮像部と、前記撮像部が撮像している被写体映像を表示する表示部と、無線通信により外部のサーバと通信して、前記表示部に表示されている被写体映像中の被写体に関連する関連データを前記サーバより取得する通信部と、前記表示部に表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づいた情報を追加する映像処理部と、を具備する構成を採る。
【００５５】
この構成によれば、ユーザが煩わしい入力操作をすることなく、前記撮像部が撮像している被写体映像に追加された被写体の情報から、訪れた未知の場所の情報を容易に収集することができる。
【００５６】
本発明に係る携帯端末装置の１つの態様は、ＧＰＳ衛星が発信する位置情報を無線通信により受信するＧＰＳ受信部と、前記ＧＰＳ受信部が受信した前記位置情報に基づいて自端末の現在位置を測位する測位処理部と、前記被写体に対する自端末の向きを検出するジャイロセンサと、前記ジャイロセンサで検出した自端末の向きと、前記測位処理部で測位した自端末の現在位置とに基づいて、自端末から前記被写体までの到達距離を算出する到達距離演算部と、をさらに備え、前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到達距離演算部で算出した前記到達距離に基づいた情報を追加する構成を採る。
【００５７】
この構成によれば、自端末から各被写体までの到達距離が追加された映像を前記表示部に表示できるので、訪れた未知の場所のより詳しい情報を容易に収集することができる。
【００５８】
本発明に係る携帯端末装置の１つの態様は、前記通信部と前記サーバとの通信を中継する基地局装置からの到来波を検出する到来波検出部をさらに備え、前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到来波検出部が検出した到来波に基づいて、前記到来波の到来方向を示す到来波情報を追加する構成を採る。
【００５９】
この構成によれば、前記基地局装置から到来する到来波の到来方向を示す到来波情報を前記表示部に表示できるので、ユーザが良好に通信できる場所を容易に見つけだすことができる。
【００６０】
本発明に係る携帯端末装置の１つの態様は、前記到来波情報は、前記到来波の到来順序を表す到来順序情報と、前記到来波の電波強度を表す電波強度情報を有している構成を採る。
【００６１】
この構成によれば、前記表示部に表示された到来波情報から、前記基地局装置から到来する到来波の到来順序情報及び電波強度を容易に知ることができるので、より良好に通信できる場所を容易に見つけだすことができる。
【産業上の利用可能性】
【００６２】
本発明に係る携帯端末装置、無線通信装置及び方法は、ユーザが煩わしい入力操作をすることなく、前記撮像部が撮像している被写体映像に追加された被写体の名称から、訪れた未知の場所の情報を容易に収集することができるので、カメラ付き携帯電話機などの携帯端末装置、この携帯端末装置を用いた無線通信システム、及び無線通信方法として有用である。
【図面の簡単な説明】
【００６３】
【図１】本発明の実施の形態に係る携帯端末装置を用いる無線通信システムの構成を示す概略構成図
【図２】前記無線通信システムで用いるサーバの構成を示すブロック図
【図３】本発明の実施の形態１に係る携帯端末装置の構成を示すブロック図
【図４】本発明の実施の形態１に係る携帯端末装置に搭載されたカメラで、ユーザが訪れた場所を撮像している状態を示す概略図
【図５】本発明の実施の形態１に係る携帯端末装置の表示部に、前記カメラが撮像している被写体映像が表示されている状態を示す概略図
【図６】本発明の実施の形態１に係る携帯端末装置の表示部に表示されている被写体映像に、前記サーバより取得した関連データをアドオンして、前記被写体映像中の被写体に名称を追加した状態を示す前記表示部の概略図
【図７】本発明の実施の形態２に係る携帯端末装置の構成を示すブロック図
【図８】本発明の実施の形態２に係る携帯端末装置の表示部に表示されている被写体映像に、前記関連データ、及び自端末から前記被写体までの到達距離データをアドオンして、前記被写体映像中の被写体に名称及び到達距離を追加した状態を示す前記表示部の概略図
【図９】本発明の実施の形態３に係る携帯端末装置の構成を示すブロック図
【図１０】本発明の実施の形態３に係る携帯端末装置の表示部に表示されている被写体映像に、前記関連データ、及び前記サーバとの通信を中継する基地局装置からの到来波データをアドオンして、前記被写体映像中の被写体に情報を追加するとともに、前記被写体映像に前記到来波の到来方向を示す到来波情報マークを表示した状態を示す前記表示部の概略図
【図１１】本発明の実施の形態４に係る携帯端末装置の構成を示すブロック図
【図１２】本発明の実施の形態４に係る携帯端末装置の表示部に表示されている被写体映像に、前記関連データ、前記到達距離データ、前記到来波データ、前記到来波データ、及び端末所有者公表データをアドオンして、前記被写体映像中の被写体に情報、到達距離、到来波情報マーク、及び端末所有者のメッセージを追加した状態を示す前記表示部の概略図
【符号の説明】
【００６４】
１００ 無線通信システム
２００ サーバ
２１０ 通信部
２１１ 受信部
２１２ 送信部
２２０ 制御部
２２１ 映像解析部
２３０ ハードディスク
２３１ 地図データ
２３２ 関連データ
２４０ 検索エンジン
２５０ メモリ
２５１ 端末現在位置データ
２５２ 端末所有者公表データ
３００，７００，９００，１１０ 携帯端末装置
３１０ 通信部
３１１ 受信部
３１２ 送信部
３２０ 制御部
３２１ 映像処理部
３３０ 表示部
３３１ 液晶パネル
３４０ 操作部
３５０ 撮像部
３５１ カメラ
７１０ ＧＰＳ受信部
７２０ ジャイロセンサ
９１０ 到来波検出部
Ａ ユーザ
Ｂ 光景
Ｃ 被写体映像
Ｄ１ 地名
Ｄ２，Ｄ３，Ｄ４，Ｄ５ 施設名
Ｅ２，Ｅ３，Ｅ４，Ｅ５ 到達距離を示す数値
Ｆ 到来波情報マーク
Ｇ 公表情報
【技術分野】
【０００１】
本発明は、カメラ付き携帯電話機などの携帯端末装置、この携帯端末装置を用いた無線通信システム、及び無線通信方法に関する。
【背景技術】
【０００２】
従来、この種の携帯端末装置の撮像機能を利用した技術として、特許文献１に記載の「映像・音声記録方法」、特許文献２に記載の「映像発信装置」、特許文献３に記載の「画像データの管理システム」などが知られている。
【０００３】
特許文献１に記載の「映像・音声記録方法」は、携帯端末装置に搭載されたカメラで撮影した被写体映像の特定箇所に関連付けてコメントを音声入力し、且つこれら映像情報と音声情報を関連させながら記録再生できるようにしている。この「映像・音声記録方法」では、例えば、住宅のキッチンの仕様に関し、顧客から「シンク横の壁をベージュに変えて欲しい」との要望があった場合に、業者が、カメラで撮影したキッチンの映像の中の「シンク横の壁部分」をタッチペンで指定し、マイクで「この壁はベージュに仕上げる」とのコメントを音声入力し、「シンク横の壁部分」の映像情報と、「この壁はベージュに仕上げる」との音声情報をデータリンクさせてＩＣカードに記録（又は無線で送信）するようにしている。
【０００４】
特許文献２に記載の「映像発信装置」は、クライアント側で動作しているビューワから重畳合成させようとする画像の選択指示により、サーバに対して重畳画像を要求し格納するようにしている。また、カメラで撮影された映像は、デジタルデータに変換され、キャプチャした映像データを重畳画像として合成し、それを圧縮符号化してビューワに発信するようにしている。つまり、この「映像発信装置」では、ユーザがサーバに格納されている多数の映像データの中から好みの映像データや状況に応じて必要とされる映像データを選択し、選択した映像データと、カメラで撮影した映像をキャプチャした映像データとを合成するようにしている。
【０００５】
特許文献３に記載の「画像データの管理システム」は、コンピュータ内で管理される地図又は図形情報等の位置データに、デジタルカメラ等によって撮像した実写画像を一義的にリンクさせて管理し、前記地図又は図形情報上で対象物を特定することで、該当する対象物の実写画像を登録したり呼び出したりするようにしている。この「画像データの管理システム」では、例えば、料理店の実写画像を地図データにリンクさせて管理し、ユーザが前記料理店の詳細を知りたいと思った場合に、画面に表示された地図の中から前記料理店を特定指示することで、前記料理店の詳細情報である料理のメニュー等を表示できるようにしている。
【０００６】
ところで、ある人が未知の場所を訪れた場合には、通常、訪れた場所に関する地名や周辺の施設名などの情報を知りたいという要求が生じる。このような場合には、一般に、自分の居場所や行きたい施設までの順路を地域住民に尋ねたり、地域のガイドブックやガイドマップ等で現在地の地名や周辺の施設名などの情報収集を行ったりしている。
【０００７】
しかしながら、このような情報収集の方法では、必要な情報の入手に手間が掛かったり、地理に明るくない人の場合には目的地に到達するまでに時間を要したりするという問題がある。
【０００８】
このような問題を解消する方法として、前記従来の画像合成技術を利用して、ユーザが訪れた未知の場所を携帯端末装置の搭載カメラで写し、その被写体映像と、この被写体映像に関する情報とを、表示部に合成表示することが考えられる。
【特許文献１】特開平９−２００６８２号公報
【特許文献２】特開平１１−１９６４０４号公報
【特許文献３】特開２０００−５７３０２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかしながら、特許文献１に記載の「映像・音声記録方法」では、カメラで撮影した被写体映像に関する情報を、ユーザが音声入力する必要がある。このため、この「映像・音声記録方法」では、カメラで撮影した被写体映像に関する情報、つまりユーザが訪れた場所に関する情報を予め知っていなければならず、上述した問題の解決方法とはなり得ない。また、この「映像・音声記録方法」では、カメラで撮影した被写体映像の情報を知りたい特定箇所を、ユーザが指定しなければならないため、被写体映像の特定箇所を指定するための新たな機能やユーザ操作が必要になってしまう。
【００１０】
同様に、特許文献２に記載の「映像発信装置」では、サーバに格納されている多数の映像データの中から必要とされる映像データをユーザが選択する必要がある。このため、この「映像発信装置」では、サーバに格納されている多数の映像データの中の必要とされる映像データに関する情報、つまりユーザが訪れた場所に関する情報を予め知っている必要があり、上述した問題の解決方法とはなり得ない。また、この「映像発信装置」では、サーバから必要とされる映像データをユーザが選択するための新たな機能やユーザ操作が必要になってしまう。
【００１１】
同様に、特許文献３に記載の「画像データの管理システム」では、画面に表示された地図又は図形情報上で、情報を得たい対象物をユーザが特定する必要がある。このため、この「画像データの管理システム」では、画面に表示された地図又は図形情報上の対象物の情報、つまりユーザが訪れた場所に関する情報を予め知っていなければならず、上述した問題の解決方法とはなり得ない。また、この「画像データの管理システム」では、情報を得たい対象物をユーザが特定するための新たな機能やユーザ操作が必要になってしまう。
【００１２】
また、ある人が未知の場所を訪れた場合には、自分の現在位置や向いている方角を正しく認識できないと、仮にガイドブックやガイドマップを手にしていても、それを上手に活用することは難しい。
【００１３】
本発明は、かかる点に鑑みてなされたもので、ユーザが煩わしい入力操作をすることなく、訪れた未知の場所の情報を容易に収集することができる携帯端末装置、無線通信システム、及び無線通信方法を提供することを目的とする。
【課題を解決するための手段】
【００１４】
かかる課題を解決するため、本発明の携帯端末装置は、被写体を撮像する撮像部と、前記撮像部が撮像している被写体映像を表示する表示部と、無線通信により外部のサーバと通信して、前記表示部に表示されている被写体映像中の被写体に関連する関連データを前記サーバより取得する通信部と、前記表示部に表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づいた情報を追加する映像処理部と、を具備する構成を採る。
【発明の効果】
【００１５】
本発明によれば、前記撮像部で前記被写体を撮像して前記通信部が無線通信により外部のサーバと通信することにより、前記表示部に表示されている前記被写体映像中の被写体の前記関連データを前記サーバより取得することができる。そして、前記映像処理部により、前記サーバより取得した前記関連データを、前記表示部に表示されている前記被写体映像にアドオンして、前記被写体映像中の被写体に関連する情報を追加することができる。従って、本発明によれば、ユーザが煩わしい入力操作をすることなく、前記撮像部が撮像している被写体映像に追加された被写体の情報から、訪れた未知の場所の情報を容易に収集することができる。
【発明を実施するための最良の形態】
【００１６】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、各図において同一の構成または機能を有する構成要素及び相当部分には、同一の符号を付してその説明は繰り返さない。
【００１７】
（実施の形態１）
図１は、本発明の実施の形態に係る携帯端末装置を用いる無線通信システムの構成を示す概略構成図である。無線通信システム１００は、サーバ２００、携帯端末装置３００、基地局装置４００、全地球測位システム（ＧＰＳ：Global Positioning System）のＧＰＳ衛星５００などで構成されている。
【００１８】
図２は、無線通信システム１００で用いるサーバ２００の構成を示すブロック図である。本例のサーバ２００は、通信部２１０、制御部２２０、ハードディスク２３０、検索エンジン２４０、メモリ２５０を備えている。通信部２１０は、受信部２１１と送信部２１２からなる。制御部２２０は、映像解析部２２１を備えている。ハードディスク２３０は、ＧＩＳ（Geographical Information System）などのデータベースである地図データ２３１と、地図データ２３１上の地名や施設名などに関連する関連データ２３２を格納している。メモリ２５０は、携帯端末装置３００の現在位置を示す端末現在位置データ２５１と、携帯端末装置３００の所有者の公表データである端末所有者公表データ２５２を格納している。なお、ハードディスク２３０は、図１に示すような外付けタイプ、あるいは図２に示すような内蔵タイプの何れであってもよい。
【００１９】
図３は、本発明の実施の形態１に係る携帯端末装置３００の構成を示すブロック図である。本例の携帯端末装置３００は、通信部３１０、制御部３２０、表示部３３０、操作部３４０、撮像部３５０を備えている。通信部３１０は、受信部３１１と送信部３１２からなる。制御部３２０は、映像処理部３２１を備えている。
【００２０】
ところで、前述したように、ある人が未知の場所を訪れた場合、ガイドブックやガイドマップ等で現在地の地名や周辺の施設名などの情報収集を行うと、必要な情報の入手に手間が掛かったり、目的地に到達するまでに時間を要したりするという問題がある。
【００２１】
そこで、このような未知の場所を訪れた場合、本例の無線通信システム１００では、まず、図４に示すように、ユーザＡは、携帯端末装置３００の操作部３４０を操作して撮像部３５０を起動し、撮像部３５０のカメラ（ＣＣＤカメラ）３５１（図１参照）で、ユーザＡが訪れた場所の光景Ｂを撮像する。
【００２２】
撮像部３５０のカメラ３５１は、撮像した光景Ｂの映像データを制御部３２０の映像処理部３２１に送る。映像処理部３２１は、カメラ３５１から送られる映像データを、表示部３３０及び通信部３１０の送信部３１２に送る。表示部３３０は、映像処理部３２１から送られる映像データを画像信号に変換し、これを、図４及び図５に示すように、カメラ３５１が撮像している光景Ｂの被写体映像Ｃとして、携帯端末装置３００の液晶パネル３３１（図１参照）上に表示する。ここで、カメラ３５１が撮像している被写体映像Ｃは、メモリに格納する必要はなく、液晶パネル３３１上に表示するだけでよい。
【００２３】
一方、携帯端末装置３００の送信部３１２は、映像処理部３２１から送られる映像データを無線信号に変調し、これを、基地局装置４００に送信する（図１参照）。基地局装置４００は、携帯端末装置３００の送信部３１２から送信される無線信号を受信し、これをサーバ２００に送信する。
【００２４】
サーバ２００は、基地局装置４００を介して携帯端末装置３００の送信部３１２から送信される無線信号を、通信部２１０の受信部２１１で受信する（図２参照）。受信部２１１は、基地局装置４００を介して受信した前記無線信号を被写体映像Ｃの映像データに復調し、これを制御部２２０の映像解析部２２１に送る。
【００２５】
サーバ２００の映像解析部２２１は、受信部２１１で復調された被写体映像Ｃの映像データを解析して、被写体映像Ｃに映し出されている被写体（例えば、道路、ビルや店舗などの施設）の位置、方向、形状、及びそれらの相互位置関係などを認識して数値化する。また、映像解析部２２１は、数値化した映像データを、ハードディスク２３０に格納されている地図データ２３１と照合し、地図データ２３１の中から被写体映像Ｃに映し出されている被写体に該当する被写体データを、検索エンジン２４０により検索する。そして、映像解析部２２１は、検索エンジン２４０により検索された被写体データに関連付けられてハードディスク２３０に格納されている被写体の関連データ２３２の中から被写体映像Ｃに映し出されている被写体に該当する被写体関連データを抽出し、抽出した被写体関連データを送信部２１２に送る。送信部２１２は、映像解析部２２１から送られる被写体関連データを、被写体映像Ｃ中に映し出されている被写体データに関連付けて基地局装置４００に送信する。
【００２６】
基地局装置４００は、サーバ２００の送信部２１２から送られる被写体関連データを無線信号に変調し、これを無線通信により携帯端末装置３００に送信する。携帯端末装置３００は、基地局装置４００から送信される無線信号を、通信部３１０の受信部３１１で受信する。受信部３１１は、基地局装置４００から受信した無線信号を、被写体関連データに復調し、これを制御部３２０の映像処理部３２１に送る。
【００２７】
携帯端末装置３００の映像処理部３２１は、受信部３１１から送られる被写体関連データを文字データに変換し、これを、撮像部３５０のカメラ３５１から送られる被写体映像Ｃの映像データにアドオンして表示部３３０に送る。表示部３３０は、被写体映像Ｃの映像データに前記文字データがアドオンされて映像処理部３２１から送られる画像データを、携帯端末装置３００の液晶パネル３３１上に表示する。
【００２８】
これにより、本例の携帯端末装置３００の液晶パネル３３１上には、図６に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５が追加された映像が表示される。
【００２９】
上述のように、本例の携帯端末装置３００は、ユーザＡが未知の場所を訪れた場合に、カメラ３５１で訪れた場所の光景Ｂを撮像し（図４参照）、サーバ２００と通信するだけで、その液晶パネル３３１上に表示されている被写体映像Ｃ中の被写体に該当する被写体関連データをサーバ２００から取得することができる。そして、本例の携帯端末装置３００は、その映像処理部３２１により、サーバ２００から取得した被写体関連データを、液晶パネル３３１上に表示されている被写体映像Ｃにアドオンして、図６に示すように、被写体映像Ｃ中の被写体に関連情報を追加することができる。
【００３０】
従って、本例の携帯端末装置３００では、ユーザＡが煩わしい入力操作をすることなく、その撮像部３５０を「虫眼鏡」的なツールとして使用して、カメラ３５１が撮像している被写体映像Ｃにアドオンされて液晶パネル３３１上に表示された被写体の関連情報から、訪れた未知の場所の情報を容易に収集することができる。
【００３１】
また、本例の携帯端末装置３００では、カメラ３５１が撮像している被写体映像Ｃをメモリに格納する必要はなく、液晶パネル３３１上に表示するだけでよいので、ユーザＡは訪れた場所の光景Ｂをカメラ３５１で撮り続けながら、自分のいる場所や周辺の施設などの関連情報を随時確認することができる。
【００３２】
このように、本例の携帯端末装置３００では、ユーザＡが未知の場所を訪れた場合でも、ユーザＡは、液晶パネル３３１上に表示されている被写体映像Ｃにより自分の現在位置や向いている方角を、該当場所の案内図などを参照して正しく認識することができるので、訪れた場所の情報を容易且つ正確に収集でき、また、ガイドブックやガイドマップを持参している場合には、それを上手に活用できるようになる。
【００３３】
（実施の形態２）
図７は、本発明の実施の形態２に係る携帯端末装置７００の構成を示すブロック図である。本例の携帯端末装置７００は、前述した携帯端末装置３００の構成に加えて、ＧＰＳ受信部７１０、ジャイロセンサ７２０を備えている。また、本例の携帯端末装置７００の制御部３２０は、前述した映像処理部３２１の他に、測位処理部３２２、到達距離演算部３２３を備えている。その他の構成は、前述した携帯端末装置３００の構成と同じであるので、その説明は省略する。
【００３４】
本例の携帯端末装置７００は、ＧＰＳ受信部７１０で、ＧＰＳ衛星５００（図１参照）が発信する位置情報を無線通信により受信する。ＧＰＳ受信部７１０は、ＧＰＳ衛星５００から受信した位置情報を、制御部３２０の測位処理部３２２に送る。測位処理部３２２は、ＧＰＳ受信部７１０により受信したＧＰＳ衛星５００が発信する位置情報に基づいて、携帯端末装置７００の現在位置を測位し、測位した自端末の現在位置を示す測位データを制御部３２０の映像処理部３２１に送る。
【００３５】
また、本例の携帯端末装置７００は、カメラ３５１が撮像している被写体映像Ｃ中の被写体に対する自端末の向きを、ジャイロセンサ７２０で検出する。ジャイロセンサ７２０は、検出した自端末の向きの検出データを、制御部３２０の到達距離演算部３２３に送る。
【００３６】
到達距離演算部３２３は、ジャイロセンサ７２０で検出した自端末の向きの検出データと、測位処理部３２２で測位した自端末の現在位置を示す測位データとに基づいて、自端末から前記被写体までの到達距離を算出する。この到達距離演算部３２３により算出された到達距離データは、制御部３２０の映像処理部３２１に送られる。
【００３７】
本例の携帯端末装置７００の映像処理部３２１は、到達距離演算部３２３で算出した前記到達距離の到達距離データを数値データに変換し、これを、撮像部３５０のカメラ３５１から送られる被写体映像Ｃの映像データにアドオンして表示部３３０に送る。表示部３３０は、被写体映像Ｃの映像データに前記数値データがアドオンされて映像処理部３２１から送られる画像データを、携帯端末装置３００の液晶パネル３３１上に表示する。
【００３８】
これにより、本例の携帯端末装置７００の液晶パネル３３１上には、図８に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５とともに、自端末から各被写体までの到達距離を示す数値Ｅ１，Ｅ２，Ｅ３，Ｅ４，Ｅ５が追加された映像が表示される。
【００３９】
上述のように、本例の携帯端末装置７００は、前述の携帯端末装置３００と同様、ユーザＡが煩わしい入力操作をすることなく、カメラ３５１が撮像している被写体映像Ｃ中に被写体の情報をアドオンできるとともに、自端末から各被写体までの到達距離を示す数値Ｅ１，Ｅ２，Ｅ３，Ｅ４，Ｅ５が追加された映像を液晶パネル３３１上に表示できるので、訪れた未知の場所のより詳しい情報を容易に収集することができる。
【００４０】
また、本例の携帯端末装置７００では、例えば、ユーザＡが訪れた未知の場所の名産品を購入する際に、被写体映像Ｃ中の被写体の情報から同じ名産品を扱っている商店が複数あるとわかった場合、各商店までの到達距離を容易に知ることができるので、ユーザＡが名産品を購入する際の所要時間などを瞬時に判断することができる。
【００４１】
（実施の形態３）
図９は、本発明の実施の形態３に係る携帯端末装置９００の構成を示すブロック図である。本例の携帯端末装置９００は、前述した携帯端末装置３００の構成に加えて、到来波検出部９１０を備えている。その他の構成は、前述した携帯端末装置３００の構成と同じであるので、その説明は省略する。
【００４２】
本例の携帯端末装置９００は、到来波検出部９１０で、サーバ２００との交信を中継する基地局装置４００からの到来波を検出する。到来波検出部９１０は、基地局装置４００からの到来波を検出すると、検出した到来波の到来波データを制御部３２０の映像処理部３２１に送る。
【００４３】
本例の携帯端末装置９００の映像処理部３２１は、到来波検出部９１０で検出した前記到来波の到来波データを、前記到来波の到来方向を示す到来波情報マークデータに変換し、これを、液晶パネル３３１上に表示されている被写体映像Ｃにアドオンして、表示部３３０に送る。表示部３３０は、被写体映像Ｃの映像データに前記到来波情報マークデータがアドオンされて映像処理部３２１から入力される画像データを、携帯端末装置３００の液晶パネル３３１上に表示する。
【００４４】
これにより、本例の携帯端末装置９００の液晶パネル３３１上には、図１０に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５とともに、被写体映像Ｃに、基地局装置４００から到来する到来波の到来方向を示す到来波情報マークＦが表示される。
【００４５】
上述のように、本例の携帯端末装置９００は、前述の携帯端末装置３００と同様、ユーザＡが煩わしい入力操作をすることなく、カメラ３５１が撮像している被写体映像Ｃ中に被写体の情報をアドオンできるとともに、基地局装置４００から到来する到来波の到来方向を示す到来波情報マークＦを液晶パネル３３１上に表示できるので、ユーザＡが良好に通信できる場所を容易に見つけだすことができる。
【００４６】
ここで、本例の携帯端末装置９００の液晶パネル３３１上に表示する到来波情報マークＦは、前記到来波の到来順序を表す到来順序情報と、前記到来波の電波強度を表す電波強度情報を有していることが好ましい。これにより、本例の携帯端末装置９００のユーザＡは、液晶パネル３３１上に表示された到来波情報マークＦから、基地局装置４００から到来する到来波の到来順序情報及び電波強度を容易に知ることができるので、より良好に通信できる場所を容易に見つけだすことができる。
【００４７】
（実施の形態４）
図１１は、本発明の実施の形態４に係る携帯端末装置１１００の構成を示すブロック図である。本例の携帯端末装置１１００は、前述した携帯端末装置３００，７００，９００の構成に加えて、記憶部１１１０を備えている。その他の構成は、前述した携帯端末装置３００，７００，９００の構成と同じであるので、その説明は省略する。
【００４８】
本例の携帯端末装置１１００は、前述した携帯端末装置３００，７００，９００の全ての構成を備えているので、例えば、携帯端末装置３００と同様、その液晶パネル３３１上に、図１２に示すように、カメラ３５１が撮像している被写体映像Ｃ中の被写体に、該当する地名Ｄ１や施設名（店名等）Ｄ２，Ｄ３，Ｄ４，Ｄ５が追加された映像を表示できる。
【００４９】
また、本例の携帯端末装置１１００は、携帯端末装置７００と同様に、その液晶パネル３３１上に、図１２に示すように、自端末から各被写体までの到達距離を示す数値Ｅ１，Ｅ２，Ｅ３，Ｅ４，Ｅ５が追加された映像を表示できる。
【００５０】
また、本例の携帯端末装置１１００は、携帯端末装置９００と同様に、その液晶パネル３３１上に、図１２に示すように、被写体映像Ｃに、基地局装置４００から到来する到来波の到来方向を示す到来波情報マークＦを表示できる。
【００５１】
また、本例の携帯端末装置１１００は、その記憶部１１１０に、所有者の公表データである端末所有者公表データを格納したり、これを制御部３２０で呼び出したりできる。そして、本例の携帯端末装置１１００は、記憶部１１１０から制御部３２０で呼び出した端末所有者公表データを、通信部３１０の送信部３１２でサーバ２００に送信して、サーバ２００のメモリ２５０に端末所有者公表データ２５２として登録することができる。
【００５２】
これにより、本例の携帯端末装置１１００を用いた無線通信システムでは、サーバ２００にアクセス可能な他端末が、サーバ２００のメモリ２５０に登録してある携帯端末装置１１００の端末所有者公表データ２５２を得ることができる。
【００５３】
従って、本例の携帯端末装置１１００では、例えば、ユーザＡが、他端末の所有者と待ち合わせを行う場合などに、図１２に示すように、自分の居場所や周囲の光景Ｂをカメラ３５１で撮像し、その被写体映像Ｃ中に「待ち合わせ場所」という公表情報Ｇをアドオンして他端末に送信することにより、ユーザＡは他端末の所有者とより正確且つ迅速にコミュニケーションを取ることができる。
【００５４】
本発明に係る携帯端末装置の１つの態様は、被写体を撮像する撮像部と、前記撮像部が撮像している被写体映像を表示する表示部と、無線通信により外部のサーバと通信して、前記表示部に表示されている被写体映像中の被写体に関連する関連データを前記サーバより取得する通信部と、前記表示部に表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づいた情報を追加する映像処理部と、を具備する構成を採る。
【００５５】
この構成によれば、ユーザが煩わしい入力操作をすることなく、前記撮像部が撮像している被写体映像に追加された被写体の情報から、訪れた未知の場所の情報を容易に収集することができる。
【００５６】
本発明に係る携帯端末装置の１つの態様は、ＧＰＳ衛星が発信する位置情報を無線通信により受信するＧＰＳ受信部と、前記ＧＰＳ受信部が受信した前記位置情報に基づいて自端末の現在位置を測位する測位処理部と、前記被写体に対する自端末の向きを検出するジャイロセンサと、前記ジャイロセンサで検出した自端末の向きと、前記測位処理部で測位した自端末の現在位置とに基づいて、自端末から前記被写体までの到達距離を算出する到達距離演算部と、をさらに備え、前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到達距離演算部で算出した前記到達距離に基づいた情報を追加する構成を採る。
【００５７】
この構成によれば、自端末から各被写体までの到達距離が追加された映像を前記表示部に表示できるので、訪れた未知の場所のより詳しい情報を容易に収集することができる。
【００５８】
本発明に係る携帯端末装置の１つの態様は、前記通信部と前記サーバとの通信を中継する基地局装置からの到来波を検出する到来波検出部をさらに備え、前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到来波検出部が検出した到来波に基づいて、前記到来波の到来方向を示す到来波情報を追加する構成を採る。
【００５９】
この構成によれば、前記基地局装置から到来する到来波の到来方向を示す到来波情報を前記表示部に表示できるので、ユーザが良好に通信できる場所を容易に見つけだすことができる。
【００６０】
本発明に係る携帯端末装置の１つの態様は、前記到来波情報は、前記到来波の到来順序を表す到来順序情報と、前記到来波の電波強度を表す電波強度情報を有している構成を採る。
【００６１】
この構成によれば、前記表示部に表示された到来波情報から、前記基地局装置から到来する到来波の到来順序情報及び電波強度を容易に知ることができるので、より良好に通信できる場所を容易に見つけだすことができる。
【産業上の利用可能性】
【００６２】
本発明に係る携帯端末装置、無線通信装置及び方法は、ユーザが煩わしい入力操作をすることなく、前記撮像部が撮像している被写体映像に追加された被写体の名称から、訪れた未知の場所の情報を容易に収集することができるので、カメラ付き携帯電話機などの携帯端末装置、この携帯端末装置を用いた無線通信システム、及び無線通信方法として有用である。
【図面の簡単な説明】
【００６３】
【図１】本発明の実施の形態に係る携帯端末装置を用いる無線通信システムの構成を示す概略構成図
【図２】前記無線通信システムで用いるサーバの構成を示すブロック図
【図３】本発明の実施の形態１に係る携帯端末装置の構成を示すブロック図
【図４】本発明の実施の形態１に係る携帯端末装置に搭載されたカメラで、ユーザが訪れた場所を撮像している状態を示す概略図
【図５】本発明の実施の形態１に係る携帯端末装置の表示部に、前記カメラが撮像している被写体映像が表示されている状態を示す概略図
【図６】本発明の実施の形態１に係る携帯端末装置の表示部に表示されている被写体映像に、前記サーバより取得した関連データをアドオンして、前記被写体映像中の被写体に名称を追加した状態を示す前記表示部の概略図
【図７】本発明の実施の形態２に係る携帯端末装置の構成を示すブロック図
【図８】本発明の実施の形態２に係る携帯端末装置の表示部に表示されている被写体映像に、前記関連データ、及び自端末から前記被写体までの到達距離データをアドオンして、前記被写体映像中の被写体に名称及び到達距離を追加した状態を示す前記表示部の概略図
【図９】本発明の実施の形態３に係る携帯端末装置の構成を示すブロック図
【図１０】本発明の実施の形態３に係る携帯端末装置の表示部に表示されている被写体映像に、前記関連データ、及び前記サーバとの通信を中継する基地局装置からの到来波データをアドオンして、前記被写体映像中の被写体に情報を追加するとともに、前記被写体映像に前記到来波の到来方向を示す到来波情報マークを表示した状態を示す前記表示部の概略図
【図１１】本発明の実施の形態４に係る携帯端末装置の構成を示すブロック図
【図１２】本発明の実施の形態４に係る携帯端末装置の表示部に表示されている被写体映像に、前記関連データ、前記到達距離データ、前記到来波データ、前記到来波データ、及び端末所有者公表データをアドオンして、前記被写体映像中の被写体に情報、到達距離、到来波情報マーク、及び端末所有者のメッセージを追加した状態を示す前記表示部の概略図
【符号の説明】
【００６４】
１００ 無線通信システム
２００ サーバ
２１０ 通信部
２１１ 受信部
２１２ 送信部
２２０ 制御部
２２１ 映像解析部
２３０ ハードディスク
２３１ 地図データ
２３２ 関連データ
２４０ 検索エンジン
２５０ メモリ
２５１ 端末現在位置データ
２５２ 端末所有者公表データ
３００，７００，９００，１１０ 携帯端末装置
３１０ 通信部
３１１ 受信部
３１２ 送信部
３２０ 制御部
３２１ 映像処理部
３３０ 表示部
３３１ 液晶パネル
３４０ 操作部
３５０ 撮像部
３５１ カメラ
７１０ ＧＰＳ受信部
７２０ ジャイロセンサ
９１０ 到来波検出部
Ａ ユーザ
Ｂ 光景
Ｃ 被写体映像
Ｄ１ 地名
Ｄ２，Ｄ３，Ｄ４，Ｄ５ 施設名
Ｅ２，Ｅ３，Ｅ４，Ｅ５ 到達距離を示す数値
Ｆ 到来波情報マーク
Ｇ 公表情報
【特許請求の範囲】
【請求項１】
被写体を撮像する撮像部と、
前記撮像部が撮像している被写体映像を表示する表示部と、
無線通信により外部のサーバと通信して、前記表示部に表示されている被写体映像中の被写体に関連する関連データを前記サーバより取得する通信部と、
前記表示部に表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づいた情報を追加する映像処理部と、
を具備する携帯端末装置。
【請求項２】
ＧＰＳ衛星が発信する位置情報を無線通信により受信するＧＰＳ受信部と、
前記ＧＰＳ受信部が受信した前記位置情報に基づいて自端末の現在位置を測位する測位処理部と、
前記被写体に対する自端末の向きを検出するジャイロセンサと、
前記ジャイロセンサで検出した自端末の向きと、前記測位処理部で測位した自端末の現在位置とに基づいて、自端末から前記被写体までの到達距離を算出する到達距離演算部と、をさらに備え、
前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到達距離演算部で算出した前記到達距離に基づいた情報を追加する
請求項１に記載の携帯端末装置。
【請求項３】
前記通信部と前記サーバとの通信を中継する基地局装置からの到来波を検出する到来波検出部をさらに備え、
前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到来波検出部が検出した到来波に基づいて、前記到来波の到来方向を示す到来波情報を追加する
請求項１に記載の携帯端末装置。
【請求項４】
前記到来波情報は、前記到来波の到来順序を表す到来順序情報と、前記到来波の電波強度を表す電波強度情報を有している
請求項３に記載の携帯端末装置。
【請求項５】
撮像部で撮像した被写体映像を表示部に表示するとともに、外部のサーバと通信部で通信して前記サーバから取得した前記被写体映像中の被写体に関連する関連データを、映像処理部で前記表示部に表示されている前記被写体映像に追加する携帯端末装置と、
前記携帯端末装置から送信される前記被写体映像を映像解析部で解析し、解析した被写体映像に該当する地図データに基づいて前記被写体映像中の前記関連データを検索エンジンで検索して抽出し、抽出した前記関連データを前記携帯端末装置に送信するサーバと、
を具備する無線通信システム。
【請求項６】
被写体を撮像する撮像ステップと、
前記撮像ステップで撮像している前記被写体映像を表示する表示ステップと、
無線通信により外部のサーバと通信して、前記表示ステップで表示されている前記被写体映像中の被写体に関連する関連データを前記サーバより取得する通信ステップと、
前記表示ステップで表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づく情報を追加する映像処理ステップと、
を具備する無線通信方法。
【請求項１】
被写体を撮像する撮像部と、
前記撮像部が撮像している被写体映像を表示する表示部と、
無線通信により外部のサーバと通信して、前記表示部に表示されている被写体映像中の被写体に関連する関連データを前記サーバより取得する通信部と、
前記表示部に表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づいた情報を追加する映像処理部と、
を具備する携帯端末装置。
【請求項２】
ＧＰＳ衛星が発信する位置情報を無線通信により受信するＧＰＳ受信部と、
前記ＧＰＳ受信部が受信した前記位置情報に基づいて自端末の現在位置を測位する測位処理部と、
前記被写体に対する自端末の向きを検出するジャイロセンサと、
前記ジャイロセンサで検出した自端末の向きと、前記測位処理部で測位した自端末の現在位置とに基づいて、自端末から前記被写体までの到達距離を算出する到達距離演算部と、をさらに備え、
前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到達距離演算部で算出した前記到達距離に基づいた情報を追加する
請求項１に記載の携帯端末装置。
【請求項３】
前記通信部と前記サーバとの通信を中継する基地局装置からの到来波を検出する到来波検出部をさらに備え、
前記映像処理部は、前記表示部に表示されている前記被写体映像に、前記到来波検出部が検出した到来波に基づいて、前記到来波の到来方向を示す到来波情報を追加する
請求項１に記載の携帯端末装置。
【請求項４】
前記到来波情報は、前記到来波の到来順序を表す到来順序情報と、前記到来波の電波強度を表す電波強度情報を有している
請求項３に記載の携帯端末装置。
【請求項５】
撮像部で撮像した被写体映像を表示部に表示するとともに、外部のサーバと通信部で通信して前記サーバから取得した前記被写体映像中の被写体に関連する関連データを、映像処理部で前記表示部に表示されている前記被写体映像に追加する携帯端末装置と、
前記携帯端末装置から送信される前記被写体映像を映像解析部で解析し、解析した被写体映像に該当する地図データに基づいて前記被写体映像中の前記関連データを検索エンジンで検索して抽出し、抽出した前記関連データを前記携帯端末装置に送信するサーバと、
を具備する無線通信システム。
【請求項６】
被写体を撮像する撮像ステップと、
前記撮像ステップで撮像している前記被写体映像を表示する表示ステップと、
無線通信により外部のサーバと通信して、前記表示ステップで表示されている前記被写体映像中の被写体に関連する関連データを前記サーバより取得する通信ステップと、
前記表示ステップで表示されている前記被写体映像に、前記サーバより取得した前記関連データに基づく情報を追加する映像処理ステップと、
を具備する無線通信方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２００８−１８２４８４（Ｐ２００８−１８２４８４Ａ）
【公開日】平成２０年８月７日（２００８．８．７）
【国際特許分類】
【出願番号】特願２００７−１４２４０（Ｐ２００７−１４２４０）
【出願日】平成１９年１月２４日（２００７．１．２４）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２０年８月７日（２００８．８．７）
【国際特許分類】
【出願日】平成１９年１月２４日（２００７．１．２４）
【出願人】（０００００５８２１）松下電器産業株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]