情報提供サーバ、情報表示端末、情報提供システム、情報提供プログラム、情報表示プログラム、情報提供方法及び情報表示方法
【課題】ユーザが観光スポットの名称、住所、電話番号等の情報を有していない場合であっても、容易に必要とする観光スポットの情報を取得可能にすることを目的とする。
【解決手段】カメラ付携帯電話等である情報表示端末１００は、観光スポットの画像情報をカメラにより取得して、取得した画像情報と、現在地の位置情報とを情報提供サーバ２００へ送信する。情報提供サーバ２００は情報表示端末１００から受信した画像情報から観光スポットの画像情報を切り出す。情報提供サーバ２００は、さらに、情報表示端末１００から受信した位置情報の位置から所定の範囲内に存在する観光スポットの画像情報であって、切り出した観光スポットの画像情報と類似する観光スポットの画像情報を検索して、画像情報から切り出した観光スポットがどの観光スポットであるかを特定する。情報提供サーバ２００は、特定した観光スポットの情報を情報表示端末１００へ送信する。
【解決手段】カメラ付携帯電話等である情報表示端末１００は、観光スポットの画像情報をカメラにより取得して、取得した画像情報と、現在地の位置情報とを情報提供サーバ２００へ送信する。情報提供サーバ２００は情報表示端末１００から受信した画像情報から観光スポットの画像情報を切り出す。情報提供サーバ２００は、さらに、情報表示端末１００から受信した位置情報の位置から所定の範囲内に存在する観光スポットの画像情報であって、切り出した観光スポットの画像情報と類似する観光スポットの画像情報を検索して、画像情報から切り出した観光スポットがどの観光スポットであるかを特定する。情報提供サーバ２００は、特定した観光スポットの情報を情報表示端末１００へ送信する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば、画像情報に基づきカメラ付携帯電話等の端末へ観光ガイド情報を提供する技術に関する。
【背景技術】
【０００２】
携帯電話機や電子書籍端末等の携帯型電子情報端末へ観光ガイド情報等を提供するサービスがある。
特許文献１と特許文献２とには、端末に対して通信によって予め設定した観光コースと観光ガイド情報を文字、画像により提供するシステムが開示されている。
【特許文献１】特開２００３−２５６４３１号公報
【特許文献２】特開２００４−１３９５６０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
従来の観光ガイド情報等を提供するサービスでは、ユーザが表示されたメニュー等から観光スポットの名称を指定するか、又は観光スポットの名称をキーワードとして指定して検索をしなければ、必要な観光ガイド情報等の情報を得ることはできない。
しかし、観光ガイド情報等を必要としているユーザは、観光スポットの名称や、その観光スポットを特定するための他の情報（例えば、住所、電話番号等）を知らない場合がある。このような場合に、ユーザは観光ガイド情報を得るには、提供される大量の情報の中から、目的とする対象物に関する情報を逐一探さなければならない。
本発明は、例えば、ユーザが容易に、必要とする観光ガイド情報等の情報を取得できるようにすることを目的とする。
【課題を解決するための手段】
【０００４】
本発明に係る情報提供サーバは、例えば、特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部と
を備えることを特徴とする。
【０００５】
上記特徴物画像情報記憶部は、上記特徴物画像情報とともに、上記特徴物の位置を示す特徴物位置情報を記憶し、
上記画像情報受信部は、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【０００６】
上記画像情報受信部は、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【０００７】
上記目的物特定部は、上記画像情報受信部が受信した画像情報から複数の目的物の画像情報を上記目的物切出部が切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする。
【０００８】
本発明に係る情報表示端末は、例えば、目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
位置を示す位置情報を位置取得装置により取得する位置情報取得部と、
上記位置情報取得部が取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得部と、
上記画像情報取得部が取得した画像情報と、上記位置情報取得部が取得した位置情報と、上記方角情報取得部が取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信部と、
上記画像情報送信部が送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する関連情報表示部と
を備えることを特徴とする。
【０００９】
本発明に係る情報提供システムは、例えば、情報表示端末と情報提供サーバとを備える情報提供システムであり、
上記情報表示端末は、
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
上記画像情報取得部が取得した画像情報を情報提供サーバへ通信装置を介して送信する画像情報送信部とを備え、
上記情報提供サーバは、
特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
上記画像情報送信部が送信した画像情報を通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から、上記画像情報の目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶する特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部とを備え、
上記情報表示端末は、さらに、
上記関連情報取得部が送信した関連情報を通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する情報表示部と
を備えることを特徴とする。
【００１０】
本発明に係る情報提供プログラムは、例えば、目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信処理と、
上記画像情報受信処理で受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出処理と、
上記目的物切出処理で切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定処理と、
記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定処理で特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得処理と、
上記関連情報取得処理で取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信処理と
をコンピュータに実行させることを特徴とする。
【００１１】
上記画像情報受信処理では、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【００１２】
上記画像情報受信処理では、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【００１３】
上記目的物特定処理では、上記画像情報受信処理で受信した画像情報から複数の目的物の画像情報を上記目的物切出処理で切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする。
【００１４】
本発明に係る情報表示プログラムは、例えば、目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得処理と、
位置を示す位置情報を位置取得装置により取得する位置情報取得処理と、
上記位置情報取得処理で取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得処理と、
上記画像情報取得処理で取得した画像情報と、上記位置情報取得処理で取得した位置情報と、上記方角情報取得処理で取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信処理と、
上記画像情報送信処理で送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信処理と、
上記関連情報受信処理で受信した関連情報を表示装置に表示する関連情報表示処理と
をコンピュータに実行させることを特徴とする。
【００１５】
本発明に係る情報提供方法は、例えば、通信装置が、目的物の画像情報を含む画像情報を端末から受信する画像情報受信ステップと、
処理装置が、上記画像情報受信ステップで受信した画像情報から目的物の画像情報を切り出す目的物切出ステップと、
処理装置が、上記目的物切出ステップで切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する目的物特定ステップと、
処理装置が、記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定ステップで特定した上記目的物に対応する特徴物に関連する関連情報を取得する関連情報取得ステップと、
通信装置が、上記関連情報取得ステップで取得した関連情報を上記端末へ送信する関連情報送信ステップと
を備えることを特徴とする。
【００１６】
本発明に係る情報表示方法は、例えば、画像取得装置が、目的物の画像情報を含む画像情報を取得する画像情報取得ステップと、
位置取得装置が、位置を示す位置情報を取得する位置情報取得ステップと、
方角情報取得装置が、上記位置情報取得ステップで取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得ステップと、
通信装置が、上記画像情報取得ステップで取得した画像情報と、上記位置情報取得ステップで取得した位置情報と、上記方角情報取得ステップで取得した方角情報とを情報提供サーバへ送信する画像情報送信ステップと、
通信装置が、上記画像情報送信ステップで送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから受信する関連情報受信ステップと、
表示装置が、上記関連情報受信ステップで受信した関連情報を表示する関連情報表示ステップと
を備えることを特徴とする。
【発明の効果】
【００１７】
本発明によれば、ユーザが必要とする目的物についての関連情報（観光ガイド情報等）を、その目的物の画像情報に基づき特定して取得、又は提供することができる。したがって、ユーザは、目的物に関する情報を一切有していない場合であっても、その目的物の画像情報を得ることができれば、その目的物についての関連情報を得ることができる。
【発明を実施するための最良の形態】
【００１８】
実施の形態１．
図１は、この実施の形態に係る情報提供システム１の機能を示す機能ブロック図である。
情報提供システム１は、情報表示端末１００と情報提供サーバ２００とを備える。
情報表示端末１００は、ユーザが使用する端末であり、例えば、カメラ付携帯電話機やカメラ付ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）（登録商標）等である。
情報提供サーバ２００は、観光ガイド情報等の情報（関連情報の一例）を情報表示端末１００へ提供するサーバである。ここで、観光ガイド情報とは、観光スポット、観光レジャー施設、レストラン、ホテル等の観光ガイドの本に載っている情報全般を含むものである。なお、以下の説明では、情報提供サーバ２００が提供する情報として観光ガイド情報を用いて説明するが、情報提供サーバ２００が提供する情報は、観光ガイド情報に限らず、例えば、車に関連する情報、動物、昆虫等に関連する情報等の他の情報であっても構わない。
【００１９】
まず、情報表示端末１００について説明する。
情報表示端末１００は、画像情報取得部１１０、位置情報取得部１２０、画像・位置情報合成部１３０、画像情報送信部１４０、関連情報受信部１５０、関連情報表示処理部１６０、情報表示部１７０、カメラ１８０（画像取得装置の一例）を備える。
画像情報取得部１１０は、カメラ１８０により画像情報を取得する。特に、ここでは、画像情報取得部１１０は、観光ガイド情報を取得したいと考える観光スポット等（以下、目的物）の画像情報を含む画像情報を取得する。観光スポット等とは、例えば、○○ビル、○○タワー、○○大仏等である。
位置情報取得部１２０は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）などの測位衛星４００から、情報表示端末１００の現在地を示す位置情報（端末位置情報）をＧＰＳアンテナ（位置取得装置の一例）を介して取得する。
画像・位置情報合成部１３０は、画像情報取得部１１０が取得した画像情報と、位置情報取得部１２０が取得した端末位置情報とを関連付けして、画像位置合成情報を生成する。
画像情報送信部１４０は、画像・位置情報合成部１３０が生成した画像位置合成情報を通信装置とネットワーク３００とを介して情報提供サーバ２００へ送信する。
関連情報受信部１５０は、画像情報送信部１４０が送信した画像位置合成情報に基づき、情報提供サーバ２００により特定された観光ガイド情報であって、画像情報に含めた目的物に関連した情報である観光ガイド情報を情報提供サーバ２００からネットワーク３００と通信装置とを介して受信する。
関連情報表示処理部１６０は、関連情報受信部１５０が受信した観光ガイド情報を、予め記憶装置に記憶した地図情報と重畳表示するか否かを判定する。関連情報表示処理部１６０は、例えば、ユーザからの入力に従い、観光ガイド情報を地図情報と重畳表示するか否かを判定する。また、関連情報表示処理部１６０は、観光ガイド情報を地図情報と重畳表示すると判定した場合、端末位置情報が示す位置を中心とした所定の範囲の地図情報を記憶装置から取得する。
情報表示部１７０は、関連情報表示処理部１６０の判定に従い、観光ガイド情報を表示装置に表示する。情報表示部１７０は、関連情報表示処理部１６０が観光ガイド情報を地図情報と重畳表示すると判定した場合、関連情報表示処理部１６０が取得した地図情報が示す地図上に、観光ガイド情報を表示する。観光ガイド情報を表示する位置は、例えば、観光ガイド情報に含まれる位置情報が示す位置（つまり、観光スポットの位置）に表示する。
【００２０】
次に、情報提供サーバ２００について説明する。
情報提供サーバ２００は、画像情報受信部２１０、目的物切出部２２０、目的物特定部２３０、特徴物画像情報記憶部２４０、関連情報取得部２５０、関連情報記憶部２６０、関連情報送信部２７０を備える。
画像情報受信部２１０は、情報表示端末１００の画像情報送信部１４０が送信した画像位置合成情報をネットワーク３００と通信装置とを介して受信する。つまり、画像情報受信部２１０は、目的物の画像情報を含む画像情報と、情報表示端末１００の上記画像情報取得時の位置を示す端末位置情報とを受信する。
目的物切出部２２０は、画像情報受信部２１０が受信した画像情報から目的物の画像情報を処理装置により切り出す。つまり、目的物切出部２２０は、画像情報から目的物の形状を切り出し、目的物の輪郭（形状）を特定する。目的物切出部２２０の動作の詳細については後述する。
目的物特定部２３０は、後述する特徴物画像情報記憶部２４０が記憶した特徴物画像情報から、目的物切出部２２０が切り出した目的物の画像情報に対応する特徴物画像情報を検索して、目的物に対応する特徴物を処理装置により特定する。ここで、目的物特定部２３０は、輪郭パターン判断部２３１と輪郭パターン照合部２３２とを備える。輪郭パターン判断部２３１は、目的物の輪郭パターンを特定して、目的物の輪郭パターンを幾何学図形のパターンとして表す。輪郭パターン照合部２３２は、幾何学図形のパターンとして表された目的物の輪郭パターンと特徴物画像情報記憶部２４０が記憶した特徴物の輪郭パターンとを照合する。目的物特定部２３０の動作の詳細については後述する。
特徴物画像情報記憶部２４０は、特徴物の画像情報である特徴物画像情報を記憶装置に記憶する。特徴物画像情報記憶部２４０は、例えば、特徴物画像情報として、特徴物の輪郭の定形的な幾何学図形の組み合わせのデータ（幾何学図形のパターン）により示される特徴物の輪郭パターンを記憶する。ここで、特徴物とは、観光ガイド情報に含まれる観光の建築物や像、観光レジャー施設、レストラン、ホテル等である。また、特徴物画像情報記憶部２４０は、特徴物画像情報とともに、特徴物の位置を示す特徴物位置情報を記憶する。
関連情報取得部２５０は、後述する関連情報記憶部２６０が記憶した観光ガイド情報であって、目的物特定部２３０が特定した目的物に対応する特徴物に関連する観光ガイド情報を処理装置により取得する。
関連情報記憶部２６０は、観光ガイド情報を記憶装置に記憶する。観光ガイド情報とは、例えば、特徴物の名前、歴史、由来等の情報、それらの地図上の位置、営業時間等である。
関連情報送信部２７０は、関連情報記憶部２６０が取得した観光ガイド情報を情報表示端末１００へ通信装置を介して送信する。
【００２１】
次に、図２から図４までに基づき、目的物切出部２２０と目的物特定部２３０との動作について説明する。つまり、情報表示端末１００から受信した画像情報に含まれる目的物に対応した特徴物を特定する処理について説明する。図２は、画像情報から、画像情報に含まれる目的物の画像情報を切り出す処理及び目的物の輪郭パターンを特定する処理を示す概念図である。図３は、端末位置情報に基づく、特徴物の絞込み処理を示す概念図である。図４は、目的物の輪郭パターンと、特徴物の輪郭パターンとの照合処理を示す概念図である。
【００２２】
まず、目的物切出部２２０は、各画素の中から一群の形状を表す画素として認識される画素群を１つの目的物の画素群として特定する。
つまり、目的物切出部２２０は、初めに、図２（ａ）に示すように、受信した画像情報の１端点の画素の位置を原点として画像情報内の画素を、例えば左上から右下へ向かって読み込む（スキャンする）。次に、目的物切出部２２０は、図２（ｂ）に示すように、連続した同系色の画素を１つの画素群として特定して、１つの画素群を１つの目標物とみなす。そして、目的物切出部２２０は、図２（ｃ）に示すように、各画素群に属する画素の座標値を各目的物の画像情報として取得することにより、画像情報から目標物の画像情報を切り出す。
【００２３】
次に、目的物特定部２３０の輪郭パターン判断部２３１は、目的物切出部２２０が切り出した目的物の画像情報から目的物の輪郭を特定し、幾何学的な輪郭パターンに変換する。幾何学的な輪郭パターンとは、１つの幾何学図形、又は、２つ以上の幾何学図形の組み合わせにより形成された図形の輪郭パターンである。つまり、輪郭パターン判断部２３１は、図２（ｄ）に示すように、目的物の画像情報の中から輪郭に相当する画素群を輪郭画素群として特定し、特定した輪郭画素群の相対座標値を幾何学的な輪郭パターンの相対座標値に変換する。これにより、目的物の輪郭パターンを幾何学図形の組み合わせ（幾何学図形のパターン）として表すことができる。
輪郭パターン判断部２３１は、例えば、１つの目的物の画像情報の１端点の画素の位置から画像情報内の画素をスキャンして画素が存在しなくなる座標の１つ手前の座標を輪郭部分の座標として取得する。次に、取得した輪郭部分の座標の１端点の座標を原点として各画素の相対座標値を算出し、１群の相対座標値の集合とする。次に、各輪郭の相対座標値の集合を平滑化して幾何学図形の集合に変換する。つまり、図２（ｄ）の破線で示された幾何学図形の組み合わせとして、目的物の輪郭パターンを表す。そして、輪郭パターン判断部２３１は、図２（ｅ）に示すように、１つの目的物から特定した各幾何学図形の中心点の座標値を算出し、各中心点の座標値に基づき、各輪郭パターンの並びの方向を判断して、各輪郭パターンを関連付ける。
【００２４】
そして、目的物特定部２３０の輪郭パターン照合部２３２は、輪郭パターン判断部２３１が特定した目的物の輪郭パターンに最も近似する特徴物の輪郭パターンを検索して、目的物に対応する特徴物を特定する。なお、ここでは、特徴物画像情報記憶部２４０は、特徴物画像情報として特徴物の輪郭の定形的な幾何学図形の組み合わせのデータにより示される特徴物の輪郭パターンを記憶しているものとする。
まず、輪郭パターン照合部２３２は、図３に示すように、端末位置情報が示す情報表示端末１００の位置を中心とした所定の範囲内に特徴物画像情報記憶部２４０が記憶した特徴物位置情報が示す位置が存在する特徴物の輪郭パターンを抽出する。そして、輪郭パターン照合部２３２は、輪郭パターン判断部２３１が特定した目的物の幾何学図形の組み合わせと、抽出した特徴物の輪郭パターンとを照合して、目的物の輪郭パターンに最も近似する特徴物の輪郭パターンを特定して、目的物に対応する特徴物を特定する。
輪郭パターン照合部２３２は、例えば、図４に示すように、目的物の輪郭パターンの中心点の座標を算出して、その中心点を基準にして、三次元座標系で回転、伸張、圧縮の変形をさせた目的物の輪郭パターンの各画素の相対座標値を算出する。また、輪郭パターン照合部２３２は、目的物の輪郭パターンの画素のうち、その画素の相対座標値と、特徴物の輪郭パターンの画素の相対座標値との差が所定の範囲内にある割合が所定の割合以上である場合、その特徴物の輪郭パターンがその目的物の輪郭パターンに近似すると判断する。そして、輪郭パターン照合部２３２は、近似すると判断した特徴物を目的物に該当する特徴物として特定する。
【００２５】
次に、図５と図６とに基づき、この実施の形態に係る情報表示端末１００と情報提供サーバ２００との処理の流れについて説明する。図５は、この実施の形態に係る情報表示端末１００の処理の流れを示すフローチャートである。図６は、この実施の形態に係る情報提供サーバ２００の処理の流れを示すフローチャートである。
【００２６】
まず、情報表示端末１００は以下のように動作する。
画像情報取得ステップ（Ｓ１１）：画像情報取得部１１０は、カメラ１８０により目的物の画像情報を含む画像情報を取得する。
位置情報取得ステップ（Ｓ１２）：位置情報取得部１２０は、情報表示端末１００の現在地を示す端末位置情報をＧＰＳアンテナを介して取得する。つまり、位置情報取得部１２０は、画像情報取得部１１０が画像情報を取得した時の情報表示端末１００の位置を示す端末位置情報を取得する。
情報合成ステップ（Ｓ１３）：画像・位置情報合成部１３０は、（Ｓ１１）で画像情報取得部１１０が取得した画像情報と、（Ｓ１２）で位置情報取得部１２０が取得した端末位置情報とを関連付けして、画像位置合成情報を生成する。
画像情報送信ステップ（Ｓ１４）：画像情報送信部１４０は、（Ｓ１３）で画像・位置情報合成部１３０が生成した画像位置合成情報を情報提供サーバ２００へ送信する。
【００２７】
情報表示端末１００が画像位置合成情報を送信すると、情報提供サーバ２００は以下のように動作する。
画像情報受信ステップ（Ｓ２１）：画像情報受信部２１０は、（Ｓ１４）で情報表示端末１００の画像情報送信部１４０が送信した画像位置合成情報を受信する。
目的物切出ステップ（Ｓ２２）：目的物切出部２２０は、（Ｓ２１）で画像情報受信部２１０が受信した画像位置合成情報に含まれる画像情報から、目的物の画像情報を切り出す。
輪郭パターン判断ステップ（Ｓ２３）：目的物特定部２３０の輪郭パターン判断部２３１は、（Ｓ２２）で目的物切出部２２０が切り出した目標物の画像情報の輪郭パターンを幾何学的な輪郭パターンに変換する。
輪郭パターン照合ステップ（Ｓ２４）：目的物特定部２３０の輪郭パターン照合部２３２は、端末位置情報が示す位置を中心とした所定の範囲内にある特徴物位置情報が示す位置がある特徴物の輪郭パターンであって、（Ｓ２３）で輪郭パターン判断部２３１が変換した輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、目的物に対応する特徴物を特定する。
関連情報取得ステップ（Ｓ２５）：関連情報取得部２５０は、（Ｓ２４）で輪郭パターン照合部２３２が特定した特徴物の観光ガイド情報を関連情報記憶部２６０から取得する。
関連情報送信ステップ（Ｓ２６）：関連情報送信部２７０は、（Ｓ２５）で関連情報取得部２５０が取得した観光ガイド情報を情報表示端末１００へ送信する。
【００２８】
情報提供サーバ２００が観光ガイド情報を送信すると、情報表示端末１００は以下のように動作する。
関連情報受信ステップ（Ｓ１５）：関連情報受信部１５０は、（Ｓ２６）で情報提供サーバ２００の関連情報送信部２７０が送信した観光ガイド情報を受信する。
関連情報処理ステップ（Ｓ１６）：関連情報表示処理部１６０は、（Ｓ１５）で関連情報受信部１５０が受信した観光ガイド情報を地図情報と重畳表示するか否かを判定するとともに、重畳表示すると判定した場合、地図情報を取得する。
情報表示ステップ（Ｓ１７）：情報表示部１７０は、（Ｓ１６）で関連情報表示処理部１６０が判定した結果に従い、観光ガイド情報を表示する。
【００２９】
以上のように、この実施の形態に係る情報提供システム１によれば、情報表示端末１００を使用するユーザが目的物に関する情報を一切有していない場合であっても、その目的物の画像情報を得ることができれば、その目的物についての関連情報を得ることができる。
特に、この実施の形態に係る情報提供システム１によれば、端末位置情報により絞込みされた特徴物から、目的物を検索するため、目的物に類似する特徴物が複数存在する場合であっても、目的物に対応する特徴物をより正確に特定することができる。
【００３０】
なお、情報提供サーバ２００の目的物特定部２３０は、目的物切出部２２０が画像情報から複数の目的物を切り出した場合、切り出した複数の目的物の各目的物に対応する特徴物を特定する。そして、関連情報取得部２５０は各目的物に対応する特徴物についての観光ガイド情報を取得し、関連情報送信部２７０は関連情報取得部２５０が取得した各目的物に対応する特徴物についての観光ガイド情報を情報表示端末１００へ送信する。
【００３１】
また、情報提供サーバ２００の目的物特定部２３０は、目的物切出部２２０が切り出した目的物に対応する特徴物が１つに特定できない場合、目的物に類似する複数の特徴物を特定する。そして、関連情報取得部２５０は、目的物特定部２３０が特定した複数の特徴物それぞれに関連する観光ガイド情報を取得して、関連情報送信部２７０は、関連情報取得部２５０が取得した複数の特徴物それぞれに関連する観光ガイド情報を情報表示端末１００へ送信する。
また、関連情報取得部２５０は、目的物特定部２３０が特定した複数の特徴物それぞれに関連する観光ガイド情報の一部の情報（例えば、複数の特徴物それぞれの画像情報）を特徴物の識別情報とともに取得して、関連情報送信部２７０は、関連情報取得部２５０が取得した観光ガイド情報の一部の情報を識別情報とともに情報表示端末１００へ送信するとしても構わない。この場合、情報表示端末１００の関連情報受信部１５０は、観光ガイド情報の一部の情報を受信して、情報表示部１７０が観光ガイド情報の一部の情報を表示する。そして、情報表示部１７０は、観光ガイド情報の一部の情報を表示することにより、ユーザに目的物に対応する特徴物を選択させる。つまり、情報表示部１７０は、複数の特徴物それぞれの画像情報を表示することにより、ユーザに目的物がどの特徴物であるかを選択させる。ユーザは、実際に目的物を見ているため、特徴物の画像を見ることができれば、目的物がどの特徴物であるか選択することができる。そして、情報表示端末１００は、ユーザにより選択された特徴物の観光ガイド情報を情報提供サーバ２００から受信するとしても構わない。つまり、情報表示端末１００の画像情報送信部１４０は、ユーザにより選択された特徴物の識別情報を情報提供サーバ２００へ送信する。情報提供サーバ２００の画像情報受信部２１０は、画像情報送信部１４０が送信した特徴物の識別情報を受信し、関連情報取得部２５０は、識別情報から特定される特徴物に関連した観光ガイド情報を取得し、関連情報送信部２７０は取得した観光ガイド情報を情報表示端末１００へ送信する。
【００３２】
つまり、この実施の形態に係る情報提供システム１は、カメラ付携帯電話で撮影した風景画像から目的物を切り出し、カメラ付携帯電話の現在位置とを比較して、切り出した目的物を特定し、関連する観光情報を表示することを特徴とする。
【００３３】
実施の形態２．
この実施の形態では、情報表示端末１００の位置に対する目的物が位置する方角に基づき、目的物に対応する特徴物を絞り込む情報提供システム１について説明する。
【００３４】
図７は、この実施の形態に係る情報提供システム１の機能を示す機能ブロック図である。この実施の形態に係る情報表示端末１００は、実施の形態１に係る情報表示端末１００の機能に加え、方角情報取得部１９０を備える。また、この実施の形態に係る情報提供サーバ２００は、実施の形態１に係る情報提供サーバ２００と構成は同様である。
この実施の形態に係る情報提供システム１について、実施の形態１に係る情報提供システム１と異なる点について説明する。
【００３５】
情報表示端末１００の方角情報取得部１９０は、位置情報取得部１２０が取得した端末位置情報が示す位置に対する目的物が位置する方角を示す方角情報を取得する。方角情報取得部１９０は、例えば、画像情報取得部１１０が画像情報を取得した場合に、カメラ１８０のレンズの方角を方位磁石等により取得する。また、方角情報取得部１９０は、入力装置を介してユーザから方角情報を入力されることにより方角情報を取得するとしても構わない。
画像・位置情報合成部１３０は、画像情報と、端末位置情報と、方角情報取得部１９０が取得した方角情報とを関連付けして、画像位置合成情報を生成する。
【００３６】
情報提供サーバ２００の輪郭パターン照合部２３２は、図８に示すように、端末位置情報が示す情報表示端末１００の位置を中心とした所定の範囲の内、情報表示端末１００の位置から方角情報が示す方角に特徴物位置情報が示す位置が存在する特徴物の輪郭パターンを抽出する。図８では、方角情報は南西の方角を示しているとする。そして、輪郭パターン照合部２３２は、輪郭パターン判断部２３１が特定した目的物の幾何学図形の組み合わせと、抽出した特徴物の輪郭パターンとを照合して、目的物の輪郭パターンに最も近似する特徴物の輪郭パターンを特定して、目的物に対応する特徴物を特定する。
【００３７】
次に、図９と図１０とに基づき、この実施の形態に係る情報表示端末１００と情報提供サーバ２００との処理の流れについて説明する。図９は、この実施の形態に係る情報表示端末１００の処理の流れを示すフローチャートである。図１０は、この実施の形態に係る情報提供サーバ２００の処理の流れを示すフローチャートである。
まず、情報表示端末１００は以下のように動作する。
（Ｓ３１）と（Ｓ３２）とは、実施の形態１の（Ｓ１１）と（Ｓ１２）と同様である。
方角情報取得ステップ（Ｓ３３）：方角情報取得部１９０は、位置情報取得部１２０が取得した端末位置情報が示す位置に対する目的物が位置する方角を示す方角情報を取得する。
情報合成ステップ（Ｓ３４）：画像・位置情報合成部１３０は、（Ｓ３１）で画像情報取得部１１０が取得した画像情報と、（Ｓ３２）で位置情報取得部１２０が取得した端末位置情報と、（Ｓ３３）で方角情報取得部１９０が取得した方角情報とを関連付けして、画像位置合成情報を生成する。
（Ｓ３５）は、実施の形態１の（Ｓ１４）と同様である。
【００３８】
情報表示端末１００が画像位置合成情報を送信すると、情報提供サーバ２００は以下のように動作する。
（Ｓ４１）から（Ｓ４３）までは、実施の形態１の（Ｓ２１）から（Ｓ２３）までと同様である。
輪郭パターン照合ステップ（Ｓ４４）：端末位置情報が示す位置を中心とした所定の範囲の内、端末位置情報が示す位置から方角情報が示す方角に特徴物位置情報が示す位置が存在する特徴物の輪郭パターンであって、（Ｓ４３）で輪郭パターン判断部２３１が変換した輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、目的物に対応する特徴物を特定する。
（Ｓ４５）と（Ｓ４６）とは、実施の形態１の（Ｓ２５）と（Ｓ２６）と同様である。
【００３９】
また、情報提供サーバ２００が観光ガイド情報を送信すると、情報表示端末１００は実施の形態１と同様に動作する。
つまり、（Ｓ３６）から（Ｓ３８）までは、実施の形態１の（Ｓ１５）から（Ｓ１７）までと同様である。
【００４０】
以上のように、この実施の形態に係る情報提供システム１によれば、実施の形態１に係る情報提供システム１に比べ、さらに、方角情報により絞込みされた特徴物から目的物に対応する特徴物を特定するため、目的物に類似する特徴物が複数存在する場合であっても、目的物に対応する特徴物をより正確に特定することができる。
【００４１】
なお、上記説明では、情報表示端末１００が方角情報を取得して情報提供サーバ２００へ送信するとした。しかし、情報提供サーバ２００は、情報表示端末１００から方角情報を受信するのではなく、以下に示す方法等により方角情報を取得するとしても構わない。
【００４２】
情報提供サーバ２００が方角情報を取得する１つ目の方法は、画像情報受信部２１０が受信した画像情報から複数の目的物の画像情報を目的物切出部２２０が切り出した場合に、複数の目的物の少なくとも１つの目的物に対応する特徴物を特定して、特定した特徴物の位置と端末位置情報が示す位置とに基づき、他の目標物の端末位置情報が示す位置に対する方角情報を取得する方法である。つまり、画像情報に含まれる目的物のうち、１つの目的物に対応する特徴物を特定して、その特徴物の位置に基づき方角情報を取得する方法である。
情報提供サーバ２００が方角情報を取得する１つ目の方法について、図１１に基づき説明する。図１１は、情報表示端末１００の画像情報取得部１１０が取得した画像情報の一例を示す図である。
情報提供サーバ２００の画像情報受信部２１０は、図１１に示す画像情報４００を含む画像位置合成情報を情報表示端末１００から受信する。次に、目的物切出部２２０は、画像情報４００から建物４１０とタワー４２０との２つの目的物を切り出す。次に、輪郭パターン判断部２３１は、建物４１０とタワー４２０との輪郭パターンを特定する。そして、輪郭パターン照合部２３２は、端末位置情報が示す位置を中心とした所定の範囲内に位置する特徴物の輪郭パターンであって、建物４１０とタワー４２０とのそれぞれの輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、建物４１０とタワー４２０とのそれぞれに対応する特徴物を特定する。
ここで、例えば、輪郭パターン照合部２３２は、タワー４２０に対応する特徴物のみ特定できたとする。つまり、建物４１０に対応する特徴物を１つに絞り込みできなかったとする。この場合、輪郭パターン照合部２３２は、タワー４２０に対応する特徴物の位置は知ることができる。そこで、輪郭パターン照合部２３２は、端末位置情報が示す位置と、タワー４２０の位置とから、建物４１０の端末位置情報が示す位置に対する方角を示す方角情報を取得する。
そして、輪郭パターン照合部２３２は、取得した方角情報により、建物４１０に類似する特徴物の輪郭パターンをさらに絞り込みして、建物４１０に対応する特徴物を特定する。
【００４３】
情報提供サーバ２００が方角情報を取得する２つ目の方法は、画像情報受信部２１０が受信した画像情報に太陽が含まれる場合に、太陽の位置と、日時と、端末位置情報とに基づき、目標物の端末位置情報が示す位置に対する方角情報を取得する方法である。つまり、画像情報に太陽の画像情報が含まれている場合に、太陽の位置から方角情報を取得することができる。なお、日時とは、例えば、情報表示端末１００が画像情報を取得した日時であり、画像情報等と合わせて受信する。
情報提供サーバ２００が方角情報を取得する２つ目の方法について、図１２に基づき説明する。図１２は、情報表示端末１００の画像情報取得部１１０が取得した画像情報の一例を示す図である。
情報提供サーバ２００の画像情報受信部２１０は、図１２に示す画像情報４００を含む画像位置合成情報を情報表示端末１００から受信する。次に、目的物切出部２２０は、画像情報５００から大仏５１０と太陽５２０との２つの目的物を切り出す。次に、輪郭パターン判断部２３１は、大仏５１０と太陽５２０との輪郭パターンを特定する。そして、輪郭パターン照合部２３２は、端末位置情報が示す位置を中心とした所定の範囲内にある特徴物位置情報が示す位置がある特徴物の輪郭パターンであって、大仏５１０と太陽５２０とのそれぞれの輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、大仏５１０と太陽５２０とのそれぞれに対応する特徴物を特定する。
ここで、例えば、輪郭パターン照合部２３２は、太陽５２０が太陽であることは特定できたとする。この場合、輪郭パターン照合部２３２は、日時から端末位置情報が示す位置に対する太陽５２０の方角を知ることができる。そこで、輪郭パターン照合部２３２は、太陽５２０の位置と、日時と、端末位置情報が示す位置と、タワー４２０の位置とから、大仏５１０の端末位置情報が示す位置に対する方角を示す方角情報を取得する。
そして、輪郭パターン照合部２３２は、取得した方角情報により、大仏５１０に類似する特徴物の輪郭パターンを絞り込みして、大仏５１０に対応する特徴物を特定する。
【００４４】
情報提供サーバ２００が自らの機能により方角情報を取得することにより、情報表示端末１００に方位磁石等の新たな機能を追加することなく、またユーザに方角情報の入力をさせることなく、方角による特徴物の絞込みを行うことができる。
【００４５】
次に、上記実施の形態における情報表示端末１００と情報提供サーバ２００とのハードウェア構成について説明する。
図１３は、情報表示端末１００と情報提供サーバ２００とのハードウェア構成の一例を示す図である。
図１３に示すように、情報表示端末１００と情報提供サーバ２００とは、プログラムを実行するＣＰＵ９１１（Ｃｅｎｔｒａｌ・Ｐｒｏｃｅｓｓｉｎｇ・Ｕｎｉｔ、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサともいう）を備えている。ＣＰＵ９１１は、バス９１２を介してＲＯＭ９１３、ＲＡＭ９１４、ＬＣＤ９０１（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、キーボード９０２、通信ボード９１５、磁気ディスク装置９２０と接続され、これらのハードウェアデバイスを制御する。磁気ディスク装置９２０の代わりに、光ディスク装置、メモリカード読み書き装置などの記憶装置でもよい。
なお、情報表示端末１００は、さらに、上記実施の形態で説明したように、カメラ１８０やＧＰＳアンテナ等を備える。
【００４６】
ＲＯＭ９１３、磁気ディスク装置９２０は、不揮発性メモリの一例である。ＲＡＭ９１４は、揮発性メモリの一例である。ＲＯＭ９１３とＲＡＭ９１４と磁気ディスク装置９２０とは、記憶装置の一例である。通信ボード９１５とキーボード９０２とは、入力装置の一例である。また、通信ボード９１５は、出力装置の一例である。さらに、通信ボード９１５は、通信装置の一例である。また、さらに、ＬＣＤ９０１は、表示装置の一例である。
【００４７】
磁気ディスク装置９２０又はＲＯＭ９１３などには、オペレーティングシステム９２１（ＯＳ）、ウィンドウシステム９２２、プログラム群９２３、ファイル群９２４が記憶されている。プログラム群９２３のプログラムは、ＣＰＵ９１１、オペレーティングシステム９２１、ウィンドウシステム９２２により実行される。
【００４８】
情報表示端末１００のプログラム群９２３には、上記の説明において「画像情報取得部１１０」、「位置情報取得部１２０」、「画像・位置情報合成部１３０」、「画像情報送信部１４０」、「関連情報受信部１５０」、「関連情報表示処理部１６０」、「情報表示部１７０」、「方角情報取得部１９０」等として説明した機能を実行するプログラムやその他のプログラムが記憶されている。また、情報提供サーバ２００のプログラム群９２３には、上記の説明において「画像情報受信部２１０」、「目的物切出部２２０」、「目的物特定部２３０」、「特徴物画像情報記憶部２４０」、「関連情報取得部２５０」、「関連情報記憶部２６０」、「関連情報送信部２７０」等として説明した機能を実行するプログラムやその他のプログラムが記憶されている。プログラムは、ＣＰＵ９１１により読み出され実行される。
情報表示端末１００のファイル群９２４には、上記の説明において「画像情報」、「位置情報」、「方角情報」、「画像位置合成情報」、「地図情報」、「関連情報（観光ガイド情報）」等として説明した情報やデータや信号値や変数値やパラメータが、「ファイル」や「データベース」の各項目として記憶される。「ファイル」や「データベース」は、ディスクやメモリなどの記録媒体に記憶される。また、情報提供サーバ２００のファイル群９２４には、上記の説明において「画像位置合成情報」、「特徴物画像情報」、「関連情報（観光ガイド情報）」等として説明した情報やデータや信号値や変数値やパラメータが、「ファイル」や「データベース」の各項目として記憶される。「ファイル」や「データベース」は、ディスクやメモリなどの記録媒体に記憶される。ディスクやメモリなどの記憶媒体に記憶された情報やデータや信号値や変数値やパラメータは、読み書き回路を介してＣＰＵ９１１によりメインメモリやキャッシュメモリに読み出され、抽出・検索・参照・比較・演算・計算・処理・出力・印刷・表示などのＣＰＵ９１１の動作に用いられる。抽出・検索・参照・比較・演算・計算・処理・出力・印刷・表示のＣＰＵ９１１の動作の間、情報やデータや信号値や変数値やパラメータは、メインメモリやキャッシュメモリやバッファメモリに一時的に記憶される。
また、上記の説明におけるフローチャートの矢印の部分は主としてデータや信号の入出力を示し、データや信号値は、ＲＡＭ９１４のメモリ、その他光ディスク等の記録媒体に記録される。また、データや信号は、バス９１２や信号線やケーブルその他の伝送媒体によりオンライン伝送される。
【００４９】
また、上記の説明において「〜部」として説明するものは、「〜回路」、「〜装置」、「〜機器」、「〜手段」、「〜機能」であってもよく、また、「〜ステップ」、「〜手順」、「〜処理」であってもよい。また、「〜装置」として説明するものは、「〜回路」、「〜装置」、「〜機器」、「〜手段」、「〜機能」であってもよく、また、「〜ステップ」、「〜手順」、「〜処理」であってもよい。さらに、「〜処理」として説明するものは「〜ステップ」であっても構わない。すなわち、「〜部」として説明するものは、ＲＯＭ９１３に記憶されたファームウェアで実現されていても構わない。或いは、ソフトウェアのみ、或いは、素子・デバイス・基板・配線などのハードウェアのみ、或いは、ソフトウェアとハードウェアとの組み合わせ、さらには、ファームウェアとの組み合わせで実施されても構わない。ファームウェアとソフトウェアは、プログラムとして、ＲＯＭ９１３等の記録媒体に記憶される。プログラムはＣＰＵ９１１により読み出され、ＣＰＵ９１１により実行される。すなわち、プログラムは、上記で述べた「〜部」としてコンピュータ等を機能させるものである。あるいは、上記で述べた「〜部」の手順や方法をコンピュータ等に実行させるものである。
【図面の簡単な説明】
【００５０】
【図１】実施の形態１に係る情報提供システム１の機能を示す機能ブロック図。
【図２】画像情報から、画像情報に含まれる目的物の画像情報を切り出す処理及び目的物の輪郭パターンを特定する処理を示す概念図。
【図３】端末位置情報に基づく、特徴物の絞込み処理を示す概念図。
【図４】目的物の輪郭パターンと、特徴物の輪郭パターンとの照合処理を示す概念図。
【図５】実施の形態１に係る情報表示端末１００の処理の流れを示すフローチャート。
【図６】実施の形態１に係る情報提供サーバ２００の処理の流れを示すフローチャート。
【図７】実施の形態２に係る情報提供システム１の機能を示す機能ブロック図。
【図８】端末位置情報と方角情報とに基づく、特徴物の絞込み処理を示す概念図。
【図９】実施の形態２に係る情報表示端末１００の処理の流れを示すフローチャート。
【図１０】実施の形態２に係る情報提供サーバ２００の処理の流れを示すフローチャート。
【図１１】画像情報の一例を示す図（複数の目的物を含む画像情報の例）。
【図１２】画像情報の一例を示す図（太陽を含む画像情報の例）。
【図１３】情報表示端末１００と情報提供サーバ２００とのハードウェア構成の一例を示す図。
【符号の説明】
【００５１】
１ 情報提供システム、１００ 情報表示端末、１１０ 画像情報取得部、１２０ 位置情報取得部、１３０ 画像・位置情報合成部、１４０ 画像情報送信部、１５０ 関連情報受信部、１６０ 関連情報表示処理部、１７０ 情報表示部、１８０ カメラ、１９０ 方角情報取得部、２００ 情報提供サーバ、２１０ 画像情報受信部、２２０ 目的物切出部、２３０ 目的物特定部、２３１ 輪郭パターン判断部、２３２ 輪郭パターン照合部、２４０ 特徴物画像情報記憶部、２５０ 関連情報取得部、２６０ 関連情報記憶部、２７０ 関連情報送信部、３００ ネットワーク。
【技術分野】
【０００１】
本発明は、例えば、画像情報に基づきカメラ付携帯電話等の端末へ観光ガイド情報を提供する技術に関する。
【背景技術】
【０００２】
携帯電話機や電子書籍端末等の携帯型電子情報端末へ観光ガイド情報等を提供するサービスがある。
特許文献１と特許文献２とには、端末に対して通信によって予め設定した観光コースと観光ガイド情報を文字、画像により提供するシステムが開示されている。
【特許文献１】特開２００３−２５６４３１号公報
【特許文献２】特開２００４−１３９５６０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
従来の観光ガイド情報等を提供するサービスでは、ユーザが表示されたメニュー等から観光スポットの名称を指定するか、又は観光スポットの名称をキーワードとして指定して検索をしなければ、必要な観光ガイド情報等の情報を得ることはできない。
しかし、観光ガイド情報等を必要としているユーザは、観光スポットの名称や、その観光スポットを特定するための他の情報（例えば、住所、電話番号等）を知らない場合がある。このような場合に、ユーザは観光ガイド情報を得るには、提供される大量の情報の中から、目的とする対象物に関する情報を逐一探さなければならない。
本発明は、例えば、ユーザが容易に、必要とする観光ガイド情報等の情報を取得できるようにすることを目的とする。
【課題を解決するための手段】
【０００４】
本発明に係る情報提供サーバは、例えば、特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部と
を備えることを特徴とする。
【０００５】
上記特徴物画像情報記憶部は、上記特徴物画像情報とともに、上記特徴物の位置を示す特徴物位置情報を記憶し、
上記画像情報受信部は、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【０００６】
上記画像情報受信部は、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【０００７】
上記目的物特定部は、上記画像情報受信部が受信した画像情報から複数の目的物の画像情報を上記目的物切出部が切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする。
【０００８】
本発明に係る情報表示端末は、例えば、目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
位置を示す位置情報を位置取得装置により取得する位置情報取得部と、
上記位置情報取得部が取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得部と、
上記画像情報取得部が取得した画像情報と、上記位置情報取得部が取得した位置情報と、上記方角情報取得部が取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信部と、
上記画像情報送信部が送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する関連情報表示部と
を備えることを特徴とする。
【０００９】
本発明に係る情報提供システムは、例えば、情報表示端末と情報提供サーバとを備える情報提供システムであり、
上記情報表示端末は、
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
上記画像情報取得部が取得した画像情報を情報提供サーバへ通信装置を介して送信する画像情報送信部とを備え、
上記情報提供サーバは、
特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
上記画像情報送信部が送信した画像情報を通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から、上記画像情報の目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶する特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部とを備え、
上記情報表示端末は、さらに、
上記関連情報取得部が送信した関連情報を通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する情報表示部と
を備えることを特徴とする。
【００１０】
本発明に係る情報提供プログラムは、例えば、目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信処理と、
上記画像情報受信処理で受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出処理と、
上記目的物切出処理で切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定処理と、
記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定処理で特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得処理と、
上記関連情報取得処理で取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信処理と
をコンピュータに実行させることを特徴とする。
【００１１】
上記画像情報受信処理では、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【００１２】
上記画像情報受信処理では、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする。
【００１３】
上記目的物特定処理では、上記画像情報受信処理で受信した画像情報から複数の目的物の画像情報を上記目的物切出処理で切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする。
【００１４】
本発明に係る情報表示プログラムは、例えば、目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得処理と、
位置を示す位置情報を位置取得装置により取得する位置情報取得処理と、
上記位置情報取得処理で取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得処理と、
上記画像情報取得処理で取得した画像情報と、上記位置情報取得処理で取得した位置情報と、上記方角情報取得処理で取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信処理と、
上記画像情報送信処理で送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信処理と、
上記関連情報受信処理で受信した関連情報を表示装置に表示する関連情報表示処理と
をコンピュータに実行させることを特徴とする。
【００１５】
本発明に係る情報提供方法は、例えば、通信装置が、目的物の画像情報を含む画像情報を端末から受信する画像情報受信ステップと、
処理装置が、上記画像情報受信ステップで受信した画像情報から目的物の画像情報を切り出す目的物切出ステップと、
処理装置が、上記目的物切出ステップで切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する目的物特定ステップと、
処理装置が、記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定ステップで特定した上記目的物に対応する特徴物に関連する関連情報を取得する関連情報取得ステップと、
通信装置が、上記関連情報取得ステップで取得した関連情報を上記端末へ送信する関連情報送信ステップと
を備えることを特徴とする。
【００１６】
本発明に係る情報表示方法は、例えば、画像取得装置が、目的物の画像情報を含む画像情報を取得する画像情報取得ステップと、
位置取得装置が、位置を示す位置情報を取得する位置情報取得ステップと、
方角情報取得装置が、上記位置情報取得ステップで取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得ステップと、
通信装置が、上記画像情報取得ステップで取得した画像情報と、上記位置情報取得ステップで取得した位置情報と、上記方角情報取得ステップで取得した方角情報とを情報提供サーバへ送信する画像情報送信ステップと、
通信装置が、上記画像情報送信ステップで送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから受信する関連情報受信ステップと、
表示装置が、上記関連情報受信ステップで受信した関連情報を表示する関連情報表示ステップと
を備えることを特徴とする。
【発明の効果】
【００１７】
本発明によれば、ユーザが必要とする目的物についての関連情報（観光ガイド情報等）を、その目的物の画像情報に基づき特定して取得、又は提供することができる。したがって、ユーザは、目的物に関する情報を一切有していない場合であっても、その目的物の画像情報を得ることができれば、その目的物についての関連情報を得ることができる。
【発明を実施するための最良の形態】
【００１８】
実施の形態１．
図１は、この実施の形態に係る情報提供システム１の機能を示す機能ブロック図である。
情報提供システム１は、情報表示端末１００と情報提供サーバ２００とを備える。
情報表示端末１００は、ユーザが使用する端末であり、例えば、カメラ付携帯電話機やカメラ付ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）（登録商標）等である。
情報提供サーバ２００は、観光ガイド情報等の情報（関連情報の一例）を情報表示端末１００へ提供するサーバである。ここで、観光ガイド情報とは、観光スポット、観光レジャー施設、レストラン、ホテル等の観光ガイドの本に載っている情報全般を含むものである。なお、以下の説明では、情報提供サーバ２００が提供する情報として観光ガイド情報を用いて説明するが、情報提供サーバ２００が提供する情報は、観光ガイド情報に限らず、例えば、車に関連する情報、動物、昆虫等に関連する情報等の他の情報であっても構わない。
【００１９】
まず、情報表示端末１００について説明する。
情報表示端末１００は、画像情報取得部１１０、位置情報取得部１２０、画像・位置情報合成部１３０、画像情報送信部１４０、関連情報受信部１５０、関連情報表示処理部１６０、情報表示部１７０、カメラ１８０（画像取得装置の一例）を備える。
画像情報取得部１１０は、カメラ１８０により画像情報を取得する。特に、ここでは、画像情報取得部１１０は、観光ガイド情報を取得したいと考える観光スポット等（以下、目的物）の画像情報を含む画像情報を取得する。観光スポット等とは、例えば、○○ビル、○○タワー、○○大仏等である。
位置情報取得部１２０は、ＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）などの測位衛星４００から、情報表示端末１００の現在地を示す位置情報（端末位置情報）をＧＰＳアンテナ（位置取得装置の一例）を介して取得する。
画像・位置情報合成部１３０は、画像情報取得部１１０が取得した画像情報と、位置情報取得部１２０が取得した端末位置情報とを関連付けして、画像位置合成情報を生成する。
画像情報送信部１４０は、画像・位置情報合成部１３０が生成した画像位置合成情報を通信装置とネットワーク３００とを介して情報提供サーバ２００へ送信する。
関連情報受信部１５０は、画像情報送信部１４０が送信した画像位置合成情報に基づき、情報提供サーバ２００により特定された観光ガイド情報であって、画像情報に含めた目的物に関連した情報である観光ガイド情報を情報提供サーバ２００からネットワーク３００と通信装置とを介して受信する。
関連情報表示処理部１６０は、関連情報受信部１５０が受信した観光ガイド情報を、予め記憶装置に記憶した地図情報と重畳表示するか否かを判定する。関連情報表示処理部１６０は、例えば、ユーザからの入力に従い、観光ガイド情報を地図情報と重畳表示するか否かを判定する。また、関連情報表示処理部１６０は、観光ガイド情報を地図情報と重畳表示すると判定した場合、端末位置情報が示す位置を中心とした所定の範囲の地図情報を記憶装置から取得する。
情報表示部１７０は、関連情報表示処理部１６０の判定に従い、観光ガイド情報を表示装置に表示する。情報表示部１７０は、関連情報表示処理部１６０が観光ガイド情報を地図情報と重畳表示すると判定した場合、関連情報表示処理部１６０が取得した地図情報が示す地図上に、観光ガイド情報を表示する。観光ガイド情報を表示する位置は、例えば、観光ガイド情報に含まれる位置情報が示す位置（つまり、観光スポットの位置）に表示する。
【００２０】
次に、情報提供サーバ２００について説明する。
情報提供サーバ２００は、画像情報受信部２１０、目的物切出部２２０、目的物特定部２３０、特徴物画像情報記憶部２４０、関連情報取得部２５０、関連情報記憶部２６０、関連情報送信部２７０を備える。
画像情報受信部２１０は、情報表示端末１００の画像情報送信部１４０が送信した画像位置合成情報をネットワーク３００と通信装置とを介して受信する。つまり、画像情報受信部２１０は、目的物の画像情報を含む画像情報と、情報表示端末１００の上記画像情報取得時の位置を示す端末位置情報とを受信する。
目的物切出部２２０は、画像情報受信部２１０が受信した画像情報から目的物の画像情報を処理装置により切り出す。つまり、目的物切出部２２０は、画像情報から目的物の形状を切り出し、目的物の輪郭（形状）を特定する。目的物切出部２２０の動作の詳細については後述する。
目的物特定部２３０は、後述する特徴物画像情報記憶部２４０が記憶した特徴物画像情報から、目的物切出部２２０が切り出した目的物の画像情報に対応する特徴物画像情報を検索して、目的物に対応する特徴物を処理装置により特定する。ここで、目的物特定部２３０は、輪郭パターン判断部２３１と輪郭パターン照合部２３２とを備える。輪郭パターン判断部２３１は、目的物の輪郭パターンを特定して、目的物の輪郭パターンを幾何学図形のパターンとして表す。輪郭パターン照合部２３２は、幾何学図形のパターンとして表された目的物の輪郭パターンと特徴物画像情報記憶部２４０が記憶した特徴物の輪郭パターンとを照合する。目的物特定部２３０の動作の詳細については後述する。
特徴物画像情報記憶部２４０は、特徴物の画像情報である特徴物画像情報を記憶装置に記憶する。特徴物画像情報記憶部２４０は、例えば、特徴物画像情報として、特徴物の輪郭の定形的な幾何学図形の組み合わせのデータ（幾何学図形のパターン）により示される特徴物の輪郭パターンを記憶する。ここで、特徴物とは、観光ガイド情報に含まれる観光の建築物や像、観光レジャー施設、レストラン、ホテル等である。また、特徴物画像情報記憶部２４０は、特徴物画像情報とともに、特徴物の位置を示す特徴物位置情報を記憶する。
関連情報取得部２５０は、後述する関連情報記憶部２６０が記憶した観光ガイド情報であって、目的物特定部２３０が特定した目的物に対応する特徴物に関連する観光ガイド情報を処理装置により取得する。
関連情報記憶部２６０は、観光ガイド情報を記憶装置に記憶する。観光ガイド情報とは、例えば、特徴物の名前、歴史、由来等の情報、それらの地図上の位置、営業時間等である。
関連情報送信部２７０は、関連情報記憶部２６０が取得した観光ガイド情報を情報表示端末１００へ通信装置を介して送信する。
【００２１】
次に、図２から図４までに基づき、目的物切出部２２０と目的物特定部２３０との動作について説明する。つまり、情報表示端末１００から受信した画像情報に含まれる目的物に対応した特徴物を特定する処理について説明する。図２は、画像情報から、画像情報に含まれる目的物の画像情報を切り出す処理及び目的物の輪郭パターンを特定する処理を示す概念図である。図３は、端末位置情報に基づく、特徴物の絞込み処理を示す概念図である。図４は、目的物の輪郭パターンと、特徴物の輪郭パターンとの照合処理を示す概念図である。
【００２２】
まず、目的物切出部２２０は、各画素の中から一群の形状を表す画素として認識される画素群を１つの目的物の画素群として特定する。
つまり、目的物切出部２２０は、初めに、図２（ａ）に示すように、受信した画像情報の１端点の画素の位置を原点として画像情報内の画素を、例えば左上から右下へ向かって読み込む（スキャンする）。次に、目的物切出部２２０は、図２（ｂ）に示すように、連続した同系色の画素を１つの画素群として特定して、１つの画素群を１つの目標物とみなす。そして、目的物切出部２２０は、図２（ｃ）に示すように、各画素群に属する画素の座標値を各目的物の画像情報として取得することにより、画像情報から目標物の画像情報を切り出す。
【００２３】
次に、目的物特定部２３０の輪郭パターン判断部２３１は、目的物切出部２２０が切り出した目的物の画像情報から目的物の輪郭を特定し、幾何学的な輪郭パターンに変換する。幾何学的な輪郭パターンとは、１つの幾何学図形、又は、２つ以上の幾何学図形の組み合わせにより形成された図形の輪郭パターンである。つまり、輪郭パターン判断部２３１は、図２（ｄ）に示すように、目的物の画像情報の中から輪郭に相当する画素群を輪郭画素群として特定し、特定した輪郭画素群の相対座標値を幾何学的な輪郭パターンの相対座標値に変換する。これにより、目的物の輪郭パターンを幾何学図形の組み合わせ（幾何学図形のパターン）として表すことができる。
輪郭パターン判断部２３１は、例えば、１つの目的物の画像情報の１端点の画素の位置から画像情報内の画素をスキャンして画素が存在しなくなる座標の１つ手前の座標を輪郭部分の座標として取得する。次に、取得した輪郭部分の座標の１端点の座標を原点として各画素の相対座標値を算出し、１群の相対座標値の集合とする。次に、各輪郭の相対座標値の集合を平滑化して幾何学図形の集合に変換する。つまり、図２（ｄ）の破線で示された幾何学図形の組み合わせとして、目的物の輪郭パターンを表す。そして、輪郭パターン判断部２３１は、図２（ｅ）に示すように、１つの目的物から特定した各幾何学図形の中心点の座標値を算出し、各中心点の座標値に基づき、各輪郭パターンの並びの方向を判断して、各輪郭パターンを関連付ける。
【００２４】
そして、目的物特定部２３０の輪郭パターン照合部２３２は、輪郭パターン判断部２３１が特定した目的物の輪郭パターンに最も近似する特徴物の輪郭パターンを検索して、目的物に対応する特徴物を特定する。なお、ここでは、特徴物画像情報記憶部２４０は、特徴物画像情報として特徴物の輪郭の定形的な幾何学図形の組み合わせのデータにより示される特徴物の輪郭パターンを記憶しているものとする。
まず、輪郭パターン照合部２３２は、図３に示すように、端末位置情報が示す情報表示端末１００の位置を中心とした所定の範囲内に特徴物画像情報記憶部２４０が記憶した特徴物位置情報が示す位置が存在する特徴物の輪郭パターンを抽出する。そして、輪郭パターン照合部２３２は、輪郭パターン判断部２３１が特定した目的物の幾何学図形の組み合わせと、抽出した特徴物の輪郭パターンとを照合して、目的物の輪郭パターンに最も近似する特徴物の輪郭パターンを特定して、目的物に対応する特徴物を特定する。
輪郭パターン照合部２３２は、例えば、図４に示すように、目的物の輪郭パターンの中心点の座標を算出して、その中心点を基準にして、三次元座標系で回転、伸張、圧縮の変形をさせた目的物の輪郭パターンの各画素の相対座標値を算出する。また、輪郭パターン照合部２３２は、目的物の輪郭パターンの画素のうち、その画素の相対座標値と、特徴物の輪郭パターンの画素の相対座標値との差が所定の範囲内にある割合が所定の割合以上である場合、その特徴物の輪郭パターンがその目的物の輪郭パターンに近似すると判断する。そして、輪郭パターン照合部２３２は、近似すると判断した特徴物を目的物に該当する特徴物として特定する。
【００２５】
次に、図５と図６とに基づき、この実施の形態に係る情報表示端末１００と情報提供サーバ２００との処理の流れについて説明する。図５は、この実施の形態に係る情報表示端末１００の処理の流れを示すフローチャートである。図６は、この実施の形態に係る情報提供サーバ２００の処理の流れを示すフローチャートである。
【００２６】
まず、情報表示端末１００は以下のように動作する。
画像情報取得ステップ（Ｓ１１）：画像情報取得部１１０は、カメラ１８０により目的物の画像情報を含む画像情報を取得する。
位置情報取得ステップ（Ｓ１２）：位置情報取得部１２０は、情報表示端末１００の現在地を示す端末位置情報をＧＰＳアンテナを介して取得する。つまり、位置情報取得部１２０は、画像情報取得部１１０が画像情報を取得した時の情報表示端末１００の位置を示す端末位置情報を取得する。
情報合成ステップ（Ｓ１３）：画像・位置情報合成部１３０は、（Ｓ１１）で画像情報取得部１１０が取得した画像情報と、（Ｓ１２）で位置情報取得部１２０が取得した端末位置情報とを関連付けして、画像位置合成情報を生成する。
画像情報送信ステップ（Ｓ１４）：画像情報送信部１４０は、（Ｓ１３）で画像・位置情報合成部１３０が生成した画像位置合成情報を情報提供サーバ２００へ送信する。
【００２７】
情報表示端末１００が画像位置合成情報を送信すると、情報提供サーバ２００は以下のように動作する。
画像情報受信ステップ（Ｓ２１）：画像情報受信部２１０は、（Ｓ１４）で情報表示端末１００の画像情報送信部１４０が送信した画像位置合成情報を受信する。
目的物切出ステップ（Ｓ２２）：目的物切出部２２０は、（Ｓ２１）で画像情報受信部２１０が受信した画像位置合成情報に含まれる画像情報から、目的物の画像情報を切り出す。
輪郭パターン判断ステップ（Ｓ２３）：目的物特定部２３０の輪郭パターン判断部２３１は、（Ｓ２２）で目的物切出部２２０が切り出した目標物の画像情報の輪郭パターンを幾何学的な輪郭パターンに変換する。
輪郭パターン照合ステップ（Ｓ２４）：目的物特定部２３０の輪郭パターン照合部２３２は、端末位置情報が示す位置を中心とした所定の範囲内にある特徴物位置情報が示す位置がある特徴物の輪郭パターンであって、（Ｓ２３）で輪郭パターン判断部２３１が変換した輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、目的物に対応する特徴物を特定する。
関連情報取得ステップ（Ｓ２５）：関連情報取得部２５０は、（Ｓ２４）で輪郭パターン照合部２３２が特定した特徴物の観光ガイド情報を関連情報記憶部２６０から取得する。
関連情報送信ステップ（Ｓ２６）：関連情報送信部２７０は、（Ｓ２５）で関連情報取得部２５０が取得した観光ガイド情報を情報表示端末１００へ送信する。
【００２８】
情報提供サーバ２００が観光ガイド情報を送信すると、情報表示端末１００は以下のように動作する。
関連情報受信ステップ（Ｓ１５）：関連情報受信部１５０は、（Ｓ２６）で情報提供サーバ２００の関連情報送信部２７０が送信した観光ガイド情報を受信する。
関連情報処理ステップ（Ｓ１６）：関連情報表示処理部１６０は、（Ｓ１５）で関連情報受信部１５０が受信した観光ガイド情報を地図情報と重畳表示するか否かを判定するとともに、重畳表示すると判定した場合、地図情報を取得する。
情報表示ステップ（Ｓ１７）：情報表示部１７０は、（Ｓ１６）で関連情報表示処理部１６０が判定した結果に従い、観光ガイド情報を表示する。
【００２９】
以上のように、この実施の形態に係る情報提供システム１によれば、情報表示端末１００を使用するユーザが目的物に関する情報を一切有していない場合であっても、その目的物の画像情報を得ることができれば、その目的物についての関連情報を得ることができる。
特に、この実施の形態に係る情報提供システム１によれば、端末位置情報により絞込みされた特徴物から、目的物を検索するため、目的物に類似する特徴物が複数存在する場合であっても、目的物に対応する特徴物をより正確に特定することができる。
【００３０】
なお、情報提供サーバ２００の目的物特定部２３０は、目的物切出部２２０が画像情報から複数の目的物を切り出した場合、切り出した複数の目的物の各目的物に対応する特徴物を特定する。そして、関連情報取得部２５０は各目的物に対応する特徴物についての観光ガイド情報を取得し、関連情報送信部２７０は関連情報取得部２５０が取得した各目的物に対応する特徴物についての観光ガイド情報を情報表示端末１００へ送信する。
【００３１】
また、情報提供サーバ２００の目的物特定部２３０は、目的物切出部２２０が切り出した目的物に対応する特徴物が１つに特定できない場合、目的物に類似する複数の特徴物を特定する。そして、関連情報取得部２５０は、目的物特定部２３０が特定した複数の特徴物それぞれに関連する観光ガイド情報を取得して、関連情報送信部２７０は、関連情報取得部２５０が取得した複数の特徴物それぞれに関連する観光ガイド情報を情報表示端末１００へ送信する。
また、関連情報取得部２５０は、目的物特定部２３０が特定した複数の特徴物それぞれに関連する観光ガイド情報の一部の情報（例えば、複数の特徴物それぞれの画像情報）を特徴物の識別情報とともに取得して、関連情報送信部２７０は、関連情報取得部２５０が取得した観光ガイド情報の一部の情報を識別情報とともに情報表示端末１００へ送信するとしても構わない。この場合、情報表示端末１００の関連情報受信部１５０は、観光ガイド情報の一部の情報を受信して、情報表示部１７０が観光ガイド情報の一部の情報を表示する。そして、情報表示部１７０は、観光ガイド情報の一部の情報を表示することにより、ユーザに目的物に対応する特徴物を選択させる。つまり、情報表示部１７０は、複数の特徴物それぞれの画像情報を表示することにより、ユーザに目的物がどの特徴物であるかを選択させる。ユーザは、実際に目的物を見ているため、特徴物の画像を見ることができれば、目的物がどの特徴物であるか選択することができる。そして、情報表示端末１００は、ユーザにより選択された特徴物の観光ガイド情報を情報提供サーバ２００から受信するとしても構わない。つまり、情報表示端末１００の画像情報送信部１４０は、ユーザにより選択された特徴物の識別情報を情報提供サーバ２００へ送信する。情報提供サーバ２００の画像情報受信部２１０は、画像情報送信部１４０が送信した特徴物の識別情報を受信し、関連情報取得部２５０は、識別情報から特定される特徴物に関連した観光ガイド情報を取得し、関連情報送信部２７０は取得した観光ガイド情報を情報表示端末１００へ送信する。
【００３２】
つまり、この実施の形態に係る情報提供システム１は、カメラ付携帯電話で撮影した風景画像から目的物を切り出し、カメラ付携帯電話の現在位置とを比較して、切り出した目的物を特定し、関連する観光情報を表示することを特徴とする。
【００３３】
実施の形態２．
この実施の形態では、情報表示端末１００の位置に対する目的物が位置する方角に基づき、目的物に対応する特徴物を絞り込む情報提供システム１について説明する。
【００３４】
図７は、この実施の形態に係る情報提供システム１の機能を示す機能ブロック図である。この実施の形態に係る情報表示端末１００は、実施の形態１に係る情報表示端末１００の機能に加え、方角情報取得部１９０を備える。また、この実施の形態に係る情報提供サーバ２００は、実施の形態１に係る情報提供サーバ２００と構成は同様である。
この実施の形態に係る情報提供システム１について、実施の形態１に係る情報提供システム１と異なる点について説明する。
【００３５】
情報表示端末１００の方角情報取得部１９０は、位置情報取得部１２０が取得した端末位置情報が示す位置に対する目的物が位置する方角を示す方角情報を取得する。方角情報取得部１９０は、例えば、画像情報取得部１１０が画像情報を取得した場合に、カメラ１８０のレンズの方角を方位磁石等により取得する。また、方角情報取得部１９０は、入力装置を介してユーザから方角情報を入力されることにより方角情報を取得するとしても構わない。
画像・位置情報合成部１３０は、画像情報と、端末位置情報と、方角情報取得部１９０が取得した方角情報とを関連付けして、画像位置合成情報を生成する。
【００３６】
情報提供サーバ２００の輪郭パターン照合部２３２は、図８に示すように、端末位置情報が示す情報表示端末１００の位置を中心とした所定の範囲の内、情報表示端末１００の位置から方角情報が示す方角に特徴物位置情報が示す位置が存在する特徴物の輪郭パターンを抽出する。図８では、方角情報は南西の方角を示しているとする。そして、輪郭パターン照合部２３２は、輪郭パターン判断部２３１が特定した目的物の幾何学図形の組み合わせと、抽出した特徴物の輪郭パターンとを照合して、目的物の輪郭パターンに最も近似する特徴物の輪郭パターンを特定して、目的物に対応する特徴物を特定する。
【００３７】
次に、図９と図１０とに基づき、この実施の形態に係る情報表示端末１００と情報提供サーバ２００との処理の流れについて説明する。図９は、この実施の形態に係る情報表示端末１００の処理の流れを示すフローチャートである。図１０は、この実施の形態に係る情報提供サーバ２００の処理の流れを示すフローチャートである。
まず、情報表示端末１００は以下のように動作する。
（Ｓ３１）と（Ｓ３２）とは、実施の形態１の（Ｓ１１）と（Ｓ１２）と同様である。
方角情報取得ステップ（Ｓ３３）：方角情報取得部１９０は、位置情報取得部１２０が取得した端末位置情報が示す位置に対する目的物が位置する方角を示す方角情報を取得する。
情報合成ステップ（Ｓ３４）：画像・位置情報合成部１３０は、（Ｓ３１）で画像情報取得部１１０が取得した画像情報と、（Ｓ３２）で位置情報取得部１２０が取得した端末位置情報と、（Ｓ３３）で方角情報取得部１９０が取得した方角情報とを関連付けして、画像位置合成情報を生成する。
（Ｓ３５）は、実施の形態１の（Ｓ１４）と同様である。
【００３８】
情報表示端末１００が画像位置合成情報を送信すると、情報提供サーバ２００は以下のように動作する。
（Ｓ４１）から（Ｓ４３）までは、実施の形態１の（Ｓ２１）から（Ｓ２３）までと同様である。
輪郭パターン照合ステップ（Ｓ４４）：端末位置情報が示す位置を中心とした所定の範囲の内、端末位置情報が示す位置から方角情報が示す方角に特徴物位置情報が示す位置が存在する特徴物の輪郭パターンであって、（Ｓ４３）で輪郭パターン判断部２３１が変換した輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、目的物に対応する特徴物を特定する。
（Ｓ４５）と（Ｓ４６）とは、実施の形態１の（Ｓ２５）と（Ｓ２６）と同様である。
【００３９】
また、情報提供サーバ２００が観光ガイド情報を送信すると、情報表示端末１００は実施の形態１と同様に動作する。
つまり、（Ｓ３６）から（Ｓ３８）までは、実施の形態１の（Ｓ１５）から（Ｓ１７）までと同様である。
【００４０】
以上のように、この実施の形態に係る情報提供システム１によれば、実施の形態１に係る情報提供システム１に比べ、さらに、方角情報により絞込みされた特徴物から目的物に対応する特徴物を特定するため、目的物に類似する特徴物が複数存在する場合であっても、目的物に対応する特徴物をより正確に特定することができる。
【００４１】
なお、上記説明では、情報表示端末１００が方角情報を取得して情報提供サーバ２００へ送信するとした。しかし、情報提供サーバ２００は、情報表示端末１００から方角情報を受信するのではなく、以下に示す方法等により方角情報を取得するとしても構わない。
【００４２】
情報提供サーバ２００が方角情報を取得する１つ目の方法は、画像情報受信部２１０が受信した画像情報から複数の目的物の画像情報を目的物切出部２２０が切り出した場合に、複数の目的物の少なくとも１つの目的物に対応する特徴物を特定して、特定した特徴物の位置と端末位置情報が示す位置とに基づき、他の目標物の端末位置情報が示す位置に対する方角情報を取得する方法である。つまり、画像情報に含まれる目的物のうち、１つの目的物に対応する特徴物を特定して、その特徴物の位置に基づき方角情報を取得する方法である。
情報提供サーバ２００が方角情報を取得する１つ目の方法について、図１１に基づき説明する。図１１は、情報表示端末１００の画像情報取得部１１０が取得した画像情報の一例を示す図である。
情報提供サーバ２００の画像情報受信部２１０は、図１１に示す画像情報４００を含む画像位置合成情報を情報表示端末１００から受信する。次に、目的物切出部２２０は、画像情報４００から建物４１０とタワー４２０との２つの目的物を切り出す。次に、輪郭パターン判断部２３１は、建物４１０とタワー４２０との輪郭パターンを特定する。そして、輪郭パターン照合部２３２は、端末位置情報が示す位置を中心とした所定の範囲内に位置する特徴物の輪郭パターンであって、建物４１０とタワー４２０とのそれぞれの輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、建物４１０とタワー４２０とのそれぞれに対応する特徴物を特定する。
ここで、例えば、輪郭パターン照合部２３２は、タワー４２０に対応する特徴物のみ特定できたとする。つまり、建物４１０に対応する特徴物を１つに絞り込みできなかったとする。この場合、輪郭パターン照合部２３２は、タワー４２０に対応する特徴物の位置は知ることができる。そこで、輪郭パターン照合部２３２は、端末位置情報が示す位置と、タワー４２０の位置とから、建物４１０の端末位置情報が示す位置に対する方角を示す方角情報を取得する。
そして、輪郭パターン照合部２３２は、取得した方角情報により、建物４１０に類似する特徴物の輪郭パターンをさらに絞り込みして、建物４１０に対応する特徴物を特定する。
【００４３】
情報提供サーバ２００が方角情報を取得する２つ目の方法は、画像情報受信部２１０が受信した画像情報に太陽が含まれる場合に、太陽の位置と、日時と、端末位置情報とに基づき、目標物の端末位置情報が示す位置に対する方角情報を取得する方法である。つまり、画像情報に太陽の画像情報が含まれている場合に、太陽の位置から方角情報を取得することができる。なお、日時とは、例えば、情報表示端末１００が画像情報を取得した日時であり、画像情報等と合わせて受信する。
情報提供サーバ２００が方角情報を取得する２つ目の方法について、図１２に基づき説明する。図１２は、情報表示端末１００の画像情報取得部１１０が取得した画像情報の一例を示す図である。
情報提供サーバ２００の画像情報受信部２１０は、図１２に示す画像情報４００を含む画像位置合成情報を情報表示端末１００から受信する。次に、目的物切出部２２０は、画像情報５００から大仏５１０と太陽５２０との２つの目的物を切り出す。次に、輪郭パターン判断部２３１は、大仏５１０と太陽５２０との輪郭パターンを特定する。そして、輪郭パターン照合部２３２は、端末位置情報が示す位置を中心とした所定の範囲内にある特徴物位置情報が示す位置がある特徴物の輪郭パターンであって、大仏５１０と太陽５２０とのそれぞれの輪郭パターンと対応する特徴物の輪郭パターンを特徴物画像情報記憶部２４０から検索して、大仏５１０と太陽５２０とのそれぞれに対応する特徴物を特定する。
ここで、例えば、輪郭パターン照合部２３２は、太陽５２０が太陽であることは特定できたとする。この場合、輪郭パターン照合部２３２は、日時から端末位置情報が示す位置に対する太陽５２０の方角を知ることができる。そこで、輪郭パターン照合部２３２は、太陽５２０の位置と、日時と、端末位置情報が示す位置と、タワー４２０の位置とから、大仏５１０の端末位置情報が示す位置に対する方角を示す方角情報を取得する。
そして、輪郭パターン照合部２３２は、取得した方角情報により、大仏５１０に類似する特徴物の輪郭パターンを絞り込みして、大仏５１０に対応する特徴物を特定する。
【００４４】
情報提供サーバ２００が自らの機能により方角情報を取得することにより、情報表示端末１００に方位磁石等の新たな機能を追加することなく、またユーザに方角情報の入力をさせることなく、方角による特徴物の絞込みを行うことができる。
【００４５】
次に、上記実施の形態における情報表示端末１００と情報提供サーバ２００とのハードウェア構成について説明する。
図１３は、情報表示端末１００と情報提供サーバ２００とのハードウェア構成の一例を示す図である。
図１３に示すように、情報表示端末１００と情報提供サーバ２００とは、プログラムを実行するＣＰＵ９１１（Ｃｅｎｔｒａｌ・Ｐｒｏｃｅｓｓｉｎｇ・Ｕｎｉｔ、中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、プロセッサともいう）を備えている。ＣＰＵ９１１は、バス９１２を介してＲＯＭ９１３、ＲＡＭ９１４、ＬＣＤ９０１（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）、キーボード９０２、通信ボード９１５、磁気ディスク装置９２０と接続され、これらのハードウェアデバイスを制御する。磁気ディスク装置９２０の代わりに、光ディスク装置、メモリカード読み書き装置などの記憶装置でもよい。
なお、情報表示端末１００は、さらに、上記実施の形態で説明したように、カメラ１８０やＧＰＳアンテナ等を備える。
【００４６】
ＲＯＭ９１３、磁気ディスク装置９２０は、不揮発性メモリの一例である。ＲＡＭ９１４は、揮発性メモリの一例である。ＲＯＭ９１３とＲＡＭ９１４と磁気ディスク装置９２０とは、記憶装置の一例である。通信ボード９１５とキーボード９０２とは、入力装置の一例である。また、通信ボード９１５は、出力装置の一例である。さらに、通信ボード９１５は、通信装置の一例である。また、さらに、ＬＣＤ９０１は、表示装置の一例である。
【００４７】
磁気ディスク装置９２０又はＲＯＭ９１３などには、オペレーティングシステム９２１（ＯＳ）、ウィンドウシステム９２２、プログラム群９２３、ファイル群９２４が記憶されている。プログラム群９２３のプログラムは、ＣＰＵ９１１、オペレーティングシステム９２１、ウィンドウシステム９２２により実行される。
【００４８】
情報表示端末１００のプログラム群９２３には、上記の説明において「画像情報取得部１１０」、「位置情報取得部１２０」、「画像・位置情報合成部１３０」、「画像情報送信部１４０」、「関連情報受信部１５０」、「関連情報表示処理部１６０」、「情報表示部１７０」、「方角情報取得部１９０」等として説明した機能を実行するプログラムやその他のプログラムが記憶されている。また、情報提供サーバ２００のプログラム群９２３には、上記の説明において「画像情報受信部２１０」、「目的物切出部２２０」、「目的物特定部２３０」、「特徴物画像情報記憶部２４０」、「関連情報取得部２５０」、「関連情報記憶部２６０」、「関連情報送信部２７０」等として説明した機能を実行するプログラムやその他のプログラムが記憶されている。プログラムは、ＣＰＵ９１１により読み出され実行される。
情報表示端末１００のファイル群９２４には、上記の説明において「画像情報」、「位置情報」、「方角情報」、「画像位置合成情報」、「地図情報」、「関連情報（観光ガイド情報）」等として説明した情報やデータや信号値や変数値やパラメータが、「ファイル」や「データベース」の各項目として記憶される。「ファイル」や「データベース」は、ディスクやメモリなどの記録媒体に記憶される。また、情報提供サーバ２００のファイル群９２４には、上記の説明において「画像位置合成情報」、「特徴物画像情報」、「関連情報（観光ガイド情報）」等として説明した情報やデータや信号値や変数値やパラメータが、「ファイル」や「データベース」の各項目として記憶される。「ファイル」や「データベース」は、ディスクやメモリなどの記録媒体に記憶される。ディスクやメモリなどの記憶媒体に記憶された情報やデータや信号値や変数値やパラメータは、読み書き回路を介してＣＰＵ９１１によりメインメモリやキャッシュメモリに読み出され、抽出・検索・参照・比較・演算・計算・処理・出力・印刷・表示などのＣＰＵ９１１の動作に用いられる。抽出・検索・参照・比較・演算・計算・処理・出力・印刷・表示のＣＰＵ９１１の動作の間、情報やデータや信号値や変数値やパラメータは、メインメモリやキャッシュメモリやバッファメモリに一時的に記憶される。
また、上記の説明におけるフローチャートの矢印の部分は主としてデータや信号の入出力を示し、データや信号値は、ＲＡＭ９１４のメモリ、その他光ディスク等の記録媒体に記録される。また、データや信号は、バス９１２や信号線やケーブルその他の伝送媒体によりオンライン伝送される。
【００４９】
また、上記の説明において「〜部」として説明するものは、「〜回路」、「〜装置」、「〜機器」、「〜手段」、「〜機能」であってもよく、また、「〜ステップ」、「〜手順」、「〜処理」であってもよい。また、「〜装置」として説明するものは、「〜回路」、「〜装置」、「〜機器」、「〜手段」、「〜機能」であってもよく、また、「〜ステップ」、「〜手順」、「〜処理」であってもよい。さらに、「〜処理」として説明するものは「〜ステップ」であっても構わない。すなわち、「〜部」として説明するものは、ＲＯＭ９１３に記憶されたファームウェアで実現されていても構わない。或いは、ソフトウェアのみ、或いは、素子・デバイス・基板・配線などのハードウェアのみ、或いは、ソフトウェアとハードウェアとの組み合わせ、さらには、ファームウェアとの組み合わせで実施されても構わない。ファームウェアとソフトウェアは、プログラムとして、ＲＯＭ９１３等の記録媒体に記憶される。プログラムはＣＰＵ９１１により読み出され、ＣＰＵ９１１により実行される。すなわち、プログラムは、上記で述べた「〜部」としてコンピュータ等を機能させるものである。あるいは、上記で述べた「〜部」の手順や方法をコンピュータ等に実行させるものである。
【図面の簡単な説明】
【００５０】
【図１】実施の形態１に係る情報提供システム１の機能を示す機能ブロック図。
【図２】画像情報から、画像情報に含まれる目的物の画像情報を切り出す処理及び目的物の輪郭パターンを特定する処理を示す概念図。
【図３】端末位置情報に基づく、特徴物の絞込み処理を示す概念図。
【図４】目的物の輪郭パターンと、特徴物の輪郭パターンとの照合処理を示す概念図。
【図５】実施の形態１に係る情報表示端末１００の処理の流れを示すフローチャート。
【図６】実施の形態１に係る情報提供サーバ２００の処理の流れを示すフローチャート。
【図７】実施の形態２に係る情報提供システム１の機能を示す機能ブロック図。
【図８】端末位置情報と方角情報とに基づく、特徴物の絞込み処理を示す概念図。
【図９】実施の形態２に係る情報表示端末１００の処理の流れを示すフローチャート。
【図１０】実施の形態２に係る情報提供サーバ２００の処理の流れを示すフローチャート。
【図１１】画像情報の一例を示す図（複数の目的物を含む画像情報の例）。
【図１２】画像情報の一例を示す図（太陽を含む画像情報の例）。
【図１３】情報表示端末１００と情報提供サーバ２００とのハードウェア構成の一例を示す図。
【符号の説明】
【００５１】
１ 情報提供システム、１００ 情報表示端末、１１０ 画像情報取得部、１２０ 位置情報取得部、１３０ 画像・位置情報合成部、１４０ 画像情報送信部、１５０ 関連情報受信部、１６０ 関連情報表示処理部、１７０ 情報表示部、１８０ カメラ、１９０ 方角情報取得部、２００ 情報提供サーバ、２１０ 画像情報受信部、２２０ 目的物切出部、２３０ 目的物特定部、２３１ 輪郭パターン判断部、２３２ 輪郭パターン照合部、２４０ 特徴物画像情報記憶部、２５０ 関連情報取得部、２６０ 関連情報記憶部、２７０ 関連情報送信部、３００ ネットワーク。
【特許請求の範囲】
【請求項１】
特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部と
を備えることを特徴とする情報提供サーバ。
【請求項２】
上記特徴物画像情報記憶部は、上記特徴物画像情報とともに、上記特徴物の位置を示す特徴物位置情報を記憶し、
上記画像情報受信部は、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項１に記載の情報提供サーバ。
【請求項３】
上記画像情報受信部は、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項２に記載の情報提供サーバ。
【請求項４】
上記目的物特定部は、上記画像情報受信部が受信した画像情報から複数の目的物の画像情報を上記目的物切出部が切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする請求項１から３までのいずれかに記載の情報提供サーバ。
【請求項５】
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
位置を示す位置情報を位置取得装置により取得する位置情報取得部と、
上記位置情報取得部が取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得部と、
上記画像情報取得部が取得した画像情報と、上記位置情報取得部が取得した位置情報と、上記方角情報取得部が取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信部と、
上記画像情報送信部が送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する関連情報表示部と
を備えることを特徴とする情報表示端末。
【請求項６】
情報表示端末と情報提供サーバとを備える情報提供システムであり、
上記情報表示端末は、
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
上記画像情報取得部が取得した画像情報を情報提供サーバへ通信装置を介して送信する画像情報送信部とを備え、
上記情報提供サーバは、
特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
上記画像情報送信部が送信した画像情報を通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から、上記画像情報の目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶する特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部とを備え、
上記情報表示端末は、さらに、
上記関連情報取得部が送信した関連情報を通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する情報表示部と
を備えることを特徴とする情報提供システム。
【請求項７】
目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信処理と、
上記画像情報受信処理で受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出処理と、
上記目的物切出処理で切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定処理と、
記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定処理で特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得処理と、
上記関連情報取得処理で取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信処理と
をコンピュータに実行させることを特徴とする情報提供プログラム。
【請求項８】
上記画像情報受信処理では、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項７に記載の情報提供プログラム。
【請求項９】
上記画像情報受信処理では、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項８に記載の情報提供プログラム。
【請求項１０】
上記目的物特定処理では、上記画像情報受信処理で受信した画像情報から複数の目的物の画像情報を上記目的物切出処理で切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする請求項７から９までのいずれかに記載の情報提供プログラム。
【請求項１１】
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得処理と、
位置を示す位置情報を位置取得装置により取得する位置情報取得処理と、
上記位置情報取得処理で取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得処理と、
上記画像情報取得処理で取得した画像情報と、上記位置情報取得処理で取得した位置情報と、上記方角情報取得処理で取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信処理と、
上記画像情報送信処理で送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信処理と、
上記関連情報受信処理で受信した関連情報を表示装置に表示する関連情報表示処理と
をコンピュータに実行させることを特徴とする情報表示プログラム。
【請求項１２】
通信装置が、目的物の画像情報を含む画像情報を端末から受信する画像情報受信ステップと、
処理装置が、上記画像情報受信ステップで受信した画像情報から目的物の画像情報を切り出す目的物切出ステップと、
処理装置が、上記目的物切出ステップで切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する目的物特定ステップと、
処理装置が、記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定ステップで特定した上記目的物に対応する特徴物に関連する関連情報を取得する関連情報取得ステップと、
通信装置が、上記関連情報取得ステップで取得した関連情報を上記端末へ送信する関連情報送信ステップと
を備えることを特徴とする情報提供方法。
【請求項１３】
画像取得装置が、目的物の画像情報を含む画像情報を取得する画像情報取得ステップと、
位置取得装置が、位置を示す位置情報を取得する位置情報取得ステップと、
方角情報取得装置が、上記位置情報取得ステップで取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得ステップと、
通信装置が、上記画像情報取得ステップで取得した画像情報と、上記位置情報取得ステップで取得した位置情報と、上記方角情報取得ステップで取得した方角情報とを情報提供サーバへ送信する画像情報送信ステップと、
通信装置が、上記画像情報送信ステップで送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから受信する関連情報受信ステップと、
表示装置が、上記関連情報受信ステップで受信した関連情報を表示する関連情報表示ステップと
を備えることを特徴とする情報表示方法。
【請求項１】
特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部と
を備えることを特徴とする情報提供サーバ。
【請求項２】
上記特徴物画像情報記憶部は、上記特徴物画像情報とともに、上記特徴物の位置を示す特徴物位置情報を記憶し、
上記画像情報受信部は、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項１に記載の情報提供サーバ。
【請求項３】
上記画像情報受信部は、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定部は、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に上記特徴物位置情報が示す位置がある特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項２に記載の情報提供サーバ。
【請求項４】
上記目的物特定部は、上記画像情報受信部が受信した画像情報から複数の目的物の画像情報を上記目的物切出部が切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする請求項１から３までのいずれかに記載の情報提供サーバ。
【請求項５】
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
位置を示す位置情報を位置取得装置により取得する位置情報取得部と、
上記位置情報取得部が取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得部と、
上記画像情報取得部が取得した画像情報と、上記位置情報取得部が取得した位置情報と、上記方角情報取得部が取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信部と、
上記画像情報送信部が送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する関連情報表示部と
を備えることを特徴とする情報表示端末。
【請求項６】
情報表示端末と情報提供サーバとを備える情報提供システムであり、
上記情報表示端末は、
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得部と、
上記画像情報取得部が取得した画像情報を情報提供サーバへ通信装置を介して送信する画像情報送信部とを備え、
上記情報提供サーバは、
特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報を記憶装置に記憶する特徴物画像情報記憶部と、
上記特徴物に関連する関連情報を記憶装置に記憶する関連情報記憶部と、
上記画像情報送信部が送信した画像情報を通信装置を介して受信する画像情報受信部と、
上記画像情報受信部が受信した画像情報から、上記画像情報の目的物の画像情報を処理装置により切り出す目的物切出部と、
上記目的物切出部が切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、上記特徴物画像情報記憶部が記憶する特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定部と、
上記関連情報記憶部が記憶した関連情報であって、上記目的物特定部が特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得部と、
上記関連情報取得部が取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信部とを備え、
上記情報表示端末は、さらに、
上記関連情報取得部が送信した関連情報を通信装置を介して受信する関連情報受信部と、
上記関連情報受信部が受信した関連情報を表示装置に表示する情報表示部と
を備えることを特徴とする情報提供システム。
【請求項７】
目的物の画像情報を含む画像情報を端末から通信装置を介して受信する画像情報受信処理と、
上記画像情報受信処理で受信した画像情報から目的物の画像情報を処理装置により切り出す目的物切出処理と、
上記目的物切出処理で切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を処理装置により特定する目的物特定処理と、
記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定処理で特定した上記目的物に対応する特徴物に関連する関連情報を処理装置により取得する関連情報取得処理と、
上記関連情報取得処理で取得した関連情報を上記端末へ通信装置を介して送信する関連情報送信処理と
をコンピュータに実行させることを特徴とする情報提供プログラム。
【請求項８】
上記画像情報受信処理では、画像情報とともに、上記端末の位置を示す端末位置情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項７に記載の情報提供プログラム。
【請求項９】
上記画像情報受信処理では、画像情報と端末位置情報とともに、上記端末位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を受信し、
上記目的物特定処理では、上記端末位置情報を含む所定の範囲の内、上記方角情報が示す方角に位置する特徴物の特徴物画像情報であって、上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する
ことを特徴とする請求項８に記載の情報提供プログラム。
【請求項１０】
上記目的物特定処理では、上記画像情報受信処理で受信した画像情報から複数の目的物の画像情報を上記目的物切出処理で切り出した場合、上記複数の目的物の少なくとも１つの目的物に対応する特徴物を特定するとともに、特定した目的物に対応する特徴物の位置に基づき、特定していない目的物に対応する特徴物を特定する
ことを特徴とする請求項７から９までのいずれかに記載の情報提供プログラム。
【請求項１１】
目的物の画像情報を含む画像情報を画像取得装置により取得する画像情報取得処理と、
位置を示す位置情報を位置取得装置により取得する位置情報取得処理と、
上記位置情報取得処理で取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得処理と、
上記画像情報取得処理で取得した画像情報と、上記位置情報取得処理で取得した位置情報と、上記方角情報取得処理で取得した方角情報とを情報提供サーバへ通信装置を介して送信する画像情報送信処理と、
上記画像情報送信処理で送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから通信装置を介して受信する関連情報受信処理と、
上記関連情報受信処理で受信した関連情報を表示装置に表示する関連情報表示処理と
をコンピュータに実行させることを特徴とする情報表示プログラム。
【請求項１２】
通信装置が、目的物の画像情報を含む画像情報を端末から受信する画像情報受信ステップと、
処理装置が、上記画像情報受信ステップで受信した画像情報から目的物の画像情報を切り出す目的物切出ステップと、
処理装置が、上記目的物切出ステップで切り出した目的物の画像情報を幾何学図形のパターンで表した画像情報に変換するとともに、記憶装置に記憶した特徴物の画像情報を幾何学図形のパターンとして表した特徴物画像情報から、幾何学図形のパターンで表した上記目的物の画像情報に対応する特徴物画像情報を検索して、上記目的物に対応する特徴物を特定する目的物特定ステップと、
処理装置が、記憶装置に記憶した上記特徴物に関連する関連情報であって、上記目的物特定ステップで特定した上記目的物に対応する特徴物に関連する関連情報を取得する関連情報取得ステップと、
通信装置が、上記関連情報取得ステップで取得した関連情報を上記端末へ送信する関連情報送信ステップと
を備えることを特徴とする情報提供方法。
【請求項１３】
画像取得装置が、目的物の画像情報を含む画像情報を取得する画像情報取得ステップと、
位置取得装置が、位置を示す位置情報を取得する位置情報取得ステップと、
方角情報取得装置が、上記位置情報取得ステップで取得した位置情報が示す位置に対する上記目的物が位置する方角を示す方角情報を取得する方角情報取得ステップと、
通信装置が、上記画像情報取得ステップで取得した画像情報と、上記位置情報取得ステップで取得した位置情報と、上記方角情報取得ステップで取得した方角情報とを情報提供サーバへ送信する画像情報送信ステップと、
通信装置が、上記画像情報送信ステップで送信した画像情報と位置情報と方角情報とに基づき特定された情報であって、上記画像情報の目的物に関連した情報である関連情報を上記情報提供サーバから受信する関連情報受信ステップと、
表示装置が、上記関連情報受信ステップで受信した関連情報を表示する関連情報表示ステップと
を備えることを特徴とする情報表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００９−１８１１８６（Ｐ２００９−１８１１８６Ａ）
【公開日】平成２１年８月１３日（２００９．８．１３）
【国際特許分類】
【出願番号】特願２００８−１７６８４（Ｐ２００８−１７６８４）
【出願日】平成２０年１月２９日（２００８．１．２９）
【出願人】（５９１１０２０９５）三菱スペース・ソフトウエア株式会社 (148)
【Ｆターム（参考）】
【公開日】平成２１年８月１３日（２００９．８．１３）
【国際特許分類】
【出願日】平成２０年１月２９日（２００８．１．２９）
【出願人】（５９１１０２０９５）三菱スペース・ソフトウエア株式会社 (148)
【Ｆターム（参考）】
[ Back to top ]