画像表示システム、携帯情報端末及び画像表示プログラム
【課題】
導入コストが低く且つ位置精度の高い、屋内用のエアタグサービスを実現すること。
【解決手段】
所定の範囲を示す画像の情報及び前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している設備マスターデータ１３と、携帯端末１に設けられたカメラ３と、カメラ３が撮像している方向を検知する方向センサ５と、カメラ３によって撮像されている画像を撮像画像としてディスプレイ４に表示させると共に、ユーザによって入力された現在位置情報を取得し、前記検知された方向と合わせて撮像画像の範囲を認識し、表示情報のうち認識された範囲に含まれる位置に対応する情報を撮像画像の対応する位置に重畳して表示することを特徴とする。
導入コストが低く且つ位置精度の高い、屋内用のエアタグサービスを実現すること。
【解決手段】
所定の範囲を示す画像の情報及び前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している設備マスターデータ１３と、携帯端末１に設けられたカメラ３と、カメラ３が撮像している方向を検知する方向センサ５と、カメラ３によって撮像されている画像を撮像画像としてディスプレイ４に表示させると共に、ユーザによって入力された現在位置情報を取得し、前記検知された方向と合わせて撮像画像の範囲を認識し、表示情報のうち認識された範囲に含まれる位置に対応する情報を撮像画像の対応する位置に重畳して表示することを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示システム、携帯情報端末及び画像表示プログラムに関し、特に、位置情報に関連付けられた情報を撮像された画像に重畳して表示させるシステムに関する。
【背景技術】
【０００２】
近年、セカイカメラ（登録商標）というアプリケーションサービスが携帯型通信端末において提供されている。このアプリケーションサービスにおいては、携帯型通信端末に搭載された測位システムを用いて現在位置を特定する。更に、携帯型通信端末に搭載されたカメラの向きを、同じく搭載された電子コンパスの機能により認識することにより、現在カメラに映し出されている画像の範囲を特定する。
【０００３】
このアプリケーションサービスのユーザは、カメラに映し出されている範囲内の位置を指定して、その位置に“エアタグ”と呼ばれる文字情報を貼り付けることができる。このエアタグの情報は、ネットワークを介してサーバ上に記憶される。サーバ上に記憶されるエアタグの情報は、ユーザによって貼り付けられた文字情報及びその文字情報が貼り付けられた位置の情報を含む。これにより、他のユーザが、上記アプリケーションサービスを利用して同じ位置をカメラに写した場合、サーバ上に既に記憶されているエアタグの文字情報が表示される。
【０００４】
測位の技術としては、例えば、シート状部材又は網目状部材に規則的に一体に装着されていることを特徴とする位置情報特定部材により、簡単に設置できて屋外でも室内でも電波障害を受けることなく位置情報を正確に特定できる位置情報特定部材が提案されている（例えば、特許文献１参照）。
【０００５】
また、撮像された画像に撮像位置及び撮像方向を加味して情報を表示させる技術としては、カメラの緯度及び経度と姿勢からカメラ画像に情報の表示を行う技術が提案されている（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−１５５３８３号公報
【特許文献２】特表２０００−５１２７８１号公報特許第４２９４０９３号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述したようなアプリケーションサービス（以降、エアタグサービスとする）においては、上述したように端末の現在位置を認識する必要があり、現状では測位システムとしてＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）が用いられている。例えば、屋外においてエアタグを貼り付ける対象は建物等の比較的大きなものであるため、数メートル程度の誤差は許容される。従って、屋外において、建物等の位置を指定してエアタグを表示させる場合には、ＧＰＳによる測位において位置精度は問題とならない。
【０００８】
しかしながら、屋内においてエアタグを貼り付ける対象は、建物内の設備や備品等、比較的小さなものであるため、数メートル程度の誤差があると、エアタグが表示される位置が意図した位置、即ち、設備や備品等の位置と大きく外れてしまうこととなる。換言すると、屋内における部屋のサイズは一般的に一辺が数メートルから数十メートルであり、屋内の位置情報を扱うシステムは屋外の位置情報を扱うシステムよりも高い測位精度（数十センチメートル）の実現が課題となる。
【０００９】
屋外の測位に利用されるＧＰＳの測位精度は誤差が数メートルから数十メートルであり、屋内においてはさらに誤差が大きくなるため、屋内の位置情報を扱うシステムにおいて測位にＧＰＳを利用することは現実的でない。
【００１０】
屋内における測位システムとしては、ＧＰＳ以外に、ＩＭＥＳ（Ｉｎｄｏｏｒ Ｍｅｓｓａｇｉｎｇ Ｓｙｓｔｅｍ）、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）等があり得る。しかしながら、いずれも測位のための機器設置が必要であり、機器を設置する部屋の数や大きさに比例して設置コストおよび運用コストが大きくなる。また、必ずしも上述したような位置精度の実現が容易なわけではない。
【００１１】
本発明の目的は、導入コストが低く且つ位置精度の高いエアタグサービスを実現することにある。
【課題を解決するための手段】
【００１２】
上記課題を解決するため、本発明の一態様は、撮像された画像に他の情報を重畳して表示させる画像表示システムであって、所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部と、前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部と、携帯型の情報端末に設けられた撮像部と、ユーザによって入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、前記撮像部が撮像している方向を検知する方向検知部と、前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記記憶されている表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする。
【００１３】
また、本発明の他の態様は、撮像された画像に他の情報を重畳して表示させる携帯情報端末であって、画像を撮像する撮像部と、ユーザによる操作に応じて入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得する表示情報取得部と、前記撮像部が撮像している方向を検知する方向検知部と、前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする。
【００１４】
また、本発明の更に他の態様は、撮像された画像に他の情報を重畳して表示させる携帯情報端末の画像表示プログラムであって、ユーザによる操作に応じて入力された前記情報端末の現在位置情報を取得するステップと、前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得するステップと、前記携帯情報端末に設けられた撮像部が撮像している方向を示す情報であって、前記携帯情報端末に設けられた方向検知部によって検知された方向を示す情報を取得するステップと、前記撮像部によって撮像されている画像を撮像画像として表示部に表示させるステップと、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識するステップと、前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示するステップとを前記携帯情報端末に実行させることを特徴とする。
【発明の効果】
【００１５】
本発明を用いることにより、導入コストが低く且つ位置精度の高いエアタグサービスを実現することができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の実施形態に係る画像処理システムの運用形態を示すブロック図である。
【図２】本発明の実施形態に係る設備マスターデータに含まれる情報の例を示す図である。
【図３】本発明の実施形態に係る画像処理システムにおける携帯端末の動作を示すフローチャートである。
【図４】本発明の実施形態に係る携帯端末操作者が部屋の出入り口付近に位置する例を示す図である。
【図５】本発明の実施形態に係る携帯端末操作者が出入り口付近に位置するときの携帯端末位置入力手段の表示例を示す図である。
【図６】本発明の実施形態に係る携帯端末操作者が出入り口付近に位置するときの携帯端末の表示例を示す図である。
【図７】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動した例を示す図である。
【図８】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動したときの携帯端末の表示例を示す図である。
【図９】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動したときの携帯端末位置入力手段の表示例を示す図である。
【図１０】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動したときに携帯端末位置入力手段で正しい位置を入力したときの携帯端末の表示例を示す図である。
【図１１】本発明の実施形態に係る情報処理端末のハードウェア構成を示す図である。
【発明を実施するための形態】
【００１７】
以下、図面を参照して、本発明の実施形態を詳細に説明する。本実施形態においては、建物内において、予め記憶された設備名のデータを、設定された位置に表示するエアタグサービスを例として説明する。
【００１８】
図１は、本発明の実施形態に係るエアタグサービスの運用形態を示す図である。図１に示すように、本実施形態に係るエアタグサービスは、携帯端末１と設備管理サーバ２とが無線通信を行うことにより実現される。携帯端末１及び設備管理サーバ２は、撮像された情報及びエアタグの情報を表示する画像表示システムとして動作する。本実施形態に係るエアタグサービスにおいて、設備管理サーバ２は、１つの建物におけるエアタグサービスを提供する。
【００１９】
図１に示すように、設備管理サーバ２は屋内に設置されている設備の設備マスターデータ１３を保持している。設備マスターデータ管理手段１２は設備マスターデータ１３の登録・削除・更新などの管理を行う。設備管理サーバ通信手段１１は携帯端末１に携帯端末１が位置する部屋の設備マスターデータを送信する。設備マスターデータには、部屋の形状データ、設備の位置、名称などが含まれる。
【００２０】
図２を参照して、設備マスターデータ１３に記憶されている情報について説明する。図２に示すように、本実施形態に係る設備マスターデータ１３は、建物データ、部屋データ及び設備データを含む。建物データは、そのエアタグサービスが提供されている建物についての情報であり、図２に示すように、フロアＩＤ、フロアの画像情報及び建物位置情報を含む。
【００２１】
フロアＩＤは、その建物を構成している各フロアを識別する識別情報である。フロアの画像情報は、図２に示すように、その建物を構成している各フロアのフロアマップの画像である。建物位置情報は、その建物が建てられている位置の情報であり、本実施形態においては、ＧＰＳによる位置信号に対応した情報である。
【００２２】
部屋データは、上記建物を構成している各フロアに存在する部屋の情報であり、図２に示すように、部屋ＩＤ、部屋の画像情報及び部屋位置情報を含む。部屋ＩＤは、各部屋を識別する識別情報である。部屋の画像情報は、図２に示すように、各部屋の平面の画像である。部屋位置情報は、その建物の各フロアにおいて部屋が配置されている位置の情報であり、本実施形態においては、建物データに含まれるフロアの画像情報中の座標に対応した情報である。
【００２３】
このように、本実施形態においては、設備マスターデータ１３が、所定の範囲として部屋を示す画像の情報を記憶している範囲画像情報記憶部として機能する。また、設備マスターデータ１３は、建物内のフロア画像の情報を記憶しているフロア画像情報記憶部としても機能する。
【００２４】
設備データは、上記各部屋内に配置されている設備の情報であり、図２に示すように、設備ＩＤ、部屋ＩＤ、設備名及び設備位置の情報を含む。設備ＩＤは、夫々の設備を識別するための識別情報である。部屋ＩＤは、夫々の設備が設置された部屋を識別するための識別情報であり、部屋データに含まれる部屋ＩＤに対応している。
【００２５】
設備名は、夫々の設備の名前を示す文字情報であり、本実施形態においては、この設備名の文字情報がエアタグとして表示される。設備位置は、夫々の設備が設置されている位置の情報であり、本実施形態においては、部屋データに含まれる部屋の画像情報中の座標に対応した情報である。この設備位置によって特定される位置に、エアタグが表示される。
【００２６】
このように、設備マスターデータ１３は、上述した部屋、即ち所定の範囲における位置と、その位置に対応して表示させるべき情報である設備名の情報とが関連付けられた表示情報を記憶している表示情報記憶部として機能する。
【００２７】
携帯端末１においては、撮像部であるカメラ３が光学情報を電気信号に変換して画像情報を生成する。方向センサ５は、携帯端末１のカメラ３が向いている方向を検知し、検知信号を設備データ表示手段６に出力する。尚、方向センサ５は、東西南北の方位の他、加速度センサ等により、上下の方向も検知可能である。携帯端末位置入力手段７は、ユーザが携帯端末１に対して情報を入力するユーザインタフェースであり、本実施形態において、ユーザは、自分が立っている位置の情報を、携帯端末位置入力手段７を介して入力する。
【００２８】
携帯端末通信手段８は、設備管理サーバ通信手段１１が送信した設備マスターデータを受信する。設備データ管理手段９は、携帯端末通信手段８が受信した設備マスターデータを設備データ１０として保存する。また、設備データ管理手段９は、設備データとして保存した情報を設備データ表示手段６に入力する。
【００２９】
設備データ表示手段６は、携帯端末位置入力手段７を介して入力された情報に基づいて、携帯端末１の現在位置を認識する。更に、設備データ表示手段６は、方向センサ５による検知信号に基づき、カメラ３が向いている方向を認識し、上記認識した現在位置との関係から、現在カメラ３によって撮像されている範囲（以降、撮像範囲とする）を判断する。即ち、方向センサ５が方向検知部として機能する。
【００３０】
そして、設備データ表示手段６は、上記判断した撮像範囲に表示させるべきエアタグ、即ち設備名の文字情報を設備データ管理手段９から取得し、エアタグを表示させるべき位置、即ち設備位置の情報に基づいてカメラ３が生成した画像情報にエアタグを重畳してディスプレイ４に表示させる。ディスプレイ４は、画像を表示する表示部として機能する他、タッチパネルとしてユーザが情報を入力する入力部としても機能する。
【００３１】
次に、本実施形態に係るエアタグサービスの動作について、図３を参照して説明する。図３に示すように、まず、携帯端末通信手段８が、設備データ管理手段９の制御に基づき、設備管理サーバ２から設備マスターデータを受信する。設備データ管理手段０は、受信した設備マスターデータを設備データ１０として保存する（Ｓ３０１）。即ち、設備データ管理手段９が、表示情報取得部として機能する。次に、設備データ表示手段６は、設備データ管理手段９から、設備データ１０に含まれる情報のうちフロアデータを取得し、フロアの画像をディスプレイ４に表示させる（Ｓ３０２）。
【００３２】
Ｓ３０２において表示されるのは、図２に示すフロアの画像である。この画面において、ユーザはフロアに含まれる部屋のいずれかを選択する。ユーザによる部屋の選択は、表示された画面上の部屋をユーザがタッチすることにより、画面上の座標情報が入力され、画面上の座標情報とフロア画像上の座標情報との変換処理の後、部屋データにおける座標情報との対応関係により認識される。
【００３３】
ユーザによって部屋が選択されると（Ｓ３０３）、設備データ表示手段６は、設備データ管理手段９から選択された部屋の部屋データ及びその部屋に含まれる設備の設備データを取得する（Ｓ３０４）。そして、設備データ表示手段６は、選択された部屋の画像をディスプレイ４に表示させる（Ｓ３０５）。Ｓ３０５において表示される部屋の画像は、図２に示す部屋の平面図である。
【００３４】
Ｓ３０５において部屋の画像が表示されると、ユーザは、携帯端末位置入力手段７を介して、現在の位置を入力する（Ｓ３０６）。Ｓ３０６において、例えば、ユーザが図４に示すような位置に立っている場合、図５に星のマークで示す位置がユーザの現在位置として入力される。この入力は、図５のように表示された部屋の画面において、指定すべき位置、即ち星マークの位置をユーザがタッチすることにより、画面上の座標情報が入力され、画面上の座標情報と画像情報の座標情報との変換処理により、画像上の座標として認識される。
【００３５】
即ち、設備データ表示手段６が、表示された部屋の画像に対する操作に応じて携帯端末１の現在位置情報を取得する現在位置情報取得手段として機能する。このように、本実施形態においては、タッチパネルとして構成されたディスプレイ４を用い、部屋の平面図をディスプレイ４に表示させた上で、画面上のタッチにより現在位置情報携帯端末１が現在位置情報を取得するため、直感的な操作が可能であり、容易且つ高精度な現在位置情報の取得が可能となる。
【００３６】
Ｓ３０６の処理により位置情報が入力されると、設備データ表示手段６は、カメラ３によって生成された画像情報をディスプレイ４に表示させると共に、方向センサ５によって検知された方向の情報、携帯端末位置入力手段７を介して入力された位置情報に基づき、ディスプレイ４に表示されている画像の位置及び範囲を認識する。
【００３７】
そして、設備データ表示手段６は、Ｓ３０４において取得した設備データの設備位置に基づいて夫々の設備名をエアタグとして表示させるべき位置を判断し、上記カメラ３によって生成された画像情報に重畳してエアタグを表示させる（Ｓ３０７）。即ち、設備データ表示手段６が、表示処理部として機能する。図４の状態において、カメラ３が部屋の奥側を向いている場合のＳ３０７の画面表示の例を図６に示す。
【００３８】
図６に示すように、設備Ａ、設備Ｂとしった設備名の文字情報が、エアタグとしてカメラ３によって撮像された画像に重畳されて表示される。尚、Ｓ３０７の処理において、設備データ表示手段６は、方向センサ５による検知信号をリアルタイムでモニターしており、方向センサ５による検知信号が変化した場合、その変化に応じてエアタグの表示位置を変化させる。
【００３９】
Ｓ３０７の処理の後、アプリケーションの終了が指示されれば（Ｓ３０８／ＹＥＳ）、設備データ表示手段６は、ディスプレイ４への表示を停止して処理を終了する。他方、アプリケーションの終了が指示されない場合（Ｓ３０８／ＮＯ）、Ｓ３０５からの処理が繰り返される。ここで、ユーザが図４の状態から図７の状態に移動した場合の処理について説明する。
【００４０】
図４の状態から図７の状態にユーザが移動し、図６の状態と同様の方向を撮像し続けた場合、ディスプレイ４に表示される画像は、図８のように、実際の設備と設備名が表示されたエアタグとがずれた状態となる。これは、既に入力されている位置情報が、図４の状態から更新されていないからである。
【００４１】
これに対して、ユーザは、携帯端末１を操作してディスプレイ４に再度部屋データを表示させ（Ｓ３０５）、図９に示すように、移動後の自分の位置を指定して入力する（Ｓ３０６）。これにより、設備データ表示手段６が設備データの表示位置を更新して、更新後の表示位置により設備データをエアタグとして表示させる（Ｓ３０７）。
【００４２】
更新後のディスプレイ４における画面表示例を図１０に示す。図１０に示すように、正しい位置情報を入力することにより、設備データの表示位置が更新され、実際の設備と設備名が表示されたエアタグとがずれた状態が解消される。
【００４３】
尚、携帯端末１及び設備管理サーバ２は、情報処理端末によって実現される。図１１を参照して、本実施形態に係る携帯端末１及び設備管理サーバ２を実現する情報処理端末のハードウェア構成について説明する。図１１は、本実施形態に係る情報処理端末のハードウェア構成を示すブロック図である。図１１に示すように、本実施形態に係る情報処理端末は、一般的なサーバやＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等と同様の構成を有する。
【００４４】
即ち、本実施形態に係る情報処理端末は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０２、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０３、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）１０４及びＩ／Ｆ１０５がバス１０８を介して接続されている。また、Ｉ／Ｆ１０５にはＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）１０６及び操作部１０７が接続されている。
【００４５】
ＣＰＵ１０１は演算手段であり、情報処理端末全体の動作を制御する。ＲＡＭ１０２は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、ＣＰＵ１０１が情報を処理する際の作業領域として用いられる。ＲＯＭ１０３は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。
【００４６】
ＨＤＤ１０４は、情報の読み書きが可能な不揮発性の記憶媒体であり、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や各種の制御プログラム、アプリケーション・プログラム等が格納されている。Ｉ／Ｆ１０５は、バス１０８と各種のハードウェアやネットワーク等を接続し制御する。尚、カメラ３、方向センサ５等の他のデバイスのＩ／Ｆ１０５において携帯端末１と接続される。ＬＣＤ１０６は、ユーザが情報処理端末の状態を確認するための視覚的ユーザインタフェースである。操作部１０７は、キーボードやマウス等、ユーザが情報処理端末に情報を入力するためのユーザインタフェースである。
【００４７】
このようなハードウェア構成において、ＲＯＭ１０３やＨＤＤ１０４若しくは図示しない光学ディスク等の記録媒体に格納されたプログラムがＲＡＭ１０３に読み出され、ＣＰＵ１０１がそのプログラムに従って演算を行うことにより、ソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係る情報処理端末の機能が実現される。
【００４８】
上記ソフトウェァ制御部として実現される機能としては、携帯端末１における設備データ表示手段６、携帯端末通信手段８、設備データ管理手段９や、設備管理サーバ２における設備管理サーバ通信手段１１、設備マスターデータ管理手段１２が挙げられる。また、設備マスターデータ１３は、ＨＤＤ１０４等の不揮発性の記憶媒体によって実現される。更に、設備データ１０は、上記不揮発性の記憶媒体の他、ＲＡＭ１０２の一部に確保された記憶領域において実現される。
【００４９】
以上説明したように、本実施形態においては、屋内におけるエアタグサービスを提供する場合において、フロアや部屋における現在位置をユーザに入力させることによって携帯端末１の現在位置を取得することにより、導入コストが低く且つ位置精度の高い、屋内用のエアタグサービスを実現することができる。
【００５０】
尚、上記実施形態においては、図３に示すように、エアタグサービスの開始時に設備管理サーバ２から設備マスターデータ１３の全てを取得する場合を例として説明した。この他、Ｓ３０１においては、図２に示す情報のうち建物データのみを取得し、Ｓ３０４において、該当する設備データ及び部屋データを取得するようにしても良い。これにより、携帯端末１側にダウンロードするデータの量を削減することができ、携帯端末１側の記憶容量及び通信負荷を削減することができる。
【００５１】
また、上記実施形態においては、設備管理サーバ２は、１つの建物についての設備マスターデータを管理している場合を例として説明した。この他、１つの設備管理サーバ２が、複数の建物の設備マスターデータを管理していても良い。この場合、ユーザは、設備管理サーバ２が管理している複数の建物から１つを選択することになる。この際、携帯端末１にＧＰＳが搭載されている場合には、携帯端末１の現在位置と図２に示す建物データの建物位置情報との対比により、取得すべき建物データを判別することが可能である。
【００５２】
また、上記実施形態においては、予め構築された設備マスターデータ１３の存在を前提としたシステムを例として説明した。この他、ユーザが携帯端末１のディスプレイ４に表示された画像上で位置を指定して文字情報を入力することにより、設備マスターデータ１３への情報の追加及び情報の更新を可能とすることもできる。
【００５３】
また、上述したような設備名をエアタグとして表示するためのシステムに限らず、位置情報と関連付けられた任意の文字列を、リアルタイムの撮像画像に重畳して表示可能なシステムとして上記実施形態を適用することも可能である。更には、エアタグとして表示される情報は文字情報に限らず、位置情報と関連付けられている情報であれば、画像情報等他の情報であっても適用可能である。
【００５４】
また、上述したように設備に対応した情報をエアタグとして表示するシステムにおいても、設備名に限らず、設備の説明等他の情報をエアタグとして表示させても良い。
【符号の説明】
【００５５】
１ 携帯端末、
２ 設備管理サーバ、
３ カメラ、
４ ディスプレイ、
５ 方向センサ、
６ 設備データ表示手段、
７ 端末位置入力手段、
８ 携帯端末通信手段、
９ 設備データ管理手段、
１０ 設備データ、
１１ 設備管理サーバ通信手段、
１２ 設備マスターデータ管理手段、
１３ 設備マスターデータ
【技術分野】
【０００１】
本発明は、画像表示システム、携帯情報端末及び画像表示プログラムに関し、特に、位置情報に関連付けられた情報を撮像された画像に重畳して表示させるシステムに関する。
【背景技術】
【０００２】
近年、セカイカメラ（登録商標）というアプリケーションサービスが携帯型通信端末において提供されている。このアプリケーションサービスにおいては、携帯型通信端末に搭載された測位システムを用いて現在位置を特定する。更に、携帯型通信端末に搭載されたカメラの向きを、同じく搭載された電子コンパスの機能により認識することにより、現在カメラに映し出されている画像の範囲を特定する。
【０００３】
このアプリケーションサービスのユーザは、カメラに映し出されている範囲内の位置を指定して、その位置に“エアタグ”と呼ばれる文字情報を貼り付けることができる。このエアタグの情報は、ネットワークを介してサーバ上に記憶される。サーバ上に記憶されるエアタグの情報は、ユーザによって貼り付けられた文字情報及びその文字情報が貼り付けられた位置の情報を含む。これにより、他のユーザが、上記アプリケーションサービスを利用して同じ位置をカメラに写した場合、サーバ上に既に記憶されているエアタグの文字情報が表示される。
【０００４】
測位の技術としては、例えば、シート状部材又は網目状部材に規則的に一体に装着されていることを特徴とする位置情報特定部材により、簡単に設置できて屋外でも室内でも電波障害を受けることなく位置情報を正確に特定できる位置情報特定部材が提案されている（例えば、特許文献１参照）。
【０００５】
また、撮像された画像に撮像位置及び撮像方向を加味して情報を表示させる技術としては、カメラの緯度及び経度と姿勢からカメラ画像に情報の表示を行う技術が提案されている（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００７−１５５３８３号公報
【特許文献２】特表２０００−５１２７８１号公報特許第４２９４０９３号明細書
【発明の概要】
【発明が解決しようとする課題】
【０００７】
上述したようなアプリケーションサービス（以降、エアタグサービスとする）においては、上述したように端末の現在位置を認識する必要があり、現状では測位システムとしてＧＰＳ（Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ）が用いられている。例えば、屋外においてエアタグを貼り付ける対象は建物等の比較的大きなものであるため、数メートル程度の誤差は許容される。従って、屋外において、建物等の位置を指定してエアタグを表示させる場合には、ＧＰＳによる測位において位置精度は問題とならない。
【０００８】
しかしながら、屋内においてエアタグを貼り付ける対象は、建物内の設備や備品等、比較的小さなものであるため、数メートル程度の誤差があると、エアタグが表示される位置が意図した位置、即ち、設備や備品等の位置と大きく外れてしまうこととなる。換言すると、屋内における部屋のサイズは一般的に一辺が数メートルから数十メートルであり、屋内の位置情報を扱うシステムは屋外の位置情報を扱うシステムよりも高い測位精度（数十センチメートル）の実現が課題となる。
【０００９】
屋外の測位に利用されるＧＰＳの測位精度は誤差が数メートルから数十メートルであり、屋内においてはさらに誤差が大きくなるため、屋内の位置情報を扱うシステムにおいて測位にＧＰＳを利用することは現実的でない。
【００１０】
屋内における測位システムとしては、ＧＰＳ以外に、ＩＭＥＳ（Ｉｎｄｏｏｒ Ｍｅｓｓａｇｉｎｇ Ｓｙｓｔｅｍ）、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ ＩＤｅｎｔｉｆｉｃａｔｉｏｎ）等があり得る。しかしながら、いずれも測位のための機器設置が必要であり、機器を設置する部屋の数や大きさに比例して設置コストおよび運用コストが大きくなる。また、必ずしも上述したような位置精度の実現が容易なわけではない。
【００１１】
本発明の目的は、導入コストが低く且つ位置精度の高いエアタグサービスを実現することにある。
【課題を解決するための手段】
【００１２】
上記課題を解決するため、本発明の一態様は、撮像された画像に他の情報を重畳して表示させる画像表示システムであって、所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部と、前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部と、携帯型の情報端末に設けられた撮像部と、ユーザによって入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、前記撮像部が撮像している方向を検知する方向検知部と、前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記記憶されている表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする。
【００１３】
また、本発明の他の態様は、撮像された画像に他の情報を重畳して表示させる携帯情報端末であって、画像を撮像する撮像部と、ユーザによる操作に応じて入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得する表示情報取得部と、前記撮像部が撮像している方向を検知する方向検知部と、前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする。
【００１４】
また、本発明の更に他の態様は、撮像された画像に他の情報を重畳して表示させる携帯情報端末の画像表示プログラムであって、ユーザによる操作に応じて入力された前記情報端末の現在位置情報を取得するステップと、前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得するステップと、前記携帯情報端末に設けられた撮像部が撮像している方向を示す情報であって、前記携帯情報端末に設けられた方向検知部によって検知された方向を示す情報を取得するステップと、前記撮像部によって撮像されている画像を撮像画像として表示部に表示させるステップと、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識するステップと、前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示するステップとを前記携帯情報端末に実行させることを特徴とする。
【発明の効果】
【００１５】
本発明を用いることにより、導入コストが低く且つ位置精度の高いエアタグサービスを実現することができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の実施形態に係る画像処理システムの運用形態を示すブロック図である。
【図２】本発明の実施形態に係る設備マスターデータに含まれる情報の例を示す図である。
【図３】本発明の実施形態に係る画像処理システムにおける携帯端末の動作を示すフローチャートである。
【図４】本発明の実施形態に係る携帯端末操作者が部屋の出入り口付近に位置する例を示す図である。
【図５】本発明の実施形態に係る携帯端末操作者が出入り口付近に位置するときの携帯端末位置入力手段の表示例を示す図である。
【図６】本発明の実施形態に係る携帯端末操作者が出入り口付近に位置するときの携帯端末の表示例を示す図である。
【図７】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動した例を示す図である。
【図８】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動したときの携帯端末の表示例を示す図である。
【図９】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動したときの携帯端末位置入力手段の表示例を示す図である。
【図１０】本発明の実施形態に係る携帯端末操作者が部屋中央付近に移動したときに携帯端末位置入力手段で正しい位置を入力したときの携帯端末の表示例を示す図である。
【図１１】本発明の実施形態に係る情報処理端末のハードウェア構成を示す図である。
【発明を実施するための形態】
【００１７】
以下、図面を参照して、本発明の実施形態を詳細に説明する。本実施形態においては、建物内において、予め記憶された設備名のデータを、設定された位置に表示するエアタグサービスを例として説明する。
【００１８】
図１は、本発明の実施形態に係るエアタグサービスの運用形態を示す図である。図１に示すように、本実施形態に係るエアタグサービスは、携帯端末１と設備管理サーバ２とが無線通信を行うことにより実現される。携帯端末１及び設備管理サーバ２は、撮像された情報及びエアタグの情報を表示する画像表示システムとして動作する。本実施形態に係るエアタグサービスにおいて、設備管理サーバ２は、１つの建物におけるエアタグサービスを提供する。
【００１９】
図１に示すように、設備管理サーバ２は屋内に設置されている設備の設備マスターデータ１３を保持している。設備マスターデータ管理手段１２は設備マスターデータ１３の登録・削除・更新などの管理を行う。設備管理サーバ通信手段１１は携帯端末１に携帯端末１が位置する部屋の設備マスターデータを送信する。設備マスターデータには、部屋の形状データ、設備の位置、名称などが含まれる。
【００２０】
図２を参照して、設備マスターデータ１３に記憶されている情報について説明する。図２に示すように、本実施形態に係る設備マスターデータ１３は、建物データ、部屋データ及び設備データを含む。建物データは、そのエアタグサービスが提供されている建物についての情報であり、図２に示すように、フロアＩＤ、フロアの画像情報及び建物位置情報を含む。
【００２１】
フロアＩＤは、その建物を構成している各フロアを識別する識別情報である。フロアの画像情報は、図２に示すように、その建物を構成している各フロアのフロアマップの画像である。建物位置情報は、その建物が建てられている位置の情報であり、本実施形態においては、ＧＰＳによる位置信号に対応した情報である。
【００２２】
部屋データは、上記建物を構成している各フロアに存在する部屋の情報であり、図２に示すように、部屋ＩＤ、部屋の画像情報及び部屋位置情報を含む。部屋ＩＤは、各部屋を識別する識別情報である。部屋の画像情報は、図２に示すように、各部屋の平面の画像である。部屋位置情報は、その建物の各フロアにおいて部屋が配置されている位置の情報であり、本実施形態においては、建物データに含まれるフロアの画像情報中の座標に対応した情報である。
【００２３】
このように、本実施形態においては、設備マスターデータ１３が、所定の範囲として部屋を示す画像の情報を記憶している範囲画像情報記憶部として機能する。また、設備マスターデータ１３は、建物内のフロア画像の情報を記憶しているフロア画像情報記憶部としても機能する。
【００２４】
設備データは、上記各部屋内に配置されている設備の情報であり、図２に示すように、設備ＩＤ、部屋ＩＤ、設備名及び設備位置の情報を含む。設備ＩＤは、夫々の設備を識別するための識別情報である。部屋ＩＤは、夫々の設備が設置された部屋を識別するための識別情報であり、部屋データに含まれる部屋ＩＤに対応している。
【００２５】
設備名は、夫々の設備の名前を示す文字情報であり、本実施形態においては、この設備名の文字情報がエアタグとして表示される。設備位置は、夫々の設備が設置されている位置の情報であり、本実施形態においては、部屋データに含まれる部屋の画像情報中の座標に対応した情報である。この設備位置によって特定される位置に、エアタグが表示される。
【００２６】
このように、設備マスターデータ１３は、上述した部屋、即ち所定の範囲における位置と、その位置に対応して表示させるべき情報である設備名の情報とが関連付けられた表示情報を記憶している表示情報記憶部として機能する。
【００２７】
携帯端末１においては、撮像部であるカメラ３が光学情報を電気信号に変換して画像情報を生成する。方向センサ５は、携帯端末１のカメラ３が向いている方向を検知し、検知信号を設備データ表示手段６に出力する。尚、方向センサ５は、東西南北の方位の他、加速度センサ等により、上下の方向も検知可能である。携帯端末位置入力手段７は、ユーザが携帯端末１に対して情報を入力するユーザインタフェースであり、本実施形態において、ユーザは、自分が立っている位置の情報を、携帯端末位置入力手段７を介して入力する。
【００２８】
携帯端末通信手段８は、設備管理サーバ通信手段１１が送信した設備マスターデータを受信する。設備データ管理手段９は、携帯端末通信手段８が受信した設備マスターデータを設備データ１０として保存する。また、設備データ管理手段９は、設備データとして保存した情報を設備データ表示手段６に入力する。
【００２９】
設備データ表示手段６は、携帯端末位置入力手段７を介して入力された情報に基づいて、携帯端末１の現在位置を認識する。更に、設備データ表示手段６は、方向センサ５による検知信号に基づき、カメラ３が向いている方向を認識し、上記認識した現在位置との関係から、現在カメラ３によって撮像されている範囲（以降、撮像範囲とする）を判断する。即ち、方向センサ５が方向検知部として機能する。
【００３０】
そして、設備データ表示手段６は、上記判断した撮像範囲に表示させるべきエアタグ、即ち設備名の文字情報を設備データ管理手段９から取得し、エアタグを表示させるべき位置、即ち設備位置の情報に基づいてカメラ３が生成した画像情報にエアタグを重畳してディスプレイ４に表示させる。ディスプレイ４は、画像を表示する表示部として機能する他、タッチパネルとしてユーザが情報を入力する入力部としても機能する。
【００３１】
次に、本実施形態に係るエアタグサービスの動作について、図３を参照して説明する。図３に示すように、まず、携帯端末通信手段８が、設備データ管理手段９の制御に基づき、設備管理サーバ２から設備マスターデータを受信する。設備データ管理手段０は、受信した設備マスターデータを設備データ１０として保存する（Ｓ３０１）。即ち、設備データ管理手段９が、表示情報取得部として機能する。次に、設備データ表示手段６は、設備データ管理手段９から、設備データ１０に含まれる情報のうちフロアデータを取得し、フロアの画像をディスプレイ４に表示させる（Ｓ３０２）。
【００３２】
Ｓ３０２において表示されるのは、図２に示すフロアの画像である。この画面において、ユーザはフロアに含まれる部屋のいずれかを選択する。ユーザによる部屋の選択は、表示された画面上の部屋をユーザがタッチすることにより、画面上の座標情報が入力され、画面上の座標情報とフロア画像上の座標情報との変換処理の後、部屋データにおける座標情報との対応関係により認識される。
【００３３】
ユーザによって部屋が選択されると（Ｓ３０３）、設備データ表示手段６は、設備データ管理手段９から選択された部屋の部屋データ及びその部屋に含まれる設備の設備データを取得する（Ｓ３０４）。そして、設備データ表示手段６は、選択された部屋の画像をディスプレイ４に表示させる（Ｓ３０５）。Ｓ３０５において表示される部屋の画像は、図２に示す部屋の平面図である。
【００３４】
Ｓ３０５において部屋の画像が表示されると、ユーザは、携帯端末位置入力手段７を介して、現在の位置を入力する（Ｓ３０６）。Ｓ３０６において、例えば、ユーザが図４に示すような位置に立っている場合、図５に星のマークで示す位置がユーザの現在位置として入力される。この入力は、図５のように表示された部屋の画面において、指定すべき位置、即ち星マークの位置をユーザがタッチすることにより、画面上の座標情報が入力され、画面上の座標情報と画像情報の座標情報との変換処理により、画像上の座標として認識される。
【００３５】
即ち、設備データ表示手段６が、表示された部屋の画像に対する操作に応じて携帯端末１の現在位置情報を取得する現在位置情報取得手段として機能する。このように、本実施形態においては、タッチパネルとして構成されたディスプレイ４を用い、部屋の平面図をディスプレイ４に表示させた上で、画面上のタッチにより現在位置情報携帯端末１が現在位置情報を取得するため、直感的な操作が可能であり、容易且つ高精度な現在位置情報の取得が可能となる。
【００３６】
Ｓ３０６の処理により位置情報が入力されると、設備データ表示手段６は、カメラ３によって生成された画像情報をディスプレイ４に表示させると共に、方向センサ５によって検知された方向の情報、携帯端末位置入力手段７を介して入力された位置情報に基づき、ディスプレイ４に表示されている画像の位置及び範囲を認識する。
【００３７】
そして、設備データ表示手段６は、Ｓ３０４において取得した設備データの設備位置に基づいて夫々の設備名をエアタグとして表示させるべき位置を判断し、上記カメラ３によって生成された画像情報に重畳してエアタグを表示させる（Ｓ３０７）。即ち、設備データ表示手段６が、表示処理部として機能する。図４の状態において、カメラ３が部屋の奥側を向いている場合のＳ３０７の画面表示の例を図６に示す。
【００３８】
図６に示すように、設備Ａ、設備Ｂとしった設備名の文字情報が、エアタグとしてカメラ３によって撮像された画像に重畳されて表示される。尚、Ｓ３０７の処理において、設備データ表示手段６は、方向センサ５による検知信号をリアルタイムでモニターしており、方向センサ５による検知信号が変化した場合、その変化に応じてエアタグの表示位置を変化させる。
【００３９】
Ｓ３０７の処理の後、アプリケーションの終了が指示されれば（Ｓ３０８／ＹＥＳ）、設備データ表示手段６は、ディスプレイ４への表示を停止して処理を終了する。他方、アプリケーションの終了が指示されない場合（Ｓ３０８／ＮＯ）、Ｓ３０５からの処理が繰り返される。ここで、ユーザが図４の状態から図７の状態に移動した場合の処理について説明する。
【００４０】
図４の状態から図７の状態にユーザが移動し、図６の状態と同様の方向を撮像し続けた場合、ディスプレイ４に表示される画像は、図８のように、実際の設備と設備名が表示されたエアタグとがずれた状態となる。これは、既に入力されている位置情報が、図４の状態から更新されていないからである。
【００４１】
これに対して、ユーザは、携帯端末１を操作してディスプレイ４に再度部屋データを表示させ（Ｓ３０５）、図９に示すように、移動後の自分の位置を指定して入力する（Ｓ３０６）。これにより、設備データ表示手段６が設備データの表示位置を更新して、更新後の表示位置により設備データをエアタグとして表示させる（Ｓ３０７）。
【００４２】
更新後のディスプレイ４における画面表示例を図１０に示す。図１０に示すように、正しい位置情報を入力することにより、設備データの表示位置が更新され、実際の設備と設備名が表示されたエアタグとがずれた状態が解消される。
【００４３】
尚、携帯端末１及び設備管理サーバ２は、情報処理端末によって実現される。図１１を参照して、本実施形態に係る携帯端末１及び設備管理サーバ２を実現する情報処理端末のハードウェア構成について説明する。図１１は、本実施形態に係る情報処理端末のハードウェア構成を示すブロック図である。図１１に示すように、本実施形態に係る情報処理端末は、一般的なサーバやＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）等と同様の構成を有する。
【００４４】
即ち、本実施形態に係る情報処理端末は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０２、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０３、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）１０４及びＩ／Ｆ１０５がバス１０８を介して接続されている。また、Ｉ／Ｆ１０５にはＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）１０６及び操作部１０７が接続されている。
【００４５】
ＣＰＵ１０１は演算手段であり、情報処理端末全体の動作を制御する。ＲＡＭ１０２は、情報の高速な読み書きが可能な揮発性の記憶媒体であり、ＣＰＵ１０１が情報を処理する際の作業領域として用いられる。ＲＯＭ１０３は、読み出し専用の不揮発性記憶媒体であり、ファームウェア等のプログラムが格納されている。
【００４６】
ＨＤＤ１０４は、情報の読み書きが可能な不揮発性の記憶媒体であり、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）や各種の制御プログラム、アプリケーション・プログラム等が格納されている。Ｉ／Ｆ１０５は、バス１０８と各種のハードウェアやネットワーク等を接続し制御する。尚、カメラ３、方向センサ５等の他のデバイスのＩ／Ｆ１０５において携帯端末１と接続される。ＬＣＤ１０６は、ユーザが情報処理端末の状態を確認するための視覚的ユーザインタフェースである。操作部１０７は、キーボードやマウス等、ユーザが情報処理端末に情報を入力するためのユーザインタフェースである。
【００４７】
このようなハードウェア構成において、ＲＯＭ１０３やＨＤＤ１０４若しくは図示しない光学ディスク等の記録媒体に格納されたプログラムがＲＡＭ１０３に読み出され、ＣＰＵ１０１がそのプログラムに従って演算を行うことにより、ソフトウェア制御部が構成される。このようにして構成されたソフトウェア制御部と、ハードウェアとの組み合わせによって、本実施形態に係る情報処理端末の機能が実現される。
【００４８】
上記ソフトウェァ制御部として実現される機能としては、携帯端末１における設備データ表示手段６、携帯端末通信手段８、設備データ管理手段９や、設備管理サーバ２における設備管理サーバ通信手段１１、設備マスターデータ管理手段１２が挙げられる。また、設備マスターデータ１３は、ＨＤＤ１０４等の不揮発性の記憶媒体によって実現される。更に、設備データ１０は、上記不揮発性の記憶媒体の他、ＲＡＭ１０２の一部に確保された記憶領域において実現される。
【００４９】
以上説明したように、本実施形態においては、屋内におけるエアタグサービスを提供する場合において、フロアや部屋における現在位置をユーザに入力させることによって携帯端末１の現在位置を取得することにより、導入コストが低く且つ位置精度の高い、屋内用のエアタグサービスを実現することができる。
【００５０】
尚、上記実施形態においては、図３に示すように、エアタグサービスの開始時に設備管理サーバ２から設備マスターデータ１３の全てを取得する場合を例として説明した。この他、Ｓ３０１においては、図２に示す情報のうち建物データのみを取得し、Ｓ３０４において、該当する設備データ及び部屋データを取得するようにしても良い。これにより、携帯端末１側にダウンロードするデータの量を削減することができ、携帯端末１側の記憶容量及び通信負荷を削減することができる。
【００５１】
また、上記実施形態においては、設備管理サーバ２は、１つの建物についての設備マスターデータを管理している場合を例として説明した。この他、１つの設備管理サーバ２が、複数の建物の設備マスターデータを管理していても良い。この場合、ユーザは、設備管理サーバ２が管理している複数の建物から１つを選択することになる。この際、携帯端末１にＧＰＳが搭載されている場合には、携帯端末１の現在位置と図２に示す建物データの建物位置情報との対比により、取得すべき建物データを判別することが可能である。
【００５２】
また、上記実施形態においては、予め構築された設備マスターデータ１３の存在を前提としたシステムを例として説明した。この他、ユーザが携帯端末１のディスプレイ４に表示された画像上で位置を指定して文字情報を入力することにより、設備マスターデータ１３への情報の追加及び情報の更新を可能とすることもできる。
【００５３】
また、上述したような設備名をエアタグとして表示するためのシステムに限らず、位置情報と関連付けられた任意の文字列を、リアルタイムの撮像画像に重畳して表示可能なシステムとして上記実施形態を適用することも可能である。更には、エアタグとして表示される情報は文字情報に限らず、位置情報と関連付けられている情報であれば、画像情報等他の情報であっても適用可能である。
【００５４】
また、上述したように設備に対応した情報をエアタグとして表示するシステムにおいても、設備名に限らず、設備の説明等他の情報をエアタグとして表示させても良い。
【符号の説明】
【００５５】
１ 携帯端末、
２ 設備管理サーバ、
３ カメラ、
４ ディスプレイ、
５ 方向センサ、
６ 設備データ表示手段、
７ 端末位置入力手段、
８ 携帯端末通信手段、
９ 設備データ管理手段、
１０ 設備データ、
１１ 設備管理サーバ通信手段、
１２ 設備マスターデータ管理手段、
１３ 設備マスターデータ
【特許請求の範囲】
【請求項１】
撮像された画像に他の情報を重畳して表示させる画像表示システムであって、
所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部と、
前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部と、
携帯型の情報端末に設けられた撮像部と、
前記記憶されている画像の情報に基づいて前記所定の範囲を表示部に表示させ、前記表示された範囲に対する操作に応じて入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、
前記撮像部が撮像している方向を検知する方向検知部と、
前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、
前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記記憶されている表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする画像表示システム。
【請求項２】
前記所定の範囲は建物内の部屋であり、
前記建物内のフロア画像の情報を記憶しているフロア画像情報記憶部を更に含み、
前記現在位置情報取得部は、前記記憶されているフロア画像の情報に基づいて前記建物内のフロアを前記表示部に表示させ、前記表示されたフロアに含まれる複数の部屋のうちの１つを選択させることにより、前記表示部に表示させる前記所定の範囲を決定することを特徴とする請求項１に記載の画像表示システム。
【請求項３】
前記表示処理部は、前記複数の部屋のうちの１つが選択された後に、前記選択された部屋の範囲に含まれる位置に対応した前記表示情報を前記表示情報記憶部から取得して保持することを特徴とする請求項２に記載の画像表示システム
【請求項４】
前記所定の範囲における位置は、前記所定の範囲において所定の設備が設置された位置であり、
前記位置に対応して表示させるべき情報は、前記設備に対応して表示させるべき情報であることを特徴とする請求項２たまは３に記載の画像表示システム。
【請求項５】
前記位置に対応して表示させるべき情報は、前記設備の名前であることを特徴とする請求項４に記載の画像表示システム。
【請求項６】
撮像された画像に他の情報を重畳して表示させる携帯情報端末であって、
画像を撮像する撮像部と、
所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部から前記所定の範囲を示す画像の情報を取得して前記所定の範囲を表示部に表示させ、前記表示された範囲に対する操作に応じて入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、
前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得する表示情報取得部と、
前記撮像部が撮像している方向を検知する方向検知部と、
前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、
前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする携帯情報端末。
【請求項７】
撮像された画像に他の情報を重畳して表示させる携帯情報端末の画像表示プログラムであって、
所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部から前記所定の範囲を示す画像の情報を取得して前記所定の範囲を表示部に表示させ、前記表示された範囲に対する操作に応じて入力された前記情報端末の現在位置情報を取得するステップと、
前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得するステップと、
前記携帯情報端末に設けられた撮像部が撮像している方向を示す情報であって、前記携帯情報端末に設けられた方向検知部によって検知された方向を示す情報を取得するステップと、
前記撮像部によって撮像されている画像を撮像画像として表示部に表示させるステップと、
前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識するステップと、
前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示するステップとを前記携帯情報端末に実行させることを特徴とする画像表示プログラム。
【請求項１】
撮像された画像に他の情報を重畳して表示させる画像表示システムであって、
所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部と、
前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部と、
携帯型の情報端末に設けられた撮像部と、
前記記憶されている画像の情報に基づいて前記所定の範囲を表示部に表示させ、前記表示された範囲に対する操作に応じて入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、
前記撮像部が撮像している方向を検知する方向検知部と、
前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、
前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記記憶されている表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする画像表示システム。
【請求項２】
前記所定の範囲は建物内の部屋であり、
前記建物内のフロア画像の情報を記憶しているフロア画像情報記憶部を更に含み、
前記現在位置情報取得部は、前記記憶されているフロア画像の情報に基づいて前記建物内のフロアを前記表示部に表示させ、前記表示されたフロアに含まれる複数の部屋のうちの１つを選択させることにより、前記表示部に表示させる前記所定の範囲を決定することを特徴とする請求項１に記載の画像表示システム。
【請求項３】
前記表示処理部は、前記複数の部屋のうちの１つが選択された後に、前記選択された部屋の範囲に含まれる位置に対応した前記表示情報を前記表示情報記憶部から取得して保持することを特徴とする請求項２に記載の画像表示システム
【請求項４】
前記所定の範囲における位置は、前記所定の範囲において所定の設備が設置された位置であり、
前記位置に対応して表示させるべき情報は、前記設備に対応して表示させるべき情報であることを特徴とする請求項２たまは３に記載の画像表示システム。
【請求項５】
前記位置に対応して表示させるべき情報は、前記設備の名前であることを特徴とする請求項４に記載の画像表示システム。
【請求項６】
撮像された画像に他の情報を重畳して表示させる携帯情報端末であって、
画像を撮像する撮像部と、
所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部から前記所定の範囲を示す画像の情報を取得して前記所定の範囲を表示部に表示させ、前記表示された範囲に対する操作に応じて入力された前記情報端末の現在位置情報を取得する現在位置情報取得部と、
前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得する表示情報取得部と、
前記撮像部が撮像している方向を検知する方向検知部と、
前記撮像部によって撮像されている画像を撮像画像として表示部に表示させる表示処理部とを含み、
前記表示処理部は、前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識し、前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示することを特徴とする携帯情報端末。
【請求項７】
撮像された画像に他の情報を重畳して表示させる携帯情報端末の画像表示プログラムであって、
所定の範囲を示す画像の情報を記憶している範囲画像情報記憶部から前記所定の範囲を示す画像の情報を取得して前記所定の範囲を表示部に表示させ、前記表示された範囲に対する操作に応じて入力された前記情報端末の現在位置情報を取得するステップと、
前記所定の範囲における位置と当該位置に対応して表示させるべき情報とが関連付けられた表示情報を記憶している表示情報記憶部から前記表示情報を取得するステップと、
前記携帯情報端末に設けられた撮像部が撮像している方向を示す情報であって、前記携帯情報端末に設けられた方向検知部によって検知された方向を示す情報を取得するステップと、
前記撮像部によって撮像されている画像を撮像画像として表示部に表示させるステップと、
前記取得された現在位置情報及び前記検知された方向に基づいて前記撮像画像の範囲を認識するステップと、
前記取得された表示情報のうち前記認識された範囲に含まれる位置に対応して表示させるべき情報を前記撮像画像の対応する位置に重畳して表示するステップとを前記携帯情報端末に実行させることを特徴とする画像表示プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１１−１９１８９２（Ｐ２０１１−１９１８９２Ａ）
【公開日】平成２３年９月２９日（２０１１．９．２９）
【国際特許分類】
【出願番号】特願２０１０−５６００７（Ｐ２０１０−５６００７）
【出願日】平成２２年３月１２日（２０１０．３．１２）
【出願人】（０００１５３４４３）株式会社日立情報制御ソリューションズ (359)
【Ｆターム（参考）】
【公開日】平成２３年９月２９日（２０１１．９．２９）
【国際特許分類】
【出願日】平成２２年３月１２日（２０１０．３．１２）
【出願人】（０００１５３４４３）株式会社日立情報制御ソリューションズ (359)
【Ｆターム（参考）】
[ Back to top ]