情報表示装置及び情報表示方法
【課題】ユーザにとって、より利便性の高い情報表示装置及び情報表示方法を提供する。
【解決手段】推定部は、空間中でのカメラの撮影方向を推定する。第１格納部は、空間中における物体の位置を示す位置情報と、物体の属性を示す情報とを格納する。第２格納部は、物体に関連する他の物体の情報である関連情報を格納する。第１抽出部は、映像に含まれる一又は複数の物体の各々について、第１格納部から、各物体の位置情報と、属性情報とを抽出する。第２抽出部は、属性情報に基づいて、第２格納部から、各物体に関連する物体の関連情報を抽出する。第１算出部は、撮影方向と位置情報とに基づいて、各物体の表示位置を算出する。第２算出部は、各物体の表示位置に基づいて、関連情報の表示位置を算出する。第１生成部は、関連情報の表示位置に基づいて、関連情報の画像を生成する。表示部は、映像及び画像を表示する。
【解決手段】推定部は、空間中でのカメラの撮影方向を推定する。第１格納部は、空間中における物体の位置を示す位置情報と、物体の属性を示す情報とを格納する。第２格納部は、物体に関連する他の物体の情報である関連情報を格納する。第１抽出部は、映像に含まれる一又は複数の物体の各々について、第１格納部から、各物体の位置情報と、属性情報とを抽出する。第２抽出部は、属性情報に基づいて、第２格納部から、各物体に関連する物体の関連情報を抽出する。第１算出部は、撮影方向と位置情報とに基づいて、各物体の表示位置を算出する。第２算出部は、各物体の表示位置に基づいて、関連情報の表示位置を算出する。第１生成部は、関連情報の表示位置に基づいて、関連情報の画像を生成する。表示部は、映像及び画像を表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、情報表示装置及び情報表示方法に関する。
【背景技術】
【０００２】
実空間において、ユーザが指示した特定の物体の名称や説明などの情報を、当該実空間を撮影した画像上に重ね合わせて表示する情報表示装置がある。
【０００３】
このような情報表示装置では、ユーザにとって、より利便性の高いものが望まれている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特表２０００−５１２７８１号公報
【特許文献２】特開２００９―８０５８０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明が解決しようとする課題は、ユーザにとって、より利便性の高い情報表示装置及び情報表示方法を提供することである。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の実施形態に係る情報表示装置は、空間中における一又は複数の物体を撮影したカメラから得られる映像に情報を付加して表示可能な情報表示装置であって、推定部と、第１格納部と、第２格納部と、第１抽出部と、第２抽出部と、第１算出部と、第２算出部と、第１生成部と、表示部とを備える。
【０００７】
推定部は、前記空間中での前記カメラの撮影方向を推定し、第１格納部は、前記空間中における前記物体の位置を示す位置情報と、前記物体の属性を示す情報とを格納し、第２格納部は、前記物体に関連する他の物体の情報である関連情報を格納し、第１抽出部は、前記映像に含まれる一又は複数の物体の各々について、前記第１格納部から、各物体の前記位置情報と、前記属性情報とを抽出し、第２抽出部は、前記属性情報に基づいて、前記第２格納部から、前記各物体に関連する物体の前記関連情報を抽出し、第１算出部は、前記撮影方向と前記位置情報とに基づいて、前記各物体の表示位置を算出し、第２算出部は、前記各物体の表示位置に基づいて、前記関連情報の表示位置を算出し、第１生成部は、前記関連情報の表示位置に基づいて、前記関連情報の画像を生成し、
表示部は、前記映像及び前記画像を表示する。
【図面の簡単な説明】
【０００８】
【図１】第１の実施の形態に係る情報表示装置１の使用態様の一例図。
【図２】情報表示装置１を表すブロック図。
【図３】第１格納部５１が格納する「位置情報」及び「属性情報」の一例図。
【図４】第２格納部５２が格納する「関連情報」の一例図。
【図５】情報表示装置１の処理を表すフローチャート。
【図６】推定部１１及び第１抽出部１２の処理の説明図。
【図７】領域１０２を表す概念図。
【図８】第２算出部１６の処理を表すフローチャート。
【図９】属性座標軸９０の一例図。
【図１０】第１生成部１５及び第２生成部１７の処理の説明図。
【図１１】第２の実施の形態に係る情報表示装置２を表すブロック図。
【発明を実施するための形態】
【０００９】
（第１の実施の形態）
第１の実施の形態に係る情報表示装置１は、美術館や博物館等の展示室に設置された展示物（美術品等）や、店舗に陳列された展示物（商品等）に関する情報をユーザに提供し、鑑賞や閲覧の案内を行う情報端末等に好適である。当該情報端末は、携帯型又は据え付け型のどちらでもよい。
【００１０】
図１は、情報表示装置１の使用態様の一例図である。情報表示装置１は、その背面にカメラ５を有する。カメラ５は情報表示装置１の周囲に位置する物体を撮影し、その映像を表示部１８に表示することができる。情報表示装置１は、ユーザがその向きを自由に変更・可変できることが好ましい。
【００１１】
ユーザ１００が情報表示装置１（カメラ５）を、例えば展示物５０１，５０２に向けると、カメラ５から、展示物５０１の映像３０１及び展示物５０２の映像３０２を得ることができる。表示部１８には、映像３０１映像３０２を表示するとともに、展示物５０１及び展示物５０２に関連する情報（４０１，４０２，４０３）（関連情報と呼ぶ）を、映像３０１や映像３０２の表示位置に応じて、併せて表示する。
【００１２】
これにより、ユーザ１００は、情報表示装置１に表示された展示物に関する詳細な情報を容易に認識することができる。
【００１３】
図２は、情報表示装置１を表すブロック図である。情報表示装置１は、推定部１１と、第１抽出部１２と、第１算出部１３と、第２抽出部１４と、第１生成部１５と、第２算出部１６と、第２生成部１７と、表示部１８と、第１格納部５１と、第２格納部５２とを備える。図１に示すように、カメラ５が表示部１８の裏面に取り付けられているものとするが、これに限るものではない。
【００１４】
表示部１８は、カメラ５が撮影した展示室１０１内の展示物を表示する。推定部１１は、展示室におけるカメラ５の撮影方向を推定する。カメラ５が情報表示装置１に内蔵されている場合には、推定部１１は、展示室１０１における情報表示装置１の位置及び向きを測定することにより、撮影方向を推定できる。これにより、表示部１８に表示される展示物の表示位置が求まる。詳細は後述する。
【００１５】
第１格納部５１は、展示室内に存在する一又は複数の展示物の位置を示す「位置情報」と、各展示物の名称や特徴等の属性を示す「属性情報」とを含む。
【００１６】
図３は、第１格納部５１が格納している、ある展示物の「位置情報」及び「属性情報」の一例を示す。第１格納部５１は、属性情報として、展示物の「タイトル」、「展示室の名称」、展示物の「解説」、「ジャンル」、展示物に関連する他の展示物のＩＤ（「関連物ＩＤ」）、展示物の「制作年代」、「製作者名」、展示物に関する「キーワード」等を格納している。関連物ＩＤは、展示物とこれに関連する関連情報（後述）とを対応付けるための情報である。
【００１７】
なお、属性情報はこれらに限らず、例えば、情報表示装置１が店舗等で利用される場合で、展示物が市販の商品であれば、その「価格」等も属性情報に含まれてよい。本実施形態において、展示室１０１には、（ｘ，ｙ，ｚ）の座標系８０が定義されている。よって位置情報は、展示室１０１に定義された座標系８０（ｘ，ｙ，ｚ）により定められる。
【００１８】
第２格納部５２は、展示室内に存在する展示物に関連する解説情報や写真等の「関連情報」を格納する。すなわち、関連情報とは、ユーザ１００が展示室内で直接的に視認できない情報を、展示物に対応付けたものである。
【００１９】
例えば、展示物が美術品の場合、第２格納部５２は、当該美術品の作者の写真やプロフィール、収蔵庫に保管されている同作者の作品、他の展示室や美術館に展示されている同作者の作品等を、展示物と対応付けられた関連情報として格納してよい。
【００２０】
図４は、第２格納部５２が格納する「関連情報」の一例を示す図である。第２格納部５２は、関連情報と、第１格納部５１に格納される展示物と、の対応付けのための「関連物ＩＤ」、関連情報の「タイトル」、「解説」、「画像」、「ジャンル」、「制作年代」、「製作者名」、「収蔵場所」、「キーワード」等を格納してよい。なお、関連情報はこれらに限らず、展示物と関連する情報であれば、いかなる情報であってもよい。例えば、上述の市販の商品であれば、その「価格」等も関連情報に含まれてよい。
【００２１】
第１抽出部１２は、推定部１１が推定し、撮影方向（情報表示装置１の位置及び向き）に基づいて、カメラ５の撮像範囲に入るであろう展示物を特定し、その展示物の情報を検索する。具体的には、表示部１８に表示する一又は複数の展示物の位置情報及び属性情報を第１格納部５１から抽出する。
【００２２】
第１算出部１３は、情報表示装置１の位置及び向きと、抽出された展示物の位置情報とから、カメラ５で撮影され、表示部１８で表示される映像における当該展示物の表示位置を算出する。これにより、後述する第２算出部１６が当該関連情報の表示位置を算出することができる。
【００２３】
第２抽出部１４は、抽出された展示物の属性情報（例えば、関連物ＩＤやキーワード）に基づいて、当該展示物に関連する一又は複数の関連情報を、第２格納部５２から抽出する。
【００２４】
第２算出部１６は、表示部１８における抽出された展示物の映像の表示位置と、当該展示物の属性情報に基づいて、表示部１８において、画像として表示する当該関連情報の表示位置を算出する。
【００２５】
例えば、属性情報として制作年代を用いる場合、第２算出部１６は、抽出された展示物の制作年代と近い関連情報は、展示物の映像の近くに配置されるように、当該関連情報の表示位置を算出する。
【００２６】
第１生成部１５は、抽出された展示物の属性情報や関連情報を示す画像である第１画像を生成する。第２生成部１７は、抽出された展示物間（複数の場合）、又は属性情報間、あるいは関連情報間のリンクを示す画像（例えば線分等）である第２画像を生成する。
【００２７】
第１抽出部１２と、第１算出部１３と、第２抽出部１４と、第１生成部１５と、第２算出部１６と、第２生成部１７とは、中央演算処理装置（ＣＰＵ）及びＣＰＵが用いるメモリにより実現されてよい。第１格納部５１、第２格納部５２は、ＣＰＵが用いるメモリ、又はＣＰＵが用いる補助記憶装置、あるいはネットワーク上のデータベース機能により実現されてよい。なお、第１格納部５１と第２格納部５２とは、同一のメモリ等で実現されても、異なるメモリで実現されても構わない。
【００２８】
以上、情報表示装置１の構成について説明した。
【００２９】
図５は、情報表示装置１の処理を表すフローチャートである。推定部１１は、展示室におけるカメラ（不図示）の撮影方向を推定する（Ｓ１０１）。すなわち、推定部１１は、情報表示装置１の位置及び向きを測定することにより撮影方向を推定する（Ｓ１０１）。第１抽出部１２は、推定された撮影方向（情報表示装置１の位置及び向き）に基づいて、表示部１８に表示される一又は複数の展示物の位置情報及び属性情報を第１格納部５１から抽出する（Ｓ１０２）。例えば、図１の場合、第１抽出部１２は、展示物５０１の位置情報及び属性情報と、及び展示物５０２の位置情報及び属性情報とを第１格納部５１から抽出する。
【００３０】
第１算出部１３は、情報表示装置１の位置及び向きと、抽出された展示物の位置情報とから、表示部１８における当該展示物の映像の表示位置を算出する（Ｓ１０３）。例えば、図１の場合、第１算出部１３は、展示物５０１の映像３０１と、展示物５０２の映像３０２と、の表示位置を算出する。
【００３１】
第２抽出部１４は、抽出された展示物の属性情報に基づいて、当該展示物の関連情報を、第２格納部５２から抽出する（Ｓ１０４）。例えば、図１の場合、第２抽出部１４は、展示物５０１の関連情報と、展示物５０２の関連情報とを第２格納部５２から抽出する。
【００３２】
第２算出部１６は、表示部１８における抽出された展示物の映像の表示位置と、当該展示物の関連情報とに基づいて、表示部１８において、画像として表示する当該関連情報の表示位置を算出する（Ｓ１０５）。例えば、第２算出部１６は、展示物５０１の関連情報の画像４０１，画像４０２の表示位置と、展示物５０１の関連情報の画像４０３の表示位置とを算出する。
【００３３】
第１生成部１５は第１画像を生成する（Ｓ１０６）。第２生成部１７は、第２画像を生成する（Ｓ１０７）。表示部１８は、第１画像及び第２画像を表示する（Ｓ１０８）。
【００３４】
以上、情報表示装置１の処理について説明した。
【００３５】
以下、各部について詳述する。
【００３６】
［推定部１１、第１抽出部１２について］
図６は、推定部１１及び第１抽出部１２の処理の説明図である。推定部１１は、例えば、情報表示装置１や展示室１０１に設置されたセンサ（例えば、加速度センサ、ジャイロセンサ、電子コンパス等）を用いて、展示室１０１における情報表示装置１の位置Ｐｔ及び向き（情報表示装置１が向く方向Ｖｔ、及び情報表示装置１の回転角を定める方向Ｕｔ）を測定することにより、展示室におけるカメラ（不図示）の撮影方向を推定する。
【００３７】
第１抽出部１２は、情報表示装置１の当該位置及び向きに基づいて、表示部１８に表示される領域１０２を求める。第１抽出部１２は、第１格納部５１から、表示部１８に表示される領域１０２に含まれる一又は複数の展示物の位置情報及び属性情報を抽出する。このとき、展示室１０１には、（ｘ，ｙ，ｚ）の座標系８０が定義されている。
【００３８】
よって、推定部１１で得られる情報表示装置１の位置Ｐｔ及び向きＶｔ、Ｕｔと、第１格納部５１に格納されている展示物の位置Ｐｅとは、座標系８０上の座標で表わされる。
【００３９】
なお、表示部１８に表示される領域１０２とは、図６において破線で示される四角錐内の領域である。当該四角錐は、カメラ（不図示）の画角により定まる。
【００４０】
図７は、領域１０２を表す概念図である。領域１０２に展示物が含まれるとは、第１格納部５１の格納されている展示物の位置情報が、当該四角錐内に含まれるということである。図７の例では、位置Ｐｅ１及び位置Ｐｅ２にある展示物が領域１０２に含まれ、位置Ｐｅ３、位置Ｐｅ４、及び位置Ｐｅ５にある展示物は領域１０２に含まれない。
【００４１】
第１抽出部１２は、抽出した展示物（例えば、展示物５０１及び展示物５０２）の位置情報や属性情報（例えば、関連物ＩＤや、キーワード、解説、ジャンル等）を用いて、当該展示物に関連する他の展示物の属性情報を、第１格納部５１から抽出してもよい。
【００４２】
なお、第１抽出部１２は、ユーザ１００からの指定に応じて、展示物の位置情報及び属性情報を第１格納部５１から抽出可能であってもよい。この場合、第１抽出部１２は、タッチ入力やキーパッド入力、音声入力等により、ユーザ１００が指定した検索キーワードや、ユーザ１００が選択したジャンル等を用いて、第１格納部５１から展示物の位置情報及び属性情報を抽出する。
【００４３】
［第１算出部１３について］
第１算出部１３は、位置Ｐｔ及び向きＶｔ、Ｕｔと、抽出された一又は複数の展示物（例えば、展示物５０１及び展示物５０２）の位置情報とを用いて、展示物の映像（例えば、映像３０１及び３０２）の表示座標系における表示位置を算出する。
【００４４】
［第２抽出部１４について］
第２抽出部１４は、第１抽出部１２で抽出された展示物（例えば、展示物５０１及び展示物５０２）の位置情報や属性情報（例えば、関連物ＩＤや、キーワード、解説、ジャンル等）を用いて、当該展示物の関連情報を、第２格納部５２から抽出する。
【００４５】
例えば、第２抽出部１４は、展示物５０１の属性情報のうち、キーワードや、解説に含まれる固有名詞等の単語を抽出し、当該単語を用いて、第２格納部５２に格納されている関連情報を抽出してよい。また、第２抽出部１４は、抽出した関連情報（例えば、関連物ＩＤや、キーワード、解説、ジャンル等）を用いて、当該関連情報に関連する他の関連情報を、第２格納部５２からさらに抽出してもよい。
【００４６】
［第２算出部１６について］
第２算出部１６は、表示部１８における抽出された展示物（例えば、展示物５０１及び展示物５０２）の映像（例えば、映像３０１や３０２）の表示位置と、当該展示物の関連情報に基づいて、表示部１８において映像（例えば、映像４０１，４０２，４０３）として表示する展示物の関連情報の表示位置を算出する。図８は、第２算出部１６の処理を表すフローチャートである。
【００４７】
第２算出部１６は、カメラ（不図示）によって撮影され、表示部１８に表示されている一又は複数の展示物の中から、処理の対象となる展示物（主展示物）の映像を選択する（Ｓ２０１）。例えば、表示部１８の中心から表示部１８に表示されている複数の展示物の映像との距離を各々求め、その距離が最も短い展示物の映像（例えば、展示物５０１の映像３０１）を、主展示物の映像として選択してよい。
【００４８】
第２算出部１６は、主展示物以外で、表示部１８に表示されている複数の展示物の映像の中から、同じく処理の対象となる展示物（副展示物）の映像を１つ選択する（Ｓ２０２）。例えば、表示部１８の中心から表示部１８に表示されている複数の展示物の映像との距離を各々求め、その距離の最も長い展示物の映像（例えば、展示物５０２の映像３０２）を、副展示物の映像として選択してよい。
【００４９】
第２算出部１６は、主展示物（例えば、展示物５０１）と副展示物（例えば、展示物５０２）とについて、第１格納部５１から抽出した属性情報を選択する（Ｓ２０３）。例えば、展示品であれば制作年代、商品であれば価格等の属性情報を選択してよい。属性情報自体は必ずしも数値である必要はない。数値でない属性情報を選択した場合、第２算出部１６は、主展示物及び副展示物が属するジャンル間の関連性の程度を数値として表わした関連度を算出してよい。例えば、特許文献２記載の技術を用いて構わない。
【００５０】
第２算出部１６は、主展示物の属性情報と、副展示物の属性情報とを通る属性座標軸９０を定義する（Ｓ２０４）。図９は、属性座標軸９０の一例図である。例えば、属性情報として制作年代を用いる場合、第２算出部１６は、属性座標軸９０を年代の軸とする。すなわち、主展示物の属性情報２０１と、副展示物の属性値４０１の間は年代を内分し、主展示物の属性値２０１より正側と、副展示物の属性値４０１より負側は年代を外分する。
【００５１】
なお、表示部１８に表示されている展示物が一つの場合は、当該展示物５０１をから予め決められた方向に属性座標軸９０を定義してよい。
【００５２】
第２算出部１６は、第２抽出部１４で抽出された複数の関連情報（６０１、６０２）について、図９（ａ）に示すように、関連情報に関する同じ種類の属性情報を用いて、属性座標軸９０上に配置する。
【００５３】
第２算出部１６は、属性座標軸９０における関連情報（６０１、６０２）から主展示物（展示物５０１）又は副展示物（展示物５０２）までの距離の比が、表示部１８における関連情報から主展示物（展示物５０１）又は副展示物（展示物５０２）までの距離の比と等しくなるように、表示部１８における関連情報の表示位置を算出する（Ｓ２０５）。
【００５４】
ここで、主展示物の属性情報２０１と、副展示物の属性情報４０１とが同一の場合、第２算出部１６は、属性座標軸９０を定めることができない。その場合、第２算出部１６は、副展示物として、表示部１８に表示されている異なる展示物を選択してもよい。
【００５５】
また、第２算出部１６は、副展示物の属性情報４０１を１つのみ定めるのではなく、図９（ｂ）に示すように、主展示物の属性情報２０１の負側に副展示物の属性情報４０１を配置し、主展示物の属性情報２０１の正側に副展示物の属性情報４０２を配置することにより属性座標軸９０を定義してもよい。
【００５６】
このようにして定めた属性値座標系９０における関連情報から主展示物及び副展示物への距離の比は、単一の属性座標軸９０に限定せず、年代とジャンル、ジャンルと解説文中の共通キーワードの共起数、年代とジャンルとデータ種別のように、複数の属性座標軸を組み合わせてもよい。この場合、第２算出部１６は、属性座標軸に優先順位をつけ、優先順位が高い順に、関連情報から主展示物及び副展示物への距離の比を満たすように表示部１８における関連情報の表示位置を定めてよい。
【００５７】
また、表示部１８における関連情報の表示位置を算出する際、第２算出部１６は、予め表示座標系を定義し、その座標系上に関連情報を配置した上で、表示部１８上に射影を行ってもよい。表示座標系としては、主展示物を原点とした２次元座標系に限定せず、３次元座標系や、極座標系等を用いてよい。
【００５８】
［第１生成部１５、第２生成部１７の処理内容］
図１０は、第１生成部１５及び第２生成部１７の処理の説明図である。第１生成部１５は、展示物の属性情報に関する第１画像を生成する。属性情報に関する第１画像とは、第１抽出部１２が抽出した展示物の属性情報を画像化したものであり、例えば、図１０における画像３１１で示される展示物のキャプションであってよい。
【００５９】
画像３１１の表示位置は、第１算出部１３によって算出された表示位置であってよい。ここで、第１生成部１５は、展示物に関する画像が展示物の映像を遮らないように表示位置を下方向に移動させてもよい。移動させる距離は展示物から情報表示装置１までの距離に応じて変化させてもよい。また、当該距離を画像サイズに反映させてもよい。例えば、当該距離が近い展示物の第１画像は大きく、当該距離が遠い展示物の第１画像は小さく表示させてもよい。
【００６０】
また、第１生成部１５は、展示物の関連情報に関する第１画像を生成する。すなわち、第１生成部１５は、第２抽出部１４によって抽出された関連情報の画像（他の美術館等にある展示物の写真）やタイトル、ジャンル等の関連情報を、サムネイル画像（画像３２１、３２２、３２３）やキャプション（画像３３１、３３２，３３３）として画像化する。
【００６１】
第２生成部１７は、第１抽出部１２が第１格納部５１から抽出した展示物と、第２抽出部１４が第２格納部５２から抽出した関連情報とについて、それらが関連する場合には第２画像（例えば、線分３４１、３４２、３４３）を表示する。
【００６２】
第２生成部１７は、線分の形状や色等を関連の状態に応じて変化させてもよい。例えば、第１格納部５１や第２格納部５２に明示的に関連するものとして定義されている場合と、ジャンルが一致する場合と、解説情報やキーワード中の文字列が一致する場合で色を変えてもよい。また、展示物が画面外に存在する場合には、展示物が存在する方向を案内する矢印の画像等を表示してもよい。
【００６３】
それにより、ユーザ１００は、矢印を辿るように情報表示装置１の向きを変えることで、表示部１８上で画面外の展示物を画面内へ表示させることができる。
【００６４】
本実施形態のように関連情報の配置を行うことで、展示室における展示物が年代順に配置されているような状況において、展示室に配置されていない物体の情報である関連情報も、展示物の配置順序から逸脱が少ない状態で、情報表示装置１の表示部１８上に、情報表示装置１のカメラで撮影された映像に重畳する形で表示することが可能となる。これにより、ユーザ１００は、展示物と関連情報の違いによらず、同一画面上で、容易に年代順に配置された情報を閲覧することが可能となる。
【００６５】
同様に、商品販売を行う実店舗などにおいて、価格順に商品が陳列されている場合には、店舗に在庫があり設置されている商品に併せて、店舗に在庫がない商品の情報も表示し、実物と在庫のない商品の情報の違いによらず、同一画面上で、容易に価格順に情報を閲覧することが可能となる。同様に、書店などの実店舗において、販売ランキング順に配置することで、実物と在庫のない商品の情報の違いによらず、同一画面上で、容易にランキング順に情報を閲覧することが可能となる。
【００６６】
なお、本実施形態では、情報表示装置１が、第１格納部５１と、第２格納部５２とを備える例について説明したが、これに限られない。例えば、第１格納部５１に含まれる情報、及び第２格納部５２に含まれる情報が、ネットワーク上に存在する場合がある。この場合、第１抽出部１２は、位置情報及び属性情報を当該ネットワーク上から抽出し、第２抽出部１２は、関連情報を当該ネットワーク上から抽出してもよい。
【００６７】
すなわち、本実施形態により、情報表示装置１は、表示部に表示した複数の展示物について、それらの関連をユーザに分かりやすく示すことができる。また、当該展示物と関連する展示室の周囲の展示物の位置をユーザに分かりやすく示すことができる。また、当該展示物に関連する解説や、関連写真、展示室にない他の展示物についても、ユーザに分かりやすく示すことができる。
【００６８】
（第２の実施の形態）
第２の実施の形態に係る情報表示装置２は、ユーザ１００からの入力によるポインティング操作が可能である点が、情報表示装置１の場合と異なる。ユーザ１００は、ポインティングにより、表示部１８に表示された展示物又は関連情報の中から、一又は複数の展示物又は関連情報を指定する。
【００６９】
図１１は、情報表示装置２を表すブロック図である。情報表示装置２は、第１の実施の形態における情報表示装置１に対し、入力部２１と判定部２２とをさらに備える。
【００７０】
入力部２１は、ユーザ１００から、ポインティングによる入力を受け付ける。例えば、入力部２１は、表示部１８に設けられるタッチパネル（不図示）やボタン（不図示）等であってよい。
【００７１】
判定部２２は、ポインティングの位置（例えば、表示部１８におけるタッチ位置等）を算出し、ポインティングの位置が表示部１８に表示された展示物又は関連情報の位置と一致するか否かを判定する。
【００７２】
一致する場合、表示部１８は、当該展示物又は関連情報である、第１画像と第２画像を表示し、それ以外表示しない。一致しない場合は、第１の実施の形態の場合と同様である。
【００７３】
これにより、情報表示装置２は、ユーザ１００が指定した展示物又は関連情報に関連する情報を選別して提示することができる。また、ユーザ１００が１つ指定した展示物を、第２算出部１６において主展示物として用いることや、ユーザ１００が２つ指定した展示物のうち、一方を第２算出部１６において主展示物として利用し、もう一方を、副展示物として用いることが可能となる。
【００７４】
なお、情報表示装置２は、表示部１８とは別の表示部（不図示）を備えていてもよい。この場合、当該表示部（不図示）は、例えばタッチパネルにおいてタッチされた物体の詳細な情報を当該表示部（不図示）に表示してもよい。
【００７５】
上述した実施形態により、ユーザにとって、より利便性の高い情報表示装置及び情報表示方法を提供することができる。
【００７６】
これまで、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００７７】
１，２…情報表示装置
１１…推定部
１２…第１抽出部
１３…第１算出部
１４…第２抽出部
１５…第１生成部
１６…第２算出部
１７…第２生成部
１８…表示部
２１…入力部
２２…判定部
５１…第１格納部
５２…第２格納部
【技術分野】
【０００１】
本発明の実施形態は、情報表示装置及び情報表示方法に関する。
【背景技術】
【０００２】
実空間において、ユーザが指示した特定の物体の名称や説明などの情報を、当該実空間を撮影した画像上に重ね合わせて表示する情報表示装置がある。
【０００３】
このような情報表示装置では、ユーザにとって、より利便性の高いものが望まれている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特表２０００−５１２７８１号公報
【特許文献２】特開２００９―８０５８０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明が解決しようとする課題は、ユーザにとって、より利便性の高い情報表示装置及び情報表示方法を提供することである。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明の実施形態に係る情報表示装置は、空間中における一又は複数の物体を撮影したカメラから得られる映像に情報を付加して表示可能な情報表示装置であって、推定部と、第１格納部と、第２格納部と、第１抽出部と、第２抽出部と、第１算出部と、第２算出部と、第１生成部と、表示部とを備える。
【０００７】
推定部は、前記空間中での前記カメラの撮影方向を推定し、第１格納部は、前記空間中における前記物体の位置を示す位置情報と、前記物体の属性を示す情報とを格納し、第２格納部は、前記物体に関連する他の物体の情報である関連情報を格納し、第１抽出部は、前記映像に含まれる一又は複数の物体の各々について、前記第１格納部から、各物体の前記位置情報と、前記属性情報とを抽出し、第２抽出部は、前記属性情報に基づいて、前記第２格納部から、前記各物体に関連する物体の前記関連情報を抽出し、第１算出部は、前記撮影方向と前記位置情報とに基づいて、前記各物体の表示位置を算出し、第２算出部は、前記各物体の表示位置に基づいて、前記関連情報の表示位置を算出し、第１生成部は、前記関連情報の表示位置に基づいて、前記関連情報の画像を生成し、
表示部は、前記映像及び前記画像を表示する。
【図面の簡単な説明】
【０００８】
【図１】第１の実施の形態に係る情報表示装置１の使用態様の一例図。
【図２】情報表示装置１を表すブロック図。
【図３】第１格納部５１が格納する「位置情報」及び「属性情報」の一例図。
【図４】第２格納部５２が格納する「関連情報」の一例図。
【図５】情報表示装置１の処理を表すフローチャート。
【図６】推定部１１及び第１抽出部１２の処理の説明図。
【図７】領域１０２を表す概念図。
【図８】第２算出部１６の処理を表すフローチャート。
【図９】属性座標軸９０の一例図。
【図１０】第１生成部１５及び第２生成部１７の処理の説明図。
【図１１】第２の実施の形態に係る情報表示装置２を表すブロック図。
【発明を実施するための形態】
【０００９】
（第１の実施の形態）
第１の実施の形態に係る情報表示装置１は、美術館や博物館等の展示室に設置された展示物（美術品等）や、店舗に陳列された展示物（商品等）に関する情報をユーザに提供し、鑑賞や閲覧の案内を行う情報端末等に好適である。当該情報端末は、携帯型又は据え付け型のどちらでもよい。
【００１０】
図１は、情報表示装置１の使用態様の一例図である。情報表示装置１は、その背面にカメラ５を有する。カメラ５は情報表示装置１の周囲に位置する物体を撮影し、その映像を表示部１８に表示することができる。情報表示装置１は、ユーザがその向きを自由に変更・可変できることが好ましい。
【００１１】
ユーザ１００が情報表示装置１（カメラ５）を、例えば展示物５０１，５０２に向けると、カメラ５から、展示物５０１の映像３０１及び展示物５０２の映像３０２を得ることができる。表示部１８には、映像３０１映像３０２を表示するとともに、展示物５０１及び展示物５０２に関連する情報（４０１，４０２，４０３）（関連情報と呼ぶ）を、映像３０１や映像３０２の表示位置に応じて、併せて表示する。
【００１２】
これにより、ユーザ１００は、情報表示装置１に表示された展示物に関する詳細な情報を容易に認識することができる。
【００１３】
図２は、情報表示装置１を表すブロック図である。情報表示装置１は、推定部１１と、第１抽出部１２と、第１算出部１３と、第２抽出部１４と、第１生成部１５と、第２算出部１６と、第２生成部１７と、表示部１８と、第１格納部５１と、第２格納部５２とを備える。図１に示すように、カメラ５が表示部１８の裏面に取り付けられているものとするが、これに限るものではない。
【００１４】
表示部１８は、カメラ５が撮影した展示室１０１内の展示物を表示する。推定部１１は、展示室におけるカメラ５の撮影方向を推定する。カメラ５が情報表示装置１に内蔵されている場合には、推定部１１は、展示室１０１における情報表示装置１の位置及び向きを測定することにより、撮影方向を推定できる。これにより、表示部１８に表示される展示物の表示位置が求まる。詳細は後述する。
【００１５】
第１格納部５１は、展示室内に存在する一又は複数の展示物の位置を示す「位置情報」と、各展示物の名称や特徴等の属性を示す「属性情報」とを含む。
【００１６】
図３は、第１格納部５１が格納している、ある展示物の「位置情報」及び「属性情報」の一例を示す。第１格納部５１は、属性情報として、展示物の「タイトル」、「展示室の名称」、展示物の「解説」、「ジャンル」、展示物に関連する他の展示物のＩＤ（「関連物ＩＤ」）、展示物の「制作年代」、「製作者名」、展示物に関する「キーワード」等を格納している。関連物ＩＤは、展示物とこれに関連する関連情報（後述）とを対応付けるための情報である。
【００１７】
なお、属性情報はこれらに限らず、例えば、情報表示装置１が店舗等で利用される場合で、展示物が市販の商品であれば、その「価格」等も属性情報に含まれてよい。本実施形態において、展示室１０１には、（ｘ，ｙ，ｚ）の座標系８０が定義されている。よって位置情報は、展示室１０１に定義された座標系８０（ｘ，ｙ，ｚ）により定められる。
【００１８】
第２格納部５２は、展示室内に存在する展示物に関連する解説情報や写真等の「関連情報」を格納する。すなわち、関連情報とは、ユーザ１００が展示室内で直接的に視認できない情報を、展示物に対応付けたものである。
【００１９】
例えば、展示物が美術品の場合、第２格納部５２は、当該美術品の作者の写真やプロフィール、収蔵庫に保管されている同作者の作品、他の展示室や美術館に展示されている同作者の作品等を、展示物と対応付けられた関連情報として格納してよい。
【００２０】
図４は、第２格納部５２が格納する「関連情報」の一例を示す図である。第２格納部５２は、関連情報と、第１格納部５１に格納される展示物と、の対応付けのための「関連物ＩＤ」、関連情報の「タイトル」、「解説」、「画像」、「ジャンル」、「制作年代」、「製作者名」、「収蔵場所」、「キーワード」等を格納してよい。なお、関連情報はこれらに限らず、展示物と関連する情報であれば、いかなる情報であってもよい。例えば、上述の市販の商品であれば、その「価格」等も関連情報に含まれてよい。
【００２１】
第１抽出部１２は、推定部１１が推定し、撮影方向（情報表示装置１の位置及び向き）に基づいて、カメラ５の撮像範囲に入るであろう展示物を特定し、その展示物の情報を検索する。具体的には、表示部１８に表示する一又は複数の展示物の位置情報及び属性情報を第１格納部５１から抽出する。
【００２２】
第１算出部１３は、情報表示装置１の位置及び向きと、抽出された展示物の位置情報とから、カメラ５で撮影され、表示部１８で表示される映像における当該展示物の表示位置を算出する。これにより、後述する第２算出部１６が当該関連情報の表示位置を算出することができる。
【００２３】
第２抽出部１４は、抽出された展示物の属性情報（例えば、関連物ＩＤやキーワード）に基づいて、当該展示物に関連する一又は複数の関連情報を、第２格納部５２から抽出する。
【００２４】
第２算出部１６は、表示部１８における抽出された展示物の映像の表示位置と、当該展示物の属性情報に基づいて、表示部１８において、画像として表示する当該関連情報の表示位置を算出する。
【００２５】
例えば、属性情報として制作年代を用いる場合、第２算出部１６は、抽出された展示物の制作年代と近い関連情報は、展示物の映像の近くに配置されるように、当該関連情報の表示位置を算出する。
【００２６】
第１生成部１５は、抽出された展示物の属性情報や関連情報を示す画像である第１画像を生成する。第２生成部１７は、抽出された展示物間（複数の場合）、又は属性情報間、あるいは関連情報間のリンクを示す画像（例えば線分等）である第２画像を生成する。
【００２７】
第１抽出部１２と、第１算出部１３と、第２抽出部１４と、第１生成部１５と、第２算出部１６と、第２生成部１７とは、中央演算処理装置（ＣＰＵ）及びＣＰＵが用いるメモリにより実現されてよい。第１格納部５１、第２格納部５２は、ＣＰＵが用いるメモリ、又はＣＰＵが用いる補助記憶装置、あるいはネットワーク上のデータベース機能により実現されてよい。なお、第１格納部５１と第２格納部５２とは、同一のメモリ等で実現されても、異なるメモリで実現されても構わない。
【００２８】
以上、情報表示装置１の構成について説明した。
【００２９】
図５は、情報表示装置１の処理を表すフローチャートである。推定部１１は、展示室におけるカメラ（不図示）の撮影方向を推定する（Ｓ１０１）。すなわち、推定部１１は、情報表示装置１の位置及び向きを測定することにより撮影方向を推定する（Ｓ１０１）。第１抽出部１２は、推定された撮影方向（情報表示装置１の位置及び向き）に基づいて、表示部１８に表示される一又は複数の展示物の位置情報及び属性情報を第１格納部５１から抽出する（Ｓ１０２）。例えば、図１の場合、第１抽出部１２は、展示物５０１の位置情報及び属性情報と、及び展示物５０２の位置情報及び属性情報とを第１格納部５１から抽出する。
【００３０】
第１算出部１３は、情報表示装置１の位置及び向きと、抽出された展示物の位置情報とから、表示部１８における当該展示物の映像の表示位置を算出する（Ｓ１０３）。例えば、図１の場合、第１算出部１３は、展示物５０１の映像３０１と、展示物５０２の映像３０２と、の表示位置を算出する。
【００３１】
第２抽出部１４は、抽出された展示物の属性情報に基づいて、当該展示物の関連情報を、第２格納部５２から抽出する（Ｓ１０４）。例えば、図１の場合、第２抽出部１４は、展示物５０１の関連情報と、展示物５０２の関連情報とを第２格納部５２から抽出する。
【００３２】
第２算出部１６は、表示部１８における抽出された展示物の映像の表示位置と、当該展示物の関連情報とに基づいて、表示部１８において、画像として表示する当該関連情報の表示位置を算出する（Ｓ１０５）。例えば、第２算出部１６は、展示物５０１の関連情報の画像４０１，画像４０２の表示位置と、展示物５０１の関連情報の画像４０３の表示位置とを算出する。
【００３３】
第１生成部１５は第１画像を生成する（Ｓ１０６）。第２生成部１７は、第２画像を生成する（Ｓ１０７）。表示部１８は、第１画像及び第２画像を表示する（Ｓ１０８）。
【００３４】
以上、情報表示装置１の処理について説明した。
【００３５】
以下、各部について詳述する。
【００３６】
［推定部１１、第１抽出部１２について］
図６は、推定部１１及び第１抽出部１２の処理の説明図である。推定部１１は、例えば、情報表示装置１や展示室１０１に設置されたセンサ（例えば、加速度センサ、ジャイロセンサ、電子コンパス等）を用いて、展示室１０１における情報表示装置１の位置Ｐｔ及び向き（情報表示装置１が向く方向Ｖｔ、及び情報表示装置１の回転角を定める方向Ｕｔ）を測定することにより、展示室におけるカメラ（不図示）の撮影方向を推定する。
【００３７】
第１抽出部１２は、情報表示装置１の当該位置及び向きに基づいて、表示部１８に表示される領域１０２を求める。第１抽出部１２は、第１格納部５１から、表示部１８に表示される領域１０２に含まれる一又は複数の展示物の位置情報及び属性情報を抽出する。このとき、展示室１０１には、（ｘ，ｙ，ｚ）の座標系８０が定義されている。
【００３８】
よって、推定部１１で得られる情報表示装置１の位置Ｐｔ及び向きＶｔ、Ｕｔと、第１格納部５１に格納されている展示物の位置Ｐｅとは、座標系８０上の座標で表わされる。
【００３９】
なお、表示部１８に表示される領域１０２とは、図６において破線で示される四角錐内の領域である。当該四角錐は、カメラ（不図示）の画角により定まる。
【００４０】
図７は、領域１０２を表す概念図である。領域１０２に展示物が含まれるとは、第１格納部５１の格納されている展示物の位置情報が、当該四角錐内に含まれるということである。図７の例では、位置Ｐｅ１及び位置Ｐｅ２にある展示物が領域１０２に含まれ、位置Ｐｅ３、位置Ｐｅ４、及び位置Ｐｅ５にある展示物は領域１０２に含まれない。
【００４１】
第１抽出部１２は、抽出した展示物（例えば、展示物５０１及び展示物５０２）の位置情報や属性情報（例えば、関連物ＩＤや、キーワード、解説、ジャンル等）を用いて、当該展示物に関連する他の展示物の属性情報を、第１格納部５１から抽出してもよい。
【００４２】
なお、第１抽出部１２は、ユーザ１００からの指定に応じて、展示物の位置情報及び属性情報を第１格納部５１から抽出可能であってもよい。この場合、第１抽出部１２は、タッチ入力やキーパッド入力、音声入力等により、ユーザ１００が指定した検索キーワードや、ユーザ１００が選択したジャンル等を用いて、第１格納部５１から展示物の位置情報及び属性情報を抽出する。
【００４３】
［第１算出部１３について］
第１算出部１３は、位置Ｐｔ及び向きＶｔ、Ｕｔと、抽出された一又は複数の展示物（例えば、展示物５０１及び展示物５０２）の位置情報とを用いて、展示物の映像（例えば、映像３０１及び３０２）の表示座標系における表示位置を算出する。
【００４４】
［第２抽出部１４について］
第２抽出部１４は、第１抽出部１２で抽出された展示物（例えば、展示物５０１及び展示物５０２）の位置情報や属性情報（例えば、関連物ＩＤや、キーワード、解説、ジャンル等）を用いて、当該展示物の関連情報を、第２格納部５２から抽出する。
【００４５】
例えば、第２抽出部１４は、展示物５０１の属性情報のうち、キーワードや、解説に含まれる固有名詞等の単語を抽出し、当該単語を用いて、第２格納部５２に格納されている関連情報を抽出してよい。また、第２抽出部１４は、抽出した関連情報（例えば、関連物ＩＤや、キーワード、解説、ジャンル等）を用いて、当該関連情報に関連する他の関連情報を、第２格納部５２からさらに抽出してもよい。
【００４６】
［第２算出部１６について］
第２算出部１６は、表示部１８における抽出された展示物（例えば、展示物５０１及び展示物５０２）の映像（例えば、映像３０１や３０２）の表示位置と、当該展示物の関連情報に基づいて、表示部１８において映像（例えば、映像４０１，４０２，４０３）として表示する展示物の関連情報の表示位置を算出する。図８は、第２算出部１６の処理を表すフローチャートである。
【００４７】
第２算出部１６は、カメラ（不図示）によって撮影され、表示部１８に表示されている一又は複数の展示物の中から、処理の対象となる展示物（主展示物）の映像を選択する（Ｓ２０１）。例えば、表示部１８の中心から表示部１８に表示されている複数の展示物の映像との距離を各々求め、その距離が最も短い展示物の映像（例えば、展示物５０１の映像３０１）を、主展示物の映像として選択してよい。
【００４８】
第２算出部１６は、主展示物以外で、表示部１８に表示されている複数の展示物の映像の中から、同じく処理の対象となる展示物（副展示物）の映像を１つ選択する（Ｓ２０２）。例えば、表示部１８の中心から表示部１８に表示されている複数の展示物の映像との距離を各々求め、その距離の最も長い展示物の映像（例えば、展示物５０２の映像３０２）を、副展示物の映像として選択してよい。
【００４９】
第２算出部１６は、主展示物（例えば、展示物５０１）と副展示物（例えば、展示物５０２）とについて、第１格納部５１から抽出した属性情報を選択する（Ｓ２０３）。例えば、展示品であれば制作年代、商品であれば価格等の属性情報を選択してよい。属性情報自体は必ずしも数値である必要はない。数値でない属性情報を選択した場合、第２算出部１６は、主展示物及び副展示物が属するジャンル間の関連性の程度を数値として表わした関連度を算出してよい。例えば、特許文献２記載の技術を用いて構わない。
【００５０】
第２算出部１６は、主展示物の属性情報と、副展示物の属性情報とを通る属性座標軸９０を定義する（Ｓ２０４）。図９は、属性座標軸９０の一例図である。例えば、属性情報として制作年代を用いる場合、第２算出部１６は、属性座標軸９０を年代の軸とする。すなわち、主展示物の属性情報２０１と、副展示物の属性値４０１の間は年代を内分し、主展示物の属性値２０１より正側と、副展示物の属性値４０１より負側は年代を外分する。
【００５１】
なお、表示部１８に表示されている展示物が一つの場合は、当該展示物５０１をから予め決められた方向に属性座標軸９０を定義してよい。
【００５２】
第２算出部１６は、第２抽出部１４で抽出された複数の関連情報（６０１、６０２）について、図９（ａ）に示すように、関連情報に関する同じ種類の属性情報を用いて、属性座標軸９０上に配置する。
【００５３】
第２算出部１６は、属性座標軸９０における関連情報（６０１、６０２）から主展示物（展示物５０１）又は副展示物（展示物５０２）までの距離の比が、表示部１８における関連情報から主展示物（展示物５０１）又は副展示物（展示物５０２）までの距離の比と等しくなるように、表示部１８における関連情報の表示位置を算出する（Ｓ２０５）。
【００５４】
ここで、主展示物の属性情報２０１と、副展示物の属性情報４０１とが同一の場合、第２算出部１６は、属性座標軸９０を定めることができない。その場合、第２算出部１６は、副展示物として、表示部１８に表示されている異なる展示物を選択してもよい。
【００５５】
また、第２算出部１６は、副展示物の属性情報４０１を１つのみ定めるのではなく、図９（ｂ）に示すように、主展示物の属性情報２０１の負側に副展示物の属性情報４０１を配置し、主展示物の属性情報２０１の正側に副展示物の属性情報４０２を配置することにより属性座標軸９０を定義してもよい。
【００５６】
このようにして定めた属性値座標系９０における関連情報から主展示物及び副展示物への距離の比は、単一の属性座標軸９０に限定せず、年代とジャンル、ジャンルと解説文中の共通キーワードの共起数、年代とジャンルとデータ種別のように、複数の属性座標軸を組み合わせてもよい。この場合、第２算出部１６は、属性座標軸に優先順位をつけ、優先順位が高い順に、関連情報から主展示物及び副展示物への距離の比を満たすように表示部１８における関連情報の表示位置を定めてよい。
【００５７】
また、表示部１８における関連情報の表示位置を算出する際、第２算出部１６は、予め表示座標系を定義し、その座標系上に関連情報を配置した上で、表示部１８上に射影を行ってもよい。表示座標系としては、主展示物を原点とした２次元座標系に限定せず、３次元座標系や、極座標系等を用いてよい。
【００５８】
［第１生成部１５、第２生成部１７の処理内容］
図１０は、第１生成部１５及び第２生成部１７の処理の説明図である。第１生成部１５は、展示物の属性情報に関する第１画像を生成する。属性情報に関する第１画像とは、第１抽出部１２が抽出した展示物の属性情報を画像化したものであり、例えば、図１０における画像３１１で示される展示物のキャプションであってよい。
【００５９】
画像３１１の表示位置は、第１算出部１３によって算出された表示位置であってよい。ここで、第１生成部１５は、展示物に関する画像が展示物の映像を遮らないように表示位置を下方向に移動させてもよい。移動させる距離は展示物から情報表示装置１までの距離に応じて変化させてもよい。また、当該距離を画像サイズに反映させてもよい。例えば、当該距離が近い展示物の第１画像は大きく、当該距離が遠い展示物の第１画像は小さく表示させてもよい。
【００６０】
また、第１生成部１５は、展示物の関連情報に関する第１画像を生成する。すなわち、第１生成部１５は、第２抽出部１４によって抽出された関連情報の画像（他の美術館等にある展示物の写真）やタイトル、ジャンル等の関連情報を、サムネイル画像（画像３２１、３２２、３２３）やキャプション（画像３３１、３３２，３３３）として画像化する。
【００６１】
第２生成部１７は、第１抽出部１２が第１格納部５１から抽出した展示物と、第２抽出部１４が第２格納部５２から抽出した関連情報とについて、それらが関連する場合には第２画像（例えば、線分３４１、３４２、３４３）を表示する。
【００６２】
第２生成部１７は、線分の形状や色等を関連の状態に応じて変化させてもよい。例えば、第１格納部５１や第２格納部５２に明示的に関連するものとして定義されている場合と、ジャンルが一致する場合と、解説情報やキーワード中の文字列が一致する場合で色を変えてもよい。また、展示物が画面外に存在する場合には、展示物が存在する方向を案内する矢印の画像等を表示してもよい。
【００６３】
それにより、ユーザ１００は、矢印を辿るように情報表示装置１の向きを変えることで、表示部１８上で画面外の展示物を画面内へ表示させることができる。
【００６４】
本実施形態のように関連情報の配置を行うことで、展示室における展示物が年代順に配置されているような状況において、展示室に配置されていない物体の情報である関連情報も、展示物の配置順序から逸脱が少ない状態で、情報表示装置１の表示部１８上に、情報表示装置１のカメラで撮影された映像に重畳する形で表示することが可能となる。これにより、ユーザ１００は、展示物と関連情報の違いによらず、同一画面上で、容易に年代順に配置された情報を閲覧することが可能となる。
【００６５】
同様に、商品販売を行う実店舗などにおいて、価格順に商品が陳列されている場合には、店舗に在庫があり設置されている商品に併せて、店舗に在庫がない商品の情報も表示し、実物と在庫のない商品の情報の違いによらず、同一画面上で、容易に価格順に情報を閲覧することが可能となる。同様に、書店などの実店舗において、販売ランキング順に配置することで、実物と在庫のない商品の情報の違いによらず、同一画面上で、容易にランキング順に情報を閲覧することが可能となる。
【００６６】
なお、本実施形態では、情報表示装置１が、第１格納部５１と、第２格納部５２とを備える例について説明したが、これに限られない。例えば、第１格納部５１に含まれる情報、及び第２格納部５２に含まれる情報が、ネットワーク上に存在する場合がある。この場合、第１抽出部１２は、位置情報及び属性情報を当該ネットワーク上から抽出し、第２抽出部１２は、関連情報を当該ネットワーク上から抽出してもよい。
【００６７】
すなわち、本実施形態により、情報表示装置１は、表示部に表示した複数の展示物について、それらの関連をユーザに分かりやすく示すことができる。また、当該展示物と関連する展示室の周囲の展示物の位置をユーザに分かりやすく示すことができる。また、当該展示物に関連する解説や、関連写真、展示室にない他の展示物についても、ユーザに分かりやすく示すことができる。
【００６８】
（第２の実施の形態）
第２の実施の形態に係る情報表示装置２は、ユーザ１００からの入力によるポインティング操作が可能である点が、情報表示装置１の場合と異なる。ユーザ１００は、ポインティングにより、表示部１８に表示された展示物又は関連情報の中から、一又は複数の展示物又は関連情報を指定する。
【００６９】
図１１は、情報表示装置２を表すブロック図である。情報表示装置２は、第１の実施の形態における情報表示装置１に対し、入力部２１と判定部２２とをさらに備える。
【００７０】
入力部２１は、ユーザ１００から、ポインティングによる入力を受け付ける。例えば、入力部２１は、表示部１８に設けられるタッチパネル（不図示）やボタン（不図示）等であってよい。
【００７１】
判定部２２は、ポインティングの位置（例えば、表示部１８におけるタッチ位置等）を算出し、ポインティングの位置が表示部１８に表示された展示物又は関連情報の位置と一致するか否かを判定する。
【００７２】
一致する場合、表示部１８は、当該展示物又は関連情報である、第１画像と第２画像を表示し、それ以外表示しない。一致しない場合は、第１の実施の形態の場合と同様である。
【００７３】
これにより、情報表示装置２は、ユーザ１００が指定した展示物又は関連情報に関連する情報を選別して提示することができる。また、ユーザ１００が１つ指定した展示物を、第２算出部１６において主展示物として用いることや、ユーザ１００が２つ指定した展示物のうち、一方を第２算出部１６において主展示物として利用し、もう一方を、副展示物として用いることが可能となる。
【００７４】
なお、情報表示装置２は、表示部１８とは別の表示部（不図示）を備えていてもよい。この場合、当該表示部（不図示）は、例えばタッチパネルにおいてタッチされた物体の詳細な情報を当該表示部（不図示）に表示してもよい。
【００７５】
上述した実施形態により、ユーザにとって、より利便性の高い情報表示装置及び情報表示方法を提供することができる。
【００７６】
これまで、本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら新規な実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００７７】
１，２…情報表示装置
１１…推定部
１２…第１抽出部
１３…第１算出部
１４…第２抽出部
１５…第１生成部
１６…第２算出部
１７…第２生成部
１８…表示部
２１…入力部
２２…判定部
５１…第１格納部
５２…第２格納部
【特許請求の範囲】
【請求項１】
空間中における一又は複数の物体を撮影したカメラから得られる映像に情報を付加して、表示可能な情報表示装置であって、
前記空間中での前記カメラの撮影方向を推定する推定部と、
前記空間中における前記物体の位置を示す位置情報と、前記物体の属性を示す情報とを格納する第１格納部と、
前記物体に関連する他の物体の情報である関連情報を格納する第２格納部と、
前記映像に含まれる一又は複数の物体の各々について、前記第１格納部から、各物体の前記位置情報と、前記属性情報とを抽出する第１抽出部と、
前記属性情報に基づいて、前記第２格納部から、前記各物体に関連する物体の前記関連情報を抽出する第２抽出部と、
前記撮影方向と前記位置情報とに基づいて、前記各物体の表示位置を算出する第１算出部と、
前記各物体の表示位置に基づいて、前記関連情報の表示位置を算出する第２算出部と、
前記関連情報の表示位置に基づいて、前記関連情報の画像を生成する第１生成部と、
前記映像及び前記画像を表示する表示部と、
を備える、情報表示装置。
【請求項２】
前記映像に含まれる物体が複数ある場合、前記第２算出部は、
一方の物体の表示位置と、他方の物体の表示位置とに基づいて、前記関連情報の表示位置を算出する、請求項１記載の情報表示装置。
【請求項３】
前記第２算出部は、
選択された一方の物体の表示位置と、他方の物体の表示位置とを結ぶ軸上に、前記関連情報が配置されるように、前記関連情報の表示位置を算出する、
請求項２記載の情報表示装置。
【請求項４】
前記物体と前記関連情報との間のリンクを示す画像を生成する第２生成部をさらに備える、
請求項１から３記載の情報表示装置。
【請求項５】
ユーザにより、一方の物体の選択を受け付ける入力部を備える、
請求項２から４記載の情報表示装置。
【請求項６】
空間中における一又は複数の物体を撮影したカメラから得られる映像に情報を付加して表示可能な情報表示方法であって、
前記空間中での前記カメラの撮影方向を推定し、
前記映像に含まれる一又は複数の物体の各々について、前記空間中における前記物体の位置を示す位置情報と、前記物体の属性を示す情報とを取得し、
前記属性情報に基づいて、前記各物体に関連する他の物体の情報である関連情報を取得し、
前記撮影方向と前記位置情報とに基づいて、前記各物体の表示位置を算出し、
前記各物体の表示位置に基づいて、前記関連情報の表示位置を算出し、
前記関連情報の表示位置に基づいて、前記関連情報の画像を生成する
前記映像及び前記画像を表示する、
情報表示方法。
【請求項１】
空間中における一又は複数の物体を撮影したカメラから得られる映像に情報を付加して、表示可能な情報表示装置であって、
前記空間中での前記カメラの撮影方向を推定する推定部と、
前記空間中における前記物体の位置を示す位置情報と、前記物体の属性を示す情報とを格納する第１格納部と、
前記物体に関連する他の物体の情報である関連情報を格納する第２格納部と、
前記映像に含まれる一又は複数の物体の各々について、前記第１格納部から、各物体の前記位置情報と、前記属性情報とを抽出する第１抽出部と、
前記属性情報に基づいて、前記第２格納部から、前記各物体に関連する物体の前記関連情報を抽出する第２抽出部と、
前記撮影方向と前記位置情報とに基づいて、前記各物体の表示位置を算出する第１算出部と、
前記各物体の表示位置に基づいて、前記関連情報の表示位置を算出する第２算出部と、
前記関連情報の表示位置に基づいて、前記関連情報の画像を生成する第１生成部と、
前記映像及び前記画像を表示する表示部と、
を備える、情報表示装置。
【請求項２】
前記映像に含まれる物体が複数ある場合、前記第２算出部は、
一方の物体の表示位置と、他方の物体の表示位置とに基づいて、前記関連情報の表示位置を算出する、請求項１記載の情報表示装置。
【請求項３】
前記第２算出部は、
選択された一方の物体の表示位置と、他方の物体の表示位置とを結ぶ軸上に、前記関連情報が配置されるように、前記関連情報の表示位置を算出する、
請求項２記載の情報表示装置。
【請求項４】
前記物体と前記関連情報との間のリンクを示す画像を生成する第２生成部をさらに備える、
請求項１から３記載の情報表示装置。
【請求項５】
ユーザにより、一方の物体の選択を受け付ける入力部を備える、
請求項２から４記載の情報表示装置。
【請求項６】
空間中における一又は複数の物体を撮影したカメラから得られる映像に情報を付加して表示可能な情報表示方法であって、
前記空間中での前記カメラの撮影方向を推定し、
前記映像に含まれる一又は複数の物体の各々について、前記空間中における前記物体の位置を示す位置情報と、前記物体の属性を示す情報とを取得し、
前記属性情報に基づいて、前記各物体に関連する他の物体の情報である関連情報を取得し、
前記撮影方向と前記位置情報とに基づいて、前記各物体の表示位置を算出し、
前記各物体の表示位置に基づいて、前記関連情報の表示位置を算出し、
前記関連情報の表示位置に基づいて、前記関連情報の画像を生成する
前記映像及び前記画像を表示する、
情報表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−１８１７０１（Ｐ２０１２−１８１７０１Ａ）
【公開日】平成２４年９月２０日（２０１２．９．２０）
【国際特許分類】
【出願番号】特願２０１１−４４４２９（Ｐ２０１１−４４４２９）
【出願日】平成２３年３月１日（２０１１．３．１）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２４年９月２０日（２０１２．９．２０）
【国際特許分類】
【出願日】平成２３年３月１日（２０１１．３．１）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]