情報重畳表示システム
【課題】使用者との関連において適切な印刷物に関する情報を、迅速かつ簡便に、重畳表示できる情報重畳表示システムを提供すること。
【解決手段】印刷物１１０を撮像する撮像部１０４と、印刷物１１０を特定する画像認識部１０６と、電子情報と印刷物情報とを格納する印刷物情報格納部１２２と、印刷物情報を表示する電子情報表示部１０１と、印刷物情報を重畳的に表示する半透過光学素子１０２と、識別情報を入力する識別情報入力部１３０と、識別情報に基づいて表示される印刷物情報を選択する識別情報判断部１４０とを有し、撮像部１０４と電子情報表示部１０１と半透過光学素子１０２と識別情報判断部１４０とは携帯情報端末１００に備えられ、印刷物情報格納部１２２は、コンピュータ１２０に備えられ、画像認識部１０６と識別情報判断部１４０とは、それぞれ携帯情報端末１００とコンピュータ１２０とのいずれか一方に備えられている。
【解決手段】印刷物１１０を撮像する撮像部１０４と、印刷物１１０を特定する画像認識部１０６と、電子情報と印刷物情報とを格納する印刷物情報格納部１２２と、印刷物情報を表示する電子情報表示部１０１と、印刷物情報を重畳的に表示する半透過光学素子１０２と、識別情報を入力する識別情報入力部１３０と、識別情報に基づいて表示される印刷物情報を選択する識別情報判断部１４０とを有し、撮像部１０４と電子情報表示部１０１と半透過光学素子１０２と識別情報判断部１４０とは携帯情報端末１００に備えられ、印刷物情報格納部１２２は、コンピュータ１２０に備えられ、画像認識部１０６と識別情報判断部１４０とは、それぞれ携帯情報端末１００とコンピュータ１２０とのいずれか一方に備えられている。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報重畳表示システムに関し、特に印刷された媒体やプリントされた媒体に関する情報を、使用者との関連における情報保護（セキュリティ）に鑑みて重畳的に表示するシステムに関する。
【背景技術】
【０００２】
近年、一人の人間が複数のコンピュータを使用するネットワーク社会、いわゆるユビキタス・ネットワーク社会が提唱されている。ユビキタス・ネットワーク社会では、インターネット等の情報ネットワークに、いつでも、どこからでもアクセスできる環境が実現できる。このようなアクセスに使う情報端末は、パソコンに限られず、例えば携帯電話等も用いることができる。
【０００３】
また、携帯電話も通話とディスプレイ認識とを同時に行なえる表示機能付き携帯情報装置としての構成が提案されている（例えば、特許文献１参照。）。特許文献１に開示されている構成では、小型のディスプレイをホログラム素子により遠方に拡大投影する。これにより、例えば通話をしながら表示画像情報を見ることができる。さらに、ホログラム素子を介して遠方の物体の透過像を同時に観察できる。この表示機能付き携帯情報装置は、実視野の像に重畳させてデジタル情報を表示する、いわゆるシースルービュアー（ｓｅｅ−ｔｈｒｏｕｇｈ ｖｉｅｗｅｒ）として用いることができる。
【０００４】
【特許文献１】特開２００１−３０８９９７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
紙媒体に印刷された書籍、地図、またはプリントされたデジタル写真等を見ることは、日常良く行なわれている。このような書籍、地図、写真等は、直接、人間が印刷またはプリントされている紙媒体等の物理的実体に触ることできる。このため、例えば、書籍の頁をめくる触感、いわゆるタンジブル（ｔａｎｇｉｂｌｅ）な感覚を認知できる。このようなタンジブルな感覚を介して情報を得ることは、人間にとって自然なことであり、非常に重要である。
【０００６】
また、紙媒体に一旦印刷またはプリントされた情報は、その内容を更新することができない。このため、例えば、テーマパークの印刷された案内地図を見ているとき、乗り物の現在の混雑状況をリアルタイムに得ることができない。
【０００７】
上述したように表示機能付き携帯情報装置は、シースルービュアーとして用いることができる。従来技術の表示機能付き携帯情報装置では、単に、使用者がホログラム素子を透過して実視野の物体を観察するのみである。このとき、使用者が、観察している物体に関連する後発的に付加された情報、例えば最新情報をホログラム素子を介して表示させたいときがある。
【０００８】
しかしながら、従来技術の表示機能付き携帯情報装置は、観察している物体を認識する機能を有していない。この結果、使用者が、意図的に観察している物体に関連する画像情報を選択、検索しなければならない。このため、従来技術の表示機能付き携帯情報装置では、迅速、簡便に観察物体に関する後発的に付加された情報を得ることができない。
【０００９】
また、観察物体に関する情報は、一般情報と個人情報とに大別できる。一般情報は、誰でもアクセスできる情報である。これに対して、個人情報は、特定の許可された人間のみがアクセスできる情報である。従って、不特定の人間は個人情報にアクセスできないように制限する必要がある。
【００１０】
さらに、携帯情報装置は、複数の異なる使用態様が考えられる。例えば、携帯情報装置が特定の個人用装置のときは、使用者と携帯情報装置とが一対一に対応している。このとき、使用者以外の人間が、この個人用の携帯情報装置を無制限に使用できることは情報のセキュリティの観点から望ましくない。また、携帯情報装置が汎用装置のときは、複数の使用者が一台の携帯情報装置を共有して使用する。このとき、携帯情報装置が汎用装置のとき、多数の使用者が特定の個人に関する個人情報を見ることができるのはセキュリティの観点から望ましくない。
【００１１】
本発明は、上記に鑑みてなされたものであって、印刷物に関する情報、特に使用者との関連において適切な情報を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示できる情報重畳表示システムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
上述した課題を解決し、目的を達成するために、第１の本発明によれば、関連する電子情報を有する印刷物を撮像する撮像部と、撮像された印刷物を画像認識により特定する画像認識部と、電子情報と電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、少なくとも特定された印刷物に関する印刷物情報を表示する電子情報表示部と、電子情報表示部に表示された印刷物情報を印刷物の実視野に重畳的に表示する半透過光学素子と、使用者を特定するための識別情報を入力する識別情報入力部と、識別情報に基づいて電子情報表示部が表示する少なくとも前記印刷物情報を選択する識別情報判断部とを有し、少なくとも撮像部と電子情報表示部と半透過光学素子と識別情報入力部とは携帯情報端末に備えられ、印刷物情報格納部は、携帯情報端末と通信可能なコンピュータに備えられ、画像認識部と識別情報判断部とは、それぞれ携帯情報端末とコンピュータとのいずれか一方に備えられていることを有することを特徴とする情報重畳表示システムを提供できる。
【００１３】
また、本発明の好ましい態様によれば、印刷物は、印刷物情報格納部に格納されているデジタル版下に基づいて紙媒体に印刷された書籍物であり、印刷物情報格納部は、書籍物に関連するサーバーコンピュータ内に設けられていることが望ましい。
【００１４】
また、本発明の好ましい態様によれば、識別情報判断部は、サーバーコンピュータ内に設けられていることが望ましい。
【００１５】
また、本発明の好ましい態様によれば、識別情報判断部は、携帯情報端末内に設けられていることが望ましい。
【００１６】
また、本発明の好ましい態様によれば、印刷物は、印刷物情報格納部に格納されている電子情報であるデジタルファイルに基づいて紙媒体に印刷されたデジタル写真であることが望ましい。
【００１７】
また、本発明の好ましい態様によれば、コンピュータは、電子情報と印刷物情報とに基づいて所定の演算処理を行なう演算部を有し、電子情報表示部は、演算された結果を表示することが望ましい。
【００１８】
また、本発明の好ましい態様によれば、識別情報判断部は、コンピュータ内に設けられていることが望ましい。
【００１９】
また、本発明の好ましい態様によれば、識別情報判断部は、携帯情報端末内に設けられていることが望ましい。
【００２０】
また、本発明の好ましい態様によれば、コンピュータ内の印刷物情報格納部に格納されている印刷物情報は、コンピュータに接続されている入力装置またはコンピュータとは異なる他のコンピュータから書換え可能に構成されていることが望ましい。
【００２１】
また、第２の本発明によれば、関連する電子情報を有する印刷物を撮像する撮像部と、撮像された印刷物を特定する情報を有する画像特定部と、画像特定部を認識して情報を再生する情報再生部と、電子情報と電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、少なくとも特定された印刷物に関する印刷物情報を表示する電子情報表示部と、電子情報表示部に表示された印刷物情報を印刷物の実視野に重畳的に表示する半透過光学素子と、使用者を特定するための識別情報を入力する識別情報入力部と、識別情報に基づいて電子情報表示部が表示する少なくとも印刷物情報を選択する識別情報判断部とを有し、少なくとも撮像部と電子情報表示部と半透過光学素子と識別情報入力部は携帯情報端末に備えられ、識別情報判断部は、携帯情報端末部とコンピュータとのいずれか一方に備えられ、印刷物情報格納部は、携帯情報端末と通信可能なコンピュータに備えられ、画像特定部は、印刷物に備えられていることを特徴とする情報重畳表示システムを提供できる。
【００２２】
また、本発明の好ましい態様によれば、画像特定部は、印刷物の内容を符号化したパターンを備えることが望ましい。
【００２３】
また、本発明の好ましい態様によれば、画像特定部は、印刷物の内容を格納しているＲＦＩＤを備えることが望ましい。
【発明の効果】
【００２４】
第１の本発明の構成において、情報重畳表示システムの使用者は、携帯情報端末の半透過光学素子を透過して印刷物を観察する。ここで、「印刷物」とは、関連する電子情報に基づいて紙媒体に印刷、プリントされた書籍、地図、デジタル写真等をいう。なお、印刷物は、紙媒体に限られず、これに類似する媒体、例えば、樹脂シート、金属シート等に印刷されたものでも良い。また、撮像部は、使用者が観察している印刷物を撮像する。画像認識部は、撮像された印刷物に対して、パターンマッチング等の画像処理を行って画像認識を行なう。これにより、印刷物の内容を特定できる。次に、印刷物情報格納部に格納されている印刷物情報のうち、特定された印刷物に関する印刷物情報が取得される。電子情報表示部は、取得された印刷物情報を表示する。そして、半透過光学素子は、電子情報表示部に表示された印刷物情報を印刷物の実視野に重畳的に表示する。また、電子情報の内容と印刷物情報の内容とは、一般情報と個人情報とに大別される。上述したように、一般情報は、誰でもアクセスできる情報である。これに対して、個人情報は、特定の許可された人間のみがアクセスできる情報である。本発明では、まず、携帯情報端末の使用者は、識別情報入力部に識別情報を入力する。そして、識別情報判断部は、入力された識別情報に基づいて電子情報表示部が表示する少なくとも印刷物情報を選択する。これにより、電子情報と印刷物情報とのうち、入力した識別情報に対応した情報、例えば個人情報を表示できる。従って、使用者とは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物に重畳して、後発的に付加された最新の印刷物情報のうち使用者との関連において適切な情報を表示できる。このため、使用者が、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物に関する情報、特に使用者との関連において適切な情報を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示できる。このように、使用者は、観察している印刷物に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００２５】
また、第２の本発明では、印刷された書籍、地図、またはプリントされたデジタル写真は、印刷物自身を特定するための画像特定部を有している。画像特定部の例として、２次元パターンやＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）を用いることができる。２次元パターンには、この印刷物を特定するデータを記録させておく。撮像部は、印刷物と共に、画像特定部である２次元パターンを撮像する。これにより、パターンマッチング等を行なわないで、迅速に印刷物を特定できる。ＲＦＩＤの場合も同様に、ＲＦＩＤに印刷物を特定するデータを記録しておく。そして、ＲＦＩＤは、電波や電磁波で読み取り器と交信する。これにより、パターンマッチング等を行なわないで、迅速にデジタル写真を特定できる。また、携帯情報端末の使用者は、識別情報入力部から識別情報を入力する。そして、識別情報判断部は、入力された識別情報に基づいて電子情報表示部が表示する少なくとも印刷物情報を選択する。これにより、電子情報と印刷物情報とのうち、入力した識別情報に対応した情報、例えば個人情報を表示できる。このように、使用者は、観察している印刷物に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。この結果、観察している印刷物に重畳して、後発的に付加された最新の印刷物情報のうち識別情報に対応した情報を表示できる。
【００２６】
このように、本発明に係る情報重畳表示システムによれば、印刷物に関する情報、特に使用者との関連において適切な情報を、を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示できるという効果を奏する。
【発明を実施するための最良の形態】
【００２７】
以下に、本発明に係る情報重畳表示システムの実施例を図面に基づいて詳細に説明する。なお、この実施例によりこの発明が限定されるものではない。
【実施例１】
【００２８】
図１は、本発明の実施例１に係る情報重畳表示システムの概略構成を示す図である。使用者ＯＢＳは、携帯情報端末１００を用いて印刷物１１０を観察する。印刷物１１０は書籍物、例えば、テーマパークの案内地図である。案内地図は、デジタル版下に基づいて紙媒体に印刷されている。このテーマパークの運営会社が、案内地図を印刷するための電子情報であるデジタル版下を有している。
【００２９】
携帯情報端末１００は、撮像部１０４と、電子情報表示部１０１と、半透過光学素子１０２とを有する。撮像部１０４として、小型カメラを用いることができる。電子情報表示部１０１として、液晶表示パネルや有機ＥＬパネルを用いることができる。また、半透過光学素子１０２は、ホログラム素子を用いることができる。図２−１、図２−２は、携帯情報端末１００の斜視図である。携帯情報端末１００は、さらに、識別情報入力部１３０を備えている。識別情報入力部１３０は、数字キー、記号キー、アルファベットキー等から構成される、いわゆるテン（１０）キーである。半透過光学素子１０２は、印刷物１１０からの光を透過し、電子情報表示部１０１からの光を使用者ＯＢＳの方向へ反射する。これにより、半透過光学素子１０２は、電子情報表示部１０１に表示された印刷物１１０に関する印刷物情報を印刷物１１０の実視野に重畳的に表示する。
【００３０】
図３−１は、携帯情報端末１００を上面からみた構成を示す。図３−２は、携帯情報端末１００の断面構成を示す。図３−３は、携帯情報端末１００を底面から見た構成を示す。図３−１、図３−３に示すように、撮像部１０４は、光学レンズと、撮像デバイスとから構成されている。撮像デバイスは、例えば２次元ＣＣＤを用いることができる。
【００３１】
また、図３−２に示すように、使用者ＯＢＳは、半透過光学素子１０２を透過して印刷物１１０を実視野で観察する。同時に、電子情報表示部１０１に表示された印刷物情報の像は、半透過光学素子１０２により使用者ＯＢＳの方向へ反射される。これにより、使用者ＯＢＳは、印刷物１１０を実視野で観察しつつ、重畳して印刷物情報を認識できる。
【００３２】
図４は、印刷物情報を実視野に重畳して表示する手順を示すフローチャートである。なお、識別情報の判断についての詳細な手順は後述する。このため、図４においては、情報表示の大まかな手順を説明する。また、図５は、本実施例に係る情報重畳表示システムの機能ブロック図である。まず、図４に基づいて手順を説明し、その後、図５の機能ブロックを説明する。図４のステップＳ４０１において、撮像部１０４は、印刷物１１０を撮像する。ステップＳ４０２において、パターンマッチング部１０５は、印刷物１１０の画像データに基づいてパターンマッチング処理を行なう。そして、ステップＳ４０２において、画像認識部１０６は、パターンマッチング結果に基づいて、印刷物１１０の内容を特定する。ステップＳ４０４において、印刷物情報格納部１２２に格納されている印刷物情報のうち、特定された印刷物１１０の印刷物情報が取得される。ステップＳ４０５において、取得された印刷物情報が電子情報表示部１０１に表示される。表示された印刷物情報は、半透過光学素子１０２により実視野に重畳的に表示される。
【００３３】
次に、図５を参照して、説明を続ける。図５において、携帯情報端末１００とサーバーコンピュータ１２０とは無線通信可能に構成されている。上述のように、サーバーコンピュータ１２０は、テーマパークの運営会社が管理している。まず、使用者ＯＢＳは、識別情報入力部１３０を用いて予め決められている識別情報を入力する。識別情報は、ＩＤ番号、パスワードなどであり、数字、アルファベット、記号、またはこれらの組み合わせから構成されている。例えば、携帯情報端末１００が携帯電話の機能を兼用しているとき、電話番号を識別情報とすることができる。このように、携帯情報端末１００は、使用者ＯＢＳのみが使用する特定の個人用機器である。撮像部１０４は、印刷物１１０を撮像する。そして、携帯情報端末１００の入出力部１０３は、サーバーコンピュータ１２０とのデータの送受信を行なう。撮像部１０４で撮像された印刷物１１０の画像データは、サーバーコンピュータ１２０へ送信される。
【００３４】
サーバーコンピュータ１２０は、パターンマッチング部１０５と、画像認識部１０６と、印刷物情報格納部１２２とを有する。印刷物情報格納部１２２は、さらに、デジタル版下１２３と、版下用情報データベース１２４と、最新情報データベース１２５とから構成されている。パターンマッチング部１０５は、印刷物１１０の画像データに基づいてパターンマッチング処理を行なう。画像認識部１０６は、パターンマッチングの結果に基づいて、印刷物１１０の内容を特定する。
【００３５】
テーマパークの運営会社は、このテーマパークの案内地図に加えて、その他の多くの書籍、地図等を紙媒体に印刷して発行する。デジタル版下１２３は、このように発行される版下が電子情報として格納されているデータベースである。また、版下用情報データベース１２４は、デジタル版下１２３を管理するための電子情報が格納されている。さらに、最新情報データベース１２５には、電子情報に対して後発的に付加された印刷物情報が格納されている。具体的には、最新情報データベース１２５には、例えばテーマパークの現在の日時における情報がリアルタイムで更新されて格納されている。
【００３６】
本実施例では、サーバーコンピュータ１２０が、パターンマッチング部１０５と画像認識部１０６とを備えている。一般に、デジタル版下１２３により発行される書籍、地図等は、非常に数量が多い。特に、大規模なテーマパークになると、デジタル版下１２３と版下用情報データベース１２４とに格納されている情報は、数百〜数万種に及ぶこともある。この場合、撮像部１０４で撮像した印刷物１１０を画像認識により特定する際に非常に大量の電子情報データを参照して比較する必要がある。本実施例では、画像認識部１０６がサーバーコンピュータ１２０内に設けられている。大容量の電子情報を管理するサーバーコンピュータ１２０は、高速な処理速度を有している。サーバーコンピュータ１２０内の画像認識部１０６は、デジタル版下１２３と版下用情報データベース１２４とに格納されている複数の電子情報を参照する。そして、画像認識部１０６は、撮像部１０４で撮像された画像データと一致するデータをデジタル版下１２３と版下用情報データベース１２４とで検索する。これにより、高効率で印刷物１１０を特定できる。
【００３７】
次に、特定された印刷物１１０に対応する最新の印刷物情報が最新情報データベース１２５から取得される。取得される最新の印刷物情報は、例えば、テーマパーク内の乗り物の現在の待ち時間（混雑状況）や、テーマパーク内で当日に開催されるイベントの開催場所や開催時間等である。取得された最新の印刷物情報は、入出力部１０３を介して、携帯情報端末１００へ無線で送られる。
【００３８】
携帯情報端末１０７の表示情報決定部１０７は、最新の印刷物情報のうち、使用者ＯＢＳが必要とする情報を選択、決定する。例えば、使用者ＯＢＳは、携帯情報端末１００に対して、テーマパーク内の大人用の乗り物に関する情報を知りたいことを入力しておく。入力方法は、携帯情報端末１００のテンキー１３０による方法、操作ボタン（不図示）による方法などがある。
【００３９】
また、使用者ＯＢＳが注視している印刷物１１０上の位置に設けられている乗り物の情報を選択するように構成することもできる。例えば、視線検出技術を用いて、使用者ＯＢＳが注視している印刷物１１０上の注視点位置を検出する。上述の画像認識結果と注視点位置とから、使用者ＯＢＳが意図的に見ている部分が判別できる。この結果、注視点位置及びその近傍に設けられている施設、例えば乗り物、レストラン、休憩所等の最新情報を表示できる。
【００４０】
電子情報表示部１０１は、決定された印刷物情報を表示する。表示された印刷物情報の像は、半透過光学素子１０２により使用者ＯＢＳの方向へ反射される。使用者ＯＢＳは、印刷物１１０を実視野で観察しながら、重畳して最新の情報を認識できる。このように、本実施例によれば、観察している実視野の印刷物１１０に重畳して、後発的に付加された最新の印刷物情報を表示できる。例えば、図１に示すように、テーマパークの案内地図を見ながら、「乗り物Ａ：５分待ち」及び「乗り物Ｂ：１５分待ち」というリアルタイムの文字情報が重畳的に表示される。このため、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。このように、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報を、迅速かつ簡便に得ることができる。
【００４１】
印刷物情報の表示についてさらに説明を続ける。使用者ＯＢＳは、テーマパークの案内地図である印刷物１１０を見ている。そして、使用者ＯＢＳは、テーマパークの特別なサービスを受けことができる会員、例えば年間会員であるときを考える。テーマパークは、年間会員に対してのみ、電子クーポンの発行を行なっている。年間会員は、電子クーポンを使用して、特定のアトラクションに乗ること、テーマパーク内で飲食すること等の特典を得られる。最新情報データベース１２５には、上述の印刷物情報に加えて、電子クーポンのような使用者ＯＢＳに関する個人情報も格納されている。ここで、使用者ＯＢＳとは異なる他の人間が、携帯情報端末１００を使用したときを考える。他の人間は、テーマパークの年間会員ではない。従って、他の人間が携帯情報端末１００を使用したときに、使用者ＯＢＳにのみ与えられている特典である電子クーポンを認識してしまうのは望ましくない。
【００４２】
上述したように、本実施例の携帯情報端末１００は、特定の個人（使用者ＯＢＳ）用機器である。このため、使用者ＯＢＳとは異なる他の人間は、携帯情報端末１００を使用できないように制限している。これにより、他の人間が、携帯情報端末１００を介して使用者ＯＢＳの個人情報、例えば電子クーポンの情報にアクセスすることを防止できる。次に、このような表示する情報を制限する手順について説明する。
【００４３】
まず、図６は、携帯情報端末１００が誰でも使用できる汎用機器のとき、すなわち識別情報入力部１３０を備えていないときの情報表示の手順を示すフローチャートである。この手順では、表示する情報は制限されていない例である。ステップＳ６０１において、使用者ＯＢＳは、携帯情報端末１００の電源をＯＮにする。ステップＳ６０２において、上述したように最新情報データベース１２５に格納されている印刷物情報が取得される。このとき、取得される印刷物情報は、全て一般情報あり、全ての人が制限なしに見ることができる内容である。一般情報とは、例えば、上述のような「乗り物のリアルタイムの混雑状況」等である。ステップＳ６０３において、最新情報データベース１２５から取得された情報が電子情報表示部１０１に表示される。ステップＳ６０４において、他のモードへ移行するか、否かの判断がされる。「他のモード」とは、半透過光学素子１０２による重畳表示をしない使用状態をいう。「他のモード」の具体例としては、音声通話状態、ウェブ（Ｗｏｒｌｄ Ｗｉｄｅ Ｗｅｂ）鑑賞状態、または撮影状態等がある。「音声通話状態」とは、半透過光学素子１０２を用いずに、携帯情報端末１００を電話として用いる状態をいう。「ウェブ鑑賞状態」とは、半透過光学素子１０２を用いずに、携帯情報端末１００をインターネットやイントラネットに接続している状態をいう。「撮影状態」とは、半透過光学素子１０２を用いずに、携帯情報端末１００が備えるカメラ（不図示）で被写体を撮影している状態をいう。
【００４４】
ステップＳ６０４の判断結果が偽（Ｎｏ）のときは、ステップＳ６０２へ戻って、一般情報をさらに取得する。使用態様（モード）が変わらずに、さらに別の一般情報を取得するときは、例えば、テーマパークの案内地図上の異なる位置（場所）を観察したとき等である。このように、使用者ＯＢＳが携帯情報端末１００を介して見ている位置が移動したときは、ステップＳ６０２において、新たな一般情報をさらに取得する。なお、使用者ＯＢＳによっては、見ている位置が移動した場合であっても、同じ情報を取得したい場合がある。このような場合は、例えば、以下のような処理を新たに設ければ良い。ステップＳ６０１の直後に、表示形態についての設定を行なうステップを設ける。このステップで、見ている位置に関係なく常に同じ表示を行なうか、見ている位置に応じた情報表示を行なうかの設定を行なう。また、ステップＳ６０２では、取得できる対象の情報を、上記設定に応じて異ならせる処理を設けておく。なお、見ている位置が移動していない場合は、上記設定は無視される処理とする。さて、処理が進行して、ステップＳ６０４での判断結果が偽（Ｎｏ）の場合、ステップＳ６０２に戻る。ここで、ステップＳ６０４からステップＳ６０２に戻る間に、見ている位置が移動したか否かを検出するステップを設ける。そして、見ている位置が移動したか否かに応じて、情報（移動または固定）を付与するステップを設ける。見ている位置が移動していなかった場合は、その情報（固定）が付与されてステップＳ６０２へ戻る。この場合、見ている位置が移動していないので、直前と同じ種類の情報であって、しかも更新された情報の取得が行なわれる。次に、見ている位置が変化した場合、その情報（移動）が付与されてステップＳ６０２に戻る。ステップＳ６０２では、見ている位置が変化したという情報を受けて、表示形態についての設定状態がチェックされる。ここで、「見ている位置に応じた情報表示を取得する」という設定になっている場合は、直前と異なる情報、即ち、現在見ている位置に応じた情報の取得が行なわれる。一方、「見ている位置に関係なく常に同じ表示を行なう」という設定になっている場合は、直前と同じ種類の情報であって、しかも更新された情報の取得が行なわれる。以上のようにすれば、見ている位置が移動した場合であっても、同じ情報を取得することができる。
【００４５】
ステップＳ６０４の判断結果が真（Ｙｅｓ）のときは、ステップＳ６０５において、選択したモードを実行する。モード（使用態様）の選択は、携帯情報端末のテンキー１３０による選択、または操作ボタン（不図示）による選択により行なう。ステップＳ６０６において、携帯情報端末１００の電源をＯＦＦにするか、否かを判断する。ステップＳ６０６の判断結果が偽のときは、ステップＳ６０２へ戻る。ステップＳ６０６の判断結果が真のときは、そのまま終了する。
【００４６】
図６で示したように、携帯情報端末１００が誰でも使用できる汎用機器のとき、すなわち識別情報入力部１３０を備えていないときは、使用者ＯＢＳに関わらず、常に一般情報を重畳表示できる。次に、本実施例の携帯情報端末１００を用いるときの情報表示の手順について説明する。
【００４７】
図７は、本実施例の携帯情報端末１００による情報表示の手順を示すフローチャートである。ステップＳ７０１において、使用者ＯＢＳは携帯情報端末１００の電源をＯＮにする。ステップＳ７０２において、使用者ＯＢＳは、識別情報入力部１３０であるテンキーにより識別情報を入力する。識別情報は、数字、アルファベット、記号、またはこれらの組み合わせから構成されているＩＤ番号、例えば電話番号である。ステップ７０３において、識別情報判断部１４０は、携帯情報端末１００の使用を許可するか、否かを判断する。識別情報判断部１４０は、携帯情報端末１００内に備えられている。識別情報判断部１４０は、予め登録されているＩＤ番号と、入力されたＩＤ番号とを比較する。比較結果が一致したときは、携帯情報端末１００の使用を許可する。比較結果が不一致のときは、携帯情報端末１００の使用を不許可とする。ステップＳ７０３の判断結果が偽（Ｎｏ）のときは、そのまま終了する。ステップＳ７０３の判断結果が真（Ｙｅｓ）のときは、ステップＳ７０４へ進む。ステップＳ７０４において、上述したように最新情報データベース１２５に格納されている印刷物情報が取得される。このとき、取得される印刷物情報は、全て一般情報あり、全ての人が制限なしに見ることができる内容である。一般情報とは、例えば、上述のような「乗り物のリアルタイムの混雑状況」等である。さらに、ステップＳ７０５において、最新情報データベース１２５に格納されている個人情報が取得される。ここで、個人情報とは、例えば使用者ＯＢＳが加入している年間会員のみに発行される電子クーポン等である。そして、ステップＳ７０７において、他のモードへ移行するか、否かが判断される。ステップＳ７０７の判断結果が偽のときは、ステップＳ７０４へ戻る。ステップＳ７０４へ戻るときは、さらに別の一般情報を取得するときである。例えば、テーマパークの案内地図上の異なる位置（場所）を観察したときである。このように、使用者ＯＢＳが携帯情報端末１００を介して見ている位置が移動したときは、ステップ７０４において、新たな一般情報をさらに取得する。ステップＳ７０７の判断結果が真のときは、ステップＳ７０８において、選択した他のモードが実行される。他のモードは、上述したような、音声通話状態、Ｗｅｂ鑑賞状態、または撮影状態等をいう。そして、ステップＳ７０９において、携帯情報端末１００の電源をＯＦＦするか、否かについて判断する。ステップＳ７０９の判断結果が偽のときは、ステップＳ７０４へ戻る。ステップＳ７０９の判断結果が真のときは、そのまま終了する。
【００４８】
本実施例によれば、電子情報と印刷物情報とのうち、入力した識別情報に対応した情報、例えば電子クーポンのような個人情報を表示できる。また、識別情報が入力されないとき、または不正確な識別情報が入力されたときは、携帯情報端末１００自体を使用することができない。従って、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物１１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。このように、本実施例では、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、本実施例では、印刷物１１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物１１０の実視野に重畳的に表示できる。従って、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００４９】
なお、本実施例において、識別情報判断部１４０を、サーバーコンピュータ１２０内に設ける構成とすることもできる。
【実施例２】
【００５０】
図８は、本発明の実施例２に係る情報重畳表示システムの機能ブロック図である。本実施例では、携帯情報端末２００がパターンマッチング部１０５と画像認識部１０６とを備えている点、及びサーバーコンピュータ２２０が識別情報判断部１４０を備えている点が上記実施例１と異なる。また、本実施例の携帯情報端末２００は、上記実施例１と同様に、使用者ＯＢＳのみが使用できる特定の個人用機器である。上記実施例１と同一の部分には同一の符号を付し、重複する説明は省略する。
【００５１】
上記実施例１では、テーマパークの運営会社が有しているサーバーコンピュータ１２０が大容量のデータベースを参照しながら、パターンマッチングと画像認識を行なっている。これに対して、画像認識するときに、参照、比較する電子情報の数が比較的少ないときもある。このときは、本実施例のように、パターンマッチング部１０５と画像認識部１０６とを携帯情報端末２００内に設けておく。携帯情報端末２００と、サーバーコンピュータ２２０とは、無線通信可能に構成されている。
【００５２】
サーバーコンピュータ２２０が備えているデジタル版下１２３と版下用情報データベース１２４とは、記憶容量が実施例１のサーバーコンピュータ１２０に比較して小さい。即ち、格納されているデジタル版下の種類が比較的少ない。このときは、パターンマッチングによる画像認識処理を行なう演算処理速度は、実施例１のような高速度なＣＰＵを用いる必要はない。
【００５３】
そこで、本実施例のように、携帯情報端末２００がパターンマッチング部１０５と画像認識部１０６を備えるように構成する。これにより、携帯情報端末２００側で効率良く画像認識により印刷物１１０を特定できる。
【００５４】
さらに、サーバーコンピュータ２２０が識別情報判断部１４０を備えている。使用者ＯＢＳは、携帯情報端末２００の識別情報入力部１３０から識別情報を入力する。入力された識別情報は、サーバーコンピュータ２２０へ送信される。サーバーコンピュータ２２０内の識別情報判断部１４０は、上記実施例１と同様に、入力されたＩＤ番号と予め登録されているＩＤ番号との比較を行なう。識別情報判断部１４０の機能は、上記実施例１と同様であるので重複する説明は省略する。多数のＩＤ番号が登録されているときは、大きな記憶容量を必要とする。そして、本実施例のように、サーバーコンピュータ２２０が識別情報判断部１４０を備えていると、高速なＣＰＵにより効率良くＩＤ番号の比較処理を行なうことができる。
【００５５】
これにより、印刷物１１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物１１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００５６】
なお、本実施例において、識別情報判断部１４０を、携帯情報端末２００内に設ける構成とすることもできる。
【実施例３】
【００５７】
図９は、本発明の実施例３に係る情報重畳表示システムの概略構成を示す図である。また、本実施例の携帯情報端末２００は、上記実施例１と同様に、使用者ＯＢＳのみが使用できる特定の個人用機器である。使用者ＯＢＳは、携帯情報端末３００を用いて印刷物１１０を観察する。印刷物１１０は、上記実施例１、実施例２と同様に、テーマパークの案内地図である。案内地図は、デジタル版下に基づいて紙媒体に印刷されている。このテーマパークの運営会社が、案内地図を印刷するための電子情報であるデジタル版下を有している。なお、上記各実施例と同一の部分には、同一の符号を付し、重複する説明は省略する。
【００５８】
本実施例では、印刷物１１０が画像特定部１１１を備えている。画像特定部１１１は、撮像部１０４で撮像された印刷物１１０を特定する情報を備えている。画像特定部１１１は、印刷物１１０の内容を符号化したパターン、例えば２次元パターンを用いることができる。２次元パターンには、このテーマパークの案内地図を特定するデータを記録しておく。
【００５９】
図１０は、本実施例の情報重畳表示システムの機能ブロック図である。撮像部１０４は、印刷物１１０と共に、画像特定部１１１である２次元パターンを撮像する。携帯情報端末３００は、情報再生部８０１を備えている。情報再生部８０１は、撮像された画像特定部１１１の符号化されたパターンに基づいて、パターンの情報を再生する。これにより、パターンマッチング等を行なわないで、迅速にテーマパークの案内地図を特定できる。
【００６０】
特定された印刷物１１０に関する最新の印刷物情報が、サーバーコンピュータ１２０内の最新情報データベース１２５から取得される。取得された最新の印刷物情報は、無線通信により、携帯情報端末３００へ送信される。携帯情報端末３００は、受信した最新の印刷物情報を入出力部１０３を介して、表示情報決定部１０７へ送る。そして、上記実施例１と同様に、印刷物１１０の実視野に重畳して印刷物情報が表示される。このように、本実施例によれば、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報を、迅速かつ簡便に得ることができる。この結果、観察している印刷物１１０に重畳して、後発的に付加された最新の印刷物情報を表示できる。
【００６１】
また、画像特定部１１１として、ＲＦＩＤを用いることもできる。この場合は、ＲＦＩＤに案内地図を特定するデータを記録しておく。そして、ＲＦＩＤは、携帯情報端末３００内の読み取り器（不図示）と電波や電磁波で交信する。これにより、パターンマッチング等を行なわないで、迅速に案内地図を特定できる。ＲＦＩＤを用いるときは、パターンを読み取る必要がない。このため、印刷物１１０の裏側にＲＦＩＤを貼付しておけば良い。なお、情報再生部８０１は、サーバーコンピュータ１２０内に設けても良い。
【００６２】
また、本実施例では、携帯情報端末３００が識別情報判断部１４０を備えている。識別情報判断部１４０は、上記実施例１と同様に、入力された識別情報を判断する。そして、識別情報判断部１４０は、携帯情報端末部３００の使用許可を判断する。使用が許可されたときは、印刷部情報格納部１２２に格納されている電子情報と印刷物情報とのうち一般情報と個人情報とが重畳表示される。使用が不許可のときは、携帯情報端末１００そのものを使用できない。これにより、印刷物１１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物１１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００６３】
なお、本実施例において、識別情報判断部１４０を、サーバーコンピュータ１２０内に設ける構成とすることもできる。
【実施例４】
【００６４】
図１１は、本発明の実施例４に係る情報重畳表示システムの概略構成を示す図である。本実施例において、使用者ＯＢＳが観察する印刷物４１０は、デジタル写真である。また、本実施例の携帯情報端末４００は、不特定の複数の人間が共有して使用できる汎用機器である。デジタル写真は、画像データベース４１３に格納されている電子情報であるデジタルファイルに基づいて紙媒体に印刷されている。上記各実施例１と同一の部分には、同一の符号を付し、重複する説明は省略する。
【００６５】
近年、デジタルカメラによる撮影者は、デジタル写真をデジタルファイルに基づいてパーソナルコンピュータにより管理することが多い。例えば、使用者ＯＢＳは、コンピュータ４２０を所有している。コンピュータ４２０には、ディスプレイ４２１と、キーボード４１６とが接続されている。携帯情報端末４００とコンピュータ４２０とは無線通信可能に構成されている。なお、無線通信に限られず、例えばＵＳＢケーブルを用いて携帯情報端末４００とコンピュータ４２０とを接続することもできる。
【００６６】
図１２は、本実施例の情報重畳表示システムの機能ブロック図である。本実施例では、携帯情報端末４００が識別情報判断部１４０を備えている。デジタルカメラ４１５で撮影された画像のデジタルファイルは、画像データベース４１３に格納されている。使用者ＯＢＳは、コンピュータ４２０を操作し、プリントするデジタル写真のデジタルファイルを選択する。選択されたデジタルファイルの情報は、カラープリンタ４３０に出力される。カラープリンタ４３０は、選択されたデジタルファイルに応じたデジタル写真をシート紙にプリントする。
【００６７】
なお、デジタル写真は、街頭のプリント店舗において銀塩プリントして作成しても良い。このときは、画像データベース４１３内のデジタルファイルを外部記憶媒体に記憶する。外部記憶媒体は、ＣＤ、ＭＯディスク、ＤＶＤ、ＵＳＢメモリ、フレキシブルディスク等を用いることができる。そして、プリント店舗において、外部記憶媒体に基づいて、デジタル写真を銀塩プリントする。
【００６８】
使用者ＯＢＳは、携帯情報端末４００を用いて、プリントされた印刷物４１０を観察する。撮像部１０４は、印刷物４１０を撮像する。そして、携帯情報端末４００の入出力部１０３は、コンピュータ４２０とのデータの送受信を行なう。撮像部１０４で撮像された印刷物１１０の画像データは、コンピュータ４２０へ送信される。
【００６９】
コンピュータ４２０は、パターンマッチング部１０５と、画像認識部１０６と、演算部４２４と、画像データベース４１３と、画像関連情報データベース４１４とを備えている。画像データベース４１３と、画像関連情報データベース４１４とで印刷物情報格納部１２２を構成する。パターンマッチング部１０５は、印刷物４１０の画像データに基づいてパターンマッチング処理を行なう。画像認識部１０６は、パターンマッチングの結果に基づいて、印刷物４１０の内容を特定する。
【００７０】
上述のように、印刷物情報格納部は、画像データベース４１３に加えて、画像関連情報データベース４１４を備えている。画像関連情報データベース４１４には、電子情報に対して後発的に付加された印刷物情報が格納されている。画像関連情報データベース４１４に格納されている印刷物情報は、コンピュータ４２０に接続されている入力装置、例えばキーボード４１６から書換え可能に構成されている。また、画像関連情報データベース４１４に格納されている印刷物情報は、コンピュータ４２０とは異なる他のコンピュータ４１８ａ、４１８ｂ、４１８ｃから書換え可能に構成されている。使用者ＯＢＳが所有するコンピュータ４２０と、他のコンピュータ４１８ａ、４１８ｂ、４１８ｃとは、例えばインターネット４１７や専用回線で接続されている。
【００７１】
これにより、キーボード４１６により、このデジタル写真に関する最新情報を入力できる。また、インターネット４１７を介して、使用者ＯＢＳとは異なる他の人間が、このデジタル写真に関する最新情報や関連する情報を画像関連情報データベース４１４に書き込むことができる。例えば、デジタル写真の被写体である「光太郎」氏は、使用者ＯＢＳの友人であるとする。光太郎氏は、自らのコンピュータから、使用者ＯＢＳのコンピュータ４２０へインターネット４１７を介してアクセスする。そして、画像関連情報データベース４１４内へ、最新情報を書き込む。最新情報の例としては、光太郎氏の近況コメントや「今度、一緒に食事をしましょう」というメッセージを挙げることができる。このメッセージは、個人情報に相当する。従って、特定の個人、例えば光太郎氏の友人のみが、メッセージを見ることができることが望ましい。これに対して、不特定の第三者は、メッセージを見ることができないように制限する必要がある。
【００７２】
画像認識部１０６により印刷物４１０が特定される。そして、特定された印刷物４１０に関する最新の印刷物情報が画像関連情報データベース４１４から取得される。取得された最新の印刷物情報は、携帯情報端末４００へ出力される。携帯情報端末４００は、上述した各実施例と同様に、印刷物４１０の実視野に重畳して、後発的に付加された印刷物情報を表示する。この結果、使用者は、携帯情報端末により、デジタル写真を実視野で見ながら、重畳して、例えばデジタル写真に撮影されている人物の近況情報を認識できる。
【００７３】
また、本実施例では、画像認識部１０６は、コンピュータ４２０内に設けられている。デジタルファイルによりプリントされるデジタル写真は、数百〜数千種に及ぶこともある。この場合、撮像部１０４で撮像した印刷物４１０を画像認識により特定するときに大量の電子情報データ（デジタルファイル）を参照する必要がある。本実施例では、画像認識部１０６がコンピュータ４２０内に設けられている。このため、コンピュータ４２０が備えるＣＰＵにより高効率で印刷物４１０を特定できる。
【００７４】
また、コンピュータ４２０は、電子情報と印刷物情報とに基づいて所定の演算処理を行なう演算部４２４を有している。そして、電子情報表示部１０１は、演算された結果を表示する。デジタル写真を撮影したときに、例えば被写体である光太郎氏の年令、撮影日時等の電子情報は、画像データベース４１３に格納されている。例を挙げると、被写体の光太郎氏は、撮影時に２０才であるとする。このデジタル写真を、撮影時から１０年後に、使用者ＯＢＳが観察しているときを考える。演算部４２４は、デジタル写真を見ている現在の日時情報と、画像データベース４１３に格納されている電子情報のうち撮影日時とを比較する。そして、演算部４２４は、撮影日時から現在までに経過している年月数（本例の場合は、「１０年」）を演算する。そして、電子情報表示部１０１は、被写体の人物の現在の年令（２０才＋１０年＝３０才）を表示する。このように、携帯情報端末４００の使用者は、１０年前に撮影されたデジタル写真を実視野で見ながら、被写体の人物が現在３０才であるという印刷物情報を重畳的に認識できる。なお、演算部４２４は、被写体の年令に限られず、種々の数値演算を行なうことができる。演算部４２４が行なう演算処理の内容は、予めコンピュータ４２０に設定しておくことができる。
【００７５】
図１３は、本実施例における情報表示の手順を示すフローチャートである。上述したように、携帯情報端末４００は、不特定の複数の人間が共有して使用できる汎用機器である。ステップＳ８０１において、携帯情報端末４００の電源をＯＮする。ステップＳ８０２において、使用者ＯＢＳは識別情報、例えば電話番号（ＩＤ番号）を識別情報入力部１３０から入力する。ステップＳ８０３において、識別情報判断部１４０は、識別情報が入力されたか、否かを判断する。そして、携帯情報端末４００を特定の個人用機器として使用するか、否かを判断する。このため、識別情報判断部１４０は、予め登録されているＩＤ番号と、入力されたＩＤ番号とを比較する。ステップＳ８０３の判断結果が真のとき、即ち比較結果が一致したときは、ステップＳ８０４へ進む。これに対して、ステップＳ８０３の判断結果が偽のとき、即ち比較結果が不一致のときは、ステップＳ８１０へ進む。なお、ステップＳ８０３において、比較結果が不一致のときとは、識別情報そのものが入力されないときを含む。
【００７６】
ステップＳ８０４において、印刷物情報格納部１２２に格納されている電子情報と印刷物情報とのうち、一般情報が取得される。さらに、ステップＳ８０５において、印刷物情報格納部１２２に格納されている電子情報と印刷物情報とのうち、個人情報が取得される。例えば、光太郎氏の友人である使用者ＯＢＳは、個人情報である上述のメッセージを実視野に重畳して認識できる。ステップＳ８０６において、電子情報表示部１０１は、一般情報と個人情報とを表示する。携帯情報端末４００は、ステップＳ８０３において、使用者ＯＢＳの個人用機器して使用許可されている。このため、使用者ＯＢＳは、印刷物４１０であるデジタル写真に関連している一般情報と個人情報との両方の情報を重畳表示により認識できる。ステップＳ８０７において、他のモードへ移行するか、否かが判断される。ステップＳ８０７の判断結果が真のとき、ステップＳ８０８において選択したモードを実行する。「他のモード」は、上記実施例１と同様に、音声通話状態、Ｗｅｂ鑑賞状態、撮影状態等である。ステップＳ８０７の判断結果が偽のとき、ステップＳ８０４へ戻る。また、ステップＳ８０９において、電源をＯＦＦするか、否かについて判断する。ステップＳ８０９の判断結果が真のとき、終了する。ステップＳ８０９の判断結果が偽のとき、ステップＳ８０４へ戻る。
【００７７】
ステップＳ８０３の判断結果が偽のとき、ステップＳ８１０へ進む。ステップ８１０において、印刷物情報格納部１２２に格納されている電子情報と印刷物情報とにおける一般情報が取得される。ステップＳ８１１において、電子情報表示部１０１は、取得された一般情報を表示する。ステップＳ８１２において、他のモードへ移行するか、否かが判断される。ステップＳ８１２の判断結果が真のとき、ステップＳ８１３において選択したモードを実行する。「他のモード」は。上記実施例１と同様に、音声通話状態、Ｗｅｂ鑑賞状態、撮影状態等である。ステップＳ８１２の判断結果が偽のとき、ステップＳ８１０へ戻る。また、ステップＳ８１４において、電源をＯＦＦするか、否かについて判断する。ステップＳ８１４の判断結果が真のとき、終了する。ステップＳ８１４の判断結果が偽のとき、ステップＳ８１０へ戻る。
【００７８】
図１３に示した手順によれば、汎用機器である携帯情報端末４００を２通りの重畳表示使用態様で用いることができる。第１の重畳表示使用態様は、携帯情報端末４００を特定の個人用機器として用いる態様である。第１の重畳表示使用態様は、ステップＳ８０４からステップＳ８０９までが対応する。また、第２の重畳表示使用態様は、携帯情報端末４００を汎用機器として用いる態様である。第２の重畳表示使用態様は、ステップＳ８１０からステップＳ８１４までが対応する。
【００７９】
このように、本実施例によれば、使用者ＯＢＳが正しい識別情報を入力したときは、特定の個人用機器として携帯情報端末４００を使用できる。このときは、使用者ＯＢＳは、印刷物情報格納部１２２に格納されている情報のうち、一般情報と個人情報との両方の情報を重畳表示させることができる。これに対して、使用者ＯＢＳが誤った識別情報を入力したとき、または識別情報を入力しないとき、汎用機器として携帯情報端末４００を使用できる。このときは、使用者ＯＢＳは、印刷物情報格納部１２２に格納されている情報のうち、一般情報のみを重畳表示させることができる。
【００８０】
本実施例によれば、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物４１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。本実施例では、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物４１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物４１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００８１】
なお、本実施例において、識別情報判断部１４０を、コンピュータ４２０内に設ける構成とすることもできる。
【実施例５】
【００８２】
図１４は、本発明の実施例５に係る情報重畳表示システムの機能ブロック図である。本実施例では、携帯情報端末５００がパターンマッチング部１０５と画像認識部１０６とを備えている点、及びコンピュータ５２０が識別情報判断部１４０を備えている点が上記実施例４と異なる。識別情報判断部１４０の機能は、上記実施例４と同様である。上記実施例４と同一の部分には同一の符号を付し、重複する説明は省略する。
【００８３】
上記実施例４では、使用者ＯＢＳが所有しているコンピュータ４２０が画像データベース４１３を参照しながら、パターンマッチングと画像認識を行なっている。これに対して、画像認識するときに、参照、比較する電子情報の数が比較的少ないときもある。このときは、パターンマッチングによる画像認識処理を行なう演算処理速度は、実施例４のような高速度なＣＰＵを用いる必要はない。このため、本実施例のように、パターンマッチング部１０５と画像認識部１０６とを携帯情報端末５００内に設けておく。これにより、携帯情報端末５００側で効率良く画像認識により印刷物１１０を特定できる。
【００８４】
また、本実施例によれば、図１３で示した手順で情報を表示する。このため、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物４１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。従って、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物４１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物４１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００８５】
なお、本実施例において、識別情報判断部１４０を、携帯情報端末５００内に設ける構成とすることもできる。
【実施例６】
【００８６】
図１５は、本発明の実施例６に係る情報重畳表示システムの概略構成を示す図である。使用者ＯＢＳは、携帯情報端末６００を用いて印刷物４１０を観察する。印刷物４１０は、上記実施例５と同様に、デジタル写真である。なお、上記各実施例と同一の部分には、同一の符号を付し、重複する説明は省略する。
【００８７】
本実施例では、印刷物４１０が画像特定部４１１を備えている。画像特定部４１１は、撮像部１０４で撮像された印刷物４１０を特定する情報を備えている。画像特定部４１１は、印刷物４１０の内容を符号化したパターン、例えば２次元パターンを用いることができる。２次元パターンには、このデジタル写真を特定するデータを記録しておく。また、コンピュータ５２０が識別情報判断部１４０を備えている。識別情報判断部１４０の機能は、上記実施例４と同様である。
【００８８】
図１５において、撮像部１０４は、印刷物４１０と共に、画像特定部４１１である２次元パターンを撮像する。携帯情報端末６００は、情報再生部８０１を備えている。情報再生部８０１は、撮像された画像特定部４１１の符号化されたパターンに基づいて、パターンの情報を再生する。これにより、パターンマッチング等を行なわないで、迅速にデジタル写真を特定できる。
【００８９】
特定された印刷物４１０に関する最新の印刷物情報が、コンピュータ５２０内の画像関連情報データベース４１４から取得される。取得された最新の印刷物情報は、無線通信により、携帯情報端末６００へ送信される。携帯情報端末６００は、受信した最新の印刷物情報を入出力部１０３を介して、表示情報決定部１０７へ送る。そして、上記実施例５と同様に、印刷物４１０の実視野に重畳して印刷物情報が表示される。このように、本実施例によれば、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報を、迅速かつ簡便に得ることができる。この結果、観察している印刷物４１０に重畳して、後発的に付加された最新の印刷物情報を表示できる。
【００９０】
また、画像特定部４１１として、ＲＦＩＤを用いることもできる。この場合は、ＲＦＩＤにデジタル写真を特定するデータを記録しておく。そして、ＲＦＩＤは、携帯情報端末６００内の読み取り器（不図示）と電波や電磁波で交信する。これにより、パターンマッチング等を行なわないで、迅速にデジタル写真を特定できる。ＲＦＩＤを用いるときは、パターンを読み取る必要がない。このため、印刷物４１０の裏側にＲＦＩＤを貼付しておけば良い。
【００９１】
また、本実施例によれば、図１３で示した手順で情報を表示する。このため、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物４１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。従って、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物４１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物４１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００９２】
なお、本実施例において、識別情報判断部１４０を、携帯情報端末６００内に設ける構成とすることもできる。
【００９３】
以上説明した実施例では、テーマパークの案内地図やデジタル写真を例にしている。しかしながら、本発明はこれに限られず、博物館の館内地図やショッピングモールの案内地図にも適用できる。博物館の館内地図を印刷物として観察するときは、例えば、館内に展示されている展示物の情報を重畳表示できる。さらに、デジタル版下を有している印刷物であれば、印刷物として書籍に適用しても良い。特に、書籍では、異なる書籍であっても、類似した画像や文章が存在する。この場合は、本実施例を組み合わせること、即ち、本の特定にＲＦＩＤ等のタグ情報を用い、ページの特定にパターンマッチングを用いることが効果的である。また、連載等の類似した画像を排除してゆくことが可能である。このようにすれば、書籍の特定が素早く行なえるので、マッチングがより高速に実現できる。また、印刷物が書籍のときの個人情報の例としては、電子クーポンを挙げることができる。この電子クーポンは、雑誌等の書籍において特定の読者、例えば定期購読者のみに発信される。このように、本発明は電子情報を有する印刷物であれば、その内容にとらわれず幅広く適用できる。
【００９４】
さらに、実視野に重畳的に表示される情報は、文字情報に限られない。例えば、静止画、動画などの映像情報を重畳的に表示できる。また、アイコン、天気記号、地理記号等の記号を重畳的に表示してもよい。加えて、上記各実施例において、印刷物情報格納部は、携帯情報端末内に設けても良い。
【００９５】
また、携帯情報端末とコンピュータとの通信形態は、ＰＨＳ回線、携帯電話回線、有線ＬＡＮ、無線ＬＡＮ、赤外線通信等のデータ転送を行なえるものであれば良い。さらに、上記各実施例では、使用者が携帯情報端末を手で把持して使用する例を説明している。しかしながら、本発明は、携帯情報端末に限られず、例えば公知のヘッドマウントディスプレイに上述した携帯情報端末の機能を持たせても良い。
【００９６】
また、識別情報はテンキーにより入力される情報に限られない。例えば、識別情報入力部１３０として指紋センサーを用いることができる。このときは、個人情報へアクセスできる者の指紋を予めコンピュータ内に格納しておく。そして、携帯情報端末を使用する者は、その指紋を指紋センサーで読み取らせる。これにより、携帯情報端末の使用許可等が判断される。なお、識別情報は指紋に限られず、網膜パターン、声紋等の個人を特定できる情報であれば良い。このように、本発明は、その趣旨を逸脱しない範囲で、適宜変形が可能である。
【産業上の利用可能性】
【００９７】
以上のように、本発明に係る情報重畳表示システムは、印刷物に関する情報、特に使用者との関連において適切な情報を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示するときに有用である。
【図面の簡単な説明】
【００９８】
【図１】実施例１に係る情報重畳表示システムの概略構成図である。
【図２−１】携帯情報端末の斜視構成図である。
【図２−２】携帯情報端末の他の斜視構成図である。
【図３−１】携帯情報端末の上面図である。
【図３−２】携帯情報端末の断面図である。
【図３−３】携帯情報端末の底面図である。
【図４】実施例１において情報を重畳表示する手順を示すフローチャートである。
【図５】実施例１の情報重畳表示システムの機能ブロック図である。
【図６】携帯情報端末が一般機器のときの重畳表示の手順を示すフローチャートである。
【図７】携帯情報端末が特定の個人用機器のときの重畳表示の手順を示すフローチャートである。
【図８】実施例２の情報重畳表示システムの機能ブロック図である。
【図９】実施例３に係る情報重畳表示システムの概略構成図である。
【図１０】実施例３の情報重畳表示システムの機能ブロック図である。
【図１１】実施例４に係る情報重畳表示システムの概略構成図である。
【図１２】実施例４の情報重畳表示システムの機能ブロック図である。
【図１３】携帯情報端末が汎用機器のときの重畳表示の手順を示すフローチャートである。
【図１４】実施例５の情報重畳表示システムの機能ブロック図である。
【図１５】実施例６の情報重畳表示システムの機能ブロック図である。
【符号の説明】
【００９９】
１００ 携帯情報端末
１０１ 電子情報表示部
１０２ 半透過光学素子
１０３ 入出力部
１０４ 撮像部
１０５ パターンマッチング部
１０６ 画像認識部
１０７ 表示情報決定部
１１０ 印刷物
１１１ 画像特定部
１２０ サーバーコンピュータ
１２２ 印刷物情報格納部
１２３ デジタル版下
１２４ 版下用情報データベース
１２５ 最新情報データベース
１３０ 識別情報入力部
１４０ 識別情報判断部
２００ 携帯情報端末
２２０ サーバーコンピュータ
３００ 携帯情報端末
４００ 携帯情報端末
４１０ 印刷物
４１１ 画像特定部
４１３ 演算部
４１５ デジタルカメラ
４１６ キーボード
４１７ インターネット
４１８a、４１８ｂ、４１８ｃ 他のコンピュータ
４２０ コンピュータ
４２１ ディスプレイ
４２４ 演算部
４３０ プリンタ
５００ 携帯情報端末
５２０ コンピュータ
６００ 情報携帯端末
８０１ 情報再生部
【技術分野】
【０００１】
本発明は、情報重畳表示システムに関し、特に印刷された媒体やプリントされた媒体に関する情報を、使用者との関連における情報保護（セキュリティ）に鑑みて重畳的に表示するシステムに関する。
【背景技術】
【０００２】
近年、一人の人間が複数のコンピュータを使用するネットワーク社会、いわゆるユビキタス・ネットワーク社会が提唱されている。ユビキタス・ネットワーク社会では、インターネット等の情報ネットワークに、いつでも、どこからでもアクセスできる環境が実現できる。このようなアクセスに使う情報端末は、パソコンに限られず、例えば携帯電話等も用いることができる。
【０００３】
また、携帯電話も通話とディスプレイ認識とを同時に行なえる表示機能付き携帯情報装置としての構成が提案されている（例えば、特許文献１参照。）。特許文献１に開示されている構成では、小型のディスプレイをホログラム素子により遠方に拡大投影する。これにより、例えば通話をしながら表示画像情報を見ることができる。さらに、ホログラム素子を介して遠方の物体の透過像を同時に観察できる。この表示機能付き携帯情報装置は、実視野の像に重畳させてデジタル情報を表示する、いわゆるシースルービュアー（ｓｅｅ−ｔｈｒｏｕｇｈ ｖｉｅｗｅｒ）として用いることができる。
【０００４】
【特許文献１】特開２００１−３０８９９７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
紙媒体に印刷された書籍、地図、またはプリントされたデジタル写真等を見ることは、日常良く行なわれている。このような書籍、地図、写真等は、直接、人間が印刷またはプリントされている紙媒体等の物理的実体に触ることできる。このため、例えば、書籍の頁をめくる触感、いわゆるタンジブル（ｔａｎｇｉｂｌｅ）な感覚を認知できる。このようなタンジブルな感覚を介して情報を得ることは、人間にとって自然なことであり、非常に重要である。
【０００６】
また、紙媒体に一旦印刷またはプリントされた情報は、その内容を更新することができない。このため、例えば、テーマパークの印刷された案内地図を見ているとき、乗り物の現在の混雑状況をリアルタイムに得ることができない。
【０００７】
上述したように表示機能付き携帯情報装置は、シースルービュアーとして用いることができる。従来技術の表示機能付き携帯情報装置では、単に、使用者がホログラム素子を透過して実視野の物体を観察するのみである。このとき、使用者が、観察している物体に関連する後発的に付加された情報、例えば最新情報をホログラム素子を介して表示させたいときがある。
【０００８】
しかしながら、従来技術の表示機能付き携帯情報装置は、観察している物体を認識する機能を有していない。この結果、使用者が、意図的に観察している物体に関連する画像情報を選択、検索しなければならない。このため、従来技術の表示機能付き携帯情報装置では、迅速、簡便に観察物体に関する後発的に付加された情報を得ることができない。
【０００９】
また、観察物体に関する情報は、一般情報と個人情報とに大別できる。一般情報は、誰でもアクセスできる情報である。これに対して、個人情報は、特定の許可された人間のみがアクセスできる情報である。従って、不特定の人間は個人情報にアクセスできないように制限する必要がある。
【００１０】
さらに、携帯情報装置は、複数の異なる使用態様が考えられる。例えば、携帯情報装置が特定の個人用装置のときは、使用者と携帯情報装置とが一対一に対応している。このとき、使用者以外の人間が、この個人用の携帯情報装置を無制限に使用できることは情報のセキュリティの観点から望ましくない。また、携帯情報装置が汎用装置のときは、複数の使用者が一台の携帯情報装置を共有して使用する。このとき、携帯情報装置が汎用装置のとき、多数の使用者が特定の個人に関する個人情報を見ることができるのはセキュリティの観点から望ましくない。
【００１１】
本発明は、上記に鑑みてなされたものであって、印刷物に関する情報、特に使用者との関連において適切な情報を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示できる情報重畳表示システムを提供することを目的とする。
【課題を解決するための手段】
【００１２】
上述した課題を解決し、目的を達成するために、第１の本発明によれば、関連する電子情報を有する印刷物を撮像する撮像部と、撮像された印刷物を画像認識により特定する画像認識部と、電子情報と電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、少なくとも特定された印刷物に関する印刷物情報を表示する電子情報表示部と、電子情報表示部に表示された印刷物情報を印刷物の実視野に重畳的に表示する半透過光学素子と、使用者を特定するための識別情報を入力する識別情報入力部と、識別情報に基づいて電子情報表示部が表示する少なくとも前記印刷物情報を選択する識別情報判断部とを有し、少なくとも撮像部と電子情報表示部と半透過光学素子と識別情報入力部とは携帯情報端末に備えられ、印刷物情報格納部は、携帯情報端末と通信可能なコンピュータに備えられ、画像認識部と識別情報判断部とは、それぞれ携帯情報端末とコンピュータとのいずれか一方に備えられていることを有することを特徴とする情報重畳表示システムを提供できる。
【００１３】
また、本発明の好ましい態様によれば、印刷物は、印刷物情報格納部に格納されているデジタル版下に基づいて紙媒体に印刷された書籍物であり、印刷物情報格納部は、書籍物に関連するサーバーコンピュータ内に設けられていることが望ましい。
【００１４】
また、本発明の好ましい態様によれば、識別情報判断部は、サーバーコンピュータ内に設けられていることが望ましい。
【００１５】
また、本発明の好ましい態様によれば、識別情報判断部は、携帯情報端末内に設けられていることが望ましい。
【００１６】
また、本発明の好ましい態様によれば、印刷物は、印刷物情報格納部に格納されている電子情報であるデジタルファイルに基づいて紙媒体に印刷されたデジタル写真であることが望ましい。
【００１７】
また、本発明の好ましい態様によれば、コンピュータは、電子情報と印刷物情報とに基づいて所定の演算処理を行なう演算部を有し、電子情報表示部は、演算された結果を表示することが望ましい。
【００１８】
また、本発明の好ましい態様によれば、識別情報判断部は、コンピュータ内に設けられていることが望ましい。
【００１９】
また、本発明の好ましい態様によれば、識別情報判断部は、携帯情報端末内に設けられていることが望ましい。
【００２０】
また、本発明の好ましい態様によれば、コンピュータ内の印刷物情報格納部に格納されている印刷物情報は、コンピュータに接続されている入力装置またはコンピュータとは異なる他のコンピュータから書換え可能に構成されていることが望ましい。
【００２１】
また、第２の本発明によれば、関連する電子情報を有する印刷物を撮像する撮像部と、撮像された印刷物を特定する情報を有する画像特定部と、画像特定部を認識して情報を再生する情報再生部と、電子情報と電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、少なくとも特定された印刷物に関する印刷物情報を表示する電子情報表示部と、電子情報表示部に表示された印刷物情報を印刷物の実視野に重畳的に表示する半透過光学素子と、使用者を特定するための識別情報を入力する識別情報入力部と、識別情報に基づいて電子情報表示部が表示する少なくとも印刷物情報を選択する識別情報判断部とを有し、少なくとも撮像部と電子情報表示部と半透過光学素子と識別情報入力部は携帯情報端末に備えられ、識別情報判断部は、携帯情報端末部とコンピュータとのいずれか一方に備えられ、印刷物情報格納部は、携帯情報端末と通信可能なコンピュータに備えられ、画像特定部は、印刷物に備えられていることを特徴とする情報重畳表示システムを提供できる。
【００２２】
また、本発明の好ましい態様によれば、画像特定部は、印刷物の内容を符号化したパターンを備えることが望ましい。
【００２３】
また、本発明の好ましい態様によれば、画像特定部は、印刷物の内容を格納しているＲＦＩＤを備えることが望ましい。
【発明の効果】
【００２４】
第１の本発明の構成において、情報重畳表示システムの使用者は、携帯情報端末の半透過光学素子を透過して印刷物を観察する。ここで、「印刷物」とは、関連する電子情報に基づいて紙媒体に印刷、プリントされた書籍、地図、デジタル写真等をいう。なお、印刷物は、紙媒体に限られず、これに類似する媒体、例えば、樹脂シート、金属シート等に印刷されたものでも良い。また、撮像部は、使用者が観察している印刷物を撮像する。画像認識部は、撮像された印刷物に対して、パターンマッチング等の画像処理を行って画像認識を行なう。これにより、印刷物の内容を特定できる。次に、印刷物情報格納部に格納されている印刷物情報のうち、特定された印刷物に関する印刷物情報が取得される。電子情報表示部は、取得された印刷物情報を表示する。そして、半透過光学素子は、電子情報表示部に表示された印刷物情報を印刷物の実視野に重畳的に表示する。また、電子情報の内容と印刷物情報の内容とは、一般情報と個人情報とに大別される。上述したように、一般情報は、誰でもアクセスできる情報である。これに対して、個人情報は、特定の許可された人間のみがアクセスできる情報である。本発明では、まず、携帯情報端末の使用者は、識別情報入力部に識別情報を入力する。そして、識別情報判断部は、入力された識別情報に基づいて電子情報表示部が表示する少なくとも印刷物情報を選択する。これにより、電子情報と印刷物情報とのうち、入力した識別情報に対応した情報、例えば個人情報を表示できる。従って、使用者とは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物に重畳して、後発的に付加された最新の印刷物情報のうち使用者との関連において適切な情報を表示できる。このため、使用者が、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物に関する情報、特に使用者との関連において適切な情報を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示できる。このように、使用者は、観察している印刷物に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００２５】
また、第２の本発明では、印刷された書籍、地図、またはプリントされたデジタル写真は、印刷物自身を特定するための画像特定部を有している。画像特定部の例として、２次元パターンやＲＦＩＤ（Ｒａｄｉｏ Ｆｒｅｑｕｅｎｃｙ Ｉｄｅｎｔｉｆｉｃａｔｉｏｎ）を用いることができる。２次元パターンには、この印刷物を特定するデータを記録させておく。撮像部は、印刷物と共に、画像特定部である２次元パターンを撮像する。これにより、パターンマッチング等を行なわないで、迅速に印刷物を特定できる。ＲＦＩＤの場合も同様に、ＲＦＩＤに印刷物を特定するデータを記録しておく。そして、ＲＦＩＤは、電波や電磁波で読み取り器と交信する。これにより、パターンマッチング等を行なわないで、迅速にデジタル写真を特定できる。また、携帯情報端末の使用者は、識別情報入力部から識別情報を入力する。そして、識別情報判断部は、入力された識別情報に基づいて電子情報表示部が表示する少なくとも印刷物情報を選択する。これにより、電子情報と印刷物情報とのうち、入力した識別情報に対応した情報、例えば個人情報を表示できる。このように、使用者は、観察している印刷物に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。この結果、観察している印刷物に重畳して、後発的に付加された最新の印刷物情報のうち識別情報に対応した情報を表示できる。
【００２６】
このように、本発明に係る情報重畳表示システムによれば、印刷物に関する情報、特に使用者との関連において適切な情報を、を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示できるという効果を奏する。
【発明を実施するための最良の形態】
【００２７】
以下に、本発明に係る情報重畳表示システムの実施例を図面に基づいて詳細に説明する。なお、この実施例によりこの発明が限定されるものではない。
【実施例１】
【００２８】
図１は、本発明の実施例１に係る情報重畳表示システムの概略構成を示す図である。使用者ＯＢＳは、携帯情報端末１００を用いて印刷物１１０を観察する。印刷物１１０は書籍物、例えば、テーマパークの案内地図である。案内地図は、デジタル版下に基づいて紙媒体に印刷されている。このテーマパークの運営会社が、案内地図を印刷するための電子情報であるデジタル版下を有している。
【００２９】
携帯情報端末１００は、撮像部１０４と、電子情報表示部１０１と、半透過光学素子１０２とを有する。撮像部１０４として、小型カメラを用いることができる。電子情報表示部１０１として、液晶表示パネルや有機ＥＬパネルを用いることができる。また、半透過光学素子１０２は、ホログラム素子を用いることができる。図２−１、図２−２は、携帯情報端末１００の斜視図である。携帯情報端末１００は、さらに、識別情報入力部１３０を備えている。識別情報入力部１３０は、数字キー、記号キー、アルファベットキー等から構成される、いわゆるテン（１０）キーである。半透過光学素子１０２は、印刷物１１０からの光を透過し、電子情報表示部１０１からの光を使用者ＯＢＳの方向へ反射する。これにより、半透過光学素子１０２は、電子情報表示部１０１に表示された印刷物１１０に関する印刷物情報を印刷物１１０の実視野に重畳的に表示する。
【００３０】
図３−１は、携帯情報端末１００を上面からみた構成を示す。図３−２は、携帯情報端末１００の断面構成を示す。図３−３は、携帯情報端末１００を底面から見た構成を示す。図３−１、図３−３に示すように、撮像部１０４は、光学レンズと、撮像デバイスとから構成されている。撮像デバイスは、例えば２次元ＣＣＤを用いることができる。
【００３１】
また、図３−２に示すように、使用者ＯＢＳは、半透過光学素子１０２を透過して印刷物１１０を実視野で観察する。同時に、電子情報表示部１０１に表示された印刷物情報の像は、半透過光学素子１０２により使用者ＯＢＳの方向へ反射される。これにより、使用者ＯＢＳは、印刷物１１０を実視野で観察しつつ、重畳して印刷物情報を認識できる。
【００３２】
図４は、印刷物情報を実視野に重畳して表示する手順を示すフローチャートである。なお、識別情報の判断についての詳細な手順は後述する。このため、図４においては、情報表示の大まかな手順を説明する。また、図５は、本実施例に係る情報重畳表示システムの機能ブロック図である。まず、図４に基づいて手順を説明し、その後、図５の機能ブロックを説明する。図４のステップＳ４０１において、撮像部１０４は、印刷物１１０を撮像する。ステップＳ４０２において、パターンマッチング部１０５は、印刷物１１０の画像データに基づいてパターンマッチング処理を行なう。そして、ステップＳ４０２において、画像認識部１０６は、パターンマッチング結果に基づいて、印刷物１１０の内容を特定する。ステップＳ４０４において、印刷物情報格納部１２２に格納されている印刷物情報のうち、特定された印刷物１１０の印刷物情報が取得される。ステップＳ４０５において、取得された印刷物情報が電子情報表示部１０１に表示される。表示された印刷物情報は、半透過光学素子１０２により実視野に重畳的に表示される。
【００３３】
次に、図５を参照して、説明を続ける。図５において、携帯情報端末１００とサーバーコンピュータ１２０とは無線通信可能に構成されている。上述のように、サーバーコンピュータ１２０は、テーマパークの運営会社が管理している。まず、使用者ＯＢＳは、識別情報入力部１３０を用いて予め決められている識別情報を入力する。識別情報は、ＩＤ番号、パスワードなどであり、数字、アルファベット、記号、またはこれらの組み合わせから構成されている。例えば、携帯情報端末１００が携帯電話の機能を兼用しているとき、電話番号を識別情報とすることができる。このように、携帯情報端末１００は、使用者ＯＢＳのみが使用する特定の個人用機器である。撮像部１０４は、印刷物１１０を撮像する。そして、携帯情報端末１００の入出力部１０３は、サーバーコンピュータ１２０とのデータの送受信を行なう。撮像部１０４で撮像された印刷物１１０の画像データは、サーバーコンピュータ１２０へ送信される。
【００３４】
サーバーコンピュータ１２０は、パターンマッチング部１０５と、画像認識部１０６と、印刷物情報格納部１２２とを有する。印刷物情報格納部１２２は、さらに、デジタル版下１２３と、版下用情報データベース１２４と、最新情報データベース１２５とから構成されている。パターンマッチング部１０５は、印刷物１１０の画像データに基づいてパターンマッチング処理を行なう。画像認識部１０６は、パターンマッチングの結果に基づいて、印刷物１１０の内容を特定する。
【００３５】
テーマパークの運営会社は、このテーマパークの案内地図に加えて、その他の多くの書籍、地図等を紙媒体に印刷して発行する。デジタル版下１２３は、このように発行される版下が電子情報として格納されているデータベースである。また、版下用情報データベース１２４は、デジタル版下１２３を管理するための電子情報が格納されている。さらに、最新情報データベース１２５には、電子情報に対して後発的に付加された印刷物情報が格納されている。具体的には、最新情報データベース１２５には、例えばテーマパークの現在の日時における情報がリアルタイムで更新されて格納されている。
【００３６】
本実施例では、サーバーコンピュータ１２０が、パターンマッチング部１０５と画像認識部１０６とを備えている。一般に、デジタル版下１２３により発行される書籍、地図等は、非常に数量が多い。特に、大規模なテーマパークになると、デジタル版下１２３と版下用情報データベース１２４とに格納されている情報は、数百〜数万種に及ぶこともある。この場合、撮像部１０４で撮像した印刷物１１０を画像認識により特定する際に非常に大量の電子情報データを参照して比較する必要がある。本実施例では、画像認識部１０６がサーバーコンピュータ１２０内に設けられている。大容量の電子情報を管理するサーバーコンピュータ１２０は、高速な処理速度を有している。サーバーコンピュータ１２０内の画像認識部１０６は、デジタル版下１２３と版下用情報データベース１２４とに格納されている複数の電子情報を参照する。そして、画像認識部１０６は、撮像部１０４で撮像された画像データと一致するデータをデジタル版下１２３と版下用情報データベース１２４とで検索する。これにより、高効率で印刷物１１０を特定できる。
【００３７】
次に、特定された印刷物１１０に対応する最新の印刷物情報が最新情報データベース１２５から取得される。取得される最新の印刷物情報は、例えば、テーマパーク内の乗り物の現在の待ち時間（混雑状況）や、テーマパーク内で当日に開催されるイベントの開催場所や開催時間等である。取得された最新の印刷物情報は、入出力部１０３を介して、携帯情報端末１００へ無線で送られる。
【００３８】
携帯情報端末１０７の表示情報決定部１０７は、最新の印刷物情報のうち、使用者ＯＢＳが必要とする情報を選択、決定する。例えば、使用者ＯＢＳは、携帯情報端末１００に対して、テーマパーク内の大人用の乗り物に関する情報を知りたいことを入力しておく。入力方法は、携帯情報端末１００のテンキー１３０による方法、操作ボタン（不図示）による方法などがある。
【００３９】
また、使用者ＯＢＳが注視している印刷物１１０上の位置に設けられている乗り物の情報を選択するように構成することもできる。例えば、視線検出技術を用いて、使用者ＯＢＳが注視している印刷物１１０上の注視点位置を検出する。上述の画像認識結果と注視点位置とから、使用者ＯＢＳが意図的に見ている部分が判別できる。この結果、注視点位置及びその近傍に設けられている施設、例えば乗り物、レストラン、休憩所等の最新情報を表示できる。
【００４０】
電子情報表示部１０１は、決定された印刷物情報を表示する。表示された印刷物情報の像は、半透過光学素子１０２により使用者ＯＢＳの方向へ反射される。使用者ＯＢＳは、印刷物１１０を実視野で観察しながら、重畳して最新の情報を認識できる。このように、本実施例によれば、観察している実視野の印刷物１１０に重畳して、後発的に付加された最新の印刷物情報を表示できる。例えば、図１に示すように、テーマパークの案内地図を見ながら、「乗り物Ａ：５分待ち」及び「乗り物Ｂ：１５分待ち」というリアルタイムの文字情報が重畳的に表示される。このため、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。このように、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報を、迅速かつ簡便に得ることができる。
【００４１】
印刷物情報の表示についてさらに説明を続ける。使用者ＯＢＳは、テーマパークの案内地図である印刷物１１０を見ている。そして、使用者ＯＢＳは、テーマパークの特別なサービスを受けことができる会員、例えば年間会員であるときを考える。テーマパークは、年間会員に対してのみ、電子クーポンの発行を行なっている。年間会員は、電子クーポンを使用して、特定のアトラクションに乗ること、テーマパーク内で飲食すること等の特典を得られる。最新情報データベース１２５には、上述の印刷物情報に加えて、電子クーポンのような使用者ＯＢＳに関する個人情報も格納されている。ここで、使用者ＯＢＳとは異なる他の人間が、携帯情報端末１００を使用したときを考える。他の人間は、テーマパークの年間会員ではない。従って、他の人間が携帯情報端末１００を使用したときに、使用者ＯＢＳにのみ与えられている特典である電子クーポンを認識してしまうのは望ましくない。
【００４２】
上述したように、本実施例の携帯情報端末１００は、特定の個人（使用者ＯＢＳ）用機器である。このため、使用者ＯＢＳとは異なる他の人間は、携帯情報端末１００を使用できないように制限している。これにより、他の人間が、携帯情報端末１００を介して使用者ＯＢＳの個人情報、例えば電子クーポンの情報にアクセスすることを防止できる。次に、このような表示する情報を制限する手順について説明する。
【００４３】
まず、図６は、携帯情報端末１００が誰でも使用できる汎用機器のとき、すなわち識別情報入力部１３０を備えていないときの情報表示の手順を示すフローチャートである。この手順では、表示する情報は制限されていない例である。ステップＳ６０１において、使用者ＯＢＳは、携帯情報端末１００の電源をＯＮにする。ステップＳ６０２において、上述したように最新情報データベース１２５に格納されている印刷物情報が取得される。このとき、取得される印刷物情報は、全て一般情報あり、全ての人が制限なしに見ることができる内容である。一般情報とは、例えば、上述のような「乗り物のリアルタイムの混雑状況」等である。ステップＳ６０３において、最新情報データベース１２５から取得された情報が電子情報表示部１０１に表示される。ステップＳ６０４において、他のモードへ移行するか、否かの判断がされる。「他のモード」とは、半透過光学素子１０２による重畳表示をしない使用状態をいう。「他のモード」の具体例としては、音声通話状態、ウェブ（Ｗｏｒｌｄ Ｗｉｄｅ Ｗｅｂ）鑑賞状態、または撮影状態等がある。「音声通話状態」とは、半透過光学素子１０２を用いずに、携帯情報端末１００を電話として用いる状態をいう。「ウェブ鑑賞状態」とは、半透過光学素子１０２を用いずに、携帯情報端末１００をインターネットやイントラネットに接続している状態をいう。「撮影状態」とは、半透過光学素子１０２を用いずに、携帯情報端末１００が備えるカメラ（不図示）で被写体を撮影している状態をいう。
【００４４】
ステップＳ６０４の判断結果が偽（Ｎｏ）のときは、ステップＳ６０２へ戻って、一般情報をさらに取得する。使用態様（モード）が変わらずに、さらに別の一般情報を取得するときは、例えば、テーマパークの案内地図上の異なる位置（場所）を観察したとき等である。このように、使用者ＯＢＳが携帯情報端末１００を介して見ている位置が移動したときは、ステップＳ６０２において、新たな一般情報をさらに取得する。なお、使用者ＯＢＳによっては、見ている位置が移動した場合であっても、同じ情報を取得したい場合がある。このような場合は、例えば、以下のような処理を新たに設ければ良い。ステップＳ６０１の直後に、表示形態についての設定を行なうステップを設ける。このステップで、見ている位置に関係なく常に同じ表示を行なうか、見ている位置に応じた情報表示を行なうかの設定を行なう。また、ステップＳ６０２では、取得できる対象の情報を、上記設定に応じて異ならせる処理を設けておく。なお、見ている位置が移動していない場合は、上記設定は無視される処理とする。さて、処理が進行して、ステップＳ６０４での判断結果が偽（Ｎｏ）の場合、ステップＳ６０２に戻る。ここで、ステップＳ６０４からステップＳ６０２に戻る間に、見ている位置が移動したか否かを検出するステップを設ける。そして、見ている位置が移動したか否かに応じて、情報（移動または固定）を付与するステップを設ける。見ている位置が移動していなかった場合は、その情報（固定）が付与されてステップＳ６０２へ戻る。この場合、見ている位置が移動していないので、直前と同じ種類の情報であって、しかも更新された情報の取得が行なわれる。次に、見ている位置が変化した場合、その情報（移動）が付与されてステップＳ６０２に戻る。ステップＳ６０２では、見ている位置が変化したという情報を受けて、表示形態についての設定状態がチェックされる。ここで、「見ている位置に応じた情報表示を取得する」という設定になっている場合は、直前と異なる情報、即ち、現在見ている位置に応じた情報の取得が行なわれる。一方、「見ている位置に関係なく常に同じ表示を行なう」という設定になっている場合は、直前と同じ種類の情報であって、しかも更新された情報の取得が行なわれる。以上のようにすれば、見ている位置が移動した場合であっても、同じ情報を取得することができる。
【００４５】
ステップＳ６０４の判断結果が真（Ｙｅｓ）のときは、ステップＳ６０５において、選択したモードを実行する。モード（使用態様）の選択は、携帯情報端末のテンキー１３０による選択、または操作ボタン（不図示）による選択により行なう。ステップＳ６０６において、携帯情報端末１００の電源をＯＦＦにするか、否かを判断する。ステップＳ６０６の判断結果が偽のときは、ステップＳ６０２へ戻る。ステップＳ６０６の判断結果が真のときは、そのまま終了する。
【００４６】
図６で示したように、携帯情報端末１００が誰でも使用できる汎用機器のとき、すなわち識別情報入力部１３０を備えていないときは、使用者ＯＢＳに関わらず、常に一般情報を重畳表示できる。次に、本実施例の携帯情報端末１００を用いるときの情報表示の手順について説明する。
【００４７】
図７は、本実施例の携帯情報端末１００による情報表示の手順を示すフローチャートである。ステップＳ７０１において、使用者ＯＢＳは携帯情報端末１００の電源をＯＮにする。ステップＳ７０２において、使用者ＯＢＳは、識別情報入力部１３０であるテンキーにより識別情報を入力する。識別情報は、数字、アルファベット、記号、またはこれらの組み合わせから構成されているＩＤ番号、例えば電話番号である。ステップ７０３において、識別情報判断部１４０は、携帯情報端末１００の使用を許可するか、否かを判断する。識別情報判断部１４０は、携帯情報端末１００内に備えられている。識別情報判断部１４０は、予め登録されているＩＤ番号と、入力されたＩＤ番号とを比較する。比較結果が一致したときは、携帯情報端末１００の使用を許可する。比較結果が不一致のときは、携帯情報端末１００の使用を不許可とする。ステップＳ７０３の判断結果が偽（Ｎｏ）のときは、そのまま終了する。ステップＳ７０３の判断結果が真（Ｙｅｓ）のときは、ステップＳ７０４へ進む。ステップＳ７０４において、上述したように最新情報データベース１２５に格納されている印刷物情報が取得される。このとき、取得される印刷物情報は、全て一般情報あり、全ての人が制限なしに見ることができる内容である。一般情報とは、例えば、上述のような「乗り物のリアルタイムの混雑状況」等である。さらに、ステップＳ７０５において、最新情報データベース１２５に格納されている個人情報が取得される。ここで、個人情報とは、例えば使用者ＯＢＳが加入している年間会員のみに発行される電子クーポン等である。そして、ステップＳ７０７において、他のモードへ移行するか、否かが判断される。ステップＳ７０７の判断結果が偽のときは、ステップＳ７０４へ戻る。ステップＳ７０４へ戻るときは、さらに別の一般情報を取得するときである。例えば、テーマパークの案内地図上の異なる位置（場所）を観察したときである。このように、使用者ＯＢＳが携帯情報端末１００を介して見ている位置が移動したときは、ステップ７０４において、新たな一般情報をさらに取得する。ステップＳ７０７の判断結果が真のときは、ステップＳ７０８において、選択した他のモードが実行される。他のモードは、上述したような、音声通話状態、Ｗｅｂ鑑賞状態、または撮影状態等をいう。そして、ステップＳ７０９において、携帯情報端末１００の電源をＯＦＦするか、否かについて判断する。ステップＳ７０９の判断結果が偽のときは、ステップＳ７０４へ戻る。ステップＳ７０９の判断結果が真のときは、そのまま終了する。
【００４８】
本実施例によれば、電子情報と印刷物情報とのうち、入力した識別情報に対応した情報、例えば電子クーポンのような個人情報を表示できる。また、識別情報が入力されないとき、または不正確な識別情報が入力されたときは、携帯情報端末１００自体を使用することができない。従って、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物１１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。このように、本実施例では、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、本実施例では、印刷物１１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物１１０の実視野に重畳的に表示できる。従って、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００４９】
なお、本実施例において、識別情報判断部１４０を、サーバーコンピュータ１２０内に設ける構成とすることもできる。
【実施例２】
【００５０】
図８は、本発明の実施例２に係る情報重畳表示システムの機能ブロック図である。本実施例では、携帯情報端末２００がパターンマッチング部１０５と画像認識部１０６とを備えている点、及びサーバーコンピュータ２２０が識別情報判断部１４０を備えている点が上記実施例１と異なる。また、本実施例の携帯情報端末２００は、上記実施例１と同様に、使用者ＯＢＳのみが使用できる特定の個人用機器である。上記実施例１と同一の部分には同一の符号を付し、重複する説明は省略する。
【００５１】
上記実施例１では、テーマパークの運営会社が有しているサーバーコンピュータ１２０が大容量のデータベースを参照しながら、パターンマッチングと画像認識を行なっている。これに対して、画像認識するときに、参照、比較する電子情報の数が比較的少ないときもある。このときは、本実施例のように、パターンマッチング部１０５と画像認識部１０６とを携帯情報端末２００内に設けておく。携帯情報端末２００と、サーバーコンピュータ２２０とは、無線通信可能に構成されている。
【００５２】
サーバーコンピュータ２２０が備えているデジタル版下１２３と版下用情報データベース１２４とは、記憶容量が実施例１のサーバーコンピュータ１２０に比較して小さい。即ち、格納されているデジタル版下の種類が比較的少ない。このときは、パターンマッチングによる画像認識処理を行なう演算処理速度は、実施例１のような高速度なＣＰＵを用いる必要はない。
【００５３】
そこで、本実施例のように、携帯情報端末２００がパターンマッチング部１０５と画像認識部１０６を備えるように構成する。これにより、携帯情報端末２００側で効率良く画像認識により印刷物１１０を特定できる。
【００５４】
さらに、サーバーコンピュータ２２０が識別情報判断部１４０を備えている。使用者ＯＢＳは、携帯情報端末２００の識別情報入力部１３０から識別情報を入力する。入力された識別情報は、サーバーコンピュータ２２０へ送信される。サーバーコンピュータ２２０内の識別情報判断部１４０は、上記実施例１と同様に、入力されたＩＤ番号と予め登録されているＩＤ番号との比較を行なう。識別情報判断部１４０の機能は、上記実施例１と同様であるので重複する説明は省略する。多数のＩＤ番号が登録されているときは、大きな記憶容量を必要とする。そして、本実施例のように、サーバーコンピュータ２２０が識別情報判断部１４０を備えていると、高速なＣＰＵにより効率良くＩＤ番号の比較処理を行なうことができる。
【００５５】
これにより、印刷物１１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物１１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００５６】
なお、本実施例において、識別情報判断部１４０を、携帯情報端末２００内に設ける構成とすることもできる。
【実施例３】
【００５７】
図９は、本発明の実施例３に係る情報重畳表示システムの概略構成を示す図である。また、本実施例の携帯情報端末２００は、上記実施例１と同様に、使用者ＯＢＳのみが使用できる特定の個人用機器である。使用者ＯＢＳは、携帯情報端末３００を用いて印刷物１１０を観察する。印刷物１１０は、上記実施例１、実施例２と同様に、テーマパークの案内地図である。案内地図は、デジタル版下に基づいて紙媒体に印刷されている。このテーマパークの運営会社が、案内地図を印刷するための電子情報であるデジタル版下を有している。なお、上記各実施例と同一の部分には、同一の符号を付し、重複する説明は省略する。
【００５８】
本実施例では、印刷物１１０が画像特定部１１１を備えている。画像特定部１１１は、撮像部１０４で撮像された印刷物１１０を特定する情報を備えている。画像特定部１１１は、印刷物１１０の内容を符号化したパターン、例えば２次元パターンを用いることができる。２次元パターンには、このテーマパークの案内地図を特定するデータを記録しておく。
【００５９】
図１０は、本実施例の情報重畳表示システムの機能ブロック図である。撮像部１０４は、印刷物１１０と共に、画像特定部１１１である２次元パターンを撮像する。携帯情報端末３００は、情報再生部８０１を備えている。情報再生部８０１は、撮像された画像特定部１１１の符号化されたパターンに基づいて、パターンの情報を再生する。これにより、パターンマッチング等を行なわないで、迅速にテーマパークの案内地図を特定できる。
【００６０】
特定された印刷物１１０に関する最新の印刷物情報が、サーバーコンピュータ１２０内の最新情報データベース１２５から取得される。取得された最新の印刷物情報は、無線通信により、携帯情報端末３００へ送信される。携帯情報端末３００は、受信した最新の印刷物情報を入出力部１０３を介して、表示情報決定部１０７へ送る。そして、上記実施例１と同様に、印刷物１１０の実視野に重畳して印刷物情報が表示される。このように、本実施例によれば、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報を、迅速かつ簡便に得ることができる。この結果、観察している印刷物１１０に重畳して、後発的に付加された最新の印刷物情報を表示できる。
【００６１】
また、画像特定部１１１として、ＲＦＩＤを用いることもできる。この場合は、ＲＦＩＤに案内地図を特定するデータを記録しておく。そして、ＲＦＩＤは、携帯情報端末３００内の読み取り器（不図示）と電波や電磁波で交信する。これにより、パターンマッチング等を行なわないで、迅速に案内地図を特定できる。ＲＦＩＤを用いるときは、パターンを読み取る必要がない。このため、印刷物１１０の裏側にＲＦＩＤを貼付しておけば良い。なお、情報再生部８０１は、サーバーコンピュータ１２０内に設けても良い。
【００６２】
また、本実施例では、携帯情報端末３００が識別情報判断部１４０を備えている。識別情報判断部１４０は、上記実施例１と同様に、入力された識別情報を判断する。そして、識別情報判断部１４０は、携帯情報端末部３００の使用許可を判断する。使用が許可されたときは、印刷部情報格納部１２２に格納されている電子情報と印刷物情報とのうち一般情報と個人情報とが重畳表示される。使用が不許可のときは、携帯情報端末１００そのものを使用できない。これにより、印刷物１１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物１１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物１１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００６３】
なお、本実施例において、識別情報判断部１４０を、サーバーコンピュータ１２０内に設ける構成とすることもできる。
【実施例４】
【００６４】
図１１は、本発明の実施例４に係る情報重畳表示システムの概略構成を示す図である。本実施例において、使用者ＯＢＳが観察する印刷物４１０は、デジタル写真である。また、本実施例の携帯情報端末４００は、不特定の複数の人間が共有して使用できる汎用機器である。デジタル写真は、画像データベース４１３に格納されている電子情報であるデジタルファイルに基づいて紙媒体に印刷されている。上記各実施例１と同一の部分には、同一の符号を付し、重複する説明は省略する。
【００６５】
近年、デジタルカメラによる撮影者は、デジタル写真をデジタルファイルに基づいてパーソナルコンピュータにより管理することが多い。例えば、使用者ＯＢＳは、コンピュータ４２０を所有している。コンピュータ４２０には、ディスプレイ４２１と、キーボード４１６とが接続されている。携帯情報端末４００とコンピュータ４２０とは無線通信可能に構成されている。なお、無線通信に限られず、例えばＵＳＢケーブルを用いて携帯情報端末４００とコンピュータ４２０とを接続することもできる。
【００６６】
図１２は、本実施例の情報重畳表示システムの機能ブロック図である。本実施例では、携帯情報端末４００が識別情報判断部１４０を備えている。デジタルカメラ４１５で撮影された画像のデジタルファイルは、画像データベース４１３に格納されている。使用者ＯＢＳは、コンピュータ４２０を操作し、プリントするデジタル写真のデジタルファイルを選択する。選択されたデジタルファイルの情報は、カラープリンタ４３０に出力される。カラープリンタ４３０は、選択されたデジタルファイルに応じたデジタル写真をシート紙にプリントする。
【００６７】
なお、デジタル写真は、街頭のプリント店舗において銀塩プリントして作成しても良い。このときは、画像データベース４１３内のデジタルファイルを外部記憶媒体に記憶する。外部記憶媒体は、ＣＤ、ＭＯディスク、ＤＶＤ、ＵＳＢメモリ、フレキシブルディスク等を用いることができる。そして、プリント店舗において、外部記憶媒体に基づいて、デジタル写真を銀塩プリントする。
【００６８】
使用者ＯＢＳは、携帯情報端末４００を用いて、プリントされた印刷物４１０を観察する。撮像部１０４は、印刷物４１０を撮像する。そして、携帯情報端末４００の入出力部１０３は、コンピュータ４２０とのデータの送受信を行なう。撮像部１０４で撮像された印刷物１１０の画像データは、コンピュータ４２０へ送信される。
【００６９】
コンピュータ４２０は、パターンマッチング部１０５と、画像認識部１０６と、演算部４２４と、画像データベース４１３と、画像関連情報データベース４１４とを備えている。画像データベース４１３と、画像関連情報データベース４１４とで印刷物情報格納部１２２を構成する。パターンマッチング部１０５は、印刷物４１０の画像データに基づいてパターンマッチング処理を行なう。画像認識部１０６は、パターンマッチングの結果に基づいて、印刷物４１０の内容を特定する。
【００７０】
上述のように、印刷物情報格納部は、画像データベース４１３に加えて、画像関連情報データベース４１４を備えている。画像関連情報データベース４１４には、電子情報に対して後発的に付加された印刷物情報が格納されている。画像関連情報データベース４１４に格納されている印刷物情報は、コンピュータ４２０に接続されている入力装置、例えばキーボード４１６から書換え可能に構成されている。また、画像関連情報データベース４１４に格納されている印刷物情報は、コンピュータ４２０とは異なる他のコンピュータ４１８ａ、４１８ｂ、４１８ｃから書換え可能に構成されている。使用者ＯＢＳが所有するコンピュータ４２０と、他のコンピュータ４１８ａ、４１８ｂ、４１８ｃとは、例えばインターネット４１７や専用回線で接続されている。
【００７１】
これにより、キーボード４１６により、このデジタル写真に関する最新情報を入力できる。また、インターネット４１７を介して、使用者ＯＢＳとは異なる他の人間が、このデジタル写真に関する最新情報や関連する情報を画像関連情報データベース４１４に書き込むことができる。例えば、デジタル写真の被写体である「光太郎」氏は、使用者ＯＢＳの友人であるとする。光太郎氏は、自らのコンピュータから、使用者ＯＢＳのコンピュータ４２０へインターネット４１７を介してアクセスする。そして、画像関連情報データベース４１４内へ、最新情報を書き込む。最新情報の例としては、光太郎氏の近況コメントや「今度、一緒に食事をしましょう」というメッセージを挙げることができる。このメッセージは、個人情報に相当する。従って、特定の個人、例えば光太郎氏の友人のみが、メッセージを見ることができることが望ましい。これに対して、不特定の第三者は、メッセージを見ることができないように制限する必要がある。
【００７２】
画像認識部１０６により印刷物４１０が特定される。そして、特定された印刷物４１０に関する最新の印刷物情報が画像関連情報データベース４１４から取得される。取得された最新の印刷物情報は、携帯情報端末４００へ出力される。携帯情報端末４００は、上述した各実施例と同様に、印刷物４１０の実視野に重畳して、後発的に付加された印刷物情報を表示する。この結果、使用者は、携帯情報端末により、デジタル写真を実視野で見ながら、重畳して、例えばデジタル写真に撮影されている人物の近況情報を認識できる。
【００７３】
また、本実施例では、画像認識部１０６は、コンピュータ４２０内に設けられている。デジタルファイルによりプリントされるデジタル写真は、数百〜数千種に及ぶこともある。この場合、撮像部１０４で撮像した印刷物４１０を画像認識により特定するときに大量の電子情報データ（デジタルファイル）を参照する必要がある。本実施例では、画像認識部１０６がコンピュータ４２０内に設けられている。このため、コンピュータ４２０が備えるＣＰＵにより高効率で印刷物４１０を特定できる。
【００７４】
また、コンピュータ４２０は、電子情報と印刷物情報とに基づいて所定の演算処理を行なう演算部４２４を有している。そして、電子情報表示部１０１は、演算された結果を表示する。デジタル写真を撮影したときに、例えば被写体である光太郎氏の年令、撮影日時等の電子情報は、画像データベース４１３に格納されている。例を挙げると、被写体の光太郎氏は、撮影時に２０才であるとする。このデジタル写真を、撮影時から１０年後に、使用者ＯＢＳが観察しているときを考える。演算部４２４は、デジタル写真を見ている現在の日時情報と、画像データベース４１３に格納されている電子情報のうち撮影日時とを比較する。そして、演算部４２４は、撮影日時から現在までに経過している年月数（本例の場合は、「１０年」）を演算する。そして、電子情報表示部１０１は、被写体の人物の現在の年令（２０才＋１０年＝３０才）を表示する。このように、携帯情報端末４００の使用者は、１０年前に撮影されたデジタル写真を実視野で見ながら、被写体の人物が現在３０才であるという印刷物情報を重畳的に認識できる。なお、演算部４２４は、被写体の年令に限られず、種々の数値演算を行なうことができる。演算部４２４が行なう演算処理の内容は、予めコンピュータ４２０に設定しておくことができる。
【００７５】
図１３は、本実施例における情報表示の手順を示すフローチャートである。上述したように、携帯情報端末４００は、不特定の複数の人間が共有して使用できる汎用機器である。ステップＳ８０１において、携帯情報端末４００の電源をＯＮする。ステップＳ８０２において、使用者ＯＢＳは識別情報、例えば電話番号（ＩＤ番号）を識別情報入力部１３０から入力する。ステップＳ８０３において、識別情報判断部１４０は、識別情報が入力されたか、否かを判断する。そして、携帯情報端末４００を特定の個人用機器として使用するか、否かを判断する。このため、識別情報判断部１４０は、予め登録されているＩＤ番号と、入力されたＩＤ番号とを比較する。ステップＳ８０３の判断結果が真のとき、即ち比較結果が一致したときは、ステップＳ８０４へ進む。これに対して、ステップＳ８０３の判断結果が偽のとき、即ち比較結果が不一致のときは、ステップＳ８１０へ進む。なお、ステップＳ８０３において、比較結果が不一致のときとは、識別情報そのものが入力されないときを含む。
【００７６】
ステップＳ８０４において、印刷物情報格納部１２２に格納されている電子情報と印刷物情報とのうち、一般情報が取得される。さらに、ステップＳ８０５において、印刷物情報格納部１２２に格納されている電子情報と印刷物情報とのうち、個人情報が取得される。例えば、光太郎氏の友人である使用者ＯＢＳは、個人情報である上述のメッセージを実視野に重畳して認識できる。ステップＳ８０６において、電子情報表示部１０１は、一般情報と個人情報とを表示する。携帯情報端末４００は、ステップＳ８０３において、使用者ＯＢＳの個人用機器して使用許可されている。このため、使用者ＯＢＳは、印刷物４１０であるデジタル写真に関連している一般情報と個人情報との両方の情報を重畳表示により認識できる。ステップＳ８０７において、他のモードへ移行するか、否かが判断される。ステップＳ８０７の判断結果が真のとき、ステップＳ８０８において選択したモードを実行する。「他のモード」は、上記実施例１と同様に、音声通話状態、Ｗｅｂ鑑賞状態、撮影状態等である。ステップＳ８０７の判断結果が偽のとき、ステップＳ８０４へ戻る。また、ステップＳ８０９において、電源をＯＦＦするか、否かについて判断する。ステップＳ８０９の判断結果が真のとき、終了する。ステップＳ８０９の判断結果が偽のとき、ステップＳ８０４へ戻る。
【００７７】
ステップＳ８０３の判断結果が偽のとき、ステップＳ８１０へ進む。ステップ８１０において、印刷物情報格納部１２２に格納されている電子情報と印刷物情報とにおける一般情報が取得される。ステップＳ８１１において、電子情報表示部１０１は、取得された一般情報を表示する。ステップＳ８１２において、他のモードへ移行するか、否かが判断される。ステップＳ８１２の判断結果が真のとき、ステップＳ８１３において選択したモードを実行する。「他のモード」は。上記実施例１と同様に、音声通話状態、Ｗｅｂ鑑賞状態、撮影状態等である。ステップＳ８１２の判断結果が偽のとき、ステップＳ８１０へ戻る。また、ステップＳ８１４において、電源をＯＦＦするか、否かについて判断する。ステップＳ８１４の判断結果が真のとき、終了する。ステップＳ８１４の判断結果が偽のとき、ステップＳ８１０へ戻る。
【００７８】
図１３に示した手順によれば、汎用機器である携帯情報端末４００を２通りの重畳表示使用態様で用いることができる。第１の重畳表示使用態様は、携帯情報端末４００を特定の個人用機器として用いる態様である。第１の重畳表示使用態様は、ステップＳ８０４からステップＳ８０９までが対応する。また、第２の重畳表示使用態様は、携帯情報端末４００を汎用機器として用いる態様である。第２の重畳表示使用態様は、ステップＳ８１０からステップＳ８１４までが対応する。
【００７９】
このように、本実施例によれば、使用者ＯＢＳが正しい識別情報を入力したときは、特定の個人用機器として携帯情報端末４００を使用できる。このときは、使用者ＯＢＳは、印刷物情報格納部１２２に格納されている情報のうち、一般情報と個人情報との両方の情報を重畳表示させることができる。これに対して、使用者ＯＢＳが誤った識別情報を入力したとき、または識別情報を入力しないとき、汎用機器として携帯情報端末４００を使用できる。このときは、使用者ＯＢＳは、印刷物情報格納部１２２に格納されている情報のうち、一般情報のみを重畳表示させることができる。
【００８０】
本実施例によれば、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物４１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。本実施例では、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物４１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物４１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００８１】
なお、本実施例において、識別情報判断部１４０を、コンピュータ４２０内に設ける構成とすることもできる。
【実施例５】
【００８２】
図１４は、本発明の実施例５に係る情報重畳表示システムの機能ブロック図である。本実施例では、携帯情報端末５００がパターンマッチング部１０５と画像認識部１０６とを備えている点、及びコンピュータ５２０が識別情報判断部１４０を備えている点が上記実施例４と異なる。識別情報判断部１４０の機能は、上記実施例４と同様である。上記実施例４と同一の部分には同一の符号を付し、重複する説明は省略する。
【００８３】
上記実施例４では、使用者ＯＢＳが所有しているコンピュータ４２０が画像データベース４１３を参照しながら、パターンマッチングと画像認識を行なっている。これに対して、画像認識するときに、参照、比較する電子情報の数が比較的少ないときもある。このときは、パターンマッチングによる画像認識処理を行なう演算処理速度は、実施例４のような高速度なＣＰＵを用いる必要はない。このため、本実施例のように、パターンマッチング部１０５と画像認識部１０６とを携帯情報端末５００内に設けておく。これにより、携帯情報端末５００側で効率良く画像認識により印刷物１１０を特定できる。
【００８４】
また、本実施例によれば、図１３で示した手順で情報を表示する。このため、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物４１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。従って、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物４１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物４１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００８５】
なお、本実施例において、識別情報判断部１４０を、携帯情報端末５００内に設ける構成とすることもできる。
【実施例６】
【００８６】
図１５は、本発明の実施例６に係る情報重畳表示システムの概略構成を示す図である。使用者ＯＢＳは、携帯情報端末６００を用いて印刷物４１０を観察する。印刷物４１０は、上記実施例５と同様に、デジタル写真である。なお、上記各実施例と同一の部分には、同一の符号を付し、重複する説明は省略する。
【００８７】
本実施例では、印刷物４１０が画像特定部４１１を備えている。画像特定部４１１は、撮像部１０４で撮像された印刷物４１０を特定する情報を備えている。画像特定部４１１は、印刷物４１０の内容を符号化したパターン、例えば２次元パターンを用いることができる。２次元パターンには、このデジタル写真を特定するデータを記録しておく。また、コンピュータ５２０が識別情報判断部１４０を備えている。識別情報判断部１４０の機能は、上記実施例４と同様である。
【００８８】
図１５において、撮像部１０４は、印刷物４１０と共に、画像特定部４１１である２次元パターンを撮像する。携帯情報端末６００は、情報再生部８０１を備えている。情報再生部８０１は、撮像された画像特定部４１１の符号化されたパターンに基づいて、パターンの情報を再生する。これにより、パターンマッチング等を行なわないで、迅速にデジタル写真を特定できる。
【００８９】
特定された印刷物４１０に関する最新の印刷物情報が、コンピュータ５２０内の画像関連情報データベース４１４から取得される。取得された最新の印刷物情報は、無線通信により、携帯情報端末６００へ送信される。携帯情報端末６００は、受信した最新の印刷物情報を入出力部１０３を介して、表示情報決定部１０７へ送る。そして、上記実施例５と同様に、印刷物４１０の実視野に重畳して印刷物情報が表示される。このように、本実施例によれば、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報を、迅速かつ簡便に得ることができる。この結果、観察している印刷物４１０に重畳して、後発的に付加された最新の印刷物情報を表示できる。
【００９０】
また、画像特定部４１１として、ＲＦＩＤを用いることもできる。この場合は、ＲＦＩＤにデジタル写真を特定するデータを記録しておく。そして、ＲＦＩＤは、携帯情報端末６００内の読み取り器（不図示）と電波や電磁波で交信する。これにより、パターンマッチング等を行なわないで、迅速にデジタル写真を特定できる。ＲＦＩＤを用いるときは、パターンを読み取る必要がない。このため、印刷物４１０の裏側にＲＦＩＤを貼付しておけば良い。
【００９１】
また、本実施例によれば、図１３で示した手順で情報を表示する。このため、使用者ＯＢＳとは異なる第三者が特定の個人情報にアクセスすることを防止できる。この結果、観察している実視野の印刷物４１０に重畳して、後発的に付加された最新の印刷物情報のうち使用者ＯＢＳとの関連において適切な情報を表示できる。従って、使用者ＯＢＳが、意図的に観察している物体に関連する画像情報を選択、検索する必要がない。さらに、印刷物４１０に関する情報、特に使用者ＯＢＳとの関連において適切な情報を、迅速かつ簡便に、この印刷物４１０の実視野に重畳的に表示できる。このように、使用者ＯＢＳは、観察している印刷物４１０に関する印刷物情報のうち識別情報に対応した情報を、迅速かつ簡便に得ることができる。
【００９２】
なお、本実施例において、識別情報判断部１４０を、携帯情報端末６００内に設ける構成とすることもできる。
【００９３】
以上説明した実施例では、テーマパークの案内地図やデジタル写真を例にしている。しかしながら、本発明はこれに限られず、博物館の館内地図やショッピングモールの案内地図にも適用できる。博物館の館内地図を印刷物として観察するときは、例えば、館内に展示されている展示物の情報を重畳表示できる。さらに、デジタル版下を有している印刷物であれば、印刷物として書籍に適用しても良い。特に、書籍では、異なる書籍であっても、類似した画像や文章が存在する。この場合は、本実施例を組み合わせること、即ち、本の特定にＲＦＩＤ等のタグ情報を用い、ページの特定にパターンマッチングを用いることが効果的である。また、連載等の類似した画像を排除してゆくことが可能である。このようにすれば、書籍の特定が素早く行なえるので、マッチングがより高速に実現できる。また、印刷物が書籍のときの個人情報の例としては、電子クーポンを挙げることができる。この電子クーポンは、雑誌等の書籍において特定の読者、例えば定期購読者のみに発信される。このように、本発明は電子情報を有する印刷物であれば、その内容にとらわれず幅広く適用できる。
【００９４】
さらに、実視野に重畳的に表示される情報は、文字情報に限られない。例えば、静止画、動画などの映像情報を重畳的に表示できる。また、アイコン、天気記号、地理記号等の記号を重畳的に表示してもよい。加えて、上記各実施例において、印刷物情報格納部は、携帯情報端末内に設けても良い。
【００９５】
また、携帯情報端末とコンピュータとの通信形態は、ＰＨＳ回線、携帯電話回線、有線ＬＡＮ、無線ＬＡＮ、赤外線通信等のデータ転送を行なえるものであれば良い。さらに、上記各実施例では、使用者が携帯情報端末を手で把持して使用する例を説明している。しかしながら、本発明は、携帯情報端末に限られず、例えば公知のヘッドマウントディスプレイに上述した携帯情報端末の機能を持たせても良い。
【００９６】
また、識別情報はテンキーにより入力される情報に限られない。例えば、識別情報入力部１３０として指紋センサーを用いることができる。このときは、個人情報へアクセスできる者の指紋を予めコンピュータ内に格納しておく。そして、携帯情報端末を使用する者は、その指紋を指紋センサーで読み取らせる。これにより、携帯情報端末の使用許可等が判断される。なお、識別情報は指紋に限られず、網膜パターン、声紋等の個人を特定できる情報であれば良い。このように、本発明は、その趣旨を逸脱しない範囲で、適宜変形が可能である。
【産業上の利用可能性】
【００９７】
以上のように、本発明に係る情報重畳表示システムは、印刷物に関する情報、特に使用者との関連において適切な情報を、迅速かつ簡便に、この印刷物の実視野に重畳的に表示するときに有用である。
【図面の簡単な説明】
【００９８】
【図１】実施例１に係る情報重畳表示システムの概略構成図である。
【図２−１】携帯情報端末の斜視構成図である。
【図２−２】携帯情報端末の他の斜視構成図である。
【図３−１】携帯情報端末の上面図である。
【図３−２】携帯情報端末の断面図である。
【図３−３】携帯情報端末の底面図である。
【図４】実施例１において情報を重畳表示する手順を示すフローチャートである。
【図５】実施例１の情報重畳表示システムの機能ブロック図である。
【図６】携帯情報端末が一般機器のときの重畳表示の手順を示すフローチャートである。
【図７】携帯情報端末が特定の個人用機器のときの重畳表示の手順を示すフローチャートである。
【図８】実施例２の情報重畳表示システムの機能ブロック図である。
【図９】実施例３に係る情報重畳表示システムの概略構成図である。
【図１０】実施例３の情報重畳表示システムの機能ブロック図である。
【図１１】実施例４に係る情報重畳表示システムの概略構成図である。
【図１２】実施例４の情報重畳表示システムの機能ブロック図である。
【図１３】携帯情報端末が汎用機器のときの重畳表示の手順を示すフローチャートである。
【図１４】実施例５の情報重畳表示システムの機能ブロック図である。
【図１５】実施例６の情報重畳表示システムの機能ブロック図である。
【符号の説明】
【００９９】
１００ 携帯情報端末
１０１ 電子情報表示部
１０２ 半透過光学素子
１０３ 入出力部
１０４ 撮像部
１０５ パターンマッチング部
１０６ 画像認識部
１０７ 表示情報決定部
１１０ 印刷物
１１１ 画像特定部
１２０ サーバーコンピュータ
１２２ 印刷物情報格納部
１２３ デジタル版下
１２４ 版下用情報データベース
１２５ 最新情報データベース
１３０ 識別情報入力部
１４０ 識別情報判断部
２００ 携帯情報端末
２２０ サーバーコンピュータ
３００ 携帯情報端末
４００ 携帯情報端末
４１０ 印刷物
４１１ 画像特定部
４１３ 演算部
４１５ デジタルカメラ
４１６ キーボード
４１７ インターネット
４１８a、４１８ｂ、４１８ｃ 他のコンピュータ
４２０ コンピュータ
４２１ ディスプレイ
４２４ 演算部
４３０ プリンタ
５００ 携帯情報端末
５２０ コンピュータ
６００ 情報携帯端末
８０１ 情報再生部
【特許請求の範囲】
【請求項１】
関連する電子情報を有する印刷物を撮像する撮像部と、
撮像された前記印刷物を画像認識により特定する画像認識部と、
前記電子情報と前記電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、
少なくとも特定された前記印刷物に関する前記印刷物情報を表示する電子情報表示部と、
前記電子情報表示部に表示された前記印刷物情報を前記印刷物の実視野に重畳的に表示する半透過光学素子と、
使用者を特定するための識別情報を入力する識別情報入力部と、
前記識別情報に基づいて前記電子情報表示部が表示する少なくとも前記印刷物情報を選択する識別情報判断部とを有し、
少なくとも前記撮像部と前記電子情報表示部と前記半透過光学素子と前記識別情報入力部とは携帯情報端末に備えられ、
前記印刷物情報格納部は、前記携帯情報端末と通信可能なコンピュータに備えられ、
前記画像認識部と前記識別情報判断部とは、それぞれ前記携帯情報端末と前記コンピュータとのいずれか一方に備えられていることを特徴とする情報重畳表示システム。
【請求項２】
前記印刷物は、前記印刷物情報格納部に格納されている前記電子情報であるデジタル版下に基づいて紙媒体に印刷された書籍物であり、
前記コンピュータは、前記書籍物に関連するサーバーコンピュータであることを特徴とする請求項１に記載の情報重畳表示システム。
【請求項３】
前記識別情報判断部は、前記サーバーコンピュータ内に設けられていることを特徴とする請求項２に記載の情報重畳表示システム。
【請求項４】
前記識別情報判断部は、前記携帯情報端末内に設けられていることを特徴とする請求項２に記載の情報重畳表示システム。
【請求項５】
前記印刷物は、前記印刷物情報格納部に格納されている前記電子情報であるデジタルファイルに基づいて紙媒体にプリントされたデジタル写真であることを特徴とする請求項１に記載の情報重畳表示システム。
【請求項６】
前記コンピュータは、前記電子情報と前記印刷物情報とに基づいて所定の演算処理を行なう演算部を有し、
前記電子情報表示部は、さらに演算された結果を表示することを特徴とする請求項５に記載の情報重畳表示システム。
【請求項７】
前記識別情報判断部は、前記コンピュータ内に設けられていることを特徴とする請求項５に記載の情報重畳表示システム。
【請求項８】
前記識別情報判断部は、前記携帯情報端末内に設けられていることを特徴とする請求項５に記載の情報重畳表示システム。
【請求項９】
前記コンピュータ内の前記印刷物情報格納部に格納されている前記印刷物情報は、前記コンピュータに接続されている入力装置または前記コンピュータとは異なる他のコンピュータから書換え可能に構成されていることを特徴とする請求項５に記載の情報重畳表示システム。
【請求項１０】
関連する電子情報を有する印刷物を撮像する撮像部と、
撮像された前記印刷物を特定する情報を有する画像特定部と、
前記画像特定部を認識して前記情報を再生する情報再生部と、
前記電子情報と前記電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、
少なくとも特定された前記印刷物に関する前記印刷物情報を表示する電子情報表示部と、
前記電子情報表示部に表示された前記印刷物情報を前記印刷物の実視野に重畳的に表示する半透過光学素子と、
使用者を特定するための識別情報を入力する識別情報入力部と、
前記識別情報に基づいて前記電子情報表示部が表示する少なくとも前記印刷物情報を選択する識別情報判断部とを有し、
少なくとも前記撮像部と前記電子情報表示部と前記半透過光学素子と前記識別情報入力部とは携帯情報端末に備えられ、
前記識別情報判断部は、前記携帯情報端末と前記コンピュータとのいずれか一方に備えられ、
前記印刷物情報格納部は、前記携帯情報端末と通信可能なコンピュータに備えられ、
前記画像特定部は、前記印刷物に備えられていることを特徴とする情報重畳表示システム。
【請求項１１】
前記画像特定部は、前記印刷物の内容を符号化したパターンを備えることを特徴とする請求項１０に記載の情報重畳表示システム。
【請求項１２】
前記画像特定部は、前記印刷物の内容を格納しているＲＦＩＤを備えることを特徴とする請求項１０に記載の情報重畳表示システム。
【請求項１】
関連する電子情報を有する印刷物を撮像する撮像部と、
撮像された前記印刷物を画像認識により特定する画像認識部と、
前記電子情報と前記電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、
少なくとも特定された前記印刷物に関する前記印刷物情報を表示する電子情報表示部と、
前記電子情報表示部に表示された前記印刷物情報を前記印刷物の実視野に重畳的に表示する半透過光学素子と、
使用者を特定するための識別情報を入力する識別情報入力部と、
前記識別情報に基づいて前記電子情報表示部が表示する少なくとも前記印刷物情報を選択する識別情報判断部とを有し、
少なくとも前記撮像部と前記電子情報表示部と前記半透過光学素子と前記識別情報入力部とは携帯情報端末に備えられ、
前記印刷物情報格納部は、前記携帯情報端末と通信可能なコンピュータに備えられ、
前記画像認識部と前記識別情報判断部とは、それぞれ前記携帯情報端末と前記コンピュータとのいずれか一方に備えられていることを特徴とする情報重畳表示システム。
【請求項２】
前記印刷物は、前記印刷物情報格納部に格納されている前記電子情報であるデジタル版下に基づいて紙媒体に印刷された書籍物であり、
前記コンピュータは、前記書籍物に関連するサーバーコンピュータであることを特徴とする請求項１に記載の情報重畳表示システム。
【請求項３】
前記識別情報判断部は、前記サーバーコンピュータ内に設けられていることを特徴とする請求項２に記載の情報重畳表示システム。
【請求項４】
前記識別情報判断部は、前記携帯情報端末内に設けられていることを特徴とする請求項２に記載の情報重畳表示システム。
【請求項５】
前記印刷物は、前記印刷物情報格納部に格納されている前記電子情報であるデジタルファイルに基づいて紙媒体にプリントされたデジタル写真であることを特徴とする請求項１に記載の情報重畳表示システム。
【請求項６】
前記コンピュータは、前記電子情報と前記印刷物情報とに基づいて所定の演算処理を行なう演算部を有し、
前記電子情報表示部は、さらに演算された結果を表示することを特徴とする請求項５に記載の情報重畳表示システム。
【請求項７】
前記識別情報判断部は、前記コンピュータ内に設けられていることを特徴とする請求項５に記載の情報重畳表示システム。
【請求項８】
前記識別情報判断部は、前記携帯情報端末内に設けられていることを特徴とする請求項５に記載の情報重畳表示システム。
【請求項９】
前記コンピュータ内の前記印刷物情報格納部に格納されている前記印刷物情報は、前記コンピュータに接続されている入力装置または前記コンピュータとは異なる他のコンピュータから書換え可能に構成されていることを特徴とする請求項５に記載の情報重畳表示システム。
【請求項１０】
関連する電子情報を有する印刷物を撮像する撮像部と、
撮像された前記印刷物を特定する情報を有する画像特定部と、
前記画像特定部を認識して前記情報を再生する情報再生部と、
前記電子情報と前記電子情報に対して後発的に付加された印刷物情報とを格納する印刷物情報格納部と、
少なくとも特定された前記印刷物に関する前記印刷物情報を表示する電子情報表示部と、
前記電子情報表示部に表示された前記印刷物情報を前記印刷物の実視野に重畳的に表示する半透過光学素子と、
使用者を特定するための識別情報を入力する識別情報入力部と、
前記識別情報に基づいて前記電子情報表示部が表示する少なくとも前記印刷物情報を選択する識別情報判断部とを有し、
少なくとも前記撮像部と前記電子情報表示部と前記半透過光学素子と前記識別情報入力部とは携帯情報端末に備えられ、
前記識別情報判断部は、前記携帯情報端末と前記コンピュータとのいずれか一方に備えられ、
前記印刷物情報格納部は、前記携帯情報端末と通信可能なコンピュータに備えられ、
前記画像特定部は、前記印刷物に備えられていることを特徴とする情報重畳表示システム。
【請求項１１】
前記画像特定部は、前記印刷物の内容を符号化したパターンを備えることを特徴とする請求項１０に記載の情報重畳表示システム。
【請求項１２】
前記画像特定部は、前記印刷物の内容を格納しているＲＦＩＤを備えることを特徴とする請求項１０に記載の情報重畳表示システム。
【図１】
【図２−１】
【図２−２】
【図３−１】
【図３−２】
【図３−３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２−１】
【図２−２】
【図３−１】
【図３−２】
【図３−３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２００６−９９２２７（Ｐ２００６−９９２２７Ａ）
【公開日】平成１８年４月１３日（２００６．４．１３）
【国際特許分類】
【出願番号】特願２００４−２８１９７３（Ｐ２００４−２８１９７３）
【出願日】平成１６年９月２８日（２００４．９．２８）
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
【公開日】平成１８年４月１３日（２００６．４．１３）
【国際特許分類】
【出願日】平成１６年９月２８日（２００４．９．２８）
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
[ Back to top ]