鏡型情報提供装置、情報提供方法、およびプログラム
【課題】 鏡の表面概観が通常の鏡と同等の視覚的特性を示し、鏡内に提示された情報を鏡面に触れることなく操作でき、携帯電話との情報連携が可能である、鏡型情報提供技術を実現する。
【解決手段】 鏡２１をハーフミラー１１とディスプレイ１２で構成し、鏡２１の前方を撮像するイメージセンサ１３、ネットワーク２０に接続するコンピュータ１４からなる鏡型情報提供装置であり、コンピュータ１４は、イメージセンサ１３から入力される映像から、ユーザの携帯端末が送信する光信号の位置、光信号のＩＤ等を検出する光信号検出手段１５、光信号検出手段１５が検出した光信号の位置、光信号のＩＤ等に対応する処理を行う制御手段１６を有する。
【解決手段】 鏡２１をハーフミラー１１とディスプレイ１２で構成し、鏡２１の前方を撮像するイメージセンサ１３、ネットワーク２０に接続するコンピュータ１４からなる鏡型情報提供装置であり、コンピュータ１４は、イメージセンサ１３から入力される映像から、ユーザの携帯端末が送信する光信号の位置、光信号のＩＤ等を検出する光信号検出手段１５、光信号検出手段１５が検出した光信号の位置、光信号のＩＤ等に対応する処理を行う制御手段１６を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、鏡にネットワーク上の情報を提供する機能を付加した技術に関するものである。
【背景技術】
【０００２】
ユビキタスコンピューティングの研究においては、屋内の壁や家具などに埋め込まれたコンピュータが多様な形で人間の活動を支援するシステムが数多く提案されており、鏡にコンピュータを装着し、鏡内に多様な情報を提示し操作するシステムがいくつか開発されている。
【０００３】
例えば、鏡内に仮想的に提示した画像情報を鏡内の自己像の手でポインティングすることにより情報操作を行うシステムが提案されている(例えば、非特許文献１参照。)。このようなシステムでは、鏡内に提示された画像情報と自己像の位置関係の計算を可能にするため、システム前面を撮影するカメラ映像をディスプレイに表示したビデオミラーを用いている。
【０００４】
また、鏡内に複数の映像を重畳して表示できるように、特殊な光学系を用いて構成された鏡型情報提示装置が提案されている(例えば、非特許文献２参照。)。
【非特許文献１】細谷英一、北端美紀、佐藤秀則、原田育夫、野島久雄、森澤文晴、武藤伸一郎、「実世界インタラクションのためのミラーインタフェース」、インタラクション２００３論文集、ｐｐ．９５−９６、２００３年
【非特許文献２】牛田啓太、田中悠、苗村健、原島博、「鏡メタファに基づくインタラクション／情報環境 i-mirror」、日本バーチャルリアリティ学会論文誌、Ｖｏｌ．８、Ｎｏ．４、ｐｐ．４２１−４３１、２００３年
【発明の開示】
【発明が解決しようとする課題】
【０００５】
既存の鏡と同じように利用可能な鏡型情報提供装置を実現するためには、鏡の機能そのものを完全に有していることが重要である。鏡をモチーフとした既存のシステムでは、いずれもビデオミラーまたは通常の鏡とは異なる特殊な光学系を用いている。鏡には極めて特有な視覚効果がある。建物の内装コーディネートにおいてはこの視覚効果を考慮して鏡を配置する場合が多い。したがって、既存の鏡の視覚効果を完全に備えていなければ、それにとって代わって利用できる鏡型情報提供装置とはなり得ない。
【０００６】
また、ユーザにとって元来鏡とは見るためだけのものである。一方、鏡内に提示された情報コンテンツをポインティングし情報端末に取得する操作は、従来にない鏡とのインタラクションである。このような特性を有する鏡との新しいインタラクションの実装においては、鏡本来の役割に十分配慮し、適切なユーザインタフェースを設計する必要がある。
【０００７】
ユーザの目の前にあるディスプレイをポインティングするには、タッチパネルによる方法が操作性において優れている。しかし、鏡はその本来の用途上、表面に傷や汚れがつくことは望ましくない。このため、鏡表面を直接触れるような操作方法は適切ではない。
【０００８】
かかる事情に鑑みて、本発明はなされたもので、その目的は、 (１)鏡の表面概観が通常の鏡と同等の視覚的特性を示し、(２)鏡内に提示された情報を鏡面に触れることなく操作でき、(３)携帯電話との情報連携が可能である、鏡型情報提供技術を実現することにある。
【課題を解決するための手段】
【０００９】
本発明の鏡型情報提供装置では、既存の鏡と同様の表面概観を実現するために、ハーフミラーを用いる。鏡内への情報提示は、ハーフミラーの背面に密着されたディスプレイにより行う。ディスプレイがブラックアウトしている時点では、表面概観は通常の鏡と同等になる。さらに、光信号により鏡内の情報を操作するために、イメージセンサ、光信号検出手段、ネットワークに接続されたコンピュータを具備する。光信号検出手段は、イメージセンサにより入力される映像から光信号の位置とそのＩＤを検出し、コンピュータが前記光信号検出位置とＩＤに対応する処理を行う。
【００１０】
鏡内の提示情報をユーザが光信号を用いてポインティングするためには、何らかの視覚的フィードバックが必要になる。そのために前記コンピュータは、前記光信号が検出された位置に対応するディスプレイ中の位置にカーソルを提示する処理を行う。
【００１１】
また、ユーザが鏡内の提示情報を光信号によりクリックした際に、その関連情報を光信号の発信元になった携帯端末に送信するために、前記光信号により、光信号の発信元である携帯端末を特定するための携帯端末ＩＤを伝達しこれを利用する。
【００１２】
すなわち、前記コンピュータは、ネットワーク上の情報コンテンツに対応する複数のサムネイル画像をディスプレイ中に表示しておき、いずれかのサムネイル画像上に対応する位置において携帯端末ＩＤを伝達する光信号が検出された場合に、携帯端末ＩＤによって特定される携帯端末にサムネイル画像に対応する情報（情報コンテンツのＵＲＬなど）を送信する。
【００１３】
さらに、ユーザが鏡内に任意の画像情報を貼り付けることができるようにするために、光信号が伝達するＩＤを、所定の情報コンテンツを特定するためのコンテンツＩＤとしても用いる。
【００１４】
この場合、コンピュータは、コンテンツＩＤを伝達する光信号が検出された場合に、光信号が検出された位置に対応するディスプレイ上の位置に、コンテンツＩＤによって特定される情報コンテンツのサムネイル画像を表示する。
【００１５】
さらに、本発明の鏡型情報提供装置が具備する光信号検出手段は、光信号として、複数の色を用いる色点滅信号を検出するように実装される。例えば、既存携帯端末に具備されるカラーディスプレイを光源として発信できる色相差光信号を検出できるように実装される。
【００１６】
これにより、既存携帯端末は、それらに何ら特殊なデバイスを付加することなく、本発明の鏡型情報提供装置に連携される。
【発明の効果】
【００１７】
本発明による鏡型情報提供装置は、ハーフミラーとディスプレイを貼り付けた構成とすることにより、表面概観は通常の鏡に相違ない。薄型軽量の液晶ディスプレイを用いることにより、体積も小さく実装でき、十分に屋内の壁などに設置できる。
【００１８】
また、鏡内の提示情報の操作に光信号を用いるようにしたことで、鏡面に直接触れること無く操作できる。すなわち、鏡面を汚さずに操作ができる。
【００１９】
また、光信号を用いる場合、鏡側には、光信号検出用の小さなイメージセンサを具備すればよく、タッチパネル装置を具備する場合に比べ、装置コスト、小型化の面で有利である。
【００２０】
また、光信号として、携帯電話のカラーディスプレイを用いて発信できる色相差を用いた光信号を利用できる。
【００２１】
また、一部の携帯電話にもともと具備されている赤外線光源を用いた光信号を利用できる。したがって、既存携帯電話に何ら変更を加えること無く、それらを本発明の鏡型情報提供装置に連携できる。
【発明を実施するための最良の形態】
【００２２】
(実施形態１)
本発明の鏡型情報提供装置の基本的な構成例を図１に示す。
【００２３】
図１に示すように、鏡型情報提供装置はハーフミラー１１とディスプレイ１２とから構成される鏡２１、イメージセンサ１３、およびネットワーク２０に接続するコンピュータ１４によって構成され、コンピュータ１４は、光信号検出手段１５、制御手段１６、メモリ１７、画像出力手段１８、およびネットワークインタフェース１９から構成される。
【００２４】
ディスプレイ１２の表示部は、ハーフミラー１１の背面に密着される。したがって、ハーフミラー１１の表面概観はディスプレイ１２がブラックアウトした時点では、通常の鏡と相違がない。
【００２５】
イメージセンサ１３はハーフミラー１１とディスプレイ１２とからなる鏡２１に、鏡２１の前方を撮像するように設置される。
【００２６】
コンピュータ１４は、汎用のパーソナルコンピュータ等が具備する一連のハードウェアおよびソフトウェアを有する。さらに、イメージセンサ１３が撮像する映像を処理し、光信号を検出する光信号検出手段を具備する点が特徴である。
【００２７】
また、光信号検出手段１５はＤＳＰ(Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ)などのハードウェアとして実装してもよい。なお、ＤＳＰとは、音声や画像などの処理に特化したマイクロプロセッサであり、モデムやパソコンなどに搭載されて所定の処理を高速に行うハードウェアである。また、光信号検出手段１５はコンピュータＯＳ上で動作するソフトウェアとしても実装できる。
【００２８】
コンピュータ１４が有する制御手段１６は、ネットワーク２０を経由して取得される各種情報コンテンツに対応するサムネイル画像を画像出力手段１８によりディスプレイ１２に表示する。この結果、鏡２１内に各種情報が提示されることになる。さらにコンピュータ１４は、光信号検出手段１５により検出された光信号に基づき、提示された各種情報に対する処理を行う。
【００２９】
図２に実際に開発した鏡型情報提供装置の概観図を示す。図２に示すように、ディスプレイ１１およびコンピュータ１４を壁に埋め込んだ構成にすることができる。
【００３０】
以下に、鏡型情報提供装置の利用について、図面を用いて説明する。
【００３１】
(カーソルの提示)
まず、コンピュータ１４は、鏡２１内に提示した任意のサムネイル画像を光信号によりユーザがポインティングできるように、ユーザがどの位置をポインティングしているかを示すカーソルを鏡２１内に提示する。このカーソル提示をコンピュータ１４がどのように処理するかを図３を用いて説明する。
【００３２】
図３に示すように、ユーザ３１は、携帯電話等の携帯端末の光信号の光源３２を手元に持ち、ハーフミラー１１とディスプレイ１２とからなる鏡２１に向けて光信号を発信する。この光信号としては、単純な輝度差点滅信号や、色相差を用いて色点滅信号が利用可能である。
【００３３】
具体的には、下記の技術１〜４に記載されている光信号を利用できる。
(技術１)松下伸行、日原大輔、後輝行、吉村真一、暦本純一、「ＩＤ Ｃａｍ：シーンとＩＤを同時に取得可能なスマートカメラ」、情報処理学会論文誌ｖｏｌ．４３、Ｎｏ．１２、ｐｐ．３６６４−３６７４、Ｄｅｃ．２００２
(技術２)Ｄ．Ｊ．Ｍｏｏｒｅ、Ｒ．Ｗａｎｔ、ｅｔ ａｌ．「Ｉｍｐｌｅｍｅｎｔｉｎｇ Ｐｈｉｃｏｎｓ：Ｃｏｍｂｉｎｉｎｇ Ｃｏｍｐｕｔｅｒ Ｖｉｓｉｏｎ ｗｉｔｈ Ｉｎｆｒａｒｅｄ Ｔｅｃｈｎｏｌｏｇｙ ｆｏｒ Ｉｎｔｅｒａｃｔｉｖｅ Ｐｈｙｓｉｃａｌ Ｉｃｏｎ」、Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ ＡＣＭ ＵＩＳＴ’９９、Ａｓｈｖｉｌｌｅ、Ｎ．Ｃ．、Ｎｏｖｅｍｂｅｒ ８ｔｈ−１０ｔｈ、ｐｐ．６７−６８、１９９９
(技術３)青木恒、「カメラで読み取る赤外線タグとその応用」インタラクティブシステムとソフトウェアVIII，ｐｐ．１３１−１３６，近代科学社、２０００
(技術４)宮奥健人、東野豪、外村佳伸、「Ｃ−Ｂｌｉｎｋ：携帯電話ディスプレイによる色相差光信号マーカ」、インタラクション２００４論文集、ｐｐ．１５３−１６０、２００４ 。
【００３４】
特に、技術４に記載の、色相差光信号方式を利用する場合、光源として携帯端末のカラーディスプレイを利用することができる。
【００３５】
イメージセンサ１３の入力映像は、まず、光信号処理手段１５に送られる。そして、左右反転処理がなされた後、連続する映像フレームを処理し、光信号の位置およびＩＤを検出する。
【００３６】
具体的な処理内容は利用する光信号により異なる。光信号により、それぞれ、技術１〜技術４に記載される処理を行い、位置およびＩＤを検出する。
【００３７】
一方、連続した点滅信号ではなく、所定の形状マーカを提示する光信号も利用できる。例えば、
(技術５)暦本純一、「２次元マトリックスコードを利用した拡張現実感の構成手法」、インタラクティブとソフトウェアIV、ｐｐ．１９９−２０８、近代科学社、１９９６
に記載されるような２次元マトリックスコードを光信号として利用することができる。その他にも、ＩＤを一意に識別でき、画像中からその位置を検出可能な特徴形状を有する幾何模様、キャラクター漫画などを光信号として用いることが可能である。
【００３８】
上記の手順により、光信号検出手段１５により光信号の領域並びに重心若しくは中心座標が検出された後、制御手段１６は重心または中心座標に対応するディスプレイ１２上の座標にカーソル３３を提示する処理を行う。例えば、入力映像のサイズが１６０×１２０であり、ディスプレイ１２の解像度が１６００×１２００であれば、映像中の座標(Ｘ、Ｙ)に対応するディスプレイ１２上の座標とは、(Ｘ×１０、Ｙ×１０)となる。
【００３９】
以上の手順をコンピュータ１４はリアルタイムに実施する。結果、ユーザが手元の光信号源を動かすと、提示されるカーソルもその動きに応じて移動する。なお、カーソル提示に用いられる光信号は、カーソル用の信号であることを示すＩＤを伝達する、または、ＩＤ情報を含まないものとする。
【００４０】
(情報提示の携帯端末への取得)
次に、鏡２１内に提示されたサムネイル画像に関連する情報を、光信号の光源となる携帯端末３２に取得する機能について説明する。鏡型情報提供装置では、コンピュータ１４内で動作する情報提供アプリケーションソフトウェアにより、随時自動的にネットワーク２０上の新着情報などが提示される。情報提供アプリケーションソフトウェアとは、いわゆるＷｅｂブラウザとそのコンテンツであってよい。また、
(技術６)渡邊恵太、安村通晃、「Ｍｅｍｏｒｉｕｍ：眺めるインターフェースの提案とその試作」、ＷＩＳＳ２００２論文集、ｐｐ．９９−１０４、２００２
で提案されているようなユーザに情報の存在を気付かせることを意図した情報表示方法を用いるアプリケーションであってよい。
【００４１】
この際に、ディスプレイ１４には、図４に示すように、複数のサムネイル画像４１が提示される。また、カーソル提示用の光信号が検出された位置にカーソル３３が提示される。その結果、図５に示すように鏡２１内に情報が提示される。
【００４２】
ここで、鏡２１内に提示された、サムネイル画像４１の一つをクリックし、その関連情報(ＵＲＬ)を光源である携帯端末３２に取得する処理について図６を用いて説明する。
【００４３】
ユーザ３１は、鏡２１内に提示されるカーソル３３を手元の携帯端末３２を動かして所望のサムネイル画像４１上へ移動する。そして、携帯端末３２上の所定のボタンを押すことにより、携帯端末３２を特定するＩＤ(携帯端末ＩＤ)送信する光信号を発信する。
【００４４】
光信号検出手段１５は、カーソル提示のための光信号の検出と同様の手順で、携帯端末ＩＤを送信する光信号をイメージセンサ映像中から検出し、その位置座標(領域の重心または中心)と携帯端末ＩＤを制御手段１６に通知する。
【００４５】
制御手段１６は、通知された位置座標に対応するディスプレイ１２上座標において携帯端末ＩＤによって特定される携帯端末３２によりクリックが発生したこととしてこれを処理する。
【００４６】
すなわち、制御手段１６によって制御される情報提供アプリケーションソフトウェアは、ディスプレイ１２上に複数のサムネイル画像４１を表示しており、そのうちの一つのサムネイル画像４１上で、携帯端末ＩＤによって特定される携帯端末３２によりクリックが発生したというイベントを処理する。
【００４７】
ここで、このイベントに伴う処理内容として、情報提供アプリケーションの実装により、より多様な処理を対応づけることができる。
【００４８】
クリックされた情報を携帯端末３２に取得させる機能を実現するために、制御手段１６は下記の処理を行う。
【００４９】
まず、制御手段１６またはその上で動作する情報提供アプリケーションソフトウェアは、図７に示すような各携帯端末ＩＤに対応した携帯端末アドレスを管理する。そして、上記の手順により、携帯端末ＩＤが検出された場合に、まず、検出位置座標に対応するディスプレイ１２上の座標に表示されているサムネイル画像４１を検出する。制御手段１６または情報提供アプリケーションソフトウェアは、各サムネイル画像に対応するＵＲＬも同様に管理しており、携帯端末ＩＤを伝達する光信号によりクリックされたサムネイル画像に対応するＵＲＬを携帯端末ＩＤに対応するアドレスにネットワーク２０を介して送信する。
【００５０】
図７では、各携帯端末アドレスは、ｅ−ｍａｉｌアドレスとして管理されている。したがって、この例では、ＵＲＬ情報はｅ−ｍａｉｌとして送信される。なお、各携帯端末アドレスをＩＰアドレスとして管理し、ＩＰパケットとして送信することも可能である。
【００５１】
この他にも、利用するネットワーク２０のプロトコルに応じたアドレスと送信方式が利用可能である。
【００５２】
また、各携帯端末ＩＤに対応する携帯端末アドレス情報は、コンピュータ１４そのものが保持せず、ネットワーク上の所定のサーバに保持され、必要に応じて、コンピュータ１４がアクセスして利用するように実装されていても良い。
【００５３】
(携帯端末から鏡内への情報の貼り付け)
携帯端末３２によって鏡２１内に画像情報を貼り付ける機能について図８を用いて説明する。図８に示すように、ユーザ３１は、鏡２１内に提示されるカーソル３３を手元の携帯端末３２によって動かして、画像情報を貼り付けたい位置へカーソル３３を移動させる。そして、携帯端末３２上の所定のボタンを押すことにより、画像情報を特定するコンテンツＩＤを送信する光信号を発信する。
【００５４】
光信号検出手段１５は、カーソル提示のための光信号の検出と同様の手順で、コンテンツＩＤを送信する光信号をイメージセンサ１３映像中から検出し、その位置座標(領域の重心または中心)とコンテンツＩＤを制御手段１６に通知する。
【００５５】
制御手段１６は、位置座標に対応するディスプレイ１２上の座標においてコンテンツＩＤによって特定される画像情報を貼り付ける操作が発生したことを検知し、これを処理する。
【００５６】
具体的には、図９に示すような、コンテンツＩＤとサムネイル画像４１の対応関係を保持し、コンテンツＩＤに対応する画像を、コンテンツＩＤの光信号の検出位置座標に対応するディスプレイ１２上の位置に提示する。
【００５７】
上述した提示情報の携帯端末３２への取得機能および携帯端末３２からの鏡２１内への情報の貼り付け機能は、基本的に、(技術４)に記載されているディスプレイ１２への光信号を用いたインタラクション機能と同じ仕組みにて実装できる。
【００５８】
上述の例では、情報の取得貼り付けについて述べたが、鏡２１内に通常のＷｅｂコンテンツを表示し、光信号によりそのアンカーをクリックするような処理を実装することも可能である。例えば、携帯端末ＩＤを送信する光信号が検出された位置座標に対応するディスプレイ１２上の位置座標においていわゆるクリックが発生したものとして処理することにより実装することができる。
【００５９】
これらの処理以外にも、光信号を用いたドラッグやダブルクリックなどの操作を実施できるようにコンピュータ１４内の光信号検出手段１５、制御手段１６および制御手段１６上のアプリケーションが実装されても良い。
【００６０】
基本的に光信号検出手段１５は、光信号を利用したポインティングデバイスとして機能することから、その実装は通常のポインティングデバイスにおける処理と同様である。ただし、いずれの操作を行うにしても光信号を用いたことにより、鏡面に触れることなく操作を実施できる。
【００６１】
(実施形態２)
図１０は、本発明の実施形態２を示す鏡型情報提供装置の構成図である。
【００６２】
鏡型情報提供装置はいわゆるホームネットワークシステムの端末として利用されることを前提としている。したがって、図１０に示すようなホームネットワークシステムの一部として利用される。
【００６３】
図１０に示す、鏡型情報提供装置タイプ１は、図１を用いて説明した構成と同等であり、有線ＬＡＮによりホームサーバ１０１およびインターネットに接続されている。
【００６４】
一方、鏡型情報提供装置タイプ２および鏡型情報提供装置タイプ３は、装置の可搬性の向上、小型化を意図した別の構成を示している。
【００６５】
すなわち、鏡型情報提供装置タイプ２は、図１に示した構成に加え、さらに、無線通信手段１０２を具備し、無線でネットワークに接続される構成となっている。多くの既存鏡は可搬性が有り、家の中の任意の場所に移動し設置できる。そのような通常の鏡と同様の可搬性を実現するための構成である。
【００６６】
また、鏡型情報提供装置タイプ３は、さらに小型化を図るために、コンピュータ部分を分離し、ホームサーバ１０１内に具備させたものである。この構成例では、図１中のコンピュータ１４部分は、ホームサーバ１０１内に取り込まれている。そして、鏡部分は、ハーフミラー１１、ディスプレイ１２、イメージセンサ１３および無線通信手段１０２から構成され、イメージセンサ１３の入力映像とディスプレイ１２に出力される画像情報はホームサーバ１０１との間の通信により送受信される。なお、この構成の場合のコンピュータが具備する手段および処理内容はその入力先が鏡部分との通信手段に換わる他は上述の説明の通りである。
【００６７】
なお、本発明に示した装置の一部又は全部の処理機能をプログラムとして構成してコンピュータを用いて実現することができる。また、コンピュータでその各部の処理機能を実現するためのプログラム、あるいはコンピュータにその処理手順を実行させるためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、フレキシブルディスク、ＭＯ、ＲＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録して、保存したり、提供したりすることが可能であり、また、インターネットのような通信ネットワークを介して配布したりすることが可能である。
【図面の簡単な説明】
【００６８】
【図１】鏡型情報提供装置の基本構成図。
【図２】鏡型情報提供装置の概観図。
【図３】鏡型情報提供装置におけるカーソル提示処理の説明図。
【図４】鏡型情報提供装置のディスプレイ表示例を示す図。
【図５】鏡型情報提供装置の鏡内情報提示例を示す図。
【図６】鏡型情報提供装置における情報処理の説明図。
【図７】携帯端末ＩＤと送信先アドレスの対応表の例を示す図。
【図８】鏡型情報提供装置における情報貼り付けの説明図。
【図９】コンテンツIDと関連情報の対応表の例を示す図。
【図１０】ホームネットワークに接続される鏡型情報提供装置の構成例を示す図。
【符号の説明】
【００６９】
１１…ハーフミラー
１２…ディスプレイ
１３…イメージセンサ
１４…コンピュータ
１５…光信号検出手段
１６…制御手段
１７…メモリー
１８…画像出力手段
１９…ネットワークインターフェース
２０…インターネット、ＬＡＮ等のネットワーク
２１…鏡
３１…ユーザ
３２…携帯端末
３３…カーソル
４１…サムネイル画像
１０１…ホームサーバ
１０２…無線通信手段
【技術分野】
【０００１】
本発明は、鏡にネットワーク上の情報を提供する機能を付加した技術に関するものである。
【背景技術】
【０００２】
ユビキタスコンピューティングの研究においては、屋内の壁や家具などに埋め込まれたコンピュータが多様な形で人間の活動を支援するシステムが数多く提案されており、鏡にコンピュータを装着し、鏡内に多様な情報を提示し操作するシステムがいくつか開発されている。
【０００３】
例えば、鏡内に仮想的に提示した画像情報を鏡内の自己像の手でポインティングすることにより情報操作を行うシステムが提案されている(例えば、非特許文献１参照。)。このようなシステムでは、鏡内に提示された画像情報と自己像の位置関係の計算を可能にするため、システム前面を撮影するカメラ映像をディスプレイに表示したビデオミラーを用いている。
【０００４】
また、鏡内に複数の映像を重畳して表示できるように、特殊な光学系を用いて構成された鏡型情報提示装置が提案されている(例えば、非特許文献２参照。)。
【非特許文献１】細谷英一、北端美紀、佐藤秀則、原田育夫、野島久雄、森澤文晴、武藤伸一郎、「実世界インタラクションのためのミラーインタフェース」、インタラクション２００３論文集、ｐｐ．９５−９６、２００３年
【非特許文献２】牛田啓太、田中悠、苗村健、原島博、「鏡メタファに基づくインタラクション／情報環境 i-mirror」、日本バーチャルリアリティ学会論文誌、Ｖｏｌ．８、Ｎｏ．４、ｐｐ．４２１−４３１、２００３年
【発明の開示】
【発明が解決しようとする課題】
【０００５】
既存の鏡と同じように利用可能な鏡型情報提供装置を実現するためには、鏡の機能そのものを完全に有していることが重要である。鏡をモチーフとした既存のシステムでは、いずれもビデオミラーまたは通常の鏡とは異なる特殊な光学系を用いている。鏡には極めて特有な視覚効果がある。建物の内装コーディネートにおいてはこの視覚効果を考慮して鏡を配置する場合が多い。したがって、既存の鏡の視覚効果を完全に備えていなければ、それにとって代わって利用できる鏡型情報提供装置とはなり得ない。
【０００６】
また、ユーザにとって元来鏡とは見るためだけのものである。一方、鏡内に提示された情報コンテンツをポインティングし情報端末に取得する操作は、従来にない鏡とのインタラクションである。このような特性を有する鏡との新しいインタラクションの実装においては、鏡本来の役割に十分配慮し、適切なユーザインタフェースを設計する必要がある。
【０００７】
ユーザの目の前にあるディスプレイをポインティングするには、タッチパネルによる方法が操作性において優れている。しかし、鏡はその本来の用途上、表面に傷や汚れがつくことは望ましくない。このため、鏡表面を直接触れるような操作方法は適切ではない。
【０００８】
かかる事情に鑑みて、本発明はなされたもので、その目的は、 (１)鏡の表面概観が通常の鏡と同等の視覚的特性を示し、(２)鏡内に提示された情報を鏡面に触れることなく操作でき、(３)携帯電話との情報連携が可能である、鏡型情報提供技術を実現することにある。
【課題を解決するための手段】
【０００９】
本発明の鏡型情報提供装置では、既存の鏡と同様の表面概観を実現するために、ハーフミラーを用いる。鏡内への情報提示は、ハーフミラーの背面に密着されたディスプレイにより行う。ディスプレイがブラックアウトしている時点では、表面概観は通常の鏡と同等になる。さらに、光信号により鏡内の情報を操作するために、イメージセンサ、光信号検出手段、ネットワークに接続されたコンピュータを具備する。光信号検出手段は、イメージセンサにより入力される映像から光信号の位置とそのＩＤを検出し、コンピュータが前記光信号検出位置とＩＤに対応する処理を行う。
【００１０】
鏡内の提示情報をユーザが光信号を用いてポインティングするためには、何らかの視覚的フィードバックが必要になる。そのために前記コンピュータは、前記光信号が検出された位置に対応するディスプレイ中の位置にカーソルを提示する処理を行う。
【００１１】
また、ユーザが鏡内の提示情報を光信号によりクリックした際に、その関連情報を光信号の発信元になった携帯端末に送信するために、前記光信号により、光信号の発信元である携帯端末を特定するための携帯端末ＩＤを伝達しこれを利用する。
【００１２】
すなわち、前記コンピュータは、ネットワーク上の情報コンテンツに対応する複数のサムネイル画像をディスプレイ中に表示しておき、いずれかのサムネイル画像上に対応する位置において携帯端末ＩＤを伝達する光信号が検出された場合に、携帯端末ＩＤによって特定される携帯端末にサムネイル画像に対応する情報（情報コンテンツのＵＲＬなど）を送信する。
【００１３】
さらに、ユーザが鏡内に任意の画像情報を貼り付けることができるようにするために、光信号が伝達するＩＤを、所定の情報コンテンツを特定するためのコンテンツＩＤとしても用いる。
【００１４】
この場合、コンピュータは、コンテンツＩＤを伝達する光信号が検出された場合に、光信号が検出された位置に対応するディスプレイ上の位置に、コンテンツＩＤによって特定される情報コンテンツのサムネイル画像を表示する。
【００１５】
さらに、本発明の鏡型情報提供装置が具備する光信号検出手段は、光信号として、複数の色を用いる色点滅信号を検出するように実装される。例えば、既存携帯端末に具備されるカラーディスプレイを光源として発信できる色相差光信号を検出できるように実装される。
【００１６】
これにより、既存携帯端末は、それらに何ら特殊なデバイスを付加することなく、本発明の鏡型情報提供装置に連携される。
【発明の効果】
【００１７】
本発明による鏡型情報提供装置は、ハーフミラーとディスプレイを貼り付けた構成とすることにより、表面概観は通常の鏡に相違ない。薄型軽量の液晶ディスプレイを用いることにより、体積も小さく実装でき、十分に屋内の壁などに設置できる。
【００１８】
また、鏡内の提示情報の操作に光信号を用いるようにしたことで、鏡面に直接触れること無く操作できる。すなわち、鏡面を汚さずに操作ができる。
【００１９】
また、光信号を用いる場合、鏡側には、光信号検出用の小さなイメージセンサを具備すればよく、タッチパネル装置を具備する場合に比べ、装置コスト、小型化の面で有利である。
【００２０】
また、光信号として、携帯電話のカラーディスプレイを用いて発信できる色相差を用いた光信号を利用できる。
【００２１】
また、一部の携帯電話にもともと具備されている赤外線光源を用いた光信号を利用できる。したがって、既存携帯電話に何ら変更を加えること無く、それらを本発明の鏡型情報提供装置に連携できる。
【発明を実施するための最良の形態】
【００２２】
(実施形態１)
本発明の鏡型情報提供装置の基本的な構成例を図１に示す。
【００２３】
図１に示すように、鏡型情報提供装置はハーフミラー１１とディスプレイ１２とから構成される鏡２１、イメージセンサ１３、およびネットワーク２０に接続するコンピュータ１４によって構成され、コンピュータ１４は、光信号検出手段１５、制御手段１６、メモリ１７、画像出力手段１８、およびネットワークインタフェース１９から構成される。
【００２４】
ディスプレイ１２の表示部は、ハーフミラー１１の背面に密着される。したがって、ハーフミラー１１の表面概観はディスプレイ１２がブラックアウトした時点では、通常の鏡と相違がない。
【００２５】
イメージセンサ１３はハーフミラー１１とディスプレイ１２とからなる鏡２１に、鏡２１の前方を撮像するように設置される。
【００２６】
コンピュータ１４は、汎用のパーソナルコンピュータ等が具備する一連のハードウェアおよびソフトウェアを有する。さらに、イメージセンサ１３が撮像する映像を処理し、光信号を検出する光信号検出手段を具備する点が特徴である。
【００２７】
また、光信号検出手段１５はＤＳＰ(Ｄｉｇｉｔａｌ Ｓｉｇｎａｌ Ｐｒｏｃｅｓｓｏｒ)などのハードウェアとして実装してもよい。なお、ＤＳＰとは、音声や画像などの処理に特化したマイクロプロセッサであり、モデムやパソコンなどに搭載されて所定の処理を高速に行うハードウェアである。また、光信号検出手段１５はコンピュータＯＳ上で動作するソフトウェアとしても実装できる。
【００２８】
コンピュータ１４が有する制御手段１６は、ネットワーク２０を経由して取得される各種情報コンテンツに対応するサムネイル画像を画像出力手段１８によりディスプレイ１２に表示する。この結果、鏡２１内に各種情報が提示されることになる。さらにコンピュータ１４は、光信号検出手段１５により検出された光信号に基づき、提示された各種情報に対する処理を行う。
【００２９】
図２に実際に開発した鏡型情報提供装置の概観図を示す。図２に示すように、ディスプレイ１１およびコンピュータ１４を壁に埋め込んだ構成にすることができる。
【００３０】
以下に、鏡型情報提供装置の利用について、図面を用いて説明する。
【００３１】
(カーソルの提示)
まず、コンピュータ１４は、鏡２１内に提示した任意のサムネイル画像を光信号によりユーザがポインティングできるように、ユーザがどの位置をポインティングしているかを示すカーソルを鏡２１内に提示する。このカーソル提示をコンピュータ１４がどのように処理するかを図３を用いて説明する。
【００３２】
図３に示すように、ユーザ３１は、携帯電話等の携帯端末の光信号の光源３２を手元に持ち、ハーフミラー１１とディスプレイ１２とからなる鏡２１に向けて光信号を発信する。この光信号としては、単純な輝度差点滅信号や、色相差を用いて色点滅信号が利用可能である。
【００３３】
具体的には、下記の技術１〜４に記載されている光信号を利用できる。
(技術１)松下伸行、日原大輔、後輝行、吉村真一、暦本純一、「ＩＤ Ｃａｍ：シーンとＩＤを同時に取得可能なスマートカメラ」、情報処理学会論文誌ｖｏｌ．４３、Ｎｏ．１２、ｐｐ．３６６４−３６７４、Ｄｅｃ．２００２
(技術２)Ｄ．Ｊ．Ｍｏｏｒｅ、Ｒ．Ｗａｎｔ、ｅｔ ａｌ．「Ｉｍｐｌｅｍｅｎｔｉｎｇ Ｐｈｉｃｏｎｓ：Ｃｏｍｂｉｎｉｎｇ Ｃｏｍｐｕｔｅｒ Ｖｉｓｉｏｎ ｗｉｔｈ Ｉｎｆｒａｒｅｄ Ｔｅｃｈｎｏｌｏｇｙ ｆｏｒ Ｉｎｔｅｒａｃｔｉｖｅ Ｐｈｙｓｉｃａｌ Ｉｃｏｎ」、Ｐｒｏｃｅｅｄｉｎｇｓ ｏｆ ＡＣＭ ＵＩＳＴ’９９、Ａｓｈｖｉｌｌｅ、Ｎ．Ｃ．、Ｎｏｖｅｍｂｅｒ ８ｔｈ−１０ｔｈ、ｐｐ．６７−６８、１９９９
(技術３)青木恒、「カメラで読み取る赤外線タグとその応用」インタラクティブシステムとソフトウェアVIII，ｐｐ．１３１−１３６，近代科学社、２０００
(技術４)宮奥健人、東野豪、外村佳伸、「Ｃ−Ｂｌｉｎｋ：携帯電話ディスプレイによる色相差光信号マーカ」、インタラクション２００４論文集、ｐｐ．１５３−１６０、２００４ 。
【００３４】
特に、技術４に記載の、色相差光信号方式を利用する場合、光源として携帯端末のカラーディスプレイを利用することができる。
【００３５】
イメージセンサ１３の入力映像は、まず、光信号処理手段１５に送られる。そして、左右反転処理がなされた後、連続する映像フレームを処理し、光信号の位置およびＩＤを検出する。
【００３６】
具体的な処理内容は利用する光信号により異なる。光信号により、それぞれ、技術１〜技術４に記載される処理を行い、位置およびＩＤを検出する。
【００３７】
一方、連続した点滅信号ではなく、所定の形状マーカを提示する光信号も利用できる。例えば、
(技術５)暦本純一、「２次元マトリックスコードを利用した拡張現実感の構成手法」、インタラクティブとソフトウェアIV、ｐｐ．１９９−２０８、近代科学社、１９９６
に記載されるような２次元マトリックスコードを光信号として利用することができる。その他にも、ＩＤを一意に識別でき、画像中からその位置を検出可能な特徴形状を有する幾何模様、キャラクター漫画などを光信号として用いることが可能である。
【００３８】
上記の手順により、光信号検出手段１５により光信号の領域並びに重心若しくは中心座標が検出された後、制御手段１６は重心または中心座標に対応するディスプレイ１２上の座標にカーソル３３を提示する処理を行う。例えば、入力映像のサイズが１６０×１２０であり、ディスプレイ１２の解像度が１６００×１２００であれば、映像中の座標(Ｘ、Ｙ)に対応するディスプレイ１２上の座標とは、(Ｘ×１０、Ｙ×１０)となる。
【００３９】
以上の手順をコンピュータ１４はリアルタイムに実施する。結果、ユーザが手元の光信号源を動かすと、提示されるカーソルもその動きに応じて移動する。なお、カーソル提示に用いられる光信号は、カーソル用の信号であることを示すＩＤを伝達する、または、ＩＤ情報を含まないものとする。
【００４０】
(情報提示の携帯端末への取得)
次に、鏡２１内に提示されたサムネイル画像に関連する情報を、光信号の光源となる携帯端末３２に取得する機能について説明する。鏡型情報提供装置では、コンピュータ１４内で動作する情報提供アプリケーションソフトウェアにより、随時自動的にネットワーク２０上の新着情報などが提示される。情報提供アプリケーションソフトウェアとは、いわゆるＷｅｂブラウザとそのコンテンツであってよい。また、
(技術６)渡邊恵太、安村通晃、「Ｍｅｍｏｒｉｕｍ：眺めるインターフェースの提案とその試作」、ＷＩＳＳ２００２論文集、ｐｐ．９９−１０４、２００２
で提案されているようなユーザに情報の存在を気付かせることを意図した情報表示方法を用いるアプリケーションであってよい。
【００４１】
この際に、ディスプレイ１４には、図４に示すように、複数のサムネイル画像４１が提示される。また、カーソル提示用の光信号が検出された位置にカーソル３３が提示される。その結果、図５に示すように鏡２１内に情報が提示される。
【００４２】
ここで、鏡２１内に提示された、サムネイル画像４１の一つをクリックし、その関連情報(ＵＲＬ)を光源である携帯端末３２に取得する処理について図６を用いて説明する。
【００４３】
ユーザ３１は、鏡２１内に提示されるカーソル３３を手元の携帯端末３２を動かして所望のサムネイル画像４１上へ移動する。そして、携帯端末３２上の所定のボタンを押すことにより、携帯端末３２を特定するＩＤ(携帯端末ＩＤ)送信する光信号を発信する。
【００４４】
光信号検出手段１５は、カーソル提示のための光信号の検出と同様の手順で、携帯端末ＩＤを送信する光信号をイメージセンサ映像中から検出し、その位置座標(領域の重心または中心)と携帯端末ＩＤを制御手段１６に通知する。
【００４５】
制御手段１６は、通知された位置座標に対応するディスプレイ１２上座標において携帯端末ＩＤによって特定される携帯端末３２によりクリックが発生したこととしてこれを処理する。
【００４６】
すなわち、制御手段１６によって制御される情報提供アプリケーションソフトウェアは、ディスプレイ１２上に複数のサムネイル画像４１を表示しており、そのうちの一つのサムネイル画像４１上で、携帯端末ＩＤによって特定される携帯端末３２によりクリックが発生したというイベントを処理する。
【００４７】
ここで、このイベントに伴う処理内容として、情報提供アプリケーションの実装により、より多様な処理を対応づけることができる。
【００４８】
クリックされた情報を携帯端末３２に取得させる機能を実現するために、制御手段１６は下記の処理を行う。
【００４９】
まず、制御手段１６またはその上で動作する情報提供アプリケーションソフトウェアは、図７に示すような各携帯端末ＩＤに対応した携帯端末アドレスを管理する。そして、上記の手順により、携帯端末ＩＤが検出された場合に、まず、検出位置座標に対応するディスプレイ１２上の座標に表示されているサムネイル画像４１を検出する。制御手段１６または情報提供アプリケーションソフトウェアは、各サムネイル画像に対応するＵＲＬも同様に管理しており、携帯端末ＩＤを伝達する光信号によりクリックされたサムネイル画像に対応するＵＲＬを携帯端末ＩＤに対応するアドレスにネットワーク２０を介して送信する。
【００５０】
図７では、各携帯端末アドレスは、ｅ−ｍａｉｌアドレスとして管理されている。したがって、この例では、ＵＲＬ情報はｅ−ｍａｉｌとして送信される。なお、各携帯端末アドレスをＩＰアドレスとして管理し、ＩＰパケットとして送信することも可能である。
【００５１】
この他にも、利用するネットワーク２０のプロトコルに応じたアドレスと送信方式が利用可能である。
【００５２】
また、各携帯端末ＩＤに対応する携帯端末アドレス情報は、コンピュータ１４そのものが保持せず、ネットワーク上の所定のサーバに保持され、必要に応じて、コンピュータ１４がアクセスして利用するように実装されていても良い。
【００５３】
(携帯端末から鏡内への情報の貼り付け)
携帯端末３２によって鏡２１内に画像情報を貼り付ける機能について図８を用いて説明する。図８に示すように、ユーザ３１は、鏡２１内に提示されるカーソル３３を手元の携帯端末３２によって動かして、画像情報を貼り付けたい位置へカーソル３３を移動させる。そして、携帯端末３２上の所定のボタンを押すことにより、画像情報を特定するコンテンツＩＤを送信する光信号を発信する。
【００５４】
光信号検出手段１５は、カーソル提示のための光信号の検出と同様の手順で、コンテンツＩＤを送信する光信号をイメージセンサ１３映像中から検出し、その位置座標(領域の重心または中心)とコンテンツＩＤを制御手段１６に通知する。
【００５５】
制御手段１６は、位置座標に対応するディスプレイ１２上の座標においてコンテンツＩＤによって特定される画像情報を貼り付ける操作が発生したことを検知し、これを処理する。
【００５６】
具体的には、図９に示すような、コンテンツＩＤとサムネイル画像４１の対応関係を保持し、コンテンツＩＤに対応する画像を、コンテンツＩＤの光信号の検出位置座標に対応するディスプレイ１２上の位置に提示する。
【００５７】
上述した提示情報の携帯端末３２への取得機能および携帯端末３２からの鏡２１内への情報の貼り付け機能は、基本的に、(技術４)に記載されているディスプレイ１２への光信号を用いたインタラクション機能と同じ仕組みにて実装できる。
【００５８】
上述の例では、情報の取得貼り付けについて述べたが、鏡２１内に通常のＷｅｂコンテンツを表示し、光信号によりそのアンカーをクリックするような処理を実装することも可能である。例えば、携帯端末ＩＤを送信する光信号が検出された位置座標に対応するディスプレイ１２上の位置座標においていわゆるクリックが発生したものとして処理することにより実装することができる。
【００５９】
これらの処理以外にも、光信号を用いたドラッグやダブルクリックなどの操作を実施できるようにコンピュータ１４内の光信号検出手段１５、制御手段１６および制御手段１６上のアプリケーションが実装されても良い。
【００６０】
基本的に光信号検出手段１５は、光信号を利用したポインティングデバイスとして機能することから、その実装は通常のポインティングデバイスにおける処理と同様である。ただし、いずれの操作を行うにしても光信号を用いたことにより、鏡面に触れることなく操作を実施できる。
【００６１】
(実施形態２)
図１０は、本発明の実施形態２を示す鏡型情報提供装置の構成図である。
【００６２】
鏡型情報提供装置はいわゆるホームネットワークシステムの端末として利用されることを前提としている。したがって、図１０に示すようなホームネットワークシステムの一部として利用される。
【００６３】
図１０に示す、鏡型情報提供装置タイプ１は、図１を用いて説明した構成と同等であり、有線ＬＡＮによりホームサーバ１０１およびインターネットに接続されている。
【００６４】
一方、鏡型情報提供装置タイプ２および鏡型情報提供装置タイプ３は、装置の可搬性の向上、小型化を意図した別の構成を示している。
【００６５】
すなわち、鏡型情報提供装置タイプ２は、図１に示した構成に加え、さらに、無線通信手段１０２を具備し、無線でネットワークに接続される構成となっている。多くの既存鏡は可搬性が有り、家の中の任意の場所に移動し設置できる。そのような通常の鏡と同様の可搬性を実現するための構成である。
【００６６】
また、鏡型情報提供装置タイプ３は、さらに小型化を図るために、コンピュータ部分を分離し、ホームサーバ１０１内に具備させたものである。この構成例では、図１中のコンピュータ１４部分は、ホームサーバ１０１内に取り込まれている。そして、鏡部分は、ハーフミラー１１、ディスプレイ１２、イメージセンサ１３および無線通信手段１０２から構成され、イメージセンサ１３の入力映像とディスプレイ１２に出力される画像情報はホームサーバ１０１との間の通信により送受信される。なお、この構成の場合のコンピュータが具備する手段および処理内容はその入力先が鏡部分との通信手段に換わる他は上述の説明の通りである。
【００６７】
なお、本発明に示した装置の一部又は全部の処理機能をプログラムとして構成してコンピュータを用いて実現することができる。また、コンピュータでその各部の処理機能を実現するためのプログラム、あるいはコンピュータにその処理手順を実行させるためのプログラムを、そのコンピュータが読み取り可能な記録媒体、例えば、フレキシブルディスク、ＭＯ、ＲＯＭ、メモリカード、ＣＤ、ＤＶＤ、リムーバブルディスクなどに記録して、保存したり、提供したりすることが可能であり、また、インターネットのような通信ネットワークを介して配布したりすることが可能である。
【図面の簡単な説明】
【００６８】
【図１】鏡型情報提供装置の基本構成図。
【図２】鏡型情報提供装置の概観図。
【図３】鏡型情報提供装置におけるカーソル提示処理の説明図。
【図４】鏡型情報提供装置のディスプレイ表示例を示す図。
【図５】鏡型情報提供装置の鏡内情報提示例を示す図。
【図６】鏡型情報提供装置における情報処理の説明図。
【図７】携帯端末ＩＤと送信先アドレスの対応表の例を示す図。
【図８】鏡型情報提供装置における情報貼り付けの説明図。
【図９】コンテンツIDと関連情報の対応表の例を示す図。
【図１０】ホームネットワークに接続される鏡型情報提供装置の構成例を示す図。
【符号の説明】
【００６９】
１１…ハーフミラー
１２…ディスプレイ
１３…イメージセンサ
１４…コンピュータ
１５…光信号検出手段
１６…制御手段
１７…メモリー
１８…画像出力手段
１９…ネットワークインターフェース
２０…インターネット、ＬＡＮ等のネットワーク
２１…鏡
３１…ユーザ
３２…携帯端末
３３…カーソル
４１…サムネイル画像
１０１…ホームサーバ
１０２…無線通信手段
【特許請求の範囲】
【請求項１】
ハーフミラーと当該ハーフミラーの背面に設置されたディスプレイとからなる情報を表示する鏡と、
前記鏡の前方を撮像するイメージセンサと、
ネットワークに接続するコンピュータと、からなる鏡型情報提供装置であって、
前記コンピュータは、
前記イメージセンサから入力される映像から、少なくとも、ユーザの携帯端末が送信する光信号の位置、光信号のＩＤ、および光信号ポインティングを検出する光信号検出手段と、
前記光信号検出手段が検出した光信号の位置、光信号のＩＤ、および光信号ポインティングに対応する処理を行う制御手段と、
を有することを特徴とする鏡型情報提供装置。
【請求項２】
前記制御手段は、前記光信号が検出された位置に対応する前記ディスプレイ中の位置にカーソルを提示する処理を行うことを特徴とする請求項１に記載の鏡型情報提供装置。
【請求項３】
前記光信号のＩＤを、当該光信号を発信する携帯端末を特定するための携帯端末ＩＤとして用いることを特徴とする請求項１または２に記載の鏡型情報提供装置。
【請求項４】
前記コンピュータは、ネットワーク上の情報コンテンツに対応するサムネイル画像をディスプレイ中に表示し、
前記光信号によるポインティング位置がサムネイル画像の位置に対応しているときは、前記制御手段が当該光信号ＩＤから特定される携帯端末に前記サムネイル画像に対応する情報を送信することを特徴とする請求項１〜３いずれかに記載の鏡型情報提供装置。
【請求項５】
前記光信号が伝達するＩＤを、所定の情報コンテンツを特定するためのコンテンツＩＤとして用いることを特徴とする請求項１〜４いずれかに記載の鏡型情報提供装置。
【請求項６】
前記制御手段は、前記コンテンツＩＤを特定する光信号によるポインティングを検出した場合には、当該光信号が検出された位置に対応するディスプレイ上の位置に、前記コンテンツＩＤによって特定される情報コンテンツのサムネイル画像を表示することを特徴とする請求項５に記載の鏡型情報提供装置。
【請求項７】
前記光信号検出手段が検出する光信号は、複数の色を用いて構成される色点滅光信号であることを特徴とする請求項１〜６いずれかに記載の鏡型情報提供装置。
【請求項８】
ハーフミラーと当該ハーフミラーの背面に設置されたディスプレイとからなる情報を表示する鏡と、
前記鏡の前方を撮像するイメージセンサと、
ネットワークに接続するコンピュータと、からなる鏡型情報提供装置における情報提供方法であって、
前記コンピュータは、
光信号検出手段により、前記イメージセンサから入力される映像から、少なくとも、ユーザの携帯端末が送信する光信号の位置、光信号のＩＤ、および光信号ポインティングを検出し、
制御手段により、前記光信号検出手段が検出した光信号の位置、光信号のＩＤ、および光信号ポインティングに対応する処理を行う、
ことを有することを特徴とする情報提供方法。
【請求項９】
前記制御手段は、前記光信号が検出された位置に対応する前記ディスプレイ中の位置にカーソルを提示する処理を行うことを特徴とする請求項８に記載の情報提供方法。
【請求項１０】
前記光信号のＩＤを、当該光信号を発信する携帯端末を特定するための携帯端末ＩＤとして用いることを特徴とする請求項８または９に記載の情報提供方法。
【請求項１１】
前記コンピュータは、ネットワーク上の情報コンテンツに対応するサムネイル画像をディスプレイ中に表示し、
前記光信号によるポインティング位置がサムネイル画像の位置に対応しているときは、前記制御手段が当該光信号ＩＤから特定される携帯端末に前記サムネイル画像に対応する情報を送信することを特徴とする請求項８〜１０いずれかに記載の情報提供方法。
【請求項１２】
前記光信号が伝達するＩＤを、所定の情報コンテンツを特定するためのコンテンツＩＤとして用いることを特徴とする請求項８〜１１いずれかに記載の情報提供方法。
【請求項１３】
前記制御手段は、前記コンテンツＩＤを特定する光信号によるポインティングを検出した場合には、当該光信号が検出された位置に対応するディスプレイ上の位置に、前記コンテンツＩＤによって特定される情報コンテンツのサムネイル画像を表示することを特徴とする請求項１２に記載の情報提供方法。
【請求項１４】
前記光信号検出手段が検出する光信号は、複数の色を用いて構成される色点滅光信号であることを特徴とする請求項８〜１３いずれかに記載の情報提供方法。
【請求項１５】
上記の請求項１〜１４のいずれか１項に記載の鏡型情報提供装置または情報提供方法を、コンピュータプログラムで記載してそれを実行可能にしたことを特徴とするプログラム。
【請求項１】
ハーフミラーと当該ハーフミラーの背面に設置されたディスプレイとからなる情報を表示する鏡と、
前記鏡の前方を撮像するイメージセンサと、
ネットワークに接続するコンピュータと、からなる鏡型情報提供装置であって、
前記コンピュータは、
前記イメージセンサから入力される映像から、少なくとも、ユーザの携帯端末が送信する光信号の位置、光信号のＩＤ、および光信号ポインティングを検出する光信号検出手段と、
前記光信号検出手段が検出した光信号の位置、光信号のＩＤ、および光信号ポインティングに対応する処理を行う制御手段と、
を有することを特徴とする鏡型情報提供装置。
【請求項２】
前記制御手段は、前記光信号が検出された位置に対応する前記ディスプレイ中の位置にカーソルを提示する処理を行うことを特徴とする請求項１に記載の鏡型情報提供装置。
【請求項３】
前記光信号のＩＤを、当該光信号を発信する携帯端末を特定するための携帯端末ＩＤとして用いることを特徴とする請求項１または２に記載の鏡型情報提供装置。
【請求項４】
前記コンピュータは、ネットワーク上の情報コンテンツに対応するサムネイル画像をディスプレイ中に表示し、
前記光信号によるポインティング位置がサムネイル画像の位置に対応しているときは、前記制御手段が当該光信号ＩＤから特定される携帯端末に前記サムネイル画像に対応する情報を送信することを特徴とする請求項１〜３いずれかに記載の鏡型情報提供装置。
【請求項５】
前記光信号が伝達するＩＤを、所定の情報コンテンツを特定するためのコンテンツＩＤとして用いることを特徴とする請求項１〜４いずれかに記載の鏡型情報提供装置。
【請求項６】
前記制御手段は、前記コンテンツＩＤを特定する光信号によるポインティングを検出した場合には、当該光信号が検出された位置に対応するディスプレイ上の位置に、前記コンテンツＩＤによって特定される情報コンテンツのサムネイル画像を表示することを特徴とする請求項５に記載の鏡型情報提供装置。
【請求項７】
前記光信号検出手段が検出する光信号は、複数の色を用いて構成される色点滅光信号であることを特徴とする請求項１〜６いずれかに記載の鏡型情報提供装置。
【請求項８】
ハーフミラーと当該ハーフミラーの背面に設置されたディスプレイとからなる情報を表示する鏡と、
前記鏡の前方を撮像するイメージセンサと、
ネットワークに接続するコンピュータと、からなる鏡型情報提供装置における情報提供方法であって、
前記コンピュータは、
光信号検出手段により、前記イメージセンサから入力される映像から、少なくとも、ユーザの携帯端末が送信する光信号の位置、光信号のＩＤ、および光信号ポインティングを検出し、
制御手段により、前記光信号検出手段が検出した光信号の位置、光信号のＩＤ、および光信号ポインティングに対応する処理を行う、
ことを有することを特徴とする情報提供方法。
【請求項９】
前記制御手段は、前記光信号が検出された位置に対応する前記ディスプレイ中の位置にカーソルを提示する処理を行うことを特徴とする請求項８に記載の情報提供方法。
【請求項１０】
前記光信号のＩＤを、当該光信号を発信する携帯端末を特定するための携帯端末ＩＤとして用いることを特徴とする請求項８または９に記載の情報提供方法。
【請求項１１】
前記コンピュータは、ネットワーク上の情報コンテンツに対応するサムネイル画像をディスプレイ中に表示し、
前記光信号によるポインティング位置がサムネイル画像の位置に対応しているときは、前記制御手段が当該光信号ＩＤから特定される携帯端末に前記サムネイル画像に対応する情報を送信することを特徴とする請求項８〜１０いずれかに記載の情報提供方法。
【請求項１２】
前記光信号が伝達するＩＤを、所定の情報コンテンツを特定するためのコンテンツＩＤとして用いることを特徴とする請求項８〜１１いずれかに記載の情報提供方法。
【請求項１３】
前記制御手段は、前記コンテンツＩＤを特定する光信号によるポインティングを検出した場合には、当該光信号が検出された位置に対応するディスプレイ上の位置に、前記コンテンツＩＤによって特定される情報コンテンツのサムネイル画像を表示することを特徴とする請求項１２に記載の情報提供方法。
【請求項１４】
前記光信号検出手段が検出する光信号は、複数の色を用いて構成される色点滅光信号であることを特徴とする請求項８〜１３いずれかに記載の情報提供方法。
【請求項１５】
上記の請求項１〜１４のいずれか１項に記載の鏡型情報提供装置または情報提供方法を、コンピュータプログラムで記載してそれを実行可能にしたことを特徴とするプログラム。
【図４】
【図７】
【図９】
【図１】
【図２】
【図３】
【図５】
【図６】
【図８】
【図１０】
【図７】
【図９】
【図１】
【図２】
【図３】
【図５】
【図６】
【図８】
【図１０】
【公開番号】特開２００６−４００８３（Ｐ２００６−４００８３Ａ）
【公開日】平成１８年２月９日（２００６．２．９）
【国際特許分類】
【出願番号】特願２００４−２２１０９３（Ｐ２００４−２２１０９３）
【出願日】平成１６年７月２９日（２００４．７．２９）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
【公開日】平成１８年２月９日（２００６．２．９）
【国際特許分類】
【出願日】平成１６年７月２９日（２００４．７．２９）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
[ Back to top ]