人関連ピクチャー及びビデオストリーム処理用通信装置
【課題】 少なくとも一つの無線通信チャンネルを具備する通信装置（１，１’、１”）が少なくとも一つの遠隔供給源からデジタルピクチャ及び／又はビデオストリームを受け取る形態とされている。
【解決手段】 該通信装置（１，１’、１”）は、予め格納されている人識別データによって前記通信装置と関連している少なくとも一人の人が該遠隔供給源のデジタルピクチャ及び／又はビデオストリームにおいて識別可能であるか否かをテストし、且つ該人識別テストの結果が肯定的である場合にのみ、該遠隔供給源のデジタルピクチャ及び／又はビデオストリームを処理する形態とされている。
【解決手段】 該通信装置（１，１’、１”）は、予め格納されている人識別データによって前記通信装置と関連している少なくとも一人の人が該遠隔供給源のデジタルピクチャ及び／又はビデオストリームにおいて識別可能であるか否かをテストし、且つ該人識別テストの結果が肯定的である場合にのみ、該遠隔供給源のデジタルピクチャ及び／又はビデオストリームを処理する形態とされている。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、少なくとも１個の遠隔供給源（ｒｅｍｏｔｅ ｓｏｕｒｃｅ）からデジタルピクチャー及び／又はビデオストリームを受け取る形態とされている少なくとも１個の無線通信チャンネルを具備する通信装置に関するものである。
【背景技術】
【０００２】
カメラを具備するモバイル電話は迅速なペースで増殖している。カメラの低コストに押されて、全てのモバイル電話の中でのカメラ電話の百分率も迅速に増加している。予想されることは、数年で、殆ど全てのモバイル電話にカメラが具備されることとなる。モバイル電話及びその他のポータブル装置に対してのハンズフリー能力の付加によって音声通話は一層便利なものとされている。これらはユーザが電話を耳に保持することの必要性を取除いている。
【０００３】
将来、電話及びその他のポータブル装置は一層多くのビデオ通話トラフィックを担持することであろう。対応する通信装置又はシステムに対して送信される「私が見るものを見よ（ｓｅｅ ｗｈａｔ Ｉ ｓｅｅ）」ビデオ又は静止画ストリームを作成するために頭に装着した（例えば、耳又は眼鏡）カメラを使用することが可能であろう。
【０００４】
しかしながら、ハンヅフリーの「私の顔を見よ（ｓｅｅ ｍｙ ｆａｃｅ）」ビデオ又は静止画の送信を作成することは、結果的に使用される装着付属物が美的に好ましいものではないので、多分、実現不可能である。
【０００５】
カメラのコストが迅速に低下していることは、不断に増加する品質及び小型化と対となって、カメラをＰＤＡ等の広範なモバイル通信装置に組み込むことを可能としている。該モバイル通信装置は、通常、無線ＬＡＮインターフェース、ブルトース装置等からなる通信手段を具備しており、従ってビルトイン通信手段の範囲内において種々のその他の装置と通信することが可能である。
【０００６】
一方、無線ＬＡＮインターフェース、ブルトース装置等の通信手段を具備しているデジタルカメラ（静止画及びビデオ）が益々ポピュラーなものとなっている。未だに「カメラ」と呼ばれているが、これらの装置は多機能通信装置となっている。
【０００７】
画像を基礎とした情報検索システムが、公開された米国特許出願ＵＳ２００６／００１２６７７Ａ１に開示されている。この画像を基礎とした情報検索システムは、モバイル電話と遠隔サーバとを包含している。該モバイル電話は、ビルトインカメラと、該ビルトインカメラから該遠隔サーバへ画像を送信するための通信リンクとを有している。該遠隔サーバは、該モバイル電話からの画像に基づいて第１信頼値を発生するための光学的文字認識エンジンと、該モバイル電話からの画像に基づいて第２信頼値を発生するためのオブジェクト認識エンジンと、該モバイル電話からの画像に基づいて第３信頼値を発生するための顔認識エンジンと、該第１、第２、及び第３信頼値を受け取り且つ認識出力を発生するための統合器モジュールと、を有している。
【０００８】
しかしながら、該既知の画像を基礎とした情報検索システムは、その他の装置の中で遠隔サーバを必要とする非常に複雑なシステムである。通信は、モバイル電話と遠隔サーバとの間においてのみ行われるに過ぎない。更に、該既知の解決策は、画像を基礎としたサーチサービスの商業的初公開のために特に適したものとされているビジネスモデルを作成するために画像サーチを一層早いものとさせることに焦点が合わされている。更に、該既知の解決策は、ポータブル通信装置間においてのビデオ及び静止画ストリームを交換させるものではない。
【発明の概要】
【発明が解決しようとする課題】
【０００９】
従って、カメラを具備しているモバイル通信装置によって提供される設備の一層効果的な使用に対する必要性が未だに存在している。特に、不恰好なホルダー、スタンド等でユーザを困惑させることなしに、所謂「私の顔を見よ」ビデオ通信を行うことを向上させることの必要性が存在している。
【課題を解決するための手段】
【００１０】
本発明は、この必要性を満足させるものである。それは、例えば、モバイル電話又はローカルエリア無線ネットワークを具備しているデジタルカメラ（静止画及びビデオ）などの多様なポータブル及び静止した通信装置間における「私の顔を見よ」ハンヅフリーピクチャー及びビデオ送信を可能とする。
【００１１】
本発明は、特に、無線ハンズフリーカメラを具備する装置を含む種々の通信装置が共存する状況において使用可能である。
【００１２】
上に定義した目的を達成するために、本発明に基づく通信装置の場合には、本発明に基づく通信装置が以下に定義する態様で特性付けることが可能であるような特徴を有するものであり、即ち、
少なくとも１個の遠隔供給源からのデジタルピクチャー及び／又はビデオストリームを受け取る形態とされている少なくとも１個の無線通信チャンネルを具備する通信装置において、該通信装置は、以前に格納した人識別データによって前記通信装置と関連する少なくとも一人の人を該遠隔供給源のデジタルピクチャー及び／又はビデオストリームにおいて識別可能であるか否かをテストし、且つ該人識別テストの結果が肯定的である場合にのみ該遠隔供給源の該デジタルピクチャー及び／又はビデオストリームを処理する形態とされている。
【００１３】
本発明の特徴は、ユーザの装置上で「私の顔を見よ」ピクチャー及びビデオ記録が可能となるという利点を提供する。
【００１４】
理解すべきことであるが、本発明に基づく通信装置は、又、遠隔供給源として動作することが可能である。
【００１５】
請求項２において請求されているような対応措置は、通信装置が遠隔供給源によって供給される人識別データに依存することが可能であるという利点を提供する。
【００１６】
請求項３又は請求項５において請求されているような対応措置は、夫々、非常に高い人認識率を達成することが可能であるという利点を提供する。
【００１７】
請求項４において請求されているような対応措置は、人識別データが遠隔供給源によって送られるものではない場合に、通信装置自身によってそれを得ることが可能であるという利点を提供する。
【００１８】
請求項７、請求項８、又は請求項９において請求されているような対応措置は、夫々、本発明に基づく通信装置は、それ自身のカメラによって取られたピクチャー及びビデオと、遠隔供給源によって送られたピクチャー及びビデオとの両方を処理することが可能であるという利点を提供する。更に、それは、顔認識係数を発生し且つブロードキャストすることが可能である。
【００１９】
請求項１０において請求されているような対応措置は、その主要なユーザ、及び家族などのその他のユーザの顔認識パラメータで該通信装置を訓練することを可能とする。
【００２０】
請求項１１において請求されているような対応措置は、容易なハンズフリーでのピクチャー及びビデオを取ることを可能とさせる。
【００２１】
請求項１２、請求項１３、請求項１４、請求項１５、又は請求項１６において請求されているような対応措置は、夫々、その時に話をしている人に対して自動的にスイッチされるビデオストリームを発生させることとなる他の通信装置とのビデオ会議通話を確立することを可能とさせるという利点を提供する。一人を超える人が話している場合には、ビデオフィード（送り）は、例えば、種々の装置によって同時に記録された全てのビデオストリームのマトリクス（行列）とすることが可能なグローバルビュー（ｇｌｏｂａｌ ｖｉｅｗ）又は単なる一般的な部屋レベルビュー（ｒｏｏｍ ｌｅｖｅｌ ｖｉｅｗ）等へ移行することが可能である。
【００２２】
請求項１８、請求項１９、請求項２０、又は請求項２１において請求されているような対応措置は、夫々、カメラが自動的に関心の或る人を追跡することを助ける。このことは、自動画像スタビライザーを形成ために有用である場合がある。
【００２３】
本発明の上に定義した側面及びその他の側面は、以下に説明すべき例示的実施例から明らかであり且つこれらの例示的実施例を参照して説明する。
【図面の簡単な説明】
【００２４】
本発明を例示的実施例を参照して以下により詳細に説明する。しかしながら、本発明はこれらの例示的実施例に制限されるものではない。
【図１】本発明に基づくモバイル通信装置の装置ハードウエア及びソフトウエアブロック図。
【図２】本発明に基づくビデオ及び顔認識パラメータ通信のフローチャート。
【図３】本発明に基づく無線ハンズフリーヘッドセットのブロック図。
【図４】本発明に基づいてモバイル通信装置間においてどのようにしてビデオ又は静止画のコンテンツを共有するかの概略図。
【図５】ホームセキュリティアプリケーションにおいて本発明の使用のフローチャート。
【発明を実施するための形態】
【００２５】
本発明の最初の例は、ユーザが街路に沿って歩いているという場面に基づいている。彼はモバイル電話としての形態とされているモバイル通信装置１を携帯している。該通信装置１は、図１のブロック回路図に概略示されている。それは、カメラ２と、街路を歩いている間にユーザがビデオ通話を行うことを可能とさせるカメラ操縦手段３と、を有している。
【００２６】
モバイル通信装置１は、更に、ローカル無線ネットワークインターフェース４、長距離無線ネットワークインターフェース５、ＩＲトランシーバ６、マイクロフォン７、及びモバイル通信装置の分野において経験の或る人にとっては常識であるので簡潔性のために図面には示されていないがスピーカ、ディスプレイ、キーなどのモバイル電話の従来の部品である全てのその他のハードウエアコンポーネント、を有している。
【００２７】
モバイル通信装置１は、オプションとして、図３中にブロック図で模式的に示してあるヘッドセット１１へリンクさせることが可能である。ヘッドセット１１は、カメラ１２及びカメラ操縦手段１３を有している。それは、更に、ローカル無線ネットワークインターフェース１４、ＩＲトランシーバ１６、マイクロフォン１７、及びヘッドセット１１の全ての機能を制御し且つモニターする制御ソフトウエア１５を有している。通信装置１のカメラ２の代わりにピクチャー及び／又はビデオストリームを取るためにヘッドセット１１のカメラ１２を使用することは、ユーザがハンズフリーのビデオ通話を行うことを可能とさせる。ヘッドセット１１は、夫々のローカル無線ネットワークインターフェース４，１４か又はＩＲトランシーバ６，１６のいずれかを介して、通信装置１と通信を行う。ヘッドセット１１は、更に、例えば、ユーザの耳の上に装着した場合に、ユーザの視野が得られるように該ヘッドセットを着脱自在に固定するための装着手段（図面中には示されていない）を有している。制御ソフトウエア１５は、更に、減少させた帯域幅でモバイル通信装置１へ送信するためにカメラ１２によって取られたピクチャー及び／又はビデオを圧縮する手段を有している。
【００２８】
ユーザが歩くにつれ、彼は、ビルトインカメラ及び無線ネットワークインターフェースを具備しているモバイル通信装置を使用しており近くを通過する他の人の視野、又は、例えば、セキュリティカメラなどのＷｉｆｉ（又はその他の無線）ホットスポットに取り付けられている特定的に配置させた固定カメラの視野の中に入る。彼自身のモバイル通信装置１は、前記装置によって発生される静止画ピクチャー及び／又はビデオクリップが入手可能となり彼の画像を包含している場合にのみそれに一時的に接続するために前記その他の装置との通信を確立しようと試みる。遠隔装置によって取られた該ピクチャー及び／又はビデオが前記ユーザのピクチャーを包含しているか否かを決定するために、かれのモバイル通信装置１は、以下の主要な機能を有するコンピュータプログラムを実行すべく適合されている計算手段８を有している。
【００２９】
● カメラ２によって発生されるピクチャー及び／又はビデオを断続的にスキャンする顔認識アルゴリズムプロセッサ１９。厳格に言うと、顔認識アルゴリズムプロセッサ１９は、通信装置１のビューファインダーへ送られる同一のビデオ情報を受け取る。顔認識アルゴリズムプロセッサ１９は、顔認識係数（ＦＲＣ）を発生するために特に調整されているパターン認識アルゴリズムを有している。
【００３０】
● 非揮発性態様で顔認識係数（ＦＲＣ）を格納する格納手段２０。格納手段２０は、通信装置１の主要なユーザのＦＲＣ及び、オプションとして、主要なユーザの家族などのその他のユーザのＦＲＣを包含している。これらの全てのＦＲＣは、ユーザが自分自身及びオプションとして付加的なユーザのピクチャー即ち写真を取る場合に発生され、それらのピクチャーは認識アルゴリズムプロセッサ１９によって解析されてＦＲＣを派生し、該ＦＲＣは、次いで、自動的に格納手段２０内に格納される。
【００３１】
● ＦＲＣヘイリング（ｈａｉｌｉｎｇ）プロトコル、ＦＲＣモニタ及び相関器、及びＦＲＣを基礎としたビデオ要求発生器、を包含しているＦＲＣ通信手段２１。
【００３２】
● ピクチャー又はビデオストリームをローカル無線ネットワークインターフェース４及び長距離無線ネットワークインターフェース５の両方へ送ることが可能であるように、それらをスプライス即ち接合するビデオ通話スプライシングソフトウエアアルゴリズム２２．
● ＩＲトランシーバ１０を制御すべく適合されている赤外（ＩＲ）処理手段１０。
【００３３】
● カメラ操縦手段３を制御すべく適合されているカメラ位置制御手段９。
【００３４】
● ピクチャー又はビデオストリーム中において認識された顔を追跡すべく適合されている顔追跡制御１８。
【００３５】
● 以下により詳細に説明する「スピーカ（話者）のトークン」マネージャ２３。
【００３６】
これは本発明の重要な特徴であるので、顔認識パラメータをヘイリングするプロトコルを以下のセクションにおいて拡張する。
【００３７】
モバイル通信装置１が、その他の通信装置１とピクチャー及びビデオストリームを交換することが可能な所謂「ビデオ会議モード」に入れられると、それはそのローカル無線ネットワークインターフェース４上のアドバタイジングコード（ａｄｖｅｒｔｉｓｉｎｇ ｃｏｄｅ）のブロードキャストを開始する。このアドバタイジングコードは、この能力を具備するモバイル通信装置１間で予め標準化されている。ブルトース（Ｂｌｕｅｔｏｏｔｈ）プロファイル検知（ｐｒｏｆｉｌｅ ｄｅｔｅｃｔｉｏｎ）に類似したメカニズムを使用することが提案されている。
【００３８】
無線ネットワークのレンジ内にあるモバイル通信装置１は、このアドバタイジングコードを受け取ると共にそれ自身のものをブロードキャストする。それもビデオを基礎とした活動（それは、単に、ビデオ記録を取ることを包含することが可能）に参加している場合には、この二番目のモバイル通信装置１は格納されている所有者間の相関を検知し且つ顔認識係数ＦＲＣをブロードキャストすることが可能である。それは、次いで、近くの他のモバイル通信装置１からの送信されたピクチャー又はビデオコンテントを要求し且つ格納する。
【００３９】
顔認識係数は、画像が採取された後に、例えば５分等の短い時間の間ブロードキャストされる。何故ならば、比較的短い時間の後に該画像内の人はそのシーン即ち場面から出て移動する蓋然性があるからである。顔認識係数が一層長い時間にわたりブロードキャストされる場合には、該画像が、その所有者が該コンテント内のそれらに対して同様の顔認識係数を共有している他の装置によって受け取られる蓋然性がある。
【００４０】
注意すべきことであるが、モバイル通信装置１は、そのＦＲＣ格納手段２０内に家族の顔認識係数ＦＲＣを格納することも可能であり、従って家族を包含してコンテントを作成する任意の近くのモバイル通信装置１は該所有者の装置によって検知されることとなる。
【００４１】
モバイル通信装置１は、たとえそれ自身がビデオコンテントを発生しているものではないか又はビデオ通話していない場合であっても、ＦＲＣヘイリングチャンネルを処理することが可能である。このことは、他のモバイル通信装置１から潜在的に興味の或るコンテントを格納することを可能とさせる。
【００４２】
次に、本発明の実際的な使用に対して２番目の例を与える。或る部屋内に座っている３人の間でビデオ会議が行われており、全ての人がモバイル電話としての形態とされているモバイル通信装置１及び耳に装着されているカメラ１２を具備するヘッドセット１１を持っている場合について考える。モバイル通信装置１はハンヅフリーモバイル電話としての形態とさせることが可能である。
【００４３】
各人は、通話のかなりの量に対して「私が見るものを見よ」カメラビュー内に他の二人を有している。実際に、彼らは殆どの時間話をしている人を見ている蓋然性が高い。
【００４４】
各通信装置１は、その主要なユーザに対する顔認識係数で訓練されている。
【００４５】
ビデオ会議通話は、話している人のビデオストリームからなる。該話をしている人は、最も声の大きな信号を有するマイクロフォン７を検知することによりローカルネットワーク内のモバイル通信装置１における「スピーカのトークン」マネージャ２３によって協力し合って決定される。このことは、複数のモバイル通信装置１からなるグループが「スピーカのトークン」を協力し合って管理することを可能とさせる。
【００４６】
モバイル通信装置１が「スピーカのトークン」を持っている場合には、それは顔認識係数に対して他のモバイル通信装置１にクエリーする、即ち質問することが可能である。該他のモバイル通信装置１の内の一つ又はそれ以上が正しい顔認識係数で応答し、即ちそれらのユーザは話しをしている人を見ている。
【００４７】
「スピーカのトークン」保持者は、該他のモバイル通信装置１の内の一つからのビデオ信号に「スピーカのトークン保持者の顔」としてレッテルを付ける。このフィードが主要なビデオ会議ビデオフィードとなる。
【００４８】
一人を越える人が話をしている場合には、該ビデオフィードはグローバルビューへ戻り、該グローバルビューはモバイル通信装置１の全てのハンヅフリーカメラのマトリクスか又は単に一般的な部屋レベルのビューとすることが可能である。
【００４９】
モバイル通信装置１において実行される本発明に基づく手順は、図２のフローチャートに要約されている。ステップＳ１において、モバイル通信装置１は、所謂ビデオ通話／会議モードにスイッチされたか否かをチェックする。肯定である場合には、ステップＳ２において、無線又は赤外線通信制御チャンネル上で顔認識及びビデオ通話／会議能力をヘイリング、即ち呼び掛けているその他のモバイル通信装置１がローカルな区域内に存在するか否かをチェックする。肯定である場合には、呼び掛けをした顔認識係数がステップＳ４において格納される。更に、モバイル通信装置１がビデオ通話／会議モードにある場合には、それは、ビューファインダーの現在のピクチャー内に顔が存在するか否かをモニタする（ステップＳ３参照）。肯定である場合には、該顔は解析され且つビューファインダーの現在のピクチャー内の顔認識係数が無線及びＩＲ通信チャンネル上をブロードキャストされ（ステップＳ５）、且つビデオコンテントに対するその後の要求に対する処理が行われる（ステップＳ７）。更に、ステップＳ６において、モバイル通信装置１は、モバイル通信装置１の主要なユーザ（又は家族等）のものと一致する他のモバイル通信装置１によってブロードキャストされているＦＲＣが存在するか否かをチェックする。肯定である場合には、モバイル通信装置１は、このユーザに一致する前記ＦＲＣをブロードキャストしている遠隔装置からのビデオストリームに対する要求を送り出す（ステップＳ８）。
【００５０】
例えばデジタルカメラ１’，１”の形態とされている撮像機能性を具備しているイネーブルさせた無線モバイル通信装置１が、顔認識係数の使用に拘わらずに、ローカルな付近において全てのコンテントを共有することが望ましい場合もある。例えば、図４のスケッチに示されているように、エッフェル塔２６の前において多数の人２４，２５がビデオ又は写真を取っている場合がある。高い圧縮率及び高い帯域幅の無線リンクのみならず近い将来において装置上において非常に高い格納容量を予想することが可能であるから、ユーザ２４，２５がそのように望む場合には、エッフェル塔２６近くの各カメラ１’，１”が他のカメラ装置１”，１’で取った各画像又はビデオクリップを共用することが可能となる。
【００５１】
注意すべきことであるが、本発明はビデオ会議又はその他の通信機能性の幾つかの要素を組み込んでいるモバイル及び固定装置に適用可能である。
【００５２】
本発明の変形例においては、カメラ１’はその場所のラインにおいて識別コードを担持しているフォーカスさせた赤外線ビーム２７を射出する形態とされている。このＩＲビーム２７が近くにある別のカメラ１”によって受け取られると、それは、射出しているカメラ１’はそのユーザ２５に対して興味の或る情報を有していることを確認することが可能である。
【００５３】
ＩＲビーム２７は、又、顔認識係数（ＦＲＣ）ブロードキャストを伝えるために使用することも可能である。
【００５４】
別のオプションは、カメラ操縦のためにＩＲビーム２７を利用することである。カメラ１’がフォーカスした赤外線ビーム２７を射出しており且つカメラ１”がそれを受け取ると、ＩＲビーム２７の供給源上にホームインするためにカメラ１”におけるビルトイン操縦メカニズム（例えば、モータ駆動型又はソリッドステート）を使用することが可能であり、従ってカメラ１”がカメラ１’へ向かって操縦されることを可能とする。このことは、両方のカメラが歩行中のユーザに装着されている場合に有用である場合があり、画像安定化の形態を可能とする。
【００５５】
ＦＲＣブロードキャスト及び自動カメラ操縦を結合させると、顔認識を基礎としたカメラ操縦を達成することが可能であり、例えば、カメラ１”がカメラ１’のユーザ２４に対して相関する検知された顔認識係数を持っている場合には、カメラ１”は、画像中のカメラ１’のユーザ２４の関連性のある顔を追跡し且つ該画像をカメラ１’へ送るために、そのレンズを操縦することが可能である。
【００５６】
本発明は、又、図５のフローチャートを参照して説明するようにホームセキュリティシステムにおける改善に適用可能である。例えば、玄関ドアが、該玄関ドア上方の閉回路ＴＶカメラによって安全確保されている。本発明によれば、このＴＶカメラは該ドアにおける訪問者に関する顔認識を実施し且つ顔認識係数をホームセキュリティシステムへ送る形態とされている。この顔認識は、訪問者がドアベルを押すことによって、又は動作検知によってトリガーされる（ステップＳ９参照）。トリガーされると、該ＴＶカメラはビューファインダー内に顔が存在するか否かをチェックし、且つ、存在する場合には、顔認識を実施する（ステップＳ１０）。次いで、ホームセキュリティシステムは、赤外線又は無線制御チャンネル上で顔認識及びビデオ会議能力をヘイリング即ち呼び掛けているその他の装置がローカルの区域内に存在するか否か、特に、訪問者の携帯電話がこれらの能力を提供しているか否かをチェックする。肯定である場合には、該訪問者の携帯電話が彼の顔認識パラメータに対して調査される（ステップＳ１１）。観察された顔と訪問者の携帯電話上のものとの間に不一致が検知されると、ホームセキュリティシステムは居住者に警報するか（ステップＳ１３）又は「身元不明の訪問者」警報をトリガーするなどの何らかの関連性のある動作を行うことが可能である。そうでない場合には、ホームセキュリティシステムは通常の通りに進行する（ステップＳ１４）。
【００５７】
注意すべきことであるが、訪問者の名刺などの訪問者からのその他の詳細をホームセキュリティシステム上に表示させることも可能である。
【００５８】
本発明は、又、個人のセキュリティを改善するために適用することも可能である。例えば、ジョンと言う名前の第１の人が始めてジルという名前の別の人に会う。ジョンのビルトイン顔認識能力を具備しているハンズフリーカメラ電話ヘッドセットは、その視野内にジルを有している。従って、それはジルの顔を検知する。ジョンの電話は、又、両者の間のアドホックなローカル無線ネットワーク接続を介してか、又はジョンのハンヅフリーカメラヘッドセットに指向しているジルのハンズフリーカメラヘッドセットによって射出される赤外線ビームを介してのいずれかにより、ジルの電話を検知する。
【００５９】
次いで、ジョンの電話は、ジルの電話から所有者の顔認識係数を要求する。次いで、ジョンの電話はジルの検知した顔とジルの電話の所有者に対する顔認識係数との間の相関を行う。
【００６０】
ジョンの電話が観察された通りのジルの顔と彼女の電話上に格納されているものとの間の不一致を検知すると、ジルの同一性が彼女の電話によって検証することが不可能であることがジョンに警告される。このことは、ジョンが関連性のある動作を取ることを可能とする。
【００６１】
観察すべきことであるが、ここで使用されている「通信装置」という用語は、広い意味で理解されるべきものであり、無線データ通信機能性及びビルトインカメラを具備するモバイル電話、デジタルカメラ（静止画及びビデオ）等のようなピクチャ又はビデオを撮る能力を包含している。本発明に基づく前記通信装置の共通の特徴は、それらが顔認識アルゴリズムを具備していること、及びそれらがユーザの顔を包含するコンテントを発見し且つ装置のビューファインダー内のコンテントに加えて格納するためにローカル無線ネットワークを介して顔認識係数を送信し且つ受信することが可能であること、である。
【００６２】
注意すべきことであるが、上述した実施例は、本発明を制限するというより例示するものであり、且つ当業者は特許請求の範囲から逸脱すること無しに多くの代替的実施例を設計することが可能である。特許請求の範囲において、括弧間に配置された参照符号は特許請求の範囲を制限するものとして解釈されるべきものではない。「有する」という用語は請求項においてリストされているもの以外の要素又はステップの存在を排除するものではない。１個の要素に先行する不定冠詞（「ａ」又は「ａｎ」）はこの様な複数個の要素の存在を排除するものではない。本発明は、幾つかの個別要素を有するハードウエアによって、及び／又は適宜プログラムされたプロセッサによって実現することが可能である。幾つかの手段を列挙する装置の請求項において、これらの手段の幾つかはハードウエアの一つの且つ同一の項目によって実現することが可能である。相互に異なる従属請求項においてある対応措置が記載されているという単なる事実は、これらの対応措置の結合を有益的に使用することができないことを表すものではない。
【符号の説明】
【００６３】
１ モバイル通信装置
２ カメラ
３ カメラ操縦手段
４ ローカル無線ネットワークインターフェース
５ 長距離無線ネットワークインターフェース
６ ＩＲトランシーバ
７ マイクロフォン
１１ ヘッドセット
【技術分野】
【０００１】
本発明は、少なくとも１個の遠隔供給源（ｒｅｍｏｔｅ ｓｏｕｒｃｅ）からデジタルピクチャー及び／又はビデオストリームを受け取る形態とされている少なくとも１個の無線通信チャンネルを具備する通信装置に関するものである。
【背景技術】
【０００２】
カメラを具備するモバイル電話は迅速なペースで増殖している。カメラの低コストに押されて、全てのモバイル電話の中でのカメラ電話の百分率も迅速に増加している。予想されることは、数年で、殆ど全てのモバイル電話にカメラが具備されることとなる。モバイル電話及びその他のポータブル装置に対してのハンズフリー能力の付加によって音声通話は一層便利なものとされている。これらはユーザが電話を耳に保持することの必要性を取除いている。
【０００３】
将来、電話及びその他のポータブル装置は一層多くのビデオ通話トラフィックを担持することであろう。対応する通信装置又はシステムに対して送信される「私が見るものを見よ（ｓｅｅ ｗｈａｔ Ｉ ｓｅｅ）」ビデオ又は静止画ストリームを作成するために頭に装着した（例えば、耳又は眼鏡）カメラを使用することが可能であろう。
【０００４】
しかしながら、ハンヅフリーの「私の顔を見よ（ｓｅｅ ｍｙ ｆａｃｅ）」ビデオ又は静止画の送信を作成することは、結果的に使用される装着付属物が美的に好ましいものではないので、多分、実現不可能である。
【０００５】
カメラのコストが迅速に低下していることは、不断に増加する品質及び小型化と対となって、カメラをＰＤＡ等の広範なモバイル通信装置に組み込むことを可能としている。該モバイル通信装置は、通常、無線ＬＡＮインターフェース、ブルトース装置等からなる通信手段を具備しており、従ってビルトイン通信手段の範囲内において種々のその他の装置と通信することが可能である。
【０００６】
一方、無線ＬＡＮインターフェース、ブルトース装置等の通信手段を具備しているデジタルカメラ（静止画及びビデオ）が益々ポピュラーなものとなっている。未だに「カメラ」と呼ばれているが、これらの装置は多機能通信装置となっている。
【０００７】
画像を基礎とした情報検索システムが、公開された米国特許出願ＵＳ２００６／００１２６７７Ａ１に開示されている。この画像を基礎とした情報検索システムは、モバイル電話と遠隔サーバとを包含している。該モバイル電話は、ビルトインカメラと、該ビルトインカメラから該遠隔サーバへ画像を送信するための通信リンクとを有している。該遠隔サーバは、該モバイル電話からの画像に基づいて第１信頼値を発生するための光学的文字認識エンジンと、該モバイル電話からの画像に基づいて第２信頼値を発生するためのオブジェクト認識エンジンと、該モバイル電話からの画像に基づいて第３信頼値を発生するための顔認識エンジンと、該第１、第２、及び第３信頼値を受け取り且つ認識出力を発生するための統合器モジュールと、を有している。
【０００８】
しかしながら、該既知の画像を基礎とした情報検索システムは、その他の装置の中で遠隔サーバを必要とする非常に複雑なシステムである。通信は、モバイル電話と遠隔サーバとの間においてのみ行われるに過ぎない。更に、該既知の解決策は、画像を基礎としたサーチサービスの商業的初公開のために特に適したものとされているビジネスモデルを作成するために画像サーチを一層早いものとさせることに焦点が合わされている。更に、該既知の解決策は、ポータブル通信装置間においてのビデオ及び静止画ストリームを交換させるものではない。
【発明の概要】
【発明が解決しようとする課題】
【０００９】
従って、カメラを具備しているモバイル通信装置によって提供される設備の一層効果的な使用に対する必要性が未だに存在している。特に、不恰好なホルダー、スタンド等でユーザを困惑させることなしに、所謂「私の顔を見よ」ビデオ通信を行うことを向上させることの必要性が存在している。
【課題を解決するための手段】
【００１０】
本発明は、この必要性を満足させるものである。それは、例えば、モバイル電話又はローカルエリア無線ネットワークを具備しているデジタルカメラ（静止画及びビデオ）などの多様なポータブル及び静止した通信装置間における「私の顔を見よ」ハンヅフリーピクチャー及びビデオ送信を可能とする。
【００１１】
本発明は、特に、無線ハンズフリーカメラを具備する装置を含む種々の通信装置が共存する状況において使用可能である。
【００１２】
上に定義した目的を達成するために、本発明に基づく通信装置の場合には、本発明に基づく通信装置が以下に定義する態様で特性付けることが可能であるような特徴を有するものであり、即ち、
少なくとも１個の遠隔供給源からのデジタルピクチャー及び／又はビデオストリームを受け取る形態とされている少なくとも１個の無線通信チャンネルを具備する通信装置において、該通信装置は、以前に格納した人識別データによって前記通信装置と関連する少なくとも一人の人を該遠隔供給源のデジタルピクチャー及び／又はビデオストリームにおいて識別可能であるか否かをテストし、且つ該人識別テストの結果が肯定的である場合にのみ該遠隔供給源の該デジタルピクチャー及び／又はビデオストリームを処理する形態とされている。
【００１３】
本発明の特徴は、ユーザの装置上で「私の顔を見よ」ピクチャー及びビデオ記録が可能となるという利点を提供する。
【００１４】
理解すべきことであるが、本発明に基づく通信装置は、又、遠隔供給源として動作することが可能である。
【００１５】
請求項２において請求されているような対応措置は、通信装置が遠隔供給源によって供給される人識別データに依存することが可能であるという利点を提供する。
【００１６】
請求項３又は請求項５において請求されているような対応措置は、夫々、非常に高い人認識率を達成することが可能であるという利点を提供する。
【００１７】
請求項４において請求されているような対応措置は、人識別データが遠隔供給源によって送られるものではない場合に、通信装置自身によってそれを得ることが可能であるという利点を提供する。
【００１８】
請求項７、請求項８、又は請求項９において請求されているような対応措置は、夫々、本発明に基づく通信装置は、それ自身のカメラによって取られたピクチャー及びビデオと、遠隔供給源によって送られたピクチャー及びビデオとの両方を処理することが可能であるという利点を提供する。更に、それは、顔認識係数を発生し且つブロードキャストすることが可能である。
【００１９】
請求項１０において請求されているような対応措置は、その主要なユーザ、及び家族などのその他のユーザの顔認識パラメータで該通信装置を訓練することを可能とする。
【００２０】
請求項１１において請求されているような対応措置は、容易なハンズフリーでのピクチャー及びビデオを取ることを可能とさせる。
【００２１】
請求項１２、請求項１３、請求項１４、請求項１５、又は請求項１６において請求されているような対応措置は、夫々、その時に話をしている人に対して自動的にスイッチされるビデオストリームを発生させることとなる他の通信装置とのビデオ会議通話を確立することを可能とさせるという利点を提供する。一人を超える人が話している場合には、ビデオフィード（送り）は、例えば、種々の装置によって同時に記録された全てのビデオストリームのマトリクス（行列）とすることが可能なグローバルビュー（ｇｌｏｂａｌ ｖｉｅｗ）又は単なる一般的な部屋レベルビュー（ｒｏｏｍ ｌｅｖｅｌ ｖｉｅｗ）等へ移行することが可能である。
【００２２】
請求項１８、請求項１９、請求項２０、又は請求項２１において請求されているような対応措置は、夫々、カメラが自動的に関心の或る人を追跡することを助ける。このことは、自動画像スタビライザーを形成ために有用である場合がある。
【００２３】
本発明の上に定義した側面及びその他の側面は、以下に説明すべき例示的実施例から明らかであり且つこれらの例示的実施例を参照して説明する。
【図面の簡単な説明】
【００２４】
本発明を例示的実施例を参照して以下により詳細に説明する。しかしながら、本発明はこれらの例示的実施例に制限されるものではない。
【図１】本発明に基づくモバイル通信装置の装置ハードウエア及びソフトウエアブロック図。
【図２】本発明に基づくビデオ及び顔認識パラメータ通信のフローチャート。
【図３】本発明に基づく無線ハンズフリーヘッドセットのブロック図。
【図４】本発明に基づいてモバイル通信装置間においてどのようにしてビデオ又は静止画のコンテンツを共有するかの概略図。
【図５】ホームセキュリティアプリケーションにおいて本発明の使用のフローチャート。
【発明を実施するための形態】
【００２５】
本発明の最初の例は、ユーザが街路に沿って歩いているという場面に基づいている。彼はモバイル電話としての形態とされているモバイル通信装置１を携帯している。該通信装置１は、図１のブロック回路図に概略示されている。それは、カメラ２と、街路を歩いている間にユーザがビデオ通話を行うことを可能とさせるカメラ操縦手段３と、を有している。
【００２６】
モバイル通信装置１は、更に、ローカル無線ネットワークインターフェース４、長距離無線ネットワークインターフェース５、ＩＲトランシーバ６、マイクロフォン７、及びモバイル通信装置の分野において経験の或る人にとっては常識であるので簡潔性のために図面には示されていないがスピーカ、ディスプレイ、キーなどのモバイル電話の従来の部品である全てのその他のハードウエアコンポーネント、を有している。
【００２７】
モバイル通信装置１は、オプションとして、図３中にブロック図で模式的に示してあるヘッドセット１１へリンクさせることが可能である。ヘッドセット１１は、カメラ１２及びカメラ操縦手段１３を有している。それは、更に、ローカル無線ネットワークインターフェース１４、ＩＲトランシーバ１６、マイクロフォン１７、及びヘッドセット１１の全ての機能を制御し且つモニターする制御ソフトウエア１５を有している。通信装置１のカメラ２の代わりにピクチャー及び／又はビデオストリームを取るためにヘッドセット１１のカメラ１２を使用することは、ユーザがハンズフリーのビデオ通話を行うことを可能とさせる。ヘッドセット１１は、夫々のローカル無線ネットワークインターフェース４，１４か又はＩＲトランシーバ６，１６のいずれかを介して、通信装置１と通信を行う。ヘッドセット１１は、更に、例えば、ユーザの耳の上に装着した場合に、ユーザの視野が得られるように該ヘッドセットを着脱自在に固定するための装着手段（図面中には示されていない）を有している。制御ソフトウエア１５は、更に、減少させた帯域幅でモバイル通信装置１へ送信するためにカメラ１２によって取られたピクチャー及び／又はビデオを圧縮する手段を有している。
【００２８】
ユーザが歩くにつれ、彼は、ビルトインカメラ及び無線ネットワークインターフェースを具備しているモバイル通信装置を使用しており近くを通過する他の人の視野、又は、例えば、セキュリティカメラなどのＷｉｆｉ（又はその他の無線）ホットスポットに取り付けられている特定的に配置させた固定カメラの視野の中に入る。彼自身のモバイル通信装置１は、前記装置によって発生される静止画ピクチャー及び／又はビデオクリップが入手可能となり彼の画像を包含している場合にのみそれに一時的に接続するために前記その他の装置との通信を確立しようと試みる。遠隔装置によって取られた該ピクチャー及び／又はビデオが前記ユーザのピクチャーを包含しているか否かを決定するために、かれのモバイル通信装置１は、以下の主要な機能を有するコンピュータプログラムを実行すべく適合されている計算手段８を有している。
【００２９】
● カメラ２によって発生されるピクチャー及び／又はビデオを断続的にスキャンする顔認識アルゴリズムプロセッサ１９。厳格に言うと、顔認識アルゴリズムプロセッサ１９は、通信装置１のビューファインダーへ送られる同一のビデオ情報を受け取る。顔認識アルゴリズムプロセッサ１９は、顔認識係数（ＦＲＣ）を発生するために特に調整されているパターン認識アルゴリズムを有している。
【００３０】
● 非揮発性態様で顔認識係数（ＦＲＣ）を格納する格納手段２０。格納手段２０は、通信装置１の主要なユーザのＦＲＣ及び、オプションとして、主要なユーザの家族などのその他のユーザのＦＲＣを包含している。これらの全てのＦＲＣは、ユーザが自分自身及びオプションとして付加的なユーザのピクチャー即ち写真を取る場合に発生され、それらのピクチャーは認識アルゴリズムプロセッサ１９によって解析されてＦＲＣを派生し、該ＦＲＣは、次いで、自動的に格納手段２０内に格納される。
【００３１】
● ＦＲＣヘイリング（ｈａｉｌｉｎｇ）プロトコル、ＦＲＣモニタ及び相関器、及びＦＲＣを基礎としたビデオ要求発生器、を包含しているＦＲＣ通信手段２１。
【００３２】
● ピクチャー又はビデオストリームをローカル無線ネットワークインターフェース４及び長距離無線ネットワークインターフェース５の両方へ送ることが可能であるように、それらをスプライス即ち接合するビデオ通話スプライシングソフトウエアアルゴリズム２２．
● ＩＲトランシーバ１０を制御すべく適合されている赤外（ＩＲ）処理手段１０。
【００３３】
● カメラ操縦手段３を制御すべく適合されているカメラ位置制御手段９。
【００３４】
● ピクチャー又はビデオストリーム中において認識された顔を追跡すべく適合されている顔追跡制御１８。
【００３５】
● 以下により詳細に説明する「スピーカ（話者）のトークン」マネージャ２３。
【００３６】
これは本発明の重要な特徴であるので、顔認識パラメータをヘイリングするプロトコルを以下のセクションにおいて拡張する。
【００３７】
モバイル通信装置１が、その他の通信装置１とピクチャー及びビデオストリームを交換することが可能な所謂「ビデオ会議モード」に入れられると、それはそのローカル無線ネットワークインターフェース４上のアドバタイジングコード（ａｄｖｅｒｔｉｓｉｎｇ ｃｏｄｅ）のブロードキャストを開始する。このアドバタイジングコードは、この能力を具備するモバイル通信装置１間で予め標準化されている。ブルトース（Ｂｌｕｅｔｏｏｔｈ）プロファイル検知（ｐｒｏｆｉｌｅ ｄｅｔｅｃｔｉｏｎ）に類似したメカニズムを使用することが提案されている。
【００３８】
無線ネットワークのレンジ内にあるモバイル通信装置１は、このアドバタイジングコードを受け取ると共にそれ自身のものをブロードキャストする。それもビデオを基礎とした活動（それは、単に、ビデオ記録を取ることを包含することが可能）に参加している場合には、この二番目のモバイル通信装置１は格納されている所有者間の相関を検知し且つ顔認識係数ＦＲＣをブロードキャストすることが可能である。それは、次いで、近くの他のモバイル通信装置１からの送信されたピクチャー又はビデオコンテントを要求し且つ格納する。
【００３９】
顔認識係数は、画像が採取された後に、例えば５分等の短い時間の間ブロードキャストされる。何故ならば、比較的短い時間の後に該画像内の人はそのシーン即ち場面から出て移動する蓋然性があるからである。顔認識係数が一層長い時間にわたりブロードキャストされる場合には、該画像が、その所有者が該コンテント内のそれらに対して同様の顔認識係数を共有している他の装置によって受け取られる蓋然性がある。
【００４０】
注意すべきことであるが、モバイル通信装置１は、そのＦＲＣ格納手段２０内に家族の顔認識係数ＦＲＣを格納することも可能であり、従って家族を包含してコンテントを作成する任意の近くのモバイル通信装置１は該所有者の装置によって検知されることとなる。
【００４１】
モバイル通信装置１は、たとえそれ自身がビデオコンテントを発生しているものではないか又はビデオ通話していない場合であっても、ＦＲＣヘイリングチャンネルを処理することが可能である。このことは、他のモバイル通信装置１から潜在的に興味の或るコンテントを格納することを可能とさせる。
【００４２】
次に、本発明の実際的な使用に対して２番目の例を与える。或る部屋内に座っている３人の間でビデオ会議が行われており、全ての人がモバイル電話としての形態とされているモバイル通信装置１及び耳に装着されているカメラ１２を具備するヘッドセット１１を持っている場合について考える。モバイル通信装置１はハンヅフリーモバイル電話としての形態とさせることが可能である。
【００４３】
各人は、通話のかなりの量に対して「私が見るものを見よ」カメラビュー内に他の二人を有している。実際に、彼らは殆どの時間話をしている人を見ている蓋然性が高い。
【００４４】
各通信装置１は、その主要なユーザに対する顔認識係数で訓練されている。
【００４５】
ビデオ会議通話は、話している人のビデオストリームからなる。該話をしている人は、最も声の大きな信号を有するマイクロフォン７を検知することによりローカルネットワーク内のモバイル通信装置１における「スピーカのトークン」マネージャ２３によって協力し合って決定される。このことは、複数のモバイル通信装置１からなるグループが「スピーカのトークン」を協力し合って管理することを可能とさせる。
【００４６】
モバイル通信装置１が「スピーカのトークン」を持っている場合には、それは顔認識係数に対して他のモバイル通信装置１にクエリーする、即ち質問することが可能である。該他のモバイル通信装置１の内の一つ又はそれ以上が正しい顔認識係数で応答し、即ちそれらのユーザは話しをしている人を見ている。
【００４７】
「スピーカのトークン」保持者は、該他のモバイル通信装置１の内の一つからのビデオ信号に「スピーカのトークン保持者の顔」としてレッテルを付ける。このフィードが主要なビデオ会議ビデオフィードとなる。
【００４８】
一人を越える人が話をしている場合には、該ビデオフィードはグローバルビューへ戻り、該グローバルビューはモバイル通信装置１の全てのハンヅフリーカメラのマトリクスか又は単に一般的な部屋レベルのビューとすることが可能である。
【００４９】
モバイル通信装置１において実行される本発明に基づく手順は、図２のフローチャートに要約されている。ステップＳ１において、モバイル通信装置１は、所謂ビデオ通話／会議モードにスイッチされたか否かをチェックする。肯定である場合には、ステップＳ２において、無線又は赤外線通信制御チャンネル上で顔認識及びビデオ通話／会議能力をヘイリング、即ち呼び掛けているその他のモバイル通信装置１がローカルな区域内に存在するか否かをチェックする。肯定である場合には、呼び掛けをした顔認識係数がステップＳ４において格納される。更に、モバイル通信装置１がビデオ通話／会議モードにある場合には、それは、ビューファインダーの現在のピクチャー内に顔が存在するか否かをモニタする（ステップＳ３参照）。肯定である場合には、該顔は解析され且つビューファインダーの現在のピクチャー内の顔認識係数が無線及びＩＲ通信チャンネル上をブロードキャストされ（ステップＳ５）、且つビデオコンテントに対するその後の要求に対する処理が行われる（ステップＳ７）。更に、ステップＳ６において、モバイル通信装置１は、モバイル通信装置１の主要なユーザ（又は家族等）のものと一致する他のモバイル通信装置１によってブロードキャストされているＦＲＣが存在するか否かをチェックする。肯定である場合には、モバイル通信装置１は、このユーザに一致する前記ＦＲＣをブロードキャストしている遠隔装置からのビデオストリームに対する要求を送り出す（ステップＳ８）。
【００５０】
例えばデジタルカメラ１’，１”の形態とされている撮像機能性を具備しているイネーブルさせた無線モバイル通信装置１が、顔認識係数の使用に拘わらずに、ローカルな付近において全てのコンテントを共有することが望ましい場合もある。例えば、図４のスケッチに示されているように、エッフェル塔２６の前において多数の人２４，２５がビデオ又は写真を取っている場合がある。高い圧縮率及び高い帯域幅の無線リンクのみならず近い将来において装置上において非常に高い格納容量を予想することが可能であるから、ユーザ２４，２５がそのように望む場合には、エッフェル塔２６近くの各カメラ１’，１”が他のカメラ装置１”，１’で取った各画像又はビデオクリップを共用することが可能となる。
【００５１】
注意すべきことであるが、本発明はビデオ会議又はその他の通信機能性の幾つかの要素を組み込んでいるモバイル及び固定装置に適用可能である。
【００５２】
本発明の変形例においては、カメラ１’はその場所のラインにおいて識別コードを担持しているフォーカスさせた赤外線ビーム２７を射出する形態とされている。このＩＲビーム２７が近くにある別のカメラ１”によって受け取られると、それは、射出しているカメラ１’はそのユーザ２５に対して興味の或る情報を有していることを確認することが可能である。
【００５３】
ＩＲビーム２７は、又、顔認識係数（ＦＲＣ）ブロードキャストを伝えるために使用することも可能である。
【００５４】
別のオプションは、カメラ操縦のためにＩＲビーム２７を利用することである。カメラ１’がフォーカスした赤外線ビーム２７を射出しており且つカメラ１”がそれを受け取ると、ＩＲビーム２７の供給源上にホームインするためにカメラ１”におけるビルトイン操縦メカニズム（例えば、モータ駆動型又はソリッドステート）を使用することが可能であり、従ってカメラ１”がカメラ１’へ向かって操縦されることを可能とする。このことは、両方のカメラが歩行中のユーザに装着されている場合に有用である場合があり、画像安定化の形態を可能とする。
【００５５】
ＦＲＣブロードキャスト及び自動カメラ操縦を結合させると、顔認識を基礎としたカメラ操縦を達成することが可能であり、例えば、カメラ１”がカメラ１’のユーザ２４に対して相関する検知された顔認識係数を持っている場合には、カメラ１”は、画像中のカメラ１’のユーザ２４の関連性のある顔を追跡し且つ該画像をカメラ１’へ送るために、そのレンズを操縦することが可能である。
【００５６】
本発明は、又、図５のフローチャートを参照して説明するようにホームセキュリティシステムにおける改善に適用可能である。例えば、玄関ドアが、該玄関ドア上方の閉回路ＴＶカメラによって安全確保されている。本発明によれば、このＴＶカメラは該ドアにおける訪問者に関する顔認識を実施し且つ顔認識係数をホームセキュリティシステムへ送る形態とされている。この顔認識は、訪問者がドアベルを押すことによって、又は動作検知によってトリガーされる（ステップＳ９参照）。トリガーされると、該ＴＶカメラはビューファインダー内に顔が存在するか否かをチェックし、且つ、存在する場合には、顔認識を実施する（ステップＳ１０）。次いで、ホームセキュリティシステムは、赤外線又は無線制御チャンネル上で顔認識及びビデオ会議能力をヘイリング即ち呼び掛けているその他の装置がローカルの区域内に存在するか否か、特に、訪問者の携帯電話がこれらの能力を提供しているか否かをチェックする。肯定である場合には、該訪問者の携帯電話が彼の顔認識パラメータに対して調査される（ステップＳ１１）。観察された顔と訪問者の携帯電話上のものとの間に不一致が検知されると、ホームセキュリティシステムは居住者に警報するか（ステップＳ１３）又は「身元不明の訪問者」警報をトリガーするなどの何らかの関連性のある動作を行うことが可能である。そうでない場合には、ホームセキュリティシステムは通常の通りに進行する（ステップＳ１４）。
【００５７】
注意すべきことであるが、訪問者の名刺などの訪問者からのその他の詳細をホームセキュリティシステム上に表示させることも可能である。
【００５８】
本発明は、又、個人のセキュリティを改善するために適用することも可能である。例えば、ジョンと言う名前の第１の人が始めてジルという名前の別の人に会う。ジョンのビルトイン顔認識能力を具備しているハンズフリーカメラ電話ヘッドセットは、その視野内にジルを有している。従って、それはジルの顔を検知する。ジョンの電話は、又、両者の間のアドホックなローカル無線ネットワーク接続を介してか、又はジョンのハンヅフリーカメラヘッドセットに指向しているジルのハンズフリーカメラヘッドセットによって射出される赤外線ビームを介してのいずれかにより、ジルの電話を検知する。
【００５９】
次いで、ジョンの電話は、ジルの電話から所有者の顔認識係数を要求する。次いで、ジョンの電話はジルの検知した顔とジルの電話の所有者に対する顔認識係数との間の相関を行う。
【００６０】
ジョンの電話が観察された通りのジルの顔と彼女の電話上に格納されているものとの間の不一致を検知すると、ジルの同一性が彼女の電話によって検証することが不可能であることがジョンに警告される。このことは、ジョンが関連性のある動作を取ることを可能とする。
【００６１】
観察すべきことであるが、ここで使用されている「通信装置」という用語は、広い意味で理解されるべきものであり、無線データ通信機能性及びビルトインカメラを具備するモバイル電話、デジタルカメラ（静止画及びビデオ）等のようなピクチャ又はビデオを撮る能力を包含している。本発明に基づく前記通信装置の共通の特徴は、それらが顔認識アルゴリズムを具備していること、及びそれらがユーザの顔を包含するコンテントを発見し且つ装置のビューファインダー内のコンテントに加えて格納するためにローカル無線ネットワークを介して顔認識係数を送信し且つ受信することが可能であること、である。
【００６２】
注意すべきことであるが、上述した実施例は、本発明を制限するというより例示するものであり、且つ当業者は特許請求の範囲から逸脱すること無しに多くの代替的実施例を設計することが可能である。特許請求の範囲において、括弧間に配置された参照符号は特許請求の範囲を制限するものとして解釈されるべきものではない。「有する」という用語は請求項においてリストされているもの以外の要素又はステップの存在を排除するものではない。１個の要素に先行する不定冠詞（「ａ」又は「ａｎ」）はこの様な複数個の要素の存在を排除するものではない。本発明は、幾つかの個別要素を有するハードウエアによって、及び／又は適宜プログラムされたプロセッサによって実現することが可能である。幾つかの手段を列挙する装置の請求項において、これらの手段の幾つかはハードウエアの一つの且つ同一の項目によって実現することが可能である。相互に異なる従属請求項においてある対応措置が記載されているという単なる事実は、これらの対応措置の結合を有益的に使用することができないことを表すものではない。
【符号の説明】
【００６３】
１ モバイル通信装置
２ カメラ
３ カメラ操縦手段
４ ローカル無線ネットワークインターフェース
５ 長距離無線ネットワークインターフェース
６ ＩＲトランシーバ
７ マイクロフォン
１１ ヘッドセット
【特許請求の範囲】
【請求項１】
少なくとも１個の遠隔供給源からデジタルピクチャ及び／又はビデオストリームを受け取る形態とされている少なくとも１個の無線通信チャンネルを具備している通信装置（１，１’，１”）において、該通信装置（１，１’，１”）が、予め格納されている人識別データによって前記通信装置と関連している少なくとも一人の人が該遠隔供給源のデジタルピクチャ及び／又はビデオストリームにおいて識別可能であるか否かをテストし、且つ該人識別テストの結果が肯定的である場合にのみ該遠隔供給源のデジタルピクチャ及び／又はビデオストリームを処理する形態とされている通信装置。
【請求項２】
請求項１において、該遠隔供給源から人識別データを受け取り且つ該受け取った人識別データを前記通信装置と関連している人の予め格納されている人識別データと比較することによって人識別テストを実施する形態とされている通信装置。
【請求項３】
請求項２において、該人識別データが顔認識係数（ＦＲＣ）を有している通信装置。
【請求項４】
請求項１において、該遠隔供給源から受け取ったデジタルピクチャ及び／又はビデオストリームから人識別データを発生し且つ該発生した人識別データを前記通信装置と関連している人の予め格納されている人識別データと比較することによって人識別テストを実施する形態とされている通信装置。
【請求項５】
請求項４において、該人識別データが顔認識係数（ＦＲＣ）を有しており且つ該通信装置が該顔認識係数（ＦＲＣ）を発生するための顔認識アルゴリズムプロセッサ（１９）を有している通信装置。
【請求項６】
請求項１において、該無線通信チャンネルがローカル無線ネットワークインターフェース（４）及び／又は赤外線（ＩＲ）トランシーバ（６）を有している通信装置。
【請求項７】
請求項１において、デジタルピクチャ及び／又はビデオストリームを発生するため及びそれらを無線通信チャンネルを介してブロードキャストするためにカメラ（２）を有している通信装置。
【請求項８】
請求項７において、カメラ（２）によって取られた該デジタルピクチャ及び／又はビデオストリームから顔認識係数（ＦＲＣ）を発生するための顔認識アルゴリズムプロセッサ（１９）を有している通信装置。
【請求項９】
請求項８において、該無線通信チャンネルを介して該顔認識係数（ＦＲＣ）をブロードキャストする形態とされている通信装置。
【請求項１０】
請求項８において、該発生された顔認識係数（ＦＲＣ）が該通信装置と関連する人へ割り当てられ且つ該通信装置内に格納される訓練モードへスイッチ可能である通信装置。
【請求項１１】
請求項１又は８において、カメラ（１２）を具備するヘッドセット、及びオプションとしてマイクロフォン（１７）を有している通信装置。
【請求項１２】
請求項８において、他の通信装置とのビデオ会議通話を確立するか又は参加する形態とされている通信装置。
【請求項１３】
請求項１２において、別の通信装置からのビデオストリームをビデオ会議通話にスプライスする形態とされている通信装置。
【請求項１４】
請求項１２において、ビデオ会議通話に参加している通信装置間において「スピーカのトークン」をセットアップし且つ管理するための「スピーカのトークン」マネージャ（２３）を有している通信装置。
【請求項１５】
請求項１４において、マイクロフォン（７）を有しており、該「スピーカのトークン」マネージャ（２３）が、該通信装置の内の一つのマイクロフォン（７）によって受け取られる最も高い音声レベルに従って該通信装置の内の一つへ「スピーカのトークン」の割り当てを決定する形態とされている通信装置。
【請求項１６】
請求項１４において、「スピーカのトークン」を持っている通信装置が該他の通信装置の内の一つのビデオストリームにレッテルを付けそれをビデオ会議通話にスプライスする通信装置。
【請求項１７】
請求項１において、該遠隔供給源のデジタルピクチャ及び／又はビデオストリームを処理することがそれらを該通信装置内に格納することを包含している通信装置。
【請求項１８】
請求項８において、フォーカスさせた赤外線ビームが、該通信装置と関連している人の顔認識係数（ＦＲＣ）を運ぶカメラの場所のラインに沿って射出される通信装置。
【請求項１９】
請求項８において、カメラによって取られたビデオストリームにおいて識別された人がビューの中心に維持されるようにカメラ（２）又はヘッドセットのカメラ（１２）を操縦する形態とされているカメラ位置制御手段（９）を有している通信装置。
【請求項２０】
請求項１９において、カメラの場所のラインに沿って遠隔通信装置によって射出されるフォーカスされた赤外線ビームにおいて運ばれる顔認識係数（ＦＲＣ）を抽出する手段を有しており、該顔認識係数（ＦＲＣ）が該遠隔通信装置と関連する人へ割り当てられ、且つ該カメラ位置制御手段（９）が、該カメラによって取られたビデオにおいて識別された場合に該顔認識係数と関連する人がビューの中心に維持されるようにカメラ（２）又はヘッドセット（１１）のカメラ（１２）を操縦する形態とされている通信装置。
【請求項２１】
請求項２０において、該カメラ位置制御手段（９）が該遠隔通信装置によって射出されるフォーカスされた赤外線ビーム上に該カメラを操縦する形態とされている通信装置。
【請求項１】
少なくとも１個の遠隔供給源からデジタルピクチャ及び／又はビデオストリームを受け取る形態とされている少なくとも１個の無線通信チャンネルを具備している通信装置（１，１’，１”）において、該通信装置（１，１’，１”）が、予め格納されている人識別データによって前記通信装置と関連している少なくとも一人の人が該遠隔供給源のデジタルピクチャ及び／又はビデオストリームにおいて識別可能であるか否かをテストし、且つ該人識別テストの結果が肯定的である場合にのみ該遠隔供給源のデジタルピクチャ及び／又はビデオストリームを処理する形態とされている通信装置。
【請求項２】
請求項１において、該遠隔供給源から人識別データを受け取り且つ該受け取った人識別データを前記通信装置と関連している人の予め格納されている人識別データと比較することによって人識別テストを実施する形態とされている通信装置。
【請求項３】
請求項２において、該人識別データが顔認識係数（ＦＲＣ）を有している通信装置。
【請求項４】
請求項１において、該遠隔供給源から受け取ったデジタルピクチャ及び／又はビデオストリームから人識別データを発生し且つ該発生した人識別データを前記通信装置と関連している人の予め格納されている人識別データと比較することによって人識別テストを実施する形態とされている通信装置。
【請求項５】
請求項４において、該人識別データが顔認識係数（ＦＲＣ）を有しており且つ該通信装置が該顔認識係数（ＦＲＣ）を発生するための顔認識アルゴリズムプロセッサ（１９）を有している通信装置。
【請求項６】
請求項１において、該無線通信チャンネルがローカル無線ネットワークインターフェース（４）及び／又は赤外線（ＩＲ）トランシーバ（６）を有している通信装置。
【請求項７】
請求項１において、デジタルピクチャ及び／又はビデオストリームを発生するため及びそれらを無線通信チャンネルを介してブロードキャストするためにカメラ（２）を有している通信装置。
【請求項８】
請求項７において、カメラ（２）によって取られた該デジタルピクチャ及び／又はビデオストリームから顔認識係数（ＦＲＣ）を発生するための顔認識アルゴリズムプロセッサ（１９）を有している通信装置。
【請求項９】
請求項８において、該無線通信チャンネルを介して該顔認識係数（ＦＲＣ）をブロードキャストする形態とされている通信装置。
【請求項１０】
請求項８において、該発生された顔認識係数（ＦＲＣ）が該通信装置と関連する人へ割り当てられ且つ該通信装置内に格納される訓練モードへスイッチ可能である通信装置。
【請求項１１】
請求項１又は８において、カメラ（１２）を具備するヘッドセット、及びオプションとしてマイクロフォン（１７）を有している通信装置。
【請求項１２】
請求項８において、他の通信装置とのビデオ会議通話を確立するか又は参加する形態とされている通信装置。
【請求項１３】
請求項１２において、別の通信装置からのビデオストリームをビデオ会議通話にスプライスする形態とされている通信装置。
【請求項１４】
請求項１２において、ビデオ会議通話に参加している通信装置間において「スピーカのトークン」をセットアップし且つ管理するための「スピーカのトークン」マネージャ（２３）を有している通信装置。
【請求項１５】
請求項１４において、マイクロフォン（７）を有しており、該「スピーカのトークン」マネージャ（２３）が、該通信装置の内の一つのマイクロフォン（７）によって受け取られる最も高い音声レベルに従って該通信装置の内の一つへ「スピーカのトークン」の割り当てを決定する形態とされている通信装置。
【請求項１６】
請求項１４において、「スピーカのトークン」を持っている通信装置が該他の通信装置の内の一つのビデオストリームにレッテルを付けそれをビデオ会議通話にスプライスする通信装置。
【請求項１７】
請求項１において、該遠隔供給源のデジタルピクチャ及び／又はビデオストリームを処理することがそれらを該通信装置内に格納することを包含している通信装置。
【請求項１８】
請求項８において、フォーカスさせた赤外線ビームが、該通信装置と関連している人の顔認識係数（ＦＲＣ）を運ぶカメラの場所のラインに沿って射出される通信装置。
【請求項１９】
請求項８において、カメラによって取られたビデオストリームにおいて識別された人がビューの中心に維持されるようにカメラ（２）又はヘッドセットのカメラ（１２）を操縦する形態とされているカメラ位置制御手段（９）を有している通信装置。
【請求項２０】
請求項１９において、カメラの場所のラインに沿って遠隔通信装置によって射出されるフォーカスされた赤外線ビームにおいて運ばれる顔認識係数（ＦＲＣ）を抽出する手段を有しており、該顔認識係数（ＦＲＣ）が該遠隔通信装置と関連する人へ割り当てられ、且つ該カメラ位置制御手段（９）が、該カメラによって取られたビデオにおいて識別された場合に該顔認識係数と関連する人がビューの中心に維持されるようにカメラ（２）又はヘッドセット（１１）のカメラ（１２）を操縦する形態とされている通信装置。
【請求項２１】
請求項２０において、該カメラ位置制御手段（９）が該遠隔通信装置によって射出されるフォーカスされた赤外線ビーム上に該カメラを操縦する形態とされている通信装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公表番号】特表２０１０−５１９８２６（Ｐ２０１０−５１９８２６Ａ）
【公表日】平成２２年６月３日（２０１０．６．３）
【国際特許分類】
【出願番号】特願２００９−５５０３４７（Ｐ２００９−５５０３４７）
【出願日】平成２０年２月１３日（２００８．２．１３）
【国際出願番号】ＰＣＴ／ＩＢ２００８／０５０５１８
【国際公開番号】ＷＯ２００８／１０２２８３
【国際公開日】平成２０年８月２８日（２００８．８．２８）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（５０９２３３７６９）エヌエクスピー ビー．ブイ． (2)
【氏名又は名称原語表記】ＮＸＰ Ｂ．Ｖ．
【Ｆターム（参考）】
【公表日】平成２２年６月３日（２０１０．６．３）
【国際特許分類】
【出願日】平成２０年２月１３日（２００８．２．１３）
【国際出願番号】ＰＣＴ／ＩＢ２００８／０５０５１８
【国際公開番号】ＷＯ２００８／１０２２８３
【国際公開日】平成２０年８月２８日（２００８．８．２８）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．Ｂｌｕｅｔｏｏｔｈ
【出願人】（５０９２３３７６９）エヌエクスピー ビー．ブイ． (2)
【氏名又は名称原語表記】ＮＸＰ Ｂ．Ｖ．
【Ｆターム（参考）】
[ Back to top ]