個人画像データ取得装置及び個人画像データ取得方法
【課題】ユーザ（登録者）に負担を掛けることなく、認識精度の低下を改善することができる個人画像データ取得装置を提供することである。
【解決手段】個人画像データ取得装置は、表示制御手段と、表示手段と、取得手段とを備える。前記表示制御手段は、複数の表示制御設定に基づき表示を制御する。前記表示手段は、表示制御に基づき複数の表示状態に変化する。前記取得手段は、前記複数の表示状態に対応して複数の個人画像データを取得する。
【解決手段】個人画像データ取得装置は、表示制御手段と、表示手段と、取得手段とを備える。前記表示制御手段は、複数の表示制御設定に基づき表示を制御する。前記表示手段は、表示制御に基づき複数の表示状態に変化する。前記取得手段は、前記複数の表示状態に対応して複数の個人画像データを取得する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態は、個人画像データ取得装置及び個人画像データ取得方法に関する。
【背景技術】
【０００２】
近年、カメラを搭載したデジタルＴＶが提案されている。デジタルＴＶは、カメラにより撮影された顔画像データを利用し、デジタルＴＶを利用（視聴）しようとするユーザを認識し、ユーザ別のサービス等を提供することができる。
【０００３】
例えば、デジタルＴＶが、個人情報（年齢含む）と顔画像データとを対応付けて登録し、デジタルＴＶを利用（視聴）しようとするユーザを撮影し、登録されている顔画像データ（顔画像特徴データ）と、撮影により取得された顔画像データ（顔画像特徴データ）とを比較し、ユーザを認識し、ユーザ認識結果に基づき年齢を判別することができる。デジタルＴＶは、ユーザの年齢判別結果を利用し、年齢制限コンテンツの再生を制御することができる。
【０００４】
しかしながら、登録時の撮影条件と認識時の撮影条件とが完全に一致することは少ない。例えば、ユーザ（顔）と照明との位置関係、照度、カメラに対するユーザ（顔）の向き、及びカメラに対するユーザ（顔）の位置が、登録時と認識時とで異なる。これにより、ユーザの顔にできる影及び光の反射状態が、登録時と認識時とで異なる。そのため、同一人物から撮影された顔画像データであっても、登録時に撮影された顔画像データと、認識時に撮影された顔画像データとが完全に一致することは少ない。このように完全に一致しない登録時に撮影された顔画像データと、認識時に撮影された顔画像データとを比較し、同一人物の顔画像データか否かを判定する技術が提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特表２００７−５１６５２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記したような技術が提案されているが、登録時に撮影された顔画像データと、認識時に撮影された顔画像データとが完全に一致していないことから、認識精度が低下することがあり、このような認識精度の低下の改善策が要望されている。
【０００７】
登録時の撮影条件を認識時の撮影条件と同じにすれば、上記認識精度の低下は改善される。しかしながら、登録時の撮影条件を認識時の撮影条件と同じにすることは、ユーザ（登録者）にとって大きな負担である。
【０００８】
本発明が解決しようとする課題は、ユーザ（登録者）に負担を掛けることなく、認識精度の低下を改善することができる個人画像データ取得装置及び個人画像データ取得方法を提供することである。
【課題を解決するための手段】
【０００９】
実施形態の個人画像データ取得装置は、表示制御手段と、表示手段と、取得手段とを備える。前記表示制御手段は、複数の表示制御設定に基づき表示を制御する。前記表示手段は、表示制御に基づき複数の表示状態に変化する。前記取得手段は、前記複数の表示状態に対応して複数の個人画像データを取得する。
【図面の簡単な説明】
【００１０】
【図１】本発明の各実施形態に係る個人画像データ取得装置の概略構成の一例を示すブロック図である。
【図２Ａ】個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す側面図である。
【図２Ｂ】個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す上面図である。
【図３】第１の実施形態に係る複数の表示状態の一例を示すとともに、複数の表示状態に対応する影のでき方の一例を示す図である。
【図４】第２の実施形態に係る複数の表示状態の一例を示す図である。
【図５Ａ】第４の実施形態に係る登録時における表示装置（撮像素子）と登録者の位置関係の一例を示す図である。
【図５Ｂ】第４の実施形態に係る認識時における表示装置（撮像素子）と登録者の位置関係の一例示す図である。
【図６Ａ】第５の実施形態に係る登録時における表示装置（撮像素子）と登録者の位置関係の一例示す図である。
【図６Ｂ】第５の実施形態に係る登録時における誘導表示の一例を示す図である。
【図７Ａ】第６の実施形態に係る登録時における撮像素子の配置例を示す図である。
【図７Ｂ】第６の実施形態に係る撮像素子の構成の一例を示す図である。
【図８】個人画像データ取得装置を適用したデジタルテレビジョン放送受信装置の概略構成の一例を示すブロック図である。
【発明を実施するための形態】
【００１１】
図１は、本発明の各実施形態に係る個人画像データ取得装置の概略構成の一例を示すブロック図である。また、図２Ａは、個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す側面図である。図２Ｂは、個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す上面図である。
【００１２】
図１に示すように、個人画像データ取得装置は、表示装置１、認識・制御部２、記憶部３、撮像素子４を備える。表示装置１は、発光装置（バックライト）１ａを備える。認識・制御部２は、記憶部３に記憶された複数の表示制御設定に基づき表示装置１の表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。表示制御については後に詳しく説明する。
【００１３】
撮影素子４は、例えばカメラである。認識・制御部２は、登録モードの実行に対応し、撮影素子４で撮影された画像から、人物（登録対象者Ｅ）の顔画像データを抽出し、抽出した顔画像データを記憶部３に登録する。或いは、認識・制御部２は、登録モードの実行に対応し、撮影素子４で撮影された画像から、人物の顔画像データを抽出し、抽出した顔画像データから顔画像特徴データを抽出し、抽出した顔画像特徴データを記憶部３に登録する。
【００１４】
さらに、認識・制御部２は、認識モードの実行に対応し、撮影素子４で撮影された画像から、人物（認識対象者）の顔画像データを抽出し、抽出した顔画像データと、記憶部３に登録された顔画像データとを比較し、顔画像データの一致判定に基づき人物を認識する。或いは、認識・制御部２は、認識モードの実行に対応し、撮影素子４で撮影された画像から、人物の顔画像データを抽出し、抽出した顔画像データから顔画像特徴データを抽出し、抽出した顔画像特徴データと、記憶部３に登録された顔画像特徴データとを比較し、顔画像特徴データの一致判定に基づき人物を認識する。
【００１５】
以下、第１〜第６の実施形態について図面を参照して説明する。
【００１６】
（第１の実施形態）
認識・制御部２は、登録モードの実行に対応し、記憶部３に記憶された複数の表示制御設定に基づき表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。
【００１７】
例えば、認識・制御部２は、記憶部３に記憶された複数の表示エリア制御設定に基づき表示装置１の表示エリアを制御する。表示装置１は、表示エリア制御に基づき複数の表示状態に変化する（図３の（ＳＴ１１）〜（ＳＴ１６））。
【００１８】
言い換えれば、認識・制御部２は、記憶部３に記憶された複数の発光エリア制御設定に基づき発光装置１ａの発光エリアを制御する。発光装置１ａは、発光エリア制御に基づき複数の発光状態に変化し、これに対応し、表示装置１は、複数の表示状態に変化する（図３の（ＳＴ１１）〜（ＳＴ１６））。
【００１９】
また、上記複数の表示状態の変化（図３の（ＳＴ１１）〜（ＳＴ１６））に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）に対する光の当たり方が変化するので、人物（顔）における影のでき方及び光の反射状態が変化する（図３の（ＳＴ２１）〜（ＳＴ２６））。
【００２０】
撮像素子４は、上記した複数の表示状態に対応して複数の顔画像データ（個人画像データ）を取得する。つまり、撮像素子４は、図３のＳＴ１１の表示状態（＝図３のＳＴ２１の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得する。さらに、認識・制御部２は、取得した画像データから顔画像データを抽出し、さらに、顔画像データから顔画像特徴データを抽出する。
【００２１】
同様に、撮像素子４は、図３のＳＴ１２の表示状態（＝図３のＳＴ２２の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図３のＳＴ１３の表示状態（＝図３のＳＴ２３の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図３のＳＴ１４の表示状態（＝図３のＳＴ２４の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図３のＳＴ１５の表示状態（＝図３のＳＴ２５の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。さらに、撮像素子４は、図３のＳＴ１６の表示状態（＝図３のＳＴ２６の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。
【００２２】
以上により、個人画像データ取得装置は、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を抽出することができ、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を記憶部３に登録することができる。
【００２３】
その後、認識モードの実行に対応し、撮影素子４は、表示装置１の対向位置の人物（認識対象者Ｒ又はその他の人）を撮影し、画像データを出力する。例えば、撮影素子４は、部屋の照明や自然光に照らされた人物（認識対象者Ｒ又はその他の人）を撮影し、画像データを出力する。認識・制御部２は、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。さらに、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して抽出された顔画像データ（顔画像特徴データ）とを比較し、比較結果に基づき認識対象者Ｒを認識する。
【００２４】
例えば、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）のうちの１以上の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して抽出された顔画像データ（顔画像特徴データ）との類似度が基準値を超えた場合に、認識対象者Ｒを認識する。つまり、認識・制御部２は、登録された人物であると判定する。
【００２５】
なお、個人画像データ取得装置は、登録モードの実行時と同様に、認識モードの実行時にも、複数の顔画像データ（顔画像特徴データ）を取得するようにしてもよい。この場合、例えば、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して取得された複数の顔画像データ（顔画像特徴データ）とを比較し、比較結果に基づき認識対象者Ｒを認識する。
【００２６】
例えば、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）のうちの１以上の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して抽出された複数の顔画像データ（顔画像特徴データ）のうちの１以上の顔画像データ（顔画像特徴データ）との類似度が基準値を超えた場合に、認識対象者Ｒを認識する。つまり、認識・制御部２は、登録された人物であると判定する。
【００２７】
上記説明したように、第１の実施形態では、登録モードの実行時に、個人画像データ取得装置は、表示装置１上の発光状態を変化させ（例えば画面中央（全画面）、左上、上、右上、右下、左下等と変化させ）、それぞれの発光状態に対応して顔画像を取得する。これにより、個人画像データ取得装置は、様々な条件変化（様々な環境変化）に対応した複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００２８】
（第２の実施形態）
第２の実施形態の説明においては、第１の実施形態と異なる部分を中心に説明し、第１の実施形態と共通する部分においては説明を省略する。
【００２９】
認識・制御部２は、登録モードの実行に対応し、記憶部３に記憶された複数の表示制御設定に基づき表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。
【００３０】
例えば、認識・制御部２は、記憶部３に記憶された複数の発光強度制御設定に基づき発光装置１ａの発光強度を制御する。発光装置１ａは、発光強度制御に基づき複数の発光状態に変化し、これに対応し、表示装置１は、複数の表示状態に変化する（図４の（ＳＴ３１）〜（ＳＴ３３））。
【００３１】
また、上記複数の表示状態の変化（図４の（ＳＴ３１）〜（ＳＴ３３））に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）に対する光の当たり方が変化するので、人物（顔）における影のでき方及び光の反射状態が変化する（図４の（ＳＴ４１）〜（ＳＴ４３））。
【００３２】
撮像素子４は、上記した複数の表示状態に対応して複数の顔画像データ（個人画像データ）を取得する。つまり、撮像素子４は、図４のＳＴ３１の表示状態（＝図４のＳＴ４１の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得する。さらに、認識・制御部２は、取得した画像データから顔画像データを抽出し、さらに、顔画像データから顔画像特徴データを抽出する。
【００３３】
同様に、撮像素子４は、図４のＳＴ３２の表示状態（＝図４のＳＴ４２の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図４のＳＴ３３の表示状態（＝図４のＳＴ４３の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。
【００３４】
以上により、個人画像データ取得装置は、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を抽出することができ、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を記憶部３に登録することができる。
【００３５】
その後、認識モードの実行に対応した個人画像データ取得装置の動作は、第１の実施形態で説明した通りであり、詳細説明は省略する。
【００３６】
上記説明したように、第２の実施形態では、登録モードの実行時に、個人画像データ取得装置は、表示装置１上の発光強度を変化させ（例えば強（高輝度（明るい））、中（中輝度（普通））、弱（低輝度（暗い））に変化させ）、それぞれの発光強度に対応して顔画像を取得する。これにより、個人画像データ取得装置は、様々な条件変化（様々な環境変化）に対応した複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００３７】
（第３の実施形態）
第３の実施形態の説明においては、第１、第２の実施形態と異なる部分を中心に説明し、第１、第２の実施形態と共通する部分においては説明を省略する。
【００３８】
認識・制御部２は、登録モードの実行に対応し、記憶部３に記憶された複数の表示制御設定に基づき表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。
【００３９】
例えば、認識・制御部２は、記憶部３に記憶された複数の表示色制御設定に基づき表示装置１の表示色を制御する。表示装置１は、表示色制御に基づき複数の表示状態に変化する。
【００４０】
また、上記複数の表示状態の変化に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）に対する光の当たり方が変化するので、人物（顔）における影のでき方及び光の反射状態が変化する。
【００４１】
撮像素子４は、上記した複数の表示状態に対応して複数の顔画像データ（個人画像データ）を取得する。つまり、撮像素子４は、表示装置１の第１の表示状態に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得する。さらに、認識・制御部２は、取得した画像データから顔画像データを抽出し、さらに、顔画像データから顔画像特徴データを抽出する。
【００４２】
同様に、撮像素子４は、表示装置１の第２の表示状態に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、表示装置１の第３の表示状態に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。
【００４３】
以上により、個人画像データ取得装置は、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を抽出することができ、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を記憶部３に登録することができる。
【００４４】
その後、認識モードの実行に対応した個人画像データ取得装置の動作は、第１の実施形態で説明した通りであり、詳細説明は省略する。
【００４５】
上記説明したように、第３の実施形態では、登録モードの実行時に、個人画像データ取得装置は、表示装置１の表示色を変化させ（例えば昼光色、昼白色、電球色に変化させ）、それぞれの表示色に対応して顔画像を取得する。これにより、個人画像データ取得装置は、様々な条件変化（様々な環境変化）に対応した複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００４６】
なお、上記説明した第１、第２、及び第３の実施形態のうちの２以上の実施形態を組み合わせることもできる。これにより、個人画像データ取得装置は、表示エリア制御、発光強度制御、発光色制御のうちの２以上の制御の組み合わせに対応した様々な条件で、複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００４７】
（第４の実施形態）
例えば、第１、第２、及び第３の実施形態に基づく登録モードの実行時に、表示装置１の画面サイズによって、認識時（図５Ｂに示すα２）よりも、登録時（図５Ａに示すα１）の方が、照明と顔の位置関係の差が小さくなることが予想される。そこで、登録時に、表示装置１から人物（登録対象者Ｅ）までの距離を短くして、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影する。
【００４８】
例えば、表示装置１は、登録時に、登録対象者Ｅに対して近づくように案内を表示する。さらに、認識・制御部２が、撮像素子４により取得された画像データを解析し、登録対象者Ｅと表示装置１との距離を推定し、表示装置１により表示される案内の内容を制御することもできる。例えば、登録対象者Ｅと表示装置１との距離が遠い場合には、認識・制御部２は、近づく旨の案内を表示するように制御し、登録対象者Ｅと表示装置１との距離が近すぎる場合には、認識・制御部２は、遠ざかる（後退する）旨の案内を表示するように制御する。
【００４９】
以上により、個人画像データ取得装置は、登録対象者Ｅと表示装置１とを最適距離に制御することができる。例えば、個人画像データ取得装置は、登録時における登録対象者Ｅと表示装置１との距離を、認識時における登録対象者Ｅと表示装置１との距離よりも近くして、登録対象者Ｅを撮影することができる。これにより、登録時（図５Ａに示すα１）と認識時（図５Ｂに示すα２）との差を減少することができる。
【００５０】
（第５の実施形態）
上記第４の実施形態により、登録時（図５Ａに示すα１）と認識時（図５Ｂに示すα２）との差を減少することができる。一方で、認識時における登録対象者Ｅと表示装置１との距離が近づくことにより、結果的に、登録対象者Ｅと撮像素子４との距離も近づいてしまう。これは、撮像素子４が、表示装置１の上や下に設置されているためである。
【００５１】
登録時における登録対象者Ｅと表示装置１との距離が、認識時における登録対象者Ｅと表示装置１との距離よりも短くなることは、登録時における撮像素子４と登録対象者Ｅとの角度（図５Ａに示すβ１）と、認識時における撮像素子４と登録対象者Ｅとの角度（図５Ｂに示すβ２）とが異なることを意味する。
【００５２】
そこで、表示装置１は、登録時に、認識対象者の顔の向きを撮像素子４へ誘導するための誘導情報Ｇを表示する。例えば、表示装置１は、登録対象者Ｅの視線を撮像素子４の方向へ誘導するための赤い円を表示する。例えば、図６Ｂに示すように、表示装置１は、画面中央で誘導情報Ｇ（赤い円）を表示し、次第に、誘導情報Ｇが撮像素子４の方向へ移動するように表示する。
【００５３】
以上により、個人画像データ取得装置は、認識対象者の顔を撮像素子４の方に向けさせることができ、登録時における撮像素子４と登録対象者Ｅとの角度（図６Ａに示すβ３）と、認識時における撮像素子４と登録対象者Ｅとの角度（図５Ｂに示すβ２）との差を減少させることができる。
【００５４】
（第６の実施形態）
上記第４の実施形態により、登録時（図５Ａに示すα１）と認識時（図５Ｂに示すα２）との差を減少することができる。一方で、認識時における登録対象者Ｅと表示装置１との距離が近づくことにより、結果的に、登録対象者Ｅと撮像素子４との距離も近づいてしまう。これは、撮像素子４が、表示装置１の上や下に設置されているためである。
【００５５】
登録時における登録対象者Ｅと表示装置１との距離が、認識時における登録対象者Ｅと表示装置１との距離よりも短くなることは、登録時における撮像素子４と登録対象者Ｅとの角度（図５Ａに示すβ１）と、認識時における撮像素子４と登録対象者Ｅとの角度（図５Ｂに示すβ２）とが異なることを意味する。
【００５６】
そこで、図７Ｂに示すように、撮像素子４は信号ケーブル４ａを介して個人画像データ取得装置と接続され、これにより撮像素子４は移動可能となる。例えば、図７Ａに示すように、登録時に、撮像素子４を表示装置１の中央付近に移動した上で、撮像素子４が登録対象者Ｅを撮影する。例えば、登録時に、表示装置１が、撮像装置４の移動を案内したり、撮像装置４の設置場所を案内したりする。
【００５７】
以上により、個人画像データ取得装置は、登録時における撮像素子４と登録対象者Ｅとの角度と、認識時における撮像素子４と登録対象者Ｅとの角度との差を減少させることができる。
【００５８】
以下、第１〜第６の実施形態についてまとめる。
【００５９】
（１）個人画像データ取得装置は、顔より大きな表示装置を備え、ユーザ登録時に、表示装置の一部を白色、自然光色、又は照明に近い色（色温度）に発光させ、さらに発光位置を複数変化させ、発光位置の複数変化に対応して複数の顔画像を取得する。これにより、様々な条件に対応した複数の画像データを１個人のデータとして登録することができる。
【００６０】
（２）個人画像データ取得装置は、顔より大きな表示装置を備え、ユーザ登録時に、表示装置の一部を白色、自然光色、又は照明に近い色（色温度）に発光させ、さらに発光強度を複数変化させ、発光強度の複数変化に対応して複数の顔画像を取得する。これにより、様々な条件に対応した複数の画像データを１個人のデータとして登録することができる。
【００６１】
（３）個人画像データ取得装置は、ユーザ認識時の撮影距離よりも近い距離で、ユーザ登録時に撮影を実行する。
【００６２】
（４）個人画像データ取得装置は、ユーザ登録時に、認識対象者の顔の向きを撮像素子４へ誘導するための誘導情報を表示する。
【００６３】
（５）個人画像データ取得装置は、ユーザ登録時に、表示装置の画面中央付近に設置された撮像素子で、認識対象者Ｒを撮影する。
【００６４】
以上により、個人画像データ取得装置は、登録対象者に大きな負担を掛けることなく、複数の環境条件における顔画像データ（顔画像特徴データ）を取得することができ、これにより個人識別精度を向上することができる。また、個人画像データ取得装置は、機材のコストアップ無しで、上記作用効果を得ることができる。
【００６５】
図８は、個人画像データ取得装置を適用したデジタルテレビジョン放送受信装置の概略構成を示すブロック図である。デジタルテレビジョン放送受信装置の映像表示部１４が、図１に示す表示装置１に対応する。また、デジタルテレビジョン放送受信装置の制御モジュール６５、認識モジュール６５ａが、図１に示す認識・制御部２に対応する。また、デジタルテレビジョン放送受信装置の不揮発性メモリ６８が、図１に示す記憶部３に対応する。また、デジタルテレビジョン放送受信装置のカメラ７２が、図１に示す撮像素子４に対応する。
【００６６】
以下、デジタルテレビジョン放送受信装置について簡単に説明する。
【００６７】
図８に示すように、ＢＳ／ＣＳデジタル放送受信用のアンテナ４７で受信した衛星デジタルテレビジョン放送信号は、入力端子４８を介して衛星デジタル放送用のチューナ４９に供給され、チューナ４９は、指定されたチャンネルの放送信号を選択する。
【００６８】
そして、このチューナ４９で選択された放送信号は、ＰＳＫ（phase shift keying）復調モジュール５０に供給されて、デジタルの映像信号及び音声信号に復調された後、信号処理モジュール５１に出力される。
【００６９】
また、地上波放送受信用のアンテナ５２で受信した地上デジタルテレビジョン放送信号は、入力端子５３を介して地上デジタル放送用のチューナ５４に供給され、チューナ５４は、指定されたチャンネルの放送信号を選択する。
【００７０】
そして、このチューナ５４で選択された放送信号は、ＯＦＤＭ（orthogonal frequency division multiplexing）復調モジュール５５に供給されて、デジタルの映像信号及び音声信号に復調された後、上記信号処理モジュール５１に出力される。
【００７１】
ここで、上記信号処理モジュール５１は、ＰＳＫ復調モジュール５０及びＯＦＤＭ復調モジュール５５からそれぞれ供給されたデジタルの映像信号及び音声信号に対して、選択的に所定のデジタル信号処理を施し、グラフィック処理モジュール５８及び音声処理モジュール５９に出力している。
【００７２】
また、上記信号処理モジュール５１には、複数（図示の場合は４つ）の入力端子６０ａ，６０ｂ，６０ｃ，６０ｄが接続されている。これら入力端子６０ａ〜６０ｄは、それぞれ、アナログの映像信号及び音声信号を、デジタルテレビジョン放送受信装置１００の外部から入力可能とするものである。
【００７３】
そして、この信号処理モジュール５１は、各入力端子６０ａ〜６０ｄから供給されたアナログの映像信号及び音声信号を選択的にデジタル化し、そのデジタル化された映像信号及び音声信号に対して所定のデジタル信号処理を施した後、グラフィック処理モジュール５８及び音声処理モジュール５９に出力している。
【００７４】
このうち、グラフィック処理モジュール５８は、信号処理モジュール５１から供給されるデジタルの映像信号に、ＯＳＤ（on screen display）信号生成モジュール６１で生成されるＯＳＤ信号を重畳して出力する機能を有する。このグラフィック処理モジュール５８は、信号処理モジュール５１の出力映像信号と、ＯＳＤ信号生成モジュール６１の出力ＯＳＤ信号とを選択的に出力すること、また、両出力を組み合わせて出力することができる。
【００７５】
そして、グラフィック処理モジュール５８から出力されたデジタルの映像信号は、映像処理モジュール６２に供給される。映像処理モジュール６２により処理された映像信号は、映像表示部１４に供給され、また出力端子６３にも供給される。映像表示部１４は、映像信号に基づく映像を表示し、出力端子６３に対して外部機器が接続されると、出力端子６３に供給された映像信号は、外部機器へ入力される。
【００７６】
また、上記音声処理モジュール５９は、入力されたデジタルの音声信号を、前記スピーカ１５で再生可能なアナログ音声信号に変換した後、スピーカ１５に出力して音声出力させるとともに、出力端子６４を介して外部に導出させる。
【００７７】
なお、デジタルテレビジョン放送受像装置１００の制御モジュール６５が、上記した信号処理等を含む全ての処理及び動作を統括的に制御する。また、制御モジュール６５が、上記した登録モード又は認識モードの実行を制御し、認識モジュール６５ａが、登録処理及び認識処理を実行する。
【００７８】
制御モジュール６５は、ＣＰＵ（central processing unit）等により構成されている。制御モジュール６５は、操作部１６からの操作情報、前記リモートコントローラ１７から送出され受光部１８を介して受信した操作情報、或いは携帯端末２００の通信モジュール２０３から送出され受光部１８を介して受信した操作情報に基づき、操作内容が反映されるように各モジュールをそれぞれ制御している。
【００７９】
この場合、制御モジュール６５は、主として、ＣＰＵが実行する制御プログラムを格納したＲＯＭ（read only memory）６６と、ＣＰＵに作業エリアを提供するＲＡＭ（random access memory）６７と、各種の設定情報及び制御情報等が格納される不揮発性メモリ６８とを利用している。
【００８０】
また、この制御モジュール６５は、カードＩ／Ｆ（interface）６９を介して、メモリカード１９が装着可能なカードホルダ７０に接続されている。これによって、制御モジュール６５は、カードホルダ７０に装着されたメモリカード１９と、カードＩ／Ｆ６９を介して情報伝送を行なうことができる。
【００８１】
また、上記制御モジュール６５は、通信Ｉ／Ｆ７３を介してＬＡＮ端子２１と接続されている。これにより、制御モジュール６５は、ＬＡＮ端子２１に接続されたＬＡＮケーブル、及び通信Ｉ／Ｆ７３を介して情報を送受信することができる。例えば、制御モジュール６５は、ＬＡＮケーブル及び通信Ｉ／Ｆ７３を介して、サーバから送信されるデータを受信することができる。
【００８２】
さらに、上記制御モジュール６５は、ＨＤＭＩ Ｉ／Ｆ７４を介してＨＤＭＩ端子２２と接続されている。これにより、制御モジュール６５は、ＨＤＭＩ端子２２に接続されたＨＤＭＩ対応機器と、ＨＤＭＩ Ｉ／Ｆ７４を介して情報伝送を行なうことができる。
【００８３】
さらに、上記制御モジュール６５は、ＵＳＢ Ｉ／Ｆ７６を介してＵＳＢ端子２４と接続されている。これにより、制御モジュール６５は、ＵＳＢ端子２４に接続されたＵＳＢ対応機器（デジタルカメラ、デジタルビデオカメラなど）と、ＵＳＢ Ｉ／Ｆ７６を介して情報伝送を行なうことができる。
【００８４】
さらに、上記制御モジュール６５は、不揮発性メモリ６８に記憶された録画予約リストに含まれた録画予約情報を参照し、受信信号に基づく番組の録画動作を制御する。録画先としては、例えば内蔵ＨＤＤ１０１、ＵＳＢ端子２４を介して接続された外付けＨＤＤ、ＨＤＭＩ端子を介して接続されたレコーダがある。
【００８５】
さらに、上記制御モジュール６５は、明るさセンサー７１からの明るさ検出レベルに基づき、映像表示部１４のバックライトの明るさを制御する。また、上記制御モジュール６５は、カメラ７２からの動画情報に基づき、映像表示部１４の対向位置のユーザ有無を判定し、映像表示部１４の映像をオン／オフ制御する。
【００８６】
さらに、上記制御モジュール６５は、番組表出力制御モジュール１０３を備える。番組表出力制御モジュール１０３は、番組表の出力を制御する。
【００８７】
なお、上記したモジュールとは、ハードウェアで実現するものであっても良いし、ＣＰＵ等を使ってソフトウェアで実現するものであってもよい。
【００８８】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【００８９】
１…表示装置、１ａ…発光装置、２…認識・制御部、３…記憶部、４…撮像素子、１００…デジタルテレビジョン放送受信装置
【技術分野】
【０００１】
本発明の実施形態は、個人画像データ取得装置及び個人画像データ取得方法に関する。
【背景技術】
【０００２】
近年、カメラを搭載したデジタルＴＶが提案されている。デジタルＴＶは、カメラにより撮影された顔画像データを利用し、デジタルＴＶを利用（視聴）しようとするユーザを認識し、ユーザ別のサービス等を提供することができる。
【０００３】
例えば、デジタルＴＶが、個人情報（年齢含む）と顔画像データとを対応付けて登録し、デジタルＴＶを利用（視聴）しようとするユーザを撮影し、登録されている顔画像データ（顔画像特徴データ）と、撮影により取得された顔画像データ（顔画像特徴データ）とを比較し、ユーザを認識し、ユーザ認識結果に基づき年齢を判別することができる。デジタルＴＶは、ユーザの年齢判別結果を利用し、年齢制限コンテンツの再生を制御することができる。
【０００４】
しかしながら、登録時の撮影条件と認識時の撮影条件とが完全に一致することは少ない。例えば、ユーザ（顔）と照明との位置関係、照度、カメラに対するユーザ（顔）の向き、及びカメラに対するユーザ（顔）の位置が、登録時と認識時とで異なる。これにより、ユーザの顔にできる影及び光の反射状態が、登録時と認識時とで異なる。そのため、同一人物から撮影された顔画像データであっても、登録時に撮影された顔画像データと、認識時に撮影された顔画像データとが完全に一致することは少ない。このように完全に一致しない登録時に撮影された顔画像データと、認識時に撮影された顔画像データとを比較し、同一人物の顔画像データか否かを判定する技術が提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特表２００７−５１６５２５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上記したような技術が提案されているが、登録時に撮影された顔画像データと、認識時に撮影された顔画像データとが完全に一致していないことから、認識精度が低下することがあり、このような認識精度の低下の改善策が要望されている。
【０００７】
登録時の撮影条件を認識時の撮影条件と同じにすれば、上記認識精度の低下は改善される。しかしながら、登録時の撮影条件を認識時の撮影条件と同じにすることは、ユーザ（登録者）にとって大きな負担である。
【０００８】
本発明が解決しようとする課題は、ユーザ（登録者）に負担を掛けることなく、認識精度の低下を改善することができる個人画像データ取得装置及び個人画像データ取得方法を提供することである。
【課題を解決するための手段】
【０００９】
実施形態の個人画像データ取得装置は、表示制御手段と、表示手段と、取得手段とを備える。前記表示制御手段は、複数の表示制御設定に基づき表示を制御する。前記表示手段は、表示制御に基づき複数の表示状態に変化する。前記取得手段は、前記複数の表示状態に対応して複数の個人画像データを取得する。
【図面の簡単な説明】
【００１０】
【図１】本発明の各実施形態に係る個人画像データ取得装置の概略構成の一例を示すブロック図である。
【図２Ａ】個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す側面図である。
【図２Ｂ】個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す上面図である。
【図３】第１の実施形態に係る複数の表示状態の一例を示すとともに、複数の表示状態に対応する影のでき方の一例を示す図である。
【図４】第２の実施形態に係る複数の表示状態の一例を示す図である。
【図５Ａ】第４の実施形態に係る登録時における表示装置（撮像素子）と登録者の位置関係の一例を示す図である。
【図５Ｂ】第４の実施形態に係る認識時における表示装置（撮像素子）と登録者の位置関係の一例示す図である。
【図６Ａ】第５の実施形態に係る登録時における表示装置（撮像素子）と登録者の位置関係の一例示す図である。
【図６Ｂ】第５の実施形態に係る登録時における誘導表示の一例を示す図である。
【図７Ａ】第６の実施形態に係る登録時における撮像素子の配置例を示す図である。
【図７Ｂ】第６の実施形態に係る撮像素子の構成の一例を示す図である。
【図８】個人画像データ取得装置を適用したデジタルテレビジョン放送受信装置の概略構成の一例を示すブロック図である。
【発明を実施するための形態】
【００１１】
図１は、本発明の各実施形態に係る個人画像データ取得装置の概略構成の一例を示すブロック図である。また、図２Ａは、個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す側面図である。図２Ｂは、個人画像データ取得装置を構成する表示装置及び撮像素子と、登録者との位置関係の一例を示す上面図である。
【００１２】
図１に示すように、個人画像データ取得装置は、表示装置１、認識・制御部２、記憶部３、撮像素子４を備える。表示装置１は、発光装置（バックライト）１ａを備える。認識・制御部２は、記憶部３に記憶された複数の表示制御設定に基づき表示装置１の表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。表示制御については後に詳しく説明する。
【００１３】
撮影素子４は、例えばカメラである。認識・制御部２は、登録モードの実行に対応し、撮影素子４で撮影された画像から、人物（登録対象者Ｅ）の顔画像データを抽出し、抽出した顔画像データを記憶部３に登録する。或いは、認識・制御部２は、登録モードの実行に対応し、撮影素子４で撮影された画像から、人物の顔画像データを抽出し、抽出した顔画像データから顔画像特徴データを抽出し、抽出した顔画像特徴データを記憶部３に登録する。
【００１４】
さらに、認識・制御部２は、認識モードの実行に対応し、撮影素子４で撮影された画像から、人物（認識対象者）の顔画像データを抽出し、抽出した顔画像データと、記憶部３に登録された顔画像データとを比較し、顔画像データの一致判定に基づき人物を認識する。或いは、認識・制御部２は、認識モードの実行に対応し、撮影素子４で撮影された画像から、人物の顔画像データを抽出し、抽出した顔画像データから顔画像特徴データを抽出し、抽出した顔画像特徴データと、記憶部３に登録された顔画像特徴データとを比較し、顔画像特徴データの一致判定に基づき人物を認識する。
【００１５】
以下、第１〜第６の実施形態について図面を参照して説明する。
【００１６】
（第１の実施形態）
認識・制御部２は、登録モードの実行に対応し、記憶部３に記憶された複数の表示制御設定に基づき表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。
【００１７】
例えば、認識・制御部２は、記憶部３に記憶された複数の表示エリア制御設定に基づき表示装置１の表示エリアを制御する。表示装置１は、表示エリア制御に基づき複数の表示状態に変化する（図３の（ＳＴ１１）〜（ＳＴ１６））。
【００１８】
言い換えれば、認識・制御部２は、記憶部３に記憶された複数の発光エリア制御設定に基づき発光装置１ａの発光エリアを制御する。発光装置１ａは、発光エリア制御に基づき複数の発光状態に変化し、これに対応し、表示装置１は、複数の表示状態に変化する（図３の（ＳＴ１１）〜（ＳＴ１６））。
【００１９】
また、上記複数の表示状態の変化（図３の（ＳＴ１１）〜（ＳＴ１６））に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）に対する光の当たり方が変化するので、人物（顔）における影のでき方及び光の反射状態が変化する（図３の（ＳＴ２１）〜（ＳＴ２６））。
【００２０】
撮像素子４は、上記した複数の表示状態に対応して複数の顔画像データ（個人画像データ）を取得する。つまり、撮像素子４は、図３のＳＴ１１の表示状態（＝図３のＳＴ２１の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得する。さらに、認識・制御部２は、取得した画像データから顔画像データを抽出し、さらに、顔画像データから顔画像特徴データを抽出する。
【００２１】
同様に、撮像素子４は、図３のＳＴ１２の表示状態（＝図３のＳＴ２２の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図３のＳＴ１３の表示状態（＝図３のＳＴ２３の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図３のＳＴ１４の表示状態（＝図３のＳＴ２４の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図３のＳＴ１５の表示状態（＝図３のＳＴ２５の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。さらに、撮像素子４は、図３のＳＴ１６の表示状態（＝図３のＳＴ２６の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。
【００２２】
以上により、個人画像データ取得装置は、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を抽出することができ、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を記憶部３に登録することができる。
【００２３】
その後、認識モードの実行に対応し、撮影素子４は、表示装置１の対向位置の人物（認識対象者Ｒ又はその他の人）を撮影し、画像データを出力する。例えば、撮影素子４は、部屋の照明や自然光に照らされた人物（認識対象者Ｒ又はその他の人）を撮影し、画像データを出力する。認識・制御部２は、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。さらに、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して抽出された顔画像データ（顔画像特徴データ）とを比較し、比較結果に基づき認識対象者Ｒを認識する。
【００２４】
例えば、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）のうちの１以上の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して抽出された顔画像データ（顔画像特徴データ）との類似度が基準値を超えた場合に、認識対象者Ｒを認識する。つまり、認識・制御部２は、登録された人物であると判定する。
【００２５】
なお、個人画像データ取得装置は、登録モードの実行時と同様に、認識モードの実行時にも、複数の顔画像データ（顔画像特徴データ）を取得するようにしてもよい。この場合、例えば、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して取得された複数の顔画像データ（顔画像特徴データ）とを比較し、比較結果に基づき認識対象者Ｒを認識する。
【００２６】
例えば、認識・制御部２は、記憶部３に登録された複数の顔画像データ（顔画像特徴データ）のうちの１以上の顔画像データ（顔画像特徴データ）と、認識モードの実行に対応して抽出された複数の顔画像データ（顔画像特徴データ）のうちの１以上の顔画像データ（顔画像特徴データ）との類似度が基準値を超えた場合に、認識対象者Ｒを認識する。つまり、認識・制御部２は、登録された人物であると判定する。
【００２７】
上記説明したように、第１の実施形態では、登録モードの実行時に、個人画像データ取得装置は、表示装置１上の発光状態を変化させ（例えば画面中央（全画面）、左上、上、右上、右下、左下等と変化させ）、それぞれの発光状態に対応して顔画像を取得する。これにより、個人画像データ取得装置は、様々な条件変化（様々な環境変化）に対応した複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００２８】
（第２の実施形態）
第２の実施形態の説明においては、第１の実施形態と異なる部分を中心に説明し、第１の実施形態と共通する部分においては説明を省略する。
【００２９】
認識・制御部２は、登録モードの実行に対応し、記憶部３に記憶された複数の表示制御設定に基づき表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。
【００３０】
例えば、認識・制御部２は、記憶部３に記憶された複数の発光強度制御設定に基づき発光装置１ａの発光強度を制御する。発光装置１ａは、発光強度制御に基づき複数の発光状態に変化し、これに対応し、表示装置１は、複数の表示状態に変化する（図４の（ＳＴ３１）〜（ＳＴ３３））。
【００３１】
また、上記複数の表示状態の変化（図４の（ＳＴ３１）〜（ＳＴ３３））に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）に対する光の当たり方が変化するので、人物（顔）における影のでき方及び光の反射状態が変化する（図４の（ＳＴ４１）〜（ＳＴ４３））。
【００３２】
撮像素子４は、上記した複数の表示状態に対応して複数の顔画像データ（個人画像データ）を取得する。つまり、撮像素子４は、図４のＳＴ３１の表示状態（＝図４のＳＴ４１の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得する。さらに、認識・制御部２は、取得した画像データから顔画像データを抽出し、さらに、顔画像データから顔画像特徴データを抽出する。
【００３３】
同様に、撮像素子４は、図４のＳＴ３２の表示状態（＝図４のＳＴ４２の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、図４のＳＴ３３の表示状態（＝図４のＳＴ４３の顔）に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。
【００３４】
以上により、個人画像データ取得装置は、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を抽出することができ、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を記憶部３に登録することができる。
【００３５】
その後、認識モードの実行に対応した個人画像データ取得装置の動作は、第１の実施形態で説明した通りであり、詳細説明は省略する。
【００３６】
上記説明したように、第２の実施形態では、登録モードの実行時に、個人画像データ取得装置は、表示装置１上の発光強度を変化させ（例えば強（高輝度（明るい））、中（中輝度（普通））、弱（低輝度（暗い））に変化させ）、それぞれの発光強度に対応して顔画像を取得する。これにより、個人画像データ取得装置は、様々な条件変化（様々な環境変化）に対応した複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００３７】
（第３の実施形態）
第３の実施形態の説明においては、第１、第２の実施形態と異なる部分を中心に説明し、第１、第２の実施形態と共通する部分においては説明を省略する。
【００３８】
認識・制御部２は、登録モードの実行に対応し、記憶部３に記憶された複数の表示制御設定に基づき表示を制御する。表示装置１は、表示制御に基づき複数の表示状態に変化する。
【００３９】
例えば、認識・制御部２は、記憶部３に記憶された複数の表示色制御設定に基づき表示装置１の表示色を制御する。表示装置１は、表示色制御に基づき複数の表示状態に変化する。
【００４０】
また、上記複数の表示状態の変化に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）に対する光の当たり方が変化するので、人物（顔）における影のでき方及び光の反射状態が変化する。
【００４１】
撮像素子４は、上記した複数の表示状態に対応して複数の顔画像データ（個人画像データ）を取得する。つまり、撮像素子４は、表示装置１の第１の表示状態に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得する。さらに、認識・制御部２は、取得した画像データから顔画像データを抽出し、さらに、顔画像データから顔画像特徴データを抽出する。
【００４２】
同様に、撮像素子４は、表示装置１の第２の表示状態に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。また、撮像素子４は、表示装置１の第３の表示状態に対応して、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影し、画像データを取得し、さらに認識・制御部２が、画像データから顔画像データを抽出し、顔画像データから顔画像特徴データを抽出する。
【００４３】
以上により、個人画像データ取得装置は、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を抽出することができ、複数の表示状態に対応した複数の顔画像データ（顔画像特徴データ）を記憶部３に登録することができる。
【００４４】
その後、認識モードの実行に対応した個人画像データ取得装置の動作は、第１の実施形態で説明した通りであり、詳細説明は省略する。
【００４５】
上記説明したように、第３の実施形態では、登録モードの実行時に、個人画像データ取得装置は、表示装置１の表示色を変化させ（例えば昼光色、昼白色、電球色に変化させ）、それぞれの表示色に対応して顔画像を取得する。これにより、個人画像データ取得装置は、様々な条件変化（様々な環境変化）に対応した複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００４６】
なお、上記説明した第１、第２、及び第３の実施形態のうちの２以上の実施形態を組み合わせることもできる。これにより、個人画像データ取得装置は、表示エリア制御、発光強度制御、発光色制御のうちの２以上の制御の組み合わせに対応した様々な条件で、複数の顔画像データ（顔画像特徴データ）を取得することができる。その結果、取得された複数の顔画像データ（顔画像特徴データ）に、認識モードの実行時の条件に近い条件で取得された顔画像データ（顔画像特徴データ）が含まれる可能性が高くなり、ひいては認識精度の低下を防止することができる。
【００４７】
（第４の実施形態）
例えば、第１、第２、及び第３の実施形態に基づく登録モードの実行時に、表示装置１の画面サイズによって、認識時（図５Ｂに示すα２）よりも、登録時（図５Ａに示すα１）の方が、照明と顔の位置関係の差が小さくなることが予想される。そこで、登録時に、表示装置１から人物（登録対象者Ｅ）までの距離を短くして、表示装置１の対向位置の人物（登録対象者Ｅ）を撮影する。
【００４８】
例えば、表示装置１は、登録時に、登録対象者Ｅに対して近づくように案内を表示する。さらに、認識・制御部２が、撮像素子４により取得された画像データを解析し、登録対象者Ｅと表示装置１との距離を推定し、表示装置１により表示される案内の内容を制御することもできる。例えば、登録対象者Ｅと表示装置１との距離が遠い場合には、認識・制御部２は、近づく旨の案内を表示するように制御し、登録対象者Ｅと表示装置１との距離が近すぎる場合には、認識・制御部２は、遠ざかる（後退する）旨の案内を表示するように制御する。
【００４９】
以上により、個人画像データ取得装置は、登録対象者Ｅと表示装置１とを最適距離に制御することができる。例えば、個人画像データ取得装置は、登録時における登録対象者Ｅと表示装置１との距離を、認識時における登録対象者Ｅと表示装置１との距離よりも近くして、登録対象者Ｅを撮影することができる。これにより、登録時（図５Ａに示すα１）と認識時（図５Ｂに示すα２）との差を減少することができる。
【００５０】
（第５の実施形態）
上記第４の実施形態により、登録時（図５Ａに示すα１）と認識時（図５Ｂに示すα２）との差を減少することができる。一方で、認識時における登録対象者Ｅと表示装置１との距離が近づくことにより、結果的に、登録対象者Ｅと撮像素子４との距離も近づいてしまう。これは、撮像素子４が、表示装置１の上や下に設置されているためである。
【００５１】
登録時における登録対象者Ｅと表示装置１との距離が、認識時における登録対象者Ｅと表示装置１との距離よりも短くなることは、登録時における撮像素子４と登録対象者Ｅとの角度（図５Ａに示すβ１）と、認識時における撮像素子４と登録対象者Ｅとの角度（図５Ｂに示すβ２）とが異なることを意味する。
【００５２】
そこで、表示装置１は、登録時に、認識対象者の顔の向きを撮像素子４へ誘導するための誘導情報Ｇを表示する。例えば、表示装置１は、登録対象者Ｅの視線を撮像素子４の方向へ誘導するための赤い円を表示する。例えば、図６Ｂに示すように、表示装置１は、画面中央で誘導情報Ｇ（赤い円）を表示し、次第に、誘導情報Ｇが撮像素子４の方向へ移動するように表示する。
【００５３】
以上により、個人画像データ取得装置は、認識対象者の顔を撮像素子４の方に向けさせることができ、登録時における撮像素子４と登録対象者Ｅとの角度（図６Ａに示すβ３）と、認識時における撮像素子４と登録対象者Ｅとの角度（図５Ｂに示すβ２）との差を減少させることができる。
【００５４】
（第６の実施形態）
上記第４の実施形態により、登録時（図５Ａに示すα１）と認識時（図５Ｂに示すα２）との差を減少することができる。一方で、認識時における登録対象者Ｅと表示装置１との距離が近づくことにより、結果的に、登録対象者Ｅと撮像素子４との距離も近づいてしまう。これは、撮像素子４が、表示装置１の上や下に設置されているためである。
【００５５】
登録時における登録対象者Ｅと表示装置１との距離が、認識時における登録対象者Ｅと表示装置１との距離よりも短くなることは、登録時における撮像素子４と登録対象者Ｅとの角度（図５Ａに示すβ１）と、認識時における撮像素子４と登録対象者Ｅとの角度（図５Ｂに示すβ２）とが異なることを意味する。
【００５６】
そこで、図７Ｂに示すように、撮像素子４は信号ケーブル４ａを介して個人画像データ取得装置と接続され、これにより撮像素子４は移動可能となる。例えば、図７Ａに示すように、登録時に、撮像素子４を表示装置１の中央付近に移動した上で、撮像素子４が登録対象者Ｅを撮影する。例えば、登録時に、表示装置１が、撮像装置４の移動を案内したり、撮像装置４の設置場所を案内したりする。
【００５７】
以上により、個人画像データ取得装置は、登録時における撮像素子４と登録対象者Ｅとの角度と、認識時における撮像素子４と登録対象者Ｅとの角度との差を減少させることができる。
【００５８】
以下、第１〜第６の実施形態についてまとめる。
【００５９】
（１）個人画像データ取得装置は、顔より大きな表示装置を備え、ユーザ登録時に、表示装置の一部を白色、自然光色、又は照明に近い色（色温度）に発光させ、さらに発光位置を複数変化させ、発光位置の複数変化に対応して複数の顔画像を取得する。これにより、様々な条件に対応した複数の画像データを１個人のデータとして登録することができる。
【００６０】
（２）個人画像データ取得装置は、顔より大きな表示装置を備え、ユーザ登録時に、表示装置の一部を白色、自然光色、又は照明に近い色（色温度）に発光させ、さらに発光強度を複数変化させ、発光強度の複数変化に対応して複数の顔画像を取得する。これにより、様々な条件に対応した複数の画像データを１個人のデータとして登録することができる。
【００６１】
（３）個人画像データ取得装置は、ユーザ認識時の撮影距離よりも近い距離で、ユーザ登録時に撮影を実行する。
【００６２】
（４）個人画像データ取得装置は、ユーザ登録時に、認識対象者の顔の向きを撮像素子４へ誘導するための誘導情報を表示する。
【００６３】
（５）個人画像データ取得装置は、ユーザ登録時に、表示装置の画面中央付近に設置された撮像素子で、認識対象者Ｒを撮影する。
【００６４】
以上により、個人画像データ取得装置は、登録対象者に大きな負担を掛けることなく、複数の環境条件における顔画像データ（顔画像特徴データ）を取得することができ、これにより個人識別精度を向上することができる。また、個人画像データ取得装置は、機材のコストアップ無しで、上記作用効果を得ることができる。
【００６５】
図８は、個人画像データ取得装置を適用したデジタルテレビジョン放送受信装置の概略構成を示すブロック図である。デジタルテレビジョン放送受信装置の映像表示部１４が、図１に示す表示装置１に対応する。また、デジタルテレビジョン放送受信装置の制御モジュール６５、認識モジュール６５ａが、図１に示す認識・制御部２に対応する。また、デジタルテレビジョン放送受信装置の不揮発性メモリ６８が、図１に示す記憶部３に対応する。また、デジタルテレビジョン放送受信装置のカメラ７２が、図１に示す撮像素子４に対応する。
【００６６】
以下、デジタルテレビジョン放送受信装置について簡単に説明する。
【００６７】
図８に示すように、ＢＳ／ＣＳデジタル放送受信用のアンテナ４７で受信した衛星デジタルテレビジョン放送信号は、入力端子４８を介して衛星デジタル放送用のチューナ４９に供給され、チューナ４９は、指定されたチャンネルの放送信号を選択する。
【００６８】
そして、このチューナ４９で選択された放送信号は、ＰＳＫ（phase shift keying）復調モジュール５０に供給されて、デジタルの映像信号及び音声信号に復調された後、信号処理モジュール５１に出力される。
【００６９】
また、地上波放送受信用のアンテナ５２で受信した地上デジタルテレビジョン放送信号は、入力端子５３を介して地上デジタル放送用のチューナ５４に供給され、チューナ５４は、指定されたチャンネルの放送信号を選択する。
【００７０】
そして、このチューナ５４で選択された放送信号は、ＯＦＤＭ（orthogonal frequency division multiplexing）復調モジュール５５に供給されて、デジタルの映像信号及び音声信号に復調された後、上記信号処理モジュール５１に出力される。
【００７１】
ここで、上記信号処理モジュール５１は、ＰＳＫ復調モジュール５０及びＯＦＤＭ復調モジュール５５からそれぞれ供給されたデジタルの映像信号及び音声信号に対して、選択的に所定のデジタル信号処理を施し、グラフィック処理モジュール５８及び音声処理モジュール５９に出力している。
【００７２】
また、上記信号処理モジュール５１には、複数（図示の場合は４つ）の入力端子６０ａ，６０ｂ，６０ｃ，６０ｄが接続されている。これら入力端子６０ａ〜６０ｄは、それぞれ、アナログの映像信号及び音声信号を、デジタルテレビジョン放送受信装置１００の外部から入力可能とするものである。
【００７３】
そして、この信号処理モジュール５１は、各入力端子６０ａ〜６０ｄから供給されたアナログの映像信号及び音声信号を選択的にデジタル化し、そのデジタル化された映像信号及び音声信号に対して所定のデジタル信号処理を施した後、グラフィック処理モジュール５８及び音声処理モジュール５９に出力している。
【００７４】
このうち、グラフィック処理モジュール５８は、信号処理モジュール５１から供給されるデジタルの映像信号に、ＯＳＤ（on screen display）信号生成モジュール６１で生成されるＯＳＤ信号を重畳して出力する機能を有する。このグラフィック処理モジュール５８は、信号処理モジュール５１の出力映像信号と、ＯＳＤ信号生成モジュール６１の出力ＯＳＤ信号とを選択的に出力すること、また、両出力を組み合わせて出力することができる。
【００７５】
そして、グラフィック処理モジュール５８から出力されたデジタルの映像信号は、映像処理モジュール６２に供給される。映像処理モジュール６２により処理された映像信号は、映像表示部１４に供給され、また出力端子６３にも供給される。映像表示部１４は、映像信号に基づく映像を表示し、出力端子６３に対して外部機器が接続されると、出力端子６３に供給された映像信号は、外部機器へ入力される。
【００７６】
また、上記音声処理モジュール５９は、入力されたデジタルの音声信号を、前記スピーカ１５で再生可能なアナログ音声信号に変換した後、スピーカ１５に出力して音声出力させるとともに、出力端子６４を介して外部に導出させる。
【００７７】
なお、デジタルテレビジョン放送受像装置１００の制御モジュール６５が、上記した信号処理等を含む全ての処理及び動作を統括的に制御する。また、制御モジュール６５が、上記した登録モード又は認識モードの実行を制御し、認識モジュール６５ａが、登録処理及び認識処理を実行する。
【００７８】
制御モジュール６５は、ＣＰＵ（central processing unit）等により構成されている。制御モジュール６５は、操作部１６からの操作情報、前記リモートコントローラ１７から送出され受光部１８を介して受信した操作情報、或いは携帯端末２００の通信モジュール２０３から送出され受光部１８を介して受信した操作情報に基づき、操作内容が反映されるように各モジュールをそれぞれ制御している。
【００７９】
この場合、制御モジュール６５は、主として、ＣＰＵが実行する制御プログラムを格納したＲＯＭ（read only memory）６６と、ＣＰＵに作業エリアを提供するＲＡＭ（random access memory）６７と、各種の設定情報及び制御情報等が格納される不揮発性メモリ６８とを利用している。
【００８０】
また、この制御モジュール６５は、カードＩ／Ｆ（interface）６９を介して、メモリカード１９が装着可能なカードホルダ７０に接続されている。これによって、制御モジュール６５は、カードホルダ７０に装着されたメモリカード１９と、カードＩ／Ｆ６９を介して情報伝送を行なうことができる。
【００８１】
また、上記制御モジュール６５は、通信Ｉ／Ｆ７３を介してＬＡＮ端子２１と接続されている。これにより、制御モジュール６５は、ＬＡＮ端子２１に接続されたＬＡＮケーブル、及び通信Ｉ／Ｆ７３を介して情報を送受信することができる。例えば、制御モジュール６５は、ＬＡＮケーブル及び通信Ｉ／Ｆ７３を介して、サーバから送信されるデータを受信することができる。
【００８２】
さらに、上記制御モジュール６５は、ＨＤＭＩ Ｉ／Ｆ７４を介してＨＤＭＩ端子２２と接続されている。これにより、制御モジュール６５は、ＨＤＭＩ端子２２に接続されたＨＤＭＩ対応機器と、ＨＤＭＩ Ｉ／Ｆ７４を介して情報伝送を行なうことができる。
【００８３】
さらに、上記制御モジュール６５は、ＵＳＢ Ｉ／Ｆ７６を介してＵＳＢ端子２４と接続されている。これにより、制御モジュール６５は、ＵＳＢ端子２４に接続されたＵＳＢ対応機器（デジタルカメラ、デジタルビデオカメラなど）と、ＵＳＢ Ｉ／Ｆ７６を介して情報伝送を行なうことができる。
【００８４】
さらに、上記制御モジュール６５は、不揮発性メモリ６８に記憶された録画予約リストに含まれた録画予約情報を参照し、受信信号に基づく番組の録画動作を制御する。録画先としては、例えば内蔵ＨＤＤ１０１、ＵＳＢ端子２４を介して接続された外付けＨＤＤ、ＨＤＭＩ端子を介して接続されたレコーダがある。
【００８５】
さらに、上記制御モジュール６５は、明るさセンサー７１からの明るさ検出レベルに基づき、映像表示部１４のバックライトの明るさを制御する。また、上記制御モジュール６５は、カメラ７２からの動画情報に基づき、映像表示部１４の対向位置のユーザ有無を判定し、映像表示部１４の映像をオン／オフ制御する。
【００８６】
さらに、上記制御モジュール６５は、番組表出力制御モジュール１０３を備える。番組表出力制御モジュール１０３は、番組表の出力を制御する。
【００８７】
なお、上記したモジュールとは、ハードウェアで実現するものであっても良いし、ＣＰＵ等を使ってソフトウェアで実現するものであってもよい。
【００８８】
本発明のいくつかの実施形態を説明したが、これらの実施形態は、例として提示したものであり、発明の範囲を限定することは意図していない。これら実施形態は、その他の様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。これら実施形態やその変形は、発明の範囲や要旨に含まれると同様に、特許請求の範囲に記載された発明とその均等の範囲に含まれるものである。
【符号の説明】
【００８９】
１…表示装置、１ａ…発光装置、２…認識・制御部、３…記憶部、４…撮像素子、１００…デジタルテレビジョン放送受信装置
【特許請求の範囲】
【請求項１】
複数の表示制御設定に基づき表示を制御する表示制御手段と、
表示制御に基づき複数の表示状態に変化する表示手段と、
前記複数の表示状態に対応して複数の個人画像データを取得する取得手段と、
を備える個人画像データ取得装置。
【請求項２】
前記表示制御手段は、複数の表示エリア制御設定に基づき表示エリアを制御し、
前記表示手段は、表示エリア制御に基づき前記複数の表示状態に変化する請求項１の個人画像データ取得装置。
【請求項３】
前記表示手段は、発光手段を備え、
前記表示制御手段は、複数の発光エリア制御設定に基づき前記発光手段の発光エリアを制御し、
前記表示手段は、発光エリア制御に基づく複数の発光エリアの変化に対応して前記複数の表示状態に変化する請求項１又は２の個人画像データ取得装置。
【請求項４】
前記表示手段は、発光手段を備え、
前記表示制御手段は、複数の発光強度制御設定に基づき前記発光手段の発光強度を制御し、
前記表示手段は、発光強度制御に基づく複数の発光状態の変化に対応して前記複数の表示状態に変化する請求項１の個人画像データ取得装置。
【請求項５】
前記表示制御手段は、複数の色制御設定に基づき表示色を制御し、
前記表示手段は、表示色制御に基づき前記複数の表示状態に変化する請求項１乃至４の何れか１つの個人画像データ取得装置。
【請求項６】
前記取得手段は、認識対象者の画像を撮影するための撮像素子を備え、前記撮像素子による複数回の撮影に対応して前記複数の個人画像データを取得する請求項１乃至５の何れか１つの個人画像データ取得装置。
【請求項７】
前記表示手段は、認識対象者の顔の向きを前記撮像素子へ誘導するための誘導情報を表示する請求項６の個人画像データ取得装置。
【請求項８】
前記複数の個人画像データを１個人のデータとして登録する登録手段を備える請求項１乃至７の何れか１つの個人画像データ取得装置。
【請求項９】
複数の表示制御設定に基づき表示を制御し、
表示制御に基づく複数の表示状態に対応して複数の個人画像データを取得する個人画像データ取得方法。
【請求項１】
複数の表示制御設定に基づき表示を制御する表示制御手段と、
表示制御に基づき複数の表示状態に変化する表示手段と、
前記複数の表示状態に対応して複数の個人画像データを取得する取得手段と、
を備える個人画像データ取得装置。
【請求項２】
前記表示制御手段は、複数の表示エリア制御設定に基づき表示エリアを制御し、
前記表示手段は、表示エリア制御に基づき前記複数の表示状態に変化する請求項１の個人画像データ取得装置。
【請求項３】
前記表示手段は、発光手段を備え、
前記表示制御手段は、複数の発光エリア制御設定に基づき前記発光手段の発光エリアを制御し、
前記表示手段は、発光エリア制御に基づく複数の発光エリアの変化に対応して前記複数の表示状態に変化する請求項１又は２の個人画像データ取得装置。
【請求項４】
前記表示手段は、発光手段を備え、
前記表示制御手段は、複数の発光強度制御設定に基づき前記発光手段の発光強度を制御し、
前記表示手段は、発光強度制御に基づく複数の発光状態の変化に対応して前記複数の表示状態に変化する請求項１の個人画像データ取得装置。
【請求項５】
前記表示制御手段は、複数の色制御設定に基づき表示色を制御し、
前記表示手段は、表示色制御に基づき前記複数の表示状態に変化する請求項１乃至４の何れか１つの個人画像データ取得装置。
【請求項６】
前記取得手段は、認識対象者の画像を撮影するための撮像素子を備え、前記撮像素子による複数回の撮影に対応して前記複数の個人画像データを取得する請求項１乃至５の何れか１つの個人画像データ取得装置。
【請求項７】
前記表示手段は、認識対象者の顔の向きを前記撮像素子へ誘導するための誘導情報を表示する請求項６の個人画像データ取得装置。
【請求項８】
前記複数の個人画像データを１個人のデータとして登録する登録手段を備える請求項１乃至７の何れか１つの個人画像データ取得装置。
【請求項９】
複数の表示制御設定に基づき表示を制御し、
表示制御に基づく複数の表示状態に対応して複数の個人画像データを取得する個人画像データ取得方法。
【図１】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５Ａ】
【図５Ｂ】
【図６Ａ】
【図６Ｂ】
【図７Ａ】
【図７Ｂ】
【図８】
【図２Ａ】
【図２Ｂ】
【図３】
【図４】
【図５Ａ】
【図５Ｂ】
【図６Ａ】
【図６Ｂ】
【図７Ａ】
【図７Ｂ】
【図８】
【公開番号】特開２０１３−１１４５９４（Ｐ２０１３−１１４５９４Ａ）
【公開日】平成２５年６月１０日（２０１３．６．１０）
【国際特許分類】
【出願番号】特願２０１１−２６２５１８（Ｐ２０１１−２６２５１８）
【出願日】平成２３年１１月３０日（２０１１．１１．３０）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
【公開日】平成２５年６月１０日（２０１３．６．１０）
【国際特許分類】
【出願日】平成２３年１１月３０日（２０１１．１１．３０）
【出願人】（０００００３０７８）株式会社東芝 (54,554)
【Ｆターム（参考）】
[ Back to top ]