撮像装置
【課題】画像に含まれる個人の情報を表示可能な撮像装置において、個人の情報の視認性に関して使用者の利便性を向上した撮像装置を提供する。
【解決手段】撮像装置は、人物に関する属性情報と優先度に関する情報とを関連付けて記憶する記憶手段と、被写体を撮像し画像データを生成する撮像手段と、撮像手段により生成された画像データが示す画像に含まれる人物の属性情報を表示する表示手段と、を備える。表示手段は、複数の人物に関する属性情報を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示されるように属性情報を重ねて表示する。
【解決手段】撮像装置は、人物に関する属性情報と優先度に関する情報とを関連付けて記憶する記憶手段と、被写体を撮像し画像データを生成する撮像手段と、撮像手段により生成された画像データが示す画像に含まれる人物の属性情報を表示する表示手段と、を備える。表示手段は、複数の人物に関する属性情報を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示されるように属性情報を重ねて表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置に関し、特に、画像に含まれる人物の個人情報を表示可能な撮像装置に関する。
【背景技術】
【０００２】
従来より、顔認識技術を適用した電子カメラが知られている。例えば、特許文献１は、顔認識技術を適用した電子カメラを開示する。この電子カメラは、個人情報が登録されている人物を認証すると、撮像した画像上にその個人情報を重ねて表示することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−１６５８２２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
撮像した画像上に個人情報を重ねて表示する場合、個人情報の提示の仕方によっては、かえって使用者にとって個人情報を認識しづらくなり、使い勝手が悪くなる場合がある。例えば、画像上に重ねて表示された個人情報により、被写体本来の画像が識別し難くなったり、複数の個人情報が同時に表示されることで、個人情報を認識し難くなったりする場合がある。特に、使用者が画像の構図を決定するためスルー画像を参照している場合、上述の問題は個人情報の認識に関して使用者の利便性を損なう場合がある。
【０００５】
本発明は、画像に含まれる個人の情報を表示可能な撮像装置において、個人の情報の視認性に関して使用者の利便性を向上した撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
第１の態様において、人物に関する属性情報と人物の優先度に関する情報とを関連付けて記憶する記憶手段と、被写体を撮像し画像データを生成する撮像手段と、前記撮像手段により生成された画像データが示す画像に含まれる人物の属性情報を表示する表示手段と、を備える撮像装置が提供される。表示手段は、複数の人物に関する属性情報を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示されるように属性情報を重ねて表示する。
【発明の効果】
【０００７】
本発明によれば、複数の人物に関する属性情報（例えば、名前）を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示される。これにより、使用者により優先度がより高いと考えられている人物の名前を優先的に使用者に提示することができ、属性情報の視認性において使用者の利便性を向上できる。
【図面の簡単な説明】
【０００８】
【図１】実施形態におけるデジタルビデオカメラの構成を示すブロック図
【図２】識別対象である人物の顔周辺に顔枠が表示された様子を示した図
【図３】デジタルビデオカメラにおける、識別対象である顔の登録処理を示すフローチャート
【図４】識別対象である顔の登録方法を説明するための図
【図５】実施の形態１における、認証された人物の名前を表示するための処理を示すフローチャート
【図６】実施の形態１における、スルー画像表示時の表示モニタの表示例を説明した図
【図７】実施の形態２における、認証された人物の名前を表示するための処理を示すフローチャート
【図８】実施の形態２における、スルー画像表示時の表示モニタの表示例を説明した図
【図９】実施の形態２における、認証された人物の名前を表示するための処理の別の例を示すフローチャート
【図１０】実施の形態３における、認証された人物の名前を表示するための処理を示すフローチャート
【発明を実施するための形態】
【０００９】
以下、添付の図面を参照して実施の形態を説明する。
【００１０】
１．実施の形態１
１−１．概要
本実施の形態にかかるデジタルビデオカメラは、撮像手段により撮影されている画像において、識別対象として事前に登録している人物の顔を識別することができる。デジタルビデオカメラは、識別対象として登録されている顔を識別した場合、表示モニタにスルー画像を表示する際に、識別対象である顔の周辺に、その顔を有する人物に関連した属性情報（例えば、名前）を表示することができる。
【００１１】
１−２．構成
本実施の形態にかかるデジタルビデオカメラ１００の電気的構成について図１を用いて説明する。図１は、デジタルビデオカメラ１００の構成を示すブロック図である。デジタルビデオカメラ１００は、１又は複数のレンズからなる光学系１１０により形成された被写体像をＣＣＤイメージセンサー１４０で撮像する。ＣＣＤイメージセンサー１４０で生成された画像データは、画像処理部１６０で各種処理が施され、メモリカード２００に格納される。以下、デジタルビデオカメラ１００の構成を詳細に説明する。
【００１２】
光学系１１０は、ズームレンズやフォーカスレンズにより構成される。ズームレンズを光軸に沿って移動させることにより、被写体像の拡大、縮小をすることができる。また、フォーカスレンズを光軸に沿って移動させることにより、被写体像のピントを調整することができる。
【００１３】
レンズ駆動部１２０は、光学系１１０に含まれる各種レンズを駆動する。レンズ駆動部１２０は、例えばズームレンズを駆動するズームモータや、フォーカスレンズを駆動するフォーカスモータを含む。
【００１４】
絞り３００は、使用者の設定に応じて若しくは自動で、開口部の大きさを調整し、透過する光の量を調整する。
【００１５】
シャッター１３０は、ＣＣＤイメージセンサー１４０に透過させる光を遮光するための手段である。
【００１６】
ＣＣＤイメージセンサー１４０は、光学系１１０で形成された被写体像を撮像して、画像データを生成する。ＣＣＤイメージセンサー１３０は、露光、転送、電子シャッターなどの各種動作を行う。
【００１７】
Ａ／Ｄコンバータ１５０は、ＣＣＤイメージセンサー１４０で生成されたアナログ画像データをデジタル画像データに変換する。
【００１８】
画像処理部１６０は、ＣＣＤイメージセンサー１４０で生成された画像データに対して各種処理を施し、表示モニタ２２０に表示するための画像データを生成したり、メモリカード２００に格納するための画像データを生成したりする。例えば、画像処理部１６０は、ＣＣＤイメージセンサー１４０で生成された画像データに対して、ガンマ補正、ホワイトバランス補正、傷補正などの各種処理を行う。また、画像処理部１６０は、ＣＣＤイメージセンサー１４０で生成された画像データを、ＪＰＥＧ規格に準拠した圧縮形式等により圧縮する。画像処理部１６０は、ＤＳＰやマイコンなどで実現可能である。
【００１９】
コントローラー１８０は、デジタルビデオカメラ全体を制御する制御手段である。コントローラー１８０は、半導体素子などで実現可能である。コントローラー１８０は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。コントローラー１８０は、マイコンなどで実現できる。コントローラー１８０は、被写体を撮影する撮影モードと、手動で被写体の顔を事前に登録する顔登録モードとを含む制御モードで、デジタルビデオカメラ１００を制御する。
【００２０】
コントローラー１８０は、画像処理部１６０で生成された画像データが示す画像の中から顔を検出する機能を有する（顔識別機能）。具体的には、内部メモリ２４０は、標準的な人物等の顔における目の位置、鼻の位置、口の位置等を記憶している。コントローラー１８０は、画像処理部１６０で生成された画像データが示す画像の中に、内部メモリ２４０に記憶されている目、鼻、口等の位置関係と類似する位置関係を有する部分があるか否かを判断する。コントローラー１８０は、類似する位置関係を有する部分があると判断すると、その部分を中心とする一定の範囲を顔として検出する。
【００２１】
コントローラー１８０は、画像処理部１６０で生成された画像データが示す被写体の顔が、内部メモリ２４０に事前に登録されている顔（人物）と同一の顔（人物）か否かを識別する機能を有する（個人認証機能）。具体的には、コントローラー１８０は、画像処理部１６０で生成された画像データが示す画像の中から顔を検出する（顔識別機能）。コントローラー１８０は、顔を検出した際に、その顔のうちの目、鼻、口の位置関係、顔の色、顔の輪郭、眉毛等から顔の特徴を示す特徴量情報を数値化して抽出する。コントローラー１８０は、顔の特徴量情報を抽出すると、抽出した特徴量情報が内部メモリ２４０に事前に登録されている顔の特徴量情報と類似しているか否かを判断する。具体的には、コントローラー１８０は、抽出した特徴量情報を示す数値と、内部メモリ２４０に記憶されている顔の特徴量情報を示す数値とを比較して、その差が所定の範囲内かどうかで類似しているかどうかを判断する。類似していると判断すると、コントローラー１８０は、検出した顔が内部メモリ２４０に事前に登録されている顔と同一の顔であると識別する。一方、類似していないと判断すると、コントローラー１８０は、検出した顔が内部メモリ２４０に事前に登録されている顔とは別の顔であると識別する。このように、コントローラー１８０は、画像データ中において識別された顔すなわち人物が、内部メモリ２４０に事前に登録された顔すなわち人物であるか否かを認証できる（個人認証機能）。
【００２２】
バッファ１７０は、画像処理部１６０及びコントローラー１８０のワークメモリとして機能する。バッファ１７０は、例えば、ＤＲＡＭ、強誘電体メモリなどで実現できる。
【００２３】
カードスロット１９０は、メモリカード２００を着脱可能である。カードスロット１９０は、機械的及び電気的にメモリカード２００と接続可能である。メモリカード２００は、フラッシュメモリや強誘電体メモリなどを内部に含み、画像処理部１６０で生成された画像ファイル等のデータを格納可能である。
【００２４】
内部メモリ２４０は、フラッシュメモリや強誘電体メモリなどで構成される。内部メモリ２４０は、デジタルビデオカメラ１００全体を制御するための制御プログラムや、顔検出に用いられる標準的な顔の目、鼻、口の位置関係に関する情報や、顔を識別するために事前に登録する顔に関する情報等を記憶している。
【００２５】
操作部材２１０は、使用者からの操作を受け付けるユーザーインターフェースの総称である。操作部材２１０は、例えば、使用者からの操作を受け付ける十字キーや決定釦等がこれにあたる。
【００２６】
表示モニタ２２０は、ＣＣＤイメージセンサー１４０で生成した画像データが示す画像（スルー画像）や、メモリカード２００から読み出した画像データが示す画像を表示可能である。また、表示モニタ２２０は、デジタルビデオカメラ１００の各種設定を行うための各種メニュー画面等も表示可能である。
【００２７】
１−２−１．用語の対応
内部メモリ２４０は、記憶手段の一例である。ＣＣＤイメージセンサー１４０は、撮像手段の一例である。コントローラー１８０は抽出手段や判定手段の一例である。表示モニタ２２０は表示手段の一例である。
【００２８】
１−３．顔識別機能
上述したように、デジタルビデオカメラ１００は、事前に登録されている顔とＣＣＤイメージセンサー１４０で撮像している被写体の顔とが同一の顔であるかを識別する機能である顔識別機能（個人認証機能）を有する。デジタルビデオカメラ１００は、登録されている顔の特徴量と、撮像している画像に含まれる顔の特徴量とが類似しているか否かを判断する。類似していると判断した場合に、デジタルビデオカメラ１００は、登録されている顔と撮像している顔とが同一の顔であると判断する。
【００２９】
デジタルビデオカメラ１００は、被写体の撮像を行う際に、撮像している被写体の中に登録されている顔が存在するか否かを識別する。登録している顔が存在すると識別した場合に、デジタルビデオカメラ１００は、登録している顔に優先的にフォーカスを合わせる等の動作を行う。例えば、図２における最も左側の被写体である少年が識別対象として事前に登録されているとする。この場合、表示モニタ２２０は、識別対象である少年の顔の周辺に顔枠２３０を表示する。ここで、デジタルビデオカメラ１００は、識別対象の少年の顔にフォーカスを合わせる。
【００３０】
この機能によって、優先的にフォーカスを合わせたい被写体がいるような場合には、その被写体の顔を事前にデジタルビデオカメラ１００に登録しておけば、その被写体に対して優先的にフォーカスを合わせることができる。
【００３１】
１−３−１．識別対象の登録
識別対象とする顔を事前に手動で登録する方法について図３及び図４を用いて説明する。図３は、識別対象とする顔を事前に手動で登録する方法を示すフローチャートである。図４は、識別対象とする顔を事前に手動で登録する方法を説明するための模式図である。
【００３２】
使用者が操作部材２１０を操作して、識別対象とする顔を事前に登録するための顔登録モードを選択することにより、手動の顔登録モードが開始される。デジタルビデオカメラ１００のコントローラー１８０は、対象とする顔を撮影するモードを開始する（Ｓ１１０）。顔登録モードにおいて撮影が開始されると、例えば、表示モニタ２２０は図４（ａ）に示されるような画像を表示する。
【００３３】
コントローラー１８０は、使用者により、識別対象とする顔が撮影されたかどうかを判断する（Ｓ１２０）。コントローラー１８０は、使用者により識別対象とする顔が撮影されるまで待機する。
【００３４】
使用者により識別対象とする顔が撮影されると、表示モニタ２２０は、登録する識別対象についての各種情報の入力を促す画面を表示する（Ｓ１３０）。例えば、表示モニタ２２０は、図４（ｂ）に示されるような、識別対象の名前、生年月日、及び識別優先度に関する情報の入力を促す画面を表示する。ここで、識別優先度とは、事前に登録されている顔が複数ある場合に、それらの複数の顔を撮影するような場面において、どの顔を優先的に識別するかを決定するパラメータである。
【００３５】
コントローラー１８０は、使用者により、各種情報が入力されたかどうかを判断する（Ｓ１４０）。コントローラー１８０は、使用者により各種情報が入力されるまで待機する。
【００３６】
各種情報が入力されると、コントローラー１８０は、登録された各種情報と顔の特徴量情報とを関連付けて内部メモリ２４０に記憶させて顔登録モードを終了する。
【００３７】
このような方法によって、使用者は、識別したい顔とその顔に関連する人に関する情報をデジタルビデオカメラ１００に登録することができる。
【００３８】
１−３−２．顔識別機能（個人認証機能）を用いた撮影を行う際のモニタ表示
デジタルビデオカメラ１００において顔識別機能（個人認証機能）を用いた撮影を行う際の表示モニタ２２０の表示動作について図５、図６を用いて説明する。図５は、顔識別機能を用いた撮影を行う際の表示モニタ２２０の表示動作のフローチャートである。図６は、表示モニタ２２０の表示例を示す模式図である。
【００３９】
使用者は、操作部材２１０のうちのモード設定ダイヤルを操作することにより、デジタルビデオカメラ１００を撮影モードに設定できる。デジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ２１０）。具体的には、コントローラー１８０は、ＣＣＤイメージセンサー１４０により生成された画像データから顔（すなわち顔の領域）を検出し、検出した顔の特徴量を抽出する。特徴量を抽出すると、コントローラー１８０は、抽出した特徴量と、内部メモリ２４０に格納されている各人の顔の特徴量とが類似しているか否かを判断して、個人認証を実行する。このような個人認証処理は、抽出した複数の顔の特徴量全てに対してなされる。つまり、個人認証は複数の人物（顔）に対してなされる。
【００４０】
個人認証の結果、画像データにおいて検出された人物が事前に登録された人物と同一であると認証されると（つまり、画像データから検出した顔が事前に登録された顔と同一であることが確認されると）、コントローラー１８０は、認証した人物の名前を図６（ａ）に示すように表示するよう、表示モニタ２２０を制御する（Ｓ２２０）。なお、図６（ａ）の例では、名前表示領域（四角の領域）を設け、その中に名前を表示している。名前表示領域の大きさや形状は固定でもよいし、表示される名前の文字数に応じて変化させてもよい。図６の例では、名前の背景色すなわち表示領域の色を白とし、表示する文字の色を黒に設定しているが、名前の背景色や文字の色を他の色に設定してもよい。例えば、名前の背景色を黒とし、表示する文字の色を白に設定してもよい。また、図６の例では、名前表示領域を顔の下側の位置に表示しているが、顔の上側や横側の位置に表示してもよい。すなわち、名前の表示方法は図６（ａ）に示す方法に限定されない。表示モニタ２２０に名前の表示を開始させると、コントローラー１８０は、名前の表示を開始してからの経過時間のカウントを開始する（Ｓ２３０）。
【００４１】
時間のカウント開始後、コントローラー１８０は、カウントに基づき表示モニタ２２０に名前の表示を開始させてから所定時間が経過したか否かを判断する（Ｓ２４０）。
【００４２】
所定時間が経過したと判断すると、コントローラー１８０は、認証した人物の名前の表示を停止するよう表示モニタ２２０を制御する（Ｓ２６０）。例えば、コントローラー１８０は、図６（ｂ）に示すように、名前の表示を消去するよう表示モニタ２２０を制御する。
【００４３】
一方、所定時間が経過していないと判断すると、コントローラー１８０は、現在個人認証している人物に加えて、画像データにおいて新たな人物が認証されたか否かを判断する（Ｓ２５０）。新たな人物が認証されていないと判断すると、コントローラー１８０は、時間のカウントを継続して行う。一方、新たな人物が個人認証されたと判断すると、コントローラー１８０は、新たな人物の名前についても表示されるよう表示モニタ２２０を制御する（Ｓ２２０）。そして、コントローラー１８０は、カウントをリセットし、新たな人物の個人認証を開始してから改めて時間のカウントを開始する（Ｓ２３０）。
【００４４】
以上のように、本実施の形態にかかるデジタルビデオカメラ１００は、スルー画像において個人認証した人物の名前の表示を開始してから所定時間が経過したときは、名前の表示を停止する。このように制御する理由を以下に説明する。
【００４５】
例えば、個人認証を行っている間は常時名前が表示されると、撮像されている人物の名前を使用者に知らせることはできるが、名前の表示が実際に撮像している部分の映像を覆い隠すため、使用者は実際に撮像している画像の一部を認識することができない。そこで、本実施の形態では、個人認証した人物の名前の表示を開始してから所定時間経過後に、名前の表示を停止する。これにより、現在撮像している人物の名前を使用者に伝えることができるとともに、撮影時間中の殆どの場合において、使用者は、実際に撮像している画像の大部分を認識することができる。
【００４６】
また、本実施の形態にかかるデジタルビデオカメラ１００は、撮像している人物の個人認証を行っている際に、新たな人物の個人認証を開始したときは、個人認証を開始してからの時間のカウントをリセットする。これにより、新たに個人認証した人物の名前についても十分な時間使用者に伝えることができる。
【００４７】
１−４．まとめ
本実施の形態にかかるデジタルビデオカメラ１００は、スルー画像において個人認証した人物の名前の表示を開始してから所定時間が経過したときは、名前の表示を停止する。これにより、使用者は、顔が識別された人物の名前（属性情報）を認識できるとともに、名前の表示停止後は、被写体画像を明確に認識できるようになり、属性情報及び被写体画像の視認性において使用者の利便性を向上できる。
【００４８】
２．実施の形態２
本実施形態では、顔識別機能を用いた撮影を行う際のモニタ表示動作の別の動作例を説明する。本実施形態では、認証された複数の人物の名前の表示において、名前が重ねて表示される恐れがある場合に、優先度の高い人物の名前が上側になるように名前の表示を行なう。なお、本実施形態のデジタルビデオカメラ１００のハードウェア構成は実施の形態１と同様であるので、ここでの説明は省略する。
【００４９】
図７、図８を用いて、本実施形態の、顔識別機能（個人認証機能）を用いた撮影を行う際のモニタ表示動作について説明する。図７は、顔識別機能を用いた撮影を行う際のモニタ表示動作を説明するためのフローチャートである。図８は、モニタ表示の例を説明するための模式図である。
【００５０】
図７において、使用者によりデジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ３１０）。
【００５１】
個人認証を開始すると、コントローラー１８０は、複数の人物（被写体）を認証したか否かを判断し、複数の人物を認証したと判断した場合、認証した複数人の名前の表示が重なるおそれがあるか否かを判断する（Ｓ３２０）。ここで、本実施形態では、名前は、その人物の顔領域の位置を基準とし、顔領域の下側の所定の位置に表示されるように定められているとする。よって、認証された複数の人物の顔領域の位置を判断することで、名前の表示が重なるか否かを判断できる。
【００５２】
名前の表示が重なる恐れがないと判断すると、コントローラー１８０は、認証した人物の名前を通常の表示方法で表示するように表示モニタ２２０を制御する（Ｓ３３０）。例えば、コントローラー１８０は、図８（ａ）に示すような表示がなされるように表示モニタ２２０を制御する。
【００５３】
一方、名前の表示が重なる恐れがあると判断すると、コントローラー１８０は、個人認証した人物の優先度をそれぞれ確認する（Ｓ３４０）。具体的には、コントローラー１８０は、内部メモリ２４０に格納されている優先度情報にアクセスすることにより、優先度の確認を行う。
【００５４】
優先度を確認すると、コントローラー１８０は、優先度のより高い人物の名前が優先度のより低い人物の名前の上側に表示されるように表示モニタ２２０を制御する（Ｓ３５０）。例えば、コントローラー１８０は、図８（ｂ）に示すような表示が行われるように表示モニタ２２０を制御する。図８（ｂ）の例では、「やまだ たろう」が「たなか はなこ」よりも優先度が高く設定されており、このため、「やまだ たろう」の名前が「たなか はなこ」の名前より上側に表示されている。すなわち、「たなか はなこ」の名前の一部は、「やまだ たろう」の表示に隠されてしまっている。
【００５５】
なお、図７の処理に代えて、複数の人物が認証された場合に、より優先度の高い人物の名前を上側に表示させるようにする処理の別の例として図９の処理も考えられる。
【００５６】
図９において、デジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ４１０）。
【００５７】
個人認証を開始すると、コントローラー１８０は、複数の人物について認証を行ったか否かを判断し、複数人を認証したと判断した場合、個人認証した各人物の優先度を確認する（Ｓ４２０）。そして、コントローラー１８０は、ＣＣＤイメージセンサー１４０で撮像された画像に対して、優先度のより低い人物の名前から順に合成して、スルー画像データを生成する（Ｓ４３０）。例えば、図８（ｂ）に示す例のように、「やまだ たろう」が「たなか はなこ」よりも優先度が高い場合、ＣＣＤイメージセンサー１４０で撮像された画像に対して、まず、「たなか はなこ」の名前を合成し、その後に、「やまだ たろう」の名前を合成する。一般に画像合成において、後に合成された画像が先に合成された画像を上書きするため、後に合成された画像が先に合成された画像よりも上側に表示される。よって、このように優先度の低い人物の名前から合成することで、結果として、優先度の高い人物の名前が上側に表示されるようになる。
【００５８】
その後、コントローラー１８０は、合成されたスルー画像データを表示するように表示モニタ２２０を制御する（Ｓ４４０）。
【００５９】
このように、本実施の形態にかかるデジタルビデオカメラ１００は、個人認証している複数人の名前を表示する場合であって、複数人の名前を重畳して表示するおそれがある場合に、予め設定されている各人の優先度を確認し、優先度のより高い人物の名前を優先度のより低い人物の名前の上側に重ねて表示することとした。これにより、デジタルビデオカメラ１００は、使用者により優先度がより高いと考えられている人物の名前を優先的に使用者に提示することができる。
【００６０】
なお、名前の表示が重なる場合に、上側に表示される名前及び／または名前表示領域の背景色を半透明にしてもよく、これにより、下側に表示される名前が視認できるようにしてもよい。また、上記の例では、名前の表示が重なるおそれがあるときは、優先度のより高い人物の名前が上側に表示されるよう構成したが、名前が重ならないように、優先度のより低い人物の名前の表示位置をずらしてもよい。
【００６１】
以上のように、本実施形態に係るデジタルビデオカメラ１００は、複数の人物に関する属性情報（例えば、名前）を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示される。これにより、使用者により優先度がより高いと考えられている人物の名前を優先的に使用者に提示することができ、属性情報の視認性において使用者の利便性を向上できる。
【００６２】
３．実施の形態３
本実施形態は、実施の形態１の思想と実施の形態２の思想の双方の思想を適用したデジタルビデオカメラ１００の構成を説明する。本実施形態のデジタルビデオカメラ１００のハードウェア構成は実施の形態１と同様であるので、ここでの説明は省略する。
【００６３】
図１０は、本実施形態の、顔識別機能を用いた撮影を行う際のモニタ表示動作を説明するためのフローチャートである。図１０を用いて、本実施形態の、顔識別機能を用いた撮影を行う際のモニタ表示動作について説明する。
【００６４】
図１０において、使用者によりデジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ３１０）。
【００６５】
個人認証を開始すると、コントローラー１８０は、複数人の被写体について個人認証がなされたか否かを判断し、複数人が認証されたと判断した場合に、複数人の名前の表示が重なるおそれがあるか否かを判断する（Ｓ３２０）。
【００６６】
名前の表示が重なる恐れがないと判断すると、コントローラー１８０は、認証した人物の名前を通常の表示方法で表示するように表示モニタ２２０を制御する（Ｓ３３０）。
【００６７】
一方、名前の表示が重なる恐れがあると判断すると、コントローラー１８０は、個人認証した人物の優先度をそれぞれ確認する（Ｓ３４０）。優先度を確認すると、コントローラー１８０は、優先度のより高い人物の名前が優先度のより低い人物の名前の上側に表示されるように表示モニタ２２０を制御する（Ｓ３５０）。以上の処理は、実施の形態２で説明したとおりである。
【００６８】
その後、コントローラー１８０は、名前の表示を開始させてから経過した時間のカウントを開始する（Ｓ３６０）。時間のカウント開始後、コントローラー１８０は、カウントに基づき、表示モニタ２２０に名前の表示を開始させてから所定の時間が経過したか否かを判断する（Ｓ３７０）。
【００６９】
所定の時間が経過したと判断すると、コントローラー１８０は、個人認証している人物の名前の表示を停止するよう表示モニタ２２０を制御する（Ｓ３８０）。その後、ステップＳ３２０に戻る。
【００７０】
一方、所定の時間が経過していないと判断すると、コントローラー１８０は、現在個人認証している人物に加えて、新たな人物が認証されたか否かを判断する（Ｓ３９０）。新たな人物が認証されていないと判断すると、コントローラー１８０は、時間のカウントを継続して行う。一方、新たな人物が個人認証されたと判断すると、コントローラー１８０は、新たな人物の名前についても表示されるよう表示モニタ２２０を制御する（Ｓ３２０）。そして、コントローラー１８０は、カウントをリセットし、新たな人物の個人認証を開始してから改めて時間のカウントを開始する（Ｓ３６０）。
【００７１】
なお、図１０の処理は、実施の形態１の図５の処理と、実施の形態２の図７の処理とを組み合わせたものである。ここで、実施の形態１の図５の処理に、実施の形態２の図７の処理に代えて図９の処理を組み合わせてもよい。具体的には、図１０の処理において、ステップＳ３２０〜Ｓ３５０の代わりに、図９におけるステップＳ４２０〜Ｓ４４０を挿入してもよい。以上のように、実施の形態１の思想と実施の形態２の思想とを組み合わせることもできる。
【００７２】
４．他の実施の形態
以上により、本発明の実施の形態として、実施の形態１を説明した。しかし、本発明は、これらには限定されない。そこで、本発明の他の実施の形態を本欄にまとめて説明する。
【００７３】
上記の実施の形態では、撮像手段として、ＣＣＤイメージセンサー１４０を例示したが、撮像手段はこれに限定されない。例えば、撮像手段を、ＣＭＯＳイメージセンサーやＮＭＯＳイメージセンサーで構成してもよい。
【００７４】
また、画像処理部１６０とコントローラー１８０とは、１つの半導体チップで構成してもよく、別々の半導体チップで構成してもよい。
【００７５】
また、上記の実施の形態では、コントローラー１８０が顔検出及び顔識別を行う構成としたが、必ずしもこのような構成とする必要はない。例えば、顔検出及び顔識別を行うチップをコントローラー１８０とは別のチップとしてもよい。また、顔検出を行うチップと顔識別を行うチップとを別のチップとしてもよい。
【００７６】
また、上記の実施の形態では、認証された人物の属性情報として名前を表示したが、名前に加えて、または、名前に代えて、他の属性情報（住所、性別、血液型等）を表示してもよい。
【産業上の利用可能性】
【００７７】
本発明は、顔識別機能を備えた、デジタルビデオカメラやデジタルスチルカメラ等の撮像装置に適用可能である。
【符号の説明】
【００７８】
１００ デジタルビデオカメラ
１１０ 光学系
１２０ レンズ駆動部
１３０ シャッター
１４０ ＣＣＤイメージセンサー
１５０ Ａ／Ｄコンバータ
１６０ 画像処理部
１７０ バッファ
１８０ コントローラー
１９０ カードスロット
２００ メモリカード
２１０ 操作部材
２２０ 表示モニタ
２３０ 顔枠
２４０ 内部メモリ
【技術分野】
【０００１】
本発明は撮像装置に関し、特に、画像に含まれる人物の個人情報を表示可能な撮像装置に関する。
【背景技術】
【０００２】
従来より、顔認識技術を適用した電子カメラが知られている。例えば、特許文献１は、顔認識技術を適用した電子カメラを開示する。この電子カメラは、個人情報が登録されている人物を認証すると、撮像した画像上にその個人情報を重ねて表示することができる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−１６５８２２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
撮像した画像上に個人情報を重ねて表示する場合、個人情報の提示の仕方によっては、かえって使用者にとって個人情報を認識しづらくなり、使い勝手が悪くなる場合がある。例えば、画像上に重ねて表示された個人情報により、被写体本来の画像が識別し難くなったり、複数の個人情報が同時に表示されることで、個人情報を認識し難くなったりする場合がある。特に、使用者が画像の構図を決定するためスルー画像を参照している場合、上述の問題は個人情報の認識に関して使用者の利便性を損なう場合がある。
【０００５】
本発明は、画像に含まれる個人の情報を表示可能な撮像装置において、個人の情報の視認性に関して使用者の利便性を向上した撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
第１の態様において、人物に関する属性情報と人物の優先度に関する情報とを関連付けて記憶する記憶手段と、被写体を撮像し画像データを生成する撮像手段と、前記撮像手段により生成された画像データが示す画像に含まれる人物の属性情報を表示する表示手段と、を備える撮像装置が提供される。表示手段は、複数の人物に関する属性情報を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示されるように属性情報を重ねて表示する。
【発明の効果】
【０００７】
本発明によれば、複数の人物に関する属性情報（例えば、名前）を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示される。これにより、使用者により優先度がより高いと考えられている人物の名前を優先的に使用者に提示することができ、属性情報の視認性において使用者の利便性を向上できる。
【図面の簡単な説明】
【０００８】
【図１】実施形態におけるデジタルビデオカメラの構成を示すブロック図
【図２】識別対象である人物の顔周辺に顔枠が表示された様子を示した図
【図３】デジタルビデオカメラにおける、識別対象である顔の登録処理を示すフローチャート
【図４】識別対象である顔の登録方法を説明するための図
【図５】実施の形態１における、認証された人物の名前を表示するための処理を示すフローチャート
【図６】実施の形態１における、スルー画像表示時の表示モニタの表示例を説明した図
【図７】実施の形態２における、認証された人物の名前を表示するための処理を示すフローチャート
【図８】実施の形態２における、スルー画像表示時の表示モニタの表示例を説明した図
【図９】実施の形態２における、認証された人物の名前を表示するための処理の別の例を示すフローチャート
【図１０】実施の形態３における、認証された人物の名前を表示するための処理を示すフローチャート
【発明を実施するための形態】
【０００９】
以下、添付の図面を参照して実施の形態を説明する。
【００１０】
１．実施の形態１
１−１．概要
本実施の形態にかかるデジタルビデオカメラは、撮像手段により撮影されている画像において、識別対象として事前に登録している人物の顔を識別することができる。デジタルビデオカメラは、識別対象として登録されている顔を識別した場合、表示モニタにスルー画像を表示する際に、識別対象である顔の周辺に、その顔を有する人物に関連した属性情報（例えば、名前）を表示することができる。
【００１１】
１−２．構成
本実施の形態にかかるデジタルビデオカメラ１００の電気的構成について図１を用いて説明する。図１は、デジタルビデオカメラ１００の構成を示すブロック図である。デジタルビデオカメラ１００は、１又は複数のレンズからなる光学系１１０により形成された被写体像をＣＣＤイメージセンサー１４０で撮像する。ＣＣＤイメージセンサー１４０で生成された画像データは、画像処理部１６０で各種処理が施され、メモリカード２００に格納される。以下、デジタルビデオカメラ１００の構成を詳細に説明する。
【００１２】
光学系１１０は、ズームレンズやフォーカスレンズにより構成される。ズームレンズを光軸に沿って移動させることにより、被写体像の拡大、縮小をすることができる。また、フォーカスレンズを光軸に沿って移動させることにより、被写体像のピントを調整することができる。
【００１３】
レンズ駆動部１２０は、光学系１１０に含まれる各種レンズを駆動する。レンズ駆動部１２０は、例えばズームレンズを駆動するズームモータや、フォーカスレンズを駆動するフォーカスモータを含む。
【００１４】
絞り３００は、使用者の設定に応じて若しくは自動で、開口部の大きさを調整し、透過する光の量を調整する。
【００１５】
シャッター１３０は、ＣＣＤイメージセンサー１４０に透過させる光を遮光するための手段である。
【００１６】
ＣＣＤイメージセンサー１４０は、光学系１１０で形成された被写体像を撮像して、画像データを生成する。ＣＣＤイメージセンサー１３０は、露光、転送、電子シャッターなどの各種動作を行う。
【００１７】
Ａ／Ｄコンバータ１５０は、ＣＣＤイメージセンサー１４０で生成されたアナログ画像データをデジタル画像データに変換する。
【００１８】
画像処理部１６０は、ＣＣＤイメージセンサー１４０で生成された画像データに対して各種処理を施し、表示モニタ２２０に表示するための画像データを生成したり、メモリカード２００に格納するための画像データを生成したりする。例えば、画像処理部１６０は、ＣＣＤイメージセンサー１４０で生成された画像データに対して、ガンマ補正、ホワイトバランス補正、傷補正などの各種処理を行う。また、画像処理部１６０は、ＣＣＤイメージセンサー１４０で生成された画像データを、ＪＰＥＧ規格に準拠した圧縮形式等により圧縮する。画像処理部１６０は、ＤＳＰやマイコンなどで実現可能である。
【００１９】
コントローラー１８０は、デジタルビデオカメラ全体を制御する制御手段である。コントローラー１８０は、半導体素子などで実現可能である。コントローラー１８０は、ハードウェアのみで構成してもよいし、ハードウェアとソフトウェアとを組み合わせることにより実現してもよい。コントローラー１８０は、マイコンなどで実現できる。コントローラー１８０は、被写体を撮影する撮影モードと、手動で被写体の顔を事前に登録する顔登録モードとを含む制御モードで、デジタルビデオカメラ１００を制御する。
【００２０】
コントローラー１８０は、画像処理部１６０で生成された画像データが示す画像の中から顔を検出する機能を有する（顔識別機能）。具体的には、内部メモリ２４０は、標準的な人物等の顔における目の位置、鼻の位置、口の位置等を記憶している。コントローラー１８０は、画像処理部１６０で生成された画像データが示す画像の中に、内部メモリ２４０に記憶されている目、鼻、口等の位置関係と類似する位置関係を有する部分があるか否かを判断する。コントローラー１８０は、類似する位置関係を有する部分があると判断すると、その部分を中心とする一定の範囲を顔として検出する。
【００２１】
コントローラー１８０は、画像処理部１６０で生成された画像データが示す被写体の顔が、内部メモリ２４０に事前に登録されている顔（人物）と同一の顔（人物）か否かを識別する機能を有する（個人認証機能）。具体的には、コントローラー１８０は、画像処理部１６０で生成された画像データが示す画像の中から顔を検出する（顔識別機能）。コントローラー１８０は、顔を検出した際に、その顔のうちの目、鼻、口の位置関係、顔の色、顔の輪郭、眉毛等から顔の特徴を示す特徴量情報を数値化して抽出する。コントローラー１８０は、顔の特徴量情報を抽出すると、抽出した特徴量情報が内部メモリ２４０に事前に登録されている顔の特徴量情報と類似しているか否かを判断する。具体的には、コントローラー１８０は、抽出した特徴量情報を示す数値と、内部メモリ２４０に記憶されている顔の特徴量情報を示す数値とを比較して、その差が所定の範囲内かどうかで類似しているかどうかを判断する。類似していると判断すると、コントローラー１８０は、検出した顔が内部メモリ２４０に事前に登録されている顔と同一の顔であると識別する。一方、類似していないと判断すると、コントローラー１８０は、検出した顔が内部メモリ２４０に事前に登録されている顔とは別の顔であると識別する。このように、コントローラー１８０は、画像データ中において識別された顔すなわち人物が、内部メモリ２４０に事前に登録された顔すなわち人物であるか否かを認証できる（個人認証機能）。
【００２２】
バッファ１７０は、画像処理部１６０及びコントローラー１８０のワークメモリとして機能する。バッファ１７０は、例えば、ＤＲＡＭ、強誘電体メモリなどで実現できる。
【００２３】
カードスロット１９０は、メモリカード２００を着脱可能である。カードスロット１９０は、機械的及び電気的にメモリカード２００と接続可能である。メモリカード２００は、フラッシュメモリや強誘電体メモリなどを内部に含み、画像処理部１６０で生成された画像ファイル等のデータを格納可能である。
【００２４】
内部メモリ２４０は、フラッシュメモリや強誘電体メモリなどで構成される。内部メモリ２４０は、デジタルビデオカメラ１００全体を制御するための制御プログラムや、顔検出に用いられる標準的な顔の目、鼻、口の位置関係に関する情報や、顔を識別するために事前に登録する顔に関する情報等を記憶している。
【００２５】
操作部材２１０は、使用者からの操作を受け付けるユーザーインターフェースの総称である。操作部材２１０は、例えば、使用者からの操作を受け付ける十字キーや決定釦等がこれにあたる。
【００２６】
表示モニタ２２０は、ＣＣＤイメージセンサー１４０で生成した画像データが示す画像（スルー画像）や、メモリカード２００から読み出した画像データが示す画像を表示可能である。また、表示モニタ２２０は、デジタルビデオカメラ１００の各種設定を行うための各種メニュー画面等も表示可能である。
【００２７】
１−２−１．用語の対応
内部メモリ２４０は、記憶手段の一例である。ＣＣＤイメージセンサー１４０は、撮像手段の一例である。コントローラー１８０は抽出手段や判定手段の一例である。表示モニタ２２０は表示手段の一例である。
【００２８】
１−３．顔識別機能
上述したように、デジタルビデオカメラ１００は、事前に登録されている顔とＣＣＤイメージセンサー１４０で撮像している被写体の顔とが同一の顔であるかを識別する機能である顔識別機能（個人認証機能）を有する。デジタルビデオカメラ１００は、登録されている顔の特徴量と、撮像している画像に含まれる顔の特徴量とが類似しているか否かを判断する。類似していると判断した場合に、デジタルビデオカメラ１００は、登録されている顔と撮像している顔とが同一の顔であると判断する。
【００２９】
デジタルビデオカメラ１００は、被写体の撮像を行う際に、撮像している被写体の中に登録されている顔が存在するか否かを識別する。登録している顔が存在すると識別した場合に、デジタルビデオカメラ１００は、登録している顔に優先的にフォーカスを合わせる等の動作を行う。例えば、図２における最も左側の被写体である少年が識別対象として事前に登録されているとする。この場合、表示モニタ２２０は、識別対象である少年の顔の周辺に顔枠２３０を表示する。ここで、デジタルビデオカメラ１００は、識別対象の少年の顔にフォーカスを合わせる。
【００３０】
この機能によって、優先的にフォーカスを合わせたい被写体がいるような場合には、その被写体の顔を事前にデジタルビデオカメラ１００に登録しておけば、その被写体に対して優先的にフォーカスを合わせることができる。
【００３１】
１−３−１．識別対象の登録
識別対象とする顔を事前に手動で登録する方法について図３及び図４を用いて説明する。図３は、識別対象とする顔を事前に手動で登録する方法を示すフローチャートである。図４は、識別対象とする顔を事前に手動で登録する方法を説明するための模式図である。
【００３２】
使用者が操作部材２１０を操作して、識別対象とする顔を事前に登録するための顔登録モードを選択することにより、手動の顔登録モードが開始される。デジタルビデオカメラ１００のコントローラー１８０は、対象とする顔を撮影するモードを開始する（Ｓ１１０）。顔登録モードにおいて撮影が開始されると、例えば、表示モニタ２２０は図４（ａ）に示されるような画像を表示する。
【００３３】
コントローラー１８０は、使用者により、識別対象とする顔が撮影されたかどうかを判断する（Ｓ１２０）。コントローラー１８０は、使用者により識別対象とする顔が撮影されるまで待機する。
【００３４】
使用者により識別対象とする顔が撮影されると、表示モニタ２２０は、登録する識別対象についての各種情報の入力を促す画面を表示する（Ｓ１３０）。例えば、表示モニタ２２０は、図４（ｂ）に示されるような、識別対象の名前、生年月日、及び識別優先度に関する情報の入力を促す画面を表示する。ここで、識別優先度とは、事前に登録されている顔が複数ある場合に、それらの複数の顔を撮影するような場面において、どの顔を優先的に識別するかを決定するパラメータである。
【００３５】
コントローラー１８０は、使用者により、各種情報が入力されたかどうかを判断する（Ｓ１４０）。コントローラー１８０は、使用者により各種情報が入力されるまで待機する。
【００３６】
各種情報が入力されると、コントローラー１８０は、登録された各種情報と顔の特徴量情報とを関連付けて内部メモリ２４０に記憶させて顔登録モードを終了する。
【００３７】
このような方法によって、使用者は、識別したい顔とその顔に関連する人に関する情報をデジタルビデオカメラ１００に登録することができる。
【００３８】
１−３−２．顔識別機能（個人認証機能）を用いた撮影を行う際のモニタ表示
デジタルビデオカメラ１００において顔識別機能（個人認証機能）を用いた撮影を行う際の表示モニタ２２０の表示動作について図５、図６を用いて説明する。図５は、顔識別機能を用いた撮影を行う際の表示モニタ２２０の表示動作のフローチャートである。図６は、表示モニタ２２０の表示例を示す模式図である。
【００３９】
使用者は、操作部材２１０のうちのモード設定ダイヤルを操作することにより、デジタルビデオカメラ１００を撮影モードに設定できる。デジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ２１０）。具体的には、コントローラー１８０は、ＣＣＤイメージセンサー１４０により生成された画像データから顔（すなわち顔の領域）を検出し、検出した顔の特徴量を抽出する。特徴量を抽出すると、コントローラー１８０は、抽出した特徴量と、内部メモリ２４０に格納されている各人の顔の特徴量とが類似しているか否かを判断して、個人認証を実行する。このような個人認証処理は、抽出した複数の顔の特徴量全てに対してなされる。つまり、個人認証は複数の人物（顔）に対してなされる。
【００４０】
個人認証の結果、画像データにおいて検出された人物が事前に登録された人物と同一であると認証されると（つまり、画像データから検出した顔が事前に登録された顔と同一であることが確認されると）、コントローラー１８０は、認証した人物の名前を図６（ａ）に示すように表示するよう、表示モニタ２２０を制御する（Ｓ２２０）。なお、図６（ａ）の例では、名前表示領域（四角の領域）を設け、その中に名前を表示している。名前表示領域の大きさや形状は固定でもよいし、表示される名前の文字数に応じて変化させてもよい。図６の例では、名前の背景色すなわち表示領域の色を白とし、表示する文字の色を黒に設定しているが、名前の背景色や文字の色を他の色に設定してもよい。例えば、名前の背景色を黒とし、表示する文字の色を白に設定してもよい。また、図６の例では、名前表示領域を顔の下側の位置に表示しているが、顔の上側や横側の位置に表示してもよい。すなわち、名前の表示方法は図６（ａ）に示す方法に限定されない。表示モニタ２２０に名前の表示を開始させると、コントローラー１８０は、名前の表示を開始してからの経過時間のカウントを開始する（Ｓ２３０）。
【００４１】
時間のカウント開始後、コントローラー１８０は、カウントに基づき表示モニタ２２０に名前の表示を開始させてから所定時間が経過したか否かを判断する（Ｓ２４０）。
【００４２】
所定時間が経過したと判断すると、コントローラー１８０は、認証した人物の名前の表示を停止するよう表示モニタ２２０を制御する（Ｓ２６０）。例えば、コントローラー１８０は、図６（ｂ）に示すように、名前の表示を消去するよう表示モニタ２２０を制御する。
【００４３】
一方、所定時間が経過していないと判断すると、コントローラー１８０は、現在個人認証している人物に加えて、画像データにおいて新たな人物が認証されたか否かを判断する（Ｓ２５０）。新たな人物が認証されていないと判断すると、コントローラー１８０は、時間のカウントを継続して行う。一方、新たな人物が個人認証されたと判断すると、コントローラー１８０は、新たな人物の名前についても表示されるよう表示モニタ２２０を制御する（Ｓ２２０）。そして、コントローラー１８０は、カウントをリセットし、新たな人物の個人認証を開始してから改めて時間のカウントを開始する（Ｓ２３０）。
【００４４】
以上のように、本実施の形態にかかるデジタルビデオカメラ１００は、スルー画像において個人認証した人物の名前の表示を開始してから所定時間が経過したときは、名前の表示を停止する。このように制御する理由を以下に説明する。
【００４５】
例えば、個人認証を行っている間は常時名前が表示されると、撮像されている人物の名前を使用者に知らせることはできるが、名前の表示が実際に撮像している部分の映像を覆い隠すため、使用者は実際に撮像している画像の一部を認識することができない。そこで、本実施の形態では、個人認証した人物の名前の表示を開始してから所定時間経過後に、名前の表示を停止する。これにより、現在撮像している人物の名前を使用者に伝えることができるとともに、撮影時間中の殆どの場合において、使用者は、実際に撮像している画像の大部分を認識することができる。
【００４６】
また、本実施の形態にかかるデジタルビデオカメラ１００は、撮像している人物の個人認証を行っている際に、新たな人物の個人認証を開始したときは、個人認証を開始してからの時間のカウントをリセットする。これにより、新たに個人認証した人物の名前についても十分な時間使用者に伝えることができる。
【００４７】
１−４．まとめ
本実施の形態にかかるデジタルビデオカメラ１００は、スルー画像において個人認証した人物の名前の表示を開始してから所定時間が経過したときは、名前の表示を停止する。これにより、使用者は、顔が識別された人物の名前（属性情報）を認識できるとともに、名前の表示停止後は、被写体画像を明確に認識できるようになり、属性情報及び被写体画像の視認性において使用者の利便性を向上できる。
【００４８】
２．実施の形態２
本実施形態では、顔識別機能を用いた撮影を行う際のモニタ表示動作の別の動作例を説明する。本実施形態では、認証された複数の人物の名前の表示において、名前が重ねて表示される恐れがある場合に、優先度の高い人物の名前が上側になるように名前の表示を行なう。なお、本実施形態のデジタルビデオカメラ１００のハードウェア構成は実施の形態１と同様であるので、ここでの説明は省略する。
【００４９】
図７、図８を用いて、本実施形態の、顔識別機能（個人認証機能）を用いた撮影を行う際のモニタ表示動作について説明する。図７は、顔識別機能を用いた撮影を行う際のモニタ表示動作を説明するためのフローチャートである。図８は、モニタ表示の例を説明するための模式図である。
【００５０】
図７において、使用者によりデジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ３１０）。
【００５１】
個人認証を開始すると、コントローラー１８０は、複数の人物（被写体）を認証したか否かを判断し、複数の人物を認証したと判断した場合、認証した複数人の名前の表示が重なるおそれがあるか否かを判断する（Ｓ３２０）。ここで、本実施形態では、名前は、その人物の顔領域の位置を基準とし、顔領域の下側の所定の位置に表示されるように定められているとする。よって、認証された複数の人物の顔領域の位置を判断することで、名前の表示が重なるか否かを判断できる。
【００５２】
名前の表示が重なる恐れがないと判断すると、コントローラー１８０は、認証した人物の名前を通常の表示方法で表示するように表示モニタ２２０を制御する（Ｓ３３０）。例えば、コントローラー１８０は、図８（ａ）に示すような表示がなされるように表示モニタ２２０を制御する。
【００５３】
一方、名前の表示が重なる恐れがあると判断すると、コントローラー１８０は、個人認証した人物の優先度をそれぞれ確認する（Ｓ３４０）。具体的には、コントローラー１８０は、内部メモリ２４０に格納されている優先度情報にアクセスすることにより、優先度の確認を行う。
【００５４】
優先度を確認すると、コントローラー１８０は、優先度のより高い人物の名前が優先度のより低い人物の名前の上側に表示されるように表示モニタ２２０を制御する（Ｓ３５０）。例えば、コントローラー１８０は、図８（ｂ）に示すような表示が行われるように表示モニタ２２０を制御する。図８（ｂ）の例では、「やまだ たろう」が「たなか はなこ」よりも優先度が高く設定されており、このため、「やまだ たろう」の名前が「たなか はなこ」の名前より上側に表示されている。すなわち、「たなか はなこ」の名前の一部は、「やまだ たろう」の表示に隠されてしまっている。
【００５５】
なお、図７の処理に代えて、複数の人物が認証された場合に、より優先度の高い人物の名前を上側に表示させるようにする処理の別の例として図９の処理も考えられる。
【００５６】
図９において、デジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ４１０）。
【００５７】
個人認証を開始すると、コントローラー１８０は、複数の人物について認証を行ったか否かを判断し、複数人を認証したと判断した場合、個人認証した各人物の優先度を確認する（Ｓ４２０）。そして、コントローラー１８０は、ＣＣＤイメージセンサー１４０で撮像された画像に対して、優先度のより低い人物の名前から順に合成して、スルー画像データを生成する（Ｓ４３０）。例えば、図８（ｂ）に示す例のように、「やまだ たろう」が「たなか はなこ」よりも優先度が高い場合、ＣＣＤイメージセンサー１４０で撮像された画像に対して、まず、「たなか はなこ」の名前を合成し、その後に、「やまだ たろう」の名前を合成する。一般に画像合成において、後に合成された画像が先に合成された画像を上書きするため、後に合成された画像が先に合成された画像よりも上側に表示される。よって、このように優先度の低い人物の名前から合成することで、結果として、優先度の高い人物の名前が上側に表示されるようになる。
【００５８】
その後、コントローラー１８０は、合成されたスルー画像データを表示するように表示モニタ２２０を制御する（Ｓ４４０）。
【００５９】
このように、本実施の形態にかかるデジタルビデオカメラ１００は、個人認証している複数人の名前を表示する場合であって、複数人の名前を重畳して表示するおそれがある場合に、予め設定されている各人の優先度を確認し、優先度のより高い人物の名前を優先度のより低い人物の名前の上側に重ねて表示することとした。これにより、デジタルビデオカメラ１００は、使用者により優先度がより高いと考えられている人物の名前を優先的に使用者に提示することができる。
【００６０】
なお、名前の表示が重なる場合に、上側に表示される名前及び／または名前表示領域の背景色を半透明にしてもよく、これにより、下側に表示される名前が視認できるようにしてもよい。また、上記の例では、名前の表示が重なるおそれがあるときは、優先度のより高い人物の名前が上側に表示されるよう構成したが、名前が重ならないように、優先度のより低い人物の名前の表示位置をずらしてもよい。
【００６１】
以上のように、本実施形態に係るデジタルビデオカメラ１００は、複数の人物に関する属性情報（例えば、名前）を表示する際に、優先度のより高い人物に関する属性情報が優先度のより低い人物に関する属性情報よりも上側に表示される。これにより、使用者により優先度がより高いと考えられている人物の名前を優先的に使用者に提示することができ、属性情報の視認性において使用者の利便性を向上できる。
【００６２】
３．実施の形態３
本実施形態は、実施の形態１の思想と実施の形態２の思想の双方の思想を適用したデジタルビデオカメラ１００の構成を説明する。本実施形態のデジタルビデオカメラ１００のハードウェア構成は実施の形態１と同様であるので、ここでの説明は省略する。
【００６３】
図１０は、本実施形態の、顔識別機能を用いた撮影を行う際のモニタ表示動作を説明するためのフローチャートである。図１０を用いて、本実施形態の、顔識別機能を用いた撮影を行う際のモニタ表示動作について説明する。
【００６４】
図１０において、使用者によりデジタルビデオカメラ１００が撮影モードに設定されると、コントローラー１８０は、個人認証を開始するまで待機する（Ｓ３１０）。
【００６５】
個人認証を開始すると、コントローラー１８０は、複数人の被写体について個人認証がなされたか否かを判断し、複数人が認証されたと判断した場合に、複数人の名前の表示が重なるおそれがあるか否かを判断する（Ｓ３２０）。
【００６６】
名前の表示が重なる恐れがないと判断すると、コントローラー１８０は、認証した人物の名前を通常の表示方法で表示するように表示モニタ２２０を制御する（Ｓ３３０）。
【００６７】
一方、名前の表示が重なる恐れがあると判断すると、コントローラー１８０は、個人認証した人物の優先度をそれぞれ確認する（Ｓ３４０）。優先度を確認すると、コントローラー１８０は、優先度のより高い人物の名前が優先度のより低い人物の名前の上側に表示されるように表示モニタ２２０を制御する（Ｓ３５０）。以上の処理は、実施の形態２で説明したとおりである。
【００６８】
その後、コントローラー１８０は、名前の表示を開始させてから経過した時間のカウントを開始する（Ｓ３６０）。時間のカウント開始後、コントローラー１８０は、カウントに基づき、表示モニタ２２０に名前の表示を開始させてから所定の時間が経過したか否かを判断する（Ｓ３７０）。
【００６９】
所定の時間が経過したと判断すると、コントローラー１８０は、個人認証している人物の名前の表示を停止するよう表示モニタ２２０を制御する（Ｓ３８０）。その後、ステップＳ３２０に戻る。
【００７０】
一方、所定の時間が経過していないと判断すると、コントローラー１８０は、現在個人認証している人物に加えて、新たな人物が認証されたか否かを判断する（Ｓ３９０）。新たな人物が認証されていないと判断すると、コントローラー１８０は、時間のカウントを継続して行う。一方、新たな人物が個人認証されたと判断すると、コントローラー１８０は、新たな人物の名前についても表示されるよう表示モニタ２２０を制御する（Ｓ３２０）。そして、コントローラー１８０は、カウントをリセットし、新たな人物の個人認証を開始してから改めて時間のカウントを開始する（Ｓ３６０）。
【００７１】
なお、図１０の処理は、実施の形態１の図５の処理と、実施の形態２の図７の処理とを組み合わせたものである。ここで、実施の形態１の図５の処理に、実施の形態２の図７の処理に代えて図９の処理を組み合わせてもよい。具体的には、図１０の処理において、ステップＳ３２０〜Ｓ３５０の代わりに、図９におけるステップＳ４２０〜Ｓ４４０を挿入してもよい。以上のように、実施の形態１の思想と実施の形態２の思想とを組み合わせることもできる。
【００７２】
４．他の実施の形態
以上により、本発明の実施の形態として、実施の形態１を説明した。しかし、本発明は、これらには限定されない。そこで、本発明の他の実施の形態を本欄にまとめて説明する。
【００７３】
上記の実施の形態では、撮像手段として、ＣＣＤイメージセンサー１４０を例示したが、撮像手段はこれに限定されない。例えば、撮像手段を、ＣＭＯＳイメージセンサーやＮＭＯＳイメージセンサーで構成してもよい。
【００７４】
また、画像処理部１６０とコントローラー１８０とは、１つの半導体チップで構成してもよく、別々の半導体チップで構成してもよい。
【００７５】
また、上記の実施の形態では、コントローラー１８０が顔検出及び顔識別を行う構成としたが、必ずしもこのような構成とする必要はない。例えば、顔検出及び顔識別を行うチップをコントローラー１８０とは別のチップとしてもよい。また、顔検出を行うチップと顔識別を行うチップとを別のチップとしてもよい。
【００７６】
また、上記の実施の形態では、認証された人物の属性情報として名前を表示したが、名前に加えて、または、名前に代えて、他の属性情報（住所、性別、血液型等）を表示してもよい。
【産業上の利用可能性】
【００７７】
本発明は、顔識別機能を備えた、デジタルビデオカメラやデジタルスチルカメラ等の撮像装置に適用可能である。
【符号の説明】
【００７８】
１００ デジタルビデオカメラ
１１０ 光学系
１２０ レンズ駆動部
１３０ シャッター
１４０ ＣＣＤイメージセンサー
１５０ Ａ／Ｄコンバータ
１６０ 画像処理部
１７０ バッファ
１８０ コントローラー
１９０ カードスロット
２００ メモリカード
２１０ 操作部材
２２０ 表示モニタ
２３０ 顔枠
２４０ 内部メモリ
【特許請求の範囲】
【請求項１】
人物に関する属性情報と前記人物の優先度に関する情報とを関連付けて記憶する記憶手段と、
被写体を撮像し画像データを生成する撮像手段と、
前記撮像手段により生成された画像データが示す画像に含まれる人物の属性情報を表示する表示手段と、を備え、
前記表示手段は、複数の人物に関する属性情報を重ねて表示する際に、優先度のより高い人物に関する属性情報を優先度のより低い人物に関する属性情報よりも前面に表示する、
撮像装置。
【請求項２】
前記記憶手段は、人物に関する属性情報と、前記人物の顔の特徴を示す特徴量と、前記人物の優先度に関する情報とを関連付けて記憶し、
前記撮像手段により生成された画像データに含まれる顔の特徴量を抽出する抽出手段と、
前記抽出手段により抽出された特徴量に基づき、前記抽出された特徴量に関連する人物が、前記記憶手段に記憶されている特徴量に関連する人物と同一か否かを判定する判定手段と、をさらに備え、
前記表示手段は、前記判定手段が同一であると判定したときに、前記特徴量に関連する人物に関する属性情報を表示する、
請求項１記載の撮像装置。
【請求項３】
前記撮像手段により生成された画像データに対して属性情報を合成して表示用画像データを生成する合成手段をさらに備え、
前記表示手段は、前記合成手段により生成された表示用画像データを表示し、
前記合成手段は、複数の人物に関する属性情報を表示する表示用画像データを生成する際に、前記撮像手段により生成された画像データに対して、人物の優先度の低い順に属性情報を合成して表示用画像データを生成する、
請求項２記載の撮像装置。
【請求項４】
前記属性情報は人物の名前である、請求項１に記載の撮像装置。
【請求項５】
前記属性情報は人物の名前である、請求項２に記載の撮像装置。
【請求項１】
人物に関する属性情報と前記人物の優先度に関する情報とを関連付けて記憶する記憶手段と、
被写体を撮像し画像データを生成する撮像手段と、
前記撮像手段により生成された画像データが示す画像に含まれる人物の属性情報を表示する表示手段と、を備え、
前記表示手段は、複数の人物に関する属性情報を重ねて表示する際に、優先度のより高い人物に関する属性情報を優先度のより低い人物に関する属性情報よりも前面に表示する、
撮像装置。
【請求項２】
前記記憶手段は、人物に関する属性情報と、前記人物の顔の特徴を示す特徴量と、前記人物の優先度に関する情報とを関連付けて記憶し、
前記撮像手段により生成された画像データに含まれる顔の特徴量を抽出する抽出手段と、
前記抽出手段により抽出された特徴量に基づき、前記抽出された特徴量に関連する人物が、前記記憶手段に記憶されている特徴量に関連する人物と同一か否かを判定する判定手段と、をさらに備え、
前記表示手段は、前記判定手段が同一であると判定したときに、前記特徴量に関連する人物に関する属性情報を表示する、
請求項１記載の撮像装置。
【請求項３】
前記撮像手段により生成された画像データに対して属性情報を合成して表示用画像データを生成する合成手段をさらに備え、
前記表示手段は、前記合成手段により生成された表示用画像データを表示し、
前記合成手段は、複数の人物に関する属性情報を表示する表示用画像データを生成する際に、前記撮像手段により生成された画像データに対して、人物の優先度の低い順に属性情報を合成して表示用画像データを生成する、
請求項２記載の撮像装置。
【請求項４】
前記属性情報は人物の名前である、請求項１に記載の撮像装置。
【請求項５】
前記属性情報は人物の名前である、請求項２に記載の撮像装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１１−１６０４１３（Ｐ２０１１−１６０４１３Ａ）
【公開日】平成２３年８月１８日（２０１１．８．１８）
【国際特許分類】
【出願番号】特願２０１０−２８３４４６（Ｐ２０１０−２８３４４６）
【出願日】平成２２年１２月２０日（２０１０．１２．２０）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２３年８月１８日（２０１１．８．１８）
【国際特許分類】
【出願日】平成２２年１２月２０日（２０１０．１２．２０）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]