画像処理装置及びカメラ
【課題】 複数の人物に対してそれぞれが所望する画像を容易に分配することができる画像処理装置を提供する。
【解決手段】 集音された音声を入力する音声入力部２２と、前記音声入力部から入力された音声の人物特定要素を抽出する音声処理部２４と、特定の人物の声が有する固有のパターンを記録する音声記録部２６と、前記人物特定要素と前記パターンとの特徴を比較することにより話者を特定する話者特定部４と、画像データを取得する画像取得部４と、前記画像データに基づく画像を出力する画像出力部２０と、前記画像出力部により前記画像を出力している間に前記話者特定部により特定された前記話者を示す情報と前記画像データとを関連付けた分類データを作成する画像分類部４とを備える。
【解決手段】 集音された音声を入力する音声入力部２２と、前記音声入力部から入力された音声の人物特定要素を抽出する音声処理部２４と、特定の人物の声が有する固有のパターンを記録する音声記録部２６と、前記人物特定要素と前記パターンとの特徴を比較することにより話者を特定する話者特定部４と、画像データを取得する画像取得部４と、前記画像データに基づく画像を出力する画像出力部２０と、前記画像出力部により前記画像を出力している間に前記話者特定部により特定された前記話者を示す情報と前記画像データとを関連付けた分類データを作成する画像分類部４とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びカメラに関するものである。
【背景技術】
【０００２】
撮影画像データのＥｘｉｆ形式等のファイルのタグデータ内にメタデータとして、画像データの分類・整理に用いられる項目情報を含めてメモリカードに記録するカメラが知られている（例えば、特許文献１参照）。このカメラにおいては、撮影の際に音声を用いて入力された項目情報をメタデータとして記録している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２８９３０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、このカメラにおいては、撮影後に撮影画像を確認した際に複数の鑑賞者がそれぞれ所望した撮影画像の画像データを各鑑賞者に分配しようとすると、分配の際に画像データの分類を行う必要があり煩わしかった。
【０００５】
本発明の目的は、複数の人物に対してそれぞれが所望する画像を容易に分配することができる画像処理装置及びカメラを提供することである。
【課題を解決するための手段】
【０００６】
本発明に係る画像処理装置は、集音された音声を入力する音声入力部と、前記音声入力部から入力された音声の人物特定要素を抽出する音声処理部と、特定の人物の声が有する固有のパターンを記録する音声記録部と、前記人物特定要素と前記パターンとの特徴を比較することにより話者を特定する話者特定部と、画像データを取得する画像取得部と、前記画像データに基づく画像を出力する画像出力部と、前記画像出力部により前記画像を出力している間に前記話者特定部により特定された前記話者を示す情報と前記画像データとを関連付けた分類データを作成する画像分類部とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、複数の人物に対してそれぞれが所望する画像を容易に分配することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施の形態に係るカメラのシステム構成を示すブロック図である。
【図２】本発明の実施の形態に係るカメラの人物ＩＤの登録処理を示すフローチャートである。
【図３】本発明の実施の形態に係るカメラの個人音声認証データ格納フォルダの内容を示す図である。
【図４】本発明の実施の形態に係るカメラの分類データ作成処理を示すフローチャートである。
【図５】本発明の実施の形態に係るカメラの語彙データに含まれる追加言語及び削除言語を示す図である。
【図６】本発明の実施の形態に係るカメラの分類データを示す図である。
【図７】本発明の実施の形態に係る実施の形態に係る分類データの確認処理及び分類データの追加・削除処理を示すフローチャートである。
【図８】本発明の実施の形態に係るカメラの分類データの追加・削除処理を示すフローチャートである。
【図９】本発明の実施の形態に係るカメラの背面表示部におけるサムネール表示を示す図である。
【図１０】本発明の実施の形態に係るカメラの背面表示部におけるサムネール表示を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して本発明の実施の形態に係るカメラについて説明する。図１は、実施の形態に係るカメラのシステム構成を示すブロック図である。カメラ２は、ＣＰＵ４を備え、ＣＰＵ４には、ＣＣＤ或いはＣＭＯＳ等により構成され、撮影レンズ６を介した被写体光を撮像して撮像信号を生成する撮像素子８、撮像素子８から出力された撮像信号を図示しないＡ／Ｄ変換部においてＡ／Ｄ変換することにより生成された画像データを記憶する画像記憶部１０、撮像素子８から出力される撮像信号に基づく画像データに、ホワイトバランス調整、輪郭補償、ガンマ補正等の画像処理を行う画像処理部１２、カードスロット１３に着脱可能に構成され画像データや種々のデータを記録するメモリカード１４、撮影画像等の画像をカメラ２の背面に設けられＬＣＤまたは有機ＥＬ等により構成された背面表示部１６または接続部１８を介して図示しない外部表示装置に対して出力する画像出力部２０、カメラ２の周囲の音声を集音して音声信号を生成するマイクロホン２２、マイクロホン２２から出力された音声信号に基づく音声データから人物特定要素を抽出する音声処理部２４、音声処理部２４により抽出した人物特定要素と特定の人物とを対応させる個人音声認証データ等を記録する内部メモリ２６、マイクロホン２２から出力される音声信号に基づく音声データについて音声認識を行い、認識対象の語句を記憶させた語彙データを参照して話者の言葉を特定する音声認識部２８、画像データを外部装置に対して送信する送信部３０、レリーズボタン３２、マルチセレクタ等のキーまたは背面表示部１６に積層して配置されたタッチパネルを含む操作部３４、ＵＳＢ機器を接続するＵＳＢポート３６が接続されている。
【００１０】
図２は、実施の形態に係るカメラの個人音声認証データの作成処理を示すフローチャートである。操作部３４を介したユーザの操作に基づいて個人音声認証データの作成モードに設定し、マイクロホン２２を介して特定の個人の声が入力されると（ステップＳ１）、ＣＰＵ４は、音声処理部２４を制御してマイクロホン２２から出力される音声信号に基づく音声データから人物特定要素を抽出させる（ステップＳ２）。ここで、人間の声の周波数と強度との関係、周波数及び強度の時間変化等は人物固有のパターンを有し、例えば、声紋として個人の識別に利用することができる。従って、特定の人物の声の周波数と強度との関係、周波数及び強度の時間変化等に基づいて人物特定要素を抽出させる。
【００１１】
次に、操作部３４を介したユーザの操作により特定の個人の名前やニックネーム等、個人を特定するための個人ＩＤが入力されると、ＣＰＵ４は個人ＩＤを登録し（ステップＳ３）、ステップＳ２で抽出した人物特定要素に基づくパターンを個人ＩＤに対応させた個人音声認証データを作成する（ステップＳ４）。そして、ＣＰＵ４は個人音声認証データを内部メモリ２６の個人音声認証データ格納フォルダ内に記録する（ステップＳ５）。
【００１２】
次に、ＣＰＵ４は操作部３４を介したユーザの操作に基づいて他の人物の個人音声認証データを作成するか否かを判断し（ステップＳ６）、他の人物の個人音声認証データを作成する場合には、ステップＳ１に示す処理に戻る。一方、他の人物の個人音声認証データを作成しない場合には処理を終了する。
【００１３】
図２に示す個人音声認証データの作成処理によって、内部メモリ２６の個人音声認証データ格納フォルダには、例えば図３に示すような個人音声認証データが格納される。図３は、ステップＳ２において抽出された人物特定要素に基づくパターンＡにステップＳ３で登録された個人ＩＤ「Ａ」を対応させた個人音声認証データＡ、ステップＳ２において抽出された人物特定要素Ｂに基づくパターンＢにステップＳ３で登録された個人ＩＤ「Ｂ」を対応させた個人音声認証データＢ、ステップＳ２において抽出された人物特定要素Ｃに基づくパターンＣにステップＳ３で登録された個人ＩＤ「Ｃ」を対応させた個人音声認証データＣが個人認証データ格納フォルダに格納されていることを示している。
【００１４】
なお、図２に示すフローチャートのステップＳ３において操作部３４を介して個人ＩＤを入力する構成を例に説明したが、マイクロホン２２を介して個人ＩＤを入力する構成としてもよい。この場合には、ＣＰＵ４は、音声認識部２８を制御して音声認識を行わせることにより言葉を特定し、特定した言葉を個人ＩＤとして登録する。
【００１５】
また、図２に示すフローチャートのステップＳ３において個人ＩＤを入力する構成としたが、個人ＩＤの入力を省略し、ＣＰＵ４が、人物特定要素を抽出した順に個人ＩＤを「Ａ」、「Ｂ」、「Ｃ」…または「００１」、「００２」、「００３」…とする等、予め設定された個人ＩＤを付す構成としてもよい。
【００１６】
また、図２に示すフローチャートのステップＳ５において、個人音声認証データを内部メモリ２６に記録する構成としたが、メモリカード１４に個人音声認証データを記録させる構成としてもよい。
【００１７】
次に、図４に示すフローチャートを参照して実施の形態に係る分類データの作成処理について説明する。操作部３４を介したユーザの操作に基づいて撮影画像を１コマずつ表示する再生モードを設定すると、ＣＰＵ４は画像出力部２０を制御して背面表示部１６に初期説明を表示させる（ステップＳ１１）。この初期説明には、マイクロホン２２を介して集音した音声を用いて画像の分類を行う際のガイドが含まれている。即ち、以下に説明するように、どのような言葉に対してどのような処理が行われるかについての説明が含まれている。なお、このフローチャートの１コマずつ表示する再生モードは、操作部３４を介したユーザの操作に基づいて次の画像を表示させる１枚表示モードであってもよいし、１コマの画像を表示してから所定時間が経過するとＣＰＵ４が次の画像を表示させるスライドショーモードであってもよい。
【００１８】
次に、ＣＰＵ４はメモリカード１４から分類の対象となる対象画像データのうち、１コマ分の画像データを読み出し（ステップＳ１２）、画像出力部２０を制御して背面表示部１６に画像データに基づく画像を表示させる（ステップＳ１３）。ここで、分類の対象となる対象画像データは、メモリカード１４に記録されているすべての撮影画像データであってもよいし、特定の日や特定の時間帯など所定の期間に撮影された画像の撮影画像データであってもよい。
【００１９】
次に、ＣＰＵ４はマイクロホン２２を介してカメラ２の周囲の音声が入力されたか否かを判断する（ステップＳ１４）。音声が入力された場合にはＣＰＵ４は、音声処理部２４を制御してマイクロホン２２から出力された音声信号に基づく音声データを用いて人物特定要素を抽出させる（ステップＳ１５）。
【００２０】
次に、ＣＰＵ４は、人物特定要素から話者が特定できるか否かを判断する（ステップＳ１６）。即ち、ステップＳ１５において抽出した人物特定要素の特徴と、内部メモリ２６に記録された個人音声認証データのパターンとを比較し、人物特定要素の特徴が、内部メモリ２６の個人音声認証データ格納フォルダに格納された何れかの個人音声認証データのパターンと同一人物のものであるか否かを判断する。また、ＣＰＵ４は、同一人物のものである場合には、当該個人音声認証データに対応する個人ＩＤを読み出し、話者を特定する。
【００２１】
話者が特定できた場合には、ＣＰＵ４は、音声認識部２８を制御して音声認識を行い、話者の言葉が追加言語であるか、削除言語であるか、追加言語でも削除言語でもないかを判断する（ステップＳ１７）。ここで、図５に示すように語彙データには、音声認識部２８の認識対象となる追加言語群及び削除言語群を含む語句が記憶されている。また、追加言語群には「欲しい」、「追加」、「はい」、「プラス」等の追加言語が含まれ、削除言語群には「いらない」、「削除」、「いいえ」、「マイナス」等の削除言語が含まれている。また、図５に示す語句は例示であり、追加言語として想定される語句であれば追加言語群に含まれ、削除言語として想定される語句であれば削除言語群に含まれる。
【００２２】
音声認識部２８により話者の言葉が追加言語であると認識した場合には、ＣＰＵ４はメモリカード１４または内部メモリ２６に分類データを作成する（ステップＳ１８）。例えば、図６に示すように話者として特定された人物のＩＤに基づく個人フォルダ内に分類データを作成する。ここで、分類データとしては画像データを特定可能な情報であればどのようなデータでもよく、ステップＳ１２で読み出した画像データのファイル名等の情報を示すテキストデータを個人フォルダに格納してもよいし、ステップＳ１２で読み出した画像データをコピーして個人フォルダに格納してもよい。
【００２３】
また、音声認識部２８により話者の言葉が削除言語であると認識した場合には、ＣＰＵ４は、ステップＳ１６において話者として特定した人物の個人フォルダからステップＳ１２で読み出した画像データについての分類データを削除する（ステップＳ１９）。なお、削除言語であると認識した際に、話者として特定した人物の個人フォルダにステップＳ１２で読み出した画像データについての分類データが存在しない場合には、ステップＳ１９に示す処理を行わずに後述するステップＳ２０に示す処理を行ってもよいし、後述するステップＳ２２に示す処理を行ってもよい。ステップＳ２２に示す処理を行う場合には、ＣＰＵ４は画像出力部２０を制御して、背面表示部１６に削除すべき分類データが存在しない旨の警告表示をさせる。
【００２４】
ステップＳ１８またはステップＳ１９に示す処理を行うと、ＣＰＵ４は画像出力部２０を制御して背面表示部１６に話者を特定し、かつ、言語を認識した旨の確認表示をさせる（ステップＳ２０）。さらにＣＰＵ４はステップＳ２０に示す処理において、ステップＳ１８に示す分類データの作成処理を行った旨の確認表示またはステップＳ１９に示す分類データの削除処理を行った旨の確認表示をさせてもよい。
【００２５】
次に、ＣＰＵ４は次に表示すべき対象画像データが存在するか否かを判断する（ステップＳ２１）。次に表示すべき対象画像データが存在する場合には、ステップＳ１２に示す処理に戻り、次に表示すべき対象画像データが存在しない場合には処理を終了する。
【００２６】
また、上述のステップＳ１６において話者が特定できなかった場合、及びステップＳ１７において話者の言葉が追加言語でも削除言語でもない場合には、ＣＰＵ４は画像出力部２０を制御して、背面表示部１６に話者の特定または言葉の認識ができなかった旨を示す警告表示をさせる（ステップＳ２２）。
【００２７】
また、上述のステップＳ１４において音声が入力されない場合には、ＣＰＵ４は次に表示すべき対象画像データが存在するか否かを判断する（ステップＳ２３）。次に表示すべき対象画像データが存在する場合には、ステップＳ１２に示す処理に戻り、次に表示すべき対象画像データが存在しない場合には処理を終了する。
【００２８】
なお、図２に示すフローチャートにおいて個人ＩＤに対応させて特定の人物の顔を記録させた場合には、顔認識を行うことにより対象画像データに基づく画像内に被写体として含まれる人物の個人フォルダに予め分類データを格納した上で、図３のフローチャートに示す処理を開始してもよい。
【００２９】
次に、図７及び図８に示すフローチャートを参照して実施の形態に係る分類データの確認処理及び分類データの追加・削除処理について説明する。操作部３４を介したユーザの操作によりサムネール表示を行う再生モードを設定すると（ステップＳ３１）、ＣＰＵ４は操作部３４を介したユーザの操作に基づいて、サムネール表示をどのように行うかを判断する（ステップＳ３２）。即ち、サムネール画像に対して個人ＩＤを表示するか否かを判断する。
【００３０】
ここで、ＣＰＵ４は画像出力部２０を制御して、サムネール表示された各画像の画像データについての分類データが特定の個人フォルダ内に格納されているか否かを個人ＩＤの表示／非表示により、または個人ＩＤの表示態様を変更することにより背面表示部１６に表示させることができる。また、ステップＳ３２に示す処理において個人ＩＤを表示する場合にＣＰＵ４は、全員の個人ＩＤを表示するか、特定の個人の個人ＩＤを表示するかについても判断する。即ち、図２に示す個人音声認証データ作成処理において登録された人物全員の分類データに基づくサムネール表示を行うか、特定の個人の分類データに基づく表示を行うかについて判断する。
【００３１】
登録された人物全員の分類データに基づくサムネール表示を行う場合には、ＣＰＵ４は画像出力部２０を制御して、図９に示すようにサムネール画像の画像データについての分類データが個人フォルダ内に格納されている人物の人物ＩＤを、当該サムネール画像に表示させる（ステップＳ３３）。例えば、図６に示すように人物ＩＤが「Ａ」である人物の個人フォルダには「画像００１」、「画像００２」、「画像００５」、「画像００６」…の分類データが格納されている。従って、図９においては、「画像００１」、「画像００２」、「画像００５」、「画像００６」のサムネール画像に個人ＩＤ「Ａ」を重畳表示させる。同様に図６に示すように人物ＩＤが「Ｂ」である人物の個人フォルダには「画像００１」、「画像００３」、「画像００４」、「画像００５」…の分類データが格納され、人物ＩＤが「Ｃ」である人物の個人フォルダには「画像００２」、「画像００３」、「画像００４」、「画像００５」…の分類データが格納されている。従って、図９においては、「画像００１」、「画像００３」、「画像００４」、「画像００５」のサムネール画像に個人ＩＤ「Ｂ」を重畳表示させ、「画像００２」、「画像００３」、「画像００４」、「画像００５」のサムネール画像に個人ＩＤ「Ｃ」を重畳表示させる。なお、図９においては個人ＩＤをサムネール画像に重畳表示させる構成としたが、個人ＩＤをサムネール画像の近傍に表示させる構成としてもよい。
【００３２】
次に、ＣＰＵ４は、分類データの追加、削除を行うか否かを判断する（ステップＳ３４）。即ち、操作部３４を介したユーザの操作によりサムネール画像の何れかが選択されたか否かを判断する。
【００３３】
何れかのサムネール画像が選択された場合には、ＣＰＵ４は分類データの追加・削除処理を行い（ステップＳ３５）、操作部３４を介したユーザの操作に基づいて他のサムネール画像の画像データについて分類データの追加または削除を行うか否かを判断する（ステップＳ３６）。他のサムネール画像の画像データについて分類データの追加または削除を行う場合には、ステップＳ３３に示す処理に戻る。一方、他のサムネール画像の画像データについて分類データの追加または削除を行わない場合には、処理を終了する。
【００３４】
ステップＳ３２において特定の個人の分類データに基づく表示を行う場合には、ＣＰＵ４は操作部３４を介したユーザの操作に基づいて何れの個人の分類データに基づく表示を行うかを決定する（ステップＳ３７）。次に、ＣＰＵ４は画像出力部２０を制御して、特定の個人の個人フォルダ内に格納されている分類データに基づいてサムネール表示をさせる（ステップＳ３８）。例えば、図１０に示すように、ステップＳ３７において個人ＩＤが「Ａ」である人物の分類データに基づく表示を行うことを決定した場合に、ＣＰＵ４は画像出力部２０を制御して、個人ＩＤが「Ａ」である人物の個人フォルダ内に格納されている分類データが識別可能な表示態様で表示させる。個人フォルダが図６に示すものである場合には、人物ＩＤが「Ａ」である人物の個人フォルダには「画像００１」、「画像００２」、「画像００５」、「画像００６」…の分類データが格納されている。従って、図９に示すように、ＣＰＵ４は、「画像００１」、「画像００２」、「画像００５」、「画像００６」のサムネール画像に個人ＩＤ「Ａ」を重畳表示させる。また、ＣＰＵ４は、人物ＩＤが「Ａ」である人物の個人フォルダに分類データが格納されていない「画像００３」、「画像００４」のサムネール画像を個人フォルダに分類データが格納されている「画像００１」、「画像００２」、「画像００５」、「画像００６」のサムネール画像に比べて暗めに表示させるとともに、人物ＩＤが「Ｂ」及び「Ｃ」である人物の個人フォルダに分類データが格納されている画像データに基づくサムネール画像には個人ＩＤ「Ｂ」及び「Ｃ」を「Ａ」に比べてそれぞれ薄めに重畳表示させる。ここで、人物ＩＤが「Ａ」である人物の個人フォルダに分類データが格納されていない画像データのサムネール画像も表示させるため、画像の選択漏れを防ぐことができる。
【００３５】
次に、ＣＰＵ４は、ステップＳ３９〜ステップＳ４１に示す処理を行うが、これらの処理はステップＳ３４〜Ｓ３６に示す処理とそれぞれ同様であるため、説明は省略する。なお、ステップＳ４１に示す処理において、他のサムネール画像の画像データについて分類データの追加または削除を行う場合には、ステップＳ３８に示す処理に戻る。また、ステップＳ３２において、個人ＩＤを表示しない場合には、ＣＰＵ４は画像出力部２０を制御して、背面表示部１６に通常のサムネール表示を行わせ（ステップＳ４２）、処理を終了する。
【００３６】
また、図８は、図７のステップＳ３５またはステップＳ４０における分類データの追加・削除処理を示すフローチャートである。マイクロホン２２を介して音声が入力されると（ステップＳ５１）、ステップＳ５２〜Ｓ５８に示す処理を行うが、ステップＳ５２〜Ｓ５７に示す処理は図４のフローチャートのＳ１５〜Ｓ２０に示す処理とそれぞれ同様であり、また、ステップＳ５８に示す処理は図４のフローチャートのステップＳ２２に示す処理と同様であるため、説明は省略する。
【００３７】
なお、図１０に示したサムネール表示は一例であり、人物ＩＤが「Ａ」以外のもの、即ち人物ＩＤ「Ｂ」及び「Ｃ」を非表示としてもよい。また、人物ＩＤが「Ａ」である人物の個人フォルダに分類データが格納されている画像のサムネール画像を個人フォルダに分類データが格納されている画像のサムネール画像に比べて暗めに表示させてもよい。また、サムネール画像に対して重畳表示させる個人ＩＤ「Ａ」を「Ｂ」及び「Ｃ」に比べて薄めに表示させてもよい。また、個人ＩＤをサムネール画像に重畳表示させる構成に代えて、個人ＩＤをサムネール画像の近傍に表示させる構成としてもよい。即ち、ステップＳ３７において決定された個人の個人フォルダに格納されている分類データを識別可能な表示であれば、どのように表示を行ってもよい。また、各個人の個人フォルダ、または特定の個人の個人フォルダに格納された分類データの数を表示させてもよい。
【００３８】
また、図４のフローチャートにおける再生モードである１枚表示モードやスライドショーモードにおいても、背面表示部１６に表示中の画像に画像データについての分類データが特定の人物の個人フォルダに格納されていることを示す表示を行ってもよい。この場合には、例えば、ＣＰＵ４は画像出力部２０を制御して、表示中の画像に個人ＩＤを重畳表示させる。
【００３９】
本実施の形態に係るカメラによりＣＰＵ４は送信部３０またはＵＳＢポート３６を介して作成された分類データに基づいて画像データを出力する。画像データの出力は、個人フォルダ毎に行い、分類データが画像データである場合には、特定の個人の個人フォルダに格納された画像データを出力する。また、分類データがテキストデータである場合には、テキストデータが示す画像データを参照し、特定の個人の個人フォルダに格納された分類データが示す画像データを出力する。
【００４０】
これにより、ＵＳＢポート３６に接続されたＵＳＢメモリやＣＤ・ＤＶＤドライブに挿入されたＣＤまたはＤＶＤディスク、ハードディスクドライブに対して個人フォルダに格納された分類データに基づく画像データを出力することができる。また、個人フォルダに格納された分類データに基づく画像データを送信部３０を介して出力することができる。また、個人ＩＤとメールアドレスが関連付けて記録されている場合には、送信部３０を介して特定の個人に対して画像データを送信することができる。送信部３０を介して個人ＩＤが登録された人物のタブレットＰＣや携帯電話とデータ通信を行うことにより、当該人物の個人フォルダに格納された分類データに基づく画像データを出力してもよい。また、メモリカードスロット１３に接続されたメモリカード１４に対して個人フォルダに格納された分類データに基づく画像データを出力してもよい。
【００４１】
また、個人フォルダに格納された分類データに基づいて現像を行ってもよい。この場合に、個人フォルダに格納された同一の画像データについての分類データの数を指定されたプリント枚数としてもよい。また、図５に示す語彙データの追加言語群において数字を含めてもよい。即ち、音声認識部２８により「１」や「２」等の数字が認識された場合には、認識した数の分類データを作成し個人フォルダに格納する。また、図５に示す語彙データの削除言語群に数字を含めてもよく、個人フォルダに格納されている同一の画像についての分類データの数が音声認識部２８により認識した数字よりも小さい場合には、認識した数字と分類データの数の差分に相当する数の分類データを削除する。
【００４２】
また、同様に音声認識部２８により「１枚増やす」や「１枚プラス」等が認識されると、認識した数の分類データを作成して個人フォルダに格納し、「１枚減らす」、「１枚マイナス」等が任席されると、認識した数の分類データを個人フォルダから削除してもよい。
【００４３】
本実施の形態に係るカメラによれば、複数の人物に対してそれぞれが所望する画像を容易に分配することができる。例えば、団体で旅行に行った際にカメラ２により撮影した画像を確認している最中に容易に鑑賞者各自の意思を反映した画像の分類を行うことができる。従って、分類した画像をそれぞれの鑑賞者に容易に分配することができ、手作業等で分配する場合の煩わしさを解消することができ、また、分配にかかる時間を短縮することができる。
【００４４】
なお、上述の実施の形態の図４のフローチャートのステップＳ１４及び図８のフローチャートのステップＳ５１において複数人の声がマイクロホン２２を介して入力された場合には、複数の話者を特定する構成としてもよい。即ち、ＣＰＵ４は音声処理部２４を制御して、マイクロホン２２から出力された音声信号に基づく音声データを用いて人物特定要素を抽出させ、個人音声認証データのパターンと比較することにより複数の話者を特定する。
【００４５】
また、上述の実施の形態において、ユーザは操作部３４を介して操作を行う構成としたが、音声を用いて操作入力を行う構成としてもよい。この場合には、マイクロホン２２から出力された音声信号に基づく音声データを音声認識部２８により音声認識を行い、所定の操作指示を示す言語が認識された場合に、ＣＰＵ４は対応する処理を行う。
【００４６】
また、上述の実施の形態においては、カメラ２がマイクロホン２２を備える構成としたが、音声入力端子を備える場合には音声入力端子に外付けのマイクロホンを接続する構成としてもよい。
【００４７】
また、上述の実施の形態においては、画像出力部２０から背面表示部１６に画像を出力する構成としたが、接続部１８を介して接続された外部表示装置に対して画像を出力する構成としてもよい。
【００４８】
また、上述の実施の形態においては、画像の分類を行う画像処理装置を備えたカメラを例に説明したが、画像処理装置を備えたＰＣであってもよいし、デジタルフォトフレームやＤＶＤプレーヤ等の再生装置であってもよい。
【符号の説明】
【００４９】
２…カメラ、４…ＣＰＵ、１６…背面表示部、２０…画像出力部、２２…マイクロホン、２４…音声処理部、２８…音声認識部
【技術分野】
【０００１】
本発明は、画像処理装置及びカメラに関するものである。
【背景技術】
【０００２】
撮影画像データのＥｘｉｆ形式等のファイルのタグデータ内にメタデータとして、画像データの分類・整理に用いられる項目情報を含めてメモリカードに記録するカメラが知られている（例えば、特許文献１参照）。このカメラにおいては、撮影の際に音声を用いて入力された項目情報をメタデータとして記録している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２８９３０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、このカメラにおいては、撮影後に撮影画像を確認した際に複数の鑑賞者がそれぞれ所望した撮影画像の画像データを各鑑賞者に分配しようとすると、分配の際に画像データの分類を行う必要があり煩わしかった。
【０００５】
本発明の目的は、複数の人物に対してそれぞれが所望する画像を容易に分配することができる画像処理装置及びカメラを提供することである。
【課題を解決するための手段】
【０００６】
本発明に係る画像処理装置は、集音された音声を入力する音声入力部と、前記音声入力部から入力された音声の人物特定要素を抽出する音声処理部と、特定の人物の声が有する固有のパターンを記録する音声記録部と、前記人物特定要素と前記パターンとの特徴を比較することにより話者を特定する話者特定部と、画像データを取得する画像取得部と、前記画像データに基づく画像を出力する画像出力部と、前記画像出力部により前記画像を出力している間に前記話者特定部により特定された前記話者を示す情報と前記画像データとを関連付けた分類データを作成する画像分類部とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、複数の人物に対してそれぞれが所望する画像を容易に分配することができる。
【図面の簡単な説明】
【０００８】
【図１】本発明の実施の形態に係るカメラのシステム構成を示すブロック図である。
【図２】本発明の実施の形態に係るカメラの人物ＩＤの登録処理を示すフローチャートである。
【図３】本発明の実施の形態に係るカメラの個人音声認証データ格納フォルダの内容を示す図である。
【図４】本発明の実施の形態に係るカメラの分類データ作成処理を示すフローチャートである。
【図５】本発明の実施の形態に係るカメラの語彙データに含まれる追加言語及び削除言語を示す図である。
【図６】本発明の実施の形態に係るカメラの分類データを示す図である。
【図７】本発明の実施の形態に係る実施の形態に係る分類データの確認処理及び分類データの追加・削除処理を示すフローチャートである。
【図８】本発明の実施の形態に係るカメラの分類データの追加・削除処理を示すフローチャートである。
【図９】本発明の実施の形態に係るカメラの背面表示部におけるサムネール表示を示す図である。
【図１０】本発明の実施の形態に係るカメラの背面表示部におけるサムネール表示を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照して本発明の実施の形態に係るカメラについて説明する。図１は、実施の形態に係るカメラのシステム構成を示すブロック図である。カメラ２は、ＣＰＵ４を備え、ＣＰＵ４には、ＣＣＤ或いはＣＭＯＳ等により構成され、撮影レンズ６を介した被写体光を撮像して撮像信号を生成する撮像素子８、撮像素子８から出力された撮像信号を図示しないＡ／Ｄ変換部においてＡ／Ｄ変換することにより生成された画像データを記憶する画像記憶部１０、撮像素子８から出力される撮像信号に基づく画像データに、ホワイトバランス調整、輪郭補償、ガンマ補正等の画像処理を行う画像処理部１２、カードスロット１３に着脱可能に構成され画像データや種々のデータを記録するメモリカード１４、撮影画像等の画像をカメラ２の背面に設けられＬＣＤまたは有機ＥＬ等により構成された背面表示部１６または接続部１８を介して図示しない外部表示装置に対して出力する画像出力部２０、カメラ２の周囲の音声を集音して音声信号を生成するマイクロホン２２、マイクロホン２２から出力された音声信号に基づく音声データから人物特定要素を抽出する音声処理部２４、音声処理部２４により抽出した人物特定要素と特定の人物とを対応させる個人音声認証データ等を記録する内部メモリ２６、マイクロホン２２から出力される音声信号に基づく音声データについて音声認識を行い、認識対象の語句を記憶させた語彙データを参照して話者の言葉を特定する音声認識部２８、画像データを外部装置に対して送信する送信部３０、レリーズボタン３２、マルチセレクタ等のキーまたは背面表示部１６に積層して配置されたタッチパネルを含む操作部３４、ＵＳＢ機器を接続するＵＳＢポート３６が接続されている。
【００１０】
図２は、実施の形態に係るカメラの個人音声認証データの作成処理を示すフローチャートである。操作部３４を介したユーザの操作に基づいて個人音声認証データの作成モードに設定し、マイクロホン２２を介して特定の個人の声が入力されると（ステップＳ１）、ＣＰＵ４は、音声処理部２４を制御してマイクロホン２２から出力される音声信号に基づく音声データから人物特定要素を抽出させる（ステップＳ２）。ここで、人間の声の周波数と強度との関係、周波数及び強度の時間変化等は人物固有のパターンを有し、例えば、声紋として個人の識別に利用することができる。従って、特定の人物の声の周波数と強度との関係、周波数及び強度の時間変化等に基づいて人物特定要素を抽出させる。
【００１１】
次に、操作部３４を介したユーザの操作により特定の個人の名前やニックネーム等、個人を特定するための個人ＩＤが入力されると、ＣＰＵ４は個人ＩＤを登録し（ステップＳ３）、ステップＳ２で抽出した人物特定要素に基づくパターンを個人ＩＤに対応させた個人音声認証データを作成する（ステップＳ４）。そして、ＣＰＵ４は個人音声認証データを内部メモリ２６の個人音声認証データ格納フォルダ内に記録する（ステップＳ５）。
【００１２】
次に、ＣＰＵ４は操作部３４を介したユーザの操作に基づいて他の人物の個人音声認証データを作成するか否かを判断し（ステップＳ６）、他の人物の個人音声認証データを作成する場合には、ステップＳ１に示す処理に戻る。一方、他の人物の個人音声認証データを作成しない場合には処理を終了する。
【００１３】
図２に示す個人音声認証データの作成処理によって、内部メモリ２６の個人音声認証データ格納フォルダには、例えば図３に示すような個人音声認証データが格納される。図３は、ステップＳ２において抽出された人物特定要素に基づくパターンＡにステップＳ３で登録された個人ＩＤ「Ａ」を対応させた個人音声認証データＡ、ステップＳ２において抽出された人物特定要素Ｂに基づくパターンＢにステップＳ３で登録された個人ＩＤ「Ｂ」を対応させた個人音声認証データＢ、ステップＳ２において抽出された人物特定要素Ｃに基づくパターンＣにステップＳ３で登録された個人ＩＤ「Ｃ」を対応させた個人音声認証データＣが個人認証データ格納フォルダに格納されていることを示している。
【００１４】
なお、図２に示すフローチャートのステップＳ３において操作部３４を介して個人ＩＤを入力する構成を例に説明したが、マイクロホン２２を介して個人ＩＤを入力する構成としてもよい。この場合には、ＣＰＵ４は、音声認識部２８を制御して音声認識を行わせることにより言葉を特定し、特定した言葉を個人ＩＤとして登録する。
【００１５】
また、図２に示すフローチャートのステップＳ３において個人ＩＤを入力する構成としたが、個人ＩＤの入力を省略し、ＣＰＵ４が、人物特定要素を抽出した順に個人ＩＤを「Ａ」、「Ｂ」、「Ｃ」…または「００１」、「００２」、「００３」…とする等、予め設定された個人ＩＤを付す構成としてもよい。
【００１６】
また、図２に示すフローチャートのステップＳ５において、個人音声認証データを内部メモリ２６に記録する構成としたが、メモリカード１４に個人音声認証データを記録させる構成としてもよい。
【００１７】
次に、図４に示すフローチャートを参照して実施の形態に係る分類データの作成処理について説明する。操作部３４を介したユーザの操作に基づいて撮影画像を１コマずつ表示する再生モードを設定すると、ＣＰＵ４は画像出力部２０を制御して背面表示部１６に初期説明を表示させる（ステップＳ１１）。この初期説明には、マイクロホン２２を介して集音した音声を用いて画像の分類を行う際のガイドが含まれている。即ち、以下に説明するように、どのような言葉に対してどのような処理が行われるかについての説明が含まれている。なお、このフローチャートの１コマずつ表示する再生モードは、操作部３４を介したユーザの操作に基づいて次の画像を表示させる１枚表示モードであってもよいし、１コマの画像を表示してから所定時間が経過するとＣＰＵ４が次の画像を表示させるスライドショーモードであってもよい。
【００１８】
次に、ＣＰＵ４はメモリカード１４から分類の対象となる対象画像データのうち、１コマ分の画像データを読み出し（ステップＳ１２）、画像出力部２０を制御して背面表示部１６に画像データに基づく画像を表示させる（ステップＳ１３）。ここで、分類の対象となる対象画像データは、メモリカード１４に記録されているすべての撮影画像データであってもよいし、特定の日や特定の時間帯など所定の期間に撮影された画像の撮影画像データであってもよい。
【００１９】
次に、ＣＰＵ４はマイクロホン２２を介してカメラ２の周囲の音声が入力されたか否かを判断する（ステップＳ１４）。音声が入力された場合にはＣＰＵ４は、音声処理部２４を制御してマイクロホン２２から出力された音声信号に基づく音声データを用いて人物特定要素を抽出させる（ステップＳ１５）。
【００２０】
次に、ＣＰＵ４は、人物特定要素から話者が特定できるか否かを判断する（ステップＳ１６）。即ち、ステップＳ１５において抽出した人物特定要素の特徴と、内部メモリ２６に記録された個人音声認証データのパターンとを比較し、人物特定要素の特徴が、内部メモリ２６の個人音声認証データ格納フォルダに格納された何れかの個人音声認証データのパターンと同一人物のものであるか否かを判断する。また、ＣＰＵ４は、同一人物のものである場合には、当該個人音声認証データに対応する個人ＩＤを読み出し、話者を特定する。
【００２１】
話者が特定できた場合には、ＣＰＵ４は、音声認識部２８を制御して音声認識を行い、話者の言葉が追加言語であるか、削除言語であるか、追加言語でも削除言語でもないかを判断する（ステップＳ１７）。ここで、図５に示すように語彙データには、音声認識部２８の認識対象となる追加言語群及び削除言語群を含む語句が記憶されている。また、追加言語群には「欲しい」、「追加」、「はい」、「プラス」等の追加言語が含まれ、削除言語群には「いらない」、「削除」、「いいえ」、「マイナス」等の削除言語が含まれている。また、図５に示す語句は例示であり、追加言語として想定される語句であれば追加言語群に含まれ、削除言語として想定される語句であれば削除言語群に含まれる。
【００２２】
音声認識部２８により話者の言葉が追加言語であると認識した場合には、ＣＰＵ４はメモリカード１４または内部メモリ２６に分類データを作成する（ステップＳ１８）。例えば、図６に示すように話者として特定された人物のＩＤに基づく個人フォルダ内に分類データを作成する。ここで、分類データとしては画像データを特定可能な情報であればどのようなデータでもよく、ステップＳ１２で読み出した画像データのファイル名等の情報を示すテキストデータを個人フォルダに格納してもよいし、ステップＳ１２で読み出した画像データをコピーして個人フォルダに格納してもよい。
【００２３】
また、音声認識部２８により話者の言葉が削除言語であると認識した場合には、ＣＰＵ４は、ステップＳ１６において話者として特定した人物の個人フォルダからステップＳ１２で読み出した画像データについての分類データを削除する（ステップＳ１９）。なお、削除言語であると認識した際に、話者として特定した人物の個人フォルダにステップＳ１２で読み出した画像データについての分類データが存在しない場合には、ステップＳ１９に示す処理を行わずに後述するステップＳ２０に示す処理を行ってもよいし、後述するステップＳ２２に示す処理を行ってもよい。ステップＳ２２に示す処理を行う場合には、ＣＰＵ４は画像出力部２０を制御して、背面表示部１６に削除すべき分類データが存在しない旨の警告表示をさせる。
【００２４】
ステップＳ１８またはステップＳ１９に示す処理を行うと、ＣＰＵ４は画像出力部２０を制御して背面表示部１６に話者を特定し、かつ、言語を認識した旨の確認表示をさせる（ステップＳ２０）。さらにＣＰＵ４はステップＳ２０に示す処理において、ステップＳ１８に示す分類データの作成処理を行った旨の確認表示またはステップＳ１９に示す分類データの削除処理を行った旨の確認表示をさせてもよい。
【００２５】
次に、ＣＰＵ４は次に表示すべき対象画像データが存在するか否かを判断する（ステップＳ２１）。次に表示すべき対象画像データが存在する場合には、ステップＳ１２に示す処理に戻り、次に表示すべき対象画像データが存在しない場合には処理を終了する。
【００２６】
また、上述のステップＳ１６において話者が特定できなかった場合、及びステップＳ１７において話者の言葉が追加言語でも削除言語でもない場合には、ＣＰＵ４は画像出力部２０を制御して、背面表示部１６に話者の特定または言葉の認識ができなかった旨を示す警告表示をさせる（ステップＳ２２）。
【００２７】
また、上述のステップＳ１４において音声が入力されない場合には、ＣＰＵ４は次に表示すべき対象画像データが存在するか否かを判断する（ステップＳ２３）。次に表示すべき対象画像データが存在する場合には、ステップＳ１２に示す処理に戻り、次に表示すべき対象画像データが存在しない場合には処理を終了する。
【００２８】
なお、図２に示すフローチャートにおいて個人ＩＤに対応させて特定の人物の顔を記録させた場合には、顔認識を行うことにより対象画像データに基づく画像内に被写体として含まれる人物の個人フォルダに予め分類データを格納した上で、図３のフローチャートに示す処理を開始してもよい。
【００２９】
次に、図７及び図８に示すフローチャートを参照して実施の形態に係る分類データの確認処理及び分類データの追加・削除処理について説明する。操作部３４を介したユーザの操作によりサムネール表示を行う再生モードを設定すると（ステップＳ３１）、ＣＰＵ４は操作部３４を介したユーザの操作に基づいて、サムネール表示をどのように行うかを判断する（ステップＳ３２）。即ち、サムネール画像に対して個人ＩＤを表示するか否かを判断する。
【００３０】
ここで、ＣＰＵ４は画像出力部２０を制御して、サムネール表示された各画像の画像データについての分類データが特定の個人フォルダ内に格納されているか否かを個人ＩＤの表示／非表示により、または個人ＩＤの表示態様を変更することにより背面表示部１６に表示させることができる。また、ステップＳ３２に示す処理において個人ＩＤを表示する場合にＣＰＵ４は、全員の個人ＩＤを表示するか、特定の個人の個人ＩＤを表示するかについても判断する。即ち、図２に示す個人音声認証データ作成処理において登録された人物全員の分類データに基づくサムネール表示を行うか、特定の個人の分類データに基づく表示を行うかについて判断する。
【００３１】
登録された人物全員の分類データに基づくサムネール表示を行う場合には、ＣＰＵ４は画像出力部２０を制御して、図９に示すようにサムネール画像の画像データについての分類データが個人フォルダ内に格納されている人物の人物ＩＤを、当該サムネール画像に表示させる（ステップＳ３３）。例えば、図６に示すように人物ＩＤが「Ａ」である人物の個人フォルダには「画像００１」、「画像００２」、「画像００５」、「画像００６」…の分類データが格納されている。従って、図９においては、「画像００１」、「画像００２」、「画像００５」、「画像００６」のサムネール画像に個人ＩＤ「Ａ」を重畳表示させる。同様に図６に示すように人物ＩＤが「Ｂ」である人物の個人フォルダには「画像００１」、「画像００３」、「画像００４」、「画像００５」…の分類データが格納され、人物ＩＤが「Ｃ」である人物の個人フォルダには「画像００２」、「画像００３」、「画像００４」、「画像００５」…の分類データが格納されている。従って、図９においては、「画像００１」、「画像００３」、「画像００４」、「画像００５」のサムネール画像に個人ＩＤ「Ｂ」を重畳表示させ、「画像００２」、「画像００３」、「画像００４」、「画像００５」のサムネール画像に個人ＩＤ「Ｃ」を重畳表示させる。なお、図９においては個人ＩＤをサムネール画像に重畳表示させる構成としたが、個人ＩＤをサムネール画像の近傍に表示させる構成としてもよい。
【００３２】
次に、ＣＰＵ４は、分類データの追加、削除を行うか否かを判断する（ステップＳ３４）。即ち、操作部３４を介したユーザの操作によりサムネール画像の何れかが選択されたか否かを判断する。
【００３３】
何れかのサムネール画像が選択された場合には、ＣＰＵ４は分類データの追加・削除処理を行い（ステップＳ３５）、操作部３４を介したユーザの操作に基づいて他のサムネール画像の画像データについて分類データの追加または削除を行うか否かを判断する（ステップＳ３６）。他のサムネール画像の画像データについて分類データの追加または削除を行う場合には、ステップＳ３３に示す処理に戻る。一方、他のサムネール画像の画像データについて分類データの追加または削除を行わない場合には、処理を終了する。
【００３４】
ステップＳ３２において特定の個人の分類データに基づく表示を行う場合には、ＣＰＵ４は操作部３４を介したユーザの操作に基づいて何れの個人の分類データに基づく表示を行うかを決定する（ステップＳ３７）。次に、ＣＰＵ４は画像出力部２０を制御して、特定の個人の個人フォルダ内に格納されている分類データに基づいてサムネール表示をさせる（ステップＳ３８）。例えば、図１０に示すように、ステップＳ３７において個人ＩＤが「Ａ」である人物の分類データに基づく表示を行うことを決定した場合に、ＣＰＵ４は画像出力部２０を制御して、個人ＩＤが「Ａ」である人物の個人フォルダ内に格納されている分類データが識別可能な表示態様で表示させる。個人フォルダが図６に示すものである場合には、人物ＩＤが「Ａ」である人物の個人フォルダには「画像００１」、「画像００２」、「画像００５」、「画像００６」…の分類データが格納されている。従って、図９に示すように、ＣＰＵ４は、「画像００１」、「画像００２」、「画像００５」、「画像００６」のサムネール画像に個人ＩＤ「Ａ」を重畳表示させる。また、ＣＰＵ４は、人物ＩＤが「Ａ」である人物の個人フォルダに分類データが格納されていない「画像００３」、「画像００４」のサムネール画像を個人フォルダに分類データが格納されている「画像００１」、「画像００２」、「画像００５」、「画像００６」のサムネール画像に比べて暗めに表示させるとともに、人物ＩＤが「Ｂ」及び「Ｃ」である人物の個人フォルダに分類データが格納されている画像データに基づくサムネール画像には個人ＩＤ「Ｂ」及び「Ｃ」を「Ａ」に比べてそれぞれ薄めに重畳表示させる。ここで、人物ＩＤが「Ａ」である人物の個人フォルダに分類データが格納されていない画像データのサムネール画像も表示させるため、画像の選択漏れを防ぐことができる。
【００３５】
次に、ＣＰＵ４は、ステップＳ３９〜ステップＳ４１に示す処理を行うが、これらの処理はステップＳ３４〜Ｓ３６に示す処理とそれぞれ同様であるため、説明は省略する。なお、ステップＳ４１に示す処理において、他のサムネール画像の画像データについて分類データの追加または削除を行う場合には、ステップＳ３８に示す処理に戻る。また、ステップＳ３２において、個人ＩＤを表示しない場合には、ＣＰＵ４は画像出力部２０を制御して、背面表示部１６に通常のサムネール表示を行わせ（ステップＳ４２）、処理を終了する。
【００３６】
また、図８は、図７のステップＳ３５またはステップＳ４０における分類データの追加・削除処理を示すフローチャートである。マイクロホン２２を介して音声が入力されると（ステップＳ５１）、ステップＳ５２〜Ｓ５８に示す処理を行うが、ステップＳ５２〜Ｓ５７に示す処理は図４のフローチャートのＳ１５〜Ｓ２０に示す処理とそれぞれ同様であり、また、ステップＳ５８に示す処理は図４のフローチャートのステップＳ２２に示す処理と同様であるため、説明は省略する。
【００３７】
なお、図１０に示したサムネール表示は一例であり、人物ＩＤが「Ａ」以外のもの、即ち人物ＩＤ「Ｂ」及び「Ｃ」を非表示としてもよい。また、人物ＩＤが「Ａ」である人物の個人フォルダに分類データが格納されている画像のサムネール画像を個人フォルダに分類データが格納されている画像のサムネール画像に比べて暗めに表示させてもよい。また、サムネール画像に対して重畳表示させる個人ＩＤ「Ａ」を「Ｂ」及び「Ｃ」に比べて薄めに表示させてもよい。また、個人ＩＤをサムネール画像に重畳表示させる構成に代えて、個人ＩＤをサムネール画像の近傍に表示させる構成としてもよい。即ち、ステップＳ３７において決定された個人の個人フォルダに格納されている分類データを識別可能な表示であれば、どのように表示を行ってもよい。また、各個人の個人フォルダ、または特定の個人の個人フォルダに格納された分類データの数を表示させてもよい。
【００３８】
また、図４のフローチャートにおける再生モードである１枚表示モードやスライドショーモードにおいても、背面表示部１６に表示中の画像に画像データについての分類データが特定の人物の個人フォルダに格納されていることを示す表示を行ってもよい。この場合には、例えば、ＣＰＵ４は画像出力部２０を制御して、表示中の画像に個人ＩＤを重畳表示させる。
【００３９】
本実施の形態に係るカメラによりＣＰＵ４は送信部３０またはＵＳＢポート３６を介して作成された分類データに基づいて画像データを出力する。画像データの出力は、個人フォルダ毎に行い、分類データが画像データである場合には、特定の個人の個人フォルダに格納された画像データを出力する。また、分類データがテキストデータである場合には、テキストデータが示す画像データを参照し、特定の個人の個人フォルダに格納された分類データが示す画像データを出力する。
【００４０】
これにより、ＵＳＢポート３６に接続されたＵＳＢメモリやＣＤ・ＤＶＤドライブに挿入されたＣＤまたはＤＶＤディスク、ハードディスクドライブに対して個人フォルダに格納された分類データに基づく画像データを出力することができる。また、個人フォルダに格納された分類データに基づく画像データを送信部３０を介して出力することができる。また、個人ＩＤとメールアドレスが関連付けて記録されている場合には、送信部３０を介して特定の個人に対して画像データを送信することができる。送信部３０を介して個人ＩＤが登録された人物のタブレットＰＣや携帯電話とデータ通信を行うことにより、当該人物の個人フォルダに格納された分類データに基づく画像データを出力してもよい。また、メモリカードスロット１３に接続されたメモリカード１４に対して個人フォルダに格納された分類データに基づく画像データを出力してもよい。
【００４１】
また、個人フォルダに格納された分類データに基づいて現像を行ってもよい。この場合に、個人フォルダに格納された同一の画像データについての分類データの数を指定されたプリント枚数としてもよい。また、図５に示す語彙データの追加言語群において数字を含めてもよい。即ち、音声認識部２８により「１」や「２」等の数字が認識された場合には、認識した数の分類データを作成し個人フォルダに格納する。また、図５に示す語彙データの削除言語群に数字を含めてもよく、個人フォルダに格納されている同一の画像についての分類データの数が音声認識部２８により認識した数字よりも小さい場合には、認識した数字と分類データの数の差分に相当する数の分類データを削除する。
【００４２】
また、同様に音声認識部２８により「１枚増やす」や「１枚プラス」等が認識されると、認識した数の分類データを作成して個人フォルダに格納し、「１枚減らす」、「１枚マイナス」等が任席されると、認識した数の分類データを個人フォルダから削除してもよい。
【００４３】
本実施の形態に係るカメラによれば、複数の人物に対してそれぞれが所望する画像を容易に分配することができる。例えば、団体で旅行に行った際にカメラ２により撮影した画像を確認している最中に容易に鑑賞者各自の意思を反映した画像の分類を行うことができる。従って、分類した画像をそれぞれの鑑賞者に容易に分配することができ、手作業等で分配する場合の煩わしさを解消することができ、また、分配にかかる時間を短縮することができる。
【００４４】
なお、上述の実施の形態の図４のフローチャートのステップＳ１４及び図８のフローチャートのステップＳ５１において複数人の声がマイクロホン２２を介して入力された場合には、複数の話者を特定する構成としてもよい。即ち、ＣＰＵ４は音声処理部２４を制御して、マイクロホン２２から出力された音声信号に基づく音声データを用いて人物特定要素を抽出させ、個人音声認証データのパターンと比較することにより複数の話者を特定する。
【００４５】
また、上述の実施の形態において、ユーザは操作部３４を介して操作を行う構成としたが、音声を用いて操作入力を行う構成としてもよい。この場合には、マイクロホン２２から出力された音声信号に基づく音声データを音声認識部２８により音声認識を行い、所定の操作指示を示す言語が認識された場合に、ＣＰＵ４は対応する処理を行う。
【００４６】
また、上述の実施の形態においては、カメラ２がマイクロホン２２を備える構成としたが、音声入力端子を備える場合には音声入力端子に外付けのマイクロホンを接続する構成としてもよい。
【００４７】
また、上述の実施の形態においては、画像出力部２０から背面表示部１６に画像を出力する構成としたが、接続部１８を介して接続された外部表示装置に対して画像を出力する構成としてもよい。
【００４８】
また、上述の実施の形態においては、画像の分類を行う画像処理装置を備えたカメラを例に説明したが、画像処理装置を備えたＰＣであってもよいし、デジタルフォトフレームやＤＶＤプレーヤ等の再生装置であってもよい。
【符号の説明】
【００４９】
２…カメラ、４…ＣＰＵ、１６…背面表示部、２０…画像出力部、２２…マイクロホン、２４…音声処理部、２８…音声認識部
【特許請求の範囲】
【請求項１】
集音された音声を入力する音声入力部と、
前記音声入力部から入力された音声の人物特定要素を抽出する音声処理部と、
特定の人物の声が有する固有のパターンを記録する音声記録部と、
前記人物特定要素と前記パターンとの特徴を比較することにより話者を特定する話者特定部と、
画像データを取得する画像取得部と、
前記画像データに基づく画像を出力する画像出力部と、
前記画像出力部により前記画像を出力している間に前記話者特定部により特定された前記話者を示す情報と前記画像データとを関連付けた分類データを作成する画像分類部と
を備えることを特徴とする画像処理装置。
【請求項２】
前記話者が話した言葉を認識する音声認識部を備え、
前記画像分類部は、前記音声認識部により認識した前記言葉に基づいて前記分類データを作成することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記画像分類部は、前記音声認識部により認識された言葉が追加言語群に属する場合に前記分類データを追加し、前記音声認識部により認識された言葉が削除言語群に属する場合には前記分類データを削除することを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記画像出力部は、前記分類データの追加または削除を行った旨を示す確認表示を出力することを特徴とする請求項３記載の画像処理装置。
【請求項５】
前記画像出力部により前記画像が、前記画像データに基づく前記画像を１コマずつ順次表示するスライドショーモード、選択された前記画像データに基づく前記画像を１コマ表示する１枚表示モードまたは複数の前記画像データに基づく複数の前記画像を一覧表示すサムネール表示モードにより出力されている間に、前記画像分類部による前記分類データの追加及び削除が可能であることを特徴とする請求項３または４記載の画像処理装置。
【請求項６】
前記画像出力部は、前記スライドショーモード、前記１枚表示モード及び前記サムネール表示モードに応じた表示態様で前記確認表示を出力することを特徴とする請求項５記載の画像処理装置。
【請求項７】
前記画像分類部は、前記スライドショーモードまたは前記１枚表示モードにより前記画像の出力を行う場合に前記画像出力部により出力している１コマの前記画像の前記画像データについて前記分類データの追加または削除を行うことを特徴とする請求項５または６記載の画像処理装置。
【請求項８】
前記画像出力部は、前記サムネール表示モードにより前記画像の出力を行う場合に前記画像データが、前記分類データによって前記話者特定部により特定された前記話者を示す情報に関連付けられているか否かに応じた表示態様で前記画像を出力することを特徴とする請求項５または６記載の画像処理装置。
【請求項９】
前記話者特定部は、複数の人物の声が同時に集音されて前記音声入力部により入力された場合に複数の話者を特定することを特徴とする請求項１〜８の何れか一項に記載の画像処理装置。
【請求項１０】
前記話者特定部により特定された前記話者を示す情報に関連付けられた前記画像データを前記分類データに基づいて出力する画像データ出力部を備えることを特徴とする請求項１〜９の何れか一項に記載の画像処理装置。
【請求項１１】
請求項１〜１０の何れか一項に記載の画像処理装置を備えることを特徴とするカメラ。
【請求項１】
集音された音声を入力する音声入力部と、
前記音声入力部から入力された音声の人物特定要素を抽出する音声処理部と、
特定の人物の声が有する固有のパターンを記録する音声記録部と、
前記人物特定要素と前記パターンとの特徴を比較することにより話者を特定する話者特定部と、
画像データを取得する画像取得部と、
前記画像データに基づく画像を出力する画像出力部と、
前記画像出力部により前記画像を出力している間に前記話者特定部により特定された前記話者を示す情報と前記画像データとを関連付けた分類データを作成する画像分類部と
を備えることを特徴とする画像処理装置。
【請求項２】
前記話者が話した言葉を認識する音声認識部を備え、
前記画像分類部は、前記音声認識部により認識した前記言葉に基づいて前記分類データを作成することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記画像分類部は、前記音声認識部により認識された言葉が追加言語群に属する場合に前記分類データを追加し、前記音声認識部により認識された言葉が削除言語群に属する場合には前記分類データを削除することを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記画像出力部は、前記分類データの追加または削除を行った旨を示す確認表示を出力することを特徴とする請求項３記載の画像処理装置。
【請求項５】
前記画像出力部により前記画像が、前記画像データに基づく前記画像を１コマずつ順次表示するスライドショーモード、選択された前記画像データに基づく前記画像を１コマ表示する１枚表示モードまたは複数の前記画像データに基づく複数の前記画像を一覧表示すサムネール表示モードにより出力されている間に、前記画像分類部による前記分類データの追加及び削除が可能であることを特徴とする請求項３または４記載の画像処理装置。
【請求項６】
前記画像出力部は、前記スライドショーモード、前記１枚表示モード及び前記サムネール表示モードに応じた表示態様で前記確認表示を出力することを特徴とする請求項５記載の画像処理装置。
【請求項７】
前記画像分類部は、前記スライドショーモードまたは前記１枚表示モードにより前記画像の出力を行う場合に前記画像出力部により出力している１コマの前記画像の前記画像データについて前記分類データの追加または削除を行うことを特徴とする請求項５または６記載の画像処理装置。
【請求項８】
前記画像出力部は、前記サムネール表示モードにより前記画像の出力を行う場合に前記画像データが、前記分類データによって前記話者特定部により特定された前記話者を示す情報に関連付けられているか否かに応じた表示態様で前記画像を出力することを特徴とする請求項５または６記載の画像処理装置。
【請求項９】
前記話者特定部は、複数の人物の声が同時に集音されて前記音声入力部により入力された場合に複数の話者を特定することを特徴とする請求項１〜８の何れか一項に記載の画像処理装置。
【請求項１０】
前記話者特定部により特定された前記話者を示す情報に関連付けられた前記画像データを前記分類データに基づいて出力する画像データ出力部を備えることを特徴とする請求項１〜９の何れか一項に記載の画像処理装置。
【請求項１１】
請求項１〜１０の何れか一項に記載の画像処理装置を備えることを特徴とするカメラ。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１３−２６７０３（Ｐ２０１３−２６７０３Ａ）
【公開日】平成２５年２月４日（２０１３．２．４）
【国際特許分類】
【出願番号】特願２０１１−１５７５０２（Ｐ２０１１−１５７５０２）
【出願日】平成２３年７月１９日（２０１１．７．１９）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２５年２月４日（２０１３．２．４）
【国際特許分類】
【出願日】平成２３年７月１９日（２０１１．７．１９）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]