画像処理装置及び画像処理方法
【課題】 複数の画像データ中に誰が撮影されているかを容易に把握するとともに、ユーザーが鑑賞を希望する画像データのみを容易に抽出できるようにする。
【解決手段】 複数の画像データ中において認識された人物の顔の特徴を示す顔情報を取得し、同じ顔情報を有する画像データをグループ化した処理単位グループを作成し、処理単位グループ毎に設定した代表画像をサムネイル表示する。
【解決手段】 複数の画像データ中において認識された人物の顔の特徴を示す顔情報を取得し、同じ顔情報を有する画像データをグループ化した処理単位グループを作成し、処理単位グループ毎に設定した代表画像をサムネイル表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像データを顔情報毎に分類する画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラやカメラ付き携帯電話が普及してきており、撮影した画像はデジタル画像データとしてメモリ等に保存されるようになっている。そのため、従来のフィルム式カメラのようにフィルム残量を気にする必要がなく、大量の画像を手軽に撮影することができる。
【０００３】
このように撮影したデジタル画像データは、プリントして鑑賞するだけではなく、パソコンのハードディスクやＰＤＡ等の携帯情報端末に保存しておくことで、撮影した画像をモニタに表示して手軽に鑑賞することができる。また、ＣＤ−ＲやＤＶＤ−Ｒ等の記録メディアに記録して電子アルバムを作成し、コンピュータやテレビモニタ等に写真を表示させて楽しむといった使い方がなされている（例えば、特許文献１参照）。
【特許文献１】特開２０００−２９３９７４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ここで、例えば、複数の友人と一緒に旅行したときに撮影した画像を鑑賞する場合を考えると、ユーザーとしては、撮影した画像全てを見るのは時間がかかるため、とりあえず自分が写っている画像や旅行先の風景が写っている画像だけが見られればよいと考えるのが自然である。
【０００５】
すなわち、ユーザーは、自分以外の人物のみが写っている画像がモニタ画面に表示されてもあまり興味がないため、即座に次の画像を表示させるべく現在表示されている画像をスキップする操作を行うと考えられる。しかしながら、その都度スキップ操作を行うのは非常に煩わしい作業となっていた。
【０００６】
また、画像を鑑賞する以外にも、例えば、撮影した画像の中から自分が写っている写真や旅行先の風景が写っている画像だけを選択してプリントする場合を考えると、大量にある画像の中からプリント希望の画像のみを探し出すことはユーザーにとって煩わしい作業であった。
【０００７】
本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、複数の画像データ中に誰が撮影されているかを容易に把握するとともに、ユーザーが鑑賞を希望する画像データのみを容易に抽出できるようにすることにある。
【課題を解決するための手段】
【０００８】
前記目的を達成するため、本発明では、複数の画像データ中に含まれる人物の顔情報を取得し、該顔情報に基づいて画像データを分類するようにした。
【０００９】
すなわち、請求項１の発明は、静止画像を含む複数の画像データを表示する画像表示手段と、
前記複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する画像認識手段と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成するグループ化手段と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する代表画像設定手段と、
前記処理単位グループ毎に設定された前記代表画像を前記画像表示手段にサムネイル表示する代表画像表示手段とを備えたことを特徴とする。
【００１０】
従って、本発明によれば、複数の画像データ中において認識された人物の顔の特徴を示す顔情報が取得され、同じ顔情報を有する画像データが処理単位グループとしてグループ化され、処理単位グループ毎に設定された代表画像が画像表示手段にサムネイル表示される。
【００１１】
請求項２の発明は、請求項１に記載された画像処理装置において、
前記代表画像表示手段は、異なる前記処理単位グループの代表画像として同じ画像データが設定された場合に、重複する該代表画像を１つだけ前記画像表示手段にサムネイル表示するように構成されていることを特徴とする。
【００１２】
従って、本発明によれば、異なる処理単位グループの代表画像として同じ画像データが設定された場合、重複する代表画像は１つだけが画像表示手段に表示される。
【００１３】
請求項３の発明は、請求項１又は２に記載された画像処理装置において、
前記代表画像中に複数の人物の顔が存在する場合に、該複数の人物の顔を互いに識別可能な表示形式で表示する識別表示手段をさらに備えたことを特徴とする。
【００１４】
従って、本発明によれば、代表画像中の複数の人物の顔が互いに識別可能な表示形式で表示される。
【００１５】
請求項４の発明は、請求項１に記載された画像処理装置において、
前記代表画像設定手段は、前記処理単位グループに含まれる画像データ中の人物の顔を含む画像範囲を抽出して、該画像範囲を前記代表画像として設定するように構成されていることを特徴とする。
【００１６】
従って、本発明によれば、画像データ中の人物の顔を含む画像範囲が抽出され、この画像範囲が代表画像として設定される。
【００１７】
請求項５の発明は、請求項１乃至４のうち何れか１項に記載された画像処理装置において、
前記画像認識手段は、前記画像データ中の所定の大きさを有する人物の顔についてのみ認識作業を行うように構成されていることを特徴とする。
【００１８】
従って、本発明によれば、画像データ中の所定の大きさを有する人物の顔についてのみ顔認識作業が行われる。
【００１９】
請求項６の発明は、請求項１乃至５のうち何れか１項に記載された画像処理装置において、
前記処理単位グループに含まれる画像データの枚数に基づいて、前記画像表示手段にサムネイル表示する前記複数の代表画像の表示順序を並べ替えるソート手段をさらに備えたことを特徴とする。
【００２０】
従って、本発明によれば、処理単位グループに含まれる画像データの枚数に基づいて、複数の代表画像の表示順序が並べ替えられる。
【００２１】
請求項７の発明は、請求項１乃至６のうち何れか１項に記載された画像処理装置において、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが該画像表示手段に表示されるようになっていることを特徴とする。
【００２２】
従って、本発明によれば、サムネイル表示された代表画像のうち１つを選択すると、選択した代表画像に係る処理単位グループに含まれる画像データが表示される。
【００２３】
請求項８の発明は、請求項１乃至７のうち何れか１項に記載された画像処理装置において、
前記画像データをプリントするプリント手段をさらに備え、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが前記プリント手段によりプリントされるようになっていることを特徴とする。
【００２４】
従って、本発明によれば、サムネイル表示された代表画像のうち１つを選択すると、選択した代表画像に係る処理単位グループに含まれる画像データがプリントされる。
【００２５】
請求項９の発明は、複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する手順と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成する手順と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する手順と、
前記処理単位グループ毎に設定された前記代表画像をサムネイル表示する手順とを備えたことを特徴とする画像処理方法である。
【発明の効果】
【００２６】
以上のように、請求項１に係る発明によれば、同じ顔情報を有する画像データをグループ化した処理単位グループを作成し、この処理単位グループに含まれる画像データのうち１つを代表画像として設定し、この代表画像を画像表示手段にサムネイル表示するようにしたから、全画像データ中にどのような人物が撮影されているのかを容易に把握することができる。例えば、複数の友人と旅行したときの画像データであれば、サムネイル表示された代表画像を見るだけで、そのとき一緒に旅行したメンバーを容易に想起できて好ましい。
【００２７】
請求項２に係る発明によれば、代表画像として重複する画像データが設定された場合には、そのうちの１つだけをサムネイル表示するようにしたから、全画像データ中に撮影されている人物を必要最小限の表示枚数で表示することができる。
【００２８】
具体的には、例えば、ＡさんとＢさんとが２人で写っている画像データがあった場合、Ａさん及びＢさん双方の処理単位グループの代表画像として、この２人で写っている画像データが設定される場合が考えられる。このような場合には、同じ画像データを２枚ともサムネイル表示する必要はなく、１枚のみをサムネイル表示するようにすれば、必要最小限の表示枚数で全画像データ中に含まれる人物の人数等を把握することができて好ましい。
【００２９】
請求項３に係る発明によれば、代表画像中の複数の人物の顔を互いに識別可能な表示形式で表示するから、代表画像中にどの人物が表示されているのかを容易に把握することができる。具体的に、例えば、人物の顔を含む画像範囲をそれぞれフレーム枠で囲んだり、人物の顔以外の画像範囲をグレー等の目立たない色に変更するようにすれば、代表画像中の人物の顔の位置やその人物が誰であるかが把握しやすくなり好ましい。
【００３０】
請求項４に係る発明によれば、画像データ中の人物の顔を含む画像範囲を抽出して、この画像範囲を代表画像として設定するようにしたから、例えば、集合写真を代表画像として設定したときには、写っている人物の顔が小さすぎて見づらい場合があるが、集合写真の中から特定の人物の顔を含む画像範囲を抽出すれば、その人物の顔を拡大表示した画像を代表画像として設定することができ、全画像データ中にどのような人物が撮影されているかを容易に把握することができる。
【００３１】
請求項５に係る発明によれば、画像データ中の所定の大きさを有する人物の顔についてのみ認識作業を行うようにしたから、一緒に旅行した人物の顔のみを認識する上で有利となる。
【００３２】
具体的には、撮影した画像データ中に、通りすがりの人物や遠くにいる人物が写ってしまった場合、それらの人物を含めて顔認識作業を行うと、自分の知らない人物についての処理単位グループが作成されてサムネイル表示されてしまうことになるが、これを防止するために、画像データ中に所定の大きさ以下で写っている人物については顔認識作業を行わないようにしている。
【００３３】
請求項６に係る発明によれば、処理単位グループに含まれる画像データの枚数に基づいて、画像表示手段にサムネイル表示する代表画像の表示順序を並べ替えるようにしたから、例えば、旅行中に撮影した画像データ中に登場する頻度の高い人物の代表画像を優先的に上位に表示するようにすれば、その旅行における中心人物から順番に表示されることとなり好ましい。また、仮に、旅行したメンバーとは関係のない通りすがりの人物の代表画像が表示されたとしても、その代表画像は下位に表示されることとなり、画像鑑賞に支障を来すことが少なくなる。
【００３４】
請求項７に係る発明によれば、サムネイル表示された代表画像のうち１つをユーザーが選択することで、その代表画像に係る処理単位グループに含まれる画像データが画像表示手段に表示されるから、ユーザーは、サムネイル表示された代表画像のうちから、例えば自分の写っている代表画像を選択することで、画像データ鑑賞時に全ての画像データを鑑賞する必要はなく、自分の写っている画像データのみを効率良く鑑賞することができて好ましい。
【００３５】
請求項８に係る発明によれば、サムネイル表示された代表画像のうち１つをユーザーが選択することで、その代表画像に係る処理単位グループに含まれる画像データがプリントされるようになっているから、ユーザーは、サムネイル表示された代表画像のうちから、例えば自分の写っている代表画像を選択することで、自分の写っている画像データのみを効率良くプリントすることができて好ましい。
【００３６】
請求項９に係る発明によれば、全画像データ中にどのような人物が撮影されているのかを容易に把握することができる。例えば、複数の友人と旅行したときの画像データであれば、サムネイル表示された代表画像を見るだけで、そのとき旅行したメンバーを容易に想起できて好ましい。
【発明を実施するための最良の形態】
【００３７】
以下、本発明の実施形態を図面に基づいて詳細に説明する。以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものでは全くない。
【００３８】
＜装置構成＞
図１は、本発明の実施形態に係る画像処理装置１００の全体構成を示すブロック図である。図１に示すように、１０はドライブユニット、１１はドライブユニット１０で読み取った画像データに対する画像処理を行う画像処理部、１２は画像処理部１１に対して情報入力を行うための情報入力部、１３は画像データや画像処理ソフトの各種メニュー等を表示するモニタ（画像表示手段）、１４は画像データをプリントするプリント部である。
【００３９】
前記ドライブユニット１０は、デジタルカメラで撮影された写真や動画を含む画像データが保存されたフラッシュメモリ等の半導体メディアＭｓからのデータを取得する（読み出す）半導体ドライブ１と、ＣＤ−ＲやＤＶＤ−Ｒ等の複数種類の大容量のディスク状メディアＭｄからのデータの取得及び書き込みを可能にするディスクドライブ２とを備えている。なお、この半導体ドライブ１は、コンパクトフラッシュ（登録商標）やスマートメディア（登録商標）やメモリースティック（登録商標）等のフラッシュメモリの種類に対応できるように複数の挿入部を備えていることが好ましい。
【００４０】
前記画像処理部１１は、情報処理を行うＣＰＵ、メモリ及びハードディスクを含むコンピュータで構成されており、ドライブユニット１０で読み取った画像データを該ハードディスクに保存し、インストールされている画像処理ソフトによって該画像データに対して様々な画像処理を行うことができるようになっている。
【００４１】
具体的には、画像データ中の人物の顔を認識し、その人物の顔の特徴を示す顔情報（例えば、顔全体の大きさに対する目や鼻の大きさや位置等）を取得する画像認識手段、同じ顔情報を有する画像データをグループ化して処理単位グループを作成するグループ化手段、処理単位グループに含まれる画像データのうち１つを代表画像として設定する代表画像設定手段、処理単位グループ毎に設定された代表画像をモニタ１３にサムネイル表示する代表画像表示手段、代表画像中に複数の人物の顔が存在する場合に、該複数の人物の顔を互いに識別可能な表示形式（例えば、人物の顔を含む画像範囲をフレーム枠で囲む等）で表示する識別表示手段、処理単位グループに含まれる画像データの枚数に基づいて、モニタ１３にサムネイル表示する複数の代表画像の表示順序を並べ替えるソート手段等をソフトウェア（プログラム）として備えている。
【００４２】
前記情報入力部１２は、例えば、キーボード、マウス、リモコン等により構成されており、前記画像処理部１１に対して必要な入力が行えるようになっている。なお、タッチパネル方式のモニタ１３を用いて入力を行うようにしても構わない。
【００４３】
前記モニタ１３は、例えば、ＣＲＴや液晶表示装置等で構成されており、前記画像処理部１１に入力された画像データを表示するとともに、画像処理ソフトの各種メニュー画面を表示してユーザーが確認できるようになっている。
【００４４】
前記プリント部１４は、ユーザーがプリントを希望する画像データをモニタ１３画面上で選択してプリント指示することで、その画像データがプリントできるようになっている。
【００４５】
なお、本実施形態では、画像処理装置１００の一例としてコンピュータを用いたものについて説明しているが、この形態に限定するものではなく、例えば、画像データ中の人物の顔を認識して顔情報を取得し、顔情報に基づいて画像データを分類してその代表画像をサムネイル表示する手順をソフトウェアとして備えた再生装置（例えば、ＤＶＤプレイヤ等）であってもよい。さらに、このような手順を実行するプログラムを画像データとともに電子アルバムに記録しておき、ＤＶＤプレイヤ等で再生する際に、このプログラムに基づいて画像データの処理を行うようにしても構わない。
【００４６】
＜画像処理手順＞
次に、本実施形態の画像処理装置１００において、画像データ中の人物の顔情報に基づいて画像データを分類する手順について、図２のフローチャート図を用いて説明する。図２に示すように、ステップＳ１０１では、デジタルカメラ等で撮影した画像データを画像処理部１１に入力し、続くステップＳ１０２に進む。
【００４７】
ステップＳ１０２では、画像処理部１１に入力された複数の画像データ毎に、その画像データ中に人物の顔が含まれているかを判定する。
【００４８】
ステップＳ１０２での判定が「ＹＥＳ」の場合には、ステップＳ１０３に分岐し、ステップＳ１０３で、画像データ中の人物の顔を認識し、その人物の顔の特徴を示す顔情報を取得して、続くステップＳ１０４に進む。ステップＳ１０２での判定が「ＮＯ」の場合には、その画像データは風景画像であると判断して、続くステップＳ１０４に進む。
【００４９】
ステップＳ１０４では、入力された全ての画像データについて人物の顔認識が行われたかを判定する。ステップＳ１０４での判定が「ＮＯ」の場合には、ステップＳ１０２に分岐し、次の画像データに対して同様の処理を繰り返す。
【００５０】
ステップＳ１０４での判定が「ＹＥＳ」の場合には、ステップＳ１０５に分岐し、ステップＳ１０５で、同じ顔情報を有する画像データをグループ化して処理単位グループを作成し、続くステップＳ１０６に進む。
【００５１】
ステップＳ１０６では、前記処理単位グループに対して風景画像を追加するかを判定する。ステップＳ１０６での判定が「ＹＥＳ」の場合には、ステップＳ１０７に分岐し、ステップＳ１０７で、風景画像を処理単位グループに追加して、ステップＳ１０８に進む。ステップＳ１０６での判定が「ＮＯ」の場合には、そのままステップＳ１０８に分岐する。
【００５２】
このように、人物を含む画像データのみをグループとするのではなく、旅行当時に撮影した風景の画像データを処理単位グループに含めることで、この処理単位グループを再生表示したときに、人物を含む画像データの他に旅行当時の風景画像も鑑賞することができ、旅行当時の情景を想起する上で有利となり好ましい。
【００５３】
ステップＳ１０８では、前記処理単位グループに含まれる画像データのうち、そのグループに含まれる人物を表すのに適当と思われる画像を代表画像として設定し、続くステップＳ１０９に進む。
【００５４】
ステップＳ１０９では、処理単位グループ毎に含まれる画像データの枚数をそれぞれカウントし、続くステップＳ１１０に進む。
【００５５】
ステップＳ１１０では、モニタ１３に表示された後述する画像選択メニュー画面にグループ毎の代表画像をサムネイル表示する。このとき、先ほどカウントした画像データ枚数の多いグループの代表画像がメニュー画面の先頭に位置付けられるように、画像処理ソフトのソートプログラムによって並び替えて表示する。このようにすれば、全画像データの中で最も登場回数の多い人物を示す代表画像が先頭となり好ましい。
【００５６】
以上のような処理を行うことで、複数の画像データ中に含まれる人物の総人数を容易に把握することができるとともに、誰が写っているのかをサムネイル画像で容易に把握することができ、旅行当時のメンバー構成を想起する上で有利となる。
【００５７】
＜代表画像の表示形式＞
次に、モニタ１３にサムネイル表示する代表画像の表示形式の例について、図３及び図４を用いて説明する。図３は、画像処理装置１００に対してＮｏ.１〜Ｎｏ.５の５枚の画像データが入力された場合を示している。図３に示すように、Ｎｏ.１はＡさん１人の画像、Ｎｏ.２は風景画像１、Ｎｏ.３はＢさん１人の画像、Ｎｏ.４はＡさんとＢさんとが２人で写っている画像、Ｎｏ.５は風景画像２であるとする。
【００５８】
ここで、前述した図２のフローチャート図におけるステップＳ１０５では、同じ顔情報を有する画像データがグループ化されて処理単位グループが作成されるが、具体的には、Ａさんの処理単位グループにはＮｏ.１及びＮｏ.４の画像が含まれ、Ｂさんの処理単位グループにはＮｏ.３及びＮｏ.４の画像が含まれるようになっている。なお、以下、続くステップＳ１０６での風景画像のグループ化は行わないものとして説明する。
【００５９】
次に、ステップＳ１０８で、処理単位グループ毎に代表画像の設定をするが、ここでは、Ａさんのグループの代表画像としてＮｏ.１の画像が設定され、Ｂさんのグループの代表画像としてＮｏ.３の画像が設定されたものとする。これにより、図４に示すように、後述する画像選択メニューが表示された場合には、先ほど設定したＮｏ.１及びＮｏ.３の画像がサムネイル表示されるようになっている。
【００６０】
なお、入力された複数の画像データに含まれる人物（図３ではＡさんとＢさんの２人）を最小枚数の代表画像で表示する場合には、Ａさん及びＢさんの代表画像としてそれぞれＮｏ.４の画像を設定するようにし、さらに、図５に示すように、画像データ中のそれぞれの顔を識別するために、Ａさん及びＢさんの顔を含む画像範囲を囲むようにそれぞれフレーム枠２１を表示するようにしている。これにより、Ｎｏ.４の画像中にＡさん及びＢさんの２人が写っていることが容易に把握できるようになり好ましい。
【００６１】
次に、図６及び図７を用いて、代表画像の別の表示形式について説明する。図６は、画像処理装置１００に対してＮｏ.１〜Ｎｏ.５の５枚の画像データが入力された場合を示している。図６に示すように、Ｎｏ.１はＡさんとＢさんとが２人で写っている画像、Ｎｏ.２は風景画像１、Ｎｏ.３はＢさん１人の画像、Ｎｏ.４はＣさん１人の画像、Ｎｏ.５はＢさんとＣさんとが２人で写っている画像であるとする。
【００６２】
ここで、Ａさんの処理単位グループには、Ｎｏ.１の画像が含まれ、Ｂさんの処理単位グループにはＮｏ.１、Ｎｏ.３及びＮｏ.５の画像が含まれ、Ｃさんの処理単位グループにはＮｏ.４及びＮｏ.５の画像が含まれるようになっている。
【００６３】
そして、Ａさんのグループの代表画像としてＮｏ.１の画像が設定され、Ｂさんのグループの代表画像としてＮｏ.１の画像が設定され、Ｃさんのグループの代表画像としてＮｏ.４の画像が設定されたものとする。これにより、図７に示すように画像選択メニューが表示された場合には、先ほど設定したＮｏ.１及びＮｏ.４の画像がサムネイル表示されるようになっている。なお、ＡさんとＢさんの代表画像は同じＮｏ.１の画像であるため、重複したＮｏ.１の画像は１枚のみ表示されるようになっている。
【００６４】
図７に示すように、Ｎｏ.１の画像には、Ａさん及びＢさんの２人が写っているので、それぞれの顔を識別するために、Ａさん及びＢさんの顔を含む画像範囲を囲むようにそれぞれフレーム枠２１が表示されている。これにより、Ｎｏ.１の画像中にＡさん及びＢさんが写っていることが容易に把握できるようになっている。
【００６５】
なお、画像データ中の複数の人物の顔を識別するための手段としてフレーム枠２１を表示するようにしたが、この他にも、例えば、図８に示すように、Ａさん及びＢさんの顔を含む画像範囲以外の領域をグレー等の目立ちにくい色で表示するようにすれば、相対的に人物の顔が目立つようになり好ましい。
【００６６】
次に、図９及び図１０を用いて、代表画像の別の表示形式について説明する。図９は、画像処理装置１００に対してＮｏ.１〜Ｎｏ.５の５枚の画像データが入力された場合を示している。図９に示すように、Ｎｏ.１はＡさんとＢさんとが２人で写っている画像、Ｎｏ.２はＡさん、Ｂさん及びＣさんが３人で写っている画像、Ｎｏ.３はＢさん１人の画像、Ｎｏ.４はＡさんとＢさんが２人で写っている画像、Ｎｏ.５は風景画像１であるとする。
【００６７】
ここで、Ａさんの処理単位グループには、Ｎｏ.１、Ｎｏ.２及びＮｏ.４の画像が含まれ、Ｂさんの処理単位グループには、Ｎｏ.１、Ｎｏ.２、Ｎｏ.３及びＮｏ.４の画像が含まれ、Ｃさんの処理単位グループには、Ｎｏ.２の画像が含まれるようになっている。
【００６８】
次に、それぞれの処理単位グループ毎に代表画像を設定するのであるが、ここでは、グループに含まれる画像データ中の人物の顔を含む画像範囲を抽出し、この画像範囲を代表画像として設定するようにしている。
【００６９】
具体的に、Ａさんの処理単位グループでは、Ｎｏ.１の画像中のＡさんの顔を含む画像範囲が抽出され、この画像範囲を拡大表示した画像が代表画像として設定されるようになっている。同様に、Ｂさんの処理単位グループでは、Ｎｏ.１の画像中のＢさんの顔を含む画像範囲が代表画像として設定され、Ｃさんの処理単位グループでは、Ｎｏ.２の画像中のＣさんの顔を含む画像範囲が代表画像として設定されている。
【００７０】
これにより、図１０に示すように、画像選択メニューが表示された場合には、先ほど設定したＡさん、Ｂさん及びＣさんの代表画像がサムネイル表示されるようになっている。
【００７１】
このようにすれば、画像データが集合写真であり人物の顔が小さく写っている場合であっても、メニュー画面上には人物の顔を含む画像範囲が拡大表示されるため、サムネイル表示された代表画像を見るだけで誰が写っているのかを容易に把握することができる。また、全画像データ中の人物毎に顔を拡大した代表画像がサムネイル表示されるから、全画像データ中に何人の人物が写っているのかを容易に把握することができる。
【００７２】
＜画像再生手順＞
次に、画像処理装置１００に入力された複数の画像データをユーザーが鑑賞するための手順について説明する。上述したような画像データ中の人物の顔認識及び代表画像の設定作業は、画像処理装置１００に画像データが入力された時点で自動的に行われるものであり、ユーザーは、画像データの入力が完了したときに、電子アルバムのメニュー画面から、画像選択メニューを起動する。
【００７３】
前記モニタ１３に表示された画像選択メニューには、先ほど説明した例えば図１０に示すように、入力した全画像データの中に写っている人物を示す代表画像がサムネイル表示されており、ユーザーがこの代表画像のうち何れか１つを選択することにより、その代表画像に係る処理単位グループに含まれる画像データのみがモニタ１３に表示されるようになっている。
【００７４】
例えば、図１０の画像選択メニューにおいて、Ａさんの代表画像を選択した場合には、図９に示すＡさんの処理単位グループに含まれるＮｏ.１、Ｎｏ.２及びＮｏ.４の画像がモニタ１３にサムネイル表示されるか、又は１枚ずつスライドショー表示されるようになっている。
【００７５】
これにより、ユーザーは、電子アルバムに収録された全画像データを鑑賞する必要はなく、例えば自分の写っている画像だけを選択的に鑑賞することが可能となる。すなわち、そのユーザー専用の電子アルバムの再現を行うことが可能となり、ユーザーの利便性が高まる。
【００７６】
また、画像を鑑賞する以外にも、プリント部１４と連動させることにより、ユーザー自身が写っている画像のみをプリントするといった使い方も可能である。すなわち、画像選択メニューにおいて代表画像のうち１つを選択し、その代表画像に係る処理単位グループに含まれる画像データをモニタ１３に表示する代わりに、これら画像データをプリント部１４に送信することで、その処理単位グループに含まれる画像データのみをプリントすることができる。
【００７７】
これにより、ユーザーが全画像データの中から自分の写っている画像のみ（実施例では、処理単位グループの全てを選択する例を挙げたが、この形態に限定するものではない。処理単位グループからさらに任意の画像を選ぶ構成であっても、本発明の技術思想を逸脱するものではない。）をプリントしたい場合に、全画像データをわざわざチェックしてプリント希望の画像データを順次選択していくといった煩わしい作業をする必要がなくなり、ユーザーの利便性が高まる。
【００７８】
以上のように、本実施形態に係る画像処理装置１００によれば、複数の画像データの中からユーザーが鑑賞したい画像データのみを選択する等の煩わしい作業をすることなく、画像データ中の人物の顔情報に基づいて表示することで利便性を高めることができる。
【００７９】
なお、電子アルバムを作成する際に本発明を用いれば、一緒に旅行したメンバー毎にそのメンバーの写っている画像のみを収録した電子アルバムを作成することができて、より付加価値のある電子アルバムを作成することができる。
【産業上の利用可能性】
【００８０】
以上説明したように、本発明は、複数の画像データ中に誰が撮影されているかを容易に把握するとともに、ユーザーが鑑賞を希望する画像データのみを容易に抽出できるという実用性の高い効果が得られることから、きわめて有用で産業上の利用可能性は高い。
【図面の簡単な説明】
【００８１】
【図１】本発明の実施形態に係る画像処理装置の構成を示すブロック図である。
【図２】本実施形態に係る画像処理手順を示すフローチャート図である。
【図３】処理単位グループの作成手順を説明する図である。
【図４】画像選択メニューに表示される代表画像の表示形式を示す図である。
【図５】画像選択メニューに表示される代表画像の別の表示形式を示す図である。
【図６】処理単位グループの作成手順の別の例を説明する図である。
【図７】画像選択メニューに表示される代表画像の別の表示形式を示す図である。
【図８】画像選択メニューに表示される代表画像の別の表示形式を示す図である。
【図９】処理単位グループの作成手順の別の例を説明する図である。
【図１０】画像選択メニューの別の例を示す図である。
【符号の説明】
【００８２】
１０ ドライブユニット
１１ 画像処理部
１２ 情報入力部
１３ モニタ
１４ プリント部
１００ 画像処理装置
【技術分野】
【０００１】
本発明は、画像データを顔情報毎に分類する画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラやカメラ付き携帯電話が普及してきており、撮影した画像はデジタル画像データとしてメモリ等に保存されるようになっている。そのため、従来のフィルム式カメラのようにフィルム残量を気にする必要がなく、大量の画像を手軽に撮影することができる。
【０００３】
このように撮影したデジタル画像データは、プリントして鑑賞するだけではなく、パソコンのハードディスクやＰＤＡ等の携帯情報端末に保存しておくことで、撮影した画像をモニタに表示して手軽に鑑賞することができる。また、ＣＤ−ＲやＤＶＤ−Ｒ等の記録メディアに記録して電子アルバムを作成し、コンピュータやテレビモニタ等に写真を表示させて楽しむといった使い方がなされている（例えば、特許文献１参照）。
【特許文献１】特開２０００−２９３９７４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ここで、例えば、複数の友人と一緒に旅行したときに撮影した画像を鑑賞する場合を考えると、ユーザーとしては、撮影した画像全てを見るのは時間がかかるため、とりあえず自分が写っている画像や旅行先の風景が写っている画像だけが見られればよいと考えるのが自然である。
【０００５】
すなわち、ユーザーは、自分以外の人物のみが写っている画像がモニタ画面に表示されてもあまり興味がないため、即座に次の画像を表示させるべく現在表示されている画像をスキップする操作を行うと考えられる。しかしながら、その都度スキップ操作を行うのは非常に煩わしい作業となっていた。
【０００６】
また、画像を鑑賞する以外にも、例えば、撮影した画像の中から自分が写っている写真や旅行先の風景が写っている画像だけを選択してプリントする場合を考えると、大量にある画像の中からプリント希望の画像のみを探し出すことはユーザーにとって煩わしい作業であった。
【０００７】
本発明は、かかる点に鑑みてなされたものであり、その目的とするところは、複数の画像データ中に誰が撮影されているかを容易に把握するとともに、ユーザーが鑑賞を希望する画像データのみを容易に抽出できるようにすることにある。
【課題を解決するための手段】
【０００８】
前記目的を達成するため、本発明では、複数の画像データ中に含まれる人物の顔情報を取得し、該顔情報に基づいて画像データを分類するようにした。
【０００９】
すなわち、請求項１の発明は、静止画像を含む複数の画像データを表示する画像表示手段と、
前記複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する画像認識手段と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成するグループ化手段と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する代表画像設定手段と、
前記処理単位グループ毎に設定された前記代表画像を前記画像表示手段にサムネイル表示する代表画像表示手段とを備えたことを特徴とする。
【００１０】
従って、本発明によれば、複数の画像データ中において認識された人物の顔の特徴を示す顔情報が取得され、同じ顔情報を有する画像データが処理単位グループとしてグループ化され、処理単位グループ毎に設定された代表画像が画像表示手段にサムネイル表示される。
【００１１】
請求項２の発明は、請求項１に記載された画像処理装置において、
前記代表画像表示手段は、異なる前記処理単位グループの代表画像として同じ画像データが設定された場合に、重複する該代表画像を１つだけ前記画像表示手段にサムネイル表示するように構成されていることを特徴とする。
【００１２】
従って、本発明によれば、異なる処理単位グループの代表画像として同じ画像データが設定された場合、重複する代表画像は１つだけが画像表示手段に表示される。
【００１３】
請求項３の発明は、請求項１又は２に記載された画像処理装置において、
前記代表画像中に複数の人物の顔が存在する場合に、該複数の人物の顔を互いに識別可能な表示形式で表示する識別表示手段をさらに備えたことを特徴とする。
【００１４】
従って、本発明によれば、代表画像中の複数の人物の顔が互いに識別可能な表示形式で表示される。
【００１５】
請求項４の発明は、請求項１に記載された画像処理装置において、
前記代表画像設定手段は、前記処理単位グループに含まれる画像データ中の人物の顔を含む画像範囲を抽出して、該画像範囲を前記代表画像として設定するように構成されていることを特徴とする。
【００１６】
従って、本発明によれば、画像データ中の人物の顔を含む画像範囲が抽出され、この画像範囲が代表画像として設定される。
【００１７】
請求項５の発明は、請求項１乃至４のうち何れか１項に記載された画像処理装置において、
前記画像認識手段は、前記画像データ中の所定の大きさを有する人物の顔についてのみ認識作業を行うように構成されていることを特徴とする。
【００１８】
従って、本発明によれば、画像データ中の所定の大きさを有する人物の顔についてのみ顔認識作業が行われる。
【００１９】
請求項６の発明は、請求項１乃至５のうち何れか１項に記載された画像処理装置において、
前記処理単位グループに含まれる画像データの枚数に基づいて、前記画像表示手段にサムネイル表示する前記複数の代表画像の表示順序を並べ替えるソート手段をさらに備えたことを特徴とする。
【００２０】
従って、本発明によれば、処理単位グループに含まれる画像データの枚数に基づいて、複数の代表画像の表示順序が並べ替えられる。
【００２１】
請求項７の発明は、請求項１乃至６のうち何れか１項に記載された画像処理装置において、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが該画像表示手段に表示されるようになっていることを特徴とする。
【００２２】
従って、本発明によれば、サムネイル表示された代表画像のうち１つを選択すると、選択した代表画像に係る処理単位グループに含まれる画像データが表示される。
【００２３】
請求項８の発明は、請求項１乃至７のうち何れか１項に記載された画像処理装置において、
前記画像データをプリントするプリント手段をさらに備え、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが前記プリント手段によりプリントされるようになっていることを特徴とする。
【００２４】
従って、本発明によれば、サムネイル表示された代表画像のうち１つを選択すると、選択した代表画像に係る処理単位グループに含まれる画像データがプリントされる。
【００２５】
請求項９の発明は、複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する手順と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成する手順と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する手順と、
前記処理単位グループ毎に設定された前記代表画像をサムネイル表示する手順とを備えたことを特徴とする画像処理方法である。
【発明の効果】
【００２６】
以上のように、請求項１に係る発明によれば、同じ顔情報を有する画像データをグループ化した処理単位グループを作成し、この処理単位グループに含まれる画像データのうち１つを代表画像として設定し、この代表画像を画像表示手段にサムネイル表示するようにしたから、全画像データ中にどのような人物が撮影されているのかを容易に把握することができる。例えば、複数の友人と旅行したときの画像データであれば、サムネイル表示された代表画像を見るだけで、そのとき一緒に旅行したメンバーを容易に想起できて好ましい。
【００２７】
請求項２に係る発明によれば、代表画像として重複する画像データが設定された場合には、そのうちの１つだけをサムネイル表示するようにしたから、全画像データ中に撮影されている人物を必要最小限の表示枚数で表示することができる。
【００２８】
具体的には、例えば、ＡさんとＢさんとが２人で写っている画像データがあった場合、Ａさん及びＢさん双方の処理単位グループの代表画像として、この２人で写っている画像データが設定される場合が考えられる。このような場合には、同じ画像データを２枚ともサムネイル表示する必要はなく、１枚のみをサムネイル表示するようにすれば、必要最小限の表示枚数で全画像データ中に含まれる人物の人数等を把握することができて好ましい。
【００２９】
請求項３に係る発明によれば、代表画像中の複数の人物の顔を互いに識別可能な表示形式で表示するから、代表画像中にどの人物が表示されているのかを容易に把握することができる。具体的に、例えば、人物の顔を含む画像範囲をそれぞれフレーム枠で囲んだり、人物の顔以外の画像範囲をグレー等の目立たない色に変更するようにすれば、代表画像中の人物の顔の位置やその人物が誰であるかが把握しやすくなり好ましい。
【００３０】
請求項４に係る発明によれば、画像データ中の人物の顔を含む画像範囲を抽出して、この画像範囲を代表画像として設定するようにしたから、例えば、集合写真を代表画像として設定したときには、写っている人物の顔が小さすぎて見づらい場合があるが、集合写真の中から特定の人物の顔を含む画像範囲を抽出すれば、その人物の顔を拡大表示した画像を代表画像として設定することができ、全画像データ中にどのような人物が撮影されているかを容易に把握することができる。
【００３１】
請求項５に係る発明によれば、画像データ中の所定の大きさを有する人物の顔についてのみ認識作業を行うようにしたから、一緒に旅行した人物の顔のみを認識する上で有利となる。
【００３２】
具体的には、撮影した画像データ中に、通りすがりの人物や遠くにいる人物が写ってしまった場合、それらの人物を含めて顔認識作業を行うと、自分の知らない人物についての処理単位グループが作成されてサムネイル表示されてしまうことになるが、これを防止するために、画像データ中に所定の大きさ以下で写っている人物については顔認識作業を行わないようにしている。
【００３３】
請求項６に係る発明によれば、処理単位グループに含まれる画像データの枚数に基づいて、画像表示手段にサムネイル表示する代表画像の表示順序を並べ替えるようにしたから、例えば、旅行中に撮影した画像データ中に登場する頻度の高い人物の代表画像を優先的に上位に表示するようにすれば、その旅行における中心人物から順番に表示されることとなり好ましい。また、仮に、旅行したメンバーとは関係のない通りすがりの人物の代表画像が表示されたとしても、その代表画像は下位に表示されることとなり、画像鑑賞に支障を来すことが少なくなる。
【００３４】
請求項７に係る発明によれば、サムネイル表示された代表画像のうち１つをユーザーが選択することで、その代表画像に係る処理単位グループに含まれる画像データが画像表示手段に表示されるから、ユーザーは、サムネイル表示された代表画像のうちから、例えば自分の写っている代表画像を選択することで、画像データ鑑賞時に全ての画像データを鑑賞する必要はなく、自分の写っている画像データのみを効率良く鑑賞することができて好ましい。
【００３５】
請求項８に係る発明によれば、サムネイル表示された代表画像のうち１つをユーザーが選択することで、その代表画像に係る処理単位グループに含まれる画像データがプリントされるようになっているから、ユーザーは、サムネイル表示された代表画像のうちから、例えば自分の写っている代表画像を選択することで、自分の写っている画像データのみを効率良くプリントすることができて好ましい。
【００３６】
請求項９に係る発明によれば、全画像データ中にどのような人物が撮影されているのかを容易に把握することができる。例えば、複数の友人と旅行したときの画像データであれば、サムネイル表示された代表画像を見るだけで、そのとき旅行したメンバーを容易に想起できて好ましい。
【発明を実施するための最良の形態】
【００３７】
以下、本発明の実施形態を図面に基づいて詳細に説明する。以下の好ましい実施形態の説明は、本質的に例示に過ぎず、本発明、その適用物或いはその用途を制限することを意図するものでは全くない。
【００３８】
＜装置構成＞
図１は、本発明の実施形態に係る画像処理装置１００の全体構成を示すブロック図である。図１に示すように、１０はドライブユニット、１１はドライブユニット１０で読み取った画像データに対する画像処理を行う画像処理部、１２は画像処理部１１に対して情報入力を行うための情報入力部、１３は画像データや画像処理ソフトの各種メニュー等を表示するモニタ（画像表示手段）、１４は画像データをプリントするプリント部である。
【００３９】
前記ドライブユニット１０は、デジタルカメラで撮影された写真や動画を含む画像データが保存されたフラッシュメモリ等の半導体メディアＭｓからのデータを取得する（読み出す）半導体ドライブ１と、ＣＤ−ＲやＤＶＤ−Ｒ等の複数種類の大容量のディスク状メディアＭｄからのデータの取得及び書き込みを可能にするディスクドライブ２とを備えている。なお、この半導体ドライブ１は、コンパクトフラッシュ（登録商標）やスマートメディア（登録商標）やメモリースティック（登録商標）等のフラッシュメモリの種類に対応できるように複数の挿入部を備えていることが好ましい。
【００４０】
前記画像処理部１１は、情報処理を行うＣＰＵ、メモリ及びハードディスクを含むコンピュータで構成されており、ドライブユニット１０で読み取った画像データを該ハードディスクに保存し、インストールされている画像処理ソフトによって該画像データに対して様々な画像処理を行うことができるようになっている。
【００４１】
具体的には、画像データ中の人物の顔を認識し、その人物の顔の特徴を示す顔情報（例えば、顔全体の大きさに対する目や鼻の大きさや位置等）を取得する画像認識手段、同じ顔情報を有する画像データをグループ化して処理単位グループを作成するグループ化手段、処理単位グループに含まれる画像データのうち１つを代表画像として設定する代表画像設定手段、処理単位グループ毎に設定された代表画像をモニタ１３にサムネイル表示する代表画像表示手段、代表画像中に複数の人物の顔が存在する場合に、該複数の人物の顔を互いに識別可能な表示形式（例えば、人物の顔を含む画像範囲をフレーム枠で囲む等）で表示する識別表示手段、処理単位グループに含まれる画像データの枚数に基づいて、モニタ１３にサムネイル表示する複数の代表画像の表示順序を並べ替えるソート手段等をソフトウェア（プログラム）として備えている。
【００４２】
前記情報入力部１２は、例えば、キーボード、マウス、リモコン等により構成されており、前記画像処理部１１に対して必要な入力が行えるようになっている。なお、タッチパネル方式のモニタ１３を用いて入力を行うようにしても構わない。
【００４３】
前記モニタ１３は、例えば、ＣＲＴや液晶表示装置等で構成されており、前記画像処理部１１に入力された画像データを表示するとともに、画像処理ソフトの各種メニュー画面を表示してユーザーが確認できるようになっている。
【００４４】
前記プリント部１４は、ユーザーがプリントを希望する画像データをモニタ１３画面上で選択してプリント指示することで、その画像データがプリントできるようになっている。
【００４５】
なお、本実施形態では、画像処理装置１００の一例としてコンピュータを用いたものについて説明しているが、この形態に限定するものではなく、例えば、画像データ中の人物の顔を認識して顔情報を取得し、顔情報に基づいて画像データを分類してその代表画像をサムネイル表示する手順をソフトウェアとして備えた再生装置（例えば、ＤＶＤプレイヤ等）であってもよい。さらに、このような手順を実行するプログラムを画像データとともに電子アルバムに記録しておき、ＤＶＤプレイヤ等で再生する際に、このプログラムに基づいて画像データの処理を行うようにしても構わない。
【００４６】
＜画像処理手順＞
次に、本実施形態の画像処理装置１００において、画像データ中の人物の顔情報に基づいて画像データを分類する手順について、図２のフローチャート図を用いて説明する。図２に示すように、ステップＳ１０１では、デジタルカメラ等で撮影した画像データを画像処理部１１に入力し、続くステップＳ１０２に進む。
【００４７】
ステップＳ１０２では、画像処理部１１に入力された複数の画像データ毎に、その画像データ中に人物の顔が含まれているかを判定する。
【００４８】
ステップＳ１０２での判定が「ＹＥＳ」の場合には、ステップＳ１０３に分岐し、ステップＳ１０３で、画像データ中の人物の顔を認識し、その人物の顔の特徴を示す顔情報を取得して、続くステップＳ１０４に進む。ステップＳ１０２での判定が「ＮＯ」の場合には、その画像データは風景画像であると判断して、続くステップＳ１０４に進む。
【００４９】
ステップＳ１０４では、入力された全ての画像データについて人物の顔認識が行われたかを判定する。ステップＳ１０４での判定が「ＮＯ」の場合には、ステップＳ１０２に分岐し、次の画像データに対して同様の処理を繰り返す。
【００５０】
ステップＳ１０４での判定が「ＹＥＳ」の場合には、ステップＳ１０５に分岐し、ステップＳ１０５で、同じ顔情報を有する画像データをグループ化して処理単位グループを作成し、続くステップＳ１０６に進む。
【００５１】
ステップＳ１０６では、前記処理単位グループに対して風景画像を追加するかを判定する。ステップＳ１０６での判定が「ＹＥＳ」の場合には、ステップＳ１０７に分岐し、ステップＳ１０７で、風景画像を処理単位グループに追加して、ステップＳ１０８に進む。ステップＳ１０６での判定が「ＮＯ」の場合には、そのままステップＳ１０８に分岐する。
【００５２】
このように、人物を含む画像データのみをグループとするのではなく、旅行当時に撮影した風景の画像データを処理単位グループに含めることで、この処理単位グループを再生表示したときに、人物を含む画像データの他に旅行当時の風景画像も鑑賞することができ、旅行当時の情景を想起する上で有利となり好ましい。
【００５３】
ステップＳ１０８では、前記処理単位グループに含まれる画像データのうち、そのグループに含まれる人物を表すのに適当と思われる画像を代表画像として設定し、続くステップＳ１０９に進む。
【００５４】
ステップＳ１０９では、処理単位グループ毎に含まれる画像データの枚数をそれぞれカウントし、続くステップＳ１１０に進む。
【００５５】
ステップＳ１１０では、モニタ１３に表示された後述する画像選択メニュー画面にグループ毎の代表画像をサムネイル表示する。このとき、先ほどカウントした画像データ枚数の多いグループの代表画像がメニュー画面の先頭に位置付けられるように、画像処理ソフトのソートプログラムによって並び替えて表示する。このようにすれば、全画像データの中で最も登場回数の多い人物を示す代表画像が先頭となり好ましい。
【００５６】
以上のような処理を行うことで、複数の画像データ中に含まれる人物の総人数を容易に把握することができるとともに、誰が写っているのかをサムネイル画像で容易に把握することができ、旅行当時のメンバー構成を想起する上で有利となる。
【００５７】
＜代表画像の表示形式＞
次に、モニタ１３にサムネイル表示する代表画像の表示形式の例について、図３及び図４を用いて説明する。図３は、画像処理装置１００に対してＮｏ.１〜Ｎｏ.５の５枚の画像データが入力された場合を示している。図３に示すように、Ｎｏ.１はＡさん１人の画像、Ｎｏ.２は風景画像１、Ｎｏ.３はＢさん１人の画像、Ｎｏ.４はＡさんとＢさんとが２人で写っている画像、Ｎｏ.５は風景画像２であるとする。
【００５８】
ここで、前述した図２のフローチャート図におけるステップＳ１０５では、同じ顔情報を有する画像データがグループ化されて処理単位グループが作成されるが、具体的には、Ａさんの処理単位グループにはＮｏ.１及びＮｏ.４の画像が含まれ、Ｂさんの処理単位グループにはＮｏ.３及びＮｏ.４の画像が含まれるようになっている。なお、以下、続くステップＳ１０６での風景画像のグループ化は行わないものとして説明する。
【００５９】
次に、ステップＳ１０８で、処理単位グループ毎に代表画像の設定をするが、ここでは、Ａさんのグループの代表画像としてＮｏ.１の画像が設定され、Ｂさんのグループの代表画像としてＮｏ.３の画像が設定されたものとする。これにより、図４に示すように、後述する画像選択メニューが表示された場合には、先ほど設定したＮｏ.１及びＮｏ.３の画像がサムネイル表示されるようになっている。
【００６０】
なお、入力された複数の画像データに含まれる人物（図３ではＡさんとＢさんの２人）を最小枚数の代表画像で表示する場合には、Ａさん及びＢさんの代表画像としてそれぞれＮｏ.４の画像を設定するようにし、さらに、図５に示すように、画像データ中のそれぞれの顔を識別するために、Ａさん及びＢさんの顔を含む画像範囲を囲むようにそれぞれフレーム枠２１を表示するようにしている。これにより、Ｎｏ.４の画像中にＡさん及びＢさんの２人が写っていることが容易に把握できるようになり好ましい。
【００６１】
次に、図６及び図７を用いて、代表画像の別の表示形式について説明する。図６は、画像処理装置１００に対してＮｏ.１〜Ｎｏ.５の５枚の画像データが入力された場合を示している。図６に示すように、Ｎｏ.１はＡさんとＢさんとが２人で写っている画像、Ｎｏ.２は風景画像１、Ｎｏ.３はＢさん１人の画像、Ｎｏ.４はＣさん１人の画像、Ｎｏ.５はＢさんとＣさんとが２人で写っている画像であるとする。
【００６２】
ここで、Ａさんの処理単位グループには、Ｎｏ.１の画像が含まれ、Ｂさんの処理単位グループにはＮｏ.１、Ｎｏ.３及びＮｏ.５の画像が含まれ、Ｃさんの処理単位グループにはＮｏ.４及びＮｏ.５の画像が含まれるようになっている。
【００６３】
そして、Ａさんのグループの代表画像としてＮｏ.１の画像が設定され、Ｂさんのグループの代表画像としてＮｏ.１の画像が設定され、Ｃさんのグループの代表画像としてＮｏ.４の画像が設定されたものとする。これにより、図７に示すように画像選択メニューが表示された場合には、先ほど設定したＮｏ.１及びＮｏ.４の画像がサムネイル表示されるようになっている。なお、ＡさんとＢさんの代表画像は同じＮｏ.１の画像であるため、重複したＮｏ.１の画像は１枚のみ表示されるようになっている。
【００６４】
図７に示すように、Ｎｏ.１の画像には、Ａさん及びＢさんの２人が写っているので、それぞれの顔を識別するために、Ａさん及びＢさんの顔を含む画像範囲を囲むようにそれぞれフレーム枠２１が表示されている。これにより、Ｎｏ.１の画像中にＡさん及びＢさんが写っていることが容易に把握できるようになっている。
【００６５】
なお、画像データ中の複数の人物の顔を識別するための手段としてフレーム枠２１を表示するようにしたが、この他にも、例えば、図８に示すように、Ａさん及びＢさんの顔を含む画像範囲以外の領域をグレー等の目立ちにくい色で表示するようにすれば、相対的に人物の顔が目立つようになり好ましい。
【００６６】
次に、図９及び図１０を用いて、代表画像の別の表示形式について説明する。図９は、画像処理装置１００に対してＮｏ.１〜Ｎｏ.５の５枚の画像データが入力された場合を示している。図９に示すように、Ｎｏ.１はＡさんとＢさんとが２人で写っている画像、Ｎｏ.２はＡさん、Ｂさん及びＣさんが３人で写っている画像、Ｎｏ.３はＢさん１人の画像、Ｎｏ.４はＡさんとＢさんが２人で写っている画像、Ｎｏ.５は風景画像１であるとする。
【００６７】
ここで、Ａさんの処理単位グループには、Ｎｏ.１、Ｎｏ.２及びＮｏ.４の画像が含まれ、Ｂさんの処理単位グループには、Ｎｏ.１、Ｎｏ.２、Ｎｏ.３及びＮｏ.４の画像が含まれ、Ｃさんの処理単位グループには、Ｎｏ.２の画像が含まれるようになっている。
【００６８】
次に、それぞれの処理単位グループ毎に代表画像を設定するのであるが、ここでは、グループに含まれる画像データ中の人物の顔を含む画像範囲を抽出し、この画像範囲を代表画像として設定するようにしている。
【００６９】
具体的に、Ａさんの処理単位グループでは、Ｎｏ.１の画像中のＡさんの顔を含む画像範囲が抽出され、この画像範囲を拡大表示した画像が代表画像として設定されるようになっている。同様に、Ｂさんの処理単位グループでは、Ｎｏ.１の画像中のＢさんの顔を含む画像範囲が代表画像として設定され、Ｃさんの処理単位グループでは、Ｎｏ.２の画像中のＣさんの顔を含む画像範囲が代表画像として設定されている。
【００７０】
これにより、図１０に示すように、画像選択メニューが表示された場合には、先ほど設定したＡさん、Ｂさん及びＣさんの代表画像がサムネイル表示されるようになっている。
【００７１】
このようにすれば、画像データが集合写真であり人物の顔が小さく写っている場合であっても、メニュー画面上には人物の顔を含む画像範囲が拡大表示されるため、サムネイル表示された代表画像を見るだけで誰が写っているのかを容易に把握することができる。また、全画像データ中の人物毎に顔を拡大した代表画像がサムネイル表示されるから、全画像データ中に何人の人物が写っているのかを容易に把握することができる。
【００７２】
＜画像再生手順＞
次に、画像処理装置１００に入力された複数の画像データをユーザーが鑑賞するための手順について説明する。上述したような画像データ中の人物の顔認識及び代表画像の設定作業は、画像処理装置１００に画像データが入力された時点で自動的に行われるものであり、ユーザーは、画像データの入力が完了したときに、電子アルバムのメニュー画面から、画像選択メニューを起動する。
【００７３】
前記モニタ１３に表示された画像選択メニューには、先ほど説明した例えば図１０に示すように、入力した全画像データの中に写っている人物を示す代表画像がサムネイル表示されており、ユーザーがこの代表画像のうち何れか１つを選択することにより、その代表画像に係る処理単位グループに含まれる画像データのみがモニタ１３に表示されるようになっている。
【００７４】
例えば、図１０の画像選択メニューにおいて、Ａさんの代表画像を選択した場合には、図９に示すＡさんの処理単位グループに含まれるＮｏ.１、Ｎｏ.２及びＮｏ.４の画像がモニタ１３にサムネイル表示されるか、又は１枚ずつスライドショー表示されるようになっている。
【００７５】
これにより、ユーザーは、電子アルバムに収録された全画像データを鑑賞する必要はなく、例えば自分の写っている画像だけを選択的に鑑賞することが可能となる。すなわち、そのユーザー専用の電子アルバムの再現を行うことが可能となり、ユーザーの利便性が高まる。
【００７６】
また、画像を鑑賞する以外にも、プリント部１４と連動させることにより、ユーザー自身が写っている画像のみをプリントするといった使い方も可能である。すなわち、画像選択メニューにおいて代表画像のうち１つを選択し、その代表画像に係る処理単位グループに含まれる画像データをモニタ１３に表示する代わりに、これら画像データをプリント部１４に送信することで、その処理単位グループに含まれる画像データのみをプリントすることができる。
【００７７】
これにより、ユーザーが全画像データの中から自分の写っている画像のみ（実施例では、処理単位グループの全てを選択する例を挙げたが、この形態に限定するものではない。処理単位グループからさらに任意の画像を選ぶ構成であっても、本発明の技術思想を逸脱するものではない。）をプリントしたい場合に、全画像データをわざわざチェックしてプリント希望の画像データを順次選択していくといった煩わしい作業をする必要がなくなり、ユーザーの利便性が高まる。
【００７８】
以上のように、本実施形態に係る画像処理装置１００によれば、複数の画像データの中からユーザーが鑑賞したい画像データのみを選択する等の煩わしい作業をすることなく、画像データ中の人物の顔情報に基づいて表示することで利便性を高めることができる。
【００７９】
なお、電子アルバムを作成する際に本発明を用いれば、一緒に旅行したメンバー毎にそのメンバーの写っている画像のみを収録した電子アルバムを作成することができて、より付加価値のある電子アルバムを作成することができる。
【産業上の利用可能性】
【００８０】
以上説明したように、本発明は、複数の画像データ中に誰が撮影されているかを容易に把握するとともに、ユーザーが鑑賞を希望する画像データのみを容易に抽出できるという実用性の高い効果が得られることから、きわめて有用で産業上の利用可能性は高い。
【図面の簡単な説明】
【００８１】
【図１】本発明の実施形態に係る画像処理装置の構成を示すブロック図である。
【図２】本実施形態に係る画像処理手順を示すフローチャート図である。
【図３】処理単位グループの作成手順を説明する図である。
【図４】画像選択メニューに表示される代表画像の表示形式を示す図である。
【図５】画像選択メニューに表示される代表画像の別の表示形式を示す図である。
【図６】処理単位グループの作成手順の別の例を説明する図である。
【図７】画像選択メニューに表示される代表画像の別の表示形式を示す図である。
【図８】画像選択メニューに表示される代表画像の別の表示形式を示す図である。
【図９】処理単位グループの作成手順の別の例を説明する図である。
【図１０】画像選択メニューの別の例を示す図である。
【符号の説明】
【００８２】
１０ ドライブユニット
１１ 画像処理部
１２ 情報入力部
１３ モニタ
１４ プリント部
１００ 画像処理装置
【特許請求の範囲】
【請求項１】
静止画像を含む複数の画像データを表示する画像表示手段と、
前記複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する画像認識手段と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成するグループ化手段と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する代表画像設定手段と、
前記処理単位グループ毎に設定された前記代表画像を前記画像表示手段にサムネイル表示する代表画像表示手段とを備えたことを特徴とする画像処理装置。
【請求項２】
請求項１に記載された画像処理装置において、
前記代表画像表示手段は、異なる前記処理単位グループの代表画像として同じ画像データが設定された場合に、重複する該代表画像を１つだけ前記画像表示手段にサムネイル表示するように構成されていることを特徴とする画像処理装置。
【請求項３】
請求項１又は２に記載された画像処理装置において、
前記代表画像中に複数の人物の顔が存在する場合に、該複数の人物の顔を互いに識別可能な表示形式で表示する識別表示手段をさらに備えたことを特徴とする画像処理装置。
【請求項４】
請求項１に記載された画像処理装置において、
前記代表画像設定手段は、前記処理単位グループに含まれる画像データ中の人物の顔を含む画像範囲を抽出して、該画像範囲を前記代表画像として設定するように構成されていることを特徴とする画像処理装置。
【請求項５】
請求項１乃至４のうち何れか１項に記載された画像処理装置において、
前記画像認識手段は、前記画像データ中の所定の大きさを有する人物の顔についてのみ認識作業を行うように構成されていることを特徴とする画像処理装置。
【請求項６】
請求項１乃至５のうち何れか１項に記載された画像処理装置において、
前記処理単位グループに含まれる画像データの枚数に基づいて、前記画像表示手段にサムネイル表示する前記複数の代表画像の表示順序を並べ替えるソート手段をさらに備えたことを特徴とする画像処理装置。
【請求項７】
請求項１乃至６のうち何れか１項に記載された画像処理装置において、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが該画像表示手段に表示されるようになっていることを特徴とする画像処理装置。
【請求項８】
請求項１乃至７のうち何れか１項に記載された画像処理装置において、
前記画像データをプリントするプリント手段をさらに備え、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが前記プリント手段によりプリントされるようになっていることを特徴とする画像処理装置。
【請求項９】
複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する手順と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成する手順と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する手順と、
前記処理単位グループ毎に設定された前記代表画像をサムネイル表示する手順とを備えたことを特徴とする画像処理方法。
【請求項１】
静止画像を含む複数の画像データを表示する画像表示手段と、
前記複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する画像認識手段と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成するグループ化手段と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する代表画像設定手段と、
前記処理単位グループ毎に設定された前記代表画像を前記画像表示手段にサムネイル表示する代表画像表示手段とを備えたことを特徴とする画像処理装置。
【請求項２】
請求項１に記載された画像処理装置において、
前記代表画像表示手段は、異なる前記処理単位グループの代表画像として同じ画像データが設定された場合に、重複する該代表画像を１つだけ前記画像表示手段にサムネイル表示するように構成されていることを特徴とする画像処理装置。
【請求項３】
請求項１又は２に記載された画像処理装置において、
前記代表画像中に複数の人物の顔が存在する場合に、該複数の人物の顔を互いに識別可能な表示形式で表示する識別表示手段をさらに備えたことを特徴とする画像処理装置。
【請求項４】
請求項１に記載された画像処理装置において、
前記代表画像設定手段は、前記処理単位グループに含まれる画像データ中の人物の顔を含む画像範囲を抽出して、該画像範囲を前記代表画像として設定するように構成されていることを特徴とする画像処理装置。
【請求項５】
請求項１乃至４のうち何れか１項に記載された画像処理装置において、
前記画像認識手段は、前記画像データ中の所定の大きさを有する人物の顔についてのみ認識作業を行うように構成されていることを特徴とする画像処理装置。
【請求項６】
請求項１乃至５のうち何れか１項に記載された画像処理装置において、
前記処理単位グループに含まれる画像データの枚数に基づいて、前記画像表示手段にサムネイル表示する前記複数の代表画像の表示順序を並べ替えるソート手段をさらに備えたことを特徴とする画像処理装置。
【請求項７】
請求項１乃至６のうち何れか１項に記載された画像処理装置において、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが該画像表示手段に表示されるようになっていることを特徴とする画像処理装置。
【請求項８】
請求項１乃至７のうち何れか１項に記載された画像処理装置において、
前記画像データをプリントするプリント手段をさらに備え、
前記画像表示手段にサムネイル表示された前記代表画像のうち１つをユーザーが選択することで、該選択した代表画像に係る処理単位グループに含まれる画像データが前記プリント手段によりプリントされるようになっていることを特徴とする画像処理装置。
【請求項９】
複数の画像データ中の人物の顔を認識し、該認識した顔の特徴を示す顔情報を取得する手順と、
前記複数の画像データのうち同じ顔情報を有する画像データをグループ化して、該顔情報毎に処理単位グループを作成する手順と、
前記処理単位グループに含まれる画像データのうち１つを代表画像として設定する手順と、
前記処理単位グループ毎に設定された前記代表画像をサムネイル表示する手順とを備えたことを特徴とする画像処理方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２００６−３１４０１０（Ｐ２００６−３１４０１０Ａ）
【公開日】平成１８年１１月１６日（２００６．１１．１６）
【国際特許分類】
【出願番号】特願２００５−１３５６６５（Ｐ２００５−１３５６６５）
【出願日】平成１７年５月９日（２００５．５．９）
【出願人】（０００１３５３１３）ノーリツ鋼機株式会社 (1,824)
【Ｆターム（参考）】
【公開日】平成１８年１１月１６日（２００６．１１．１６）
【国際特許分類】
【出願日】平成１７年５月９日（２００５．５．９）
【出願人】（０００１３５３１３）ノーリツ鋼機株式会社 (1,824)
【Ｆターム（参考）】
[ Back to top ]