画像処理システム、画像処理方法、サーバおよびプログラム
【課題】画像や人物の雰囲気を壊すことなくプライバシー保護のための目隠し処理を自動で行うことが可能な画像処理システム等を提供する。
【解決手段】目隠しデザイン設定情報３０は、画像データ中の人物の属性情報３１、感性情報３３ごとに、目隠しデザイン情報３５が対応づけられたものである。属性情報３１としては、例えば画像データ中の人物の性別（Ｍａｌｅ、Ｆｅｍａｌｅ）などの情報であり、感性情報３３としては、例えば笑顔判定による笑顔情報である。笑顔情報とは、後述する画像データ中の顔情報より得られる情報であり、当該顔が笑顔であるか否かを判定し、その確度による情報である。目隠しデザイン設定情報３０は、これらのそれぞれの組み合わせ毎に、その属性情報３１および感性情報３３に適した目隠しデザイン情報３５が対応づけられる。
【解決手段】目隠しデザイン設定情報３０は、画像データ中の人物の属性情報３１、感性情報３３ごとに、目隠しデザイン情報３５が対応づけられたものである。属性情報３１としては、例えば画像データ中の人物の性別（Ｍａｌｅ、Ｆｅｍａｌｅ）などの情報であり、感性情報３３としては、例えば笑顔判定による笑顔情報である。笑顔情報とは、後述する画像データ中の顔情報より得られる情報であり、当該顔が笑顔であるか否かを判定し、その確度による情報である。目隠しデザイン設定情報３０は、これらのそれぞれの組み合わせ毎に、その属性情報３１および感性情報３３に適した目隠しデザイン情報３５が対応づけられる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、プライバシーの保護を目的として、画像に目隠し処理を画像処理システム等に関するものである。
【背景技術】
【０００２】
従来、デジタルカメラ等で撮影されたデジタル画像をウェブサイトにアップロードしてブログ等に用いる場合がある。このような場合には、ユーザは、必要に応じて、画像に写っている人物のプライバシーを保護するために、顔に目隠し処理を施して、その人物を特定できないように画像処理を施す場合がある。このような画像処理は、ユーザが画像処理ソフトを用いて手動で行うことも可能であるが、ユーザの負担が大きく、また、仕上がりもよくない。
【０００３】
このため、画像中の全ての顔を検出し、検出された顔に対して自動で目隠し処理を行う方法が提案されている（例えば特許文献１、特許文献２）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−０３４９６３号公報
【特許文献２】特開２０１０−１７０２６５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、特許文献１、特許文献２のいずれの方法も、画像中の人物の雰囲気によらず、画像中の全ての顔上に同一の目隠し処理を施すため、画像全体の雰囲気が著しく害される恐れがある。また、検出された顔全てに目隠し処理を施すため、本来目隠し処理の不要な部位（人物）にまで、目隠し処理が施されてしまうという問題がある。
【０００６】
本発明は、前述した問題点に鑑みてなされたもので、画像や人物の雰囲気を壊すことなくプライバシー保護のための目隠し処理を自動で行うことが可能な画像処理システム等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前述した目的を達成するために、第１の発明は、人の属性情報と目隠しデザインとを対応づけて記憶する記憶部と、画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する目隠しデザインを選択する選択手段と、前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザインを配置する配置手段と、を具備することを特徴とするサーバである。
【０００８】
前記目隠しデザイン情報は、前記人の属性情報および感性情報に対応づけられており、前記選択手段は、前記人の属性情報および感性情報によって、対応する前記目隠しデザイン情報を選択することが望ましい。
【０００９】
目隠し処理を行う対象を設定する設定手段をさらに具備し、前記配置手段は、前記設定手段により設定された人の画像中における顔の上のみに、選択された前記目隠しデザインを配置することが望ましい。
【００１０】
前記記憶部は、さらに、人の顔情報と当該顔情報に対応する人固有情報とが対応づけられて記憶され、前記第１の抽出手段で抽出された前記顔情報を用いて、前記記憶部から対応する前記人固有情報を抽出する第２の抽出手段をさらに具備し、前記設定手段は、前記第２の抽出手段により抽出された前記人固有情報から、人固有情報毎に目隠し処理を行う対象を設定してもよい。
【００１１】
前記配置手段は、対象である前記画像データ中における顔のサイズに応じて、前記目隠しデザインのサイズを調整し、調整後の前記目隠しデザインを対応する顔の上に配置してもよい。
【００１２】
第１の発明によれば、画像データ中の顔情報から人の属性情報を推定し、推定された人に応じて目隠しデザインを選択するため、画像中の人物の雰囲気や画像全体の雰囲気を壊すことない。したがって、対象画像に対して、自然な感じで目隠し処理を施すことができる。特に、目隠し処理を施す対象人物の属性および感性に基づいて目隠しデザインを選択すれば、より、人物の雰囲気に合わせた目隠し処理を施すことが可能である。
【００１３】
また、目隠し処理を施す対象を設定する設定手段を有すれば、画像中に検出された顔に対して、任意の顔にのみ目隠し処理を施すことができる。この際、あらかじめ顔情報と人固有情報とを対応させておくことで、人固有情報によるグループ分けが可能となり、目隠し処理を行う対象を当該グループによって選択することが可能である。したがって、目隠し処理対象の設定が容易である。
【００１４】
また、画像中の顔のサイズに応じて、目隠しデザインのサイズを調整するため、確実に対象の顔に対して目隠し処理を施すことが可能であるとともに、必要以上に大きな目隠し処理を施すことがない。
【００１５】
第２の発明は、サーバと端末とがネットワークを介して接続され、画像の特定の部位に画像処理を施す画像処理システムであって、前記端末は、画像データを前記サーバに送信する手段を有し、前記サーバは、人の属性情報と目隠しデザインとを対応づけて記憶する記憶部と、前記端末から送られた画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する目隠しデザインを選択する選択手段と、前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザインを配置する配置手段と、前記目隠しデザインが配置された前記画像データを前記端末に送信する手段と、を有し、前記端末は、前記目隠しデザインが配置された前記画像データを表示する表示手段を有することを特徴とする画像処理システムである。
【００１６】
第２の発明によれば、画像データ中の人物の雰囲気等に応じて適切な目隠しデザインを選択するため、画像に最適な目隠し処理を自動で行うことができる。
【００１７】
第３の発明は、画像の特定の部位に画像処理を施す画像処理方法であって、画像データを解析して、前記画像データ中の人間の顔情報を抽出する工程と、抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する工程と、人の属性情報と目隠しデザインとを対応づけて記憶する記憶部から、推定された前記人の属性情報を用いて、対応する目隠しデザインを選択する工程と、前記画像データに対して、抽出された顔の上に、選択された前記目隠しデザインを配置する工程と、を具備することを特徴とする画像処理方法である。
【００１８】
第３の発明によれば、画像中の人の属性情報を推定し、これに基づいて目隠しデザインを選択するため、当該人物に適した目隠し処理を自動で行うことができる。
【００１９】
第４の発明は、第１の発明を機能させることが可能なプログラムである。
【００２０】
第４の発明によれば、汎用的なコンピュータにインストールすることで、第１の発明のサーバを実現することができる。
【発明の効果】
【００２１】
本発明は、画像や人物の雰囲気を壊すことなくプライバシー保護のための目隠し処理を自動で行うことが可能な画像処理システム等を提供することができる。
【図面の簡単な説明】
【００２２】
【図１】画像処理システム１の概要を示すブロック図。
【図２】サーバ３のハードウエア構成図。
【図３】目隠しデザイン設定情報３０を示す図。
【図４】個人識別情報４０を示す図。
【図５】端末５のハードウエア構成図。
【図６】画像処理システム１における画像処理を示すフローチャート。
【図７】ステップ１０４の処理を詳細に示すフローチャート。
【図８】画像データ５０および、顔情報抽出画面を示す図。
【図９】人に関する情報６０示す図。
【図１０】目隠し処理設定画面７０を示す図。
【図１１】目隠し処理画像８０を示す図。
【発明を実施するための形態】
【００２３】
以下、添付図面に基づいて、本発明に係る画像処理システム等の好適な実施形態について詳細に説明する。尚、以下の説明及び添付図面において、略同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略することにする。
【００２４】
図１は、画像処理システム１の概要を示すブロック図である。画像処理システム１は、サーバ３、端末５がネットワーク４を介して接続される。
【００２５】
サーバ３は、本実施形態にかかる画像処理プログラムを格納し、このプログラムを実行することで、各種処理を行う。端末５は、例えばパーソナルコンピュータ等であり、インターネット等のネットワーク４を介して、サーバ３にアクセス可能である。
【００２６】
図２は、サーバ３のハードウエア構成例を示す図である。サーバ３は、制御部７、記憶部９、メディア入出力部１１、通信制御部１３、入力部１５、表示部１７、周辺機器Ｉ／Ｆ部１９等がバス２１を介して接続される。
【００２７】
制御部７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成される。
ＣＰＵは、ＲＯＭ、記憶部９等に格納されるプログラムをＲＡＭ上のワークメモリ領域に呼び出して実行し、バス２１を介して接続された各装置を駆動制御し、コンピュータが行う処理を実現する。
ＲＯＭは、不揮発性メモリであり、コンピュータのブートプログラムやＢＩＯＳ等のプログラム、データ等を恒久的に保持している。
ＲＡＭは、揮発性メモリであり、記憶部９、ＲＯＭ、記憶媒体等からロードしたプログラム、データ等を一時的に保持するとともに、制御部７が各種処理を行うために使用するワークエリアを備える。
【００２８】
記憶部９は、ＨＤＤ（ハードディスクドライブ）であり、制御部７が実行するプログラム、プログラム実行に必要なデータ、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）等が格納される。プログラムに関しては、ＯＳに相当する制御プログラムや、アプリケーションプログラム、ファイル等が格納されている。
これらの各プログラムコードは、制御部７により必要に応じて読み出されてＲＡＭに移され、ＣＰＵにより各種の手段として実行される。
【００２９】
メディア入出力部１１は、記録媒体のデータの入出力を行うドライブ装置であり、例えば、フロッピー（登録商標）ディスクドライブ、ＣＤドライブ（−ＲＯＭ、−Ｒ、−ＲＷ等）、ＤＶＤドライブ（−ＲＯＭ、−Ｒ、−ＲＷ等）、ＭＯドライブ等のメディア入出力装置を有する。
通信制御部１３は、通信制御装置、通信ポート等を有し、ネットワーク４を介した通信を媒介する通信インタフェースであり、他のコンピュータ間との通信制御を行う。
【００３０】
入力部１５は、データの入力を行い、例えば、キーボード、マウス等のポインティングデバイス、テンキー等の入力装置を有する。入力部１５を介して、コンピュータに対して、操作指示、動作指示、データ入力等を行うことができる。
表示部１７は、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）モニタ、液晶パネル等のディスプレイ装置、ディスプレイ装置と連携してビデオ機能を実現するための論理回路等（ビデオアダプタ等）を有する。
周辺機器Ｉ／Ｆ部１９は、周辺機器を接続するためのＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート等である。
バス２１は、各装置間の制御信号、データ信号等の授受を媒介する経路である。
【００３１】
図３（ａ）は、記憶部９に記憶された目隠しデザイン設定情報３０の一例を示す図である。目隠しデザイン設定情報３０は、画像データ中の人物の属性情報３１、感性情報３３ごとに、目隠しデザイン情報３５が対応づけられたものである。
【００３２】
属性情報３１としては、例えば画像データ中の人物の性別（Ｍａｌｅ、Ｆｅｍａｌｅ）などの情報であり、感性情報３３としては、例えば笑顔判定による笑顔情報である。笑顔情報とは、後述する画像データ中の顔情報より得られる情報であり、当該顔が笑顔であるか否かを判定し、その確度等の情報である。すなわち、笑顔の確度が高いほど、その人の気分が「ｐｏｓｉｔｉｖｅ」であると判断し、笑顔確度が低いほど、その人の気分が「ｎｅｇａｔｉｖｅ」であると判断する。目隠しデザイン設定情報３０は、これらのそれぞれの組み合わせ毎に、その属性情報３１および感性情報３３に適した目隠しデザイン情報３５が対応づけられる。
【００３３】
図３（ｂ）は、目隠しデザイン情報３５の一例を示す図である。前述の通り、目隠しデザイン設定情報３０には、各属性情報３１および各感性情報３３に対して、適切な目隠しデザイン情報３５が対応付けられている。例えば、図３（ｂ）に示す例では、上段は男性、下段は女性に対して適用され、それぞれ、図中左側から右側に行くにつれて、人物の感性が「ｎｅｇａｔｉｖｅ」側から「ｐｏｓｉｔｉｖｅ」側に対応して設定される。ここで、目隠しデザイン情報とは、本発明において、画像データ中の対象となる顔を隠すために、その顔の上に挿入される画像情報である。
【００３４】
例えば、画像データ中の人物が男性であり、笑顔（ｓｍｉｌｌｉｎｇ）の確度（ｔｒｕｅ）が２０％であると判定されると、目隠しデザイン情報３５として「Ｂ．ｊｐｇ」（図３（ｂ）の上段左から二つ目）の目隠しデザイン情報が選択される。なお、あらかじめ設定された属性情報３１および感性情報３３の組み合わせに該当しないものに対しては、標準設定である「ｄｅｆａｕｌｔ」として目隠しデザイン情報を対応づけてもよい。
【００３５】
図４は、記憶部９に記憶された個人識別情報４０の一例を示す図である。個人識別情報４０は、必要に応じて予め記憶部９に保存される。個人識別情報４０は、人の顔情報４１と、人固有情報４３とが関連付けられている。
【００３６】
顔情報４１は、予め登録された個人の顔情報である。すなわち、個人の顔の正面またま正面に近い画像データを記憶部９に登録するとともに、登録された顔情報に基づいて、目、鼻、口その他のデータを解析することで、その人物の顔情報の特徴点を抽出して記憶したものである。
【００３７】
人固有情報４３は、その人物固有の情報である。例えば、その人物の氏名や、本人との関係などのグループ情報が記憶される。すなわち、ある画像データ中に、登録された顔情報の特徴に近い特徴を有する顔が抽出されると、当該人物に対応付けられた人固有情報４３を抽出することができる。
【００３８】
図５は、端末５のハードウエア構成例を示す図である。端末５は、制御部８、記憶部１０、メディア入出力部１２、通信制御部１４、入力部１６、表示部１８、周辺機器Ｉ／Ｆ部２０等がバス２２を介して接続される。なお、端末５の制御部８、記憶部１０、メディア入出力部１２、通信制御部１４、入力部１６、表示部１８、周辺機器Ｉ／Ｆ部２０、バス２２は、サーバ３の制御部７、記憶部９、メディア入出力部１１、通信制御部１３、入力部１５、表示部１７、周辺機器Ｉ／Ｆ部１９、バス２１とそれぞれ同様の構成であるため、重複する説明を省略する。
【００３９】
次に、画像処理システム１における画像処理について説明する。図６は、画像処理を示すフローチャートである。
【００４０】
まず、端末５の制御部８は、画像データをサーバ３に送信する（ステップ１００）。サーバ３の制御部７は、画像データを端末５から取得する。端末５からの画像データを取得したサーバ３は、制御部７により、取得した画像データを解析して、画像データ中の顔情報を抽出する（ステップ１０１）。
【００４１】
図８（ａ）は、取得した画像データ５０の一例を示す図、図８（ｂ）は、解析時の画像データ５０を示す概念図である。制御部７は、画像データ５０内の全ての顔について、顔情報を抽出する。例えば、人の目、鼻、口等の位置を取得するとともに、顔と認定した部位の顔領域を推定する。図８（ｂ）に示す例では、ＩＤ＝０、１、２の３つの顔情報が抽出され、それぞれの顔の顔領域５１ａ、５１ｂ、５１ｃが抽出される。
【００４２】
次に、制御部７は、顔情報を解析し、それぞれの顔情報毎に、その人に関する情報を推定する（ステップ１０２）。
【００４３】
図９は、顔情報から推定された人に関する情報６０を示す図である。人に関する情報６０は、例えば、その人の性別、年代層などの画像データ中の人の属性情報、その人の笑顔の度合いを示す感性情報および人固有情報等から構成される。例えば、ＩＤ＝２の顔情報（図８（ａ）の画像データ中の右側の顔）に対しては、その人に関する情報として、性別が女性、推定年代は２０代であり、笑顔であり、人固有情報が未登録であることが推定された例を示す。なお、人固有情報については、後述する。
【００４４】
画像データ５０から、顔情報を抽出し、その顔の属性や感性（笑顔判定）の推定を行う方法としては、例えば、特開２００９−２９４９２５号公報、特開２００５−１６５４４７号公報、特開２００７−３３６１２４などの公知の手法を用いればよく、例えば以下のようにすればよい。
【００４５】
まず、顔画像から顔領域検出部にて顔領域を検出し、さらに顔特徴抽出部にて顔の特徴情報を抽出する。また、あらかじめ男女別の幅広い年齢層の個人顔特徴情報を作成しておき、年齢と性別の情報と合わせて顔特徴保持部に保持し、顔特徴抽出部で抽出された顔特徴情報と顔特徴保持部内の個人顔特徴情報とを照合して類似度を求める。得られた類似度とそれに付属した年齢および性別の情報から当該人物の年齢と性別を判別すればよい。
【００４６】
また、笑顔認識は、口の曲がり具合、口角の上がり具合、目の大きさ、しわのより具合などにもとづいて定量化することができる。定量化された値にもとづいてあらかじめ設定されたしきい値との比較により、被写体像がどの程度笑っているかを判定することができる。
【００４７】
また、画像データ５０から、顔情報を抽出して、予め登録された人固有情報から、画像中の人物の人固有情報を推定する手段としては、例えば、非特許文献１（「顔画像を用いた顔認識システム」、信学技法ＰＲＭＵ９７−５０、）１９９７年６月、山口、福井、前田）や、特開２００３−１４１５４２号公報などの公知の手法を用いればよい。
【００４８】
例えば、特開２００３−１４１５４２号公報に記載されるように、顔照合用の辞書内に類似する顔パターンが存在する場合であっても一定の照合性能及びセキュリティレベルを維持するため、類似した顔パターンが辞書に複数登録されている場合、類似した顔パターン同士を類似グループとしてグループ分けし、類似グループに属する顔パターンに対しては、通常の照合処理とは異なる特別処理によって照合の可否を判断する方法により、顔認識の精度を向上させればよい。
【００４９】
次に、制御部７は、記憶部９内の目隠しデザイン設定情報３０（図３（ａ））から、それぞれの推定された人に関する情報６０に対応する目隠しデザイン情報３５を抽出する（ステップ１０３）。なお、画像中の人物の属性や感性が推定できなかった場合には、予め設定された標準設定の目隠しデザインが選択される。
【００５０】
次に、制御部７は、画像データ中のどの顔に対して目隠しデザインを挿入するか設定する（ステップ１０４）。目隠し処理を行う対象の選択は、それぞれの顔ごとに端末５から設定可能としても良いが、例えば以下のように行うこともできる。
【００５１】
図７は、ステップ１０４の詳細を示すフローチャートである。まず、制御部７は、記憶部９から、画像データ上のそれぞれの顔情報に対応する人固有情報を抽出する（ステップ２００）。次いで、抽出された人固有情報に基づいて、目隠し処理対象をグループ化する（ステップ２０１）。例えば、画像データ中に複数の人物が存在する場合において、それぞれの顔情報の人固有情報におけるグループが、「本人」、「友人」、「未登録」に分類可能であれば、それぞれ、「本人」のグループ、「友人」のグループ、「未登録」にグループ化する。
【００５２】
次に、制御部７は、目隠し処理を選択する選択画面を作成し、端末５に表示させる（ステップ２０２）。
【００５３】
図１０は、目隠し処理設定画面７０を示す図である。目隠し処理設定画面７０には、画像データとともに、目隠し処理選択部７１、設定ボタン７３、人固有情報表示部７５が設けられる。目隠し処理選択部７１は、前述したグループ分けされた各人物の人固有情報により、目隠し処理対象を選択可能である。例えば、図１０に示す例では、画像中の全ての人物は、「本人」、「友人」、「未登録」のいずれかのグループに分けられ、「友人」、「未登録」の人物に対して目隠し処理の選択を行った例を示す。
【００５４】
なお、画像中の各ＩＤに対応させて、人固有情報表示部７５にはそれぞれの人固有情報が表示される。したがって、この画面上から、新たに人固有情報を入力して、記憶部９の個人識別情報４０に追加することもできる。また、人固有情報の推定が異なる場合には、この部位に正しい情報を入力することで、人固有情報の修正や、さらに詳細なグループ分け（例えば「友人Ａグループ」「友人Ｂグループ」など）を行うことも可能である。
【００５５】
目隠し処理対象を選択し、設定ボタン７３が押されることで、端末５からサーバ３に対して、目隠し処理対象が送信される（図７、ステップ２０３）。端末５から目隠し処理対象を受信すると、制御部７は、目隠しデザイン情報を挿入する画像データ中の顔情報を設定する（ステップ２０４）。
【００５６】
次に、制御部７は、選択された目隠しデザイン情報のサイズを、画像データ中の対象となる顔の大きさに応じて調整する（ステップ１０５）。なお、サイズの調整は、必要に応じて、顔情報の縦方向または横方向に伸縮させてもよく、顔の向きに応じて回転させてもよい。すなわち、画像データ中の対象となる顔の顔領域に適するように、目隠しデザイン情報のサイズが調整される。
【００５７】
次に、制御部７は、設定された目隠しデザイン情報を、設定された顔情報の上に挿入し、目隠しデザイン情報が挿入された画像をユーザ端末に送信する（ステップ１０６）。端末５では、表示部１８に画像が表示される（ステップ１０７）。以上により、画像データ上に目隠しデザイン情報が挿入された画像が、ユーザに送信される。
【００５８】
図１１は、目隠し処理画像８０の一例を示す図である。目隠し処理画像８０には、目隠し処理対象として選択された顔（図では、真ん中の人物＝友人と、右側の人物＝未登録）に目隠しデザイン情報が挿入される。目隠しデザイン情報は、もともとの画像データ中の属性および感性に基づいて選択されるため、目隠し処理によって、画像データの雰囲気に影響が少ない。また、目隠しデザイン情報のサイズは、画像データ上の顔領域に応じて調整されるため、確実に顔が隠されるとともに、必要以上の部位が隠されることがない。
【００５９】
なお、さらにユーザは、端末５を介して、自動で設定された目隠しデザイン情報を手動で修正することもできる。例えば、自動で設定された目隠しデザイン情報に対して、他のデザインに修正しても良く、そのサイズや配置を調整しても良い。
【００６０】
以上、本発明によれば、ユーザは、対象画像データをサーバに送信することで、手間のかかる目隠し処理を手動で行うことなく、目隠しデザイン情報を画像に挿入することができる。したがって、ユーザの負担を削減することができる。
【００６１】
特に、画像データ中の顔情報から、その人の属性情報や感性情報を推定するため、単に顔を隠すのみではなく、より、画像データ中の人物（表情）に合った目隠しデザインを自動で設定することができる。このため、画像データ中の人物に応じた、より自然な目隠しデザイン情報を自動で挿入することができる。
【００６２】
また、顔情報から当該人物の人固有情報を推定し、これをグループ化して目隠し処理対象を選択可能であるため、多数の人物が画像データ中に存在する場合において、個別に目隠し処理対象を選択する必要がない。
【００６３】
また、目隠しデザイン情報のサイズが顔領域のサイズに応じて調整されるため、顔を確実に隠すことができるとともに、過剰に他の部位を隠すことがなく、画像の雰囲気を壊すことなく、自然に目隠し処理を行うことができる。
【００６４】
以上、添付図を参照しながら、本発明の実施の形態を説明したが、本発明の技術的範囲は、前述した実施の形態に左右されない。当業者であれば、特許請求の範囲に記載された技術的思想の範疇内において各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００６５】
例えば、目隠しデザイン情報と関連付けられる人に関する情報としては、性別および笑顔判定のみではなく、年齢や各グループに対して、それぞれ異なる目隠しデザイン情報を対応させてもよい。
【符号の説明】
【００６６】
１………画像処理システム
３………サーバ
４………ネットワーク
５………端末
３０………目隠しデザイン設定情報
３１………属性情報
３３………感性情報
３５………目隠しデザイン情報
４０………個人識別情報
４１………顔情報
４３………人固有情報
５０………画像データ
５１ａ、５１ｂ、５１ｃ………顔領域
６０………人に関する情報
７０………目隠し処理設定画面
７１………目隠し処理選択部
７３………設定ボタン
７５………人固有情報表示部
８０………目隠し処理画像
【技術分野】
【０００１】
本発明は、プライバシーの保護を目的として、画像に目隠し処理を画像処理システム等に関するものである。
【背景技術】
【０００２】
従来、デジタルカメラ等で撮影されたデジタル画像をウェブサイトにアップロードしてブログ等に用いる場合がある。このような場合には、ユーザは、必要に応じて、画像に写っている人物のプライバシーを保護するために、顔に目隠し処理を施して、その人物を特定できないように画像処理を施す場合がある。このような画像処理は、ユーザが画像処理ソフトを用いて手動で行うことも可能であるが、ユーザの負担が大きく、また、仕上がりもよくない。
【０００３】
このため、画像中の全ての顔を検出し、検出された顔に対して自動で目隠し処理を行う方法が提案されている（例えば特許文献１、特許文献２）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−０３４９６３号公報
【特許文献２】特開２０１０−１７０２６５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、特許文献１、特許文献２のいずれの方法も、画像中の人物の雰囲気によらず、画像中の全ての顔上に同一の目隠し処理を施すため、画像全体の雰囲気が著しく害される恐れがある。また、検出された顔全てに目隠し処理を施すため、本来目隠し処理の不要な部位（人物）にまで、目隠し処理が施されてしまうという問題がある。
【０００６】
本発明は、前述した問題点に鑑みてなされたもので、画像や人物の雰囲気を壊すことなくプライバシー保護のための目隠し処理を自動で行うことが可能な画像処理システム等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前述した目的を達成するために、第１の発明は、人の属性情報と目隠しデザインとを対応づけて記憶する記憶部と、画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する目隠しデザインを選択する選択手段と、前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザインを配置する配置手段と、を具備することを特徴とするサーバである。
【０００８】
前記目隠しデザイン情報は、前記人の属性情報および感性情報に対応づけられており、前記選択手段は、前記人の属性情報および感性情報によって、対応する前記目隠しデザイン情報を選択することが望ましい。
【０００９】
目隠し処理を行う対象を設定する設定手段をさらに具備し、前記配置手段は、前記設定手段により設定された人の画像中における顔の上のみに、選択された前記目隠しデザインを配置することが望ましい。
【００１０】
前記記憶部は、さらに、人の顔情報と当該顔情報に対応する人固有情報とが対応づけられて記憶され、前記第１の抽出手段で抽出された前記顔情報を用いて、前記記憶部から対応する前記人固有情報を抽出する第２の抽出手段をさらに具備し、前記設定手段は、前記第２の抽出手段により抽出された前記人固有情報から、人固有情報毎に目隠し処理を行う対象を設定してもよい。
【００１１】
前記配置手段は、対象である前記画像データ中における顔のサイズに応じて、前記目隠しデザインのサイズを調整し、調整後の前記目隠しデザインを対応する顔の上に配置してもよい。
【００１２】
第１の発明によれば、画像データ中の顔情報から人の属性情報を推定し、推定された人に応じて目隠しデザインを選択するため、画像中の人物の雰囲気や画像全体の雰囲気を壊すことない。したがって、対象画像に対して、自然な感じで目隠し処理を施すことができる。特に、目隠し処理を施す対象人物の属性および感性に基づいて目隠しデザインを選択すれば、より、人物の雰囲気に合わせた目隠し処理を施すことが可能である。
【００１３】
また、目隠し処理を施す対象を設定する設定手段を有すれば、画像中に検出された顔に対して、任意の顔にのみ目隠し処理を施すことができる。この際、あらかじめ顔情報と人固有情報とを対応させておくことで、人固有情報によるグループ分けが可能となり、目隠し処理を行う対象を当該グループによって選択することが可能である。したがって、目隠し処理対象の設定が容易である。
【００１４】
また、画像中の顔のサイズに応じて、目隠しデザインのサイズを調整するため、確実に対象の顔に対して目隠し処理を施すことが可能であるとともに、必要以上に大きな目隠し処理を施すことがない。
【００１５】
第２の発明は、サーバと端末とがネットワークを介して接続され、画像の特定の部位に画像処理を施す画像処理システムであって、前記端末は、画像データを前記サーバに送信する手段を有し、前記サーバは、人の属性情報と目隠しデザインとを対応づけて記憶する記憶部と、前記端末から送られた画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する目隠しデザインを選択する選択手段と、前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザインを配置する配置手段と、前記目隠しデザインが配置された前記画像データを前記端末に送信する手段と、を有し、前記端末は、前記目隠しデザインが配置された前記画像データを表示する表示手段を有することを特徴とする画像処理システムである。
【００１６】
第２の発明によれば、画像データ中の人物の雰囲気等に応じて適切な目隠しデザインを選択するため、画像に最適な目隠し処理を自動で行うことができる。
【００１７】
第３の発明は、画像の特定の部位に画像処理を施す画像処理方法であって、画像データを解析して、前記画像データ中の人間の顔情報を抽出する工程と、抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する工程と、人の属性情報と目隠しデザインとを対応づけて記憶する記憶部から、推定された前記人の属性情報を用いて、対応する目隠しデザインを選択する工程と、前記画像データに対して、抽出された顔の上に、選択された前記目隠しデザインを配置する工程と、を具備することを特徴とする画像処理方法である。
【００１８】
第３の発明によれば、画像中の人の属性情報を推定し、これに基づいて目隠しデザインを選択するため、当該人物に適した目隠し処理を自動で行うことができる。
【００１９】
第４の発明は、第１の発明を機能させることが可能なプログラムである。
【００２０】
第４の発明によれば、汎用的なコンピュータにインストールすることで、第１の発明のサーバを実現することができる。
【発明の効果】
【００２１】
本発明は、画像や人物の雰囲気を壊すことなくプライバシー保護のための目隠し処理を自動で行うことが可能な画像処理システム等を提供することができる。
【図面の簡単な説明】
【００２２】
【図１】画像処理システム１の概要を示すブロック図。
【図２】サーバ３のハードウエア構成図。
【図３】目隠しデザイン設定情報３０を示す図。
【図４】個人識別情報４０を示す図。
【図５】端末５のハードウエア構成図。
【図６】画像処理システム１における画像処理を示すフローチャート。
【図７】ステップ１０４の処理を詳細に示すフローチャート。
【図８】画像データ５０および、顔情報抽出画面を示す図。
【図９】人に関する情報６０示す図。
【図１０】目隠し処理設定画面７０を示す図。
【図１１】目隠し処理画像８０を示す図。
【発明を実施するための形態】
【００２３】
以下、添付図面に基づいて、本発明に係る画像処理システム等の好適な実施形態について詳細に説明する。尚、以下の説明及び添付図面において、略同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略することにする。
【００２４】
図１は、画像処理システム１の概要を示すブロック図である。画像処理システム１は、サーバ３、端末５がネットワーク４を介して接続される。
【００２５】
サーバ３は、本実施形態にかかる画像処理プログラムを格納し、このプログラムを実行することで、各種処理を行う。端末５は、例えばパーソナルコンピュータ等であり、インターネット等のネットワーク４を介して、サーバ３にアクセス可能である。
【００２６】
図２は、サーバ３のハードウエア構成例を示す図である。サーバ３は、制御部７、記憶部９、メディア入出力部１１、通信制御部１３、入力部１５、表示部１７、周辺機器Ｉ／Ｆ部１９等がバス２１を介して接続される。
【００２７】
制御部７は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等で構成される。
ＣＰＵは、ＲＯＭ、記憶部９等に格納されるプログラムをＲＡＭ上のワークメモリ領域に呼び出して実行し、バス２１を介して接続された各装置を駆動制御し、コンピュータが行う処理を実現する。
ＲＯＭは、不揮発性メモリであり、コンピュータのブートプログラムやＢＩＯＳ等のプログラム、データ等を恒久的に保持している。
ＲＡＭは、揮発性メモリであり、記憶部９、ＲＯＭ、記憶媒体等からロードしたプログラム、データ等を一時的に保持するとともに、制御部７が各種処理を行うために使用するワークエリアを備える。
【００２８】
記憶部９は、ＨＤＤ（ハードディスクドライブ）であり、制御部７が実行するプログラム、プログラム実行に必要なデータ、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）等が格納される。プログラムに関しては、ＯＳに相当する制御プログラムや、アプリケーションプログラム、ファイル等が格納されている。
これらの各プログラムコードは、制御部７により必要に応じて読み出されてＲＡＭに移され、ＣＰＵにより各種の手段として実行される。
【００２９】
メディア入出力部１１は、記録媒体のデータの入出力を行うドライブ装置であり、例えば、フロッピー（登録商標）ディスクドライブ、ＣＤドライブ（−ＲＯＭ、−Ｒ、−ＲＷ等）、ＤＶＤドライブ（−ＲＯＭ、−Ｒ、−ＲＷ等）、ＭＯドライブ等のメディア入出力装置を有する。
通信制御部１３は、通信制御装置、通信ポート等を有し、ネットワーク４を介した通信を媒介する通信インタフェースであり、他のコンピュータ間との通信制御を行う。
【００３０】
入力部１５は、データの入力を行い、例えば、キーボード、マウス等のポインティングデバイス、テンキー等の入力装置を有する。入力部１５を介して、コンピュータに対して、操作指示、動作指示、データ入力等を行うことができる。
表示部１７は、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）モニタ、液晶パネル等のディスプレイ装置、ディスプレイ装置と連携してビデオ機能を実現するための論理回路等（ビデオアダプタ等）を有する。
周辺機器Ｉ／Ｆ部１９は、周辺機器を接続するためのＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）ポート等である。
バス２１は、各装置間の制御信号、データ信号等の授受を媒介する経路である。
【００３１】
図３（ａ）は、記憶部９に記憶された目隠しデザイン設定情報３０の一例を示す図である。目隠しデザイン設定情報３０は、画像データ中の人物の属性情報３１、感性情報３３ごとに、目隠しデザイン情報３５が対応づけられたものである。
【００３２】
属性情報３１としては、例えば画像データ中の人物の性別（Ｍａｌｅ、Ｆｅｍａｌｅ）などの情報であり、感性情報３３としては、例えば笑顔判定による笑顔情報である。笑顔情報とは、後述する画像データ中の顔情報より得られる情報であり、当該顔が笑顔であるか否かを判定し、その確度等の情報である。すなわち、笑顔の確度が高いほど、その人の気分が「ｐｏｓｉｔｉｖｅ」であると判断し、笑顔確度が低いほど、その人の気分が「ｎｅｇａｔｉｖｅ」であると判断する。目隠しデザイン設定情報３０は、これらのそれぞれの組み合わせ毎に、その属性情報３１および感性情報３３に適した目隠しデザイン情報３５が対応づけられる。
【００３３】
図３（ｂ）は、目隠しデザイン情報３５の一例を示す図である。前述の通り、目隠しデザイン設定情報３０には、各属性情報３１および各感性情報３３に対して、適切な目隠しデザイン情報３５が対応付けられている。例えば、図３（ｂ）に示す例では、上段は男性、下段は女性に対して適用され、それぞれ、図中左側から右側に行くにつれて、人物の感性が「ｎｅｇａｔｉｖｅ」側から「ｐｏｓｉｔｉｖｅ」側に対応して設定される。ここで、目隠しデザイン情報とは、本発明において、画像データ中の対象となる顔を隠すために、その顔の上に挿入される画像情報である。
【００３４】
例えば、画像データ中の人物が男性であり、笑顔（ｓｍｉｌｌｉｎｇ）の確度（ｔｒｕｅ）が２０％であると判定されると、目隠しデザイン情報３５として「Ｂ．ｊｐｇ」（図３（ｂ）の上段左から二つ目）の目隠しデザイン情報が選択される。なお、あらかじめ設定された属性情報３１および感性情報３３の組み合わせに該当しないものに対しては、標準設定である「ｄｅｆａｕｌｔ」として目隠しデザイン情報を対応づけてもよい。
【００３５】
図４は、記憶部９に記憶された個人識別情報４０の一例を示す図である。個人識別情報４０は、必要に応じて予め記憶部９に保存される。個人識別情報４０は、人の顔情報４１と、人固有情報４３とが関連付けられている。
【００３６】
顔情報４１は、予め登録された個人の顔情報である。すなわち、個人の顔の正面またま正面に近い画像データを記憶部９に登録するとともに、登録された顔情報に基づいて、目、鼻、口その他のデータを解析することで、その人物の顔情報の特徴点を抽出して記憶したものである。
【００３７】
人固有情報４３は、その人物固有の情報である。例えば、その人物の氏名や、本人との関係などのグループ情報が記憶される。すなわち、ある画像データ中に、登録された顔情報の特徴に近い特徴を有する顔が抽出されると、当該人物に対応付けられた人固有情報４３を抽出することができる。
【００３８】
図５は、端末５のハードウエア構成例を示す図である。端末５は、制御部８、記憶部１０、メディア入出力部１２、通信制御部１４、入力部１６、表示部１８、周辺機器Ｉ／Ｆ部２０等がバス２２を介して接続される。なお、端末５の制御部８、記憶部１０、メディア入出力部１２、通信制御部１４、入力部１６、表示部１８、周辺機器Ｉ／Ｆ部２０、バス２２は、サーバ３の制御部７、記憶部９、メディア入出力部１１、通信制御部１３、入力部１５、表示部１７、周辺機器Ｉ／Ｆ部１９、バス２１とそれぞれ同様の構成であるため、重複する説明を省略する。
【００３９】
次に、画像処理システム１における画像処理について説明する。図６は、画像処理を示すフローチャートである。
【００４０】
まず、端末５の制御部８は、画像データをサーバ３に送信する（ステップ１００）。サーバ３の制御部７は、画像データを端末５から取得する。端末５からの画像データを取得したサーバ３は、制御部７により、取得した画像データを解析して、画像データ中の顔情報を抽出する（ステップ１０１）。
【００４１】
図８（ａ）は、取得した画像データ５０の一例を示す図、図８（ｂ）は、解析時の画像データ５０を示す概念図である。制御部７は、画像データ５０内の全ての顔について、顔情報を抽出する。例えば、人の目、鼻、口等の位置を取得するとともに、顔と認定した部位の顔領域を推定する。図８（ｂ）に示す例では、ＩＤ＝０、１、２の３つの顔情報が抽出され、それぞれの顔の顔領域５１ａ、５１ｂ、５１ｃが抽出される。
【００４２】
次に、制御部７は、顔情報を解析し、それぞれの顔情報毎に、その人に関する情報を推定する（ステップ１０２）。
【００４３】
図９は、顔情報から推定された人に関する情報６０を示す図である。人に関する情報６０は、例えば、その人の性別、年代層などの画像データ中の人の属性情報、その人の笑顔の度合いを示す感性情報および人固有情報等から構成される。例えば、ＩＤ＝２の顔情報（図８（ａ）の画像データ中の右側の顔）に対しては、その人に関する情報として、性別が女性、推定年代は２０代であり、笑顔であり、人固有情報が未登録であることが推定された例を示す。なお、人固有情報については、後述する。
【００４４】
画像データ５０から、顔情報を抽出し、その顔の属性や感性（笑顔判定）の推定を行う方法としては、例えば、特開２００９−２９４９２５号公報、特開２００５−１６５４４７号公報、特開２００７−３３６１２４などの公知の手法を用いればよく、例えば以下のようにすればよい。
【００４５】
まず、顔画像から顔領域検出部にて顔領域を検出し、さらに顔特徴抽出部にて顔の特徴情報を抽出する。また、あらかじめ男女別の幅広い年齢層の個人顔特徴情報を作成しておき、年齢と性別の情報と合わせて顔特徴保持部に保持し、顔特徴抽出部で抽出された顔特徴情報と顔特徴保持部内の個人顔特徴情報とを照合して類似度を求める。得られた類似度とそれに付属した年齢および性別の情報から当該人物の年齢と性別を判別すればよい。
【００４６】
また、笑顔認識は、口の曲がり具合、口角の上がり具合、目の大きさ、しわのより具合などにもとづいて定量化することができる。定量化された値にもとづいてあらかじめ設定されたしきい値との比較により、被写体像がどの程度笑っているかを判定することができる。
【００４７】
また、画像データ５０から、顔情報を抽出して、予め登録された人固有情報から、画像中の人物の人固有情報を推定する手段としては、例えば、非特許文献１（「顔画像を用いた顔認識システム」、信学技法ＰＲＭＵ９７−５０、）１９９７年６月、山口、福井、前田）や、特開２００３−１４１５４２号公報などの公知の手法を用いればよい。
【００４８】
例えば、特開２００３−１４１５４２号公報に記載されるように、顔照合用の辞書内に類似する顔パターンが存在する場合であっても一定の照合性能及びセキュリティレベルを維持するため、類似した顔パターンが辞書に複数登録されている場合、類似した顔パターン同士を類似グループとしてグループ分けし、類似グループに属する顔パターンに対しては、通常の照合処理とは異なる特別処理によって照合の可否を判断する方法により、顔認識の精度を向上させればよい。
【００４９】
次に、制御部７は、記憶部９内の目隠しデザイン設定情報３０（図３（ａ））から、それぞれの推定された人に関する情報６０に対応する目隠しデザイン情報３５を抽出する（ステップ１０３）。なお、画像中の人物の属性や感性が推定できなかった場合には、予め設定された標準設定の目隠しデザインが選択される。
【００５０】
次に、制御部７は、画像データ中のどの顔に対して目隠しデザインを挿入するか設定する（ステップ１０４）。目隠し処理を行う対象の選択は、それぞれの顔ごとに端末５から設定可能としても良いが、例えば以下のように行うこともできる。
【００５１】
図７は、ステップ１０４の詳細を示すフローチャートである。まず、制御部７は、記憶部９から、画像データ上のそれぞれの顔情報に対応する人固有情報を抽出する（ステップ２００）。次いで、抽出された人固有情報に基づいて、目隠し処理対象をグループ化する（ステップ２０１）。例えば、画像データ中に複数の人物が存在する場合において、それぞれの顔情報の人固有情報におけるグループが、「本人」、「友人」、「未登録」に分類可能であれば、それぞれ、「本人」のグループ、「友人」のグループ、「未登録」にグループ化する。
【００５２】
次に、制御部７は、目隠し処理を選択する選択画面を作成し、端末５に表示させる（ステップ２０２）。
【００５３】
図１０は、目隠し処理設定画面７０を示す図である。目隠し処理設定画面７０には、画像データとともに、目隠し処理選択部７１、設定ボタン７３、人固有情報表示部７５が設けられる。目隠し処理選択部７１は、前述したグループ分けされた各人物の人固有情報により、目隠し処理対象を選択可能である。例えば、図１０に示す例では、画像中の全ての人物は、「本人」、「友人」、「未登録」のいずれかのグループに分けられ、「友人」、「未登録」の人物に対して目隠し処理の選択を行った例を示す。
【００５４】
なお、画像中の各ＩＤに対応させて、人固有情報表示部７５にはそれぞれの人固有情報が表示される。したがって、この画面上から、新たに人固有情報を入力して、記憶部９の個人識別情報４０に追加することもできる。また、人固有情報の推定が異なる場合には、この部位に正しい情報を入力することで、人固有情報の修正や、さらに詳細なグループ分け（例えば「友人Ａグループ」「友人Ｂグループ」など）を行うことも可能である。
【００５５】
目隠し処理対象を選択し、設定ボタン７３が押されることで、端末５からサーバ３に対して、目隠し処理対象が送信される（図７、ステップ２０３）。端末５から目隠し処理対象を受信すると、制御部７は、目隠しデザイン情報を挿入する画像データ中の顔情報を設定する（ステップ２０４）。
【００５６】
次に、制御部７は、選択された目隠しデザイン情報のサイズを、画像データ中の対象となる顔の大きさに応じて調整する（ステップ１０５）。なお、サイズの調整は、必要に応じて、顔情報の縦方向または横方向に伸縮させてもよく、顔の向きに応じて回転させてもよい。すなわち、画像データ中の対象となる顔の顔領域に適するように、目隠しデザイン情報のサイズが調整される。
【００５７】
次に、制御部７は、設定された目隠しデザイン情報を、設定された顔情報の上に挿入し、目隠しデザイン情報が挿入された画像をユーザ端末に送信する（ステップ１０６）。端末５では、表示部１８に画像が表示される（ステップ１０７）。以上により、画像データ上に目隠しデザイン情報が挿入された画像が、ユーザに送信される。
【００５８】
図１１は、目隠し処理画像８０の一例を示す図である。目隠し処理画像８０には、目隠し処理対象として選択された顔（図では、真ん中の人物＝友人と、右側の人物＝未登録）に目隠しデザイン情報が挿入される。目隠しデザイン情報は、もともとの画像データ中の属性および感性に基づいて選択されるため、目隠し処理によって、画像データの雰囲気に影響が少ない。また、目隠しデザイン情報のサイズは、画像データ上の顔領域に応じて調整されるため、確実に顔が隠されるとともに、必要以上の部位が隠されることがない。
【００５９】
なお、さらにユーザは、端末５を介して、自動で設定された目隠しデザイン情報を手動で修正することもできる。例えば、自動で設定された目隠しデザイン情報に対して、他のデザインに修正しても良く、そのサイズや配置を調整しても良い。
【００６０】
以上、本発明によれば、ユーザは、対象画像データをサーバに送信することで、手間のかかる目隠し処理を手動で行うことなく、目隠しデザイン情報を画像に挿入することができる。したがって、ユーザの負担を削減することができる。
【００６１】
特に、画像データ中の顔情報から、その人の属性情報や感性情報を推定するため、単に顔を隠すのみではなく、より、画像データ中の人物（表情）に合った目隠しデザインを自動で設定することができる。このため、画像データ中の人物に応じた、より自然な目隠しデザイン情報を自動で挿入することができる。
【００６２】
また、顔情報から当該人物の人固有情報を推定し、これをグループ化して目隠し処理対象を選択可能であるため、多数の人物が画像データ中に存在する場合において、個別に目隠し処理対象を選択する必要がない。
【００６３】
また、目隠しデザイン情報のサイズが顔領域のサイズに応じて調整されるため、顔を確実に隠すことができるとともに、過剰に他の部位を隠すことがなく、画像の雰囲気を壊すことなく、自然に目隠し処理を行うことができる。
【００６４】
以上、添付図を参照しながら、本発明の実施の形態を説明したが、本発明の技術的範囲は、前述した実施の形態に左右されない。当業者であれば、特許請求の範囲に記載された技術的思想の範疇内において各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。
【００６５】
例えば、目隠しデザイン情報と関連付けられる人に関する情報としては、性別および笑顔判定のみではなく、年齢や各グループに対して、それぞれ異なる目隠しデザイン情報を対応させてもよい。
【符号の説明】
【００６６】
１………画像処理システム
３………サーバ
４………ネットワーク
５………端末
３０………目隠しデザイン設定情報
３１………属性情報
３３………感性情報
３５………目隠しデザイン情報
４０………個人識別情報
４１………顔情報
４３………人固有情報
５０………画像データ
５１ａ、５１ｂ、５１ｃ………顔領域
６０………人に関する情報
７０………目隠し処理設定画面
７１………目隠し処理選択部
７３………設定ボタン
７５………人固有情報表示部
８０………目隠し処理画像
【特許請求の範囲】
【請求項１】
人の属性情報と目隠しデザイン情報とを対応づけて記憶する記憶部と、
画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、
前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、
前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する前記目隠しデザイン情報を選択する選択手段と、
前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザイン情報を配置する配置手段と、
を具備することを特徴とするサーバ。
【請求項２】
前記目隠しデザイン情報は、前記人の属性情報および感性情報に対応づけられており、前記選択手段は、前記人の属性情報および感性情報によって、対応する前記目隠しデザイン情報を選択することを特徴とする請求項１記載のサーバ
【請求項３】
目隠し処理を行う対象を設定する設定手段をさらに具備し、
前記配置手段は、前記設定手段により設定された人の画像中における顔の上のみに、選択された前記目隠しデザイン情報を配置することを特徴とする請求項１または請求項２に記載のサーバ。
【請求項４】
前記記憶部は、さらに、人の顔情報と当該顔情報に対応する人固有情報とが対応づけられて記憶され、
前記第１の抽出手段で抽出された前記顔情報を用いて、前記記憶部から対応する前記人固有情報を抽出する第２の抽出手段をさらに具備し、
前記設定手段は、前記第２の抽出手段により抽出された前記人固有情報から、人固有情報毎に目隠し処理を行う対象を設定することを特徴とする請求項３記載のサーバ。
【請求項５】
前記配置手段は、対象である前記画像データ中における顔のサイズに応じて、前記目隠しデザイン情報のサイズを調整し、調整後の前記目隠しデザイン情報を対応する顔の上に配置することを特徴とする請求項１から請求項４のいずれかに記載のサーバ。
【請求項６】
サーバと端末とがネットワークを介して接続され、画像の特定の部位に画像処理を施す画像処理システムであって、
前記端末は、画像データを前記サーバに送信する手段を有し、
前記サーバは、
人の属性情報と目隠しデザイン情報とを対応づけて記憶する記憶部と、
前記端末から送られた画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、
前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、
前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する目隠しデザインを選択する選択手段と、
前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザイン情報を配置する配置手段と、
前記目隠しデザイン情報が配置された前記画像データを前記端末に送信する手段と、
を有し、
前記端末は、前記目隠しデザインが配置された前記画像データを表示する表示手段を有することを特徴とする画像処理システム。
【請求項７】
画像の特定の部位に画像処理を施す画像処理方法であって、
画像データを解析して、前記画像データ中の人間の顔情報を抽出する工程と、
抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する工程と、
人の属性情報と目隠しデザイン情報とを対応づけて記憶する記憶部から、推定された前記人の属性情報を用いて、対応する目隠しデザイン情報を選択する工程と、
前記画像データに対して、抽出された顔の上に、選択された前記目隠しデザイン情報を配置する工程と、
を具備することを特徴とする画像処理方法。
【請求項８】
コンピュータを請求項１に記載のサーバとして機能させるためのプログラム。
【請求項１】
人の属性情報と目隠しデザイン情報とを対応づけて記憶する記憶部と、
画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、
前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、
前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する前記目隠しデザイン情報を選択する選択手段と、
前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザイン情報を配置する配置手段と、
を具備することを特徴とするサーバ。
【請求項２】
前記目隠しデザイン情報は、前記人の属性情報および感性情報に対応づけられており、前記選択手段は、前記人の属性情報および感性情報によって、対応する前記目隠しデザイン情報を選択することを特徴とする請求項１記載のサーバ
【請求項３】
目隠し処理を行う対象を設定する設定手段をさらに具備し、
前記配置手段は、前記設定手段により設定された人の画像中における顔の上のみに、選択された前記目隠しデザイン情報を配置することを特徴とする請求項１または請求項２に記載のサーバ。
【請求項４】
前記記憶部は、さらに、人の顔情報と当該顔情報に対応する人固有情報とが対応づけられて記憶され、
前記第１の抽出手段で抽出された前記顔情報を用いて、前記記憶部から対応する前記人固有情報を抽出する第２の抽出手段をさらに具備し、
前記設定手段は、前記第２の抽出手段により抽出された前記人固有情報から、人固有情報毎に目隠し処理を行う対象を設定することを特徴とする請求項３記載のサーバ。
【請求項５】
前記配置手段は、対象である前記画像データ中における顔のサイズに応じて、前記目隠しデザイン情報のサイズを調整し、調整後の前記目隠しデザイン情報を対応する顔の上に配置することを特徴とする請求項１から請求項４のいずれかに記載のサーバ。
【請求項６】
サーバと端末とがネットワークを介して接続され、画像の特定の部位に画像処理を施す画像処理システムであって、
前記端末は、画像データを前記サーバに送信する手段を有し、
前記サーバは、
人の属性情報と目隠しデザイン情報とを対応づけて記憶する記憶部と、
前記端末から送られた画像データを解析して、前記画像データ中の人間の顔情報を抽出する第１の抽出手段と、
前記第１の抽出手段により抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する推定手段と、
前記推定手段で推定された前記人の属性情報を用いて、前記記憶部から対応する目隠しデザインを選択する選択手段と、
前記画像データに対して、前記第１の抽出手段により抽出された顔の上に、選択された前記目隠しデザイン情報を配置する配置手段と、
前記目隠しデザイン情報が配置された前記画像データを前記端末に送信する手段と、
を有し、
前記端末は、前記目隠しデザインが配置された前記画像データを表示する表示手段を有することを特徴とする画像処理システム。
【請求項７】
画像の特定の部位に画像処理を施す画像処理方法であって、
画像データを解析して、前記画像データ中の人間の顔情報を抽出する工程と、
抽出された前記画像データ中の前記顔情報から、人の属性情報を推定する工程と、
人の属性情報と目隠しデザイン情報とを対応づけて記憶する記憶部から、推定された前記人の属性情報を用いて、対応する目隠しデザイン情報を選択する工程と、
前記画像データに対して、抽出された顔の上に、選択された前記目隠しデザイン情報を配置する工程と、
を具備することを特徴とする画像処理方法。
【請求項８】
コンピュータを請求項１に記載のサーバとして機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１３−６９１８７（Ｐ２０１３−６９１８７Ａ）
【公開日】平成２５年４月１８日（２０１３．４．１８）
【国際特許分類】
【出願番号】特願２０１１−２０８４５６（Ｐ２０１１−２０８４５６）
【出願日】平成２３年９月２６日（２０１１．９．２６）
【出願人】（０００００２８９７）大日本印刷株式会社 (14,506)
【Ｆターム（参考）】
【公開日】平成２５年４月１８日（２０１３．４．１８）
【国際特許分類】
【出願日】平成２３年９月２６日（２０１１．９．２６）
【出願人】（０００００２８９７）大日本印刷株式会社 (14,506)
【Ｆターム（参考）】
[ Back to top ]