画像処理装置及びプログラム、並びに電子カメラ
【課題】 本発明は、例えば顔を補正する画像処理を行うときに視認性を向上させる手段を提供する。
【解決手段】 画像処理装置は、特徴領域設定部と、表示制御部とを備える。特徴領域設定部は、第１の画像の顔の位置に特徴領域を設定する。表示制御部は、第１の画像から特徴領域を部分的に切り出した第２の画像を画像と共に表示装置に表示させるときに、第１の画像の特徴領域と第２の画像とが少なくとも重ならないように表示させる。
【解決手段】 画像処理装置は、特徴領域設定部と、表示制御部とを備える。特徴領域設定部は、第１の画像の顔の位置に特徴領域を設定する。表示制御部は、第１の画像から特徴領域を部分的に切り出した第２の画像を画像と共に表示装置に表示させるときに、第１の画像の特徴領域と第２の画像とが少なくとも重ならないように表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及びプログラム、並びに電子カメラに関する。
【背景技術】
【０００２】
従来、人物を撮影した本画像から顔を補正する画像処理装置が提案されている（例えば、特許文献１参照）。上記の画像処理装置では、顔を補正することにより、見映えの良い画像を生成する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−７７５９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記の画像処理装置では、ユーザの入力により選択された顔の補正領域を示す画像と本画像とを表示モニタに表示させるため、例えば補正領域を示す画像を拡大した場合、本画像中の補正領域が隠れて見えなくなるおそれがあった。
【０００５】
そこで、本発明は、上記事情に鑑み、例えば顔を補正する画像処理を行うときに視認性を向上させる手段を提供することを目的とする。
【課題を解決するための手段】
【０００６】
第１の発明に係る画像処理装置は、特徴領域設定部と、表示制御部とを備える。特徴領域設定部は、第１の画像の顔の位置に特徴領域を設定する。表示制御部は、第１の画像から特徴領域を部分的に切り出した第２の画像を画像と共に表示装置に表示させるときに、第１の画像の特徴領域と第２の画像とが少なくとも重ならないように表示させる。
【０００７】
第２の発明は、第１の発明において、表示制御部は、第１の画像を縮小表示させると共に第２の画像を拡大表示させる。
【０００８】
第３の発明は、第１又は第２の発明において、補正受付部と、補正部とをさらに備える。補正受付部は、特徴領域の補正の指示入力を受け付ける。補正部は、指示入力に基づいて、特徴領域を補正する。
【０００９】
第４の発明は、第１から第３の何れか１の発明において、第１の画像の情報には、前記第１の画像の補正箇所を示す補正情報が対応付けられている。特徴領域設定部は、補正情報に基づいて、前記特徴領域を設定する。
【００１０】
第５の発明は、第４の発明において、補正情報は、第１の画像に施された補正の度合いの情報を含む。表示制御部は、補正の度合いの高さに比例して、第２の画像の拡大率を高くする。
【００１１】
第６の発明は、第１から第３の何れか１の発明において、顔検出部をさらに備える。顔検出部は、第１の画像から顔又は顔の特徴部位を検出する。特徴領域設定部は、顔検出部が検出した顔又は特徴部位に基づいて、特徴領域を設定する。
【００１２】
第７の発明は、第１から第３の何れか１の発明において、特徴領域受付部をさらに備える。特徴領域受付部は、特徴領域の指定入力を受け付ける。
【００１３】
第８の発明に係る電子カメラは、被写体の像を撮像して第１の画像を生成する撮像素子と、請求項１から請求項７の何れか１項に記載の画像処理装置とを備える。
【００１４】
第９の発明に係るプログラムは、コンピュータに画像の処理を実行させるプログラムであって、特徴領域設定処理と、表示制御処理とをコンピュータに実行させる。特徴領域設定処理は、第１の画像の顔の位置に特徴領域を設定する。表示制御処理は、第１の画像から前記特徴領域を部分的に切り出した第２の画像を前記画像と共に表示装置に表示させるときに、前記第１の画像の前記特徴領域と前記第２の画像とが少なくとも重ならないように表示させる。
【発明の効果】
【００１５】
本発明によれば、例えば顔を補正する画像処理を行うときに視認性を向上させることができる。
【図面の簡単な説明】
【００１６】
【図１】画像処理装置１の構成を説明するブロック図
【図２】画像処理装置１の動作の一例を示すフローチャート
【図３】画像の一例を示す図
【図４】表示モニタ４に表示された画像２０ａを示す図
【図５】特徴領域の一例を説明する図
【図６】表示制御部８ｃによる表示態様の一例を示す図
【図７】表示制御部８ｃによる表示態様の一例を示す図
【図８】表示制御部８ｃによる表示態様の一例を示す図
【図９】電子カメラ５０の構成を説明するブロック図
【図１０】画像ファイルの一例を模式的に表した図
【図１１】補正レベル値と部分画像の拡大率との対応関係の一例を示すテーブル
【発明を実施するための形態】
【００１７】
（第１実施形態）
以下、図面に基づいて本発明の実施の形態を詳細に説明する。図１は、画像処理装置１の構成を説明するブロック図である。ここで、画像処理装置１は、画像内の顔の特徴部位を美しく補正するパーツメイクモード（以下「特徴部位補正モード」という）を有する。ここで、顔の特徴部位は、例えば、目、眉、鼻、唇等の何れか１つに限られず、頬や額の部分であっても良い。特徴部位補正モードの具体的な内容については、後述する。なお、第１実施形態では、電子カメラで人物を撮影した第１の画像（以下、単に「画像」という）を後述する記録媒体１０から読み出して特徴部位補正モードの補正を行う。
【００１８】
画像処理装置１は、図１に示す通り、記録インターフェース部（以下「記録Ｉ／Ｆ部」という）２と、メモリ３と、表示モニタ４と、タッチパネル５と、キーボード６と、マウス７と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８と、データバス９とを備える。
【００１９】
このうち、記録Ｉ／Ｆ部２、メモリ３、表示モニタ４及びＣＰＵ８は、データバス９を介して互いに接続されている。また、タッチパネル５、キーボード６及びマウス７は、ＣＰＵ８に接続されている。
【００２０】
記録Ｉ／Ｆ部２は、データの書き込みや読み出しのインターフェースを提供する。記録Ｉ／Ｆ部２には、着脱自在の記録媒体１０を接続するためのコネクタ（不図示）が形成されている。そして、記録Ｉ／Ｆ部２は、そのコネクタに接続された記録媒体１０にアクセスして画像の記録処理等を行う。この記録媒体１０は、例えば、不揮発性のメモリカードである。図１では、コネクタに接続された後の記録媒体１０を示している。
【００２１】
メモリ３は、記録Ｉ／Ｆ部２が記録媒体１０から読み出した画像データを、一時的に記録する。また、表示モニタ４は、ＣＰＵ８の指示に応じて画像や画像処理装置１の操作メニュー等を表示する。なお、表示モニタ４には、液晶のモニタ等を適宜選択して用いることができる。
【００２２】
タッチパネル５は、検出面に接触した指先等の位置を検出することでユーザからの操作を受け付けるポインティングデバイスである。なお、タッチパネル５の検出面は、透明であって、表示モニタ４の表示画面上に配置されているものとする。キーボード６やマウス７は、ユーザからの入力の操作を受け付ける入力デバイスである。
【００２３】
ＣＰＵ８は、各種演算及び画像処理装置１の制御を行うプロセッサである。ＣＰＵ８は、メモリ３に予め格納されたシーケンスプログラムを実行することにより、画像処理装置１の各部の制御等を行う。
【００２４】
また、ＣＰＵ８は、特徴部位補正モードのプログラムが実行されることにより、顔検出部８ａと、特徴領域設定部８ｂと、表示制御部８ｃと、補正受付部８ｄと、補正部８ｅと、特徴領域受付部８ｆとしても機能する。
【００２５】
顔検出部８ａは、画像を解析して画像から特徴点（特徴量）を抽出して顔領域の位置、顔領域の大きさ（顔面積）等を検出する。例えば、顔検出部８ａは、特開２００１−１６５７３号公報等に記載された特徴点抽出処理によって顔領域を抽出する。また、顔検出部８ａは、特徴点に基づいて、例えば、眉、目、鼻、唇等の顔の特徴部位を画像から検出する。これらの処理により、顔検出部８ａは、画像内の顔領域の位置、顔の特徴部位の位置を特定する。例えば、顔検出部８ａは、画像の横方向をＸ軸、縦方向をＹ軸としたときに、顔領域に含まれる画素のＸ座標及びＹ座標を算出する。
【００２６】
特徴領域設定部８ｂは、一例として、顔検出部８ａが検出した顔又は顔の特徴部位に基づいて、特徴領域を画像内に設定する。そして、特徴領域設定部８ｂは、特徴領域を画像から部分的に切り出して新たに第２の画像（以下「部分画像」という）を生成する。なお、部分画像は、例えば唇の輪郭部分を切り出した画像であっても良く、或いは、唇を含む周辺領域を切り出した画像であっても良い。
【００２７】
なお、特徴領域設定部８ｂは、特徴領域受付部８ｆを介して、特徴領域を設定しても良い。ここで、特徴領域受付部８ｆは、タッチパネル５又はマウス７を介して特徴領域の指定入力を受け付ける。特徴領域設定部８ｂは、この指定入力に基づいて、特徴領域を設定する。
【００２８】
表示制御部８ｃは、画像や部分画像の解像度を変換すると共に、表示モニタ４上で表示される画像や部分画像の位置と大きさを調整する。例えば、表示制御部８ｃは、画像と部分画像とを表示モニタ４に表示させるときに、画像の特徴領域と部分画像とが少なくとも重ならないように表示させる。この場合、表示制御部８ｃは、画像を縮小表示させると共に部分画像を拡大表示させても良い。
【００２９】
補正受付部８ｄは、特徴領域の補正の指示入力を受け付ける。具体的には、補正受付部８ｄは、例えば、タッチパネル５やマウス７を介して特徴領域の補正の指示入力を受け付ける。
【００３０】
補正部８ｅは、特徴部位補正モードの実行時において、ユーザからの指示入力或いはＣＰＵ８の指示に基づいて画像の特徴領域の部分を補正する。この特徴領域の補正は、例えば、被写体の顔の目や唇等の特徴部位を美しく見せるための画像処理である。なお、補正部８ｅは、例えば以下に示す少なくとも１つの画像処理を行う。
（１）色補正
補正部８ｅは、例えば、ユーザからの指示入力により、色相、彩度、明度のうち少なくとも１つのパラメータを変更する色補正を行う。具体的には、補正部８ｅは、例えば、上瞼の色に青味を増す色補正や、頬の色に赤味を増す色補正を行う。或いは、補正部８ｅは、例えば、唇の色に赤味を増す色補正を行う。或いは、補正部８ｅは、例えば、唇の色をユーザの好みの色に補正する。
（２）形状補正
補正部８ｅは、特徴領域内の特徴部位の形状補正を行う。例えば、補正部８ｅは、目の領域を拡大する補正を行う。具体的には、補正部８ｅは、目の領域の画像の画素を補間する補間処理を行う。この補間処理は、例えば、バイキュービック法といった公知の補間処理により実現される。補正部８ｅは、バイキュービック法を用いた場合、拡大によって生じる新たな画素の色を隣接する画素の色の平均値から作成する。
（３）平滑化補正
補正部８ｅは、頬の肌色領域に存在するノイズ成分を低減化する。例えば、補正部８ｅは、頬の肌色領域のノイズ成分を低減化するローパスフィルタ等を用いてノイズの低減化処理を行う。補正部８ｅは、このノイズの低減化処理により、被写体のニキビ等の凹凸感、肌荒れ等が目立ちにくい好ましい画像を生成することができる。
【００３１】
なお、上記（１）〜（３）の画像処理は一例であって、補正部８ｅは、被写体の顔の特徴部位を美しく見せるための画像処理であれば、他の画像処理をさらに採用しても良い。
【００３２】
次に、特徴部位補正モードにおける画像処理装置１の動作の一例を説明する。図２は、画像処理装置１の動作の一例を示すフローチャートである。
【００３３】
ここで、ＣＰＵ８は、例えば図１に示すタッチパネル５又はマウス７を介して特徴部位補正モードの指示入力を受け付けることにより、特徴部位補正モードのプログラムを起動する。そして、ＣＰＵ８は、図２に示すフローの処理を開始させる。
【００３４】
ステップＳ１０１：ＣＰＵ８は、記録媒体１０から画像を読み出して、メモリ３に一時的に記録する。図３は、画像の一例を示す図である。ここで、ＣＰＵ８の顔検出部８ａは、メモリ３又は記録媒体１０に記録されている画像２０から顔領域を検出する。そして、ＣＰＵ８の表示制御部８ｃは、顔領域（周辺も含む）を拡大した画像２０ａを第１の画像として表示モニタ４にさせる。なお、表示制御部８ｃは、画像２０をそのまま第１の画像として表示モニタ４にさせても良い。
【００３５】
図４は、表示モニタ４に表示された画像２０ａを示す図である。図４では、特徴部位補正モードのプログラム起動後の画面を表している。ここで、ＣＰＵ８は、タッチパネル５を介して、ユーザからの種々の操作を受け付ける。例えば、図４に示す「Ｙｅｓ」の領域への接触をタッチパネル５が検出した場合、ＣＰＵ８は、特徴領域の補正の指示入力を受け付ける。そして、ＣＰＵ８は、ステップＳ１０２の処理に移行する。なお、フローには示していないが、図４に示す「Ｎｏ」の領域への接触をタッチパネル５が検出した場合、ＣＰＵ８は、図２に示すフローの処理を終了させる。
【００３６】
ステップＳ１０２：特徴領域設定部８ｂは、画像内において顔検出部８ａが検出した特徴部位の位置に特徴領域を設定する。図５は、特徴領域の一例を説明する図である。ここで、説明の便宜上、特徴領域設定部８ｂは、唇２１を囲む領域を特徴領域２３、左目２２を囲む領域を特徴領域２４として設定する。そして、特徴領域設定部８ｂは、特徴領域２３及び２４を画像２０ａから部分的に切り出して新たに部分画像を各々生成する。なお、補正部８ｅは、一例として、ユーザからの入力にしたがって片方の目（左目２２）を補正した場合、他方の目（右目２５）も同様に補正することとする。
【００３７】
ステップＳ１０３：表示制御部８ｃは、画像２０ａを縮小した画像２０ｂの特徴領域と部分画像とが重ならないように表示モニタ４に表示させる。図６は、表示制御部８ｃによる表示態様の一例を示す図である。表示制御部８ｃは、画像２０ｂの特徴領域２３、２４と、部分画像２６、２７とが重ならないように表示させる。なお、表示制御部８ｃは、一例として、画像２０ｂのサイズを表示モニタ４の表示画面に対して約６０％程度のサイズに縮小させても良い。図６において、表示制御部８ｃは、特徴領域２３、２４を点線の矩形枠で表示モニタ４に表示させる。この矩形枠の表示は、部分画像２６、２７の各領域と顔の位置との対応関係をユーザに示す。
【００３８】
また、表示制御部８ｃは、マーク２８、２９を所定時間、表示モニタ４に表示させる。ここで、マーク２８、２９は、特徴領域設定部８ｂが設定した特徴領域をユーザに報知するためのアイコンである。
【００３９】
なお、例えば、部分画像２６の拡大操作に応じて、表示制御部８ｃは、部分画像２６と画像２０ｂの顔領域とが重ならないようにするため、部分画像２６をさらに拡大させる共に画像２０ｂのサイズをさらに縮小させる。また、例えば、部分画像２６の移動操作に応じて、表示制御部８ｃは、画像２０ｂのサイズを縮小させることにより、部分画像２６と画像２０ｂの顔領域とが重ならないように表示させても良い。或いは、表示制御部８ｃは、部分画像２６の移動に連動させて画像２０ｂを移動させることにより、部分画像２６と画像２０ｂの顔領域とが重ならないように表示させても良い。また、表示制御部８ｃは、部分画像の拡大率の変更を、例えば、タッチパネル５を介して受け付けても良い。
【００４０】
ステップＳ１０４：ＣＰＵ８は、特徴領域の補正の指示入力を受け付ける。具体例として、ＣＰＵ８は、タッチパネル５上で部分画像２６の位置への接触を検出した場合、左目２２の補正の指示入力を受け付ける。そして、表示制御部８ｃは、図６から図７に示す画面に切り替える。
【００４１】
図７は、表示制御部８ｃによる表示態様の一例を示す図である。図７では、表示制御部８ｃは、部分画像２６と、画像２０ｂをさらに縮小させた画像２０ｃとが重ならないように表示モニタ４に表示させる。さらに、表示制御部８ｃは、瞳（左目２２）の補正用のパレット４１〜４５を部分画像２６及び画像２０ｃに重ならないように表示モニタ４に表示させる。パレット４１は、アイシャドーの色を指定するためのユーザインターフェースを提供する。パレット４２は、瞳の形を指定するためのユーザインターフェースを提供する。パレット４３は、瞳の角度を指定するためのユーザインターフェースを提供する。パレット４４は、目尻の長さを指定するためのユーザインターフェースを提供する。パレット４５は、いわゆるキャッチライト（瞳の領域中の輝きの形状）を指定するためのユーザインターフェースを提供する。ユーザは、パレット４１〜４５を利用して補正の選択入力をタッチパネル５を介して行う。ＣＰＵ８は、タッチパネル５を介して補正の選択入力を受け付けた場合、ステップＳ１０５の処理に移行する。
【００４２】
ステップＳ１０５：ＣＰＵ８の補正部８ｅは、指定された特徴領域の部分を補正する。例えば、補正部８ｅは、左目２２の補正として瞳の中にキャッチライトを入れる画像処理を行う。また、例えば、補正部８ｅは、左目２２の補正としてアイシャドー（黒色）を付加する画像処理を行う。そして、補正部８ｅは、図５に示す右目２５についても左目２２と同様の画像処理を行う。また、例えば、補正部８ｅは、図６に示す唇２１の色に赤味を増す色補正を行う。ここで、補正部８ｅは、例えば、部分画像２７の特徴部位（唇２１）を補正すると、図６に示す画像２０ｂにも補正を行い、部分画像２７での補正内容を画像２０に反映させる。
【００４３】
ステップＳ１０６：表示制御部８ｃは、補正後の画像２０から顔領域を拡大した画像２０ｄと補正の処理結果の内容を表示モニタ４に表示させる。図８は、表示制御部８ｃによる表示態様の一例を示す図である。ＣＰＵ８は、補正後の画像２０を記録媒体１０に記録する。なお、画像処理装置１は、通信インターフェースをさらに設けて、補正の処理結果（一覧表示の内容）を例えば、外部のプリンタ機器に出力するようにしても良い。ＣＰＵ８は、補正後の画像２０を記録媒体１０に記録した後、図２に示すフローの処理を終了させる。
【００４４】
以上より、第１実施形態の画像処理装置１では、画像の特徴領域と部分画像とが重ならないように表示モニタ４に表示させる。そのため、ユーザは画像の特徴領域を見ながら部分画像の特徴部位を補正することができる。したがって、第１実施形態の画像処理装置１は、例えば顔を補正する画像処理を行うときに視認性を向上させることができる。
（第２実施形態）
次に、第２実施形態について説明する。第２実施形態では、本発明の画像処理装置を搭載した電子カメラについて説明する。なお、第２実施形態では、電子カメラで人物を撮影した画像に対して特徴部位補正モードの補正を行った場合、補正した処理内容を画像のデータに付加する（詳細は後述する）。
【００４５】
図９は、電子カメラ５０の構成を説明するブロック図である。電子カメラ１は、図９に示す通り撮影光学系５１と、撮像素子５２と、信号処理部５３と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）５４と、画像処理部５５と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）５６と、記録Ｉ／Ｆ部５７と、表示モニタ５８と、タッチパネル５９と、操作部６０と、レリーズ釦６１と、ＣＰＵ６２と、データバス６３とを備える。
【００４６】
このうち、信号処理部５３、ＲＡＭ５４、画像処理部５５、ＲＯＭ５６、記録Ｉ／Ｆ部５７、表示モニタ５８及びＣＰＵ６２は、データバス６３を介して互いに接続されている。また、タッチパネル５９、操作部６０及びレリーズ釦６１は、ＣＰＵ６２に接続されている。
【００４７】
撮像光学系５１は、ズームレンズとフォーカスレンズとを含む複数のレンズ群で構成されている。なお、簡単のため、図９では、撮像光学系５１を１枚のレンズとして図示する。
【００４８】
撮像素子５２は、撮像光学系５１を通過した光束による被写体の像を撮像し、アナログの画像信号（画像）を出力する。そして、撮像素子５２が出力するアナログの画像信号は、信号処理部５３に入力される。
【００４９】
ここで、撮像素子５２は、電子カメラの撮影モードにおいて、後述のレリーズ釦６１の全押し操作に応答して記録用の画像を撮像する。また、撮像素子５２は、撮影待機時にも所定間隔毎に構図確認用のスルー画像を連続的に撮像する。
【００５０】
信号処理部５３は、撮像素子５２が出力する画像信号に対してアナログ信号処理（Ａ／Ｄ変換等）やデジタル信号処理を施す回路である。この信号処理部５３が出力する画像信号は、ＲＧＢ信号の画像データとしてＲＡＭ５４に一時的に記録される。ＲＡＭ５４は、画像データを一時的に記録するバッファメモリである。
【００５１】
画像処理部５５は、ＲＡＭ５４に記録されている画像データを読み出し、必要に応じて各種の画像処理（例えば、色補間処理、ホワイトバランス等）を施す。なお、記録Ｉ／Ｆ部５７、表示モニタ５８、タッチパネル５９等は、第１実施形態の構成（記録Ｉ／Ｆ部２、表示モニタ４、タッチパネル５）と同様であるので説明を省略する。
【００５２】
操作部６０は、電源釦、広角ズーム釦と、望遠ズーム釦等のユーザからの操作を受け付ける複数の釦（不図示）を有している。レリーズ釦６１は、例えば、全押し操作（撮像動作開始）の指示入力を受け付ける。
【００５３】
ＣＰＵ６２は、各種演算及び電子カメラ１の制御を行うプロセッサである。ＣＰＵ６２は、ＲＯＭ５６に予め格納されたシーケンスプログラムを実行することにより、電子カメラ１の各部の制御等を行う。
【００５４】
また、ＣＰＵ６２は、特徴部位補正モードのプログラムが実行されることにより、顔検出６２ａと、特徴領域設定部６２ｂと、表示制御部６２ｃと、補正受付部６２ｄと、補正部６２ｅと、特徴領域受付部６２ｆとしても機能する。ここで、顔検出部６２ａ、特徴領域設定部６２ｂ、表示制御部６２ｃ、補正受付部６２ｄ、補正部６２ｅ及び特徴領域受付部６２ｆについては、第１実施形態の構成（顔検出部８ａ、特徴領域設定部８ｂ、表示制御部８ｃ、補正受付部８ｄ、補正部８ｅ、特徴領域受付部８ｆ）とそれぞれ同様であるので説明を省略する。
【００５５】
なお、第２実施形態では、画像に対して特徴部位補正モードが施されたときに、ＣＰＵ６２の制御によって、画像の補正箇所を示す補正情報が画像のデータに付加される。具体的には、第２実施形態で採用する画像のデータは、例えば、Ｅｘｉｆ（Ｅｘｃｈａｎｇｅａｂｌｅ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）形式のファイルフォーマットに準拠して生成される。
【００５６】
図１０は、画像ファイルの一例を模式的に表した図である。図１０に示す通り、画像ファイルのデータ構造は、ヘッダ領域と画像データ領域とを有する。ヘッダ領域には、例えば、撮影日時、画素数、撮影条件等の撮影情報が書き込まれる。さらに、ヘッダ領域には、メーカ側で定義できる情報として、メーカノートのタグが備えられている。第２実施形態では、メーカノートのタグに補正情報を追加する。補正情報には、例えば、特徴領域の補正の内容、特徴領域の座標データ、補正の度合いを示す補正レベル値等が含まれる。
【００５７】
次に、特徴部位補正モードにおける電子カメラ５０の動作の一例を説明する。ここで、ＣＰＵ６２は、操作部６０を介して特徴部位補正モードの指示入力を受け付ける。その後、ＣＰＵ６２は、レリーズ釦６１の全押し操作に応答して画像を撮像する。これにより、ＣＰＵ６２は、画像処理部５５により各種の画像処理を施された画像を記録媒体７０に記録する。続いて、ＣＰＵ６２は、特徴部位補正モードのプログラムを起動して、図２に示すフローの処理を開始させる。なお、第２実施形態では、図２に示すフローの処理（ステップＳ１０１〜ステップＳ１０６）を実行するので同様の処理については重複説明を省略する。ここで、図２に示すフローの処理と異なる点は、ステップＳ１０５において、ＣＰＵ６２が上記のメーカノートのタグを用いて画像のデータに補正情報を追記する点である。
【００５８】
以上より、第２実施形態の電子カメラ５０は、第１実施形態の画像処理装置１と同様にして、画像の特徴領域と部分画像とが重ならないように表示モニタ５８に表示させる。そのため、ユーザは画像の特徴領域を見ながら部分画像の特徴部位を補正することができる。したがって、第２実施形態の電子カメラ５０は、例えば顔を補正する画像処理を行うときに視認性を向上させることができる。
＜上記実施形態の補足事項＞
（１）第１実施形態の画像処理装置１では、第２実施形態の電子カメラ５０で撮影された画像を用いても良い。この場合、特徴領域設定部８ｂは、Ｅｘｉｆファイルにおけるメーカノートのタグの画像データに追記された画像の補正情報（特徴領域の座標データ）に基づいて、特徴領域を画像内に設定しても良い。また、図１に示す表示制御部８ｃは、補正レベル値を読み出して、部分画像の拡大率を設定しても良い。
【００５９】
図１１は、補正レベル値と部分画像の拡大率との対応関係の一例を示すテーブルである。このテーブルの内容は、予めメモリ３に記録されていることとする。図１１では、特徴領域の補正の対象となる特徴部位への補正レベル値が設定されている。また、図１１では、各補正レベル値（０〜１０）に対応して部分画像の拡大率を示し、各補正レベル値が高くなるにつれて、特徴部位の領域が大きく補正される。表示制御部８ｃは、テーブルメモリを参照して補正レベル値が高くなる（補正の度合いが高くなる）につれて、部分画像の拡大率を高くする。なお、表示制御部８ｃは、部分画像の拡大率を特徴部位の拡大率として、表示モニタ４に表示させるようにしても良い。
【００６０】
また、特徴領域設定部８ｂが補正情報に基づいて特徴領域を画像内に設定した場合、表示制御部８ｃは、例えば、図６に示すマーク２８、２９と同様のマークをその特徴領域に表示させることで、特徴部位の補正が既に施されていることを示しても良い。
【００６１】
したがって、これらの処理により、画像処理装置１では、既に顔の特徴部位が補正された画像を再度補正する際にも視認性を向上させることができる。
【００６２】
（２）第１実施形態の画像処理装置１において、表示制御部８ｃは、補正用のパレット４１〜４５を表示モニタ４に表示させたが、表示制御部８ｃは、例えば、部分画像の色情報として、輝度（Ｙ）、Ｒ（赤）、Ｇ（緑）、Ｂ（青）のヒストグラム（度数分布）を表示させても良い。
【００６３】
また、表示制御部８ｃは、画像２０ａのうちで、輝度値が所定値以上の領域をハイライト表示（点滅表示）させても良い。ユーザがハイライト表示されている領域を指定した場合、特徴領域設定部８ｂは、その領域を特徴領域に設定しても良い。
【００６４】
（３）第１実施形態の画像処理装置１において、補正部８ｅは、一例として、ユーザからの入力にしたがって片方の目（左目２２）を補正した場合（図５参照）、もう一方の目（右目２５）も同様に補正した。ここで、補正部８ｅは、一例として、ユーザからの入力にしたがって左目２２と右目２５とを個別に補正しても良い。この場合、表示制御部８ｃは、ユーザのタッチパネル５上での操作に応じて、図６に示す部分画像２６の左目２２を、右目の部分画像に切り替えて表示させるようにしても良い。或いは、表示制御部８ｃは、ユーザが画像２０の左目２２から右目２５に向けてマウス７のボタンを押したままポインタを移動させた後、右目２５の位置でマウス７のボタンを離す操作を行った場合、部分画像２６の左目２２を、右目２５の部分画像に切り替えて表示させても良い。
【００６５】
また、表示制御部８ｃは、例えば、ユーザが部分画像上で何れかの方向に向けてマウス７のボタンを押したままポインタを移動させる操作を行った場合、この操作に応じて表示させる領域をポインタの移動方向に移動させても良い。或いは、表示制御部８ｃは、例えば、ユーザのタッチパネル５上での指の移動軌跡に応じて、部分画像の表示させる領域を上記の移動軌跡に追従させても良い
（４）第１実施形態の画像処理装置１において、表示制御部８ｃは、補正用のパレット４１〜４５を表示モニタ４に表示させた（図７参照）。第２実施形態の電子カメラ１において、表示制御部８ｃは、表示モニタ５８のサイズに応じて、補正用のパレットの数を例えば１つに制限しても良い。この場合、表示制御部８ｃは、補正用のパレット４１〜４５を順番に表示モニタ５８に表示させるようにしても良い。
【００６６】
（５）第１実施形態の画像処理装置１において、画像内の特徴領域に対応する表示領域として破線の矩形枠を用いたが、これは一例であって、例えば実線の矩形枠であっても良い。
【００６７】
（６）第２実施形態の電子カメラ１において、特徴領域設定部８ｂは、スルー画像に対して特徴領域に設定しても良い。この場合、補正部８は、スルー画像に対して補正を行う。これにより、ユーザは撮影前に特徴部位補正モードの結果を確認した上で撮影を行うことができる。
【符号の説明】
【００６８】
１・・・画像処理装置、５０・・・電子カメラ、８ａ、６２ａ・・・顔検出部、８ｂ、６２ｂ・・・特徴領域設定部、８ｃ、６２ｃ・・・表示制御部、８ｄ、６２ｄ・・・補正受付部、８ｅ、６２ｅ・・・補正部、８ｆ、６２ｆ・・・特徴領域受付部
【技術分野】
【０００１】
本発明は、画像処理装置及びプログラム、並びに電子カメラに関する。
【背景技術】
【０００２】
従来、人物を撮影した本画像から顔を補正する画像処理装置が提案されている（例えば、特許文献１参照）。上記の画像処理装置では、顔を補正することにより、見映えの良い画像を生成する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００２−７７５９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記の画像処理装置では、ユーザの入力により選択された顔の補正領域を示す画像と本画像とを表示モニタに表示させるため、例えば補正領域を示す画像を拡大した場合、本画像中の補正領域が隠れて見えなくなるおそれがあった。
【０００５】
そこで、本発明は、上記事情に鑑み、例えば顔を補正する画像処理を行うときに視認性を向上させる手段を提供することを目的とする。
【課題を解決するための手段】
【０００６】
第１の発明に係る画像処理装置は、特徴領域設定部と、表示制御部とを備える。特徴領域設定部は、第１の画像の顔の位置に特徴領域を設定する。表示制御部は、第１の画像から特徴領域を部分的に切り出した第２の画像を画像と共に表示装置に表示させるときに、第１の画像の特徴領域と第２の画像とが少なくとも重ならないように表示させる。
【０００７】
第２の発明は、第１の発明において、表示制御部は、第１の画像を縮小表示させると共に第２の画像を拡大表示させる。
【０００８】
第３の発明は、第１又は第２の発明において、補正受付部と、補正部とをさらに備える。補正受付部は、特徴領域の補正の指示入力を受け付ける。補正部は、指示入力に基づいて、特徴領域を補正する。
【０００９】
第４の発明は、第１から第３の何れか１の発明において、第１の画像の情報には、前記第１の画像の補正箇所を示す補正情報が対応付けられている。特徴領域設定部は、補正情報に基づいて、前記特徴領域を設定する。
【００１０】
第５の発明は、第４の発明において、補正情報は、第１の画像に施された補正の度合いの情報を含む。表示制御部は、補正の度合いの高さに比例して、第２の画像の拡大率を高くする。
【００１１】
第６の発明は、第１から第３の何れか１の発明において、顔検出部をさらに備える。顔検出部は、第１の画像から顔又は顔の特徴部位を検出する。特徴領域設定部は、顔検出部が検出した顔又は特徴部位に基づいて、特徴領域を設定する。
【００１２】
第７の発明は、第１から第３の何れか１の発明において、特徴領域受付部をさらに備える。特徴領域受付部は、特徴領域の指定入力を受け付ける。
【００１３】
第８の発明に係る電子カメラは、被写体の像を撮像して第１の画像を生成する撮像素子と、請求項１から請求項７の何れか１項に記載の画像処理装置とを備える。
【００１４】
第９の発明に係るプログラムは、コンピュータに画像の処理を実行させるプログラムであって、特徴領域設定処理と、表示制御処理とをコンピュータに実行させる。特徴領域設定処理は、第１の画像の顔の位置に特徴領域を設定する。表示制御処理は、第１の画像から前記特徴領域を部分的に切り出した第２の画像を前記画像と共に表示装置に表示させるときに、前記第１の画像の前記特徴領域と前記第２の画像とが少なくとも重ならないように表示させる。
【発明の効果】
【００１５】
本発明によれば、例えば顔を補正する画像処理を行うときに視認性を向上させることができる。
【図面の簡単な説明】
【００１６】
【図１】画像処理装置１の構成を説明するブロック図
【図２】画像処理装置１の動作の一例を示すフローチャート
【図３】画像の一例を示す図
【図４】表示モニタ４に表示された画像２０ａを示す図
【図５】特徴領域の一例を説明する図
【図６】表示制御部８ｃによる表示態様の一例を示す図
【図７】表示制御部８ｃによる表示態様の一例を示す図
【図８】表示制御部８ｃによる表示態様の一例を示す図
【図９】電子カメラ５０の構成を説明するブロック図
【図１０】画像ファイルの一例を模式的に表した図
【図１１】補正レベル値と部分画像の拡大率との対応関係の一例を示すテーブル
【発明を実施するための形態】
【００１７】
（第１実施形態）
以下、図面に基づいて本発明の実施の形態を詳細に説明する。図１は、画像処理装置１の構成を説明するブロック図である。ここで、画像処理装置１は、画像内の顔の特徴部位を美しく補正するパーツメイクモード（以下「特徴部位補正モード」という）を有する。ここで、顔の特徴部位は、例えば、目、眉、鼻、唇等の何れか１つに限られず、頬や額の部分であっても良い。特徴部位補正モードの具体的な内容については、後述する。なお、第１実施形態では、電子カメラで人物を撮影した第１の画像（以下、単に「画像」という）を後述する記録媒体１０から読み出して特徴部位補正モードの補正を行う。
【００１８】
画像処理装置１は、図１に示す通り、記録インターフェース部（以下「記録Ｉ／Ｆ部」という）２と、メモリ３と、表示モニタ４と、タッチパネル５と、キーボード６と、マウス７と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８と、データバス９とを備える。
【００１９】
このうち、記録Ｉ／Ｆ部２、メモリ３、表示モニタ４及びＣＰＵ８は、データバス９を介して互いに接続されている。また、タッチパネル５、キーボード６及びマウス７は、ＣＰＵ８に接続されている。
【００２０】
記録Ｉ／Ｆ部２は、データの書き込みや読み出しのインターフェースを提供する。記録Ｉ／Ｆ部２には、着脱自在の記録媒体１０を接続するためのコネクタ（不図示）が形成されている。そして、記録Ｉ／Ｆ部２は、そのコネクタに接続された記録媒体１０にアクセスして画像の記録処理等を行う。この記録媒体１０は、例えば、不揮発性のメモリカードである。図１では、コネクタに接続された後の記録媒体１０を示している。
【００２１】
メモリ３は、記録Ｉ／Ｆ部２が記録媒体１０から読み出した画像データを、一時的に記録する。また、表示モニタ４は、ＣＰＵ８の指示に応じて画像や画像処理装置１の操作メニュー等を表示する。なお、表示モニタ４には、液晶のモニタ等を適宜選択して用いることができる。
【００２２】
タッチパネル５は、検出面に接触した指先等の位置を検出することでユーザからの操作を受け付けるポインティングデバイスである。なお、タッチパネル５の検出面は、透明であって、表示モニタ４の表示画面上に配置されているものとする。キーボード６やマウス７は、ユーザからの入力の操作を受け付ける入力デバイスである。
【００２３】
ＣＰＵ８は、各種演算及び画像処理装置１の制御を行うプロセッサである。ＣＰＵ８は、メモリ３に予め格納されたシーケンスプログラムを実行することにより、画像処理装置１の各部の制御等を行う。
【００２４】
また、ＣＰＵ８は、特徴部位補正モードのプログラムが実行されることにより、顔検出部８ａと、特徴領域設定部８ｂと、表示制御部８ｃと、補正受付部８ｄと、補正部８ｅと、特徴領域受付部８ｆとしても機能する。
【００２５】
顔検出部８ａは、画像を解析して画像から特徴点（特徴量）を抽出して顔領域の位置、顔領域の大きさ（顔面積）等を検出する。例えば、顔検出部８ａは、特開２００１−１６５７３号公報等に記載された特徴点抽出処理によって顔領域を抽出する。また、顔検出部８ａは、特徴点に基づいて、例えば、眉、目、鼻、唇等の顔の特徴部位を画像から検出する。これらの処理により、顔検出部８ａは、画像内の顔領域の位置、顔の特徴部位の位置を特定する。例えば、顔検出部８ａは、画像の横方向をＸ軸、縦方向をＹ軸としたときに、顔領域に含まれる画素のＸ座標及びＹ座標を算出する。
【００２６】
特徴領域設定部８ｂは、一例として、顔検出部８ａが検出した顔又は顔の特徴部位に基づいて、特徴領域を画像内に設定する。そして、特徴領域設定部８ｂは、特徴領域を画像から部分的に切り出して新たに第２の画像（以下「部分画像」という）を生成する。なお、部分画像は、例えば唇の輪郭部分を切り出した画像であっても良く、或いは、唇を含む周辺領域を切り出した画像であっても良い。
【００２７】
なお、特徴領域設定部８ｂは、特徴領域受付部８ｆを介して、特徴領域を設定しても良い。ここで、特徴領域受付部８ｆは、タッチパネル５又はマウス７を介して特徴領域の指定入力を受け付ける。特徴領域設定部８ｂは、この指定入力に基づいて、特徴領域を設定する。
【００２８】
表示制御部８ｃは、画像や部分画像の解像度を変換すると共に、表示モニタ４上で表示される画像や部分画像の位置と大きさを調整する。例えば、表示制御部８ｃは、画像と部分画像とを表示モニタ４に表示させるときに、画像の特徴領域と部分画像とが少なくとも重ならないように表示させる。この場合、表示制御部８ｃは、画像を縮小表示させると共に部分画像を拡大表示させても良い。
【００２９】
補正受付部８ｄは、特徴領域の補正の指示入力を受け付ける。具体的には、補正受付部８ｄは、例えば、タッチパネル５やマウス７を介して特徴領域の補正の指示入力を受け付ける。
【００３０】
補正部８ｅは、特徴部位補正モードの実行時において、ユーザからの指示入力或いはＣＰＵ８の指示に基づいて画像の特徴領域の部分を補正する。この特徴領域の補正は、例えば、被写体の顔の目や唇等の特徴部位を美しく見せるための画像処理である。なお、補正部８ｅは、例えば以下に示す少なくとも１つの画像処理を行う。
（１）色補正
補正部８ｅは、例えば、ユーザからの指示入力により、色相、彩度、明度のうち少なくとも１つのパラメータを変更する色補正を行う。具体的には、補正部８ｅは、例えば、上瞼の色に青味を増す色補正や、頬の色に赤味を増す色補正を行う。或いは、補正部８ｅは、例えば、唇の色に赤味を増す色補正を行う。或いは、補正部８ｅは、例えば、唇の色をユーザの好みの色に補正する。
（２）形状補正
補正部８ｅは、特徴領域内の特徴部位の形状補正を行う。例えば、補正部８ｅは、目の領域を拡大する補正を行う。具体的には、補正部８ｅは、目の領域の画像の画素を補間する補間処理を行う。この補間処理は、例えば、バイキュービック法といった公知の補間処理により実現される。補正部８ｅは、バイキュービック法を用いた場合、拡大によって生じる新たな画素の色を隣接する画素の色の平均値から作成する。
（３）平滑化補正
補正部８ｅは、頬の肌色領域に存在するノイズ成分を低減化する。例えば、補正部８ｅは、頬の肌色領域のノイズ成分を低減化するローパスフィルタ等を用いてノイズの低減化処理を行う。補正部８ｅは、このノイズの低減化処理により、被写体のニキビ等の凹凸感、肌荒れ等が目立ちにくい好ましい画像を生成することができる。
【００３１】
なお、上記（１）〜（３）の画像処理は一例であって、補正部８ｅは、被写体の顔の特徴部位を美しく見せるための画像処理であれば、他の画像処理をさらに採用しても良い。
【００３２】
次に、特徴部位補正モードにおける画像処理装置１の動作の一例を説明する。図２は、画像処理装置１の動作の一例を示すフローチャートである。
【００３３】
ここで、ＣＰＵ８は、例えば図１に示すタッチパネル５又はマウス７を介して特徴部位補正モードの指示入力を受け付けることにより、特徴部位補正モードのプログラムを起動する。そして、ＣＰＵ８は、図２に示すフローの処理を開始させる。
【００３４】
ステップＳ１０１：ＣＰＵ８は、記録媒体１０から画像を読み出して、メモリ３に一時的に記録する。図３は、画像の一例を示す図である。ここで、ＣＰＵ８の顔検出部８ａは、メモリ３又は記録媒体１０に記録されている画像２０から顔領域を検出する。そして、ＣＰＵ８の表示制御部８ｃは、顔領域（周辺も含む）を拡大した画像２０ａを第１の画像として表示モニタ４にさせる。なお、表示制御部８ｃは、画像２０をそのまま第１の画像として表示モニタ４にさせても良い。
【００３５】
図４は、表示モニタ４に表示された画像２０ａを示す図である。図４では、特徴部位補正モードのプログラム起動後の画面を表している。ここで、ＣＰＵ８は、タッチパネル５を介して、ユーザからの種々の操作を受け付ける。例えば、図４に示す「Ｙｅｓ」の領域への接触をタッチパネル５が検出した場合、ＣＰＵ８は、特徴領域の補正の指示入力を受け付ける。そして、ＣＰＵ８は、ステップＳ１０２の処理に移行する。なお、フローには示していないが、図４に示す「Ｎｏ」の領域への接触をタッチパネル５が検出した場合、ＣＰＵ８は、図２に示すフローの処理を終了させる。
【００３６】
ステップＳ１０２：特徴領域設定部８ｂは、画像内において顔検出部８ａが検出した特徴部位の位置に特徴領域を設定する。図５は、特徴領域の一例を説明する図である。ここで、説明の便宜上、特徴領域設定部８ｂは、唇２１を囲む領域を特徴領域２３、左目２２を囲む領域を特徴領域２４として設定する。そして、特徴領域設定部８ｂは、特徴領域２３及び２４を画像２０ａから部分的に切り出して新たに部分画像を各々生成する。なお、補正部８ｅは、一例として、ユーザからの入力にしたがって片方の目（左目２２）を補正した場合、他方の目（右目２５）も同様に補正することとする。
【００３７】
ステップＳ１０３：表示制御部８ｃは、画像２０ａを縮小した画像２０ｂの特徴領域と部分画像とが重ならないように表示モニタ４に表示させる。図６は、表示制御部８ｃによる表示態様の一例を示す図である。表示制御部８ｃは、画像２０ｂの特徴領域２３、２４と、部分画像２６、２７とが重ならないように表示させる。なお、表示制御部８ｃは、一例として、画像２０ｂのサイズを表示モニタ４の表示画面に対して約６０％程度のサイズに縮小させても良い。図６において、表示制御部８ｃは、特徴領域２３、２４を点線の矩形枠で表示モニタ４に表示させる。この矩形枠の表示は、部分画像２６、２７の各領域と顔の位置との対応関係をユーザに示す。
【００３８】
また、表示制御部８ｃは、マーク２８、２９を所定時間、表示モニタ４に表示させる。ここで、マーク２８、２９は、特徴領域設定部８ｂが設定した特徴領域をユーザに報知するためのアイコンである。
【００３９】
なお、例えば、部分画像２６の拡大操作に応じて、表示制御部８ｃは、部分画像２６と画像２０ｂの顔領域とが重ならないようにするため、部分画像２６をさらに拡大させる共に画像２０ｂのサイズをさらに縮小させる。また、例えば、部分画像２６の移動操作に応じて、表示制御部８ｃは、画像２０ｂのサイズを縮小させることにより、部分画像２６と画像２０ｂの顔領域とが重ならないように表示させても良い。或いは、表示制御部８ｃは、部分画像２６の移動に連動させて画像２０ｂを移動させることにより、部分画像２６と画像２０ｂの顔領域とが重ならないように表示させても良い。また、表示制御部８ｃは、部分画像の拡大率の変更を、例えば、タッチパネル５を介して受け付けても良い。
【００４０】
ステップＳ１０４：ＣＰＵ８は、特徴領域の補正の指示入力を受け付ける。具体例として、ＣＰＵ８は、タッチパネル５上で部分画像２６の位置への接触を検出した場合、左目２２の補正の指示入力を受け付ける。そして、表示制御部８ｃは、図６から図７に示す画面に切り替える。
【００４１】
図７は、表示制御部８ｃによる表示態様の一例を示す図である。図７では、表示制御部８ｃは、部分画像２６と、画像２０ｂをさらに縮小させた画像２０ｃとが重ならないように表示モニタ４に表示させる。さらに、表示制御部８ｃは、瞳（左目２２）の補正用のパレット４１〜４５を部分画像２６及び画像２０ｃに重ならないように表示モニタ４に表示させる。パレット４１は、アイシャドーの色を指定するためのユーザインターフェースを提供する。パレット４２は、瞳の形を指定するためのユーザインターフェースを提供する。パレット４３は、瞳の角度を指定するためのユーザインターフェースを提供する。パレット４４は、目尻の長さを指定するためのユーザインターフェースを提供する。パレット４５は、いわゆるキャッチライト（瞳の領域中の輝きの形状）を指定するためのユーザインターフェースを提供する。ユーザは、パレット４１〜４５を利用して補正の選択入力をタッチパネル５を介して行う。ＣＰＵ８は、タッチパネル５を介して補正の選択入力を受け付けた場合、ステップＳ１０５の処理に移行する。
【００４２】
ステップＳ１０５：ＣＰＵ８の補正部８ｅは、指定された特徴領域の部分を補正する。例えば、補正部８ｅは、左目２２の補正として瞳の中にキャッチライトを入れる画像処理を行う。また、例えば、補正部８ｅは、左目２２の補正としてアイシャドー（黒色）を付加する画像処理を行う。そして、補正部８ｅは、図５に示す右目２５についても左目２２と同様の画像処理を行う。また、例えば、補正部８ｅは、図６に示す唇２１の色に赤味を増す色補正を行う。ここで、補正部８ｅは、例えば、部分画像２７の特徴部位（唇２１）を補正すると、図６に示す画像２０ｂにも補正を行い、部分画像２７での補正内容を画像２０に反映させる。
【００４３】
ステップＳ１０６：表示制御部８ｃは、補正後の画像２０から顔領域を拡大した画像２０ｄと補正の処理結果の内容を表示モニタ４に表示させる。図８は、表示制御部８ｃによる表示態様の一例を示す図である。ＣＰＵ８は、補正後の画像２０を記録媒体１０に記録する。なお、画像処理装置１は、通信インターフェースをさらに設けて、補正の処理結果（一覧表示の内容）を例えば、外部のプリンタ機器に出力するようにしても良い。ＣＰＵ８は、補正後の画像２０を記録媒体１０に記録した後、図２に示すフローの処理を終了させる。
【００４４】
以上より、第１実施形態の画像処理装置１では、画像の特徴領域と部分画像とが重ならないように表示モニタ４に表示させる。そのため、ユーザは画像の特徴領域を見ながら部分画像の特徴部位を補正することができる。したがって、第１実施形態の画像処理装置１は、例えば顔を補正する画像処理を行うときに視認性を向上させることができる。
（第２実施形態）
次に、第２実施形態について説明する。第２実施形態では、本発明の画像処理装置を搭載した電子カメラについて説明する。なお、第２実施形態では、電子カメラで人物を撮影した画像に対して特徴部位補正モードの補正を行った場合、補正した処理内容を画像のデータに付加する（詳細は後述する）。
【００４５】
図９は、電子カメラ５０の構成を説明するブロック図である。電子カメラ１は、図９に示す通り撮影光学系５１と、撮像素子５２と、信号処理部５３と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）５４と、画像処理部５５と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）５６と、記録Ｉ／Ｆ部５７と、表示モニタ５８と、タッチパネル５９と、操作部６０と、レリーズ釦６１と、ＣＰＵ６２と、データバス６３とを備える。
【００４６】
このうち、信号処理部５３、ＲＡＭ５４、画像処理部５５、ＲＯＭ５６、記録Ｉ／Ｆ部５７、表示モニタ５８及びＣＰＵ６２は、データバス６３を介して互いに接続されている。また、タッチパネル５９、操作部６０及びレリーズ釦６１は、ＣＰＵ６２に接続されている。
【００４７】
撮像光学系５１は、ズームレンズとフォーカスレンズとを含む複数のレンズ群で構成されている。なお、簡単のため、図９では、撮像光学系５１を１枚のレンズとして図示する。
【００４８】
撮像素子５２は、撮像光学系５１を通過した光束による被写体の像を撮像し、アナログの画像信号（画像）を出力する。そして、撮像素子５２が出力するアナログの画像信号は、信号処理部５３に入力される。
【００４９】
ここで、撮像素子５２は、電子カメラの撮影モードにおいて、後述のレリーズ釦６１の全押し操作に応答して記録用の画像を撮像する。また、撮像素子５２は、撮影待機時にも所定間隔毎に構図確認用のスルー画像を連続的に撮像する。
【００５０】
信号処理部５３は、撮像素子５２が出力する画像信号に対してアナログ信号処理（Ａ／Ｄ変換等）やデジタル信号処理を施す回路である。この信号処理部５３が出力する画像信号は、ＲＧＢ信号の画像データとしてＲＡＭ５４に一時的に記録される。ＲＡＭ５４は、画像データを一時的に記録するバッファメモリである。
【００５１】
画像処理部５５は、ＲＡＭ５４に記録されている画像データを読み出し、必要に応じて各種の画像処理（例えば、色補間処理、ホワイトバランス等）を施す。なお、記録Ｉ／Ｆ部５７、表示モニタ５８、タッチパネル５９等は、第１実施形態の構成（記録Ｉ／Ｆ部２、表示モニタ４、タッチパネル５）と同様であるので説明を省略する。
【００５２】
操作部６０は、電源釦、広角ズーム釦と、望遠ズーム釦等のユーザからの操作を受け付ける複数の釦（不図示）を有している。レリーズ釦６１は、例えば、全押し操作（撮像動作開始）の指示入力を受け付ける。
【００５３】
ＣＰＵ６２は、各種演算及び電子カメラ１の制御を行うプロセッサである。ＣＰＵ６２は、ＲＯＭ５６に予め格納されたシーケンスプログラムを実行することにより、電子カメラ１の各部の制御等を行う。
【００５４】
また、ＣＰＵ６２は、特徴部位補正モードのプログラムが実行されることにより、顔検出６２ａと、特徴領域設定部６２ｂと、表示制御部６２ｃと、補正受付部６２ｄと、補正部６２ｅと、特徴領域受付部６２ｆとしても機能する。ここで、顔検出部６２ａ、特徴領域設定部６２ｂ、表示制御部６２ｃ、補正受付部６２ｄ、補正部６２ｅ及び特徴領域受付部６２ｆについては、第１実施形態の構成（顔検出部８ａ、特徴領域設定部８ｂ、表示制御部８ｃ、補正受付部８ｄ、補正部８ｅ、特徴領域受付部８ｆ）とそれぞれ同様であるので説明を省略する。
【００５５】
なお、第２実施形態では、画像に対して特徴部位補正モードが施されたときに、ＣＰＵ６２の制御によって、画像の補正箇所を示す補正情報が画像のデータに付加される。具体的には、第２実施形態で採用する画像のデータは、例えば、Ｅｘｉｆ（Ｅｘｃｈａｎｇｅａｂｌｅ Ｉｍａｇｅ Ｆｉｌｅ Ｆｏｒｍａｔ）形式のファイルフォーマットに準拠して生成される。
【００５６】
図１０は、画像ファイルの一例を模式的に表した図である。図１０に示す通り、画像ファイルのデータ構造は、ヘッダ領域と画像データ領域とを有する。ヘッダ領域には、例えば、撮影日時、画素数、撮影条件等の撮影情報が書き込まれる。さらに、ヘッダ領域には、メーカ側で定義できる情報として、メーカノートのタグが備えられている。第２実施形態では、メーカノートのタグに補正情報を追加する。補正情報には、例えば、特徴領域の補正の内容、特徴領域の座標データ、補正の度合いを示す補正レベル値等が含まれる。
【００５７】
次に、特徴部位補正モードにおける電子カメラ５０の動作の一例を説明する。ここで、ＣＰＵ６２は、操作部６０を介して特徴部位補正モードの指示入力を受け付ける。その後、ＣＰＵ６２は、レリーズ釦６１の全押し操作に応答して画像を撮像する。これにより、ＣＰＵ６２は、画像処理部５５により各種の画像処理を施された画像を記録媒体７０に記録する。続いて、ＣＰＵ６２は、特徴部位補正モードのプログラムを起動して、図２に示すフローの処理を開始させる。なお、第２実施形態では、図２に示すフローの処理（ステップＳ１０１〜ステップＳ１０６）を実行するので同様の処理については重複説明を省略する。ここで、図２に示すフローの処理と異なる点は、ステップＳ１０５において、ＣＰＵ６２が上記のメーカノートのタグを用いて画像のデータに補正情報を追記する点である。
【００５８】
以上より、第２実施形態の電子カメラ５０は、第１実施形態の画像処理装置１と同様にして、画像の特徴領域と部分画像とが重ならないように表示モニタ５８に表示させる。そのため、ユーザは画像の特徴領域を見ながら部分画像の特徴部位を補正することができる。したがって、第２実施形態の電子カメラ５０は、例えば顔を補正する画像処理を行うときに視認性を向上させることができる。
＜上記実施形態の補足事項＞
（１）第１実施形態の画像処理装置１では、第２実施形態の電子カメラ５０で撮影された画像を用いても良い。この場合、特徴領域設定部８ｂは、Ｅｘｉｆファイルにおけるメーカノートのタグの画像データに追記された画像の補正情報（特徴領域の座標データ）に基づいて、特徴領域を画像内に設定しても良い。また、図１に示す表示制御部８ｃは、補正レベル値を読み出して、部分画像の拡大率を設定しても良い。
【００５９】
図１１は、補正レベル値と部分画像の拡大率との対応関係の一例を示すテーブルである。このテーブルの内容は、予めメモリ３に記録されていることとする。図１１では、特徴領域の補正の対象となる特徴部位への補正レベル値が設定されている。また、図１１では、各補正レベル値（０〜１０）に対応して部分画像の拡大率を示し、各補正レベル値が高くなるにつれて、特徴部位の領域が大きく補正される。表示制御部８ｃは、テーブルメモリを参照して補正レベル値が高くなる（補正の度合いが高くなる）につれて、部分画像の拡大率を高くする。なお、表示制御部８ｃは、部分画像の拡大率を特徴部位の拡大率として、表示モニタ４に表示させるようにしても良い。
【００６０】
また、特徴領域設定部８ｂが補正情報に基づいて特徴領域を画像内に設定した場合、表示制御部８ｃは、例えば、図６に示すマーク２８、２９と同様のマークをその特徴領域に表示させることで、特徴部位の補正が既に施されていることを示しても良い。
【００６１】
したがって、これらの処理により、画像処理装置１では、既に顔の特徴部位が補正された画像を再度補正する際にも視認性を向上させることができる。
【００６２】
（２）第１実施形態の画像処理装置１において、表示制御部８ｃは、補正用のパレット４１〜４５を表示モニタ４に表示させたが、表示制御部８ｃは、例えば、部分画像の色情報として、輝度（Ｙ）、Ｒ（赤）、Ｇ（緑）、Ｂ（青）のヒストグラム（度数分布）を表示させても良い。
【００６３】
また、表示制御部８ｃは、画像２０ａのうちで、輝度値が所定値以上の領域をハイライト表示（点滅表示）させても良い。ユーザがハイライト表示されている領域を指定した場合、特徴領域設定部８ｂは、その領域を特徴領域に設定しても良い。
【００６４】
（３）第１実施形態の画像処理装置１において、補正部８ｅは、一例として、ユーザからの入力にしたがって片方の目（左目２２）を補正した場合（図５参照）、もう一方の目（右目２５）も同様に補正した。ここで、補正部８ｅは、一例として、ユーザからの入力にしたがって左目２２と右目２５とを個別に補正しても良い。この場合、表示制御部８ｃは、ユーザのタッチパネル５上での操作に応じて、図６に示す部分画像２６の左目２２を、右目の部分画像に切り替えて表示させるようにしても良い。或いは、表示制御部８ｃは、ユーザが画像２０の左目２２から右目２５に向けてマウス７のボタンを押したままポインタを移動させた後、右目２５の位置でマウス７のボタンを離す操作を行った場合、部分画像２６の左目２２を、右目２５の部分画像に切り替えて表示させても良い。
【００６５】
また、表示制御部８ｃは、例えば、ユーザが部分画像上で何れかの方向に向けてマウス７のボタンを押したままポインタを移動させる操作を行った場合、この操作に応じて表示させる領域をポインタの移動方向に移動させても良い。或いは、表示制御部８ｃは、例えば、ユーザのタッチパネル５上での指の移動軌跡に応じて、部分画像の表示させる領域を上記の移動軌跡に追従させても良い
（４）第１実施形態の画像処理装置１において、表示制御部８ｃは、補正用のパレット４１〜４５を表示モニタ４に表示させた（図７参照）。第２実施形態の電子カメラ１において、表示制御部８ｃは、表示モニタ５８のサイズに応じて、補正用のパレットの数を例えば１つに制限しても良い。この場合、表示制御部８ｃは、補正用のパレット４１〜４５を順番に表示モニタ５８に表示させるようにしても良い。
【００６６】
（５）第１実施形態の画像処理装置１において、画像内の特徴領域に対応する表示領域として破線の矩形枠を用いたが、これは一例であって、例えば実線の矩形枠であっても良い。
【００６７】
（６）第２実施形態の電子カメラ１において、特徴領域設定部８ｂは、スルー画像に対して特徴領域に設定しても良い。この場合、補正部８は、スルー画像に対して補正を行う。これにより、ユーザは撮影前に特徴部位補正モードの結果を確認した上で撮影を行うことができる。
【符号の説明】
【００６８】
１・・・画像処理装置、５０・・・電子カメラ、８ａ、６２ａ・・・顔検出部、８ｂ、６２ｂ・・・特徴領域設定部、８ｃ、６２ｃ・・・表示制御部、８ｄ、６２ｄ・・・補正受付部、８ｅ、６２ｅ・・・補正部、８ｆ、６２ｆ・・・特徴領域受付部
【特許請求の範囲】
【請求項１】
第１の画像の顔の位置に特徴領域を設定する特徴領域設定部と、
前記第１の画像から前記特徴領域を部分的に切り出した第２の画像を前記第１の画像と共に表示装置に表示させるときに、前記第１の画像の前記特徴領域と前記第２の画像とが少なくとも重ならないように表示させる表示制御部と、
を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記表示制御部は、前記第１の画像を縮小表示させると共に前記第２の画像を拡大表示させることを特徴とする画像処理装置。
【請求項３】
請求項１又は請求項２に記載の画像処理装置において、
前記特徴領域の補正の指示入力を受け付ける補正受付部と、
前記指示入力に基づいて、前記特徴領域を補正する補正部と、
をさらに備えることを特徴とする画像処理装置。
【請求項４】
請求項１から請求項３の何れか１項に記載の画像処理装置において、
前記第１の画像の情報には、前記第１の画像の補正箇所を示す補正情報が対応付けられており、
前記特徴領域設定部は、前記補正情報に基づいて、前記特徴領域を設定することを特徴とする画像処理装置。
【請求項５】
請求項４に記載の画像処理装置において、
前記補正情報は、前記第１の画像に施された前記補正の度合いの情報を含み、
前記表示制御部は、前記補正の度合いの高さに比例して、前記第２の画像の拡大率を高くすることを特徴とする画像処理装置。
【請求項６】
請求項１から請求項３の何れか１項に記載の画像処理装置において、
前記第１の画像から前記顔又は顔の特徴部位を検出する顔検出部をさらに備え、
前記特徴領域設定部は、前記顔検出部が検出した前記顔又は前記特徴部位に基づいて、前記特徴領域を設定することを特徴とする画像再生装置。
【請求項７】
請求項１から請求項３の何れか１項に記載の画像処理装置において、
前記特徴領域の指定入力を受け付ける特徴領域受付部をさらに備え、
前記特徴領域設定部は、前記指定入力に基づいて、前記特徴領域を設定することを特徴とする画像再生装置。
【請求項８】
被写体の像を撮像して第１の画像を生成する撮像素子と、
請求項１から請求項７の何れか１項に記載の画像処理装置と、
を備えることを特徴とする電子カメラ。
【請求項９】
コンピュータに画像の処理を実行させるプログラムであって、
第１の画像の顔の位置に特徴領域を設定する特徴領域設定処理と、
前記第１の画像から前記特徴領域を部分的に切り出した第２の画像を前記第１の画像と共に表示装置に表示させるときに、前記第１の画像の前記特徴領域と前記第２の画像とが少なくとも重ならないように表示させる表示制御処理とをコンピュータに実行させることを特徴とするプログラム。
【請求項１】
第１の画像の顔の位置に特徴領域を設定する特徴領域設定部と、
前記第１の画像から前記特徴領域を部分的に切り出した第２の画像を前記第１の画像と共に表示装置に表示させるときに、前記第１の画像の前記特徴領域と前記第２の画像とが少なくとも重ならないように表示させる表示制御部と、
を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置において、
前記表示制御部は、前記第１の画像を縮小表示させると共に前記第２の画像を拡大表示させることを特徴とする画像処理装置。
【請求項３】
請求項１又は請求項２に記載の画像処理装置において、
前記特徴領域の補正の指示入力を受け付ける補正受付部と、
前記指示入力に基づいて、前記特徴領域を補正する補正部と、
をさらに備えることを特徴とする画像処理装置。
【請求項４】
請求項１から請求項３の何れか１項に記載の画像処理装置において、
前記第１の画像の情報には、前記第１の画像の補正箇所を示す補正情報が対応付けられており、
前記特徴領域設定部は、前記補正情報に基づいて、前記特徴領域を設定することを特徴とする画像処理装置。
【請求項５】
請求項４に記載の画像処理装置において、
前記補正情報は、前記第１の画像に施された前記補正の度合いの情報を含み、
前記表示制御部は、前記補正の度合いの高さに比例して、前記第２の画像の拡大率を高くすることを特徴とする画像処理装置。
【請求項６】
請求項１から請求項３の何れか１項に記載の画像処理装置において、
前記第１の画像から前記顔又は顔の特徴部位を検出する顔検出部をさらに備え、
前記特徴領域設定部は、前記顔検出部が検出した前記顔又は前記特徴部位に基づいて、前記特徴領域を設定することを特徴とする画像再生装置。
【請求項７】
請求項１から請求項３の何れか１項に記載の画像処理装置において、
前記特徴領域の指定入力を受け付ける特徴領域受付部をさらに備え、
前記特徴領域設定部は、前記指定入力に基づいて、前記特徴領域を設定することを特徴とする画像再生装置。
【請求項８】
被写体の像を撮像して第１の画像を生成する撮像素子と、
請求項１から請求項７の何れか１項に記載の画像処理装置と、
を備えることを特徴とする電子カメラ。
【請求項９】
コンピュータに画像の処理を実行させるプログラムであって、
第１の画像の顔の位置に特徴領域を設定する特徴領域設定処理と、
前記第１の画像から前記特徴領域を部分的に切り出した第２の画像を前記第１の画像と共に表示装置に表示させるときに、前記第１の画像の前記特徴領域と前記第２の画像とが少なくとも重ならないように表示させる表示制御処理とをコンピュータに実行させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１２−４７１９（Ｐ２０１２−４７１９Ａ）
【公開日】平成２４年１月５日（２０１２．１．５）
【国際特許分類】
【出願番号】特願２０１０−１３６０８９（Ｐ２０１０−１３６０８９）
【出願日】平成２２年６月１５日（２０１０．６．１５）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２４年１月５日（２０１２．１．５）
【国際特許分類】
【出願日】平成２２年６月１５日（２０１０．６．１５）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]