画像処理装置、撮像装置、プログラム、及び記録媒体
【課題】撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減する。
【解決手段】画像処理装置２０は、撮像された画像データを削除させる画像削除制御部９１と、画像データの撮像シーンを判定する撮像シーン判定部９２と、画像削除制御部９１によって画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定部９３１と、画像データの特徴量を記憶する特徴量記憶部６１に、画像データの撮像シーンと第１の特徴量とを関連付けて記憶させる特徴量記憶制御部９４とを備える。
【解決手段】画像処理装置２０は、撮像された画像データを削除させる画像削除制御部９１と、画像データの撮像シーンを判定する撮像シーン判定部９２と、画像削除制御部９１によって画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定部９３１と、画像データの特徴量を記憶する特徴量記憶部６１に、画像データの撮像シーンと第１の特徴量とを関連付けて記憶させる特徴量記憶制御部９４とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、プログラム、及び記録媒体に関する。
【背景技術】
【０００２】
画像をデジタル画像データとして取り込むデジタルカメラなどの撮像装置では、フィルムを使用したカメラに比べて簡単に多くの画像が撮像できる。このような画像をデジタル画像データとして取り込む撮像装置では、撮像したその場所で、撮像した画像を確認できるため、不要な画像データの削除を簡単に行うことができる。このような撮像装置では、削除された画像データの各種撮像条件と、各種撮像条件において撮像された画像が削除される頻度から、削除される可能性の高い撮像設定を抽出する。削除される可能性が高い撮像条件によって撮像されそうな場合に、撮像装置が、使用者に警告を促す、又は、削除される可能性の高い撮像条件にならないように制御を変更する技術が開示されている（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２１８９３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、特許文献１に示される技術では、上述した制御を行うことにより、撮像された画像データにおける削除される画像データ（失敗画像データ）の発生頻度を低減させる。しかしながら、撮像される画像データが良いか悪いかの判断は、撮像される画像の撮像シーンによって大きく異なる場合がある。例えば、日中に撮像する場合と夜間に撮像する場合とでは、同じ露出制御でも全く異なる画像データが撮像される。このため、特許文献１で示されるように、単純に削除される可能性が高い撮像条件にならないようにフィードバック制御する、又は使用者に警告を促すことを行っても、使用者が意図した（良いと判断する）撮像にはならない場合がある。つまり、特許文献１で示される撮像装置では、撮像シーンによっては、削除される画像データ（失敗画像データ）の発生頻度を低減するには、不十分である。
【０００５】
本発明は、上記問題を解決すべくなされたもので、その目的は、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減することができる画像処理装置、撮像装置、プログラム、及び記録媒体を提供することにある。
【課題を解決するための手段】
【０００６】
上記問題を解決するために、本発明は、撮像された画像データを削除させる画像削除制御部と、画像データの撮像シーンを判定する撮像シーン判定部と、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定部と、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御部とを備えることを特徴とする画像処理装置である。
【０００７】
また、本発明は、上記画像処理装置を備えることを特徴とする撮像装置である。
【０００８】
また、本発明は、画像処理装置としてのコンピュータに実行させるためのプログラムであって、画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順とを前記コンピュータに実行させるためのプログラムである。
【０００９】
また、本発明は、画像処理装置としてのコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順とを前記コンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体である。
【発明の効果】
【００１０】
本発明によれば、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減することができる。
【図面の簡単な説明】
【００１１】
【図１】第１の実施形態による撮像装置を示すブロック図である。
【図２】同実施形態における画像処理装置を示すブロック図である。
【図３】同実施形態における特徴量記憶部のデータ構成を示す図である。
【図４】同実施形態における動作の一形態を示す図である。
【図５】同実施形態における成功画像データの分布を示す図である。
【図６】同実施形態における撮像装置により最適と判断された画像データの明るさの分布を示す図である。
【図７】第２の実施形態における特徴量記憶部のデータ構成を示す図である。
【図８】同実施形態における成功画像データの分布を示す図である。
【発明を実施するための形態】
【００１２】
＜第１の実施形態＞
まず、本発明の一実施形態による画像処理装置及び撮像装置を図面を参照して説明する。
図１は、本実施形態による撮像装置１００を示すブロック図である。
この図において、撮像装置１００は、撮像部１０、バッファメモリ部３０、画像表示処理部４０、表示部５０、記憶部６０、通信部７０、操作部８０、及び制御部９０を備える。また、撮像装置１００は、画像処理装置２０を備える。ここで、画像処理装置２０は、制御部９０の一部分と記憶部６０の一部分とを含む。
【００１３】
撮像部１０は、複数のレンズを備える光学系１１、撮像素子１２、及びＡ／Ｄ（アナログ／デジタル）変換部１３を備える。この撮像部１０は、設定された撮像条件（例えば、絞り値、露出値など）に基づいて制御部９０によって制御される。撮像部１０は、光学系１１を介した光学像を撮像素子１２に結像させ、Ａ／Ｄ変換部１３によって変換された当該光学像に基づく画像データを生成する。
なお、上述した光学系１１は、撮像装置１００に取り付けられて一体とされていてもよいし、撮像装置１００に着脱可能に取り付けられてもよい。
【００１４】
撮像素子１２は、例えば、受光面（不図示）に結像した光学像を電気信号（電圧信号）に変換して、Ａ／Ｄ変換部１３に供給する。撮像素子１２の受光面は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサなどの格子状に配置されている複数のイメージセンサ（不図示）で構成され、それぞれのイメージセンサは、結像された光学像を電圧値に変換する。
Ａ／Ｄ変換部１３は、撮像素子１２によって変換された電圧値をアナログ−デジタル変換し、この変換したデジタル信号である画像データを出力する。
【００１５】
操作部８０は、例えば、電源スイッチ、シャッターボタン、十字キー、確定ボタン、削除ボタン、及び、その他の操作キーを含み、使用者によって操作されることで、使用者の操作入力を受け付けて、制御部９０に供給する。
【００１６】
画像表示処理部４０は、バッファメモリ部３０に記憶されている画像データを表示部５０に表示させる表示制御処理を行う。ここでいうバッファメモリ部３０に記憶されている画像データとは、画像表示処理部４０に入力される画像データ（入力画像）のことであり、例えば、撮像画像データ、スルー画像データ、または、記憶媒体２００から読み出された撮像画像データのことである。
表示部５０は、例えば、液晶ディスプレイであって、撮像部１０によって得られた画像データや、操作画面等を表示する。
【００１７】
記憶部６０には、制御部９０によってシーン判定の際に参照される判定条件や、撮像条件、等が記憶されている。また、記憶部６０には、削除された画像データの特徴を示す失敗画像データの特徴量や、使用者の好みの画像を示す成功画像データの特徴量、等も記憶される。
バッファメモリ部３０は、撮像部１０によって撮像された画像データを、一時的に記憶する。
【００１８】
通信部７０は、カードメモリ等の取り外しが可能な記憶媒体２００と接続され、この記憶媒体２００への撮像画像データの書込み、読み出し、又は消去を行う。
記憶媒体２００は、撮像装置１００に対して着脱可能に接続される記憶部であり、例えば、撮像部１０によって生成された撮像画像データを記憶する。
【００１９】
制御部９０は、例えば、ＣＰＵ（Central processing unit）などを含み、撮像装置１００が備える各構成を制御する。制御部９０は、例えば、操作部８０を介して撮像指示を受け付けた際に、撮像素子１２とＡ／Ｄ変換部１３とを介して得られる画像データを、撮像された静止画の撮像画像データとして、記憶媒体２００に記憶させる。また、制御部９０は、例えば、操作部８０を介して撮像指示を受け付けていない状態において、撮像素子１２とＡ／Ｄ変換部１３とを介して連続的に得られる画像データをスルー画（スルー画データ）として画像表示処理部４０に供給し、表示部５０に連続的に表示させる。また、制御部９０は、後述において詳細に説明する画像データを削除する処理、及び削除された画像データの特徴量を撮像制御に反映させる処理を行う。
【００２０】
バス３００は、撮像部１０と、制御部９０と、操作部８０と、画像表示処理部４０と、表示部５０と、記憶部６０と、バッファメモリ部３０と、通信部７０とに接続され、各部から出力された画像データや制御信号等を転送する。
【００２１】
また、撮像装置１００は、画像処理装置２０を含む。ここで、画像処理装置２０は、制御部９０の一部分と記憶部６０の一部分とを含む。
【００２２】
次に、図２を用いて、図１に示された画像処理装置２０の構成について説明する。
図２は、本実施形態における画像処理装置２０を示すブロック図である。
この図において、画像処理装置２０は、画像削除制御部９１、撮像シーン判定部９２、特徴量推定部９３、特徴量記憶制御部９４、撮像画像制御部９５、及び特徴量記憶部６１を備える。なお、画像削除制御部９１、撮像シーン判定部９２、特徴量推定部９３、特徴量記憶制御部９４、及び撮像画像制御部９５は、制御部９０に含まれる。また、特徴量記憶部６１は、記憶部６０に含まれる。
【００２３】
画像削除制御部９１は、撮像された画像データを削除させる。つまり、画像削除制御部９１は、操作部８０によって選択された画像データを削除させる制御を行う。なお、削除される画像データは、記憶媒体２００に記憶された画像データでもよいし、記憶部６０に記憶された画像データでもよい。
【００２４】
撮像シーン判定部９２は、画像データの撮像シーンを判定する。ここで、撮像シーンが判定される画像データには、画像削除制御部９１によって削除される画像データ、記憶媒体２００又は記憶部６０に記憶される画像データ、及びスルー画像データが含まれる。また、画像データの撮像シーンとは、例えば、夜景、ポートレート、風景、などである。撮像シーン判定部９２は、例えば、画像データを解析することにより撮像シーンを判定する。撮像シーン判定部９２は、判定した画像データの撮像シーンを特徴量推定部９３、特徴量記憶制御部９４、及び撮像画像制御部９５に供給する。
【００２５】
特徴量推定部９３は、画像データの特徴を示す特徴量を推定する。ここで、特徴量とは、例えば、画像の平均輝度値、画像データに含まれる顔部分の明るさ情報、などである。また、特徴量推定部９３は、失敗画像特徴量推定部９３１（第１の特定量推定部）、成功画像特徴量推定部９３２（第２の特定量推定部）、及び撮像画像特徴量推定部９３３（第３の特定量推定部）を備える。
【００２６】
失敗画像特徴量推定部９３１は、失敗画像データの特徴量（第１の特徴量）を推定する。なお、失敗画像データとは、画像削除制御部９１によって削除対象とされた画像データである。つまり、失敗画像データとは、使用者にとって意図しない画像データであったために、使用者によって削除する操作が行われた画像データである。失敗画像データは、記憶媒体２００又は記憶部６０から削除される画像データでもよいし、記憶媒体２００又は記憶部６０から削除されないが、表示部５０に表示されない設定にされる画像データでもよい。失敗画像特徴量推定部９３１は、推定した失敗画像データの特徴量（第１の特徴量）を特徴量記憶制御部９４に供給する。
【００２７】
成功画像特徴量推定部９３２は、撮像シーン判定部９２によって判定された撮像シーンごとに成功画像データの特徴量（第２の特徴量）を推定する。なお、成功画像データとは、撮像された画像データを記憶する記憶媒体２００又は記憶部６０に記憶された画像データのうち、削除対象の画像データを除く画像データである。つまり、成功画像データとは、使用者にとって好みの画像データを示す。成功画像特徴量推定部９３２は、推定した成功画像データの特徴量（第２の特徴量）を特徴量記憶制御部９４に供給する。
【００２８】
撮像画像特徴量推定部９３３は、撮像部１０によって撮像される画像データの特徴量（第３の特徴量）を推定する。撮像画像特徴量推定部９３３は、推定した撮像される画像データの特徴量（第３の特徴量）を撮像画像制御部９５に供給する。なお、ここでいう撮像される画像データとは、スルー画像データである。
【００２９】
特徴量記憶制御部９４は、特徴量記憶部６１に、撮像シーン判定部９２によって判定された画像データの撮像シーンと失敗画像データの特徴量とを関連付けて記憶させる。例えば、特徴量記憶制御部９４は、特徴量記憶部６１に、撮像シーンごとに失敗画像データの特徴量を記憶させる。また、特徴量記憶制御部９４は、失敗画像データの特徴量と成功画像データの特徴量とを撮像シーンに関連付けて特徴量記憶部６１に記憶させる。例えば、特徴量記憶制御部９４は、失敗画像データの特徴量と成功画像データの特徴量とを撮像シーンごとに特徴量記憶部６１に記憶させる。
【００３０】
撮像画像制御部９５は、撮像シーン判定部９２から供給される画像データの撮像シーンに対応する、失敗画像データの特徴量と成功画像データの特徴量との差に基づいて、撮像部１０の撮像条件を変更させる処理を撮像シーンごとに行う。
【００３１】
特徴量記憶部６１は、画像データの特徴量を記憶する。つまり、特徴量記憶部６１は、撮像シーン判定部９２によって判定された画像データの撮像シーンごとに、失敗画像データの特徴量と成功画像データの特徴量とを記憶する。
【００３２】
なお、制御部９０の各部と、特徴量記憶部６１を含む記憶部６０は、バス３００と接続される。制御部９０の各部、特徴量記憶部６１、及び撮像装置１００の各部は、バス３００を介して画像データや制御信号等を転送する。
【００３３】
図３は、本実施形態における特徴量記憶部６１のデータ構成を示す図である。
この図において、特徴量記憶部６１では、撮像シーンを識別する識別情報（例えば、撮像シーン名）、削除された画像データの特徴量（失敗画像データの特徴量）、及び成功画像データの特徴量が関連付けられて記憶される。
【００３４】
例えば、撮像シーン名が夜景シーンである場合、夜景シーンにおける特徴量は、画像データの平均輝度値である。このため、特徴量記憶部６１には、失敗画像データの平均輝度値ＹＮＧと成功画像データの平均輝度値ＹＯＫとの組が、撮像シーン名“夜景シーン”と関連付けられて記憶される。
なお、成功画像データの平均輝度値ＹＯＫは、撮像シーン名“夜景シーン”に対応する全成功画像データにおける平均輝度の平均値でもよいし、撮像シーン名“夜景シーン”に対応する予め設定された特定の成功画像データの平均輝度値でもよい。ここでは、成功画像データの平均輝度値ＹＯＫは、撮像シーン名“夜景シーン”に対応する全成功画像データにおける平均輝度の平均値である。
【００３５】
また、例えば、撮像シーン名がポートレートである場合、ポートレートにおける特徴量は、顔部分の平均輝度値である。このため、特徴量記憶部６１には、失敗画像データにおける顔部分の平均輝度値ＺＮＧと成功画像データにおける顔部分の平均輝度値ＺＯＫとの組が、撮像シーン名“ポートレート”と関連付けられて記憶される。
なお、成功画像データの平均輝度値ＺＯＫは、撮像シーン名“ポートレート”に対応する全成功画像データにおける顔部分の平均輝度の平均値でもよいし、撮像シーン名“ポートレート”に対応する予め設定された特定の成功画像データの顔部分の平均輝度値でもよい。ここでは、成功画像データの平均輝度値ＺＯＫは、撮像シーン名“ポートレート”に対応する全成功画像データにおける顔部分の平均輝度の平均値とする。
【００３６】
次に、本実施形態の動作について説明する。
本実施形態では、撮像シーン名が夜景シーンである場合における動作の一例を説明する。
図４は、本実施形態における動作の一形態を示す図である。
図４（ａ）は、夜景シーンの撮像データの一例を示す。また、図４（ｂ）は、図４（ａ）に示される画像データが削除される場合の動作を示すフローチャートである。
この図において、まず、使用者によって操作部８０の削除ボタンが押されると、図４（ａ）に示される画像データを削除する処理が開始される（ステップＳ１０１）。
【００３７】
次に、撮像シーン判定部９２が、削除する画像データの撮像シーンを判定する（ステップＳ１０２）。ステップＳ１０２において、撮像シーン判定部９２は、記憶媒体２００又は記憶部６０に記憶される削除対象の画像データをバス３００を介して読み出し、読み出した画像データの撮像シーンを判定する。撮像シーンの判定は、例えば、画像データを解析して判定してもよいし、画像データのヘッダー情報に含まれる撮像条件等の情報に基づいて判定してもよい。ここでは、撮像シーン判定部９２が夜景シーンであると判定した場合である。また、削除対象の画像データとは、使用者によって操作部８０を用いて選択された削除の対象となる画像データである。
撮像シーン判定部９２は、判定した画像データの撮像シーンを特徴量推定部９３、特徴量記憶制御部９４、及び撮像画像制御部９５に供給する。ここで、撮像シーンは、夜景シーンである。また、撮像シーンが夜景シーンである場合、画像データの特徴量は、例えば、画像全面の平均輝度である。
【００３８】
次に、特徴量推定部９３の失敗画像特定量推定部９３１が、削除される画像データの平均輝度ＹＮＧ（特徴量）を算出（推定）する（ステップＳ１０３）。つまり、ステップＳ１０３において、失敗画像特定量推定部９３１は、削除対象の画像データ（失敗画像データ）から画像全面の平均輝度ＹＮＧを算出することにより特徴量を推定する。また、特徴量記憶制御部９４は、失敗画像特定量推定部９３１によって算出された失敗画像データの平均輝度ＹＮＧ（特徴量）を、撮像シーン名“夜景シーン”に対応付けて特徴量記憶部６１に記憶させる。また、画像削除制御部９１は、記憶媒体２００又は記憶部６０に削除対象の画像データを削除させる。
なお、特徴量記憶部６１には、成功画像データの平均輝度ＹＯＫ（特徴量）も撮像シーン名“夜景シーン”に対応付けてられて記憶されるが、成功画像データの平均輝度ＹＯＫは、予め記憶されている形態を説明する。また、成功画像データの平均輝度ＹＯＫは、特徴量推定部９３の成功画像特定量推定部９３２によって算出（推定）される。
【００３９】
次に、撮像画像制御部９５が、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差Δ１を算出する（ステップＳ１０４）。つまり、ステップＳ１０４において、撮像画像制御部９５は、画像データの撮像シーン名“夜景シーン”に対応する失敗画像データの平均輝度ＹＮＧと成功画像データの平均輝度ＹＯＫとを、特徴量記憶部６１から読み出して、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差Δ１を算出する。この成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差Δ１は、撮像装置１００によって自動設定された撮像条件における夜景画像の明るさと、使用者にとって好みな夜景画像の明るさとの差に相当する。つまり、この成功画像データの平均輝度ＹＮＧと失敗画像データの平均輝度ＹＯＫとの差Δ１は、撮像装置１００により最適と判断された露出と使用者が意図する露出との差になる。従って、次に撮像する際には、この差Δ１を無くすように、自動設定された撮像条件（撮像装置１００による最適露出）を変更（補正）すれば、使用者にとって好みな画像データに近づくことになる。なお、次に撮像する際とは、次回以降に撮像する場合のことである。
【００４０】
つまり、次に撮像する場合には、画像処理装置２０は、上述の差Δ１分を補正するように撮像部１０の制御を行う（ステップＳ１０５）。ステップＳ１０５において、夜景シーンによって撮像される場合に、特徴量推定部９３の撮像画像特定量推定部９３３は、スルー画像データに基づいて撮像される画像データの平均輝度Ｙ（第３の特徴量）を算出（推定）する。なお、撮像される画像データの撮像シーンは、スルー画像データに基づいて撮像シーン判定部９２により“夜景シーン”と判定される。撮像画像制御部９５は、撮像される画像データの平均輝度Ｙに上述の差Δ１分に補正するように、撮像条件を変更させる制御を行う。つまり、撮像画像制御部９５は、撮像部１０に、例えば、撮像条件である露出値を上述の差Δ１分変更させる。これにより、削除された画像データの特徴量が撮像条件に反映される。
【００４１】
なお、ステップＳ１０４の処理は、画像データを削除する際に行ってもよいし、次に撮像する際に行ってもよい。また、差Δ１の算出に使用する失敗画像データの平均輝度ＹＮＧは、最後に削除された画像データの平均輝度を使用してもよいし、今までに削除された画像データの平均輝度を平均した値を使用してもよい。今までに削除された画像データの平均輝度をデータベース化して、データベースに基づいて失敗画像データの平均輝度ＹＮＧを決定してもよい。
【００４２】
次に、図４（ｂ）のステップＳ１０５の処理を図５を用いて説明する。
図５は、本実施形態における成功画像データの分布を示す図である。
この図において、横軸は、画像データの平均輝度ＹＡＶＧを示し、縦軸は、画像数を示す。波形１０１は、成功画像データの平均輝度分布を示す。また、平均輝度ＹＯＫは、成功画像データの平均輝度を平均した値を示す。平均輝度ＹＮＧは、削除された画像データの平均輝度を示す。Δ１は、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差を示す。
次に撮像する際に、スルー画像データの平均輝度を平均輝度Ｙ１とする。この平均輝度Ｙ１は、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度である。この場合、撮像画像制御部９５は、撮像条件である露出値を上述の差Δ１分補正する。結果として、撮像される画像データは、平均輝度Ｙ２の明るさに補正されて撮像される。
【００４３】
画像処理装置２０では、図４（ｂ）のステップＳ１０１〜ステップＳ１０５の処理が繰り返されることにより、撮像装置１００により最適と判断された画像データの明るさが、使用者にとって意図される（好みの）画像データの明るさに近づいて行く。
図６は、本実施形態における撮像装置１００により最適と判断された画像データの明るさの分布を示す図である。
この図において、グラフは、画像処理装置２０を備えた撮像装置１００が使用者に使用され続けることにより、撮像装置１００により最適と判断された画像データの明るさが、使用者にとって意図される（好みの）画像データの明るさに近づいて行くことを示す。グラフにおいて、横軸は、画像データの平均輝度ＹＡＶＧを示し、縦軸は、画像数を示す。
【００４４】
波形１０２は、撮像画像制御部９５による補正が行われる前に、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度分布である。また、この平均輝度分布の平均値が、平均輝度ＹＡＵＴＯである。また、平均輝度ＹＯＫ１は、使用者が暗い画像データが好みである場合における、成功画像データの平均輝度の平均値である。また、平均輝度ＹＯＫ２は、使用者が明るい画像データが好みである場合における、成功画像データの平均輝度の平均値である。
【００４５】
使用者が暗い画像データが好みである場合、撮像装置１００が使用者に使用され続けることによって、撮像装置１００により最適と判断された画像データの明るさの分布は、波形１０２のから波形１０３に移動する。
また、使用者が明るい画像データが好みである場合、撮像装置１００が使用者に使用され続けることによって、撮像装置１００により最適と判断された画像データの明るさの分布は、波形１０２のから波形１０４に移動する。
【００４６】
以上のように、画像処理装置２０では、画像削除制御部９１が、撮像された画像データを削除させ、撮像シーン判定部９２が、画像データの撮像シーンを判定する。また、失敗画像特徴量推定部９３１（第１の特徴量推定部）が、画像削除制御部９１によって画像データを削除させる場合に、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）を推定する。特徴量記憶制御部９４は、画像データの撮像シーンと失敗画像データの平均輝度ＹＮＧ（第１の特徴量）とに関連付けて特徴量記憶部６１に記憶させる。これにより、画像データの撮像シーンごとに、失敗画像データの特徴量をデータベースとして蓄積することができる。このため、画像処理装置２０及び撮像装置１００では、特徴量記憶部６１に記憶された失敗画像データの特徴量に基づいて、画像データの撮像シーンごとに次の撮像条件をより最適な撮像条件に変更させることができる。結果として、画像処理装置２０及び撮像装置１００では、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減することができる。
【００４７】
また、画像処理装置２０では、撮像画像制御部９５が、画像データの撮像シーンに対応する、成功画像データの平均輝度ＹＯＫ（第２の特徴量）と、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）との差Δ１に基づいて、撮像条件を変更させる処理を撮像シーンごとに行う。従って、撮像装置１００が使用者に使用され続けることにより、成功画像データの平均輝度ＹＯＫ（第２の特徴量）と、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）とを撮像シーンごとにデータベース化して蓄積することができる。これにより、撮像装置１００によって最適と判断された画像データの特徴量を、使用者にとって意図される（好みの）画像データの特徴量に近づけることができる。つまり、撮像回数を増やすことによって、撮像装置１００による最適な設定の精度を向上させることができる。
【００４８】
また、画像処理装置２０では、成功画像特徴量推定部９３２（第２の特徴量推定部）が、撮像シーンごとに成功画像データの平均輝度ＹＯＫ（第２の特徴量）を推定する。また、特徴量記憶制御部９４は、成功画像データの平均輝度ＹＯＫ（第２の特徴量）と、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）とを、撮像シーンに関連付けて特徴量記憶部６１に記憶させる。これにより、画像処理装置２０は、成功画像データの平均輝度ＹＯＫ（第２の特徴量）を更新することができる。画像処理装置２０が、撮像シーンごとに更新された成功画像データの平均輝度ＹＯＫ（第２の特徴量）を使用することができる。このため、画像処理装置２０は、常に最新の成功画像データの平均輝度ＹＯＫ（第２の特徴量）に基づいて、画像データの撮像シーンごとに次の撮像条件をより最適な撮像条件に変更させることができる。
【００４９】
＜第２の実施形態＞
次に、本発明の第２の実施形態による画像処理装置及び撮像装置を図面を参照して説明する。
本実施形態における撮像装置、及び画像処理装置の構成は、図１及び図２に示される撮像装置１００及び画像処理装置２０と同じである。
【００５０】
図７は、本実施形態における特徴量記憶部６１のデータ構成を示す図である。
この図において、特徴量記憶部６１では、撮像シーンを識別する識別情報（例えば、撮像シーン名）、削除された画像データの下側特徴量（失敗画像データの下側特徴量）、削除された画像データの上側特徴量（失敗画像データの上側特徴量）及び成功画像データの特徴量（第２の特徴量）が関連付けられて記憶される。
ここで、削除された画像データの下側特徴量（失敗画像データの下側特徴量）は、削除された画像データの特徴量（第１の特徴量）が、成功画像データの特徴量（第２の特徴量）より小さい値を示す下側特徴量区分である場合における失敗画像データの特徴量（第１の特徴量）である。また、削除された画像データの上側特徴量（失敗画像データの上側特徴量）は、削除された画像データの特徴量（第１の特徴量）が、成功画像データの特徴量（第２の特徴量）より大きい値を示す上側特徴量区分である場合における失敗画像データの特徴量（第１の特徴量）である。
【００５１】
例えば、撮像シーン名が夜景シーンである場合、夜景シーンにおける特徴量は、画像データの平均輝度値である。このため、特徴量記憶部６１には、失敗画像データの平均輝度値（下側平均輝度値ＹＮＧ１、上側平均輝度値ＹＮＧ２）と成功画像データの平均輝度値ＹＯＫとの組が、撮像シーン名“夜景シーン”と関連付けられて記憶される。
【００５２】
また、例えば、撮像シーン名がポートレートである場合、ポートレートにおける特徴量は、顔部分の平均輝度値である。このため、特徴量記憶部６１には、失敗画像データにおける顔部分の平均輝度値（顔部分の下側平均輝度値ＺＮＧ１、顔部分の上側平均輝度値ＺＮＧ２）と成功画像データにおける顔部分の平均輝度値ＺＯＫとの組が、撮像シーン名“ポートレート”と関連付けられて記憶される。
【００５３】
次に、本実施形態の動作について説明する。
本実施形態における画像処理装置２０の動作は、特徴量記憶制御部９４及び撮像画像制御部９５の動作を除いて第１の実施形態の動作と同様である。以下、本実施形態における特徴量記憶制御部９４及び撮像画像制御部９５の動作について説明する。
【００５４】
本実施形態において、特徴量記憶制御部９４は、画像削除制御部９１によって画像データを削除させる場合に、失敗画像データの特徴量（第１の特徴量）が成功画像データの特徴量（第２の特徴量）以上か否かを判定する。特徴量記憶制御部９４は、判定した結果（判定結果）に基づいて、下側特徴量区分と上側特徴量区分とに分類する。ここで、下側特徴量区分とは、失敗画像データの特徴量（第１の特徴量）が成功画像データの特徴量（第２の特徴量）より小さい値を示す。また、上側特徴量区分とは、失敗画像データの特徴量（第１の特徴量）が成功画像データの特徴量（第２の特徴量）以上の値を示す。
【００５５】
また、特徴量記憶制御部９４は、分類した結果（分類結果）に関連付けて、失敗画像データの特徴量（第１の特徴量）を特徴量記憶部６１に記憶させる。なお、特徴量記憶制御部９４が失敗画像データの特徴量（第１の特徴量）と成功画像データの特徴量（第２の特徴量）とを撮像シーンに関連付けて特徴量記憶部６１に記憶させる動作は同様である。
【００５６】
例えば、撮像シーン名が夜景シーンである場合、特徴量記憶制御部９４は、画像削除制御部９１によって画像データを削除させる際に、失敗画像データの平均輝度値ＹＮＧが成功画像データの平均輝度値ＹＯＫ以上か否かを判定する。失敗画像データの平均輝度値ＹＮＧが成功画像データの平均輝度値ＹＯＫより小さいと判定された場合、特徴量記憶制御部９４は、失敗画像データの平均輝度値ＹＮＧを下側特徴量区分と分類し、失敗画像データの平均輝度値ＹＮＧを平均輝度値ＹＮＧ１と定義する。特徴量記憶制御部９４は、特徴量記憶部６１における撮像シーン名“夜景シーン”に対応する下側特徴量区分の領域に平均輝度値ＹＮＧ１を記憶させる。
【００５７】
また、失敗画像データの平均輝度値ＹＮＧが成功画像データの平均輝度値ＹＯＫ以上であると判定された場合、特徴量記憶制御部９４は、失敗画像データの平均輝度値ＹＮＧを上側特徴量区分と分類し、失敗画像データの平均輝度値ＹＮＧを平均輝度値ＹＮＧ２と定義する。特徴量記憶制御部９４は、特徴量記憶部６１における撮像シーン名“夜景シーン”に対応する上側特徴量区分の領域に平均輝度値ＹＮＧ２を記憶させる。
【００５８】
次に、撮像画像制御部９５は、成功画像データの特徴量と失敗画像データの下側特徴量区分の値との差Δ１（第１の差）、及び成功画像データの特徴量と失敗画像データの上側特徴量区分の値との差Δ２（第２の差）を算出する。つまり、撮像画像制御部９５は、例えば、画像データの撮像シーン名“夜景シーン”に対応する失敗画像データの平均輝度ＹＮＧ１と成功画像データの平均輝度ＹＯＫとを特徴量記憶部６１から読み出して、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧ１との差Δ１を算出する。また、撮像画像制御部９５は、例えば、画像データの撮像シーン名“夜景シーン”に対応する失敗画像データの平均輝度ＹＮＧ２と成功画像データの平均輝度ＹＯＫとを特徴量記憶部６１から読み出す。撮像画像制御部９５は、特徴量記憶部６１から読み出した成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧ２との差Δ２を算出する。
【００５９】
また、次に撮像される際に、撮像画像制御部９５は、撮像される画像データの特徴量（第３の特徴量）が成功画像データの特徴量（第２の特徴量）以上か否かを判定する。撮像される画像データの特徴量（第３の特徴量）が成功画像データの特徴量（第２の特徴量）より小さいと判定された場合に、撮像画像制御部９５は、上述の差Δ１（第１の差）を撮像条件に加算して撮像部１０に変更させる処理を撮像シーンごとに行う。
【００６０】
また、撮像される画像データの特徴量（第３の特徴量）が成功画像データの特徴量（第２の特徴量）以上であると判定された場合に、撮像画像制御部９５は、上述の差Δ２（第２の差）を撮像条件に減算して撮像部１０に変更させる処理を撮像シーンごとに行う。
【００６１】
ここで、撮像される画像データの特徴量（第３の特徴量）は、第１の実施形態の場合と同様に、撮像画像特定量推定部９３２によって、スルー画像データに基づいて算出（推定）される。また、撮像される画像データの撮像シーンは、スルー画像データに基づいて撮像シーン判定部９２により判定される。
【００６２】
例えば、撮像される画像データの撮像シーンが、撮像シーン判定部９２により“夜景シーン”と判定される。この場合、撮像画像制御部９５は、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫ以上か否かを判定する。従って、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫより小さいと判定された場合に、撮像画像制御部９５は、撮像部１０に上述の差Δ１を撮像条件に加算して変更させる処理を行う。つまり、撮像画像制御部９５は、撮像部１０に、例えば、撮像条件である露出値を上述の差Δ１分加算した変更させる。ここで、上述の差Δ１（第１の差）は、成功画像データの平均輝度ＹＯＫと下側特徴量区分の失敗画像データの平均輝度ＹＮＧ１との差である。これにより、削除された画像データの特徴量が撮像条件に反映される。
【００６３】
また、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫ以上であると判定された場合に、撮像画像制御部９５は、撮像部１０に上述の差Δ２を撮像条件に減算して変更させる処理を行う。つまり、撮像画像制御部９５は、撮像部１０に、例えば、撮像条件である露出値を上述の差Δ２分減算した変更させる。ここで、上述の差Δ２（第２の差）は、成功画像データの平均輝度ＹＯＫと上側特徴量区分の失敗画像データの平均輝度ＹＮＧ２との差である。これにより、削除された画像データの特徴量が撮像条件に反映される。
【００６４】
図８は、本実施形態における成功画像データの分布を示す図である。
この図において、横軸は、画像データの平均輝度ＹＡＶＧを示し、縦軸は、画像数を示す。波形１０５は、成功画像データの平均輝度分布を示す。また、平均輝度ＹＯＫは、成功画像データの平均輝度の平均値を示す。平均輝度ＹＮＧ１は、下側特徴量区分における削除された画像データの平均輝度を示す。Δ１は、成功画像データの平均輝度ＹＯＫと下側特徴量区分における失敗画像データの平均輝度ＹＮＧ１との差を示す。平均輝度ＹＮＧ２は、上側特徴量区分における削除された画像データの平均輝度を示す。Δ２は、成功画像データの平均輝度ＹＯＫと下側特徴量区分における失敗画像データの平均輝度ＹＮＧ２との差を示す。
本実施形態では、撮像画像制御部９５は、下側特徴量区分と上側区分とにおいて異なる値に基づいて撮像条件を変更させる。
【００６５】
例えば、次に撮像する際に、スルー画像データの平均輝度を平均輝度Ｙ３とする。この平均輝度Ｙ３は、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度である。この場合、平均輝度Ｙ３が下側特徴量区分であるため、撮像画像制御部９５は、撮像条件である露出値を上述の差Δ１分補正する。結果として、撮像される画像データは、平均輝度Ｙ４の明るさに補正されて撮像される。
【００６６】
また、例えば、次に撮像する際に、スルー画像データの平均輝度を平均輝度Ｙ５とする。この平均輝度Ｙ５は、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度である。この場合、平均輝度Ｙ３が上側特徴量区分であるため、撮像画像制御部９５は、撮像条件である露出値を上述の差Δ２分補正する。結果として、撮像される画像データは、平均輝度Ｙ６の明るさに補正されて撮像される。
【００６７】
以上のように、本実施形態における画像処理装置２０は、撮像される画像データの特徴量（第３の特徴量）を推定する第３の特徴量推定部を備える。また、特徴量記憶制御部９４が、画像削除制御部９１によって画像データを削除させる場合に、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）が成功画像データの平均輝度ＹＯＫ（第２の特徴量）以上か否かを判定する。特徴量記憶制御部９４は、判定した結果に基づいて、下側特徴量区分と上側特徴量区分とに分類する。
【００６８】
また、特徴量記憶制御部９４は、分類した結果に関連付けて、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）を特徴量記憶部にそれぞれ記憶させる。また、撮像画像制御部９５は、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫより小さい場合に、下側特徴量区分の値（ＹＮＧ１）と成功画像データの平均輝度ＹＯＫとの差Δ１（第１の差）を撮像条件に加算して変更させる処理を撮像シーンごとに行う。また、撮像画像制御部９５は、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫ以上である場合に、上側特徴量区分の値（ＹＮＧ２）と成功画像データの平均輝度ＹＯＫとの差Δ２（第２の差）を撮像条件に減算して変更させる処理を撮像シーンごとに行う。
【００６９】
これにより、本実施形態における画像処理装置２０は、撮像条件を変更させる処理において、下側特徴量区分と上側特徴量区分とでそれぞれ異なる処理を行う。このため、本実施形態では、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を、第１の実施形態より更に低減することができる。
【００７０】
なお、本発明は、上記の各実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で変更可能である。上記の各実施形態において、撮像する際に、撮像シーン判定部９２が撮像シーンを判定する形態を説明したが、使用者によって、撮像シーンが設定される形態でもよい。また、上記の各実施形態において、撮像画像制御部９５は、撮像部１０に撮像条件を変更させる処理を行う形態を説明したが、他の形態でもよい。例えば、撮像画像制御部９５は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）との差に基づいて、撮像した画像データを補正する画像処理を撮像シーンごとに行う形態でもよい。
また、撮像画像制御部９５は、撮像シーンに関連付けられて記憶された失敗画像データの特徴量（第１の特徴量）に基づいて、失敗画像が撮像されそうな場合に、警告を促す表示を表示部５０に表示させてもよい。
【００７１】
また、上記の各実施形態において、撮像シーンが夜景シーンである場合について詳細に説明したが、ポートレートなどの他の撮像シーンに適用してもよい。例えば、撮像シーンがポートレートである場合、撮像シーン判定部９２は顔検出機能を用いて撮像シーンを判定する。また、画像データの特徴量には、例えば、顔部分の明るさ（顔部分の平均輝度）を画面全体の平均輝度に代わって適用すればよい。この場合、削除される画像データの顔部分の平均輝度と成功画像データの顔部分の平均輝度との差が、使用者が意図する顔部分の明るさと撮像装置１００によって最適と判断された顔部分の明るさの差となる。そのため、撮像画像制御部９５は、顔検出された場合の撮像では、この顔部分の明るさの差が埋まるように撮像部１０に露出制御させればよい。
【００７２】
また、ゲインマップなどで、顔部分の明るさを補正する機能がある場合、顔部分は顔部分のデータベースに基づいたゲインマップを適用してもよい。また、背景の夜景部分には、夜景のデータベースに基づいたゲインマップを適用してもよい。これらにより、被写体ごとに最適な露出が得られて、削除される画像データ（失敗画像データ）の発生頻度を更に低減できる。
【００７３】
また、画像データの特徴量には、上記の各実施形態に限定されるものではなく、他の特徴量を適用してもよい。画像データの特徴量には、例えば、白とびや黒つぶれしている面積や主要被写体のヒストグラム、ホワイトバランスを失敗した場合における画面全体の色被り度合いなど、画像データを解析することで得られる情報を適用してもよい。また、画像データの特徴量には、例えば、ＩＳＯ（国際標準化機構）感度、絞り、シャッター速度、手振れ補正ＯＮ（オン）／ＯＦＦ（オフ）、シーンモード設定などの撮像装置の設定情報を適用してもよい。
【００７４】
また、撮像シーンがポートレートである場合には、顔部分の明るさの他に、例えば、笑顔の度合い、赤目の発生度合い、服の部分の白とびなどを画像データの特徴量としてもよい。また、撮像シーンがスポーツシーンである場合には、例えば、ＦＦＴ（高速フーリエ変換：Fast Fourier transform）によって高周波成分があるか否かによって被写体のブレを示す特徴量としてもよい。また、人物の向きや、被写体となる人物の有無やフレームアウトなどを画像データの特徴量としてもよい。
【００７５】
また、上記の各実施形態において、撮像装置１００が最適な撮像条件を設定する場合の形態を説明したが、ＡＥ（Automatic Exposure）ブラケティングなどの撮像装置１００が撮像条件を変更しながら複数の画像データを撮像する場合に適用する形態でもよい。この場合、撮像画像制御部９５は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）との差Δ１（又はΔ２）の範囲内において撮像条件を変更させる制御を行えばよい。また、成功画像データの特徴量（第２の特徴量）を中心値として、差Δ１（又はΔ２）分変更してブラケティングを行ってもよい。これらにより、最適なブラケティングの変更間隔及び変更範囲を設定することができる。
【００７６】
また、上記の各実施形態において、画像データを削除する際に、失敗画像データの特徴量（第１の特徴量）を抽出する形態を説明したが、これに限定されるものではない。例えば、画像データを撮像する際に、特徴量を抽出して、画像データと対応付けて記憶部６０に記憶させ、削除する際に、特徴量記憶部６１に失敗画像データの特徴量（第１の特徴量）に記憶させる形態でもよい。
【００７７】
また、上記の各実施形態において、失敗画像特徴量推定部９３１（第１の特定量推定部）、成功画像特徴量推定部９３２（第２の特定量推定部）、及び撮像画像特徴量推定部９３３（第３の特定量推定部）を備える形態を説明したが、これに限定されるものではない。例えば、１つの特徴量推定部によって、全ての処理を行う形態でもよいし、３つの処理の
うちの２つの処理を１つの特徴量推定部で行う形態でもよい。
また、特徴量記憶部６１が記憶部６０に含まれる形態を説明したが、特徴量記憶部６１を記憶部６０の外部に設ける形態でもよい。
【００７８】
また、上記の各実施形態において、特徴量記憶部６１は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）を記憶する形態を説明したが、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）との差（Δ１及びΔ２）を記憶する形態でもよい。
【００７９】
また、１つの撮像装置を家族など複数の人で共有して使用する場合が考えられる。このような場合には、特徴量記憶部６１は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）とを、使用者ごとにデータベース化してもよい。これにより、撮像装置を複数人によって共有して使用した場合に、個人個人の好みに対応することができる。
【００８０】
なお、上記の各実施形態において、画像処理装置２０の各部は、専用のハードウェアによって実現されてもよく、また、画像処理装置２０の各部は、メモリー及びＣＰＵにより構成され、画像処理装置２０の各機能は、プログラムによって実現されてもよい。
【００８１】
なお、上述の画像処理装置２０の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した画像処理装置２０による処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
【００８２】
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＣＤ−ＲＯＭ等の可搬媒体、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ） Ｉ／Ｆ（インタフェース）を介して接続されるＵＳＢメモリー、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリーのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
【符号の説明】
【００８３】
２０…画像処理装置、６０…記憶部、６１…特徴量記憶部、９１…画像削除制御部、９２…撮像シーン判定部、９３…特徴量推定部、９４…特徴量記憶制御部、９５…撮像画像制御部、９３１…失敗画像特徴量推定部、９３２…成功画像特徴量推定部、９３３…撮像画像特徴量推定部、１００…撮像装置
【技術分野】
【０００１】
本発明は、画像処理装置、撮像装置、プログラム、及び記録媒体に関する。
【背景技術】
【０００２】
画像をデジタル画像データとして取り込むデジタルカメラなどの撮像装置では、フィルムを使用したカメラに比べて簡単に多くの画像が撮像できる。このような画像をデジタル画像データとして取り込む撮像装置では、撮像したその場所で、撮像した画像を確認できるため、不要な画像データの削除を簡単に行うことができる。このような撮像装置では、削除された画像データの各種撮像条件と、各種撮像条件において撮像された画像が削除される頻度から、削除される可能性の高い撮像設定を抽出する。削除される可能性が高い撮像条件によって撮像されそうな場合に、撮像装置が、使用者に警告を促す、又は、削除される可能性の高い撮像条件にならないように制御を変更する技術が開示されている（例えば、特許文献１を参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００９−２１８９３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、特許文献１に示される技術では、上述した制御を行うことにより、撮像された画像データにおける削除される画像データ（失敗画像データ）の発生頻度を低減させる。しかしながら、撮像される画像データが良いか悪いかの判断は、撮像される画像の撮像シーンによって大きく異なる場合がある。例えば、日中に撮像する場合と夜間に撮像する場合とでは、同じ露出制御でも全く異なる画像データが撮像される。このため、特許文献１で示されるように、単純に削除される可能性が高い撮像条件にならないようにフィードバック制御する、又は使用者に警告を促すことを行っても、使用者が意図した（良いと判断する）撮像にはならない場合がある。つまり、特許文献１で示される撮像装置では、撮像シーンによっては、削除される画像データ（失敗画像データ）の発生頻度を低減するには、不十分である。
【０００５】
本発明は、上記問題を解決すべくなされたもので、その目的は、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減することができる画像処理装置、撮像装置、プログラム、及び記録媒体を提供することにある。
【課題を解決するための手段】
【０００６】
上記問題を解決するために、本発明は、撮像された画像データを削除させる画像削除制御部と、画像データの撮像シーンを判定する撮像シーン判定部と、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定部と、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御部とを備えることを特徴とする画像処理装置である。
【０００７】
また、本発明は、上記画像処理装置を備えることを特徴とする撮像装置である。
【０００８】
また、本発明は、画像処理装置としてのコンピュータに実行させるためのプログラムであって、画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順とを前記コンピュータに実行させるためのプログラムである。
【０００９】
また、本発明は、画像処理装置としてのコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順とを前記コンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体である。
【発明の効果】
【００１０】
本発明によれば、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減することができる。
【図面の簡単な説明】
【００１１】
【図１】第１の実施形態による撮像装置を示すブロック図である。
【図２】同実施形態における画像処理装置を示すブロック図である。
【図３】同実施形態における特徴量記憶部のデータ構成を示す図である。
【図４】同実施形態における動作の一形態を示す図である。
【図５】同実施形態における成功画像データの分布を示す図である。
【図６】同実施形態における撮像装置により最適と判断された画像データの明るさの分布を示す図である。
【図７】第２の実施形態における特徴量記憶部のデータ構成を示す図である。
【図８】同実施形態における成功画像データの分布を示す図である。
【発明を実施するための形態】
【００１２】
＜第１の実施形態＞
まず、本発明の一実施形態による画像処理装置及び撮像装置を図面を参照して説明する。
図１は、本実施形態による撮像装置１００を示すブロック図である。
この図において、撮像装置１００は、撮像部１０、バッファメモリ部３０、画像表示処理部４０、表示部５０、記憶部６０、通信部７０、操作部８０、及び制御部９０を備える。また、撮像装置１００は、画像処理装置２０を備える。ここで、画像処理装置２０は、制御部９０の一部分と記憶部６０の一部分とを含む。
【００１３】
撮像部１０は、複数のレンズを備える光学系１１、撮像素子１２、及びＡ／Ｄ（アナログ／デジタル）変換部１３を備える。この撮像部１０は、設定された撮像条件（例えば、絞り値、露出値など）に基づいて制御部９０によって制御される。撮像部１０は、光学系１１を介した光学像を撮像素子１２に結像させ、Ａ／Ｄ変換部１３によって変換された当該光学像に基づく画像データを生成する。
なお、上述した光学系１１は、撮像装置１００に取り付けられて一体とされていてもよいし、撮像装置１００に着脱可能に取り付けられてもよい。
【００１４】
撮像素子１２は、例えば、受光面（不図示）に結像した光学像を電気信号（電圧信号）に変換して、Ａ／Ｄ変換部１３に供給する。撮像素子１２の受光面は、例えば、ＣＣＤ（Charge Coupled Device）イメージセンサなどの格子状に配置されている複数のイメージセンサ（不図示）で構成され、それぞれのイメージセンサは、結像された光学像を電圧値に変換する。
Ａ／Ｄ変換部１３は、撮像素子１２によって変換された電圧値をアナログ−デジタル変換し、この変換したデジタル信号である画像データを出力する。
【００１５】
操作部８０は、例えば、電源スイッチ、シャッターボタン、十字キー、確定ボタン、削除ボタン、及び、その他の操作キーを含み、使用者によって操作されることで、使用者の操作入力を受け付けて、制御部９０に供給する。
【００１６】
画像表示処理部４０は、バッファメモリ部３０に記憶されている画像データを表示部５０に表示させる表示制御処理を行う。ここでいうバッファメモリ部３０に記憶されている画像データとは、画像表示処理部４０に入力される画像データ（入力画像）のことであり、例えば、撮像画像データ、スルー画像データ、または、記憶媒体２００から読み出された撮像画像データのことである。
表示部５０は、例えば、液晶ディスプレイであって、撮像部１０によって得られた画像データや、操作画面等を表示する。
【００１７】
記憶部６０には、制御部９０によってシーン判定の際に参照される判定条件や、撮像条件、等が記憶されている。また、記憶部６０には、削除された画像データの特徴を示す失敗画像データの特徴量や、使用者の好みの画像を示す成功画像データの特徴量、等も記憶される。
バッファメモリ部３０は、撮像部１０によって撮像された画像データを、一時的に記憶する。
【００１８】
通信部７０は、カードメモリ等の取り外しが可能な記憶媒体２００と接続され、この記憶媒体２００への撮像画像データの書込み、読み出し、又は消去を行う。
記憶媒体２００は、撮像装置１００に対して着脱可能に接続される記憶部であり、例えば、撮像部１０によって生成された撮像画像データを記憶する。
【００１９】
制御部９０は、例えば、ＣＰＵ（Central processing unit）などを含み、撮像装置１００が備える各構成を制御する。制御部９０は、例えば、操作部８０を介して撮像指示を受け付けた際に、撮像素子１２とＡ／Ｄ変換部１３とを介して得られる画像データを、撮像された静止画の撮像画像データとして、記憶媒体２００に記憶させる。また、制御部９０は、例えば、操作部８０を介して撮像指示を受け付けていない状態において、撮像素子１２とＡ／Ｄ変換部１３とを介して連続的に得られる画像データをスルー画（スルー画データ）として画像表示処理部４０に供給し、表示部５０に連続的に表示させる。また、制御部９０は、後述において詳細に説明する画像データを削除する処理、及び削除された画像データの特徴量を撮像制御に反映させる処理を行う。
【００２０】
バス３００は、撮像部１０と、制御部９０と、操作部８０と、画像表示処理部４０と、表示部５０と、記憶部６０と、バッファメモリ部３０と、通信部７０とに接続され、各部から出力された画像データや制御信号等を転送する。
【００２１】
また、撮像装置１００は、画像処理装置２０を含む。ここで、画像処理装置２０は、制御部９０の一部分と記憶部６０の一部分とを含む。
【００２２】
次に、図２を用いて、図１に示された画像処理装置２０の構成について説明する。
図２は、本実施形態における画像処理装置２０を示すブロック図である。
この図において、画像処理装置２０は、画像削除制御部９１、撮像シーン判定部９２、特徴量推定部９３、特徴量記憶制御部９４、撮像画像制御部９５、及び特徴量記憶部６１を備える。なお、画像削除制御部９１、撮像シーン判定部９２、特徴量推定部９３、特徴量記憶制御部９４、及び撮像画像制御部９５は、制御部９０に含まれる。また、特徴量記憶部６１は、記憶部６０に含まれる。
【００２３】
画像削除制御部９１は、撮像された画像データを削除させる。つまり、画像削除制御部９１は、操作部８０によって選択された画像データを削除させる制御を行う。なお、削除される画像データは、記憶媒体２００に記憶された画像データでもよいし、記憶部６０に記憶された画像データでもよい。
【００２４】
撮像シーン判定部９２は、画像データの撮像シーンを判定する。ここで、撮像シーンが判定される画像データには、画像削除制御部９１によって削除される画像データ、記憶媒体２００又は記憶部６０に記憶される画像データ、及びスルー画像データが含まれる。また、画像データの撮像シーンとは、例えば、夜景、ポートレート、風景、などである。撮像シーン判定部９２は、例えば、画像データを解析することにより撮像シーンを判定する。撮像シーン判定部９２は、判定した画像データの撮像シーンを特徴量推定部９３、特徴量記憶制御部９４、及び撮像画像制御部９５に供給する。
【００２５】
特徴量推定部９３は、画像データの特徴を示す特徴量を推定する。ここで、特徴量とは、例えば、画像の平均輝度値、画像データに含まれる顔部分の明るさ情報、などである。また、特徴量推定部９３は、失敗画像特徴量推定部９３１（第１の特定量推定部）、成功画像特徴量推定部９３２（第２の特定量推定部）、及び撮像画像特徴量推定部９３３（第３の特定量推定部）を備える。
【００２６】
失敗画像特徴量推定部９３１は、失敗画像データの特徴量（第１の特徴量）を推定する。なお、失敗画像データとは、画像削除制御部９１によって削除対象とされた画像データである。つまり、失敗画像データとは、使用者にとって意図しない画像データであったために、使用者によって削除する操作が行われた画像データである。失敗画像データは、記憶媒体２００又は記憶部６０から削除される画像データでもよいし、記憶媒体２００又は記憶部６０から削除されないが、表示部５０に表示されない設定にされる画像データでもよい。失敗画像特徴量推定部９３１は、推定した失敗画像データの特徴量（第１の特徴量）を特徴量記憶制御部９４に供給する。
【００２７】
成功画像特徴量推定部９３２は、撮像シーン判定部９２によって判定された撮像シーンごとに成功画像データの特徴量（第２の特徴量）を推定する。なお、成功画像データとは、撮像された画像データを記憶する記憶媒体２００又は記憶部６０に記憶された画像データのうち、削除対象の画像データを除く画像データである。つまり、成功画像データとは、使用者にとって好みの画像データを示す。成功画像特徴量推定部９３２は、推定した成功画像データの特徴量（第２の特徴量）を特徴量記憶制御部９４に供給する。
【００２８】
撮像画像特徴量推定部９３３は、撮像部１０によって撮像される画像データの特徴量（第３の特徴量）を推定する。撮像画像特徴量推定部９３３は、推定した撮像される画像データの特徴量（第３の特徴量）を撮像画像制御部９５に供給する。なお、ここでいう撮像される画像データとは、スルー画像データである。
【００２９】
特徴量記憶制御部９４は、特徴量記憶部６１に、撮像シーン判定部９２によって判定された画像データの撮像シーンと失敗画像データの特徴量とを関連付けて記憶させる。例えば、特徴量記憶制御部９４は、特徴量記憶部６１に、撮像シーンごとに失敗画像データの特徴量を記憶させる。また、特徴量記憶制御部９４は、失敗画像データの特徴量と成功画像データの特徴量とを撮像シーンに関連付けて特徴量記憶部６１に記憶させる。例えば、特徴量記憶制御部９４は、失敗画像データの特徴量と成功画像データの特徴量とを撮像シーンごとに特徴量記憶部６１に記憶させる。
【００３０】
撮像画像制御部９５は、撮像シーン判定部９２から供給される画像データの撮像シーンに対応する、失敗画像データの特徴量と成功画像データの特徴量との差に基づいて、撮像部１０の撮像条件を変更させる処理を撮像シーンごとに行う。
【００３１】
特徴量記憶部６１は、画像データの特徴量を記憶する。つまり、特徴量記憶部６１は、撮像シーン判定部９２によって判定された画像データの撮像シーンごとに、失敗画像データの特徴量と成功画像データの特徴量とを記憶する。
【００３２】
なお、制御部９０の各部と、特徴量記憶部６１を含む記憶部６０は、バス３００と接続される。制御部９０の各部、特徴量記憶部６１、及び撮像装置１００の各部は、バス３００を介して画像データや制御信号等を転送する。
【００３３】
図３は、本実施形態における特徴量記憶部６１のデータ構成を示す図である。
この図において、特徴量記憶部６１では、撮像シーンを識別する識別情報（例えば、撮像シーン名）、削除された画像データの特徴量（失敗画像データの特徴量）、及び成功画像データの特徴量が関連付けられて記憶される。
【００３４】
例えば、撮像シーン名が夜景シーンである場合、夜景シーンにおける特徴量は、画像データの平均輝度値である。このため、特徴量記憶部６１には、失敗画像データの平均輝度値ＹＮＧと成功画像データの平均輝度値ＹＯＫとの組が、撮像シーン名“夜景シーン”と関連付けられて記憶される。
なお、成功画像データの平均輝度値ＹＯＫは、撮像シーン名“夜景シーン”に対応する全成功画像データにおける平均輝度の平均値でもよいし、撮像シーン名“夜景シーン”に対応する予め設定された特定の成功画像データの平均輝度値でもよい。ここでは、成功画像データの平均輝度値ＹＯＫは、撮像シーン名“夜景シーン”に対応する全成功画像データにおける平均輝度の平均値である。
【００３５】
また、例えば、撮像シーン名がポートレートである場合、ポートレートにおける特徴量は、顔部分の平均輝度値である。このため、特徴量記憶部６１には、失敗画像データにおける顔部分の平均輝度値ＺＮＧと成功画像データにおける顔部分の平均輝度値ＺＯＫとの組が、撮像シーン名“ポートレート”と関連付けられて記憶される。
なお、成功画像データの平均輝度値ＺＯＫは、撮像シーン名“ポートレート”に対応する全成功画像データにおける顔部分の平均輝度の平均値でもよいし、撮像シーン名“ポートレート”に対応する予め設定された特定の成功画像データの顔部分の平均輝度値でもよい。ここでは、成功画像データの平均輝度値ＺＯＫは、撮像シーン名“ポートレート”に対応する全成功画像データにおける顔部分の平均輝度の平均値とする。
【００３６】
次に、本実施形態の動作について説明する。
本実施形態では、撮像シーン名が夜景シーンである場合における動作の一例を説明する。
図４は、本実施形態における動作の一形態を示す図である。
図４（ａ）は、夜景シーンの撮像データの一例を示す。また、図４（ｂ）は、図４（ａ）に示される画像データが削除される場合の動作を示すフローチャートである。
この図において、まず、使用者によって操作部８０の削除ボタンが押されると、図４（ａ）に示される画像データを削除する処理が開始される（ステップＳ１０１）。
【００３７】
次に、撮像シーン判定部９２が、削除する画像データの撮像シーンを判定する（ステップＳ１０２）。ステップＳ１０２において、撮像シーン判定部９２は、記憶媒体２００又は記憶部６０に記憶される削除対象の画像データをバス３００を介して読み出し、読み出した画像データの撮像シーンを判定する。撮像シーンの判定は、例えば、画像データを解析して判定してもよいし、画像データのヘッダー情報に含まれる撮像条件等の情報に基づいて判定してもよい。ここでは、撮像シーン判定部９２が夜景シーンであると判定した場合である。また、削除対象の画像データとは、使用者によって操作部８０を用いて選択された削除の対象となる画像データである。
撮像シーン判定部９２は、判定した画像データの撮像シーンを特徴量推定部９３、特徴量記憶制御部９４、及び撮像画像制御部９５に供給する。ここで、撮像シーンは、夜景シーンである。また、撮像シーンが夜景シーンである場合、画像データの特徴量は、例えば、画像全面の平均輝度である。
【００３８】
次に、特徴量推定部９３の失敗画像特定量推定部９３１が、削除される画像データの平均輝度ＹＮＧ（特徴量）を算出（推定）する（ステップＳ１０３）。つまり、ステップＳ１０３において、失敗画像特定量推定部９３１は、削除対象の画像データ（失敗画像データ）から画像全面の平均輝度ＹＮＧを算出することにより特徴量を推定する。また、特徴量記憶制御部９４は、失敗画像特定量推定部９３１によって算出された失敗画像データの平均輝度ＹＮＧ（特徴量）を、撮像シーン名“夜景シーン”に対応付けて特徴量記憶部６１に記憶させる。また、画像削除制御部９１は、記憶媒体２００又は記憶部６０に削除対象の画像データを削除させる。
なお、特徴量記憶部６１には、成功画像データの平均輝度ＹＯＫ（特徴量）も撮像シーン名“夜景シーン”に対応付けてられて記憶されるが、成功画像データの平均輝度ＹＯＫは、予め記憶されている形態を説明する。また、成功画像データの平均輝度ＹＯＫは、特徴量推定部９３の成功画像特定量推定部９３２によって算出（推定）される。
【００３９】
次に、撮像画像制御部９５が、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差Δ１を算出する（ステップＳ１０４）。つまり、ステップＳ１０４において、撮像画像制御部９５は、画像データの撮像シーン名“夜景シーン”に対応する失敗画像データの平均輝度ＹＮＧと成功画像データの平均輝度ＹＯＫとを、特徴量記憶部６１から読み出して、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差Δ１を算出する。この成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差Δ１は、撮像装置１００によって自動設定された撮像条件における夜景画像の明るさと、使用者にとって好みな夜景画像の明るさとの差に相当する。つまり、この成功画像データの平均輝度ＹＮＧと失敗画像データの平均輝度ＹＯＫとの差Δ１は、撮像装置１００により最適と判断された露出と使用者が意図する露出との差になる。従って、次に撮像する際には、この差Δ１を無くすように、自動設定された撮像条件（撮像装置１００による最適露出）を変更（補正）すれば、使用者にとって好みな画像データに近づくことになる。なお、次に撮像する際とは、次回以降に撮像する場合のことである。
【００４０】
つまり、次に撮像する場合には、画像処理装置２０は、上述の差Δ１分を補正するように撮像部１０の制御を行う（ステップＳ１０５）。ステップＳ１０５において、夜景シーンによって撮像される場合に、特徴量推定部９３の撮像画像特定量推定部９３３は、スルー画像データに基づいて撮像される画像データの平均輝度Ｙ（第３の特徴量）を算出（推定）する。なお、撮像される画像データの撮像シーンは、スルー画像データに基づいて撮像シーン判定部９２により“夜景シーン”と判定される。撮像画像制御部９５は、撮像される画像データの平均輝度Ｙに上述の差Δ１分に補正するように、撮像条件を変更させる制御を行う。つまり、撮像画像制御部９５は、撮像部１０に、例えば、撮像条件である露出値を上述の差Δ１分変更させる。これにより、削除された画像データの特徴量が撮像条件に反映される。
【００４１】
なお、ステップＳ１０４の処理は、画像データを削除する際に行ってもよいし、次に撮像する際に行ってもよい。また、差Δ１の算出に使用する失敗画像データの平均輝度ＹＮＧは、最後に削除された画像データの平均輝度を使用してもよいし、今までに削除された画像データの平均輝度を平均した値を使用してもよい。今までに削除された画像データの平均輝度をデータベース化して、データベースに基づいて失敗画像データの平均輝度ＹＮＧを決定してもよい。
【００４２】
次に、図４（ｂ）のステップＳ１０５の処理を図５を用いて説明する。
図５は、本実施形態における成功画像データの分布を示す図である。
この図において、横軸は、画像データの平均輝度ＹＡＶＧを示し、縦軸は、画像数を示す。波形１０１は、成功画像データの平均輝度分布を示す。また、平均輝度ＹＯＫは、成功画像データの平均輝度を平均した値を示す。平均輝度ＹＮＧは、削除された画像データの平均輝度を示す。Δ１は、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧとの差を示す。
次に撮像する際に、スルー画像データの平均輝度を平均輝度Ｙ１とする。この平均輝度Ｙ１は、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度である。この場合、撮像画像制御部９５は、撮像条件である露出値を上述の差Δ１分補正する。結果として、撮像される画像データは、平均輝度Ｙ２の明るさに補正されて撮像される。
【００４３】
画像処理装置２０では、図４（ｂ）のステップＳ１０１〜ステップＳ１０５の処理が繰り返されることにより、撮像装置１００により最適と判断された画像データの明るさが、使用者にとって意図される（好みの）画像データの明るさに近づいて行く。
図６は、本実施形態における撮像装置１００により最適と判断された画像データの明るさの分布を示す図である。
この図において、グラフは、画像処理装置２０を備えた撮像装置１００が使用者に使用され続けることにより、撮像装置１００により最適と判断された画像データの明るさが、使用者にとって意図される（好みの）画像データの明るさに近づいて行くことを示す。グラフにおいて、横軸は、画像データの平均輝度ＹＡＶＧを示し、縦軸は、画像数を示す。
【００４４】
波形１０２は、撮像画像制御部９５による補正が行われる前に、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度分布である。また、この平均輝度分布の平均値が、平均輝度ＹＡＵＴＯである。また、平均輝度ＹＯＫ１は、使用者が暗い画像データが好みである場合における、成功画像データの平均輝度の平均値である。また、平均輝度ＹＯＫ２は、使用者が明るい画像データが好みである場合における、成功画像データの平均輝度の平均値である。
【００４５】
使用者が暗い画像データが好みである場合、撮像装置１００が使用者に使用され続けることによって、撮像装置１００により最適と判断された画像データの明るさの分布は、波形１０２のから波形１０３に移動する。
また、使用者が明るい画像データが好みである場合、撮像装置１００が使用者に使用され続けることによって、撮像装置１００により最適と判断された画像データの明るさの分布は、波形１０２のから波形１０４に移動する。
【００４６】
以上のように、画像処理装置２０では、画像削除制御部９１が、撮像された画像データを削除させ、撮像シーン判定部９２が、画像データの撮像シーンを判定する。また、失敗画像特徴量推定部９３１（第１の特徴量推定部）が、画像削除制御部９１によって画像データを削除させる場合に、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）を推定する。特徴量記憶制御部９４は、画像データの撮像シーンと失敗画像データの平均輝度ＹＮＧ（第１の特徴量）とに関連付けて特徴量記憶部６１に記憶させる。これにより、画像データの撮像シーンごとに、失敗画像データの特徴量をデータベースとして蓄積することができる。このため、画像処理装置２０及び撮像装置１００では、特徴量記憶部６１に記憶された失敗画像データの特徴量に基づいて、画像データの撮像シーンごとに次の撮像条件をより最適な撮像条件に変更させることができる。結果として、画像処理装置２０及び撮像装置１００では、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を低減することができる。
【００４７】
また、画像処理装置２０では、撮像画像制御部９５が、画像データの撮像シーンに対応する、成功画像データの平均輝度ＹＯＫ（第２の特徴量）と、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）との差Δ１に基づいて、撮像条件を変更させる処理を撮像シーンごとに行う。従って、撮像装置１００が使用者に使用され続けることにより、成功画像データの平均輝度ＹＯＫ（第２の特徴量）と、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）とを撮像シーンごとにデータベース化して蓄積することができる。これにより、撮像装置１００によって最適と判断された画像データの特徴量を、使用者にとって意図される（好みの）画像データの特徴量に近づけることができる。つまり、撮像回数を増やすことによって、撮像装置１００による最適な設定の精度を向上させることができる。
【００４８】
また、画像処理装置２０では、成功画像特徴量推定部９３２（第２の特徴量推定部）が、撮像シーンごとに成功画像データの平均輝度ＹＯＫ（第２の特徴量）を推定する。また、特徴量記憶制御部９４は、成功画像データの平均輝度ＹＯＫ（第２の特徴量）と、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）とを、撮像シーンに関連付けて特徴量記憶部６１に記憶させる。これにより、画像処理装置２０は、成功画像データの平均輝度ＹＯＫ（第２の特徴量）を更新することができる。画像処理装置２０が、撮像シーンごとに更新された成功画像データの平均輝度ＹＯＫ（第２の特徴量）を使用することができる。このため、画像処理装置２０は、常に最新の成功画像データの平均輝度ＹＯＫ（第２の特徴量）に基づいて、画像データの撮像シーンごとに次の撮像条件をより最適な撮像条件に変更させることができる。
【００４９】
＜第２の実施形態＞
次に、本発明の第２の実施形態による画像処理装置及び撮像装置を図面を参照して説明する。
本実施形態における撮像装置、及び画像処理装置の構成は、図１及び図２に示される撮像装置１００及び画像処理装置２０と同じである。
【００５０】
図７は、本実施形態における特徴量記憶部６１のデータ構成を示す図である。
この図において、特徴量記憶部６１では、撮像シーンを識別する識別情報（例えば、撮像シーン名）、削除された画像データの下側特徴量（失敗画像データの下側特徴量）、削除された画像データの上側特徴量（失敗画像データの上側特徴量）及び成功画像データの特徴量（第２の特徴量）が関連付けられて記憶される。
ここで、削除された画像データの下側特徴量（失敗画像データの下側特徴量）は、削除された画像データの特徴量（第１の特徴量）が、成功画像データの特徴量（第２の特徴量）より小さい値を示す下側特徴量区分である場合における失敗画像データの特徴量（第１の特徴量）である。また、削除された画像データの上側特徴量（失敗画像データの上側特徴量）は、削除された画像データの特徴量（第１の特徴量）が、成功画像データの特徴量（第２の特徴量）より大きい値を示す上側特徴量区分である場合における失敗画像データの特徴量（第１の特徴量）である。
【００５１】
例えば、撮像シーン名が夜景シーンである場合、夜景シーンにおける特徴量は、画像データの平均輝度値である。このため、特徴量記憶部６１には、失敗画像データの平均輝度値（下側平均輝度値ＹＮＧ１、上側平均輝度値ＹＮＧ２）と成功画像データの平均輝度値ＹＯＫとの組が、撮像シーン名“夜景シーン”と関連付けられて記憶される。
【００５２】
また、例えば、撮像シーン名がポートレートである場合、ポートレートにおける特徴量は、顔部分の平均輝度値である。このため、特徴量記憶部６１には、失敗画像データにおける顔部分の平均輝度値（顔部分の下側平均輝度値ＺＮＧ１、顔部分の上側平均輝度値ＺＮＧ２）と成功画像データにおける顔部分の平均輝度値ＺＯＫとの組が、撮像シーン名“ポートレート”と関連付けられて記憶される。
【００５３】
次に、本実施形態の動作について説明する。
本実施形態における画像処理装置２０の動作は、特徴量記憶制御部９４及び撮像画像制御部９５の動作を除いて第１の実施形態の動作と同様である。以下、本実施形態における特徴量記憶制御部９４及び撮像画像制御部９５の動作について説明する。
【００５４】
本実施形態において、特徴量記憶制御部９４は、画像削除制御部９１によって画像データを削除させる場合に、失敗画像データの特徴量（第１の特徴量）が成功画像データの特徴量（第２の特徴量）以上か否かを判定する。特徴量記憶制御部９４は、判定した結果（判定結果）に基づいて、下側特徴量区分と上側特徴量区分とに分類する。ここで、下側特徴量区分とは、失敗画像データの特徴量（第１の特徴量）が成功画像データの特徴量（第２の特徴量）より小さい値を示す。また、上側特徴量区分とは、失敗画像データの特徴量（第１の特徴量）が成功画像データの特徴量（第２の特徴量）以上の値を示す。
【００５５】
また、特徴量記憶制御部９４は、分類した結果（分類結果）に関連付けて、失敗画像データの特徴量（第１の特徴量）を特徴量記憶部６１に記憶させる。なお、特徴量記憶制御部９４が失敗画像データの特徴量（第１の特徴量）と成功画像データの特徴量（第２の特徴量）とを撮像シーンに関連付けて特徴量記憶部６１に記憶させる動作は同様である。
【００５６】
例えば、撮像シーン名が夜景シーンである場合、特徴量記憶制御部９４は、画像削除制御部９１によって画像データを削除させる際に、失敗画像データの平均輝度値ＹＮＧが成功画像データの平均輝度値ＹＯＫ以上か否かを判定する。失敗画像データの平均輝度値ＹＮＧが成功画像データの平均輝度値ＹＯＫより小さいと判定された場合、特徴量記憶制御部９４は、失敗画像データの平均輝度値ＹＮＧを下側特徴量区分と分類し、失敗画像データの平均輝度値ＹＮＧを平均輝度値ＹＮＧ１と定義する。特徴量記憶制御部９４は、特徴量記憶部６１における撮像シーン名“夜景シーン”に対応する下側特徴量区分の領域に平均輝度値ＹＮＧ１を記憶させる。
【００５７】
また、失敗画像データの平均輝度値ＹＮＧが成功画像データの平均輝度値ＹＯＫ以上であると判定された場合、特徴量記憶制御部９４は、失敗画像データの平均輝度値ＹＮＧを上側特徴量区分と分類し、失敗画像データの平均輝度値ＹＮＧを平均輝度値ＹＮＧ２と定義する。特徴量記憶制御部９４は、特徴量記憶部６１における撮像シーン名“夜景シーン”に対応する上側特徴量区分の領域に平均輝度値ＹＮＧ２を記憶させる。
【００５８】
次に、撮像画像制御部９５は、成功画像データの特徴量と失敗画像データの下側特徴量区分の値との差Δ１（第１の差）、及び成功画像データの特徴量と失敗画像データの上側特徴量区分の値との差Δ２（第２の差）を算出する。つまり、撮像画像制御部９５は、例えば、画像データの撮像シーン名“夜景シーン”に対応する失敗画像データの平均輝度ＹＮＧ１と成功画像データの平均輝度ＹＯＫとを特徴量記憶部６１から読み出して、成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧ１との差Δ１を算出する。また、撮像画像制御部９５は、例えば、画像データの撮像シーン名“夜景シーン”に対応する失敗画像データの平均輝度ＹＮＧ２と成功画像データの平均輝度ＹＯＫとを特徴量記憶部６１から読み出す。撮像画像制御部９５は、特徴量記憶部６１から読み出した成功画像データの平均輝度ＹＯＫと失敗画像データの平均輝度ＹＮＧ２との差Δ２を算出する。
【００５９】
また、次に撮像される際に、撮像画像制御部９５は、撮像される画像データの特徴量（第３の特徴量）が成功画像データの特徴量（第２の特徴量）以上か否かを判定する。撮像される画像データの特徴量（第３の特徴量）が成功画像データの特徴量（第２の特徴量）より小さいと判定された場合に、撮像画像制御部９５は、上述の差Δ１（第１の差）を撮像条件に加算して撮像部１０に変更させる処理を撮像シーンごとに行う。
【００６０】
また、撮像される画像データの特徴量（第３の特徴量）が成功画像データの特徴量（第２の特徴量）以上であると判定された場合に、撮像画像制御部９５は、上述の差Δ２（第２の差）を撮像条件に減算して撮像部１０に変更させる処理を撮像シーンごとに行う。
【００６１】
ここで、撮像される画像データの特徴量（第３の特徴量）は、第１の実施形態の場合と同様に、撮像画像特定量推定部９３２によって、スルー画像データに基づいて算出（推定）される。また、撮像される画像データの撮像シーンは、スルー画像データに基づいて撮像シーン判定部９２により判定される。
【００６２】
例えば、撮像される画像データの撮像シーンが、撮像シーン判定部９２により“夜景シーン”と判定される。この場合、撮像画像制御部９５は、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫ以上か否かを判定する。従って、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫより小さいと判定された場合に、撮像画像制御部９５は、撮像部１０に上述の差Δ１を撮像条件に加算して変更させる処理を行う。つまり、撮像画像制御部９５は、撮像部１０に、例えば、撮像条件である露出値を上述の差Δ１分加算した変更させる。ここで、上述の差Δ１（第１の差）は、成功画像データの平均輝度ＹＯＫと下側特徴量区分の失敗画像データの平均輝度ＹＮＧ１との差である。これにより、削除された画像データの特徴量が撮像条件に反映される。
【００６３】
また、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫ以上であると判定された場合に、撮像画像制御部９５は、撮像部１０に上述の差Δ２を撮像条件に減算して変更させる処理を行う。つまり、撮像画像制御部９５は、撮像部１０に、例えば、撮像条件である露出値を上述の差Δ２分減算した変更させる。ここで、上述の差Δ２（第２の差）は、成功画像データの平均輝度ＹＯＫと上側特徴量区分の失敗画像データの平均輝度ＹＮＧ２との差である。これにより、削除された画像データの特徴量が撮像条件に反映される。
【００６４】
図８は、本実施形態における成功画像データの分布を示す図である。
この図において、横軸は、画像データの平均輝度ＹＡＶＧを示し、縦軸は、画像数を示す。波形１０５は、成功画像データの平均輝度分布を示す。また、平均輝度ＹＯＫは、成功画像データの平均輝度の平均値を示す。平均輝度ＹＮＧ１は、下側特徴量区分における削除された画像データの平均輝度を示す。Δ１は、成功画像データの平均輝度ＹＯＫと下側特徴量区分における失敗画像データの平均輝度ＹＮＧ１との差を示す。平均輝度ＹＮＧ２は、上側特徴量区分における削除された画像データの平均輝度を示す。Δ２は、成功画像データの平均輝度ＹＯＫと下側特徴量区分における失敗画像データの平均輝度ＹＮＧ２との差を示す。
本実施形態では、撮像画像制御部９５は、下側特徴量区分と上側区分とにおいて異なる値に基づいて撮像条件を変更させる。
【００６５】
例えば、次に撮像する際に、スルー画像データの平均輝度を平均輝度Ｙ３とする。この平均輝度Ｙ３は、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度である。この場合、平均輝度Ｙ３が下側特徴量区分であるため、撮像画像制御部９５は、撮像条件である露出値を上述の差Δ１分補正する。結果として、撮像される画像データは、平均輝度Ｙ４の明るさに補正されて撮像される。
【００６６】
また、例えば、次に撮像する際に、スルー画像データの平均輝度を平均輝度Ｙ５とする。この平均輝度Ｙ５は、撮像装置１００により最適と判断された露出値に対応する画像データの平均輝度である。この場合、平均輝度Ｙ３が上側特徴量区分であるため、撮像画像制御部９５は、撮像条件である露出値を上述の差Δ２分補正する。結果として、撮像される画像データは、平均輝度Ｙ６の明るさに補正されて撮像される。
【００６７】
以上のように、本実施形態における画像処理装置２０は、撮像される画像データの特徴量（第３の特徴量）を推定する第３の特徴量推定部を備える。また、特徴量記憶制御部９４が、画像削除制御部９１によって画像データを削除させる場合に、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）が成功画像データの平均輝度ＹＯＫ（第２の特徴量）以上か否かを判定する。特徴量記憶制御部９４は、判定した結果に基づいて、下側特徴量区分と上側特徴量区分とに分類する。
【００６８】
また、特徴量記憶制御部９４は、分類した結果に関連付けて、失敗画像データの平均輝度ＹＮＧ（第１の特徴量）を特徴量記憶部にそれぞれ記憶させる。また、撮像画像制御部９５は、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫより小さい場合に、下側特徴量区分の値（ＹＮＧ１）と成功画像データの平均輝度ＹＯＫとの差Δ１（第１の差）を撮像条件に加算して変更させる処理を撮像シーンごとに行う。また、撮像画像制御部９５は、撮像される画像データの平均輝度Ｙが成功画像データの平均輝度ＹＯＫ以上である場合に、上側特徴量区分の値（ＹＮＧ２）と成功画像データの平均輝度ＹＯＫとの差Δ２（第２の差）を撮像条件に減算して変更させる処理を撮像シーンごとに行う。
【００６９】
これにより、本実施形態における画像処理装置２０は、撮像条件を変更させる処理において、下側特徴量区分と上側特徴量区分とでそれぞれ異なる処理を行う。このため、本実施形態では、撮像シーンが様々な場合であっても、削除される画像データ（失敗画像データ）の発生頻度を、第１の実施形態より更に低減することができる。
【００７０】
なお、本発明は、上記の各実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で変更可能である。上記の各実施形態において、撮像する際に、撮像シーン判定部９２が撮像シーンを判定する形態を説明したが、使用者によって、撮像シーンが設定される形態でもよい。また、上記の各実施形態において、撮像画像制御部９５は、撮像部１０に撮像条件を変更させる処理を行う形態を説明したが、他の形態でもよい。例えば、撮像画像制御部９５は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）との差に基づいて、撮像した画像データを補正する画像処理を撮像シーンごとに行う形態でもよい。
また、撮像画像制御部９５は、撮像シーンに関連付けられて記憶された失敗画像データの特徴量（第１の特徴量）に基づいて、失敗画像が撮像されそうな場合に、警告を促す表示を表示部５０に表示させてもよい。
【００７１】
また、上記の各実施形態において、撮像シーンが夜景シーンである場合について詳細に説明したが、ポートレートなどの他の撮像シーンに適用してもよい。例えば、撮像シーンがポートレートである場合、撮像シーン判定部９２は顔検出機能を用いて撮像シーンを判定する。また、画像データの特徴量には、例えば、顔部分の明るさ（顔部分の平均輝度）を画面全体の平均輝度に代わって適用すればよい。この場合、削除される画像データの顔部分の平均輝度と成功画像データの顔部分の平均輝度との差が、使用者が意図する顔部分の明るさと撮像装置１００によって最適と判断された顔部分の明るさの差となる。そのため、撮像画像制御部９５は、顔検出された場合の撮像では、この顔部分の明るさの差が埋まるように撮像部１０に露出制御させればよい。
【００７２】
また、ゲインマップなどで、顔部分の明るさを補正する機能がある場合、顔部分は顔部分のデータベースに基づいたゲインマップを適用してもよい。また、背景の夜景部分には、夜景のデータベースに基づいたゲインマップを適用してもよい。これらにより、被写体ごとに最適な露出が得られて、削除される画像データ（失敗画像データ）の発生頻度を更に低減できる。
【００７３】
また、画像データの特徴量には、上記の各実施形態に限定されるものではなく、他の特徴量を適用してもよい。画像データの特徴量には、例えば、白とびや黒つぶれしている面積や主要被写体のヒストグラム、ホワイトバランスを失敗した場合における画面全体の色被り度合いなど、画像データを解析することで得られる情報を適用してもよい。また、画像データの特徴量には、例えば、ＩＳＯ（国際標準化機構）感度、絞り、シャッター速度、手振れ補正ＯＮ（オン）／ＯＦＦ（オフ）、シーンモード設定などの撮像装置の設定情報を適用してもよい。
【００７４】
また、撮像シーンがポートレートである場合には、顔部分の明るさの他に、例えば、笑顔の度合い、赤目の発生度合い、服の部分の白とびなどを画像データの特徴量としてもよい。また、撮像シーンがスポーツシーンである場合には、例えば、ＦＦＴ（高速フーリエ変換：Fast Fourier transform）によって高周波成分があるか否かによって被写体のブレを示す特徴量としてもよい。また、人物の向きや、被写体となる人物の有無やフレームアウトなどを画像データの特徴量としてもよい。
【００７５】
また、上記の各実施形態において、撮像装置１００が最適な撮像条件を設定する場合の形態を説明したが、ＡＥ（Automatic Exposure）ブラケティングなどの撮像装置１００が撮像条件を変更しながら複数の画像データを撮像する場合に適用する形態でもよい。この場合、撮像画像制御部９５は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）との差Δ１（又はΔ２）の範囲内において撮像条件を変更させる制御を行えばよい。また、成功画像データの特徴量（第２の特徴量）を中心値として、差Δ１（又はΔ２）分変更してブラケティングを行ってもよい。これらにより、最適なブラケティングの変更間隔及び変更範囲を設定することができる。
【００７６】
また、上記の各実施形態において、画像データを削除する際に、失敗画像データの特徴量（第１の特徴量）を抽出する形態を説明したが、これに限定されるものではない。例えば、画像データを撮像する際に、特徴量を抽出して、画像データと対応付けて記憶部６０に記憶させ、削除する際に、特徴量記憶部６１に失敗画像データの特徴量（第１の特徴量）に記憶させる形態でもよい。
【００７７】
また、上記の各実施形態において、失敗画像特徴量推定部９３１（第１の特定量推定部）、成功画像特徴量推定部９３２（第２の特定量推定部）、及び撮像画像特徴量推定部９３３（第３の特定量推定部）を備える形態を説明したが、これに限定されるものではない。例えば、１つの特徴量推定部によって、全ての処理を行う形態でもよいし、３つの処理の
うちの２つの処理を１つの特徴量推定部で行う形態でもよい。
また、特徴量記憶部６１が記憶部６０に含まれる形態を説明したが、特徴量記憶部６１を記憶部６０の外部に設ける形態でもよい。
【００７８】
また、上記の各実施形態において、特徴量記憶部６１は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）を記憶する形態を説明したが、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）との差（Δ１及びΔ２）を記憶する形態でもよい。
【００７９】
また、１つの撮像装置を家族など複数の人で共有して使用する場合が考えられる。このような場合には、特徴量記憶部６１は、成功画像データの特徴量（第２の特徴量）と失敗画像データの特徴量（第１の特徴量）とを、使用者ごとにデータベース化してもよい。これにより、撮像装置を複数人によって共有して使用した場合に、個人個人の好みに対応することができる。
【００８０】
なお、上記の各実施形態において、画像処理装置２０の各部は、専用のハードウェアによって実現されてもよく、また、画像処理装置２０の各部は、メモリー及びＣＰＵにより構成され、画像処理装置２０の各機能は、プログラムによって実現されてもよい。
【００８１】
なお、上述の画像処理装置２０の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより上述した画像処理装置２０による処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。
また、「コンピュータシステム」は、ＷＷＷシステムを利用している場合であれば、ホームページ提供環境（あるいは表示環境）も含むものとする。
【００８２】
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＣＤ−ＲＯＭ等の可搬媒体、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ） Ｉ／Ｆ（インタフェース）を介して接続されるＵＳＢメモリー、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時間の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリーのように、一定時間プログラムを保持しているものも含むものとする。また上記プログラムは、前述した機能の一部を実現するためのものであってもよく、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであってもよい。
【符号の説明】
【００８３】
２０…画像処理装置、６０…記憶部、６１…特徴量記憶部、９１…画像削除制御部、９２…撮像シーン判定部、９３…特徴量推定部、９４…特徴量記憶制御部、９５…撮像画像制御部、９３１…失敗画像特徴量推定部、９３２…成功画像特徴量推定部、９３３…撮像画像特徴量推定部、１００…撮像装置
【特許請求の範囲】
【請求項１】
撮像された画像データを削除させる画像削除制御部と、
画像データの撮像シーンを判定する撮像シーン判定部と、
前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定部と、
画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御部と
を備えることを特徴とする画像処理装置。
【請求項２】
前記画像処理装置は、
前記画像データの撮像シーンに対応する、撮像された画像データを記憶する記憶部に記憶された画像データのうち、削除対象の画像データを除く画像データの特徴を示す第２の特徴量と、前記第１の特徴量との差に基づいて、撮像条件を変更させる処理又は画像データを補正する画像処理を前記撮像シーンごとに行う撮像画像制御部
を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像処理装置は、
撮像シーンごとに前記第２の特徴量を推定する第２の特徴量推定部を備え、
前記特徴量記憶制御部は、
前記第１の特徴量と前記第２の特徴量とを撮像シーンに関連付けて前記特徴量記憶部に記憶させることを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記画像処理装置は、
撮像される前記画像データの特徴量を推定する第３の特徴量推定部を備え、
前記特徴量記憶制御部は、
前記画像削除制御部によって前記画像データを削除させる場合に、前記第１の特徴量が前記第２の特徴量以上か否かを判定し、
判定した結果を示す判定結果に基づいて、前記第１の特徴量が前記第２の特徴量より小さい値を示す下側特徴量区分と、前記第１の特徴量が前記第２の特徴量以上の値を示す上側特徴量区分とに分類し、
分類した結果を示す分類結果に関連付けて、前記第１の特徴量を前記特徴量記憶部にそれぞれ記憶させ、
前記撮像画像制御部は、
前記第３の特徴量が前記第２の特徴量より小さい場合に、前記下側特徴量区分の値と前記第２の特徴量との差を示す第１の差を撮像条件に加算して変更させる処理、又は前記第３の特徴量に前記第１の差を加算して補正する画像処理を前記撮像シーンごとに行い、
前記第３の特徴量が前記第２の特徴量以上である場合に、前記上側特徴量区分の値と前記第２の特徴量との差を示す第２の差を撮像条件に減算して変更させる処理、又は前記第３の特徴量に前記第２の差を減算する画像処理を前記撮像シーンごとに行う
ことを特徴とする請求項２又は請求項３に記載の画像処理装置。
【請求項５】
前記撮像画像制御部は、
前記撮像条件を変更しながら複数の画像データが撮像される場合に、
前記第２の特徴量と前記第１の特徴量との差の範囲内において前記撮像条件を変更させる
ことを特徴とする請求項２から請求項４のいずれか１項に記載の画像処理装置。
【請求項６】
請求項１から請求項５のいずれか１項に記載の画像処理装置を備えることを特徴とする撮像装置。
【請求項７】
画像処理装置としてのコンピュータに実行させるためのプログラムであって、
画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、
撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、
第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、
特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順と
を前記コンピュータに実行させるためのプログラム。
【請求項８】
画像処理装置としてのコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、
撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、
第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、
特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順と
を前記コンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
【請求項１】
撮像された画像データを削除させる画像削除制御部と、
画像データの撮像シーンを判定する撮像シーン判定部と、
前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定部と、
画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御部と
を備えることを特徴とする画像処理装置。
【請求項２】
前記画像処理装置は、
前記画像データの撮像シーンに対応する、撮像された画像データを記憶する記憶部に記憶された画像データのうち、削除対象の画像データを除く画像データの特徴を示す第２の特徴量と、前記第１の特徴量との差に基づいて、撮像条件を変更させる処理又は画像データを補正する画像処理を前記撮像シーンごとに行う撮像画像制御部
を備えることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像処理装置は、
撮像シーンごとに前記第２の特徴量を推定する第２の特徴量推定部を備え、
前記特徴量記憶制御部は、
前記第１の特徴量と前記第２の特徴量とを撮像シーンに関連付けて前記特徴量記憶部に記憶させることを特徴とする請求項２に記載の画像処理装置。
【請求項４】
前記画像処理装置は、
撮像される前記画像データの特徴量を推定する第３の特徴量推定部を備え、
前記特徴量記憶制御部は、
前記画像削除制御部によって前記画像データを削除させる場合に、前記第１の特徴量が前記第２の特徴量以上か否かを判定し、
判定した結果を示す判定結果に基づいて、前記第１の特徴量が前記第２の特徴量より小さい値を示す下側特徴量区分と、前記第１の特徴量が前記第２の特徴量以上の値を示す上側特徴量区分とに分類し、
分類した結果を示す分類結果に関連付けて、前記第１の特徴量を前記特徴量記憶部にそれぞれ記憶させ、
前記撮像画像制御部は、
前記第３の特徴量が前記第２の特徴量より小さい場合に、前記下側特徴量区分の値と前記第２の特徴量との差を示す第１の差を撮像条件に加算して変更させる処理、又は前記第３の特徴量に前記第１の差を加算して補正する画像処理を前記撮像シーンごとに行い、
前記第３の特徴量が前記第２の特徴量以上である場合に、前記上側特徴量区分の値と前記第２の特徴量との差を示す第２の差を撮像条件に減算して変更させる処理、又は前記第３の特徴量に前記第２の差を減算する画像処理を前記撮像シーンごとに行う
ことを特徴とする請求項２又は請求項３に記載の画像処理装置。
【請求項５】
前記撮像画像制御部は、
前記撮像条件を変更しながら複数の画像データが撮像される場合に、
前記第２の特徴量と前記第１の特徴量との差の範囲内において前記撮像条件を変更させる
ことを特徴とする請求項２から請求項４のいずれか１項に記載の画像処理装置。
【請求項６】
請求項１から請求項５のいずれか１項に記載の画像処理装置を備えることを特徴とする撮像装置。
【請求項７】
画像処理装置としてのコンピュータに実行させるためのプログラムであって、
画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、
撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、
第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、
特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順と
を前記コンピュータに実行させるためのプログラム。
【請求項８】
画像処理装置としてのコンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
画像削除制御部が、撮像された画像データを削除させる画像削除制御手順と、
撮像シーン判定部が、画像データの撮像シーンを判定する撮像シーン判定手順と、
第１の特徴量推定部が、前記画像削除制御部によって前記画像データを削除させる場合に、削除される画像データの特徴を示す第１の特徴量を推定する第１の特徴量推定手順と、
特徴量記憶制御部が、画像データの特徴量を記憶する特徴量記憶部に、前記画像データの撮像シーンと前記第１の特徴量とを関連付けて記憶させる特徴量記憶制御手順と
を前記コンピュータに実行させるためのプログラムを記録したコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１３−４２２００（Ｐ２０１３−４２２００Ａ）
【公開日】平成２５年２月２８日（２０１３．２．２８）
【国際特許分類】
【出願番号】特願２０１１−１７５８７５（Ｐ２０１１−１７５８７５）
【出願日】平成２３年８月１１日（２０１１．８．１１）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２５年２月２８日（２０１３．２．２８）
【国際特許分類】
【出願日】平成２３年８月１１日（２０１１．８．１１）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]