電子カメラ、画像処理装置、および画像処理プログラム
【課題】 複数の画像の再生順を、被写体の特性に応じた最適なものとすること。
【解決手段】 被写体を撮像して、複数の画像を生成する撮像部と、撮像部により生成した複数の画像について、評価を行う評価部と、評価部による評価結果に基づいて、撮像部により生成した複数の画像のうち、一部の画像を選択する選択部と、選択部により選択された複数の画像について、シーン認識を行う認識部と、認識部による認識結果に基づいて、シーン認識が行われた複数の画像の再生順を決定する決定部とを備える。
【解決手段】 被写体を撮像して、複数の画像を生成する撮像部と、撮像部により生成した複数の画像について、評価を行う評価部と、評価部による評価結果に基づいて、撮像部により生成した複数の画像のうち、一部の画像を選択する選択部と、選択部により選択された複数の画像について、シーン認識を行う認識部と、認識部による認識結果に基づいて、シーン認識が行われた複数の画像の再生順を決定する決定部とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子カメラ、画像処理装置、および画像処理プログラムに関する。
【背景技術】
【０００２】
従来より、複数の画像を生成して記録媒体に記録した後に、露出、コントラスト、ボケなどの観点から画像の評価を行い、評価が所定の基準より低い画像を、上述した記録媒体から削除する技術が知られている（例えば、特許文献１参照）。
【０００３】
特許文献１の発明では、露出条件評価、コントラスト評価、ボケ、焦点ボケの評価などにより画像評価処理を実行している。そして、画像評価の結果、記録媒体から削除されなかった画像には、通常、時系列に連番の名称が付与される。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−５０４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、上述した画像評価の結果、記録媒体から削除されなかった画像は、通常、複数枚の画像であり、ユーザは、これらの画像を順次再生して、最も好ましい１枚（あるいは数枚）の画像を選択する。記録媒体から削除されなかった画像には、時系列に連番の名称が付与されているため、これらの画像を再生する際には、複数の画像が時系列で再生されることになる。
【０００６】
しかし、集合写真や記念撮影など、主要被写体に大きな動きがない被写体である場合には、時系列に再生されることに特にメリットはない。そのため、ユーザは、複数の画像を順次画像送りしたり、戻したりして比較を行わなくてはならす、どの画像が最も好ましい画像であるかの判断がすぐにはつかないという問題がある。
【０００７】
本発明は、上記問題に鑑みてなされたものであり、複数の画像の再生順を、被写体の特性に応じた最適なものとすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明の電子カメラは、被写体を撮像して、複数の画像を生成する撮像部と、前記撮像部により生成した前記複数の画像について、評価を行う評価部と、前記評価部による評価結果に基づいて、前記撮像部により生成した前記複数の画像のうち、一部の画像を選択する選択部と、前記選択部により選択された複数の画像について、シーン認識を行う認識部と、前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部とを備える。
【０００９】
なお、前記決定部により決定した前記再生順に応じて、前記シーン認識が行われた複数の画像のそれぞれの名称を決定する命名部を備えても良い。
【００１０】
また、前記決定部は、前記認識部による認識結果に基づいて、前記評価部による評価が高い順に前記再生順を決定するか、または、前記撮像部による撮像順に合わせて再生順を決定しても良い。
【００１１】
また、前記決定部は、前記認識部による認識の結果、主要被写体に連続的な変化があるシーンである場合には、前記撮像部による撮像順に合わせて前記再生順を決定し、前記主要被写体に連続的な変化がない場合には、前記評価部による評価が高い順に前記再生順を決定しても良い。
【００１２】
また、前記評価部は、前記認識部による認識結果がポートレートのシーンである場合には、背景領域が目立つか否かをさらに評価し、前記決定部は、前記認識部による認識結果が前記ポートレートのシーンである場合には、前記評価部による評価の結果、前記背景領域が目立たない順に前記再生順を決定しても良い。
【００１３】
また、前記撮像部により生成した前記複数の画像を記録媒体に記録する記録部と、
前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、前記選択部により選択された一部の画像を削除する削除部とを備え、
前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行っても良い。
【００１４】
また、前記記録部は、前記決定部により決定した前記再生順を示す情報を、前記削除部により削除されなかった前記複数の画像と関連づけて記録しても良い。
【００１５】
本発明の画像処理装置は、処理対象の画像として、複数の画像を取得する取得部と、前記取得部により取得した前記複数の画像について、評価を行う評価部と、前記取得部により取得した前記複数の画像について、シーン認識を行う認識部と、前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部とを備える。
【００１６】
なお、前取得部により取得した前記複数の画像を記録媒体に記録する記録部と、前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、一部の画像を削除する削除部とを備え、前記取得部は、前記複数の画像として、撮像および生成された複数の画像を取得し、前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行っても良い。
【００１７】
本発明の画像処理プログラムは、処理対象の画像に対する画像処理をコンピュータで実現するための画像処理プログラムであって、前記処理対象の画像として、複数の画像を取得する取得ステップと、前記取得ステップにおいて取得した前記複数の画像について、評価を行う評価ステップと、前記取得ステップにおいて取得した前記複数の画像について、シーン認識を行う認識ステップと、前記認識ステップにおける認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定ステップとを備える。
【発明の効果】
【００１８】
本発明によれば、複数の画像の再生順を、被写体の特性に応じた最適なものとすることができる。
【図面の簡単な説明】
【００１９】
【図１】一の実施形態における電子カメラの構成例を示すブロック図
【図２】一の実施形態における電子カメラの動作を示す流れ図
【発明を実施するための形態】
【００２０】
図１は、一の実施形態における電子カメラ１０の構成例を示すブロック図である。電子カメラ１０は、撮像レンズ１１と、シャッタ１２と、撮像素子１３と、ＡＦＥ１４と、画像処理部１５と、第１メモリ１６と、第２メモリ１７と、記録Ｉ／Ｆ１８と、ＣＰＵ１９と、操作部２０と、バス２１とを備えている。ここで、画像処理部１５、第１メモリ１６、第２メモリ１７、記録Ｉ／Ｆ１８、ＣＰＵ１９は、バス２１を介してそれぞれ接続されている。また、シャッタ１１、撮像素子１３、ＡＦＥ１４、操作部２０は、それぞれＣＰＵ１９と接続されている。
【００２１】
シャッタ１２は、撮影レンズ１１と撮像素子１３との間に配置されるメカシャッタである。
【００２２】
撮像素子１３は、撮像レンズ１１による結像を撮像する撮像デバイスである。一の実施形態の撮像素子１３は、例えば、任意の受光素子の画像信号をランダムアクセスで読み出し可能なＣＭＯＳ型の固体撮像素子で構成される。なお、撮像素子１３の出力はＡＦＥ１４に接続されている。
【００２３】
ＡＦＥ１４は、撮像素子１３の出力に対してアナログ信号処理を施すアナログフロントエンド回路である。このＡＦＥ１４は、相関二重サンプリングや、画像信号のゲインの調整や、画像信号のＡ／Ｄ変換を行う。そして、ＡＦＥ１４の出力は画像処理部１５に接続されている。なお、ＣＰＵ１９は、ＡＦＥ１４により画像信号のゲインを調整することで、ＩＳＯ感度に相当する撮像感度の調整を行う。
【００２４】
画像処理部１５は、ＡＦＥ１４から出力されたデジタルの画像信号に対して各種の画像処理（色補間処理、階調変換処理、ホワイトバランス調整など）を施す。
【００２５】
第１メモリ１６は、画像処理の前工程や後工程で画像のデータを一時的に記憶する。例えば、第１メモリ１６は、揮発性の記憶媒体であるＳＤＲＡＭにより構成される。また、第２メモリ１７は、ＣＰＵ１９によって実行されるプログラムや、各画像信号でのＳＮ比と撮像感度の値との対応関係を示すデータテーブルなどを記憶する不揮発性のメモリである。
【００２６】
記録Ｉ／Ｆ１８は、不揮発性の記憶媒体２２を接続するためのコネクタを有している。そして、記録Ｉ／Ｆ１８は、コネクタに接続された記憶媒体２２に対して後述の本画像のデータの書き込み／読み込みを実行する。上記の記憶媒体２２は、ハードディスクや、半導体メモリを内蔵したメモリカードなどで構成される。なお、図１では記憶媒体２２の一例としてメモリカードを図示する。
【００２７】
ＣＰＵ１９は、電子カメラ１０の動作を統括的に制御するプロセッサである。例えば、ＣＰＵ１９は、被写体の撮影を行うための撮影モードでの動作時において、ユーザの撮像指示入力に応じて撮像素子１３を駆動させて、不揮発性の記憶媒体２２への記録を伴う本画像の撮像処理を実行する。
【００２８】
また、撮影モードでのＣＰＵ１９は、本画像の撮像に先立って公知の自動露出演算を実行し、撮像条件の１パラメータである撮像感度を設定する。また、ＣＰＵ１９は、ユーザの入力に基づいて上記の撮像感度を設定してもよい。
【００２９】
操作部２０は、ユーザの操作を受け付ける複数のスイッチを有している。この操作部２０は、例えば、本画像の撮像指示を受け付けるレリーズ釦や、十字状のカーソルキーや、決定釦などで構成される。
【００３０】
なお、電子カメラ１０は、複数の画像を連続して撮像し、生成した複数の画像を一旦記録し、その後に画像評価を行って評価の低い画像を削除する、いわゆるベストショットモードを備える。このモードは、操作部２０を介したユーザの操作に基づいて設定されても良いし、ＣＰＵ１９により自動で設定されても良い。なお、ベストショットモードにおいては、ユーザは、操作部２０のレリーズ釦を１回操作することにより撮影指示を行う。
【００３１】
次に、ベストショットモードでの電子カメラ１０の動作例を、図２の流れ図を用いて説明する。
【００３２】
ステップＳ１０１において、ＣＰＵ１９は、ユーザによる撮影指示が行われたか否かを判定する。ＣＰＵ１９は、操作部２０を介したユーザによる撮影指示が行われるまで待機し、撮影指示が行われるとステップＳ１０２に進む。
【００３３】
ステップＳ１０２において、ＣＰＵ１９は、各部を制御して、ｎ枚目の画像を撮影する。なお、初回のステップＳ１０２においては、ｎ＝１である。なお、以下では、ｎ回目の撮影により生成された画像を、Ｉｍｇ[ｎ]と称する。例えば、１回目の撮影により生成された画像は、Ｉｍｇ[１]である。
【００３４】
ステップＳ１０３において、ＣＰＵ１９は、ステップＳ１０２の撮像により生成したｎ枚目の画像を記録Ｉ／Ｆ１８を介して記憶媒体２２に記録する。なお、ＣＰＵ１９は、記憶媒体２２に記録する代わりに、第１メモリ１６に記録しても良い。
【００３５】
ステップＳ１０４において、ＣＰＵ１９は、ステップＳ１０２からステップＳ１０３の処理をＮ枚分終了したか否かを判定する。ＣＰＵ１９は、Ｎ枚分終了していないと判定するとステップＳ１０５に進み、Ｎ枚分終了したと判定すると、後述するステップＳ１０６に進む。なお、Ｎとは予め定められた撮影枚数（例えばＮ＝２０）である。この枚数は、固定のものであっても良いし、ＣＰＵ１９により自動で定められたものであっても良いし、操作部２０を介したユーザ操作により定められたものであっても良い。
【００３６】
ステップＳ１０５において、ＣＰＵ１９は、ｎ＝ｎ＋１として、ステップＳ１０２に戻る。すなわち、ＣＰＵ１９は、Ｎ回の撮影を繰り返し（ステップＳ１０２）、Ｎ枚の画像を記録する（ステップＳ１０３）。
【００３７】
ステップＳ１０６において、ＣＰＵ１９は、記憶媒体２２に記録されたＮ枚の画像のそれぞれについて、評価値Ｅ[ｎ]を算出する。なお、以下では、ｎ枚目の画像について算出された評価値を、評価値Ｅ[ｎ]と称する。例えば、１枚目の画像について算出された評価値は、評価値Ｅ[１]である。評価値の算出は、例えば、輝度情報、焦点情報、コントラスト情報、エッジ情報などに基づいて、公知技術と同様に行われる。
【００３８】
ステップＳ１０７において、ＣＰＵ１９は、記憶媒体２２に記録されたＮ枚の画像のそれぞれについて、ステップＳ１０６で算出した評価値Ｅ[ｎ]に基づいて、画像の評価を行う。画像の評価は、例えば、評価値Ｅ[ｎ]を点数化するなど、公知技術と同様に行われる。点数化においては、例えば、露出、コントラスト、ボケ、笑顔、目瞑りなどのファクターにより、総合的な評価が行われるのが好ましい。
【００３９】
ステップＳ１０８において、ＣＰＵ１９は、削除する画像を決定する。ＣＰＵ１９は、ステップＳ１０７で行った評価に基づき、評価の低い方から所定の枚数（例えば、１５枚）の画像を削除する画像として選択する。このような選択を行うことにより、評価の高い画像を選択的に残すことができる。なお、削除する画像の枚数は、固定のものであっても良いし、ＣＰＵ１９により自動で定められたものであっても良いし、操作部２０を介したユーザ操作により定められたものであっても良い。なお、削除する画像を決定する際に、評価値Ｅ[ｎ]と閾値との比較に基づいて決定を行う際には、選択的に残される画像（削除されない画像）が１枚以上になるように、上述した閾値を調整すると良い。
【００４０】
ステップＳ１０９において、ＣＰＵ１９は、ステップＳ１０８で決定した画像を記録媒体２２から削除する。
【００４１】
なお、ステップＳ１０３において、撮影により生成した画像を第１メモリ１６に記録した場合には、ＣＰＵ１９は、第１メモリから画像を削除し、残りの画像を記録Ｉ／Ｆ１８を介して記憶媒体２２に記録する。
【００４２】
ステップＳ１１０において、ＣＰＵ１９は、シーン認識を行う。ＣＰＵ１９は、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）に基づいて、公知技術と同様にシーン認識を行う。例えば、ＣＰＵ１９は、画像の画像情報や、撮影情報（絞り値、シャッタースピード、ＩＳＯ感度、焦点距離など）を総合的に解析し、主要被写体がどのようなものであるかを認識する。
【００４３】
このシーン認識は、被写体に動きの軌跡が含まれるか否かを推測するためのものである。例えば、ポートレートや集合写真のようなシーンにおいては、被写体に動きの軌跡は含まれない（含まれにくい）と推測できる。また、例えば、被写体がスポーツを行っている人物や乗り物などのようなシーンにおいては、被写体に動きの軌跡が含まる（含まれやすい）と推測できる。
【００４４】
ステップＳ１１１において、ＣＰＵ１９は、ステップＳ１１０で行ったシーン認識の結果に基づいて、「被写体に動きの軌跡が含まれるか否か」を判定する。ＣＰＵ１９は、「被写体に動きの軌跡が含まれる」と判定するとステップＳ１１２に進み、「被写体に動きの軌跡が含まれない」と判定すると、後述するステップＳ１１３に進む。基本的には、「被写体に動きの軌跡が含まれる」場合には、時系列の再生順が好ましく、「被写体に動きの軌跡が含まれない」場合には、時系列の再生順でなくて良いと考えることができる。
【００４５】
なお、撮影期間が長い場合で、かつ、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）の数が少ない場合など、「被写体に動きの軌跡が含まれるか否か」を判定できない場合がある。このような場合には、ＣＰＵ１９は、ステップＳ１１２およびステップＳ１１３のうち、予め定められた方（例えば、ステップＳ１１３）に進む構成としても良い。
【００４６】
ステップＳ１１１において、「被写体に動きの軌跡が含まれる」と判定すると、ステップＳ１１２において、ＣＰＵ１９は、ステップＳ１０２で説明した撮影の撮像順に合わせて、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）の再生順を決定する。
【００４７】
「被写体に動きの軌跡が含まれる」場合とは、主要被写体がゴルフスイングをしている人物である場合や、走行中の車である場合などである。このような場合には、主要被写体が連続的な動作を行っていたり、主要被写体が連続的に変化している可能性が高いため、再生順は時系列であることが好ましい。したがって、ＣＰＵ１９は、複数の画像の撮影の撮像順に合わせて、再生順を決定する。このように再生順を決定することにより、再生時に、ユーザは、時系列で変化する複数の画像を目視して動きの軌跡を確認することができる。そのため、ユーザは、違和感なく複数の画像を比較することができるとともに、何れの画像が最も好ましい画像であるかの判断を迅速に行うことができる。
【００４８】
一方、ステップＳ１１１において、「被写体に動きの軌跡が含まれない」と判定すると、ステップＳ１１３において、ＣＰＵ１９は、ステップＳ１０７で説明した評価の結果に基づいて、評価の高い順に、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）の再生順を決定する。
【００４９】
「被写体に動きの軌跡が含まれない」場合とは、被写体が集合写真や記念撮影の人物である場合や、風景などの場合である。このような場合には、主要被写体自身には大きな動きや変化はないが、笑顔や目瞑りなどのディテールが異なる可能性が高いため、再生順が時系列であることにメリットはない。したがって、ＣＰＵ１９は、評価の高い順に、再生順を決定する。このように再生順を決定することにより、再生時に、ユーザは、評価の高い方から順次複数の画像を目視して比較することができるとともに、何れの画像が最も好ましい画像であるかの判断を迅速に行うことができる。
【００５０】
特に、被写体がいわゆるポートレートなどである場合には、「背景領域が目立つか否か」も重要なファクターとなる。そこで、顕著性マップなどにより「背景領域が目立つか否か」を評価に加味しても良い。顕著性マップとは、色、輝度、エッジ量、エッジの方向性などに基づき、周囲の領域に対する特異性を示すマップである。このようなマップを用いて評価を行うことにより、背景領域を基準として、画像の評価を行うことができる。なお、「背景領域が目立つか否か」の評価は、ステップＳ１０６で説明した評価値Ｅ[ｎ]の算出時およびステップＳ１０７で説明した評価時にあわせて行っても良いし、ステップＳ１１０で説明したシーン認識の結果に基づき、「背景領域が目立つか否か」の評価が効果的であると判断できる場合に行っても良いし、ステップＳ１１３において再生順を決定する際に行っても良い。
【００５１】
また、ステップＳ１１３において、評価の高い順に、再生順を決定する際に、ステップＳ１１０で説明したシーン認識の結果に基づいて、再生順の決定方法を変えても良い。例えば、集合写真においては、全体的な評価の高い順に再生順を決定し、ポートレートにおいては、「背景領域が目立つか否か」の評価が高い順に再生順を決定しても良い。
【００５２】
ステップＳ１１４において、ＣＰＵ１９は、ステップＳ１１２またはステップＳ１１３で決定した再生順に応じて、記憶媒体２２に記録された各画像（ステップＳ１０９において削除されなかった画像）の名称を決定する。通常、画像の生成時には、数字やアルファベットなどの昇順に応じて再生が行われる。そこで、ＣＰＵ１９は、上述した再生順に応じて、各画像の名称を決定する。
【００５３】
ステップＳ１１５において、ＣＰＵ１９は、ステップＳ１１４で決定した各画像の名称を記録して、一連の処理を終了する。ＣＰＵ１９は、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）のそれぞれの名称を、ステップＳ１１４で決定した名称に変更する。
【００５４】
なお、一連の処理による複数の画像（ステップＳ１０９において削除されなかった複数の画像）をグループ化して記録する場合には、再生順が１番である画像を代表画像（メイン画像）としても良い。
【００５５】
以上説明したように、本実施形態によれば、被写体を撮像して、複数の画像を生成し、生成した複数の画像について、評価を行う。そして、評価結果に基づいて、撮像部により生成した複数の画像のうち、一部の画像を選択し、選択した複数の画像について、シーン認識を行う。さらに、認識結果に基づいて、シーン認識が行われた複数の画像の再生順を決定する。したがって、複数の画像の再生順を、被写体の特性に応じた最適なものとすることができる。
【００５６】
特に、本実施形態によれば、シーン認識の結果に基づき、主要被写体に連続的な変化があるか否かを推測し、主要被写体に連続的な変化があるか否かに応じて、再生順を決定することにより、被写体の特性に応じた最適な再生順を決定することができる。そして、上述したように再生順を決定することにより、同じシーンで複数枚記録された画像を再生する際、常に人間の感覚にあった順序で再生を行うことができるので、ユーザは、違和感なく画像を鑑賞することができるとともに、何れの画像が最も好ましい画像であるかの判断を迅速に行うことができる。
【００５７】
なお、本実施形態では、Ｎ枚の画像を撮影（ステップＳ１０２）および記録（ステップＳ１０３）した後に、評価値Ｅ[ｎ]の算出（ステップＳ１０６）を行う例を示したが、本発明はこの例に限定されない。例えば、Ｎ枚の画像を撮影（ステップＳ１０２）した後すぐに、評価値Ｅ[ｎ]の算出（ステップＳ１０６）を開始しても良い。
【００５８】
また、本実施形態では、再生順を決定する因子として、評価および撮像順を例に挙げて説明したが、本発明はこの例に限定されない。例えば、電子カメラ１０が、予め登録された特定の人物を認証して撮影する機能を有する場合には、個人認証用の登録順に応じて再生順を決定しても良い。上述した機能は、例えば、運動会のかけっこにおけるゴールシーンなどで利用される。例えば、個人認証用の登録順が高い（優先順位が高い）人物の部分の評価がより高い、あるいは、人物がより大きく写っている画像の再生順を早くし、この人物の部分の評価がより低い、あるいは、人物がより小さく写っている画像の再生順を遅くしても良い。なお、このような再生順の決定は、上述された機能が有効になっている場合に常に実行しても良いし、ステップＳ１１０で説明したシーン認識の結果を加味して、実行するか否かを判断しても良い。
【００５９】
また、本実施形態では、ステップＳ１１０で説明したシーン認識の結果に応じて、再生順を決定するための規則性を変更する例を示したが、本発明はこの例に限定されない。例えば、ポートレートや風景モードなどの撮影モードが設定された場合に、その撮影モードに応じて、再生順を決定するための規則性を変更する構成としても良い。さらに、ユーザが、所定の条件と再生順を決定するための規則性との関係を予め設定しておき、その条件を満たした場合には、上述した関係に基づいて再生順を決定するための規則性を変更しても良い。
【００６０】
また、本実施形態では、再生順に応じて各画像の名称を決定する例を示したが、本発明はこの例に限定されない。例えば、各画像の名称は変更せずに、再生順を示す情報を、各画像と対応づけて記録する構成としても良い。例えば、画像の付帯情報（タグ情報）などに、再生順を示す情報や、再生順を決定するための規則性を示す情報などを記録しても良い。
【００６１】
また、本実施形態では、ベストショットモード時に図２のフローチャートに示した一連の処理を行う例を示したが、本発明はこの例に限定されない。例えば、連写モードにおいて複数の画像を生成する場合にも本発明を同様に適用することができる。また、ユーザにより選択された複数の画像を対象として、ステップＳ１０６以降の処理を行っても良い。
【００６２】
また、上述した実施形態では、本発明の技術を図１に示した電子カメラ１０において実現する例について説明した。しかしながら、本発明はこれに限定されない。例えば、図１に示した電子カメラ１０以外の構成の電子カメラにも本発明を同様に適用することができる。
【００６３】
また、コンピュータと画像処理プログラムとにより、上記実施形態で説明した画像処理装置をソフトウェア的に実現しても良い。この場合、図２のフローチャートで説明したステップＳ１０６以降の処理の一部または全部をコンピュータで実現する構成とすれば良い。または、
さらに、上述したコンピュータ以外にも、デジタルの画像の再生表示機能やレタッチ機能を有する電子機器（例えば、フォトビューアー、デジタルフォトフレーム、写真の印刷装置など）などに本発明を同様に適用することができる。また、上述した実施形態で説明した電子カメラ１０は、携帯電話端末などのカメラモジュールとして実装されるものであってもよい。
【００６４】
また、上述した実施形態では、各処理をソフトウェア的に実現する例を説明したが、ＡＳＩＣ等によってこれらの各処理をハードウエア的に実現しても勿論かまわない。
【符号の説明】
【００６５】
１０…電子カメラ、１３…撮像素子、１４…ＡＦＥ、１６…第１メモリ、１７…第２メモリ、１９…ＣＰＵ、２２…記憶媒体
【技術分野】
【０００１】
本発明は、電子カメラ、画像処理装置、および画像処理プログラムに関する。
【背景技術】
【０００２】
従来より、複数の画像を生成して記録媒体に記録した後に、露出、コントラスト、ボケなどの観点から画像の評価を行い、評価が所定の基準より低い画像を、上述した記録媒体から削除する技術が知られている（例えば、特許文献１参照）。
【０００３】
特許文献１の発明では、露出条件評価、コントラスト評価、ボケ、焦点ボケの評価などにより画像評価処理を実行している。そして、画像評価の結果、記録媒体から削除されなかった画像には、通常、時系列に連番の名称が付与される。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−５０４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、上述した画像評価の結果、記録媒体から削除されなかった画像は、通常、複数枚の画像であり、ユーザは、これらの画像を順次再生して、最も好ましい１枚（あるいは数枚）の画像を選択する。記録媒体から削除されなかった画像には、時系列に連番の名称が付与されているため、これらの画像を再生する際には、複数の画像が時系列で再生されることになる。
【０００６】
しかし、集合写真や記念撮影など、主要被写体に大きな動きがない被写体である場合には、時系列に再生されることに特にメリットはない。そのため、ユーザは、複数の画像を順次画像送りしたり、戻したりして比較を行わなくてはならす、どの画像が最も好ましい画像であるかの判断がすぐにはつかないという問題がある。
【０００７】
本発明は、上記問題に鑑みてなされたものであり、複数の画像の再生順を、被写体の特性に応じた最適なものとすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明の電子カメラは、被写体を撮像して、複数の画像を生成する撮像部と、前記撮像部により生成した前記複数の画像について、評価を行う評価部と、前記評価部による評価結果に基づいて、前記撮像部により生成した前記複数の画像のうち、一部の画像を選択する選択部と、前記選択部により選択された複数の画像について、シーン認識を行う認識部と、前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部とを備える。
【０００９】
なお、前記決定部により決定した前記再生順に応じて、前記シーン認識が行われた複数の画像のそれぞれの名称を決定する命名部を備えても良い。
【００１０】
また、前記決定部は、前記認識部による認識結果に基づいて、前記評価部による評価が高い順に前記再生順を決定するか、または、前記撮像部による撮像順に合わせて再生順を決定しても良い。
【００１１】
また、前記決定部は、前記認識部による認識の結果、主要被写体に連続的な変化があるシーンである場合には、前記撮像部による撮像順に合わせて前記再生順を決定し、前記主要被写体に連続的な変化がない場合には、前記評価部による評価が高い順に前記再生順を決定しても良い。
【００１２】
また、前記評価部は、前記認識部による認識結果がポートレートのシーンである場合には、背景領域が目立つか否かをさらに評価し、前記決定部は、前記認識部による認識結果が前記ポートレートのシーンである場合には、前記評価部による評価の結果、前記背景領域が目立たない順に前記再生順を決定しても良い。
【００１３】
また、前記撮像部により生成した前記複数の画像を記録媒体に記録する記録部と、
前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、前記選択部により選択された一部の画像を削除する削除部とを備え、
前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行っても良い。
【００１４】
また、前記記録部は、前記決定部により決定した前記再生順を示す情報を、前記削除部により削除されなかった前記複数の画像と関連づけて記録しても良い。
【００１５】
本発明の画像処理装置は、処理対象の画像として、複数の画像を取得する取得部と、前記取得部により取得した前記複数の画像について、評価を行う評価部と、前記取得部により取得した前記複数の画像について、シーン認識を行う認識部と、前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部とを備える。
【００１６】
なお、前取得部により取得した前記複数の画像を記録媒体に記録する記録部と、前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、一部の画像を削除する削除部とを備え、前記取得部は、前記複数の画像として、撮像および生成された複数の画像を取得し、前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行っても良い。
【００１７】
本発明の画像処理プログラムは、処理対象の画像に対する画像処理をコンピュータで実現するための画像処理プログラムであって、前記処理対象の画像として、複数の画像を取得する取得ステップと、前記取得ステップにおいて取得した前記複数の画像について、評価を行う評価ステップと、前記取得ステップにおいて取得した前記複数の画像について、シーン認識を行う認識ステップと、前記認識ステップにおける認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定ステップとを備える。
【発明の効果】
【００１８】
本発明によれば、複数の画像の再生順を、被写体の特性に応じた最適なものとすることができる。
【図面の簡単な説明】
【００１９】
【図１】一の実施形態における電子カメラの構成例を示すブロック図
【図２】一の実施形態における電子カメラの動作を示す流れ図
【発明を実施するための形態】
【００２０】
図１は、一の実施形態における電子カメラ１０の構成例を示すブロック図である。電子カメラ１０は、撮像レンズ１１と、シャッタ１２と、撮像素子１３と、ＡＦＥ１４と、画像処理部１５と、第１メモリ１６と、第２メモリ１７と、記録Ｉ／Ｆ１８と、ＣＰＵ１９と、操作部２０と、バス２１とを備えている。ここで、画像処理部１５、第１メモリ１６、第２メモリ１７、記録Ｉ／Ｆ１８、ＣＰＵ１９は、バス２１を介してそれぞれ接続されている。また、シャッタ１１、撮像素子１３、ＡＦＥ１４、操作部２０は、それぞれＣＰＵ１９と接続されている。
【００２１】
シャッタ１２は、撮影レンズ１１と撮像素子１３との間に配置されるメカシャッタである。
【００２２】
撮像素子１３は、撮像レンズ１１による結像を撮像する撮像デバイスである。一の実施形態の撮像素子１３は、例えば、任意の受光素子の画像信号をランダムアクセスで読み出し可能なＣＭＯＳ型の固体撮像素子で構成される。なお、撮像素子１３の出力はＡＦＥ１４に接続されている。
【００２３】
ＡＦＥ１４は、撮像素子１３の出力に対してアナログ信号処理を施すアナログフロントエンド回路である。このＡＦＥ１４は、相関二重サンプリングや、画像信号のゲインの調整や、画像信号のＡ／Ｄ変換を行う。そして、ＡＦＥ１４の出力は画像処理部１５に接続されている。なお、ＣＰＵ１９は、ＡＦＥ１４により画像信号のゲインを調整することで、ＩＳＯ感度に相当する撮像感度の調整を行う。
【００２４】
画像処理部１５は、ＡＦＥ１４から出力されたデジタルの画像信号に対して各種の画像処理（色補間処理、階調変換処理、ホワイトバランス調整など）を施す。
【００２５】
第１メモリ１６は、画像処理の前工程や後工程で画像のデータを一時的に記憶する。例えば、第１メモリ１６は、揮発性の記憶媒体であるＳＤＲＡＭにより構成される。また、第２メモリ１７は、ＣＰＵ１９によって実行されるプログラムや、各画像信号でのＳＮ比と撮像感度の値との対応関係を示すデータテーブルなどを記憶する不揮発性のメモリである。
【００２６】
記録Ｉ／Ｆ１８は、不揮発性の記憶媒体２２を接続するためのコネクタを有している。そして、記録Ｉ／Ｆ１８は、コネクタに接続された記憶媒体２２に対して後述の本画像のデータの書き込み／読み込みを実行する。上記の記憶媒体２２は、ハードディスクや、半導体メモリを内蔵したメモリカードなどで構成される。なお、図１では記憶媒体２２の一例としてメモリカードを図示する。
【００２７】
ＣＰＵ１９は、電子カメラ１０の動作を統括的に制御するプロセッサである。例えば、ＣＰＵ１９は、被写体の撮影を行うための撮影モードでの動作時において、ユーザの撮像指示入力に応じて撮像素子１３を駆動させて、不揮発性の記憶媒体２２への記録を伴う本画像の撮像処理を実行する。
【００２８】
また、撮影モードでのＣＰＵ１９は、本画像の撮像に先立って公知の自動露出演算を実行し、撮像条件の１パラメータである撮像感度を設定する。また、ＣＰＵ１９は、ユーザの入力に基づいて上記の撮像感度を設定してもよい。
【００２９】
操作部２０は、ユーザの操作を受け付ける複数のスイッチを有している。この操作部２０は、例えば、本画像の撮像指示を受け付けるレリーズ釦や、十字状のカーソルキーや、決定釦などで構成される。
【００３０】
なお、電子カメラ１０は、複数の画像を連続して撮像し、生成した複数の画像を一旦記録し、その後に画像評価を行って評価の低い画像を削除する、いわゆるベストショットモードを備える。このモードは、操作部２０を介したユーザの操作に基づいて設定されても良いし、ＣＰＵ１９により自動で設定されても良い。なお、ベストショットモードにおいては、ユーザは、操作部２０のレリーズ釦を１回操作することにより撮影指示を行う。
【００３１】
次に、ベストショットモードでの電子カメラ１０の動作例を、図２の流れ図を用いて説明する。
【００３２】
ステップＳ１０１において、ＣＰＵ１９は、ユーザによる撮影指示が行われたか否かを判定する。ＣＰＵ１９は、操作部２０を介したユーザによる撮影指示が行われるまで待機し、撮影指示が行われるとステップＳ１０２に進む。
【００３３】
ステップＳ１０２において、ＣＰＵ１９は、各部を制御して、ｎ枚目の画像を撮影する。なお、初回のステップＳ１０２においては、ｎ＝１である。なお、以下では、ｎ回目の撮影により生成された画像を、Ｉｍｇ[ｎ]と称する。例えば、１回目の撮影により生成された画像は、Ｉｍｇ[１]である。
【００３４】
ステップＳ１０３において、ＣＰＵ１９は、ステップＳ１０２の撮像により生成したｎ枚目の画像を記録Ｉ／Ｆ１８を介して記憶媒体２２に記録する。なお、ＣＰＵ１９は、記憶媒体２２に記録する代わりに、第１メモリ１６に記録しても良い。
【００３５】
ステップＳ１０４において、ＣＰＵ１９は、ステップＳ１０２からステップＳ１０３の処理をＮ枚分終了したか否かを判定する。ＣＰＵ１９は、Ｎ枚分終了していないと判定するとステップＳ１０５に進み、Ｎ枚分終了したと判定すると、後述するステップＳ１０６に進む。なお、Ｎとは予め定められた撮影枚数（例えばＮ＝２０）である。この枚数は、固定のものであっても良いし、ＣＰＵ１９により自動で定められたものであっても良いし、操作部２０を介したユーザ操作により定められたものであっても良い。
【００３６】
ステップＳ１０５において、ＣＰＵ１９は、ｎ＝ｎ＋１として、ステップＳ１０２に戻る。すなわち、ＣＰＵ１９は、Ｎ回の撮影を繰り返し（ステップＳ１０２）、Ｎ枚の画像を記録する（ステップＳ１０３）。
【００３７】
ステップＳ１０６において、ＣＰＵ１９は、記憶媒体２２に記録されたＮ枚の画像のそれぞれについて、評価値Ｅ[ｎ]を算出する。なお、以下では、ｎ枚目の画像について算出された評価値を、評価値Ｅ[ｎ]と称する。例えば、１枚目の画像について算出された評価値は、評価値Ｅ[１]である。評価値の算出は、例えば、輝度情報、焦点情報、コントラスト情報、エッジ情報などに基づいて、公知技術と同様に行われる。
【００３８】
ステップＳ１０７において、ＣＰＵ１９は、記憶媒体２２に記録されたＮ枚の画像のそれぞれについて、ステップＳ１０６で算出した評価値Ｅ[ｎ]に基づいて、画像の評価を行う。画像の評価は、例えば、評価値Ｅ[ｎ]を点数化するなど、公知技術と同様に行われる。点数化においては、例えば、露出、コントラスト、ボケ、笑顔、目瞑りなどのファクターにより、総合的な評価が行われるのが好ましい。
【００３９】
ステップＳ１０８において、ＣＰＵ１９は、削除する画像を決定する。ＣＰＵ１９は、ステップＳ１０７で行った評価に基づき、評価の低い方から所定の枚数（例えば、１５枚）の画像を削除する画像として選択する。このような選択を行うことにより、評価の高い画像を選択的に残すことができる。なお、削除する画像の枚数は、固定のものであっても良いし、ＣＰＵ１９により自動で定められたものであっても良いし、操作部２０を介したユーザ操作により定められたものであっても良い。なお、削除する画像を決定する際に、評価値Ｅ[ｎ]と閾値との比較に基づいて決定を行う際には、選択的に残される画像（削除されない画像）が１枚以上になるように、上述した閾値を調整すると良い。
【００４０】
ステップＳ１０９において、ＣＰＵ１９は、ステップＳ１０８で決定した画像を記録媒体２２から削除する。
【００４１】
なお、ステップＳ１０３において、撮影により生成した画像を第１メモリ１６に記録した場合には、ＣＰＵ１９は、第１メモリから画像を削除し、残りの画像を記録Ｉ／Ｆ１８を介して記憶媒体２２に記録する。
【００４２】
ステップＳ１１０において、ＣＰＵ１９は、シーン認識を行う。ＣＰＵ１９は、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）に基づいて、公知技術と同様にシーン認識を行う。例えば、ＣＰＵ１９は、画像の画像情報や、撮影情報（絞り値、シャッタースピード、ＩＳＯ感度、焦点距離など）を総合的に解析し、主要被写体がどのようなものであるかを認識する。
【００４３】
このシーン認識は、被写体に動きの軌跡が含まれるか否かを推測するためのものである。例えば、ポートレートや集合写真のようなシーンにおいては、被写体に動きの軌跡は含まれない（含まれにくい）と推測できる。また、例えば、被写体がスポーツを行っている人物や乗り物などのようなシーンにおいては、被写体に動きの軌跡が含まる（含まれやすい）と推測できる。
【００４４】
ステップＳ１１１において、ＣＰＵ１９は、ステップＳ１１０で行ったシーン認識の結果に基づいて、「被写体に動きの軌跡が含まれるか否か」を判定する。ＣＰＵ１９は、「被写体に動きの軌跡が含まれる」と判定するとステップＳ１１２に進み、「被写体に動きの軌跡が含まれない」と判定すると、後述するステップＳ１１３に進む。基本的には、「被写体に動きの軌跡が含まれる」場合には、時系列の再生順が好ましく、「被写体に動きの軌跡が含まれない」場合には、時系列の再生順でなくて良いと考えることができる。
【００４５】
なお、撮影期間が長い場合で、かつ、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）の数が少ない場合など、「被写体に動きの軌跡が含まれるか否か」を判定できない場合がある。このような場合には、ＣＰＵ１９は、ステップＳ１１２およびステップＳ１１３のうち、予め定められた方（例えば、ステップＳ１１３）に進む構成としても良い。
【００４６】
ステップＳ１１１において、「被写体に動きの軌跡が含まれる」と判定すると、ステップＳ１１２において、ＣＰＵ１９は、ステップＳ１０２で説明した撮影の撮像順に合わせて、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）の再生順を決定する。
【００４７】
「被写体に動きの軌跡が含まれる」場合とは、主要被写体がゴルフスイングをしている人物である場合や、走行中の車である場合などである。このような場合には、主要被写体が連続的な動作を行っていたり、主要被写体が連続的に変化している可能性が高いため、再生順は時系列であることが好ましい。したがって、ＣＰＵ１９は、複数の画像の撮影の撮像順に合わせて、再生順を決定する。このように再生順を決定することにより、再生時に、ユーザは、時系列で変化する複数の画像を目視して動きの軌跡を確認することができる。そのため、ユーザは、違和感なく複数の画像を比較することができるとともに、何れの画像が最も好ましい画像であるかの判断を迅速に行うことができる。
【００４８】
一方、ステップＳ１１１において、「被写体に動きの軌跡が含まれない」と判定すると、ステップＳ１１３において、ＣＰＵ１９は、ステップＳ１０７で説明した評価の結果に基づいて、評価の高い順に、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）の再生順を決定する。
【００４９】
「被写体に動きの軌跡が含まれない」場合とは、被写体が集合写真や記念撮影の人物である場合や、風景などの場合である。このような場合には、主要被写体自身には大きな動きや変化はないが、笑顔や目瞑りなどのディテールが異なる可能性が高いため、再生順が時系列であることにメリットはない。したがって、ＣＰＵ１９は、評価の高い順に、再生順を決定する。このように再生順を決定することにより、再生時に、ユーザは、評価の高い方から順次複数の画像を目視して比較することができるとともに、何れの画像が最も好ましい画像であるかの判断を迅速に行うことができる。
【００５０】
特に、被写体がいわゆるポートレートなどである場合には、「背景領域が目立つか否か」も重要なファクターとなる。そこで、顕著性マップなどにより「背景領域が目立つか否か」を評価に加味しても良い。顕著性マップとは、色、輝度、エッジ量、エッジの方向性などに基づき、周囲の領域に対する特異性を示すマップである。このようなマップを用いて評価を行うことにより、背景領域を基準として、画像の評価を行うことができる。なお、「背景領域が目立つか否か」の評価は、ステップＳ１０６で説明した評価値Ｅ[ｎ]の算出時およびステップＳ１０７で説明した評価時にあわせて行っても良いし、ステップＳ１１０で説明したシーン認識の結果に基づき、「背景領域が目立つか否か」の評価が効果的であると判断できる場合に行っても良いし、ステップＳ１１３において再生順を決定する際に行っても良い。
【００５１】
また、ステップＳ１１３において、評価の高い順に、再生順を決定する際に、ステップＳ１１０で説明したシーン認識の結果に基づいて、再生順の決定方法を変えても良い。例えば、集合写真においては、全体的な評価の高い順に再生順を決定し、ポートレートにおいては、「背景領域が目立つか否か」の評価が高い順に再生順を決定しても良い。
【００５２】
ステップＳ１１４において、ＣＰＵ１９は、ステップＳ１１２またはステップＳ１１３で決定した再生順に応じて、記憶媒体２２に記録された各画像（ステップＳ１０９において削除されなかった画像）の名称を決定する。通常、画像の生成時には、数字やアルファベットなどの昇順に応じて再生が行われる。そこで、ＣＰＵ１９は、上述した再生順に応じて、各画像の名称を決定する。
【００５３】
ステップＳ１１５において、ＣＰＵ１９は、ステップＳ１１４で決定した各画像の名称を記録して、一連の処理を終了する。ＣＰＵ１９は、記憶媒体２２に記録された画像（ステップＳ１０９において削除されなかった画像）のそれぞれの名称を、ステップＳ１１４で決定した名称に変更する。
【００５４】
なお、一連の処理による複数の画像（ステップＳ１０９において削除されなかった複数の画像）をグループ化して記録する場合には、再生順が１番である画像を代表画像（メイン画像）としても良い。
【００５５】
以上説明したように、本実施形態によれば、被写体を撮像して、複数の画像を生成し、生成した複数の画像について、評価を行う。そして、評価結果に基づいて、撮像部により生成した複数の画像のうち、一部の画像を選択し、選択した複数の画像について、シーン認識を行う。さらに、認識結果に基づいて、シーン認識が行われた複数の画像の再生順を決定する。したがって、複数の画像の再生順を、被写体の特性に応じた最適なものとすることができる。
【００５６】
特に、本実施形態によれば、シーン認識の結果に基づき、主要被写体に連続的な変化があるか否かを推測し、主要被写体に連続的な変化があるか否かに応じて、再生順を決定することにより、被写体の特性に応じた最適な再生順を決定することができる。そして、上述したように再生順を決定することにより、同じシーンで複数枚記録された画像を再生する際、常に人間の感覚にあった順序で再生を行うことができるので、ユーザは、違和感なく画像を鑑賞することができるとともに、何れの画像が最も好ましい画像であるかの判断を迅速に行うことができる。
【００５７】
なお、本実施形態では、Ｎ枚の画像を撮影（ステップＳ１０２）および記録（ステップＳ１０３）した後に、評価値Ｅ[ｎ]の算出（ステップＳ１０６）を行う例を示したが、本発明はこの例に限定されない。例えば、Ｎ枚の画像を撮影（ステップＳ１０２）した後すぐに、評価値Ｅ[ｎ]の算出（ステップＳ１０６）を開始しても良い。
【００５８】
また、本実施形態では、再生順を決定する因子として、評価および撮像順を例に挙げて説明したが、本発明はこの例に限定されない。例えば、電子カメラ１０が、予め登録された特定の人物を認証して撮影する機能を有する場合には、個人認証用の登録順に応じて再生順を決定しても良い。上述した機能は、例えば、運動会のかけっこにおけるゴールシーンなどで利用される。例えば、個人認証用の登録順が高い（優先順位が高い）人物の部分の評価がより高い、あるいは、人物がより大きく写っている画像の再生順を早くし、この人物の部分の評価がより低い、あるいは、人物がより小さく写っている画像の再生順を遅くしても良い。なお、このような再生順の決定は、上述された機能が有効になっている場合に常に実行しても良いし、ステップＳ１１０で説明したシーン認識の結果を加味して、実行するか否かを判断しても良い。
【００５９】
また、本実施形態では、ステップＳ１１０で説明したシーン認識の結果に応じて、再生順を決定するための規則性を変更する例を示したが、本発明はこの例に限定されない。例えば、ポートレートや風景モードなどの撮影モードが設定された場合に、その撮影モードに応じて、再生順を決定するための規則性を変更する構成としても良い。さらに、ユーザが、所定の条件と再生順を決定するための規則性との関係を予め設定しておき、その条件を満たした場合には、上述した関係に基づいて再生順を決定するための規則性を変更しても良い。
【００６０】
また、本実施形態では、再生順に応じて各画像の名称を決定する例を示したが、本発明はこの例に限定されない。例えば、各画像の名称は変更せずに、再生順を示す情報を、各画像と対応づけて記録する構成としても良い。例えば、画像の付帯情報（タグ情報）などに、再生順を示す情報や、再生順を決定するための規則性を示す情報などを記録しても良い。
【００６１】
また、本実施形態では、ベストショットモード時に図２のフローチャートに示した一連の処理を行う例を示したが、本発明はこの例に限定されない。例えば、連写モードにおいて複数の画像を生成する場合にも本発明を同様に適用することができる。また、ユーザにより選択された複数の画像を対象として、ステップＳ１０６以降の処理を行っても良い。
【００６２】
また、上述した実施形態では、本発明の技術を図１に示した電子カメラ１０において実現する例について説明した。しかしながら、本発明はこれに限定されない。例えば、図１に示した電子カメラ１０以外の構成の電子カメラにも本発明を同様に適用することができる。
【００６３】
また、コンピュータと画像処理プログラムとにより、上記実施形態で説明した画像処理装置をソフトウェア的に実現しても良い。この場合、図２のフローチャートで説明したステップＳ１０６以降の処理の一部または全部をコンピュータで実現する構成とすれば良い。または、
さらに、上述したコンピュータ以外にも、デジタルの画像の再生表示機能やレタッチ機能を有する電子機器（例えば、フォトビューアー、デジタルフォトフレーム、写真の印刷装置など）などに本発明を同様に適用することができる。また、上述した実施形態で説明した電子カメラ１０は、携帯電話端末などのカメラモジュールとして実装されるものであってもよい。
【００６４】
また、上述した実施形態では、各処理をソフトウェア的に実現する例を説明したが、ＡＳＩＣ等によってこれらの各処理をハードウエア的に実現しても勿論かまわない。
【符号の説明】
【００６５】
１０…電子カメラ、１３…撮像素子、１４…ＡＦＥ、１６…第１メモリ、１７…第２メモリ、１９…ＣＰＵ、２２…記憶媒体
【特許請求の範囲】
【請求項１】
被写体を撮像して、複数の画像を生成する撮像部と、
前記撮像部により生成した前記複数の画像について、評価を行う評価部と、
前記評価部による評価結果に基づいて、前記撮像部により生成した前記複数の画像のうち、一部の画像を選択する選択部と、
前記選択部により選択された複数の画像について、シーン認識を行う認識部と、
前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部と
を備えたことを特徴とする電子カメラ。
【請求項２】
請求項１に記載の電子カメラにおいて、
前記決定部により決定した前記再生順に応じて、前記シーン認識が行われた複数の画像のそれぞれの名称を決定する命名部を備える
ことを特徴とした電子カメラ。
【請求項３】
請求項１に記載の電子カメラにおいて、
前記決定部は、前記認識部による認識結果に基づいて、前記評価部による評価が高い順に前記再生順を決定するか、または、前記撮像部による撮像順に合わせて再生順を決定する
ことを特徴とした電子カメラ。
【請求項４】
請求項３に記載の電子カメラにおいて、
前記決定部は、前記認識部による認識の結果、主要被写体に連続的な変化があるシーンである場合には、前記撮像部による撮像順に合わせて前記再生順を決定し、前記主要被写体に連続的な変化がない場合には、前記評価部による評価が高い順に前記再生順を決定する
ことを特徴とした電子カメラ。
【請求項５】
請求項４に記載の電子カメラにおいて、
前記評価部は、前記認識部による認識結果がポートレートのシーンである場合には、背景領域が目立つか否かをさらに評価し、
前記決定部は、前記認識部による認識結果が前記ポートレートのシーンである場合には、前記評価部による評価の結果、前記背景領域が目立たない順に前記再生順を決定する
ことを特徴とした電子カメラ。
【請求項６】
請求項１から請求項５の何れか1項に記載の電子カメラにおいて、
前記撮像部により生成した前記複数の画像を記録媒体に記録する記録部と、
前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、前記選択部により選択された一部の画像を削除する削除部とを備え、
前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行う
ことを特徴とする電子カメラ。
【請求項７】
請求項６に記載の電子カメラにおいて、
前記記録部は、前記決定部により決定した前記再生順を示す情報を、前記削除部により削除されなかった前記複数の画像と関連づけて記録する
ことを特徴とした電子カメラ。
【請求項８】
処理対象の画像として、複数の画像を取得する取得部と、
前記取得部により取得した前記複数の画像について、評価を行う評価部と、
前記取得部により取得した前記複数の画像について、シーン認識を行う認識部と、
前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部と
を備えたことを特徴とする画像処理装置。
【請求項９】
請求項８に記載の画像処理装置において、
前取得部により取得した前記複数の画像を記録媒体に記録する記録部と、
前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、一部の画像を削除する削除部とを備え、
前記取得部は、前記複数の画像として、撮像および生成された複数の画像を取得し、
前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行う
ことを特徴とする画像処理装置。
【請求項１０】
処理対象の画像に対する画像処理をコンピュータで実現するための画像処理プログラムであって、
前記処理対象の画像として、複数の画像を取得する取得ステップと、
前記取得ステップにおいて取得した前記複数の画像について、評価を行う評価ステップと、
前記取得ステップにおいて取得した前記複数の画像について、シーン認識を行う認識ステップと、
前記認識ステップにおける認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定ステップと
を備えたことを特徴とする画像処理プログラム。
【請求項１】
被写体を撮像して、複数の画像を生成する撮像部と、
前記撮像部により生成した前記複数の画像について、評価を行う評価部と、
前記評価部による評価結果に基づいて、前記撮像部により生成した前記複数の画像のうち、一部の画像を選択する選択部と、
前記選択部により選択された複数の画像について、シーン認識を行う認識部と、
前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部と
を備えたことを特徴とする電子カメラ。
【請求項２】
請求項１に記載の電子カメラにおいて、
前記決定部により決定した前記再生順に応じて、前記シーン認識が行われた複数の画像のそれぞれの名称を決定する命名部を備える
ことを特徴とした電子カメラ。
【請求項３】
請求項１に記載の電子カメラにおいて、
前記決定部は、前記認識部による認識結果に基づいて、前記評価部による評価が高い順に前記再生順を決定するか、または、前記撮像部による撮像順に合わせて再生順を決定する
ことを特徴とした電子カメラ。
【請求項４】
請求項３に記載の電子カメラにおいて、
前記決定部は、前記認識部による認識の結果、主要被写体に連続的な変化があるシーンである場合には、前記撮像部による撮像順に合わせて前記再生順を決定し、前記主要被写体に連続的な変化がない場合には、前記評価部による評価が高い順に前記再生順を決定する
ことを特徴とした電子カメラ。
【請求項５】
請求項４に記載の電子カメラにおいて、
前記評価部は、前記認識部による認識結果がポートレートのシーンである場合には、背景領域が目立つか否かをさらに評価し、
前記決定部は、前記認識部による認識結果が前記ポートレートのシーンである場合には、前記評価部による評価の結果、前記背景領域が目立たない順に前記再生順を決定する
ことを特徴とした電子カメラ。
【請求項６】
請求項１から請求項５の何れか1項に記載の電子カメラにおいて、
前記撮像部により生成した前記複数の画像を記録媒体に記録する記録部と、
前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、前記選択部により選択された一部の画像を削除する削除部とを備え、
前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行う
ことを特徴とする電子カメラ。
【請求項７】
請求項６に記載の電子カメラにおいて、
前記記録部は、前記決定部により決定した前記再生順を示す情報を、前記削除部により削除されなかった前記複数の画像と関連づけて記録する
ことを特徴とした電子カメラ。
【請求項８】
処理対象の画像として、複数の画像を取得する取得部と、
前記取得部により取得した前記複数の画像について、評価を行う評価部と、
前記取得部により取得した前記複数の画像について、シーン認識を行う認識部と、
前記認識部による認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定部と
を備えたことを特徴とする画像処理装置。
【請求項９】
請求項８に記載の画像処理装置において、
前取得部により取得した前記複数の画像を記録媒体に記録する記録部と、
前記評価部による評価結果に基づいて、前記記録媒体に記録された複数の画像のうち、一部の画像を削除する削除部とを備え、
前記取得部は、前記複数の画像として、撮像および生成された複数の画像を取得し、
前記認識部は、前記削除部により削除されなかった複数の画像について、前記シーン認識を行う
ことを特徴とする画像処理装置。
【請求項１０】
処理対象の画像に対する画像処理をコンピュータで実現するための画像処理プログラムであって、
前記処理対象の画像として、複数の画像を取得する取得ステップと、
前記取得ステップにおいて取得した前記複数の画像について、評価を行う評価ステップと、
前記取得ステップにおいて取得した前記複数の画像について、シーン認識を行う認識ステップと、
前記認識ステップにおける認識結果に基づいて、前記シーン認識が行われた複数の画像の再生順を決定する決定ステップと
を備えたことを特徴とする画像処理プログラム。
【図１】
【図２】
【図２】
【公開番号】特開２０１３−５５４５５（Ｐ２０１３−５５４５５Ａ）
【公開日】平成２５年３月２１日（２０１３．３．２１）
【国際特許分類】
【出願番号】特願２０１１−１９１５４２（Ｐ２０１１−１９１５４２）
【出願日】平成２３年９月２日（２０１１．９．２）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２５年３月２１日（２０１３．３．２１）
【国際特許分類】
【出願日】平成２３年９月２日（２０１１．９．２）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]