デジタルカメラ
【課題】利用者が撮影しようとしているシーンに合わせて、好適な構図を提示することが可能なデジタルカメラを提供する。
【解決手段】被写体像を表す画像データを生成する撮像部と、撮像部に捉えられているシーンを実時間で動画表示するライブビュー表示部と、動画表示に用いられるライブビュー画像データの少なくとも一部をサンプル画像として取得するサンプル取得部と、取得されたサンプル画像それぞれの構図を所定の基準に基づいて評価する構図評価部と、構図評価部によって最高の評価が与えられた構図を持つサンプル画像に基づいて、構図を選択的にライブビュー表示部による動画表示に重ねて提示する構図提示部とを備える。
【解決手段】被写体像を表す画像データを生成する撮像部と、撮像部に捉えられているシーンを実時間で動画表示するライブビュー表示部と、動画表示に用いられるライブビュー画像データの少なくとも一部をサンプル画像として取得するサンプル取得部と、取得されたサンプル画像それぞれの構図を所定の基準に基づいて評価する構図評価部と、構図評価部によって最高の評価が与えられた構図を持つサンプル画像に基づいて、構図を選択的にライブビュー表示部による動画表示に重ねて提示する構図提示部とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ライブビュー機能を備えたデジタルカメラに関する。
【背景技術】
【０００２】
多くのデジタルカメラには、例えば、撮像素子で得られる画像信号を間引き読み出しするなどしてスルー画を取得し、このスルー画を所定のフレームレートで液晶表示部に動画表示させる機能が備えられている。このようなライブビュー機能を用いて、デジタルカメラで撮影される範囲を利用者に提示することにより、利用者が本撮影を行うのに先立って構図の決定を支援することができる。
【０００３】
ライブビュー機能を利用した技術としては、例えば、ライブビュー画像に方眼マットや一般的な構図を示す補助枠を重ね合わせて表示する技術が提案されている(特許文献１参照)。
【０００４】
また、動画撮影を中断した後に再開する際に、動画撮影の最終フレームを半透過表示させて、撮影を再開後に得られた動画像と中断直前の動画像とのつなぎ目を合わせやすくする技術も提案されている(特許文献２参照)。
【０００５】
一方、撮影された画像の中の異なる領域を、様々な構図の画像として切り出して提示し、利用者が所望の構図の画像を選択するようにした技術も提案されている(特許文献３参照)。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０００−２７０２４２号公報
【特許文献２】特開２００６−１２９４２４号公報
【特許文献３】特開２００７−１８０６６４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、従来の技術において、ライブビュー画像に重ね合わせられていた補助枠は、例えば、ポートレートや集合写真などの撮影において好適とされる構図を一般化したものに対応している。このため、利用者が撮影しようとしているシーンに、表示された補助枠が適合しない場合もあった。
【０００８】
本件開示は、利用者が撮影しようとしているシーンに合わせて、好適な構図を提示することが可能なデジタルカメラを提供することを目的とする。
【課題を解決するための手段】
【０００９】
上述した目的は、以下に開示するデジタルカメラによって達成することができる。
【００１０】
デジタルカメラは、被写体像を表す画像データを生成する撮像部と、撮像部に捉えられているシーンを実時間で動画表示するライブビュー表示部と、動画表示に用いられるライブビュー画像データの少なくとも一部をサンプル画像として取得するサンプル取得部と、取得されたサンプル画像それぞれの構図を所定の基準に基づいて評価する構図評価部と、構図評価部によって最高の評価が与えられた構図を持つサンプル画像に基づいて、構図を選択的にライブビュー表示部による動画表示に重ねて提示する構図提示部とを備える。
【発明の効果】
【００１１】
以上に説明した構成を有するデジタルカメラでは、利用者が撮影しようとしているシーンに合わせて、好適な構図を提示することができる。
【図面の簡単な説明】
【００１２】
【図１】デジタルカメラの一実施形態を示す図である。
【図２】サンプル画像の例を示す図である。
【図３】構図解析処理を説明する図である。
【図４】構図評価動作を表す流れ図である。
【図５】構図提示の例を示す図である。
【図６】デジタルカメラの別実施形態を示す図である。
【図７】トリミングによる構図の最適化とトリミングを適用した構図の提示例を示す図である。
【図８】デジタルカメラの別実施形態を示す図である。
【図９】トリミングに基づくズーム倍率制御を適用した構図提示例を示す図である。
【発明を実施するための形態】
【００１３】
以下、図面に基づいて、本発明の実施形態について詳細に説明する。
(実施形態１)
図１に、デジタルカメラの一実施形態を示す。
【００１４】
図１に示したデジタルカメラにおいて、撮像部１０は、撮影光学系１１と撮像素子１２を備えている。この撮像素子１２の出力信号は、信号処理部１３によってデジタルデータに変換される。図１に示したメモリ１４、画像処理部１５および記録／再生処理部１６は、バスを介して撮影制御部１８に接続されている。この撮影制御部１８は、操作パネル１９を介して入力される利用者からの指示に基づいて、撮像部１０による撮影動作やバスを介して接続された各部の動作を制御する。
【００１５】
操作パネル１９のレリーズボタンの押下により、静止画像の撮影が指示されたときに、画像処理部１５は、撮影制御部１８からの指示に応じて、信号処理部１３から撮像素子１２の全画素に対応するデジタルデータを受け取る。このとき、画像処理部１５は、このデジタルデータについて補間処理などを行い、撮像部１０の撮像範囲に対応する画像データを生成して、これをメモリ１４に保持する。この画像データは、例えば、バスを介して記録／再生処理部１６に渡され、メモリカードなどの記憶媒体１７に記録されるとともに、静止画表示制御部２４を介して液晶表示部２３に渡され、表示画面を介して利用者に提示される。
【００１６】
一方、静止画像の撮影タイミング以外では、撮像素子１２の出力信号は、利用者に撮像部１０による撮像範囲を表す動画像を提示するライブビュー機能に利用される。図１に示したライブビュー表示部２０は、動画表示処理部２２と液晶表示部２３とを備えている。ライブビュー機能のための動画像データは、例えば、信号処理部１３によって撮像素子１２から所定のフレームレートで間引き読み出しされた画像信号に基づいて生成される。そして、この動画像データは、動画表示制御部２２を介して液晶表示部２３に渡され、表示画面に表示される。また、この動画像データは、被写体までの距離の測定や被写界輝度の測定にも利用される。
【００１７】
以下の説明では、ライブビュー機能に利用されている動画像データに含まれる各フレームの画像データをライブビュー画像データと称する。
【００１８】
図１に示したサンプル取得部２５は、サンプル抽出制御部２６とサンプル保持部２７とを備える。サンプル抽出制御部２６は、例えば、画像処理部１５からバスを介して動画表示制御部２２に所定のフレームレートで転送されるライブビュー画像データの中から、定期的にサンプル画像データを抽出して、サンプル保持部２７に保持する。
【００１９】
利用者が表示画面を眺めながら撮影の瞬間を狙っている際には、利用者の操作によって撮像部１０で捉えられる撮像範囲が刻々と変化していく。このような撮像範囲の時間的な変化は、ライブビュー画像データによって表示される画像の構図に現れる。したがって、サンプル抽出制御部２６により、例えば、所定の時間ごとにサンプル画像を抽出すれば、利用者が撮影しようとしているシーンを様々な構図で捉えたサンプル画像が得られる。
【００２０】
なお、サンプル抽出制御部２６により、利用者に対して撮像部１０の撮像範囲の微調整を促すメッセージを作成し、動画表示制御部２２を介してこのメッセージを液晶表示部２３に表示させることもできる。例えば、「カメラをパンさせてください」のようなメッセージを表示させてから、上述したようにしてライブビュー画像データを抽出することにより、主要な被写体と背景との関係が様々に異なっているサンプル画像を取得することができる。
【００２１】
図２に、サンプル画像の例を示す。図２に示したサンプル画像の例では、一人の人物と背景が、これらの位置関係が異なる様々な構図で捉えられている。サンプル抽出制御部２６は、所定数のサンプル画像を抽出してサンプル保持部２３に保持することができる。このとき、サンプル抽出制御部２６は、例えば、デジタルカメラの向きが所定に閾値よりも大きく変化したときのライブビュー画像データをサンプル画像として抽出することができる。また、サンプル抽出制御部２６は、各フレームのライブビュー画像データを比較して、例えば、輝度値の平均などに大きな変化を検出したときにサンプル画像を抽出することもできる。
【００２２】
上述したサンプル抽出制御部２６によってサンプル画像として抽出されたライブビュー画像データは、サンプル保持部２７を介して構図評価部２８および構図提示部３２の処理に供される。
【００２３】
図１に示した構図評価部２８は、構図解析部２９と、評価値算出部３０と、評価基準保持部３１とを備えている。構図解析部２９は、各サンプル画像を解析して、個々の構図の特徴を抽出する。評価値算出部３０は、構図解析部２９で抽出された構図の特徴と評価基準保持部３１に保持された評価基準とに基づいて、各サンプル画像の構図を評価する。
【００２４】
図３に、構図解析処理を説明する図を示す。また、図４に、構図評価動作を表す流れ図を示す。
【００２５】
構図解析部２９は、まず、サンプル画像について顔検出処理を行い(図４のステップＳ１)、サンプル画像に写っている人物の位置や大きさを示す情報を取得する。図３(ａ)に示した例では、一人の人物が検出され、図３(ｂ)に示した例では、３人の人物が検出される。
【００２６】
構図解析部２９は、顔検出処理によって人物を検出したときに(図４のステップＳ２の肯定判定)、サンプル画像に捉えられている人物が複数であるか一人であるかを判定する(ステップＳ３)。
【００２７】
図３(ｂ)に示した例のように、サンプル画像に複数の人物が捉えられている場合に(ステップＳ３の否定判定)、構図解析部２９は、各人物の像が占めている位置を特定する。そして、構図解析部２９で得られたこれらの被写体位置は、評価値算出部３０により、評価基準保持部３１に保持された評価基準と比較される。
【００２８】
このとき、評価値算出部３０は、例えば、図３(ｂ)に示した例に対応して得られた３人分の被写体位置と、３人の人物を画面内で均等に配置した場合の位置との距離の和を、サンプル画像の構図と理想的な構図との差異を示す指標の一つとして算出する。なお、図３(ｂ)において、各被写体位置を破線で示し、均等配置位置を一点鎖線で示した。また、図１に示した評価基準保持部３１は、被写体の数に対応する均等配置位置をそれぞれ保持することもできるし、複数の被写体を画面内で均等に配置する場合に満たすべき条件や均等配置位置を算出するための計算式を保持することもできる。
【００２９】
一方、図３(ａ)に示した例のように、サンプル画像に写っている人物が一人であった場合に(ステップＳ３の肯定判定)、構図解析部２９は、検出された人物の顔の部分を表す画像データについて、更に解析処理を行う。そして、この解析処理の過程で、構図解析部２９は、被写体の人物の顔における眼や鼻の位置を特定し、顔の向きを判断する(ステップＳ５)。例えば、図３(ａ)に示した例のように、検出された目や鼻の位置が顔に対応する領域の左側に偏っている場合に、構図解析部２９は、このサンプル画像に人物は左向きであると判断する。
【００３０】
この場合に、評価値算出部３０は、例えば、画面を黄金分割する黄金分割線のうち、被写体の顔の向きに対応する黄金分割線の位置と被写体の位置との距離を、サンプル画像の構図と理想的な構図との差異を示す指標の一つとして算出する(ステップＳ６)。図３(ａ)に示した例では、評価値算出部３０により、右寄りの黄金分割線の位置と被写体の位置との差が求められている。なお、図３(ａ)においては、各被写体位置を破線で示し、黄金分割位置を一点鎖線で示した。
【００３１】
このようにして、サンプル画像に捉えられた人物に関する構図についての評価指標を算出した後に、構図解析部２９と評価値算出部３０により、背景に関する構図についての評価が行われる。
【００３２】
このとき、構図解析部２９は、サンプル画像の輝度分布に基づいて、明るさの異なる領域の境界を検出する(ステップＳ７)。構図解析部２９は、例えば、背景に捉えられた山や建物などと空との間の境界線を明暗境界線として検出し、その平均的な位置を算出して評価値算出部３０に渡すことができる。
【００３３】
評価値算出部３０は、構図解析部２９から受け取った明暗境界線の位置と、画面を水平公報に黄金分割する黄金分割線のうち近い方との距離を、サンプル画像の構図と理想的な構図との差異を示す指標の一つとして求める(ステップＳ８)。
【００３４】
次に、評価値算出部３０は、人物に関する構図についての評価指標と背景に関する構図についての評価指標との双方に基づいて、サンプル画像の構図全体としての評価値を算出する(ステップＳ９)。評価値算出部３０は、例えば、それぞれの評価指標に適切な重みを乗じて足し合わせることにより、人物と背景の両方について、理想的な構図からのずれの大きさを反映した評価値を求めることができる。
【００３５】
上述した例では、サンプル画像について最終的に得られた評価値は、サンプル画像の人物に関する構図および背景に関する構図が、理想的な構図からどれだけ隔たっているかを示している。つまり、評価値の値が小さいサンプル画像の構図は、値の大きな評価値が与えられたサンプル画像の構図に比べて、理想的な構図からの隔たりが小さくなっている。したがって、取得されたサンプル画像の中で最も小さい評価値が与えられたサンプル画像の構図が、最も理想的な構図に近く、最も高い評価が得られた構図であると判断することができる。
【００３６】
なお、評価値算出部３０においては、人物に関する構図についての評価指標に大きな重みを与えることが望ましい。これにより、人物に関する構図を重視して全体としての評価値を求めることができる。また、複数の人物を被写体とするサンプル画像については、構図解析部２９において、上述した各被写体の位置に加えて、ピントが合っている被写体を検出しておき、この被写体の位置について特に大きな重みを与えて評価値を求めることもできる。更に、ピンボケの度合いが大きい人物の被写体については、人物の数に含めないようにすることもできる。このようにして、撮像部１０の合焦状態に関する情報を利用することにより、画面内に偶然に写りこんだ人物などを排除して、重要な被写体に関する構図を評価することができる。
【００３７】
また、上述した例とは逆に、各サンプル画像の構図と理想的な構図との隔たりの少なさを示す評価指標を求めることもできる。例えば、評価値算出部３０により、複数の人物を被写体とするサンプル画像について、各被写体の位置と対応する均等配置位置との距離の逆数の和を、人物に関する構図と理想的な構図との近さを示す評価指標として求めることもできる。同様に、評価値算出部３０は、一人の人物を被写体とするサンプル画像について、この人物の向きに対応する黄金分割位置と被写体位置との近さを示す評価指標を算出すればよい。同様にして、評価値算出部３０は、このサンプル画像の背景に関する構図についての評価指標として、明暗境界線の平均位置と黄金分割位置との距離の近さを評価することもできる。そして、これらの評価指標に基づいて、サンプル画像の構図全体としての評価値を算出することができる。この場合は、取得されたサンプル画像の中で最大の評価値が与えられたサンプル画像が、最も理想的な構図に近く、最も高い評価が得られた構図であると判断することができる。
【００３８】
更にまた、例えば、被写体の位置と黄金分割位置との距離あるいはその逆数をそのまま評価指標とする代わりに、距離あるいはその逆数が予め設定された複数段階のうちいずれに属するかに応じて、その段階に対応するスコアを評価指標とすることもできる。この場合は、評価値算出部３０は、評価基準ごとに求めたスコアに、それぞれ対応する重みを乗じた加重スコアの合計として、各サンプル画像の構図全体としての評価値を求めることができる。
【００３９】
なお、サンプル画像に人物が捉えられていなかった場合は(ステップＳ２の否定判定)、上述したステップＳ３〜ステップＳ６はスキップされ、ステップＳ７からステップＳ８の手順に従って求められた背景に関する評価指標が求められる。そして、この背景に関する評価指標に基づいて、各サンプル画像の評価値が決定される。
【００４０】
また、構図解析部２９は、サンプル画像に基づいて算出された被写界距離に基づいて、このサンプル画像に含まれている人物以外の被写体とその背景とを判別し、この判別結果を構図の評価に供することもできる。この場合に、構図解析部２９は、被写体として判別した人物以外の物体の像が画面において占める位置を検出する。そして、評価値算出部３０は、これらの被写体位置に基づいて、上述したステップＳ４〜ステップＳ６と同様にして、画面における配置バランスを評価すればよい。
【００４１】
次に、上述したようにして各サンプル画像の構図について求められた評価値に基づいて、利用者に推奨する構図を提示する方法について説明する。
【００４２】
図１に示した構図提示部３２は、画像読出部３３と半透過表示制御部３４とを備えている。画像読出部３３は、構図評価部２８で得られた評価結果に基づいて、最も高い評価結果が与えられたサンプル画像をサンプル保持部２７から読み出して、半透過表示制御部３４に渡す。
【００４３】
例えば、図２に示したサンプル画像の例のうち、符号Ｂで示したサンプル画像Ｂの構図が、構図評価部２８によって最も高く評価された場合に、この評価結果に基づいて、画像読出部３３により、上述したサンプル画像Ｂがサンプル保持部２７から読み出される。
【００４４】
画像読出部３３からサンプル画像を受け取った半透過表示制御部３４は、液晶表示部２３に表示されているライブビュー画像に重ねて、このサンプル画像を半透過状態で表示させるための制御を行う。
【００４５】
図５に、構図提示部３２による構図提示の例を示す。図５に示した例では、ライブビュー機能によって表示されている動画像に重ねて、上述したサンプル画像Ｂが半透過状態で表示されている。なお、図５の例においては、サンプル画像Ｂに捉えられた人物および背景の大まかな輪郭線のみを、太い網掛けの線で示した。
【００４６】
半透過表示制御部３４は、評価結果に基づいて選択されたサンプル画像をそのまま半透過表示させることもできるし、このサンプル画像から抽出した被写体の輪郭を表示させることもできる。また、半透過表示制御部３４により、抽出した輪郭の色を変えるなどして強調表示させることもできる。更に、半透過表示制御部３４により、構図の評価基準として用いられた黄金分割位置などを、上述したサンプル画像あるいは輪郭などとともに表示させることもできる。
【００４７】
このようにして、図１に示したデジタルカメラでは、ライブビュー画像データから抽出されたサンプル画像について、それぞれの構図を評価し、最も高く評価されたサンプル画像に対応する構図を、ライブビュー画像に重ねて表示することができる。
【００４８】
上述したようにして提示される構図は、利用者が実際に撮影しようとしているときのライブビュー画像の中から選択されているので、利用者が撮影しようとしているシーンに含まれる被写体や背景の組み合わせが反映されている。
【００４９】
したがって、予めモデル化された構図を提示する場合に比べて、撮影しようとしているシーンとの適合性が高い構図を提示して、この構図にライブビュー画像を一致させるようにカメラの操作するように促すことができる。
【００５０】
これにより、モデル化によって類型的された構図に当てはめるのではなく、個々の利用者の意向や嗜好を活かしながら、しかも、理想的な構図に近い構図での撮影に利用者を誘導することができる。したがって、図１に示したようなデジタルカメラによれば、実際の撮影を通して、見栄えのよい静止画像を撮影するために必要な知識を習得する機会を、利用者に提供することができる。
【００５１】
更に、構図解析部２９により、各サンプル画像に基づいて、カメラを９０度回転させた状態で同じ被写体を捉えた場合の構図を推定し、推定した構図について、評価値算出部３０により、カメラの向きに適合する評価基準に基づいて評価値を算出してもよい。このような評価を適用する場合には、カメラを横に構えた状態でライブビュー画像から取得されたサンプル画像について、横位置での構図に対応する評価結果と縦位置に変換した場合の構図に対応する評価結果が得られる。そして、縦位置に変換された構図に対して、評価値算出部３０により、最も高い評価値が与えられる場合もありうる。
【００５２】
このように、縦横を変換した場合の構図が、構図評価部２８によって最も高く評価された場合に、半透過表示制御部３４は、利用者に、カメラの向きの変更を促した上で、対応するサンプル画像の縦横を変換した画像を半透過表示させればよい。
【００５３】
このように、サンプル画像の縦横を変換した画像を含めた構図評価技法およびこれに対応して構図を提示する技法を適用することにより、カメラを構える方向を含めて、利用者に撮影技術を指南することができる。
【００５４】
また更に、好適な構図の提示を通して、撮像部１０に捉えられる撮像範囲の大きさと被写体の大きさのバランスについての知識を習得する機会を、利用者に提供することもできる。
(実施形態２)
図６に、デジタルカメラの別実施形態を示す。なお、図６に示した構成要素のうち、図１に示した構成要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
【００５５】
図６に示し構図評価部２８は、図１に示した各部に加えて、トリミング設定部３５を備えている。また、構図提示部３２は、図１に示した半透過表示制御部３４に代えて、提示制御部３７と線画生成部３６とを備えている。
【００５６】
トリミング設定部３５は、構図解析部２９による解析結果に基づいて、各サンプル画像について適切なトリミングを設定する。例えば、構図解析部２９による解析結果によって、サンプル画像において、被写体の配置が偏っていることが示されている場合などに、トリミング設定部３５は、被写体の配置が中央あるいは黄金分割位置に近づくように、トリミングを設定することができる。
【００５７】
図７(ａ)に、トリミングによる構図の最適化の例を示す。図７(ａ)に示した例では、サンプル画像において画面の中央よりとなっている人物の配置が、トリミングによって、黄金分割位置に近づけられている。なお、図７(ａ)においては、トリミング設定部３５によって設定されたトリミング範囲を破線で示した。
【００５８】
このようにしてトリミングされたサンプル画像について、構図解析部２９によって再び構図解析を行い、この結果に基づいて、評価値算出部３０により、トリミングによる最適化を適用した場合の構図について評価値を求めることができる。
【００５９】
構図提示部３２に備えられた提示制御部３７は、構図評価部２８による評価結果に基づいて、画像読出部３３に最も高く評価された構図に対応するサンプル画像の読み出しを指示する。そして、この指示に応じて、画像読出部３３によってサンプル保持部２７から読み出されたサンプル画像は、提示制御部３７を介して液晶表示部２３による表示処理に供される。
【００６０】
提示制御部３７は、読み出しを指示した画像に対応する構図の評価の際にトリミングが適用されていなかった場合は、上述した実施形態１と同様にして、サンプル画像を半透過状態で液晶表示部２３に表示させる処理を行う。
【００６１】
一方、読み出しを指示したサンプル画像に対応する構図の評価にトリミングが適用されていた場合に、提示制御部３７は、画像読出部３３から受け取ったサンプル画像にトリミングを適用する。例えば、サンプル画像からトリミング範囲を抽出し、このトリミング範囲を拡大した上で、液晶表示部２３に渡し、ライブビュー画像に重ねて半透過状態で表示させる。また、提示制御部３７は、線画生成部３６に対して、トリミング範囲を示す線画の生成を指示する。これに応じて、線画生成部３６は、トリミング設定部３５から指定されたサンプル画像に対応するトリミング範囲を示す情報を受け取り、この範囲を液晶表示部２３の表示画面に表示するための表示情報を生成する。この表示情報は、提示制御部３７を介して液晶表示部２３に渡され、この表示情報に基づいて、トリミング範囲を示す線画が、ライブビュー画像および好適な構図を示すサンプル画像の拡大像に重ねられて表示画面に表示される。
【００６２】
図７(ｂ)に、トリミングを適用した構図の提示例を示す。図７(ｂ)に示した例では、左向きの人物が中央よりの配置で捉えられたライブビュー画像に重ねて、選択されたサンプル画像のトリミング範囲を表示画面一杯に拡大した画像が、半透過表示されている。また、図７(ｂ)に示した例では、トリミング範囲と元のサンプル画像の撮影範囲との対比を示す線画がトリミング範囲を示す線画として提示されている。なお、図７(ｂ)に示した例では、好適な構図を示すサンプル画像の拡大像を太い網掛け線で示し、また、トリミング範囲を示す線画を破線で示した。また、トリミング範囲を示す線画に合わせて、この線画で示されるトリミング範囲を画面に一致させる操作を促す矢印やズーム倍率の変更を促すメッセージを提示することもできる。
【００６３】
このようにして、撮影範囲の大きさと被写体の大きさとのバランスを変えることも視野に入れて、更に好適な構図を利用者に提示することができる。
【００６４】
更に、上述したようにして設定されたトリミング範囲と撮影範囲とを一致させる制御を適用することもできる。
(実施形態３)
図８に、デジタルカメラの別実施形態を示す。なお、図８に示した構成要素のうち、図６に示した構成要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
【００６５】
図８に示した提示制御部３７は、上述した実施形態２と同様にして、サンプル画像に基づいて好適な構図を提示する。また、提示制御部３７は、トリミング範囲と示す線画の生成を線画生成部３６に指示する代わりに、撮影制御部１９を介して撮像部１０の撮影光学系１１を操作してズーム倍率を変更し、撮影範囲を設定されたトリミング範囲と一致させる。
【００６６】
図９に、トリミングに基づくズーム倍率制御を適用した構図提示例を示す。図９に示した例では、図９(ａ)に破線で示したトリミング範囲の画像が、図９(ｂ)に太い網掛け線で示すように拡大され、好適な構図として提示される。
【００６７】
このとき、提示制御部３７からの指示に応じて、撮影制御部１９は、撮影光学系１１のズーム倍率を、トリミング範囲を撮影範囲に一致させるように変更する。これにより、このトリミング範囲に対応する範囲を撮影して得られる動画像が、ライブビュー画像として液晶表示部２３に表示される。この場合に、図９(ｂ)に示すように、ライブビュー画像に捉えられた被写体と好適な構図を示す半透過画像における被写体とはほぼ同じ大きさで表示される。
【００６８】
なお、上述したようにして、撮影制御部１９を介して撮影光学系１１のズーム倍率を直接的に変更する代わりに、ライブビュー画像のトリミング範囲に対応する部分を拡大して動画像表示に供することもできる。
【００６９】
更に、上述した実施形態１，２，３のデジタルカメラにおいて、好適な構図の提示に応じて、利用者がカメラを操作している過程で、好適な構図とライブビュー画像の構図との類似度が所定の閾値以上となったときに、自動的に撮影を実行することもできる。
【符号の説明】
【００７０】
１０…撮像部、１１…撮影光学系、１２…撮像素子、１３…信号処理部、１４…メモリ、１５…画像処理部、１６…記録／再生処理部、１７…記憶媒体、１８…操作パネル、１９…撮影制御部、２１…ライブビュー表示部、２２…動作表示制御部、２３…液晶表示部、２４…静止画表示制御部、２５…サンプル取得部、２６…サンプル抽出制御部、２７…サンプル保持部、２８…構図評価部、２９…構図解析部、３０…評価値算出部、３１…評価基準保持部、３２…構図提示部、３３…画像読出部、３４…半透過表示制御部、３５…トリミング設定部、３６…線画生成部、３７…提示制御部。
【技術分野】
【０００１】
本発明は、ライブビュー機能を備えたデジタルカメラに関する。
【背景技術】
【０００２】
多くのデジタルカメラには、例えば、撮像素子で得られる画像信号を間引き読み出しするなどしてスルー画を取得し、このスルー画を所定のフレームレートで液晶表示部に動画表示させる機能が備えられている。このようなライブビュー機能を用いて、デジタルカメラで撮影される範囲を利用者に提示することにより、利用者が本撮影を行うのに先立って構図の決定を支援することができる。
【０００３】
ライブビュー機能を利用した技術としては、例えば、ライブビュー画像に方眼マットや一般的な構図を示す補助枠を重ね合わせて表示する技術が提案されている(特許文献１参照)。
【０００４】
また、動画撮影を中断した後に再開する際に、動画撮影の最終フレームを半透過表示させて、撮影を再開後に得られた動画像と中断直前の動画像とのつなぎ目を合わせやすくする技術も提案されている(特許文献２参照)。
【０００５】
一方、撮影された画像の中の異なる領域を、様々な構図の画像として切り出して提示し、利用者が所望の構図の画像を選択するようにした技術も提案されている(特許文献３参照)。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０００−２７０２４２号公報
【特許文献２】特開２００６−１２９４２４号公報
【特許文献３】特開２００７−１８０６６４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、従来の技術において、ライブビュー画像に重ね合わせられていた補助枠は、例えば、ポートレートや集合写真などの撮影において好適とされる構図を一般化したものに対応している。このため、利用者が撮影しようとしているシーンに、表示された補助枠が適合しない場合もあった。
【０００８】
本件開示は、利用者が撮影しようとしているシーンに合わせて、好適な構図を提示することが可能なデジタルカメラを提供することを目的とする。
【課題を解決するための手段】
【０００９】
上述した目的は、以下に開示するデジタルカメラによって達成することができる。
【００１０】
デジタルカメラは、被写体像を表す画像データを生成する撮像部と、撮像部に捉えられているシーンを実時間で動画表示するライブビュー表示部と、動画表示に用いられるライブビュー画像データの少なくとも一部をサンプル画像として取得するサンプル取得部と、取得されたサンプル画像それぞれの構図を所定の基準に基づいて評価する構図評価部と、構図評価部によって最高の評価が与えられた構図を持つサンプル画像に基づいて、構図を選択的にライブビュー表示部による動画表示に重ねて提示する構図提示部とを備える。
【発明の効果】
【００１１】
以上に説明した構成を有するデジタルカメラでは、利用者が撮影しようとしているシーンに合わせて、好適な構図を提示することができる。
【図面の簡単な説明】
【００１２】
【図１】デジタルカメラの一実施形態を示す図である。
【図２】サンプル画像の例を示す図である。
【図３】構図解析処理を説明する図である。
【図４】構図評価動作を表す流れ図である。
【図５】構図提示の例を示す図である。
【図６】デジタルカメラの別実施形態を示す図である。
【図７】トリミングによる構図の最適化とトリミングを適用した構図の提示例を示す図である。
【図８】デジタルカメラの別実施形態を示す図である。
【図９】トリミングに基づくズーム倍率制御を適用した構図提示例を示す図である。
【発明を実施するための形態】
【００１３】
以下、図面に基づいて、本発明の実施形態について詳細に説明する。
(実施形態１)
図１に、デジタルカメラの一実施形態を示す。
【００１４】
図１に示したデジタルカメラにおいて、撮像部１０は、撮影光学系１１と撮像素子１２を備えている。この撮像素子１２の出力信号は、信号処理部１３によってデジタルデータに変換される。図１に示したメモリ１４、画像処理部１５および記録／再生処理部１６は、バスを介して撮影制御部１８に接続されている。この撮影制御部１８は、操作パネル１９を介して入力される利用者からの指示に基づいて、撮像部１０による撮影動作やバスを介して接続された各部の動作を制御する。
【００１５】
操作パネル１９のレリーズボタンの押下により、静止画像の撮影が指示されたときに、画像処理部１５は、撮影制御部１８からの指示に応じて、信号処理部１３から撮像素子１２の全画素に対応するデジタルデータを受け取る。このとき、画像処理部１５は、このデジタルデータについて補間処理などを行い、撮像部１０の撮像範囲に対応する画像データを生成して、これをメモリ１４に保持する。この画像データは、例えば、バスを介して記録／再生処理部１６に渡され、メモリカードなどの記憶媒体１７に記録されるとともに、静止画表示制御部２４を介して液晶表示部２３に渡され、表示画面を介して利用者に提示される。
【００１６】
一方、静止画像の撮影タイミング以外では、撮像素子１２の出力信号は、利用者に撮像部１０による撮像範囲を表す動画像を提示するライブビュー機能に利用される。図１に示したライブビュー表示部２０は、動画表示処理部２２と液晶表示部２３とを備えている。ライブビュー機能のための動画像データは、例えば、信号処理部１３によって撮像素子１２から所定のフレームレートで間引き読み出しされた画像信号に基づいて生成される。そして、この動画像データは、動画表示制御部２２を介して液晶表示部２３に渡され、表示画面に表示される。また、この動画像データは、被写体までの距離の測定や被写界輝度の測定にも利用される。
【００１７】
以下の説明では、ライブビュー機能に利用されている動画像データに含まれる各フレームの画像データをライブビュー画像データと称する。
【００１８】
図１に示したサンプル取得部２５は、サンプル抽出制御部２６とサンプル保持部２７とを備える。サンプル抽出制御部２６は、例えば、画像処理部１５からバスを介して動画表示制御部２２に所定のフレームレートで転送されるライブビュー画像データの中から、定期的にサンプル画像データを抽出して、サンプル保持部２７に保持する。
【００１９】
利用者が表示画面を眺めながら撮影の瞬間を狙っている際には、利用者の操作によって撮像部１０で捉えられる撮像範囲が刻々と変化していく。このような撮像範囲の時間的な変化は、ライブビュー画像データによって表示される画像の構図に現れる。したがって、サンプル抽出制御部２６により、例えば、所定の時間ごとにサンプル画像を抽出すれば、利用者が撮影しようとしているシーンを様々な構図で捉えたサンプル画像が得られる。
【００２０】
なお、サンプル抽出制御部２６により、利用者に対して撮像部１０の撮像範囲の微調整を促すメッセージを作成し、動画表示制御部２２を介してこのメッセージを液晶表示部２３に表示させることもできる。例えば、「カメラをパンさせてください」のようなメッセージを表示させてから、上述したようにしてライブビュー画像データを抽出することにより、主要な被写体と背景との関係が様々に異なっているサンプル画像を取得することができる。
【００２１】
図２に、サンプル画像の例を示す。図２に示したサンプル画像の例では、一人の人物と背景が、これらの位置関係が異なる様々な構図で捉えられている。サンプル抽出制御部２６は、所定数のサンプル画像を抽出してサンプル保持部２３に保持することができる。このとき、サンプル抽出制御部２６は、例えば、デジタルカメラの向きが所定に閾値よりも大きく変化したときのライブビュー画像データをサンプル画像として抽出することができる。また、サンプル抽出制御部２６は、各フレームのライブビュー画像データを比較して、例えば、輝度値の平均などに大きな変化を検出したときにサンプル画像を抽出することもできる。
【００２２】
上述したサンプル抽出制御部２６によってサンプル画像として抽出されたライブビュー画像データは、サンプル保持部２７を介して構図評価部２８および構図提示部３２の処理に供される。
【００２３】
図１に示した構図評価部２８は、構図解析部２９と、評価値算出部３０と、評価基準保持部３１とを備えている。構図解析部２９は、各サンプル画像を解析して、個々の構図の特徴を抽出する。評価値算出部３０は、構図解析部２９で抽出された構図の特徴と評価基準保持部３１に保持された評価基準とに基づいて、各サンプル画像の構図を評価する。
【００２４】
図３に、構図解析処理を説明する図を示す。また、図４に、構図評価動作を表す流れ図を示す。
【００２５】
構図解析部２９は、まず、サンプル画像について顔検出処理を行い(図４のステップＳ１)、サンプル画像に写っている人物の位置や大きさを示す情報を取得する。図３(ａ)に示した例では、一人の人物が検出され、図３(ｂ)に示した例では、３人の人物が検出される。
【００２６】
構図解析部２９は、顔検出処理によって人物を検出したときに(図４のステップＳ２の肯定判定)、サンプル画像に捉えられている人物が複数であるか一人であるかを判定する(ステップＳ３)。
【００２７】
図３(ｂ)に示した例のように、サンプル画像に複数の人物が捉えられている場合に(ステップＳ３の否定判定)、構図解析部２９は、各人物の像が占めている位置を特定する。そして、構図解析部２９で得られたこれらの被写体位置は、評価値算出部３０により、評価基準保持部３１に保持された評価基準と比較される。
【００２８】
このとき、評価値算出部３０は、例えば、図３(ｂ)に示した例に対応して得られた３人分の被写体位置と、３人の人物を画面内で均等に配置した場合の位置との距離の和を、サンプル画像の構図と理想的な構図との差異を示す指標の一つとして算出する。なお、図３(ｂ)において、各被写体位置を破線で示し、均等配置位置を一点鎖線で示した。また、図１に示した評価基準保持部３１は、被写体の数に対応する均等配置位置をそれぞれ保持することもできるし、複数の被写体を画面内で均等に配置する場合に満たすべき条件や均等配置位置を算出するための計算式を保持することもできる。
【００２９】
一方、図３(ａ)に示した例のように、サンプル画像に写っている人物が一人であった場合に(ステップＳ３の肯定判定)、構図解析部２９は、検出された人物の顔の部分を表す画像データについて、更に解析処理を行う。そして、この解析処理の過程で、構図解析部２９は、被写体の人物の顔における眼や鼻の位置を特定し、顔の向きを判断する(ステップＳ５)。例えば、図３(ａ)に示した例のように、検出された目や鼻の位置が顔に対応する領域の左側に偏っている場合に、構図解析部２９は、このサンプル画像に人物は左向きであると判断する。
【００３０】
この場合に、評価値算出部３０は、例えば、画面を黄金分割する黄金分割線のうち、被写体の顔の向きに対応する黄金分割線の位置と被写体の位置との距離を、サンプル画像の構図と理想的な構図との差異を示す指標の一つとして算出する(ステップＳ６)。図３(ａ)に示した例では、評価値算出部３０により、右寄りの黄金分割線の位置と被写体の位置との差が求められている。なお、図３(ａ)においては、各被写体位置を破線で示し、黄金分割位置を一点鎖線で示した。
【００３１】
このようにして、サンプル画像に捉えられた人物に関する構図についての評価指標を算出した後に、構図解析部２９と評価値算出部３０により、背景に関する構図についての評価が行われる。
【００３２】
このとき、構図解析部２９は、サンプル画像の輝度分布に基づいて、明るさの異なる領域の境界を検出する(ステップＳ７)。構図解析部２９は、例えば、背景に捉えられた山や建物などと空との間の境界線を明暗境界線として検出し、その平均的な位置を算出して評価値算出部３０に渡すことができる。
【００３３】
評価値算出部３０は、構図解析部２９から受け取った明暗境界線の位置と、画面を水平公報に黄金分割する黄金分割線のうち近い方との距離を、サンプル画像の構図と理想的な構図との差異を示す指標の一つとして求める(ステップＳ８)。
【００３４】
次に、評価値算出部３０は、人物に関する構図についての評価指標と背景に関する構図についての評価指標との双方に基づいて、サンプル画像の構図全体としての評価値を算出する(ステップＳ９)。評価値算出部３０は、例えば、それぞれの評価指標に適切な重みを乗じて足し合わせることにより、人物と背景の両方について、理想的な構図からのずれの大きさを反映した評価値を求めることができる。
【００３５】
上述した例では、サンプル画像について最終的に得られた評価値は、サンプル画像の人物に関する構図および背景に関する構図が、理想的な構図からどれだけ隔たっているかを示している。つまり、評価値の値が小さいサンプル画像の構図は、値の大きな評価値が与えられたサンプル画像の構図に比べて、理想的な構図からの隔たりが小さくなっている。したがって、取得されたサンプル画像の中で最も小さい評価値が与えられたサンプル画像の構図が、最も理想的な構図に近く、最も高い評価が得られた構図であると判断することができる。
【００３６】
なお、評価値算出部３０においては、人物に関する構図についての評価指標に大きな重みを与えることが望ましい。これにより、人物に関する構図を重視して全体としての評価値を求めることができる。また、複数の人物を被写体とするサンプル画像については、構図解析部２９において、上述した各被写体の位置に加えて、ピントが合っている被写体を検出しておき、この被写体の位置について特に大きな重みを与えて評価値を求めることもできる。更に、ピンボケの度合いが大きい人物の被写体については、人物の数に含めないようにすることもできる。このようにして、撮像部１０の合焦状態に関する情報を利用することにより、画面内に偶然に写りこんだ人物などを排除して、重要な被写体に関する構図を評価することができる。
【００３７】
また、上述した例とは逆に、各サンプル画像の構図と理想的な構図との隔たりの少なさを示す評価指標を求めることもできる。例えば、評価値算出部３０により、複数の人物を被写体とするサンプル画像について、各被写体の位置と対応する均等配置位置との距離の逆数の和を、人物に関する構図と理想的な構図との近さを示す評価指標として求めることもできる。同様に、評価値算出部３０は、一人の人物を被写体とするサンプル画像について、この人物の向きに対応する黄金分割位置と被写体位置との近さを示す評価指標を算出すればよい。同様にして、評価値算出部３０は、このサンプル画像の背景に関する構図についての評価指標として、明暗境界線の平均位置と黄金分割位置との距離の近さを評価することもできる。そして、これらの評価指標に基づいて、サンプル画像の構図全体としての評価値を算出することができる。この場合は、取得されたサンプル画像の中で最大の評価値が与えられたサンプル画像が、最も理想的な構図に近く、最も高い評価が得られた構図であると判断することができる。
【００３８】
更にまた、例えば、被写体の位置と黄金分割位置との距離あるいはその逆数をそのまま評価指標とする代わりに、距離あるいはその逆数が予め設定された複数段階のうちいずれに属するかに応じて、その段階に対応するスコアを評価指標とすることもできる。この場合は、評価値算出部３０は、評価基準ごとに求めたスコアに、それぞれ対応する重みを乗じた加重スコアの合計として、各サンプル画像の構図全体としての評価値を求めることができる。
【００３９】
なお、サンプル画像に人物が捉えられていなかった場合は(ステップＳ２の否定判定)、上述したステップＳ３〜ステップＳ６はスキップされ、ステップＳ７からステップＳ８の手順に従って求められた背景に関する評価指標が求められる。そして、この背景に関する評価指標に基づいて、各サンプル画像の評価値が決定される。
【００４０】
また、構図解析部２９は、サンプル画像に基づいて算出された被写界距離に基づいて、このサンプル画像に含まれている人物以外の被写体とその背景とを判別し、この判別結果を構図の評価に供することもできる。この場合に、構図解析部２９は、被写体として判別した人物以外の物体の像が画面において占める位置を検出する。そして、評価値算出部３０は、これらの被写体位置に基づいて、上述したステップＳ４〜ステップＳ６と同様にして、画面における配置バランスを評価すればよい。
【００４１】
次に、上述したようにして各サンプル画像の構図について求められた評価値に基づいて、利用者に推奨する構図を提示する方法について説明する。
【００４２】
図１に示した構図提示部３２は、画像読出部３３と半透過表示制御部３４とを備えている。画像読出部３３は、構図評価部２８で得られた評価結果に基づいて、最も高い評価結果が与えられたサンプル画像をサンプル保持部２７から読み出して、半透過表示制御部３４に渡す。
【００４３】
例えば、図２に示したサンプル画像の例のうち、符号Ｂで示したサンプル画像Ｂの構図が、構図評価部２８によって最も高く評価された場合に、この評価結果に基づいて、画像読出部３３により、上述したサンプル画像Ｂがサンプル保持部２７から読み出される。
【００４４】
画像読出部３３からサンプル画像を受け取った半透過表示制御部３４は、液晶表示部２３に表示されているライブビュー画像に重ねて、このサンプル画像を半透過状態で表示させるための制御を行う。
【００４５】
図５に、構図提示部３２による構図提示の例を示す。図５に示した例では、ライブビュー機能によって表示されている動画像に重ねて、上述したサンプル画像Ｂが半透過状態で表示されている。なお、図５の例においては、サンプル画像Ｂに捉えられた人物および背景の大まかな輪郭線のみを、太い網掛けの線で示した。
【００４６】
半透過表示制御部３４は、評価結果に基づいて選択されたサンプル画像をそのまま半透過表示させることもできるし、このサンプル画像から抽出した被写体の輪郭を表示させることもできる。また、半透過表示制御部３４により、抽出した輪郭の色を変えるなどして強調表示させることもできる。更に、半透過表示制御部３４により、構図の評価基準として用いられた黄金分割位置などを、上述したサンプル画像あるいは輪郭などとともに表示させることもできる。
【００４７】
このようにして、図１に示したデジタルカメラでは、ライブビュー画像データから抽出されたサンプル画像について、それぞれの構図を評価し、最も高く評価されたサンプル画像に対応する構図を、ライブビュー画像に重ねて表示することができる。
【００４８】
上述したようにして提示される構図は、利用者が実際に撮影しようとしているときのライブビュー画像の中から選択されているので、利用者が撮影しようとしているシーンに含まれる被写体や背景の組み合わせが反映されている。
【００４９】
したがって、予めモデル化された構図を提示する場合に比べて、撮影しようとしているシーンとの適合性が高い構図を提示して、この構図にライブビュー画像を一致させるようにカメラの操作するように促すことができる。
【００５０】
これにより、モデル化によって類型的された構図に当てはめるのではなく、個々の利用者の意向や嗜好を活かしながら、しかも、理想的な構図に近い構図での撮影に利用者を誘導することができる。したがって、図１に示したようなデジタルカメラによれば、実際の撮影を通して、見栄えのよい静止画像を撮影するために必要な知識を習得する機会を、利用者に提供することができる。
【００５１】
更に、構図解析部２９により、各サンプル画像に基づいて、カメラを９０度回転させた状態で同じ被写体を捉えた場合の構図を推定し、推定した構図について、評価値算出部３０により、カメラの向きに適合する評価基準に基づいて評価値を算出してもよい。このような評価を適用する場合には、カメラを横に構えた状態でライブビュー画像から取得されたサンプル画像について、横位置での構図に対応する評価結果と縦位置に変換した場合の構図に対応する評価結果が得られる。そして、縦位置に変換された構図に対して、評価値算出部３０により、最も高い評価値が与えられる場合もありうる。
【００５２】
このように、縦横を変換した場合の構図が、構図評価部２８によって最も高く評価された場合に、半透過表示制御部３４は、利用者に、カメラの向きの変更を促した上で、対応するサンプル画像の縦横を変換した画像を半透過表示させればよい。
【００５３】
このように、サンプル画像の縦横を変換した画像を含めた構図評価技法およびこれに対応して構図を提示する技法を適用することにより、カメラを構える方向を含めて、利用者に撮影技術を指南することができる。
【００５４】
また更に、好適な構図の提示を通して、撮像部１０に捉えられる撮像範囲の大きさと被写体の大きさのバランスについての知識を習得する機会を、利用者に提供することもできる。
(実施形態２)
図６に、デジタルカメラの別実施形態を示す。なお、図６に示した構成要素のうち、図１に示した構成要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
【００５５】
図６に示し構図評価部２８は、図１に示した各部に加えて、トリミング設定部３５を備えている。また、構図提示部３２は、図１に示した半透過表示制御部３４に代えて、提示制御部３７と線画生成部３６とを備えている。
【００５６】
トリミング設定部３５は、構図解析部２９による解析結果に基づいて、各サンプル画像について適切なトリミングを設定する。例えば、構図解析部２９による解析結果によって、サンプル画像において、被写体の配置が偏っていることが示されている場合などに、トリミング設定部３５は、被写体の配置が中央あるいは黄金分割位置に近づくように、トリミングを設定することができる。
【００５７】
図７(ａ)に、トリミングによる構図の最適化の例を示す。図７(ａ)に示した例では、サンプル画像において画面の中央よりとなっている人物の配置が、トリミングによって、黄金分割位置に近づけられている。なお、図７(ａ)においては、トリミング設定部３５によって設定されたトリミング範囲を破線で示した。
【００５８】
このようにしてトリミングされたサンプル画像について、構図解析部２９によって再び構図解析を行い、この結果に基づいて、評価値算出部３０により、トリミングによる最適化を適用した場合の構図について評価値を求めることができる。
【００５９】
構図提示部３２に備えられた提示制御部３７は、構図評価部２８による評価結果に基づいて、画像読出部３３に最も高く評価された構図に対応するサンプル画像の読み出しを指示する。そして、この指示に応じて、画像読出部３３によってサンプル保持部２７から読み出されたサンプル画像は、提示制御部３７を介して液晶表示部２３による表示処理に供される。
【００６０】
提示制御部３７は、読み出しを指示した画像に対応する構図の評価の際にトリミングが適用されていなかった場合は、上述した実施形態１と同様にして、サンプル画像を半透過状態で液晶表示部２３に表示させる処理を行う。
【００６１】
一方、読み出しを指示したサンプル画像に対応する構図の評価にトリミングが適用されていた場合に、提示制御部３７は、画像読出部３３から受け取ったサンプル画像にトリミングを適用する。例えば、サンプル画像からトリミング範囲を抽出し、このトリミング範囲を拡大した上で、液晶表示部２３に渡し、ライブビュー画像に重ねて半透過状態で表示させる。また、提示制御部３７は、線画生成部３６に対して、トリミング範囲を示す線画の生成を指示する。これに応じて、線画生成部３６は、トリミング設定部３５から指定されたサンプル画像に対応するトリミング範囲を示す情報を受け取り、この範囲を液晶表示部２３の表示画面に表示するための表示情報を生成する。この表示情報は、提示制御部３７を介して液晶表示部２３に渡され、この表示情報に基づいて、トリミング範囲を示す線画が、ライブビュー画像および好適な構図を示すサンプル画像の拡大像に重ねられて表示画面に表示される。
【００６２】
図７(ｂ)に、トリミングを適用した構図の提示例を示す。図７(ｂ)に示した例では、左向きの人物が中央よりの配置で捉えられたライブビュー画像に重ねて、選択されたサンプル画像のトリミング範囲を表示画面一杯に拡大した画像が、半透過表示されている。また、図７(ｂ)に示した例では、トリミング範囲と元のサンプル画像の撮影範囲との対比を示す線画がトリミング範囲を示す線画として提示されている。なお、図７(ｂ)に示した例では、好適な構図を示すサンプル画像の拡大像を太い網掛け線で示し、また、トリミング範囲を示す線画を破線で示した。また、トリミング範囲を示す線画に合わせて、この線画で示されるトリミング範囲を画面に一致させる操作を促す矢印やズーム倍率の変更を促すメッセージを提示することもできる。
【００６３】
このようにして、撮影範囲の大きさと被写体の大きさとのバランスを変えることも視野に入れて、更に好適な構図を利用者に提示することができる。
【００６４】
更に、上述したようにして設定されたトリミング範囲と撮影範囲とを一致させる制御を適用することもできる。
(実施形態３)
図８に、デジタルカメラの別実施形態を示す。なお、図８に示した構成要素のうち、図６に示した構成要素と同等のものについては、同一の符号を付して示し、その説明は省略する。
【００６５】
図８に示した提示制御部３７は、上述した実施形態２と同様にして、サンプル画像に基づいて好適な構図を提示する。また、提示制御部３７は、トリミング範囲と示す線画の生成を線画生成部３６に指示する代わりに、撮影制御部１９を介して撮像部１０の撮影光学系１１を操作してズーム倍率を変更し、撮影範囲を設定されたトリミング範囲と一致させる。
【００６６】
図９に、トリミングに基づくズーム倍率制御を適用した構図提示例を示す。図９に示した例では、図９(ａ)に破線で示したトリミング範囲の画像が、図９(ｂ)に太い網掛け線で示すように拡大され、好適な構図として提示される。
【００６７】
このとき、提示制御部３７からの指示に応じて、撮影制御部１９は、撮影光学系１１のズーム倍率を、トリミング範囲を撮影範囲に一致させるように変更する。これにより、このトリミング範囲に対応する範囲を撮影して得られる動画像が、ライブビュー画像として液晶表示部２３に表示される。この場合に、図９(ｂ)に示すように、ライブビュー画像に捉えられた被写体と好適な構図を示す半透過画像における被写体とはほぼ同じ大きさで表示される。
【００６８】
なお、上述したようにして、撮影制御部１９を介して撮影光学系１１のズーム倍率を直接的に変更する代わりに、ライブビュー画像のトリミング範囲に対応する部分を拡大して動画像表示に供することもできる。
【００６９】
更に、上述した実施形態１，２，３のデジタルカメラにおいて、好適な構図の提示に応じて、利用者がカメラを操作している過程で、好適な構図とライブビュー画像の構図との類似度が所定の閾値以上となったときに、自動的に撮影を実行することもできる。
【符号の説明】
【００７０】
１０…撮像部、１１…撮影光学系、１２…撮像素子、１３…信号処理部、１４…メモリ、１５…画像処理部、１６…記録／再生処理部、１７…記憶媒体、１８…操作パネル、１９…撮影制御部、２１…ライブビュー表示部、２２…動作表示制御部、２３…液晶表示部、２４…静止画表示制御部、２５…サンプル取得部、２６…サンプル抽出制御部、２７…サンプル保持部、２８…構図評価部、２９…構図解析部、３０…評価値算出部、３１…評価基準保持部、３２…構図提示部、３３…画像読出部、３４…半透過表示制御部、３５…トリミング設定部、３６…線画生成部、３７…提示制御部。
【特許請求の範囲】
【請求項１】
被写体像を表す画像データを生成する撮像部と、
前記撮像部に捉えられているシーンを実時間で動画表示するライブビュー表示部と、
前記動画表示に用いられるライブビュー画像データの少なくとも一部をサンプル画像として取得するサンプル取得部と、
取得されたサンプル画像それぞれの構図を所定の基準に基づいて評価する構図評価部と、
前記構図評価部によって最高の評価が与えられた構図を持つサンプル画像に基づいて、前記構図を選択的に前記ライブビュー表示部による動画表示に重ねて提示する構図提示部と
を備えたことを特徴とするデジタルカメラ。
【請求項２】
請求項１に記載のデジタルカメラにおいて、
前記サンプル取得部は、前記動画表示に供される各フレームの画像データの構図を時間的に変化させる操作を促すメッセージを、前記ライブビュー表示部を介して表示させるメッセージ表示部を備え、所定の時間間隔でライブビュー画像データからサンプル画像を取得する
ことを特徴とするデジタルカメラ。
【請求項３】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異に基づいて、前記構図に対応する評価値を算出する
ことを特徴とするデジタルカメラ。
【請求項４】
請求項１に記載のデジタルカメラにおいて、
前記構図提示部は、前記最も高い評価を得た構図を持つライブビュー画像を、前記ライブビュー表示部による動画表示に重ねて半透過表示させる
ことを特徴とするデジタルカメラ。
【請求項５】
請求項３に記載のデジタルカメラにおいて、
前記構図提示部は、前記構図評価部において構図の評価に用いられた基準を示す参照画像を、前記最高の評価が与えられた構図に合わせて提示する
ことを特徴とするデジタルカメラ。
【請求項６】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像とともに、前記サンプル画像の少なくとも一部について、前記サンプル画像を回転させた画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異に基づいて、前記構図に対応する評価値を算出し、
前記構図提示部は、前記回転させた画像について得られた構図の評価値が最も高い場合に、前記ライブビュー表示部による動画表示を回転させるとともに、前記最も高い評価を得た構図に対応するサンプル画像を同様に回転させて、前記動画表示に重ねて半透過表示させる
ことを特徴とするデジタルカメラ。
【請求項７】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像の少なくとも一部について、前記サンプル画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異を小さくするようなトリミング範囲を設定するトリミング設定部を備え、
前記構図提示部は、前記トリミング設定部によってトリミング範囲が設定されたサンプル画像に基づいて構図の提示を行う際に、前記トリミング範囲を示す線図を、前記ライブビュー表示部による動画表示に重ねて提示する
ことを特徴とするデジタルカメラ。
【請求項８】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像の少なくとも一部について、前記サンプル画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異を小さくするようなトリミング範囲を設定するトリミング設定部を備え、
前記構図提示部は、前記トリミング設定部によってトリミング範囲が設定されたサンプル画像に基づいて構図の提示を行う際に、前記トリミング範囲に応じて、前記撮像部のズーム倍率を制御する倍率制御部を備えた
ことを特徴とするデジタルカメラ。
【請求項１】
被写体像を表す画像データを生成する撮像部と、
前記撮像部に捉えられているシーンを実時間で動画表示するライブビュー表示部と、
前記動画表示に用いられるライブビュー画像データの少なくとも一部をサンプル画像として取得するサンプル取得部と、
取得されたサンプル画像それぞれの構図を所定の基準に基づいて評価する構図評価部と、
前記構図評価部によって最高の評価が与えられた構図を持つサンプル画像に基づいて、前記構図を選択的に前記ライブビュー表示部による動画表示に重ねて提示する構図提示部と
を備えたことを特徴とするデジタルカメラ。
【請求項２】
請求項１に記載のデジタルカメラにおいて、
前記サンプル取得部は、前記動画表示に供される各フレームの画像データの構図を時間的に変化させる操作を促すメッセージを、前記ライブビュー表示部を介して表示させるメッセージ表示部を備え、所定の時間間隔でライブビュー画像データからサンプル画像を取得する
ことを特徴とするデジタルカメラ。
【請求項３】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異に基づいて、前記構図に対応する評価値を算出する
ことを特徴とするデジタルカメラ。
【請求項４】
請求項１に記載のデジタルカメラにおいて、
前記構図提示部は、前記最も高い評価を得た構図を持つライブビュー画像を、前記ライブビュー表示部による動画表示に重ねて半透過表示させる
ことを特徴とするデジタルカメラ。
【請求項５】
請求項３に記載のデジタルカメラにおいて、
前記構図提示部は、前記構図評価部において構図の評価に用いられた基準を示す参照画像を、前記最高の評価が与えられた構図に合わせて提示する
ことを特徴とするデジタルカメラ。
【請求項６】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像とともに、前記サンプル画像の少なくとも一部について、前記サンプル画像を回転させた画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異に基づいて、前記構図に対応する評価値を算出し、
前記構図提示部は、前記回転させた画像について得られた構図の評価値が最も高い場合に、前記ライブビュー表示部による動画表示を回転させるとともに、前記最も高い評価を得た構図に対応するサンプル画像を同様に回転させて、前記動画表示に重ねて半透過表示させる
ことを特徴とするデジタルカメラ。
【請求項７】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像の少なくとも一部について、前記サンプル画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異を小さくするようなトリミング範囲を設定するトリミング設定部を備え、
前記構図提示部は、前記トリミング設定部によってトリミング範囲が設定されたサンプル画像に基づいて構図の提示を行う際に、前記トリミング範囲を示す線図を、前記ライブビュー表示部による動画表示に重ねて提示する
ことを特徴とするデジタルカメラ。
【請求項８】
請求項１に記載のデジタルカメラにおいて、
前記構図評価部は、前記サンプル画像の少なくとも一部について、前記サンプル画像を解析して得られる少なくとも一つの特徴と、各特徴について設定された基準との差異を小さくするようなトリミング範囲を設定するトリミング設定部を備え、
前記構図提示部は、前記トリミング設定部によってトリミング範囲が設定されたサンプル画像に基づいて構図の提示を行う際に、前記トリミング範囲に応じて、前記撮像部のズーム倍率を制御する倍率制御部を備えた
ことを特徴とするデジタルカメラ。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１１−１３５５２７（Ｐ２０１１−１３５５２７Ａ）
【公開日】平成２３年７月７日（２０１１．７．７）
【国際特許分類】
【出願番号】特願２００９−２９５６０１（Ｐ２００９−２９５６０１）
【出願日】平成２１年１２月２５日（２００９．１２．２５）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２３年７月７日（２０１１．７．７）
【国際特許分類】
【出願日】平成２１年１２月２５日（２００９．１２．２５）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]