撮像装置および撮像装置の制御方法
【課題】動画像の撮像時に、被写体の輝度変化に伴う露出変化を抑制する。
【解決手段】被写体の輝度が変化すると、絞り値およびシャッタ速度が変更される。シャッタ速度は、電子シャッタの場合、直ちに変更される。一方、絞り値は、レンズとカメラボディ間の通信の遅延や、メカ的な遅延により数フレームに亘り駆動される。絞り駆動期間中は、絞り値がプログラム線図に従わないため、露出が適切にならず、画質が低下する。プログラム線図に従い適切に露光されたフレームと、絞り駆動期間中の、プログラム線図から外れ不適切な露光がなされたフレームについて、所定領域の輝度値の比から、補正係数Ｂを算出する。そして、不適切な露光がなされたフレームの画像信号に対して、補正係数Ｂを用いてゲイン補正を行い、不適切な露光による画質劣化が抑制された出力画像信号を得る。
【解決手段】被写体の輝度が変化すると、絞り値およびシャッタ速度が変更される。シャッタ速度は、電子シャッタの場合、直ちに変更される。一方、絞り値は、レンズとカメラボディ間の通信の遅延や、メカ的な遅延により数フレームに亘り駆動される。絞り駆動期間中は、絞り値がプログラム線図に従わないため、露出が適切にならず、画質が低下する。プログラム線図に従い適切に露光されたフレームと、絞り駆動期間中の、プログラム線図から外れ不適切な露光がなされたフレームについて、所定領域の輝度値の比から、補正係数Ｂを算出する。そして、不適切な露光がなされたフレームの画像信号に対して、補正係数Ｂを用いてゲイン補正を行い、不適切な露光による画質劣化が抑制された出力画像信号を得る。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像を撮像可能な撮像装置および撮像装置の制御方法に関し、特には、撮像画像に基づき絞り駆動を行い露光を自動制御する撮像装置および撮像装置の制御方法に関する。
【背景技術】
【０００２】
近年では、レンズ交換式で一眼レフタイプのデジタルカメラにおいて動画像を撮像可能とし、ライブビュー機能を実現している。一眼レフタイプのデジタルカメラ用の交換レンズには、絞り駆動を、交換レンズ内に絞り可変手段を設けて行う第１のタイプと、カメラボディから機械的な伝達機構を介して行う第２のタイプとがある。第１のタイプの交換レンズは、細かい段数で絞りが駆動可能とされ、露出条件の滑らかな変化が実現されている。第２のタイプの交換レンズは、絞りを滑らかに駆動制御することが難しい。
【０００３】
第２のタイプの交換レンズにおけるこの問題を解決するために、特許文献１には、駆動する絞り値の段数に制限を与えて同一の絞り値においてシャッタ速度制御を行い、絞り駆動の発生を抑制するようにした技術が提案されている。この特許文献１によれば、第２のタイプの交換レンズを用いた場合の露出条件を、第１のタイプの交換レンズに近い使用感で、被写体の明るさの変化に対して滑らかに変化させることが可能となる。
【０００４】
【特許文献１】特開２００２−２９０８２８号公報
【０００５】
一方、近年では、上述のレンズ交換式で一眼レフタイプのデジタルカメラに対し、従来からのＣＣＤに代わり、ＣＭＯＳイメージセンサを撮像素子として用いる例が増えてきている。なお、ＣＭＯＳは、Complementary Metal-Oxide Semiconductorの略称である。このＣＭＯＳイメージセンサは、ＣＣＤに比べ、消費電力が小さい、駆動電圧が低い、電荷読み出しの高速化が可能などの利点を有している。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、周知のように、カメラの自動露光制御は、レンズの絞り値、シャッタ速度およびＥＶ値の関係を示すプログラム線図に従い行われる。あるＥＶ値の被写体に対して、プログラム線図に従い、当該ＥＶ値に適合するように絞り駆動およびシャッタ速度の制御を行うことで、適切な露光が行われる。
【０００７】
一方、絞り駆動に係る絞り駆動期間は、カメラボディとレンズ間の通信の遅延や、絞り駆動自体のメカ的な遅延が発生するため、動画像の複数フレーム分に亘ることがある。シャッタ速度制御は、カメラボディ側において、撮像素子に対する電荷の蓄積時間を制御することで電子的に行うことが可能である。この場合、シャッタ速度制御に対して絞り駆動制御が遅延することになり、シャッタ速度と絞り値とがプログラム線図に乗らなくなる。これにより、適切な露光制御を行うことができず、撮像された動画像の品質が低下するという問題点があった。
【０００８】
例えば、上述の特許文献１の方法を用いた場合、絞り駆動時にシャッタ速度と絞り値とがプログラム線図に乗らなくなり、露光制御が適切に行われない状態が発生してしまう。これは、特に、撮像素子としてＣＭＯＳイメージセンサを用い、ローリング電子シャッタによりシャッタ制御を行う場合に顕著である。
【０００９】
この問題点について、図１１を用いて説明する。図１１は、動画像の撮影中における被写体の輝度（ＥＶ値）の変化に対応して、絞り値およびシャッタ速度をプログラム線図に従って制御する例を示す。
【００１０】
図１１において、右方向に時間が進行し、番号＃１〜＃６は、それぞれ対応するフレームを示す。図１１（ａ）は、被写体の輝度変化をフレーム単位で表す。図１１（ｂ）は、ローリング電子シャッタによる撮像素子の駆動の例を示し、縦方向は撮像素子のライン順を表す。斜線を付して示した部分は、電荷の蓄積期間をライン順に示す。１ラインの蓄積期間は、シャッタ速度に対応する。図１１（ｃ）は、絞りを示し、上側が絞り値が小さい開放状態である。すなわち、図１１（ｃ）は、絞りが絞る方向に１段階だけ駆動されたことを表している。図１１（ｄ）は、撮像素子に対する露光により得られたフレーム毎の画像および露光状態を概略的に示す。また、図１１（ｅ）は、撮像素子に対する露光に応じて最終的に表示や記録される画像データの例を、フレーム毎に示す。
【００１１】
撮像素子の駆動をローリング電子シャッタにより行うため、被写体の輝度変化に対して、フレーム遅延が発生する。図１１の例では、図１１（ａ）〜図１１（ｄ）に例示されるように、撮像素子において走査が開始されてから撮像画像が得られるまで、２フレーム分の遅延が生じている。
【００１２】
ここで、図１１（ａ）に例示されるように、フレーム＃２において被写体の輝度が大きく変化し、この変化に応じて、プログラム線図に従ってシャッタ速度と絞り値とを制御する場合について考える。輝度変化があったフレーム＃２で読み出された撮像信号に基づき、プログラム線図に従いシャッタ速度と絞り値とが算出され、算出された値に基づきシャッタ速度および絞り駆動の制御が行われる。
【００１３】
ローリング電子シャッタの場合、シャッタ速度は、直ちに反映される。図１１（ｂ）に例示されるように、時点Ａでは既に次のフレーム＃３の走査および読み出しが行われているので、その次のフレーム＃４から、シャッタ速度がプログラム線図に従った値に変更される。
【００１４】
一方、絞り駆動は、上述したように、通信やメカ的な要因による遅延があるため、制御が開始されてから目的の絞り値に到達するまでに、例えば数フレーム分を要する。図１１（ｃ）の例では、目的の絞り値に到達するまで、制御が開始された時点Ａから１．５フレーム分の時間を費やしており、プログラム線図に従った目的の絞り値が得られるフレームは、フレーム＃５となる。
【００１５】
そのため、絞り値が目的の値に到達するフレーム＃５までは、プログラム線図に従った露光制御が行われず、露光オーバー（または露光アンダー）の撮像画像となってしまう。これにより、撮像画像の画質が低下し、表示や記録を行う画像も露光オーバー（または露光アンダー）となってしまう問題点があった。
【００１６】
したがって、本発明の目的は、動画像の撮像時に、被写体の輝度変化に伴う露出変化を抑制できる撮像装置および撮像装置の制御方法を提供することにある。
【課題を解決するための手段】
【００１７】
本発明は、上述した課題を解決するために、撮像素子と、撮像素子に入射する光量を調節する絞り機構を駆動する駆動手段と、撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像手段と、撮像手段から出力されたフレーム画像信号の輝度成分を検出する輝度検出手段と、輝度検出手段でフレーム画像信号から検出された輝度成分と、輝度検出手段でフレーム画像信号の直前のフレーム画像信号から検出された輝度成分との間の変化に応じて絞り機構による調節を行うように、駆動手段を制御する制御手段と、直前のフレーム画像信号から検出された輝度成分と、輝度検出手段で駆動手段による絞り機構の駆動が開始した直後のフレーム画像信号から検出された輝度成分とを用いて、駆動手段が絞り機構を駆動する駆動期間を含むフレーム画像信号に対する輝度成分に対して、輝度成分と、直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正手段とを有することを特徴とする撮像装置である。
【００１８】
また、本発明は、撮像素子に入射する光量を調節する絞り機構を駆動する駆動ステップと、撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像ステップと、撮像ステップにより出力されたフレーム画像信号の輝度成分を検出する輝度検出ステップと、輝度検出ステップでフレーム画像信号から検出された輝度成分と、輝度検出ステップでフレーム画像信号の直前のフレーム画像信号から検出された輝度成分との間の変化に応じて絞り機構による調節を行うように、駆動ステップを制御する制御ステップと、直前のフレーム画像信号から検出された輝度成分と、輝度検出ステップで駆動ステップによる絞り機構の駆動が開始した直後のフレーム画像信号から検出された輝度成分とを用いて、駆動ステップが絞り機構を駆動する駆動期間を含むフレーム画像信号に対する輝度成分に対して、輝度成分と、直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正ステップとを有することを特徴とする撮像装置の制御方法である。
【発明の効果】
【００１９】
本発明は、動画像の撮像時に、被写体の輝度変化に伴う露出変化を抑制できる。
【発明を実施するための最良の形態】
【００２０】
＜第１の実施形態＞
以下、本発明の第１の実施形態を、図面を参照しながら説明する。図１は、本発明の第１の実施形態を適用可能なデジタル一眼レフカメラ１００の一例の構成を示す。全体制御・演算部１０９は、例えばＣＰＵ、ＲＯＭおよびＲＡＭを有し、ＲＯＭに予め記憶されたプログラムに従い、ＲＡＭをワークメモリとして用いてＣＰＵが動作し、このデジタル一眼レフカメラ１００の全体を制御する。ＲＯＭには、さらに、露出制御を行うためのプログラム線図が予め記憶されている。また、補正手段としての全体制御・演算部１０９は、プログラムに従い、撮影パラメータや画像データの補正処理の係数を演算する。
【００２１】
レンズ部１０１は、例えばカメラボディに対して交換可能に構成され、光学絞り機構を含み、入射された光を後述する撮像素子１０５に照射させる。駆動手段としてのレンズ駆動部１０２は、制御手段としての全体制御・演算部１０９の制御に従いレンズ部１０１が有する光学絞り機構（図示を省略する）を駆動することで、絞り調節を行う。レンズ駆動部１０２による光学絞り機構の駆動は、段階的になされる。さらに、レンズ駆動部１０２は、全体制御・演算部１０９の制御に従い、レンズ部１０１が有するズーム光学系および結像光学系（それぞれ図示を省略する）を駆動することで、ズーム制御やフォーカス制御を行う。
【００２２】
レンズ駆動部１０２は、例えばカメラボディ側に組み込まれ、レンズ部１０１の各機構に対して機械的に駆動力を伝達してこれらの制御を行う。これに限らず、レンズ駆動部１０２をレンズ部１０１側に内蔵させ、カメラボディ側と通信を行うことで、これらの制御を行うようにしてもよい。
【００２３】
シャッタ部１０３は、例えばメカニカルシャッタであって、撮影時において、全体制御・演算部１０９の制御によりシャッタ駆動部１０４に駆動されて撮像素子１０５を遮光する。シャッタ部１０３は、動画像の撮像時には、非遮光状態、すなわち跳ね上がった状態を維持するように、シャッタ駆動部に駆動される。撮像手段としての撮像素子１０５は、ＸＹアドレス型の走査方法を用いる素子を有し、被写体からの光束を受光することにより、その光量に応じて電荷を蓄積し、蓄積された電荷に基づき被写体の画像信号を生成する。本発明の第１の実施形態では、撮像素子１０５が有する素子としてＣＭＯＳイメージセンサを用いる。
【００２４】
画像信号処理部１０６は、撮像素子１０５より出力される画像信号に対してノイズ除去、増幅処理などを施し、さらにＡ／Ｄ変換を施してデジタル画像データとする。さらに、この画像データに対してγ補正、ホワイトバランス補正などの各種画像処理を施す。また、画像信号処理部１０６は、画像処理を施した画像データに対して、所定の方式により圧縮符号化処理を施すことができる。
【００２５】
なお、全体制御・演算部１０９は、画像信号処理部１０６に供給された画像信号に対して輝度検出を行い輝度成分を検出し、この輝度成分に基づき測光を行うことができる。また、全体制御・演算部１０９は、当該輝度成分に基づき画像の鮮鋭度を求め、合焦情報を取得することができる。
【００２６】
タイミング発生部１０７は、全体制御・演算部１０９の制御に従い、撮像素子１０５および画像信号処理部１０６に対するタイミング信号を生成する。撮像素子１０５は、このタイミング発生部１０７から供給されたタイミング信号に基づき駆動される。また、画像信号処理部１０６は、タイミング発生部１０７から供給されたタイミング信号に基づき、例えば撮像素子１０５から出力される画像信号に対して同期的に処理を行うことができる。
【００２７】
メモリ１０８は、画像信号処理部１０６から出力された圧縮若しくは非圧縮の出力画像データを一時的に記憶する。記録媒体制御インターフェイス（Ｉ／Ｆ）１１０は、記録媒体１１１に対するデータの記録および再生を制御する。例えば、記録媒体制御Ｉ／Ｆ１１０は、メモリ１０８から画像データを読み出し、記録媒体１１１に記録する。記録媒体１１１は、例えば、デジタル一眼レフカメラ１００に対して着脱可能な書き換え可能な不揮発性メモリである。
【００２８】
表示部１１５は、例えばＬＣＤといった表示デバイスとその駆動回路とからなり、画像信号処理部１０６から出力された出力画像データによる画像を表示デバイスに表示させる。メモリ１０８に記憶された画像データを読み出して表示デバイスに表示させてもよい。例えば、撮像素子１０５から所定間隔、例えばフレーム周期で連続的にフレーム画像信号を出力し、そのフレーム画像信号を画像信号処理部１０６で順次処理して表示部１１５に表示させることで、ライブビューが実現される。
【００２９】
外部Ｉ／Ｆ１１２は、外部の機器とデータ通信を行うためのインターフェイスである。デジタル一眼レフカメラ１００は、この外部Ｉ／Ｆ１１２を介して外部のコンピュータなどとデータ通信を行うことができる。
【００３０】
測光部１１３は、被写体の輝度を測定する。また、測距部１１４は、被写体までの距離を測定する。測光部１１３および測距部１１４の測定結果は、それぞれ全体制御・演算部１０９に供給される。静止画像の撮像時において、全体制御・演算部１０９は、測光部１１３から出力された輝度の測定結果に基づきＥＶ値を算出する。それと共に、全体制御・演算部１０９は、測距部１１４から出力された測距結果に基づき被写体の焦点状態を検出する。
【００３１】
次に、ＸＹアドレス型の撮像素子である撮像素子１０５の構成と走査方法について説明する。撮像素子１０５の走査は、先ず、画素毎またはライン毎に、蓄積された不要電荷を除去する走査（以下、リセット動作と称する）を実行する。リセット動作後、撮像素子１０５の受光に応じて、光電変換により画素毎に電荷が蓄積される。そして、画素毎またはライン毎に、信号電荷を読み出す走査を行うことで蓄積動作を終了する。このように、リセット走査と読み出し走査とを撮像素子の領域別に時間差で行う機能を、ローリング電子シャッタと称する。読み出し走査の開始タイミングを制御することで、シャッタ速度を設定することができる。
【００３２】
図２は、撮像素子１０５の一例の構成を示す。単位画素２０１において、フォトダイオード（ＰＤ）２０２、転送スイッチ２０３、電荷検出部（ＦＤ）２０４、アンプ２０５、選択スイッチ２０６およびリセットスイッチ２０７が設けられる。
【００３３】
ＰＤ２０２は、受光した光を電荷に変換する。転送スイッチ２０３は、転送パルスφＴＸによって、ＰＤ２０２で発生した電荷をＦＤ２０４に転送する。ＦＤ２０４は、ＰＤ２０２から転送された電荷を一時的に蓄積する。アンプ２０５は、ソースフォロアとして機能する増幅ＭＯＳアンプである。選択スイッチ２０６は、選択パルスφＳＥＬＶによって画素２０１を選択する。リセットスイッチ２０７は、リセットパルスφＲＥＳによってＦＤ２０４に蓄積された電荷を除去する。ＦＤ２０４、増幅ＭＯＳアンプ２０５および後述する定電流源２０９でフローティングディフュージョンアンプが構成される。
【００３４】
垂直方向に並んだ画素２０１、２０１、…それぞれの選択スイッチ２０６、２０６、…が信号出力線２０８に接続される。選択スイッチ２０６、２０６、…で選択された画素２０１、２０１、…に蓄積された電荷が電圧に変換され、信号出力線２０８を介して読み出し回路２１３に出力される。信号出力線２０８に対して、増幅ＭＯＳアンプ２０５の負荷となる定電流源２０９が接続される。
【００３５】
読み出し回路２１３から出力信号を選択する選択スイッチ２１０、２１０、…が、タイミング発生部１０７からのタイミング信号に基づき、水平走査回路２１４によって駆動される。また、垂直走査回路２１２は、タイミング発生部１０７から供給されるタイミング信号に基づき転送パルスφＴＸ、選択パルスφＳＥＬＶおよびリセットパルスφＲＥＳを出力する。これにより、垂直走査回路２１２は、画素２０１、２０１、…のそれぞれにおいて、スイッチ２０３、２０６および２０７を選択する。
【００３６】
なお、パルスφＴＸ、φＲＥＳおよびφＳＥＬＶが供給されるラインのそれぞれにおいて、垂直走査回路２１２によって走査選択されたｎ番目の走査ラインを、走査ラインφＴＸｎ、走査ラインφＲＥＳｎおよび走査ラインφＳＥＬＶｎとする。
【００３７】
図３は、ローリング電子シャッタ動作における駆動パルスと動作シーケンスの例を示す。なお、図３では、煩雑さを避けるため、垂直走査回路２１２によって走査選択されたｎ番目のラインからｎ＋３番目のラインに関して示している。
【００３８】
第ｎラインにおいて、先ず時刻ｔ４１から時刻ｔ４２の間、走査ラインφＲＥＳｎおよびφＴＸｎにリセットパルスφＲＥＳおよび転送パルスφＴＸをそれぞれ印加し、転送スイッチ２０３およびリセットスイッチ２０７をオンにする。これにより、第ｎラインの画素２０１、２０１、…のそれぞれにおいてリセット動作が行われ、ＰＤ２０２およびＦＤ２０４に蓄積されている不要電荷が除去される。
【００３９】
リセット動作が行われると、時刻ｔ４２で転送スイッチ２０３をオフとして、ＰＤ２０２に発生した光電荷がＦＤ２０４に蓄積される蓄積動作が開始される。次に、時刻ｔ４４において走査ラインφＴＸｎに転送パルスφＴＸを印加して転送スイッチ２０３をオンにし、ＰＤ２０２に蓄積された光電荷をＦＤ２０４に転送する転送動作を行う。転送スイッチ２０３がオフとされる時刻ｔ４２から、転送スイッチ２０３が再びオンとされる時刻ｔ４４までが、ＦＤ２０４に対する電荷の蓄積時間となる。
【００４０】
なお、リセットスイッチ２０７は、この転送動作に先んじてオフにする必要があり、図３の例では、時刻ｔ４２で転送スイッチ２０３をオフにするのと同時にリセットスイッチ２０７をオフにしている。
【００４１】
第ｎラインの転送動作の終了後、走査ラインφＳＥＬＶｎに選択パルスφＳＥＬＶが印加され、選択スイッチ２０６がオンにされる。これにより、ＦＤ２０４に蓄積された電荷が電圧に変換され、信号出力線２０８を介して読み出し回路２１３に出力される。読み出し回路２１３は、信号出力線２０８を介して供給された信号を一時的に保持する。
【００４２】
読み出し回路２１３で一時的に保持されたこの信号は、水平走査回路２１４により選択スイッチ２１０、２１０、…が制御されることで読み出され、時刻ｔ４６より、画素毎の信号として順次出力される。
【００４３】
時刻ｔ４４の転送開始から時刻ｔ４７の読み出し終了までの時間を、第ｎラインでの読み出し期間Ｔ４ｒｅａｄとし、時刻ｔ４１から時刻ｔ４３までの時間を、第ｎ＋１ラインでの待機期間Ｔ４ｗａｉｔとする。他のラインにおいても同様に、転送開始から読み出し終了までの時間が読み出し期間Ｔ４ｒｅａｄとなり、あるラインのリセット開始から次のラインのリセット開始までの時間が待機期間Ｔ４ｗａｉｔとなる。
【００４４】
このように、ローリング電子シャッタ動作では、撮像素子の垂直方向の位置に応じて電荷が蓄積されるタイミングが異なる。一方、それぞれの画素における電荷の蓄積に要する時間は、撮像素子の垂直方向の位置に関わらず等しくすることが可能である。
【００４５】
図４は、本発明に適用可能な、ライブビューや動画記録のための動画像撮像におけるプログラム線図の一例を示す。図４において、縦軸は絞り値、横軸はシャッタ速度（露出時間）、斜め線は輝度（ＥＶ値）を示す。絞り値は、下側に向けてＦナンバが小さくなり、シャッタ速度は右側に向けて高速になる。また、ＥＶ値は、左下から右上に向けて大きな値となる。
【００４６】
本第１の実施形態では、図４に例示されるように、駆動する絞り値の段数に制限を与え、同一の絞り値における露出制御は、ローリング電子シャッタによって行う。ローリング電子シャッタは、シャッタ速度のフレーム毎の変更や、細かい時間制御が可能であり、滑らかな露出制御が可能である。図４に「○（丸印）」から「●（黒丸印）」への矢印で示されるように、輝度の変化に対し、同一の絞り値においてシャッタ速度が設定された上限または下限に達したら、絞り値が次段に遷移され、ＥＶ値（輝度）が同一になるようにシャッタ速度が制御される。
【００４７】
＜第１の実施形態の処理について＞
図５および図６を用いて、本発明の第１の実施形態による処理について説明する。本第１の実施形態では、プログラム線図に従い適切に露光されたフレームの輝度成分と、絞り駆動期間中の、プログラム線図から外れ不適切に露光されたフレームの輝度成分との差が小さくなるように、不適切な露光がなされたフレームの画像信号を補正する。より具体的には、当該適切に露光されたフレームと、当該不適切に露光されたフレームとについて、所定領域内の輝度値の比から、補正係数Ｂを算出する。そして、不適切な露光がなされたフレームの画像信号に対して、補正係数Ｂを用いてゲイン補正を行い、不適切な露光による画質劣化が抑制された出力画像信号を得る。
【００４８】
図５は、本第１の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す。図５において、右方向に時間が進行し、番号＃１〜＃６は、それぞれ対応するフレームを示す。図５（ａ）は、被写体の輝度変化をフレーム単位で表す。
【００４９】
図５（ｂ）は、ローリング電子シャッタによる撮像素子１０５の駆動の例を示し、縦方向は撮像素子のライン順を表す。斜線を付して示した部分は、電荷の蓄積期間をライン順に示す。１ラインの蓄積期間は、シャッタ速度に対応する。図３を用いて説明したように撮像素子１０５が駆動され、この例では、最初のラインの走査が終了してから最後のラインの走査が終了するまで、１フレーム分の時間を要している。
【００５０】
図５（ｃ）は、絞りを示し、上側が絞り値が小さい開放状態である。すなわち、図５（ｃ）は、絞りが絞る方向に駆動され、絞り値が１段大きな値に遷移したことを表している。図５（ｄ）は、撮像素子に対する露光により得られたフレーム毎の画像信号および露光状態を概略的に示す。図５（ｅ）は、本第１の実施形態で算出された補正係数Ｂをフレーム毎に示す。また、図５（ｆ）は、図５（ｄ）に示されるフレーム毎の画像信号に対して補正係数Ｂによるゲイン補正がなされた結果の画像信号を概略的に示す。この図５（ｆ）に示される画像信号が、最終的に表示や記録に用いられる。
【００５１】
ここでは、図５（ａ）に例示されるように、フレーム＃１とフレーム＃２との間で輝度変化が生じ、フレーム＃１に対してフレーム＃２の画像が明るくなっているものとする。例えば、画像信号処理部１０６は、画像信号の輝度成分をフレーム毎に順次比較し、フレーム間での輝度変化を検出する。
【００５２】
この場合、例えば以下のように一連の制御がなされる。すなわち、この輝度変化は、例えば撮像素子１０５から画像信号処理部１０６に供給された画像信号の輝度成分に基づき全体制御・演算部１０９に検知される。全体制御・演算部１０９は、被写体の輝度変化が検知されると、現在のシャッタ速度、絞り値、プログラム線図などから、絞り値を次段に遷移させるか否かを判定する。若し、絞り値を遷移させると判定したら、レンズ駆動部１０２に対して、絞り値を変更させるような制御信号を出力する。
【００５３】
レンズ駆動部１０２は、供給された制御信号に応じて、絞り値が指示された値になるように光学絞り機構を駆動する。その結果、例えば図５（ｃ）に例示されるように、駆動が開始されてから所定の絞り値が得られるまで、１．５フレーム分の時間を要している。本第１の実施形態においては、絞り駆動は、例えばオープン制御で行われる。一例として、絞り駆動が開始されてから所定の絞り値が得られるまでの絞り駆動期間は、例えば第１の絞り値および第２の絞り値と、第１の絞り値から第２の絞り値へと絞り駆動を行う場合の絞り駆動期間とを対応付けたテーブルを参照して求められる。
【００５４】
一方、シャッタ速度に関しては、図５（ｂ）に例示されるように、フレーム＃２の読み出しの完了時には、既に次のフレーム＃３の読み出しが開始されている。そこで、全体制御・演算部１０９は、タイミング発生部１０７を制御して、その次のフレーム＃４からシャッタ速度が所定の値になるように、撮像素子１０５に対するタイミング信号を出力させる。撮像素子１０５では、このタイミング信号に応じて、フレーム＃４で直ちにシャッタ速度が変更される。
【００５５】
上述のような、輝度値の変化に対する絞り値およびシャッタ速度の制御の結果、図５（ｄ）に例示されるように、絞り値が変動している絞り駆動期間を含むフレームにおいては、絞り値およびシャッタ速度がプログラム線図に乗らず、適切な露出が行われない。図５（ｄ）の例では、実際に輝度変化が生じたフレーム＃２と、絞り値が変動している期間を含むフレーム＃３および＃４とで、露光オーバーとなっている。
【００５６】
そこで、本第１の実施形態では、図６に例示されるように、絞り値およびシャッタ速度がプログラム線図に乗り適切に露光された適露光フレームについて、所定領域の輝度値の平均値を求める。適露光フレームとしては、例えば輝度変化が検出されたフレーム＃２の直前のフレーム＃１を適用することができる。また、絞り駆動期間中の、絞り値およびシャッタ速度がプログラム線図に乗らず適切に露光されない不適露光フレームについて、所定領域の輝度値の平均値を求める。不適露光フレームとしては、例えば輝度変化が検出されたフレーム＃２の直後のフレーム＃３を適用することができる。そして、適露光フレームについて求められた第１の平均値と、不適露光フレームについて求められた第２の平均値との比から、補正係数Ｂを算出する。図６の例では、第２の平均値を第１の平均値で除した値の逆数を、補正係数Ｂとして用いている。
【００５７】
ここで、輝度値の平均値を求める所定領域は、例えば、図６の例のように、画面の中央部分に予め決められた領域として設定することが考えられる。これに限らず、当該所定領域を、現在のデジタル一眼レフカメラ１００に設定された測光モードに応じた領域に対応して設定してもよい。この場合には、部分測光、スポット測光など測光モードによって当該領域を変更するようにできる。さらには、単に画面全体を当該所定領域とすることも考えられる。
【００５８】
例えば、全体制御・演算部１０９は、撮像素子１０５から画像信号処理部１０６に供給された画像信号に基づき、補正係数Ｂを求める。この補正係数Ｂは、画像信号処理部１０６に渡される。画像信号処理部１０６は、この補正係数Ｂを、図５（ｅ）に例示されるように、撮像素子１０５から供給された、絞り駆動期間を含むフレーム（この例ではフレーム＃３および＃４）の画像信号に対して乗ずる。他のフレームの画像信号に対しては、補正係数を１とする。補正係数Ｂを画像信号処理部１０６に直接的に求めるようにしてもよい。一例として、この補正係数Ｂに基づき、撮像素子１０５から供給された画像信号に対する増幅処理のゲインを設定し、絞り駆動期間のフレームの輝度補正を行う。
【００５９】
そして、画像信号処理部１０６は、この補正係数Ｂが乗じられた画像信号に対し、Ａ／Ｄ変換や所定の画像処理を施して出力し、表示部１１５への表示や、記録媒体１１１への記録に供する。これにより、図５（ｆ）に例示されるように、表示部１１５に表示される画像や、記録媒体１１１に記録される画像は、輝度変化が発生したフレーム＃２の画像を除き、輝度の変化が抑制された画像となる。
【００６０】
なお、上述では、補正係数Ｂによる補正を、画像信号処理部１０６において、撮像素子１０５から供給された画像信号に対するゲインを設定することで行うように説明したが、これはこの例に限定されない。例えば、画像信号処理部１０６において、Ａ／Ｄ変換を行った後に、補正係数Ｂによる補正を行ってもよい。さらには、メモリ１０８に記憶された出力画像データに対して全体制御・演算部１０９が補正係数Ｂによる補正を行うことも考えられる。
【００６１】
また、上述では、補正係数Ｂを、該当フレームの所定領域における輝度値の平均値を用いて算出したが、これはこの例に限定されない。例えば、該当フレームの所定領域における輝度値の積分値を用いて、補正係数Ｂの算出を行ってもよい。
【００６２】
＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。絞り駆動期間は、本体とレンズが一体的とされ、共通したシステムで制御されているコンパクトデジタルカメラのような撮像装置では、正確なタイミングを知ることは容易である。一方、レンズの交換が可能なデジタル一眼レフカメラのような、レンズが別システムとされ、カメラボディとレンズとで通信を行いをレンズの制御を行う場合には、実際の絞り駆動期間のタイミングを正確に知ることは難しい。
【００６３】
図７は、本第２の実施形態によるデジタル一眼レフカメラ３００の一例の構成を示す。本第２の実施形態によるデジタル一眼レフカメラ３００は、図１に示した第１の実施形態によるデジタル一眼レフカメラ１００に対して、駆動検出手段および振動検出手段としての振動検出部１１６が追加されている。デジタル一眼レフカメラ３００の他の部分は、図１のデジタル一眼レフカメラ１００と同一の構成なので、共通する部分には同一の符号を付して、詳細な説明を省略する。また、撮像素子１０５の構成および駆動方法、プログラム線図についても、上述した第１の実施形態と共通であるので、ここでの説明を省略する。
【００６４】
なお、デジタル一眼レフカメラ３００は、レンズ交換が可能なタイプであって、レンズ部１０１とレンズ駆動部１０２とが交換レンズ側に内蔵されるものとする。そして、レンズ駆動部１０２と全体制御・演算部１０９とは、レンズマウント部における電気的な接触により通信を行うものとする。振動検出部１１６の設置位置は、デジタル一眼レフカメラ３００のボディ上であれば特に限定されないが、レンズ部１０１で発生する振動を検出容易な箇所、例えばレンズマウントの近傍などに設置すると、より好ましい。
【００６５】
振動検出部１１６は、例えば圧電素子などを振動センサとして用い、出力を画像信号処理部１０６に供給する。画像信号処理部１０６は、供給された振動センサ出力に基づき絞り駆動期間を検出する。
【００６６】
図８は、本第２の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す。図８において、右方向に時間が進行し、番号＃１〜＃６は、それぞれ対応するフレームを示す。図８（ａ）、図８（ｂ）、図８（ｄ）および図８（ｇ）は、上述した図５の図５（ａ）、図５（ｂ）、図５（ｃ）および図５（ｄ）にそれぞれ対応する。
【００６７】
すなわち、図８（ａ）は、被写体の輝度変化をフレーム単位で表す。図８（ｂ）は、ローリング電子シャッタによる撮像素子１０５の駆動の例を示す。図８（ｄ）は、絞りを示す。この図８の例では、測光結果に基づく全体制御・演算部１０９から発行される絞り駆動命令（図８（ｃ））に応じて、絞り駆動が開始される。例えばフレーム内の所定領域における測光結果に基づき絞り駆動を開始する場合、図８（ｃ）のように、フレーム内の全ての信号が揃わない時点に絞り駆動命令を発行できる。
【００６８】
図８（ｅ）は、振動検出部１１６による振動センサの出力の例を示す。絞り駆動命令により絞り駆動が開始されると、絞りを駆動する際に発生する振動が振動センサに検出される。例えば、絞り駆動命令が発行されると、所定の時間枠内で振動の検出が行われる。一例として、絞り駆動期間が５０ｍｓｅｃ程度として既知であれば、１００ｍｓｅｃの時間枠内で振動の検出が行われる。
【００６９】
振動センサの出力は、比較器（図示しない）で所定値±ａと比較される。全体制御・演算部１０９により絞り駆動命令が発行されていれば、振動センサの所定値±ａとの比較の結果に基づき、振動検出部１１６の出力信号の振幅が所定値±ａより大きいと判断される期間を、絞り駆動期間と判定する。図８（ｆ）は、このようにして振動センサ出力に基づき求められた補正タイミングの例を示す。撮像素子１０５から出力された画像信号のフレームにおいて、この補正タイミングを含むフレーム（この例では、フレーム＃３および＃４）が補正係数Ｂによる補正対象となる。
【００７０】
なお、補正係数Ｂの算出方法および算出された補正係数Ｂの適用方法は、上述した第１の実施形態と同一のため、ここでの説明を省略する。
【００７１】
上述のように、本第２の実施形態によれば、絞り駆動による振動を検出することによって、絞り駆動期間を直接的に知ることができる。したがって、フレームタイミングに同期した絞り制御を必要としないシステムを提供できる。
【００７２】
なお、本第２の実施形態では、絞り駆動期間の検出を、振動検出部１１６を用い、絞りを駆動する際に発生する振動を検出することで行うようにしているが、これはこの例に限定されるものではなく、他の方法を用いて絞り駆動期間を検出してもよい。例えば、絞り駆動の際に発生する音を検出して絞り駆動期間を検出することが考えられる。
【００７３】
＜第３の実施形態＞
次に、本発明の第３の実施形態について説明する。上述の第１の実施形態では、絞り駆動期間に係る不適露光フレームの補正に用いる補正係数Ｂを、該当フレームの所定領域における輝度値の平均値または積分値を用いて算出していた。これに対して、本第３の実施形態では、当該補正係数を、撮像素子１０５から出力される画像信号による画像の水平方向の射影に基づき求める。
【００７４】
なお、本第３の実施形態において、デジタル一眼レフカメラ１００や撮像素子１０５の構成、撮像素子１０５の駆動方法、プログラム線図は、上述の第１の実施形態と同一のものを適用可能なので、ここでの説明を省略する。
【００７５】
図９は、本第３の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す。なお、図９において、図９（ａ）〜図９（ｄ）および図９（ｆ）は、第１の実施形態で説明した図５（ａ）〜図５（ｄ）および図５（ｆ）と同一であるので、詳細な説明を省略する。
【００７６】
図１０を用いて、画像の水平方向の射影に基づき垂直方向ゲイン補正地Ｇ（ｖ）を求める一例の方法について説明する。フレーム＃２で輝度変化が生じたものとし、適露光フレームであるフレーム＃１の画像信号と、絞り駆動期間中で不適露光フレームとなっているフレーム＃３とで、各画像信号の水平方向の射影を算出する（図１０（ａ）および図１０（ｂ））。そして、フレーム＃１の画像信号の水平方向の射影と、フレーム＃３の画像信号の水平方向の射影との比を取り、垂直方向ゲイン補正値Ｇ（ｖ）を求める（図１０（ｃ））。すなわち、垂直方向ゲイン補正値Ｇ（ｖ）は、画像信号に対するライン毎の補正係数である。
【００７７】
例えば、画像信号処理部１０６は、撮像素子１０５から供給される画像信号について、画素毎の輝度値を各ラインについて累積し、当該画像信号の水平射影を求める。そして、輝度変化が検出され絞り駆動が開始されると、絞り駆動期間中の画像信号から求めた水平方向の射影と、絞り駆動が行われる前に画像信号から求めた水平方向の射影との比を算出する。そして、この比に基づき垂直方向ゲイン補正値Ｇ（ｖ）を求める（図９（ｅ））。この垂直方向ゲイン補正値Ｇ（ｖ）を、絞り駆動期間を含むフレーム（この例ではフレーム＃３および＃４）の画像信号に対して、垂直方向ゲイン補正値Ｇ（ｖ）を乗ずる。この場合には、当該フレームの画像信号の各ラインに対して、それぞれ対応する垂直方向ゲイン補正値Ｇ（ｖ）が画素毎に乗じられることになる。
【００７８】
そして、画像信号処理部１０６は、この垂直方向ゲイン補正値Ｇ（ｖ）が乗じられた画像信号に対し、Ａ／Ｄ変換や所定の画像処理を施して出力し、表示部１１５への表示や、記録媒体１１１への記録に供する。これにより、図９（ｆ）に例示されるように、表示部１１５に表示される画像や、記録媒体１１１に記録される画像は、輝度変化が発生したフレーム＃２の画像を除き、輝度の変化が抑制された画像となる。
【００７９】
本第３の実施形態では、絞り駆動期間のフレームの画像信号に対して、水平方向の射影に基づくゲイン補正を行う。これにより、絞り駆動期間のフレームの露出ずれを抑制することができると共に、露出ムラの補正の効果もあり、更なる高画質な動画像を得ることができる。
【００８０】
なお、上述では、絞り駆動期間に露出オーバーになる場合について説明したが、絞り駆動期間に露出アンダーになる場合についても、本発明の各実施形態は、同様に適用できることは勿論である。
【００８１】
さらに、上述では、撮像素子１０５としてＣＭＯＳイメージセンサを適用したが、本発明の各実施形態は、撮像素子１０５がＣＣＤの場合にも適用可能である。
【００８２】
さらにまた、上述の各実施形態では、補正係数Ｂまたは垂直ゲイン補正値Ｇ（ｖ）を、輝度変化が検出されたフレームの直前のフレームと、輝度変化が検出されたフレームの直後のフレームとに基づき求めている。そして、絞り駆動期間に含まれるフレームに対し、求められた補正係数Ｂまたは垂直ゲイン補正値Ｇ（ｖ）を、一律に用いて補正を行っている。これは、この例に限定されず、例えば、補正係数Ｂまたは垂直方向ゲイン補正値Ｇ（ｖ）を、絞り駆動期間に含まれる各フレームについて順次、求め、フレーム毎に補正を行うようにしてもよい。
【図面の簡単な説明】
【００８３】
【図１】本発明の第１の実施形態を適用可能なデジタル一眼レフカメラの一例の構成を示すブロック図である。
【図２】撮像素子の一例の構成を示す図である。
【図３】ローリング電子シャッタ動作における駆動パルスと動作シーケンスの例を示す図である。
【図４】本発明に適用可能な、ライブビューや動画記録のための動画像撮像における一例のプログラム線図を示す。
【図５】本発明の第１の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【図６】本発明の第１の実施形態による補正係数Ｂの算出方法を説明するための図である。
【図７】本発明の第２の実施形態に適用可能なるデジタル一眼レフカメラの一例の構成を示すブロック図である。
【図８】本発明の第２の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【図９】本発明の第３の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【図１０】本発明の第３の実施形態による垂直方向ゲイン補正地Ｇ（ｖ）を求める一例の方法について説明するための図である。
【図１１】従来技術の問題点を説明するための、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【符号の説明】
【００８４】
１００，３００ デジタル一眼レフカメラ
１０１ レンズ部
１０２ レンズ駆動部
１０５ 撮像素子
１０６ 画像信号処理部
１０７ タイミング発生部
１０８ メモリ
１０９ 全体制御・演算部
１１３ 測光部
１１４ 測距部
１１５ 表示部
１１６ 振動検出部
【技術分野】
【０００１】
本発明は、動画像を撮像可能な撮像装置および撮像装置の制御方法に関し、特には、撮像画像に基づき絞り駆動を行い露光を自動制御する撮像装置および撮像装置の制御方法に関する。
【背景技術】
【０００２】
近年では、レンズ交換式で一眼レフタイプのデジタルカメラにおいて動画像を撮像可能とし、ライブビュー機能を実現している。一眼レフタイプのデジタルカメラ用の交換レンズには、絞り駆動を、交換レンズ内に絞り可変手段を設けて行う第１のタイプと、カメラボディから機械的な伝達機構を介して行う第２のタイプとがある。第１のタイプの交換レンズは、細かい段数で絞りが駆動可能とされ、露出条件の滑らかな変化が実現されている。第２のタイプの交換レンズは、絞りを滑らかに駆動制御することが難しい。
【０００３】
第２のタイプの交換レンズにおけるこの問題を解決するために、特許文献１には、駆動する絞り値の段数に制限を与えて同一の絞り値においてシャッタ速度制御を行い、絞り駆動の発生を抑制するようにした技術が提案されている。この特許文献１によれば、第２のタイプの交換レンズを用いた場合の露出条件を、第１のタイプの交換レンズに近い使用感で、被写体の明るさの変化に対して滑らかに変化させることが可能となる。
【０００４】
【特許文献１】特開２００２−２９０８２８号公報
【０００５】
一方、近年では、上述のレンズ交換式で一眼レフタイプのデジタルカメラに対し、従来からのＣＣＤに代わり、ＣＭＯＳイメージセンサを撮像素子として用いる例が増えてきている。なお、ＣＭＯＳは、Complementary Metal-Oxide Semiconductorの略称である。このＣＭＯＳイメージセンサは、ＣＣＤに比べ、消費電力が小さい、駆動電圧が低い、電荷読み出しの高速化が可能などの利点を有している。
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、周知のように、カメラの自動露光制御は、レンズの絞り値、シャッタ速度およびＥＶ値の関係を示すプログラム線図に従い行われる。あるＥＶ値の被写体に対して、プログラム線図に従い、当該ＥＶ値に適合するように絞り駆動およびシャッタ速度の制御を行うことで、適切な露光が行われる。
【０００７】
一方、絞り駆動に係る絞り駆動期間は、カメラボディとレンズ間の通信の遅延や、絞り駆動自体のメカ的な遅延が発生するため、動画像の複数フレーム分に亘ることがある。シャッタ速度制御は、カメラボディ側において、撮像素子に対する電荷の蓄積時間を制御することで電子的に行うことが可能である。この場合、シャッタ速度制御に対して絞り駆動制御が遅延することになり、シャッタ速度と絞り値とがプログラム線図に乗らなくなる。これにより、適切な露光制御を行うことができず、撮像された動画像の品質が低下するという問題点があった。
【０００８】
例えば、上述の特許文献１の方法を用いた場合、絞り駆動時にシャッタ速度と絞り値とがプログラム線図に乗らなくなり、露光制御が適切に行われない状態が発生してしまう。これは、特に、撮像素子としてＣＭＯＳイメージセンサを用い、ローリング電子シャッタによりシャッタ制御を行う場合に顕著である。
【０００９】
この問題点について、図１１を用いて説明する。図１１は、動画像の撮影中における被写体の輝度（ＥＶ値）の変化に対応して、絞り値およびシャッタ速度をプログラム線図に従って制御する例を示す。
【００１０】
図１１において、右方向に時間が進行し、番号＃１〜＃６は、それぞれ対応するフレームを示す。図１１（ａ）は、被写体の輝度変化をフレーム単位で表す。図１１（ｂ）は、ローリング電子シャッタによる撮像素子の駆動の例を示し、縦方向は撮像素子のライン順を表す。斜線を付して示した部分は、電荷の蓄積期間をライン順に示す。１ラインの蓄積期間は、シャッタ速度に対応する。図１１（ｃ）は、絞りを示し、上側が絞り値が小さい開放状態である。すなわち、図１１（ｃ）は、絞りが絞る方向に１段階だけ駆動されたことを表している。図１１（ｄ）は、撮像素子に対する露光により得られたフレーム毎の画像および露光状態を概略的に示す。また、図１１（ｅ）は、撮像素子に対する露光に応じて最終的に表示や記録される画像データの例を、フレーム毎に示す。
【００１１】
撮像素子の駆動をローリング電子シャッタにより行うため、被写体の輝度変化に対して、フレーム遅延が発生する。図１１の例では、図１１（ａ）〜図１１（ｄ）に例示されるように、撮像素子において走査が開始されてから撮像画像が得られるまで、２フレーム分の遅延が生じている。
【００１２】
ここで、図１１（ａ）に例示されるように、フレーム＃２において被写体の輝度が大きく変化し、この変化に応じて、プログラム線図に従ってシャッタ速度と絞り値とを制御する場合について考える。輝度変化があったフレーム＃２で読み出された撮像信号に基づき、プログラム線図に従いシャッタ速度と絞り値とが算出され、算出された値に基づきシャッタ速度および絞り駆動の制御が行われる。
【００１３】
ローリング電子シャッタの場合、シャッタ速度は、直ちに反映される。図１１（ｂ）に例示されるように、時点Ａでは既に次のフレーム＃３の走査および読み出しが行われているので、その次のフレーム＃４から、シャッタ速度がプログラム線図に従った値に変更される。
【００１４】
一方、絞り駆動は、上述したように、通信やメカ的な要因による遅延があるため、制御が開始されてから目的の絞り値に到達するまでに、例えば数フレーム分を要する。図１１（ｃ）の例では、目的の絞り値に到達するまで、制御が開始された時点Ａから１．５フレーム分の時間を費やしており、プログラム線図に従った目的の絞り値が得られるフレームは、フレーム＃５となる。
【００１５】
そのため、絞り値が目的の値に到達するフレーム＃５までは、プログラム線図に従った露光制御が行われず、露光オーバー（または露光アンダー）の撮像画像となってしまう。これにより、撮像画像の画質が低下し、表示や記録を行う画像も露光オーバー（または露光アンダー）となってしまう問題点があった。
【００１６】
したがって、本発明の目的は、動画像の撮像時に、被写体の輝度変化に伴う露出変化を抑制できる撮像装置および撮像装置の制御方法を提供することにある。
【課題を解決するための手段】
【００１７】
本発明は、上述した課題を解決するために、撮像素子と、撮像素子に入射する光量を調節する絞り機構を駆動する駆動手段と、撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像手段と、撮像手段から出力されたフレーム画像信号の輝度成分を検出する輝度検出手段と、輝度検出手段でフレーム画像信号から検出された輝度成分と、輝度検出手段でフレーム画像信号の直前のフレーム画像信号から検出された輝度成分との間の変化に応じて絞り機構による調節を行うように、駆動手段を制御する制御手段と、直前のフレーム画像信号から検出された輝度成分と、輝度検出手段で駆動手段による絞り機構の駆動が開始した直後のフレーム画像信号から検出された輝度成分とを用いて、駆動手段が絞り機構を駆動する駆動期間を含むフレーム画像信号に対する輝度成分に対して、輝度成分と、直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正手段とを有することを特徴とする撮像装置である。
【００１８】
また、本発明は、撮像素子に入射する光量を調節する絞り機構を駆動する駆動ステップと、撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像ステップと、撮像ステップにより出力されたフレーム画像信号の輝度成分を検出する輝度検出ステップと、輝度検出ステップでフレーム画像信号から検出された輝度成分と、輝度検出ステップでフレーム画像信号の直前のフレーム画像信号から検出された輝度成分との間の変化に応じて絞り機構による調節を行うように、駆動ステップを制御する制御ステップと、直前のフレーム画像信号から検出された輝度成分と、輝度検出ステップで駆動ステップによる絞り機構の駆動が開始した直後のフレーム画像信号から検出された輝度成分とを用いて、駆動ステップが絞り機構を駆動する駆動期間を含むフレーム画像信号に対する輝度成分に対して、輝度成分と、直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正ステップとを有することを特徴とする撮像装置の制御方法である。
【発明の効果】
【００１９】
本発明は、動画像の撮像時に、被写体の輝度変化に伴う露出変化を抑制できる。
【発明を実施するための最良の形態】
【００２０】
＜第１の実施形態＞
以下、本発明の第１の実施形態を、図面を参照しながら説明する。図１は、本発明の第１の実施形態を適用可能なデジタル一眼レフカメラ１００の一例の構成を示す。全体制御・演算部１０９は、例えばＣＰＵ、ＲＯＭおよびＲＡＭを有し、ＲＯＭに予め記憶されたプログラムに従い、ＲＡＭをワークメモリとして用いてＣＰＵが動作し、このデジタル一眼レフカメラ１００の全体を制御する。ＲＯＭには、さらに、露出制御を行うためのプログラム線図が予め記憶されている。また、補正手段としての全体制御・演算部１０９は、プログラムに従い、撮影パラメータや画像データの補正処理の係数を演算する。
【００２１】
レンズ部１０１は、例えばカメラボディに対して交換可能に構成され、光学絞り機構を含み、入射された光を後述する撮像素子１０５に照射させる。駆動手段としてのレンズ駆動部１０２は、制御手段としての全体制御・演算部１０９の制御に従いレンズ部１０１が有する光学絞り機構（図示を省略する）を駆動することで、絞り調節を行う。レンズ駆動部１０２による光学絞り機構の駆動は、段階的になされる。さらに、レンズ駆動部１０２は、全体制御・演算部１０９の制御に従い、レンズ部１０１が有するズーム光学系および結像光学系（それぞれ図示を省略する）を駆動することで、ズーム制御やフォーカス制御を行う。
【００２２】
レンズ駆動部１０２は、例えばカメラボディ側に組み込まれ、レンズ部１０１の各機構に対して機械的に駆動力を伝達してこれらの制御を行う。これに限らず、レンズ駆動部１０２をレンズ部１０１側に内蔵させ、カメラボディ側と通信を行うことで、これらの制御を行うようにしてもよい。
【００２３】
シャッタ部１０３は、例えばメカニカルシャッタであって、撮影時において、全体制御・演算部１０９の制御によりシャッタ駆動部１０４に駆動されて撮像素子１０５を遮光する。シャッタ部１０３は、動画像の撮像時には、非遮光状態、すなわち跳ね上がった状態を維持するように、シャッタ駆動部に駆動される。撮像手段としての撮像素子１０５は、ＸＹアドレス型の走査方法を用いる素子を有し、被写体からの光束を受光することにより、その光量に応じて電荷を蓄積し、蓄積された電荷に基づき被写体の画像信号を生成する。本発明の第１の実施形態では、撮像素子１０５が有する素子としてＣＭＯＳイメージセンサを用いる。
【００２４】
画像信号処理部１０６は、撮像素子１０５より出力される画像信号に対してノイズ除去、増幅処理などを施し、さらにＡ／Ｄ変換を施してデジタル画像データとする。さらに、この画像データに対してγ補正、ホワイトバランス補正などの各種画像処理を施す。また、画像信号処理部１０６は、画像処理を施した画像データに対して、所定の方式により圧縮符号化処理を施すことができる。
【００２５】
なお、全体制御・演算部１０９は、画像信号処理部１０６に供給された画像信号に対して輝度検出を行い輝度成分を検出し、この輝度成分に基づき測光を行うことができる。また、全体制御・演算部１０９は、当該輝度成分に基づき画像の鮮鋭度を求め、合焦情報を取得することができる。
【００２６】
タイミング発生部１０７は、全体制御・演算部１０９の制御に従い、撮像素子１０５および画像信号処理部１０６に対するタイミング信号を生成する。撮像素子１０５は、このタイミング発生部１０７から供給されたタイミング信号に基づき駆動される。また、画像信号処理部１０６は、タイミング発生部１０７から供給されたタイミング信号に基づき、例えば撮像素子１０５から出力される画像信号に対して同期的に処理を行うことができる。
【００２７】
メモリ１０８は、画像信号処理部１０６から出力された圧縮若しくは非圧縮の出力画像データを一時的に記憶する。記録媒体制御インターフェイス（Ｉ／Ｆ）１１０は、記録媒体１１１に対するデータの記録および再生を制御する。例えば、記録媒体制御Ｉ／Ｆ１１０は、メモリ１０８から画像データを読み出し、記録媒体１１１に記録する。記録媒体１１１は、例えば、デジタル一眼レフカメラ１００に対して着脱可能な書き換え可能な不揮発性メモリである。
【００２８】
表示部１１５は、例えばＬＣＤといった表示デバイスとその駆動回路とからなり、画像信号処理部１０６から出力された出力画像データによる画像を表示デバイスに表示させる。メモリ１０８に記憶された画像データを読み出して表示デバイスに表示させてもよい。例えば、撮像素子１０５から所定間隔、例えばフレーム周期で連続的にフレーム画像信号を出力し、そのフレーム画像信号を画像信号処理部１０６で順次処理して表示部１１５に表示させることで、ライブビューが実現される。
【００２９】
外部Ｉ／Ｆ１１２は、外部の機器とデータ通信を行うためのインターフェイスである。デジタル一眼レフカメラ１００は、この外部Ｉ／Ｆ１１２を介して外部のコンピュータなどとデータ通信を行うことができる。
【００３０】
測光部１１３は、被写体の輝度を測定する。また、測距部１１４は、被写体までの距離を測定する。測光部１１３および測距部１１４の測定結果は、それぞれ全体制御・演算部１０９に供給される。静止画像の撮像時において、全体制御・演算部１０９は、測光部１１３から出力された輝度の測定結果に基づきＥＶ値を算出する。それと共に、全体制御・演算部１０９は、測距部１１４から出力された測距結果に基づき被写体の焦点状態を検出する。
【００３１】
次に、ＸＹアドレス型の撮像素子である撮像素子１０５の構成と走査方法について説明する。撮像素子１０５の走査は、先ず、画素毎またはライン毎に、蓄積された不要電荷を除去する走査（以下、リセット動作と称する）を実行する。リセット動作後、撮像素子１０５の受光に応じて、光電変換により画素毎に電荷が蓄積される。そして、画素毎またはライン毎に、信号電荷を読み出す走査を行うことで蓄積動作を終了する。このように、リセット走査と読み出し走査とを撮像素子の領域別に時間差で行う機能を、ローリング電子シャッタと称する。読み出し走査の開始タイミングを制御することで、シャッタ速度を設定することができる。
【００３２】
図２は、撮像素子１０５の一例の構成を示す。単位画素２０１において、フォトダイオード（ＰＤ）２０２、転送スイッチ２０３、電荷検出部（ＦＤ）２０４、アンプ２０５、選択スイッチ２０６およびリセットスイッチ２０７が設けられる。
【００３３】
ＰＤ２０２は、受光した光を電荷に変換する。転送スイッチ２０３は、転送パルスφＴＸによって、ＰＤ２０２で発生した電荷をＦＤ２０４に転送する。ＦＤ２０４は、ＰＤ２０２から転送された電荷を一時的に蓄積する。アンプ２０５は、ソースフォロアとして機能する増幅ＭＯＳアンプである。選択スイッチ２０６は、選択パルスφＳＥＬＶによって画素２０１を選択する。リセットスイッチ２０７は、リセットパルスφＲＥＳによってＦＤ２０４に蓄積された電荷を除去する。ＦＤ２０４、増幅ＭＯＳアンプ２０５および後述する定電流源２０９でフローティングディフュージョンアンプが構成される。
【００３４】
垂直方向に並んだ画素２０１、２０１、…それぞれの選択スイッチ２０６、２０６、…が信号出力線２０８に接続される。選択スイッチ２０６、２０６、…で選択された画素２０１、２０１、…に蓄積された電荷が電圧に変換され、信号出力線２０８を介して読み出し回路２１３に出力される。信号出力線２０８に対して、増幅ＭＯＳアンプ２０５の負荷となる定電流源２０９が接続される。
【００３５】
読み出し回路２１３から出力信号を選択する選択スイッチ２１０、２１０、…が、タイミング発生部１０７からのタイミング信号に基づき、水平走査回路２１４によって駆動される。また、垂直走査回路２１２は、タイミング発生部１０７から供給されるタイミング信号に基づき転送パルスφＴＸ、選択パルスφＳＥＬＶおよびリセットパルスφＲＥＳを出力する。これにより、垂直走査回路２１２は、画素２０１、２０１、…のそれぞれにおいて、スイッチ２０３、２０６および２０７を選択する。
【００３６】
なお、パルスφＴＸ、φＲＥＳおよびφＳＥＬＶが供給されるラインのそれぞれにおいて、垂直走査回路２１２によって走査選択されたｎ番目の走査ラインを、走査ラインφＴＸｎ、走査ラインφＲＥＳｎおよび走査ラインφＳＥＬＶｎとする。
【００３７】
図３は、ローリング電子シャッタ動作における駆動パルスと動作シーケンスの例を示す。なお、図３では、煩雑さを避けるため、垂直走査回路２１２によって走査選択されたｎ番目のラインからｎ＋３番目のラインに関して示している。
【００３８】
第ｎラインにおいて、先ず時刻ｔ４１から時刻ｔ４２の間、走査ラインφＲＥＳｎおよびφＴＸｎにリセットパルスφＲＥＳおよび転送パルスφＴＸをそれぞれ印加し、転送スイッチ２０３およびリセットスイッチ２０７をオンにする。これにより、第ｎラインの画素２０１、２０１、…のそれぞれにおいてリセット動作が行われ、ＰＤ２０２およびＦＤ２０４に蓄積されている不要電荷が除去される。
【００３９】
リセット動作が行われると、時刻ｔ４２で転送スイッチ２０３をオフとして、ＰＤ２０２に発生した光電荷がＦＤ２０４に蓄積される蓄積動作が開始される。次に、時刻ｔ４４において走査ラインφＴＸｎに転送パルスφＴＸを印加して転送スイッチ２０３をオンにし、ＰＤ２０２に蓄積された光電荷をＦＤ２０４に転送する転送動作を行う。転送スイッチ２０３がオフとされる時刻ｔ４２から、転送スイッチ２０３が再びオンとされる時刻ｔ４４までが、ＦＤ２０４に対する電荷の蓄積時間となる。
【００４０】
なお、リセットスイッチ２０７は、この転送動作に先んじてオフにする必要があり、図３の例では、時刻ｔ４２で転送スイッチ２０３をオフにするのと同時にリセットスイッチ２０７をオフにしている。
【００４１】
第ｎラインの転送動作の終了後、走査ラインφＳＥＬＶｎに選択パルスφＳＥＬＶが印加され、選択スイッチ２０６がオンにされる。これにより、ＦＤ２０４に蓄積された電荷が電圧に変換され、信号出力線２０８を介して読み出し回路２１３に出力される。読み出し回路２１３は、信号出力線２０８を介して供給された信号を一時的に保持する。
【００４２】
読み出し回路２１３で一時的に保持されたこの信号は、水平走査回路２１４により選択スイッチ２１０、２１０、…が制御されることで読み出され、時刻ｔ４６より、画素毎の信号として順次出力される。
【００４３】
時刻ｔ４４の転送開始から時刻ｔ４７の読み出し終了までの時間を、第ｎラインでの読み出し期間Ｔ４ｒｅａｄとし、時刻ｔ４１から時刻ｔ４３までの時間を、第ｎ＋１ラインでの待機期間Ｔ４ｗａｉｔとする。他のラインにおいても同様に、転送開始から読み出し終了までの時間が読み出し期間Ｔ４ｒｅａｄとなり、あるラインのリセット開始から次のラインのリセット開始までの時間が待機期間Ｔ４ｗａｉｔとなる。
【００４４】
このように、ローリング電子シャッタ動作では、撮像素子の垂直方向の位置に応じて電荷が蓄積されるタイミングが異なる。一方、それぞれの画素における電荷の蓄積に要する時間は、撮像素子の垂直方向の位置に関わらず等しくすることが可能である。
【００４５】
図４は、本発明に適用可能な、ライブビューや動画記録のための動画像撮像におけるプログラム線図の一例を示す。図４において、縦軸は絞り値、横軸はシャッタ速度（露出時間）、斜め線は輝度（ＥＶ値）を示す。絞り値は、下側に向けてＦナンバが小さくなり、シャッタ速度は右側に向けて高速になる。また、ＥＶ値は、左下から右上に向けて大きな値となる。
【００４６】
本第１の実施形態では、図４に例示されるように、駆動する絞り値の段数に制限を与え、同一の絞り値における露出制御は、ローリング電子シャッタによって行う。ローリング電子シャッタは、シャッタ速度のフレーム毎の変更や、細かい時間制御が可能であり、滑らかな露出制御が可能である。図４に「○（丸印）」から「●（黒丸印）」への矢印で示されるように、輝度の変化に対し、同一の絞り値においてシャッタ速度が設定された上限または下限に達したら、絞り値が次段に遷移され、ＥＶ値（輝度）が同一になるようにシャッタ速度が制御される。
【００４７】
＜第１の実施形態の処理について＞
図５および図６を用いて、本発明の第１の実施形態による処理について説明する。本第１の実施形態では、プログラム線図に従い適切に露光されたフレームの輝度成分と、絞り駆動期間中の、プログラム線図から外れ不適切に露光されたフレームの輝度成分との差が小さくなるように、不適切な露光がなされたフレームの画像信号を補正する。より具体的には、当該適切に露光されたフレームと、当該不適切に露光されたフレームとについて、所定領域内の輝度値の比から、補正係数Ｂを算出する。そして、不適切な露光がなされたフレームの画像信号に対して、補正係数Ｂを用いてゲイン補正を行い、不適切な露光による画質劣化が抑制された出力画像信号を得る。
【００４８】
図５は、本第１の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す。図５において、右方向に時間が進行し、番号＃１〜＃６は、それぞれ対応するフレームを示す。図５（ａ）は、被写体の輝度変化をフレーム単位で表す。
【００４９】
図５（ｂ）は、ローリング電子シャッタによる撮像素子１０５の駆動の例を示し、縦方向は撮像素子のライン順を表す。斜線を付して示した部分は、電荷の蓄積期間をライン順に示す。１ラインの蓄積期間は、シャッタ速度に対応する。図３を用いて説明したように撮像素子１０５が駆動され、この例では、最初のラインの走査が終了してから最後のラインの走査が終了するまで、１フレーム分の時間を要している。
【００５０】
図５（ｃ）は、絞りを示し、上側が絞り値が小さい開放状態である。すなわち、図５（ｃ）は、絞りが絞る方向に駆動され、絞り値が１段大きな値に遷移したことを表している。図５（ｄ）は、撮像素子に対する露光により得られたフレーム毎の画像信号および露光状態を概略的に示す。図５（ｅ）は、本第１の実施形態で算出された補正係数Ｂをフレーム毎に示す。また、図５（ｆ）は、図５（ｄ）に示されるフレーム毎の画像信号に対して補正係数Ｂによるゲイン補正がなされた結果の画像信号を概略的に示す。この図５（ｆ）に示される画像信号が、最終的に表示や記録に用いられる。
【００５１】
ここでは、図５（ａ）に例示されるように、フレーム＃１とフレーム＃２との間で輝度変化が生じ、フレーム＃１に対してフレーム＃２の画像が明るくなっているものとする。例えば、画像信号処理部１０６は、画像信号の輝度成分をフレーム毎に順次比較し、フレーム間での輝度変化を検出する。
【００５２】
この場合、例えば以下のように一連の制御がなされる。すなわち、この輝度変化は、例えば撮像素子１０５から画像信号処理部１０６に供給された画像信号の輝度成分に基づき全体制御・演算部１０９に検知される。全体制御・演算部１０９は、被写体の輝度変化が検知されると、現在のシャッタ速度、絞り値、プログラム線図などから、絞り値を次段に遷移させるか否かを判定する。若し、絞り値を遷移させると判定したら、レンズ駆動部１０２に対して、絞り値を変更させるような制御信号を出力する。
【００５３】
レンズ駆動部１０２は、供給された制御信号に応じて、絞り値が指示された値になるように光学絞り機構を駆動する。その結果、例えば図５（ｃ）に例示されるように、駆動が開始されてから所定の絞り値が得られるまで、１．５フレーム分の時間を要している。本第１の実施形態においては、絞り駆動は、例えばオープン制御で行われる。一例として、絞り駆動が開始されてから所定の絞り値が得られるまでの絞り駆動期間は、例えば第１の絞り値および第２の絞り値と、第１の絞り値から第２の絞り値へと絞り駆動を行う場合の絞り駆動期間とを対応付けたテーブルを参照して求められる。
【００５４】
一方、シャッタ速度に関しては、図５（ｂ）に例示されるように、フレーム＃２の読み出しの完了時には、既に次のフレーム＃３の読み出しが開始されている。そこで、全体制御・演算部１０９は、タイミング発生部１０７を制御して、その次のフレーム＃４からシャッタ速度が所定の値になるように、撮像素子１０５に対するタイミング信号を出力させる。撮像素子１０５では、このタイミング信号に応じて、フレーム＃４で直ちにシャッタ速度が変更される。
【００５５】
上述のような、輝度値の変化に対する絞り値およびシャッタ速度の制御の結果、図５（ｄ）に例示されるように、絞り値が変動している絞り駆動期間を含むフレームにおいては、絞り値およびシャッタ速度がプログラム線図に乗らず、適切な露出が行われない。図５（ｄ）の例では、実際に輝度変化が生じたフレーム＃２と、絞り値が変動している期間を含むフレーム＃３および＃４とで、露光オーバーとなっている。
【００５６】
そこで、本第１の実施形態では、図６に例示されるように、絞り値およびシャッタ速度がプログラム線図に乗り適切に露光された適露光フレームについて、所定領域の輝度値の平均値を求める。適露光フレームとしては、例えば輝度変化が検出されたフレーム＃２の直前のフレーム＃１を適用することができる。また、絞り駆動期間中の、絞り値およびシャッタ速度がプログラム線図に乗らず適切に露光されない不適露光フレームについて、所定領域の輝度値の平均値を求める。不適露光フレームとしては、例えば輝度変化が検出されたフレーム＃２の直後のフレーム＃３を適用することができる。そして、適露光フレームについて求められた第１の平均値と、不適露光フレームについて求められた第２の平均値との比から、補正係数Ｂを算出する。図６の例では、第２の平均値を第１の平均値で除した値の逆数を、補正係数Ｂとして用いている。
【００５７】
ここで、輝度値の平均値を求める所定領域は、例えば、図６の例のように、画面の中央部分に予め決められた領域として設定することが考えられる。これに限らず、当該所定領域を、現在のデジタル一眼レフカメラ１００に設定された測光モードに応じた領域に対応して設定してもよい。この場合には、部分測光、スポット測光など測光モードによって当該領域を変更するようにできる。さらには、単に画面全体を当該所定領域とすることも考えられる。
【００５８】
例えば、全体制御・演算部１０９は、撮像素子１０５から画像信号処理部１０６に供給された画像信号に基づき、補正係数Ｂを求める。この補正係数Ｂは、画像信号処理部１０６に渡される。画像信号処理部１０６は、この補正係数Ｂを、図５（ｅ）に例示されるように、撮像素子１０５から供給された、絞り駆動期間を含むフレーム（この例ではフレーム＃３および＃４）の画像信号に対して乗ずる。他のフレームの画像信号に対しては、補正係数を１とする。補正係数Ｂを画像信号処理部１０６に直接的に求めるようにしてもよい。一例として、この補正係数Ｂに基づき、撮像素子１０５から供給された画像信号に対する増幅処理のゲインを設定し、絞り駆動期間のフレームの輝度補正を行う。
【００５９】
そして、画像信号処理部１０６は、この補正係数Ｂが乗じられた画像信号に対し、Ａ／Ｄ変換や所定の画像処理を施して出力し、表示部１１５への表示や、記録媒体１１１への記録に供する。これにより、図５（ｆ）に例示されるように、表示部１１５に表示される画像や、記録媒体１１１に記録される画像は、輝度変化が発生したフレーム＃２の画像を除き、輝度の変化が抑制された画像となる。
【００６０】
なお、上述では、補正係数Ｂによる補正を、画像信号処理部１０６において、撮像素子１０５から供給された画像信号に対するゲインを設定することで行うように説明したが、これはこの例に限定されない。例えば、画像信号処理部１０６において、Ａ／Ｄ変換を行った後に、補正係数Ｂによる補正を行ってもよい。さらには、メモリ１０８に記憶された出力画像データに対して全体制御・演算部１０９が補正係数Ｂによる補正を行うことも考えられる。
【００６１】
また、上述では、補正係数Ｂを、該当フレームの所定領域における輝度値の平均値を用いて算出したが、これはこの例に限定されない。例えば、該当フレームの所定領域における輝度値の積分値を用いて、補正係数Ｂの算出を行ってもよい。
【００６２】
＜第２の実施形態＞
次に、本発明の第２の実施形態について説明する。絞り駆動期間は、本体とレンズが一体的とされ、共通したシステムで制御されているコンパクトデジタルカメラのような撮像装置では、正確なタイミングを知ることは容易である。一方、レンズの交換が可能なデジタル一眼レフカメラのような、レンズが別システムとされ、カメラボディとレンズとで通信を行いをレンズの制御を行う場合には、実際の絞り駆動期間のタイミングを正確に知ることは難しい。
【００６３】
図７は、本第２の実施形態によるデジタル一眼レフカメラ３００の一例の構成を示す。本第２の実施形態によるデジタル一眼レフカメラ３００は、図１に示した第１の実施形態によるデジタル一眼レフカメラ１００に対して、駆動検出手段および振動検出手段としての振動検出部１１６が追加されている。デジタル一眼レフカメラ３００の他の部分は、図１のデジタル一眼レフカメラ１００と同一の構成なので、共通する部分には同一の符号を付して、詳細な説明を省略する。また、撮像素子１０５の構成および駆動方法、プログラム線図についても、上述した第１の実施形態と共通であるので、ここでの説明を省略する。
【００６４】
なお、デジタル一眼レフカメラ３００は、レンズ交換が可能なタイプであって、レンズ部１０１とレンズ駆動部１０２とが交換レンズ側に内蔵されるものとする。そして、レンズ駆動部１０２と全体制御・演算部１０９とは、レンズマウント部における電気的な接触により通信を行うものとする。振動検出部１１６の設置位置は、デジタル一眼レフカメラ３００のボディ上であれば特に限定されないが、レンズ部１０１で発生する振動を検出容易な箇所、例えばレンズマウントの近傍などに設置すると、より好ましい。
【００６５】
振動検出部１１６は、例えば圧電素子などを振動センサとして用い、出力を画像信号処理部１０６に供給する。画像信号処理部１０６は、供給された振動センサ出力に基づき絞り駆動期間を検出する。
【００６６】
図８は、本第２の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す。図８において、右方向に時間が進行し、番号＃１〜＃６は、それぞれ対応するフレームを示す。図８（ａ）、図８（ｂ）、図８（ｄ）および図８（ｇ）は、上述した図５の図５（ａ）、図５（ｂ）、図５（ｃ）および図５（ｄ）にそれぞれ対応する。
【００６７】
すなわち、図８（ａ）は、被写体の輝度変化をフレーム単位で表す。図８（ｂ）は、ローリング電子シャッタによる撮像素子１０５の駆動の例を示す。図８（ｄ）は、絞りを示す。この図８の例では、測光結果に基づく全体制御・演算部１０９から発行される絞り駆動命令（図８（ｃ））に応じて、絞り駆動が開始される。例えばフレーム内の所定領域における測光結果に基づき絞り駆動を開始する場合、図８（ｃ）のように、フレーム内の全ての信号が揃わない時点に絞り駆動命令を発行できる。
【００６８】
図８（ｅ）は、振動検出部１１６による振動センサの出力の例を示す。絞り駆動命令により絞り駆動が開始されると、絞りを駆動する際に発生する振動が振動センサに検出される。例えば、絞り駆動命令が発行されると、所定の時間枠内で振動の検出が行われる。一例として、絞り駆動期間が５０ｍｓｅｃ程度として既知であれば、１００ｍｓｅｃの時間枠内で振動の検出が行われる。
【００６９】
振動センサの出力は、比較器（図示しない）で所定値±ａと比較される。全体制御・演算部１０９により絞り駆動命令が発行されていれば、振動センサの所定値±ａとの比較の結果に基づき、振動検出部１１６の出力信号の振幅が所定値±ａより大きいと判断される期間を、絞り駆動期間と判定する。図８（ｆ）は、このようにして振動センサ出力に基づき求められた補正タイミングの例を示す。撮像素子１０５から出力された画像信号のフレームにおいて、この補正タイミングを含むフレーム（この例では、フレーム＃３および＃４）が補正係数Ｂによる補正対象となる。
【００７０】
なお、補正係数Ｂの算出方法および算出された補正係数Ｂの適用方法は、上述した第１の実施形態と同一のため、ここでの説明を省略する。
【００７１】
上述のように、本第２の実施形態によれば、絞り駆動による振動を検出することによって、絞り駆動期間を直接的に知ることができる。したがって、フレームタイミングに同期した絞り制御を必要としないシステムを提供できる。
【００７２】
なお、本第２の実施形態では、絞り駆動期間の検出を、振動検出部１１６を用い、絞りを駆動する際に発生する振動を検出することで行うようにしているが、これはこの例に限定されるものではなく、他の方法を用いて絞り駆動期間を検出してもよい。例えば、絞り駆動の際に発生する音を検出して絞り駆動期間を検出することが考えられる。
【００７３】
＜第３の実施形態＞
次に、本発明の第３の実施形態について説明する。上述の第１の実施形態では、絞り駆動期間に係る不適露光フレームの補正に用いる補正係数Ｂを、該当フレームの所定領域における輝度値の平均値または積分値を用いて算出していた。これに対して、本第３の実施形態では、当該補正係数を、撮像素子１０５から出力される画像信号による画像の水平方向の射影に基づき求める。
【００７４】
なお、本第３の実施形態において、デジタル一眼レフカメラ１００や撮像素子１０５の構成、撮像素子１０５の駆動方法、プログラム線図は、上述の第１の実施形態と同一のものを適用可能なので、ここでの説明を省略する。
【００７５】
図９は、本第３の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す。なお、図９において、図９（ａ）〜図９（ｄ）および図９（ｆ）は、第１の実施形態で説明した図５（ａ）〜図５（ｄ）および図５（ｆ）と同一であるので、詳細な説明を省略する。
【００７６】
図１０を用いて、画像の水平方向の射影に基づき垂直方向ゲイン補正地Ｇ（ｖ）を求める一例の方法について説明する。フレーム＃２で輝度変化が生じたものとし、適露光フレームであるフレーム＃１の画像信号と、絞り駆動期間中で不適露光フレームとなっているフレーム＃３とで、各画像信号の水平方向の射影を算出する（図１０（ａ）および図１０（ｂ））。そして、フレーム＃１の画像信号の水平方向の射影と、フレーム＃３の画像信号の水平方向の射影との比を取り、垂直方向ゲイン補正値Ｇ（ｖ）を求める（図１０（ｃ））。すなわち、垂直方向ゲイン補正値Ｇ（ｖ）は、画像信号に対するライン毎の補正係数である。
【００７７】
例えば、画像信号処理部１０６は、撮像素子１０５から供給される画像信号について、画素毎の輝度値を各ラインについて累積し、当該画像信号の水平射影を求める。そして、輝度変化が検出され絞り駆動が開始されると、絞り駆動期間中の画像信号から求めた水平方向の射影と、絞り駆動が行われる前に画像信号から求めた水平方向の射影との比を算出する。そして、この比に基づき垂直方向ゲイン補正値Ｇ（ｖ）を求める（図９（ｅ））。この垂直方向ゲイン補正値Ｇ（ｖ）を、絞り駆動期間を含むフレーム（この例ではフレーム＃３および＃４）の画像信号に対して、垂直方向ゲイン補正値Ｇ（ｖ）を乗ずる。この場合には、当該フレームの画像信号の各ラインに対して、それぞれ対応する垂直方向ゲイン補正値Ｇ（ｖ）が画素毎に乗じられることになる。
【００７８】
そして、画像信号処理部１０６は、この垂直方向ゲイン補正値Ｇ（ｖ）が乗じられた画像信号に対し、Ａ／Ｄ変換や所定の画像処理を施して出力し、表示部１１５への表示や、記録媒体１１１への記録に供する。これにより、図９（ｆ）に例示されるように、表示部１１５に表示される画像や、記録媒体１１１に記録される画像は、輝度変化が発生したフレーム＃２の画像を除き、輝度の変化が抑制された画像となる。
【００７９】
本第３の実施形態では、絞り駆動期間のフレームの画像信号に対して、水平方向の射影に基づくゲイン補正を行う。これにより、絞り駆動期間のフレームの露出ずれを抑制することができると共に、露出ムラの補正の効果もあり、更なる高画質な動画像を得ることができる。
【００８０】
なお、上述では、絞り駆動期間に露出オーバーになる場合について説明したが、絞り駆動期間に露出アンダーになる場合についても、本発明の各実施形態は、同様に適用できることは勿論である。
【００８１】
さらに、上述では、撮像素子１０５としてＣＭＯＳイメージセンサを適用したが、本発明の各実施形態は、撮像素子１０５がＣＣＤの場合にも適用可能である。
【００８２】
さらにまた、上述の各実施形態では、補正係数Ｂまたは垂直ゲイン補正値Ｇ（ｖ）を、輝度変化が検出されたフレームの直前のフレームと、輝度変化が検出されたフレームの直後のフレームとに基づき求めている。そして、絞り駆動期間に含まれるフレームに対し、求められた補正係数Ｂまたは垂直ゲイン補正値Ｇ（ｖ）を、一律に用いて補正を行っている。これは、この例に限定されず、例えば、補正係数Ｂまたは垂直方向ゲイン補正値Ｇ（ｖ）を、絞り駆動期間に含まれる各フレームについて順次、求め、フレーム毎に補正を行うようにしてもよい。
【図面の簡単な説明】
【００８３】
【図１】本発明の第１の実施形態を適用可能なデジタル一眼レフカメラの一例の構成を示すブロック図である。
【図２】撮像素子の一例の構成を示す図である。
【図３】ローリング電子シャッタ動作における駆動パルスと動作シーケンスの例を示す図である。
【図４】本発明に適用可能な、ライブビューや動画記録のための動画像撮像における一例のプログラム線図を示す。
【図５】本発明の第１の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【図６】本発明の第１の実施形態による補正係数Ｂの算出方法を説明するための図である。
【図７】本発明の第２の実施形態に適用可能なるデジタル一眼レフカメラの一例の構成を示すブロック図である。
【図８】本発明の第２の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【図９】本発明の第３の実施形態による、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【図１０】本発明の第３の実施形態による垂直方向ゲイン補正地Ｇ（ｖ）を求める一例の方法について説明するための図である。
【図１１】従来技術の問題点を説明するための、動画像の撮影中に被写体の輝度が変化して絞り値が次段に遷移した場合の一例の動作を示す図である。
【符号の説明】
【００８４】
１００，３００ デジタル一眼レフカメラ
１０１ レンズ部
１０２ レンズ駆動部
１０５ 撮像素子
１０６ 画像信号処理部
１０７ タイミング発生部
１０８ メモリ
１０９ 全体制御・演算部
１１３ 測光部
１１４ 測距部
１１５ 表示部
１１６ 振動検出部
【特許請求の範囲】
【請求項１】
撮像素子と、
前記撮像素子に入射する光量を調節する絞り機構を駆動する駆動手段と、
前記撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像手段と、
前記撮像手段から出力された前記フレーム画像信号の輝度成分を検出する輝度検出手段と、
前記輝度検出手段で前記フレーム画像信号から検出された輝度成分と、前記輝度検出手段で該フレーム画像信号の直前の前記フレーム画像信号から検出された輝度成分との間の変化に応じて前記絞り機構による調節を行うように、前記駆動手段を制御する制御手段と、
前記直前のフレーム画像信号から検出された輝度成分と、前記輝度検出手段で前記駆動手段による前記絞り機構の駆動が開始した直後の前記フレーム画像信号から検出された輝度成分とを用いて、前記駆動手段が前記絞り機構を駆動する駆動期間を含む前記フレーム画像信号に対する輝度成分に対して、該輝度成分と、前記直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正手段と
を有する
ことを特徴とする撮像装置。
【請求項２】
前記補正手段は、前記フレーム画像信号の所定領域内での、前記直前のフレーム画像信号から検出された輝度成分と、前記直後のフレーム画像信号から検出された輝度成分とを用いて前記補正を行う
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記補正手段は、前記直前のフレーム画像信号から検出された輝度成分の水平射影と、前記直後のフレーム画像信号から検出された輝度成分の水平射影とを用いて前記補正を行う
ことを特徴とする請求項１に記載の撮像装置。
【請求項４】
第１の絞り値および第２の絞り値と、該第１の絞り値から該第２の絞り値へと絞り駆動を行う場合の絞り駆動期間とを対応付けたテーブルをさらに有し、
前記補正手段は、前記駆動手段が前記絞り機構を駆動する前記駆動期間を、前記テーブルを参照することで取得する
ことを特徴とする請求項１乃至請求項３の何れか１項に記載の撮像装置。
【請求項５】
前記駆動手段による前記絞り機構の駆動を検出する駆動検出手段をさらに有し、
前記補正手段は、前記駆動手段が前記絞り機構を駆動する前記駆動期間を、前記駆動検出手段による検出の結果に基づき判定する
ことを特徴とする請求項１乃至請求項３の何れか１項に記載の撮像装置。
【請求項６】
前記駆動検出手段は、前記絞り機構の駆動に伴い発生する振動を検出する振動検出手段である
ことを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記撮像素子は、ローリング電子シャッタを用いて露出時間を制御する
ことを特徴とする請求項１乃至請求項６の何れか１項に記載の撮像装置。
【請求項８】
前記制御手段は、
輝度の変化に対し、同一の絞り値で前記撮像素子のシャッタ速度が設定された上限または下限に達したら、該絞り値が次段に遷移され、同一の該輝度に該シャッタ速度が設定されるプログラム線図に従い、前記シャッタ速度および前記駆動手段を制御する
ことを特徴とする請求項１乃至請求項７の何れか１項に記載の撮像装置。
【請求項９】
前記補正手段は、前記直前のフレーム画像信号から検出された輝度成分と、前記直後のフレーム画像信号から検出された輝度成分との比に基づき前記補正を行う
ことを特徴とする請求項１乃至請求項８の何れか１項に記載の撮像装置。
【請求項１０】
撮像素子に入射する光量を調節する絞り機構を駆動する駆動ステップと、
前記撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像ステップと、
前記撮像ステップにより出力された前記フレーム画像信号の輝度成分を検出する輝度検出ステップと、
前記輝度検出ステップで前記フレーム画像信号から検出された輝度成分と、前記輝度検出ステップで該フレーム画像信号の直前の前記フレーム画像信号から検出された輝度成分との間の変化に応じて前記絞り機構による調節を行うように、前記駆動ステップを制御する制御ステップと、
前記直前のフレーム画像信号から検出された輝度成分と、前記輝度検出ステップで前記駆動ステップによる前記絞り機構の駆動が開始した直後の前記フレーム画像信号から検出された輝度成分とを用いて、前記駆動ステップが前記絞り機構を駆動する駆動期間を含む前記フレーム画像信号に対する輝度成分に対して、該輝度成分と、前記直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正ステップと
を有する
ことを特徴とする撮像装置の制御方法。
【請求項１】
撮像素子と、
前記撮像素子に入射する光量を調節する絞り機構を駆動する駆動手段と、
前記撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像手段と、
前記撮像手段から出力された前記フレーム画像信号の輝度成分を検出する輝度検出手段と、
前記輝度検出手段で前記フレーム画像信号から検出された輝度成分と、前記輝度検出手段で該フレーム画像信号の直前の前記フレーム画像信号から検出された輝度成分との間の変化に応じて前記絞り機構による調節を行うように、前記駆動手段を制御する制御手段と、
前記直前のフレーム画像信号から検出された輝度成分と、前記輝度検出手段で前記駆動手段による前記絞り機構の駆動が開始した直後の前記フレーム画像信号から検出された輝度成分とを用いて、前記駆動手段が前記絞り機構を駆動する駆動期間を含む前記フレーム画像信号に対する輝度成分に対して、該輝度成分と、前記直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正手段と
を有する
ことを特徴とする撮像装置。
【請求項２】
前記補正手段は、前記フレーム画像信号の所定領域内での、前記直前のフレーム画像信号から検出された輝度成分と、前記直後のフレーム画像信号から検出された輝度成分とを用いて前記補正を行う
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記補正手段は、前記直前のフレーム画像信号から検出された輝度成分の水平射影と、前記直後のフレーム画像信号から検出された輝度成分の水平射影とを用いて前記補正を行う
ことを特徴とする請求項１に記載の撮像装置。
【請求項４】
第１の絞り値および第２の絞り値と、該第１の絞り値から該第２の絞り値へと絞り駆動を行う場合の絞り駆動期間とを対応付けたテーブルをさらに有し、
前記補正手段は、前記駆動手段が前記絞り機構を駆動する前記駆動期間を、前記テーブルを参照することで取得する
ことを特徴とする請求項１乃至請求項３の何れか１項に記載の撮像装置。
【請求項５】
前記駆動手段による前記絞り機構の駆動を検出する駆動検出手段をさらに有し、
前記補正手段は、前記駆動手段が前記絞り機構を駆動する前記駆動期間を、前記駆動検出手段による検出の結果に基づき判定する
ことを特徴とする請求項１乃至請求項３の何れか１項に記載の撮像装置。
【請求項６】
前記駆動検出手段は、前記絞り機構の駆動に伴い発生する振動を検出する振動検出手段である
ことを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記撮像素子は、ローリング電子シャッタを用いて露出時間を制御する
ことを特徴とする請求項１乃至請求項６の何れか１項に記載の撮像装置。
【請求項８】
前記制御手段は、
輝度の変化に対し、同一の絞り値で前記撮像素子のシャッタ速度が設定された上限または下限に達したら、該絞り値が次段に遷移され、同一の該輝度に該シャッタ速度が設定されるプログラム線図に従い、前記シャッタ速度および前記駆動手段を制御する
ことを特徴とする請求項１乃至請求項７の何れか１項に記載の撮像装置。
【請求項９】
前記補正手段は、前記直前のフレーム画像信号から検出された輝度成分と、前記直後のフレーム画像信号から検出された輝度成分との比に基づき前記補正を行う
ことを特徴とする請求項１乃至請求項８の何れか１項に記載の撮像装置。
【請求項１０】
撮像素子に入射する光量を調節する絞り機構を駆動する駆動ステップと、
前記撮像素子から所定間隔で連続的にフレーム画像信号を読み出して出力する撮像ステップと、
前記撮像ステップにより出力された前記フレーム画像信号の輝度成分を検出する輝度検出ステップと、
前記輝度検出ステップで前記フレーム画像信号から検出された輝度成分と、前記輝度検出ステップで該フレーム画像信号の直前の前記フレーム画像信号から検出された輝度成分との間の変化に応じて前記絞り機構による調節を行うように、前記駆動ステップを制御する制御ステップと、
前記直前のフレーム画像信号から検出された輝度成分と、前記輝度検出ステップで前記駆動ステップによる前記絞り機構の駆動が開始した直後の前記フレーム画像信号から検出された輝度成分とを用いて、前記駆動ステップが前記絞り機構を駆動する駆動期間を含む前記フレーム画像信号に対する輝度成分に対して、該輝度成分と、前記直前のフレーム画像から検出された輝度成分との差が小さくなるように補正を行う補正ステップと
を有する
ことを特徴とする撮像装置の制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１０−７４３１３（Ｐ２０１０−７４３１３Ａ）
【公開日】平成２２年４月２日（２０１０．４．２）
【国際特許分類】
【出願番号】特願２００８−２３７１８５（Ｐ２００８−２３７１８５）
【出願日】平成２０年９月１６日（２００８．９．１６）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２２年４月２日（２０１０．４．２）
【国際特許分類】
【出願日】平成２０年９月１６日（２００８．９．１６）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]