撮影装置およびライブビュー表示方法
【課題】低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示できる撮影装置およびライブビュー表示方法を提供する。
【解決手段】被写体の光学像から画像データを生成する撮像部（１０２、１０５、１１０および１３１等）と、被写体を照明する照明部（１０６および１１０等）と、被写体の映像を表示する電子ファインダ（１１０、１３２、１３３、１４１、１４３および１４４等）と、照明された被写体の光学像から撮像部が生成した画像データに含まれる色情報を解析する色情報解析部（１２１、１２４および１２３等）と、照明部が駆動されていない際に被写体の光学像から生成したスルー画データの色情報を画像データの色情報で補正する色情報補正部（１２３等）と、を備え、電子ファインダに色情報が補正されたスルー画データ（第２画像データ）を再生する。
【解決手段】被写体の光学像から画像データを生成する撮像部（１０２、１０５、１１０および１３１等）と、被写体を照明する照明部（１０６および１１０等）と、被写体の映像を表示する電子ファインダ（１１０、１３２、１３３、１４１、１４３および１４４等）と、照明された被写体の光学像から撮像部が生成した画像データに含まれる色情報を解析する色情報解析部（１２１、１２４および１２３等）と、照明部が駆動されていない際に被写体の光学像から生成したスルー画データの色情報を画像データの色情報で補正する色情報補正部（１２３等）と、を備え、電子ファインダに色情報が補正されたスルー画データ（第２画像データ）を再生する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影装置およびライブビュー表示方法に関し、特に撮像素子で生成された画像データを略リアルタイムに再生する電子ファインダを備えた撮影装置およびライブビュー表示方法に関する。
【背景技術】
【０００２】
近年のデジタルスチルカメラやデジタルビデオカメラ（以下、両者を合わせて単にデジタルカメラという）では、撮影範囲をレンズを介して覗き見る一般的なファインダの代わりに、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）アレイなどの撮像素子で取得した電子画像を略リアルタイムに液晶画面等に表示する、いわゆる電子ファインダが採用されている。
【０００３】
また、例えば以下に示す特許文献１には、遠隔操作用の監視モニタにリアルタイム画像と３次元シミュレーションによって得られたＣＧ（Ｃｏｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ）画像とを重畳して表示する技術が開示されている。
【０００４】
【特許文献１】特開２００３−２７１９９３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ここで、例えば夜間撮影や暗部撮影などの低照度環境下では、デジタルカメラの撮像素子に入射する光の量が明るい場所での撮影時と比較して小さい。このため、デジタルカメラの電子ファインダに表示される略リアルタイムの映像（以下、ライブビュー映像という）は、ほぼ白黒に近いものとなってしまう。これは、光量が少なすぎるために撮像素子で得られた画像信号から色情報を取得できないことに起因している。
【０００６】
このため、低照度環境下での撮影では、電子ファインダに表示されるライブビュー映像と実際の被写体との色彩が大きく異なってしまい、ユーザにリアルな被写体の映像を表示することができないという問題が存在する。
【０００７】
そこで本発明は、上記の問題に鑑みてなされたものであり、低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示できる撮影装置およびライブビュー表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
かかる目的を達成するために、本発明による撮影装置は、撮像範囲中の被写体の光学像から画像データを生成する撮像部と、前記被写体を照明する照明部と、前記撮像部で生成された前記被写体の画像データを再生する電子ファインダと、を備えた撮影装置であって、前記照明部によって照明された前記被写体の光学像から前記撮像部が生成した第１画像データに含まれる第１色情報を解析する色情報解析部と、前記照明部が駆動されていない際に前記撮像部が前記被写体の光学像から生成した第２画像データの第２色情報を前記第１色情報で補正する色情報補正部と、を備え、前記電子ファインダが、前記第２色情報が補正された前記第２画像データを再生することを特徴としている。
【０００９】
上記した本発明による撮影装置は、前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別部を備え、前記色情報解析部が、前記被写体識別部によって識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、前記色情報補正部が、前記被写体識別部によって識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴としている。
【００１０】
上記した本発明による撮影装置は、前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを管理するカメラ撮影モード管理部を備え、前記照明部および前記撮像部が、前記カメラ撮影モード管理部が前記カメラ撮影モードをオンにした際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１１】
上記した本発明による撮影装置は、前記撮像部の向きの変化を検出する姿勢検出部を備え、前記照明部および前記撮像部が、前記姿勢検出部が前記撮像部の向きの変化を検出した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１２】
上記した本発明による撮影装置は、前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、前記光学系が、前記撮像部が前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴としている。
【００１３】
上記した本発明による撮影装置は、前記撮像部に入射する光学像の画角を変更可能な光学系を備え、前記照明部および前記撮像部が、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１４】
上記した本発明による撮影装置は、前記撮像部に入射する光を集光する光学系と、前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、前記オートフォーカス部のオン／オフを切り替える切替部と、を備え、前記照明部および前記撮像部が、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１５】
上記した本発明による撮影装置は、前記第２画像データ中の被写体が変化したか否かを判定する変化判定部を備え、前記照明部および前記撮像部が、前記第２画像データ中の被写体が変化したと前記変化判定部が判定した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１６】
上記した本発明による撮影装置は、前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理部を備え、前記照明部および前記撮像部が、前記フラッシュモード管理部が前記フラッシュモードをオンにしている場合、前記第１画像データを生成することを特徴としている。
【００１７】
また、本発明によるライブビュー表示方法は、撮像部と照明部と電子ファインダとを備えた撮影装置の前記電子ファインダに前記撮像部の撮像範囲に含まれる被写体の映像を表示するライブビュー表示方法であって、前記照明部を駆動しつつ前記撮像部を駆動することで照明された前記被写体の光学像から第１画像データを生成する第１撮像ステップと、前記第１画像データに含まれる第１色情報を解析する色情報解析ステップと、前記照明部が駆動されていない際に前記撮像部を駆動することで前記被写体の光学像から第２画像データを生成する第２撮像ステップと、前記第２画像データの第２色情報を前記第１色情報で補正する色情報補正ステップと、前記第２色情報が補正された前記第２画像データを前記電子ファインダに再生する再生ステップと、を含むことを特徴としている。
【００１８】
上記した本発明によるライブビュー表示方法は、前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別ステップを含み、前記色情報解析ステップが、前記被写体識別ステップにおいて識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、前記色情報補正ステップが、前記被写体識別ステップにおいて識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴としている。
【００１９】
上記した本発明によるライブビュー表示方法は、前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを切り替えるカメラ撮影モード管理ステップを含み、前記第１撮像ステップが、前記カメラ撮影モード管理ステップにおいて前記カメラ撮影モードがオンに切り替えられた際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２０】
上記した本発明によるライブビュー表示方法は、前記撮像部の向きの変化を検出する姿勢検出ステップを含み、前記第１撮像ステップが、前記姿勢検出ステップにおいて前記撮像部の向きの変化が検出された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２１】
上記した本発明によるライブビュー表示方法は、前記撮影装置が、前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、前記第１撮像ステップが、前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴としている。
【００２２】
上記した本発明によるライブビュー表示方法は、前記撮影装置が、前記撮像部に入射する光学像の画角を変更可能な光学系を備え、前記第１撮像ステップが、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２３】
上記した本発明によるライブビュー表示方法は、前記撮影装置が、前記撮像部に入射する光を集光する光学系と、前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、前記オートフォーカス部のオン／オフを切り替える切替部と、を備え、前記第１撮像ステップが、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２４】
上記した本発明によるライブビュー表示方法は、前記第２画像データ中の被写体が変化したか否かを判定する変化判定ステップを含み、前記第１撮像ステップが、前記変化判定ステップにおいて前記第２画像データ中の被写体が変化したと判定された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２５】
上記した本発明によるライブビュー表示方法は、前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理ステップを含み、前記第１撮像ステップが、前記フラッシュモード管理ステップにおいて前記フラッシュモードがオンに管理されている場合、前記第１画像データを生成することを特徴としている。
【発明の効果】
【００２６】
本発明によれば、被写体の色を再現するのには十分でない信号強度の第２画像データの第２色情報が被写体の色を再現するのに十分な信号強度の第１画像データの第１色情報でカラー補正されるため、低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示することが可能な撮影装置およびライブビュー表示方法を実現することが可能となる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明を実施するための最良の形態を図面と共に詳細に説明する。なお、以下の説明において、各図は本発明の内容を理解でき得る程度に形状、大きさ、および位置関係を概略的に示してあるに過ぎず、従って、本発明は各図で例示された形状、大きさ、および位置関係のみに限定されるものではない。
【００２８】
＜実施の形態１＞
以下、本発明の実施の形態１による撮影装置について、図面を用いて詳細に説明する。本実施の形態では、その撮影装置として、いわゆるデジタルスチルカメラやデジタルビデオカメラを例に挙げるが、本発明はこの例に限定されるものではなく、例えばカメラ付き携帯電話機やカメラ付きモバイルＰＣ（パーソナルコンピュータ）など、電子ファインダまたはそれと同等の機能を備えた各種電子機器に本実施の形態１を適用することが可能である。
【００２９】
本実施の形態で例示する撮影装置１は、後述するように、例えば、撮像範囲中の被写体の光学像から画像データを生成する撮像部と、被写体を照明する照明部と、被写体の映像を表示する電子ファインダと、を備え、さらに、照明部によって照明された被写体の光学像から撮像部が生成した第１画像データに含まれる第１色情報を解析する色情報解析部と、照明部が駆動されていない際に撮像部が被写体の光学像から生成した第２画像データの第２色情報を第１色情報で補正する色情報補正部と、を備える。撮影装置１の電子ファインダには、第２色情報が補正された第２画像データが再生される。
【００３０】
また、撮影装置１は、外部装置との間で無線または有線によるデータ通信を行う通信部を備える。通信部から送信された画像データは、外部装置によって受信される。外部装置としては、例えば、パーソナルコンピュータやＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）等の表示機能を備えた各種情報処理装置、プリンタやデジタル複合機等の印刷エンジンを備えた画像処理装置、および、フラッシュメモリ（登録商標）や外付けＨＤ（ハードディスク）等の各種ストレージを適用することが可能である。
【００３１】
ここで、本実施の形態１による撮影装置１の概略内部構成例を、図面を用いて詳細に説明する。図１は、撮影装置１の概略内部構成例を示すブロック図である。図２は、撮影装置１のカメラ撮影モード時の概略動作を示すフローチャートである。図３は、図２における疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【００３２】
図１に示すように、撮影装置１は、１つ以上のレンズ１０１よりなる光学系（以下、説明の都合上、光学系をレンズ１０１とする）、撮像素子１０２、アクチュエータ駆動回路１０３、アクチュエータ１０４、撮像回路１０５、フラッシュ１０６、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０７と、手ブレ補正用ジャイロセンサ１０８と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１０および１２０、Ａ／Ｄ変換回路１３１、ＦＩＦＯメモリ１３２、フレームメモリ（ＳＤＲＡＭ）１３３、記録バッファ１３４、記録媒体インタフェース（Ｉ／Ｆ）１３５、記録媒体１３６、ＴＦＴ液晶駆動回路１４１、ビデオ出力回路１４２、バックライトユニット１４３、ＴＦＴ液晶パネル１４４、キーマトリクス１５０、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）表示回路１６１、ＬＣＤパネル１６２、電池１７１、バックアップ電源１７２、電源回路１７３、ならびに、電池状態検出回路１７４を備える。
【００３３】
上記において、撮像素子１０２、撮像回路１０５、ＣＰＵ１１０およびＡ／Ｄ変換回路１３１を含む構成は、撮像範囲中の被写体の光学像から画像データ（スルー画データを含む）を生成する撮像部として機能する。また、フラッシュ１０６およびＣＰＵ１１０を含む構成は、被写体を照明する照明部として機能する。ＣＰＵ１１０、ＦＩＦＯメモリ１３２、フレームメモリ１３３、ＴＦＴ液晶駆動回路１４１、バックライトユニット１４３およびＴＦＴ液晶パネル１４４を含む構成は、被写体の映像を表示する電子ファインダとして機能する。さらに、ＣＰＵ１２０における画像認識機能１２１、被写体識別機能１２４および色情報解析・再現機能１２３を含む構成は、照明部によって照明された被写体の光学像から撮像部が生成した画像データ（第１画像データ）に含まれる色情報（第１色情報）を解析する色情報解析部として機能する。さらにまた、ＣＰＵ１２０における色情報解析・再現機能１２３を含む構成は、照明部が駆動されていない際に撮像部が被写体の光学像から生成したスルー画データ（第２画像データ）の色情報（第２色情報）を画像データ（第１画像データ）の色情報（第１色情報）で補正する色情報補正部として機能する。そこで、電子ファインダは、色情報（第２色情報）が補正されたスルー画データ（第２画像データ）を再生してユーザに表示する。
【００３４】
具体的には、レンズ１０１は、撮像素子１０２の受光面に光学的な被写体像を結像する。撮像素子１０２は、レンズ１０１によって受光面に結像される光学的な被写体像を電気信号に変換する光電変換処理を行うことで、電気的な信号を生成する。この撮像素子１０２には、高速読み出しが可能な固体撮像素子、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）、またはその他の各種撮像素子を適用することができる。
【００３５】
撮像回路１０５は、撮像素子１０２の各光電変換素子に蓄積された電荷に応じた電気信号を画像信号として読み出し、この画像信号に垂直同期信号および水平同期信号等を組み合わせる。なお、読み出し直後の画像信号は、アナログ信号である。撮像回路１０５は、読み出した画像信号に対して各種アナログ信号処理を実行し、処理後の画像信号をＡ／Ｄ変換回路１３１に入力する。Ａ／Ｄ変換回路１３１は、撮像回路１０５から出力されたアナログの画像信号に対してＡ／Ｄ変換処理を実行する。これにより、アナログの画像信号がデジタルの画像データに変換される。
【００３６】
Ａ／Ｄ変換回路１３１から出力された画像データは、ＣＰＵ１２０、フレームメモリ１３３、ＦＩＦＯ（Ｆｉｒｓｔ−Ｉｎ Ｆｉｒｓｔ−Ｏｕｔ）メモリ１３２または記録バッファ１３４に適宜入力される。Ａ／Ｄ変換回路１３１、ＣＰＵ１２０、フレームメモリ１３３、ＦＩＦＯメモリ１３２および記録バッファ１３４は、例えば内部バス１３０を介して相互に接続されている。
【００３７】
フレームメモリ１３３は、ＣＰＵ１２０によってデジタル信号処理された画像データ（この画像データに関する各種データ等を含んでもよい）をフレームごとに一時的に記憶する。このフレームメモリ１３３には、例えばＳＤＲＡＭ（Ｓｙｎｃｈｒｏｎｏｕｓ ＤＲＡＭ）等の半導体記憶素子等を適用することができる。
【００３８】
ＣＰＵ１２０は、主に、画像データや各種データを取り扱う信号処理制御を実行する複数の集積回路により構成され、Ａ／Ｄ変換回路１３１から入力されたデジタルの画像データに対して各種デジタル信号処理を実行する。即ち、ＣＰＵ１２０は、フレームメモリ１３３に一時的に記憶されている画像データに対し、各種信号処理を施す１つ以上の機能を実現する。この機能には、例えば、画像認識機能１２１、画像圧縮伸長機能１２２、色情報解析・再現機能１２３、被写体識別機能１２４、記録媒体アクセス機能１２５および撮影感度判定機能１２６等が存在する。
【００３９】
画像圧縮伸長機能１２２は、フレームメモリ１３３に記憶されている画像データ等を読み出して、例えばＪＰＥＧ圧縮処理等を行ったり記録媒体１３６から読み出された圧縮画像データの伸張処理を行ったりなどの各種処理を実行する。画像認識機能１２１は、画像データに含まれる色彩などの変化から画像中の特徴点を抽出し、この抽出結果に基づいて画像中の領域等を認識する。被写体識別機能１２４は、画像認識機能１２１によって認識された領域の配置等から画像中に含まれる被写体の形状等を識別する。色情報解析・再現機能１２３は、例えば、被写体識別機能１２４によって識別された被写体の各領域の色情報を特定し、この色もしくは模様のテクスチャを別の画像に含まれる同一被写体の対応領域にマッピングする。記録媒体アクセス機能１２５は、記録媒体インタフェース１３５による記録媒体１３６へのアクセスを制御する。撮影感度判定機能１２６は、Ａ／Ｄ変換回路１３１から出力されたデジタルの画像データから撮像素子１０２に入射する光学像の光量があらかじめ設定しておいた閾値（通常最低感度）より小さいか否かを判定する。なお、通常最低感度とは、撮影によって得られた画像信号に要求する明度や色彩等の最低限の値である。したがって、通常最低感度は、この通常最低感度以上の撮影感度が得られた場合にはフラッシュを必要とせずに十分な明度や色彩等の画像信号が得られる値に設定される。
【００４０】
ＦＩＦＯメモリ１３２は、表示対象とするフレームの画像信号を各種表示装置へ出力する際にこの画像信号を一時的にバッファする、いわゆるビデオメモリとして機能する。
【００４１】
なお、撮影装置１においては、上述のレンズ１０１、撮像素子１０２、撮像回路１０５、Ａ／Ｄ変換回路１３１、ＣＰＵ１２０およびフレームメモリ１３３を含む構成が、光学レンズ等からなる撮像光学系が撮像素子の受光面に結像した光学像を電気的な信号に変換して画像信号を生成する撮影手段を実現する。また、撮影装置１は、画像信号以外の情報、例えば音声信号等を取得するマイクロフォン等よりなる集音機能等を備えていてもよい。
【００４２】
ＴＦＴ液晶駆動回路１４１は、ＦＩＦＯメモリ１３２から例えば１ラインごとに出力される画像信号に基づいてＴＦＴ液晶パネル１４４を駆動する。ＴＦＴ液晶パネル１４４は、ＴＦＴ液晶駆動回路１４１によって駆動されることで、表示対象の画像や各種情報等を表示する。このＴＦＴ液晶パネル１４４には、カラー表示可能なパネルが用いられる。また、バックライトユニット１４３は、ＴＦＴ液晶パネル１４４の背面側に設けられ、ＴＦＴ液晶パネル１４４を背面側から照明する。
【００４３】
ビデオ出力回路１４２は、ＦＩＦＯメモリ１３２からの画像信号を例えばＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｙｓｔｅｍ Ｃｏｍｍｉｔｔｅｅ）形式のビデオ信号に変換する。また、ビデオ出力回路１４２は、変換したビデオ信号をビデオ出力端子１４５に接続された外部装置（例えば外部画像表示装置２０１等）へ出力する。なお、ビデオ出力端子１４５は、ビデオ信号の伝送媒体であるビデオケーブル等の信号線が接続される接続端子である。
【００４４】
また、本実施の形態１では、上述のＦＩＦＯメモリ１３２、ＴＦＴ液晶駆動回路１４１、ＴＦＴ液晶パネル１４４およびバックライトユニット１４３を含む構成が、撮像手段が生成した画像データを再生することで被写体の静止画または動画をユーザへ表示する表示手段を実現する。
【００４５】
記録バッファ１３４は、フレームメモリ１３３に一時的に保持されている画像信号等を記録媒体１３６に画像データとして記録するときや、記録媒体１３６から画像データを読み出してフレームメモリ１３３に一時的に保持させるとき等に用いられるバッファ（一時保存領域）である。
【００４６】
記憶媒体インタフェース（Ｉ／Ｆ）１３５は、記録媒体１３６への画像データ等の記憶処理や、記録媒体１３６からの画像データ等の読み出し処理等を制御するための回路である。
【００４７】
記録媒体１３６は、画像データやその他の各種データを記録するストレージである。この記録媒体１３６には、例えば薄板形状またはカード形状からなるメモリカード等の不揮発性の記憶媒体を用いることができる。なお、記録媒体１３６としては、撮影装置１等の機器に対して着脱自在のものや、撮影装置１等の機器内部の電気回路に固設されるもの等、如何なるものを適用してもよい。
【００４８】
また、上述の記録バッファ１３４、記憶媒体インタフェース１３５、記録媒体１３６を含む構成が、画像信号（画像データを含む）などの各種情報を記憶する記憶手段を実現する。
【００４９】
ＣＰＵ１１０は、主（メイン）ＣＰＵとして配設される。このＣＰＵ１１０は、撮影装置１内部の各回路を統括的に制御すると共に、各種機能を実現するために各構成部を制御する、いわゆるメイン制御手段として機能する。そこでＣＰＵ１１０は、撮影装置１内部の各構成部を適宜制御（コントロール）することでシステム全体を制御するシステムコントロール部１１０Ａを備えている。
【００５０】
システムコントロール部１１０Ａは、撮影装置１の動作を制御する各種機能を実現する。この機能としては、例えば、撮像部の画角を判定するカメラ撮影画角判定機能１１１、フラッシュモードのオン／オフを管理および制御するフラッシュ制御機能１１２、および、撮影装置１内部で時間を管理する時計機能１１３など存在する。また、この他にも、外部有線データＩ／Ｆ１６３を介してデータの入出力を制御する機能や、主電源である電池１７１の残量をＬＣＤパネル１６２等に表示する機能や、撮影手段にて撮影動作を実行する際の各種の撮影条件を設定する機能や、撮影動作により取得した画像信号と画像信号に関連する各種情報（関連情報データ）とを合わせて画像データを含む画像ファイルを生成する機能や、録音機能により取得される音声信号を音声ファイルとして管理する機能や、記録媒体に記録済みの各種データファイルに基いてアルバム機能や印刷機能を実行したり登録設定を行って各種登録設定データ等を生成しこれを記録媒体に記憶したりする機能や、生成された画像ファイルや音声ファイルや登録設定データ等を適切な形態で記録媒体１３６に記録する制御を行う機能や、画像ファイルに基づく画像や関連情報を表示手段に視覚的に表示させる機能や、音声ファイルに基づく音声をスピーカ等（図示せず）に出力させる機能など、撮影装置１における各種動作及び各種機能を制御するためのさまざまな機能がシステムコントロール部１１０Ａにおいて実現される。
【００５１】
なお、撮影装置１は、無線通信機能を備えた外部装置（図示せず）との間で無線による画像ファイル等のデータ信号の送受信を行うための無線通信機能を備えていてもよい。この無線通信機能を実現する方式には、例えば、ワイヤレスＵＳＢ（ＷＵＳＢ）方式や、超広帯域（ＵＷＢ）無線接続方式や、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）方式による光無線接続等が存在する。
【００５２】
アクチュエータ１０４は、レンズ１０１を駆動することで、自動焦点調節（オートフォーカス（ＡＦ））動作やズーミング動作等を行うための駆動源である。アクチュエータ駆動回路１０３は、ＣＰＵ１１０の制御に基づいてアクチュエータ１０４を駆動する回路である。
【００５３】
すなわち、アクチュエータ１０４及びアクチュエータ駆動回路１０３を含む構成は、レンズ１０１をその光軸に沿って移動させることで被写体像のオートフォーカス動作や変倍動作等を行うレンズ駆動手段として機能する。
【００５４】
また、ＥＥＰＲＯＭ１０７は、ＣＰＵ１１０、ＣＰＵ１２０により実行される処理プログラム（アプリケーションソフトウエア）等や、外部装置と通信するための通信設定情報等のデータ等、撮影装置１における各種の設定データや固有データ等を記憶し保持するための不揮発性記憶媒体であって、通信設定メモリとして機能する。このＥＥＰＲＯＭ１０７には、例えば電気的に消去可能な不揮発性メモリである公知のフラッシュロム（Ｆｌａｓｈ ＲＯＭ）等を適用することができる。
【００５５】
また、フラッシュ１０６は、撮影時に被写体を照明する光を放射する光源であり、例えばキセノンランプやＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等で構成される。手ブレ補正用ジャイロセンサ１０８は、撮影装置１に生じているヨー方向およびピッチ方向の角速度を検出し、検出した角速度に基づき撮影装置１のブレを検出する。
【００５６】
キーマトリクス１５０は、ファーストレリーズ１５１やセカンドレリーズ１５２等、撮影装置１の各種操作スイッチや操作ボタン等を含む。なお、ファーストレリーズ１５１とは例えばユーザによるシャッタボタン（不図示）の半押しを検出するキーであり、セカンドレリーズ１５２とは例えばユーザによるシャッタボタンの全押しを検出するキーである。例えばファーストレリーズ１５１によってシャッタボタンの半押しが検出された場合、ＣＰＵ１１０によってオートフォーカス動作が実行される。一方、例えばセカンドレリーズ１５２によってシャッタボタンの全押しが検出された場合、ＣＰＵ１１０によって撮像動作が実行される。
【００５７】
また、キーマトリクス１５０に含まれるその他の操作部材には、例えば撮影装置１の電源状態をオン又はオフ状態に切り換える電源ボタン、撮影動作時には撮影倍率を変更するズームボタンとして機能し再生動作時には再生画像の拡大表示や縮小表示等の表示切換ボタンとして機能するズームボタン（ＴＷボタン）１５３、メニュー画面を呼び出す等の各種機能に割り当てられる複数の各種操作ボタン、メニュー画面等における選択設定を行う四方向選択キー（十字キーともいう）、各種操作ボタンを用いて選択した項目を決定指示するＯＫボタン等が含まれる。
【００５８】
そして、このキーマトリクス１５０には、上述の各種操作部材と、これら操作部材のそれぞれに連動して所定の指示信号を発生させるスイッチ部材や各スイッチ部材からの指示信号を伝達する電気回路等が含まれる。また、ユーザが操作することでキーマトリクス１５０が発生した各種指示信号は、ＣＰＵ１１０へ入力される。
【００５９】
ＬＣＤ表示回路１６１は、ＣＰＵ１１０からの制御に従ってＬＣＤパネル１６２を駆動することで、ＬＣＤパネル１６２に各種情報を表示させる。ＬＣＤパネル１６２は、例えば小型の液晶表示装置（ＬＣＤ）等によって構成され、ＬＣＤ表示回路１６１による駆動に応じて、撮影装置１において設定済みの撮影条件や、例えば撮影モード等の動作モード情報や記録媒体１３６に記憶可能な画像の枚数情報や撮影時のシャッタ速度や絞り値等の露出に関する情報等の各種設定情報を表示する。
【００６０】
外部有線データインタフェース（Ｉ／Ｆ）１６３は、撮影装置１と外部装置（図示せず）との間で画像データ等の伝送（送受信）を行うための接続インタフェースである。この外部有線データＩ／Ｆ１６３には、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）規格やＩＥＥＥ１３９４規格等に準拠したインタフェースを適用することができる。本実施の形態では、ＵＳＢ規格に準拠したインタフェースを外部有線データＩ／Ｆ１６３として用いた場合を例に挙げる。
【００６１】
電池１７１は、撮影装置１における主（メイン）電源である。この電池１７１には、例えば乾電池等の一次電池や充電可能な蓄電池等の二次電池などが適用される。バックアップ電源１７２は、撮影装置１の内部メモリや内部時計等に対して常に電力を供給するために設けられた副（サブ）電源である。このバックアップ電源１７２からの電力は、例えば撮影装置１における各種設定値や日時情報等を保持したり日時情報をＬＣＤパネル１６２等に常時表示したりするための電力として用いられる。
【００６２】
電源回路１７３は、ＣＰＵ１１０からの制御に基づいて、電池１７１またはバックアップ電源１７２からの電力を撮影装置１内部の各電気回路へ適宜供給する。電池状態検出回路１７４は、電池１７１からの電源電圧などから電池１７１の残量などの状態を検出し、この検出結果をＣＰＵ１１０へ出力する。
【００６３】
その他、本発明に関連しない部分の構成については、通常一般のデジタルスチルカメラ等の撮影装置と略同様の構成であるものとして、その詳細な図示及び説明は省略する。
【００６４】
次に、図２および図３を参照して、本実施の形態１による撮影装置１の動作を詳細に説明する。ただし、以下の説明では、電子ファインダの一部として機能するＴＦＴ液晶パネル１４４に略リアルタイムに撮像素子１０２からの映像（以下、スルー画という）を表示する際の動作（カメラ撮影モード時の動作）に着目して説明する。その他の動作は、通常一般のデジタルスチルカメラ等の撮影装置と略同様の動作とすることが可能である。例えば、撮影装置１の起動後の主動作は、通常一般のデジタルスチルカメラ等の撮影装置と略同様である。したがって、以下では、説明の簡略化を目的として、その詳細な図示及び説明は省略する。
【００６５】
ユーザがキーマトリクス１５０中の電源ボタンやレンズカバー等を操作すると、撮影装置１は、主動作の流れにおいて図２に示すカメラ撮影モード時の動作を起動する（カメラ撮影モード管理ステップ）。なお、カメラ撮影モードとは、電子ファインダ（特にＴＦＴ液晶パネル１４４）に被写体の映像を表示するモードである。このカメラ撮影モードのオン／オフは、例えばＣＰＵ１１０において管理される。言い換えれば、ＣＰＵ１１０は、カメラ撮影モードのオン／オフを管理するカメラ撮影モード管理部として機能する。
【００６６】
カメラ撮影モード時の動作では、図２に示すように、撮影装置１は、まず、ＣＰＵ１１０の制御の下で初期化処理を実行する（ステップＳ１０１）。具体的には、例えばＣＰＵ１１０が、アクチュエータ駆動回路１０３よりアクチュエータ１０４を駆動してレンズ１０１を初期位置へ移動させると共に、撮像素子１０２をリフレッシュする。
【００６７】
次に撮影装置１は、ライブビュー撮影を実行する（ステップＳ１０２）。具体的には、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動して撮像素子１０２から電荷蓄積量に応じた電気信号を読み出してアナログの画像信号を生成し、この画像信号をＡ／Ｄ変換回路１３１に入力する。Ａ／Ｄ変換回路１３１は、入力されたアナログの画像信号に対してＡ／Ｄ変換処理を実行することでデジタルの画像データを生成する。Ａ／Ｄ変換された画像データは、内部バス１３０によるバスコントロールによって直接またはＣＰＵ１２０での所定のデジタル信号処理が施された後にＦＩＦＯメモリ１３２に入力される。一方で、ＣＰＵ１１０の制御の下でＴＦＴ液晶駆動回路１４１を駆動することで、ＦＩＦＯメモリ１３２から１ラインごとに画像データを読み出し、これをＴＦＴ液晶パネル１４４に入力する。この際、ＣＰＵ１１０はバックライトユニット１４３を点灯しておく。これにより、電子ファインダの一部であるＴＦＴ液晶パネル１４４には、撮像素子１０２から読み出された画像データによる映像が略リアルタイムにスルー画として表示される。
【００６８】
次に撮影装置１は、ステップＳ１０２のライブビュー撮影において生成した画像データから撮像素子１０２での撮影感度があらかじめ設定しておいた通常最低感度よりも小さいか否かを判定する（ステップＳ１０３）。具体的には、Ａ／Ｄ変換回路１３１から出力されたデジタルの画像データが内部バス１３０の制御の下でＣＰＵ１２０に入力される。ＣＰＵ１２０は、撮影感度判定機能１２６を起動し、これを動作させることで、入力された画像データから撮像素子１０２に入射する光学像の光量を算出し、この算出値より求まる撮影感度があらかじめ設定しておいた通常最低感度より小さいか否かを判定する。
【００６９】
ステップＳ１０３の判定の結果、撮影感度が通常最低感度以上である場合（ステップＳ１０３のＮｏ）、撮影装置１は、通常ライブビューモードへ移行し、この動作を実行する（ステップＳ１０４）。通常ライブビューモードでは、撮像素子１０２から得られた画像信号が、Ａ／Ｄ変換回路１３１およびＦＩＦＯメモリ１３２を介してＴＦＴ液晶駆動回路１４１に入力される。したがって、ＴＦＴ液晶パネル１４４には、そのままの画像がスルー画として表示される。
【００７０】
一方、ステップＳ１０３の判定の結果、撮影感度が通常最低感度よりも小さい場合（ステップＳ１０３のＹｅｓ）、撮影装置１は、疑似カラーライブビューモードへ移行し、この動作を実行する（ステップＳ１０５）。なお、疑似カラーライブビューモードの詳細については、以下に図３と共に触れる。
【００７１】
ステップＳ１０４の通常ライブビューモードまたはステップＳ１０５の疑似カラーライブビューモード時の動作を実行後、撮影装置１は、主動作へリターンする。
【００７２】
次に、図２のステップＳ１０５に示す疑似カラーライブビューモード時の動作について、図３を用いて詳細に説明する。疑似カラーライブビューモード時の動作では、図３に示すように、撮影装置１は、まず、ＣＰＵ１１０の制御の下でズーム倍率をワイド端に設定する（ステップＳ１１１）。すなわち、レンズ１０１を含む光学系は、撮像部が画像データ（第１画像データ）を生成する際、ズーム倍率をワイド端に設定する。具体的には、例えばＣＰＵ１１０が、アクチュエータ駆動回路１０３よりアクチュエータ１０４を駆動してレンズ１０１をワイド端へ移動する。これにより、撮像素子１０２の受光面には、撮影装置１のスペックにおいて最も広角な光学像が結像される。
【００７３】
次に撮影装置１は、ＣＰＵ１１０の特にフラッシュ制御機能１１２の制御の下でフラッシュ１０６を駆動する（ステップＳ１１２）。これにより、少なくとも撮影装置１の撮影範囲が照明されると共に、撮像素子１０２の受光面に色情報を再現するのに十分な光量の光学像が結像される。
【００７４】
続いて撮影装置１は、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動することで、撮像素子１０２から画像信号を読み出す（ステップＳ１１３：第１撮像ステップ）。この際、ステップＳ１１２の制御によってフラッシュ１０６が駆動されているため、撮像素子１０２には十分な光量の光学像が結像される。したがって、撮像素子１０２から読み出された画像ＩＭ０の画像信号は、図４に示すように被写体ＯＢ０や背景ＢＫ０の色を再現するのに十分な信号強度（色情報）を持つ。なお、図４は、フラッシュ１０６を駆動した際に取得される画像ＩＭ０の一例を示す図である。また、読み出された画像信号は、Ａ／Ｄ変換回路１３１に入力されてＡ／Ｄ変換処理された後、デジタルの画像データ（第１画像データ）として内部バス１３０に出力される。内部バス１３０は、所定のバスコントロールに従って、デジタルの画像データをＣＰＵ１２０に入力する。
【００７５】
このように本実施の形態では、照明部および撮像部が、ＣＰＵ１１０（カメラ撮影モード管理部）がカメラ撮影モードをオンにした際、少なくとも１回、前記被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成する。
【００７６】
次に撮影装置１は、ＣＰＵ１２０に入力された画像データに対し、これに含まれる被写体（またはその領域）ごとの色情報（第１色情報）を抽出し、これを例えば不図示のキャッシュメモリ等に記憶しておく（ステップＳ１１４：色情報解析ステップ）。具体的には、ＣＰＵ１２０は、まず画像認識機能１２１を呼出し、この画像認識機能１２１に、画像データに含まれる色の成分および階調などから画像中の特徴点を抽出させ、この抽出結果に基づいて画像中の領域等を認識させる。続いてＣＰＵ１２０は、被写体識別機能１２４を呼出し、この被写体識別機能１２４に、画像認識機能１２１によって認識された領域の配置等から画像中に含まれる被写体の形状等を識別させる（被写体識別ステップ）。続いてＣＰＵ１２０は、色情報解析・再現機能１２３を呼出し、この色情報解析・再現機能１２３に、被写体識別機能１２４によって識別された被写体の各領域の色情報を特定させる。これにより得られた被写体の各領域の色情報は、上述したように不図示のキャッシュメモリ等に記憶される。なお、記憶される色情報には、被写体の形状の情報、例えば色の領域の情報も含まれている。
【００７７】
次に撮影装置１は、ＣＰＵ１１０の制御の下でアクチュエータ駆動回路１０３よりアクチュエータ１０４を駆動することで、レンズ１０１を初期位置へ戻す（ステップＳ１１５）。
【００７８】
次に撮影装置１は、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動することで、撮像素子１０２から画像信号をスルー画（第２画像データ）として読み出す（ステップＳ１１６：第２撮像ステップ）。この際、フラッシュ１０６は駆動されていないため、撮像素子１０２の受光面に結像される光学像の光量は小さい。したがって、撮像素子１０２から読み出されたカラー補正前のスルー画ＩＭ１の画像信号の信号強度（色情報）は、図５（ａ）に示すように被写体ＯＢ１や背景ＢＫ１の色を再現するのには十分でない信号強度（色情報）となる。なお、図５は、本実施の形態によるカラー補正前のスルー画ＩＭ１とカラー補正後のスルー画ＩＭ２（図５（ｂ）参照）とを示す図である。また、図５（ａ）における被写体ＯＢ１ならびに背景ＢＫ１の実体は、図４および図５（ｂ）における被写体ＯＢ０およびＯＢ２ならびに背景ＢＫ０およびＢＫ２の実体と同一である。さらに、ステップＳ１１６で読み出された画像信号は、Ａ／Ｄ変換回路１３１に入力されたＡ／Ｄ変換処理された後、デジタルの画像データとして内部バス１３０に入力される。内部バス１３０は、所定のバスコントロールに従って、デジタルの画像データをＣＰＵ１２０に入力する。
【００７９】
次に撮影装置１は、ＣＰＵ１２０に入力された画像データの画像解析を実行する（ステップＳ１１７）。なお、説明の都合上、本ステップＳ１１７で解析対象とする画像データをスルー画データといい、これによる画像をスルー画という。ステップＳ１１７では、具体的には、ＣＰＵ１２０は、まず画像認識機能１２１を呼出し、この画像認識機能１２１に、スルー画データに含まれる色の成分および階調などから画像中の特徴点を抽出させ、この抽出結果に基づいて画像中の領域等を認識させる。続いてＣＰＵ１２０は、被写体識別機能１２４を呼出し、この被写体識別機能１２４に、画像認識機能１２１によって認識された領域の配置等からスルー画中に含まれる被写体の形状等を識別させる。
【００８０】
次に撮影装置１は、ステップＳ１１４で記憶しておいた被写体（またはその領域）ごとの色情報（第１色情報）を読み出し、読み出した色情報とステップＳ１１７の画像解析で特定した被写体（またはその領域）とを照合する（ステップＳ１１８）。具体的には、ＣＰＵ１２０は、色情報解析・再現機能１２３を呼出すと共に、ステップＳ１１４で記憶しておいた被写体（またはその領域）ごとの色情報を読み出し、色情報解析・再現機能１２３に、本ステップＳ１１７で被写体識別機能１２４が識別した被写体（またはその領域）ごとの色情報を特定させる。
【００８１】
被写体（またはその領域）ごとの色情報の特定は、例えば、ステップＳ１１４の画像データと本ステップＳ１１７のスルー画データとの間で各領域の動きベクトルを算出し、この動きベクトルに基づいて画像データとスルー画との間で対応する領域を特定し、この対応する領域の色情報をステップＳ１１４で記憶した色情報から特定することで実現することができる。
【００８２】
次に撮影装置１は、ステップＳ１１８で特定した被写体（またはその領域）ごとの色情報（第１色情報）に基づいて、ステップＳ１１６でスルー画として読み出した画像データに含まれる被写体（またはその領域）ごとの色情報（第２色情報）を補正する（ステップＳ１１９：色情報補正ステップ）。これにより、図５（ａ）に示すカラー補正前のスルー画ＩＭ１から図５（ｂ）に示すカラー補正後のスルー画ＩＭ２のように、電子ファインダの一部であるＴＦＴ液晶パネル１４４に表示されるスルー画がカラー補正される（再生ステップ）。なお、ここで各被写体（またはその領域）の補正後の色情報は、画像データにおける各領域の平均色の情報や、ステップＳ１１４で特定した被写体（またはその領域）の色彩をそのままテクスチャとして用いた情報など、種々変形することが可能である。また、カラー補正後のスルー画データは、内部バス１３０を介してＦＩＦＯメモリ１３２に一旦バッファされる。その後、ＣＰＵ１１０の制御の下にＴＦＴ液晶駆動回路１４１が駆動されてＦＩＦＯメモリ１３２から１ラインごとにスルー画データが読み出され、このスルー画データに基づいてＴＦＴ液晶パネル１４４が駆動される。これにより、カラー補正後のスルー画ＩＭ２（図５（ｂ）参照）がＴＦＴ液晶パネル１４４に表示される。
【００８３】
その後、撮影装置１は、撮影装置１自身の姿勢（言い換えれば、撮像素子１０２の向き）であるカメラ姿勢情報を検出する（ステップＳ１２０：姿勢検出ステップ）。すなわち、本実施の形態による撮影装置１は、撮像部の向きの変化を検出する姿勢検出部を備える。このカメラ姿勢情報の検出は、例えばステップＳ１１６で取り込んだスルー画データから撮影装置１のカメラ姿勢を特定してその姿勢が大きく変わったかを判定する方法や、撮影装置１内に設けられている手ブレ補正用ジャイロセンサ１０８（図１参照）を姿勢検出に使用して撮影装置１の姿勢を検出する方法など、種々の方法で実現することが可能である。
【００８４】
次に撮影装置１は、カメラ姿勢情報があらかじめ定めておいたリミット（閾値）を超えたか否か、すなわち撮影装置１の撮影方向の向きや撮像素子１０２に結像された光学像の構図が大きく変わったか否かを判定し（ステップＳ１２１）、カメラ姿勢の変化がリミットを超えていた場合（ステップＳ１２１のＹｅｓ）、ステップＳ１１１へ帰還して、再度、フラッシュ１０６を駆動した際の画像データから被写体（またはその領域）ごとの色情報を取得する。
【００８５】
すなわち、本実施の形態１では、照明部および撮像部は、姿勢検出部が撮像部の向きの変化を検出した場合、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成し、これの色情報（第１色情報）を取得する。
【００８６】
ただし、本発明は、上記のカメラ姿勢が変化した場合に限らず、例えばズーム倍率または画角が手動または自動で変更された場合などを検出した際に、照明部および撮像部が、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成し、これの色情報（第１色情報）を取得するように構成してもよい。
【００８７】
一方、ステップＳ１２１の判定の結果、リミットを超えたカメラ姿勢の変化が無ければ（ステップＳ１２１のＮｏ）、撮影装置１は、カラー補正後のスルー画をＴＦＴ液晶パネル１４４に表示する動作の終了指示が例えばキーマトリクス１５０から入力された否かを判定し（ステップＳ１２２）、このスルー画表示の終了指示が入力されていない場合（ステップＳ１２２のＮｏ）、ステップＳ１１６へ帰還して、新たなスルー画を取得し、これをカラー補正した後、カラー補正後のスルー画をＴＦＴ液晶パネル１４４に表示する。これにより、電子ファインダの一部であるＴＦＴ液晶パネル１４４にはカラー補正後のスルー画がライブビュー映像として表示される。一方、スルー画表示の終了指示が入力されていた場合（ステップＳ１２２のＹｅｓ）、撮影装置１は、図２のカメラ撮影モード時の動作へリターンする。
【００８８】
以上で説明したように、本実施の形態１では、背景を含む被写体の色を再現するのには十分でない信号強度のスルー画データ（第２画像データ）の色情報（第２色情報）が、背景を含む被写体の色を再現するのに十分な信号強度の画像データ（第１画像データ）の色情報（第１色情報）でカラー補正される。この結果、本実施の形態では、低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示することが可能となる。
【００８９】
また、フラッシュ１０６を駆動したときの画像と同様の画像を電子ファインダに表示することが可能となるため、画像を取り込む際の画像と取り込まれた画像との色合いの差を低減することが可能である。この結果、暗所でもユーザに違和感の少ない操作性を提供することが可能となる。
【００９０】
なお、ＣＰＵ１２０における被写体識別機能１２４は、画像データ（第１画像データ）およびスルー画データ（第２画像データ）に含まれる被写体を識別する被写体識別部として機能する。そこで、色情報抽出部は、被写体識別部によって識別された画像データ（第１画像データ）中の被写体ごとに色情報（第１色情報）を解析する。また、色情報補正部は、被写体識別部によって識別されたスルー画データ（第２画像データ）中の被写体ごとに色情報（第２色情報）を画像データ（第１画像データ）の色情報（第１色情報）で補正する。
【００９１】
（変形例１−１）
なお、被写体の色情報の更新は、カメラ姿勢の変化がリミットを超えた場合（図３のステップＳ１２１のＹｅｓ）に限るものではない。例えばユーザが特定の被写体をねらった際にその被写体の色情報を更新するように構成してもよい。以下、この場合を本実施の形態１の変形例１−１として説明する。なお、被写体をねらった際とは、例えばファーストレリーズ１５１がシャッタボタンの半押しを検出した際などである。
【００９２】
図６は、本変形例１−１による疑似カラーライブビューモード時の概略動作を示すフローチャートである。なお、撮影装置１の構成ならびにその主動作およびカメラ撮影モード時の動作は、上記実施の形態１と同様であるため、ここでは詳細な説明を省略する。
【００９３】
図６に示すように、本変形例１−１による疑似カラーライブビューモード時の動作では、撮影装置１は、まず、図３に示す疑似カラーライブビューモード時の動作のステップＳ１１１〜Ｓ１２１と同様に、レンズ１０１をワイド端に設定した状態で取得した画像データからこれに含まれる被写体（またはその領域）ごとの色情報を取得して記憶しておき、その後、順次取得したスルー画に含まれる被写体（またはその領域）の色を記憶しておいた色情報を用いてカラー補正する。
【００９４】
次に撮影装置１は、キーマトリクス１５０におけるファーストレリーズ１５１がシャッタボタン（不図示）の半押しを検出したか否かを判定し（ステップＳ１３１）、半押しを検出した場合（ステップＳ１３１のＹｅｓ）、オートフォーカス（ＡＦ）のターゲットとなる被写体に対して最適な発光量となるようにＣＰＵ１１０の特にフラッシュ制御機能１１２の制御の下でフラッシュ１０６を駆動する（ステップＳ１３２）。具体的には、通常のオートフォーカス動作と同様の動作にて撮像範囲に含まれる被写体を特定し、これに対して最適となるフラッシュ１０６の発光量をあらかじめ登録しておいた発光量を管理するテーブルから取得する。
【００９５】
なお、オートフォーカス動作は、ＣＰＵ１１０のフラッシュ制御機能１１２およびＣＰＵ１２０とアクチュエータ駆動回路１０３とアクチュエータ１０４とを含むオートフォーカス部によって実行される。すなわち、ＣＰＵ１２０における画像解析により被写体を特定し、この特定した被写体にレンズ１０１の焦点が合うように、ＣＰＵ１１０のフラッシュ制御機能１１２が自動的にアクチュエータ駆動回路１０３を駆動してアクチュエータ１０４の光軸上の位置を制御する。
【００９６】
また、オートフォーカス部のオン／オフは、ファーストレリーズ１５１がシャッタボタン（不図示）の半押しを検出したか否かによって切り替えられる。すなわち、キーマトリクス１５０におけるファーストレリーズ１５１およびＣＰＵ１１０は、オートフォーカス部のオン／オフを切り替える切替部として機能する。
【００９７】
以上のように、被写体に対する最適な発光量を取得すると、その後、ＣＰＵ１１０のフラッシュ制御機能１１２は、特定した発光量にてフラッシュ１０６を駆動する。なお、ステップＳ１３１の判定の結果、ファーストレリーズ１５１によって半押しが検出されなかった場合（ステップＳ１３１のＮｏ）、撮影装置１はステップＳ１２２へ移行する。
【００９８】
次に撮影装置１は、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動することで、撮像素子１０２から画像信号を読み出す（ステップＳ１３３）。この際、ステップＳ１３２の制御によってフラッシュ１０６が駆動されているため、撮像素子１０２には十分な光量の光学像が結像される。したがって、撮像素子１０２から読み出された画像の画像信号は、図４に示す場合と同様に、被写体や背景の色を再現するのに十分な信号強度を持つ。また、読み出された画像信号は、Ａ／Ｄ変換回路１３１に入力されてＡ／Ｄ変換処理された後、デジタルの画像データとして内部バス１３０に出力される。内部バス１３０は、所定のバスコントロールに従って、デジタルの画像データをＣＰＵ１２０に入力する。
【００９９】
次に撮影装置１は、ステップＳ１１４と同様に、ＣＰＵ１２０に入力された画像データに対し、これに含まれる被写体（またはその領域）ごとの色情報を抽出し、これを例えば不図示のキャッシュメモリ等に記憶しておく（ステップＳ１３４）。その後、撮影装置１は、ステップＳ１１６へ帰還する。
【０１００】
以上のように、本変形例１−１では、照明部および撮像部は、オートフォーカス部がオンに切り替えられた場合、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成して色情報（第１色情報）を取得する。これにより、ユーザが被写体として最も正しく色を識別したいと思っているものに対して、より正しい色情報を表示することが可能となる。
【０１０１】
なお、その他の構成および動作ならびに効果は、上記した実施の形態１またはその変形例と同様である。
【０１０２】
（変形例１−２）
さらに、例えば画像に含まれる被写体の向きが変わったり被写体そのものが別の被写体に換わったりした際に被写体の色情報を更新するように構成してもよい。以下、この場合を本実施の形態１の変形例１−２として説明する。
【０１０３】
図７は、本変形例１−２による疑似カラーライブビューモード時の概略動作を示すフローチャートである。なお、撮影装置１の構成ならびにその主動作およびカメラ撮影モード時の動作は、上記実施の形態１と同様であるため、ここでは詳細な説明を省略する。
【０１０４】
図７に示すように、本変形例１−２による疑似カラーライブビューモード時の動作では、撮影装置１は、まず、図３に示す疑似カラーライブビューモード時の動作のステップＳ１１１〜Ｓ１２１と同様に、レンズ１０１をワイド端に設定した状態で取得した画像データからこれに含まれる被写体（またはその領域）ごとの色情報を取得して記憶しておき、その後、順次取得したスルー画に含まれる被写体（またはその領域）の色を記憶しておいた色情報を用いてカラー補正する。
【０１０５】
次に撮影装置１は、ステップＳ１１６で取得したスルー画データに含まれる被写体とステップＳ１１３で取得した画像データに含まれる被写体との類似度を認識する（ステップＳ１４１）。具体的には、ステップＳ１１６で取得したスルー画データを内部バス１３０を介してＣＰＵ１２０に入力する。ＣＰＵ１２０は、スルー画データが入力されると、まず画像認識機能１２１を呼出し、この画像認識機能１２１に、画像データに含まれる色の成分および階調などから画像中の特徴点を抽出させ、この抽出結果に基づいて画像中の領域等を認識させる。続いてＣＰＵ１２０は、被写体識別機能１２４を呼出し、この被写体識別機能１２４に、画像認識機能１２１によって認識された領域の配置等から画像中に含まれる被写体の形状等を識別させる。続いてＣＰＵ１２０は、色情報解析・再現機能１２３を呼出し、この色情報解析・再現機能１２３に、被写体識別機能１２４によって識別されたスルー画データに含まれる被写体の形状等とステップＳ１１４で色情報と共に記憶しておいた画像データに含まれる被写体の形状等とを比較させ、この比較結果から類似度（または相関度であってもよい）を認識する。
【０１０６】
次に撮影装置１は、ステップＳ１４１で認識した類似度があらかじめ設定しておいた閾値を超えたか否かを判定し（ステップＳ１４２：変化判定ステップ）、閾値を超えた場合（ステップＳ１４２のＹｅｓ）、上述した変形例１−１において図６のステップＳ１３２〜Ｓ１３４を用いて説明した動作と同様に、フラッシュ１０６を駆動しつつ画像データを取り出し、この画像データに含まれる色情報を取得して記憶しておく。その後、撮影装置１は、ステップＳ１１６へ帰還する。なお、ステップＳ１４２の判定の結果、類似度が閾値以下であった場合（ステップＳ１４２のＮｏ）、撮影装置１は、撮影装置１はステップＳ１２２へ移行する。
【０１０７】
すなわち、本変形例では、ＣＰＵ１２０における画像認識機能１２１、被写体識別機能１２４および色情報解析・再現機能１２３を含む構成が、スルー画データ（第２画像データ）中の被写体が変化したか否かを判定する変化判定部として機能する。
【０１０８】
以上のように、本変形例１−２では、照明部および撮像部は、スルー画データ（第２画像データ）中の被写体が変化したと変化判定部が判定した場合、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成して色情報（第１色情報）を取得する。これにより、スルー画中の被写体が大きく変化したときなど、被写体の色情報を補正し難くなった際に自動的に色情報を更新することが可能となる。
【０１０９】
なお、その他の構成および動作ならびに効果は、上記した実施の形態１またはその変形例と同様である。
【０１１０】
＜実施の形態２＞
また、上記した実施の形態１では、ユーザの意識に関わらず自動的にフラッシュ１０６が発光する。ただし、撮影状況によっては、ユーザが意図しないタイミングでフラッシュ１０６が発光することを回避したい場合や、フラッシュ１０６の発光自体を避けたい場合などが存在する。このような場合に対応するには、例えば、撮影装置１のフラッシュモードがオンに設定されている場合に上記実施の形態１に示した疑似カラーライブビューモードが実行されるように構成するとよい。以下、この場合を本発明の実施の形態２として図面を用いて詳細に説明する。なお、フラッシュモードとは、撮影時、すなわちセカンドレリーズ１５２がシャッタボタンの全押しを検出した際にフラッシュ１０６を駆動して被写体を照明する動作を実行するモードである。また、以下において、上記実施の形態１またはその変形例と同様の構成および動作については、簡略化のため、その詳細な説明を省略する。
【０１１１】
本実施の形態２による撮影装置は、上記実施の形態１で例示した撮影装置１と同様の構成とすることができる。このため、本実施の形態２では、撮影装置１を引用して説明する。
【０１１２】
図８は、本実施の形態２による撮影装置１のカメラ撮影モード時の概略動作を示すフローチャートである。図８に示すように、ユーザがキーマトリクス１５０中の電源ボタンやレンズカバー等を操作すると、撮影装置１は、上記実施の形態１において図２のステップＳ１０１〜Ｓ１０３を用いて説明したカメラ撮影モード時の動作と同様の動作を実行することで、現在の撮影感度が通常最低感度として設定した閾値よりも小さいか否かを判定する。
【０１１３】
ステップＳ１０３の判定の結果、撮影感度が通常最低感度以上である場合（ステップＳ１０３のＮｏ）、撮影装置１は、通常ライブビューモードへ移行し、この動作を実行する（ステップＳ１０４）。一方、ステップＳ１０３の判定の結果、撮影感度が通常最低感度よりも小さい場合（ステップＳ１０３のＹｅｓ）、撮影装置１は、フラッシュモードがオンに設定されているか否かを判定する（ステップＳ２０１）。この判定は、例えばＣＰＵ１１０のフラッシュ制御機能１１２がＥＥＰＲＯＭ１０７等に格納されている撮影装置１の設定データを参照することで実行することが可能である。
【０１１４】
ステップＳ２０１の判定の結果、フラッシュモードがオンに設定されている場合（ステップＳ２０１のＹｅｓ）、撮影装置１は、疑似カラーライブビューモードへ移行し、この動作を実行する（ステップＳ１０５）。一方、フラッシュモードがオンに設定されていない場合（ステップＳ２０１のＮｏ）、撮影装置１は、通常ライブビューモードへ移行し、この動作を実行する（ステップＳ１０４）。なお、疑似カラーライブビューモード時の動作および通常ライブビューモード時の動作については、上記実施の形態１またはその変形例と同様であるため、ここでは詳細な説明を省略する。また、疑似カラーライブビューモードへ移行後または通常ライブビューモードへ移行後、撮影装置１は、主動作へリターンする。
【０１１５】
なお、フラッシュモードには、例えば撮影感度判定機能１２６において判定された撮影感度が通常最低感度を下回ったか否かに基づいて自動的に移行したり、ユーザの操作によって手動で移行したりする。このフラッシュモードのオン／オフは、例えばＣＰＵ１１０のフラッシュ制御機能１１２において管理される（フラッシュモード管理ステップ）。言い換えれば、ＣＰＵ１１０のフラッシュ制御機能１１２は、フラッシュモードのオン／オフを管理するフラッシュモード管理部として機能する。
【０１１６】
以上のように、本実施の形態２では、照明部および撮像部は、ＣＰＵ１１０（フラッシュモード管理部）がフラッシュモードをオンにしている場合、画像データ（第１画像データ）を生成して色情報（第１色情報）を取得する。これにより、フラッシュ１０６の駆動が必要でない、もしくは、フラッシュ１０６を駆動したくないときに、自動的にフラッシュ１０６が駆動されることを回避することが可能となる。
【０１１７】
なお、その他の構成および動作ならびに効果は、上記した実施の形態１またはその変形例と同様である。
【０１１８】
また、上記実施の形態は本発明を実施するための例にすぎず、本発明はこれらに限定されるものではなく、仕様等に応じて種々変形することは本発明の範囲内であり、更に本発明の範囲内において、他の様々な実施の形態が可能であることは上記記載から自明である。例えば、上記各実施の形態およびその変形例では、色情報が全体的に欠落または低減してしまう低照明環境下（例えば暗所）等での撮影をする際にカラー補正をする場合を例に挙げたが、本発明はこれに限定されず、例えば水中などのような色成分の一部が欠落または低減してしまう環境下での撮影においても本発明を適用できる。
【図面の簡単な説明】
【０１１９】
【図１】本発明の実施の形態１による撮影装置の概略内部構成例を示すブロック図である。
【図２】本発明の実施の形態１による撮影装置のカメラ撮影モード時の概略動作を示すフローチャートである。
【図３】本発明の実施の形態１による疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【図４】本発明の実施の形態１においてフラッシュを駆動した際に取得される画像の一例を示す図である。
【図５】本発明の実施の形態１によるカラー補正前のスルー画とカラー補正後のスルー画とを示す図である。
【図６】本発明の実施の形態１の変形例１−１による疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【図７】本発明の実施の形態１の変形例１−２による疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【図８】本発明の実施の形態２による撮影装置のカメラ撮影モード時の概略動作を示すフローチャートである。
【符号の説明】
【０１２０】
１ 撮影装置
１０１ レンズ
１０２ 撮像素子
１０３ アクチュエータ駆動回路
１０４ アクチュエータ
１０５ 撮像回路
１０６ フラッシュ
１０７ ＥＥＰＲＯＭ
１０８ 手ブレ補正用ジャイロセンサ
１１０、１２０ ＣＰＵ
１１０Ａ システムコントロール部
１１１ カメラ撮影画角判定機能
１１２ フラッシュ制御機能
１１３ 時計機能
１２１ 画像認識機能
１２２ 画像圧縮伸長機能
１２３ 色情報解析・再現機能
１２４ 被写体識別機能
１２５ 記録媒体アクセス機能
１２６ 撮影感度判定機能
１３０ 内部バス
１３１ Ａ／Ｄ変換回路
１３２ ＦＩＦＯメモリ
１３３ フレームメモリ
１３４ 記録バッファ
１３５ 記録媒体インタフェース
１３６ 記録媒体
１４１ ＴＦＴ液晶駆動回路
１４２ ビデオ出力回路
１４３ バックライトユニット
１４４ ＴＦＴ液晶パネル
１４５ ビデオ出力端子
１５０ キーマトリクス
１５１ ファーストレリーズ
１５２ セカンドレリーズ
１５３ ズームボタン
１６１ ＬＣＤ表示回路
１６２ ＬＣＤパネル
１６３ 外部有線データＩ／Ｆ
１７１ 電池
１７２ バックアップ電源
１７３ 電源回路
１７４ 電池状態検出回路
２０１ 外部画像表示装置
ＢＫ０、ＢＫ１、ＢＫ２ 背景
ＩＭ０ 画像
ＩＭ１ カラー補正前のスルー画
ＩＭ２ カラー補正後のスルー画
ＯＢ０、ＯＢ１、ＯＢ２ 被写体
【技術分野】
【０００１】
本発明は、撮影装置およびライブビュー表示方法に関し、特に撮像素子で生成された画像データを略リアルタイムに再生する電子ファインダを備えた撮影装置およびライブビュー表示方法に関する。
【背景技術】
【０００２】
近年のデジタルスチルカメラやデジタルビデオカメラ（以下、両者を合わせて単にデジタルカメラという）では、撮影範囲をレンズを介して覗き見る一般的なファインダの代わりに、ＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）アレイなどの撮像素子で取得した電子画像を略リアルタイムに液晶画面等に表示する、いわゆる電子ファインダが採用されている。
【０００３】
また、例えば以下に示す特許文献１には、遠隔操作用の監視モニタにリアルタイム画像と３次元シミュレーションによって得られたＣＧ（Ｃｏｍｐｕｔｅｒ Ｇｒａｐｈｉｃｓ）画像とを重畳して表示する技術が開示されている。
【０００４】
【特許文献１】特開２００３−２７１９９３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ここで、例えば夜間撮影や暗部撮影などの低照度環境下では、デジタルカメラの撮像素子に入射する光の量が明るい場所での撮影時と比較して小さい。このため、デジタルカメラの電子ファインダに表示される略リアルタイムの映像（以下、ライブビュー映像という）は、ほぼ白黒に近いものとなってしまう。これは、光量が少なすぎるために撮像素子で得られた画像信号から色情報を取得できないことに起因している。
【０００６】
このため、低照度環境下での撮影では、電子ファインダに表示されるライブビュー映像と実際の被写体との色彩が大きく異なってしまい、ユーザにリアルな被写体の映像を表示することができないという問題が存在する。
【０００７】
そこで本発明は、上記の問題に鑑みてなされたものであり、低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示できる撮影装置およびライブビュー表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
かかる目的を達成するために、本発明による撮影装置は、撮像範囲中の被写体の光学像から画像データを生成する撮像部と、前記被写体を照明する照明部と、前記撮像部で生成された前記被写体の画像データを再生する電子ファインダと、を備えた撮影装置であって、前記照明部によって照明された前記被写体の光学像から前記撮像部が生成した第１画像データに含まれる第１色情報を解析する色情報解析部と、前記照明部が駆動されていない際に前記撮像部が前記被写体の光学像から生成した第２画像データの第２色情報を前記第１色情報で補正する色情報補正部と、を備え、前記電子ファインダが、前記第２色情報が補正された前記第２画像データを再生することを特徴としている。
【０００９】
上記した本発明による撮影装置は、前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別部を備え、前記色情報解析部が、前記被写体識別部によって識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、前記色情報補正部が、前記被写体識別部によって識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴としている。
【００１０】
上記した本発明による撮影装置は、前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを管理するカメラ撮影モード管理部を備え、前記照明部および前記撮像部が、前記カメラ撮影モード管理部が前記カメラ撮影モードをオンにした際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１１】
上記した本発明による撮影装置は、前記撮像部の向きの変化を検出する姿勢検出部を備え、前記照明部および前記撮像部が、前記姿勢検出部が前記撮像部の向きの変化を検出した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１２】
上記した本発明による撮影装置は、前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、前記光学系が、前記撮像部が前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴としている。
【００１３】
上記した本発明による撮影装置は、前記撮像部に入射する光学像の画角を変更可能な光学系を備え、前記照明部および前記撮像部が、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１４】
上記した本発明による撮影装置は、前記撮像部に入射する光を集光する光学系と、前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、前記オートフォーカス部のオン／オフを切り替える切替部と、を備え、前記照明部および前記撮像部が、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１５】
上記した本発明による撮影装置は、前記第２画像データ中の被写体が変化したか否かを判定する変化判定部を備え、前記照明部および前記撮像部が、前記第２画像データ中の被写体が変化したと前記変化判定部が判定した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００１６】
上記した本発明による撮影装置は、前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理部を備え、前記照明部および前記撮像部が、前記フラッシュモード管理部が前記フラッシュモードをオンにしている場合、前記第１画像データを生成することを特徴としている。
【００１７】
また、本発明によるライブビュー表示方法は、撮像部と照明部と電子ファインダとを備えた撮影装置の前記電子ファインダに前記撮像部の撮像範囲に含まれる被写体の映像を表示するライブビュー表示方法であって、前記照明部を駆動しつつ前記撮像部を駆動することで照明された前記被写体の光学像から第１画像データを生成する第１撮像ステップと、前記第１画像データに含まれる第１色情報を解析する色情報解析ステップと、前記照明部が駆動されていない際に前記撮像部を駆動することで前記被写体の光学像から第２画像データを生成する第２撮像ステップと、前記第２画像データの第２色情報を前記第１色情報で補正する色情報補正ステップと、前記第２色情報が補正された前記第２画像データを前記電子ファインダに再生する再生ステップと、を含むことを特徴としている。
【００１８】
上記した本発明によるライブビュー表示方法は、前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別ステップを含み、前記色情報解析ステップが、前記被写体識別ステップにおいて識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、前記色情報補正ステップが、前記被写体識別ステップにおいて識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴としている。
【００１９】
上記した本発明によるライブビュー表示方法は、前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを切り替えるカメラ撮影モード管理ステップを含み、前記第１撮像ステップが、前記カメラ撮影モード管理ステップにおいて前記カメラ撮影モードがオンに切り替えられた際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２０】
上記した本発明によるライブビュー表示方法は、前記撮像部の向きの変化を検出する姿勢検出ステップを含み、前記第１撮像ステップが、前記姿勢検出ステップにおいて前記撮像部の向きの変化が検出された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２１】
上記した本発明によるライブビュー表示方法は、前記撮影装置が、前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、前記第１撮像ステップが、前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴としている。
【００２２】
上記した本発明によるライブビュー表示方法は、前記撮影装置が、前記撮像部に入射する光学像の画角を変更可能な光学系を備え、前記第１撮像ステップが、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２３】
上記した本発明によるライブビュー表示方法は、前記撮影装置が、前記撮像部に入射する光を集光する光学系と、前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、前記オートフォーカス部のオン／オフを切り替える切替部と、を備え、前記第１撮像ステップが、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２４】
上記した本発明によるライブビュー表示方法は、前記第２画像データ中の被写体が変化したか否かを判定する変化判定ステップを含み、前記第１撮像ステップが、前記変化判定ステップにおいて前記第２画像データ中の被写体が変化したと判定された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴としている。
【００２５】
上記した本発明によるライブビュー表示方法は、前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理ステップを含み、前記第１撮像ステップが、前記フラッシュモード管理ステップにおいて前記フラッシュモードがオンに管理されている場合、前記第１画像データを生成することを特徴としている。
【発明の効果】
【００２６】
本発明によれば、被写体の色を再現するのには十分でない信号強度の第２画像データの第２色情報が被写体の色を再現するのに十分な信号強度の第１画像データの第１色情報でカラー補正されるため、低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示することが可能な撮影装置およびライブビュー表示方法を実現することが可能となる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明を実施するための最良の形態を図面と共に詳細に説明する。なお、以下の説明において、各図は本発明の内容を理解でき得る程度に形状、大きさ、および位置関係を概略的に示してあるに過ぎず、従って、本発明は各図で例示された形状、大きさ、および位置関係のみに限定されるものではない。
【００２８】
＜実施の形態１＞
以下、本発明の実施の形態１による撮影装置について、図面を用いて詳細に説明する。本実施の形態では、その撮影装置として、いわゆるデジタルスチルカメラやデジタルビデオカメラを例に挙げるが、本発明はこの例に限定されるものではなく、例えばカメラ付き携帯電話機やカメラ付きモバイルＰＣ（パーソナルコンピュータ）など、電子ファインダまたはそれと同等の機能を備えた各種電子機器に本実施の形態１を適用することが可能である。
【００２９】
本実施の形態で例示する撮影装置１は、後述するように、例えば、撮像範囲中の被写体の光学像から画像データを生成する撮像部と、被写体を照明する照明部と、被写体の映像を表示する電子ファインダと、を備え、さらに、照明部によって照明された被写体の光学像から撮像部が生成した第１画像データに含まれる第１色情報を解析する色情報解析部と、照明部が駆動されていない際に撮像部が被写体の光学像から生成した第２画像データの第２色情報を第１色情報で補正する色情報補正部と、を備える。撮影装置１の電子ファインダには、第２色情報が補正された第２画像データが再生される。
【００３０】
また、撮影装置１は、外部装置との間で無線または有線によるデータ通信を行う通信部を備える。通信部から送信された画像データは、外部装置によって受信される。外部装置としては、例えば、パーソナルコンピュータやＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）等の表示機能を備えた各種情報処理装置、プリンタやデジタル複合機等の印刷エンジンを備えた画像処理装置、および、フラッシュメモリ（登録商標）や外付けＨＤ（ハードディスク）等の各種ストレージを適用することが可能である。
【００３１】
ここで、本実施の形態１による撮影装置１の概略内部構成例を、図面を用いて詳細に説明する。図１は、撮影装置１の概略内部構成例を示すブロック図である。図２は、撮影装置１のカメラ撮影モード時の概略動作を示すフローチャートである。図３は、図２における疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【００３２】
図１に示すように、撮影装置１は、１つ以上のレンズ１０１よりなる光学系（以下、説明の都合上、光学系をレンズ１０１とする）、撮像素子１０２、アクチュエータ駆動回路１０３、アクチュエータ１０４、撮像回路１０５、フラッシュ１０６、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０７と、手ブレ補正用ジャイロセンサ１０８と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１１０および１２０、Ａ／Ｄ変換回路１３１、ＦＩＦＯメモリ１３２、フレームメモリ（ＳＤＲＡＭ）１３３、記録バッファ１３４、記録媒体インタフェース（Ｉ／Ｆ）１３５、記録媒体１３６、ＴＦＴ液晶駆動回路１４１、ビデオ出力回路１４２、バックライトユニット１４３、ＴＦＴ液晶パネル１４４、キーマトリクス１５０、ＬＣＤ（Ｌｉｑｕｉｄ Ｃｒｙｓｔａｌ Ｄｉｓｐｌａｙ）表示回路１６１、ＬＣＤパネル１６２、電池１７１、バックアップ電源１７２、電源回路１７３、ならびに、電池状態検出回路１７４を備える。
【００３３】
上記において、撮像素子１０２、撮像回路１０５、ＣＰＵ１１０およびＡ／Ｄ変換回路１３１を含む構成は、撮像範囲中の被写体の光学像から画像データ（スルー画データを含む）を生成する撮像部として機能する。また、フラッシュ１０６およびＣＰＵ１１０を含む構成は、被写体を照明する照明部として機能する。ＣＰＵ１１０、ＦＩＦＯメモリ１３２、フレームメモリ１３３、ＴＦＴ液晶駆動回路１４１、バックライトユニット１４３およびＴＦＴ液晶パネル１４４を含む構成は、被写体の映像を表示する電子ファインダとして機能する。さらに、ＣＰＵ１２０における画像認識機能１２１、被写体識別機能１２４および色情報解析・再現機能１２３を含む構成は、照明部によって照明された被写体の光学像から撮像部が生成した画像データ（第１画像データ）に含まれる色情報（第１色情報）を解析する色情報解析部として機能する。さらにまた、ＣＰＵ１２０における色情報解析・再現機能１２３を含む構成は、照明部が駆動されていない際に撮像部が被写体の光学像から生成したスルー画データ（第２画像データ）の色情報（第２色情報）を画像データ（第１画像データ）の色情報（第１色情報）で補正する色情報補正部として機能する。そこで、電子ファインダは、色情報（第２色情報）が補正されたスルー画データ（第２画像データ）を再生してユーザに表示する。
【００３４】
具体的には、レンズ１０１は、撮像素子１０２の受光面に光学的な被写体像を結像する。撮像素子１０２は、レンズ１０１によって受光面に結像される光学的な被写体像を電気信号に変換する光電変換処理を行うことで、電気的な信号を生成する。この撮像素子１０２には、高速読み出しが可能な固体撮像素子、例えばＣＣＤ（Ｃｈａｒｇｅ Ｃｏｕｐｌｅｄ Ｄｅｖｉｃｅ）、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ Ｍｅｔａｌ Ｏｘｉｄｅ Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）、またはその他の各種撮像素子を適用することができる。
【００３５】
撮像回路１０５は、撮像素子１０２の各光電変換素子に蓄積された電荷に応じた電気信号を画像信号として読み出し、この画像信号に垂直同期信号および水平同期信号等を組み合わせる。なお、読み出し直後の画像信号は、アナログ信号である。撮像回路１０５は、読み出した画像信号に対して各種アナログ信号処理を実行し、処理後の画像信号をＡ／Ｄ変換回路１３１に入力する。Ａ／Ｄ変換回路１３１は、撮像回路１０５から出力されたアナログの画像信号に対してＡ／Ｄ変換処理を実行する。これにより、アナログの画像信号がデジタルの画像データに変換される。
【００３６】
Ａ／Ｄ変換回路１３１から出力された画像データは、ＣＰＵ１２０、フレームメモリ１３３、ＦＩＦＯ（Ｆｉｒｓｔ−Ｉｎ Ｆｉｒｓｔ−Ｏｕｔ）メモリ１３２または記録バッファ１３４に適宜入力される。Ａ／Ｄ変換回路１３１、ＣＰＵ１２０、フレームメモリ１３３、ＦＩＦＯメモリ１３２および記録バッファ１３４は、例えば内部バス１３０を介して相互に接続されている。
【００３７】
フレームメモリ１３３は、ＣＰＵ１２０によってデジタル信号処理された画像データ（この画像データに関する各種データ等を含んでもよい）をフレームごとに一時的に記憶する。このフレームメモリ１３３には、例えばＳＤＲＡＭ（Ｓｙｎｃｈｒｏｎｏｕｓ ＤＲＡＭ）等の半導体記憶素子等を適用することができる。
【００３８】
ＣＰＵ１２０は、主に、画像データや各種データを取り扱う信号処理制御を実行する複数の集積回路により構成され、Ａ／Ｄ変換回路１３１から入力されたデジタルの画像データに対して各種デジタル信号処理を実行する。即ち、ＣＰＵ１２０は、フレームメモリ１３３に一時的に記憶されている画像データに対し、各種信号処理を施す１つ以上の機能を実現する。この機能には、例えば、画像認識機能１２１、画像圧縮伸長機能１２２、色情報解析・再現機能１２３、被写体識別機能１２４、記録媒体アクセス機能１２５および撮影感度判定機能１２６等が存在する。
【００３９】
画像圧縮伸長機能１２２は、フレームメモリ１３３に記憶されている画像データ等を読み出して、例えばＪＰＥＧ圧縮処理等を行ったり記録媒体１３６から読み出された圧縮画像データの伸張処理を行ったりなどの各種処理を実行する。画像認識機能１２１は、画像データに含まれる色彩などの変化から画像中の特徴点を抽出し、この抽出結果に基づいて画像中の領域等を認識する。被写体識別機能１２４は、画像認識機能１２１によって認識された領域の配置等から画像中に含まれる被写体の形状等を識別する。色情報解析・再現機能１２３は、例えば、被写体識別機能１２４によって識別された被写体の各領域の色情報を特定し、この色もしくは模様のテクスチャを別の画像に含まれる同一被写体の対応領域にマッピングする。記録媒体アクセス機能１２５は、記録媒体インタフェース１３５による記録媒体１３６へのアクセスを制御する。撮影感度判定機能１２６は、Ａ／Ｄ変換回路１３１から出力されたデジタルの画像データから撮像素子１０２に入射する光学像の光量があらかじめ設定しておいた閾値（通常最低感度）より小さいか否かを判定する。なお、通常最低感度とは、撮影によって得られた画像信号に要求する明度や色彩等の最低限の値である。したがって、通常最低感度は、この通常最低感度以上の撮影感度が得られた場合にはフラッシュを必要とせずに十分な明度や色彩等の画像信号が得られる値に設定される。
【００４０】
ＦＩＦＯメモリ１３２は、表示対象とするフレームの画像信号を各種表示装置へ出力する際にこの画像信号を一時的にバッファする、いわゆるビデオメモリとして機能する。
【００４１】
なお、撮影装置１においては、上述のレンズ１０１、撮像素子１０２、撮像回路１０５、Ａ／Ｄ変換回路１３１、ＣＰＵ１２０およびフレームメモリ１３３を含む構成が、光学レンズ等からなる撮像光学系が撮像素子の受光面に結像した光学像を電気的な信号に変換して画像信号を生成する撮影手段を実現する。また、撮影装置１は、画像信号以外の情報、例えば音声信号等を取得するマイクロフォン等よりなる集音機能等を備えていてもよい。
【００４２】
ＴＦＴ液晶駆動回路１４１は、ＦＩＦＯメモリ１３２から例えば１ラインごとに出力される画像信号に基づいてＴＦＴ液晶パネル１４４を駆動する。ＴＦＴ液晶パネル１４４は、ＴＦＴ液晶駆動回路１４１によって駆動されることで、表示対象の画像や各種情報等を表示する。このＴＦＴ液晶パネル１４４には、カラー表示可能なパネルが用いられる。また、バックライトユニット１４３は、ＴＦＴ液晶パネル１４４の背面側に設けられ、ＴＦＴ液晶パネル１４４を背面側から照明する。
【００４３】
ビデオ出力回路１４２は、ＦＩＦＯメモリ１３２からの画像信号を例えばＮＴＳＣ（Ｎａｔｉｏｎａｌ Ｔｅｌｅｖｉｓｉｏｎ Ｓｙｓｔｅｍ Ｃｏｍｍｉｔｔｅｅ）形式のビデオ信号に変換する。また、ビデオ出力回路１４２は、変換したビデオ信号をビデオ出力端子１４５に接続された外部装置（例えば外部画像表示装置２０１等）へ出力する。なお、ビデオ出力端子１４５は、ビデオ信号の伝送媒体であるビデオケーブル等の信号線が接続される接続端子である。
【００４４】
また、本実施の形態１では、上述のＦＩＦＯメモリ１３２、ＴＦＴ液晶駆動回路１４１、ＴＦＴ液晶パネル１４４およびバックライトユニット１４３を含む構成が、撮像手段が生成した画像データを再生することで被写体の静止画または動画をユーザへ表示する表示手段を実現する。
【００４５】
記録バッファ１３４は、フレームメモリ１３３に一時的に保持されている画像信号等を記録媒体１３６に画像データとして記録するときや、記録媒体１３６から画像データを読み出してフレームメモリ１３３に一時的に保持させるとき等に用いられるバッファ（一時保存領域）である。
【００４６】
記憶媒体インタフェース（Ｉ／Ｆ）１３５は、記録媒体１３６への画像データ等の記憶処理や、記録媒体１３６からの画像データ等の読み出し処理等を制御するための回路である。
【００４７】
記録媒体１３６は、画像データやその他の各種データを記録するストレージである。この記録媒体１３６には、例えば薄板形状またはカード形状からなるメモリカード等の不揮発性の記憶媒体を用いることができる。なお、記録媒体１３６としては、撮影装置１等の機器に対して着脱自在のものや、撮影装置１等の機器内部の電気回路に固設されるもの等、如何なるものを適用してもよい。
【００４８】
また、上述の記録バッファ１３４、記憶媒体インタフェース１３５、記録媒体１３６を含む構成が、画像信号（画像データを含む）などの各種情報を記憶する記憶手段を実現する。
【００４９】
ＣＰＵ１１０は、主（メイン）ＣＰＵとして配設される。このＣＰＵ１１０は、撮影装置１内部の各回路を統括的に制御すると共に、各種機能を実現するために各構成部を制御する、いわゆるメイン制御手段として機能する。そこでＣＰＵ１１０は、撮影装置１内部の各構成部を適宜制御（コントロール）することでシステム全体を制御するシステムコントロール部１１０Ａを備えている。
【００５０】
システムコントロール部１１０Ａは、撮影装置１の動作を制御する各種機能を実現する。この機能としては、例えば、撮像部の画角を判定するカメラ撮影画角判定機能１１１、フラッシュモードのオン／オフを管理および制御するフラッシュ制御機能１１２、および、撮影装置１内部で時間を管理する時計機能１１３など存在する。また、この他にも、外部有線データＩ／Ｆ１６３を介してデータの入出力を制御する機能や、主電源である電池１７１の残量をＬＣＤパネル１６２等に表示する機能や、撮影手段にて撮影動作を実行する際の各種の撮影条件を設定する機能や、撮影動作により取得した画像信号と画像信号に関連する各種情報（関連情報データ）とを合わせて画像データを含む画像ファイルを生成する機能や、録音機能により取得される音声信号を音声ファイルとして管理する機能や、記録媒体に記録済みの各種データファイルに基いてアルバム機能や印刷機能を実行したり登録設定を行って各種登録設定データ等を生成しこれを記録媒体に記憶したりする機能や、生成された画像ファイルや音声ファイルや登録設定データ等を適切な形態で記録媒体１３６に記録する制御を行う機能や、画像ファイルに基づく画像や関連情報を表示手段に視覚的に表示させる機能や、音声ファイルに基づく音声をスピーカ等（図示せず）に出力させる機能など、撮影装置１における各種動作及び各種機能を制御するためのさまざまな機能がシステムコントロール部１１０Ａにおいて実現される。
【００５１】
なお、撮影装置１は、無線通信機能を備えた外部装置（図示せず）との間で無線による画像ファイル等のデータ信号の送受信を行うための無線通信機能を備えていてもよい。この無線通信機能を実現する方式には、例えば、ワイヤレスＵＳＢ（ＷＵＳＢ）方式や、超広帯域（ＵＷＢ）無線接続方式や、ＩｒＤＡ（Ｉｎｆｒａｒｅｄ Ｄａｔａ Ａｓｓｏｃｉａｔｉｏｎ）方式による光無線接続等が存在する。
【００５２】
アクチュエータ１０４は、レンズ１０１を駆動することで、自動焦点調節（オートフォーカス（ＡＦ））動作やズーミング動作等を行うための駆動源である。アクチュエータ駆動回路１０３は、ＣＰＵ１１０の制御に基づいてアクチュエータ１０４を駆動する回路である。
【００５３】
すなわち、アクチュエータ１０４及びアクチュエータ駆動回路１０３を含む構成は、レンズ１０１をその光軸に沿って移動させることで被写体像のオートフォーカス動作や変倍動作等を行うレンズ駆動手段として機能する。
【００５４】
また、ＥＥＰＲＯＭ１０７は、ＣＰＵ１１０、ＣＰＵ１２０により実行される処理プログラム（アプリケーションソフトウエア）等や、外部装置と通信するための通信設定情報等のデータ等、撮影装置１における各種の設定データや固有データ等を記憶し保持するための不揮発性記憶媒体であって、通信設定メモリとして機能する。このＥＥＰＲＯＭ１０７には、例えば電気的に消去可能な不揮発性メモリである公知のフラッシュロム（Ｆｌａｓｈ ＲＯＭ）等を適用することができる。
【００５５】
また、フラッシュ１０６は、撮影時に被写体を照明する光を放射する光源であり、例えばキセノンランプやＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）等で構成される。手ブレ補正用ジャイロセンサ１０８は、撮影装置１に生じているヨー方向およびピッチ方向の角速度を検出し、検出した角速度に基づき撮影装置１のブレを検出する。
【００５６】
キーマトリクス１５０は、ファーストレリーズ１５１やセカンドレリーズ１５２等、撮影装置１の各種操作スイッチや操作ボタン等を含む。なお、ファーストレリーズ１５１とは例えばユーザによるシャッタボタン（不図示）の半押しを検出するキーであり、セカンドレリーズ１５２とは例えばユーザによるシャッタボタンの全押しを検出するキーである。例えばファーストレリーズ１５１によってシャッタボタンの半押しが検出された場合、ＣＰＵ１１０によってオートフォーカス動作が実行される。一方、例えばセカンドレリーズ１５２によってシャッタボタンの全押しが検出された場合、ＣＰＵ１１０によって撮像動作が実行される。
【００５７】
また、キーマトリクス１５０に含まれるその他の操作部材には、例えば撮影装置１の電源状態をオン又はオフ状態に切り換える電源ボタン、撮影動作時には撮影倍率を変更するズームボタンとして機能し再生動作時には再生画像の拡大表示や縮小表示等の表示切換ボタンとして機能するズームボタン（ＴＷボタン）１５３、メニュー画面を呼び出す等の各種機能に割り当てられる複数の各種操作ボタン、メニュー画面等における選択設定を行う四方向選択キー（十字キーともいう）、各種操作ボタンを用いて選択した項目を決定指示するＯＫボタン等が含まれる。
【００５８】
そして、このキーマトリクス１５０には、上述の各種操作部材と、これら操作部材のそれぞれに連動して所定の指示信号を発生させるスイッチ部材や各スイッチ部材からの指示信号を伝達する電気回路等が含まれる。また、ユーザが操作することでキーマトリクス１５０が発生した各種指示信号は、ＣＰＵ１１０へ入力される。
【００５９】
ＬＣＤ表示回路１６１は、ＣＰＵ１１０からの制御に従ってＬＣＤパネル１６２を駆動することで、ＬＣＤパネル１６２に各種情報を表示させる。ＬＣＤパネル１６２は、例えば小型の液晶表示装置（ＬＣＤ）等によって構成され、ＬＣＤ表示回路１６１による駆動に応じて、撮影装置１において設定済みの撮影条件や、例えば撮影モード等の動作モード情報や記録媒体１３６に記憶可能な画像の枚数情報や撮影時のシャッタ速度や絞り値等の露出に関する情報等の各種設定情報を表示する。
【００６０】
外部有線データインタフェース（Ｉ／Ｆ）１６３は、撮影装置１と外部装置（図示せず）との間で画像データ等の伝送（送受信）を行うための接続インタフェースである。この外部有線データＩ／Ｆ１６３には、例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）規格やＩＥＥＥ１３９４規格等に準拠したインタフェースを適用することができる。本実施の形態では、ＵＳＢ規格に準拠したインタフェースを外部有線データＩ／Ｆ１６３として用いた場合を例に挙げる。
【００６１】
電池１７１は、撮影装置１における主（メイン）電源である。この電池１７１には、例えば乾電池等の一次電池や充電可能な蓄電池等の二次電池などが適用される。バックアップ電源１７２は、撮影装置１の内部メモリや内部時計等に対して常に電力を供給するために設けられた副（サブ）電源である。このバックアップ電源１７２からの電力は、例えば撮影装置１における各種設定値や日時情報等を保持したり日時情報をＬＣＤパネル１６２等に常時表示したりするための電力として用いられる。
【００６２】
電源回路１７３は、ＣＰＵ１１０からの制御に基づいて、電池１７１またはバックアップ電源１７２からの電力を撮影装置１内部の各電気回路へ適宜供給する。電池状態検出回路１７４は、電池１７１からの電源電圧などから電池１７１の残量などの状態を検出し、この検出結果をＣＰＵ１１０へ出力する。
【００６３】
その他、本発明に関連しない部分の構成については、通常一般のデジタルスチルカメラ等の撮影装置と略同様の構成であるものとして、その詳細な図示及び説明は省略する。
【００６４】
次に、図２および図３を参照して、本実施の形態１による撮影装置１の動作を詳細に説明する。ただし、以下の説明では、電子ファインダの一部として機能するＴＦＴ液晶パネル１４４に略リアルタイムに撮像素子１０２からの映像（以下、スルー画という）を表示する際の動作（カメラ撮影モード時の動作）に着目して説明する。その他の動作は、通常一般のデジタルスチルカメラ等の撮影装置と略同様の動作とすることが可能である。例えば、撮影装置１の起動後の主動作は、通常一般のデジタルスチルカメラ等の撮影装置と略同様である。したがって、以下では、説明の簡略化を目的として、その詳細な図示及び説明は省略する。
【００６５】
ユーザがキーマトリクス１５０中の電源ボタンやレンズカバー等を操作すると、撮影装置１は、主動作の流れにおいて図２に示すカメラ撮影モード時の動作を起動する（カメラ撮影モード管理ステップ）。なお、カメラ撮影モードとは、電子ファインダ（特にＴＦＴ液晶パネル１４４）に被写体の映像を表示するモードである。このカメラ撮影モードのオン／オフは、例えばＣＰＵ１１０において管理される。言い換えれば、ＣＰＵ１１０は、カメラ撮影モードのオン／オフを管理するカメラ撮影モード管理部として機能する。
【００６６】
カメラ撮影モード時の動作では、図２に示すように、撮影装置１は、まず、ＣＰＵ１１０の制御の下で初期化処理を実行する（ステップＳ１０１）。具体的には、例えばＣＰＵ１１０が、アクチュエータ駆動回路１０３よりアクチュエータ１０４を駆動してレンズ１０１を初期位置へ移動させると共に、撮像素子１０２をリフレッシュする。
【００６７】
次に撮影装置１は、ライブビュー撮影を実行する（ステップＳ１０２）。具体的には、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動して撮像素子１０２から電荷蓄積量に応じた電気信号を読み出してアナログの画像信号を生成し、この画像信号をＡ／Ｄ変換回路１３１に入力する。Ａ／Ｄ変換回路１３１は、入力されたアナログの画像信号に対してＡ／Ｄ変換処理を実行することでデジタルの画像データを生成する。Ａ／Ｄ変換された画像データは、内部バス１３０によるバスコントロールによって直接またはＣＰＵ１２０での所定のデジタル信号処理が施された後にＦＩＦＯメモリ１３２に入力される。一方で、ＣＰＵ１１０の制御の下でＴＦＴ液晶駆動回路１４１を駆動することで、ＦＩＦＯメモリ１３２から１ラインごとに画像データを読み出し、これをＴＦＴ液晶パネル１４４に入力する。この際、ＣＰＵ１１０はバックライトユニット１４３を点灯しておく。これにより、電子ファインダの一部であるＴＦＴ液晶パネル１４４には、撮像素子１０２から読み出された画像データによる映像が略リアルタイムにスルー画として表示される。
【００６８】
次に撮影装置１は、ステップＳ１０２のライブビュー撮影において生成した画像データから撮像素子１０２での撮影感度があらかじめ設定しておいた通常最低感度よりも小さいか否かを判定する（ステップＳ１０３）。具体的には、Ａ／Ｄ変換回路１３１から出力されたデジタルの画像データが内部バス１３０の制御の下でＣＰＵ１２０に入力される。ＣＰＵ１２０は、撮影感度判定機能１２６を起動し、これを動作させることで、入力された画像データから撮像素子１０２に入射する光学像の光量を算出し、この算出値より求まる撮影感度があらかじめ設定しておいた通常最低感度より小さいか否かを判定する。
【００６９】
ステップＳ１０３の判定の結果、撮影感度が通常最低感度以上である場合（ステップＳ１０３のＮｏ）、撮影装置１は、通常ライブビューモードへ移行し、この動作を実行する（ステップＳ１０４）。通常ライブビューモードでは、撮像素子１０２から得られた画像信号が、Ａ／Ｄ変換回路１３１およびＦＩＦＯメモリ１３２を介してＴＦＴ液晶駆動回路１４１に入力される。したがって、ＴＦＴ液晶パネル１４４には、そのままの画像がスルー画として表示される。
【００７０】
一方、ステップＳ１０３の判定の結果、撮影感度が通常最低感度よりも小さい場合（ステップＳ１０３のＹｅｓ）、撮影装置１は、疑似カラーライブビューモードへ移行し、この動作を実行する（ステップＳ１０５）。なお、疑似カラーライブビューモードの詳細については、以下に図３と共に触れる。
【００７１】
ステップＳ１０４の通常ライブビューモードまたはステップＳ１０５の疑似カラーライブビューモード時の動作を実行後、撮影装置１は、主動作へリターンする。
【００７２】
次に、図２のステップＳ１０５に示す疑似カラーライブビューモード時の動作について、図３を用いて詳細に説明する。疑似カラーライブビューモード時の動作では、図３に示すように、撮影装置１は、まず、ＣＰＵ１１０の制御の下でズーム倍率をワイド端に設定する（ステップＳ１１１）。すなわち、レンズ１０１を含む光学系は、撮像部が画像データ（第１画像データ）を生成する際、ズーム倍率をワイド端に設定する。具体的には、例えばＣＰＵ１１０が、アクチュエータ駆動回路１０３よりアクチュエータ１０４を駆動してレンズ１０１をワイド端へ移動する。これにより、撮像素子１０２の受光面には、撮影装置１のスペックにおいて最も広角な光学像が結像される。
【００７３】
次に撮影装置１は、ＣＰＵ１１０の特にフラッシュ制御機能１１２の制御の下でフラッシュ１０６を駆動する（ステップＳ１１２）。これにより、少なくとも撮影装置１の撮影範囲が照明されると共に、撮像素子１０２の受光面に色情報を再現するのに十分な光量の光学像が結像される。
【００７４】
続いて撮影装置１は、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動することで、撮像素子１０２から画像信号を読み出す（ステップＳ１１３：第１撮像ステップ）。この際、ステップＳ１１２の制御によってフラッシュ１０６が駆動されているため、撮像素子１０２には十分な光量の光学像が結像される。したがって、撮像素子１０２から読み出された画像ＩＭ０の画像信号は、図４に示すように被写体ＯＢ０や背景ＢＫ０の色を再現するのに十分な信号強度（色情報）を持つ。なお、図４は、フラッシュ１０６を駆動した際に取得される画像ＩＭ０の一例を示す図である。また、読み出された画像信号は、Ａ／Ｄ変換回路１３１に入力されてＡ／Ｄ変換処理された後、デジタルの画像データ（第１画像データ）として内部バス１３０に出力される。内部バス１３０は、所定のバスコントロールに従って、デジタルの画像データをＣＰＵ１２０に入力する。
【００７５】
このように本実施の形態では、照明部および撮像部が、ＣＰＵ１１０（カメラ撮影モード管理部）がカメラ撮影モードをオンにした際、少なくとも１回、前記被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成する。
【００７６】
次に撮影装置１は、ＣＰＵ１２０に入力された画像データに対し、これに含まれる被写体（またはその領域）ごとの色情報（第１色情報）を抽出し、これを例えば不図示のキャッシュメモリ等に記憶しておく（ステップＳ１１４：色情報解析ステップ）。具体的には、ＣＰＵ１２０は、まず画像認識機能１２１を呼出し、この画像認識機能１２１に、画像データに含まれる色の成分および階調などから画像中の特徴点を抽出させ、この抽出結果に基づいて画像中の領域等を認識させる。続いてＣＰＵ１２０は、被写体識別機能１２４を呼出し、この被写体識別機能１２４に、画像認識機能１２１によって認識された領域の配置等から画像中に含まれる被写体の形状等を識別させる（被写体識別ステップ）。続いてＣＰＵ１２０は、色情報解析・再現機能１２３を呼出し、この色情報解析・再現機能１２３に、被写体識別機能１２４によって識別された被写体の各領域の色情報を特定させる。これにより得られた被写体の各領域の色情報は、上述したように不図示のキャッシュメモリ等に記憶される。なお、記憶される色情報には、被写体の形状の情報、例えば色の領域の情報も含まれている。
【００７７】
次に撮影装置１は、ＣＰＵ１１０の制御の下でアクチュエータ駆動回路１０３よりアクチュエータ１０４を駆動することで、レンズ１０１を初期位置へ戻す（ステップＳ１１５）。
【００７８】
次に撮影装置１は、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動することで、撮像素子１０２から画像信号をスルー画（第２画像データ）として読み出す（ステップＳ１１６：第２撮像ステップ）。この際、フラッシュ１０６は駆動されていないため、撮像素子１０２の受光面に結像される光学像の光量は小さい。したがって、撮像素子１０２から読み出されたカラー補正前のスルー画ＩＭ１の画像信号の信号強度（色情報）は、図５（ａ）に示すように被写体ＯＢ１や背景ＢＫ１の色を再現するのには十分でない信号強度（色情報）となる。なお、図５は、本実施の形態によるカラー補正前のスルー画ＩＭ１とカラー補正後のスルー画ＩＭ２（図５（ｂ）参照）とを示す図である。また、図５（ａ）における被写体ＯＢ１ならびに背景ＢＫ１の実体は、図４および図５（ｂ）における被写体ＯＢ０およびＯＢ２ならびに背景ＢＫ０およびＢＫ２の実体と同一である。さらに、ステップＳ１１６で読み出された画像信号は、Ａ／Ｄ変換回路１３１に入力されたＡ／Ｄ変換処理された後、デジタルの画像データとして内部バス１３０に入力される。内部バス１３０は、所定のバスコントロールに従って、デジタルの画像データをＣＰＵ１２０に入力する。
【００７９】
次に撮影装置１は、ＣＰＵ１２０に入力された画像データの画像解析を実行する（ステップＳ１１７）。なお、説明の都合上、本ステップＳ１１７で解析対象とする画像データをスルー画データといい、これによる画像をスルー画という。ステップＳ１１７では、具体的には、ＣＰＵ１２０は、まず画像認識機能１２１を呼出し、この画像認識機能１２１に、スルー画データに含まれる色の成分および階調などから画像中の特徴点を抽出させ、この抽出結果に基づいて画像中の領域等を認識させる。続いてＣＰＵ１２０は、被写体識別機能１２４を呼出し、この被写体識別機能１２４に、画像認識機能１２１によって認識された領域の配置等からスルー画中に含まれる被写体の形状等を識別させる。
【００８０】
次に撮影装置１は、ステップＳ１１４で記憶しておいた被写体（またはその領域）ごとの色情報（第１色情報）を読み出し、読み出した色情報とステップＳ１１７の画像解析で特定した被写体（またはその領域）とを照合する（ステップＳ１１８）。具体的には、ＣＰＵ１２０は、色情報解析・再現機能１２３を呼出すと共に、ステップＳ１１４で記憶しておいた被写体（またはその領域）ごとの色情報を読み出し、色情報解析・再現機能１２３に、本ステップＳ１１７で被写体識別機能１２４が識別した被写体（またはその領域）ごとの色情報を特定させる。
【００８１】
被写体（またはその領域）ごとの色情報の特定は、例えば、ステップＳ１１４の画像データと本ステップＳ１１７のスルー画データとの間で各領域の動きベクトルを算出し、この動きベクトルに基づいて画像データとスルー画との間で対応する領域を特定し、この対応する領域の色情報をステップＳ１１４で記憶した色情報から特定することで実現することができる。
【００８２】
次に撮影装置１は、ステップＳ１１８で特定した被写体（またはその領域）ごとの色情報（第１色情報）に基づいて、ステップＳ１１６でスルー画として読み出した画像データに含まれる被写体（またはその領域）ごとの色情報（第２色情報）を補正する（ステップＳ１１９：色情報補正ステップ）。これにより、図５（ａ）に示すカラー補正前のスルー画ＩＭ１から図５（ｂ）に示すカラー補正後のスルー画ＩＭ２のように、電子ファインダの一部であるＴＦＴ液晶パネル１４４に表示されるスルー画がカラー補正される（再生ステップ）。なお、ここで各被写体（またはその領域）の補正後の色情報は、画像データにおける各領域の平均色の情報や、ステップＳ１１４で特定した被写体（またはその領域）の色彩をそのままテクスチャとして用いた情報など、種々変形することが可能である。また、カラー補正後のスルー画データは、内部バス１３０を介してＦＩＦＯメモリ１３２に一旦バッファされる。その後、ＣＰＵ１１０の制御の下にＴＦＴ液晶駆動回路１４１が駆動されてＦＩＦＯメモリ１３２から１ラインごとにスルー画データが読み出され、このスルー画データに基づいてＴＦＴ液晶パネル１４４が駆動される。これにより、カラー補正後のスルー画ＩＭ２（図５（ｂ）参照）がＴＦＴ液晶パネル１４４に表示される。
【００８３】
その後、撮影装置１は、撮影装置１自身の姿勢（言い換えれば、撮像素子１０２の向き）であるカメラ姿勢情報を検出する（ステップＳ１２０：姿勢検出ステップ）。すなわち、本実施の形態による撮影装置１は、撮像部の向きの変化を検出する姿勢検出部を備える。このカメラ姿勢情報の検出は、例えばステップＳ１１６で取り込んだスルー画データから撮影装置１のカメラ姿勢を特定してその姿勢が大きく変わったかを判定する方法や、撮影装置１内に設けられている手ブレ補正用ジャイロセンサ１０８（図１参照）を姿勢検出に使用して撮影装置１の姿勢を検出する方法など、種々の方法で実現することが可能である。
【００８４】
次に撮影装置１は、カメラ姿勢情報があらかじめ定めておいたリミット（閾値）を超えたか否か、すなわち撮影装置１の撮影方向の向きや撮像素子１０２に結像された光学像の構図が大きく変わったか否かを判定し（ステップＳ１２１）、カメラ姿勢の変化がリミットを超えていた場合（ステップＳ１２１のＹｅｓ）、ステップＳ１１１へ帰還して、再度、フラッシュ１０６を駆動した際の画像データから被写体（またはその領域）ごとの色情報を取得する。
【００８５】
すなわち、本実施の形態１では、照明部および撮像部は、姿勢検出部が撮像部の向きの変化を検出した場合、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成し、これの色情報（第１色情報）を取得する。
【００８６】
ただし、本発明は、上記のカメラ姿勢が変化した場合に限らず、例えばズーム倍率または画角が手動または自動で変更された場合などを検出した際に、照明部および撮像部が、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成し、これの色情報（第１色情報）を取得するように構成してもよい。
【００８７】
一方、ステップＳ１２１の判定の結果、リミットを超えたカメラ姿勢の変化が無ければ（ステップＳ１２１のＮｏ）、撮影装置１は、カラー補正後のスルー画をＴＦＴ液晶パネル１４４に表示する動作の終了指示が例えばキーマトリクス１５０から入力された否かを判定し（ステップＳ１２２）、このスルー画表示の終了指示が入力されていない場合（ステップＳ１２２のＮｏ）、ステップＳ１１６へ帰還して、新たなスルー画を取得し、これをカラー補正した後、カラー補正後のスルー画をＴＦＴ液晶パネル１４４に表示する。これにより、電子ファインダの一部であるＴＦＴ液晶パネル１４４にはカラー補正後のスルー画がライブビュー映像として表示される。一方、スルー画表示の終了指示が入力されていた場合（ステップＳ１２２のＹｅｓ）、撮影装置１は、図２のカメラ撮影モード時の動作へリターンする。
【００８８】
以上で説明したように、本実施の形態１では、背景を含む被写体の色を再現するのには十分でない信号強度のスルー画データ（第２画像データ）の色情報（第２色情報）が、背景を含む被写体の色を再現するのに十分な信号強度の画像データ（第１画像データ）の色情報（第１色情報）でカラー補正される。この結果、本実施の形態では、低照度環境下であっても電子ファインダを介してユーザにリアルな被写体の映像を表示することが可能となる。
【００８９】
また、フラッシュ１０６を駆動したときの画像と同様の画像を電子ファインダに表示することが可能となるため、画像を取り込む際の画像と取り込まれた画像との色合いの差を低減することが可能である。この結果、暗所でもユーザに違和感の少ない操作性を提供することが可能となる。
【００９０】
なお、ＣＰＵ１２０における被写体識別機能１２４は、画像データ（第１画像データ）およびスルー画データ（第２画像データ）に含まれる被写体を識別する被写体識別部として機能する。そこで、色情報抽出部は、被写体識別部によって識別された画像データ（第１画像データ）中の被写体ごとに色情報（第１色情報）を解析する。また、色情報補正部は、被写体識別部によって識別されたスルー画データ（第２画像データ）中の被写体ごとに色情報（第２色情報）を画像データ（第１画像データ）の色情報（第１色情報）で補正する。
【００９１】
（変形例１−１）
なお、被写体の色情報の更新は、カメラ姿勢の変化がリミットを超えた場合（図３のステップＳ１２１のＹｅｓ）に限るものではない。例えばユーザが特定の被写体をねらった際にその被写体の色情報を更新するように構成してもよい。以下、この場合を本実施の形態１の変形例１−１として説明する。なお、被写体をねらった際とは、例えばファーストレリーズ１５１がシャッタボタンの半押しを検出した際などである。
【００９２】
図６は、本変形例１−１による疑似カラーライブビューモード時の概略動作を示すフローチャートである。なお、撮影装置１の構成ならびにその主動作およびカメラ撮影モード時の動作は、上記実施の形態１と同様であるため、ここでは詳細な説明を省略する。
【００９３】
図６に示すように、本変形例１−１による疑似カラーライブビューモード時の動作では、撮影装置１は、まず、図３に示す疑似カラーライブビューモード時の動作のステップＳ１１１〜Ｓ１２１と同様に、レンズ１０１をワイド端に設定した状態で取得した画像データからこれに含まれる被写体（またはその領域）ごとの色情報を取得して記憶しておき、その後、順次取得したスルー画に含まれる被写体（またはその領域）の色を記憶しておいた色情報を用いてカラー補正する。
【００９４】
次に撮影装置１は、キーマトリクス１５０におけるファーストレリーズ１５１がシャッタボタン（不図示）の半押しを検出したか否かを判定し（ステップＳ１３１）、半押しを検出した場合（ステップＳ１３１のＹｅｓ）、オートフォーカス（ＡＦ）のターゲットとなる被写体に対して最適な発光量となるようにＣＰＵ１１０の特にフラッシュ制御機能１１２の制御の下でフラッシュ１０６を駆動する（ステップＳ１３２）。具体的には、通常のオートフォーカス動作と同様の動作にて撮像範囲に含まれる被写体を特定し、これに対して最適となるフラッシュ１０６の発光量をあらかじめ登録しておいた発光量を管理するテーブルから取得する。
【００９５】
なお、オートフォーカス動作は、ＣＰＵ１１０のフラッシュ制御機能１１２およびＣＰＵ１２０とアクチュエータ駆動回路１０３とアクチュエータ１０４とを含むオートフォーカス部によって実行される。すなわち、ＣＰＵ１２０における画像解析により被写体を特定し、この特定した被写体にレンズ１０１の焦点が合うように、ＣＰＵ１１０のフラッシュ制御機能１１２が自動的にアクチュエータ駆動回路１０３を駆動してアクチュエータ１０４の光軸上の位置を制御する。
【００９６】
また、オートフォーカス部のオン／オフは、ファーストレリーズ１５１がシャッタボタン（不図示）の半押しを検出したか否かによって切り替えられる。すなわち、キーマトリクス１５０におけるファーストレリーズ１５１およびＣＰＵ１１０は、オートフォーカス部のオン／オフを切り替える切替部として機能する。
【００９７】
以上のように、被写体に対する最適な発光量を取得すると、その後、ＣＰＵ１１０のフラッシュ制御機能１１２は、特定した発光量にてフラッシュ１０６を駆動する。なお、ステップＳ１３１の判定の結果、ファーストレリーズ１５１によって半押しが検出されなかった場合（ステップＳ１３１のＮｏ）、撮影装置１はステップＳ１２２へ移行する。
【００９８】
次に撮影装置１は、ＣＰＵ１１０の制御の下で撮像回路１０５を駆動することで、撮像素子１０２から画像信号を読み出す（ステップＳ１３３）。この際、ステップＳ１３２の制御によってフラッシュ１０６が駆動されているため、撮像素子１０２には十分な光量の光学像が結像される。したがって、撮像素子１０２から読み出された画像の画像信号は、図４に示す場合と同様に、被写体や背景の色を再現するのに十分な信号強度を持つ。また、読み出された画像信号は、Ａ／Ｄ変換回路１３１に入力されてＡ／Ｄ変換処理された後、デジタルの画像データとして内部バス１３０に出力される。内部バス１３０は、所定のバスコントロールに従って、デジタルの画像データをＣＰＵ１２０に入力する。
【００９９】
次に撮影装置１は、ステップＳ１１４と同様に、ＣＰＵ１２０に入力された画像データに対し、これに含まれる被写体（またはその領域）ごとの色情報を抽出し、これを例えば不図示のキャッシュメモリ等に記憶しておく（ステップＳ１３４）。その後、撮影装置１は、ステップＳ１１６へ帰還する。
【０１００】
以上のように、本変形例１−１では、照明部および撮像部は、オートフォーカス部がオンに切り替えられた場合、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成して色情報（第１色情報）を取得する。これにより、ユーザが被写体として最も正しく色を識別したいと思っているものに対して、より正しい色情報を表示することが可能となる。
【０１０１】
なお、その他の構成および動作ならびに効果は、上記した実施の形態１またはその変形例と同様である。
【０１０２】
（変形例１−２）
さらに、例えば画像に含まれる被写体の向きが変わったり被写体そのものが別の被写体に換わったりした際に被写体の色情報を更新するように構成してもよい。以下、この場合を本実施の形態１の変形例１−２として説明する。
【０１０３】
図７は、本変形例１−２による疑似カラーライブビューモード時の概略動作を示すフローチャートである。なお、撮影装置１の構成ならびにその主動作およびカメラ撮影モード時の動作は、上記実施の形態１と同様であるため、ここでは詳細な説明を省略する。
【０１０４】
図７に示すように、本変形例１−２による疑似カラーライブビューモード時の動作では、撮影装置１は、まず、図３に示す疑似カラーライブビューモード時の動作のステップＳ１１１〜Ｓ１２１と同様に、レンズ１０１をワイド端に設定した状態で取得した画像データからこれに含まれる被写体（またはその領域）ごとの色情報を取得して記憶しておき、その後、順次取得したスルー画に含まれる被写体（またはその領域）の色を記憶しておいた色情報を用いてカラー補正する。
【０１０５】
次に撮影装置１は、ステップＳ１１６で取得したスルー画データに含まれる被写体とステップＳ１１３で取得した画像データに含まれる被写体との類似度を認識する（ステップＳ１４１）。具体的には、ステップＳ１１６で取得したスルー画データを内部バス１３０を介してＣＰＵ１２０に入力する。ＣＰＵ１２０は、スルー画データが入力されると、まず画像認識機能１２１を呼出し、この画像認識機能１２１に、画像データに含まれる色の成分および階調などから画像中の特徴点を抽出させ、この抽出結果に基づいて画像中の領域等を認識させる。続いてＣＰＵ１２０は、被写体識別機能１２４を呼出し、この被写体識別機能１２４に、画像認識機能１２１によって認識された領域の配置等から画像中に含まれる被写体の形状等を識別させる。続いてＣＰＵ１２０は、色情報解析・再現機能１２３を呼出し、この色情報解析・再現機能１２３に、被写体識別機能１２４によって識別されたスルー画データに含まれる被写体の形状等とステップＳ１１４で色情報と共に記憶しておいた画像データに含まれる被写体の形状等とを比較させ、この比較結果から類似度（または相関度であってもよい）を認識する。
【０１０６】
次に撮影装置１は、ステップＳ１４１で認識した類似度があらかじめ設定しておいた閾値を超えたか否かを判定し（ステップＳ１４２：変化判定ステップ）、閾値を超えた場合（ステップＳ１４２のＹｅｓ）、上述した変形例１−１において図６のステップＳ１３２〜Ｓ１３４を用いて説明した動作と同様に、フラッシュ１０６を駆動しつつ画像データを取り出し、この画像データに含まれる色情報を取得して記憶しておく。その後、撮影装置１は、ステップＳ１１６へ帰還する。なお、ステップＳ１４２の判定の結果、類似度が閾値以下であった場合（ステップＳ１４２のＮｏ）、撮影装置１は、撮影装置１はステップＳ１２２へ移行する。
【０１０７】
すなわち、本変形例では、ＣＰＵ１２０における画像認識機能１２１、被写体識別機能１２４および色情報解析・再現機能１２３を含む構成が、スルー画データ（第２画像データ）中の被写体が変化したか否かを判定する変化判定部として機能する。
【０１０８】
以上のように、本変形例１−２では、照明部および撮像部は、スルー画データ（第２画像データ）中の被写体が変化したと変化判定部が判定した場合、少なくとも１回、被写体を照明しつつ照明された被写体の光学像から画像データ（第１画像データ）を生成して色情報（第１色情報）を取得する。これにより、スルー画中の被写体が大きく変化したときなど、被写体の色情報を補正し難くなった際に自動的に色情報を更新することが可能となる。
【０１０９】
なお、その他の構成および動作ならびに効果は、上記した実施の形態１またはその変形例と同様である。
【０１１０】
＜実施の形態２＞
また、上記した実施の形態１では、ユーザの意識に関わらず自動的にフラッシュ１０６が発光する。ただし、撮影状況によっては、ユーザが意図しないタイミングでフラッシュ１０６が発光することを回避したい場合や、フラッシュ１０６の発光自体を避けたい場合などが存在する。このような場合に対応するには、例えば、撮影装置１のフラッシュモードがオンに設定されている場合に上記実施の形態１に示した疑似カラーライブビューモードが実行されるように構成するとよい。以下、この場合を本発明の実施の形態２として図面を用いて詳細に説明する。なお、フラッシュモードとは、撮影時、すなわちセカンドレリーズ１５２がシャッタボタンの全押しを検出した際にフラッシュ１０６を駆動して被写体を照明する動作を実行するモードである。また、以下において、上記実施の形態１またはその変形例と同様の構成および動作については、簡略化のため、その詳細な説明を省略する。
【０１１１】
本実施の形態２による撮影装置は、上記実施の形態１で例示した撮影装置１と同様の構成とすることができる。このため、本実施の形態２では、撮影装置１を引用して説明する。
【０１１２】
図８は、本実施の形態２による撮影装置１のカメラ撮影モード時の概略動作を示すフローチャートである。図８に示すように、ユーザがキーマトリクス１５０中の電源ボタンやレンズカバー等を操作すると、撮影装置１は、上記実施の形態１において図２のステップＳ１０１〜Ｓ１０３を用いて説明したカメラ撮影モード時の動作と同様の動作を実行することで、現在の撮影感度が通常最低感度として設定した閾値よりも小さいか否かを判定する。
【０１１３】
ステップＳ１０３の判定の結果、撮影感度が通常最低感度以上である場合（ステップＳ１０３のＮｏ）、撮影装置１は、通常ライブビューモードへ移行し、この動作を実行する（ステップＳ１０４）。一方、ステップＳ１０３の判定の結果、撮影感度が通常最低感度よりも小さい場合（ステップＳ１０３のＹｅｓ）、撮影装置１は、フラッシュモードがオンに設定されているか否かを判定する（ステップＳ２０１）。この判定は、例えばＣＰＵ１１０のフラッシュ制御機能１１２がＥＥＰＲＯＭ１０７等に格納されている撮影装置１の設定データを参照することで実行することが可能である。
【０１１４】
ステップＳ２０１の判定の結果、フラッシュモードがオンに設定されている場合（ステップＳ２０１のＹｅｓ）、撮影装置１は、疑似カラーライブビューモードへ移行し、この動作を実行する（ステップＳ１０５）。一方、フラッシュモードがオンに設定されていない場合（ステップＳ２０１のＮｏ）、撮影装置１は、通常ライブビューモードへ移行し、この動作を実行する（ステップＳ１０４）。なお、疑似カラーライブビューモード時の動作および通常ライブビューモード時の動作については、上記実施の形態１またはその変形例と同様であるため、ここでは詳細な説明を省略する。また、疑似カラーライブビューモードへ移行後または通常ライブビューモードへ移行後、撮影装置１は、主動作へリターンする。
【０１１５】
なお、フラッシュモードには、例えば撮影感度判定機能１２６において判定された撮影感度が通常最低感度を下回ったか否かに基づいて自動的に移行したり、ユーザの操作によって手動で移行したりする。このフラッシュモードのオン／オフは、例えばＣＰＵ１１０のフラッシュ制御機能１１２において管理される（フラッシュモード管理ステップ）。言い換えれば、ＣＰＵ１１０のフラッシュ制御機能１１２は、フラッシュモードのオン／オフを管理するフラッシュモード管理部として機能する。
【０１１６】
以上のように、本実施の形態２では、照明部および撮像部は、ＣＰＵ１１０（フラッシュモード管理部）がフラッシュモードをオンにしている場合、画像データ（第１画像データ）を生成して色情報（第１色情報）を取得する。これにより、フラッシュ１０６の駆動が必要でない、もしくは、フラッシュ１０６を駆動したくないときに、自動的にフラッシュ１０６が駆動されることを回避することが可能となる。
【０１１７】
なお、その他の構成および動作ならびに効果は、上記した実施の形態１またはその変形例と同様である。
【０１１８】
また、上記実施の形態は本発明を実施するための例にすぎず、本発明はこれらに限定されるものではなく、仕様等に応じて種々変形することは本発明の範囲内であり、更に本発明の範囲内において、他の様々な実施の形態が可能であることは上記記載から自明である。例えば、上記各実施の形態およびその変形例では、色情報が全体的に欠落または低減してしまう低照明環境下（例えば暗所）等での撮影をする際にカラー補正をする場合を例に挙げたが、本発明はこれに限定されず、例えば水中などのような色成分の一部が欠落または低減してしまう環境下での撮影においても本発明を適用できる。
【図面の簡単な説明】
【０１１９】
【図１】本発明の実施の形態１による撮影装置の概略内部構成例を示すブロック図である。
【図２】本発明の実施の形態１による撮影装置のカメラ撮影モード時の概略動作を示すフローチャートである。
【図３】本発明の実施の形態１による疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【図４】本発明の実施の形態１においてフラッシュを駆動した際に取得される画像の一例を示す図である。
【図５】本発明の実施の形態１によるカラー補正前のスルー画とカラー補正後のスルー画とを示す図である。
【図６】本発明の実施の形態１の変形例１−１による疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【図７】本発明の実施の形態１の変形例１−２による疑似カラーライブビューモード時の概略動作を示すフローチャートである。
【図８】本発明の実施の形態２による撮影装置のカメラ撮影モード時の概略動作を示すフローチャートである。
【符号の説明】
【０１２０】
１ 撮影装置
１０１ レンズ
１０２ 撮像素子
１０３ アクチュエータ駆動回路
１０４ アクチュエータ
１０５ 撮像回路
１０６ フラッシュ
１０７ ＥＥＰＲＯＭ
１０８ 手ブレ補正用ジャイロセンサ
１１０、１２０ ＣＰＵ
１１０Ａ システムコントロール部
１１１ カメラ撮影画角判定機能
１１２ フラッシュ制御機能
１１３ 時計機能
１２１ 画像認識機能
１２２ 画像圧縮伸長機能
１２３ 色情報解析・再現機能
１２４ 被写体識別機能
１２５ 記録媒体アクセス機能
１２６ 撮影感度判定機能
１３０ 内部バス
１３１ Ａ／Ｄ変換回路
１３２ ＦＩＦＯメモリ
１３３ フレームメモリ
１３４ 記録バッファ
１３５ 記録媒体インタフェース
１３６ 記録媒体
１４１ ＴＦＴ液晶駆動回路
１４２ ビデオ出力回路
１４３ バックライトユニット
１４４ ＴＦＴ液晶パネル
１４５ ビデオ出力端子
１５０ キーマトリクス
１５１ ファーストレリーズ
１５２ セカンドレリーズ
１５３ ズームボタン
１６１ ＬＣＤ表示回路
１６２ ＬＣＤパネル
１６３ 外部有線データＩ／Ｆ
１７１ 電池
１７２ バックアップ電源
１７３ 電源回路
１７４ 電池状態検出回路
２０１ 外部画像表示装置
ＢＫ０、ＢＫ１、ＢＫ２ 背景
ＩＭ０ 画像
ＩＭ１ カラー補正前のスルー画
ＩＭ２ カラー補正後のスルー画
ＯＢ０、ＯＢ１、ＯＢ２ 被写体
【特許請求の範囲】
【請求項１】
撮像範囲中の被写体の光学像から画像データを生成する撮像部と、前記被写体を照明する照明部と、前記撮像部で生成された前記被写体の画像データを再生する電子ファインダと、を備えた撮影装置であって、
前記照明部によって照明された前記被写体の光学像から前記撮像部が生成した第１画像データに含まれる第１色情報を解析する色情報解析部と、
前記照明部が駆動されていない際に前記撮像部が前記被写体の光学像から生成した第２画像データの第２色情報を前記第１色情報で補正する色情報補正部と、
を備え、
前記電子ファインダは、前記第２色情報が補正された前記第２画像データを再生することを特徴とする撮影装置。
【請求項２】
前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別部を備え、
前記色情報解析部は、前記被写体識別部によって識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、
前記色情報補正部は、前記被写体識別部によって識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴とする請求項１記載の撮影装置。
【請求項３】
前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを管理するカメラ撮影モード管理部を備え、
前記照明部および前記撮像部は、前記カメラ撮影モード管理部が前記カメラ撮影モードをオンにした際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１または２記載の撮影装置。
【請求項４】
前記撮像部の向きの変化を検出する姿勢検出部を備え、
前記照明部および前記撮像部は、前記姿勢検出部が前記撮像部の向きの変化を検出した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜３のいずれか一つに記載の撮影装置。
【請求項５】
前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、
前記光学系は、前記撮像部が前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴とする請求項１〜４のいずれか一つに記載の撮影装置。
【請求項６】
前記撮像部に入射する光学像の画角を変更可能な光学系を備え、
前記照明部および前記撮像部は、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜５のいずれか一つに記載の撮影装置。
【請求項７】
前記撮像部に入射する光を集光する光学系と、
前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、
前記オートフォーカス部のオン／オフを切り替える切替部と、
を備え、
前記照明部および前記撮像部は、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜６のいずれか一つに記載の撮影装置。
【請求項８】
前記第２画像データ中の被写体が変化したか否かを判定する変化判定部を備え、
前記照明部および前記撮像部は、前記第２画像データ中の被写体が変化したと前記変化判定部が判定した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜７のいずれか一つに記載の撮影装置。
【請求項９】
前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理部を備え、
前記照明部および前記撮像部は、前記フラッシュモード管理部が前記フラッシュモードをオンにしている場合、前記第１画像データを生成することを特徴とする請求項１〜８のいずれか一つに記載の撮影装置。
【請求項１０】
撮像部と照明部と電子ファインダとを備えた撮影装置の前記電子ファインダに前記撮像部の撮像範囲に含まれる被写体の映像を表示するライブビュー表示方法であって、
前記照明部を駆動しつつ前記撮像部を駆動することで照明された前記被写体の光学像から第１画像データを生成する第１撮像ステップと、
前記第１画像データに含まれる第１色情報を解析する色情報解析ステップと、
前記照明部が駆動されていない際に前記撮像部を駆動することで前記被写体の光学像から第２画像データを生成する第２撮像ステップと、
前記第２画像データの第２色情報を前記第１色情報で補正する色情報補正ステップと、
前記第２色情報が補正された前記第２画像データを前記電子ファインダに再生する再生ステップと、
を含むことを特徴とするライブビュー表示方法。
【請求項１１】
前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別ステップを含み、
前記色情報解析ステップは、前記被写体識別ステップにおいて識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、
前記色情報補正ステップは、前記被写体識別ステップにおいて識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴とする請求項１０記載のライブビュー表示方法。
【請求項１２】
前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを切り替えるカメラ撮影モード管理ステップを含み、
前記第１撮像ステップは、前記カメラ撮影モード管理ステップにおいて前記カメラ撮影モードがオンに切り替えられた際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０または１１記載のライブビュー表示方法。
【請求項１３】
前記撮像部の向きの変化を検出する姿勢検出ステップを含み、
前記第１撮像ステップは、前記姿勢検出ステップにおいて前記撮像部の向きの変化が検出された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１２のいずれか一つに記載のライブビュー表示方法。
【請求項１４】
前記撮影装置は、前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、
前記第１撮像ステップは、前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴とする請求項１０〜１３のいずれか一つに記載のライブビュー表示方法。
【請求項１５】
前記撮影装置は、前記撮像部に入射する光学像の画角を変更可能な光学系を備え、
前記第１撮像ステップは、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１４のいずれか一つに記載のライブビュー表示方法。
【請求項１６】
前記撮影装置は、前記撮像部に入射する光を集光する光学系と、前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、前記オートフォーカス部のオン／オフを切り替える切替部と、を備え、
前記第１撮像ステップは、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１５のいずれか一つに記載のライブビュー表示方法。
【請求項１７】
前記第２画像データ中の被写体が変化したか否かを判定する変化判定ステップを含み、
前記第１撮像ステップは、前記変化判定ステップにおいて前記第２画像データ中の被写体が変化したと判定された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１６のいずれか一つに記載のライブビュー表示方法。
【請求項１８】
前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理ステップを含み、
前記第１撮像ステップは、前記フラッシュモード管理ステップにおいて前記フラッシュモードがオンに管理されている場合、前記第１画像データを生成することを特徴とする請求項１０〜１７のいずれか一つに記載のライブビュー表示方法。
【請求項１】
撮像範囲中の被写体の光学像から画像データを生成する撮像部と、前記被写体を照明する照明部と、前記撮像部で生成された前記被写体の画像データを再生する電子ファインダと、を備えた撮影装置であって、
前記照明部によって照明された前記被写体の光学像から前記撮像部が生成した第１画像データに含まれる第１色情報を解析する色情報解析部と、
前記照明部が駆動されていない際に前記撮像部が前記被写体の光学像から生成した第２画像データの第２色情報を前記第１色情報で補正する色情報補正部と、
を備え、
前記電子ファインダは、前記第２色情報が補正された前記第２画像データを再生することを特徴とする撮影装置。
【請求項２】
前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別部を備え、
前記色情報解析部は、前記被写体識別部によって識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、
前記色情報補正部は、前記被写体識別部によって識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴とする請求項１記載の撮影装置。
【請求項３】
前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを管理するカメラ撮影モード管理部を備え、
前記照明部および前記撮像部は、前記カメラ撮影モード管理部が前記カメラ撮影モードをオンにした際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１または２記載の撮影装置。
【請求項４】
前記撮像部の向きの変化を検出する姿勢検出部を備え、
前記照明部および前記撮像部は、前記姿勢検出部が前記撮像部の向きの変化を検出した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜３のいずれか一つに記載の撮影装置。
【請求項５】
前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、
前記光学系は、前記撮像部が前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴とする請求項１〜４のいずれか一つに記載の撮影装置。
【請求項６】
前記撮像部に入射する光学像の画角を変更可能な光学系を備え、
前記照明部および前記撮像部は、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜５のいずれか一つに記載の撮影装置。
【請求項７】
前記撮像部に入射する光を集光する光学系と、
前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、
前記オートフォーカス部のオン／オフを切り替える切替部と、
を備え、
前記照明部および前記撮像部は、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜６のいずれか一つに記載の撮影装置。
【請求項８】
前記第２画像データ中の被写体が変化したか否かを判定する変化判定部を備え、
前記照明部および前記撮像部は、前記第２画像データ中の被写体が変化したと前記変化判定部が判定した場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１〜７のいずれか一つに記載の撮影装置。
【請求項９】
前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理部を備え、
前記照明部および前記撮像部は、前記フラッシュモード管理部が前記フラッシュモードをオンにしている場合、前記第１画像データを生成することを特徴とする請求項１〜８のいずれか一つに記載の撮影装置。
【請求項１０】
撮像部と照明部と電子ファインダとを備えた撮影装置の前記電子ファインダに前記撮像部の撮像範囲に含まれる被写体の映像を表示するライブビュー表示方法であって、
前記照明部を駆動しつつ前記撮像部を駆動することで照明された前記被写体の光学像から第１画像データを生成する第１撮像ステップと、
前記第１画像データに含まれる第１色情報を解析する色情報解析ステップと、
前記照明部が駆動されていない際に前記撮像部を駆動することで前記被写体の光学像から第２画像データを生成する第２撮像ステップと、
前記第２画像データの第２色情報を前記第１色情報で補正する色情報補正ステップと、
前記第２色情報が補正された前記第２画像データを前記電子ファインダに再生する再生ステップと、
を含むことを特徴とするライブビュー表示方法。
【請求項１１】
前記第１画像データおよび前記第２画像データに含まれる被写体を識別する被写体識別ステップを含み、
前記色情報解析ステップは、前記被写体識別ステップにおいて識別された前記第１画像データ中の前記被写体ごとに前記第１色情報を解析し、
前記色情報補正ステップは、前記被写体識別ステップにおいて識別された前記第２画像データ中の前記被写体ごとに前記第２色情報を前記第１色情報で補正することを特徴とする請求項１０記載のライブビュー表示方法。
【請求項１２】
前記電子ファインダに前記被写体の映像を表示するカメラ撮影モードのオン／オフを切り替えるカメラ撮影モード管理ステップを含み、
前記第１撮像ステップは、前記カメラ撮影モード管理ステップにおいて前記カメラ撮影モードがオンに切り替えられた際、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０または１１記載のライブビュー表示方法。
【請求項１３】
前記撮像部の向きの変化を検出する姿勢検出ステップを含み、
前記第１撮像ステップは、前記姿勢検出ステップにおいて前記撮像部の向きの変化が検出された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１２のいずれか一つに記載のライブビュー表示方法。
【請求項１４】
前記撮影装置は、前記撮像部に入射する光学像のズーム倍率を変更可能な光学系を備え、
前記第１撮像ステップは、前記第１画像データを生成する際、前記ズーム倍率をワイド端に設定することを特徴とする請求項１０〜１３のいずれか一つに記載のライブビュー表示方法。
【請求項１５】
前記撮影装置は、前記撮像部に入射する光学像の画角を変更可能な光学系を備え、
前記第１撮像ステップは、前記光学系の前記画角が変更された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１４のいずれか一つに記載のライブビュー表示方法。
【請求項１６】
前記撮影装置は、前記撮像部に入射する光を集光する光学系と、前記光学系の焦点を前記被写体に自動的に調整するオートフォーカス部と、前記オートフォーカス部のオン／オフを切り替える切替部と、を備え、
前記第１撮像ステップは、前記オートフォーカス部がオンに切り替えられた場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１５のいずれか一つに記載のライブビュー表示方法。
【請求項１７】
前記第２画像データ中の被写体が変化したか否かを判定する変化判定ステップを含み、
前記第１撮像ステップは、前記変化判定ステップにおいて前記第２画像データ中の被写体が変化したと判定された場合、少なくとも１回、前記被写体を照明しつつ該照明された被写体の光学像から前記第１画像データを生成することを特徴とする請求項１０〜１６のいずれか一つに記載のライブビュー表示方法。
【請求項１８】
前記照明部を駆動するフラッシュモードのオン／オフを管理するフラッシュモード管理ステップを含み、
前記第１撮像ステップは、前記フラッシュモード管理ステップにおいて前記フラッシュモードがオンに管理されている場合、前記第１画像データを生成することを特徴とする請求項１０〜１７のいずれか一つに記載のライブビュー表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２０１０−２２６４８２（Ｐ２０１０−２２６４８２Ａ）
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願番号】特願２００９−７２２３５（Ｐ２００９−７２２３５）
【出願日】平成２１年３月２４日（２００９．３．２４）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２２年１０月７日（２０１０．１０．７）
【国際特許分類】
【出願日】平成２１年３月２４日（２００９．３．２４）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]