画像処理装置および画像処理方法
【課題】 フラッシュ撮影に用いたストロボなどの人工照明光の色相に関わらず、所望の色相の照明光で照明した画像を得られる画像処理装置および画像処理方法を提供する。
【解決手段】 複数の色成分に対してストロボなどによる人工照明光ありの第１の画像データと人工照明光のない周囲光のみの第２の画像データを連続して撮像するとともに、各色成分毎に第１の画像データから第２の画像データを差し引いたデータに対し色補正を行った後、該補正済みの画像データに対し第２の画像データを加えることにより、所望の色相の照明光で照明した画像を生成する。
【解決手段】 複数の色成分に対してストロボなどによる人工照明光ありの第１の画像データと人工照明光のない周囲光のみの第２の画像データを連続して撮像するとともに、各色成分毎に第１の画像データから第２の画像データを差し引いたデータに対し色補正を行った後、該補正済みの画像データに対し第２の画像データを加えることにより、所望の色相の照明光で照明した画像を生成する。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、画像データを画像処理する画像処理装置および画像処理方法、特にストロボ等を用いて照明撮影を行って得られた画像データの照明光の色を画像処理により補正する画像処理装置および画像処理方法に関する。
【０００２】
【従来の技術】従来、内蔵ストロボや外付ストロボを用いてフラッシュ撮影を行うカメラにおいては、ストロボの照明光の色は昼光色（色温度５５００度）に合わせ込まれており、昼光色以外の色温度の照明光で撮影したい場合（例えばタングステン光照明）には、ストロボの変わりに別の照明装置（例えば白熱電球）を用いて撮影したり、ストロボの発光部に色フィルタを装着して発光させて撮影したり、一旦ストロボ光により撮影した画像データをパソコン等に取り込んで画像処理により色修正を施こすことが行われていた。
【０００３】
【発明が解決しようとする課題】しかしながらストロボ以外の照明装置を利用する場合には、ストロボ以外の照明装置を撮影現場に運搬しなければならず、また電源などの設定の手間がかかるので、撮影状況に応じて迅速に照明光の色を変えるようなことが簡便にはできなかった。またストロボの発光部に色フィルタを装着して撮影する場合も色フィルタを持参するとともに、色フィルタを装着しなければならず、撮影状況に応じて迅速に照明光の色を変えるようなことが簡便にはできなかった。色フィルタを内蔵し、自動的に色フィルタを交換することも考えられるが、ストロボが大型化するとともに、ストロボが高コストになってしまうという問題点があった。また一旦ストロボ光により撮影した画像データを画像処理により色修正を行う場合は、ストロボ光により照明された主要被写体領域と周囲光により照明された背景領域を切り分けて色修正を行わなければならず、素人が迅速に色修正を行うことは困難であった。
【０００４】そこで本発明は、低コストかつ簡便かつ迅速に撮影用照明装置の照明光の色を修正できる、電子カメラを用いた画像処理装置および画像処理方法を提供することを目的とする。
【０００５】
【課題を解決するための手段】上記目的を達成するため、本発明による画像処理装置および画像処理方法においては、フラッシュ撮影時には所定の照明装置（例えばストロボ）による照明ありの画像データと照明なしの画像データを複数の色成分毎に取得して記憶する。次に２つの画像データの差分に基づき所定の照明装置の照明による寄与分を複数の色成分毎に算出するとともに、算出された複数の色成分毎の照明の寄与分に対し、所定の照明装置の照明光の色と指定された照明光の色の相違に基づく補正を行う。さらに補正された照明の寄与分に基づき画像データを再構成し、該再構成された画像データを表示または記憶する。
【０００６】
【発明の実施の形態】以下、図面を参照して本発明の実施形態について説明する。図１および図２は、本発明を適用した画像処理装置である電子カメラ１００の一実施形態の外観図（正面視および背面視）である。図１に示すように電子カメラ１００の前面には被写体像を形成するための撮影レンズ１０、撮影画面を確認するためのファインダ１１、撮影時に被写体を照明するためのストロボ１２、被写体の明るさ（定常光照明時およびストロボ光照明時）を検知するための測光／調光回路１３、電子カメラ１００をユーザが手でホールドしやすくするためにカメラ本体から出っ張ったグリップ部１４が備えられ、上面には撮影を指示するためのレリーズボタン１６、電子カメラ１００の電源のＯＮ／ＯＦＦ制御を行うための電源スイッチ１７が備えられる。
【０００７】図２に示すように、電子カメラ１００の背面にはファインダ１１の接眼部、テキストおよび画像表示用の略四角形の画面を備えた左ＬＣＤ（左画面）２１とテキスト表示用および画像表示用の略四角形の画面を備えた右ＬＣＤ（右画面）２２が配置され、右ＬＣＤ２２の下側には再生画像の切換えや各種調整に用いられる上方向ボタン２３、下方向ボタン２４、左方向ボタン２５、右方向ボタン２６、決定ボタン２７が配置され、左ＬＣＤ２１の周辺には電子カメラ１００を撮影モードに設定するための撮影モードボタン２８、電子カメラ１００を再生モードに設定するための再生モードボタン２９、撮影モードにおいてフラッシュ撮影を行うか否かを選択するためのストロボボタン３１（押すたびにストロボＯＮ／ＯＦＦが切り換わる）、フラッシュ撮影時の照明光の色をタングステンランプの色（色温度約３０００度Ｋ）に指定するためのタングステンボタン３２が配置されている。側面には画像データ保存用のメモリカード７７を装着するためのメモリカードスロット３０が備えられる。
【０００８】なおレリーズボタン１６、上方向ボタン２３、下方向ボタン２４、左方向ボタン２５、右方向ボタン２６、決定ボタン２７、撮影モードボタン２８、再生モードボタン２９、ストロボボタン３１、タングステンボタン３２は全てユーザーによって操作される操作キーである。
【０００９】なお左ＬＣＤ２１および右ＬＣＤ２２の表面上には、指の接触操作により指示された位置に対応する接触位置データを出力する機能を備えたいわゆるタッチスクリーン６６が配置され、画面上に表示された選択項目や画像データの選択に用いることができる。このタッチスクリーン６６はガラス・樹脂等の透明材料によって構成され、ユーザはタッチスクリーン６６の内側に形成される画像やテキストを、タッチスクリーン６６を通して観察することができる。
【００１０】図３は、図１および図２に示した電子カメラ１００の内部の電気構成例を示すブロック図であって、各構成要素は各種情報データおよび制御データを伝送するためのデータ／制御バス５１を介して互いに接続されている。各構成要素はおおまかに、画像データの撮影動作を実行する撮影制御回路６０を中心とするブロック、画像ファイルを記憶・保存するメモリカード７７のブロック、画像データおよびその関連情報の表示を実行する画面制御回路９２を中心とするブロック、操作キー６５等のユーザーインターフェースと各制御回路に対する統括制御を行うＣＰＵ５０を中心とするブロックに分けることができる。
【００１１】ＣＰＵ５０（中央処理ユニット）は電子カメラ１００全体の制御を行う手段であって、操作キー６５、タッチスクリーン６６、電源スイッチ１７、タイマ７４、測光／調光回路１３からの入力情報に応じて撮影制御回路６０、画面制御回路９２、電源制御回路６４への各種指示を行う。測光／調光回路１３は定常光照明状態およびストロボ光照明状態において被写体の輝度を測定し、その測定結果である測光／調光データをＣＰＵ５０に出力する。ＣＰＵ５０は定常光照明状態での測光／調光データに応じて、ＣＣＤ５５の露光時間、感度をＣＣＤ駆動回路５６により設定するとともに、該設定データに応じて撮影制御回路６０を介し絞り５３の絞り値を絞り制御回路５４により制御する。
【００１２】またＣＰＵ５０は定常光照明状態での測光／調光データに基づき被写体輝度が所定値以下であると判断した場合には撮影時にストロボ駆動回路７３によりストロボ１２を発光させるとともに、ストロボによるフラッシュ撮影中に被写体からの反射される光の累積量を測光／調光回路１３により検出し、累積された反射光量が所定値に達するとストロボ駆動回路７３によりストロボ１２の発光を停止させることにより、フラッシュ撮影の画像データが適正になるように制御する。ＣＰＵ５０は操作キー６５のタングステンボタン３２の操作の有無に応じてフラッシュ撮影を行った画像データに対し後述のように色補正処理を行う。
【００１３】また照明光色検出回路１５は、ストロボ１２の発光部近傍に備えられたストロボ光の色成分を検出する回路であり、ストロボ発光時にストロボ光の色を直接検出し、検出した色情報データ（色温度データ）をＣＰＵ５０に送る。なお測光／調光回路１３は、被写界の色成分を検出することができる回路であり、ストロボ非発光時に被写界の色（背景の色）を検出し、検出した背景光色情報データ（色温度データ）をＣＰＵ５０に送る。測光／調光回路１３および照明光色検出回路15の具体的構成としては、複数の光強度検出器（フォトダイオード等）のそれぞれに分光特性の異なるフィルタ（例えば赤フィルタ、緑フィルタ、青フィルタ）を設けたものである。
【００１４】ＣＰＵ５０は撮影モードではレリーズボタン１６の操作に応じて撮影制御回路６０を介し撮影動作を制御する。タイマ７４は時計回路を内蔵し、現在の日時に対応する日時情報を検出し、撮影時に撮影日時情報をＣＰＵ５０に供給する。ＣＰＵ５０は該撮影日時情報を画像データに付加してメモリカード７７に格納する。ＣＰＵ５０は、ＲＯＭ６７（リードオンリメモリ）に記憶されている制御プログラムに従い各部を制御する。ＥＥＰＲＯＭ６８（電気的消去書き込み可能ＲＯＭ）は不揮発性のメモリであって、後述する色補正処理のためのデータおよび電子カメラ１００の動作に必要な設定情報等を記憶している。ＲＡＭ７０は揮発性のメモリであって、ＣＰＵ５０の一時的作業領域として用いられる。ＣＰＵ５０は、電源スイッチ１７の操作状態を検知して、電源制御回路６４を介して電源６３の制御を行う。
【００１５】撮影制御回路６０は、レンズ駆動回路５２により撮影レンズ１０のフォーカシングとズーミングを行い、絞り制御回路５４により絞り５３を制御してＣＣＤ５５の露光量をコントロールし、ＣＣＤ駆動回路５６によりＣＣＤ５５の動作を制御する。被写体からの光束は撮影レンズ１０により光量調節のための絞り５３を介し、ＣＣＤ５５上に被写体像として形成され、この被写体像はＣＣＤ５５により撮像される。複数の画素を備えたＣＣＤ５５（チャージカップルドデバイス）は被写体像を撮像するための電荷蓄積型イメージセンサーであり、ＣＣＤ５５上に形成された被写体像の強度に応じた電気的な画像信号をＣＣＤ駆動回路５６により供給される駆動パルスに応じてアナログ処理部５７に出力する。なおＣＣＤ５５は３つの色成分（赤、緑、青）をそれぞれ検出する３種類の光検出部からなり、１つの画素は３種類の光検出部から構成されており、各画素に対応して３つの色成分（赤、緑、青）の画像信号が得られる。
【００１６】アナログ処理部５７はＣＣＤ５５が光電変換した画像信号を所定のタイミングでサンプリングし、そのサンプリングした信号を所定のレベルに増幅する。Ａ／Ｄ変換回路５８（アナログデジタル変換回路）はアナログ処理部５７でサンプリングした画像信号をデジタル化することによりデジタルデータに変換し、撮影バッファメモリ５９は該デジタルデータを一旦格納する。
【００１７】撮影制御回路６０は撮影モード中上述の動作を繰り返すとともに、画面制御回路９２はデータ／制御バス５１を介して撮影バッファメモリ５９に順次格納されるデジタルデータを読み出してフレームメモリ６９に一旦格納し、該デジタルデータを表示用画像データに変換してフレームメモリ６９に再格納し、該表示用画像データを左画面２１に表示させるというスルー画像表示動作を繰り返す。また画面制御回路９２は必要に応じてテキスト表示情報をＣＰＵ５０から入手し、表示用テキストデータに変換してフレームメモリ６９に格納し、該表示用テキストデータを左画面２１、右画面２２に表示させる。このようにして撮影モードにおいては、左画面２１にＣＣＤ５０により撮像されている画像がリアルタイムに表示されるので、このスルー画像をモニター画面として使用して撮影のための構図設定を行うことが可能になる。撮影制御回路６０は撮影バッファメモリ５９に格納したデジタルデータの高周波成分の度合い解析して撮影レンズ１０の焦点調節状態を検出し、検出結果に応じてレンズ駆動回路５２により撮影レンズ１０の焦点調節を行う。
【００１８】レリーズ時に撮影制御回路６０はＣＰＵ５０から撮影指示を受けると、ＣＣＤ駆動回路５６を介してＣＣＤ５５により被写体像を撮像させ、撮像により生成した画像信号をアナログ処理部５７、Ａ／Ｄ変換回路５８を介して撮影バッファメモリ５９にデジタルデータ（生データ）として一旦格納する。撮影制御回路６０は撮影バッファメモリ５９に一旦格納したデジタルデータを所定の記録フォーマット（ＪＰＥＧなど）に変換または圧縮して画像データを形成し、該画像データをメモリカード７７に記録保存する。なお後述するようにフラッシュ撮影時はストロボ発光ありと発光なしの連続２回の撮影を行い、ＣＰＵ５０は２つの画像データをＲＡＭ７０に一旦格納した後、ＥＥＰＲＯＭ６８に記憶されている色補正データを用いて照明光の色補正処理を行うことにより照明光色を補正した画像データ生成してメモリカード７７に記録保存する。
【００１９】なおＣＰＵ５０は必要に応じて、メモリカード７７に格納した画像データを無線電話回路７２およびアンテナ７６を介して外部に送信したり、逆に無線電話回路７２およびアンテナ７６を介して外部から受信した画像データをメモリカード７７に格納することができる。
【００２０】再生モードにおいては、画面制御回路９２はメモリカード７７からＣＰＵ５０に指示された画像データを読み出してフレームメモリ６９に一旦格納し、該画像データを左画面２１に表示するとともに、ＣＰＵ５０の指示に従い、再生モードの説明等のテキストデータをフレームメモリ６９に格納し、該テキストデータを右画面２２に表示する。
【００２１】図４はメモリカード７７内に格納される画像ファイルのデータ構成を示す。図４に示すようにメモリカード７７には複数の画像ファイルが保存される。各画像ファイルは画像データと付加情報データから構成される。付加情報データは、図５に示すように画像ファイルの識別情報（ファイル名）とフラッシュ撮影時は補助画像ファイルの識別情報（サブファイル名）と撮影日時データと撮影時の各種設定を示す撮影データとストロボ照明を行った否かを表すデータと撮影者により指定された照明光の種類データとストロボ発光時のストロボ光の色温度データと背景光の色温度データから構成される。
【００２２】図６は本発明による電子カメラの実施形態の状態遷移図である。電源ＯＮ時には撮影モードとなり、レリーズボタン１６の操作により撮影動作と撮影後の画像ファイル作成および画像ファイルのメモリカード７７への格納が行われる。再生モードにおいてはメモリカード７７に格納した画像データの再生表示動作が行われる。また撮影モードボタン２８を操作すると、再生モードから撮影モードに移行し、再生モードボタン２９を操作すると、撮影モードから再生モードに移行する。
【００２３】図７はフラッシュ撮影時（タングステンボタン３２が操作されている場合）の動作シーケンスを示す図であって、まずストロボ発光ありで第１回の撮影が行われ、画像データがＲＡＭ７０に格納される。図８はストロボ発光ありの画像データの例であって、画面中央の人物の顔色はストロボ光照明により白っぽくなりすぎている。続いてストロボ発光なし第２回の撮影（他の撮影条件は第１回の撮影と同一）が行われ、画像データがＲＡＭ７０に格納される。図９はストロボ発光なしの画像データの例であって、撮影条件は第１回の撮影と同一であるため、背景の露出はストロボ発光ありの画像データと同一であるが、画面中央の人物はストロボ光による照明がなく逆光状態にあるため露出が不足している。
【００２４】ＣＰＵ５０はＥＥＰＲＯＭ６８に記憶された色補正処理用データに応じてＲＡＭ７０に格納されたストロボ発光ありの画像データとストロボ発光なしの画像データに後述する画像処理を施して、タングステン光照明の画像データを生成し、該画像データをメモリカード７７に保存する。
【００２５】図１０は上記照明光色補正の詳細シーケンスを示す図であり、まずストロボ発光ありの３つの色成分の画像データ（ＴＲ、ＴＧ、ＴＢ）からストロボ発光なしの３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）を差し引きストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、Ｑｂ）を抽出する。なお上記処理は全ての画素に対して行われる。
【００２６】図１１はある１つの画素の画像データに対する上記照明光色補正の処理を図式的に表したものであり、上段が赤（Ｒ）に対する画像処理、中段が緑（Ｇ）に対する画像処理、上段が青（Ｂ）に対する画像処理を表し、各段において３つの色成分毎の画素データを棒グラフで示している。図１１において左の棒グラフはストロボ発光なしの場合の３つの色成分毎の画素データ（ＳＲ、ＳＧ、ＳＢ）を表し、中央の棒グラフはストロボ発光ありの場合の３つの色成分毎の画素データ（ＴＲ、ＴＧ、ＴＢ）を表している。中央の棒グラフにおける３つの色成分毎の画素データ（ＴＲ、ＴＧ、ＴＢ）は、ストロボＯＮ以外の撮影条件がストロボ発光なしの場合と同じなので、数式１に示すようにストロボ発光なしの場合の背景光（定常光または周囲光）のみの３つの色成分毎の画素データ（ＳＲ、ＳＧ、ＳＢ）とストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）の和となっている。
【００２７】
【数１】 ＴＲ＝ＳＲ＋ＱＲＴＧ＝ＳＧ＋ＱＲＴＢ＝ＳＢ＋ＱＢしたがってストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）は、数式２に示すようにストロボ発光ありの場合の３つの色成分の画像データ（ＴＲ、ＴＧ、ＴＢ）からストロボ発光なしの場合の３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）を差し引いたものとなる。
【００２８】
【数２】 ＱＲ＝ＴＲ−ＳＲＱＧ＝ＴＧ−ＳＧＱＢ＝ＴＢ−ＳＢ次に図１０において、検出されたストロボ光の色温度データと指定された照明光の種類に応じて、ストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、Ｑｂ）を補正するための補正係数を求めるために、ＥＥＰＲＯＭ６８に記憶されている補正係数表を参照する。ここで照明光としてタングステン光が指定されている場合には、ストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、Ｑｂ）に対しタングステン光の補正係数による補正を行い、照明光としてタングステン光が指定されていない場合には、ストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）に対し昼光（色温度５５００度Ｋ）の補正係数による補正を行うものとする。図１２は検出されたストロボ光の色温度データと指定された照明光の種類との組み合わせに対する３つの色成分毎の補正係数の関係を示す表である。例えば指定された照明光がタングステン光である場合は、ストロボ照明光のみによる赤色成分の画像データＱＲを増加させるために補正係数ＫＲは１以上になっており、ストロボ照明光のみによる青色成分の画像データＱＢを減少させるために補正係数ＫＢは１以下になっている。
【００２９】次に図１０において、数式３のように図１２の表から求められた補正係数ＫＲ、ＫＧ、ＫＢがストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）に乗ぜられ、ストロボ発光なしの場合の３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）に加えられ、照明光の色が補正された３つの色成分の画像データ（ＵＲ、ＵＧ、ＵＢ）が求められる。
【００３０】
【数３】 ＵＲ＝ＳＲ＋ＫＲ×ＱＲＵＧ＝ＳＧ＋ＫＢ×ＱＧＵＢ＝ＳＢ＋ＫＢ×ＱＢ図１１において右の棒グラフが照明光の色が補正された３つの色成分の画像データ（ＵＲ、ＵＧ、ＵＢ）を表す。上記のような画像処理が画像データの全画素について行われる。図１３は、図８に示すストロボ発光ありの画像データに対しタングステン光照明を指定した場合の照明光補正を行った画像データの例であって、画面中央の人物の顔色が赤みを帯びて健康的に見えるようになったとともに、背景に対してはストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）がないので補正が行われず、図８の露出と同じになっている。
【００３１】図１４は上記実施形態における電子カメラ１００（ＣＰＵ５０）の動作のメインフローチャートである。まずＳ１０で電源スイッチ１７を操作すると電源がＯＮとなり、Ｓ２０で撮影モードのサブルーチンを実行し撮影可能状態になる。撮影モード中にレリーズボタン１６を操作すると、Ｓ３０のレリーズ割込み処理サブルーチンが実行され、撮影動作が行われる。撮影モード中に再生モードボタン２９を操作すると、Ｓ４０のモード切換割込み処理サブルーチンが実行され、Ｓ５０の再生モードサブルーチンが実行され、メモリカード７７に格納されている画像データが左画面２１に再生表示される。逆に再生モード中に撮影モードボタン２８を操作すると、Ｓ４０のモード切換割込み処理サブルーチンが実行され、Ｓ２０の撮影モードサブルーチンに移行する。
【００３２】図１５は撮影モードサブルーチンの詳細フローチャートであって、Ｓ２０で起動すると、Ｓ２０１の処理を繰り返す。Ｓ２０１ではユーザが設定したカメラ設定条件で順次ＣＣＤ５５により生成される画像データを図１６に示すように左画面２１に表示し、そのときのカメラ設定データ（ストロボＯＮ／ＯＦＦ状態、照明光の種類を含む）を右画面２２にテキスト表示する。なおストロボのＯＮ／ＯＦＦは電子カメラ１００が測光／調光データに基づいて自動的に設定するが、ユーザーはストロボボタン３１の操作により自動的に設定されたストロボ発光状態を変更することができる。またタングステンボタン３２の操作に応じて照明光の種類を指定することができる。
【００３３】図１７はレリーズ割込み処理サブルーチンの詳細フローチャートであって、Ｓ３０で起動すると、Ｓ３０１で撮影モードであるかチェックし、撮影モードでない場合はＳ３０６でリターンする。撮影モードの場合は、Ｓ３０２でユーザまたはカメラにより設定されている撮影条件（ストロボＯＮの場合はストロボを発光させる）で撮像動作を実行し、ストロボＯＦＦの場合は得られた画像データに付加情報データを付加してメモリカード７７に格納するとともに、ストロボＯＮの場合は得られた画像データをＲＡＭ７０に格納する。Ｓ３０３でストロボＯＮであるかチェックし、ストロボＯＮでない場合はＳ３０６でリターンする。ストロボＯＮの場合は、Ｓ３０４でストロボを発光させない以外はＳ３０２の撮影条件と同じ設定で撮像動作を実行し、得られた画像データをＲＡＭ７０に格納する。Ｓ３０５では、上述のように、ストロボＯＮの画像データとストロボＯＦＦの画像データと検出したストロボ照明光の色温度と指定された照明光の種類に基づき、ストロボＯＮの画像データを補正し、指定された照明光による画像データを生成し、該照明光の色が補正された３つの色成分の画像データ（ＵＲ、ＵＧ、ＵＢ）により構成される主ファイルとストロボ発光なしの場合の３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）により構成されるサブファイルと付加情報データ（ストロボＯＮの有無、指定照明光種類、照明光色温度、背景光色温度、撮影データ）をメモリカード７７に格納し、Ｓ３０６でリターンする。
【００３４】図１８はモード切換割込み処理サブルーチンの詳細フローチャートであって、Ｓ４０で撮影モードボタン２８または再生モードボタン２９の操作により起動すると、Ｓ４０１で操作されたボタンが撮影モードボタン２８であるかチェックし、撮影モードボタン２８である場合は再生モードを終了し、Ｓ２０の撮影モードサブルーチンに移行する。操作されたボタンが撮影モードボタン２８でない場合は撮影モードを終了し、Ｓ５０の再生モードサブルーチンに移行する。
【００３５】図１９は再生モードサブルーチンの詳細フローチャートであって、Ｓ５０で起動すると、Ｓ５０１の処理を繰り返す。Ｓ５０１では左方向ボタン２５、右方向ボタン２６の操作に応じてメモリカード７７に格納された画像データを順次読み出し、図２０に示すように左画面２１に再生表示するとともに、右画面２２に操作方法の説明を表示する。なお電源ＯＮ直後は最新の画像データを表示し、以後は左方向ボタン２５の操作に応じて順次時間データの古い画像データを表示するとともに、右方向ボタン２６の操作に応じて順次時間データの新しい画像データを表示する。
【００３６】上記実施形態（図１〜図２０）においては、フラッシュ撮影時に照明ありと照明なしの２回の撮像動作を行い、照明ありと照明なしの画像データの３つの色成分の差成分に対して、撮影時の照明光と指定された照明光の相違に基づいた補正を行うことにより、自動的に照明光色の補正を行って指定された照明光による画像データを生成するので、フラッシュ撮影において簡便かつ迅速かつ正確に照明ムラ補正を行うことができる。またフラッシュ撮影時の照明光の色を直接検出して照明光の補正に用いているので、ストロボ発光色の経年変化、発光量によるストロボ発光色の変化、ストロボ個体毎の発光色の相違等にも対応でき、正確な照明光色の再現が可能である。これによりストロボ発光管の設計の制約事項を緩和でき、小型でかつ低コストなストロボを使用することも可能になる。（変形形態の説明）本発明は以上説明した実施形態に限定されることなく、種々の変形や変更が可能である。
【００３７】上記実施形態（図１〜図２０）における照明光色補正の画像処理はストロボ発光ありの画像データとストロボ発光なしの画像データを短期間に連続して撮像することにより電子カメラのブレをなくし、同一画素の３つの色成分ごとの画像データに対し差分演算を行っているが、２回の撮影の間に発生する被写体の移動やカメラブレが問題となるような場合には、図２１に示すようにストロボ発光ありの画像データとストロボ発光なしの画像データ間で周知の方法で動きベクトルを検出し、該動きベクトルに基づいてストロボ発光なしの画像データとストロボ発光ありの画像データの間の対応する画素の関係を変更して数式１から数式３の演算を行うようにしてもよい。図２１において画面中で破線で示す被写体がストロボ発光なしの画像データであり、実線で示す被写体がストロボ発光ありの画像データである。動きベクトルの検出の方法としては、ブロック・マッチング法やグラジエント法が知られている。またカメラブレのみを検出する場合には電子カメラ１００に角速度センサーなどのフレ検出センサーを内蔵し、該センサーによりストロボ発光なしの撮像時点とストロボ発光ありの撮像時点間のカメラブレを検出し、検出したカメラブレデータに基づいて動きベクトルを算出するようにしてもよい。このようにすれば、ストロボ発光なしの撮像時点とストロボ発光ありの撮像時点間のカメラブレや被写体移動を補償することができるので、本発明の適用範囲を手持ち撮影に対しても拡大することができる。
【００３８】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、電子カメラは内蔵ストロボを用いてフラッシュ撮影を行っているが、外付ストロボを用いてフラッシュ撮影する場合は、該外付ストロボからフラッシュ撮影時の照明光の色温度データと図１２に示すような補正係数の表データを受信し、該フラッシュ撮影時の照明光の色温度データと補正係数の表データに基づいて照明光色補正を行うようにしてもよい。図２２は外付ストロボを電子カメラのストロボシューを用いて取り付けた場合の構成を示し、外付ストロボ内のストロボＣＰＵからフラッシュ撮影時の照明光の色温度データと補正係数の表データがストロボシューを介した通信経路を通じて電子カメラ側のカメラＣＰＵに送信され記憶される。電子カメラは外付ストロボを用いてフラッシュ撮影を行う場合は、前記カメラＣＰＵが受信したに照明光の色温度データと補正係数の表データに基づいて照明光色補正を行う。
【００３９】外付ストロボと内蔵ストロボを併用してフラッシュ撮影を行う場合や、多灯フラシュ撮影を行う場合は、照明光色補正において各ストロボの発光色の相違が問題となるので、各ストロボを単独に発光させて複数回の撮影を行い、各画像データに対しそれぞれのストロボの照明光色補正を施した上で、補正済み画像データを合成して、複数のストロボを同時に使用した場合の照明光色を補正した画像データを生成するようにしてもよい。
【００４０】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、指定できる照明光の種類は昼光とタングステン光のみであるが、補正係数表を複数種類の照明光に対して用意しておけば、複数種類の照明光を指定することもできる。また照明光の種類を指定する代わりに、直接照明光の色温度を指定するようにしてたり、上方向ボタン２３や下方向ボタン２４の操作に応じて色温度の調整を行うようにしても構わない。
【００４１】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、照明光の種類は手動で指定しているが、背景光の色検出に応じて自動的に照明光の種類の指定を行っても良い。例えば背景光の色温度と同じ色温度の照明光を自動指定することにより、画像データ全体は同一の照明光により照明されたものとなる。このようにすれば、照明光の指定の手間が省けるとともに、フラッシュ撮影であることを感じさせないより自然なムードの画像データを生成することができる。
【００４２】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、照明光成分の色のみを補正しているが、補正された照明光のみの３つの色成分（ＫＲ×ＱＲ、ＫＢ×ＱＧ、ＫＢ×ＱＢ）にさらに一様な係数を乗ずることにより、ストロボ光量の調整を行うことができる。例えばフラッシュ撮影した画像データに対してはストロボ光なしの画像データ（ＳＲ、ＳＧ、ＳＢ）と照明光の色補正を行った画像データ（ＵＲ、ＵＧ、ＵＢ）が別々にメモリカード７７に格納されているので、再生時にこの２つの画像データより照明光のみの３つの色成分（ＫＲ×ＱＲ、ＫＢ×ＱＧ、ＫＢ×ＱＢ）を求め、該３つの色成分を上ボタン２３の操作に応じて増倍させ、増倍させたストロボ光成分とストロボ光なしの画像データ成分を加算した画像データを表示させることにより、ストロボ光量を増した画像データを生成することができる。反対に再生時に下ボタン２４の操作に応じて３つの色成分を縮小させ、縮小させたストロボ光成分とストロボ光なしの画像データ成分を加算した画像データを表示させることにより、ストロボ光を押さえた画像データを生成することができる。ユーザは所望のストロボ効果が得られた画像データが表示された時点で決定ボタン２７を操作することにより、該画像データをメモリカード７７に保存することができる。このようにすれば、照明光色補正のほかにストロボ光量不足やストロボ光量オーバーがあった場合でも事後的に適正なストロボ光量の画像データをえることができる。
【００４３】またストロボ光量の調整の他に、背景光成分（ＳＲ、ＳＧ、ＳＢ）の調整（色、光量）を行うようにしても構わない。このようにすれば、更に自然光と人工照明光のバランスのとれた画像データを生成することが可能になる。また複数のストロボを使用してフラッシュ撮影した画像データに対しては、各ストロボ毎の光量を上方向ボタン２３や下方向ボタン２４の操作に応じて調整するようにしても構わない。
【００４４】上記実施形態（図１〜図２０）における照明光色補正の画像処理は電子カメラ１００内のＣＰＵ５０で行われているが、図２３に示すように電子カメラ１００側では撮影したストロボ発光なしの画像データとストロボ発光ありの画像データと撮影時の照明光色データをメモリカード７７に格納するまでを行い、該メモリカード７７をパソコン１４０に装着し、前記２つの画像データと撮影時の照明光色データとパソコンに格納してある補正係数の表に基づきパソコン１４０側で指定した照明光に寄る画像データとなるように照明光色補正の画像処理を行うようにしても構わない。このようにすれば、電子カメラ１００側で大規模な画像処理を行う必要がなく、パソコン１４０側の高性能なＣＰＵで画像処理を行うことができるので、画像処理を迅速に行うことができるとともに、電子カメラ１００のＣＰＵ５０の負担を軽減することができる。
【００４５】またメモリカードを介して画像データを電子カメラ１００からパソコン１４０に転送する代わりに、通信回線により電子カメラ１００からパソコン１４０に画像データなどを転送するようにしてもよい。この場合電子カメラ１００は無線通信回路７２により無線通信回線１３０と基地局１２０とインターネット１３０を経由してパソコン１４０に接続し、画像データをパソコン１４０に送信する。またパソコン１４０で画像処理をした画像データをパソコン１４０から電子カメラ１００に送り返してもよい。このようにすれば、電子カメラ１００側で大規模な画像処理を行う必要がなく、パソコン１４０側の高性能なＣＰＵで画像処理を行うことができるので、画像処理を迅速に行うことができるとともに、電子カメラ１００のＣＰＵ５０の負担を軽減することができる。
【００４６】上記実施形態（図１〜図２０）においてはフラッシュ撮影時にストロボの照明光の色を検出しているが、照明光色の変化が少ない場合はストロボの照明光の色を検出しないで、固定の色温度データを使用してもよい。このようにすればストロボの照明光の色を検出するための照明光色検出回路１５が不要となるので、電子カメラをさらに低コストで小型化することができるとともに、図１２の補正係数表が簡易になり、ＥＥＰＲＯＭ６８の容量を少なくすることができる。
【００４７】上記実施形態（図１〜図２０）において電子カメラ１００は被写体を照明するためにストロボ光を用いているが、他の人工照明光（フラッドランプ、蛍光灯など）であっても構わない。
【００４８】上記実施形態（図１〜図２０）において、照明光色補正を行うためにストロボ光ありとストロボ光なしの２回の撮影を行っているが、ストロボ光なしの撮影ではほとんど真っ暗な場合は、ストロボ光なしの撮影は省略し、ストロボ光なしの３つの色成分（ＳＲ、ＳＧ、ＳＢ）を０として取り扱っても良い。例えば測光／調光回路１３で検出した画面全体の輝度が所定値以下の場合はストロボ光なしの撮影の必要なしと判断する。このようにすれば、フラッシュ撮影時に無駄な処理を行う必要がなくなる。
【００４９】
【発明の効果】以上説明したように、本発明による画像処理装置および画像処理方法においては、フラッシュ撮影時に照明ありと照明なしの撮像動作を行って画像データの組を生成し、該画像データの組に対して画像処理を行って照明光の寄与量を色成分毎に算出し、該色成分毎に算出した照明光の寄与量を撮影時の照明光の色と指定された照明光の色の相違に基づいて補正することにより、指定された照明光による画像データを生成するので、所望の照明光色を備えていない照明手段を使用しても、簡便かつ迅速に照明光の色を補正できる。またこれによりストロボの照明光の色を厳密に揃える必要がなくなるので、ストロボの設計、部品の性能の制約が緩和でき、低コストで小型なストロボを使用することができる。
【００５０】また本発明による画像処理装置および画像処理方法においては、照明光の色補正が自動的に行われるので、撮影後に画像データを見ながら人の判断に応じて照明光色の補正を行うといった手間も省ける。
【００５１】また本発明による画像処理装置および画像処理方法においては、画面中に照明光の寄与が異なる領域（主要被写体と遠距離にある背景）が存在しても、照明ありの画像データと照明画像なしの画像データの差分に対して照明光色の補正を行うので、背景部分に対して主要被写体部分を分離して補正すると言った手間がかからない。
【図面の簡単な説明】
【図１】電子カメラの外観図（正面視）である。
【図２】電子カメラの外観図（背面視）である。
【図３】電子カメラの電気構成を示すブロック図である。
【図４】メモリカードのデータの構成図である。
【図５】付加情報データの構成図である。
【図６】電子カメラの状態遷移図である。
【図７】照明光の色補正処理の説明図である。
【図８】画像の表示例である。
【図９】画像の表示例である。
【図１０】照明光の色補正処理の説明図である。
【図１１】照明光の色補正処理の説明図である。
【図１２】照明光の補正係数の表である。
【図１３】画像の表示例である。
【図１４】ＣＰＵのメインフローチャートである。
【図１５】サブルーチンのフローチャートである。
【図１６】画面の表示例である。
【図１７】サブルーチンのフローチャートである。
【図１８】サブルーチンのフローチャートである。
【図１９】サブルーチンのフローチャートである。
【図２０】画面の表示例である。
【図２１】画像処理の説明図である。
【図２２】電子カメラの構成例である。
【図２３】画像処理システムの構成例である。
【符号の説明】
１０ 撮影レンズ
１２ ストロボ
１３ 測光／調光回路
１５ 照明光色検出回路
２１ 左ＬＣＤ（左画面）
２２ 右ＬＣＤ（右画面）
２３ 上方向ボタン
２４ 下方向ボタン
２５ 左方向ボタン
２６ 右方向ボタン
２７ 決定ボタン
２８ 撮影モードボタン
２９ 再生モードボタン
３１ ストロボボタン
３２ タングステンボタン
５０ ＣＰＵ
５１ データ／制御バス
５５ ＣＣＤ
６０ 撮影制御回路
６５ 操作キー
７７ メモリカード
１００ 電子カメラ
【０００１】
【発明の属する技術分野】本発明は、画像データを画像処理する画像処理装置および画像処理方法、特にストロボ等を用いて照明撮影を行って得られた画像データの照明光の色を画像処理により補正する画像処理装置および画像処理方法に関する。
【０００２】
【従来の技術】従来、内蔵ストロボや外付ストロボを用いてフラッシュ撮影を行うカメラにおいては、ストロボの照明光の色は昼光色（色温度５５００度）に合わせ込まれており、昼光色以外の色温度の照明光で撮影したい場合（例えばタングステン光照明）には、ストロボの変わりに別の照明装置（例えば白熱電球）を用いて撮影したり、ストロボの発光部に色フィルタを装着して発光させて撮影したり、一旦ストロボ光により撮影した画像データをパソコン等に取り込んで画像処理により色修正を施こすことが行われていた。
【０００３】
【発明が解決しようとする課題】しかしながらストロボ以外の照明装置を利用する場合には、ストロボ以外の照明装置を撮影現場に運搬しなければならず、また電源などの設定の手間がかかるので、撮影状況に応じて迅速に照明光の色を変えるようなことが簡便にはできなかった。またストロボの発光部に色フィルタを装着して撮影する場合も色フィルタを持参するとともに、色フィルタを装着しなければならず、撮影状況に応じて迅速に照明光の色を変えるようなことが簡便にはできなかった。色フィルタを内蔵し、自動的に色フィルタを交換することも考えられるが、ストロボが大型化するとともに、ストロボが高コストになってしまうという問題点があった。また一旦ストロボ光により撮影した画像データを画像処理により色修正を行う場合は、ストロボ光により照明された主要被写体領域と周囲光により照明された背景領域を切り分けて色修正を行わなければならず、素人が迅速に色修正を行うことは困難であった。
【０００４】そこで本発明は、低コストかつ簡便かつ迅速に撮影用照明装置の照明光の色を修正できる、電子カメラを用いた画像処理装置および画像処理方法を提供することを目的とする。
【０００５】
【課題を解決するための手段】上記目的を達成するため、本発明による画像処理装置および画像処理方法においては、フラッシュ撮影時には所定の照明装置（例えばストロボ）による照明ありの画像データと照明なしの画像データを複数の色成分毎に取得して記憶する。次に２つの画像データの差分に基づき所定の照明装置の照明による寄与分を複数の色成分毎に算出するとともに、算出された複数の色成分毎の照明の寄与分に対し、所定の照明装置の照明光の色と指定された照明光の色の相違に基づく補正を行う。さらに補正された照明の寄与分に基づき画像データを再構成し、該再構成された画像データを表示または記憶する。
【０００６】
【発明の実施の形態】以下、図面を参照して本発明の実施形態について説明する。図１および図２は、本発明を適用した画像処理装置である電子カメラ１００の一実施形態の外観図（正面視および背面視）である。図１に示すように電子カメラ１００の前面には被写体像を形成するための撮影レンズ１０、撮影画面を確認するためのファインダ１１、撮影時に被写体を照明するためのストロボ１２、被写体の明るさ（定常光照明時およびストロボ光照明時）を検知するための測光／調光回路１３、電子カメラ１００をユーザが手でホールドしやすくするためにカメラ本体から出っ張ったグリップ部１４が備えられ、上面には撮影を指示するためのレリーズボタン１６、電子カメラ１００の電源のＯＮ／ＯＦＦ制御を行うための電源スイッチ１７が備えられる。
【０００７】図２に示すように、電子カメラ１００の背面にはファインダ１１の接眼部、テキストおよび画像表示用の略四角形の画面を備えた左ＬＣＤ（左画面）２１とテキスト表示用および画像表示用の略四角形の画面を備えた右ＬＣＤ（右画面）２２が配置され、右ＬＣＤ２２の下側には再生画像の切換えや各種調整に用いられる上方向ボタン２３、下方向ボタン２４、左方向ボタン２５、右方向ボタン２６、決定ボタン２７が配置され、左ＬＣＤ２１の周辺には電子カメラ１００を撮影モードに設定するための撮影モードボタン２８、電子カメラ１００を再生モードに設定するための再生モードボタン２９、撮影モードにおいてフラッシュ撮影を行うか否かを選択するためのストロボボタン３１（押すたびにストロボＯＮ／ＯＦＦが切り換わる）、フラッシュ撮影時の照明光の色をタングステンランプの色（色温度約３０００度Ｋ）に指定するためのタングステンボタン３２が配置されている。側面には画像データ保存用のメモリカード７７を装着するためのメモリカードスロット３０が備えられる。
【０００８】なおレリーズボタン１６、上方向ボタン２３、下方向ボタン２４、左方向ボタン２５、右方向ボタン２６、決定ボタン２７、撮影モードボタン２８、再生モードボタン２９、ストロボボタン３１、タングステンボタン３２は全てユーザーによって操作される操作キーである。
【０００９】なお左ＬＣＤ２１および右ＬＣＤ２２の表面上には、指の接触操作により指示された位置に対応する接触位置データを出力する機能を備えたいわゆるタッチスクリーン６６が配置され、画面上に表示された選択項目や画像データの選択に用いることができる。このタッチスクリーン６６はガラス・樹脂等の透明材料によって構成され、ユーザはタッチスクリーン６６の内側に形成される画像やテキストを、タッチスクリーン６６を通して観察することができる。
【００１０】図３は、図１および図２に示した電子カメラ１００の内部の電気構成例を示すブロック図であって、各構成要素は各種情報データおよび制御データを伝送するためのデータ／制御バス５１を介して互いに接続されている。各構成要素はおおまかに、画像データの撮影動作を実行する撮影制御回路６０を中心とするブロック、画像ファイルを記憶・保存するメモリカード７７のブロック、画像データおよびその関連情報の表示を実行する画面制御回路９２を中心とするブロック、操作キー６５等のユーザーインターフェースと各制御回路に対する統括制御を行うＣＰＵ５０を中心とするブロックに分けることができる。
【００１１】ＣＰＵ５０（中央処理ユニット）は電子カメラ１００全体の制御を行う手段であって、操作キー６５、タッチスクリーン６６、電源スイッチ１７、タイマ７４、測光／調光回路１３からの入力情報に応じて撮影制御回路６０、画面制御回路９２、電源制御回路６４への各種指示を行う。測光／調光回路１３は定常光照明状態およびストロボ光照明状態において被写体の輝度を測定し、その測定結果である測光／調光データをＣＰＵ５０に出力する。ＣＰＵ５０は定常光照明状態での測光／調光データに応じて、ＣＣＤ５５の露光時間、感度をＣＣＤ駆動回路５６により設定するとともに、該設定データに応じて撮影制御回路６０を介し絞り５３の絞り値を絞り制御回路５４により制御する。
【００１２】またＣＰＵ５０は定常光照明状態での測光／調光データに基づき被写体輝度が所定値以下であると判断した場合には撮影時にストロボ駆動回路７３によりストロボ１２を発光させるとともに、ストロボによるフラッシュ撮影中に被写体からの反射される光の累積量を測光／調光回路１３により検出し、累積された反射光量が所定値に達するとストロボ駆動回路７３によりストロボ１２の発光を停止させることにより、フラッシュ撮影の画像データが適正になるように制御する。ＣＰＵ５０は操作キー６５のタングステンボタン３２の操作の有無に応じてフラッシュ撮影を行った画像データに対し後述のように色補正処理を行う。
【００１３】また照明光色検出回路１５は、ストロボ１２の発光部近傍に備えられたストロボ光の色成分を検出する回路であり、ストロボ発光時にストロボ光の色を直接検出し、検出した色情報データ（色温度データ）をＣＰＵ５０に送る。なお測光／調光回路１３は、被写界の色成分を検出することができる回路であり、ストロボ非発光時に被写界の色（背景の色）を検出し、検出した背景光色情報データ（色温度データ）をＣＰＵ５０に送る。測光／調光回路１３および照明光色検出回路15の具体的構成としては、複数の光強度検出器（フォトダイオード等）のそれぞれに分光特性の異なるフィルタ（例えば赤フィルタ、緑フィルタ、青フィルタ）を設けたものである。
【００１４】ＣＰＵ５０は撮影モードではレリーズボタン１６の操作に応じて撮影制御回路６０を介し撮影動作を制御する。タイマ７４は時計回路を内蔵し、現在の日時に対応する日時情報を検出し、撮影時に撮影日時情報をＣＰＵ５０に供給する。ＣＰＵ５０は該撮影日時情報を画像データに付加してメモリカード７７に格納する。ＣＰＵ５０は、ＲＯＭ６７（リードオンリメモリ）に記憶されている制御プログラムに従い各部を制御する。ＥＥＰＲＯＭ６８（電気的消去書き込み可能ＲＯＭ）は不揮発性のメモリであって、後述する色補正処理のためのデータおよび電子カメラ１００の動作に必要な設定情報等を記憶している。ＲＡＭ７０は揮発性のメモリであって、ＣＰＵ５０の一時的作業領域として用いられる。ＣＰＵ５０は、電源スイッチ１７の操作状態を検知して、電源制御回路６４を介して電源６３の制御を行う。
【００１５】撮影制御回路６０は、レンズ駆動回路５２により撮影レンズ１０のフォーカシングとズーミングを行い、絞り制御回路５４により絞り５３を制御してＣＣＤ５５の露光量をコントロールし、ＣＣＤ駆動回路５６によりＣＣＤ５５の動作を制御する。被写体からの光束は撮影レンズ１０により光量調節のための絞り５３を介し、ＣＣＤ５５上に被写体像として形成され、この被写体像はＣＣＤ５５により撮像される。複数の画素を備えたＣＣＤ５５（チャージカップルドデバイス）は被写体像を撮像するための電荷蓄積型イメージセンサーであり、ＣＣＤ５５上に形成された被写体像の強度に応じた電気的な画像信号をＣＣＤ駆動回路５６により供給される駆動パルスに応じてアナログ処理部５７に出力する。なおＣＣＤ５５は３つの色成分（赤、緑、青）をそれぞれ検出する３種類の光検出部からなり、１つの画素は３種類の光検出部から構成されており、各画素に対応して３つの色成分（赤、緑、青）の画像信号が得られる。
【００１６】アナログ処理部５７はＣＣＤ５５が光電変換した画像信号を所定のタイミングでサンプリングし、そのサンプリングした信号を所定のレベルに増幅する。Ａ／Ｄ変換回路５８（アナログデジタル変換回路）はアナログ処理部５７でサンプリングした画像信号をデジタル化することによりデジタルデータに変換し、撮影バッファメモリ５９は該デジタルデータを一旦格納する。
【００１７】撮影制御回路６０は撮影モード中上述の動作を繰り返すとともに、画面制御回路９２はデータ／制御バス５１を介して撮影バッファメモリ５９に順次格納されるデジタルデータを読み出してフレームメモリ６９に一旦格納し、該デジタルデータを表示用画像データに変換してフレームメモリ６９に再格納し、該表示用画像データを左画面２１に表示させるというスルー画像表示動作を繰り返す。また画面制御回路９２は必要に応じてテキスト表示情報をＣＰＵ５０から入手し、表示用テキストデータに変換してフレームメモリ６９に格納し、該表示用テキストデータを左画面２１、右画面２２に表示させる。このようにして撮影モードにおいては、左画面２１にＣＣＤ５０により撮像されている画像がリアルタイムに表示されるので、このスルー画像をモニター画面として使用して撮影のための構図設定を行うことが可能になる。撮影制御回路６０は撮影バッファメモリ５９に格納したデジタルデータの高周波成分の度合い解析して撮影レンズ１０の焦点調節状態を検出し、検出結果に応じてレンズ駆動回路５２により撮影レンズ１０の焦点調節を行う。
【００１８】レリーズ時に撮影制御回路６０はＣＰＵ５０から撮影指示を受けると、ＣＣＤ駆動回路５６を介してＣＣＤ５５により被写体像を撮像させ、撮像により生成した画像信号をアナログ処理部５７、Ａ／Ｄ変換回路５８を介して撮影バッファメモリ５９にデジタルデータ（生データ）として一旦格納する。撮影制御回路６０は撮影バッファメモリ５９に一旦格納したデジタルデータを所定の記録フォーマット（ＪＰＥＧなど）に変換または圧縮して画像データを形成し、該画像データをメモリカード７７に記録保存する。なお後述するようにフラッシュ撮影時はストロボ発光ありと発光なしの連続２回の撮影を行い、ＣＰＵ５０は２つの画像データをＲＡＭ７０に一旦格納した後、ＥＥＰＲＯＭ６８に記憶されている色補正データを用いて照明光の色補正処理を行うことにより照明光色を補正した画像データ生成してメモリカード７７に記録保存する。
【００１９】なおＣＰＵ５０は必要に応じて、メモリカード７７に格納した画像データを無線電話回路７２およびアンテナ７６を介して外部に送信したり、逆に無線電話回路７２およびアンテナ７６を介して外部から受信した画像データをメモリカード７７に格納することができる。
【００２０】再生モードにおいては、画面制御回路９２はメモリカード７７からＣＰＵ５０に指示された画像データを読み出してフレームメモリ６９に一旦格納し、該画像データを左画面２１に表示するとともに、ＣＰＵ５０の指示に従い、再生モードの説明等のテキストデータをフレームメモリ６９に格納し、該テキストデータを右画面２２に表示する。
【００２１】図４はメモリカード７７内に格納される画像ファイルのデータ構成を示す。図４に示すようにメモリカード７７には複数の画像ファイルが保存される。各画像ファイルは画像データと付加情報データから構成される。付加情報データは、図５に示すように画像ファイルの識別情報（ファイル名）とフラッシュ撮影時は補助画像ファイルの識別情報（サブファイル名）と撮影日時データと撮影時の各種設定を示す撮影データとストロボ照明を行った否かを表すデータと撮影者により指定された照明光の種類データとストロボ発光時のストロボ光の色温度データと背景光の色温度データから構成される。
【００２２】図６は本発明による電子カメラの実施形態の状態遷移図である。電源ＯＮ時には撮影モードとなり、レリーズボタン１６の操作により撮影動作と撮影後の画像ファイル作成および画像ファイルのメモリカード７７への格納が行われる。再生モードにおいてはメモリカード７７に格納した画像データの再生表示動作が行われる。また撮影モードボタン２８を操作すると、再生モードから撮影モードに移行し、再生モードボタン２９を操作すると、撮影モードから再生モードに移行する。
【００２３】図７はフラッシュ撮影時（タングステンボタン３２が操作されている場合）の動作シーケンスを示す図であって、まずストロボ発光ありで第１回の撮影が行われ、画像データがＲＡＭ７０に格納される。図８はストロボ発光ありの画像データの例であって、画面中央の人物の顔色はストロボ光照明により白っぽくなりすぎている。続いてストロボ発光なし第２回の撮影（他の撮影条件は第１回の撮影と同一）が行われ、画像データがＲＡＭ７０に格納される。図９はストロボ発光なしの画像データの例であって、撮影条件は第１回の撮影と同一であるため、背景の露出はストロボ発光ありの画像データと同一であるが、画面中央の人物はストロボ光による照明がなく逆光状態にあるため露出が不足している。
【００２４】ＣＰＵ５０はＥＥＰＲＯＭ６８に記憶された色補正処理用データに応じてＲＡＭ７０に格納されたストロボ発光ありの画像データとストロボ発光なしの画像データに後述する画像処理を施して、タングステン光照明の画像データを生成し、該画像データをメモリカード７７に保存する。
【００２５】図１０は上記照明光色補正の詳細シーケンスを示す図であり、まずストロボ発光ありの３つの色成分の画像データ（ＴＲ、ＴＧ、ＴＢ）からストロボ発光なしの３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）を差し引きストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、Ｑｂ）を抽出する。なお上記処理は全ての画素に対して行われる。
【００２６】図１１はある１つの画素の画像データに対する上記照明光色補正の処理を図式的に表したものであり、上段が赤（Ｒ）に対する画像処理、中段が緑（Ｇ）に対する画像処理、上段が青（Ｂ）に対する画像処理を表し、各段において３つの色成分毎の画素データを棒グラフで示している。図１１において左の棒グラフはストロボ発光なしの場合の３つの色成分毎の画素データ（ＳＲ、ＳＧ、ＳＢ）を表し、中央の棒グラフはストロボ発光ありの場合の３つの色成分毎の画素データ（ＴＲ、ＴＧ、ＴＢ）を表している。中央の棒グラフにおける３つの色成分毎の画素データ（ＴＲ、ＴＧ、ＴＢ）は、ストロボＯＮ以外の撮影条件がストロボ発光なしの場合と同じなので、数式１に示すようにストロボ発光なしの場合の背景光（定常光または周囲光）のみの３つの色成分毎の画素データ（ＳＲ、ＳＧ、ＳＢ）とストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）の和となっている。
【００２７】
【数１】 ＴＲ＝ＳＲ＋ＱＲＴＧ＝ＳＧ＋ＱＲＴＢ＝ＳＢ＋ＱＢしたがってストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）は、数式２に示すようにストロボ発光ありの場合の３つの色成分の画像データ（ＴＲ、ＴＧ、ＴＢ）からストロボ発光なしの場合の３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）を差し引いたものとなる。
【００２８】
【数２】 ＱＲ＝ＴＲ−ＳＲＱＧ＝ＴＧ−ＳＧＱＢ＝ＴＢ−ＳＢ次に図１０において、検出されたストロボ光の色温度データと指定された照明光の種類に応じて、ストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、Ｑｂ）を補正するための補正係数を求めるために、ＥＥＰＲＯＭ６８に記憶されている補正係数表を参照する。ここで照明光としてタングステン光が指定されている場合には、ストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、Ｑｂ）に対しタングステン光の補正係数による補正を行い、照明光としてタングステン光が指定されていない場合には、ストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）に対し昼光（色温度５５００度Ｋ）の補正係数による補正を行うものとする。図１２は検出されたストロボ光の色温度データと指定された照明光の種類との組み合わせに対する３つの色成分毎の補正係数の関係を示す表である。例えば指定された照明光がタングステン光である場合は、ストロボ照明光のみによる赤色成分の画像データＱＲを増加させるために補正係数ＫＲは１以上になっており、ストロボ照明光のみによる青色成分の画像データＱＢを減少させるために補正係数ＫＢは１以下になっている。
【００２９】次に図１０において、数式３のように図１２の表から求められた補正係数ＫＲ、ＫＧ、ＫＢがストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）に乗ぜられ、ストロボ発光なしの場合の３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）に加えられ、照明光の色が補正された３つの色成分の画像データ（ＵＲ、ＵＧ、ＵＢ）が求められる。
【００３０】
【数３】 ＵＲ＝ＳＲ＋ＫＲ×ＱＲＵＧ＝ＳＧ＋ＫＢ×ＱＧＵＢ＝ＳＢ＋ＫＢ×ＱＢ図１１において右の棒グラフが照明光の色が補正された３つの色成分の画像データ（ＵＲ、ＵＧ、ＵＢ）を表す。上記のような画像処理が画像データの全画素について行われる。図１３は、図８に示すストロボ発光ありの画像データに対しタングステン光照明を指定した場合の照明光補正を行った画像データの例であって、画面中央の人物の顔色が赤みを帯びて健康的に見えるようになったとともに、背景に対してはストロボ照明光のみによる３つの色成分の画像データ（ＱＲ、ＱＧ、ＱＢ）がないので補正が行われず、図８の露出と同じになっている。
【００３１】図１４は上記実施形態における電子カメラ１００（ＣＰＵ５０）の動作のメインフローチャートである。まずＳ１０で電源スイッチ１７を操作すると電源がＯＮとなり、Ｓ２０で撮影モードのサブルーチンを実行し撮影可能状態になる。撮影モード中にレリーズボタン１６を操作すると、Ｓ３０のレリーズ割込み処理サブルーチンが実行され、撮影動作が行われる。撮影モード中に再生モードボタン２９を操作すると、Ｓ４０のモード切換割込み処理サブルーチンが実行され、Ｓ５０の再生モードサブルーチンが実行され、メモリカード７７に格納されている画像データが左画面２１に再生表示される。逆に再生モード中に撮影モードボタン２８を操作すると、Ｓ４０のモード切換割込み処理サブルーチンが実行され、Ｓ２０の撮影モードサブルーチンに移行する。
【００３２】図１５は撮影モードサブルーチンの詳細フローチャートであって、Ｓ２０で起動すると、Ｓ２０１の処理を繰り返す。Ｓ２０１ではユーザが設定したカメラ設定条件で順次ＣＣＤ５５により生成される画像データを図１６に示すように左画面２１に表示し、そのときのカメラ設定データ（ストロボＯＮ／ＯＦＦ状態、照明光の種類を含む）を右画面２２にテキスト表示する。なおストロボのＯＮ／ＯＦＦは電子カメラ１００が測光／調光データに基づいて自動的に設定するが、ユーザーはストロボボタン３１の操作により自動的に設定されたストロボ発光状態を変更することができる。またタングステンボタン３２の操作に応じて照明光の種類を指定することができる。
【００３３】図１７はレリーズ割込み処理サブルーチンの詳細フローチャートであって、Ｓ３０で起動すると、Ｓ３０１で撮影モードであるかチェックし、撮影モードでない場合はＳ３０６でリターンする。撮影モードの場合は、Ｓ３０２でユーザまたはカメラにより設定されている撮影条件（ストロボＯＮの場合はストロボを発光させる）で撮像動作を実行し、ストロボＯＦＦの場合は得られた画像データに付加情報データを付加してメモリカード７７に格納するとともに、ストロボＯＮの場合は得られた画像データをＲＡＭ７０に格納する。Ｓ３０３でストロボＯＮであるかチェックし、ストロボＯＮでない場合はＳ３０６でリターンする。ストロボＯＮの場合は、Ｓ３０４でストロボを発光させない以外はＳ３０２の撮影条件と同じ設定で撮像動作を実行し、得られた画像データをＲＡＭ７０に格納する。Ｓ３０５では、上述のように、ストロボＯＮの画像データとストロボＯＦＦの画像データと検出したストロボ照明光の色温度と指定された照明光の種類に基づき、ストロボＯＮの画像データを補正し、指定された照明光による画像データを生成し、該照明光の色が補正された３つの色成分の画像データ（ＵＲ、ＵＧ、ＵＢ）により構成される主ファイルとストロボ発光なしの場合の３つの色成分の画像データ（ＳＲ、ＳＧ、ＳＢ）により構成されるサブファイルと付加情報データ（ストロボＯＮの有無、指定照明光種類、照明光色温度、背景光色温度、撮影データ）をメモリカード７７に格納し、Ｓ３０６でリターンする。
【００３４】図１８はモード切換割込み処理サブルーチンの詳細フローチャートであって、Ｓ４０で撮影モードボタン２８または再生モードボタン２９の操作により起動すると、Ｓ４０１で操作されたボタンが撮影モードボタン２８であるかチェックし、撮影モードボタン２８である場合は再生モードを終了し、Ｓ２０の撮影モードサブルーチンに移行する。操作されたボタンが撮影モードボタン２８でない場合は撮影モードを終了し、Ｓ５０の再生モードサブルーチンに移行する。
【００３５】図１９は再生モードサブルーチンの詳細フローチャートであって、Ｓ５０で起動すると、Ｓ５０１の処理を繰り返す。Ｓ５０１では左方向ボタン２５、右方向ボタン２６の操作に応じてメモリカード７７に格納された画像データを順次読み出し、図２０に示すように左画面２１に再生表示するとともに、右画面２２に操作方法の説明を表示する。なお電源ＯＮ直後は最新の画像データを表示し、以後は左方向ボタン２５の操作に応じて順次時間データの古い画像データを表示するとともに、右方向ボタン２６の操作に応じて順次時間データの新しい画像データを表示する。
【００３６】上記実施形態（図１〜図２０）においては、フラッシュ撮影時に照明ありと照明なしの２回の撮像動作を行い、照明ありと照明なしの画像データの３つの色成分の差成分に対して、撮影時の照明光と指定された照明光の相違に基づいた補正を行うことにより、自動的に照明光色の補正を行って指定された照明光による画像データを生成するので、フラッシュ撮影において簡便かつ迅速かつ正確に照明ムラ補正を行うことができる。またフラッシュ撮影時の照明光の色を直接検出して照明光の補正に用いているので、ストロボ発光色の経年変化、発光量によるストロボ発光色の変化、ストロボ個体毎の発光色の相違等にも対応でき、正確な照明光色の再現が可能である。これによりストロボ発光管の設計の制約事項を緩和でき、小型でかつ低コストなストロボを使用することも可能になる。（変形形態の説明）本発明は以上説明した実施形態に限定されることなく、種々の変形や変更が可能である。
【００３７】上記実施形態（図１〜図２０）における照明光色補正の画像処理はストロボ発光ありの画像データとストロボ発光なしの画像データを短期間に連続して撮像することにより電子カメラのブレをなくし、同一画素の３つの色成分ごとの画像データに対し差分演算を行っているが、２回の撮影の間に発生する被写体の移動やカメラブレが問題となるような場合には、図２１に示すようにストロボ発光ありの画像データとストロボ発光なしの画像データ間で周知の方法で動きベクトルを検出し、該動きベクトルに基づいてストロボ発光なしの画像データとストロボ発光ありの画像データの間の対応する画素の関係を変更して数式１から数式３の演算を行うようにしてもよい。図２１において画面中で破線で示す被写体がストロボ発光なしの画像データであり、実線で示す被写体がストロボ発光ありの画像データである。動きベクトルの検出の方法としては、ブロック・マッチング法やグラジエント法が知られている。またカメラブレのみを検出する場合には電子カメラ１００に角速度センサーなどのフレ検出センサーを内蔵し、該センサーによりストロボ発光なしの撮像時点とストロボ発光ありの撮像時点間のカメラブレを検出し、検出したカメラブレデータに基づいて動きベクトルを算出するようにしてもよい。このようにすれば、ストロボ発光なしの撮像時点とストロボ発光ありの撮像時点間のカメラブレや被写体移動を補償することができるので、本発明の適用範囲を手持ち撮影に対しても拡大することができる。
【００３８】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、電子カメラは内蔵ストロボを用いてフラッシュ撮影を行っているが、外付ストロボを用いてフラッシュ撮影する場合は、該外付ストロボからフラッシュ撮影時の照明光の色温度データと図１２に示すような補正係数の表データを受信し、該フラッシュ撮影時の照明光の色温度データと補正係数の表データに基づいて照明光色補正を行うようにしてもよい。図２２は外付ストロボを電子カメラのストロボシューを用いて取り付けた場合の構成を示し、外付ストロボ内のストロボＣＰＵからフラッシュ撮影時の照明光の色温度データと補正係数の表データがストロボシューを介した通信経路を通じて電子カメラ側のカメラＣＰＵに送信され記憶される。電子カメラは外付ストロボを用いてフラッシュ撮影を行う場合は、前記カメラＣＰＵが受信したに照明光の色温度データと補正係数の表データに基づいて照明光色補正を行う。
【００３９】外付ストロボと内蔵ストロボを併用してフラッシュ撮影を行う場合や、多灯フラシュ撮影を行う場合は、照明光色補正において各ストロボの発光色の相違が問題となるので、各ストロボを単独に発光させて複数回の撮影を行い、各画像データに対しそれぞれのストロボの照明光色補正を施した上で、補正済み画像データを合成して、複数のストロボを同時に使用した場合の照明光色を補正した画像データを生成するようにしてもよい。
【００４０】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、指定できる照明光の種類は昼光とタングステン光のみであるが、補正係数表を複数種類の照明光に対して用意しておけば、複数種類の照明光を指定することもできる。また照明光の種類を指定する代わりに、直接照明光の色温度を指定するようにしてたり、上方向ボタン２３や下方向ボタン２４の操作に応じて色温度の調整を行うようにしても構わない。
【００４１】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、照明光の種類は手動で指定しているが、背景光の色検出に応じて自動的に照明光の種類の指定を行っても良い。例えば背景光の色温度と同じ色温度の照明光を自動指定することにより、画像データ全体は同一の照明光により照明されたものとなる。このようにすれば、照明光の指定の手間が省けるとともに、フラッシュ撮影であることを感じさせないより自然なムードの画像データを生成することができる。
【００４２】上記実施形態（図１〜図２０）における照明光色補正の画像処理においては、照明光成分の色のみを補正しているが、補正された照明光のみの３つの色成分（ＫＲ×ＱＲ、ＫＢ×ＱＧ、ＫＢ×ＱＢ）にさらに一様な係数を乗ずることにより、ストロボ光量の調整を行うことができる。例えばフラッシュ撮影した画像データに対してはストロボ光なしの画像データ（ＳＲ、ＳＧ、ＳＢ）と照明光の色補正を行った画像データ（ＵＲ、ＵＧ、ＵＢ）が別々にメモリカード７７に格納されているので、再生時にこの２つの画像データより照明光のみの３つの色成分（ＫＲ×ＱＲ、ＫＢ×ＱＧ、ＫＢ×ＱＢ）を求め、該３つの色成分を上ボタン２３の操作に応じて増倍させ、増倍させたストロボ光成分とストロボ光なしの画像データ成分を加算した画像データを表示させることにより、ストロボ光量を増した画像データを生成することができる。反対に再生時に下ボタン２４の操作に応じて３つの色成分を縮小させ、縮小させたストロボ光成分とストロボ光なしの画像データ成分を加算した画像データを表示させることにより、ストロボ光を押さえた画像データを生成することができる。ユーザは所望のストロボ効果が得られた画像データが表示された時点で決定ボタン２７を操作することにより、該画像データをメモリカード７７に保存することができる。このようにすれば、照明光色補正のほかにストロボ光量不足やストロボ光量オーバーがあった場合でも事後的に適正なストロボ光量の画像データをえることができる。
【００４３】またストロボ光量の調整の他に、背景光成分（ＳＲ、ＳＧ、ＳＢ）の調整（色、光量）を行うようにしても構わない。このようにすれば、更に自然光と人工照明光のバランスのとれた画像データを生成することが可能になる。また複数のストロボを使用してフラッシュ撮影した画像データに対しては、各ストロボ毎の光量を上方向ボタン２３や下方向ボタン２４の操作に応じて調整するようにしても構わない。
【００４４】上記実施形態（図１〜図２０）における照明光色補正の画像処理は電子カメラ１００内のＣＰＵ５０で行われているが、図２３に示すように電子カメラ１００側では撮影したストロボ発光なしの画像データとストロボ発光ありの画像データと撮影時の照明光色データをメモリカード７７に格納するまでを行い、該メモリカード７７をパソコン１４０に装着し、前記２つの画像データと撮影時の照明光色データとパソコンに格納してある補正係数の表に基づきパソコン１４０側で指定した照明光に寄る画像データとなるように照明光色補正の画像処理を行うようにしても構わない。このようにすれば、電子カメラ１００側で大規模な画像処理を行う必要がなく、パソコン１４０側の高性能なＣＰＵで画像処理を行うことができるので、画像処理を迅速に行うことができるとともに、電子カメラ１００のＣＰＵ５０の負担を軽減することができる。
【００４５】またメモリカードを介して画像データを電子カメラ１００からパソコン１４０に転送する代わりに、通信回線により電子カメラ１００からパソコン１４０に画像データなどを転送するようにしてもよい。この場合電子カメラ１００は無線通信回路７２により無線通信回線１３０と基地局１２０とインターネット１３０を経由してパソコン１４０に接続し、画像データをパソコン１４０に送信する。またパソコン１４０で画像処理をした画像データをパソコン１４０から電子カメラ１００に送り返してもよい。このようにすれば、電子カメラ１００側で大規模な画像処理を行う必要がなく、パソコン１４０側の高性能なＣＰＵで画像処理を行うことができるので、画像処理を迅速に行うことができるとともに、電子カメラ１００のＣＰＵ５０の負担を軽減することができる。
【００４６】上記実施形態（図１〜図２０）においてはフラッシュ撮影時にストロボの照明光の色を検出しているが、照明光色の変化が少ない場合はストロボの照明光の色を検出しないで、固定の色温度データを使用してもよい。このようにすればストロボの照明光の色を検出するための照明光色検出回路１５が不要となるので、電子カメラをさらに低コストで小型化することができるとともに、図１２の補正係数表が簡易になり、ＥＥＰＲＯＭ６８の容量を少なくすることができる。
【００４７】上記実施形態（図１〜図２０）において電子カメラ１００は被写体を照明するためにストロボ光を用いているが、他の人工照明光（フラッドランプ、蛍光灯など）であっても構わない。
【００４８】上記実施形態（図１〜図２０）において、照明光色補正を行うためにストロボ光ありとストロボ光なしの２回の撮影を行っているが、ストロボ光なしの撮影ではほとんど真っ暗な場合は、ストロボ光なしの撮影は省略し、ストロボ光なしの３つの色成分（ＳＲ、ＳＧ、ＳＢ）を０として取り扱っても良い。例えば測光／調光回路１３で検出した画面全体の輝度が所定値以下の場合はストロボ光なしの撮影の必要なしと判断する。このようにすれば、フラッシュ撮影時に無駄な処理を行う必要がなくなる。
【００４９】
【発明の効果】以上説明したように、本発明による画像処理装置および画像処理方法においては、フラッシュ撮影時に照明ありと照明なしの撮像動作を行って画像データの組を生成し、該画像データの組に対して画像処理を行って照明光の寄与量を色成分毎に算出し、該色成分毎に算出した照明光の寄与量を撮影時の照明光の色と指定された照明光の色の相違に基づいて補正することにより、指定された照明光による画像データを生成するので、所望の照明光色を備えていない照明手段を使用しても、簡便かつ迅速に照明光の色を補正できる。またこれによりストロボの照明光の色を厳密に揃える必要がなくなるので、ストロボの設計、部品の性能の制約が緩和でき、低コストで小型なストロボを使用することができる。
【００５０】また本発明による画像処理装置および画像処理方法においては、照明光の色補正が自動的に行われるので、撮影後に画像データを見ながら人の判断に応じて照明光色の補正を行うといった手間も省ける。
【００５１】また本発明による画像処理装置および画像処理方法においては、画面中に照明光の寄与が異なる領域（主要被写体と遠距離にある背景）が存在しても、照明ありの画像データと照明画像なしの画像データの差分に対して照明光色の補正を行うので、背景部分に対して主要被写体部分を分離して補正すると言った手間がかからない。
【図面の簡単な説明】
【図１】電子カメラの外観図（正面視）である。
【図２】電子カメラの外観図（背面視）である。
【図３】電子カメラの電気構成を示すブロック図である。
【図４】メモリカードのデータの構成図である。
【図５】付加情報データの構成図である。
【図６】電子カメラの状態遷移図である。
【図７】照明光の色補正処理の説明図である。
【図８】画像の表示例である。
【図９】画像の表示例である。
【図１０】照明光の色補正処理の説明図である。
【図１１】照明光の色補正処理の説明図である。
【図１２】照明光の補正係数の表である。
【図１３】画像の表示例である。
【図１４】ＣＰＵのメインフローチャートである。
【図１５】サブルーチンのフローチャートである。
【図１６】画面の表示例である。
【図１７】サブルーチンのフローチャートである。
【図１８】サブルーチンのフローチャートである。
【図１９】サブルーチンのフローチャートである。
【図２０】画面の表示例である。
【図２１】画像処理の説明図である。
【図２２】電子カメラの構成例である。
【図２３】画像処理システムの構成例である。
【符号の説明】
１０ 撮影レンズ
１２ ストロボ
１３ 測光／調光回路
１５ 照明光色検出回路
２１ 左ＬＣＤ（左画面）
２２ 右ＬＣＤ（右画面）
２３ 上方向ボタン
２４ 下方向ボタン
２５ 左方向ボタン
２６ 右方向ボタン
２７ 決定ボタン
２８ 撮影モードボタン
２９ 再生モードボタン
３１ ストロボボタン
３２ タングステンボタン
５０ ＣＰＵ
５１ データ／制御バス
５５ ＣＣＤ
６０ 撮影制御回路
６５ 操作キー
７７ メモリカード
１００ 電子カメラ
【特許請求の範囲】
【請求項１】 被写体を撮影し、複数の色成分からなる画像データを生成する撮像手段と、前記被写体を照明する照明手段と、照明光の種類を指定する照明光指定手段と、前記撮像手段により同一シーンの被写体に対し前記照明手段による照明がある場合とない場合で撮像した２つの画像データを生成させる撮影制御手段と、前記照明光指定手段により指定された照明光と前記照明手段の照明光との相違に基づき、前記２つの画像データから抽出された複数の色成分に補正を施すことにより、照明光色を補正した画像データ生成する照明光色補正手段とを備えることを特徴とする画像処理装置。
【請求項２】 請求項１に記載の画像処理装置において、前記照明光色補正手段は、前記照明手段による照明がある場合の画像データの色成分から前記照明手段による照明がない場合の画像データの色成分を差し引いた差分成分に対し、前記照明光指定手段により指定された照明光と前記照明手段による照明光の相違に基づいて求められた色成分毎の補正係数を乗ずる補正処理を施すことを特徴とする画像処理装置。
【請求項３】 請求項２に記載の画像処理装置において、照明光色補正された前記差分成分の量を手動操作に応じて一率に調整する調整手段を備えることを特徴とする画像処理装置。
【請求項４】 請求項２に記載の画像処理装置において、前記照明手段による照明がある場合とない場合の２つの画像データが撮影される間の画面上での被写体の動き情報を検出する動き検出手段をさらに備えるとともに、前記照明光色補正手段は、前記動き情報に応じて前記照明手段による照明がある場合の画像データと前記照明手段による照明がない場合の画像データの相対的な位置関係を対応付けて、照明がある場合の画像データから照明がない場合の画像データを差し引くことを特徴とする画像処理装置。
【請求項５】 請求項１に記載の画像処理装置において、前記照明手段の照明光の色情報を検出する照明光色検出手段を設けるとともに、前記照明光色補正手段は、前記照明光指定手段により指定された照明光の色情報と前記照明光色検出手段により検出された照明光の色情報の相違に基づき、前記２つの画像データから抽出された複数の色成分に補正を施すことを特徴とする画像処理装置。
【請求項６】 請求項１に記載の画像処理装置において、定常光の色情報を検出する定常光色検出手段を設けるとともに、前記照明光指定手段は、前記定常光色検出手段により検出された色情報に応じて照明光の種類を指定することを特徴とする画像処理装置。
【請求項７】 請求項１乃至請求項６のいずれか１項に記載の画像処理装置において、前記照明手段を収納する付属構体が前記撮像手段と撮影制御手段と照明光色補正手段を収納する本体に対し着脱可能に構成されることを特徴とする画像処理装置。
【請求項８】 被写体を人工照明して撮影することにより複数の色成分からなる第１の画像データを生成する工程と、被写体を人工照明なしで撮影することにより複数の色成分からなる第２の画像データを生成する工程と、前記第１の画像データから前記第２の画像データを差し引くことにより色成分毎の照明成分を抽出する工程と、照明光の種類を指定する工程と、前記人工照明光の色と指定された照明光の色との相違に基づいて、前記色成分毎の照明成分を補正する工程と、前記補正された前記色成分毎の前記照明成分に前記色成分毎の非照明成分を加算することにより照明光色補正された画像データを生成する工程とからなることを特徴とする画像処理方法。
【請求項１】 被写体を撮影し、複数の色成分からなる画像データを生成する撮像手段と、前記被写体を照明する照明手段と、照明光の種類を指定する照明光指定手段と、前記撮像手段により同一シーンの被写体に対し前記照明手段による照明がある場合とない場合で撮像した２つの画像データを生成させる撮影制御手段と、前記照明光指定手段により指定された照明光と前記照明手段の照明光との相違に基づき、前記２つの画像データから抽出された複数の色成分に補正を施すことにより、照明光色を補正した画像データ生成する照明光色補正手段とを備えることを特徴とする画像処理装置。
【請求項２】 請求項１に記載の画像処理装置において、前記照明光色補正手段は、前記照明手段による照明がある場合の画像データの色成分から前記照明手段による照明がない場合の画像データの色成分を差し引いた差分成分に対し、前記照明光指定手段により指定された照明光と前記照明手段による照明光の相違に基づいて求められた色成分毎の補正係数を乗ずる補正処理を施すことを特徴とする画像処理装置。
【請求項３】 請求項２に記載の画像処理装置において、照明光色補正された前記差分成分の量を手動操作に応じて一率に調整する調整手段を備えることを特徴とする画像処理装置。
【請求項４】 請求項２に記載の画像処理装置において、前記照明手段による照明がある場合とない場合の２つの画像データが撮影される間の画面上での被写体の動き情報を検出する動き検出手段をさらに備えるとともに、前記照明光色補正手段は、前記動き情報に応じて前記照明手段による照明がある場合の画像データと前記照明手段による照明がない場合の画像データの相対的な位置関係を対応付けて、照明がある場合の画像データから照明がない場合の画像データを差し引くことを特徴とする画像処理装置。
【請求項５】 請求項１に記載の画像処理装置において、前記照明手段の照明光の色情報を検出する照明光色検出手段を設けるとともに、前記照明光色補正手段は、前記照明光指定手段により指定された照明光の色情報と前記照明光色検出手段により検出された照明光の色情報の相違に基づき、前記２つの画像データから抽出された複数の色成分に補正を施すことを特徴とする画像処理装置。
【請求項６】 請求項１に記載の画像処理装置において、定常光の色情報を検出する定常光色検出手段を設けるとともに、前記照明光指定手段は、前記定常光色検出手段により検出された色情報に応じて照明光の種類を指定することを特徴とする画像処理装置。
【請求項７】 請求項１乃至請求項６のいずれか１項に記載の画像処理装置において、前記照明手段を収納する付属構体が前記撮像手段と撮影制御手段と照明光色補正手段を収納する本体に対し着脱可能に構成されることを特徴とする画像処理装置。
【請求項８】 被写体を人工照明して撮影することにより複数の色成分からなる第１の画像データを生成する工程と、被写体を人工照明なしで撮影することにより複数の色成分からなる第２の画像データを生成する工程と、前記第１の画像データから前記第２の画像データを差し引くことにより色成分毎の照明成分を抽出する工程と、照明光の種類を指定する工程と、前記人工照明光の色と指定された照明光の色との相違に基づいて、前記色成分毎の照明成分を補正する工程と、前記補正された前記色成分毎の前記照明成分に前記色成分毎の非照明成分を加算することにより照明光色補正された画像データを生成する工程とからなることを特徴とする画像処理方法。
【図１】
【図２】
【図４】
【図５】
【図１５】
【図３】
【図６】
【図７】
【図８】
【図９】
【図１２】
【図１９】
【図１０】
【図１１】
【図１３】
【図１４】
【図１６】
【図１８】
【図１７】
【図２０】
【図２１】
【図２２】
【図２３】
【図２】
【図４】
【図５】
【図１５】
【図３】
【図６】
【図７】
【図８】
【図９】
【図１２】
【図１９】
【図１０】
【図１１】
【図１３】
【図１４】
【図１６】
【図１８】
【図１７】
【図２０】
【図２１】
【図２２】
【図２３】
【公開番号】特開２００３−２９６７２０（Ｐ２００３−２９６７２０Ａ）
【公開日】平成１５年１０月１７日（２００３．１０．１７）
【国際特許分類】
【出願番号】特願２００２−１０００２７（Ｐ２００２−１０００２７）
【出願日】平成１４年４月２日（２００２．４．２）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成１５年１０月１７日（２００３．１０．１７）
【国際特許分類】
【出願日】平成１４年４月２日（２００２．４．２）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]