画像処理装置、撮像装置並びに画像処理方法
【課題】画像の彩度を失うことなく階調別に色補正を行うことが可能な画像処理装置、該画像処理装置を備える撮像装置並びに画像処理方法を提供する。
【解決手段】本発明に係る画像処理装置は、ＹＣｂＣｒ画像データについて、１画素ずつ（Ｓ１１）、階調判定を行い（Ｓ１２）、所定階調に対応して所定の色補正値を有する色補正テーブルから前記階調判定で得られた階調に対応する色補正値を算出し（Ｓ１３）、該色補正値に従って色差信号Ｃｂ、Ｃｒを補正する（Ｓ１４）階調別色補正機能を有する。
【解決手段】本発明に係る画像処理装置は、ＹＣｂＣｒ画像データについて、１画素ずつ（Ｓ１１）、階調判定を行い（Ｓ１２）、所定階調に対応して所定の色補正値を有する色補正テーブルから前記階調判定で得られた階調に対応する色補正値を算出し（Ｓ１３）、該色補正値に従って色差信号Ｃｂ、Ｃｒを補正する（Ｓ１４）階調別色補正機能を有する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、入力される画像データについて階調別に色補正を行う画像処理装置、該画像処理装置を備え電子画像を撮像・再生するカメラ等の撮像装置並びにカメラ等で撮影した画像を処理する画像処理アルゴリズムからなる画像処理方法に関するものである。
【背景技術】
【０００２】
近年、固体撮像素子では高画素化が進み、それに伴い固体撮像素子を駆動する駆動パルスの高速化が進んでいる。その結果、画素の微細化に伴う隣接画素からの光の回り込みや、電荷転送不良により、隣の画素の信号量が漏れ込んでくる混色が発生する場合がある。
【０００３】
また、ＣＣＤでは特殊な電荷転送を行うものも登場しており、画像の黒レベルが不安定となり特定の階調で着色が発生する場合がある。
【０００４】
従来方式では、このような階調により着色が発生した場合には、階調によって(例えば、低輝度、高輝度など)色を抑圧する方式が用いられているが、色を抑圧することにより彩度を失い白黒画像となってしまう問題があった。
【０００５】
なお、特許文献１では、色補正量決定部の決定結果と輝度信号Ｙのレベルに応じて色相、彩度を補正する技術が提案されているが、輝度信号Ｙのレベル（階調）に対して色補正量を決定する方法については記載されていない。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、以上の従来技術における問題に鑑みてなされたものであり、画像の彩度を失うことなく階調別に色補正を行うことが可能な画像処理装置、該画像処理装置を備える撮像装置並びに画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するために提供する本発明は、以下の通りである。
〔１〕 輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データが入力される画像入力部と、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを記憶する色補正テーブル記憶部と、前記色補正テーブル記憶部に記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択部と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定部と、前記色補正テーブル選択部で選択された色補正テーブルから前記階調判定部で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出部と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正部と、を備えることを特徴とする画像処理装置。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
〔２〕 前記色補正テーブルは、複数階調それぞれに対応して色補正値が設定されていることを特徴とする前記〔１〕に記載の画像処理装置。
〔３〕 前記色補正テーブルは、前記画像データで取りうる輝度範囲に対応した全階調それぞれに色補正値を有するものであることを特徴とする前記〔１〕に記載の画像処理装置。
〔４〕 前記色補正テーブルは、前記画像データで取りうる輝度範囲において幾つかの階調で設定される色補正値を色補正代表点として持つものであり、前記色補正値算出部は、該色補正テーブルの色補正代表点間を線形補間して色補正値Ａを算出することを特徴とする前記〔１〕に記載の画像処理装置。
〔５〕 前記色補正テーブルは、色差信号Ｃｂ、Ｃｒそれぞれに対応して別に設けられた色補正テーブルのペアからなり、該ペアの色補正テーブルそれぞれにおける所定階調と色補正値との関係を同じ設定又は異なる設定とされていることを特徴とする前記〔１〕に記載の画像処理装置。
〔６〕 前記画像データについて補色方向に色補正するときに、前記色補正テーブル選択部は、所定階調と色補正値との関係が同じ設定とされた前記ペアの色補正テーブルを選択することを特徴とする前記〔５〕に記載の画像処理装置。
〔７〕 前記〔１〕〜〔６〕のいずれかに記載の画像処理装置を備えることを特徴とする撮像装置。
〔８〕 記憶部を有する演算装置に入力される輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データについて階調別に色補正する画像処理方法であって、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを前記記憶部に記憶させる色補正テーブル記憶工程と、前記色補正テーブル記憶工程で記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択工程と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定工程と、前記色補正テーブル選択工程で選択された色補正テーブルから前記階調判定工程で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出工程と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正工程と、を備えることを特徴とする画像処理方法。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【発明の効果】
【０００８】
本発明によれば、画像データの輝度信号Ｙに対して階調判定部で判定を行い階調判定部の結果に応じた色補正値を用いて色信号Ｃｂ、Ｃｒを補正することにより、各階調毎に適切な色補正を行うことができる。また、特定階調で着色が発生する場合には特定階調のみに色補正が行え、効果的な階調別の色補正を行うことができる。更に、従来の色抑圧方式では抑圧レベルによっては色味を失い白黒の画像になってしまうという問題があったが、本発明では色味を失うことなく補正を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】本発明に係る撮像装置に一態様であるデジタルカメラの外観図である。
【図２】図１のデジタルカメラの制御系のブロック図である。
【図３】基本的な画像処理に関するフローチャートである。
【図４】ガンマ補正曲線と出力装置の入出力特性の関係を示す図である。
【図５】色補正処理の説明図である。
【図６】エッジ強調処理の説明図である。
【図７】本発明に係る画像処理装置における画像処理に関するフローチャートである。
【図８】階調別色補正ブロックにおける画像処理に関するフローチャートである。
【図９】所定階調に対応して所定の色補正値が設定された色補正テーブルの説明図である。
【図１０】Ｃｂ、Ｃｒ信号の色補正テーブル設定例（１）を示す図である。
【図１１】Ｃｂ、Ｃｒ信号の色補正テーブル設定例（２）を示す図である。
【図１２】Ｃｂ、Ｃｒ信号の色補正テーブル設定例（３）を示す図である。
【発明を実施するための形態】
【００１０】
以下に、本発明に係る画像処理装置、撮像装置並びに画像処理方法について説明する。
ここでは、本発明についてデジタルカメラの実施形態を用いて説明を行うがこれに限定されず、カメラ機能を持つ電子機器、あるいは、画像を処理する画像処理ＩＣ、画像処理ソフトなど画像処理全般に適用することが可能である。
【００１１】
図１は、本発明に係る撮像装置に一態様であるデジタルカメラの外観図であり、図２は、同デジタルカメラの制御系のブロック図である。
図１に示すように、デジタルカメラは、カメラ上面には、サブＬＣＤ（１）と、レリーズボタン（２）と、撮影／再生切り換えダイヤル（４）とを有する。サブＬＣＤ（１）は、例えば、撮影可能枚数など表示するための表示部である。また、カメラ正面には、ストロボ発光部（３）と、測距ユニット（５）と、リモコン受光部（６）と、鏡胴ユニット（７）と、光学ファインダー（正面）（１１ａ）とを有する。メモリカードスロットル（１２１）は、メモリカード（１３０）を挿入するスロットルであり、カメラ側面に設けてある。更に、カメラ裏面には、ＡＦＬＥＤ（オートフォーカスＬＥＤ）（８）と、ストロボＬＥＤ（９）と、ＬＣＤモニタ（１０）と、光学ファインダー（裏面）（１１ｂ）と、ズームボタン（１２）と、電源スイッチ（１３）と、操作部（１４）とを有する。
【００１２】
図１，図２に基づいてデジタルカメラの動作を説明する。
図１，図２において、ストロボ発光部（３），ストロボ回路（１１４）は、自然光などの光が足りない場合に光量を補う装置である。暗い場所や被写体が暗い場合の撮影においては、後述するデジタルスチルカメラプロセッサ（１０４）からストロボ回路（１１４）にストロボ発光信号を送信し、ストロボ回路（１１４）は、ストロボ発光部（３）を発光させ被写体を明るくする。
【００１３】
測距ユニット（５）は、カメラと被写体との距離を測る装置である。現在、デジタルカメラでは、撮像素子（ＣＣＤ）に形成された像のコントラストを検出し、最もコントラストの高い位置にレンズを移動させてフォーカスを合わせるＣＣＤ−ＡＦ方式が用いられている。しかし、ＣＣＤ−ＡＦ方式は、レンズを少しずつ動かしコントラストを探していくためフォーカス動作が遅いという問題があった。そこで、測距ユニット（５）を用いて被写体との距離情報を常に取得し、距離情報からレンズを一気に移動してフォーカス動作を高速化している。温度センサ（不図示）は環境温度を測定する装置で、カメラ内外の温度を測定し、温度が異常に上昇している場合にはカメラの電源を落としたり、温度センサのデータを参照してカメラの制御内容を変更したりする。
【００１４】
鏡胴ユニット（７）は、被写体の光学画像を取り込むズームレンズ（７−１ａ）、ズーム駆動モータ（７−１ｂ）からなるズーム光学系（７−１）、フォーカスレンズ（７−２ａ）、フォーカス駆動モータ（７−２ｂ）からなるフォーカス光学系（７−２）、絞り（７−３ａ）、絞りモータ（７−３ｂ）からなる絞りユニット（７−３）、メカシャッタ（７−４ａ）、メカシャッタモータ（７−４ｂ）からなるメカシャッタユニット（７−４）、各モータを駆動するモータドライバ（７−５）を有する。そして、モータドライバ（７−５）は、リモコン受光部（６）入力や操作部Ｋｅｙユニット（ＳＷ１〜ＳＷ１３）の操作入力に基づく、後述するカメラプロセッサ（１０４）内にあるＣＰＵブロック（１０４−３）からの駆動指令により駆動制御される。
【００１５】
ＲＯＭ（１０８）には、ＣＰＵブロック（１０４−３）にて解読可能なコードで記述された、制御プログラムや制御するためのパラメータが格納されている。このデジタルカメラの電源がオン状態になると、前記プログラムは不図示のメインメモリにロードされ、前記ＣＰＵブロック（１０４−３）はそのプログラムに従って装置各部の動作を制御するとともに、制御に必要なデータ等を、一時的に、ＲＡＭ（１０７）、及び後述するカメラプロセッサ（１０４）内にあるＬｏｃａｌ ＳＲＡＭ（１０４−４）に保存する。ＲＯＭ（１０８）に書き換え可能なフラッシュＲＯＭを使用することで、制御プログラムや制御するためのパラメータを変更することが可能となり、機能のＶｅｒＵｐが容易に行える。
【００１６】
ＣＣＤ（１０１）は、光学画像を光電変換するための固体撮像素子であり、Ｆ／Ｅ（フロントエンド）−ＩＣ（１０２）は、画像ノイズ除去用相関二重サンプリングを行うＣＤＳ（１０２−１）、利得調整を行うＡＧＣ（１０２−２）、ディジタル信号変換を行うＡ／Ｄ（１０２−３）、ＣＣＤ１信号処理ブロック（１０４−１）より、垂直同期信号（以下、ＶＤと記す。）、水平同期信号（以下、ＨＤと記す。）を供給され、ＣＰＵブロック（１０４−３）によって制御されるＣＣＤ（１０１）、及びＦ／Ｅ−ＩＣ（１０２）の駆動タイミング信号を発生するＴＧ（１０２−４）を有する。
【００１７】
デジタルスチルカメラプロセッサ（１０４）は、ＣＣＤ（１０１）よりＦ／Ｅ―ＩＣ（１０２）の出力データにホワイトバランス設定やガンマ設定を行い、又、前述したように、ＶＤ信号、ＨＤ信号を供給するＣＣＤ１信号処理ブロック（１０４−１）、フィルタリング処理により、輝度データ・色差データへの変換を行うＣＣＤ２信号処理ブロック（１０４−２）、前述した装置各部の動作を制御するＣＰＵブロック（１０４−３）、前述した制御に必要なデータ等を、一時的に、保存するＬｏｃａｌ ＳＲＡＭ（１０４−４）、パソコンなどの外部機器とＵＳＢ通信を行うＵＳＢブロック（１０４−５）、パソコンなどの外部機器とシリアル通信を行うシリアルブロック（１０４−６）、ＪＰＥＧ圧縮・伸張を行うＪＰＥＧ ＣＯＤＥＣブロック（１０４−７）、画像データのサイズを補間処理により拡大／縮小するＲＥＳＩＺＥブロック（１０４−８）、画像データを液晶モニタやＴＶなどの外部表示機器に表示するためのビデオ信号に変換するＴＶ信号表示ブロック（１０４−９）、撮影された画像データを記録するメモリカードの制御を行うメモリカードコントローラブロック（１０４−１０）を有する。
【００１８】
ＳＤＲＡＭ（１０３）は、前述したカメラプロセッサ（１０４）で画像データに各種処理を施す際に、画像データを一時的に保存する。保存される画像データは、例えば、ＣＣＤ（１０１）から、Ｆ／Ｅ−ＩＣ（１０２）を経由して取りこんで、ＣＣＤ１信号処理ブロック（１０４−１）でホワイトバランス設定、ガンマ設定が行われた状態の「ＲＡＷ−ＲＧＢ画像データ」やＣＣＤ２信号処理ブロック（１０４−２）で輝度データ・色差データ変換が行われた状態の「ＹＣｂＣｒ画像データ」、ＪＰＥＧ ＣＯＤＥＣブロック（１０４−７）で、ＪＰＥＧ圧縮された「ＪＰＥＧ画像データ」などである。
【００１９】
メモリカードスロットル（１２１）は、着脱可能なメモリカードを装着するためのスロットルである。内蔵メモリ（１２０）は、前述したメモリカードスロットル（１２１）にメモリカードが装着されていない場合でも、撮影した画像データを記憶できるようにするためのメモリである。
【００２０】
ＬＣＤドライバ（１１７）は、後述するＬＣＤモニタ（１０）に駆動するドライブ回路であり、ＴＶ信号表示ブロック（１０４−９）から出力されたビデオ信号を、ＬＣＤモニタ（１０）に表示するための信号に変換する機能も有している。
【００２１】
ＬＣＤモニタ（１０）は、撮影前に被写体の状態を監視する、撮影した画像を確認する、メモリカードや前述した内蔵メモリ（１２０）に記録した画像データを表示する、などを行うためのモニタである。
【００２２】
ビデオＡＭＰ（１１８）は、ＴＶ信号表示ブロック（１０４−９）から出力されたビデオ信号を、７５Ωインピーダンス変換するためのアンプであり、ビデオジャック（１１９）は、ＴＶなどの外部表示機器と接続するためのジャックである。
【００２３】
ＵＳＢコネクタ（１２２）は、パソコンなどの外部機器とＵＳＢ接続を行う為のコネクタである。シリアルドライバ回路（１２３−１）は、パソコンなどの外部機器とシリアル通信を行うために、前述したシリアルブロック（１０４−６）の出力信号を電圧変換するための回路であり、ＲＳ−２３２Ｃコネクタ（１２３−２）は、パソコンなどの外部機器とシリアル接続を行う為のコネクタである。
【００２４】
ＳＵＢ−ＣＰＵ（１０９）は、ＲＯＭ・ＲＡＭをワンチップに内蔵したＣＰＵであり、操作Ｋｅｙユニット（ＳＷ１〜１３）やリモコン受光部（６）の出力信号をユーザの操作情報として、前述したＣＰＵブロック（１０４−３）に出力したり、前述したＣＰＵブロック（１０４−３）より出力されるカメラの状態を、後述するサブＬＣＤ（１）、ＡＦ ＬＥＤ（８）、ストロボＬＥＤ（９），ブザー（１１３）の制御信号に変換して、出力する。
【００２５】
サブＬＣＤ（１）は、例えば、撮影可能枚数など表示するための表示部であり、ＬＣＤドライバ（１１１）は、前述したＳＵＢ−ＣＰＵ（１０９）の出力信号より、前述したサブＬＣＤ（１）を駆動するためのドライブ回路である。
【００２６】
ＡＦ ＬＥＤ（８）は、撮影時の合焦状態を表示するためのＬＥＤであり、ストロボＬＥＤ（９）は、ストロボ充電状態を表すためのＬＥＤである。尚、このＡＦ ＬＥＤ（８）とストロボＬＥＤ（９）を、メモリカードアクセス中などの別の表示用途に使用しても良い。
【００２７】
操作Ｋｅｙユニット（ＳＷ１〜１３）は、ユーザが操作するＫｅｙ回路であり、リモコン受光部（６）は、ユーザが操作したリモコン送信機の信号の受信部である。
【００２８】
音声記録ユニット（１１５）は、ユーザが音声信号を入力するマイク（１１５−３）、入力された音声信号を増幅するマイクＡＭＰ（１１５−２）、増幅された音声信号を記録する音声記録回路（１１５―３）からなる。また、音声再生ユニット（１１６）は、記録された音声信号をスピーカーから出力できる信号に変換する音声再生回路（１１６−１）、変換された音声信号を増幅し、スピーカーを駆動するためのオーディオＡＭＰ（１１６−２）、音声信号を出力するスピーカー（１１６−３）からなる。
【００２９】
上述のように構成されたデジタルカメラにおいて、本発明の構成について説明する。
まず、デジタルカメラの基本的な画像処理について説明する。
【００３０】
＜基本的画像処理＞
図３に、基本的な画像処理手順のフローチャートを示す。
図３に示す画像処理は、図２のＣＣＤ１信号処理ブロック（１０４−１）及びＣＣＤ２信号処理ブロック（１０４−２）内に含まれる。なお、ＣＣＤ（１０１）から出力される信号を１画素毎にサンプリングしＡ／Ｄ変換したものを画像処理されていない段階であるため一般的にＲＡＷデータと呼び、画像処理部に入力するデータはこのＲＡＷデータである。
【００３１】
（Ｓ１：ホワイトバランス(ＷＢ)処理）
被写体からの光量を蓄積するＣＣＤ（１０１）のフォトダイオード上には１画素１画素にＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥのいずれか１色のカラーフィルタが貼付されているが、フィルタの色によって透過する光量が変わってくるためフォトダイオードに蓄積される電荷量が異なっている。最も感度が高いのはＧＲＥＥＮで、ＲＥＤとＢＬＵＥはＧＲＥＥＮと比較すると感度が低く約半分程度である。ホワイトバランス（ＷＢ）処理では、これらの感度差を補い、撮影画像の中の白色を白く見せるために、ＲとＢにゲインを掛ける処理を行う。また、物の色は光源色（例えば、太陽光、蛍光灯など）によって変わってくるため、光源が変わっても白色を白く見せるようにＲとＢのゲインを変更し、制御する機能を有している。
【００３２】
（Ｓ２：ガンマ（γ）補正処理）
図４（ａ）は、γ補正の曲線の一例を示すものである。横軸に入力信号、縦軸に出力信号を示しており、非線形な入出力変換を行う。一般的にＬＣＤやＣＲＴなどの出力装置では、図４（ｂ）に示すように入力に対して出力は非線形な特性で出力される。このような非線形な出力の場合、明るさに階調性がなく、また画像が暗くなるため人は正しく画像を見ることができない。そこで、出力装置の特性を考慮して、出力が線形性を保つように予め入力信号に処理を行うのがガンマ補正処理である。
【００３３】
（Ｓ３：補間処理）
ＣＣＤ（１０１）ではベイヤ配列と呼ばれる配列で、１画素にＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥのいずれか１色のカラーフィルタが貼付されており、ＲＡＷデータは１画素に１色の情報しかない。しかし、ＲＡＷデータから画像として見るためには、１画素にＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥの３色の情報が必要であり、足りない２色を補うために周辺の画素から補間する補間処理を行う。
【００３４】
（Ｓ４：ＹＣｂＣｒ変換処理）
ＲＡＷデータの段階では、ＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥの３色によるＲＧＢデータ形式であるが、ＹＣｂＣｒ変換では輝度信号Ｙと色差信号ＣｂＣｒのＹＣｂＣｒデータ形式に変換を行う。デジタルカメラ等で一般的に用いられるファイル形式のＪＰＥＧ画像では、ＹＣｂＣｒデータから画像が作成されるため、ＲＧＢデータをＹＣｂＣｒデータに変換する。変換式は、以下の通りである。
Ｙ ＝ ０．２９９×Ｒ＋０．５８７×Ｇ＋０．１１４×Ｂ
Ｃｂ ＝ −０．２９９×Ｒ−０．５８７×Ｇ＋０．８８６×Ｂ
Ｃｒ ＝ ０．７０１×Ｒ−０．５８７×Ｇ−０．１１４×Ｂ
【００３５】
（Ｓ５：色補正処理）
色補正では、彩度設定、色相設定、部分的な色相変更設定、色抑圧設定などある。
図５はＣｂＣｒ色空間を示すものである。ここで、彩度設定は色の濃さを決定するパラメータ設定であり、例えば、第２象限でＲＥＤの色に対して原点からＲＥＤのドットまでのベクトルの長さが長い程色の濃さは濃くなる。次に色相設定では、色合いを決定するパラメータである。例えば、図５の第３象限でＧＲＥＥＮの色に対してベクトルの長さが同じであってもベクトルの向きが異なると色合いは変わってくる。部分的な色相変更設定では、図５の第４象限に示すように部分的な色領域を回転させる設定である。彩度が強いと色が濃くなる一方で色ノイズが強くなる傾向にある。そこで色抑圧設定では、例えば輝度信号に対してしきい値を設け、しきい値よりも低い又は高い領域に対して彩度を抑えることにより色ノイズを抑える制御を行う。
【００３６】
（Ｓ６：エッジ強調処理）
エッジ強調処理とは、図６に示すように画像の輝度（Ｙ）信号からエッジ部分を抽出するエッジ抽出フィルタ部と、エッジ抽出フィルタにより抽出されたエッジに対してゲインを掛けるゲイン乗算部と、エッジ抽出と並行して画像のノイズを除去するローパスフィルタ（ＬＰＦ）部と、ゲイン乗算後のエッジ抽出データとＬＰＦ処理後の画像データを加算する加算部からなる。エッジの強弱は、ゲイン乗算部のゲインによって決まり、ゲインが大きい場合にはエッジが強くなり、ゲインが小さい場合にはエッジが弱くなる。また、エッジ抽出フィルタのフィルタ係数によってもエッジの検出方向やエッジの抽出量が変わるため重要なパラメータである。ＬＰＦのフィルタ係数では、画像を平滑化させて画像のノイズを減らしているが、ＬＰＦを強く掛けるとノイズは少なくなるが、一方で平滑化により細かな部分が潰れてしまい解像度が失われる傾向にある。
【００３７】
（その他の処理）
画像処理には、その他に保存する画像サイズに変更するリサイズ処理、情報量を圧縮するＪＰＥＧ圧縮処理などがある。
【００３８】
つぎに、本発明の根幹部分である画像処理フローを説明する。
図７は、本発明の画像処理手順を示すフローチャートである。前述の図３の一般的な画像処理のフローチャートに対して、ステップＳ５の色補正の後にステップＳ５Ａとして階調別色補正ブロック（機能）が追加されている点が異なっている。なお、この階調別色補正ブロックはステップＳ４のＹＣｂＣｒ変換の後であればどのタイミングで行ってもよい。例えば、ステップＳ５の色補正の前でもよいし、ステップＳ６のエッジ強調処理の後でもよい。なお、図１、図２に示すデジタルカメラにおいて、図７の画像処理を行う部分を画像処理装置と捉えることができる。
【００３９】
すなわち、本発明に係る画像処理装置は、ＹＣｂＣｒデータについて所定画素数分ずつ、例えば１画素ずつ輝度信号Ｙから色補正値を算出し、色差信号Ｃｂ、Ｃｒを補正していく階調別色補正機能を有する。詳しくは、本発明に係る画像処理装置は、輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データが入力される画像入力部と、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを記憶する色補正テーブル記憶部と、前記色補正テーブル記憶部に記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択部と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定部と、前記色補正テーブル選択部で選択された色補正テーブルから前記階調判定部で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出部と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正部と、を備えることを特徴とするものである。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【００４０】
この発明内容の詳細について図８を用いて説明する。
図８は、階調別色補正ブロックの処理内容を示すフローチャートである。
（Ｓ１１：１画素分のＹ，Ｃｂ，Ｃｒ信号取得（画像入力部））
階調別色補正ブロックではまず始めに、画像開始位置の１画素分のＹ、Ｃｂ、Ｃｒ信号を取得する。なお、図７で階調別色補正ブロック（Ｓ５Ａ）への入力時には、ＹＣｂＣｒブロック（Ｓ４）で画像データがＲＧＢ形式からＹＣｂＣｒに変換されてＹＣｂＣｒ形式になっている。
【００４１】
（Ｓ１２：階調判定（階調判定部））
次に取得した１画素分のＹ、Ｃｂ、Ｃｒ信号のＹ信号（輝度信号）からどの階調にあるかを判定する。通常、Ｙ信号は８ビットであり０から２５５の間の値をとる。階調判定は輝度信号が０から２５５のどの値であるかを判定する。
【００４２】
（Ｓ１３：色補正テーブル参照（色補正テーブル選択部、色補正値算出部））
次に、色補正テーブル参照である。ここで、色補正テーブルの概要について説明する。
図９は、色補正テーブルをグラフに表したものである。横軸を輝度信号Ｙ、縦軸を色補正値Ａにとり、（Ｃｂ又はＣｒ信号について）所定階調に対応して所定の色補正値が設定されている。例えば、色補正テーブルは、複数階調それぞれに対応して色補正値が設定されている。また、色補正値Ａはプラスまたはマイナスの設定可能な小数とする。
【００４３】
図９（ａ）は、輝度信号Ｙの１ＬＳＢ（最下位ビット）に１つずつ色補正値Ａを設定しており、色補正テーブルは、輝度信号Ｙが取りうる０から２５５の整数値に対応した２５６個の色補正値となる。すなわち、画像データで取りうる輝度範囲に対応した全階調それぞれに色補正値を有する。これにより、階調ごとに細かく色補正を行うことができる。
【００４４】
一方、図９（ｂ）は、輝度信号Ｙに対しドットで示した色補正代表点を設定し、色補正代表点間は線形補間した例である。例えば、色補正テーブルとしては、画像データで取りうる輝度範囲において幾つかの階調で設定される色補正値を色補正代表点として持ち、後述する色補正値算出において、該色補正テーブルの色補正代表点間を線形補間して色補正値Ａを算出する。これにより、色補正テーブルを記憶保持するＲＯＭ（１０８）（色補正テーブル記憶部）のメモリ容量を減らすことができるとともに、補正値設定の作業負担を軽減することができる。図９（ｂ）の場合には、１６個の色補正代表点を設定で済むため、色補正テーブルは１６個のデータとなり、図９（ａ）の場合に比べて１／１６のデータ量となる。なお、色補正代表点の設定は、輝度信号Ｙと色補正値Ａの組み合わせで任意に変更できるようにするとよい。
【００４５】
また、色補正テーブルは、Ｃｂ信号とＣｒ信号それぞれに対応して個別に持つようにし、Ｃｂ信号とＣｒ信号の色補正テーブルを同じ設定にしてもよいし、それぞれ異なる設定値としてもよい。すなわち、前記色補正テーブルは、色差信号Ｃｂ、Ｃｒそれぞれに対応して別に設けられた色補正テーブルのペアからなり、該ペアの色補正テーブルそれぞれにおける所定階調と色補正値との関係を同じ設定又は異なる設定とされていることとしてもよい。このように色補正テーブルをＣｂ信号とＣｒ信号とで個別に設定できることにより、階調別の色補正に自由度が生まれ様々な補正方法が可能となる。
【００４６】
このような色補正テーブルを１又は複数予め設定して用意し、図２に示すＲＯＭ（１０８）（色補正テーブル記憶部）に格納しておき、ＳＤＲＡＭ（１０３）或いはＬｏｃａｌ ＳＲＡＭ（１０４−４）に適宜読み出して使用する（色補正テーブル選択部）。このときの色補正テーブルの選択は、ユーザが色補正テーブルの候補から手動で選択できるようにしてもよいし、撮影モードに対応して自動的に選択されたり、撮影シーン（例えば高輝度階調の色補正）に応じて自動的に選択されたりするようにしてもよい。
【００４７】
以上のような色補正テーブルを用いて、階調判定で判定した輝度信号Ｙに対応する色補正値Ａを選択された色補正テーブルから算出する（色補正値算出部）。
【００４８】
（Ｓ１４：Ｃｂ，Ｃｒ補正（色信号補正部））
次に、算出した色補正値Ａから色差信号Ｃｂ、Ｃｒに対して色補正を行う。補正にあたっては、以下の式（１），（２）を用いて色信号Ｃｂ’、Ｃｒ’を算出し、色差信号Ｃｂ，Ｃｒに代えて輝度信号Ｙと補正後の色差信号Ｃｂ’、Ｃｒ’とする。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【００４９】
（Ｓ１５）
以上の処理が画像データの全画素について行われるまで繰り返して実行され、色補正後の画像データを得て終了する。
【００５０】
以下に、階調別色補正ブロックによる補正効果について、３つの例を用いて説明する。
（補正効果例１）
図１０は、低輝度部で緑色に着色した場合のＣｂ、Ｃｒ信号の色補正テーブル設定例である。ここでは、Ｃｂ信号とＣｒ信号の色補正テーブルにおける所定階調と色補正値との関係を同じ設定としている。
輝度信号Ｙが小さい領域で色補正値をプラス方向に設定することで、階調別色補正ブロックの処理により低輝度部の色を緑色から緑色の補色であるマゼンタ色側にシフトすることができ、低輝度部での緑色着色を緩和することができる。また、Ｃｂ、Ｃｒ信号の色補正テーブルを同じにすることで原点方向に向けてマゼンタ側にシフトさせており、色相が変化することがないため階調別色補正による色変化の違和感は少ない。
【００５１】
（補正効果例２）
図１１は、高輝度部でマゼンタ色に着色した場合のＣｂ、Ｃｒ信号の色補正テーブル設定例である。ここでは、Ｃｂ信号とＣｒ信号の色補正テーブルにおける所定階調と色補正値との関係を同じ設定としている。
輝度信号Ｙが大きい領域で色補正値をマイナス方向に設定することで、階調別色補正ブロックの処理により高輝度部の色をマゼンタ色からマゼンタ色の補色である緑側にシフトすることができ、高輝度部でのマゼンタ色着色を緩和することができる。また、Ｃｂ、Ｃｒ信号の色補正テーブルを同じにすることで原点方向に向けて緑側にシフトさせており、色相が変化することがないため階調別色補正による色変化の違和感は少ない。
【００５２】
（補正効果例３）
図１２は、Ｃｒ信号は補正せず、Ｃｂ信号のみ補正するときの色補正テーブル設定例である。Ｃｒ信号の色補正テーブルで色補正値を全階調において０にすることで、Ｃｒ信号に対しては色補正がされない。一方、Ｃｂ信号の方は、中間輝度よりやや高めの輝度信号領域で色補正値をマイナス方向に設定することで、中間輝度よりやや高めの階調で青色の補色である黄色側にシフトすることができ、状況により一部階調で青色に着色した場合には着色を緩和することができる。
【００５３】
本実施例では、３つの色補正テーブル例を示したが、色補正テーブル設定例はこれ以外にも如何様にも設定可能であり、階調毎のホワイトバランス変更のような使い方も可能である。また、本発明は静止画像に限定されず、スルー画像や動画像においても実施可能である。例えばＬＣＤモニタ（１０）にスルー画像を出力するときに、ＬＣＤモニタ（１０）のバックライトの色味でスルー画像が青白かったり、黄ばんでしまったりするような場合の補正に使用することができる。
【００５４】
なお、本発明は、前述した画像処理装置において実行される画像処理工程（階調別色補正ブロック）をＰＣなどの演算装置において実行される画像処理方法として捉えることができる。
すなわち、本発明に係る画像処理方法は、記憶部を有する演算装置に入力される輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データについて階調別に色補正する画像処理方法であって、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを前記記憶部に記憶させる色補正テーブル記憶工程と、前記色補正テーブル記憶工程で記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択工程と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定工程と、前記色補正テーブル選択工程で選択された色補正テーブルから前記階調判定工程で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出工程と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正工程と、を備えることを特徴とするものである。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
また、本発明は、本発明の画像処理方法を演算装置で順次実行するように制御することとしたプログラムにも適用可能である。
【００５５】
なお、これまで本発明を図面に示した実施形態をもって説明してきたが、本発明は図面に示した実施形態に限定されるものではなく、他の実施形態、追加、変更、削除など、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。
【符号の説明】
【００５６】
１ サブＬＣＤ
２ レリーズボタン
３ ストロボ発光部
４ 撮影／再生切り換えダイヤル
５ 測距ユニット
６ リモコン受光部
７ 鏡胴ユニット
７−１ ズーム光学系
７−１ａ ズームレンズ
７−１ｂ ズーム駆動モータ
７−２ フォーカス光学系
７−２ａ フォーカスレンズ
７−２ｂ フォーカス駆動モータ
７−３ 絞りユニット
７−３ａ 絞り
７−３ｂ 絞りモータ
７−４ メカシャッタユニット
７−４ａ メカシャッタ
７−４ｂ メカシャッタモータ
７−５ モータドライバ
８ ＡＦ ＬＥＤ（オートフォーカスＬＥＤ）
９ ストロボＬＥＤ
１０ ＬＣＤモニタ
１１ａ，１１ｂ 光学ファインダー
１２ ズームボタン
１３ 電源スイッチ
１４ 操作部
１０１ ＣＣＤ
１０２ Ｆ／Ｅ−ＩＣ
１０２−１ ＣＤＳ
１０２−２ ＡＧＣ
１０２−３ Ａ／Ｄ
１０２−４ ＴＧ
１０３ ＳＤＲＡＭ
１０４ デジタルスチルカメラプロセッサ
１０４−１ ＣＣＤ１信号処理ブロック
１０４−２ ＣＣＤ２信号処理ブロック
１０４−３ ＣＰＵブロック
１０４−４ Ｌｏｃａｌ ＳＲＡＭ
１０４−５ ＵＳＢブロック
１０４−６ シリアルブロック
１０４−７ ＪＰＥＧ ＣＯＤＥＣブロック
１０４−８ ＲＥＳＩＺＥブロック
１０４−９ ＴＶ信号表示ブロック
１０４−１０ メモリカードコントローラブロック
１０７ ＲＡＭ
１０８ ＲＯＭ
１０９ ＳＵＢ−ＣＰＵ
１１１ ＬＣＤドライバ
１１３ ブザー
１１４ ストロボ回路
１１５−１ 音声記録回路
１１５−２ マイクＡＭＰ
１１５−３ マイク
１１６−１ 音声再生回路
１１６−２ オーディオＡＭＰ
１１６−３ スピーカー
１１７ ＬＣＤドライバ
１１８ ビデオＡＭＰ
１１９ ビデオジャック
１２０ 内蔵メモリ
１２１ メモリカードスロットル
１２２ ＵＳＢコネクタ
１２３−１ シリアルドライバ回路
１２３−２ ＲＳ−２３２Ｃコネクタ
１３０ メモリカード
ＳＷ１〜ＳＷ１３ ｋｅｙユニット
【先行技術文献】
【特許文献】
【００５７】
【特許文献１】特開２００６−１４８６０７号公報
【技術分野】
【０００１】
本発明は、入力される画像データについて階調別に色補正を行う画像処理装置、該画像処理装置を備え電子画像を撮像・再生するカメラ等の撮像装置並びにカメラ等で撮影した画像を処理する画像処理アルゴリズムからなる画像処理方法に関するものである。
【背景技術】
【０００２】
近年、固体撮像素子では高画素化が進み、それに伴い固体撮像素子を駆動する駆動パルスの高速化が進んでいる。その結果、画素の微細化に伴う隣接画素からの光の回り込みや、電荷転送不良により、隣の画素の信号量が漏れ込んでくる混色が発生する場合がある。
【０００３】
また、ＣＣＤでは特殊な電荷転送を行うものも登場しており、画像の黒レベルが不安定となり特定の階調で着色が発生する場合がある。
【０００４】
従来方式では、このような階調により着色が発生した場合には、階調によって(例えば、低輝度、高輝度など)色を抑圧する方式が用いられているが、色を抑圧することにより彩度を失い白黒画像となってしまう問題があった。
【０００５】
なお、特許文献１では、色補正量決定部の決定結果と輝度信号Ｙのレベルに応じて色相、彩度を補正する技術が提案されているが、輝度信号Ｙのレベル（階調）に対して色補正量を決定する方法については記載されていない。
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、以上の従来技術における問題に鑑みてなされたものであり、画像の彩度を失うことなく階調別に色補正を行うことが可能な画像処理装置、該画像処理装置を備える撮像装置並びに画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するために提供する本発明は、以下の通りである。
〔１〕 輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データが入力される画像入力部と、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを記憶する色補正テーブル記憶部と、前記色補正テーブル記憶部に記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択部と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定部と、前記色補正テーブル選択部で選択された色補正テーブルから前記階調判定部で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出部と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正部と、を備えることを特徴とする画像処理装置。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
〔２〕 前記色補正テーブルは、複数階調それぞれに対応して色補正値が設定されていることを特徴とする前記〔１〕に記載の画像処理装置。
〔３〕 前記色補正テーブルは、前記画像データで取りうる輝度範囲に対応した全階調それぞれに色補正値を有するものであることを特徴とする前記〔１〕に記載の画像処理装置。
〔４〕 前記色補正テーブルは、前記画像データで取りうる輝度範囲において幾つかの階調で設定される色補正値を色補正代表点として持つものであり、前記色補正値算出部は、該色補正テーブルの色補正代表点間を線形補間して色補正値Ａを算出することを特徴とする前記〔１〕に記載の画像処理装置。
〔５〕 前記色補正テーブルは、色差信号Ｃｂ、Ｃｒそれぞれに対応して別に設けられた色補正テーブルのペアからなり、該ペアの色補正テーブルそれぞれにおける所定階調と色補正値との関係を同じ設定又は異なる設定とされていることを特徴とする前記〔１〕に記載の画像処理装置。
〔６〕 前記画像データについて補色方向に色補正するときに、前記色補正テーブル選択部は、所定階調と色補正値との関係が同じ設定とされた前記ペアの色補正テーブルを選択することを特徴とする前記〔５〕に記載の画像処理装置。
〔７〕 前記〔１〕〜〔６〕のいずれかに記載の画像処理装置を備えることを特徴とする撮像装置。
〔８〕 記憶部を有する演算装置に入力される輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データについて階調別に色補正する画像処理方法であって、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを前記記憶部に記憶させる色補正テーブル記憶工程と、前記色補正テーブル記憶工程で記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択工程と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定工程と、前記色補正テーブル選択工程で選択された色補正テーブルから前記階調判定工程で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出工程と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正工程と、を備えることを特徴とする画像処理方法。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【発明の効果】
【０００８】
本発明によれば、画像データの輝度信号Ｙに対して階調判定部で判定を行い階調判定部の結果に応じた色補正値を用いて色信号Ｃｂ、Ｃｒを補正することにより、各階調毎に適切な色補正を行うことができる。また、特定階調で着色が発生する場合には特定階調のみに色補正が行え、効果的な階調別の色補正を行うことができる。更に、従来の色抑圧方式では抑圧レベルによっては色味を失い白黒の画像になってしまうという問題があったが、本発明では色味を失うことなく補正を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】本発明に係る撮像装置に一態様であるデジタルカメラの外観図である。
【図２】図１のデジタルカメラの制御系のブロック図である。
【図３】基本的な画像処理に関するフローチャートである。
【図４】ガンマ補正曲線と出力装置の入出力特性の関係を示す図である。
【図５】色補正処理の説明図である。
【図６】エッジ強調処理の説明図である。
【図７】本発明に係る画像処理装置における画像処理に関するフローチャートである。
【図８】階調別色補正ブロックにおける画像処理に関するフローチャートである。
【図９】所定階調に対応して所定の色補正値が設定された色補正テーブルの説明図である。
【図１０】Ｃｂ、Ｃｒ信号の色補正テーブル設定例（１）を示す図である。
【図１１】Ｃｂ、Ｃｒ信号の色補正テーブル設定例（２）を示す図である。
【図１２】Ｃｂ、Ｃｒ信号の色補正テーブル設定例（３）を示す図である。
【発明を実施するための形態】
【００１０】
以下に、本発明に係る画像処理装置、撮像装置並びに画像処理方法について説明する。
ここでは、本発明についてデジタルカメラの実施形態を用いて説明を行うがこれに限定されず、カメラ機能を持つ電子機器、あるいは、画像を処理する画像処理ＩＣ、画像処理ソフトなど画像処理全般に適用することが可能である。
【００１１】
図１は、本発明に係る撮像装置に一態様であるデジタルカメラの外観図であり、図２は、同デジタルカメラの制御系のブロック図である。
図１に示すように、デジタルカメラは、カメラ上面には、サブＬＣＤ（１）と、レリーズボタン（２）と、撮影／再生切り換えダイヤル（４）とを有する。サブＬＣＤ（１）は、例えば、撮影可能枚数など表示するための表示部である。また、カメラ正面には、ストロボ発光部（３）と、測距ユニット（５）と、リモコン受光部（６）と、鏡胴ユニット（７）と、光学ファインダー（正面）（１１ａ）とを有する。メモリカードスロットル（１２１）は、メモリカード（１３０）を挿入するスロットルであり、カメラ側面に設けてある。更に、カメラ裏面には、ＡＦＬＥＤ（オートフォーカスＬＥＤ）（８）と、ストロボＬＥＤ（９）と、ＬＣＤモニタ（１０）と、光学ファインダー（裏面）（１１ｂ）と、ズームボタン（１２）と、電源スイッチ（１３）と、操作部（１４）とを有する。
【００１２】
図１，図２に基づいてデジタルカメラの動作を説明する。
図１，図２において、ストロボ発光部（３），ストロボ回路（１１４）は、自然光などの光が足りない場合に光量を補う装置である。暗い場所や被写体が暗い場合の撮影においては、後述するデジタルスチルカメラプロセッサ（１０４）からストロボ回路（１１４）にストロボ発光信号を送信し、ストロボ回路（１１４）は、ストロボ発光部（３）を発光させ被写体を明るくする。
【００１３】
測距ユニット（５）は、カメラと被写体との距離を測る装置である。現在、デジタルカメラでは、撮像素子（ＣＣＤ）に形成された像のコントラストを検出し、最もコントラストの高い位置にレンズを移動させてフォーカスを合わせるＣＣＤ−ＡＦ方式が用いられている。しかし、ＣＣＤ−ＡＦ方式は、レンズを少しずつ動かしコントラストを探していくためフォーカス動作が遅いという問題があった。そこで、測距ユニット（５）を用いて被写体との距離情報を常に取得し、距離情報からレンズを一気に移動してフォーカス動作を高速化している。温度センサ（不図示）は環境温度を測定する装置で、カメラ内外の温度を測定し、温度が異常に上昇している場合にはカメラの電源を落としたり、温度センサのデータを参照してカメラの制御内容を変更したりする。
【００１４】
鏡胴ユニット（７）は、被写体の光学画像を取り込むズームレンズ（７−１ａ）、ズーム駆動モータ（７−１ｂ）からなるズーム光学系（７−１）、フォーカスレンズ（７−２ａ）、フォーカス駆動モータ（７−２ｂ）からなるフォーカス光学系（７−２）、絞り（７−３ａ）、絞りモータ（７−３ｂ）からなる絞りユニット（７−３）、メカシャッタ（７−４ａ）、メカシャッタモータ（７−４ｂ）からなるメカシャッタユニット（７−４）、各モータを駆動するモータドライバ（７−５）を有する。そして、モータドライバ（７−５）は、リモコン受光部（６）入力や操作部Ｋｅｙユニット（ＳＷ１〜ＳＷ１３）の操作入力に基づく、後述するカメラプロセッサ（１０４）内にあるＣＰＵブロック（１０４−３）からの駆動指令により駆動制御される。
【００１５】
ＲＯＭ（１０８）には、ＣＰＵブロック（１０４−３）にて解読可能なコードで記述された、制御プログラムや制御するためのパラメータが格納されている。このデジタルカメラの電源がオン状態になると、前記プログラムは不図示のメインメモリにロードされ、前記ＣＰＵブロック（１０４−３）はそのプログラムに従って装置各部の動作を制御するとともに、制御に必要なデータ等を、一時的に、ＲＡＭ（１０７）、及び後述するカメラプロセッサ（１０４）内にあるＬｏｃａｌ ＳＲＡＭ（１０４−４）に保存する。ＲＯＭ（１０８）に書き換え可能なフラッシュＲＯＭを使用することで、制御プログラムや制御するためのパラメータを変更することが可能となり、機能のＶｅｒＵｐが容易に行える。
【００１６】
ＣＣＤ（１０１）は、光学画像を光電変換するための固体撮像素子であり、Ｆ／Ｅ（フロントエンド）−ＩＣ（１０２）は、画像ノイズ除去用相関二重サンプリングを行うＣＤＳ（１０２−１）、利得調整を行うＡＧＣ（１０２−２）、ディジタル信号変換を行うＡ／Ｄ（１０２−３）、ＣＣＤ１信号処理ブロック（１０４−１）より、垂直同期信号（以下、ＶＤと記す。）、水平同期信号（以下、ＨＤと記す。）を供給され、ＣＰＵブロック（１０４−３）によって制御されるＣＣＤ（１０１）、及びＦ／Ｅ−ＩＣ（１０２）の駆動タイミング信号を発生するＴＧ（１０２−４）を有する。
【００１７】
デジタルスチルカメラプロセッサ（１０４）は、ＣＣＤ（１０１）よりＦ／Ｅ―ＩＣ（１０２）の出力データにホワイトバランス設定やガンマ設定を行い、又、前述したように、ＶＤ信号、ＨＤ信号を供給するＣＣＤ１信号処理ブロック（１０４−１）、フィルタリング処理により、輝度データ・色差データへの変換を行うＣＣＤ２信号処理ブロック（１０４−２）、前述した装置各部の動作を制御するＣＰＵブロック（１０４−３）、前述した制御に必要なデータ等を、一時的に、保存するＬｏｃａｌ ＳＲＡＭ（１０４−４）、パソコンなどの外部機器とＵＳＢ通信を行うＵＳＢブロック（１０４−５）、パソコンなどの外部機器とシリアル通信を行うシリアルブロック（１０４−６）、ＪＰＥＧ圧縮・伸張を行うＪＰＥＧ ＣＯＤＥＣブロック（１０４−７）、画像データのサイズを補間処理により拡大／縮小するＲＥＳＩＺＥブロック（１０４−８）、画像データを液晶モニタやＴＶなどの外部表示機器に表示するためのビデオ信号に変換するＴＶ信号表示ブロック（１０４−９）、撮影された画像データを記録するメモリカードの制御を行うメモリカードコントローラブロック（１０４−１０）を有する。
【００１８】
ＳＤＲＡＭ（１０３）は、前述したカメラプロセッサ（１０４）で画像データに各種処理を施す際に、画像データを一時的に保存する。保存される画像データは、例えば、ＣＣＤ（１０１）から、Ｆ／Ｅ−ＩＣ（１０２）を経由して取りこんで、ＣＣＤ１信号処理ブロック（１０４−１）でホワイトバランス設定、ガンマ設定が行われた状態の「ＲＡＷ−ＲＧＢ画像データ」やＣＣＤ２信号処理ブロック（１０４−２）で輝度データ・色差データ変換が行われた状態の「ＹＣｂＣｒ画像データ」、ＪＰＥＧ ＣＯＤＥＣブロック（１０４−７）で、ＪＰＥＧ圧縮された「ＪＰＥＧ画像データ」などである。
【００１９】
メモリカードスロットル（１２１）は、着脱可能なメモリカードを装着するためのスロットルである。内蔵メモリ（１２０）は、前述したメモリカードスロットル（１２１）にメモリカードが装着されていない場合でも、撮影した画像データを記憶できるようにするためのメモリである。
【００２０】
ＬＣＤドライバ（１１７）は、後述するＬＣＤモニタ（１０）に駆動するドライブ回路であり、ＴＶ信号表示ブロック（１０４−９）から出力されたビデオ信号を、ＬＣＤモニタ（１０）に表示するための信号に変換する機能も有している。
【００２１】
ＬＣＤモニタ（１０）は、撮影前に被写体の状態を監視する、撮影した画像を確認する、メモリカードや前述した内蔵メモリ（１２０）に記録した画像データを表示する、などを行うためのモニタである。
【００２２】
ビデオＡＭＰ（１１８）は、ＴＶ信号表示ブロック（１０４−９）から出力されたビデオ信号を、７５Ωインピーダンス変換するためのアンプであり、ビデオジャック（１１９）は、ＴＶなどの外部表示機器と接続するためのジャックである。
【００２３】
ＵＳＢコネクタ（１２２）は、パソコンなどの外部機器とＵＳＢ接続を行う為のコネクタである。シリアルドライバ回路（１２３−１）は、パソコンなどの外部機器とシリアル通信を行うために、前述したシリアルブロック（１０４−６）の出力信号を電圧変換するための回路であり、ＲＳ−２３２Ｃコネクタ（１２３−２）は、パソコンなどの外部機器とシリアル接続を行う為のコネクタである。
【００２４】
ＳＵＢ−ＣＰＵ（１０９）は、ＲＯＭ・ＲＡＭをワンチップに内蔵したＣＰＵであり、操作Ｋｅｙユニット（ＳＷ１〜１３）やリモコン受光部（６）の出力信号をユーザの操作情報として、前述したＣＰＵブロック（１０４−３）に出力したり、前述したＣＰＵブロック（１０４−３）より出力されるカメラの状態を、後述するサブＬＣＤ（１）、ＡＦ ＬＥＤ（８）、ストロボＬＥＤ（９），ブザー（１１３）の制御信号に変換して、出力する。
【００２５】
サブＬＣＤ（１）は、例えば、撮影可能枚数など表示するための表示部であり、ＬＣＤドライバ（１１１）は、前述したＳＵＢ−ＣＰＵ（１０９）の出力信号より、前述したサブＬＣＤ（１）を駆動するためのドライブ回路である。
【００２６】
ＡＦ ＬＥＤ（８）は、撮影時の合焦状態を表示するためのＬＥＤであり、ストロボＬＥＤ（９）は、ストロボ充電状態を表すためのＬＥＤである。尚、このＡＦ ＬＥＤ（８）とストロボＬＥＤ（９）を、メモリカードアクセス中などの別の表示用途に使用しても良い。
【００２７】
操作Ｋｅｙユニット（ＳＷ１〜１３）は、ユーザが操作するＫｅｙ回路であり、リモコン受光部（６）は、ユーザが操作したリモコン送信機の信号の受信部である。
【００２８】
音声記録ユニット（１１５）は、ユーザが音声信号を入力するマイク（１１５−３）、入力された音声信号を増幅するマイクＡＭＰ（１１５−２）、増幅された音声信号を記録する音声記録回路（１１５―３）からなる。また、音声再生ユニット（１１６）は、記録された音声信号をスピーカーから出力できる信号に変換する音声再生回路（１１６−１）、変換された音声信号を増幅し、スピーカーを駆動するためのオーディオＡＭＰ（１１６−２）、音声信号を出力するスピーカー（１１６−３）からなる。
【００２９】
上述のように構成されたデジタルカメラにおいて、本発明の構成について説明する。
まず、デジタルカメラの基本的な画像処理について説明する。
【００３０】
＜基本的画像処理＞
図３に、基本的な画像処理手順のフローチャートを示す。
図３に示す画像処理は、図２のＣＣＤ１信号処理ブロック（１０４−１）及びＣＣＤ２信号処理ブロック（１０４−２）内に含まれる。なお、ＣＣＤ（１０１）から出力される信号を１画素毎にサンプリングしＡ／Ｄ変換したものを画像処理されていない段階であるため一般的にＲＡＷデータと呼び、画像処理部に入力するデータはこのＲＡＷデータである。
【００３１】
（Ｓ１：ホワイトバランス(ＷＢ)処理）
被写体からの光量を蓄積するＣＣＤ（１０１）のフォトダイオード上には１画素１画素にＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥのいずれか１色のカラーフィルタが貼付されているが、フィルタの色によって透過する光量が変わってくるためフォトダイオードに蓄積される電荷量が異なっている。最も感度が高いのはＧＲＥＥＮで、ＲＥＤとＢＬＵＥはＧＲＥＥＮと比較すると感度が低く約半分程度である。ホワイトバランス（ＷＢ）処理では、これらの感度差を補い、撮影画像の中の白色を白く見せるために、ＲとＢにゲインを掛ける処理を行う。また、物の色は光源色（例えば、太陽光、蛍光灯など）によって変わってくるため、光源が変わっても白色を白く見せるようにＲとＢのゲインを変更し、制御する機能を有している。
【００３２】
（Ｓ２：ガンマ（γ）補正処理）
図４（ａ）は、γ補正の曲線の一例を示すものである。横軸に入力信号、縦軸に出力信号を示しており、非線形な入出力変換を行う。一般的にＬＣＤやＣＲＴなどの出力装置では、図４（ｂ）に示すように入力に対して出力は非線形な特性で出力される。このような非線形な出力の場合、明るさに階調性がなく、また画像が暗くなるため人は正しく画像を見ることができない。そこで、出力装置の特性を考慮して、出力が線形性を保つように予め入力信号に処理を行うのがガンマ補正処理である。
【００３３】
（Ｓ３：補間処理）
ＣＣＤ（１０１）ではベイヤ配列と呼ばれる配列で、１画素にＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥのいずれか１色のカラーフィルタが貼付されており、ＲＡＷデータは１画素に１色の情報しかない。しかし、ＲＡＷデータから画像として見るためには、１画素にＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥの３色の情報が必要であり、足りない２色を補うために周辺の画素から補間する補間処理を行う。
【００３４】
（Ｓ４：ＹＣｂＣｒ変換処理）
ＲＡＷデータの段階では、ＲＥＤ、ＧＲＥＥＮ、ＢＬＵＥの３色によるＲＧＢデータ形式であるが、ＹＣｂＣｒ変換では輝度信号Ｙと色差信号ＣｂＣｒのＹＣｂＣｒデータ形式に変換を行う。デジタルカメラ等で一般的に用いられるファイル形式のＪＰＥＧ画像では、ＹＣｂＣｒデータから画像が作成されるため、ＲＧＢデータをＹＣｂＣｒデータに変換する。変換式は、以下の通りである。
Ｙ ＝ ０．２９９×Ｒ＋０．５８７×Ｇ＋０．１１４×Ｂ
Ｃｂ ＝ −０．２９９×Ｒ−０．５８７×Ｇ＋０．８８６×Ｂ
Ｃｒ ＝ ０．７０１×Ｒ−０．５８７×Ｇ−０．１１４×Ｂ
【００３５】
（Ｓ５：色補正処理）
色補正では、彩度設定、色相設定、部分的な色相変更設定、色抑圧設定などある。
図５はＣｂＣｒ色空間を示すものである。ここで、彩度設定は色の濃さを決定するパラメータ設定であり、例えば、第２象限でＲＥＤの色に対して原点からＲＥＤのドットまでのベクトルの長さが長い程色の濃さは濃くなる。次に色相設定では、色合いを決定するパラメータである。例えば、図５の第３象限でＧＲＥＥＮの色に対してベクトルの長さが同じであってもベクトルの向きが異なると色合いは変わってくる。部分的な色相変更設定では、図５の第４象限に示すように部分的な色領域を回転させる設定である。彩度が強いと色が濃くなる一方で色ノイズが強くなる傾向にある。そこで色抑圧設定では、例えば輝度信号に対してしきい値を設け、しきい値よりも低い又は高い領域に対して彩度を抑えることにより色ノイズを抑える制御を行う。
【００３６】
（Ｓ６：エッジ強調処理）
エッジ強調処理とは、図６に示すように画像の輝度（Ｙ）信号からエッジ部分を抽出するエッジ抽出フィルタ部と、エッジ抽出フィルタにより抽出されたエッジに対してゲインを掛けるゲイン乗算部と、エッジ抽出と並行して画像のノイズを除去するローパスフィルタ（ＬＰＦ）部と、ゲイン乗算後のエッジ抽出データとＬＰＦ処理後の画像データを加算する加算部からなる。エッジの強弱は、ゲイン乗算部のゲインによって決まり、ゲインが大きい場合にはエッジが強くなり、ゲインが小さい場合にはエッジが弱くなる。また、エッジ抽出フィルタのフィルタ係数によってもエッジの検出方向やエッジの抽出量が変わるため重要なパラメータである。ＬＰＦのフィルタ係数では、画像を平滑化させて画像のノイズを減らしているが、ＬＰＦを強く掛けるとノイズは少なくなるが、一方で平滑化により細かな部分が潰れてしまい解像度が失われる傾向にある。
【００３７】
（その他の処理）
画像処理には、その他に保存する画像サイズに変更するリサイズ処理、情報量を圧縮するＪＰＥＧ圧縮処理などがある。
【００３８】
つぎに、本発明の根幹部分である画像処理フローを説明する。
図７は、本発明の画像処理手順を示すフローチャートである。前述の図３の一般的な画像処理のフローチャートに対して、ステップＳ５の色補正の後にステップＳ５Ａとして階調別色補正ブロック（機能）が追加されている点が異なっている。なお、この階調別色補正ブロックはステップＳ４のＹＣｂＣｒ変換の後であればどのタイミングで行ってもよい。例えば、ステップＳ５の色補正の前でもよいし、ステップＳ６のエッジ強調処理の後でもよい。なお、図１、図２に示すデジタルカメラにおいて、図７の画像処理を行う部分を画像処理装置と捉えることができる。
【００３９】
すなわち、本発明に係る画像処理装置は、ＹＣｂＣｒデータについて所定画素数分ずつ、例えば１画素ずつ輝度信号Ｙから色補正値を算出し、色差信号Ｃｂ、Ｃｒを補正していく階調別色補正機能を有する。詳しくは、本発明に係る画像処理装置は、輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データが入力される画像入力部と、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを記憶する色補正テーブル記憶部と、前記色補正テーブル記憶部に記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択部と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定部と、前記色補正テーブル選択部で選択された色補正テーブルから前記階調判定部で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出部と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正部と、を備えることを特徴とするものである。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【００４０】
この発明内容の詳細について図８を用いて説明する。
図８は、階調別色補正ブロックの処理内容を示すフローチャートである。
（Ｓ１１：１画素分のＹ，Ｃｂ，Ｃｒ信号取得（画像入力部））
階調別色補正ブロックではまず始めに、画像開始位置の１画素分のＹ、Ｃｂ、Ｃｒ信号を取得する。なお、図７で階調別色補正ブロック（Ｓ５Ａ）への入力時には、ＹＣｂＣｒブロック（Ｓ４）で画像データがＲＧＢ形式からＹＣｂＣｒに変換されてＹＣｂＣｒ形式になっている。
【００４１】
（Ｓ１２：階調判定（階調判定部））
次に取得した１画素分のＹ、Ｃｂ、Ｃｒ信号のＹ信号（輝度信号）からどの階調にあるかを判定する。通常、Ｙ信号は８ビットであり０から２５５の間の値をとる。階調判定は輝度信号が０から２５５のどの値であるかを判定する。
【００４２】
（Ｓ１３：色補正テーブル参照（色補正テーブル選択部、色補正値算出部））
次に、色補正テーブル参照である。ここで、色補正テーブルの概要について説明する。
図９は、色補正テーブルをグラフに表したものである。横軸を輝度信号Ｙ、縦軸を色補正値Ａにとり、（Ｃｂ又はＣｒ信号について）所定階調に対応して所定の色補正値が設定されている。例えば、色補正テーブルは、複数階調それぞれに対応して色補正値が設定されている。また、色補正値Ａはプラスまたはマイナスの設定可能な小数とする。
【００４３】
図９（ａ）は、輝度信号Ｙの１ＬＳＢ（最下位ビット）に１つずつ色補正値Ａを設定しており、色補正テーブルは、輝度信号Ｙが取りうる０から２５５の整数値に対応した２５６個の色補正値となる。すなわち、画像データで取りうる輝度範囲に対応した全階調それぞれに色補正値を有する。これにより、階調ごとに細かく色補正を行うことができる。
【００４４】
一方、図９（ｂ）は、輝度信号Ｙに対しドットで示した色補正代表点を設定し、色補正代表点間は線形補間した例である。例えば、色補正テーブルとしては、画像データで取りうる輝度範囲において幾つかの階調で設定される色補正値を色補正代表点として持ち、後述する色補正値算出において、該色補正テーブルの色補正代表点間を線形補間して色補正値Ａを算出する。これにより、色補正テーブルを記憶保持するＲＯＭ（１０８）（色補正テーブル記憶部）のメモリ容量を減らすことができるとともに、補正値設定の作業負担を軽減することができる。図９（ｂ）の場合には、１６個の色補正代表点を設定で済むため、色補正テーブルは１６個のデータとなり、図９（ａ）の場合に比べて１／１６のデータ量となる。なお、色補正代表点の設定は、輝度信号Ｙと色補正値Ａの組み合わせで任意に変更できるようにするとよい。
【００４５】
また、色補正テーブルは、Ｃｂ信号とＣｒ信号それぞれに対応して個別に持つようにし、Ｃｂ信号とＣｒ信号の色補正テーブルを同じ設定にしてもよいし、それぞれ異なる設定値としてもよい。すなわち、前記色補正テーブルは、色差信号Ｃｂ、Ｃｒそれぞれに対応して別に設けられた色補正テーブルのペアからなり、該ペアの色補正テーブルそれぞれにおける所定階調と色補正値との関係を同じ設定又は異なる設定とされていることとしてもよい。このように色補正テーブルをＣｂ信号とＣｒ信号とで個別に設定できることにより、階調別の色補正に自由度が生まれ様々な補正方法が可能となる。
【００４６】
このような色補正テーブルを１又は複数予め設定して用意し、図２に示すＲＯＭ（１０８）（色補正テーブル記憶部）に格納しておき、ＳＤＲＡＭ（１０３）或いはＬｏｃａｌ ＳＲＡＭ（１０４−４）に適宜読み出して使用する（色補正テーブル選択部）。このときの色補正テーブルの選択は、ユーザが色補正テーブルの候補から手動で選択できるようにしてもよいし、撮影モードに対応して自動的に選択されたり、撮影シーン（例えば高輝度階調の色補正）に応じて自動的に選択されたりするようにしてもよい。
【００４７】
以上のような色補正テーブルを用いて、階調判定で判定した輝度信号Ｙに対応する色補正値Ａを選択された色補正テーブルから算出する（色補正値算出部）。
【００４８】
（Ｓ１４：Ｃｂ，Ｃｒ補正（色信号補正部））
次に、算出した色補正値Ａから色差信号Ｃｂ、Ｃｒに対して色補正を行う。補正にあたっては、以下の式（１），（２）を用いて色信号Ｃｂ’、Ｃｒ’を算出し、色差信号Ｃｂ，Ｃｒに代えて輝度信号Ｙと補正後の色差信号Ｃｂ’、Ｃｒ’とする。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【００４９】
（Ｓ１５）
以上の処理が画像データの全画素について行われるまで繰り返して実行され、色補正後の画像データを得て終了する。
【００５０】
以下に、階調別色補正ブロックによる補正効果について、３つの例を用いて説明する。
（補正効果例１）
図１０は、低輝度部で緑色に着色した場合のＣｂ、Ｃｒ信号の色補正テーブル設定例である。ここでは、Ｃｂ信号とＣｒ信号の色補正テーブルにおける所定階調と色補正値との関係を同じ設定としている。
輝度信号Ｙが小さい領域で色補正値をプラス方向に設定することで、階調別色補正ブロックの処理により低輝度部の色を緑色から緑色の補色であるマゼンタ色側にシフトすることができ、低輝度部での緑色着色を緩和することができる。また、Ｃｂ、Ｃｒ信号の色補正テーブルを同じにすることで原点方向に向けてマゼンタ側にシフトさせており、色相が変化することがないため階調別色補正による色変化の違和感は少ない。
【００５１】
（補正効果例２）
図１１は、高輝度部でマゼンタ色に着色した場合のＣｂ、Ｃｒ信号の色補正テーブル設定例である。ここでは、Ｃｂ信号とＣｒ信号の色補正テーブルにおける所定階調と色補正値との関係を同じ設定としている。
輝度信号Ｙが大きい領域で色補正値をマイナス方向に設定することで、階調別色補正ブロックの処理により高輝度部の色をマゼンタ色からマゼンタ色の補色である緑側にシフトすることができ、高輝度部でのマゼンタ色着色を緩和することができる。また、Ｃｂ、Ｃｒ信号の色補正テーブルを同じにすることで原点方向に向けて緑側にシフトさせており、色相が変化することがないため階調別色補正による色変化の違和感は少ない。
【００５２】
（補正効果例３）
図１２は、Ｃｒ信号は補正せず、Ｃｂ信号のみ補正するときの色補正テーブル設定例である。Ｃｒ信号の色補正テーブルで色補正値を全階調において０にすることで、Ｃｒ信号に対しては色補正がされない。一方、Ｃｂ信号の方は、中間輝度よりやや高めの輝度信号領域で色補正値をマイナス方向に設定することで、中間輝度よりやや高めの階調で青色の補色である黄色側にシフトすることができ、状況により一部階調で青色に着色した場合には着色を緩和することができる。
【００５３】
本実施例では、３つの色補正テーブル例を示したが、色補正テーブル設定例はこれ以外にも如何様にも設定可能であり、階調毎のホワイトバランス変更のような使い方も可能である。また、本発明は静止画像に限定されず、スルー画像や動画像においても実施可能である。例えばＬＣＤモニタ（１０）にスルー画像を出力するときに、ＬＣＤモニタ（１０）のバックライトの色味でスルー画像が青白かったり、黄ばんでしまったりするような場合の補正に使用することができる。
【００５４】
なお、本発明は、前述した画像処理装置において実行される画像処理工程（階調別色補正ブロック）をＰＣなどの演算装置において実行される画像処理方法として捉えることができる。
すなわち、本発明に係る画像処理方法は、記憶部を有する演算装置に入力される輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データについて階調別に色補正する画像処理方法であって、所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを前記記憶部に記憶させる色補正テーブル記憶工程と、前記色補正テーブル記憶工程で記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択工程と、入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定工程と、前記色補正テーブル選択工程で選択された色補正テーブルから前記階調判定工程で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出工程と、入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正工程と、を備えることを特徴とするものである。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
また、本発明は、本発明の画像処理方法を演算装置で順次実行するように制御することとしたプログラムにも適用可能である。
【００５５】
なお、これまで本発明を図面に示した実施形態をもって説明してきたが、本発明は図面に示した実施形態に限定されるものではなく、他の実施形態、追加、変更、削除など、当業者が想到することができる範囲内で変更することができ、いずれの態様においても本発明の作用・効果を奏する限り、本発明の範囲に含まれるものである。
【符号の説明】
【００５６】
１ サブＬＣＤ
２ レリーズボタン
３ ストロボ発光部
４ 撮影／再生切り換えダイヤル
５ 測距ユニット
６ リモコン受光部
７ 鏡胴ユニット
７−１ ズーム光学系
７−１ａ ズームレンズ
７−１ｂ ズーム駆動モータ
７−２ フォーカス光学系
７−２ａ フォーカスレンズ
７−２ｂ フォーカス駆動モータ
７−３ 絞りユニット
７−３ａ 絞り
７−３ｂ 絞りモータ
７−４ メカシャッタユニット
７−４ａ メカシャッタ
７−４ｂ メカシャッタモータ
７−５ モータドライバ
８ ＡＦ ＬＥＤ（オートフォーカスＬＥＤ）
９ ストロボＬＥＤ
１０ ＬＣＤモニタ
１１ａ，１１ｂ 光学ファインダー
１２ ズームボタン
１３ 電源スイッチ
１４ 操作部
１０１ ＣＣＤ
１０２ Ｆ／Ｅ−ＩＣ
１０２−１ ＣＤＳ
１０２−２ ＡＧＣ
１０２−３ Ａ／Ｄ
１０２−４ ＴＧ
１０３ ＳＤＲＡＭ
１０４ デジタルスチルカメラプロセッサ
１０４−１ ＣＣＤ１信号処理ブロック
１０４−２ ＣＣＤ２信号処理ブロック
１０４−３ ＣＰＵブロック
１０４−４ Ｌｏｃａｌ ＳＲＡＭ
１０４−５ ＵＳＢブロック
１０４−６ シリアルブロック
１０４−７ ＪＰＥＧ ＣＯＤＥＣブロック
１０４−８ ＲＥＳＩＺＥブロック
１０４−９ ＴＶ信号表示ブロック
１０４−１０ メモリカードコントローラブロック
１０７ ＲＡＭ
１０８ ＲＯＭ
１０９ ＳＵＢ−ＣＰＵ
１１１ ＬＣＤドライバ
１１３ ブザー
１１４ ストロボ回路
１１５−１ 音声記録回路
１１５−２ マイクＡＭＰ
１１５−３ マイク
１１６−１ 音声再生回路
１１６−２ オーディオＡＭＰ
１１６−３ スピーカー
１１７ ＬＣＤドライバ
１１８ ビデオＡＭＰ
１１９ ビデオジャック
１２０ 内蔵メモリ
１２１ メモリカードスロットル
１２２ ＵＳＢコネクタ
１２３−１ シリアルドライバ回路
１２３−２ ＲＳ−２３２Ｃコネクタ
１３０ メモリカード
ＳＷ１〜ＳＷ１３ ｋｅｙユニット
【先行技術文献】
【特許文献】
【００５７】
【特許文献１】特開２００６−１４８６０７号公報
【特許請求の範囲】
【請求項１】
輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データが入力される画像入力部と、
所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを記憶する色補正テーブル記憶部と、
前記色補正テーブル記憶部に記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択部と、
入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定部と、
前記色補正テーブル選択部で選択された色補正テーブルから前記階調判定部で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出部と、
入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正部と、
を備えることを特徴とする画像処理装置。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【請求項２】
前記色補正テーブルは、複数階調それぞれに対応して色補正値が設定されていることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記色補正テーブルは、前記画像データで取りうる輝度範囲に対応した全階調それぞれに色補正値を有するものであることを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記色補正テーブルは、前記画像データで取りうる輝度範囲において幾つかの階調で設定される色補正値を色補正代表点として持つものであり、
前記色補正値算出部は、該色補正テーブルの色補正代表点間を線形補間して色補正値Ａを算出することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記色補正テーブルは、色差信号Ｃｂ、Ｃｒそれぞれに対応して別に設けられた色補正テーブルのペアからなり、該ペアの色補正テーブルそれぞれにおける所定階調と色補正値との関係を同じ設定又は異なる設定とされていることを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記画像データについて補色方向に色補正するときに、前記色補正テーブル選択部は、所定階調と色補正値との関係が同じ設定とされた前記ペアの色補正テーブルを選択することを特徴とする請求項５に記載の画像処理装置。
【請求項７】
請求項１〜６のいずれかに記載の画像処理装置を備えることを特徴とする撮像装置。
【請求項８】
記憶部を有する演算装置に入力される輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データについて階調別に色補正する画像処理方法であって、
所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを前記記憶部に記憶させる色補正テーブル記憶工程と、
前記色補正テーブル記憶工程で記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択工程と、
入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定工程と、
前記色補正テーブル選択工程で選択された色補正テーブルから前記階調判定工程で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出工程と、
入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正工程と、
を備えることを特徴とする画像処理方法。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【請求項１】
輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データが入力される画像入力部と、
所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを記憶する色補正テーブル記憶部と、
前記色補正テーブル記憶部に記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択部と、
入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定部と、
前記色補正テーブル選択部で選択された色補正テーブルから前記階調判定部で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出部と、
入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正部と、
を備えることを特徴とする画像処理装置。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【請求項２】
前記色補正テーブルは、複数階調それぞれに対応して色補正値が設定されていることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記色補正テーブルは、前記画像データで取りうる輝度範囲に対応した全階調それぞれに色補正値を有するものであることを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記色補正テーブルは、前記画像データで取りうる輝度範囲において幾つかの階調で設定される色補正値を色補正代表点として持つものであり、
前記色補正値算出部は、該色補正テーブルの色補正代表点間を線形補間して色補正値Ａを算出することを特徴とする請求項１に記載の画像処理装置。
【請求項５】
前記色補正テーブルは、色差信号Ｃｂ、Ｃｒそれぞれに対応して別に設けられた色補正テーブルのペアからなり、該ペアの色補正テーブルそれぞれにおける所定階調と色補正値との関係を同じ設定又は異なる設定とされていることを特徴とする請求項１に記載の画像処理装置。
【請求項６】
前記画像データについて補色方向に色補正するときに、前記色補正テーブル選択部は、所定階調と色補正値との関係が同じ設定とされた前記ペアの色補正テーブルを選択することを特徴とする請求項５に記載の画像処理装置。
【請求項７】
請求項１〜６のいずれかに記載の画像処理装置を備えることを特徴とする撮像装置。
【請求項８】
記憶部を有する演算装置に入力される輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒからなる画像データについて階調別に色補正する画像処理方法であって、
所定階調に対応して所定の色補正値を有する１または複数の色補正テーブルを前記記憶部に記憶させる色補正テーブル記憶工程と、
前記色補正テーブル記憶工程で記憶された１または複数の色補正テーブルから所定の色補正テーブルを選択する色補正テーブル選択工程と、
入力画像データの所定画素数ごとに輝度信号Ｙから階調を判定する階調判定工程と、
前記色補正テーブル選択工程で選択された色補正テーブルから前記階調判定工程で判定された階調に対応する色補正値Ａを入力画像データの所定画素数ごとに算出する色補正値算出工程と、
入力画像データの所定画素数ごとに、算出された色補正値Ａ及び色差信号Ｃｂ、Ｃｒを用いて、下記の式（１），（２）により色信号Ｃｂ’、Ｃｒ’を算出し、輝度信号Ｙと色差信号Ｃｂ’、Ｃｒ’からなる色補正後の画像データとする色信号補正工程と、
を備えることを特徴とする画像処理方法。
Ｃｂ’＝（１＋Ａ）×Ｃｂ ・・・（１）
Ｃｒ’＝（１＋Ａ）×Ｃｒ ・・・（２）
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１０−１８７０５０（Ｐ２０１０−１８７０５０Ａ）
【公開日】平成２２年８月２６日（２０１０．８．２６）
【国際特許分類】
【出願番号】特願２００９−２８０５３（Ｐ２００９−２８０５３）
【出願日】平成２１年２月１０日（２００９．２．１０）
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
【公開日】平成２２年８月２６日（２０１０．８．２６）
【国際特許分類】
【出願日】平成２１年２月１０日（２００９．２．１０）
【出願人】（０００００６７４７）株式会社リコー (37,907)
【Ｆターム（参考）】
[ Back to top ]