画像処理装置および方法、プログラム
【課題】 複数のカメラのうちレンズが曇ったカメラを検出することにより、画像撮影の失敗を防止することを目的とする。
【解決手段】曇り止め機能を施したカメラにより撮像された基準画像データの画素値と曇り止め機能を施していないカメラにより撮像された撮像画像データの画素値とを比較することにより、レンズが曇ったカメラを検出する。
【解決手段】曇り止め機能を施したカメラにより撮像された基準画像データの画素値と曇り止め機能を施していないカメラにより撮像された撮像画像データの画素値とを比較することにより、レンズが曇ったカメラを検出する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数のカメラにより撮像された複数の画像データを処理する画像処理装置に関する。
【背景技術】
【０００２】
従来、ステレオカメラ、又は複数のカメラを格子上に配置した多眼方式の撮像装置を用いて、対象物体の３次元画像データを合成する画像処理技術がある。
【０００３】
この画像処理技術において、撮像条件の影響により合成画像データが示す画像の画質が低下する場合がある。例えば、カメラ周辺の急激な温度変化によりレンズが曇った場合、画像上の被写体像がボケたり、全体的に光量が落ちてしまう問題がある。
【０００４】
さて、レンズ曇りを防ぐ手法として、カメラフィルター表面に酸化チタンを焼結させることで、曇り止め機能が備わった防曇性カメラフィルターをカメラに装着する手法が提案されている（特許文献１）。
【０００５】
また、レンズ表面に直接酸化チタンを焼結させることにより、防曇性カメラフィルターを装着することなくレンズ曇りを防ぐ手法も提案されている（特許文献２）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平９−２３０１０６
【特許文献２】特開平１１−１９４２５２
【発明の概要】
【発明が解決しようとする課題】
【０００７】
多眼方式の撮像装置においてレンズ曇りを防ぐために、撮像装置内にある全てのカメラに対して曇り止め機能を施すことにより、レンズ曇りを防ぐ手法が考えられる。曇り止めの一般的な手法としては、カメラのレンズ表面にポリエチレングリコールのような親水性化合物或いは他の界面活性剤を塗布する手法が挙げられる。しかしながら、この種の防曇性被膜はあくまで一時的なもので、水洗や接触によって容易に取り除かれ、早期に効果を失うという課題があった。
【０００８】
特許文献１の防曇性カメラフィルターを多眼方式の撮像装置にある全てのカメラに適用すると、長期間に渡りレンズ曇りを防ぐことは可能であるが、カメラ構造が複雑になり、重量が重くなる。更に、コストも高くなるという課題があった。
【０００９】
特許文献２の酸化チタンコーティングを撮影光学系、ファインダ光学系、表示部等の外気に触れる部分の表面に適用すると、カメラ構造を複雑にすることなく長期間に渡りレンズ曇りを防ぐことが可能となる。しかし、コストが高くなる上に、酸化チタン焼結に伴いレンズ変形等が発生し、各カメラのレンズ性能が低下してしまうという課題があった。
【００１０】
そこで本発明では、複数のカメラのうちレンズが曇ったカメラを検出することにより、画像撮影の失敗を防止することを目的とする。
【課題を解決するための手段】
【００１１】
上記の目的を達成するために本発明の画像処理装置は、複数のカメラにより撮像された複数の画像データを処理する画像処理装置であって、前記複数のカメラのうち曇り止め機能を施したカメラにより撮像された基準画像データを取得する基準画像取得手段と、前記複数のカメラのうち曇り止め機能を施していないカメラにより撮像された撮像画像データを取得する撮像画像取得手段と、前記基準画像データの画素値と前記撮像画像データの画素値とを比較することにより、前記複数のカメラのうちレンズが曇ったカメラを検出するレンズ曇り検出手段とを有することを特徴とする。
【発明の効果】
【００１２】
本発明によれば、複数のカメラのうちレンズが曇ったカメラを検出することにより、画像撮影の失敗を防止することができる。
【図面の簡単な説明】
【００１３】
【図１】多眼方式の撮像装置に防曇性カメラフィルターを装着したイメージ図である。
【図２】実施例１のシステム構成図である。
【図３】撮像部１０１〜１０９のシステム構成図である。
【図４】実施例１の示すブロック図である。
【図５】実施例１の効果を示す図である。
【図６】実施例１の動作を示すフローチャートである。
【図７】レンズ曇り検出部４０７の動作を示すフローチャートである。
【図８】実施例１の撮像ライブ画像データの番号データのイメージ図である。
【図９】実施例２の防曇性カメラフィルター配置を示すイメージ図である。
【発明を実施するための形態】
【００１４】
［実施例１］
本実施例では、多眼方式の撮像装置に曇り止め機能を施したカメラをＮ個（本実施例ではＮ＝１）配置する。
【００１５】
図１は、多眼方式の撮像装置に曇り止め機能付きカメラを配置したイメージ図である。図１（ａ）は複数のカメラを構成する多眼方式の撮像装置の一例を示している。９個のカメラ１０１〜１０９は３行３列の正方格子上に配置されている。すべてのカメラは筺体１１１の同一平面上に配置され、その光軸はすべて平行であり、配置された平面に垂直である。本実施例では、複数台のカメラにおいて、基準カメラと撮像カメラを区別して使う。図１（ａ）は、基準カメラと撮像カメラの配置を一例として示している。本実施例では図１（ａ）に示したように、基準カメラはレンズ曇りを検出するために、防曇性カメラフィルターを装着しているカメラである。撮像カメラは防曇性カメラフィルターを装着していない、多視点からの画像を撮影するカメラである。シャッターボタン１１０は画像撮影を制御するボタンであり、ユーザーがシャッターボタン１１０を押すことで、視点位置の異なる画像の撮影が開始される。
【００１６】
図１（ｂ）、（ｃ）は被写体を撮影した画像のイメージ図である。図１（ｂ）は防曇性カメラフィルターを装着していない撮像カメラで取得した撮像画像データの示す撮像画像のイメージ図を示している。図１（ｃ）は防曇性カメラフィルターを装着した基準カメラで取得した基準画像データの示す基準画像のイメージ図を示している。図１（ｂ）の撮像画像では、画像上にレンズ曇りが写っている。一方、図１（ｃ）の基準画像ではレンズ曇りが発生しないため、画像上にレンズ曇りは写らない。レンズ曇りのあるカメラにより撮像された画像データに基づいて後述の画像合成処理を行うと、適切な結果を得られない場合がある。これは、レンズ曇りのあるカメラにより撮像された画像データが示す画像においては、被写体像がボケたり、全体的に画像の光量が落ちていることが原因である。
【００１７】
本実施例のシステム構成を図２を用いて説明する。撮像部１０１〜１０９は、被写体の光情報をセンサーで受光しＡ／Ｄ変換を施しデータ転送経路であるバス２１４にデジタルデータを出力する。フラッシュ２０１は、被写体に光を照射する。ＲＯＭ２０２とＲＡＭ２０３は、撮像や画像処理に必要なプログラム、データ、作業領域などをＣＰＵ２０４に提供する。ＣＰＵ２０４はＲＡＭ２０３をワークメモリとして、ＲＯＭ２０２やＲＡＭ２０３に格納されたプログラムを実行し、バス２１４を介して各構成を制御する。これにより、後述する様々な処理が実行される。撮像装置制御部２０５は、フォーカスを合わせる、シャッターを開く、絞りを調節するなどの、ＣＰＵ２０４から指示された撮像系の制御を行う。操作部２０６は、ボタンやモードダイヤルなどが該当し、これらを介して入力されたユーザ指示を受け取る。ＣＧ生成部２０７は、文字やグラフィックなどを生成する。表示部２０８は、一般的には液晶ディスプレイが広く用いられており、ＣＧ生成部２０７や後述のデジタル信号処理部２０９、画像処理部２１３から受け取った撮影画像や文字の表示を行う。また、タッチスクリーン機能を有していても良く、その場合は、ユーザ指示を操作部２０６の入力として扱うことも可能である。デジタル信号処理部２０９は、デジタル値にホワイトバランス処理、ガンマ処理、ノイズ低減処理などを行い、デジタル画像データを生成する。圧縮・伸張部２１０は、上記デジタル値をＪｐｅｇやＭｐｅｇなどのファイルフォーマットに変換する処理を行う。外部メモリ制御部２１１は、ＰＣその他メディア２１２（例えば、ハードディスク、メモリーカード、ＣＦカード、ＳＤカード、ＵＳＢメモリ）につなぐためのインターフェースである。画像処理部２１３は、撮像部１０１〜１０９から得られたデジタル画像データ或いは、デジタル信号処理部から出力されるデジタル画像データを利用して新たな画像を生成し、その結果をバス２１４へ出力する。
【００１８】
図３を用いて、撮像部１０１〜１０９の詳細を説明する。撮像部１０１〜１０９は、装着フィルター３０１（本実施例では防曇性カメラフィルター）、レンズ３０２、絞り３０３、シャッター３０４、光学フィルター３０５、センサー３０６などから構成され、被写体の光量を検知する。Ａ／Ｄ変換部３０７は被写体の光量をデジタル値に変換し、バス２１４にデジタルデータを出力する。
【００１９】
尚、本実施例では防曇性カメラフィルターを装着フィルター３０１に付けているが、レンズ３０２に曇り止めコーティング加工を施しても良い。
【００２０】
また、装置の構成要素は上記以外にも存在するが、本実施例の主眼ではないので説明を省略する。
【００２１】
図４は、本実施例を適用できる画像処理装置の実施の一形態を示すブロック図である。入力端子４０１から基準ライブ画像データが、基準ライブ画像取得部４０４へ入力される。同様に、入力端子４０２から撮像ライブ画像データが、撮像ライブ画像取得部４０５へ入力される。基準カメラと撮像カメラのカメラパラメータは、入力端子４０３から画像処理部２１３へ入力される。取得できた基準ライブ画像データと撮像ライブ画像データ及びカメラパラメータは端子４０６を通してレンズ曇り検出部４０７へ入力される。レンズ曇り検出部４０７は、各撮像ライブ画像にレンズ曇りが写っているかどうかを検出し、レンズ曇りを検出した撮像ライブ画像データの番号をレンズ曇り通知部４０８へ出力する。レンズ曇り通知部４０８は、入力された撮像ライブ画像データの番号に対応する、撮像カメラの位置と撮像ライブ画像データを出力端子４０９を通して表示部２０８へ出力する。また、画像合成に用いる基準画像データと撮像画像データはそれぞれ、入力端子４０１、４０２を通して基準画像取得部４１０と撮像画像取得部４１１に入力される。取得できた基準画像データと撮像画像データ及びカメラパラメータは端子４１２を通して画像合成部４１３へ入力される。画像合成部４１３は、基準画像データと撮影画像データからポリゴンデータを生成し、各ポリゴンデータに対して画像内の画素値を元にテクスチャマッピング処理を施すことにより、３次元画像データを合成する。画像合成部４１３で合成された合成画像データは出力端子４１４から出力される。
【００２２】
本実施例を適用すると、図５に示すように、基準ライブ画像（図５（ａ））と撮像ライブ画像（図５（ｂ））とを比較することで、レンズ曇りを検出できる。更に、レンズ曇りを検出した撮像カメラの位置と、対応する撮像ライブ画像を表示部２０８で表示することにより（図５（ｃ））、ユーザーに対してどの撮像カメラが曇っているかをユーザーに通知できる。通知を受けたユーザーは、事前にレンズ曇りのあるカメラを確認することができ、レンズ拭きでレンズ曇りを拭きとるなどして、撮影の失敗を事前の防止することができる。或いは、レンズ曇りのあるカメラにより取得された画像中のレンズ曇りの影響を除去するような画像処理（例えば、レンズ曇りにより落ちが光量を元に戻すような画像処理）を行う等して、撮影の失敗を事前に防止することもできる。
【００２３】
〔画像処理部２１３の動作〕
図６は、本実施例の画像処理方法を示すフローチャートである。詳細には、図６のフローチャートに示す手順を記述したコンピュータで実行可能なプログラムをＲＯＭ２０２からＲＡＭ２０３上に読み込んだ後に、ＣＰＵ２０４によって該プログラムを実行することによって当該処理が実施される。
【００２４】
以下、図６に示す各処理について説明する。ステップＳ６０１では、基準カメラと撮像カメラに対応するカメラパラメータをＲＯＭ２０２またはＲＡＭ２０３等の記憶領域に入力する。カメラパラメータは各カメラの焦点距離や光軸ずれを表す内部パラメータと、各カメラの３次元座標を表す外部パラメータ（各カメラの配置と向き情報を表わすパラメータを含む）と、ユーザーが指定した撮影条件パラメータ等から成る。基準ライブ画像取得部４０４は、基準ライブ画像データを所定の記憶領域に入力する（Ｓ６０２）。所定の記憶領域に既に基準ライブ画像データが有る場合は、上書きする。
【００２５】
撮像ライブ画像取得部４０５は、撮像ライブ画像データを所定の記憶領域に入力する（Ｓ６０３）。所定の記憶領域に既に撮像ライブ画像データが有る場合は、上書きする。レンズ曇り検出部４０７は、ステップＳ６０２で入力された基準ライブ画像データとステップＳ６０３で入力された撮像ライブ画像データを比較することにより、レンズ曇りのある撮像カメラを検出する（Ｓ６０４）。各撮像ライブ画像データは通し番号が割り振られており、レンズ曇りが検出された撮像ライブ画像データの番号は、撮像カメラと対応付けて所定の記憶領域に記憶される。レンズ曇り検出方法の詳細は、図７を用いて後述する。ステップＳ６０５では、レンズ曇りが検出された撮像ライブ画像データの番号データが所定の記憶領域に有るかどうかを調べることにより、レンズ曇りの有無を判定する。撮像ライブ画像の番号データが有る場合は、レンズが曇っているカメラが有ると判定し、ステップＳ６０６へ移行する。撮像ライブ画像データの番号データが無い場合は、レンズが曇っているカメラは無いと判定し、ステップＳ６０７へ移行する。レンズ曇り通知部４０８は、ステップＳ６０４でレンズ曇りが検出された撮像ライブ画像データの番号に対応する、撮像カメラの位置と撮像ライブ画像を表示部２０８に表示する（Ｓ６０６）。この表示処理により、ユーザーに対してどのカメラが曇っているか（レンズ曇りを有するか）を通知する。ステップＳ６０７では、シャッターボタン１１０が押されたかどうかを調べることにより、画像を撮像するかどうかを判定する。シャッターボタン１１０が押されている場合は、画像を撮像すると判定し、ステップＳ６０８へ移行する。シャッターボタン１１０が押されていない場合は、画像を撮像しないと判定し、ステップＳ６０２に戻る。基準画像取得部４１０は、ステップＳ６０１で入力されたカメラパラメータから、ユーザーが指定した撮影条件に基づき、基準画像データを記憶領域に記憶する（Ｓ６０８）。撮像画像取得部４１１は、ステップＳ６０１で入力されたカメラパラメータから、ユーザーが指定した撮影条件に基づき、撮像画像データを記憶領域に記憶する（Ｓ６０９）。画像合成部４１３は、ステップＳ６０８で入力した基準画像データとステップＳ６０９で入力した撮像画像データを用いて、ポリゴンデータ生成及びテクスチャマッピング処理を行うことにより、３次元画像データを合成し、処理を終了する（Ｓ６１０）。
【００２６】
〔レンズ曇り検出部４０７の動作〕
以下では、ステップＳ６０４のレンズ曇り検出処理の詳細について、図７のフローチャートを用いて説明する。ここでは基準カメラがＮ個（本実施例ではＮ＝１）、撮像カメラがＭ個（本実施例ではＭ＝８）あるとする。基準カメラ１０１で撮影した基準ライブ画像データは基準ライブ画像データ１とする。また、各撮像カメラ１０２〜１０９で撮影した撮像ライブ画像データは、撮像ライブ画像１データ，撮像ライブ画像データ２，・・・，撮像ライブ画像データＭと各カメラに対応した番号が割り振られているものとする。
【００２７】
レンズ曇り検出部４０７は、ステップＳ６０２で入力した基準ライブ画像データ１の画像全体にわたる平均画素値Ｃ１を算出する。算出した平均画素値Ｃ１は記憶領域に記憶する（Ｓ７０１）。ステップＳ７０２では、撮像ライブ画像データの番号ｉに対して、ｉ＝１に初期化する。レンズ曇り検出部４０７は、ステップＳ６０３で入力した撮像ライブ画像ｉの平均画素値Ｌｉを算出する。算出した平均画素値Ｌｉは記憶領域に記憶する（Ｓ７０３）。更に、ステップＳ７０１で算出した平均画素値Ｃ１と、ステップＳ７０３で算出した平均画素値Ｌｉから、｜Ｃ１−Ｌｉ｜＞Δ（本実施例ではΔ＝５０）を満たすかどうかを判定する（Ｓ７０４）。｜Ｃ１−Ｌｉ｜＞Δを満たす場合は、撮像ライブ画像データｉでレンズ曇りが検出されたと判定し、ステップＳ７０５へ移行する。｜Ｃ１−Ｌｉ｜＞Δを満たさない場合は、撮像ライブ画像データｉでレンズ曇りが検出されなかったと判定し、ステップＳ７０６へ移行する。判定の結果、レンズ曇りを検出した撮像ライブ画像データの番号ｉを所定の記憶領域に記憶する（Ｓ７０５）。所定の記憶領域に既に撮像ライブ画像データの番号データが有る場合は、上書きする。一方、レンズ曇りを検出しなかった撮像ライブ画像データの番号ｉは所定の記憶領域から消去する（Ｓ７０６）。所定の記憶領域に撮像ライブ画像データの番号データが無い場合は、消去処理を中断し、ステップＳ７０７へ移行する。ステップＳ７０７では、撮像ライブ画像データの番号ｉに対して、ｉ＝ｉ＋１に更新する。レンズ曇り検出部４０７は、撮像ライブ画像データの番号ｉがｉ≧Ｍを満たすかどうかを判定する（Ｓ７０８）。ｉ≧Ｍを満たす場合は、Ｍ枚全ての撮像ライブ画像データについて処理を終了したと判定し、レンズ曇り検出処理を終了する。ｉ≧Ｍを満たさない場合は、ステップＳ７０２に戻る。
【００２８】
レンズ曇り検出処理で記憶した撮像ライブ画像データの番号データのイメージ図を図８に示す。図８（ａ）はＮ枚の基準ライブ画像のイメージ図である（本実施例ではＮ＝１）。図８（ｂ）はＭ枚の撮像ライブ画像のイメージ図である（本実施例ではＭ＝８）。図８の例では８枚の撮像ライブ画像中、撮像ライブ画像データ１，３、４、、、８でレンズ曇りが検出されている。この時、レンズ曇りが検出された撮像ライブ画像の番号（１，３，４，・・・，８）が所定の記憶領域に記憶され、レンズ曇りが検出されなかった撮像ライブ画像の番号（２）のデータが、所定の記憶領域から消去された状態になっている（図８（ｃ））。
【００２９】
１つ以上のカメラに曇り止め機能を施した多眼方式の撮像装置に対して、以上説明したレンズ曇り検出及び通知処理を行うことで、レンズ曇りによる失敗画像撮影を防ぐことができる。即ち、通知を受けたユーザーは、事前にレンズ曇りのあるカメラを確認することができ、レンズ拭きでレンズ曇りを拭きとるなどして、撮影の失敗を事前の防止することができる。或いは、レンズ曇りのあるカメラにより取得された画像中のレンズ曇りの影響を除去するような画像処理（例えば、レンズ曇りにより落ちが光量を元に戻すような画像処理）を行う等して、撮影の失敗を事前に防止することもできる。
【００３０】
＜変形例＞
・本実施例では、各処理が図２に示されるような撮像装置により実施されるとしたが、これに限らない。例えば、基準画像データ及び撮像画像データの撮像は多眼方式の撮像装置によってなされるものの、レンズ曇りの検出、通知は情報処理装置（例えば、パーソナルコンピュータ）により実現されても良い。
・本実施例では、画像合成部４１３により、基準画像データと撮像画像データから３次元画像データを合成するとした。しかしながら、基準画像データと撮像画像データに基づいた処理は３次元画像データの合成に限らない。例えば、基準画像データと撮像画像データとに基づいて、デプス画像を生成することや、被写界深度を調整した画像データ（ボケ画像データ）を生成する処理であっても構わない。
・本実施例では、基準ライブ画像データと撮像ライブ画像データとに基づいてレンズ曇りの検出を行い、基準画像データと撮像画像データとに基づいて画像合成処理を行うとしたが、これに限らない。例えば、ライブ画像データではなく、基準画像データと撮像画像データとに基づいて、レンズ曇りの検出を行っても良い。
・本実施例では、平均画素値Ｃ１やＬｉを算出する際に画像全体にわたる平均画素値を用いるとした。しかしながら、画像全体にわたる平均画素値を用いるのではなく、所定の領域（例えば、画像の中心を基準として１００画素×１００画素の領域）の平均画素値を用いても良い。こうすることにより、平均画素値の算出負荷を低減することが可能となる。・本実施例ではレンズ曇りをユーザーに通知する際に、カメラの位置を文字情報として表示部に表示したが、ユーザーが認識しやすい表示方式であれば良く、特に本実施例の表示方法に限定するものではない。
・レンズ曇りが検出された画像を表示部に表示する際、各撮像ライブ画像をサムネイル表示しても良い。更に、撮像ライブ画像を表示する際、レンズ曇りを検出した撮像ライブ画像又は画像内で曇っている領域を強調表示しても良い。
・本実施例では曇り止め機能として酸化チタンを焼結させた防曇性カメラフィルターを用いたが、水滴がレンズ表面に吸着した際の接触角が５°以下となる表面処理加工であれば良く、特に酸化チタンの焼結コーティング加工に限定するものではない。
・本実施例では曇り止め機能を施したカメラを１個配置したが、複数であっても良い。例えば、曇り止め機能を施した複数のカメラ間の基準画像データ比較することで、曇り止め機能を施したカメラの一部でユーザーの指や、鏡面反射光が写り込む場合でも、レンズ曇りをの有無を安定的に検出することができる。
【００３１】
［実施例２］
本実施例では実施例１とは異なる撮像部を備えることでレンズ曇りを検出及び通知する例について説明する。
【００３２】
図９（ａ）〜（ｃ）に撮像部１０１〜１０９の別のイメージ図を示す。図１との差異のみを示すと、図９（ａ）において撮像部１０５は基準カメラであり、撮像装置の筺体の左右又及び上下方向のどちらか又は両方に対して中央付近に配置されている。撮像部１０１〜１０４、１０６〜１０９は撮像カメラである。また図９（ｂ）、（ｃ）は筺体１１１に垂直かつ図９（ａ）の点線９０１を通る平面における断面図である。図９（ｂ）、（ｃ）において、撮像部１０５は基準カメラであり、撮像部１０２、１０８は撮像カメラである。図９（ｂ）では基準カメラの鏡筒の高さが撮像カメラよりも低くなっており、図（ｃ）では基準カメラの上部にレンズシャッター９０２等のメカニカルなレンズ保護機構が施されている。
【００３３】
画像処理部２１３のブロック図とフローチャートは実施例１と同一であるため説明を省略する。
【００３４】
以上、図９（ａ）〜（ｃ）に示す撮像部１０１〜１０９を持つ多眼方式の撮像装置では、レンズ曇り検出の基準となる基準カメラがユーザーの指等の接触により汚れたり、傷が付きにくくなる為、高い耐久性を備えたレンズ曇り検出及び通知処理が可能となる。
【技術分野】
【０００１】
本発明は、複数のカメラにより撮像された複数の画像データを処理する画像処理装置に関する。
【背景技術】
【０００２】
従来、ステレオカメラ、又は複数のカメラを格子上に配置した多眼方式の撮像装置を用いて、対象物体の３次元画像データを合成する画像処理技術がある。
【０００３】
この画像処理技術において、撮像条件の影響により合成画像データが示す画像の画質が低下する場合がある。例えば、カメラ周辺の急激な温度変化によりレンズが曇った場合、画像上の被写体像がボケたり、全体的に光量が落ちてしまう問題がある。
【０００４】
さて、レンズ曇りを防ぐ手法として、カメラフィルター表面に酸化チタンを焼結させることで、曇り止め機能が備わった防曇性カメラフィルターをカメラに装着する手法が提案されている（特許文献１）。
【０００５】
また、レンズ表面に直接酸化チタンを焼結させることにより、防曇性カメラフィルターを装着することなくレンズ曇りを防ぐ手法も提案されている（特許文献２）。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平９−２３０１０６
【特許文献２】特開平１１−１９４２５２
【発明の概要】
【発明が解決しようとする課題】
【０００７】
多眼方式の撮像装置においてレンズ曇りを防ぐために、撮像装置内にある全てのカメラに対して曇り止め機能を施すことにより、レンズ曇りを防ぐ手法が考えられる。曇り止めの一般的な手法としては、カメラのレンズ表面にポリエチレングリコールのような親水性化合物或いは他の界面活性剤を塗布する手法が挙げられる。しかしながら、この種の防曇性被膜はあくまで一時的なもので、水洗や接触によって容易に取り除かれ、早期に効果を失うという課題があった。
【０００８】
特許文献１の防曇性カメラフィルターを多眼方式の撮像装置にある全てのカメラに適用すると、長期間に渡りレンズ曇りを防ぐことは可能であるが、カメラ構造が複雑になり、重量が重くなる。更に、コストも高くなるという課題があった。
【０００９】
特許文献２の酸化チタンコーティングを撮影光学系、ファインダ光学系、表示部等の外気に触れる部分の表面に適用すると、カメラ構造を複雑にすることなく長期間に渡りレンズ曇りを防ぐことが可能となる。しかし、コストが高くなる上に、酸化チタン焼結に伴いレンズ変形等が発生し、各カメラのレンズ性能が低下してしまうという課題があった。
【００１０】
そこで本発明では、複数のカメラのうちレンズが曇ったカメラを検出することにより、画像撮影の失敗を防止することを目的とする。
【課題を解決するための手段】
【００１１】
上記の目的を達成するために本発明の画像処理装置は、複数のカメラにより撮像された複数の画像データを処理する画像処理装置であって、前記複数のカメラのうち曇り止め機能を施したカメラにより撮像された基準画像データを取得する基準画像取得手段と、前記複数のカメラのうち曇り止め機能を施していないカメラにより撮像された撮像画像データを取得する撮像画像取得手段と、前記基準画像データの画素値と前記撮像画像データの画素値とを比較することにより、前記複数のカメラのうちレンズが曇ったカメラを検出するレンズ曇り検出手段とを有することを特徴とする。
【発明の効果】
【００１２】
本発明によれば、複数のカメラのうちレンズが曇ったカメラを検出することにより、画像撮影の失敗を防止することができる。
【図面の簡単な説明】
【００１３】
【図１】多眼方式の撮像装置に防曇性カメラフィルターを装着したイメージ図である。
【図２】実施例１のシステム構成図である。
【図３】撮像部１０１〜１０９のシステム構成図である。
【図４】実施例１の示すブロック図である。
【図５】実施例１の効果を示す図である。
【図６】実施例１の動作を示すフローチャートである。
【図７】レンズ曇り検出部４０７の動作を示すフローチャートである。
【図８】実施例１の撮像ライブ画像データの番号データのイメージ図である。
【図９】実施例２の防曇性カメラフィルター配置を示すイメージ図である。
【発明を実施するための形態】
【００１４】
［実施例１］
本実施例では、多眼方式の撮像装置に曇り止め機能を施したカメラをＮ個（本実施例ではＮ＝１）配置する。
【００１５】
図１は、多眼方式の撮像装置に曇り止め機能付きカメラを配置したイメージ図である。図１（ａ）は複数のカメラを構成する多眼方式の撮像装置の一例を示している。９個のカメラ１０１〜１０９は３行３列の正方格子上に配置されている。すべてのカメラは筺体１１１の同一平面上に配置され、その光軸はすべて平行であり、配置された平面に垂直である。本実施例では、複数台のカメラにおいて、基準カメラと撮像カメラを区別して使う。図１（ａ）は、基準カメラと撮像カメラの配置を一例として示している。本実施例では図１（ａ）に示したように、基準カメラはレンズ曇りを検出するために、防曇性カメラフィルターを装着しているカメラである。撮像カメラは防曇性カメラフィルターを装着していない、多視点からの画像を撮影するカメラである。シャッターボタン１１０は画像撮影を制御するボタンであり、ユーザーがシャッターボタン１１０を押すことで、視点位置の異なる画像の撮影が開始される。
【００１６】
図１（ｂ）、（ｃ）は被写体を撮影した画像のイメージ図である。図１（ｂ）は防曇性カメラフィルターを装着していない撮像カメラで取得した撮像画像データの示す撮像画像のイメージ図を示している。図１（ｃ）は防曇性カメラフィルターを装着した基準カメラで取得した基準画像データの示す基準画像のイメージ図を示している。図１（ｂ）の撮像画像では、画像上にレンズ曇りが写っている。一方、図１（ｃ）の基準画像ではレンズ曇りが発生しないため、画像上にレンズ曇りは写らない。レンズ曇りのあるカメラにより撮像された画像データに基づいて後述の画像合成処理を行うと、適切な結果を得られない場合がある。これは、レンズ曇りのあるカメラにより撮像された画像データが示す画像においては、被写体像がボケたり、全体的に画像の光量が落ちていることが原因である。
【００１７】
本実施例のシステム構成を図２を用いて説明する。撮像部１０１〜１０９は、被写体の光情報をセンサーで受光しＡ／Ｄ変換を施しデータ転送経路であるバス２１４にデジタルデータを出力する。フラッシュ２０１は、被写体に光を照射する。ＲＯＭ２０２とＲＡＭ２０３は、撮像や画像処理に必要なプログラム、データ、作業領域などをＣＰＵ２０４に提供する。ＣＰＵ２０４はＲＡＭ２０３をワークメモリとして、ＲＯＭ２０２やＲＡＭ２０３に格納されたプログラムを実行し、バス２１４を介して各構成を制御する。これにより、後述する様々な処理が実行される。撮像装置制御部２０５は、フォーカスを合わせる、シャッターを開く、絞りを調節するなどの、ＣＰＵ２０４から指示された撮像系の制御を行う。操作部２０６は、ボタンやモードダイヤルなどが該当し、これらを介して入力されたユーザ指示を受け取る。ＣＧ生成部２０７は、文字やグラフィックなどを生成する。表示部２０８は、一般的には液晶ディスプレイが広く用いられており、ＣＧ生成部２０７や後述のデジタル信号処理部２０９、画像処理部２１３から受け取った撮影画像や文字の表示を行う。また、タッチスクリーン機能を有していても良く、その場合は、ユーザ指示を操作部２０６の入力として扱うことも可能である。デジタル信号処理部２０９は、デジタル値にホワイトバランス処理、ガンマ処理、ノイズ低減処理などを行い、デジタル画像データを生成する。圧縮・伸張部２１０は、上記デジタル値をＪｐｅｇやＭｐｅｇなどのファイルフォーマットに変換する処理を行う。外部メモリ制御部２１１は、ＰＣその他メディア２１２（例えば、ハードディスク、メモリーカード、ＣＦカード、ＳＤカード、ＵＳＢメモリ）につなぐためのインターフェースである。画像処理部２１３は、撮像部１０１〜１０９から得られたデジタル画像データ或いは、デジタル信号処理部から出力されるデジタル画像データを利用して新たな画像を生成し、その結果をバス２１４へ出力する。
【００１８】
図３を用いて、撮像部１０１〜１０９の詳細を説明する。撮像部１０１〜１０９は、装着フィルター３０１（本実施例では防曇性カメラフィルター）、レンズ３０２、絞り３０３、シャッター３０４、光学フィルター３０５、センサー３０６などから構成され、被写体の光量を検知する。Ａ／Ｄ変換部３０７は被写体の光量をデジタル値に変換し、バス２１４にデジタルデータを出力する。
【００１９】
尚、本実施例では防曇性カメラフィルターを装着フィルター３０１に付けているが、レンズ３０２に曇り止めコーティング加工を施しても良い。
【００２０】
また、装置の構成要素は上記以外にも存在するが、本実施例の主眼ではないので説明を省略する。
【００２１】
図４は、本実施例を適用できる画像処理装置の実施の一形態を示すブロック図である。入力端子４０１から基準ライブ画像データが、基準ライブ画像取得部４０４へ入力される。同様に、入力端子４０２から撮像ライブ画像データが、撮像ライブ画像取得部４０５へ入力される。基準カメラと撮像カメラのカメラパラメータは、入力端子４０３から画像処理部２１３へ入力される。取得できた基準ライブ画像データと撮像ライブ画像データ及びカメラパラメータは端子４０６を通してレンズ曇り検出部４０７へ入力される。レンズ曇り検出部４０７は、各撮像ライブ画像にレンズ曇りが写っているかどうかを検出し、レンズ曇りを検出した撮像ライブ画像データの番号をレンズ曇り通知部４０８へ出力する。レンズ曇り通知部４０８は、入力された撮像ライブ画像データの番号に対応する、撮像カメラの位置と撮像ライブ画像データを出力端子４０９を通して表示部２０８へ出力する。また、画像合成に用いる基準画像データと撮像画像データはそれぞれ、入力端子４０１、４０２を通して基準画像取得部４１０と撮像画像取得部４１１に入力される。取得できた基準画像データと撮像画像データ及びカメラパラメータは端子４１２を通して画像合成部４１３へ入力される。画像合成部４１３は、基準画像データと撮影画像データからポリゴンデータを生成し、各ポリゴンデータに対して画像内の画素値を元にテクスチャマッピング処理を施すことにより、３次元画像データを合成する。画像合成部４１３で合成された合成画像データは出力端子４１４から出力される。
【００２２】
本実施例を適用すると、図５に示すように、基準ライブ画像（図５（ａ））と撮像ライブ画像（図５（ｂ））とを比較することで、レンズ曇りを検出できる。更に、レンズ曇りを検出した撮像カメラの位置と、対応する撮像ライブ画像を表示部２０８で表示することにより（図５（ｃ））、ユーザーに対してどの撮像カメラが曇っているかをユーザーに通知できる。通知を受けたユーザーは、事前にレンズ曇りのあるカメラを確認することができ、レンズ拭きでレンズ曇りを拭きとるなどして、撮影の失敗を事前の防止することができる。或いは、レンズ曇りのあるカメラにより取得された画像中のレンズ曇りの影響を除去するような画像処理（例えば、レンズ曇りにより落ちが光量を元に戻すような画像処理）を行う等して、撮影の失敗を事前に防止することもできる。
【００２３】
〔画像処理部２１３の動作〕
図６は、本実施例の画像処理方法を示すフローチャートである。詳細には、図６のフローチャートに示す手順を記述したコンピュータで実行可能なプログラムをＲＯＭ２０２からＲＡＭ２０３上に読み込んだ後に、ＣＰＵ２０４によって該プログラムを実行することによって当該処理が実施される。
【００２４】
以下、図６に示す各処理について説明する。ステップＳ６０１では、基準カメラと撮像カメラに対応するカメラパラメータをＲＯＭ２０２またはＲＡＭ２０３等の記憶領域に入力する。カメラパラメータは各カメラの焦点距離や光軸ずれを表す内部パラメータと、各カメラの３次元座標を表す外部パラメータ（各カメラの配置と向き情報を表わすパラメータを含む）と、ユーザーが指定した撮影条件パラメータ等から成る。基準ライブ画像取得部４０４は、基準ライブ画像データを所定の記憶領域に入力する（Ｓ６０２）。所定の記憶領域に既に基準ライブ画像データが有る場合は、上書きする。
【００２５】
撮像ライブ画像取得部４０５は、撮像ライブ画像データを所定の記憶領域に入力する（Ｓ６０３）。所定の記憶領域に既に撮像ライブ画像データが有る場合は、上書きする。レンズ曇り検出部４０７は、ステップＳ６０２で入力された基準ライブ画像データとステップＳ６０３で入力された撮像ライブ画像データを比較することにより、レンズ曇りのある撮像カメラを検出する（Ｓ６０４）。各撮像ライブ画像データは通し番号が割り振られており、レンズ曇りが検出された撮像ライブ画像データの番号は、撮像カメラと対応付けて所定の記憶領域に記憶される。レンズ曇り検出方法の詳細は、図７を用いて後述する。ステップＳ６０５では、レンズ曇りが検出された撮像ライブ画像データの番号データが所定の記憶領域に有るかどうかを調べることにより、レンズ曇りの有無を判定する。撮像ライブ画像の番号データが有る場合は、レンズが曇っているカメラが有ると判定し、ステップＳ６０６へ移行する。撮像ライブ画像データの番号データが無い場合は、レンズが曇っているカメラは無いと判定し、ステップＳ６０７へ移行する。レンズ曇り通知部４０８は、ステップＳ６０４でレンズ曇りが検出された撮像ライブ画像データの番号に対応する、撮像カメラの位置と撮像ライブ画像を表示部２０８に表示する（Ｓ６０６）。この表示処理により、ユーザーに対してどのカメラが曇っているか（レンズ曇りを有するか）を通知する。ステップＳ６０７では、シャッターボタン１１０が押されたかどうかを調べることにより、画像を撮像するかどうかを判定する。シャッターボタン１１０が押されている場合は、画像を撮像すると判定し、ステップＳ６０８へ移行する。シャッターボタン１１０が押されていない場合は、画像を撮像しないと判定し、ステップＳ６０２に戻る。基準画像取得部４１０は、ステップＳ６０１で入力されたカメラパラメータから、ユーザーが指定した撮影条件に基づき、基準画像データを記憶領域に記憶する（Ｓ６０８）。撮像画像取得部４１１は、ステップＳ６０１で入力されたカメラパラメータから、ユーザーが指定した撮影条件に基づき、撮像画像データを記憶領域に記憶する（Ｓ６０９）。画像合成部４１３は、ステップＳ６０８で入力した基準画像データとステップＳ６０９で入力した撮像画像データを用いて、ポリゴンデータ生成及びテクスチャマッピング処理を行うことにより、３次元画像データを合成し、処理を終了する（Ｓ６１０）。
【００２６】
〔レンズ曇り検出部４０７の動作〕
以下では、ステップＳ６０４のレンズ曇り検出処理の詳細について、図７のフローチャートを用いて説明する。ここでは基準カメラがＮ個（本実施例ではＮ＝１）、撮像カメラがＭ個（本実施例ではＭ＝８）あるとする。基準カメラ１０１で撮影した基準ライブ画像データは基準ライブ画像データ１とする。また、各撮像カメラ１０２〜１０９で撮影した撮像ライブ画像データは、撮像ライブ画像１データ，撮像ライブ画像データ２，・・・，撮像ライブ画像データＭと各カメラに対応した番号が割り振られているものとする。
【００２７】
レンズ曇り検出部４０７は、ステップＳ６０２で入力した基準ライブ画像データ１の画像全体にわたる平均画素値Ｃ１を算出する。算出した平均画素値Ｃ１は記憶領域に記憶する（Ｓ７０１）。ステップＳ７０２では、撮像ライブ画像データの番号ｉに対して、ｉ＝１に初期化する。レンズ曇り検出部４０７は、ステップＳ６０３で入力した撮像ライブ画像ｉの平均画素値Ｌｉを算出する。算出した平均画素値Ｌｉは記憶領域に記憶する（Ｓ７０３）。更に、ステップＳ７０１で算出した平均画素値Ｃ１と、ステップＳ７０３で算出した平均画素値Ｌｉから、｜Ｃ１−Ｌｉ｜＞Δ（本実施例ではΔ＝５０）を満たすかどうかを判定する（Ｓ７０４）。｜Ｃ１−Ｌｉ｜＞Δを満たす場合は、撮像ライブ画像データｉでレンズ曇りが検出されたと判定し、ステップＳ７０５へ移行する。｜Ｃ１−Ｌｉ｜＞Δを満たさない場合は、撮像ライブ画像データｉでレンズ曇りが検出されなかったと判定し、ステップＳ７０６へ移行する。判定の結果、レンズ曇りを検出した撮像ライブ画像データの番号ｉを所定の記憶領域に記憶する（Ｓ７０５）。所定の記憶領域に既に撮像ライブ画像データの番号データが有る場合は、上書きする。一方、レンズ曇りを検出しなかった撮像ライブ画像データの番号ｉは所定の記憶領域から消去する（Ｓ７０６）。所定の記憶領域に撮像ライブ画像データの番号データが無い場合は、消去処理を中断し、ステップＳ７０７へ移行する。ステップＳ７０７では、撮像ライブ画像データの番号ｉに対して、ｉ＝ｉ＋１に更新する。レンズ曇り検出部４０７は、撮像ライブ画像データの番号ｉがｉ≧Ｍを満たすかどうかを判定する（Ｓ７０８）。ｉ≧Ｍを満たす場合は、Ｍ枚全ての撮像ライブ画像データについて処理を終了したと判定し、レンズ曇り検出処理を終了する。ｉ≧Ｍを満たさない場合は、ステップＳ７０２に戻る。
【００２８】
レンズ曇り検出処理で記憶した撮像ライブ画像データの番号データのイメージ図を図８に示す。図８（ａ）はＮ枚の基準ライブ画像のイメージ図である（本実施例ではＮ＝１）。図８（ｂ）はＭ枚の撮像ライブ画像のイメージ図である（本実施例ではＭ＝８）。図８の例では８枚の撮像ライブ画像中、撮像ライブ画像データ１，３、４、、、８でレンズ曇りが検出されている。この時、レンズ曇りが検出された撮像ライブ画像の番号（１，３，４，・・・，８）が所定の記憶領域に記憶され、レンズ曇りが検出されなかった撮像ライブ画像の番号（２）のデータが、所定の記憶領域から消去された状態になっている（図８（ｃ））。
【００２９】
１つ以上のカメラに曇り止め機能を施した多眼方式の撮像装置に対して、以上説明したレンズ曇り検出及び通知処理を行うことで、レンズ曇りによる失敗画像撮影を防ぐことができる。即ち、通知を受けたユーザーは、事前にレンズ曇りのあるカメラを確認することができ、レンズ拭きでレンズ曇りを拭きとるなどして、撮影の失敗を事前の防止することができる。或いは、レンズ曇りのあるカメラにより取得された画像中のレンズ曇りの影響を除去するような画像処理（例えば、レンズ曇りにより落ちが光量を元に戻すような画像処理）を行う等して、撮影の失敗を事前に防止することもできる。
【００３０】
＜変形例＞
・本実施例では、各処理が図２に示されるような撮像装置により実施されるとしたが、これに限らない。例えば、基準画像データ及び撮像画像データの撮像は多眼方式の撮像装置によってなされるものの、レンズ曇りの検出、通知は情報処理装置（例えば、パーソナルコンピュータ）により実現されても良い。
・本実施例では、画像合成部４１３により、基準画像データと撮像画像データから３次元画像データを合成するとした。しかしながら、基準画像データと撮像画像データに基づいた処理は３次元画像データの合成に限らない。例えば、基準画像データと撮像画像データとに基づいて、デプス画像を生成することや、被写界深度を調整した画像データ（ボケ画像データ）を生成する処理であっても構わない。
・本実施例では、基準ライブ画像データと撮像ライブ画像データとに基づいてレンズ曇りの検出を行い、基準画像データと撮像画像データとに基づいて画像合成処理を行うとしたが、これに限らない。例えば、ライブ画像データではなく、基準画像データと撮像画像データとに基づいて、レンズ曇りの検出を行っても良い。
・本実施例では、平均画素値Ｃ１やＬｉを算出する際に画像全体にわたる平均画素値を用いるとした。しかしながら、画像全体にわたる平均画素値を用いるのではなく、所定の領域（例えば、画像の中心を基準として１００画素×１００画素の領域）の平均画素値を用いても良い。こうすることにより、平均画素値の算出負荷を低減することが可能となる。・本実施例ではレンズ曇りをユーザーに通知する際に、カメラの位置を文字情報として表示部に表示したが、ユーザーが認識しやすい表示方式であれば良く、特に本実施例の表示方法に限定するものではない。
・レンズ曇りが検出された画像を表示部に表示する際、各撮像ライブ画像をサムネイル表示しても良い。更に、撮像ライブ画像を表示する際、レンズ曇りを検出した撮像ライブ画像又は画像内で曇っている領域を強調表示しても良い。
・本実施例では曇り止め機能として酸化チタンを焼結させた防曇性カメラフィルターを用いたが、水滴がレンズ表面に吸着した際の接触角が５°以下となる表面処理加工であれば良く、特に酸化チタンの焼結コーティング加工に限定するものではない。
・本実施例では曇り止め機能を施したカメラを１個配置したが、複数であっても良い。例えば、曇り止め機能を施した複数のカメラ間の基準画像データ比較することで、曇り止め機能を施したカメラの一部でユーザーの指や、鏡面反射光が写り込む場合でも、レンズ曇りをの有無を安定的に検出することができる。
【００３１】
［実施例２］
本実施例では実施例１とは異なる撮像部を備えることでレンズ曇りを検出及び通知する例について説明する。
【００３２】
図９（ａ）〜（ｃ）に撮像部１０１〜１０９の別のイメージ図を示す。図１との差異のみを示すと、図９（ａ）において撮像部１０５は基準カメラであり、撮像装置の筺体の左右又及び上下方向のどちらか又は両方に対して中央付近に配置されている。撮像部１０１〜１０４、１０６〜１０９は撮像カメラである。また図９（ｂ）、（ｃ）は筺体１１１に垂直かつ図９（ａ）の点線９０１を通る平面における断面図である。図９（ｂ）、（ｃ）において、撮像部１０５は基準カメラであり、撮像部１０２、１０８は撮像カメラである。図９（ｂ）では基準カメラの鏡筒の高さが撮像カメラよりも低くなっており、図（ｃ）では基準カメラの上部にレンズシャッター９０２等のメカニカルなレンズ保護機構が施されている。
【００３３】
画像処理部２１３のブロック図とフローチャートは実施例１と同一であるため説明を省略する。
【００３４】
以上、図９（ａ）〜（ｃ）に示す撮像部１０１〜１０９を持つ多眼方式の撮像装置では、レンズ曇り検出の基準となる基準カメラがユーザーの指等の接触により汚れたり、傷が付きにくくなる為、高い耐久性を備えたレンズ曇り検出及び通知処理が可能となる。
【特許請求の範囲】
【請求項１】
複数のカメラにより撮像された複数の画像データを処理する画像処理装置であって、
前記複数のカメラのうち曇り止め機能を施したカメラにより撮像された基準画像データを取得する基準画像取得手段と、
前記複数のカメラのうち曇り止め機能を施していないカメラにより撮像された撮像画像データを取得する撮像画像取得手段と、
前記基準画像データの画素値と前記撮像画像データの画素値とを比較することにより、前記複数のカメラのうちレンズが曇ったカメラを検出するレンズ曇り検出手段とを有することを特徴とする画像処理装置。
【請求項２】
前記レンズ曇り検出手段により検出したレンズが曇ったカメラをユーザーに通知するレンズ曇り通知手段を更に有することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記撮像画像取得手段により取得した撮像画像データの内、前記レンズ曇り検出手段で検出したレンズが曇ったカメラの撮像画像データが示す画像を表示装置上に表示することを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記レンズ曇り検出手段は、前記基準画像データが示す画像の画素値の平均画素値と前記撮像画像データが示す画像の画素値の平均画素値とを比較することにより、レンズが曇ったカメラを検出することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項５】
曇り止め機能を施したカメラが撮像装置の筺体の左右又及び上下方向のどちらか又は両方に対して中央付近に配置されることを特徴とする請求項１乃至４の何れか１項に記載の画像処理装置。
【請求項６】
曇り止め機能を施したカメラの鏡筒の高さが他のカメラに比べて低いことを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
【請求項７】
曇り止め機能を施したカメラの上部にレンズ保護機構を設けたことを特徴とする請求項１乃至６の何れか１項に記載の画像処理装置。
【請求項８】
請求項１乃至７の何れか１項に記載の画像処理装置を備えた撮像装置。
【請求項９】
複数のカメラにより撮像された複数の画像データを処理する画像処理方法であって、
前記複数のカメラのうち曇り止め機能を施したカメラにより撮像された基準画像データを取得する基準画像取得工程と、
前記複数のカメラのうち曇り止め機能を施していないカメラにより撮像された撮像画像データを取得する撮像画像取得工程と、
前記基準画像データの画素値と前記撮像画像データの画素値とを比較することにより、前記複数のカメラのうちレンズが曇ったカメラを検出するレンズ曇り検出工程とを有することを特徴とする画像処理装置。
【請求項１０】
コンピュータを請求項１乃至７のいずれか１項に記載の画像処理装置として機能させるためのプログラム。
【請求項１】
複数のカメラにより撮像された複数の画像データを処理する画像処理装置であって、
前記複数のカメラのうち曇り止め機能を施したカメラにより撮像された基準画像データを取得する基準画像取得手段と、
前記複数のカメラのうち曇り止め機能を施していないカメラにより撮像された撮像画像データを取得する撮像画像取得手段と、
前記基準画像データの画素値と前記撮像画像データの画素値とを比較することにより、前記複数のカメラのうちレンズが曇ったカメラを検出するレンズ曇り検出手段とを有することを特徴とする画像処理装置。
【請求項２】
前記レンズ曇り検出手段により検出したレンズが曇ったカメラをユーザーに通知するレンズ曇り通知手段を更に有することを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記撮像画像取得手段により取得した撮像画像データの内、前記レンズ曇り検出手段で検出したレンズが曇ったカメラの撮像画像データが示す画像を表示装置上に表示することを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
前記レンズ曇り検出手段は、前記基準画像データが示す画像の画素値の平均画素値と前記撮像画像データが示す画像の画素値の平均画素値とを比較することにより、レンズが曇ったカメラを検出することを特徴とする請求項１乃至３の何れか１項に記載の画像処理装置。
【請求項５】
曇り止め機能を施したカメラが撮像装置の筺体の左右又及び上下方向のどちらか又は両方に対して中央付近に配置されることを特徴とする請求項１乃至４の何れか１項に記載の画像処理装置。
【請求項６】
曇り止め機能を施したカメラの鏡筒の高さが他のカメラに比べて低いことを特徴とする請求項１乃至５の何れか１項に記載の画像処理装置。
【請求項７】
曇り止め機能を施したカメラの上部にレンズ保護機構を設けたことを特徴とする請求項１乃至６の何れか１項に記載の画像処理装置。
【請求項８】
請求項１乃至７の何れか１項に記載の画像処理装置を備えた撮像装置。
【請求項９】
複数のカメラにより撮像された複数の画像データを処理する画像処理方法であって、
前記複数のカメラのうち曇り止め機能を施したカメラにより撮像された基準画像データを取得する基準画像取得工程と、
前記複数のカメラのうち曇り止め機能を施していないカメラにより撮像された撮像画像データを取得する撮像画像取得工程と、
前記基準画像データの画素値と前記撮像画像データの画素値とを比較することにより、前記複数のカメラのうちレンズが曇ったカメラを検出するレンズ曇り検出工程とを有することを特徴とする画像処理装置。
【請求項１０】
コンピュータを請求項１乃至７のいずれか１項に記載の画像処理装置として機能させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１３−４６２２１（Ｐ２０１３−４６２２１Ａ）
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願番号】特願２０１１−１８２６２３（Ｐ２０１１−１８２６２３）
【出願日】平成２３年８月２４日（２０１１．８．２４）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願日】平成２３年８月２４日（２０１１．８．２４）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]