画像撮像装置
【課題】画像データに対して復元処理を施して光学系の実効的な被写界深度を拡大する画像撮像装置において、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であり、かつ被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なえるようにする。
【解決手段】被写体５に対する本撮影に先立って予め取得された被写体５のプレ画像データを解析して被写体５が二次元記録情報であるか否かを分類し、被写体５が二次元記録情報である場合には、光学系１３（位相変調手段が一体的に構成されたレンズ）の位相変調領域および位相非変調領域の両方に光が入射するように絞り１１を制御して絞りの開度を大きくし、被写体５が非二次元記録情報である場合には、光学系１３の位相非変調領域のみに光が入射するように絞り１１を制御して絞りの開度を小さくする。
【解決手段】被写体５に対する本撮影に先立って予め取得された被写体５のプレ画像データを解析して被写体５が二次元記録情報であるか否かを分類し、被写体５が二次元記録情報である場合には、光学系１３（位相変調手段が一体的に構成されたレンズ）の位相変調領域および位相非変調領域の両方に光が入射するように絞り１１を制御して絞りの開度を大きくし、被写体５が非二次元記録情報である場合には、光学系１３の位相非変調領域のみに光が入射するように絞り１１を制御して絞りの開度を小さくする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像手段により被写体を撮像して得た画像データに対して復元処理を施して撮像手段の実効的な被写界深度を拡大する画像撮像装置に関する。
【背景技術】
【０００２】
近年、カメラ機能が携帯電話等に搭載されるようになり、カメラに対する小型化、低コスト化が強く要望されるようになってきている。カメラシステムのサイズを大きく、また高コストにしている原因の一つにオートフォーカス機構があり、このような機構を設けることでレンズ駆動手段を実装するためのスペースやコストがかかっていた。
【０００３】
一方、フォーカス機構を省いた固定焦点レンズを採用すれば低コストかつ小型化が可能となるが、フォーカス機構がないため、一般に近距離被写体に対する撮影ではピントが外れてしまうという問題があった。
【０００４】
このような問題を解決するため、フォーカス機構は持たずとも、特別に設計された光学系と画像復元処理を併用することで、通常の固定焦点光学系で撮影された場合と比較して被写界深度の拡大を可能とした画像撮像システムが提案されている（例えば、特許文献１、２）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平２００８−２６８８６９号公報
【特許文献２】特開平２００８−２４９９１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
このような画像撮像システムにおいて被写界深度の拡大を行なう場合、撮影により得られた画像データに対して光学系の点像分布関数特性（ＰＳＦ：Point Spread Function）に応じた復元処理を実施するが、一般に復元処理を行うと画像上のノイズまで強調されてしまい、画質の低下やアーティファクトの発生等の問題を生じてしまうため、被写界深度拡大処理用の光学系と通常の光学系とを切り替え可能に構成し、特に風景や人物等について十分な解像度で撮影を行なうことが可能な場合には被写界深度の拡大処理を行なわないようにすることが好ましい。
【０００７】
一方、一般に文字やバーコード等の二次元記録情報は、ノイズが多少重畳したとしてもその情報が正確に認識できることが重要であるため、二次元記録情報を撮影する際には被写界深度の拡大処理を行うようにすることが好ましい。
【０００８】
以上のことから、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であり、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能な画像撮像装置が望まれている。
【０００９】
本発明は、上記事情に鑑みてなされたものであり、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であり、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能な画像撮像装置を提供することを目的とするものである。
【課題を解決するための手段】
【００１０】
本発明の第１の画像撮像装置は、被写体を撮像して画像データを取得する撮像手段と、被写体からの光を絞って撮像手段に受光させる絞りと、被写体および撮像手段の間に配され、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段と、被写体からの光を結像して撮像手段に受光させる光学系と、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、被写体が二次元記録情報であると分類された場合に少なくとも位相変調領域に対して被写体からの光が入射するように絞りを調整し、被写体が非二次元記録情報であると分類された場合に位相非変調領域のみに被写体からの光が入射するように絞りを調整する絞り制御手段とを備えてなることを特徴とするものである。
【００１１】
本発明の第１の画像撮像装置においては、近距離撮影により得られた画像データに対して、位相変調手段の点像分布関数特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることが好ましい。
【００１２】
また、光学系が少なくとも一枚以上のレンズを備えるとともに、レンズと位相変調手段とが一体的に構成されたものとすることが好ましい。
【００１３】
本発明の第２の画像撮像装置は、被写体を撮像して画像データを取得する撮像手段と、被写体および撮像手段の間に配され、所定の波長のみを透過させるカラーフィルタと、所定の色収差特性を有し、被写体からの光を結像して撮像手段に受光させる光学系と、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、被写体が二次元記録情報であると分類された場合にカラーフィルタを光学系の光通過領域から外れた位置に移動させ、被写体が非二次元記録情報であると分類された場合にカラーフィルタを光学系の光軸上に移動させるフィルタ移動手段とを備えてなることを特徴とするものである。
【００１４】
本発明の第２の画像撮像装置においては、近距離撮影により得られた画像データ対して、光学系の色収差特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることが好ましい。
【００１５】
本発明において「二次元記録情報」とは、ノイズの重畳よりも、その情報が正確に認識できることが重要視される情報であって、手書きや印字に関わらず文字やバーコードやＱＲコード等が該当するが、これ以外の情報を二次元記録情報として設定するようにしてもよい。
【発明の効果】
【００１６】
本発明の第１の画像撮像装置によれば、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段を設けるとともに、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類し、被写体が二次元記録情報であると分類された場合に少なくとも位相変調領域に対して被写体からの光が入射するように絞りを調整し、被写体が非二次元記録情報であると分類された場合に位相非変調領域のみに被写体からの光が入射するように絞りを調整するようにしたので、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であるとともに、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能となる。
【００１７】
本発明の第１の画像撮像装置においては、近距離撮影により得られた画像データに対して、位相変調手段の点像分布関数特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることにより、画像撮像装置単体で復元処理まで実行可能なものとすることができる。
【００１８】
また、光学系が少なくとも一枚以上のレンズを備えるとともに、レンズと位相変調手段とが一体的に構成されたものとすることにより、レンズおよび位相変調手段に係る部品点数を削減できるため、構成を簡素化することが可能となる。
【００１９】
本発明の第２の画像撮像装置によれば、所定の波長のみを透過させるカラーフィルタを設けるとともに、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類し、被写体が二次元記録情報であると分類された場合にカラーフィルタを光学系の光通過領域から外れた位置に移動させ、被写体が非二次元記録情報であると分類された場合にカラーフィルタを光学系の光軸上に移動させるようにしたので、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であるとともに、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能となる。
【００２０】
本発明の第２の画像撮像装置においては、近距離撮影により得られた画像データ対して、光学系の色収差特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることにより、画像撮像装置単体で復元処理まで実行可能なものとすることができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の第１の実施の形態にかかる画像撮像装置の構成を示すブロック図
【図２】上記画像撮像装置における処理の流れを示すフローチャート
【図３】上記画像撮像装置の位相変調手段を示す図
【図４】上記画像撮像装置の位相変調手段のその他の態様を示す図
【図５】上記画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図
【図６】本発明の第２の実施の形態にかかる画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図
【発明を実施するための形態】
【００２２】
以下、本発明の実施の形態について図面を参照して詳細に説明する。図１は本発明の第１の実施の形態にかかる画像撮像装置の構成を示すブロック図、図２は上記画像撮像装置における処理の流れを示すフローチャート、図３は上記画像撮像装置の位相変調手段を示す図、図４は上記画像撮像装置の位相変調手段のその他の態様を示す図、図５は上記画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図である。
【００２３】
画像撮像装置１０は、被写体５からの光を絞って撮像手段１４に受光させる絞り１１、この絞り１１を制御して絞りの開度を調節する絞り制御部１２、被写体５から来た光を撮像素子１４上に結像するための光学系１３、結像された光学像をデジタル情報に変換する撮像素子１４、撮像素子１４から出力された信号を画像データに変換するとともに、この画像データに対して種々の画像処理を施す画像処理部１５、画像データを解析して被写体が二次元記録情報か否かを分類する画像解析部１６、画像データを表示するモニタ等の画像表示部１７、記録媒体に画像データを記録する画像記録部１８より構成される。
【００２４】
また、上記以外にも、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段を備えている。
【００２５】
光学系１３は、図３に示すように、レンズ２０と位相変調手段とが一体的に構成されており、レンズ２０が、中央部（図中領域１）は位相非変調領域としてレンズ２０の本来の光学特性を有し、周辺部（図中領域２）は位相変調領域としてレンズ２０の本来の光学特性および所定の点像分布関数特性を併せて有するものである。このような態様とすることにより、レンズおよび位相変調手段に係る部品点数を削減できるため、構成を簡素化することが可能となる。
【００２６】
なお、本発明は、上記のようにレンズ２０と位相変調手段とを一体的に構成する態様に限らず、図４に示すように、中央部は位相非変調領域であり周辺部は位相変調領域である三次位相板２１を通常のレンズと別体に設けるようにしてもよい。
【００２７】
撮像素子１４は、ＣＣＤセンサやＣＭＯＳセンサ等の固体撮像素子が好適であるが、特に限定は無く、どのようなものを用いてもよい。
【００２８】
画像解析部１６は、被写体５に対する本撮影に先立って予め取得された被写体５のプレ画像データを解析し、被写体５が文字やバーコード等の二次元記録情報であるか否かを分類するものである。ここでプレ画像データの取得は、撮像素子１４上に被写体５を投影している状態で撮像素子１４から出力される信号（スルー画像信号）に基づいて生成するようにしてもよいし、プレ画像データを取得するための専用の撮影を行なってもよい。本実施の形態においては、スルー画像信号に基づいてプレ画像データを生成するものであり、プレ画像データを生成するタイミングとしては、ユーザーが撮影指示を入力するための不図示のシャッターボタンが半押しされたタイミングで行なうものとする。また、画像データの分類手法については特に限定は無く、例えば特開２００４−３４１７６４号公報に開示される手法等、どのような手法を適用してもよい。
【００２９】
本実施の形態においては、画像中の少なくとも一部に文字やバーコード等の二次元記録情報が写っている場合にはその画像データは二次元記録情報であると分類し、画像中に文字やバーコード等の二次元記録情報が全く写っていない場合にはその画像データは非二次元記録情報であると分類する。
【００３０】
画像処理部１５は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には画像データに対して位相変調手段の点像分布関数特性に応じた復元処理を施す。ここで、復元処理の具体的内容については特に限定するものではなく、例えば空間周波数領域におけるフィルタリング処理を適用することも可能であるし、実空間におけるカーネル処理を適用することも可能である。
【００３１】
絞り制御部１２は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には、図５（ａ）に示すように、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相変調領域および位相非変調領域の両方に光が入射するように、絞り１１を制御して絞りの開度を大きくし、被写体５が非二次元記録情報である場合には、図５（ｂ）に示すように、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相非変調領域のみに光が入射するように、絞り１１を制御して絞りの開度を小さくする。
【００３２】
次に上記のように構成された画像撮像装置１０の作用について説明する。
【００３３】
図２に示すように、まず、撮像素子１４上に被写体５が投影されている状態で、不図示のシャッターボタンが半押しされた時点で撮像素子１４から出力される信号（スルー画像信号）に基づいてプレ画像データを生成する（ステップＳ１）。
【００３４】
次に、画像解析部１６において、被写体５が文字やバーコード等の二次元記録情報であるか否かを分類する（ステップＳ２）。
【００３５】
被写体５が二次元記録情報である場合には、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相変調領域および位相非変調領域の両方に光が入射するように、絞り制御部１２において絞り１１を制御して絞りの開度を大きくし（ステップＳ３）、その後ユーザーにより不図示のシャッターボタンが全押しされた時点で被写体５に対する撮影を行なう（ステップＳ４）。そして、画像処理部１５において、上記撮影により取得された画像データに対して復元処理を施し、最終的な画像データが取得される（ステップＳ５）。
【００３６】
被写体５が非二次元記録情報である場合には、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相非変調領域のみに光が入射するように、絞り制御部１２において絞り１１を制御して絞りの開度を小さくし（ステップＳ６）、その後ユーザーにより不図示のシャッターボタンが全押しされた時点で被写体５に対する撮影を行ない、このとき取得された画像データが最終的な画像データとして取得される（ステップＳ７）。
【００３７】
以上の手順により取得された最終的な画像データは、モニタ等の画像表示部１７に表示されたり、また画像記録部１８で記録メディア等に記録される。
【００３８】
上記のような構成とすることにより、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であるとともに、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能となる。
【００３９】
次に、本発明の第２の実施の形態について説明する。図６は本発明の第２の実施の形態にかかる画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図である。第１の実施の形態の要素と同等の要素には同番号を付してあり、それらについての説明は特に必要の無い限り省略する。
【００４０】
この第２の実施の形態の画像撮像装置１０は、第１の実施の形態と比較して、被写界深度拡大処理用の光学系と通常の光学系との切替えについて、カラーフィルタの有無により行うようにした点が異なるものである。
【００４１】
本実施の形態では、第１の実施の形態において位相変調手段を設ける代わりに、所定の波長のみを透過させるカラーフィルタ２２および不図示のフィルタ移動手段を設けている。
【００４２】
このフィルタ移動手段は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には、図６（ａ）に示すように、カラーフィルタを光学系１３の光通過領域から外れた位置（図６（ａ）中ではカラーフィルタは不図示）に移動させ、被写体５が非二次元記録情報である場合には、図６（ｂ）に示すように、カラーフィルタ２２を光学系１３の光軸Ｚ上に移動させることにより、合焦状態の波長（図６（ｂ）中ではλ１）のみで撮影を行なうようにする。
【００４３】
画像処理部１５は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には画像データに対して光学系１３の色収差特性に応じた復元処理を施す。ここで、復元処理の具体的内容については特に限定するものではなく、例えば空間周波数領域におけるフィルタリング処理を適用することも可能であるし、実空間におけるカーネル処理を適用することも可能である。
【００４４】
上記のような構成とした場合、非二次元記録情報に対する撮影の際には、図６（ｂ）に示すように限られた波長による撮影となるが、このような態様としても第１の実施の形態と同様の効果を得ることができる。
【００４５】
以上、本発明の画像撮像装置について詳細に説明したが、本発明は上記実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変形を行なってもよいのは勿論である。
【符号の説明】
【００４６】
５ 被写体
１０ 画像撮像装置
１１ 絞り
１２ 絞り制御部
１３ 光学系
１４ 撮像素子
１５ 画像処理部
１６ 画像解析部
１７ 画像表示部
１８ 画像記録部
２０ レンズ
２１ 三次位相板
２２ カラーフィルタ
【技術分野】
【０００１】
本発明は、撮像手段により被写体を撮像して得た画像データに対して復元処理を施して撮像手段の実効的な被写界深度を拡大する画像撮像装置に関する。
【背景技術】
【０００２】
近年、カメラ機能が携帯電話等に搭載されるようになり、カメラに対する小型化、低コスト化が強く要望されるようになってきている。カメラシステムのサイズを大きく、また高コストにしている原因の一つにオートフォーカス機構があり、このような機構を設けることでレンズ駆動手段を実装するためのスペースやコストがかかっていた。
【０００３】
一方、フォーカス機構を省いた固定焦点レンズを採用すれば低コストかつ小型化が可能となるが、フォーカス機構がないため、一般に近距離被写体に対する撮影ではピントが外れてしまうという問題があった。
【０００４】
このような問題を解決するため、フォーカス機構は持たずとも、特別に設計された光学系と画像復元処理を併用することで、通常の固定焦点光学系で撮影された場合と比較して被写界深度の拡大を可能とした画像撮像システムが提案されている（例えば、特許文献１、２）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平２００８−２６８８６９号公報
【特許文献２】特開平２００８−２４９９１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
このような画像撮像システムにおいて被写界深度の拡大を行なう場合、撮影により得られた画像データに対して光学系の点像分布関数特性（ＰＳＦ：Point Spread Function）に応じた復元処理を実施するが、一般に復元処理を行うと画像上のノイズまで強調されてしまい、画質の低下やアーティファクトの発生等の問題を生じてしまうため、被写界深度拡大処理用の光学系と通常の光学系とを切り替え可能に構成し、特に風景や人物等について十分な解像度で撮影を行なうことが可能な場合には被写界深度の拡大処理を行なわないようにすることが好ましい。
【０００７】
一方、一般に文字やバーコード等の二次元記録情報は、ノイズが多少重畳したとしてもその情報が正確に認識できることが重要であるため、二次元記録情報を撮影する際には被写界深度の拡大処理を行うようにすることが好ましい。
【０００８】
以上のことから、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であり、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能な画像撮像装置が望まれている。
【０００９】
本発明は、上記事情に鑑みてなされたものであり、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であり、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能な画像撮像装置を提供することを目的とするものである。
【課題を解決するための手段】
【００１０】
本発明の第１の画像撮像装置は、被写体を撮像して画像データを取得する撮像手段と、被写体からの光を絞って撮像手段に受光させる絞りと、被写体および撮像手段の間に配され、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段と、被写体からの光を結像して撮像手段に受光させる光学系と、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、被写体が二次元記録情報であると分類された場合に少なくとも位相変調領域に対して被写体からの光が入射するように絞りを調整し、被写体が非二次元記録情報であると分類された場合に位相非変調領域のみに被写体からの光が入射するように絞りを調整する絞り制御手段とを備えてなることを特徴とするものである。
【００１１】
本発明の第１の画像撮像装置においては、近距離撮影により得られた画像データに対して、位相変調手段の点像分布関数特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることが好ましい。
【００１２】
また、光学系が少なくとも一枚以上のレンズを備えるとともに、レンズと位相変調手段とが一体的に構成されたものとすることが好ましい。
【００１３】
本発明の第２の画像撮像装置は、被写体を撮像して画像データを取得する撮像手段と、被写体および撮像手段の間に配され、所定の波長のみを透過させるカラーフィルタと、所定の色収差特性を有し、被写体からの光を結像して撮像手段に受光させる光学系と、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、被写体が二次元記録情報であると分類された場合にカラーフィルタを光学系の光通過領域から外れた位置に移動させ、被写体が非二次元記録情報であると分類された場合にカラーフィルタを光学系の光軸上に移動させるフィルタ移動手段とを備えてなることを特徴とするものである。
【００１４】
本発明の第２の画像撮像装置においては、近距離撮影により得られた画像データ対して、光学系の色収差特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることが好ましい。
【００１５】
本発明において「二次元記録情報」とは、ノイズの重畳よりも、その情報が正確に認識できることが重要視される情報であって、手書きや印字に関わらず文字やバーコードやＱＲコード等が該当するが、これ以外の情報を二次元記録情報として設定するようにしてもよい。
【発明の効果】
【００１６】
本発明の第１の画像撮像装置によれば、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段を設けるとともに、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類し、被写体が二次元記録情報であると分類された場合に少なくとも位相変調領域に対して被写体からの光が入射するように絞りを調整し、被写体が非二次元記録情報であると分類された場合に位相非変調領域のみに被写体からの光が入射するように絞りを調整するようにしたので、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であるとともに、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能となる。
【００１７】
本発明の第１の画像撮像装置においては、近距離撮影により得られた画像データに対して、位相変調手段の点像分布関数特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることにより、画像撮像装置単体で復元処理まで実行可能なものとすることができる。
【００１８】
また、光学系が少なくとも一枚以上のレンズを備えるとともに、レンズと位相変調手段とが一体的に構成されたものとすることにより、レンズおよび位相変調手段に係る部品点数を削減できるため、構成を簡素化することが可能となる。
【００１９】
本発明の第２の画像撮像装置によれば、所定の波長のみを透過させるカラーフィルタを設けるとともに、被写体に対する本撮影に先立って撮像手段により予め取得された被写体の画像データを解析して被写体が二次元記録情報であるか非二次元記録情報であるかを分類し、被写体が二次元記録情報であると分類された場合にカラーフィルタを光学系の光通過領域から外れた位置に移動させ、被写体が非二次元記録情報であると分類された場合にカラーフィルタを光学系の光軸上に移動させるようにしたので、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であるとともに、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能となる。
【００２０】
本発明の第２の画像撮像装置においては、近距離撮影により得られた画像データ対して、光学系の色収差特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有するものとすることにより、画像撮像装置単体で復元処理まで実行可能なものとすることができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の第１の実施の形態にかかる画像撮像装置の構成を示すブロック図
【図２】上記画像撮像装置における処理の流れを示すフローチャート
【図３】上記画像撮像装置の位相変調手段を示す図
【図４】上記画像撮像装置の位相変調手段のその他の態様を示す図
【図５】上記画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図
【図６】本発明の第２の実施の形態にかかる画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図
【発明を実施するための形態】
【００２２】
以下、本発明の実施の形態について図面を参照して詳細に説明する。図１は本発明の第１の実施の形態にかかる画像撮像装置の構成を示すブロック図、図２は上記画像撮像装置における処理の流れを示すフローチャート、図３は上記画像撮像装置の位相変調手段を示す図、図４は上記画像撮像装置の位相変調手段のその他の態様を示す図、図５は上記画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図である。
【００２３】
画像撮像装置１０は、被写体５からの光を絞って撮像手段１４に受光させる絞り１１、この絞り１１を制御して絞りの開度を調節する絞り制御部１２、被写体５から来た光を撮像素子１４上に結像するための光学系１３、結像された光学像をデジタル情報に変換する撮像素子１４、撮像素子１４から出力された信号を画像データに変換するとともに、この画像データに対して種々の画像処理を施す画像処理部１５、画像データを解析して被写体が二次元記録情報か否かを分類する画像解析部１６、画像データを表示するモニタ等の画像表示部１７、記録媒体に画像データを記録する画像記録部１８より構成される。
【００２４】
また、上記以外にも、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段を備えている。
【００２５】
光学系１３は、図３に示すように、レンズ２０と位相変調手段とが一体的に構成されており、レンズ２０が、中央部（図中領域１）は位相非変調領域としてレンズ２０の本来の光学特性を有し、周辺部（図中領域２）は位相変調領域としてレンズ２０の本来の光学特性および所定の点像分布関数特性を併せて有するものである。このような態様とすることにより、レンズおよび位相変調手段に係る部品点数を削減できるため、構成を簡素化することが可能となる。
【００２６】
なお、本発明は、上記のようにレンズ２０と位相変調手段とを一体的に構成する態様に限らず、図４に示すように、中央部は位相非変調領域であり周辺部は位相変調領域である三次位相板２１を通常のレンズと別体に設けるようにしてもよい。
【００２７】
撮像素子１４は、ＣＣＤセンサやＣＭＯＳセンサ等の固体撮像素子が好適であるが、特に限定は無く、どのようなものを用いてもよい。
【００２８】
画像解析部１６は、被写体５に対する本撮影に先立って予め取得された被写体５のプレ画像データを解析し、被写体５が文字やバーコード等の二次元記録情報であるか否かを分類するものである。ここでプレ画像データの取得は、撮像素子１４上に被写体５を投影している状態で撮像素子１４から出力される信号（スルー画像信号）に基づいて生成するようにしてもよいし、プレ画像データを取得するための専用の撮影を行なってもよい。本実施の形態においては、スルー画像信号に基づいてプレ画像データを生成するものであり、プレ画像データを生成するタイミングとしては、ユーザーが撮影指示を入力するための不図示のシャッターボタンが半押しされたタイミングで行なうものとする。また、画像データの分類手法については特に限定は無く、例えば特開２００４−３４１７６４号公報に開示される手法等、どのような手法を適用してもよい。
【００２９】
本実施の形態においては、画像中の少なくとも一部に文字やバーコード等の二次元記録情報が写っている場合にはその画像データは二次元記録情報であると分類し、画像中に文字やバーコード等の二次元記録情報が全く写っていない場合にはその画像データは非二次元記録情報であると分類する。
【００３０】
画像処理部１５は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には画像データに対して位相変調手段の点像分布関数特性に応じた復元処理を施す。ここで、復元処理の具体的内容については特に限定するものではなく、例えば空間周波数領域におけるフィルタリング処理を適用することも可能であるし、実空間におけるカーネル処理を適用することも可能である。
【００３１】
絞り制御部１２は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には、図５（ａ）に示すように、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相変調領域および位相非変調領域の両方に光が入射するように、絞り１１を制御して絞りの開度を大きくし、被写体５が非二次元記録情報である場合には、図５（ｂ）に示すように、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相非変調領域のみに光が入射するように、絞り１１を制御して絞りの開度を小さくする。
【００３２】
次に上記のように構成された画像撮像装置１０の作用について説明する。
【００３３】
図２に示すように、まず、撮像素子１４上に被写体５が投影されている状態で、不図示のシャッターボタンが半押しされた時点で撮像素子１４から出力される信号（スルー画像信号）に基づいてプレ画像データを生成する（ステップＳ１）。
【００３４】
次に、画像解析部１６において、被写体５が文字やバーコード等の二次元記録情報であるか否かを分類する（ステップＳ２）。
【００３５】
被写体５が二次元記録情報である場合には、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相変調領域および位相非変調領域の両方に光が入射するように、絞り制御部１２において絞り１１を制御して絞りの開度を大きくし（ステップＳ３）、その後ユーザーにより不図示のシャッターボタンが全押しされた時点で被写体５に対する撮影を行なう（ステップＳ４）。そして、画像処理部１５において、上記撮影により取得された画像データに対して復元処理を施し、最終的な画像データが取得される（ステップＳ５）。
【００３６】
被写体５が非二次元記録情報である場合には、光学系１３（レンズと位相変調手段とが一体的に構成されたもの）の位相非変調領域のみに光が入射するように、絞り制御部１２において絞り１１を制御して絞りの開度を小さくし（ステップＳ６）、その後ユーザーにより不図示のシャッターボタンが全押しされた時点で被写体５に対する撮影を行ない、このとき取得された画像データが最終的な画像データとして取得される（ステップＳ７）。
【００３７】
以上の手順により取得された最終的な画像データは、モニタ等の画像表示部１７に表示されたり、また画像記録部１８で記録メディア等に記録される。
【００３８】
上記のような構成とすることにより、被写界深度拡大処理用の光学系と通常の光学系とが切り替え可能であるとともに、被写体として二次元記録情報を認識した場合に自動的に被写界深度拡大処理用の光学系で撮影を行なうことが可能となる。
【００３９】
次に、本発明の第２の実施の形態について説明する。図６は本発明の第２の実施の形態にかかる画像撮像装置における二次元記録情報撮影時（ａ）と非二次元記録情報撮影時（ｂ）の撮影状態を示す図である。第１の実施の形態の要素と同等の要素には同番号を付してあり、それらについての説明は特に必要の無い限り省略する。
【００４０】
この第２の実施の形態の画像撮像装置１０は、第１の実施の形態と比較して、被写界深度拡大処理用の光学系と通常の光学系との切替えについて、カラーフィルタの有無により行うようにした点が異なるものである。
【００４１】
本実施の形態では、第１の実施の形態において位相変調手段を設ける代わりに、所定の波長のみを透過させるカラーフィルタ２２および不図示のフィルタ移動手段を設けている。
【００４２】
このフィルタ移動手段は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には、図６（ａ）に示すように、カラーフィルタを光学系１３の光通過領域から外れた位置（図６（ａ）中ではカラーフィルタは不図示）に移動させ、被写体５が非二次元記録情報である場合には、図６（ｂ）に示すように、カラーフィルタ２２を光学系１３の光軸Ｚ上に移動させることにより、合焦状態の波長（図６（ｂ）中ではλ１）のみで撮影を行なうようにする。
【００４３】
画像処理部１５は、画像解析部１６の分類結果を受け取り、被写体５が二次元記録情報である場合には画像データに対して光学系１３の色収差特性に応じた復元処理を施す。ここで、復元処理の具体的内容については特に限定するものではなく、例えば空間周波数領域におけるフィルタリング処理を適用することも可能であるし、実空間におけるカーネル処理を適用することも可能である。
【００４４】
上記のような構成とした場合、非二次元記録情報に対する撮影の際には、図６（ｂ）に示すように限られた波長による撮影となるが、このような態様としても第１の実施の形態と同様の効果を得ることができる。
【００４５】
以上、本発明の画像撮像装置について詳細に説明したが、本発明は上記実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において、各種の改良や変形を行なってもよいのは勿論である。
【符号の説明】
【００４６】
５ 被写体
１０ 画像撮像装置
１１ 絞り
１２ 絞り制御部
１３ 光学系
１４ 撮像素子
１５ 画像処理部
１６ 画像解析部
１７ 画像表示部
１８ 画像記録部
２０ レンズ
２１ 三次位相板
２２ カラーフィルタ
【特許請求の範囲】
【請求項１】
被写体を撮像して画像データを取得する撮像手段と、
被写体からの光を絞って前記撮像手段に受光させる絞りと、
被写体および前記撮像手段の間に配され、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段と、
被写体からの光を結像して前記撮像手段に受光させる光学系と、
被写体に対する本撮影に先立って前記撮像手段により予め取得された前記被写体の画像データを解析して前記被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、
前記被写体が前記二次元記録情報であると分類された場合に少なくとも前記位相変調領域に対して被写体からの光が入射するように前記絞りを調整し、前記被写体が前記非二次元記録情報であると分類された場合に前記位相非変調領域のみに被写体からの光が入射するように前記絞りを調整する絞り制御手段とを備えてなることを特徴とする画像撮像装置。
【請求項２】
前記近距離撮影により得られた画像データに対して、前記点像分布関数特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有することを特徴とする請求項１記載の画像撮像装置。
【請求項３】
前記光学系が少なくとも一枚以上のレンズを備えるとともに、該レンズと前記位相変調手段とが一体的に構成されていることを特徴とする請求項１または２記載の画像撮像装置。
【請求項４】
被写体を撮像して画像データを取得する撮像手段と、
被写体および前記撮像手段の間に配され、所定の波長のみを透過させるカラーフィルタと、
所定の色収差特性を有し、被写体からの光を結像して前記撮像手段に受光させる光学系と、
被写体に対する本撮影に先立って前記撮像手段により予め取得された前記被写体の画像データを解析して前記被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、
前記被写体が前記二次元記録情報であると分類された場合に前記カラーフィルタを前記光学系の光通過領域から外れた位置に移動させ、前記被写体が前記非二次元記録情報であると分類された場合に前記カラーフィルタを前記光学系の光軸上に移動させるフィルタ移動手段とを備えてなることを特徴とする画像撮像装置。
【請求項５】
前記近距離撮影により得られた画像データ対して、前記色収差特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有することを特徴とする請求項４記載の画像撮像装置。
【請求項１】
被写体を撮像して画像データを取得する撮像手段と、
被写体からの光を絞って前記撮像手段に受光させる絞りと、
被写体および前記撮像手段の間に配され、光軸と直交する方向において、所定の点像分布関数特性となるように入射光の位相に対して変調を施す位相変調領域、および入射光の位相に対して変調を施さない位相非変調領域を有する位相変調手段と、
被写体からの光を結像して前記撮像手段に受光させる光学系と、
被写体に対する本撮影に先立って前記撮像手段により予め取得された前記被写体の画像データを解析して前記被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、
前記被写体が前記二次元記録情報であると分類された場合に少なくとも前記位相変調領域に対して被写体からの光が入射するように前記絞りを調整し、前記被写体が前記非二次元記録情報であると分類された場合に前記位相非変調領域のみに被写体からの光が入射するように前記絞りを調整する絞り制御手段とを備えてなることを特徴とする画像撮像装置。
【請求項２】
前記近距離撮影により得られた画像データに対して、前記点像分布関数特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有することを特徴とする請求項１記載の画像撮像装置。
【請求項３】
前記光学系が少なくとも一枚以上のレンズを備えるとともに、該レンズと前記位相変調手段とが一体的に構成されていることを特徴とする請求項１または２記載の画像撮像装置。
【請求項４】
被写体を撮像して画像データを取得する撮像手段と、
被写体および前記撮像手段の間に配され、所定の波長のみを透過させるカラーフィルタと、
所定の色収差特性を有し、被写体からの光を結像して前記撮像手段に受光させる光学系と、
被写体に対する本撮影に先立って前記撮像手段により予め取得された前記被写体の画像データを解析して前記被写体が二次元記録情報であるか非二次元記録情報であるかを分類する画像解析手段と、
前記被写体が前記二次元記録情報であると分類された場合に前記カラーフィルタを前記光学系の光通過領域から外れた位置に移動させ、前記被写体が前記非二次元記録情報であると分類された場合に前記カラーフィルタを前記光学系の光軸上に移動させるフィルタ移動手段とを備えてなることを特徴とする画像撮像装置。
【請求項５】
前記近距離撮影により得られた画像データ対して、前記色収差特性に応じた復元処理を行うことにより被写体の画像上での合焦状態を回復させる復元処理手段を有することを特徴とする請求項４記載の画像撮像装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２０１１−１８８４１２（Ｐ２０１１−１８８４１２Ａ）
【公開日】平成２３年９月２２日（２０１１．９．２２）
【国際特許分類】
【出願番号】特願２０１０−５４１５０（Ｐ２０１０−５４１５０）
【出願日】平成２２年３月１１日（２０１０．３．１１）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＱＲコード
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２３年９月２２日（２０１１．９．２２）
【国際特許分類】
【出願日】平成２２年３月１１日（２０１０．３．１１）
【公序良俗違反の表示】
（特許庁注：以下のものは登録商標）
１．ＱＲコード
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]