画像処理装置、画像処理方法、画像管理装置、画像管理方法、プログラム、及び画像注文票
【課題】主要部分が高画質な画像を速やかに提供することができる画像処理装置を提供すること。
【解決手段】画像処理装置は、原画像を取得する原画像取得部と、原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、原画像取得部が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、画像補正部が補正して得られた画像を出力し、特徴領域判断部が特徴的な領域が存在しない旨を判断した場合に、原画像取得部が取得した原画像を出力する画像出力部とを備える。
【解決手段】画像処理装置は、原画像を取得する原画像取得部と、原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、原画像取得部が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、画像補正部が補正して得られた画像を出力し、特徴領域判断部が特徴的な領域が存在しない旨を判断した場合に、原画像取得部が取得した原画像を出力する画像出力部とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、画像管理装置、画像管理方法、プログラム、及び画像注文票に関する。特に、本発明は、画像を処理する画像処理装置及び画像処理方法、画像を管理する画像管理装置及び画像管理方法、当該画像処理装置及び画像管理装置用のプログラム、並びに画像を注文者に注文させる画像注文票に関する。
【背景技術】
【０００２】
顧客の画像データを読み込み、当該画像データを基にしたプリントを作成するための情報を入力可能なプリント注文受付装置において、画像データを基にした画像を表示コマ部に表示させ、当該表示コマ部に表示された画像の任意の一部を拡大して拡大表示コマ部に表示し、任意の一部の拡大表示部分が表示コマ部に表示された画像のどの部分に相当するかを示す枠を表示コマ部に表示するプリント注文受付装置が知られている（例えば、特許文献１参照。）。また、光学伝達関数を焦点位置からある程度の範囲内で本質的に一定にする位相マスクが知られている（例えば、特許文献２参照。）。
【特許文献１】特開２００１−２１５６２６号公報
【特許文献２】米国特許第５７４８３７１号明細書
【発明の開示】
【発明が解決しようとする課題】
【０００３】
顧客が画像をプリント注文する場合には、綺麗にプリントすることができる画像であるか否かを顧客が注文前に判断することができることが望ましい。例えば、赤目が発生している画像、コントラストがうまく表現されていない画像等はプリントするのに適していないが、沢山のサムネイル画像からプリントする画像を選択させるインデックスプリントにおいては、小さなインデックス画像では赤目の有無、コントラストが適切に表現されているか否かを顧客が容易に見分けることが困難な場合がある。このように、少なくとも画像の主要領域が高画質であることが望ましい。また、特許文献２に記載の技術によると、位相マスクを使って撮影して焦点深度を広くしてぼけた画像を得て、ぼけを復元することで広い範囲にわたってピントが合った画像を得ることができる。しかし復元処理には強力な演算パワーが必要であり時間もかかるので、個々の撮像装置で復元処理を行うことは実用的ではない。また復元処理を施すとアーティファクトも出やすく、被写体に応じて適切な修正を施す必要があるが、インデックスプリントにおけるサムネイル画像からでは復元処理が適切か否かを顧客が判断できない場合がある。
【０００４】
そこで本発明は、上記課題を解決することができる画像処理装置、画像処理方法、画像管理装置、画像管理方法、プログラム、及び画像注文票を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明の第１の形態における画像処理装置は、原画像を取得する原画像取得部と、原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、原画像取得部が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、画像補正部が補正して得られた画像を出力し、特徴領域判断部が特徴的な領域が存在しない旨を判断した場合に、原画像取得部が取得した原画像を出力する画像出力部とを備える。
【０００６】
本発明の第２の形態における画像処理方法は、原画像を取得する原画像取得段階と、原画像取得段階において取得された原画像における特徴的な領域が存在するか否かを判断する特徴領域判断段階と、特徴領域判断段階において特徴的な領域が存在する旨が判断された場合に、原画像取得段階において取得された原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正段階と、特徴領域判断段階において特徴的な領域が存在する旨が判断された場合に、画像補正段階において補正して得られた画像を出力し、特徴領域判断段階において特徴的な領域が存在しない旨が判断された場合に、原画像取得段階において取得された原画像を出力する画像出力段階とを備える。
【０００７】
本発明の第３の形態によると、画像処理装置用のプログラムであって、画像処理装置を、原画像を取得する原画像取得部、原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、原画像取得部が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、画像補正部が補正して得られた画像を出力し、特徴領域判断部が特徴的な領域が存在しない旨を判断した場合に、原画像取得部が取得した原画像を出力する画像出力部として機能させる。
【０００８】
本発明の第４の形態における画像管理装置は、原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部と、原画像取得部が取得した原画像のデータ量を低減した低データ量画像を生成する低データ量画像生成部と、原画像取得部が取得した原画像を、当該原画像と対応づけて原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部と、画像補正部が補正して得られた画像の中の特徴的な部分を検出する特徴部分検出部と、画像補正部が補正して得られた画像の中の特徴的な部分を含む部分画像を抽出する部分画像抽出部と、部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部と、低データ量画像生成部が生成した低データ量画像とともに、部分画像拡大部が拡大した部分画像を出力する画像出力部とを備える。
【０００９】
低データ量画像生成部は、原画像取得部が取得した原画像のデータ量を低減したサムネイル画像を生成するサムネイル画像生成部を有し、画像出力部は、サムネイル画像生成部が生成したサムネイル画像とともに、部分画像拡大部が拡大した部分画像を出力してよい。部分画像抽出部が抽出する部分画像の抽出条件を予め格納する抽出条件格納部をさらに備え、特徴部分検出部は、抽出条件格納部が格納している抽出条件に一致する部分を、原画像取得部が取得した原画像の中から検出してよい。
【００１０】
原画像取得部は、複数の原画像及び複数の原画像のそれぞれを撮像した撮像装置のそれぞれの光学特性を示す情報をそれぞれ対応づけて取得し、サムネイル画像生成部は、原画像取得部が取得した複数の原画像のそれぞれのサムネイル画像を生成し、画像補正部は、原画像取得部が取得した複数の原画像のそれぞれを、当該複数の原画像のそれぞれと対応づけて原画像取得部が取得した情報が示す光学特性に基づいて補正し、特徴部分検出部は、画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を検出し、部分画像抽出部は、画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を含む部分画像を抽出し、部分画像拡大部は、部分画像抽出部が抽出した複数の部分画像を拡大し、画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれとともに、部分画像拡大部が拡大した複数の部分画像のそれぞれを出力してよい。
【００１１】
画像出力部が出力している複数のサムネイル画像に対応する原画像の印刷の注文を受け付ける印刷注文受付部をさらに備え、画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部が拡大した複数の部分画像のそれぞれが表示された注文票を表示してよい。
【００１２】
画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部が拡大した複数の部分画像のそれぞれが印刷された注文票を印刷してよい。また、画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれと、部分画像拡大部が拡大した複数の部分画像のそれぞれとが関連づけられて出力されるべく対応づけて記録媒体に出力して記録してよい。
【００１３】
特徴部分検出部は、画像補正部が補正して得られた画像の中の主要被写体を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の主要被写体を含む部分画像を抽出してよい。例えば、特徴部分検出部は、画像補正部が補正して得られた画像の中の人物を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の人物を含む部分画像を抽出してよい。また、特徴部分検出部は、画像補正部が補正して得られた画像の中の人物の顔を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の人物の顔を含む部分画像を抽出してよい。特徴部分検出部は、画像補正部が補正して得られた画像の中の人物の目を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の人物の目を含む部分画像を抽出してよい。
【００１４】
画像補正部が補正して得られた画像における輝度分布を算出する輝度分布算出部をさらに備え、特徴部分検出部は、輝度分布算出部の算出結果に基づいて、画像補正部が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分の部分画像を抽出してよい。
【００１５】
原画像取得部は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする撮像装置で撮像された原画像を、当該光学的伝達関数を示す情報に対応づけて取得し、画像補正部は、原画像取得部が取得した原画像を、原画像取得部が取得した情報が示す光学的伝達関数に基づいて補正してよい。
【００１６】
本発明の第５の形態における画像管理方法は、原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得段階と、原画像取得段階において取得された原画像のサムネイル画像を生成するサムネイル画像生成段階と、原画像取得段階において取得された原画像に、当該原画像と対応づけて原画像取得段階において取得された情報が示す光学特性に基づいて補正する画像補正段階と、画像補正段階において補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出段階と、画像補正段階において補正されて得られた画像の中の特徴的な部分を含む部分画像を抽出する部分画像抽出段階と、部分画像抽出段階において抽出された部分画像を拡大する部分画像拡大段階と、サムネイル画像生成段階において生成されたサムネイル画像とともに、部分画像拡大段階において拡大された部分画像を出力する画像出力段階とを備える。
【００１７】
本発明の第６の形態によると、画像を管理する画像管理装置用のプログラムであって、画像管理装置を、原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部、原画像取得部が取得した原画像のサムネイル画像を生成するサムネイル画像生成部、原画像取得部が取得した原画像に、当該原画像と対応づけて原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部、画像補正部によって補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出部、画像補正部によって補正されて得られた画像の中の特徴的な部分を含む部分画像を抽出する部分画像抽出部、部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部、サムネイル画像生成部が生成したサムネイル画像とともに、部分画像拡大部が拡大した部分画像を出力する画像出力部として機能させる。
【００１８】
本発明の第７の形態における画像注文票は、原画像の全体が印刷されている全体画像印刷部と、原画像を撮像した撮像装置の光学特性に基づいて原画像が補正された画像の中の特徴的な部分を含む部分画像が拡大されて印刷されている部分画像印刷部と、原画像を注文する旨が記入される全体画像注文記入部とを備える。
【００１９】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【発明の効果】
【００２０】
本発明によれば、ユーザはサムネイル画像からでは見分けにくい重要部分の画像の良し悪しを画像管理装置を用いて容易に知ることができる。
【発明を実施するための最良の形態】
【００２１】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００２２】
図１は、この発明の一実施形態に係る画像処理システム８００の利用環境の一例を示す。画像処理システム８００は、撮像装置８３０、画像表示装置８１５、画像処理装置８１０ａ及び画像処理装置８１０ｂ（以下、画像処理装置８１０と総称する。）を備える。画像処理装置８１０は、撮像装置８３０が撮像した撮像画像を通信回線８５０又は記録媒体８６０を通じて取得する。
【００２３】
画像処理装置８１０は、撮像装置８３０から取得した撮像画像に含まれる人物の顔、人物の目等の画像の特徴的な領域を検出する。画像処理装置８１０は、特徴的な領域が検出された場合には、撮像装置８３０の光学系の光学特性に基づいて特徴的な領域の画像だけ復元して、画像表示装置８１５に供給する。また、画像処理装置８１０は、特徴的な領域が検出されなかった場合には、撮像画像を画像表示装置８１５に供給する。なお、画像処理装置８１０ａは、例えばパーソナルコンピュータ等の情報処理装置であってよい。そして、画像処理装置８１０ａに接続されている画像表示装置８１５が、画像処理装置８１０ａによって特徴領域の画像が復元された復元画像を表示してよい。また、画像処理装置８１０ｂは、撮像装置８３０から画像を受け取って画像を処理して、通信回線８５０を通じて復元画像を画像表示装置８１５に提供する画像処理サーバであってもよい。
【００２４】
なお、撮像装置８３０は、後述するように、被写体からの光を一様にぼかす光学系を有しており、当該光学系を通じて被写体を撮像する。したがって、撮像装置８３０により得られた撮像画像には、ぼけた被写体像が含まれる。撮像装置８３０は撮像装置を記録媒体８６０に記録して、記録媒体８６０を介して画像処理装置８１０ａに撮像画像を提供してよい。また、撮像装置８３０は、通信回線８５０を通じて画像処理装置８１０に撮像画像を供給してもよい。なお、撮像装置８３０は、光学系の光学特性を記録媒体８６０に記録したり、撮像画像に付帯する等して、画像処理装置８１０に光学系の光学特性情報を伝達する。なお、撮像装置８３０は、撮像装置８３０を特定することができる機器ＩＤを記録媒体８６０に記録したり、撮像画像に付帯する等することによって、機器ＩＤを画像処理装置８１０に伝達してよい。この場合、画像処理装置８１０は、伝達された機器ＩＤから、機器ＩＤに対応づけられた光学特性を取得してよい。
【００２５】
以上説明した画像処理システム８００によれば、撮像画像の特徴的な領域だけ復元処理を施すので、画像全体に復元処理を施す場合に比べて速やかに復元画像を生成することができる。画像処理装置８１０から出力される復元画像は、特徴的な領域が高画質であるので、復元された領域の画像内容から被写体を容易に特定することができる。また、復元されていない領域から特徴的な領域を際立たせることができる。なお、撮像装置８３０としては、デジタルカメラ、顕微鏡、内視鏡等を例示することができる。
【００２６】
図２は、画像処理装置８１０のブロック構成の一例を示す。画像処理装置８１０は、原画像取得部９３０、特徴領域判断部９６０、特徴領域特定部９７０、画像補正部９１０、及び画像出力部９９０を有する。原画像取得部９３０は、原画像を取得する。原画像としては、被写体を撮像することにより生成された撮像画像を例示することができる。例えば、原画像取得部９３０は、撮像装置８３０により撮像された撮像画像を取得する。そして、特徴領域判断部９６０は、原画像取得部９３０が取得した原画像における特徴的な領域が存在するか否かを判断する。
【００２７】
特徴領域特定部９７０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、原画像における特徴的な領域を特定する。そして、画像補正部９１０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、原画像取得部９３０が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置８３０の光学特性に基づいて補正する。そして、画像出力部９９０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、画像補正部９１０が補正して得られた画像を出力し、特徴領域判断部９６０が特徴的な領域が存在しない旨を判断した場合に、原画像取得部９３０が取得した原画像を出力する。
【００２８】
なお、後述するように、撮像装置８３０は、光軸方向における予め定められた物体距離の範囲にわたって、物体からの光に対する光学的伝達関数が略一定な光学系を有する。この場合、画像補正部９１０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、原画像取得部９３０が取得した原画像における特徴的な領域の画像を、撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。具体的には、画像補正部９１０は、原画像における特徴的な領域の画像に、撮像装置８３０の光学系の光学的伝達関数が示す光学応答の逆フィルタを施すことによって、原画像における特徴的な領域の画像を復元する。
【００２９】
なお、原画像取得部９３０は、撮像装置８３０によって撮像された動画に含まれる複数の原画像を取得する。この場合、原画像としては、フレーム画像又はフィールド画像を例示することができる。また、この場合、特徴領域判断部９６０は、複数の原画像のそれぞれにおいて特徴的な領域が存在するか否かを判断する。そして、画像補正部９１０は、特徴領域判断部９６０によって特徴的な領域が存在する旨が判断された原画像における特徴的な領域の画像を、撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。そして、画像出力部９９０は、特徴領域判断部９６０によって特徴的な領域が存在する旨が判断された原画像が画像補正部９１０により補正された画像、及び、特徴領域判断部９６０によって特徴的な領域が存在しない旨が判断された原画像を出力する。
【００３０】
なお、特徴領域判断部９６０は、動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて特徴的な領域が存在するか否かを判断する。例えば、特徴領域判断部９６０は、動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて動くオブジェクトが存在するか否かを判断する。
【００３１】
例えば、特徴領域判断部９６０は、動きベクトルが略等しいマクロブロックを特定する。例えば、特徴領域判断部９６０は、動きベクトルの方向の差が予め定められた値より小さく、かつ、動きベクトルの大きさの差が予め定められた値より小さい動きベクトルを有するマクロブロックを、動きベクトルが略等しいマクロブロックとして特定する。そして、特徴領域判断部９６０は、略等しい動きベクトルを有するマクロブロックの密度が予め定められた値より大きい領域が存在する場合に、動くオブジェクトが存在する旨を判断する。
【００３２】
特徴領域判断部９６０が動くオブジェクトが存在する旨を判断した場合、画像補正部９１０は、特徴領域判断部９６０によって動くオブジェクトが存在する旨が判断された原画像における動くオブジェクトが存在する領域の画像を、撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。
【００３３】
また、特徴領域判断部９６０は、動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて時間的に変化する領域が存在するか否かを判断してよい。例えば、特徴領域判断部９６０は、動きベクトルの時間的な変化量が予め定められた値より大きい領域が存在するか否かを判断する。そして、特徴領域判断部９６０が時間的に変化する領域が存在する旨を判断した場合、画像補正部９１０は、当該領域の画像を撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。
【００３４】
他にも、特徴領域判断部９６０は、複数の原画像に含まれる色に基づいて、複数の原画像のそれぞれにおいて特徴的な領域が存在するか否かを判断してもよい。例えば、特徴領域判断部９６０は、予め定められた色領域に含まれる色の画素数が予め定められた値以上である領域が原画像に存在するか否かを判断してよい。
【００３５】
図３は、撮像装置８３０のブロック構成の一例を示す。なお、本ブロック構成は、撮像装置８３０の光学特性を説明することを目的としたものであり、その他の構成の細部は省略されている。撮像装置８３０は、光学系１０１０、光学系１０１０を通過した光を受光する複数の受光素子を有する受光部１０２０、及び受光部１０２０が受光した光から被写体の撮像画像を生成する画像生成部１０３０を有する。
【００３６】
光学系１０１０は、光軸方向における予め定められた物体距離の範囲にわたって、物体からの光に対する光学的伝達関数が略一定となる光学特性を有している。つまり、光学的伝達関数が物体距離にほとんど依存しない。このような光学特性は、光学系１０１０が有する収差によってもたらされている。例えば、光学系１０１０によると、光軸上のある物点からの光の結像点は、光学系１０１０の瞳面の入射高に応じて光軸上のｚ１からｚ２の範囲に広がる。このような収差を有する光学系１０１０によると、受光部１０２０がおよそｚ１からｚ２までの範囲内にあれば、物点からの光の点拡がりは、受光部１０２０の位置に対して実質的に依存しなくなる。
【００３７】
このような光学系１０１０によって、点拡がりが均一となる光軸方向の範囲が長くなると、物点までの距離によらず点像の拡がりの大きさがほぼ一定となる受光部１０２０の位置が存在し得る。このような位置に受光部１０２０を設けると、予め定められた物体距離の範囲にわたって被写体からの光に対する光学的伝達関数が略一定となり得る。なお、当該点拡がりは、受光部１０２０の画素ピッチの少なくとも２倍以上であることが望ましい。なお、点拡がりが受光部１０２０の画素ピッチの２倍以上となると、ぼけた被写体像が得られる。しかしながら、光学的伝達関数が予め定められた物体距離の範囲にわたって略一定であれば、当該距離範囲に存在する被写体の被写体像については、同一の逆フィルタによって鮮明な被写体像に復元され得る。したがって、ぼけた被写体像は、上述したように画像補正部９１０による光学伝達関数に応じた逆フィルタによる画像処理によって、鮮明な被写体像に復元され得る。
【００３８】
なお、画像生成部１０３０は、受光部１０２０が有する受光素子が受光した受光量に基づいて撮像画像を生成する。このとき、画像生成部１０３０は、エッジ強調処理等のような、画像の空間周波数特性を変換する処理は行わないことが望ましい。画像生成部１０３０によって生成された撮像画像は、記録媒体８６０に記録されて画像処理装置８１０に供給されるか、通信回線８５０を通じて画像処理装置８１０に送信される。その後、画像処理装置８１０において、上述したように画像補正部９１０による逆フィルタ等の画像処理によって被写体像が復元される。
【００３９】
図４は、画像出力部９９０から出力される出力動画の一例を示す。原画像取得部９３０は、撮像装置８３０により撮像された動画に含まれるフレーム画像１１１１−１１１６を取得する。特徴領域判断部９６０は、フレーム画像１１１１及びフレーム画像１１１２において、動くオブジェクトが存在しない旨を判断する。また、特徴領域判断部９６０は、フレーム画像１１１３−１１１６において、動くオブジェクトが存在する旨を判断する。そして、特徴領域特定部９７０は、フレーム画像１１１３−１１１６において、動画に含まれる動きベクトルに基づいて動くオブジェクトの領域１１３３、１１３４、１１３５、及び１１３６を特定する。そして、画像補正部９１０は、フレーム画像１１１３−１１１６における動くオブジェクトの領域１１３３、１１３４、１１３５、及び１１３６の画像を逆フィルタ等によって復元することによって、復元画像１１２３−１１２６を生成する。
【００４０】
そして、画像出力部９９０は、フレーム画像１１１１、フレーム画像１１１２、復元画像１１２３、復元画像１１２４、復元画像１１２５、及び復元画像１１２６が連続して再生される動画を出力する。画像補正部９１０は、動くオブジェクトの領域の画像だけ復元して復元画像１１２３、復元画像１１２４、復元画像１１２５、及び復元画像１１２６を生成すればよいので、画像全体を復元する場合に比べて復元処理にかかる時間を削減することができる。その結果、画像出力部９９０は、速やかに動画を出力することができる。また、画像出力部９９０から出力された動画は、動くオブジェクト等の特徴的な領域は高画質であるので、動画の閲覧者は特徴的な領域をじっくり観察することができる。
【００４１】
図５は、この発明の他の実施形態に係る画像管理システム１００の利用環境の一例を示す。画像管理システム１００は、撮像装置１３０、画像管理装置１１０、及び注文サーバ１２０を備える。画像管理装置１１０は、フォトショップ、コンビニエンスストア等の店舗１７０又はユーザ１９０の自宅１７１等に設けられる。画像管理装置１１０は、撮像装置１３０による撮像画像を受け取って、撮像装置１３０の光学特性に基づいて撮像画像を復元した画像に含まれる人物の顔、人物の目等の画像の特徴的な部分画像を拡大して撮像画像とともにユーザ１９０に提示して、ユーザ１９０からのプリント注文を受け付ける。画像管理装置１１０は、例えばパーソナルコンピュータ、キオスク端末等の情報端末であってよい。
【００４２】
具体的には、撮像装置１３０は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする位相マスクによって被写体を撮像して、得られた撮像画像及び撮像装置１３０を識別する装置ＩＤを記録媒体１６０ａに記録する。撮像装置１３０が有する光学系は被写体からの光を変調してぼかす光学特性を有しており、撮像装置１３０によって撮像された撮像画像はぼけを有するが、焦点深度は拡大されている。なお、撮像装置１３０は、撮像装置８３０が有する光学系１０１０と同様の光学特性を有する光学系を有してよい。そして、画像管理装置１１０は、記録媒体１６０ａから撮像画像を読み出して、サムネイル画像を生成する。また、画像管理装置１１０は、記録媒体１６０ａから読み出した撮像画像に、装置ＩＤで識別される撮像装置１３０の光学的伝達関数に対応した復元処理を施して、復元画像を生成する。そして、画像管理装置１１０は、復元画像に含まれる人物の顔、人物の目等の画像の特徴的な部分を拡大した拡大画像を、撮像画像及びサムネイル画像とともに記録媒体１６０ｂに記録する。
【００４３】
そして、ユーザ１９０による注文時においては、画像管理装置１１０は、ユーザ１９０から受け取った記録媒体１６０ｂから読み出した拡大画像を、サムネイル画像と共にディスプレイに表示する。ユーザ１９０は、サムネイル画像と共に表示された拡大画像を確認して、画像管理装置１１０にプリント注文する撮像画像を選択する。そして、画像管理装置１１０は、ユーザ１９０から選択された撮像画像を復元した復元画像を含む印刷オーダーを、通信回線１５０を介して注文サーバ１２０に送信する。そして、注文サーバ１２０は、印刷オーダーに応じて印刷機等の出力装置１８０から復元画像を印刷して、ユーザ１９０に提供する。なお、ユーザ１９０は拡大画像を見て復元処理を施すか否かまたは、復元処理の強度を画像管理装置１１０に指示してよい。そして画像管理装置１１０は、ユーザ１９０からの指示に応じた強度の復元処理を撮像画像に施して復元画像を生成してもよい。また、画像管理装置１１０は、撮像画像又は撮像画像のサムネイル画像とともに拡大画像がプリントされた画像注文票１６５を作成してユーザ１９０に提供してもよい。
【００４４】
以上説明した画像管理システム１００又は画像管理システム１００から提供される画像注文票１６５によれば、ユーザ１９０は拡大画像を確認することによって、赤目の有無、人物の表情がうまく写されているか否か、復元処理が適切か否か等、復元画像がプリントに適しているか否かを適切に判断することができる。また、注文時において画像管理装置１１０は、記録媒体１６０ａに記録されたサムネイル画像と拡大画像とをディスプレイに表示すればよいので、撮像画像自体を読み込んで表示する場合に比べて高速に注文画面を表示することができる。
【００４５】
なお、撮像装置１３０は、撮像した撮像画像とともに、画像の特徴的な部分の拡大画像を記録媒体１６０ａに記録してもよい。そして、画像管理装置１１０は、記録媒体１６０ａから読み込んだ拡大画像に復元処理を施して、撮像画像及び復元された拡大画像をディスプレイに表示してもよい。なお、出力装置１８０は画像管理装置１１０と通信可能に接続されて店舗１７０又は自宅１７１に設けられてよく、画像管理装置１１０からの印刷オーダーに応じて復元画像を印刷してユーザ１９０に提供してもよい。また、出力装置１８０は、画像管理装置１１０から画像注文票１６５の印刷データを受け取って画像注文票１６５を印刷してよい。なお、画像管理装置１１０は、記録媒体１６０に復元画像を記録して、ユーザ１９０から指定された撮像画像が復元された記録媒体１６０中の復元画像を含む印刷オーダーを、注文サーバ１２０に送信してもよい。また、画像管理装置１１０とは異なる画像復元装置が復元画像を生成してもよい。また、画像管理装置１１０は、撮像画像及び装置ＩＤを含む印刷オーダを注文サーバ１２０に送信して、印刷オーダに含まれる装置ＩＤで識別される撮像装置１３０の光学特性に応じて画像復元装置が撮像画像を復元して復元画像を生成してよい。そして、注文サーバ１２０が当該復元画像を受け取って印刷してよい。
【００４６】
図６は、画像管理装置１１０のブロック構成の一例を示す。画像管理装置１１０は、画像補正部２１０、原画像取得部２３０、特徴部分検出部２４０、輝度分布算出部２４２、抽出条件格納部２４４、部分画像抽出部２５０、部分画像拡大部２５２、低データ量画像生成部２８５、画像出力部２９０、及び印刷注文受付部２９２を備える。サムネイル画像生成部２８０は、低データ量画像生成部２８５を有する。本実施形態の画像管理装置１１０は、サムネイル画像と拡大画像を記録媒体１６０ｂに記録する装置、記録媒体１６０ｂからサムネイル画像と拡大画像を読み出して注文票を作成する装置、及び記録媒体１６０ｂからサムネイル画像と拡大画像を読み出してユーザ１９０からの注文を受け付ける装置として機能する。なお、以下の説明においては、記録媒体１６０ａ及び記録媒体１６０ｂを記録媒体１６０として総称する。
【００４７】
原画像取得部２３０は、原画像及び原画像を撮像した撮像装置１３０の光学特性を示す情報を対応づけて取得する。具体的には、原画像取得部２３０は、撮像装置１３０が撮像して記録媒体１６０に記録された撮像画像及び装置ＩＤを、記録媒体１６０から読み出して原画像として取得する。そして、低データ量画像生成部２８５は、原画像取得部２３０が取得した原画像のデータ量を低減した低データ量画像を生成する。具体的には、サムネイル画像生成部２８０は、原画像取得部２３０が取得した原画像のサムネイル画像を生成する。画像補正部２１０は、原画像取得部２３０が取得した原画像を、当該原画像と対応づけて原画像取得部２３０が取得した情報が示す光学特性に基づいて補正する。なお、原画像取得部２３０は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする撮像装置１３０で撮像された原画像を、当該光学的伝達関数を示す情報に対応づけて取得してよい。そして、画像補正部２１０は、原画像取得部２３０が取得した原画像を、原画像取得部２３０が取得した情報が示す光学的伝達関数に基づいて補正する。なお、装置ＩＤは、当該光学的伝達関数を示す情報の一例である。
【００４８】
抽出条件格納部２４４は、部分画像抽出部２５０が抽出する部分画像の抽出条件を予め格納する。例えば、抽出条件格納部２４４は、特徴的な被写体の輪郭のパターンを格納してよい。例えば、抽出条件格納部２４４は、主要被写体となるべき主要被写体のパターン（例えば、人物、人物の顔、人物の目、動物等の、形状パターン、輝度パターン、及び色パターン等）を抽出条件として格納する。他にも、抽出条件格納部２４４は、画像における中央の位置に含まれる被写体を抽出するべき旨を抽出条件として格納してよい。また、抽出条件格納部２４４は、撮像画像における輝度の度数分布において、最小輝度値又は最大輝度値を持つ画素数の基準割合を、抽出条件として格納してよい。他にも、抽出条件格納部２４４は、撮像画像において所定の周波数成分より高周波成分が含まれるべき基準割合である周波数成分の基準値を、抽出条件として格納してよい。
【００４９】
そして、特徴部分検出部２４０は、抽出条件格納部２４４が格納している抽出条件に一致する部分を、画像補正部２１０が補正して得られた画像（以下、単に復元画像と呼ぶ場合がある。）の中から検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の特徴的な部分を含む部分画像を抽出する。なお、部分画像抽出部２５０は、原画像の中の複数の部分画像を抽出してもよい。
【００５０】
そして、部分画像拡大部２５２は、部分画像抽出部２５０が抽出した部分画像を拡大する。そして、画像出力部２９０は、低データ量画像生成部２８５が生成した低データ量画像とともに、部分画像拡大部２５２が拡大した部分画像を出力する。具体的には、画像出力部２９０は、サムネイル画像生成部２８０が生成したサムネイル画像とともに、部分画像拡大部２５２が拡大した部分画像を出力する。このように、画像管理装置１１０は、復元画像の中の特徴的な部分を特徴部分検出部２４０において検出して、当該特徴的な部分を含む画像を拡大してサムネイルに対応づけてユーザ１９０に提示することができる。したがって、ユーザ１９０は、画像管理装置１１０によって撮像画像がプリントに適しているか否かを判断してからプリントを注文することができる。
【００５１】
具体的には、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された主要被写体のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の主要被写体を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の主要被写体を含む部分画像を抽出する。
【００５２】
また、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された人物のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の人物を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の人物を含む部分画像を抽出する。
【００５３】
また、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された人物の顔のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の人物の顔を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の人物の顔を含む部分画像を抽出する。
【００５４】
また、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された人物の目のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の人物の目を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の人物の目を含む部分画像を抽出する。
【００５５】
また、輝度分布算出部２４２は、画像補正部２１０が補正して得られた画像における輝度分布を算出する。そして、特徴部分検出部２４０は、輝度分布算出部２４２の算出結果に基づいて、画像補正部２１０が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分を検出する。具体的には、特徴部分検出部２４０は、輝度分布算出部２４２が算出した輝度分布において最小輝度値又は最大輝度値に含まれる画素数の割合が、抽出条件格納部２４４が格納する最小輝度値又は最大輝度値についての基準割合より大きい部分を、原画像の中の最大輝度又は最小輝度の密度が大きい部分として検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分の部分画像を抽出する。
【００５６】
なお、原画像取得部２３０は、複数の原画像及び複数の原画像のそれぞれを撮像した撮像装置のそれぞれの光学特性を示す情報をそれぞれ対応づけて取得してよい。この場合、サムネイル画像生成部２８０は、原画像取得部２３０が取得した複数の原画像のそれぞれのサムネイル画像を生成する。そして、画像補正部２１０は、原画像取得部２３０が取得した複数の原画像のそれぞれを、当該複数の原画像のそれぞれと対応づけて原画像取得部２３０が取得した情報が示す光学特性に基づいて補正する。そして、特徴部分検出部２４０は、画像補正部２１０が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を含む部分画像を抽出する。そして、部分画像拡大部２５２は、部分画像抽出部２５０が抽出した複数の部分画像を拡大する。そして、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれとともに、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれを出力する。
【００５７】
そして、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれが表示された注文票を表示する。そして、印刷注文受付部２９２は、画像出力部２９０が出力している複数のサムネイル画像に対応する復元画像の印刷の注文を受け付ける。このため、ユーザ１９０は、画像管理装置１１０のディスプレイに表示されたサムネイル画像が、赤目の有無等を確認することができない程小さくても、拡大画像から赤目の有無等を確認することができる。したがって、ユーザ１９０は、沢山の画像が表示された画像管理装置１１０の注文画面から、プリントするのに適した復元画像を容易に選択することができる。
【００５８】
なお、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれと、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれとが関連づけられて出力されるべく対応づけて記録媒体１６０に出力して記録する。具体的には、画像管理装置１１０は、記録媒体１６０に、サムネイル画像が記録されたファイル名と、当該サムネイル画像が示す復元画像についての拡大画像が記録されたファイル名との対応関係が記載された画像対応ファイルを記録媒体１６０に記録する。
【００５９】
なお、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれが印刷された画像注文票１６５を印刷する。例えば、画像出力部２９０は、当該画像注文票１６５の印刷データを出力装置１８０に送信して、出力装置１８０に画像注文票１６５を印刷させる。具体的には、画像注文票１６５の全体画像印刷部には、原画像の全体が印刷されている。また、画像注文票１６５の部分画像印刷部には、原画像を撮像した撮像装置１３０の光学特性に基づいて原画像が補正された画像（復元画像）の中の特徴的な部分を含む部分画像が拡大されて印刷されている。例えば、画像注文票１６５には、全体画像印刷部と部分画像印刷部とが並べられて印刷されている。また、画像注文票１６５には、複数の原画像の全体が印刷された複数の全体画像印刷部と、復元画像の中の特徴的な部分を含む部分画像が拡大された複数の部分画像印刷部とが並べられて印刷されていてよい。また、画像注文票１６５の全体画像注文記入部には、全体画像印刷部に隣接して設けられ、復元画像を注文する旨が記入される。
【００６０】
図７は、特徴部分検出部２４０が特徴的な部分を検出する抽出方法の一例を示す。輝度分布算出部２４２は、撮像画像３００を分割して得られる部分領域（本図の例では、３×５の１５個の部分領域）毎に、輝度分布を算出する。本図では、輝度分布算出部２４２が部分領域３１０及び３２０について算出した輝度分布３１２及び３２２が例示されている。ここでいう輝度分布とは、輝度値に対する、当該輝度値を有する画素数の分布を示す度数分布であってよい。なお、輝度値とは、色成分毎の輝度値であってもよい。
【００６１】
そして、特徴部分検出部２４０は、最小輝度値又は最大輝度値を持つ画素数の、全画素数に対する比率を算出する。そして、特徴部分検出部２４０は、算出した比率が予め定められた比率より大きい部分領域を、最大輝度又は最小輝度の密度が大きい部分として検出する。本図の例では、輝度分布３１２において最小輝度値又は最大輝度値を持つ画素数の比率は、輝度分布３２２において最小輝度値又は最大輝度値を持つ画素数の比率に比べて大きく、部分領域３１０が特徴的な部分として部分領域３２０より優先的に選択される。
【００６２】
輝度分布３１２のように度数分布の端がカットされたような形の輝度分布は、撮像装置のダイナミックレンジを超える輝度範囲の被写体が存在する場合に得られる。つまり、部分領域３１２は、コントラストが十分に表現できていない可能性が強い領域であるといえる。画像管理装置１１０は、このような領域を特徴的な領域として抽出して、拡大してユーザ１９０に提示することができるので、ユーザ１９０はコントラストが十分に表現できているか否かを確認してから復元画像を注文することができる。
【００６３】
図８は、画像出力部２９０が記録媒体１６０ｂに記録するファイルの配置例の一例を示す。画像出力部２９０は、ルートディレクトリ４００の下に、撮像画像ディレクトリ４１０、サムネイル画像ディレクトリ４２０、部分画像ディレクトリ４３０、及び画像対応ファイル４４０を配置する。画像出力部２９０は、記録媒体１６０ａから受け取った複数の撮像画像ファイル４１２を、撮像画像ディレクトリ４１０の直下に配置する。また、画像出力部２９０は、撮像画像のそれぞれのサムネイル画像である複数のサムネイル画像ファイル４２２を、サムネイル画像ディレクトリ４２０の直下に配置する。また、画像出力部２９０は、部分画像拡大部２５２が拡大して生成した部分画像ファイル４３２を、部分画像ディレクトリ４３０の直下に配置する。
【００６４】
そして、画像出力部２９０は、撮像画像ファイル４１２、サムネイル画像ファイル４２２、及び部分画像ファイル４３２の対応関係が記載された画像対応ファイル４４０をルートディレクトリの直下に記録する。具体的には、画像出力部２９０は、撮像画像ファイル４１２、サムネイル画像ファイル４２２、部分画像ファイル４３２のファイル名を互いに対応づけて画像対応ファイル４４０に記録する。なお、画像対応ファイル４４０には、撮像画像を撮像した撮像装置１３０の装置ＩＤも記録されている。なお、画像出力部２９０は、それぞれのファイルのパス名を含むファイル名を、画像対応ファイル４４０に記載する。なお、画像出力部２９０は、画像対応ファイル４４０の内容をＸＭＬ形式で記載してよい。例えば、画像出力部２９０は、撮像画像ファイル、サムネイル画像ファイル、及び部分画像ファイルである旨を示すタグのそれぞれの属性として、撮像画像ファイル４１２、サムネイル画像ファイル４２２、及び部分画像ファイル４３２のファイル名が記載された画像対応ファイル４４０を生成してよい。
【００６５】
なお、画像出力部２９０は、復元画像のプリント注文時等にユーザ１９０に提示する撮像画像又はサムネイル画像を表示する順番を示す情報、又は撮像画像又はサムネイル画像を表示する位置を示す情報を、画像対応ファイル４４０に記載してよい。これにより、画像管理装置１１０は、ルートディレクトリに配置された画像対応ファイル４４０に記載された順番又は位置で、撮像画像又はサムネイル画像を表示することができる。なお、画像出力部２９０は、プリント注文時等における撮像画像又はサムネイル画像の画面上の表示位置を規定したＨＴＭＬファイルを画像対応ファイル４４０に記録してもよい。例えば、画像出力部２９０は、注文時に表示する注文画面を規定したＨＴＭＬファイルを記録媒体１６０に記録する。これにより、ユーザ１９０は、パーソナルコンピュータ、携帯電話、ＰＤＡ等の等の端末の種類を問わず、ＷＥＢブラウザが動作する画像管理装置１１０であれば撮像画像と拡大画像とを確認することができる。なお、画像対応ファイル４４０は、当該ＨＴＭＬファイルであってもよい。
【００６６】
なお、撮像画像ファイル４１２、サムネイル画像ファイル４２２、部分画像ファイル４３２、及び画像対応ファイル４４０は、本図の例で示したディレクトリ構成に限らず、様々なディレクトリ構成で配置されてよい。なお、画像出力部２９０は、複数の種類の画像管理装置１１０の間で規定されたディレクトリ（本図の例ではルートディレクトリ４００）の直下に画像対応ファイル４４０を配置してよい。この場合、画像管理装置１１０毎に異なるディレクトリ構成で撮像画像ファイル４１２、サムネイル画像ファイル４２２、及び部分画像ファイル４３２が配置されていても、規定されたディレクトリの直下の画像対応ファイル４４０を読み込むことで各ファイルの位置を特定することができる。
【００６７】
以上説明したように、画像管理装置１１０はサムネイル画像ファイルのそれぞれと、部分画像ファイルのそれぞれとを関連づけた画像対応ファイル４４０を記録媒体１６０に記録する。したがって、画像管理装置１１０は、他の画像管理装置１１０が記録した記録媒体１６０から画像対応ファイル４４０を読み込むことによって、注文画面を速やかに表示することができる。
【００６８】
図９は、画像管理装置１１０が撮像画像の注文を受け付ける場合の注文画面５００の一例を示す。画像管理装置１１０は、１つの撮像画像をユーザ１９０に注文させる注文画像領域５９０ａ〜ｆを、注文画面５００に複数表示する。注文画像領域５９０ａ〜ｆは、全体画像表示領域５１０ａ〜ｆ、部分画像表示領域５２０ａ〜ｆ及び５３０ａ〜ｆ、印刷枚数選択ボタン５４０ａ〜ｆ、並びに注文ボタン５５０ａ〜ｆのそれぞれを表示要素として有する。なお、注文画像領域５９０ａ〜ｆが有する各表示要素の符号の末尾にそれぞれａからｆの符号を付けることにより、いずれの注文画像領域５９０ａ〜ｆの表示要素であるかを識別する。
【００６９】
画像管理装置１１０は、画像対応ファイル４４０に記載されたサムネイル画像を示すファイル名で示されるファイルを記録媒体１６０から読み込んで、全体画像表示領域５１０ａ〜ｆに表示する。そして、画像管理装置１１０は、部分画像を示すファイル名で示されるファイルを記録媒体１６０から読み込んで、全体画像表示領域５１０ａ〜ｆのそれぞれの近傍の位置の部分画像表示領域５２０ａ〜ｆ、５３０ａ〜ｆに表示する。なお、画像管理装置１１０は、記録媒体１６０から撮像画像を示すファイル名のファイルを読み込んで、全体画像表示領域５１０ａ〜ｆに表示してもよい。
【００７０】
印刷注文受付部２９２は、全体画像表示領域５１０ａ〜ｆに関連づけた位置に表示された印刷枚数選択ボタン５４０ａ〜ｆによってユーザ１９０から印刷枚数の指示を受け付けるとともに、注文ボタン５５０ａ〜ｆの押下による画像の印刷注文指示を受け付ける。そして、画像管理装置１１０は、印刷注文が指示された撮像画像ファイル４１２のファイル名、当該指示された撮像画像に関連する部分画像ファイル４３２のファイル名、及び指示された印刷枚数を対応づけて、印刷注文データとしてメモリに記憶する。そして、印刷注文受付部２９２は、注文確認ボタン５６０によって注文内容の確認が指示されると、メモリに記憶された撮像画像ファイル名で示される撮像画像ファイル４１２をスライドショーとして順次表示させるとともに、印刷枚数を同時に表示する。そして、印刷注文受付部２９２は、注文実行ボタン５７０によって印刷の注文が指示されると、メモリに記憶された撮像画像ファイル４１２の内容、撮像画像ファイル４１２を撮像した撮像装置１３０の装置ＩＤ、及びそれぞれの画像の印刷枚数を含む印刷オーダーを注文サーバ１２０に送信する。なお、ディスプレイ５００にはタッチパネル機能が備えられており、印刷注文受付部２９２は、ユーザ１９０によるタッチパネルの操作によって印刷注文及び印刷枚数の指示を受け付けてよい。
【００７１】
図１０は、画像管理装置１１０が印刷する画像注文票１６５の一例を示す。画像管理装置１１０は、１つの撮像画像をユーザ１９０に注文させる注文画像印刷領域６９０ａ〜ｉを、画像注文票１６５に複数印刷する。注文画像印刷領域６９０ａ〜ｉは、全体画像印刷部６１０（ａ〜ｉ、以下、全体画像印刷部６１０と総称する）、部分画像印刷部６２０（ａ〜ｉ、以下、部分画像印刷部６２０と総称する）及び部分画像印刷部６３０（ａ〜ｉ、以下、部分画像印刷部６３０と総称する）、並びに全体画像注文記入部６６０（ａ〜ｉ、以下、全体画像注文記入部６６０と総称する）のそれぞれを印刷要素として有する。なお、注文画像印刷領域６９０ａ〜ｉが有する各印刷要素の符号の末尾にそれぞれａからｉの符号を付けることにより、いずれの注文画像印刷領域６９０ａ〜ｉの印刷要素であるかを識別する。
【００７２】
画像管理装置１１０は、画像対応ファイル４４０に記載されたサムネイル画像を示すファイル名のファイルを記録媒体１６０から読み込んで、複数の全体画像印刷部６１０に印刷する。そして、画像管理装置１１０は、部分画像を示すファイル名のファイルを記録媒体１６０から読み込んで、全体画像印刷部６１０のそれぞれの近傍の位置の複数の部分画像印刷部６２０及び部分画像印刷部６３０に表示する。なお、画像管理装置１１０は、記録媒体１６０から撮像画像を示すファイル名のファイルを読み込んで、全体画像印刷部６１０のそれぞれに表示してもよい。また、画像管理装置１１０は、全体画像印刷部６１０の画像を注文する全体画像注文記入部６６０ａ〜ｉを、全体画像印刷部６１０ａ〜ｉに隣接して印刷する。例えば、画像管理装置１１０は、全体画像印刷部６１０に印刷された撮像画像を印刷する枚数をユーザ１９０に記入させる枠を示す全体画像注文記入部６６０を印刷する。
【００７３】
なお、部分画像印刷部６２０と部分画像印刷部６３０の大きさは異なってよい。また、部分画像印刷部６２０及び部分画像印刷部６３０は、全体画像印刷部６１０と同じ大きさであってよい。また、部分画像印刷部６２０及び部分画像印刷部６３０は、全体画像印刷部６１０より大きくてもよい。
【００７４】
図１１は、画像管理装置１１０が撮像画像の注文を受け付ける場合の注文確認画面７００の一例を示す。画像管理装置１１０は、確認画像領域７１０、部分画像表示領域７４０及び７５０、並びに注文票領域７３０を有する注文確認画面７００を表示する。具体的には、画像管理装置１１０は、印刷注文データとしてメモリに記憶されたファイル名で識別される撮像画像を、確認画像領域７１０にスライドショー形式で順次表示する。
【００７５】
このとき画像管理装置１１０は、ディスプレイ５００の片隅の注文票領域７３０に、画像注文票１６５における撮像画像のレイアウトと略同一のレイアウトでサムネイル画像を表示する。そして、画像管理装置１１０は、確認画像領域７１０に表示中の撮像画像を示すサムネイル画像を強調して表示する。例えば、画像管理装置１１０は、表示中の撮像画像を示すサムネイル画像を他のサムネイル画像より大きく表示したり、表示中の撮像画像を示すサムネイル画像の画像枠を他のサムネイル画像の画像枠より太く表示したり、明るく表示したりしてよい。このため、ユーザ１９０は、どの撮像画像を注文したかを、手元の画像注文票１６５と容易に照らし合わせて確認することができる。
【００７６】
なお、画像管理装置１１０は、メモリに記憶された印刷注文データから、確認画像領域７１０に表示中の撮像画像に対応づけられた印刷枚数を読み出して、確認画像領域７１０の近傍に表示する。また、画像管理装置１１０は、印刷注文データとして確認画像領域７１０に表示している撮像画像に対応づけられてメモリに記憶された部分画像のファイル名で示されるファイルを読み込んで、読み込んだ部分画像を部分画像表示領域７４０及び７５０に表示する。
【００７７】
図１２は、画像処理装置８１０及び画像管理装置１１０のハードウェア構成の一例を示す。画像処理装置８１０及び画像管理装置１１０は、ホスト・コントローラ１５８２により相互に接続されるＣＰＵ１５０５、ＲＡＭ１５２０、グラフィック・コントローラ１５７５、及び表示装置１５８０を有するＣＰＵ周辺部と、入出力コントローラ１５８４によりホスト・コントローラ１５８２に接続される通信インターフェイス１５３０、ハードディスクドライブ１５４０、及びＣＤ−ＲＯＭドライブ１５６０を有する入出力部と、入出力コントローラ１５８４に接続されるＲＯＭ１５１０、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０を有するレガシー入出力部とを備える。
【００７８】
ホスト・コントローラ１５８２は、ＲＡＭ１５２０と、高い転送レートでＲＡＭ１５２０をアクセスするＣＰＵ１５０５、及びグラフィック・コントローラ１５７５とを接続する。ＣＰＵ１５０５は、ＲＯＭ１５１０、及びＲＡＭ１５２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等がＲＡＭ１５２０内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置１５８０上に表示させる。これに代えて、グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。
【００７９】
入出力コントローラ１５８４は、ホスト・コントローラ１５８２と、比較的高速な入出力装置であるハードディスクドライブ１５４０、通信インターフェイス１５３０、ＣＤ−ＲＯＭドライブ１５６０を接続する。ハードディスクドライブ１５４０は、ＣＰＵ１５０５が使用するプログラム、及びデータを格納する。通信インターフェイス１５３０は、ネットワーク通信装置１５９８に接続してプログラムまたはデータを送受信する。ＣＤ−ＲＯＭドライブ１５６０は、ＣＤ−ＲＯＭ１５９５からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０、及び通信インターフェイス１５３０に提供する。
【００８０】
また、入出力コントローラ１５８４には、ＲＯＭ１５１０と、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０の比較的低速な入出力装置とが接続される。ＲＯＭ１５１０は、画像管理装置１１０及び画像管理装置１１０が起動時に実行するブート・プログラムや、画像管理装置１１０及び画像管理装置１１０のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ１５５０は、フレキシブルディスク１５９０からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０、及び通信インターフェイス１５３０に提供する。入出力チップ１５７０は、フレキシブルディスク・ドライブ１５５０や、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。
【００８１】
ＣＰＵ１５０５が実行するプログラムは、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５、またはＩＣカード等の記録媒体に格納されて利用者によって提供される。記録媒体に格納されたプログラムは圧縮されていても非圧縮であってもよい。プログラムは、記録媒体からハードディスクドライブ１５４０にインストールされ、ＲＡＭ１５２０に読み出されてＣＰＵ１５０５により実行される。
【００８２】
ＣＰＵ１５０５により実行されるプログラムは、画像処理装置８１０を、図１から図４にかけて説明した原画像取得部９３０、特徴領域判断部９６０、特徴領域特定部９７０、画像補正部９１０、及び画像出力部９９０として機能させる。また、ＣＰＵ１５０５により実行されるプログラムは、画像管理装置１１０を、図５から図１２にかけて説明した画像補正部２１０、原画像取得部２３０、特徴部分検出部２４０、輝度分布算出部２４２、抽出条件格納部２４４、部分画像抽出部２５０、部分画像拡大部２５２、低データ量画像生成部２８５、画像出力部２９０、及び印刷注文受付部２９２として機能させる。
【００８３】
以上に示したプログラムは、外部の記憶媒体に格納されてもよい。記憶媒体としては、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５の他に、ＤＶＤやＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスクまたはＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムを画像処理装置８１０及び画像管理装置１１０に提供してもよい。
【００８４】
以上、実施形態を用いて本発明を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更又は改良を加えることができる。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【図面の簡単な説明】
【００８５】
【図１】この発明の一実施形態に係る画像処理システム８００の利用環境の一例を示す図である。
【図２】画像処理装置８１０のブロック構成の一例を示す図である。
【図３】撮像装置８３０のブロック構成の一例を示す図である。
【図４】画像出力部９９０によって出力される画像の一例を示す図である。
【図５】画像管理システム１００の利用環境の一例を示す図である。
【図６】画像管理装置１１０及び撮像装置１３０のブロック構成の一例を示す図である。
【図７】撮像装置１３０が格納する撮像状況データの一例を示す図である。
【図８】画像管理装置１１０が記録する推奨条件データの一例を示す図である。
【図９】画像管理装置１１０における注文画面の一例を示す図である。
【図１０】画像管理装置１１０における画像注文票の一例を示す図である。
【図１１】画像管理装置１１０の注文確認画面の一例を示す図である。
【図１２】画像処理装置８１０及び画像管理装置１１０のハードウェア構成を示すブロック図である。
【符号の説明】
【００８６】
１００ 画像管理システム
１１０ 画像管理装置
１２０ 注文サーバ
１３０ 撮像装置
１５０ 通信回線
１６０ 記録媒体
１６５ 画像注文票
１８０ 出力装置
１９０ ユーザ
２１０ 画像補正部
２３０ 原画像取得部
２４０ 特徴部分検出部
２４２ 輝度分布算出部
２４４ 抽出条件格納部
２５０ 部分画像抽出部
２５２ 部分画像拡大部
２８０ サムネイル画像生成部
２８５ 低データ量画像生成部
２９０ 画像出力部
２９２ 印刷注文受付部
４１０ 撮像画像ディレクトリ
４２０ サムネイル画像ディレクトリ
４３０ 部分画像ディレクトリ
４４０ 画像対応ファイル
５１０ 全体画像表示領域
５２０ 部分画像表示領域
６１０ 全体画像印刷部
６２０ 部分画像印刷部
６３０ 部分画像印刷部
６６０ 全体画像注文記入部
８００ 画像処理システム
８１０ 画像処理装置
８１５ 画像表示装置
８３０ 撮像装置
８５０ 通信回線
８６０ 記録媒体
９１０ 画像補正部
９３０ 原画像取得部
９６０ 特徴領域判断部
９７０ 特徴領域特定部
９９０ 画像出力部
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法、画像管理装置、画像管理方法、プログラム、及び画像注文票に関する。特に、本発明は、画像を処理する画像処理装置及び画像処理方法、画像を管理する画像管理装置及び画像管理方法、当該画像処理装置及び画像管理装置用のプログラム、並びに画像を注文者に注文させる画像注文票に関する。
【背景技術】
【０００２】
顧客の画像データを読み込み、当該画像データを基にしたプリントを作成するための情報を入力可能なプリント注文受付装置において、画像データを基にした画像を表示コマ部に表示させ、当該表示コマ部に表示された画像の任意の一部を拡大して拡大表示コマ部に表示し、任意の一部の拡大表示部分が表示コマ部に表示された画像のどの部分に相当するかを示す枠を表示コマ部に表示するプリント注文受付装置が知られている（例えば、特許文献１参照。）。また、光学伝達関数を焦点位置からある程度の範囲内で本質的に一定にする位相マスクが知られている（例えば、特許文献２参照。）。
【特許文献１】特開２００１−２１５６２６号公報
【特許文献２】米国特許第５７４８３７１号明細書
【発明の開示】
【発明が解決しようとする課題】
【０００３】
顧客が画像をプリント注文する場合には、綺麗にプリントすることができる画像であるか否かを顧客が注文前に判断することができることが望ましい。例えば、赤目が発生している画像、コントラストがうまく表現されていない画像等はプリントするのに適していないが、沢山のサムネイル画像からプリントする画像を選択させるインデックスプリントにおいては、小さなインデックス画像では赤目の有無、コントラストが適切に表現されているか否かを顧客が容易に見分けることが困難な場合がある。このように、少なくとも画像の主要領域が高画質であることが望ましい。また、特許文献２に記載の技術によると、位相マスクを使って撮影して焦点深度を広くしてぼけた画像を得て、ぼけを復元することで広い範囲にわたってピントが合った画像を得ることができる。しかし復元処理には強力な演算パワーが必要であり時間もかかるので、個々の撮像装置で復元処理を行うことは実用的ではない。また復元処理を施すとアーティファクトも出やすく、被写体に応じて適切な修正を施す必要があるが、インデックスプリントにおけるサムネイル画像からでは復元処理が適切か否かを顧客が判断できない場合がある。
【０００４】
そこで本発明は、上記課題を解決することができる画像処理装置、画像処理方法、画像管理装置、画像管理方法、プログラム、及び画像注文票を提供することを目的とする。この目的は特許請求の範囲における独立項に記載の特徴の組み合わせにより達成される。また従属項は本発明の更なる有利な具体例を規定する。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明の第１の形態における画像処理装置は、原画像を取得する原画像取得部と、原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、原画像取得部が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部と、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、画像補正部が補正して得られた画像を出力し、特徴領域判断部が特徴的な領域が存在しない旨を判断した場合に、原画像取得部が取得した原画像を出力する画像出力部とを備える。
【０００６】
本発明の第２の形態における画像処理方法は、原画像を取得する原画像取得段階と、原画像取得段階において取得された原画像における特徴的な領域が存在するか否かを判断する特徴領域判断段階と、特徴領域判断段階において特徴的な領域が存在する旨が判断された場合に、原画像取得段階において取得された原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正段階と、特徴領域判断段階において特徴的な領域が存在する旨が判断された場合に、画像補正段階において補正して得られた画像を出力し、特徴領域判断段階において特徴的な領域が存在しない旨が判断された場合に、原画像取得段階において取得された原画像を出力する画像出力段階とを備える。
【０００７】
本発明の第３の形態によると、画像処理装置用のプログラムであって、画像処理装置を、原画像を取得する原画像取得部、原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、原画像取得部が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部、特徴領域判断部が特徴的な領域が存在する旨を判断した場合に、画像補正部が補正して得られた画像を出力し、特徴領域判断部が特徴的な領域が存在しない旨を判断した場合に、原画像取得部が取得した原画像を出力する画像出力部として機能させる。
【０００８】
本発明の第４の形態における画像管理装置は、原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部と、原画像取得部が取得した原画像のデータ量を低減した低データ量画像を生成する低データ量画像生成部と、原画像取得部が取得した原画像を、当該原画像と対応づけて原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部と、画像補正部が補正して得られた画像の中の特徴的な部分を検出する特徴部分検出部と、画像補正部が補正して得られた画像の中の特徴的な部分を含む部分画像を抽出する部分画像抽出部と、部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部と、低データ量画像生成部が生成した低データ量画像とともに、部分画像拡大部が拡大した部分画像を出力する画像出力部とを備える。
【０００９】
低データ量画像生成部は、原画像取得部が取得した原画像のデータ量を低減したサムネイル画像を生成するサムネイル画像生成部を有し、画像出力部は、サムネイル画像生成部が生成したサムネイル画像とともに、部分画像拡大部が拡大した部分画像を出力してよい。部分画像抽出部が抽出する部分画像の抽出条件を予め格納する抽出条件格納部をさらに備え、特徴部分検出部は、抽出条件格納部が格納している抽出条件に一致する部分を、原画像取得部が取得した原画像の中から検出してよい。
【００１０】
原画像取得部は、複数の原画像及び複数の原画像のそれぞれを撮像した撮像装置のそれぞれの光学特性を示す情報をそれぞれ対応づけて取得し、サムネイル画像生成部は、原画像取得部が取得した複数の原画像のそれぞれのサムネイル画像を生成し、画像補正部は、原画像取得部が取得した複数の原画像のそれぞれを、当該複数の原画像のそれぞれと対応づけて原画像取得部が取得した情報が示す光学特性に基づいて補正し、特徴部分検出部は、画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を検出し、部分画像抽出部は、画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を含む部分画像を抽出し、部分画像拡大部は、部分画像抽出部が抽出した複数の部分画像を拡大し、画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれとともに、部分画像拡大部が拡大した複数の部分画像のそれぞれを出力してよい。
【００１１】
画像出力部が出力している複数のサムネイル画像に対応する原画像の印刷の注文を受け付ける印刷注文受付部をさらに備え、画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部が拡大した複数の部分画像のそれぞれが表示された注文票を表示してよい。
【００１２】
画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部が拡大した複数の部分画像のそれぞれが印刷された注文票を印刷してよい。また、画像出力部は、サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれと、部分画像拡大部が拡大した複数の部分画像のそれぞれとが関連づけられて出力されるべく対応づけて記録媒体に出力して記録してよい。
【００１３】
特徴部分検出部は、画像補正部が補正して得られた画像の中の主要被写体を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の主要被写体を含む部分画像を抽出してよい。例えば、特徴部分検出部は、画像補正部が補正して得られた画像の中の人物を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の人物を含む部分画像を抽出してよい。また、特徴部分検出部は、画像補正部が補正して得られた画像の中の人物の顔を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の人物の顔を含む部分画像を抽出してよい。特徴部分検出部は、画像補正部が補正して得られた画像の中の人物の目を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の人物の目を含む部分画像を抽出してよい。
【００１４】
画像補正部が補正して得られた画像における輝度分布を算出する輝度分布算出部をさらに備え、特徴部分検出部は、輝度分布算出部の算出結果に基づいて、画像補正部が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分を検出し、部分画像抽出部は、画像補正部が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分の部分画像を抽出してよい。
【００１５】
原画像取得部は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする撮像装置で撮像された原画像を、当該光学的伝達関数を示す情報に対応づけて取得し、画像補正部は、原画像取得部が取得した原画像を、原画像取得部が取得した情報が示す光学的伝達関数に基づいて補正してよい。
【００１６】
本発明の第５の形態における画像管理方法は、原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得段階と、原画像取得段階において取得された原画像のサムネイル画像を生成するサムネイル画像生成段階と、原画像取得段階において取得された原画像に、当該原画像と対応づけて原画像取得段階において取得された情報が示す光学特性に基づいて補正する画像補正段階と、画像補正段階において補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出段階と、画像補正段階において補正されて得られた画像の中の特徴的な部分を含む部分画像を抽出する部分画像抽出段階と、部分画像抽出段階において抽出された部分画像を拡大する部分画像拡大段階と、サムネイル画像生成段階において生成されたサムネイル画像とともに、部分画像拡大段階において拡大された部分画像を出力する画像出力段階とを備える。
【００１７】
本発明の第６の形態によると、画像を管理する画像管理装置用のプログラムであって、画像管理装置を、原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部、原画像取得部が取得した原画像のサムネイル画像を生成するサムネイル画像生成部、原画像取得部が取得した原画像に、当該原画像と対応づけて原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部、画像補正部によって補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出部、画像補正部によって補正されて得られた画像の中の特徴的な部分を含む部分画像を抽出する部分画像抽出部、部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部、サムネイル画像生成部が生成したサムネイル画像とともに、部分画像拡大部が拡大した部分画像を出力する画像出力部として機能させる。
【００１８】
本発明の第７の形態における画像注文票は、原画像の全体が印刷されている全体画像印刷部と、原画像を撮像した撮像装置の光学特性に基づいて原画像が補正された画像の中の特徴的な部分を含む部分画像が拡大されて印刷されている部分画像印刷部と、原画像を注文する旨が記入される全体画像注文記入部とを備える。
【００１９】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではなく、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【発明の効果】
【００２０】
本発明によれば、ユーザはサムネイル画像からでは見分けにくい重要部分の画像の良し悪しを画像管理装置を用いて容易に知ることができる。
【発明を実施するための最良の形態】
【００２１】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００２２】
図１は、この発明の一実施形態に係る画像処理システム８００の利用環境の一例を示す。画像処理システム８００は、撮像装置８３０、画像表示装置８１５、画像処理装置８１０ａ及び画像処理装置８１０ｂ（以下、画像処理装置８１０と総称する。）を備える。画像処理装置８１０は、撮像装置８３０が撮像した撮像画像を通信回線８５０又は記録媒体８６０を通じて取得する。
【００２３】
画像処理装置８１０は、撮像装置８３０から取得した撮像画像に含まれる人物の顔、人物の目等の画像の特徴的な領域を検出する。画像処理装置８１０は、特徴的な領域が検出された場合には、撮像装置８３０の光学系の光学特性に基づいて特徴的な領域の画像だけ復元して、画像表示装置８１５に供給する。また、画像処理装置８１０は、特徴的な領域が検出されなかった場合には、撮像画像を画像表示装置８１５に供給する。なお、画像処理装置８１０ａは、例えばパーソナルコンピュータ等の情報処理装置であってよい。そして、画像処理装置８１０ａに接続されている画像表示装置８１５が、画像処理装置８１０ａによって特徴領域の画像が復元された復元画像を表示してよい。また、画像処理装置８１０ｂは、撮像装置８３０から画像を受け取って画像を処理して、通信回線８５０を通じて復元画像を画像表示装置８１５に提供する画像処理サーバであってもよい。
【００２４】
なお、撮像装置８３０は、後述するように、被写体からの光を一様にぼかす光学系を有しており、当該光学系を通じて被写体を撮像する。したがって、撮像装置８３０により得られた撮像画像には、ぼけた被写体像が含まれる。撮像装置８３０は撮像装置を記録媒体８６０に記録して、記録媒体８６０を介して画像処理装置８１０ａに撮像画像を提供してよい。また、撮像装置８３０は、通信回線８５０を通じて画像処理装置８１０に撮像画像を供給してもよい。なお、撮像装置８３０は、光学系の光学特性を記録媒体８６０に記録したり、撮像画像に付帯する等して、画像処理装置８１０に光学系の光学特性情報を伝達する。なお、撮像装置８３０は、撮像装置８３０を特定することができる機器ＩＤを記録媒体８６０に記録したり、撮像画像に付帯する等することによって、機器ＩＤを画像処理装置８１０に伝達してよい。この場合、画像処理装置８１０は、伝達された機器ＩＤから、機器ＩＤに対応づけられた光学特性を取得してよい。
【００２５】
以上説明した画像処理システム８００によれば、撮像画像の特徴的な領域だけ復元処理を施すので、画像全体に復元処理を施す場合に比べて速やかに復元画像を生成することができる。画像処理装置８１０から出力される復元画像は、特徴的な領域が高画質であるので、復元された領域の画像内容から被写体を容易に特定することができる。また、復元されていない領域から特徴的な領域を際立たせることができる。なお、撮像装置８３０としては、デジタルカメラ、顕微鏡、内視鏡等を例示することができる。
【００２６】
図２は、画像処理装置８１０のブロック構成の一例を示す。画像処理装置８１０は、原画像取得部９３０、特徴領域判断部９６０、特徴領域特定部９７０、画像補正部９１０、及び画像出力部９９０を有する。原画像取得部９３０は、原画像を取得する。原画像としては、被写体を撮像することにより生成された撮像画像を例示することができる。例えば、原画像取得部９３０は、撮像装置８３０により撮像された撮像画像を取得する。そして、特徴領域判断部９６０は、原画像取得部９３０が取得した原画像における特徴的な領域が存在するか否かを判断する。
【００２７】
特徴領域特定部９７０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、原画像における特徴的な領域を特定する。そして、画像補正部９１０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、原画像取得部９３０が取得した原画像における特徴的な領域の画像を、当該原画像を撮像した撮像装置８３０の光学特性に基づいて補正する。そして、画像出力部９９０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、画像補正部９１０が補正して得られた画像を出力し、特徴領域判断部９６０が特徴的な領域が存在しない旨を判断した場合に、原画像取得部９３０が取得した原画像を出力する。
【００２８】
なお、後述するように、撮像装置８３０は、光軸方向における予め定められた物体距離の範囲にわたって、物体からの光に対する光学的伝達関数が略一定な光学系を有する。この場合、画像補正部９１０は、特徴領域判断部９６０が特徴的な領域が存在する旨を判断した場合に、原画像取得部９３０が取得した原画像における特徴的な領域の画像を、撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。具体的には、画像補正部９１０は、原画像における特徴的な領域の画像に、撮像装置８３０の光学系の光学的伝達関数が示す光学応答の逆フィルタを施すことによって、原画像における特徴的な領域の画像を復元する。
【００２９】
なお、原画像取得部９３０は、撮像装置８３０によって撮像された動画に含まれる複数の原画像を取得する。この場合、原画像としては、フレーム画像又はフィールド画像を例示することができる。また、この場合、特徴領域判断部９６０は、複数の原画像のそれぞれにおいて特徴的な領域が存在するか否かを判断する。そして、画像補正部９１０は、特徴領域判断部９６０によって特徴的な領域が存在する旨が判断された原画像における特徴的な領域の画像を、撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。そして、画像出力部９９０は、特徴領域判断部９６０によって特徴的な領域が存在する旨が判断された原画像が画像補正部９１０により補正された画像、及び、特徴領域判断部９６０によって特徴的な領域が存在しない旨が判断された原画像を出力する。
【００３０】
なお、特徴領域判断部９６０は、動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて特徴的な領域が存在するか否かを判断する。例えば、特徴領域判断部９６０は、動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて動くオブジェクトが存在するか否かを判断する。
【００３１】
例えば、特徴領域判断部９６０は、動きベクトルが略等しいマクロブロックを特定する。例えば、特徴領域判断部９６０は、動きベクトルの方向の差が予め定められた値より小さく、かつ、動きベクトルの大きさの差が予め定められた値より小さい動きベクトルを有するマクロブロックを、動きベクトルが略等しいマクロブロックとして特定する。そして、特徴領域判断部９６０は、略等しい動きベクトルを有するマクロブロックの密度が予め定められた値より大きい領域が存在する場合に、動くオブジェクトが存在する旨を判断する。
【００３２】
特徴領域判断部９６０が動くオブジェクトが存在する旨を判断した場合、画像補正部９１０は、特徴領域判断部９６０によって動くオブジェクトが存在する旨が判断された原画像における動くオブジェクトが存在する領域の画像を、撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。
【００３３】
また、特徴領域判断部９６０は、動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて時間的に変化する領域が存在するか否かを判断してよい。例えば、特徴領域判断部９６０は、動きベクトルの時間的な変化量が予め定められた値より大きい領域が存在するか否かを判断する。そして、特徴領域判断部９６０が時間的に変化する領域が存在する旨を判断した場合、画像補正部９１０は、当該領域の画像を撮像装置８３０の光学系の光学的伝達関数に基づいて補正する。
【００３４】
他にも、特徴領域判断部９６０は、複数の原画像に含まれる色に基づいて、複数の原画像のそれぞれにおいて特徴的な領域が存在するか否かを判断してもよい。例えば、特徴領域判断部９６０は、予め定められた色領域に含まれる色の画素数が予め定められた値以上である領域が原画像に存在するか否かを判断してよい。
【００３５】
図３は、撮像装置８３０のブロック構成の一例を示す。なお、本ブロック構成は、撮像装置８３０の光学特性を説明することを目的としたものであり、その他の構成の細部は省略されている。撮像装置８３０は、光学系１０１０、光学系１０１０を通過した光を受光する複数の受光素子を有する受光部１０２０、及び受光部１０２０が受光した光から被写体の撮像画像を生成する画像生成部１０３０を有する。
【００３６】
光学系１０１０は、光軸方向における予め定められた物体距離の範囲にわたって、物体からの光に対する光学的伝達関数が略一定となる光学特性を有している。つまり、光学的伝達関数が物体距離にほとんど依存しない。このような光学特性は、光学系１０１０が有する収差によってもたらされている。例えば、光学系１０１０によると、光軸上のある物点からの光の結像点は、光学系１０１０の瞳面の入射高に応じて光軸上のｚ１からｚ２の範囲に広がる。このような収差を有する光学系１０１０によると、受光部１０２０がおよそｚ１からｚ２までの範囲内にあれば、物点からの光の点拡がりは、受光部１０２０の位置に対して実質的に依存しなくなる。
【００３７】
このような光学系１０１０によって、点拡がりが均一となる光軸方向の範囲が長くなると、物点までの距離によらず点像の拡がりの大きさがほぼ一定となる受光部１０２０の位置が存在し得る。このような位置に受光部１０２０を設けると、予め定められた物体距離の範囲にわたって被写体からの光に対する光学的伝達関数が略一定となり得る。なお、当該点拡がりは、受光部１０２０の画素ピッチの少なくとも２倍以上であることが望ましい。なお、点拡がりが受光部１０２０の画素ピッチの２倍以上となると、ぼけた被写体像が得られる。しかしながら、光学的伝達関数が予め定められた物体距離の範囲にわたって略一定であれば、当該距離範囲に存在する被写体の被写体像については、同一の逆フィルタによって鮮明な被写体像に復元され得る。したがって、ぼけた被写体像は、上述したように画像補正部９１０による光学伝達関数に応じた逆フィルタによる画像処理によって、鮮明な被写体像に復元され得る。
【００３８】
なお、画像生成部１０３０は、受光部１０２０が有する受光素子が受光した受光量に基づいて撮像画像を生成する。このとき、画像生成部１０３０は、エッジ強調処理等のような、画像の空間周波数特性を変換する処理は行わないことが望ましい。画像生成部１０３０によって生成された撮像画像は、記録媒体８６０に記録されて画像処理装置８１０に供給されるか、通信回線８５０を通じて画像処理装置８１０に送信される。その後、画像処理装置８１０において、上述したように画像補正部９１０による逆フィルタ等の画像処理によって被写体像が復元される。
【００３９】
図４は、画像出力部９９０から出力される出力動画の一例を示す。原画像取得部９３０は、撮像装置８３０により撮像された動画に含まれるフレーム画像１１１１−１１１６を取得する。特徴領域判断部９６０は、フレーム画像１１１１及びフレーム画像１１１２において、動くオブジェクトが存在しない旨を判断する。また、特徴領域判断部９６０は、フレーム画像１１１３−１１１６において、動くオブジェクトが存在する旨を判断する。そして、特徴領域特定部９７０は、フレーム画像１１１３−１１１６において、動画に含まれる動きベクトルに基づいて動くオブジェクトの領域１１３３、１１３４、１１３５、及び１１３６を特定する。そして、画像補正部９１０は、フレーム画像１１１３−１１１６における動くオブジェクトの領域１１３３、１１３４、１１３５、及び１１３６の画像を逆フィルタ等によって復元することによって、復元画像１１２３−１１２６を生成する。
【００４０】
そして、画像出力部９９０は、フレーム画像１１１１、フレーム画像１１１２、復元画像１１２３、復元画像１１２４、復元画像１１２５、及び復元画像１１２６が連続して再生される動画を出力する。画像補正部９１０は、動くオブジェクトの領域の画像だけ復元して復元画像１１２３、復元画像１１２４、復元画像１１２５、及び復元画像１１２６を生成すればよいので、画像全体を復元する場合に比べて復元処理にかかる時間を削減することができる。その結果、画像出力部９９０は、速やかに動画を出力することができる。また、画像出力部９９０から出力された動画は、動くオブジェクト等の特徴的な領域は高画質であるので、動画の閲覧者は特徴的な領域をじっくり観察することができる。
【００４１】
図５は、この発明の他の実施形態に係る画像管理システム１００の利用環境の一例を示す。画像管理システム１００は、撮像装置１３０、画像管理装置１１０、及び注文サーバ１２０を備える。画像管理装置１１０は、フォトショップ、コンビニエンスストア等の店舗１７０又はユーザ１９０の自宅１７１等に設けられる。画像管理装置１１０は、撮像装置１３０による撮像画像を受け取って、撮像装置１３０の光学特性に基づいて撮像画像を復元した画像に含まれる人物の顔、人物の目等の画像の特徴的な部分画像を拡大して撮像画像とともにユーザ１９０に提示して、ユーザ１９０からのプリント注文を受け付ける。画像管理装置１１０は、例えばパーソナルコンピュータ、キオスク端末等の情報端末であってよい。
【００４２】
具体的には、撮像装置１３０は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする位相マスクによって被写体を撮像して、得られた撮像画像及び撮像装置１３０を識別する装置ＩＤを記録媒体１６０ａに記録する。撮像装置１３０が有する光学系は被写体からの光を変調してぼかす光学特性を有しており、撮像装置１３０によって撮像された撮像画像はぼけを有するが、焦点深度は拡大されている。なお、撮像装置１３０は、撮像装置８３０が有する光学系１０１０と同様の光学特性を有する光学系を有してよい。そして、画像管理装置１１０は、記録媒体１６０ａから撮像画像を読み出して、サムネイル画像を生成する。また、画像管理装置１１０は、記録媒体１６０ａから読み出した撮像画像に、装置ＩＤで識別される撮像装置１３０の光学的伝達関数に対応した復元処理を施して、復元画像を生成する。そして、画像管理装置１１０は、復元画像に含まれる人物の顔、人物の目等の画像の特徴的な部分を拡大した拡大画像を、撮像画像及びサムネイル画像とともに記録媒体１６０ｂに記録する。
【００４３】
そして、ユーザ１９０による注文時においては、画像管理装置１１０は、ユーザ１９０から受け取った記録媒体１６０ｂから読み出した拡大画像を、サムネイル画像と共にディスプレイに表示する。ユーザ１９０は、サムネイル画像と共に表示された拡大画像を確認して、画像管理装置１１０にプリント注文する撮像画像を選択する。そして、画像管理装置１１０は、ユーザ１９０から選択された撮像画像を復元した復元画像を含む印刷オーダーを、通信回線１５０を介して注文サーバ１２０に送信する。そして、注文サーバ１２０は、印刷オーダーに応じて印刷機等の出力装置１８０から復元画像を印刷して、ユーザ１９０に提供する。なお、ユーザ１９０は拡大画像を見て復元処理を施すか否かまたは、復元処理の強度を画像管理装置１１０に指示してよい。そして画像管理装置１１０は、ユーザ１９０からの指示に応じた強度の復元処理を撮像画像に施して復元画像を生成してもよい。また、画像管理装置１１０は、撮像画像又は撮像画像のサムネイル画像とともに拡大画像がプリントされた画像注文票１６５を作成してユーザ１９０に提供してもよい。
【００４４】
以上説明した画像管理システム１００又は画像管理システム１００から提供される画像注文票１６５によれば、ユーザ１９０は拡大画像を確認することによって、赤目の有無、人物の表情がうまく写されているか否か、復元処理が適切か否か等、復元画像がプリントに適しているか否かを適切に判断することができる。また、注文時において画像管理装置１１０は、記録媒体１６０ａに記録されたサムネイル画像と拡大画像とをディスプレイに表示すればよいので、撮像画像自体を読み込んで表示する場合に比べて高速に注文画面を表示することができる。
【００４５】
なお、撮像装置１３０は、撮像した撮像画像とともに、画像の特徴的な部分の拡大画像を記録媒体１６０ａに記録してもよい。そして、画像管理装置１１０は、記録媒体１６０ａから読み込んだ拡大画像に復元処理を施して、撮像画像及び復元された拡大画像をディスプレイに表示してもよい。なお、出力装置１８０は画像管理装置１１０と通信可能に接続されて店舗１７０又は自宅１７１に設けられてよく、画像管理装置１１０からの印刷オーダーに応じて復元画像を印刷してユーザ１９０に提供してもよい。また、出力装置１８０は、画像管理装置１１０から画像注文票１６５の印刷データを受け取って画像注文票１６５を印刷してよい。なお、画像管理装置１１０は、記録媒体１６０に復元画像を記録して、ユーザ１９０から指定された撮像画像が復元された記録媒体１６０中の復元画像を含む印刷オーダーを、注文サーバ１２０に送信してもよい。また、画像管理装置１１０とは異なる画像復元装置が復元画像を生成してもよい。また、画像管理装置１１０は、撮像画像及び装置ＩＤを含む印刷オーダを注文サーバ１２０に送信して、印刷オーダに含まれる装置ＩＤで識別される撮像装置１３０の光学特性に応じて画像復元装置が撮像画像を復元して復元画像を生成してよい。そして、注文サーバ１２０が当該復元画像を受け取って印刷してよい。
【００４６】
図６は、画像管理装置１１０のブロック構成の一例を示す。画像管理装置１１０は、画像補正部２１０、原画像取得部２３０、特徴部分検出部２４０、輝度分布算出部２４２、抽出条件格納部２４４、部分画像抽出部２５０、部分画像拡大部２５２、低データ量画像生成部２８５、画像出力部２９０、及び印刷注文受付部２９２を備える。サムネイル画像生成部２８０は、低データ量画像生成部２８５を有する。本実施形態の画像管理装置１１０は、サムネイル画像と拡大画像を記録媒体１６０ｂに記録する装置、記録媒体１６０ｂからサムネイル画像と拡大画像を読み出して注文票を作成する装置、及び記録媒体１６０ｂからサムネイル画像と拡大画像を読み出してユーザ１９０からの注文を受け付ける装置として機能する。なお、以下の説明においては、記録媒体１６０ａ及び記録媒体１６０ｂを記録媒体１６０として総称する。
【００４７】
原画像取得部２３０は、原画像及び原画像を撮像した撮像装置１３０の光学特性を示す情報を対応づけて取得する。具体的には、原画像取得部２３０は、撮像装置１３０が撮像して記録媒体１６０に記録された撮像画像及び装置ＩＤを、記録媒体１６０から読み出して原画像として取得する。そして、低データ量画像生成部２８５は、原画像取得部２３０が取得した原画像のデータ量を低減した低データ量画像を生成する。具体的には、サムネイル画像生成部２８０は、原画像取得部２３０が取得した原画像のサムネイル画像を生成する。画像補正部２１０は、原画像取得部２３０が取得した原画像を、当該原画像と対応づけて原画像取得部２３０が取得した情報が示す光学特性に基づいて補正する。なお、原画像取得部２３０は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする撮像装置１３０で撮像された原画像を、当該光学的伝達関数を示す情報に対応づけて取得してよい。そして、画像補正部２１０は、原画像取得部２３０が取得した原画像を、原画像取得部２３０が取得した情報が示す光学的伝達関数に基づいて補正する。なお、装置ＩＤは、当該光学的伝達関数を示す情報の一例である。
【００４８】
抽出条件格納部２４４は、部分画像抽出部２５０が抽出する部分画像の抽出条件を予め格納する。例えば、抽出条件格納部２４４は、特徴的な被写体の輪郭のパターンを格納してよい。例えば、抽出条件格納部２４４は、主要被写体となるべき主要被写体のパターン（例えば、人物、人物の顔、人物の目、動物等の、形状パターン、輝度パターン、及び色パターン等）を抽出条件として格納する。他にも、抽出条件格納部２４４は、画像における中央の位置に含まれる被写体を抽出するべき旨を抽出条件として格納してよい。また、抽出条件格納部２４４は、撮像画像における輝度の度数分布において、最小輝度値又は最大輝度値を持つ画素数の基準割合を、抽出条件として格納してよい。他にも、抽出条件格納部２４４は、撮像画像において所定の周波数成分より高周波成分が含まれるべき基準割合である周波数成分の基準値を、抽出条件として格納してよい。
【００４９】
そして、特徴部分検出部２４０は、抽出条件格納部２４４が格納している抽出条件に一致する部分を、画像補正部２１０が補正して得られた画像（以下、単に復元画像と呼ぶ場合がある。）の中から検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の特徴的な部分を含む部分画像を抽出する。なお、部分画像抽出部２５０は、原画像の中の複数の部分画像を抽出してもよい。
【００５０】
そして、部分画像拡大部２５２は、部分画像抽出部２５０が抽出した部分画像を拡大する。そして、画像出力部２９０は、低データ量画像生成部２８５が生成した低データ量画像とともに、部分画像拡大部２５２が拡大した部分画像を出力する。具体的には、画像出力部２９０は、サムネイル画像生成部２８０が生成したサムネイル画像とともに、部分画像拡大部２５２が拡大した部分画像を出力する。このように、画像管理装置１１０は、復元画像の中の特徴的な部分を特徴部分検出部２４０において検出して、当該特徴的な部分を含む画像を拡大してサムネイルに対応づけてユーザ１９０に提示することができる。したがって、ユーザ１９０は、画像管理装置１１０によって撮像画像がプリントに適しているか否かを判断してからプリントを注文することができる。
【００５１】
具体的には、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された主要被写体のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の主要被写体を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の主要被写体を含む部分画像を抽出する。
【００５２】
また、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された人物のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の人物を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の人物を含む部分画像を抽出する。
【００５３】
また、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された人物の顔のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の人物の顔を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の人物の顔を含む部分画像を抽出する。
【００５４】
また、特徴部分検出部２４０は、復元画像に含まれる被写体の輪郭と、抽出条件格納部２４４に格納された人物の目のパターンとのパターンマッチング等により、画像補正部２１０が補正して得られた画像の中の人物の目を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の人物の目を含む部分画像を抽出する。
【００５５】
また、輝度分布算出部２４２は、画像補正部２１０が補正して得られた画像における輝度分布を算出する。そして、特徴部分検出部２４０は、輝度分布算出部２４２の算出結果に基づいて、画像補正部２１０が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分を検出する。具体的には、特徴部分検出部２４０は、輝度分布算出部２４２が算出した輝度分布において最小輝度値又は最大輝度値に含まれる画素数の割合が、抽出条件格納部２４４が格納する最小輝度値又は最大輝度値についての基準割合より大きい部分を、原画像の中の最大輝度又は最小輝度の密度が大きい部分として検出する。そして、部分画像抽出部２５０は、画像補正部２１０が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分の部分画像を抽出する。
【００５６】
なお、原画像取得部２３０は、複数の原画像及び複数の原画像のそれぞれを撮像した撮像装置のそれぞれの光学特性を示す情報をそれぞれ対応づけて取得してよい。この場合、サムネイル画像生成部２８０は、原画像取得部２３０が取得した複数の原画像のそれぞれのサムネイル画像を生成する。そして、画像補正部２１０は、原画像取得部２３０が取得した複数の原画像のそれぞれを、当該複数の原画像のそれぞれと対応づけて原画像取得部２３０が取得した情報が示す光学特性に基づいて補正する。そして、特徴部分検出部２４０は、画像補正部２１０が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を検出する。そして、部分画像抽出部２５０は、画像補正部２１０が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を含む部分画像を抽出する。そして、部分画像拡大部２５２は、部分画像抽出部２５０が抽出した複数の部分画像を拡大する。そして、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれとともに、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれを出力する。
【００５７】
そして、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれが表示された注文票を表示する。そして、印刷注文受付部２９２は、画像出力部２９０が出力している複数のサムネイル画像に対応する復元画像の印刷の注文を受け付ける。このため、ユーザ１９０は、画像管理装置１１０のディスプレイに表示されたサムネイル画像が、赤目の有無等を確認することができない程小さくても、拡大画像から赤目の有無等を確認することができる。したがって、ユーザ１９０は、沢山の画像が表示された画像管理装置１１０の注文画面から、プリントするのに適した復元画像を容易に選択することができる。
【００５８】
なお、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれと、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれとが関連づけられて出力されるべく対応づけて記録媒体１６０に出力して記録する。具体的には、画像管理装置１１０は、記録媒体１６０に、サムネイル画像が記録されたファイル名と、当該サムネイル画像が示す復元画像についての拡大画像が記録されたファイル名との対応関係が記載された画像対応ファイルを記録媒体１６０に記録する。
【００５９】
なお、画像出力部２９０は、サムネイル画像生成部２８０が生成した複数のサムネイル画像のそれぞれの付近に、部分画像拡大部２５２が拡大した複数の部分画像のそれぞれが印刷された画像注文票１６５を印刷する。例えば、画像出力部２９０は、当該画像注文票１６５の印刷データを出力装置１８０に送信して、出力装置１８０に画像注文票１６５を印刷させる。具体的には、画像注文票１６５の全体画像印刷部には、原画像の全体が印刷されている。また、画像注文票１６５の部分画像印刷部には、原画像を撮像した撮像装置１３０の光学特性に基づいて原画像が補正された画像（復元画像）の中の特徴的な部分を含む部分画像が拡大されて印刷されている。例えば、画像注文票１６５には、全体画像印刷部と部分画像印刷部とが並べられて印刷されている。また、画像注文票１６５には、複数の原画像の全体が印刷された複数の全体画像印刷部と、復元画像の中の特徴的な部分を含む部分画像が拡大された複数の部分画像印刷部とが並べられて印刷されていてよい。また、画像注文票１６５の全体画像注文記入部には、全体画像印刷部に隣接して設けられ、復元画像を注文する旨が記入される。
【００６０】
図７は、特徴部分検出部２４０が特徴的な部分を検出する抽出方法の一例を示す。輝度分布算出部２４２は、撮像画像３００を分割して得られる部分領域（本図の例では、３×５の１５個の部分領域）毎に、輝度分布を算出する。本図では、輝度分布算出部２４２が部分領域３１０及び３２０について算出した輝度分布３１２及び３２２が例示されている。ここでいう輝度分布とは、輝度値に対する、当該輝度値を有する画素数の分布を示す度数分布であってよい。なお、輝度値とは、色成分毎の輝度値であってもよい。
【００６１】
そして、特徴部分検出部２４０は、最小輝度値又は最大輝度値を持つ画素数の、全画素数に対する比率を算出する。そして、特徴部分検出部２４０は、算出した比率が予め定められた比率より大きい部分領域を、最大輝度又は最小輝度の密度が大きい部分として検出する。本図の例では、輝度分布３１２において最小輝度値又は最大輝度値を持つ画素数の比率は、輝度分布３２２において最小輝度値又は最大輝度値を持つ画素数の比率に比べて大きく、部分領域３１０が特徴的な部分として部分領域３２０より優先的に選択される。
【００６２】
輝度分布３１２のように度数分布の端がカットされたような形の輝度分布は、撮像装置のダイナミックレンジを超える輝度範囲の被写体が存在する場合に得られる。つまり、部分領域３１２は、コントラストが十分に表現できていない可能性が強い領域であるといえる。画像管理装置１１０は、このような領域を特徴的な領域として抽出して、拡大してユーザ１９０に提示することができるので、ユーザ１９０はコントラストが十分に表現できているか否かを確認してから復元画像を注文することができる。
【００６３】
図８は、画像出力部２９０が記録媒体１６０ｂに記録するファイルの配置例の一例を示す。画像出力部２９０は、ルートディレクトリ４００の下に、撮像画像ディレクトリ４１０、サムネイル画像ディレクトリ４２０、部分画像ディレクトリ４３０、及び画像対応ファイル４４０を配置する。画像出力部２９０は、記録媒体１６０ａから受け取った複数の撮像画像ファイル４１２を、撮像画像ディレクトリ４１０の直下に配置する。また、画像出力部２９０は、撮像画像のそれぞれのサムネイル画像である複数のサムネイル画像ファイル４２２を、サムネイル画像ディレクトリ４２０の直下に配置する。また、画像出力部２９０は、部分画像拡大部２５２が拡大して生成した部分画像ファイル４３２を、部分画像ディレクトリ４３０の直下に配置する。
【００６４】
そして、画像出力部２９０は、撮像画像ファイル４１２、サムネイル画像ファイル４２２、及び部分画像ファイル４３２の対応関係が記載された画像対応ファイル４４０をルートディレクトリの直下に記録する。具体的には、画像出力部２９０は、撮像画像ファイル４１２、サムネイル画像ファイル４２２、部分画像ファイル４３２のファイル名を互いに対応づけて画像対応ファイル４４０に記録する。なお、画像対応ファイル４４０には、撮像画像を撮像した撮像装置１３０の装置ＩＤも記録されている。なお、画像出力部２９０は、それぞれのファイルのパス名を含むファイル名を、画像対応ファイル４４０に記載する。なお、画像出力部２９０は、画像対応ファイル４４０の内容をＸＭＬ形式で記載してよい。例えば、画像出力部２９０は、撮像画像ファイル、サムネイル画像ファイル、及び部分画像ファイルである旨を示すタグのそれぞれの属性として、撮像画像ファイル４１２、サムネイル画像ファイル４２２、及び部分画像ファイル４３２のファイル名が記載された画像対応ファイル４４０を生成してよい。
【００６５】
なお、画像出力部２９０は、復元画像のプリント注文時等にユーザ１９０に提示する撮像画像又はサムネイル画像を表示する順番を示す情報、又は撮像画像又はサムネイル画像を表示する位置を示す情報を、画像対応ファイル４４０に記載してよい。これにより、画像管理装置１１０は、ルートディレクトリに配置された画像対応ファイル４４０に記載された順番又は位置で、撮像画像又はサムネイル画像を表示することができる。なお、画像出力部２９０は、プリント注文時等における撮像画像又はサムネイル画像の画面上の表示位置を規定したＨＴＭＬファイルを画像対応ファイル４４０に記録してもよい。例えば、画像出力部２９０は、注文時に表示する注文画面を規定したＨＴＭＬファイルを記録媒体１６０に記録する。これにより、ユーザ１９０は、パーソナルコンピュータ、携帯電話、ＰＤＡ等の等の端末の種類を問わず、ＷＥＢブラウザが動作する画像管理装置１１０であれば撮像画像と拡大画像とを確認することができる。なお、画像対応ファイル４４０は、当該ＨＴＭＬファイルであってもよい。
【００６６】
なお、撮像画像ファイル４１２、サムネイル画像ファイル４２２、部分画像ファイル４３２、及び画像対応ファイル４４０は、本図の例で示したディレクトリ構成に限らず、様々なディレクトリ構成で配置されてよい。なお、画像出力部２９０は、複数の種類の画像管理装置１１０の間で規定されたディレクトリ（本図の例ではルートディレクトリ４００）の直下に画像対応ファイル４４０を配置してよい。この場合、画像管理装置１１０毎に異なるディレクトリ構成で撮像画像ファイル４１２、サムネイル画像ファイル４２２、及び部分画像ファイル４３２が配置されていても、規定されたディレクトリの直下の画像対応ファイル４４０を読み込むことで各ファイルの位置を特定することができる。
【００６７】
以上説明したように、画像管理装置１１０はサムネイル画像ファイルのそれぞれと、部分画像ファイルのそれぞれとを関連づけた画像対応ファイル４４０を記録媒体１６０に記録する。したがって、画像管理装置１１０は、他の画像管理装置１１０が記録した記録媒体１６０から画像対応ファイル４４０を読み込むことによって、注文画面を速やかに表示することができる。
【００６８】
図９は、画像管理装置１１０が撮像画像の注文を受け付ける場合の注文画面５００の一例を示す。画像管理装置１１０は、１つの撮像画像をユーザ１９０に注文させる注文画像領域５９０ａ〜ｆを、注文画面５００に複数表示する。注文画像領域５９０ａ〜ｆは、全体画像表示領域５１０ａ〜ｆ、部分画像表示領域５２０ａ〜ｆ及び５３０ａ〜ｆ、印刷枚数選択ボタン５４０ａ〜ｆ、並びに注文ボタン５５０ａ〜ｆのそれぞれを表示要素として有する。なお、注文画像領域５９０ａ〜ｆが有する各表示要素の符号の末尾にそれぞれａからｆの符号を付けることにより、いずれの注文画像領域５９０ａ〜ｆの表示要素であるかを識別する。
【００６９】
画像管理装置１１０は、画像対応ファイル４４０に記載されたサムネイル画像を示すファイル名で示されるファイルを記録媒体１６０から読み込んで、全体画像表示領域５１０ａ〜ｆに表示する。そして、画像管理装置１１０は、部分画像を示すファイル名で示されるファイルを記録媒体１６０から読み込んで、全体画像表示領域５１０ａ〜ｆのそれぞれの近傍の位置の部分画像表示領域５２０ａ〜ｆ、５３０ａ〜ｆに表示する。なお、画像管理装置１１０は、記録媒体１６０から撮像画像を示すファイル名のファイルを読み込んで、全体画像表示領域５１０ａ〜ｆに表示してもよい。
【００７０】
印刷注文受付部２９２は、全体画像表示領域５１０ａ〜ｆに関連づけた位置に表示された印刷枚数選択ボタン５４０ａ〜ｆによってユーザ１９０から印刷枚数の指示を受け付けるとともに、注文ボタン５５０ａ〜ｆの押下による画像の印刷注文指示を受け付ける。そして、画像管理装置１１０は、印刷注文が指示された撮像画像ファイル４１２のファイル名、当該指示された撮像画像に関連する部分画像ファイル４３２のファイル名、及び指示された印刷枚数を対応づけて、印刷注文データとしてメモリに記憶する。そして、印刷注文受付部２９２は、注文確認ボタン５６０によって注文内容の確認が指示されると、メモリに記憶された撮像画像ファイル名で示される撮像画像ファイル４１２をスライドショーとして順次表示させるとともに、印刷枚数を同時に表示する。そして、印刷注文受付部２９２は、注文実行ボタン５７０によって印刷の注文が指示されると、メモリに記憶された撮像画像ファイル４１２の内容、撮像画像ファイル４１２を撮像した撮像装置１３０の装置ＩＤ、及びそれぞれの画像の印刷枚数を含む印刷オーダーを注文サーバ１２０に送信する。なお、ディスプレイ５００にはタッチパネル機能が備えられており、印刷注文受付部２９２は、ユーザ１９０によるタッチパネルの操作によって印刷注文及び印刷枚数の指示を受け付けてよい。
【００７１】
図１０は、画像管理装置１１０が印刷する画像注文票１６５の一例を示す。画像管理装置１１０は、１つの撮像画像をユーザ１９０に注文させる注文画像印刷領域６９０ａ〜ｉを、画像注文票１６５に複数印刷する。注文画像印刷領域６９０ａ〜ｉは、全体画像印刷部６１０（ａ〜ｉ、以下、全体画像印刷部６１０と総称する）、部分画像印刷部６２０（ａ〜ｉ、以下、部分画像印刷部６２０と総称する）及び部分画像印刷部６３０（ａ〜ｉ、以下、部分画像印刷部６３０と総称する）、並びに全体画像注文記入部６６０（ａ〜ｉ、以下、全体画像注文記入部６６０と総称する）のそれぞれを印刷要素として有する。なお、注文画像印刷領域６９０ａ〜ｉが有する各印刷要素の符号の末尾にそれぞれａからｉの符号を付けることにより、いずれの注文画像印刷領域６９０ａ〜ｉの印刷要素であるかを識別する。
【００７２】
画像管理装置１１０は、画像対応ファイル４４０に記載されたサムネイル画像を示すファイル名のファイルを記録媒体１６０から読み込んで、複数の全体画像印刷部６１０に印刷する。そして、画像管理装置１１０は、部分画像を示すファイル名のファイルを記録媒体１６０から読み込んで、全体画像印刷部６１０のそれぞれの近傍の位置の複数の部分画像印刷部６２０及び部分画像印刷部６３０に表示する。なお、画像管理装置１１０は、記録媒体１６０から撮像画像を示すファイル名のファイルを読み込んで、全体画像印刷部６１０のそれぞれに表示してもよい。また、画像管理装置１１０は、全体画像印刷部６１０の画像を注文する全体画像注文記入部６６０ａ〜ｉを、全体画像印刷部６１０ａ〜ｉに隣接して印刷する。例えば、画像管理装置１１０は、全体画像印刷部６１０に印刷された撮像画像を印刷する枚数をユーザ１９０に記入させる枠を示す全体画像注文記入部６６０を印刷する。
【００７３】
なお、部分画像印刷部６２０と部分画像印刷部６３０の大きさは異なってよい。また、部分画像印刷部６２０及び部分画像印刷部６３０は、全体画像印刷部６１０と同じ大きさであってよい。また、部分画像印刷部６２０及び部分画像印刷部６３０は、全体画像印刷部６１０より大きくてもよい。
【００７４】
図１１は、画像管理装置１１０が撮像画像の注文を受け付ける場合の注文確認画面７００の一例を示す。画像管理装置１１０は、確認画像領域７１０、部分画像表示領域７４０及び７５０、並びに注文票領域７３０を有する注文確認画面７００を表示する。具体的には、画像管理装置１１０は、印刷注文データとしてメモリに記憶されたファイル名で識別される撮像画像を、確認画像領域７１０にスライドショー形式で順次表示する。
【００７５】
このとき画像管理装置１１０は、ディスプレイ５００の片隅の注文票領域７３０に、画像注文票１６５における撮像画像のレイアウトと略同一のレイアウトでサムネイル画像を表示する。そして、画像管理装置１１０は、確認画像領域７１０に表示中の撮像画像を示すサムネイル画像を強調して表示する。例えば、画像管理装置１１０は、表示中の撮像画像を示すサムネイル画像を他のサムネイル画像より大きく表示したり、表示中の撮像画像を示すサムネイル画像の画像枠を他のサムネイル画像の画像枠より太く表示したり、明るく表示したりしてよい。このため、ユーザ１９０は、どの撮像画像を注文したかを、手元の画像注文票１６５と容易に照らし合わせて確認することができる。
【００７６】
なお、画像管理装置１１０は、メモリに記憶された印刷注文データから、確認画像領域７１０に表示中の撮像画像に対応づけられた印刷枚数を読み出して、確認画像領域７１０の近傍に表示する。また、画像管理装置１１０は、印刷注文データとして確認画像領域７１０に表示している撮像画像に対応づけられてメモリに記憶された部分画像のファイル名で示されるファイルを読み込んで、読み込んだ部分画像を部分画像表示領域７４０及び７５０に表示する。
【００７７】
図１２は、画像処理装置８１０及び画像管理装置１１０のハードウェア構成の一例を示す。画像処理装置８１０及び画像管理装置１１０は、ホスト・コントローラ１５８２により相互に接続されるＣＰＵ１５０５、ＲＡＭ１５２０、グラフィック・コントローラ１５７５、及び表示装置１５８０を有するＣＰＵ周辺部と、入出力コントローラ１５８４によりホスト・コントローラ１５８２に接続される通信インターフェイス１５３０、ハードディスクドライブ１５４０、及びＣＤ−ＲＯＭドライブ１５６０を有する入出力部と、入出力コントローラ１５８４に接続されるＲＯＭ１５１０、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０を有するレガシー入出力部とを備える。
【００７８】
ホスト・コントローラ１５８２は、ＲＡＭ１５２０と、高い転送レートでＲＡＭ１５２０をアクセスするＣＰＵ１５０５、及びグラフィック・コントローラ１５７５とを接続する。ＣＰＵ１５０５は、ＲＯＭ１５１０、及びＲＡＭ１５２０に格納されたプログラムに基づいて動作し、各部の制御を行う。グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等がＲＡＭ１５２０内に設けたフレーム・バッファ上に生成する画像データを取得し、表示装置１５８０上に表示させる。これに代えて、グラフィック・コントローラ１５７５は、ＣＰＵ１５０５等が生成する画像データを格納するフレーム・バッファを、内部に含んでもよい。
【００７９】
入出力コントローラ１５８４は、ホスト・コントローラ１５８２と、比較的高速な入出力装置であるハードディスクドライブ１５４０、通信インターフェイス１５３０、ＣＤ−ＲＯＭドライブ１５６０を接続する。ハードディスクドライブ１５４０は、ＣＰＵ１５０５が使用するプログラム、及びデータを格納する。通信インターフェイス１５３０は、ネットワーク通信装置１５９８に接続してプログラムまたはデータを送受信する。ＣＤ−ＲＯＭドライブ１５６０は、ＣＤ−ＲＯＭ１５９５からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０、及び通信インターフェイス１５３０に提供する。
【００８０】
また、入出力コントローラ１５８４には、ＲＯＭ１５１０と、フレキシブルディスク・ドライブ１５５０、及び入出力チップ１５７０の比較的低速な入出力装置とが接続される。ＲＯＭ１５１０は、画像管理装置１１０及び画像管理装置１１０が起動時に実行するブート・プログラムや、画像管理装置１１０及び画像管理装置１１０のハードウェアに依存するプログラム等を格納する。フレキシブルディスク・ドライブ１５５０は、フレキシブルディスク１５９０からプログラムまたはデータを読み取り、ＲＡＭ１５２０を介してハードディスクドライブ１５４０、及び通信インターフェイス１５３０に提供する。入出力チップ１５７０は、フレキシブルディスク・ドライブ１５５０や、例えばパラレル・ポート、シリアル・ポート、キーボード・ポート、マウス・ポート等を介して各種の入出力装置を接続する。
【００８１】
ＣＰＵ１５０５が実行するプログラムは、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５、またはＩＣカード等の記録媒体に格納されて利用者によって提供される。記録媒体に格納されたプログラムは圧縮されていても非圧縮であってもよい。プログラムは、記録媒体からハードディスクドライブ１５４０にインストールされ、ＲＡＭ１５２０に読み出されてＣＰＵ１５０５により実行される。
【００８２】
ＣＰＵ１５０５により実行されるプログラムは、画像処理装置８１０を、図１から図４にかけて説明した原画像取得部９３０、特徴領域判断部９６０、特徴領域特定部９７０、画像補正部９１０、及び画像出力部９９０として機能させる。また、ＣＰＵ１５０５により実行されるプログラムは、画像管理装置１１０を、図５から図１２にかけて説明した画像補正部２１０、原画像取得部２３０、特徴部分検出部２４０、輝度分布算出部２４２、抽出条件格納部２４４、部分画像抽出部２５０、部分画像拡大部２５２、低データ量画像生成部２８５、画像出力部２９０、及び印刷注文受付部２９２として機能させる。
【００８３】
以上に示したプログラムは、外部の記憶媒体に格納されてもよい。記憶媒体としては、フレキシブルディスク１５９０、ＣＤ−ＲＯＭ１５９５の他に、ＤＶＤやＰＤ等の光学記録媒体、ＭＤ等の光磁気記録媒体、テープ媒体、ＩＣカード等の半導体メモリ等を用いることができる。また、専用通信ネットワークやインターネットに接続されたサーバシステムに設けたハードディスクまたはＲＡＭ等の記憶装置を記録媒体として使用し、ネットワークを介してプログラムを画像処理装置８１０及び画像管理装置１１０に提供してもよい。
【００８４】
以上、実施形態を用いて本発明を説明したが、本発明の技術的範囲は上記実施形態に記載の範囲には限定されない。上記実施形態に、多様な変更又は改良を加えることができる。そのような変更又は改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【図面の簡単な説明】
【００８５】
【図１】この発明の一実施形態に係る画像処理システム８００の利用環境の一例を示す図である。
【図２】画像処理装置８１０のブロック構成の一例を示す図である。
【図３】撮像装置８３０のブロック構成の一例を示す図である。
【図４】画像出力部９９０によって出力される画像の一例を示す図である。
【図５】画像管理システム１００の利用環境の一例を示す図である。
【図６】画像管理装置１１０及び撮像装置１３０のブロック構成の一例を示す図である。
【図７】撮像装置１３０が格納する撮像状況データの一例を示す図である。
【図８】画像管理装置１１０が記録する推奨条件データの一例を示す図である。
【図９】画像管理装置１１０における注文画面の一例を示す図である。
【図１０】画像管理装置１１０における画像注文票の一例を示す図である。
【図１１】画像管理装置１１０の注文確認画面の一例を示す図である。
【図１２】画像処理装置８１０及び画像管理装置１１０のハードウェア構成を示すブロック図である。
【符号の説明】
【００８６】
１００ 画像管理システム
１１０ 画像管理装置
１２０ 注文サーバ
１３０ 撮像装置
１５０ 通信回線
１６０ 記録媒体
１６５ 画像注文票
１８０ 出力装置
１９０ ユーザ
２１０ 画像補正部
２３０ 原画像取得部
２４０ 特徴部分検出部
２４２ 輝度分布算出部
２４４ 抽出条件格納部
２５０ 部分画像抽出部
２５２ 部分画像拡大部
２８０ サムネイル画像生成部
２８５ 低データ量画像生成部
２９０ 画像出力部
２９２ 印刷注文受付部
４１０ 撮像画像ディレクトリ
４２０ サムネイル画像ディレクトリ
４３０ 部分画像ディレクトリ
４４０ 画像対応ファイル
５１０ 全体画像表示領域
５２０ 部分画像表示領域
６１０ 全体画像印刷部
６２０ 部分画像印刷部
６３０ 部分画像印刷部
６６０ 全体画像注文記入部
８００ 画像処理システム
８１０ 画像処理装置
８１５ 画像表示装置
８３０ 撮像装置
８５０ 通信回線
８６０ 記録媒体
９１０ 画像補正部
９３０ 原画像取得部
９６０ 特徴領域判断部
９７０ 特徴領域特定部
９９０ 画像出力部
【特許請求の範囲】
【請求項１】
原画像を取得する原画像取得部と、
前記原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部と、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記原画像取得部が取得した原画像における前記特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部と、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記画像補正部が補正して得られた画像を出力し、前記特徴領域判断部が前記特徴的な領域が存在しない旨を判断した場合に、前記原画像取得部が取得した原画像を出力する画像出力部と
を備える画像処理装置。
【請求項２】
前記原画像取得部は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数が略一定な光学系を有する撮像装置で撮像された原画像を取得し、
前記画像補正部は、前記原画像取得部が取得した原画像における前記特徴的な領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正する
請求項１に記載の画像処理装置。
【請求項３】
前記原画像取得部は、前記撮像装置によって撮像された動画に含まれる複数の原画像を取得し、
前記特徴領域判断部は、前記複数の原画像のそれぞれにおいて前記特徴的な領域が存在するか否かを判断し、
前記画像補正部は、前記特徴領域判断部によって前記特徴的な領域が存在する旨が判断された原画像における前記特徴的な領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正し、
前記画像出力部は、前記特徴領域判断部によって前記特徴的な領域が存在する旨が判断された原画像が前記画像補正部により補正された画像、及び、前記特徴領域判断部によって前記特徴的な領域が存在しない旨が判断された原画像を出力する
請求項２に記載の画像処理装置。
【請求項４】
前記特徴領域判断部は、前記動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて前記特徴的な領域が存在するか否かを判断する
請求項３に記載の画像処理装置。
【請求項５】
前記特徴領域判断部は、前記動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて動くオブジェクトが存在するか否かを判断し、
前記画像補正部は、前記特徴領域判断部によって動くオブジェクトが存在する旨が判断された原画像における動くオブジェクトが存在する領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正する
請求項４に記載の画像処理装置。
【請求項６】
前記特徴領域判断部は、前記動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて時間的に変化する領域が存在するか否かを判断し、
前記画像補正部は、前記特徴領域判断部によって時間的に変化する領域が存在する旨が判断された原画像における時間的に変化する領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正する
請求項４に記載の画像処理装置。
【請求項７】
前記特徴領域判断部は、前記複数の原画像に含まれる色に基づいて、複数の原画像のそれぞれにおいて前記特徴的な領域が存在するか否かを判断する
請求項３に記載の画像処理装置。
【請求項８】
原画像を取得する原画像取得段階と、
前記原画像取得段階において取得された原画像における特徴的な領域が存在するか否かを判断する特徴領域判断段階と、
前記特徴領域判断段階において前記特徴的な領域が存在する旨が判断された場合に、前記原画像取得段階において取得された原画像における前記特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正段階と、
前記特徴領域判断段階において前記特徴的な領域が存在する旨が判断された場合に、前記画像補正段階において補正して得られた画像を出力し、前記特徴領域判断段階において前記特徴的な領域が存在しない旨が判断された場合に、前記原画像取得段階において取得された原画像を出力する画像出力段階と
を備える画像処理方法。
【請求項９】
画像処理装置用のプログラムであって、前記画像処理装置を、
原画像を取得する原画像取得部、
前記原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記原画像取得部が取得した原画像における前記特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記画像補正部が補正して得られた画像を出力し、前記特徴領域判断部が前記特徴的な領域が存在しない旨を判断した場合に、前記原画像取得部が取得した原画像を出力する画像出力部
として機能させるプログラム。
【請求項１０】
原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部と、
前記原画像取得部が取得した原画像のデータ量を低減した低データ量画像を生成する低データ量画像生成部と、
前記原画像取得部が取得した原画像を、当該原画像と対応づけて前記原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部と、
前記画像補正部が補正して得られた画像の中の特徴的な部分を検出する特徴部分検出部と、
前記画像補正部が補正して得られた画像の中の前記特徴的な部分を含む部分画像を抽出する部分画像抽出部と、
前記部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部と、
前記低データ量画像生成部が生成した低データ量画像とともに、前記部分画像拡大部が拡大した部分画像を出力する画像出力部と
を備える画像管理装置。
【請求項１１】
前記低データ量画像生成部は、前記原画像取得部が取得した原画像のデータ量を低減したサムネイル画像を生成するサムネイル画像生成部を有し、
前記画像出力部は、前記サムネイル画像生成部が生成したサムネイル画像とともに、前記部分画像拡大部が拡大した部分画像を出力する
請求項１０に記載の画像管理装置。
【請求項１２】
前記部分画像抽出部が抽出する部分画像の抽出条件を予め格納する抽出条件格納部
をさらに備え、
前記特徴部分検出部は、前記抽出条件格納部が格納している抽出条件に一致する部分を、前記原画像取得部が取得した原画像の中から検出する
請求項１１に記載の画像管理装置。
【請求項１３】
前記原画像取得部は、複数の原画像及び複数の原画像のそれぞれを撮像した撮像装置のそれぞれの光学特性を示す情報をそれぞれ対応づけて取得し、
前記サムネイル画像生成部は、前記原画像取得部が取得した複数の原画像のそれぞれのサムネイル画像を生成し、
前記画像補正部は、前記原画像取得部が取得した複数の原画像のそれぞれを、当該複数の原画像のそれぞれと対応づけて前記原画像取得部が取得した情報が示す光学特性に基づいて補正し、
前記特徴部分検出部は、前記画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を検出し、
前記部分画像抽出部は、前記画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の前記特徴的な部分を含む部分画像を抽出し、
前記部分画像拡大部は、前記部分画像抽出部が抽出した複数の部分画像を拡大し、
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれとともに、前記部分画像拡大部が拡大した複数の部分画像のそれぞれを出力する
請求項１１に記載の画像管理装置。
【請求項１４】
前記画像出力部が出力している複数のサムネイル画像に対応する原画像の印刷の注文を受け付ける印刷注文受付部
をさらに備え、
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、前記部分画像拡大部が拡大した複数の部分画像のそれぞれが表示された注文票を表示する
請求項１３に記載の画像管理装置。
【請求項１５】
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、前記部分画像拡大部が拡大した複数の部分画像のそれぞれが印刷された注文票を印刷する
請求項１４に記載の画像管理装置。
【請求項１６】
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれと、前記部分画像拡大部が拡大した複数の部分画像のそれぞれとが関連づけられて出力されるべく対応づけて記録媒体に出力して記録する
請求項１３に記載の画像管理装置。
【請求項１７】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の主要被写体を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記主要被写体を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項１８】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の人物を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記人物を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項１９】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の人物の顔を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記人物の顔を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項２０】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の人物の目を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記人物の目を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項２１】
前記画像補正部が補正して得られた画像における輝度分布を算出する輝度分布算出部
をさらに備え、
前記特徴部分検出部は、前記輝度分布算出部の算出結果に基づいて、前記画像補正部が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記最大輝度又は最小輝度の密度が大きい部分の部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項２２】
前記原画像取得部は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする光学系を有する撮像装置で撮像された原画像を、当該光学的伝達関数を示す情報に対応づけて取得し、
前記画像補正部は、前記原画像取得部が取得した原画像を、前記原画像取得部が取得した情報が示す光学的伝達関数に基づいて補正する
請求項１１に記載の画像管理装置。
【請求項２３】
原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得段階と、
前記原画像取得段階において取得された原画像のサムネイル画像を生成するサムネイル画像生成段階と、
前記原画像取得段階において取得された原画像に、当該原画像と対応づけて前記原画像取得段階において取得された情報が示す光学特性に基づいて補正する画像補正段階と、
前記画像補正段階において補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出段階と、
前記画像補正段階において補正されて得られた画像の中の前記特徴的な部分を含む部分画像を抽出する部分画像抽出段階と、
前記部分画像抽出段階において抽出された部分画像を拡大する部分画像拡大段階と、
前記サムネイル画像生成段階において生成されたサムネイル画像とともに、前記部分画像拡大段階において拡大された部分画像を出力する画像出力段階と
を備える画像管理方法。
【請求項２４】
画像を管理する画像管理装置用のプログラムであって、前記画像管理装置を、
原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部、
前記原画像取得部が取得した原画像のサムネイル画像を生成するサムネイル画像生成部、
前記原画像取得部が取得した原画像に、当該原画像と対応づけて前記原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部、
前記画像補正部によって補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出部、
前記画像補正部によって補正されて得られた画像の中の前記特徴的な部分を含む部分画像を抽出する部分画像抽出部、
前記部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部、
前記サムネイル画像生成部が生成したサムネイル画像とともに、前記部分画像拡大部が拡大した部分画像を出力する画像出力部
として機能させるプログラム。
【請求項２５】
原画像の全体が印刷されている全体画像印刷部と、
前記原画像を撮像した撮像装置の光学特性に基づいて前記原画像が補正された画像の中の特徴的な部分を含む部分画像が拡大されて印刷されている部分画像印刷部と、
前記原画像を注文する旨が記入される全体画像注文記入部と
を備える画像注文票。
【請求項１】
原画像を取得する原画像取得部と、
前記原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部と、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記原画像取得部が取得した原画像における前記特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部と、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記画像補正部が補正して得られた画像を出力し、前記特徴領域判断部が前記特徴的な領域が存在しない旨を判断した場合に、前記原画像取得部が取得した原画像を出力する画像出力部と
を備える画像処理装置。
【請求項２】
前記原画像取得部は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数が略一定な光学系を有する撮像装置で撮像された原画像を取得し、
前記画像補正部は、前記原画像取得部が取得した原画像における前記特徴的な領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正する
請求項１に記載の画像処理装置。
【請求項３】
前記原画像取得部は、前記撮像装置によって撮像された動画に含まれる複数の原画像を取得し、
前記特徴領域判断部は、前記複数の原画像のそれぞれにおいて前記特徴的な領域が存在するか否かを判断し、
前記画像補正部は、前記特徴領域判断部によって前記特徴的な領域が存在する旨が判断された原画像における前記特徴的な領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正し、
前記画像出力部は、前記特徴領域判断部によって前記特徴的な領域が存在する旨が判断された原画像が前記画像補正部により補正された画像、及び、前記特徴領域判断部によって前記特徴的な領域が存在しない旨が判断された原画像を出力する
請求項２に記載の画像処理装置。
【請求項４】
前記特徴領域判断部は、前記動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて前記特徴的な領域が存在するか否かを判断する
請求項３に記載の画像処理装置。
【請求項５】
前記特徴領域判断部は、前記動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて動くオブジェクトが存在するか否かを判断し、
前記画像補正部は、前記特徴領域判断部によって動くオブジェクトが存在する旨が判断された原画像における動くオブジェクトが存在する領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正する
請求項４に記載の画像処理装置。
【請求項６】
前記特徴領域判断部は、前記動画に含まれる動きベクトルに基づいて、複数の原画像のそれぞれにおいて時間的に変化する領域が存在するか否かを判断し、
前記画像補正部は、前記特徴領域判断部によって時間的に変化する領域が存在する旨が判断された原画像における時間的に変化する領域の画像を、前記撮像装置の光学系の光学的伝達関数に基づいて補正する
請求項４に記載の画像処理装置。
【請求項７】
前記特徴領域判断部は、前記複数の原画像に含まれる色に基づいて、複数の原画像のそれぞれにおいて前記特徴的な領域が存在するか否かを判断する
請求項３に記載の画像処理装置。
【請求項８】
原画像を取得する原画像取得段階と、
前記原画像取得段階において取得された原画像における特徴的な領域が存在するか否かを判断する特徴領域判断段階と、
前記特徴領域判断段階において前記特徴的な領域が存在する旨が判断された場合に、前記原画像取得段階において取得された原画像における前記特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正段階と、
前記特徴領域判断段階において前記特徴的な領域が存在する旨が判断された場合に、前記画像補正段階において補正して得られた画像を出力し、前記特徴領域判断段階において前記特徴的な領域が存在しない旨が判断された場合に、前記原画像取得段階において取得された原画像を出力する画像出力段階と
を備える画像処理方法。
【請求項９】
画像処理装置用のプログラムであって、前記画像処理装置を、
原画像を取得する原画像取得部、
前記原画像取得部が取得した原画像における特徴的な領域が存在するか否かを判断する特徴領域判断部、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記原画像取得部が取得した原画像における前記特徴的な領域の画像を、当該原画像を撮像した撮像装置の光学特性に基づいて補正する画像補正部、
前記特徴領域判断部が前記特徴的な領域が存在する旨を判断した場合に、前記画像補正部が補正して得られた画像を出力し、前記特徴領域判断部が前記特徴的な領域が存在しない旨を判断した場合に、前記原画像取得部が取得した原画像を出力する画像出力部
として機能させるプログラム。
【請求項１０】
原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部と、
前記原画像取得部が取得した原画像のデータ量を低減した低データ量画像を生成する低データ量画像生成部と、
前記原画像取得部が取得した原画像を、当該原画像と対応づけて前記原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部と、
前記画像補正部が補正して得られた画像の中の特徴的な部分を検出する特徴部分検出部と、
前記画像補正部が補正して得られた画像の中の前記特徴的な部分を含む部分画像を抽出する部分画像抽出部と、
前記部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部と、
前記低データ量画像生成部が生成した低データ量画像とともに、前記部分画像拡大部が拡大した部分画像を出力する画像出力部と
を備える画像管理装置。
【請求項１１】
前記低データ量画像生成部は、前記原画像取得部が取得した原画像のデータ量を低減したサムネイル画像を生成するサムネイル画像生成部を有し、
前記画像出力部は、前記サムネイル画像生成部が生成したサムネイル画像とともに、前記部分画像拡大部が拡大した部分画像を出力する
請求項１０に記載の画像管理装置。
【請求項１２】
前記部分画像抽出部が抽出する部分画像の抽出条件を予め格納する抽出条件格納部
をさらに備え、
前記特徴部分検出部は、前記抽出条件格納部が格納している抽出条件に一致する部分を、前記原画像取得部が取得した原画像の中から検出する
請求項１１に記載の画像管理装置。
【請求項１３】
前記原画像取得部は、複数の原画像及び複数の原画像のそれぞれを撮像した撮像装置のそれぞれの光学特性を示す情報をそれぞれ対応づけて取得し、
前記サムネイル画像生成部は、前記原画像取得部が取得した複数の原画像のそれぞれのサムネイル画像を生成し、
前記画像補正部は、前記原画像取得部が取得した複数の原画像のそれぞれを、当該複数の原画像のそれぞれと対応づけて前記原画像取得部が取得した情報が示す光学特性に基づいて補正し、
前記特徴部分検出部は、前記画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の特徴的な部分を検出し、
前記部分画像抽出部は、前記画像補正部が複数の原画像のそれぞれを補正して得られた複数の画像のそれぞれの中の前記特徴的な部分を含む部分画像を抽出し、
前記部分画像拡大部は、前記部分画像抽出部が抽出した複数の部分画像を拡大し、
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれとともに、前記部分画像拡大部が拡大した複数の部分画像のそれぞれを出力する
請求項１１に記載の画像管理装置。
【請求項１４】
前記画像出力部が出力している複数のサムネイル画像に対応する原画像の印刷の注文を受け付ける印刷注文受付部
をさらに備え、
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、前記部分画像拡大部が拡大した複数の部分画像のそれぞれが表示された注文票を表示する
請求項１３に記載の画像管理装置。
【請求項１５】
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれの付近に、前記部分画像拡大部が拡大した複数の部分画像のそれぞれが印刷された注文票を印刷する
請求項１４に記載の画像管理装置。
【請求項１６】
前記画像出力部は、前記サムネイル画像生成部が生成した複数のサムネイル画像のそれぞれと、前記部分画像拡大部が拡大した複数の部分画像のそれぞれとが関連づけられて出力されるべく対応づけて記録媒体に出力して記録する
請求項１３に記載の画像管理装置。
【請求項１７】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の主要被写体を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記主要被写体を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項１８】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の人物を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記人物を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項１９】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の人物の顔を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記人物の顔を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項２０】
前記特徴部分検出部は、前記画像補正部が補正して得られた画像の中の人物の目を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記人物の目を含む部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項２１】
前記画像補正部が補正して得られた画像における輝度分布を算出する輝度分布算出部
をさらに備え、
前記特徴部分検出部は、前記輝度分布算出部の算出結果に基づいて、前記画像補正部が補正して得られた画像の中の最大輝度又は最小輝度の密度が大きい部分を検出し、
前記部分画像抽出部は、前記画像補正部が補正して得られた画像の中の前記最大輝度又は最小輝度の密度が大きい部分の部分画像を抽出する
請求項１１に記載の画像管理装置。
【請求項２２】
前記原画像取得部は、光軸方向における予め定められた物体距離の範囲にわたって光学的伝達関数を略一定にする光学系を有する撮像装置で撮像された原画像を、当該光学的伝達関数を示す情報に対応づけて取得し、
前記画像補正部は、前記原画像取得部が取得した原画像を、前記原画像取得部が取得した情報が示す光学的伝達関数に基づいて補正する
請求項１１に記載の画像管理装置。
【請求項２３】
原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得段階と、
前記原画像取得段階において取得された原画像のサムネイル画像を生成するサムネイル画像生成段階と、
前記原画像取得段階において取得された原画像に、当該原画像と対応づけて前記原画像取得段階において取得された情報が示す光学特性に基づいて補正する画像補正段階と、
前記画像補正段階において補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出段階と、
前記画像補正段階において補正されて得られた画像の中の前記特徴的な部分を含む部分画像を抽出する部分画像抽出段階と、
前記部分画像抽出段階において抽出された部分画像を拡大する部分画像拡大段階と、
前記サムネイル画像生成段階において生成されたサムネイル画像とともに、前記部分画像拡大段階において拡大された部分画像を出力する画像出力段階と
を備える画像管理方法。
【請求項２４】
画像を管理する画像管理装置用のプログラムであって、前記画像管理装置を、
原画像及び原画像を撮像した撮像装置の光学特性を示す情報を対応づけて取得する原画像取得部、
前記原画像取得部が取得した原画像のサムネイル画像を生成するサムネイル画像生成部、
前記原画像取得部が取得した原画像に、当該原画像と対応づけて前記原画像取得部が取得した情報が示す光学特性に基づいて補正する画像補正部、
前記画像補正部によって補正されて得られた画像の中の特徴的な部分を検出する特徴部分検出部、
前記画像補正部によって補正されて得られた画像の中の前記特徴的な部分を含む部分画像を抽出する部分画像抽出部、
前記部分画像抽出部が抽出した部分画像を拡大する部分画像拡大部、
前記サムネイル画像生成部が生成したサムネイル画像とともに、前記部分画像拡大部が拡大した部分画像を出力する画像出力部
として機能させるプログラム。
【請求項２５】
原画像の全体が印刷されている全体画像印刷部と、
前記原画像を撮像した撮像装置の光学特性に基づいて前記原画像が補正された画像の中の特徴的な部分を含む部分画像が拡大されて印刷されている部分画像印刷部と、
前記原画像を注文する旨が記入される全体画像注文記入部と
を備える画像注文票。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２００８−２７６７３２（Ｐ２００８−２７６７３２Ａ）
【公開日】平成２０年１１月１３日（２００８．１１．１３）
【国際特許分類】
【出願番号】特願２００７−３１７６２６（Ｐ２００７−３１７６２６）
【出願日】平成１９年１２月７日（２００７．１２．７）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２０年１１月１３日（２００８．１１．１３）
【国際特許分類】
【出願日】平成１９年１２月７日（２００７．１２．７）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]