デジタルスチルカメラ
【課題】 画像合成用に連続撮影された複数枚の撮影画像の内容を撮影処理後に直ちに確認できるようにする。
【解決手段】 ボケ味を調整するモードで操作部１０７から撮影が指示されると、全体制御部１０８は合焦位置を変化させてＣＣＤ１０２の露光を連続２回行い、ピント状態の異なる２枚の撮影画像を取り込む。撮影画像は信号処理部１０３で所定の処理が行なわれた後、画像メモリ１０３ｆにそれぞれ一時、記憶される。表示制御部１０８ｄにより画像メモリ１０３ｆに記憶された画像のうち、最もピント範囲の広い撮影画像は画像サイズが調整されてＶＲＡＭ１０６ｄに転送され、ＥＶＦ１０６ｄに表示される。撮影処理が終了し、画像データが画像メモリ１０３ｆに記憶された時点で１の撮影画像をＥＶＦ１０６ｄに表示することで、撮影終了後直ちに撮影内容を確認できるようにした。
【解決手段】 ボケ味を調整するモードで操作部１０７から撮影が指示されると、全体制御部１０８は合焦位置を変化させてＣＣＤ１０２の露光を連続２回行い、ピント状態の異なる２枚の撮影画像を取り込む。撮影画像は信号処理部１０３で所定の処理が行なわれた後、画像メモリ１０３ｆにそれぞれ一時、記憶される。表示制御部１０８ｄにより画像メモリ１０３ｆに記憶された画像のうち、最もピント範囲の広い撮影画像は画像サイズが調整されてＶＲＡＭ１０６ｄに転送され、ＥＶＦ１０６ｄに表示される。撮影処理が終了し、画像データが画像メモリ１０３ｆに記憶された時点で１の撮影画像をＥＶＦ１０６ｄに表示することで、撮影終了後直ちに撮影内容を確認できるようにした。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本発明は、同一の被写体に対して少なくとも２回連続撮影を行ない、この連続撮影によって得られた複数枚の撮影画像を所定の画像合成処理で合成して画質を改善したり、映像効果を高めた画像を得ることのできるデジタルスチルカメラに関する。
【０００２】
【従来の技術】近年、デジタルスチルカメラの技術分野においては、連続して撮影した複数枚の撮影画像を所定の画像処理を行なった後、合成することで、各撮影画像よりも画質や映像効果を高めた画像を得ることのできるデジタルスチルカメラが商品化されている。
【０００３】例えばビクター社製のデジタルスチルカメラ「ＧＣ−Ｘ１“ＰＩＸＳＴＥＲ”」は、撮像素子を微小変位させて連続して２回撮影を行い、両撮影画像を合成することで解像度の高い撮影画像を得ることができる機能を備えている。また、このデジタルスチルカメラは、被写体の明るい部分と暗い部分とに合わせて２種類の露出制御値を設定し、それらの露出制御値で連続して２回撮影を行い、両撮影画像を合成することで暗い部分から明るい部分まで適切な濃度の撮影画像を得ることができる機能も備えている。
【０００４】
【発明が解決しようとする課題】近年、デジタルスチルカメラに適用される撮像素子の高画素化が進み、２００万〜３００万画素の撮像素子を用いたものも商品化されているが、このような高密度の撮像素子を用いたデジタルスチルカメラに上述の画像合成機能を設けた場合、画質及び映像効果の高い画像が得られるという優れた価値をデジタルスチルカメラに付加するができる。
【０００５】しかし、撮影画像のデータ数が増大すると、画像合成処理の時間が長くなり、合成結果がなかなか得られないという不都合が生じる。デジタルスチルカメラの場合、撮影した直後にその場で撮影画像を表示部に表示させて確認ができることが望ましいが、画像合成を目的として連続撮影される複数枚の撮影画像については、例えば合成画像を表示部に表示させる場合、画像合成処理に長時間を要するため、撮影直後に直ちに合成画像を表示部に表示させることは困難であった。
【０００６】本発明は、上記課題に鑑みてなされたものであり、画像合成用に撮影された複数枚の画像の内容を撮影後に直ちに確認することのできるデジタルスチルカメラを提供するものである。
【０００７】
【課題を解決するための手段】本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に表示する表示制御手段とを備えたものである（請求項１）。
【０００８】この構成によれば、特殊撮影モードで撮影された複数枚の撮影画像は、画像合成処理をすることなく、いずれか１の撮影画像が表示手段に表示されるので、撮影者は撮影直後に撮影内容を確認することができる。
【０００９】なお、上記所定の画像合成処理が、ピントのボケ具合の異なる複数枚の撮影画像を合成してピントのボケ具合が調整された１の画像を作成するボケ味調整処理である場合は、上記撮影画像のうち、最もピントの合っている範囲が広い撮影画像を上記表示手段に表示するとよい（請求項２）。
【００１０】また、その場合、ピントのボケ具合の異なる複数枚の撮影画のうち、最もピントの合っている範囲が広い撮影画像を最初に撮影するようにするとよい（請求項３）。
【００１１】ボケ味調整処理のために撮影される複数枚の撮影画像はそれぞれボケ具合が異なっているから、任意の１枚を表示すると、撮影内容の不明瞭な撮影画像が表示されるおそれがあるが、最もピントの合っている範囲が広い撮影画像を表示させることで、そのような不都合が回避される。
【００１２】また、ボケ味調整処理用の撮影処理では、それぞれ所定の被写体距離に焦点調節を行なって露光動作を行なう必要があるが、最もピントの合っている範囲が広い撮影画像を最初に撮影することで（すなわち、最初の撮影のために必要な焦点調節期間を２回目以降の各撮影に必要な焦点調節期間よりも短くすることで）、２回目以降の各撮影のために生じる焦点調節期間を有効に活用することができる。従って、全体的な撮影処理の時間を短くすることができ、撮影開始から撮影内容確認用の画像表示までの時間を短くすることができる。
【００１３】また、上記所定の画像合成処理が複数枚の撮影画像を合成して当該撮影画像よりも解像度の高い１の画像を作成する超解像処理の場合、上記撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示するとよい（請求項４）。
【００１４】超解像処理は、連続撮影の間に僅かに生じるカメラアングルの変化を利用して被写体に対する撮影位置が僅かに異なる複数枚の撮影画像を取得し、これらの撮影画像を合成して超解像画像を得るものである。超解像処理のために撮影では、基本的に撮影条件を変更することなく連続撮影が行なわれるため、各撮影画像の内容は殆ど同じである。従って、最初に撮影された撮影画像を表示させることで、撮影者がシャッタ操作した被写体に最も近い撮影画像（すなわち、撮影者が撮影しようとした画像）を表示させることができる。
【００１５】また、撮影画像確認用の表示は、連続した露光動作の終了後で、且つ、複数枚の撮影画像に対して所定の処理（例えばこれら撮影画像の画像合成処理や撮影画像若しくは合成画像の記録媒体への記録処理等）が行なわれる前に行なうとよい（請求項５，６，７）。
【００１６】複数枚の撮影画像を取り込んだ後、これらの撮影画像の画像合成処理や記録媒体への記録処理の前に１の撮影画像を確認用に表示させるので、可及的に撮影直後に撮影内容を確認することができる。
【００１７】また、本発明は、請求項１記載のデジタルスチルカメラにおいて、上記複数枚の撮影画像をそれぞれ記録媒体に記録する記録手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に再生表示する再生制御手段とを更に備えたものである（請求項８）。なお、上記１の撮影画像は最初に撮影された撮影画像にするとよい（請求項９）。
【００１８】上記構成によれば、特殊撮影モードで撮影された画像を再生モードで再生して撮影内容を確認する場合、連続撮影された複数枚の撮影画像のうち、１の撮影画像だけが再生表示されるので、例えばコマ送りにより各撮影画像を再生させる場合、同じ内容の撮影画像が連続的に再生されることで、その撮影画像が通常の撮影モードで撮影された画像なのか、特殊モードで撮影された画像なのか混乱することがない。
【００１９】また、特殊撮影モードで撮影された画像を再生する際、最初に撮影された撮影画像（すなわち、撮影時に撮影者がシャッタ操作をしたタイミングに最も近い撮影画像）を表示させることで、撮影者の求める撮影内容を表示させることができる。
【００２０】また、本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像を用いて上記所定の画像合成処理に近似した画像合成処理を行なって表示用の画像を作成する表示画像作成手段と、上記表示画像作成手段で作成された画像を上記表示手段に表示する表示制御手段とを備えたものである（請求項１０）。
【００２１】なお、上記所定の画像合成処理は、例えば階調の異なる複数枚の撮影画像を合成して当該撮影画像の階調を調整した１の画像を作成する階調調整処理である（請求項１１）。また、上記表示用の画像を各撮影画像とは別に画像ファイルを作成して、各撮影画像の画像ファイルとともに、記録媒体に記録するとよい（請求項１２）。
【００２２】上記構成によれば、特殊撮影モードで撮影された複数枚の撮影画像は、これらの撮影画像を用いて所定の画像合成処理に近似した画像合成処理を行なって作成された表示用の画像が表示手段に表示される。例えば階調調整処理の場合、複数枚の撮影画像は互いに位置合わせが行なわれた後、各撮影画像の対応する画素位置毎にデータを所定の演算式で演算処理して合成画像のデータが作成されるが、平均値演算等の簡単な近似演算により表示用の画像が作成され、その表示用の画像が表示手段に表示される。
【００２３】階調調整用の各撮影画像はそれぞれ適正な階調で撮影されていないので、それらは撮影内容の確認には適さないが、比較的短い処理時間で表示用の画像（撮影内容の確認に適した画像）が作成されるので、撮影後に比較的短時間で撮影内容確認用の画像を表示させることができる。
【００２４】また、表示用の画像は各撮影画像とは別の画像ファイルで記録媒体に記録されるので、再生モードでの再生処理では、この画像ファイルを開いて表示用の画像を再生表示させることにより、迅速に再生表示を行なうことができる。
【００２５】また、上記表示用の画像の上記表示手段への表示は、複数枚の撮影画像の画像ファイルが上記記録媒体に記録される前に行なうとよい（請求項１３）。
【００２６】この構成では、複数枚の撮影画像を取り込んだ後、これらの撮影画像の画像合成処理や記録媒体への記録処理の前に表示用の画像を表示させるので、可及的に撮影直後に撮影内容を確認することができる。
【００２７】また、本発明は、請求項１２記載のデジタルスチルカメラにおいて、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段を更に備えたものである（請求項１４）。
【００２８】なお、上記デジタルスチルカメラにおいて、上記再生制御手段は、表示用の画像の画像ファイルが存在しないとき、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示するとよい（請求項１５）。
【００２９】上記構成によれば、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像が表示手段に表示される。これにより、迅速に撮影画像の再生表示を行なうことができる。なお、表示用の画像が壊れている場合は、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を表示させるので、撮影画像の再生ができないという不都合が回避される。
【００３０】また、本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段とを備えたものである（請求項１６）。
【００３１】この構成によれば、特殊撮影モードで複数枚の画像が撮影されると、これらの撮影画像を用いて表示用の画像が作成され、複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成してそれぞれ記録媒体に記録される。そして、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像の画像ファイルを開いてその画像が表示手段に再生表示される。
【００３２】また、本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像とこの画像に対応する画像合成処理の内容を示す情報とを上記表示手段に再生表示する再生制御手段とを備えたものである（請求項１７）。
【００３３】この構成によれば、特殊撮影モードで複数枚の画像が撮影されると、これらの撮影画像を用いて表示用の画像が作成され、複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成してそれぞれ記録媒体に記録される。そして、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像の画像ファイルを開いてその画像が表示手段に再生表示されるとともに、この画像に対応する画像処理の内容を示す情報が表示手段に再生表示される。例えば階調調整処理の場合、階調の異なる複数枚の撮影画像を用いて作成された表示用の画像（例えば近似合成処理により作成された画像）と「階調調整処理」の文字表示とが表示手段に表示される。
【００３４】また、本発明は、請求項１６記載のデジタルスチルカメラにおいて、上記特殊撮影モードとして複数種類のモードを有し、上記再生制御手段は、再生モードでいずれかの１の特殊撮影モードが選択されると、当該特殊撮影モードでの撮影画像の中から指定された撮影画像に対応する表示用の画像を上記表示手段に再生表示させるものである（請求項１８）。
【００３５】この構成によれば、再生モードにおいて、記録媒体に記録された複数の特殊撮影モードでの撮影画像のうち、１の特殊撮影モードでの撮影画像の再生が指示されると、その特殊撮影モードに含まれる撮影画像内で指示された撮影画像に対応して表示用の画像の画像ファイルを開いてその画像が表示手段に再生表示される。例えば特殊撮影モードとしてボケ味調整モード、階調調整モード及び超解像モードとが含まれる場合、ボケ味調整モードでの再生が指示されると、ボケ味調整モードで撮影された画像内で再生が指示された撮影画像に対応する表示用の画像が再生される。撮影者が同一の画像合成処理がなされる撮影画像に絞って再生させたい場合にはその操作性が向上する。
【００３６】
【発明の実施の形態】図１は本発明に係るデジタルスチルカメラのカメラ本体の正面図、図２は同デジタルスチルカメラに内蔵された主要部材の配置を示す上面図、図３は、同デジタルスチルカメラに内蔵された主要部材の配置を示す右側面図、図４は同デジタルスチルカメラの背面図である。
【００３７】デジタルスチルカメラ１は、カメラ本体２とこのカメラ本体２の正面略中央に着脱可能に装着されるズームレンズからなる交換レンズ３とからなる一眼レフレックスカメラで構成されている。カメラ本体２は、正面略中央に交換レンズ３が装着されるマウント部２０１が設けられ、正面左端部にグリップ部２０２が設けられている。
【００３８】グリップ部２０２の内部には電池収納室２０３とカード収納室２０４とが設けられ、電池収納室２０３には４本の単３形乾電池Ｅ１〜Ｅ４（カメラの電源電池）が収納され、カード収納室２０４には撮影画像の画像データを記録するためのメモリカードＭＣが着脱可能に収納されるようになっている。
【００３９】マウント部２０１の下部には装着された交換レンズ３との電気的接続を行なうための複数個の接点ＳＴと機械的接続を行なうための複数個のカプラーＣＰとが設けられている。電気的な接点ＳＴは、交換レンズ３に内蔵されたレンズＲＯＭ３０１（図３参照）から当該レンズに関する固有の情報（開放Ｆ値や焦点距離等の情報）をカメラ本体２内の全体制御部（図６参照）に読み出したり、交換レンズ３内のズーム用レンズの位置やフォーカス用レンズの位置の情報を全体制御部に出力するためのものである。カプラーＣＰはカメラ本体２内に設けられたズーム用レンズ駆動用のモータＺＭ（図３参照）の駆動力とフォーカス用レンズ駆動用のモータＦＭ（図３参照）の駆動力とを交換レンズ３側に伝達するためのものである。
【００４０】マウント部２０１に交換レンズ３が装着されたときの当該レンズ３の光軸Ｌ上であってカメラ本体２内の適所にカラー撮像素子２０５が配設されている。カラー撮像素子２０５（以下、ＣＣＤ２０５という。）は、図５に示すようにＣＣＤ（Charge-Coupled Device）からなるエリアセンサ２０５Ａの各画素の表面に、Ｒ（赤），Ｇ（緑），Ｂ（青）のカラーフィルタ２０５Ｂが市松模様状に貼り付けられた、いわゆるベイヤー方式と呼ばれる単板式カラーエリアセンサで構成され、例えば１６００×１２００＝１９２万個の画素数を有している。
【００４１】なお、図５に示すようにエリアセンサのｉ行ｊ列目の画素位置を（ｉ，ｊ）（ｉ＝１，２，…ｎ、ｊ=１，２，…ｍ）とし、ｎ＝１６００、ｍ＝１２００とすると、Ｒ，Ｇ，Ｂの各カラーフィルタは、Ｒ；（２ｈ＋１，２ｋ＋１）
Ｇ；（２ｈ＋２，２ｋ＋１），（２ｈ＋１，２ｋ＋２）
Ｂ；（２ｈ＋２，２ｋ＋２）
但し、ｈ＝０，１，２，…ｎ／２（＝８００）、ｋ=０，１，２，…ｍ／２（＝６００）の画素位置に配置されている。
【００４２】カメラ本体２のグリップ部２０２の上面にはシャッタボタン２０６が設けられている。シャッタボタン２０６の半押し操作と全押し操作とは後述するスイッチＳ１，Ｓ２により検出されるようになっている。スイッチＳ１がオンになると（シャッタボタン２０６が半押しされると）、被写体の静止画を撮影するための準備動作（露出制御値の設定や焦点調節等の準備動作）が行なわれ、スイッチＳ２がオンになると（シャッタボタン２０６が全押しされると）、撮影動作（ＣＣＤ２０５を露光し、その露光によって得られた画像信号に所定の画像処理を行なってメモリカードＭＣに記録する一連の動作）が行なわれる。
【００４３】カメラ本体２の上面の略中央には電子ビューファインダ４（ＥＶＦ；Electronic View Finder）とポップアップタイプのフラッシュ５とが設けられている。電子ビューファインダ４はＣＣＤ２０５で撮影された被写体のモニタ画像（撮影待機状態においてＣＣＤ２０５により動画撮影された被写体の画像）を表示するカラー液晶表示デバイスからなる表示部４０１（以下、ＬＣＤ表示部４０１という。）とこのカラー液晶表示デバイスに表示されたモニタ画像をファインダ窓４０３の外側に導く接眼レンズ４０２とを備えている。
【００４４】撮影待機状態では電子ビューファインダ４に被写体のモニタ画像（動画像）が表示されるので、撮影者はファインダ窓４０３を覗くことによってモニタ画像により被写体を視認することができる。
【００４５】カメラ本体２の背面の略中央にはカラー液晶表示デバイスからなる表示部２０７（以下、ＬＣＤ表示部２０７という。）が設けられている。ＬＣＤ表示部２０７は、記録モードにおいて撮影モードや撮影条件等を設定するためのメニュー画面を表示したり、再生モードにおいてメモリカードＭＣに記録された撮影画像を再生表示するものである。
【００４６】本実施形態では画像表示はＬＣＤ表示部２０７で行なわれるものとしているが、電子ビューファインダ４で行なうようにしてもよい。また、何れか一方で、若しくは両方で画像を表示させるようにしてもよい。
【００４７】撮影モードにはＡＥモードと露光動作の制御方法に関するモードとが含まれる。ＡＥモードには少なくともプログラムモード、シャッタ優先モード、絞り優先モードが含まれる。露出制御値は予め設定された複数のプログラム線図のいずれか１つを用いて設定されるようになっており、プログラムモードでは標準的なプログラム線図を用いて露出制御値が設定され、シャッタ優先モードでは絞り値よりシャッタ速度（露光時間）を優先するようなプログラム線図を用いて露出制御値が設定され、絞り優先モードではシャッタ速度より絞り値を優先するようなプログラム線図を用いて露出制御値が設定される。
【００４８】露光動作の制御方法に関するモードとは、１回のシャッタ操作で１回の露光動作を行い、その撮影によって得られた撮影画像をメモリカードＭＣに記録するモード（以下、通常撮影モードという。）と１回のシャッタ操作で撮影条件を変えて、若しくは撮影条件を変えないで連続して２回撮影を行ない、その撮影によって得られた２枚の撮影画像をそれぞれメモリカードＭＣに記録するモード（以下、特殊撮影モードという。）である。特殊撮影モードで連続して撮影された２枚の撮影画像は、後述するコンピュータ等からなる画像処理装置で所定の画像処理を行い、合成して元の撮影画像よりも画質や映像効果の高い画像を得るために用いられるものである。
【００４９】なお、本実施形態ではカメラ本体では画像合成処理を行なわないようにしているが、カメラ本体で画像合成処理を行ってその合成画像をメモリカードＭＣに記録するようにしてもよい。また、本実施形態では特殊撮影モードでの連続撮影回数を２回としているが、撮影回数はこれに限定されるものではなく、３回以上であってもよい。
【００５０】特殊撮影モードには少なくとも「ボケ味調整モード」、「階調調整モード」、「超解像モード」が含まれる。ボケ味調整モードとは、画像処理で主被写体（例えば人物等）に対して焦点を合せた撮影画像Ａと主被写体の背景に焦点を合わせた撮影画像Ｂとを合成することにより所望のボケ具合を有する画像を得るために、１回のシャッタ操作で合焦位置を変化させて連続して２回の撮影動作を行い、撮影画像Ａと撮影画像Ｂとを得るモードである。
【００５１】階調調整モードとは、画像処理で主被写体に対して露出を合せた撮影画像Ａと主被写体の背景に露出を合わせた撮影画像Ｂとを合成することにより、例えば画面全体に適正な濃度分布を有する画像や主被写体と背景とのコントラストを意図的に大きくし、創作性の強い画像を得るために、１回のシャッタ操作で露出条件を変化させて連続して２回の撮影動作を行い、撮影画像Ａと撮影画像Ｂとを得るモードである。
【００５２】超解像モードとは、主被写体に対する撮影位置が互いに微小変化した撮影画像Ａと撮影画像Ｂとを合成することにより、元の撮影画像よりも解像度の高い画像を得るために、１回のシャッタ操作でピントや露出条件を変えないで連続して２回の撮影動作を行い、１回目の撮影と２回目の撮影とで僅かに異なるカメラアングルの相違により画面内の主被写体の位置が微小変化した撮影画像Ａと撮影画像Ｂとを得るモードである。
【００５３】ＬＣＤ表示部２０７の左側には電源スイッチ２０８が設けられている。この電源スイッチ２０８は記録モード（写真撮影の機能を果たすモード）及び再生モード（記録画像をＬＣＤ表示部２０７に再生するモード）を切換設定するモード設定スイッチを兼ねている。すなわち、電源スイッチ２０８は３点スライドスイッチからなり、接点を中央の「ＯＦＦ」位置に設定すると、電源がオフになり、接点を上方の「ＲＥＣ」位置に設定すると、電源がオンになるとともに記録モードが設定され、接点を下方の「ＰＬＡＹ」位置に設定すると、電源がオンになるとともに再生モードが設定される。
【００５４】ＬＣＤ表示部２０７の右側上方位置には４連スイッチ２０９が設けられている。４連スイッチ２０９は円形の操作ボタンを有し、この操作ボタンにおける上下左右の４方向の押圧操作がそれぞれ検出されるようになっている。４連スイッチ２０９は多機能化され、例えばＬＣＤ表示部２０７に表示されるメニュー画面で選択された項目を変更したり、インデックス画面で選択された再生対象のコマを変更するための操作スイッチとして機能するとともに、左右方向のスイッチは交換レンズ３のズーム比を変更するためのスイッチとしても機能するようになっている。
【００５５】また、４連スイッチ２０９の下方位置にはＬＣＤ表示部２０７の表示や表示内容に関する操作を行なうためスイッチ群２１０が設けられている。スイッチ群２１０には取消スイッチ２１０ａ、確定スイッチ２１０ｂ、メニュー表示スイッチ２１０ｃ及び表示スイッチ２１０ｄが含まれる。
【００５６】取消スイッチ２１０ａはメニュー画面で選択された内容を取り消すためのスイッチである。確定スイッチ２１０ｂはメニュー画面で選択された内容を確定するためのスイッチである。メニュー表示スイッチ２１０ｃはＬＣＤ表示部２０７にメニュー画面を表示させたり、メニュー画面の内容を切り換えたりするためのスイッチである。メニュー表示スイッチ２１０ｃを押圧する毎にメニュー画面に切り換わる。表示スイッチ２１０ｄはＬＣＤ表示部２０７への表示を行なわせたり、その表示を消したりするスイッチである。電源電池Ｅ１〜Ｅ４の節電を図るため、カメラ起動時はＬＣＤ表示部２０７の表示は行なわれないようになっている。表示スイッチ２１０ｄを押圧する毎にＬＣＤ表示部２０７の表示と非表示とが交互に行なわれる。
【００５７】メニュー画面では、例えば複数の項目が配列表示され、現在選択されている項目に選択状態を示す表示（例えばカーソルや反転表示等）が行なわれる。例えば露光動作の制御方法に関する撮影モードを選択する場合、ＬＣＤ表示部２０７には、図６に示すようなメニュー画面が表示される。このメニュー画面における「通常撮影」の項目は通常撮影モードのことで、銀塩カメラにおける撮影動作と同様の通常の撮影を行なうモードである。また「ボケ味調整撮影」、「階調調整撮影」及び「超解像撮影」はそれぞれ特殊撮影モードの中のボケ味調整モード、階調調整モード、超解像モードのことである。
【００５８】図６のメニュー画面において、４連スイッチ２０９の上方向スイッチが押されると、黒三角印のカーソルＫの表示位置（すなわち、カーソルＫが示す項目）が上方向にサイクリックに移動し、４連スイッチ２０９の下方向スイッチが押されると、カーソルＫが示す項目表示位置が下方向にサイクリックに移動する。そして、スイッチ群２１０の確定スイッチ２１０ｂが押されると、その時カーソルＫで指示されている項目（図６では階調調整モード）が撮影モードとして設定される。
【００５９】従って、撮影者は撮影モード選択用のメニュー画面において、４連スイッチ２０９を上下方向に操作して所望の撮影モードを選択し、確定スイッチ２１０ｄを操作することでその撮影モードを設定することができる。なお、露出制御値の決定方法に関するモードについても同様の方法で所望の撮影モードを設定することができる。
【００６０】また、インデックス画面ではメモリカードＭＣに記録されている全ての画像から９コマ分のサムネイル画像が配列表示され、現在選択されているコマに選択されている表示（例えば点滅表示や枠表示等）が行なわれる。４連スイッチ２０９の上下左右の何れかの方向スイッチを押圧すると、メニュー画面やインデックス画面の選択状態を示す表示がその方向の項目やコマに移動する。例えば上方向スイッチを押圧すると、メニュー画面やインデックス画面の選択状態を示す表示が上方向の項目やコマに移動する。そして、何れかのサムネイル画像が選択された状態で確定スイッチ２１０ｄが操作されると、そのサムネイル画像のコマが再生される。
【００６１】交換レンズ３のズーム操作では、４連スイッチ２０９の右方向スイッチを押圧すると、交換レンズ３がワイド側に連続的に移動し、４連スイッチ２０９の左方向スイッチを押圧すると、交換レンズ３のズーム用レンズがテレ側に連続的に移動する。
【００６２】図７は、デジタルスチルカメラ１の内部構成を示すブロック構成図である。
【００６３】デジタルスチルカメラ１は、主にレンズ１０１、撮像部１０２、信号処理部１０３、発光制御部１０４、レンズ制御部１０５、表示部１０６、操作部１０７及び全体制御部１０８で構成されている。
【００６４】レンズ１０１は交換レンズ３に相当するものである。レンズ１０１はフォーカス用レンズ１０１ａ及びズーム用レンズ１０１ｂを備え、内部に透過光量を調節するための絞り１０１ｃが設けられている。
【００６５】撮像部１０２はレンズ１０１を通して入射した被写体光像を画像信号（電気画像）に光電変換して取り込むものである。撮像部１０２にはＣＣＤ２０５に相当するＣＣＤ１０２ａ、このＣＣＤ１０２ａの撮像動作を制御するタイミングジェネレータ１０２ｂ及びタイミングジェネレータ１０２ｂの駆動を制御するタイミング制御回路１０２ｃが含まれる。
【００６６】ＣＣＤ１０２ａはタイミングジェネレータ１０２ｂから入力される駆動制御信号（積分開始信号／積分終了信号）に基づいて被写体光像を所定の時間（露光時間）だけ受光して画像信号（電荷蓄積信号）に変換し、その画像信号をタイミングジェネレータ１０２ｂから入力される読出制御信号（水平同期信号、垂直同期信号、転送信号等）を用いて信号処理部１０３に出力する。このとき、画像信号はＲ，Ｇ，Ｂの各色成分に分離されて信号処理部１０３に出力される。すなわち、画素位置（２ｈ＋１，２ｋ＋１）の各画素で受光された画像信号を順次読み出すことでＲの色成分の画像信号が出力され、画素位置（２ｈ＋２，２ｋ＋１），（２ｈ＋１，２ｋ＋２）の各画素で受光された画像信号を順次読み出すことでＧの色成分の画像信号が出力され、画素位置（２ｈ＋２，２ｋ＋２）の各画素で受光された画像信号を順次読み出すことでＢの色成分の画像信号が出力される。
【００６７】タイミングシェネレータ１０２ｂはタイミング制御回路１０２ｃから入力される制御信号に基づいて駆動制御信号を生成するとともに、基準クロックに基づいて読出制御信号を生成し、ＣＣＤ１０２ａに出力する。タイミング制御回路１０２ｃは撮像部１０２の撮影動作を制御するものである。タイミング制御回路１０２ｃは全体制御部１０８から入力される制御信号に基づいて撮影制御信号を生成する。この撮影制御信号には記録モードにおいて撮影待機中に被写体の動画像（以下、ライブビュー画像という。）を電子ビューファインダ４にモニタ表示するための撮影の制御信号、シャッタボタン６が操作されて被写体の静止画（以下、記録画像という。）を撮影するための制御信号、基準クロック、ＣＣＤ１０２ａから出力された画像信号を信号処理部１０３で信号処理するためのタイミング信号（同期クロック）などが含まれる。このタイミング信号は信号処理部１０３内の信号処理回路１０３ａ及びＡ／Ｄ変換回路１０３ｂに入力される。
【００６８】信号処理部１０３はＣＣＤ１０２ａから出力される画像信号に所定のアナログ信号処理及びデジタル信号処理を行うものである。画像信号の信号処理は当該画像データを構成する各画素の受光信号毎に行なわれる。以下、説明の便宜上、各画素の受光信号とこれらの集合により撮影画像を構成する画像信号とを区別するため、必要に応じて各画素の受光信号を画素信号（アナログ信号）もしくは画素データ（デジタル信号）という。
【００６９】信号処理部１０３にはアナログ信号処理回路１０３ａ、Ａ／Ｄ変換回路１０３ｂ、黒レベル補正回路１０３ｃ、ＷＢ回路１０３ｄ、γ補正回路１０３ｅ及び画像メモリ１０３ｆが含まれる。なお、黒レベル補正回路１０３ｃ、ＷＢ回路１０３ｄ及びγ補正回路１０３ｅはデジタル信号処理を行う回路を構成するものである。
【００７０】アナログ信号処理回路１０３ａは主にＣＤＳ回路（相関二重サンプリング）回路及びＡＧＣ（オートゲインコントロール）回路からなり、ＣＣＤ１０２ａから出力される画素信号のサンプリングノイズの低減と信号レベルの調整を行う。ＡＧＣ回路におけるゲインコントロールには、絞り１０１ｃの絞り値とＣＣＤ１０２ａの露光時間とで適性露出が得られなかった場合（例えば非常に低輝度の被写体を撮影する場合等）の撮影画像のレベル不足を補償する場合も含まれる。
【００７１】Ａ／Ｄ変換回路１０２ｂはアナログ信号処理回路１０３ａから出力される各画素信号をデジタルの画素データに変換するものである。Ａ／Ｄ変換回路１０２ｂは各画素信号を、例えば１０ビットの画素データに変換する。
【００７２】黒レベル補正回路１０３ｃはＡ／Ｄ変換された各画素データの黒レベルを基準の黒レベルに補正するものである。ＷＢ回路１０３ｄは撮影画像のホワイトバランスを調整するものである。ＷＢ回路１０３ｄは全体制御部１０８から入力されるレベル変換テーブルを用いてＲ，Ｇ，Ｂの各色成分の画素データのレベルを変換することで撮影画像のホワイトバランスを調整する。なお、レベル変換テーブルの各色成分の変換係数は全体制御部１０８から撮影画像毎に設定される。γ補正回路１０３ｅは画素データのγ特性を補正するものである。γ補正回路１０３ｅは予め設定された補正テーブルを用いて各画素データのレベルを補正する。
【００７３】画像メモリ１０３ｆは信号処理の終了した画像データを一時保存するメモリである。画像メモリ１０３ｆは少なくとも２フレーム分の画像データを記憶し得る容量を有している。これは、ボケ味調整モード等の撮影では２回連続して露光が行なわれ、２フレーム分の画像データが取り込まれるから、これらをそれぞれ保存できるようにするためである。なお、１フレーム分の画像データを記憶し得る記憶容量は、例えばＣＣＤ１０２ａの画素数を１６００×１２００＝１９２万とすると、１９２万個の画素データを記憶し得る容量である。
【００７４】発光制御部１０４は全体制御部１０８から入力される発光制御信号に基づいてフラッシュ５の発光を制御する。発光制御信号には発光準備の指示、発光タイミング及び発光量とが含まれる。発光制御部１０４は全体制御部１０８から発光準備の指示があると、メインコンデンサを充電して発光可能状態にし、発光タイミング信号に同期してメインコンデンサの蓄積電荷を放電することによりフラッシュ５を発光させる。そして、全体制御部１０８から入力される発光停止信号に基づいてメインコンデンサの蓄積電荷の放電を停止させる。これによりフラッシュ５は所要の発光量で発光される。
【００７５】レンズ制御部１０５はレンズ１０１内のフォーカス用レンズ１０１ａ、ズーム用レンズ１０１ｂ及び絞り１０１ｃの各部材の駆動を制御するものである。レンズ制御部１０５は絞り１０１ｃの絞り値を制御する絞り制御回路１０５ａ、フォーカスモータＦＭの駆動を制御するフォーカス制御回路１０５ｂ及びズームモータＺＭの駆動を制御するズーム制御回路１０５ｃを備えている。
【００７６】絞り制御回路１０５ａは全体制御部１０８から入力される絞り値に基づいて絞り１０１ａを駆動し、その開口量を当該絞り値に設定する。フォーカス制御回路１０５ｂは全体制御部１０８から入力されるＡＦ制御信号（例えば駆動パルス数等の制御値）に基づいてフォーカスモータＦＭの駆動量を駆動し、フォーカス用レンズ１０１ｂを焦点位置に設定する。ズーム制御回路１０５ｃは全体制御部１０８から入力されるズーム制御信号（４連スイッチ２０９の操作情報）に基づいてズームモータＺＭを駆動し、ズーム用レンズ１０１ｂを４連スイッチ２０９で指定された方向に移動させる。すなわち、ズーム制御回路１０５ｃは全体制御部１０８から４連スイッチ２０９の右方向の操作情報が入力されると、ズームモータＺＭを正方向に駆動してズーム用レンズ１０１ｂをワイド側に移動させ、４連スイッチ２０９の左方向の操作情報が入力されると、ズームモータＺＭを逆方向に駆動してズーム用レンズ１０１ｂをテレ側に移動させる。
【００７７】表示部１０６はＬＣＤ表示部２０７への表示と電子ビューファインダ４への表示とを行うものである。表示部１０６にはＬＣＤ表示部２０７に相当するディスプレイ１０６ａ及びＶＲＡＭ１０６ｂと電子ビューファインダ４内のＬＣＤ表示部４０１に相当するディスプレイ１０６ｃ及びＶＲＡＭ１０６ｄとが含まれる。ディスプレイ１０６ａは、例えば６４０×４８０＝３０７２００の画素数を有し、ディスプレイ１０６ｃは、例えば４００×３００＝１２００００の画素数を有している。従って、ＶＲＡＭ１０６ｂはディスプレイ１０６ａの画素数に対応して略３０．７万個の画素データが記憶可能になされ、ＶＲＡＭ１０６ｄはディスプレイ１０６ｃの画素数に対応して略１２万個の画素データが記憶可能になっている。
【００７８】撮影待機中ではＣＣＤ１０２ａで撮影され、所定の信号処理の後に画像メモリ１０３ｆに格納される動画の各フレーム画像のデータが順次、全体制御部１０８に読み出され、データサイズがディスプレイ１０６ｃの表示サイズに調整されて（すなわち、１９２万画素の画像データが略１２万画素の画像データに調整されて）ＶＲＡＭ１０６ｄに転送される。これにより被写体のプレビュー画像がディスプレイ１０６ｃ（ＬＣＤ表示部４０１の表示面）にモニタ表示される。また、表示スイッチ２１０ｄに操作によりＬＣＤ表示部２０７の表示が指示されると、全体表示部１０８に読み出された各フレーム画像のデータがディスプレイ１０６ａの表示サイズに調整されて（すなわち、１９２万画素の画像データが略３０．７万画素の画像データに調整されて）ＶＲＡＭ１０６ｂに転送され、これにより被写体のプレビュー画像がディスプレイ１０６ａ（ＬＣＤ表示部２０７の表示面）にもモニタ表示される。
【００７９】更にメニュースイッチ２１０ｃの操作によりメニュー表示が指示されると、全体制御部１０８内のＲ０Ｍ１０８ａに記憶されたメニュー画面の画像データがＶＲＡＭ１０６ｂに読み出され、これによりディスプレイ１０６ａの表示内容がメニュー画面に切り換えられる。
【００８０】再生モードでは全体制御部１０８によりメモリカードＭＣに記録された各コマ画像ファイルから撮影画像のサムネイル画像が読み出され、所定のフォーマットに従って配列されてインデックス表示用の画像データが作成され、その画像データがＶＲＡＭ１０６ｂに読み出される。これによりディスプレイ１０６ａにはメモリカードＭＣに記録された撮影画像の一覧が表示される。そして、４連スイッチ２０９の操作により再生すべきコマが指定されると、メモリカードＭＣに記録されたそのコマに対応する画像ファイルに記録された撮影画像の画像データが読み出され、ディスプレイ１０６ａの表示サイズに調整されてＶＲＡＭ１０６ｂに転送される。これにより撮影画像がディスプレイ１０６ａ（ＬＣＤ表示部２０７の表示面）に再生表示される。
【００８１】操作部１０７はカメラ本体２に設けられた撮影や再生に関する操作部材の操作情報を全体制御部１０８に入力するものである。操作部１０７から入力される操作情報にはシャッタボタン２０６、電源スイッチ２０８、４連スイッチ２０９、スイッチ群２１０等の各操作部材の操作情報が含まれる。
【００８２】全体制御部１０８はデジタルスチルカメラ１の有する撮影機能及び再生機能を集中制御するものである。全体制御部１０８にはカードインターフエース１０９を介してメモリカードＭＣが接続されている。また、通信用インターフェース１１０を介してパーソナルコンピュータＰＣが外部接続されるようになっている。
【００８３】全体制御部１０８はマイクロコンクピュータからなり、撮影機能及び再生機能における種々の具体的な処理を行なうための処理プログラムや上述の撮像部１０２、信号処理部１０３、発光制御部１０４、レンズ制御部１０５、表示部１０６等の駆動を制御するための制御プログラムが記憶されたＲＯＭ１０８ａと処理プログラム及び制御プログラムに従って種々の演算作業を行なうためのＲＡＭ１０８ｂを備えている。
【００８４】全体制御部１０８の行なう具体的な処理には、ライブビュー画像を取り込んだり、被写体を撮影する際の露出制御値（ＣＣＤ１０２ａの露光時間Ｔｖ〔Ｅｖ値〕と絞り１０１ｃの絞り値Ａｖ〔ＡＰＥＸ値〕）を算出する処理（露出制御値演算処理）、記録モードにおいてＣＣＤ１０２ａから画像メモリ１０３ｆに取り込まれたライブビュー画像を電子ビューファイダ４に表示したり、再生モードにおいてメモリカードＭＣから画像メモリ１０３ｆに読み出した記録画像をＬＣＤ表示部２０７に表示する処理（画像表示処理）、記録モードにおいてＣＣＤ１０２ａから画像メモリ１０３ｆに取り込まれた撮影画像をカードメモリＭＣに記録する処理（記録処理）したり、再生モードにおいてメモリカードＭＣから再生すべき撮影画像を画像メモリ１０３ｆに読み出す処理（再生処理）、ボケ味調整モード等の特殊撮影モードにおいて連続して露光動作を行なわせる処理（特殊露光制御処理）等が含まれる。
【００８５】なお、プレビュー画像にモニタ表示及びメモリカードＭＣに記録された撮影画像の再生表示の表示方法については後述する。
【００８６】露出値演算部１０８ｃ、表示制御部１０８ｄ、記録制御部１０８ｅ、再生制御部１０８ｆ及び特殊露光制御部１０８ｇは全体制御部１０８における上述の各処理を機能ブロックで表わしたものである。
【００８７】露出値定部１０８ｃは露出値演算処理を行なうもので、ライブビュー画像のＧの色成分の画像データを用いて被写体の輝度を判定し、その判定結果に基づいて露出制御値を演算する。
【００８８】表示制御部１０８ｄは画像表示処理を行なうもので、上述の表示部１０６の表示動作、すなわち、画像メモリ１０３ｆに一時保存されている画像データを読み出し、必要に応じて画像サイズを表示先の画像サイズに調整した後、ＶＲＡＭ１０６ｃまたはＶＲＡＭ１０６ｄに転送する動作を行なう。
【００８９】記録制御部１０８ｅは記録処理を行なうものである。記録制御部１０８ｅは、通常撮影モードにおいて、シャッタボタン２０６により撮影が指示されると、撮影指示後に画像メモリ１０３ｆに一時記憶された画像データ（静止画の画像データ）をＲＡＭ１０８ｂに読み出し、例えば２次元ＤＣＴ変換、ハフマン符号化等のＪＰＥＧ方式による所定の圧縮処理を行なって記録用の画像データを作成する。また、画像メモリ１０３ｆから縦横両方向でそれぞれ８画素毎に画素データをＲＡＭ１０８ｂに読み出すことで、画素数２００×１５０のサムネイル画像を作成する。更に、これらの記録用の画像データに付随して記録される撮影画像に関するタグ情報を作成する。このタグ情報にはレンズ名称、コマ番号、撮影時の焦点距離、撮影時のＦナンバー、焦点位置、被写体輝度、ホワイトバランス調整値、撮影モード、圧縮率、撮影日、フラッシュ発光の有無等が含まれる。
【００９０】そして、記録制御部１０８ｅは圧縮された撮影画像及びサムネイル画像の画像データにタグ情報を添付してＥＸＩＦ（Exchangeable Image File Format）形式の画像ファイルを作成し、この画像ファイルをメモリカードＭＣに記録する。
【００９１】ボケ味調整モード、階調調整モード及び超解像モードの撮影モードにおいては、撮影画像がＡ／Ｄ変換された後に画像ファイルが作成されてメモリカードＭＣに記録される。
【００９２】これらの撮影モードでは１回のシャッタ操作で２枚の撮影画像Ａ，Ｂが生じるので、各撮影画像Ａ，Ｂについて非圧縮のＴＩＦＦ（Tag Image File Format）形式の画像ファイルが作成されてそれぞれメモリカードＭＣに記録される。また、撮影画像Ａ，Ｂはボケ味や階調や解像度などの優れた画像を生成するために用いられるので、両画像ファイルのタグ情報には画像合成用の撮影画像であることが認識できる情報が含まれる。また、撮影画像Ａ，Ｂは画像合成によって画質を改善するためのものであるから、画質の低下要因となる圧縮処理は行なわないで、全画素データがそのまま記録される。
【００９３】図８は、メモリカードＭＣに記録された画像ファイルの構成例を示すものである。
【００９４】同図において、「Ｐ０００００１．ＴＩＦ」、「Ｐ０００００２．ＴＩＦ」等は画像ファイル名を示している。本実施形態では画像ファイル名を「ＰＸ．Ｙ」で表記しており、「ＰＸ．Ｙ」の「Ｘ」は画像ファイルが作成された順番を示す６桁の番号であり、「Ｙ」は画像データの形式を示す記号である。「Ｙ」に入る記号「ＴＩＦ」はＣＣＤから出力される画素データをそのまま記録する形式のデータであることを示し、記号「ＪＰＧ」はＪＰＥＧ形式で圧縮されたデータであることを示している。
【００９５】また、ボケ味調整モード、階調調整モード及び超解像モードでは連続して２枚の撮影画像が取り込まれ、これらの画像データについてそれぞれ画像ファイルが作成されるから、本実施形態では両画像ファイルを１つのホルダに纏めてメモリカードＭＣに記録するようになっている。従って、「１ｂ」及び「２ｂ」、「１ｔ」、「２ｈ」等はそれぞれボケ味調整モード、階調調整モード及び超解像モードで撮影された画像ファイルのホルダ名を示している。
【００９６】なお、本実施形態ではホルダ名を「Ｎｉ」で表記しており、「Ｎｉ」の「ｉ」は撮影モードを示す記号（ｂ，ｔ，ｈ）であり、「Ｎ」は各撮影モードにおける撮影順を示す番号である。例えば「１ｂ」はボケ味調整モードで最初に撮影された画像の画像データが格納されたホルダであることを示し、「２ｂ」はボケ味調整モードで２番目に撮影された画像の画像データが格納されたホルダであることを示している。
【００９７】従って、図８は、ボケ味調整モードで撮影され、作成された２個のホルダ１ｂ，２ｂと階調調整モード及び超解像モードでそれぞれ撮影され、作成されたホルダ１ｔ，１ｈと通常撮影モードで撮影され、作成された２個の画像ファイル１ｎ，２ｎとがホルダＰに纏められてメモリカードＭＣに保存されていることを示している。
【００９８】図９は、メモリカードＭＣへの画像ファイルの記録方法を示す図である。
【００９９】メモリカードＭＣの先頭の記憶領域にはホルダー情報と各ホルダーに属する画像ファイルの情報とを記憶するインデックス領域が設けられ、その後の領域に各画像ファイルがファイル番号Ｘの順に記憶されている。
【０１００】メモリカードＭＣにおける各画像ファイルの記録領域は３つの領域からなり、上から各領域にタグ情報のデータ、撮影画像のデータ及びサムネイル画像のデータが記憶される。タグ情報データ及びサムネイル画像データのデータサイズは画像ファイルによって変化しないが、撮影画像のデータサイズは圧縮率や撮影モードによって変化する。このため、メモリカードＭＣの画像ファイルの記憶領域に記憶可能なファイル数は各画像ファイルの撮影画像データのデータサイズによって変化する。
【０１０１】再生制御部１０８ｆはメモリカードＭＣに記録された撮影画像のＬＣＤ表示部２０７への再生処理を行なうものである。再生制御部１０８fは、電源スイッチ２０８により再生モードが設定されると、メモリカードＭＣに記録された各画像ファイルからサムネイル画像を読み出し、順次、所定のインデックスフォーマットに従ってＶＲＡＭ１０６ｂに記憶する。例えば１ページ当たり、９枚のサムネイル画像が３×３に２次配列されるようにＶＲＡＭ１０６ｂに記憶する。従って、これによりＬＣＤ表示部２０７に９枚の２次元配列されたサムネイル画像がインデックス表示される。
【０１０２】なお、撮影モードがボケ味調整モード、階調調整モード及び超解像モードである対関係の画像ファイルについては、両画像ファイルに同一のサムネイル画像が記憶されているので、一方の画像ファイルのみからサムネイル画像が読み出される。
【０１０３】インデックス表示されたサムネイル画像に対して再生すべきコマのサムネイル画像が４連スイッチ２０９及びスイッチ群２１０によって指定されると、再生処理部１０８ｆは、そのコマに対応する画像ファイルから撮影画像のデータを読み出し、そのコマが通常撮影モードの場合は、データが圧縮されているので、所定の伸長処理を行なった後、画像メモリ１０３ｆに記憶し、そのコマが通常撮影モードでない場合は、データは圧縮されていないので、そのまま画像メモリ１０３ｆに記憶する。この画像メモリ１０３ｆに読み出されたデータは、上述したように表示制御部１０８ｄによりデータサイズが調整されてＶＲＡＭ１０６ｂに転送され、これによりＬＣＤ表示部２０７に再生表示される。
【０１０４】なお、再生すべきコマがボケ味調整モードで撮影されたコマである場合は、ピントの合っている撮影画像（本実施形態では後述するように２回目に撮影された画像）の画像ファイルから撮影画像のデータが読み出され、階調調整モード及び超解像モードで撮影されたコマである場合は、対応する画像ファイルの内、いずれか一方の画像ファイルから撮影画像のデータが読み出される。
【０１０５】次に、本発明に係るデジタルスチルカメラ１の特殊撮影モードにおける撮影画像のモニタ表示（アフタービュー表示）について説明する。
【０１０６】図１０はボケ味調整モードでの静止画の撮影手順を示すフローチャートである。
【０１０７】ボケ味調整モードにおいて、シャッタボタン２０６が半押しされると（＃１でＹＥＳ）、静止画撮影のための準備が行なわれる。すなわち、絞り１０１ｃの絞り値が開放絞り値（例えばＦ＝２．８）に設定され（＃３）、レンズ１０１の焦点が∞位置に調節される（＃５）。また、ＣＣＤ１０２ａの露光時間が設定され、ホワイトバランス調整が行なわれる（＃７）。
【０１０８】この状態でシャッタボタン２０６が全押しされると（＃９でＹＥＳ）、ＣＣＤ１０２ａをステップ＃７で設定された露光時間だけ露光して被写体の静止画像が取り込まれる（＃１１）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃１３）。この撮影画像はレンズ１０１の焦点を∞位置に調節しているので、画面の広い範囲でピントが合った画像となっている。
【０１０９】続いて、全体制御部１０８の表示制御部１０８ｄにより画像メモリ１０３ｆからＲＡＭ１０８ｂに画像データが読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に表示される（＃１５）。この表示処理は撮影直後に撮影画像をモニタできるようにするためのもので、最初の撮影画像が所定の時間（例えば２秒間）だけ表示される。
【０１１０】最初の撮影画像をモニタ表示しているのは、アフタービュー表示は撮影者が撮影直後に撮影画像の内容を確認し、撮り直しの要否を判断したいという要望を満たすものであるから、撮影者のシャッタ操作の最も近いタイミングで撮影され、しかも最もピント範囲を広くして撮影されている最初の撮影画像を表示させることがアフタービュー表示の目的にそうものと考えられるからである。従って、このようなアフタービュー表示との関係を考慮して、最初の撮影では絞り１０１ｃの絞り値を開放絞り値にして被写界深度を最も浅くするようにしている。
【０１１１】続いて、レンズ１０１の焦点が、例えば被写体距離３ｍに対応する焦点位置に調節され（＃１７）、更にＣＣＤ１０２ａの露光時間が設定されるとともに、ホワイトバランス調整が行なわれる（＃１９）。
【０１１２】そして、ＣＣＤ１０２ａをステップ＃１９で設定された露光時間だけ露光して被写体の静止画像が取り込まれる（＃２１）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃２３）。この撮影画像はレンズ１０１の焦点を被写体距離３ｍに対応する焦点位置に調節しているので、ほぼ画面内の主被写体に対しピントが合っている。
【０１１３】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された最初の撮影画像に対してタグ情報のデータが作成されるとともに、最初の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと最初の撮影画像の画像データとから画像ファイルが作成される。また、メモリカードＭＣにボケ味調整モードでの撮影画像に対するホルダが作成され、このホルダ内に最初の撮影画像の画像ファイルが記憶される（＃２５、図８参照）。
【０１１４】なお、この撮影画像に対するタグ情報の撮影モードには「ボケ味調整モード１／２」(図８参照）のように、ボケ味調整モードで１回目に撮影されたものであることを示す情報が付与される。
【０１１５】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された２回目の撮影画像に対してタグ情報のデータが作成されるとともに、２回目の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと２回目の撮影画像の画像データとから画像ファイルが作成される。そして、この画像ファイルはメモリカードＭＣの最初の撮影画像が格納されたホルダ内に記憶される（＃２７）。これにより撮影処理は終了し、撮影待機状態（ライブビュー画像の表示状態）に戻る。
【０１１６】なお、ボケ味調整モードで撮影された２枚目の撮影画像に付いてもタグ情報の撮影モードには「ボケ味調整モード２／２」のように、ボケ味調整モードで撮影されたものであることを示す情報が付与される。このように撮影モードに関する情報をタグ情報に入れているのは、通常撮影モードの撮影画像と識別するとともに、後述するように画像処理装置でこの画像ファイルが選択されたとき、自動的にボケ味調整処理の処理プログラムを起動して直ちにボケ味調整処理ができるようにするためである。
【０１１７】なお、この実施形態では、最初に遠景側に焦点を合わせた後、２回目に近景側に焦点を合すようにしているが、合焦位置の変更順はこの逆であってもよい。なお、カメラ起動後、ボケ味調整モードで撮影が行なわれる場合、カメラ起動時はフォーカス用レンズ１０１ａが∞位置に初期設定されるので、最初の撮影では遠景側に焦点を合わせる方がフォーカス制御の無駄が無く、合理的である。
【０１１８】また、２回目の撮影では合焦位置をカメラから３ｍの位置に固定しているが、これはボケ味調整処理により任意のピント状態の合成画像が作成されるので、合成前の撮影画像の合焦位置を正確に決定する必要性が低いことと、フォーカス制御の処理時間を出来るだけ短くして連続撮影を迅速に行なえるようにすることを考慮したものであり、合焦位置としてカメラからの距離を他の距離に固定してもよく、ＡＦ処理を行い、正確に主被写体までの距離としてもよい。
【０１１９】図１１は、階調調整モードでの静止画の撮影手順を示すフローチャートである。
【０１２０】階調調整モードにおいて、シャッタボタン２０６が半押しされると（＃３１でＹＥＳ）、静止画撮影のための準備が行なわれる。すなわち、レンズ１０１の焦点が主被写体に調節されるとともに、ライブビュー画像を用いて露出制御値（Ｔｖ，Ａｖ）が算出され、ホワイトバランス調整値が設定される（＃３３）。
【０１２１】この状態でシャッタボタン２０６が全押しされると（＃３５でＹＥＳ）、ステップ＃３３で設定されたシャッタスピードＴｖ(ＥＶ値)より２段階アンダーのシャッタスピード（Ｔｖ−２）が設定され（＃３７）、このシャッタスピードに相当する露光時間だけＣＣＤ１０２ａを露光して被写体の静止画像が取り込まれる（＃３９）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃４１）。この撮影画像はＣＣＤ１０２の露光時間を適正値より短くしているので、全体的に暗い画像となっている。
【０１２２】続いて、ステップ＃３３で設定されたシャッタスピードＴｖ(ＥＶ値)より２段階オーバーのシャッタスピード（Ｔｖ＋２）が設定され（＃４３）、このシャッタスピードに相当する露光時間だけＣＣＤ１０２ａを露光して被写体の静止画画像が取り込まれる（＃４５）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃４７）。この撮影画像はＣＣＤ１０２の露光時間を適正値より長くしているので、全体的に明るい画像となっている。
【０１２３】続いて、全体制御部１０８の表示制御部１０８ｄにより画像メモリ１０３ｆから１回目の撮影画像Ａの画像データと２回目の撮影画像Ｂの画像データとがＲＡＭ１０８ｂに読み出され、両撮影画像の平均濃度を有する画像Ｃ（以下、平均濃度画像Ｃという。）の画像データが作成される（＃４９）。すなわち、撮影画像Ａを構成する画素データをｇa(i,j)（ｉ＝１，２，…ｎ，ｊ＝１,２,…ｍ）、撮影画像Ｂを構成する画素データをｇb(i,j)とすると、ｇc(i,j)＝｛ｇa(i,j)＋ｇb(i,j)｝／２を演算することで平均濃度画像Ｃの画像データが作成される。
【０１２４】この画像データはデータサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に表示される（＃５１）。この表示処理は撮影直後に撮影画像をモニタできるようにするためのもので、平均濃度画像Ｃの表示は所定の時間（例えば２秒間）だけ行われる。
【０１２５】なお、階調調整モードでは、モニタ画像として平均濃度画像Ｃを用いているのは、１回目と２回目の撮影画像の濃度はそれぞれ適正濃度よりそれぞれ−側と＋側にずれており、いずれもモニタ表示には適していないからである。また、平均値演算という簡易演算により正規の画像合成処理に近似した処理画像を作成してアフタービュー表示をさせることで、比較的適正な濃度を有する画像を撮影終了後に速やかにモニタ表示させることができるようにしている。
【０１２６】なお、本実施形態では画像合成処理に近似した処理として平均値演算をしているが、他の簡易演算、例えば最初の撮影画像と２回目の撮影画像との露出のバランスに応じた重みを付加した加重平均演算をするようにしてもよい。
【０１２７】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された最初の撮影画像に対してタグ情報のデータが作成されるとともに、最初の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと最初の撮影画像の画像データとから画像ファイルが作成される。また、メモリカードＭＣに階調調整モードでの撮影画像に対するホルダが作成され、このホルダ内に最初の撮影画像の画像ファイルが記憶される（＃５３、図８参照）。
【０１２８】なお、この撮影画像に対するタグ情報の撮影モードには「階調調整モード１／２」のように、階調調整モードで１回目に撮影されたものであることを示す情報が付与される。
【０１２９】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された２回目の撮影画像に対してタグ情報のデータが作成されるとともに、２回目の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと２回目の撮影画像の画像データとから画像ファイルが作成される。そして、この画像ファイルはメモリカードＭＣの最初の撮影画像が格納されたホルダ内に記憶される（＃５５）。これにより撮影処理は終了し、撮影待機状態（ライブビュー画像の表示状態）に戻る。
【０１３０】なお、階調調整モードで撮影された２枚目の撮影画像に付いてもタグ情報の撮影モードには「階調調整モード２／２」のように、階調調整モードで撮影されたものであることを示す情報が付与される。
【０１３１】この実施形態では、適正な露出制御に対して±２段階だけずらした露出値で連続的に２枚の画像を撮影するようにしているが、適正露出値からのずれ量はこれに限定されるものではない。また、プラス／マイナスのずれ量を異なるようにしてもよく、撮影者がずれ量を設定できるようにしても良い。
【０１３２】図１２は、超解像モードでの静止画の撮影手順を示すフローチャートである。
【０１３３】超解像モードにおいて、シャッタボタン２０６が半押しされると（＃６１でＹＥＳ）、静止画撮影のための準備が行なわれる。すなわち、レンズ１０１の焦点が主被写体に調節されるとともに、ライブビュー画像を用いて露出制御値（Ｔｖ，Ａｖ）が算出され、ホワイトバランス調整値が設定される（＃６３）。
【０１３４】この状態でシャッタボタン２０６が全押しされると（＃６５でＹＥＳ）、ステップ＃６３で設定されたシャッタスピードＴｖに相当する露光時間だけＣＣＤ１０２ａを露光して被写体の静止画像が取り込まれる（＃６７）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃６９）。
【０１３５】続いて、ステップ＃６３で設定されたシャッタスピードＴｖに相当する露光時間だけＣＣＤ１０２ａを露光して再度、被写体の静止画像が取り込まれる（＃７１）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃７３）。この撮影画像は１回目の撮影画像と撮影条件は同じであるが、撮影タイミングが異なるため、１回目の撮影画像に対して撮影アングルが僅かに異なったものとなっている点で相違している。
【０１３６】続いて、全体制御部１０８の表示制御部１０８ｄにより画像メモリ１０３ｆから最初の撮影画像がＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に表示される（＃７５）。この表示処理は撮影直後に撮影画像をモニタできるようにするためのもので、最初の撮影画像のモニタ表示は所定の時間（例えば２秒間）だけ行われる。また、２枚の画像を合成して解像度の高い画像を作成するには処理時間を要し、モニタ表示には適さないので、ステップ＃７５では処理前の撮影画像を直接表示するようにしている。
【０１３７】なお、２回目の撮影（＃７１）をアフタービュー表示（＃７５）より先に行なうことにより、１回目と２回目のカメラアングルの相違が大きくなりすぎることを防止する効果がある。
【０１３８】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された最初の撮影画像に対してタグ情報のデータが作成されるとともに、最初の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと最初の撮影画像の画像データとから画像ファイルが作成される。また、メモリカードＭＣに超解像モードでの撮影画像に対するホルダが作成され、このホルダ内に最初の撮影画像の画像ファイルが記憶される（＃７７、図８参照）。
【０１３９】なお、この撮影画像に対するタグ情報の撮影モードには「超解像モード１／２」のように、超解像モードで１回目に撮影されたものであることを示す情報が付与される。
【０１４０】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された２回目の撮影画像に対してタグ情報のデータが作成されるとともに、２回目の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと２回目の撮影画像の画像データとから画像ファイルが作成される。そして、この画像ファイルはメモリカードＭＣの最初の撮影画像が格納されたホルダ内に記憶される（＃７９）。これにより撮影処理は終了し、撮影待機状態（ライブビュー画像の表示状態）に戻る。
【０１４１】次に、本発明に係るデジタルスチルカメラ１の再生モードにおける表示処理について説明する。
【０１４２】本実施形態では、上述のようにカメラ側で画像合成処理まで行わず、画像合成用に撮影された２枚の撮影画像をホルダに纏めてメモリカードＭＣに記録するようにしているので、再生モードにおける各コマの撮影画像の表示部２０７への再生では、アフタービュー表示と同じ内容の画像が表示されるようになっている。
【０１４３】図１３，図１４は、再生モードにおける表示処理の第１の実施形態を示すフローチャートである。
【０１４４】第１の実施形態に係る再生表示処理は、設定されている撮影モードで撮影されたコマについて記録された順にコマ送りを可能にし（各コマの画像ファイル若しくはフォルダは記録時の時刻が付されて記録媒体に記録されており、この記録時刻順のコマ送りを可能にする）、設定された撮影モードの中で記録順に撮影画像の再生処理を行うものである。すなわち、デジタルスチルカメラ１では通常撮影モード、ボケ味調整モード、階調調整モード及び超解像モードのいずれかの撮影モードが設定されるが、例えば通常撮影モードが設定されていると、再生モードでは通常撮影モードで撮影された画像の中から指定されたコマを画像がＬＣＤ表示部２０７に再生表示され、ボケ味調整モードが設定されていると、再生モードではボケ味調整モードで撮影された画像の中か指定されたコマの画像がＬＣＤ表示部２０７に再生表示されるようになっている。
【０１４５】この再生処理は、撮影モードが分かっているとき、その撮影モードで撮影されたコマの中から所望のコマを検索して再生させる際の操作性を考慮したものである。撮影者は記録モードで撮影モードを所望の撮影モード（例えばボケ味調整モード）に設定した後、再生モードに切り換えれば、その撮影モード（ボケ味調整モード）で撮影された画像の中から比較的早く所望のコマを検索してＬＣＤ表示部２０７に再生表示させることができる。
【０１４６】第１の実施形態に係る再生表示処理では、再生モードが設定されると、まず、設定されている撮影モードが判別され（＃８１，＃９３，＃１０５）、ボケ味調整モードが設定されていると（＃８１でＹＥＳ）、ボケ味調整モードで撮影されたコマの中から最初にボケ味調整モードで撮影されたコマのフォルダが検索される（＃８３）。そして、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃８５）。
【０１４７】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃８７でＹＥＳ）、その操作に応じてボケ味調整モードで撮影されたコマの中からで順次、コマが送られて各フォルダに含まれる１回目の撮影画像がＬＣＤ表示部２０７に再生表示される（＃８５，＃８７，＃８９のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃８７でＮＯ）、その操作に対応した処理が行なわれる（＃８７，＃９１のループ）。
【０１４８】階調調整モードが設定されていると（＃８１でＮＯ，＃９３でＹＥＳ）、階調調整モードで撮影されたコマの中から最初に階調調整モードで撮影されたコマが検索され（＃９５）、そのコマのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像と２回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、両サムネイル画像のデータの平均演算により平均濃度画像が作成される。そして、この平均濃度画像はデータサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃９７）。
【０１４９】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃８７でＹＥＳ）、その操作に応じて階調調整モードで撮影されたコマの中から順次、コマが送られて各コマのサムネイル画像により作成された平均濃度画像がＬＣＤ表示部２０７に再生表示される（＃９７，＃９９，＃１０１のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃９９でＮＯ）、その操作に対応した処理が行なわれる（＃９９，＃１０３のループ）。
【０１５０】超解像モードが設定されていると（＃８１，＃９３でＮＯ，＃１０５でＹＥＳ）、超解像モードで撮影されたコマの中から最初に超解像モードで撮影されたコマが検索され（＃１０７）、そのコマのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１０９）。
【０１５１】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃１１１でＹＥＳ）、その操作に応じて超解像モードで撮影されたコマの中から順次、コマが送られて各コマのフォルダに含まれる１回目の撮影画像がＬＣＤ表示部２０７に再生表示される（＃１０９，＃１１１＃１１３のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃１１１でＮＯ）、その操作に対応した処理が行なわれる（＃１１１，＃１１５のループ）。
【０１５２】通常撮影モードが設定されていると（＃８１，＃９３，＃１０５でＮＯ）、通常撮影モードで撮影された画像ファイルの中から最初に通常撮影モードで撮影された画像ファイルが検索され（＃１１７）、その画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１１９）。
【０１５３】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃１２１でＹＥＳ）、その操作に応じて通常撮影モードで撮影された画像ファイルの中から順次、コマが送られて各々、サムネイル画像がＬＣＤ表示部２０７に再生表示される（＃１１９，＃１２１，＃１２３のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃１２１でＮＯ）、その操作に対応した処理が行なわれる（＃１２１，＃１２５のループ）。
【０１５４】図１５は、再生モードにおける表示処理の第２の実施形態を示すフローチャートである。
【０１５５】第２の実施形態に係る再生表示処理は、撮影モードに関係なく記録媒体に記録された順番にコマ送りを可能にし、記録順に画像ファイルもしくはフォルダの再生表示を行うものである。この実施形態では、第１の実施形態のように撮影モードを切り換えることなく全てのコマを検索することができる利点がある。
【０１５６】第２の実施形態に係る再生表示処理では、再生モードが設定されると、まず、全てのコマの中から最初に記録媒体に記録されたコマが検索される（＃１３１）。続いて、そのコマがフォルダであるか否か（特殊撮影モードで撮影されたコマであるか否か）が判別され（＃１３３）、最初のコマがフォルダであれば（＃１３３でＹＥＳ）、そのフォルダに含まれる１回目の撮影画像の画像ファイルからタグ情報が読み込まれ（＃１３５）、最初のコマが画像ファイルであれば（＃１３３でＮＯ）、その画像ファイルからタグ情報が読み込まれる（＃１３７）。
【０１５７】続いて、読み出したタグ情報から撮影モードが判別され（＃１３９，＃１４３，＃１４７）、そのコマの撮影モードがボケ味調整モードであれば（＃１３９でＹＥＳ）、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１４１）。
【０１５８】また、そのコマの撮影モードが階調調整モードであれば（＃１３９でＮＯ，＃１４３でＹＥＳ）、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像と２回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、両サムネイル画像のデータの平均演算により平均濃度画像が作成される。そして、この平均濃度画像はデータサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１４５）。
【０１５９】また、そのコマの撮影モードが超解像モードであれば（＃１３９，＃１４３でＮＯ，＃１４７でＹＥＳ）、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１４９）。
【０１６０】また、そのコマの撮影モードが通常撮影モードであれば（＃１３９，＃１４３，＃１４７でＮＯ）、その画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１５１）。
【０１６１】そして、この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃１５３でＹＥＳ）、ステップ＃１３１に戻り、その操作に応じて記録順の先のコマもしくは記録順の後のコマが検索され、そのコマについてタグ情報に基づき撮影モードの判別（＃１３５〜＃１３９，＃１４３，＃１４７）とその判別結果に基づく撮影モードに対応した再生処理（＃１４１，＃１４５，＃１４９，＃１５１）とが行われる。
【０１６２】一方、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃１５３でＮＯ）、その操作に対応した処理が行なわれる（＃１５３，＃１５５のループ）。
【０１６３】上記のように、本実施形態に係るデジタルスチルカメラ１では、ボケ味調整モードにおいては最初の撮影画像が画像メモリ１０３ｆに格納された時点で、また、超解像モードにおいては２枚の撮影画像が画像メモリ１０３ｆに格納された時点で最初の撮影画像をＬＣＤ表示部２０７にモニタ表示させるようにしているので、露光動作の終了後、比較的早く撮影画像をモニタ表示させることができる。
【０１６４】特に最初の撮影画像をモニタ表示させるようにしているので、撮影者はシャッタチャンスとして撮影した画像に最も近い画像を確認することができる。また、ボケ味撮影モードでは最初の撮影で被写界深度を最も深くし、ピントの合う範囲が最も広い画像を撮影するようにしているので、ピントずれの画像がモニタ表示されてアフタービュー表示の効果を低下させることもない。
【０１６５】また、階調調整モードにおいては２枚の撮影画像が画像メモリ１０３ｆに格納された時点で、平均演算により両撮影画像の平均濃度を有する画像を作成し、その平均濃度画像をＬＣＤ表示部２０７にモニタ表示させるようにしているので、露光動作の終了後、比較的早く、適正な階調特性を有する撮影画像をモニタ表示させることができる。
【０１６６】再生モードでは、撮影モード単位で撮影コマの画像を表示させるようにしているで、予め撮影モードが分かっている場合は、撮影モードを指定することで所望の撮影コマを迅速に検索して再生することができる。また、アフタービュー表示と同様に、特殊撮影モードで撮影されたコマの再生は２枚の撮影画像のうち、１の撮影画像を再生させるようにしているので、すなわち、撮影モードに関係なく各コマに対して１の画像を表示させるようにしているので、コマ送りをした場合にも撮影コマと撮影内容とが相違することがない。
【０１６７】ところで、上記実施形態では、特殊撮影モードで撮影された画像の再生表示は、ホルダに格納された２個の画像ファイルのうち、１の画像ファイルに含まれるサムネイル画像を表示したり、両画像ファイルに含まれる２枚のサムネイル画像の簡単な合成演算により得られる合成画像をＬＣＤ表示部２０７に表示させるようにしていたが、特殊撮影モードで撮影されたコマの撮影画像について画像ファイルを作成する際、図１６に示すように表示用の画像ファイルを別途作成して両画像ファイルを記録媒体に記録しておき、再生モードでは、指定されたコマの表示用の画像ファイルを開いて画像を再生するようにしてもよい。
【０１６８】なお、図１６において、画像ファイル名「１ｂ．ＴＨＭ」は、ボケ味調整モードで撮影された最初のコマに対する表示用の画像の画像ファイルを示し、画像ファイル名「２ｂ．ＴＨＭ」は、ボケ味調整モードで撮影された２番目のコマに対する表示用の画像の画像ファイルを示している。また、画像ファイル名の「ＴＨＭ」は、ファイルの内容がサムネイル画像であることを示している。画像ファイル「１ｂ．ＴＨＭ」には、ホルダ「１ｂ」に含まれる最初の撮影画像の画像ファイル「Ｐ０００００１．ＴＩＦ」に含まれるサムネイル画像の画像データと同一の画像データが格納されている。
【０１６９】同様に画像ファイル名「１ｔ．ＴＨＭ」は、階調調整モードで撮影された最初のコマに対する表示用の画像の画像ファイルを示している。画像ファイル「１ｔ．ＴＨＭ」には、ホルダ「１ｔ」内の２個の画像ファイル「Ｐ０００００５．ＴＩＦ」，「Ｐ０００００５．ＴＩＦ」にそれぞれ含まれる２枚のサムネイル画像を用いて簡単な合成演算により作成された表示用の合成画像と同一の画像データが格納されている。
【０１７０】なお、本実施形態では、超解像モードや通常撮影モードについては、ファイル自身に含まれるサムネイル画像で表示されるため、表示用の画像の画像ファイルは設けていない。
【０１７１】図１７は、ボケ味調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【０１７２】同図は、図１０のフローチャートにおいて、ステップ＃２５とステップ＃２７との間にホルダ「Ｎｂ」に格納された最初の撮影画像の画像ファイル「ＰＸ．ＴＩＦ」に含まれるサムネイル画像と同一のサムネイル画像について別の画像ファイル「Ｎｂ．ＴＨＭ」を作成し、この画像ファイル「Ｎｂ．ＴＨＭ」をホルダ「Ｎｂ」に格納する処理を挿入したものである。なお、このフローチャートの他のステップの処理内容は、図１０のフローチャートと同一であるから、ここでは説明を省略する。
【０１７３】また、図１８は、階調調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【０１７４】同図は、図１１のフローチャートにおいて、ステップ＃５５の後にステップ＃４９で作成された平均濃度を有するサムネイル画像について別の画像ファイル「Ｎｔ．ＴＨＭ」を作成し、この画像ファイル「Ｎｔ．ＴＨＭ」を階調調整モードで撮影された２枚の撮影画像の画像ファイルが格納されたホルダ「Ｎｔ」に格納する処理を挿入したものである。なお、ステップ＃５７の処理は、ステップ＃５３とステップ＃５５との間に挿入してもよい。このフローチャートの他のステップの処理内容は、図１１のフローチャートと同一であるから、ここでは説明を省略する。
【０１７５】図１９，図２０は、特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第１の実施形態を示すフローチャートである。
【０１７６】同図は、図１３，図１４のフローチャートにおいて、ステップ＃８３とステップ＃８７との間に表示用の画像の画像ファイル（以下、この画像ファイルをサムネイルファイルという。）の有無を判別する処理ステップ＃８４−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃８４−２を、また、ステップ＃９５とステップ＃９７との間にサムネイルファイルの有無を判別する処理ステップ＃９６−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃９６−２を挿入したものである。
【０１７７】このフローチャートでは、ボケ味調整モードで再生が指示されたコマ（再生モード設定時の初期設定コマを含む）に対してホルダ内にサムネイルファイルが存在するか否かが判別され（＃８４−１）、サムネイルファイルが存在すれば（＃８４−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（サムネイル画像）がＬＣＤ表示部２０７に表示され（＃８４−２）、サムネイルファイルが存在しなければ（＃８４−１でＮＯ）、ホルダ内の最初の撮影画像の画像ファイルに含まれるサムネイル画像がＬＣＤ表示部２０７に表示される（＃８５）。
【０１７８】また、階調調整モードで再生が指示されたコマ（再生モード設定時の初期設定コマを含む）に対してホルダ内にサムネイルファイルが存在するか否かが判別され（＃９６−１）、サムネイルファイルが存在すれば（＃９６−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して作成された平均濃度を有するサムネイル画像）がＬＣＤ表示部２０７に表示され（＃９６−２）、サムネイルファイルが存在しなければ（＃９６−１でＮＯ）、ホルダ内の最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して表示用の平均濃度を有するサムネイル画像を作成し、そのサムネイル画像がＬＣＤ表示部２０７に表示される（＃９４）。
【０１７９】図２１，図２２は、特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第２の実施形態を示すフローチャートである。
【０１８０】同図は、図１５のフローチャートにおいて、ステップ＃１３９とステップ＃１５３との間にサムネイルファイルの有無を判別する処理ステップ＃１４０−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃１４０−２を、また、ステップ＃１４３とステップ＃１５３との間にサムネイルファイルの有無を判別する処理ステップ＃１４４−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃１４４−２を挿入したものである。
【０１８１】このフローチャートでは、ボケ味調整モードで撮影されたコマの再生が指示されると（＃１３９でＹＥＳ）、そのホルダ内にサムネイルファイルが存在するか否かが判別され（＃１４０−１）、サムネイルファイルが存在すれば（＃１４０−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（サムネイル画像）がＬＣＤ表示部２０７に表示され（＃１４０−２）、サムネイルファイルが存在しなければ（＃１４０−１でＮＯ）、ホルダ内の最初の撮影画像の画像ファイルに含まれるサムネイル画像がＬＣＤ表示部２０７に表示される（＃１４１）。
【０１８２】また、階調調整モードで撮影されたコマの再生が指示されると（＃１４３でＹＥＳ）、そのホルダ内にサムネイルファイルが存在するか否かが判別され（＃１４４−１）、サムネイルファイルが存在すれば（＃１４４−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して作成された平均濃度を有するサムネイル画像）がＬＣＤ表示部２０７に表示され（＃１４４−２）、サムネイルファイルが存在しなければ（＃１４４−１でＮＯ）、ホルダ内の最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して表示用の平均濃度を有するサムネイル画像を作成し、そのサムネイル画像がＬＣＤ表示部２０７に表示される（＃１４５）。
【０１８３】この実施形態では、各撮影画像の画像ファイルに含まれるサムネイル画像とは別に表示用のサムネイル画像の画像ファイルを作成しているので、再生モードでの再生処理を迅速に行なうことができる。また、操作ミスにより表示用の画像の画像ファイルを消失した場合にも画像ファイルに含まれるサムネイル画像を用いて再生モードでの再生処理を行なうことができる利点がある。
【０１８４】次に、特殊撮影モードで撮影された２枚の撮影画像を用いて画像合成を行なう画像処理装置について簡単に説明する。
【０１８５】図２３は、特殊撮影モードで撮影された２枚の撮影画像について特殊撮影モードに応じた画像合成処理を行なう画像処理装置の構成を示す外観図である。
【０１８６】同図に示す画像処理装置６は、パーソナルコンピュータ７とその出力装置であるプリンタ８とで構成されている。
【０１８７】パーソナルコンピュータ７（以下、パソコン７という。）は、ＦＤドライバ７０１ａ、メモリカードリーダ７０１ｂ及びＣＤ−ＲＯＭドライバ７０１ｃを備えたコンピュータ本体７０１（以下、パソコン本体７０１という。）とＣＲＴ若しくはＬＣＤからなるディスプレイ７０２とキーボード７０３とマウス７０４とで構成されている。
【０１８８】パソコン７は、ボケ味調整モードで撮影された２枚の撮影画像を合成して所望のボケ具合を有する撮影画像を作成するための処理プログラム（以下、ボケ味調整処理プログラムという。）、階調調整モードで撮影された２枚の撮影画像を合成して所望の階調を有する撮影画像を作成するための処理プログラム（以下、階調調整処理プログラムという。）及び超解像モードで撮影された２枚の撮影画像を合成して解像度の高い撮影画像を作成するための処理プログラム（以下、超解像処理プログラムという。）等の画像合成用の処理プログラムが記録されたＣＤ−ＲＯＭ９をＣＤ−ＲＯＭドライバ７０１ｃに装着し、この画像合成用の処理プログラムをパソコン本体７０１内のハードディスク（主記憶装置）にインストールすることにより画像処理装置として機能する。
【０１８９】なお、本実施形態では、ＣＤ−ＲＯＭ９に記録された処理プログラムをコンピュータ７にインストールすることにより画像処理装置を構成するようにしているが、予め装置本体の主記憶装置に処理プログラムが記憶された専用の画像処理装置であってもよい。
【０１９０】画像合成用の処理プログラムによる２枚の撮影画像の合成処理手順や合成された画像（ボケ具合や階調が調整された画像若しくは高解像度の画像）は、ディスプレイ７０２に表示される。また、合成後の画像はプリンタ８によってハードコピーを作成することができる。
【０１９１】次に、画像処理装置６における画像合成処理について説明する。
【０１９２】図２４は、画像合成用の処理プログラムを起動するための処理手順を示すフローチャートである。
【０１９３】ボケ味調整処理プログラム、階調調整処理プログラム及び超解像処理プログラムの各処理プログラムは、各処理プログラムに対応する撮影モードで撮影された画像の画像ファイルを備えたフォルダが指定されると、それに連動して起動されるようになっている。
【０１９４】例えば、キーボード７０３若しくはマウス７０４の操作により上記各撮影モードで撮影後のメモリカードＭＣへのアクセスが指示され、上記各撮影モードで撮影された画像が格納されたフォルダを指定する、又はフォルダ内の画像ファイルを示すアイコンにカーソルを移動させ、そのアイコンの画像ファイルを開く指示が入力されると、メモリカードＭＣに記憶された当該画像ファイルからタグ情報がパソコン本体７内に読み込まれ（＃１６１）、そのタグ情報内の撮影モードの内容が判別される（＃１６３，＃１６７，＃１７１）。
【０１９５】撮影モードがボケ味調整モードであれば（＃１６３でＹＥＳ）、ボケ味調整処理プログラムが起動され（＃１６５）、撮影モードが階調調整モードであれば（＃１６７でＹＥＳ）、階調調整処理プログラムが起動され（＃１６９）、撮影モードが超解像モードであれば（＃１７１でＹＥＳ）、超解像処理プログラムが起動され（＃１７３）、撮影モードが通常撮影モードであれば（＃１７１でＮＯ）、通常の撮影画像を対象とする上記処理プログラム以外の所定の処理プログラム、例えば画像補正用の処理プログラムが起動される（＃１７５）。
【０１９６】次に、画像処理装置６で行なわれるボケ味調整処理、階調調整処理及び超解像処理の概要について簡単に説明する。
【０１９７】ボケ味調整モード、階調調整モード及び超解像モードで連続的に撮影された２枚の撮影画像は、レジストレーション処理（位置合わせ処理）を行った後、両撮影画像の重なる部分について画素位置毎に両撮影画像のデータを用いて所定の演算処理を行って合成される。
【０１９８】レジストレーション処理は、画像合成処理において画面内の同一の図柄を正確に合成するため、合成対象となる２枚の画像の位置を合わせるものである。レジストレーション処理では、例えば一方の撮影画像Ａを基準にして他方の撮影画像Ｂを平行移動しつつ両撮影画像Ａ，Ｂを照合して、両撮影画像Ａ，Ｂが一致する撮影画像Ｂの平行移動量が算出される。一方の撮影画像Ａに対する他方の撮影画像Ｂの一致度は、例えば撮影画像Ｂの平行移動量を引数とする両撮影画像Ａ，Ｂのデータのレベル差の絶対値の総和（相関関数）が最小となる平行移動量が撮影画像Ｂを撮影画像Ａに一致させるための移動量（すなわち、位置ずれ量）として算出される。
【０１９９】ボケ味調整処理及び階調調整処理では、レジストレーション処理後に両撮影画像Ａ，Ｂの重なる部分について、画素位置（ｋ，ｈ）毎に撮影画像Ａの画素データＤA(k,h)と撮影画像Ｂの画素データＤB(k,h)とを用いて所定の演算処理を行なってボケ味、階調の調整された画像の画素データのＤC(k,h)が算出される。ボケ味調整処理では、例えばセグメント法、反復法、逆フィルタなどの周知の種々の演算方法を適用することができる。また、階調調整処理では、例えば加重平均演算などの演算方法が適用される。
【０２００】また、超解像処理では、撮影画像Ａ，Ｂについてそれぞれデータの補間処理が行なわれた後、レジストレーション処理が行なわれ、その後、両撮影画像Ａ，Ｂの重なる部分について、画素位置（ｋ，ｈ）毎に撮影画像Ａの画素データＤA(k,h)と撮影画像Ｂの画素データＤB(k,h)とを用いて所定の演算処理（例えば平均演算や加重平均演算など）を行なって超解像化された画像の画素データのＤC(k,h)が算出される。
【０２０１】上記実施形態では、デジタルスチルカメラ１で上述の画像合成処理は行なわないようにしていたが、デジタルスチルカメラ１で画像合成処理まで行い、再生モードではその合成処理後の画像をＬＣＤ表示部２０７に表示させるようにしてもよい。
【０２０２】この場合は、合成後の画像に間引き処理を行なって表示用の画像（サムネイル画像）を作成し、このサムネイル画像を撮影画像の画像ファイルとは別に表示用の画像ファイル（サムネイルファイル）に格納する。そして、再生モードでは図１９〜図２２に示すフローチャートに従い、サムネイルファイルが存在する場合は、このサムネイルファイルから合成後の画像のサムネイル画像をＬＣＤ表示部２０７に表示する。このとき、図２５に示すように、このサムネイル画像の表示に重ねて合成処理の内容を示す情報を表示させるとよい。同図の例では、超解像処理が行なわれた日の出の撮影画像がＬＣＤ表示部２０７に表示され、その表示画面の左下部に「超解像」の文字が表示されている。ＬＣＤ表示部２０７の画素数は撮影画像の画素数よりも非常に少ないので、合成処理の効果が再生表示された画像の画質で認識することが難しいが、処理内容が表示されるので操作者は容易にどのような撮影モードで撮影された画像であるかを確認することができる。
【０２０３】
【発明の効果】以上説明したように、本発明によれば、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、特殊撮影モードで撮影された複数枚の撮影画像は、画像合成処理をすることなく、いずれか１の撮影画像を表示手段に表示するようにしたので、撮影者は撮影した後に直ちに撮影内容を確認することができる。
【０２０４】特に特殊撮影モードで撮影された複数枚の撮影画像がボケ味調整用に撮影されたものである場合、最もピントの合っている範囲が広い撮影画像を表示させるようにしたので、撮影内容の不明瞭な撮影画像が表示されることが少ない。
【０２０５】また、特殊撮影モードで撮影された複数枚の撮影画像が超解像用に撮影された者である場合、撮影画像のうち、最初に撮影された撮影画像を表示させるようにしたので、表示処理を迅速に行なうことができる。
【０２０６】また、上記デジタルスチルカメラにおいて、複数枚の撮影画像をそれぞれ記録媒体に記録し、再生モードにおいて、この記録媒体に記録された特殊撮影モードでの撮影画像を再生する際、連続撮影された複数枚の撮影画像のうち、１の撮影画像を表示手段に再生表示するようにしたので、例えばコマ送りにより各撮影画像を再生させる場合、同じ内容の撮影画像が連続的に再生されることで、その撮影画像が通常の撮影モードで撮影された画像なのか、特殊モードで撮影された画像なのか混乱することがない。
【０２０７】この場合、最初に撮影された撮影画像を表示させるようにしたので、撮影者が求めるシャッタチャンスに最も近い撮影画像を表示させることができる。
【０２０８】また、本発明によれば、上記デジタルスチルカメラにおいて、連続撮影された複数枚の撮影画像を用いて所定の画像合成処理に近似した画像合成処理を行なって表示用の画像を作成し、その画像を表示手段に表示させるようにしたので、例えば階調調整処理のように各撮影画像が表示画像として適正でない場合も表示画像としてより適正な画像を比較的短時間で表示させることができ、表示目的を損なうことがない。
【０２０９】また、表示用の画像は各撮影画像とは別の画像ファイルで記録媒体に記録するようにしたので、再生モードでの再生処理ではこの画像ファイルを開いて表示用の画像を再生表示させることにより、迅速に再生表示を行なうことができる。
【０２１０】また、上記デジタルスチルカメラにおいて、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を表示手段に再生表示するようにしたので、迅速に撮影画像の再生表示を行なうことができる。なお、表示用の画像が壊れている場合は、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を表示させるようにしたので、撮影画像の再生ができないという不都合がなくなる。
【０２１１】また、本発明によれば、上記デジタルスチルカメラにおいて、連続撮影された複数枚の撮影画像を用いて表示用の画像を作成し、各撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、これらの画像ファイルを記録媒体に記録する一方、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を表示手段に再生表示するようにしたので、再生の際、画像合成処理の内容に適した画像の表示が可能となる。
【０２１２】また、再生が指示された撮影画像に対応する表示用の画像とこの画像に対応する画像合成処理の内容を示す情報とを表示手段に表示させるようにしたので、表示画像がどのような画像合成処理を行なわれたものであるかを容易に確認することができる。
【０２１３】また、特殊撮影モードとして複数種類のモードがある場合、再生モードでいずれかの１の特殊撮影モードが選択されると、当該特殊撮影モードでの撮影画像の中から指定された撮影画像に対応する表示用の画像を表示手段に表示させるようにしたので、同一の画像合成処理がなされた撮影画像に絞って再生させたい場合、再生コマを選択する操作性が向上する。
【図面の簡単な説明】
【図１】 本発明に係るデジタルスチルカメラのカメラ本体の正面図である。
【図２】 同デジタルスチルカメラの主要部材の配置を示す図である。
【図３】 同デジタルスチルカメラに内蔵された主要部材の配置を示す右側面図である。
【図４】 同デジタルスチルカメラの背面図である。
【図５】 カラー撮像素子の撮像面の構成を示す図である。
【図６】 撮影モードの選択方法を説明するための図である。
【図７】 デジタルスチルカメラの内部構成を示すブロック図である。
【図８】 メモリカードに記録された画像ファイルの構成例を示す図である。
【図９】 メモリカードへの画像ファイルの記録方法を示す図である。
【図１０】 ボケ味調整モードでの撮影手順を示すフローチャートである。
【図１１】 階調調整モードでの撮影手順を示すフローチャートである。
【図１２】 超解像モードでの撮影手順を示すフローチャートである。
【図１３】 再生モードにおける表示処理の第１の実施形態を示すフローチャートである。
【図１４】 再生モードにおける表示処理の第１の実施形態を示すフローチャートである。
【図１５】 再生モードにおける表示処理の第２の実施形態を示すフローチャートである
【図１６】 メモリカードに記録された画像ファイルの他の構成例を示す図である。
【図１７】 ボケ味調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【図１８】 階調調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【図１９】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第１の実施形態を示すフローチャートである。
【図２０】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第１の実施形態を示すフローチャートである。
【図２１】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第２の実施形態を示すフローチャートである。
【図２２】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第２の実施形態を示すフローチャートである。
【図２３】 画像処理装置の構成を示す外観図である。
【図２４】 画像合成用の処理プログラムを起動するための処理手順を示すフローチャートである。
【図２５】 合成処理後の画像と合成処理の内容とを重ねて再生表示した一例を示す図である。
【符号の説明】
１ デジタルスチルカメラ
１０１ レンズ
１０２ 撮像部
１０３ 信号処理部
１０４ 発光制御部
１０５ レンズ制御部
１０６ 表示部
１０７ 操作部
１０８ カードＩ／Ｆ
１０８ 全体制御部
１０８ａ ＲＯＭ
１０８ｂ ＲＡＭ
１０８ｃ 露出値演算部
１０８ｄ 表示制御部（表示制御手段，表示画像作成手段）
１０８ｅ 記録制御部（記録手段）
１０８ｆ 再生制御部（再生制御手段）
１０８ｇ 特殊露光制御部
１０９ カードインターフェース
１１０ 通信用インターフェース
２ カメラ本体
２０５ カラー撮像素子
２０６ シャッタボタン
２０７ ＬＣＤ表示部（表示手段）
２０８ 電源スイッチ
２０９ ４連スイッチ
２１０ スイッチ群
３ 交換レンズ
４ 電子ビューファインダ（表示手段）
５ フラッシュ
ＭＣ メモリカード
【０００１】
【発明の属する技術分野】本発明は、同一の被写体に対して少なくとも２回連続撮影を行ない、この連続撮影によって得られた複数枚の撮影画像を所定の画像合成処理で合成して画質を改善したり、映像効果を高めた画像を得ることのできるデジタルスチルカメラに関する。
【０００２】
【従来の技術】近年、デジタルスチルカメラの技術分野においては、連続して撮影した複数枚の撮影画像を所定の画像処理を行なった後、合成することで、各撮影画像よりも画質や映像効果を高めた画像を得ることのできるデジタルスチルカメラが商品化されている。
【０００３】例えばビクター社製のデジタルスチルカメラ「ＧＣ−Ｘ１“ＰＩＸＳＴＥＲ”」は、撮像素子を微小変位させて連続して２回撮影を行い、両撮影画像を合成することで解像度の高い撮影画像を得ることができる機能を備えている。また、このデジタルスチルカメラは、被写体の明るい部分と暗い部分とに合わせて２種類の露出制御値を設定し、それらの露出制御値で連続して２回撮影を行い、両撮影画像を合成することで暗い部分から明るい部分まで適切な濃度の撮影画像を得ることができる機能も備えている。
【０００４】
【発明が解決しようとする課題】近年、デジタルスチルカメラに適用される撮像素子の高画素化が進み、２００万〜３００万画素の撮像素子を用いたものも商品化されているが、このような高密度の撮像素子を用いたデジタルスチルカメラに上述の画像合成機能を設けた場合、画質及び映像効果の高い画像が得られるという優れた価値をデジタルスチルカメラに付加するができる。
【０００５】しかし、撮影画像のデータ数が増大すると、画像合成処理の時間が長くなり、合成結果がなかなか得られないという不都合が生じる。デジタルスチルカメラの場合、撮影した直後にその場で撮影画像を表示部に表示させて確認ができることが望ましいが、画像合成を目的として連続撮影される複数枚の撮影画像については、例えば合成画像を表示部に表示させる場合、画像合成処理に長時間を要するため、撮影直後に直ちに合成画像を表示部に表示させることは困難であった。
【０００６】本発明は、上記課題に鑑みてなされたものであり、画像合成用に撮影された複数枚の画像の内容を撮影後に直ちに確認することのできるデジタルスチルカメラを提供するものである。
【０００７】
【課題を解決するための手段】本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に表示する表示制御手段とを備えたものである（請求項１）。
【０００８】この構成によれば、特殊撮影モードで撮影された複数枚の撮影画像は、画像合成処理をすることなく、いずれか１の撮影画像が表示手段に表示されるので、撮影者は撮影直後に撮影内容を確認することができる。
【０００９】なお、上記所定の画像合成処理が、ピントのボケ具合の異なる複数枚の撮影画像を合成してピントのボケ具合が調整された１の画像を作成するボケ味調整処理である場合は、上記撮影画像のうち、最もピントの合っている範囲が広い撮影画像を上記表示手段に表示するとよい（請求項２）。
【００１０】また、その場合、ピントのボケ具合の異なる複数枚の撮影画のうち、最もピントの合っている範囲が広い撮影画像を最初に撮影するようにするとよい（請求項３）。
【００１１】ボケ味調整処理のために撮影される複数枚の撮影画像はそれぞれボケ具合が異なっているから、任意の１枚を表示すると、撮影内容の不明瞭な撮影画像が表示されるおそれがあるが、最もピントの合っている範囲が広い撮影画像を表示させることで、そのような不都合が回避される。
【００１２】また、ボケ味調整処理用の撮影処理では、それぞれ所定の被写体距離に焦点調節を行なって露光動作を行なう必要があるが、最もピントの合っている範囲が広い撮影画像を最初に撮影することで（すなわち、最初の撮影のために必要な焦点調節期間を２回目以降の各撮影に必要な焦点調節期間よりも短くすることで）、２回目以降の各撮影のために生じる焦点調節期間を有効に活用することができる。従って、全体的な撮影処理の時間を短くすることができ、撮影開始から撮影内容確認用の画像表示までの時間を短くすることができる。
【００１３】また、上記所定の画像合成処理が複数枚の撮影画像を合成して当該撮影画像よりも解像度の高い１の画像を作成する超解像処理の場合、上記撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示するとよい（請求項４）。
【００１４】超解像処理は、連続撮影の間に僅かに生じるカメラアングルの変化を利用して被写体に対する撮影位置が僅かに異なる複数枚の撮影画像を取得し、これらの撮影画像を合成して超解像画像を得るものである。超解像処理のために撮影では、基本的に撮影条件を変更することなく連続撮影が行なわれるため、各撮影画像の内容は殆ど同じである。従って、最初に撮影された撮影画像を表示させることで、撮影者がシャッタ操作した被写体に最も近い撮影画像（すなわち、撮影者が撮影しようとした画像）を表示させることができる。
【００１５】また、撮影画像確認用の表示は、連続した露光動作の終了後で、且つ、複数枚の撮影画像に対して所定の処理（例えばこれら撮影画像の画像合成処理や撮影画像若しくは合成画像の記録媒体への記録処理等）が行なわれる前に行なうとよい（請求項５，６，７）。
【００１６】複数枚の撮影画像を取り込んだ後、これらの撮影画像の画像合成処理や記録媒体への記録処理の前に１の撮影画像を確認用に表示させるので、可及的に撮影直後に撮影内容を確認することができる。
【００１７】また、本発明は、請求項１記載のデジタルスチルカメラにおいて、上記複数枚の撮影画像をそれぞれ記録媒体に記録する記録手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に再生表示する再生制御手段とを更に備えたものである（請求項８）。なお、上記１の撮影画像は最初に撮影された撮影画像にするとよい（請求項９）。
【００１８】上記構成によれば、特殊撮影モードで撮影された画像を再生モードで再生して撮影内容を確認する場合、連続撮影された複数枚の撮影画像のうち、１の撮影画像だけが再生表示されるので、例えばコマ送りにより各撮影画像を再生させる場合、同じ内容の撮影画像が連続的に再生されることで、その撮影画像が通常の撮影モードで撮影された画像なのか、特殊モードで撮影された画像なのか混乱することがない。
【００１９】また、特殊撮影モードで撮影された画像を再生する際、最初に撮影された撮影画像（すなわち、撮影時に撮影者がシャッタ操作をしたタイミングに最も近い撮影画像）を表示させることで、撮影者の求める撮影内容を表示させることができる。
【００２０】また、本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像を用いて上記所定の画像合成処理に近似した画像合成処理を行なって表示用の画像を作成する表示画像作成手段と、上記表示画像作成手段で作成された画像を上記表示手段に表示する表示制御手段とを備えたものである（請求項１０）。
【００２１】なお、上記所定の画像合成処理は、例えば階調の異なる複数枚の撮影画像を合成して当該撮影画像の階調を調整した１の画像を作成する階調調整処理である（請求項１１）。また、上記表示用の画像を各撮影画像とは別に画像ファイルを作成して、各撮影画像の画像ファイルとともに、記録媒体に記録するとよい（請求項１２）。
【００２２】上記構成によれば、特殊撮影モードで撮影された複数枚の撮影画像は、これらの撮影画像を用いて所定の画像合成処理に近似した画像合成処理を行なって作成された表示用の画像が表示手段に表示される。例えば階調調整処理の場合、複数枚の撮影画像は互いに位置合わせが行なわれた後、各撮影画像の対応する画素位置毎にデータを所定の演算式で演算処理して合成画像のデータが作成されるが、平均値演算等の簡単な近似演算により表示用の画像が作成され、その表示用の画像が表示手段に表示される。
【００２３】階調調整用の各撮影画像はそれぞれ適正な階調で撮影されていないので、それらは撮影内容の確認には適さないが、比較的短い処理時間で表示用の画像（撮影内容の確認に適した画像）が作成されるので、撮影後に比較的短時間で撮影内容確認用の画像を表示させることができる。
【００２４】また、表示用の画像は各撮影画像とは別の画像ファイルで記録媒体に記録されるので、再生モードでの再生処理では、この画像ファイルを開いて表示用の画像を再生表示させることにより、迅速に再生表示を行なうことができる。
【００２５】また、上記表示用の画像の上記表示手段への表示は、複数枚の撮影画像の画像ファイルが上記記録媒体に記録される前に行なうとよい（請求項１３）。
【００２６】この構成では、複数枚の撮影画像を取り込んだ後、これらの撮影画像の画像合成処理や記録媒体への記録処理の前に表示用の画像を表示させるので、可及的に撮影直後に撮影内容を確認することができる。
【００２７】また、本発明は、請求項１２記載のデジタルスチルカメラにおいて、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段を更に備えたものである（請求項１４）。
【００２８】なお、上記デジタルスチルカメラにおいて、上記再生制御手段は、表示用の画像の画像ファイルが存在しないとき、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示するとよい（請求項１５）。
【００２９】上記構成によれば、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像が表示手段に表示される。これにより、迅速に撮影画像の再生表示を行なうことができる。なお、表示用の画像が壊れている場合は、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を表示させるので、撮影画像の再生ができないという不都合が回避される。
【００３０】また、本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段とを備えたものである（請求項１６）。
【００３１】この構成によれば、特殊撮影モードで複数枚の画像が撮影されると、これらの撮影画像を用いて表示用の画像が作成され、複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成してそれぞれ記録媒体に記録される。そして、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像の画像ファイルを開いてその画像が表示手段に再生表示される。
【００３２】また、本発明は、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像とこの画像に対応する画像合成処理の内容を示す情報とを上記表示手段に再生表示する再生制御手段とを備えたものである（請求項１７）。
【００３３】この構成によれば、特殊撮影モードで複数枚の画像が撮影されると、これらの撮影画像を用いて表示用の画像が作成され、複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成してそれぞれ記録媒体に記録される。そして、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像の画像ファイルを開いてその画像が表示手段に再生表示されるとともに、この画像に対応する画像処理の内容を示す情報が表示手段に再生表示される。例えば階調調整処理の場合、階調の異なる複数枚の撮影画像を用いて作成された表示用の画像（例えば近似合成処理により作成された画像）と「階調調整処理」の文字表示とが表示手段に表示される。
【００３４】また、本発明は、請求項１６記載のデジタルスチルカメラにおいて、上記特殊撮影モードとして複数種類のモードを有し、上記再生制御手段は、再生モードでいずれかの１の特殊撮影モードが選択されると、当該特殊撮影モードでの撮影画像の中から指定された撮影画像に対応する表示用の画像を上記表示手段に再生表示させるものである（請求項１８）。
【００３５】この構成によれば、再生モードにおいて、記録媒体に記録された複数の特殊撮影モードでの撮影画像のうち、１の特殊撮影モードでの撮影画像の再生が指示されると、その特殊撮影モードに含まれる撮影画像内で指示された撮影画像に対応して表示用の画像の画像ファイルを開いてその画像が表示手段に再生表示される。例えば特殊撮影モードとしてボケ味調整モード、階調調整モード及び超解像モードとが含まれる場合、ボケ味調整モードでの再生が指示されると、ボケ味調整モードで撮影された画像内で再生が指示された撮影画像に対応する表示用の画像が再生される。撮影者が同一の画像合成処理がなされる撮影画像に絞って再生させたい場合にはその操作性が向上する。
【００３６】
【発明の実施の形態】図１は本発明に係るデジタルスチルカメラのカメラ本体の正面図、図２は同デジタルスチルカメラに内蔵された主要部材の配置を示す上面図、図３は、同デジタルスチルカメラに内蔵された主要部材の配置を示す右側面図、図４は同デジタルスチルカメラの背面図である。
【００３７】デジタルスチルカメラ１は、カメラ本体２とこのカメラ本体２の正面略中央に着脱可能に装着されるズームレンズからなる交換レンズ３とからなる一眼レフレックスカメラで構成されている。カメラ本体２は、正面略中央に交換レンズ３が装着されるマウント部２０１が設けられ、正面左端部にグリップ部２０２が設けられている。
【００３８】グリップ部２０２の内部には電池収納室２０３とカード収納室２０４とが設けられ、電池収納室２０３には４本の単３形乾電池Ｅ１〜Ｅ４（カメラの電源電池）が収納され、カード収納室２０４には撮影画像の画像データを記録するためのメモリカードＭＣが着脱可能に収納されるようになっている。
【００３９】マウント部２０１の下部には装着された交換レンズ３との電気的接続を行なうための複数個の接点ＳＴと機械的接続を行なうための複数個のカプラーＣＰとが設けられている。電気的な接点ＳＴは、交換レンズ３に内蔵されたレンズＲＯＭ３０１（図３参照）から当該レンズに関する固有の情報（開放Ｆ値や焦点距離等の情報）をカメラ本体２内の全体制御部（図６参照）に読み出したり、交換レンズ３内のズーム用レンズの位置やフォーカス用レンズの位置の情報を全体制御部に出力するためのものである。カプラーＣＰはカメラ本体２内に設けられたズーム用レンズ駆動用のモータＺＭ（図３参照）の駆動力とフォーカス用レンズ駆動用のモータＦＭ（図３参照）の駆動力とを交換レンズ３側に伝達するためのものである。
【００４０】マウント部２０１に交換レンズ３が装着されたときの当該レンズ３の光軸Ｌ上であってカメラ本体２内の適所にカラー撮像素子２０５が配設されている。カラー撮像素子２０５（以下、ＣＣＤ２０５という。）は、図５に示すようにＣＣＤ（Charge-Coupled Device）からなるエリアセンサ２０５Ａの各画素の表面に、Ｒ（赤），Ｇ（緑），Ｂ（青）のカラーフィルタ２０５Ｂが市松模様状に貼り付けられた、いわゆるベイヤー方式と呼ばれる単板式カラーエリアセンサで構成され、例えば１６００×１２００＝１９２万個の画素数を有している。
【００４１】なお、図５に示すようにエリアセンサのｉ行ｊ列目の画素位置を（ｉ，ｊ）（ｉ＝１，２，…ｎ、ｊ=１，２，…ｍ）とし、ｎ＝１６００、ｍ＝１２００とすると、Ｒ，Ｇ，Ｂの各カラーフィルタは、Ｒ；（２ｈ＋１，２ｋ＋１）
Ｇ；（２ｈ＋２，２ｋ＋１），（２ｈ＋１，２ｋ＋２）
Ｂ；（２ｈ＋２，２ｋ＋２）
但し、ｈ＝０，１，２，…ｎ／２（＝８００）、ｋ=０，１，２，…ｍ／２（＝６００）の画素位置に配置されている。
【００４２】カメラ本体２のグリップ部２０２の上面にはシャッタボタン２０６が設けられている。シャッタボタン２０６の半押し操作と全押し操作とは後述するスイッチＳ１，Ｓ２により検出されるようになっている。スイッチＳ１がオンになると（シャッタボタン２０６が半押しされると）、被写体の静止画を撮影するための準備動作（露出制御値の設定や焦点調節等の準備動作）が行なわれ、スイッチＳ２がオンになると（シャッタボタン２０６が全押しされると）、撮影動作（ＣＣＤ２０５を露光し、その露光によって得られた画像信号に所定の画像処理を行なってメモリカードＭＣに記録する一連の動作）が行なわれる。
【００４３】カメラ本体２の上面の略中央には電子ビューファインダ４（ＥＶＦ；Electronic View Finder）とポップアップタイプのフラッシュ５とが設けられている。電子ビューファインダ４はＣＣＤ２０５で撮影された被写体のモニタ画像（撮影待機状態においてＣＣＤ２０５により動画撮影された被写体の画像）を表示するカラー液晶表示デバイスからなる表示部４０１（以下、ＬＣＤ表示部４０１という。）とこのカラー液晶表示デバイスに表示されたモニタ画像をファインダ窓４０３の外側に導く接眼レンズ４０２とを備えている。
【００４４】撮影待機状態では電子ビューファインダ４に被写体のモニタ画像（動画像）が表示されるので、撮影者はファインダ窓４０３を覗くことによってモニタ画像により被写体を視認することができる。
【００４５】カメラ本体２の背面の略中央にはカラー液晶表示デバイスからなる表示部２０７（以下、ＬＣＤ表示部２０７という。）が設けられている。ＬＣＤ表示部２０７は、記録モードにおいて撮影モードや撮影条件等を設定するためのメニュー画面を表示したり、再生モードにおいてメモリカードＭＣに記録された撮影画像を再生表示するものである。
【００４６】本実施形態では画像表示はＬＣＤ表示部２０７で行なわれるものとしているが、電子ビューファインダ４で行なうようにしてもよい。また、何れか一方で、若しくは両方で画像を表示させるようにしてもよい。
【００４７】撮影モードにはＡＥモードと露光動作の制御方法に関するモードとが含まれる。ＡＥモードには少なくともプログラムモード、シャッタ優先モード、絞り優先モードが含まれる。露出制御値は予め設定された複数のプログラム線図のいずれか１つを用いて設定されるようになっており、プログラムモードでは標準的なプログラム線図を用いて露出制御値が設定され、シャッタ優先モードでは絞り値よりシャッタ速度（露光時間）を優先するようなプログラム線図を用いて露出制御値が設定され、絞り優先モードではシャッタ速度より絞り値を優先するようなプログラム線図を用いて露出制御値が設定される。
【００４８】露光動作の制御方法に関するモードとは、１回のシャッタ操作で１回の露光動作を行い、その撮影によって得られた撮影画像をメモリカードＭＣに記録するモード（以下、通常撮影モードという。）と１回のシャッタ操作で撮影条件を変えて、若しくは撮影条件を変えないで連続して２回撮影を行ない、その撮影によって得られた２枚の撮影画像をそれぞれメモリカードＭＣに記録するモード（以下、特殊撮影モードという。）である。特殊撮影モードで連続して撮影された２枚の撮影画像は、後述するコンピュータ等からなる画像処理装置で所定の画像処理を行い、合成して元の撮影画像よりも画質や映像効果の高い画像を得るために用いられるものである。
【００４９】なお、本実施形態ではカメラ本体では画像合成処理を行なわないようにしているが、カメラ本体で画像合成処理を行ってその合成画像をメモリカードＭＣに記録するようにしてもよい。また、本実施形態では特殊撮影モードでの連続撮影回数を２回としているが、撮影回数はこれに限定されるものではなく、３回以上であってもよい。
【００５０】特殊撮影モードには少なくとも「ボケ味調整モード」、「階調調整モード」、「超解像モード」が含まれる。ボケ味調整モードとは、画像処理で主被写体（例えば人物等）に対して焦点を合せた撮影画像Ａと主被写体の背景に焦点を合わせた撮影画像Ｂとを合成することにより所望のボケ具合を有する画像を得るために、１回のシャッタ操作で合焦位置を変化させて連続して２回の撮影動作を行い、撮影画像Ａと撮影画像Ｂとを得るモードである。
【００５１】階調調整モードとは、画像処理で主被写体に対して露出を合せた撮影画像Ａと主被写体の背景に露出を合わせた撮影画像Ｂとを合成することにより、例えば画面全体に適正な濃度分布を有する画像や主被写体と背景とのコントラストを意図的に大きくし、創作性の強い画像を得るために、１回のシャッタ操作で露出条件を変化させて連続して２回の撮影動作を行い、撮影画像Ａと撮影画像Ｂとを得るモードである。
【００５２】超解像モードとは、主被写体に対する撮影位置が互いに微小変化した撮影画像Ａと撮影画像Ｂとを合成することにより、元の撮影画像よりも解像度の高い画像を得るために、１回のシャッタ操作でピントや露出条件を変えないで連続して２回の撮影動作を行い、１回目の撮影と２回目の撮影とで僅かに異なるカメラアングルの相違により画面内の主被写体の位置が微小変化した撮影画像Ａと撮影画像Ｂとを得るモードである。
【００５３】ＬＣＤ表示部２０７の左側には電源スイッチ２０８が設けられている。この電源スイッチ２０８は記録モード（写真撮影の機能を果たすモード）及び再生モード（記録画像をＬＣＤ表示部２０７に再生するモード）を切換設定するモード設定スイッチを兼ねている。すなわち、電源スイッチ２０８は３点スライドスイッチからなり、接点を中央の「ＯＦＦ」位置に設定すると、電源がオフになり、接点を上方の「ＲＥＣ」位置に設定すると、電源がオンになるとともに記録モードが設定され、接点を下方の「ＰＬＡＹ」位置に設定すると、電源がオンになるとともに再生モードが設定される。
【００５４】ＬＣＤ表示部２０７の右側上方位置には４連スイッチ２０９が設けられている。４連スイッチ２０９は円形の操作ボタンを有し、この操作ボタンにおける上下左右の４方向の押圧操作がそれぞれ検出されるようになっている。４連スイッチ２０９は多機能化され、例えばＬＣＤ表示部２０７に表示されるメニュー画面で選択された項目を変更したり、インデックス画面で選択された再生対象のコマを変更するための操作スイッチとして機能するとともに、左右方向のスイッチは交換レンズ３のズーム比を変更するためのスイッチとしても機能するようになっている。
【００５５】また、４連スイッチ２０９の下方位置にはＬＣＤ表示部２０７の表示や表示内容に関する操作を行なうためスイッチ群２１０が設けられている。スイッチ群２１０には取消スイッチ２１０ａ、確定スイッチ２１０ｂ、メニュー表示スイッチ２１０ｃ及び表示スイッチ２１０ｄが含まれる。
【００５６】取消スイッチ２１０ａはメニュー画面で選択された内容を取り消すためのスイッチである。確定スイッチ２１０ｂはメニュー画面で選択された内容を確定するためのスイッチである。メニュー表示スイッチ２１０ｃはＬＣＤ表示部２０７にメニュー画面を表示させたり、メニュー画面の内容を切り換えたりするためのスイッチである。メニュー表示スイッチ２１０ｃを押圧する毎にメニュー画面に切り換わる。表示スイッチ２１０ｄはＬＣＤ表示部２０７への表示を行なわせたり、その表示を消したりするスイッチである。電源電池Ｅ１〜Ｅ４の節電を図るため、カメラ起動時はＬＣＤ表示部２０７の表示は行なわれないようになっている。表示スイッチ２１０ｄを押圧する毎にＬＣＤ表示部２０７の表示と非表示とが交互に行なわれる。
【００５７】メニュー画面では、例えば複数の項目が配列表示され、現在選択されている項目に選択状態を示す表示（例えばカーソルや反転表示等）が行なわれる。例えば露光動作の制御方法に関する撮影モードを選択する場合、ＬＣＤ表示部２０７には、図６に示すようなメニュー画面が表示される。このメニュー画面における「通常撮影」の項目は通常撮影モードのことで、銀塩カメラにおける撮影動作と同様の通常の撮影を行なうモードである。また「ボケ味調整撮影」、「階調調整撮影」及び「超解像撮影」はそれぞれ特殊撮影モードの中のボケ味調整モード、階調調整モード、超解像モードのことである。
【００５８】図６のメニュー画面において、４連スイッチ２０９の上方向スイッチが押されると、黒三角印のカーソルＫの表示位置（すなわち、カーソルＫが示す項目）が上方向にサイクリックに移動し、４連スイッチ２０９の下方向スイッチが押されると、カーソルＫが示す項目表示位置が下方向にサイクリックに移動する。そして、スイッチ群２１０の確定スイッチ２１０ｂが押されると、その時カーソルＫで指示されている項目（図６では階調調整モード）が撮影モードとして設定される。
【００５９】従って、撮影者は撮影モード選択用のメニュー画面において、４連スイッチ２０９を上下方向に操作して所望の撮影モードを選択し、確定スイッチ２１０ｄを操作することでその撮影モードを設定することができる。なお、露出制御値の決定方法に関するモードについても同様の方法で所望の撮影モードを設定することができる。
【００６０】また、インデックス画面ではメモリカードＭＣに記録されている全ての画像から９コマ分のサムネイル画像が配列表示され、現在選択されているコマに選択されている表示（例えば点滅表示や枠表示等）が行なわれる。４連スイッチ２０９の上下左右の何れかの方向スイッチを押圧すると、メニュー画面やインデックス画面の選択状態を示す表示がその方向の項目やコマに移動する。例えば上方向スイッチを押圧すると、メニュー画面やインデックス画面の選択状態を示す表示が上方向の項目やコマに移動する。そして、何れかのサムネイル画像が選択された状態で確定スイッチ２１０ｄが操作されると、そのサムネイル画像のコマが再生される。
【００６１】交換レンズ３のズーム操作では、４連スイッチ２０９の右方向スイッチを押圧すると、交換レンズ３がワイド側に連続的に移動し、４連スイッチ２０９の左方向スイッチを押圧すると、交換レンズ３のズーム用レンズがテレ側に連続的に移動する。
【００６２】図７は、デジタルスチルカメラ１の内部構成を示すブロック構成図である。
【００６３】デジタルスチルカメラ１は、主にレンズ１０１、撮像部１０２、信号処理部１０３、発光制御部１０４、レンズ制御部１０５、表示部１０６、操作部１０７及び全体制御部１０８で構成されている。
【００６４】レンズ１０１は交換レンズ３に相当するものである。レンズ１０１はフォーカス用レンズ１０１ａ及びズーム用レンズ１０１ｂを備え、内部に透過光量を調節するための絞り１０１ｃが設けられている。
【００６５】撮像部１０２はレンズ１０１を通して入射した被写体光像を画像信号（電気画像）に光電変換して取り込むものである。撮像部１０２にはＣＣＤ２０５に相当するＣＣＤ１０２ａ、このＣＣＤ１０２ａの撮像動作を制御するタイミングジェネレータ１０２ｂ及びタイミングジェネレータ１０２ｂの駆動を制御するタイミング制御回路１０２ｃが含まれる。
【００６６】ＣＣＤ１０２ａはタイミングジェネレータ１０２ｂから入力される駆動制御信号（積分開始信号／積分終了信号）に基づいて被写体光像を所定の時間（露光時間）だけ受光して画像信号（電荷蓄積信号）に変換し、その画像信号をタイミングジェネレータ１０２ｂから入力される読出制御信号（水平同期信号、垂直同期信号、転送信号等）を用いて信号処理部１０３に出力する。このとき、画像信号はＲ，Ｇ，Ｂの各色成分に分離されて信号処理部１０３に出力される。すなわち、画素位置（２ｈ＋１，２ｋ＋１）の各画素で受光された画像信号を順次読み出すことでＲの色成分の画像信号が出力され、画素位置（２ｈ＋２，２ｋ＋１），（２ｈ＋１，２ｋ＋２）の各画素で受光された画像信号を順次読み出すことでＧの色成分の画像信号が出力され、画素位置（２ｈ＋２，２ｋ＋２）の各画素で受光された画像信号を順次読み出すことでＢの色成分の画像信号が出力される。
【００６７】タイミングシェネレータ１０２ｂはタイミング制御回路１０２ｃから入力される制御信号に基づいて駆動制御信号を生成するとともに、基準クロックに基づいて読出制御信号を生成し、ＣＣＤ１０２ａに出力する。タイミング制御回路１０２ｃは撮像部１０２の撮影動作を制御するものである。タイミング制御回路１０２ｃは全体制御部１０８から入力される制御信号に基づいて撮影制御信号を生成する。この撮影制御信号には記録モードにおいて撮影待機中に被写体の動画像（以下、ライブビュー画像という。）を電子ビューファインダ４にモニタ表示するための撮影の制御信号、シャッタボタン６が操作されて被写体の静止画（以下、記録画像という。）を撮影するための制御信号、基準クロック、ＣＣＤ１０２ａから出力された画像信号を信号処理部１０３で信号処理するためのタイミング信号（同期クロック）などが含まれる。このタイミング信号は信号処理部１０３内の信号処理回路１０３ａ及びＡ／Ｄ変換回路１０３ｂに入力される。
【００６８】信号処理部１０３はＣＣＤ１０２ａから出力される画像信号に所定のアナログ信号処理及びデジタル信号処理を行うものである。画像信号の信号処理は当該画像データを構成する各画素の受光信号毎に行なわれる。以下、説明の便宜上、各画素の受光信号とこれらの集合により撮影画像を構成する画像信号とを区別するため、必要に応じて各画素の受光信号を画素信号（アナログ信号）もしくは画素データ（デジタル信号）という。
【００６９】信号処理部１０３にはアナログ信号処理回路１０３ａ、Ａ／Ｄ変換回路１０３ｂ、黒レベル補正回路１０３ｃ、ＷＢ回路１０３ｄ、γ補正回路１０３ｅ及び画像メモリ１０３ｆが含まれる。なお、黒レベル補正回路１０３ｃ、ＷＢ回路１０３ｄ及びγ補正回路１０３ｅはデジタル信号処理を行う回路を構成するものである。
【００７０】アナログ信号処理回路１０３ａは主にＣＤＳ回路（相関二重サンプリング）回路及びＡＧＣ（オートゲインコントロール）回路からなり、ＣＣＤ１０２ａから出力される画素信号のサンプリングノイズの低減と信号レベルの調整を行う。ＡＧＣ回路におけるゲインコントロールには、絞り１０１ｃの絞り値とＣＣＤ１０２ａの露光時間とで適性露出が得られなかった場合（例えば非常に低輝度の被写体を撮影する場合等）の撮影画像のレベル不足を補償する場合も含まれる。
【００７１】Ａ／Ｄ変換回路１０２ｂはアナログ信号処理回路１０３ａから出力される各画素信号をデジタルの画素データに変換するものである。Ａ／Ｄ変換回路１０２ｂは各画素信号を、例えば１０ビットの画素データに変換する。
【００７２】黒レベル補正回路１０３ｃはＡ／Ｄ変換された各画素データの黒レベルを基準の黒レベルに補正するものである。ＷＢ回路１０３ｄは撮影画像のホワイトバランスを調整するものである。ＷＢ回路１０３ｄは全体制御部１０８から入力されるレベル変換テーブルを用いてＲ，Ｇ，Ｂの各色成分の画素データのレベルを変換することで撮影画像のホワイトバランスを調整する。なお、レベル変換テーブルの各色成分の変換係数は全体制御部１０８から撮影画像毎に設定される。γ補正回路１０３ｅは画素データのγ特性を補正するものである。γ補正回路１０３ｅは予め設定された補正テーブルを用いて各画素データのレベルを補正する。
【００７３】画像メモリ１０３ｆは信号処理の終了した画像データを一時保存するメモリである。画像メモリ１０３ｆは少なくとも２フレーム分の画像データを記憶し得る容量を有している。これは、ボケ味調整モード等の撮影では２回連続して露光が行なわれ、２フレーム分の画像データが取り込まれるから、これらをそれぞれ保存できるようにするためである。なお、１フレーム分の画像データを記憶し得る記憶容量は、例えばＣＣＤ１０２ａの画素数を１６００×１２００＝１９２万とすると、１９２万個の画素データを記憶し得る容量である。
【００７４】発光制御部１０４は全体制御部１０８から入力される発光制御信号に基づいてフラッシュ５の発光を制御する。発光制御信号には発光準備の指示、発光タイミング及び発光量とが含まれる。発光制御部１０４は全体制御部１０８から発光準備の指示があると、メインコンデンサを充電して発光可能状態にし、発光タイミング信号に同期してメインコンデンサの蓄積電荷を放電することによりフラッシュ５を発光させる。そして、全体制御部１０８から入力される発光停止信号に基づいてメインコンデンサの蓄積電荷の放電を停止させる。これによりフラッシュ５は所要の発光量で発光される。
【００７５】レンズ制御部１０５はレンズ１０１内のフォーカス用レンズ１０１ａ、ズーム用レンズ１０１ｂ及び絞り１０１ｃの各部材の駆動を制御するものである。レンズ制御部１０５は絞り１０１ｃの絞り値を制御する絞り制御回路１０５ａ、フォーカスモータＦＭの駆動を制御するフォーカス制御回路１０５ｂ及びズームモータＺＭの駆動を制御するズーム制御回路１０５ｃを備えている。
【００７６】絞り制御回路１０５ａは全体制御部１０８から入力される絞り値に基づいて絞り１０１ａを駆動し、その開口量を当該絞り値に設定する。フォーカス制御回路１０５ｂは全体制御部１０８から入力されるＡＦ制御信号（例えば駆動パルス数等の制御値）に基づいてフォーカスモータＦＭの駆動量を駆動し、フォーカス用レンズ１０１ｂを焦点位置に設定する。ズーム制御回路１０５ｃは全体制御部１０８から入力されるズーム制御信号（４連スイッチ２０９の操作情報）に基づいてズームモータＺＭを駆動し、ズーム用レンズ１０１ｂを４連スイッチ２０９で指定された方向に移動させる。すなわち、ズーム制御回路１０５ｃは全体制御部１０８から４連スイッチ２０９の右方向の操作情報が入力されると、ズームモータＺＭを正方向に駆動してズーム用レンズ１０１ｂをワイド側に移動させ、４連スイッチ２０９の左方向の操作情報が入力されると、ズームモータＺＭを逆方向に駆動してズーム用レンズ１０１ｂをテレ側に移動させる。
【００７７】表示部１０６はＬＣＤ表示部２０７への表示と電子ビューファインダ４への表示とを行うものである。表示部１０６にはＬＣＤ表示部２０７に相当するディスプレイ１０６ａ及びＶＲＡＭ１０６ｂと電子ビューファインダ４内のＬＣＤ表示部４０１に相当するディスプレイ１０６ｃ及びＶＲＡＭ１０６ｄとが含まれる。ディスプレイ１０６ａは、例えば６４０×４８０＝３０７２００の画素数を有し、ディスプレイ１０６ｃは、例えば４００×３００＝１２００００の画素数を有している。従って、ＶＲＡＭ１０６ｂはディスプレイ１０６ａの画素数に対応して略３０．７万個の画素データが記憶可能になされ、ＶＲＡＭ１０６ｄはディスプレイ１０６ｃの画素数に対応して略１２万個の画素データが記憶可能になっている。
【００７８】撮影待機中ではＣＣＤ１０２ａで撮影され、所定の信号処理の後に画像メモリ１０３ｆに格納される動画の各フレーム画像のデータが順次、全体制御部１０８に読み出され、データサイズがディスプレイ１０６ｃの表示サイズに調整されて（すなわち、１９２万画素の画像データが略１２万画素の画像データに調整されて）ＶＲＡＭ１０６ｄに転送される。これにより被写体のプレビュー画像がディスプレイ１０６ｃ（ＬＣＤ表示部４０１の表示面）にモニタ表示される。また、表示スイッチ２１０ｄに操作によりＬＣＤ表示部２０７の表示が指示されると、全体表示部１０８に読み出された各フレーム画像のデータがディスプレイ１０６ａの表示サイズに調整されて（すなわち、１９２万画素の画像データが略３０．７万画素の画像データに調整されて）ＶＲＡＭ１０６ｂに転送され、これにより被写体のプレビュー画像がディスプレイ１０６ａ（ＬＣＤ表示部２０７の表示面）にもモニタ表示される。
【００７９】更にメニュースイッチ２１０ｃの操作によりメニュー表示が指示されると、全体制御部１０８内のＲ０Ｍ１０８ａに記憶されたメニュー画面の画像データがＶＲＡＭ１０６ｂに読み出され、これによりディスプレイ１０６ａの表示内容がメニュー画面に切り換えられる。
【００８０】再生モードでは全体制御部１０８によりメモリカードＭＣに記録された各コマ画像ファイルから撮影画像のサムネイル画像が読み出され、所定のフォーマットに従って配列されてインデックス表示用の画像データが作成され、その画像データがＶＲＡＭ１０６ｂに読み出される。これによりディスプレイ１０６ａにはメモリカードＭＣに記録された撮影画像の一覧が表示される。そして、４連スイッチ２０９の操作により再生すべきコマが指定されると、メモリカードＭＣに記録されたそのコマに対応する画像ファイルに記録された撮影画像の画像データが読み出され、ディスプレイ１０６ａの表示サイズに調整されてＶＲＡＭ１０６ｂに転送される。これにより撮影画像がディスプレイ１０６ａ（ＬＣＤ表示部２０７の表示面）に再生表示される。
【００８１】操作部１０７はカメラ本体２に設けられた撮影や再生に関する操作部材の操作情報を全体制御部１０８に入力するものである。操作部１０７から入力される操作情報にはシャッタボタン２０６、電源スイッチ２０８、４連スイッチ２０９、スイッチ群２１０等の各操作部材の操作情報が含まれる。
【００８２】全体制御部１０８はデジタルスチルカメラ１の有する撮影機能及び再生機能を集中制御するものである。全体制御部１０８にはカードインターフエース１０９を介してメモリカードＭＣが接続されている。また、通信用インターフェース１１０を介してパーソナルコンピュータＰＣが外部接続されるようになっている。
【００８３】全体制御部１０８はマイクロコンクピュータからなり、撮影機能及び再生機能における種々の具体的な処理を行なうための処理プログラムや上述の撮像部１０２、信号処理部１０３、発光制御部１０４、レンズ制御部１０５、表示部１０６等の駆動を制御するための制御プログラムが記憶されたＲＯＭ１０８ａと処理プログラム及び制御プログラムに従って種々の演算作業を行なうためのＲＡＭ１０８ｂを備えている。
【００８４】全体制御部１０８の行なう具体的な処理には、ライブビュー画像を取り込んだり、被写体を撮影する際の露出制御値（ＣＣＤ１０２ａの露光時間Ｔｖ〔Ｅｖ値〕と絞り１０１ｃの絞り値Ａｖ〔ＡＰＥＸ値〕）を算出する処理（露出制御値演算処理）、記録モードにおいてＣＣＤ１０２ａから画像メモリ１０３ｆに取り込まれたライブビュー画像を電子ビューファイダ４に表示したり、再生モードにおいてメモリカードＭＣから画像メモリ１０３ｆに読み出した記録画像をＬＣＤ表示部２０７に表示する処理（画像表示処理）、記録モードにおいてＣＣＤ１０２ａから画像メモリ１０３ｆに取り込まれた撮影画像をカードメモリＭＣに記録する処理（記録処理）したり、再生モードにおいてメモリカードＭＣから再生すべき撮影画像を画像メモリ１０３ｆに読み出す処理（再生処理）、ボケ味調整モード等の特殊撮影モードにおいて連続して露光動作を行なわせる処理（特殊露光制御処理）等が含まれる。
【００８５】なお、プレビュー画像にモニタ表示及びメモリカードＭＣに記録された撮影画像の再生表示の表示方法については後述する。
【００８６】露出値演算部１０８ｃ、表示制御部１０８ｄ、記録制御部１０８ｅ、再生制御部１０８ｆ及び特殊露光制御部１０８ｇは全体制御部１０８における上述の各処理を機能ブロックで表わしたものである。
【００８７】露出値定部１０８ｃは露出値演算処理を行なうもので、ライブビュー画像のＧの色成分の画像データを用いて被写体の輝度を判定し、その判定結果に基づいて露出制御値を演算する。
【００８８】表示制御部１０８ｄは画像表示処理を行なうもので、上述の表示部１０６の表示動作、すなわち、画像メモリ１０３ｆに一時保存されている画像データを読み出し、必要に応じて画像サイズを表示先の画像サイズに調整した後、ＶＲＡＭ１０６ｃまたはＶＲＡＭ１０６ｄに転送する動作を行なう。
【００８９】記録制御部１０８ｅは記録処理を行なうものである。記録制御部１０８ｅは、通常撮影モードにおいて、シャッタボタン２０６により撮影が指示されると、撮影指示後に画像メモリ１０３ｆに一時記憶された画像データ（静止画の画像データ）をＲＡＭ１０８ｂに読み出し、例えば２次元ＤＣＴ変換、ハフマン符号化等のＪＰＥＧ方式による所定の圧縮処理を行なって記録用の画像データを作成する。また、画像メモリ１０３ｆから縦横両方向でそれぞれ８画素毎に画素データをＲＡＭ１０８ｂに読み出すことで、画素数２００×１５０のサムネイル画像を作成する。更に、これらの記録用の画像データに付随して記録される撮影画像に関するタグ情報を作成する。このタグ情報にはレンズ名称、コマ番号、撮影時の焦点距離、撮影時のＦナンバー、焦点位置、被写体輝度、ホワイトバランス調整値、撮影モード、圧縮率、撮影日、フラッシュ発光の有無等が含まれる。
【００９０】そして、記録制御部１０８ｅは圧縮された撮影画像及びサムネイル画像の画像データにタグ情報を添付してＥＸＩＦ（Exchangeable Image File Format）形式の画像ファイルを作成し、この画像ファイルをメモリカードＭＣに記録する。
【００９１】ボケ味調整モード、階調調整モード及び超解像モードの撮影モードにおいては、撮影画像がＡ／Ｄ変換された後に画像ファイルが作成されてメモリカードＭＣに記録される。
【００９２】これらの撮影モードでは１回のシャッタ操作で２枚の撮影画像Ａ，Ｂが生じるので、各撮影画像Ａ，Ｂについて非圧縮のＴＩＦＦ（Tag Image File Format）形式の画像ファイルが作成されてそれぞれメモリカードＭＣに記録される。また、撮影画像Ａ，Ｂはボケ味や階調や解像度などの優れた画像を生成するために用いられるので、両画像ファイルのタグ情報には画像合成用の撮影画像であることが認識できる情報が含まれる。また、撮影画像Ａ，Ｂは画像合成によって画質を改善するためのものであるから、画質の低下要因となる圧縮処理は行なわないで、全画素データがそのまま記録される。
【００９３】図８は、メモリカードＭＣに記録された画像ファイルの構成例を示すものである。
【００９４】同図において、「Ｐ０００００１．ＴＩＦ」、「Ｐ０００００２．ＴＩＦ」等は画像ファイル名を示している。本実施形態では画像ファイル名を「ＰＸ．Ｙ」で表記しており、「ＰＸ．Ｙ」の「Ｘ」は画像ファイルが作成された順番を示す６桁の番号であり、「Ｙ」は画像データの形式を示す記号である。「Ｙ」に入る記号「ＴＩＦ」はＣＣＤから出力される画素データをそのまま記録する形式のデータであることを示し、記号「ＪＰＧ」はＪＰＥＧ形式で圧縮されたデータであることを示している。
【００９５】また、ボケ味調整モード、階調調整モード及び超解像モードでは連続して２枚の撮影画像が取り込まれ、これらの画像データについてそれぞれ画像ファイルが作成されるから、本実施形態では両画像ファイルを１つのホルダに纏めてメモリカードＭＣに記録するようになっている。従って、「１ｂ」及び「２ｂ」、「１ｔ」、「２ｈ」等はそれぞれボケ味調整モード、階調調整モード及び超解像モードで撮影された画像ファイルのホルダ名を示している。
【００９６】なお、本実施形態ではホルダ名を「Ｎｉ」で表記しており、「Ｎｉ」の「ｉ」は撮影モードを示す記号（ｂ，ｔ，ｈ）であり、「Ｎ」は各撮影モードにおける撮影順を示す番号である。例えば「１ｂ」はボケ味調整モードで最初に撮影された画像の画像データが格納されたホルダであることを示し、「２ｂ」はボケ味調整モードで２番目に撮影された画像の画像データが格納されたホルダであることを示している。
【００９７】従って、図８は、ボケ味調整モードで撮影され、作成された２個のホルダ１ｂ，２ｂと階調調整モード及び超解像モードでそれぞれ撮影され、作成されたホルダ１ｔ，１ｈと通常撮影モードで撮影され、作成された２個の画像ファイル１ｎ，２ｎとがホルダＰに纏められてメモリカードＭＣに保存されていることを示している。
【００９８】図９は、メモリカードＭＣへの画像ファイルの記録方法を示す図である。
【００９９】メモリカードＭＣの先頭の記憶領域にはホルダー情報と各ホルダーに属する画像ファイルの情報とを記憶するインデックス領域が設けられ、その後の領域に各画像ファイルがファイル番号Ｘの順に記憶されている。
【０１００】メモリカードＭＣにおける各画像ファイルの記録領域は３つの領域からなり、上から各領域にタグ情報のデータ、撮影画像のデータ及びサムネイル画像のデータが記憶される。タグ情報データ及びサムネイル画像データのデータサイズは画像ファイルによって変化しないが、撮影画像のデータサイズは圧縮率や撮影モードによって変化する。このため、メモリカードＭＣの画像ファイルの記憶領域に記憶可能なファイル数は各画像ファイルの撮影画像データのデータサイズによって変化する。
【０１０１】再生制御部１０８ｆはメモリカードＭＣに記録された撮影画像のＬＣＤ表示部２０７への再生処理を行なうものである。再生制御部１０８fは、電源スイッチ２０８により再生モードが設定されると、メモリカードＭＣに記録された各画像ファイルからサムネイル画像を読み出し、順次、所定のインデックスフォーマットに従ってＶＲＡＭ１０６ｂに記憶する。例えば１ページ当たり、９枚のサムネイル画像が３×３に２次配列されるようにＶＲＡＭ１０６ｂに記憶する。従って、これによりＬＣＤ表示部２０７に９枚の２次元配列されたサムネイル画像がインデックス表示される。
【０１０２】なお、撮影モードがボケ味調整モード、階調調整モード及び超解像モードである対関係の画像ファイルについては、両画像ファイルに同一のサムネイル画像が記憶されているので、一方の画像ファイルのみからサムネイル画像が読み出される。
【０１０３】インデックス表示されたサムネイル画像に対して再生すべきコマのサムネイル画像が４連スイッチ２０９及びスイッチ群２１０によって指定されると、再生処理部１０８ｆは、そのコマに対応する画像ファイルから撮影画像のデータを読み出し、そのコマが通常撮影モードの場合は、データが圧縮されているので、所定の伸長処理を行なった後、画像メモリ１０３ｆに記憶し、そのコマが通常撮影モードでない場合は、データは圧縮されていないので、そのまま画像メモリ１０３ｆに記憶する。この画像メモリ１０３ｆに読み出されたデータは、上述したように表示制御部１０８ｄによりデータサイズが調整されてＶＲＡＭ１０６ｂに転送され、これによりＬＣＤ表示部２０７に再生表示される。
【０１０４】なお、再生すべきコマがボケ味調整モードで撮影されたコマである場合は、ピントの合っている撮影画像（本実施形態では後述するように２回目に撮影された画像）の画像ファイルから撮影画像のデータが読み出され、階調調整モード及び超解像モードで撮影されたコマである場合は、対応する画像ファイルの内、いずれか一方の画像ファイルから撮影画像のデータが読み出される。
【０１０５】次に、本発明に係るデジタルスチルカメラ１の特殊撮影モードにおける撮影画像のモニタ表示（アフタービュー表示）について説明する。
【０１０６】図１０はボケ味調整モードでの静止画の撮影手順を示すフローチャートである。
【０１０７】ボケ味調整モードにおいて、シャッタボタン２０６が半押しされると（＃１でＹＥＳ）、静止画撮影のための準備が行なわれる。すなわち、絞り１０１ｃの絞り値が開放絞り値（例えばＦ＝２．８）に設定され（＃３）、レンズ１０１の焦点が∞位置に調節される（＃５）。また、ＣＣＤ１０２ａの露光時間が設定され、ホワイトバランス調整が行なわれる（＃７）。
【０１０８】この状態でシャッタボタン２０６が全押しされると（＃９でＹＥＳ）、ＣＣＤ１０２ａをステップ＃７で設定された露光時間だけ露光して被写体の静止画像が取り込まれる（＃１１）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃１３）。この撮影画像はレンズ１０１の焦点を∞位置に調節しているので、画面の広い範囲でピントが合った画像となっている。
【０１０９】続いて、全体制御部１０８の表示制御部１０８ｄにより画像メモリ１０３ｆからＲＡＭ１０８ｂに画像データが読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に表示される（＃１５）。この表示処理は撮影直後に撮影画像をモニタできるようにするためのもので、最初の撮影画像が所定の時間（例えば２秒間）だけ表示される。
【０１１０】最初の撮影画像をモニタ表示しているのは、アフタービュー表示は撮影者が撮影直後に撮影画像の内容を確認し、撮り直しの要否を判断したいという要望を満たすものであるから、撮影者のシャッタ操作の最も近いタイミングで撮影され、しかも最もピント範囲を広くして撮影されている最初の撮影画像を表示させることがアフタービュー表示の目的にそうものと考えられるからである。従って、このようなアフタービュー表示との関係を考慮して、最初の撮影では絞り１０１ｃの絞り値を開放絞り値にして被写界深度を最も浅くするようにしている。
【０１１１】続いて、レンズ１０１の焦点が、例えば被写体距離３ｍに対応する焦点位置に調節され（＃１７）、更にＣＣＤ１０２ａの露光時間が設定されるとともに、ホワイトバランス調整が行なわれる（＃１９）。
【０１１２】そして、ＣＣＤ１０２ａをステップ＃１９で設定された露光時間だけ露光して被写体の静止画像が取り込まれる（＃２１）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃２３）。この撮影画像はレンズ１０１の焦点を被写体距離３ｍに対応する焦点位置に調節しているので、ほぼ画面内の主被写体に対しピントが合っている。
【０１１３】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された最初の撮影画像に対してタグ情報のデータが作成されるとともに、最初の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと最初の撮影画像の画像データとから画像ファイルが作成される。また、メモリカードＭＣにボケ味調整モードでの撮影画像に対するホルダが作成され、このホルダ内に最初の撮影画像の画像ファイルが記憶される（＃２５、図８参照）。
【０１１４】なお、この撮影画像に対するタグ情報の撮影モードには「ボケ味調整モード１／２」(図８参照）のように、ボケ味調整モードで１回目に撮影されたものであることを示す情報が付与される。
【０１１５】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された２回目の撮影画像に対してタグ情報のデータが作成されるとともに、２回目の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと２回目の撮影画像の画像データとから画像ファイルが作成される。そして、この画像ファイルはメモリカードＭＣの最初の撮影画像が格納されたホルダ内に記憶される（＃２７）。これにより撮影処理は終了し、撮影待機状態（ライブビュー画像の表示状態）に戻る。
【０１１６】なお、ボケ味調整モードで撮影された２枚目の撮影画像に付いてもタグ情報の撮影モードには「ボケ味調整モード２／２」のように、ボケ味調整モードで撮影されたものであることを示す情報が付与される。このように撮影モードに関する情報をタグ情報に入れているのは、通常撮影モードの撮影画像と識別するとともに、後述するように画像処理装置でこの画像ファイルが選択されたとき、自動的にボケ味調整処理の処理プログラムを起動して直ちにボケ味調整処理ができるようにするためである。
【０１１７】なお、この実施形態では、最初に遠景側に焦点を合わせた後、２回目に近景側に焦点を合すようにしているが、合焦位置の変更順はこの逆であってもよい。なお、カメラ起動後、ボケ味調整モードで撮影が行なわれる場合、カメラ起動時はフォーカス用レンズ１０１ａが∞位置に初期設定されるので、最初の撮影では遠景側に焦点を合わせる方がフォーカス制御の無駄が無く、合理的である。
【０１１８】また、２回目の撮影では合焦位置をカメラから３ｍの位置に固定しているが、これはボケ味調整処理により任意のピント状態の合成画像が作成されるので、合成前の撮影画像の合焦位置を正確に決定する必要性が低いことと、フォーカス制御の処理時間を出来るだけ短くして連続撮影を迅速に行なえるようにすることを考慮したものであり、合焦位置としてカメラからの距離を他の距離に固定してもよく、ＡＦ処理を行い、正確に主被写体までの距離としてもよい。
【０１１９】図１１は、階調調整モードでの静止画の撮影手順を示すフローチャートである。
【０１２０】階調調整モードにおいて、シャッタボタン２０６が半押しされると（＃３１でＹＥＳ）、静止画撮影のための準備が行なわれる。すなわち、レンズ１０１の焦点が主被写体に調節されるとともに、ライブビュー画像を用いて露出制御値（Ｔｖ，Ａｖ）が算出され、ホワイトバランス調整値が設定される（＃３３）。
【０１２１】この状態でシャッタボタン２０６が全押しされると（＃３５でＹＥＳ）、ステップ＃３３で設定されたシャッタスピードＴｖ(ＥＶ値)より２段階アンダーのシャッタスピード（Ｔｖ−２）が設定され（＃３７）、このシャッタスピードに相当する露光時間だけＣＣＤ１０２ａを露光して被写体の静止画像が取り込まれる（＃３９）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃４１）。この撮影画像はＣＣＤ１０２の露光時間を適正値より短くしているので、全体的に暗い画像となっている。
【０１２２】続いて、ステップ＃３３で設定されたシャッタスピードＴｖ(ＥＶ値)より２段階オーバーのシャッタスピード（Ｔｖ＋２）が設定され（＃４３）、このシャッタスピードに相当する露光時間だけＣＣＤ１０２ａを露光して被写体の静止画画像が取り込まれる（＃４５）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃４７）。この撮影画像はＣＣＤ１０２の露光時間を適正値より長くしているので、全体的に明るい画像となっている。
【０１２３】続いて、全体制御部１０８の表示制御部１０８ｄにより画像メモリ１０３ｆから１回目の撮影画像Ａの画像データと２回目の撮影画像Ｂの画像データとがＲＡＭ１０８ｂに読み出され、両撮影画像の平均濃度を有する画像Ｃ（以下、平均濃度画像Ｃという。）の画像データが作成される（＃４９）。すなわち、撮影画像Ａを構成する画素データをｇa(i,j)（ｉ＝１，２，…ｎ，ｊ＝１,２,…ｍ）、撮影画像Ｂを構成する画素データをｇb(i,j)とすると、ｇc(i,j)＝｛ｇa(i,j)＋ｇb(i,j)｝／２を演算することで平均濃度画像Ｃの画像データが作成される。
【０１２４】この画像データはデータサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に表示される（＃５１）。この表示処理は撮影直後に撮影画像をモニタできるようにするためのもので、平均濃度画像Ｃの表示は所定の時間（例えば２秒間）だけ行われる。
【０１２５】なお、階調調整モードでは、モニタ画像として平均濃度画像Ｃを用いているのは、１回目と２回目の撮影画像の濃度はそれぞれ適正濃度よりそれぞれ−側と＋側にずれており、いずれもモニタ表示には適していないからである。また、平均値演算という簡易演算により正規の画像合成処理に近似した処理画像を作成してアフタービュー表示をさせることで、比較的適正な濃度を有する画像を撮影終了後に速やかにモニタ表示させることができるようにしている。
【０１２６】なお、本実施形態では画像合成処理に近似した処理として平均値演算をしているが、他の簡易演算、例えば最初の撮影画像と２回目の撮影画像との露出のバランスに応じた重みを付加した加重平均演算をするようにしてもよい。
【０１２７】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された最初の撮影画像に対してタグ情報のデータが作成されるとともに、最初の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと最初の撮影画像の画像データとから画像ファイルが作成される。また、メモリカードＭＣに階調調整モードでの撮影画像に対するホルダが作成され、このホルダ内に最初の撮影画像の画像ファイルが記憶される（＃５３、図８参照）。
【０１２８】なお、この撮影画像に対するタグ情報の撮影モードには「階調調整モード１／２」のように、階調調整モードで１回目に撮影されたものであることを示す情報が付与される。
【０１２９】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された２回目の撮影画像に対してタグ情報のデータが作成されるとともに、２回目の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと２回目の撮影画像の画像データとから画像ファイルが作成される。そして、この画像ファイルはメモリカードＭＣの最初の撮影画像が格納されたホルダ内に記憶される（＃５５）。これにより撮影処理は終了し、撮影待機状態（ライブビュー画像の表示状態）に戻る。
【０１３０】なお、階調調整モードで撮影された２枚目の撮影画像に付いてもタグ情報の撮影モードには「階調調整モード２／２」のように、階調調整モードで撮影されたものであることを示す情報が付与される。
【０１３１】この実施形態では、適正な露出制御に対して±２段階だけずらした露出値で連続的に２枚の画像を撮影するようにしているが、適正露出値からのずれ量はこれに限定されるものではない。また、プラス／マイナスのずれ量を異なるようにしてもよく、撮影者がずれ量を設定できるようにしても良い。
【０１３２】図１２は、超解像モードでの静止画の撮影手順を示すフローチャートである。
【０１３３】超解像モードにおいて、シャッタボタン２０６が半押しされると（＃６１でＹＥＳ）、静止画撮影のための準備が行なわれる。すなわち、レンズ１０１の焦点が主被写体に調節されるとともに、ライブビュー画像を用いて露出制御値（Ｔｖ，Ａｖ）が算出され、ホワイトバランス調整値が設定される（＃６３）。
【０１３４】この状態でシャッタボタン２０６が全押しされると（＃６５でＹＥＳ）、ステップ＃６３で設定されたシャッタスピードＴｖに相当する露光時間だけＣＣＤ１０２ａを露光して被写体の静止画像が取り込まれる（＃６７）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃６９）。
【０１３５】続いて、ステップ＃６３で設定されたシャッタスピードＴｖに相当する露光時間だけＣＣＤ１０２ａを露光して再度、被写体の静止画像が取り込まれる（＃７１）。露光の後、ＣＣＤ１０２ａから出力される画像信号は信号処理部１０３で所定のアナログ信号処理、Ａ／Ｄ変換及び所定のデジタル信号処理が行なわれて画像メモリ１０３ｆに記憶される（＃７３）。この撮影画像は１回目の撮影画像と撮影条件は同じであるが、撮影タイミングが異なるため、１回目の撮影画像に対して撮影アングルが僅かに異なったものとなっている点で相違している。
【０１３６】続いて、全体制御部１０８の表示制御部１０８ｄにより画像メモリ１０３ｆから最初の撮影画像がＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に表示される（＃７５）。この表示処理は撮影直後に撮影画像をモニタできるようにするためのもので、最初の撮影画像のモニタ表示は所定の時間（例えば２秒間）だけ行われる。また、２枚の画像を合成して解像度の高い画像を作成するには処理時間を要し、モニタ表示には適さないので、ステップ＃７５では処理前の撮影画像を直接表示するようにしている。
【０１３７】なお、２回目の撮影（＃７１）をアフタービュー表示（＃７５）より先に行なうことにより、１回目と２回目のカメラアングルの相違が大きくなりすぎることを防止する効果がある。
【０１３８】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された最初の撮影画像に対してタグ情報のデータが作成されるとともに、最初の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと最初の撮影画像の画像データとから画像ファイルが作成される。また、メモリカードＭＣに超解像モードでの撮影画像に対するホルダが作成され、このホルダ内に最初の撮影画像の画像ファイルが記憶される（＃７７、図８参照）。
【０１３９】なお、この撮影画像に対するタグ情報の撮影モードには「超解像モード１／２」のように、超解像モードで１回目に撮影されたものであることを示す情報が付与される。
【０１４０】続いて、全体制御部１０８の記録制御部１０８ｅにより画像メモリ１０３ｆに記憶された２回目の撮影画像に対してタグ情報のデータが作成されるとともに、２回目の撮影画像の画像データを用いてサムネイル画像の画像データが作成され、これらのデータと２回目の撮影画像の画像データとから画像ファイルが作成される。そして、この画像ファイルはメモリカードＭＣの最初の撮影画像が格納されたホルダ内に記憶される（＃７９）。これにより撮影処理は終了し、撮影待機状態（ライブビュー画像の表示状態）に戻る。
【０１４１】次に、本発明に係るデジタルスチルカメラ１の再生モードにおける表示処理について説明する。
【０１４２】本実施形態では、上述のようにカメラ側で画像合成処理まで行わず、画像合成用に撮影された２枚の撮影画像をホルダに纏めてメモリカードＭＣに記録するようにしているので、再生モードにおける各コマの撮影画像の表示部２０７への再生では、アフタービュー表示と同じ内容の画像が表示されるようになっている。
【０１４３】図１３，図１４は、再生モードにおける表示処理の第１の実施形態を示すフローチャートである。
【０１４４】第１の実施形態に係る再生表示処理は、設定されている撮影モードで撮影されたコマについて記録された順にコマ送りを可能にし（各コマの画像ファイル若しくはフォルダは記録時の時刻が付されて記録媒体に記録されており、この記録時刻順のコマ送りを可能にする）、設定された撮影モードの中で記録順に撮影画像の再生処理を行うものである。すなわち、デジタルスチルカメラ１では通常撮影モード、ボケ味調整モード、階調調整モード及び超解像モードのいずれかの撮影モードが設定されるが、例えば通常撮影モードが設定されていると、再生モードでは通常撮影モードで撮影された画像の中から指定されたコマを画像がＬＣＤ表示部２０７に再生表示され、ボケ味調整モードが設定されていると、再生モードではボケ味調整モードで撮影された画像の中か指定されたコマの画像がＬＣＤ表示部２０７に再生表示されるようになっている。
【０１４５】この再生処理は、撮影モードが分かっているとき、その撮影モードで撮影されたコマの中から所望のコマを検索して再生させる際の操作性を考慮したものである。撮影者は記録モードで撮影モードを所望の撮影モード（例えばボケ味調整モード）に設定した後、再生モードに切り換えれば、その撮影モード（ボケ味調整モード）で撮影された画像の中から比較的早く所望のコマを検索してＬＣＤ表示部２０７に再生表示させることができる。
【０１４６】第１の実施形態に係る再生表示処理では、再生モードが設定されると、まず、設定されている撮影モードが判別され（＃８１，＃９３，＃１０５）、ボケ味調整モードが設定されていると（＃８１でＹＥＳ）、ボケ味調整モードで撮影されたコマの中から最初にボケ味調整モードで撮影されたコマのフォルダが検索される（＃８３）。そして、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃８５）。
【０１４７】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃８７でＹＥＳ）、その操作に応じてボケ味調整モードで撮影されたコマの中からで順次、コマが送られて各フォルダに含まれる１回目の撮影画像がＬＣＤ表示部２０７に再生表示される（＃８５，＃８７，＃８９のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃８７でＮＯ）、その操作に対応した処理が行なわれる（＃８７，＃９１のループ）。
【０１４８】階調調整モードが設定されていると（＃８１でＮＯ，＃９３でＹＥＳ）、階調調整モードで撮影されたコマの中から最初に階調調整モードで撮影されたコマが検索され（＃９５）、そのコマのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像と２回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、両サムネイル画像のデータの平均演算により平均濃度画像が作成される。そして、この平均濃度画像はデータサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃９７）。
【０１４９】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃８７でＹＥＳ）、その操作に応じて階調調整モードで撮影されたコマの中から順次、コマが送られて各コマのサムネイル画像により作成された平均濃度画像がＬＣＤ表示部２０７に再生表示される（＃９７，＃９９，＃１０１のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃９９でＮＯ）、その操作に対応した処理が行なわれる（＃９９，＃１０３のループ）。
【０１５０】超解像モードが設定されていると（＃８１，＃９３でＮＯ，＃１０５でＹＥＳ）、超解像モードで撮影されたコマの中から最初に超解像モードで撮影されたコマが検索され（＃１０７）、そのコマのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１０９）。
【０１５１】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃１１１でＹＥＳ）、その操作に応じて超解像モードで撮影されたコマの中から順次、コマが送られて各コマのフォルダに含まれる１回目の撮影画像がＬＣＤ表示部２０７に再生表示される（＃１０９，＃１１１＃１１３のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃１１１でＮＯ）、その操作に対応した処理が行なわれる（＃１１１，＃１１５のループ）。
【０１５２】通常撮影モードが設定されていると（＃８１，＃９３，＃１０５でＮＯ）、通常撮影モードで撮影された画像ファイルの中から最初に通常撮影モードで撮影された画像ファイルが検索され（＃１１７）、その画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１１９）。
【０１５３】この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃１２１でＹＥＳ）、その操作に応じて通常撮影モードで撮影された画像ファイルの中から順次、コマが送られて各々、サムネイル画像がＬＣＤ表示部２０７に再生表示される（＃１１９，＃１２１，＃１２３のループ）。４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃１２１でＮＯ）、その操作に対応した処理が行なわれる（＃１２１，＃１２５のループ）。
【０１５４】図１５は、再生モードにおける表示処理の第２の実施形態を示すフローチャートである。
【０１５５】第２の実施形態に係る再生表示処理は、撮影モードに関係なく記録媒体に記録された順番にコマ送りを可能にし、記録順に画像ファイルもしくはフォルダの再生表示を行うものである。この実施形態では、第１の実施形態のように撮影モードを切り換えることなく全てのコマを検索することができる利点がある。
【０１５６】第２の実施形態に係る再生表示処理では、再生モードが設定されると、まず、全てのコマの中から最初に記録媒体に記録されたコマが検索される（＃１３１）。続いて、そのコマがフォルダであるか否か（特殊撮影モードで撮影されたコマであるか否か）が判別され（＃１３３）、最初のコマがフォルダであれば（＃１３３でＹＥＳ）、そのフォルダに含まれる１回目の撮影画像の画像ファイルからタグ情報が読み込まれ（＃１３５）、最初のコマが画像ファイルであれば（＃１３３でＮＯ）、その画像ファイルからタグ情報が読み込まれる（＃１３７）。
【０１５７】続いて、読み出したタグ情報から撮影モードが判別され（＃１３９，＃１４３，＃１４７）、そのコマの撮影モードがボケ味調整モードであれば（＃１３９でＹＥＳ）、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１４１）。
【０１５８】また、そのコマの撮影モードが階調調整モードであれば（＃１３９でＮＯ，＃１４３でＹＥＳ）、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像と２回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、両サムネイル画像のデータの平均演算により平均濃度画像が作成される。そして、この平均濃度画像はデータサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１４５）。
【０１５９】また、そのコマの撮影モードが超解像モードであれば（＃１３９，＃１４３でＮＯ，＃１４７でＹＥＳ）、そのフォルダに格納された１回目の撮影画像の画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１４９）。
【０１６０】また、そのコマの撮影モードが通常撮影モードであれば（＃１３９，＃１４３，＃１４７でＮＯ）、その画像ファイルに含まれるサムネイル画像のデータがＲＡＭ１０８ｂに読み出され、データサイズが調整された後、ＶＲＡＭ１０６ｂに転送されてＬＣＤ表示部２０７に再生表示される（＃１５１）。
【０１６１】そして、この後、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれると（＃１５３でＹＥＳ）、ステップ＃１３１に戻り、その操作に応じて記録順の先のコマもしくは記録順の後のコマが検索され、そのコマについてタグ情報に基づき撮影モードの判別（＃１３５〜＃１３９，＃１４３，＃１４７）とその判別結果に基づく撮影モードに対応した再生処理（＃１４１，＃１４５，＃１４９，＃１５１）とが行われる。
【０１６２】一方、４連スイッチ２０９により順方向もしくは逆方向にコマ送り操作が行なわれず、再生モードで可能な他の操作（例えば画像データの削除等）が指示されると（＃１５３でＮＯ）、その操作に対応した処理が行なわれる（＃１５３，＃１５５のループ）。
【０１６３】上記のように、本実施形態に係るデジタルスチルカメラ１では、ボケ味調整モードにおいては最初の撮影画像が画像メモリ１０３ｆに格納された時点で、また、超解像モードにおいては２枚の撮影画像が画像メモリ１０３ｆに格納された時点で最初の撮影画像をＬＣＤ表示部２０７にモニタ表示させるようにしているので、露光動作の終了後、比較的早く撮影画像をモニタ表示させることができる。
【０１６４】特に最初の撮影画像をモニタ表示させるようにしているので、撮影者はシャッタチャンスとして撮影した画像に最も近い画像を確認することができる。また、ボケ味撮影モードでは最初の撮影で被写界深度を最も深くし、ピントの合う範囲が最も広い画像を撮影するようにしているので、ピントずれの画像がモニタ表示されてアフタービュー表示の効果を低下させることもない。
【０１６５】また、階調調整モードにおいては２枚の撮影画像が画像メモリ１０３ｆに格納された時点で、平均演算により両撮影画像の平均濃度を有する画像を作成し、その平均濃度画像をＬＣＤ表示部２０７にモニタ表示させるようにしているので、露光動作の終了後、比較的早く、適正な階調特性を有する撮影画像をモニタ表示させることができる。
【０１６６】再生モードでは、撮影モード単位で撮影コマの画像を表示させるようにしているで、予め撮影モードが分かっている場合は、撮影モードを指定することで所望の撮影コマを迅速に検索して再生することができる。また、アフタービュー表示と同様に、特殊撮影モードで撮影されたコマの再生は２枚の撮影画像のうち、１の撮影画像を再生させるようにしているので、すなわち、撮影モードに関係なく各コマに対して１の画像を表示させるようにしているので、コマ送りをした場合にも撮影コマと撮影内容とが相違することがない。
【０１６７】ところで、上記実施形態では、特殊撮影モードで撮影された画像の再生表示は、ホルダに格納された２個の画像ファイルのうち、１の画像ファイルに含まれるサムネイル画像を表示したり、両画像ファイルに含まれる２枚のサムネイル画像の簡単な合成演算により得られる合成画像をＬＣＤ表示部２０７に表示させるようにしていたが、特殊撮影モードで撮影されたコマの撮影画像について画像ファイルを作成する際、図１６に示すように表示用の画像ファイルを別途作成して両画像ファイルを記録媒体に記録しておき、再生モードでは、指定されたコマの表示用の画像ファイルを開いて画像を再生するようにしてもよい。
【０１６８】なお、図１６において、画像ファイル名「１ｂ．ＴＨＭ」は、ボケ味調整モードで撮影された最初のコマに対する表示用の画像の画像ファイルを示し、画像ファイル名「２ｂ．ＴＨＭ」は、ボケ味調整モードで撮影された２番目のコマに対する表示用の画像の画像ファイルを示している。また、画像ファイル名の「ＴＨＭ」は、ファイルの内容がサムネイル画像であることを示している。画像ファイル「１ｂ．ＴＨＭ」には、ホルダ「１ｂ」に含まれる最初の撮影画像の画像ファイル「Ｐ０００００１．ＴＩＦ」に含まれるサムネイル画像の画像データと同一の画像データが格納されている。
【０１６９】同様に画像ファイル名「１ｔ．ＴＨＭ」は、階調調整モードで撮影された最初のコマに対する表示用の画像の画像ファイルを示している。画像ファイル「１ｔ．ＴＨＭ」には、ホルダ「１ｔ」内の２個の画像ファイル「Ｐ０００００５．ＴＩＦ」，「Ｐ０００００５．ＴＩＦ」にそれぞれ含まれる２枚のサムネイル画像を用いて簡単な合成演算により作成された表示用の合成画像と同一の画像データが格納されている。
【０１７０】なお、本実施形態では、超解像モードや通常撮影モードについては、ファイル自身に含まれるサムネイル画像で表示されるため、表示用の画像の画像ファイルは設けていない。
【０１７１】図１７は、ボケ味調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【０１７２】同図は、図１０のフローチャートにおいて、ステップ＃２５とステップ＃２７との間にホルダ「Ｎｂ」に格納された最初の撮影画像の画像ファイル「ＰＸ．ＴＩＦ」に含まれるサムネイル画像と同一のサムネイル画像について別の画像ファイル「Ｎｂ．ＴＨＭ」を作成し、この画像ファイル「Ｎｂ．ＴＨＭ」をホルダ「Ｎｂ」に格納する処理を挿入したものである。なお、このフローチャートの他のステップの処理内容は、図１０のフローチャートと同一であるから、ここでは説明を省略する。
【０１７３】また、図１８は、階調調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【０１７４】同図は、図１１のフローチャートにおいて、ステップ＃５５の後にステップ＃４９で作成された平均濃度を有するサムネイル画像について別の画像ファイル「Ｎｔ．ＴＨＭ」を作成し、この画像ファイル「Ｎｔ．ＴＨＭ」を階調調整モードで撮影された２枚の撮影画像の画像ファイルが格納されたホルダ「Ｎｔ」に格納する処理を挿入したものである。なお、ステップ＃５７の処理は、ステップ＃５３とステップ＃５５との間に挿入してもよい。このフローチャートの他のステップの処理内容は、図１１のフローチャートと同一であるから、ここでは説明を省略する。
【０１７５】図１９，図２０は、特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第１の実施形態を示すフローチャートである。
【０１７６】同図は、図１３，図１４のフローチャートにおいて、ステップ＃８３とステップ＃８７との間に表示用の画像の画像ファイル（以下、この画像ファイルをサムネイルファイルという。）の有無を判別する処理ステップ＃８４−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃８４−２を、また、ステップ＃９５とステップ＃９７との間にサムネイルファイルの有無を判別する処理ステップ＃９６−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃９６−２を挿入したものである。
【０１７７】このフローチャートでは、ボケ味調整モードで再生が指示されたコマ（再生モード設定時の初期設定コマを含む）に対してホルダ内にサムネイルファイルが存在するか否かが判別され（＃８４−１）、サムネイルファイルが存在すれば（＃８４−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（サムネイル画像）がＬＣＤ表示部２０７に表示され（＃８４−２）、サムネイルファイルが存在しなければ（＃８４−１でＮＯ）、ホルダ内の最初の撮影画像の画像ファイルに含まれるサムネイル画像がＬＣＤ表示部２０７に表示される（＃８５）。
【０１７８】また、階調調整モードで再生が指示されたコマ（再生モード設定時の初期設定コマを含む）に対してホルダ内にサムネイルファイルが存在するか否かが判別され（＃９６−１）、サムネイルファイルが存在すれば（＃９６−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して作成された平均濃度を有するサムネイル画像）がＬＣＤ表示部２０７に表示され（＃９６−２）、サムネイルファイルが存在しなければ（＃９６−１でＮＯ）、ホルダ内の最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して表示用の平均濃度を有するサムネイル画像を作成し、そのサムネイル画像がＬＣＤ表示部２０７に表示される（＃９４）。
【０１７９】図２１，図２２は、特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第２の実施形態を示すフローチャートである。
【０１８０】同図は、図１５のフローチャートにおいて、ステップ＃１３９とステップ＃１５３との間にサムネイルファイルの有無を判別する処理ステップ＃１４０−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃１４０−２を、また、ステップ＃１４３とステップ＃１５３との間にサムネイルファイルの有無を判別する処理ステップ＃１４４−１とサムネイルファイルが存在する場合にそのサムネイルファイルを開いて表示用の画像をＬＣＤ表示部２０７に表示させる処理ステップ＃１４４−２を挿入したものである。
【０１８１】このフローチャートでは、ボケ味調整モードで撮影されたコマの再生が指示されると（＃１３９でＹＥＳ）、そのホルダ内にサムネイルファイルが存在するか否かが判別され（＃１４０−１）、サムネイルファイルが存在すれば（＃１４０−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（サムネイル画像）がＬＣＤ表示部２０７に表示され（＃１４０−２）、サムネイルファイルが存在しなければ（＃１４０−１でＮＯ）、ホルダ内の最初の撮影画像の画像ファイルに含まれるサムネイル画像がＬＣＤ表示部２０７に表示される（＃１４１）。
【０１８２】また、階調調整モードで撮影されたコマの再生が指示されると（＃１４３でＹＥＳ）、そのホルダ内にサムネイルファイルが存在するか否かが判別され（＃１４４−１）、サムネイルファイルが存在すれば（＃１４４−１でＹＥＳ）、そのサムネイルファイルを開いて表示用の画像（最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して作成された平均濃度を有するサムネイル画像）がＬＣＤ表示部２０７に表示され（＃１４４−２）、サムネイルファイルが存在しなければ（＃１４４−１でＮＯ）、ホルダ内の最初の撮影画像のサムネイル画像と２回目の撮影画像のサムネイル画像とを合成して表示用の平均濃度を有するサムネイル画像を作成し、そのサムネイル画像がＬＣＤ表示部２０７に表示される（＃１４５）。
【０１８３】この実施形態では、各撮影画像の画像ファイルに含まれるサムネイル画像とは別に表示用のサムネイル画像の画像ファイルを作成しているので、再生モードでの再生処理を迅速に行なうことができる。また、操作ミスにより表示用の画像の画像ファイルを消失した場合にも画像ファイルに含まれるサムネイル画像を用いて再生モードでの再生処理を行なうことができる利点がある。
【０１８４】次に、特殊撮影モードで撮影された２枚の撮影画像を用いて画像合成を行なう画像処理装置について簡単に説明する。
【０１８５】図２３は、特殊撮影モードで撮影された２枚の撮影画像について特殊撮影モードに応じた画像合成処理を行なう画像処理装置の構成を示す外観図である。
【０１８６】同図に示す画像処理装置６は、パーソナルコンピュータ７とその出力装置であるプリンタ８とで構成されている。
【０１８７】パーソナルコンピュータ７（以下、パソコン７という。）は、ＦＤドライバ７０１ａ、メモリカードリーダ７０１ｂ及びＣＤ−ＲＯＭドライバ７０１ｃを備えたコンピュータ本体７０１（以下、パソコン本体７０１という。）とＣＲＴ若しくはＬＣＤからなるディスプレイ７０２とキーボード７０３とマウス７０４とで構成されている。
【０１８８】パソコン７は、ボケ味調整モードで撮影された２枚の撮影画像を合成して所望のボケ具合を有する撮影画像を作成するための処理プログラム（以下、ボケ味調整処理プログラムという。）、階調調整モードで撮影された２枚の撮影画像を合成して所望の階調を有する撮影画像を作成するための処理プログラム（以下、階調調整処理プログラムという。）及び超解像モードで撮影された２枚の撮影画像を合成して解像度の高い撮影画像を作成するための処理プログラム（以下、超解像処理プログラムという。）等の画像合成用の処理プログラムが記録されたＣＤ−ＲＯＭ９をＣＤ−ＲＯＭドライバ７０１ｃに装着し、この画像合成用の処理プログラムをパソコン本体７０１内のハードディスク（主記憶装置）にインストールすることにより画像処理装置として機能する。
【０１８９】なお、本実施形態では、ＣＤ−ＲＯＭ９に記録された処理プログラムをコンピュータ７にインストールすることにより画像処理装置を構成するようにしているが、予め装置本体の主記憶装置に処理プログラムが記憶された専用の画像処理装置であってもよい。
【０１９０】画像合成用の処理プログラムによる２枚の撮影画像の合成処理手順や合成された画像（ボケ具合や階調が調整された画像若しくは高解像度の画像）は、ディスプレイ７０２に表示される。また、合成後の画像はプリンタ８によってハードコピーを作成することができる。
【０１９１】次に、画像処理装置６における画像合成処理について説明する。
【０１９２】図２４は、画像合成用の処理プログラムを起動するための処理手順を示すフローチャートである。
【０１９３】ボケ味調整処理プログラム、階調調整処理プログラム及び超解像処理プログラムの各処理プログラムは、各処理プログラムに対応する撮影モードで撮影された画像の画像ファイルを備えたフォルダが指定されると、それに連動して起動されるようになっている。
【０１９４】例えば、キーボード７０３若しくはマウス７０４の操作により上記各撮影モードで撮影後のメモリカードＭＣへのアクセスが指示され、上記各撮影モードで撮影された画像が格納されたフォルダを指定する、又はフォルダ内の画像ファイルを示すアイコンにカーソルを移動させ、そのアイコンの画像ファイルを開く指示が入力されると、メモリカードＭＣに記憶された当該画像ファイルからタグ情報がパソコン本体７内に読み込まれ（＃１６１）、そのタグ情報内の撮影モードの内容が判別される（＃１６３，＃１６７，＃１７１）。
【０１９５】撮影モードがボケ味調整モードであれば（＃１６３でＹＥＳ）、ボケ味調整処理プログラムが起動され（＃１６５）、撮影モードが階調調整モードであれば（＃１６７でＹＥＳ）、階調調整処理プログラムが起動され（＃１６９）、撮影モードが超解像モードであれば（＃１７１でＹＥＳ）、超解像処理プログラムが起動され（＃１７３）、撮影モードが通常撮影モードであれば（＃１７１でＮＯ）、通常の撮影画像を対象とする上記処理プログラム以外の所定の処理プログラム、例えば画像補正用の処理プログラムが起動される（＃１７５）。
【０１９６】次に、画像処理装置６で行なわれるボケ味調整処理、階調調整処理及び超解像処理の概要について簡単に説明する。
【０１９７】ボケ味調整モード、階調調整モード及び超解像モードで連続的に撮影された２枚の撮影画像は、レジストレーション処理（位置合わせ処理）を行った後、両撮影画像の重なる部分について画素位置毎に両撮影画像のデータを用いて所定の演算処理を行って合成される。
【０１９８】レジストレーション処理は、画像合成処理において画面内の同一の図柄を正確に合成するため、合成対象となる２枚の画像の位置を合わせるものである。レジストレーション処理では、例えば一方の撮影画像Ａを基準にして他方の撮影画像Ｂを平行移動しつつ両撮影画像Ａ，Ｂを照合して、両撮影画像Ａ，Ｂが一致する撮影画像Ｂの平行移動量が算出される。一方の撮影画像Ａに対する他方の撮影画像Ｂの一致度は、例えば撮影画像Ｂの平行移動量を引数とする両撮影画像Ａ，Ｂのデータのレベル差の絶対値の総和（相関関数）が最小となる平行移動量が撮影画像Ｂを撮影画像Ａに一致させるための移動量（すなわち、位置ずれ量）として算出される。
【０１９９】ボケ味調整処理及び階調調整処理では、レジストレーション処理後に両撮影画像Ａ，Ｂの重なる部分について、画素位置（ｋ，ｈ）毎に撮影画像Ａの画素データＤA(k,h)と撮影画像Ｂの画素データＤB(k,h)とを用いて所定の演算処理を行なってボケ味、階調の調整された画像の画素データのＤC(k,h)が算出される。ボケ味調整処理では、例えばセグメント法、反復法、逆フィルタなどの周知の種々の演算方法を適用することができる。また、階調調整処理では、例えば加重平均演算などの演算方法が適用される。
【０２００】また、超解像処理では、撮影画像Ａ，Ｂについてそれぞれデータの補間処理が行なわれた後、レジストレーション処理が行なわれ、その後、両撮影画像Ａ，Ｂの重なる部分について、画素位置（ｋ，ｈ）毎に撮影画像Ａの画素データＤA(k,h)と撮影画像Ｂの画素データＤB(k,h)とを用いて所定の演算処理（例えば平均演算や加重平均演算など）を行なって超解像化された画像の画素データのＤC(k,h)が算出される。
【０２０１】上記実施形態では、デジタルスチルカメラ１で上述の画像合成処理は行なわないようにしていたが、デジタルスチルカメラ１で画像合成処理まで行い、再生モードではその合成処理後の画像をＬＣＤ表示部２０７に表示させるようにしてもよい。
【０２０２】この場合は、合成後の画像に間引き処理を行なって表示用の画像（サムネイル画像）を作成し、このサムネイル画像を撮影画像の画像ファイルとは別に表示用の画像ファイル（サムネイルファイル）に格納する。そして、再生モードでは図１９〜図２２に示すフローチャートに従い、サムネイルファイルが存在する場合は、このサムネイルファイルから合成後の画像のサムネイル画像をＬＣＤ表示部２０７に表示する。このとき、図２５に示すように、このサムネイル画像の表示に重ねて合成処理の内容を示す情報を表示させるとよい。同図の例では、超解像処理が行なわれた日の出の撮影画像がＬＣＤ表示部２０７に表示され、その表示画面の左下部に「超解像」の文字が表示されている。ＬＣＤ表示部２０７の画素数は撮影画像の画素数よりも非常に少ないので、合成処理の効果が再生表示された画像の画質で認識することが難しいが、処理内容が表示されるので操作者は容易にどのような撮影モードで撮影された画像であるかを確認することができる。
【０２０３】
【発明の効果】以上説明したように、本発明によれば、所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、特殊撮影モードで撮影された複数枚の撮影画像は、画像合成処理をすることなく、いずれか１の撮影画像を表示手段に表示するようにしたので、撮影者は撮影した後に直ちに撮影内容を確認することができる。
【０２０４】特に特殊撮影モードで撮影された複数枚の撮影画像がボケ味調整用に撮影されたものである場合、最もピントの合っている範囲が広い撮影画像を表示させるようにしたので、撮影内容の不明瞭な撮影画像が表示されることが少ない。
【０２０５】また、特殊撮影モードで撮影された複数枚の撮影画像が超解像用に撮影された者である場合、撮影画像のうち、最初に撮影された撮影画像を表示させるようにしたので、表示処理を迅速に行なうことができる。
【０２０６】また、上記デジタルスチルカメラにおいて、複数枚の撮影画像をそれぞれ記録媒体に記録し、再生モードにおいて、この記録媒体に記録された特殊撮影モードでの撮影画像を再生する際、連続撮影された複数枚の撮影画像のうち、１の撮影画像を表示手段に再生表示するようにしたので、例えばコマ送りにより各撮影画像を再生させる場合、同じ内容の撮影画像が連続的に再生されることで、その撮影画像が通常の撮影モードで撮影された画像なのか、特殊モードで撮影された画像なのか混乱することがない。
【０２０７】この場合、最初に撮影された撮影画像を表示させるようにしたので、撮影者が求めるシャッタチャンスに最も近い撮影画像を表示させることができる。
【０２０８】また、本発明によれば、上記デジタルスチルカメラにおいて、連続撮影された複数枚の撮影画像を用いて所定の画像合成処理に近似した画像合成処理を行なって表示用の画像を作成し、その画像を表示手段に表示させるようにしたので、例えば階調調整処理のように各撮影画像が表示画像として適正でない場合も表示画像としてより適正な画像を比較的短時間で表示させることができ、表示目的を損なうことがない。
【０２０９】また、表示用の画像は各撮影画像とは別の画像ファイルで記録媒体に記録するようにしたので、再生モードでの再生処理ではこの画像ファイルを開いて表示用の画像を再生表示させることにより、迅速に再生表示を行なうことができる。
【０２１０】また、上記デジタルスチルカメラにおいて、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を表示手段に再生表示するようにしたので、迅速に撮影画像の再生表示を行なうことができる。なお、表示用の画像が壊れている場合は、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を表示させるようにしたので、撮影画像の再生ができないという不都合がなくなる。
【０２１１】また、本発明によれば、上記デジタルスチルカメラにおいて、連続撮影された複数枚の撮影画像を用いて表示用の画像を作成し、各撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、これらの画像ファイルを記録媒体に記録する一方、再生モードにおいて、記録媒体に記録された特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を表示手段に再生表示するようにしたので、再生の際、画像合成処理の内容に適した画像の表示が可能となる。
【０２１２】また、再生が指示された撮影画像に対応する表示用の画像とこの画像に対応する画像合成処理の内容を示す情報とを表示手段に表示させるようにしたので、表示画像がどのような画像合成処理を行なわれたものであるかを容易に確認することができる。
【０２１３】また、特殊撮影モードとして複数種類のモードがある場合、再生モードでいずれかの１の特殊撮影モードが選択されると、当該特殊撮影モードでの撮影画像の中から指定された撮影画像に対応する表示用の画像を表示手段に表示させるようにしたので、同一の画像合成処理がなされた撮影画像に絞って再生させたい場合、再生コマを選択する操作性が向上する。
【図面の簡単な説明】
【図１】 本発明に係るデジタルスチルカメラのカメラ本体の正面図である。
【図２】 同デジタルスチルカメラの主要部材の配置を示す図である。
【図３】 同デジタルスチルカメラに内蔵された主要部材の配置を示す右側面図である。
【図４】 同デジタルスチルカメラの背面図である。
【図５】 カラー撮像素子の撮像面の構成を示す図である。
【図６】 撮影モードの選択方法を説明するための図である。
【図７】 デジタルスチルカメラの内部構成を示すブロック図である。
【図８】 メモリカードに記録された画像ファイルの構成例を示す図である。
【図９】 メモリカードへの画像ファイルの記録方法を示す図である。
【図１０】 ボケ味調整モードでの撮影手順を示すフローチャートである。
【図１１】 階調調整モードでの撮影手順を示すフローチャートである。
【図１２】 超解像モードでの撮影手順を示すフローチャートである。
【図１３】 再生モードにおける表示処理の第１の実施形態を示すフローチャートである。
【図１４】 再生モードにおける表示処理の第１の実施形態を示すフローチャートである。
【図１５】 再生モードにおける表示処理の第２の実施形態を示すフローチャートである
【図１６】 メモリカードに記録された画像ファイルの他の構成例を示す図である。
【図１７】 ボケ味調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【図１８】 階調調整モードにおける撮影処理で表示用の画像の画像ファイルを作成するようにしたフローチャートである。
【図１９】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第１の実施形態を示すフローチャートである。
【図２０】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第１の実施形態を示すフローチャートである。
【図２１】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第２の実施形態を示すフローチャートである。
【図２２】 特殊撮影モードで撮影されたコマに表示用の画像ファイルが作成されている場合の再生モードにおける再生処理の第２の実施形態を示すフローチャートである。
【図２３】 画像処理装置の構成を示す外観図である。
【図２４】 画像合成用の処理プログラムを起動するための処理手順を示すフローチャートである。
【図２５】 合成処理後の画像と合成処理の内容とを重ねて再生表示した一例を示す図である。
【符号の説明】
１ デジタルスチルカメラ
１０１ レンズ
１０２ 撮像部
１０３ 信号処理部
１０４ 発光制御部
１０５ レンズ制御部
１０６ 表示部
１０７ 操作部
１０８ カードＩ／Ｆ
１０８ 全体制御部
１０８ａ ＲＯＭ
１０８ｂ ＲＡＭ
１０８ｃ 露出値演算部
１０８ｄ 表示制御部（表示制御手段，表示画像作成手段）
１０８ｅ 記録制御部（記録手段）
１０８ｆ 再生制御部（再生制御手段）
１０８ｇ 特殊露光制御部
１０９ カードインターフェース
１１０ 通信用インターフェース
２ カメラ本体
２０５ カラー撮像素子
２０６ シャッタボタン
２０７ ＬＣＤ表示部（表示手段）
２０８ 電源スイッチ
２０９ ４連スイッチ
２１０ スイッチ群
３ 交換レンズ
４ 電子ビューファインダ（表示手段）
５ フラッシュ
ＭＣ メモリカード
【特許請求の範囲】
【請求項１】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に表示する表示制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項２】 上記所定の画像合成処理は、ピントのボケ具合の異なる複数枚の撮影画像を合成してピントのボケ具合が調整された１の画像を作成するボケ味調整処理で、上記表示制御手段は、上記撮影画像のうち、最もピントの合っている範囲が広い撮影画像を上記表示手段に表示することを特徴とする請求項１記載のデジタルスチルカメラ。
【請求項３】 ピントのボケ具合の異なる複数枚の撮影画のうち、最もピントの合っている範囲が広い撮影画像を最初に撮影することを特徴とする請求項２記載のデジタルスチルカメラ。
【請求項４】 上記所定の画像合成処理は、複数枚の撮影画像を合成して当該撮影画像よりも解像度の高い１の画像を作成する超解像処理で、上記表示制御手段は、上記撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示することを特徴とする請求項１記載のデジタルスチルカメラ。
【請求項５】 上記表示制御手段は、連続した露光動作の終了後で、且つ、複数枚の撮影画像に対して所定の処理が行なわれる前に１の撮影画像を上記表示手段に表示させるものであることを特徴とする請求項１記載のデジタルスチルカメラ。
【請求項６】 上記所定の処理は、各撮影画像の記録媒体への記録処理であることを特徴とする請求項５記載のデジタルスチルカメラ。
【請求項７】 上記所定の処理は、複数枚の撮影画像の合成演算処理であることを特徴とする請求項５記載のデジタルスチルカメラ。
【請求項８】 請求項１記載のデジタルスチルカメラにおいて、上記複数枚の撮影画像をそれぞれ記録媒体に記録する記録手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に再生表示する再生制御手段とを更に備えたことを特徴とするデジタルスチルカメラ。
【請求項９】 上記１の撮影画像は最初に撮影された撮影画像であることを特徴とする請求項８記載のデジタルスチルカメラ。
【請求項１０】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像を用いて上記所定の画像合成処理に近似した画像合成処理を行なって表示用の画像を作成する表示画像作成手段と、上記表示画像作成手段で作成された画像を上記表示手段に表示する表示制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項１１】 上記所定の画像合成処理は、階調の異なる複数枚の撮影画像を合成して当該撮影画像の階調を調整した１の画像を作成する階調調整処理であることを特徴とする請求項１０記載のデジタルスチルカメラ。
【請求項１２】 上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段を備えたことを特徴とする請求項１０記載のデジタルスチルカメラ。
【請求項１３】 上記表示用の画像の上記表示手段への表示は、複数枚の撮影画像の画像ファイルが上記記録媒体に記録される前に行なわれることを特徴とする請求項１２記載のデジタルスチルカメラ。
【請求項１４】 請求項１２記載のデジタルスチルカメラにおいて、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段を更に備えたことを特徴とするデジタルスチルカメラ。
【請求項１５】 上記再生制御手段は、表示用の画像の画像ファイルが存在しないとき、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示することを特徴とする請求項１４記載のデジタルスチルカメラ。
【請求項１６】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項１７】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための複数の特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて上記特殊撮影モードの内容に応じた表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像とこの画像に対応する画像合成処理の内容を示す情報とを上記表示手段に再生表示する再生制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項１８】 上記特殊撮影モードとして複数種類のモードを有し、上記再生制御手段は、再生モードでいずれかの１の特殊撮影モードが選択されると、当該特殊撮影モードでの撮影画像の中から指定された撮影画像に対応する表示用の画像を上記表示手段に再生表示させるものであることを特徴とする請求項１６記載のデジタルスチルカメラ。
【請求項１】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に表示する表示制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項２】 上記所定の画像合成処理は、ピントのボケ具合の異なる複数枚の撮影画像を合成してピントのボケ具合が調整された１の画像を作成するボケ味調整処理で、上記表示制御手段は、上記撮影画像のうち、最もピントの合っている範囲が広い撮影画像を上記表示手段に表示することを特徴とする請求項１記載のデジタルスチルカメラ。
【請求項３】 ピントのボケ具合の異なる複数枚の撮影画のうち、最もピントの合っている範囲が広い撮影画像を最初に撮影することを特徴とする請求項２記載のデジタルスチルカメラ。
【請求項４】 上記所定の画像合成処理は、複数枚の撮影画像を合成して当該撮影画像よりも解像度の高い１の画像を作成する超解像処理で、上記表示制御手段は、上記撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示することを特徴とする請求項１記載のデジタルスチルカメラ。
【請求項５】 上記表示制御手段は、連続した露光動作の終了後で、且つ、複数枚の撮影画像に対して所定の処理が行なわれる前に１の撮影画像を上記表示手段に表示させるものであることを特徴とする請求項１記載のデジタルスチルカメラ。
【請求項６】 上記所定の処理は、各撮影画像の記録媒体への記録処理であることを特徴とする請求項５記載のデジタルスチルカメラ。
【請求項７】 上記所定の処理は、複数枚の撮影画像の合成演算処理であることを特徴とする請求項５記載のデジタルスチルカメラ。
【請求項８】 請求項１記載のデジタルスチルカメラにおいて、上記複数枚の撮影画像をそれぞれ記録媒体に記録する記録手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、連続撮影された複数枚の撮影画像のうち、１の撮影画像を上記表示手段に再生表示する再生制御手段とを更に備えたことを特徴とするデジタルスチルカメラ。
【請求項９】 上記１の撮影画像は最初に撮影された撮影画像であることを特徴とする請求項８記載のデジタルスチルカメラ。
【請求項１０】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、画像を表示する表示手段と、上記連続撮影された複数枚の撮影画像を用いて上記所定の画像合成処理に近似した画像合成処理を行なって表示用の画像を作成する表示画像作成手段と、上記表示画像作成手段で作成された画像を上記表示手段に表示する表示制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項１１】 上記所定の画像合成処理は、階調の異なる複数枚の撮影画像を合成して当該撮影画像の階調を調整した１の画像を作成する階調調整処理であることを特徴とする請求項１０記載のデジタルスチルカメラ。
【請求項１２】 上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段を備えたことを特徴とする請求項１０記載のデジタルスチルカメラ。
【請求項１３】 上記表示用の画像の上記表示手段への表示は、複数枚の撮影画像の画像ファイルが上記記録媒体に記録される前に行なわれることを特徴とする請求項１２記載のデジタルスチルカメラ。
【請求項１４】 請求項１２記載のデジタルスチルカメラにおいて、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段を更に備えたことを特徴とするデジタルスチルカメラ。
【請求項１５】 上記再生制御手段は、表示用の画像の画像ファイルが存在しないとき、指示された特殊撮影モードでの撮影画像のうち、最初に撮影された撮影画像を上記表示手段に再生表示することを特徴とする請求項１４記載のデジタルスチルカメラ。
【請求項１６】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像を上記表示手段に再生表示する再生制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項１７】 所定の画像合成処理に用いられる複数枚の撮影画像を取得するための複数の特殊撮影モードを有し、この特殊撮影モードが設定されていると、同一の被写体に対し少なくとも２回連続して露光動作を行ない、少なくとも２枚の撮影画像を取得するデジタルスチルカメラにおいて、上記連続撮影された複数枚の撮影画像を用いて上記特殊撮影モードの内容に応じた表示用の画像を作成する表示画像作成手段と、上記複数枚の撮影画像に対してそれぞれ画像ファイルを作成するとともに、表示用の画像に対して画像ファイルを作成し、各画像ファイルを記録媒体に記録する記録手段と、画像を表示する表示手段と、再生モードにおいて、上記記録媒体に記録された上記特殊撮影モードでの撮影画像の再生が指示されると、指示された撮影画像に対応する表示用の画像とこの画像に対応する画像合成処理の内容を示す情報とを上記表示手段に再生表示する再生制御手段とを備えたことを特徴とするデジタルスチルカメラ。
【請求項１８】 上記特殊撮影モードとして複数種類のモードを有し、上記再生制御手段は、再生モードでいずれかの１の特殊撮影モードが選択されると、当該特殊撮影モードでの撮影画像の中から指定された撮影画像に対応する表示用の画像を上記表示手段に再生表示させるものであることを特徴とする請求項１６記載のデジタルスチルカメラ。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図９】
【図２５】
【図８】
【図１０】
【図１２】
【図１３】
【図１１】
【図１４】
【図１７】
【図１５】
【図１６】
【図２１】
【図１８】
【図１９】
【図２０】
【図２２】
【図２３】
【図２４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図９】
【図２５】
【図８】
【図１０】
【図１２】
【図１３】
【図１１】
【図１４】
【図１７】
【図１５】
【図１６】
【図２１】
【図１８】
【図１９】
【図２０】
【図２２】
【図２３】
【図２４】
【公開番号】特開２００２−１１２１０３（Ｐ２００２−１１２１０３Ａ）
【公開日】平成１４年４月１２日（２００２．４．１２）
【国際特許分類】
【出願番号】特願２０００−３０１３５３（Ｐ２０００−３０１３５３）
【出願日】平成１２年９月２９日（２０００．９．２９）
【出願人】（０００００６０７９）ミノルタ株式会社 (155)
【Ｆターム（参考）】
【公開日】平成１４年４月１２日（２００２．４．１２）
【国際特許分類】
【出願日】平成１２年９月２９日（２０００．９．２９）
【出願人】（０００００６０７９）ミノルタ株式会社 (155)
【Ｆターム（参考）】
[ Back to top ]