撮像装置、撮像方法および撮像プログラム
【課題】動画撮影中に適用する特殊効果を、ユーザが容易に変更することができ、ひいては多様な映像表現を実現することができる撮像装置を提供する。
【解決手段】被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置であって、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理部と、前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部と、前記変更指示信号入力部が受け付けた変更指示信号に応じて前記特性を変更する制御部と、を備えたことを特徴とする。
【解決手段】被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置であって、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理部と、前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部と、前記変更指示信号入力部が受け付けた変更指示信号に応じて前記特性を変更する制御部と、を備えたことを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮像して該被写体の画像データを生成する撮像装置、撮像方法および撮像プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置では、自然な印象を有するきれいな画像を生成する機能にとどまらず、ノイズ、シェーディング、ぼかし等の効果を意図的に付加する機能を有するものが知られている。このような機能を有する撮像装置は、従来得られなかった独特の印象を与える撮影を可能としている。
【０００３】
例えば、下記特許文献１では、フィルムのような粒状感（ノイズ感）を有するとともに、ハイコントラストの画像を生成する技術が開示されている。この技術によれば、荒々しく力強い印象の画像を撮影することができる。
【０００４】
また、下記特許文献２では、周縁部が減光された画像を生成する技術が開示されている。この技術によれば、トイカメラで撮影したような印象の画像を撮影することができる。
【０００５】
これらの従来技術は、静止画撮影だけでなく動画撮影にも適用可能である。動画を撮影する場合には、時間的な画像の移り変わりを利用して、静止画にはない動画ならではの独特の映像表現を行うことができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１０−６２８３６号公報
【特許文献２】特開２０１０−７４２４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、静止画を撮影する場合には、ユーザが意図する瞬間を撮影することができるのに対し、動画を撮影する場合には、ユーザの意図を動画に反映させることが難しかった。これは、１つには動画は常に変化するため、その分だけ表現の自由度が大きいことに起因している。この点につき、従来の特殊効果は、動画撮影された各フレームに対して同様の効果が付与されるにすぎないため、特殊効果を付与したとしても単調なシーンになってしまいがちであった。
【０００８】
本発明は、上記に鑑みてなされたものであって、動画撮影中に適用する特殊効果を、ユーザが容易に変更することができ、ひいては多様な映像表現を実現することができる撮像装置、撮像方法および撮像プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
上述した課題を解決し、目的を達成するために、本発明に係る撮像装置は、被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置であって、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理部と、前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部と、前記変更指示信号入力部が受け付けた変更指示信号に応じて前記特性を変更する制御部と、を備えたことを特徴とする。
【００１０】
また、本発明に係る撮像装置は、上記発明において、前記変更指示信号は、前記動画中特殊効果の特性を不変とする効果ホールド信号と、前記動画中特殊効果の時間的な変化を与える特性曲線の変更指示を与える特性曲線変更指示信号と、を含むことを特徴とする。
【００１１】
また、本発明に係る撮像装置は、上記発明において、前記特性曲線を表示可能な表示部をさらに備え、前記制御部は、前記特性曲線変更指示信号が入力された場合、変更された前記特性曲線を前記表示部に表示させることを特徴とする。
【００１２】
また、本発明に係る撮像装置は、上記発明において、撮影指示信号の入力を受け付けるとともに、前記変更指示信号の一部をなすレリーズボタンを有し、前記制御部は、前記動画中特殊効果を付与している最中に前記レリーズボタンによって信号が入力された場合、該信号を前記効果ホールド信号と認識することを特徴とする。
【００１３】
また、本発明に係る撮像装置は、上記発明において、前記変更指示信号入力部は、前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、前記制御部は、前記タッチパネルに対して前記特性の表示位置に対応した接触位置であって略同じ接触位置での接触が継続する場合、該接触による信号を前記効果ホールド信号と認識することを特徴とする。
【００１４】
また、本発明に係る撮像装置は、上記発明において、前記変更指示信号入力部は、前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、前記制御部は、前記タッチパネルに対して前記特性曲線上に対応した接触位置を基点として接触位置がスライドしながら変化した場合、該スライドの方向に応じて前記特性を変更するとともに、前記表示部に変更した前記特性に対応する特性曲線を表示させることを特徴とする。
【００１５】
また、本発明に係る撮像装置は、上記発明において、前記動画中特殊効果画像処理部が行う画像処理は、特定の画像データとこの画像データの後に撮影した画像データとを所定の比率で順次合成し、前記特定の画像データの合成比率が時間とともに小さくなるワンショットエコー処理を含み、前記動画中特殊効果処理の特性は、前記合成比率であることを特徴とする。
【００１６】
また、本発明に係る撮像装置は、上記発明において、一つの画像データに対して視覚的な効果を生じさせるアート効果を付与する画像処理を行うアート効果画像処理部を備え、前記動画中特殊効果画像処理部が行う画像処理は、前記アート効果画像処理部が行うアート効果画像処理の種類を時間の経過とともに徐々に変えていくトランジット処理を含み、前記動画中特殊効果の特性は、前記トランジット処理開始時点で選択されているアート効果の画像中における合成比率であることを特徴とする。
【００１７】
また、本発明に係る撮像方法は、被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置が行う撮像方法であって、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、を有することを特徴とする。
【００１８】
また、本発明に係る撮像プログラムは、被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置に、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、を実行させることを特徴とする。
【発明の効果】
【００１９】
本発明によれば、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行い、変更指示信号の入力に応じて特性を変更するため、ユーザは動画撮影中に付与する特殊効果をユーザの意志で容易に変更することができる。したがって、動画撮影中に適用する特殊効果を用いることによって多様な映像表現を実現することができる。
【図面の簡単な説明】
【００２０】
【図１】図１は、本発明の一実施の形態に係る撮像装置の構成を示すブロック図である。
【図２】図２は、本発明の一実施の形態に係る撮像装置のユーザに面する側（前面側）の構成を示す斜視図である。
【図３】図３は、本発明の一実施の形態に係る撮像装置のアート効果画像処理部が行うアート効果画像処理の概要を示す図である。
【図４】図４は、マルチエコーの概要を説明する図である。
【図５】図５は、ワンショットエコーの概要を説明する図である。
【図６】図６は、最新の撮影画像に合成されるＳＤＲＡＭ画像の係数の時間変化を示す図である。
【図７】図７は、トランジットの概要を説明する図である。
【図８】図８は、トランジット処理において開始トリガ入力前にかけられているアート効果の係数の時間変化を示す図である。
【図９】図９は、揺らぎの概要を説明する図である。
【図１０】図１０は、動画記録時と動画非記録時における十字キーの各矢印キーへの操作割り当て例を示す図である。
【図１１】図１１は、本発明の一実施の形態に係る撮像装置が備えるレンズ制御部と制御部との同期通信の一例を示すタイミングチャートである。
【図１２】図１２は、本発明の一実施の形態に係る撮像装置が行う処理の概要を示すフローチャートである。
【図１３】図１３は、本発明の一実施の形態に係る撮像装置の表示部における動画用の画面表示例を示す図である。
【図１４】図１４は、本発明の一実施の形態に係る撮像装置が行う動画中特殊効果制御処理の概要を示すフローチャートである。
【図１５】図１５は、本発明の一実施の形態に係る撮像装置が行う画像処理の概要を示すフローチャートである。
【図１６】図１６は、本発明の一実施の形態に係る撮像装置が行う特性変更処理の概要を示すフローチャートである。
【図１７】図１７は、効果ホールド状態を模式的に示す図である。
【図１８】図１８は、特性曲線変更処理の概要を示す図である。
【発明を実施するための形態】
【００２１】
以下、添付図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）を説明する。図面の記載において、同一の部分には同一の符号を付して説明する。
【００２２】
本発明の一実施の形態は、静止画と動画を撮影可能な撮像装置を用いて動画記録を開始すると、静止画用に割り当てられた操作入力用のユーザインターフェースの機能が動画特殊効果用に切り替わることを特徴とする。
【００２３】
本実施の形態に係る撮像装置は、動画撮影中に静止画を撮影する機能を有する。ここで、動画撮影中の静止画撮影とは、動画を撮影している途中で静止画を撮影する場合と、動画撮影を終了した直後に静止画を撮影する場合とを含む。また、動画を撮影している途中で静止画を撮影する場合には、静止画撮影時に動画撮影を一旦停止する場合と、静止画撮影を動画撮影と並行して行う場合とが含まれる。
【００２４】
図１は、本実施の形態に係る撮像装置の構成を示すブロック図である。図２は、本発明の一実施の形態に係る撮像装置のユーザに面する側（前面側）の構成を示す斜視図である。図１および図２に示す撮像装置１は、本体部２と、本体部２に着脱自在なレンズ部３と、を備える。
【００２５】
本体部２は、シャッタ１０と、シャッタ駆動部１１と、撮像素子１２と、撮像素子駆動部１３と、信号処理部１４と、Ａ／Ｄ変換部１５と、画像処理部１６と、ＡＥ処理部１７と、ＡＦ処理部１８と、画像圧縮展開部１９と、入力部２０と、表示部２１と、表示駆動部２２と、記録媒体２３と、メモリＩ／Ｆ２４と、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）２５と、Ｆｌａｓｈメモリ２６と、本体通信部２７と、バス２８と、制御部２９と、を備える。
【００２６】
シャッタ１０は、撮像素子１２の状態を露光状態または遮光状態に設定する。シャッタ駆動部１１は、ステッピングモータ等を用いて構成され、制御部２９から入力される指示信号に応じてシャッタ１０を駆動する。
【００２７】
撮像素子１２は、レンズ部３が集光した光を受光して電気信号に変換するＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いて構成される。撮像素子駆動部１３は、所定のタイミングで撮像素子１２から画像データ（アナログ信号）を信号処理部１４に出力させる。この意味で、撮像素子駆動部１３は、電子シャッタとして機能する。
【００２８】
信号処理部１４は、撮像素子１２から入力されるアナログ信号に対して、アナログ処理を施してＡ／Ｄ変換部１５に出力する。具体的には、信号処理部１４は、アナログ信号に対して、ノイズ低減処理およびゲインアップ処理等を行う。例えば、信号処理部１４は、アナログ信号に対して、リセットノイズ等を低減した上で波形整形を行い、さらに目的の明るさとなるようにゲインアップを行う。
【００２９】
Ａ／Ｄ変換部１５は、信号処理部１４から入力されるアナログ信号に対してＡ／Ｄ変換を行うことによってデジタルの画像データを生成し、バス２８を介してＳＤＲＡＭ２５に出力する。
【００３０】
画像処理部１６は、バス２８を介してＳＤＲＡＭ２５から画像データを取得し、取得した画像データ（ＲＡＷデータ）に対して各種の画像処理を行って処理画像データを生成する。この処理画像データは、バス２８を介してＳＤＲＡＭ２５に出力される。画像処理部１６は、基本画像処理部１６１と、アート効果画像処理部１６２と、動画中特殊効果画像処理部１６３と、を有する。
【００３１】
基本画像処理部１６１は、画像データに対して、少なくとも、オプティカルブラック減算処理、ホワイトバランス（ＷＢ）調整処理、撮像素子がベイヤー配列の場合には画像データの同時化処理、カラーマトリクス演算処理、ガンマ補正処理、色再現処理およびエッジ強調処理等を含む基本の画像処理を行う。また、基本画像処理部１６１は、予め設定された各画像処理のパラメータに基づいて、自然な画像を再現する仕上がり効果処理を行って仕上がり効果画像データを生成する。ここで、各画像処理のパラメータとは、コントラスト、シャープネス、彩度、ホワイトバランスおよび階調の値である。
【００３２】
アート効果画像処理部１６２は、１つの画像データに対して複数の画像処理を組み合わせることにより、視覚的な効果を生じさせるアート効果処理を行って処理画像データ（以下、「アート効果画像データ」という）を生成する。
【００３３】
図３は、アート効果画像処理部１６２が行うアート効果画像処理の概要を示す図である。図３ではアート効果画像処理として、ファンタジックフォーカス、ファンタジックフォーカス＋スターライト、ファンタジックフォーカス＋ホワイトエッジ、ポップアート、ポップアート＋スターライト、ポップアート＋ピンホール、ポップアート＋ホワイトエッジ、トイフォト、ラフモノクローム、ジオラマの１０種類が記載されている。以下、これらのアート効果画像処理について説明する。
【００３４】
ファンタジックフォーカスは、画像全体にぼかし処理を施し、ぼかす前の画像と一定の割合で合成するソフトフォーカスの効果を与える処理である。ファンタジックフォーカスは、中間の輝度をより明るくするトーンカーブ処理を行うことにより、柔らかいトーンの中で、被写体のディテールを残しながら、幸福な光に包まれたように美しく幻想的な雰囲気の画像を結像または生成する。ファンタジックフォーカスは、例えばトーンカーブ処理、ぼかし処理、アルファブレンド処理および画像合成処理等の画像処理を組み合わせることによって実現される。
ファンタジックフォーカス＋スターライトは、ファンタジックフォーカスに加えて、画像中の高輝度部に対してクロスパターンを描写するクロスフィルター効果を施す処理である。
ファンタジックフォーカス＋ホワイトエッジは、ファンタジックフォーカスに加えて、画像の中心部から周縁部に行くにしたがって徐々に白味を帯びる効果が施す処理である。このような白味の効果は、画像の中心からの距離が大きいほど周辺部が白くなるように画素値を変更することによって得られる。
【００３５】
ポップアートは、色をカラフルに強調し、明るく楽しい雰囲気を表現する処理である。ポップアートは、例えば彩度強調処理およびコントラスト強調処理を組み合わせることによって実現される。全体に高コントラストで高彩度の効果である。
ポップアート＋スターライトは、ポップアートとスターライトを重ねて施す処理である。この場合には、カラフルな画像にクロスフィルターを施した効果が得られる。
ポップアート＋ピンホールは、ポップアートに加えて、画像の周縁部をシェーディングによって暗くして穴から覗き込むような効果を与えるトイフォト（ピンホール）を施す処理である。トイフォトの詳細については、後述する。
ポップアート＋ホワイトエッジは、ポップアートとホワイトエッジを重ねて施す処理である。
【００３６】
トイフォトは、画像の中心からの距離が大きいほど輝度が小さく（暗く）なるようにして、あたかも穴から覗き込んで異空間に迷い込んだような効果を生じさせる処理である。トイフォトは、例えばローパスフィルタ処理、ホワイトバランス処理、コントラスト処理、色相・彩度処理に加え、輝度信号に対して周辺ほど小さい係数を乗じるシェーディング処理等の画像処理を組み合わせることによって実現される（トイフォト、シェーディングの詳細な内容については、例えば特開２０１０−７４２４４号公報を参照）。
【００３７】
ラフモノクロームは、高コントラストとフィルムの粒状のノイズを付加してモノクロ画像の力強さや荒々しさを表現する処理である。ラフモノクロームは、例えばエッジ強調処理、レベル補正最適化処理、ノイズパターン重畳処理、合成処理およびコントラスト処理等を組み合わせることによって実現される（ラフモノクロームの詳細な内容については、例えば特開２０１０−６２８３６号公報を参照）。このうちノイズパターン重畳処理（ノイズ付加処理）は、予め作成したノイズパターン画像をもとの画像に加算する処理である。ノイズパターン画像は、例えば乱数などを発生させ、この乱数に基づいて生成してもよい。
【００３８】
ジオラマは、高コントラストで高彩度の画像に、画像の周縁部をぼかすことにより、ミニチュア模型やおもちゃを見ているかのような雰囲気を画面上に作り出す処理である。ジオラマは、例えば色相・彩度処理、コントラスト処理、周辺ぼかし処理および合成処理等を組み合わせることによって実現される。このうち、周辺ぼかし処理は、画像の中心からの距離に応じ、周辺部ほどぼける度合いが大きくなるように、画像の位置に応じてローパス係数を変更しながらローパスフィルタ処理を行うものである。なお、周辺ぼかし処理として、画像の上下のみ、または画像の左右のみをぼかすようにしてもよい。
【００３９】
動画中特殊効果画像処理部１６３は、動画を記録する際、画像に特殊効果を加える画像処理を行う。動画中特殊効果画像処理部１６３が行う動画中特殊効果としては、例えばマルチエコー、ワンショットエコー、トランジット、揺らぎがある。以下、これらの動画中特殊効果について説明する。
【００４０】
図４は、マルチエコーの概要を説明する図である。マルチエコーとは、直前の記録用画像と今撮影した画像の合成を所定の期間繰り返すことによって画像に残像が残る効果である。具体的には、図４に示すように、ボール１０１が動く軌跡を残像として表示することができる効果である。
【００４１】
動画中特殊効果画像処理部１６３は、動画中特殊効果としてマルチエコーが設定されている場合、開始トリガが入力されると、その直後に生成された画像に対して、一つ前のフレームの画像を所定の割合で合成する処理（マルチエコー処理）を行う。
【００４２】
図４に示す場合、動画中特殊効果画像処理部１６３は、開始トリガ入力直後の撮影画像Ｐ１とその１つ前のフレームの撮影画像Ｐ０に対応する記録画像Ｒ０とを合成することによってマルチエコー画像Ｒ１を生成する。この合成の際、各画素において、撮影画像Ｐ１の信号に係数０．６を乗じる一方、記録画像Ｒ０の信号に係数０．４を乗じる。
続いて、動画中特殊効果画像処理部１６３は、次のフレームの撮影画像Ｐ２と合成画像Ｒ１とを合成することによってマルチエコー画像Ｒ２を生成する。マルチエコー画像Ｒ２を生成する際には、各画素において、撮影画像Ｐ２の信号に係数０．６を乗じる一方、合成画像Ｒ１の信号に係数０．４を乗じる。
【００４３】
動画中特殊効果画像処理部１６３は、終了トリガが入力されるまで、上述した合成処理を繰り返し行うことによってマルチエコー画像を順次生成する。終了トリガが入力されると、記録媒体２３には、撮影画像Ｐ５に対応する記録画像Ｒ５が記録される。
【００４４】
図５は、ワンショットエコーの概要を説明する図である。ワンショットエコーとは、特定のフレームの画像（一瞬の画像）が徐々に薄くなりながら消えていく効果である。具体的には、図５に示すように、特定の時間に撮影されたボール１０１がしばらくの間撮影画像に残像として残るような効果である。
【００４５】
動画中特殊効果画像処理部１６３は、動画中特殊効果としてワンショットエコーが設定されている場合、開始トリガが入力されると、その直後に撮影して記録された画像データを一旦ＳＤＲＡＭ２５に保存し、この画像データをその後に撮影された画像データに対して時間とともに徐々に重みが減衰するように合成していく処理（ワンショットエコー処理）を行う。
【００４６】
図５に示す場合、開始トリガの入力直後に撮影された撮影画像Ｐ１はＳＤＲＡＭ２５に記憶される（以下、ＳＤＲＡＭ画像Ｓ１という）。動画中特殊効果画像処理部１６３は、ＳＤＲＡＭ２５が記憶するＳＤＲＡＭ画像Ｓ１と最新の撮影画像とを所定の比率で合成する。
【００４７】
図５に示す場合、開始トリガ入力直後には撮影画像Ｐ１に対応するワンショットエコー画像Ｒ１１が表示される。
その後、時間ｔ＝ｔ２において、動画中特殊効果画像処理部１６３は、ＳＤＲＡＭ画像Ｓ１と撮影画像Ｐ２とを合成することによってワンショットエコー画像Ｒ１２を生成する。この合成を行う際、各画素において、ＳＤＲＡＭ画像Ｓ１の信号に係数ａ1＝０．８を乗じる一方、撮影画像Ｐ２の信号に係数１−ａ1＝０．２を乗じる。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ3において、ＳＤＲＡＭ画像Ｓ１の信号に乗じる係数をａ＝０．４、撮影画像Ｐ３の信号に乗じる係数を１−ａ＝０．６として合成したワンショットエコー画像Ｒ１３を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ4において、ＳＤＲＡＭ画像Ｓ１の信号に乗じる係数をａ＝０．２、撮影画像Ｐ４の信号に乗じる係数を１−ａ＝０．８として合成したワンショットエコー画像Ｒ１４を生成する。
その後、時間ｔ＝ｔ5において係数ａ＝０となるため、撮影画像Ｐ５が記録画像Ｒ５となる。
【００４８】
図６は、最新の撮影画像に合成されるＳＤＲＡＭ画像の合成比率の時間変化を示す図である。図６において、横軸ｔは開始トリガ入力時点（ｔ＝０）からの経過時間であり、縦軸ａはＳＤＲＡＭ画像Ｓ１の各画素の信号に乗じる係数である。図６に示すように、係数ａは、ｔ＝０でａ1であり、時間とともに滑らかに減少していき、開始トリガ入力から所定時間ｔ5経過した時点で０となる。すなわち、ＳＤＲＡＭ画像Ｓ１の合成画像中に占める割合は、時間とともに徐々に減少していく設定がなされている。これにより、ＳＤＲＡＭ画像Ｓ１が時間とともに徐々に消えていくような画像を作り出すことができる。
【００４９】
なお、図６に示す曲線は一例に過ぎず、時間とともに係数ａが減衰するなどして一定時間で係数ａが０となるように滑らかに変化する曲線であればどのようなものでもよく、例えば係数ａが一定値をとる期間を含む曲線でもよい。
【００５０】
また、係数ａは、開始トリガからのフレーム数に応じて定めるようにしてもよい。この場合には、フレーム単位で徐々に係数ａの値を減少させながら、所定のフレーム数（例えば１２０フレーム）で係数が０となるようにすればよい。
【００５１】
図７は、トランジットの概要を説明する図である。トランジットは、１つの画像に対して付与されるアート効果が、別のアート効果へと徐々に比率を変えながら変わっていく効果である。図７では、アート効果Ａからアート効果Ｂへ変化するトランジットを模式的に示している。図７において、トランジットの開始トリガ入力直前は、撮影画像Ｐ０に対してアート効果Ａを施したアート効果画像Ａ０が生成される。トランジットでアート効果の切り替え開始から切り替え終了までに要する時間は、適宜設定可能である。
【００５２】
図７に示す場合、開始トリガ入力前は、アート効果Ａが設定されているものとする。すなわち、開始トリガ入力直前において、アート効果画像処理部１６２は、撮影画像Ｐ０にアート効果Ａを施したアート効果画像Ｒ２０を形成しているものとする。
【００５３】
開始トリガが入力されると、動画中特殊効果画像処理部１６３は、撮影画像Ｐ１にアート効果Ａを施したアート効果画像Ａ１に係数ｂ（＝ｂ0）＝０．８を乗じる一方、撮影画像Ｐ１にアート効果Ｂを施したアート効果画像Ｂ１に係数１−ｂ（＝１−ｂ0）＝０．２を乗じた二つの画像を合成することによってトランジット画像Ｒ２１を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ12において、撮影画像Ｐ２にアート効果Ａを施したアート効果画像Ａ２の信号に乗じる係数をｂ＝０．６とし、撮影画像Ｐ２にアート効果Ｂを施したアート効果画像Ｂ２の信号に乗じる係数を１−ｂ＝０．４として合成したトランジット画像Ｒ２２を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ13において、撮影画像Ｐ３にアート効果Ａを施したアート効果画像Ａ３の信号に乗じる係数をｂ＝０．４とし、撮影画像Ｐ３にアート効果Ｂを施したアート効果画像Ｂ３の信号に乗じる係数を１−ｂ＝０．６として合成したトランジット画像Ｒ２３を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ14において、撮影画像Ｐ４にアート効果Ａを施したアート効果画像Ａ４の信号に乗じる係数をｂ＝０．２とし、撮影画像Ｐ４にアート効果Ｂを施したアート効果画像Ｂ４の信号に乗じる係数を１−ｂ＝０．８として合成したトランジット画像Ｒ２４を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ15において、撮影画像Ｐ５にアート効果Ｂのみを施した（ｂ＝０）トランジット画像Ｒ２５を生成する。
【００５４】
図８は、トランジット処理において開始トリガ入力前から付与されているアート効果の合成比率（係数）ｂの時間変化を示す図である。図８に示すように、係数ｂは、ｔ＝０でｂ0であり、時間とともに滑らかに減少していき、開始トリガ入力から所定時間ｔ15経過した時点で０となる。
【００５５】
なお、図８に示す曲線は一例に過ぎず、時間とともに係数ｂが減衰するなどして一定時間で係数ｂが０となるように滑らかに変化する曲線であればどのようなものでもよく、例えば係数ｂが一定値をとる期間を含む曲線でもよい。
【００５６】
また、係数ｂを、開始トリガからのフレーム数に応じて定めるようにしてもよい。この場合には、フレーム単位で滑らかに係数ｂの値を減少させながら、所定のフレーム数（例えば１２０フレーム）で係数が０となるようにすればよい。
【００５７】
図９は、揺らぎの概要を示す図である。揺らぎとは、動画中の各フレームに対して付与するアート効果のかかり具合を時間とともにランダムに変化させることによって得られる効果である。図９では、一例として、アート効果がクロスフィルターである場合を示している。この場合、動画中特殊効果画像処理部１６３は、クロス１０２を時間とともにランダムに回転させるとともに、クロス１０２の大きさを時間とともにランダムに変化させることによって揺らぎを与えている。
【００５８】
引き続き、撮像装置１の構成を説明する。
ＡＥ処理部１７は、バス２８を介してＳＤＲＡＭ２５に記録された画像データを取得し、取得した画像データに基づいて、静止画撮影または動画撮影を行う際の露出条件を設定する。具体的には、ＡＥ処理部１７は、画像データから輝度を算出し、算出した輝度に基づいて、例えば絞り値（Ｆ値）の設定値、シャッタ速度等を決定することで撮像装置１の自動露出を行う。
【００５９】
ＡＦ処理部１８は、バス２８を介してＳＤＲＡＭ２５に記録された画像データを取得し、取得した画像データに基づいて、撮像装置１の自動焦点の調整を行う。例えば、ＡＦ処理部１８は、画像データから高周波成分の信号を取り出し、高周波成分の信号に対してＡＦ（Auto Focus）演算処理を行うことによって、撮像装置１の合焦評価を決定することで撮像装置１の自動焦点の調整を行う。
【００６０】
画像圧縮展開部１９は、バス２８を介してＳＤＲＡＭ２５から画像データを取得し、取得した画像データに対して所定の形式に従って圧縮し、この圧縮した画像データをＳＤＲＡＭ２５に出力する。ここで、所定の形式としては、ＪＰＥＧ（Joint Photographic Experts Group）方式、ＭｏｔｉｏｎＪＰＥＧ方式およびＭＰ４（Ｈ．２６４）方式等である。また、画像圧縮展開部１９は、バス２８およびメモリＩ／Ｆ２４を介して記録媒体２３に記録された画像データ（圧縮画像データ）を取得し、取得した画像データを展開（伸長）してＳＤＲＡＭ２５に出力する。なお、記録媒体２３の代わりに撮像装置１の内部に記憶部を設けてもよい。
【００６１】
入力部２０は、静止画撮影および動画撮影における撮影条件を設定する静止画撮影条件設定信号を含む各種設定信号の入力を受け付ける設定信号入力部２０１と、少なくとも動画撮影の開始を指示する動画撮影開始信号の入力を受け付ける動画撮影信号入力部２０２と、動画中特殊効果の特性を変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部２０３と、を有する。
【００６２】
変更指示信号入力部２０３が入力を受け付ける変更指示信号は、動画中特殊効果の特性を変えずに動画中特殊効果をホールドする効果ホールド信号、および動画中特殊効果の特性の時間的な変化を与える特性曲線の変更指示を与える特性曲線変更指示信号からなる。
【００６３】
入力部２０は、本体部２の表面に設けられた操作信号入力用のユーザインターフェースを用いて実現される。以下、入力部２０の一部をなすユーザインタフェースの構成を説明する。
【００６４】
撮像装置１は、操作入力用のユーザインタフェースとして、撮像装置１の電源状態をオン状態またはオフ状態に切替える電源ボタン４１と、静止画撮影の指示を与える静止画レリーズ信号の入力を受け付けるレリーズボタン４２と、撮像装置１に設定された各種撮影モードを切り替えるモードダイヤル４３と、撮像装置１の各種設定を切替える操作ボタン４４と、撮像装置１の各種設定を表示部２１に表示させるメニューボタン４５と、記録媒体２３に記録された画像データに対応する画像を表示部２１に表示させる再生ボタン４６と、動画撮影の指示を与える動画レリーズ信号の入力を受け付ける動画ボタン４７と、撮像装置１の各種機能を設定するファンクションキー４８と、データを消去する消去ボタン４９と、表示部２１の表示画面に重ねて設けられ、外部からの接触位置に応じた入力信号を受け付けるタッチパネル５０とを有する。
【００６５】
レリーズボタン４２は、外部からの押圧により進退可能である。レリーズボタン４２が半押しされた場合、撮影準備動作を指示する１ｓｔレリーズ信号が入力される。これに対し、レリーズボタン４２が全押しされた場合、静止画撮影を指示する２ｎｄレリーズ信号が入力される。本実施の形態では、動画中特殊効果画像処理部１６３が動画中特殊効果画像処理を実行している最中は、レリーズボタン４２の１ｓｔレリーズ信号を効果ホールド信号としてもよい。これにより、ユーザは効果ホールドを行いたいときに、直感的に把握しやすい入力ボタンを使用して効果ホールド処理を行うことができる。この場合のレリーズボタン４２は、変更指示信号入力部２０３の一部をなすこととなる。
【００６６】
操作ボタン４４は、メニュー画面等における選択設定入力を行うために上下左右方向に十字状をなす十字キー４４１と、十字キー４４１による選択を確定する決定ボタン４４２とを有する。十字キー４４１は、上矢印キー４４３、下矢印キー４４４、左矢印キー４４５、右矢印キー４４６からなる。
【００６７】
タッチパネル５０は、変更指示信号入力部２０３の一部として機能する。すなわち、タッチパネル５０は、効果ホールド信号や、特性曲線変更指示信号の入力を受け付ける機能を有する。
【００６８】
以上説明したユーザインタフェースのうち、動画ボタン４７以外のボタンは設定信号入力部２０１の一部をなす。また、動画ボタン４７は動画撮影信号入力部２０２の一部をなす。また、動画中特殊効果画像処置実行中のレリーズボタン４２、およびタッチパネル５０は、変更指示信号入力部２０３の一部をなす。
【００６９】
図１０は、動画記録中でない場合（動画非記録時）と動画記録中である場合（動画記録時）における十字キー４４１の各矢印キーへの操作割り当て例を示す図である。動画が記録中でない場合、上矢印キー４４３には露出補正操作が割り当てられる。下矢印キー４４４には連写・単写操作が割り当てられる。左矢印キー４４５にはＡＦターゲット操作が割り当てられる。右矢印キー４４６にはフラッシュ設定操作が割り当てられる。
【００７０】
次に、動画記録中である場合を説明する。この場合、上矢印キー４４３にはワンショットエコー開始操作が割り当てられる。下矢印キー４４４にはトランジット開始操作が割り当てられる。左矢印キー４４５は、マルチエコーの開始、停止操作を交互に割り当てトグルキーとして機能する。右矢印キー４４６には揺らぎ開始操作が割り当てられる。なお、揺らぎの終了を任意に選択できるように設定する場合には、右矢印キー４４６に対して、揺らぎの開始操作と終了操作とを交互に操作可能なトグルキーとして機能させればよい。
【００７１】
なお、動画記録時における入力ボタンの割り当ては、図１０に示すものに限られるわけではない。
【００７２】
表示部２１は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて構成される。表示駆動部２２は、バス２８を介してＳＤＲＡＭ２５が記憶する画像データまたは記録媒体２３が記憶する画像データを取得し、取得した画像データに対応する画像を表示部２１に表示させる。ここで、画像の表示には、撮影直後の画像データを所定時間（例えば３秒間）だけ表示するレックビュー表示、記録媒体２３に記録された画像データを再生する再生表示、および撮像素子１２が連続的に生成する画像データに対応するライブビュー画像を時系列に沿って順次表示するライブビュー表示等が含まれる。また、表示部２１は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。
【００７３】
記録媒体２３は、撮像装置１の外部から装着されるメモリカード等を用いて構成される。記録媒体２３は、メモリＩ／Ｆ２４を介して撮像装置１に着脱自在に装着される。記録媒体２３には、その種類に応じた図示しない読み書き装置によって画像処理部１６や画像圧縮展開部１９が処理を施した画像データが書き込まれ、または読み書き装置によって記録媒体２３に記録された画像データが読み出される。また、記録媒体２３は、制御部２９の制御のもと、メモリＩ／Ｆ２４およびバス２８を介して撮像プログラムおよび各種情報それぞれをＦｌａｓｈメモリ２６に出力してもよい。
【００７４】
ＳＤＲＡＭ２５は、揮発性メモリを用いて構成される。ＳＤＲＡＭ２５は、バス２８を介してＡ／Ｄ変換部１５から入力される画像データ、画像処理部１６から入力される処理画像データおよび撮像装置１の処理中の情報を一時的に記憶する一次記憶部としての機能を有する。例えば、ＳＤＲＡＭ２５は、信号処理部１４、Ａ／Ｄ変換部１５およびバス２８を介して、撮像素子１２が１フレーム毎に順次出力する画像データを一時的に記憶する。
【００７５】
Ｆｌａｓｈメモリ２６は、不揮発性メモリを用いて構成される。Ｆｌａｓｈメモリ２６は、プログラム記録部２６１と、特殊効果処理情報記録部２６２と、画像処理情報記録部２６３と、を有する。プログラム記録部２６１は、撮像装置１を動作させるための各種プログラム、撮像プログラムおよびプログラムの実行中に使用される各種データおよび画像処理部１６による画像処理の動作に必要な各種パラメータ等を記録する。特殊効果処理情報記録部２６２は、アート効果画像処理部１６２が行う各アート効果処理における画像処理の組み合わせ情報を記録する。画像処理情報記録部２６３は、画像処理部１６が実行可能な画像処理に処理時間を対応付けた画像処理情報を記録する。また、Ｆｌａｓｈメモリ２６は、撮像装置１を特定するための製造番号等を記録する。
【００７６】
本体通信部２７は、本体部２に装着されたレンズ部３との通信を行うための通信インターフェースである。本体通信部２７には、レンズ部３との電気的な接点も含まれる。
【００７７】
バス２８は、撮像装置１の各構成部位を接続する伝送路等を用いて構成される。バス２８は、撮像装置１の内部で発生した各種データを撮像装置１の各構成部位に転送する。
【００７８】
制御部２９は、ＣＰＵ（Central Processing Unit）等を用いて構成される。制御部２９は、画像処理制御部２９１と、特性制御部２９２と、表示制御部２９３と、を有する。
【００７９】
画像処理制御部２９１は、バス２８を介して入力される入力部２０からの指示信号に応じて、画像処理部１６に実行させるべき画像処理の内容を設定し、設定した内容に応じた画像処理を、基本画像処理部１６１、アート効果画像処理部１６２、および動画中特殊効果画像処理部１６３のいずれかに実行させる。
【００８０】
特性制御部２９２は、動画中特殊効果の特性を制御する。この特性は、ワンショットエコーの場合には、ＳＤＲＡＭ画像の合成比率ａである（図６を参照）。また、トランジットの場合には、トランジット前のアート効果の合成比率ｂである（図８を参照）。
【００８１】
表示制御部２９３は、表示部２１の表示態様を制御する。具体的には、表示制御部２９３は、表示駆動部２２を駆動し、画像処理部１６が処理を行った各種画像データに対応する画像を表示部２１に表示させる。
【００８２】
制御部２９は、バス２８を介して入力部２０から送信される指示信号に応じて、撮像装置１を構成する各部に対して制御信号や各種データの送信を行うことにより、撮像装置１の動作を統括的に制御する。
【００８３】
制御部２９は、レリーズボタン４２を介して２ｎｄレリーズ信号が入力された場合、撮像装置１における静止画撮影動作を開始する制御を行う。また、制御部２９は、動画ボタン４７を介して動画撮影開始信号が入力された場合、撮像装置１における動画撮影動作を開始する制御を行う。ここで、撮像装置１における撮影動作とは、シャッタ駆動部１１および撮像素子駆動部１３の駆動によって撮像素子１２が出力した画像データに対し、信号処理部１４、Ａ／Ｄ変換部１５および画像処理部１６が所定の処理を施す動作をいう。このように処理が施された画像データは、画像処理制御部２９１の制御のもと、画像圧縮展開部１９で所定の形式にしたがって圧縮され、バス２８およびメモリＩ／Ｆ２４を介して記録媒体２３に記録される。なお、本実施の形態では記録媒体２３が記憶部の一部をなしているが、記録媒体２３とは別に撮像装置１の内部に記憶部の機能を有する記憶領域を確保し、この記憶領域に圧縮した画像データを記憶するようにしてもよい。
【００８４】
以上の構成を有する本体部２に対して、音声入出力部、被写体に対して補助光（フラッシュ）を発光する補助光発光部、インターネットを介して外部の装置と双方向に通信を行う機能を有する通信部などをさらに設けてもよい。
【００８５】
次に、レンズ部３の構成を説明する。レンズ部３は、光学系３１と、レンズ駆動部３２と、絞り３３と、絞り駆動部３４と、レンズ操作部３５と、レンズＦｌａｓｈメモリ３６と、レンズ通信部３７と、レンズ制御部３８と、を備える。
【００８６】
光学系３１は、一または複数のレンズを用いて構成される。光学系３１は、所定の視野領域から光を集光する。光学系３１は、画角を変化させる光学ズーム機能および焦点を変化させるフォーカス機能を有する。
【００８７】
レンズ駆動部３２は、ＤＣモータまたはステッピングモータ等を用いて構成され、光学系３１のレンズを光軸Ｌ上で移動させることにより、光学系３１のピント位置や画角等の変更を行う。
【００８８】
絞り３３は、光学系３１が集光した光の入射量を制限することにより露出の調整を行う。
絞り駆動部３４は、ステッピングモータ等を用いて構成され、絞り３３を駆動する。
【００８９】
レンズ操作部３５は、図２に示すように、レンズ部３のレンズ鏡筒の周囲に設けられるリングであり、レンズ部３における光学ズームの操作を開始する操作信号の入力、またはレンズ部３におけるピント位置の調整を指示する指示信号の入力を受け付ける。なお、レンズ操作部３５は、プッシュ式のスイッチ等であってもよい。
【００９０】
レンズＦｌａｓｈメモリ３６は、光学系３１の位置および動きそれぞれを決定するための制御用プログラム、光学系３１のレンズ特性および各種パラメータを記録する。
【００９１】
レンズ通信部３７は、レンズ部３が本体部２に装着されたときに、本体部２の本体通信部２７と通信を行うための通信インターフェースである。レンズ通信部３７には、本体部２との電気的な接点も含まれる。
【００９２】
レンズ制御部３８は、ＣＰＵ（Central Processing Unit）等を用いて構成される。レンズ制御部３８は、レンズ操作部３５の操作信号または本体部２からの指示信号に応じてレンズ部３の動作を制御する。具体的には、レンズ制御部３８は、レンズ操作部３５の操作信号に応じて、レンズ駆動部３２を駆動させてレンズ部３のピント合わせやズーム変更を行うとともに、絞り駆動部３４を駆動させて絞り値の変更を行う。なお、レンズ制御部３８は、レンズ部３が本体部２に装着された際に、レンズ部３のピント位置情報、焦点距離およびレンズ部３を識別する固有情報等を本体部２に送信するようにしてもよい。
【００９３】
レンズ制御部３８は、本体部２の制御部２９との間で所定の周期でレンズ通信信号を送受信することによって、本体部２との動作の連携を図っている。図１１は、レンズ制御部３８と制御部２９との同期通信の一例を示すタイミングチャートである。図１１（ａ）は本体部２内の処理を示している。図１１（ｂ）は垂直同期信号を示している。図１１（ｃ）は撮像、読み出しのタイミングを示している。図１１（ｄ）はレンズ通信を示している。図１１（ｅ）はレンズ通信同期信号を示している。図１１（ｆ）はレンズ位置取得信号を示している。図１１（ｇ）はレンズ部３内の処理を示している。
【００９４】
まず、制御部２９は、前フレームで取得した画像データによりライブビュー画像の画像処理およびＡＦ評価値の算出等を画像処理部１６に実行させるとともに、レンズ制御部３８にレンズ状態データを取得するためのレンズ状態データ要求コマンドを送信する（Ｂ１、ＢＬ）。この際、制御部２９は、同期通信モード中に、垂直同期信号と同じ周期でレンズ通信用の同期信号および光学系３１の位置情報を取得するタイミングを指示するレンズ位置取得信号を送信する。このレンズ位置取得信号は、図１１（ｃ）に示すように撮像素子１２の中央部の蓄積時間の１／２が経過した時点で状態が変化する信号である。
【００９５】
レンズ制御部３８は、レンズ位置取得信号の状態が変化したタイミングで光学系３１の位置情報を取得するとともに、レンズ通信同期信号の受信タイミングでレンズ操作部３５の操作状態を検出する（Ｌ１）。
【００９６】
続いて、レンズ制御部３８は、制御部２９から受信したレンズ状態データ要求コマンドへの応答として、工程Ｌ１で取得した光学系３１の位置情報およびレンズ操作部３５の捜査状態を含むレンズ状態データを制御部２９へ送信する（Ｌ２）。
【００９７】
この後、制御部２９は、レンズ制御部３８から送られてきたレンズ状態データに基づいて、ＡＦ評価値の算出や、露出値の変更等の各種設定変更を行う（Ｂ２）。
【００９８】
制御部２９とレンズ制御部３８は、以上説明した処理を周期的に繰り返し行う。
【００９９】
図１２は、以上の構成を有する撮像装置１が行う処理の概要を示すフローチャートである。図１２において、まず、ユーザによって電源ボタン４１が操作されて、撮像装置１の電源がオン状態になる（ステップＳ１：Ｙｅｓ）と、制御部２９は、撮像装置１の初期化を行う（ステップＳ２）。この初期化処理において、制御部２９は、例えば動画の記録中を示す記録中フラグをオフ状態にリセットしたり、動画中の特殊効果に関する適用を示す特殊効果フラグをオフ状態にリセットしたり、レンズ制御部３８との間のレンズ通信（図１１を参照）を開始したりする処理を行う。なお、撮像装置１の電源がオン状態でない場合（ステップＳ１：Ｎｏ）、撮像装置１はステップＳ１を繰り返す。
【０１００】
続いて、再生ボタン４６が操作されることなく（ステップＳ３：Ｎｏ）、メニューボタン４５が操作された場合（ステップＳ４：Ｙｅｓ）、撮像装置１は、設定を変更するためのメニュー画面を表示し、ユーザの選択操作に応じて撮像装置１の各種条件を設定する設定処理を実行する（ステップＳ５）。ステップＳ５の後、撮像装置１は、後述するステップＳ７へ移行する。
【０１０１】
ここで設定される内容は、仕上がり効果処理、アート効果処理、静止画記録モード、動画記録モード、動画中特殊効果処理などである。仕上がり効果処理には、例えば画像を自然な色合いに仕上げる処理であるナチュラル、画像を色鮮やかに仕上げる処理であるビビッド、被写体の素材性を重視して仕上げる処理であるフラット、画像をモノクロ調に仕上げる処理であるモノトーンなどが含まれる。静止画記録モードは、記録対象とする静止画の種類に応じて定められ、例えばＪＰＥＧ記録モード、ＪＰＥＧ＋ＲＡＷ記録モード、ＲＡＷ記録モードなどがある。動画撮影モードは、動画圧縮形式に応じて定められるモードであって、例えばＭｏｔｉｏｎ−ＪＰＥＧモード、ＭＰ４（Ｈ．２６４）モードなどがある。動画中特殊効果処理で設定されるのは、例えばトランジットによるアート効果の切り替え先や揺らぎなどである。
【０１０２】
ステップＳ３で再生ボタン４６が操作された場合（ステップＳ３：Ｙｅｓ）、撮像装置１は再生処理を行う（ステップＳ６）。このステップＳ６において、表示制御部２９３は、記録媒体２３に記録されているファイル一覧を表示部２１に表示させる。その後、入力部２０によって再生画像が選択入力された場合、記録媒体２３から画像データを取得し、取得した画像データを画像圧縮展開部１９で展開して表示部２１に表示させる。この後、撮像装置１は、ステップＳ１８へ移行する。
【０１０３】
ステップＳ３で再生ボタン４６が操作されることなく（ステップＳ３：Ｎｏ）、メニューボタン４５が操作されていない場合（ステップＳ４：Ｎｏ）において、動画ボタン４７が操作されたとき（ステップＳ７：Ｙｅｓ）、制御部２９は、動画の記録中であることを示す記録中フラグを反転させる（ステップＳ８）。具体的には、例えば記録中フラグがオン状態にある場合、制御部２９は、その記録中フラグをオフ状態に反転させる。
【０１０４】
続いて、制御部２９は、ＳＤＲＡＭ２５に記録された記録中フラグがオン状態であるか否かを判断する（ステップＳ９）。記録中フラグがオン状態であると判断した場合（ステップＳ９：Ｙｅｓ）、制御部２９は、記録媒体２３に画像データを時系列に沿って記録するための動画ファイルを生成して記録媒体２３に格納する（ステップＳ１０）。
【０１０５】
その後、制御部２９は、特殊動画用のユーザインターフェース（ＵＩ）を設定する（ステップＳ１１）。この設定により、例えば図１０に示すような動画記録時の割り当てが実行される。制御部２９は、ステップＳ１１で設定対象となったユーザインタフェースがこの後で受け付ける信号を、図１０に基づく特殊動画用の信号として認識する。
【０１０６】
続いて、表示制御部２９３は、表示部２１に表示させる画面上表示（ＯＳＤ）などの設定を切り替えることによって動画用の画面への切替えを行う（ステップＳ１２）。具体的には、表示制御部２９３は、例えば残り時間や、動画撮影時に特殊効果を適用できることを示すアイコンなどを表示する。この後、撮像装置１は、後述するステップＳ１５へ移行する。
【０１０７】
図１３は、表示部２１における動画用の画面表示例を示す図である。図１３に示すように、動画用画面Ｑでは、動画中特殊効果を適用可能であることを示す動画アイコン１１１、動画用画面キー割り当てを示す画面上表示１１２および動画撮影の残り時間を表示する残り時間１１３が表示される。このうち、画面上表示１１２は数秒間表示した後に自動的に消えるようにしてもよいし、常時表示するようにしてもよい。また、設定信号入力部２０１からの入力によって画面上表示１１２の表示と非表示を切り替えることができるようにしてもよい。
【０１０８】
ステップＳ９において、記録中フラグがオフ状態であると判断した場合（ステップＳ９：Ｎｏ）、制御部２９は、静止画用ユーザインターフェースを設定する（ステップＳ１３）。この後、撮像装置１は、後述するステップＳ１５へ移行する。
【０１０９】
続いて、表示制御部２９３は、表示部２１における画面上表示などの設定を静止画用に切り替える（ステップＳ１４）。この切り替えにより、表示部２１は、例えば残り記録枚数や、静止画撮影時に特殊効果を適用できることを示すアイコンなどを表示する。この後、撮像装置１は、後述するステップＳ１５へ移行する。
【０１１０】
ステップＳ７において、動画ボタン４７が操作されていない場合（ステップＳ７：Ｎｏ）、画像処理制御部２９１は、動画中特殊効果画像処理部１６３に対して動画中特殊効果処理を行わせる（ステップＳ１５）。
【０１１１】
図１４は、動画中特殊効果制御処理の概要を示すフローチャートである。図１４において、動画中特殊効果を開始するキーが操作された場合（ステップＳ３１：Ｙｅｓ）、画像処理制御部２９１は、動画中特殊効果フラグをオンにする（ステップＳ３２）。その後、画像処理制御部２９１は、効果設定を行う（ステップＳ３３）。
【０１１２】
動画中特殊効果を開始するキーが操作されない場合（ステップＳ３１：Ｎｏ）において、終了指示が入力されたとき（ステップＳ３４：Ｙｅｓ）、画像処理制御部２９１は、動画中特殊効果フラグをオフにする制御を行う（ステップＳ３５）。この後、撮像装置１は、メインルーチンへ戻る。
【０１１３】
これに対し、動画中特殊効果を開始するキーが操作されない場合（ステップＳ３１：Ｎｏ）において、終了指示が入力されないとき（ステップＳ３４：Ｎｏ）、撮像装置１はメインルーチンへ戻る。
【０１１４】
ステップＳ１５の動画中特殊効果制御処理の後、レリーズボタン４２から１ｓｔレリーズ信号が入力された場合（ステップＳ１６：Ｙｅｓ）、制御部２９は、ＡＥ処理部１７に露出を調整するＡＥ処理を実行させるとともに、ＡＦ処理部１８にピントを調整するＡＦ処理を実行させる（ステップＳ１７）。
【０１１５】
続いて、制御部２９は、電源ボタン４１が操作されることによって撮像装置１の電源がオフされたか否かを判断する（ステップＳ１８）。撮像装置１の電源がオフされたと制御部２９が判断した場合（ステップＳ１８：Ｙｅｓ）、撮像装置１は、本処理を終了する。これに対して、撮像装置１の電源がオフされていないと制御部２９が判断した場合（ステップＳ１８：Ｎｏ）、撮像装置１は、ステップＳ３へ戻る。
【０１１６】
レリーズボタン４２から１ｓｔレリーズ信号が入力されない場合（ステップＳ１６：Ｎｏ）、レリーズボタン４２から２ｎｄレリーズ信号が入力されたとき（ステップＳ１９：Ｙｅｓ）、制御部２９は、シャッタ駆動部１１および撮像素子駆動部１３をそれぞれ駆動することにより、メカシャッタによる撮影を行う（ステップＳ２０）。
【０１１７】
続いて、画像処理部１６は、撮影した静止画像に対して所定の画像処理を実行する（ステップＳ２１）。なお、画像処理の詳細については後述する。
【０１１８】
この後、制御部２９は、画像データをＪＰＥＧ形式で画像圧縮展開部１９に圧縮させ、この圧縮した画像データを記録媒体２３に記録する（ステップＳ２２）。このステップＳ２２で、制御部２９は、画像圧縮展開部１９がＪＰＥＧ形式で圧縮した画像データに、画像処理部１６が画像処理を行っていないＲＡＷデータを対応付けて記録媒体２３に記録させるようにしてもよい。ステップＳ２２の後、撮像装置１は、ステップＳ１８へ移行する。
【０１１９】
ステップＳ１９において、レリーズボタン４２から２ｎｄレリーズ信号が入力されない場合（ステップＳ１９：Ｎｏ）、制御部２９は、ＡＥ処理部１７に露出を調整するＡＥ処理を実行させるとともに、ＡＦ処理部１８にピントを調整するＡＦ処理を実行させる（ステップＳ２３）。
【０１２０】
続いて、制御部２９は、撮像素子駆動部１３を駆動することにより、電子シャッタによる撮影を実行する（ステップＳ２４）。
【０１２１】
この後、画像処理部１６は、撮像装置１の設定情報に基づいて画像処理を行う（ステップＳ２５）。画像処理の詳細については後述する。
【０１２２】
表示制御部２９３は、画像処理部１６が処理を施した画像データに対応するライブビュー画像を表示部２１に表示させる（ステップＳ２６）。
【０１２３】
続いて、撮像装置１が動画記録中であれば（ステップＳ２７：Ｙｅｓ）、制御部２９は、画像データを画像圧縮展開部１９に圧縮させ、この圧縮した画像データを記録媒体２３に作成された動画ファイルに動画として記録させる（ステップＳ２８）。この後、撮像装置１は、ステップＳ１８へ移行する。これに対して、ステップＳ２７で動画記録中でなければ（ステップＳ２７：Ｎｏ）、撮像装置１はステップＳ１８へ移行する。
【０１２４】
図１５は、画像処理の概要を示すフローチャートである。図１５において、基本画像処理部１６１は基本画像処理を行う（ステップＳ４１）。ここでの基本画像処理は、ＯＢ（Optical Black）値の減算、ＷＢ補正、同時化、カラーマトリクス演算、ガンマ変換色補正、エッジ強調、ＮＲ（Noise Reduction）などの処理を含む。
【０１２５】
ここで、ＷＢ補正は、ベイヤ配列の画像データに対して、予めユーザが設定したＷＢモードに応じたＲゲインとＢゲインを乗じて、ＷＢを撮像装置本体のフラッシュメモリから読み出し、その値を乗じることで補正する処理である。
同時化は、撮像素子１２がベイヤー配列であった場合に、その画素にないデータを周辺から補間することによって、各画素がＲＧＢデータで構成されるデータに変換する処理である。
カラーマトリクス演算は、設定されているＷＢモードに応じたカラーマトリクス係数を本体のフラッシュメモリから読み出して乗算する処理である。
ガンマ変換色補正処理では、仕上がりの設定に応じて予め設計したガンマテーブルを本体のフラッシュメモリから読み出し、画像データをガンマ変換する。このとき、ＲＧＢデータに適用するガンマ変換と、ＲＧＢの色空間を輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒによって表される色空間に変換した後で輝度信号Ｙのみにガンマ変換を行うようにしてもよい。また、適切な色再現性を得るために、仕上がりの設定に応じて予め設計したサイドパラメータを用いて色を補正してもよい。なお、アート効果の種類によってガンマ曲線を変えるようにしてもよい。
エッジ強調処理では、バンドパスフィルタによりエッジ成分を抽出し、エッジ強調度に応じた係数を乗じて画像データに加算することで強調する。
ＮＲ処理では、画像を周波数分解し、周波数に応じてコアリング処理などを行うことでノイズを低減する処理を行う。
【０１２６】
続いて、アート効果画像処理部１６２は、アート効果処理を行う（ステップＳ４２）。ここでは、上述したクロスフィルター、ソフトフォーカス、ノイズ付加、シェーディング、周辺輝度持ち上げ、周辺ぼかし、等の処理を行う。
【０１２７】
その後、撮像装置１が静止画撮影を行う場合（ステップＳ４３：Ｙｅｓ）、制御部２９が動画中特殊効果（第１の特殊効果）に対応した特殊効果（第２の特殊効果）を静止画の画像データに付与することを禁止する制御を行った後、メインルーチンへ戻る。
【０１２８】
ここで、撮像装置１が静止画撮影を行う場合に動画中特殊効果に対応した特殊効果を付与しない理由を説明する。動画撮影中の静止画撮影はレスポンスの速さが重要である。静止画の画素数は動画の画素数に比べて数倍程度大きいため、静止画に動画中特殊効果を付与すると、静止画撮影後の動画撮影の再開タイミングに影響を及ぼすおそれがある。そこで、本実施の形態では、静止画の場合に動画中特殊効果の適用を禁止している。なお、光束でレスポンスに影響がなければ静止画に適用することも可能である。
【０１２９】
一方、撮像装置１が動画撮影を行う場合（ステップＳ４３：Ｎｏ）、制御部２９は、動画中特殊効果が設定されているか否かを判定する（ステップＳ４４）。動画中特殊効果が設定されている場合（ステップＳ４４：Ｙｅｓ）、ステップＳ４５へ移行する。これに対して、動画中特殊効果が設定されていない場合（ステップＳ４４：Ｎｏ）、撮像装置１はメインルーチンへ戻る。
【０１３０】
ステップＳ４４で動画中特殊効果が設定されている場合（ステップＳ４４：Ｙｅｓ）において、適用する効果がマルチエコーであるとき（ステップＳ４５：Ｙｅｓ）、動画中特殊効果画像処理部１６３は、直前の画像処理結果（前フレーム）に対して、上述したマルチエコー処理（図４を参照）として、現在のフレームを所定の比率で合成する（ステップＳ４６）。一方、適用する特殊効果がマルチエコーでないとき（ステップＳ４５：Ｎｏ）、撮像装置１はステップＳ４７へ移行する。
【０１３１】
ステップＳ４７において、制御部２９は、適用する効果がワンショットエコーであるか否かを判定する。適用する効果がワンショットエコーである場合（ステップＳ４７：Ｙｅｓ）において、変更指示信号入力部２０３が特性変更指示信号の入力を受け付けたとき（ステップＳ４８：Ｙｅｓ）、特性制御部２９２は、ワンショットエコーの特性を変更する制御を行う（ステップＳ４９）。
【０１３２】
図１６は、特性制御部２９２が行うマルチエコー処理の特性の変更処理の一例を示す図である。ステップＳ４８で入力された変更指示信号が、レリーズボタン４２の１ｓｔレリーズによる効果ホールド指示信号である場合（ステップＳ６１：Ｙｅｓ）、特性制御部２９２は、前フレームと同じ係数ａを設定し、この係数ａを含む制御信号を動画中特殊効果画像処理部１６３に送信する（ステップＳ６２）。
【０１３３】
図１７は、ステップＳ６２における効果ホールド状態を模式的に示す図である。図１７に示すように、変更指示信号入力部２０３によって変更指示信号として効果ホールド指示信号が入力されると、係数ａの時間的な特性曲線は効果ホールド指示信号が入力されている間（ｔ'≦ｔ≦ｔ''）、係数ａは一定値ａ'をとる。
【０１３４】
ステップＳ４８で入力された変更指示信号が効果ホールド信号でない場合（ステップＳ６１：Ｎｏ）、入力された変更指示信号は、特性曲線変更指示信号である。この場合、特性制御部２９２は、入力に応じて特性曲線を変更する（ステップＳ６３）。
【０１３５】
図１８は、特性曲線の変更処理の概要を示す図である。ユーザは、まず所定のボタンを押して、表示部２１上に特性曲線を表示させる。この際、ライブビュー画像を表示した状態で上書きしてもよいし、一旦ライブビュー画像を消してから特性曲線を表示してもよい。図１８では、後者の場合を示している。なお、図１８では、表示時点が特性曲線のどの位置であるかを示す破線と表示が加えられている。
【０１３６】
表示部２１が特性曲線Ｃを表示すると、ユーザは、表示部２１上のタッチパネル５０に表示された特性曲線Ｃ上で変更を開始したい箇所を指でタッチしてスライドさせる（図１８（ａ））。その後、ユーザがタッチパネル５０から指を離すと、特性制御部２９２は、特性曲線Ｃを指のタッチに応じて変更した特性曲線Ｃ'を作成し、表示制御部２９３を介して表示部２１に表示させる。
【０１３７】
この後、特性制御部２９２は、変更した特性曲線Ｃ'に基づいて、現時間に応じた係数ａを算出する（ステップＳ６４）。この後、撮像装置１はメインルーチンへ戻る。
【０１３８】
再び図１５に戻ってステップＳ５０以降の処理を説明する。特性制御部２９２から制御信号を受信した動画中特殊効果画像処理部１６３は、ワンショットエコー効果を得るために、ＳＤＲＡＭ２５が記憶する特定の画像データであるレリーズフレームとの合成処理を行う（ステップＳ５０）。ここで、特殊効果フラグがオンになって最初のフレームの場合、動画中特殊効果画像処理部１６３は、現在のフレームの画像をＳＤＲＡＭ２５に記憶する処理を行う。これに対し、特殊効果フラグがオンになって２フレーム以後の場合、動画中特殊効果画像処理部１６３は、ＳＤＲＡＭ２５が記憶しているレリーズフレームと合成処理を行う。
【０１３９】
ステップＳ４７において、適用する動画中特殊効果がワンショットエコーでない場合（ステップＳ４７：Ｎｏ）、撮像装置１はステップＳ５１へ移行する。
【０１４０】
ステップＳ５１において、制御部２９は、適用する効果が揺らぎであるか否かを判定する。適用する効果が揺らぎである場合（ステップＳ５１：Ｙｅｓ）、動画中特殊効果画像処理部１６３は揺らぎ効果を追加する処理を行う（ステップＳ５２）。
【０１４１】
ステップＳ５２における動画中特殊効果画像処理部１６３の具体的な処理を説明する。動画中特殊効果画像処理部１６３は、シェーディング処理、クロスフィルター処理などのアート効果処理における画像処理パラメータに揺らぎを持たせた効果を追加する。例えば、シェーディング処理であれば、画像の中心からの減衰特性を時間とともに変化させる。周辺ぼかしであれば、ぼかし量やぼかし形状を変化させる。クロスフィルターであれば、クロスパターンの長さや角度を時間とともに変化させる。また、彩度、コントラスト、ホワイトバランスを時間とともに変化させてもよい。なお、揺らぎとシェーディング等のアート効果が重複する場合、両方を付与してもよいし、揺らぎのみを付与するようにしてもよい。
【０１４２】
ステップＳ５１において、適用する効果が揺らぎではない場合（ステップＳ５１：Ｎｏ）、撮像装置１はステップＳ５３へ移行する。
【０１４３】
ステップＳ５３において、制御部２９は、適用する効果がトランジットであるか否かを判定する。適用する効果がトランジットである場合（ステップＳ５３：Ｙｅｓ）、基本画像処理部１６１およびアート効果画像処理部１６２は、仕上がり／切り替え先の設定に応じた基本画像処理およびアート効果処理をそれぞれ実行する（ステップＳ５４、Ｓ５５）。
【０１４４】
その後、変更指示信号入力部２０３が特性変更指示の入力を受け付けたとき（ステップＳ５６：Ｙｅｓ）、特性制御部２９２は、トランジット処理の特性を変更する制御を行う（ステップＳ５７）。トランジット処理の特性を変更する制御の詳細な内容は、上述したステップＳ４９と同様である。ただし、トランジット処理の場合、特性制御部２９２は、係数ｂに対する特性曲線（図８を参照）に基づいて、効果ホールド処理や特性曲線変更処理を行う。
【０１４５】
この後、動画中特殊効果画像処理部１６３は、トランジット用の二つの画像の合成処理を行うことによってトランジット画像を生成する（ステップＳ５８）。ステップＳ５８の後、撮像装置１はメインルーチンへ戻る。
【０１４６】
ステップＳ４８において、変更指示信号入力部２０３が特性変更指示信号の入力を受け付けないとき（ステップＳ４８：Ｎｏ）、撮像装置１はステップＳ５０へ移行する。
【０１４７】
ステップＳ５３において、制御部２９が判定した結果、適用する効果がトランジットでない場合（ステップＳ５３：Ｎｏ）、撮像装置１はメインルーチンへ戻る。
【０１４８】
ステップＳ５６において、変更指示信号入力部２０３が特性変更指示信号の入力を受け付けないとき（ステップＳ５６：Ｎｏ）、撮像装置１はステップＳ５８へ移行する。
【０１４９】
以上説明した本発明の一実施の形態によれば、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行っている最中に特性の変更を指示する変更指示信号の入力を受け付けた場合、その変更指示信号に応じて特性を変更するため、ユーザは動画撮影中に付与する特殊効果をユーザの意志で容易に変更することができる。したがって、動画撮影中に適用する特殊効果を用いることによって多様な映像表現を実現することができる。
【０１５０】
また、本実施の形態によれば、動画記録を開始すると、設定信号入力部が動画中特殊効果用に切り替わり、制御部は動画用特殊効果の設定信号が入力されたものと認識する。したがって、ユーザは撮影時に簡単な操作をすることで、容易に動画に特殊効果を適用することができる。
【０１５１】
また、本実施の形態によれば、設定信号入力部を構成するユーザインターフェースに動画用と静止画用の入力機能を兼備させることができるため、動画撮影の場合にも操作性に優れたユーザインターフェースを実現することができる。加えて、ユーザインターフェースの数も抑制することができるため、レイアウトの制限も少なくなり、小型化に好適な撮像装置を実現することができる。
【０１５２】
また、本実施の形態によれば、編集機器やＰＣ上で実現できるものと同等な特殊効果を、撮像装置自体で実行することができる。したがって、ユーザの作画意図を反映した動画を、高度な専門知識を必要とすることなく、また後編集することなく作成することができる。
【０１５３】
また、本実施の形態によれば、動画撮影中の静止画に対して、動画中特殊効果の適用を禁止する制御を行うことにより、静止画撮影後の動画撮影の再開タイミングへの影響を防止することができる。
【０１５４】
一般に、撮像装置は、ＰＣ等と比較してメモリーが少なく処理能力が劣っているため、ＰＣ等と同等の動画データの編集処理を実現することは難しい。また、動画中の静止画撮影や、動画終了直後の静止画撮影の可能な撮像装置においては、メモリー不足やメモリー管理上の問題が決定的なものになり、メモリー増設によるコスト増や、静止画撮影時の応答性や静止画画質の劣化などの問題を発生してしまう恐れもある。本実施の形態では、この点に鑑み、撮影した動画を編集することなく、撮影時に複数のフレームにわたる時間的な移り変わりの特殊効果による撮影者の作画意図を付与した動画を撮影可能が技術を実現している。
【０１５５】
なお、本実施の形態では、ワンショットエコーとトランジットに対して特性変更指示信号が入力可能である場合を説明したが、他の動画中特殊効果の特性を変更できるようにしてもよい。具体的には、例えばマルチエコーにおいて、現フレームと他のフレームとを合成する係数を変更できるようにしてもいいし、揺らぎの際に効果ホールドを行うことができるようにしてもよい。
【０１５６】
また、本実施の形態において、動画中特殊効果の時間的な推移を一通り見た後でユーザが最適な特性を設定することができるようにしてもよい。この場合には、タッチパネル５０に特性曲線を表示するとともに、表示部２１にユーザに対して特性の変更指示を入力するように促すメッセージを表示するようにしてもよい。
【０１５７】
以上の説明では、動画撮影中に動画中特殊効果を変更することを記載してたが、本実施の形態は静止画撮影時のライブビュー表示に対しても適用可能であることはいうまでもない。
【０１５８】
（その他の実施の形態）
ここまで、本発明を実施するための形態を説明してきたが、本発明は上述した一実施の形態によってのみ限定されるべきものではない。
【０１５９】
例えば、本発明において、表示部とは別に電子ビューファインダを本体部に設け、この電子ビューファインダにおいて本発明を適用するようにしてもよい。この場合には、表示部と電子ビューファインダとで動画中特殊効果の見え方が異なるようにすればより好ましい。
【０１６０】
また、本発明においては、本体部とレンズ部とが一体的に形成されていてもよい。
【０１６１】
また、本発明に係る撮像装置は、デジタル一眼レフカメラ以外にも、例えばアクセサリ等を装着可能なデジタルカメラ、デジタルビデオカメラおよび撮影機能を有する携帯電話やタブレット型携帯機器等の電子機器にも適用することができる。
【０１６２】
なお、本明細書におけるフローチャートの説明では、「まず」、「その後」、「続いて」等の表現を用いてステップ間の処理の前後関係を明示していたが、本発明を実施するために必要な処理の順序は、それらの表現によって一意的に定められるわけではない。すなわち、本明細書で記載したフローチャートにおける処理の順序は、矛盾のない範囲で変更することができる。
【０１６３】
このように、本発明は、ここでは記載していない様々な実施の形態を含みうるものであり、特許請求の範囲によって特定される技術的思想の範囲内で種々の設計変更等を行うことが可能である。
【符号の説明】
【０１６４】
１ 撮像装置
２ 本体部
３ レンズ部
１２ 撮像素子
１６ 画像処理部
１９ 画像圧縮展開部
２０ 入力部
２１ 表示部
２２ 表示駆動部
２３ 記録媒体
２６ Ｆｌａｓｈメモリ
２７ 本体通信部
２８ バス
２９ 制御部
３１ 光学系
３５ レンズ操作部
３６ レンズｆｌａｓｈメモリ
３７ レンズ通信部
３８ レンズ制御部
４１ 電源ボタン
４２ レリーズボタン
４３ モードダイヤル
４４ 操作ボタン
４５ メニューボタン
４６ 再生ボタン
４７ 動画ボタン
４８ ファンクションキー
４９ 消去ボタン
５０ タッチパネル
１６１ 基本画像処理部
１６２ アート効果画像処理部
１６３ 動画中特殊効果画像処理部
２０１ 設定信号入力部
２０２ 動画撮影信号入力部
２０３ 変更指示信号入力部
２６１ プログラム記録部
２６２ 特殊効果処理情報記録部
２６３ 画像処理情報記録部
２９１ 画像処理制御部
２９２ 特性制御部
２９３ 表示制御部
４４１ 十字キー
４４２ 決定ボタン
４４３ 上矢印キー
４４４ 下矢印キー
４４５ 左矢印キー
４４６ 右矢印キー
Ａ１、Ａ２、Ａ３、Ａ４、Ｂ１、Ｂ２、Ｂ３、Ｂ４、Ｂ５、Ｒ２０ アート効果画像
Ｃ、Ｃ' 特性曲線
Ｒ１、Ｒ２、Ｒ３、Ｒ４ マルチエコー画像
Ｒ１１、Ｒ１２、Ｒ１３、Ｒ１４ ワンショットエコー画像
Ｒ２１、Ｒ２２、Ｒ２３、Ｒ２４、Ｒ２５ トランジット画像
【技術分野】
【０００１】
本発明は、被写体を撮像して該被写体の画像データを生成する撮像装置、撮像方法および撮像プログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置では、自然な印象を有するきれいな画像を生成する機能にとどまらず、ノイズ、シェーディング、ぼかし等の効果を意図的に付加する機能を有するものが知られている。このような機能を有する撮像装置は、従来得られなかった独特の印象を与える撮影を可能としている。
【０００３】
例えば、下記特許文献１では、フィルムのような粒状感（ノイズ感）を有するとともに、ハイコントラストの画像を生成する技術が開示されている。この技術によれば、荒々しく力強い印象の画像を撮影することができる。
【０００４】
また、下記特許文献２では、周縁部が減光された画像を生成する技術が開示されている。この技術によれば、トイカメラで撮影したような印象の画像を撮影することができる。
【０００５】
これらの従来技術は、静止画撮影だけでなく動画撮影にも適用可能である。動画を撮影する場合には、時間的な画像の移り変わりを利用して、静止画にはない動画ならではの独特の映像表現を行うことができる。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２０１０−６２８３６号公報
【特許文献２】特開２０１０−７４２４４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、静止画を撮影する場合には、ユーザが意図する瞬間を撮影することができるのに対し、動画を撮影する場合には、ユーザの意図を動画に反映させることが難しかった。これは、１つには動画は常に変化するため、その分だけ表現の自由度が大きいことに起因している。この点につき、従来の特殊効果は、動画撮影された各フレームに対して同様の効果が付与されるにすぎないため、特殊効果を付与したとしても単調なシーンになってしまいがちであった。
【０００８】
本発明は、上記に鑑みてなされたものであって、動画撮影中に適用する特殊効果を、ユーザが容易に変更することができ、ひいては多様な映像表現を実現することができる撮像装置、撮像方法および撮像プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
上述した課題を解決し、目的を達成するために、本発明に係る撮像装置は、被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置であって、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理部と、前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部と、前記変更指示信号入力部が受け付けた変更指示信号に応じて前記特性を変更する制御部と、を備えたことを特徴とする。
【００１０】
また、本発明に係る撮像装置は、上記発明において、前記変更指示信号は、前記動画中特殊効果の特性を不変とする効果ホールド信号と、前記動画中特殊効果の時間的な変化を与える特性曲線の変更指示を与える特性曲線変更指示信号と、を含むことを特徴とする。
【００１１】
また、本発明に係る撮像装置は、上記発明において、前記特性曲線を表示可能な表示部をさらに備え、前記制御部は、前記特性曲線変更指示信号が入力された場合、変更された前記特性曲線を前記表示部に表示させることを特徴とする。
【００１２】
また、本発明に係る撮像装置は、上記発明において、撮影指示信号の入力を受け付けるとともに、前記変更指示信号の一部をなすレリーズボタンを有し、前記制御部は、前記動画中特殊効果を付与している最中に前記レリーズボタンによって信号が入力された場合、該信号を前記効果ホールド信号と認識することを特徴とする。
【００１３】
また、本発明に係る撮像装置は、上記発明において、前記変更指示信号入力部は、前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、前記制御部は、前記タッチパネルに対して前記特性の表示位置に対応した接触位置であって略同じ接触位置での接触が継続する場合、該接触による信号を前記効果ホールド信号と認識することを特徴とする。
【００１４】
また、本発明に係る撮像装置は、上記発明において、前記変更指示信号入力部は、前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、前記制御部は、前記タッチパネルに対して前記特性曲線上に対応した接触位置を基点として接触位置がスライドしながら変化した場合、該スライドの方向に応じて前記特性を変更するとともに、前記表示部に変更した前記特性に対応する特性曲線を表示させることを特徴とする。
【００１５】
また、本発明に係る撮像装置は、上記発明において、前記動画中特殊効果画像処理部が行う画像処理は、特定の画像データとこの画像データの後に撮影した画像データとを所定の比率で順次合成し、前記特定の画像データの合成比率が時間とともに小さくなるワンショットエコー処理を含み、前記動画中特殊効果処理の特性は、前記合成比率であることを特徴とする。
【００１６】
また、本発明に係る撮像装置は、上記発明において、一つの画像データに対して視覚的な効果を生じさせるアート効果を付与する画像処理を行うアート効果画像処理部を備え、前記動画中特殊効果画像処理部が行う画像処理は、前記アート効果画像処理部が行うアート効果画像処理の種類を時間の経過とともに徐々に変えていくトランジット処理を含み、前記動画中特殊効果の特性は、前記トランジット処理開始時点で選択されているアート効果の画像中における合成比率であることを特徴とする。
【００１７】
また、本発明に係る撮像方法は、被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置が行う撮像方法であって、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、を有することを特徴とする。
【００１８】
また、本発明に係る撮像プログラムは、被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置に、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、を実行させることを特徴とする。
【発明の効果】
【００１９】
本発明によれば、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行い、変更指示信号の入力に応じて特性を変更するため、ユーザは動画撮影中に付与する特殊効果をユーザの意志で容易に変更することができる。したがって、動画撮影中に適用する特殊効果を用いることによって多様な映像表現を実現することができる。
【図面の簡単な説明】
【００２０】
【図１】図１は、本発明の一実施の形態に係る撮像装置の構成を示すブロック図である。
【図２】図２は、本発明の一実施の形態に係る撮像装置のユーザに面する側（前面側）の構成を示す斜視図である。
【図３】図３は、本発明の一実施の形態に係る撮像装置のアート効果画像処理部が行うアート効果画像処理の概要を示す図である。
【図４】図４は、マルチエコーの概要を説明する図である。
【図５】図５は、ワンショットエコーの概要を説明する図である。
【図６】図６は、最新の撮影画像に合成されるＳＤＲＡＭ画像の係数の時間変化を示す図である。
【図７】図７は、トランジットの概要を説明する図である。
【図８】図８は、トランジット処理において開始トリガ入力前にかけられているアート効果の係数の時間変化を示す図である。
【図９】図９は、揺らぎの概要を説明する図である。
【図１０】図１０は、動画記録時と動画非記録時における十字キーの各矢印キーへの操作割り当て例を示す図である。
【図１１】図１１は、本発明の一実施の形態に係る撮像装置が備えるレンズ制御部と制御部との同期通信の一例を示すタイミングチャートである。
【図１２】図１２は、本発明の一実施の形態に係る撮像装置が行う処理の概要を示すフローチャートである。
【図１３】図１３は、本発明の一実施の形態に係る撮像装置の表示部における動画用の画面表示例を示す図である。
【図１４】図１４は、本発明の一実施の形態に係る撮像装置が行う動画中特殊効果制御処理の概要を示すフローチャートである。
【図１５】図１５は、本発明の一実施の形態に係る撮像装置が行う画像処理の概要を示すフローチャートである。
【図１６】図１６は、本発明の一実施の形態に係る撮像装置が行う特性変更処理の概要を示すフローチャートである。
【図１７】図１７は、効果ホールド状態を模式的に示す図である。
【図１８】図１８は、特性曲線変更処理の概要を示す図である。
【発明を実施するための形態】
【００２１】
以下、添付図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）を説明する。図面の記載において、同一の部分には同一の符号を付して説明する。
【００２２】
本発明の一実施の形態は、静止画と動画を撮影可能な撮像装置を用いて動画記録を開始すると、静止画用に割り当てられた操作入力用のユーザインターフェースの機能が動画特殊効果用に切り替わることを特徴とする。
【００２３】
本実施の形態に係る撮像装置は、動画撮影中に静止画を撮影する機能を有する。ここで、動画撮影中の静止画撮影とは、動画を撮影している途中で静止画を撮影する場合と、動画撮影を終了した直後に静止画を撮影する場合とを含む。また、動画を撮影している途中で静止画を撮影する場合には、静止画撮影時に動画撮影を一旦停止する場合と、静止画撮影を動画撮影と並行して行う場合とが含まれる。
【００２４】
図１は、本実施の形態に係る撮像装置の構成を示すブロック図である。図２は、本発明の一実施の形態に係る撮像装置のユーザに面する側（前面側）の構成を示す斜視図である。図１および図２に示す撮像装置１は、本体部２と、本体部２に着脱自在なレンズ部３と、を備える。
【００２５】
本体部２は、シャッタ１０と、シャッタ駆動部１１と、撮像素子１２と、撮像素子駆動部１３と、信号処理部１４と、Ａ／Ｄ変換部１５と、画像処理部１６と、ＡＥ処理部１７と、ＡＦ処理部１８と、画像圧縮展開部１９と、入力部２０と、表示部２１と、表示駆動部２２と、記録媒体２３と、メモリＩ／Ｆ２４と、ＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）２５と、Ｆｌａｓｈメモリ２６と、本体通信部２７と、バス２８と、制御部２９と、を備える。
【００２６】
シャッタ１０は、撮像素子１２の状態を露光状態または遮光状態に設定する。シャッタ駆動部１１は、ステッピングモータ等を用いて構成され、制御部２９から入力される指示信号に応じてシャッタ１０を駆動する。
【００２７】
撮像素子１２は、レンズ部３が集光した光を受光して電気信号に変換するＣＣＤ（Charge Coupled Device）またはＣＭＯＳ（Complementary Metal Oxide Semiconductor）等を用いて構成される。撮像素子駆動部１３は、所定のタイミングで撮像素子１２から画像データ（アナログ信号）を信号処理部１４に出力させる。この意味で、撮像素子駆動部１３は、電子シャッタとして機能する。
【００２８】
信号処理部１４は、撮像素子１２から入力されるアナログ信号に対して、アナログ処理を施してＡ／Ｄ変換部１５に出力する。具体的には、信号処理部１４は、アナログ信号に対して、ノイズ低減処理およびゲインアップ処理等を行う。例えば、信号処理部１４は、アナログ信号に対して、リセットノイズ等を低減した上で波形整形を行い、さらに目的の明るさとなるようにゲインアップを行う。
【００２９】
Ａ／Ｄ変換部１５は、信号処理部１４から入力されるアナログ信号に対してＡ／Ｄ変換を行うことによってデジタルの画像データを生成し、バス２８を介してＳＤＲＡＭ２５に出力する。
【００３０】
画像処理部１６は、バス２８を介してＳＤＲＡＭ２５から画像データを取得し、取得した画像データ（ＲＡＷデータ）に対して各種の画像処理を行って処理画像データを生成する。この処理画像データは、バス２８を介してＳＤＲＡＭ２５に出力される。画像処理部１６は、基本画像処理部１６１と、アート効果画像処理部１６２と、動画中特殊効果画像処理部１６３と、を有する。
【００３１】
基本画像処理部１６１は、画像データに対して、少なくとも、オプティカルブラック減算処理、ホワイトバランス（ＷＢ）調整処理、撮像素子がベイヤー配列の場合には画像データの同時化処理、カラーマトリクス演算処理、ガンマ補正処理、色再現処理およびエッジ強調処理等を含む基本の画像処理を行う。また、基本画像処理部１６１は、予め設定された各画像処理のパラメータに基づいて、自然な画像を再現する仕上がり効果処理を行って仕上がり効果画像データを生成する。ここで、各画像処理のパラメータとは、コントラスト、シャープネス、彩度、ホワイトバランスおよび階調の値である。
【００３２】
アート効果画像処理部１６２は、１つの画像データに対して複数の画像処理を組み合わせることにより、視覚的な効果を生じさせるアート効果処理を行って処理画像データ（以下、「アート効果画像データ」という）を生成する。
【００３３】
図３は、アート効果画像処理部１６２が行うアート効果画像処理の概要を示す図である。図３ではアート効果画像処理として、ファンタジックフォーカス、ファンタジックフォーカス＋スターライト、ファンタジックフォーカス＋ホワイトエッジ、ポップアート、ポップアート＋スターライト、ポップアート＋ピンホール、ポップアート＋ホワイトエッジ、トイフォト、ラフモノクローム、ジオラマの１０種類が記載されている。以下、これらのアート効果画像処理について説明する。
【００３４】
ファンタジックフォーカスは、画像全体にぼかし処理を施し、ぼかす前の画像と一定の割合で合成するソフトフォーカスの効果を与える処理である。ファンタジックフォーカスは、中間の輝度をより明るくするトーンカーブ処理を行うことにより、柔らかいトーンの中で、被写体のディテールを残しながら、幸福な光に包まれたように美しく幻想的な雰囲気の画像を結像または生成する。ファンタジックフォーカスは、例えばトーンカーブ処理、ぼかし処理、アルファブレンド処理および画像合成処理等の画像処理を組み合わせることによって実現される。
ファンタジックフォーカス＋スターライトは、ファンタジックフォーカスに加えて、画像中の高輝度部に対してクロスパターンを描写するクロスフィルター効果を施す処理である。
ファンタジックフォーカス＋ホワイトエッジは、ファンタジックフォーカスに加えて、画像の中心部から周縁部に行くにしたがって徐々に白味を帯びる効果が施す処理である。このような白味の効果は、画像の中心からの距離が大きいほど周辺部が白くなるように画素値を変更することによって得られる。
【００３５】
ポップアートは、色をカラフルに強調し、明るく楽しい雰囲気を表現する処理である。ポップアートは、例えば彩度強調処理およびコントラスト強調処理を組み合わせることによって実現される。全体に高コントラストで高彩度の効果である。
ポップアート＋スターライトは、ポップアートとスターライトを重ねて施す処理である。この場合には、カラフルな画像にクロスフィルターを施した効果が得られる。
ポップアート＋ピンホールは、ポップアートに加えて、画像の周縁部をシェーディングによって暗くして穴から覗き込むような効果を与えるトイフォト（ピンホール）を施す処理である。トイフォトの詳細については、後述する。
ポップアート＋ホワイトエッジは、ポップアートとホワイトエッジを重ねて施す処理である。
【００３６】
トイフォトは、画像の中心からの距離が大きいほど輝度が小さく（暗く）なるようにして、あたかも穴から覗き込んで異空間に迷い込んだような効果を生じさせる処理である。トイフォトは、例えばローパスフィルタ処理、ホワイトバランス処理、コントラスト処理、色相・彩度処理に加え、輝度信号に対して周辺ほど小さい係数を乗じるシェーディング処理等の画像処理を組み合わせることによって実現される（トイフォト、シェーディングの詳細な内容については、例えば特開２０１０−７４２４４号公報を参照）。
【００３７】
ラフモノクロームは、高コントラストとフィルムの粒状のノイズを付加してモノクロ画像の力強さや荒々しさを表現する処理である。ラフモノクロームは、例えばエッジ強調処理、レベル補正最適化処理、ノイズパターン重畳処理、合成処理およびコントラスト処理等を組み合わせることによって実現される（ラフモノクロームの詳細な内容については、例えば特開２０１０−６２８３６号公報を参照）。このうちノイズパターン重畳処理（ノイズ付加処理）は、予め作成したノイズパターン画像をもとの画像に加算する処理である。ノイズパターン画像は、例えば乱数などを発生させ、この乱数に基づいて生成してもよい。
【００３８】
ジオラマは、高コントラストで高彩度の画像に、画像の周縁部をぼかすことにより、ミニチュア模型やおもちゃを見ているかのような雰囲気を画面上に作り出す処理である。ジオラマは、例えば色相・彩度処理、コントラスト処理、周辺ぼかし処理および合成処理等を組み合わせることによって実現される。このうち、周辺ぼかし処理は、画像の中心からの距離に応じ、周辺部ほどぼける度合いが大きくなるように、画像の位置に応じてローパス係数を変更しながらローパスフィルタ処理を行うものである。なお、周辺ぼかし処理として、画像の上下のみ、または画像の左右のみをぼかすようにしてもよい。
【００３９】
動画中特殊効果画像処理部１６３は、動画を記録する際、画像に特殊効果を加える画像処理を行う。動画中特殊効果画像処理部１６３が行う動画中特殊効果としては、例えばマルチエコー、ワンショットエコー、トランジット、揺らぎがある。以下、これらの動画中特殊効果について説明する。
【００４０】
図４は、マルチエコーの概要を説明する図である。マルチエコーとは、直前の記録用画像と今撮影した画像の合成を所定の期間繰り返すことによって画像に残像が残る効果である。具体的には、図４に示すように、ボール１０１が動く軌跡を残像として表示することができる効果である。
【００４１】
動画中特殊効果画像処理部１６３は、動画中特殊効果としてマルチエコーが設定されている場合、開始トリガが入力されると、その直後に生成された画像に対して、一つ前のフレームの画像を所定の割合で合成する処理（マルチエコー処理）を行う。
【００４２】
図４に示す場合、動画中特殊効果画像処理部１６３は、開始トリガ入力直後の撮影画像Ｐ１とその１つ前のフレームの撮影画像Ｐ０に対応する記録画像Ｒ０とを合成することによってマルチエコー画像Ｒ１を生成する。この合成の際、各画素において、撮影画像Ｐ１の信号に係数０．６を乗じる一方、記録画像Ｒ０の信号に係数０．４を乗じる。
続いて、動画中特殊効果画像処理部１６３は、次のフレームの撮影画像Ｐ２と合成画像Ｒ１とを合成することによってマルチエコー画像Ｒ２を生成する。マルチエコー画像Ｒ２を生成する際には、各画素において、撮影画像Ｐ２の信号に係数０．６を乗じる一方、合成画像Ｒ１の信号に係数０．４を乗じる。
【００４３】
動画中特殊効果画像処理部１６３は、終了トリガが入力されるまで、上述した合成処理を繰り返し行うことによってマルチエコー画像を順次生成する。終了トリガが入力されると、記録媒体２３には、撮影画像Ｐ５に対応する記録画像Ｒ５が記録される。
【００４４】
図５は、ワンショットエコーの概要を説明する図である。ワンショットエコーとは、特定のフレームの画像（一瞬の画像）が徐々に薄くなりながら消えていく効果である。具体的には、図５に示すように、特定の時間に撮影されたボール１０１がしばらくの間撮影画像に残像として残るような効果である。
【００４５】
動画中特殊効果画像処理部１６３は、動画中特殊効果としてワンショットエコーが設定されている場合、開始トリガが入力されると、その直後に撮影して記録された画像データを一旦ＳＤＲＡＭ２５に保存し、この画像データをその後に撮影された画像データに対して時間とともに徐々に重みが減衰するように合成していく処理（ワンショットエコー処理）を行う。
【００４６】
図５に示す場合、開始トリガの入力直後に撮影された撮影画像Ｐ１はＳＤＲＡＭ２５に記憶される（以下、ＳＤＲＡＭ画像Ｓ１という）。動画中特殊効果画像処理部１６３は、ＳＤＲＡＭ２５が記憶するＳＤＲＡＭ画像Ｓ１と最新の撮影画像とを所定の比率で合成する。
【００４７】
図５に示す場合、開始トリガ入力直後には撮影画像Ｐ１に対応するワンショットエコー画像Ｒ１１が表示される。
その後、時間ｔ＝ｔ２において、動画中特殊効果画像処理部１６３は、ＳＤＲＡＭ画像Ｓ１と撮影画像Ｐ２とを合成することによってワンショットエコー画像Ｒ１２を生成する。この合成を行う際、各画素において、ＳＤＲＡＭ画像Ｓ１の信号に係数ａ1＝０．８を乗じる一方、撮影画像Ｐ２の信号に係数１−ａ1＝０．２を乗じる。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ3において、ＳＤＲＡＭ画像Ｓ１の信号に乗じる係数をａ＝０．４、撮影画像Ｐ３の信号に乗じる係数を１−ａ＝０．６として合成したワンショットエコー画像Ｒ１３を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ4において、ＳＤＲＡＭ画像Ｓ１の信号に乗じる係数をａ＝０．２、撮影画像Ｐ４の信号に乗じる係数を１−ａ＝０．８として合成したワンショットエコー画像Ｒ１４を生成する。
その後、時間ｔ＝ｔ5において係数ａ＝０となるため、撮影画像Ｐ５が記録画像Ｒ５となる。
【００４８】
図６は、最新の撮影画像に合成されるＳＤＲＡＭ画像の合成比率の時間変化を示す図である。図６において、横軸ｔは開始トリガ入力時点（ｔ＝０）からの経過時間であり、縦軸ａはＳＤＲＡＭ画像Ｓ１の各画素の信号に乗じる係数である。図６に示すように、係数ａは、ｔ＝０でａ1であり、時間とともに滑らかに減少していき、開始トリガ入力から所定時間ｔ5経過した時点で０となる。すなわち、ＳＤＲＡＭ画像Ｓ１の合成画像中に占める割合は、時間とともに徐々に減少していく設定がなされている。これにより、ＳＤＲＡＭ画像Ｓ１が時間とともに徐々に消えていくような画像を作り出すことができる。
【００４９】
なお、図６に示す曲線は一例に過ぎず、時間とともに係数ａが減衰するなどして一定時間で係数ａが０となるように滑らかに変化する曲線であればどのようなものでもよく、例えば係数ａが一定値をとる期間を含む曲線でもよい。
【００５０】
また、係数ａは、開始トリガからのフレーム数に応じて定めるようにしてもよい。この場合には、フレーム単位で徐々に係数ａの値を減少させながら、所定のフレーム数（例えば１２０フレーム）で係数が０となるようにすればよい。
【００５１】
図７は、トランジットの概要を説明する図である。トランジットは、１つの画像に対して付与されるアート効果が、別のアート効果へと徐々に比率を変えながら変わっていく効果である。図７では、アート効果Ａからアート効果Ｂへ変化するトランジットを模式的に示している。図７において、トランジットの開始トリガ入力直前は、撮影画像Ｐ０に対してアート効果Ａを施したアート効果画像Ａ０が生成される。トランジットでアート効果の切り替え開始から切り替え終了までに要する時間は、適宜設定可能である。
【００５２】
図７に示す場合、開始トリガ入力前は、アート効果Ａが設定されているものとする。すなわち、開始トリガ入力直前において、アート効果画像処理部１６２は、撮影画像Ｐ０にアート効果Ａを施したアート効果画像Ｒ２０を形成しているものとする。
【００５３】
開始トリガが入力されると、動画中特殊効果画像処理部１６３は、撮影画像Ｐ１にアート効果Ａを施したアート効果画像Ａ１に係数ｂ（＝ｂ0）＝０．８を乗じる一方、撮影画像Ｐ１にアート効果Ｂを施したアート効果画像Ｂ１に係数１−ｂ（＝１−ｂ0）＝０．２を乗じた二つの画像を合成することによってトランジット画像Ｒ２１を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ12において、撮影画像Ｐ２にアート効果Ａを施したアート効果画像Ａ２の信号に乗じる係数をｂ＝０．６とし、撮影画像Ｐ２にアート効果Ｂを施したアート効果画像Ｂ２の信号に乗じる係数を１−ｂ＝０．４として合成したトランジット画像Ｒ２２を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ13において、撮影画像Ｐ３にアート効果Ａを施したアート効果画像Ａ３の信号に乗じる係数をｂ＝０．４とし、撮影画像Ｐ３にアート効果Ｂを施したアート効果画像Ｂ３の信号に乗じる係数を１−ｂ＝０．６として合成したトランジット画像Ｒ２３を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ14において、撮影画像Ｐ４にアート効果Ａを施したアート効果画像Ａ４の信号に乗じる係数をｂ＝０．２とし、撮影画像Ｐ４にアート効果Ｂを施したアート効果画像Ｂ４の信号に乗じる係数を１−ｂ＝０．８として合成したトランジット画像Ｒ２４を生成する。
その後、動画中特殊効果画像処理部１６３は、時間ｔ＝ｔ15において、撮影画像Ｐ５にアート効果Ｂのみを施した（ｂ＝０）トランジット画像Ｒ２５を生成する。
【００５４】
図８は、トランジット処理において開始トリガ入力前から付与されているアート効果の合成比率（係数）ｂの時間変化を示す図である。図８に示すように、係数ｂは、ｔ＝０でｂ0であり、時間とともに滑らかに減少していき、開始トリガ入力から所定時間ｔ15経過した時点で０となる。
【００５５】
なお、図８に示す曲線は一例に過ぎず、時間とともに係数ｂが減衰するなどして一定時間で係数ｂが０となるように滑らかに変化する曲線であればどのようなものでもよく、例えば係数ｂが一定値をとる期間を含む曲線でもよい。
【００５６】
また、係数ｂを、開始トリガからのフレーム数に応じて定めるようにしてもよい。この場合には、フレーム単位で滑らかに係数ｂの値を減少させながら、所定のフレーム数（例えば１２０フレーム）で係数が０となるようにすればよい。
【００５７】
図９は、揺らぎの概要を示す図である。揺らぎとは、動画中の各フレームに対して付与するアート効果のかかり具合を時間とともにランダムに変化させることによって得られる効果である。図９では、一例として、アート効果がクロスフィルターである場合を示している。この場合、動画中特殊効果画像処理部１６３は、クロス１０２を時間とともにランダムに回転させるとともに、クロス１０２の大きさを時間とともにランダムに変化させることによって揺らぎを与えている。
【００５８】
引き続き、撮像装置１の構成を説明する。
ＡＥ処理部１７は、バス２８を介してＳＤＲＡＭ２５に記録された画像データを取得し、取得した画像データに基づいて、静止画撮影または動画撮影を行う際の露出条件を設定する。具体的には、ＡＥ処理部１７は、画像データから輝度を算出し、算出した輝度に基づいて、例えば絞り値（Ｆ値）の設定値、シャッタ速度等を決定することで撮像装置１の自動露出を行う。
【００５９】
ＡＦ処理部１８は、バス２８を介してＳＤＲＡＭ２５に記録された画像データを取得し、取得した画像データに基づいて、撮像装置１の自動焦点の調整を行う。例えば、ＡＦ処理部１８は、画像データから高周波成分の信号を取り出し、高周波成分の信号に対してＡＦ（Auto Focus）演算処理を行うことによって、撮像装置１の合焦評価を決定することで撮像装置１の自動焦点の調整を行う。
【００６０】
画像圧縮展開部１９は、バス２８を介してＳＤＲＡＭ２５から画像データを取得し、取得した画像データに対して所定の形式に従って圧縮し、この圧縮した画像データをＳＤＲＡＭ２５に出力する。ここで、所定の形式としては、ＪＰＥＧ（Joint Photographic Experts Group）方式、ＭｏｔｉｏｎＪＰＥＧ方式およびＭＰ４（Ｈ．２６４）方式等である。また、画像圧縮展開部１９は、バス２８およびメモリＩ／Ｆ２４を介して記録媒体２３に記録された画像データ（圧縮画像データ）を取得し、取得した画像データを展開（伸長）してＳＤＲＡＭ２５に出力する。なお、記録媒体２３の代わりに撮像装置１の内部に記憶部を設けてもよい。
【００６１】
入力部２０は、静止画撮影および動画撮影における撮影条件を設定する静止画撮影条件設定信号を含む各種設定信号の入力を受け付ける設定信号入力部２０１と、少なくとも動画撮影の開始を指示する動画撮影開始信号の入力を受け付ける動画撮影信号入力部２０２と、動画中特殊効果の特性を変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部２０３と、を有する。
【００６２】
変更指示信号入力部２０３が入力を受け付ける変更指示信号は、動画中特殊効果の特性を変えずに動画中特殊効果をホールドする効果ホールド信号、および動画中特殊効果の特性の時間的な変化を与える特性曲線の変更指示を与える特性曲線変更指示信号からなる。
【００６３】
入力部２０は、本体部２の表面に設けられた操作信号入力用のユーザインターフェースを用いて実現される。以下、入力部２０の一部をなすユーザインタフェースの構成を説明する。
【００６４】
撮像装置１は、操作入力用のユーザインタフェースとして、撮像装置１の電源状態をオン状態またはオフ状態に切替える電源ボタン４１と、静止画撮影の指示を与える静止画レリーズ信号の入力を受け付けるレリーズボタン４２と、撮像装置１に設定された各種撮影モードを切り替えるモードダイヤル４３と、撮像装置１の各種設定を切替える操作ボタン４４と、撮像装置１の各種設定を表示部２１に表示させるメニューボタン４５と、記録媒体２３に記録された画像データに対応する画像を表示部２１に表示させる再生ボタン４６と、動画撮影の指示を与える動画レリーズ信号の入力を受け付ける動画ボタン４７と、撮像装置１の各種機能を設定するファンクションキー４８と、データを消去する消去ボタン４９と、表示部２１の表示画面に重ねて設けられ、外部からの接触位置に応じた入力信号を受け付けるタッチパネル５０とを有する。
【００６５】
レリーズボタン４２は、外部からの押圧により進退可能である。レリーズボタン４２が半押しされた場合、撮影準備動作を指示する１ｓｔレリーズ信号が入力される。これに対し、レリーズボタン４２が全押しされた場合、静止画撮影を指示する２ｎｄレリーズ信号が入力される。本実施の形態では、動画中特殊効果画像処理部１６３が動画中特殊効果画像処理を実行している最中は、レリーズボタン４２の１ｓｔレリーズ信号を効果ホールド信号としてもよい。これにより、ユーザは効果ホールドを行いたいときに、直感的に把握しやすい入力ボタンを使用して効果ホールド処理を行うことができる。この場合のレリーズボタン４２は、変更指示信号入力部２０３の一部をなすこととなる。
【００６６】
操作ボタン４４は、メニュー画面等における選択設定入力を行うために上下左右方向に十字状をなす十字キー４４１と、十字キー４４１による選択を確定する決定ボタン４４２とを有する。十字キー４４１は、上矢印キー４４３、下矢印キー４４４、左矢印キー４４５、右矢印キー４４６からなる。
【００６７】
タッチパネル５０は、変更指示信号入力部２０３の一部として機能する。すなわち、タッチパネル５０は、効果ホールド信号や、特性曲線変更指示信号の入力を受け付ける機能を有する。
【００６８】
以上説明したユーザインタフェースのうち、動画ボタン４７以外のボタンは設定信号入力部２０１の一部をなす。また、動画ボタン４７は動画撮影信号入力部２０２の一部をなす。また、動画中特殊効果画像処置実行中のレリーズボタン４２、およびタッチパネル５０は、変更指示信号入力部２０３の一部をなす。
【００６９】
図１０は、動画記録中でない場合（動画非記録時）と動画記録中である場合（動画記録時）における十字キー４４１の各矢印キーへの操作割り当て例を示す図である。動画が記録中でない場合、上矢印キー４４３には露出補正操作が割り当てられる。下矢印キー４４４には連写・単写操作が割り当てられる。左矢印キー４４５にはＡＦターゲット操作が割り当てられる。右矢印キー４４６にはフラッシュ設定操作が割り当てられる。
【００７０】
次に、動画記録中である場合を説明する。この場合、上矢印キー４４３にはワンショットエコー開始操作が割り当てられる。下矢印キー４４４にはトランジット開始操作が割り当てられる。左矢印キー４４５は、マルチエコーの開始、停止操作を交互に割り当てトグルキーとして機能する。右矢印キー４４６には揺らぎ開始操作が割り当てられる。なお、揺らぎの終了を任意に選択できるように設定する場合には、右矢印キー４４６に対して、揺らぎの開始操作と終了操作とを交互に操作可能なトグルキーとして機能させればよい。
【００７１】
なお、動画記録時における入力ボタンの割り当ては、図１０に示すものに限られるわけではない。
【００７２】
表示部２１は、液晶または有機ＥＬ（Electro Luminescence）等からなる表示パネルを用いて構成される。表示駆動部２２は、バス２８を介してＳＤＲＡＭ２５が記憶する画像データまたは記録媒体２３が記憶する画像データを取得し、取得した画像データに対応する画像を表示部２１に表示させる。ここで、画像の表示には、撮影直後の画像データを所定時間（例えば３秒間）だけ表示するレックビュー表示、記録媒体２３に記録された画像データを再生する再生表示、および撮像素子１２が連続的に生成する画像データに対応するライブビュー画像を時系列に沿って順次表示するライブビュー表示等が含まれる。また、表示部２１は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。
【００７３】
記録媒体２３は、撮像装置１の外部から装着されるメモリカード等を用いて構成される。記録媒体２３は、メモリＩ／Ｆ２４を介して撮像装置１に着脱自在に装着される。記録媒体２３には、その種類に応じた図示しない読み書き装置によって画像処理部１６や画像圧縮展開部１９が処理を施した画像データが書き込まれ、または読み書き装置によって記録媒体２３に記録された画像データが読み出される。また、記録媒体２３は、制御部２９の制御のもと、メモリＩ／Ｆ２４およびバス２８を介して撮像プログラムおよび各種情報それぞれをＦｌａｓｈメモリ２６に出力してもよい。
【００７４】
ＳＤＲＡＭ２５は、揮発性メモリを用いて構成される。ＳＤＲＡＭ２５は、バス２８を介してＡ／Ｄ変換部１５から入力される画像データ、画像処理部１６から入力される処理画像データおよび撮像装置１の処理中の情報を一時的に記憶する一次記憶部としての機能を有する。例えば、ＳＤＲＡＭ２５は、信号処理部１４、Ａ／Ｄ変換部１５およびバス２８を介して、撮像素子１２が１フレーム毎に順次出力する画像データを一時的に記憶する。
【００７５】
Ｆｌａｓｈメモリ２６は、不揮発性メモリを用いて構成される。Ｆｌａｓｈメモリ２６は、プログラム記録部２６１と、特殊効果処理情報記録部２６２と、画像処理情報記録部２６３と、を有する。プログラム記録部２６１は、撮像装置１を動作させるための各種プログラム、撮像プログラムおよびプログラムの実行中に使用される各種データおよび画像処理部１６による画像処理の動作に必要な各種パラメータ等を記録する。特殊効果処理情報記録部２６２は、アート効果画像処理部１６２が行う各アート効果処理における画像処理の組み合わせ情報を記録する。画像処理情報記録部２６３は、画像処理部１６が実行可能な画像処理に処理時間を対応付けた画像処理情報を記録する。また、Ｆｌａｓｈメモリ２６は、撮像装置１を特定するための製造番号等を記録する。
【００７６】
本体通信部２７は、本体部２に装着されたレンズ部３との通信を行うための通信インターフェースである。本体通信部２７には、レンズ部３との電気的な接点も含まれる。
【００７７】
バス２８は、撮像装置１の各構成部位を接続する伝送路等を用いて構成される。バス２８は、撮像装置１の内部で発生した各種データを撮像装置１の各構成部位に転送する。
【００７８】
制御部２９は、ＣＰＵ（Central Processing Unit）等を用いて構成される。制御部２９は、画像処理制御部２９１と、特性制御部２９２と、表示制御部２９３と、を有する。
【００７９】
画像処理制御部２９１は、バス２８を介して入力される入力部２０からの指示信号に応じて、画像処理部１６に実行させるべき画像処理の内容を設定し、設定した内容に応じた画像処理を、基本画像処理部１６１、アート効果画像処理部１６２、および動画中特殊効果画像処理部１６３のいずれかに実行させる。
【００８０】
特性制御部２９２は、動画中特殊効果の特性を制御する。この特性は、ワンショットエコーの場合には、ＳＤＲＡＭ画像の合成比率ａである（図６を参照）。また、トランジットの場合には、トランジット前のアート効果の合成比率ｂである（図８を参照）。
【００８１】
表示制御部２９３は、表示部２１の表示態様を制御する。具体的には、表示制御部２９３は、表示駆動部２２を駆動し、画像処理部１６が処理を行った各種画像データに対応する画像を表示部２１に表示させる。
【００８２】
制御部２９は、バス２８を介して入力部２０から送信される指示信号に応じて、撮像装置１を構成する各部に対して制御信号や各種データの送信を行うことにより、撮像装置１の動作を統括的に制御する。
【００８３】
制御部２９は、レリーズボタン４２を介して２ｎｄレリーズ信号が入力された場合、撮像装置１における静止画撮影動作を開始する制御を行う。また、制御部２９は、動画ボタン４７を介して動画撮影開始信号が入力された場合、撮像装置１における動画撮影動作を開始する制御を行う。ここで、撮像装置１における撮影動作とは、シャッタ駆動部１１および撮像素子駆動部１３の駆動によって撮像素子１２が出力した画像データに対し、信号処理部１４、Ａ／Ｄ変換部１５および画像処理部１６が所定の処理を施す動作をいう。このように処理が施された画像データは、画像処理制御部２９１の制御のもと、画像圧縮展開部１９で所定の形式にしたがって圧縮され、バス２８およびメモリＩ／Ｆ２４を介して記録媒体２３に記録される。なお、本実施の形態では記録媒体２３が記憶部の一部をなしているが、記録媒体２３とは別に撮像装置１の内部に記憶部の機能を有する記憶領域を確保し、この記憶領域に圧縮した画像データを記憶するようにしてもよい。
【００８４】
以上の構成を有する本体部２に対して、音声入出力部、被写体に対して補助光（フラッシュ）を発光する補助光発光部、インターネットを介して外部の装置と双方向に通信を行う機能を有する通信部などをさらに設けてもよい。
【００８５】
次に、レンズ部３の構成を説明する。レンズ部３は、光学系３１と、レンズ駆動部３２と、絞り３３と、絞り駆動部３４と、レンズ操作部３５と、レンズＦｌａｓｈメモリ３６と、レンズ通信部３７と、レンズ制御部３８と、を備える。
【００８６】
光学系３１は、一または複数のレンズを用いて構成される。光学系３１は、所定の視野領域から光を集光する。光学系３１は、画角を変化させる光学ズーム機能および焦点を変化させるフォーカス機能を有する。
【００８７】
レンズ駆動部３２は、ＤＣモータまたはステッピングモータ等を用いて構成され、光学系３１のレンズを光軸Ｌ上で移動させることにより、光学系３１のピント位置や画角等の変更を行う。
【００８８】
絞り３３は、光学系３１が集光した光の入射量を制限することにより露出の調整を行う。
絞り駆動部３４は、ステッピングモータ等を用いて構成され、絞り３３を駆動する。
【００８９】
レンズ操作部３５は、図２に示すように、レンズ部３のレンズ鏡筒の周囲に設けられるリングであり、レンズ部３における光学ズームの操作を開始する操作信号の入力、またはレンズ部３におけるピント位置の調整を指示する指示信号の入力を受け付ける。なお、レンズ操作部３５は、プッシュ式のスイッチ等であってもよい。
【００９０】
レンズＦｌａｓｈメモリ３６は、光学系３１の位置および動きそれぞれを決定するための制御用プログラム、光学系３１のレンズ特性および各種パラメータを記録する。
【００９１】
レンズ通信部３７は、レンズ部３が本体部２に装着されたときに、本体部２の本体通信部２７と通信を行うための通信インターフェースである。レンズ通信部３７には、本体部２との電気的な接点も含まれる。
【００９２】
レンズ制御部３８は、ＣＰＵ（Central Processing Unit）等を用いて構成される。レンズ制御部３８は、レンズ操作部３５の操作信号または本体部２からの指示信号に応じてレンズ部３の動作を制御する。具体的には、レンズ制御部３８は、レンズ操作部３５の操作信号に応じて、レンズ駆動部３２を駆動させてレンズ部３のピント合わせやズーム変更を行うとともに、絞り駆動部３４を駆動させて絞り値の変更を行う。なお、レンズ制御部３８は、レンズ部３が本体部２に装着された際に、レンズ部３のピント位置情報、焦点距離およびレンズ部３を識別する固有情報等を本体部２に送信するようにしてもよい。
【００９３】
レンズ制御部３８は、本体部２の制御部２９との間で所定の周期でレンズ通信信号を送受信することによって、本体部２との動作の連携を図っている。図１１は、レンズ制御部３８と制御部２９との同期通信の一例を示すタイミングチャートである。図１１（ａ）は本体部２内の処理を示している。図１１（ｂ）は垂直同期信号を示している。図１１（ｃ）は撮像、読み出しのタイミングを示している。図１１（ｄ）はレンズ通信を示している。図１１（ｅ）はレンズ通信同期信号を示している。図１１（ｆ）はレンズ位置取得信号を示している。図１１（ｇ）はレンズ部３内の処理を示している。
【００９４】
まず、制御部２９は、前フレームで取得した画像データによりライブビュー画像の画像処理およびＡＦ評価値の算出等を画像処理部１６に実行させるとともに、レンズ制御部３８にレンズ状態データを取得するためのレンズ状態データ要求コマンドを送信する（Ｂ１、ＢＬ）。この際、制御部２９は、同期通信モード中に、垂直同期信号と同じ周期でレンズ通信用の同期信号および光学系３１の位置情報を取得するタイミングを指示するレンズ位置取得信号を送信する。このレンズ位置取得信号は、図１１（ｃ）に示すように撮像素子１２の中央部の蓄積時間の１／２が経過した時点で状態が変化する信号である。
【００９５】
レンズ制御部３８は、レンズ位置取得信号の状態が変化したタイミングで光学系３１の位置情報を取得するとともに、レンズ通信同期信号の受信タイミングでレンズ操作部３５の操作状態を検出する（Ｌ１）。
【００９６】
続いて、レンズ制御部３８は、制御部２９から受信したレンズ状態データ要求コマンドへの応答として、工程Ｌ１で取得した光学系３１の位置情報およびレンズ操作部３５の捜査状態を含むレンズ状態データを制御部２９へ送信する（Ｌ２）。
【００９７】
この後、制御部２９は、レンズ制御部３８から送られてきたレンズ状態データに基づいて、ＡＦ評価値の算出や、露出値の変更等の各種設定変更を行う（Ｂ２）。
【００９８】
制御部２９とレンズ制御部３８は、以上説明した処理を周期的に繰り返し行う。
【００９９】
図１２は、以上の構成を有する撮像装置１が行う処理の概要を示すフローチャートである。図１２において、まず、ユーザによって電源ボタン４１が操作されて、撮像装置１の電源がオン状態になる（ステップＳ１：Ｙｅｓ）と、制御部２９は、撮像装置１の初期化を行う（ステップＳ２）。この初期化処理において、制御部２９は、例えば動画の記録中を示す記録中フラグをオフ状態にリセットしたり、動画中の特殊効果に関する適用を示す特殊効果フラグをオフ状態にリセットしたり、レンズ制御部３８との間のレンズ通信（図１１を参照）を開始したりする処理を行う。なお、撮像装置１の電源がオン状態でない場合（ステップＳ１：Ｎｏ）、撮像装置１はステップＳ１を繰り返す。
【０１００】
続いて、再生ボタン４６が操作されることなく（ステップＳ３：Ｎｏ）、メニューボタン４５が操作された場合（ステップＳ４：Ｙｅｓ）、撮像装置１は、設定を変更するためのメニュー画面を表示し、ユーザの選択操作に応じて撮像装置１の各種条件を設定する設定処理を実行する（ステップＳ５）。ステップＳ５の後、撮像装置１は、後述するステップＳ７へ移行する。
【０１０１】
ここで設定される内容は、仕上がり効果処理、アート効果処理、静止画記録モード、動画記録モード、動画中特殊効果処理などである。仕上がり効果処理には、例えば画像を自然な色合いに仕上げる処理であるナチュラル、画像を色鮮やかに仕上げる処理であるビビッド、被写体の素材性を重視して仕上げる処理であるフラット、画像をモノクロ調に仕上げる処理であるモノトーンなどが含まれる。静止画記録モードは、記録対象とする静止画の種類に応じて定められ、例えばＪＰＥＧ記録モード、ＪＰＥＧ＋ＲＡＷ記録モード、ＲＡＷ記録モードなどがある。動画撮影モードは、動画圧縮形式に応じて定められるモードであって、例えばＭｏｔｉｏｎ−ＪＰＥＧモード、ＭＰ４（Ｈ．２６４）モードなどがある。動画中特殊効果処理で設定されるのは、例えばトランジットによるアート効果の切り替え先や揺らぎなどである。
【０１０２】
ステップＳ３で再生ボタン４６が操作された場合（ステップＳ３：Ｙｅｓ）、撮像装置１は再生処理を行う（ステップＳ６）。このステップＳ６において、表示制御部２９３は、記録媒体２３に記録されているファイル一覧を表示部２１に表示させる。その後、入力部２０によって再生画像が選択入力された場合、記録媒体２３から画像データを取得し、取得した画像データを画像圧縮展開部１９で展開して表示部２１に表示させる。この後、撮像装置１は、ステップＳ１８へ移行する。
【０１０３】
ステップＳ３で再生ボタン４６が操作されることなく（ステップＳ３：Ｎｏ）、メニューボタン４５が操作されていない場合（ステップＳ４：Ｎｏ）において、動画ボタン４７が操作されたとき（ステップＳ７：Ｙｅｓ）、制御部２９は、動画の記録中であることを示す記録中フラグを反転させる（ステップＳ８）。具体的には、例えば記録中フラグがオン状態にある場合、制御部２９は、その記録中フラグをオフ状態に反転させる。
【０１０４】
続いて、制御部２９は、ＳＤＲＡＭ２５に記録された記録中フラグがオン状態であるか否かを判断する（ステップＳ９）。記録中フラグがオン状態であると判断した場合（ステップＳ９：Ｙｅｓ）、制御部２９は、記録媒体２３に画像データを時系列に沿って記録するための動画ファイルを生成して記録媒体２３に格納する（ステップＳ１０）。
【０１０５】
その後、制御部２９は、特殊動画用のユーザインターフェース（ＵＩ）を設定する（ステップＳ１１）。この設定により、例えば図１０に示すような動画記録時の割り当てが実行される。制御部２９は、ステップＳ１１で設定対象となったユーザインタフェースがこの後で受け付ける信号を、図１０に基づく特殊動画用の信号として認識する。
【０１０６】
続いて、表示制御部２９３は、表示部２１に表示させる画面上表示（ＯＳＤ）などの設定を切り替えることによって動画用の画面への切替えを行う（ステップＳ１２）。具体的には、表示制御部２９３は、例えば残り時間や、動画撮影時に特殊効果を適用できることを示すアイコンなどを表示する。この後、撮像装置１は、後述するステップＳ１５へ移行する。
【０１０７】
図１３は、表示部２１における動画用の画面表示例を示す図である。図１３に示すように、動画用画面Ｑでは、動画中特殊効果を適用可能であることを示す動画アイコン１１１、動画用画面キー割り当てを示す画面上表示１１２および動画撮影の残り時間を表示する残り時間１１３が表示される。このうち、画面上表示１１２は数秒間表示した後に自動的に消えるようにしてもよいし、常時表示するようにしてもよい。また、設定信号入力部２０１からの入力によって画面上表示１１２の表示と非表示を切り替えることができるようにしてもよい。
【０１０８】
ステップＳ９において、記録中フラグがオフ状態であると判断した場合（ステップＳ９：Ｎｏ）、制御部２９は、静止画用ユーザインターフェースを設定する（ステップＳ１３）。この後、撮像装置１は、後述するステップＳ１５へ移行する。
【０１０９】
続いて、表示制御部２９３は、表示部２１における画面上表示などの設定を静止画用に切り替える（ステップＳ１４）。この切り替えにより、表示部２１は、例えば残り記録枚数や、静止画撮影時に特殊効果を適用できることを示すアイコンなどを表示する。この後、撮像装置１は、後述するステップＳ１５へ移行する。
【０１１０】
ステップＳ７において、動画ボタン４７が操作されていない場合（ステップＳ７：Ｎｏ）、画像処理制御部２９１は、動画中特殊効果画像処理部１６３に対して動画中特殊効果処理を行わせる（ステップＳ１５）。
【０１１１】
図１４は、動画中特殊効果制御処理の概要を示すフローチャートである。図１４において、動画中特殊効果を開始するキーが操作された場合（ステップＳ３１：Ｙｅｓ）、画像処理制御部２９１は、動画中特殊効果フラグをオンにする（ステップＳ３２）。その後、画像処理制御部２９１は、効果設定を行う（ステップＳ３３）。
【０１１２】
動画中特殊効果を開始するキーが操作されない場合（ステップＳ３１：Ｎｏ）において、終了指示が入力されたとき（ステップＳ３４：Ｙｅｓ）、画像処理制御部２９１は、動画中特殊効果フラグをオフにする制御を行う（ステップＳ３５）。この後、撮像装置１は、メインルーチンへ戻る。
【０１１３】
これに対し、動画中特殊効果を開始するキーが操作されない場合（ステップＳ３１：Ｎｏ）において、終了指示が入力されないとき（ステップＳ３４：Ｎｏ）、撮像装置１はメインルーチンへ戻る。
【０１１４】
ステップＳ１５の動画中特殊効果制御処理の後、レリーズボタン４２から１ｓｔレリーズ信号が入力された場合（ステップＳ１６：Ｙｅｓ）、制御部２９は、ＡＥ処理部１７に露出を調整するＡＥ処理を実行させるとともに、ＡＦ処理部１８にピントを調整するＡＦ処理を実行させる（ステップＳ１７）。
【０１１５】
続いて、制御部２９は、電源ボタン４１が操作されることによって撮像装置１の電源がオフされたか否かを判断する（ステップＳ１８）。撮像装置１の電源がオフされたと制御部２９が判断した場合（ステップＳ１８：Ｙｅｓ）、撮像装置１は、本処理を終了する。これに対して、撮像装置１の電源がオフされていないと制御部２９が判断した場合（ステップＳ１８：Ｎｏ）、撮像装置１は、ステップＳ３へ戻る。
【０１１６】
レリーズボタン４２から１ｓｔレリーズ信号が入力されない場合（ステップＳ１６：Ｎｏ）、レリーズボタン４２から２ｎｄレリーズ信号が入力されたとき（ステップＳ１９：Ｙｅｓ）、制御部２９は、シャッタ駆動部１１および撮像素子駆動部１３をそれぞれ駆動することにより、メカシャッタによる撮影を行う（ステップＳ２０）。
【０１１７】
続いて、画像処理部１６は、撮影した静止画像に対して所定の画像処理を実行する（ステップＳ２１）。なお、画像処理の詳細については後述する。
【０１１８】
この後、制御部２９は、画像データをＪＰＥＧ形式で画像圧縮展開部１９に圧縮させ、この圧縮した画像データを記録媒体２３に記録する（ステップＳ２２）。このステップＳ２２で、制御部２９は、画像圧縮展開部１９がＪＰＥＧ形式で圧縮した画像データに、画像処理部１６が画像処理を行っていないＲＡＷデータを対応付けて記録媒体２３に記録させるようにしてもよい。ステップＳ２２の後、撮像装置１は、ステップＳ１８へ移行する。
【０１１９】
ステップＳ１９において、レリーズボタン４２から２ｎｄレリーズ信号が入力されない場合（ステップＳ１９：Ｎｏ）、制御部２９は、ＡＥ処理部１７に露出を調整するＡＥ処理を実行させるとともに、ＡＦ処理部１８にピントを調整するＡＦ処理を実行させる（ステップＳ２３）。
【０１２０】
続いて、制御部２９は、撮像素子駆動部１３を駆動することにより、電子シャッタによる撮影を実行する（ステップＳ２４）。
【０１２１】
この後、画像処理部１６は、撮像装置１の設定情報に基づいて画像処理を行う（ステップＳ２５）。画像処理の詳細については後述する。
【０１２２】
表示制御部２９３は、画像処理部１６が処理を施した画像データに対応するライブビュー画像を表示部２１に表示させる（ステップＳ２６）。
【０１２３】
続いて、撮像装置１が動画記録中であれば（ステップＳ２７：Ｙｅｓ）、制御部２９は、画像データを画像圧縮展開部１９に圧縮させ、この圧縮した画像データを記録媒体２３に作成された動画ファイルに動画として記録させる（ステップＳ２８）。この後、撮像装置１は、ステップＳ１８へ移行する。これに対して、ステップＳ２７で動画記録中でなければ（ステップＳ２７：Ｎｏ）、撮像装置１はステップＳ１８へ移行する。
【０１２４】
図１５は、画像処理の概要を示すフローチャートである。図１５において、基本画像処理部１６１は基本画像処理を行う（ステップＳ４１）。ここでの基本画像処理は、ＯＢ（Optical Black）値の減算、ＷＢ補正、同時化、カラーマトリクス演算、ガンマ変換色補正、エッジ強調、ＮＲ（Noise Reduction）などの処理を含む。
【０１２５】
ここで、ＷＢ補正は、ベイヤ配列の画像データに対して、予めユーザが設定したＷＢモードに応じたＲゲインとＢゲインを乗じて、ＷＢを撮像装置本体のフラッシュメモリから読み出し、その値を乗じることで補正する処理である。
同時化は、撮像素子１２がベイヤー配列であった場合に、その画素にないデータを周辺から補間することによって、各画素がＲＧＢデータで構成されるデータに変換する処理である。
カラーマトリクス演算は、設定されているＷＢモードに応じたカラーマトリクス係数を本体のフラッシュメモリから読み出して乗算する処理である。
ガンマ変換色補正処理では、仕上がりの設定に応じて予め設計したガンマテーブルを本体のフラッシュメモリから読み出し、画像データをガンマ変換する。このとき、ＲＧＢデータに適用するガンマ変換と、ＲＧＢの色空間を輝度信号Ｙと２つの色差信号Ｃｂ、Ｃｒによって表される色空間に変換した後で輝度信号Ｙのみにガンマ変換を行うようにしてもよい。また、適切な色再現性を得るために、仕上がりの設定に応じて予め設計したサイドパラメータを用いて色を補正してもよい。なお、アート効果の種類によってガンマ曲線を変えるようにしてもよい。
エッジ強調処理では、バンドパスフィルタによりエッジ成分を抽出し、エッジ強調度に応じた係数を乗じて画像データに加算することで強調する。
ＮＲ処理では、画像を周波数分解し、周波数に応じてコアリング処理などを行うことでノイズを低減する処理を行う。
【０１２６】
続いて、アート効果画像処理部１６２は、アート効果処理を行う（ステップＳ４２）。ここでは、上述したクロスフィルター、ソフトフォーカス、ノイズ付加、シェーディング、周辺輝度持ち上げ、周辺ぼかし、等の処理を行う。
【０１２７】
その後、撮像装置１が静止画撮影を行う場合（ステップＳ４３：Ｙｅｓ）、制御部２９が動画中特殊効果（第１の特殊効果）に対応した特殊効果（第２の特殊効果）を静止画の画像データに付与することを禁止する制御を行った後、メインルーチンへ戻る。
【０１２８】
ここで、撮像装置１が静止画撮影を行う場合に動画中特殊効果に対応した特殊効果を付与しない理由を説明する。動画撮影中の静止画撮影はレスポンスの速さが重要である。静止画の画素数は動画の画素数に比べて数倍程度大きいため、静止画に動画中特殊効果を付与すると、静止画撮影後の動画撮影の再開タイミングに影響を及ぼすおそれがある。そこで、本実施の形態では、静止画の場合に動画中特殊効果の適用を禁止している。なお、光束でレスポンスに影響がなければ静止画に適用することも可能である。
【０１２９】
一方、撮像装置１が動画撮影を行う場合（ステップＳ４３：Ｎｏ）、制御部２９は、動画中特殊効果が設定されているか否かを判定する（ステップＳ４４）。動画中特殊効果が設定されている場合（ステップＳ４４：Ｙｅｓ）、ステップＳ４５へ移行する。これに対して、動画中特殊効果が設定されていない場合（ステップＳ４４：Ｎｏ）、撮像装置１はメインルーチンへ戻る。
【０１３０】
ステップＳ４４で動画中特殊効果が設定されている場合（ステップＳ４４：Ｙｅｓ）において、適用する効果がマルチエコーであるとき（ステップＳ４５：Ｙｅｓ）、動画中特殊効果画像処理部１６３は、直前の画像処理結果（前フレーム）に対して、上述したマルチエコー処理（図４を参照）として、現在のフレームを所定の比率で合成する（ステップＳ４６）。一方、適用する特殊効果がマルチエコーでないとき（ステップＳ４５：Ｎｏ）、撮像装置１はステップＳ４７へ移行する。
【０１３１】
ステップＳ４７において、制御部２９は、適用する効果がワンショットエコーであるか否かを判定する。適用する効果がワンショットエコーである場合（ステップＳ４７：Ｙｅｓ）において、変更指示信号入力部２０３が特性変更指示信号の入力を受け付けたとき（ステップＳ４８：Ｙｅｓ）、特性制御部２９２は、ワンショットエコーの特性を変更する制御を行う（ステップＳ４９）。
【０１３２】
図１６は、特性制御部２９２が行うマルチエコー処理の特性の変更処理の一例を示す図である。ステップＳ４８で入力された変更指示信号が、レリーズボタン４２の１ｓｔレリーズによる効果ホールド指示信号である場合（ステップＳ６１：Ｙｅｓ）、特性制御部２９２は、前フレームと同じ係数ａを設定し、この係数ａを含む制御信号を動画中特殊効果画像処理部１６３に送信する（ステップＳ６２）。
【０１３３】
図１７は、ステップＳ６２における効果ホールド状態を模式的に示す図である。図１７に示すように、変更指示信号入力部２０３によって変更指示信号として効果ホールド指示信号が入力されると、係数ａの時間的な特性曲線は効果ホールド指示信号が入力されている間（ｔ'≦ｔ≦ｔ''）、係数ａは一定値ａ'をとる。
【０１３４】
ステップＳ４８で入力された変更指示信号が効果ホールド信号でない場合（ステップＳ６１：Ｎｏ）、入力された変更指示信号は、特性曲線変更指示信号である。この場合、特性制御部２９２は、入力に応じて特性曲線を変更する（ステップＳ６３）。
【０１３５】
図１８は、特性曲線の変更処理の概要を示す図である。ユーザは、まず所定のボタンを押して、表示部２１上に特性曲線を表示させる。この際、ライブビュー画像を表示した状態で上書きしてもよいし、一旦ライブビュー画像を消してから特性曲線を表示してもよい。図１８では、後者の場合を示している。なお、図１８では、表示時点が特性曲線のどの位置であるかを示す破線と表示が加えられている。
【０１３６】
表示部２１が特性曲線Ｃを表示すると、ユーザは、表示部２１上のタッチパネル５０に表示された特性曲線Ｃ上で変更を開始したい箇所を指でタッチしてスライドさせる（図１８（ａ））。その後、ユーザがタッチパネル５０から指を離すと、特性制御部２９２は、特性曲線Ｃを指のタッチに応じて変更した特性曲線Ｃ'を作成し、表示制御部２９３を介して表示部２１に表示させる。
【０１３７】
この後、特性制御部２９２は、変更した特性曲線Ｃ'に基づいて、現時間に応じた係数ａを算出する（ステップＳ６４）。この後、撮像装置１はメインルーチンへ戻る。
【０１３８】
再び図１５に戻ってステップＳ５０以降の処理を説明する。特性制御部２９２から制御信号を受信した動画中特殊効果画像処理部１６３は、ワンショットエコー効果を得るために、ＳＤＲＡＭ２５が記憶する特定の画像データであるレリーズフレームとの合成処理を行う（ステップＳ５０）。ここで、特殊効果フラグがオンになって最初のフレームの場合、動画中特殊効果画像処理部１６３は、現在のフレームの画像をＳＤＲＡＭ２５に記憶する処理を行う。これに対し、特殊効果フラグがオンになって２フレーム以後の場合、動画中特殊効果画像処理部１６３は、ＳＤＲＡＭ２５が記憶しているレリーズフレームと合成処理を行う。
【０１３９】
ステップＳ４７において、適用する動画中特殊効果がワンショットエコーでない場合（ステップＳ４７：Ｎｏ）、撮像装置１はステップＳ５１へ移行する。
【０１４０】
ステップＳ５１において、制御部２９は、適用する効果が揺らぎであるか否かを判定する。適用する効果が揺らぎである場合（ステップＳ５１：Ｙｅｓ）、動画中特殊効果画像処理部１６３は揺らぎ効果を追加する処理を行う（ステップＳ５２）。
【０１４１】
ステップＳ５２における動画中特殊効果画像処理部１６３の具体的な処理を説明する。動画中特殊効果画像処理部１６３は、シェーディング処理、クロスフィルター処理などのアート効果処理における画像処理パラメータに揺らぎを持たせた効果を追加する。例えば、シェーディング処理であれば、画像の中心からの減衰特性を時間とともに変化させる。周辺ぼかしであれば、ぼかし量やぼかし形状を変化させる。クロスフィルターであれば、クロスパターンの長さや角度を時間とともに変化させる。また、彩度、コントラスト、ホワイトバランスを時間とともに変化させてもよい。なお、揺らぎとシェーディング等のアート効果が重複する場合、両方を付与してもよいし、揺らぎのみを付与するようにしてもよい。
【０１４２】
ステップＳ５１において、適用する効果が揺らぎではない場合（ステップＳ５１：Ｎｏ）、撮像装置１はステップＳ５３へ移行する。
【０１４３】
ステップＳ５３において、制御部２９は、適用する効果がトランジットであるか否かを判定する。適用する効果がトランジットである場合（ステップＳ５３：Ｙｅｓ）、基本画像処理部１６１およびアート効果画像処理部１６２は、仕上がり／切り替え先の設定に応じた基本画像処理およびアート効果処理をそれぞれ実行する（ステップＳ５４、Ｓ５５）。
【０１４４】
その後、変更指示信号入力部２０３が特性変更指示の入力を受け付けたとき（ステップＳ５６：Ｙｅｓ）、特性制御部２９２は、トランジット処理の特性を変更する制御を行う（ステップＳ５７）。トランジット処理の特性を変更する制御の詳細な内容は、上述したステップＳ４９と同様である。ただし、トランジット処理の場合、特性制御部２９２は、係数ｂに対する特性曲線（図８を参照）に基づいて、効果ホールド処理や特性曲線変更処理を行う。
【０１４５】
この後、動画中特殊効果画像処理部１６３は、トランジット用の二つの画像の合成処理を行うことによってトランジット画像を生成する（ステップＳ５８）。ステップＳ５８の後、撮像装置１はメインルーチンへ戻る。
【０１４６】
ステップＳ４８において、変更指示信号入力部２０３が特性変更指示信号の入力を受け付けないとき（ステップＳ４８：Ｎｏ）、撮像装置１はステップＳ５０へ移行する。
【０１４７】
ステップＳ５３において、制御部２９が判定した結果、適用する効果がトランジットでない場合（ステップＳ５３：Ｎｏ）、撮像装置１はメインルーチンへ戻る。
【０１４８】
ステップＳ５６において、変更指示信号入力部２０３が特性変更指示信号の入力を受け付けないとき（ステップＳ５６：Ｎｏ）、撮像装置１はステップＳ５８へ移行する。
【０１４９】
以上説明した本発明の一実施の形態によれば、複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行っている最中に特性の変更を指示する変更指示信号の入力を受け付けた場合、その変更指示信号に応じて特性を変更するため、ユーザは動画撮影中に付与する特殊効果をユーザの意志で容易に変更することができる。したがって、動画撮影中に適用する特殊効果を用いることによって多様な映像表現を実現することができる。
【０１５０】
また、本実施の形態によれば、動画記録を開始すると、設定信号入力部が動画中特殊効果用に切り替わり、制御部は動画用特殊効果の設定信号が入力されたものと認識する。したがって、ユーザは撮影時に簡単な操作をすることで、容易に動画に特殊効果を適用することができる。
【０１５１】
また、本実施の形態によれば、設定信号入力部を構成するユーザインターフェースに動画用と静止画用の入力機能を兼備させることができるため、動画撮影の場合にも操作性に優れたユーザインターフェースを実現することができる。加えて、ユーザインターフェースの数も抑制することができるため、レイアウトの制限も少なくなり、小型化に好適な撮像装置を実現することができる。
【０１５２】
また、本実施の形態によれば、編集機器やＰＣ上で実現できるものと同等な特殊効果を、撮像装置自体で実行することができる。したがって、ユーザの作画意図を反映した動画を、高度な専門知識を必要とすることなく、また後編集することなく作成することができる。
【０１５３】
また、本実施の形態によれば、動画撮影中の静止画に対して、動画中特殊効果の適用を禁止する制御を行うことにより、静止画撮影後の動画撮影の再開タイミングへの影響を防止することができる。
【０１５４】
一般に、撮像装置は、ＰＣ等と比較してメモリーが少なく処理能力が劣っているため、ＰＣ等と同等の動画データの編集処理を実現することは難しい。また、動画中の静止画撮影や、動画終了直後の静止画撮影の可能な撮像装置においては、メモリー不足やメモリー管理上の問題が決定的なものになり、メモリー増設によるコスト増や、静止画撮影時の応答性や静止画画質の劣化などの問題を発生してしまう恐れもある。本実施の形態では、この点に鑑み、撮影した動画を編集することなく、撮影時に複数のフレームにわたる時間的な移り変わりの特殊効果による撮影者の作画意図を付与した動画を撮影可能が技術を実現している。
【０１５５】
なお、本実施の形態では、ワンショットエコーとトランジットに対して特性変更指示信号が入力可能である場合を説明したが、他の動画中特殊効果の特性を変更できるようにしてもよい。具体的には、例えばマルチエコーにおいて、現フレームと他のフレームとを合成する係数を変更できるようにしてもいいし、揺らぎの際に効果ホールドを行うことができるようにしてもよい。
【０１５６】
また、本実施の形態において、動画中特殊効果の時間的な推移を一通り見た後でユーザが最適な特性を設定することができるようにしてもよい。この場合には、タッチパネル５０に特性曲線を表示するとともに、表示部２１にユーザに対して特性の変更指示を入力するように促すメッセージを表示するようにしてもよい。
【０１５７】
以上の説明では、動画撮影中に動画中特殊効果を変更することを記載してたが、本実施の形態は静止画撮影時のライブビュー表示に対しても適用可能であることはいうまでもない。
【０１５８】
（その他の実施の形態）
ここまで、本発明を実施するための形態を説明してきたが、本発明は上述した一実施の形態によってのみ限定されるべきものではない。
【０１５９】
例えば、本発明において、表示部とは別に電子ビューファインダを本体部に設け、この電子ビューファインダにおいて本発明を適用するようにしてもよい。この場合には、表示部と電子ビューファインダとで動画中特殊効果の見え方が異なるようにすればより好ましい。
【０１６０】
また、本発明においては、本体部とレンズ部とが一体的に形成されていてもよい。
【０１６１】
また、本発明に係る撮像装置は、デジタル一眼レフカメラ以外にも、例えばアクセサリ等を装着可能なデジタルカメラ、デジタルビデオカメラおよび撮影機能を有する携帯電話やタブレット型携帯機器等の電子機器にも適用することができる。
【０１６２】
なお、本明細書におけるフローチャートの説明では、「まず」、「その後」、「続いて」等の表現を用いてステップ間の処理の前後関係を明示していたが、本発明を実施するために必要な処理の順序は、それらの表現によって一意的に定められるわけではない。すなわち、本明細書で記載したフローチャートにおける処理の順序は、矛盾のない範囲で変更することができる。
【０１６３】
このように、本発明は、ここでは記載していない様々な実施の形態を含みうるものであり、特許請求の範囲によって特定される技術的思想の範囲内で種々の設計変更等を行うことが可能である。
【符号の説明】
【０１６４】
１ 撮像装置
２ 本体部
３ レンズ部
１２ 撮像素子
１６ 画像処理部
１９ 画像圧縮展開部
２０ 入力部
２１ 表示部
２２ 表示駆動部
２３ 記録媒体
２６ Ｆｌａｓｈメモリ
２７ 本体通信部
２８ バス
２９ 制御部
３１ 光学系
３５ レンズ操作部
３６ レンズｆｌａｓｈメモリ
３７ レンズ通信部
３８ レンズ制御部
４１ 電源ボタン
４２ レリーズボタン
４３ モードダイヤル
４４ 操作ボタン
４５ メニューボタン
４６ 再生ボタン
４７ 動画ボタン
４８ ファンクションキー
４９ 消去ボタン
５０ タッチパネル
１６１ 基本画像処理部
１６２ アート効果画像処理部
１６３ 動画中特殊効果画像処理部
２０１ 設定信号入力部
２０２ 動画撮影信号入力部
２０３ 変更指示信号入力部
２６１ プログラム記録部
２６２ 特殊効果処理情報記録部
２６３ 画像処理情報記録部
２９１ 画像処理制御部
２９２ 特性制御部
２９３ 表示制御部
４４１ 十字キー
４４２ 決定ボタン
４４３ 上矢印キー
４４４ 下矢印キー
４４５ 左矢印キー
４４６ 右矢印キー
Ａ１、Ａ２、Ａ３、Ａ４、Ｂ１、Ｂ２、Ｂ３、Ｂ４、Ｂ５、Ｒ２０ アート効果画像
Ｃ、Ｃ' 特性曲線
Ｒ１、Ｒ２、Ｒ３、Ｒ４ マルチエコー画像
Ｒ１１、Ｒ１２、Ｒ１３、Ｒ１４ ワンショットエコー画像
Ｒ２１、Ｒ２２、Ｒ２３、Ｒ２４、Ｒ２５ トランジット画像
【特許請求の範囲】
【請求項１】
被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置であって、
複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理部と、
前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部と、
前記変更指示信号入力部が受け付けた変更指示信号に応じて前記特性を変更する制御部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記変更指示信号は、
前記動画中特殊効果の特性を不変とする効果ホールド信号と、
前記動画中特殊効果の時間的な変化を与える特性曲線の変更指示を与える特性曲線変更指示信号と、
を含むことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記特性曲線を表示可能な表示部をさらに備え、
前記制御部は、
前記特性曲線変更指示信号が入力された場合、変更された前記特性曲線を前記表示部に表示させることを特徴とする請求項２に記載の撮像装置。
【請求項４】
撮影指示信号の入力を受け付けるとともに、前記変更指示信号の一部をなすレリーズボタンを有し、
前記制御部は、
前記動画中特殊効果を付与している最中に前記レリーズボタンによって信号が入力された場合、該信号を前記効果ホールド信号と認識することを特徴とする請求項２に記載の撮像装置。
【請求項５】
前記変更指示信号入力部は、
前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、
前記制御部は、
前記タッチパネルに対して前記特性の表示位置に対応した接触位置であって略同じ接触位置での接触が継続する場合、該接触による信号を前記効果ホールド信号と認識することを特徴とする請求項２に記載の撮像装置。
【請求項６】
前記変更指示信号入力部は、
前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、
前記制御部は、
前記タッチパネルに対して前記特性曲線上に対応した接触位置を基点として接触位置がスライドしながら変化した場合、該スライドの方向に応じて前記特性を変更するとともに、前記表示部に変更した前記特性に対応する特性曲線を表示させることを特徴とする請求項２に記載の撮像装置。
【請求項７】
前記動画中特殊効果画像処理部が行う画像処理は、
特定の画像データとこの画像データの後に撮影した画像データとを所定の比率で順次合成し、前記特定の画像データの合成比率が時間とともに小さくなるワンショットエコー処理を含み、
前記動画中特殊効果処理の特性は、前記合成比率であることを特徴とする請求項１〜６のいずれか一項に記載の撮像装置。
【請求項８】
一つの画像データに対して視覚的な効果を生じさせるアート効果を付与する画像処理を行うアート効果画像処理部を備え、
前記動画中特殊効果画像処理部が行う画像処理は、
前記アート効果画像処理部が行うアート効果画像処理の種類を時間の経過とともに徐々に変えていくトランジット処理を含み、
前記動画中特殊効果の特性は、前記トランジット処理開始時点で選択されているアート効果の画像中における合成比率であることを特徴とする請求項１〜６のいずれか一項に記載の撮像装置。
【請求項１０】
被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置が行う撮像方法であって、
複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、
前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、
前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、
を有することを特徴とする撮像方法。
【請求項１１】
被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置に、
複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、
前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、
前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、
を実行させることを特徴とする撮像プログラム。
【請求項１】
被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置であって、
複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理部と、
前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力部と、
前記変更指示信号入力部が受け付けた変更指示信号に応じて前記特性を変更する制御部と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記変更指示信号は、
前記動画中特殊効果の特性を不変とする効果ホールド信号と、
前記動画中特殊効果の時間的な変化を与える特性曲線の変更指示を与える特性曲線変更指示信号と、
を含むことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記特性曲線を表示可能な表示部をさらに備え、
前記制御部は、
前記特性曲線変更指示信号が入力された場合、変更された前記特性曲線を前記表示部に表示させることを特徴とする請求項２に記載の撮像装置。
【請求項４】
撮影指示信号の入力を受け付けるとともに、前記変更指示信号の一部をなすレリーズボタンを有し、
前記制御部は、
前記動画中特殊効果を付与している最中に前記レリーズボタンによって信号が入力された場合、該信号を前記効果ホールド信号と認識することを特徴とする請求項２に記載の撮像装置。
【請求項５】
前記変更指示信号入力部は、
前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、
前記制御部は、
前記タッチパネルに対して前記特性の表示位置に対応した接触位置であって略同じ接触位置での接触が継続する場合、該接触による信号を前記効果ホールド信号と認識することを特徴とする請求項２に記載の撮像装置。
【請求項６】
前記変更指示信号入力部は、
前記表示部の表示画面上に設けられ、外部からの接触位置に応じた信号の入力を受け付けるタッチパネルを有し、
前記制御部は、
前記タッチパネルに対して前記特性曲線上に対応した接触位置を基点として接触位置がスライドしながら変化した場合、該スライドの方向に応じて前記特性を変更するとともに、前記表示部に変更した前記特性に対応する特性曲線を表示させることを特徴とする請求項２に記載の撮像装置。
【請求項７】
前記動画中特殊効果画像処理部が行う画像処理は、
特定の画像データとこの画像データの後に撮影した画像データとを所定の比率で順次合成し、前記特定の画像データの合成比率が時間とともに小さくなるワンショットエコー処理を含み、
前記動画中特殊効果処理の特性は、前記合成比率であることを特徴とする請求項１〜６のいずれか一項に記載の撮像装置。
【請求項８】
一つの画像データに対して視覚的な効果を生じさせるアート効果を付与する画像処理を行うアート効果画像処理部を備え、
前記動画中特殊効果画像処理部が行う画像処理は、
前記アート効果画像処理部が行うアート効果画像処理の種類を時間の経過とともに徐々に変えていくトランジット処理を含み、
前記動画中特殊効果の特性は、前記トランジット処理開始時点で選択されているアート効果の画像中における合成比率であることを特徴とする請求項１〜６のいずれか一項に記載の撮像装置。
【請求項１０】
被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置が行う撮像方法であって、
複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、
前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、
前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、
を有することを特徴とする撮像方法。
【請求項１１】
被写体を撮像して該被写体の画像データを生成し、動画および静止画を撮影可能な撮像装置に、
複数のフレームにわたって視覚的な効果を生じさせるために時間的に変化する特性を有する動画中特殊効果を付与する画像処理を行う動画中特殊効果画像処理ステップと、
前記動画中特殊効果画像処理ステップの最中に前記特性の変更を指示する変更指示信号の入力を受け付ける変更指示信号入力ステップと、
前記変更指示信号入力ステップで受け付けた変更指示信号に応じて前記特性を変更する特性変更ステップと、
を実行させることを特徴とする撮像プログラム。
【図１】
【図２】
【図３】
【図６】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図４】
【図５】
【図７】
【図２】
【図３】
【図６】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図４】
【図５】
【図７】
【公開番号】特開２０１３−８５０４２（Ｐ２０１３−８５０４２Ａ）
【公開日】平成２５年５月９日（２０１３．５．９）
【国際特許分類】
【出願番号】特願２０１１−２２２３５９（Ｐ２０１１−２２２３５９）
【出願日】平成２３年１０月６日（２０１１．１０．６）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
【公開日】平成２５年５月９日（２０１３．５．９）
【国際特許分類】
【出願日】平成２３年１０月６日（２０１１．１０．６）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【Ｆターム（参考）】
[ Back to top ]