画像処理装置、画像処理方法およびプログラム
【課題】画像処理に関する専門的な知識を有しない一般ユーザであっても、品質の高い編集データを作成して楽しむことができるようにする。
【解決手段】デジタルスチルカメラの液晶パネルに、撮影を要求されているシーンに応じて、ユーザの撮影を支援する操作画面８０を表示する。操作画面８０には、撮影するシーンの名称を表示するシーン名表示欄８２、撮影に際しての撮像条件を表示する撮像条件表示欄８３、撮影における注意点を文字表示するアドバイス表示欄８４等を設ける。
【解決手段】デジタルスチルカメラの液晶パネルに、撮影を要求されているシーンに応じて、ユーザの撮影を支援する操作画面８０を表示する。操作画面８０には、撮影するシーンの名称を表示するシーン名表示欄８２、撮影に際しての撮像条件を表示する撮像条件表示欄８３、撮影における注意点を文字表示するアドバイス表示欄８４等を設ける。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザによって取得された画像データを含む素材データを加工して、品質の高い編集データを生成する技術に関する。
【背景技術】
【０００２】
昨今、カメラ付きの携帯電話やデジタルスチルカメラが広く普及し、一般的なユーザが手軽にデジタル画像データを楽しむようになってきた。そして、これらの画像データを単にディスプレイに表示させて楽しむだけでなく、音声データや文字データと合成してナレーションを入れたり、様々な特殊効果を施した画像データとして表示させるなど、楽しみ方も多様化してきた。
【０００３】
従来より、デジタルスチルカメラで撮像した複数の静止画像データを、撮影順に一定時間間隔で表示してスライドショーのような画像を表示させるための編集データを作成する技術が知られている。
【０００４】
【特許文献１】特開２００７−３０６４２６号公報
【特許文献２】特開２００８−０４２２５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところが、スライドショーは単純であり一般ユーザにとっても比較的容易に作成できるものの、品質の高い凝った表現方法とは言えない。一方、画像に関する特殊な表現方法や加工技法等について専門的な知識を有していないと、凝った演出（修飾）を用いた品質の高い編集データを作成することは、困難であるという問題があった。すなわち、専門的知識がないと、素材となる画像データにそもそもどのようなデータ処理を施してよいか指示することができないからである。
【０００６】
本発明は、上記課題に鑑みてなされたものであり、画像処理に関する専門的な知識を有しない一般ユーザであっても、品質の高い編集データを生成して楽しむことができるようにすることを目的とする。
【課題を解決するための手段】
【０００７】
上記の課題を解決するため、請求項１の発明は、被写体を撮像して撮像データを生成する撮像手段と、操作案内データを記憶する記憶手段と、前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段とを備えることを特徴とする。
【０００８】
また、請求項２の発明は、請求項１の発明に係る画像処理装置であって、前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段とをさらに備えることを特徴とする。
【０００９】
また、請求項３の発明は、請求項１または２の発明に係る画像処理装置であって、前記操作案内データは、前記撮像手段に対する撮像条件を含み、前記撮像手段は、前記シーン撮像指示に従って撮像を行うときにおいて、前記撮像条件に従って撮像を行うことを特徴とする。
【００１０】
また、請求項４の発明は、請求項３の発明に係る画像処理装置であって、前記撮像条件には、少なくとも明るさ設定、シャッタースピード、フラッシュ発光の要否、露出補正の要否、特定色強調の要否、色変換の要否、連続撮影回数、静止画像か動画撮像かの区別のうちのいずれか１つを含むことを特徴とする。
【００１１】
また、請求項５の発明は、請求項３または４の発明に係る画像処理装置であって、前記操作画面に前記撮像条件の少なくとも１つが表示されることを特徴とする。
【００１２】
また、請求項６の発明は、請求項１ないし５のいずれかの発明に係る画像処理装置であって、前記撮像手段は、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて生成する撮像データに、前記シーンに関する情報を関連づけることを特徴とする。
【００１３】
また、請求項７の発明は、シナリオデータに基づいて素材データにデータ処理を施して編集データを生成する画像処理方法であって、(a)シナリオ元データに対応した操作案内データを記憶する工程と、(b)記憶された操作案内データに基づいて、前記操作案内データに対応したシナリオ元データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する工程と、(c)前記(b)工程により表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて撮像し撮像データを生成する工程と、(d)前記(c)工程において生成された撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成する工程とを有することを特徴とする。
【００１４】
また、請求項８の発明は、コンピュータによる実行が可能なプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、被写体を撮像して撮像データを生成する撮像手段と、操作案内データを記憶する記憶手段と、前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段とを備える画像処理装置として機能させることを特徴とする。
【００１５】
また、請求項９の発明は、請求項８の発明に係るプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段とをさらに備える画像処理装置として機能させることを特徴とする。
【発明の効果】
【００１６】
請求項１ないし９に記載の発明は、操作案内データに基づいて、当該操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示することにより、ユーザは、操作画面に従ってシーン撮像指示を与えるだけで、容易に状況に応じた適切な撮像を行うことができる。
【００１７】
請求項３に記載の発明は、操作案内データは撮像手段に対する撮像条件を含み、撮像手段はシーン撮像指示に従って撮像を行うときにおいて、当該撮像条件に従って撮像を行うことにより、ユーザが適切な撮像条件を自ら設定する必要がない。したがって、ユーザの負担を増大させることなく、高品質の撮像データを取得できる。
【００１８】
請求項５に記載の発明は、操作画面に撮像条件の少なくとも１つが表示されることにより、ユーザにどのような撮像が行われるかを案内することができる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明の好適な実施の形態について、添付の図面を参照しつつ、詳細に説明する。
【００２０】
＜１． 第１の実施の形態＞
図１は、本発明に係る画像処理装置として構成されるデジタルスチルカメラ１を含む情報処理システムを示す図である。情報処理システムは、一般ユーザが所持するデジタルスチルカメラ１と、例えばコンテンツプロバイダ等に設置されるサーバ装置２とが互いにネットワーク８を介して接続される構成となっている。
【００２１】
なお、ネットワーク８としては、インターネットや公衆網等が該当する。また、デジタルスチルカメラ１およびサーバ装置２の台数は１台に限定されるものではなく、例えば複数のデジタルスチルカメラ１や複数のサーバ装置２がネットワーク８に接続されていてもよい。
【００２２】
サーバ装置２は、データベース２０を備えた一般的なコンピュータとして構成されており、先述のようにネットワーク８に接続されている。サーバ装置２のデータベース２０には、シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４（以下、これらを「コンテンツデータ２１」と総称する場合がある。）が予め保存されている。なお、コンテンツデータ２１は、シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４を全て含んでいる必要はなく、それらのうちのいずれかであってもよい。
【００２３】
コンテンツデータ２１は、画像処理に関する専門知識を有するオペレータ（イラストレータやカメラマン、プログラマ等）によって予め作成されたデータである。したがって、コンテンツデータ２１は、一般ユーザによって作成されるデータに比べて品質の高いデータとして提供される。コンテンツデータ２１のうちのシナリオ元データ２２およびＧＵＩデータ２３は、デジタルスチルカメラ１において実行されるデータであって、例えば、スクリプト言語等で記述されるテキストデータである。
【００２４】
シナリオ元データ２２は、結婚式やゴルフコンペ、運動会、卒業式といった様々なテーマごとにそれぞれ制作されており、対応するテーマと関連づけられて保存されている。したがって、ユーザは具体的なテーマを選択するだけで、個々のシナリオ元データ２２の内容を詳細に理解していなくても、所望の編集データを作成するためのシナリオ元データ２２を提供されている複数のシナリオ元データ２２の中から容易に指定することが可能である。
【００２５】
なお、上記テーマとは、ユーザの生活環境において起こりうる出来事や行事であって、ユーザがそこに含まれる数々のシーンを撮影しようと望むものである。シナリオ元データ２２と関連づけられるテーマは、上記に挙げたものに限定されるものではないが、ユーザが状況に応じて容易に思いつき、かつ、内容を容易に想像できるものが好ましい。また、編集データとは、ユーザが作成しようとする目的のデータであって、本実施の形態では画像（静止画像または動画像）や音声を表現した未圧縮のストリーム情報である。
【００２６】
また、各テーマにはＧＵＩデータ２３も関連づけられている。すなわち、テーマを介してシナリオ元データ２２とＧＵＩデータ２３とが対応付けられている。ただし、各テーマに対応づけられるＧＵＩデータ２３は、同一のテーマに関連づけられているシナリオ元データ２２にとって専用のＧＵＩデータ２３であってもよいし、複数のテーマ（シナリオ元データ２２）において共通に使用される汎用性の高いＧＵＩデータ２３であってもよい。このようにシナリオ元データ２２とＧＵＩデータ２３とが互いに関連づけられていることにより、ユーザはテーマを選択するだけで、シナリオ元データ２２を指定できるとともに、当該シナリオ元データ２２に必要なＧＵＩデータ２３も特定される。
【００２７】
シナリオ元データ２２には、目的の編集データに必要な編集前データ（画像データや音声データ、フォントデータ等）の識別子が記述されるとともに、各編集前データに対して実行すべきデータ処理が各編集前データごとに記述される。すなわち、シナリオ元データ２２には、編集前データの識別子とデータ処理とが互いに関連づけられて記述される。
【００２８】
シナリオ元データ２２に記述されるデータ処理として、例えば、画像を表現した編集前データについて、どのような画像効果（Effect）を施すか、どのような画像合成（Synthesis）を行うか、あるいはどのように画像移行（Transition）させるか等が想定され、対応する編集前データに応じて画像処理の専門家であるオペレータによって選択され記述される。また、音声を表現した編集前データについても、再生のタイミングや音量等に関する設定情報（データ処理）が記述される。
【００２９】
なお、シナリオ元データ２２に識別子が記述される編集前データのうち、オペレータが制作したデータ（サーバ装置２に存在する素材データ２４）については、当該シナリオ元データ２２において当該素材データ２４との関連づけが既にされている。したがって、シナリオ元データ２２が特定されると、特定されたシナリオ元データ２２において使用される素材データ２４も編集前データとして特定される。
【００３０】
このように、コンテンツプロバイダは、ユーザがテーマを選択するだけで、サーバ装置２上の必要なシナリオ元データ２２、ＧＵＩデータ２３および素材データ２４が容易に特定されるように、それぞれの関連づけを行って提供する。
【００３１】
ＧＵＩデータ２３は、対応するシナリオ元データ２２（テーマ）に応じて、適切なＧＵＩをデジタルスチルカメラ１のユーザに提供するものであり、詳細は後述するが、本発明における操作案内データに相当する。すなわち、ＧＵＩデータ２３を実行することにより、デジタルスチルカメラ１は、シナリオ元データ２２において要求される編集前データを素材データ９０（図２）の中から特定するための特定情報を入力するようにユーザに対して要求し、デジタルスチルカメラ１におけるユーザ操作を支援する。例えば、対応するシナリオ元データ２２で要求されている編集前データのうち、ユーザが指定（選択）しなければならないデータについては、その入力を促したり、当該編集前データとして適切な素材データ９０をユーザが容易に指定できるように、当該編集前データに関する情報を表示したりする。
【００３２】
素材データ２４は、デジタルスチルカメラ１において加工される素材となるデータであって、画像データや音声データ、フォントデータ等である。素材データ２４に含まれる画像データとしては、例えば、アニメキャラクタや映画の名場面、名所を撮影した風景画像、イラスト画像等であり、静止画像に限らず動画像であってもよい。また、音声データとしては、例えば、声優や俳優の声、ＢＧＭ、動物の鳴き声、楽器の音、効果音等であり、現実に録音されたデータであってもよいし、機械的に合成された音を出力するためのデータであってもよい。素材データ２４は、各シナリオ元データ２２に最適なデータとして、専門家のオペレータによって制作され収集されたデータである。
【００３３】
先述のように、デジタルスチルカメラ１とサーバ装置２とは互いにデータ通信によるデータの送受信が可能であり、デジタルスチルカメラ１は必要に応じてサーバ装置２において提供されるコンテンツデータ２１をダウンロードすることが可能である。
【００３４】
図１に示すように、本実施の形態におけるデジタルスチルカメラ１は、携帯型の装置として構成されており、無線通信機能によって必要に応じてネットワーク８に接続することが可能とされている。このような無線通信機能を実現する構成としては、例えば、ＷｉＦｉ（Wireless Fidelity）や赤外線通信といった通信規格を採用することが可能である。
【００３５】
また、デジタルスチルカメラ１は、図１に示すように可搬性の記録メディア９を着脱可能に設計されており、当該記録メディア９に記憶されているデータを読み出して利用したり、デジタルスチルカメラ１において生成したデータ（あるいはダウンロードしたデータ）を当該記録メディア９に記憶させたりすることが可能である。本実施の形態では記録メディア９としてＳＤカードを採用するが、記録メディア９はこれに限定されるものではなく、例えばＰＣカードやメモリスティック等であってもよい。
【００３６】
図２は、デジタルスチルカメラ１の構成を示すブロック図である。図２に示すように、サーバ装置２からダウンロードされたシナリオ元データ２２、ＧＵＩデータ２３および素材データ２４は、記録メディア９に格納される。
【００３７】
なお、撮像データ９１および録音データ９２は、デジタルスチルカメラ１においてユーザにより撮像または録音され生成されるユーザ由来（サーバ装置２から提供されるデータではないという意味）のデータである。したがって、記録メディア９に記憶される素材データ９０は、オペレータによって制作される素材データ２４の他に、撮像データ９１および録音データ９２を含んでいる。先述のように、素材データ２４はシナリオ元データ２２によって特定されダウンロードされたデータであるから、シナリオ元データ２２において要求されている編集前データである。しかし、撮像データ９１および録音データ９２はシナリオ元データ２２とは無関係に取得されたデータを含んでいる。すなわち、本実施の形態においては、素材データ９０は編集前データ以外のデータを含んでいる。
【００３８】
デジタルスチルカメラ１は、各種データに関する演算処理を行うＣＰＵ１０と、各種データを必要に応じて適宜記憶する記憶部１１とを備えており、一般的なコンピュータとしても構成されている。
【００３９】
ＣＰＵ１０は、記憶部１１のＲＡＭを一時的なワーキングエリアとして使用しつつ、記憶部１１のＲＯＭに格納されているプログラム１１０に従って動作することにより、デジタルスチルカメラ１の各構成を制御する。なお、ＣＰＵ１０は、サーバ装置２からダウンロードされて記録メディア９に格納されているシナリオ元データ２２およびＧＵＩデータ２３を実行する機能も有しているが詳細は後述する。
【００４０】
デジタルスチルカメラ１は、各種データを取り込むための構成として、ユーザによって操作される操作部１２と、周囲の音声を電気信号に変換することにより録音を行うマイク１３と、入射する光を電気信号に変換することにより撮像を行う撮像部１４とを備えている。
【００４１】
操作部１２は、ユーザがデジタルスチルカメラ１に対して指示を入力するために使用される。操作部１２は、例えば、デジタルスチルカメラ１（撮像部１４）に撮像を行わせるための指示を入力するシャッターボタン、デジタルスチルカメラ１の動作に必要な設定データ等を入力するためのボタン類、あるいは文字データを入力するためのキー等で構成されている。特に、本実施の形態では、操作部１２は、ユーザが、所望のテーマ（シナリオ元データ２２）を選択するときや、記録メディア９に記憶されている素材データ９０から編集前データを特定するための特定情報を入力するとき等に操作される。
【００４２】
マイク１３は、先述のように、音声を電気信号に変換する機能を備えており、マイク１３によって取得された電気信号はＡ／Ｄ変換された後、例えば、後述するＡ／Ｖコーデック１７１に伝達される。
【００４３】
撮像部１４は、レンズ等の光学系と、光学系によって導かれた光を受光して電気信号に変換する複数の光電変換素子（例えばＣＣＤ素子）とを備えている。複数の光電変換素子は、アレイ状に配列されており、それぞれが撮像時に受光した光の光量に応じた電気信号を出力する。撮像部１４は、ユーザが操作部１２（シャッターボタン）を操作することにより撮像を行い、１度の撮像によって複数の光電変換素子から得られたそれぞれの出力信号はＡ／Ｄ変換や色補正等がされた後、１枚の画像を表現したデジタルデータとして、例えば、後述するＪＰＥＧコーデック１７０に伝達される。
【００４４】
デジタルスチルカメラ１は、各種データを出力するための構成として、音声データに基づいて生成される電気信号により音声を再生するスピーカ１５と、画像データに基づいて画像を表示する液晶パネル１６とを備える。
【００４５】
スピーカ１５は、録音データ９２等の音声データに基づいて音声を再生するための装置である。
【００４６】
液晶パネル１６は、ＣＰＵ１０からの制御によって必要なデータを画像として表示する表示装置として構成されている。例えば、液晶パネル１６は記録メディア９内に記憶されている素材データ９０（画像を表現したデータ）や、作成された編集データのうちの映像に関するデータを再生表示するだけでなく、ＣＰＵ１０からの指示に従って所定のメッセージ（文字）等を表示する機能も有している。特に、本実施の形態における液晶パネル１６は、ＣＰＵ１０がＧＵＩデータ２３を実行することにより提供されるＧＵＩ画面を表示する機能を有している。
【００４７】
さらに、デジタルスチルカメラ１は、データ変換部１７、画像処理部１８および通信部１９を備えている。
【００４８】
データ変換部１７は、論理回路（ハードウェア）から主に構成され、ＪＰＥＧコーデック１７０と、Ａ／Ｖコーデック１７１とを備えている。
【００４９】
ＪＰＥＧコーデック１７０は、画像データのデータ形式をＪＰＥＧ形式に変換（エンコード）する機能と、ＪＰＥＧ形式の画像データをデコードして例えば液晶パネル１６に伝達する機能とを有している。したがって、例えば、ＪＰＥＧコーデック１７０は、撮像部１４から伝達される画像データをＪＰＥＧ形式に圧縮された静止画像データに変換して撮像データ９１を生成する。ＪＰＥＧコーデック１７０により生成された撮像データ９１は、記録メディア９に転送され記憶される。
【００５０】
Ａ／Ｖコーデック１７１は、マイク１３によって取得されたデータのデータ形式を例えばＭＰ３形式等にエンコードして録音データ９２を生成し記録メディア９に記録させる。また、逆に録音データ９２をデコードし例えばスピーカ１５に伝達する。また、Ａ／Ｖコーデック１７１は、画像データおよび音声データのデータ形式を、例えばＭＰＥＧ形式等にエンコードして記録データ９４を生成し記録メディア９に伝達する機能と、ＭＰＥＧ形式等の記録データ９４をデコードし例えばスピーカ１５や液晶パネル１６に伝達する。
【００５１】
詳細は図示しないが画像処理部１８は、画像データを解析して被写体の動きや形状等を判定する画像認識回路と、画像の合成や補間、変換等の様々な加工を行う画像加工回路とを備えている。
【００５２】
通信部１９は、デジタルスチルカメラ１において必要となるデータを外部から取得する機能（情報取得手段としての機能）と、デジタルスチルカメラ１で生成されたデータを外部に伝達する機能とを有している。通信部１９は、ネットワークインタフェースやハードウェアインタフェース等の総称であって、通信部１９を介してデジタルスチルカメラ１に接続される構成はネットワーク８や記録メディア９に限定されるものではない。例えば、専用のケーブルで接続されるテレビやオーディオ機器、ＵＳＢ接続される外部のコンピュータや専用のクレードル、ＮＡＮＤフラッシュメモリやＤＲＡＭ等の記録媒体等であってもよい。
【００５３】
図３は、デジタルスチルカメラ１の機能ブロックをデータの流れとともに示す図である。図３に示す要求部１００、シナリオ解析部１０１、画像生成部１０２および音声生成部１０３は、主にＣＰＵ１０が記憶部１１に記憶されているプログラム１１０に従って動作することにより実現される機能ブロックである。
【００５４】
なお、以下の説明では、ユーザによって「テーマ」が既に選択されており、当該選択されたテーマに応じて特定された１つのシナリオ元データ２２がサーバ装置２からダウンロードされているものとする。すなわち、図３は、ユーザが操作部１２を操作することにより、既にシナリオ元データ２２の特定は完了し、特定されたシナリオ元データ２２に関連づけられているＧＵＩデータ２３および素材データ２４も既にダウンロードされ、記録メディア９に記憶されている状態を示している。
【００５５】
要求部１００は、ＧＵＩデータ２３を参照しつつ、そこに記述されている内容に従って、デジタルスチルカメラ１のユーザに対して必要な情報を入力するように促すＧＵＩを提供する。すなわち、要求部１００は、液晶パネル１６にメニュー画面や入力画面等を表示させることにより、シナリオ元データ２２において要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する機能を有している。
【００５６】
シナリオ元データ２２に記述されている編集前データの識別子とは、いわば編集データにおける役名である。そして、各役名にどの俳優（素材データ９０）を具体的に割り当てるかは、ユーザが特定情報を入力することにより決定される。ユーザがＧＵＩデータ２３によって提供されるＧＵＩに従って入力することにより、役名（編集前データの識別子）と俳優名（素材データ９０の識別子）とが関連づけられる。
【００５７】
したがって、ユーザは、液晶パネル１６に表示されるＧＵＩ画面によって要求される情報を、当該ＧＵＩ画面に従って操作部１２を操作して入力するだけで、専門的な知識を有していなくても、編集データを作成するために必要な指示をデジタルスチルカメラ１に与えることが可能である。
【００５８】
また、本実施の形態における要求部１００は、すでに記録メディア９に記憶されている素材データ９０から編集前データとなるデータを選択するように要求するだけではなく、素材収集指示情報をＧＵＩ画面に表示することにより、ユーザに対して、編集前データとなる新たな素材データ９０を取得するように要求する。例えば、既に撮像され撮り溜めされた過去の撮像データ９１を選択させるだけでなく、新たに撮像を行って撮像データ９１を取得するよう要求する。
【００５９】
すなわち、要求部１００は、例えば、撮像指示情報を液晶パネル１６に表示させることにより撮像部１４よる撮像をユーザに対して要求するとともに、その要求に応じて行われる撮像により生成される撮像データ９１を、シナリオ元データ２２において要求される編集前データとして特定するための特定情報を生成する。撮像指示情報は、新たな撮像を行うように指示するメッセージだけでなく、どのような場面、被写体を撮像すればよいか等を指示するメッセージ等を含めることも可能である。
【００６０】
なお、要求部１００は、ＧＵＩ画面に従って、ユーザが撮像（あるいは録音）を行って新たに取得したデータを記録メディア９に記憶させる機能も有している。図３では図示していないが、マイク１３および撮像部１４から要求部１００に入力される新たなデータは、ＪＰＥＧコーデック１７０またはＡ／Ｖコーデック１７１を介して記録メディア９に転送され素材データ９０として記憶される。
【００６１】
ユーザからの指示に従って選択あるいは新たに取得された各素材データ９０は、シナリオ元データ２２において宣言されている各編集前データとしてユーザに指定されたものとみなされ、互いに関連づけが行われて、その情報が要求部１００からシナリオ解析部１０１に伝達される。すなわち、全ての編集前データに関するユーザの指定が完了した段階で、要求部１００は、シナリオ元データ２２で要求される編集前データの識別子と、記録メディア９に記憶されている各素材データ９０の記録メディア９上の識別子（例えば記録メディア９における各素材データ９０のファイル名）とを関連づけた情報（以下、「素材指定情報」と称する）をシナリオ解析部１０１に伝達する。先に示した例で言えば、素材指定情報とは、役名と俳優名とを関連づけたリスト情報となる。
【００６２】
シナリオ解析部１０１は、要求部１００から伝達される素材指定情報とシナリオ元データ２２とに基づいて、記録メディア９に記憶された素材データ９０の中から当該シナリオ元データ２２において要求される編集前データを特定する。また、シナリオ解析部１０１は、編集前データとして特定された素材データ９０の識別子と、編集前データに対して実行すべきデータ処理を示す識別子とを、それぞれに関連づけられている編集前データの識別子を仲立ちにして、互いに関連づけ、シナリオデータを作成する。すなわち、シナリオデータとは、シナリオ元データ２２と、素材指定情報とに基づいてシナリオ解析部１０１によって作成されるデータである。
【００６３】
このようなシナリオデータが作成されることによって、編集データを作成するために必要な全ての素材データ９０が特定され、かつ、各素材データ９０に対するデータ処理が特定される。
【００６４】
さらに、シナリオ解析部１０１は、作成する編集データにおいける映像を構成する素材データ９０の識別子と、当該素材データ９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、画像生成部１０２に映像シナリオデータとして伝達する。一方で、作成する編集データにおいて、音声に係る素材データ９０の識別子と、当該素材データ９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、音声生成部１０３に音声シナリオデータとして伝達する。
【００６５】
画像生成部１０２は、シナリオ解析部１０１から伝達される映像シナリオデータを参照しつつ、そこに記述されている素材データ９０の識別子に基づいて記録メディア９から該当する素材データ９０を読み出す。そして、シナリオ解析部１０１から伝達された映像シナリオデータを参照しつつ、当該素材データ９０に関連づけられたデータ処理の識別子に応じて、当該素材データ９０に対して行うべきデータ処理を画像処理部１８を使用しつつ実行し、編集データ（より詳しくは編集データのうちの映像に係るデータ）を生成する。画像生成部１０２は、生成した映像に係る編集データを液晶パネル１６あるいはＡ／Ｖコーデック１７１に伝達する。
【００６６】
音声生成部１０３は、シナリオ解析部１０１から伝達される音声シナリオデータを参照しつつ、そこに記述されている素材データ９０の識別子に基づいて記録メディア９から該当する素材データ９０を読み出す。そして、シナリオ解析部１０１から伝達された音声シナリオデータを参照しつつ、当該素材データ９０に関連づけられたデータ処理の識別子に応じて、当該素材データ９０に対して行うべきデータ処理を実行し、編集データ（より詳しくは編集データのうちの音声に係るデータ）を生成する。音声生成部１０３は、生成した音声に係る編集データをスピーカ１５あるいはＡ／Ｖコーデック１７１に伝達する。
【００６７】
以上がデジタルスチルカメラ１の構成および機能の説明である。次に、デジタルスチルカメラ１を用いて、編集データを作成する方法について説明する。
【００６８】
図４は、デジタルスチルカメラ１における画像処理方法を示す流れ図である。
【００６９】
なお、図４に示す状態となるまでに、サーバ装置２には、オペレータによって作成されたコンテンツデータ２１が記憶されているものとする。すなわち、画像処理の専門家であるオペレータがシナリオ元データ２２を予め作成する工程は、図４に示す各工程の前に既に完了しているものとする。
【００７０】
まず、ユーザはデジタルスチルカメラ１の操作部１２を操作して、所望する状況に応じてテーマを入力する。例えば、結婚式を撮像した素材データ９０を編集して編集データを作成しようとする場合、ユーザはテーマとして「結婚式」を入力する。より詳細には、ユーザはサーバ装置２のネットワーク８におけるアドレス等も入力する。
【００７１】
これに応じてデジタルスチルカメラ１は通信部１９およびネットワーク８を介してサーバ装置２にアクセスし、入力されたテーマ「結婚式」をサーバ装置２に伝達する。サーバ装置２はデジタルスチルカメラ１から伝達されたテーマ「結婚式」をキーワードとしてデータベース２０を検索し、当該テーマに関連づけられているシナリオ元データ２２を、ＧＵＩデータ２３および素材データ２４とともにデジタルスチルカメラ１に送信する。これによって、コンテンツデータ２１（シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４）がデジタルスチルカメラ１にダウンロードされ（ステップＳ１）、記録メディア９に記憶される。
【００７２】
ダウンロードが完了すると、ユーザは操作部１２を操作して編集作業の開始を指示する（ステップＳ２）。この指示に応じて、デジタルスチルカメラ１の要求部１００が記録メディア９に格納されたＧＵＩデータ２３を参照し、ユーザに必要な入力を促すＧＵＩ画面を液晶パネル１６に表示させる（ステップＳ３）。このとき、要求部１００は、要求される編集前データに関するデータについても表示する。
【００７３】
図５は、ＧＵＩデータ２３に基づいて液晶パネル１６に表示されるＧＵＩ画面を例示する図である。なお、以下では、テーマ「結婚式」についてのシナリオ元データ２２およびＧＵＩデータ２３を例に説明する。
【００７４】
操作画面８０ａは、ＧＵＩデータ２３に基づいて液晶パネル１６に表示されるＧＵＩ画面であって、当該ＧＵＩデータ２３に対応したシナリオ元データ２２において要求される編集前データを特定するためのユーザ支援を行う。なお、以下、ステップＳ３において表示される画面を「操作画面８０」と総称する場合がある。
【００７５】
操作画面８０は、複数の小領域に分割されており、それらの小領域には、ライブビュー表示欄８１、シーン名表示欄８２、撮像条件表示欄８３、アドバイス表示欄８４および操作ボタン表示欄８５が配置される。
【００７６】
ライブビュー表示欄８１は、被写体のライブ映像やデジタルスチルカメラ１の撮像範囲（フレーム）が表示される領域である。したがって、ユーザは、一般的なカメラ撮影と同様に、ライブビュー表示欄８１に表示されている画像を見ながら、アングルや人物の位置等を決定するとともに、シャッターボタンを押す（撮像する）タイミングを決定することができる。
【００７７】
シーン名表示欄８２とは、次に特定すべき編集前データのシーン（場面）を表現した名称を文字表示する領域である。シーン名表示欄８２に表示されている名称を確認することにより、ユーザはどのようなシーンに使用される編集前データが次に要求されているかを知ることができる。例えば、図５に示す操作画面８０ａのシーン名表示欄８２には、「挙式（入場）」と表示されている。したがって、ユーザは、これを確認することによって、シナリオ元データ２２において、次に編集前データとして要求されている素材データ９０は、花嫁が教会に入場してくるところを撮影した画像であることを容易に理解できる。
【００７８】
撮像条件表示欄８３は、次に特定すべき編集前データをどのような撮像条件で撮像すべきかを表示する領域である。ユーザは、撮像条件表示欄８３を確認することにより、どのような撮像条件で撮像された画像が当該シーンにおいて最適であるかを容易に理解することができる。
【００７９】
図５に示すように、撮像条件表示欄８３に「写真」と表示されている場合、撮影される画像が静止画像であることを示している。また、「連写５」と表示されていることにより、撮像が連続的に５回繰り返され、写真５枚分の撮像データ９１が撮像されることがわかる。連続的に撮影された複数の静止画像を画像処理によってつなぎ合わせて作成された映像は、動画像として撮影された映像よりも人物の動きがどことなくぎこちなく表現される。例えば、結婚式における入場場面のように、人物のぎこちない動きを強調した演出をした方が、その人物の緊張感が観る側に伝わり、臨場感のある楽しい映像となる場合がある。
【００８０】
また、「発光無」とは、ストロボ撮影を禁止した状態であることを示している。例え屋内における撮影であっても、ストロボ撮影を行わずに撮影した方が、厳かな雰囲気が漂うよい映像になる場合がある。さらに、「強調有」とは特定の色強調が行われることを示している。例えば、図５に示す例では、バージンロードの「赤」を強調した撮影を行うと鮮明なイメージを残すことができる。
【００８１】
なお、本実施の形態では、その時点における全ての撮像条件を表示するのではなく、ＧＵＩデータ２３（シナリオ元データ２２）において予め定義されている（要求されている）撮像条件のみ選択的に表示する。
【００８２】
撮像条件表示欄８３に表示されている各撮像条件は、このままの状態で撮像が行われた場合、これらの撮像条件に従って撮像部１４による撮像が行われることを意味している。したがって、ユーザは、撮像条件表示欄８３に表示されている各撮像条件となるように、自ら操作部１２を操作して設定する必要はない。
【００８３】
アドバイス表示欄８４は、次に特定すべき編集前データを撮影する場合に考慮すべき事項を表現した文字情報が表示される領域である。撮影にあたって文字によるアドバイスがされることによって、ユーザは、より適切な撮影を容易に行うことができる。
【００８４】
操作ボタン表示欄８５は、ユーザが選択できる操作を実行する操作ボタンを表示する領域である。図５に示す例では、オプション撮影ボタン８６とマニュアル撮影ボタン８７とが表示されている。
【００８５】
図６は、オプション撮影ボタン８６により表示される画面を例示する図である。
【００８６】
本実施の形態では、オプション撮影ボタン８６が操作された場合には、スキップボタン８６０、順序変更ボタン８６１、シーン追加ボタン８６２、割り込み撮影ボタン８６３およびキャンセルボタン８６４が表示される。
【００８７】
スキップボタン８６０は、直前の操作画面８０において要求されている編集前データについて特定せずにスキップする操作を指示するためのボタンである。シナリオ元データ２２に定義されているシーンであっても、実際の行事では行われないシーンもあり得るからである。
【００８８】
順序変更ボタン８６１は、直前の操作画面８０において要求されている編集前データについて、一旦、特定せずに後回しにする操作を指示するためのボタンである。シナリオ元データ２２に定義されている順序とは異なる順序で実際の行事が進行する場合もあり得るからである。
【００８９】
シーン追加ボタン８６２は、シナリオ元データ２２において要求されていないが、ユーザが追加したいと所望するシーンを追加する操作を指示するためのボタンである。結婚式を例に説明すれば、参列者の映像や、オプションで行われる行事等を別途指定して、編集データに追加することができる。なお、シーン追加ボタン８６２が操作されたときに、編集データに追加可能なシーンの例を一覧表示するように予めシナリオ元データ２２（ＧＵＩデータ２３）を作成してもよい。
【００９０】
割り込み撮影ボタン８６３は、編集データとして使用しない撮像データ９１を撮影する操作を指示するためのボタンである。このボタンを操作することにより、デジタルスチルカメラ１は通常の撮影を行う状態に一時的に遷移する。これにより、ユーザは、シナリオ元データ２２に応じた撮影を行っている最中にも、個人的に別途記録しておきたい場面を撮影することが可能となっている。
【００９１】
キャンセルボタン８６４は、オプション撮影を終了させるためのボタンである。
【００９２】
図５に戻って、マニュアル撮影ボタン８７は、撮像条件表示欄８３に表示されている各撮像条件を変更して、ユーザが好みの撮像条件で撮影を行う操作を指示するためのボタンである。詳細は説明しないが、ある程度撮影について知識のあるユーザは、シナリオ元データ２２に定義されている撮像条件よりもさらに好みの条件でデジタルスチルカメラ１に撮像を行わせることができる。
【００９３】
なお、後述するように、操作ボタン表示欄８５に表示される操作ボタンの数や種類は、ステップＳ３において表示される操作画面８０に応じて変化する。言い換えれば、特定しようとする編集前データのシチュエーション（シーン）に応じて変化する。
【００９４】
ステップＳ３を実行すると、デジタルスチルカメラ１は、ユーザの操作に基づいて、記録メディア９に既に保存してあるデータから編集前データを特定するか否かを判定する（ステップＳ４）。
【００９５】
既に記録メディア９に保存してある素材データ９０を指定する場合、ユーザは、シャッターボタンを操作する代わりに操作部１２を操作して記録メディア９に記憶されている素材データ９０を一覧表示させる。これにより、要求部１００は、ステップＳ４においてＹｅｓと判定し、ＧＵＩ画面として選択画面（図示せず）を液晶パネル１６に表示する（ステップＳ５）。
【００９６】
ユーザは、表示された選択画面に一覧表示される素材データ９０（その時点で記録メディア９に記憶されている素材データ９０）から適当なデータを特定するための特定情報を入力することにより、編集前データとしての素材データ９０を選択する（ステップＳ６）。これにより、素材データ９０の中からシナリオ元データ２２において要求される編集前データが１つ特定され、素材指定情報の１レコードが作成される。
【００９７】
一方、ユーザは、新たに素材データ９０を取得しようと所望する場合は、液晶パネル１６に表示されている操作画面８０に従って操作部１２（シャッターボタン）を操作する。これにより要求部１００はステップＳ４においてＮｏと判定し、素材データ９０の取得（撮像・録音）が行われる（ステップＳ７）。このようにして取得された素材データ９０は、要求部１００によって、シナリオ元データ２２において要求される編集前データの１つとして特定され、素材指定情報の１レコードが作成される。
【００９８】
次に、要求部１００は、ＧＵＩデータ２３を参照することにより、全ての編集前データが特定（関連づけ）されたか否かを判定する（ステップＳ８）。要求部１００は、シナリオ元データ２２において要求されている編集前データ（ＧＵＩデータ２３にも記述されている）のうち、未だ特定されていない編集前データが存在する場合はステップＳ８においてＮｏと判定し、ステップＳ３からの処理を繰り返す。
【００９９】
図７ないし図１１は、シーンに応じて表示される操作画面８０の例を示す図である。
【０１００】
図７に示す操作画面８０ｂは、牧師様のお説教のシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。操作画面８０ｂの撮像条件表示欄８３には、お説教を録音することを意味する「録音有」という文字が表示されている。また、お説教のシーンでも、バージンロードの「赤」が強調された撮影が行われるように設定されている。さらに、アドバイス表示欄８４には、録音に関する注意も表示されている。
【０１０１】
図８に示す操作画面８０ｃは、指輪交換のシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。操作画面８０ｃの撮像条件表示欄８３には、「撮影枠有」と表示されており、ライブビュー表示欄８１には矩形の撮影枠が表示されている。これにより、ユーザは、指輪が画面のどの辺りに写るように撮影すれば指輪交換のシーンにおいてバランスのよい映像となるかが容易に理解できる。また、アドバイス表示欄８４にはズーム撮影を促すメッセージが表示されるとともに、操作ボタン表示欄８５にはズーム撮影を指示するためのズーム撮影ボタン８８が表示されている。もちろんマニュアル撮影ボタン８７を操作してズーム撮影を行うことも可能であるが、特におすすめの操作に対する専用のボタンを表示することで、ユーザの負担が軽減される。
【０１０２】
図９に示す操作画面８０ｄは、フラワーシャワーのシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。操作画面８０ｄの撮像条件表示欄８３には、周囲の参列者のお祝いの声等を録音するために「録音有」と表示されている。また、自然光における逆光状態を想定して露出補正がかけられることも表示されている。さらに、入場の時と異なり、「動画」と表示されているように、フラワーシャワーのシーンでは動画像で撮影して人物の動作をスムーズに見せることにより、晴れ晴れとした雰囲気を強調できる。
【０１０３】
図１０に示す操作画面８０ｅは、披露宴における乾杯のシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。乾杯のシーンにおいてもバランスのよい画像を撮影するために、ライブビュー表示欄８１に撮影枠が表示されている。また、操作ボタン表示欄８５には確認／撮り直しボタン８９が表示されている。ユーザは確認／撮り直しボタン８９を操作することにより、取得した撮像データ９１を確認し、必要な場合は撮り直しを行うためのボタンである。
【０１０４】
図１１に示す操作画面８０ｆは、披露宴におけるキャンドルサービスのシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。
【０１０５】
このようにしてステップＳ６またはＳ７の処理が繰り返されて、シナリオ元データ２２に定義されている全ての編集前データが特定されると、要求部１００はステップＳ８においてＹｅｓと判定する。そして、シナリオ解析部１０１がシナリオ元データ２２を参照しつつ、編集前データとして特定された各素材データ９０と、各素材データ９０に対して実行すべきデータ処理との関連づけを行い（ステップＳ９）、シナリオデータ９３を生成する。
【０１０６】
図１２は、シナリオデータ９３によって各シーンに編集前データとして撮像データ９１が関連づけられている様子を概念的に示す図である。図１２に示すように、時間順次に実際に行われたシーンに対して、それぞれ素材データ９０（撮像データ９１ａ，９１ｂ，９１ｃ，９１ｄ，９１ｅ，９１ｆ，９１ｇ，９１ｈ）が関連づけられている。
【０１０７】
例えば、撮像データ９１ａは、図５に示す操作画面８０ａに従って撮像され、「入場」シーンにおいて要求される編集前データとして特定された素材データ９０である。図１２に示すように、撮像データ９１ａは、５回の連続撮影により取得された複数の撮像データ９１から構成されている。そして、図示を省略しているが、撮像データ９１ａを一連のシーンであるとして、５枚の撮像データ９１をつなぎ合わせるデータ処理がシナリオデータ９３において関連づけられる。
【０１０８】
素材データ９０とデータ処理との関連づけが完了すると、シナリオ解析部１０１が、シナリオデータ９３を映像シナリオデータまたは音声シナリオデータに分類しつつ、画像生成部１０２および音声生成部１０３にそれぞれ伝達する。これにより、画像生成部１０２および音声生成部１０３が、素材データ９０にデータ処理を実行して編集データを生成する（ステップＳ１０）。さらに、生成された編集データは、スピーカ１５および液晶パネル１６に伝達され、音声が再生されるとともに、映像が再生される（ステップＳ１１）。
【０１０９】
これにより、未圧縮のストリーム情報がリアルタイムに演算され、音声および映像が再生される。なお、生成された編集データは、Ａ／Ｖコーデック１７１に伝達され、ＭＰＥＧ形式の記録データ９４として記録メディア９に保存される。
【０１１０】
以上のように、本実施の形態におけるデジタルスチルカメラ１は、編集データを作成する画像処理装置として構成されており、ＧＵＩデータ２３（操作案内データ）に基づいて、当該ＧＵＩデータ２３に対応したシナリオ元データ２２に定義されるシーンのユーザによる撮影を支援する操作画面８０を表示することにより、ユーザは、操作画面８０に従ってシーン撮像指示を与えるだけで、シナリオ元データ２２において要求されているシーンに応じた素材データ９０を、容易に、かつ、適切に生成することができる。
【０１１１】
なお、上記実施の形態では、コンテンツデータ２１を外部のサーバ装置２からダウンロードする例で説明した。このように構成することによって、デジタルスチルカメラ１のユーザは、コンテンツプロバイダから提供される最新のコンテンツデータ２１によって編集データを作成して楽しむことができる。しかし、コンテンツデータ２１に相当する汎用のデータを予めプログラム１１０に含めておけば、デジタルスチルカメラ１のユーザは、ダウンロード操作をすることなく、編集データを作成して楽しむことが可能である。
【０１１２】
また、撮像条件は、上記実施の形態に示したものに限定されるわけではなく、撮像データ９１を撮像する際の明るさに関する設定や、シャッタースピードに関する設定、あるいは、撮像データ９１における色をセピアやモノトーン等に変換する色変換の要否等であってもよい。
【０１１３】
＜２． 第２の実施の形態＞
第１の実施の形態では画像処理装置としてデジタルスチルカメラ１を例に説明したが、本発明における画像処理装置は撮像機能を備えた携帯電話であってもよい。
【０１１４】
図１３は、第２の実施の形態における画像処理装置として構成される携帯電話１ａを示す図である。なお、第２の実施の形態では、テーマとして「ゴルフコンペ」が選択された例によって説明する。
【０１１５】
詳細は図示しないが、携帯電話１ａは、ユーザによって操作される操作部１２ａおよび画像を表示する液晶パネル１６ａを備えていることを除いて、第１の実施の形態におけるデジタルスチルカメラ１と同様の構成を備えている。すなわち、携帯電話１ａも一般的なコンピュータとしての構成および機能を備えているとともに、撮像部１４に相当する構成も備えている。
【０１１６】
液晶パネル１６ａは、第１の実施の形態における操作画面８０に相当する操作画面８０ｇを表示する。第２の実施の形態における操作画面８０ｇには、ライブビュー表示欄８１ａ、シーン名表示欄８２ａおよび合成画像表示欄７０が設けられている。
【０１１７】
ライブビュー表示欄８１ａは、第１の実施の形態におけるライブビュー表示欄８１に相当する領域である。したがって、第２の実施の形態においても、ユーザは、どのような撮像データ９１が取得されるかライブビュー表示欄８１ａに表示される映像によって確認しつつシーン撮影指示を与えることができる。
【０１１８】
シーン名表示欄８２ａは、第１の実施の形態におけるシーン名表示欄８２に相当する領域である。第２の実施の形態では、ゴルフコンペの開始前にユーザによって予め入力された文字情報の一部がシーン名として使用されている。このように、ユーザによって指定される情報がシーン名に使用されてもよい。
【０１１９】
合成画像表示欄７０には、当該シーンにおいて取得される撮像データ９１に合成することが可能なフレーム画像が表示されている。図１３に示す例では、表示された３つのフレーム画像のうち最も左に表示されている画像（太枠で囲まれた画像）が選択されており、ライブビュー表示欄８１ａのライブ映像に当該フレーム画像が合成されている。
【０１２０】
このようなフレーム画像は、例えば、コンテンツデータ２１に含まれる素材データ２４によって得ることができる。第１の実施の形態では、シナリオ元データ２２と、当該シナリオ元データ２２で必要となる素材データ２４との関連づけが当該シナリオ元データ２２において既にされていると説明した。しかし、第２の実施の形態のような操作画面８０ｇを表示することにより、コンテンツプロバイダから提供される素材データ２４についても、いくつかの候補の中からユーザが選択できるように構成することができる。
【０１２１】
以上のように、第２の実施の形態における携帯電話１ａにおいても、第１の実施の形態と同様の効果を得ることができる。
【０１２２】
＜３． 第３の実施の形態＞
上記実施の形態では、画像処理装置として構成されるデジタルスチルカメラ１および携帯電話１ａにおいてシナリオデータ９３が作成され、当該装置において編集データが作成される例について説明した。しかし、本発明に係る画像処理装置は、シナリオデータ９３の作成処理が行われるものに限定されるわけではない。
【０１２３】
すなわち、第３の実施の形態における画像処理装置では、予めＧＵＩデータ２３のみをダウンロードしておき、要求部１００が当該ＧＵＩデータ２３を解析しつつ、当該ＧＵＩデータ２３に定義されているシーンに応じた操作画面８０を表示させる。そして、当該操作画面８０に従ってユーザにより入力されるシーン撮像指示を受け付けることによって、撮像部１４が当該シーン撮像指示に従って撮像を行って、撮像データ９１を記録メディア９に記憶させる。
【０１２４】
本実施の形態における画像処理装置はシナリオデータ９３を作成することはなく、編集データを作成することもないが、少なくともＧＵＩデータ２３に対応付けられているテーマに応じて適切な撮影が行えるように、ユーザを支援することができる。
【０１２５】
また、ＧＵＩデータ２３（操作画面８０）に促された撮像において取得された撮像データ９１には、当該ＧＵＩデータ２３に定義されているシーンを示す識別子（シーン識別子）を付加する（関連づける）ように構成してもよい。
【０１２６】
これにより、本実施の形態における画像処理装置のように、シナリオデータ９３を作成する機能がなく、編集データを作成することができない装置によって撮像された撮像データ９１であっても、シナリオ解析部１０１に相当する構成を有する装置（例えば、第１の実施の形態におけるデジタルスチルカメラ１や、第２の実施の形態における携帯電話１ａ）に、当該撮像データ９１が転送された場合には、シーン識別子を参照することによって編集データに相当するデータを作成することも可能となる。このとき、撮像データ９１がＪＰＥＧ形式のデータである場合には、ＪＰＥＧフォーマットに定義されているヘッダ部にこのようなシーン識別子を格納することができる。
【０１２７】
＜４． 変形例＞
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
【０１２８】
例えば、上記実施の形態における機能ブロックはプログラム１１０（ソフトウェア）によって実現される例で説明したが、これらの機能ブロックは専用の論理回路（ハードウェア）として実現されてもよい。一方、上記実施の形態において論理回路により構成されると説明したデータ変換部１７の各構成の一部または全部をソフトウェアによって実現するように構成してもよい。
【０１２９】
また、デジタルスチルカメラ１がネットワーク８に接続されているサーバ装置２との間でデータ通信を行う構成としては無線通信に限定されるものではない。例えば、必要に応じて専用ケーブル（ＵＳＢやＳＣＳＩあるいは専用クレードル等）でコンピュータに接続し、当該コンピュータがネットワーク８に接続する構成としてもよい。このような構成の場合、サーバ装置２が提供するコンテンツデータ２１は、一旦、当該コンピュータにネットワーク８を介してダウンロードされ、その後、デジタルスチルカメラ１に専用ケーブルを介して転送される。
【０１３０】
また、デジタルスチルカメラ１や携帯電話１ａで使用されるコンテンツデータ２１はサーバ装置２によってネットワーク８を介して提供されると説明したが、例えば、記録メディア９によって提供されてもよい。すなわち、コンテンツデータ２１を記憶した記録メディア９が店頭等において配布され、これをデジタルスチルカメラ１や携帯電話１ａに装着して利用してもよい。
【０１３１】
また、要求部１００がＧＵＩデータ２３を実行することにより提供されるのは、液晶パネル１６に出力される。しかし、例えば、スピーカ１５に音声ガイダンスを再生させるように構成してもよい。すなわち、ＧＵＩに限らず、ＵＩを提供するデータを作成してもよい。
【０１３２】
また、上記実施の形態では、デジタルスチルカメラ１や携帯電話１ａにおいて取得され、素材データ９０として指定される音声データとして録音データ９２についてのみ説明した。しかし、指定の対象となる音声データは必ずしもデジタルスチルカメラ１や携帯電話１ａにおいて録音されたデータに限られるものではなく、例えば、他のサイト等から別途ダウンロードされた音楽ファイルであってもよい。すなわち、ユーザは、予め好みの曲を別途ダウンロードして記録メディア９に格納しておくことにより、編集データに使用するＢＧＭとして録音データ９２以外の音声データを指定することができる。この場合、ユーザはデジタルスチルカメラ１や携帯電話１ａのマイクを使ってわざわざ好みの曲を録音する必要がない。
【０１３３】
また、テーマとしては、「熱海旅行」といったものも指定可能である。このようなテーマが選択された場合に特定されるＧＵＩデータ２３には、各シーンとして熱海の撮影スポット（名所）が定義される。したがって、ＧＵＩデータ２３による操作画面８０にこれらの名所が順次（例えば熱海駅を起点として）表示されることにより、操作画面８０は熱海の名所の巡回ルート案内としての効果も発揮する。
【図面の簡単な説明】
【０１３４】
【図１】本発明に係る画像処理装置として構成されるデジタルスチルカメラを含む情報処理システムを示す図である。
【図２】デジタルスチルカメラの構成を示すブロック図である。
【図３】デジタルスチルカメラの機能ブロックをデータの流れとともに示す図である。
【図４】デジタルスチルカメラにおける画像処理方法を示す流れ図である。
【図５】ＧＵＩデータに基づいて液晶パネルに表示されるＧＵＩ画面を例示する図である。
【図６】オプション撮影ボタンにより表示される画面を例示する図である。
【図７】シーンに応じて表示される操作画面を示す図である。
【図８】シーンに応じて表示される操作画面を示す図である。
【図９】シーンに応じて表示される操作画面を示す図である。
【図１０】シーンに応じて表示される操作画面を示す図である。
【図１１】シーンに応じて表示される操作画面を示す図である。
【図１２】シナリオデータによって各シーンに編集前データとして撮像データが関連づけられている様子を概念的に示す図である。
【図１３】第２の実施の形態における画像処理装置として構成される携帯電話を示す図である。
【符号の説明】
【０１３５】
１ デジタルスチルカメラ
１ａ 携帯電話
１０ ＣＰＵ
１００ 要求部
１０１ シナリオ解析部
１０２ 画像生成部
１０３ 音声生成部
１１ 記憶部
１１０ プログラム
１２，１２ａ 操作部
１３ マイク
１４ 撮像部
１５ スピーカ
１６，１６ａ 液晶パネル
１７ データ変換部
１８ 画像処理部
１９ 通信部
２０ データベース
２１ コンテンツデータ
２２ シナリオ元データ
２３ ＧＵＩデータ（操作案内データ）
２４ 素材データ
８ ネットワーク
８０，８０ａ，８０ｂ，８０ｃ，８０ｄ，８０ｅ，８０ｆ，８０ｇ 操作画面
９ 記録メディア
９０ 素材データ
９１，９１ａ，９１ｂ，９１ｃ，９１ｄ，９１ｅ，９１ｆ，９１ｇ，９１ｈ 撮像データ
９２ 録音データ
９３ シナリオデータ
９４ 記録データ
【技術分野】
【０００１】
本発明は、ユーザによって取得された画像データを含む素材データを加工して、品質の高い編集データを生成する技術に関する。
【背景技術】
【０００２】
昨今、カメラ付きの携帯電話やデジタルスチルカメラが広く普及し、一般的なユーザが手軽にデジタル画像データを楽しむようになってきた。そして、これらの画像データを単にディスプレイに表示させて楽しむだけでなく、音声データや文字データと合成してナレーションを入れたり、様々な特殊効果を施した画像データとして表示させるなど、楽しみ方も多様化してきた。
【０００３】
従来より、デジタルスチルカメラで撮像した複数の静止画像データを、撮影順に一定時間間隔で表示してスライドショーのような画像を表示させるための編集データを作成する技術が知られている。
【０００４】
【特許文献１】特開２００７−３０６４２６号公報
【特許文献２】特開２００８−０４２２５６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところが、スライドショーは単純であり一般ユーザにとっても比較的容易に作成できるものの、品質の高い凝った表現方法とは言えない。一方、画像に関する特殊な表現方法や加工技法等について専門的な知識を有していないと、凝った演出（修飾）を用いた品質の高い編集データを作成することは、困難であるという問題があった。すなわち、専門的知識がないと、素材となる画像データにそもそもどのようなデータ処理を施してよいか指示することができないからである。
【０００６】
本発明は、上記課題に鑑みてなされたものであり、画像処理に関する専門的な知識を有しない一般ユーザであっても、品質の高い編集データを生成して楽しむことができるようにすることを目的とする。
【課題を解決するための手段】
【０００７】
上記の課題を解決するため、請求項１の発明は、被写体を撮像して撮像データを生成する撮像手段と、操作案内データを記憶する記憶手段と、前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段とを備えることを特徴とする。
【０００８】
また、請求項２の発明は、請求項１の発明に係る画像処理装置であって、前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段とをさらに備えることを特徴とする。
【０００９】
また、請求項３の発明は、請求項１または２の発明に係る画像処理装置であって、前記操作案内データは、前記撮像手段に対する撮像条件を含み、前記撮像手段は、前記シーン撮像指示に従って撮像を行うときにおいて、前記撮像条件に従って撮像を行うことを特徴とする。
【００１０】
また、請求項４の発明は、請求項３の発明に係る画像処理装置であって、前記撮像条件には、少なくとも明るさ設定、シャッタースピード、フラッシュ発光の要否、露出補正の要否、特定色強調の要否、色変換の要否、連続撮影回数、静止画像か動画撮像かの区別のうちのいずれか１つを含むことを特徴とする。
【００１１】
また、請求項５の発明は、請求項３または４の発明に係る画像処理装置であって、前記操作画面に前記撮像条件の少なくとも１つが表示されることを特徴とする。
【００１２】
また、請求項６の発明は、請求項１ないし５のいずれかの発明に係る画像処理装置であって、前記撮像手段は、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて生成する撮像データに、前記シーンに関する情報を関連づけることを特徴とする。
【００１３】
また、請求項７の発明は、シナリオデータに基づいて素材データにデータ処理を施して編集データを生成する画像処理方法であって、(a)シナリオ元データに対応した操作案内データを記憶する工程と、(b)記憶された操作案内データに基づいて、前記操作案内データに対応したシナリオ元データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する工程と、(c)前記(b)工程により表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて撮像し撮像データを生成する工程と、(d)前記(c)工程において生成された撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成する工程とを有することを特徴とする。
【００１４】
また、請求項８の発明は、コンピュータによる実行が可能なプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、被写体を撮像して撮像データを生成する撮像手段と、操作案内データを記憶する記憶手段と、前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段とを備える画像処理装置として機能させることを特徴とする。
【００１５】
また、請求項９の発明は、請求項８の発明に係るプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段とをさらに備える画像処理装置として機能させることを特徴とする。
【発明の効果】
【００１６】
請求項１ないし９に記載の発明は、操作案内データに基づいて、当該操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示することにより、ユーザは、操作画面に従ってシーン撮像指示を与えるだけで、容易に状況に応じた適切な撮像を行うことができる。
【００１７】
請求項３に記載の発明は、操作案内データは撮像手段に対する撮像条件を含み、撮像手段はシーン撮像指示に従って撮像を行うときにおいて、当該撮像条件に従って撮像を行うことにより、ユーザが適切な撮像条件を自ら設定する必要がない。したがって、ユーザの負担を増大させることなく、高品質の撮像データを取得できる。
【００１８】
請求項５に記載の発明は、操作画面に撮像条件の少なくとも１つが表示されることにより、ユーザにどのような撮像が行われるかを案内することができる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明の好適な実施の形態について、添付の図面を参照しつつ、詳細に説明する。
【００２０】
＜１． 第１の実施の形態＞
図１は、本発明に係る画像処理装置として構成されるデジタルスチルカメラ１を含む情報処理システムを示す図である。情報処理システムは、一般ユーザが所持するデジタルスチルカメラ１と、例えばコンテンツプロバイダ等に設置されるサーバ装置２とが互いにネットワーク８を介して接続される構成となっている。
【００２１】
なお、ネットワーク８としては、インターネットや公衆網等が該当する。また、デジタルスチルカメラ１およびサーバ装置２の台数は１台に限定されるものではなく、例えば複数のデジタルスチルカメラ１や複数のサーバ装置２がネットワーク８に接続されていてもよい。
【００２２】
サーバ装置２は、データベース２０を備えた一般的なコンピュータとして構成されており、先述のようにネットワーク８に接続されている。サーバ装置２のデータベース２０には、シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４（以下、これらを「コンテンツデータ２１」と総称する場合がある。）が予め保存されている。なお、コンテンツデータ２１は、シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４を全て含んでいる必要はなく、それらのうちのいずれかであってもよい。
【００２３】
コンテンツデータ２１は、画像処理に関する専門知識を有するオペレータ（イラストレータやカメラマン、プログラマ等）によって予め作成されたデータである。したがって、コンテンツデータ２１は、一般ユーザによって作成されるデータに比べて品質の高いデータとして提供される。コンテンツデータ２１のうちのシナリオ元データ２２およびＧＵＩデータ２３は、デジタルスチルカメラ１において実行されるデータであって、例えば、スクリプト言語等で記述されるテキストデータである。
【００２４】
シナリオ元データ２２は、結婚式やゴルフコンペ、運動会、卒業式といった様々なテーマごとにそれぞれ制作されており、対応するテーマと関連づけられて保存されている。したがって、ユーザは具体的なテーマを選択するだけで、個々のシナリオ元データ２２の内容を詳細に理解していなくても、所望の編集データを作成するためのシナリオ元データ２２を提供されている複数のシナリオ元データ２２の中から容易に指定することが可能である。
【００２５】
なお、上記テーマとは、ユーザの生活環境において起こりうる出来事や行事であって、ユーザがそこに含まれる数々のシーンを撮影しようと望むものである。シナリオ元データ２２と関連づけられるテーマは、上記に挙げたものに限定されるものではないが、ユーザが状況に応じて容易に思いつき、かつ、内容を容易に想像できるものが好ましい。また、編集データとは、ユーザが作成しようとする目的のデータであって、本実施の形態では画像（静止画像または動画像）や音声を表現した未圧縮のストリーム情報である。
【００２６】
また、各テーマにはＧＵＩデータ２３も関連づけられている。すなわち、テーマを介してシナリオ元データ２２とＧＵＩデータ２３とが対応付けられている。ただし、各テーマに対応づけられるＧＵＩデータ２３は、同一のテーマに関連づけられているシナリオ元データ２２にとって専用のＧＵＩデータ２３であってもよいし、複数のテーマ（シナリオ元データ２２）において共通に使用される汎用性の高いＧＵＩデータ２３であってもよい。このようにシナリオ元データ２２とＧＵＩデータ２３とが互いに関連づけられていることにより、ユーザはテーマを選択するだけで、シナリオ元データ２２を指定できるとともに、当該シナリオ元データ２２に必要なＧＵＩデータ２３も特定される。
【００２７】
シナリオ元データ２２には、目的の編集データに必要な編集前データ（画像データや音声データ、フォントデータ等）の識別子が記述されるとともに、各編集前データに対して実行すべきデータ処理が各編集前データごとに記述される。すなわち、シナリオ元データ２２には、編集前データの識別子とデータ処理とが互いに関連づけられて記述される。
【００２８】
シナリオ元データ２２に記述されるデータ処理として、例えば、画像を表現した編集前データについて、どのような画像効果（Effect）を施すか、どのような画像合成（Synthesis）を行うか、あるいはどのように画像移行（Transition）させるか等が想定され、対応する編集前データに応じて画像処理の専門家であるオペレータによって選択され記述される。また、音声を表現した編集前データについても、再生のタイミングや音量等に関する設定情報（データ処理）が記述される。
【００２９】
なお、シナリオ元データ２２に識別子が記述される編集前データのうち、オペレータが制作したデータ（サーバ装置２に存在する素材データ２４）については、当該シナリオ元データ２２において当該素材データ２４との関連づけが既にされている。したがって、シナリオ元データ２２が特定されると、特定されたシナリオ元データ２２において使用される素材データ２４も編集前データとして特定される。
【００３０】
このように、コンテンツプロバイダは、ユーザがテーマを選択するだけで、サーバ装置２上の必要なシナリオ元データ２２、ＧＵＩデータ２３および素材データ２４が容易に特定されるように、それぞれの関連づけを行って提供する。
【００３１】
ＧＵＩデータ２３は、対応するシナリオ元データ２２（テーマ）に応じて、適切なＧＵＩをデジタルスチルカメラ１のユーザに提供するものであり、詳細は後述するが、本発明における操作案内データに相当する。すなわち、ＧＵＩデータ２３を実行することにより、デジタルスチルカメラ１は、シナリオ元データ２２において要求される編集前データを素材データ９０（図２）の中から特定するための特定情報を入力するようにユーザに対して要求し、デジタルスチルカメラ１におけるユーザ操作を支援する。例えば、対応するシナリオ元データ２２で要求されている編集前データのうち、ユーザが指定（選択）しなければならないデータについては、その入力を促したり、当該編集前データとして適切な素材データ９０をユーザが容易に指定できるように、当該編集前データに関する情報を表示したりする。
【００３２】
素材データ２４は、デジタルスチルカメラ１において加工される素材となるデータであって、画像データや音声データ、フォントデータ等である。素材データ２４に含まれる画像データとしては、例えば、アニメキャラクタや映画の名場面、名所を撮影した風景画像、イラスト画像等であり、静止画像に限らず動画像であってもよい。また、音声データとしては、例えば、声優や俳優の声、ＢＧＭ、動物の鳴き声、楽器の音、効果音等であり、現実に録音されたデータであってもよいし、機械的に合成された音を出力するためのデータであってもよい。素材データ２４は、各シナリオ元データ２２に最適なデータとして、専門家のオペレータによって制作され収集されたデータである。
【００３３】
先述のように、デジタルスチルカメラ１とサーバ装置２とは互いにデータ通信によるデータの送受信が可能であり、デジタルスチルカメラ１は必要に応じてサーバ装置２において提供されるコンテンツデータ２１をダウンロードすることが可能である。
【００３４】
図１に示すように、本実施の形態におけるデジタルスチルカメラ１は、携帯型の装置として構成されており、無線通信機能によって必要に応じてネットワーク８に接続することが可能とされている。このような無線通信機能を実現する構成としては、例えば、ＷｉＦｉ（Wireless Fidelity）や赤外線通信といった通信規格を採用することが可能である。
【００３５】
また、デジタルスチルカメラ１は、図１に示すように可搬性の記録メディア９を着脱可能に設計されており、当該記録メディア９に記憶されているデータを読み出して利用したり、デジタルスチルカメラ１において生成したデータ（あるいはダウンロードしたデータ）を当該記録メディア９に記憶させたりすることが可能である。本実施の形態では記録メディア９としてＳＤカードを採用するが、記録メディア９はこれに限定されるものではなく、例えばＰＣカードやメモリスティック等であってもよい。
【００３６】
図２は、デジタルスチルカメラ１の構成を示すブロック図である。図２に示すように、サーバ装置２からダウンロードされたシナリオ元データ２２、ＧＵＩデータ２３および素材データ２４は、記録メディア９に格納される。
【００３７】
なお、撮像データ９１および録音データ９２は、デジタルスチルカメラ１においてユーザにより撮像または録音され生成されるユーザ由来（サーバ装置２から提供されるデータではないという意味）のデータである。したがって、記録メディア９に記憶される素材データ９０は、オペレータによって制作される素材データ２４の他に、撮像データ９１および録音データ９２を含んでいる。先述のように、素材データ２４はシナリオ元データ２２によって特定されダウンロードされたデータであるから、シナリオ元データ２２において要求されている編集前データである。しかし、撮像データ９１および録音データ９２はシナリオ元データ２２とは無関係に取得されたデータを含んでいる。すなわち、本実施の形態においては、素材データ９０は編集前データ以外のデータを含んでいる。
【００３８】
デジタルスチルカメラ１は、各種データに関する演算処理を行うＣＰＵ１０と、各種データを必要に応じて適宜記憶する記憶部１１とを備えており、一般的なコンピュータとしても構成されている。
【００３９】
ＣＰＵ１０は、記憶部１１のＲＡＭを一時的なワーキングエリアとして使用しつつ、記憶部１１のＲＯＭに格納されているプログラム１１０に従って動作することにより、デジタルスチルカメラ１の各構成を制御する。なお、ＣＰＵ１０は、サーバ装置２からダウンロードされて記録メディア９に格納されているシナリオ元データ２２およびＧＵＩデータ２３を実行する機能も有しているが詳細は後述する。
【００４０】
デジタルスチルカメラ１は、各種データを取り込むための構成として、ユーザによって操作される操作部１２と、周囲の音声を電気信号に変換することにより録音を行うマイク１３と、入射する光を電気信号に変換することにより撮像を行う撮像部１４とを備えている。
【００４１】
操作部１２は、ユーザがデジタルスチルカメラ１に対して指示を入力するために使用される。操作部１２は、例えば、デジタルスチルカメラ１（撮像部１４）に撮像を行わせるための指示を入力するシャッターボタン、デジタルスチルカメラ１の動作に必要な設定データ等を入力するためのボタン類、あるいは文字データを入力するためのキー等で構成されている。特に、本実施の形態では、操作部１２は、ユーザが、所望のテーマ（シナリオ元データ２２）を選択するときや、記録メディア９に記憶されている素材データ９０から編集前データを特定するための特定情報を入力するとき等に操作される。
【００４２】
マイク１３は、先述のように、音声を電気信号に変換する機能を備えており、マイク１３によって取得された電気信号はＡ／Ｄ変換された後、例えば、後述するＡ／Ｖコーデック１７１に伝達される。
【００４３】
撮像部１４は、レンズ等の光学系と、光学系によって導かれた光を受光して電気信号に変換する複数の光電変換素子（例えばＣＣＤ素子）とを備えている。複数の光電変換素子は、アレイ状に配列されており、それぞれが撮像時に受光した光の光量に応じた電気信号を出力する。撮像部１４は、ユーザが操作部１２（シャッターボタン）を操作することにより撮像を行い、１度の撮像によって複数の光電変換素子から得られたそれぞれの出力信号はＡ／Ｄ変換や色補正等がされた後、１枚の画像を表現したデジタルデータとして、例えば、後述するＪＰＥＧコーデック１７０に伝達される。
【００４４】
デジタルスチルカメラ１は、各種データを出力するための構成として、音声データに基づいて生成される電気信号により音声を再生するスピーカ１５と、画像データに基づいて画像を表示する液晶パネル１６とを備える。
【００４５】
スピーカ１５は、録音データ９２等の音声データに基づいて音声を再生するための装置である。
【００４６】
液晶パネル１６は、ＣＰＵ１０からの制御によって必要なデータを画像として表示する表示装置として構成されている。例えば、液晶パネル１６は記録メディア９内に記憶されている素材データ９０（画像を表現したデータ）や、作成された編集データのうちの映像に関するデータを再生表示するだけでなく、ＣＰＵ１０からの指示に従って所定のメッセージ（文字）等を表示する機能も有している。特に、本実施の形態における液晶パネル１６は、ＣＰＵ１０がＧＵＩデータ２３を実行することにより提供されるＧＵＩ画面を表示する機能を有している。
【００４７】
さらに、デジタルスチルカメラ１は、データ変換部１７、画像処理部１８および通信部１９を備えている。
【００４８】
データ変換部１７は、論理回路（ハードウェア）から主に構成され、ＪＰＥＧコーデック１７０と、Ａ／Ｖコーデック１７１とを備えている。
【００４９】
ＪＰＥＧコーデック１７０は、画像データのデータ形式をＪＰＥＧ形式に変換（エンコード）する機能と、ＪＰＥＧ形式の画像データをデコードして例えば液晶パネル１６に伝達する機能とを有している。したがって、例えば、ＪＰＥＧコーデック１７０は、撮像部１４から伝達される画像データをＪＰＥＧ形式に圧縮された静止画像データに変換して撮像データ９１を生成する。ＪＰＥＧコーデック１７０により生成された撮像データ９１は、記録メディア９に転送され記憶される。
【００５０】
Ａ／Ｖコーデック１７１は、マイク１３によって取得されたデータのデータ形式を例えばＭＰ３形式等にエンコードして録音データ９２を生成し記録メディア９に記録させる。また、逆に録音データ９２をデコードし例えばスピーカ１５に伝達する。また、Ａ／Ｖコーデック１７１は、画像データおよび音声データのデータ形式を、例えばＭＰＥＧ形式等にエンコードして記録データ９４を生成し記録メディア９に伝達する機能と、ＭＰＥＧ形式等の記録データ９４をデコードし例えばスピーカ１５や液晶パネル１６に伝達する。
【００５１】
詳細は図示しないが画像処理部１８は、画像データを解析して被写体の動きや形状等を判定する画像認識回路と、画像の合成や補間、変換等の様々な加工を行う画像加工回路とを備えている。
【００５２】
通信部１９は、デジタルスチルカメラ１において必要となるデータを外部から取得する機能（情報取得手段としての機能）と、デジタルスチルカメラ１で生成されたデータを外部に伝達する機能とを有している。通信部１９は、ネットワークインタフェースやハードウェアインタフェース等の総称であって、通信部１９を介してデジタルスチルカメラ１に接続される構成はネットワーク８や記録メディア９に限定されるものではない。例えば、専用のケーブルで接続されるテレビやオーディオ機器、ＵＳＢ接続される外部のコンピュータや専用のクレードル、ＮＡＮＤフラッシュメモリやＤＲＡＭ等の記録媒体等であってもよい。
【００５３】
図３は、デジタルスチルカメラ１の機能ブロックをデータの流れとともに示す図である。図３に示す要求部１００、シナリオ解析部１０１、画像生成部１０２および音声生成部１０３は、主にＣＰＵ１０が記憶部１１に記憶されているプログラム１１０に従って動作することにより実現される機能ブロックである。
【００５４】
なお、以下の説明では、ユーザによって「テーマ」が既に選択されており、当該選択されたテーマに応じて特定された１つのシナリオ元データ２２がサーバ装置２からダウンロードされているものとする。すなわち、図３は、ユーザが操作部１２を操作することにより、既にシナリオ元データ２２の特定は完了し、特定されたシナリオ元データ２２に関連づけられているＧＵＩデータ２３および素材データ２４も既にダウンロードされ、記録メディア９に記憶されている状態を示している。
【００５５】
要求部１００は、ＧＵＩデータ２３を参照しつつ、そこに記述されている内容に従って、デジタルスチルカメラ１のユーザに対して必要な情報を入力するように促すＧＵＩを提供する。すなわち、要求部１００は、液晶パネル１６にメニュー画面や入力画面等を表示させることにより、シナリオ元データ２２において要求される編集前データを特定するための特定情報を入力するようにユーザに対して要求する機能を有している。
【００５６】
シナリオ元データ２２に記述されている編集前データの識別子とは、いわば編集データにおける役名である。そして、各役名にどの俳優（素材データ９０）を具体的に割り当てるかは、ユーザが特定情報を入力することにより決定される。ユーザがＧＵＩデータ２３によって提供されるＧＵＩに従って入力することにより、役名（編集前データの識別子）と俳優名（素材データ９０の識別子）とが関連づけられる。
【００５７】
したがって、ユーザは、液晶パネル１６に表示されるＧＵＩ画面によって要求される情報を、当該ＧＵＩ画面に従って操作部１２を操作して入力するだけで、専門的な知識を有していなくても、編集データを作成するために必要な指示をデジタルスチルカメラ１に与えることが可能である。
【００５８】
また、本実施の形態における要求部１００は、すでに記録メディア９に記憶されている素材データ９０から編集前データとなるデータを選択するように要求するだけではなく、素材収集指示情報をＧＵＩ画面に表示することにより、ユーザに対して、編集前データとなる新たな素材データ９０を取得するように要求する。例えば、既に撮像され撮り溜めされた過去の撮像データ９１を選択させるだけでなく、新たに撮像を行って撮像データ９１を取得するよう要求する。
【００５９】
すなわち、要求部１００は、例えば、撮像指示情報を液晶パネル１６に表示させることにより撮像部１４よる撮像をユーザに対して要求するとともに、その要求に応じて行われる撮像により生成される撮像データ９１を、シナリオ元データ２２において要求される編集前データとして特定するための特定情報を生成する。撮像指示情報は、新たな撮像を行うように指示するメッセージだけでなく、どのような場面、被写体を撮像すればよいか等を指示するメッセージ等を含めることも可能である。
【００６０】
なお、要求部１００は、ＧＵＩ画面に従って、ユーザが撮像（あるいは録音）を行って新たに取得したデータを記録メディア９に記憶させる機能も有している。図３では図示していないが、マイク１３および撮像部１４から要求部１００に入力される新たなデータは、ＪＰＥＧコーデック１７０またはＡ／Ｖコーデック１７１を介して記録メディア９に転送され素材データ９０として記憶される。
【００６１】
ユーザからの指示に従って選択あるいは新たに取得された各素材データ９０は、シナリオ元データ２２において宣言されている各編集前データとしてユーザに指定されたものとみなされ、互いに関連づけが行われて、その情報が要求部１００からシナリオ解析部１０１に伝達される。すなわち、全ての編集前データに関するユーザの指定が完了した段階で、要求部１００は、シナリオ元データ２２で要求される編集前データの識別子と、記録メディア９に記憶されている各素材データ９０の記録メディア９上の識別子（例えば記録メディア９における各素材データ９０のファイル名）とを関連づけた情報（以下、「素材指定情報」と称する）をシナリオ解析部１０１に伝達する。先に示した例で言えば、素材指定情報とは、役名と俳優名とを関連づけたリスト情報となる。
【００６２】
シナリオ解析部１０１は、要求部１００から伝達される素材指定情報とシナリオ元データ２２とに基づいて、記録メディア９に記憶された素材データ９０の中から当該シナリオ元データ２２において要求される編集前データを特定する。また、シナリオ解析部１０１は、編集前データとして特定された素材データ９０の識別子と、編集前データに対して実行すべきデータ処理を示す識別子とを、それぞれに関連づけられている編集前データの識別子を仲立ちにして、互いに関連づけ、シナリオデータを作成する。すなわち、シナリオデータとは、シナリオ元データ２２と、素材指定情報とに基づいてシナリオ解析部１０１によって作成されるデータである。
【００６３】
このようなシナリオデータが作成されることによって、編集データを作成するために必要な全ての素材データ９０が特定され、かつ、各素材データ９０に対するデータ処理が特定される。
【００６４】
さらに、シナリオ解析部１０１は、作成する編集データにおいける映像を構成する素材データ９０の識別子と、当該素材データ９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、画像生成部１０２に映像シナリオデータとして伝達する。一方で、作成する編集データにおいて、音声に係る素材データ９０の識別子と、当該素材データ９０に関連づけられたデータ処理の識別子とを、編集データにおける順序に従って、音声生成部１０３に音声シナリオデータとして伝達する。
【００６５】
画像生成部１０２は、シナリオ解析部１０１から伝達される映像シナリオデータを参照しつつ、そこに記述されている素材データ９０の識別子に基づいて記録メディア９から該当する素材データ９０を読み出す。そして、シナリオ解析部１０１から伝達された映像シナリオデータを参照しつつ、当該素材データ９０に関連づけられたデータ処理の識別子に応じて、当該素材データ９０に対して行うべきデータ処理を画像処理部１８を使用しつつ実行し、編集データ（より詳しくは編集データのうちの映像に係るデータ）を生成する。画像生成部１０２は、生成した映像に係る編集データを液晶パネル１６あるいはＡ／Ｖコーデック１７１に伝達する。
【００６６】
音声生成部１０３は、シナリオ解析部１０１から伝達される音声シナリオデータを参照しつつ、そこに記述されている素材データ９０の識別子に基づいて記録メディア９から該当する素材データ９０を読み出す。そして、シナリオ解析部１０１から伝達された音声シナリオデータを参照しつつ、当該素材データ９０に関連づけられたデータ処理の識別子に応じて、当該素材データ９０に対して行うべきデータ処理を実行し、編集データ（より詳しくは編集データのうちの音声に係るデータ）を生成する。音声生成部１０３は、生成した音声に係る編集データをスピーカ１５あるいはＡ／Ｖコーデック１７１に伝達する。
【００６７】
以上がデジタルスチルカメラ１の構成および機能の説明である。次に、デジタルスチルカメラ１を用いて、編集データを作成する方法について説明する。
【００６８】
図４は、デジタルスチルカメラ１における画像処理方法を示す流れ図である。
【００６９】
なお、図４に示す状態となるまでに、サーバ装置２には、オペレータによって作成されたコンテンツデータ２１が記憶されているものとする。すなわち、画像処理の専門家であるオペレータがシナリオ元データ２２を予め作成する工程は、図４に示す各工程の前に既に完了しているものとする。
【００７０】
まず、ユーザはデジタルスチルカメラ１の操作部１２を操作して、所望する状況に応じてテーマを入力する。例えば、結婚式を撮像した素材データ９０を編集して編集データを作成しようとする場合、ユーザはテーマとして「結婚式」を入力する。より詳細には、ユーザはサーバ装置２のネットワーク８におけるアドレス等も入力する。
【００７１】
これに応じてデジタルスチルカメラ１は通信部１９およびネットワーク８を介してサーバ装置２にアクセスし、入力されたテーマ「結婚式」をサーバ装置２に伝達する。サーバ装置２はデジタルスチルカメラ１から伝達されたテーマ「結婚式」をキーワードとしてデータベース２０を検索し、当該テーマに関連づけられているシナリオ元データ２２を、ＧＵＩデータ２３および素材データ２４とともにデジタルスチルカメラ１に送信する。これによって、コンテンツデータ２１（シナリオ元データ２２、ＧＵＩデータ２３および素材データ２４）がデジタルスチルカメラ１にダウンロードされ（ステップＳ１）、記録メディア９に記憶される。
【００７２】
ダウンロードが完了すると、ユーザは操作部１２を操作して編集作業の開始を指示する（ステップＳ２）。この指示に応じて、デジタルスチルカメラ１の要求部１００が記録メディア９に格納されたＧＵＩデータ２３を参照し、ユーザに必要な入力を促すＧＵＩ画面を液晶パネル１６に表示させる（ステップＳ３）。このとき、要求部１００は、要求される編集前データに関するデータについても表示する。
【００７３】
図５は、ＧＵＩデータ２３に基づいて液晶パネル１６に表示されるＧＵＩ画面を例示する図である。なお、以下では、テーマ「結婚式」についてのシナリオ元データ２２およびＧＵＩデータ２３を例に説明する。
【００７４】
操作画面８０ａは、ＧＵＩデータ２３に基づいて液晶パネル１６に表示されるＧＵＩ画面であって、当該ＧＵＩデータ２３に対応したシナリオ元データ２２において要求される編集前データを特定するためのユーザ支援を行う。なお、以下、ステップＳ３において表示される画面を「操作画面８０」と総称する場合がある。
【００７５】
操作画面８０は、複数の小領域に分割されており、それらの小領域には、ライブビュー表示欄８１、シーン名表示欄８２、撮像条件表示欄８３、アドバイス表示欄８４および操作ボタン表示欄８５が配置される。
【００７６】
ライブビュー表示欄８１は、被写体のライブ映像やデジタルスチルカメラ１の撮像範囲（フレーム）が表示される領域である。したがって、ユーザは、一般的なカメラ撮影と同様に、ライブビュー表示欄８１に表示されている画像を見ながら、アングルや人物の位置等を決定するとともに、シャッターボタンを押す（撮像する）タイミングを決定することができる。
【００７７】
シーン名表示欄８２とは、次に特定すべき編集前データのシーン（場面）を表現した名称を文字表示する領域である。シーン名表示欄８２に表示されている名称を確認することにより、ユーザはどのようなシーンに使用される編集前データが次に要求されているかを知ることができる。例えば、図５に示す操作画面８０ａのシーン名表示欄８２には、「挙式（入場）」と表示されている。したがって、ユーザは、これを確認することによって、シナリオ元データ２２において、次に編集前データとして要求されている素材データ９０は、花嫁が教会に入場してくるところを撮影した画像であることを容易に理解できる。
【００７８】
撮像条件表示欄８３は、次に特定すべき編集前データをどのような撮像条件で撮像すべきかを表示する領域である。ユーザは、撮像条件表示欄８３を確認することにより、どのような撮像条件で撮像された画像が当該シーンにおいて最適であるかを容易に理解することができる。
【００７９】
図５に示すように、撮像条件表示欄８３に「写真」と表示されている場合、撮影される画像が静止画像であることを示している。また、「連写５」と表示されていることにより、撮像が連続的に５回繰り返され、写真５枚分の撮像データ９１が撮像されることがわかる。連続的に撮影された複数の静止画像を画像処理によってつなぎ合わせて作成された映像は、動画像として撮影された映像よりも人物の動きがどことなくぎこちなく表現される。例えば、結婚式における入場場面のように、人物のぎこちない動きを強調した演出をした方が、その人物の緊張感が観る側に伝わり、臨場感のある楽しい映像となる場合がある。
【００８０】
また、「発光無」とは、ストロボ撮影を禁止した状態であることを示している。例え屋内における撮影であっても、ストロボ撮影を行わずに撮影した方が、厳かな雰囲気が漂うよい映像になる場合がある。さらに、「強調有」とは特定の色強調が行われることを示している。例えば、図５に示す例では、バージンロードの「赤」を強調した撮影を行うと鮮明なイメージを残すことができる。
【００８１】
なお、本実施の形態では、その時点における全ての撮像条件を表示するのではなく、ＧＵＩデータ２３（シナリオ元データ２２）において予め定義されている（要求されている）撮像条件のみ選択的に表示する。
【００８２】
撮像条件表示欄８３に表示されている各撮像条件は、このままの状態で撮像が行われた場合、これらの撮像条件に従って撮像部１４による撮像が行われることを意味している。したがって、ユーザは、撮像条件表示欄８３に表示されている各撮像条件となるように、自ら操作部１２を操作して設定する必要はない。
【００８３】
アドバイス表示欄８４は、次に特定すべき編集前データを撮影する場合に考慮すべき事項を表現した文字情報が表示される領域である。撮影にあたって文字によるアドバイスがされることによって、ユーザは、より適切な撮影を容易に行うことができる。
【００８４】
操作ボタン表示欄８５は、ユーザが選択できる操作を実行する操作ボタンを表示する領域である。図５に示す例では、オプション撮影ボタン８６とマニュアル撮影ボタン８７とが表示されている。
【００８５】
図６は、オプション撮影ボタン８６により表示される画面を例示する図である。
【００８６】
本実施の形態では、オプション撮影ボタン８６が操作された場合には、スキップボタン８６０、順序変更ボタン８６１、シーン追加ボタン８６２、割り込み撮影ボタン８６３およびキャンセルボタン８６４が表示される。
【００８７】
スキップボタン８６０は、直前の操作画面８０において要求されている編集前データについて特定せずにスキップする操作を指示するためのボタンである。シナリオ元データ２２に定義されているシーンであっても、実際の行事では行われないシーンもあり得るからである。
【００８８】
順序変更ボタン８６１は、直前の操作画面８０において要求されている編集前データについて、一旦、特定せずに後回しにする操作を指示するためのボタンである。シナリオ元データ２２に定義されている順序とは異なる順序で実際の行事が進行する場合もあり得るからである。
【００８９】
シーン追加ボタン８６２は、シナリオ元データ２２において要求されていないが、ユーザが追加したいと所望するシーンを追加する操作を指示するためのボタンである。結婚式を例に説明すれば、参列者の映像や、オプションで行われる行事等を別途指定して、編集データに追加することができる。なお、シーン追加ボタン８６２が操作されたときに、編集データに追加可能なシーンの例を一覧表示するように予めシナリオ元データ２２（ＧＵＩデータ２３）を作成してもよい。
【００９０】
割り込み撮影ボタン８６３は、編集データとして使用しない撮像データ９１を撮影する操作を指示するためのボタンである。このボタンを操作することにより、デジタルスチルカメラ１は通常の撮影を行う状態に一時的に遷移する。これにより、ユーザは、シナリオ元データ２２に応じた撮影を行っている最中にも、個人的に別途記録しておきたい場面を撮影することが可能となっている。
【００９１】
キャンセルボタン８６４は、オプション撮影を終了させるためのボタンである。
【００９２】
図５に戻って、マニュアル撮影ボタン８７は、撮像条件表示欄８３に表示されている各撮像条件を変更して、ユーザが好みの撮像条件で撮影を行う操作を指示するためのボタンである。詳細は説明しないが、ある程度撮影について知識のあるユーザは、シナリオ元データ２２に定義されている撮像条件よりもさらに好みの条件でデジタルスチルカメラ１に撮像を行わせることができる。
【００９３】
なお、後述するように、操作ボタン表示欄８５に表示される操作ボタンの数や種類は、ステップＳ３において表示される操作画面８０に応じて変化する。言い換えれば、特定しようとする編集前データのシチュエーション（シーン）に応じて変化する。
【００９４】
ステップＳ３を実行すると、デジタルスチルカメラ１は、ユーザの操作に基づいて、記録メディア９に既に保存してあるデータから編集前データを特定するか否かを判定する（ステップＳ４）。
【００９５】
既に記録メディア９に保存してある素材データ９０を指定する場合、ユーザは、シャッターボタンを操作する代わりに操作部１２を操作して記録メディア９に記憶されている素材データ９０を一覧表示させる。これにより、要求部１００は、ステップＳ４においてＹｅｓと判定し、ＧＵＩ画面として選択画面（図示せず）を液晶パネル１６に表示する（ステップＳ５）。
【００９６】
ユーザは、表示された選択画面に一覧表示される素材データ９０（その時点で記録メディア９に記憶されている素材データ９０）から適当なデータを特定するための特定情報を入力することにより、編集前データとしての素材データ９０を選択する（ステップＳ６）。これにより、素材データ９０の中からシナリオ元データ２２において要求される編集前データが１つ特定され、素材指定情報の１レコードが作成される。
【００９７】
一方、ユーザは、新たに素材データ９０を取得しようと所望する場合は、液晶パネル１６に表示されている操作画面８０に従って操作部１２（シャッターボタン）を操作する。これにより要求部１００はステップＳ４においてＮｏと判定し、素材データ９０の取得（撮像・録音）が行われる（ステップＳ７）。このようにして取得された素材データ９０は、要求部１００によって、シナリオ元データ２２において要求される編集前データの１つとして特定され、素材指定情報の１レコードが作成される。
【００９８】
次に、要求部１００は、ＧＵＩデータ２３を参照することにより、全ての編集前データが特定（関連づけ）されたか否かを判定する（ステップＳ８）。要求部１００は、シナリオ元データ２２において要求されている編集前データ（ＧＵＩデータ２３にも記述されている）のうち、未だ特定されていない編集前データが存在する場合はステップＳ８においてＮｏと判定し、ステップＳ３からの処理を繰り返す。
【００９９】
図７ないし図１１は、シーンに応じて表示される操作画面８０の例を示す図である。
【０１００】
図７に示す操作画面８０ｂは、牧師様のお説教のシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。操作画面８０ｂの撮像条件表示欄８３には、お説教を録音することを意味する「録音有」という文字が表示されている。また、お説教のシーンでも、バージンロードの「赤」が強調された撮影が行われるように設定されている。さらに、アドバイス表示欄８４には、録音に関する注意も表示されている。
【０１０１】
図８に示す操作画面８０ｃは、指輪交換のシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。操作画面８０ｃの撮像条件表示欄８３には、「撮影枠有」と表示されており、ライブビュー表示欄８１には矩形の撮影枠が表示されている。これにより、ユーザは、指輪が画面のどの辺りに写るように撮影すれば指輪交換のシーンにおいてバランスのよい映像となるかが容易に理解できる。また、アドバイス表示欄８４にはズーム撮影を促すメッセージが表示されるとともに、操作ボタン表示欄８５にはズーム撮影を指示するためのズーム撮影ボタン８８が表示されている。もちろんマニュアル撮影ボタン８７を操作してズーム撮影を行うことも可能であるが、特におすすめの操作に対する専用のボタンを表示することで、ユーザの負担が軽減される。
【０１０２】
図９に示す操作画面８０ｄは、フラワーシャワーのシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。操作画面８０ｄの撮像条件表示欄８３には、周囲の参列者のお祝いの声等を録音するために「録音有」と表示されている。また、自然光における逆光状態を想定して露出補正がかけられることも表示されている。さらに、入場の時と異なり、「動画」と表示されているように、フラワーシャワーのシーンでは動画像で撮影して人物の動作をスムーズに見せることにより、晴れ晴れとした雰囲気を強調できる。
【０１０３】
図１０に示す操作画面８０ｅは、披露宴における乾杯のシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。乾杯のシーンにおいてもバランスのよい画像を撮影するために、ライブビュー表示欄８１に撮影枠が表示されている。また、操作ボタン表示欄８５には確認／撮り直しボタン８９が表示されている。ユーザは確認／撮り直しボタン８９を操作することにより、取得した撮像データ９１を確認し、必要な場合は撮り直しを行うためのボタンである。
【０１０４】
図１１に示す操作画面８０ｆは、披露宴におけるキャンドルサービスのシーンの編集前データとなる素材データ９０を特定するために表示される操作画面８０である。
【０１０５】
このようにしてステップＳ６またはＳ７の処理が繰り返されて、シナリオ元データ２２に定義されている全ての編集前データが特定されると、要求部１００はステップＳ８においてＹｅｓと判定する。そして、シナリオ解析部１０１がシナリオ元データ２２を参照しつつ、編集前データとして特定された各素材データ９０と、各素材データ９０に対して実行すべきデータ処理との関連づけを行い（ステップＳ９）、シナリオデータ９３を生成する。
【０１０６】
図１２は、シナリオデータ９３によって各シーンに編集前データとして撮像データ９１が関連づけられている様子を概念的に示す図である。図１２に示すように、時間順次に実際に行われたシーンに対して、それぞれ素材データ９０（撮像データ９１ａ，９１ｂ，９１ｃ，９１ｄ，９１ｅ，９１ｆ，９１ｇ，９１ｈ）が関連づけられている。
【０１０７】
例えば、撮像データ９１ａは、図５に示す操作画面８０ａに従って撮像され、「入場」シーンにおいて要求される編集前データとして特定された素材データ９０である。図１２に示すように、撮像データ９１ａは、５回の連続撮影により取得された複数の撮像データ９１から構成されている。そして、図示を省略しているが、撮像データ９１ａを一連のシーンであるとして、５枚の撮像データ９１をつなぎ合わせるデータ処理がシナリオデータ９３において関連づけられる。
【０１０８】
素材データ９０とデータ処理との関連づけが完了すると、シナリオ解析部１０１が、シナリオデータ９３を映像シナリオデータまたは音声シナリオデータに分類しつつ、画像生成部１０２および音声生成部１０３にそれぞれ伝達する。これにより、画像生成部１０２および音声生成部１０３が、素材データ９０にデータ処理を実行して編集データを生成する（ステップＳ１０）。さらに、生成された編集データは、スピーカ１５および液晶パネル１６に伝達され、音声が再生されるとともに、映像が再生される（ステップＳ１１）。
【０１０９】
これにより、未圧縮のストリーム情報がリアルタイムに演算され、音声および映像が再生される。なお、生成された編集データは、Ａ／Ｖコーデック１７１に伝達され、ＭＰＥＧ形式の記録データ９４として記録メディア９に保存される。
【０１１０】
以上のように、本実施の形態におけるデジタルスチルカメラ１は、編集データを作成する画像処理装置として構成されており、ＧＵＩデータ２３（操作案内データ）に基づいて、当該ＧＵＩデータ２３に対応したシナリオ元データ２２に定義されるシーンのユーザによる撮影を支援する操作画面８０を表示することにより、ユーザは、操作画面８０に従ってシーン撮像指示を与えるだけで、シナリオ元データ２２において要求されているシーンに応じた素材データ９０を、容易に、かつ、適切に生成することができる。
【０１１１】
なお、上記実施の形態では、コンテンツデータ２１を外部のサーバ装置２からダウンロードする例で説明した。このように構成することによって、デジタルスチルカメラ１のユーザは、コンテンツプロバイダから提供される最新のコンテンツデータ２１によって編集データを作成して楽しむことができる。しかし、コンテンツデータ２１に相当する汎用のデータを予めプログラム１１０に含めておけば、デジタルスチルカメラ１のユーザは、ダウンロード操作をすることなく、編集データを作成して楽しむことが可能である。
【０１１２】
また、撮像条件は、上記実施の形態に示したものに限定されるわけではなく、撮像データ９１を撮像する際の明るさに関する設定や、シャッタースピードに関する設定、あるいは、撮像データ９１における色をセピアやモノトーン等に変換する色変換の要否等であってもよい。
【０１１３】
＜２． 第２の実施の形態＞
第１の実施の形態では画像処理装置としてデジタルスチルカメラ１を例に説明したが、本発明における画像処理装置は撮像機能を備えた携帯電話であってもよい。
【０１１４】
図１３は、第２の実施の形態における画像処理装置として構成される携帯電話１ａを示す図である。なお、第２の実施の形態では、テーマとして「ゴルフコンペ」が選択された例によって説明する。
【０１１５】
詳細は図示しないが、携帯電話１ａは、ユーザによって操作される操作部１２ａおよび画像を表示する液晶パネル１６ａを備えていることを除いて、第１の実施の形態におけるデジタルスチルカメラ１と同様の構成を備えている。すなわち、携帯電話１ａも一般的なコンピュータとしての構成および機能を備えているとともに、撮像部１４に相当する構成も備えている。
【０１１６】
液晶パネル１６ａは、第１の実施の形態における操作画面８０に相当する操作画面８０ｇを表示する。第２の実施の形態における操作画面８０ｇには、ライブビュー表示欄８１ａ、シーン名表示欄８２ａおよび合成画像表示欄７０が設けられている。
【０１１７】
ライブビュー表示欄８１ａは、第１の実施の形態におけるライブビュー表示欄８１に相当する領域である。したがって、第２の実施の形態においても、ユーザは、どのような撮像データ９１が取得されるかライブビュー表示欄８１ａに表示される映像によって確認しつつシーン撮影指示を与えることができる。
【０１１８】
シーン名表示欄８２ａは、第１の実施の形態におけるシーン名表示欄８２に相当する領域である。第２の実施の形態では、ゴルフコンペの開始前にユーザによって予め入力された文字情報の一部がシーン名として使用されている。このように、ユーザによって指定される情報がシーン名に使用されてもよい。
【０１１９】
合成画像表示欄７０には、当該シーンにおいて取得される撮像データ９１に合成することが可能なフレーム画像が表示されている。図１３に示す例では、表示された３つのフレーム画像のうち最も左に表示されている画像（太枠で囲まれた画像）が選択されており、ライブビュー表示欄８１ａのライブ映像に当該フレーム画像が合成されている。
【０１２０】
このようなフレーム画像は、例えば、コンテンツデータ２１に含まれる素材データ２４によって得ることができる。第１の実施の形態では、シナリオ元データ２２と、当該シナリオ元データ２２で必要となる素材データ２４との関連づけが当該シナリオ元データ２２において既にされていると説明した。しかし、第２の実施の形態のような操作画面８０ｇを表示することにより、コンテンツプロバイダから提供される素材データ２４についても、いくつかの候補の中からユーザが選択できるように構成することができる。
【０１２１】
以上のように、第２の実施の形態における携帯電話１ａにおいても、第１の実施の形態と同様の効果を得ることができる。
【０１２２】
＜３． 第３の実施の形態＞
上記実施の形態では、画像処理装置として構成されるデジタルスチルカメラ１および携帯電話１ａにおいてシナリオデータ９３が作成され、当該装置において編集データが作成される例について説明した。しかし、本発明に係る画像処理装置は、シナリオデータ９３の作成処理が行われるものに限定されるわけではない。
【０１２３】
すなわち、第３の実施の形態における画像処理装置では、予めＧＵＩデータ２３のみをダウンロードしておき、要求部１００が当該ＧＵＩデータ２３を解析しつつ、当該ＧＵＩデータ２３に定義されているシーンに応じた操作画面８０を表示させる。そして、当該操作画面８０に従ってユーザにより入力されるシーン撮像指示を受け付けることによって、撮像部１４が当該シーン撮像指示に従って撮像を行って、撮像データ９１を記録メディア９に記憶させる。
【０１２４】
本実施の形態における画像処理装置はシナリオデータ９３を作成することはなく、編集データを作成することもないが、少なくともＧＵＩデータ２３に対応付けられているテーマに応じて適切な撮影が行えるように、ユーザを支援することができる。
【０１２５】
また、ＧＵＩデータ２３（操作画面８０）に促された撮像において取得された撮像データ９１には、当該ＧＵＩデータ２３に定義されているシーンを示す識別子（シーン識別子）を付加する（関連づける）ように構成してもよい。
【０１２６】
これにより、本実施の形態における画像処理装置のように、シナリオデータ９３を作成する機能がなく、編集データを作成することができない装置によって撮像された撮像データ９１であっても、シナリオ解析部１０１に相当する構成を有する装置（例えば、第１の実施の形態におけるデジタルスチルカメラ１や、第２の実施の形態における携帯電話１ａ）に、当該撮像データ９１が転送された場合には、シーン識別子を参照することによって編集データに相当するデータを作成することも可能となる。このとき、撮像データ９１がＪＰＥＧ形式のデータである場合には、ＪＰＥＧフォーマットに定義されているヘッダ部にこのようなシーン識別子を格納することができる。
【０１２７】
＜４． 変形例＞
以上、本発明の実施の形態について説明してきたが、本発明は上記実施の形態に限定されるものではなく様々な変形が可能である。
【０１２８】
例えば、上記実施の形態における機能ブロックはプログラム１１０（ソフトウェア）によって実現される例で説明したが、これらの機能ブロックは専用の論理回路（ハードウェア）として実現されてもよい。一方、上記実施の形態において論理回路により構成されると説明したデータ変換部１７の各構成の一部または全部をソフトウェアによって実現するように構成してもよい。
【０１２９】
また、デジタルスチルカメラ１がネットワーク８に接続されているサーバ装置２との間でデータ通信を行う構成としては無線通信に限定されるものではない。例えば、必要に応じて専用ケーブル（ＵＳＢやＳＣＳＩあるいは専用クレードル等）でコンピュータに接続し、当該コンピュータがネットワーク８に接続する構成としてもよい。このような構成の場合、サーバ装置２が提供するコンテンツデータ２１は、一旦、当該コンピュータにネットワーク８を介してダウンロードされ、その後、デジタルスチルカメラ１に専用ケーブルを介して転送される。
【０１３０】
また、デジタルスチルカメラ１や携帯電話１ａで使用されるコンテンツデータ２１はサーバ装置２によってネットワーク８を介して提供されると説明したが、例えば、記録メディア９によって提供されてもよい。すなわち、コンテンツデータ２１を記憶した記録メディア９が店頭等において配布され、これをデジタルスチルカメラ１や携帯電話１ａに装着して利用してもよい。
【０１３１】
また、要求部１００がＧＵＩデータ２３を実行することにより提供されるのは、液晶パネル１６に出力される。しかし、例えば、スピーカ１５に音声ガイダンスを再生させるように構成してもよい。すなわち、ＧＵＩに限らず、ＵＩを提供するデータを作成してもよい。
【０１３２】
また、上記実施の形態では、デジタルスチルカメラ１や携帯電話１ａにおいて取得され、素材データ９０として指定される音声データとして録音データ９２についてのみ説明した。しかし、指定の対象となる音声データは必ずしもデジタルスチルカメラ１や携帯電話１ａにおいて録音されたデータに限られるものではなく、例えば、他のサイト等から別途ダウンロードされた音楽ファイルであってもよい。すなわち、ユーザは、予め好みの曲を別途ダウンロードして記録メディア９に格納しておくことにより、編集データに使用するＢＧＭとして録音データ９２以外の音声データを指定することができる。この場合、ユーザはデジタルスチルカメラ１や携帯電話１ａのマイクを使ってわざわざ好みの曲を録音する必要がない。
【０１３３】
また、テーマとしては、「熱海旅行」といったものも指定可能である。このようなテーマが選択された場合に特定されるＧＵＩデータ２３には、各シーンとして熱海の撮影スポット（名所）が定義される。したがって、ＧＵＩデータ２３による操作画面８０にこれらの名所が順次（例えば熱海駅を起点として）表示されることにより、操作画面８０は熱海の名所の巡回ルート案内としての効果も発揮する。
【図面の簡単な説明】
【０１３４】
【図１】本発明に係る画像処理装置として構成されるデジタルスチルカメラを含む情報処理システムを示す図である。
【図２】デジタルスチルカメラの構成を示すブロック図である。
【図３】デジタルスチルカメラの機能ブロックをデータの流れとともに示す図である。
【図４】デジタルスチルカメラにおける画像処理方法を示す流れ図である。
【図５】ＧＵＩデータに基づいて液晶パネルに表示されるＧＵＩ画面を例示する図である。
【図６】オプション撮影ボタンにより表示される画面を例示する図である。
【図７】シーンに応じて表示される操作画面を示す図である。
【図８】シーンに応じて表示される操作画面を示す図である。
【図９】シーンに応じて表示される操作画面を示す図である。
【図１０】シーンに応じて表示される操作画面を示す図である。
【図１１】シーンに応じて表示される操作画面を示す図である。
【図１２】シナリオデータによって各シーンに編集前データとして撮像データが関連づけられている様子を概念的に示す図である。
【図１３】第２の実施の形態における画像処理装置として構成される携帯電話を示す図である。
【符号の説明】
【０１３５】
１ デジタルスチルカメラ
１ａ 携帯電話
１０ ＣＰＵ
１００ 要求部
１０１ シナリオ解析部
１０２ 画像生成部
１０３ 音声生成部
１１ 記憶部
１１０ プログラム
１２，１２ａ 操作部
１３ マイク
１４ 撮像部
１５ スピーカ
１６，１６ａ 液晶パネル
１７ データ変換部
１８ 画像処理部
１９ 通信部
２０ データベース
２１ コンテンツデータ
２２ シナリオ元データ
２３ ＧＵＩデータ（操作案内データ）
２４ 素材データ
８ ネットワーク
８０，８０ａ，８０ｂ，８０ｃ，８０ｄ，８０ｅ，８０ｆ，８０ｇ 操作画面
９ 記録メディア
９０ 素材データ
９１，９１ａ，９１ｂ，９１ｃ，９１ｄ，９１ｅ，９１ｆ，９１ｇ，９１ｈ 撮像データ
９２ 録音データ
９３ シナリオデータ
９４ 記録データ
【特許請求の範囲】
【請求項１】
被写体を撮像して撮像データを生成する撮像手段と、
操作案内データを記憶する記憶手段と、
前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、
前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置であって、
前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、
前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段と、
をさらに備えることを特徴とする画像処理装置。
【請求項３】
請求項１または２に記載の画像処理装置であって、
前記操作案内データは、前記撮像手段に対する撮像条件を含み、
前記撮像手段は、前記シーン撮像指示に従って撮像を行うときにおいて、前記撮像条件に従って撮像を行うことを特徴とする画像処理装置。
【請求項４】
請求項３に記載の画像処理装置であって、
前記撮像条件には、少なくとも明るさ設定、シャッタースピード、フラッシュ発光の要否、露出補正の要否、特定色強調の要否、色変換の要否、連続撮影回数、静止画像か動画撮像かの区別のうちのいずれか１つを含むことを特徴とする画像処理装置。
【請求項５】
請求項３または４に記載の画像処理装置であって、
前記操作画面に前記撮像条件の少なくとも１つが表示されることを特徴とする画像処理装置。
【請求項６】
請求項１ないし５のいずれかに記載の画像処理装置であって、
前記撮像手段は、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて生成する撮像データに、前記シーンに関する情報を関連づけることを特徴とする画像処理装置。
【請求項７】
シナリオデータに基づいて素材データにデータ処理を施して編集データを生成する画像処理方法であって、
(a) シナリオ元データに対応した操作案内データを記憶する工程と、
(b) 記憶された操作案内データに基づいて、前記操作案内データに対応したシナリオ元データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する工程と、
(c) 前記(b)工程により表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて撮像し撮像データを生成する工程と、
(d) 前記(c)工程において生成された撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成する工程と、
を有することを特徴とする画像処理方法。
【請求項８】
コンピュータによる実行が可能なプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、
被写体を撮像して撮像データを生成する撮像手段と、
操作案内データを記憶する記憶手段と、
前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、
前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段と、
を備える画像処理装置として機能させることを特徴とするプログラム。
【請求項９】
請求項８に記載のプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、
前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、
前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段と、
をさらに備える画像処理装置として機能させることを特徴とする画像処理装置。
【請求項１】
被写体を撮像して撮像データを生成する撮像手段と、
操作案内データを記憶する記憶手段と、
前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、
前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段と、
を備えることを特徴とする画像処理装置。
【請求項２】
請求項１に記載の画像処理装置であって、
前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、
前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段と、
をさらに備えることを特徴とする画像処理装置。
【請求項３】
請求項１または２に記載の画像処理装置であって、
前記操作案内データは、前記撮像手段に対する撮像条件を含み、
前記撮像手段は、前記シーン撮像指示に従って撮像を行うときにおいて、前記撮像条件に従って撮像を行うことを特徴とする画像処理装置。
【請求項４】
請求項３に記載の画像処理装置であって、
前記撮像条件には、少なくとも明るさ設定、シャッタースピード、フラッシュ発光の要否、露出補正の要否、特定色強調の要否、色変換の要否、連続撮影回数、静止画像か動画撮像かの区別のうちのいずれか１つを含むことを特徴とする画像処理装置。
【請求項５】
請求項３または４に記載の画像処理装置であって、
前記操作画面に前記撮像条件の少なくとも１つが表示されることを特徴とする画像処理装置。
【請求項６】
請求項１ないし５のいずれかに記載の画像処理装置であって、
前記撮像手段は、前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて生成する撮像データに、前記シーンに関する情報を関連づけることを特徴とする画像処理装置。
【請求項７】
シナリオデータに基づいて素材データにデータ処理を施して編集データを生成する画像処理方法であって、
(a) シナリオ元データに対応した操作案内データを記憶する工程と、
(b) 記憶された操作案内データに基づいて、前記操作案内データに対応したシナリオ元データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する工程と、
(c) 前記(b)工程により表示された操作画面に従ってユーザにより入力されるシーン撮像指示に応じて撮像し撮像データを生成する工程と、
(d) 前記(c)工程において生成された撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成する工程と、
を有することを特徴とする画像処理方法。
【請求項８】
コンピュータによる実行が可能なプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、
被写体を撮像して撮像データを生成する撮像手段と、
操作案内データを記憶する記憶手段と、
前記記憶手段に記憶された操作案内データに基づいて、前記操作案内データに定義されるシーンのユーザによる撮影を支援する操作画面を表示する表示手段と、
前記表示手段に表示された操作画面に従ってユーザにより入力されるシーン撮像指示を受け付ける操作手段と、
を備える画像処理装置として機能させることを特徴とするプログラム。
【請求項９】
請求項８に記載のプログラムであって、前記プログラムの前記コンピュータによる実行は、前記コンピュータを、
前記記憶手段に記憶された操作案内データに対応したシナリオ元データを取得して、前記記憶手段に記憶させる情報取得手段と、
前記シーン撮像指示に応じて前記撮像手段が撮像を行うことにより生成される撮像データを、素材データとして、前記シナリオ元データにおいて要求される編集前データと関連づけることにより、前記撮像データと前記撮像データに施すべきデータ処理とを関連づけたシナリオデータを生成するシナリオ生成手段と、
をさらに備える画像処理装置として機能させることを特徴とする画像処理装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【公開番号】特開２００９−２７２８４６（Ｐ２００９−２７２８４６Ａ）
【公開日】平成２１年１１月１９日（２００９．１１．１９）
【国際特許分類】
【出願番号】特願２００８−１２０９２８（Ｐ２００８−１２０９２８）
【出願日】平成２０年５月７日（２００８．５．７）
【出願人】（５９１１２８４５３）株式会社メガチップス (322)
【Ｆターム（参考）】
【公開日】平成２１年１１月１９日（２００９．１１．１９）
【国際特許分類】
【出願日】平成２０年５月７日（２００８．５．７）
【出願人】（５９１１２８４５３）株式会社メガチップス (322)
【Ｆターム（参考）】
[ Back to top ]