フォトムービーの編集条件設定装置及び編集条件設定プログラム
【課題】 フォトムービーの注文時に、顧客自身が行う編集条件の入力に要する手間を軽減する。
【解決手段】 フォトムービーの編集条件を入力する際、切り出された静止画の一部を拡大表示するズームエフェクト又はパーンエフェクトが選択されると、静止画を切り出す対象となる切り出し領域の設定が行われる。切り出し領域は、ユーザーにより予め指定され、切り出し領域内に人物の顔画像が検出された場合は、顔画像の位置及び大きさに基づいて、見映えのよい最適な余白を有する切り出し領域になるように自動的に調整される。切り出し領域内で顔画像が検出されない場合、手動調節により位置及び大きさを変更する。手動調節を行う際には、切り出し領域の大きさは、予め決められた大きさを上回るように制限され、過度に拡大倍率が高くなることによるフォトムービーの品質の低下が防止される。
【解決手段】 フォトムービーの編集条件を入力する際、切り出された静止画の一部を拡大表示するズームエフェクト又はパーンエフェクトが選択されると、静止画を切り出す対象となる切り出し領域の設定が行われる。切り出し領域は、ユーザーにより予め指定され、切り出し領域内に人物の顔画像が検出された場合は、顔画像の位置及び大きさに基づいて、見映えのよい最適な余白を有する切り出し領域になるように自動的に調整される。切り出し領域内で顔画像が検出されない場合、手動調節により位置及び大きさを変更する。手動調節を行う際には、切り出し領域の大きさは、予め決められた大きさを上回るように制限され、過度に拡大倍率が高くなることによるフォトムービーの品質の低下が防止される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、素材となる静止画から動画として観賞されるフォトムービーを作成するための編集条件を設定するフォトムービーの編集条件設定装置及び編集条件設定プログラムに関する。
【背景技術】
【０００２】
フォトムービーは、デジタルカメラ等を用いて記録された静止画を加工編集して特殊効果を施すことにより、素材の静止画を動画に変換したものである。この特殊効果には、静止画の一部の領域に注目してズームイン／ズームアウトする電子ズーム効果、クローズアップした状態で画像をスクロールさせる電子パーン効果、画像を縮小表示して直線又は曲線状に移動させる移動効果、特定の一点を中心に画像を回転させる回転効果、歪み（スキュー）を与える歪曲効果、これらを組み合わせた複合効果等がある。
【０００３】
フォトムービーでは、これらの特殊効果を使用して静止画に対する視点を擬似的に変化させることにより、特定の注目被写体を演出することや、画像を躍動的に表現することができる。また、複数の画像を同時に表示するマルチ画面効果、アニメーション画像や装飾画像、字幕の合成による視覚効果が併用されることや、これらの特殊効果を与えずにスライドショーとして画像を表示するものなど、その表示形態には様々なものがある。なお、以下の説明では、これらの特殊効果をエフェクトと称する。
【０００４】
特許文献１及び非特許文献１には、フォトムービーを作成するためのソフトウェアについて記載されている。これらのソフトウェアでは、フォトムービーの素材となる静止画を選択した後に、再生順序やエフェクトの種類等からなる編集条件を設定することでフォトムービーを作成することができる。作成されたフォトムービーは、これらのソフトウェア上で観賞することができる。また、フォトムービーの映像を汎用的なデジタル動画フォーマットに変換し、ＤＶＤ等の光ディスクに記録すれば、上記ソフトウェアを用いることなく、家庭用ＤＶＤプレイヤー等でフォトムービーを観賞できる。
【０００５】
非特許文献１に記載されたソフトウェアには、全ての画像の編集条件をユーザーが設定できるマニュアル編集モードと、素材とする画像を選択するだけでフォトムービーが自動的に作成される自動編集モードが用意されている。自動編集モードでは、静止画の選択順で再生順序が決定され、各画像のエフェクトの種類等はプログラムにより自動で設定されるので、操作手順が非常に簡単になる。
【特許文献１】特開平１０−２００８４３号公報
【非特許文献１】株式会社デジタルステージ LIFE* with-Photo-Cinema ［平成１６年４月６日検索］インターネット＜ＵＲＬ：http://www.digitalstage.net/jp/product/life/index.html＞
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述の自動編集モードは、画像の内容に基づいて適切にエフェクトが設定されるものではないため、電子ズーム効果や電子パーン効果のように画像を拡大表示するエフェクトが選択されたときに、人物の被写体を無視した映像になることがあり、ユーザーの希望する作品が得られにくいという欠点がある。また、従来のマニュアル編集モードを使用してこのような事態を回避しようとすると、画像を拡大表示するために切り出される静止画の特定の一部を決める切り出し領域の位置や大きさをユーザーが詳細に設定しなければならず、各画像の人物を画面上でバランスよく表示させるためには、大変な手間がかかるという問題がある。また、人物に限らず、風景や建物等を注目被写体にする場合もあることから、ユーザーの希望する作品を得るためには編集作業に多大な労力を要するという問題があった。
【０００７】
本発明は、上記問題点を考慮してなされたもので、マニュアル編集モードを用いて人物の被写体を見映えよく表示するために必要な編集作業の手間が従来に比べて軽減でき、風景や建物等の人物以外の被写体を注目被写体にすることができ、ユーザーの希望する作品をより簡単に作成できるようにしたフォトムービーの編集条件設定装置及び編集条件設定プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明は、静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定するフォトムービーの編集条件設定装置において、前記静止画から人物の顔画像を検出する顔画像検出手段と、ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段とを備えたことを特徴とする。
【０００９】
前記切り出し領域指定手段は、前記静止画上にある１つの任意のポイントが指定されることにより、指定されたポイントを基点として所定の大きさを有する切り出し領域を画定することを特徴とする。
【００１０】
前記顔画像検出手段は、前記切り出し領域内の画像から前記顔画像を検出することを特徴とする。
【００１１】
前記切り出し領域内の画像を拡大表示させる場合には、前記切り出し領域内の画素数が予め決められた基準値よりも小さい時に、前記切り出し領域の大きさが前記基準値を上回る画素数となるように調整する画素数調整手段を備えたことを特徴とする。
【００１２】
前記切り出し領域調整手段による切り出し領域の調整を実行するか否かを選択するための領域調整選択手段を備えたことを特徴とする。
【００１３】
前記顔画像検出手段によって顔画像が検出された静止画に対し、画質補正処理を行う第１の画質補正手段を備えたことを特徴とする。
【００１４】
記憶媒体から前記静止画の画像データを読み出す画像読み出し手段と、前記編集条件の設定を行う前に、読み出された画像データに画質補正処理を行う第２の画質補正手段を備えたことを特徴とする。
【００１５】
また、本発明の編集条件設定プログラムは、静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定する処理をコンピュータに実行させるものであり、前記静止画から人物の顔画像を検出する顔画像検出手段と、ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段としてコンピュータを機能させることを特徴とする。
【発明の効果】
【００１６】
本発明によれば、画像の拡大表示を伴う電子ズーム効果、電子パーン効果のように、切り出し領域を設定する必要のあるエフェクトに関する編集条件を設定する場合に、ユーザーにより指定された切り出し領域内に、静止画から検出された人物の顔画像が存在するか否かを判定し、切り出し領域内に顔画像が存在すると判定された場合には、顔画像の位置又は大きさの少なくとも一方に基づいて切り出し領域が調整されるから、人物に注目した最適な切り出し領域を簡単に設定でき、人物の顔を見映えよく画面内に収めたフォトムービーを得ることができるる。また、風景や背景の一部に注目した切り出し領域を設定することができ、ユーザーの多くの意図を反映させたフォトムービーを得ることができる。
【００１７】
また、ユーザーにより切り出し領域を指定する操作がなされる際、静止画上の任意の１点が指定されることで指定されたポイントを基点とする所定の大きさの切り出し領域が画定されるから、切り出し領域の指定が簡単になる。
【００１８】
また、画面に表示された静止画上で切り出し領域を指定し、この切り出し領域内の画像から顔画像を検出するようにしたので、静止画全体から顔画像を検出する場合に比べて顔画像の検出に要する時間を短縮できる。
【００１９】
また、予め決められた基準値を下回る画素数の切り出し領域を指定できないようにしたから、過度に小さい切り出し領域が指定された時に、切り出し領域内の画像が拡大される倍率が極端に大きくならず、表示される画像が粗くなる画質の劣化によってフォトムービーの品質が低下することを防止できる。
【００２０】
また、切り出し領域の調整を有効にするか無効にするかを選択できるようにしたから、切り出し領域内の画像から顔画像が検出された場合でも、人物と背景とをバランスよく収めた切り出し領域を設定でき、ユーザーのより多くの意図を反映させたフォトムービーを得ることができる。
【００２１】
顔画像が検出された静止画に対して画質補正処理を行うことにより、顔画像が拡大表示された際の画像の粗さによるフォトムービーの品質の低下を小さくすることができる。
【００２２】
記憶媒体から読み出される全ての静止画に対して画質補正処理を行うことにより、顔画像の検出精度を高めることができるとともに、編集条件の設定時にフォトムービーの品質を知ることができる。
【発明を実施するための最良の形態】
【００２３】
図１において、フォトムービー注文受付システム１０は、注文受付機１１とフォトムービー出力機１２とにより構成されている。注文受付機１１とフォトムービー出力機１２は同一のＤＰＥ店等の店舗内に設置され、店舗の構内ネットワーク（ＬＡＮ）により互いに通信可能に接続されている。なお、注文受付機１１がフォトムービー出力機１２に対して遠隔地に設置される場合には、両者がインターネットを介して通信可能に接続されてもよい。
【００２４】
注文受付機１１は、顧客が注文内容を入力するための入力操作部１５と、注文内容を表示するための表示部１６とを備えている。入力操作部１５は、表示部１６の表示画面と一体に設けられたタッチパネルからなり、画面上に表示された選択キー等の位置に触れることで入力処理が行われる。メディア読取り部１７は、顧客が持参した記憶媒体から画像データを読取るもので、メモリカード１８とＣＤ又はＤＶＤの光ディスク１９とからデータの読取りが可能である。メモリカード１８は、デジタルカメラに着脱自在であり、撮影画像を保存するために用いられる。光ディスク１９は、パーソナルコンピュータ等に保存された画像データがコピーされ、メモリカード１８よりも多くの撮影画像を保存できる大容量記憶媒体である。
【００２５】
通信部２１は、注文受付機１１とフォトムービー出力機１２との間でデータの送受信を行う。レシート出力部２２は、顧客が商品を受け取る際の引換証となるレシート２３を発行する。レシート２３には、顧客の注文内容を識別するための識別情報が印刷されている。この識別情報は、注文番号、注文を受付けた受付機の識別コード、商品の受渡し日時及び受渡し店舗を示す情報等がバーコードと文字でそれぞれ記録されている。
【００２６】
制御部２５及び編集条件設定部２６は、注文受付機１１に内蔵された記憶装置に格納されたオペレーティングシステムとフォトムービーの編集条件を設定する編集条件設定プログラムとをマイクロプロセサに実行させることによりそれぞれ実現される。この記憶装置は、例えばハードディスク記憶装置（ＨＤＤ）又は多数のメモリチップからなるメモリユニットにより構成される。制御部２５は、メディア読取り部１７，通信部２１等の各ハードウェアを制御し、入力操作部１５でなされた操作に応じて各部の動作を管理する。
【００２７】
編集条件設定部２６では、顧客の入力操作等によりフォトムービーに使用する各静止画についてエフェクトの有無やその種類等の編集条件を設定するための処理が行われる。編集条件設定部２６は、予め用意されたシナリオテンプレートに従って全ての静止画のエフェクトを自動的に決定する自動編集モードと、顧客の手動設定により画像ごとにエフェクトの設定が行われるマニュアル編集モードとを有する。自動編集モードのシナリオテンプレートには、季節や年間行事等のテーマ別に複数種類のものが用意されており、旅行用のテンプレート、結婚式や卒業式用のテンプレート、正月、ひなまつり、七夕、クリスマス用のテンプレートなどがある。テンプレートごとに、撮影画像に合成される装飾画像の種類や、選ばれやすいエフェクトが異なっている。
【００２８】
プレビュー動画出力部２８は、編集条件設定部２６により設定された編集条件に基づいて、実際に作成されるフォトムービーと同様にエフェクトが付与されたプレビュー用フォトムービーを出力する。プレビュー動画出力部２８は、メモリカード１８や光ディスク１９から読み出した撮影画像の画素数を小さくした低解像度画像を生成し、この低解像度画像からプレビュー用フォトムービーを作成する。低解像度画像を用いることで、プレビュー用フォトムービーの生成及び再生表示に要するマイクロプロセサの負荷が軽減される。プレビュー用フォトムービーは表示部１６に表示され、その仕上がりの品質が顧客に伝えられる。
【００２９】
編集条件設定部２６は、シナリオデータ生成部２９と、切り出し領域設定部３０と、顔画像検出部３１とを有している。シナリオデータ生成部２９は、画像の再生順序、各画像のエフェクトの有無やその種類等が指定された編集条件を組み込んだシナリオデータを作成する。シナリオデータは、エフェクトの種類やその詳細な設定内容が画像データのファイル名に関連付けされることにより構成される。シナリオデータは、注文情報の一部として静止画の画像データとともにフォトムービー出力機１２に送信される。
【００３０】
切り出し領域設定部３０は、静止画の一部を切り出して特殊効果を付与するための切り出し領域を設定する。この切り出し領域は、静止画の一部に注目してズームイン又はズームアウトを行うズームエフェクトや、クローズアップした状態で画像をスクロールさせるパーンエフェクト、静止画の一部を除いて暗転表示することにより静止画にスポットライトを当てたような効果を出すスポットライトエフェクト等、静止画中の注目被写体を演出したい場合に使用されるエフェクトのパラメータである。
【００３１】
例えば、ズームエフェクトは、静止画全体を縮小又は等倍表示した状態から切り出し領域により定まる表示範囲の間で倍率を変化させて静止画を表示する。すなわち、切り出し領域により、ズームインの終了時の表示範囲、ズームアウトの開始時の表示範囲が定められる。また、パーンエフェクトでは、パーンの開始及び終了時にクローズアップされる画像の抽出範囲が定められ、スポットライトエフェクトでは、明るく表示される領域が定められる。ズームエフェクトやパーンエフェクトでは、フォトムービーを再生表示する表示デバイスの画面のアスペクト比に基づいてアスペクト比が固定された矩形の切り出し領域が設定され、スポットライトエフェクトや他のエフェクトでは切り出し領域の形状を円形等の他の形状に指定することができる。なお、ズームエフェクトでは、１つの切り出し領域が設定され、パーンエフェクトでは、複数の切り出し領域が設定される。これらの切り出し領域は、表示部１６の画面上に切り出し枠Ｆ１１（図４参照）として表示される。
【００３２】
顔画像検出部３１は、静止画中に存在する人物の顔画像を検出する。顔画像の検出が行われる際には、顔画像を検出する範囲が切り出し領域によって指定され、切り出し領域内の顔画像が検出される。顔画像の検出処理は、静止画の画素ごとの色情報に基づいて肌色である皮膚が識別され、さらに瞳や眉毛、髪の有無から顔画像が識別される。また、顔の皮膚を示す肌色の画素と髪や眉毛、瞳を示す黒色の画素の配列パターンや、背景との輝度差等に基づき顔及び頭部の輪郭が識別され、その形状が特定される。
【００３３】
切り出し領域設定部３０には、顔画像検出部３１により検出された人物の顔が見映えよく表示されるように、検出された顔画像に基づいて顔画像の天地左右の余白を最適にする切り出し領域を画定するための推奨余白データが記憶されている。様々な撮影シーンにより最適とされる余白が異なるため、推奨余白データは、例えば、素材の静止画が横長の画像である場合と縦長の画像である場合ごとに、検出された顔画像の数（人数）や、それぞれの顔の位置関係、顔画像が静止画全体に占める割合等の特徴情報に応じて分類されたものが予め用意されている。
【００３４】
切り出し領域設定部３０は、顔画像検出部３１により検出された顔画像の特徴情報に基づき切り出し領域の位置及び大きさを調整する自動調整モードと、指定された切り出し領域を調整せず、顧客の入力操作をそのまま反映させる手動調整モードの２種類の動作モードを有している。自動調整モードと手動調整モードは、指定された切り出し領域に顔画像が存在するか否かにより切り替えられ、切り出し領域内に顔画像が存在する場合には自動調整モードに移行し、顔画像が存在しない場合には手動調整モードに移行する。
【００３５】
なお、所定の入力操作を行えば、自動調整モードから強制的に手動調整モードに移行させることもでき、切り出し領域から顔画像が検出された後、これにより決まる切り出し領域の適否に応じて、顧客が自由に指定できる切り出し領域に変更できる。手動調整モードでは、指定される切り出し領域の最低限の大きさが制限されており、切り出し領域が包含する画素数の下限が基準値として定められている。これにより、過度に小さい切り出し領域が指定されることが防止される。
【００３６】
画質補正部３２は、画像データに対して色調補正等の画質補正処理を行う。画質補正処理には、メディア読取り部１７から読取られた全ての画像データに対して一律に行われるセットアップ補正処理と、顔画像検出部３１により人物の顔が認識された際に行われる高品位処理とがある。セットアップ補正処理では、全ての画像に対し、グレーバランスの調整、肌色画素の調子を整える色合い調整、コントラスト調整等の基本的な画質補正処理が行われる。高品位処理は、ズームエフェクトやパーンエフェクトのように、顔画像検出部３１により人物の顔が存在する静止画に対して行われるもので、撮影時のレンズ性能に起因する歪曲や周辺減光の補正、赤目補正処理、ノイズ低減処理、シャープネス補正、ジャギー低減処理等の画像の品質を高めるための画質補正処理が行われる
【００３７】
フォトムービー出力機１２は、注文受付機１１より送信された注文情報を受信する通信部３５と、受信した注文情報が記憶される注文情報記憶部３６と、注文情報に組み込まれたシナリオデータを解析し、送信された画像データに基づいてフォトムービーを出力するフォトムービー出力部３７と、フォトムービーの映像を汎用的なデジタル動画フォーマットに準拠した映像に変換するビデオムービー変換部３８とを備えている。なお、デジタル動画フォーマットの１つとして、フォトムービーをＤＶＤ映像として観賞できるように、ＭＰＥＧ２−ＤＶＤ−Ｖｉｄｅｏフォーマットが採用されている。
【００３８】
制御部３９は、予め組み込まれた注文処理プログラムに基づいて各部を制御することにより、注文情報の処理から商品の仕上げまでの一連の流れを管理する。メディア記録部４０は、ＣＤ又はＤＶＤからなる光ディスク４１にフォトムービーのデータを記録する。ラベル印刷部４２は、注文内容を識別するための識別情報とフォトムービーの内容を示すラベル画像を光ディスク４１の表面にプリントする。
【００３９】
次にフォトムービー注文受付システム１０の作用について説明する。図２において、注文受付機１１のメディア読取り部１７に、静止画の画像データが記憶されたメモリカード１８又は光ディスク１９の記憶媒体がセットされると、制御部３９がセットされた記憶媒体を検知し、画像データの読み込みが開始される。
【００４０】
記憶媒体から画像データがコピーされると、画質補正部３２によって全ての画像データに対してセットアップ補正処理が行われる。また、セットアップ補正処理がなされた画像データからサムネイル画像が生成され、このサムネイル画像が表示部１６に一覧表示される。表示されたサムネイル画像を参考にしてフォトムービーの素材として用いる画像を選択することができ、全ての画像を使用するか、一部の画像を使用するかを決定する操作がなされる。
【００４１】
画像の選択が終了すると、選択された画像を用いてフォトムービーを自動で作成する自動編集モードと、再生順序やエフェクトの種類等を顧客が選択できるマニュアル編集モードのいずれかを選択する操作がなされる。自動編集モードが選択されると、編集条件設定部２６により、サムネイル画像の配列順に再生順序が決められ、各画像のエフェクトの有無やその種類が決定される。このとき、年間行事や季節等のテーマ別に予め用意されたシナリオテンプレートを選ぶことができる。
【００４２】
マニュアル編集モードでは、画像の再生順序、各画像のエフェクトの有無、エフェクトの種類、エフェクトのかけ方を示す詳細設定等の編集条件を顧客が自ら設定する。読み込まれた画像のサムネイル画像が表示部１６に一覧表示された状態で、入力操作部１５を介して表示部１６の画面上で画像の配列順を変更することにより画像の再生順序を決めることができる。また、所定の画像についてエフェクトを与えることを指定する項目が選択されることにより、そのエフェクトの詳細設定を行うためのステップに移る。
【００４３】
エフェクトには、ズームエフェクト、パーンエフェクトのように拡大表示を伴うエフェクト、静止画の一部を除いて暗転させるスポットライトエフェクト、静止画を画面上に縮小表示して画面の端から端へ直線又は曲線状に移動させるムーブエフェクトや、前に表示された静止画を徐々に透明にして次に表示される画像を徐々に濃くするフェードインエフェクト、装飾画像や字幕を合成する合成エフェクト、これらを組み合わせた複合エフェクトなど、多くの種類が用意されている。以下の説明では、パーンエフェクトを選択した場合を例にして説明する。
【００４４】
図３及び図４において、パーンエフェクトが選択されると、パーン動作の基点を指定するステップに移る。パーンエフェクトでは、パーン動作の基点として、パーン開始位置を示す始点、終了位置を示す終点となる切り出し領域が指定され、必要に応じて始点と終点の間の中継点を指定することができる。図４（ｂ）に示すように、表示部１６の画面上には、エフェクトを指定した静止画を表示する編集ウインドウＷ１と、切り出し領域によって切り出される画像を表示するプレビューウインドウＷ２と、エフェクトの詳細設定を行うための設定ウインドウＷ３とが表示される。パーン動作の基点を指定する際には、編集ウインドウＷ１の画面上で人物の顔を指定する。
【００４５】
編集ウインドウＷ１には、パーンエフェクトが指定された編集対象画像として、例えば、人物の被写体Ａ１及び被写体Ａ２，風景の被写体Ａ３が写る画像が表示される。設定ウインドウＷ３には、パーン動作の始点、終点、中継点を指定するための設定キーＫ１，Ｋ２，Ｋ３がそれぞれ表示される。また、自動調整モード時に、強制的に手動調整モードに切り替えるための手動調整キーＫ４と、顔画像検出部３１により検出できなかった人物の顔を指定するときに、これを顔画像として顔画像検出部３１に認識させる認識キーＫ５が表示される。パーン動作の始点を指定するためには、設定キーＫ１が操作される。表示部１６の画面上には、編集ウインドウＷ１上のポイントを指定するように促すメッセージが表示される。
【００４６】
パーン動作の始点が指定される際、顧客が被写体Ａ１の顔をクローズアップすることを希望した場合には、被写体Ａ１の顔の位置が指定される。編集ウインドウＷ１には、図４（ｂ）に示すように、指定された座標を示すマークＭ１が表示され、マークＭ１を中心とする矩形状をした所定の大きさの切り出し領域が切り出し枠Ｆ１１によって表示される。なお、切り出し領域、すなわち切り出し枠Ｆ１１の大きさや形状は初期設定により決まっているが、変更することも可能である。
【００４７】
顔画像検出部３１は、切り出し枠Ｆ１１の内部の顔検出処理を行う。顔検出処理により、切り出し領域内から被写体Ａ１の顔が検出される。また、被写体Ａ１の顔の輪郭が特定され、特定された輪郭に基づいて顔画像の認識範囲が反転表示される。顔画像の検出数より切り出し枠Ｆ１１に含まれる人数が１人であることが特定される。切り出し領域設定部３０は、被写体Ａ１の顔の位置及び大きさに基づいて推奨余白データを参照し、最適な切り出し領域の位置及び大きさを算出する。切り出し枠Ｆ１１は、最適化された切り出し枠Ｆ１２に調整される。切り出し枠Ｆ１２の中心は、顔の認識範囲の中心Ｃ１と同一である。プレビューウインドウＷ２には、切り出し枠Ｆ１２によって切り出される画像が表示される。このように切り出し領域が決定し、パーン動作の始点の設定が終了する。
【００４８】
図５において、次にパーン動作の終点の設定が行われる。顧客が被写体Ａ２の顔をクローズアップすることを希望した場合には、被写体Ａ２の顔の位置が指定される。編集ウインドウＷ１には、図５（ｂ）に示すように、指定された座標を示すマークＭ２が表示され、マークＭ２を中心とする所定の大きさの切り出し領域が切り出し枠Ｆ２１によって表示される。顔画像検出部３１は、切り出し枠Ｆ２１について顔検出処理を行う。しかし、被写体Ａ２は横顔で写っているため、顔としての特徴が不足しているため、被写体Ａ２の顔画像は検出ができない。従って、切り出し領域設定部３０は、切り出し枠Ｆ２１の内部には顔が存在しないものと判断し、切り出し枠Ｆ２１を二重線で表示する。このとき、認識キーＫ５が点滅し、顔画像の検出のやり直しを促すメッセージが表示される。顧客は、切り出し枠Ｆ２１が二重線で表示されたことと、認識キーＫ５が点滅したことにより、顔画像の検出が失敗したことを理解できる。
【００４９】
そこで、人物の顔検出のやり直しを行うために認識キーＫ５が操作される。認識キーＫ５が操作されると、顔の位置を指定するように促すメッセージが表示される。顧客はメッセージに従い、被写体Ａ２の顔の位置を指定し、指定された座標がマークＭ３によって表示される。顔画像検出部３１は、指定された座標を示すマークＭ３の周辺に分布する肌色画素を検出し、肌色画素が集合した領域を顔とみなして、顔及び頭部の輪郭を特定する。これにより、被写体Ａ２の顔画像が強制的に認識され、顔画像と推定された範囲が反転表示される。切り出し領域設定部３０は、被写体Ａ２の顔の位置及び大きさに基づいて推奨余白データを参照し、最適な切り出し領域の位置及び大きさを算出する。切り出し枠Ｆ２１は、調整された切り出し枠Ｆ２２として更新される。切り出し枠Ｆ２２の中心は、顔の認識範囲の中心Ｃ２と同一である。プレビューウインドウＷ２には、切り出し枠Ｆ２２によって切り出される画像が表示される。このように切り出し領域が決定し、パーン動作の終点の設定が終了する
【００５０】
図６において、パーンエフェクトの中継点として、山の背景である被写体Ａ３上の座標を指定する操作がなされると、その座標を示すマークＭ４とともに切り出し枠Ｆ３１が表示される。顔画像検出部３１は、切り出し枠Ｆ３１によって画定される切り出し領域から顔画像の検出処理を行うが、山の背景である被写体Ａ３から顔の特徴を見つけることはできないため、顔画像を検出することはできない。切り出し領域設定部３０は、切り出し枠Ｆ３１を二重線で表示する。このとき、手動調節キーＫ４が点灯し、手動調節モードであることが報知される。認識キーＫ５が点滅し、顔画像の検出のやり直しを促すメッセージが表示される。なお、認識キーＫ５を操作し、被写体Ａ３の特定の座標を入力しても、顔画像を検出することはできず、切り出し枠Ｆ３１は二重線で表示されたままになる。
【００５１】
切り出し枠Ｆ３１の内部には、切り出し枠Ｆ３１の大きさを制限する制限枠ＲＦ１が表示される。切り出し枠Ｆ３１は、画面上での操作によりその位置や大きさを変更できるが、制限枠ＲＦ１よりも小さく変更することはできず、切り出し枠Ｆ３１の最小限の大きさが制限される。制限枠ＲＦ１は、切り出し枠Ｆ３１内の画像が過度に大きい倍率で拡大表示されることによる画質の劣化を防止する役目をする。切り出し枠Ｆ３１を手動調整し、位置及び大きさが決まると、これを確定する操作がなされる。
【００５２】
このようにして、パーンエフェクトの始点、終点、中継点に関し、それぞれ切り出し枠Ｆ１２，２２，３１を決定し、パーンエフェクトの詳細設定が終了すると、画質補正部３２によりパーンエフェクトが指定された画像の高品位処理が行われる。高品位処理により、被写体Ａ１，Ａ２，Ａ３を拡大表示したときに生じる画質の低下が小さくされ、フォトムービーの品質が損なわれることが防止される。なお、セットアップ補正処理や高品位処理では、人物の見映えを高めるのに適した画質調整が行われるため、被写体Ａ３のような非人物の被写体に対しては、切り出し領域の設定時などに、色調補正等を別途行えるようにしてもよい。
【００５３】
図７において、上述のようにパーンエフェクトの基点が設定されたフォトムービーは、被写体Ａ１の顔がクローズアップされた映像から始まり、画面上で被写体Ａ１から被写体Ａ３に向かって画面が移動して擬似的なパーンが再現される。また、被写体Ａ３がクローズアップされると、画面が被写体Ａ２に向かって移動し、被写体Ａ２の横顔をクローズアップした映像へ移行して終了する。なお、パーンエフェクトでは、切り出し枠Ｆ１２等によって切り出された画像を画面全体に拡大して表示するため、切り出し枠Ｆ１２等が小さくなればその分だけ拡大倍率は大きくなり、切り出し枠Ｆ１２が大きければ拡大倍率が小さくなる。また、パーン動作の始点と終点の少なくとも２つの切り出し領域が指定されるため、例えば、切り出し枠Ｆ１２，Ｆ２２，Ｆ３１の大きさが異なれば、パーン動作中に拡大倍率が変化することになる。
【００５４】
図２において、その他の画像についてもエフェクトの有無、その種類等の設定がなされ、全ての編集条件の入力が終了すると、プレビュー動画出力部２８によりプレビュー用のフォトムービーが作成される。プレビュー用フォトムービーは表示部１６に表示され、顧客により確認される。編集条件の変更の必要がなければ次のステップに移る操作がなされ、氏名や住所等の個人情報を入力するステップに移る。これらの入力処理が終了すると、シナリオデータ生成部２９により全ての編集条件を記録したシナリオデータが作成される。また、制御部２５は、シナリオデータ、画像データ、顧客の個人情報、注文内容を識別するための識別情報等をまとめた注文情報を作成し、通信部２１を介して注文情報をフォトムービー出力機１２に送信する。
【００５５】
注文情報の送信が終了すると、制御部３９はレシート出力部２２を作動させる。レシート出力部２２が、注文内容の識別情報をプリントしたレシート２３を発行すると、注文受付処理が終了する。
【００５６】
注文情報を受信したフォトムービー出力機１２では、注文情報に組み込まれたシナリオデータ及び画像データに基づいてフォトムービーが作成される。作成されたフォトムービーは、注文内容に基づき、ＤＶＤ映像として観賞できるＭＰＥＧ２−ＤＶＤ−Ｖｉｄｅｏフォーマット等の映像データに変換され、この映像データがメディア記録部４０によりＤＶＤ等の光ディスク４１に記録される。フォトムービーが記録された光ディスク４１は、レシート２３と引換に顧客に渡される。
【００５７】
以上のように、本発明の実施形態について説明したが、本発明は上記実施形態に限られるものではなく、例えば、注文受付機１１とフォトムービー出力機１２のように、編集条件の入力設定とフォトムービーの作成を別々の機器により分担して行うことに限らず、これらを１つの装置により行えるようにしてもよい。また、注文受付機１１の機能と同等なアプリケーションプログラムを配布し、これを顧客が所有するパーソナルコンピュータに組み込むことにより、編集条件の入力設定とフォトムービーの注文を自宅からインターネット等の通信手段を介して行えるようにしてもよい。
【００５８】
また、顔画像検出部３１により複数の顔画像が複数検出された場合には、切り出し領域を決定する基準となる顔画像を指定するステップを追加することで、検出された顔画像の全て又は一部を自由に指定できるようにし、撮影シーンの多様な複数の静止画を素材とする場合であっても、簡単な操作でフォトムービーの編集条件を設定できるようにすることが好ましい。また、人物の顔画像を検出することに加え、人物の全身像、あるいは動物や植物、観光名所を例とする建造物や地形等が検出できるようにしてもよい。
【００５９】
上記実施形態は、表示部１６の画面と一体にしたタッチパネルによって入力操作部１５を構成しているが、ポインティングデバイス等の他の入力装置により構成してもよい。切り出し領域を指定する際には、上記実施形態に示すように静止画上の１点の座標を指定することに限らず、矩形の対角線上に位置する２つの座標を指定して矩形の領域を直接指定するようにしてもよい。また、切り出し領域を指定した後に人物の顔画像を検出することに限らず、画像全体から人物の顔を検出した後に切り出し領域の指定が行えるようにすれば、検出されない顔画像の有無により、認識キーＫ５の操作を要するか否かが直ちに分かり、便利である。
【００６０】
また、商品形態としては、ＤＶＤメディアにビデオムービー形式のデータを記録したものに限らず、例えば、フォトムービーのビューワーソフトをユーザーに配布し、このビューワーソフトをインストールしたコンピュータ上で再生できる形式のデータを記録してもよい。また、素材となる静止画は、デジタルカメラで記録された画像の他に、プリント写真や写真フイルムをスキャナーで読取って得られた画像や、ビデオカメラ等で撮影して得られた動画から抽出した１フレームの画像であってもよい。
【図面の簡単な説明】
【００６１】
【図１】フォトムービー注文受付システムの概略構成図である。
【図２】注文受付機の処理の流れを示すフローチャートである。
【図３】切り出し領域設定処理の流れを示す説明図である。
【図４】パーンエフェクトの始点設定時における画面の様子を示す説明図である。
【図５】パーンエフェクトの終点設定時における画面の様子を示す説明図である。
【図６】パーンエフェクトの中継点設定時における画面の様子を示す説明図である。
【図７】フォトムービーの映像の移り変わりを示す説明図である。
【符号の説明】
【００６２】
１０ フォトムービー注文受付システム
１１ 注文受付機
１２ フォトムービー出力機
１５ 入力操作部
２６ 編集条件設定部
２８ プレビュー動画出力部
２９ シナリオデータ生成部
３０ 切り出し領域設定部
３１ 顔画像検出部
３２ 画質補正部
Ａ１，Ａ２，Ａ３ 被写体
Ｆ１１，Ｆ１２，Ｆ２１，Ｆ２２，Ｆ３１ 切り出し枠
Ｗ１ 編集ウインドウ
Ｗ２ プレビューウインドウ
Ｗ３ 設定ウインドウ
ＲＦ１ 制限枠
【技術分野】
【０００１】
本発明は、素材となる静止画から動画として観賞されるフォトムービーを作成するための編集条件を設定するフォトムービーの編集条件設定装置及び編集条件設定プログラムに関する。
【背景技術】
【０００２】
フォトムービーは、デジタルカメラ等を用いて記録された静止画を加工編集して特殊効果を施すことにより、素材の静止画を動画に変換したものである。この特殊効果には、静止画の一部の領域に注目してズームイン／ズームアウトする電子ズーム効果、クローズアップした状態で画像をスクロールさせる電子パーン効果、画像を縮小表示して直線又は曲線状に移動させる移動効果、特定の一点を中心に画像を回転させる回転効果、歪み（スキュー）を与える歪曲効果、これらを組み合わせた複合効果等がある。
【０００３】
フォトムービーでは、これらの特殊効果を使用して静止画に対する視点を擬似的に変化させることにより、特定の注目被写体を演出することや、画像を躍動的に表現することができる。また、複数の画像を同時に表示するマルチ画面効果、アニメーション画像や装飾画像、字幕の合成による視覚効果が併用されることや、これらの特殊効果を与えずにスライドショーとして画像を表示するものなど、その表示形態には様々なものがある。なお、以下の説明では、これらの特殊効果をエフェクトと称する。
【０００４】
特許文献１及び非特許文献１には、フォトムービーを作成するためのソフトウェアについて記載されている。これらのソフトウェアでは、フォトムービーの素材となる静止画を選択した後に、再生順序やエフェクトの種類等からなる編集条件を設定することでフォトムービーを作成することができる。作成されたフォトムービーは、これらのソフトウェア上で観賞することができる。また、フォトムービーの映像を汎用的なデジタル動画フォーマットに変換し、ＤＶＤ等の光ディスクに記録すれば、上記ソフトウェアを用いることなく、家庭用ＤＶＤプレイヤー等でフォトムービーを観賞できる。
【０００５】
非特許文献１に記載されたソフトウェアには、全ての画像の編集条件をユーザーが設定できるマニュアル編集モードと、素材とする画像を選択するだけでフォトムービーが自動的に作成される自動編集モードが用意されている。自動編集モードでは、静止画の選択順で再生順序が決定され、各画像のエフェクトの種類等はプログラムにより自動で設定されるので、操作手順が非常に簡単になる。
【特許文献１】特開平１０−２００８４３号公報
【非特許文献１】株式会社デジタルステージ LIFE* with-Photo-Cinema ［平成１６年４月６日検索］インターネット＜ＵＲＬ：http://www.digitalstage.net/jp/product/life/index.html＞
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上述の自動編集モードは、画像の内容に基づいて適切にエフェクトが設定されるものではないため、電子ズーム効果や電子パーン効果のように画像を拡大表示するエフェクトが選択されたときに、人物の被写体を無視した映像になることがあり、ユーザーの希望する作品が得られにくいという欠点がある。また、従来のマニュアル編集モードを使用してこのような事態を回避しようとすると、画像を拡大表示するために切り出される静止画の特定の一部を決める切り出し領域の位置や大きさをユーザーが詳細に設定しなければならず、各画像の人物を画面上でバランスよく表示させるためには、大変な手間がかかるという問題がある。また、人物に限らず、風景や建物等を注目被写体にする場合もあることから、ユーザーの希望する作品を得るためには編集作業に多大な労力を要するという問題があった。
【０００７】
本発明は、上記問題点を考慮してなされたもので、マニュアル編集モードを用いて人物の被写体を見映えよく表示するために必要な編集作業の手間が従来に比べて軽減でき、風景や建物等の人物以外の被写体を注目被写体にすることができ、ユーザーの希望する作品をより簡単に作成できるようにしたフォトムービーの編集条件設定装置及び編集条件設定プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するために、本発明は、静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定するフォトムービーの編集条件設定装置において、前記静止画から人物の顔画像を検出する顔画像検出手段と、ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段とを備えたことを特徴とする。
【０００９】
前記切り出し領域指定手段は、前記静止画上にある１つの任意のポイントが指定されることにより、指定されたポイントを基点として所定の大きさを有する切り出し領域を画定することを特徴とする。
【００１０】
前記顔画像検出手段は、前記切り出し領域内の画像から前記顔画像を検出することを特徴とする。
【００１１】
前記切り出し領域内の画像を拡大表示させる場合には、前記切り出し領域内の画素数が予め決められた基準値よりも小さい時に、前記切り出し領域の大きさが前記基準値を上回る画素数となるように調整する画素数調整手段を備えたことを特徴とする。
【００１２】
前記切り出し領域調整手段による切り出し領域の調整を実行するか否かを選択するための領域調整選択手段を備えたことを特徴とする。
【００１３】
前記顔画像検出手段によって顔画像が検出された静止画に対し、画質補正処理を行う第１の画質補正手段を備えたことを特徴とする。
【００１４】
記憶媒体から前記静止画の画像データを読み出す画像読み出し手段と、前記編集条件の設定を行う前に、読み出された画像データに画質補正処理を行う第２の画質補正手段を備えたことを特徴とする。
【００１５】
また、本発明の編集条件設定プログラムは、静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定する処理をコンピュータに実行させるものであり、前記静止画から人物の顔画像を検出する顔画像検出手段と、ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段としてコンピュータを機能させることを特徴とする。
【発明の効果】
【００１６】
本発明によれば、画像の拡大表示を伴う電子ズーム効果、電子パーン効果のように、切り出し領域を設定する必要のあるエフェクトに関する編集条件を設定する場合に、ユーザーにより指定された切り出し領域内に、静止画から検出された人物の顔画像が存在するか否かを判定し、切り出し領域内に顔画像が存在すると判定された場合には、顔画像の位置又は大きさの少なくとも一方に基づいて切り出し領域が調整されるから、人物に注目した最適な切り出し領域を簡単に設定でき、人物の顔を見映えよく画面内に収めたフォトムービーを得ることができるる。また、風景や背景の一部に注目した切り出し領域を設定することができ、ユーザーの多くの意図を反映させたフォトムービーを得ることができる。
【００１７】
また、ユーザーにより切り出し領域を指定する操作がなされる際、静止画上の任意の１点が指定されることで指定されたポイントを基点とする所定の大きさの切り出し領域が画定されるから、切り出し領域の指定が簡単になる。
【００１８】
また、画面に表示された静止画上で切り出し領域を指定し、この切り出し領域内の画像から顔画像を検出するようにしたので、静止画全体から顔画像を検出する場合に比べて顔画像の検出に要する時間を短縮できる。
【００１９】
また、予め決められた基準値を下回る画素数の切り出し領域を指定できないようにしたから、過度に小さい切り出し領域が指定された時に、切り出し領域内の画像が拡大される倍率が極端に大きくならず、表示される画像が粗くなる画質の劣化によってフォトムービーの品質が低下することを防止できる。
【００２０】
また、切り出し領域の調整を有効にするか無効にするかを選択できるようにしたから、切り出し領域内の画像から顔画像が検出された場合でも、人物と背景とをバランスよく収めた切り出し領域を設定でき、ユーザーのより多くの意図を反映させたフォトムービーを得ることができる。
【００２１】
顔画像が検出された静止画に対して画質補正処理を行うことにより、顔画像が拡大表示された際の画像の粗さによるフォトムービーの品質の低下を小さくすることができる。
【００２２】
記憶媒体から読み出される全ての静止画に対して画質補正処理を行うことにより、顔画像の検出精度を高めることができるとともに、編集条件の設定時にフォトムービーの品質を知ることができる。
【発明を実施するための最良の形態】
【００２３】
図１において、フォトムービー注文受付システム１０は、注文受付機１１とフォトムービー出力機１２とにより構成されている。注文受付機１１とフォトムービー出力機１２は同一のＤＰＥ店等の店舗内に設置され、店舗の構内ネットワーク（ＬＡＮ）により互いに通信可能に接続されている。なお、注文受付機１１がフォトムービー出力機１２に対して遠隔地に設置される場合には、両者がインターネットを介して通信可能に接続されてもよい。
【００２４】
注文受付機１１は、顧客が注文内容を入力するための入力操作部１５と、注文内容を表示するための表示部１６とを備えている。入力操作部１５は、表示部１６の表示画面と一体に設けられたタッチパネルからなり、画面上に表示された選択キー等の位置に触れることで入力処理が行われる。メディア読取り部１７は、顧客が持参した記憶媒体から画像データを読取るもので、メモリカード１８とＣＤ又はＤＶＤの光ディスク１９とからデータの読取りが可能である。メモリカード１８は、デジタルカメラに着脱自在であり、撮影画像を保存するために用いられる。光ディスク１９は、パーソナルコンピュータ等に保存された画像データがコピーされ、メモリカード１８よりも多くの撮影画像を保存できる大容量記憶媒体である。
【００２５】
通信部２１は、注文受付機１１とフォトムービー出力機１２との間でデータの送受信を行う。レシート出力部２２は、顧客が商品を受け取る際の引換証となるレシート２３を発行する。レシート２３には、顧客の注文内容を識別するための識別情報が印刷されている。この識別情報は、注文番号、注文を受付けた受付機の識別コード、商品の受渡し日時及び受渡し店舗を示す情報等がバーコードと文字でそれぞれ記録されている。
【００２６】
制御部２５及び編集条件設定部２６は、注文受付機１１に内蔵された記憶装置に格納されたオペレーティングシステムとフォトムービーの編集条件を設定する編集条件設定プログラムとをマイクロプロセサに実行させることによりそれぞれ実現される。この記憶装置は、例えばハードディスク記憶装置（ＨＤＤ）又は多数のメモリチップからなるメモリユニットにより構成される。制御部２５は、メディア読取り部１７，通信部２１等の各ハードウェアを制御し、入力操作部１５でなされた操作に応じて各部の動作を管理する。
【００２７】
編集条件設定部２６では、顧客の入力操作等によりフォトムービーに使用する各静止画についてエフェクトの有無やその種類等の編集条件を設定するための処理が行われる。編集条件設定部２６は、予め用意されたシナリオテンプレートに従って全ての静止画のエフェクトを自動的に決定する自動編集モードと、顧客の手動設定により画像ごとにエフェクトの設定が行われるマニュアル編集モードとを有する。自動編集モードのシナリオテンプレートには、季節や年間行事等のテーマ別に複数種類のものが用意されており、旅行用のテンプレート、結婚式や卒業式用のテンプレート、正月、ひなまつり、七夕、クリスマス用のテンプレートなどがある。テンプレートごとに、撮影画像に合成される装飾画像の種類や、選ばれやすいエフェクトが異なっている。
【００２８】
プレビュー動画出力部２８は、編集条件設定部２６により設定された編集条件に基づいて、実際に作成されるフォトムービーと同様にエフェクトが付与されたプレビュー用フォトムービーを出力する。プレビュー動画出力部２８は、メモリカード１８や光ディスク１９から読み出した撮影画像の画素数を小さくした低解像度画像を生成し、この低解像度画像からプレビュー用フォトムービーを作成する。低解像度画像を用いることで、プレビュー用フォトムービーの生成及び再生表示に要するマイクロプロセサの負荷が軽減される。プレビュー用フォトムービーは表示部１６に表示され、その仕上がりの品質が顧客に伝えられる。
【００２９】
編集条件設定部２６は、シナリオデータ生成部２９と、切り出し領域設定部３０と、顔画像検出部３１とを有している。シナリオデータ生成部２９は、画像の再生順序、各画像のエフェクトの有無やその種類等が指定された編集条件を組み込んだシナリオデータを作成する。シナリオデータは、エフェクトの種類やその詳細な設定内容が画像データのファイル名に関連付けされることにより構成される。シナリオデータは、注文情報の一部として静止画の画像データとともにフォトムービー出力機１２に送信される。
【００３０】
切り出し領域設定部３０は、静止画の一部を切り出して特殊効果を付与するための切り出し領域を設定する。この切り出し領域は、静止画の一部に注目してズームイン又はズームアウトを行うズームエフェクトや、クローズアップした状態で画像をスクロールさせるパーンエフェクト、静止画の一部を除いて暗転表示することにより静止画にスポットライトを当てたような効果を出すスポットライトエフェクト等、静止画中の注目被写体を演出したい場合に使用されるエフェクトのパラメータである。
【００３１】
例えば、ズームエフェクトは、静止画全体を縮小又は等倍表示した状態から切り出し領域により定まる表示範囲の間で倍率を変化させて静止画を表示する。すなわち、切り出し領域により、ズームインの終了時の表示範囲、ズームアウトの開始時の表示範囲が定められる。また、パーンエフェクトでは、パーンの開始及び終了時にクローズアップされる画像の抽出範囲が定められ、スポットライトエフェクトでは、明るく表示される領域が定められる。ズームエフェクトやパーンエフェクトでは、フォトムービーを再生表示する表示デバイスの画面のアスペクト比に基づいてアスペクト比が固定された矩形の切り出し領域が設定され、スポットライトエフェクトや他のエフェクトでは切り出し領域の形状を円形等の他の形状に指定することができる。なお、ズームエフェクトでは、１つの切り出し領域が設定され、パーンエフェクトでは、複数の切り出し領域が設定される。これらの切り出し領域は、表示部１６の画面上に切り出し枠Ｆ１１（図４参照）として表示される。
【００３２】
顔画像検出部３１は、静止画中に存在する人物の顔画像を検出する。顔画像の検出が行われる際には、顔画像を検出する範囲が切り出し領域によって指定され、切り出し領域内の顔画像が検出される。顔画像の検出処理は、静止画の画素ごとの色情報に基づいて肌色である皮膚が識別され、さらに瞳や眉毛、髪の有無から顔画像が識別される。また、顔の皮膚を示す肌色の画素と髪や眉毛、瞳を示す黒色の画素の配列パターンや、背景との輝度差等に基づき顔及び頭部の輪郭が識別され、その形状が特定される。
【００３３】
切り出し領域設定部３０には、顔画像検出部３１により検出された人物の顔が見映えよく表示されるように、検出された顔画像に基づいて顔画像の天地左右の余白を最適にする切り出し領域を画定するための推奨余白データが記憶されている。様々な撮影シーンにより最適とされる余白が異なるため、推奨余白データは、例えば、素材の静止画が横長の画像である場合と縦長の画像である場合ごとに、検出された顔画像の数（人数）や、それぞれの顔の位置関係、顔画像が静止画全体に占める割合等の特徴情報に応じて分類されたものが予め用意されている。
【００３４】
切り出し領域設定部３０は、顔画像検出部３１により検出された顔画像の特徴情報に基づき切り出し領域の位置及び大きさを調整する自動調整モードと、指定された切り出し領域を調整せず、顧客の入力操作をそのまま反映させる手動調整モードの２種類の動作モードを有している。自動調整モードと手動調整モードは、指定された切り出し領域に顔画像が存在するか否かにより切り替えられ、切り出し領域内に顔画像が存在する場合には自動調整モードに移行し、顔画像が存在しない場合には手動調整モードに移行する。
【００３５】
なお、所定の入力操作を行えば、自動調整モードから強制的に手動調整モードに移行させることもでき、切り出し領域から顔画像が検出された後、これにより決まる切り出し領域の適否に応じて、顧客が自由に指定できる切り出し領域に変更できる。手動調整モードでは、指定される切り出し領域の最低限の大きさが制限されており、切り出し領域が包含する画素数の下限が基準値として定められている。これにより、過度に小さい切り出し領域が指定されることが防止される。
【００３６】
画質補正部３２は、画像データに対して色調補正等の画質補正処理を行う。画質補正処理には、メディア読取り部１７から読取られた全ての画像データに対して一律に行われるセットアップ補正処理と、顔画像検出部３１により人物の顔が認識された際に行われる高品位処理とがある。セットアップ補正処理では、全ての画像に対し、グレーバランスの調整、肌色画素の調子を整える色合い調整、コントラスト調整等の基本的な画質補正処理が行われる。高品位処理は、ズームエフェクトやパーンエフェクトのように、顔画像検出部３１により人物の顔が存在する静止画に対して行われるもので、撮影時のレンズ性能に起因する歪曲や周辺減光の補正、赤目補正処理、ノイズ低減処理、シャープネス補正、ジャギー低減処理等の画像の品質を高めるための画質補正処理が行われる
【００３７】
フォトムービー出力機１２は、注文受付機１１より送信された注文情報を受信する通信部３５と、受信した注文情報が記憶される注文情報記憶部３６と、注文情報に組み込まれたシナリオデータを解析し、送信された画像データに基づいてフォトムービーを出力するフォトムービー出力部３７と、フォトムービーの映像を汎用的なデジタル動画フォーマットに準拠した映像に変換するビデオムービー変換部３８とを備えている。なお、デジタル動画フォーマットの１つとして、フォトムービーをＤＶＤ映像として観賞できるように、ＭＰＥＧ２−ＤＶＤ−Ｖｉｄｅｏフォーマットが採用されている。
【００３８】
制御部３９は、予め組み込まれた注文処理プログラムに基づいて各部を制御することにより、注文情報の処理から商品の仕上げまでの一連の流れを管理する。メディア記録部４０は、ＣＤ又はＤＶＤからなる光ディスク４１にフォトムービーのデータを記録する。ラベル印刷部４２は、注文内容を識別するための識別情報とフォトムービーの内容を示すラベル画像を光ディスク４１の表面にプリントする。
【００３９】
次にフォトムービー注文受付システム１０の作用について説明する。図２において、注文受付機１１のメディア読取り部１７に、静止画の画像データが記憶されたメモリカード１８又は光ディスク１９の記憶媒体がセットされると、制御部３９がセットされた記憶媒体を検知し、画像データの読み込みが開始される。
【００４０】
記憶媒体から画像データがコピーされると、画質補正部３２によって全ての画像データに対してセットアップ補正処理が行われる。また、セットアップ補正処理がなされた画像データからサムネイル画像が生成され、このサムネイル画像が表示部１６に一覧表示される。表示されたサムネイル画像を参考にしてフォトムービーの素材として用いる画像を選択することができ、全ての画像を使用するか、一部の画像を使用するかを決定する操作がなされる。
【００４１】
画像の選択が終了すると、選択された画像を用いてフォトムービーを自動で作成する自動編集モードと、再生順序やエフェクトの種類等を顧客が選択できるマニュアル編集モードのいずれかを選択する操作がなされる。自動編集モードが選択されると、編集条件設定部２６により、サムネイル画像の配列順に再生順序が決められ、各画像のエフェクトの有無やその種類が決定される。このとき、年間行事や季節等のテーマ別に予め用意されたシナリオテンプレートを選ぶことができる。
【００４２】
マニュアル編集モードでは、画像の再生順序、各画像のエフェクトの有無、エフェクトの種類、エフェクトのかけ方を示す詳細設定等の編集条件を顧客が自ら設定する。読み込まれた画像のサムネイル画像が表示部１６に一覧表示された状態で、入力操作部１５を介して表示部１６の画面上で画像の配列順を変更することにより画像の再生順序を決めることができる。また、所定の画像についてエフェクトを与えることを指定する項目が選択されることにより、そのエフェクトの詳細設定を行うためのステップに移る。
【００４３】
エフェクトには、ズームエフェクト、パーンエフェクトのように拡大表示を伴うエフェクト、静止画の一部を除いて暗転させるスポットライトエフェクト、静止画を画面上に縮小表示して画面の端から端へ直線又は曲線状に移動させるムーブエフェクトや、前に表示された静止画を徐々に透明にして次に表示される画像を徐々に濃くするフェードインエフェクト、装飾画像や字幕を合成する合成エフェクト、これらを組み合わせた複合エフェクトなど、多くの種類が用意されている。以下の説明では、パーンエフェクトを選択した場合を例にして説明する。
【００４４】
図３及び図４において、パーンエフェクトが選択されると、パーン動作の基点を指定するステップに移る。パーンエフェクトでは、パーン動作の基点として、パーン開始位置を示す始点、終了位置を示す終点となる切り出し領域が指定され、必要に応じて始点と終点の間の中継点を指定することができる。図４（ｂ）に示すように、表示部１６の画面上には、エフェクトを指定した静止画を表示する編集ウインドウＷ１と、切り出し領域によって切り出される画像を表示するプレビューウインドウＷ２と、エフェクトの詳細設定を行うための設定ウインドウＷ３とが表示される。パーン動作の基点を指定する際には、編集ウインドウＷ１の画面上で人物の顔を指定する。
【００４５】
編集ウインドウＷ１には、パーンエフェクトが指定された編集対象画像として、例えば、人物の被写体Ａ１及び被写体Ａ２，風景の被写体Ａ３が写る画像が表示される。設定ウインドウＷ３には、パーン動作の始点、終点、中継点を指定するための設定キーＫ１，Ｋ２，Ｋ３がそれぞれ表示される。また、自動調整モード時に、強制的に手動調整モードに切り替えるための手動調整キーＫ４と、顔画像検出部３１により検出できなかった人物の顔を指定するときに、これを顔画像として顔画像検出部３１に認識させる認識キーＫ５が表示される。パーン動作の始点を指定するためには、設定キーＫ１が操作される。表示部１６の画面上には、編集ウインドウＷ１上のポイントを指定するように促すメッセージが表示される。
【００４６】
パーン動作の始点が指定される際、顧客が被写体Ａ１の顔をクローズアップすることを希望した場合には、被写体Ａ１の顔の位置が指定される。編集ウインドウＷ１には、図４（ｂ）に示すように、指定された座標を示すマークＭ１が表示され、マークＭ１を中心とする矩形状をした所定の大きさの切り出し領域が切り出し枠Ｆ１１によって表示される。なお、切り出し領域、すなわち切り出し枠Ｆ１１の大きさや形状は初期設定により決まっているが、変更することも可能である。
【００４７】
顔画像検出部３１は、切り出し枠Ｆ１１の内部の顔検出処理を行う。顔検出処理により、切り出し領域内から被写体Ａ１の顔が検出される。また、被写体Ａ１の顔の輪郭が特定され、特定された輪郭に基づいて顔画像の認識範囲が反転表示される。顔画像の検出数より切り出し枠Ｆ１１に含まれる人数が１人であることが特定される。切り出し領域設定部３０は、被写体Ａ１の顔の位置及び大きさに基づいて推奨余白データを参照し、最適な切り出し領域の位置及び大きさを算出する。切り出し枠Ｆ１１は、最適化された切り出し枠Ｆ１２に調整される。切り出し枠Ｆ１２の中心は、顔の認識範囲の中心Ｃ１と同一である。プレビューウインドウＷ２には、切り出し枠Ｆ１２によって切り出される画像が表示される。このように切り出し領域が決定し、パーン動作の始点の設定が終了する。
【００４８】
図５において、次にパーン動作の終点の設定が行われる。顧客が被写体Ａ２の顔をクローズアップすることを希望した場合には、被写体Ａ２の顔の位置が指定される。編集ウインドウＷ１には、図５（ｂ）に示すように、指定された座標を示すマークＭ２が表示され、マークＭ２を中心とする所定の大きさの切り出し領域が切り出し枠Ｆ２１によって表示される。顔画像検出部３１は、切り出し枠Ｆ２１について顔検出処理を行う。しかし、被写体Ａ２は横顔で写っているため、顔としての特徴が不足しているため、被写体Ａ２の顔画像は検出ができない。従って、切り出し領域設定部３０は、切り出し枠Ｆ２１の内部には顔が存在しないものと判断し、切り出し枠Ｆ２１を二重線で表示する。このとき、認識キーＫ５が点滅し、顔画像の検出のやり直しを促すメッセージが表示される。顧客は、切り出し枠Ｆ２１が二重線で表示されたことと、認識キーＫ５が点滅したことにより、顔画像の検出が失敗したことを理解できる。
【００４９】
そこで、人物の顔検出のやり直しを行うために認識キーＫ５が操作される。認識キーＫ５が操作されると、顔の位置を指定するように促すメッセージが表示される。顧客はメッセージに従い、被写体Ａ２の顔の位置を指定し、指定された座標がマークＭ３によって表示される。顔画像検出部３１は、指定された座標を示すマークＭ３の周辺に分布する肌色画素を検出し、肌色画素が集合した領域を顔とみなして、顔及び頭部の輪郭を特定する。これにより、被写体Ａ２の顔画像が強制的に認識され、顔画像と推定された範囲が反転表示される。切り出し領域設定部３０は、被写体Ａ２の顔の位置及び大きさに基づいて推奨余白データを参照し、最適な切り出し領域の位置及び大きさを算出する。切り出し枠Ｆ２１は、調整された切り出し枠Ｆ２２として更新される。切り出し枠Ｆ２２の中心は、顔の認識範囲の中心Ｃ２と同一である。プレビューウインドウＷ２には、切り出し枠Ｆ２２によって切り出される画像が表示される。このように切り出し領域が決定し、パーン動作の終点の設定が終了する
【００５０】
図６において、パーンエフェクトの中継点として、山の背景である被写体Ａ３上の座標を指定する操作がなされると、その座標を示すマークＭ４とともに切り出し枠Ｆ３１が表示される。顔画像検出部３１は、切り出し枠Ｆ３１によって画定される切り出し領域から顔画像の検出処理を行うが、山の背景である被写体Ａ３から顔の特徴を見つけることはできないため、顔画像を検出することはできない。切り出し領域設定部３０は、切り出し枠Ｆ３１を二重線で表示する。このとき、手動調節キーＫ４が点灯し、手動調節モードであることが報知される。認識キーＫ５が点滅し、顔画像の検出のやり直しを促すメッセージが表示される。なお、認識キーＫ５を操作し、被写体Ａ３の特定の座標を入力しても、顔画像を検出することはできず、切り出し枠Ｆ３１は二重線で表示されたままになる。
【００５１】
切り出し枠Ｆ３１の内部には、切り出し枠Ｆ３１の大きさを制限する制限枠ＲＦ１が表示される。切り出し枠Ｆ３１は、画面上での操作によりその位置や大きさを変更できるが、制限枠ＲＦ１よりも小さく変更することはできず、切り出し枠Ｆ３１の最小限の大きさが制限される。制限枠ＲＦ１は、切り出し枠Ｆ３１内の画像が過度に大きい倍率で拡大表示されることによる画質の劣化を防止する役目をする。切り出し枠Ｆ３１を手動調整し、位置及び大きさが決まると、これを確定する操作がなされる。
【００５２】
このようにして、パーンエフェクトの始点、終点、中継点に関し、それぞれ切り出し枠Ｆ１２，２２，３１を決定し、パーンエフェクトの詳細設定が終了すると、画質補正部３２によりパーンエフェクトが指定された画像の高品位処理が行われる。高品位処理により、被写体Ａ１，Ａ２，Ａ３を拡大表示したときに生じる画質の低下が小さくされ、フォトムービーの品質が損なわれることが防止される。なお、セットアップ補正処理や高品位処理では、人物の見映えを高めるのに適した画質調整が行われるため、被写体Ａ３のような非人物の被写体に対しては、切り出し領域の設定時などに、色調補正等を別途行えるようにしてもよい。
【００５３】
図７において、上述のようにパーンエフェクトの基点が設定されたフォトムービーは、被写体Ａ１の顔がクローズアップされた映像から始まり、画面上で被写体Ａ１から被写体Ａ３に向かって画面が移動して擬似的なパーンが再現される。また、被写体Ａ３がクローズアップされると、画面が被写体Ａ２に向かって移動し、被写体Ａ２の横顔をクローズアップした映像へ移行して終了する。なお、パーンエフェクトでは、切り出し枠Ｆ１２等によって切り出された画像を画面全体に拡大して表示するため、切り出し枠Ｆ１２等が小さくなればその分だけ拡大倍率は大きくなり、切り出し枠Ｆ１２が大きければ拡大倍率が小さくなる。また、パーン動作の始点と終点の少なくとも２つの切り出し領域が指定されるため、例えば、切り出し枠Ｆ１２，Ｆ２２，Ｆ３１の大きさが異なれば、パーン動作中に拡大倍率が変化することになる。
【００５４】
図２において、その他の画像についてもエフェクトの有無、その種類等の設定がなされ、全ての編集条件の入力が終了すると、プレビュー動画出力部２８によりプレビュー用のフォトムービーが作成される。プレビュー用フォトムービーは表示部１６に表示され、顧客により確認される。編集条件の変更の必要がなければ次のステップに移る操作がなされ、氏名や住所等の個人情報を入力するステップに移る。これらの入力処理が終了すると、シナリオデータ生成部２９により全ての編集条件を記録したシナリオデータが作成される。また、制御部２５は、シナリオデータ、画像データ、顧客の個人情報、注文内容を識別するための識別情報等をまとめた注文情報を作成し、通信部２１を介して注文情報をフォトムービー出力機１２に送信する。
【００５５】
注文情報の送信が終了すると、制御部３９はレシート出力部２２を作動させる。レシート出力部２２が、注文内容の識別情報をプリントしたレシート２３を発行すると、注文受付処理が終了する。
【００５６】
注文情報を受信したフォトムービー出力機１２では、注文情報に組み込まれたシナリオデータ及び画像データに基づいてフォトムービーが作成される。作成されたフォトムービーは、注文内容に基づき、ＤＶＤ映像として観賞できるＭＰＥＧ２−ＤＶＤ−Ｖｉｄｅｏフォーマット等の映像データに変換され、この映像データがメディア記録部４０によりＤＶＤ等の光ディスク４１に記録される。フォトムービーが記録された光ディスク４１は、レシート２３と引換に顧客に渡される。
【００５７】
以上のように、本発明の実施形態について説明したが、本発明は上記実施形態に限られるものではなく、例えば、注文受付機１１とフォトムービー出力機１２のように、編集条件の入力設定とフォトムービーの作成を別々の機器により分担して行うことに限らず、これらを１つの装置により行えるようにしてもよい。また、注文受付機１１の機能と同等なアプリケーションプログラムを配布し、これを顧客が所有するパーソナルコンピュータに組み込むことにより、編集条件の入力設定とフォトムービーの注文を自宅からインターネット等の通信手段を介して行えるようにしてもよい。
【００５８】
また、顔画像検出部３１により複数の顔画像が複数検出された場合には、切り出し領域を決定する基準となる顔画像を指定するステップを追加することで、検出された顔画像の全て又は一部を自由に指定できるようにし、撮影シーンの多様な複数の静止画を素材とする場合であっても、簡単な操作でフォトムービーの編集条件を設定できるようにすることが好ましい。また、人物の顔画像を検出することに加え、人物の全身像、あるいは動物や植物、観光名所を例とする建造物や地形等が検出できるようにしてもよい。
【００５９】
上記実施形態は、表示部１６の画面と一体にしたタッチパネルによって入力操作部１５を構成しているが、ポインティングデバイス等の他の入力装置により構成してもよい。切り出し領域を指定する際には、上記実施形態に示すように静止画上の１点の座標を指定することに限らず、矩形の対角線上に位置する２つの座標を指定して矩形の領域を直接指定するようにしてもよい。また、切り出し領域を指定した後に人物の顔画像を検出することに限らず、画像全体から人物の顔を検出した後に切り出し領域の指定が行えるようにすれば、検出されない顔画像の有無により、認識キーＫ５の操作を要するか否かが直ちに分かり、便利である。
【００６０】
また、商品形態としては、ＤＶＤメディアにビデオムービー形式のデータを記録したものに限らず、例えば、フォトムービーのビューワーソフトをユーザーに配布し、このビューワーソフトをインストールしたコンピュータ上で再生できる形式のデータを記録してもよい。また、素材となる静止画は、デジタルカメラで記録された画像の他に、プリント写真や写真フイルムをスキャナーで読取って得られた画像や、ビデオカメラ等で撮影して得られた動画から抽出した１フレームの画像であってもよい。
【図面の簡単な説明】
【００６１】
【図１】フォトムービー注文受付システムの概略構成図である。
【図２】注文受付機の処理の流れを示すフローチャートである。
【図３】切り出し領域設定処理の流れを示す説明図である。
【図４】パーンエフェクトの始点設定時における画面の様子を示す説明図である。
【図５】パーンエフェクトの終点設定時における画面の様子を示す説明図である。
【図６】パーンエフェクトの中継点設定時における画面の様子を示す説明図である。
【図７】フォトムービーの映像の移り変わりを示す説明図である。
【符号の説明】
【００６２】
１０ フォトムービー注文受付システム
１１ 注文受付機
１２ フォトムービー出力機
１５ 入力操作部
２６ 編集条件設定部
２８ プレビュー動画出力部
２９ シナリオデータ生成部
３０ 切り出し領域設定部
３１ 顔画像検出部
３２ 画質補正部
Ａ１，Ａ２，Ａ３ 被写体
Ｆ１１，Ｆ１２，Ｆ２１，Ｆ２２，Ｆ３１ 切り出し枠
Ｗ１ 編集ウインドウ
Ｗ２ プレビューウインドウ
Ｗ３ 設定ウインドウ
ＲＦ１ 制限枠
【特許請求の範囲】
【請求項１】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定するフォトムービーの編集条件設定装置において、
前記静止画から人物の顔画像を検出する顔画像検出手段と、
ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、
前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、
前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段とを備えたことを特徴とするフォトムービーの編集条件設定装置。
【請求項２】
前記切り出し領域指定手段は、前記静止画上にある１つの任意のポイントが指定されることにより、指定されたポイントを基点として所定の大きさを有する切り出し領域を画定することを特徴とする請求項１記載のフォトムービーの編集条件設定装置。
【請求項３】
前記顔画像検出手段は、前記切り出し領域内の画像から前記顔画像を検出することを特徴とする請求項１又は２記載のフォトムービーの編集条件設定装置。
【請求項４】
前記切り出し領域内の画像を拡大表示させる場合には、前記切り出し領域内の画素数が予め決められた基準値よりも小さい時に、前記切り出し領域の大きさが前記基準値を上回る画素数となるように調整する画素数調整手段を備えたことを特徴とする請求項１ないし３にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項５】
前記切り出し領域調整手段による切り出し領域の調整を実行するか否かを選択するための領域調整選択手段を備えたことを特徴とする請求項１ないし４にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項６】
前記顔画像検出手段によって顔画像が検出された静止画に対し、画質補正処理を行う第１の画質補正手段を備えたことを特徴とする請求項１ないし５にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項７】
記憶媒体から前記静止画の画像データを読み出す画像読み出し手段と、
前記編集条件の設定を行う前に、読み出された画像データに画質補正処理を行う第２の画質補正手段を備えたことを特徴とする請求項１ないし６にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項８】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定する処理をコンピュータに実行させるフォトムービーの編集条件設定プログラムにおいて、
前記静止画から人物の顔画像を検出する顔画像検出手段と、
ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、
前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、
前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段としてコンピュータを機能させることを特徴とするフォトムービーの編集条件設定プログラム。
【請求項１】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定するフォトムービーの編集条件設定装置において、
前記静止画から人物の顔画像を検出する顔画像検出手段と、
ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、
前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、
前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段とを備えたことを特徴とするフォトムービーの編集条件設定装置。
【請求項２】
前記切り出し領域指定手段は、前記静止画上にある１つの任意のポイントが指定されることにより、指定されたポイントを基点として所定の大きさを有する切り出し領域を画定することを特徴とする請求項１記載のフォトムービーの編集条件設定装置。
【請求項３】
前記顔画像検出手段は、前記切り出し領域内の画像から前記顔画像を検出することを特徴とする請求項１又は２記載のフォトムービーの編集条件設定装置。
【請求項４】
前記切り出し領域内の画像を拡大表示させる場合には、前記切り出し領域内の画素数が予め決められた基準値よりも小さい時に、前記切り出し領域の大きさが前記基準値を上回る画素数となるように調整する画素数調整手段を備えたことを特徴とする請求項１ないし３にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項５】
前記切り出し領域調整手段による切り出し領域の調整を実行するか否かを選択するための領域調整選択手段を備えたことを特徴とする請求項１ないし４にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項６】
前記顔画像検出手段によって顔画像が検出された静止画に対し、画質補正処理を行う第１の画質補正手段を備えたことを特徴とする請求項１ないし５にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項７】
記憶媒体から前記静止画の画像データを読み出す画像読み出し手段と、
前記編集条件の設定を行う前に、読み出された画像データに画質補正処理を行う第２の画質補正手段を備えたことを特徴とする請求項１ないし６にいずれか１つ記載のフォトムービーの編集条件設定装置。
【請求項８】
静止画の一部を切り出してこれに加工編集処理を施して前記静止画を素材とするフォトムービーを作成する際に、前記静止画の一部を切り出す対象となる切り出し領域を前記フォトムービーの編集条件として設定する処理をコンピュータに実行させるフォトムービーの編集条件設定プログラムにおいて、
前記静止画から人物の顔画像を検出する顔画像検出手段と、
ディスプレイの表示画面に表示された前記静止画上で前記切り出し領域を指定するための切り出し領域指定手段と、
前記切り出し領域内に前記顔画像が存在するか否かを判定する顔画像判定手段と、
前記切り出し領域内に前記顔画像が存在する時に、前記切り出し領域内の顔画像の位置及び大きさの少なくとも一方に基づいて前記切り出し領域を調整する切り出し領域調整手段としてコンピュータを機能させることを特徴とするフォトムービーの編集条件設定プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２００６−１４６４２８（Ｐ２００６−１４６４２８Ａ）
【公開日】平成１８年６月８日（２００６．６．８）
【国際特許分類】
【出願番号】特願２００４−３３３４５４（Ｐ２００４−３３３４５４）
【出願日】平成１６年１１月１７日（２００４．１１．１７）
【出願人】（０００００５２０１）富士写真フイルム株式会社 (7,609)
【Ｆターム（参考）】
【公開日】平成１８年６月８日（２００６．６．８）
【国際特許分類】
【出願日】平成１６年１１月１７日（２００４．１１．１７）
【出願人】（０００００５２０１）富士写真フイルム株式会社 (7,609)
【Ｆターム（参考）】
[ Back to top ]