画像処理装置、画像処理方法および画像処理プログラム
【課題】フォトコンテンツのページに画像を自動で配置した後、ユーザが各々のページにおける画像配置の編集作業を容易に行うことができる画像処理装置を提供する。
【解決手段】画像処理装置は、複数の画像をグループに分割し、各々の画像の画像解析情報を生成し、画像解析情報に基づいて、各々のグループから所定数の画像を抽出し、グループから抽出された画像をフォトブックの対応するページに配置する。画像表示部は、ユーザにより指定された編集対象のページに配置された画像が表示される画像編集エリアと、編集対象のページに対応するグループに含まれ、画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示し、画像編集部は、ユーザの指示に基づいて、候補画像表示エリアに表示された候補画像を用いて、画像編集エリアに表示された編集対象のページにおける画像の配置を編集する。
【解決手段】画像処理装置は、複数の画像をグループに分割し、各々の画像の画像解析情報を生成し、画像解析情報に基づいて、各々のグループから所定数の画像を抽出し、グループから抽出された画像をフォトブックの対応するページに配置する。画像表示部は、ユーザにより指定された編集対象のページに配置された画像が表示される画像編集エリアと、編集対象のページに対応するグループに含まれ、画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示し、画像編集部は、ユーザの指示に基づいて、候補画像表示エリアに表示された候補画像を用いて、画像編集エリアに表示された編集対象のページにおける画像の配置を編集する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、フォトブック等の複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理装置、画像処理方法および画像処理プログラムに関するものである。
【背景技術】
【０００２】
フォトブックは、ユーザがデジタルカメラ等で撮影した複数の画像（画像データ）を、インターネットを経由してサービス提供業者に送信することにより、ユーザ（撮影者）が希望するレイアウトの写真集を作成するサービスである。フォトブックを作成する場合、ユーザは、例えば、あらかじめ画像の配置可能な位置が決定されたレイアウトの複数のテンプレートの中から所望のテンプレートを選択し、フォトブックのページ数、各々のページに含める画像、各々のページにおける画像の配置等を自由に決定することができる。
【０００３】
従来のフォトブックの作成方法として、画像の連続性や関連性を考慮し、例えば、撮影時刻等に基づいて、複数の画像をグループに分類し、各々のグループに含まれる画像を各々対応するページに自動配置（自動レイアウト）するものなどが知られている。
【０００４】
例えば、特許文献１には、取得画像、および、取得画像の中からユーザにより選択された選択画像を、被写体、撮影時間帯または撮影シーン等の属性ごとに分類し、属性ごとに、取得画像の数と選択画像の数との比較結果に応じて、選択画像の重要度を示す指標を作成して、選択画像に指標を付与し、選択画像の指標に従い、アルバムテンプレートの各割り当て領域に画像を配置して合成するアルバム自動レイアウト方法が記載されている。
【０００５】
また、特許文献２には、複数の画像情報を含む情報を読み込み、読み込んだ情報に基づいて、ＧＰＳ情報、日時情報、検索キーワード（運動会等）等の検索用情報を画像情報ごとに自動的に作成し、両者を関連付けて記録しておき、入力した検索条件を検索用情報と照合して、検索条件に該当する画像情報を検索して抽出し、抽出した画像情報が示す画像を画面上に表示する画像検索装置が記載されている。
【０００６】
また、特許文献３には、画像データの撮影に関わる情報のデータであって、画像データの撮影時に画像データに付帯された付帯情報データに基づいて、ページごとに分類するための条件を設定し、付帯情報データと条件に基づいて、画像データをページごとに分類し、分類された画像データをページごとに表示画面に表示する画像表示方法が提案されている。
【０００７】
また、特許文献４には、複数の画像データから類似する画像データを検索し、類似画像データの１つを代表類似画像データとして、電子アルバムのページと対応する編集領域に表示し、それ以外の類画像データを電子アルバムのページとは独立した退避領域に表示し、指定された代表類似画像データと関連する類似画像データを、退避領域に表示された他の画像データと区別して表示する電子アルバム編集装置の制御方法が記載されている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００９−２２３７６４号公報
【特許文献２】特開平１１−１７５５３３号公報
【特許文献３】特許第３５２８２１４号公報
【特許文献４】特許第４４３８０６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
従来の画像処理装置として、複数の画像の中から、所定数の画像を自動で選択して、フォトブックの対応するページに配置するものが知られている。しかし、このような自動画像選択および自動レイアウトが高機能化しても、ユーザの思い（嗜好）を１００％理解して画像の配置に反映させることは難しい。従って、自動レイアウトに基づいて、さらにユーザによる画像配置の編集作業が必須となる。
【００１０】
本発明の目的は、フォトコンテンツのページに画像を自動で配置した後、ユーザが各々のページにおける画像配置の編集作業を容易に行うことができる画像処理装置、画像処理方法および画像処理プログラムを提供することにある。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、本発明は、複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理装置であって、
複数の画像を、画像の付帯情報に基づいて、所定数のグループに分割する画像分割部と、
各々の画像を解析して、その画像解析情報を生成する画像解析部と、
グループ毎に、画像解析情報に基づいて、グループに含まれる画像の中から所定数の画像を抽出する画像抽出部と、
グループ毎に、画像抽出部によりグループから抽出された画像を、グループに対応するページに配置する画像配置部と、
画像配置部により画像が配置されたページを表示する画像表示部と、
ユーザの指示に基づいて、画像配置部により画像が配置されたページにおける画像の配置を編集する画像編集部とを備え、
画像表示部は、ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、第１のページに対応する第１のグループに含まれ、画像編集部による画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示するものであり、
画像編集部は、ユーザの指示に基づいて、候補画像表示エリアに表示された候補画像を用いて、画像編集エリアに表示された第１のページにおける画像の配置を編集するものであることを特徴とする画像処理装置を提供するものである。
【００１２】
ここで、画像表示部は、第１のページに対応する第１のグループに含まれ、第１のページには配置されていない候補画像のみを候補画像表示エリアに表示するものであることが好ましい。
【００１３】
また、画像表示部は、第１のページに対応する第１のグループに含まれる全画像を、第１のページに配置されている画像と配置されていない画像とを識別可能に、候補画像表示エリアに表示するものであることが好ましい。
【００１４】
また、画像表示部は、候補画像表示エリアに画像解析情報を表示するものであることが好ましい。
【００１５】
また、画像表示部は、全てのグループの候補画像に、各々の候補画像が含まれるグループを表す識別情報を付し、グループ毎にまとめて候補画像表示エリアに表示するものであることが好ましい。
【００１６】
また、画像表示部は、第１のページに対応する第１のグループに含まれる候補画像を、候補画像表示エリアの先頭位置に表示するものであることが好ましい。
【００１７】
また、画像表示部は、さらに、第１のページに対応する第１のグループに含まれる画像の枚数以下の画像を配置する画像配置領域を有するテンプレートが表示されるテンプレート表示エリアを表示画面内に表示するものであり、
画像配置部は、テンプレート表示エリアに表示されたテンプレートの中から、ユーザにより指定された第１のテンプレートを第１のページに適用し、画像抽出部により第１のページに対応する第１のグループから抽出された画像を、第１のテンプレートの画像配置領域に配置するものであることが好ましい。
【００１８】
また、画像編集部は、第１のテンプレートから第２のテンプレートに変更されて画像配置領域の数が増加した場合に、第１のページに対応する第１のグループに含まれる候補画像の中から、画像解析情報に基づいて、画像配置領域の数の増加分の第１の候補画像を取得するものであり、
画像配置部は、第２のテンプレートを第１のページに適用し、第１のグループから抽出された画像および第１の候補画像を、第２のテンプレートの画像配置領域に配置するものであることが好ましい。
【００１９】
また、画像編集部は、第１のテンプレートから第３のテンプレートに変更されて画像配置領域の数が減少した場合に、第１のページに配置された画像の中から、画像解析情報に基づいて、画像配置領域の減少分の第１の画像を取得するものであり、
画像配置部は、第３のテンプレートを第１のページに適用し、第１のグループから抽出された画像から第１の画像を削除した残りの画像を、第３のテンプレートの画像配置領域に配置するものであることが好ましい。
【００２０】
また、画像表示部は、第１の画像追加ボタンを表示画面内に表示するものであり、
画像編集部は、ユーザにより第１の画像追加ボタンが押下された場合に、第１のページに対応する第１のグループに含まれる候補画像の中から、画像解析情報に基づいて第２の候補画像を指定し、第２の候補画像を、第１のページに追加するものであることが好ましい。
【００２１】
また、画像表示部は、第２の画像追加ボタンを表示画面内に表示するものであり、
画像編集部は、候補画像表示エリアに表示された候補画像の中から、ユーザにより１以上の候補画像が指定された後、第２の画像追加ボタンが押下された場合に、１以上の候補画像を、１以上の候補画像が含まれるグループに対応するページに追加するものであることが好ましい。
【００２２】
また、画像表示部は、画像入替ボタンを表示画面内に表示するものであり、
画像編集部は、画像編集エリアに表示された画像の中から、ユーザにより１以上の画像が指定された後、画像入替ボタンが押下された場合に、第１のページに対応する第１のグループに含まれる候補画像の中から、画像解析情報に基づいて、１以上の画像と同数の第３の候補画像を指定し、第３の候補画像と１以上の画像とを入れ替えるものであることが好ましい。
【００２３】
また、画像配置部は、画像抽出部によりグループから抽出された画像を、画像解析情報に基づいて、グループに対応するページに配置するものであることが好ましい。
【００２４】
また、画像配置部は、画像抽出部によりグループから抽出された画像を、グループに対応するページに画像の撮影時刻順に配置し、
さらに、第３の候補画像と１以上の画像とが入れ替えられた後、画像編集エリアに表示された画像を撮影時刻順に並べ替えるものであることが好ましい。
【００２５】
また、画像編集部は、ユーザの再レイアウトの指示に基づいて、画像表示部に表示された第１のページに適用されているテンプレートとは別のテンプレートを、テンプレート表示エリアに表示されたテンプレートの中から選択し、第１のページで使用されている画像を、別のテンプレートの画像配置領域に配置するものであり、
画像表示部は、画像編集部によって別のテンプレートの画像配置領域に画像が配置された第１のページを画像編集エリアに表示するものであることが好ましい。
【００２６】
また、画像編集部は、第１のページで使用されている画像を別のテンプレートの画像配置領域に配置する場合に、ユーザによって指定された画像を優先して配置するものであることが好ましい。
【００２７】
また、画像解析情報は、個々の画像解析項目の解析結果の少なくとも１つに基づいて生成される評価値であることが好ましい。
【００２８】
また、画像解析情報は、個々の画像解析項目の解析結果そのものであることが好ましい。
【００２９】
また、フォトコンテンツは、所定数のページからなるフォトブック、所定数のページからなるカレンダー、もしくは、所定数の画像が各々のページにランダムにシャッフルされてプリントされた、所定数のページからなるシャッフルプリントであることが好ましい。
【００３０】
また、本発明は、複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理方法であって、
複数の画像を、画像の付帯情報に基づいて、所定数のグループに分割する画像分割ステップと、
各々の画像を解析して、その画像解析情報を生成する画像解析ステップと、
グループ毎に、画像解析情報に基づいて、グループに含まれる画像の中から所定数の画像を抽出する画像抽出ステップと、
グループ毎に、画像抽出ステップでグループから抽出された画像を、グループに対応するページに配置する画像配置ステップと、
画像配置ステップで画像が配置されたページを表示する画像表示ステップと、
ユーザの指示に基づいて、画像配置ステップで画像が配置されたページにおける画像の配置を編集する画像編集ステップとを備え、
画像表示ステップにより、ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、第１のページに対応する第１のグループに含まれ、画像編集ステップでの画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示し、
画像編集ステップにより、ユーザの指示に基づいて、候補画像表示エリアに表示された候補画像を用いて、画像編集エリアに表示された第１のページにおける画像の配置を編集することを特徴とする画像処理方法を提供する。
【００３１】
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラムを提供する。
【００３２】
また、本発明は、に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【発明の効果】
【００３３】
本発明によれば、編集対象のページに対応するグループに含まれる画像のうち、画像抽出部により抽出されなかった残りの画像だけを、もしくは、グループに含まれる全画像を、編集対象のページに配置されている画像と配置されていない画像とを識別可能に、編集作業の候補画像として、候補画像表示エリアに表示することにより、ユーザは、編集対象のページの画像配置の編集に使用可能な候補画像なのかどうかを考慮することなく、画像の選択、追加、入れ替え等の編集作業を簡単に行うことができる。
【図面の簡単な説明】
【００３４】
【図１】本発明の画像処理装置の構成を表す一実施形態のブロック図である。
【図２】画像処理装置の動作を表す一例のフローチャートである。
【図３】複数の画像を、画像の付帯情報に基づいて、所定数のグループに分割する様子を表す一例の概念図である。
【図４】グループ毎に、画像の評価値に基づいて、グループに含まれる画像の中から所定数の画像を抽出する様子を表す一例の概念図である。
【図５】グループ毎に、グループから抽出された画像を、フォトブックの対応するページに配置する様子を表す一例の概念図である。
【図６】画像表示部の表示画面を表す一例の概念図である。
【図７】テンプレートを変更する場合の動作を表す一例のフローチャートである。
【図８】候補画像を変更する場合の動作を表す一例のフローチャートである。
【図９】各々の候補画像にグループの識別情報を付与する様子を表す一例の概念図である。
【図１０】編集対象のページに対応するグループに含まれる候補画像を、候補画像表示エリアの先頭位置に移動して表示する様子を表す一例の概念図である。
【図１１】候補画像を変更する場合の動作を表す別の例のフローチャートである。
【図１２】ページの編集画面の画像編集エリアに画像追加ボタンが表示された様子を表す一例の概念図である。
【図１３】ページの編集画面の候補画像表示エリアに画像追加ボタンが表示された様子を表す一例の概念図である。
【図１４】ページの編集画面の画像編集エリアに画像入替ボタンが表示された様子を表す一例の概念図である。
【図１５】グループ１に含まれる１２枚の画像の評価値が１０００点満点で決定された様子を表す概念図である。
【図１６】グループ１から抽出された７枚の画像を、画像の評価値に基づいて、フォトブックの対応するページに配置する様子を表す一例の概念図である。
【図１７】画像の入れ替えが行われた様子を表す一例の概念図である。
【図１８】入れ替え後の画像を、撮影時刻順に並べ替える様子を表す一例の概念図である。
【図１９】画像入替ボタンが再び押下され、再度画像の入れ替えが行われる様子を表す一例の概念図である。
【図２０】（Ａ）は、再レイアウトを行う前の編集対象のページ、（Ｂ）および（Ｃ）は、それぞれ、再レイアウト後の編集対象のページの様子を表す一例の概念図である。
【発明を実施するための形態】
【００３５】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像処理装置、画像処理方法および画像処理プログラムを詳細に説明する。
【００３６】
図１は、本発明の画像処理装置の構成を表す一実施形態のブロック図である。同図に示す画像処理装置１０は、フォトブックの各々のページに画像を自動で配置した後、各々のページにおける画像の配置を編集するものであって、画像取得部１２と、画像分割部１４と、画像解析部１６と、画像抽出部１８と、画像配置部２０と、画像表示部２２と、入力部２４と、画像編集部２６とによって構成されている。
【００３７】
画像取得部１２は、フォトブックで使用する（フォトブックの各々のページに配置する）ことができる複数の画像（画像データ）を取得する。画像取得部１２は、例えば、ＵＳＢ（Universal Serial Bus）メモリ、メモリカード、光学ディスク、有線／無線のネットワーク等を介して画像を取得するものである。図示していないが、画像取得部１２で取得された画像は、例えば、ハードディスク等の記憶装置に記憶される。
【００３８】
画像分割部１４は、画像取得部１２で取得された複数の画像を、各々の画像の付帯情報に基づいて、所定数のグループに分割する。
【００３９】
ここで、画像の付帯情報とは、画像の撮影時に撮影装置等によって取得される、撮影時刻、撮影位置等を含む、各種の情報である。付帯情報は、対応する画像と関連付けられていれば画像とは別ファイルでもよいが、例えば、デジタルカメラ等で撮影された画像が、Ｅｘｉｆ（Exchangeable Image File Format）等の画像ファイルフォーマットで記録される場合、そのヘッダ情報（Ｅｘｉｆ情報）として、これらの各種の情報が、撮影された画像データに付帯されて記録される。
【００４０】
続いて、画像解析部１６は、画像取得部１２で取得された各々の画像について、あらかじめ定められた複数の解析項目を解析し、複数の解析項目の解析結果のうちの少なくとも１つに基づいて、画像の評価値を決定する。
【００４１】
ここで、画像の評価値とは、ユーザにとって利用価値の高い画像を抽出するための基準（指標）となるものである。画像の解析項目、解析方法、評価方法、評価値の決定方法等は何ら限定されないが、例えば、特開２００６−２２９６８２号公報、特開２００８−８４０４７号公報等に記載されているように、解析項目として、画像に人物の顔が含まれるかどうかを解析し、含まれる場合には、画像から顔領域を検出し、顔の大きさ、顔の位置、顔の向き、顔の肌色、表情、画像に含まれる人物の数、人物の位置関係等に基づいて、各々の画像の評価値を数値化（１０点満点等）、フラグ化（良、並、悪等）等することができる。画像の中に顔が無い場合には、例えば、画像の明るさや色合い、ボケ・ブレの程度等に基づいて、画像の評価値を決定してもよい。また、例えば、撮影時刻、撮影位置、撮影者、撮影装置（カメラ）等の付帯情報や、ユーザの指示等に基づいて、評価値を決定してもよいし、複数の解析項目の解析結果を重み付けして評価値を決定してもよい。
【００４２】
ここで、画像に人物の顔が含まれるかどうかは、例えば、特開２００４−３４８７３３号公報に引用されている、「H. Schneiderman et al., “A statistical method for 3d object detection applied to faces and cars,” in IEEE Conf. on Computer Vision and Pattern Recognition, 2000, pp. 746-51」に記載された、画像をウェーブレット変換することにより得られたＤＷＴ係数を用いた顔検出の手法を用いることができる。
【００４３】
顔の大きさは、例えば、顔領域内の画素数、顔領域の画像全体に対する割合、顔領域の画像の幅に対する割合等を用いて求めることができる。
【００４４】
顔の位置は、例えば、顔領域の中心の位置（例えば顔領域が矩形の場合、対角線の交点）の座標値の画像の横および縦方向の長さに対する割合を百分率にて表した値を使用することができる。
【００４５】
顔の向きは、例えば、顔領域に含まれる顔の向きが正面または横であることを表す情報を用いて求めることができる。また、顔の向きは顔領域からさらに目を検出し、検出した目が２つある場合には正面、１つの場合には横向きであるとしてもよい。また、顔領域から顔の向きを表す特徴量を求め、その特徴量を用いて顔の向きが正面か横かを決定するようにしてもよい。
【００４６】
顔の肌色については、上記特開２００４−３４８７３３号公報に記載された手法により画像から顔を検出し、さらに特開２００４−１８０１１４号公報に記載された手法により、検出した顔の色が、色空間において設定したあらかじめ定められた好適な肌色の基準値を超えるか否かを判定し、基準値を超える画像を画像に含まれる肌色が好適な画像と判定する。
【００４７】
表情については、例えば、特開２００１−４３３４５号公報に記載された手法を用いて、画像に含まれる顔が笑っているか、笑っていないかを判定する。具体的には、各種表情を呈している顔の画像について、表皮の動きのパターンに基づいて表情を識別するための特徴ベクトルをあらかじめ記憶しておき、対象となる画像から特徴ベクトルを算出し、これとあらかじめ記憶した特徴ベクトルとの距離を算出し、最も近い距離となる特徴ベクトルに対応する表情を、対象となる画像に含まれる顔の表情と判定する。
【００４８】
人物の位置関係は、複数の人物の顔のうちの評価の対象となる人物の顔の中心と他の人物の顔の中心とを結ぶ線分が、画像の水平線となす角度を用いて求めることができる。
【００４９】
画像の明るさについては、例えば、すべての画像について全画素の平均値を算出し、その平均値があらかじめ定められたしきい値Ｔｈ１を越えるか否かを判定し、平均値がしきい値Ｔｈ１を越える画像を明るさが所定の条件を満たす画像と判定する。
【００５０】
画像のボケ・ブレについては、例えば、特開２００４−２９５２３６号公報に記載されたように、画像を高周波数成分、中周波数成分および低周波成分に分解し、高周波成分のゲインに応じてボケの程度を判定する手法を用いることができる。例えば、高周波成分のゲインがしきい値Ｔｈ２を超えるか否かを判定し、ゲインがしきい値Ｔｈ２を超える画像をボケのない画像と判定する。
【００５１】
続いて、画像抽出部１８は、画像分割部１４により分割されたグループ毎に、画像解析部１６で決定された画像の評価値に基づいて、例えば、評価値の高いものから順に、グループに含まれる画像の中から所定数の画像（お勧め画像）を抽出する。
【００５２】
画像配置部２０は、同じくグループ毎に、画像抽出部１８によりグループから抽出された画像を、この画像が抽出されたグループに対応するページに配置（自動レイアウト）する。グループから抽出された画像は、例えば、１ページないし見開きの２ページに配置される。画像配置部２０は、画像をフォトブックのページに配置する場合に、評価値や撮影時刻等に基づいて画像を配置してもよい。
【００５３】
画像表示部２２は、画像配置部２０により画像が配置されたページを表示する。後述するように、画像表示部２２には、ユーザがフォトブックの各々のページの画像配置を編集するための編集画面が表示される。
【００５４】
入力部２４は、例えば、編集対象のページの指定（選択）、各々のページで使用するテンプレートの指定（選択）、候補画像の指定（選択）、編集対象画像の指定（選択）、画像編集の指示等のように、ユーザが各種の指示等を入力するためのものである。入力部２４は、例えば、マウス、キーボード、タッチパネル等の入力手段により、画像表示部２２に表示された画面を操作して指示等を入力するものなどが利用できる。
【００５５】
画像編集部２６は、ユーザの指示に基づいて、画像配置部２０により画像が配置されたページにおける画像の配置を編集する。
【００５６】
次に、本発明の画像処理方法に従って画像処理装置１０の動作を説明する。
まず、図２に示すフローチャートを参照して、フォトブックの各々のページに画像が自動配置される場合の動作を説明する。
【００５７】
画像処理装置１０では、まず、画像取得部１２により、フォトブックの各々のページに配置することができる複数の画像が取得される（ステップＳ１）。
【００５８】
画像取得部１２での画像の取得が完了すると、画像解析部１６により、各々の画像の解析が行われ、その評価値が決定される（ステップＳ２）。
【００５９】
続いて、画像分割部１４により、取得された複数の画像が、各々の画像の付帯情報に基づいて、所定数のグループに分割される（ステップＳ３）。
【００６０】
画像分割部１４は、付帯情報として撮影時刻を用いた場合、取得された複数の画像を、撮影間隔が比較的大きい画像の間でグループに分割する。図３の例では、付帯情報の撮影時刻に基づいて、複数の画像を、撮影時刻９：００〜１０：００、１１：３０〜１１：４０、１２：００〜１３：００、…のグループに分割している。グループ１は１２枚、グループ２は２枚、グループ３は８枚、…の画像を含んでいる。また、付帯情報として撮影位置を用いた場合、複数の画像を、撮影位置ごとにグループ分割する。
【００６１】
続いて、画像分割部１４により分割されたグループ毎に、画像抽出部１８により、画像解析部１６で決定された画像の評価値に基づいて、グループに含まれる画像の中から所定数の画像（お勧め画像）が抽出される（ステップＳ４）。図４に示す例では、お勧め画像として、グループ１の１２枚の画像（Ａ）から７枚、グループ２の２枚の画像（Ｂ）から２枚、グループ３の８枚の画像（Ｃ）から４枚、…の画像が抽出される。
【００６２】
続いて、画像配置部２０により、グループ毎に、画像抽出部１８によりグループから抽出された画像が、フォトブックの対応するページに配置（自動レイアウト）される（ステップＳ５）。図５に示す例では、各々のグループから抽出された画像は、見開きの２ページに配置される。
【００６３】
続いて、画像表示部２２により、対応するグループから抽出された画像が配置されたページが表示される（ステップＳ６）。
【００６４】
続いて、画像の自動レイアウトが行われた後、画像配置の編集が行われる場合の動作を説明する。
【００６５】
画像配置部２０により、グループ毎に、グループから抽出された画像がフォトブックの対応するページに配置された後、入力部２４を介して入力されるユーザの指示に基づいて、画像編集部２６により、各々のページにおける画像の配置が編集される。
【００６６】
図６は、画像表示部の表示画面を表す一例の概念図である。同図に示す画像表示部２２の表示画面は、フォトブックの各々のページにおける画像配置の編集作業が行われる場合の編集画面２８を表したものである。同図は、図５に示すグループ１に対応する見開きのページである。ページの編集画面２８は、ページ指定エリア３０と、テンプレート指定エリア３２と、候補画像表示エリア３４と、画像編集エリア３６とを含んでいる。
【００６７】
ページ指定エリア３０は、ユーザにより入力部２４を介して指定（選択）される、編集対象のページ３８の一覧が縮小表示される領域であり、編集画面２８の右側のおよそ２／３の領域の上部に設けられている。編集画面２８上には所定数のページ３８だけしか表示されないが、スクロールバーにより、編集画面２８上に表示される所定数のページ３８の範囲を変えることができる。
【００６８】
テンプレート指定エリア３２は、ユーザにより入力部２４を介して指定（選択）される、編集対象のページで使用されるテンプレート４０の一覧が縮小表示される領域であり、編集画面２８の左側およそ上半分の領域に設けられている。同様に、編集画面２８上には所定数のテンプレート４０だけしか表示されないが、スクロールバーにより、編集画面２８上に表示される所定数のテンプレート４０の範囲を変えることができる。
【００６９】
ここで、テンプレート指定エリア３２には、画像編集エリア３６に表示された編集対象のページに対応するグループに含まれる枚数以下の画像を配置する画像配置領域を有する１以上のテンプレート４０が表示される。つまり、同図に示す例の場合、編集対象のページに対応するグループ１には１２枚の画像が含まれるため、テンプレート指定エリア３２には、１２以下の画像配置領域を有するテンプレート４０が表示される。
【００７０】
このように、編集対象のページで使用可能なテンプレート４０だけをテンプレート指定エリア３２に表示することにより、ユーザは、使用可能なテンプレートなのかどうかを考慮することなく、所望のテンプレート４０を簡単に選択することができる。
【００７１】
続いて、候補画像表示エリア３４は、ユーザにより入力部２４を介して指定（選択）される、画像配置の編集作業で使用される候補画像４２の一覧が縮小表示される領域であり、編集画面２８の左側およそ下半分の領域に設けられている。同様に、編集画面上には所定数の候補画像４２だけしか表示されないが、スクロールバーにより、編集画面２８上に表示される所定数の候補画像４２の範囲を変えることができる。
【００７２】
ここで、候補画像４２とは、編集対象のページに対応するグループに含まれ、編集対象のページには配置されていない画像である。同図に示す例では、編集対象のページに対応するグループ１に含まれる１２枚の画像（Ａ）のうち、画像抽出部１８により抽出された７枚の画像が画像編集エリア３６に配置（表示）され、画像抽出部１８により抽出されなかった残りの５枚の画像だけが、候補画像表示エリア３４に配置（表示）される。
【００７３】
このように、編集対象のページに対応するグループに含まれる画像のうち、画像抽出部１８により抽出されなかった残りの画像だけを、編集作業の候補画像４２として、候補画像表示エリア３４に表示することにより、ユーザは、編集対象のページの画像配置の編集に使用可能な候補画像なのかどうかを考慮することなく、画像の選択、追加、入れ替え等の編集作業を簡単に行うことができる。
【００７４】
最後に、画像編集エリア３６は、ユーザによりページ指定エリア３０で指定された編集対象のページ、つまり、そのページに配置された画像４４が表示される領域であり、編集画面２８の右側のおよそ２／３の領域に設けられている。同図には、前述のように、編集対象のページに対応するグループ１に含まれる１２枚の画像（Ａ）のうち、画像抽出部１８により抽出された７枚の画像４４が表示されている。
【００７５】
次に、各々のページにおける画像配置の編集が行われる場合の動作を説明する。
まず、編集対象のページが変更される場合の動作を説明する。
【００７６】
まず、図６に示すようなページの編集画面２８が画像表示部２２に表示される。
【００７７】
続いて、ユーザにより、ページの編集画面２８上のページ指定エリア３０に縮小表示されたページ３８の一覧の中から、マウス等の入力手段を用いて、例えば、マウスで所望のページ３８をクリックすることにより、そのページ３８が指定される。ユーザにより、ページ３８の一覧の中から所望のページ３８が指定されると、指定されたページ３８が、編集対象のページとして、画像編集エリア３６に表示される。
【００７８】
以後同様に、他のページ３８が指定されると、指定されたページ３８が、編集対象のページとして、画像編集エリア３６に表示される。
【００７９】
続いて、図７に示すフローチャートを参照して、テンプレートが変更される場合の動作を説明する。
【００８０】
同様に、ページの編集画面２８が画像表示部２２に表示される（ステップＳ７）。
【００８１】
続いて、画像編集部２６により、画像編集エリア３６に表示された編集対象のページに対応するグループの情報が取得され（ステップＳ８）、さらに、ステップＳ８で取得されたグループ情報に対応するグループに含まれる画像数が取得される（ステップＳ９）。
【００８２】
続いて、ステップＳ９で取得されたグループに含まれる画像数以下の画像を配置する画像配置領域を有する１以上のテンプレート４０がテンプレート指定エリア３２に表示される（ステップＳ１０）。
【００８３】
続いて、ユーザにより、テンプレート指定エリア３２に縮小表示されたテンプレート４０の一覧の中から、マウス等の入力手段を用いて所望のテンプレート４０が指定される（ステップＳ１１）。
【００８４】
続いて、ステップＳ１１でテンプレートが変更された前後において、テンプレートの画像配置領域数が増減したかどうかのチェックが行われる（ステップＳ１２）。
【００８５】
その結果、テンプレートの変更後に画像配置領域数が減少した場合には、画像編集部２６により、編集対象のページに配置された画像４４の中から、画像配置領域数の減少分の画像４４が、画像の評価値に基づいて、例えば、評価値が最も低い画像４４から順に取得（選択）される。そして、画像配置部２０により、変更後のテンプレートが編集対象のページに適用され、編集対象のページに対応するグループから抽出された画像から、画像編集部２６により取得された画像４４が削除された残りの画像が、変更後のテンプレートの画像配置領域に配置される（ステップＳ１３）。
【００８６】
また、テンプレートの変更後に画像配置領域数の変化がない場合には、画像配置部２０により、変更後のテンプレートが編集対象のページに適用され、変更前に編集対象のページに配置されていた画像４４、つまり、画像抽出部１８により編集対象のページに対応するグループから抽出された画像４４が、ユーザにより指定された変更後のテンプレートの画像配置領域に配置される。つまり、テンプレート変更前と同じ画像４４がそのまま使用（表示）される（ステップＳ１４）。
【００８７】
テンプレートの変更後に画像配置領域数が増加した場合には、画像編集部２６により、候補画像表示エリア３４に表示された編集対象のページに対応するグループに含まれる候補画像４２の中から、画像配置領域数の増加分の候補画像４２が、画像の評価値に基づいて、例えば、評価値が高い候補画像４２から順に取得（選択）される。そして、画像配置部２０により、変更後のテンプレートが編集対象のページに適用され、編集対象のページに対応するグループから抽出された画像および画像編集部２６により取得された候補画像４２が、変更後のテンプレートの画像配置領域に配置される（ステップＳ１５）。
【００８８】
以後同様に、テンプレートが変更されると、変更後のテンプレートが編集対象のページに適用される。
【００８９】
続いて、図８に示すフローチャートを参照して、候補画像が変更される場合の動作について説明する。
【００９０】
同様に、ページの編集画面２８が画像表示部２２に表示される（ステップＳ１６）。
【００９１】
続いて、画像編集部２６により、（１）画像編集エリア３６に表示された編集対象のページに対応するグループの情報が取得され（ステップＳ１７）、（２）候補画像表示エリア３４に表示された候補画像４２に対応するグループの情報が取得される（ステップＳ１８）。
【００９２】
続いて、画像編集部２６により、（１）編集対象のページに対応するグループと、（２）候補画像４２に対応するグループとが一致しているかどうかのチェックが行われる（ステップＳ１９）。
【００９３】
その結果、両者が一致している場合には、候補画像表示エリア３４に表示されている候補画像４２がそのまま使用（表示）される（ステップＳ２０）。
【００９４】
一方、両者が不一致の場合には、編集対象のページに対応するグループに含まれる候補画像４２が候補画像表示エリア３４に表示される（ステップＳ２１）。
【００９５】
なお、画像表示部２２は、全てのグループの候補画像４２、すなわち、フォトブックのページには配置されていない全ての候補画像４２に、各々の候補画像４２が含まれるグループを表す識別情報を付与して、候補画像表示エリア３４に表示してもよい。
【００９６】
この場合、図９に示すように、同じグループに含まれる全ての候補画像４２に同じ識別情報が付与され、かつ、グループ毎に異なる識別情報が付与されて、全てのグループの候補画像４２が、グループ毎にまとめられて候補画像表示エリア３４に表示される。また、画像編集エリア３６に表示された編集対象のページに対応するグループに含まれる候補画像４２が、候補画像表示エリア３４の先頭位置に表示される。
【００９７】
図９の例では、識別情報として、候補画像表示エリア３４に表示された各々の候補画像４２にマーク４６が付与されている。例えば、グループ１に含まれる５枚の候補画像４２にはマーク（Ａ）、続くグループ２に含まれる２枚の候補画像４２にはマーク（Ｂ）、…が付与されている。ユーザは、候補画像４２に付与されたマーク４６を見て、各々の候補画像４２が、どの編集対象のページに対応するグループに含まれる画像なのかを容易に識別することができる。
【００９８】
ユーザにより編集対象のページが変更された場合には、変更後の編集対象のページに対応するグループに含まれる候補画像４２が、候補画像表示エリア３４の先頭位置に移動されて表示される。図１０に示すように、編集対象のページに対応するグループが、グループ１からグループ２に変更されると、グループ２に含まれる候補画像４２が、候補画像表示エリア３４の先頭位置に移動されて表示される。
【００９９】
以下、図１１に示すフローチャートを参照して、全てのグループの候補画像４２が候補画像表示エリア３４に表示される場合の動作について説明する。
【０１００】
同様に、ページの編集画面２８が画像表示部２２に表示される（ステップＳ２２）。
【０１０１】
続いて、画像編集部２６により、（１）画像編集エリア３６に表示された編集対象のページに対応するグループの情報が取得され（ステップＳ２３）、（２）候補画像表示エリア３４の先頭位置に表示された候補画像に対応するグループの情報が取得される（ステップＳ２４）。
【０１０２】
続いて、画像編集部２６により、（１）編集対象のページに対応するグループと、（２）先頭位置に表示された候補画像に対応するグループとが一致しているかどうかのチェックが行われる（ステップＳ２５）。
【０１０３】
その結果、両者が一致している場合には、候補画像表示エリア３４に表示されている候補画像がそのまま使用（表示）される（ステップＳ２６）。
【０１０４】
一方、両者が不一致の場合には、全てのグループの候補画像にグループの識別情報が付与され、編集対象のページに対応するグループに含まれる候補画像が、候補画像表示エリア３４の先頭位置に移動されて表示される（ステップＳ２７）。
【０１０５】
このように、編集対象のページに対応するグループに含まれる候補画像が、常に候補画像表示エリア３４の先頭位置に表示されるため、ユーザは、編集対象のページで使用可能な候補画像を即座に識別することができる。
【０１０６】
なお、識別情報として、各々の候補画像にマーク４６を付与することは必須ではなく、例えば、マーク４６の色をグループ毎に変更する、各々の候補画像の枠の色を変更するなど、各々の候補画像のグループをユーザが識別可能なように表示すればよい。
【０１０７】
最後に、編集対象のページの画像配置が編集される場合の動作について説明する。
【０１０８】
画像編集部２６は、入力部２４を介して入力されるユーザの指示に基づいて、候補画像表示エリア３４に表示された候補画像を用いて、各々のページにおける画像の配置を編集する。
【０１０９】
まず、編集対象のページに画像が追加される場合の動作について説明する。
画像追加の第１の実施形態について説明する。
【０１１０】
まず、画像表示部２２により、第１の画像追加ボタンが、ページの編集画面２８内の画像編集エリア３６に表示される。図１２に示す例では、第１の画像追加ボタン４８が、画像編集エリア３６の右下の位置に配置されている。
【０１１１】
続いて、ユーザにより、マウス等の入力手段を用いて、画像編集エリア３６に表示された第１の画像追加ボタン４８が押下（クリック）されると、画像編集部２６により、編集対象のページに対応するグループに含まれる候補画像４２の中から、評価値に基づいて、例えば、評価値が最も高い１枚の候補画像４２が取得（選択）される。そして、画像編集部２６により取得された１枚の候補画像４２が、画像配置部２０により編集対象のページに追加（配置）される。
【０１１２】
図１２に示す例では、グループ１に対応するページが画像編集エリア３６に表示され、同じくグループ１に含まれる候補画像が候補画像表示エリア３４に表示されている。この場合、第１の画像追加ボタン４８が押下されると、編集対象のページに対応するグループ１に含まれる候補画像の中から、評価値に基づいて自動で選択された１枚の候補画像が、グループ１に対応する編集対象のページに追加される。
【０１１３】
このように、候補画像表示エリア３４に表示された候補画像４２を選択することなく、自動的に選択された候補画像４２が、編集対象のページに追加されるため、ユーザは、簡単に編集対象のページに画像を追加することができる。
【０１１４】
なお、画像編集部２６は、評価値の代わりに、例えば、画像の撮影時刻が一番早いものなど、画像の撮影時刻に基づいて１枚の候補画像を取得してもよい。
【０１１５】
続いて、画像追加の第２の実施形態について説明する。
【０１１６】
まず、画像表示部２２により、第２の画像追加ボタンが、ページの編集画面２８内の候補画像表示エリア３４に表示される。図１３に示す例では、第２の画像追加ボタン５０が、候補画像表示エリア３４の右下の位置に配置されている。
【０１１７】
続いて、ユーザにより、マウス等の入力手段を用いて、候補画像表示エリア３４に表示された候補画像４２の中から１以上の候補画像４２が選択された後、第２の画像追加ボタン５０が押下されると、ユーザにより選択された候補画像４２が、画像編集部２６により取得（選択）される。そして、画像編集部２６により取得された候補画像４２が、画像配置部２０により、画像編集エリア３６に表示された編集対象のページに関わらず、その候補画像４２が含まれるグループに対応するページに追加（配置）される。
【０１１８】
図１３に示す例では、グループ２に対応するページが画像編集エリア３６に表示され、グループ１に含まれる候補画像が候補画像表示エリア３４に表示されている。この場合、ユーザにより、グループ１に含まれる候補画像の中から１以上の候補画像が選択された後、第２の画像追加ボタン５０が押下されると、ユーザにより選択された１以上の候補画像が、グループ２に対応するページではなく、グループ１に対応するページに追加される。
【０１１９】
このように、画像編集エリア３６に表示されたページに関係なく、ユーザにより選択された候補画像が、その候補画像が含まれるグループに対応するページに追加されるため、ユーザは、所望のページに所望の候補画像を素早く簡単に追加することができる。
【０１２０】
続いて、編集対象のページの画像と候補画像との入れ替えが行われる場合の動作について説明する。
【０１２１】
まず、画像表示部２２により、画像入替ボタンが、ページの編集画面２８内の画像編集エリア３６に表示される。図１４に示す例では、画像入替ボタン５２が、画像編集エリア３６の右下の位置に配置されている。
【０１２２】
続いて、ユーザにより、マウス等の入力手段を用いて、画像編集エリア３６に表示された画像の中から１以上の画像（編集対象画像）が選択された後、画像入替ボタン５２が押下されると、画像編集部２６により、編集対象のページに対応するグループに含まれる候補画像４２の中から、評価値に基づいて、例えば、評価値が高いものから１以上（ユーザにより選択された編集対象画像と同数）の候補画像４２が取得（選択）される。そして、画像配置部２０により、ユーザにより選択された１以上の編集対象画像と、画像編集部２６により取得された１以上の候補画像４２との入れ替えが行われる。
【０１２３】
このように、ユーザは、入れ替えの候補画像４２を選択することなく、編集対象画像だけを選択し、画像入替ボタン５２を押下するだけで画像の入れ替えを行うことができるため、非常に簡単に画像の入れ替えを行うことができる。
【０１２４】
以下、画像の入れ替えについて、グループ１に含まれる１２枚の画像に対して１０００点満点で評価値を付与した場合の例を挙げて説明する。
【０１２５】
図１５に示すように、画像解析部１６により、グループ１に含まれる１２枚の画像の評価値が、１０００点満点で決定される。同図では、１２枚の画像が、撮影時刻順に左側から右側へ向かって配置されている。画像の評価値は、同図中左端の画像（最も撮影時刻が早い画像）から順に、１２３，３４５，９３７，４９，８７９，７１２，８１０，６３２，２３８，２５４，４４５，２１３である。
【０１２６】
続いて、画像抽出部１８により、グループ１に含まれる１２枚の画像の中から、画像の評価値に基づいて、例えば、評価値の高い方から７枚の画像、つまり、２，３，５，６，７，８，１１番目の画像が抽出される。
【０１２７】
続いて、画像配置部２０により、画像の評価値および撮影時刻に基づいて、画像抽出部１８により抽出された７枚の画像が、フォトブックの対応するページに配置される。図１６に示す例では、７枚の画像のうち、最も評価値が高い３番目の画像が見開きページの中央部分に大きいサイズで配置され、その左側部分の上側から撮影時刻順に、２，５，６番目の画像、続いて、右側部分の上側から撮影時刻順に、７，８，１１番目の画像が小さいサイズで配置されている。
【０１２８】
図示していないが、候補画像表示エリア３４には、グループ１に含まれる１２枚の画像のうち、画像抽出部１８により抽出されなかった残りの５枚、つまり、１，４，９，１０，１２番目の画像が表示される。
【０１２９】
この状態において、例えば、画像編集エリア３６に表示された７枚の画像の中から、ユーザにより６番目の画像（編集対象画像）が選択され、画像入替ボタンが押下された場合の動作について説明する。
【０１３０】
この場合、図１７に示すように、画像編集部２６により、候補画像表示エリア３４に表示された５枚の候補画像の中から、最も評価値が高い１０番目の画像が自動で選択され、６番目の画像と１０番目の画像との入れ替えが行われる。なお、画像の入れ替えが行われると、６番目の画像と入れ替えられて画像編集エリア３６に表示された１０番目の画像が選択状態とされる。
【０１３１】
なお、６番目の画像と１０番目の画像との入れ替えが行われると、最も評価値が高い３番目の画像の左右に配置された６枚の画像の時系列が崩れるので、図１８に示すように、画像の入れ替えが行われた後の６枚の画像を、再び撮影時刻順に並べ替えることが望ましい。これにより、同図に示すように、見開きページの中央部分に配置された３番目の画像の左側部分の上側から撮影時刻順に、２，５，７番目の画像、続いて、右側部分の上側から撮影時刻順に、８，１０，１１番目の画像が配置される。
【０１３２】
続いて、ユーザにより画像入替ボタンが再び押下されると、図１９に示すように、画像編集部２６により、例えば、図１７に示す、選択状態の１０番目の画像の次に評価値が高い９番目の候補画像が自動で選択され、１０番目の画像と９番目の画像との入れ替えが行われる。また、図１８に示すように、画像の入れ替えが行われた後の６枚の画像を、撮影時刻順に並べ替えた場合も同様に、選択状態の１０番目の画像と９番目の画像との入れ替えが行われる。
【０１３３】
これ以後、ユーザにより画像入替ボタンが押下されるたびに、画像の入れ替えが同様にして行われる。そして、ユーザにより画像入替ボタンが押下されなくなった段階で画像の入れ替えは終了する。
【０１３４】
以上のように、ユーザは、画像処理装置１０において、編集対象のページの指定、編集対象のページで使用されるテンプレートの指定、各々のページへの画像の追加、入れ替え等の編集作業を容易に行うことができる。
【０１３５】
また、本発明の画像処理方法は、その各ステップをコンピュータに実行させるための画像処理プログラムとして実現することができる。また、この画像処理プログラムが記録されたコンピュータ読取可能な記録媒体としてもよい。
【０１３６】
上記実施形態では、本発明をフォトブックに適用した場合を説明したが、本発明はこれに限定されず、フォトブック（もしくはフォトアルバム）の他、例えば、所定数のページからなるカレンダーや、所定数の画像が各々のページにランダムにシャッフルされてプリントされた、所定数のページからなるシャッフルプリント（テンプレート合成プリント）などのように、複数のページからなるフォトコンテンツ（物理的なフォトブック等の有形の商品およびコンピュータ上で処理されるフォトブックのデータ等の無形の商品を含む）であれば同様に適用可能である。
【０１３７】
ここで、複数のページからなるフォトコンテンツは、複数のページがフォトブックのように１つに綴じられた状態のものでもよいし、あるいは、複数のページが１つに綴じられておらず、組にした状態のもの（各々のページがばらばらにできる）でもよい。
また、ディスプレイ上に表示されたフォトコンテンツ等も、本発明のフォトコンテンツの範囲に含まれる。
【０１３８】
上記実施形態では、画像解析部が、複数の解析項目の解析結果のうちの少なくとも１つに基づいて、画像の評価値を決定しているが、この評価値は、本発明の画像解析情報の一例であり、画像解析部が画像解析情報として評価値を決定することは必須ではない。
本発明の画像解析部は、各々の画像を解析して、その画像解析情報を生成し、画像抽出部は、画像解析情報に基づいて、グループに含まれる画像の中から所定数の画像を抽出する。
画像解析情報は、例えば、顔検出、類似画像判定、ボケ・ブレ判定等を含む個々の画像解析項目の解析結果そのものであってもよいし、あるいは、個々の画像解析項目の解析結果の少なくとも１つに基づいて生成される画像評価値であってもよい。
【０１３９】
上記実施形態において、画像表示部は、候補画像表示エリアに、編集対象のページに対応するグループに含まれ、編集対象のページには配置されていない画像だけ、つまり、画像編集部での画像配置の編集作業で使用される画像だけを表示しているが、本発明はこれに限定されない。
例えば、画像表示部は、候補画像表示エリアに、編集対象のページに対応するグループに含まれる全画像を表示し、例えば、編集対象のページに配置されていない画像に識別情報を付けて、編集対象のページに配置されている画像と配置されていない画像を識別可能に表示してもよい。
このように、編集対象のページに配置されている画像と配置されていない画像を識別可能に表示することにより、ユーザは、編集対象のページの画像配置の編集に使用可能な候補画像を即座に識別し、画像の選択、追加、入れ替え等の編集作業を簡単に行うことができる。
【０１４０】
また、画像表示部は、ユーザが候補画像を選択する時のサポート機能として、候補画像表示エリアに、前述の画像解析情報を表示することが望ましい。この場合、画像表示部は、候補画像表示エリアに、例えば、候補画像の評価値、顔検出結果（例えば、顔部分に丸印を付ける）、ボケ・ブレ判定結果（例えば、ボケ画像にボケマークを付ける）等を表示する。
このように、候補画像表示エリアに画像解析情報を表示することにより、ユーザは、画像解析情報の内容を考慮して、最適な候補画像を選択することができる。
【０１４１】
また、ユーザがレイアウト結果に不満を感じた場合に、ユーザが再レイアウトを指示することにより、使用するテンプレートを変更して自動で再レイアウトを行うようにすることが望ましい。
この場合、画像編集部は、ユーザの再レイアウトの指示に基づいて、画像表示部に表示された編集対象のページに適用されているテンプレートとは別のテンプレートを、テンプレート表示エリアに表示されたテンプレートの中から自動で選択し、編集対象のページで使用されている画像を、選択した別のテンプレートの画像配置領域に自動で配置し直す。
画像編集部によって別のテンプレートの画像配置領域に画像が配置された編集対象のページは、ユーザによる確認のために、画像表示部により、画像編集エリアに表示される。
このように、ユーザの再レイアウトの指示に基づいて、テンプレート選択から再レイアウトまでを自動で行うことより、ユーザは、マニュアルでテンプレートを選択して画像の再レイアウトを行う手間を大幅に省くことができる。
【０１４２】
また、再レイアウトを行う場合、ユーザが優先的に配置したい画像（優先画像）を指定可能であることが望ましい。
再レイアウトを行う場合に、ユーザにより優先画像が指定されると、画像編集部は、編集対象のページで使用されている画像を別のテンプレートの画像配置領域に配置する場合に、ユーザによって指定された優先画像を優先的に配置する。
例えば、図２０（Ａ）に示すように、ユーザのお気に入りであって、再レイアウト前に大きいサイズで配置されていた画像３が、単純に再レイアウトを行うと、同図（Ｂ）に示すように、再レイアウト後に小さいサイズで配置される可能性がある。これに対し、ユーザが画像３を優先画像として指定することにより、同図（Ｃ）に示すように、再レイアウト後も大きいサイズで配置することができる。
このように、ユーザが優先画像を指定可能とすることにより、再レイアウトを行う場合であっても、優先画像を優先的に配置することができる。
なお、逆に、再レイアウト前は小さいサイズで配置されていた他の画像１を、再レイアウト後に大きいサイズで配置することも可能である。
【０１４３】
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０１４４】
１０ 画像処理装置
１２ 画像取得部
１４ 画像分割部
１６ 画像解析部
１８ 画像抽出部
２０ 画像配置部
２２ 画像表示部
２４ 入力部
２６ 画像編集部
２８ 編集画面
３０ ページ指定エリア
３２ テンプレート指定エリア
３４ 候補画像表示エリア
３６ 画像編集エリア
３８ ページ
４０ テンプレート
４２ 候補画像
４４ 画像
４６ マーク
４８ 第１の画像追加ボタン
５０ 第２の画像追加ボタン
５２ 画像入替ボタン
【技術分野】
【０００１】
本発明は、フォトブック等の複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理装置、画像処理方法および画像処理プログラムに関するものである。
【背景技術】
【０００２】
フォトブックは、ユーザがデジタルカメラ等で撮影した複数の画像（画像データ）を、インターネットを経由してサービス提供業者に送信することにより、ユーザ（撮影者）が希望するレイアウトの写真集を作成するサービスである。フォトブックを作成する場合、ユーザは、例えば、あらかじめ画像の配置可能な位置が決定されたレイアウトの複数のテンプレートの中から所望のテンプレートを選択し、フォトブックのページ数、各々のページに含める画像、各々のページにおける画像の配置等を自由に決定することができる。
【０００３】
従来のフォトブックの作成方法として、画像の連続性や関連性を考慮し、例えば、撮影時刻等に基づいて、複数の画像をグループに分類し、各々のグループに含まれる画像を各々対応するページに自動配置（自動レイアウト）するものなどが知られている。
【０００４】
例えば、特許文献１には、取得画像、および、取得画像の中からユーザにより選択された選択画像を、被写体、撮影時間帯または撮影シーン等の属性ごとに分類し、属性ごとに、取得画像の数と選択画像の数との比較結果に応じて、選択画像の重要度を示す指標を作成して、選択画像に指標を付与し、選択画像の指標に従い、アルバムテンプレートの各割り当て領域に画像を配置して合成するアルバム自動レイアウト方法が記載されている。
【０００５】
また、特許文献２には、複数の画像情報を含む情報を読み込み、読み込んだ情報に基づいて、ＧＰＳ情報、日時情報、検索キーワード（運動会等）等の検索用情報を画像情報ごとに自動的に作成し、両者を関連付けて記録しておき、入力した検索条件を検索用情報と照合して、検索条件に該当する画像情報を検索して抽出し、抽出した画像情報が示す画像を画面上に表示する画像検索装置が記載されている。
【０００６】
また、特許文献３には、画像データの撮影に関わる情報のデータであって、画像データの撮影時に画像データに付帯された付帯情報データに基づいて、ページごとに分類するための条件を設定し、付帯情報データと条件に基づいて、画像データをページごとに分類し、分類された画像データをページごとに表示画面に表示する画像表示方法が提案されている。
【０００７】
また、特許文献４には、複数の画像データから類似する画像データを検索し、類似画像データの１つを代表類似画像データとして、電子アルバムのページと対応する編集領域に表示し、それ以外の類画像データを電子アルバムのページとは独立した退避領域に表示し、指定された代表類似画像データと関連する類似画像データを、退避領域に表示された他の画像データと区別して表示する電子アルバム編集装置の制御方法が記載されている。
【先行技術文献】
【特許文献】
【０００８】
【特許文献１】特開２００９−２２３７６４号公報
【特許文献２】特開平１１−１７５５３３号公報
【特許文献３】特許第３５２８２１４号公報
【特許文献４】特許第４４３８０６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００９】
従来の画像処理装置として、複数の画像の中から、所定数の画像を自動で選択して、フォトブックの対応するページに配置するものが知られている。しかし、このような自動画像選択および自動レイアウトが高機能化しても、ユーザの思い（嗜好）を１００％理解して画像の配置に反映させることは難しい。従って、自動レイアウトに基づいて、さらにユーザによる画像配置の編集作業が必須となる。
【００１０】
本発明の目的は、フォトコンテンツのページに画像を自動で配置した後、ユーザが各々のページにおける画像配置の編集作業を容易に行うことができる画像処理装置、画像処理方法および画像処理プログラムを提供することにある。
【課題を解決するための手段】
【００１１】
上記目的を達成するために、本発明は、複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理装置であって、
複数の画像を、画像の付帯情報に基づいて、所定数のグループに分割する画像分割部と、
各々の画像を解析して、その画像解析情報を生成する画像解析部と、
グループ毎に、画像解析情報に基づいて、グループに含まれる画像の中から所定数の画像を抽出する画像抽出部と、
グループ毎に、画像抽出部によりグループから抽出された画像を、グループに対応するページに配置する画像配置部と、
画像配置部により画像が配置されたページを表示する画像表示部と、
ユーザの指示に基づいて、画像配置部により画像が配置されたページにおける画像の配置を編集する画像編集部とを備え、
画像表示部は、ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、第１のページに対応する第１のグループに含まれ、画像編集部による画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示するものであり、
画像編集部は、ユーザの指示に基づいて、候補画像表示エリアに表示された候補画像を用いて、画像編集エリアに表示された第１のページにおける画像の配置を編集するものであることを特徴とする画像処理装置を提供するものである。
【００１２】
ここで、画像表示部は、第１のページに対応する第１のグループに含まれ、第１のページには配置されていない候補画像のみを候補画像表示エリアに表示するものであることが好ましい。
【００１３】
また、画像表示部は、第１のページに対応する第１のグループに含まれる全画像を、第１のページに配置されている画像と配置されていない画像とを識別可能に、候補画像表示エリアに表示するものであることが好ましい。
【００１４】
また、画像表示部は、候補画像表示エリアに画像解析情報を表示するものであることが好ましい。
【００１５】
また、画像表示部は、全てのグループの候補画像に、各々の候補画像が含まれるグループを表す識別情報を付し、グループ毎にまとめて候補画像表示エリアに表示するものであることが好ましい。
【００１６】
また、画像表示部は、第１のページに対応する第１のグループに含まれる候補画像を、候補画像表示エリアの先頭位置に表示するものであることが好ましい。
【００１７】
また、画像表示部は、さらに、第１のページに対応する第１のグループに含まれる画像の枚数以下の画像を配置する画像配置領域を有するテンプレートが表示されるテンプレート表示エリアを表示画面内に表示するものであり、
画像配置部は、テンプレート表示エリアに表示されたテンプレートの中から、ユーザにより指定された第１のテンプレートを第１のページに適用し、画像抽出部により第１のページに対応する第１のグループから抽出された画像を、第１のテンプレートの画像配置領域に配置するものであることが好ましい。
【００１８】
また、画像編集部は、第１のテンプレートから第２のテンプレートに変更されて画像配置領域の数が増加した場合に、第１のページに対応する第１のグループに含まれる候補画像の中から、画像解析情報に基づいて、画像配置領域の数の増加分の第１の候補画像を取得するものであり、
画像配置部は、第２のテンプレートを第１のページに適用し、第１のグループから抽出された画像および第１の候補画像を、第２のテンプレートの画像配置領域に配置するものであることが好ましい。
【００１９】
また、画像編集部は、第１のテンプレートから第３のテンプレートに変更されて画像配置領域の数が減少した場合に、第１のページに配置された画像の中から、画像解析情報に基づいて、画像配置領域の減少分の第１の画像を取得するものであり、
画像配置部は、第３のテンプレートを第１のページに適用し、第１のグループから抽出された画像から第１の画像を削除した残りの画像を、第３のテンプレートの画像配置領域に配置するものであることが好ましい。
【００２０】
また、画像表示部は、第１の画像追加ボタンを表示画面内に表示するものであり、
画像編集部は、ユーザにより第１の画像追加ボタンが押下された場合に、第１のページに対応する第１のグループに含まれる候補画像の中から、画像解析情報に基づいて第２の候補画像を指定し、第２の候補画像を、第１のページに追加するものであることが好ましい。
【００２１】
また、画像表示部は、第２の画像追加ボタンを表示画面内に表示するものであり、
画像編集部は、候補画像表示エリアに表示された候補画像の中から、ユーザにより１以上の候補画像が指定された後、第２の画像追加ボタンが押下された場合に、１以上の候補画像を、１以上の候補画像が含まれるグループに対応するページに追加するものであることが好ましい。
【００２２】
また、画像表示部は、画像入替ボタンを表示画面内に表示するものであり、
画像編集部は、画像編集エリアに表示された画像の中から、ユーザにより１以上の画像が指定された後、画像入替ボタンが押下された場合に、第１のページに対応する第１のグループに含まれる候補画像の中から、画像解析情報に基づいて、１以上の画像と同数の第３の候補画像を指定し、第３の候補画像と１以上の画像とを入れ替えるものであることが好ましい。
【００２３】
また、画像配置部は、画像抽出部によりグループから抽出された画像を、画像解析情報に基づいて、グループに対応するページに配置するものであることが好ましい。
【００２４】
また、画像配置部は、画像抽出部によりグループから抽出された画像を、グループに対応するページに画像の撮影時刻順に配置し、
さらに、第３の候補画像と１以上の画像とが入れ替えられた後、画像編集エリアに表示された画像を撮影時刻順に並べ替えるものであることが好ましい。
【００２５】
また、画像編集部は、ユーザの再レイアウトの指示に基づいて、画像表示部に表示された第１のページに適用されているテンプレートとは別のテンプレートを、テンプレート表示エリアに表示されたテンプレートの中から選択し、第１のページで使用されている画像を、別のテンプレートの画像配置領域に配置するものであり、
画像表示部は、画像編集部によって別のテンプレートの画像配置領域に画像が配置された第１のページを画像編集エリアに表示するものであることが好ましい。
【００２６】
また、画像編集部は、第１のページで使用されている画像を別のテンプレートの画像配置領域に配置する場合に、ユーザによって指定された画像を優先して配置するものであることが好ましい。
【００２７】
また、画像解析情報は、個々の画像解析項目の解析結果の少なくとも１つに基づいて生成される評価値であることが好ましい。
【００２８】
また、画像解析情報は、個々の画像解析項目の解析結果そのものであることが好ましい。
【００２９】
また、フォトコンテンツは、所定数のページからなるフォトブック、所定数のページからなるカレンダー、もしくは、所定数の画像が各々のページにランダムにシャッフルされてプリントされた、所定数のページからなるシャッフルプリントであることが好ましい。
【００３０】
また、本発明は、複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理方法であって、
複数の画像を、画像の付帯情報に基づいて、所定数のグループに分割する画像分割ステップと、
各々の画像を解析して、その画像解析情報を生成する画像解析ステップと、
グループ毎に、画像解析情報に基づいて、グループに含まれる画像の中から所定数の画像を抽出する画像抽出ステップと、
グループ毎に、画像抽出ステップでグループから抽出された画像を、グループに対応するページに配置する画像配置ステップと、
画像配置ステップで画像が配置されたページを表示する画像表示ステップと、
ユーザの指示に基づいて、画像配置ステップで画像が配置されたページにおける画像の配置を編集する画像編集ステップとを備え、
画像表示ステップにより、ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、第１のページに対応する第１のグループに含まれ、画像編集ステップでの画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示し、
画像編集ステップにより、ユーザの指示に基づいて、候補画像表示エリアに表示された候補画像を用いて、画像編集エリアに表示された第１のページにおける画像の配置を編集することを特徴とする画像処理方法を提供する。
【００３１】
また、本発明は、上記に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラムを提供する。
【００３２】
また、本発明は、に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラムが記録されたコンピュータ読み取り可能な記録媒体を提供する。
【発明の効果】
【００３３】
本発明によれば、編集対象のページに対応するグループに含まれる画像のうち、画像抽出部により抽出されなかった残りの画像だけを、もしくは、グループに含まれる全画像を、編集対象のページに配置されている画像と配置されていない画像とを識別可能に、編集作業の候補画像として、候補画像表示エリアに表示することにより、ユーザは、編集対象のページの画像配置の編集に使用可能な候補画像なのかどうかを考慮することなく、画像の選択、追加、入れ替え等の編集作業を簡単に行うことができる。
【図面の簡単な説明】
【００３４】
【図１】本発明の画像処理装置の構成を表す一実施形態のブロック図である。
【図２】画像処理装置の動作を表す一例のフローチャートである。
【図３】複数の画像を、画像の付帯情報に基づいて、所定数のグループに分割する様子を表す一例の概念図である。
【図４】グループ毎に、画像の評価値に基づいて、グループに含まれる画像の中から所定数の画像を抽出する様子を表す一例の概念図である。
【図５】グループ毎に、グループから抽出された画像を、フォトブックの対応するページに配置する様子を表す一例の概念図である。
【図６】画像表示部の表示画面を表す一例の概念図である。
【図７】テンプレートを変更する場合の動作を表す一例のフローチャートである。
【図８】候補画像を変更する場合の動作を表す一例のフローチャートである。
【図９】各々の候補画像にグループの識別情報を付与する様子を表す一例の概念図である。
【図１０】編集対象のページに対応するグループに含まれる候補画像を、候補画像表示エリアの先頭位置に移動して表示する様子を表す一例の概念図である。
【図１１】候補画像を変更する場合の動作を表す別の例のフローチャートである。
【図１２】ページの編集画面の画像編集エリアに画像追加ボタンが表示された様子を表す一例の概念図である。
【図１３】ページの編集画面の候補画像表示エリアに画像追加ボタンが表示された様子を表す一例の概念図である。
【図１４】ページの編集画面の画像編集エリアに画像入替ボタンが表示された様子を表す一例の概念図である。
【図１５】グループ１に含まれる１２枚の画像の評価値が１０００点満点で決定された様子を表す概念図である。
【図１６】グループ１から抽出された７枚の画像を、画像の評価値に基づいて、フォトブックの対応するページに配置する様子を表す一例の概念図である。
【図１７】画像の入れ替えが行われた様子を表す一例の概念図である。
【図１８】入れ替え後の画像を、撮影時刻順に並べ替える様子を表す一例の概念図である。
【図１９】画像入替ボタンが再び押下され、再度画像の入れ替えが行われる様子を表す一例の概念図である。
【図２０】（Ａ）は、再レイアウトを行う前の編集対象のページ、（Ｂ）および（Ｃ）は、それぞれ、再レイアウト後の編集対象のページの様子を表す一例の概念図である。
【発明を実施するための形態】
【００３５】
以下に、添付の図面に示す好適実施形態に基づいて、本発明の画像処理装置、画像処理方法および画像処理プログラムを詳細に説明する。
【００３６】
図１は、本発明の画像処理装置の構成を表す一実施形態のブロック図である。同図に示す画像処理装置１０は、フォトブックの各々のページに画像を自動で配置した後、各々のページにおける画像の配置を編集するものであって、画像取得部１２と、画像分割部１４と、画像解析部１６と、画像抽出部１８と、画像配置部２０と、画像表示部２２と、入力部２４と、画像編集部２６とによって構成されている。
【００３７】
画像取得部１２は、フォトブックで使用する（フォトブックの各々のページに配置する）ことができる複数の画像（画像データ）を取得する。画像取得部１２は、例えば、ＵＳＢ（Universal Serial Bus）メモリ、メモリカード、光学ディスク、有線／無線のネットワーク等を介して画像を取得するものである。図示していないが、画像取得部１２で取得された画像は、例えば、ハードディスク等の記憶装置に記憶される。
【００３８】
画像分割部１４は、画像取得部１２で取得された複数の画像を、各々の画像の付帯情報に基づいて、所定数のグループに分割する。
【００３９】
ここで、画像の付帯情報とは、画像の撮影時に撮影装置等によって取得される、撮影時刻、撮影位置等を含む、各種の情報である。付帯情報は、対応する画像と関連付けられていれば画像とは別ファイルでもよいが、例えば、デジタルカメラ等で撮影された画像が、Ｅｘｉｆ（Exchangeable Image File Format）等の画像ファイルフォーマットで記録される場合、そのヘッダ情報（Ｅｘｉｆ情報）として、これらの各種の情報が、撮影された画像データに付帯されて記録される。
【００４０】
続いて、画像解析部１６は、画像取得部１２で取得された各々の画像について、あらかじめ定められた複数の解析項目を解析し、複数の解析項目の解析結果のうちの少なくとも１つに基づいて、画像の評価値を決定する。
【００４１】
ここで、画像の評価値とは、ユーザにとって利用価値の高い画像を抽出するための基準（指標）となるものである。画像の解析項目、解析方法、評価方法、評価値の決定方法等は何ら限定されないが、例えば、特開２００６−２２９６８２号公報、特開２００８−８４０４７号公報等に記載されているように、解析項目として、画像に人物の顔が含まれるかどうかを解析し、含まれる場合には、画像から顔領域を検出し、顔の大きさ、顔の位置、顔の向き、顔の肌色、表情、画像に含まれる人物の数、人物の位置関係等に基づいて、各々の画像の評価値を数値化（１０点満点等）、フラグ化（良、並、悪等）等することができる。画像の中に顔が無い場合には、例えば、画像の明るさや色合い、ボケ・ブレの程度等に基づいて、画像の評価値を決定してもよい。また、例えば、撮影時刻、撮影位置、撮影者、撮影装置（カメラ）等の付帯情報や、ユーザの指示等に基づいて、評価値を決定してもよいし、複数の解析項目の解析結果を重み付けして評価値を決定してもよい。
【００４２】
ここで、画像に人物の顔が含まれるかどうかは、例えば、特開２００４−３４８７３３号公報に引用されている、「H. Schneiderman et al., “A statistical method for 3d object detection applied to faces and cars,” in IEEE Conf. on Computer Vision and Pattern Recognition, 2000, pp. 746-51」に記載された、画像をウェーブレット変換することにより得られたＤＷＴ係数を用いた顔検出の手法を用いることができる。
【００４３】
顔の大きさは、例えば、顔領域内の画素数、顔領域の画像全体に対する割合、顔領域の画像の幅に対する割合等を用いて求めることができる。
【００４４】
顔の位置は、例えば、顔領域の中心の位置（例えば顔領域が矩形の場合、対角線の交点）の座標値の画像の横および縦方向の長さに対する割合を百分率にて表した値を使用することができる。
【００４５】
顔の向きは、例えば、顔領域に含まれる顔の向きが正面または横であることを表す情報を用いて求めることができる。また、顔の向きは顔領域からさらに目を検出し、検出した目が２つある場合には正面、１つの場合には横向きであるとしてもよい。また、顔領域から顔の向きを表す特徴量を求め、その特徴量を用いて顔の向きが正面か横かを決定するようにしてもよい。
【００４６】
顔の肌色については、上記特開２００４−３４８７３３号公報に記載された手法により画像から顔を検出し、さらに特開２００４−１８０１１４号公報に記載された手法により、検出した顔の色が、色空間において設定したあらかじめ定められた好適な肌色の基準値を超えるか否かを判定し、基準値を超える画像を画像に含まれる肌色が好適な画像と判定する。
【００４７】
表情については、例えば、特開２００１−４３３４５号公報に記載された手法を用いて、画像に含まれる顔が笑っているか、笑っていないかを判定する。具体的には、各種表情を呈している顔の画像について、表皮の動きのパターンに基づいて表情を識別するための特徴ベクトルをあらかじめ記憶しておき、対象となる画像から特徴ベクトルを算出し、これとあらかじめ記憶した特徴ベクトルとの距離を算出し、最も近い距離となる特徴ベクトルに対応する表情を、対象となる画像に含まれる顔の表情と判定する。
【００４８】
人物の位置関係は、複数の人物の顔のうちの評価の対象となる人物の顔の中心と他の人物の顔の中心とを結ぶ線分が、画像の水平線となす角度を用いて求めることができる。
【００４９】
画像の明るさについては、例えば、すべての画像について全画素の平均値を算出し、その平均値があらかじめ定められたしきい値Ｔｈ１を越えるか否かを判定し、平均値がしきい値Ｔｈ１を越える画像を明るさが所定の条件を満たす画像と判定する。
【００５０】
画像のボケ・ブレについては、例えば、特開２００４−２９５２３６号公報に記載されたように、画像を高周波数成分、中周波数成分および低周波成分に分解し、高周波成分のゲインに応じてボケの程度を判定する手法を用いることができる。例えば、高周波成分のゲインがしきい値Ｔｈ２を超えるか否かを判定し、ゲインがしきい値Ｔｈ２を超える画像をボケのない画像と判定する。
【００５１】
続いて、画像抽出部１８は、画像分割部１４により分割されたグループ毎に、画像解析部１６で決定された画像の評価値に基づいて、例えば、評価値の高いものから順に、グループに含まれる画像の中から所定数の画像（お勧め画像）を抽出する。
【００５２】
画像配置部２０は、同じくグループ毎に、画像抽出部１８によりグループから抽出された画像を、この画像が抽出されたグループに対応するページに配置（自動レイアウト）する。グループから抽出された画像は、例えば、１ページないし見開きの２ページに配置される。画像配置部２０は、画像をフォトブックのページに配置する場合に、評価値や撮影時刻等に基づいて画像を配置してもよい。
【００５３】
画像表示部２２は、画像配置部２０により画像が配置されたページを表示する。後述するように、画像表示部２２には、ユーザがフォトブックの各々のページの画像配置を編集するための編集画面が表示される。
【００５４】
入力部２４は、例えば、編集対象のページの指定（選択）、各々のページで使用するテンプレートの指定（選択）、候補画像の指定（選択）、編集対象画像の指定（選択）、画像編集の指示等のように、ユーザが各種の指示等を入力するためのものである。入力部２４は、例えば、マウス、キーボード、タッチパネル等の入力手段により、画像表示部２２に表示された画面を操作して指示等を入力するものなどが利用できる。
【００５５】
画像編集部２６は、ユーザの指示に基づいて、画像配置部２０により画像が配置されたページにおける画像の配置を編集する。
【００５６】
次に、本発明の画像処理方法に従って画像処理装置１０の動作を説明する。
まず、図２に示すフローチャートを参照して、フォトブックの各々のページに画像が自動配置される場合の動作を説明する。
【００５７】
画像処理装置１０では、まず、画像取得部１２により、フォトブックの各々のページに配置することができる複数の画像が取得される（ステップＳ１）。
【００５８】
画像取得部１２での画像の取得が完了すると、画像解析部１６により、各々の画像の解析が行われ、その評価値が決定される（ステップＳ２）。
【００５９】
続いて、画像分割部１４により、取得された複数の画像が、各々の画像の付帯情報に基づいて、所定数のグループに分割される（ステップＳ３）。
【００６０】
画像分割部１４は、付帯情報として撮影時刻を用いた場合、取得された複数の画像を、撮影間隔が比較的大きい画像の間でグループに分割する。図３の例では、付帯情報の撮影時刻に基づいて、複数の画像を、撮影時刻９：００〜１０：００、１１：３０〜１１：４０、１２：００〜１３：００、…のグループに分割している。グループ１は１２枚、グループ２は２枚、グループ３は８枚、…の画像を含んでいる。また、付帯情報として撮影位置を用いた場合、複数の画像を、撮影位置ごとにグループ分割する。
【００６１】
続いて、画像分割部１４により分割されたグループ毎に、画像抽出部１８により、画像解析部１６で決定された画像の評価値に基づいて、グループに含まれる画像の中から所定数の画像（お勧め画像）が抽出される（ステップＳ４）。図４に示す例では、お勧め画像として、グループ１の１２枚の画像（Ａ）から７枚、グループ２の２枚の画像（Ｂ）から２枚、グループ３の８枚の画像（Ｃ）から４枚、…の画像が抽出される。
【００６２】
続いて、画像配置部２０により、グループ毎に、画像抽出部１８によりグループから抽出された画像が、フォトブックの対応するページに配置（自動レイアウト）される（ステップＳ５）。図５に示す例では、各々のグループから抽出された画像は、見開きの２ページに配置される。
【００６３】
続いて、画像表示部２２により、対応するグループから抽出された画像が配置されたページが表示される（ステップＳ６）。
【００６４】
続いて、画像の自動レイアウトが行われた後、画像配置の編集が行われる場合の動作を説明する。
【００６５】
画像配置部２０により、グループ毎に、グループから抽出された画像がフォトブックの対応するページに配置された後、入力部２４を介して入力されるユーザの指示に基づいて、画像編集部２６により、各々のページにおける画像の配置が編集される。
【００６６】
図６は、画像表示部の表示画面を表す一例の概念図である。同図に示す画像表示部２２の表示画面は、フォトブックの各々のページにおける画像配置の編集作業が行われる場合の編集画面２８を表したものである。同図は、図５に示すグループ１に対応する見開きのページである。ページの編集画面２８は、ページ指定エリア３０と、テンプレート指定エリア３２と、候補画像表示エリア３４と、画像編集エリア３６とを含んでいる。
【００６７】
ページ指定エリア３０は、ユーザにより入力部２４を介して指定（選択）される、編集対象のページ３８の一覧が縮小表示される領域であり、編集画面２８の右側のおよそ２／３の領域の上部に設けられている。編集画面２８上には所定数のページ３８だけしか表示されないが、スクロールバーにより、編集画面２８上に表示される所定数のページ３８の範囲を変えることができる。
【００６８】
テンプレート指定エリア３２は、ユーザにより入力部２４を介して指定（選択）される、編集対象のページで使用されるテンプレート４０の一覧が縮小表示される領域であり、編集画面２８の左側およそ上半分の領域に設けられている。同様に、編集画面２８上には所定数のテンプレート４０だけしか表示されないが、スクロールバーにより、編集画面２８上に表示される所定数のテンプレート４０の範囲を変えることができる。
【００６９】
ここで、テンプレート指定エリア３２には、画像編集エリア３６に表示された編集対象のページに対応するグループに含まれる枚数以下の画像を配置する画像配置領域を有する１以上のテンプレート４０が表示される。つまり、同図に示す例の場合、編集対象のページに対応するグループ１には１２枚の画像が含まれるため、テンプレート指定エリア３２には、１２以下の画像配置領域を有するテンプレート４０が表示される。
【００７０】
このように、編集対象のページで使用可能なテンプレート４０だけをテンプレート指定エリア３２に表示することにより、ユーザは、使用可能なテンプレートなのかどうかを考慮することなく、所望のテンプレート４０を簡単に選択することができる。
【００７１】
続いて、候補画像表示エリア３４は、ユーザにより入力部２４を介して指定（選択）される、画像配置の編集作業で使用される候補画像４２の一覧が縮小表示される領域であり、編集画面２８の左側およそ下半分の領域に設けられている。同様に、編集画面上には所定数の候補画像４２だけしか表示されないが、スクロールバーにより、編集画面２８上に表示される所定数の候補画像４２の範囲を変えることができる。
【００７２】
ここで、候補画像４２とは、編集対象のページに対応するグループに含まれ、編集対象のページには配置されていない画像である。同図に示す例では、編集対象のページに対応するグループ１に含まれる１２枚の画像（Ａ）のうち、画像抽出部１８により抽出された７枚の画像が画像編集エリア３６に配置（表示）され、画像抽出部１８により抽出されなかった残りの５枚の画像だけが、候補画像表示エリア３４に配置（表示）される。
【００７３】
このように、編集対象のページに対応するグループに含まれる画像のうち、画像抽出部１８により抽出されなかった残りの画像だけを、編集作業の候補画像４２として、候補画像表示エリア３４に表示することにより、ユーザは、編集対象のページの画像配置の編集に使用可能な候補画像なのかどうかを考慮することなく、画像の選択、追加、入れ替え等の編集作業を簡単に行うことができる。
【００７４】
最後に、画像編集エリア３６は、ユーザによりページ指定エリア３０で指定された編集対象のページ、つまり、そのページに配置された画像４４が表示される領域であり、編集画面２８の右側のおよそ２／３の領域に設けられている。同図には、前述のように、編集対象のページに対応するグループ１に含まれる１２枚の画像（Ａ）のうち、画像抽出部１８により抽出された７枚の画像４４が表示されている。
【００７５】
次に、各々のページにおける画像配置の編集が行われる場合の動作を説明する。
まず、編集対象のページが変更される場合の動作を説明する。
【００７６】
まず、図６に示すようなページの編集画面２８が画像表示部２２に表示される。
【００７７】
続いて、ユーザにより、ページの編集画面２８上のページ指定エリア３０に縮小表示されたページ３８の一覧の中から、マウス等の入力手段を用いて、例えば、マウスで所望のページ３８をクリックすることにより、そのページ３８が指定される。ユーザにより、ページ３８の一覧の中から所望のページ３８が指定されると、指定されたページ３８が、編集対象のページとして、画像編集エリア３６に表示される。
【００７８】
以後同様に、他のページ３８が指定されると、指定されたページ３８が、編集対象のページとして、画像編集エリア３６に表示される。
【００７９】
続いて、図７に示すフローチャートを参照して、テンプレートが変更される場合の動作を説明する。
【００８０】
同様に、ページの編集画面２８が画像表示部２２に表示される（ステップＳ７）。
【００８１】
続いて、画像編集部２６により、画像編集エリア３６に表示された編集対象のページに対応するグループの情報が取得され（ステップＳ８）、さらに、ステップＳ８で取得されたグループ情報に対応するグループに含まれる画像数が取得される（ステップＳ９）。
【００８２】
続いて、ステップＳ９で取得されたグループに含まれる画像数以下の画像を配置する画像配置領域を有する１以上のテンプレート４０がテンプレート指定エリア３２に表示される（ステップＳ１０）。
【００８３】
続いて、ユーザにより、テンプレート指定エリア３２に縮小表示されたテンプレート４０の一覧の中から、マウス等の入力手段を用いて所望のテンプレート４０が指定される（ステップＳ１１）。
【００８４】
続いて、ステップＳ１１でテンプレートが変更された前後において、テンプレートの画像配置領域数が増減したかどうかのチェックが行われる（ステップＳ１２）。
【００８５】
その結果、テンプレートの変更後に画像配置領域数が減少した場合には、画像編集部２６により、編集対象のページに配置された画像４４の中から、画像配置領域数の減少分の画像４４が、画像の評価値に基づいて、例えば、評価値が最も低い画像４４から順に取得（選択）される。そして、画像配置部２０により、変更後のテンプレートが編集対象のページに適用され、編集対象のページに対応するグループから抽出された画像から、画像編集部２６により取得された画像４４が削除された残りの画像が、変更後のテンプレートの画像配置領域に配置される（ステップＳ１３）。
【００８６】
また、テンプレートの変更後に画像配置領域数の変化がない場合には、画像配置部２０により、変更後のテンプレートが編集対象のページに適用され、変更前に編集対象のページに配置されていた画像４４、つまり、画像抽出部１８により編集対象のページに対応するグループから抽出された画像４４が、ユーザにより指定された変更後のテンプレートの画像配置領域に配置される。つまり、テンプレート変更前と同じ画像４４がそのまま使用（表示）される（ステップＳ１４）。
【００８７】
テンプレートの変更後に画像配置領域数が増加した場合には、画像編集部２６により、候補画像表示エリア３４に表示された編集対象のページに対応するグループに含まれる候補画像４２の中から、画像配置領域数の増加分の候補画像４２が、画像の評価値に基づいて、例えば、評価値が高い候補画像４２から順に取得（選択）される。そして、画像配置部２０により、変更後のテンプレートが編集対象のページに適用され、編集対象のページに対応するグループから抽出された画像および画像編集部２６により取得された候補画像４２が、変更後のテンプレートの画像配置領域に配置される（ステップＳ１５）。
【００８８】
以後同様に、テンプレートが変更されると、変更後のテンプレートが編集対象のページに適用される。
【００８９】
続いて、図８に示すフローチャートを参照して、候補画像が変更される場合の動作について説明する。
【００９０】
同様に、ページの編集画面２８が画像表示部２２に表示される（ステップＳ１６）。
【００９１】
続いて、画像編集部２６により、（１）画像編集エリア３６に表示された編集対象のページに対応するグループの情報が取得され（ステップＳ１７）、（２）候補画像表示エリア３４に表示された候補画像４２に対応するグループの情報が取得される（ステップＳ１８）。
【００９２】
続いて、画像編集部２６により、（１）編集対象のページに対応するグループと、（２）候補画像４２に対応するグループとが一致しているかどうかのチェックが行われる（ステップＳ１９）。
【００９３】
その結果、両者が一致している場合には、候補画像表示エリア３４に表示されている候補画像４２がそのまま使用（表示）される（ステップＳ２０）。
【００９４】
一方、両者が不一致の場合には、編集対象のページに対応するグループに含まれる候補画像４２が候補画像表示エリア３４に表示される（ステップＳ２１）。
【００９５】
なお、画像表示部２２は、全てのグループの候補画像４２、すなわち、フォトブックのページには配置されていない全ての候補画像４２に、各々の候補画像４２が含まれるグループを表す識別情報を付与して、候補画像表示エリア３４に表示してもよい。
【００９６】
この場合、図９に示すように、同じグループに含まれる全ての候補画像４２に同じ識別情報が付与され、かつ、グループ毎に異なる識別情報が付与されて、全てのグループの候補画像４２が、グループ毎にまとめられて候補画像表示エリア３４に表示される。また、画像編集エリア３６に表示された編集対象のページに対応するグループに含まれる候補画像４２が、候補画像表示エリア３４の先頭位置に表示される。
【００９７】
図９の例では、識別情報として、候補画像表示エリア３４に表示された各々の候補画像４２にマーク４６が付与されている。例えば、グループ１に含まれる５枚の候補画像４２にはマーク（Ａ）、続くグループ２に含まれる２枚の候補画像４２にはマーク（Ｂ）、…が付与されている。ユーザは、候補画像４２に付与されたマーク４６を見て、各々の候補画像４２が、どの編集対象のページに対応するグループに含まれる画像なのかを容易に識別することができる。
【００９８】
ユーザにより編集対象のページが変更された場合には、変更後の編集対象のページに対応するグループに含まれる候補画像４２が、候補画像表示エリア３４の先頭位置に移動されて表示される。図１０に示すように、編集対象のページに対応するグループが、グループ１からグループ２に変更されると、グループ２に含まれる候補画像４２が、候補画像表示エリア３４の先頭位置に移動されて表示される。
【００９９】
以下、図１１に示すフローチャートを参照して、全てのグループの候補画像４２が候補画像表示エリア３４に表示される場合の動作について説明する。
【０１００】
同様に、ページの編集画面２８が画像表示部２２に表示される（ステップＳ２２）。
【０１０１】
続いて、画像編集部２６により、（１）画像編集エリア３６に表示された編集対象のページに対応するグループの情報が取得され（ステップＳ２３）、（２）候補画像表示エリア３４の先頭位置に表示された候補画像に対応するグループの情報が取得される（ステップＳ２４）。
【０１０２】
続いて、画像編集部２６により、（１）編集対象のページに対応するグループと、（２）先頭位置に表示された候補画像に対応するグループとが一致しているかどうかのチェックが行われる（ステップＳ２５）。
【０１０３】
その結果、両者が一致している場合には、候補画像表示エリア３４に表示されている候補画像がそのまま使用（表示）される（ステップＳ２６）。
【０１０４】
一方、両者が不一致の場合には、全てのグループの候補画像にグループの識別情報が付与され、編集対象のページに対応するグループに含まれる候補画像が、候補画像表示エリア３４の先頭位置に移動されて表示される（ステップＳ２７）。
【０１０５】
このように、編集対象のページに対応するグループに含まれる候補画像が、常に候補画像表示エリア３４の先頭位置に表示されるため、ユーザは、編集対象のページで使用可能な候補画像を即座に識別することができる。
【０１０６】
なお、識別情報として、各々の候補画像にマーク４６を付与することは必須ではなく、例えば、マーク４６の色をグループ毎に変更する、各々の候補画像の枠の色を変更するなど、各々の候補画像のグループをユーザが識別可能なように表示すればよい。
【０１０７】
最後に、編集対象のページの画像配置が編集される場合の動作について説明する。
【０１０８】
画像編集部２６は、入力部２４を介して入力されるユーザの指示に基づいて、候補画像表示エリア３４に表示された候補画像を用いて、各々のページにおける画像の配置を編集する。
【０１０９】
まず、編集対象のページに画像が追加される場合の動作について説明する。
画像追加の第１の実施形態について説明する。
【０１１０】
まず、画像表示部２２により、第１の画像追加ボタンが、ページの編集画面２８内の画像編集エリア３６に表示される。図１２に示す例では、第１の画像追加ボタン４８が、画像編集エリア３６の右下の位置に配置されている。
【０１１１】
続いて、ユーザにより、マウス等の入力手段を用いて、画像編集エリア３６に表示された第１の画像追加ボタン４８が押下（クリック）されると、画像編集部２６により、編集対象のページに対応するグループに含まれる候補画像４２の中から、評価値に基づいて、例えば、評価値が最も高い１枚の候補画像４２が取得（選択）される。そして、画像編集部２６により取得された１枚の候補画像４２が、画像配置部２０により編集対象のページに追加（配置）される。
【０１１２】
図１２に示す例では、グループ１に対応するページが画像編集エリア３６に表示され、同じくグループ１に含まれる候補画像が候補画像表示エリア３４に表示されている。この場合、第１の画像追加ボタン４８が押下されると、編集対象のページに対応するグループ１に含まれる候補画像の中から、評価値に基づいて自動で選択された１枚の候補画像が、グループ１に対応する編集対象のページに追加される。
【０１１３】
このように、候補画像表示エリア３４に表示された候補画像４２を選択することなく、自動的に選択された候補画像４２が、編集対象のページに追加されるため、ユーザは、簡単に編集対象のページに画像を追加することができる。
【０１１４】
なお、画像編集部２６は、評価値の代わりに、例えば、画像の撮影時刻が一番早いものなど、画像の撮影時刻に基づいて１枚の候補画像を取得してもよい。
【０１１５】
続いて、画像追加の第２の実施形態について説明する。
【０１１６】
まず、画像表示部２２により、第２の画像追加ボタンが、ページの編集画面２８内の候補画像表示エリア３４に表示される。図１３に示す例では、第２の画像追加ボタン５０が、候補画像表示エリア３４の右下の位置に配置されている。
【０１１７】
続いて、ユーザにより、マウス等の入力手段を用いて、候補画像表示エリア３４に表示された候補画像４２の中から１以上の候補画像４２が選択された後、第２の画像追加ボタン５０が押下されると、ユーザにより選択された候補画像４２が、画像編集部２６により取得（選択）される。そして、画像編集部２６により取得された候補画像４２が、画像配置部２０により、画像編集エリア３６に表示された編集対象のページに関わらず、その候補画像４２が含まれるグループに対応するページに追加（配置）される。
【０１１８】
図１３に示す例では、グループ２に対応するページが画像編集エリア３６に表示され、グループ１に含まれる候補画像が候補画像表示エリア３４に表示されている。この場合、ユーザにより、グループ１に含まれる候補画像の中から１以上の候補画像が選択された後、第２の画像追加ボタン５０が押下されると、ユーザにより選択された１以上の候補画像が、グループ２に対応するページではなく、グループ１に対応するページに追加される。
【０１１９】
このように、画像編集エリア３６に表示されたページに関係なく、ユーザにより選択された候補画像が、その候補画像が含まれるグループに対応するページに追加されるため、ユーザは、所望のページに所望の候補画像を素早く簡単に追加することができる。
【０１２０】
続いて、編集対象のページの画像と候補画像との入れ替えが行われる場合の動作について説明する。
【０１２１】
まず、画像表示部２２により、画像入替ボタンが、ページの編集画面２８内の画像編集エリア３６に表示される。図１４に示す例では、画像入替ボタン５２が、画像編集エリア３６の右下の位置に配置されている。
【０１２２】
続いて、ユーザにより、マウス等の入力手段を用いて、画像編集エリア３６に表示された画像の中から１以上の画像（編集対象画像）が選択された後、画像入替ボタン５２が押下されると、画像編集部２６により、編集対象のページに対応するグループに含まれる候補画像４２の中から、評価値に基づいて、例えば、評価値が高いものから１以上（ユーザにより選択された編集対象画像と同数）の候補画像４２が取得（選択）される。そして、画像配置部２０により、ユーザにより選択された１以上の編集対象画像と、画像編集部２６により取得された１以上の候補画像４２との入れ替えが行われる。
【０１２３】
このように、ユーザは、入れ替えの候補画像４２を選択することなく、編集対象画像だけを選択し、画像入替ボタン５２を押下するだけで画像の入れ替えを行うことができるため、非常に簡単に画像の入れ替えを行うことができる。
【０１２４】
以下、画像の入れ替えについて、グループ１に含まれる１２枚の画像に対して１０００点満点で評価値を付与した場合の例を挙げて説明する。
【０１２５】
図１５に示すように、画像解析部１６により、グループ１に含まれる１２枚の画像の評価値が、１０００点満点で決定される。同図では、１２枚の画像が、撮影時刻順に左側から右側へ向かって配置されている。画像の評価値は、同図中左端の画像（最も撮影時刻が早い画像）から順に、１２３，３４５，９３７，４９，８７９，７１２，８１０，６３２，２３８，２５４，４４５，２１３である。
【０１２６】
続いて、画像抽出部１８により、グループ１に含まれる１２枚の画像の中から、画像の評価値に基づいて、例えば、評価値の高い方から７枚の画像、つまり、２，３，５，６，７，８，１１番目の画像が抽出される。
【０１２７】
続いて、画像配置部２０により、画像の評価値および撮影時刻に基づいて、画像抽出部１８により抽出された７枚の画像が、フォトブックの対応するページに配置される。図１６に示す例では、７枚の画像のうち、最も評価値が高い３番目の画像が見開きページの中央部分に大きいサイズで配置され、その左側部分の上側から撮影時刻順に、２，５，６番目の画像、続いて、右側部分の上側から撮影時刻順に、７，８，１１番目の画像が小さいサイズで配置されている。
【０１２８】
図示していないが、候補画像表示エリア３４には、グループ１に含まれる１２枚の画像のうち、画像抽出部１８により抽出されなかった残りの５枚、つまり、１，４，９，１０，１２番目の画像が表示される。
【０１２９】
この状態において、例えば、画像編集エリア３６に表示された７枚の画像の中から、ユーザにより６番目の画像（編集対象画像）が選択され、画像入替ボタンが押下された場合の動作について説明する。
【０１３０】
この場合、図１７に示すように、画像編集部２６により、候補画像表示エリア３４に表示された５枚の候補画像の中から、最も評価値が高い１０番目の画像が自動で選択され、６番目の画像と１０番目の画像との入れ替えが行われる。なお、画像の入れ替えが行われると、６番目の画像と入れ替えられて画像編集エリア３６に表示された１０番目の画像が選択状態とされる。
【０１３１】
なお、６番目の画像と１０番目の画像との入れ替えが行われると、最も評価値が高い３番目の画像の左右に配置された６枚の画像の時系列が崩れるので、図１８に示すように、画像の入れ替えが行われた後の６枚の画像を、再び撮影時刻順に並べ替えることが望ましい。これにより、同図に示すように、見開きページの中央部分に配置された３番目の画像の左側部分の上側から撮影時刻順に、２，５，７番目の画像、続いて、右側部分の上側から撮影時刻順に、８，１０，１１番目の画像が配置される。
【０１３２】
続いて、ユーザにより画像入替ボタンが再び押下されると、図１９に示すように、画像編集部２６により、例えば、図１７に示す、選択状態の１０番目の画像の次に評価値が高い９番目の候補画像が自動で選択され、１０番目の画像と９番目の画像との入れ替えが行われる。また、図１８に示すように、画像の入れ替えが行われた後の６枚の画像を、撮影時刻順に並べ替えた場合も同様に、選択状態の１０番目の画像と９番目の画像との入れ替えが行われる。
【０１３３】
これ以後、ユーザにより画像入替ボタンが押下されるたびに、画像の入れ替えが同様にして行われる。そして、ユーザにより画像入替ボタンが押下されなくなった段階で画像の入れ替えは終了する。
【０１３４】
以上のように、ユーザは、画像処理装置１０において、編集対象のページの指定、編集対象のページで使用されるテンプレートの指定、各々のページへの画像の追加、入れ替え等の編集作業を容易に行うことができる。
【０１３５】
また、本発明の画像処理方法は、その各ステップをコンピュータに実行させるための画像処理プログラムとして実現することができる。また、この画像処理プログラムが記録されたコンピュータ読取可能な記録媒体としてもよい。
【０１３６】
上記実施形態では、本発明をフォトブックに適用した場合を説明したが、本発明はこれに限定されず、フォトブック（もしくはフォトアルバム）の他、例えば、所定数のページからなるカレンダーや、所定数の画像が各々のページにランダムにシャッフルされてプリントされた、所定数のページからなるシャッフルプリント（テンプレート合成プリント）などのように、複数のページからなるフォトコンテンツ（物理的なフォトブック等の有形の商品およびコンピュータ上で処理されるフォトブックのデータ等の無形の商品を含む）であれば同様に適用可能である。
【０１３７】
ここで、複数のページからなるフォトコンテンツは、複数のページがフォトブックのように１つに綴じられた状態のものでもよいし、あるいは、複数のページが１つに綴じられておらず、組にした状態のもの（各々のページがばらばらにできる）でもよい。
また、ディスプレイ上に表示されたフォトコンテンツ等も、本発明のフォトコンテンツの範囲に含まれる。
【０１３８】
上記実施形態では、画像解析部が、複数の解析項目の解析結果のうちの少なくとも１つに基づいて、画像の評価値を決定しているが、この評価値は、本発明の画像解析情報の一例であり、画像解析部が画像解析情報として評価値を決定することは必須ではない。
本発明の画像解析部は、各々の画像を解析して、その画像解析情報を生成し、画像抽出部は、画像解析情報に基づいて、グループに含まれる画像の中から所定数の画像を抽出する。
画像解析情報は、例えば、顔検出、類似画像判定、ボケ・ブレ判定等を含む個々の画像解析項目の解析結果そのものであってもよいし、あるいは、個々の画像解析項目の解析結果の少なくとも１つに基づいて生成される画像評価値であってもよい。
【０１３９】
上記実施形態において、画像表示部は、候補画像表示エリアに、編集対象のページに対応するグループに含まれ、編集対象のページには配置されていない画像だけ、つまり、画像編集部での画像配置の編集作業で使用される画像だけを表示しているが、本発明はこれに限定されない。
例えば、画像表示部は、候補画像表示エリアに、編集対象のページに対応するグループに含まれる全画像を表示し、例えば、編集対象のページに配置されていない画像に識別情報を付けて、編集対象のページに配置されている画像と配置されていない画像を識別可能に表示してもよい。
このように、編集対象のページに配置されている画像と配置されていない画像を識別可能に表示することにより、ユーザは、編集対象のページの画像配置の編集に使用可能な候補画像を即座に識別し、画像の選択、追加、入れ替え等の編集作業を簡単に行うことができる。
【０１４０】
また、画像表示部は、ユーザが候補画像を選択する時のサポート機能として、候補画像表示エリアに、前述の画像解析情報を表示することが望ましい。この場合、画像表示部は、候補画像表示エリアに、例えば、候補画像の評価値、顔検出結果（例えば、顔部分に丸印を付ける）、ボケ・ブレ判定結果（例えば、ボケ画像にボケマークを付ける）等を表示する。
このように、候補画像表示エリアに画像解析情報を表示することにより、ユーザは、画像解析情報の内容を考慮して、最適な候補画像を選択することができる。
【０１４１】
また、ユーザがレイアウト結果に不満を感じた場合に、ユーザが再レイアウトを指示することにより、使用するテンプレートを変更して自動で再レイアウトを行うようにすることが望ましい。
この場合、画像編集部は、ユーザの再レイアウトの指示に基づいて、画像表示部に表示された編集対象のページに適用されているテンプレートとは別のテンプレートを、テンプレート表示エリアに表示されたテンプレートの中から自動で選択し、編集対象のページで使用されている画像を、選択した別のテンプレートの画像配置領域に自動で配置し直す。
画像編集部によって別のテンプレートの画像配置領域に画像が配置された編集対象のページは、ユーザによる確認のために、画像表示部により、画像編集エリアに表示される。
このように、ユーザの再レイアウトの指示に基づいて、テンプレート選択から再レイアウトまでを自動で行うことより、ユーザは、マニュアルでテンプレートを選択して画像の再レイアウトを行う手間を大幅に省くことができる。
【０１４２】
また、再レイアウトを行う場合、ユーザが優先的に配置したい画像（優先画像）を指定可能であることが望ましい。
再レイアウトを行う場合に、ユーザにより優先画像が指定されると、画像編集部は、編集対象のページで使用されている画像を別のテンプレートの画像配置領域に配置する場合に、ユーザによって指定された優先画像を優先的に配置する。
例えば、図２０（Ａ）に示すように、ユーザのお気に入りであって、再レイアウト前に大きいサイズで配置されていた画像３が、単純に再レイアウトを行うと、同図（Ｂ）に示すように、再レイアウト後に小さいサイズで配置される可能性がある。これに対し、ユーザが画像３を優先画像として指定することにより、同図（Ｃ）に示すように、再レイアウト後も大きいサイズで配置することができる。
このように、ユーザが優先画像を指定可能とすることにより、再レイアウトを行う場合であっても、優先画像を優先的に配置することができる。
なお、逆に、再レイアウト前は小さいサイズで配置されていた他の画像１を、再レイアウト後に大きいサイズで配置することも可能である。
【０１４３】
本発明は、基本的に以上のようなものである。
以上、本発明について詳細に説明したが、本発明は上記実施形態に限定されず、本発明の主旨を逸脱しない範囲において、種々の改良や変更をしてもよいのはもちろんである。
【符号の説明】
【０１４４】
１０ 画像処理装置
１２ 画像取得部
１４ 画像分割部
１６ 画像解析部
１８ 画像抽出部
２０ 画像配置部
２２ 画像表示部
２４ 入力部
２６ 画像編集部
２８ 編集画面
３０ ページ指定エリア
３２ テンプレート指定エリア
３４ 候補画像表示エリア
３６ 画像編集エリア
３８ ページ
４０ テンプレート
４２ 候補画像
４４ 画像
４６ マーク
４８ 第１の画像追加ボタン
５０ 第２の画像追加ボタン
５２ 画像入替ボタン
【特許請求の範囲】
【請求項１】
複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理装置であって、
複数の画像を、該画像の付帯情報に基づいて、所定数のグループに分割する画像分割部と、
各々の前記画像を解析して、その画像解析情報を生成する画像解析部と、
前記グループ毎に、前記画像解析情報に基づいて、該グループに含まれる画像の中から所定数の画像を抽出する画像抽出部と、
前記グループ毎に、前記画像抽出部により前記グループから抽出された画像を、該グループに対応するページに配置する画像配置部と、
前記画像配置部により画像が配置されたページを表示する画像表示部と、
ユーザの指示に基づいて、前記画像配置部により画像が配置されたページにおける画像の配置を編集する画像編集部とを備え、
前記画像表示部は、前記ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、該第１のページに対応する第１のグループに含まれ、前記画像編集部による画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示するものであり、
前記画像編集部は、前記ユーザの指示に基づいて、前記候補画像表示エリアに表示された候補画像を用いて、前記画像編集エリアに表示された第１のページにおける画像の配置を編集するものであることを特徴とする画像処理装置。
【請求項２】
前記画像表示部は、前記第１のページに対応する第１のグループに含まれ、該第１のページには配置されていない候補画像のみを前記候補画像表示エリアに表示するものである請求項１に記載の画像処理装置。
【請求項３】
前記画像表示部は、前記第１のページに対応する第１のグループに含まれる全画像を、該第１のページに配置されている画像と配置されていない画像とを識別可能に、前記候補画像表示エリアに表示するものである請求項１に記載の画像処理装置。
【請求項４】
前記画像表示部は、前記候補画像表示エリアに前記画像解析情報を表示するものである請求項１〜３のいずれかに記載の画像処理装置。
【請求項５】
前記画像表示部は、全ての前記グループの候補画像に、各々の該候補画像が含まれるグループを表す識別情報を付し、該グループ毎にまとめて前記候補画像表示エリアに表示するものである請求項１に記載の画像処理装置。
【請求項６】
前記画像表示部は、前記第１のページに対応する第１のグループに含まれる候補画像を、前記候補画像表示エリアの先頭位置に表示するものである請求項５に記載の画像処理装置。
【請求項７】
前記画像表示部は、さらに、前記第１のページに対応する第１のグループに含まれる画像の枚数以下の画像を配置する画像配置領域を有するテンプレートが表示されるテンプレート表示エリアを前記表示画面内に表示するものであり、
前記画像配置部は、前記テンプレート表示エリアに表示されたテンプレートの中から、前記ユーザにより指定された第１のテンプレートを前記第１のページに適用し、前記画像抽出部により該第１のページに対応する第１のグループから抽出された画像を、前記第１のテンプレートの画像配置領域に配置するものである請求項１〜６のいずれかに記載の画像処理装置。
【請求項８】
前記画像編集部は、前記第１のテンプレートから第２のテンプレートに変更されて画像配置領域の数が増加した場合に、前記第１のページに対応する第１のグループに含まれる候補画像の中から、前記画像解析情報に基づいて、前記画像配置領域の数の増加分の第１の候補画像を取得するものであり、
前記画像配置部は、前記第２のテンプレートを前記第１のページに適用し、前記第１のグループから抽出された画像および前記第１の候補画像を、前記第２のテンプレートの画像配置領域に配置するものである請求項７に記載の画像処理装置。
【請求項９】
前記画像編集部は、前記第１のテンプレートから第３のテンプレートに変更されて画像配置領域の数が減少した場合に、前記第１のページに配置された画像の中から、前記画像解析情報に基づいて、前記画像配置領域の減少分の第１の画像を取得するものであり、
前記画像配置部は、前記第３のテンプレートを前記第１のページに適用し、前記第１のグループから抽出された画像から前記第１の画像を削除した残りの画像を、前記第３のテンプレートの画像配置領域に配置するものである請求項７に記載の画像処理装置。
【請求項１０】
前記画像表示部は、第１の画像追加ボタンを前記表示画面内に表示するものであり、
前記画像編集部は、前記ユーザにより前記第１の画像追加ボタンが押下された場合に、前記第１のページに対応する第１のグループに含まれる候補画像の中から、前記画像解析情報に基づいて第２の候補画像を指定し、該第２の候補画像を、前記第１のページに追加するものである請求項２または３に記載の画像処理装置。
【請求項１１】
前記画像表示部は、第２の画像追加ボタンを前記表示画面内に表示するものであり、
前記画像編集部は、前記候補画像表示エリアに表示された候補画像の中から、前記ユーザにより１以上の候補画像が指定された後、前記第２の画像追加ボタンが押下された場合に、前記１以上の候補画像を、該１以上の候補画像が含まれるグループに対応するページに追加するものである請求項５に記載の画像処理装置。
【請求項１２】
前記画像表示部は、画像入替ボタンを前記表示画面内に表示するものであり、
前記画像編集部は、前記画像編集エリアに表示された画像の中から、前記ユーザにより１以上の画像が指定された後、前記画像入替ボタンが押下された場合に、前記第１のページに対応する第１のグループに含まれる候補画像の中から、前記画像解析情報に基づいて、前記１以上の画像と同数の第３の候補画像を指定し、該第３の候補画像と前記１以上の画像とを入れ替えるものである請求項２または３に記載の画像処理装置。
【請求項１３】
前記画像配置部は、前記画像抽出部によりグループから抽出された画像を、前記画像解析情報に基づいて、前記グループに対応するページに配置するものである請求項１〜１２のいずれかに記載の画像処理装置。
【請求項１４】
前記画像配置部は、前記画像抽出部によりグループから抽出された画像を、該グループに対応するページに前記画像の撮影時刻順に配置し、
さらに、前記第３の候補画像と前記１以上の画像とが入れ替えられた後、前記画像編集エリアに表示された画像を前記撮影時刻順に並べ替えるものである請求項１２に記載の画像処理装置。
【請求項１５】
前記画像編集部は、前記ユーザの再レイアウトの指示に基づいて、前記画像表示部に表示された第１のページに適用されているテンプレートとは別のテンプレートを、前記テンプレート表示エリアに表示されたテンプレートの中から選択し、該第１のページで使用されている画像を、該別のテンプレートの画像配置領域に配置するものであり、
前記画像表示部は、前記画像編集部によって該別のテンプレートの画像配置領域に画像が配置された第１のページを前記画像編集エリアに表示するものである請求項１〜１４のいずれかに記載の画像処理装置。
【請求項１６】
前記画像編集部は、前記第１のページで使用されている画像を前記別のテンプレートの画像配置領域に配置する場合に、前記ユーザによって指定された画像を優先して配置するものである請求項１５に記載の画像処理装置。
【請求項１７】
前記画像解析情報は、個々の画像解析項目の解析結果の少なくとも１つに基づいて生成される評価値である請求項１〜１６のいずれかに記載の画像処理装置。
【請求項１８】
前記画像解析情報は、個々の画像解析項目の解析結果そのものである請求項１〜１６のいずれかに記載の画像処理装置。
【請求項１９】
前記フォトコンテンツは、所定数のページからなるフォトブック、所定数のページからなるカレンダー、もしくは、所定数の画像が各々のページにランダムにシャッフルされてプリントされた、所定数のページからなるシャッフルプリントである請求項１〜１８のいずれかに記載の画像処理装置。
【請求項２０】
複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理方法であって、
複数の画像を、該画像の付帯情報に基づいて、所定数のグループに分割する画像分割ステップと、
各々の前記画像を解析して、その画像解析情報を生成する画像解析ステップと、
前記グループ毎に、前記画像解析情報に基づいて、該グループに含まれる画像の中から所定数の画像を抽出する画像抽出ステップと、
前記グループ毎に、前記画像抽出ステップで前記グループから抽出された画像を、該グループに対応するページに配置する画像配置ステップと、
前記画像配置ステップで画像が配置されたページを表示する画像表示ステップと、
ユーザの指示に基づいて、前記画像配置ステップで画像が配置されたページにおける画像の配置を編集する画像編集ステップとを備え、
前記画像表示ステップにより、前記ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、該第１のページに対応する第１のグループに含まれ、前記画像編集ステップでの画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示し、
前記画像編集ステップにより、前記ユーザの指示に基づいて、前記候補画像表示エリアに表示された候補画像を用いて、前記画像編集エリアに表示された第１のページにおける画像の配置を編集することを特徴とする画像処理方法。
【請求項２１】
請求項２０に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラム。
【請求項２２】
請求項２０に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【請求項１】
複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理装置であって、
複数の画像を、該画像の付帯情報に基づいて、所定数のグループに分割する画像分割部と、
各々の前記画像を解析して、その画像解析情報を生成する画像解析部と、
前記グループ毎に、前記画像解析情報に基づいて、該グループに含まれる画像の中から所定数の画像を抽出する画像抽出部と、
前記グループ毎に、前記画像抽出部により前記グループから抽出された画像を、該グループに対応するページに配置する画像配置部と、
前記画像配置部により画像が配置されたページを表示する画像表示部と、
ユーザの指示に基づいて、前記画像配置部により画像が配置されたページにおける画像の配置を編集する画像編集部とを備え、
前記画像表示部は、前記ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、該第１のページに対応する第１のグループに含まれ、前記画像編集部による画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示するものであり、
前記画像編集部は、前記ユーザの指示に基づいて、前記候補画像表示エリアに表示された候補画像を用いて、前記画像編集エリアに表示された第１のページにおける画像の配置を編集するものであることを特徴とする画像処理装置。
【請求項２】
前記画像表示部は、前記第１のページに対応する第１のグループに含まれ、該第１のページには配置されていない候補画像のみを前記候補画像表示エリアに表示するものである請求項１に記載の画像処理装置。
【請求項３】
前記画像表示部は、前記第１のページに対応する第１のグループに含まれる全画像を、該第１のページに配置されている画像と配置されていない画像とを識別可能に、前記候補画像表示エリアに表示するものである請求項１に記載の画像処理装置。
【請求項４】
前記画像表示部は、前記候補画像表示エリアに前記画像解析情報を表示するものである請求項１〜３のいずれかに記載の画像処理装置。
【請求項５】
前記画像表示部は、全ての前記グループの候補画像に、各々の該候補画像が含まれるグループを表す識別情報を付し、該グループ毎にまとめて前記候補画像表示エリアに表示するものである請求項１に記載の画像処理装置。
【請求項６】
前記画像表示部は、前記第１のページに対応する第１のグループに含まれる候補画像を、前記候補画像表示エリアの先頭位置に表示するものである請求項５に記載の画像処理装置。
【請求項７】
前記画像表示部は、さらに、前記第１のページに対応する第１のグループに含まれる画像の枚数以下の画像を配置する画像配置領域を有するテンプレートが表示されるテンプレート表示エリアを前記表示画面内に表示するものであり、
前記画像配置部は、前記テンプレート表示エリアに表示されたテンプレートの中から、前記ユーザにより指定された第１のテンプレートを前記第１のページに適用し、前記画像抽出部により該第１のページに対応する第１のグループから抽出された画像を、前記第１のテンプレートの画像配置領域に配置するものである請求項１〜６のいずれかに記載の画像処理装置。
【請求項８】
前記画像編集部は、前記第１のテンプレートから第２のテンプレートに変更されて画像配置領域の数が増加した場合に、前記第１のページに対応する第１のグループに含まれる候補画像の中から、前記画像解析情報に基づいて、前記画像配置領域の数の増加分の第１の候補画像を取得するものであり、
前記画像配置部は、前記第２のテンプレートを前記第１のページに適用し、前記第１のグループから抽出された画像および前記第１の候補画像を、前記第２のテンプレートの画像配置領域に配置するものである請求項７に記載の画像処理装置。
【請求項９】
前記画像編集部は、前記第１のテンプレートから第３のテンプレートに変更されて画像配置領域の数が減少した場合に、前記第１のページに配置された画像の中から、前記画像解析情報に基づいて、前記画像配置領域の減少分の第１の画像を取得するものであり、
前記画像配置部は、前記第３のテンプレートを前記第１のページに適用し、前記第１のグループから抽出された画像から前記第１の画像を削除した残りの画像を、前記第３のテンプレートの画像配置領域に配置するものである請求項７に記載の画像処理装置。
【請求項１０】
前記画像表示部は、第１の画像追加ボタンを前記表示画面内に表示するものであり、
前記画像編集部は、前記ユーザにより前記第１の画像追加ボタンが押下された場合に、前記第１のページに対応する第１のグループに含まれる候補画像の中から、前記画像解析情報に基づいて第２の候補画像を指定し、該第２の候補画像を、前記第１のページに追加するものである請求項２または３に記載の画像処理装置。
【請求項１１】
前記画像表示部は、第２の画像追加ボタンを前記表示画面内に表示するものであり、
前記画像編集部は、前記候補画像表示エリアに表示された候補画像の中から、前記ユーザにより１以上の候補画像が指定された後、前記第２の画像追加ボタンが押下された場合に、前記１以上の候補画像を、該１以上の候補画像が含まれるグループに対応するページに追加するものである請求項５に記載の画像処理装置。
【請求項１２】
前記画像表示部は、画像入替ボタンを前記表示画面内に表示するものであり、
前記画像編集部は、前記画像編集エリアに表示された画像の中から、前記ユーザにより１以上の画像が指定された後、前記画像入替ボタンが押下された場合に、前記第１のページに対応する第１のグループに含まれる候補画像の中から、前記画像解析情報に基づいて、前記１以上の画像と同数の第３の候補画像を指定し、該第３の候補画像と前記１以上の画像とを入れ替えるものである請求項２または３に記載の画像処理装置。
【請求項１３】
前記画像配置部は、前記画像抽出部によりグループから抽出された画像を、前記画像解析情報に基づいて、前記グループに対応するページに配置するものである請求項１〜１２のいずれかに記載の画像処理装置。
【請求項１４】
前記画像配置部は、前記画像抽出部によりグループから抽出された画像を、該グループに対応するページに前記画像の撮影時刻順に配置し、
さらに、前記第３の候補画像と前記１以上の画像とが入れ替えられた後、前記画像編集エリアに表示された画像を前記撮影時刻順に並べ替えるものである請求項１２に記載の画像処理装置。
【請求項１５】
前記画像編集部は、前記ユーザの再レイアウトの指示に基づいて、前記画像表示部に表示された第１のページに適用されているテンプレートとは別のテンプレートを、前記テンプレート表示エリアに表示されたテンプレートの中から選択し、該第１のページで使用されている画像を、該別のテンプレートの画像配置領域に配置するものであり、
前記画像表示部は、前記画像編集部によって該別のテンプレートの画像配置領域に画像が配置された第１のページを前記画像編集エリアに表示するものである請求項１〜１４のいずれかに記載の画像処理装置。
【請求項１６】
前記画像編集部は、前記第１のページで使用されている画像を前記別のテンプレートの画像配置領域に配置する場合に、前記ユーザによって指定された画像を優先して配置するものである請求項１５に記載の画像処理装置。
【請求項１７】
前記画像解析情報は、個々の画像解析項目の解析結果の少なくとも１つに基づいて生成される評価値である請求項１〜１６のいずれかに記載の画像処理装置。
【請求項１８】
前記画像解析情報は、個々の画像解析項目の解析結果そのものである請求項１〜１６のいずれかに記載の画像処理装置。
【請求項１９】
前記フォトコンテンツは、所定数のページからなるフォトブック、所定数のページからなるカレンダー、もしくは、所定数の画像が各々のページにランダムにシャッフルされてプリントされた、所定数のページからなるシャッフルプリントである請求項１〜１８のいずれかに記載の画像処理装置。
【請求項２０】
複数ページからなるフォトコンテンツの各々のページにおける画像の配置を編集する画像処理方法であって、
複数の画像を、該画像の付帯情報に基づいて、所定数のグループに分割する画像分割ステップと、
各々の前記画像を解析して、その画像解析情報を生成する画像解析ステップと、
前記グループ毎に、前記画像解析情報に基づいて、該グループに含まれる画像の中から所定数の画像を抽出する画像抽出ステップと、
前記グループ毎に、前記画像抽出ステップで前記グループから抽出された画像を、該グループに対応するページに配置する画像配置ステップと、
前記画像配置ステップで画像が配置されたページを表示する画像表示ステップと、
ユーザの指示に基づいて、前記画像配置ステップで画像が配置されたページにおける画像の配置を編集する画像編集ステップとを備え、
前記画像表示ステップにより、前記ユーザにより指定された編集対象の第１のページに配置された画像が表示される画像編集エリアと、該第１のページに対応する第１のグループに含まれ、前記画像編集ステップでの画像配置の編集で使用される候補画像が表示される候補画像表示エリアとを、表示画面内に表示し、
前記画像編集ステップにより、前記ユーザの指示に基づいて、前記候補画像表示エリアに表示された候補画像を用いて、前記画像編集エリアに表示された第１のページにおける画像の配置を編集することを特徴とする画像処理方法。
【請求項２１】
請求項２０に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラム。
【請求項２２】
請求項２０に記載の画像処理方法の各々のステップをコンピュータに実行させるプログラムが記録されたコンピュータ読み取り可能な記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【公開番号】特開２０１３−３３４５３（Ｐ２０１３−３３４５３Ａ）
【公開日】平成２５年２月１４日（２０１３．２．１４）
【国際特許分類】
【出願番号】特願２０１２−１３５３９３（Ｐ２０１２−１３５３９３）
【出願日】平成２４年６月１５日（２０１２．６．１５）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
【公開日】平成２５年２月１４日（２０１３．２．１４）
【国際特許分類】
【出願日】平成２４年６月１５日（２０１２．６．１５）
【出願人】（３０６０３７３１１）富士フイルム株式会社 (25,513)
【Ｆターム（参考）】
[ Back to top ]