画像表示装置、画像表示方法及びコンピュータプログラム
【課題】一度に多くの画像を同時に眺めることができる新しい画像群の表示技術であって、各画像の配置を固定することなく自律的に移動しながら表示する技術を提供する。
【解決手段】複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置であって、 前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する処理手段と、前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御手段とを備え、前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、前記処理手段は、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定する。
【解決手段】複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置であって、 前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する処理手段と、前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御手段とを備え、前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、前記処理手段は、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置、画像表示方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラの普及に伴い、簡単にデジタル写真を撮影することが可能となり、ユーザが画像を撮影する機会は確実に増えてきている。撮影された画像データは通常、パーソナルコンピュータ（ＰＣ）のハードディスク等に蓄積されることが多い。その量は年々増えてしまうため、さまざまなタグ情報等を活用してこれらを整理しようとする試みも有効である。
【０００３】
特許文献１は、コンピュータの表示装置の画面上であたかもプリントアウトされた写真を机の上に広げて仕分け作業を行っているのと同じ感覚で、画像の整理を行わせる技術を開示している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−２７６１６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、複雑なメタデータを用意してもユーザはあまり利用せず、多くの場合、撮影日時など単純なタグ情報だけで十分といえる。また、撮りためた画像の中から特定の写真を探し出して利用するという機会は、実はそれほど多くはない。日常生活の中では、むしろスライドショーやデジタルフォトフレーム等を使って、なんとなく無意識に（アンビエントに）画像を眺めていることの方が多い。
【０００６】
このように明確な意図があるわけではないが撮った画像をなんとなく見たい、あまり明確に意識しなくても画像を楽しみたい、さりげなく人にも見せたい、といった要望に適格に応えることのできる画像群の表示方法はこれまで提案されていなかった。
【０００７】
そこで、本発明は一度に多くの画像を同時に眺めることができる新しい画像群の表示技術であって、各画像の配置を固定することなく自律的に移動しながら表示する技術を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するための本発明は、複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置であって、
前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する処理手段と、
前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御手段と
を備え、
前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、
前記処理手段は、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定することを特徴とする。
【発明の効果】
【０００９】
以上の本発明によれば、一度に多くの画像を同時に眺めることができる新しい画像群の表示技術であって、各画像の配置を固定することなく自律的に移動しながら表示する技術を提供することができる。
【図面の簡単な説明】
【００１０】
【図１Ａ】発明の実施形態に対応する画像表示装置のハードウェア構成の一例を示すブロック図。
【図１Ｂ】発明の実施形態に対応する画像表示の基本概念を説明するための図。
【図２】発明の実施形態に対応する処理のフローチャート。
【図３】発明の実施形態に対応する表示画面における画像表示の一例を示す図。
【図４】発明の実施形態に対応する、速度ベクトルの方向及び画像の回転方向の設定方法を説明するための図。
【図５Ａ】発明の実施形態に対応する、回転を考慮しない場合の画像の遷移状態を示す図。
【図５Ｂ】発明の実施形態に対応する、回転を考慮した場合の画像の遷移状態を示す図。
【図５Ｃ】発明の実施形態に対応する、表示領域が拡大された場合の画像の遷移状態を示す図。
【図５Ｄ】発明の実施形態に対応する、注目画像の拡大表示の一例を示す図。
【図６】発明の実施形態に対応する画像のデータ構造の一例を示す図。
【図７】発明の実施形態に対応する類似の属性を持つ画像が集まった表示画面の一例を示す図。
【図８】発明の実施形態に対応する、地図上に画像を重畳表示した表示形態の一例を示す図。
【発明を実施するための形態】
【００１１】
以下、添付する図面を参照して、発明の実施形態を説明する。図１Ａは、発明の実施形態に対応する画像表示装置１００のハードウェア構成の一例を示す図である。当該画像表示装置１００は、例えば、パーソナルコンピュータとして実現が可能である。しかしながら、画像表示装置１００の実施形態はパーソナルコンピュータに限定されるものではなく、ディスプレイを有し複数枚の画像を表示可能な装置であれば、どのようなものであってもよい。例えば、デジタルカメラ、携帯電話、スマートフォン、ＰＤＡ、ノートパソコン、カーナビ装置などが含まれる。
【００１２】
図１Ａにおいて、ＣＰＵ１０１は、ハードディスク等の内部記憶装置１１０に格納されているプログラム（ＯＳ、アプリケーションプログラム等）を、ＲＡＭ１０２を利用して実行することで画像表示装置１００の全体制御を行う。また、ＣＰＵ１０１は、画像表示用プログラム１１１を実行して、画像データ１１２を用いた本実施形態に対応する画像表示処理を行う。ＲＡＭ１０２は、ＣＰＵ１０１の主メモリ、ワークエリア等として機能する。操作部１０３は、ユーザからの操作指示を受け付けるためのユーザインタフェースであって、マウス、キーボードを含む。また、画像表示装置１００がタッチパネルを有する場合には、当該タッチパネルも操作部１０３として機能する。また、ユーザの視線検出を行うためにヘッドマウントディスプレイ（ＨＭＤ）を用いる場合、当該ＨＭＤを操作部１０３の一部とすることができる。
【００１３】
通信インタフェース（Ｉ／Ｆ）１０４は、画像表示装置１００が外部機器（デジタルカメラ、他のＰＣ、プリンタ）と通信するためのインタフェースや、ＬＡＮやインターネットに接続するためのネットワークインタフェースを含む。通信方式は、有線、無線の別を問わない。また、Bluetooth（登録商標）や赤外線通信等の近距離無線通信方式に対応することも可能である。ＲＯＭ１０５は、ＣＰＵ１０１で実行される処理プログラムの一部、例えば基本Ｉ／Ｏプログラム等のプログラムを記憶する。
【００１４】
表示制御部１０６は、画像やその他の情報を表示するためのディスプレイ１０７と接続され、ディスプレイ１０７に表示用の情報を出力する。ディスプレイ１０７は液晶パネル、有機ＥＬパネルなどで構成される。表示制御部１０６とディスプレイ１０７とは、画像表示装置１００に一体化されていてもよいし、外付けでケーブルなどにより接続されてもよい。ディスプレイ１０７の解像度やサイズは特に限定しないが、解像度やサイズに応じて実施形態に対応する画像表示処理における設定値が変更されてもよい。また、上述のようにディスプレイ１０７をタッチパネルとして構成して、操作部１０３を兼ねてもよい。サウンド処理部１０８は、内部記憶装置１１０が記憶するプログラム１１３に含まれるサウンドデータからＢＧＭや効果音を生成し、スピーカ１０９に生成したＢＧＭや効果音などを出力する。
【００１５】
内部記憶装置１１０は、例えばハードディスクやフラッシュメモリなど、書込と読出とが可能な記憶装置により構成されており、発明の実施形態に対応する画像表示用プログラム１１１、表示対象の画像データ１１２を記憶する。画像データ１１２は、通信インタフェース１０４を介してネットワークや外部装置から提供されてもよいし、メモリカード１１４から提供されてもよい。内部記憶装置１１０は更に、画像表示装置１００の動作に必要なプログラム１１３を記憶する。プログラム１１３には、ＯＳプログラム、アプリケーションプログラム、当該アプリケーションで使用されるデータ等が含まれる。
【００１６】
メモリカードインタフェース（Ｉ／Ｆ）１１３は、ＳＤカードやフラッシュメモリなどのメモリカードに記録された情報を読み取るためのメモリカード用インタフェースである。画像データ１１２は、当該カードを介して提供されてもよい。メモリカード１１４は、画像データや文書データなどの情報が記録された記憶媒体である。１１５は上述の各部を繋ぐバスであり、装置内のデータの流れを司る。
【００１７】
以下では、上述の構成を備える本実施形態における画像表示装置１００において実行される処理について説明する。まず、発明の基本的な技術的思想について概説する。
【００１８】
できるだけ多くの写真を単一のディスプレイを使って、ユーザが飽きることなく何となく無意識に（アンビエントに）眺めることを可能にする方法として、本実施形態では複数の画像の配置を固定することなくある程度自動的に動かしながら表示することを考える。
【００１９】
複数画像を配置して表示する手法として「フォトコラージュ」と呼ばれるものがある。このフォトコラージュは、画像を無造作に貼り合わせることで一枚絵の形として構成することが可能であって、複数画像を一度に見ることができるので効果的である。しかしながら、限られたスペース内に収容するための幾何学的な処理と、写真の色や意味に立ち入った処理が必要になる。これを自動または半自動的に作成する研究例として、Andreas Girgensohn and Patrick Chiu: Stained glass photo collages, In Proc. of ACM Symposium on User Interface Software and Technology, pp. 13-14, 2004.や、Heung-Yeung Shum: Picture Collage, In Proc. of IEEE Computer Society Conference on Computer Vision and Pattern Recognition, pp. 347-354, 2006.などがある。画像を配置するレイアウトを決めるために、フォトコラージュの良さを評価するエネルギー関数を定義して、これを最小化するという組み合わせ最適化問題を解くアプローチをとる場合が多いが、一般に、計算時間がかかる。そのため、リアルタイムにレイアウトが変わりゆく様子が表示されることはなく、最終的に決定されたレイアウトに基づく画像表示がなされるだけである。また、最終的なレイアウトは固定的なものであって、そこからまた別のレイアウトに徐々に遷移していくこともない。
【００２０】
これに対して本願では、複数の画像の配置を固定することなくある程度自動的に動かしながら表示する。そのため、画像の配置などに関する制約条件は常に変化すると考え、全体としての解を逐次評価して大局的な最適解を求めることはしない。そのかわり、個々の画像がそれぞれ局所的により良い状態に向かおうとすることによって、全体もより良い方向に向かうであろうという個別分散の考え方に基づき、その結果としての画像群の時々刻々の動きを画面表示する。この手法によれば、画像を閲覧しているユーザからの明確な指示がなくても一度に多くの写真を同時に表示することができると同時に、ユーザの指示に対して柔軟に反応してレイアウトを変更することができる。また、本手法は、スクリーンセーバーやデジタルフォトフレームのように画像を１枚ずつ順に表示するのではなく、多数の画像を同時に、かつ、表示位置や大きさを動的に変化させて表示することにより、画像群の新しい表示方法を提供するものである。
【００２１】
次に、図１Ｂを参照して、本実施形態における画像表示の基本概念を説明する。図１Ｂにおいて、表示画面１０００にはＸＹ座標軸が設定され、表示画面上の任意の位置を座標（ｘ、ｙ）により特定することができる。また、表示画面内に表示される各画像は、基準サイズが割り当てられ、基準サイズに対する倍率に応じて表示サイズが決定される。例えば、倍率が「×１」であれば、基準サイズと同一サイズの画像が表示される。なお、表示画面１０００上に表示する各画像は、原画像のサムネイル画像を用いることとして、予め基準サイズに対応する解像度に縮小すると共に基準サイズに合わせて縦横比を修正しておく。
【００２２】
画像の表示位置は、例えば、基準サイズに対応するテンプレートの重心位置（対角線の交点位置）の座標と、基準方向に対する傾き（回転角度）に従って決定することができる。本実施形態では基準方向をＸ軸方向とする。仮に回転角度が０度の場合には、重心位置の座標が画像の表示位置の座標と一致するようにテンプレートが配置され、当該テンプレートの上にサムネイル画像が重畳表示される。また、回転角度が３０度の場合には、表示位置の座標に配置されたテンプレートを３０度回転させることにより、表示位置を決定することができる。この場合の回転方向は、反時計回りで０度から３６０度まで設定することができる。
【００２３】
なお、以上の説明では、基本サイズのテンプレートを用いて表示を行う場合に特化して説明を行ったが、基本サイズのテンプレートを用いず、原画像の縦横比に基づくサムネイルを用いて表示を行ってもよい。その場合には、画像の位置は重心位置でなくてもよく、画像の頂点を利用してもよい。
【００２４】
そして本実施形態では、画像群の表示状態を同時に制御するために、画像毎に以下の３つのパラメータを制御する。
・表示領域（ウィンドウ）内での表示座標
・表示サイズ（基準に対する倍率）
・ウインドウ面内での回転角度
【００２５】
これら３つのパラメータを、隣接画像間の重なり合いの度合いなどに応じて時々刻々連続的に変化させることによって、画像群の全体としての動きを表現する。この方法によって、以下の効果が得られる。
【００２６】
・ 従来の局所探索法と異なり、解の評価をしないで済むため、計算を高速化できる。
【００２７】
・ 制御すべきパラメータの変化を単位時間あたりで捉えることができるので、画像の並べ方に関する要求事項や拘束条件等の変更を瞬時に反映させることができる。
【００２８】
以下、本実施形態に対応する画像表示アルゴリズムをより具体的に説明する。次に示す式（１）は、発明の実施形態に対応する画像表示アルゴリズムの基本式である。
【００２９】
式（１）は、最適化したいパラメータｘ の単位時間当たりの変化量dx/dt 、即ち画像の単位時間毎の画面内での画像の移動速度、倍率、回転角度を表す。右辺のは、画像の変化量を決定するためのパラメータの値に基づくベクトル関数である。このパラメータの値としては、例えば、注目画像とその隣接画像とのオーバーラップ量（重畳量）を用いることができる。ただし、パラメータの種類はオーバーラップ量に限定されるものではなく、より詳細な内容は後述する。また、ηは、ノイズ成分を表す。ノイズ成分の値は任意であって、単位時間毎にランダムに設定されてもよい。また、ユーザがリアルタイムで大きさを調節してもよい。また、必要がない場合には０としてもよい。また、方向成分が必要な場合（移動や回転の場合）には、ランダムに方向を選択して付加することができる。ノイズηは、式（１）において局所解に陥った状態から離脱するために用いられる。局所解に陥りやすい場合にはノイズη を大きくし、ランダム性を高めることにより、局所解から脱出させることができる。なお、ノイズ値は、変化量の種別に応じて、移動速度、倍率、回転角度のいずれかの値をとる。
【００３０】
に発見的な手法を用いると、局所探索法とは異なり、解を評価しないで済むため計算を高速化できる。また、一般的な最適化手法との大きな違いとして、最適化の最中に時間が経過することを見越している点が挙げられる。パラメータの変化が単位時間あたりであるため、最適化の条件が変わってもそれを
の引数として与えるように設計しておくことにより瞬時に最適化に反映される。この式を式（２）に示す形でパラメータの種類に応じて複数組み合わせ、徐々に全体としての最適解へ以降するアプローチをとる。ｗiは重みを表わす。本実施形態では、このようなパラメータのことを以下では「要求項目」と呼ぶ。
【００３１】
なお、このように複数の要求事項に基づいて最適化すると、最適化の基準が競合し局所解に陥ることが予想されるが、これをノイズ値によって脱出可能なことも、本手法の利点である。即ち、このノイズ値は、
の値が０となってしまう場合でも、画像に一定の変化量を与えるために設定されている。
【００３２】
いま、Ｐ を一つの画像データ、Ｉ を適当な入出力装置の情報、
を全写真データ、各写真の位置をPosition(P)、表示サイズ（基準に対する倍率）をScale(P)、回転角度をRotation(P)とする。それぞれに対応する要求事項の数をn、 m、 l として、式（２）を式（３Ａ）、（３Ｂ）、（３Ｃ）に変形して用いることとする。
【００３３】
式（３A）から（３C）は一つの注目画像データＰのパラメータを最適化する式を表したものであって、全画像についてこれらを計算する。なお、
はそれぞれ、各画像の位置、サイズ、回転角度の変化を表わす関数である。即ち、式（３A）によれば、画像の位置の変化率、即ち画像の単位時間あたりの移動速度及び移動方向を表す速度ベクトルを算出することができる。ここで求められた速度ベクトルに従って、該当する画像の表示画面上での表示位置が変化する。式（３B）によれば、画像の倍率を算出することができる。表示画面上に表示される各画像は、全画像に共通の基準サイズ（倍率：×１）が与えられており、表示画面上での表示サイズは、当該基準サイズに対する倍率によって決定される。また、式（３C）によれば、画像の単位時間あたりの回転角度及び回転方向を算出することができる。
【００３４】
発明の実施形態では以上の３つの変化量に基づいて、表示領域内に表示されている複数画像の各画像の表示状態を制御する処理の具体例を図２のフローチャートを参照して説明する。図２に対応する処理は、画像表示用プログラム１１１をＣＰＵ１０１が実行することにより実現される。
【００３５】
まず、Ｓ２０１では、式（３Ａ）から（３Ｃ）までの各変化量を算出するための要求項目の内容を決定する。要求項目の詳細については後述するが、幾何学的項目と意味的項目との大きく２種類が含まれる。続くＳ２０２では、表示画面上に表示されている複数の画像のうち、変化量の算出対象となる画像を選択する。続くＳ２０３では、Ｓ２０１において設定された要求項目毎に、速度ベクトル、回転角度及び方向、倍率の各変化量を算出する。
【００３６】
次にＳ２０４では、Ｓ２０３で算出した要求項目ごとの変化量を種別毎に合成して、合成速度ベクトル、合成回転角度・方向、合成倍率の各値を求める。続くＳ２０５では、Ｓ２０４で算出された合成結果の値に基づいて、表示画面上における選択画像の表示状態を直前の表示状態から変更する。例えば、算出された合成速度ベクトルに基づいて、選択画像の重心位置を速度ベクトルに基づく方向に単位時間あたりの速度に相当する距離だけ、直前の表示位置から移動させる。また、合成回転角度・方向については、算出された角度及び方向に基づいて選択画像の重心を基準に、直前の表示状態から回転させる。さらに、合成倍率については、算出された倍率に従って基準サイズから画像サイズを変更し、変更後のサイズに対応するサムネイル画像を表示する。
【００３７】
なお、発明の実施形態では、これらの値を単位時間ごとに全画像について計算するが、計算負荷を削減するために一部の写真についての計算を省略してもよい。例えば、ユーザが表示領域の一部の画像を指定している場合、その画像を基準として一定距離に位置する画像や、指定画像と共通する属性を有する画像を対象として計算を行ってもよい。
【００３８】
次に、発明の実施形態における要求項目を説明する。要求事項には、幾何学的項目と、意味的項目との２種類がある。まず幾何学的項目には、例えば以下のものが含まれる。
幾何学的項目１：他の画像と重ならないように並進移動する
幾何学的項目２：表示指定領域からはみ出さない
幾何学的項目３：他の画像と重ならないように小さくなる
幾何学的項目４：できるだけ大きくなる
幾何学的項目５：他の画像と重ならないように、または特定の目的のために回転する
【００３９】
また、意味的項目には、例えば以下のものが含まれる。
意味的項目１：注目画像の拡大
意味的項目２：属性が類似する画像を引き寄せる
【００４０】
本実施形態では、これらの要求項目毎に、画像の変化量を算出することとし、算出された変化量を合成することにより各画像の表示画面上での動きを制御する。例えば、幾何学的項目１及び２からそれぞれ速度ベクトルが得られれば、得られた２つの速度ベクトルを合成する。そして、得られた合成ベクトルを用いて対応する画像の表示位置を制御する。また、幾何学的項目３と幾何学的項目４とでそれぞれ倍率が得られた場合には、当該倍率を合成して対応する画像のその時点での表示倍率とすることができる。倍率の合成方法としては、例えば拡大を「正」、縮小を「負」として符号を与えて加算により計算してもよい。
【００４１】
また、意味的項目が加味される場合、意味的項目１については、注目画像と指定された画像の倍率は一定の倍率（例えば、最大倍率）まで強制的に拡大される。その際、注目画像以外の画像には幾何学的項目に基づく変化量が算出されるので、拡大する注目画像と重複しないように並進移動や倍率の縮小が行われる。
【００４２】
以下、各要件項目における変化量の算出方法の詳細を説明する。
【００４３】
＜幾何学的項目１について＞
まず、幾何学的項目１の「他の画像と重ならないように並進移動する」を考える。ここでは、処理対象の画像の枚数をＮ として、注目画像が他の画像と重なっていれば逆方向に移動する機能として式（４）に基づき実装可能である。
【００４４】
式（４）において、Avoid (P、 Pi) は画像P がPi と重なっていた場合にP が逃げる方向を示すベクトル関数である。Adjacency(P) は画像P と重なっている画像の集合である。即ち、Avoid (P、 Pi)からは、画像Ｐと画像Ｐｉとの重なり合いの度合い（重畳面積の大きさ）に応じた画像Ｐの変化量が、並進移動の速度ベクトルとして得られる。
【００４５】
図３は、このような重畳を避ける方向に並進移動する画像の様子を一例として示す。図３は、表示画面１０００上に複数の画像が表示されている様子を示す。このうちいくつかの画像は互いに重畳しているために、重畳を排除する方向に移動する。例えば、画像３０１、３０２、３０３の３枚の画像は、画像３０１と３０２、３０２と３０３が互いに重畳している。この重畳の有無は、例えば、画像を互いに向かい合う２つの頂点（ｘ１、ｙ１）、（ｘ２、ｙ２）で特定すると仮定した場合、当該頂点により特定される範囲ｘ１≦ｘ≦ｘ２、ｙ１≦ｙ≦ｙ１、或いは、矩形領域に他の画像のいずれかの頂点（ｘ３、ｙ３）が属するか否かにより判定することができる。
【００４６】
また、Avoid (P,Pi)は、画像ＰとＰｉの重畳面積（Ｓo）に基づく所定の関数として表せるが、たとえば、速度の最大値をＶmax、表示画像の面積をＳiとした場合に、Ｖmax・(Ｓo／Ｓi)として、重畳面積Ｓoに比例させてもよい。その一方、重畳面積ではなく重畳領域の対角線の長さにより決定することもできる。重なり合いの度合いを算出する基準は、重畳領域の大きさに比例するパラメータであればこれらに限定されない。また、重畳面積とは無関係に固定の大きさを与えても良い。また、速度ベクトルの方向は、画像の重畳を避ける方向に設定される。当該方向の決定方法としては、図４（Ａ）に示すように互いに重畳しあっている画像の重心を結んだ線分を延長し（一点鎖線４０１）、画像が互いに離れ合う方向（矢印４０２及び４０３）に設定することができる。また、画像が重なり合う領域の対角線の延長線上でもよい。
【００４７】
図３の例では、画像３０１は右下に位置する画像３０２と重畳しあっているので、速度ベクトルの方向は画面左上に向くように与えられる。また、画像は必ずしも１枚の画像と重なり合っているとは限らず、画像３０２のように複数枚の画像と重なり合っていることも考えられる。その場合には、重なり合っている画像同士で速度ベクトルを算出し、算出されたベクトルを合成して当該画像の速度ベクトルとすることができる。図３では、合成前の速度ベクトルを点線で、合成後の速度ベクトルを実線で示している。
【００４８】
＜幾何学的項目２について＞
次に幾何学的項目２の「表示指定領域からはみ出さない」について考える。この項目は、ウインドウなどの表示領域として指定されている領域から画像がはみ出していれば内側に留める機能として式（５）に基づき実装できる。L、 B、 R、T はそれぞれウインドウなど表示画面１０００の左端、下端、右端、上端の座標を、L(P)、 B(P)、 R(P)、 T(P) はそれぞれ画像P の左端、下端、右端、上端の座標を表し、Al、 Ab、Ar、 At は係数を表す。なお、表示画面に対する座標系の設定は、図１Ｂに示したとおりである。式（５）では、表示画面１０００からの画像Ｐのはみ出し量に係数を掛け合わせることで、４方向における画像の速度ベクトルを算出する。
【００４９】
図３において、画像３０４は、表示画面１０００からはみ出した画像の例を示している。この場合、画像は表示画面１０００の上端の座標を超えて存在していることとなるので、下端に向かう速度ベクトルが設定される。速度ベクトルの大きさは、上記の画像間の重畳面積Ｓoの場合と同様、はみ出している領域の面積の大きさに基づく関数として決定されてもよいし、それとは無関係に固定値としても良い。
【００５０】
＜幾何学的項目３について＞
次に、幾何学的項目３の「他の画像と重ならないように小さくなる」について考える。この場合、画像を縮小することで重なりを回避する機能を式（６）に基づいて実装できる。ここで得られる値は、画像の表示倍率であり、対象画像の倍率を算出値に基づいて変更する。ただし二つの画像が重なっていた場合は、表示倍率が大きい方を縮小し、かつ、表示倍率が最小倍率よりも大きいことを前提とする。なお、Scale(P)は表示サイズ（基準に対する倍率）を表し、Ａslは係数を表す。また、Scaleminは最小倍率を示し、一つの実施形態では「×１」として基準サイズよりも小さくしないように設定することもできる。その場合であっても、基準サイズを別途設定可能にすることもできる。式（６）では、画像Ｐの倍率と最小倍率との差分に係数を掛け合わせることで縮小後の画像の表示倍率を算出することができる。
【００５１】
図３において、画像３０５は、画像３０６と重なり合っていたために倍率が縮小された画像である。実線で示す矩形領域は画像３０６と重なり合っているが、倍率が縮小されて点線で表す大きさまで縮小される。ここでは、画像３０６が画像３０５よりも倍率の小さい画像であるために、画像３０５の倍率が縮小されている。
【００５２】
＜幾何学的項目４について＞
次に幾何学的項目４の「できるだけ大きくなる」について考える。この場合、画像Ｐが他の画像Ｐｉと重なっていない場合に拡大する機能として、式（７）に基づいて実装できる。ここで得られる値は、拡大後の画像の倍率であり、対象画像の倍率を算出値に基づいて変更する。式（７）では、最大倍率と現在の倍率との差分を新たな倍率としているが、差分に所定の係数を掛け合わせてもよい。また、それ以外にも例えば倍率を単位時間当たり「×0.5」ずつ増加させることができる。仮に基準サイズ「×１」から始まる場合、×１．５、×２、×２．５・・・のように増加する。倍率の増加単位は任意であり、０．５より大きくても小さくてもよい。あるいは、隣接画像との間隔に基づいて決定されてもよい。
【００５３】
なお、Scale(P)は表示サイズ（基準に対する倍率）を表す。また、Scalemaxは最大倍率を示す。
【００５４】
図３において、画像３０７は、いずれの画像とも重畳していたために倍率が拡大される画像である。実線で示す矩形領域は現在の画像３０７のサイズを示すが、倍率が拡大されて点線で表す大きさまで拡大される。なお、Scale(P)は表示サイズ（基準に対する倍率）を表す。また、Scalemaxは最大倍率を示す。
【００５５】
＜幾何学的項目５について＞
次に幾何学的項目５の「他の画像と重ならないように回転する」について考える。ここでは、処理対象の画像の枚数をＮ として、注目画像が他の画像と重なっていれば重なりを排除する方向に回転する機能として式（８）に基づき実装可能である。式（８）において、Rotation (P,Pi) は画像P がPi と重なっていた場合にP が逃げる回転方向及び角度を示す。Adjacency(P) は画像P と重なっている画像の集合である。即ち、Rotation (P、 Pi)からは、画像Ｐと画像Ｐｉとの重なり合いの度合い（重畳面積の大きさ）に応じた画像Ｐの変化量が、所定方向の回転角度として得られる。
【００５６】
例えば、図３において、画像３０８は、画像３０９と重なり合っているが、時計方向に角度θ１だけ回転することで重なり合わなくなる。即ち、上記式（８）に基づき時計方向に角度θ１が得られる。以下、この回転方向と角度の算出方法を説明する。
【００５７】
まず、２つの画像の領域を確定し、一方の画像の４つの頂点が他方の画像の領域内に属するか否かを判定する。もし、いずれかの頂点が領域内に属すると判定された場合、どの頂点が領域内に属するかを判定する。例えば、図４（Ｂ）に示すように、画像の長辺が横向きになるように座標軸を考えた場合、第１象限に属する頂点：Ｖ１、第２象限に属する頂点：Ｖ２、第３象限に属する頂点Ｖ３、第４象限に属する頂点：Ｖ４とすることができる。この場合、Ｖ１、Ｖ３が他の画像の領域に属していた場合、回転方向を時計回り方向とし、Ｖ２、Ｖ４が他の領域に属していた場合、回転方向を反時計回り方向とする。そして、決定された回転方向に従い単位角度（例えば５度）ずつ回転させて、該当頂点が他の画像の領域内に属さなくなったか否かを判定する。もし、属さなくなった場合には、そのときの角度を回転角度とする。仮に、回転角度が９０度となっても重なり合いが解消しない場合には、回転中心を変更する。これは、重複の度合いが大きい場合には、画像の重心を中心として回転しても重なり合いが解消しない場合があるためである。この場合、回転中心を画像の重心から画像の他の頂点に変更する。
【００５８】
その他の幾何学的項目に関する機能も同様に実現できる。
【００５９】
次に、図５Ａ乃至図５Ｃを参照して、幾何学的項目に従って画像を表示した場合の、表示画面の遷移の様子を説明する。
【００６０】
図５Ａでは、幾何学的項目１乃至４のみ設定し、回転は考慮していない。よって、個々の画像は，表示領域として指定された領域からはみ出さない範囲でできるだけ大きくなろうとし，また平行移動や縮小により、他の画像との重なりを回避している。状態５０１は７５枚の画像を読みこんだ直後の状態を示し、表示画面内でランダムな初期位置に各画像が表示されている。その後、状態５０２、５０３と時間が経過するに従い、個々の画像が大きくなろうとする力と重なりを回避しようとする力がバランスをとり、ある程度の時間が経つと（約５，６秒後）、状態５０４のように自然に隙間なく並ぶようになる。なお、状態５０４の表示状態であっても、ノイズ成分ηのために画像は静止せず、絶えず動いている。もし、ここでノイズ成分ηを大きくすれば、状態５０４の表示状態であってもいずれかの画像が移動を開始し、その移動に応じて他の画像も移動を開始して状態５０２や状態５０３に戻っていく。
【００６１】
また、図５Ｂ は、図５Ａの要求項目にさらに幾何学的項目５を加えて、回転を考慮した場合の表示例を示す。この場合、個々の画像は、表示領域として指定された領域からはみ出さない範囲でできるだけ大きくなろうとし、また回転、平行移動、縮小により他の画像との重なりを回避している。状態５１１は、初期状態を表し、状態５１２は一定時間経過後の画像が画面内に配列された状態を示している。図５Ｂのような表示形態は、テーブル型ディスプレイを囲む４ 辺から人が見るような場合に有効である。
【００６２】
図５Ｃは、画像の動きを制約する条件の１つである表示領域（ウインドウ）のサイズが変化した場合の表示画面１０００の遷移を一例として示す。このときの要求項目は上記の幾何学的項目１乃至４である。状態５２１では、狭い領域に多くの画像が押し込められているので各画像は非常に小さく表示されている。次に、状態５２２ではウインドウが右方向に拡大されたことにより、画像が密集する領域の画面右側に空間ができる。この空間に隣接している画像は、表示画面１０００の右側端による制約を受けなくなったために、幾何学的項目４に従い拡大を開始する。また、拡大することにより隣接する画像と重なり合うことになるので、幾何学的項目１に従い、並進移動を行う。これにより、画像が徐々に画面右側の空間に拡大しながら移動していくことになる。その様子を状態５２３及び５２４が示している。状態５２４では、右端の画像が表示画面の右側端に到達したのでこの時点で幾何学的項目２による制約が働くと共に、画面左側に位置する画像からの影響を受けて幾何学的項目３の制約により適切なサイズに縮小していくこととなる。その結果、状態５２５では、画面右端に位置している画像のサイズが、状態５２４と比べて小さくなっている。このようにして画像サイズ及び位置が調整され最終的に状態５２６のような状態になり、全画像のサイズがほぼ均一になる。
【００６３】
＜意味的項目１について＞
次に、意味的項目について説明する。まず、意味的項目１の注目画像の拡大機能は、式（９）に基づいて実装できる。ここで「Attention」 は注目画像の集合であって、表示画面上でカーソルが画像に重畳された場合、或いは、ユーザの視線を検出可能な視線検出装置に基づいて、注目画像として特定されたものがそこに含まれる。注目画像は１枚に限定されず、複数枚であってもよい。また、Ａalは、任意の係数である。即ち、式（９）では、注目画像の現在の倍率と最大倍率との差分に係数を掛け合わせて拡大後の倍率を計算している。従って、係数の大きさによって注目画像の拡大速度を調節することが可能である。
【００６４】
ここで図５Ｄに、注目画像が拡大表示された表示状態の一例を示す。図５Ｄにおいて、枠に囲まれた画像５３１が拡大された画像である。当該画像５３１は、カーソル５３２が画像に重畳されたことに伴って拡大されたものである。
【００６５】
なお、注目画像の特定は、操作部１０３のマウスやタッチパネルを介して行うことができる。また、操作部１０３としてヘッドマウントディスプレイ（ＨＭＤ）を利用する場合に、ＨＭＤに搭載された視線検出機能を利用して、ユーザの視線方向を検出して注目画像を特定することもできる。また、複数の入力装置を介して複数人が同時に異なる画像を指定できるようにしてもよい。例えば、複数台の画像表示装置をＬＡＮで接続して操作情報を共有することで、共通の画面上で複数人がインタラクションすることができる。また、タッチパネルディスプレイのサイズを大型化したり、複数台のＨＭＤを利用してもよい。また、操作部がマイクを備え、ＣＰＵ１０１が音声認識処理を実行することで、ユーザから入力されたキーワードに従って画像の特徴量の指定を受けてもよい。例えば、「黄色」、「青」などの色に関するキーワードや、「花」、「人」、「橋」といった被写体に関するキーワードを受け付けてもよい。ディスプレイ１０７については、サイズ、解像度、台数、設置場所などが可変パラメータと考えられる。また、表示可能なディスプレイは１台に限定されるわけではなく、環境の中に複数台のディスプレイが存在する場合に、表示枚数や解像度などに従って最適なディスプレイを選択して画像群を表示してもよい。なお、これらの入出力装置に関する情報は、上述の式では全てＩとして扱っている。
【００６６】
＜意味的項目２について＞
次に、意味的項目２の注目画像と属性が類似する画像を引き寄せる機能について考える。この機能は式（１０Ａ）及び式（１０Ｂ）に基づいて実装することができる。ここで、Similarity(P,Pi)は画像ＰとＰｉとの間の類似度を示し、Threshold は、閾値を表わす。また、Position()は画像の位置を示し、{Position(Pi)-Position(P)}で画像Ｐと画像Ｐｉとの間の距離を表す。類似度が閾値以上の場合、画像Ｐに与えられる速度ベクトルは、類似度が大きくなればなるほど大きくなり、また、画像ＰとＰｉとの距離が大きくなるほど大きくなる。即ち、画像Ｐｉと離れた位置にある類似度の高い画像Ｐは大きな速度ベクトルが与えられることになる。逆に、類似度が閾値未満の場合、画像に与えられる速度ベクトルは、類似度が小さくなればなるほど、また、画像ＰとＰｉとの距離が短いほど画像Ｐｉから離れる方向（逆方向）に大きくなる。
【００６７】
なお、類似度の判定手法は、画像を画像解析して得られる特徴量（例えば、平均色、或いは、代表色（画像内で最も多くの画素を占める色）等）やタグの関連度などに基づいて行なうことができる。
【００６８】
【００６９】
次に画像の類似度を判定するための画像の属性情報について説明する。図６は、図１Ａの画像データ１１２における画像のデータ構造の一例を示す図である。図６では、理解の簡単のためにテーブル構造を用いて説明する。図６のテーブル６００においてＩＤ６０１は、画像を一意に識別するための識別子として付与される。当該ＩＤは画像のテーブルへの登録順番を示す情報として付与されてもよい。ファイル名６０２は、画像に付与されたファイル名を示す。ファイル名は、撮影日時を示す値が与えられてもよい。撮影日６０３には、当該画像の撮影が行われた撮影日の情報が登録される。撮影時刻６０４には、当該画像の撮影が行われた時刻の情報が登録される。撮影日６０３と撮影時刻６０４とで、画像の撮影日時を特定することができる。撮影場所６０５は、撮影が行われた場所の緯度及び経度といった位置情報が登録される。画像の撮影を行ったデジタルカメラがＧＰＳ受信機を有する場合、撮影場所のＧＰＳ位置情報が画像の撮影時にタグ情報として画像に付与される。
【００７０】
格納場所６０６は、各画像が画像表示装置１００内で格納されている位置を示すパス情報である。図６では、image001.jpgからimage003.jpgまでがルートディレクトリの下のimage/pic/2011/0129というフォルダ内に格納されていることが示されている。特徴量６０７は、意味的項目により画像の振る舞いを制御する際に利用可能な、各画像の特徴量が登録されている。当該特徴量には、上記の平均色、代表色の情報の他、被写体に関する情報（被写体情報）が含まれる。平均色は、例えば画像の各画素値の色値の平均から得られる。代表色は、色値についてヒストグラムを作成するなどして、画像内で最も使用頻度の高い色値を特定することにより得られる。被写体情報は、被写体である人物の情報や建物の情報をユーザが個人的に入力してもよいし、緯度・経度情報に従って撮影場所に関する情報を登録してもよい。あるいは、撮影に関連するイベントの情報（例えば、運動会、遠足、入学式、卒業式等）をユーザからの入力に従って登録してもよい。なお、計算により求められる特徴量は予め計算せずに画像表示を行う際にリアルタイムに計算してもよいが、本願発明の本質的な技術的特徴ではないので特徴量を算出するタイミングは特に限定されない。
【００７１】
このように画像に与えられた情報を利用することで、注目画像と類似する画像を決定することができる。類似度の計算は公知の技術を利用して行うことができるので、ここでは特に詳しく説明しないが、「類似」、「非類似」のいずれか一方に区別するだけではなく、類似の度合いを段階的に示す値を類似度として計算してもよい。例えば、「色」の類似度を判断する場合、代表色や平均色の色相に基づき注目画像と対象画像との距離を算出し、当該距離を類似度として利用してもよい。また、注目画像の撮影場所の情報を使用する場合、当該撮影場所からの距離を類似度として用いることができる。もちろん、単純に注目画像が撮影された緯度・経度と、同一の緯度・経度を有する画像、あるいは、差が所定範囲内の緯度・経度を有する画像を類似画像に決定してもよい。
【００７２】
さらに、当該緯度・経度情報を利用すれば地図上に画像を重畳表示させることが可能となる。例えば、地図に含まれる各地点に位置情報として緯度・経度情報を与えておき、画像に与えられている撮影場所の緯度・経度の位置情報との対応関係に基づいて、撮影場所に該当する地図上の地点に対応画像を重畳表示する。その際、各画像が該当位置に表示されるまでの画像の表示状態を本発明の実施形態に従って制御することができる。例えば、画像が有する位置情報に対応する地図上の地点の表示画面における表示位置と、当該画像の表示位置との距離に基づいて、画像が目的の地点へ向かう際の速度ベクトルを算出することができる。当該速度ベクトルの算出は、例えば以下の式（１１）に基づいて行うことができる。ここで、Position()は、表示画面内での位置を示し{Position(Ｇi)-Position(P)}で画像Ｐと地点Ｇｉとの間の距離を表す。Ａｇは任意の係数である。
【００７３】
図７は、類似の属性を持つ画像が集まった表示画面の一例を示す。表示画面１０００において、画像７０１と画像７０２とがユーザから指定された注目画像であって、この２枚の注目画像は他の画像に比べて大きく表示されている。図７では、「代表色」に基づいて類似画像を注目画像の近傍に表示させた場合を示している。画像７０１は代表色として「青色」を有し、画像７０２は代表色として「黄色」を有している。よって、画像７０１の近傍の点線領域７０３には青色の画像が集まっており、画像７０２の近傍の点線領域７０４には黄色の画像が集まっている。また、領域７０３と７０４との間の点線領域７０５には、青と黄色の中間色である緑色を有する画像が集まっている。青色を有する画像は画像７０１との類似度が高いので画像７０１に向かう速度ベクトルが設定されて時間の経過に応じて画像７０１の周辺に集まり、また、黄色を有する画像も同様にして画像７０２の周辺に集まる。これに対し、緑色を有する画像は、青色や黄色を有する画像ほどには画像７０１や７０２との類似度が高くない。しかし、どちらの画像とも一定の類似度を有するため画像７０１と画像７０２との両方に向かう速度ベクトルが設定されることになる。これにより、画像７０１と画像７０２との間に移動して、図７のような表示状態が完成する。
【００７４】
図８は、地図上に画像が重畳表示される過程を示す図である。図８（Ａ）は、地図上に画像がランダムに配置された表示状態を示している。ここでは、各画像は、画像に与えられた位置情報とは無関係に地図上に表示されている。この表示状態を初期状態として、本実施形態に対応する画像表示処理を開始すると、各画像は、与えられた位置情報に対応する地図上の地点に向けて移動を開始する。このときの移動の態様は、上記の幾何学的項目と意味的項目との組み合わせにおいて決定される。即ち、各画像は、地図上の目的地に向かう速度ベクトルが設定される一方で、予め設定された幾何学的項目に従って速度ベクトル、倍率、回転角度等が設定される。これらを単位時間当たり、各画像について計算して、各画像の振る舞いが決定される。その結果として、各画像は、与えられた位置情報に対応する地図上の地点に徐々に移動していき、図８（Ｂ）のような表示状態に遷移する。各画像は、隣接する画像（地図上の同一地点あるいは近接地点に表示されるべき画像）の影響を受けない限りは地図上で所定サイズ（例えば、倍率×１の基準サイズ）で表示することができる。当該所定サイズは、地図の縮尺に応じて変更される。縮尺が小さければ表示範囲が広がるのでその分だけ表示の基準となる所定サイズは小さくなる。所定サイズの概念を設けるのは、画像が地図の縮尺と無関係に大きく表示されると、地理的位置に対応して表示する意味が無くなってしまうからである。
【００７５】
もし、隣接する画像の影響を受ける場合には、当該画像との幾何学的項目に規定される要件を満たす範囲で画像の表示が行われる。例えば、同一地点に対応する位置情報が割り当てられた画像が複数あった場合、それぞれの画像は互いに重なり合わないようにしながら当該地点に向かって移動していく。移動の過程では、目的地との距離をできるだけ短くしつつ、重なり合わないようにするために画像は倍率が小さくなっていく。なお、目的地と画像との距離は、例えば、画像の重心位置の座標と、地図上の地点の座標とから算出が可能である。ここで画像の最小表示サイズを決めておけば、そのサイズに合致した場合にはそれ以上縮小せずに互いに重なり合わないようにしながら、最終的には目標地点の付近に表示されることとなる。そのような表示状態を図８（Ｃ）が示している。図８（Ｃ）では、地図上の任意の地点に集まっている画像は、ほぼ同等のサイズを有しながらも互いに重なり合わないように表示されている。このようにして、地図上に画像を重畳表示する場合にも、本願発明を適用することで、画像の表示状態が遷移していく様子を、単位時間ごとに確認することができる。 以上のように、本実施形態に対応する画像表示装置によれば、予め設定した要件項目に従い画像同士の重なりを回避して画像が表示される様子を画面上で提供することができる。その際、画像表示装置はユーザは画像の移動方向などに関する入力を必要とはしないが、ユーザから画像の指定を受け付ければ、指定された画像の拡大や当該画像に類似する画像を周辺に表示させることができる。
【００７６】
また、各画像の表示状態を単位時間毎に決定していく際に、全体としての解を逐次評価して大局的な最適解を求めることはしないため計算負荷も低く、リアルタイム表示が可能である。
【００７７】
本実施形態の表示方法では、多数の画像を同時に、かつ、表示位置や大きさを動的に変化させて表示するので、単なるサムネイルの一覧表示に比べて閲覧者のより高い関心を引きつることができる。
【技術分野】
【０００１】
本発明は、画像表示装置、画像表示方法及びコンピュータプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラの普及に伴い、簡単にデジタル写真を撮影することが可能となり、ユーザが画像を撮影する機会は確実に増えてきている。撮影された画像データは通常、パーソナルコンピュータ（ＰＣ）のハードディスク等に蓄積されることが多い。その量は年々増えてしまうため、さまざまなタグ情報等を活用してこれらを整理しようとする試みも有効である。
【０００３】
特許文献１は、コンピュータの表示装置の画面上であたかもプリントアウトされた写真を机の上に広げて仕分け作業を行っているのと同じ感覚で、画像の整理を行わせる技術を開示している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−２７６１６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、複雑なメタデータを用意してもユーザはあまり利用せず、多くの場合、撮影日時など単純なタグ情報だけで十分といえる。また、撮りためた画像の中から特定の写真を探し出して利用するという機会は、実はそれほど多くはない。日常生活の中では、むしろスライドショーやデジタルフォトフレーム等を使って、なんとなく無意識に（アンビエントに）画像を眺めていることの方が多い。
【０００６】
このように明確な意図があるわけではないが撮った画像をなんとなく見たい、あまり明確に意識しなくても画像を楽しみたい、さりげなく人にも見せたい、といった要望に適格に応えることのできる画像群の表示方法はこれまで提案されていなかった。
【０００７】
そこで、本発明は一度に多くの画像を同時に眺めることができる新しい画像群の表示技術であって、各画像の配置を固定することなく自律的に移動しながら表示する技術を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するための本発明は、複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置であって、
前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する処理手段と、
前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御手段と
を備え、
前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、
前記処理手段は、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定することを特徴とする。
【発明の効果】
【０００９】
以上の本発明によれば、一度に多くの画像を同時に眺めることができる新しい画像群の表示技術であって、各画像の配置を固定することなく自律的に移動しながら表示する技術を提供することができる。
【図面の簡単な説明】
【００１０】
【図１Ａ】発明の実施形態に対応する画像表示装置のハードウェア構成の一例を示すブロック図。
【図１Ｂ】発明の実施形態に対応する画像表示の基本概念を説明するための図。
【図２】発明の実施形態に対応する処理のフローチャート。
【図３】発明の実施形態に対応する表示画面における画像表示の一例を示す図。
【図４】発明の実施形態に対応する、速度ベクトルの方向及び画像の回転方向の設定方法を説明するための図。
【図５Ａ】発明の実施形態に対応する、回転を考慮しない場合の画像の遷移状態を示す図。
【図５Ｂ】発明の実施形態に対応する、回転を考慮した場合の画像の遷移状態を示す図。
【図５Ｃ】発明の実施形態に対応する、表示領域が拡大された場合の画像の遷移状態を示す図。
【図５Ｄ】発明の実施形態に対応する、注目画像の拡大表示の一例を示す図。
【図６】発明の実施形態に対応する画像のデータ構造の一例を示す図。
【図７】発明の実施形態に対応する類似の属性を持つ画像が集まった表示画面の一例を示す図。
【図８】発明の実施形態に対応する、地図上に画像を重畳表示した表示形態の一例を示す図。
【発明を実施するための形態】
【００１１】
以下、添付する図面を参照して、発明の実施形態を説明する。図１Ａは、発明の実施形態に対応する画像表示装置１００のハードウェア構成の一例を示す図である。当該画像表示装置１００は、例えば、パーソナルコンピュータとして実現が可能である。しかしながら、画像表示装置１００の実施形態はパーソナルコンピュータに限定されるものではなく、ディスプレイを有し複数枚の画像を表示可能な装置であれば、どのようなものであってもよい。例えば、デジタルカメラ、携帯電話、スマートフォン、ＰＤＡ、ノートパソコン、カーナビ装置などが含まれる。
【００１２】
図１Ａにおいて、ＣＰＵ１０１は、ハードディスク等の内部記憶装置１１０に格納されているプログラム（ＯＳ、アプリケーションプログラム等）を、ＲＡＭ１０２を利用して実行することで画像表示装置１００の全体制御を行う。また、ＣＰＵ１０１は、画像表示用プログラム１１１を実行して、画像データ１１２を用いた本実施形態に対応する画像表示処理を行う。ＲＡＭ１０２は、ＣＰＵ１０１の主メモリ、ワークエリア等として機能する。操作部１０３は、ユーザからの操作指示を受け付けるためのユーザインタフェースであって、マウス、キーボードを含む。また、画像表示装置１００がタッチパネルを有する場合には、当該タッチパネルも操作部１０３として機能する。また、ユーザの視線検出を行うためにヘッドマウントディスプレイ（ＨＭＤ）を用いる場合、当該ＨＭＤを操作部１０３の一部とすることができる。
【００１３】
通信インタフェース（Ｉ／Ｆ）１０４は、画像表示装置１００が外部機器（デジタルカメラ、他のＰＣ、プリンタ）と通信するためのインタフェースや、ＬＡＮやインターネットに接続するためのネットワークインタフェースを含む。通信方式は、有線、無線の別を問わない。また、Bluetooth（登録商標）や赤外線通信等の近距離無線通信方式に対応することも可能である。ＲＯＭ１０５は、ＣＰＵ１０１で実行される処理プログラムの一部、例えば基本Ｉ／Ｏプログラム等のプログラムを記憶する。
【００１４】
表示制御部１０６は、画像やその他の情報を表示するためのディスプレイ１０７と接続され、ディスプレイ１０７に表示用の情報を出力する。ディスプレイ１０７は液晶パネル、有機ＥＬパネルなどで構成される。表示制御部１０６とディスプレイ１０７とは、画像表示装置１００に一体化されていてもよいし、外付けでケーブルなどにより接続されてもよい。ディスプレイ１０７の解像度やサイズは特に限定しないが、解像度やサイズに応じて実施形態に対応する画像表示処理における設定値が変更されてもよい。また、上述のようにディスプレイ１０７をタッチパネルとして構成して、操作部１０３を兼ねてもよい。サウンド処理部１０８は、内部記憶装置１１０が記憶するプログラム１１３に含まれるサウンドデータからＢＧＭや効果音を生成し、スピーカ１０９に生成したＢＧＭや効果音などを出力する。
【００１５】
内部記憶装置１１０は、例えばハードディスクやフラッシュメモリなど、書込と読出とが可能な記憶装置により構成されており、発明の実施形態に対応する画像表示用プログラム１１１、表示対象の画像データ１１２を記憶する。画像データ１１２は、通信インタフェース１０４を介してネットワークや外部装置から提供されてもよいし、メモリカード１１４から提供されてもよい。内部記憶装置１１０は更に、画像表示装置１００の動作に必要なプログラム１１３を記憶する。プログラム１１３には、ＯＳプログラム、アプリケーションプログラム、当該アプリケーションで使用されるデータ等が含まれる。
【００１６】
メモリカードインタフェース（Ｉ／Ｆ）１１３は、ＳＤカードやフラッシュメモリなどのメモリカードに記録された情報を読み取るためのメモリカード用インタフェースである。画像データ１１２は、当該カードを介して提供されてもよい。メモリカード１１４は、画像データや文書データなどの情報が記録された記憶媒体である。１１５は上述の各部を繋ぐバスであり、装置内のデータの流れを司る。
【００１７】
以下では、上述の構成を備える本実施形態における画像表示装置１００において実行される処理について説明する。まず、発明の基本的な技術的思想について概説する。
【００１８】
できるだけ多くの写真を単一のディスプレイを使って、ユーザが飽きることなく何となく無意識に（アンビエントに）眺めることを可能にする方法として、本実施形態では複数の画像の配置を固定することなくある程度自動的に動かしながら表示することを考える。
【００１９】
複数画像を配置して表示する手法として「フォトコラージュ」と呼ばれるものがある。このフォトコラージュは、画像を無造作に貼り合わせることで一枚絵の形として構成することが可能であって、複数画像を一度に見ることができるので効果的である。しかしながら、限られたスペース内に収容するための幾何学的な処理と、写真の色や意味に立ち入った処理が必要になる。これを自動または半自動的に作成する研究例として、Andreas Girgensohn and Patrick Chiu: Stained glass photo collages, In Proc. of ACM Symposium on User Interface Software and Technology, pp. 13-14, 2004.や、Heung-Yeung Shum: Picture Collage, In Proc. of IEEE Computer Society Conference on Computer Vision and Pattern Recognition, pp. 347-354, 2006.などがある。画像を配置するレイアウトを決めるために、フォトコラージュの良さを評価するエネルギー関数を定義して、これを最小化するという組み合わせ最適化問題を解くアプローチをとる場合が多いが、一般に、計算時間がかかる。そのため、リアルタイムにレイアウトが変わりゆく様子が表示されることはなく、最終的に決定されたレイアウトに基づく画像表示がなされるだけである。また、最終的なレイアウトは固定的なものであって、そこからまた別のレイアウトに徐々に遷移していくこともない。
【００２０】
これに対して本願では、複数の画像の配置を固定することなくある程度自動的に動かしながら表示する。そのため、画像の配置などに関する制約条件は常に変化すると考え、全体としての解を逐次評価して大局的な最適解を求めることはしない。そのかわり、個々の画像がそれぞれ局所的により良い状態に向かおうとすることによって、全体もより良い方向に向かうであろうという個別分散の考え方に基づき、その結果としての画像群の時々刻々の動きを画面表示する。この手法によれば、画像を閲覧しているユーザからの明確な指示がなくても一度に多くの写真を同時に表示することができると同時に、ユーザの指示に対して柔軟に反応してレイアウトを変更することができる。また、本手法は、スクリーンセーバーやデジタルフォトフレームのように画像を１枚ずつ順に表示するのではなく、多数の画像を同時に、かつ、表示位置や大きさを動的に変化させて表示することにより、画像群の新しい表示方法を提供するものである。
【００２１】
次に、図１Ｂを参照して、本実施形態における画像表示の基本概念を説明する。図１Ｂにおいて、表示画面１０００にはＸＹ座標軸が設定され、表示画面上の任意の位置を座標（ｘ、ｙ）により特定することができる。また、表示画面内に表示される各画像は、基準サイズが割り当てられ、基準サイズに対する倍率に応じて表示サイズが決定される。例えば、倍率が「×１」であれば、基準サイズと同一サイズの画像が表示される。なお、表示画面１０００上に表示する各画像は、原画像のサムネイル画像を用いることとして、予め基準サイズに対応する解像度に縮小すると共に基準サイズに合わせて縦横比を修正しておく。
【００２２】
画像の表示位置は、例えば、基準サイズに対応するテンプレートの重心位置（対角線の交点位置）の座標と、基準方向に対する傾き（回転角度）に従って決定することができる。本実施形態では基準方向をＸ軸方向とする。仮に回転角度が０度の場合には、重心位置の座標が画像の表示位置の座標と一致するようにテンプレートが配置され、当該テンプレートの上にサムネイル画像が重畳表示される。また、回転角度が３０度の場合には、表示位置の座標に配置されたテンプレートを３０度回転させることにより、表示位置を決定することができる。この場合の回転方向は、反時計回りで０度から３６０度まで設定することができる。
【００２３】
なお、以上の説明では、基本サイズのテンプレートを用いて表示を行う場合に特化して説明を行ったが、基本サイズのテンプレートを用いず、原画像の縦横比に基づくサムネイルを用いて表示を行ってもよい。その場合には、画像の位置は重心位置でなくてもよく、画像の頂点を利用してもよい。
【００２４】
そして本実施形態では、画像群の表示状態を同時に制御するために、画像毎に以下の３つのパラメータを制御する。
・表示領域（ウィンドウ）内での表示座標
・表示サイズ（基準に対する倍率）
・ウインドウ面内での回転角度
【００２５】
これら３つのパラメータを、隣接画像間の重なり合いの度合いなどに応じて時々刻々連続的に変化させることによって、画像群の全体としての動きを表現する。この方法によって、以下の効果が得られる。
【００２６】
・ 従来の局所探索法と異なり、解の評価をしないで済むため、計算を高速化できる。
【００２７】
・ 制御すべきパラメータの変化を単位時間あたりで捉えることができるので、画像の並べ方に関する要求事項や拘束条件等の変更を瞬時に反映させることができる。
【００２８】
以下、本実施形態に対応する画像表示アルゴリズムをより具体的に説明する。次に示す式（１）は、発明の実施形態に対応する画像表示アルゴリズムの基本式である。
【００２９】
式（１）は、最適化したいパラメータｘ の単位時間当たりの変化量dx/dt 、即ち画像の単位時間毎の画面内での画像の移動速度、倍率、回転角度を表す。右辺のは、画像の変化量を決定するためのパラメータの値に基づくベクトル関数である。このパラメータの値としては、例えば、注目画像とその隣接画像とのオーバーラップ量（重畳量）を用いることができる。ただし、パラメータの種類はオーバーラップ量に限定されるものではなく、より詳細な内容は後述する。また、ηは、ノイズ成分を表す。ノイズ成分の値は任意であって、単位時間毎にランダムに設定されてもよい。また、ユーザがリアルタイムで大きさを調節してもよい。また、必要がない場合には０としてもよい。また、方向成分が必要な場合（移動や回転の場合）には、ランダムに方向を選択して付加することができる。ノイズηは、式（１）において局所解に陥った状態から離脱するために用いられる。局所解に陥りやすい場合にはノイズη を大きくし、ランダム性を高めることにより、局所解から脱出させることができる。なお、ノイズ値は、変化量の種別に応じて、移動速度、倍率、回転角度のいずれかの値をとる。
【００３０】
に発見的な手法を用いると、局所探索法とは異なり、解を評価しないで済むため計算を高速化できる。また、一般的な最適化手法との大きな違いとして、最適化の最中に時間が経過することを見越している点が挙げられる。パラメータの変化が単位時間あたりであるため、最適化の条件が変わってもそれを
の引数として与えるように設計しておくことにより瞬時に最適化に反映される。この式を式（２）に示す形でパラメータの種類に応じて複数組み合わせ、徐々に全体としての最適解へ以降するアプローチをとる。ｗiは重みを表わす。本実施形態では、このようなパラメータのことを以下では「要求項目」と呼ぶ。
【００３１】
なお、このように複数の要求事項に基づいて最適化すると、最適化の基準が競合し局所解に陥ることが予想されるが、これをノイズ値によって脱出可能なことも、本手法の利点である。即ち、このノイズ値は、
の値が０となってしまう場合でも、画像に一定の変化量を与えるために設定されている。
【００３２】
いま、Ｐ を一つの画像データ、Ｉ を適当な入出力装置の情報、
を全写真データ、各写真の位置をPosition(P)、表示サイズ（基準に対する倍率）をScale(P)、回転角度をRotation(P)とする。それぞれに対応する要求事項の数をn、 m、 l として、式（２）を式（３Ａ）、（３Ｂ）、（３Ｃ）に変形して用いることとする。
【００３３】
式（３A）から（３C）は一つの注目画像データＰのパラメータを最適化する式を表したものであって、全画像についてこれらを計算する。なお、
はそれぞれ、各画像の位置、サイズ、回転角度の変化を表わす関数である。即ち、式（３A）によれば、画像の位置の変化率、即ち画像の単位時間あたりの移動速度及び移動方向を表す速度ベクトルを算出することができる。ここで求められた速度ベクトルに従って、該当する画像の表示画面上での表示位置が変化する。式（３B）によれば、画像の倍率を算出することができる。表示画面上に表示される各画像は、全画像に共通の基準サイズ（倍率：×１）が与えられており、表示画面上での表示サイズは、当該基準サイズに対する倍率によって決定される。また、式（３C）によれば、画像の単位時間あたりの回転角度及び回転方向を算出することができる。
【００３４】
発明の実施形態では以上の３つの変化量に基づいて、表示領域内に表示されている複数画像の各画像の表示状態を制御する処理の具体例を図２のフローチャートを参照して説明する。図２に対応する処理は、画像表示用プログラム１１１をＣＰＵ１０１が実行することにより実現される。
【００３５】
まず、Ｓ２０１では、式（３Ａ）から（３Ｃ）までの各変化量を算出するための要求項目の内容を決定する。要求項目の詳細については後述するが、幾何学的項目と意味的項目との大きく２種類が含まれる。続くＳ２０２では、表示画面上に表示されている複数の画像のうち、変化量の算出対象となる画像を選択する。続くＳ２０３では、Ｓ２０１において設定された要求項目毎に、速度ベクトル、回転角度及び方向、倍率の各変化量を算出する。
【００３６】
次にＳ２０４では、Ｓ２０３で算出した要求項目ごとの変化量を種別毎に合成して、合成速度ベクトル、合成回転角度・方向、合成倍率の各値を求める。続くＳ２０５では、Ｓ２０４で算出された合成結果の値に基づいて、表示画面上における選択画像の表示状態を直前の表示状態から変更する。例えば、算出された合成速度ベクトルに基づいて、選択画像の重心位置を速度ベクトルに基づく方向に単位時間あたりの速度に相当する距離だけ、直前の表示位置から移動させる。また、合成回転角度・方向については、算出された角度及び方向に基づいて選択画像の重心を基準に、直前の表示状態から回転させる。さらに、合成倍率については、算出された倍率に従って基準サイズから画像サイズを変更し、変更後のサイズに対応するサムネイル画像を表示する。
【００３７】
なお、発明の実施形態では、これらの値を単位時間ごとに全画像について計算するが、計算負荷を削減するために一部の写真についての計算を省略してもよい。例えば、ユーザが表示領域の一部の画像を指定している場合、その画像を基準として一定距離に位置する画像や、指定画像と共通する属性を有する画像を対象として計算を行ってもよい。
【００３８】
次に、発明の実施形態における要求項目を説明する。要求事項には、幾何学的項目と、意味的項目との２種類がある。まず幾何学的項目には、例えば以下のものが含まれる。
幾何学的項目１：他の画像と重ならないように並進移動する
幾何学的項目２：表示指定領域からはみ出さない
幾何学的項目３：他の画像と重ならないように小さくなる
幾何学的項目４：できるだけ大きくなる
幾何学的項目５：他の画像と重ならないように、または特定の目的のために回転する
【００３９】
また、意味的項目には、例えば以下のものが含まれる。
意味的項目１：注目画像の拡大
意味的項目２：属性が類似する画像を引き寄せる
【００４０】
本実施形態では、これらの要求項目毎に、画像の変化量を算出することとし、算出された変化量を合成することにより各画像の表示画面上での動きを制御する。例えば、幾何学的項目１及び２からそれぞれ速度ベクトルが得られれば、得られた２つの速度ベクトルを合成する。そして、得られた合成ベクトルを用いて対応する画像の表示位置を制御する。また、幾何学的項目３と幾何学的項目４とでそれぞれ倍率が得られた場合には、当該倍率を合成して対応する画像のその時点での表示倍率とすることができる。倍率の合成方法としては、例えば拡大を「正」、縮小を「負」として符号を与えて加算により計算してもよい。
【００４１】
また、意味的項目が加味される場合、意味的項目１については、注目画像と指定された画像の倍率は一定の倍率（例えば、最大倍率）まで強制的に拡大される。その際、注目画像以外の画像には幾何学的項目に基づく変化量が算出されるので、拡大する注目画像と重複しないように並進移動や倍率の縮小が行われる。
【００４２】
以下、各要件項目における変化量の算出方法の詳細を説明する。
【００４３】
＜幾何学的項目１について＞
まず、幾何学的項目１の「他の画像と重ならないように並進移動する」を考える。ここでは、処理対象の画像の枚数をＮ として、注目画像が他の画像と重なっていれば逆方向に移動する機能として式（４）に基づき実装可能である。
【００４４】
式（４）において、Avoid (P、 Pi) は画像P がPi と重なっていた場合にP が逃げる方向を示すベクトル関数である。Adjacency(P) は画像P と重なっている画像の集合である。即ち、Avoid (P、 Pi)からは、画像Ｐと画像Ｐｉとの重なり合いの度合い（重畳面積の大きさ）に応じた画像Ｐの変化量が、並進移動の速度ベクトルとして得られる。
【００４５】
図３は、このような重畳を避ける方向に並進移動する画像の様子を一例として示す。図３は、表示画面１０００上に複数の画像が表示されている様子を示す。このうちいくつかの画像は互いに重畳しているために、重畳を排除する方向に移動する。例えば、画像３０１、３０２、３０３の３枚の画像は、画像３０１と３０２、３０２と３０３が互いに重畳している。この重畳の有無は、例えば、画像を互いに向かい合う２つの頂点（ｘ１、ｙ１）、（ｘ２、ｙ２）で特定すると仮定した場合、当該頂点により特定される範囲ｘ１≦ｘ≦ｘ２、ｙ１≦ｙ≦ｙ１、或いは、矩形領域に他の画像のいずれかの頂点（ｘ３、ｙ３）が属するか否かにより判定することができる。
【００４６】
また、Avoid (P,Pi)は、画像ＰとＰｉの重畳面積（Ｓo）に基づく所定の関数として表せるが、たとえば、速度の最大値をＶmax、表示画像の面積をＳiとした場合に、Ｖmax・(Ｓo／Ｓi)として、重畳面積Ｓoに比例させてもよい。その一方、重畳面積ではなく重畳領域の対角線の長さにより決定することもできる。重なり合いの度合いを算出する基準は、重畳領域の大きさに比例するパラメータであればこれらに限定されない。また、重畳面積とは無関係に固定の大きさを与えても良い。また、速度ベクトルの方向は、画像の重畳を避ける方向に設定される。当該方向の決定方法としては、図４（Ａ）に示すように互いに重畳しあっている画像の重心を結んだ線分を延長し（一点鎖線４０１）、画像が互いに離れ合う方向（矢印４０２及び４０３）に設定することができる。また、画像が重なり合う領域の対角線の延長線上でもよい。
【００４７】
図３の例では、画像３０１は右下に位置する画像３０２と重畳しあっているので、速度ベクトルの方向は画面左上に向くように与えられる。また、画像は必ずしも１枚の画像と重なり合っているとは限らず、画像３０２のように複数枚の画像と重なり合っていることも考えられる。その場合には、重なり合っている画像同士で速度ベクトルを算出し、算出されたベクトルを合成して当該画像の速度ベクトルとすることができる。図３では、合成前の速度ベクトルを点線で、合成後の速度ベクトルを実線で示している。
【００４８】
＜幾何学的項目２について＞
次に幾何学的項目２の「表示指定領域からはみ出さない」について考える。この項目は、ウインドウなどの表示領域として指定されている領域から画像がはみ出していれば内側に留める機能として式（５）に基づき実装できる。L、 B、 R、T はそれぞれウインドウなど表示画面１０００の左端、下端、右端、上端の座標を、L(P)、 B(P)、 R(P)、 T(P) はそれぞれ画像P の左端、下端、右端、上端の座標を表し、Al、 Ab、Ar、 At は係数を表す。なお、表示画面に対する座標系の設定は、図１Ｂに示したとおりである。式（５）では、表示画面１０００からの画像Ｐのはみ出し量に係数を掛け合わせることで、４方向における画像の速度ベクトルを算出する。
【００４９】
図３において、画像３０４は、表示画面１０００からはみ出した画像の例を示している。この場合、画像は表示画面１０００の上端の座標を超えて存在していることとなるので、下端に向かう速度ベクトルが設定される。速度ベクトルの大きさは、上記の画像間の重畳面積Ｓoの場合と同様、はみ出している領域の面積の大きさに基づく関数として決定されてもよいし、それとは無関係に固定値としても良い。
【００５０】
＜幾何学的項目３について＞
次に、幾何学的項目３の「他の画像と重ならないように小さくなる」について考える。この場合、画像を縮小することで重なりを回避する機能を式（６）に基づいて実装できる。ここで得られる値は、画像の表示倍率であり、対象画像の倍率を算出値に基づいて変更する。ただし二つの画像が重なっていた場合は、表示倍率が大きい方を縮小し、かつ、表示倍率が最小倍率よりも大きいことを前提とする。なお、Scale(P)は表示サイズ（基準に対する倍率）を表し、Ａslは係数を表す。また、Scaleminは最小倍率を示し、一つの実施形態では「×１」として基準サイズよりも小さくしないように設定することもできる。その場合であっても、基準サイズを別途設定可能にすることもできる。式（６）では、画像Ｐの倍率と最小倍率との差分に係数を掛け合わせることで縮小後の画像の表示倍率を算出することができる。
【００５１】
図３において、画像３０５は、画像３０６と重なり合っていたために倍率が縮小された画像である。実線で示す矩形領域は画像３０６と重なり合っているが、倍率が縮小されて点線で表す大きさまで縮小される。ここでは、画像３０６が画像３０５よりも倍率の小さい画像であるために、画像３０５の倍率が縮小されている。
【００５２】
＜幾何学的項目４について＞
次に幾何学的項目４の「できるだけ大きくなる」について考える。この場合、画像Ｐが他の画像Ｐｉと重なっていない場合に拡大する機能として、式（７）に基づいて実装できる。ここで得られる値は、拡大後の画像の倍率であり、対象画像の倍率を算出値に基づいて変更する。式（７）では、最大倍率と現在の倍率との差分を新たな倍率としているが、差分に所定の係数を掛け合わせてもよい。また、それ以外にも例えば倍率を単位時間当たり「×0.5」ずつ増加させることができる。仮に基準サイズ「×１」から始まる場合、×１．５、×２、×２．５・・・のように増加する。倍率の増加単位は任意であり、０．５より大きくても小さくてもよい。あるいは、隣接画像との間隔に基づいて決定されてもよい。
【００５３】
なお、Scale(P)は表示サイズ（基準に対する倍率）を表す。また、Scalemaxは最大倍率を示す。
【００５４】
図３において、画像３０７は、いずれの画像とも重畳していたために倍率が拡大される画像である。実線で示す矩形領域は現在の画像３０７のサイズを示すが、倍率が拡大されて点線で表す大きさまで拡大される。なお、Scale(P)は表示サイズ（基準に対する倍率）を表す。また、Scalemaxは最大倍率を示す。
【００５５】
＜幾何学的項目５について＞
次に幾何学的項目５の「他の画像と重ならないように回転する」について考える。ここでは、処理対象の画像の枚数をＮ として、注目画像が他の画像と重なっていれば重なりを排除する方向に回転する機能として式（８）に基づき実装可能である。式（８）において、Rotation (P,Pi) は画像P がPi と重なっていた場合にP が逃げる回転方向及び角度を示す。Adjacency(P) は画像P と重なっている画像の集合である。即ち、Rotation (P、 Pi)からは、画像Ｐと画像Ｐｉとの重なり合いの度合い（重畳面積の大きさ）に応じた画像Ｐの変化量が、所定方向の回転角度として得られる。
【００５６】
例えば、図３において、画像３０８は、画像３０９と重なり合っているが、時計方向に角度θ１だけ回転することで重なり合わなくなる。即ち、上記式（８）に基づき時計方向に角度θ１が得られる。以下、この回転方向と角度の算出方法を説明する。
【００５７】
まず、２つの画像の領域を確定し、一方の画像の４つの頂点が他方の画像の領域内に属するか否かを判定する。もし、いずれかの頂点が領域内に属すると判定された場合、どの頂点が領域内に属するかを判定する。例えば、図４（Ｂ）に示すように、画像の長辺が横向きになるように座標軸を考えた場合、第１象限に属する頂点：Ｖ１、第２象限に属する頂点：Ｖ２、第３象限に属する頂点Ｖ３、第４象限に属する頂点：Ｖ４とすることができる。この場合、Ｖ１、Ｖ３が他の画像の領域に属していた場合、回転方向を時計回り方向とし、Ｖ２、Ｖ４が他の領域に属していた場合、回転方向を反時計回り方向とする。そして、決定された回転方向に従い単位角度（例えば５度）ずつ回転させて、該当頂点が他の画像の領域内に属さなくなったか否かを判定する。もし、属さなくなった場合には、そのときの角度を回転角度とする。仮に、回転角度が９０度となっても重なり合いが解消しない場合には、回転中心を変更する。これは、重複の度合いが大きい場合には、画像の重心を中心として回転しても重なり合いが解消しない場合があるためである。この場合、回転中心を画像の重心から画像の他の頂点に変更する。
【００５８】
その他の幾何学的項目に関する機能も同様に実現できる。
【００５９】
次に、図５Ａ乃至図５Ｃを参照して、幾何学的項目に従って画像を表示した場合の、表示画面の遷移の様子を説明する。
【００６０】
図５Ａでは、幾何学的項目１乃至４のみ設定し、回転は考慮していない。よって、個々の画像は，表示領域として指定された領域からはみ出さない範囲でできるだけ大きくなろうとし，また平行移動や縮小により、他の画像との重なりを回避している。状態５０１は７５枚の画像を読みこんだ直後の状態を示し、表示画面内でランダムな初期位置に各画像が表示されている。その後、状態５０２、５０３と時間が経過するに従い、個々の画像が大きくなろうとする力と重なりを回避しようとする力がバランスをとり、ある程度の時間が経つと（約５，６秒後）、状態５０４のように自然に隙間なく並ぶようになる。なお、状態５０４の表示状態であっても、ノイズ成分ηのために画像は静止せず、絶えず動いている。もし、ここでノイズ成分ηを大きくすれば、状態５０４の表示状態であってもいずれかの画像が移動を開始し、その移動に応じて他の画像も移動を開始して状態５０２や状態５０３に戻っていく。
【００６１】
また、図５Ｂ は、図５Ａの要求項目にさらに幾何学的項目５を加えて、回転を考慮した場合の表示例を示す。この場合、個々の画像は、表示領域として指定された領域からはみ出さない範囲でできるだけ大きくなろうとし、また回転、平行移動、縮小により他の画像との重なりを回避している。状態５１１は、初期状態を表し、状態５１２は一定時間経過後の画像が画面内に配列された状態を示している。図５Ｂのような表示形態は、テーブル型ディスプレイを囲む４ 辺から人が見るような場合に有効である。
【００６２】
図５Ｃは、画像の動きを制約する条件の１つである表示領域（ウインドウ）のサイズが変化した場合の表示画面１０００の遷移を一例として示す。このときの要求項目は上記の幾何学的項目１乃至４である。状態５２１では、狭い領域に多くの画像が押し込められているので各画像は非常に小さく表示されている。次に、状態５２２ではウインドウが右方向に拡大されたことにより、画像が密集する領域の画面右側に空間ができる。この空間に隣接している画像は、表示画面１０００の右側端による制約を受けなくなったために、幾何学的項目４に従い拡大を開始する。また、拡大することにより隣接する画像と重なり合うことになるので、幾何学的項目１に従い、並進移動を行う。これにより、画像が徐々に画面右側の空間に拡大しながら移動していくことになる。その様子を状態５２３及び５２４が示している。状態５２４では、右端の画像が表示画面の右側端に到達したのでこの時点で幾何学的項目２による制約が働くと共に、画面左側に位置する画像からの影響を受けて幾何学的項目３の制約により適切なサイズに縮小していくこととなる。その結果、状態５２５では、画面右端に位置している画像のサイズが、状態５２４と比べて小さくなっている。このようにして画像サイズ及び位置が調整され最終的に状態５２６のような状態になり、全画像のサイズがほぼ均一になる。
【００６３】
＜意味的項目１について＞
次に、意味的項目について説明する。まず、意味的項目１の注目画像の拡大機能は、式（９）に基づいて実装できる。ここで「Attention」 は注目画像の集合であって、表示画面上でカーソルが画像に重畳された場合、或いは、ユーザの視線を検出可能な視線検出装置に基づいて、注目画像として特定されたものがそこに含まれる。注目画像は１枚に限定されず、複数枚であってもよい。また、Ａalは、任意の係数である。即ち、式（９）では、注目画像の現在の倍率と最大倍率との差分に係数を掛け合わせて拡大後の倍率を計算している。従って、係数の大きさによって注目画像の拡大速度を調節することが可能である。
【００６４】
ここで図５Ｄに、注目画像が拡大表示された表示状態の一例を示す。図５Ｄにおいて、枠に囲まれた画像５３１が拡大された画像である。当該画像５３１は、カーソル５３２が画像に重畳されたことに伴って拡大されたものである。
【００６５】
なお、注目画像の特定は、操作部１０３のマウスやタッチパネルを介して行うことができる。また、操作部１０３としてヘッドマウントディスプレイ（ＨＭＤ）を利用する場合に、ＨＭＤに搭載された視線検出機能を利用して、ユーザの視線方向を検出して注目画像を特定することもできる。また、複数の入力装置を介して複数人が同時に異なる画像を指定できるようにしてもよい。例えば、複数台の画像表示装置をＬＡＮで接続して操作情報を共有することで、共通の画面上で複数人がインタラクションすることができる。また、タッチパネルディスプレイのサイズを大型化したり、複数台のＨＭＤを利用してもよい。また、操作部がマイクを備え、ＣＰＵ１０１が音声認識処理を実行することで、ユーザから入力されたキーワードに従って画像の特徴量の指定を受けてもよい。例えば、「黄色」、「青」などの色に関するキーワードや、「花」、「人」、「橋」といった被写体に関するキーワードを受け付けてもよい。ディスプレイ１０７については、サイズ、解像度、台数、設置場所などが可変パラメータと考えられる。また、表示可能なディスプレイは１台に限定されるわけではなく、環境の中に複数台のディスプレイが存在する場合に、表示枚数や解像度などに従って最適なディスプレイを選択して画像群を表示してもよい。なお、これらの入出力装置に関する情報は、上述の式では全てＩとして扱っている。
【００６６】
＜意味的項目２について＞
次に、意味的項目２の注目画像と属性が類似する画像を引き寄せる機能について考える。この機能は式（１０Ａ）及び式（１０Ｂ）に基づいて実装することができる。ここで、Similarity(P,Pi)は画像ＰとＰｉとの間の類似度を示し、Threshold は、閾値を表わす。また、Position()は画像の位置を示し、{Position(Pi)-Position(P)}で画像Ｐと画像Ｐｉとの間の距離を表す。類似度が閾値以上の場合、画像Ｐに与えられる速度ベクトルは、類似度が大きくなればなるほど大きくなり、また、画像ＰとＰｉとの距離が大きくなるほど大きくなる。即ち、画像Ｐｉと離れた位置にある類似度の高い画像Ｐは大きな速度ベクトルが与えられることになる。逆に、類似度が閾値未満の場合、画像に与えられる速度ベクトルは、類似度が小さくなればなるほど、また、画像ＰとＰｉとの距離が短いほど画像Ｐｉから離れる方向（逆方向）に大きくなる。
【００６７】
なお、類似度の判定手法は、画像を画像解析して得られる特徴量（例えば、平均色、或いは、代表色（画像内で最も多くの画素を占める色）等）やタグの関連度などに基づいて行なうことができる。
【００６８】
【００６９】
次に画像の類似度を判定するための画像の属性情報について説明する。図６は、図１Ａの画像データ１１２における画像のデータ構造の一例を示す図である。図６では、理解の簡単のためにテーブル構造を用いて説明する。図６のテーブル６００においてＩＤ６０１は、画像を一意に識別するための識別子として付与される。当該ＩＤは画像のテーブルへの登録順番を示す情報として付与されてもよい。ファイル名６０２は、画像に付与されたファイル名を示す。ファイル名は、撮影日時を示す値が与えられてもよい。撮影日６０３には、当該画像の撮影が行われた撮影日の情報が登録される。撮影時刻６０４には、当該画像の撮影が行われた時刻の情報が登録される。撮影日６０３と撮影時刻６０４とで、画像の撮影日時を特定することができる。撮影場所６０５は、撮影が行われた場所の緯度及び経度といった位置情報が登録される。画像の撮影を行ったデジタルカメラがＧＰＳ受信機を有する場合、撮影場所のＧＰＳ位置情報が画像の撮影時にタグ情報として画像に付与される。
【００７０】
格納場所６０６は、各画像が画像表示装置１００内で格納されている位置を示すパス情報である。図６では、image001.jpgからimage003.jpgまでがルートディレクトリの下のimage/pic/2011/0129というフォルダ内に格納されていることが示されている。特徴量６０７は、意味的項目により画像の振る舞いを制御する際に利用可能な、各画像の特徴量が登録されている。当該特徴量には、上記の平均色、代表色の情報の他、被写体に関する情報（被写体情報）が含まれる。平均色は、例えば画像の各画素値の色値の平均から得られる。代表色は、色値についてヒストグラムを作成するなどして、画像内で最も使用頻度の高い色値を特定することにより得られる。被写体情報は、被写体である人物の情報や建物の情報をユーザが個人的に入力してもよいし、緯度・経度情報に従って撮影場所に関する情報を登録してもよい。あるいは、撮影に関連するイベントの情報（例えば、運動会、遠足、入学式、卒業式等）をユーザからの入力に従って登録してもよい。なお、計算により求められる特徴量は予め計算せずに画像表示を行う際にリアルタイムに計算してもよいが、本願発明の本質的な技術的特徴ではないので特徴量を算出するタイミングは特に限定されない。
【００７１】
このように画像に与えられた情報を利用することで、注目画像と類似する画像を決定することができる。類似度の計算は公知の技術を利用して行うことができるので、ここでは特に詳しく説明しないが、「類似」、「非類似」のいずれか一方に区別するだけではなく、類似の度合いを段階的に示す値を類似度として計算してもよい。例えば、「色」の類似度を判断する場合、代表色や平均色の色相に基づき注目画像と対象画像との距離を算出し、当該距離を類似度として利用してもよい。また、注目画像の撮影場所の情報を使用する場合、当該撮影場所からの距離を類似度として用いることができる。もちろん、単純に注目画像が撮影された緯度・経度と、同一の緯度・経度を有する画像、あるいは、差が所定範囲内の緯度・経度を有する画像を類似画像に決定してもよい。
【００７２】
さらに、当該緯度・経度情報を利用すれば地図上に画像を重畳表示させることが可能となる。例えば、地図に含まれる各地点に位置情報として緯度・経度情報を与えておき、画像に与えられている撮影場所の緯度・経度の位置情報との対応関係に基づいて、撮影場所に該当する地図上の地点に対応画像を重畳表示する。その際、各画像が該当位置に表示されるまでの画像の表示状態を本発明の実施形態に従って制御することができる。例えば、画像が有する位置情報に対応する地図上の地点の表示画面における表示位置と、当該画像の表示位置との距離に基づいて、画像が目的の地点へ向かう際の速度ベクトルを算出することができる。当該速度ベクトルの算出は、例えば以下の式（１１）に基づいて行うことができる。ここで、Position()は、表示画面内での位置を示し{Position(Ｇi)-Position(P)}で画像Ｐと地点Ｇｉとの間の距離を表す。Ａｇは任意の係数である。
【００７３】
図７は、類似の属性を持つ画像が集まった表示画面の一例を示す。表示画面１０００において、画像７０１と画像７０２とがユーザから指定された注目画像であって、この２枚の注目画像は他の画像に比べて大きく表示されている。図７では、「代表色」に基づいて類似画像を注目画像の近傍に表示させた場合を示している。画像７０１は代表色として「青色」を有し、画像７０２は代表色として「黄色」を有している。よって、画像７０１の近傍の点線領域７０３には青色の画像が集まっており、画像７０２の近傍の点線領域７０４には黄色の画像が集まっている。また、領域７０３と７０４との間の点線領域７０５には、青と黄色の中間色である緑色を有する画像が集まっている。青色を有する画像は画像７０１との類似度が高いので画像７０１に向かう速度ベクトルが設定されて時間の経過に応じて画像７０１の周辺に集まり、また、黄色を有する画像も同様にして画像７０２の周辺に集まる。これに対し、緑色を有する画像は、青色や黄色を有する画像ほどには画像７０１や７０２との類似度が高くない。しかし、どちらの画像とも一定の類似度を有するため画像７０１と画像７０２との両方に向かう速度ベクトルが設定されることになる。これにより、画像７０１と画像７０２との間に移動して、図７のような表示状態が完成する。
【００７４】
図８は、地図上に画像が重畳表示される過程を示す図である。図８（Ａ）は、地図上に画像がランダムに配置された表示状態を示している。ここでは、各画像は、画像に与えられた位置情報とは無関係に地図上に表示されている。この表示状態を初期状態として、本実施形態に対応する画像表示処理を開始すると、各画像は、与えられた位置情報に対応する地図上の地点に向けて移動を開始する。このときの移動の態様は、上記の幾何学的項目と意味的項目との組み合わせにおいて決定される。即ち、各画像は、地図上の目的地に向かう速度ベクトルが設定される一方で、予め設定された幾何学的項目に従って速度ベクトル、倍率、回転角度等が設定される。これらを単位時間当たり、各画像について計算して、各画像の振る舞いが決定される。その結果として、各画像は、与えられた位置情報に対応する地図上の地点に徐々に移動していき、図８（Ｂ）のような表示状態に遷移する。各画像は、隣接する画像（地図上の同一地点あるいは近接地点に表示されるべき画像）の影響を受けない限りは地図上で所定サイズ（例えば、倍率×１の基準サイズ）で表示することができる。当該所定サイズは、地図の縮尺に応じて変更される。縮尺が小さければ表示範囲が広がるのでその分だけ表示の基準となる所定サイズは小さくなる。所定サイズの概念を設けるのは、画像が地図の縮尺と無関係に大きく表示されると、地理的位置に対応して表示する意味が無くなってしまうからである。
【００７５】
もし、隣接する画像の影響を受ける場合には、当該画像との幾何学的項目に規定される要件を満たす範囲で画像の表示が行われる。例えば、同一地点に対応する位置情報が割り当てられた画像が複数あった場合、それぞれの画像は互いに重なり合わないようにしながら当該地点に向かって移動していく。移動の過程では、目的地との距離をできるだけ短くしつつ、重なり合わないようにするために画像は倍率が小さくなっていく。なお、目的地と画像との距離は、例えば、画像の重心位置の座標と、地図上の地点の座標とから算出が可能である。ここで画像の最小表示サイズを決めておけば、そのサイズに合致した場合にはそれ以上縮小せずに互いに重なり合わないようにしながら、最終的には目標地点の付近に表示されることとなる。そのような表示状態を図８（Ｃ）が示している。図８（Ｃ）では、地図上の任意の地点に集まっている画像は、ほぼ同等のサイズを有しながらも互いに重なり合わないように表示されている。このようにして、地図上に画像を重畳表示する場合にも、本願発明を適用することで、画像の表示状態が遷移していく様子を、単位時間ごとに確認することができる。 以上のように、本実施形態に対応する画像表示装置によれば、予め設定した要件項目に従い画像同士の重なりを回避して画像が表示される様子を画面上で提供することができる。その際、画像表示装置はユーザは画像の移動方向などに関する入力を必要とはしないが、ユーザから画像の指定を受け付ければ、指定された画像の拡大や当該画像に類似する画像を周辺に表示させることができる。
【００７６】
また、各画像の表示状態を単位時間毎に決定していく際に、全体としての解を逐次評価して大局的な最適解を求めることはしないため計算負荷も低く、リアルタイム表示が可能である。
【００７７】
本実施形態の表示方法では、多数の画像を同時に、かつ、表示位置や大きさを動的に変化させて表示するので、単なるサムネイルの一覧表示に比べて閲覧者のより高い関心を引きつることができる。
【特許請求の範囲】
【請求項１】
複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置であって、
前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する処理手段と、
前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御手段と
を備え、
前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、
前記処理手段は、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定することを特徴とする画像表示装置。
【請求項２】
前記処理手段は、
前記複数の画像に含まれる各画像について、隣接画像との重なり合いの度合いを隣接画像ごとに算出し、
前記重なり合いの度合いに基づき、前記表示位置、前記画像の傾き、前記表示サイズのうち前記表示状態に含まれるものの単位時間当たりの変化量を算出し、該変化量に基づいて対応する画像の表示状態を直前の表示状態から変更することで、前記単位時間毎の異なる表示状態を決定する
ことを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記処理手段は、
前記表示位置及び画像の傾きの単位時間当たりの変化量を、前記隣接画像から離れる方向に向かって算出し、
前記表示サイズの単位時間当たりの変化量を、前記隣接画像よりも表示サイズが大きい画像については、表示サイズが小さくなるように算出する
ことを特徴とする請求項２に記載の画像表示装置。
【請求項４】
前記処理手段は、前記複数の画像のうち前記隣接画像と重なり合わない画像について、前記表示サイズが増加するように前記単位時間当たりの表示サイズの変化量を算出することを特徴とする請求項２または３に記載の画像表示装置。
【請求項５】
ユーザからの画像の指定を受け付ける操作手段を更に備え、
前記処理手段は、前記操作手段を介して指定を受け付けた指定画像と、前記複数の画像に含まれる他の画像との類似度を判定し、前記類似度に基づき前記他の画像の表示位置の単位時間当たりの変化量を算出する
ことを更に特徴とする請求項２乃至４のいずれか１項に記載の画像表示装置。
【請求項６】
前記処理手段は、
前記類似度が閾値以上の場合に、前記表示位置の単位時間当たりの変化量を前記他の画像から前記指定画像へ向かう方向について算出し、
前記類似度が閾値未満の場合に、前記表示位置の単位時間当たりの変化量を前記他の画像が前記指定画像から離れる方向について算出する
ことを特徴とする請求項５に記載の画像表示装置。
【請求項７】
前記画像が、該画像が生成された場所の位置情報を有し、かつ、前記複数の画像が前記表示画面上に表示された地図上に重畳して表示される場合に、
前記処理手段は、前記地図上の各地点に割り当てられた位置情報と、前記複数の画像がそれぞれ有する位置情報とに基づいて、各画像の前記表示位置の単位時間当たりの変化量を算出する
ことを特徴とする請求項２乃至６のいずれか１項に記載の画像表示装置。
【請求項８】
前記処理手段は、前記画像が有する位置情報に対応する前記地図上の地点の前記表示画面における表示位置と、前記画像の表示位置との距離に基づいて、各画像の前記表示位置の単位時間当たりの変化量を前記対応する地図上の地点へ向かう方向について算出することを特徴とする請求項７に記載の画像表示装置。
【請求項９】
前記処理手段は、前記複数の画像に含まれる各画像について、前記表示画面における表示領域内に収まって表示されているか否かを更に判定し、
前記表示領域内に収まって表示されていない画像について、前記表示領域内に収まる方向への前記表示位置の単位時間当たりの変化量を算出する
ことを特徴とする請求項２乃至８のいずれか１項に記載の画像表示装置。
【請求項１０】
前記処理手段は、各画像の前記表示位置、前記画像の傾き、前記表示サイズの少なくともいずれかについて複数の変化量を算出した場合に、前記表示状態の種別毎に前記複数の変化量を合成することを特徴とする請求項２乃至９のいずれか１項に記載の画像表示装置。
【請求項１１】
前記処理手段は、前記単位時間毎に算出する前記変化量に、ランダムに選択したノイズ値を付加することを特徴とする請求項２乃至１０のいずれか１項に記載の画像表示装置。
【請求項１２】
複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置の制御方法であって、
前記画像表示装置の処理手段が、前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する決定工程と、
前記画像表示装置の表示制御手段が、前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御工程と
を備え、
前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、
前記処理工程では、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定することを特徴とする画像表示装置の制御方法。
【請求項１３】
コンピュータを、請求項１乃至１１のいずれか１項に記載の処理手段及び表示制御手段を備える画像表示装置として機能させることを特徴とするコンピュータプログラム。
【請求項１】
複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置であって、
前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する処理手段と、
前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御手段と
を備え、
前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、
前記処理手段は、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定することを特徴とする画像表示装置。
【請求項２】
前記処理手段は、
前記複数の画像に含まれる各画像について、隣接画像との重なり合いの度合いを隣接画像ごとに算出し、
前記重なり合いの度合いに基づき、前記表示位置、前記画像の傾き、前記表示サイズのうち前記表示状態に含まれるものの単位時間当たりの変化量を算出し、該変化量に基づいて対応する画像の表示状態を直前の表示状態から変更することで、前記単位時間毎の異なる表示状態を決定する
ことを特徴とする請求項１に記載の画像表示装置。
【請求項３】
前記処理手段は、
前記表示位置及び画像の傾きの単位時間当たりの変化量を、前記隣接画像から離れる方向に向かって算出し、
前記表示サイズの単位時間当たりの変化量を、前記隣接画像よりも表示サイズが大きい画像については、表示サイズが小さくなるように算出する
ことを特徴とする請求項２に記載の画像表示装置。
【請求項４】
前記処理手段は、前記複数の画像のうち前記隣接画像と重なり合わない画像について、前記表示サイズが増加するように前記単位時間当たりの表示サイズの変化量を算出することを特徴とする請求項２または３に記載の画像表示装置。
【請求項５】
ユーザからの画像の指定を受け付ける操作手段を更に備え、
前記処理手段は、前記操作手段を介して指定を受け付けた指定画像と、前記複数の画像に含まれる他の画像との類似度を判定し、前記類似度に基づき前記他の画像の表示位置の単位時間当たりの変化量を算出する
ことを更に特徴とする請求項２乃至４のいずれか１項に記載の画像表示装置。
【請求項６】
前記処理手段は、
前記類似度が閾値以上の場合に、前記表示位置の単位時間当たりの変化量を前記他の画像から前記指定画像へ向かう方向について算出し、
前記類似度が閾値未満の場合に、前記表示位置の単位時間当たりの変化量を前記他の画像が前記指定画像から離れる方向について算出する
ことを特徴とする請求項５に記載の画像表示装置。
【請求項７】
前記画像が、該画像が生成された場所の位置情報を有し、かつ、前記複数の画像が前記表示画面上に表示された地図上に重畳して表示される場合に、
前記処理手段は、前記地図上の各地点に割り当てられた位置情報と、前記複数の画像がそれぞれ有する位置情報とに基づいて、各画像の前記表示位置の単位時間当たりの変化量を算出する
ことを特徴とする請求項２乃至６のいずれか１項に記載の画像表示装置。
【請求項８】
前記処理手段は、前記画像が有する位置情報に対応する前記地図上の地点の前記表示画面における表示位置と、前記画像の表示位置との距離に基づいて、各画像の前記表示位置の単位時間当たりの変化量を前記対応する地図上の地点へ向かう方向について算出することを特徴とする請求項７に記載の画像表示装置。
【請求項９】
前記処理手段は、前記複数の画像に含まれる各画像について、前記表示画面における表示領域内に収まって表示されているか否かを更に判定し、
前記表示領域内に収まって表示されていない画像について、前記表示領域内に収まる方向への前記表示位置の単位時間当たりの変化量を算出する
ことを特徴とする請求項２乃至８のいずれか１項に記載の画像表示装置。
【請求項１０】
前記処理手段は、各画像の前記表示位置、前記画像の傾き、前記表示サイズの少なくともいずれかについて複数の変化量を算出した場合に、前記表示状態の種別毎に前記複数の変化量を合成することを特徴とする請求項２乃至９のいずれか１項に記載の画像表示装置。
【請求項１１】
前記処理手段は、前記単位時間毎に算出する前記変化量に、ランダムに選択したノイズ値を付加することを特徴とする請求項２乃至１０のいずれか１項に記載の画像表示装置。
【請求項１２】
複数の画像を表示装置の表示画面上に配列して表示させる画像表示装置の制御方法であって、
前記画像表示装置の処理手段が、前記複数の画像に含まれる各画像について、前記表示画面上における単位時間毎の異なる表示状態を決定する決定工程と、
前記画像表示装置の表示制御手段が、前記表示状態に従って、前記複数の画像のそれぞれを前記表示画面に表示させる表示制御工程と
を備え、
前記表示状態には、前記画像の前記表示画面上での表示位置、基準方向に対する画像の傾き、表示サイズの少なくともいずれかの表示状態の種別が含まれ、
前記処理工程では、前記複数の画像が互いに重なり合う場合には当該重なり合いを解消するように、または、前記複数の画像が互いに重なり合わないように前記表示状態を決定することを特徴とする画像表示装置の制御方法。
【請求項１３】
コンピュータを、請求項１乃至１１のいずれか１項に記載の処理手段及び表示制御手段を備える画像表示装置として機能させることを特徴とするコンピュータプログラム。
【図１Ａ】
【図１Ｂ】
【図２】
【図３】
【図４】
【図６】
【図５Ａ】
【図５Ｂ】
【図５Ｃ】
【図５Ｄ】
【図７】
【図８】
【図１Ｂ】
【図２】
【図３】
【図４】
【図６】
【図５Ａ】
【図５Ｂ】
【図５Ｃ】
【図５Ｄ】
【図７】
【図８】
【公開番号】特開２０１２−１９４７８７（Ｐ２０１２−１９４７８７Ａ）
【公開日】平成２４年１０月１１日（２０１２．１０．１１）
【国際特許分類】
【出願番号】特願２０１１−５８２９２（Ｐ２０１１−５８２９２）
【出願日】平成２３年３月１６日（２０１１．３．１６）
【出願人】（５０４１５７０２４）国立大学法人東北大学 (2,297)
【Ｆターム（参考）】
【公開日】平成２４年１０月１１日（２０１２．１０．１１）
【国際特許分類】
【出願日】平成２３年３月１６日（２０１１．３．１６）
【出願人】（５０４１５７０２４）国立大学法人東北大学 (2,297)
【Ｆターム（参考）】
[ Back to top ]