画像表示装置、画像表示方法、プログラム及び記録媒体
【課題】複数の画像を画面上に一覧表示する場合に、ユーザに効果的な視聴を行わせる。
【解決手段】ユーザの視聴状態を検知する検知部２５と、複数の画像を基に画面表示用の表示画像を構築するとともに、検知部による検知結果に応じて表示画像を変更する画像構築部１４と、画像構築部１４で構築された表示画像を表示するための処理を行う表示処理部１６とを備えた。
【解決手段】ユーザの視聴状態を検知する検知部２５と、複数の画像を基に画面表示用の表示画像を構築するとともに、検知部による検知結果に応じて表示画像を変更する画像構築部１４と、画像構築部１４で構築された表示画像を表示するための処理を行う表示処理部１６とを備えた。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示装置、画像表示方法、プログラム及び記録媒体に関し、特に壁一面程度の大きな画面に複数枚の画像を表示するのに好適な技術に関する。
【背景技術】
【０００２】
近年のデジタルスチルカメラやビデオカメラ、カメラ機能付き携帯電話端末等の普及により、静止画像や動画像を誰でも手軽に撮影できるようになっている。また、撮影して得られた画像データの記録媒体の容量も増大してきているため、これらの記録媒体に記録される撮影画像の量も膨大なものとなりやすい。このように大量に記録された撮影画像を１枚１枚視聴するのは、時間と労力を要してしまう。
【０００３】
このため、上述した撮影装置をテレビジョン受像機等のディスプレイに接続し、ディスプレイの画面上に、サムネイル化した複数枚の撮影画像を一覧で表示させることが行われている。また、このような表示を行った場合に、ユーザが所望の画像を素早く探し出せるように、表示方法やキー操作の方法を工夫することも行われている。
【０００４】
特許文献１には、サムネイル画像が一覧表示された画面において、ユーザが目的とする画像まで少ないキー操作で移動可能とする技術について記載されている。
【特許文献１】特開２００４−２６０４１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、テレビジョン受像機の画面は年々大型化しており、１００インチ以上の画面サイズのものも出てきている。同時に画面の高精細化も進んでおり、フルＨＤ（High Definition）やフルハイビジョンと呼ばれる、水平１９２０画素×垂直１０８０画素の画面を有するものも多く流通している。さらに将来的には、２Ｋ４Ｋと呼ばれる、水平４０００画素×垂直２０００画素の画面を有するテレビジョン受像機も登場すると言われている。また、家庭におけるプロジェクタの利用率も増加してきていることから、画像や映像を大画面で視聴するスタイルが浸透しつつあると言える。
【０００６】
このような大きなサイズの画面上に、上述したような各装置で撮影された大量の画像を表示すれば、ユーザは画面に表示された各画像を俯瞰して一覧することができる。俯瞰によって取得可能な情報と、ある程度画面と近接した位置から取得可能な情報とでは、その質が異なると考えられるため、大画面表示における表示の手法を工夫することで、通常の画面サイズにおいては表現しきれない情報も、表現可能となることが考えられる。ところが、このような点に着目した上での表示手法の提案は、これまで行われていなかった。
【０００７】
本発明はかかる点に鑑みてなされたものであり、複数の画像を画面上に一覧表示する場合に、ユーザに効果的な視聴を行わせることを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、ユーザの視聴状態を検知する検知部と、複数の画像を基に画面表示用の表示画像を構築するとともに、検知部による検知結果に応じて表示画像を変更する画像構築部と、画像構築部で構築された表示画像を表示するための処理を行う表示処理部とを備えるようにしたものである。
【０００９】
このようにしたことで、例えば、ユーザが画像を視聴している位置が画面から近い、あるいは遠いといったユーザの視聴状態に応じて、表示画像が変化するようになる。
【発明の効果】
【００１０】
本発明によると、ユーザの視聴状態に応じて表示画像が変化するようになるため、ユーザが、表示内容を効率的に視聴することができるようになる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の第１の実施の形態を、図１〜図２０を参照して説明する。本例では、ユーザがデジタルスチルカメラで撮り貯めた大量の撮影画像を、大型のディスプレイに一覧で表示させることにより、ユーザに効果的な視聴を行わせる。ここでいう「大型」とは、ユーザが画面を視聴している視聴状態において、ユーザの視野に収まりきらない程度の大きな画面サイズをいう。例えば、１００インチ等の壁一面を占有するような大きさを指す。
【００１２】
またこの場合、画面に一覧表示させる各画像はサムネイル化せず、撮影時の画像サイズのままとすることで、各画像における解像度を保つことができる。これにより、ユーザは、一覧表示においても各画像の詳細の情報も確認することができるようになる。なお、各画像の表示サイズをユーザが指定できるようにしてもよい。
【００１３】
ディスプレイは、大型のものであればいずれの形状のものでもよく、リアプロジェクション型ディスプレイや、プラズマディスプレイ、液晶ディスプレイ等を用いるものとする。もしくは、フロントプロジェクタを用いてスクリーンに投射する形態に適用してもよい。また、本例ではデジタルスチルカメラで撮影された撮影画像を一覧表示させる例を挙げているが、ビデオカメラや携帯電話端末等の他の装置で撮影された画像を用いるようにしてもよく、あるいは、撮影画像でなく、テレビジョン放送の各番組を表示するようにしてもよい。
【００１４】
図１は、本例における画像表示装置１の構成例を示した図である。図１に示した画像表示装置１は、画像入力部１１、画像蓄積部１２、画像情報取得部１３、画像構築部１４、メモリ１５、表示処理部１６、表示部１７、制御部１８、操作入力部１９から構成される。
【００１５】
画像入力部１１は、デジタルスチルカメラ等により撮影された画像データの入力を受け付け、入力された画像データを画像蓄積部１２に出力する。画像蓄積部１２は、例えばＨＤＤ（Hard Disc Drive）やＤＶＤ（Digital Versatile Disc）等で構成され、画像入力部１１から入力された画像を蓄積する。
【００１６】
画像情報取得部１３は、画像蓄積部１２に蓄積された画像データを構成する１枚１枚の画像毎に、そこに付加されているメタデータ（属性情報）を読み込み、メタデータに記載された撮影日時や撮影者情報（所有者情報）等を抽出する。メタデータとしては、例えばｅｘｉｆ（Exchangeable Image File Format）形式で記載された画像ファイル等を参照するようにする。ＧＰＳ（Global Positioning System）での測位情報が付加されている場合には、その情報を撮影位置情報として取得するようにしてもよい。
【００１７】
画像構築部１４は、画像蓄積部１２に蓄積された画像データ又は、画像入力部１１から入力される画像データを読み込んで、表示部１７に表示させるための表示画像を構築する。表示画像を構成する各画像の並び順としては、ランダム（順不同）や撮影日時順等を設定できるものとし、その設定は、初期設定として予め決定しておいてもよく、ユーザによって指定させるようにしてもよい。
【００１８】
メモリ１５は、画像構築部１４が表示画像を構築する際に、作業途中の画像データを一時的に蓄積する場所として利用されるものであり、半導体メモリ等で構成される。表示処理部１６は、表示部１７に表示画像を表示させるための処理を行う。表示部１７は、画像構築部１４で生成された表示画像を表示するディスプレイであり、上述したように、リアプロジェクション型ディスプレイや、プラズマディスプレイ、液晶ディスプレイ等よりなる。
【００１９】
制御部１８は、ＭＰＵ（Micro Processing Unit）等で構成され、画像表示装置１の各部を制御する。操作入力部１９は、ボタンやレバー、キーボードやマウス等で構成されるものであり、ユーザからの操作入力を受けて、操作内容に応じた操作信号を生成し、生成した操作信号を制御部１８に出力する。
【００２０】
このように構成された画像表示装置１において、表示部１７上に、複数の画像をランダムな並び順で表示させる場合の処理例を、図２のフローチャートを参照して説明する。図２において、まず画像構築部１４が、画像入力部１１から入力された画像であれば入力された順に画像を読み込み、画像蓄積部１２に蓄積された画像であればランダムな順番で画像を読み出す（ステップＳ１）。そして、取得した画像を用いて、表示部１７に表示させるための表示画像を構築し（ステップＳ２）、構築した表示画像を表示部１７（表示領域）に出力する（ステップＳ３）。
【００２１】
図３に、図２に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。表示部１７上には沢山の画像が並べて表示されており、画面の縦方向に１４枚×横方向に２４枚の計３３６枚の画像が配置されている。また、画面左上端には、子供が写された画像Ｉｍ１、その右隣には風景が写された画像Ｉｍ２のように、画像の並び順はランダムなものとしてある。なお、以下の説明において、画像Ｉｍ１や画像Ｉｍ２等、各画像を個々に区別する必要がない場合は、単に画像Ｉｍと称する。
【００２２】
図３に示された各画像Ｉｍの表示サイズは、撮影時の画像サイズのままの大きさとしてあり、サムネイル加工を施していない。このため、各画像は高解像度のまま鮮明に表示されるようになり、ユーザは、大画面上に一覧表示されたそれぞれの画像Ｉｍを、じっくり視聴することができるようになる。
【００２３】
また、大画面上に沢山の画像Ｉｍを一覧で表示させることで、沢山の画像Ｉｍで構成される表示画像を、新たなコンテンツのように楽しむ視聴方法を、ユーザに提供することも可能となる。
【００２４】
図４には、各画像Ｉｍを、その画像が撮影された撮影日時順に並べて表示部１７に表示させる場合の処理例を、フローチャートで示してある。図４において、まず画像情報取得部１３が、画像入力部１１もしくは画像蓄積部１２から複数の画像Ｉｍを取得し（ステップＳ１１）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影日時の情報を取得する（ステップＳ１２）。
【００２５】
次に、取得した撮影日時情報を基にして、画像構築部１４が、各画像を時系列に配置して表示画像を構築し（ステップＳ１３）、構築された表示画像を表示部１７に出力する（ステップＳ１４）。
【００２６】
図５に、図４に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図５に示された画面の左上端には、犬が写された画像Ｉｍ１が表示されており、そこから下方向に２つ目までは、同じく犬を撮影した画像Ｉｍ２と画像Ｉｍ３が表示されている。さらにその下には、風景が写された画像Ｉｍ４〜画像Ｉｍ７が表示されている。
【００２７】
これらの画像Ｉｍは、画面の左上から下方向及び右方向（図中に矢印Ａｒ１として示した方向）に、撮影日時の古い順に配置されている。すなわち、画面上を下方向及び右方向に進んだ位置ほど、撮影日時が新しくなるように配置されている。
【００２８】
このような表示とすることで、大画面上に表示された各画像Ｉｍを、ユーザは撮影時間という時間軸の流れに従って、鑑賞することができるようになる。
【００２９】
なお、撮影日時に基づく配置の順番は、図５に示した例に限定されるものではなく、例えば、画面左下端から右上端の方向に向けて撮影時間が経過するように配置する等、他の順番で配置するようにしてもよい。
【００３０】
上述した各実施例においては、表示部１７に表示された複数の画像Ｉｍの撮影者が１人である場合を例に挙げたが、複数の撮影者によって撮影された複数枚の画像Ｉｍを、１つの画面上に表示させるようにしてもよい。この場合、各画像Ｉｍを、撮影者毎に色分けして表示するようにする。図６に、その場合の処理の例を、フローチャートで示してある。図６において、まず画像情報取得部１３が、表示部１７に表示させる複数の画像Ｉｍを取得し（ステップＳ２１）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影者の情報を取得する（ステップＳ２２）。画像に付随して記録されたメタデータが、例えばｅｘｉｆ形式で記載されている場合には、撮影者の情報として、所有者情報を取得するようにする。
【００３１】
次に、取得した撮影者情報を基にして、画像構築部１４が、各画像Ｉｍがその撮影者毎に色分けされて表示されるように表示画像を構築し（ステップＳ２３）、構築された表示画像を表示部１７に出力する（ステップＳ２４）。
【００３２】
図７に、図６に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図７は、撮影者毎に画像Ｉｍの枠の色を変えた例を示したものであるが、図７においては、色を線種で表現してある。すなわち、撮影者Ａによって撮影された画像Ｉｍであれば、その画像Ｉｍの枠を実線で示してあり、撮影者Ｂによって撮影された画像Ｉｍであれば、その枠を破線で示してある。この例では、６人の撮影者Ａ〜撮影者Ｆによる複数枚の画像Ｉｍを表示してあるため、各画像Ｉｍの枠が、撮影者毎に異なる６つの線種で形成されている。
【００３３】
また、表示部１７に表示させる各画像Ｉｍの枠の色を撮影者毎に変えた上で、撮影日時順に各画像Ｉｍを配置するようにしてもよい。この場合の処理例を、図８にフローチャートで示してある。図８において、まず画像情報取得部１３が、表示部１７に表示させる複数の画像Ｉｍを取得し（ステップＳ３１）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影者の情報と、撮影日時の情報とを取得する（ステップＳ３２）。
【００３４】
次に、取得した撮影者情報を基にして、画像構築部１４が、各画像が撮影者毎に色分けされて表示されるように表示画像を構築し（ステップＳ３３）、色分けの処理を行った各画像Ｉｍを、撮影日時の順番に並べて表示画像を構築する（ステップＳ３４）。そして、構築した表示画像を表示部１７に出力する（ステップＳ３５）。なお、この例では、撮影者毎の色分けを行ってから撮影日時順に並び替えるようにしているが、この手順は逆に行ってもよいものとする。
【００３５】
図９に、図８に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図９においては、図７に示した例と同様に、画面上に６人の撮影者Ａ〜撮影者Ｆによる複数枚の画像Ｉｍが表示されており、線種も図７に示した図と同一のものが使用されている。そして、画面の左上端から右下端に向けて、撮影日時の早い順に各画像Ｉｍを配置してある。
【００３６】
例えば、画面左上端の画像Ｉｍ１から、その右隣の列の中段近辺に位置する画像Ｉｍ２２までは、撮影者Ｂによって撮影された画像であり、その枠が破線で示されている。また、画像Ｉｍ２２の下に配置された画像Ｉｍ２３から画像Ｉｍ３２までは、撮影者Ｃにより撮影された画像であり、その枠は一点鎖線で示されている。そしてその下の画像Ｉｍ３３から画像Ｉｍ４５までは、再び、枠が鎖線で示された撮影者Ｂによる撮影画像が表示されている。つまり、撮影日時という１つの時間軸上に、複数の撮影者によって撮影された複数枚の画像Ｉｍが順番に配置されている。
【００３７】
このように、各画像Ｉｍの撮影者が分かる形態で表示を行うことで、例えば、画面に表示された各画像Ｉｍを撮影した各撮影者が集って視聴し、お互いの体験を共有したり、情報を交換し合うことも可能となる。つまり、本例における画像表示を行うことで、そのような新たなコミュニケーションの場を提供することができるようになる。
【００３８】
また、図９に示したように、撮影日時毎に複数の画像Ｉｍを順に並べることで、ユーザは、同じような時間帯に、他の撮影者がどのような被写体を撮影しているかといった情報も、取得することができる。
【００３９】
なお、上述した各例では、表示部１７上に表示された表示画像における座標を、一次元で設定した例を挙げたが、例えば撮影日時のうち「時刻」を縦の軸、「年月日」を横の軸に設定する等、座標のパラメータを２次元で設定するようにしてもよい。この場合は、座標軸の正確な位置に配置することで、画像Ｉｍ同士で重なりが生じる箇所が出てきてしまうが、その状態を許して表示部１７上に表示するようにする。
【００４０】
図１０に、座標の縦方向に撮影の「時刻」、横方向に撮影の「年月日」を設定した表示領域に、複数の画像Ｉｍを表示させる場合の処理の例を、フローチャートで示してある。図１０において、まず表示領域を構成する座標の設定を、操作入力部１９等を介してユーザより受け付け（ステップＳ４１）、次に、画像情報取得部１３が、表示部１７に表示させる各画像Ｉｍを取得し（ステップＳ４２）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影日時の情報を取得する（ステップＳ４３）。
【００４１】
次に、画像構築部１４が、取得した撮影日時情報に基づいて、所定の座標軸を有する表示領域に各画像Ｉｍを配置することで、表示画像を構築する（ステップＳ４４）。ここでは、座標として、縦方向に撮影の年月日、横方向に撮影の時刻が設定されているため、これらの座標で構成される２次元の空間に、各画像Ｉｍを配置するようにする。そして、構築した表示画像を表示部１７に出力する（ステップＳ４５）。
【００４２】
図１１に、図１０に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図１１においては、説明を分かりやすくするため画像のイメージの表示を省略してあり、画像の枠のみを表示してある。また図１１でも、図７に示した例と同様に、画面上に６人の撮影者Ａ〜撮影者Ｆによる複数枚の画像Ｉｍが表示されており、線種も、図７に示した図と同一のものが使用されている。
【００４３】
このように、各画像Ｉｍを２次元の座標軸で構成される空間に配置することで、表示部１７に表示された表示画像が、グラフのようにも読み取れるようになる。つまり、表示部１７上に表示された表示画像を視聴することで、ユーザは、「いつ」、「誰が」、「何をしているか」といった情報も取得することができるようになる。例えば、自分がある場所である風景を撮影していた時期（又は時刻、時間帯）に、他の撮影者はどこでどのような被写体を撮影していたのかといった情報を、取得することができる。
【００４４】
すなわち、このように複数の画像Ｉｍの配置位置に意味を持たせることで、俯瞰して画面を視聴するユーザに対して、各画像Ｉｍ間又は撮影者間のつながりを情報として提供することができる。それと同時に、画面近づいて各画像Ｉｍを視聴するユーザに対しては、各画像Ｉｍの詳細の情報を提供することができるようになる。
【００４５】
なお、図１１に示した例では、座標の縦方向に撮影時刻をとり、横方向に撮影日時をとった例を挙げたが、座標として設定するパラメータは、この例に限定されるものではない。例えば、画像にＧＰＳ等で取得された位置情報が付随していた場合には、縦方向に経度、横方向に緯度等を設定するようにしてもよい。このような座標軸に各画像Ｉｍを配置すれば、各画像Ｉｍの撮影者が所在していた位置の情報も、画面上から読み取ることができるようになる。また、座標軸の原点の位置も、表示領域の左端に限定されるものではなく、中央等の位置に設けるようにしてもよい。
【００４６】
また、図１１では撮影者Ａ〜撮影者Ｆのすべての撮影者による撮影画像Ｉｍを、表示領域内に配置した例を挙げたが、特定の撮影者によって撮影された画像Ｉｍのみを表示領域に表示させるようにしてもよい。図１２には、表示部１７に表示させる画像Ｉｍを、撮影者の数に合わせて段階的に徐々に増やした場合の表示例を示してある。
【００４７】
図１２（ａ）は、撮影者Ａにより撮影された画像Ｉｍのみを表示させたものであり、図１２（ｂ）は、それに加えて、撮影者Ｂによる撮影画像Ｉｍを表示させたものである。以降、図１２（ｃ）は撮影者Ｃによる撮影画像Ｉｍを、図１２（ｄ）は撮影者Ｄによる撮影画像Ｉｍを、図１２（ｅ）は撮影者Ｅによる撮影画像Ｉｍを、図１２（ｆ）は撮影者Ｆによる撮影画像Ｉｍを追加して表示したものである。
【００４８】
このような表示を行うことで、画面を視聴するユーザは、それぞれの撮影者毎の撮影の特徴や、特徴の比較を容易に行うことができるようになる。なお、図１２では、各撮影者による撮影画像を徐々に増やして表示する例を挙げたが、撮影者をユーザに自由に指定させ、指定された撮影者による撮影画像Ｉｍのみを表示させる構成に適用してもよい。
【００４９】
また、上述した各例では、撮影時に画像に付随して記録された、ｅｘｉｆ形式で記述された情報や、ＧＰＳによる位置情報等の情報に基づいて画像を表示部１７に配置した例を挙げたが、画像Ｉｍの配置順を、ユーザが選択した特定の画像（以下、選択画像とも称する）との関連度の高さに応じたものとする構成に適用してもよい。
【００５０】
画像間の関連度は、例えば各画像Ｉｍの特徴量として画素値を検出し、検出した画素値と、選択画像における画素値とを比較することによって算出するようにする。
【００５１】
この場合の画像表示装置１における処理の例を、図１３のフローチャートを参照して説明する。まず、操作入力部１９（図１参照）等を介して、ユーザより任意の画像の選択を受け付けると（ステップＳ５１）、画像構築部１４が、表示部１７（表示領域）に表示させるすべての画像における、ステップＳ５１で選択された画像との関連度を算出する（ステップＳ５２）。
【００５２】
そして、同じく画像構築部１４が、選択画像との関連度が高い順に、各画像Ｉｍを並べて配置して表示画像を構築し（ステップＳ５３）、構築した表示画像を、表示部１７に出力する（ステップＳ５４）。
【００５３】
このような処理を行った場合の表示例を、図１４（ｂ）に示してある。図１４（ａ）は、ユーザにより選択された画像ＳＩｍ１の例を示したものである。図１４（ａ）及び図１４（ｂ）においては、画素値の大きさを基準にして画像間の関連度を測っており、選択画像ＳＩｍ１との画素値が最も近い画像Ｉｍを、画面の左上端に配置してある。そして、そこから画面の下方向及び右方向に進むにつれて、配置される画像における画素値と、選択画像ＳＩｍの画素値との差分が大きくなるように配置している。従って、画面の右下端に配置された画像Ｉｍ３３６は、表示部１７に表示されたすべての画像Ｉｍの中で、選択画像ＳＩｍとの画素値の差が一番大きい画像となる。
【００５４】
このような表示を行うことで、ユーザは、画像間の関連度という切り口で、表示部１７上に表示された各画像Ｉｍを視聴することができるようになる。
【００５５】
また、複数人のユーザにより撮影された画像Ｉｍが、表示領域内に表示されている場合には、ユーザ自身が撮影した画像Ｉｍだけでなく、他のユーザが撮影した画像Ｉｍも、関連度算出の対象となる。このため、ユーザは、自分の選択した選択画像ＳＩｍとの関連度が高い、他の撮影者による撮影画像Ｉｍも視聴することができるようになる。
【００５６】
また、図１３及び図１４に示した例においては、操作入力部１９を介してユーザに任意の画像を選択させる構成としたが、視線検出装置等を用いてユーザの視線位置を検出し、視線が位置する位置に表示された画像を、ユーザによる選択画像とみなすようにしてもよい。さらに、図１４に示したように、選択画像ＳＩｍとの関連度の高さに応じて各画像Ｉｍの配置順を並び替えるのではなく、選択画像ＳＩｍとの関連度が高い画像Ｉｍのみを抽出して、抽出した画像Ｉｍを、表示画面上で強調表示するようにしてもよい。
【００５７】
このような表示を行う場合の画像表示装置１の内部構成例を、図１５に示してある。図１５に示した画像表示装置１Ａおいて、図１と対応する箇所には同一の符号を付してある。画像表示装置１Ａは、図１に示した画像表示装置１が有する構成に加えて、視線検出部２０と、注視位置算出部２１とをさらに備える。
【００５８】
視線検出部２０は、ユーザの視線の位置を検出して、検出した視線位置情報を、注視位置算出部２１に出力する。注視位置算出部２１は、視線検出部２０から出力された視線位置情報におけるユーザの視線位置と、画像Ｉｍの表示位置との対応付けを行うとともに、ユーザの視線位置に配置された画像Ｉｍを、ユーザにより選択された選択画像ＳＩｍと設定する。
【００５９】
図１５に示した画像表示装置１Ａにおける処理の例を、図１６にフローチャートで示してある。図１６において、まず視線検出部２０がユーザの視線位置を検出すると（ステップＳ６１）、注視位置算出部２１によって、検出された視線位置に配置された画像Ｉｍを選択画像ＳＩｍとする処理が行われる（ステップＳ６２）。
【００６０】
次に、画像構築部１４で、表示部１７に表示させるすべての画像における、選択画像ＳＩｍとの関連度を算出し（ステップＳ６３）、選択画像ＳＩｍとの関連度が高い画像Ｉｍのみを抽出する（ステップＳ６４）。そして、抽出した画像Ｉｍを強調表示するようにして表示画像を構築し（ステップＳ６５）、構築した表示画像を表示部１７に出力する（ステップＳ６６）。
【００６１】
図１７に、図１６に示した処理を行った場合の表示例を示してある。図１７においては、説明を分かりやすくするため、ユーザの視線位置近辺の領域のみを図示している。図１７（ａ）では、ユーザの視線Ｅ１は表示領域の中央部分に位置しているため、この位置に配置されている画像Ｉｍが、選択画像ＳＩｍとなる。そして、選択画像ＳＩｍとの関連度が高い画像のみが強調表示された例を図１７（ｂ）に示してある。
【００６２】
図１７（ｂ）において、選択画像ＳＩｍとの関連度が高い画像は、画像Ｉｍ４，画像Ｉｍ５，画像Ｉｍ６，画像Ｉｍ１０，画像Ｉｍ１９，画像Ｉｍ２２であるため、これらの画像の外枠が太字で強調表示されている。
【００６３】
このような表示を行えば、関連度の高さに応じて各画像Ｉｍを並べ替えなくても、ユーザが選択した画像との関連度が高い画像を、ユーザに分かりやすく提示することができる。
【００６４】
なお、図１１に示したもののように、画像と画像との重なりを許した形態で表示を行っている場合で、かつ、選択画像ＳＩｍとの関連度が高い画像Ｉｍが他の画像の背面に配置されている場合には、画像の外枠を強調する処理に加えて、画像を最前面に表示させる処理も行うようにする。
【００６５】
このような処理を行った場合の表示例を、図１８に示してある。図１８（ａ）は、選択画像ＳＩｍとの関連度が高い画像Ｉｍ１〜画像Ｉｍ５が、他の画像の背面に表示されている状態を示したものである。そして、他の画像の下面に表示された各画像Ｉｍを、最前面に移動させた場合の例を図１８（ｂ）に示してある。
【００６６】
このように、選択画像ＳＩｍとの関連度が高い画像Ｉｍが、関連度の高くない他の画像の背面に配置されている場合に、関連度の高い画像Ｉｍを最前面に移動させることで、画像Ｉｍ同士の重なりを許した状態で表示している場合にも、ユーザは、選択画像ＳＩｍと一緒に、選択画像ＳＩｍとの関連度の高い画像Ｉｍを視聴することができるようになる。なお、最前面に表示させる画像Ｉｍは、選択画像ＳＩｍとの関連度が高い画像Ｉｍに限定されるものではなく、ユーザが指定した撮影者により撮影された画像Ｉｍ等とするようにしてもよい。
【００６７】
さらに、最前面に移動させた選択画像ＳＩｍとの関連度の高い画像Ｉｍを、選択画像ＳＩｍの配置位置の方向に移動させるようにしてもよい。
【００６８】
このような処理を行った場合の表示例を、図１９に示してある。図１９（ａ）は、選択画像ＳＩｍとの関連度の高い画像Ｉｍ１〜画像Ｉｍ１１を強調表示し、さらに最前面に移動させた状態を示したものである。そして、画像Ｉｍ１〜画像Ｉｍ１１を、選択画像ＳＩｍの配置位置の方向に移動させた場合の例を、図１９（ｂ）に示してある。図１９（ｂ）には、選択画像ＳＩｍとの関連度が高いとされた画像Ｉｍ１〜画像Ｉｍ１１が、矢印Ａｒ２として示した方向に移動した結果、選択画像ＳＩｍの近辺に集まっている様子が示されている。
【００６９】
図１９に示したような表示を行うことで、図３等に示したような大きな画面上に、大量の画像を表示した場合であっても、ユーザは、選択画像ＳＩｍとその関連画像Ｉｍ１〜Ｉｍ１１とを同時に、かつ容易に比較して視聴することができるようになる。
【００７０】
なお、複数人のユーザが１つの表示画像を同時に視聴する場合には、それぞれのユーザの視線位置に基づいて選択画像ＳＩｍを決定するようにすればよい。そして、決定されたそれぞれの選択画像ＳＩｍを中心として、それと関連度の高い画像Ｉｍを強調表示したり、選択画像ＳＩｍの配置位置の方向に、各画像Ｉｍの配置位置を移動させるようにする。
【００７１】
なお、図１３〜図１９に示した構成及び処理においては、選択画像ＳＩｍと各画像Ｉｍとの関連度算出のパラメータとして、それぞれから特徴量として抽出した画素値を利用した場合を例に挙げたが、これに限定されるものではない。例えば、色の分布情報、ヒストグラム化した場合の頻度をパラメータとして関連度を算出するようにしてもよい。画像中の被写体が人物である場合には、目や鼻、口等の顔の特徴を特徴量として検出し、検出した特徴量同士を比較することで関連度を算出するようにしてもよい。
【００７２】
もしくは、撮影時又は撮影後に、ユーザによって予め被写体の情報やシーンの情報等を入力させ、それらの情報を用いて関連度を算出するようにしてもよい。被写体の情報としては、例えば「人、動物、物、景色」等のカテゴリを用意しておき、撮影した被写体がこれらのうちどのカテゴリに属するかを、撮影時にユーザに指定させるようにする。
【００７３】
また、ユーザに任意の画像Ｉｍを選択させるのではなく、被写体を特定させ、その被写体が写っている画像Ｉｍのみを抽出して、抽出した画像Ｉｍに対して強調表示や視線位置への移動等の処理を行うようにしてもよい。この場合は、予め特定の被写体の画像をデータベースに蓄積しておき、その画像情報を用いて画像認識を行うことにより、被写体の同定を行うようにする。ユーザが複数存在する場合には、被写体情報を蓄積したデータベースを、ユーザの数に対応させて複数用意するようにしてもよい。
【００７４】
図２０に、被写体の同定を行う場合の画像表示装置１Ｂの構成例を示してある。図２０において、図１や図１５に対応する箇所には同一の符号を付してあり、詳細な説明については省略する。図２０に示した画像表示装置１Ｂは、図１５に示した画像表示装置１Ａにおける画像情報取得部１３の代わりに、画像認識処理部２２と被写体データベース２３（以下、被写体ＤＢ２３とも称する）を備えたものである。
【００７５】
画像認識処理部２２は、被写体ＤＢ２３に蓄積された特定の被写体の情報を標準パターンとし、各画像Ｉｍから抽出した特徴量の中から標準パターンに合致した特徴量、あるいは近い特徴量を、識別することによって画像認識を行う。そして、標準パターンに合致した特徴量もしくは近い特徴量を有する画像Ｉｍを、被写体ＤＢ２３に蓄積された被写体と同一の被写体が写った画像Ｉｍであると判定して、判定情報を画像構築部１４に出力する。被写体ＤＢ２３に蓄積する被写体の画像情報は、複数の被写体に対応させて複数用意してもよい。この場合は、ユーザによって予めいずれかの被写体を選択させ、選択された被写体の画像情報を標準パターンとするようにする。
【００７６】
なお、上述した各例では、ユーザにより操作入力部１９等を介して指定された画像Ｉｍや、視線検出部２０が検出した視線の位置に配置された画像Ｉｍを、ユーザによる選択画像ＳＩｍとする例を挙げたが、選択画像ＳＩｍの決定方法は、これらに限定されるものではない。
【００７７】
ユーザによる指定位置を検出する手法としては、例えば、表示部１７をタッチパネルで構成し、ユーザによって押さえられた位置を、ユーザによる指定位置とみなす手法を採用してもよい。あるいは、カメラ等を用いて、ユーザにより指定された箇所を検出するようにしてもよい。表示部１７を、リアプロジェクション型のプロジェクタ用のスクリーンで構成している場合には、スクリーンの背面にカメラ等のセンサを設置し、カメラにより検出された箇所をユーザによる指定位置と決定するようにしてもよい。
【００７８】
次に、本発明の第２の実施の形態を、図２１〜図２４を参照して説明する。本実施の形態では、ユーザの視聴状況に応じて、表示部１７に表示する各画像Ｉｍのサイズや配置位置を調整する処理を行う。図２１は、本例における画像表示装置１Ｃの構成例を示すブロック図である。図２１において、図１、図１５、図２０と対応する箇所には同一の符号を付してあり、詳細な説明については省略する。
【００７９】
図２１に示した画像表示装置１Ｃは、図１に示した構成に加えて、カメラ２４と視聴位置算出部２５とをさらに有するものである。カメラ２４は、ユーザの視聴位置近辺を撮影してユーザを検出し、検出結果を視聴位置算出部２５に出力する。視聴位置算出部２５は、カメラ２４から出力された検出結果情報に基づいてユーザの視聴位置を算出し、さらに視聴位置と表示部１７の表示面との距離を算出する。そして、算出した距離情報を画像構築部１４に出力する。
【００８０】
画像構築部１４は、ユーザの視聴位置が画面から離れている場合には、各画像Ｉｍの表示サイズを小さくし、ユーザの視聴位置が画面に近い場合には、各画像Ｉｍの表示サイズを大きくする処理を行う。すなわち、表示部１７に表示させる画像Ｉｍのサイズを、ユーザの視聴位置と画面との距離の大きさと反比例する大きさに設定するようにする。
【００８１】
図２２に、画像表示装置１Ｃによる処理の例を、フローチャートで示してある。図２２において、まず、視聴位置算出部２５が画像の表示面とユーザの視聴位置との間の距離を算出し（ステップＳ７１）、次に、今回算出した距離が前回算出した距離と変化しているか否かの判断を行う（ステップＳ７２）。画像の表示面とユーザの視聴位置との間の距離が、前回と比べて変化していなかった場合には、処理は終了となる。
【００８２】
画像の表示面とユーザの視聴位置との間の距離が、前回と比べて変化していた場合には、画像構築部１４が、画像の表示倍率を距離に応じた値に設定し（ステップＳ７３）、設定された表示倍率に各画像Ｉｍの表示サイズを設定して表示画像を構築し（ステップＳ７４）、構築した表示画像を表示部１７に出力する（ステップＳ７５）。
【００８３】
図２３に、このような処理を行った場合の、表示部１７での表示例を示してある。図２３において、図面の左側には、表示部１７の表示面とユーザＵの視聴位置との間の距離の大きさを示す例として、表示部１７とユーザＵとを側面から見た図を示してある。図２３（ａ）における表示部１７の表示面とユーザＵの視聴位置との間の距離をＤ１、図２３（ｂ）における距離をＤ２、図２３（ｃ）における距離をＤ３とした場合、それぞれの距離関係は、Ｄ１＞Ｄ２＞Ｄ３となる。
【００８４】
そして図面の右側には、それぞれの距離における表示部１７での表示例を示してある。図２３（ａ）における画像ＩｍのサイズをＳｚ１、図２３（ｂ）における画像ＩｍのサイズをＳｚ２、図２３（ｃ）における画像ＩｍのサイズをＳｚ３とした場合、各サイズ間の関係はＳｚ１＜Ｓｚ２＜Ｓｚ３となる。
【００８５】
つまり、図２３（ａ）に示されるように、ユーザＵの視聴位置と画面との間の距離Ｄ１が大きい場合には、画面に表示される各画像ＩｍのサイズＳｚ１は小さくなり、図２３（ｃ）に示されるように、ユーザＵの視聴位置と画面との間の距離Ｄ３が小さい場合には、画面に表示される各画像ＩｍのサイズＳｚ３は大きくなる。
【００８６】
ユーザＵが表示画面を俯瞰して視聴したい場合には、ユーザＵは画面から離れた位置から各画像Ｉｍを視聴するため、画面上に表示サイズの小さい画像Ｉｍが、沢山表示されるようになる。これにより、ユーザＵは、多数の画像Ｉｍを同時に一覧することができるようになる。また、ユーザＵが、表示画面に表示された各画像Ｉｍの詳細を確認しようとした場合には、ユーザＵは表示画面に近づいて各画像Ｉｍを視聴しようとするため、画面上に表示される画像Ｉｍのサイズは大きくなる。これにより、ユーザＵは１つ１つの画像Ｉｍの詳細をより細かく確認することができるようになる。
【００８７】
本例においても、各画像Ｉｍの並び順や、並び順を決めるパラメータ等は、第１の実施の形態として説明した通りのものを採用するものとする。このため、ユーザＵは、表示部１７に表示された表示画像を遠くから俯瞰することで、各画像Ｉｍ間の関連度合いや、各画像Ｉｍが撮影された時刻や場所の情報等、各画像Ｉｍの配置位置で表現される情報を取得することができる。
【００８８】
なお、画像Ｉｍのサイズを拡大又は縮小する場合には、ユーザＵの注視している位置を起点として、拡大又は縮小を行うようにする。また、図２３（ａ）〜図２３（ｃ）においては、各画像Ｉｍの重なりを許さない形態で画像Ｉｍを表示した例を挙げてあるが、画像Ｉｍ間の重なりを許して表示した場合にも適用可能である。この場合は、単純に各画像Ｉｍのサイズを拡大又は縮小するのではなく、拡大又は縮小の処理に合わせて各画像Ｉｍ間の配置位置も移動させるようにする。
【００８９】
図２４に、表示部１７に表示された各画像Ｉｍを、徐々に拡大する場合の表示例を示してある。図２４（ａ），図２４（ｂ），図２４（ｃ）のそれぞれの図においては、ユーザＵが注視しているは、画面の中央に位置する画像Ｉｍである。
【００９０】
図２４（ａ）には、ユーザＵが注視している画像Ｉｍ１の近辺に、他の画像Ｉｍ２〜画像Ｉｍ６が重なって配置されている状態を示してあり、図２４（ｂ）においては、他の画像Ｉｍ２〜画像Ｉｍ６が、ユーザＵが注視する画像Ｉｍ１を中心として徐々に外側の方向に移動している状態が示されている。さらに図２４（ｃ）には、他の画像Ｉｍ２〜画像Ｉｍ６が、ユーザＵが注視する画像Ｉｍ１を中心として外側の方向に移動したため、各画像Ｉｍ間の重なりがほぼなくなっている状態が示されている。
【００９１】
このような処理を行うことで、画像Ｉｍ間の重なりを許して表示がされている場合であっても、ユーザＵの視聴位置に応じて、ユーザＵが取得したい情報が取得可能な形態で提示されるようになる。
【００９２】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで各種の機能を実行することが可能な、例えば汎用のコンピュータなどに、プログラム記録媒体からインストールされる。
【００９３】
図２５に、上述した実施の形態の一連の処理をプログラムにより実行することが可能な、パーソナルコンピュータ１００（以下、ＰＣ１００とも称する）の構成例を示してある。図２５に示したＰＣ１００は、制御部１０１、メモリ１０２、通信部１０３、操作部１０４、表示部１０５、記憶部１０６、外部記憶媒体Ｉ／Ｆ部１０７、外部記憶媒体１０８とを備える。
【００９４】
制御部１０１は、ＣＰＵ（Central Processing Unit）等で構成され、メモリ１０２、または記憶部に記録されているプログラムに従って、上記一連の処理や、他の各種の処理を実行する。メモリ１０２は、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）で構成され、制御部１０１が実行するプログラムやデータなどが記憶される。
【００９５】
通信部１０３は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。外部記憶媒体Ｉ／Ｆ部１０７は、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどの外部記憶媒体１０８が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記録１０８に転送され、記録される。
【００９６】
操作部１０４は、キーボードやマウスなどより構成され、ユーザからの操作入力に応じた操作信号を生成して制御部１０１に出力する。表示部１０５は、ＣＲＴ（Cathode Ray Tube）やＬＣＤよりなるディスプレイである。記憶部１０６は、例えばハードディスクやＤＶＤ（Digital Versatile Disc）からなり、制御部１０１が実行するプログラムや各種のデータを記録する。
【００９７】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図２５に示すように、外部記憶媒体１０８として構成される。外部記憶媒体１０８としては、上述した磁気ディスクのようなリムーバブルメディアの他に、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているメモリ１０２や、記憶部１０６なども含む。
【００９８】
プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部１０３を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【００９９】
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述する処理ステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）をも含むものである。
【０１００】
また、プログラムは、一つのコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。
【図面の簡単な説明】
【０１０１】
【図１】本発明の第１の形態による画像表示装置の内部構成例を示すブロック図である。
【図２】本発明の第１の形態による画像をランダムな配置順で一覧表示する場合の処理の例を示すフローチャートである。
【図３】本発明の第１の形態による画像をランダムな配置順で一覧表示する場合の表示の例を示す説明図である。
【図４】本発明の第１の形態による画像を撮影日時の順番に配置する場合の処理の例を示すフローチャートである。
【図５】本発明の第１の形態による画像を撮影日時の順番に配置する場合の表示の例を示す説明図である。
【図６】本発明の第１の形態による画像を撮影者毎に色分けして配置する場合の処理の例を示すフローチャートである。
【図７】本発明の第１の形態による画像を撮影者毎に色分けして配置する場合の表示の例を示す説明図である。
【図８】本発明の第１の形態による画像を撮影者毎に色分けした上で撮影日時順に配置する場合の処理の例を示すフローチャートである。
【図９】本発明の第１の形態による画像を撮影者毎に色分けした上で撮影日時順に配置する場合の表示の例を示す説明図である。
【図１０】本発明の第１の形態の他の例による画像を２次元座標上で構成される表示領域に配置する場合の処理の例を示すフローチャートである。
【図１１】本発明の第１の形態の他の例による画像を２次元座標上で構成される表示領域に配置する場合の表示の例を示す説明図である。
【図１２】本発明の第１の形態の他の例による画像を２次元座標上で構成される表示領域に配置する場合の表示の例を示す説明図である。
【図１３】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い順に画像を配置する場合の処理の例を示すフローチャートである。
【図１４】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い順に画像を配置する場合の表示の例を示す説明図であり、（ａ）は選択画像を示し、（ｂ）は表示領域における表示例を示す。
【図１５】本発明の第１の形態の他の例による画像表示装置の内部構成例を示すブロック図である。
【図１６】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を強調表示する場合の処理の例を示すフローチャートである。
【図１７】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を強調表示する場合の表示の例を示す説明図であり、（ａ）はユーザによって特定の画像が選択された状態を示し、（ｂ）は選択画像との関連度が高い画像が強調表示された状態を示す。
【図１８】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を最前面に移動させる場合の表示の例を示す説明図であり、（ａ）は選択画像との関連度が高い画像が他の画像の背面に表示されている状態を示し、（ｂ）は選択画像との関連度が高い画像が最前面に表示された状態を示す。
【図１９】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を選択画像近辺に移動させる場合の表示の例を示す説明図であり、（ａ）は移動前の状態を示し、（ｂ）は移動後の状態を示す。
【図２０】本発明の第１の実施の形態の他の例による画像表示装置の内部構成例を示すブロック図である。
【図２１】本発明の第２の実施の形態による画像表示装置の内部構成例を示すブロック図である。
【図２２】本発明の第２の実施の形態による、ユーザの視聴位置に応じて画像のサイズや配置位置を変える場合の処理の例を示すフローチャートである。
【図２３】本発明の第２の実施の形態による、ユーザの視聴位置に応じて画像のサイズ及び配置位置を変える場合の表示の例を示す説明図であり、（ａ）はユーザによる視聴位置が遠い場合の表示例を示し、（ｂ）はユーザによる視聴位置が（ａ）の例よりは近い場合の表示例を示し、（ｃ）はユーザによる視聴位置が近い場合の表示例を示す。
【図２４】本発明の第２の実施の形態による、ユーザの視聴位置に応じて画像のサイズ及び配置位置を変える場合の表示の例を示す説明図であり、（ａ）は配置位置が移動する前の状態を示し、（ｂ）は移動中の状態を示し、（ｃ）は移動後の状態を示す。
【図２５】パーソナルコンピュータの構成例を示すブロック図である。
【符号の説明】
【０１０２】
１，１Ａ，１Ｂ，１Ｃ…画像表示装置、１１…画像入力部、１２…画像蓄積部、１３…画像情報取得部、１４…画像構築部、１５…メモリ、１６…表示処理部、１７…表示部、１８…制御部、１９…操作入力部、２０…視線検出部、２１…注視位置算出部、２２…画像認識処理部、２３…被写体データベース
【技術分野】
【０００１】
本発明は、画像表示装置、画像表示方法、プログラム及び記録媒体に関し、特に壁一面程度の大きな画面に複数枚の画像を表示するのに好適な技術に関する。
【背景技術】
【０００２】
近年のデジタルスチルカメラやビデオカメラ、カメラ機能付き携帯電話端末等の普及により、静止画像や動画像を誰でも手軽に撮影できるようになっている。また、撮影して得られた画像データの記録媒体の容量も増大してきているため、これらの記録媒体に記録される撮影画像の量も膨大なものとなりやすい。このように大量に記録された撮影画像を１枚１枚視聴するのは、時間と労力を要してしまう。
【０００３】
このため、上述した撮影装置をテレビジョン受像機等のディスプレイに接続し、ディスプレイの画面上に、サムネイル化した複数枚の撮影画像を一覧で表示させることが行われている。また、このような表示を行った場合に、ユーザが所望の画像を素早く探し出せるように、表示方法やキー操作の方法を工夫することも行われている。
【０００４】
特許文献１には、サムネイル画像が一覧表示された画面において、ユーザが目的とする画像まで少ないキー操作で移動可能とする技術について記載されている。
【特許文献１】特開２００４−２６０４１２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ところで、テレビジョン受像機の画面は年々大型化しており、１００インチ以上の画面サイズのものも出てきている。同時に画面の高精細化も進んでおり、フルＨＤ（High Definition）やフルハイビジョンと呼ばれる、水平１９２０画素×垂直１０８０画素の画面を有するものも多く流通している。さらに将来的には、２Ｋ４Ｋと呼ばれる、水平４０００画素×垂直２０００画素の画面を有するテレビジョン受像機も登場すると言われている。また、家庭におけるプロジェクタの利用率も増加してきていることから、画像や映像を大画面で視聴するスタイルが浸透しつつあると言える。
【０００６】
このような大きなサイズの画面上に、上述したような各装置で撮影された大量の画像を表示すれば、ユーザは画面に表示された各画像を俯瞰して一覧することができる。俯瞰によって取得可能な情報と、ある程度画面と近接した位置から取得可能な情報とでは、その質が異なると考えられるため、大画面表示における表示の手法を工夫することで、通常の画面サイズにおいては表現しきれない情報も、表現可能となることが考えられる。ところが、このような点に着目した上での表示手法の提案は、これまで行われていなかった。
【０００７】
本発明はかかる点に鑑みてなされたものであり、複数の画像を画面上に一覧表示する場合に、ユーザに効果的な視聴を行わせることを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、ユーザの視聴状態を検知する検知部と、複数の画像を基に画面表示用の表示画像を構築するとともに、検知部による検知結果に応じて表示画像を変更する画像構築部と、画像構築部で構築された表示画像を表示するための処理を行う表示処理部とを備えるようにしたものである。
【０００９】
このようにしたことで、例えば、ユーザが画像を視聴している位置が画面から近い、あるいは遠いといったユーザの視聴状態に応じて、表示画像が変化するようになる。
【発明の効果】
【００１０】
本発明によると、ユーザの視聴状態に応じて表示画像が変化するようになるため、ユーザが、表示内容を効率的に視聴することができるようになる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の第１の実施の形態を、図１〜図２０を参照して説明する。本例では、ユーザがデジタルスチルカメラで撮り貯めた大量の撮影画像を、大型のディスプレイに一覧で表示させることにより、ユーザに効果的な視聴を行わせる。ここでいう「大型」とは、ユーザが画面を視聴している視聴状態において、ユーザの視野に収まりきらない程度の大きな画面サイズをいう。例えば、１００インチ等の壁一面を占有するような大きさを指す。
【００１２】
またこの場合、画面に一覧表示させる各画像はサムネイル化せず、撮影時の画像サイズのままとすることで、各画像における解像度を保つことができる。これにより、ユーザは、一覧表示においても各画像の詳細の情報も確認することができるようになる。なお、各画像の表示サイズをユーザが指定できるようにしてもよい。
【００１３】
ディスプレイは、大型のものであればいずれの形状のものでもよく、リアプロジェクション型ディスプレイや、プラズマディスプレイ、液晶ディスプレイ等を用いるものとする。もしくは、フロントプロジェクタを用いてスクリーンに投射する形態に適用してもよい。また、本例ではデジタルスチルカメラで撮影された撮影画像を一覧表示させる例を挙げているが、ビデオカメラや携帯電話端末等の他の装置で撮影された画像を用いるようにしてもよく、あるいは、撮影画像でなく、テレビジョン放送の各番組を表示するようにしてもよい。
【００１４】
図１は、本例における画像表示装置１の構成例を示した図である。図１に示した画像表示装置１は、画像入力部１１、画像蓄積部１２、画像情報取得部１３、画像構築部１４、メモリ１５、表示処理部１６、表示部１７、制御部１８、操作入力部１９から構成される。
【００１５】
画像入力部１１は、デジタルスチルカメラ等により撮影された画像データの入力を受け付け、入力された画像データを画像蓄積部１２に出力する。画像蓄積部１２は、例えばＨＤＤ（Hard Disc Drive）やＤＶＤ（Digital Versatile Disc）等で構成され、画像入力部１１から入力された画像を蓄積する。
【００１６】
画像情報取得部１３は、画像蓄積部１２に蓄積された画像データを構成する１枚１枚の画像毎に、そこに付加されているメタデータ（属性情報）を読み込み、メタデータに記載された撮影日時や撮影者情報（所有者情報）等を抽出する。メタデータとしては、例えばｅｘｉｆ（Exchangeable Image File Format）形式で記載された画像ファイル等を参照するようにする。ＧＰＳ（Global Positioning System）での測位情報が付加されている場合には、その情報を撮影位置情報として取得するようにしてもよい。
【００１７】
画像構築部１４は、画像蓄積部１２に蓄積された画像データ又は、画像入力部１１から入力される画像データを読み込んで、表示部１７に表示させるための表示画像を構築する。表示画像を構成する各画像の並び順としては、ランダム（順不同）や撮影日時順等を設定できるものとし、その設定は、初期設定として予め決定しておいてもよく、ユーザによって指定させるようにしてもよい。
【００１８】
メモリ１５は、画像構築部１４が表示画像を構築する際に、作業途中の画像データを一時的に蓄積する場所として利用されるものであり、半導体メモリ等で構成される。表示処理部１６は、表示部１７に表示画像を表示させるための処理を行う。表示部１７は、画像構築部１４で生成された表示画像を表示するディスプレイであり、上述したように、リアプロジェクション型ディスプレイや、プラズマディスプレイ、液晶ディスプレイ等よりなる。
【００１９】
制御部１８は、ＭＰＵ（Micro Processing Unit）等で構成され、画像表示装置１の各部を制御する。操作入力部１９は、ボタンやレバー、キーボードやマウス等で構成されるものであり、ユーザからの操作入力を受けて、操作内容に応じた操作信号を生成し、生成した操作信号を制御部１８に出力する。
【００２０】
このように構成された画像表示装置１において、表示部１７上に、複数の画像をランダムな並び順で表示させる場合の処理例を、図２のフローチャートを参照して説明する。図２において、まず画像構築部１４が、画像入力部１１から入力された画像であれば入力された順に画像を読み込み、画像蓄積部１２に蓄積された画像であればランダムな順番で画像を読み出す（ステップＳ１）。そして、取得した画像を用いて、表示部１７に表示させるための表示画像を構築し（ステップＳ２）、構築した表示画像を表示部１７（表示領域）に出力する（ステップＳ３）。
【００２１】
図３に、図２に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。表示部１７上には沢山の画像が並べて表示されており、画面の縦方向に１４枚×横方向に２４枚の計３３６枚の画像が配置されている。また、画面左上端には、子供が写された画像Ｉｍ１、その右隣には風景が写された画像Ｉｍ２のように、画像の並び順はランダムなものとしてある。なお、以下の説明において、画像Ｉｍ１や画像Ｉｍ２等、各画像を個々に区別する必要がない場合は、単に画像Ｉｍと称する。
【００２２】
図３に示された各画像Ｉｍの表示サイズは、撮影時の画像サイズのままの大きさとしてあり、サムネイル加工を施していない。このため、各画像は高解像度のまま鮮明に表示されるようになり、ユーザは、大画面上に一覧表示されたそれぞれの画像Ｉｍを、じっくり視聴することができるようになる。
【００２３】
また、大画面上に沢山の画像Ｉｍを一覧で表示させることで、沢山の画像Ｉｍで構成される表示画像を、新たなコンテンツのように楽しむ視聴方法を、ユーザに提供することも可能となる。
【００２４】
図４には、各画像Ｉｍを、その画像が撮影された撮影日時順に並べて表示部１７に表示させる場合の処理例を、フローチャートで示してある。図４において、まず画像情報取得部１３が、画像入力部１１もしくは画像蓄積部１２から複数の画像Ｉｍを取得し（ステップＳ１１）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影日時の情報を取得する（ステップＳ１２）。
【００２５】
次に、取得した撮影日時情報を基にして、画像構築部１４が、各画像を時系列に配置して表示画像を構築し（ステップＳ１３）、構築された表示画像を表示部１７に出力する（ステップＳ１４）。
【００２６】
図５に、図４に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図５に示された画面の左上端には、犬が写された画像Ｉｍ１が表示されており、そこから下方向に２つ目までは、同じく犬を撮影した画像Ｉｍ２と画像Ｉｍ３が表示されている。さらにその下には、風景が写された画像Ｉｍ４〜画像Ｉｍ７が表示されている。
【００２７】
これらの画像Ｉｍは、画面の左上から下方向及び右方向（図中に矢印Ａｒ１として示した方向）に、撮影日時の古い順に配置されている。すなわち、画面上を下方向及び右方向に進んだ位置ほど、撮影日時が新しくなるように配置されている。
【００２８】
このような表示とすることで、大画面上に表示された各画像Ｉｍを、ユーザは撮影時間という時間軸の流れに従って、鑑賞することができるようになる。
【００２９】
なお、撮影日時に基づく配置の順番は、図５に示した例に限定されるものではなく、例えば、画面左下端から右上端の方向に向けて撮影時間が経過するように配置する等、他の順番で配置するようにしてもよい。
【００３０】
上述した各実施例においては、表示部１７に表示された複数の画像Ｉｍの撮影者が１人である場合を例に挙げたが、複数の撮影者によって撮影された複数枚の画像Ｉｍを、１つの画面上に表示させるようにしてもよい。この場合、各画像Ｉｍを、撮影者毎に色分けして表示するようにする。図６に、その場合の処理の例を、フローチャートで示してある。図６において、まず画像情報取得部１３が、表示部１７に表示させる複数の画像Ｉｍを取得し（ステップＳ２１）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影者の情報を取得する（ステップＳ２２）。画像に付随して記録されたメタデータが、例えばｅｘｉｆ形式で記載されている場合には、撮影者の情報として、所有者情報を取得するようにする。
【００３１】
次に、取得した撮影者情報を基にして、画像構築部１４が、各画像Ｉｍがその撮影者毎に色分けされて表示されるように表示画像を構築し（ステップＳ２３）、構築された表示画像を表示部１７に出力する（ステップＳ２４）。
【００３２】
図７に、図６に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図７は、撮影者毎に画像Ｉｍの枠の色を変えた例を示したものであるが、図７においては、色を線種で表現してある。すなわち、撮影者Ａによって撮影された画像Ｉｍであれば、その画像Ｉｍの枠を実線で示してあり、撮影者Ｂによって撮影された画像Ｉｍであれば、その枠を破線で示してある。この例では、６人の撮影者Ａ〜撮影者Ｆによる複数枚の画像Ｉｍを表示してあるため、各画像Ｉｍの枠が、撮影者毎に異なる６つの線種で形成されている。
【００３３】
また、表示部１７に表示させる各画像Ｉｍの枠の色を撮影者毎に変えた上で、撮影日時順に各画像Ｉｍを配置するようにしてもよい。この場合の処理例を、図８にフローチャートで示してある。図８において、まず画像情報取得部１３が、表示部１７に表示させる複数の画像Ｉｍを取得し（ステップＳ３１）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影者の情報と、撮影日時の情報とを取得する（ステップＳ３２）。
【００３４】
次に、取得した撮影者情報を基にして、画像構築部１４が、各画像が撮影者毎に色分けされて表示されるように表示画像を構築し（ステップＳ３３）、色分けの処理を行った各画像Ｉｍを、撮影日時の順番に並べて表示画像を構築する（ステップＳ３４）。そして、構築した表示画像を表示部１７に出力する（ステップＳ３５）。なお、この例では、撮影者毎の色分けを行ってから撮影日時順に並び替えるようにしているが、この手順は逆に行ってもよいものとする。
【００３５】
図９に、図８に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図９においては、図７に示した例と同様に、画面上に６人の撮影者Ａ〜撮影者Ｆによる複数枚の画像Ｉｍが表示されており、線種も図７に示した図と同一のものが使用されている。そして、画面の左上端から右下端に向けて、撮影日時の早い順に各画像Ｉｍを配置してある。
【００３６】
例えば、画面左上端の画像Ｉｍ１から、その右隣の列の中段近辺に位置する画像Ｉｍ２２までは、撮影者Ｂによって撮影された画像であり、その枠が破線で示されている。また、画像Ｉｍ２２の下に配置された画像Ｉｍ２３から画像Ｉｍ３２までは、撮影者Ｃにより撮影された画像であり、その枠は一点鎖線で示されている。そしてその下の画像Ｉｍ３３から画像Ｉｍ４５までは、再び、枠が鎖線で示された撮影者Ｂによる撮影画像が表示されている。つまり、撮影日時という１つの時間軸上に、複数の撮影者によって撮影された複数枚の画像Ｉｍが順番に配置されている。
【００３７】
このように、各画像Ｉｍの撮影者が分かる形態で表示を行うことで、例えば、画面に表示された各画像Ｉｍを撮影した各撮影者が集って視聴し、お互いの体験を共有したり、情報を交換し合うことも可能となる。つまり、本例における画像表示を行うことで、そのような新たなコミュニケーションの場を提供することができるようになる。
【００３８】
また、図９に示したように、撮影日時毎に複数の画像Ｉｍを順に並べることで、ユーザは、同じような時間帯に、他の撮影者がどのような被写体を撮影しているかといった情報も、取得することができる。
【００３９】
なお、上述した各例では、表示部１７上に表示された表示画像における座標を、一次元で設定した例を挙げたが、例えば撮影日時のうち「時刻」を縦の軸、「年月日」を横の軸に設定する等、座標のパラメータを２次元で設定するようにしてもよい。この場合は、座標軸の正確な位置に配置することで、画像Ｉｍ同士で重なりが生じる箇所が出てきてしまうが、その状態を許して表示部１７上に表示するようにする。
【００４０】
図１０に、座標の縦方向に撮影の「時刻」、横方向に撮影の「年月日」を設定した表示領域に、複数の画像Ｉｍを表示させる場合の処理の例を、フローチャートで示してある。図１０において、まず表示領域を構成する座標の設定を、操作入力部１９等を介してユーザより受け付け（ステップＳ４１）、次に、画像情報取得部１３が、表示部１７に表示させる各画像Ｉｍを取得し（ステップＳ４２）、取得したそれぞれの画像Ｉｍにおいて、画像撮影時に画像と共に記録された撮影日時の情報を取得する（ステップＳ４３）。
【００４１】
次に、画像構築部１４が、取得した撮影日時情報に基づいて、所定の座標軸を有する表示領域に各画像Ｉｍを配置することで、表示画像を構築する（ステップＳ４４）。ここでは、座標として、縦方向に撮影の年月日、横方向に撮影の時刻が設定されているため、これらの座標で構成される２次元の空間に、各画像Ｉｍを配置するようにする。そして、構築した表示画像を表示部１７に出力する（ステップＳ４５）。
【００４２】
図１１に、図１０に示した手順で生成された表示画像を、表示部１７上に表示した場合の例を示してある。図１１においては、説明を分かりやすくするため画像のイメージの表示を省略してあり、画像の枠のみを表示してある。また図１１でも、図７に示した例と同様に、画面上に６人の撮影者Ａ〜撮影者Ｆによる複数枚の画像Ｉｍが表示されており、線種も、図７に示した図と同一のものが使用されている。
【００４３】
このように、各画像Ｉｍを２次元の座標軸で構成される空間に配置することで、表示部１７に表示された表示画像が、グラフのようにも読み取れるようになる。つまり、表示部１７上に表示された表示画像を視聴することで、ユーザは、「いつ」、「誰が」、「何をしているか」といった情報も取得することができるようになる。例えば、自分がある場所である風景を撮影していた時期（又は時刻、時間帯）に、他の撮影者はどこでどのような被写体を撮影していたのかといった情報を、取得することができる。
【００４４】
すなわち、このように複数の画像Ｉｍの配置位置に意味を持たせることで、俯瞰して画面を視聴するユーザに対して、各画像Ｉｍ間又は撮影者間のつながりを情報として提供することができる。それと同時に、画面近づいて各画像Ｉｍを視聴するユーザに対しては、各画像Ｉｍの詳細の情報を提供することができるようになる。
【００４５】
なお、図１１に示した例では、座標の縦方向に撮影時刻をとり、横方向に撮影日時をとった例を挙げたが、座標として設定するパラメータは、この例に限定されるものではない。例えば、画像にＧＰＳ等で取得された位置情報が付随していた場合には、縦方向に経度、横方向に緯度等を設定するようにしてもよい。このような座標軸に各画像Ｉｍを配置すれば、各画像Ｉｍの撮影者が所在していた位置の情報も、画面上から読み取ることができるようになる。また、座標軸の原点の位置も、表示領域の左端に限定されるものではなく、中央等の位置に設けるようにしてもよい。
【００４６】
また、図１１では撮影者Ａ〜撮影者Ｆのすべての撮影者による撮影画像Ｉｍを、表示領域内に配置した例を挙げたが、特定の撮影者によって撮影された画像Ｉｍのみを表示領域に表示させるようにしてもよい。図１２には、表示部１７に表示させる画像Ｉｍを、撮影者の数に合わせて段階的に徐々に増やした場合の表示例を示してある。
【００４７】
図１２（ａ）は、撮影者Ａにより撮影された画像Ｉｍのみを表示させたものであり、図１２（ｂ）は、それに加えて、撮影者Ｂによる撮影画像Ｉｍを表示させたものである。以降、図１２（ｃ）は撮影者Ｃによる撮影画像Ｉｍを、図１２（ｄ）は撮影者Ｄによる撮影画像Ｉｍを、図１２（ｅ）は撮影者Ｅによる撮影画像Ｉｍを、図１２（ｆ）は撮影者Ｆによる撮影画像Ｉｍを追加して表示したものである。
【００４８】
このような表示を行うことで、画面を視聴するユーザは、それぞれの撮影者毎の撮影の特徴や、特徴の比較を容易に行うことができるようになる。なお、図１２では、各撮影者による撮影画像を徐々に増やして表示する例を挙げたが、撮影者をユーザに自由に指定させ、指定された撮影者による撮影画像Ｉｍのみを表示させる構成に適用してもよい。
【００４９】
また、上述した各例では、撮影時に画像に付随して記録された、ｅｘｉｆ形式で記述された情報や、ＧＰＳによる位置情報等の情報に基づいて画像を表示部１７に配置した例を挙げたが、画像Ｉｍの配置順を、ユーザが選択した特定の画像（以下、選択画像とも称する）との関連度の高さに応じたものとする構成に適用してもよい。
【００５０】
画像間の関連度は、例えば各画像Ｉｍの特徴量として画素値を検出し、検出した画素値と、選択画像における画素値とを比較することによって算出するようにする。
【００５１】
この場合の画像表示装置１における処理の例を、図１３のフローチャートを参照して説明する。まず、操作入力部１９（図１参照）等を介して、ユーザより任意の画像の選択を受け付けると（ステップＳ５１）、画像構築部１４が、表示部１７（表示領域）に表示させるすべての画像における、ステップＳ５１で選択された画像との関連度を算出する（ステップＳ５２）。
【００５２】
そして、同じく画像構築部１４が、選択画像との関連度が高い順に、各画像Ｉｍを並べて配置して表示画像を構築し（ステップＳ５３）、構築した表示画像を、表示部１７に出力する（ステップＳ５４）。
【００５３】
このような処理を行った場合の表示例を、図１４（ｂ）に示してある。図１４（ａ）は、ユーザにより選択された画像ＳＩｍ１の例を示したものである。図１４（ａ）及び図１４（ｂ）においては、画素値の大きさを基準にして画像間の関連度を測っており、選択画像ＳＩｍ１との画素値が最も近い画像Ｉｍを、画面の左上端に配置してある。そして、そこから画面の下方向及び右方向に進むにつれて、配置される画像における画素値と、選択画像ＳＩｍの画素値との差分が大きくなるように配置している。従って、画面の右下端に配置された画像Ｉｍ３３６は、表示部１７に表示されたすべての画像Ｉｍの中で、選択画像ＳＩｍとの画素値の差が一番大きい画像となる。
【００５４】
このような表示を行うことで、ユーザは、画像間の関連度という切り口で、表示部１７上に表示された各画像Ｉｍを視聴することができるようになる。
【００５５】
また、複数人のユーザにより撮影された画像Ｉｍが、表示領域内に表示されている場合には、ユーザ自身が撮影した画像Ｉｍだけでなく、他のユーザが撮影した画像Ｉｍも、関連度算出の対象となる。このため、ユーザは、自分の選択した選択画像ＳＩｍとの関連度が高い、他の撮影者による撮影画像Ｉｍも視聴することができるようになる。
【００５６】
また、図１３及び図１４に示した例においては、操作入力部１９を介してユーザに任意の画像を選択させる構成としたが、視線検出装置等を用いてユーザの視線位置を検出し、視線が位置する位置に表示された画像を、ユーザによる選択画像とみなすようにしてもよい。さらに、図１４に示したように、選択画像ＳＩｍとの関連度の高さに応じて各画像Ｉｍの配置順を並び替えるのではなく、選択画像ＳＩｍとの関連度が高い画像Ｉｍのみを抽出して、抽出した画像Ｉｍを、表示画面上で強調表示するようにしてもよい。
【００５７】
このような表示を行う場合の画像表示装置１の内部構成例を、図１５に示してある。図１５に示した画像表示装置１Ａおいて、図１と対応する箇所には同一の符号を付してある。画像表示装置１Ａは、図１に示した画像表示装置１が有する構成に加えて、視線検出部２０と、注視位置算出部２１とをさらに備える。
【００５８】
視線検出部２０は、ユーザの視線の位置を検出して、検出した視線位置情報を、注視位置算出部２１に出力する。注視位置算出部２１は、視線検出部２０から出力された視線位置情報におけるユーザの視線位置と、画像Ｉｍの表示位置との対応付けを行うとともに、ユーザの視線位置に配置された画像Ｉｍを、ユーザにより選択された選択画像ＳＩｍと設定する。
【００５９】
図１５に示した画像表示装置１Ａにおける処理の例を、図１６にフローチャートで示してある。図１６において、まず視線検出部２０がユーザの視線位置を検出すると（ステップＳ６１）、注視位置算出部２１によって、検出された視線位置に配置された画像Ｉｍを選択画像ＳＩｍとする処理が行われる（ステップＳ６２）。
【００６０】
次に、画像構築部１４で、表示部１７に表示させるすべての画像における、選択画像ＳＩｍとの関連度を算出し（ステップＳ６３）、選択画像ＳＩｍとの関連度が高い画像Ｉｍのみを抽出する（ステップＳ６４）。そして、抽出した画像Ｉｍを強調表示するようにして表示画像を構築し（ステップＳ６５）、構築した表示画像を表示部１７に出力する（ステップＳ６６）。
【００６１】
図１７に、図１６に示した処理を行った場合の表示例を示してある。図１７においては、説明を分かりやすくするため、ユーザの視線位置近辺の領域のみを図示している。図１７（ａ）では、ユーザの視線Ｅ１は表示領域の中央部分に位置しているため、この位置に配置されている画像Ｉｍが、選択画像ＳＩｍとなる。そして、選択画像ＳＩｍとの関連度が高い画像のみが強調表示された例を図１７（ｂ）に示してある。
【００６２】
図１７（ｂ）において、選択画像ＳＩｍとの関連度が高い画像は、画像Ｉｍ４，画像Ｉｍ５，画像Ｉｍ６，画像Ｉｍ１０，画像Ｉｍ１９，画像Ｉｍ２２であるため、これらの画像の外枠が太字で強調表示されている。
【００６３】
このような表示を行えば、関連度の高さに応じて各画像Ｉｍを並べ替えなくても、ユーザが選択した画像との関連度が高い画像を、ユーザに分かりやすく提示することができる。
【００６４】
なお、図１１に示したもののように、画像と画像との重なりを許した形態で表示を行っている場合で、かつ、選択画像ＳＩｍとの関連度が高い画像Ｉｍが他の画像の背面に配置されている場合には、画像の外枠を強調する処理に加えて、画像を最前面に表示させる処理も行うようにする。
【００６５】
このような処理を行った場合の表示例を、図１８に示してある。図１８（ａ）は、選択画像ＳＩｍとの関連度が高い画像Ｉｍ１〜画像Ｉｍ５が、他の画像の背面に表示されている状態を示したものである。そして、他の画像の下面に表示された各画像Ｉｍを、最前面に移動させた場合の例を図１８（ｂ）に示してある。
【００６６】
このように、選択画像ＳＩｍとの関連度が高い画像Ｉｍが、関連度の高くない他の画像の背面に配置されている場合に、関連度の高い画像Ｉｍを最前面に移動させることで、画像Ｉｍ同士の重なりを許した状態で表示している場合にも、ユーザは、選択画像ＳＩｍと一緒に、選択画像ＳＩｍとの関連度の高い画像Ｉｍを視聴することができるようになる。なお、最前面に表示させる画像Ｉｍは、選択画像ＳＩｍとの関連度が高い画像Ｉｍに限定されるものではなく、ユーザが指定した撮影者により撮影された画像Ｉｍ等とするようにしてもよい。
【００６７】
さらに、最前面に移動させた選択画像ＳＩｍとの関連度の高い画像Ｉｍを、選択画像ＳＩｍの配置位置の方向に移動させるようにしてもよい。
【００６８】
このような処理を行った場合の表示例を、図１９に示してある。図１９（ａ）は、選択画像ＳＩｍとの関連度の高い画像Ｉｍ１〜画像Ｉｍ１１を強調表示し、さらに最前面に移動させた状態を示したものである。そして、画像Ｉｍ１〜画像Ｉｍ１１を、選択画像ＳＩｍの配置位置の方向に移動させた場合の例を、図１９（ｂ）に示してある。図１９（ｂ）には、選択画像ＳＩｍとの関連度が高いとされた画像Ｉｍ１〜画像Ｉｍ１１が、矢印Ａｒ２として示した方向に移動した結果、選択画像ＳＩｍの近辺に集まっている様子が示されている。
【００６９】
図１９に示したような表示を行うことで、図３等に示したような大きな画面上に、大量の画像を表示した場合であっても、ユーザは、選択画像ＳＩｍとその関連画像Ｉｍ１〜Ｉｍ１１とを同時に、かつ容易に比較して視聴することができるようになる。
【００７０】
なお、複数人のユーザが１つの表示画像を同時に視聴する場合には、それぞれのユーザの視線位置に基づいて選択画像ＳＩｍを決定するようにすればよい。そして、決定されたそれぞれの選択画像ＳＩｍを中心として、それと関連度の高い画像Ｉｍを強調表示したり、選択画像ＳＩｍの配置位置の方向に、各画像Ｉｍの配置位置を移動させるようにする。
【００７１】
なお、図１３〜図１９に示した構成及び処理においては、選択画像ＳＩｍと各画像Ｉｍとの関連度算出のパラメータとして、それぞれから特徴量として抽出した画素値を利用した場合を例に挙げたが、これに限定されるものではない。例えば、色の分布情報、ヒストグラム化した場合の頻度をパラメータとして関連度を算出するようにしてもよい。画像中の被写体が人物である場合には、目や鼻、口等の顔の特徴を特徴量として検出し、検出した特徴量同士を比較することで関連度を算出するようにしてもよい。
【００７２】
もしくは、撮影時又は撮影後に、ユーザによって予め被写体の情報やシーンの情報等を入力させ、それらの情報を用いて関連度を算出するようにしてもよい。被写体の情報としては、例えば「人、動物、物、景色」等のカテゴリを用意しておき、撮影した被写体がこれらのうちどのカテゴリに属するかを、撮影時にユーザに指定させるようにする。
【００７３】
また、ユーザに任意の画像Ｉｍを選択させるのではなく、被写体を特定させ、その被写体が写っている画像Ｉｍのみを抽出して、抽出した画像Ｉｍに対して強調表示や視線位置への移動等の処理を行うようにしてもよい。この場合は、予め特定の被写体の画像をデータベースに蓄積しておき、その画像情報を用いて画像認識を行うことにより、被写体の同定を行うようにする。ユーザが複数存在する場合には、被写体情報を蓄積したデータベースを、ユーザの数に対応させて複数用意するようにしてもよい。
【００７４】
図２０に、被写体の同定を行う場合の画像表示装置１Ｂの構成例を示してある。図２０において、図１や図１５に対応する箇所には同一の符号を付してあり、詳細な説明については省略する。図２０に示した画像表示装置１Ｂは、図１５に示した画像表示装置１Ａにおける画像情報取得部１３の代わりに、画像認識処理部２２と被写体データベース２３（以下、被写体ＤＢ２３とも称する）を備えたものである。
【００７５】
画像認識処理部２２は、被写体ＤＢ２３に蓄積された特定の被写体の情報を標準パターンとし、各画像Ｉｍから抽出した特徴量の中から標準パターンに合致した特徴量、あるいは近い特徴量を、識別することによって画像認識を行う。そして、標準パターンに合致した特徴量もしくは近い特徴量を有する画像Ｉｍを、被写体ＤＢ２３に蓄積された被写体と同一の被写体が写った画像Ｉｍであると判定して、判定情報を画像構築部１４に出力する。被写体ＤＢ２３に蓄積する被写体の画像情報は、複数の被写体に対応させて複数用意してもよい。この場合は、ユーザによって予めいずれかの被写体を選択させ、選択された被写体の画像情報を標準パターンとするようにする。
【００７６】
なお、上述した各例では、ユーザにより操作入力部１９等を介して指定された画像Ｉｍや、視線検出部２０が検出した視線の位置に配置された画像Ｉｍを、ユーザによる選択画像ＳＩｍとする例を挙げたが、選択画像ＳＩｍの決定方法は、これらに限定されるものではない。
【００７７】
ユーザによる指定位置を検出する手法としては、例えば、表示部１７をタッチパネルで構成し、ユーザによって押さえられた位置を、ユーザによる指定位置とみなす手法を採用してもよい。あるいは、カメラ等を用いて、ユーザにより指定された箇所を検出するようにしてもよい。表示部１７を、リアプロジェクション型のプロジェクタ用のスクリーンで構成している場合には、スクリーンの背面にカメラ等のセンサを設置し、カメラにより検出された箇所をユーザによる指定位置と決定するようにしてもよい。
【００７８】
次に、本発明の第２の実施の形態を、図２１〜図２４を参照して説明する。本実施の形態では、ユーザの視聴状況に応じて、表示部１７に表示する各画像Ｉｍのサイズや配置位置を調整する処理を行う。図２１は、本例における画像表示装置１Ｃの構成例を示すブロック図である。図２１において、図１、図１５、図２０と対応する箇所には同一の符号を付してあり、詳細な説明については省略する。
【００７９】
図２１に示した画像表示装置１Ｃは、図１に示した構成に加えて、カメラ２４と視聴位置算出部２５とをさらに有するものである。カメラ２４は、ユーザの視聴位置近辺を撮影してユーザを検出し、検出結果を視聴位置算出部２５に出力する。視聴位置算出部２５は、カメラ２４から出力された検出結果情報に基づいてユーザの視聴位置を算出し、さらに視聴位置と表示部１７の表示面との距離を算出する。そして、算出した距離情報を画像構築部１４に出力する。
【００８０】
画像構築部１４は、ユーザの視聴位置が画面から離れている場合には、各画像Ｉｍの表示サイズを小さくし、ユーザの視聴位置が画面に近い場合には、各画像Ｉｍの表示サイズを大きくする処理を行う。すなわち、表示部１７に表示させる画像Ｉｍのサイズを、ユーザの視聴位置と画面との距離の大きさと反比例する大きさに設定するようにする。
【００８１】
図２２に、画像表示装置１Ｃによる処理の例を、フローチャートで示してある。図２２において、まず、視聴位置算出部２５が画像の表示面とユーザの視聴位置との間の距離を算出し（ステップＳ７１）、次に、今回算出した距離が前回算出した距離と変化しているか否かの判断を行う（ステップＳ７２）。画像の表示面とユーザの視聴位置との間の距離が、前回と比べて変化していなかった場合には、処理は終了となる。
【００８２】
画像の表示面とユーザの視聴位置との間の距離が、前回と比べて変化していた場合には、画像構築部１４が、画像の表示倍率を距離に応じた値に設定し（ステップＳ７３）、設定された表示倍率に各画像Ｉｍの表示サイズを設定して表示画像を構築し（ステップＳ７４）、構築した表示画像を表示部１７に出力する（ステップＳ７５）。
【００８３】
図２３に、このような処理を行った場合の、表示部１７での表示例を示してある。図２３において、図面の左側には、表示部１７の表示面とユーザＵの視聴位置との間の距離の大きさを示す例として、表示部１７とユーザＵとを側面から見た図を示してある。図２３（ａ）における表示部１７の表示面とユーザＵの視聴位置との間の距離をＤ１、図２３（ｂ）における距離をＤ２、図２３（ｃ）における距離をＤ３とした場合、それぞれの距離関係は、Ｄ１＞Ｄ２＞Ｄ３となる。
【００８４】
そして図面の右側には、それぞれの距離における表示部１７での表示例を示してある。図２３（ａ）における画像ＩｍのサイズをＳｚ１、図２３（ｂ）における画像ＩｍのサイズをＳｚ２、図２３（ｃ）における画像ＩｍのサイズをＳｚ３とした場合、各サイズ間の関係はＳｚ１＜Ｓｚ２＜Ｓｚ３となる。
【００８５】
つまり、図２３（ａ）に示されるように、ユーザＵの視聴位置と画面との間の距離Ｄ１が大きい場合には、画面に表示される各画像ＩｍのサイズＳｚ１は小さくなり、図２３（ｃ）に示されるように、ユーザＵの視聴位置と画面との間の距離Ｄ３が小さい場合には、画面に表示される各画像ＩｍのサイズＳｚ３は大きくなる。
【００８６】
ユーザＵが表示画面を俯瞰して視聴したい場合には、ユーザＵは画面から離れた位置から各画像Ｉｍを視聴するため、画面上に表示サイズの小さい画像Ｉｍが、沢山表示されるようになる。これにより、ユーザＵは、多数の画像Ｉｍを同時に一覧することができるようになる。また、ユーザＵが、表示画面に表示された各画像Ｉｍの詳細を確認しようとした場合には、ユーザＵは表示画面に近づいて各画像Ｉｍを視聴しようとするため、画面上に表示される画像Ｉｍのサイズは大きくなる。これにより、ユーザＵは１つ１つの画像Ｉｍの詳細をより細かく確認することができるようになる。
【００８７】
本例においても、各画像Ｉｍの並び順や、並び順を決めるパラメータ等は、第１の実施の形態として説明した通りのものを採用するものとする。このため、ユーザＵは、表示部１７に表示された表示画像を遠くから俯瞰することで、各画像Ｉｍ間の関連度合いや、各画像Ｉｍが撮影された時刻や場所の情報等、各画像Ｉｍの配置位置で表現される情報を取得することができる。
【００８８】
なお、画像Ｉｍのサイズを拡大又は縮小する場合には、ユーザＵの注視している位置を起点として、拡大又は縮小を行うようにする。また、図２３（ａ）〜図２３（ｃ）においては、各画像Ｉｍの重なりを許さない形態で画像Ｉｍを表示した例を挙げてあるが、画像Ｉｍ間の重なりを許して表示した場合にも適用可能である。この場合は、単純に各画像Ｉｍのサイズを拡大又は縮小するのではなく、拡大又は縮小の処理に合わせて各画像Ｉｍ間の配置位置も移動させるようにする。
【００８９】
図２４に、表示部１７に表示された各画像Ｉｍを、徐々に拡大する場合の表示例を示してある。図２４（ａ），図２４（ｂ），図２４（ｃ）のそれぞれの図においては、ユーザＵが注視しているは、画面の中央に位置する画像Ｉｍである。
【００９０】
図２４（ａ）には、ユーザＵが注視している画像Ｉｍ１の近辺に、他の画像Ｉｍ２〜画像Ｉｍ６が重なって配置されている状態を示してあり、図２４（ｂ）においては、他の画像Ｉｍ２〜画像Ｉｍ６が、ユーザＵが注視する画像Ｉｍ１を中心として徐々に外側の方向に移動している状態が示されている。さらに図２４（ｃ）には、他の画像Ｉｍ２〜画像Ｉｍ６が、ユーザＵが注視する画像Ｉｍ１を中心として外側の方向に移動したため、各画像Ｉｍ間の重なりがほぼなくなっている状態が示されている。
【００９１】
このような処理を行うことで、画像Ｉｍ間の重なりを許して表示がされている場合であっても、ユーザＵの視聴位置に応じて、ユーザＵが取得したい情報が取得可能な形態で提示されるようになる。
【００９２】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが専用のハードウェアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで各種の機能を実行することが可能な、例えば汎用のコンピュータなどに、プログラム記録媒体からインストールされる。
【００９３】
図２５に、上述した実施の形態の一連の処理をプログラムにより実行することが可能な、パーソナルコンピュータ１００（以下、ＰＣ１００とも称する）の構成例を示してある。図２５に示したＰＣ１００は、制御部１０１、メモリ１０２、通信部１０３、操作部１０４、表示部１０５、記憶部１０６、外部記憶媒体Ｉ／Ｆ部１０７、外部記憶媒体１０８とを備える。
【００９４】
制御部１０１は、ＣＰＵ（Central Processing Unit）等で構成され、メモリ１０２、または記憶部に記録されているプログラムに従って、上記一連の処理や、他の各種の処理を実行する。メモリ１０２は、ＲＡＭ（Random Access Memory）やＲＯＭ（Read Only Memory）で構成され、制御部１０１が実行するプログラムやデータなどが記憶される。
【００９５】
通信部１０３は、インターネットやローカルエリアネットワークなどのネットワークを介して外部の装置と通信する。外部記憶媒体Ｉ／Ｆ部１０７は、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどの外部記憶媒体１０８が装着されたとき、それらを駆動し、そこに記録されているプログラムやデータなどを取得する。取得されたプログラムやデータは、必要に応じて記録１０８に転送され、記録される。
【００９６】
操作部１０４は、キーボードやマウスなどより構成され、ユーザからの操作入力に応じた操作信号を生成して制御部１０１に出力する。表示部１０５は、ＣＲＴ（Cathode Ray Tube）やＬＣＤよりなるディスプレイである。記憶部１０６は、例えばハードディスクやＤＶＤ（Digital Versatile Disc）からなり、制御部１０１が実行するプログラムや各種のデータを記録する。
【００９７】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム記録媒体は、図２５に示すように、外部記憶媒体１０８として構成される。外部記憶媒体１０８としては、上述した磁気ディスクのようなリムーバブルメディアの他に、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているメモリ１０２や、記憶部１０６なども含む。
【００９８】
プログラム記録媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部１０３を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【００９９】
なお、本明細書において、プログラム記録媒体に格納されるプログラムを記述する処理ステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理（例えば、並列処理あるいはオブジェクトによる処理）をも含むものである。
【０１００】
また、プログラムは、一つのコンピュータにより処理されるものであってもよいし、複数のコンピュータによって分散処理されるものであってもよい。さらに、プログラムは、遠方のコンピュータに転送されて実行されるものであってもよい。
【図面の簡単な説明】
【０１０１】
【図１】本発明の第１の形態による画像表示装置の内部構成例を示すブロック図である。
【図２】本発明の第１の形態による画像をランダムな配置順で一覧表示する場合の処理の例を示すフローチャートである。
【図３】本発明の第１の形態による画像をランダムな配置順で一覧表示する場合の表示の例を示す説明図である。
【図４】本発明の第１の形態による画像を撮影日時の順番に配置する場合の処理の例を示すフローチャートである。
【図５】本発明の第１の形態による画像を撮影日時の順番に配置する場合の表示の例を示す説明図である。
【図６】本発明の第１の形態による画像を撮影者毎に色分けして配置する場合の処理の例を示すフローチャートである。
【図７】本発明の第１の形態による画像を撮影者毎に色分けして配置する場合の表示の例を示す説明図である。
【図８】本発明の第１の形態による画像を撮影者毎に色分けした上で撮影日時順に配置する場合の処理の例を示すフローチャートである。
【図９】本発明の第１の形態による画像を撮影者毎に色分けした上で撮影日時順に配置する場合の表示の例を示す説明図である。
【図１０】本発明の第１の形態の他の例による画像を２次元座標上で構成される表示領域に配置する場合の処理の例を示すフローチャートである。
【図１１】本発明の第１の形態の他の例による画像を２次元座標上で構成される表示領域に配置する場合の表示の例を示す説明図である。
【図１２】本発明の第１の形態の他の例による画像を２次元座標上で構成される表示領域に配置する場合の表示の例を示す説明図である。
【図１３】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い順に画像を配置する場合の処理の例を示すフローチャートである。
【図１４】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い順に画像を配置する場合の表示の例を示す説明図であり、（ａ）は選択画像を示し、（ｂ）は表示領域における表示例を示す。
【図１５】本発明の第１の形態の他の例による画像表示装置の内部構成例を示すブロック図である。
【図１６】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を強調表示する場合の処理の例を示すフローチャートである。
【図１７】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を強調表示する場合の表示の例を示す説明図であり、（ａ）はユーザによって特定の画像が選択された状態を示し、（ｂ）は選択画像との関連度が高い画像が強調表示された状態を示す。
【図１８】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を最前面に移動させる場合の表示の例を示す説明図であり、（ａ）は選択画像との関連度が高い画像が他の画像の背面に表示されている状態を示し、（ｂ）は選択画像との関連度が高い画像が最前面に表示された状態を示す。
【図１９】本発明の第１の形態の他の例による、ユーザによる選択画像との関連度が高い画像を選択画像近辺に移動させる場合の表示の例を示す説明図であり、（ａ）は移動前の状態を示し、（ｂ）は移動後の状態を示す。
【図２０】本発明の第１の実施の形態の他の例による画像表示装置の内部構成例を示すブロック図である。
【図２１】本発明の第２の実施の形態による画像表示装置の内部構成例を示すブロック図である。
【図２２】本発明の第２の実施の形態による、ユーザの視聴位置に応じて画像のサイズや配置位置を変える場合の処理の例を示すフローチャートである。
【図２３】本発明の第２の実施の形態による、ユーザの視聴位置に応じて画像のサイズ及び配置位置を変える場合の表示の例を示す説明図であり、（ａ）はユーザによる視聴位置が遠い場合の表示例を示し、（ｂ）はユーザによる視聴位置が（ａ）の例よりは近い場合の表示例を示し、（ｃ）はユーザによる視聴位置が近い場合の表示例を示す。
【図２４】本発明の第２の実施の形態による、ユーザの視聴位置に応じて画像のサイズ及び配置位置を変える場合の表示の例を示す説明図であり、（ａ）は配置位置が移動する前の状態を示し、（ｂ）は移動中の状態を示し、（ｃ）は移動後の状態を示す。
【図２５】パーソナルコンピュータの構成例を示すブロック図である。
【符号の説明】
【０１０２】
１，１Ａ，１Ｂ，１Ｃ…画像表示装置、１１…画像入力部、１２…画像蓄積部、１３…画像情報取得部、１４…画像構築部、１５…メモリ、１６…表示処理部、１７…表示部、１８…制御部、１９…操作入力部、２０…視線検出部、２１…注視位置算出部、２２…画像認識処理部、２３…被写体データベース
【特許請求の範囲】
【請求項１】
ユーザの視聴状態を検知する検知部と、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知部による検知結果に応じて前記表示画像を変更する画像構築部と、
前記画像構築部で構築された表示画像を表示するための処理を行う表示処理部とを備えたことを特徴とする
画像表示装置。
【請求項２】
請求項１記載の画像表示装置において、
前記表示処理部の制御に基づいて前記表示画像を表示する表示部を備え、
前記表示部の表示領域の大きさは、前記ユーザの視聴状態においてユーザの視界よりも大きいことを特徴とする
画像表示装置。
【請求項３】
請求項２記載の画像表示装置において、
前記画像構築部は、前記表示画像を構成する各画像の大きさを、前記ユーザの視聴位置と前記表示部との距離の大きさに反比例する大きさに設定することを特徴とする
画像表示装置。
【請求項４】
請求項３記載の画像表示装置において、
前記画像構築部は、前記ユーザにより選択された選択画像を中心として、前記表示画像を構成する各画像の大きさを変化させることを特徴とする
画像表示装置。
【請求項５】
請求項４記載の画像表示装置において、
前記画像構築部は、前記表示画像を構成する各画像同士の重なりを許して前記表示画像を構築した場合で、前記表示画像を構成する各画像同士が重なっている場合には、前記各画像の大きさを拡大する際に、前記各画像同士の重なり部分がなくなるような処理を行うことを特徴とする
画像表示装置。
【請求項６】
請求項２記載の画像表示装置において、
前記画像構築部は、前記選択画像と、前記表示画像を構成する各画像との関連度を算出し、前記算出した関連度に基づいて前記表示画像を構築することを特徴とする
画像表示装置。
【請求項７】
請求項６記載の画像表示装置において、
前記画像構築部は、前記算出した関連度が高い順に前記各画像が配置されるように、前記表示画像を構築することを特徴とする
画像表示装置。
【請求項８】
請求項６記載の画像表示装置において、
前記画像構築部は、前記選択画像との関連度が高いと判定された画像を強調表示する処理を行うことを特徴とする
画像表示装置。
【請求項９】
請求項８記載の画像表示装置において、
前記画像構築部は、前記表示画像を構成する各画像同士の重なりを許して前記表示画像を構築した場合で、前記表示画像を構成する各画像同士が重なっている場合には、前記選択画像との関連度が高い画像を最前面に移動させる処理を行うことを特徴とする
画像表示装置。
【請求項１０】
請求項８記載の画像表示装置において、
前記画像構築部は、前記選択画像との関連度が高いと判定された画像を、前記選択画像の近辺に移動させる処理を行うことを特徴とする
画像表示装置。
【請求項１１】
請求項２記載の画像表示装置において、
前記複数の画像のそれぞれにおける属性情報を抽出する画像情報取得部を備え、
前記画像構築部は、前記画像情報取得部が取得した属性情報に基づいて、前記表示画像を構成する各画像の表示順を決定することを特徴とする
画像表示装置。
【請求項１２】
請求項１１記載の画像表示装置において、
前記画像情報取得部は、前記属性情報として前記複数の画像の撮影日時情報を取得し、
前記画像構築部は、前記画像情報取得部が取得した撮影日時の順に、前記表示画像を構成する各画像を配置することを特徴とする
画像表示装置。
【請求項１３】
請求項１１に記載の画像表示装置において、
前記画像情報取得部は、前記属性情報として前記複数の画像の撮影者情報を取得し、
前記画像構築部は、前記画像情報取得部が取得した撮影者情報に基づいて、前記複数の画像における撮影者の種類毎に表示を区別して前記表示画像を構築することを特徴とする
画像表示装置。
【請求項１４】
請求項２に記載の画像表示装置において、
前記画像構築部は、前記複数の画像に関する２つの異なるパラメータを、それぞれ前記表示画像の縦方向と横方向に割り当てることで、前記表示画像を構築することを特徴とする
画像表示装置。
【請求項１５】
請求項４記載の画像表示装置において、
前記検知部は、前記のユーザの視線位置を検出し、前記視線位置に配置された画像を前記ユーザによる選択画像とすることを特徴とする
画像表示装置。
【請求項１６】
請求項６記載の画像表示装置において、
前記関連度は、前記選択画像から抽出した特徴量と前記表示画像を構成する各画像から抽出した特徴量とを比較することにより算出することを特徴とする
画像表示装置。
【請求項１７】
請求項６記載の画像表示装置において、
前記画像構築部は、予め用意しておいた特定の被写体の画像を標準パターンとして、画像認識処理を行うことにより、前記選択画像と前記表示画像を構成する各画像との関連度を算出することを特徴とする
画像表示装置。
【請求項１８】
ユーザの視聴状態を検知するステップと、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知結果に応じて前記表示画像を変更するステップと、
前記構築された表示画像を表示するための処理を行うステップとを含むことを特徴とする
画像表示方法。
【請求項１９】
ユーザの視聴状態を検知するステップと、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知結果に応じて前記表示画像を変更するステップと、
前記構築された表示画像を表示するための処理を行うステップとをコンピュータに実行させるための
プログラム。
【請求項２０】
ユーザの視聴状態を検知するステップと、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知結果に応じて前記表示画像を変更するステップと、
前記構築された表示画像を表示するための処理を行うステップとをコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な
記録媒体。
【請求項１】
ユーザの視聴状態を検知する検知部と、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知部による検知結果に応じて前記表示画像を変更する画像構築部と、
前記画像構築部で構築された表示画像を表示するための処理を行う表示処理部とを備えたことを特徴とする
画像表示装置。
【請求項２】
請求項１記載の画像表示装置において、
前記表示処理部の制御に基づいて前記表示画像を表示する表示部を備え、
前記表示部の表示領域の大きさは、前記ユーザの視聴状態においてユーザの視界よりも大きいことを特徴とする
画像表示装置。
【請求項３】
請求項２記載の画像表示装置において、
前記画像構築部は、前記表示画像を構成する各画像の大きさを、前記ユーザの視聴位置と前記表示部との距離の大きさに反比例する大きさに設定することを特徴とする
画像表示装置。
【請求項４】
請求項３記載の画像表示装置において、
前記画像構築部は、前記ユーザにより選択された選択画像を中心として、前記表示画像を構成する各画像の大きさを変化させることを特徴とする
画像表示装置。
【請求項５】
請求項４記載の画像表示装置において、
前記画像構築部は、前記表示画像を構成する各画像同士の重なりを許して前記表示画像を構築した場合で、前記表示画像を構成する各画像同士が重なっている場合には、前記各画像の大きさを拡大する際に、前記各画像同士の重なり部分がなくなるような処理を行うことを特徴とする
画像表示装置。
【請求項６】
請求項２記載の画像表示装置において、
前記画像構築部は、前記選択画像と、前記表示画像を構成する各画像との関連度を算出し、前記算出した関連度に基づいて前記表示画像を構築することを特徴とする
画像表示装置。
【請求項７】
請求項６記載の画像表示装置において、
前記画像構築部は、前記算出した関連度が高い順に前記各画像が配置されるように、前記表示画像を構築することを特徴とする
画像表示装置。
【請求項８】
請求項６記載の画像表示装置において、
前記画像構築部は、前記選択画像との関連度が高いと判定された画像を強調表示する処理を行うことを特徴とする
画像表示装置。
【請求項９】
請求項８記載の画像表示装置において、
前記画像構築部は、前記表示画像を構成する各画像同士の重なりを許して前記表示画像を構築した場合で、前記表示画像を構成する各画像同士が重なっている場合には、前記選択画像との関連度が高い画像を最前面に移動させる処理を行うことを特徴とする
画像表示装置。
【請求項１０】
請求項８記載の画像表示装置において、
前記画像構築部は、前記選択画像との関連度が高いと判定された画像を、前記選択画像の近辺に移動させる処理を行うことを特徴とする
画像表示装置。
【請求項１１】
請求項２記載の画像表示装置において、
前記複数の画像のそれぞれにおける属性情報を抽出する画像情報取得部を備え、
前記画像構築部は、前記画像情報取得部が取得した属性情報に基づいて、前記表示画像を構成する各画像の表示順を決定することを特徴とする
画像表示装置。
【請求項１２】
請求項１１記載の画像表示装置において、
前記画像情報取得部は、前記属性情報として前記複数の画像の撮影日時情報を取得し、
前記画像構築部は、前記画像情報取得部が取得した撮影日時の順に、前記表示画像を構成する各画像を配置することを特徴とする
画像表示装置。
【請求項１３】
請求項１１に記載の画像表示装置において、
前記画像情報取得部は、前記属性情報として前記複数の画像の撮影者情報を取得し、
前記画像構築部は、前記画像情報取得部が取得した撮影者情報に基づいて、前記複数の画像における撮影者の種類毎に表示を区別して前記表示画像を構築することを特徴とする
画像表示装置。
【請求項１４】
請求項２に記載の画像表示装置において、
前記画像構築部は、前記複数の画像に関する２つの異なるパラメータを、それぞれ前記表示画像の縦方向と横方向に割り当てることで、前記表示画像を構築することを特徴とする
画像表示装置。
【請求項１５】
請求項４記載の画像表示装置において、
前記検知部は、前記のユーザの視線位置を検出し、前記視線位置に配置された画像を前記ユーザによる選択画像とすることを特徴とする
画像表示装置。
【請求項１６】
請求項６記載の画像表示装置において、
前記関連度は、前記選択画像から抽出した特徴量と前記表示画像を構成する各画像から抽出した特徴量とを比較することにより算出することを特徴とする
画像表示装置。
【請求項１７】
請求項６記載の画像表示装置において、
前記画像構築部は、予め用意しておいた特定の被写体の画像を標準パターンとして、画像認識処理を行うことにより、前記選択画像と前記表示画像を構成する各画像との関連度を算出することを特徴とする
画像表示装置。
【請求項１８】
ユーザの視聴状態を検知するステップと、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知結果に応じて前記表示画像を変更するステップと、
前記構築された表示画像を表示するための処理を行うステップとを含むことを特徴とする
画像表示方法。
【請求項１９】
ユーザの視聴状態を検知するステップと、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知結果に応じて前記表示画像を変更するステップと、
前記構築された表示画像を表示するための処理を行うステップとをコンピュータに実行させるための
プログラム。
【請求項２０】
ユーザの視聴状態を検知するステップと、
複数の画像を基に画面表示用の表示画像を構築するとともに、前記検知結果に応じて前記表示画像を変更するステップと、
前記構築された表示画像を表示するための処理を行うステップとをコンピュータに実行させるためのプログラムを記録したコンピュータに読み取り可能な
記録媒体。
【図１】
【図２】
【図４】
【図６】
【図８】
【図１０】
【図１１】
【図１２】
【図１３】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図３】
【図５】
【図７】
【図９】
【図１４】
【図２】
【図４】
【図６】
【図８】
【図１０】
【図１１】
【図１２】
【図１３】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図３】
【図５】
【図７】
【図９】
【図１４】
【公開番号】特開２００９−１９２７３７（Ｐ２００９−１９２７３７Ａ）
【公開日】平成２１年８月２７日（２００９．８．２７）
【国際特許分類】
【出願番号】特願２００８−３２１７６（Ｐ２００８−３２１７６）
【出願日】平成２０年２月１３日（２００８．２．１３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２１年８月２７日（２００９．８．２７）
【国際特許分類】
【出願日】平成２０年２月１３日（２００８．２．１３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]