画像表示システム、画像表示装置、及びプログラム
【課題】画像の鑑賞における娯楽性を向上させる。
【解決手段】画像表示システム１は、サーバ装置２と、画像処理装置３と、画像表示装置４とがネットワークを介して接続されている。サーバ装置２は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１を備える。画像表示装置４は、画像を表示する表示部４１と、入力された識別情報を送信する通信部４３と、を備える。画像処理装置４は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部３１１を備える。また、画像表示装置４は、画像処理部３１１により画像処理された表示画像を表示部４１に表示させる画像制御部４５１を備える。
【解決手段】画像表示システム１は、サーバ装置２と、画像処理装置３と、画像表示装置４とがネットワークを介して接続されている。サーバ装置２は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１を備える。画像表示装置４は、画像を表示する表示部４１と、入力された識別情報を送信する通信部４３と、を備える。画像処理装置４は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部３１１を備える。また、画像表示装置４は、画像処理部３１１により画像処理された表示画像を表示部４１に表示させる画像制御部４５１を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示システム、画像表示装置、及びプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラや家庭用ビデオカメラの普及により、静止画像や動画などの画像が個人によって手軽に撮影されている。そして、個人によって撮像されたこれらの画像を、自宅において手軽に鑑賞することが行われている（例えば、特許文献１を参照）。
特許文献１には、デジタルカメラで撮影した画像をテレビに表示することで、自宅において手軽に画像を鑑賞する技術が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１３４４５１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述したような技術では、単に、個人が撮影したままの画像を表示するだけであるため、画像の鑑賞における娯楽性が乏しいという問題がある。
【０００５】
本発明は、上記問題を解決すべくなされたもので、その目的は、画像の鑑賞における娯楽性を向上させることができる画像表示システム、画像表示装置、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記問題を解決するために、本発明の一態様は、サーバ装置と、画像処理装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、前記サーバ装置は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を備え、前記画像表示装置は、画像を表示する表示部と、入力された前記識別情報を送信する通信部と、を備え、前記画像処理装置は、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部を備え、前記画像表示装置は、前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部、を備えることを特徴とする画像表示システムである。
【０００７】
また、本発明の一態様は、サーバ装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、前記サーバ装置は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部と、前記画像表示装置から送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、を備え、前記画像表示装置は、画像を表示する表示部と、入力された識別情報を送信する通信部と、前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、を備えることを特徴とする画像表示システムである。
【０００８】
また、本発明の一態様は、サーバ装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、前記サーバ装置は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を備え、前記画像表示装置は、画像を表示する表示部と、入力された前記識別情報を送信する通信部と、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、を備えることを特徴とする画像表示システムである。
【０００９】
また、本発明の一態様は、画像を表示する表示部と、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して接続され、入力された前記識別情報を送信する通信部と、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を前記表示部に表示させる画像制御部と、を備えることを特徴とする画像表示装置である。
【００１０】
また、本発明の一態様は、画像表示装置としてのコンピュータに、通信部が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して、入力された前記識別情報を送信する通信手順と、画像制御部が、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を表示部に表示させる画像制御手順と、を実行させるためのプログラムである。
【発明の効果】
【００１１】
本発明によれば、画像の鑑賞における娯楽性を向上させることができる。
【図面の簡単な説明】
【００１２】
【図１】第１の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図２】同実施形態における画像表示装置を示す図である。
【図３】同実施形態におけるサーバ装置の記憶部の一例を示す図である。
【図４】同実施形態における画像表示システムの処理シーケンスの一例を示す図である。
【図５】第２の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図６】同実施形態におけるユーザ画像の登録処理の一例を示す図である。
【図７】第３の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図８】第４の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図９】第５の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図１０】第６の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図１１】第６の実施形態における画像表示システムの処理シーケンスの一例を示す図である。
【図１２】本実施形態における画像表示装置の別の一例を示す図である。
【発明を実施するための形態】
【００１３】
以下、本発明の一実施形態による画像表示システムについて図面を参照して説明する。
［第１の実施形態］
図１は、本実施形態による画像表示システム１の一例を示す概略ブロック図である。
この図において、画像表示システム１は、サーバ装置２と、画像処理装置３と、画像表示装置４とを備えている。また、サーバ装置２と、画像処理装置３と、画像表示装置４とは、ネットワーク６を介して接続されている。画像表示装置４は、店舗５に設置されている。なお、本実施形態では、複数の画像表示装置４が、ネットワークを介して、サーバ装置２と画像処理装置３とに接続される例について説明する。
【００１４】
なお、複数の店舗５の各店舗を示す場合には、Ａ店舗５Ａ、Ｂ店舗５Ｂ、…、Ｘ店舗５Ｘと表記する。また、各店舗（５Ａ、５Ｂ、…５Ｘ）に設置されている画像表示装置４を示す場合には、画像表示装置４Ａ、画像表示装置４Ｂ、…、画像表示装置４Ｘと表記する。
【００１５】
また、店舗５は、例えば、カラオケ店（カラオケボックス）やゲームセンタなどの娯楽施設である。店舗５は、遊園地やテーマパークのようなアミューズメント施設やレジャー施設、または、老人ホームや福祉会館等の施設であってもよい。
【００１６】
サーバ装置２は、制御部２１、サーバ通信部２２、及び記憶部２３を備えている。
サーバ通信部２２は、ネットワーク６に接続されていて、ネットワーク６を介して、画像処理装置３や画像表示装置４などの他の装置とサーバ装置２と間の通信を行う。
【００１７】
制御部２１は、サーバ装置２の各種処理を制御し、例えば、記憶サーバ通信部２２を介してユーザを識別する識別情報を受信し、識別情報に関連付けられて記憶部２３に記憶されている画像を読み出す。また、制御部２１は、例えば、記憶部２３から読み出した画像を、サーバ通信部２２を介して画像処理装置３に送信する。
なお、本実施形態における画像とは、静止画像と動画像との両方を含むものとする。また、画像には、さらに、音情報が含まれていてもよい。
また、ここで、識別情報とは、例えば、この画像表示システム１によって画像を鑑賞するサービスを受けるための会員番号である。
【００１８】
記憶部２３は、画像処理装置３において画像処理される画像である元画像などを記憶する。ここで、元画像には、画像処理装置３が画像処理により生成する表示画像の背景となる背景画像、又は、この表示画像に表示する対象物となる対象画像が含まれる。ここで、背景画像とは、例えば、風景や街並みの画像などである。また、対象画像とは、例えば、特定の人物、ペット、車などのものなどの画像である。
記憶部２３は、ユーザ画像記憶部２３１と、元画像記憶部２３２とを備えている。
【００１９】
ユーザ画像記憶部２３１には、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている。ユーザ画像は、ユーザが画像処理に用いる元画像として選択可能な画像であり、ユーザによって予め登録されている。ユーザ画像は、例えば、ユーザ自身が撮影した静止画や動画であってもよいし、購入などによりユーザが入手した静止画や動画であってもよい。ユーザ画像は、例えば、家族の画像、ペットの画像、亡くなった故人の画像、思い出の場所の画像、結婚式や家族旅行などのイベントにおける画像、ユーザにとって思い入れのあるアイドルの画像などである。
【００２０】
元画像記憶部２３２には、元画像として選択可能なさまざまな画像が記憶されている。元画像記憶部２３２に記憶される画像は、上述のユーザ画像のようにユーザの識別情報とは関連付けられていないが、自由に元画像として使用できる画像や、購入によりユーザ画像として登録可能な画像などである。ここで、登録とは、識別情報と関連付けて画像をユーザ画像記憶部２３１に記憶させることである。この登録を行う登録処理の詳細については、後述する。
ユーザ画像記憶部２３１及び元画像記憶部２３２に記憶されている画像の詳細については、後述する。
【００２１】
画像表示装置４は、画像処理装置３が生成した表示画像を表示する。また、画像表示装置４は、表示部４１、入力部４２、及び本体部４０を備えている。本体部４０は、通信部４３と、制御部４５とを備えている。
【００２２】
通信部４３は、ネットワーク６に接続されていて、ネットワーク６を介して、サーバ装置２や画像処理装置３などの他の装置と画像表示装置４と間の通信を行う。通信部４３は、ユーザによって入力部４２から入力された識別情報を、サーバ装置２又は画像処理装置３に送信する。
【００２３】
入力部４２は、ユーザの識別情報、元画像の選択、表示方向や移動位置の指定などの情報がユーザによって入力される。ユーザによって入力部４２を介して入力された情報は、制御部４５に供給される。
【００２４】
制御部４５は、画像表示装置４の各種処理を制御し、例えば、通信部３２を介して表示画像を受信したり、上述したユーザによって入力部４２から入力された情報を、通信部３２を介してサーバ装置２又は画像処理装置３に送信したりといった処理を制御する。また、制御部３１は、画像制御部４５１を備えている。
【００２５】
画像制御部４５１は、画像処理装置３の後述する画像処理部３１１により画像処理された表示画像を表示部４１に表示させる。この表示画像は、ネットワーク６を介して、通信部４３を経由して配信される。
【００２６】
表示部４１は、例えば、広角（人間の視界範囲をカバーできる角度、例えば１８０度、３６０度など）のディスプレイであり、画像処理装置３の後述する画像処理部３１１によって生成された表示画像をパノラマ画像として表示する。
【００２７】
画像処理装置３は、ユーザによって選択された元画像に基づいて、画像処理により表示画像を生成し、画像表示装置４に送信（配信）する。画像処理装置３は、制御部３１と画像処理通信部３２とを備えている。
【００２８】
画像処理通信部３２は、ネットワーク６に接続されていて、ネットワーク６を介して、サーバ装置２や画像表示装置４などの他の装置と画像処理装置３と間の通信を行う。
【００２９】
制御部３１は、画像処理装置３の各種処理を制御し、例えば、画像処理通信部３２を介して画像を受信したり、画像処理により生成された表示画像を、画像処理通信部３２を介して画像表示装置４に送信したりといった処理を制御する。また、制御部３１は、画像処理部３１１を備えている。
【００３０】
画像処理部３１１は、サーバ装置２などから読み出された元画像に基づいて、表示画像を画像処理により生成する。この元画像には、画像表示装置４から送信された識別情報と関連付けられているユーザ画像であって、サーバ装置２のユーザ画像記憶部２３１から読み出されたユーザ画像が少なくとも含まれている。
【００３１】
ここで、画像処理部３１１によって行われる画像処理には、以下の処理が含まれる。
（処理１）元画像が複数の背景画像又は複数のフレーム画像を含んだ動画像である背景画像であり、画像処理部３１１は、複数の背景画像又は複数のフレーム画像をつなぎ合わせて、ユーザの位置や背景を見る向きに応じて補完する画像処理を行い、表示画像を生成する。すなわち、画像処理部３１１は、実際に映像における場所・時間にユーザが存在しているように体感させる表示画像を生成する。
なお、背景画像は、所定の場所（例えば、外国の街並みなど）において位置を移動させて、位置それぞれを中心に水平方向に３６０度の視野を撮影した全方位画像であってもよい。
【００３２】
（処理２）元画像が複数の対象画像又は複数のフレーム画像を含んだ動画像である対象画像であり、画像処理部３１１は、複数の対象画像又は複数のフレーム画像に基づいて、対象物を見る向きに応じて対象物の画像を補完する画像処理を行い、表示画像を生成する。すなわち、画像処理部３１１は、ユーザが実際に対象物と一緒に存在しているように体感させる表示画像を生成する。
この場合、画像処理部３１１は、複数の対象画像から立体形状のモデルを生成し、生成した立体形状のモデルの向きを変更する画像処理を行う。このような複数の元画像から立体形状のモデルを復元する手法は、例えば、「Yasutaka Furukawa and Jean Ponce, Accurate, Dense, and Robust Multiview Stereopsis IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, VOL.32, NO.8, AUGUST 2010」に記載されている。
【００３３】
画像処理部３１１は、例えば、上述の文献に記載された技術を用いて以下のステップにより、対象物を見る向きに応じて対象物の画像を補完する画像処理を行う。
（ステップ１）まず、画像処理部３１１は、複数の視点が異なる元画像の各々から特徴点を抽出する。
（ステップ２）次に、画像処理部３１１は、１つの元画像における特徴点と他の元画像における特徴点を対応付ける。
（ステップ３）次に、画像処理部３１１は、元画像を撮影した位置情報と光学系パラメータ（視点方向等）とに基づき、対応付けられた特徴点を含む被写体表面を構成する部分領域を定める。ここで、位置情報と光学系パラメータ（視点方向等）とは、例えば、元画像と関連付けられて、記憶部２３に記憶されている。
（ステップ４）次に、画像処理部３１１は、各部分領域を表す１つの元画像の部分領域と、対応する他の元画像の部分領域との間で、互いに欠落している部分の信号を補完する。
（ステップ５）次に、画像処理部３１１は、全ての部分領域について補完して構成した画像（立体形状のモデル）を生成し、生成した画像に基づいて画像表示画像とする。
【００３４】
（処理３）元画像が背景画像と対象画像とであり、画像処理部３１１は、背景画像と対象画像とを合成して、背景画像の中に対象画像を表示させる（背景画像の中に対象画像を貼り込こんだ）表示画像を生成する。すなわち、画像処理部３１１は、ユーザが対象画像の対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。
この場合、画像処理部３１１は、背景の明るさや対象画像を合成する位置に応じて、対象画像の明るさ、サイズ、影の位置などを変更する加工を行う。また、画像処理部３１１は、ユーザによって指定された天候、季節、時刻などに応じて、背景画像を変更する加工を行ってもよい。画像処理部３１１は、このような背景画像と対象画像との加工を行った上で、背景画像と対象画像とを違和感のないように合成して表示画像を生成する。
【００３５】
このような背景画像と対象画像とを違和感のないように合成する手法は、例えば、「Tao Chen, Ming-Ming Cheng, Ping Tan, Ariel Shamir, and Shi-Min Hu, Sketch2Photo: Internet Image Montage, ACM Transactions on Graphics, Vol. 28, No. 5, Article 124, December 2009」におけるpp5-7（５ページから７ページ）の“5 Hybrid Image Blending”及び“6 Image Combination Optimization”に記載されている。
この合成手法では、以下の２つのステップにより、違和感のない画像の合成を行う。
（ステップ１）まず、画像処理部３１１は、合成境界を最適化して、その画素のテクスチャー（質感）と色とが一貫しているかどうかを示して、境界の中で各画素を割り当てる。
（ステップ２）次に、画像処理部３１１は、改良されたポアソン画像合成とアルファ・ブレンディングとの組み合わせによって、合成画像を生成する。
【００３６】
なお、（処理３）の簡易な例として、画像処理部３１１は、例えば、背景画像内に予め用意された人物像の顔部分に、対象画像の顔を合成するような画像処理でもよい。この場合、画像処理部３１１は、対象画像の顔部分を切り出して、サイズや明るさなどを加工して、背景画像内に予め用意された人物像の顔部分に合成する画像処理を行う。
【００３７】
（処理４）画像処理部３１１は、生成した表示画像に対して、ユーザによって入力部４２から指示された位置及び方向に対応する背景を含む表示画像に変更する画像処理を行う。すなわち、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向において見ることができる表示画像に変更し、表示画像の中で、実際に移動しているように体感させる表示画像を生成する。
【００３８】
（処理５）画像処理部３１１は、生成した表示画像に対して、ユーザによって入力部４２から指示された対象物の向き情報に応じて、表示画像における対象物の向きを変更する画像処理を行う。すなわち、画像処理部３１１は、ユーザによって指示された対象物の向きに変更した対象物と背景画像とを合成して、対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。
【００３９】
なお、上述の（処理１）から（処理５）の画像処理は、画像処理部３１１によって、（処理１）から（処理５）のうちの１つが単独で実行されてもよいし、（処理１）から（処理５）のうちの複数が組み合わされて実行されてもよい。
画像処理部３１１は、生成した表示画像を、ネットワーク６を介して画像処理通信部３２から画像表示装置４に送信（配信）させる。
【００４０】
図２は、店舗５に設置されている本実施形態における画像表示装置４の一例を示す図である。
この図において、画像表示装置４の表示部４１は、パノラマ画像を表示することができる広角のディスプレイである。表示部４１は、ユーザＵ１を中心に扇状に配置され、表示画像の中にユーザＵ１が実際に存在しているように体感できるような表示画像Ｇ２０を表示する。表示部４１と床との境界が分かり難くなるようにすることが好ましい。また、本体部４０は、表示部４１の横に配置されている。本体部４０は、通信部４３を介してネットワーク６に接続されている。
店舗５が老人ホームや福祉会館である場合には、小部屋に二人がけのベンチを置き、そこに老人を座らせてもよい。
また、この図において、入力部４２は、ユーザＵ１が手に持ち、ユーザＵ１の動きの検出、又は、入力部４２に備えられているボタン操作によって、各種情報を取得する。
【００４１】
なお、この例では、表示画面（Ｇ２０）は、背景画像「思い出の場所Ａ」（Ｇ１）に、対象物である既に亡くなっている「故人の画像Ａ」（Ｇ３）を合成した場合の例である。
【００４２】
図３は、サーバ装置２の記憶部２３における一例を示す図である。
ユーザ画像記憶部２３１の中には、複数のユーザの記憶領域（７１、７２、７３）が含まれている。例えば、Ａユーザのための記憶領域７１は、Ａユーザに対応する識別情報Ａに関連付けられてユーザ画像（Ｇ１〜Ｇ４）を記憶している。例えば、記憶領域７１は、背景画像として「思い出の場所Ａ」（Ｇ１）及び「過去に住んでいた街並みＡ」（Ｇ２）、対象画像として「故人の画像Ａ」（Ｇ３）及び「家族の画像Ａ」（Ｇ４）を記憶している。
【００４３】
また、例えば、Ｂユーザのための記憶領域７２は、Ｂユーザに対応する識別情報Ｂに関連付けられてユーザ画像（Ｇ５〜Ｇ８）を記憶している。例えば、記憶領域７２は、背景画像として「旅行した場所Ａ」（Ｇ５）及び「過去に住んでいた街並みＢ」（Ｇ６）、対象画像として「家族の画像Ｂ」（Ｇ７）及び「ペットの画像Ａ」（Ｇ８）を記憶している。
【００４４】
また、例えば、Ｘユーザのための記憶領域７３は、Ｘユーザに対応する識別情報Ｘに関連付けられてユーザ画像（Ｇ９〜Ｇ１２）を記憶している。例えば、記憶領域７３は、背景画像として「旅行した場所Ｂ」（Ｇ９）及び「過去に住んでいた街並みＣ」（Ｇ１０）、対象画像として「故人の画像Ｂ」（Ｇ１１）及び「ペットの画像Ｂ」（Ｇ１２）を記憶している。
【００４５】
このように、各ユーザのユーザ画像は、各ユーザの識別情報に関連付けられて、ユーザ画像記憶部２３１に記憶されている。
【００４６】
また、元画像記憶部２３２の中には、背景画像領域７４と対象画像領域７５が含まれている。背景画像領域７４は、背景画像として、例えば、「観光地Ａ」（Ｇ１３）、「観光地Ｂ」（Ｇ１４）、及び「バーチャル空間Ａ」（Ｇ１５）を記憶している。また、対象画像領域７５は、対象画像として、例えば、「芸能人Ａ」（Ｇ１６）、「アイドルＡ」（Ｇ１７）、「キャラクタＡ」（Ｇ１８）、及び「アイドルＢ」（Ｇ１９）を記憶している。つまり、元画像記憶部２３２には、背景画像又は対象画像が予め記憶されている。ここで、キャラクタとは、例えば、テーマパークのキャラクタ、ゲームのキャラクタ、アニメのキャラクタなどである。
この元画像記憶部２３２が記憶している画像は、上述したように、自由に元画像として使用できる画像、又は購入によりユーザ画像として登録可能な画像である。
また、背景画像の他の例として、昔の懐かしい映像（例えば昭和３０年代の家屋等。）がある。存在しない昔の映像は、写真等を素にして作成する。
更に、背景画像に木々等の環境画像をはめ込んでもよい。環境画像は、いわゆる静止動画（数秒（例えば２〜４秒）撮影した映像を繰り返しもしくはランダムに映す。）を用いる。これにより、自然な感じを出すことができ、また、動画のデータ容量を減らすことができる。
【００４７】
次に、本実施形態における画像表示システム１の動作について説明する。
図４は、本実施形態における画像表示システム１の処理シーケンスの一例を示す図である。
まず、画像表示装置４は、ユーザから識別情報を取得する（ステップＳ１０１）。具体的には、例えば、図２に示すように、ＡユーザであるユーザＵ１によって、入力部４２からＡユーザＵ１に対応する識別情報Ａが入力される。これにより、制御部４５は、識別情報Ａを取得する。この識別情報Ａは、例えば、画像表示システム１によるサービスを受けるための会員番号である。
【００４８】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から取得した識別情報Ａをサーバ装置２に送信する（ステップＳ１０２）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａを送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａをサーバ装置２に送信する。
【００４９】
次に、サーバ装置２は、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する（ステップＳ１０３）。サーバ装置２の制御部２１は、記憶部２３のユーザ画像記憶部２３１を参照して、画像表示装置４から送信された識別情報Ａに関連付けられているユーザ画像のリスト（例えば、記憶領域７１のユーザ画像（Ｇ１〜Ｇ４）のリスト）を作成する。そして、制御部２１は、サーバ通信部２２に作成したユーザ画像のリストを送信させる。サーバ通信部２２は、ネットワーク６を介して、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する。なお、サーバ装置２は、元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストをユーザ画像のリストと共に画像表示装置４に送信してもよい。
【００５０】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から元画像情報を取得する（ステップＳ１０４）。すなわち、画像表示装置４の制御部４５は、サーバ装置２から送信されたユーザ画像のリスト及び元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストを表示部４１に表示する。そして、この表示部４１に表示されたリストを見て、ＡユーザＵ１が、表示画像に用いる元画像を入力部４２によってリストの中からいずれかの画像を選択する。これにより、制御部４５は、ＡユーザＵ１によって選択された元画像を示す情報である元画像情報を取得する。ここでは、元画像として、例えば、ユーザ画像における、背景画像である画像Ｇ１（「思い出の場所Ａ」）と、対象画像である画像Ｇ３（「故人の画像Ａ」）との２つの画像がＡユーザＵ１に選択された場合について説明する。
【００５１】
なお、元画像情報には、表示画像を生成するための情報を含めてもよい。ここで、表示画像を生成するための情報とは、例えば、対象物を表示画像上に合成する位置や向きに関する情報や、表示画像におけるユーザの位置や方向を自動で変更するか、入力部４２による指示により変更するかなどの画像処理のための条件情報である。また、表示画像を生成するための情報として、例えば、表示画像と共に出力されるＢＧＭ（Ｂackground Ｍusic）などの音情報が含まれてもよい。
【００５２】
次に、画像表示装置４は、識別情報Ａと元画像情報とを画像処理装置３に送信する（ステップＳ１０５）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａと元画像情報とを送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａと元画像情報とを画像処理装置３に送信する。
【００５３】
次に、画像処理装置３は、識別情報Ａと元画像情報とをサーバ装置２に送信する（ステップＳ１０６）。すなわち、画像処理装置３の制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、画像表示装置４から送信された識別情報Ａと元画像情報とをサーバ装置２に送信させる。これにより、画像処理通信部３２は、識別情報Ａと元画像情報とをサーバ装置２に、ネットワーク６を介して送信する。
【００５４】
次に、サーバ装置２は、ユーザ（ＡユーザＵ１）によって選択された元画像を画像処理装置３に送信する（ステップＳ１０７）。すなわち、制御部２１は、記憶部２３のユーザ画像記憶部２２１に、ＡユーザＵ１の識別情報Ａと関連付けられて記憶されている画像のうち、ＡユーザＵ１によって選択された画像（Ｇ１及びＧ３）を読み出す。例えば、制御部２１は、ＡユーザＵ１のための記憶領域７１に記憶されている「思い出の場所Ａ」（Ｇ１）と「故人の画像Ａ」（Ｇ３）とを読み出す。制御部２１は、サーバ通信部２２に対して、読み出したユーザ画像（Ｇ１、Ｇ３）を画像処理装置４に送信させる。
【００５５】
次に、画像処理装置３は、画像処理により表示画像を生成する（ステップＳ１０８）。すなわち、制御部３１（画像処理部３１１）は、サーバ装置２の記憶部２３から読み出された元画像（Ｇ１、Ｇ３）に基づいて、図２に示すような表示画像（Ｇ２０）を生成する。なお、この例では、表示画面（Ｇ２０）は、背景画像である「思い出の場所Ａ」（Ｇ１）に、対象物である「故人の画像Ａ」（Ｇ３）を合成した画像である。つまり、画像処理部３１１は、上述した（処理１）から（処理５）のうちの、（処理３）に対応する画像処理を行う。
【００５６】
次に、画像処理装置３は、生成した表示画像（Ｇ２０）を画像表示装置４に送信（配信）する（ステップＳ１０９）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成した表示画像（Ｇ２０）を画像表示装置４に送信させる。
【００５７】
次に、画像表示装置４は、表示画像（Ｇ２０）を表示部４１に表示する（ステップＳ１１０）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成された表示画像（Ｇ２０）を、通信部４３を介して受信し、表示部４１に表示させる。この場合、図２に示すような表示画像（Ｇ２０）が、表示部４１に表示される。
これにより、ＡユーザＵ１は、既に亡くなっている故人と一緒に、思い出の場所にいるような体感を味わうことができる。
【００５８】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から指示情報を取得する（ステップＳ１１１）。ユーザ（ＡユーザＵ１）は、表示画像（Ｇ２０）における位置や方向を変更したい場合、又は、対象物である故人の向きや表示位置を変更したい場合に、入力部４２から指示情報を入力する。ここで、指示情報は、例えば、ユーザの変更したい位置及び方向、対象物の位置及び向きなどの情報である。すなわち、制御部４５は、入力部４２からこれらの指示情報を取得する。
【００５９】
次に、画像表示装置４は、取得した指示情報を画像処理装置３に送信する（ステップＳ１１２）。すなわち、制御部４５は、通信部４３に対して、入力部４２から取得した指示情報を画像処理装置３に送信させる。
【００６０】
次に、画像処理装置３は、指示情報に応じた表示画像を生成する（ステップＳ１１３）。すなわち、制御部３１（画像処理部３１１）は、上述した（処理４）又は（処理５）の画像処理を実行する。例えば、指示情報として、ユーザの位置及びユーザの向いている方向が指定された場合には、ユーザによって入力部４２から指示された位置及び方向に対応する背景を含む表示画像に変更する（処理４）。また、指示情報として、対象物の向き情報が指定された場合には、対象物の向き情報に応じて、表示画像における対象物の向きを変更する画像処理を行う（処理５）。
【００６１】
次に、画像処理装置３は、生成（変更）した表示画像を画像表示装置４に送信する（ステップＳ１１４）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成（変更）した表示画像を画像表示装置４に送信させる。
【００６２】
次に、画像表示装置４は、変更された表示画像を表示部４１に表示する（ステップＳ１１５）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成（変更）された表示画像を、通信部４３を介して受信し、表示部４１に表示させる。例えば、画像表示装置４は、ユーザ（ＡユーザＵ１）が指示した位置や方向に、表示されている「思い出の場所Ａ」（Ｇ１）のなかで、指定した位置や向きに変更させた「故人の画像Ａ」（Ｇ３）とともに移動した表示画像を表示部４１に表示する。これによりユーザ（ＡユーザＵ１）は、表示されている表示画像のなかで、指定した位置や向きに変更させた対象物とともに、ユーザ（ＡユーザＵ１）が指示した位置や方向に移動する体感を味わうことができる。
【００６３】
なお、ステップＳ１１１からステップＳ１１５の処理は、ユーザが画像表示の処理を終了するまで、繰り返される。
【００６４】
このように、一例として、元画像として、「思い出の場所Ａ」（Ｇ１）と「故人の画像Ａ」（Ｇ３）とが指定された場合について説明したが、元画像として、さまざまな画像の組み合わせが可能である。
例えば、表示画像の元画像が、海外のある国の街並みの画像である背景画像と、家族やペット、あるいはアイドルなどの対象画像とである。この場合、画像処理部３１１が、海外のある国の街並みの画像である背景画像と、家族やペット、あるいはアイドルなどの対象画像とを元画像として合成した表示画像を生成し、画像制御部４５１が、表示画像を表示部４１に表示させる。これにより、ユーザは、実際に行かなくとも、海外のある国の街並みを家族やペット、あるいはアイドルと共に旅行している疑似体験を楽しむことができる。なお、対象物は、ユーザ自身の画像でもよい。
【００６５】
また、例えば、表示画像の元画像は、ユーザが過去に住んでいた昔の街並み（背景画像）であり、対象画像が元画像に含まれない。この場合、画像処理部３１１が、元画像に基づいて、昔の街並みにおけるユーザの位置や背景を見る向きに応じて補完する画像処理を行い、表示画像を生成する（処理１）。そして、画像制御部４５１が、表示画像を表示部４１に表示させる。さらに、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向においてユーザが見ることができる表示画像に変更し（処理４）、画像制御部４５１が、変更された表示画像を表示部４１に表示させる。これにより、ユーザは、過去に住んでいた昔の街並みに、実際にユーザが存在しているような疑似体験を楽しむことができる。
【００６６】
また、例えば、表示画像の元画像は、ペットの画像やアイドルの画像（対象画像）であり、背景画像が元画像に含まれない。この場合、画像処理部３１１が、元画像に基づいて、対象物を見る向きに応じて対象物の画像を補完する画像処理を行い、表示画像を生成する（処理２）。そして、画像制御部４５１が、表示画像を表示部４１に表示させる。さらに、画像処理部３１１が、ユーザによって指示された対象物の向きに変更した表示画像を生成し、画像制御部４５１が、変更された表示画像を表示部４１に表示させる。これにより、ユーザは、ペットやアイドルと一緒に存在しているような疑似体験を楽しむことができる。
【００６７】
また、例えば、表示画像の元画像は、ユーザが過去に住んでいた家の複数の画像（背景画像）と家族の画像（対象画像）とである。この場合、画像処理部３１１は、複数の画像からユーザが過去に住んでいた家の立体視画像を生成し（処理２）、家族の画像と合成した表示画像を生成する（処理３）。そして、画像制御部４５１が、表示画像を表示部４１に表示させる。さらに、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向においてユーザが見ることができる表示画像に変更し（処理４）、画像制御部４５１が、変更された表示画像を表示部４１に表示させる。これにより、ユーザは、過去に住んでいた家に、家族と共に実際にユーザが存在しているような疑似体験を楽しむことができる。つまり、ユーザは、昔に戻ったような感覚を楽しむ擬似体験が可能になる。
【００６８】
以上のように、本実施形態における画像表示システム１は、サーバ装置２と、画像処理装置３と、店舗５に設置されている画像表示装置４とがネットワークを介して接続されている。サーバ装置２は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１（記憶部）を備える。画像表示装置４は、画像を表示する表示部４１と、入力された識別情報を送信する通信部４３と、画像処理部３１１により画像処理された表示画像を表示部４１に表示させる画像制御部４５１とを備える。画像処理装置３は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部３１１を備える。
【００６９】
すなわち、ユーザを識別する識別情報と関連付けられて記憶されているユーザ画像を含む元画像に基づいて、画像処理部３１１が画像処理により表示画像を生成し、画像表示装置４が生成された表示画像を表示部４１に表示する。画像表示装置４は、単に、ユーザ画像を表示するだけでなく、画像処理により生成された表示画像を表示するため、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７０】
また、本実施形態において、元画像には、表示画像の背景となる背景画像、又は、表示画像に表示する対象物となる対象画像が含まれる。元画像として、背景画像又は対象画像を用いるため、表示画像を生成するための元画像は、さまざまな組み合わせが可能である。そのため、画像処理部３１１は、さまざまなシーンの疑似体験が可能な表示画像を生成することができる。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７１】
また、本実施形態において、画像処理部３１１は、画像処理として、背景画像と対象画像とを合成し、表示画像を生成する（処理３）。すなわち、画像処理部３１１は、ユーザが対象画像の対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７２】
また、本実施形態において、画像処理部３１１は、ユーザによって指示された位置及び方向に対応する背景を含む表示画像に変更する（処理４）。すなわち、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向において見ることができる表示画像に変更し、表示画像の中で、実際に移動しているように体感させる表示画像を生成する。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７３】
また、本実施形態において、画像処理部３１１は、ユーザによって指示された対象物の向き情報に応じて、表示画像における対象物の向きを変更する（処理５）。すなわち、画像処理部３１１は、ユーザによって指示された対象物の向きに変更した対象物と背景画像とを合成して、対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７４】
また、本実施形態において、表示画像はパノラマ画像であり、表示部４１はパノラマ画像を表示する。パルラマ画像が表示されるため、画像表示装置４は、臨場感のある画像を表示することができる。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７５】
また、本実施形態において、背景画像は、所定の場所において位置を移動させて、位置それぞれを中心に水平方向に３６０度の視野を撮影した全方位画像であってもよい。
この場合、ユーザの位置やユーザの見る向きに対応した背景画像が予め容易されていることになるので、画像処理部３１１における処理量を低減することができる。また、実際に撮像されていない方向や位置の画像を補完する必要がないので、画像表示装置４は、臨場感のある画像を表示することができる。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７６】
また、本実施形態によれば、画像表示装置４は、通信部４３が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１を有するサーバ装置２ａにネットワークを介して接続され、入力された識別情報を送信する。画像制御部４５１は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を表示部４１に表示させる。
これにより、本実施形態における画像表示装置４は、画像の鑑賞における娯楽性を向上させることができる。
【００７７】
なお、上記の実施形態では、説明上、１つの店舗５に画像表示装置４が設置されている例を説明したが、図１に示すように、画像表示システム１は、複数の店舗（５Ａ、５Ｂ、…５Ｘ）及び複数の画像表示装置（４Ａ、４Ｂ、…４Ｘ）に対応可能である。この場合には、画像表示装置４は、識別情報と共に、店舗情報及び画像表示装置の識別情報をサーバ装置２及び画像処理装置３に送信して対応する。これにより、サーバ装置２及び画像処理装置３は、どの店舗（５Ａ、５Ｂ、…５Ｘ）の画像表示装置（４Ａ、４Ｂ、…４Ｘ）に対して、処理を行う必要があるのか判定することができる。
【００７８】
［第２の実施形態］
次に、第２の実施形態による画像表示システム１ａについて説明する。
第２の実施形態による画像表示システム１ａは、第１の実施形態における画像表示システム１にユーザ画像の登録及び表示画像の表示に応じて課金する課金部を追加した実施形態である。
図５は、本実施形態による画像表示システム１ａの一例を示す概略ブロック図である。
この図において、画像表示システム１ａは、サーバ装置２ａと、画像処理装置３と、画像表示装置４とを備えている。この図において、図１と同一の構成については同一の符号を付し、その説明を省略する。
【００７９】
サーバ装置２ａは、制御部２１、サーバ通信部２２、記憶部２３及び登録課金部２４を備えている。また、制御部２１は、登録部２１１を備えている。なお、制御部２１は、登録部２１１を備えている点を除き、第１の実施形態における制御部２１と同様である。
【００８０】
登録部２１１は、元画像記憶部２３２に記憶されている背景画像又は対象画像のうちの、ユーザによって選択された画像をユーザ画像として、ユーザに対応する識別情報と関連付けてユーザ画像記憶部２３１に登録する。すなわち、ユーザ画像記憶部２３１には、表示画像の背景となる背景画像、及び、表示画像に表示する対象物となる対象画像のうちの、ユーザにより指定された画像が、ユーザ画像として記憶される。
【００８１】
登録課金部２４は、ユーザ画像が識別情報と関連付けてユーザ画像記憶部２３１に登録される場合に、ユーザに対して課金する。
【００８２】
また、本実施形態における画像表示装置４は、表示部４１、入力部４２、及び本体部４０ａを備えている。本体部４０ａは、通信部４３と、表示課金部４４と、制御部４５とを備えている。本体部４０ａは、表示課金部４４を備えている点を除き、第１の実施形態における本体部４０と同様である。
表示課金部４４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて、ユーザに対して課金する。
【００８３】
次に、本実施形態における画像表示システム１ａの動作について説明する。
本実施形態における画像表示システム１ａの動作は、基本的に、第１の実施形態における画像表示システム１と同様であるが、ユーザ画像の登録及び表示画像の表示に応じて課金する処理が追加されている点が異なる。
【００８４】
＜ユーザ画像の登録処理＞
図６は、本実施形態におけるユーザ画像の登録処理の一例を示す図である。
なお、この図において、図３と同一の構成については同一の符号を付し、その説明を省略する。
図６（ａ）に示すように、元画像記憶部２３２には、背景画像（Ｇ１３〜Ｇ１５）及び対象画像（Ｇ１６〜Ｇ１９）が予め記憶されている。本実施形態では、これらの画像を元画像として使用する場合に、これらの画像は、ユーザ画像記憶部２３１にユーザ画像として登録されてから使用される。
【００８５】
具体的には、図４のステップＳ１０４の処理において、次のような処理が追加される。
図４のステップＳ１０４の処理において、画像表示装置４の制御部４５は、サーバ装置２ａから送信されたユーザ画像のリスト及び元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストを表示部４１に表示する。ここで、ユーザ（例えば、Ａユーザ）が元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）を元画像として使用したい場合には、ユーザが元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のうちの元画像として使用したい画像（例えば、「アイドルＡ」（Ｇ１７））が、入力部４２から選択される。画像表示装置４は、識別情報と選択された画像情報とをサーバ装置２ａに送信する。
【００８６】
次に、サーバ装置２ａの登録部２１１は、元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）の中から、ユーザによって選択された画像（Ｇ１７）をユーザ画像として、Ａユーザに対応する識別情報と関連付けてユーザ画像記憶部２３１に登録する。これにより、図６（ｂ）に示すように、ユーザ画像記憶部２３１には、「アイドルＡ」（Ｇ１７）が、ユーザ画像（Ｇ１７Ａ）として、Ａユーザの記憶領域７１に記憶される。
そして、この登録部２１１による登録処理の際に、登録課金部２４は、ユーザ（Ａユーザ）に対して課金する。つまり、Ａユーザは、「アイドルＡ」（Ｇ１７）の画像を購入して、ユーザ画像として登録する。なお、画像をユーザ画像として登録する料金は、画像ごとに異なってもよい。また、元画像記憶部２３２に記憶されている画像には、この料金が無料の画像が含まれていてもよい。
その後に処理は、図４のステップＳ１０４の処理と同様である。
【００８７】
なお、元画像記憶部２３２に記憶されている画像には、上述の登録部２１１によって課金されないで自由にユーザ画像として使用できる画像が含まれていてもよい。
【００８８】
また、本実施形態では、画像表示装置４の表示課金部４４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて、ユーザに対して課金する。つまり、図４におけるステップＳ１１０からステップＳ１１５の処理において、表示課金部４４が課金処理を行う。
【００８９】
なお、登録課金部２４によって課金された料金、及び表示課金部４４によって課金された料金は、ユーザによって支払われることになる。この場合、画像表示装置４の本体部４０ａにユーザが料金を支払う形態でもよいし、店舗５の窓口において、ユーザが料金を支払う形態でもよい。また、店舗５又はサーバ装置２には、ユーザの識別情報とクレジットカードの情報が予め登録されていて、カード決済される形態でもよい。
【００９０】
以上のように、本実施形態において、ユーザ画像記憶部２３１には、表示画像の背景となる背景画像、及び、表示画像に表示する対象物となる対象画像のうちの、ユーザにより指定された画像が、ユーザ画像として記憶される。また、サーバ装置２ａは、元画像記憶部２３２が、背景画像又は対象画像を予め記憶されている。そして、サーバ装置２ａの登録部２１１は、元画像記憶部２３２に記憶されている背景画像又は対象画像のうちの、ユーザによって選択された画像をユーザ画像として、識別情報と関連付けてユーザ画像記憶部２３１に登録する。
これにより、ユーザ画像として使用できる元画像の選択肢が広がるので、画像表示装置４は、さまざまな組み合わせの表示画像を表示部４１に表示することができる。したがって、本実施形態における画像表示システム１ａは、画像の鑑賞における娯楽性を向上させることができる。
【００９１】
また、本実施形態において、サーバ装置２ａは、ユーザ画像が識別情報と関連付けてユーザ画像記憶部２３１に登録される場合に、ユーザに対して課金する登録課金部２１１を備える。これにより、画像表示システム１ａを利用して娯楽性を向上させた表示画像を生成するための元画像であるユーザ画像を登録することによって課金する新しいビジネスを提供することができる。
【００９２】
また、本実施形態において、画像表示装置４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて、ユーザに対して課金する表示課金部４４を備える。これにより、画像表示システム１ａを利用して娯楽性を向上させた表示画像を、表示部４１に表示することによって課金する新しいビジネスを提供することができる。
【００９３】
［第３の実施形態］
次に、第３の実施形態による画像表示システム１ｂについて説明する。
第３の実施形態による画像表示システム１ｂは、第２の実施形態における画像表示システム１ａにユーザ画像の登録を行う画像登録装置８を追加した実施形態である。
図７は、本実施形態による画像表示システム１ｂの一例を示す概略ブロック図である。
この図において、画像表示システム１ｂは、サーバ装置２ａ、画像処理装置３、画像表示装置４、及び画像登録装置８を備えている。この図において、図１及び図５と同一の構成については同一の符号を付し、その説明を省略する。
【００９４】
画像登録装置８は、ネットワーク６を介してサーバ装置２ａに接続されている。画像登録装置８は、制御部８１と登録通信部８２とを備えている。
登録通信部８２は、ネットワーク６に接続されていて、ネットワーク６を介して、サーバ装置２ａなどの他の装置と画像登録装置８と間の通信を行う。
制御部８１は、画像登録装置８の各種処理を制御し、例えば、登録通信部８２を介してユーザ画像をサーバ装置２ａのユーザ画像記憶部２３１に登録する処理を制御する。また、制御部８１は、登録処理部８１１を備えている。
【００９５】
登録処理部８１１は、ユーザ画像記憶部２３１に対して、識別情報とユーザ画像とを関連付けて登録させる。すなわち、登録処理部８１１は、識別情報とユーザ画像とを登録通信部８２を介してサーバ装置２ａに送信する。サーバ装置２ａの制御部２１（登録部２１１）は、サーバ通信部２２を介して受信した識別情報とユーザ画像とを関連付けて、ユーザ画像記憶部２３１に記憶させる。これにより、ユーザ画像記憶部２３１に、画像登録装置８から供給された画像が、ユーザ画像として登録される。
【００９６】
なお、登録課金部２４は、この制御部２１（登録部２１１）による登録処理の際に、ユーザに対して課金する。つまり、ユーザは、料金を支払って、ユーザ画像を登録する。
【００９７】
以上のように、本実施形態における画像表示システム１ｂは、ネットワーク６を介してサーバ装置２ａに接続されている画像登録装置８を備えている。画像登録装置８は、ユーザ画像記憶部２３１に対して、識別情報とユーザ画像とを関連付けて登録させる登録処理部８１１を有する。
これにより、画像表示システム１ｂを利用して娯楽性を向上させた表示画像を生成するための元画像であるユーザ画像を登録することによって課金する新しいビジネスを提供することができる。
【００９８】
［第４の実施形態］
次に、第４の実施形態による画像表示システム１ｃについて説明する。
第４の実施形態による画像表示システム１ｃは、上記各実施形態において画像処理装置３が備える画像処理部３１１に対応する画像処理部２１２を、サーバ装置２ａが備える実施形態である。
図８は、本実施形態による画像表示システム１ｃの一例を示す概略ブロック図である。
この図において、画像表示システム１ｃは、サーバ装置２ａ及び画像表示装置４を備えている。この図において、図１及び図５と同一の構成については同一の符号を付し、その説明を省略する。
【００９９】
サーバ装置２ａの制御部２１は、画像処理部２１２を備えている。この画像処理部２１２は、上述した画像処理部３１１に対応し、画像処理部３１１と同様の処理を行う。すなわち、画像処理部２１２は、画像表示装置４から送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。
また、サーバ装置２ａは、画像処理部２１２が生成した表示画像を、ネットワーク６を介して、画像表示装置４に送信する。
画像表示装置４は、サーバ装置２ａの画像処理部２１２が生成した表示画像を表示部４１に表示する。その他の処理は、第１及び第２の実施形態と同様である。
【０１００】
以上のように、本実施形態における画像表示システム１ｃは、サーバ装置２ａと、店舗５に設置されている画像表示装置４とがネットワークを介して接続されている。サーバ装置２ａは、ユーザ画像記憶部２３１が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像を記憶している。また、サーバ装置２ａの画像処理部２１２は、画像表示装置４から送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。そして、画像表示装置４は、画像を表示する表示部４１と、入力された識別情報を送信する通信部４３と、画像処理部２１２により画像処理された表示画像を表示部４１に表示させる画像制御部４５１と、を備えている。
これにより、本実施形態における画像表示システム１ｃは、上記の各実施形態と同様に、画像の鑑賞における娯楽性を向上させることができる。また、本実施形態では、上記の各実施形態における画像処理装置３が不要になるため、システム構成を簡略化することができる。
【０１０１】
［第５の実施形態］
次に、第５の実施形態による画像表示システム１ｄについて説明する。
第５の実施形態による画像表示システム１ｄは、上記第１から第３の各実施形態において画像処理装置３が備える画像処理部３１１に対応する画像処理部４５２を、画像表示装置４が備える実施形態である。
図９は、本実施形態による画像表示システム１ｄの一例を示す概略ブロック図である。
この図において、画像表示システム１ｄは、サーバ装置２ａ及び画像表示装置４を備えている。この図において、図１及び図５と同一の構成については同一の符号を付し、その説明を省略する。
【０１０２】
画像表示装置４の制御部４５は、画像処理部４５２を備えている。この画像処理部４５２は、上述した画像処理部３１１に対応し、画像処理部３１１と同様の処理を行う。すなわち、画像処理部４５２は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。
【０１０３】
つまり、サーバ装置２ａは、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を、ネットワーク６を介して、画像表示装置４に送信する。
画像表示装置４の画像処理部４５２は、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。そして、画像表示装置４の画像制御部４５１は、画像処理部４５２が生成した表示画像を表示部４１に表示する。その他の処理は、第１及び第２の実施形態と同様である。
【０１０４】
以上のように、本実施形態における画像表示システム１ｄは、サーバ装置２ａと、店舗５に設置されている画像表示装置４とがネットワークを介して接続されている。サーバ装置２ａは、ユーザ画像記憶部２３１が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像を記憶している。画像表示装置４は、通信部４３が、入力された識別情報を送信し、画像処理部４５２が、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。そして、画像制御部４５１は、画像処理部４５２により画像処理された表示画像を表示部４１に表示させる。
これにより、本実施形態における画像表示システム１ｄは、上記の各実施形態と同様に、画像の鑑賞における娯楽性を向上させることができる。また、本実施形態では、上記第１から第３の各実施形態における画像処理装置３が不要になるため、システム構成を簡略化することができる。
【０１０５】
なお、本実施形態によれば、画像表示装置４は、通信部４３が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１を有するサーバ装置２ａにネットワークを介して接続され、入力された識別情報を送信する。画像処理部４５２は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。画像制御部４５１は、画像処理部４５２により画像処理された表示画像を表示部４１に表示させる。
これにより、本実施形態における画像表示装置４は、上記の各実施形態と同様に、画像の鑑賞における娯楽性を向上させることができる。
【０１０６】
［第６の実施形態］
次に、第６の実施形態による画像表示システム１ｅについて説明する。
第６の実施形態による画像表示システム１ｅは、ネットワーク６に接続可能な形態端末８から供給される場所情報、時刻情報、及び天候情報に基づいて、背景画像又は対象画像を加工して合成した画像を表示する実施形態である。
【０１０７】
図１０は、本実施形態による画像表示システム１ｅの一例を示す概略ブロック図である。
この図において、画像表示システム１ｅは、サーバ装置２と、画像処理装置３と、画像表示装置４と、携帯端末８とを備えている。また、サーバ装置２と、画像処理装置３と、画像表示装置４と、携帯端末８とは、ネットワーク６を介して接続されている。画像表示装置４は、店舗５に設置されている。この図において、図１と同一の構成については同一の符号を付し、その説明を省略する。なお、本実施形態における画像表示装置４の構成は図２と同様であり、本実施形態におけるサーバ装置２の記憶部２３の構成は図３と同様である。
【０１０８】
携帯端末８は、例えば、携帯電話などのネットワーク６に接続可能な携帯端末である。携帯端末８は、ユーザＵ１（第１使用者）の友人、知人、家族などのユーザＵ２（第２使用者）に携帯され、位置情報を検出する。なお、位置情報には、緯度、経度などのユーザＵ２の地図座標に、ユーザＵ２が向いている方向情報を含めてもよい。また、携帯端末８は、ユーザＵ２の声や周辺の音を収音する。携帯端末８は、ネットワーク６を介して、ユーザＵ２によって予め入力されている天候情報（例えば、晴れ、曇りなど）、時刻情報、検出した位置情報、及び収音した音情報を画像処理装置３に送信する。また、携帯端末８は、位置検出部８１と、収音部８２とを備えている。
【０１０９】
位置検出部８１は、例えば、ＧＰＳ（Global Positioning System）であり、携帯端末のユーザの位置情報を検出する。また、位置検出部８１は、角速度検出部を備えて、ユーザＵ２の向いている方向を検出する。
収音部８２は、例えば、マイクなどにより構成され、携帯端末８の周辺の音を収音する。
ここで、ユーザＵ１は、上記の各実施形態と同様に、店舗５の画像表示装置４を使用するユーザである。また、ユーザＵ２は、店舗５とは異なる場所（例えば、旅行先の観光地など）にいる（存在している）ユーザであり、観光などの目的により位置が変更される。
【０１１０】
本実施形態における画像処理装置３は、携帯端末８から供給された位置情報、天候情報、時刻情報に基づいて元画像を画像処理して、表示画像を生成する。例えば、ユーザＵ２
が観光地Ａにいる場合、画像処理装置３の画像処理部３１１は、予めユーザ画像としてサーバ装置２に登録されている観光地Ａの画像データの中から、位置情報に対応する背景画像である元画像を選択する。なお、画像処理部３１１は、元画像を位置情報に基づいて、画像処理により加工してもよい。ここで、表示画像を生成する元画像には、ユーザＵ１によって、例えば、「観光地Ａ」（Ｇ１３）の画像が背景画像として選択され、予めユーザ画像としてサーバ装置２に登録されているユーザＵ２自身の画像（「家族の画像Ａ」（Ｇ４））が対象画像として選択される。
【０１１１】
また、画像処理部３１１は、選択された元画像を天候情報及び時刻情報に応じて加工する。例えば、時刻情報が夕方である場合には、画像処理部３１１は、選択した元画像を夕日の当たった色合いに加工する。また、例えば、天候情報が曇りの場合には、画像処理部３１１は、選択した元画像を曇り空に加工する。画像処理部３１１は、対象画像についても同様に、時刻情報及び天候情報に応じて、明るさや色を変更する加工を行う。
そして、画像処理部３１１は、上述のように位置情報、天候情報及び時刻情報に応じて加工した背景画像と対象画像とを合成して、表示画像を生成する。なお、画像処理部３１１は、表示画像を生成する場合に、携帯端末８から供給された音情報を表示画像に付加する。
【０１１２】
次に、本実施形態による画像表示システム１ｅの動作について説明する。
図１１は、本実施形態における画像表示システム１ｅの処理シーケンスの一例を示す図である。
まず、画像表示装置４は、ユーザから識別情報を取得する（ステップＳ２０１）。具体的には、例えば、図２に示すように、ＡユーザであるユーザＵ１によって、入力部４２からＡユーザＵ１に対応する識別情報Ａが入力される。これにより、制御部４５は、識別情報Ａを取得する。この識別情報Ａは、例えば、画像表示システム１によるサービスを受けるための会員番号である。
【０１１３】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から取得した識別情報Ａをサーバ装置２に送信する（ステップＳ２０２）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａを送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａをサーバ装置２に送信する。
【０１１４】
次に、サーバ装置２は、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する（ステップＳ２０３）。サーバ装置２の制御部２１は、記憶部２３のユーザ画像記憶部２３１を参照して、画像表示装置４から送信された識別情報Ａに関連付けられているユーザ画像のリスト（例えば、記憶領域７１のユーザ画像（Ｇ１〜Ｇ４）のリスト）を作成する。そして、制御部２１は、サーバ通信部２２に作成したユーザ画像のリストを送信させる。サーバ通信部２２は、ネットワーク６を介して、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する。なお、サーバ装置２は、元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストをユーザ画像のリストと共に画像表示装置４に送信してもよい。
【０１１５】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から元画像情報、及びＡユーザの家族であるユーザＵ２が携帯している携帯端末８の端末情報を取得する（ステップＳ２０４）。すなわち、画像表示装置４の制御部４５は、サーバ装置２から送信されたユーザ画像のリスト及び元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストを表示部４１に表示する。そして、この表示部４１に表示されたリストを見て、ＡユーザＵ１が、表示画像に用いる元画像を入力部４２によってリストの中からいずれかの画像を選択する。これにより、制御部４５は、ＡユーザＵ１によって選択された元画像を示す情報である元画像情報を取得する。ここでは、元画像として、例えば、ユーザ画像における、背景画像である画像Ｇ１３（「観光地Ａ」）と、対象画像である画像Ｇ４（「家族の画像Ａ」）との２つの画像がＡユーザＵ１に選択された場合について説明する。
【０１１６】
また、ＡユーザＵ１は、ユーザＵ２が携帯している携帯端末８の端末情報を入力部４２から入力する。なお、携帯端末８の端末情報は、予めサーバ装置２に登録されていて、元画像とともに、端末情報を選択してもよい。
【０１１７】
次に、画像表示装置４は、識別情報Ａ、端末情報、及び元画像情報を画像処理装置３に送信する（ステップＳ２０５）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａ、端末情報、及び元画像情報を送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａ、端末情報、及び元画像情報を画像処理装置３に送信する。
【０１１８】
次に、画像処理装置３は、識別情報Ａと元画像情報とをサーバ装置２に送信する（ステップＳ２０６）。すなわち、画像処理装置３の制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、画像表示装置４から送信された識別情報Ａと元画像情報とをサーバ装置２に送信させる。これにより、画像処理通信部３２は、識別情報Ａと元画像情報とをサーバ装置２に、ネットワーク６を介して送信する。
【０１１９】
次に、サーバ装置２は、ユーザ（ＡユーザＵ１）によって選択された元画像を画像処理装置３に送信する（ステップＳ２０７）。すなわち、制御部２１は、記憶部２３のユーザ画像記憶部２２１に、サーバ装置２に記憶されている画像のうち、ＡユーザＵ１によって選択された画像（Ｇ４及びＧ１３）を読み出す。制御部２１は、サーバ通信部２２に対して、読み出したユーザ画像（Ｇ４、Ｇ１３）を画像処理装置４に送信させる。
【０１２０】
次に、画像処理装置３は、携帯端末８に対して、ユーザＵ２の位置情報、時刻情報、天候情報、及び音情報を要求する（ステップＳ２０８）。これにより、携帯端末８は、位置情報及び音情報の取得を開始する。
次に、携帯端末８は、リアルタイムに、ユーザＵ２の位置情報、時刻情報、天候情報、及び音情報を画像処理装置３に送信する（ステップＳ２０９）。すなわち、ユーザＵ２は、実際に「観光地Ａ」にいて観光を行っており、携帯端末８は、その際に移動する位置情報と周囲の音情報を一検出部８１及び収音部８２によって取得する。そして、携帯端末８は、ネットワーク６を介して取得したユーザＵ２の位置情報、時刻情報、及び音情報と予め登録しておいた天候情報とを画像処理装置３に送信する。
【０１２１】
次に、画像処理装置３は、画像処理により表示画像を生成する（ステップＳ２１０）。すなわち、制御部３１（画像処理部３１１）は、上述したように、携帯端末８から供給されたユーザＵ２の位置情報、時刻情報、及び天候情報に応じて、サーバ装置２の記憶部２３から読み出された元画像（Ｇ４、Ｇ１３）を加工し、加工した元画像（Ｇ４、Ｇ１３）を合成して、表示画像を生成する。また、この際に、画像処理部３１１は、表示画像に、携帯端末８から供給された音情報を付加する処理を行う。
【０１２２】
次に、画像処理装置３は、生成した表示画像を画像表示装置４に送信（配信）する（ステップＳ２１１）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成した表示画像を画像表示装置４に送信させる。
【０１２３】
次に、画像表示装置４は、表示画像を表示部４１に表示する（ステップＳ２１２）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成された表示画像を、通信部４３を介して受信し、表示部４１に表示させる。この場合、図２に示すような表示画像が、表示部４１に表示される。また、画像表示装置４は、表示画像とともに表示画像に付加されている音情報を、例えば、スピーカから出力する。
これにより、ＡユーザＵ１は、現在「観光地Ａ」で旅行をしているユーザＵ２一緒に、「観光地Ａ」にいるような体感を味わうことができる。なお、表示される表示画像は、携帯端末８から供給されたユーザＵ２の位置情報、時刻情報、及び天候情報に応じて加工（画像処理）されているため、現在のユーザＵ２がいる位置、時刻、天候に対応した画像である。
【０１２４】
次に、携帯端末８は、リアルタイムに、ユーザＵ２の位置情報、時刻情報、天候情報、及び音情報を画像処理装置３に順次送信する（ステップＳ２１３）。そして、画像処理装置３は、ステップＳ２１０と同様に、画像処理により表示画像を生成する（ステップＳ２１４）。なお、ここでは、制御部３１（画像処理部３１１）は、携帯端末８から供給されたユーザＵ２の位置情報に応じて位置及び方向に対応する背景を含む表示画像に変更したり、時刻情報及び天候情報に応じて表示画面の明るさなどを変更したりする画像処理を行い、表示画面を生成する。
【０１２５】
次に、画像処理装置３は、生成（変更）した表示画像を画像表示装置４に送信する（ステップＳ２１５）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成（変更）した表示画像を画像表示装置４に送信させる。
【０１２６】
次に、画像表示装置４は、変更された表示画像を表示部４１に表示する（ステップＳ２１６）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成（変更）された表示画像を、通信部４３を介して受信し、表示部４１に表示させる。例えば、画像表示装置４は、ユーザ（ＡユーザＵ１）が指示した位置や方向に、表示されている「観光地Ａ」（Ｇ１３）のなかで、「家族の画像Ａ」（Ｇ４）とともに移動した表示画像を表示部４１に表示する。これによりユーザ（ＡユーザＵ１）は、現在「観光地Ａ」を旅行しているユーザＵ２（家族）と一緒に、「観光地Ａ」を旅行しているような体感を味わうことができる。
【０１２７】
なお、ステップＳ２１３からステップＳ２１６の処理は、ユーザが画像表示の処理を終了するまで、繰り返される。
【０１２８】
以上のように、本実施形態による画像表示システム１ｅは、携帯端末８が位置情報、時刻情報、又は天候情報を取得し、取得した位置情報、時刻情報、又は天候情報を画像表示装置４（画像処理部３１１）に供給する。そして、画像処理部３１１は、供給された位置情報、時刻情報、又は天候情報に応じて、表示画像を変更する。
これにより、本実施形態による画像表示システム１ｅは、携帯端末８を持つユーザＵ２が現在いる場所の位置情報、時刻情報、又は天候情報に応じて、リアルタイムに表示画像を変更することができる。そのため、例えば、ユーザ（ＡユーザＵ１）は、現在「観光地Ａ」を旅行しているユーザＵ２（家族）と一緒に、「観光地Ａ」を旅行しているような体感をリアルタイムに味わうことができる。よって、本実施形態における画像表示システム１ｅは、画像の鑑賞における娯楽性を向上させることができる。
【０１２９】
また、本実施形態では、携帯端末８がリアルタイムに取得した音情報を、画像表示装置４が、表示画像とともに出力する。これにより、例えば、ユーザＵ２の声や、「観光地Ａ」の周辺の音が出力されるため、ユーザＵ１は、実際に「観光地Ａ」にユーザＵ２と一緒にいるような臨場感を味わうことができる。
【０１３０】
なお、本発明は、上記の各実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で変更可能である。
上記の各実施形態において、表示部４１には、パノラマ画像を表示するする広角のディスプレイを用いる形態を説明したが、これに限定されず、広角でないディスプレイを用いる形態でもよい。また、表示部４１は、図１２に示すようなユーザの頭部に装着して、ユーザの視界を覆うようなヘッドマウントディスプレイ４１ａを用いる形態でもよいし、他のディスプレイを用いる形態でもよい。なお、ヘッドマウントディスプレイ４１ａは、例えば、角速度検出部と、加速度検出部とを備える形態でもよい。この場合、ヘッドマウントディスプレイ４１ａによって、ユーザＵ１の向いている方向情報、及び移動位置情報が取得することができる。そのため、入力部４２を用いずに、ユーザＵ１の変更したい位置及び方向などの情報を取得し、取得した位置及び方向に応じて表示画像に変更することができる。また、表示部４１には、立体視画像を表示可能なディスプレイを用いる形態でもよい。
また、上記の各実施形態において、画像表示装置４が表示部４１に表示する表示画像は、２次元の画像でもよいし、３次元処理された画像でもよいし、立体視用に処理された画像でもよい。
【０１３１】
また、上記の各実施形態において、画像処理部３１１（２１２、４５２）は、音信号の合成をする音信号処理部を含む形態でもよい。例えば、画像処理部３２１は、対象物である人物又はペットの声を合成して、表示画像に付加し、画像制御部４５１が、表示画像の表示と共に、音信号を出力させる形態でもよい。この場合、画像表示装置４がマイクを備え、ユーザの声に応じて、表示画像における対象物が音を出力したり、対象物の向きが変更させたりする形態でもよい。これにより、画像の鑑賞における臨場感を増すことができる。
【０１３２】
また、上記の各実施形態において、店舗５は、ユーザが旅行に行く際などに、撮影位置において水平方向に３６０度の視野を撮影する全方位画像を撮影可能な撮影装置を貸し出して課金するサービスを提供してもよい。これにより、ユーザは、表示画像を生成するのに適したユーザ画像を、簡単に取得することができる。また、店舗５は、ユーザによって指定された画像を有料で撮影してユーザ画像を作成するサービスを提供してもよい。このユーザによって指定された画像とは、例えば、観光地、海外の街並み、ユーザが住んでいる街並み、ユーザの住んでいる家、家族、ペットなどの画像である。これにより、ユーザは、実際に撮影場所に行かなくても、疑似体験したい背景画像を取得することができる。
【０１３３】
また、上記の各実施形態において、画像処理部３１１が表示画像を毎回生成する形態を説明したが、表示画像や元画像の一部を予め画像処理して生成して課金するサービスを提供してもよい。この場合、ネットワーク６を介して、サードパーティの会社に、画像処理を委託する形態でもよい。例えば、新婚旅行に行った外国Ａの観光地の画像を、外国Ａの観光地に近い委託業者に新婚旅行を再現する表示画像の生成を委託してもよい。これにより、現地に行かなくても、質の高い臨場感のある表示画像を取得することが可能になる。
【０１３４】
また、上記の各実施形態において、元画像記憶部２３２が、サーバ装置２（２ａ）に備えられている形態を説明したが、他の装置（画像処理装置３、画像表示装置４、又は画像登録装置８など）に元画像記憶部２３２が備えられている形態でもよい。
【０１３５】
また、上記の各実施形態において、登録部２１１は、元画像記憶部２３２に記憶されている画像を識別情報と関連付けてユーザ画像記憶部２３１に記憶する形態を説明したが、元画像記憶部２３２に記憶されている画像を、識別情報と関連付けたリンクファイルとして、登録する形態でもよい。
【０１３６】
また、上記の各実施形態において、表示課金部４４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて課金する形態を説明したが、これに限定されるものではない。例えば、月極め会員や年間会員などの契約期間に応じた定額制に対応する形態でもよい。
【０１３７】
また、上記第３の実施形態における画像登録装置８は、店舗５内にあってもよいし、ユーザの自宅に設置されている形態でもよい。また、上記第４及び第５の実施形態に、画像登録装置８を適用する形態でもよい。
【０１３８】
また、上記の各実施形態において、画像表示装置４は、店舗５に設置されている形態を説明したが、ホームシアターなどとしてユーザの自宅に設置されている形態でもよいし、店舗５及び自宅以外の他の場所に設置されている形態でもよい。
また、上記の各実施形態において、例えば（処理２）のような複数の元画像に基づいて画像処理を行う場合、記憶部２３に記憶されている元画像を使用する形態を説明したが、これに限定されるものではない。例えば、サーバ装置２が、ユーザから指定された位置情報や地名などのキーワードからネットワーク６上に存在する任意のユーザが所持する元画像を検索し、この検索によって得られた画像を元画像として利用する形態でもよい。また、サーバ装置２が、例えば、ユーザ画像記憶部２３１に記憶されている異なるユーザのユーザ画像を、位置情報や地名などのキーワードから検索し、他のユーザの識別情報に関連付けられて記憶されているユーザ画像を元画像として利用できる形態でもよい。この場合、サーバ装置２の制御部２１は、例えば、ユーザ画像に含まれる個人を特定するような画像部分を削除する加工をした上で、元画像記憶部２３２に記憶させる形態でもよい。
【０１３９】
また、上記第６の実施形態において、場所ごとの元画像に対して、第２のユーザ（ユーザＵ２）が存在する位置、時刻、天候状態にあわせて、第２のユーザ（ユーザＵ２）が存在する位置、時刻、天候状態にあわせた元画像を画像処理により生成する形態を説明したが、これに限定されるものではない。例えば、場所ごとに、時刻、天候状態が異なる複数の元画像が予め撮像されており、複数の元画像の中から、第２のユーザ（ユーザＵ２）が存在する位置、時刻、天候状態にあわせて元画像を選択する形態でもよい。
【０１４０】
また、上記第６の実施形態では、上記第１の実施形態に組み合わせて適用する形態を説明したが、上記第２〜第５の実施形態と組み合わせて適用する形態でもよい。
また、上記第６の実施形態において、携帯端末８は、位置情報、時刻情報、天候情報、及び音情報を画像処理部３１１に供給する形態を説明したが、撮像部を備えて、リアルタイムに撮像した背景画像を画像処理部３１１に供給する形態でもよい。この場合、画像処理部３１１は、位置情報、時刻情報、及び天候情報に応じた元画像の加工を行う必要がなくなるため、処理を簡略化することができる。
【０１４１】
また、上記第６の実施形態では、ユーザＵ２が所持している携帯端末８から供給される位置情報に応じて背景画像を表示する方向を変更する形態を説明したが、上記第１の実施形態と同様に、入力部４２によってユーザＵ１が指示する指示情報に応じて、指示された位置及び方向に対応する背景を含む表示画像に変更する形態でもよい。この場合、表示画像における対象画像であるユーザＵ２の表示位置は、携帯端末８から供給される位置情報に応じて変更してもよい。すなわち、この場合、画像表示装置４の表示を鑑賞しているユーザＵ１は、自由に「観光地Ａ」を動き回り、その中で、実際に「観光地Ａ」に存在しているユーザＵ２の位置情報に対応する位置に、ユーザＵ２の画像を表示する。これにより、ユーザＵ１は、さらに臨場感のある表示画像を味わうことができる。
【０１４２】
また、上記第６の実施形態において、ユーザＵ２が１人の場合の形態を説明したが、複数の携帯端末８を用いて、複数のユーザＵ２に対応させる形態でもよい。この場合、多人数で旅行しているような体験を楽しむことができる。
また、上記の各実施形態において、画像表示装置４が表示画像とともに音情報を出力する形態を説明したが、表示画像に応じて、風などを出力する形態でもよい。
【０１４３】
上述の画像表示システム１（１ａ〜１ｅ）における各装置は、内部に、コンピュータシステムを有している。そして、上述した画像表示システム１（１ａ〜１ｅ）の処理過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。
【符号の説明】
【０１４４】
１，１ａ，１ｂ，１ｃ，１ｄ…画像表示システム、２，２ａ…サーバ装置、３…画像処理装置、４…画像表示装置、５…店舗、６…ネットワーク、２４…登録課金部、４１…表示部、４３…通信部、４４…表示課金部、２３１…ユーザ画像記憶部、２３２…元画像記憶部、２１１，３１１，４５１…画像制御部、４５２…画像処理部
【技術分野】
【０００１】
本発明は、画像表示システム、画像表示装置、及びプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラや家庭用ビデオカメラの普及により、静止画像や動画などの画像が個人によって手軽に撮影されている。そして、個人によって撮像されたこれらの画像を、自宅において手軽に鑑賞することが行われている（例えば、特許文献１を参照）。
特許文献１には、デジタルカメラで撮影した画像をテレビに表示することで、自宅において手軽に画像を鑑賞する技術が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００３−１３４４５１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述したような技術では、単に、個人が撮影したままの画像を表示するだけであるため、画像の鑑賞における娯楽性が乏しいという問題がある。
【０００５】
本発明は、上記問題を解決すべくなされたもので、その目的は、画像の鑑賞における娯楽性を向上させることができる画像表示システム、画像表示装置、及びプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記問題を解決するために、本発明の一態様は、サーバ装置と、画像処理装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、前記サーバ装置は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を備え、前記画像表示装置は、画像を表示する表示部と、入力された前記識別情報を送信する通信部と、を備え、前記画像処理装置は、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部を備え、前記画像表示装置は、前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部、を備えることを特徴とする画像表示システムである。
【０００７】
また、本発明の一態様は、サーバ装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、前記サーバ装置は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部と、前記画像表示装置から送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、を備え、前記画像表示装置は、画像を表示する表示部と、入力された識別情報を送信する通信部と、前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、を備えることを特徴とする画像表示システムである。
【０００８】
また、本発明の一態様は、サーバ装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、前記サーバ装置は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を備え、前記画像表示装置は、画像を表示する表示部と、入力された前記識別情報を送信する通信部と、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、を備えることを特徴とする画像表示システムである。
【０００９】
また、本発明の一態様は、画像を表示する表示部と、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して接続され、入力された前記識別情報を送信する通信部と、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を前記表示部に表示させる画像制御部と、を備えることを特徴とする画像表示装置である。
【００１０】
また、本発明の一態様は、画像表示装置としてのコンピュータに、通信部が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して、入力された前記識別情報を送信する通信手順と、画像制御部が、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を表示部に表示させる画像制御手順と、を実行させるためのプログラムである。
【発明の効果】
【００１１】
本発明によれば、画像の鑑賞における娯楽性を向上させることができる。
【図面の簡単な説明】
【００１２】
【図１】第１の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図２】同実施形態における画像表示装置を示す図である。
【図３】同実施形態におけるサーバ装置の記憶部の一例を示す図である。
【図４】同実施形態における画像表示システムの処理シーケンスの一例を示す図である。
【図５】第２の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図６】同実施形態におけるユーザ画像の登録処理の一例を示す図である。
【図７】第３の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図８】第４の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図９】第５の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図１０】第６の実施形態による画像表示システムの一例を示す概略ブロック図である。
【図１１】第６の実施形態における画像表示システムの処理シーケンスの一例を示す図である。
【図１２】本実施形態における画像表示装置の別の一例を示す図である。
【発明を実施するための形態】
【００１３】
以下、本発明の一実施形態による画像表示システムについて図面を参照して説明する。
［第１の実施形態］
図１は、本実施形態による画像表示システム１の一例を示す概略ブロック図である。
この図において、画像表示システム１は、サーバ装置２と、画像処理装置３と、画像表示装置４とを備えている。また、サーバ装置２と、画像処理装置３と、画像表示装置４とは、ネットワーク６を介して接続されている。画像表示装置４は、店舗５に設置されている。なお、本実施形態では、複数の画像表示装置４が、ネットワークを介して、サーバ装置２と画像処理装置３とに接続される例について説明する。
【００１４】
なお、複数の店舗５の各店舗を示す場合には、Ａ店舗５Ａ、Ｂ店舗５Ｂ、…、Ｘ店舗５Ｘと表記する。また、各店舗（５Ａ、５Ｂ、…５Ｘ）に設置されている画像表示装置４を示す場合には、画像表示装置４Ａ、画像表示装置４Ｂ、…、画像表示装置４Ｘと表記する。
【００１５】
また、店舗５は、例えば、カラオケ店（カラオケボックス）やゲームセンタなどの娯楽施設である。店舗５は、遊園地やテーマパークのようなアミューズメント施設やレジャー施設、または、老人ホームや福祉会館等の施設であってもよい。
【００１６】
サーバ装置２は、制御部２１、サーバ通信部２２、及び記憶部２３を備えている。
サーバ通信部２２は、ネットワーク６に接続されていて、ネットワーク６を介して、画像処理装置３や画像表示装置４などの他の装置とサーバ装置２と間の通信を行う。
【００１７】
制御部２１は、サーバ装置２の各種処理を制御し、例えば、記憶サーバ通信部２２を介してユーザを識別する識別情報を受信し、識別情報に関連付けられて記憶部２３に記憶されている画像を読み出す。また、制御部２１は、例えば、記憶部２３から読み出した画像を、サーバ通信部２２を介して画像処理装置３に送信する。
なお、本実施形態における画像とは、静止画像と動画像との両方を含むものとする。また、画像には、さらに、音情報が含まれていてもよい。
また、ここで、識別情報とは、例えば、この画像表示システム１によって画像を鑑賞するサービスを受けるための会員番号である。
【００１８】
記憶部２３は、画像処理装置３において画像処理される画像である元画像などを記憶する。ここで、元画像には、画像処理装置３が画像処理により生成する表示画像の背景となる背景画像、又は、この表示画像に表示する対象物となる対象画像が含まれる。ここで、背景画像とは、例えば、風景や街並みの画像などである。また、対象画像とは、例えば、特定の人物、ペット、車などのものなどの画像である。
記憶部２３は、ユーザ画像記憶部２３１と、元画像記憶部２３２とを備えている。
【００１９】
ユーザ画像記憶部２３１には、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている。ユーザ画像は、ユーザが画像処理に用いる元画像として選択可能な画像であり、ユーザによって予め登録されている。ユーザ画像は、例えば、ユーザ自身が撮影した静止画や動画であってもよいし、購入などによりユーザが入手した静止画や動画であってもよい。ユーザ画像は、例えば、家族の画像、ペットの画像、亡くなった故人の画像、思い出の場所の画像、結婚式や家族旅行などのイベントにおける画像、ユーザにとって思い入れのあるアイドルの画像などである。
【００２０】
元画像記憶部２３２には、元画像として選択可能なさまざまな画像が記憶されている。元画像記憶部２３２に記憶される画像は、上述のユーザ画像のようにユーザの識別情報とは関連付けられていないが、自由に元画像として使用できる画像や、購入によりユーザ画像として登録可能な画像などである。ここで、登録とは、識別情報と関連付けて画像をユーザ画像記憶部２３１に記憶させることである。この登録を行う登録処理の詳細については、後述する。
ユーザ画像記憶部２３１及び元画像記憶部２３２に記憶されている画像の詳細については、後述する。
【００２１】
画像表示装置４は、画像処理装置３が生成した表示画像を表示する。また、画像表示装置４は、表示部４１、入力部４２、及び本体部４０を備えている。本体部４０は、通信部４３と、制御部４５とを備えている。
【００２２】
通信部４３は、ネットワーク６に接続されていて、ネットワーク６を介して、サーバ装置２や画像処理装置３などの他の装置と画像表示装置４と間の通信を行う。通信部４３は、ユーザによって入力部４２から入力された識別情報を、サーバ装置２又は画像処理装置３に送信する。
【００２３】
入力部４２は、ユーザの識別情報、元画像の選択、表示方向や移動位置の指定などの情報がユーザによって入力される。ユーザによって入力部４２を介して入力された情報は、制御部４５に供給される。
【００２４】
制御部４５は、画像表示装置４の各種処理を制御し、例えば、通信部３２を介して表示画像を受信したり、上述したユーザによって入力部４２から入力された情報を、通信部３２を介してサーバ装置２又は画像処理装置３に送信したりといった処理を制御する。また、制御部３１は、画像制御部４５１を備えている。
【００２５】
画像制御部４５１は、画像処理装置３の後述する画像処理部３１１により画像処理された表示画像を表示部４１に表示させる。この表示画像は、ネットワーク６を介して、通信部４３を経由して配信される。
【００２６】
表示部４１は、例えば、広角（人間の視界範囲をカバーできる角度、例えば１８０度、３６０度など）のディスプレイであり、画像処理装置３の後述する画像処理部３１１によって生成された表示画像をパノラマ画像として表示する。
【００２７】
画像処理装置３は、ユーザによって選択された元画像に基づいて、画像処理により表示画像を生成し、画像表示装置４に送信（配信）する。画像処理装置３は、制御部３１と画像処理通信部３２とを備えている。
【００２８】
画像処理通信部３２は、ネットワーク６に接続されていて、ネットワーク６を介して、サーバ装置２や画像表示装置４などの他の装置と画像処理装置３と間の通信を行う。
【００２９】
制御部３１は、画像処理装置３の各種処理を制御し、例えば、画像処理通信部３２を介して画像を受信したり、画像処理により生成された表示画像を、画像処理通信部３２を介して画像表示装置４に送信したりといった処理を制御する。また、制御部３１は、画像処理部３１１を備えている。
【００３０】
画像処理部３１１は、サーバ装置２などから読み出された元画像に基づいて、表示画像を画像処理により生成する。この元画像には、画像表示装置４から送信された識別情報と関連付けられているユーザ画像であって、サーバ装置２のユーザ画像記憶部２３１から読み出されたユーザ画像が少なくとも含まれている。
【００３１】
ここで、画像処理部３１１によって行われる画像処理には、以下の処理が含まれる。
（処理１）元画像が複数の背景画像又は複数のフレーム画像を含んだ動画像である背景画像であり、画像処理部３１１は、複数の背景画像又は複数のフレーム画像をつなぎ合わせて、ユーザの位置や背景を見る向きに応じて補完する画像処理を行い、表示画像を生成する。すなわち、画像処理部３１１は、実際に映像における場所・時間にユーザが存在しているように体感させる表示画像を生成する。
なお、背景画像は、所定の場所（例えば、外国の街並みなど）において位置を移動させて、位置それぞれを中心に水平方向に３６０度の視野を撮影した全方位画像であってもよい。
【００３２】
（処理２）元画像が複数の対象画像又は複数のフレーム画像を含んだ動画像である対象画像であり、画像処理部３１１は、複数の対象画像又は複数のフレーム画像に基づいて、対象物を見る向きに応じて対象物の画像を補完する画像処理を行い、表示画像を生成する。すなわち、画像処理部３１１は、ユーザが実際に対象物と一緒に存在しているように体感させる表示画像を生成する。
この場合、画像処理部３１１は、複数の対象画像から立体形状のモデルを生成し、生成した立体形状のモデルの向きを変更する画像処理を行う。このような複数の元画像から立体形状のモデルを復元する手法は、例えば、「Yasutaka Furukawa and Jean Ponce, Accurate, Dense, and Robust Multiview Stereopsis IEEE TRANSACTIONS ON PATTERN ANALYSIS AND MACHINE INTELLIGENCE, VOL.32, NO.8, AUGUST 2010」に記載されている。
【００３３】
画像処理部３１１は、例えば、上述の文献に記載された技術を用いて以下のステップにより、対象物を見る向きに応じて対象物の画像を補完する画像処理を行う。
（ステップ１）まず、画像処理部３１１は、複数の視点が異なる元画像の各々から特徴点を抽出する。
（ステップ２）次に、画像処理部３１１は、１つの元画像における特徴点と他の元画像における特徴点を対応付ける。
（ステップ３）次に、画像処理部３１１は、元画像を撮影した位置情報と光学系パラメータ（視点方向等）とに基づき、対応付けられた特徴点を含む被写体表面を構成する部分領域を定める。ここで、位置情報と光学系パラメータ（視点方向等）とは、例えば、元画像と関連付けられて、記憶部２３に記憶されている。
（ステップ４）次に、画像処理部３１１は、各部分領域を表す１つの元画像の部分領域と、対応する他の元画像の部分領域との間で、互いに欠落している部分の信号を補完する。
（ステップ５）次に、画像処理部３１１は、全ての部分領域について補完して構成した画像（立体形状のモデル）を生成し、生成した画像に基づいて画像表示画像とする。
【００３４】
（処理３）元画像が背景画像と対象画像とであり、画像処理部３１１は、背景画像と対象画像とを合成して、背景画像の中に対象画像を表示させる（背景画像の中に対象画像を貼り込こんだ）表示画像を生成する。すなわち、画像処理部３１１は、ユーザが対象画像の対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。
この場合、画像処理部３１１は、背景の明るさや対象画像を合成する位置に応じて、対象画像の明るさ、サイズ、影の位置などを変更する加工を行う。また、画像処理部３１１は、ユーザによって指定された天候、季節、時刻などに応じて、背景画像を変更する加工を行ってもよい。画像処理部３１１は、このような背景画像と対象画像との加工を行った上で、背景画像と対象画像とを違和感のないように合成して表示画像を生成する。
【００３５】
このような背景画像と対象画像とを違和感のないように合成する手法は、例えば、「Tao Chen, Ming-Ming Cheng, Ping Tan, Ariel Shamir, and Shi-Min Hu, Sketch2Photo: Internet Image Montage, ACM Transactions on Graphics, Vol. 28, No. 5, Article 124, December 2009」におけるpp5-7（５ページから７ページ）の“5 Hybrid Image Blending”及び“6 Image Combination Optimization”に記載されている。
この合成手法では、以下の２つのステップにより、違和感のない画像の合成を行う。
（ステップ１）まず、画像処理部３１１は、合成境界を最適化して、その画素のテクスチャー（質感）と色とが一貫しているかどうかを示して、境界の中で各画素を割り当てる。
（ステップ２）次に、画像処理部３１１は、改良されたポアソン画像合成とアルファ・ブレンディングとの組み合わせによって、合成画像を生成する。
【００３６】
なお、（処理３）の簡易な例として、画像処理部３１１は、例えば、背景画像内に予め用意された人物像の顔部分に、対象画像の顔を合成するような画像処理でもよい。この場合、画像処理部３１１は、対象画像の顔部分を切り出して、サイズや明るさなどを加工して、背景画像内に予め用意された人物像の顔部分に合成する画像処理を行う。
【００３７】
（処理４）画像処理部３１１は、生成した表示画像に対して、ユーザによって入力部４２から指示された位置及び方向に対応する背景を含む表示画像に変更する画像処理を行う。すなわち、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向において見ることができる表示画像に変更し、表示画像の中で、実際に移動しているように体感させる表示画像を生成する。
【００３８】
（処理５）画像処理部３１１は、生成した表示画像に対して、ユーザによって入力部４２から指示された対象物の向き情報に応じて、表示画像における対象物の向きを変更する画像処理を行う。すなわち、画像処理部３１１は、ユーザによって指示された対象物の向きに変更した対象物と背景画像とを合成して、対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。
【００３９】
なお、上述の（処理１）から（処理５）の画像処理は、画像処理部３１１によって、（処理１）から（処理５）のうちの１つが単独で実行されてもよいし、（処理１）から（処理５）のうちの複数が組み合わされて実行されてもよい。
画像処理部３１１は、生成した表示画像を、ネットワーク６を介して画像処理通信部３２から画像表示装置４に送信（配信）させる。
【００４０】
図２は、店舗５に設置されている本実施形態における画像表示装置４の一例を示す図である。
この図において、画像表示装置４の表示部４１は、パノラマ画像を表示することができる広角のディスプレイである。表示部４１は、ユーザＵ１を中心に扇状に配置され、表示画像の中にユーザＵ１が実際に存在しているように体感できるような表示画像Ｇ２０を表示する。表示部４１と床との境界が分かり難くなるようにすることが好ましい。また、本体部４０は、表示部４１の横に配置されている。本体部４０は、通信部４３を介してネットワーク６に接続されている。
店舗５が老人ホームや福祉会館である場合には、小部屋に二人がけのベンチを置き、そこに老人を座らせてもよい。
また、この図において、入力部４２は、ユーザＵ１が手に持ち、ユーザＵ１の動きの検出、又は、入力部４２に備えられているボタン操作によって、各種情報を取得する。
【００４１】
なお、この例では、表示画面（Ｇ２０）は、背景画像「思い出の場所Ａ」（Ｇ１）に、対象物である既に亡くなっている「故人の画像Ａ」（Ｇ３）を合成した場合の例である。
【００４２】
図３は、サーバ装置２の記憶部２３における一例を示す図である。
ユーザ画像記憶部２３１の中には、複数のユーザの記憶領域（７１、７２、７３）が含まれている。例えば、Ａユーザのための記憶領域７１は、Ａユーザに対応する識別情報Ａに関連付けられてユーザ画像（Ｇ１〜Ｇ４）を記憶している。例えば、記憶領域７１は、背景画像として「思い出の場所Ａ」（Ｇ１）及び「過去に住んでいた街並みＡ」（Ｇ２）、対象画像として「故人の画像Ａ」（Ｇ３）及び「家族の画像Ａ」（Ｇ４）を記憶している。
【００４３】
また、例えば、Ｂユーザのための記憶領域７２は、Ｂユーザに対応する識別情報Ｂに関連付けられてユーザ画像（Ｇ５〜Ｇ８）を記憶している。例えば、記憶領域７２は、背景画像として「旅行した場所Ａ」（Ｇ５）及び「過去に住んでいた街並みＢ」（Ｇ６）、対象画像として「家族の画像Ｂ」（Ｇ７）及び「ペットの画像Ａ」（Ｇ８）を記憶している。
【００４４】
また、例えば、Ｘユーザのための記憶領域７３は、Ｘユーザに対応する識別情報Ｘに関連付けられてユーザ画像（Ｇ９〜Ｇ１２）を記憶している。例えば、記憶領域７３は、背景画像として「旅行した場所Ｂ」（Ｇ９）及び「過去に住んでいた街並みＣ」（Ｇ１０）、対象画像として「故人の画像Ｂ」（Ｇ１１）及び「ペットの画像Ｂ」（Ｇ１２）を記憶している。
【００４５】
このように、各ユーザのユーザ画像は、各ユーザの識別情報に関連付けられて、ユーザ画像記憶部２３１に記憶されている。
【００４６】
また、元画像記憶部２３２の中には、背景画像領域７４と対象画像領域７５が含まれている。背景画像領域７４は、背景画像として、例えば、「観光地Ａ」（Ｇ１３）、「観光地Ｂ」（Ｇ１４）、及び「バーチャル空間Ａ」（Ｇ１５）を記憶している。また、対象画像領域７５は、対象画像として、例えば、「芸能人Ａ」（Ｇ１６）、「アイドルＡ」（Ｇ１７）、「キャラクタＡ」（Ｇ１８）、及び「アイドルＢ」（Ｇ１９）を記憶している。つまり、元画像記憶部２３２には、背景画像又は対象画像が予め記憶されている。ここで、キャラクタとは、例えば、テーマパークのキャラクタ、ゲームのキャラクタ、アニメのキャラクタなどである。
この元画像記憶部２３２が記憶している画像は、上述したように、自由に元画像として使用できる画像、又は購入によりユーザ画像として登録可能な画像である。
また、背景画像の他の例として、昔の懐かしい映像（例えば昭和３０年代の家屋等。）がある。存在しない昔の映像は、写真等を素にして作成する。
更に、背景画像に木々等の環境画像をはめ込んでもよい。環境画像は、いわゆる静止動画（数秒（例えば２〜４秒）撮影した映像を繰り返しもしくはランダムに映す。）を用いる。これにより、自然な感じを出すことができ、また、動画のデータ容量を減らすことができる。
【００４７】
次に、本実施形態における画像表示システム１の動作について説明する。
図４は、本実施形態における画像表示システム１の処理シーケンスの一例を示す図である。
まず、画像表示装置４は、ユーザから識別情報を取得する（ステップＳ１０１）。具体的には、例えば、図２に示すように、ＡユーザであるユーザＵ１によって、入力部４２からＡユーザＵ１に対応する識別情報Ａが入力される。これにより、制御部４５は、識別情報Ａを取得する。この識別情報Ａは、例えば、画像表示システム１によるサービスを受けるための会員番号である。
【００４８】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から取得した識別情報Ａをサーバ装置２に送信する（ステップＳ１０２）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａを送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａをサーバ装置２に送信する。
【００４９】
次に、サーバ装置２は、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する（ステップＳ１０３）。サーバ装置２の制御部２１は、記憶部２３のユーザ画像記憶部２３１を参照して、画像表示装置４から送信された識別情報Ａに関連付けられているユーザ画像のリスト（例えば、記憶領域７１のユーザ画像（Ｇ１〜Ｇ４）のリスト）を作成する。そして、制御部２１は、サーバ通信部２２に作成したユーザ画像のリストを送信させる。サーバ通信部２２は、ネットワーク６を介して、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する。なお、サーバ装置２は、元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストをユーザ画像のリストと共に画像表示装置４に送信してもよい。
【００５０】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から元画像情報を取得する（ステップＳ１０４）。すなわち、画像表示装置４の制御部４５は、サーバ装置２から送信されたユーザ画像のリスト及び元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストを表示部４１に表示する。そして、この表示部４１に表示されたリストを見て、ＡユーザＵ１が、表示画像に用いる元画像を入力部４２によってリストの中からいずれかの画像を選択する。これにより、制御部４５は、ＡユーザＵ１によって選択された元画像を示す情報である元画像情報を取得する。ここでは、元画像として、例えば、ユーザ画像における、背景画像である画像Ｇ１（「思い出の場所Ａ」）と、対象画像である画像Ｇ３（「故人の画像Ａ」）との２つの画像がＡユーザＵ１に選択された場合について説明する。
【００５１】
なお、元画像情報には、表示画像を生成するための情報を含めてもよい。ここで、表示画像を生成するための情報とは、例えば、対象物を表示画像上に合成する位置や向きに関する情報や、表示画像におけるユーザの位置や方向を自動で変更するか、入力部４２による指示により変更するかなどの画像処理のための条件情報である。また、表示画像を生成するための情報として、例えば、表示画像と共に出力されるＢＧＭ（Ｂackground Ｍusic）などの音情報が含まれてもよい。
【００５２】
次に、画像表示装置４は、識別情報Ａと元画像情報とを画像処理装置３に送信する（ステップＳ１０５）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａと元画像情報とを送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａと元画像情報とを画像処理装置３に送信する。
【００５３】
次に、画像処理装置３は、識別情報Ａと元画像情報とをサーバ装置２に送信する（ステップＳ１０６）。すなわち、画像処理装置３の制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、画像表示装置４から送信された識別情報Ａと元画像情報とをサーバ装置２に送信させる。これにより、画像処理通信部３２は、識別情報Ａと元画像情報とをサーバ装置２に、ネットワーク６を介して送信する。
【００５４】
次に、サーバ装置２は、ユーザ（ＡユーザＵ１）によって選択された元画像を画像処理装置３に送信する（ステップＳ１０７）。すなわち、制御部２１は、記憶部２３のユーザ画像記憶部２２１に、ＡユーザＵ１の識別情報Ａと関連付けられて記憶されている画像のうち、ＡユーザＵ１によって選択された画像（Ｇ１及びＧ３）を読み出す。例えば、制御部２１は、ＡユーザＵ１のための記憶領域７１に記憶されている「思い出の場所Ａ」（Ｇ１）と「故人の画像Ａ」（Ｇ３）とを読み出す。制御部２１は、サーバ通信部２２に対して、読み出したユーザ画像（Ｇ１、Ｇ３）を画像処理装置４に送信させる。
【００５５】
次に、画像処理装置３は、画像処理により表示画像を生成する（ステップＳ１０８）。すなわち、制御部３１（画像処理部３１１）は、サーバ装置２の記憶部２３から読み出された元画像（Ｇ１、Ｇ３）に基づいて、図２に示すような表示画像（Ｇ２０）を生成する。なお、この例では、表示画面（Ｇ２０）は、背景画像である「思い出の場所Ａ」（Ｇ１）に、対象物である「故人の画像Ａ」（Ｇ３）を合成した画像である。つまり、画像処理部３１１は、上述した（処理１）から（処理５）のうちの、（処理３）に対応する画像処理を行う。
【００５６】
次に、画像処理装置３は、生成した表示画像（Ｇ２０）を画像表示装置４に送信（配信）する（ステップＳ１０９）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成した表示画像（Ｇ２０）を画像表示装置４に送信させる。
【００５７】
次に、画像表示装置４は、表示画像（Ｇ２０）を表示部４１に表示する（ステップＳ１１０）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成された表示画像（Ｇ２０）を、通信部４３を介して受信し、表示部４１に表示させる。この場合、図２に示すような表示画像（Ｇ２０）が、表示部４１に表示される。
これにより、ＡユーザＵ１は、既に亡くなっている故人と一緒に、思い出の場所にいるような体感を味わうことができる。
【００５８】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から指示情報を取得する（ステップＳ１１１）。ユーザ（ＡユーザＵ１）は、表示画像（Ｇ２０）における位置や方向を変更したい場合、又は、対象物である故人の向きや表示位置を変更したい場合に、入力部４２から指示情報を入力する。ここで、指示情報は、例えば、ユーザの変更したい位置及び方向、対象物の位置及び向きなどの情報である。すなわち、制御部４５は、入力部４２からこれらの指示情報を取得する。
【００５９】
次に、画像表示装置４は、取得した指示情報を画像処理装置３に送信する（ステップＳ１１２）。すなわち、制御部４５は、通信部４３に対して、入力部４２から取得した指示情報を画像処理装置３に送信させる。
【００６０】
次に、画像処理装置３は、指示情報に応じた表示画像を生成する（ステップＳ１１３）。すなわち、制御部３１（画像処理部３１１）は、上述した（処理４）又は（処理５）の画像処理を実行する。例えば、指示情報として、ユーザの位置及びユーザの向いている方向が指定された場合には、ユーザによって入力部４２から指示された位置及び方向に対応する背景を含む表示画像に変更する（処理４）。また、指示情報として、対象物の向き情報が指定された場合には、対象物の向き情報に応じて、表示画像における対象物の向きを変更する画像処理を行う（処理５）。
【００６１】
次に、画像処理装置３は、生成（変更）した表示画像を画像表示装置４に送信する（ステップＳ１１４）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成（変更）した表示画像を画像表示装置４に送信させる。
【００６２】
次に、画像表示装置４は、変更された表示画像を表示部４１に表示する（ステップＳ１１５）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成（変更）された表示画像を、通信部４３を介して受信し、表示部４１に表示させる。例えば、画像表示装置４は、ユーザ（ＡユーザＵ１）が指示した位置や方向に、表示されている「思い出の場所Ａ」（Ｇ１）のなかで、指定した位置や向きに変更させた「故人の画像Ａ」（Ｇ３）とともに移動した表示画像を表示部４１に表示する。これによりユーザ（ＡユーザＵ１）は、表示されている表示画像のなかで、指定した位置や向きに変更させた対象物とともに、ユーザ（ＡユーザＵ１）が指示した位置や方向に移動する体感を味わうことができる。
【００６３】
なお、ステップＳ１１１からステップＳ１１５の処理は、ユーザが画像表示の処理を終了するまで、繰り返される。
【００６４】
このように、一例として、元画像として、「思い出の場所Ａ」（Ｇ１）と「故人の画像Ａ」（Ｇ３）とが指定された場合について説明したが、元画像として、さまざまな画像の組み合わせが可能である。
例えば、表示画像の元画像が、海外のある国の街並みの画像である背景画像と、家族やペット、あるいはアイドルなどの対象画像とである。この場合、画像処理部３１１が、海外のある国の街並みの画像である背景画像と、家族やペット、あるいはアイドルなどの対象画像とを元画像として合成した表示画像を生成し、画像制御部４５１が、表示画像を表示部４１に表示させる。これにより、ユーザは、実際に行かなくとも、海外のある国の街並みを家族やペット、あるいはアイドルと共に旅行している疑似体験を楽しむことができる。なお、対象物は、ユーザ自身の画像でもよい。
【００６５】
また、例えば、表示画像の元画像は、ユーザが過去に住んでいた昔の街並み（背景画像）であり、対象画像が元画像に含まれない。この場合、画像処理部３１１が、元画像に基づいて、昔の街並みにおけるユーザの位置や背景を見る向きに応じて補完する画像処理を行い、表示画像を生成する（処理１）。そして、画像制御部４５１が、表示画像を表示部４１に表示させる。さらに、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向においてユーザが見ることができる表示画像に変更し（処理４）、画像制御部４５１が、変更された表示画像を表示部４１に表示させる。これにより、ユーザは、過去に住んでいた昔の街並みに、実際にユーザが存在しているような疑似体験を楽しむことができる。
【００６６】
また、例えば、表示画像の元画像は、ペットの画像やアイドルの画像（対象画像）であり、背景画像が元画像に含まれない。この場合、画像処理部３１１が、元画像に基づいて、対象物を見る向きに応じて対象物の画像を補完する画像処理を行い、表示画像を生成する（処理２）。そして、画像制御部４５１が、表示画像を表示部４１に表示させる。さらに、画像処理部３１１が、ユーザによって指示された対象物の向きに変更した表示画像を生成し、画像制御部４５１が、変更された表示画像を表示部４１に表示させる。これにより、ユーザは、ペットやアイドルと一緒に存在しているような疑似体験を楽しむことができる。
【００６７】
また、例えば、表示画像の元画像は、ユーザが過去に住んでいた家の複数の画像（背景画像）と家族の画像（対象画像）とである。この場合、画像処理部３１１は、複数の画像からユーザが過去に住んでいた家の立体視画像を生成し（処理２）、家族の画像と合成した表示画像を生成する（処理３）。そして、画像制御部４５１が、表示画像を表示部４１に表示させる。さらに、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向においてユーザが見ることができる表示画像に変更し（処理４）、画像制御部４５１が、変更された表示画像を表示部４１に表示させる。これにより、ユーザは、過去に住んでいた家に、家族と共に実際にユーザが存在しているような疑似体験を楽しむことができる。つまり、ユーザは、昔に戻ったような感覚を楽しむ擬似体験が可能になる。
【００６８】
以上のように、本実施形態における画像表示システム１は、サーバ装置２と、画像処理装置３と、店舗５に設置されている画像表示装置４とがネットワークを介して接続されている。サーバ装置２は、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１（記憶部）を備える。画像表示装置４は、画像を表示する表示部４１と、入力された識別情報を送信する通信部４３と、画像処理部３１１により画像処理された表示画像を表示部４１に表示させる画像制御部４５１とを備える。画像処理装置３は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部３１１を備える。
【００６９】
すなわち、ユーザを識別する識別情報と関連付けられて記憶されているユーザ画像を含む元画像に基づいて、画像処理部３１１が画像処理により表示画像を生成し、画像表示装置４が生成された表示画像を表示部４１に表示する。画像表示装置４は、単に、ユーザ画像を表示するだけでなく、画像処理により生成された表示画像を表示するため、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７０】
また、本実施形態において、元画像には、表示画像の背景となる背景画像、又は、表示画像に表示する対象物となる対象画像が含まれる。元画像として、背景画像又は対象画像を用いるため、表示画像を生成するための元画像は、さまざまな組み合わせが可能である。そのため、画像処理部３１１は、さまざまなシーンの疑似体験が可能な表示画像を生成することができる。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７１】
また、本実施形態において、画像処理部３１１は、画像処理として、背景画像と対象画像とを合成し、表示画像を生成する（処理３）。すなわち、画像処理部３１１は、ユーザが対象画像の対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７２】
また、本実施形態において、画像処理部３１１は、ユーザによって指示された位置及び方向に対応する背景を含む表示画像に変更する（処理４）。すなわち、画像処理部３１１は、ユーザによって指定されたユーザの位置及びユーザの向いている方向において見ることができる表示画像に変更し、表示画像の中で、実際に移動しているように体感させる表示画像を生成する。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７３】
また、本実施形態において、画像処理部３１１は、ユーザによって指示された対象物の向き情報に応じて、表示画像における対象物の向きを変更する（処理５）。すなわち、画像処理部３１１は、ユーザによって指示された対象物の向きに変更した対象物と背景画像とを合成して、対象物と一緒に、背景画像の中にいるように体感させる表示画像を生成する。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７４】
また、本実施形態において、表示画像はパノラマ画像であり、表示部４１はパノラマ画像を表示する。パルラマ画像が表示されるため、画像表示装置４は、臨場感のある画像を表示することができる。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７５】
また、本実施形態において、背景画像は、所定の場所において位置を移動させて、位置それぞれを中心に水平方向に３６０度の視野を撮影した全方位画像であってもよい。
この場合、ユーザの位置やユーザの見る向きに対応した背景画像が予め容易されていることになるので、画像処理部３１１における処理量を低減することができる。また、実際に撮像されていない方向や位置の画像を補完する必要がないので、画像表示装置４は、臨場感のある画像を表示することができる。これにより、本実施形態における画像表示システム１は、画像の鑑賞における娯楽性を向上させることができる。
【００７６】
また、本実施形態によれば、画像表示装置４は、通信部４３が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１を有するサーバ装置２ａにネットワークを介して接続され、入力された識別情報を送信する。画像制御部４５１は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を表示部４１に表示させる。
これにより、本実施形態における画像表示装置４は、画像の鑑賞における娯楽性を向上させることができる。
【００７７】
なお、上記の実施形態では、説明上、１つの店舗５に画像表示装置４が設置されている例を説明したが、図１に示すように、画像表示システム１は、複数の店舗（５Ａ、５Ｂ、…５Ｘ）及び複数の画像表示装置（４Ａ、４Ｂ、…４Ｘ）に対応可能である。この場合には、画像表示装置４は、識別情報と共に、店舗情報及び画像表示装置の識別情報をサーバ装置２及び画像処理装置３に送信して対応する。これにより、サーバ装置２及び画像処理装置３は、どの店舗（５Ａ、５Ｂ、…５Ｘ）の画像表示装置（４Ａ、４Ｂ、…４Ｘ）に対して、処理を行う必要があるのか判定することができる。
【００７８】
［第２の実施形態］
次に、第２の実施形態による画像表示システム１ａについて説明する。
第２の実施形態による画像表示システム１ａは、第１の実施形態における画像表示システム１にユーザ画像の登録及び表示画像の表示に応じて課金する課金部を追加した実施形態である。
図５は、本実施形態による画像表示システム１ａの一例を示す概略ブロック図である。
この図において、画像表示システム１ａは、サーバ装置２ａと、画像処理装置３と、画像表示装置４とを備えている。この図において、図１と同一の構成については同一の符号を付し、その説明を省略する。
【００７９】
サーバ装置２ａは、制御部２１、サーバ通信部２２、記憶部２３及び登録課金部２４を備えている。また、制御部２１は、登録部２１１を備えている。なお、制御部２１は、登録部２１１を備えている点を除き、第１の実施形態における制御部２１と同様である。
【００８０】
登録部２１１は、元画像記憶部２３２に記憶されている背景画像又は対象画像のうちの、ユーザによって選択された画像をユーザ画像として、ユーザに対応する識別情報と関連付けてユーザ画像記憶部２３１に登録する。すなわち、ユーザ画像記憶部２３１には、表示画像の背景となる背景画像、及び、表示画像に表示する対象物となる対象画像のうちの、ユーザにより指定された画像が、ユーザ画像として記憶される。
【００８１】
登録課金部２４は、ユーザ画像が識別情報と関連付けてユーザ画像記憶部２３１に登録される場合に、ユーザに対して課金する。
【００８２】
また、本実施形態における画像表示装置４は、表示部４１、入力部４２、及び本体部４０ａを備えている。本体部４０ａは、通信部４３と、表示課金部４４と、制御部４５とを備えている。本体部４０ａは、表示課金部４４を備えている点を除き、第１の実施形態における本体部４０と同様である。
表示課金部４４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて、ユーザに対して課金する。
【００８３】
次に、本実施形態における画像表示システム１ａの動作について説明する。
本実施形態における画像表示システム１ａの動作は、基本的に、第１の実施形態における画像表示システム１と同様であるが、ユーザ画像の登録及び表示画像の表示に応じて課金する処理が追加されている点が異なる。
【００８４】
＜ユーザ画像の登録処理＞
図６は、本実施形態におけるユーザ画像の登録処理の一例を示す図である。
なお、この図において、図３と同一の構成については同一の符号を付し、その説明を省略する。
図６（ａ）に示すように、元画像記憶部２３２には、背景画像（Ｇ１３〜Ｇ１５）及び対象画像（Ｇ１６〜Ｇ１９）が予め記憶されている。本実施形態では、これらの画像を元画像として使用する場合に、これらの画像は、ユーザ画像記憶部２３１にユーザ画像として登録されてから使用される。
【００８５】
具体的には、図４のステップＳ１０４の処理において、次のような処理が追加される。
図４のステップＳ１０４の処理において、画像表示装置４の制御部４５は、サーバ装置２ａから送信されたユーザ画像のリスト及び元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストを表示部４１に表示する。ここで、ユーザ（例えば、Ａユーザ）が元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）を元画像として使用したい場合には、ユーザが元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のうちの元画像として使用したい画像（例えば、「アイドルＡ」（Ｇ１７））が、入力部４２から選択される。画像表示装置４は、識別情報と選択された画像情報とをサーバ装置２ａに送信する。
【００８６】
次に、サーバ装置２ａの登録部２１１は、元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）の中から、ユーザによって選択された画像（Ｇ１７）をユーザ画像として、Ａユーザに対応する識別情報と関連付けてユーザ画像記憶部２３１に登録する。これにより、図６（ｂ）に示すように、ユーザ画像記憶部２３１には、「アイドルＡ」（Ｇ１７）が、ユーザ画像（Ｇ１７Ａ）として、Ａユーザの記憶領域７１に記憶される。
そして、この登録部２１１による登録処理の際に、登録課金部２４は、ユーザ（Ａユーザ）に対して課金する。つまり、Ａユーザは、「アイドルＡ」（Ｇ１７）の画像を購入して、ユーザ画像として登録する。なお、画像をユーザ画像として登録する料金は、画像ごとに異なってもよい。また、元画像記憶部２３２に記憶されている画像には、この料金が無料の画像が含まれていてもよい。
その後に処理は、図４のステップＳ１０４の処理と同様である。
【００８７】
なお、元画像記憶部２３２に記憶されている画像には、上述の登録部２１１によって課金されないで自由にユーザ画像として使用できる画像が含まれていてもよい。
【００８８】
また、本実施形態では、画像表示装置４の表示課金部４４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて、ユーザに対して課金する。つまり、図４におけるステップＳ１１０からステップＳ１１５の処理において、表示課金部４４が課金処理を行う。
【００８９】
なお、登録課金部２４によって課金された料金、及び表示課金部４４によって課金された料金は、ユーザによって支払われることになる。この場合、画像表示装置４の本体部４０ａにユーザが料金を支払う形態でもよいし、店舗５の窓口において、ユーザが料金を支払う形態でもよい。また、店舗５又はサーバ装置２には、ユーザの識別情報とクレジットカードの情報が予め登録されていて、カード決済される形態でもよい。
【００９０】
以上のように、本実施形態において、ユーザ画像記憶部２３１には、表示画像の背景となる背景画像、及び、表示画像に表示する対象物となる対象画像のうちの、ユーザにより指定された画像が、ユーザ画像として記憶される。また、サーバ装置２ａは、元画像記憶部２３２が、背景画像又は対象画像を予め記憶されている。そして、サーバ装置２ａの登録部２１１は、元画像記憶部２３２に記憶されている背景画像又は対象画像のうちの、ユーザによって選択された画像をユーザ画像として、識別情報と関連付けてユーザ画像記憶部２３１に登録する。
これにより、ユーザ画像として使用できる元画像の選択肢が広がるので、画像表示装置４は、さまざまな組み合わせの表示画像を表示部４１に表示することができる。したがって、本実施形態における画像表示システム１ａは、画像の鑑賞における娯楽性を向上させることができる。
【００９１】
また、本実施形態において、サーバ装置２ａは、ユーザ画像が識別情報と関連付けてユーザ画像記憶部２３１に登録される場合に、ユーザに対して課金する登録課金部２１１を備える。これにより、画像表示システム１ａを利用して娯楽性を向上させた表示画像を生成するための元画像であるユーザ画像を登録することによって課金する新しいビジネスを提供することができる。
【００９２】
また、本実施形態において、画像表示装置４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて、ユーザに対して課金する表示課金部４４を備える。これにより、画像表示システム１ａを利用して娯楽性を向上させた表示画像を、表示部４１に表示することによって課金する新しいビジネスを提供することができる。
【００９３】
［第３の実施形態］
次に、第３の実施形態による画像表示システム１ｂについて説明する。
第３の実施形態による画像表示システム１ｂは、第２の実施形態における画像表示システム１ａにユーザ画像の登録を行う画像登録装置８を追加した実施形態である。
図７は、本実施形態による画像表示システム１ｂの一例を示す概略ブロック図である。
この図において、画像表示システム１ｂは、サーバ装置２ａ、画像処理装置３、画像表示装置４、及び画像登録装置８を備えている。この図において、図１及び図５と同一の構成については同一の符号を付し、その説明を省略する。
【００９４】
画像登録装置８は、ネットワーク６を介してサーバ装置２ａに接続されている。画像登録装置８は、制御部８１と登録通信部８２とを備えている。
登録通信部８２は、ネットワーク６に接続されていて、ネットワーク６を介して、サーバ装置２ａなどの他の装置と画像登録装置８と間の通信を行う。
制御部８１は、画像登録装置８の各種処理を制御し、例えば、登録通信部８２を介してユーザ画像をサーバ装置２ａのユーザ画像記憶部２３１に登録する処理を制御する。また、制御部８１は、登録処理部８１１を備えている。
【００９５】
登録処理部８１１は、ユーザ画像記憶部２３１に対して、識別情報とユーザ画像とを関連付けて登録させる。すなわち、登録処理部８１１は、識別情報とユーザ画像とを登録通信部８２を介してサーバ装置２ａに送信する。サーバ装置２ａの制御部２１（登録部２１１）は、サーバ通信部２２を介して受信した識別情報とユーザ画像とを関連付けて、ユーザ画像記憶部２３１に記憶させる。これにより、ユーザ画像記憶部２３１に、画像登録装置８から供給された画像が、ユーザ画像として登録される。
【００９６】
なお、登録課金部２４は、この制御部２１（登録部２１１）による登録処理の際に、ユーザに対して課金する。つまり、ユーザは、料金を支払って、ユーザ画像を登録する。
【００９７】
以上のように、本実施形態における画像表示システム１ｂは、ネットワーク６を介してサーバ装置２ａに接続されている画像登録装置８を備えている。画像登録装置８は、ユーザ画像記憶部２３１に対して、識別情報とユーザ画像とを関連付けて登録させる登録処理部８１１を有する。
これにより、画像表示システム１ｂを利用して娯楽性を向上させた表示画像を生成するための元画像であるユーザ画像を登録することによって課金する新しいビジネスを提供することができる。
【００９８】
［第４の実施形態］
次に、第４の実施形態による画像表示システム１ｃについて説明する。
第４の実施形態による画像表示システム１ｃは、上記各実施形態において画像処理装置３が備える画像処理部３１１に対応する画像処理部２１２を、サーバ装置２ａが備える実施形態である。
図８は、本実施形態による画像表示システム１ｃの一例を示す概略ブロック図である。
この図において、画像表示システム１ｃは、サーバ装置２ａ及び画像表示装置４を備えている。この図において、図１及び図５と同一の構成については同一の符号を付し、その説明を省略する。
【００９９】
サーバ装置２ａの制御部２１は、画像処理部２１２を備えている。この画像処理部２１２は、上述した画像処理部３１１に対応し、画像処理部３１１と同様の処理を行う。すなわち、画像処理部２１２は、画像表示装置４から送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。
また、サーバ装置２ａは、画像処理部２１２が生成した表示画像を、ネットワーク６を介して、画像表示装置４に送信する。
画像表示装置４は、サーバ装置２ａの画像処理部２１２が生成した表示画像を表示部４１に表示する。その他の処理は、第１及び第２の実施形態と同様である。
【０１００】
以上のように、本実施形態における画像表示システム１ｃは、サーバ装置２ａと、店舗５に設置されている画像表示装置４とがネットワークを介して接続されている。サーバ装置２ａは、ユーザ画像記憶部２３１が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像を記憶している。また、サーバ装置２ａの画像処理部２１２は、画像表示装置４から送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。そして、画像表示装置４は、画像を表示する表示部４１と、入力された識別情報を送信する通信部４３と、画像処理部２１２により画像処理された表示画像を表示部４１に表示させる画像制御部４５１と、を備えている。
これにより、本実施形態における画像表示システム１ｃは、上記の各実施形態と同様に、画像の鑑賞における娯楽性を向上させることができる。また、本実施形態では、上記の各実施形態における画像処理装置３が不要になるため、システム構成を簡略化することができる。
【０１０１】
［第５の実施形態］
次に、第５の実施形態による画像表示システム１ｄについて説明する。
第５の実施形態による画像表示システム１ｄは、上記第１から第３の各実施形態において画像処理装置３が備える画像処理部３１１に対応する画像処理部４５２を、画像表示装置４が備える実施形態である。
図９は、本実施形態による画像表示システム１ｄの一例を示す概略ブロック図である。
この図において、画像表示システム１ｄは、サーバ装置２ａ及び画像表示装置４を備えている。この図において、図１及び図５と同一の構成については同一の符号を付し、その説明を省略する。
【０１０２】
画像表示装置４の制御部４５は、画像処理部４５２を備えている。この画像処理部４５２は、上述した画像処理部３１１に対応し、画像処理部３１１と同様の処理を行う。すなわち、画像処理部４５２は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。
【０１０３】
つまり、サーバ装置２ａは、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を、ネットワーク６を介して、画像表示装置４に送信する。
画像表示装置４の画像処理部４５２は、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。そして、画像表示装置４の画像制御部４５１は、画像処理部４５２が生成した表示画像を表示部４１に表示する。その他の処理は、第１及び第２の実施形態と同様である。
【０１０４】
以上のように、本実施形態における画像表示システム１ｄは、サーバ装置２ａと、店舗５に設置されている画像表示装置４とがネットワークを介して接続されている。サーバ装置２ａは、ユーザ画像記憶部２３１が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像を記憶している。画像表示装置４は、通信部４３が、入力された識別情報を送信し、画像処理部４５２が、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。そして、画像制御部４５１は、画像処理部４５２により画像処理された表示画像を表示部４１に表示させる。
これにより、本実施形態における画像表示システム１ｄは、上記の各実施形態と同様に、画像の鑑賞における娯楽性を向上させることができる。また、本実施形態では、上記第１から第３の各実施形態における画像処理装置３が不要になるため、システム構成を簡略化することができる。
【０１０５】
なお、本実施形態によれば、画像表示装置４は、通信部４３が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されているユーザ画像記憶部２３１を有するサーバ装置２ａにネットワークを介して接続され、入力された識別情報を送信する。画像処理部４５２は、送信された識別情報と関連付けられているユーザ画像であって、ユーザ画像記憶部２３１から読み出されたユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する。画像制御部４５１は、画像処理部４５２により画像処理された表示画像を表示部４１に表示させる。
これにより、本実施形態における画像表示装置４は、上記の各実施形態と同様に、画像の鑑賞における娯楽性を向上させることができる。
【０１０６】
［第６の実施形態］
次に、第６の実施形態による画像表示システム１ｅについて説明する。
第６の実施形態による画像表示システム１ｅは、ネットワーク６に接続可能な形態端末８から供給される場所情報、時刻情報、及び天候情報に基づいて、背景画像又は対象画像を加工して合成した画像を表示する実施形態である。
【０１０７】
図１０は、本実施形態による画像表示システム１ｅの一例を示す概略ブロック図である。
この図において、画像表示システム１ｅは、サーバ装置２と、画像処理装置３と、画像表示装置４と、携帯端末８とを備えている。また、サーバ装置２と、画像処理装置３と、画像表示装置４と、携帯端末８とは、ネットワーク６を介して接続されている。画像表示装置４は、店舗５に設置されている。この図において、図１と同一の構成については同一の符号を付し、その説明を省略する。なお、本実施形態における画像表示装置４の構成は図２と同様であり、本実施形態におけるサーバ装置２の記憶部２３の構成は図３と同様である。
【０１０８】
携帯端末８は、例えば、携帯電話などのネットワーク６に接続可能な携帯端末である。携帯端末８は、ユーザＵ１（第１使用者）の友人、知人、家族などのユーザＵ２（第２使用者）に携帯され、位置情報を検出する。なお、位置情報には、緯度、経度などのユーザＵ２の地図座標に、ユーザＵ２が向いている方向情報を含めてもよい。また、携帯端末８は、ユーザＵ２の声や周辺の音を収音する。携帯端末８は、ネットワーク６を介して、ユーザＵ２によって予め入力されている天候情報（例えば、晴れ、曇りなど）、時刻情報、検出した位置情報、及び収音した音情報を画像処理装置３に送信する。また、携帯端末８は、位置検出部８１と、収音部８２とを備えている。
【０１０９】
位置検出部８１は、例えば、ＧＰＳ（Global Positioning System）であり、携帯端末のユーザの位置情報を検出する。また、位置検出部８１は、角速度検出部を備えて、ユーザＵ２の向いている方向を検出する。
収音部８２は、例えば、マイクなどにより構成され、携帯端末８の周辺の音を収音する。
ここで、ユーザＵ１は、上記の各実施形態と同様に、店舗５の画像表示装置４を使用するユーザである。また、ユーザＵ２は、店舗５とは異なる場所（例えば、旅行先の観光地など）にいる（存在している）ユーザであり、観光などの目的により位置が変更される。
【０１１０】
本実施形態における画像処理装置３は、携帯端末８から供給された位置情報、天候情報、時刻情報に基づいて元画像を画像処理して、表示画像を生成する。例えば、ユーザＵ２
が観光地Ａにいる場合、画像処理装置３の画像処理部３１１は、予めユーザ画像としてサーバ装置２に登録されている観光地Ａの画像データの中から、位置情報に対応する背景画像である元画像を選択する。なお、画像処理部３１１は、元画像を位置情報に基づいて、画像処理により加工してもよい。ここで、表示画像を生成する元画像には、ユーザＵ１によって、例えば、「観光地Ａ」（Ｇ１３）の画像が背景画像として選択され、予めユーザ画像としてサーバ装置２に登録されているユーザＵ２自身の画像（「家族の画像Ａ」（Ｇ４））が対象画像として選択される。
【０１１１】
また、画像処理部３１１は、選択された元画像を天候情報及び時刻情報に応じて加工する。例えば、時刻情報が夕方である場合には、画像処理部３１１は、選択した元画像を夕日の当たった色合いに加工する。また、例えば、天候情報が曇りの場合には、画像処理部３１１は、選択した元画像を曇り空に加工する。画像処理部３１１は、対象画像についても同様に、時刻情報及び天候情報に応じて、明るさや色を変更する加工を行う。
そして、画像処理部３１１は、上述のように位置情報、天候情報及び時刻情報に応じて加工した背景画像と対象画像とを合成して、表示画像を生成する。なお、画像処理部３１１は、表示画像を生成する場合に、携帯端末８から供給された音情報を表示画像に付加する。
【０１１２】
次に、本実施形態による画像表示システム１ｅの動作について説明する。
図１１は、本実施形態における画像表示システム１ｅの処理シーケンスの一例を示す図である。
まず、画像表示装置４は、ユーザから識別情報を取得する（ステップＳ２０１）。具体的には、例えば、図２に示すように、ＡユーザであるユーザＵ１によって、入力部４２からＡユーザＵ１に対応する識別情報Ａが入力される。これにより、制御部４５は、識別情報Ａを取得する。この識別情報Ａは、例えば、画像表示システム１によるサービスを受けるための会員番号である。
【０１１３】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から取得した識別情報Ａをサーバ装置２に送信する（ステップＳ２０２）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａを送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａをサーバ装置２に送信する。
【０１１４】
次に、サーバ装置２は、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する（ステップＳ２０３）。サーバ装置２の制御部２１は、記憶部２３のユーザ画像記憶部２３１を参照して、画像表示装置４から送信された識別情報Ａに関連付けられているユーザ画像のリスト（例えば、記憶領域７１のユーザ画像（Ｇ１〜Ｇ４）のリスト）を作成する。そして、制御部２１は、サーバ通信部２２に作成したユーザ画像のリストを送信させる。サーバ通信部２２は、ネットワーク６を介して、識別情報Ａに対応するユーザ画像のリストを画像表示装置４に送信する。なお、サーバ装置２は、元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストをユーザ画像のリストと共に画像表示装置４に送信してもよい。
【０１１５】
次に、画像表示装置４は、ユーザ（ＡユーザＵ１）から元画像情報、及びＡユーザの家族であるユーザＵ２が携帯している携帯端末８の端末情報を取得する（ステップＳ２０４）。すなわち、画像表示装置４の制御部４５は、サーバ装置２から送信されたユーザ画像のリスト及び元画像記憶部２３２に記憶されている画像（Ｇ１３〜Ｇ１９）のリストを表示部４１に表示する。そして、この表示部４１に表示されたリストを見て、ＡユーザＵ１が、表示画像に用いる元画像を入力部４２によってリストの中からいずれかの画像を選択する。これにより、制御部４５は、ＡユーザＵ１によって選択された元画像を示す情報である元画像情報を取得する。ここでは、元画像として、例えば、ユーザ画像における、背景画像である画像Ｇ１３（「観光地Ａ」）と、対象画像である画像Ｇ４（「家族の画像Ａ」）との２つの画像がＡユーザＵ１に選択された場合について説明する。
【０１１６】
また、ＡユーザＵ１は、ユーザＵ２が携帯している携帯端末８の端末情報を入力部４２から入力する。なお、携帯端末８の端末情報は、予めサーバ装置２に登録されていて、元画像とともに、端末情報を選択してもよい。
【０１１７】
次に、画像表示装置４は、識別情報Ａ、端末情報、及び元画像情報を画像処理装置３に送信する（ステップＳ２０５）。すなわち、制御部４５は、通信部４３に取得した識別情報Ａ、端末情報、及び元画像情報を送信させる。これにより、通信部４３は、ネットワーク６を介して、識別情報Ａ、端末情報、及び元画像情報を画像処理装置３に送信する。
【０１１８】
次に、画像処理装置３は、識別情報Ａと元画像情報とをサーバ装置２に送信する（ステップＳ２０６）。すなわち、画像処理装置３の制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、画像表示装置４から送信された識別情報Ａと元画像情報とをサーバ装置２に送信させる。これにより、画像処理通信部３２は、識別情報Ａと元画像情報とをサーバ装置２に、ネットワーク６を介して送信する。
【０１１９】
次に、サーバ装置２は、ユーザ（ＡユーザＵ１）によって選択された元画像を画像処理装置３に送信する（ステップＳ２０７）。すなわち、制御部２１は、記憶部２３のユーザ画像記憶部２２１に、サーバ装置２に記憶されている画像のうち、ＡユーザＵ１によって選択された画像（Ｇ４及びＧ１３）を読み出す。制御部２１は、サーバ通信部２２に対して、読み出したユーザ画像（Ｇ４、Ｇ１３）を画像処理装置４に送信させる。
【０１２０】
次に、画像処理装置３は、携帯端末８に対して、ユーザＵ２の位置情報、時刻情報、天候情報、及び音情報を要求する（ステップＳ２０８）。これにより、携帯端末８は、位置情報及び音情報の取得を開始する。
次に、携帯端末８は、リアルタイムに、ユーザＵ２の位置情報、時刻情報、天候情報、及び音情報を画像処理装置３に送信する（ステップＳ２０９）。すなわち、ユーザＵ２は、実際に「観光地Ａ」にいて観光を行っており、携帯端末８は、その際に移動する位置情報と周囲の音情報を一検出部８１及び収音部８２によって取得する。そして、携帯端末８は、ネットワーク６を介して取得したユーザＵ２の位置情報、時刻情報、及び音情報と予め登録しておいた天候情報とを画像処理装置３に送信する。
【０１２１】
次に、画像処理装置３は、画像処理により表示画像を生成する（ステップＳ２１０）。すなわち、制御部３１（画像処理部３１１）は、上述したように、携帯端末８から供給されたユーザＵ２の位置情報、時刻情報、及び天候情報に応じて、サーバ装置２の記憶部２３から読み出された元画像（Ｇ４、Ｇ１３）を加工し、加工した元画像（Ｇ４、Ｇ１３）を合成して、表示画像を生成する。また、この際に、画像処理部３１１は、表示画像に、携帯端末８から供給された音情報を付加する処理を行う。
【０１２２】
次に、画像処理装置３は、生成した表示画像を画像表示装置４に送信（配信）する（ステップＳ２１１）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成した表示画像を画像表示装置４に送信させる。
【０１２３】
次に、画像表示装置４は、表示画像を表示部４１に表示する（ステップＳ２１２）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成された表示画像を、通信部４３を介して受信し、表示部４１に表示させる。この場合、図２に示すような表示画像が、表示部４１に表示される。また、画像表示装置４は、表示画像とともに表示画像に付加されている音情報を、例えば、スピーカから出力する。
これにより、ＡユーザＵ１は、現在「観光地Ａ」で旅行をしているユーザＵ２一緒に、「観光地Ａ」にいるような体感を味わうことができる。なお、表示される表示画像は、携帯端末８から供給されたユーザＵ２の位置情報、時刻情報、及び天候情報に応じて加工（画像処理）されているため、現在のユーザＵ２がいる位置、時刻、天候に対応した画像である。
【０１２４】
次に、携帯端末８は、リアルタイムに、ユーザＵ２の位置情報、時刻情報、天候情報、及び音情報を画像処理装置３に順次送信する（ステップＳ２１３）。そして、画像処理装置３は、ステップＳ２１０と同様に、画像処理により表示画像を生成する（ステップＳ２１４）。なお、ここでは、制御部３１（画像処理部３１１）は、携帯端末８から供給されたユーザＵ２の位置情報に応じて位置及び方向に対応する背景を含む表示画像に変更したり、時刻情報及び天候情報に応じて表示画面の明るさなどを変更したりする画像処理を行い、表示画面を生成する。
【０１２５】
次に、画像処理装置３は、生成（変更）した表示画像を画像表示装置４に送信する（ステップＳ２１５）。すなわち、制御部３１（画像処理部３１１）は、画像処理通信部３２に対して、生成（変更）した表示画像を画像表示装置４に送信させる。
【０１２６】
次に、画像表示装置４は、変更された表示画像を表示部４１に表示する（ステップＳ２１６）。すなわち、制御部４５（画像制御部４５１）は、画像処理部３１１によって生成（変更）された表示画像を、通信部４３を介して受信し、表示部４１に表示させる。例えば、画像表示装置４は、ユーザ（ＡユーザＵ１）が指示した位置や方向に、表示されている「観光地Ａ」（Ｇ１３）のなかで、「家族の画像Ａ」（Ｇ４）とともに移動した表示画像を表示部４１に表示する。これによりユーザ（ＡユーザＵ１）は、現在「観光地Ａ」を旅行しているユーザＵ２（家族）と一緒に、「観光地Ａ」を旅行しているような体感を味わうことができる。
【０１２７】
なお、ステップＳ２１３からステップＳ２１６の処理は、ユーザが画像表示の処理を終了するまで、繰り返される。
【０１２８】
以上のように、本実施形態による画像表示システム１ｅは、携帯端末８が位置情報、時刻情報、又は天候情報を取得し、取得した位置情報、時刻情報、又は天候情報を画像表示装置４（画像処理部３１１）に供給する。そして、画像処理部３１１は、供給された位置情報、時刻情報、又は天候情報に応じて、表示画像を変更する。
これにより、本実施形態による画像表示システム１ｅは、携帯端末８を持つユーザＵ２が現在いる場所の位置情報、時刻情報、又は天候情報に応じて、リアルタイムに表示画像を変更することができる。そのため、例えば、ユーザ（ＡユーザＵ１）は、現在「観光地Ａ」を旅行しているユーザＵ２（家族）と一緒に、「観光地Ａ」を旅行しているような体感をリアルタイムに味わうことができる。よって、本実施形態における画像表示システム１ｅは、画像の鑑賞における娯楽性を向上させることができる。
【０１２９】
また、本実施形態では、携帯端末８がリアルタイムに取得した音情報を、画像表示装置４が、表示画像とともに出力する。これにより、例えば、ユーザＵ２の声や、「観光地Ａ」の周辺の音が出力されるため、ユーザＵ１は、実際に「観光地Ａ」にユーザＵ２と一緒にいるような臨場感を味わうことができる。
【０１３０】
なお、本発明は、上記の各実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲で変更可能である。
上記の各実施形態において、表示部４１には、パノラマ画像を表示するする広角のディスプレイを用いる形態を説明したが、これに限定されず、広角でないディスプレイを用いる形態でもよい。また、表示部４１は、図１２に示すようなユーザの頭部に装着して、ユーザの視界を覆うようなヘッドマウントディスプレイ４１ａを用いる形態でもよいし、他のディスプレイを用いる形態でもよい。なお、ヘッドマウントディスプレイ４１ａは、例えば、角速度検出部と、加速度検出部とを備える形態でもよい。この場合、ヘッドマウントディスプレイ４１ａによって、ユーザＵ１の向いている方向情報、及び移動位置情報が取得することができる。そのため、入力部４２を用いずに、ユーザＵ１の変更したい位置及び方向などの情報を取得し、取得した位置及び方向に応じて表示画像に変更することができる。また、表示部４１には、立体視画像を表示可能なディスプレイを用いる形態でもよい。
また、上記の各実施形態において、画像表示装置４が表示部４１に表示する表示画像は、２次元の画像でもよいし、３次元処理された画像でもよいし、立体視用に処理された画像でもよい。
【０１３１】
また、上記の各実施形態において、画像処理部３１１（２１２、４５２）は、音信号の合成をする音信号処理部を含む形態でもよい。例えば、画像処理部３２１は、対象物である人物又はペットの声を合成して、表示画像に付加し、画像制御部４５１が、表示画像の表示と共に、音信号を出力させる形態でもよい。この場合、画像表示装置４がマイクを備え、ユーザの声に応じて、表示画像における対象物が音を出力したり、対象物の向きが変更させたりする形態でもよい。これにより、画像の鑑賞における臨場感を増すことができる。
【０１３２】
また、上記の各実施形態において、店舗５は、ユーザが旅行に行く際などに、撮影位置において水平方向に３６０度の視野を撮影する全方位画像を撮影可能な撮影装置を貸し出して課金するサービスを提供してもよい。これにより、ユーザは、表示画像を生成するのに適したユーザ画像を、簡単に取得することができる。また、店舗５は、ユーザによって指定された画像を有料で撮影してユーザ画像を作成するサービスを提供してもよい。このユーザによって指定された画像とは、例えば、観光地、海外の街並み、ユーザが住んでいる街並み、ユーザの住んでいる家、家族、ペットなどの画像である。これにより、ユーザは、実際に撮影場所に行かなくても、疑似体験したい背景画像を取得することができる。
【０１３３】
また、上記の各実施形態において、画像処理部３１１が表示画像を毎回生成する形態を説明したが、表示画像や元画像の一部を予め画像処理して生成して課金するサービスを提供してもよい。この場合、ネットワーク６を介して、サードパーティの会社に、画像処理を委託する形態でもよい。例えば、新婚旅行に行った外国Ａの観光地の画像を、外国Ａの観光地に近い委託業者に新婚旅行を再現する表示画像の生成を委託してもよい。これにより、現地に行かなくても、質の高い臨場感のある表示画像を取得することが可能になる。
【０１３４】
また、上記の各実施形態において、元画像記憶部２３２が、サーバ装置２（２ａ）に備えられている形態を説明したが、他の装置（画像処理装置３、画像表示装置４、又は画像登録装置８など）に元画像記憶部２３２が備えられている形態でもよい。
【０１３５】
また、上記の各実施形態において、登録部２１１は、元画像記憶部２３２に記憶されている画像を識別情報と関連付けてユーザ画像記憶部２３１に記憶する形態を説明したが、元画像記憶部２３２に記憶されている画像を、識別情報と関連付けたリンクファイルとして、登録する形態でもよい。
【０１３６】
また、上記の各実施形態において、表示課金部４４は、表示画像を表示する時間、又は、表示画像のデータ量に応じて課金する形態を説明したが、これに限定されるものではない。例えば、月極め会員や年間会員などの契約期間に応じた定額制に対応する形態でもよい。
【０１３７】
また、上記第３の実施形態における画像登録装置８は、店舗５内にあってもよいし、ユーザの自宅に設置されている形態でもよい。また、上記第４及び第５の実施形態に、画像登録装置８を適用する形態でもよい。
【０１３８】
また、上記の各実施形態において、画像表示装置４は、店舗５に設置されている形態を説明したが、ホームシアターなどとしてユーザの自宅に設置されている形態でもよいし、店舗５及び自宅以外の他の場所に設置されている形態でもよい。
また、上記の各実施形態において、例えば（処理２）のような複数の元画像に基づいて画像処理を行う場合、記憶部２３に記憶されている元画像を使用する形態を説明したが、これに限定されるものではない。例えば、サーバ装置２が、ユーザから指定された位置情報や地名などのキーワードからネットワーク６上に存在する任意のユーザが所持する元画像を検索し、この検索によって得られた画像を元画像として利用する形態でもよい。また、サーバ装置２が、例えば、ユーザ画像記憶部２３１に記憶されている異なるユーザのユーザ画像を、位置情報や地名などのキーワードから検索し、他のユーザの識別情報に関連付けられて記憶されているユーザ画像を元画像として利用できる形態でもよい。この場合、サーバ装置２の制御部２１は、例えば、ユーザ画像に含まれる個人を特定するような画像部分を削除する加工をした上で、元画像記憶部２３２に記憶させる形態でもよい。
【０１３９】
また、上記第６の実施形態において、場所ごとの元画像に対して、第２のユーザ（ユーザＵ２）が存在する位置、時刻、天候状態にあわせて、第２のユーザ（ユーザＵ２）が存在する位置、時刻、天候状態にあわせた元画像を画像処理により生成する形態を説明したが、これに限定されるものではない。例えば、場所ごとに、時刻、天候状態が異なる複数の元画像が予め撮像されており、複数の元画像の中から、第２のユーザ（ユーザＵ２）が存在する位置、時刻、天候状態にあわせて元画像を選択する形態でもよい。
【０１４０】
また、上記第６の実施形態では、上記第１の実施形態に組み合わせて適用する形態を説明したが、上記第２〜第５の実施形態と組み合わせて適用する形態でもよい。
また、上記第６の実施形態において、携帯端末８は、位置情報、時刻情報、天候情報、及び音情報を画像処理部３１１に供給する形態を説明したが、撮像部を備えて、リアルタイムに撮像した背景画像を画像処理部３１１に供給する形態でもよい。この場合、画像処理部３１１は、位置情報、時刻情報、及び天候情報に応じた元画像の加工を行う必要がなくなるため、処理を簡略化することができる。
【０１４１】
また、上記第６の実施形態では、ユーザＵ２が所持している携帯端末８から供給される位置情報に応じて背景画像を表示する方向を変更する形態を説明したが、上記第１の実施形態と同様に、入力部４２によってユーザＵ１が指示する指示情報に応じて、指示された位置及び方向に対応する背景を含む表示画像に変更する形態でもよい。この場合、表示画像における対象画像であるユーザＵ２の表示位置は、携帯端末８から供給される位置情報に応じて変更してもよい。すなわち、この場合、画像表示装置４の表示を鑑賞しているユーザＵ１は、自由に「観光地Ａ」を動き回り、その中で、実際に「観光地Ａ」に存在しているユーザＵ２の位置情報に対応する位置に、ユーザＵ２の画像を表示する。これにより、ユーザＵ１は、さらに臨場感のある表示画像を味わうことができる。
【０１４２】
また、上記第６の実施形態において、ユーザＵ２が１人の場合の形態を説明したが、複数の携帯端末８を用いて、複数のユーザＵ２に対応させる形態でもよい。この場合、多人数で旅行しているような体験を楽しむことができる。
また、上記の各実施形態において、画像表示装置４が表示画像とともに音情報を出力する形態を説明したが、表示画像に応じて、風などを出力する形態でもよい。
【０１４３】
上述の画像表示システム１（１ａ〜１ｅ）における各装置は、内部に、コンピュータシステムを有している。そして、上述した画像表示システム１（１ａ〜１ｅ）の処理過程は、プログラムの形式でコンピュータ読み取り可能な記録媒体に記憶されており、このプログラムをコンピュータが読み出して実行することによって、上記処理が行われる。ここでコンピュータ読み取り可能な記録媒体とは、磁気ディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＤＶＤ−ＲＯＭ、半導体メモリ等をいう。また、このコンピュータプログラムを通信回線によってコンピュータに配信し、この配信を受けたコンピュータが当該プログラムを実行するようにしてもよい。
【符号の説明】
【０１４４】
１，１ａ，１ｂ，１ｃ，１ｄ…画像表示システム、２，２ａ…サーバ装置、３…画像処理装置、４…画像表示装置、５…店舗、６…ネットワーク、２４…登録課金部、４１…表示部、４３…通信部、４４…表示課金部、２３１…ユーザ画像記憶部、２３２…元画像記憶部、２１１，３１１，４５１…画像制御部、４５２…画像処理部
【特許請求の範囲】
【請求項１】
サーバ装置と、画像処理装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、
前記サーバ装置は、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部
を備え、
前記画像表示装置は、
画像を表示する表示部と、
入力された前記識別情報を送信する通信部と、
を備え、
前記画像処理装置は、
送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部
を備え、
前記画像表示装置は、
前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部
を備えることを特徴とする画像表示システム。
【請求項２】
前記元画像には、前記表示画像の背景となる背景画像、又は、前記表示画像に表示する対象物となる対象画像が含まれる
ことを特徴とする請求項１に記載の画像表示システム。
【請求項３】
前記画像処理部は、
前記画像処理として、前記背景画像と前記対象画像とを合成し、前記表示画像を生成する
ことを特徴とする請求項２に記載の画像表示システム。
【請求項４】
前記画像処理部は、
前記ユーザによって指示された位置及び方向に対応する背景を含む前記表示画像に変更する
ことを特徴とする請求項２又は請求項３に記載の画像表示システム。
【請求項５】
前記画像処理部は、
前記ユーザによって指示された前記対象物の向き情報に応じて、前記表示画像における前記対象物の向きを変更する
ことを特徴とする請求項２から請求項４のいずれか１項に記載の画像表示システム。
【請求項６】
前記背景画像は、所定の場所において位置を移動させて、前記位置それぞれを中心に水平方向に３６０度の視野を撮影した全方位画像であることを特徴とする請求項２から請求項５のいずれか１項に記載の画像表示システム。
【請求項７】
前記記憶部には、
前記表示画像の背景となる背景画像、及び、前記表示画像に表示する対象物となる対象画像のうちの、前記ユーザにより指定された画像が、前記ユーザ画像として記憶される
ことを特徴とする請求項１から請求項６のいずれか１項に記載の画像表示システム。
【請求項８】
前記サーバ装置は、
前記背景画像又は前記対象画像が予め記憶されている元画像記憶部と、
前記元画像記憶部に記憶されている前記背景画像又は前記対象画像のうちの、前記ユーザによって選択された画像を前記ユーザ画像として、前記識別情報と関連付けて前記記憶部に登録する登録部と、
を備えることを特徴とする請求項７に記載の画像表示システム。
【請求項９】
前記ネットワークを介して前記サーバ装置に接続されている画像登録装置であって、
前記記憶部に対して、前記識別情報と前記ユーザ画像とを関連付けて登録させる登録処理部を有する画像登録装置
を備えることを特徴とする請求項１から請求項８のいずれか１項に記載の画像表示システム。
【請求項１０】
前記サーバ装置は、
前記ユーザ画像が前記識別情報と関連付けて前記記憶部に登録される場合に、前記ユーザに対して課金する登録課金部
を備えることを特徴とする請求項８又は請求項９に記載の画像表示システム。
【請求項１１】
前記表示画像は、パノラマ画像であることを特徴とする請求項１から請求項１０のいずれか１項に記載の画像表示システム。
【請求項１２】
前記画像表示装置は、
前記表示画像を表示する時間、又は、前記表示画像のデータ量に応じて、前記ユーザに対して課金する表示課金部を備える
ことを特徴とする請求項１から請求項１１のいずれか１項に記載の画像表示システム。
【請求項１３】
サーバ装置と画像表示装置とがネットワークを介して接続されている画像表示システムであって、
前記サーバ装置は、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部と、
前記画像表示装置から送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、
を備え、
前記画像表示装置は、
画像を表示する表示部と、
入力された識別情報を送信する通信部と、
前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、
を備えることを特徴とする画像表示システム。
【請求項１４】
サーバ装置と画像表示装置とがネットワークを介して接続されている画像表示システムであって、
前記サーバ装置は、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部
を備え、
前記画像表示装置は、
画像を表示する表示部と、
入力された前記識別情報を送信する通信部と、
送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、
前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、
を備えることを特徴とする画像表示システム。
【請求項１５】
位置情報、時刻情報、又は天候情報を取得し、取得した前記位置情報、前記時刻情報、又は前記天候情報を前記画像処理部に供給する携帯端末を備え、
前記画像処理部は、
前記位置情報、前記時刻情報、又は前記天候情報に応じて、前記表示画像を変更する
ことを特徴とする請求項１から請求項１４のいずれか１項に記載の画像表示システム。
【請求項１６】
画像を表示する表示部と、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して接続され、入力された前記識別情報を送信する通信部と、
送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を前記表示部に表示させる画像制御部と、
を備えることを特徴とする画像表示装置。
【請求項１７】
画像表示装置としてのコンピュータに、
通信部が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して、入力された前記識別情報を送信する通信手順と、
画像制御部が、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を表示部に表示させる画像制御手順と、
を実行させるためのプログラム。
【請求項１】
サーバ装置と、画像処理装置と、画像表示装置とがネットワークを介して接続されている画像表示システムであって、
前記サーバ装置は、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部
を備え、
前記画像表示装置は、
画像を表示する表示部と、
入力された前記識別情報を送信する通信部と、
を備え、
前記画像処理装置は、
送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部
を備え、
前記画像表示装置は、
前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部
を備えることを特徴とする画像表示システム。
【請求項２】
前記元画像には、前記表示画像の背景となる背景画像、又は、前記表示画像に表示する対象物となる対象画像が含まれる
ことを特徴とする請求項１に記載の画像表示システム。
【請求項３】
前記画像処理部は、
前記画像処理として、前記背景画像と前記対象画像とを合成し、前記表示画像を生成する
ことを特徴とする請求項２に記載の画像表示システム。
【請求項４】
前記画像処理部は、
前記ユーザによって指示された位置及び方向に対応する背景を含む前記表示画像に変更する
ことを特徴とする請求項２又は請求項３に記載の画像表示システム。
【請求項５】
前記画像処理部は、
前記ユーザによって指示された前記対象物の向き情報に応じて、前記表示画像における前記対象物の向きを変更する
ことを特徴とする請求項２から請求項４のいずれか１項に記載の画像表示システム。
【請求項６】
前記背景画像は、所定の場所において位置を移動させて、前記位置それぞれを中心に水平方向に３６０度の視野を撮影した全方位画像であることを特徴とする請求項２から請求項５のいずれか１項に記載の画像表示システム。
【請求項７】
前記記憶部には、
前記表示画像の背景となる背景画像、及び、前記表示画像に表示する対象物となる対象画像のうちの、前記ユーザにより指定された画像が、前記ユーザ画像として記憶される
ことを特徴とする請求項１から請求項６のいずれか１項に記載の画像表示システム。
【請求項８】
前記サーバ装置は、
前記背景画像又は前記対象画像が予め記憶されている元画像記憶部と、
前記元画像記憶部に記憶されている前記背景画像又は前記対象画像のうちの、前記ユーザによって選択された画像を前記ユーザ画像として、前記識別情報と関連付けて前記記憶部に登録する登録部と、
を備えることを特徴とする請求項７に記載の画像表示システム。
【請求項９】
前記ネットワークを介して前記サーバ装置に接続されている画像登録装置であって、
前記記憶部に対して、前記識別情報と前記ユーザ画像とを関連付けて登録させる登録処理部を有する画像登録装置
を備えることを特徴とする請求項１から請求項８のいずれか１項に記載の画像表示システム。
【請求項１０】
前記サーバ装置は、
前記ユーザ画像が前記識別情報と関連付けて前記記憶部に登録される場合に、前記ユーザに対して課金する登録課金部
を備えることを特徴とする請求項８又は請求項９に記載の画像表示システム。
【請求項１１】
前記表示画像は、パノラマ画像であることを特徴とする請求項１から請求項１０のいずれか１項に記載の画像表示システム。
【請求項１２】
前記画像表示装置は、
前記表示画像を表示する時間、又は、前記表示画像のデータ量に応じて、前記ユーザに対して課金する表示課金部を備える
ことを特徴とする請求項１から請求項１１のいずれか１項に記載の画像表示システム。
【請求項１３】
サーバ装置と画像表示装置とがネットワークを介して接続されている画像表示システムであって、
前記サーバ装置は、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部と、
前記画像表示装置から送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、
を備え、
前記画像表示装置は、
画像を表示する表示部と、
入力された識別情報を送信する通信部と、
前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、
を備えることを特徴とする画像表示システム。
【請求項１４】
サーバ装置と画像表示装置とがネットワークを介して接続されている画像表示システムであって、
前記サーバ装置は、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部
を備え、
前記画像表示装置は、
画像を表示する表示部と、
入力された前記識別情報を送信する通信部と、
送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、表示画像を画像処理により生成する画像処理部と、
前記画像処理部により画像処理された前記表示画像を前記表示部に表示させる画像制御部と、
を備えることを特徴とする画像表示システム。
【請求項１５】
位置情報、時刻情報、又は天候情報を取得し、取得した前記位置情報、前記時刻情報、又は前記天候情報を前記画像処理部に供給する携帯端末を備え、
前記画像処理部は、
前記位置情報、前記時刻情報、又は前記天候情報に応じて、前記表示画像を変更する
ことを特徴とする請求項１から請求項１４のいずれか１項に記載の画像表示システム。
【請求項１６】
画像を表示する表示部と、
ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して接続され、入力された前記識別情報を送信する通信部と、
送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を前記表示部に表示させる画像制御部と、
を備えることを特徴とする画像表示装置。
【請求項１７】
画像表示装置としてのコンピュータに、
通信部が、ユーザを識別する識別情報と関連付けられて、ユーザが画像処理に用いる画像であるユーザ画像が記憶されている記憶部を有するサーバ装置にネットワークを介して、入力された前記識別情報を送信する通信手順と、
画像制御部が、送信された前記識別情報と関連付けられている前記ユーザ画像であって、前記記憶部から読み出された前記ユーザ画像を少なくとも含む元画像に基づいて、画像処理された表示画像を表示部に表示させる画像制御手順と、
を実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１３−５５６０６（Ｐ２０１３−５５６０６Ａ）
【公開日】平成２５年３月２１日（２０１３．３．２１）
【国際特許分類】
【出願番号】特願２０１１−１９４１０８（Ｐ２０１１−１９４１０８）
【出願日】平成２３年９月６日（２０１１．９．６）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
【公開日】平成２５年３月２１日（２０１３．３．２１）
【国際特許分類】
【出願日】平成２３年９月６日（２０１１．９．６）
【出願人】（０００００４１１２）株式会社ニコン (12,601)
【Ｆターム（参考）】
[ Back to top ]