画像表示システムおよび画像表示方法
【課題】デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供する。
【解決手段】カラオケ用のサーバー３３は、カメラ１００で撮影したカメラ画像を受信し、格納する画像メモリ３３ｂと、カラオケ用のコンテンツを記憶する楽曲データベース３３ｅを有している。遷移効果部３３ｃは、リモコン３４ｅによって指定されたコンテンツの遷移効果に応じて、画像メモリ３３ｂに記憶されたカメラ画像の画像処理を行ない、この処理されたカメラ画像を、表示制御部３３ｆによってカラオケ装置３４ｂのモニタに表示する。
【解決手段】カラオケ用のサーバー３３は、カメラ１００で撮影したカメラ画像を受信し、格納する画像メモリ３３ｂと、カラオケ用のコンテンツを記憶する楽曲データベース３３ｅを有している。遷移効果部３３ｃは、リモコン３４ｅによって指定されたコンテンツの遷移効果に応じて、画像メモリ３３ｂに記憶されたカメラ画像の画像処理を行ない、この処理されたカメラ画像を、表示制御部３３ｆによってカラオケ装置３４ｂのモニタに表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示システムおよび画像表示方法に関し、詳しくは撮像装置等で撮影した画像を表示する画像表示システムおよび画像表示方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置の画像送信の容易さを利用して、ＰＣ通信やインターネット、携帯電話回線などの通信機能を利用して画像を送信し、その環境下で画像を楽しむ画像鑑賞法が普及している。こうした通信機能を利用すると、例えば、遠く離れた機器に画像を送信するばかりか、それと連携して新しいコンテンツを作成するような楽しみ方の応用が可能となる。さらに、画像を配信したり、画像を投稿するなど、従来にはない楽しみ方が広がってきている。
【０００３】
したがって、従来のような写真をアルバムで鑑賞する鑑賞法に縛られることなく、その状況に適した再生機器を利用して、画像を楽しむことが可能となってきている。また、従来から、カラオケ装置等にはおいては、画像を合成して表示する技術が提案されている。例えば、特許文献１には、ユーザーがデジタルカメラで撮影した画像をカラオケの背景画像として使用することのできるカラオケ装置が開示されている。このカラオケ装置は、画像を記憶したメモリカードをカラオケ用のマイクに挿入すると、画像を読み出し、モニタテレビに映しだす。
【０００４】
また、特許文献２には、カラオケで歌っているプレイヤーの顔等をビデオカメラで取り込み、背景の指定された位置に嵌め込み合成表示を行なうカラオケ装置が開示されている。さらに、特許文献３には、歌唱者が歌唱している姿をビデオカメラで撮影し、この画像と背景画像を合成して表示すると共に、この画像をプリントするカラオケ装置が開示されている。
【０００５】
さらに、特許文献４には、出演者の生の画像と背景画像を合成し、その際、ミラー反転処理を行なうことのできる画像合成装置が開示されている。さらに、特許文献５には、演奏曲を再生する際に、歌手の顔をカラオケの歌唱者顔に置き換えて表示するようにしたカラオケ装置が開示されている。
【０００６】
【特許文献１】特開２００４−２７１９５９号公報
【特許文献２】特開平１１−１７５０７９号公報
【特許文献３】特開平１０−２５４４６２号公報
【特許文献４】特開平９−２７５５２４号公報
【特許文献５】特開平６−１１０４８０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
このように、カラオケ装置において、画像を合成する技術は種々提案されている。しかし、特許文献１に開示のカラオケ装置では、カード内に記憶された画像がモニタに表示されるだけで、画像表示は単調なものとなってしまう。また特許文献２乃至特許文献５に開示されたカラオケ装置は背景画像等と歌唱者の画像等と画像を合成して表示するが、デジタルカメラ等の撮像装置において撮影した画像を楽しむものではなかった。
【０００８】
本願発明は、このような事情を鑑みてなされたものであり、デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するため第１の発明に係わる画像表示システムは、第１画像の表現効果を判定するトランジッション効果判定部と、上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像の画像データを編集する画像処理部と、上記第２画像を表示する第２画像表示部を備える。
【００１０】
第２の発明に係わる画像表示システムは、上記第１の発明において、上記第１画像は放送画像であり、上記第２画像はカメラで撮影された画像である。
また、第３の発明に係わる画像表示システムは、上記第１の発明において、上記第１画像はカラオケ用背景画像であり、上記第２画像はカメラで撮影された画像である。
さらに、第４の発明に係わる画像表示システムは、上記第１の発明において、所定の音楽を表す音楽データを記憶する音楽データ記憶部と、上記音楽を表す音声を発生する音声発生部と、上記第１画像を表示する第１画像表示部と、をさらに備え、上記所定の音楽に合わせて上記第１画像および上記第２画像を表示する。
【００１１】
さらに、第５の発明に係わる画像表示システムは、上記第１の発明において、上記トランジッション効果は、人物、風景、夜景などの画像の属するジャンル、画像の変化する方向、画像のズーミングの中の少なくとも１つに関する画像の遷移効果である。
さらに、第６の発明に係わる画像表示システムは、上記第２の発明において、上記第１画像データ、上記第２画像データ及び上記音楽データを送信する送信部と、上記送信部により送信された上記第１画像データ上記第２画像データ及び上記音楽データを受信する受信部をさらに備え、上記音声発生部、上記第１画像表示部及び上記第２画像表示部は、それぞれ上記受信部により受信した上記音楽データを表す音楽、上記第１画像データを表す上記第１画像及び上記第２画像データを表す上記第２画像を表示する。
【００１２】
上記目的を達成するため第７の発明に係わる画像表示方法は、第１画像の表現効果を判定するステップと、上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像データを編集するステップと、上記第２画像を表示するステップを備える。
【００１３】
上記目的を達成するため第８の発明に係わる画像表示システムは、第１画像の動画像を分析し分類する画像分析部と、上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定する比較部と、この比較部によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換える類似画像置き換え部と、この類似画像置き換え部によって置き換えられた画像を表示する表示部を備える。
【００１４】
第９の発明に係わる画像表示システムは、上記第８の発明において、上記画像分析部は、顔画像および風景画像の少なくとも一つを分析可能である。
第１０の発明に係わる画像表示システムは、上記第８の発明において、上記類似画像置き換え部によって、置き換えることのできなかった第２画像を、置き換えられなかった上記第１画像に等間隔で置き換える未対応画像置き換え部を具備する。
第１１の発明に係わる撮像装置は、上記第８の発明において、上記第１画像は、カメラによって撮影されたカメラ画像である。
第１２の発明に係わる撮像装置は、上記第８の発明において、上記第２画像は、カラオケ装置のコンテンツ、インターネット上のサーバーに保管された動画、またはテレビ放送のコマーシャルのいずれかである。
【００１５】
上記目的を達成するため第１３の発明に係わる画像表示方法は、第１画像の動画像を分析し、第１の画像を分類し、上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定し、この比較によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換え、この置き換えられた画像を表示する。
【発明の効果】
【００１６】
本発明によれば、デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供することができる。
【発明を実施するための最良の形態】
【００１７】
以下、図面に従って本発明を適用した画像表示システムを用いて好ましい実施形態について説明する。本発明の第１実施形態に係る画像表示システムは、カラオケシステムに適用したものであり、デジタルカメラで撮影したカメラ画像をカラオケ用のサーバーが受信し、カラオケの映像コンテンツの再生に応じてカメラ画像を再生表示するようにしている。
【００１８】
図１は、本発明の第１実施形態に係わるデジタルカメラとその周辺のブロック図である。ユーザーが使用するカメラ１００には、撮影レンズ２、ＡＦ（オートフォーカス）制御部２ａ、絞り２ｂ、絞り制御部２ｃ、撮像素子３、アナログフロントエンド（以下、ＡＦＥと略す）部４が設けられている。撮影レンズ２は、内部にフォーカスレンズを有し、入射した被写体２０の像を撮像素子３上に結像させる。
【００１９】
ＡＦ制御部２ａは、撮影レンズ２の合焦位置を、後述する画像処理部５内において画像処理を行い、いわゆる山登り法により検出し、フォーカスレンズを駆動して、合焦位置に移動させる。なお、山登り法は、撮影画像のコントラスト信号ピークから合焦位置（ピント位置）を検出する方式であるが、山登り法以外にも、例えば位相差法や三角測距法等公知の合焦方法に置き換えてもよい。ＡＦによって合焦位置に達すると、このときの撮影レンズ２を検出することにより、距離判定を行うことができる。この場合、撮影レンズ２がズームレンズのときには、ズーム位置等を加味して距離の判定を行う。
【００２０】
撮影レンズ２内または近傍に、シャッタや絞りの効果を奏する絞り２ｂが設けられる。絞り２ｂは、撮影時に所定の口径まで開き、露出が終了すると閉じて露光を終了させるものである。絞り制御部２ｃは、絞り２ｂを駆動して絞り径を設定する。この絞りを変えることによって、レンズの被写界深度が変化するので、背景のぼけ具合などを調整して、被写体を浮かび上がらせたり、背景をしっかりと描写したりするなど、表現の切り替えを行うことができる。撮像素子３は、多数の受光面（画素）からなるＣＣＤやＣＭＯＳセンサ等であり、撮影レンズ２を介して被写体２０からの像を受光しこれを画像信号に変換する。
【００２１】
アナログフロントエンド（ＡＦＥ）部４は、アナログデジタル変換（ＡＤ）手段を含み、撮像素子３からの信号をデジタル信号化する。そして、ＡＦＥ部４は、撮像素子３から出力される画像信号について各種処理を行う。また、ＡＦＥ部４には、撮像素子３のいくつかの画素をまとめて、一括して読み出す機能も設けられている。たとえば、４画素（２×２）や９画素（３×３）など、各画素の信号レベルが小さいときには、いくつかの画素信号を加算して、Ｓ／Ｎを向上させることができ、また、感度を上げることも出来る。
【００２２】
このような処理によって感度を上げることができ、シャッタスピードを速くする等、撮影上の工夫が可能となる。シャッタスピードが速いと、動いている被写体が止まっているように撮影することが可能となる。また、手振れなどを防止することができる。
【００２３】
また、ＡＦＥ部４は、撮像素子３の出力する信号を取捨選択する機能を有し、受光範囲の中から限られた範囲の画像データを抽出することが出来る。一般に撮像素子３の画素から間引いた画素信号を抽出する場合には、高速読出が可能となる。これにより構図確認用の画像信号を、画像処理部５によって高速処理し、表示制御部８ａを介して表示パネル８に表示することにより、フレーミングが可能となる。
【００２４】
ＡＦＥ部４の出力は、画像処理部５に接続されている。画像処理部５は、入力信号の色や階調やシャープネスを補正処理する。また、撮像素子３から得られた画像信号を所定のレベルに増幅して、正しい濃淡、正しい灰色レベルに設定する増感部を有している。これは、デジタル化された信号レベルが、所定レベルになるようにデジタル演算するものである。また、画像処理部５は、ライブ画像をリアルタイムに表示部に表示できるように、撮像素子３からの信号を表示パネル８に表示できるようなサイズに加工するリサイズ部を有する。この働きによって、撮影に先立って撮像素子に入射する像を確認でき、これを見ながら撮影時のタイミングやシャッタチャンスを決定することが出来る。
【００２５】
また、この画像処理部５の信号を利用して、撮像素子から入力されてくる画像の特徴などを判定する画像判定機能を有している。この画像判定機能としては、画像情報を加工して得られる輪郭情報から人の顔の目や口などの部分を判定する顔検出部５ａ、この顔検出部５ａを利用して顔等の表情を判定する表情判定部５ｂ、また個人の顔を識別して個人を認証する個人認証部５ｄを有している。また画像処理機能としては、さらに、画像の信号レベルのコントラストを判定して、被写体の距離を判定する距離判定部５ｃも有している。また、画像処理部５とその周辺補助部は、ＭＰＵ１と連携して、撮影画像の見栄を調整するにも用いられる。
【００２６】
このように、画像処理部５とその周辺の補助部（顔検出部５ａ、表情判定部５ｂ、個人認証部５ｄ等）は、写真撮影時に、ユーザーがどのような写真を撮ろうとしているかを判定して、撮影制御を最適化するために用いられる。
【００２７】
カメラ１００には、圧縮部６、記録部９ａ、記録メディア９、送受信部９ｃ、送信設定部９ｅ、表示パネル８、表示制御部８ａ及びマルチ画像処理部８ｂが設けられている。圧縮部６は、撮影時に画像処理部５から出力された信号を圧縮する。圧縮部６内には、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）４やＨ．２６４などの圧縮用コア部で構成される動画用の圧縮部及び ＪＰＥＧ（Ｊｏｉｎｔ
Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）コア部など静止画像用の圧縮部が設けられる。また、圧縮部６は記録メディア９に記録されている画像を表示パネル８に再生する際には、画像伸張も行なう。
【００２８】
記録部９ａは、圧縮された画像信号を記録メディア９に記録する。記録メディア９はカメラに着脱可能な保存用の記録媒体である。なお、画像信号の記録にあたっては、写真撮影した時の時間情報も併せて記録しても良い。撮影時間情報は、後述するＭＰＵ１内の時計部１ｔによって計測されており、ＭＰＵ１は画像と関連付を行なう。
【００２９】
メディア９や記録部９aに記録された撮影画像データは、送受信部９ｃによって、インターネット、携帯電話網や電話回線などの通信網３２経由で、画像を管理するサーバー３３等の他の機器に転送することができる。また、送受信部９ｃは送信設定部９ｅと接続されており、この送信設定部９ｅは画像を送信する場合等の送信先を指定する指定部である。撮影された画像は、指定先に即時送信も可能である。
【００３０】
送受信部９ｃには、無線ＬＡＮ９ｆと赤外光送受信機９ｇとが接続されている。赤外光受信機９ｇはカラオケ装置３４ｂと赤外光通信が可能であり、カラオケ装置３４ｂからカラオケ装置３４ｂに楽曲等を送信するサーバー３３のアドレスを取得することができる。また、無線ＬＡＮ９ｆは、ホットスポット３４ｃ（図２参照）において、サーバー３３と無線通信が可能である。これらの通信については、図２を用いて後述する。
【００３１】
表示パネル８は、例えば液晶や有機ＥＬ等から構成され、撮影時には観察用に被写体画像をスルー画表示（ライブビュー表示とも言う）し、再生時には伸張処理された記録画像を再生表示する。
【００３２】
表示制御部８aは、表示パネル８への表示を制御する。マルチ画像処理部８ｂは、表示パネル８上に、複数の画像を表示する場合の制御部である。このマルチ画像処理部８ｂによって、撮影した画像や撮影する画像の上に、送信先のアドレスの文字表示や種々の警告表示をすることが可能である。なお、表示パネル８には、撮影して送信済み画像を一覧表示して、そこからサーバー３３が運営するブログサービスなどにアップする画像や、アップして、ブログに表示する時のレイアウトを選択できるようにしてもよい。
【００３３】
カメラ１００には、補助光発光部１１、マイク１２、ＭＰＵ（Micro Processing Unit）１、レリーズスイッチ１ａ、モード切替スイッチ１ｂ、他のスイッチ１ｃが設けられる。補助光発光部１１は、白色ＬＥＤやＸｅ放電発光管を有し、電流量で光量が制御できるようになっている。状況に応じて被写体２０に光を照射して、明るさの不足や不均一な明るさを防止する。マイク１２は、集音を行い、周囲の音声情報を取り込み、圧縮部６によって音声情報を音声圧縮し、音声圧縮データを記録部９によって記録メディア９に、画像データと関連付けて記録する。
【００３４】
ＭＰＵ１は、カメラ全体の制御を司る制御手段である。レリーズスイッチ１ａ、モード切替スイッチ１ｂ、他のスイッチ１ｃおよびプログラム等を記憶したＲＯＭ(不図示)が、ＭＰＵ１に接続される。ＭＰＵ１内には、日や時刻を検出するための時計部１ｔが設けられており、写真の撮影日時を検出し、撮影画像と関連付けを行う。なお、スイッチ１ｂ、１ｃは、スイッチを総称的に表示したものであって、実際には多数のスイッチ群から構成されている。また、ＭＰＵ１には、位置判定部１ｄが接続されており、この位置判定部１は、ＧＰＳ等により位置を検出する。この検出された位置を用いて撮影時の撮影位置と、前述の撮影日時を画像データと共にメディア９に記録する。
【００３５】
各スイッチ１ａ〜１ｃは、ユーザーの操作を検出して、その結果をマイクロコントローラからなる演算制御手段であるＭＰＵ１に通知する。ＭＰＵ１が、これらのスイッチの操作に従って動作を切り換える。また、ＭＰＵ１は撮影時には、ＡＦ制御部２ａや絞り制御部２ｃ等の制御を行う撮影制御機能や取得画像データ・取得音声データ等の記録部９ａや記録メディア９への記録制御機能を果たす。
【００３６】
このように構成されているカメラ１００は、無線ＬＡＮ９ｆ、赤外光送受信機９ｇを介して、カラオケ装置３４ｂやサーバー３３と接続している。サーバー３３は、カラオケの音楽や歌詞を含む映像コンテンツを供給し、カラオケ供給元によって、サーバーは異なる。そのため、本実施形態において、デジタルカメラと協働するカラオケ供給元のアドレスを取得し、カメラ１００に指定する必要がある。この指定は、種々の方法があり、例えば、カメラ１００にタッチパネル等を設け、これから直接入力するようにしてもよい。
【００３７】
また、カラオケ装置３４ｂにそのアドレスの情報を出力させる機能を持たせるようにしてもよい。本実施形態では、カメラ１００が赤外光送受信機９ｇを有し、カラオケ装置３４ｂも同様に赤外光送受信機の構成を持たせている。カメラ１００からカラオケ装置３４ｂに指示信号を赤外通信で送信すると、カラオケ装置３４ｂが応答して、カラオケ用のサーバー３３のアドレスを表す赤外信号をカメラ１００に返信する。
【００３８】
なお、カラオケ装置３４ｂがカメラ１００から指示信号を受信すると、指示信号をデコードして通信網（ＮＥＴ）３２を通じて、カラオケ用のサーバー３３と通信するようにしてもよい。カメラ１００で撮影した画像から選択されたカメラ画像を、指定先のサーバー３３に送信すれば、カラオケ用画像として表示可能となる。このような構成をとることにより、撮影画像をカラオケ用画像に置き換え、カラオケ装置３４ｂに自分が撮影した映像を表示して、カラオケ用画像表示用の大画面のカラオケモニタ３４ａで楽しむようにしている。
【００３９】
図２（ａ）はカメラ１００がサーバー３３のアドレスを取得する状態を示す図である。カメラ１００とカラオケ装置３４ｂの間で赤外線通信し、無線ＬＡＮ９ｆのホットスポット３４ｃや通信網（ＮＥＴ）３２を介して、アクセスするサーバー３３のアドレスを取得する。
【００４０】
また、図２（ｂ）は、カメラ１００からカメラ画像を送信し、カラオケモニタ３４ａへのカメラ画像の表示時を示す。カメラ１００は、サーバー３３のアドレスを用いて、ホットスポット３４ｃを介して、カメラ内のカメラ画像をサーバー３３に送信する。サーバー３３は、カメラ画像を後述するような効果を持たせた画像に処理し、ホットスポット３４ｃを介して、順次、カラオケ装置３４ｂに送信し、カラオケモニタ３４ａはこの画像を表示する。したがって、カラオケモニタ３４ａには、通常のカラオケコンテンツの映像またはカメラ画像を再生表示可能である。
【００４１】
また、カラオケ装置３４ｂには、サーバー３３から送信されてきた音声データに基づいて楽曲を流すためのスピーカ等の音声発生部（不図示）を有する。マイク３５を持ったユーザーは、カメラ１００によって撮影された身近な写真を見ながらカラオケを楽しむことができる。また、カラオケの歌詞が分かるように、サーバーが歌詞を合成して送信するようにしてもよく、もとの画像の歌詞の部分は隠さないように表示してもよい。
【００４２】
次に、カラオケ用のサーバー３３による撮影画像の画像処理について、図３を用いて説明する。図３（ａ）は、カラオケ用の映像コンテンツの時間変化の様子を示す図であり、この図では画面上の歌詞は省略してある。カラオケの歌唱者は、歌詞をみて思い出しながら歌って楽しむが、その際、歌の雰囲気に応じて、情景を喚起したり、ムードを盛り上げる動画が映しだされる。
【００４３】
このカラオケ用の映像は、風景になったり、人物が現われたりするなど、画像を効果的に変化させ、ストーリー性があり、情感を高めようにしている。すなわち、図３（ａ）の例のように、風景画像や、ズーミング処理やパンニング処理など画像を効果的に変化させている。また、歌詞の区切りで、画像を変えるなどの工夫もなされている。これらは、プロが撮影した、質の高いもので、飽きの来ない工夫がなされ、様々な効果が施されている。
【００４４】
本実施形態においては、プロによって撮影され編集されたカラオケ用画像にリンクさせて素人が撮影したカメラ画像を画像処理することにより、見栄えのよい表示にすることを可能としている。また、この画像の効果は歌と不可分であり、本実施形態において、カラオケ画像に置き換えて表示するデジタルカメラの画像は、この効果に即した画像にすることが好ましい。
【００４５】
しかし、カラオケ用の映像と、一般の撮影者が撮影した画像の主題が全く同じという可能性は高くないので、少なくとも、歌詞の区切りにあわせてカメラ画像を代えたり、また画像の遷移、例えばズーミングやパンニングに合わせてカメラ画像の画像処理を行なう等、時間の移ろいを示すテイストを共通化して、カラオケの楽曲との違和感をなくし、飽きの来ない画像表示を行うようにしている。
【００４６】
すなわち、本実施形態においては、図３（ｂ）に示すように、例えば、カラオケ画像が風景なら風景のカメラ画像を表示し、カラオケ画像が違う画像になったら、それに合わせてカメラ画像を変え、またカラオケ画像にズーミングやパンニング効果がなされると、カメラ画像にも同様の効果を生ずる画像処理を行なって、プロの画像切換と同様の手法となる画像処理を行なって飽きがこないようにしている。
【００４７】
このような画像表示を行なうためのサーバーを含めたシステムについて、図４を用いて説明する。図４は、本実施形態に係わる画像表示システムのブロック図であり、カメラ１００、サーバー３３および通信機能を有するカラオケ装置３４ｂ等から構成される。サーバー３３は、カメラ１００およびカラオケ装置３４ｂと送受信するための通信部３３ａを有する。この通信部３３ａから入力した画像等を記憶するための画像メモリ３３ｂと、この記憶された画像に対してズーミング、パンニング、フェードアウト、フェードイン等の遷移効果を生ずる画像処理を行なうための遷移効果部３３ｃと、この遷移効果部３３ｃによって処理された画像等の表示を制御する表示制御部３３ｆを有する。
【００４８】
また、サーバー３３は検索部３３ｄを有し、この検索部３３ｄはカラオケ装置３４ｂと通信部３３ａを介して要求された楽曲を楽曲データベース３３ｅから検索する。楽曲データベース３３ｅは、歌詞付き映像と伴奏音楽からなるカラオケ用コンテンツのデータベースであり、検索部３３ｄによって検索されたカラオケ用コンテンツを遷移効果部３３ｃに送出可能である。
【００４９】
このように本実施形態に係わる表示システムは構成されている。カメラ１００で選択されたカメラ画像は、ホットスポット等で無線ＬＡＮ部９ｆを介してサーバー３３に送信される。サーバー３３は、通信部３３ａによってカメラ画像を入力すると、画像メモリ３３ｂに記録する。
【００５０】
一方、カラオケの楽曲選択用のリモコン３４ｅによって楽曲が指定されると、検索部３３ｄはデータベース３３ｅから歌詞つきの映像と伴奏音楽からなるコンテンツを検索し、通信部３３ａを介して、カラオケ装置３４ｂに送信する。このカラオケ用コンテンツが送信されてくると、モニタ３４ａに画像が表示され、スピーカから伴奏音楽が流れる。ユーザー（歌唱者）はマイク３５を用いて歌うが、このときの画像は、オリジナルの画像に加え、画像メモリ３３ｂ内に記憶されているデジタルカメラ１００によるカメラ画像が表示される。
【００５１】
撮影画像の表示にあたっては、カラオケのオリジナル画像の遷移効果を効果部３３ｃで判定し、画像メモリ３３ｂ内に記憶されているカメラ画像を選択し、これにカラオケ画像と同様な効果を遷移効果部３３ｃによって付加する。この遷移効果が施されたカメラ画像を、表示制御部３３ｆは、適宜、カラオケ用オリジナル画像と置き換えて表示制御を行う。このような制御を行うことにより、図２（ｂ）を用いて説明したような効果を得ることが可能である。
【００５２】
次に、デジタルカメラ１００の制御について、図５に示すフローチャートを用いて説明する。まず、撮影モードか否かの判定を行なう（Ｓ１）。このカメラ１００は、被写体像をライブビュー表示し、レリーズ操作によって撮影・記録する撮影モードと、記録された画像を再生表示する再生モードと、カラオケ装置３４ｂと通信し、通信先のアドレスを取得する通信先取得モードと、この取得したアドレスに基づいてカラオケ用のサーバー３３と通信する通信モード等のモードを有している。
【００５３】
ステップＳ１おける判定の結果、撮影モードであった場合には、ライブビュー表示を行なう（Ｓ２）。ライブビュー表示は、撮像素子３によって取得した画像データに基づいて表示パネル８に被写体画像を動画表示する。続いて、レリーズ釦が全押し操作されたか、すなわちレリーズ操作されたかの判定を行なう（Ｓ３）。判定の結果、レリーズ操作されていなかった場合には、ステップＳ１に戻り、前述の動作を繰り返す。
【００５４】
一方、ステップＳ３における判定の結果、レリーズ操作されていた場合には、撮影を行い（Ｓ４）、記録する（Ｓ５）。すなわち、撮像素子３によって画像データを取得し、この画像データを圧縮部６によって圧縮処理した後、記録部９ａによって記録メディア９に記録する。記録が終わると、リターンし、ステップＳ１から繰り返す。
【００５５】
ステップＳ１における判定の結果、撮影モードではなかった場合には、次に、再生モードか否かの判定を行なう（Ｓ１１）。判定の結果、再生モードであった場合には、再生表示を行なう（Ｓ１２）。再生表示は、記録メディア９に記録されている撮影画像の画像データを読出し、伸張処理した後、表示パネル８に表示する。
【００５６】
続いて、サムネイル表示を行なうか否かの判定を行なう（Ｓ１３）。ユーザーがサムネイル表示を望む場合には、デジタルカメラ１００の背面等に設けられているスイッチを操作してサムネイル表示モードに設定するので、このステップではこのモードに設定されたか否かの判定を行なう。判定の結果、サムネイル表示モードであった場合には、サムネイル表示を行なう（Ｓ１４）。このサムネイル表示は、記録メディア９に記録されている全画像データを読出し、通常より小さい画像で表示パネル８に複数駒の画像を同時に表示する。
【００５７】
次に、カラオケ装置３４ｂに表示する画像群、すなわちカラオケ候補の選択を行なうか否かの判定を行なう（Ｓ１５）。これは、前述のサムネイル表示の選択と同様にカメラ１００のスイッチの操作によりカラオケ候補の選択モードが設定されているか否かにより判定する。判定の結果、カラオケ候補の選択が設定されていた場合には、カラオケ候補の選択を行なう（Ｓ１６）。カラオケ候補の選択は、サムネイル表示されている撮影画像の中から、カラオケ装置３４ｂのモニタ画像として表示する画像を、タッチパネルや十字キーを利用して選択する。
【００５８】
次に、カラオケ候補選択が終了したか否かを判定し（Ｓ１７）、判定の結果終了した場合には、候補指示を行なう（Ｓ１８）。この候補指示は、選択された撮影画像に対して、送信候補信号が付加され、後述するステップＳ２７において、カラオケ装置３４ｂのサーバー３３に対して選択された撮影画像を送信する。候補指示が終わると、または、ステップＳ１３、Ｓ１５、Ｓ１７においてＮＯであった場合には、リターンする。
【００５９】
ステップＳ１１において、再生モードでなかった場合には、通信先取得を行なうか否かの判定を行なう（Ｓ２１）。この通信先取得は、カラオケ用のサーバー３３のアドレスを取得するものであって、デジタルカメラ１００の操作スイッチを操作することによって行なわれるので、このステップではこの操作がなされたか否かの判定を行なう。
【００６０】
ステップＳ２１の判定の結果、通信先取得を行なう場合には、カラオケ用のサーバー３３のアドレスを受信し（Ｓ２２）、次いで、この受信が終了したかを判定する（Ｓ２３）。このステップにおいて、デジタルカメラ１００の赤外線送受信機９ｇを介してカラオケ装置３４ｂからサーバー３３のアドレスを取得する。
【００６１】
サーバー３３のアドレスの受信が終了すると、サーバー３３と通信を行なうか否かの判定を行なう（Ｓ２４）。デジタルカメラ１００は、ホットスポット等の場所で無線によって通信を行なうことができ、このステップでは、ユーザーによってこの通信モードが設定されたか否かの判定を行なう。
【００６２】
ステップＳ２４における判定の結果、通信モードに設定された場合には、デジタルカメラ１００の無線ＬＡＮ９ｆによってサーバー３３と通信を行なう（Ｓ２５）。続いて、通信が確立したか否かの判定を行なう（Ｓ２６）。判定の結果、通信が確立した場合には、ステップＳ１６において選択され、ステップＳ１８において候補指示信号が付加された画像データを、サーバー３３に送信する（Ｓ２７）。一方、無線通信が確立できなかった場合には、通信ができず送信できなったことを警告する（Ｓ２８）。ステップＳ２７、Ｓ２８が終わると、またはステップＳ２４においてＮｏであった場合には、ステップＳ１に戻る。
【００６３】
次に、サーバー３３の動作について、図６に示すフローチャートを用いて説明する。まず、カメラとの通信か否かの判定を行なう（Ｓ１０１）。このステップは、カメラ１００との通信が確立すると、ステップＳ２７においてカメラ１００は、カラオケ候補用の撮影画像を送信するので、この通信がなされているか否かの判定を行なう。判定の結果、通信がなされていると、画像取得を行なう（Ｓ１０２）。ここで取得されたカメラ画像の画像データは画像メモリ３３ｂに格納される。
【００６４】
次に、画像データの取得が終了したか否かを判定し（Ｓ１０３）、判定の結果、終了した場合には、各画像の判定を開始する（Ｓ１０４）。画像の判定を開始すると、顔判定を行ない（Ｓ１０５）、風景判定を行い（Ｓ１０６）、小物判定を行なう（Ｓ１０７）。ここでの各ステップでは、各画像が顔を含む顔画像か、顔を含まず、上の方が明るく、被写体が遠距離である風景画像か、近い距離で撮ったアクセサリーや日用雑貨など小物か、などの画像分類と整理を行う。次いで、全画像について、ステップＳ１０５からステップＳ１０７の判定が終了したかを判定し（Ｓ１０８）、終了した場合には、リターンする。
【００６５】
ステップＳ１０１における判定の結果、カメラ通信ではなかった場合には、カラオケ装置３４ｂから曲目指定の通信がなされか否かの判定を行なう（Ｓ１１１）。判定の結果、曲目指定のなされていない場合には、ステップＳ１０１に戻り、一方、曲目指定がなされた場合には、コンテンツ検索を行なう（Ｓ１１２）。
【００６６】
次いで、検索されたコンテンツの中に、ステップＳ１０２において取得されたカメラ画像が有るか否かを判定する（Ｓ１１３）。判定の結果、カメラ画像がなかった場合には、ステップＳ１１７にスキップするが、カメラ画像があった場合には、ステップＳ１１４からＳ１１６において、検索された画像コンテンツがカメラ画像と類似しているかを判定し、類似像をカラオケコンテンツの画像に当てはめて入れ替えを行う。すなわち、ステップＳ１１４において、カメラ画像の画像内容の分析を行い（Ｓ１０５−１０７に相当）、カラオケコンテンツの画面変化の遷移効果をＳ１１５で判定し、それが終了すると、カラオケコンテンツの画像の画像置き換えを行なう（Ｓ１１６）。これらのステップは図７および図８において詳述する。
【００６７】
ステップＳ１１２からステップＳ１１６において処理されたカラオケコンテンツの準備がＯＫであるか否かを判定し（Ｓ１１７）、ＯＫであれば、再生をスタートするか否かの判定を行なう（Ｓ１２１）。判定の結果、再生スタートすると、カラオケコンテンツの再生を開始し、伴奏音楽と、オリジナル画像を再生する（Ｓ１２２）。
【００６８】
次に、コンテンツ再生中のオリジナル画像と対応するカメラ画像があるか判定する（Ｓ１２３）。この判定は、ステップＳ１１６において置き換え画像（＝対応画像）があったか否かの判定である。判定の結果、対応画像がなければ、ステップＳ１２２に戻り、オリジナル画像を再生する。一方、対応画像があれば、次に、そのオリジナル画像に遷移効果のある画像か否かの判定を行なう（Ｓ１２４）。
【００６９】
判定の結果、遷移効果があれば、遷移効果を考慮した再生を行なう（Ｓ１２５）。すなわち、オリジナル画像と同様の遷移効果で表示できるように、カメラ画像に画像処理を施す。後述するステップＳ１６６（図７）において、Ｗ側判定されていれ、縮小ズームであり、最初にカメラ画像の一部分を表示し、だんだん全体を拡大表示して、同等の効果とする。また、ステップＳ１６７においてＴ側判定されていれば、拡大ズームであり、最初に全体画像を表示し、だんだん一部分（顔など）を拡大表示して、同等の効果を奏するようにする。さらに、パンニングの場合には、画面の一部から他の一部に表示部分を移すような表示を行う。この場合、全画像が表示できないので、最後に、オリジナル画像におけるパンニング効果からはなれて、全画面表示を行う等の工夫を行う。
【００７０】
一方、ステップＳ１２４における判定の結果、遷移効果がなければ、対応画像に遷移効果を施すことなく、通常効果にてスライドショー形式で再生する（Ｓ１２８）。ステップＳ１２５またはステップＳ１２８を終えると、コンテンツ再生が全て終了したか否かを判定し、終了していない場合には、ステップＳ１２３に戻り、一方、終了した場合には、リターンする。
【００７１】
次に、ステップＳ１１４およびステップＳ１１５（図６）におけるコンテンツ分析、遷移効果判定のサブルーチンについて、図７を用いて説明する。まず、カラオケ用コンテンツの高速再生を開始する（Ｓ１５１）。続いて、コンテンツのオリジナル画像の中に顔があるか否かの判定を行い（Ｓ１５２）、判定の結果、顔がある場合には、主題が顔と判定する（Ｓ１６１）。
【００７２】
ステップＳ１５２の判定の結果、顔がなかった場合には、次に、一面が明るいか否かの判定を行い（Ｓ１６２）、一面が明るかった場合には、主題が風景であると判定する（Ｓ１６２）。一面が暗くて点光源がちりばめられている画像の場合には、主題が夜景と判定し、風景に分類してもよい。ここまでが、図６のステップＳ１１４のコンテンツ分析のサブルーチンに相当する。
【００７３】
次に、オリジナル画像が右から左へ等と動いているか、すなわちパンニングが行なわれているか否かの判定を行なう（Ｓ１５４）。判定の結果、パンニングがなされていると、効果がパンニングと判定する（Ｓ１６６）。ステップＳ１５４における判定の結果、パンニングではなかった場合には、オリジナル画像がズーミングしているか、すなわち拡大または縮小しているか否かの判定を行なう（Ｓ１５５）。
【００７４】
ステップＳ１５５における判定の結果、拡大または縮小である場合には、拡大か否かの判定を行なう（Ｓ１６５）。判定の結果、拡大でなければ、ワイド側と判定し（Ｓ１６６）、一方、拡大であれば、テレ側と判定する（Ｓ１６７）。すなわち、縮小・拡大するかでズーミングの判定を行い、拡大であればテレ側ズーム、縮小であればワイド側ズームとする。ステップＳ１５４からステップＳ１６７までが、図６のステップＳ１１５の遷移効果に相当する。
【００７５】
以上のステップＳ１５２からステップＳ１６７は、各画面ごとに行う必要があることから、次に、画面の切り替えシーンであるか否かの判定を行なう（Ｓ１５６）。判定の結果、画面の切り替えシーンでない場合には、ステップＳ１５２に戻り、前述の判定等を繰り返す。一方、画面の切り換えシーンであった場合には、場面内容を判定する（Ｓ１５８）。続いて、カラオケ用のコンテンツの全てのシーンについてステップＳ１５２からステップＳ１５８での判定等が終了したかを判定する（Ｓ１５９）。ステップＳ１５９における判定の結果、終了していない場合には、ステップＳ１５２に戻り、一方、終了した場合には、図６のフローに戻る。
【００７６】
次に、ステップＳ１１６（図６）における画像置き換えのサブルーチンについて、図８を用いて説明する。このサブルーチンでは、サーバー３３がカラオケ用コンテンツのオリジナル画像をカメラ画像に置き換えを行なう。まず、オリジナルの画像コンテンツ（カラオケビデオ）のシーンと、カメラ画像のシーンの比較を開始する（Ｓ２０１）。続いて、画像比較の結果、類似画像が存在するか否かの判定を行なう（Ｓ２０２）。類似画像か否かは、例えば、顔画像であるか、風景画像であるか等の判定である。
【００７７】
ステップＳ２０２における判定の結果、類似画像がない場合にはステップＳ２０４にスキップし、一方、類似画像が有った場合には、類似シーンの置き換え、すなわち、オリジナル画像をカメラ画像で置き換えを行なう（Ｓ２０３）。続いて、全シーンについて判定が終了したかを判定し（Ｓ２０４）、終了していない場合にはステップＳ２０２に戻り、全シーンについて判定が終わるまで、これらのステップを繰り返す。
【００７８】
一方、ステップＳ２０４の判定の結果、終了した場合には、未対応カメラ画像が有るか否かの判定を行なう（Ｓ２０５）。このステップでは、カメラ１００からサーバー３３に表示候補としてカメラ画像が送信されたが、ステップＳ２０３における類似シーンの置き換えのできていない画像があるかどうかを判定する。判定の結果、未対応カメラ画像がなければ、このサブルーチンを終了して、図６のフローに戻る。
【００７９】
一方、判定の結果、未対応カメラ画像が有る場合には、未対応コンテンツシーンが多いか、すなわち、置き換えられなかったオリジナルのシーンの数と、オリジナルのカメラ画像の数を比較する（Ｓ２０５）。判定の結果、置き換えられなかったシーンのほうが多い場合は、略等間隔で古い画像から置き換える（Ｓ２０７）。一方、判定の結果、置き換えられなかったカメラ画像の方が多い場合には、カメラ画像が全て置き換え表示できるように、時系列（撮影順）に未対応コンテンツのオリジナル画像を置き換えていく。このために、置き換えられなかったカラオケ用コンテンツの長いシーンについては分割し（Ｓ２１１）、略等間隔で古い画像から置き換えを行なう（Ｓ２１２）。
【００８０】
なお、ステップＳ２０７とステップＳ２１２における画像の置き換えでは、両画像の類似性は問わないようにする。このようにして、カラオケ用のコンテンツのオリジナル画像をシーンと類似性の高いカメラ画像に置き換える。ここで置き換えられた画像は、ステップＳ１２３（図６）において、対応画像有りと判定され、カメラ画像が再生される。
【００８１】
ステップＳ２０７またはステップＳ２１２における画像の置き換えが終わると、またはステップＳ２０５において、未対応カメラ画像がないと判定されると、このサブルーチンを終了し、図６のフローに戻る。
【００８２】
このように、本実施形態においては、カラオケコンテンツでの画像の編集の仕方や、画像の効果を利用して、カメラ画像を再生するようにしている。このため、カメラ画像を単にスライドショー形式で再生するよりは、鑑賞者を飽きさせることなく、表示することができる。
【００８３】
また、カラオケボックス内の環境は、最新鋭のＡＶ機器が揃っており、さらにネットワーク環境にも接続され、多くの友人が集まり、写真画像を鑑賞するには相応しい理想的な鑑賞環境である。本実施形態は、この環境を有効利用することができ、効果的な写真鑑賞を可能としている。また、最近では、膨大な曲目データに対応するために、インターネットなどを利用して、外部のサーバー等からのカラオケコンテンツは配信されており、本実施形態では、カラオケ用のサーバー３３にカメラ画像を送信することにより、このサーバー３３によって画像処理を施すことができるので、大変便利である。
【００８４】
なお、本実施形態においては、カメラ画像とコンテンツ画像を、おのおの分類して、置き換える例を示したが、もちろん、カメラ画像をそのまま利用して、画像検索の応用にて、類似シーンを判定するようにしてもよい。すなわち、本実施形態のように、一度、主題を「顔」、「風景」と分けて分類してから、その分類に沿った類似画像を探すのではなく、画像同士を比較して画像と画像の一致度を判定することにより類似画像を探すようにしてもよい。また、本実施形態においては、伴奏音楽も一緒に再生されていたが、これに限らず、鑑賞専用にして、音楽にカラオケではなく歌も自動で付与するようにしてもよい。
【００８５】
次に、本発明の第２実施形態について、図９乃至図１２を用いて説明する。第１実施形態では、カラオケ用のサーバー３３にカメラ画像を送信し、カラオケ用コンテンツの画像変化に合わせて、カメラ画像を再生するようにしていた。第２実施形態においては、インターネット上のサーバーに投稿された動画の画像変化に合わせて、カメラ画像を再生するようにしている。
【００８６】
近年、インターネットに接続可能なテレビ（ＴＶ）３４ｇが出現しており、家族の団欒の際に、こうした動画投稿サイトにある画像を、リモコン３４ｈを操作して楽しむことが可能である。動画投稿サイトに投稿された画像が、非常に印象的なノスタルジーを感じさせる映像や音楽である場合、この映像を自分が撮影した画像に置換え、家族の歴史のような形で回想したくなることもある。そこで、本実施形態においては、投稿動画の変化に合わせて、カメラ画像を再生するようにしている。
【００８７】
図９は、画像配信サーバー１３３を含む画像表示システムのブロック図である。この画像配信サーバー１３３は、画像加工部１３３Ａと動画配信部１３３Ｂとから構成されている。動画配信部１３３Ｂは、投稿動画を格納する動画データベース１３３ｅと、このデータベース１３３ｅに格納されている投稿動画中か、ユーザーの指定によるタイトルやキーワード等に基づく検索を行なう検索部１３３ｄとから構成される。
【００８８】
画像加工部１３３Ａは、通信部１３３ａ、画像メモリ１３３ｂ、遷移効果部１３３ｃ、効果反映部１３３ｆ、メモリ１３３ｇとから構成されている。通信部１３３ａは、カメラ１００と無線ＬＡＮ等によって接続され、またテレビ３４ｇとはインターネット等を通じて接続されており、これらの機器と送受信が可能である。
【００８９】
画像メモリ１３３ｂは、カメラ１００から送信されたカメラ画像を記憶するメモリである。この画像メモリ１３３ｂの出力は、遷移効果部１３３ｃに接続されている。この遷移効果部１３３ｃは、画像メモリ１３３ｂに格納されたカメラ画像に対して、メモリ１３３ｇに格納されている投稿動画に基づいて、ズーミング、パンニング、フェードイン、フェードアウト等の種々の遷移効果を画像処理によって施す。
【００９０】
効果反映部１３３ｆは、遷移効果部１３３ｃによって遷移効果を施されたカメラ画像を、遷移効果を反映して再生するための制御部であり、ここでの再生された画像データは、通信部１３３ａを通じて、ネット接続されたテレビ３４ｇに出力される。メモリ１３３ｇは、テレビ３４ｇのユーザー等によって検索された投稿動画を記憶するためのメモリである。
【００９１】
動画配信部１３３Ｂは、ユーザーがネットワークを介して、タイトルやキーワードを検索部１３３ｄに入力すると、動画データベース１３３ｅ内から対応する動画を検索し、画像加工部１３３Ａを介さずに直接、テレビ３４ｇに配信し、投稿動画を再生することができる。なお、本実施形態においては、動画配信部１３３Ｂと画像加工部１３３Ａは同一の画像配信サーバー１３３内に設置してあるが、別々のサーバーで構成し、両者が連携できるようにしてもよい。
【００９２】
次に、画像配信サーバー１３３の動作について、図１０に示すフローチャートを用いて説明する。このフローチャートがスタートすると、まず、画像検索か否かの判定を行なう（Ｓ３０１）。判定の結果、画像検索であった場合には、選択するためのキーワードやタイトルを受付け、検索部１３３ｄによって検索を行なう（Ｓ３０２）。続いて、ユーザーからネット経由で再生操作がなされかを判定し（Ｓ３０３）、判定の結果、再生操作がなされると、対応した画像が再生される（Ｓ３０４）。次に、ユーザーによって終了の操作がなされたか、検索された動画が最後まで再生がなされたかを判定し（Ｓ３０５）、判定の結果、終了であれば、ステップＳ３０５をＹｅｓに分岐して再生終了となる。
【００９３】
ステップＳ３０１における判定の結果、画像検索ではなかった場合には、次に、類似効果再生要求か否かを判定する（Ｓ３１０）。これは、ユーザーが投稿動画の画像変化に合わせて、カメラ画像の切り換えや画像処理を施して楽しみたい場合に、投稿動画の再生要求の指定がなされたか否かを判定するステップである。判定の結果、再生要求がなされていた場合には、対応コンテツ情報（投稿動画）を画像加工部１３３Ａ内のメモリ１３３ｇに送信する（Ｓ３１１）。なお、コンテンツそのものでなくとも、音楽ならその曲名、画像ならその特徴のみを送信するようにしてもよい。
【００９４】
このように、プライベートなカメラ画像（素材）が入ったサーバー１３３の画像加工部１３３Ａと、公開されたコンテンツ（すでに作品化されたもの）が記録された画像配信部１３３ｂが連携してサービスを行っている。もちろん、前述したように、同一のサーバーが両方の機能を有し、これらのサービスを行っても良い。
【００９５】
ステップＳ３１０における判定の結果、再生要求がなされていない場合には、投稿操作がなされているか否かの判定を行なう（Ｓ３１５）。判定の結果、投稿操作がなされていない場合には、ステップＳ３０１に戻り、前述の動作を繰り返す。一方、判定の結果、投稿操作がなされていた場合には、投稿画像を受付け（Ｓ３１６）、検索しやすいようにタグを付けて動画データベース１３３ｅに記録される。
【００９６】
前述したように、自己のカメラ１００で撮影したカメラ画像は、通信部１３３ａを介してメモリ１３３ｂに保管されており、また投稿動画の中で再生要求のされた画像データは、メモリ１３３ｇに保管されている。ユーザーが画像配信サーバー１３３の画像加工部１３３Ａにアクセスし、メモリ１３３ｇに保管されている投稿画像の遷移効果を遷移効果部１３３ｃが分析し、その手本となる投稿動画に合わせて画像メモリ１３３ｂ内のカメラ画像を適宜選択して、その遷移効果に合わせて、効果反映再生部１３３ｆは、順次、再生を行う。この画像は、通信部１３３ａからネットを経由してテレビ３４ｇに送信され、鑑賞可能となる。
【００９７】
この画像加工部１３３Ａの動作について、図１１に示すフローチャートを用いて説明する。まず、ユーザーが、投稿された動画作品を見て、気にいった作品があれば、その旨の操作を行う。そこで、画像加工部１３３Ａは、効果取得の操作がなされか否かについて判定する（Ｓ３２１）。判定の結果、効果取得の操作がなされていた場合には、ユーザーが好んだ動画を画像配信部１３３Ｂより取得する（Ｓ３２３）。このステップＳ３２２と前述のステップＳ３１１は協働して行われる。
【００９８】
次に、画像加工部１３３Ａに取得した画像の再生を行なうか否かの判定を行い（Ｓ３２３）、再生を行なわない場合には、ステップＳ３２１に戻る。一方、再生を行なう場合には、効果を参照しながら、カメラで撮影した画像を再生する。すなわち、お手本となる投稿動画の画像の見せ方の効果を、カメラ画像に反映させ、音楽などの効果音は、そのまま利用する。
【００９９】
また、画像の切換なども、すでに作品化された動画を参照するので、特に複雑な設定を行わなくとも、効果的な再生が可能となる。このステップにおけるカメラ画像の加工は、図６のステップＳ１１４からＳ１１６およびステップＳ１２１からステップＳ１２９と同様の処理を行なえばよいので、詳しい説明は省略する。
【０１００】
こうした、動画効果を必要としない場合は、その旨の操作を行うと、ステップＳ３２１における判定においてＮｏで抜ける。次に、再生を行なうか否かの判定を行う（Ｓ３３０）。判定の結果、Ｎｏであった場合には、ステップＳ３２１に戻り、前述のステップを繰り返す。一方、再生を行なう場合には、写真画像を古い順に順次再生を行ない（Ｓ３３１）、再生が終了すると、リターンする。
【０１０１】
このように、動画投稿サイト（動画配信部１３３Ｂ）に保管されている画像を手本にして、ユーザーが撮影したカメラ画像を効果的に再生することが可能となる。なお、動画の複雑な画像の動きだけでなく、図１２のように動画に含まれる音楽によって、再生画像の効果を変化させてもよい。
【０１０２】
つまり、歌の場合、歌詞に区切りがあればカメラ画像の切換を行い、音量が増大すると、ズームアップし、同じ音を伸ばすような場合には、それを判定し、カメラ画像のパンニング処理を行う。また、音量が小さくなると、遠ざかる感じであることから、カメラ画像にズームダウンしていくような効果を画像に与え、音楽とシンクロさせて効果を際立たせるようにしてもよい。この第２実施形態の変形例においては、動画の画像だけではなく、音楽等の音声情報を用いて、カメラ画像の表示に変化を与えるようにしている。
【０１０３】
このように、本発明の第２実施形態においては、インターネット上のサーバーに記憶されている動画を利用し、カメラ画像の表示にあたって、画像の切り替えタイミングや、ズーミングやパンニング等の遷移効果をカメラ画像に与えるようにしている。このため、インターネット上の動画の特性を活かしつつ、楽しみながら鑑賞することができる。なお、本実施形態においては、画像配信サーバー１３３に投稿された画像を利用していたが、これに限らず、インターネット上で配信される動画を利用することは勿論可能である。
【０１０４】
次に、本発明の第３実施形態について、図１３および図１４を用いて説明する。この第３実施形態においては、テレビ３４ｇで放送されるコマーシャルを利用して、カメラ画像の表示を行なうようにしている。
【０１０５】
この第３実施形態に係わる画像表示システムは、テレビ３４ｇとカメラ１００から構成される。このカメラ１００内には、カメラ１００の撮像素子３で撮像した画像の遷移をモニタする変化判定部と、マイク１２で集音した音の判定部が設けられている。変化判定部と判定部によって、テレビ３４ｇで放送されるコマーシャルのシーンの変化を、その画像や音の変化によって解析する。
【０１０６】
また、テレビ３４ｇとカメラ１００の間は、赤外線通信等によって通信可能であり、カメラ１００は、加工したカメラ画像をテレビ３４ｇに送信する。また、テレビ３４ｇは、画面３４ｇ１、３４ｇ２の２つの画面を表示することができ、受信したカメラ画像を画面３４ｇ１に表示し、カメラ画像信号の切り替えに応じて、画面３４ｇ１の表示画像の切替機能を有する。さらに、テレビ３４ｇは、カメラ１００からズーミングやパンニング等の遷移効果信号を受けると、カメラ画像に対してこれらの画像処理を行なう画像処理部を有し、この遷移効果を施された画像を画面３４ｇ１に表示する。
【０１０７】
この画像表示システムにおけるカメラ１００の動作を図１４に示すフローチャートを用いて説明する。ユーザーがテレビ３４ｇで放送されるコマーシャルに合わせてカメラ画像を表示する場合には、まず、カメラ１００をテレビ３４ｇに向け、カメラ１００の撮像素子３等の撮像動作およびマイク３５の集音動作を開始する（Ｓ４０１）。
【０１０８】
続いて、撮像信号に基づくテレビ画像とマイク３５からのテレビ音声に基づいてシーンが変化したか否かの判定を行なう（Ｓ４０２）。判定の結果、シーンが変化した場合には、カメラ１００内に記憶されているカメラ画像の内から順次、送信する（Ｓ４０３）。テレビ３４ｇは、このカメラ画像を受信すると、画面３４ｇ１に表示する。
【０１０９】
ステップＳ４０２において、シーンの変化がないと判定された場合には、撮像信号に基づいて、コマーシャルの画像にズーミングやパンニング等の遷移効果があるか否かの判定を行なう（Ｓ４０５）。判定の結果、遷移効果がある場合には、テレビ３４ｇに対して、遷移効果信号を送信する。テレビ３４ｇは、この遷移効果信号を受信すると、遷移効果信号によって指示されるズーミングやパンニング等の遷移効果を表示するように、カメラ画像に対して画像処理を行なう。
【０１１０】
ステップＳ４０３、Ｓ４０６を終えると、またはステップＳ４０５において遷移効果が無い場合には、コマーシャルが終了したか否かの判定を行い、終了していなければ、ステップＳ４０２に戻り、前述のステップを繰り返す。
【０１１１】
本実施形態によれば、ネットワークに接続することなく、カメラ１００とテレビ３４ｇの相互通信だけで、カメラ内の画像に対して、プロ（コマーシャル製作者）の演出を加えて、表示し、効果的な写真鑑賞を可能としており、テレビ放送における動画の特性を活かしつつ、楽しみながら鑑賞することができる。
【０１１２】
なお、本実施形態においては、コマーシャル等のテレビ放送の放送時に、リアルタイムでコマーシャルの内容を分析し、テレビ３４ｇと通信しながら、テレビ３４ｇの画面３４ｇ１にカメラ画像を表示していた。しかし、このやり方に限らず、例えば、コマーシャルを予め録画し、これを解析して、カメラ内に記憶された画像を選択して第１及び第２実施形態に述べたと同様の加工を施し、表示するようにしてもよい。
【０１１３】
すなわち、最初にＴＶコマーシャルをモニタした時には、カメラ画像の表示は行わず、解析のみを行う。コマーシャルは何度も繰り返し流されるので、次にコマーシャルが放送されたタイミングで、カメラの音や画像の検出手段は、先に解析したコマーシャルが再放送されていることを判定し、カメラ画像を再生することができる。
【０１１４】
以上のように、カラオケ、インターネット上の動画、コマーシャル等の放送画像等、無数の映像コンテンツが利用または参照可能な形で存在している。本発明の各実施形態は、こうして外部から取得可能な映像等のコンテンツを利用し、それらのコンテンツが有している映像等の効果と同様の効果で、カメラ画像を再生するようにしている。このため、特別な手間をかけなくとも、デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供することができる。
【０１１５】
また、本発明の各実施形態においては、人物、風景、夜景などの画像の属するジャンル、画像の変化する方向、画像のズーミングの中の少なくとも１つに関する画像の遷移効果（トランジッション効果）を利用して、カメラ画像の画像データ編集している。このため、カラオケコンテンツ、インターネット上のサーバーに格納されている動画、コマーシャル放送等、専門家等が作成したのと同等の画像再生を得ることができる。
【０１１６】
なお、本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【０１１７】
【図１】本発明の第１実施形態に係わる画像表示システムにおけるカメラを主とするブロック図である。
【図２】本発明の第１実施形態に係わるカラオケ装置に適用した画像表示システムの使用状態を示す図である。
【図３】本発明の第１実施形態に係わる画像表示システムにおけるカラオケ用のサーバーによる撮影画像の画像処理について説明する図である。
【図４】本発明の第１実施形態に係わる画像表示システムにおけるサーバーを主とするブロック図である。
【図５】本発明の第１実施形態に係わるカメラ制御を示すフローチャートである。
【図６】本発明の第１実施形態に係わるサーバーの動作を示すフローチャートである。
【図７】本発明の第１実施形態に係わるコンテンツ分析および遷移効果判定のサブルーチンを示すフローチャートである。
【図８】本発明の第１実施形態に係わる画像置き換えのサブルーチンを示すフローチャートである。
【図９】本発明の第２実施形態に係わる画像表示システムにおけるサーバーを主とするブロック図である。
【図１０】本発明の第２実施形態に係わる動画配信部の動作を示すフローチャートである。
【図１１】本発明の第２実施形態に係わる画像加工部の動作を示すフローチャートである。
【図１２】本発明の第２実施形態に係わる画像表示システムの変形例を示す図である。
【図１３】本発明の第３実施形態に係わる画像表示システムのシステム構成を示すブロック図である。
【図１４】本発明の第３実施形態に係わるコマーシャル判定の動作を示すフローチャートである。
【符号の説明】
【０１１８】
１・・・ＭＰＵ、１ａ・・・レリーズスイッチ、１ｂ・・・モード切替スイッチ、１ｃ・・・他のスイッチ、１ｄ・・・位置判定部、１ｔ・・・時計部、２・・・撮影レンズ、２ａ・・・ＡＦ(オートフォーカス)制御部、２ｂ・・・絞り、２ｃ・・・絞り制御部、３・・・撮像素子、４・・・アナログフロントエンド（ＡＦＥ）部、５・・・画像処理部、５ａ・・・顔検出部、５ｂ・・・表情判定部、５ｃ・・・距離判定部、５ｄ・・・個人認証部、６・・・圧縮部、８・・・表示パネル、８ａ・・・表示制御部、８ｂ・・・マルチ画像処理部、９・・・記録メディア、９ａ・・・記録部、９ｃ・・・送受信部、９ｅ・・・送信設定部、９ｆ・・・無線ＬＡＮ、９ｇ・・・赤外光送受信機、１１・・・補助光発光部、１２・・・マイク、２０・・・被写体、３２・・・通信網、３３・・・サーバー、３３ａ・・・通信部、３３ｂ・・・画像メモリ、３３ｃ・・・遷移効果部、３３ｄ・・・検索部、３３ｅ・・・楽曲データベース（ＤＢ）、３３ｆ・・・表示制御部、３４ａ・・・カラオケモニタ、３４ｂ・・・カラオケ装置、３４ｃ・・・ホットスポット、３４ｅ・・・リモコン、３４ｇ・・・テレビ（ＴＶ）、３４ｇ１・・・画面、３４ｇ２・・・画面、３４ｈ・・・リモコン、３５・・・マイク、１００・・・カメラ、１３３・・・画像配信サーバー、１３３Ａ・・・画像加工部、１３３ａ・・・通信部、１３３ｂ・・・画像メモリ、１３３ｃ・・・遷移効果部、１３３ｇ・・・メモリ、１３３ｆ・・・効果反映部、１３３Ｂ・・・動画配信部、１３３ｄ・・・検索部、１３３ｅ・・・動画データベース（ＤＢ）
【技術分野】
【０００１】
本発明は、画像表示システムおよび画像表示方法に関し、詳しくは撮像装置等で撮影した画像を表示する画像表示システムおよび画像表示方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置の画像送信の容易さを利用して、ＰＣ通信やインターネット、携帯電話回線などの通信機能を利用して画像を送信し、その環境下で画像を楽しむ画像鑑賞法が普及している。こうした通信機能を利用すると、例えば、遠く離れた機器に画像を送信するばかりか、それと連携して新しいコンテンツを作成するような楽しみ方の応用が可能となる。さらに、画像を配信したり、画像を投稿するなど、従来にはない楽しみ方が広がってきている。
【０００３】
したがって、従来のような写真をアルバムで鑑賞する鑑賞法に縛られることなく、その状況に適した再生機器を利用して、画像を楽しむことが可能となってきている。また、従来から、カラオケ装置等にはおいては、画像を合成して表示する技術が提案されている。例えば、特許文献１には、ユーザーがデジタルカメラで撮影した画像をカラオケの背景画像として使用することのできるカラオケ装置が開示されている。このカラオケ装置は、画像を記憶したメモリカードをカラオケ用のマイクに挿入すると、画像を読み出し、モニタテレビに映しだす。
【０００４】
また、特許文献２には、カラオケで歌っているプレイヤーの顔等をビデオカメラで取り込み、背景の指定された位置に嵌め込み合成表示を行なうカラオケ装置が開示されている。さらに、特許文献３には、歌唱者が歌唱している姿をビデオカメラで撮影し、この画像と背景画像を合成して表示すると共に、この画像をプリントするカラオケ装置が開示されている。
【０００５】
さらに、特許文献４には、出演者の生の画像と背景画像を合成し、その際、ミラー反転処理を行なうことのできる画像合成装置が開示されている。さらに、特許文献５には、演奏曲を再生する際に、歌手の顔をカラオケの歌唱者顔に置き換えて表示するようにしたカラオケ装置が開示されている。
【０００６】
【特許文献１】特開２００４−２７１９５９号公報
【特許文献２】特開平１１−１７５０７９号公報
【特許文献３】特開平１０−２５４４６２号公報
【特許文献４】特開平９−２７５５２４号公報
【特許文献５】特開平６−１１０４８０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
このように、カラオケ装置において、画像を合成する技術は種々提案されている。しかし、特許文献１に開示のカラオケ装置では、カード内に記憶された画像がモニタに表示されるだけで、画像表示は単調なものとなってしまう。また特許文献２乃至特許文献５に開示されたカラオケ装置は背景画像等と歌唱者の画像等と画像を合成して表示するが、デジタルカメラ等の撮像装置において撮影した画像を楽しむものではなかった。
【０００８】
本願発明は、このような事情を鑑みてなされたものであり、デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記目的を達成するため第１の発明に係わる画像表示システムは、第１画像の表現効果を判定するトランジッション効果判定部と、上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像の画像データを編集する画像処理部と、上記第２画像を表示する第２画像表示部を備える。
【００１０】
第２の発明に係わる画像表示システムは、上記第１の発明において、上記第１画像は放送画像であり、上記第２画像はカメラで撮影された画像である。
また、第３の発明に係わる画像表示システムは、上記第１の発明において、上記第１画像はカラオケ用背景画像であり、上記第２画像はカメラで撮影された画像である。
さらに、第４の発明に係わる画像表示システムは、上記第１の発明において、所定の音楽を表す音楽データを記憶する音楽データ記憶部と、上記音楽を表す音声を発生する音声発生部と、上記第１画像を表示する第１画像表示部と、をさらに備え、上記所定の音楽に合わせて上記第１画像および上記第２画像を表示する。
【００１１】
さらに、第５の発明に係わる画像表示システムは、上記第１の発明において、上記トランジッション効果は、人物、風景、夜景などの画像の属するジャンル、画像の変化する方向、画像のズーミングの中の少なくとも１つに関する画像の遷移効果である。
さらに、第６の発明に係わる画像表示システムは、上記第２の発明において、上記第１画像データ、上記第２画像データ及び上記音楽データを送信する送信部と、上記送信部により送信された上記第１画像データ上記第２画像データ及び上記音楽データを受信する受信部をさらに備え、上記音声発生部、上記第１画像表示部及び上記第２画像表示部は、それぞれ上記受信部により受信した上記音楽データを表す音楽、上記第１画像データを表す上記第１画像及び上記第２画像データを表す上記第２画像を表示する。
【００１２】
上記目的を達成するため第７の発明に係わる画像表示方法は、第１画像の表現効果を判定するステップと、上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像データを編集するステップと、上記第２画像を表示するステップを備える。
【００１３】
上記目的を達成するため第８の発明に係わる画像表示システムは、第１画像の動画像を分析し分類する画像分析部と、上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定する比較部と、この比較部によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換える類似画像置き換え部と、この類似画像置き換え部によって置き換えられた画像を表示する表示部を備える。
【００１４】
第９の発明に係わる画像表示システムは、上記第８の発明において、上記画像分析部は、顔画像および風景画像の少なくとも一つを分析可能である。
第１０の発明に係わる画像表示システムは、上記第８の発明において、上記類似画像置き換え部によって、置き換えることのできなかった第２画像を、置き換えられなかった上記第１画像に等間隔で置き換える未対応画像置き換え部を具備する。
第１１の発明に係わる撮像装置は、上記第８の発明において、上記第１画像は、カメラによって撮影されたカメラ画像である。
第１２の発明に係わる撮像装置は、上記第８の発明において、上記第２画像は、カラオケ装置のコンテンツ、インターネット上のサーバーに保管された動画、またはテレビ放送のコマーシャルのいずれかである。
【００１５】
上記目的を達成するため第１３の発明に係わる画像表示方法は、第１画像の動画像を分析し、第１の画像を分類し、上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定し、この比較によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換え、この置き換えられた画像を表示する。
【発明の効果】
【００１６】
本発明によれば、デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供することができる。
【発明を実施するための最良の形態】
【００１７】
以下、図面に従って本発明を適用した画像表示システムを用いて好ましい実施形態について説明する。本発明の第１実施形態に係る画像表示システムは、カラオケシステムに適用したものであり、デジタルカメラで撮影したカメラ画像をカラオケ用のサーバーが受信し、カラオケの映像コンテンツの再生に応じてカメラ画像を再生表示するようにしている。
【００１８】
図１は、本発明の第１実施形態に係わるデジタルカメラとその周辺のブロック図である。ユーザーが使用するカメラ１００には、撮影レンズ２、ＡＦ（オートフォーカス）制御部２ａ、絞り２ｂ、絞り制御部２ｃ、撮像素子３、アナログフロントエンド（以下、ＡＦＥと略す）部４が設けられている。撮影レンズ２は、内部にフォーカスレンズを有し、入射した被写体２０の像を撮像素子３上に結像させる。
【００１９】
ＡＦ制御部２ａは、撮影レンズ２の合焦位置を、後述する画像処理部５内において画像処理を行い、いわゆる山登り法により検出し、フォーカスレンズを駆動して、合焦位置に移動させる。なお、山登り法は、撮影画像のコントラスト信号ピークから合焦位置（ピント位置）を検出する方式であるが、山登り法以外にも、例えば位相差法や三角測距法等公知の合焦方法に置き換えてもよい。ＡＦによって合焦位置に達すると、このときの撮影レンズ２を検出することにより、距離判定を行うことができる。この場合、撮影レンズ２がズームレンズのときには、ズーム位置等を加味して距離の判定を行う。
【００２０】
撮影レンズ２内または近傍に、シャッタや絞りの効果を奏する絞り２ｂが設けられる。絞り２ｂは、撮影時に所定の口径まで開き、露出が終了すると閉じて露光を終了させるものである。絞り制御部２ｃは、絞り２ｂを駆動して絞り径を設定する。この絞りを変えることによって、レンズの被写界深度が変化するので、背景のぼけ具合などを調整して、被写体を浮かび上がらせたり、背景をしっかりと描写したりするなど、表現の切り替えを行うことができる。撮像素子３は、多数の受光面（画素）からなるＣＣＤやＣＭＯＳセンサ等であり、撮影レンズ２を介して被写体２０からの像を受光しこれを画像信号に変換する。
【００２１】
アナログフロントエンド（ＡＦＥ）部４は、アナログデジタル変換（ＡＤ）手段を含み、撮像素子３からの信号をデジタル信号化する。そして、ＡＦＥ部４は、撮像素子３から出力される画像信号について各種処理を行う。また、ＡＦＥ部４には、撮像素子３のいくつかの画素をまとめて、一括して読み出す機能も設けられている。たとえば、４画素（２×２）や９画素（３×３）など、各画素の信号レベルが小さいときには、いくつかの画素信号を加算して、Ｓ／Ｎを向上させることができ、また、感度を上げることも出来る。
【００２２】
このような処理によって感度を上げることができ、シャッタスピードを速くする等、撮影上の工夫が可能となる。シャッタスピードが速いと、動いている被写体が止まっているように撮影することが可能となる。また、手振れなどを防止することができる。
【００２３】
また、ＡＦＥ部４は、撮像素子３の出力する信号を取捨選択する機能を有し、受光範囲の中から限られた範囲の画像データを抽出することが出来る。一般に撮像素子３の画素から間引いた画素信号を抽出する場合には、高速読出が可能となる。これにより構図確認用の画像信号を、画像処理部５によって高速処理し、表示制御部８ａを介して表示パネル８に表示することにより、フレーミングが可能となる。
【００２４】
ＡＦＥ部４の出力は、画像処理部５に接続されている。画像処理部５は、入力信号の色や階調やシャープネスを補正処理する。また、撮像素子３から得られた画像信号を所定のレベルに増幅して、正しい濃淡、正しい灰色レベルに設定する増感部を有している。これは、デジタル化された信号レベルが、所定レベルになるようにデジタル演算するものである。また、画像処理部５は、ライブ画像をリアルタイムに表示部に表示できるように、撮像素子３からの信号を表示パネル８に表示できるようなサイズに加工するリサイズ部を有する。この働きによって、撮影に先立って撮像素子に入射する像を確認でき、これを見ながら撮影時のタイミングやシャッタチャンスを決定することが出来る。
【００２５】
また、この画像処理部５の信号を利用して、撮像素子から入力されてくる画像の特徴などを判定する画像判定機能を有している。この画像判定機能としては、画像情報を加工して得られる輪郭情報から人の顔の目や口などの部分を判定する顔検出部５ａ、この顔検出部５ａを利用して顔等の表情を判定する表情判定部５ｂ、また個人の顔を識別して個人を認証する個人認証部５ｄを有している。また画像処理機能としては、さらに、画像の信号レベルのコントラストを判定して、被写体の距離を判定する距離判定部５ｃも有している。また、画像処理部５とその周辺補助部は、ＭＰＵ１と連携して、撮影画像の見栄を調整するにも用いられる。
【００２６】
このように、画像処理部５とその周辺の補助部（顔検出部５ａ、表情判定部５ｂ、個人認証部５ｄ等）は、写真撮影時に、ユーザーがどのような写真を撮ろうとしているかを判定して、撮影制御を最適化するために用いられる。
【００２７】
カメラ１００には、圧縮部６、記録部９ａ、記録メディア９、送受信部９ｃ、送信設定部９ｅ、表示パネル８、表示制御部８ａ及びマルチ画像処理部８ｂが設けられている。圧縮部６は、撮影時に画像処理部５から出力された信号を圧縮する。圧縮部６内には、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）４やＨ．２６４などの圧縮用コア部で構成される動画用の圧縮部及び ＪＰＥＧ（Ｊｏｉｎｔ
Ｐｈｏｔｏｇｒａｐｈｉｃ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）コア部など静止画像用の圧縮部が設けられる。また、圧縮部６は記録メディア９に記録されている画像を表示パネル８に再生する際には、画像伸張も行なう。
【００２８】
記録部９ａは、圧縮された画像信号を記録メディア９に記録する。記録メディア９はカメラに着脱可能な保存用の記録媒体である。なお、画像信号の記録にあたっては、写真撮影した時の時間情報も併せて記録しても良い。撮影時間情報は、後述するＭＰＵ１内の時計部１ｔによって計測されており、ＭＰＵ１は画像と関連付を行なう。
【００２９】
メディア９や記録部９aに記録された撮影画像データは、送受信部９ｃによって、インターネット、携帯電話網や電話回線などの通信網３２経由で、画像を管理するサーバー３３等の他の機器に転送することができる。また、送受信部９ｃは送信設定部９ｅと接続されており、この送信設定部９ｅは画像を送信する場合等の送信先を指定する指定部である。撮影された画像は、指定先に即時送信も可能である。
【００３０】
送受信部９ｃには、無線ＬＡＮ９ｆと赤外光送受信機９ｇとが接続されている。赤外光受信機９ｇはカラオケ装置３４ｂと赤外光通信が可能であり、カラオケ装置３４ｂからカラオケ装置３４ｂに楽曲等を送信するサーバー３３のアドレスを取得することができる。また、無線ＬＡＮ９ｆは、ホットスポット３４ｃ（図２参照）において、サーバー３３と無線通信が可能である。これらの通信については、図２を用いて後述する。
【００３１】
表示パネル８は、例えば液晶や有機ＥＬ等から構成され、撮影時には観察用に被写体画像をスルー画表示（ライブビュー表示とも言う）し、再生時には伸張処理された記録画像を再生表示する。
【００３２】
表示制御部８aは、表示パネル８への表示を制御する。マルチ画像処理部８ｂは、表示パネル８上に、複数の画像を表示する場合の制御部である。このマルチ画像処理部８ｂによって、撮影した画像や撮影する画像の上に、送信先のアドレスの文字表示や種々の警告表示をすることが可能である。なお、表示パネル８には、撮影して送信済み画像を一覧表示して、そこからサーバー３３が運営するブログサービスなどにアップする画像や、アップして、ブログに表示する時のレイアウトを選択できるようにしてもよい。
【００３３】
カメラ１００には、補助光発光部１１、マイク１２、ＭＰＵ（Micro Processing Unit）１、レリーズスイッチ１ａ、モード切替スイッチ１ｂ、他のスイッチ１ｃが設けられる。補助光発光部１１は、白色ＬＥＤやＸｅ放電発光管を有し、電流量で光量が制御できるようになっている。状況に応じて被写体２０に光を照射して、明るさの不足や不均一な明るさを防止する。マイク１２は、集音を行い、周囲の音声情報を取り込み、圧縮部６によって音声情報を音声圧縮し、音声圧縮データを記録部９によって記録メディア９に、画像データと関連付けて記録する。
【００３４】
ＭＰＵ１は、カメラ全体の制御を司る制御手段である。レリーズスイッチ１ａ、モード切替スイッチ１ｂ、他のスイッチ１ｃおよびプログラム等を記憶したＲＯＭ(不図示)が、ＭＰＵ１に接続される。ＭＰＵ１内には、日や時刻を検出するための時計部１ｔが設けられており、写真の撮影日時を検出し、撮影画像と関連付けを行う。なお、スイッチ１ｂ、１ｃは、スイッチを総称的に表示したものであって、実際には多数のスイッチ群から構成されている。また、ＭＰＵ１には、位置判定部１ｄが接続されており、この位置判定部１は、ＧＰＳ等により位置を検出する。この検出された位置を用いて撮影時の撮影位置と、前述の撮影日時を画像データと共にメディア９に記録する。
【００３５】
各スイッチ１ａ〜１ｃは、ユーザーの操作を検出して、その結果をマイクロコントローラからなる演算制御手段であるＭＰＵ１に通知する。ＭＰＵ１が、これらのスイッチの操作に従って動作を切り換える。また、ＭＰＵ１は撮影時には、ＡＦ制御部２ａや絞り制御部２ｃ等の制御を行う撮影制御機能や取得画像データ・取得音声データ等の記録部９ａや記録メディア９への記録制御機能を果たす。
【００３６】
このように構成されているカメラ１００は、無線ＬＡＮ９ｆ、赤外光送受信機９ｇを介して、カラオケ装置３４ｂやサーバー３３と接続している。サーバー３３は、カラオケの音楽や歌詞を含む映像コンテンツを供給し、カラオケ供給元によって、サーバーは異なる。そのため、本実施形態において、デジタルカメラと協働するカラオケ供給元のアドレスを取得し、カメラ１００に指定する必要がある。この指定は、種々の方法があり、例えば、カメラ１００にタッチパネル等を設け、これから直接入力するようにしてもよい。
【００３７】
また、カラオケ装置３４ｂにそのアドレスの情報を出力させる機能を持たせるようにしてもよい。本実施形態では、カメラ１００が赤外光送受信機９ｇを有し、カラオケ装置３４ｂも同様に赤外光送受信機の構成を持たせている。カメラ１００からカラオケ装置３４ｂに指示信号を赤外通信で送信すると、カラオケ装置３４ｂが応答して、カラオケ用のサーバー３３のアドレスを表す赤外信号をカメラ１００に返信する。
【００３８】
なお、カラオケ装置３４ｂがカメラ１００から指示信号を受信すると、指示信号をデコードして通信網（ＮＥＴ）３２を通じて、カラオケ用のサーバー３３と通信するようにしてもよい。カメラ１００で撮影した画像から選択されたカメラ画像を、指定先のサーバー３３に送信すれば、カラオケ用画像として表示可能となる。このような構成をとることにより、撮影画像をカラオケ用画像に置き換え、カラオケ装置３４ｂに自分が撮影した映像を表示して、カラオケ用画像表示用の大画面のカラオケモニタ３４ａで楽しむようにしている。
【００３９】
図２（ａ）はカメラ１００がサーバー３３のアドレスを取得する状態を示す図である。カメラ１００とカラオケ装置３４ｂの間で赤外線通信し、無線ＬＡＮ９ｆのホットスポット３４ｃや通信網（ＮＥＴ）３２を介して、アクセスするサーバー３３のアドレスを取得する。
【００４０】
また、図２（ｂ）は、カメラ１００からカメラ画像を送信し、カラオケモニタ３４ａへのカメラ画像の表示時を示す。カメラ１００は、サーバー３３のアドレスを用いて、ホットスポット３４ｃを介して、カメラ内のカメラ画像をサーバー３３に送信する。サーバー３３は、カメラ画像を後述するような効果を持たせた画像に処理し、ホットスポット３４ｃを介して、順次、カラオケ装置３４ｂに送信し、カラオケモニタ３４ａはこの画像を表示する。したがって、カラオケモニタ３４ａには、通常のカラオケコンテンツの映像またはカメラ画像を再生表示可能である。
【００４１】
また、カラオケ装置３４ｂには、サーバー３３から送信されてきた音声データに基づいて楽曲を流すためのスピーカ等の音声発生部（不図示）を有する。マイク３５を持ったユーザーは、カメラ１００によって撮影された身近な写真を見ながらカラオケを楽しむことができる。また、カラオケの歌詞が分かるように、サーバーが歌詞を合成して送信するようにしてもよく、もとの画像の歌詞の部分は隠さないように表示してもよい。
【００４２】
次に、カラオケ用のサーバー３３による撮影画像の画像処理について、図３を用いて説明する。図３（ａ）は、カラオケ用の映像コンテンツの時間変化の様子を示す図であり、この図では画面上の歌詞は省略してある。カラオケの歌唱者は、歌詞をみて思い出しながら歌って楽しむが、その際、歌の雰囲気に応じて、情景を喚起したり、ムードを盛り上げる動画が映しだされる。
【００４３】
このカラオケ用の映像は、風景になったり、人物が現われたりするなど、画像を効果的に変化させ、ストーリー性があり、情感を高めようにしている。すなわち、図３（ａ）の例のように、風景画像や、ズーミング処理やパンニング処理など画像を効果的に変化させている。また、歌詞の区切りで、画像を変えるなどの工夫もなされている。これらは、プロが撮影した、質の高いもので、飽きの来ない工夫がなされ、様々な効果が施されている。
【００４４】
本実施形態においては、プロによって撮影され編集されたカラオケ用画像にリンクさせて素人が撮影したカメラ画像を画像処理することにより、見栄えのよい表示にすることを可能としている。また、この画像の効果は歌と不可分であり、本実施形態において、カラオケ画像に置き換えて表示するデジタルカメラの画像は、この効果に即した画像にすることが好ましい。
【００４５】
しかし、カラオケ用の映像と、一般の撮影者が撮影した画像の主題が全く同じという可能性は高くないので、少なくとも、歌詞の区切りにあわせてカメラ画像を代えたり、また画像の遷移、例えばズーミングやパンニングに合わせてカメラ画像の画像処理を行なう等、時間の移ろいを示すテイストを共通化して、カラオケの楽曲との違和感をなくし、飽きの来ない画像表示を行うようにしている。
【００４６】
すなわち、本実施形態においては、図３（ｂ）に示すように、例えば、カラオケ画像が風景なら風景のカメラ画像を表示し、カラオケ画像が違う画像になったら、それに合わせてカメラ画像を変え、またカラオケ画像にズーミングやパンニング効果がなされると、カメラ画像にも同様の効果を生ずる画像処理を行なって、プロの画像切換と同様の手法となる画像処理を行なって飽きがこないようにしている。
【００４７】
このような画像表示を行なうためのサーバーを含めたシステムについて、図４を用いて説明する。図４は、本実施形態に係わる画像表示システムのブロック図であり、カメラ１００、サーバー３３および通信機能を有するカラオケ装置３４ｂ等から構成される。サーバー３３は、カメラ１００およびカラオケ装置３４ｂと送受信するための通信部３３ａを有する。この通信部３３ａから入力した画像等を記憶するための画像メモリ３３ｂと、この記憶された画像に対してズーミング、パンニング、フェードアウト、フェードイン等の遷移効果を生ずる画像処理を行なうための遷移効果部３３ｃと、この遷移効果部３３ｃによって処理された画像等の表示を制御する表示制御部３３ｆを有する。
【００４８】
また、サーバー３３は検索部３３ｄを有し、この検索部３３ｄはカラオケ装置３４ｂと通信部３３ａを介して要求された楽曲を楽曲データベース３３ｅから検索する。楽曲データベース３３ｅは、歌詞付き映像と伴奏音楽からなるカラオケ用コンテンツのデータベースであり、検索部３３ｄによって検索されたカラオケ用コンテンツを遷移効果部３３ｃに送出可能である。
【００４９】
このように本実施形態に係わる表示システムは構成されている。カメラ１００で選択されたカメラ画像は、ホットスポット等で無線ＬＡＮ部９ｆを介してサーバー３３に送信される。サーバー３３は、通信部３３ａによってカメラ画像を入力すると、画像メモリ３３ｂに記録する。
【００５０】
一方、カラオケの楽曲選択用のリモコン３４ｅによって楽曲が指定されると、検索部３３ｄはデータベース３３ｅから歌詞つきの映像と伴奏音楽からなるコンテンツを検索し、通信部３３ａを介して、カラオケ装置３４ｂに送信する。このカラオケ用コンテンツが送信されてくると、モニタ３４ａに画像が表示され、スピーカから伴奏音楽が流れる。ユーザー（歌唱者）はマイク３５を用いて歌うが、このときの画像は、オリジナルの画像に加え、画像メモリ３３ｂ内に記憶されているデジタルカメラ１００によるカメラ画像が表示される。
【００５１】
撮影画像の表示にあたっては、カラオケのオリジナル画像の遷移効果を効果部３３ｃで判定し、画像メモリ３３ｂ内に記憶されているカメラ画像を選択し、これにカラオケ画像と同様な効果を遷移効果部３３ｃによって付加する。この遷移効果が施されたカメラ画像を、表示制御部３３ｆは、適宜、カラオケ用オリジナル画像と置き換えて表示制御を行う。このような制御を行うことにより、図２（ｂ）を用いて説明したような効果を得ることが可能である。
【００５２】
次に、デジタルカメラ１００の制御について、図５に示すフローチャートを用いて説明する。まず、撮影モードか否かの判定を行なう（Ｓ１）。このカメラ１００は、被写体像をライブビュー表示し、レリーズ操作によって撮影・記録する撮影モードと、記録された画像を再生表示する再生モードと、カラオケ装置３４ｂと通信し、通信先のアドレスを取得する通信先取得モードと、この取得したアドレスに基づいてカラオケ用のサーバー３３と通信する通信モード等のモードを有している。
【００５３】
ステップＳ１おける判定の結果、撮影モードであった場合には、ライブビュー表示を行なう（Ｓ２）。ライブビュー表示は、撮像素子３によって取得した画像データに基づいて表示パネル８に被写体画像を動画表示する。続いて、レリーズ釦が全押し操作されたか、すなわちレリーズ操作されたかの判定を行なう（Ｓ３）。判定の結果、レリーズ操作されていなかった場合には、ステップＳ１に戻り、前述の動作を繰り返す。
【００５４】
一方、ステップＳ３における判定の結果、レリーズ操作されていた場合には、撮影を行い（Ｓ４）、記録する（Ｓ５）。すなわち、撮像素子３によって画像データを取得し、この画像データを圧縮部６によって圧縮処理した後、記録部９ａによって記録メディア９に記録する。記録が終わると、リターンし、ステップＳ１から繰り返す。
【００５５】
ステップＳ１における判定の結果、撮影モードではなかった場合には、次に、再生モードか否かの判定を行なう（Ｓ１１）。判定の結果、再生モードであった場合には、再生表示を行なう（Ｓ１２）。再生表示は、記録メディア９に記録されている撮影画像の画像データを読出し、伸張処理した後、表示パネル８に表示する。
【００５６】
続いて、サムネイル表示を行なうか否かの判定を行なう（Ｓ１３）。ユーザーがサムネイル表示を望む場合には、デジタルカメラ１００の背面等に設けられているスイッチを操作してサムネイル表示モードに設定するので、このステップではこのモードに設定されたか否かの判定を行なう。判定の結果、サムネイル表示モードであった場合には、サムネイル表示を行なう（Ｓ１４）。このサムネイル表示は、記録メディア９に記録されている全画像データを読出し、通常より小さい画像で表示パネル８に複数駒の画像を同時に表示する。
【００５７】
次に、カラオケ装置３４ｂに表示する画像群、すなわちカラオケ候補の選択を行なうか否かの判定を行なう（Ｓ１５）。これは、前述のサムネイル表示の選択と同様にカメラ１００のスイッチの操作によりカラオケ候補の選択モードが設定されているか否かにより判定する。判定の結果、カラオケ候補の選択が設定されていた場合には、カラオケ候補の選択を行なう（Ｓ１６）。カラオケ候補の選択は、サムネイル表示されている撮影画像の中から、カラオケ装置３４ｂのモニタ画像として表示する画像を、タッチパネルや十字キーを利用して選択する。
【００５８】
次に、カラオケ候補選択が終了したか否かを判定し（Ｓ１７）、判定の結果終了した場合には、候補指示を行なう（Ｓ１８）。この候補指示は、選択された撮影画像に対して、送信候補信号が付加され、後述するステップＳ２７において、カラオケ装置３４ｂのサーバー３３に対して選択された撮影画像を送信する。候補指示が終わると、または、ステップＳ１３、Ｓ１５、Ｓ１７においてＮＯであった場合には、リターンする。
【００５９】
ステップＳ１１において、再生モードでなかった場合には、通信先取得を行なうか否かの判定を行なう（Ｓ２１）。この通信先取得は、カラオケ用のサーバー３３のアドレスを取得するものであって、デジタルカメラ１００の操作スイッチを操作することによって行なわれるので、このステップではこの操作がなされたか否かの判定を行なう。
【００６０】
ステップＳ２１の判定の結果、通信先取得を行なう場合には、カラオケ用のサーバー３３のアドレスを受信し（Ｓ２２）、次いで、この受信が終了したかを判定する（Ｓ２３）。このステップにおいて、デジタルカメラ１００の赤外線送受信機９ｇを介してカラオケ装置３４ｂからサーバー３３のアドレスを取得する。
【００６１】
サーバー３３のアドレスの受信が終了すると、サーバー３３と通信を行なうか否かの判定を行なう（Ｓ２４）。デジタルカメラ１００は、ホットスポット等の場所で無線によって通信を行なうことができ、このステップでは、ユーザーによってこの通信モードが設定されたか否かの判定を行なう。
【００６２】
ステップＳ２４における判定の結果、通信モードに設定された場合には、デジタルカメラ１００の無線ＬＡＮ９ｆによってサーバー３３と通信を行なう（Ｓ２５）。続いて、通信が確立したか否かの判定を行なう（Ｓ２６）。判定の結果、通信が確立した場合には、ステップＳ１６において選択され、ステップＳ１８において候補指示信号が付加された画像データを、サーバー３３に送信する（Ｓ２７）。一方、無線通信が確立できなかった場合には、通信ができず送信できなったことを警告する（Ｓ２８）。ステップＳ２７、Ｓ２８が終わると、またはステップＳ２４においてＮｏであった場合には、ステップＳ１に戻る。
【００６３】
次に、サーバー３３の動作について、図６に示すフローチャートを用いて説明する。まず、カメラとの通信か否かの判定を行なう（Ｓ１０１）。このステップは、カメラ１００との通信が確立すると、ステップＳ２７においてカメラ１００は、カラオケ候補用の撮影画像を送信するので、この通信がなされているか否かの判定を行なう。判定の結果、通信がなされていると、画像取得を行なう（Ｓ１０２）。ここで取得されたカメラ画像の画像データは画像メモリ３３ｂに格納される。
【００６４】
次に、画像データの取得が終了したか否かを判定し（Ｓ１０３）、判定の結果、終了した場合には、各画像の判定を開始する（Ｓ１０４）。画像の判定を開始すると、顔判定を行ない（Ｓ１０５）、風景判定を行い（Ｓ１０６）、小物判定を行なう（Ｓ１０７）。ここでの各ステップでは、各画像が顔を含む顔画像か、顔を含まず、上の方が明るく、被写体が遠距離である風景画像か、近い距離で撮ったアクセサリーや日用雑貨など小物か、などの画像分類と整理を行う。次いで、全画像について、ステップＳ１０５からステップＳ１０７の判定が終了したかを判定し（Ｓ１０８）、終了した場合には、リターンする。
【００６５】
ステップＳ１０１における判定の結果、カメラ通信ではなかった場合には、カラオケ装置３４ｂから曲目指定の通信がなされか否かの判定を行なう（Ｓ１１１）。判定の結果、曲目指定のなされていない場合には、ステップＳ１０１に戻り、一方、曲目指定がなされた場合には、コンテンツ検索を行なう（Ｓ１１２）。
【００６６】
次いで、検索されたコンテンツの中に、ステップＳ１０２において取得されたカメラ画像が有るか否かを判定する（Ｓ１１３）。判定の結果、カメラ画像がなかった場合には、ステップＳ１１７にスキップするが、カメラ画像があった場合には、ステップＳ１１４からＳ１１６において、検索された画像コンテンツがカメラ画像と類似しているかを判定し、類似像をカラオケコンテンツの画像に当てはめて入れ替えを行う。すなわち、ステップＳ１１４において、カメラ画像の画像内容の分析を行い（Ｓ１０５−１０７に相当）、カラオケコンテンツの画面変化の遷移効果をＳ１１５で判定し、それが終了すると、カラオケコンテンツの画像の画像置き換えを行なう（Ｓ１１６）。これらのステップは図７および図８において詳述する。
【００６７】
ステップＳ１１２からステップＳ１１６において処理されたカラオケコンテンツの準備がＯＫであるか否かを判定し（Ｓ１１７）、ＯＫであれば、再生をスタートするか否かの判定を行なう（Ｓ１２１）。判定の結果、再生スタートすると、カラオケコンテンツの再生を開始し、伴奏音楽と、オリジナル画像を再生する（Ｓ１２２）。
【００６８】
次に、コンテンツ再生中のオリジナル画像と対応するカメラ画像があるか判定する（Ｓ１２３）。この判定は、ステップＳ１１６において置き換え画像（＝対応画像）があったか否かの判定である。判定の結果、対応画像がなければ、ステップＳ１２２に戻り、オリジナル画像を再生する。一方、対応画像があれば、次に、そのオリジナル画像に遷移効果のある画像か否かの判定を行なう（Ｓ１２４）。
【００６９】
判定の結果、遷移効果があれば、遷移効果を考慮した再生を行なう（Ｓ１２５）。すなわち、オリジナル画像と同様の遷移効果で表示できるように、カメラ画像に画像処理を施す。後述するステップＳ１６６（図７）において、Ｗ側判定されていれ、縮小ズームであり、最初にカメラ画像の一部分を表示し、だんだん全体を拡大表示して、同等の効果とする。また、ステップＳ１６７においてＴ側判定されていれば、拡大ズームであり、最初に全体画像を表示し、だんだん一部分（顔など）を拡大表示して、同等の効果を奏するようにする。さらに、パンニングの場合には、画面の一部から他の一部に表示部分を移すような表示を行う。この場合、全画像が表示できないので、最後に、オリジナル画像におけるパンニング効果からはなれて、全画面表示を行う等の工夫を行う。
【００７０】
一方、ステップＳ１２４における判定の結果、遷移効果がなければ、対応画像に遷移効果を施すことなく、通常効果にてスライドショー形式で再生する（Ｓ１２８）。ステップＳ１２５またはステップＳ１２８を終えると、コンテンツ再生が全て終了したか否かを判定し、終了していない場合には、ステップＳ１２３に戻り、一方、終了した場合には、リターンする。
【００７１】
次に、ステップＳ１１４およびステップＳ１１５（図６）におけるコンテンツ分析、遷移効果判定のサブルーチンについて、図７を用いて説明する。まず、カラオケ用コンテンツの高速再生を開始する（Ｓ１５１）。続いて、コンテンツのオリジナル画像の中に顔があるか否かの判定を行い（Ｓ１５２）、判定の結果、顔がある場合には、主題が顔と判定する（Ｓ１６１）。
【００７２】
ステップＳ１５２の判定の結果、顔がなかった場合には、次に、一面が明るいか否かの判定を行い（Ｓ１６２）、一面が明るかった場合には、主題が風景であると判定する（Ｓ１６２）。一面が暗くて点光源がちりばめられている画像の場合には、主題が夜景と判定し、風景に分類してもよい。ここまでが、図６のステップＳ１１４のコンテンツ分析のサブルーチンに相当する。
【００７３】
次に、オリジナル画像が右から左へ等と動いているか、すなわちパンニングが行なわれているか否かの判定を行なう（Ｓ１５４）。判定の結果、パンニングがなされていると、効果がパンニングと判定する（Ｓ１６６）。ステップＳ１５４における判定の結果、パンニングではなかった場合には、オリジナル画像がズーミングしているか、すなわち拡大または縮小しているか否かの判定を行なう（Ｓ１５５）。
【００７４】
ステップＳ１５５における判定の結果、拡大または縮小である場合には、拡大か否かの判定を行なう（Ｓ１６５）。判定の結果、拡大でなければ、ワイド側と判定し（Ｓ１６６）、一方、拡大であれば、テレ側と判定する（Ｓ１６７）。すなわち、縮小・拡大するかでズーミングの判定を行い、拡大であればテレ側ズーム、縮小であればワイド側ズームとする。ステップＳ１５４からステップＳ１６７までが、図６のステップＳ１１５の遷移効果に相当する。
【００７５】
以上のステップＳ１５２からステップＳ１６７は、各画面ごとに行う必要があることから、次に、画面の切り替えシーンであるか否かの判定を行なう（Ｓ１５６）。判定の結果、画面の切り替えシーンでない場合には、ステップＳ１５２に戻り、前述の判定等を繰り返す。一方、画面の切り換えシーンであった場合には、場面内容を判定する（Ｓ１５８）。続いて、カラオケ用のコンテンツの全てのシーンについてステップＳ１５２からステップＳ１５８での判定等が終了したかを判定する（Ｓ１５９）。ステップＳ１５９における判定の結果、終了していない場合には、ステップＳ１５２に戻り、一方、終了した場合には、図６のフローに戻る。
【００７６】
次に、ステップＳ１１６（図６）における画像置き換えのサブルーチンについて、図８を用いて説明する。このサブルーチンでは、サーバー３３がカラオケ用コンテンツのオリジナル画像をカメラ画像に置き換えを行なう。まず、オリジナルの画像コンテンツ（カラオケビデオ）のシーンと、カメラ画像のシーンの比較を開始する（Ｓ２０１）。続いて、画像比較の結果、類似画像が存在するか否かの判定を行なう（Ｓ２０２）。類似画像か否かは、例えば、顔画像であるか、風景画像であるか等の判定である。
【００７７】
ステップＳ２０２における判定の結果、類似画像がない場合にはステップＳ２０４にスキップし、一方、類似画像が有った場合には、類似シーンの置き換え、すなわち、オリジナル画像をカメラ画像で置き換えを行なう（Ｓ２０３）。続いて、全シーンについて判定が終了したかを判定し（Ｓ２０４）、終了していない場合にはステップＳ２０２に戻り、全シーンについて判定が終わるまで、これらのステップを繰り返す。
【００７８】
一方、ステップＳ２０４の判定の結果、終了した場合には、未対応カメラ画像が有るか否かの判定を行なう（Ｓ２０５）。このステップでは、カメラ１００からサーバー３３に表示候補としてカメラ画像が送信されたが、ステップＳ２０３における類似シーンの置き換えのできていない画像があるかどうかを判定する。判定の結果、未対応カメラ画像がなければ、このサブルーチンを終了して、図６のフローに戻る。
【００７９】
一方、判定の結果、未対応カメラ画像が有る場合には、未対応コンテンツシーンが多いか、すなわち、置き換えられなかったオリジナルのシーンの数と、オリジナルのカメラ画像の数を比較する（Ｓ２０５）。判定の結果、置き換えられなかったシーンのほうが多い場合は、略等間隔で古い画像から置き換える（Ｓ２０７）。一方、判定の結果、置き換えられなかったカメラ画像の方が多い場合には、カメラ画像が全て置き換え表示できるように、時系列（撮影順）に未対応コンテンツのオリジナル画像を置き換えていく。このために、置き換えられなかったカラオケ用コンテンツの長いシーンについては分割し（Ｓ２１１）、略等間隔で古い画像から置き換えを行なう（Ｓ２１２）。
【００８０】
なお、ステップＳ２０７とステップＳ２１２における画像の置き換えでは、両画像の類似性は問わないようにする。このようにして、カラオケ用のコンテンツのオリジナル画像をシーンと類似性の高いカメラ画像に置き換える。ここで置き換えられた画像は、ステップＳ１２３（図６）において、対応画像有りと判定され、カメラ画像が再生される。
【００８１】
ステップＳ２０７またはステップＳ２１２における画像の置き換えが終わると、またはステップＳ２０５において、未対応カメラ画像がないと判定されると、このサブルーチンを終了し、図６のフローに戻る。
【００８２】
このように、本実施形態においては、カラオケコンテンツでの画像の編集の仕方や、画像の効果を利用して、カメラ画像を再生するようにしている。このため、カメラ画像を単にスライドショー形式で再生するよりは、鑑賞者を飽きさせることなく、表示することができる。
【００８３】
また、カラオケボックス内の環境は、最新鋭のＡＶ機器が揃っており、さらにネットワーク環境にも接続され、多くの友人が集まり、写真画像を鑑賞するには相応しい理想的な鑑賞環境である。本実施形態は、この環境を有効利用することができ、効果的な写真鑑賞を可能としている。また、最近では、膨大な曲目データに対応するために、インターネットなどを利用して、外部のサーバー等からのカラオケコンテンツは配信されており、本実施形態では、カラオケ用のサーバー３３にカメラ画像を送信することにより、このサーバー３３によって画像処理を施すことができるので、大変便利である。
【００８４】
なお、本実施形態においては、カメラ画像とコンテンツ画像を、おのおの分類して、置き換える例を示したが、もちろん、カメラ画像をそのまま利用して、画像検索の応用にて、類似シーンを判定するようにしてもよい。すなわち、本実施形態のように、一度、主題を「顔」、「風景」と分けて分類してから、その分類に沿った類似画像を探すのではなく、画像同士を比較して画像と画像の一致度を判定することにより類似画像を探すようにしてもよい。また、本実施形態においては、伴奏音楽も一緒に再生されていたが、これに限らず、鑑賞専用にして、音楽にカラオケではなく歌も自動で付与するようにしてもよい。
【００８５】
次に、本発明の第２実施形態について、図９乃至図１２を用いて説明する。第１実施形態では、カラオケ用のサーバー３３にカメラ画像を送信し、カラオケ用コンテンツの画像変化に合わせて、カメラ画像を再生するようにしていた。第２実施形態においては、インターネット上のサーバーに投稿された動画の画像変化に合わせて、カメラ画像を再生するようにしている。
【００８６】
近年、インターネットに接続可能なテレビ（ＴＶ）３４ｇが出現しており、家族の団欒の際に、こうした動画投稿サイトにある画像を、リモコン３４ｈを操作して楽しむことが可能である。動画投稿サイトに投稿された画像が、非常に印象的なノスタルジーを感じさせる映像や音楽である場合、この映像を自分が撮影した画像に置換え、家族の歴史のような形で回想したくなることもある。そこで、本実施形態においては、投稿動画の変化に合わせて、カメラ画像を再生するようにしている。
【００８７】
図９は、画像配信サーバー１３３を含む画像表示システムのブロック図である。この画像配信サーバー１３３は、画像加工部１３３Ａと動画配信部１３３Ｂとから構成されている。動画配信部１３３Ｂは、投稿動画を格納する動画データベース１３３ｅと、このデータベース１３３ｅに格納されている投稿動画中か、ユーザーの指定によるタイトルやキーワード等に基づく検索を行なう検索部１３３ｄとから構成される。
【００８８】
画像加工部１３３Ａは、通信部１３３ａ、画像メモリ１３３ｂ、遷移効果部１３３ｃ、効果反映部１３３ｆ、メモリ１３３ｇとから構成されている。通信部１３３ａは、カメラ１００と無線ＬＡＮ等によって接続され、またテレビ３４ｇとはインターネット等を通じて接続されており、これらの機器と送受信が可能である。
【００８９】
画像メモリ１３３ｂは、カメラ１００から送信されたカメラ画像を記憶するメモリである。この画像メモリ１３３ｂの出力は、遷移効果部１３３ｃに接続されている。この遷移効果部１３３ｃは、画像メモリ１３３ｂに格納されたカメラ画像に対して、メモリ１３３ｇに格納されている投稿動画に基づいて、ズーミング、パンニング、フェードイン、フェードアウト等の種々の遷移効果を画像処理によって施す。
【００９０】
効果反映部１３３ｆは、遷移効果部１３３ｃによって遷移効果を施されたカメラ画像を、遷移効果を反映して再生するための制御部であり、ここでの再生された画像データは、通信部１３３ａを通じて、ネット接続されたテレビ３４ｇに出力される。メモリ１３３ｇは、テレビ３４ｇのユーザー等によって検索された投稿動画を記憶するためのメモリである。
【００９１】
動画配信部１３３Ｂは、ユーザーがネットワークを介して、タイトルやキーワードを検索部１３３ｄに入力すると、動画データベース１３３ｅ内から対応する動画を検索し、画像加工部１３３Ａを介さずに直接、テレビ３４ｇに配信し、投稿動画を再生することができる。なお、本実施形態においては、動画配信部１３３Ｂと画像加工部１３３Ａは同一の画像配信サーバー１３３内に設置してあるが、別々のサーバーで構成し、両者が連携できるようにしてもよい。
【００９２】
次に、画像配信サーバー１３３の動作について、図１０に示すフローチャートを用いて説明する。このフローチャートがスタートすると、まず、画像検索か否かの判定を行なう（Ｓ３０１）。判定の結果、画像検索であった場合には、選択するためのキーワードやタイトルを受付け、検索部１３３ｄによって検索を行なう（Ｓ３０２）。続いて、ユーザーからネット経由で再生操作がなされかを判定し（Ｓ３０３）、判定の結果、再生操作がなされると、対応した画像が再生される（Ｓ３０４）。次に、ユーザーによって終了の操作がなされたか、検索された動画が最後まで再生がなされたかを判定し（Ｓ３０５）、判定の結果、終了であれば、ステップＳ３０５をＹｅｓに分岐して再生終了となる。
【００９３】
ステップＳ３０１における判定の結果、画像検索ではなかった場合には、次に、類似効果再生要求か否かを判定する（Ｓ３１０）。これは、ユーザーが投稿動画の画像変化に合わせて、カメラ画像の切り換えや画像処理を施して楽しみたい場合に、投稿動画の再生要求の指定がなされたか否かを判定するステップである。判定の結果、再生要求がなされていた場合には、対応コンテツ情報（投稿動画）を画像加工部１３３Ａ内のメモリ１３３ｇに送信する（Ｓ３１１）。なお、コンテンツそのものでなくとも、音楽ならその曲名、画像ならその特徴のみを送信するようにしてもよい。
【００９４】
このように、プライベートなカメラ画像（素材）が入ったサーバー１３３の画像加工部１３３Ａと、公開されたコンテンツ（すでに作品化されたもの）が記録された画像配信部１３３ｂが連携してサービスを行っている。もちろん、前述したように、同一のサーバーが両方の機能を有し、これらのサービスを行っても良い。
【００９５】
ステップＳ３１０における判定の結果、再生要求がなされていない場合には、投稿操作がなされているか否かの判定を行なう（Ｓ３１５）。判定の結果、投稿操作がなされていない場合には、ステップＳ３０１に戻り、前述の動作を繰り返す。一方、判定の結果、投稿操作がなされていた場合には、投稿画像を受付け（Ｓ３１６）、検索しやすいようにタグを付けて動画データベース１３３ｅに記録される。
【００９６】
前述したように、自己のカメラ１００で撮影したカメラ画像は、通信部１３３ａを介してメモリ１３３ｂに保管されており、また投稿動画の中で再生要求のされた画像データは、メモリ１３３ｇに保管されている。ユーザーが画像配信サーバー１３３の画像加工部１３３Ａにアクセスし、メモリ１３３ｇに保管されている投稿画像の遷移効果を遷移効果部１３３ｃが分析し、その手本となる投稿動画に合わせて画像メモリ１３３ｂ内のカメラ画像を適宜選択して、その遷移効果に合わせて、効果反映再生部１３３ｆは、順次、再生を行う。この画像は、通信部１３３ａからネットを経由してテレビ３４ｇに送信され、鑑賞可能となる。
【００９７】
この画像加工部１３３Ａの動作について、図１１に示すフローチャートを用いて説明する。まず、ユーザーが、投稿された動画作品を見て、気にいった作品があれば、その旨の操作を行う。そこで、画像加工部１３３Ａは、効果取得の操作がなされか否かについて判定する（Ｓ３２１）。判定の結果、効果取得の操作がなされていた場合には、ユーザーが好んだ動画を画像配信部１３３Ｂより取得する（Ｓ３２３）。このステップＳ３２２と前述のステップＳ３１１は協働して行われる。
【００９８】
次に、画像加工部１３３Ａに取得した画像の再生を行なうか否かの判定を行い（Ｓ３２３）、再生を行なわない場合には、ステップＳ３２１に戻る。一方、再生を行なう場合には、効果を参照しながら、カメラで撮影した画像を再生する。すなわち、お手本となる投稿動画の画像の見せ方の効果を、カメラ画像に反映させ、音楽などの効果音は、そのまま利用する。
【００９９】
また、画像の切換なども、すでに作品化された動画を参照するので、特に複雑な設定を行わなくとも、効果的な再生が可能となる。このステップにおけるカメラ画像の加工は、図６のステップＳ１１４からＳ１１６およびステップＳ１２１からステップＳ１２９と同様の処理を行なえばよいので、詳しい説明は省略する。
【０１００】
こうした、動画効果を必要としない場合は、その旨の操作を行うと、ステップＳ３２１における判定においてＮｏで抜ける。次に、再生を行なうか否かの判定を行う（Ｓ３３０）。判定の結果、Ｎｏであった場合には、ステップＳ３２１に戻り、前述のステップを繰り返す。一方、再生を行なう場合には、写真画像を古い順に順次再生を行ない（Ｓ３３１）、再生が終了すると、リターンする。
【０１０１】
このように、動画投稿サイト（動画配信部１３３Ｂ）に保管されている画像を手本にして、ユーザーが撮影したカメラ画像を効果的に再生することが可能となる。なお、動画の複雑な画像の動きだけでなく、図１２のように動画に含まれる音楽によって、再生画像の効果を変化させてもよい。
【０１０２】
つまり、歌の場合、歌詞に区切りがあればカメラ画像の切換を行い、音量が増大すると、ズームアップし、同じ音を伸ばすような場合には、それを判定し、カメラ画像のパンニング処理を行う。また、音量が小さくなると、遠ざかる感じであることから、カメラ画像にズームダウンしていくような効果を画像に与え、音楽とシンクロさせて効果を際立たせるようにしてもよい。この第２実施形態の変形例においては、動画の画像だけではなく、音楽等の音声情報を用いて、カメラ画像の表示に変化を与えるようにしている。
【０１０３】
このように、本発明の第２実施形態においては、インターネット上のサーバーに記憶されている動画を利用し、カメラ画像の表示にあたって、画像の切り替えタイミングや、ズーミングやパンニング等の遷移効果をカメラ画像に与えるようにしている。このため、インターネット上の動画の特性を活かしつつ、楽しみながら鑑賞することができる。なお、本実施形態においては、画像配信サーバー１３３に投稿された画像を利用していたが、これに限らず、インターネット上で配信される動画を利用することは勿論可能である。
【０１０４】
次に、本発明の第３実施形態について、図１３および図１４を用いて説明する。この第３実施形態においては、テレビ３４ｇで放送されるコマーシャルを利用して、カメラ画像の表示を行なうようにしている。
【０１０５】
この第３実施形態に係わる画像表示システムは、テレビ３４ｇとカメラ１００から構成される。このカメラ１００内には、カメラ１００の撮像素子３で撮像した画像の遷移をモニタする変化判定部と、マイク１２で集音した音の判定部が設けられている。変化判定部と判定部によって、テレビ３４ｇで放送されるコマーシャルのシーンの変化を、その画像や音の変化によって解析する。
【０１０６】
また、テレビ３４ｇとカメラ１００の間は、赤外線通信等によって通信可能であり、カメラ１００は、加工したカメラ画像をテレビ３４ｇに送信する。また、テレビ３４ｇは、画面３４ｇ１、３４ｇ２の２つの画面を表示することができ、受信したカメラ画像を画面３４ｇ１に表示し、カメラ画像信号の切り替えに応じて、画面３４ｇ１の表示画像の切替機能を有する。さらに、テレビ３４ｇは、カメラ１００からズーミングやパンニング等の遷移効果信号を受けると、カメラ画像に対してこれらの画像処理を行なう画像処理部を有し、この遷移効果を施された画像を画面３４ｇ１に表示する。
【０１０７】
この画像表示システムにおけるカメラ１００の動作を図１４に示すフローチャートを用いて説明する。ユーザーがテレビ３４ｇで放送されるコマーシャルに合わせてカメラ画像を表示する場合には、まず、カメラ１００をテレビ３４ｇに向け、カメラ１００の撮像素子３等の撮像動作およびマイク３５の集音動作を開始する（Ｓ４０１）。
【０１０８】
続いて、撮像信号に基づくテレビ画像とマイク３５からのテレビ音声に基づいてシーンが変化したか否かの判定を行なう（Ｓ４０２）。判定の結果、シーンが変化した場合には、カメラ１００内に記憶されているカメラ画像の内から順次、送信する（Ｓ４０３）。テレビ３４ｇは、このカメラ画像を受信すると、画面３４ｇ１に表示する。
【０１０９】
ステップＳ４０２において、シーンの変化がないと判定された場合には、撮像信号に基づいて、コマーシャルの画像にズーミングやパンニング等の遷移効果があるか否かの判定を行なう（Ｓ４０５）。判定の結果、遷移効果がある場合には、テレビ３４ｇに対して、遷移効果信号を送信する。テレビ３４ｇは、この遷移効果信号を受信すると、遷移効果信号によって指示されるズーミングやパンニング等の遷移効果を表示するように、カメラ画像に対して画像処理を行なう。
【０１１０】
ステップＳ４０３、Ｓ４０６を終えると、またはステップＳ４０５において遷移効果が無い場合には、コマーシャルが終了したか否かの判定を行い、終了していなければ、ステップＳ４０２に戻り、前述のステップを繰り返す。
【０１１１】
本実施形態によれば、ネットワークに接続することなく、カメラ１００とテレビ３４ｇの相互通信だけで、カメラ内の画像に対して、プロ（コマーシャル製作者）の演出を加えて、表示し、効果的な写真鑑賞を可能としており、テレビ放送における動画の特性を活かしつつ、楽しみながら鑑賞することができる。
【０１１２】
なお、本実施形態においては、コマーシャル等のテレビ放送の放送時に、リアルタイムでコマーシャルの内容を分析し、テレビ３４ｇと通信しながら、テレビ３４ｇの画面３４ｇ１にカメラ画像を表示していた。しかし、このやり方に限らず、例えば、コマーシャルを予め録画し、これを解析して、カメラ内に記憶された画像を選択して第１及び第２実施形態に述べたと同様の加工を施し、表示するようにしてもよい。
【０１１３】
すなわち、最初にＴＶコマーシャルをモニタした時には、カメラ画像の表示は行わず、解析のみを行う。コマーシャルは何度も繰り返し流されるので、次にコマーシャルが放送されたタイミングで、カメラの音や画像の検出手段は、先に解析したコマーシャルが再放送されていることを判定し、カメラ画像を再生することができる。
【０１１４】
以上のように、カラオケ、インターネット上の動画、コマーシャル等の放送画像等、無数の映像コンテンツが利用または参照可能な形で存在している。本発明の各実施形態は、こうして外部から取得可能な映像等のコンテンツを利用し、それらのコンテンツが有している映像等の効果と同様の効果で、カメラ画像を再生するようにしている。このため、特別な手間をかけなくとも、デジタルカメラ等の撮像装置において撮影した画像を、他の機器の特性を活かしつつ、楽しみながら鑑賞できる画像表示システムおよび画像表示方法を提供することができる。
【０１１５】
また、本発明の各実施形態においては、人物、風景、夜景などの画像の属するジャンル、画像の変化する方向、画像のズーミングの中の少なくとも１つに関する画像の遷移効果（トランジッション効果）を利用して、カメラ画像の画像データ編集している。このため、カラオケコンテンツ、インターネット上のサーバーに格納されている動画、コマーシャル放送等、専門家等が作成したのと同等の画像再生を得ることができる。
【０１１６】
なお、本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【０１１７】
【図１】本発明の第１実施形態に係わる画像表示システムにおけるカメラを主とするブロック図である。
【図２】本発明の第１実施形態に係わるカラオケ装置に適用した画像表示システムの使用状態を示す図である。
【図３】本発明の第１実施形態に係わる画像表示システムにおけるカラオケ用のサーバーによる撮影画像の画像処理について説明する図である。
【図４】本発明の第１実施形態に係わる画像表示システムにおけるサーバーを主とするブロック図である。
【図５】本発明の第１実施形態に係わるカメラ制御を示すフローチャートである。
【図６】本発明の第１実施形態に係わるサーバーの動作を示すフローチャートである。
【図７】本発明の第１実施形態に係わるコンテンツ分析および遷移効果判定のサブルーチンを示すフローチャートである。
【図８】本発明の第１実施形態に係わる画像置き換えのサブルーチンを示すフローチャートである。
【図９】本発明の第２実施形態に係わる画像表示システムにおけるサーバーを主とするブロック図である。
【図１０】本発明の第２実施形態に係わる動画配信部の動作を示すフローチャートである。
【図１１】本発明の第２実施形態に係わる画像加工部の動作を示すフローチャートである。
【図１２】本発明の第２実施形態に係わる画像表示システムの変形例を示す図である。
【図１３】本発明の第３実施形態に係わる画像表示システムのシステム構成を示すブロック図である。
【図１４】本発明の第３実施形態に係わるコマーシャル判定の動作を示すフローチャートである。
【符号の説明】
【０１１８】
１・・・ＭＰＵ、１ａ・・・レリーズスイッチ、１ｂ・・・モード切替スイッチ、１ｃ・・・他のスイッチ、１ｄ・・・位置判定部、１ｔ・・・時計部、２・・・撮影レンズ、２ａ・・・ＡＦ(オートフォーカス)制御部、２ｂ・・・絞り、２ｃ・・・絞り制御部、３・・・撮像素子、４・・・アナログフロントエンド（ＡＦＥ）部、５・・・画像処理部、５ａ・・・顔検出部、５ｂ・・・表情判定部、５ｃ・・・距離判定部、５ｄ・・・個人認証部、６・・・圧縮部、８・・・表示パネル、８ａ・・・表示制御部、８ｂ・・・マルチ画像処理部、９・・・記録メディア、９ａ・・・記録部、９ｃ・・・送受信部、９ｅ・・・送信設定部、９ｆ・・・無線ＬＡＮ、９ｇ・・・赤外光送受信機、１１・・・補助光発光部、１２・・・マイク、２０・・・被写体、３２・・・通信網、３３・・・サーバー、３３ａ・・・通信部、３３ｂ・・・画像メモリ、３３ｃ・・・遷移効果部、３３ｄ・・・検索部、３３ｅ・・・楽曲データベース（ＤＢ）、３３ｆ・・・表示制御部、３４ａ・・・カラオケモニタ、３４ｂ・・・カラオケ装置、３４ｃ・・・ホットスポット、３４ｅ・・・リモコン、３４ｇ・・・テレビ（ＴＶ）、３４ｇ１・・・画面、３４ｇ２・・・画面、３４ｈ・・・リモコン、３５・・・マイク、１００・・・カメラ、１３３・・・画像配信サーバー、１３３Ａ・・・画像加工部、１３３ａ・・・通信部、１３３ｂ・・・画像メモリ、１３３ｃ・・・遷移効果部、１３３ｇ・・・メモリ、１３３ｆ・・・効果反映部、１３３Ｂ・・・動画配信部、１３３ｄ・・・検索部、１３３ｅ・・・動画データベース（ＤＢ）
【特許請求の範囲】
【請求項１】
第１画像の表現効果を判定するトランジッション効果判定部と、
上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像の画像データを編集する画像処理部と、
上記第２画像を表示する第２画像表示部と、
を備えたことを特徴とする画像表示システム。
【請求項２】
上記第１画像は放送画像であり、上記第２画像はカメラで撮影された画像であることを特徴とする請求項１に記載の画像表示システム。
【請求項３】
上記第１画像はカラオケ用背景画像であり、上記第２画像はカメラで撮影された画像であることを特徴とする請求項１に記載の画像表示システム。
【請求項４】
所定の音楽を表す音楽データを記憶する音楽データ記憶部と、上記音楽を表す音声を発生する音声発生部と、上記第１画像を表示する第１画像表示部と、をさらに備え、上記所定の音楽に合わせて上記第１画像および上記第２画像を表示することを特徴とする請求項３に記載の画像表示システム。
【請求項５】
上記トランジッション効果は、人物、風景、夜景などの画像の属するジャンル、画像の変化する方向、画像のズーミングの中の少なくとも１つに関する画像の遷移効果であることを特徴とする請求項１に記載の画像表示システム。
【請求項６】
上記第１画像データ、上記第２画像データ及び上記音楽データを送信する送信部と、上記送信部により送信された上記第１画像データ上記第２画像データ及び上記音楽データを受信する受信部をさらに備え、上記音声発生部、上記第１画像表示部及び上記第２画像表示部は、それぞれ上記受信部により受信した上記音楽データを表す音楽、上記第１画像データを表す上記第１画像及び上記第２画像データを表す上記第２画像を表示することを特徴とする請求項２に記載の画像表示システム。
【請求項７】
第１画像の表現効果を判定するステップと、
上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像データを編集するステップと、
上記第２画像を表示するステップと、
を備えたことを特徴とする画像表示方法。
【請求項８】
第１画像の動画像を分析し分類する画像分析部と、
上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定する比較部と、
この比較部によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換える類似画像置き換え部と、
この類似画像置き換え部によって置き換えられた画像を表示する表示部と、
を備えたことを特徴とする画像表示システム。
【請求項９】
上記画像分析部は、顔画像および風景画像の少なくとも一つを分析可能であることを特徴とする請求項８に記載の画像表示システム。
【請求項１０】
上記類似画像置き換え部によって、置き換えることのできなかった第２画像を、置き換えられなかった上記第１画像に等間隔で置き換える未対応画像置き換え部を具備することを特徴とする請求項８に記載の画像表示システム。
【請求項１１】
上記第１画像は、カメラによって撮影されたカメラ画像であることを特徴とする請求項８に記載の画像表示システム。
【請求項１２】
上記第２画像は、カラオケ装置のコンテンツ、インターネット上のサーバーに保管された動画、またはテレビ放送のコマーシャルのいずれかであることを特徴とする請求項８に記載の画像表示システム。
【請求項１３】
第１画像の動画像を分析し、第１の画像を分類し、
上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定し、
この比較によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換え、
この置き換えられた画像を表示する、
ことを特徴とする画像表示方法。
【請求項１】
第１画像の表現効果を判定するトランジッション効果判定部と、
上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像の画像データを編集する画像処理部と、
上記第２画像を表示する第２画像表示部と、
を備えたことを特徴とする画像表示システム。
【請求項２】
上記第１画像は放送画像であり、上記第２画像はカメラで撮影された画像であることを特徴とする請求項１に記載の画像表示システム。
【請求項３】
上記第１画像はカラオケ用背景画像であり、上記第２画像はカメラで撮影された画像であることを特徴とする請求項１に記載の画像表示システム。
【請求項４】
所定の音楽を表す音楽データを記憶する音楽データ記憶部と、上記音楽を表す音声を発生する音声発生部と、上記第１画像を表示する第１画像表示部と、をさらに備え、上記所定の音楽に合わせて上記第１画像および上記第２画像を表示することを特徴とする請求項３に記載の画像表示システム。
【請求項５】
上記トランジッション効果は、人物、風景、夜景などの画像の属するジャンル、画像の変化する方向、画像のズーミングの中の少なくとも１つに関する画像の遷移効果であることを特徴とする請求項１に記載の画像表示システム。
【請求項６】
上記第１画像データ、上記第２画像データ及び上記音楽データを送信する送信部と、上記送信部により送信された上記第１画像データ上記第２画像データ及び上記音楽データを受信する受信部をさらに備え、上記音声発生部、上記第１画像表示部及び上記第２画像表示部は、それぞれ上記受信部により受信した上記音楽データを表す音楽、上記第１画像データを表す上記第１画像及び上記第２画像データを表す上記第２画像を表示することを特徴とする請求項２に記載の画像表示システム。
【請求項７】
第１画像の表現効果を判定するステップと、
上記第１画像とは異なる第２画像のトランジッション効果が上記第１画像のトランジッション効果と同調するように上記第２画像データを編集するステップと、
上記第２画像を表示するステップと、
を備えたことを特徴とする画像表示方法。
【請求項８】
第１画像の動画像を分析し分類する画像分析部と、
上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定する比較部と、
この比較部によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換える類似画像置き換え部と、
この類似画像置き換え部によって置き換えられた画像を表示する表示部と、
を備えたことを特徴とする画像表示システム。
【請求項９】
上記画像分析部は、顔画像および風景画像の少なくとも一つを分析可能であることを特徴とする請求項８に記載の画像表示システム。
【請求項１０】
上記類似画像置き換え部によって、置き換えることのできなかった第２画像を、置き換えられなかった上記第１画像に等間隔で置き換える未対応画像置き換え部を具備することを特徴とする請求項８に記載の画像表示システム。
【請求項１１】
上記第１画像は、カメラによって撮影されたカメラ画像であることを特徴とする請求項８に記載の画像表示システム。
【請求項１２】
上記第２画像は、カラオケ装置のコンテンツ、インターネット上のサーバーに保管された動画、またはテレビ放送のコマーシャルのいずれかであることを特徴とする請求項８に記載の画像表示システム。
【請求項１３】
第１画像の動画像を分析し、第１の画像を分類し、
上記第１画像とは異なる第２画像の動画像を比較し、類似画像の在否を判定し、
この比較によって類似画像が存在する場合に、上記第１画像を対応する第２画像に置き換え、
この置き換えられた画像を表示する、
ことを特徴とする画像表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２００９−２０２３４（Ｐ２００９−２０２３４Ａ）
【公開日】平成２１年１月２９日（２００９．１．２９）
【国際特許分類】
【出願番号】特願２００７−１８１７０９（Ｐ２００７−１８１７０９）
【出願日】平成１９年７月１１日（２００７．７．１１）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
【公開日】平成２１年１月２９日（２００９．１．２９）
【国際特許分類】
【出願日】平成１９年７月１１日（２００７．７．１１）
【出願人】（５０４３７１９７４）オリンパスイメージング株式会社 (2,647)
【出願人】（００００００３７６）オリンパス株式会社 (11,466)
【Ｆターム（参考）】
[ Back to top ]