画像表示装置
【課題】元画像に画像処理を施した鑑賞用画像の表示に際し、画像の表示と並行して音楽を再生することにより演出効果を得る場合に、より高い演出効果を確保する。
【解決手段】元画像Ｇ１に画像処理を施した鑑賞用画像Ｇ３の表示に際し、元画像Ｇ１が鑑賞用画像Ｇ３に変化する過程を表現する複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・を生成する。ＢＧＭとして音楽の再生を開始した後、鑑賞用画像Ｇ３の表示に先立ち、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・を、音楽情報に基づき予め設定した表示タイミングで順に切り替えて表示する。
【解決手段】元画像Ｇ１に画像処理を施した鑑賞用画像Ｇ３の表示に際し、元画像Ｇ１が鑑賞用画像Ｇ３に変化する過程を表現する複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・を生成する。ＢＧＭとして音楽の再生を開始した後、鑑賞用画像Ｇ３の表示に先立ち、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・を、音楽情報に基づき予め設定した表示タイミングで順に切り替えて表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音楽を再生しながら、画像処理を施した鑑賞用画像を表示する技術に関するものである。
【背景技術】
【０００２】
近年、例えばデジタルカメラにより撮影され画像データとして記録された画像を鑑賞用に表示する表示装置として種々のデジタルフォトフレーム（以下、ＤＰＦという。）が商品化されている。また、ＤＰＦには、表示対象の画像である元画像を画像処理によって特定の画調を備えた絵画調画像に変換し、変換後の絵画調画像を表示するアート変換機能を備えたものがある。なお、画調とは、画像から感じることができる印象に基づいて規定される絵画的な特徴であり、日本画調、西洋画調、水彩画調、水墨画調、ペン画調、ゴッホ調など、様々に分類することができるものである。アート変換機能を用いれば、元画像を新たな作品として鑑賞をすることができる。
【０００３】
一方、例えば下記特許文献１には、音楽を再生する間に、特定の画像を予め決められているタイミングで表示する方法が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２５２９０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで特許文献１に記載されている方法は、ＤＰＦにおけるアート変換機能にも採用することができる。すなわちアート変換機能で絵画調画像を表示する際に、任意の音楽をＢＧＭ（background music）として再生し、係る音楽の再生中に特定のタイミングで絵画調画像を表示させれば、絵画調画像の表示に際して一定の演出効果を得ることができる。
【０００６】
しかしながら、音楽の再生中に、単に特定のタイミングで絵画調画像を表示させたとしても、絵画調画像の表示に際して得られる演出効果には自ずと限界があるという問題があった。
【０００７】
本発明は、かかる課題に鑑みてなされたものであり、元画像に画像処理を施した鑑賞用画像の表示に際し、画像の表示と並行して音楽を再生することにより演出効果を得る場合に、より高い演出効果を確保することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の第１の観点に係る画像表示装置にあっては、元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、音楽を再生する音楽再生手段と、前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、前記表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段とを備えたことを特徴とする
【０００９】
本発明の第２の観点に係るプログラムあっては、コンピュータを、元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、音楽を再生する音楽再生手段と、前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段として機能させることを特徴とする。
【発明の効果】
【００１０】
本発明によれば、元画像に画像処理を施した鑑賞用画像の表示に際し、画像の表示と並行して音楽を再生することにより演出効果を得る場合に、より高い演出効果を確保することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明に係る各実施形態に共通するデジタルフォトフレームのハードウェア構成を示す概略ブロック図である。
【図２】デジタルフォトフレームの機能の要部を示す機能ブロック図である。
【図３】音楽ファイルのフォーマットを示した概念図である。
【図４】第１の実施形態におけるＣＰＵの処理手順を示すフローチャートである。
【図５】ＢＧＭ付きアート変換モードで表示される画像を示す模式図である。
【図６】変換経過画像の具体例を、音楽データの再生時間と対応付けて示した図である。
【図７】複数の変換経過画像の他の例を示す説明図である。
【図８】第２の実施形態におけるＣＰＵの処理手順を示すフローチャートである。
【図９】ＢＧＭ付きアート変換モードで表示される画像を示す模式図である。
【図１０】第３の実施形態におけるＣＰＵの処理手順を示すフローチャートである。
【図１１】ＢＧＭ付きアート変換モードで表示される画像を示す模式図である。
【発明を実施するための形態】
【００１２】
以下、本発明の一実施形態について説明する。後述する各実施形態は、画像データとして記録されている画像を絵画調画像に変換し鑑賞用画像として表示するアート変換機能と、音楽データとして記録されている音楽を再生する音楽再生能とを備えたＤＰＦ（デジタルフォトフレーム）に関するものである。
【００１３】
（実施形態１）
まず、本発明の第１の実施形態について説明する。図１は、本発明を適用した各実施形態に共通するＤＰＦ１のハードウェア構成を示す概略ブロック図である。ＤＰＦ１は、ＣＰＵ（Central Processing Unit）１０１によってシステムの全体を制御される構成である。ＣＰＵ１０１には、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access memory）１０３、メディアコントローラ１０４、操作キー群２０１、ディスプレイ３０１、音声処理部４０１が接続されている。
【００１４】
ＲＯＭ１０２は、ＣＰＵ１０１にシステム全体を制御させるための複数種のプログラムやデータが記憶されているメモリである。ＲＯＭ１０２に記憶されているプログラムには、第１の実施形態においてＣＰＵ１０１を第１の画像生成手段、第２の画像生成手段、音楽再生手段、表示制御手段、取得手段、タイミング設定手段として機能させる画像表示プログラム１０２ａが含まれる。
【００１５】
ＲＡＭ１０３は、ＣＰＵ１０１がＤＰＦ１の制御に際し、必要に応じ種々のデータを一時記憶する作業用のメモリであり、具体的にはＳＤＲＡＭ（Synchronous dynamic random-access memory）等である。
【００１６】
メディアコントローラ１０４は、ＤＰＦ１の図示しない本体に設けられているメモリカードスロットに着脱自在に装着された記録メディア５０と、ＣＰＵ１０１との間におけるデータの入出力を制御する入出力インターフェースである。記録メディア５０は、フラッシュメモリーからなる不揮発性のカード型の記憶媒体である。記録メディア５０には、画像データ、及び音楽データが複数記憶されている。
【００１７】
画像データは、例えばデジタルカメラにおいて撮影により取得されたものであり、ＪＰＥＧ（Joint Photographic Expert Group）方式により圧縮された画像データ本体に、画像に付随する撮影日時等の画像情報が付加され静止画ファイルとして記録メディア５０に記憶されている。
【００１８】
音楽データは、各種のデジタルオーディオプレーヤや、パーソナルコンピュータ等において再生可能なデータであり、例えばインターネットを介して取得されたものである。音楽データは、ＭＰ３（MPEG1 Audio Layer-3）方式で圧縮された音楽データ本体に、音楽に付随するアーティスト名や各楽曲のタイトル等の音楽情報が付加され音楽ファイルとして記録メディア５０に記憶されている。
【００１９】
図３は、記録メディア５０に記憶されている音楽ファイル５０１のフォーマットを示す概念図である。音楽ファイル５０１は、ファイル情報とＩＤ３タグとＭＰ３オーディオデータとから構成される。ファイル情報はファイルの名等の基本情報であり、ＭＰ３オーディオデータは音楽データ本体であり、ＩＤ３タグは音楽の内容を示す複数種の音楽情報が格納された部分である。
【００２０】
図３に示したＩＤ３タグは、具体的にはＩＤ３ｖ２（ＩＤ３ version 2）のフォーマットのデータであり、主としてヘッダ、拡張ヘッダと、フレーム群（♯０１〜♯０ｎ）とから構成される。ヘッダには、文字列「ＩＤ３」の他、タグ情報のバージョンやＩＤ３タグの構造や、長さの情報が格納される。また、拡張ヘッダには、より詳細なＩＤ３タグの構造を示す情報が格納される。
【００２１】
フレーム群（♯０１〜♯０ｎ）は１以上の可変長のフレームの集合であり、各フレームはフレームヘッダとフレームデータとから構成される。フレームデータには、アーティスト名や楽曲のタイトル、さらにミリ秒単位で示したオーディオファイルの長さを示す再生時間情報や、主要部分での一分間の拍数を示す整数値である拍数情報であるＢＰＭ（Beats Per Minute）等の種々の音楽情報が格納される。フレームヘッダには、各々のフレームデータに格納されている情報の種別を示すフレームＩＤが格納される。したがって、フレームＩＤを確認すれば、任意の音楽情報が格納されているフレームを特定し、必要とする音楽情報を得ることができる。
【００２２】
操作キー群２０１は、電源スイッチ及び複数の操作スイッチから構成される。ＣＰＵ１０１は、操作キー群２０１における操作キー等の操作状態を定常的にスキャンすることにより、所定のキー操作によるユーザからの種々の指示を検知する。
【００２３】
ディスプレイ３０１は、バックライト付きのカラー液晶表示パネルと、ＣＰＵ１０１から供給される画像データ等の表示データに応じてカラー液晶表示パネルを駆動し、画像データにより表される画像等をカラー液晶表示パネルに表示させる駆動回路とから構成される。
【００２４】
音声処理部４０１は、ＣＰＵ１０１から供給されるデコード後の音楽データであるデジタル音声信号をアナログ音声信号に変換するＤ／Ａ（digital-to-analog conversion）コンバータ、及びアナログ音声信号を増幅するアンプから構成される。音声処理部４０１において増幅されたアナログ音声信号はスピーカ４０２へ供給され、スピーカ４０２から音楽として出力される。
【００２５】
図２は、第１の実施形態において、図１に示したＤＰＦ１の各部により実現される機能の要部を示す、各実施形態に共通する機能ブロック図である。ＤＰＦ１は、制御部１０と、操作部２０、表示部３０、音声出力部４０を有している。制御部１０は、画像再生部１１、音楽再生部１２、音楽情報取得部１３、画像変換部１４、表示画像生成部１５、タイミング設定部１６、表示制御部１７、記憶部１８から構成される。
【００２６】
操作部２０は、ＤＰＦ１に対するユーザからの各種の指示を検知する機能部分であり、図１に示した操作キー群２０１により実現される。
【００２７】
表示部３０は、記録メディア５０に記録されている画像データにより表される画像や、ユーザがＤＰＦ１を操作する際に必要とする各種の操作画面を表示する。表示部３０は、図１に示したディスプレイ３０１により実現される。
【００２８】
音声出力部４０は、記録メディア５０に記録されている音楽データに基づく音楽を出力する。音声出力部４０は、図１に示した音声処理部４０１とスピーカ４０２とにより実現される。
【００２９】
画像再生部１１は、記録メディア５０に静止画ファイルとして記憶されている圧縮符号化された任意の画像データを復号化し、画像変換部１４及び記憶部１８へ供給する。画像再生部１１は、図１に示したＣＰＵ１０１により実現される。
【００３０】
音楽再生部１２は、記録メディア５０に音楽ファイルとして記憶されている圧縮符号化された任意の音楽データを復号化し、音声出力部４０へ供給する。音楽再生部１２も、図１に示したＣＰＵ１０１により実現される。
【００３１】
音楽情報取得部１３は、音楽再生部１２が再生対象とする音楽データに付加されている再生時間情報を取得し、記憶部１８へ供給する。再生時間情報は、先に説明したようにＩＤ３タグを構成する特定のフレームに記述されているミリ秒単位で示したオーディオファイルの長さである。音楽情報取得部１３も、図１に示したＣＰＵ１０１により実現される。
【００３２】
画像変換部１４は、画像再生部１１から供給された画像データに対してアート変換処理を施すことにより、特定の画調を備えた絵画調画像を表す絵画調画像データを生成し、記憶部１８へ供給する。画像変換部１４も、図１に示したＣＰＵ１０１により実現される。
【００３３】
画像変換部１４におけるアート変換処理は、例えば特開平１０−０１１５６９号公報及び特開２００６−０３１６８８号公報に開示されている技術を適用したものである。具体的に説明すると、アート変換処理は、画像データを構成する画素から、色などを基準として相関の高い画素を集めてグループを形成し、形成したグループ毎に、グループ内の画素の色を該グループの代表色に置き換える処理である。
【００３４】
アート変換処理においては、グループとして集められる画素の相関の取り方、及び同一の色（代表色）の画素により構成されるグループの基本形状を変化させることによって、処理後の画像データが表す画像に様々な画調を与えることができる。
【００３５】
また、例えば同一の色（代表色）の画素により構成されるグループの大きさ（画素数）を変化させることにより、処理後の画像データに与えられる画調が同一であっても、アート変換処理の強度を変化させることができる。ここで、アート変換処理の強度（以下、単に変換強度という。）とは、処理後の画像データにより表される画像から感じることができる絵画らしさの度合である。
【００３６】
アート変換処理で用いる同一グループを形成すべき画素の相関度、グループの基本形状や大きさといったパラメータの組み合わせは複数の画調毎に予め決められており、画調毎のパラメータの組み合わせが、ＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに記述されている。
【００３７】
表示画像生成部１５は、画像再生部１１が再生した画像データにより表される画像（以下、「元画像」という。）が、絵画調画像データにより表される絵画調画像に変化する過程を表現する複数の変換経過画像を表す複数の変換経過画像データを生成する。
【００３８】
タイミング設定部１６は、音楽情報取得部１３によって取得され記憶部１８に記憶された特定の音楽情報に基づいて、表示画像生成部１５が生成する異なる変換経過画像データにより表される複数の変換経過画像の各々の表示タイミングを設定する。タイミング設定部１６も、図１に示したＣＰＵ１０１により実現される。
【００３９】
表示制御部１７は、画像再生部１１が再生した画像データにより表される元画像、及び画像変換部１４が生成した絵画調画像データにより表される絵画調画像、表示画像生成部１５が生成した複数の変換経過画像データによりそれぞれ表される複数の変換経過画像を表示部３０に表示させる。図１に示したＣＰＵ１０１により実現される。
【００４０】
記憶部１８は、音楽情報取得部１３が取得した再生時間情報、画像再生部１１による復号化後の画像データ、画像変換部１４によるアート変換処理後の絵画調画像データ、タイミング設定部１６が設定した複数の変換経過画像毎の複数の表示タイミングを示すタイミング情報等を一時的に記憶する。また、記憶部１８は、制御部１０が表示部３０に表示させる各種の設定面等のデータも一時的に記憶する。記憶部１８は、図１に示したＲＡＭ１０３により実現される。
【００４１】
次に、以上の構成からなるＤＰＦ１の動作について説明する。ＤＰＦ１には動作モードとしてＢＧＭ（background music）付きアート変換モードが用意されている。ＢＧＭ付きアート変換モードは、記録メディア５０に記録されている音楽を再生しながら、記録メディア５０に記録されている画像を絵画調画像に変換し鑑賞用画像として表示する動作モードである。なお、ＢＧＭ付きアート変換モードは、ユーザが操作キー群２０１の所定の操作キーを操作することによって適宜設定可能である。
【００４２】
以下、ＢＧＭ付きアート変換モードが設定されたときのＤＰＦ１の具体的な動作について説明する。図４は、ＢＧＭ付きアート変換モードにおいて、制御部１０（ＣＰＵ１０１）がＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに従って実行する処理を示したフローチャートである。
【００４３】
ＢＧＭ付きアート変換モードにおいては、まず制御部１０が、操作キー群２０１における操作キー等の操作状態を逐次検出することによって、処理対象となる画像データ及び音楽データと、アート変換後の絵画調画像に確保すべき画調とを設定する（ステップＳＡ１）。
【００４４】
ステップＳＡ１の処理において、制御部１０は、記録メディア４０に記録されている画像データを読み出し、読み出した画像データにより表される画像を表示部３０（ディスプレイ３０１）の画面上に選択候補として一覧表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望する画像を選択させ、選択された画像のファイル名を記憶部１８（ＲＡＭ１０３）に記憶する。
【００４５】
ステップＳＡ１の処理において制御部１０は、記録メディア４０に記録されている音楽データにそれぞれ付加されている付加されている曲名情報を読み出し、読み出した曲名情報を表示部３０（ディスプレイ３０１）の画面上に選択候補として一覧表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望する音楽（曲名）を選択させ、選択された音楽のファイル名を記憶部１８に記憶する。
【００４６】
また、ステップＳＡ１の処理において制御部１０は、予め用意されている画調の種類（日本画調、西洋画調、水彩画調、水墨画調、ペン画調、ゴッホ調等）を表示部３０に選択候補として一覧表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望する画調を選択させ、選択された画調を示すデータを記憶部１８に記憶する。
【００４７】
次に、音楽情報取得部１３（ＣＰＵ１０１）が、ステップＳＡ１の処理で処理対象として設定された音楽データに付加されている再生時間情報を取得する（ステップＳＡ２）。さらに、タイミング設定部１６（ＣＰＵ１０１）が、音楽情報取得部１３により取得された再生時間情報に基づいて、複数の変換経過画像毎の複数の表示タイミングを設定する（ステップＳＡ３）。
【００４８】
ステップＳＡ３の処理においてタイミング設定部１６は、まず、再生時間情報により示される処理対象の音楽データの全再生時間を、予め決められている表示回数で除算することによって表示単位時間を計算する。ここで表示回数は、後述する複数の変換経過画像、及び絵画調画像からなる複数の画像を表示する回数であり、以下の説明においては、便宜上、予め決められている表示回数が７回であるものとする。したがって、例えば音楽データの全再生時間が３分３０秒である場合には、表示単位時間は３０秒となる。
【００４９】
そして、タイミング設定部１６は、処理対象の音楽データの再生を開始してから表示単位時間が経過する毎の再生時間を、複数の変換経過画像毎の複数の表示タイミングとして決定する。但し、音楽データの全再生時間となる再生時間は表示タイミングから除く。しかる後、タイミング設定部１６は、決定した複数の表示タイミング、つまり表示回数−１回分の複数の表示タイミングを示すタイミング情報を記憶部１８に記憶する。
【００５０】
したがって、例えば音楽データの全再生時間が３分３０秒である場合には、表示単位時間は３０秒であるため、ステップＳＡ３の処理においてタイミング設定部１６は、複数の変換経過画像毎の表示タイミングとして、０分３０秒、１分００秒、・・・３分００秒の各再生時間を設定する。
【００５１】
引き続き、画像再生部１１（ＣＰＵ１０１）が、ステップＳＡ１の処理で処理対象として設定された画像データを復号化するとともに、表示制御部１７（ＣＰＵ１０１）が、復号化後の画像データにより表される元画像を表示部３０に表示させる（ステップＳＡ４）。
【００５２】
また、画像変換部１４（ＣＰＵ１０１）が、元画像を表す画像データにアート変換処理を施し、処理後の絵画調画像データ、つまりステップＳＡ１の処理で設定された特定の画調を備えた絵画調画像を表す絵画調画像データを記憶部１８に記憶する（ステップＳＡ５）。
【００５３】
次に、音楽再生部１２（ＣＰＵ１０１）が、ステップＳＡ１の処理で処理対象として設定された音楽データの再生を開始する（ステップＳＡ６）。つまり音楽再生部１２が、処理対象の音楽データを復号化し、復号化後の音楽データを音声出力部４０（音声処理部４０１）へ順次に供給することにより、音声出力部４０によるＢＧＭの音声出力を開始する。
【００５４】
その後、記憶部１８に記憶されているタイミング情報により示される変換経過画像の表示タイミングが到来すると（ステップＳＡ７：ＹＥＳ）、表示画像生成部１５が、表示タイミングに応じた変換経過画像データを生成する（ステップＳＡ８）。
【００５５】
ステップＳＡ８の処理において表示画像生成部１５が生成する変換経過画像データは、元画像が絵画調画像に変化する過程を表現するための以下の変換経過画像を表す画像データである。すなわち変換経過画像は、元画像の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像に置き換えた画像である。変換経過画像の詳細については後述する。
【００５６】
そして、表示制御部１７が、表示画像生成部１５が生成した変換経過画像データを表示部３０に供給し、変換経過画像データにより表される変換経過画像を表示部３０に表示させる（ステップＳＡ９）。
【００５７】
引き続き、音楽データの再生が終了するまでの間においては（ステップＳＡ１０：ＮＯ）、変換経過画像の表示タイミングが到来する毎に（ステップＳＡ７：ＹＥＳ）、ステップＳＡ８及びステップＳＡ９の処理が繰り返し行われる。ステップＳＡ８及びステップＳＡ９の処理が繰り返されることにより、複数の変換経過画像が、絵画調画像に置き換えられた部分の面積が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【００５８】
その後、表示制御部１７が、音楽データの再生が終了した時点で（ステップＳＡ１０：ＹＥＳ）、記憶部１８に記憶されている絵画調画像データを表示部３０へ供給し、絵画調画像データにより表される絵画調画像を表示部３０に表示させる（ステップＳＡ１１）。 これにより制御部１０は、ＢＧＭ付きアート変換モードによる処理を終了する。なお、制御部１０は、表示部３０における絵画調画像の表示を、例えばユーザによって操作キー群２０１の所定の操作キーが操作されるまで継続する。
【００５９】
図５は、以上の処理に際して表示部３０に順に表示される元画像Ｇ１と、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・と、絵画調画像Ｇ３とを示した模式図である。なお、図５は、音楽データの全再生時間が３分３０秒である場合の例を示した図である。
【００６０】
先に説明したように、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・は、元画像Ｇ１の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像Ｇ３に置き換えた画像である。なお、図５において破線で区画された領域が分割領域である。
【００６１】
つまり音楽データの再生時間（再生開始後の経過時間）が３０秒であるときの１回目の表示タイミングに応じた変換経過画像Ｇ２ａは、元画像Ｇ１の一番左端の分割領域のみを絵画調画像Ｇ３に置き換えた画像である。また、音楽データの再生時間が１分００秒であるときの２回目の表示タイミングに応じた変換経過画像Ｇ２ｂは、元画像Ｇ１の左端の２つの分割領域のみを絵画調画像Ｇ３に置き換えた画像である。図６は、２回目の表示タイミングに応じた変換経過画像Ｇ２ｂの具体例を、音楽データの再生時間（再生開始後の経過時間）と対応付けて示した図である。
【００６２】
以上のようにＤＰＦ１においては、ＢＧＭ付きアート変換モードで絵画調画像を表示する際、絵画調画像の表示と並行して音楽を再生するとともに、音楽の再生中には、元画像が絵画調画像に変化する過程を表現する複数の変換経過画像を音楽の進行に合わせて順に切り替えて表示する。
【００６３】
そのため、ＤＰＦ１においては、ユーザがＢＧＭ付きアート変換モードを用いて絵画調画像を鑑賞する際、元画像が絵画調画像に変化する過程を音楽の進行に合わせてユーザに鑑賞させることができる。したがって、例えば音楽の再生中に、単に特定のタイミングで絵画調画像を表示させる場合に比べ、絵画調画像の表示に際してより高い演出効果を確保することができる。
【００６４】
ここで、第１の実施形態においては、音楽（ＢＧＭ）の再生中に表示する複数の変換経過画像の数、つまり変換経過画像の表示回数が固定されている構成について説明した。しかし、表示回数は固定値でなくともよく、例えば表示回数をユーザに指定させる構成としてもよい。また、表示回数は、ＢＧＭとして再生する音楽の内容に応じて変化させてもよい。
【００６５】
表示回数をＢＧＭとして再生する音楽の内容に応じて変化させる方法としては、例えば表示単位時間を固定しておくことにより、表示回数を音楽データの全再生時間に比例して増減させる方法がある。表示回数を音楽データの全再生時間に比例して増減させる場合には、例えば以下のようにすればよい。
【００６６】
すなわちＣＰＵ１０１を画像数制御手段として機能させる画像表示プログラム１０２ａをＲＯＭ１０２に記憶させておく。そして、図４のステップＳＡ３の処理においては、タイミング設定部１６に、全再生時間を変数とする計算式を用いた計算等によって全再生時間に比例する表示回数を取得させた後、取得した表示回数を用いて変換経過画像毎の複数の表示タイミングを設定させればよい。
【００６７】
また、表示回数をＢＧＭとして再生する音楽の内容に応じて変化させる方法としては、例えば表示回数を音楽データの主要部分での一分間の拍数に比例して増減させる方法がある。表示回数を音楽データの主要部分での一分間の拍数に比例して増減させる場合にも、ＣＰＵ１０１を画像数制御手段として機能させる画像表示プログラム１０２ａをＲＯＭ１０２に記憶されておく。
【００６８】
そして、図４のステップＳＡ２の処理においては、音楽情報取得部１３に、音楽データに付加されている再生時間情報と共に拍数情報（ＢＰＭ）を取得させる。しかる後、図４のステップＳＡ３の処理においては、タイミング設定部１６に、拍数情報により示される拍数を変数とする計算式を用いた計算等によって拍数に比例する表示回数を取得させた後、取得した表示回数を用いて変換経過画像毎の複数の表示タイミングを設定させればよい。
【００６９】
表示回数をＢＧＭとして再生する音楽の内容（拍数情報等）に応じて変化させる構成とすれば、同一の元画像を同一の画調を有する絵画調画像に変換して表示する場合であっても、ＢＧＭとして再生する音楽が異なると変換経過画像が切り替わるテンポが変化する。したがって、絵画調画像の表示に際し、ＢＧＭとして再生する音楽に応じた多様な演出効果を確保することができる。
【００７０】
また、第１の実施形態においては、音楽の再生中に表示する複数の変換経過画像が、元画像の全域を表示回数に応じた数で横方向に分割し、表示タイミングが到来した回数に応じた数の左側の分割領域のみを絵画調画像に置き換えたものである場合について説明した。
【００７１】
しかし、複数の変換経過画像は、元画像が絵画調画像に変化する過程を表現するものであればよい。したがって、複数の変換経過画像は、以下の画像としてもよい。
【００７２】
図７（ａ）〜（ｅ）は、複数の変換経過画像の他の例をそれぞれ示す説明図であり、第１の実施形態と同様、元画像を部分的に絵画調画像に置き換えるとともに、絵画調画像に置き換える部分の面積（分割領域の数）が表示順に従い増大させたものを示した図である。なお、図７（ａ）〜（ｅ）は、図５に示した１回目の表示タイミングに応じた変換経過画像Ｇ２ａに対応する変換経過画像Ｇ２のみを示した図である。
【００７３】
すなわち複数の変換経過画像は、例えば図７（ａ）に示したように、元画像の全域を表示回数に応じた数で横方向に分割し、表示タイミングが到来した回数に応じた数の右側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７４】
また、複数の変換経過画像は、例えば図７（ｂ）に示したように、元画像の全域を表示回数に応じた数で縦方向に分割し、表示タイミングが到来した回数に応じた数の上側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７５】
また、複数の変換経過画像は、例えば図７（ｃ）に示したように、元画像の全域を表示回数に応じた数で縦方向に分割し、表示タイミングが到来した回数に応じた数の上側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７６】
また、複数の変換経過画像は、例えば図７（ｄ）に示したように、元画像の全域を表示回数に応じた数で内外方向に分割し、表示タイミングが到来した回数に応じた数の内側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７７】
また、複数の変換経過画像は、例えば図７（ｅ）に示したように、元画像の全域を表示回数に応じた数で内外方向に分割し、表示タイミングが到来した回数に応じた数の外側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７８】
また、図示しないが、複数の変換経過画像は、例えば元画像の全域をマトリックス状に表示回数に応じた数に分割し、複数の分割領域を、表示タイミングが到来する毎に予め決められた順序やランダムな順序で絵画調画像に順に置き換えたものとしてもよい。
【００７９】
（実施形態２）
次に、本発明の第２の実施形態について説明する。第２の実施形態は、図１に示した構成を備え、ＢＧＭ付きアート変換モードにおいて、複数の変換経過画像として第１の実施形態とは異なる複数の画像を表示する他のＤＰＦに関するものである。なお、第２の実施形態のＤＰＦは、図２に示した制御部１０の複数の機能部分のうち、表示画像生成部１５を廃止したものである。
【００８０】
また、第２の実施形態においては、図２に示した画像変換部１４が、元画像を表す画像データに変換強度を変えた複数回のアート変換処理を施すことにより、変換強度が異なる複数の絵画調画像をそれぞれ表す複数種類の絵画調画像データを生成する。ここで、変換強度とは、先に述べたように絵画調画像データにより表される絵画調画像から感じることができる絵画らしさの度合である。つまり第２の実施形態において画像変換部１４は、特定の画調を有するとともに絵画らしさの度合が異なる複数の絵画調画像をそれぞれ表す複数種類の絵画調画像データを生成する。
【００８１】
また、図２に示した表示制御部１７は、画像変換部１４が生成した複数種類の絵画調画像データにより表される複数の絵画調画像を、複数の変換経過画像として表示部３０へ表示させる。
【００８２】
次に、第２の実施形態のＤＰＦにおいてＢＧＭ付きアート変換モードが設定されたときの具体的な動作について説明する。図８は、ＢＧＭ付きアート変換モードにおいて、制御部１０がＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに従って実行する処理を示したフローチャートである。
【００８３】
第２の実施形態においては、まず制御部１０が、操作キー群２０１における操作キー等の操作状態を逐次検出することによって、処理対象となる画像データ及び音楽データと、アート変換後の絵画調画像に確保すべき画調と、変換強度とを設定する（ステップＳＢ１）。ステップＳＢ１の処理で制御部１０が画像データと音楽データと画調とを設定する際の具体的な手順については、図４のステップＳＡ１の処理と同様である。
【００８４】
また、ステップＳＢ１の処理で制御部１０が設定する変換強度は、ＢＧＭ付きアート変換モードにおいて最終的に鑑賞用画像として表示する絵画調画像を得るために、画像変換部１４が処理対象の画像データにアート変換処理を施す際の変換強度である。変換強度の設定に際して制御部１０は、例えば表示部３０に変換強度の設定画面を表示し、ユーザに所定のキー操作によって所望する変換強度を選択的又は直接的に指定させる。そして、制御部１０は、ユーザに指定された変換強度を示す変換強度情報を記憶部１８に記憶する。
【００８５】
次に、音楽情報取得部１３が、ステップＳＢ１の処理で処理対象として設定された音楽データに付加されている再生時間情報を取得する（ステップＳＢ２）。さらに、タイミング設定部１６が、音楽情報取得部１３により取得された再生時間情報に基づいて、表示タイミングを設定する（ステップＳＢ３）。
【００８６】
ここで、タイミング設定部１６が設定する表示タイミングは、画像変換部１４が生成する複数種類の絵画調画像データにより表される複数種類の絵画調画像データによってそれぞれ表される変換強度が異なる複数の絵画調画像の表示タイミングである。
【００８７】
ステップＳＢ３においてタイミング設定部１６は、まず、再生時間情報により示される処理対象の音楽データの全再生時間を、予め決められている表示回数で除算することによって表示単位時間を計算する。そして、タイミング設定部１６は、処理対象の音楽データの再生を開始してから表示単位時間が経過する毎の再生時間を、それぞれ表示タイミングとして決定する。なお、第１の実施形態とは異なり、タイミング設定部１６は、音楽データの終了時間（全再生時間）を含めた複数の再生時間を表示タイミングとして決定する。そして、タイミング設定部１６は、決定した表示回数分の表示タイミングを示すタイミング情報を記憶部１８に記憶する。
【００８８】
次に、画像再生部１１が、処理対象として設定された画像データを復号化するとともに、表示制御部１７が、復号化後の画像データにより表される元画像を表示部３０に表示させる（ステップＳＢ４）。さらに、音楽再生部１２が、ステップＳＢ１の処理で処理対象として設定された音楽データの再生、つまり音声出力部４０によるＢＧＭの音声出力を開始する（ステップＳＢ５）。
【００８９】
その後、記憶部１８に記憶されているタイミング情報により示される変換経過画像毎の表示タイミングが到来すると（ステップＳＢ６：ＹＥＳ）、画像変換部１４が、表示タイミングに応じた変換強度の絵画調画像データを生成する（ステップＳＢ７）。
【００９０】
ここで、表示タイミングに応じた変換強度とは、記憶部１８に記憶されている変換強度情報により示される変換強度を最大とした表示回数分の複数段階の変換強度のうちで、表示タイミングが到来した回数に応じた段階の変換強度である。具体的に説明すると、例えば予め決められている表示回数がｎ回である場合には、変換強度の段階数はｎ段階であり、第１段階の変換強度が最小、第ｎ段階の変換強度が最大である。すなわち１回目の表示タイミングに応じた変換強度が第１段階の変換強度であり、２回目の表示タイミングに応じた変換強度が第２段階の変換強度であり、表示回数が増える毎に対応する変換強度が大きくなる。
【００９１】
また、各段階の変換強度の違いは、画像変換部１４が復号化後の画像データにアート変換処理を施す際における、先に説明した同一の色（代表色）の画素により構成されるグループの大きさ（画素数）の違いである。つまりステップＳＢ７の処理において画像変換部１４は、処理単位となる画素グループの大きさを表示タイミングに応じた大きさであって、表示回数が増える毎に段階的に増大する大きさに設定した内容のアート変換処理を行う。なお、表示タイミングに応じた（変換強度に対応する）画素グループの大きさは、画調毎に予め決められている（画像表示プログラム１０２ａに記述されている）大きさである。
【００９２】
しかる後、表示制御部１７が、画像変換部１４が生成した絵画調画像データを表示部３０に供給し、絵画調画像データにより表される絵画調画像を表示部３０に表示させる（ステップＳＢ８）。
【００９３】
引き続き、音楽データの再生が終了するまでの間（ステップＳＢ９：ＮＯ）、絵画調画像の表示タイミングが到来する毎に（ステップＳＢ６：ＹＥＳ）、ステップＳＢ７及びステップＳＢ８の処理が繰り返し行われる。ステップＳＢ７及びステップＳＢ８の処理が繰り返されることにより、変換強度の異なる複数の絵画調画像が、変換強度が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【００９４】
その後、制御部１０が、音楽データの再生が終了した時点で（ステップＳＢ９：ＹＥＳ）、すなわちステップＳＢ７及びステップＳＢ８の処理によって、変換強度が最大の絵画調画像が表示部３０に表示された時点で、制御部１０は、ＢＧＭ付きアート変換モードによる処理を終了する。なお、制御部１０は、表示部３０に最後に表示した絵画調画像の表示状態を、例えばユーザによって操作キー群２０１の所定の操作キーが操作されるまで継続する。
【００９５】
図９は、以上の処理において表示部３０に順に表示される元画像Ｇ１と、変換強度の異なる複数の絵画調画像Ｇ３ａ〜Ｇ３ｆを示した模式図である。なお、図９は、音楽データの全再生時間が３分００秒であり、予め決められている表示回数が６回である場合の例を示した図である。また、図９は、複数の絵画調画像Ｇ３ａ〜Ｇ３ｆにおける変換強度の違いを斜線の本数の違いにより便宜的に示したものである。
【００９６】
図９に示した複数の絵画調画像Ｇ３ａ〜Ｇ３ｆのうち、１回目の表示タイミングで表示される第１段階の変換強度の絵画調画像Ｇ３ａから、５回目の表示タイミングで表示される第５段階の変換強度の絵画調画像Ｇ３ｅまでの複数の絵画調画像が、第２の実施形態における複数の変換経過画像である。つまり元画像が絵画調画像に変化する過程を表現する複数の変換経過画像である。そして、６回目の表示タイミングで表示される第６段階の変換強度（最大の変換強度）の絵画調画像Ｇ３ｆが、第２の実施形態において鑑賞用画像として最終的に表示される絵画調画像である。
【００９７】
以上のように、第２の実施形態のＤＰＦにおいては、ＢＧＭ付きアート変換モードで絵画調画像を表示する際、絵画調画像の表示と並行して音楽を再生するとともに、音楽の再生中には、元画像が絵画調画像に変化する過程を表現する複数の絵画調画像を音楽の進行に合わせて順に切り替えて表示する。
【００９８】
そのため、第２の実施形態のＤＰＦにおいても、ユーザがＢＧＭ付きアート変換モードを用いてＤＰＦ１に絵画調画像を鑑賞する際、元画像が絵画調画像に変化する過程を音楽の進行に合わせてユーザに鑑賞させることができる。したがって、例えば音楽の再生中に、単に特定のタイミングで絵画調画像を表示させる場合に比べ、絵画調画像の表示に際してより高い演出効果を確保することができる。
【００９９】
ここで、第２の実施形態においては、鑑賞用画像として最終的に表示する絵画調画像を、ユーザが指定した変換強度の絵画調画像とする構成について説明した。しかし、鑑賞用画像として最終的に表示する絵画調画像は、画調毎に予め決められている（画像表示プログラム１０２ａに記述されている）規定の変換強度の絵画調画像としてもよい。
【０１００】
また、第２の実施形態においては、音楽（ＢＧＭ）の再生中に変換経過画像として表示する複数の絵画調画像の数、つまり表示回数が固定されている構成について説明した。しかし、表示回数は固定値でなくともよい。表示回数は、例えばユーザに指定させる構成としてもよいし、第１の実施形態において言及した方法によって、ＢＧＭとして再生する音楽の内容に応じて変化させる構成としてもよい。
【０１０１】
（実施形態３）
次に、本発明の第３の実施形態について説明する。第３の実施形態は、ＢＧＭ付きアート変換モードにおいて、音楽（ＢＧＭ）の再生中に複数の変換経過画像と絵画調画像とを順に表示し、さらに絵画調画像の表示後に、絵画調画像が元画像に戻る過程を表現する複数の解除経過画像を順に表示するＤＰＦに関するものである。
【０１０２】
第３の実施形態のＤＰＦは、図１に示した構成を備えるとともに、画像表示プログラム１０２ａが、ＣＰＵ１０１を第２のタイミング設定手段、第３の画像生成手段としても機能させる構成である。
【０１０３】
第３の実施形態においては、図２に示した表示画像生成部１５が、元画像が絵画調画像に変化する過程を表現する複数の変換経過画像を表す複数の変換経過画像データに加え、以下の画像データを生成する。すなわち表示画像生成部１５は、元画像を表す画像データと絵画調画像を表す絵画調画像データとに基づき複数の解除経過画像データを生成する。解除経過画像データは、絵画調画像が元画像に戻る過程を表現する複数の解除経過画像をそれぞれ表す画像データである。
【０１０４】
また、図２に示したタイミング設定部１６は、複数の変換経過画像毎の表示タイミングに加え、表示画像生成部１５が生成した複数の解除経過画像データによりそれぞれ表される複数の解除経過画像毎の表示タイミングを設定する。
【０１０５】
また、図２に示した表示制御部１７は、元画像と、複数の変換経過画像と、絵画調画像と、複数の解除経過画像とを表示部３０にそれぞれ表示させる。なお、表示制御部１７は、複数の変換経過画像と複数の解除経過画像については、タイミング設定部１６が設定した表示タイミングで表示部３０に表示させ、かつ絵画調画像については、制御部１０が設定した変換終了タイミングで表示部３０に表示させる。
【０１０６】
次に、第３の実施形態のＤＰＦにおいて、ＢＧＭ付きアート変換モードが設定されたときの具体的な動作について説明する。図１０は、ＢＧＭ付きアート変換モードにおいて、制御部１０がＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに従って実行する処理を示したフローチャートである。
【０１０７】
第３の実施形態においては、まず制御部１０が、操作キー群２０１における操作キー等の操作状態を逐次検出することによって、処理対象となる画像データ及び音楽データと、アート変換後の絵画調画像に確保すべき画調と、変換終了タイミングとを設定する（ステップＳＣ１）。ステップＳＣ１の処理において制御部１０が、画像データと音楽データと画調との設定に関する具体的な手順については、図４のステップＳＡ１処理と同様である。
【０１０８】
また、ステップＳＣ１の処理において制御部１０が設定する変換終了タイミングは、処理対象の音楽データの再生中における絵画調画像の表示タイミングである。ステップＳＣ１の処理において制御部１０は、ユーザに所定のキー操作によって、処理対象の音楽データの再生中における任意の時間（再生開始後の経過時間）を指定させる。そして、制御部１０は、ユーザに指定された時間を変換終了タイミングとし、当該変換終了タイミングを示すタイミング情報（以下、第１のタイミング情報という。）を記憶部１８に記憶する。
【０１０９】
次に、音楽情報取得部１３が、ステップＳＣ１の処理で処理対象として設定された音楽データに付加されている再生時間情報を取得する（ステップＳＣ２）。
【０１１０】
次に、タイミング設定部１６が、音楽情報取得部１３により取得された再生時間情報と、記憶部１８に記憶されている第１のタイミング情報により示される変換終了タイミングとに基づいて、変換経過画像毎の複数の表示タイミングを設定する（ステップＳＣ３）。
【０１１１】
ステップＳＣ３の処理においてタイミング設定部１６は、まず、変換終了タイミングである処理対象の音楽データの再生開始後の経過時間を予め決められている表示回数で除算することによって表示単位時間を計算する。ここで表示回数は、後述する複数の変換経過画像と絵画調画像とからなる複数の画像を表示する回数であり、以下の説明においては、便宜上、予め決められている表示回数が７回であるものとする。したがって、例えば変換終了タイミングである再生時間が３分３０秒である場合には、表示単位時間は３０秒となる。
【０１１２】
次に、タイミング設定部１６は、処理対象の音楽データの再生を開始してから表示単位時間が経過する毎の再生時間を、変換経過画像毎の表示タイミングとして決定する。但し、変換終了タイミングである再生時間は表示タイミングから除く。しかる後、タイミング設定部１６は、決定した複数の表示タイミング、つまり表示回数−１回分の表示タイミングを示すタイミング情報（以下、第２のタイミング情報という。）を記憶部１８に記憶する。
【０１１３】
したがって、例えば変換終了タイミングである再生時間が３分３０秒である場合には、表示単位時間は３０秒であるため、ステップＳＣ３の処理においてタイミング設定部１６は、変換経過画像毎の表示タイミングとして、０分３０秒、１分００秒、・・・３分００秒の各再生時間を設定する。
【０１１４】
引き続き、タイミング設定部１６が、音楽情報取得部１３により取得された再生時間情報と、制御部１０が変換終了タイミングとして設定した時間（処理対象の音楽データの再生開始後の経過時間）に基づいて、複数の解除経過画像毎の表示タイミングを設定する（ステップＳＣ４）。
【０１１５】
ステップＳＣ４の処理においてタイミング設定部１６は、まず、処理対象の音楽データの全再生時間における変換終了タイミング以降の残存時間を計算する。次に、タイミング設定部１６は、計算した残存時間を予め決められている表示回数で除算することによって表示単位時間を計算する。
【０１１６】
ここで表示回数は、後述する複数の解除経過画像と元画像とからなる複数の画像を表示する回数であり、以下の説明においては、便宜上、予め決められている表示回数が、変換経過画像毎の表示タイミングの設定に際して使用した表示回数と同様に７回であるものとする。したがって、例えば音楽データの全再生時間が７分００秒であり、変換終了タイミングの再生時間が３分３０秒である場合には、残存時間も３分３０秒であるため、表示単位時間は３０秒となる。
【０１１７】
次に、タイミング設定部１６は、処理対象の音楽データの再生時間において、制御部１０が変換終了タイミングとして設定した時間以降に表示単位時間が経過する毎の再生時間を、複数の解除経過画像の表示タイミングとして決定する。但し、音楽データの全再生時間となる再生時間は表示タイミングから除かれる。しかる後、タイミング設定部１６は、決定した複数の表示タイミング、つまり表示回数−１回分の表示タイミングを示すタイミング情報（以下、第３のタイミング情報という。）を記憶部１８に記憶する。
【０１１８】
したがって、例えば音楽データの全再生時間が７分００秒であり、変換終了タイミングである再生時間が３分３０秒である場合には、表示単位時間は３０秒であるため、ステップＳＣ４の処理においてタイミング設定部１６は、複数の解除経過画像毎の表示タイミングとして、４分００秒、４分３０秒、・・・６分３０秒の各再生時間を設定する。
【０１１９】
次に、画像再生部１１が、処理対象として設定された画像データを復号化するとともに、表示制御部１７が、復号化後の画像データにより表される元画像を表示部３０に表示させる（ステップＳＣ５）。
【０１２０】
また、画像変換部１４が、元画像を表す画像データにアート変換処理を施し、処理後の絵画調画像データを記憶部１８に記憶する（ステップＳＣ６）。次に、音楽再生部１２が、ステップＳＣ１の処理で処理対象として設定された音楽データの再生、つまり音声出力部４０によるＢＧＭの音声出力を開始する（ステップＳＣ７）。
【０１２１】
その後、記憶部１８に記憶されている第２のタイミング情報により示される変換経過画像の表示タイミングが到来すると（ステップＳＣ８：ＹＥＳ）、表示画像生成部１５が、表示タイミングに応じた変換経過画像データを生成する（ステップＳＣ９）。
【０１２２】
ステップＳＣ９の処理において表示画像生成部１５が生成する変換経過画像データは、第１の実施形態と同様、元画像が絵画調画像に変化する過程を表現するための以下の変換経過画像を表す画像データである。すなわち変換経過画像は、元画像の全域を表示回数に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像に置き換えた画像である。
【０１２３】
そして、表示制御部１７が、表示画像生成部１５が生成した変換経過画像データを表示部３０に供給し、変換経過画像データにより表される変換経過画像を表示部３０に表示させる（ステップＳＣ１０）。
【０１２４】
引き続き、音楽データの再生が終了するまでの間においては（ステップＳＣ１１：ＮＯ）、変換経過画像の表示タイミングが到来する毎に（ステップＳＣ８：ＹＥＳ）、ステップＳＣ９及びステップＳＣ１０の処理が繰り返し行われる。ステップＳＣ９及びステップＳＣ１０の処理が繰り返されることにより、複数の変換経過画像が、絵画調画像に置き換えられた部分の面積が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【０１２５】
そして、表示制御部１７が、記憶部１８に記憶されている第１のタイミング情報により示される変換終了タイミングが到来した時点で（ステップＳＣ１１：ＹＥＳ）、絵画調画像データにより表される絵画調画像を表示部３０に表示させる（ステップＳＣ１２）。
【０１２６】
その後、記憶部１８に記憶されている第３のタイミング情報により示される解除経過画像の表示タイミングが到来すると（ステップＳＣ１３：ＹＥＳ）、表示画像生成部１５が、表示タイミングに応じた解除経過画像データを生成する（ステップＳＣ１４）。
【０１２７】
ステップＳＣ１４の処理において表示画像生成部１５が生成する解除経過画像データは、絵画調画像が元画像に戻る過程を表現するための以下の解除経過画像を表す画像データである。すなわち解除経過画像は、絵画調画像の全域を表示回数に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを元画像に置き換えた画像である。解除経過画像の詳細については後述する。
【０１２８】
そして、表示制御部１７が、表示画像生成部１５が生成した解除経過画像データを表示部３０に供給し、解除経過画像データにより表される解除経過画像を表示部３０に表示させる（ステップＳＣ１５）。
【０１２９】
引き続き、音楽データの再生が終了するまでの間（ステップＳＣ１６：ＮＯ）、解除経過画像の表示タイミングが到来する毎に（ステップＳＣ１３：ＹＥＳ）、ステップＳＣ１４及びステップＳＣ１５の処理が繰り返し行われる。ステップＳＣ１４及びステップＳＣ１５の処理が繰り返されることにより、複数の変換経過画像が、絵画調画像に置き換えられた部分の面積が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【０１３０】
その後、表示制御部１７が、音楽データの再生が終了した時点で（ステップＳＣ１６：ＹＥＳ）、記憶部１８に記憶されている画像データにより表される元画像を表示部３０に表示させる（ステップＳＣ１７）。
【０１３１】
これにより制御部１０は、ＢＧＭ付きアート変換モードによる処理を終了する。なお、制御部１０は、表示部３０における元画像の表示を、例えばユーザによって操作キー群２０１の所定の操作キーが操作されるまで継続する。
【０１３２】
図１１は、以上の処理において表示部３０に順に表示される元画像Ｇ１と、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・と、絵画調画像Ｇ３と、複数の解除経過画像Ｇ４ａ，Ｇ４ｂ，・・・とを示した模式図である。なお、図１１は、音楽データの全再生時間が７分００秒、変換終了タイミングの再生時間が３分３０秒である場合の例を示した図である。
【０１３３】
複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・は、先に説明したように、第１の実施形態と同様であり、元画像Ｇ１の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像Ｇ３に置き換えた画像である。なお、図１１においても破線で区画された領域が分割領域である。
【０１３４】
一方、複数の解除経過画像Ｇ４ａ，Ｇ４ｂ，・・・は、先に説明したように、絵画調画像Ｇ３の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを元画像Ｇ１に置き換えた画像である。
【０１３５】
つまり音楽データの再生時間（再生開始後の経過時間）が４分００秒であるときの１回目の表示タイミングに応じた解除経過画像Ｇ４ａは、絵画調画像Ｇ３の一番左端の分割領域のみを元画像Ｇ１に置き換えた画像である。また、音楽データの再生時間が４分３０秒であるときの２回目の表示タイミングに応じた解除経過画像Ｇ４ｂは、絵画調画像Ｇ３の左端の２つの分割領域のみを元画像Ｇ１に置き換えた画像である。
【０１３６】
以上のように第３の実施形態のＤＰＦにおいても、ＢＧＭ付きアート変換モードで絵画調画像を表示する際、絵画調画像の表示と並行して音楽を再生するとともに、音楽の再生中には、元画像が絵画調画像に変化する過程を表現する複数の変換経過画像を音楽の進行に合わせて順に切り替えて表示する。さらに、第３の実施形態のＤＰＦにおいては、絵画調画像を表示した後には、絵画調画像が元画像に戻る過程を表現する複数の解除経過画像を音楽の進行に合わせて順に切り替えて表示する。
【０１３７】
そのため、第３の実施形態のＤＰＦにおいては、ユーザがＢＧＭ付きアート変換モードを用いて絵画調画像を鑑賞する際、元画像が絵画調画像に変化する過程を音楽の進行に合わせてユーザに鑑賞させることができる。同時に、絵画調画像が元画像に戻る過程を音楽の進行に合わせてユーザに鑑賞させることができる。
【０１３８】
したがって、例えば音楽の再生中に、単に特定のタイミングで絵画調画像を表示させる場合に比べ、絵画調画像の表示に際してより高い演出効果を確保することができる。
【０１３９】
さらに、第３の実施形態のＤＰＦにおいては、音楽データの再生中に絵画調画像を表示する変換終了タイミングをユーザが指定できるようにした。そのため、ユーザがＢＧＭ付きアート変換モードを用いて絵画調画像を鑑賞する際には、例えば音楽が一番盛り上がる瞬間に絵画調画像を表示することができる。したがって、絵画調画像の表示に際してより一層高い演出効果を確保することができる。
【０１４０】
ここで、第３の実施形態においては、音楽データの再生中に絵画調画像を表示する変換終了タイミングとして、ユーザが指定した時間を設定する構成とした。しかし、ＤＰＦには、変換終了タイミングを、例えば音楽データに付加されている特定の音楽情報に基づいて自動的に設定する構成を採用してもよい。特定の音楽情報としては、例えばＩＤ３タグにイベントタイムコードとして記述されている歌詞終了、リフレイン終了、主題終了を示す時間情報を使用することができる。変換終了タイミングを音楽情報に基づいて自動的に設定する構成においても、特定の音楽情報を用いることによって、例えば音楽が一番盛り上がる瞬間に絵画調画像を表示させることができる。
【０１４１】
また、第３の実施形態においては、音楽（ＢＧＭ）の再生中に表示する複数の変換経過画像と複数の解除経過画像との数、つまり変換経過画像と解除経過画像との表示回数が固定されている構成について説明した。
【０１４２】
しかし、変換経過画像と解除経過画像との表示回数は固定値でなくともよく、例えば変換経過画像と解除経過画像との一方、又は双方の表示回数をユーザに指定させる構成としてもよい。また、変換経過画像と解除経過画像との一方、又は双方の表示回数を、例えば第１の実施形態において言及した方法によって、ＢＧＭとして再生する音楽の内容に応じて変化させる構成としてもよい。また、変換経過画像と解除経過画像との表示回数が同一である必要はない。
【０１４３】
また、第３の実施形態においては、複数の変換経過画像や複数の解除経過画像を他の複数の画像とする構成としてもよい。複数の変換経過画像は、例えば第１の実施形態において言及した図７に示した他の複数の変換経過画像等や、第２の実施形態で説明した表示順に従い変換強度が増大する複数の絵画調画像に変更してもよい。
【０１４４】
また、複数の解除経過画像は、例えば第１の実施形態において言及した図７に示した他の複数の変換経過画像等において、元画像部分と絵画調画像部分とを逆転させたものに変更してもよい。さらに、複数の解除経過画像は、例えば第２の実施形態で説明した複数の絵画調画像とは逆に、表示順に従い変換強度が減少する複数の絵画調画像に変更してもよい。
【０１４５】
（第１の実施形態〜第３の実施形態の変形等）
ここで第１の実施形態、第２の実施形態、第３の実施形態（以下、本実施形態という。）の変形について説明する。本実施形態においては、音楽を再生しながら表示する鑑賞用画像が、元画像にアート変換処理を施した後の絵画調画像である場合について説明した。しかし、音楽を再生しながら表示する鑑賞用画像は、アート変換処理以外の他の任意の画像処理を施すことにより生成される他の画像であっても構わない。
【０１４６】
また、本実施形態においては、鑑賞用画像の表示に際して再生する音楽が、ＭＰ３方式で圧縮された音楽データとして記憶されているものについて説明した。しかし、鑑賞用画像を表示に際して再生する音楽は、他の形式の音楽データとして記憶されているものでも構わない。
【０１４７】
また、本実施形態においては、複数の変換経過画像等の表示タイミングの設定に使用される音楽情報（再生時間情報等）が、ＩＤ３タグとして音楽データに付加されている場合について説明した。しかし、表示タイミングの設定に使用される音楽情報は、音楽データに付随するものであればよく、任意のデータ構造や任意の形態で記憶されているものを使用することができる。
【０１４８】
また、本実施形態においては、本発明をＤＰＦに採用した場合について説明したが、本発明は、音楽を再生する機能と、元画像に画像処理を施し鑑賞用画像として表示する機能とを備えたものであれば、ＤＰＦ以外の他の装置にも適用することができる。他の装置としては、例えばデジタルカメラや、デジタルカメラが内蔵された携帯電話端末等の任意の携帯情報端末、汎用的なパーソナルコンピュータである。
【符号の説明】
【０１４９】
１ ＤＰＦ
１０ 制御部
１１ 画像再生部
１２ 音楽再生部
１３ 音楽情報取得部
１４ 画像変換部
１５ 表示画像生成部
１６ タイミング設定部
１７ 表示制御部
１８ 記憶部
２０ 操作部
３０ 表示部
４０ 音声出力部
５０ 記録メディア
１０１ ＣＰＵ
１０２ ＲＯＭ
１０２ａ 画像表示プログラム
１０３ ＲＡＭ
３０１ ディスプレイ
４０１ 音声処理部
４０２ スピーカ
５０１ 音楽ファイル
Ｇ１ 元画像
Ｇ２，Ｇ２ａ，Ｇ２ｂ 変換経過画像
Ｇ３ 絵画調画像
Ｇ３ａ〜Ｇ３ｆ 絵画調画像（変換経過画像）
Ｇ４ａ，Ｇ４ｂ 解除経過画像
【技術分野】
【０００１】
本発明は、音楽を再生しながら、画像処理を施した鑑賞用画像を表示する技術に関するものである。
【背景技術】
【０００２】
近年、例えばデジタルカメラにより撮影され画像データとして記録された画像を鑑賞用に表示する表示装置として種々のデジタルフォトフレーム（以下、ＤＰＦという。）が商品化されている。また、ＤＰＦには、表示対象の画像である元画像を画像処理によって特定の画調を備えた絵画調画像に変換し、変換後の絵画調画像を表示するアート変換機能を備えたものがある。なお、画調とは、画像から感じることができる印象に基づいて規定される絵画的な特徴であり、日本画調、西洋画調、水彩画調、水墨画調、ペン画調、ゴッホ調など、様々に分類することができるものである。アート変換機能を用いれば、元画像を新たな作品として鑑賞をすることができる。
【０００３】
一方、例えば下記特許文献１には、音楽を再生する間に、特定の画像を予め決められているタイミングで表示する方法が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００８−２５２９０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ここで特許文献１に記載されている方法は、ＤＰＦにおけるアート変換機能にも採用することができる。すなわちアート変換機能で絵画調画像を表示する際に、任意の音楽をＢＧＭ（background music）として再生し、係る音楽の再生中に特定のタイミングで絵画調画像を表示させれば、絵画調画像の表示に際して一定の演出効果を得ることができる。
【０００６】
しかしながら、音楽の再生中に、単に特定のタイミングで絵画調画像を表示させたとしても、絵画調画像の表示に際して得られる演出効果には自ずと限界があるという問題があった。
【０００７】
本発明は、かかる課題に鑑みてなされたものであり、元画像に画像処理を施した鑑賞用画像の表示に際し、画像の表示と並行して音楽を再生することにより演出効果を得る場合に、より高い演出効果を確保することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の第１の観点に係る画像表示装置にあっては、元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、音楽を再生する音楽再生手段と、前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、前記表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段とを備えたことを特徴とする
【０００９】
本発明の第２の観点に係るプログラムあっては、コンピュータを、元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、音楽を再生する音楽再生手段と、前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段として機能させることを特徴とする。
【発明の効果】
【００１０】
本発明によれば、元画像に画像処理を施した鑑賞用画像の表示に際し、画像の表示と並行して音楽を再生することにより演出効果を得る場合に、より高い演出効果を確保することができる。
【図面の簡単な説明】
【００１１】
【図１】本発明に係る各実施形態に共通するデジタルフォトフレームのハードウェア構成を示す概略ブロック図である。
【図２】デジタルフォトフレームの機能の要部を示す機能ブロック図である。
【図３】音楽ファイルのフォーマットを示した概念図である。
【図４】第１の実施形態におけるＣＰＵの処理手順を示すフローチャートである。
【図５】ＢＧＭ付きアート変換モードで表示される画像を示す模式図である。
【図６】変換経過画像の具体例を、音楽データの再生時間と対応付けて示した図である。
【図７】複数の変換経過画像の他の例を示す説明図である。
【図８】第２の実施形態におけるＣＰＵの処理手順を示すフローチャートである。
【図９】ＢＧＭ付きアート変換モードで表示される画像を示す模式図である。
【図１０】第３の実施形態におけるＣＰＵの処理手順を示すフローチャートである。
【図１１】ＢＧＭ付きアート変換モードで表示される画像を示す模式図である。
【発明を実施するための形態】
【００１２】
以下、本発明の一実施形態について説明する。後述する各実施形態は、画像データとして記録されている画像を絵画調画像に変換し鑑賞用画像として表示するアート変換機能と、音楽データとして記録されている音楽を再生する音楽再生能とを備えたＤＰＦ（デジタルフォトフレーム）に関するものである。
【００１３】
（実施形態１）
まず、本発明の第１の実施形態について説明する。図１は、本発明を適用した各実施形態に共通するＤＰＦ１のハードウェア構成を示す概略ブロック図である。ＤＰＦ１は、ＣＰＵ（Central Processing Unit）１０１によってシステムの全体を制御される構成である。ＣＰＵ１０１には、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access memory）１０３、メディアコントローラ１０４、操作キー群２０１、ディスプレイ３０１、音声処理部４０１が接続されている。
【００１４】
ＲＯＭ１０２は、ＣＰＵ１０１にシステム全体を制御させるための複数種のプログラムやデータが記憶されているメモリである。ＲＯＭ１０２に記憶されているプログラムには、第１の実施形態においてＣＰＵ１０１を第１の画像生成手段、第２の画像生成手段、音楽再生手段、表示制御手段、取得手段、タイミング設定手段として機能させる画像表示プログラム１０２ａが含まれる。
【００１５】
ＲＡＭ１０３は、ＣＰＵ１０１がＤＰＦ１の制御に際し、必要に応じ種々のデータを一時記憶する作業用のメモリであり、具体的にはＳＤＲＡＭ（Synchronous dynamic random-access memory）等である。
【００１６】
メディアコントローラ１０４は、ＤＰＦ１の図示しない本体に設けられているメモリカードスロットに着脱自在に装着された記録メディア５０と、ＣＰＵ１０１との間におけるデータの入出力を制御する入出力インターフェースである。記録メディア５０は、フラッシュメモリーからなる不揮発性のカード型の記憶媒体である。記録メディア５０には、画像データ、及び音楽データが複数記憶されている。
【００１７】
画像データは、例えばデジタルカメラにおいて撮影により取得されたものであり、ＪＰＥＧ（Joint Photographic Expert Group）方式により圧縮された画像データ本体に、画像に付随する撮影日時等の画像情報が付加され静止画ファイルとして記録メディア５０に記憶されている。
【００１８】
音楽データは、各種のデジタルオーディオプレーヤや、パーソナルコンピュータ等において再生可能なデータであり、例えばインターネットを介して取得されたものである。音楽データは、ＭＰ３（MPEG1 Audio Layer-3）方式で圧縮された音楽データ本体に、音楽に付随するアーティスト名や各楽曲のタイトル等の音楽情報が付加され音楽ファイルとして記録メディア５０に記憶されている。
【００１９】
図３は、記録メディア５０に記憶されている音楽ファイル５０１のフォーマットを示す概念図である。音楽ファイル５０１は、ファイル情報とＩＤ３タグとＭＰ３オーディオデータとから構成される。ファイル情報はファイルの名等の基本情報であり、ＭＰ３オーディオデータは音楽データ本体であり、ＩＤ３タグは音楽の内容を示す複数種の音楽情報が格納された部分である。
【００２０】
図３に示したＩＤ３タグは、具体的にはＩＤ３ｖ２（ＩＤ３ version 2）のフォーマットのデータであり、主としてヘッダ、拡張ヘッダと、フレーム群（♯０１〜♯０ｎ）とから構成される。ヘッダには、文字列「ＩＤ３」の他、タグ情報のバージョンやＩＤ３タグの構造や、長さの情報が格納される。また、拡張ヘッダには、より詳細なＩＤ３タグの構造を示す情報が格納される。
【００２１】
フレーム群（♯０１〜♯０ｎ）は１以上の可変長のフレームの集合であり、各フレームはフレームヘッダとフレームデータとから構成される。フレームデータには、アーティスト名や楽曲のタイトル、さらにミリ秒単位で示したオーディオファイルの長さを示す再生時間情報や、主要部分での一分間の拍数を示す整数値である拍数情報であるＢＰＭ（Beats Per Minute）等の種々の音楽情報が格納される。フレームヘッダには、各々のフレームデータに格納されている情報の種別を示すフレームＩＤが格納される。したがって、フレームＩＤを確認すれば、任意の音楽情報が格納されているフレームを特定し、必要とする音楽情報を得ることができる。
【００２２】
操作キー群２０１は、電源スイッチ及び複数の操作スイッチから構成される。ＣＰＵ１０１は、操作キー群２０１における操作キー等の操作状態を定常的にスキャンすることにより、所定のキー操作によるユーザからの種々の指示を検知する。
【００２３】
ディスプレイ３０１は、バックライト付きのカラー液晶表示パネルと、ＣＰＵ１０１から供給される画像データ等の表示データに応じてカラー液晶表示パネルを駆動し、画像データにより表される画像等をカラー液晶表示パネルに表示させる駆動回路とから構成される。
【００２４】
音声処理部４０１は、ＣＰＵ１０１から供給されるデコード後の音楽データであるデジタル音声信号をアナログ音声信号に変換するＤ／Ａ（digital-to-analog conversion）コンバータ、及びアナログ音声信号を増幅するアンプから構成される。音声処理部４０１において増幅されたアナログ音声信号はスピーカ４０２へ供給され、スピーカ４０２から音楽として出力される。
【００２５】
図２は、第１の実施形態において、図１に示したＤＰＦ１の各部により実現される機能の要部を示す、各実施形態に共通する機能ブロック図である。ＤＰＦ１は、制御部１０と、操作部２０、表示部３０、音声出力部４０を有している。制御部１０は、画像再生部１１、音楽再生部１２、音楽情報取得部１３、画像変換部１４、表示画像生成部１５、タイミング設定部１６、表示制御部１７、記憶部１８から構成される。
【００２６】
操作部２０は、ＤＰＦ１に対するユーザからの各種の指示を検知する機能部分であり、図１に示した操作キー群２０１により実現される。
【００２７】
表示部３０は、記録メディア５０に記録されている画像データにより表される画像や、ユーザがＤＰＦ１を操作する際に必要とする各種の操作画面を表示する。表示部３０は、図１に示したディスプレイ３０１により実現される。
【００２８】
音声出力部４０は、記録メディア５０に記録されている音楽データに基づく音楽を出力する。音声出力部４０は、図１に示した音声処理部４０１とスピーカ４０２とにより実現される。
【００２９】
画像再生部１１は、記録メディア５０に静止画ファイルとして記憶されている圧縮符号化された任意の画像データを復号化し、画像変換部１４及び記憶部１８へ供給する。画像再生部１１は、図１に示したＣＰＵ１０１により実現される。
【００３０】
音楽再生部１２は、記録メディア５０に音楽ファイルとして記憶されている圧縮符号化された任意の音楽データを復号化し、音声出力部４０へ供給する。音楽再生部１２も、図１に示したＣＰＵ１０１により実現される。
【００３１】
音楽情報取得部１３は、音楽再生部１２が再生対象とする音楽データに付加されている再生時間情報を取得し、記憶部１８へ供給する。再生時間情報は、先に説明したようにＩＤ３タグを構成する特定のフレームに記述されているミリ秒単位で示したオーディオファイルの長さである。音楽情報取得部１３も、図１に示したＣＰＵ１０１により実現される。
【００３２】
画像変換部１４は、画像再生部１１から供給された画像データに対してアート変換処理を施すことにより、特定の画調を備えた絵画調画像を表す絵画調画像データを生成し、記憶部１８へ供給する。画像変換部１４も、図１に示したＣＰＵ１０１により実現される。
【００３３】
画像変換部１４におけるアート変換処理は、例えば特開平１０−０１１５６９号公報及び特開２００６−０３１６８８号公報に開示されている技術を適用したものである。具体的に説明すると、アート変換処理は、画像データを構成する画素から、色などを基準として相関の高い画素を集めてグループを形成し、形成したグループ毎に、グループ内の画素の色を該グループの代表色に置き換える処理である。
【００３４】
アート変換処理においては、グループとして集められる画素の相関の取り方、及び同一の色（代表色）の画素により構成されるグループの基本形状を変化させることによって、処理後の画像データが表す画像に様々な画調を与えることができる。
【００３５】
また、例えば同一の色（代表色）の画素により構成されるグループの大きさ（画素数）を変化させることにより、処理後の画像データに与えられる画調が同一であっても、アート変換処理の強度を変化させることができる。ここで、アート変換処理の強度（以下、単に変換強度という。）とは、処理後の画像データにより表される画像から感じることができる絵画らしさの度合である。
【００３６】
アート変換処理で用いる同一グループを形成すべき画素の相関度、グループの基本形状や大きさといったパラメータの組み合わせは複数の画調毎に予め決められており、画調毎のパラメータの組み合わせが、ＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに記述されている。
【００３７】
表示画像生成部１５は、画像再生部１１が再生した画像データにより表される画像（以下、「元画像」という。）が、絵画調画像データにより表される絵画調画像に変化する過程を表現する複数の変換経過画像を表す複数の変換経過画像データを生成する。
【００３８】
タイミング設定部１６は、音楽情報取得部１３によって取得され記憶部１８に記憶された特定の音楽情報に基づいて、表示画像生成部１５が生成する異なる変換経過画像データにより表される複数の変換経過画像の各々の表示タイミングを設定する。タイミング設定部１６も、図１に示したＣＰＵ１０１により実現される。
【００３９】
表示制御部１７は、画像再生部１１が再生した画像データにより表される元画像、及び画像変換部１４が生成した絵画調画像データにより表される絵画調画像、表示画像生成部１５が生成した複数の変換経過画像データによりそれぞれ表される複数の変換経過画像を表示部３０に表示させる。図１に示したＣＰＵ１０１により実現される。
【００４０】
記憶部１８は、音楽情報取得部１３が取得した再生時間情報、画像再生部１１による復号化後の画像データ、画像変換部１４によるアート変換処理後の絵画調画像データ、タイミング設定部１６が設定した複数の変換経過画像毎の複数の表示タイミングを示すタイミング情報等を一時的に記憶する。また、記憶部１８は、制御部１０が表示部３０に表示させる各種の設定面等のデータも一時的に記憶する。記憶部１８は、図１に示したＲＡＭ１０３により実現される。
【００４１】
次に、以上の構成からなるＤＰＦ１の動作について説明する。ＤＰＦ１には動作モードとしてＢＧＭ（background music）付きアート変換モードが用意されている。ＢＧＭ付きアート変換モードは、記録メディア５０に記録されている音楽を再生しながら、記録メディア５０に記録されている画像を絵画調画像に変換し鑑賞用画像として表示する動作モードである。なお、ＢＧＭ付きアート変換モードは、ユーザが操作キー群２０１の所定の操作キーを操作することによって適宜設定可能である。
【００４２】
以下、ＢＧＭ付きアート変換モードが設定されたときのＤＰＦ１の具体的な動作について説明する。図４は、ＢＧＭ付きアート変換モードにおいて、制御部１０（ＣＰＵ１０１）がＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに従って実行する処理を示したフローチャートである。
【００４３】
ＢＧＭ付きアート変換モードにおいては、まず制御部１０が、操作キー群２０１における操作キー等の操作状態を逐次検出することによって、処理対象となる画像データ及び音楽データと、アート変換後の絵画調画像に確保すべき画調とを設定する（ステップＳＡ１）。
【００４４】
ステップＳＡ１の処理において、制御部１０は、記録メディア４０に記録されている画像データを読み出し、読み出した画像データにより表される画像を表示部３０（ディスプレイ３０１）の画面上に選択候補として一覧表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望する画像を選択させ、選択された画像のファイル名を記憶部１８（ＲＡＭ１０３）に記憶する。
【００４５】
ステップＳＡ１の処理において制御部１０は、記録メディア４０に記録されている音楽データにそれぞれ付加されている付加されている曲名情報を読み出し、読み出した曲名情報を表示部３０（ディスプレイ３０１）の画面上に選択候補として一覧表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望する音楽（曲名）を選択させ、選択された音楽のファイル名を記憶部１８に記憶する。
【００４６】
また、ステップＳＡ１の処理において制御部１０は、予め用意されている画調の種類（日本画調、西洋画調、水彩画調、水墨画調、ペン画調、ゴッホ調等）を表示部３０に選択候補として一覧表示する。そして、制御部１０は、ユーザに所定のキー操作によって所望する画調を選択させ、選択された画調を示すデータを記憶部１８に記憶する。
【００４７】
次に、音楽情報取得部１３（ＣＰＵ１０１）が、ステップＳＡ１の処理で処理対象として設定された音楽データに付加されている再生時間情報を取得する（ステップＳＡ２）。さらに、タイミング設定部１６（ＣＰＵ１０１）が、音楽情報取得部１３により取得された再生時間情報に基づいて、複数の変換経過画像毎の複数の表示タイミングを設定する（ステップＳＡ３）。
【００４８】
ステップＳＡ３の処理においてタイミング設定部１６は、まず、再生時間情報により示される処理対象の音楽データの全再生時間を、予め決められている表示回数で除算することによって表示単位時間を計算する。ここで表示回数は、後述する複数の変換経過画像、及び絵画調画像からなる複数の画像を表示する回数であり、以下の説明においては、便宜上、予め決められている表示回数が７回であるものとする。したがって、例えば音楽データの全再生時間が３分３０秒である場合には、表示単位時間は３０秒となる。
【００４９】
そして、タイミング設定部１６は、処理対象の音楽データの再生を開始してから表示単位時間が経過する毎の再生時間を、複数の変換経過画像毎の複数の表示タイミングとして決定する。但し、音楽データの全再生時間となる再生時間は表示タイミングから除く。しかる後、タイミング設定部１６は、決定した複数の表示タイミング、つまり表示回数−１回分の複数の表示タイミングを示すタイミング情報を記憶部１８に記憶する。
【００５０】
したがって、例えば音楽データの全再生時間が３分３０秒である場合には、表示単位時間は３０秒であるため、ステップＳＡ３の処理においてタイミング設定部１６は、複数の変換経過画像毎の表示タイミングとして、０分３０秒、１分００秒、・・・３分００秒の各再生時間を設定する。
【００５１】
引き続き、画像再生部１１（ＣＰＵ１０１）が、ステップＳＡ１の処理で処理対象として設定された画像データを復号化するとともに、表示制御部１７（ＣＰＵ１０１）が、復号化後の画像データにより表される元画像を表示部３０に表示させる（ステップＳＡ４）。
【００５２】
また、画像変換部１４（ＣＰＵ１０１）が、元画像を表す画像データにアート変換処理を施し、処理後の絵画調画像データ、つまりステップＳＡ１の処理で設定された特定の画調を備えた絵画調画像を表す絵画調画像データを記憶部１８に記憶する（ステップＳＡ５）。
【００５３】
次に、音楽再生部１２（ＣＰＵ１０１）が、ステップＳＡ１の処理で処理対象として設定された音楽データの再生を開始する（ステップＳＡ６）。つまり音楽再生部１２が、処理対象の音楽データを復号化し、復号化後の音楽データを音声出力部４０（音声処理部４０１）へ順次に供給することにより、音声出力部４０によるＢＧＭの音声出力を開始する。
【００５４】
その後、記憶部１８に記憶されているタイミング情報により示される変換経過画像の表示タイミングが到来すると（ステップＳＡ７：ＹＥＳ）、表示画像生成部１５が、表示タイミングに応じた変換経過画像データを生成する（ステップＳＡ８）。
【００５５】
ステップＳＡ８の処理において表示画像生成部１５が生成する変換経過画像データは、元画像が絵画調画像に変化する過程を表現するための以下の変換経過画像を表す画像データである。すなわち変換経過画像は、元画像の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像に置き換えた画像である。変換経過画像の詳細については後述する。
【００５６】
そして、表示制御部１７が、表示画像生成部１５が生成した変換経過画像データを表示部３０に供給し、変換経過画像データにより表される変換経過画像を表示部３０に表示させる（ステップＳＡ９）。
【００５７】
引き続き、音楽データの再生が終了するまでの間においては（ステップＳＡ１０：ＮＯ）、変換経過画像の表示タイミングが到来する毎に（ステップＳＡ７：ＹＥＳ）、ステップＳＡ８及びステップＳＡ９の処理が繰り返し行われる。ステップＳＡ８及びステップＳＡ９の処理が繰り返されることにより、複数の変換経過画像が、絵画調画像に置き換えられた部分の面積が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【００５８】
その後、表示制御部１７が、音楽データの再生が終了した時点で（ステップＳＡ１０：ＹＥＳ）、記憶部１８に記憶されている絵画調画像データを表示部３０へ供給し、絵画調画像データにより表される絵画調画像を表示部３０に表示させる（ステップＳＡ１１）。 これにより制御部１０は、ＢＧＭ付きアート変換モードによる処理を終了する。なお、制御部１０は、表示部３０における絵画調画像の表示を、例えばユーザによって操作キー群２０１の所定の操作キーが操作されるまで継続する。
【００５９】
図５は、以上の処理に際して表示部３０に順に表示される元画像Ｇ１と、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・と、絵画調画像Ｇ３とを示した模式図である。なお、図５は、音楽データの全再生時間が３分３０秒である場合の例を示した図である。
【００６０】
先に説明したように、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・は、元画像Ｇ１の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像Ｇ３に置き換えた画像である。なお、図５において破線で区画された領域が分割領域である。
【００６１】
つまり音楽データの再生時間（再生開始後の経過時間）が３０秒であるときの１回目の表示タイミングに応じた変換経過画像Ｇ２ａは、元画像Ｇ１の一番左端の分割領域のみを絵画調画像Ｇ３に置き換えた画像である。また、音楽データの再生時間が１分００秒であるときの２回目の表示タイミングに応じた変換経過画像Ｇ２ｂは、元画像Ｇ１の左端の２つの分割領域のみを絵画調画像Ｇ３に置き換えた画像である。図６は、２回目の表示タイミングに応じた変換経過画像Ｇ２ｂの具体例を、音楽データの再生時間（再生開始後の経過時間）と対応付けて示した図である。
【００６２】
以上のようにＤＰＦ１においては、ＢＧＭ付きアート変換モードで絵画調画像を表示する際、絵画調画像の表示と並行して音楽を再生するとともに、音楽の再生中には、元画像が絵画調画像に変化する過程を表現する複数の変換経過画像を音楽の進行に合わせて順に切り替えて表示する。
【００６３】
そのため、ＤＰＦ１においては、ユーザがＢＧＭ付きアート変換モードを用いて絵画調画像を鑑賞する際、元画像が絵画調画像に変化する過程を音楽の進行に合わせてユーザに鑑賞させることができる。したがって、例えば音楽の再生中に、単に特定のタイミングで絵画調画像を表示させる場合に比べ、絵画調画像の表示に際してより高い演出効果を確保することができる。
【００６４】
ここで、第１の実施形態においては、音楽（ＢＧＭ）の再生中に表示する複数の変換経過画像の数、つまり変換経過画像の表示回数が固定されている構成について説明した。しかし、表示回数は固定値でなくともよく、例えば表示回数をユーザに指定させる構成としてもよい。また、表示回数は、ＢＧＭとして再生する音楽の内容に応じて変化させてもよい。
【００６５】
表示回数をＢＧＭとして再生する音楽の内容に応じて変化させる方法としては、例えば表示単位時間を固定しておくことにより、表示回数を音楽データの全再生時間に比例して増減させる方法がある。表示回数を音楽データの全再生時間に比例して増減させる場合には、例えば以下のようにすればよい。
【００６６】
すなわちＣＰＵ１０１を画像数制御手段として機能させる画像表示プログラム１０２ａをＲＯＭ１０２に記憶させておく。そして、図４のステップＳＡ３の処理においては、タイミング設定部１６に、全再生時間を変数とする計算式を用いた計算等によって全再生時間に比例する表示回数を取得させた後、取得した表示回数を用いて変換経過画像毎の複数の表示タイミングを設定させればよい。
【００６７】
また、表示回数をＢＧＭとして再生する音楽の内容に応じて変化させる方法としては、例えば表示回数を音楽データの主要部分での一分間の拍数に比例して増減させる方法がある。表示回数を音楽データの主要部分での一分間の拍数に比例して増減させる場合にも、ＣＰＵ１０１を画像数制御手段として機能させる画像表示プログラム１０２ａをＲＯＭ１０２に記憶されておく。
【００６８】
そして、図４のステップＳＡ２の処理においては、音楽情報取得部１３に、音楽データに付加されている再生時間情報と共に拍数情報（ＢＰＭ）を取得させる。しかる後、図４のステップＳＡ３の処理においては、タイミング設定部１６に、拍数情報により示される拍数を変数とする計算式を用いた計算等によって拍数に比例する表示回数を取得させた後、取得した表示回数を用いて変換経過画像毎の複数の表示タイミングを設定させればよい。
【００６９】
表示回数をＢＧＭとして再生する音楽の内容（拍数情報等）に応じて変化させる構成とすれば、同一の元画像を同一の画調を有する絵画調画像に変換して表示する場合であっても、ＢＧＭとして再生する音楽が異なると変換経過画像が切り替わるテンポが変化する。したがって、絵画調画像の表示に際し、ＢＧＭとして再生する音楽に応じた多様な演出効果を確保することができる。
【００７０】
また、第１の実施形態においては、音楽の再生中に表示する複数の変換経過画像が、元画像の全域を表示回数に応じた数で横方向に分割し、表示タイミングが到来した回数に応じた数の左側の分割領域のみを絵画調画像に置き換えたものである場合について説明した。
【００７１】
しかし、複数の変換経過画像は、元画像が絵画調画像に変化する過程を表現するものであればよい。したがって、複数の変換経過画像は、以下の画像としてもよい。
【００７２】
図７（ａ）〜（ｅ）は、複数の変換経過画像の他の例をそれぞれ示す説明図であり、第１の実施形態と同様、元画像を部分的に絵画調画像に置き換えるとともに、絵画調画像に置き換える部分の面積（分割領域の数）が表示順に従い増大させたものを示した図である。なお、図７（ａ）〜（ｅ）は、図５に示した１回目の表示タイミングに応じた変換経過画像Ｇ２ａに対応する変換経過画像Ｇ２のみを示した図である。
【００７３】
すなわち複数の変換経過画像は、例えば図７（ａ）に示したように、元画像の全域を表示回数に応じた数で横方向に分割し、表示タイミングが到来した回数に応じた数の右側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７４】
また、複数の変換経過画像は、例えば図７（ｂ）に示したように、元画像の全域を表示回数に応じた数で縦方向に分割し、表示タイミングが到来した回数に応じた数の上側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７５】
また、複数の変換経過画像は、例えば図７（ｃ）に示したように、元画像の全域を表示回数に応じた数で縦方向に分割し、表示タイミングが到来した回数に応じた数の上側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７６】
また、複数の変換経過画像は、例えば図７（ｄ）に示したように、元画像の全域を表示回数に応じた数で内外方向に分割し、表示タイミングが到来した回数に応じた数の内側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７７】
また、複数の変換経過画像は、例えば図７（ｅ）に示したように、元画像の全域を表示回数に応じた数で内外方向に分割し、表示タイミングが到来した回数に応じた数の外側の分割領域のみを絵画調画像に置き換えたものとしてもよい。
【００７８】
また、図示しないが、複数の変換経過画像は、例えば元画像の全域をマトリックス状に表示回数に応じた数に分割し、複数の分割領域を、表示タイミングが到来する毎に予め決められた順序やランダムな順序で絵画調画像に順に置き換えたものとしてもよい。
【００７９】
（実施形態２）
次に、本発明の第２の実施形態について説明する。第２の実施形態は、図１に示した構成を備え、ＢＧＭ付きアート変換モードにおいて、複数の変換経過画像として第１の実施形態とは異なる複数の画像を表示する他のＤＰＦに関するものである。なお、第２の実施形態のＤＰＦは、図２に示した制御部１０の複数の機能部分のうち、表示画像生成部１５を廃止したものである。
【００８０】
また、第２の実施形態においては、図２に示した画像変換部１４が、元画像を表す画像データに変換強度を変えた複数回のアート変換処理を施すことにより、変換強度が異なる複数の絵画調画像をそれぞれ表す複数種類の絵画調画像データを生成する。ここで、変換強度とは、先に述べたように絵画調画像データにより表される絵画調画像から感じることができる絵画らしさの度合である。つまり第２の実施形態において画像変換部１４は、特定の画調を有するとともに絵画らしさの度合が異なる複数の絵画調画像をそれぞれ表す複数種類の絵画調画像データを生成する。
【００８１】
また、図２に示した表示制御部１７は、画像変換部１４が生成した複数種類の絵画調画像データにより表される複数の絵画調画像を、複数の変換経過画像として表示部３０へ表示させる。
【００８２】
次に、第２の実施形態のＤＰＦにおいてＢＧＭ付きアート変換モードが設定されたときの具体的な動作について説明する。図８は、ＢＧＭ付きアート変換モードにおいて、制御部１０がＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに従って実行する処理を示したフローチャートである。
【００８３】
第２の実施形態においては、まず制御部１０が、操作キー群２０１における操作キー等の操作状態を逐次検出することによって、処理対象となる画像データ及び音楽データと、アート変換後の絵画調画像に確保すべき画調と、変換強度とを設定する（ステップＳＢ１）。ステップＳＢ１の処理で制御部１０が画像データと音楽データと画調とを設定する際の具体的な手順については、図４のステップＳＡ１の処理と同様である。
【００８４】
また、ステップＳＢ１の処理で制御部１０が設定する変換強度は、ＢＧＭ付きアート変換モードにおいて最終的に鑑賞用画像として表示する絵画調画像を得るために、画像変換部１４が処理対象の画像データにアート変換処理を施す際の変換強度である。変換強度の設定に際して制御部１０は、例えば表示部３０に変換強度の設定画面を表示し、ユーザに所定のキー操作によって所望する変換強度を選択的又は直接的に指定させる。そして、制御部１０は、ユーザに指定された変換強度を示す変換強度情報を記憶部１８に記憶する。
【００８５】
次に、音楽情報取得部１３が、ステップＳＢ１の処理で処理対象として設定された音楽データに付加されている再生時間情報を取得する（ステップＳＢ２）。さらに、タイミング設定部１６が、音楽情報取得部１３により取得された再生時間情報に基づいて、表示タイミングを設定する（ステップＳＢ３）。
【００８６】
ここで、タイミング設定部１６が設定する表示タイミングは、画像変換部１４が生成する複数種類の絵画調画像データにより表される複数種類の絵画調画像データによってそれぞれ表される変換強度が異なる複数の絵画調画像の表示タイミングである。
【００８７】
ステップＳＢ３においてタイミング設定部１６は、まず、再生時間情報により示される処理対象の音楽データの全再生時間を、予め決められている表示回数で除算することによって表示単位時間を計算する。そして、タイミング設定部１６は、処理対象の音楽データの再生を開始してから表示単位時間が経過する毎の再生時間を、それぞれ表示タイミングとして決定する。なお、第１の実施形態とは異なり、タイミング設定部１６は、音楽データの終了時間（全再生時間）を含めた複数の再生時間を表示タイミングとして決定する。そして、タイミング設定部１６は、決定した表示回数分の表示タイミングを示すタイミング情報を記憶部１８に記憶する。
【００８８】
次に、画像再生部１１が、処理対象として設定された画像データを復号化するとともに、表示制御部１７が、復号化後の画像データにより表される元画像を表示部３０に表示させる（ステップＳＢ４）。さらに、音楽再生部１２が、ステップＳＢ１の処理で処理対象として設定された音楽データの再生、つまり音声出力部４０によるＢＧＭの音声出力を開始する（ステップＳＢ５）。
【００８９】
その後、記憶部１８に記憶されているタイミング情報により示される変換経過画像毎の表示タイミングが到来すると（ステップＳＢ６：ＹＥＳ）、画像変換部１４が、表示タイミングに応じた変換強度の絵画調画像データを生成する（ステップＳＢ７）。
【００９０】
ここで、表示タイミングに応じた変換強度とは、記憶部１８に記憶されている変換強度情報により示される変換強度を最大とした表示回数分の複数段階の変換強度のうちで、表示タイミングが到来した回数に応じた段階の変換強度である。具体的に説明すると、例えば予め決められている表示回数がｎ回である場合には、変換強度の段階数はｎ段階であり、第１段階の変換強度が最小、第ｎ段階の変換強度が最大である。すなわち１回目の表示タイミングに応じた変換強度が第１段階の変換強度であり、２回目の表示タイミングに応じた変換強度が第２段階の変換強度であり、表示回数が増える毎に対応する変換強度が大きくなる。
【００９１】
また、各段階の変換強度の違いは、画像変換部１４が復号化後の画像データにアート変換処理を施す際における、先に説明した同一の色（代表色）の画素により構成されるグループの大きさ（画素数）の違いである。つまりステップＳＢ７の処理において画像変換部１４は、処理単位となる画素グループの大きさを表示タイミングに応じた大きさであって、表示回数が増える毎に段階的に増大する大きさに設定した内容のアート変換処理を行う。なお、表示タイミングに応じた（変換強度に対応する）画素グループの大きさは、画調毎に予め決められている（画像表示プログラム１０２ａに記述されている）大きさである。
【００９２】
しかる後、表示制御部１７が、画像変換部１４が生成した絵画調画像データを表示部３０に供給し、絵画調画像データにより表される絵画調画像を表示部３０に表示させる（ステップＳＢ８）。
【００９３】
引き続き、音楽データの再生が終了するまでの間（ステップＳＢ９：ＮＯ）、絵画調画像の表示タイミングが到来する毎に（ステップＳＢ６：ＹＥＳ）、ステップＳＢ７及びステップＳＢ８の処理が繰り返し行われる。ステップＳＢ７及びステップＳＢ８の処理が繰り返されることにより、変換強度の異なる複数の絵画調画像が、変換強度が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【００９４】
その後、制御部１０が、音楽データの再生が終了した時点で（ステップＳＢ９：ＹＥＳ）、すなわちステップＳＢ７及びステップＳＢ８の処理によって、変換強度が最大の絵画調画像が表示部３０に表示された時点で、制御部１０は、ＢＧＭ付きアート変換モードによる処理を終了する。なお、制御部１０は、表示部３０に最後に表示した絵画調画像の表示状態を、例えばユーザによって操作キー群２０１の所定の操作キーが操作されるまで継続する。
【００９５】
図９は、以上の処理において表示部３０に順に表示される元画像Ｇ１と、変換強度の異なる複数の絵画調画像Ｇ３ａ〜Ｇ３ｆを示した模式図である。なお、図９は、音楽データの全再生時間が３分００秒であり、予め決められている表示回数が６回である場合の例を示した図である。また、図９は、複数の絵画調画像Ｇ３ａ〜Ｇ３ｆにおける変換強度の違いを斜線の本数の違いにより便宜的に示したものである。
【００９６】
図９に示した複数の絵画調画像Ｇ３ａ〜Ｇ３ｆのうち、１回目の表示タイミングで表示される第１段階の変換強度の絵画調画像Ｇ３ａから、５回目の表示タイミングで表示される第５段階の変換強度の絵画調画像Ｇ３ｅまでの複数の絵画調画像が、第２の実施形態における複数の変換経過画像である。つまり元画像が絵画調画像に変化する過程を表現する複数の変換経過画像である。そして、６回目の表示タイミングで表示される第６段階の変換強度（最大の変換強度）の絵画調画像Ｇ３ｆが、第２の実施形態において鑑賞用画像として最終的に表示される絵画調画像である。
【００９７】
以上のように、第２の実施形態のＤＰＦにおいては、ＢＧＭ付きアート変換モードで絵画調画像を表示する際、絵画調画像の表示と並行して音楽を再生するとともに、音楽の再生中には、元画像が絵画調画像に変化する過程を表現する複数の絵画調画像を音楽の進行に合わせて順に切り替えて表示する。
【００９８】
そのため、第２の実施形態のＤＰＦにおいても、ユーザがＢＧＭ付きアート変換モードを用いてＤＰＦ１に絵画調画像を鑑賞する際、元画像が絵画調画像に変化する過程を音楽の進行に合わせてユーザに鑑賞させることができる。したがって、例えば音楽の再生中に、単に特定のタイミングで絵画調画像を表示させる場合に比べ、絵画調画像の表示に際してより高い演出効果を確保することができる。
【００９９】
ここで、第２の実施形態においては、鑑賞用画像として最終的に表示する絵画調画像を、ユーザが指定した変換強度の絵画調画像とする構成について説明した。しかし、鑑賞用画像として最終的に表示する絵画調画像は、画調毎に予め決められている（画像表示プログラム１０２ａに記述されている）規定の変換強度の絵画調画像としてもよい。
【０１００】
また、第２の実施形態においては、音楽（ＢＧＭ）の再生中に変換経過画像として表示する複数の絵画調画像の数、つまり表示回数が固定されている構成について説明した。しかし、表示回数は固定値でなくともよい。表示回数は、例えばユーザに指定させる構成としてもよいし、第１の実施形態において言及した方法によって、ＢＧＭとして再生する音楽の内容に応じて変化させる構成としてもよい。
【０１０１】
（実施形態３）
次に、本発明の第３の実施形態について説明する。第３の実施形態は、ＢＧＭ付きアート変換モードにおいて、音楽（ＢＧＭ）の再生中に複数の変換経過画像と絵画調画像とを順に表示し、さらに絵画調画像の表示後に、絵画調画像が元画像に戻る過程を表現する複数の解除経過画像を順に表示するＤＰＦに関するものである。
【０１０２】
第３の実施形態のＤＰＦは、図１に示した構成を備えるとともに、画像表示プログラム１０２ａが、ＣＰＵ１０１を第２のタイミング設定手段、第３の画像生成手段としても機能させる構成である。
【０１０３】
第３の実施形態においては、図２に示した表示画像生成部１５が、元画像が絵画調画像に変化する過程を表現する複数の変換経過画像を表す複数の変換経過画像データに加え、以下の画像データを生成する。すなわち表示画像生成部１５は、元画像を表す画像データと絵画調画像を表す絵画調画像データとに基づき複数の解除経過画像データを生成する。解除経過画像データは、絵画調画像が元画像に戻る過程を表現する複数の解除経過画像をそれぞれ表す画像データである。
【０１０４】
また、図２に示したタイミング設定部１６は、複数の変換経過画像毎の表示タイミングに加え、表示画像生成部１５が生成した複数の解除経過画像データによりそれぞれ表される複数の解除経過画像毎の表示タイミングを設定する。
【０１０５】
また、図２に示した表示制御部１７は、元画像と、複数の変換経過画像と、絵画調画像と、複数の解除経過画像とを表示部３０にそれぞれ表示させる。なお、表示制御部１７は、複数の変換経過画像と複数の解除経過画像については、タイミング設定部１６が設定した表示タイミングで表示部３０に表示させ、かつ絵画調画像については、制御部１０が設定した変換終了タイミングで表示部３０に表示させる。
【０１０６】
次に、第３の実施形態のＤＰＦにおいて、ＢＧＭ付きアート変換モードが設定されたときの具体的な動作について説明する。図１０は、ＢＧＭ付きアート変換モードにおいて、制御部１０がＲＯＭ１０２に記憶されている画像表示プログラム１０２ａに従って実行する処理を示したフローチャートである。
【０１０７】
第３の実施形態においては、まず制御部１０が、操作キー群２０１における操作キー等の操作状態を逐次検出することによって、処理対象となる画像データ及び音楽データと、アート変換後の絵画調画像に確保すべき画調と、変換終了タイミングとを設定する（ステップＳＣ１）。ステップＳＣ１の処理において制御部１０が、画像データと音楽データと画調との設定に関する具体的な手順については、図４のステップＳＡ１処理と同様である。
【０１０８】
また、ステップＳＣ１の処理において制御部１０が設定する変換終了タイミングは、処理対象の音楽データの再生中における絵画調画像の表示タイミングである。ステップＳＣ１の処理において制御部１０は、ユーザに所定のキー操作によって、処理対象の音楽データの再生中における任意の時間（再生開始後の経過時間）を指定させる。そして、制御部１０は、ユーザに指定された時間を変換終了タイミングとし、当該変換終了タイミングを示すタイミング情報（以下、第１のタイミング情報という。）を記憶部１８に記憶する。
【０１０９】
次に、音楽情報取得部１３が、ステップＳＣ１の処理で処理対象として設定された音楽データに付加されている再生時間情報を取得する（ステップＳＣ２）。
【０１１０】
次に、タイミング設定部１６が、音楽情報取得部１３により取得された再生時間情報と、記憶部１８に記憶されている第１のタイミング情報により示される変換終了タイミングとに基づいて、変換経過画像毎の複数の表示タイミングを設定する（ステップＳＣ３）。
【０１１１】
ステップＳＣ３の処理においてタイミング設定部１６は、まず、変換終了タイミングである処理対象の音楽データの再生開始後の経過時間を予め決められている表示回数で除算することによって表示単位時間を計算する。ここで表示回数は、後述する複数の変換経過画像と絵画調画像とからなる複数の画像を表示する回数であり、以下の説明においては、便宜上、予め決められている表示回数が７回であるものとする。したがって、例えば変換終了タイミングである再生時間が３分３０秒である場合には、表示単位時間は３０秒となる。
【０１１２】
次に、タイミング設定部１６は、処理対象の音楽データの再生を開始してから表示単位時間が経過する毎の再生時間を、変換経過画像毎の表示タイミングとして決定する。但し、変換終了タイミングである再生時間は表示タイミングから除く。しかる後、タイミング設定部１６は、決定した複数の表示タイミング、つまり表示回数−１回分の表示タイミングを示すタイミング情報（以下、第２のタイミング情報という。）を記憶部１８に記憶する。
【０１１３】
したがって、例えば変換終了タイミングである再生時間が３分３０秒である場合には、表示単位時間は３０秒であるため、ステップＳＣ３の処理においてタイミング設定部１６は、変換経過画像毎の表示タイミングとして、０分３０秒、１分００秒、・・・３分００秒の各再生時間を設定する。
【０１１４】
引き続き、タイミング設定部１６が、音楽情報取得部１３により取得された再生時間情報と、制御部１０が変換終了タイミングとして設定した時間（処理対象の音楽データの再生開始後の経過時間）に基づいて、複数の解除経過画像毎の表示タイミングを設定する（ステップＳＣ４）。
【０１１５】
ステップＳＣ４の処理においてタイミング設定部１６は、まず、処理対象の音楽データの全再生時間における変換終了タイミング以降の残存時間を計算する。次に、タイミング設定部１６は、計算した残存時間を予め決められている表示回数で除算することによって表示単位時間を計算する。
【０１１６】
ここで表示回数は、後述する複数の解除経過画像と元画像とからなる複数の画像を表示する回数であり、以下の説明においては、便宜上、予め決められている表示回数が、変換経過画像毎の表示タイミングの設定に際して使用した表示回数と同様に７回であるものとする。したがって、例えば音楽データの全再生時間が７分００秒であり、変換終了タイミングの再生時間が３分３０秒である場合には、残存時間も３分３０秒であるため、表示単位時間は３０秒となる。
【０１１７】
次に、タイミング設定部１６は、処理対象の音楽データの再生時間において、制御部１０が変換終了タイミングとして設定した時間以降に表示単位時間が経過する毎の再生時間を、複数の解除経過画像の表示タイミングとして決定する。但し、音楽データの全再生時間となる再生時間は表示タイミングから除かれる。しかる後、タイミング設定部１６は、決定した複数の表示タイミング、つまり表示回数−１回分の表示タイミングを示すタイミング情報（以下、第３のタイミング情報という。）を記憶部１８に記憶する。
【０１１８】
したがって、例えば音楽データの全再生時間が７分００秒であり、変換終了タイミングである再生時間が３分３０秒である場合には、表示単位時間は３０秒であるため、ステップＳＣ４の処理においてタイミング設定部１６は、複数の解除経過画像毎の表示タイミングとして、４分００秒、４分３０秒、・・・６分３０秒の各再生時間を設定する。
【０１１９】
次に、画像再生部１１が、処理対象として設定された画像データを復号化するとともに、表示制御部１７が、復号化後の画像データにより表される元画像を表示部３０に表示させる（ステップＳＣ５）。
【０１２０】
また、画像変換部１４が、元画像を表す画像データにアート変換処理を施し、処理後の絵画調画像データを記憶部１８に記憶する（ステップＳＣ６）。次に、音楽再生部１２が、ステップＳＣ１の処理で処理対象として設定された音楽データの再生、つまり音声出力部４０によるＢＧＭの音声出力を開始する（ステップＳＣ７）。
【０１２１】
その後、記憶部１８に記憶されている第２のタイミング情報により示される変換経過画像の表示タイミングが到来すると（ステップＳＣ８：ＹＥＳ）、表示画像生成部１５が、表示タイミングに応じた変換経過画像データを生成する（ステップＳＣ９）。
【０１２２】
ステップＳＣ９の処理において表示画像生成部１５が生成する変換経過画像データは、第１の実施形態と同様、元画像が絵画調画像に変化する過程を表現するための以下の変換経過画像を表す画像データである。すなわち変換経過画像は、元画像の全域を表示回数に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像に置き換えた画像である。
【０１２３】
そして、表示制御部１７が、表示画像生成部１５が生成した変換経過画像データを表示部３０に供給し、変換経過画像データにより表される変換経過画像を表示部３０に表示させる（ステップＳＣ１０）。
【０１２４】
引き続き、音楽データの再生が終了するまでの間においては（ステップＳＣ１１：ＮＯ）、変換経過画像の表示タイミングが到来する毎に（ステップＳＣ８：ＹＥＳ）、ステップＳＣ９及びステップＳＣ１０の処理が繰り返し行われる。ステップＳＣ９及びステップＳＣ１０の処理が繰り返されることにより、複数の変換経過画像が、絵画調画像に置き換えられた部分の面積が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【０１２５】
そして、表示制御部１７が、記憶部１８に記憶されている第１のタイミング情報により示される変換終了タイミングが到来した時点で（ステップＳＣ１１：ＹＥＳ）、絵画調画像データにより表される絵画調画像を表示部３０に表示させる（ステップＳＣ１２）。
【０１２６】
その後、記憶部１８に記憶されている第３のタイミング情報により示される解除経過画像の表示タイミングが到来すると（ステップＳＣ１３：ＹＥＳ）、表示画像生成部１５が、表示タイミングに応じた解除経過画像データを生成する（ステップＳＣ１４）。
【０１２７】
ステップＳＣ１４の処理において表示画像生成部１５が生成する解除経過画像データは、絵画調画像が元画像に戻る過程を表現するための以下の解除経過画像を表す画像データである。すなわち解除経過画像は、絵画調画像の全域を表示回数に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを元画像に置き換えた画像である。解除経過画像の詳細については後述する。
【０１２８】
そして、表示制御部１７が、表示画像生成部１５が生成した解除経過画像データを表示部３０に供給し、解除経過画像データにより表される解除経過画像を表示部３０に表示させる（ステップＳＣ１５）。
【０１２９】
引き続き、音楽データの再生が終了するまでの間（ステップＳＣ１６：ＮＯ）、解除経過画像の表示タイミングが到来する毎に（ステップＳＣ１３：ＹＥＳ）、ステップＳＣ１４及びステップＳＣ１５の処理が繰り返し行われる。ステップＳＣ１４及びステップＳＣ１５の処理が繰り返されることにより、複数の変換経過画像が、絵画調画像に置き換えられた部分の面積が小さい順に一定の時間間隔で表示部３０に切り替えて表示される。
【０１３０】
その後、表示制御部１７が、音楽データの再生が終了した時点で（ステップＳＣ１６：ＹＥＳ）、記憶部１８に記憶されている画像データにより表される元画像を表示部３０に表示させる（ステップＳＣ１７）。
【０１３１】
これにより制御部１０は、ＢＧＭ付きアート変換モードによる処理を終了する。なお、制御部１０は、表示部３０における元画像の表示を、例えばユーザによって操作キー群２０１の所定の操作キーが操作されるまで継続する。
【０１３２】
図１１は、以上の処理において表示部３０に順に表示される元画像Ｇ１と、複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・と、絵画調画像Ｇ３と、複数の解除経過画像Ｇ４ａ，Ｇ４ｂ，・・・とを示した模式図である。なお、図１１は、音楽データの全再生時間が７分００秒、変換終了タイミングの再生時間が３分３０秒である場合の例を示した図である。
【０１３３】
複数の変換経過画像Ｇ２ａ，Ｇ２ｂ，・・・は、先に説明したように、第１の実施形態と同様であり、元画像Ｇ１の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを絵画調画像Ｇ３に置き換えた画像である。なお、図１１においても破線で区画された領域が分割領域である。
【０１３４】
一方、複数の解除経過画像Ｇ４ａ，Ｇ４ｂ，・・・は、先に説明したように、絵画調画像Ｇ３の全域を表示回数（７回）に応じた数で横方向に分割し、分割後の複数の分割領域のうちで、表示タイミングが到来した回数に応じた数の左側に位置する分割領域のみを元画像Ｇ１に置き換えた画像である。
【０１３５】
つまり音楽データの再生時間（再生開始後の経過時間）が４分００秒であるときの１回目の表示タイミングに応じた解除経過画像Ｇ４ａは、絵画調画像Ｇ３の一番左端の分割領域のみを元画像Ｇ１に置き換えた画像である。また、音楽データの再生時間が４分３０秒であるときの２回目の表示タイミングに応じた解除経過画像Ｇ４ｂは、絵画調画像Ｇ３の左端の２つの分割領域のみを元画像Ｇ１に置き換えた画像である。
【０１３６】
以上のように第３の実施形態のＤＰＦにおいても、ＢＧＭ付きアート変換モードで絵画調画像を表示する際、絵画調画像の表示と並行して音楽を再生するとともに、音楽の再生中には、元画像が絵画調画像に変化する過程を表現する複数の変換経過画像を音楽の進行に合わせて順に切り替えて表示する。さらに、第３の実施形態のＤＰＦにおいては、絵画調画像を表示した後には、絵画調画像が元画像に戻る過程を表現する複数の解除経過画像を音楽の進行に合わせて順に切り替えて表示する。
【０１３７】
そのため、第３の実施形態のＤＰＦにおいては、ユーザがＢＧＭ付きアート変換モードを用いて絵画調画像を鑑賞する際、元画像が絵画調画像に変化する過程を音楽の進行に合わせてユーザに鑑賞させることができる。同時に、絵画調画像が元画像に戻る過程を音楽の進行に合わせてユーザに鑑賞させることができる。
【０１３８】
したがって、例えば音楽の再生中に、単に特定のタイミングで絵画調画像を表示させる場合に比べ、絵画調画像の表示に際してより高い演出効果を確保することができる。
【０１３９】
さらに、第３の実施形態のＤＰＦにおいては、音楽データの再生中に絵画調画像を表示する変換終了タイミングをユーザが指定できるようにした。そのため、ユーザがＢＧＭ付きアート変換モードを用いて絵画調画像を鑑賞する際には、例えば音楽が一番盛り上がる瞬間に絵画調画像を表示することができる。したがって、絵画調画像の表示に際してより一層高い演出効果を確保することができる。
【０１４０】
ここで、第３の実施形態においては、音楽データの再生中に絵画調画像を表示する変換終了タイミングとして、ユーザが指定した時間を設定する構成とした。しかし、ＤＰＦには、変換終了タイミングを、例えば音楽データに付加されている特定の音楽情報に基づいて自動的に設定する構成を採用してもよい。特定の音楽情報としては、例えばＩＤ３タグにイベントタイムコードとして記述されている歌詞終了、リフレイン終了、主題終了を示す時間情報を使用することができる。変換終了タイミングを音楽情報に基づいて自動的に設定する構成においても、特定の音楽情報を用いることによって、例えば音楽が一番盛り上がる瞬間に絵画調画像を表示させることができる。
【０１４１】
また、第３の実施形態においては、音楽（ＢＧＭ）の再生中に表示する複数の変換経過画像と複数の解除経過画像との数、つまり変換経過画像と解除経過画像との表示回数が固定されている構成について説明した。
【０１４２】
しかし、変換経過画像と解除経過画像との表示回数は固定値でなくともよく、例えば変換経過画像と解除経過画像との一方、又は双方の表示回数をユーザに指定させる構成としてもよい。また、変換経過画像と解除経過画像との一方、又は双方の表示回数を、例えば第１の実施形態において言及した方法によって、ＢＧＭとして再生する音楽の内容に応じて変化させる構成としてもよい。また、変換経過画像と解除経過画像との表示回数が同一である必要はない。
【０１４３】
また、第３の実施形態においては、複数の変換経過画像や複数の解除経過画像を他の複数の画像とする構成としてもよい。複数の変換経過画像は、例えば第１の実施形態において言及した図７に示した他の複数の変換経過画像等や、第２の実施形態で説明した表示順に従い変換強度が増大する複数の絵画調画像に変更してもよい。
【０１４４】
また、複数の解除経過画像は、例えば第１の実施形態において言及した図７に示した他の複数の変換経過画像等において、元画像部分と絵画調画像部分とを逆転させたものに変更してもよい。さらに、複数の解除経過画像は、例えば第２の実施形態で説明した複数の絵画調画像とは逆に、表示順に従い変換強度が減少する複数の絵画調画像に変更してもよい。
【０１４５】
（第１の実施形態〜第３の実施形態の変形等）
ここで第１の実施形態、第２の実施形態、第３の実施形態（以下、本実施形態という。）の変形について説明する。本実施形態においては、音楽を再生しながら表示する鑑賞用画像が、元画像にアート変換処理を施した後の絵画調画像である場合について説明した。しかし、音楽を再生しながら表示する鑑賞用画像は、アート変換処理以外の他の任意の画像処理を施すことにより生成される他の画像であっても構わない。
【０１４６】
また、本実施形態においては、鑑賞用画像の表示に際して再生する音楽が、ＭＰ３方式で圧縮された音楽データとして記憶されているものについて説明した。しかし、鑑賞用画像を表示に際して再生する音楽は、他の形式の音楽データとして記憶されているものでも構わない。
【０１４７】
また、本実施形態においては、複数の変換経過画像等の表示タイミングの設定に使用される音楽情報（再生時間情報等）が、ＩＤ３タグとして音楽データに付加されている場合について説明した。しかし、表示タイミングの設定に使用される音楽情報は、音楽データに付随するものであればよく、任意のデータ構造や任意の形態で記憶されているものを使用することができる。
【０１４８】
また、本実施形態においては、本発明をＤＰＦに採用した場合について説明したが、本発明は、音楽を再生する機能と、元画像に画像処理を施し鑑賞用画像として表示する機能とを備えたものであれば、ＤＰＦ以外の他の装置にも適用することができる。他の装置としては、例えばデジタルカメラや、デジタルカメラが内蔵された携帯電話端末等の任意の携帯情報端末、汎用的なパーソナルコンピュータである。
【符号の説明】
【０１４９】
１ ＤＰＦ
１０ 制御部
１１ 画像再生部
１２ 音楽再生部
１３ 音楽情報取得部
１４ 画像変換部
１５ 表示画像生成部
１６ タイミング設定部
１７ 表示制御部
１８ 記憶部
２０ 操作部
３０ 表示部
４０ 音声出力部
５０ 記録メディア
１０１ ＣＰＵ
１０２ ＲＯＭ
１０２ａ 画像表示プログラム
１０３ ＲＡＭ
３０１ ディスプレイ
４０１ 音声処理部
４０２ スピーカ
５０１ 音楽ファイル
Ｇ１ 元画像
Ｇ２，Ｇ２ａ，Ｇ２ｂ 変換経過画像
Ｇ３ 絵画調画像
Ｇ３ａ〜Ｇ３ｆ 絵画調画像（変換経過画像）
Ｇ４ａ，Ｇ４ｂ 解除経過画像
【特許請求の範囲】
【請求項１】
元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、
前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、
前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、
音楽を再生する音楽再生手段と、
前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、前記表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段と
を備えたことを特徴とする画像表示装置。
【請求項２】
前記音楽の内容を示す音楽情報を取得する取得手段と、
前記第２の画像生成手段により生成される複数の変換経過画像の表示タイミングを、前記取得手段により取得された音楽情報に基づき設定するタイミング設定手段と
をさらに備え、
前記表示制御手段は、前記音楽再生手段による音楽の再生中に、前記複数の変換経過画像を、前記タイミング設定手段により設定された表示タイミングで順に切り替えて表示させる
ことを特徴とする請求項１記載の画像表示装置。
【請求項３】
前記取得手段により取得された音楽情報に基づいて、前記第２の画像生成手段が生成する前記複数の変換経過画像の数を制御する画像数制御手段と
をさらに備えた
ことを特徴とする請求項２記載の画像表示装置。
【請求項４】
前記音楽再生手段による音楽の再生中における前記鑑賞用画像の表示タイミングを設定する第２のタイミング設定手段をさらに備え、
前記表示制御手段は、前記音楽再生手段による音楽の再生中に、前記鑑賞用画像を前記表示手段に前記第２のタイミング設定手段により設定された表示タイミングで表示させる
ことを特徴とする請求項２又は３記載の画像表示装置。
【請求項５】
前記鑑賞用画像が前記元画像に戻る過程を表現する複数の解除経過画像を生成する第３の画像生成手段をさらに備え、
前記表示制御手段は、前記音楽再生手段による音楽の再生中に、前記鑑賞用画像を前記表示手段に前記第２のタイミング設定手段により設定された表示タイミングで表示させた後、前記第３の画像生成手段により生成された前記複数の解除経過画像を、前記表示手段に前記音楽の進行に合わせて順に切り替えて表示させる
ことを特徴とする請求項４記載の画像表示装置。
【請求項６】
前記第２の画像生成手段は、前記複数の変換経過画像として、前記元画像を部分的に前記鑑賞用画像に置き換えた複数の画像であって、鑑賞用画像に置き換える部分の面積が異なる複数の画像を生成し、
前記表示制御手段は、前記第２の画像生成手段により生成された複数の変換経過画像を、元画像が鑑賞用画像に置き換えられた部分の面積が小さい順に切り替えて前記表示手段に表示させる
ことを特徴とする請求項１乃至５いずれか記載の画像表示装置。
【請求項７】
前記第１の画像生成手段が元画像に施す画像処理は、任意の画像を特定の画調を有する絵画調画像に変換するアート変換処理であり、
前記第２の画像生成手段は、前記複数の複数の変換経過画像として、元画像に変換強度が異なる複数回の前記アート変換処理を施すことにより、前記第１の画像生成手段により生成される鑑賞用画像と同一の画調を有する複数の絵画調画像を生成し、
前記表示制御手段は、前記第２の画像生成手段により生成された複数の絵画調画像を、前記アート変換処理時における変換強度が小さい順に切り替えて前記表示手段に表示させる
ことを特徴とする請求項１乃至５いずれか記載の画像表示装置。
【請求項８】
コンピュータを、
元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、
前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、
前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、
音楽を再生する音楽再生手段と、
前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段
として機能させることを特徴とするプログラム。
【請求項１】
元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、
前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、
前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、
音楽を再生する音楽再生手段と、
前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、前記表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段と
を備えたことを特徴とする画像表示装置。
【請求項２】
前記音楽の内容を示す音楽情報を取得する取得手段と、
前記第２の画像生成手段により生成される複数の変換経過画像の表示タイミングを、前記取得手段により取得された音楽情報に基づき設定するタイミング設定手段と
をさらに備え、
前記表示制御手段は、前記音楽再生手段による音楽の再生中に、前記複数の変換経過画像を、前記タイミング設定手段により設定された表示タイミングで順に切り替えて表示させる
ことを特徴とする請求項１記載の画像表示装置。
【請求項３】
前記取得手段により取得された音楽情報に基づいて、前記第２の画像生成手段が生成する前記複数の変換経過画像の数を制御する画像数制御手段と
をさらに備えた
ことを特徴とする請求項２記載の画像表示装置。
【請求項４】
前記音楽再生手段による音楽の再生中における前記鑑賞用画像の表示タイミングを設定する第２のタイミング設定手段をさらに備え、
前記表示制御手段は、前記音楽再生手段による音楽の再生中に、前記鑑賞用画像を前記表示手段に前記第２のタイミング設定手段により設定された表示タイミングで表示させる
ことを特徴とする請求項２又は３記載の画像表示装置。
【請求項５】
前記鑑賞用画像が前記元画像に戻る過程を表現する複数の解除経過画像を生成する第３の画像生成手段をさらに備え、
前記表示制御手段は、前記音楽再生手段による音楽の再生中に、前記鑑賞用画像を前記表示手段に前記第２のタイミング設定手段により設定された表示タイミングで表示させた後、前記第３の画像生成手段により生成された前記複数の解除経過画像を、前記表示手段に前記音楽の進行に合わせて順に切り替えて表示させる
ことを特徴とする請求項４記載の画像表示装置。
【請求項６】
前記第２の画像生成手段は、前記複数の変換経過画像として、前記元画像を部分的に前記鑑賞用画像に置き換えた複数の画像であって、鑑賞用画像に置き換える部分の面積が異なる複数の画像を生成し、
前記表示制御手段は、前記第２の画像生成手段により生成された複数の変換経過画像を、元画像が鑑賞用画像に置き換えられた部分の面積が小さい順に切り替えて前記表示手段に表示させる
ことを特徴とする請求項１乃至５いずれか記載の画像表示装置。
【請求項７】
前記第１の画像生成手段が元画像に施す画像処理は、任意の画像を特定の画調を有する絵画調画像に変換するアート変換処理であり、
前記第２の画像生成手段は、前記複数の複数の変換経過画像として、元画像に変換強度が異なる複数回の前記アート変換処理を施すことにより、前記第１の画像生成手段により生成される鑑賞用画像と同一の画調を有する複数の絵画調画像を生成し、
前記表示制御手段は、前記第２の画像生成手段により生成された複数の絵画調画像を、前記アート変換処理時における変換強度が小さい順に切り替えて前記表示手段に表示させる
ことを特徴とする請求項１乃至５いずれか記載の画像表示装置。
【請求項８】
コンピュータを、
元画像に画像処理を施して鑑賞用画像を生成する第１の画像生成手段と、
前記第１の画像生成手段により生成された鑑賞用画像を表示する表示手段と、
前記元画像が前記鑑賞用画像に変化する過程を表現する複数の変換経過画像を生成する第２の画像生成手段と、
音楽を再生する音楽再生手段と、
前記音楽再生手段による音楽の再生中に、前記第１の画像生成手段により生成された鑑賞用画像に先立ち、前記第２の画像生成手段により生成された複数の変換経過画像を、表示手段に前記音楽の進行に合わせて順に切り替えて表示させる表示制御手段
として機能させることを特徴とするプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図６】
【図２】
【図３】
【図４】
【図５】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図６】
【公開番号】特開２０１２−４９８３７（Ｐ２０１２−４９８３７Ａ）
【公開日】平成２４年３月８日（２０１２．３．８）
【国際特許分類】
【出願番号】特願２０１０−１９０２６０（Ｐ２０１０−１９０２６０）
【出願日】平成２２年８月２７日（２０１０．８．２７）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
【公開日】平成２４年３月８日（２０１２．３．８）
【国際特許分類】
【出願日】平成２２年８月２７日（２０１０．８．２７）
【出願人】（０００００１４４３）カシオ計算機株式会社 (8,748)
【Ｆターム（参考）】
[ Back to top ]