音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置
【課題】音楽の再生時に音楽の歌詞に応じた画像を表示装置に表示させるための音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置を提供する。
【解決手段】音楽を再生する再生部と、前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いて画像取得を行う取得部と、前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、を備える音楽再生装置。
【解決手段】音楽を再生する再生部と、前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いて画像取得を行う取得部と、前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、を備える音楽再生装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置に関する。
【背景技術】
【０００２】
従来、音楽再生装置の多くは音楽の再生に特化していたが、近日では、以下のような表示機能を有する音楽再生装置が普及しつつある。
（１）ビジュアライザー機能
再生される音楽のリズムに応じた動きで所定のデザインパターンを表示する機能。
（２）歌詞表示機能
音楽再生と併せて音楽の歌詞を表示する機能。
【０００３】
また、特許文献１には、再生される音楽の雰囲気（楽器、旋法）に適合する画像を表示させる技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−１８１６４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記のビジュアライザー機能では、表示されるデザインパターンおよびその動きは音楽の雰囲気に合ってない場合があり、ユーザの目も疲れる。また、歌詞表示機能は、ユーザにとって利便性が高いが、面白みに欠ける面がある。また、特許文献１に記載の技術のように音楽の雰囲気に適合する画像を表示することも効果的であるが、音楽を特徴付ける要素は楽器や旋法などの音楽の雰囲気だけではない。
【０００６】
そこで、本開示では、音楽の再生時に音楽の歌詞に応じた画像を表示装置に表示させることが可能な、新規かつ改良された音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置を提案する。
【課題を解決するための手段】
【０００７】
本開示によれば、音楽を再生する再生部と、前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いて画像取得を行う取得部と、前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、を備える音楽再生装置が提供される。
【０００８】
また、本開示によれば、音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出することと、前記抽出された語句を用いて画像取得を行うことと、前記音楽の再生時に、前記取得された画像を表示装置に表示させることと、を含む音楽再生方法が提供される。
【０００９】
また、本開示によれば、コンピュータを、音楽を再生する再生部と、前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いて画像取得を行う取得部と、前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、として機能させるためのプログラムが提供される。
【００１０】
また、本開示によれば、音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いてネットワークから画像取得を行う取得部と、前記取得部により取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、を備えるデータ作成装置が提供される。
【発明の効果】
【００１１】
以上説明したように本開示によれば、音楽の再生時に音楽の歌詞に応じた画像を表示装置に表示させることができる。
【図面の簡単な説明】
【００１２】
【図１】本開示の実施形態による音楽再生システムの構成を示した説明図である。
【図２】本開示による音楽再生装置のハードウェア構成を示した説明図である。
【図３】本開示の第１の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【図４】第１の表示制御により表示される画面の具体例を示した説明図である。
【図５】第２の表示制御により表示される画面の具体例を示した説明図である。
【図６】第３の表示制御により表示される画面の具体例を示した説明図である。
【図７】第４の表示制御により表示される画面の具体例を示した説明図である。
【図８】第５の表示制御により表示される画面の具体例を示した説明図である。
【図９】第１の実施形態による音楽再生装置の動作を示したフローチャートである。
【図１０】本開示の第２の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【図１１】第２の実施形態による歌詞の解析結果を示した説明図である。
【図１２】第２の実施形態による画像表示の具体例を示した説明図である。
【図１３】第２の実施形態による音楽再生装置の動作を示したフローチャートである。
【図１４】本開示の第３の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【図１５】第３の実施形態による歌詞の解析結果を示した説明図である。
【図１６】第３の実施形態による画像表示の具体例を示した説明図である。
【図１７】第３の実施形態による音楽再生装置の動作を示したフローチャートである。
【図１８】本開示の第４の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
【００１４】
また、以下に示す項目順序に従って当該「発明を実施するための形態」を説明する。
１．音楽再生システムの構成
２．各実施形態の説明
２−１．第１の実施形態
２−２．第２の実施形態
２−３．第３の実施形態
２−４．第４の実施形態
３．むすび
【００１５】
＜＜１．音楽再生システムの構成＞＞
本開示による技術は、一例として「２−１．第１の実施形態」〜「２−４．第４の実施形態」において詳細に説明するように、多様な形態で実施され得る。また、各実施形態による音楽再生装置２０は、
Ａ．音楽を再生する再生部（音楽再生部２７２）と、
Ｂ．音楽の歌詞を解析し、歌詞に含まれる語句を抽出する解析部（２３０）と、
Ｃ．解析部により抽出された語句を用いて画像取得を行う取得部（通信部２６４、検索部２６８）と、
Ｄ．音楽の再生時に、取得部により取得された画像を表示装置（画像表示部２８４）に表示させる表示制御部（２８０）と、を備える。
【００１６】
以下では、まず、このような各実施形態において共通する基本構成について図１および図２を参照して説明する。
【００１７】
図１は、本開示の実施形態による音楽再生システム１の構成を示した説明図である。図１に示したように、本開示の実施形態による音楽再生システム１は、通信網１２、音楽再生装置２０、画像検索サーバ３０、および画像サーバ４０Ａ、４０Ｂ・・・を備える。
【００１８】
通信網１２は、通信網１２に接続されている機器から送信される情報の有線、または無線の伝送路である。例えば、通信網１２は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを含んでもよい。また、通信網１２は、ＩＰ−ＶＰＮ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ−Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。本開示においては、音楽再生装置２０、画像検索サーバ３０、および画像サーバ４０Ａ、４０Ｂ・・・が通信網１２を介して接続される。
【００１９】
画像サーバ４０は、画像を語句と関連付けて記憶しているネットワークノードである。なお、本開示においては画像が主に静止画である例を説明するが、画像は動画であってもよい。
【００２０】
画像検索サーバ３０は、音楽再生装置２０からの要求に従って画像サーバ４０から画像検索を行い、検索結果を音楽再生装置２０に送信する。より具体的に説明すると、画像検索サーバ３０は、音楽再生装置２０から少なくとも１つの検索語句を受信すると、受信した検索語句に合致する画像を画像サーバ４０から検索し、検索結果を音楽再生装置２０に送信する。
【００２１】
音楽再生装置２０は、音楽の再生機能を有する。また、本開示による音楽再生装置２０は、音楽の歌詞に含まれる語句を用いた検索により画像を取得し、取得した画像を音楽の再生時に表示することができる。この音楽再生装置２０については「２．各実施形態の説明」において詳細に説明する。
【００２２】
なお、図１においては音楽再生装置２０の一例として携帯電話（スマートフォン）を示しているが、音楽再生装置２０は携帯電話に限定されない。例えば、音楽再生装置２０は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、家庭用映像処理装置（ＤＶＤレコーダ、ビデオデッキなど）、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、家庭用ゲーム機器、家電機器、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）、携帯用音楽再生装置、携帯用映像処理装置、携帯用ゲーム機器、またはカラオケ装置などの情報処理装置であってもよい。
【００２３】
（音楽再生装置のハードウェア構成）
ここで、図２を参照し、本開示による音楽再生装置２０のハードウェア構成を説明する。図２は、本開示による音楽再生装置２０のハードウェア構成を示した説明図である。図２に示したように、音楽再生装置２０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３と、ホストバス２０４と、を備える。また、音楽再生装置２０は、ブリッジ２０５と、外部バス２０６と、インタフェース２０７と、入力装置２０８と、出力装置２１０と、ストレージ装置（ＨＤＤ）２１１と、ドライブ２１２と、通信装置２１５とを備える。
【００２４】
ＣＰＵ２０１は、演算処理装置および制御装置として機能し、各種プログラムに従って音楽再生装置２０内の動作全般を制御する。また、ＣＰＵ２０１は、マイクロプロセッサであってもよい。ＲＯＭ２０２は、ＣＰＵ２０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ２０３は、ＣＰＵ２０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバス２０４により相互に接続されている。
【００２５】
ホストバス２０４は、ブリッジ２０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス２０６に接続されている。なお、必ずしもホストバス２０４、ブリッジ２０５および外部バス２０６を分離構成する必要はなく、一のバスにこれらの機能を実装してもよい。
【００２６】
入力装置２０８は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ２０１に出力する入力制御回路などから構成されている。音楽再生装置２０のユーザは、該入力装置２０８を操作することにより、音楽再生装置２０に対して各種のデータを入力したり処理動作を指示したりすることができる。
【００２７】
出力装置２１０は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置およびランプなどの表示装置を含む。さらに、出力装置２１０は、スピーカおよびヘッドホンなどの音声出力装置を含む。出力装置２１０は、例えば、再生されたコンテンツを出力する。具体的には、表示装置は再生された映像データ等の各種情報をテキストまたはイメージで表示する。一方、音声出力装置は、再生された音声データ等を音声に変換して出力する。
【００２８】
ストレージ装置２１１は、本実施形態にかかる音楽再生装置２０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置２１１は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置２１１は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）で構成される。このストレージ装置２１１は、ハードディスクを駆動し、ＣＰＵ２０１が実行するプログラムや各種データを格納する。
【００２９】
ドライブ２１２は、記憶媒体用リーダライタであり、音楽再生装置２０に内蔵、あるいは外付けされる。ドライブ２１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体２４に記録されている情報を読み出して、ＲＡＭ２０３に出力する。また、ドライブ２１２は、リムーバブル記憶媒体２４に情報を書き込むこともできる。
【００３０】
通信装置２１５は、例えば、通信網１２に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置２１５は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。
【００３１】
＜＜２．各実施形態の説明＞＞
以上、本開示による音楽再生システム１の構成を説明した。続いて、本開示の各実施形態について順次詳細に説明する。
【００３２】
＜２−１．第１の実施形態＞
本開示の第１の実施形態による音楽再生装置２０−１は、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句を抽出すること、抽出された語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することができる。かかる構成により、ユーザは、聴覚による音楽の知覚に加え、音楽の歌詞に応じた画像を視覚によって知覚できるので、音楽をより深く味わうことが可能となる。以下、このような本開示の第１の実施形態による音楽再生装置２０−１について図３〜図９を参照して詳細に説明する。
【００３３】
（第１の実施形態による音楽再生装置の構成）
図３は、本開示の第１の実施形態による音楽再生装置２０−１の構成を示した機能ブロック図である。図３に示したように、第１の実施形態による音楽再生装置２０−１は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２３０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８０、および画像表示部２８４を備える。
【００３４】
歌詞記憶部２１６は、音楽記憶部２２０に記憶されている音楽の歌詞を記憶している。音楽記憶部２２０は、音楽の再生用のデータを記憶している。画像記憶部２２４は、画像を語句と関連付けて記憶している。
【００３５】
このような歌詞記憶部２１６、音楽記憶部２２０、および画像記憶部２２４は、不揮発性メモリ、磁気ディスク、光ディスク、およびＭＯ（Ｍａｇｎｅｔｏ Ｏｐｔｉｃａｌ）ディスクなどの記憶媒体であってもよい。不揮発性メモリとしては、例えば、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）があげられる。また、磁気ディスクとしては、ハードディスクおよび円盤型磁性体ディスクなどがあげられる。また、光ディスクとしては、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）、ＤＶＤ−Ｒ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ Ｒｅｃｏｒｄａｂｌｅ）およびＢＤ（Ｂｌｕ−Ｒａｙ Ｄｉｓｃ（登録商標））などがあげられる。
【００３６】
解析部２３０は、音楽記憶部２２０に記憶されている音楽、および当該音楽に関して歌詞記憶部２１６に記憶されている歌詞を解析し、画像を検索するための検索語句を抽出する。このための構成として、解析部２３０は、歌詞取得部２３１、形態素解析部２３２、音楽解析部２３３、重要度判定部２３６、および語句抽出部２３８を有する。なお、解析部２３０は、以下の解析を歌詞の１文、１行、または１メロディーパートなどの範囲ごとに実行してもよい。
【００３７】
歌詞取得部２３１は、対象の音楽の歌詞を歌詞記憶部２１６から取得する。なお、対象の音楽は、再生中の音楽、ユーザにより指示された音楽、または音楽記憶部２２０に記憶されている再生前の音楽であってもよい。
【００３８】
形態素解析部２３２は、歌詞取得部２３１により取得された歌詞を形態素解析する。例えば、歌詞取得部２３１により「京都の山奥で生まれたよ〜」という歌詞が取得された場合、形態素解析部２３２は、当該歌詞を構成する語句（形態素）、および各語句の品詞を以下のように解析する。
「京都（固有名詞）│の（助詞）│山奥（普通名詞）│
で（助詞）│生まれたよ〜（動詞）」
【００３９】
一方、音楽解析部２３３は、音楽中で解析対象の歌詞が出現している部分のメロディーパート（Ａメロ、Ｂメロ、サビなど）、テンポ（リズム）および音量などを解析する。
【００４０】
また、重要度判定部２３６は、形態素解析部２３２により得られた各語句の重要度を判定する。例えば、重要度判定部２３６は、以下の基準のうちの少なくともいずれかに従って各語句の重要度を判定する。
【００４１】
（１）品詞に基づく判定
重要度判定部２３６は、各語句の品詞に基づいて重要度を判定してもよい。
例：固有名詞→３倍、普通名詞→２倍、その他名詞、１倍
（２）専用辞書／テーブルに基づく判定
重要度判定部２３６は、専用辞書／テーブルに含まれる語句の重要度を高くしてもよい。
例：人物辞書、地名辞書、グルメ辞書に存在する語句の重要度は３倍
（３）出現回数に基づく判定
重要度判定部２３６は、解析対象の歌詞部分における出現回数に基づいて重要度を判定してもよい。
例：出現回数が２回なら２倍
（４）アルバム名や曲名に基づく判定
重要度判定部２３６は、対象の音楽のアルバム名や曲名に意味的に近い語句の重要度を高くしてもよい。
例：アルバム名が「ｓｕｍｍａｒ」である場合、「海」、「太陽」などを２倍
（５）ジャンルに基づく判定
重要度判定部２３６は、対象の音楽のジャンルに意味的に近い語句の重要度を高くしてもよい。
例：ジャンルが「ヘビメタ」である場合、「叫び」を２倍
（６）再生日時、再生場所に基づく判定
重要度判定部２３６は、再生日時、再生場所に基づいて語句の重要度を判定してもよい。なお、再生場所は、例えばＧＰＳのようの位置推定技術により推定可能である。
例：再生日時が「午前」である場合、「朝」、「夜明け」を２倍
再生場所が「京都」である場合、「京都」を２倍
（７）ユーザの嗜好情報に基づく判定
重要度判定部２３６は、ユーザの嗜好情報に基づいて語句の重要度を判定してもよい。なお、ユーザの嗜好情報は、ユーザによる音楽の再生履歴や、通信網１２からの情報検索に用いた語句の履歴などから取得可能である。
例：ユーザの嗜好が「バイク」である場合、「エンジン」、「ブレーキ」を２倍
（８）メロディーパートに基づく判定
重要度判定部２３６は、解析対象の歌詞部分のメロディーパートに応じて重要を調整してもよい。
例：サビ＞Ｂメロ＞Ａメロ、という順で重要度が高くなるように調整
（９）テンポに基づく判定
重要度判定部２３６は、解析対象の歌詞部分のテンポに応じて重要度を調整してもよい。
例：テンポの速い箇所である場合には重要度を高くする。
（１０）音量に基づく判定
重要度判定部２３６は、解析対象の歌詞部分の音量に応じて重要度を調整してもよい。
例：音量の大きい箇所である場合には重要度を高くする。
【００４２】
重要度判定部２３６は、例えば上記基準（１）〜（３）に基づき、「京都の山奥で生まれたよ〜」という歌詞において、「京都」の重要度を、「京都」が固有名詞で、地名辞書に存在し、出現回数は１回なので、「９」と判定する。一方、重要度判定部２３６は、「山奥」の重要度を、「山奥」が普通名詞で、専用辞書に存在せず、出現回数が１回なので、「２」と判定する。
【００４３】
語句抽出部２３８は、重要度判定部２３６により判定された各語句の重要度に基づき、歌詞に含まれる語句から検索語句を抽出する。例えば、語句抽出部２３８は、重要度が最も高い「京都」を検索語句として抽出してもよいし、重要度が最も高い「京都」および次に重要度が高い「山奥」の双方を抽出してもよい。
【００４４】
なお、語句抽出部２３８は、解析対象の歌詞部分の再生時に表示する画像枚数に基づいて抽出する語句の数を決定してもよい。例えば、解析対象の歌詞部分の再生時に１枚の画像のみを表示する場合には重要度が最も高い語句のみを検索語句として抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が最も高い語句から、重要度がｎ番目に高い語句までを検索語句として抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が高い方から少なくとも１つの語句を検索語句として抽出してもよい。この場合、抽出された検索語句の各々により、合計がｎ枚になるように画像が検索される。
【００４５】
通信部２６４および検索部２６８は、語句抽出部２３８により抽出された検索語句に基づいて画像を取得する取得部としての機能を有する。なお、通信部２６４および検索部２６８による画像の取得枚数は、ユーザが各画像十分に視認できるように、解析対象の歌詞部分の再生時間に応じて決定されてもよい。例えば、解析対象の歌詞部分の再生時間が長いほど取得枚数が大きな数に決定される。
【００４６】
通信部２６４は、通信網１２と通信するためのインタフェースである。通信部２６４は、例えば、解析部２３０により抽出された検索語句（例えば、「京都」）を検索要求として画像検索サーバ３０に送信し、画像検索サーバ３０により検索語句を用いて検索された画像を画像検索サーバ３０から受信する。
【００４７】
検索部２６８は、音楽再生装置２０−１が有する画像記憶部２２４から、解析部２３０により抽出された検索語句に合致する画像を検索する。なお、画像取得は通信部２６４または検索部２６８のいずれかによって行われてもよいし、双方によって行われてもよい。また、通信部２６４は、音楽の再生開始前に画像取得を行い、画像記憶部２２４は、通信部２６４により取得された画像を音楽と関連付けて記憶しておいてもよい。この場合、検索部２６８が、音楽の再生時に当該音楽に関連付けられた画像を画像記憶部２２４から取得することができる。なお、通信部２６４による画像取得から一定期間の経過後、または、ある音楽について取得済みの画像が全て表示のために利用された場合などには、画像記憶部２２４の画像更新のために、通信部２６４が再度画像取得を行ってもよい。また、音楽再生時に画像記憶部２２４に音楽と関連付けられた画像が記憶されていない場合、通信部２６４は音楽再生時にリアルタイムに画像をネットワークから取得してもよい。
【００４８】
音楽再生部２７２は、解析対象の音楽の再生用データを音楽記憶部２２０から読み出して再生する。例えば、音楽再生部２７２は、再生用データ復号およびＤ／Ａ変換などを行い、再生信号を音楽出力部２７６に供給する。
【００４９】
音楽出力部２７６は、音楽再生部２７２から供給される再生信号を音声として出力する。この音楽出力部２７６は、スピーカ、イヤホンおよびヘッドホンなどの外付けの音楽出力装置であってもよい。
【００５０】
表示制御部２８０は、通信部２６４または検索部２６８により検索語句に基づいて取得された画像を、音楽再生部２７２により再生される音楽の進行に合わせて画像表示部２８４に表示させる。ここで、表示制御部２８０は、検索語句に基づいて取得された画像の表示制御を以下に例示するように多様な形態で行うことが可能である。なお、以下で説明する各表示制御は適宜組み合わせて実行することも可能である。
【００５１】
−−第１の表示制御−−
表示制御部２８０は、解析部２３０により１の検索語句が抽出され、通信部２６４または検索部２６８により１の検索語句を用いて１枚の画像が検索された場合、検索された画像を検索語句が出現する音楽部分の再生時に渡って画像表示部２８４に表示させてもよい。例えば、解析部２３０により検索語句として「京都」が抽出され、通信部２６４または検索部２６８により検索語句「京都」に基づいて１枚の画像が検索された場合、表示制御部２８０は、図４に示す画面を画像表示部２８４に表示させる。
【００５２】
図４は、第１の表示制御により表示される画面の具体例を示した説明図である。図４に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生時に、検索語句「京都」に基づいて検索された画像Ｐ１を画像表示部２８４に歌詞と併せて表示する。なお、表示制御部２８０は、歌詞は画像表示部２８４に表示させなくてもよい。
【００５３】
より詳細に説明すると、表示制御部２８０は、検索語句の重要度に応じて画像の表示サイズを制御してもよい。例えば、表示制御部２８０は、検索語句の重要度が高いほど画像の表示サイズを大きくしてもよい。ここで、検索語句の重要度はメロディーパート、テンポ、および音量などにも依存するので、結果、メロディーパート、テンポ、および音量などによって画像の表示サイズが制御される。
【００５４】
なお、表示制御部２８０は、検索語句を用いて取得された画像を、検索語句の出現する音楽部分と異なる箇所において画像表示部２８４に表示させてもよい。例えば、音楽中のサビ部分の歌詞は作詞家が音楽中で最も伝えたい代表箇所と捉えることができるので、表示制御部２８０は、その音楽全体の再生時に、サビ部分に含まれる検索語句を用いて取得された画像を画像表示部２８４に表示させてもよい。また、表示制御部２８０は、伏線的な効果を得るために、あるメロディーパートの再生時に、次のメロディーパートに含まれる検索語句を用いて取得された画像を画像表示部２８４に表示させてもよい。
【００５５】
−−第２の表示制御−−
表示制御部２８０は、解析部２３０により１の検索語句が抽出され、通信部２６４または検索部２６８により１の検索語句を用いて複数枚の画像が検索された場合、検索された複数枚の画像を検索語句が出現する音楽部分の再生時に順次に画像表示部２８４に表示させてもよい。例えば、解析部２３０により検索語句として「京都」が抽出され、通信部２６４または検索部２６８により検索語句「京都」に基づいて２枚の画像が検索された場合、表示制御部２８０は、図５に示す画面を画像表示部２８４に表示させる。
【００５６】
図５は、第２の表示制御により表示される画面の具体例を示した説明図である。図５に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が開始されると、まず、検索語句「京都」に基づいて検索された一方の画像Ｐ１を画像表示部２８４に表示させる。そして、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が進行すると、表示制御部２８０は、検索語句「京都」に基づいて検索された他方の画像Ｐ２に画像表示部２８４の表示を切り替える。
【００５７】
なお、表示制御部２８０は、フェードイン、フェードアウトにより画像の切替えを行ってもよい。例えば、表示制御部２８０は、画像Ｐ１から画像Ｐ２への切替え時、画像Ｐ１のαブレンド値（透過度）を徐々に小さくし、画像Ｐ２のαブレンド値を徐々に大きくしてもよい。
【００５８】
−−第３の表示制御−−
表示制御部２８０は、解析部２３０により複数の検索語句が抽出され、通信部２６４または検索部２６８により複数の検索語句の各々を用いて画像が検索された場合、各検索語句を用いて検索された画像を、対応する音楽部分の再生時に順次に画像表示部２８４に表示させてもよい。例えば、解析部２３０により検索語句として「京都」および「山奥」が抽出され、通信部２６４または検索部２６８により検索語句「京都」および「山奥」の各々により画像が１枚ずつ検索された場合、表示制御部２８０は、図６に示す画面を画像表示部２８４に表示させる。
【００５９】
図６は、第３の表示制御により表示される画面の具体例を示した説明図である。図６に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が開始されると、検索語句「京都」を用いて検索された画像Ｐ１を画像表示部２８４に表示させる。そして、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が進行すると、表示制御部２８０は、検索語句「山奥」を用いて検索された画像Ｐ３に画像表示部２８４の表示を切り替える。
【００６０】
ここで、検索語句「京都」の重要度が「９」であるのに対し、検索語句「山奥」の重要度は「２」であるので、図６に示したように、検索語句「山奥」を用いて検索された画像Ｐ３の表示サイズが、画像Ｐ１の表示サイズより小さくなるように制御される。
【００６１】
−−第４の表示制御−−
表示制御部２８０は、通信部２６４または検索部２６８により検索された画像に、音楽のビートやリズムに応じた動き（画像の揺れ、伸縮、回転など）を与えてもよい。例えば、解析部２３０により検索語句として「京都」が抽出され、通信部２６４または検索部２６８により検索語句「京都」に基づいて画像が検索された場合、表示制御部２８０は、図７に示す表示制御を行う。
【００６２】
図７は、第４の表示制御により表示される画面の具体例を示した説明図である。図７に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生時、検索語句「京都」に基づいて検索された画像Ｐ１を画面上の上下に揺らす。
【００６３】
ここで、表示制御部２８０は、音楽のリズムに対応する激しさで画像Ｐ１を揺らしてもよい。このような第４の表示制御により、音楽の雰囲気を画像Ｐ１の表示態様に反映させることが可能である。
【００６４】
−−第５の表示制御−−
表示制御部２８０は、通信部２６４または検索部２６８により複数枚の画像が検索された場合、検索語句が出現する音楽部分の再生時に、複数枚の画像を画像表示部２８４の異なる領域に同時に表示させてもよい。例えば、解析部２３０により検索語句として「京都」および「山奥」が抽出され、通信部２６４または検索部２６８により検索語句「京都」および「山奥」の各々により画像が１枚ずつ検索された場合、表示制御部２８０は、図８に示す画面を画像表示部２８４に表示させる。
【００６５】
図８は、第５の表示制御により表示される画面の具体例を示した説明図である。図８に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生時、検索語句「京都」および「山奥」の各々により検索された画像Ｐ１および画像Ｐ３を画像表示部２８４の異なる領域に同時に表示させる。ここで、検索語句「京都」の重要度が「９」であるのに対し、検索語句「山奥」の重要度は「２」であるので、図８に示したように、検索語句「山奥」を用いて検索された画像Ｐ３の表示サイズが、画像Ｐ１の表示サイズより小さくなるように制御される。
【００６６】
なお、図８においては、複数の画像を画像表示部２８４の異なる領域に表示させる例を説明したが、表示制御部２８０は、複数の画像を画像表示部２８４に透過度を設定して重ねて表示させてもよい。この場合、表示制御部２８０は、重要度の低い検索語句を用いて検索された画像ほど低い透過度を設定してもよい。
【００６７】
以上、表示制御部２８０による画像の表示制御について説明した。なお、表示制御部２８０は、音楽再生時に一度表示した画像は、連続して使用しない、一定間隔を空けてから使用する、または、全く使用しない、のように扱ってもよい。
【００６８】
（第１の実施形態による音楽再生装置の動作）
続いて、図９を参照し、本開示の第１の実施形態による音楽再生装置２０−１の動作を説明する。
【００６９】
図９は、第１の実施形態による音楽再生装置２０−１の動作を示したフローチャートである。図９に示したように、まず、音楽再生装置２０−１の形態素解析部２３２が対象音楽の少なくとも一部分の歌詞を解析する（Ｓ３０４）。また、音楽解析部２３３が、対象音楽のメロディーパートおよびテンポなどを解析する（Ｓ３０８）。
【００７０】
その後、重要度判定部２３６が、形態素解析部２３２および音楽解析部２３３による解析結果などに基づき、歌詞に含まれる各語句の重要度を判定する（Ｓ３１２）。続いて、語句抽出部２３８が、重要度の高い語句を検索語句として抽出する（Ｓ３１６）。
【００７１】
そして、通信部２６４が画像検索サーバ３０と協働して、あるいは検索部２６８が、語句抽出部２３８により抽出された検索語句を用いて画像を取得する（Ｓ３２０）。その後、表示制御部２８０が、再生される音楽の進行に合わせ、通信部２６４または検索部２６８により取得された画像を画像表示部２８４に表示させる（Ｓ３２４）。
【００７２】
以上説明したように、本開示の第１の実施形態によれば、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句を抽出すること、抽出された語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することができる。かかる構成により、ユーザは、聴覚による音楽の知覚に加え、音楽の歌詞に応じた画像を視覚によって知覚できるので、音楽をより深く味わうことが可能となる。
【００７３】
＜２−２．第２の実施形態＞
次に、本開示の第２の実施形態を説明する。本開示の第２の実施形態による音楽再生装置２０−２は、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句、および重要度の高い語句に係る語句を抽出すること、抽出された複数の語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することができる。以下、このような本開示の第２の実施形態による音楽再生装置２０−２について図１０〜図１３を参照して詳細に説明する。
【００７４】
（第２の実施形態による音楽再生装置の構成）
図１０は、本開示の第２の実施形態による音楽再生装置２０−２の構成を示した機能ブロック図である。図１０に示したように、第２の実施形態による音楽再生装置２０−２は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２４０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８０、および画像表示部２８４を備える。音楽再生装置２０−２の上記構成には、第１の実施形態による音楽再生装置２０−１と共通する構成が含まれるので、以下では、第１の実施形態による音楽再生装置２０−１と異なる構成を主に説明する。
【００７５】
解析部２４０は、音楽記憶部２２０に記憶されている音楽、および当該音楽に関して歌詞記憶部２１６に記憶されている歌詞を解析し、画像を検索するための検索語句セットを抽出する。このための構成として、解析部２４０は、歌詞取得部２４１、形態素解析部２４２、音楽解析部２４３、重要度判定部２４６、係り受け解析部２４７および語句抽出部２３８を有する。なお、解析部２４０は、以下の解析を歌詞の１文、１行、または１メロディーパートなどの範囲ごとに実行してもよい。
【００７６】
歌詞取得部２４１は、対象の音楽の歌詞を歌詞記憶部２１６から取得する。なお、対象の音楽は、再生中の音楽、ユーザにより指示された音楽、または音楽記憶部２２０に記憶されている再生前の音楽であってもよい。
【００７７】
形態素解析部２４２は、歌詞取得部２４１により取得された歌詞を形態素解析する。例えば、歌詞取得部２４１により「黒い小さい犬が走ってきた〜」という歌詞が取得された場合、形態素解析部２４２は、当該歌詞を構成する語句（形態素）、および各語句の品詞を図１１の（１）に示すように解析する。
【００７８】
図１１は、第２の実施形態による歌詞の解析結果を示した説明図である。図１１の（１）に示したように、「黒い小さい犬が走ってきた〜」という歌詞は、「黒い（形容詞）、小さい（形容詞）、犬（普通名詞）、が（助詞）、走って（動詞）、きた（助動詞）、〜（記号）」と分解される。
【００７９】
一方、音楽解析部２４３は、音楽中で解析対象の歌詞が出現している部分のメロディーパート（Ａメロ、Ｂメロ、サビなど）、テンポ（リズム）および音量などを解析する。
【００８０】
また、重要度判定部２４６は、形態素解析部２４２により得られた各語句の重要度を判定する。重要度判定部２４６は、例えば第１の実施形態で説明した基準（１）〜（１０）の少なくともいずれかに従って各語句の重要度を判定してもよい。
【００８１】
この場合、重要度判定部２４６は、基準（１）〜（３）に基づき、「黒い小さい犬が走ってきた〜」という歌詞において、「犬」の重要度を、「犬」が普通名詞で、専用辞書に存在せず、出現回数は１回なので、「２」と判定する。
【００８２】
係り受け解析部２４７は、形態素解析部２４２により得られた各語句の係り受けを解析する。係り受け解析により、例えば「黒い小さい犬が走ってきた〜」という歌詞において、図１１の（２）に示したように、「犬」に係る語句が「黒い」および「小さい」であることが分かる。
【００８３】
語句抽出部２４８は、重要度判定部２４６により重要度が最も高い語句、および重要度が最も高い語句に係る語句を抽出する。例えば、「黒い小さい犬が走ってきた〜」という歌詞において、最も重要度の高い語句が「犬」であり、「犬」に係る語句が「黒い」および「小さい」であるので、語句抽出部２４８は、「犬」、「黒い」および「小さい」を検索語句セットとして抽出する。
【００８４】
なお、語句抽出部２４８は、解析対象の歌詞部分の再生時に表示する画像枚数に基づいて抽出する検索語句セットの数を決定してもよい。例えば、解析対象の歌詞部分の再生時に１枚の画像のみを表示する場合には重要度が最も高い語句を含む検索語句セットのみを抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が最も高い語句を含む検索語句セットから、重要度がｎ番目に高い語句を含む検索語句セットまでを抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が高い方から少なくとも１つの語句および当該語句に係る語句の組合せからなる少なくとも１つの検索語句セットを抽出してもよい。この場合、抽出された検索語句セットの各々により、合計がｎ枚になるように画像が検索される。
【００８５】
通信部２６４および検索部２６８は、第１の実施形態と同様に、解析部２４０により抽出された検索語句セットを用いて画像を取得する。具体的には、通信部２６４および検索部２６８は、検索語句セットを構成する複数の語句の論理積により画像を取得してもよい。また、通信部２６４および検索部２６８は、検索優先度を指定できる場合には、検索語句セットのうちの係り先の語句の優先度を高めてもよい。
【００８６】
音楽再生部２７２、音楽出力部２７６、表示制御部２８０および画像表示部２８４は、第１の実施形態と同様に、通信部２６４または検索部２６８により取得された画像が音楽の進行に合わせて表示されるように動作する。例えば、「犬」、「黒い」および「小さい」からなる検索語句セットを用いて画像が取得された場合、画像表示部２８４は図１２に示す画像を表示する。
【００８７】
図１２は、第２の実施形態による画像表示の具体例を示した説明図である。図１２に示したように、表示制御部２８０は、「黒い小さい犬が走ってきた〜」という歌詞が出現している音楽部分の再生時に、「犬」、「黒い」および「小さい」からなる検索語句セットを用いて検索された画像Ｐ４を画像表示部２８４に表示させる。
【００８８】
なお、「犬」の重要度は比較的小さい「２」であり、曲のリズムが穏やかである場合、表示制御部２８０は、第１の実施形態で説明した第１〜第５の表示制御のいずれかにより、画像Ｐ４を比較的小さめの表示サイズでさざ波のように揺らして画像表示部２８４に表示させてもよい。
【００８９】
（第２の実施形態による音楽再生装置の動作）
以上、第２の実施形態による音楽再生装置２０−２の構成を説明した。続いて、図１３を参照し、第２の実施形態による音楽再生装置２０−２の動作を説明する。
【００９０】
図１３は、第２の実施形態による音楽再生装置２０−２の動作を示したフローチャートである。図１３に示したように、まず、音楽再生装置２０−２の形態素解析部２４２が対象音楽の少なくとも一部分の歌詞を解析する（Ｓ４０４）。また、音楽解析部２４３が、対象音楽のメロディーパートおよびテンポなどを解析する（Ｓ４０８）。
【００９１】
その後、重要度判定部２４６が、形態素解析部２４２および音楽解析部２４３による解析結果などに基づき、歌詞に含まれる各語句の重要度を判定する（Ｓ４１２）。また、係り受け解析部２４７が、形態素解析部２４２により得られた各語句の係り受けを解析する（Ｓ４１６）。なお、Ｓ４１６の処理はＳ４１２の処理の前に行われてもよいし、Ｓ４１６の処理とＳ４１２の処理は並列して行われてもよい。
【００９２】
続いて、語句抽出部２４８が、重要度の高い語句、および当該語句に係る語句を検索語句セットとして抽出する（Ｓ４２０）。そして、通信部２６４が画像検索サーバ３０と協働して、あるいは検索部２６８が、語句抽出部２４８により抽出された検索語句セットを用いて画像を取得する（Ｓ４２４）。その後、表示制御部２８０が、再生される音楽の進行に合わせ、通信部２６４または検索部２６８により取得された画像を画像表示部２８４に表示させる（Ｓ４２８）。
【００９３】
以上説明したように、本開示の第２の実施形態による音楽再生装置２０−２は、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句、および重要度の高い語句に係る語句を抽出すること、抽出された複数の語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することが可能である。
【００９４】
＜２−３．第３の実施形態＞
次に、本発明の第３の実施形態を説明する。本開示の第３の実施形態による音楽再生装置２０−３は、音楽の歌詞を解析し、歌詞を構成する主部および述部を解析し、主部から名詞を検索語句として抽出すること、抽出した語句を用いて画像取得を行うこと、取得された画像を音楽の再生時に述部に応じた動きで表示することができる。以下、このような本開示の第３の実施形態による音楽再生装置２０−３について図１４〜図１７を参照して詳細に説明する。
【００９５】
図１４は、本開示の第３の実施形態による音楽再生装置２０−３の構成を示した機能ブロック図である。図１４に示したように、第３の実施形態による音楽再生装置２０−３は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２５０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８２、および画像表示部２８４を備える。音楽再生装置２０−３の上記構成には、第１の実施形態による音楽再生装置２０−１と共通する構成が含まれるので、以下では、第１の実施形態による音楽再生装置２０−１と異なる構成を主に説明する。
【００９６】
解析部２５０は、音楽記憶部２２０に記憶されている音楽、および当該音楽に関して歌詞記憶部２１６に記憶されている歌詞を解析し、画像を検索するための検索語句を抽出する。このための構成として、解析部２５０は、歌詞取得部２５１、形態素解析部２５２、音楽解析部２５３、係り受け解析部２５４、主部述部判定部２５５、重要度判定部２５６、および語句抽出部２５８を有する。なお、解析部２５０は、以下の解析を歌詞の１文、１行、または１メロディーパートなどの範囲ごとに実行してもよい。
【００９７】
歌詞取得部２５１は、対象の音楽の歌詞を歌詞記憶部２１６から取得する。なお、対象の音楽は、再生中の音楽、ユーザにより指示された音楽、または音楽記憶部２２０に記憶されている再生前の音楽であってもよい。
【００９８】
形態素解析部２５２は、歌詞取得部２５１により取得された歌詞を形態素解析する。例えば、歌詞取得部２５１により「太陽が爆発して土星が消えた〜」という歌詞が取得された場合、形態素解析部２５２は、当該歌詞を構成する語句（形態素）、および各語句の品詞を図１５の（１）に示すように解析する。
【００９９】
図１５は、第３の実施形態による歌詞の解析結果を示した説明図である。図１５の（１）に示したように、「太陽が爆発して土星が消えた〜」という歌詞は、「太陽（固有名詞）、が（助詞）、爆発して（動詞）、土星（固有名詞）、が（助詞）、消えた〜（動詞）」と分解される。
【０１００】
一方、音楽解析部２５３は、音楽中で解析対象の歌詞が出現している部分のメロディーパート（Ａメロ、Ｂメロ、サビなど）、テンポ（リズム）および音量などを解析する。
【０１０１】
また、係り受け解析部２５４は、形態素解析部２５２により得られた各語句の係り受けを解析する。係り受け解析により、例えば「太陽が爆発して土星が消えた〜」という歌詞において、図１５の（２）に示したように、「爆発して」に係る語句が「太陽が」であることが分かる。
【０１０２】
主部述部判定部２５５は、歌詞を構成する文ごとに主部と述部を判定する。例えば、主部述部判定部２５５は、単文、重文および複文の主部と述部を以下のように判定する。
・単文 「犬が走る。」 主部＝「犬が」、述部＝「走る。」
・重文 「犬が走り、猫は泣く。」
第１の主部＝「犬が」、第１の述部＝「走り、」、
第２の主部＝「猫は」、第２の述部＝「泣く。」
・複文 「犬が走った後を猫が追う」
第１の主部＝「犬が」、第１の述部＝「走った」、
第２の主部＝「猫が」、第２の述部＝「追う。」
【０１０３】
同様に、主部述部判定部２５５は、「太陽が爆発して土星が消えた〜」という歌詞の主部および述部を以下のように判定する。なお、以下のように主部と述部の組が複数存在する場合、主部と述部の組の各々について以降の処理を行う。
第１の主部＝「太陽が」、第１の述部＝「爆発して」
第２の主部＝「土星が」、第２の述部＝「消えた〜」
【０１０４】
重要度判定部２５６は、主部述部判定部２５５により判定された主部を構成する各語句の重要度を判定する。重要度判定部２５６は、例えば第１の実施形態で説明した基準（１）〜（１０）の少なくともいずれかに従って各語句の重要度を判定してもよい。
【０１０５】
この場合、重要度判定部２５６は、主部を構成する「太陽」の重要度を、「太陽」が固有名詞で、専用辞書に存在せず、出現回数は１回なので、「３」と判定する。
【０１０６】
語句抽出部２５８は、重要度判定部２５６により重要度が最も高い語句を抽出する。例えば、語句抽出部２５８は、「太陽が爆発して土星が消えた〜」という歌詞を構成する第１の主部から「太陽」を検索語句として抽出する。
【０１０７】
通信部２６４および検索部２６８は、第１の実施形態と同様に、解析部２５０により抽出された検索語句を用いて画像を取得する。音楽再生部２７２は、第１の実施形態と同様に解析対象の音楽の再生用データを音楽記憶部２２０から読み出して再生し、音楽出力部２７６は、音楽再生部２７２から供給される再生信号を音声として出力する。
【０１０８】
表示制御部２８２は、通信部２６４または検索部２６８により検索語句に基づいて取得された画像を、主部述部判定部２５５により判定された述部に応じた動きで画像表示部２８４に表示させる。より詳細に説明すると、表示制御部２８２は、述部と動きパターンが対応付けられたテーブルを用意しておき、テーブルにおいて述部と対応付けられている動きパターンに従って画像の表示制御を行ってもよい。例えば、テーブルにおいて、述部「走る」と動きパターン「左右に動く」、述部「爆発する」と動きパターン「破裂させる」が対応付けられている場合、表示制御部２８２は、図１６に示す表示制御を行う。
【０１０９】
図１６は、第３の実施形態による画像表示の具体例を示した説明図である。図１６に示したように、表示制御部２８２は、「太陽が爆発して土星が消えた〜」という歌詞が出現している音楽部分の再生が開始されると、検索語句「太陽」を用いて取得された画像Ｐ５を画像表示部２８４に表示させる。その後、表示制御部２８２は、「爆発して」という述部に対応付けられている動きパターンに従い、画像Ｐ５を破裂させる（断片化して飛び散らせる。）。
【０１１０】
なお、述部が否定形である場合、表示制御部２８２は、画面全体に×を表示するなど、述部が否定形であるが分かるような表示制御を行ってもよい。また、主部述部に加え、目的語を用いて画像検索および表示制御を行うことも可能である。さらに、音楽の雰囲気を歌詞に含まれる語句や音楽解析により判定し、音楽の雰囲気に合った動きを画像に与えることも可能である。
【０１１１】
（第３の実施形態による音楽再生装置の動作）
以上、第３の実施形態による音楽再生装置２０−３の構成を説明した。続いて、図１７を参照し、第３の実施形態による音楽再生装置２０−３の動作を説明する。
【０１１２】
図１７は、第３の実施形態による音楽再生装置２０−３の動作を示したフローチャートである。図１７に示したように、まず、音楽再生装置２０−３の形態素解析部２５２が対象音楽の少なくとも一部分の歌詞を解析する（Ｓ５０４）。そして、係り受け解析部２５４は、形態素解析部２５２により得られた各語句の係り受けを解析する（Ｓ５０８）。また、音楽解析部２５３が、対象音楽のメロディーパートおよびテンポなどを解析する（Ｓ５１２）。
【０１１３】
続いて、主部述部判定部２５５が、歌詞を構成する文ごとに主部と述部を判定し（Ｓ５１６）、重要度判定部２５６が、主部述部判定部２５５により判定された主部を構成する各語句の重要度を判定する（Ｓ５２０）。
【０１１４】
そして、通信部２６４が画像検索サーバ３０と協働して、あるいは検索部２６８が、語句抽出部２５８により抽出された検索語句を用いて画像を取得する（Ｓ５２８）。その後、表示制御部２８０が、再生される音楽の進行に合わせ、通信部２６４または検索部２６８により取得された画像を、述部に応じた動きで画像表示部２８４に表示させる（Ｓ５３２）。
【０１１５】
以上説明したように、本開示の第３の実施形態による音楽再生装置２０−３によれば、音楽の歌詞を解析し、歌詞を構成する主部および述部を解析し、主部から名詞を検索語句として抽出すること、抽出した語句を用いて画像取得を行うこと、取得された画像を音楽の再生時に述部に応じた動きで表示することが可能である。
【０１１６】
＜２−４．第４の実施形態＞
次に、本開示の第４の実施形態を説明する。本開示の第４の実施形態では、音楽に関連する画像データファイルを事前に作成しておき、音楽の再生時に当該画像データファイルも併せて再生する方法を提案する。
【０１１７】
図１８は、本開示の第４の実施形態による音楽再生装置２０−４の構成を示した機能ブロック図である。図１８に示したように、第４の実施形態による音楽再生装置２０−４は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２３０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８０、画像表示部２８４、およびデータ作成部２８８を備える。音楽再生装置２０−４の上記構成には、第１の実施形態による音楽再生装置２０−１と共通する構成が含まれるので、以下では、第１の実施形態による音楽再生装置２０−１と異なる構成を主に説明する。
【０１１８】
通信部２６４は、音楽データの取得後であって、音楽データの再生開始前に、解析部２３０により抽出された検索語句を用いてネットワークから画像取得を行う。ここで、通信部２６４は、歌詞の１文、１行、または１メロディーパートなどの範囲ごとの検索語句を用い、各範囲に対応する画像を取得する。
【０１１９】
データ作成部２８８は、通信部２６４により取得された画像に基づき、各画像が音楽中の対応する範囲の再生タイミングで出現するような動画データ（例えば、ＭＰＥＧのような画像データファイル）を作成する。なお、各画像には、第１〜第３の実施形態で説明した表示制御が施されていてもよい。また、データ作成部２８８は、音楽データを含む動画データを作成してもよい。さらに、データ作成部２８８は、１の音楽に関して複数パターンの動画データを作成してもよい。
【０１２０】
なお、上記では画像データファイルが動画データである例を説明したが、本実施形態はかかる例に限定されない。例えば、画像データファイルは、通信部２６４により取得された画像と、対象の音楽と、当該画像を表示する音楽中のタイミングと、が関連付けられたデータファイルであってもよい。
【０１２１】
上記のようにしてデータ作成部２８８により作成された動画データは、画像記憶部２２４に記憶される。
【０１２２】
その後、音楽の再生時には、音楽に対応する動画データを検索部２６８が画像記憶部２２４から検索し、表示制御部２８０が、検索部２６８により検索された動画データを再生し、再生画面を画像表示部２８４に表示させる。なお、表示制御部２８０は、動画データに音楽データが含まれない場合、音楽再生の速度に応じて動画データの再生速度も変更する。
【０１２３】
画像記憶部２２４から検索される画像データファイルが、画像と、対象の音楽と、当該画像を表示する音楽中のタイミングと、が関連付けられたデータファイルである場合、表示制御部２８０は、当該データファイルに含まれる各画像の表示タイミングに従って画像表示を制御してもよい。
【０１２４】
このように、本開示の第４の実施形態による音楽再生装置２０−４は、画像データファイルを作成するデータ作成装置としての機能も有するので、音楽の再生時に事前に作成した画像データファイルを用いて画像表示を行うことができる。
【０１２５】
（補足）
なお、上記では画像データファイルの作成機能を音楽再生装置２０−４に実装する例を説明したが、画像データファイルの作成機能をネットワーク側のサーバに実装することも可能である。この場合、音楽再生装置２０−４は、サーバから画像データファイルを取得することにより音楽に合わせて画像を表示可能である。
【０１２６】
また、検索部２６８は、音楽の再生時、以前に使用したことのない画像データファイル（動画）を選択的に検索してもよい。また、通信部２６４による画像取得から一定期間の経過後、または、ある音楽について作成済みの画像データファイルが全て表示のために利用された場合などには、画像記憶部２２４の更新のために、通信部２６４が再度画像取得を行ってもよい。また、音楽再生時に画像記憶部２２４に音楽と関連付けられた画像データファイルが記憶されていない場合、通信部２６４は音楽再生時にリアルタイムに画像をネットワークから取得してもよい。
【０１２７】
また、上記では音楽の再生前に画像データファイルを作成する例を説明したが、データ作成部２８８は、音楽の再生時に表示制御部２８０により生成された表示を利用して画像データファイルを作成してもよい。
【０１２８】
＜＜３．むすび＞＞
以上説明したように、本開示の第１〜第４の実施形態によれば、ユーザは、聴覚による音楽の知覚に加え、音楽の歌詞に応じた画像を視覚によって知覚できるので、音楽をより深く味わうことが可能となる。
【０１２９】
なお、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１３０】
例えば、本明細書の音楽再生装置２０の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、音楽再生装置２０の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【０１３１】
また、音楽再生装置２０に内蔵されるＣＰＵ２０１、ＲＯＭ２０２およびＲＡＭ２０３などのハードウェアを、上述した音楽再生装置２０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。
【０１３２】
また、以下のような構成も本開示の技術的範囲に属する。
（１）
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
を備える、音楽再生装置。
（２）
前記解析部は、前記音楽の一部分の歌詞を解析し、
前記表示制御部は、前記音楽の一部分の再生時に、前記音楽の一部分の歌詞から抽出された語句を用いて前記取得部により取得された画像を前記表示装置に表示させる、（１）に記載の音楽再生装置。
（３）
前記解析部は、前記歌詞に含まれる各語句の重要度を判定し、各語句の重要度に基づいて少なくとも１の語句を抽出する、（１）または（２）のいずれか一項に記載の音楽再生装置。
（４）
前記解析部は、前記各語句の品詞、前記音楽の一部分の属するメロディーパート、音量またはリズムの少なくともいずれかに基づいて前記各語句の重要度を判定する、（３）に記載の音楽再生装置。
（５）
前記表示制御部は、前記画像の取得に用いられた語句の重要度に応じて前記画像の表示サイズを制御する、（３）または（４）のいずれか一項に記載の音楽再生装置。
（６）
前記表示制御部は、前記音楽のリズムに応じて前記画像の動きを制御する、（１）〜（５）のいずれか一項に記載の音楽再生装置。
（７）
前記取得部は、前記解析部により抽出された少なくとも１の語句を用いて１または２以上の画像を取得し、
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記音楽の一部分の再生時に前記表示装置に表示させる、（１）〜（６）のいずれか一項に記載の音楽再生装置。
（８）
前記取得部は、前記音楽の一部分の再生に要する時間に応じた枚数の画像を取得する、（１）〜（７）のいずれか一項に記載の音楽再生装置。
（９）
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を順次に前記表示装置に表示させる、（８）に記載の音楽再生装置。
（１０）
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記表示装置の表示画面上の異なる領域に同時に表示させる、（８）に記載の音楽再生装置。
（１１）
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を、前記表示装置の表示画面上で重なる領域に透過度を設定して表示させる、（８）に記載の音楽再生装置。
（１２）
前記表示制御部は、前記１または２以上の画像の各々の透過度を、前記１または２以上の画像の取得に用いられた語句の重要度に応じて制御する、（１１）に記載の音楽再生装置。
（１３）
前記解析部は、各語句の重要度に基づいて１の語句を抽出し、さらに、抽出した前記１の語句に係る語句を抽出する、（３）〜（１２）のいずれか一項に記載の音楽再生装置。
（１４）
前記取得部は、前記解析部により抽出された複数の語句の論理積により画像検索を行う、（１３）に記載の音楽再生装置。
（１５）
前記解析部は、前記音楽の一部分の歌詞の主部および述部を解析し、前記主部から語句を抽出し、
前記表示制御部は、前記主部から抽出された語句を用いて前記取得部により取得された画像を、前記述部に応じた動きで前記表示装置に表示させる、（３）に記載の音楽再生装置。
（１６）
前記音楽再生装置は、
前記取得部によりネットワークから取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
前記データ作成部により作成された前記画像データファイルを記憶する記憶部と、
をさらに備え、
前記取得部は、前記音楽の再生時に、前記記憶部に前記音楽と関連付けて記憶されている前記画像データファイルを取得する、（１）〜（１５）のいずれか一項に記載の音楽再生装置。
（１７）
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出することと、
前記抽出された語句を用いて画像取得を行うことと、
前記音楽の再生時に、前記取得された画像を表示装置に表示させることと、
を含む、音楽再生方法。
（１８）
コンピュータを、
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
として機能させるための、プログラム。
（１９）
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いてネットワークから画像取得を行う取得部と、
前記取得部により取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
を備える、データ作成装置。
【符号の説明】
【０１３３】
１ 音楽再生システム
２０ 音楽再生装置
３０ 画像検索サーバ
４０ 画像サーバ
２１６ 歌詞記憶部
２２０ 音楽記憶部
２２４ 画像記憶部
２３０、２４０、２５０ 解析部
２３１、２４１、２５１ 歌詞取得部
２３２、２４２、２５２ 形態素解析部
２３３、２４３、２５３ 音楽解析部
２３６、２４６、２５６ 重要度判定部
２３８、２４８、２５８ 語句抽出部
２４７、２５４ 係り受け解析部
２５５ 主部述部判定部
２６４ 通信部
２６８ 検索部
２７２ 音楽再生部
２７６ 音楽出力部
２８０、２８２ 表示制御部
２８４ 画像表示部
２８８ データ作成部
【技術分野】
【０００１】
本開示は、音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置に関する。
【背景技術】
【０００２】
従来、音楽再生装置の多くは音楽の再生に特化していたが、近日では、以下のような表示機能を有する音楽再生装置が普及しつつある。
（１）ビジュアライザー機能
再生される音楽のリズムに応じた動きで所定のデザインパターンを表示する機能。
（２）歌詞表示機能
音楽再生と併せて音楽の歌詞を表示する機能。
【０００３】
また、特許文献１には、再生される音楽の雰囲気（楽器、旋法）に適合する画像を表示させる技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−１８１６４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、上記のビジュアライザー機能では、表示されるデザインパターンおよびその動きは音楽の雰囲気に合ってない場合があり、ユーザの目も疲れる。また、歌詞表示機能は、ユーザにとって利便性が高いが、面白みに欠ける面がある。また、特許文献１に記載の技術のように音楽の雰囲気に適合する画像を表示することも効果的であるが、音楽を特徴付ける要素は楽器や旋法などの音楽の雰囲気だけではない。
【０００６】
そこで、本開示では、音楽の再生時に音楽の歌詞に応じた画像を表示装置に表示させることが可能な、新規かつ改良された音楽再生装置、音楽再生方法、プログラム、およびデータ作成装置を提案する。
【課題を解決するための手段】
【０００７】
本開示によれば、音楽を再生する再生部と、前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いて画像取得を行う取得部と、前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、を備える音楽再生装置が提供される。
【０００８】
また、本開示によれば、音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出することと、前記抽出された語句を用いて画像取得を行うことと、前記音楽の再生時に、前記取得された画像を表示装置に表示させることと、を含む音楽再生方法が提供される。
【０００９】
また、本開示によれば、コンピュータを、音楽を再生する再生部と、前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いて画像取得を行う取得部と、前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、として機能させるためのプログラムが提供される。
【００１０】
また、本開示によれば、音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、前記解析部により抽出された語句を用いてネットワークから画像取得を行う取得部と、前記取得部により取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、を備えるデータ作成装置が提供される。
【発明の効果】
【００１１】
以上説明したように本開示によれば、音楽の再生時に音楽の歌詞に応じた画像を表示装置に表示させることができる。
【図面の簡単な説明】
【００１２】
【図１】本開示の実施形態による音楽再生システムの構成を示した説明図である。
【図２】本開示による音楽再生装置のハードウェア構成を示した説明図である。
【図３】本開示の第１の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【図４】第１の表示制御により表示される画面の具体例を示した説明図である。
【図５】第２の表示制御により表示される画面の具体例を示した説明図である。
【図６】第３の表示制御により表示される画面の具体例を示した説明図である。
【図７】第４の表示制御により表示される画面の具体例を示した説明図である。
【図８】第５の表示制御により表示される画面の具体例を示した説明図である。
【図９】第１の実施形態による音楽再生装置の動作を示したフローチャートである。
【図１０】本開示の第２の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【図１１】第２の実施形態による歌詞の解析結果を示した説明図である。
【図１２】第２の実施形態による画像表示の具体例を示した説明図である。
【図１３】第２の実施形態による音楽再生装置の動作を示したフローチャートである。
【図１４】本開示の第３の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【図１５】第３の実施形態による歌詞の解析結果を示した説明図である。
【図１６】第３の実施形態による画像表示の具体例を示した説明図である。
【図１７】第３の実施形態による音楽再生装置の動作を示したフローチャートである。
【図１８】本開示の第４の実施形態による音楽再生装置の構成を示した機能ブロック図である。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。また、本明細書及び図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する場合もある。ただし、実質的に同一の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
【００１４】
また、以下に示す項目順序に従って当該「発明を実施するための形態」を説明する。
１．音楽再生システムの構成
２．各実施形態の説明
２−１．第１の実施形態
２−２．第２の実施形態
２−３．第３の実施形態
２−４．第４の実施形態
３．むすび
【００１５】
＜＜１．音楽再生システムの構成＞＞
本開示による技術は、一例として「２−１．第１の実施形態」〜「２−４．第４の実施形態」において詳細に説明するように、多様な形態で実施され得る。また、各実施形態による音楽再生装置２０は、
Ａ．音楽を再生する再生部（音楽再生部２７２）と、
Ｂ．音楽の歌詞を解析し、歌詞に含まれる語句を抽出する解析部（２３０）と、
Ｃ．解析部により抽出された語句を用いて画像取得を行う取得部（通信部２６４、検索部２６８）と、
Ｄ．音楽の再生時に、取得部により取得された画像を表示装置（画像表示部２８４）に表示させる表示制御部（２８０）と、を備える。
【００１６】
以下では、まず、このような各実施形態において共通する基本構成について図１および図２を参照して説明する。
【００１７】
図１は、本開示の実施形態による音楽再生システム１の構成を示した説明図である。図１に示したように、本開示の実施形態による音楽再生システム１は、通信網１２、音楽再生装置２０、画像検索サーバ３０、および画像サーバ４０Ａ、４０Ｂ・・・を備える。
【００１８】
通信網１２は、通信網１２に接続されている機器から送信される情報の有線、または無線の伝送路である。例えば、通信網１２は、インターネット、電話回線網、衛星通信網などの公衆回線網や、Ｅｔｈｅｒｎｅｔ（登録商標）を含む各種のＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）、ＷＡＮ（Ｗｉｄｅ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを含んでもよい。また、通信網１２は、ＩＰ−ＶＰＮ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ−Ｖｉｒｔｕａｌ Ｐｒｉｖａｔｅ Ｎｅｔｗｏｒｋ）などの専用回線網を含んでもよい。本開示においては、音楽再生装置２０、画像検索サーバ３０、および画像サーバ４０Ａ、４０Ｂ・・・が通信網１２を介して接続される。
【００１９】
画像サーバ４０は、画像を語句と関連付けて記憶しているネットワークノードである。なお、本開示においては画像が主に静止画である例を説明するが、画像は動画であってもよい。
【００２０】
画像検索サーバ３０は、音楽再生装置２０からの要求に従って画像サーバ４０から画像検索を行い、検索結果を音楽再生装置２０に送信する。より具体的に説明すると、画像検索サーバ３０は、音楽再生装置２０から少なくとも１つの検索語句を受信すると、受信した検索語句に合致する画像を画像サーバ４０から検索し、検索結果を音楽再生装置２０に送信する。
【００２１】
音楽再生装置２０は、音楽の再生機能を有する。また、本開示による音楽再生装置２０は、音楽の歌詞に含まれる語句を用いた検索により画像を取得し、取得した画像を音楽の再生時に表示することができる。この音楽再生装置２０については「２．各実施形態の説明」において詳細に説明する。
【００２２】
なお、図１においては音楽再生装置２０の一例として携帯電話（スマートフォン）を示しているが、音楽再生装置２０は携帯電話に限定されない。例えば、音楽再生装置２０は、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）、家庭用映像処理装置（ＤＶＤレコーダ、ビデオデッキなど）、ＰＤＡ（Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔｓ）、家庭用ゲーム機器、家電機器、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）、携帯用音楽再生装置、携帯用映像処理装置、携帯用ゲーム機器、またはカラオケ装置などの情報処理装置であってもよい。
【００２３】
（音楽再生装置のハードウェア構成）
ここで、図２を参照し、本開示による音楽再生装置２０のハードウェア構成を説明する。図２は、本開示による音楽再生装置２０のハードウェア構成を示した説明図である。図２に示したように、音楽再生装置２０は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３と、ホストバス２０４と、を備える。また、音楽再生装置２０は、ブリッジ２０５と、外部バス２０６と、インタフェース２０７と、入力装置２０８と、出力装置２１０と、ストレージ装置（ＨＤＤ）２１１と、ドライブ２１２と、通信装置２１５とを備える。
【００２４】
ＣＰＵ２０１は、演算処理装置および制御装置として機能し、各種プログラムに従って音楽再生装置２０内の動作全般を制御する。また、ＣＰＵ２０１は、マイクロプロセッサであってもよい。ＲＯＭ２０２は、ＣＰＵ２０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ２０３は、ＣＰＵ２０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはＣＰＵバスなどから構成されるホストバス２０４により相互に接続されている。
【００２５】
ホストバス２０４は、ブリッジ２０５を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ Ｃｏｍｐｏｎｅｎｔ Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス２０６に接続されている。なお、必ずしもホストバス２０４、ブリッジ２０５および外部バス２０６を分離構成する必要はなく、一のバスにこれらの機能を実装してもよい。
【００２６】
入力装置２０８は、マウス、キーボード、タッチパネル、ボタン、マイクロフォン、スイッチおよびレバーなどユーザが情報を入力するための入力手段と、ユーザによる入力に基づいて入力信号を生成し、ＣＰＵ２０１に出力する入力制御回路などから構成されている。音楽再生装置２０のユーザは、該入力装置２０８を操作することにより、音楽再生装置２０に対して各種のデータを入力したり処理動作を指示したりすることができる。
【００２７】
出力装置２１０は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）ディスプレイ装置、液晶ディスプレイ（ＬＣＤ）装置、ＯＬＥＤ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）装置およびランプなどの表示装置を含む。さらに、出力装置２１０は、スピーカおよびヘッドホンなどの音声出力装置を含む。出力装置２１０は、例えば、再生されたコンテンツを出力する。具体的には、表示装置は再生された映像データ等の各種情報をテキストまたはイメージで表示する。一方、音声出力装置は、再生された音声データ等を音声に変換して出力する。
【００２８】
ストレージ装置２１１は、本実施形態にかかる音楽再生装置２０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置２１１は、記憶媒体、記憶媒体にデータを記録する記録装置、記憶媒体からデータを読み出す読出し装置および記憶媒体に記録されたデータを削除する削除装置などを含んでもよい。ストレージ装置２１１は、例えば、ＨＤＤ（Ｈａｒｄ Ｄｉｓｋ Ｄｒｉｖｅ）で構成される。このストレージ装置２１１は、ハードディスクを駆動し、ＣＰＵ２０１が実行するプログラムや各種データを格納する。
【００２９】
ドライブ２１２は、記憶媒体用リーダライタであり、音楽再生装置２０に内蔵、あるいは外付けされる。ドライブ２１２は、装着されている磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等のリムーバブル記憶媒体２４に記録されている情報を読み出して、ＲＡＭ２０３に出力する。また、ドライブ２１２は、リムーバブル記憶媒体２４に情報を書き込むこともできる。
【００３０】
通信装置２１５は、例えば、通信網１２に接続するための通信デバイス等で構成された通信インタフェースである。また、通信装置２１５は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であっても、ＬＴＥ（Ｌｏｎｇ Ｔｅｒｍ Ｅｖｏｌｕｔｉｏｎ）対応通信装置であっても、有線による通信を行うワイヤー通信装置であってもよい。
【００３１】
＜＜２．各実施形態の説明＞＞
以上、本開示による音楽再生システム１の構成を説明した。続いて、本開示の各実施形態について順次詳細に説明する。
【００３２】
＜２−１．第１の実施形態＞
本開示の第１の実施形態による音楽再生装置２０−１は、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句を抽出すること、抽出された語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することができる。かかる構成により、ユーザは、聴覚による音楽の知覚に加え、音楽の歌詞に応じた画像を視覚によって知覚できるので、音楽をより深く味わうことが可能となる。以下、このような本開示の第１の実施形態による音楽再生装置２０−１について図３〜図９を参照して詳細に説明する。
【００３３】
（第１の実施形態による音楽再生装置の構成）
図３は、本開示の第１の実施形態による音楽再生装置２０−１の構成を示した機能ブロック図である。図３に示したように、第１の実施形態による音楽再生装置２０−１は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２３０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８０、および画像表示部２８４を備える。
【００３４】
歌詞記憶部２１６は、音楽記憶部２２０に記憶されている音楽の歌詞を記憶している。音楽記憶部２２０は、音楽の再生用のデータを記憶している。画像記憶部２２４は、画像を語句と関連付けて記憶している。
【００３５】
このような歌詞記憶部２１６、音楽記憶部２２０、および画像記憶部２２４は、不揮発性メモリ、磁気ディスク、光ディスク、およびＭＯ（Ｍａｇｎｅｔｏ Ｏｐｔｉｃａｌ）ディスクなどの記憶媒体であってもよい。不揮発性メモリとしては、例えば、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ Ｐｒｏｇｒａｍｍａｂｌｅ ＲＯＭ）があげられる。また、磁気ディスクとしては、ハードディスクおよび円盤型磁性体ディスクなどがあげられる。また、光ディスクとしては、ＣＤ（Ｃｏｍｐａｃｔ Ｄｉｓｃ）、ＤＶＤ−Ｒ（Ｄｉｇｉｔａｌ Ｖｅｒｓａｔｉｌｅ Ｄｉｓｃ Ｒｅｃｏｒｄａｂｌｅ）およびＢＤ（Ｂｌｕ−Ｒａｙ Ｄｉｓｃ（登録商標））などがあげられる。
【００３６】
解析部２３０は、音楽記憶部２２０に記憶されている音楽、および当該音楽に関して歌詞記憶部２１６に記憶されている歌詞を解析し、画像を検索するための検索語句を抽出する。このための構成として、解析部２３０は、歌詞取得部２３１、形態素解析部２３２、音楽解析部２３３、重要度判定部２３６、および語句抽出部２３８を有する。なお、解析部２３０は、以下の解析を歌詞の１文、１行、または１メロディーパートなどの範囲ごとに実行してもよい。
【００３７】
歌詞取得部２３１は、対象の音楽の歌詞を歌詞記憶部２１６から取得する。なお、対象の音楽は、再生中の音楽、ユーザにより指示された音楽、または音楽記憶部２２０に記憶されている再生前の音楽であってもよい。
【００３８】
形態素解析部２３２は、歌詞取得部２３１により取得された歌詞を形態素解析する。例えば、歌詞取得部２３１により「京都の山奥で生まれたよ〜」という歌詞が取得された場合、形態素解析部２３２は、当該歌詞を構成する語句（形態素）、および各語句の品詞を以下のように解析する。
「京都（固有名詞）│の（助詞）│山奥（普通名詞）│
で（助詞）│生まれたよ〜（動詞）」
【００３９】
一方、音楽解析部２３３は、音楽中で解析対象の歌詞が出現している部分のメロディーパート（Ａメロ、Ｂメロ、サビなど）、テンポ（リズム）および音量などを解析する。
【００４０】
また、重要度判定部２３６は、形態素解析部２３２により得られた各語句の重要度を判定する。例えば、重要度判定部２３６は、以下の基準のうちの少なくともいずれかに従って各語句の重要度を判定する。
【００４１】
（１）品詞に基づく判定
重要度判定部２３６は、各語句の品詞に基づいて重要度を判定してもよい。
例：固有名詞→３倍、普通名詞→２倍、その他名詞、１倍
（２）専用辞書／テーブルに基づく判定
重要度判定部２３６は、専用辞書／テーブルに含まれる語句の重要度を高くしてもよい。
例：人物辞書、地名辞書、グルメ辞書に存在する語句の重要度は３倍
（３）出現回数に基づく判定
重要度判定部２３６は、解析対象の歌詞部分における出現回数に基づいて重要度を判定してもよい。
例：出現回数が２回なら２倍
（４）アルバム名や曲名に基づく判定
重要度判定部２３６は、対象の音楽のアルバム名や曲名に意味的に近い語句の重要度を高くしてもよい。
例：アルバム名が「ｓｕｍｍａｒ」である場合、「海」、「太陽」などを２倍
（５）ジャンルに基づく判定
重要度判定部２３６は、対象の音楽のジャンルに意味的に近い語句の重要度を高くしてもよい。
例：ジャンルが「ヘビメタ」である場合、「叫び」を２倍
（６）再生日時、再生場所に基づく判定
重要度判定部２３６は、再生日時、再生場所に基づいて語句の重要度を判定してもよい。なお、再生場所は、例えばＧＰＳのようの位置推定技術により推定可能である。
例：再生日時が「午前」である場合、「朝」、「夜明け」を２倍
再生場所が「京都」である場合、「京都」を２倍
（７）ユーザの嗜好情報に基づく判定
重要度判定部２３６は、ユーザの嗜好情報に基づいて語句の重要度を判定してもよい。なお、ユーザの嗜好情報は、ユーザによる音楽の再生履歴や、通信網１２からの情報検索に用いた語句の履歴などから取得可能である。
例：ユーザの嗜好が「バイク」である場合、「エンジン」、「ブレーキ」を２倍
（８）メロディーパートに基づく判定
重要度判定部２３６は、解析対象の歌詞部分のメロディーパートに応じて重要を調整してもよい。
例：サビ＞Ｂメロ＞Ａメロ、という順で重要度が高くなるように調整
（９）テンポに基づく判定
重要度判定部２３６は、解析対象の歌詞部分のテンポに応じて重要度を調整してもよい。
例：テンポの速い箇所である場合には重要度を高くする。
（１０）音量に基づく判定
重要度判定部２３６は、解析対象の歌詞部分の音量に応じて重要度を調整してもよい。
例：音量の大きい箇所である場合には重要度を高くする。
【００４２】
重要度判定部２３６は、例えば上記基準（１）〜（３）に基づき、「京都の山奥で生まれたよ〜」という歌詞において、「京都」の重要度を、「京都」が固有名詞で、地名辞書に存在し、出現回数は１回なので、「９」と判定する。一方、重要度判定部２３６は、「山奥」の重要度を、「山奥」が普通名詞で、専用辞書に存在せず、出現回数が１回なので、「２」と判定する。
【００４３】
語句抽出部２３８は、重要度判定部２３６により判定された各語句の重要度に基づき、歌詞に含まれる語句から検索語句を抽出する。例えば、語句抽出部２３８は、重要度が最も高い「京都」を検索語句として抽出してもよいし、重要度が最も高い「京都」および次に重要度が高い「山奥」の双方を抽出してもよい。
【００４４】
なお、語句抽出部２３８は、解析対象の歌詞部分の再生時に表示する画像枚数に基づいて抽出する語句の数を決定してもよい。例えば、解析対象の歌詞部分の再生時に１枚の画像のみを表示する場合には重要度が最も高い語句のみを検索語句として抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が最も高い語句から、重要度がｎ番目に高い語句までを検索語句として抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が高い方から少なくとも１つの語句を検索語句として抽出してもよい。この場合、抽出された検索語句の各々により、合計がｎ枚になるように画像が検索される。
【００４５】
通信部２６４および検索部２６８は、語句抽出部２３８により抽出された検索語句に基づいて画像を取得する取得部としての機能を有する。なお、通信部２６４および検索部２６８による画像の取得枚数は、ユーザが各画像十分に視認できるように、解析対象の歌詞部分の再生時間に応じて決定されてもよい。例えば、解析対象の歌詞部分の再生時間が長いほど取得枚数が大きな数に決定される。
【００４６】
通信部２６４は、通信網１２と通信するためのインタフェースである。通信部２６４は、例えば、解析部２３０により抽出された検索語句（例えば、「京都」）を検索要求として画像検索サーバ３０に送信し、画像検索サーバ３０により検索語句を用いて検索された画像を画像検索サーバ３０から受信する。
【００４７】
検索部２６８は、音楽再生装置２０−１が有する画像記憶部２２４から、解析部２３０により抽出された検索語句に合致する画像を検索する。なお、画像取得は通信部２６４または検索部２６８のいずれかによって行われてもよいし、双方によって行われてもよい。また、通信部２６４は、音楽の再生開始前に画像取得を行い、画像記憶部２２４は、通信部２６４により取得された画像を音楽と関連付けて記憶しておいてもよい。この場合、検索部２６８が、音楽の再生時に当該音楽に関連付けられた画像を画像記憶部２２４から取得することができる。なお、通信部２６４による画像取得から一定期間の経過後、または、ある音楽について取得済みの画像が全て表示のために利用された場合などには、画像記憶部２２４の画像更新のために、通信部２６４が再度画像取得を行ってもよい。また、音楽再生時に画像記憶部２２４に音楽と関連付けられた画像が記憶されていない場合、通信部２６４は音楽再生時にリアルタイムに画像をネットワークから取得してもよい。
【００４８】
音楽再生部２７２は、解析対象の音楽の再生用データを音楽記憶部２２０から読み出して再生する。例えば、音楽再生部２７２は、再生用データ復号およびＤ／Ａ変換などを行い、再生信号を音楽出力部２７６に供給する。
【００４９】
音楽出力部２７６は、音楽再生部２７２から供給される再生信号を音声として出力する。この音楽出力部２７６は、スピーカ、イヤホンおよびヘッドホンなどの外付けの音楽出力装置であってもよい。
【００５０】
表示制御部２８０は、通信部２６４または検索部２６８により検索語句に基づいて取得された画像を、音楽再生部２７２により再生される音楽の進行に合わせて画像表示部２８４に表示させる。ここで、表示制御部２８０は、検索語句に基づいて取得された画像の表示制御を以下に例示するように多様な形態で行うことが可能である。なお、以下で説明する各表示制御は適宜組み合わせて実行することも可能である。
【００５１】
−−第１の表示制御−−
表示制御部２８０は、解析部２３０により１の検索語句が抽出され、通信部２６４または検索部２６８により１の検索語句を用いて１枚の画像が検索された場合、検索された画像を検索語句が出現する音楽部分の再生時に渡って画像表示部２８４に表示させてもよい。例えば、解析部２３０により検索語句として「京都」が抽出され、通信部２６４または検索部２６８により検索語句「京都」に基づいて１枚の画像が検索された場合、表示制御部２８０は、図４に示す画面を画像表示部２８４に表示させる。
【００５２】
図４は、第１の表示制御により表示される画面の具体例を示した説明図である。図４に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生時に、検索語句「京都」に基づいて検索された画像Ｐ１を画像表示部２８４に歌詞と併せて表示する。なお、表示制御部２８０は、歌詞は画像表示部２８４に表示させなくてもよい。
【００５３】
より詳細に説明すると、表示制御部２８０は、検索語句の重要度に応じて画像の表示サイズを制御してもよい。例えば、表示制御部２８０は、検索語句の重要度が高いほど画像の表示サイズを大きくしてもよい。ここで、検索語句の重要度はメロディーパート、テンポ、および音量などにも依存するので、結果、メロディーパート、テンポ、および音量などによって画像の表示サイズが制御される。
【００５４】
なお、表示制御部２８０は、検索語句を用いて取得された画像を、検索語句の出現する音楽部分と異なる箇所において画像表示部２８４に表示させてもよい。例えば、音楽中のサビ部分の歌詞は作詞家が音楽中で最も伝えたい代表箇所と捉えることができるので、表示制御部２８０は、その音楽全体の再生時に、サビ部分に含まれる検索語句を用いて取得された画像を画像表示部２８４に表示させてもよい。また、表示制御部２８０は、伏線的な効果を得るために、あるメロディーパートの再生時に、次のメロディーパートに含まれる検索語句を用いて取得された画像を画像表示部２８４に表示させてもよい。
【００５５】
−−第２の表示制御−−
表示制御部２８０は、解析部２３０により１の検索語句が抽出され、通信部２６４または検索部２６８により１の検索語句を用いて複数枚の画像が検索された場合、検索された複数枚の画像を検索語句が出現する音楽部分の再生時に順次に画像表示部２８４に表示させてもよい。例えば、解析部２３０により検索語句として「京都」が抽出され、通信部２６４または検索部２６８により検索語句「京都」に基づいて２枚の画像が検索された場合、表示制御部２８０は、図５に示す画面を画像表示部２８４に表示させる。
【００５６】
図５は、第２の表示制御により表示される画面の具体例を示した説明図である。図５に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が開始されると、まず、検索語句「京都」に基づいて検索された一方の画像Ｐ１を画像表示部２８４に表示させる。そして、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が進行すると、表示制御部２８０は、検索語句「京都」に基づいて検索された他方の画像Ｐ２に画像表示部２８４の表示を切り替える。
【００５７】
なお、表示制御部２８０は、フェードイン、フェードアウトにより画像の切替えを行ってもよい。例えば、表示制御部２８０は、画像Ｐ１から画像Ｐ２への切替え時、画像Ｐ１のαブレンド値（透過度）を徐々に小さくし、画像Ｐ２のαブレンド値を徐々に大きくしてもよい。
【００５８】
−−第３の表示制御−−
表示制御部２８０は、解析部２３０により複数の検索語句が抽出され、通信部２６４または検索部２６８により複数の検索語句の各々を用いて画像が検索された場合、各検索語句を用いて検索された画像を、対応する音楽部分の再生時に順次に画像表示部２８４に表示させてもよい。例えば、解析部２３０により検索語句として「京都」および「山奥」が抽出され、通信部２６４または検索部２６８により検索語句「京都」および「山奥」の各々により画像が１枚ずつ検索された場合、表示制御部２８０は、図６に示す画面を画像表示部２８４に表示させる。
【００５９】
図６は、第３の表示制御により表示される画面の具体例を示した説明図である。図６に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が開始されると、検索語句「京都」を用いて検索された画像Ｐ１を画像表示部２８４に表示させる。そして、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生が進行すると、表示制御部２８０は、検索語句「山奥」を用いて検索された画像Ｐ３に画像表示部２８４の表示を切り替える。
【００６０】
ここで、検索語句「京都」の重要度が「９」であるのに対し、検索語句「山奥」の重要度は「２」であるので、図６に示したように、検索語句「山奥」を用いて検索された画像Ｐ３の表示サイズが、画像Ｐ１の表示サイズより小さくなるように制御される。
【００６１】
−−第４の表示制御−−
表示制御部２８０は、通信部２６４または検索部２６８により検索された画像に、音楽のビートやリズムに応じた動き（画像の揺れ、伸縮、回転など）を与えてもよい。例えば、解析部２３０により検索語句として「京都」が抽出され、通信部２６４または検索部２６８により検索語句「京都」に基づいて画像が検索された場合、表示制御部２８０は、図７に示す表示制御を行う。
【００６２】
図７は、第４の表示制御により表示される画面の具体例を示した説明図である。図７に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生時、検索語句「京都」に基づいて検索された画像Ｐ１を画面上の上下に揺らす。
【００６３】
ここで、表示制御部２８０は、音楽のリズムに対応する激しさで画像Ｐ１を揺らしてもよい。このような第４の表示制御により、音楽の雰囲気を画像Ｐ１の表示態様に反映させることが可能である。
【００６４】
−−第５の表示制御−−
表示制御部２８０は、通信部２６４または検索部２６８により複数枚の画像が検索された場合、検索語句が出現する音楽部分の再生時に、複数枚の画像を画像表示部２８４の異なる領域に同時に表示させてもよい。例えば、解析部２３０により検索語句として「京都」および「山奥」が抽出され、通信部２６４または検索部２６８により検索語句「京都」および「山奥」の各々により画像が１枚ずつ検索された場合、表示制御部２８０は、図８に示す画面を画像表示部２８４に表示させる。
【００６５】
図８は、第５の表示制御により表示される画面の具体例を示した説明図である。図８に示したように、表示制御部２８０は、「京都の山奥で生まれたよ〜」という歌詞が出現している音楽部分の再生時、検索語句「京都」および「山奥」の各々により検索された画像Ｐ１および画像Ｐ３を画像表示部２８４の異なる領域に同時に表示させる。ここで、検索語句「京都」の重要度が「９」であるのに対し、検索語句「山奥」の重要度は「２」であるので、図８に示したように、検索語句「山奥」を用いて検索された画像Ｐ３の表示サイズが、画像Ｐ１の表示サイズより小さくなるように制御される。
【００６６】
なお、図８においては、複数の画像を画像表示部２８４の異なる領域に表示させる例を説明したが、表示制御部２８０は、複数の画像を画像表示部２８４に透過度を設定して重ねて表示させてもよい。この場合、表示制御部２８０は、重要度の低い検索語句を用いて検索された画像ほど低い透過度を設定してもよい。
【００６７】
以上、表示制御部２８０による画像の表示制御について説明した。なお、表示制御部２８０は、音楽再生時に一度表示した画像は、連続して使用しない、一定間隔を空けてから使用する、または、全く使用しない、のように扱ってもよい。
【００６８】
（第１の実施形態による音楽再生装置の動作）
続いて、図９を参照し、本開示の第１の実施形態による音楽再生装置２０−１の動作を説明する。
【００６９】
図９は、第１の実施形態による音楽再生装置２０−１の動作を示したフローチャートである。図９に示したように、まず、音楽再生装置２０−１の形態素解析部２３２が対象音楽の少なくとも一部分の歌詞を解析する（Ｓ３０４）。また、音楽解析部２３３が、対象音楽のメロディーパートおよびテンポなどを解析する（Ｓ３０８）。
【００７０】
その後、重要度判定部２３６が、形態素解析部２３２および音楽解析部２３３による解析結果などに基づき、歌詞に含まれる各語句の重要度を判定する（Ｓ３１２）。続いて、語句抽出部２３８が、重要度の高い語句を検索語句として抽出する（Ｓ３１６）。
【００７１】
そして、通信部２６４が画像検索サーバ３０と協働して、あるいは検索部２６８が、語句抽出部２３８により抽出された検索語句を用いて画像を取得する（Ｓ３２０）。その後、表示制御部２８０が、再生される音楽の進行に合わせ、通信部２６４または検索部２６８により取得された画像を画像表示部２８４に表示させる（Ｓ３２４）。
【００７２】
以上説明したように、本開示の第１の実施形態によれば、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句を抽出すること、抽出された語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することができる。かかる構成により、ユーザは、聴覚による音楽の知覚に加え、音楽の歌詞に応じた画像を視覚によって知覚できるので、音楽をより深く味わうことが可能となる。
【００７３】
＜２−２．第２の実施形態＞
次に、本開示の第２の実施形態を説明する。本開示の第２の実施形態による音楽再生装置２０−２は、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句、および重要度の高い語句に係る語句を抽出すること、抽出された複数の語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することができる。以下、このような本開示の第２の実施形態による音楽再生装置２０−２について図１０〜図１３を参照して詳細に説明する。
【００７４】
（第２の実施形態による音楽再生装置の構成）
図１０は、本開示の第２の実施形態による音楽再生装置２０−２の構成を示した機能ブロック図である。図１０に示したように、第２の実施形態による音楽再生装置２０−２は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２４０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８０、および画像表示部２８４を備える。音楽再生装置２０−２の上記構成には、第１の実施形態による音楽再生装置２０−１と共通する構成が含まれるので、以下では、第１の実施形態による音楽再生装置２０−１と異なる構成を主に説明する。
【００７５】
解析部２４０は、音楽記憶部２２０に記憶されている音楽、および当該音楽に関して歌詞記憶部２１６に記憶されている歌詞を解析し、画像を検索するための検索語句セットを抽出する。このための構成として、解析部２４０は、歌詞取得部２４１、形態素解析部２４２、音楽解析部２４３、重要度判定部２４６、係り受け解析部２４７および語句抽出部２３８を有する。なお、解析部２４０は、以下の解析を歌詞の１文、１行、または１メロディーパートなどの範囲ごとに実行してもよい。
【００７６】
歌詞取得部２４１は、対象の音楽の歌詞を歌詞記憶部２１６から取得する。なお、対象の音楽は、再生中の音楽、ユーザにより指示された音楽、または音楽記憶部２２０に記憶されている再生前の音楽であってもよい。
【００７７】
形態素解析部２４２は、歌詞取得部２４１により取得された歌詞を形態素解析する。例えば、歌詞取得部２４１により「黒い小さい犬が走ってきた〜」という歌詞が取得された場合、形態素解析部２４２は、当該歌詞を構成する語句（形態素）、および各語句の品詞を図１１の（１）に示すように解析する。
【００７８】
図１１は、第２の実施形態による歌詞の解析結果を示した説明図である。図１１の（１）に示したように、「黒い小さい犬が走ってきた〜」という歌詞は、「黒い（形容詞）、小さい（形容詞）、犬（普通名詞）、が（助詞）、走って（動詞）、きた（助動詞）、〜（記号）」と分解される。
【００７９】
一方、音楽解析部２４３は、音楽中で解析対象の歌詞が出現している部分のメロディーパート（Ａメロ、Ｂメロ、サビなど）、テンポ（リズム）および音量などを解析する。
【００８０】
また、重要度判定部２４６は、形態素解析部２４２により得られた各語句の重要度を判定する。重要度判定部２４６は、例えば第１の実施形態で説明した基準（１）〜（１０）の少なくともいずれかに従って各語句の重要度を判定してもよい。
【００８１】
この場合、重要度判定部２４６は、基準（１）〜（３）に基づき、「黒い小さい犬が走ってきた〜」という歌詞において、「犬」の重要度を、「犬」が普通名詞で、専用辞書に存在せず、出現回数は１回なので、「２」と判定する。
【００８２】
係り受け解析部２４７は、形態素解析部２４２により得られた各語句の係り受けを解析する。係り受け解析により、例えば「黒い小さい犬が走ってきた〜」という歌詞において、図１１の（２）に示したように、「犬」に係る語句が「黒い」および「小さい」であることが分かる。
【００８３】
語句抽出部２４８は、重要度判定部２４６により重要度が最も高い語句、および重要度が最も高い語句に係る語句を抽出する。例えば、「黒い小さい犬が走ってきた〜」という歌詞において、最も重要度の高い語句が「犬」であり、「犬」に係る語句が「黒い」および「小さい」であるので、語句抽出部２４８は、「犬」、「黒い」および「小さい」を検索語句セットとして抽出する。
【００８４】
なお、語句抽出部２４８は、解析対象の歌詞部分の再生時に表示する画像枚数に基づいて抽出する検索語句セットの数を決定してもよい。例えば、解析対象の歌詞部分の再生時に１枚の画像のみを表示する場合には重要度が最も高い語句を含む検索語句セットのみを抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が最も高い語句を含む検索語句セットから、重要度がｎ番目に高い語句を含む検索語句セットまでを抽出してもよい。また、解析対象の歌詞部分の再生時にｎ枚の画像を表示する場合、語句抽出部２３８は、重要度が高い方から少なくとも１つの語句および当該語句に係る語句の組合せからなる少なくとも１つの検索語句セットを抽出してもよい。この場合、抽出された検索語句セットの各々により、合計がｎ枚になるように画像が検索される。
【００８５】
通信部２６４および検索部２６８は、第１の実施形態と同様に、解析部２４０により抽出された検索語句セットを用いて画像を取得する。具体的には、通信部２６４および検索部２６８は、検索語句セットを構成する複数の語句の論理積により画像を取得してもよい。また、通信部２６４および検索部２６８は、検索優先度を指定できる場合には、検索語句セットのうちの係り先の語句の優先度を高めてもよい。
【００８６】
音楽再生部２７２、音楽出力部２７６、表示制御部２８０および画像表示部２８４は、第１の実施形態と同様に、通信部２６４または検索部２６８により取得された画像が音楽の進行に合わせて表示されるように動作する。例えば、「犬」、「黒い」および「小さい」からなる検索語句セットを用いて画像が取得された場合、画像表示部２８４は図１２に示す画像を表示する。
【００８７】
図１２は、第２の実施形態による画像表示の具体例を示した説明図である。図１２に示したように、表示制御部２８０は、「黒い小さい犬が走ってきた〜」という歌詞が出現している音楽部分の再生時に、「犬」、「黒い」および「小さい」からなる検索語句セットを用いて検索された画像Ｐ４を画像表示部２８４に表示させる。
【００８８】
なお、「犬」の重要度は比較的小さい「２」であり、曲のリズムが穏やかである場合、表示制御部２８０は、第１の実施形態で説明した第１〜第５の表示制御のいずれかにより、画像Ｐ４を比較的小さめの表示サイズでさざ波のように揺らして画像表示部２８４に表示させてもよい。
【００８９】
（第２の実施形態による音楽再生装置の動作）
以上、第２の実施形態による音楽再生装置２０−２の構成を説明した。続いて、図１３を参照し、第２の実施形態による音楽再生装置２０−２の動作を説明する。
【００９０】
図１３は、第２の実施形態による音楽再生装置２０−２の動作を示したフローチャートである。図１３に示したように、まず、音楽再生装置２０−２の形態素解析部２４２が対象音楽の少なくとも一部分の歌詞を解析する（Ｓ４０４）。また、音楽解析部２４３が、対象音楽のメロディーパートおよびテンポなどを解析する（Ｓ４０８）。
【００９１】
その後、重要度判定部２４６が、形態素解析部２４２および音楽解析部２４３による解析結果などに基づき、歌詞に含まれる各語句の重要度を判定する（Ｓ４１２）。また、係り受け解析部２４７が、形態素解析部２４２により得られた各語句の係り受けを解析する（Ｓ４１６）。なお、Ｓ４１６の処理はＳ４１２の処理の前に行われてもよいし、Ｓ４１６の処理とＳ４１２の処理は並列して行われてもよい。
【００９２】
続いて、語句抽出部２４８が、重要度の高い語句、および当該語句に係る語句を検索語句セットとして抽出する（Ｓ４２０）。そして、通信部２６４が画像検索サーバ３０と協働して、あるいは検索部２６８が、語句抽出部２４８により抽出された検索語句セットを用いて画像を取得する（Ｓ４２４）。その後、表示制御部２８０が、再生される音楽の進行に合わせ、通信部２６４または検索部２６８により取得された画像を画像表示部２８４に表示させる（Ｓ４２８）。
【００９３】
以上説明したように、本開示の第２の実施形態による音楽再生装置２０−２は、音楽の歌詞を解析し、歌詞に含まれる重要度の高い語句、および重要度の高い語句に係る語句を抽出すること、抽出された複数の語句を用いて画像取得を行うこと、および、取得された画像を音楽の再生時に表示することが可能である。
【００９４】
＜２−３．第３の実施形態＞
次に、本発明の第３の実施形態を説明する。本開示の第３の実施形態による音楽再生装置２０−３は、音楽の歌詞を解析し、歌詞を構成する主部および述部を解析し、主部から名詞を検索語句として抽出すること、抽出した語句を用いて画像取得を行うこと、取得された画像を音楽の再生時に述部に応じた動きで表示することができる。以下、このような本開示の第３の実施形態による音楽再生装置２０−３について図１４〜図１７を参照して詳細に説明する。
【００９５】
図１４は、本開示の第３の実施形態による音楽再生装置２０−３の構成を示した機能ブロック図である。図１４に示したように、第３の実施形態による音楽再生装置２０−３は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２５０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８２、および画像表示部２８４を備える。音楽再生装置２０−３の上記構成には、第１の実施形態による音楽再生装置２０−１と共通する構成が含まれるので、以下では、第１の実施形態による音楽再生装置２０−１と異なる構成を主に説明する。
【００９６】
解析部２５０は、音楽記憶部２２０に記憶されている音楽、および当該音楽に関して歌詞記憶部２１６に記憶されている歌詞を解析し、画像を検索するための検索語句を抽出する。このための構成として、解析部２５０は、歌詞取得部２５１、形態素解析部２５２、音楽解析部２５３、係り受け解析部２５４、主部述部判定部２５５、重要度判定部２５６、および語句抽出部２５８を有する。なお、解析部２５０は、以下の解析を歌詞の１文、１行、または１メロディーパートなどの範囲ごとに実行してもよい。
【００９７】
歌詞取得部２５１は、対象の音楽の歌詞を歌詞記憶部２１６から取得する。なお、対象の音楽は、再生中の音楽、ユーザにより指示された音楽、または音楽記憶部２２０に記憶されている再生前の音楽であってもよい。
【００９８】
形態素解析部２５２は、歌詞取得部２５１により取得された歌詞を形態素解析する。例えば、歌詞取得部２５１により「太陽が爆発して土星が消えた〜」という歌詞が取得された場合、形態素解析部２５２は、当該歌詞を構成する語句（形態素）、および各語句の品詞を図１５の（１）に示すように解析する。
【００９９】
図１５は、第３の実施形態による歌詞の解析結果を示した説明図である。図１５の（１）に示したように、「太陽が爆発して土星が消えた〜」という歌詞は、「太陽（固有名詞）、が（助詞）、爆発して（動詞）、土星（固有名詞）、が（助詞）、消えた〜（動詞）」と分解される。
【０１００】
一方、音楽解析部２５３は、音楽中で解析対象の歌詞が出現している部分のメロディーパート（Ａメロ、Ｂメロ、サビなど）、テンポ（リズム）および音量などを解析する。
【０１０１】
また、係り受け解析部２５４は、形態素解析部２５２により得られた各語句の係り受けを解析する。係り受け解析により、例えば「太陽が爆発して土星が消えた〜」という歌詞において、図１５の（２）に示したように、「爆発して」に係る語句が「太陽が」であることが分かる。
【０１０２】
主部述部判定部２５５は、歌詞を構成する文ごとに主部と述部を判定する。例えば、主部述部判定部２５５は、単文、重文および複文の主部と述部を以下のように判定する。
・単文 「犬が走る。」 主部＝「犬が」、述部＝「走る。」
・重文 「犬が走り、猫は泣く。」
第１の主部＝「犬が」、第１の述部＝「走り、」、
第２の主部＝「猫は」、第２の述部＝「泣く。」
・複文 「犬が走った後を猫が追う」
第１の主部＝「犬が」、第１の述部＝「走った」、
第２の主部＝「猫が」、第２の述部＝「追う。」
【０１０３】
同様に、主部述部判定部２５５は、「太陽が爆発して土星が消えた〜」という歌詞の主部および述部を以下のように判定する。なお、以下のように主部と述部の組が複数存在する場合、主部と述部の組の各々について以降の処理を行う。
第１の主部＝「太陽が」、第１の述部＝「爆発して」
第２の主部＝「土星が」、第２の述部＝「消えた〜」
【０１０４】
重要度判定部２５６は、主部述部判定部２５５により判定された主部を構成する各語句の重要度を判定する。重要度判定部２５６は、例えば第１の実施形態で説明した基準（１）〜（１０）の少なくともいずれかに従って各語句の重要度を判定してもよい。
【０１０５】
この場合、重要度判定部２５６は、主部を構成する「太陽」の重要度を、「太陽」が固有名詞で、専用辞書に存在せず、出現回数は１回なので、「３」と判定する。
【０１０６】
語句抽出部２５８は、重要度判定部２５６により重要度が最も高い語句を抽出する。例えば、語句抽出部２５８は、「太陽が爆発して土星が消えた〜」という歌詞を構成する第１の主部から「太陽」を検索語句として抽出する。
【０１０７】
通信部２６４および検索部２６８は、第１の実施形態と同様に、解析部２５０により抽出された検索語句を用いて画像を取得する。音楽再生部２７２は、第１の実施形態と同様に解析対象の音楽の再生用データを音楽記憶部２２０から読み出して再生し、音楽出力部２７６は、音楽再生部２７２から供給される再生信号を音声として出力する。
【０１０８】
表示制御部２８２は、通信部２６４または検索部２６８により検索語句に基づいて取得された画像を、主部述部判定部２５５により判定された述部に応じた動きで画像表示部２８４に表示させる。より詳細に説明すると、表示制御部２８２は、述部と動きパターンが対応付けられたテーブルを用意しておき、テーブルにおいて述部と対応付けられている動きパターンに従って画像の表示制御を行ってもよい。例えば、テーブルにおいて、述部「走る」と動きパターン「左右に動く」、述部「爆発する」と動きパターン「破裂させる」が対応付けられている場合、表示制御部２８２は、図１６に示す表示制御を行う。
【０１０９】
図１６は、第３の実施形態による画像表示の具体例を示した説明図である。図１６に示したように、表示制御部２８２は、「太陽が爆発して土星が消えた〜」という歌詞が出現している音楽部分の再生が開始されると、検索語句「太陽」を用いて取得された画像Ｐ５を画像表示部２８４に表示させる。その後、表示制御部２８２は、「爆発して」という述部に対応付けられている動きパターンに従い、画像Ｐ５を破裂させる（断片化して飛び散らせる。）。
【０１１０】
なお、述部が否定形である場合、表示制御部２８２は、画面全体に×を表示するなど、述部が否定形であるが分かるような表示制御を行ってもよい。また、主部述部に加え、目的語を用いて画像検索および表示制御を行うことも可能である。さらに、音楽の雰囲気を歌詞に含まれる語句や音楽解析により判定し、音楽の雰囲気に合った動きを画像に与えることも可能である。
【０１１１】
（第３の実施形態による音楽再生装置の動作）
以上、第３の実施形態による音楽再生装置２０−３の構成を説明した。続いて、図１７を参照し、第３の実施形態による音楽再生装置２０−３の動作を説明する。
【０１１２】
図１７は、第３の実施形態による音楽再生装置２０−３の動作を示したフローチャートである。図１７に示したように、まず、音楽再生装置２０−３の形態素解析部２５２が対象音楽の少なくとも一部分の歌詞を解析する（Ｓ５０４）。そして、係り受け解析部２５４は、形態素解析部２５２により得られた各語句の係り受けを解析する（Ｓ５０８）。また、音楽解析部２５３が、対象音楽のメロディーパートおよびテンポなどを解析する（Ｓ５１２）。
【０１１３】
続いて、主部述部判定部２５５が、歌詞を構成する文ごとに主部と述部を判定し（Ｓ５１６）、重要度判定部２５６が、主部述部判定部２５５により判定された主部を構成する各語句の重要度を判定する（Ｓ５２０）。
【０１１４】
そして、通信部２６４が画像検索サーバ３０と協働して、あるいは検索部２６８が、語句抽出部２５８により抽出された検索語句を用いて画像を取得する（Ｓ５２８）。その後、表示制御部２８０が、再生される音楽の進行に合わせ、通信部２６４または検索部２６８により取得された画像を、述部に応じた動きで画像表示部２８４に表示させる（Ｓ５３２）。
【０１１５】
以上説明したように、本開示の第３の実施形態による音楽再生装置２０−３によれば、音楽の歌詞を解析し、歌詞を構成する主部および述部を解析し、主部から名詞を検索語句として抽出すること、抽出した語句を用いて画像取得を行うこと、取得された画像を音楽の再生時に述部に応じた動きで表示することが可能である。
【０１１６】
＜２−４．第４の実施形態＞
次に、本開示の第４の実施形態を説明する。本開示の第４の実施形態では、音楽に関連する画像データファイルを事前に作成しておき、音楽の再生時に当該画像データファイルも併せて再生する方法を提案する。
【０１１７】
図１８は、本開示の第４の実施形態による音楽再生装置２０−４の構成を示した機能ブロック図である。図１８に示したように、第４の実施形態による音楽再生装置２０−４は、歌詞記憶部２１６、音楽記憶部２２０、画像記憶部２２４、解析部２３０、通信部２６４、検索部２６８、音楽生成部２７２、音楽出力部２７６、表示制御部２８０、画像表示部２８４、およびデータ作成部２８８を備える。音楽再生装置２０−４の上記構成には、第１の実施形態による音楽再生装置２０−１と共通する構成が含まれるので、以下では、第１の実施形態による音楽再生装置２０−１と異なる構成を主に説明する。
【０１１８】
通信部２６４は、音楽データの取得後であって、音楽データの再生開始前に、解析部２３０により抽出された検索語句を用いてネットワークから画像取得を行う。ここで、通信部２６４は、歌詞の１文、１行、または１メロディーパートなどの範囲ごとの検索語句を用い、各範囲に対応する画像を取得する。
【０１１９】
データ作成部２８８は、通信部２６４により取得された画像に基づき、各画像が音楽中の対応する範囲の再生タイミングで出現するような動画データ（例えば、ＭＰＥＧのような画像データファイル）を作成する。なお、各画像には、第１〜第３の実施形態で説明した表示制御が施されていてもよい。また、データ作成部２８８は、音楽データを含む動画データを作成してもよい。さらに、データ作成部２８８は、１の音楽に関して複数パターンの動画データを作成してもよい。
【０１２０】
なお、上記では画像データファイルが動画データである例を説明したが、本実施形態はかかる例に限定されない。例えば、画像データファイルは、通信部２６４により取得された画像と、対象の音楽と、当該画像を表示する音楽中のタイミングと、が関連付けられたデータファイルであってもよい。
【０１２１】
上記のようにしてデータ作成部２８８により作成された動画データは、画像記憶部２２４に記憶される。
【０１２２】
その後、音楽の再生時には、音楽に対応する動画データを検索部２６８が画像記憶部２２４から検索し、表示制御部２８０が、検索部２６８により検索された動画データを再生し、再生画面を画像表示部２８４に表示させる。なお、表示制御部２８０は、動画データに音楽データが含まれない場合、音楽再生の速度に応じて動画データの再生速度も変更する。
【０１２３】
画像記憶部２２４から検索される画像データファイルが、画像と、対象の音楽と、当該画像を表示する音楽中のタイミングと、が関連付けられたデータファイルである場合、表示制御部２８０は、当該データファイルに含まれる各画像の表示タイミングに従って画像表示を制御してもよい。
【０１２４】
このように、本開示の第４の実施形態による音楽再生装置２０−４は、画像データファイルを作成するデータ作成装置としての機能も有するので、音楽の再生時に事前に作成した画像データファイルを用いて画像表示を行うことができる。
【０１２５】
（補足）
なお、上記では画像データファイルの作成機能を音楽再生装置２０−４に実装する例を説明したが、画像データファイルの作成機能をネットワーク側のサーバに実装することも可能である。この場合、音楽再生装置２０−４は、サーバから画像データファイルを取得することにより音楽に合わせて画像を表示可能である。
【０１２６】
また、検索部２６８は、音楽の再生時、以前に使用したことのない画像データファイル（動画）を選択的に検索してもよい。また、通信部２６４による画像取得から一定期間の経過後、または、ある音楽について作成済みの画像データファイルが全て表示のために利用された場合などには、画像記憶部２２４の更新のために、通信部２６４が再度画像取得を行ってもよい。また、音楽再生時に画像記憶部２２４に音楽と関連付けられた画像データファイルが記憶されていない場合、通信部２６４は音楽再生時にリアルタイムに画像をネットワークから取得してもよい。
【０１２７】
また、上記では音楽の再生前に画像データファイルを作成する例を説明したが、データ作成部２８８は、音楽の再生時に表示制御部２８０により生成された表示を利用して画像データファイルを作成してもよい。
【０１２８】
＜＜３．むすび＞＞
以上説明したように、本開示の第１〜第４の実施形態によれば、ユーザは、聴覚による音楽の知覚に加え、音楽の歌詞に応じた画像を視覚によって知覚できるので、音楽をより深く味わうことが可能となる。
【０１２９】
なお、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０１３０】
例えば、本明細書の音楽再生装置２０の処理における各ステップは、必ずしもフローチャートとして記載された順序に沿って時系列に処理する必要はない。例えば、音楽再生装置２０の処理における各ステップは、フローチャートとして記載した順序と異なる順序で処理されても、並列的に処理されてもよい。
【０１３１】
また、音楽再生装置２０に内蔵されるＣＰＵ２０１、ＲＯＭ２０２およびＲＡＭ２０３などのハードウェアを、上述した音楽再生装置２０の各構成と同等の機能を発揮させるためのコンピュータプログラムも作成可能である。また、該コンピュータプログラムを記憶させた記憶媒体も提供される。
【０１３２】
また、以下のような構成も本開示の技術的範囲に属する。
（１）
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
を備える、音楽再生装置。
（２）
前記解析部は、前記音楽の一部分の歌詞を解析し、
前記表示制御部は、前記音楽の一部分の再生時に、前記音楽の一部分の歌詞から抽出された語句を用いて前記取得部により取得された画像を前記表示装置に表示させる、（１）に記載の音楽再生装置。
（３）
前記解析部は、前記歌詞に含まれる各語句の重要度を判定し、各語句の重要度に基づいて少なくとも１の語句を抽出する、（１）または（２）のいずれか一項に記載の音楽再生装置。
（４）
前記解析部は、前記各語句の品詞、前記音楽の一部分の属するメロディーパート、音量またはリズムの少なくともいずれかに基づいて前記各語句の重要度を判定する、（３）に記載の音楽再生装置。
（５）
前記表示制御部は、前記画像の取得に用いられた語句の重要度に応じて前記画像の表示サイズを制御する、（３）または（４）のいずれか一項に記載の音楽再生装置。
（６）
前記表示制御部は、前記音楽のリズムに応じて前記画像の動きを制御する、（１）〜（５）のいずれか一項に記載の音楽再生装置。
（７）
前記取得部は、前記解析部により抽出された少なくとも１の語句を用いて１または２以上の画像を取得し、
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記音楽の一部分の再生時に前記表示装置に表示させる、（１）〜（６）のいずれか一項に記載の音楽再生装置。
（８）
前記取得部は、前記音楽の一部分の再生に要する時間に応じた枚数の画像を取得する、（１）〜（７）のいずれか一項に記載の音楽再生装置。
（９）
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を順次に前記表示装置に表示させる、（８）に記載の音楽再生装置。
（１０）
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記表示装置の表示画面上の異なる領域に同時に表示させる、（８）に記載の音楽再生装置。
（１１）
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を、前記表示装置の表示画面上で重なる領域に透過度を設定して表示させる、（８）に記載の音楽再生装置。
（１２）
前記表示制御部は、前記１または２以上の画像の各々の透過度を、前記１または２以上の画像の取得に用いられた語句の重要度に応じて制御する、（１１）に記載の音楽再生装置。
（１３）
前記解析部は、各語句の重要度に基づいて１の語句を抽出し、さらに、抽出した前記１の語句に係る語句を抽出する、（３）〜（１２）のいずれか一項に記載の音楽再生装置。
（１４）
前記取得部は、前記解析部により抽出された複数の語句の論理積により画像検索を行う、（１３）に記載の音楽再生装置。
（１５）
前記解析部は、前記音楽の一部分の歌詞の主部および述部を解析し、前記主部から語句を抽出し、
前記表示制御部は、前記主部から抽出された語句を用いて前記取得部により取得された画像を、前記述部に応じた動きで前記表示装置に表示させる、（３）に記載の音楽再生装置。
（１６）
前記音楽再生装置は、
前記取得部によりネットワークから取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
前記データ作成部により作成された前記画像データファイルを記憶する記憶部と、
をさらに備え、
前記取得部は、前記音楽の再生時に、前記記憶部に前記音楽と関連付けて記憶されている前記画像データファイルを取得する、（１）〜（１５）のいずれか一項に記載の音楽再生装置。
（１７）
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出することと、
前記抽出された語句を用いて画像取得を行うことと、
前記音楽の再生時に、前記取得された画像を表示装置に表示させることと、
を含む、音楽再生方法。
（１８）
コンピュータを、
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
として機能させるための、プログラム。
（１９）
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いてネットワークから画像取得を行う取得部と、
前記取得部により取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
を備える、データ作成装置。
【符号の説明】
【０１３３】
１ 音楽再生システム
２０ 音楽再生装置
３０ 画像検索サーバ
４０ 画像サーバ
２１６ 歌詞記憶部
２２０ 音楽記憶部
２２４ 画像記憶部
２３０、２４０、２５０ 解析部
２３１、２４１、２５１ 歌詞取得部
２３２、２４２、２５２ 形態素解析部
２３３、２４３、２５３ 音楽解析部
２３６、２４６、２５６ 重要度判定部
２３８、２４８、２５８ 語句抽出部
２４７、２５４ 係り受け解析部
２５５ 主部述部判定部
２６４ 通信部
２６８ 検索部
２７２ 音楽再生部
２７６ 音楽出力部
２８０、２８２ 表示制御部
２８４ 画像表示部
２８８ データ作成部
【特許請求の範囲】
【請求項１】
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
を備える、音楽再生装置。
【請求項２】
前記解析部は、前記音楽の一部分の歌詞を解析し、
前記表示制御部は、前記音楽の一部分の再生時に、前記音楽の一部分の歌詞から抽出された語句を用いて前記取得部により取得された画像を前記表示装置に表示させる、請求項１に記載の音楽再生装置。
【請求項３】
前記解析部は、前記歌詞に含まれる各語句の重要度を判定し、各語句の重要度に基づいて少なくとも１の語句を抽出する、請求項２に記載の音楽再生装置。
【請求項４】
前記解析部は、前記各語句の品詞、前記音楽の一部分の属するメロディーパート、音量またはリズムの少なくともいずれかに基づいて前記各語句の重要度を判定する、請求項３に記載の音楽再生装置。
【請求項５】
前記表示制御部は、前記画像の取得に用いられた語句の重要度に応じて前記画像の表示サイズを制御する、請求項４に記載の音楽再生装置。
【請求項６】
前記表示制御部は、前記音楽のリズムに応じて前記画像の動きを制御する、請求項５に記載の音楽再生装置。
【請求項７】
前記取得部は、前記解析部により抽出された少なくとも１の語句を用いて１または２以上の画像を取得し、
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記音楽の一部分の再生時に前記表示装置に表示させる、請求項６に記載の音楽再生装置。
【請求項８】
前記取得部は、前記音楽の一部分の再生に要する時間に応じた枚数の画像を取得する、請求項７に記載の音楽再生装置。
【請求項９】
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を順次に前記表示装置に表示させる、請求項８に記載の音楽再生装置。
【請求項１０】
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記表示装置の表示画面上の異なる領域に同時に表示させる、請求項８に記載の音楽再生装置。
【請求項１１】
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を、前記表示装置の表示画面上で重なる領域に透過度を設定して表示させる、請求項８に記載の音楽再生装置。
【請求項１２】
前記表示制御部は、前記１または２以上の画像の各々の透過度を、前記１または２以上の画像の取得に用いられた語句の重要度に応じて制御する、請求項１１に記載の音楽再生装置。
【請求項１３】
前記解析部は、各語句の重要度に基づいて１の語句を抽出し、さらに、抽出した前記１の語句に係る語句を抽出する、請求項３に記載の音楽再生装置。
【請求項１４】
前記取得部は、前記解析部により抽出された複数の語句の論理積により画像検索を行う、請求項１３に記載の音楽再生装置。
【請求項１５】
前記解析部は、前記音楽の一部分の歌詞の主部および述部を解析し、前記主部から語句を抽出し、
前記表示制御部は、前記主部から抽出された語句を用いて前記取得部により取得された画像を、前記述部に応じた動きで前記表示装置に表示させる、請求項３に記載の音楽再生装置。
【請求項１６】
前記音楽再生装置は、
前記取得部によりネットワークから取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
前記データ作成部により作成された前記画像データファイルを記憶する記憶部と、
をさらに備え、
前記取得部は、前記音楽の再生時に、前記記憶部に前記音楽と関連付けて記憶されている前記画像データファイルを取得する、請求項１に記載の音楽再生装置。
【請求項１７】
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出することと、
前記抽出された語句を用いて画像取得を行うことと、
前記音楽の再生時に、前記取得された画像を表示装置に表示させることと、
を含む、音楽再生方法。
【請求項１８】
コンピュータを、
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
として機能させるための、プログラム。
【請求項１９】
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いてネットワークから画像取得を行う取得部と、
前記取得部により取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
を備える、データ作成装置。
【請求項１】
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
を備える、音楽再生装置。
【請求項２】
前記解析部は、前記音楽の一部分の歌詞を解析し、
前記表示制御部は、前記音楽の一部分の再生時に、前記音楽の一部分の歌詞から抽出された語句を用いて前記取得部により取得された画像を前記表示装置に表示させる、請求項１に記載の音楽再生装置。
【請求項３】
前記解析部は、前記歌詞に含まれる各語句の重要度を判定し、各語句の重要度に基づいて少なくとも１の語句を抽出する、請求項２に記載の音楽再生装置。
【請求項４】
前記解析部は、前記各語句の品詞、前記音楽の一部分の属するメロディーパート、音量またはリズムの少なくともいずれかに基づいて前記各語句の重要度を判定する、請求項３に記載の音楽再生装置。
【請求項５】
前記表示制御部は、前記画像の取得に用いられた語句の重要度に応じて前記画像の表示サイズを制御する、請求項４に記載の音楽再生装置。
【請求項６】
前記表示制御部は、前記音楽のリズムに応じて前記画像の動きを制御する、請求項５に記載の音楽再生装置。
【請求項７】
前記取得部は、前記解析部により抽出された少なくとも１の語句を用いて１または２以上の画像を取得し、
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記音楽の一部分の再生時に前記表示装置に表示させる、請求項６に記載の音楽再生装置。
【請求項８】
前記取得部は、前記音楽の一部分の再生に要する時間に応じた枚数の画像を取得する、請求項７に記載の音楽再生装置。
【請求項９】
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を順次に前記表示装置に表示させる、請求項８に記載の音楽再生装置。
【請求項１０】
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を前記表示装置の表示画面上の異なる領域に同時に表示させる、請求項８に記載の音楽再生装置。
【請求項１１】
前記表示制御部は、前記取得部により取得された前記１または２以上の画像を、前記表示装置の表示画面上で重なる領域に透過度を設定して表示させる、請求項８に記載の音楽再生装置。
【請求項１２】
前記表示制御部は、前記１または２以上の画像の各々の透過度を、前記１または２以上の画像の取得に用いられた語句の重要度に応じて制御する、請求項１１に記載の音楽再生装置。
【請求項１３】
前記解析部は、各語句の重要度に基づいて１の語句を抽出し、さらに、抽出した前記１の語句に係る語句を抽出する、請求項３に記載の音楽再生装置。
【請求項１４】
前記取得部は、前記解析部により抽出された複数の語句の論理積により画像検索を行う、請求項１３に記載の音楽再生装置。
【請求項１５】
前記解析部は、前記音楽の一部分の歌詞の主部および述部を解析し、前記主部から語句を抽出し、
前記表示制御部は、前記主部から抽出された語句を用いて前記取得部により取得された画像を、前記述部に応じた動きで前記表示装置に表示させる、請求項３に記載の音楽再生装置。
【請求項１６】
前記音楽再生装置は、
前記取得部によりネットワークから取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
前記データ作成部により作成された前記画像データファイルを記憶する記憶部と、
をさらに備え、
前記取得部は、前記音楽の再生時に、前記記憶部に前記音楽と関連付けて記憶されている前記画像データファイルを取得する、請求項１に記載の音楽再生装置。
【請求項１７】
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出することと、
前記抽出された語句を用いて画像取得を行うことと、
前記音楽の再生時に、前記取得された画像を表示装置に表示させることと、
を含む、音楽再生方法。
【請求項１８】
コンピュータを、
音楽を再生する再生部と、
前記音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いて画像取得を行う取得部と、
前記音楽の再生時に、前記取得部により取得された画像を表示装置に表示させる表示制御部と、
として機能させるための、プログラム。
【請求項１９】
音楽の歌詞を解析し、前記歌詞に含まれる語句を抽出する解析部と、
前記解析部により抽出された語句を用いてネットワークから画像取得を行う取得部と、
前記取得部により取得された画像に基づいて前記音楽と関連付けられた画像データファイルを作成するデータ作成部と、
を備える、データ作成装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【公開番号】特開２０１２−２２０５８２（Ｐ２０１２−２２０５８２Ａ）
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願番号】特願２０１１−８３９６１（Ｐ２０１１−８３９６１）
【出願日】平成２３年４月５日（２０１１．４．５）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願日】平成２３年４月５日（２０１１．４．５）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]