音量制御装置、音量制御方法およびコンテンツ再生システム
【課題】コンテンツを利用するユーザの状況、行動などに応じてコンテンツの再生音量を調整することができる音量制御装置、音量制御方法およびコンテンツ再生システムを提供する。
【解決手段】音量制御装置は、ユーザ情報検出部、同調判定部、音量制御部とからなる。
ユーザ情報検出部はコンテンツを利用するユーザが発する振動、音声などをユーザ情報として検出する。同調判定部は、ユーザ情報とコンテンツの解析情報が同調しているか否かを判定する。音量制御部は、同調判定部によりユーザ情報とコンテンツの解析情報とが同調していると判定された場合には、コンテンツ再生音量を上げるように処理を行う。一方、ユーザ情報とコンテンツの解析情報とが同調してないと判定された場合にはコンテンツの再生音量を下げるように処理を行う。
【解決手段】音量制御装置は、ユーザ情報検出部、同調判定部、音量制御部とからなる。
ユーザ情報検出部はコンテンツを利用するユーザが発する振動、音声などをユーザ情報として検出する。同調判定部は、ユーザ情報とコンテンツの解析情報が同調しているか否かを判定する。音量制御部は、同調判定部によりユーザ情報とコンテンツの解析情報とが同調していると判定された場合には、コンテンツ再生音量を上げるように処理を行う。一方、ユーザ情報とコンテンツの解析情報とが同調してないと判定された場合にはコンテンツの再生音量を下げるように処理を行う。
【発明の詳細な説明】
【技術分野】
【０００１】
本技術は、音量制御装置、音量制御方法およびコンテンツ再生システムに関し、詳しくは、コンテンツを利用するユーザの行動がコンテンツと同調しているか否かに応じてコンテンツの再生音量を調整する音量制御装置、音量制御方法およびコンテンツ再生システムに関する。
【背景技術】
【０００２】
近年、ユーザは、ＣＤ（Compact Disc）などに収録された、またはインターネットを介してダウンロードした楽曲などのいわゆる音楽コンテンツ、映画やコンサート映像などの映像コンテンツ、カラオケなどの様々なコンテンツを一人、または複数人で楽しむことができる。しかし、コンテンツを利用する環境、コンテンツを利用するユーザの行動などによってはコンテンツの再生音量が適切ではなく、コンテンツを十分に楽しむことができない場合がある。
【０００３】
そこで、カラオケ演奏を再生可能なカラオケ装置において、環境による影響を加味しつつコンテンツごとに適した音量の設定を自動的に行うカラオケ装置が提案されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−１７８６０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の技術は、カラオケ楽曲や映画等のコンテンツに適した再生音量として予め登録しておいた初期音量レベルに一致させるようにコンテンツの音量調整を行う。これにより、コンテンツごとに適した音量での再生を行うことができる。しかし、最適な再生音量としての初期音量レベルはコンテンツごとに予め設定されているため、カラオケやコンテンツを視聴しているユーザの状況（盛り上がりなど）によって、初期音量レベルを超える音量が必要になった場合であってもそれに対応することができない。
【０００６】
また、引用文献１に記載の技術は、カラオケやコンテンツの音声を音入力手段から入力し、その入力される音の音量レベルと、カラオケやコンテンツに対応する初期音量レベルとを比較することにより、音量の補正を行うものである。よって、あくまで再生される音量と予め定めた初期音量レベルに基づく補正であるため、カラオケ、コンテンツ視聴を行っているユーザの状況、行動などを直接的に音量に反映させることができない。
【０００７】
したがって、本技術の目的は、コンテンツを利用するユーザの状況、行動などを直接的に音量に反映させることができるよう、コンテンツを利用するユーザがコンテンツと同調しているか否かに応じてコンテンツの再生音量を制御する音量制御装置、音量制御方法およびコンテンツ再生システムを提供することにある。
【課題を解決するための手段】
【０００８】
上述した目的を達成するために、本技術は、コンテンツを利用するユーザに関するユーザ情報を検出するユーザ情報検出部と、コンテンツの楽曲解析情報と、ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、同調判定部による判定結果に基づいてコンテンツの再生音量を制御する音量制御部とを備える音量制御装置である。
【０００９】
また、コンテンツを利用するユーザに関する情報をユーザ情報として検出し、コンテンツの楽曲解析情報と、ユーザ情報とが同調しているか否かを判定し、同調度合いの判定結果に基づいてコンテンツの再生音量を制御する音量制御方法である。
【００１０】
さらに、音量制御装置と、音量制御装置とネットワークを介して接続される再生装置とからなり、音量制御装置は、コンテンツを利用するユーザに関する情報を検出するユーザ情報検出部と、コンテンツの楽曲解析情報と、ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、音量制御部による音量制御情報を前記再生装置に送信する第１の通信部とを備え、再生装置は、コンテンツを再生するコンテンツ再生部と、第１の通信部から送信された前記音量制御情報を受信する第２の通信部と第２の通信部により受信した前記音量制御情報に基づいて前記コンテンツの再生音量を調整する音量調整部とを備えるコンテンツ再生システムである。
【発明の効果】
【００１１】
本技術によれば、コンテンツを利用するユーザがコンテンツに同調しているか否かに応じてコンテンツの再生音量を調整することができる。
【図面の簡単な説明】
【００１２】
【図１】図１は、本技術に係る音量制御装置を備える端末装置を含むコンテンツ再生システムの構成を示す図である。
【図２】図２Ａは、音量制御装置の構成を示すブロック図であり、図２Ｂは音量制御装置を適用した端末装置の構成を示すブロック図である。
【図３】図３Ａおよび図３Ｂは、本技術に係る音量制御装置を備える端末装置の外観図である。
【図４】図４は、楽曲再生処理の流れを示すフローチャートである。
【図５】図５は、同調判定処理の概要を示す図である。
【図６】図６は、同調判定処理の流れを示すフローチャートである。
【図７】図７は、同調判定処理の流れを示すフローチャートである。
【図８】図８は、同調判定処理の詳細について説明するための図である。
【図９】図９は、同調判定処理の詳細について説明するための図である。
【図１０】図１０は、音量制御処理の概要を示す図である。
【図１１】図１１は、本技術の第１の実施の形態に係る音量制御処理の流れを示すフローチャートである。
【図１２】図１２は、本技術の第２の実施の形態に係る音量制御処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、本技術の実施の形態について図面を参照しながら説明する。ただし、本技術は以下の実施例のみに限定されるものではない。なお、説明は以下の順序で行う。
＜１．第１の実施の形態＞
［１−１.コンテンツ再生システムの構成］
［１−２.音量制御装置の構成］
［１−３.端末装置の構成］
［１−４.コンテンツ再生処理］
［１−５.同調判定処理］
［１−６.音量制御処理］
＜２．第２の実施の形態＞
［２−１.音量制御処理］
＜３．変形例＞
【００１４】
＜１．第１の実施の形態＞
［１−１.コンテンツ再生システムの構成］
まず、図１を参照してコンテンツ再生システム１の構成について説明する。図１は、本技術に係る音量制御装置４００を備える端末装置３００を含むコンテンツ再生システム１の構成を示す図である。なお、本実施の形態においては、コンテンツとして音声ファイルによる楽曲を用いる場合を例にして説明を行う。
【００１５】
コンテンツ再生システム１は、ＤＬＮＡ（Digital Living Network Alliance）に基づいたホームネットワークシステムとして構成されている。コンテンツ再生システム１は、ＤＭＲ（Digital Media Renderer、ＤＭＰ：Digital Media Playerとも称する。）としての再生装置１００、コンテンツを記憶保持するＤＭＳ（Digital Media Server）としてのサーバ装置２００、システムのコントロールおよび音量制御処理を行うＤＭＣ（Digital Media Controller）としての端末装置３００とから構成されている。
【００１６】
ＤＭＲとしての再生装置１００は、例えば、テレビジョン受像機、パーソナルコンピュータ、ドックスピーカ、ネットワーク機能搭載アンプ、セットトップボックス、ＰｌａｙＳｔａｔｉｏｎ（株式会社ソニー・コンピュータエンタテインメントの登録商標）３などのエンタテインメント装置、などが挙げられる。
【００１７】
再生装置１００は、楽曲の再生処理を行う再生処理部１０１、音声の出力を行うスピーカ１０２、サーバ装置２００および端末装置３００との通信を行う通信部１０３、再生装置１００全体の制御を行う制御部１０４を少なくとも備える。また、映像、画像などを表示するための表示部を備えるようにしてもよい。
【００１８】
再生処理部１０１は、音声処理部、アンプ部などを含むものである。再生制御部１０１は、楽曲データに対してデコード処理などの所定の処理を施すとともに、アンプ部により増幅処理を施してスピーカ１０２に出力する。スピーカ１０２は音声出力手段であり、再生制御部１０１によって所定の処理が施された楽曲は最終的にスピーカ１０２から出力される。
【００１９】
通信部１０３は、例えば、ＨＴＴＰ（Hyper Text Transfer Protocol）、ＴＣＰ／ＩＰ(Transmission Control Protocol/Internet Protocol)などのプロトコルに基づいてサーバ装置２００および端末装置３００との通信を行うためのネットワークインターフェースである、本実施の形態においては、再生装置１００は、通信部１０３を介して、端末装置３００から送信される音量制御データなどを受信する。また、通信部１０３を介してサーバ装置２００からのコンテンツのストリームを受信する。
【００２０】
制御部１０４は、例えばＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）およびＲＯＭ（Read Only Memory）などから構成されている。ＲＯＭには、ＣＰＵにより読み込まれるプログラムが格納されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに格納されているプログラムに基づき様々な処理を実行することによって再生装置１００全体の制御を行う。また、制御部１０４は、所定のプログラムを実行することにより音量調整部１０４Ａとして機能する。音量調整部１０４Ａは、端末装置３００から送信された音量制御データに従い、再生装置１００における再生音量が音量制御データで示される音量となるように、スピーカ１０２からの出力レベルの調整を行う。
【００２１】
ＤＭＳとしてのサーバ装置２００は、大容量記憶媒体を備え、コンテンツ再生システム１によって再生される楽曲などのコンテンツデータを保存するものである。サーバ装置２００としては、例えば、ネットワークＨＤＤ（Hard Disc Drive）、パーソナルコンピュータ、ＨＤレコーダなどが挙げられる。本実施の形態において再生されるコンテンツである楽曲データはサーバ装置２００に記憶されている。
【００２２】
サーバ装置２００は、コンテンツを記憶する記憶部２０１、再生装置１００および端末装置３００との通信を行うための通信部２０２、サーバ装置２００全体の制御を行う制御部２０３を少なくとも備える。記憶部２０１は、例えば、ＨＤＤ、フラッシュメモリなどの大容量記憶媒体から構成されており、コンテンツ再生システム１によって再生される楽曲などのコンテンツデータを保存するものである。楽曲データは、ＷＡＶ（RIFF waveform Audio Format）形式、または、ＭＰ３（MPEG Audio Layer-3）、ＡＡＣ（Advanced Audio Coding）などの方式で音声圧縮された状態で記憶部２０１に記憶される。また、楽曲のアーティスト名、アルバム名、曲名、総再生時間、再生時間情報などを含む楽曲情報も楽曲データのメタデータとして記憶部２０１に保存されている。楽曲情報は例えば、ＣＤＤＢ(Compact Disc DataBase)を利用することにより取得することができる。また、ユーザが任意に設定できるようにしてもよい。さらに、記憶２０１が記憶する楽曲データをリスト化した楽曲リスト情報も保存されている。
【００２３】
通信部２０２は、例えば、ＨＴＴＰ、ＴＣＰ／ＩＰなどのプロトコルに基づいて再生装置１００および端末装置３００との通信を行うためのネットワークインターフェースによって構成されている。本実施の形態においては、サーバ装置２００は、通信部２０２を介して、端末装置３００からの楽曲再生指示コマンドを受信する。また、通信部２０２を介して再生装置１００に対してコンテンツのストリーム配信が行われる。
【００２４】
制御部２０３は、例えばＣＰＵ、ＲＡＭおよびＲＯＭなどから構成されている。ＲＯＭには、ＣＰＵにより読み込まれるプログラムが格納されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに格納されているプログラムに基づき様々な処理を実行してコマンドの発行を行うことによってサーバ装置２００全体の制御を行う。
【００２５】
また、制御部２０３は、所定のプログラムを実行することによりストリーム配信部２０３Ａおよびコンテンツ解析部２０３Ｂとして機能する。ストリーム配信部２０３Ａは、通信部２０２を介して受信した端末装置３００からの楽曲再生指示コマンドに従い、記憶部２０１に記憶された楽曲データを再生装置１００にストリーム配信するよう所定の処理を行う。
【００２６】
コンテンツ解析部２０３Ｂは、記憶部２０１に記憶している楽曲に対して、特開２００７−１５６４３４号公報などに記載された公知の楽曲波形解析方法に基づく処理を行う。これにより、楽曲データそれぞれについて、ＢＰＭ（Beat Per Minute）情報、ビート情報、ビート出現時刻情報、サビ情報などを含む楽曲解析情報を生成する。生成された楽曲解析情報はメタデータとして楽曲データと関連付けられて記憶部２０１に記憶される。なお、楽曲解析情報は、ユーザなどによりサーバ装置２００に新たな楽曲データが追加された時点でその楽曲データに対して解析処理を行って生成し記憶部２０１に記憶しておいてもよい。また、再生装置１００に対してストリーム配信を行う際に解析処理を行って生成してもよい。
【００２７】
ＢＰＭ情報とは、楽曲のテンポを示すものである。ビート情報は、楽曲における各小節の位置、各拍の位置などを示すものである。拍は、一定の時間的間隔をもって数えられるもので、小節の中での拍の位置によりアクセントの強弱（すなわち、強拍/弱拍）が生まれ、その組み合わせにより、各種の拍子が作られる。ビート出現時刻情報とは、楽曲において最初にビートが出現する時点の時刻であり、曲の先頭からの経過時間で表される。
【００２８】
また、サビとは楽曲における特徴部分であり、一般的に曲の最も盛り上がる部分のことを指す。サビ情報は楽曲の再生時間におけるサビ出現時刻、サビ部分の再生時間などを示す。サビ出現時刻とは、楽曲においてサビが出現する時刻であり、曲の先頭からの経過時間で表される。なお、１つの楽曲においてサビが複数回存在する場合にはすべてのサビについてのサビ情報が生成される。
【００２９】
ＤＭＣとしての端末装置３００は、例えば、タッチパネルを備え、ユーザが指などで様々な入力操作を行うことができるいわゆるタブレット型の端末装置である。端末装置３００としては他にもパーソナルコンピュータ、スマートフォン、携帯電話機、携帯ゲーム機などを用いてもよい、端末装置３００の詳細な構成については後述する。
【００３０】
本実施の形態のおいては、再生装置１００、サーバ装置２００および端末装置３００は、ＨＴＴＰ、ＴＣＰなどのプロトコルに基づき、無線ＬＡＮ（Local Area Network）、ＷＩ−ＦＩネットワーク（Wireless−Fidelity）などのネットワークを介して接続されており、相互に通信可能となっている。ただし、接続方法は無線に限らず有線接続でもよい。
【００３１】
サーバ装置２００からは、サーバ装置２００が記憶部２０１に記憶する楽曲データのリストを示す楽曲リスト情報が端末装置３００に送信される。端末装置３００側は受信した楽曲リスト情報に基づいて楽曲リストを表示する。ユーザは楽曲リストを参照して端末装置３００において楽曲の選択を行い、端末装置３００からサーバ装置２００に対して楽曲再生指示を行うことができる。
【００３２】
サーバ装置２００は端末装置３００からの楽曲再生指示に従い、再生装置１００に対して楽曲データのストリーム配信を行う。さらに、サーバ装置２００は楽曲データのストリーム配信と共に再生楽曲の楽曲情報および楽曲解析情報を端末装置３００に送信する。楽曲情報は端末装置３００の表示部３０２に表示されることによりユーザに提示される。
【００３３】
また、端末装置３００から再生装置１００に対しては、ユーザ操作に応じた電源オン・オフ、曲戻し、曲送りなどを基本的な操作を指示するコントロールコマンドが送信される。端末装置３００によって再生装置１００を操作することが可能となっている。
【００３４】
なお、コンテンツ再生システム１において再生装置が複数存在する場合には、同一の楽曲データをそれら複数の再生装置それぞれにストリーム配信し、複数の再生装置で同一の楽曲を同時に再生することが可能である。また、再生装置１００はサーバ装置２００に対して楽曲データの送信を要求し、その要求に応じてサーバ装置２００から送信されてくる楽曲データを受信して再生することも可能である。
【００３５】
［１−２.音量制御装置の構成］
図２Ａは、本技術に係る音量制御装置４００の構成を示すブロック図である。また、図２Ｂは音量制御装置４００の機能を備える端末装置３００の構成を示すブロック図である。さらに、図３Ａおよび図３Ｂは、端末装置３００の外観構成を示す図である。端末装置３００は平面視略長方形で薄型のいわゆるタブレット型端末として構成されている。
【００３６】
音量制御装置４００は、ユーザ情報検出部４０１、同調判定部４０２および音量制御部４０３から構成されている。ユーザ情報検出部４０１は楽曲を聴取するユーザに関する情報であるユーザ情報を検出するものである。検出されたユーザ情報は同調判定部４０２に供給される。ユーザ情報検出部４０１は、具体的には例えば加速度センサ、マイクロホンなどにより構成される。ユーザ情報とはユーザが発する振動、音声などである。
【００３７】
同調判定部４０２は、ユーザ情報検出部４０１から供給されたユーザ情報と、サーバ装置２００など外部から供給された楽曲解析情報とが同調しているか否かを判定するものである。同調判定部４０２による判定結果は音量制御部４０３に供給される。同調判定部４０２により行われる同調判定処理の詳細について後述する。
【００３８】
音量制御部４０３は、同調判定部４０２による判定結果に従って音量制御を行うための音量制御データを生成し、それを外部に出力する。同調判定部４０２によりユーザ情報と楽曲解析情報とが同調していると判定された場合には音量を上げるための音量制御データを生成する。一方、ユーザ情報と楽曲解析情報とが同調していないと判定された場合には音量を下げるための音量制御データを生成する。音量制御処理の詳細については後述する。
【００３９】
［１−３.端末装置の構成］
端末装置３００は、入力部３０１、表示部３０２、通信部３０３、記憶部３０４、振動信号処理部３０５、Ａ／Ｄ（Analog／Digital）変換部３０６、音声信号処理部３０７、制御部３０８、表示制御部３０９、楽曲再生制御部３１０、加速度センサ４０１Ａ、マイクロホン４０１Ｂ、同調判定部４０２および音量制御部４０３とから構成されている。
【００４０】
入力部３０１は、ユーザが端末装置３００への指示を入力するための入力手段である。本実施の形態において端末装置３００は、表示部３０２と一体に構成されたタッチスクリーン３０１Ａ、ホームボタン３０１Ｂおよび操作キー３０１Ｃ（これらは図３に示す。）を備える。さらに入力部３０１は、表示部とは別構成のタッチパネル、スイッチなどにより構成されるようにしてもよい。入力部３０１に対して入力がなされると、その入力に対応した制御信号が生成されて制御部３０８に出力される。そして、制御部３０８によりその制御信号に対応した演算処理や制御が行われる。
【００４１】
表示部３０２は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ(Plasma Display Panel)、有機ＥＬ(Electro Luminescence)パネルなどにより構成された表示手段である。表示部３０２には、端末装置３００の各種操作のメニューを表示するホーム画面、サーバ装置２００から送信された楽曲リスト情報に基づく楽曲のリスト、サーバ装置２００から送信された楽曲情報などが表示される。さらに、サーバ装置２００が記憶する、または端末装置３００自身が記憶する動画コンテンツ、画像コンテンツなども表示される。
【００４２】
さらに、表示部３０２には入力手段としてのタッチパネルにおけるソフトボタン、音量調整、コンテンツ選択などの個々の操作画面などのユーザインターフェース画像も表示される。
【００４３】
通信部３０３は、例えば、ＨＴＴＰ、ＴＣＰ／ＩＰなどのプロトコルに基づいて再生装置１００およびサーバ装置２００との通信を行うためのネットワークインターフェースである。通信部３０３を介して、楽曲情報、楽曲解析情報、音量制御データ、楽曲リスト情報、その他の各種データ、コマンドなどの送受信が行われる。サーバ装置２００から送信され、通信部３０３で受信した、再生中の楽曲の楽曲解析情報は同調判定部４０２に供給される。また、サーバ装置２００から送信され、通信部３０３で受信した、再生中の楽曲の楽曲情報は表示制御部３０９に供給される。
【００４４】
記憶部３０４は、ハードディスク、フラッシュメモリなどにより構成される大容量記憶媒体である。記憶部３０４は、端末装置３００を動作させるための各種データ、プログラム、コンテンツ、一時ファイルなどを記憶保持するものである。
【００４５】
加速度センサ４０１Ａは、音量制御装置４００におけるユーザ情報検出部４０１に相当するものであり、例えば、２軸または３軸の加速度センサにより構成されている。加速度センサ４０１Ａは、ユーザが端末装置３００に直接または間接的に与える振動の大きさを加速度として検出し、振動信号として振動信号処理部３０５に供給する。本実施の形態においては、加速度センサ４０１Ａが検出した振動がユーザ情報に相当する。本技術は、楽曲を聴取しているユーザが楽曲に合わせて体を揺らしたり、踊ったり、テーブルや端末装置３００を叩いたりすることにより発生する振動を検出し、その振動が楽曲に同調しているかを判定することにより再生音量の調整を行うものである。
【００４６】
振動信号処理部３０５は、供給された振動信号にＬＰＦ（Low Pass Filter）によるノイズ除去などの所定の信号処理を施して低周波成分の信号に変換する。変換された振動信号はＡ／Ｄ変換部３０６に供給される。Ａ／Ｄ変換部３０６は、アナログ振動信号をデジタル振動信号に変換するためＡ／Ｄコンバータである。振動信号はＡ／Ｄ変換部３０６によりＡ／Ｄ変換が施されて同調判定部４０２に供給される。
【００４７】
マイクロホン４０１Ｂは、ユーザが楽曲に合わせて口ずさむ歌声、鼻歌、楽曲に合わせた手拍子など、ユーザが発する音声を取得するための音声入力手段である。マイクロホン４０１Ｂは、ユーザ情報検出部４０１に相当するものである。また、マイクロホン４０１Ｂが検出したユーザが発した音声もユーザ情報に相当する。マイクロホン４０１Ｂに入力された音声はアナログ音声信号に変換されて音声信号処理部３０７に供給される。音声信号処理部３０７は、例えば、増幅処理を施してアナログ音声信号を増幅させるなどしてアナログ音声信号をＡ／Ｄ変換部３０６に供給する。アナログ音声信号はＡ／Ｄ変換部３０６によりＡ／Ｄ変換が施されて同調判定部４０２に供給される。
【００４８】
端末装置３００は、ユーザによって操作されるものであり、その寸法および重量は、ユーザが片手または両手で持つことができ、また、膝の上の置いた状態で操作を行うことができる程度のものが望ましい。そのような寸法および重量の場合、ユーザが立っている場合には「手に持つ」、ユーザが座っている場合には「膝の上に置く」、または、「自身の周囲に置く」場合が多いと考えられる。したがって、端末装置３００が加速度センサ４０１Ａ、マイクロホン４０１Ｂなどのユーザ情報検出部４０１を備えることにより、ユーザが発する振動、音声を検出することが可能となる。なお、図２Ｂにおいては端末装置３００は、ユーザ情報検出部４０１として加速度センサ４０１Ａおよびマイクロホン４０１Ｂを備えているが、いずれか一方のみを備えているという構成でもよい。
【００４９】
制御部３０８は、例えばＣＰＵ、ＲＡＭおよびＲＯＭなどから構成されている。ＲＯＭには、ＣＰＵにより読み込まれるプログラムが格納されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに格納されているプログラムに基づき様々な処理を実行することによって端末装置３００全体の制御を行う。また、制御部３０８は、所定のプログラムを実行することにより、同調判定部４０２、音量制御部４０３、表示制御部３０９および楽曲再生制御部３１０として機能する。
【００５０】
同調判定部４０２は、Ａ／Ｄ変換部３０６から供給されたユーザ情報である振動信号または／および音声信号に基づいて、ユーザが発した振動または／および音声と再生されている楽曲のビート情報が同調しているか否かの判定（以下、同調判定処理と称する。）を行う。同調判定部４０２による判定結果は音量制御部４０３に供給される。同調判定処理の詳細については後述する。
【００５１】
音量制御部４０３は、同調判定部４０２による同調判定結果に基づいて、再生装置１００における再生音量の制御を行うものである。音量制御部４０３は、同調判定部４０２による同調判定結果に基づいて音量制御データを生成する。その音量制御データは通信部３０３を介して再生装置１００に送信される。そして、その音量制御データに基づいて再生装置１００の音量調整部１０４Ａによって音量の調整が行われる。音量制御処理の詳細については後述する。なお、音量制御データを記憶部３０４に記憶するようにしてもよい。記憶部３０４に記憶した音量制御データを参照することにより、音量が楽曲再生開始時からどのくらい変化したか、音量制御の履歴、などを把握することができる。
【００５２】
楽曲再生制御部３１０は、入力部３０１を介して入力されたユーザの楽曲選択入力に対応した楽曲のストリーム配信をサーバ装置２００に指示するための楽曲再生指示コマンドを生成する。楽曲再生指示コマンドは通信部３０３を介して端末装置３００からサーバ装置２００に送信される。
【００５３】
表示制御部３０９は、表示部３０２を制御して、楽曲リスト情報に基づくリスト表示、楽曲情報に基づく楽曲情報表示などを行う。また、入力部３０１からの入力制御信号に対応したユーザインターフェース画像、各種の画像やデータを表示させる。
【００５４】
また、図示はしないが、端末装置３００はジャイロセンサを備えるようにしてもよい。ジャイロセンサは、端末装置３００の傾き角、回転角度などを検出する。ジャイロセンサによって検出された傾き角情報などに基づいて制御部３０８により表示部３０２に表示される画面の回転処理などが行われる。
【００５５】
図３Ａおよび図３Ｂは、本実施の形態に係る端末装置３００の外観構成を示す図である。本実施の形態においては、端末装置３００はタッチスクリーン３０１Ａを備え、ユーザが指などで様々な入力操作を行うことができるいわゆるタブレット型端末として構成されている。上述したように、端末装置３００の寸法および重量は、ユーザが片手または両手で持つことができ、また、膝の上の置いた状態で操作を行うことができる程度のものである。
【００５６】
端末装置３００は略中央に、入力部３０１としてのタッチパネルと表示部３０２が一体的に構成されたタッチスクリーン３０１Ａを備える。タッチスクリーン３０１Ａにはホーム画面、楽曲情報画面、音量調整用画面、サーバ装置２００に記憶されている楽曲をユーザに提示する楽曲選択画面などが表示される。また、サーバ装置２００または端末装置３００自身が記憶する動画コンテンツ、画像コンテンツなども表示される。
【００５７】
図３Ａはタッチスクリーン３０１Ａに表示される再生楽曲情報表示画面兼音量調整用画面の一例を示すものである。図３Ａに示すように、楽曲再生中には、再生中の楽曲の情報（アーティスト名、アルバム名、曲名など）、再生位置を示すスライダ、音量調整用の入力手段である音量調整スライダ３５０などが表示される。
【００５８】
図３Ａに示す例では、ユーザは、音量調整スライダ３５０上に重畳して表示されているツマミ３５１に指を接触させ、接触を維持した状態で右方向にスライドさせることで再生装置１００における音量を大きくし、左方向へスライドさせることにより音量を小さくすることができる。このスライド動作による音量調整は、音量制御部４０３によってツマミ３５１の移動に対応する音量制御データが生成され、その音量制御データが再生装置１００に送信されることにより行われる。
【００５９】
なお、コンテンツ再生システム１においては、端末装置３００に表示される再生音量と、再生装置１００における再生音量とは同期するようにするとよい。すなわち、再生装置１００と端末装置３００とは常時ネットワークを通じて通信を行うことにより、端末装置３００における音量制御に応じて再生装置１００における音量が変化する。また、再生装置１００側で音量調整が行われた場合、その再生装置１００側で行われた音量調節に同期して端末装置３００の音量表示も変更される。これにより、端末装置３００側で常に再生装置１００の再生音量を把握することができる。
【００６０】
図３Ｂは、タッチスクリーン３０１Ａに表示される楽曲選択画面の一例を示すものである。楽曲選択画面においては、サーバ装置２００に記憶されているコンテンツである楽曲のリストが表示される。なお、楽曲の表示態様としてはツリー構造表示、アイコン表示、カラム表示などがあり、ユーザがいずれかの表示態様を選択できるようにするとよい。この表示は、サーバ装置２００から送信された楽曲リスト情報に基づいて表示制御部３０９の制御のもと行われる。
【００６１】
そして、ユーザが所望の楽曲の表示位置に対して指を接触させて入力を行うことにより、その入力に対応する楽曲再生指示コマンドが楽曲再生制御部３１０で生成され、通信部３０３を介してサーバ装置２００に送信される。これにより、サーバ装置２００から再生装置１００へのストリーム配信が行われる。
【００６２】
例えば、ユーザが所望の楽曲の表示位置に対してタップ入力を行うことにより、楽曲選択入力が行われる。また、ユーザが所望の楽曲の表示位置に対してダブルタップ入力を行うことに楽曲再生指示の入力が行われる。タップ入力とは、ユーザの指などを操作面上に短時間１回だけ接触させる入力動作である。ダブルタップ入力とは、指などを操作面上に短い間隔で連続して２回接触させる入力動作である。これらは主に決定の入力などに用いられる。ただし、タッチスクリーンにおける入力操作はこれらに限られるものではない。
【００６３】
ホームボタン３０１Ｂは、端末装置３００が備える機能、アプリケーション、各種操作のメニューなどを並べて表示するいわゆるホーム画面の表示を指示するため入力手段である。ホームボタン３０１Ｂがユーザにより押下された場合には、端末装置３００がどのような動作を行っていてもタッチスクリーン３０１Ａにはホーム画面が表示される。
【００６４】
操作キー３０１Ｃは例えば、タッチスクリーン３０１Ａに表示されるカーソルの移動などに用いられる。上述したタッチパネル、ホームボタン３０１Ｂ、十字キーは図２のブロック図における入力部３０１に相当するものである。なお、端末装置３００の入力部３０１は、図３に示す例に限られず、タッチスクリーン３０１Ａのみを有し、一切の物理ボタンを排除した構成としてもよい。逆に、複数の物理ボタンを備え、入力操作の全てを物理ボタンで行うようにしてもよい。
【００６５】
さらに、端末装置３００は音声入力手段としてのマイクロホン４０１Ｂを備える。マイクロホン４０１Ｂはユーザ情報検出部４０１に相当するものである。マイクロホン４０１Ｂにより端末装置３００を使用するユーザの歌声、鼻歌、手拍子などの音声を取得することができる。
【００６６】
［１−４.コンテンツ再生処理］
次に、図４を参照して、コンテンツ再生処理について説明する。図４はコンテンツ再生処理の流れを示すフローチャートである。図４に示す処理は端末装置３００の制御部３０８によって行われる。
【００６７】
まずステップＳ１０１で、楽曲選択入力がなされたか否かが判定される。選択入力がなされていない場合には選択入力がなされるまでステップＳ１０１の判定が繰り返される（ステップＳ１０１のＮｏ）。なお、選択入力時には、事前に楽曲の楽曲リスト情報をサーバ装置２００から受信し、図３Ｂに示すように楽曲のリストが端末装置３００の表示部３０２に表示されている。そして、選択入力はユーザが所望の楽曲の表示に対応する位置に指を接触させることにより行われる。
【００６８】
楽曲の選択入力がなされた場合（ステップＳ１０１のＹｅｓ）には、次にステップＳ１０２で、ユーザによる再生指示の入力がなされたか否かが判定される。再生指示入力がなされていない場合には再生指示入力がなされるまでステップＳ１０１の判定が繰り返される（ステップＳ１０２のＮｏ）。楽曲の再生指示入力がなされた場合には、処理はステップＳ１０３に進む（ステップＳ１０２のＹｅｓ）。なお、上述した楽曲の選択入力が再生指示入力を兼ねている仕様の場合にはステップＳ１０２の処理を行う必要はない。
【００６９】
次にステップＳ１０３で、選択された楽曲に対応する楽曲再生指示コマンドをサーバ装置２００に送信することにより、選択された楽曲のストリーム配信をサーバ装置２００に指示する。そして、楽曲再生指示コマンドを受信したサーバ装置２００から再生装置１００に対してストリーム配信が行われることにより、楽曲の再生が開始される。
【００７０】
次にステップＳ１０４で、端末装置３００はサーバ装置２００からストリーム配信指示を行った楽曲についての楽曲情報を取得する。上述したように、楽曲情報はネットワークを介してサーバ装置２００から送信され、端末装置３００はその楽曲情報を通信部３０３によって受信する。そして、ステップＳ１０５で表示部３０２における楽曲情報の表示が行われる。
【００７１】
次に、ステップＳ１０６で同調判定処理が行われる。また、ステップＳ１０７で音量制御処理が行われる。同調判定処理と音量制御処理とはマルチタスクで並列して行われるが、音量制御処理は同調判定処理の判定結果に基づいて行われる。
【００７２】
そして、ステップＳ１０８で楽曲の再生が終了したか否かが判定される。再生が終了していない場合（ステップＳ１０８のＮｏ）には処理はステップＳ１０６およびステップＳ１０７に戻り、楽曲の再生が終了するまで同調判定処理および音量制御処理が繰り返される。楽曲の再生が終了した場合には楽曲再生処理は終了となる（ステップＳ１０８のＹｅｓ）。
【００７３】
［１−５.同調判定処理］
次に、図５乃至図９に基づいて、コンテンツ再生処理のステップＳ１０６における同調判定処理について説明する。なお、以下、ユーザ情報が、ユーザが楽曲に合わせて体を揺らすことなどにより発する振動である場合を例にして説明を行う。まず、図５に基づいて同調判定処理の概要について説明する。図５の上段は、再生される楽曲の波形の一例である。波形に対応するように並んで表示されている実線は楽曲解析情報に含まれるビート情報を示すものである。具体的には、楽曲における小節または／および拍の位置を示すものである。図５の下段は縦軸を振動信号の大きさとし、横軸を楽曲の波形に対応する楽曲の再生時間として、ユーザ情報検出部４０１としての加速度センサ４０１Ａによって検出される振動信号を示すものである。
【００７４】
図５の（１）で示される範囲においては、振動信号は一定の間隔で発生しており、楽曲のビート情報と振動信号とが一致している。したがって、楽曲のビート情報と振動とは同調していると判定される。一方、（２）で示される範囲においては、振動は検出されているが、信号の発生はランダムであり、楽曲のビート情報と振動とが一致していない。よって、楽曲のビート情報と振動とは同調してないと判定される。また、（３）で示される範囲においては、振動は検出されていない。このように、同調判定処理においては、楽曲の楽曲解析情報に含まれるビート情報と振動信号とが一致しているか否かを判定することにより、楽曲とユーザが発する振動が同調しているか否かを判定する。
【００７５】
以下、同調判定処理の詳細について説明する。図６および図７は同調判定処理の流れを示すフローチャートである。同調判定処理は同調判定部４０２によって行われる。まず、ステップＳ２０１で、サーバ装置２００に対して再生指示を行った楽曲についての楽曲解析情報をサーバ装置２００から取得する。楽曲解析情報はサーバ装置２００からネットワークを介して端末装置３００に送信され、通信部３０３によって受信することにより取得する。
【００７６】
次にステップＳ２０２で、楽曲解析情報に基づいて、ビート情報とユーザが端末装置３００に与える振動とが一致しているかを判定するための判定ウィンドウの周期および幅を決定する。
【００７７】
ここで、図８を参照して判定ウィンドウについて説明する。図８の上段に示された波形は楽曲の波形の一部を拡大したものである。波形から下方向へ向けて延出する実線はビート情報で示される小節の先頭であり、波形から下方向へ向けて延出する破線はビート情報で示される拍の先頭である。また、図８の下段は小節の先頭および拍の先頭に対応するように設定された判定ウィンドウである。判定ウィンドウとは、ビート情報に基づいて、楽曲の各小節の先頭位置または／および各拍の先頭位置に対応するように設定される。
【００７８】
そして、判定ウィンドウは各小節および各拍の先頭位置に対応するとともに、所定の幅を有して設定される。この幅は時間で表される幅である。判定ウィンドウが存在しない区間はＭａｓｋ期間と称する。振動信号がこの判定ウィンドウ内にある場合には、楽曲とユーザが発する振動とは同調していると判定される。なお、判定ウィンドウの幅は曲の拍子に合わせて適宜設定される。例えば、４拍子における判定ウィンドウ幅を基準として、２拍子の曲の場合には基準の判定ウィンドウ幅よりも広めに設定し、８拍子の曲の場合には基準の判定ウィンドウ幅よりも狭く設定する、などである。判定ウィンドウは曲の先頭から終了まで全体に設定される。判定ウィンドウは特許請求の範囲における同調判定区間に相当するものである。
【００７９】
図６のフローチャートの説明に戻る。次にステップＳ２０３で、振動信号の入力が開始される。そしてステップＳ２０４で、楽曲再生の進行に伴い、楽曲の再生位置が１つの判定ウィンドウを通過したか否かが判定される。楽曲の再生位置が１つの判定ウィンドウを通過していない場合には、通過したと判定されるまでステップＳ２０４が繰り返される（ステップＳ２０４のＮｏ）。一方、楽曲の再生位置が１つの判定ウィンドウを通過したと判定された場合、処理はステップＳ２０５に進む（ステップＳ２０４のＹｅｓ）。
【００８０】
次にステップＳ２０５で、入力された振動信号においてピークが検出されたか否かが判定される。ステップＳ２０５でピークが検出された場合には処理はステップＳ２０６に進む（ステップＳ２０５のＹｅｓ）。そして、ステップＳ２０６で検出された振動信号のピークが、上述のステップＳ２０４で通過したと判定された判定ウィンドウ内に位置しているか否かが判定される。
【００８１】
ステップＳ２０６でピークが判定ウィンドウ内に位置していると判定された場合、処理はステップＳ２０７に進む（ステップＳ２０６のＹｅｓ）。次にステップＳ２０７で、判定ウィンドウ内に位置すると判定されたピークの値が所定の閾値以上であるか否かが判定される。ピークの値が閾値以下であると判定されたば場合、処理はステップＳ２０４に戻る（ステップＳ２０７のＮｏ）。そして、ステップＳ２０４からの処理が再び行われる。
【００８２】
なお、一度ステップＳ２０４で楽曲の再生位置が１つの判定ウィンドウを通過したと判定された（ステップＳ２０４のＹｅｓ）後に処理がステップＳ２０４に戻った場合は、時系列で次の判定ウィンドウについてステップＳ２０４以下の処理が行われる。
【００８３】
一方、ステップＳ２０７で、ピークの値が閾値以上であると判定された場合、処理はステップＳ２０８に進み、楽曲のビート情報とユーザが発する振動とは同調していると判定される（ステップＳ２０７のＹｅｓ）。
【００８４】
ここで、図９を参照して、楽曲のビート情報とユーザが発する振動とが同調していると判定される場合について説明する。図９Ａに示す状態は、振動信号のピークの値が判定ウィンドウ内に位置しており、同調していると判定される場合である。一方、図９Ｂはピークの値が閾値を超えてはいるが、判定ウィンドウ内に位置していないため、同調していないと判定される場合である。また、図９Ｃはピーク値が閾値以下であるため同調していないと判定される場合である。
【００８５】
図６のフローチャートの説明に戻る。次にステップＳ２０９で連続カウンタの値に１を加える（＋１を行う）。この連続カウンタは、「同調している」と判定された回数をカウントするためのものである。次にステップＳ２１０で不連続カウンタをクリアする。この不連続カウンタは連続して「同調していない」と判定された回数をカウントするためのものである。後述するように、本実施の形態においては、所定の回数連続して「同調していない」と判定された場合に、再生音量を下げる。したがって、「同調している」と判定された場合には、連続して「同調していない」と判定された回数をカウントする不連続カウンタの値をクリアする必要がある。
【００８６】
次にステップＳ２１１で、連続カウンタの値が所定の値に達したか否かが判定される。連続カウンタの値が所定の値に達したと判定された場合、処理はステップＳ２１２に進む（ステップＳ２１１のＹｅｓ）。連続カウンタの値が所定の値に達した、とは、予め定められた所定の回数連続して「同調している」と判定されたことを意味する。そして、ステップＳ２１２で同調判定部４０２は音量制御部４０３に対して、再生音量を上げるよう指示（音量アップ指示）を行う。
【００８７】
一方、ステップＳ２１１で連続カウンタの値が所定の回数に達していないと判定された場合、音量制御部４０３に対して音量を上げる指示は行われず、処理は２１３に進む（ステップＳ２１１のＮｏ）。そして、ステップＳ２１３で楽曲の再生が終了したか否かが判定される。楽曲の再生が終了している場合には同調判定処理は終了となる（ステップＳ２１３のＹｅｓ）。一方、楽曲の再生が終了していない場合には処理はステップＳ２０４に戻る。
【００８８】
次に、ステップＳ２０５において、入力された振動信号においてピークが検出されなかった場合（ステップＳ２０５のＮｏ）の処理について説明する。その場合、処理はステップＳ２１４に進み、楽曲のビート情報とユーザが発する振動は同調していない、と判定される。同様に、ステップＳ２０６でピークが検出ウィンドウ内にない場合も処理はステップＳ２１４に進む（ステップＳ２０６のＮｏ）。上述したように、入力された振動信号においてピークが検出されなかった場合とは、図９Ｃに示すような状態である。また、ピークが検出ウィンドウ内にない場合とは図９Ｂに示すような場合である。
【００８９】
次にステップＳ２１５で、不連続カウンタの値に１を加える（＋１を行う）。不連続カウンタは、連続して「同調していない」と判定された回数をカウントするものである。
【００９０】
次にステップＳ２１６で、連続カウンタをクリアする。上述したように、連続カウンタ連続して「同調している」と判定された回数をカウントするものであるため、「同調していない」と判定された場合にはクリアする必要がある。次にステップＳ２１７で不連続カウンタの値が所定の値に達したか否かが判定される。不連続カウンタの値が所定の値に達したと判定された場合、処理はステップＳ２１８に進む（ステップＳ２１７のＹｅｓ）。そして、ステップＳ２１８で同調判定部４０２は音量制御部４０３に対して、再生音量を下げるよう指示（音量ダウン指示）を行う。
【００９１】
ステップＳ２１７で不連続カウンタの値が所定の値に達していないと判定された場合、音量ダウン指示は行われず、処理はステップＳ２１３に進み（ステップＳ２１７のＮｏ）、楽曲の再生が終了したか否かが判定される。楽曲の再生が終了している場合には同調判定処理は終了となる（ステップＳ２１３のＹｅｓ）。一方、楽曲の再生が終了していない場合には処理はステップＳ２０４に戻り、時系列で次の順番の判定ウィンドウについて同調判定処理が繰り返される。
【００９２】
以上のようにして同調判定処理が行われる。本実施の形態においては、連続カウンタの値が所定の値に達したと判定された場合にのみ音量を上げる処理が行われる。これは、偶然の一致によって「同調している」と判定された場合直ちに音量が上げられることを防止するためである。すなわち、通常、ユーザが楽曲に合わせて体を揺らすことなどによって生じる振動は一度ではなく複数回連続するものである。よって、一回「同調している」と判定されたのみでは音量は上げず、連続して「同調している」と判定された場合に、ユーザは楽曲に合わせてリズムをとっているとして音量を上げることとする。これにより、偶然によって同調している場合に音量が上がってしまうことを防止し、ユーザが音楽に合わせて振動を発しているということを的確に捉えることができる。
【００９３】
「同調していない」と判定される場合も同様である。すなわち、たとえ、ユーザが楽曲に合わせて体を揺らしていたとしても、それは常に正確に楽曲に合っているわけではない。したがって、一回「同調していない」と判定されたのみでは音量は下げず、所定の回数「同調していない」と判定された場合に、ユーザは楽曲に合わせてリズムをとっていないとして音量を下げることとする。
【００９４】
［１−６.音量制御処理］
次に、図１０および図１１に基づいて、コンテンツ再生処理のステップＳ１０７における音量制御処理について説明する。まず、図１０に基づいて音量制御処理の概要について説明する。図１０の上段は再生される楽曲データの波形である。波形に対応して表示されている実線は楽曲解析情報に含まれるビート情報を示すものである。具体的には楽曲における小節または／および拍の位置を示すものである。図１０の中段は、縦軸を振動信号の大きさとし、横軸を楽曲の波形に対応する楽曲の再生時間として、加速度センサ４０１Ａによって検出される振動信号を示すものである。さらに、図１０の下段は、縦軸を音量、横軸を曲の再生時間として、楽曲再生中における音量の変化を示すものである。
【００９５】
図１０において（１）で示される範囲は、楽曲再生開始時における音量（以下、初期音量と称する。）である。（２）で示される範囲においては、楽曲のビート情報と振動信号とが一致しているため、「同調している」と判定され、ユーザが楽曲に合わせて盛り上がっているとして再生音量が上げられていく。これにより、ユーザの盛り上がっている気持ちをさらに盛り上げることができる。また、楽曲聴取時のユーザの行動（踊っている、横になっている、会話をしている、など）を中断してリモートコントローラなどによって音量調節を手動で行うという煩わしさを解消することができる。
【００９６】
（３）で示される範囲においては、ビート情報と振動信号とが同調しているが、再生音量が上限に達しているため、音量は上げられておらず、音量は維持されている。（４）で示される範囲においては、ビート情報と振動信号とが同調していない。ビート情報と振動信号とが同調していない場合とは、ユーザの楽曲に合わせた盛り上がりがおさまった場合であると考えられるため、再生音量を下げる処理を行うとよい。ただし、（４）の範囲に示すように、ビート情報と振動信号とが同調しなくなった直後にから再生音量を下げるのではなく、再生音量を下げるまでに遅延期間を設けるようにするとよい。これにより、急激な音量変化を防止して、急激な音量の低下を防止してユーザに与える違和感を抑制することができる。この遅延期間については後述する。
【００９７】
（５）で示される範囲においては、ビート情報と振動信号とが同調していないため、再生音量が下げられている。徐々に下げていくことにより急激な音量変化を防止して、急激な音量の低下を防止してユーザに与える違和感を抑制することができる。（６）で示される範囲においては、再生音量が初期音量と等しくなったため、それ以上再生音量は下げられていない。なお、図１０に示す音量の遷移は説明を行うための一例であり、実際は再生される楽曲およびユーザによる振動などのユーザ情報により、音量には様々な変化が生じる。
【００９８】
次に、図１１のフローチャートに基づいて、音量制御処理の詳細について説明する。音量制御処理は音量制御部４０３によって行われる。まずステップＳ３０１で、楽曲再生開始時の音量である初期音量を取得する。次にステップＳ３０２で同調判定部４０２から音アップ指示または音量ダウン指示があったか否かが判定される。指示がない場合には指示があるまでステップＳ３０２の判定が繰り返される（ステップＳ３０２のＮｏ）。一方、指示があった場合には処理はステップＳ３０３に進む（ステップＳ３０２のＹｅｓ）。
【００９９】
次にステップＳ３０３で、同調判定部４０２からの指示が音量アップ指示であるか否かが判定される。指示が音量アップ指示である場合には処理はステップＳ３０４に進む（ステップＳ３０３のＹｅｓ）。そして、ステップＳ３０４で現在の楽曲の再生状態における音量が再生装置１００における上限に達しているか否かが判定される。ここで、再生装置１００における音量の上限は実際に再生装置１００において調整することができる物理的な上限値よりも若干低く設定するとよい。例えば、物理的な上限値の８０％とする。
【０１００】
一般的に、テレビジョン受像機、ドックスピーカなどの再生装置１００における再生音量の上限はユーザが苦痛なく聴取することができる音量を超えている場合が多い。したがって、ステップＳ３０４の判定における音量の上限を物理的な上限よりも低く設定することにより、ユーザが苦痛なく聞ける限度を超えて再生音量が大きくなることを防ぐことができる。また、上限値はユーザが任意に設定できるようにしてもよい。設定された音量の上限値は端末装置３００の記憶部に記憶され、ステップＳ３０４の処理を行う際に参照される。
【０１０１】
再生音量が上限に達していないと判定された場合、処理はステップＳ３０５に進む（ステップＳ３０４のＮｏ）。ステップＳ３０５で再生音量を上げるための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００における再生音量が上げられる。
【０１０２】
なお、一回の処理における再生音量の上げ幅は予めデフォルトとして設定しておくとよい。例えば、再生装置１００が再生音量が段階的に調整される仕様である場合には、一回の処理において１段階音量を上げる、などである。ただし、再生音量の上げ幅をユーザが任意に設定できるようにしてもよい。音量の上げ幅は、上述した段階的なものに限られず、具体的なデシベル（ｄＢ）値で設定してもよい。
【０１０３】
一方、ステップＳ３０４において現在の楽曲の再生状態における音量が再生装置１００における上限に達していると判定された場合、ステップＳ３０５における音量を上げる処理は行われない（ステップＳ３０４のＹｅｓ）。
【０１０４】
説明はステップＳ３０３に戻る。ステップＳ３０３で同調判定部４０２からの音量指示が音量アップ指示ではないと判定された場合、処理はステップＳ３０６に進む（ステップＳ３０３のＮｏ）。指示が音量アップ指示ではないと判定された場合とはすなわち、指示が音量ダウン指示である場合である。
【０１０５】
次にステップＳ３０６で、一つ前の音量指示が音量アップ指示であったか否かが判定される。そして、一つ前の音量指示が音量アップ指示であった場合には処理はステップＳ３０７に進み、ウェイトカウンタの値に１を加える（＋１を行う）（ステップＳ３０６のＹｅｓ）。次にステップＳ３０８で、ウェイトカウンタの値が所定の値に達したか否かが判定される。ウェイトカウンタと比較する所定の値は例えば１０回に設定される。ウェイトカウンタの値が所定の値に達したと判定された場合処理はステップＳ３０９に進む（ステップＳ３０８のＹｅｓ）。
【０１０６】
次に、ステップＳ３０９で現在の再生装置１００における音量が初期音量以上であるか否かが判定される。音量が初期音量以上であると判定された場合（ステップＳ３０９のＹｅｓ）、処理はステップＳ３１０に進み、再生音量を下げるための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００における再生音量が下げられる。
【０１０７】
なお、一回の処理における再生音量の下げ幅は予めデフォルトとして設定しておくとよい。例えば、再生装置１００が再生音量が段階的に調整される仕様である場合には、一回の処理において１段階音量を下げるなどである。ただし、再生音量の下げ幅をユーザが任意に設定できるようにしてもよい。音量の下げ幅は、上述した段階的なものに限られず、具体的なデシベル（ｄＢ）値で設定してもよい。
【０１０８】
一方、ステップＳ３０９で現在の再生音量が初期音量以上ではないと判定された場合（すなわち、再生音量が初期音量と等しい、または初期音量よりも低い）には音量制御データは生成されない（ステップＳ３０９のＮｏ）。このように本実施の形態においては再生音量を初期音量以下に下げないように処理を行う。
【０１０９】
説明はステップＳ３０８に戻る。ステップＳ３０８でウェイトカウンタの値が所定の値に達していないと判定された場合、ステップＳ３０９およびステップＳ３１０による音量を下げる処理は行われない（ステップＳ３０８のＮｏ）。このように、本実施の形態においては、ウェイトカウンタが所定の値に達している、すなわち、所定の回数連続して音量ダウン指示があった場合に限り、音量を下げるようにしている。これにより、同調判定部４０２から誤って音量ダウン指示が出された場合にその指示に従い再生音量を下げてしまうこと、頻繁に交互に音量アップ／ダウンが繰り返されることを防止することができる。
【０１１０】
また、音量ダウンは音量アップに比べて時間をかけて行われることとなり、初回の音量ダウンの指示から実際に音量が下げるまでに遅延期間が生じる。これにより、急激な音量の低下を防止してユーザに与える違和感を抑制することができる。
【０１１１】
説明はステップＳ３０６に戻る。一つ前の音量指示が音量アップ指示ではないと判定された場合、ステップＳ３０７およびステップＳ３０８の処理は行われず、ステップＳ３０９に進む（ステップＳ３０６のＮｏ）。そして、ステップＳ３０９およびステップＳ３１０で音量ダウンを行うための音量制御データの生成および送信が行われる。
【０１１２】
上述したように、ステップＳ３０７およびステップＳ３０８は交互に音量アップ／ダウンが繰り返されることなどを防止するための処理であるため、一つ前の音量指示が音量アップ指示ではないと判定された場合、すなわち、音量ダウン指示が連続でなされた場合には行う必要はない。
【０１１３】
次に処理はステップＳ３１１に進む。ステップＳ３１１ではユーザにより意図的に音量調整がなされたか否かが判定される。これは例えば、端末装置３００における音量調整手段である音量調整スライダ３５０に対するユーザの操作がなされたか否かにより判断する。ステップＳ３１１でユーザにより意図的に音量調整がなされたと判定された場合、処理はステップＳ３１２に進む（ステップＳ３１１のＹｅｓ）。そしてステップＳ３１２で、ユーザが指定する音量にするための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００の再生音量は、ユーザが指定した再生音量に変更される。
【０１１４】
ユーザが意図的に音量調整を行う場合、例えば、急な来客があった場合などに上述の処理が行われることによって、楽曲の再生音量がユーザの邪魔になることがない。
【０１１５】
そして、ステップＳ３１３で楽曲再生が終了したか否かが判定される。楽曲再生が終了した場合には音量制御処理は終了となる。一方、楽曲再生が終了していない場合には処理はステップＳ３０２に戻り、音量制御処理が引き続き行われる。
【０１１６】
以上、本技術の第１の実施の形態においては、再生される楽曲のビート情報とユーザ情報とが同調しているか否かが判定される。そして同調している場合には再生音量を上げるように制御を行う。これにより、ユーザが楽曲に合わせて盛り上がっている場合に再生音量を上げて、ユーザの盛り上がっている気持ちをさらに高めることができる。また、楽曲聴取時のユーザの行動（踊っている、横になっている、会話をしている、など）を中断して音量調節を手動で行うという煩わしさを解消することができる。
【０１１７】
一方、楽曲のビート情報とユーザ情報とが同調してない場合には再生音量を下げるように制御を行う。これにより、ユーザの盛り上がりがおさまった場合には、ユーザの盛り上がりに対応して大きくなっていた再生音量を適切な音量に抑えることができる。この場合も、楽曲聴取時のユーザの行動（踊っている、横になっている、会話をしている、など）を中断して音量調節を手動で行うという煩わしさを解消することができる。
【０１１８】
なお、上述の説明では、ユーザ情報がユーザが発生させる振動である場合を例にして説明を行ったが、ユーザ情報がユーザが発する歌声、鼻歌、手拍子などの音声であっても上述の処理と同様の処理により、音量制御処理を行うことができる。
【０１１９】
カラオケやパーティなどにおいて複数のユーザが楽曲を聴いている場合、楽曲に合わせて複数のユーザが手拍子や掛け声を行い、楽曲が聴きにくくなってしまう場合がある。ユーザ情報として音声を利用することにより、そのような場合においても、ユーザの手拍子や掛け声が楽曲に一致している（同調している）場合には楽曲の音量を上げるため、楽曲を聴きやすくすることができる。この際も音量調整を手動で行う必要はないため、楽曲を聴いて盛り上がっている気分を害することはない。
【０１２０】
＜２．第２の実施の形態＞
［２−１.音量制御処理］
以下、この発明の第２の実施の形態について説明を行う。なお、音量制御装置４００、並びにコンテンツ再生システム１を構成する再生装置１００、サーバ装置２００、端末装置３００の構成は第１の実施の形態と同様であるため、その説明を省略する。図１２は第２の実施の形態における音量制御処理の流れを示すフローチャートである。図１２において第１の実施の形態における音量制御処理と同一の処理については同一の符号を付してその説明を省略する。図１２に示す第２の実施形態のフローチャートは、ステップＳ４０１およびステップＳ４０２を有する点で第１の実施形態のフローチャートと異なっている。
【０１２１】
第２の実施の形態においては、楽曲解析情報に含まれるサビ情報に基づき、同調判定部４０２からの音量指示があった時点における楽曲の再生位置がサビ部分である場合には、再生位置がサビ部分以外である場合に比べて音量の上げ幅を大きくする。
【０１２２】
ステップＳ３０１乃至ステップＳ３０３は第１の実施の形態と同様であるため説明を省略する。ステップＳ３０４で現在の楽曲の再生状態における音量が再生装置１００における上限に達しているか否かが判定される。音量が上限に達していないと判定された場合処理はステップＳ４０１に進む（ステップＳ３０４のＮｏ）。そして、ステップＳ４０１で、同調判定部４０２からの音量指示があった時点における楽曲の再生位置がサビ部分であるか否かが判定される。再生位置がサビ部分であるか否かは、楽曲解析情報に含まれるサビ情報を参照することにより行うことができる。
【０１２３】
ステップＳ４０１で再生位置がサビ部分であると判定された場合、処理はステップＳ４０２に進む（ステップＳ４０１のＹｅｓ）。そして、ステップＳ４０２で再生音量を上げるための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００における再生音量が上げられる。
【０１２４】
再生位置がサビ部分である場合における再生音量の上げ幅は、再生位置がサビ部分以外である場合における上げ幅よりも大きく設定する。例えば、再生装置１００において再生音量が段階的に調整され、サビ以外の部分における再生音量の上げ幅が１段階である場合には、サビ部分における再生音量の上げ幅はその倍の２段階にする、などである。ただし、ユーザが任意に設定することができるようにしてもよい。また、音量の上げ幅は、上述した段階的なものに限られず、具体的なデシベル（ｄＢ）値で設定してもよい。サビ以外の部分における再生音量の上げ幅が１０ｄＢである場合には、サビ部分における再生音量の上げ幅は２０ｄＢにする、などである。
【０１２５】
サビ部分は一般的に楽曲において最も盛り上がる部分である。したがって、サビ部分における再生音量の上げ幅をサビ以外の部分に比べて大きく設定することにより、ユーザの気分の盛り上がりをより高めることができる。また、サビ部分は楽曲において最も盛り上がる部分であるため、ユーザの手拍子や掛け声はサビ以外の部分に比べて大きくなると考えられる。そうすると、サビ部分においてはサビ以外の部分に比べて楽曲が聴きとりにくくなるおそれがある。そこで、サビ部分における再生音量の上げ幅が大きくすることにより、サビ部分において楽曲が聴きとりにくくなることを防止することができる。
【０１２６】
＜３．変形例＞
以上、本技術の一実施の形態について具体的に説明したが、本技術は上述の実施形態に限定されるものではなく、本技術の技術的思想に基づく各種の変形が可能である。
【０１２７】
上述の実施の形態では、ユーザ情報として加速度センサにより検出した振動を用いたが、マイクロホンにより取得したユーザが発した音声でも同様に音声制御処理を行うことができる。また、加速度センサにより検出した振動とマイクロホンにより取得した音声の両方を用いて音声制御処理を行うことも可能である。
【０１２８】
例えば、ユーザ情報検出部４０１として、映像の撮影を行うことができるカメラを用い、楽曲を聴取しているユーザを撮影する。そして、撮影により取得した映像からユーザの表情、動きを検出して、その検出結果に基づいて再生音量制御を行うようにしてもよい。
【０１２９】
具体的には、映像から公知の技術に基づく表情検出を行い、ユーザが笑顔である場合には再生音量を上げる、映像からユーザの動きを検出し、動きと楽曲のビートに一致し同調している場合には再生音量を上げる、などである。なお、ユーザ情報検出部４０１としてのカメラは端末装置３００自身が備えるようにしてもよいし、単体のカメラとして構成し、ネットワークを介してコンテンツ再生システム１に接続するようにしてもよい。
【０１３０】
また、実施の形態においては、サーバ装置２００が楽曲解析情報を生成するとして説明を行った。しかし、端末装置３００が楽曲解析を行うためのソフトウェアなどを備え、サーバ装置２００から端末装置３００に楽曲データを送信し、端末装置３００において楽曲解析情報を生成してもよい。
【０１３１】
また、図１においてコンテンツ再生システム１は、再生装置１００、サーバ装置２００および端末装置３００とから構成されているが、コンテンツ再生システムはそのような構成に限られるものではない。楽曲データなどのコンテンツを記憶し、再生装置に対してストリーム配信を行う端末装置と、スピーカなどのよりコンテンツ再生を行う再生装置とでコンテンツ再生システムを構成するようにしてもよい。
【０１３２】
また、本技術に係る音量制御装置はコンテンツ再生システムを構成する端末装置などに適用される場合に限られず、装置単体でコンテンツを記憶し、そのコンテンツを再生することができる装置に対しても適用可能である。
【０１３３】
また、第１および第２の実施の形態はコンテンツが楽曲である場合を例にして説明を行った。しかし、コンテンツは楽曲に限られるものではなく、音声を含む映像コンテンツであってもよい。例えば、ミュージシャンのライブ映像などのコンテンツに本技術を適用しても上述した実施の形態と同様の効果を奏することができる。
【０１３４】
上述の説明においてはコンテンツ再生システムの一例としてホームネットワークシステムを例にして説明を行った。しかし、本技術に係るコンテンツ再生システムは、ホームネットワークシステムに限らず、カラオケルーム、パーティ会場などにおけるコンテンツ再生システムとしても用いることができる。
【０１３５】
また、本技術は音量制御の他にも、コンテンツ再生システムを利用している室内の照明の明るさ、色、点滅周期などの調整に適用することも可能である。
【０１３６】
なお、本技術は以下のような構成も取ることができる。
【０１３７】
（１）コンテンツを利用するユーザに関するユーザ情報を検出するユーザ情報検出部と、前記コンテンツの楽曲解析情報と、前記ユーザ情報検出部により検出された前記ユーザ情報とが同調しているか否かを判定する同調判定部と、該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部とを備える音量制御装置。
【０１３８】
（２）前記ユーザ情報検出部は加速度センサを備え、前記ユーザ情報は前記ユーザが発する振動であり、前記コンテンツは楽曲であり、前記楽曲解析情報は前記楽曲のビート情報を含み、前記同調判定部は、前記振動と前記ビート情報とが一致しているか否かを判定する前記（１）に記載の音量制御装置。
【０１３９】
（３）前記音量制御部は、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行う前記（１）または（２）に記載の音量制御装置。
【０１４０】
（４）前記音量制御部は、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していないと判定された場合には前記コンテンツの再生音量を下げるよう制御を行う前記（１）乃至（３）のいずれかに記載の音量制御装置。
【０１４１】
（５）前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していると判定した場合に、前記ユーザ情報と前記解析情報とは同調しているとする判定結果を前記音量制御部に供給する前記（１）乃至（４）のいずれかに記載の音量制御装置。
【０１４２】
（６）前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していないと判定した場合に、前記ユーザ情報と前記解析情報とは同調していないとする判定結果を前記音量制御部に供給する前記（１）乃至（５）のいずれかに記載の音量制御装置。
【０１４３】
（７）前記音量制御部は、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行い、
前記コンテンツの再生位置がサビ部分である場合において、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合には、前記サビ部分以外において前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合における前記再生音量の上げ幅に比べて大きく前記再生音量を上げるよう制御を行う前記（１）乃至（６）のいずれかに記載の音量制御装置。
【０１４４】
（８）前記音量制御部は、前記再生音量が前記コンテンツの再生開始時における音量以上である場合において前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していないと判定された場合にのみ前記コンテンツの再生音量を下げるよう制御を行う前記（４）に記載の音量制御装置。
【０１４５】
（９）前記同調判定部は、前記ビート情報に対応して同調判定領域を設定し、前記振動と前記同調判定領域とが所定の回数一致した場合に前記ユーザ情報と前記楽曲解析情報とが同調していると判定する前記（１）乃至（８）のいずれかに記載の音量制御装置。
【０１４６】
（１０）前記同調判定部は、前記ビート情報に対応して同調判定領域を設定し、前記振動と前記同調判定領域とが所定の回数一致しなかった場合に前記ユーザ情報と前記楽曲解析情報とが同調していないと判定する前記（１）乃至（８）のいずれかに記載の音量制御装置。
【０１４７】
（１１）前記音量制御部は、前記再生音量が所定の音量に達している場合には該再生音量を上げないように制御を行う前記（１）乃至（１０）のいずれかに記載の音量制御装置。
【０１４８】
（１２）前記音量制御部は、前記ユーザの操作入力を受け付ける入力部に対して前記再生音量を調整する入力が行われた場合には、前記同調判定部による判定結果に関わらず、前記ユーザの入力に従った音量制御を行う前記（１）乃至（１１）のいずれかに記載の音量制御装置。
【０１４９】
（１３）前記ユーザ情報検出部はマイクロホンを備え、前記ユーザ情報は前記ユーザが発する音声であり、前記コンテンツは楽曲であり、前記楽曲解析情報は前記コンテンツのビート情報を含み、前記同調判定部は、前記音声と前記ビート情報との一致の度合いを判定することにより前記ユーザ情報と前記楽曲解析情報とが同調しているか否かを判定する前記（１）乃至（１２）のいずれかに記載の音量制御装置。
【０１５０】
（１４）コンテンツを利用するユーザに関する情報をユーザ情報として検出し、前記コンテンツの楽曲解析情報と、前記ユーザ情報とが同調しているか否かを判定し、前記同調度合いの判定結果に基づいて前記コンテンツの再生音量を制御する音量制御方法。
【０１５１】
（１５）音量制御装置と、該音量制御装置とネットワークを介して接続される再生装置とからなり、前記音量制御装置は、コンテンツを利用するユーザに関する情報を検出するユーザ情報検出部と、前記コンテンツの楽曲解析情報と、前記ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、該音量制御部による音量制御情報を前記再生装置に送信する第１の通信部とを備え、前記再生装置は、前記コンテンツを再生する再生処理部と、前記第１の通信部から送信された前記音量制御情報を受信する第２の通信部と該第２の通信部により受信した前記音量制御情報に基づいて前記コンテンツの再生音量を調整する音量調整部とを備えるコンテンツ再生システム。
【符号の説明】
【０１５２】
１・・・・・・コンテンツ再生システム
１００・・・・再生装置
１０４Ａ・・・音量調整部
３００・・・・端末装置
４００・・・・音量制御装置
４０１・・・・ユーザ情報検出部
４０２・・・・同調判定部
４０３・・・・音量制御部
３０１・・・・入力部
３０８・・・・制御部
３０２・・・・表示部
３０３・・・・通信部
３０４・・・・記憶部
４０１Ａ・・・加速度センサ
４０１Ｂ・・・マイクロホン
【技術分野】
【０００１】
本技術は、音量制御装置、音量制御方法およびコンテンツ再生システムに関し、詳しくは、コンテンツを利用するユーザの行動がコンテンツと同調しているか否かに応じてコンテンツの再生音量を調整する音量制御装置、音量制御方法およびコンテンツ再生システムに関する。
【背景技術】
【０００２】
近年、ユーザは、ＣＤ（Compact Disc）などに収録された、またはインターネットを介してダウンロードした楽曲などのいわゆる音楽コンテンツ、映画やコンサート映像などの映像コンテンツ、カラオケなどの様々なコンテンツを一人、または複数人で楽しむことができる。しかし、コンテンツを利用する環境、コンテンツを利用するユーザの行動などによってはコンテンツの再生音量が適切ではなく、コンテンツを十分に楽しむことができない場合がある。
【０００３】
そこで、カラオケ演奏を再生可能なカラオケ装置において、環境による影響を加味しつつコンテンツごとに適した音量の設定を自動的に行うカラオケ装置が提案されている（特許文献１）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−１７８６０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の技術は、カラオケ楽曲や映画等のコンテンツに適した再生音量として予め登録しておいた初期音量レベルに一致させるようにコンテンツの音量調整を行う。これにより、コンテンツごとに適した音量での再生を行うことができる。しかし、最適な再生音量としての初期音量レベルはコンテンツごとに予め設定されているため、カラオケやコンテンツを視聴しているユーザの状況（盛り上がりなど）によって、初期音量レベルを超える音量が必要になった場合であってもそれに対応することができない。
【０００６】
また、引用文献１に記載の技術は、カラオケやコンテンツの音声を音入力手段から入力し、その入力される音の音量レベルと、カラオケやコンテンツに対応する初期音量レベルとを比較することにより、音量の補正を行うものである。よって、あくまで再生される音量と予め定めた初期音量レベルに基づく補正であるため、カラオケ、コンテンツ視聴を行っているユーザの状況、行動などを直接的に音量に反映させることができない。
【０００７】
したがって、本技術の目的は、コンテンツを利用するユーザの状況、行動などを直接的に音量に反映させることができるよう、コンテンツを利用するユーザがコンテンツと同調しているか否かに応じてコンテンツの再生音量を制御する音量制御装置、音量制御方法およびコンテンツ再生システムを提供することにある。
【課題を解決するための手段】
【０００８】
上述した目的を達成するために、本技術は、コンテンツを利用するユーザに関するユーザ情報を検出するユーザ情報検出部と、コンテンツの楽曲解析情報と、ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、同調判定部による判定結果に基づいてコンテンツの再生音量を制御する音量制御部とを備える音量制御装置である。
【０００９】
また、コンテンツを利用するユーザに関する情報をユーザ情報として検出し、コンテンツの楽曲解析情報と、ユーザ情報とが同調しているか否かを判定し、同調度合いの判定結果に基づいてコンテンツの再生音量を制御する音量制御方法である。
【００１０】
さらに、音量制御装置と、音量制御装置とネットワークを介して接続される再生装置とからなり、音量制御装置は、コンテンツを利用するユーザに関する情報を検出するユーザ情報検出部と、コンテンツの楽曲解析情報と、ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、音量制御部による音量制御情報を前記再生装置に送信する第１の通信部とを備え、再生装置は、コンテンツを再生するコンテンツ再生部と、第１の通信部から送信された前記音量制御情報を受信する第２の通信部と第２の通信部により受信した前記音量制御情報に基づいて前記コンテンツの再生音量を調整する音量調整部とを備えるコンテンツ再生システムである。
【発明の効果】
【００１１】
本技術によれば、コンテンツを利用するユーザがコンテンツに同調しているか否かに応じてコンテンツの再生音量を調整することができる。
【図面の簡単な説明】
【００１２】
【図１】図１は、本技術に係る音量制御装置を備える端末装置を含むコンテンツ再生システムの構成を示す図である。
【図２】図２Ａは、音量制御装置の構成を示すブロック図であり、図２Ｂは音量制御装置を適用した端末装置の構成を示すブロック図である。
【図３】図３Ａおよび図３Ｂは、本技術に係る音量制御装置を備える端末装置の外観図である。
【図４】図４は、楽曲再生処理の流れを示すフローチャートである。
【図５】図５は、同調判定処理の概要を示す図である。
【図６】図６は、同調判定処理の流れを示すフローチャートである。
【図７】図７は、同調判定処理の流れを示すフローチャートである。
【図８】図８は、同調判定処理の詳細について説明するための図である。
【図９】図９は、同調判定処理の詳細について説明するための図である。
【図１０】図１０は、音量制御処理の概要を示す図である。
【図１１】図１１は、本技術の第１の実施の形態に係る音量制御処理の流れを示すフローチャートである。
【図１２】図１２は、本技術の第２の実施の形態に係る音量制御処理の流れを示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下、本技術の実施の形態について図面を参照しながら説明する。ただし、本技術は以下の実施例のみに限定されるものではない。なお、説明は以下の順序で行う。
＜１．第１の実施の形態＞
［１−１.コンテンツ再生システムの構成］
［１−２.音量制御装置の構成］
［１−３.端末装置の構成］
［１−４.コンテンツ再生処理］
［１−５.同調判定処理］
［１−６.音量制御処理］
＜２．第２の実施の形態＞
［２−１.音量制御処理］
＜３．変形例＞
【００１４】
＜１．第１の実施の形態＞
［１−１.コンテンツ再生システムの構成］
まず、図１を参照してコンテンツ再生システム１の構成について説明する。図１は、本技術に係る音量制御装置４００を備える端末装置３００を含むコンテンツ再生システム１の構成を示す図である。なお、本実施の形態においては、コンテンツとして音声ファイルによる楽曲を用いる場合を例にして説明を行う。
【００１５】
コンテンツ再生システム１は、ＤＬＮＡ（Digital Living Network Alliance）に基づいたホームネットワークシステムとして構成されている。コンテンツ再生システム１は、ＤＭＲ（Digital Media Renderer、ＤＭＰ：Digital Media Playerとも称する。）としての再生装置１００、コンテンツを記憶保持するＤＭＳ（Digital Media Server）としてのサーバ装置２００、システムのコントロールおよび音量制御処理を行うＤＭＣ（Digital Media Controller）としての端末装置３００とから構成されている。
【００１６】
ＤＭＲとしての再生装置１００は、例えば、テレビジョン受像機、パーソナルコンピュータ、ドックスピーカ、ネットワーク機能搭載アンプ、セットトップボックス、ＰｌａｙＳｔａｔｉｏｎ（株式会社ソニー・コンピュータエンタテインメントの登録商標）３などのエンタテインメント装置、などが挙げられる。
【００１７】
再生装置１００は、楽曲の再生処理を行う再生処理部１０１、音声の出力を行うスピーカ１０２、サーバ装置２００および端末装置３００との通信を行う通信部１０３、再生装置１００全体の制御を行う制御部１０４を少なくとも備える。また、映像、画像などを表示するための表示部を備えるようにしてもよい。
【００１８】
再生処理部１０１は、音声処理部、アンプ部などを含むものである。再生制御部１０１は、楽曲データに対してデコード処理などの所定の処理を施すとともに、アンプ部により増幅処理を施してスピーカ１０２に出力する。スピーカ１０２は音声出力手段であり、再生制御部１０１によって所定の処理が施された楽曲は最終的にスピーカ１０２から出力される。
【００１９】
通信部１０３は、例えば、ＨＴＴＰ（Hyper Text Transfer Protocol）、ＴＣＰ／ＩＰ(Transmission Control Protocol/Internet Protocol)などのプロトコルに基づいてサーバ装置２００および端末装置３００との通信を行うためのネットワークインターフェースである、本実施の形態においては、再生装置１００は、通信部１０３を介して、端末装置３００から送信される音量制御データなどを受信する。また、通信部１０３を介してサーバ装置２００からのコンテンツのストリームを受信する。
【００２０】
制御部１０４は、例えばＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）およびＲＯＭ（Read Only Memory）などから構成されている。ＲＯＭには、ＣＰＵにより読み込まれるプログラムが格納されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに格納されているプログラムに基づき様々な処理を実行することによって再生装置１００全体の制御を行う。また、制御部１０４は、所定のプログラムを実行することにより音量調整部１０４Ａとして機能する。音量調整部１０４Ａは、端末装置３００から送信された音量制御データに従い、再生装置１００における再生音量が音量制御データで示される音量となるように、スピーカ１０２からの出力レベルの調整を行う。
【００２１】
ＤＭＳとしてのサーバ装置２００は、大容量記憶媒体を備え、コンテンツ再生システム１によって再生される楽曲などのコンテンツデータを保存するものである。サーバ装置２００としては、例えば、ネットワークＨＤＤ（Hard Disc Drive）、パーソナルコンピュータ、ＨＤレコーダなどが挙げられる。本実施の形態において再生されるコンテンツである楽曲データはサーバ装置２００に記憶されている。
【００２２】
サーバ装置２００は、コンテンツを記憶する記憶部２０１、再生装置１００および端末装置３００との通信を行うための通信部２０２、サーバ装置２００全体の制御を行う制御部２０３を少なくとも備える。記憶部２０１は、例えば、ＨＤＤ、フラッシュメモリなどの大容量記憶媒体から構成されており、コンテンツ再生システム１によって再生される楽曲などのコンテンツデータを保存するものである。楽曲データは、ＷＡＶ（RIFF waveform Audio Format）形式、または、ＭＰ３（MPEG Audio Layer-3）、ＡＡＣ（Advanced Audio Coding）などの方式で音声圧縮された状態で記憶部２０１に記憶される。また、楽曲のアーティスト名、アルバム名、曲名、総再生時間、再生時間情報などを含む楽曲情報も楽曲データのメタデータとして記憶部２０１に保存されている。楽曲情報は例えば、ＣＤＤＢ(Compact Disc DataBase)を利用することにより取得することができる。また、ユーザが任意に設定できるようにしてもよい。さらに、記憶２０１が記憶する楽曲データをリスト化した楽曲リスト情報も保存されている。
【００２３】
通信部２０２は、例えば、ＨＴＴＰ、ＴＣＰ／ＩＰなどのプロトコルに基づいて再生装置１００および端末装置３００との通信を行うためのネットワークインターフェースによって構成されている。本実施の形態においては、サーバ装置２００は、通信部２０２を介して、端末装置３００からの楽曲再生指示コマンドを受信する。また、通信部２０２を介して再生装置１００に対してコンテンツのストリーム配信が行われる。
【００２４】
制御部２０３は、例えばＣＰＵ、ＲＡＭおよびＲＯＭなどから構成されている。ＲＯＭには、ＣＰＵにより読み込まれるプログラムが格納されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに格納されているプログラムに基づき様々な処理を実行してコマンドの発行を行うことによってサーバ装置２００全体の制御を行う。
【００２５】
また、制御部２０３は、所定のプログラムを実行することによりストリーム配信部２０３Ａおよびコンテンツ解析部２０３Ｂとして機能する。ストリーム配信部２０３Ａは、通信部２０２を介して受信した端末装置３００からの楽曲再生指示コマンドに従い、記憶部２０１に記憶された楽曲データを再生装置１００にストリーム配信するよう所定の処理を行う。
【００２６】
コンテンツ解析部２０３Ｂは、記憶部２０１に記憶している楽曲に対して、特開２００７−１５６４３４号公報などに記載された公知の楽曲波形解析方法に基づく処理を行う。これにより、楽曲データそれぞれについて、ＢＰＭ（Beat Per Minute）情報、ビート情報、ビート出現時刻情報、サビ情報などを含む楽曲解析情報を生成する。生成された楽曲解析情報はメタデータとして楽曲データと関連付けられて記憶部２０１に記憶される。なお、楽曲解析情報は、ユーザなどによりサーバ装置２００に新たな楽曲データが追加された時点でその楽曲データに対して解析処理を行って生成し記憶部２０１に記憶しておいてもよい。また、再生装置１００に対してストリーム配信を行う際に解析処理を行って生成してもよい。
【００２７】
ＢＰＭ情報とは、楽曲のテンポを示すものである。ビート情報は、楽曲における各小節の位置、各拍の位置などを示すものである。拍は、一定の時間的間隔をもって数えられるもので、小節の中での拍の位置によりアクセントの強弱（すなわち、強拍/弱拍）が生まれ、その組み合わせにより、各種の拍子が作られる。ビート出現時刻情報とは、楽曲において最初にビートが出現する時点の時刻であり、曲の先頭からの経過時間で表される。
【００２８】
また、サビとは楽曲における特徴部分であり、一般的に曲の最も盛り上がる部分のことを指す。サビ情報は楽曲の再生時間におけるサビ出現時刻、サビ部分の再生時間などを示す。サビ出現時刻とは、楽曲においてサビが出現する時刻であり、曲の先頭からの経過時間で表される。なお、１つの楽曲においてサビが複数回存在する場合にはすべてのサビについてのサビ情報が生成される。
【００２９】
ＤＭＣとしての端末装置３００は、例えば、タッチパネルを備え、ユーザが指などで様々な入力操作を行うことができるいわゆるタブレット型の端末装置である。端末装置３００としては他にもパーソナルコンピュータ、スマートフォン、携帯電話機、携帯ゲーム機などを用いてもよい、端末装置３００の詳細な構成については後述する。
【００３０】
本実施の形態のおいては、再生装置１００、サーバ装置２００および端末装置３００は、ＨＴＴＰ、ＴＣＰなどのプロトコルに基づき、無線ＬＡＮ（Local Area Network）、ＷＩ−ＦＩネットワーク（Wireless−Fidelity）などのネットワークを介して接続されており、相互に通信可能となっている。ただし、接続方法は無線に限らず有線接続でもよい。
【００３１】
サーバ装置２００からは、サーバ装置２００が記憶部２０１に記憶する楽曲データのリストを示す楽曲リスト情報が端末装置３００に送信される。端末装置３００側は受信した楽曲リスト情報に基づいて楽曲リストを表示する。ユーザは楽曲リストを参照して端末装置３００において楽曲の選択を行い、端末装置３００からサーバ装置２００に対して楽曲再生指示を行うことができる。
【００３２】
サーバ装置２００は端末装置３００からの楽曲再生指示に従い、再生装置１００に対して楽曲データのストリーム配信を行う。さらに、サーバ装置２００は楽曲データのストリーム配信と共に再生楽曲の楽曲情報および楽曲解析情報を端末装置３００に送信する。楽曲情報は端末装置３００の表示部３０２に表示されることによりユーザに提示される。
【００３３】
また、端末装置３００から再生装置１００に対しては、ユーザ操作に応じた電源オン・オフ、曲戻し、曲送りなどを基本的な操作を指示するコントロールコマンドが送信される。端末装置３００によって再生装置１００を操作することが可能となっている。
【００３４】
なお、コンテンツ再生システム１において再生装置が複数存在する場合には、同一の楽曲データをそれら複数の再生装置それぞれにストリーム配信し、複数の再生装置で同一の楽曲を同時に再生することが可能である。また、再生装置１００はサーバ装置２００に対して楽曲データの送信を要求し、その要求に応じてサーバ装置２００から送信されてくる楽曲データを受信して再生することも可能である。
【００３５】
［１−２.音量制御装置の構成］
図２Ａは、本技術に係る音量制御装置４００の構成を示すブロック図である。また、図２Ｂは音量制御装置４００の機能を備える端末装置３００の構成を示すブロック図である。さらに、図３Ａおよび図３Ｂは、端末装置３００の外観構成を示す図である。端末装置３００は平面視略長方形で薄型のいわゆるタブレット型端末として構成されている。
【００３６】
音量制御装置４００は、ユーザ情報検出部４０１、同調判定部４０２および音量制御部４０３から構成されている。ユーザ情報検出部４０１は楽曲を聴取するユーザに関する情報であるユーザ情報を検出するものである。検出されたユーザ情報は同調判定部４０２に供給される。ユーザ情報検出部４０１は、具体的には例えば加速度センサ、マイクロホンなどにより構成される。ユーザ情報とはユーザが発する振動、音声などである。
【００３７】
同調判定部４０２は、ユーザ情報検出部４０１から供給されたユーザ情報と、サーバ装置２００など外部から供給された楽曲解析情報とが同調しているか否かを判定するものである。同調判定部４０２による判定結果は音量制御部４０３に供給される。同調判定部４０２により行われる同調判定処理の詳細について後述する。
【００３８】
音量制御部４０３は、同調判定部４０２による判定結果に従って音量制御を行うための音量制御データを生成し、それを外部に出力する。同調判定部４０２によりユーザ情報と楽曲解析情報とが同調していると判定された場合には音量を上げるための音量制御データを生成する。一方、ユーザ情報と楽曲解析情報とが同調していないと判定された場合には音量を下げるための音量制御データを生成する。音量制御処理の詳細については後述する。
【００３９】
［１−３.端末装置の構成］
端末装置３００は、入力部３０１、表示部３０２、通信部３０３、記憶部３０４、振動信号処理部３０５、Ａ／Ｄ（Analog／Digital）変換部３０６、音声信号処理部３０７、制御部３０８、表示制御部３０９、楽曲再生制御部３１０、加速度センサ４０１Ａ、マイクロホン４０１Ｂ、同調判定部４０２および音量制御部４０３とから構成されている。
【００４０】
入力部３０１は、ユーザが端末装置３００への指示を入力するための入力手段である。本実施の形態において端末装置３００は、表示部３０２と一体に構成されたタッチスクリーン３０１Ａ、ホームボタン３０１Ｂおよび操作キー３０１Ｃ（これらは図３に示す。）を備える。さらに入力部３０１は、表示部とは別構成のタッチパネル、スイッチなどにより構成されるようにしてもよい。入力部３０１に対して入力がなされると、その入力に対応した制御信号が生成されて制御部３０８に出力される。そして、制御部３０８によりその制御信号に対応した演算処理や制御が行われる。
【００４１】
表示部３０２は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ(Plasma Display Panel)、有機ＥＬ(Electro Luminescence)パネルなどにより構成された表示手段である。表示部３０２には、端末装置３００の各種操作のメニューを表示するホーム画面、サーバ装置２００から送信された楽曲リスト情報に基づく楽曲のリスト、サーバ装置２００から送信された楽曲情報などが表示される。さらに、サーバ装置２００が記憶する、または端末装置３００自身が記憶する動画コンテンツ、画像コンテンツなども表示される。
【００４２】
さらに、表示部３０２には入力手段としてのタッチパネルにおけるソフトボタン、音量調整、コンテンツ選択などの個々の操作画面などのユーザインターフェース画像も表示される。
【００４３】
通信部３０３は、例えば、ＨＴＴＰ、ＴＣＰ／ＩＰなどのプロトコルに基づいて再生装置１００およびサーバ装置２００との通信を行うためのネットワークインターフェースである。通信部３０３を介して、楽曲情報、楽曲解析情報、音量制御データ、楽曲リスト情報、その他の各種データ、コマンドなどの送受信が行われる。サーバ装置２００から送信され、通信部３０３で受信した、再生中の楽曲の楽曲解析情報は同調判定部４０２に供給される。また、サーバ装置２００から送信され、通信部３０３で受信した、再生中の楽曲の楽曲情報は表示制御部３０９に供給される。
【００４４】
記憶部３０４は、ハードディスク、フラッシュメモリなどにより構成される大容量記憶媒体である。記憶部３０４は、端末装置３００を動作させるための各種データ、プログラム、コンテンツ、一時ファイルなどを記憶保持するものである。
【００４５】
加速度センサ４０１Ａは、音量制御装置４００におけるユーザ情報検出部４０１に相当するものであり、例えば、２軸または３軸の加速度センサにより構成されている。加速度センサ４０１Ａは、ユーザが端末装置３００に直接または間接的に与える振動の大きさを加速度として検出し、振動信号として振動信号処理部３０５に供給する。本実施の形態においては、加速度センサ４０１Ａが検出した振動がユーザ情報に相当する。本技術は、楽曲を聴取しているユーザが楽曲に合わせて体を揺らしたり、踊ったり、テーブルや端末装置３００を叩いたりすることにより発生する振動を検出し、その振動が楽曲に同調しているかを判定することにより再生音量の調整を行うものである。
【００４６】
振動信号処理部３０５は、供給された振動信号にＬＰＦ（Low Pass Filter）によるノイズ除去などの所定の信号処理を施して低周波成分の信号に変換する。変換された振動信号はＡ／Ｄ変換部３０６に供給される。Ａ／Ｄ変換部３０６は、アナログ振動信号をデジタル振動信号に変換するためＡ／Ｄコンバータである。振動信号はＡ／Ｄ変換部３０６によりＡ／Ｄ変換が施されて同調判定部４０２に供給される。
【００４７】
マイクロホン４０１Ｂは、ユーザが楽曲に合わせて口ずさむ歌声、鼻歌、楽曲に合わせた手拍子など、ユーザが発する音声を取得するための音声入力手段である。マイクロホン４０１Ｂは、ユーザ情報検出部４０１に相当するものである。また、マイクロホン４０１Ｂが検出したユーザが発した音声もユーザ情報に相当する。マイクロホン４０１Ｂに入力された音声はアナログ音声信号に変換されて音声信号処理部３０７に供給される。音声信号処理部３０７は、例えば、増幅処理を施してアナログ音声信号を増幅させるなどしてアナログ音声信号をＡ／Ｄ変換部３０６に供給する。アナログ音声信号はＡ／Ｄ変換部３０６によりＡ／Ｄ変換が施されて同調判定部４０２に供給される。
【００４８】
端末装置３００は、ユーザによって操作されるものであり、その寸法および重量は、ユーザが片手または両手で持つことができ、また、膝の上の置いた状態で操作を行うことができる程度のものが望ましい。そのような寸法および重量の場合、ユーザが立っている場合には「手に持つ」、ユーザが座っている場合には「膝の上に置く」、または、「自身の周囲に置く」場合が多いと考えられる。したがって、端末装置３００が加速度センサ４０１Ａ、マイクロホン４０１Ｂなどのユーザ情報検出部４０１を備えることにより、ユーザが発する振動、音声を検出することが可能となる。なお、図２Ｂにおいては端末装置３００は、ユーザ情報検出部４０１として加速度センサ４０１Ａおよびマイクロホン４０１Ｂを備えているが、いずれか一方のみを備えているという構成でもよい。
【００４９】
制御部３０８は、例えばＣＰＵ、ＲＡＭおよびＲＯＭなどから構成されている。ＲＯＭには、ＣＰＵにより読み込まれるプログラムが格納されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに格納されているプログラムに基づき様々な処理を実行することによって端末装置３００全体の制御を行う。また、制御部３０８は、所定のプログラムを実行することにより、同調判定部４０２、音量制御部４０３、表示制御部３０９および楽曲再生制御部３１０として機能する。
【００５０】
同調判定部４０２は、Ａ／Ｄ変換部３０６から供給されたユーザ情報である振動信号または／および音声信号に基づいて、ユーザが発した振動または／および音声と再生されている楽曲のビート情報が同調しているか否かの判定（以下、同調判定処理と称する。）を行う。同調判定部４０２による判定結果は音量制御部４０３に供給される。同調判定処理の詳細については後述する。
【００５１】
音量制御部４０３は、同調判定部４０２による同調判定結果に基づいて、再生装置１００における再生音量の制御を行うものである。音量制御部４０３は、同調判定部４０２による同調判定結果に基づいて音量制御データを生成する。その音量制御データは通信部３０３を介して再生装置１００に送信される。そして、その音量制御データに基づいて再生装置１００の音量調整部１０４Ａによって音量の調整が行われる。音量制御処理の詳細については後述する。なお、音量制御データを記憶部３０４に記憶するようにしてもよい。記憶部３０４に記憶した音量制御データを参照することにより、音量が楽曲再生開始時からどのくらい変化したか、音量制御の履歴、などを把握することができる。
【００５２】
楽曲再生制御部３１０は、入力部３０１を介して入力されたユーザの楽曲選択入力に対応した楽曲のストリーム配信をサーバ装置２００に指示するための楽曲再生指示コマンドを生成する。楽曲再生指示コマンドは通信部３０３を介して端末装置３００からサーバ装置２００に送信される。
【００５３】
表示制御部３０９は、表示部３０２を制御して、楽曲リスト情報に基づくリスト表示、楽曲情報に基づく楽曲情報表示などを行う。また、入力部３０１からの入力制御信号に対応したユーザインターフェース画像、各種の画像やデータを表示させる。
【００５４】
また、図示はしないが、端末装置３００はジャイロセンサを備えるようにしてもよい。ジャイロセンサは、端末装置３００の傾き角、回転角度などを検出する。ジャイロセンサによって検出された傾き角情報などに基づいて制御部３０８により表示部３０２に表示される画面の回転処理などが行われる。
【００５５】
図３Ａおよび図３Ｂは、本実施の形態に係る端末装置３００の外観構成を示す図である。本実施の形態においては、端末装置３００はタッチスクリーン３０１Ａを備え、ユーザが指などで様々な入力操作を行うことができるいわゆるタブレット型端末として構成されている。上述したように、端末装置３００の寸法および重量は、ユーザが片手または両手で持つことができ、また、膝の上の置いた状態で操作を行うことができる程度のものである。
【００５６】
端末装置３００は略中央に、入力部３０１としてのタッチパネルと表示部３０２が一体的に構成されたタッチスクリーン３０１Ａを備える。タッチスクリーン３０１Ａにはホーム画面、楽曲情報画面、音量調整用画面、サーバ装置２００に記憶されている楽曲をユーザに提示する楽曲選択画面などが表示される。また、サーバ装置２００または端末装置３００自身が記憶する動画コンテンツ、画像コンテンツなども表示される。
【００５７】
図３Ａはタッチスクリーン３０１Ａに表示される再生楽曲情報表示画面兼音量調整用画面の一例を示すものである。図３Ａに示すように、楽曲再生中には、再生中の楽曲の情報（アーティスト名、アルバム名、曲名など）、再生位置を示すスライダ、音量調整用の入力手段である音量調整スライダ３５０などが表示される。
【００５８】
図３Ａに示す例では、ユーザは、音量調整スライダ３５０上に重畳して表示されているツマミ３５１に指を接触させ、接触を維持した状態で右方向にスライドさせることで再生装置１００における音量を大きくし、左方向へスライドさせることにより音量を小さくすることができる。このスライド動作による音量調整は、音量制御部４０３によってツマミ３５１の移動に対応する音量制御データが生成され、その音量制御データが再生装置１００に送信されることにより行われる。
【００５９】
なお、コンテンツ再生システム１においては、端末装置３００に表示される再生音量と、再生装置１００における再生音量とは同期するようにするとよい。すなわち、再生装置１００と端末装置３００とは常時ネットワークを通じて通信を行うことにより、端末装置３００における音量制御に応じて再生装置１００における音量が変化する。また、再生装置１００側で音量調整が行われた場合、その再生装置１００側で行われた音量調節に同期して端末装置３００の音量表示も変更される。これにより、端末装置３００側で常に再生装置１００の再生音量を把握することができる。
【００６０】
図３Ｂは、タッチスクリーン３０１Ａに表示される楽曲選択画面の一例を示すものである。楽曲選択画面においては、サーバ装置２００に記憶されているコンテンツである楽曲のリストが表示される。なお、楽曲の表示態様としてはツリー構造表示、アイコン表示、カラム表示などがあり、ユーザがいずれかの表示態様を選択できるようにするとよい。この表示は、サーバ装置２００から送信された楽曲リスト情報に基づいて表示制御部３０９の制御のもと行われる。
【００６１】
そして、ユーザが所望の楽曲の表示位置に対して指を接触させて入力を行うことにより、その入力に対応する楽曲再生指示コマンドが楽曲再生制御部３１０で生成され、通信部３０３を介してサーバ装置２００に送信される。これにより、サーバ装置２００から再生装置１００へのストリーム配信が行われる。
【００６２】
例えば、ユーザが所望の楽曲の表示位置に対してタップ入力を行うことにより、楽曲選択入力が行われる。また、ユーザが所望の楽曲の表示位置に対してダブルタップ入力を行うことに楽曲再生指示の入力が行われる。タップ入力とは、ユーザの指などを操作面上に短時間１回だけ接触させる入力動作である。ダブルタップ入力とは、指などを操作面上に短い間隔で連続して２回接触させる入力動作である。これらは主に決定の入力などに用いられる。ただし、タッチスクリーンにおける入力操作はこれらに限られるものではない。
【００６３】
ホームボタン３０１Ｂは、端末装置３００が備える機能、アプリケーション、各種操作のメニューなどを並べて表示するいわゆるホーム画面の表示を指示するため入力手段である。ホームボタン３０１Ｂがユーザにより押下された場合には、端末装置３００がどのような動作を行っていてもタッチスクリーン３０１Ａにはホーム画面が表示される。
【００６４】
操作キー３０１Ｃは例えば、タッチスクリーン３０１Ａに表示されるカーソルの移動などに用いられる。上述したタッチパネル、ホームボタン３０１Ｂ、十字キーは図２のブロック図における入力部３０１に相当するものである。なお、端末装置３００の入力部３０１は、図３に示す例に限られず、タッチスクリーン３０１Ａのみを有し、一切の物理ボタンを排除した構成としてもよい。逆に、複数の物理ボタンを備え、入力操作の全てを物理ボタンで行うようにしてもよい。
【００６５】
さらに、端末装置３００は音声入力手段としてのマイクロホン４０１Ｂを備える。マイクロホン４０１Ｂはユーザ情報検出部４０１に相当するものである。マイクロホン４０１Ｂにより端末装置３００を使用するユーザの歌声、鼻歌、手拍子などの音声を取得することができる。
【００６６】
［１−４.コンテンツ再生処理］
次に、図４を参照して、コンテンツ再生処理について説明する。図４はコンテンツ再生処理の流れを示すフローチャートである。図４に示す処理は端末装置３００の制御部３０８によって行われる。
【００６７】
まずステップＳ１０１で、楽曲選択入力がなされたか否かが判定される。選択入力がなされていない場合には選択入力がなされるまでステップＳ１０１の判定が繰り返される（ステップＳ１０１のＮｏ）。なお、選択入力時には、事前に楽曲の楽曲リスト情報をサーバ装置２００から受信し、図３Ｂに示すように楽曲のリストが端末装置３００の表示部３０２に表示されている。そして、選択入力はユーザが所望の楽曲の表示に対応する位置に指を接触させることにより行われる。
【００６８】
楽曲の選択入力がなされた場合（ステップＳ１０１のＹｅｓ）には、次にステップＳ１０２で、ユーザによる再生指示の入力がなされたか否かが判定される。再生指示入力がなされていない場合には再生指示入力がなされるまでステップＳ１０１の判定が繰り返される（ステップＳ１０２のＮｏ）。楽曲の再生指示入力がなされた場合には、処理はステップＳ１０３に進む（ステップＳ１０２のＹｅｓ）。なお、上述した楽曲の選択入力が再生指示入力を兼ねている仕様の場合にはステップＳ１０２の処理を行う必要はない。
【００６９】
次にステップＳ１０３で、選択された楽曲に対応する楽曲再生指示コマンドをサーバ装置２００に送信することにより、選択された楽曲のストリーム配信をサーバ装置２００に指示する。そして、楽曲再生指示コマンドを受信したサーバ装置２００から再生装置１００に対してストリーム配信が行われることにより、楽曲の再生が開始される。
【００７０】
次にステップＳ１０４で、端末装置３００はサーバ装置２００からストリーム配信指示を行った楽曲についての楽曲情報を取得する。上述したように、楽曲情報はネットワークを介してサーバ装置２００から送信され、端末装置３００はその楽曲情報を通信部３０３によって受信する。そして、ステップＳ１０５で表示部３０２における楽曲情報の表示が行われる。
【００７１】
次に、ステップＳ１０６で同調判定処理が行われる。また、ステップＳ１０７で音量制御処理が行われる。同調判定処理と音量制御処理とはマルチタスクで並列して行われるが、音量制御処理は同調判定処理の判定結果に基づいて行われる。
【００７２】
そして、ステップＳ１０８で楽曲の再生が終了したか否かが判定される。再生が終了していない場合（ステップＳ１０８のＮｏ）には処理はステップＳ１０６およびステップＳ１０７に戻り、楽曲の再生が終了するまで同調判定処理および音量制御処理が繰り返される。楽曲の再生が終了した場合には楽曲再生処理は終了となる（ステップＳ１０８のＹｅｓ）。
【００７３】
［１−５.同調判定処理］
次に、図５乃至図９に基づいて、コンテンツ再生処理のステップＳ１０６における同調判定処理について説明する。なお、以下、ユーザ情報が、ユーザが楽曲に合わせて体を揺らすことなどにより発する振動である場合を例にして説明を行う。まず、図５に基づいて同調判定処理の概要について説明する。図５の上段は、再生される楽曲の波形の一例である。波形に対応するように並んで表示されている実線は楽曲解析情報に含まれるビート情報を示すものである。具体的には、楽曲における小節または／および拍の位置を示すものである。図５の下段は縦軸を振動信号の大きさとし、横軸を楽曲の波形に対応する楽曲の再生時間として、ユーザ情報検出部４０１としての加速度センサ４０１Ａによって検出される振動信号を示すものである。
【００７４】
図５の（１）で示される範囲においては、振動信号は一定の間隔で発生しており、楽曲のビート情報と振動信号とが一致している。したがって、楽曲のビート情報と振動とは同調していると判定される。一方、（２）で示される範囲においては、振動は検出されているが、信号の発生はランダムであり、楽曲のビート情報と振動とが一致していない。よって、楽曲のビート情報と振動とは同調してないと判定される。また、（３）で示される範囲においては、振動は検出されていない。このように、同調判定処理においては、楽曲の楽曲解析情報に含まれるビート情報と振動信号とが一致しているか否かを判定することにより、楽曲とユーザが発する振動が同調しているか否かを判定する。
【００７５】
以下、同調判定処理の詳細について説明する。図６および図７は同調判定処理の流れを示すフローチャートである。同調判定処理は同調判定部４０２によって行われる。まず、ステップＳ２０１で、サーバ装置２００に対して再生指示を行った楽曲についての楽曲解析情報をサーバ装置２００から取得する。楽曲解析情報はサーバ装置２００からネットワークを介して端末装置３００に送信され、通信部３０３によって受信することにより取得する。
【００７６】
次にステップＳ２０２で、楽曲解析情報に基づいて、ビート情報とユーザが端末装置３００に与える振動とが一致しているかを判定するための判定ウィンドウの周期および幅を決定する。
【００７７】
ここで、図８を参照して判定ウィンドウについて説明する。図８の上段に示された波形は楽曲の波形の一部を拡大したものである。波形から下方向へ向けて延出する実線はビート情報で示される小節の先頭であり、波形から下方向へ向けて延出する破線はビート情報で示される拍の先頭である。また、図８の下段は小節の先頭および拍の先頭に対応するように設定された判定ウィンドウである。判定ウィンドウとは、ビート情報に基づいて、楽曲の各小節の先頭位置または／および各拍の先頭位置に対応するように設定される。
【００７８】
そして、判定ウィンドウは各小節および各拍の先頭位置に対応するとともに、所定の幅を有して設定される。この幅は時間で表される幅である。判定ウィンドウが存在しない区間はＭａｓｋ期間と称する。振動信号がこの判定ウィンドウ内にある場合には、楽曲とユーザが発する振動とは同調していると判定される。なお、判定ウィンドウの幅は曲の拍子に合わせて適宜設定される。例えば、４拍子における判定ウィンドウ幅を基準として、２拍子の曲の場合には基準の判定ウィンドウ幅よりも広めに設定し、８拍子の曲の場合には基準の判定ウィンドウ幅よりも狭く設定する、などである。判定ウィンドウは曲の先頭から終了まで全体に設定される。判定ウィンドウは特許請求の範囲における同調判定区間に相当するものである。
【００７９】
図６のフローチャートの説明に戻る。次にステップＳ２０３で、振動信号の入力が開始される。そしてステップＳ２０４で、楽曲再生の進行に伴い、楽曲の再生位置が１つの判定ウィンドウを通過したか否かが判定される。楽曲の再生位置が１つの判定ウィンドウを通過していない場合には、通過したと判定されるまでステップＳ２０４が繰り返される（ステップＳ２０４のＮｏ）。一方、楽曲の再生位置が１つの判定ウィンドウを通過したと判定された場合、処理はステップＳ２０５に進む（ステップＳ２０４のＹｅｓ）。
【００８０】
次にステップＳ２０５で、入力された振動信号においてピークが検出されたか否かが判定される。ステップＳ２０５でピークが検出された場合には処理はステップＳ２０６に進む（ステップＳ２０５のＹｅｓ）。そして、ステップＳ２０６で検出された振動信号のピークが、上述のステップＳ２０４で通過したと判定された判定ウィンドウ内に位置しているか否かが判定される。
【００８１】
ステップＳ２０６でピークが判定ウィンドウ内に位置していると判定された場合、処理はステップＳ２０７に進む（ステップＳ２０６のＹｅｓ）。次にステップＳ２０７で、判定ウィンドウ内に位置すると判定されたピークの値が所定の閾値以上であるか否かが判定される。ピークの値が閾値以下であると判定されたば場合、処理はステップＳ２０４に戻る（ステップＳ２０７のＮｏ）。そして、ステップＳ２０４からの処理が再び行われる。
【００８２】
なお、一度ステップＳ２０４で楽曲の再生位置が１つの判定ウィンドウを通過したと判定された（ステップＳ２０４のＹｅｓ）後に処理がステップＳ２０４に戻った場合は、時系列で次の判定ウィンドウについてステップＳ２０４以下の処理が行われる。
【００８３】
一方、ステップＳ２０７で、ピークの値が閾値以上であると判定された場合、処理はステップＳ２０８に進み、楽曲のビート情報とユーザが発する振動とは同調していると判定される（ステップＳ２０７のＹｅｓ）。
【００８４】
ここで、図９を参照して、楽曲のビート情報とユーザが発する振動とが同調していると判定される場合について説明する。図９Ａに示す状態は、振動信号のピークの値が判定ウィンドウ内に位置しており、同調していると判定される場合である。一方、図９Ｂはピークの値が閾値を超えてはいるが、判定ウィンドウ内に位置していないため、同調していないと判定される場合である。また、図９Ｃはピーク値が閾値以下であるため同調していないと判定される場合である。
【００８５】
図６のフローチャートの説明に戻る。次にステップＳ２０９で連続カウンタの値に１を加える（＋１を行う）。この連続カウンタは、「同調している」と判定された回数をカウントするためのものである。次にステップＳ２１０で不連続カウンタをクリアする。この不連続カウンタは連続して「同調していない」と判定された回数をカウントするためのものである。後述するように、本実施の形態においては、所定の回数連続して「同調していない」と判定された場合に、再生音量を下げる。したがって、「同調している」と判定された場合には、連続して「同調していない」と判定された回数をカウントする不連続カウンタの値をクリアする必要がある。
【００８６】
次にステップＳ２１１で、連続カウンタの値が所定の値に達したか否かが判定される。連続カウンタの値が所定の値に達したと判定された場合、処理はステップＳ２１２に進む（ステップＳ２１１のＹｅｓ）。連続カウンタの値が所定の値に達した、とは、予め定められた所定の回数連続して「同調している」と判定されたことを意味する。そして、ステップＳ２１２で同調判定部４０２は音量制御部４０３に対して、再生音量を上げるよう指示（音量アップ指示）を行う。
【００８７】
一方、ステップＳ２１１で連続カウンタの値が所定の回数に達していないと判定された場合、音量制御部４０３に対して音量を上げる指示は行われず、処理は２１３に進む（ステップＳ２１１のＮｏ）。そして、ステップＳ２１３で楽曲の再生が終了したか否かが判定される。楽曲の再生が終了している場合には同調判定処理は終了となる（ステップＳ２１３のＹｅｓ）。一方、楽曲の再生が終了していない場合には処理はステップＳ２０４に戻る。
【００８８】
次に、ステップＳ２０５において、入力された振動信号においてピークが検出されなかった場合（ステップＳ２０５のＮｏ）の処理について説明する。その場合、処理はステップＳ２１４に進み、楽曲のビート情報とユーザが発する振動は同調していない、と判定される。同様に、ステップＳ２０６でピークが検出ウィンドウ内にない場合も処理はステップＳ２１４に進む（ステップＳ２０６のＮｏ）。上述したように、入力された振動信号においてピークが検出されなかった場合とは、図９Ｃに示すような状態である。また、ピークが検出ウィンドウ内にない場合とは図９Ｂに示すような場合である。
【００８９】
次にステップＳ２１５で、不連続カウンタの値に１を加える（＋１を行う）。不連続カウンタは、連続して「同調していない」と判定された回数をカウントするものである。
【００９０】
次にステップＳ２１６で、連続カウンタをクリアする。上述したように、連続カウンタ連続して「同調している」と判定された回数をカウントするものであるため、「同調していない」と判定された場合にはクリアする必要がある。次にステップＳ２１７で不連続カウンタの値が所定の値に達したか否かが判定される。不連続カウンタの値が所定の値に達したと判定された場合、処理はステップＳ２１８に進む（ステップＳ２１７のＹｅｓ）。そして、ステップＳ２１８で同調判定部４０２は音量制御部４０３に対して、再生音量を下げるよう指示（音量ダウン指示）を行う。
【００９１】
ステップＳ２１７で不連続カウンタの値が所定の値に達していないと判定された場合、音量ダウン指示は行われず、処理はステップＳ２１３に進み（ステップＳ２１７のＮｏ）、楽曲の再生が終了したか否かが判定される。楽曲の再生が終了している場合には同調判定処理は終了となる（ステップＳ２１３のＹｅｓ）。一方、楽曲の再生が終了していない場合には処理はステップＳ２０４に戻り、時系列で次の順番の判定ウィンドウについて同調判定処理が繰り返される。
【００９２】
以上のようにして同調判定処理が行われる。本実施の形態においては、連続カウンタの値が所定の値に達したと判定された場合にのみ音量を上げる処理が行われる。これは、偶然の一致によって「同調している」と判定された場合直ちに音量が上げられることを防止するためである。すなわち、通常、ユーザが楽曲に合わせて体を揺らすことなどによって生じる振動は一度ではなく複数回連続するものである。よって、一回「同調している」と判定されたのみでは音量は上げず、連続して「同調している」と判定された場合に、ユーザは楽曲に合わせてリズムをとっているとして音量を上げることとする。これにより、偶然によって同調している場合に音量が上がってしまうことを防止し、ユーザが音楽に合わせて振動を発しているということを的確に捉えることができる。
【００９３】
「同調していない」と判定される場合も同様である。すなわち、たとえ、ユーザが楽曲に合わせて体を揺らしていたとしても、それは常に正確に楽曲に合っているわけではない。したがって、一回「同調していない」と判定されたのみでは音量は下げず、所定の回数「同調していない」と判定された場合に、ユーザは楽曲に合わせてリズムをとっていないとして音量を下げることとする。
【００９４】
［１−６.音量制御処理］
次に、図１０および図１１に基づいて、コンテンツ再生処理のステップＳ１０７における音量制御処理について説明する。まず、図１０に基づいて音量制御処理の概要について説明する。図１０の上段は再生される楽曲データの波形である。波形に対応して表示されている実線は楽曲解析情報に含まれるビート情報を示すものである。具体的には楽曲における小節または／および拍の位置を示すものである。図１０の中段は、縦軸を振動信号の大きさとし、横軸を楽曲の波形に対応する楽曲の再生時間として、加速度センサ４０１Ａによって検出される振動信号を示すものである。さらに、図１０の下段は、縦軸を音量、横軸を曲の再生時間として、楽曲再生中における音量の変化を示すものである。
【００９５】
図１０において（１）で示される範囲は、楽曲再生開始時における音量（以下、初期音量と称する。）である。（２）で示される範囲においては、楽曲のビート情報と振動信号とが一致しているため、「同調している」と判定され、ユーザが楽曲に合わせて盛り上がっているとして再生音量が上げられていく。これにより、ユーザの盛り上がっている気持ちをさらに盛り上げることができる。また、楽曲聴取時のユーザの行動（踊っている、横になっている、会話をしている、など）を中断してリモートコントローラなどによって音量調節を手動で行うという煩わしさを解消することができる。
【００９６】
（３）で示される範囲においては、ビート情報と振動信号とが同調しているが、再生音量が上限に達しているため、音量は上げられておらず、音量は維持されている。（４）で示される範囲においては、ビート情報と振動信号とが同調していない。ビート情報と振動信号とが同調していない場合とは、ユーザの楽曲に合わせた盛り上がりがおさまった場合であると考えられるため、再生音量を下げる処理を行うとよい。ただし、（４）の範囲に示すように、ビート情報と振動信号とが同調しなくなった直後にから再生音量を下げるのではなく、再生音量を下げるまでに遅延期間を設けるようにするとよい。これにより、急激な音量変化を防止して、急激な音量の低下を防止してユーザに与える違和感を抑制することができる。この遅延期間については後述する。
【００９７】
（５）で示される範囲においては、ビート情報と振動信号とが同調していないため、再生音量が下げられている。徐々に下げていくことにより急激な音量変化を防止して、急激な音量の低下を防止してユーザに与える違和感を抑制することができる。（６）で示される範囲においては、再生音量が初期音量と等しくなったため、それ以上再生音量は下げられていない。なお、図１０に示す音量の遷移は説明を行うための一例であり、実際は再生される楽曲およびユーザによる振動などのユーザ情報により、音量には様々な変化が生じる。
【００９８】
次に、図１１のフローチャートに基づいて、音量制御処理の詳細について説明する。音量制御処理は音量制御部４０３によって行われる。まずステップＳ３０１で、楽曲再生開始時の音量である初期音量を取得する。次にステップＳ３０２で同調判定部４０２から音アップ指示または音量ダウン指示があったか否かが判定される。指示がない場合には指示があるまでステップＳ３０２の判定が繰り返される（ステップＳ３０２のＮｏ）。一方、指示があった場合には処理はステップＳ３０３に進む（ステップＳ３０２のＹｅｓ）。
【００９９】
次にステップＳ３０３で、同調判定部４０２からの指示が音量アップ指示であるか否かが判定される。指示が音量アップ指示である場合には処理はステップＳ３０４に進む（ステップＳ３０３のＹｅｓ）。そして、ステップＳ３０４で現在の楽曲の再生状態における音量が再生装置１００における上限に達しているか否かが判定される。ここで、再生装置１００における音量の上限は実際に再生装置１００において調整することができる物理的な上限値よりも若干低く設定するとよい。例えば、物理的な上限値の８０％とする。
【０１００】
一般的に、テレビジョン受像機、ドックスピーカなどの再生装置１００における再生音量の上限はユーザが苦痛なく聴取することができる音量を超えている場合が多い。したがって、ステップＳ３０４の判定における音量の上限を物理的な上限よりも低く設定することにより、ユーザが苦痛なく聞ける限度を超えて再生音量が大きくなることを防ぐことができる。また、上限値はユーザが任意に設定できるようにしてもよい。設定された音量の上限値は端末装置３００の記憶部に記憶され、ステップＳ３０４の処理を行う際に参照される。
【０１０１】
再生音量が上限に達していないと判定された場合、処理はステップＳ３０５に進む（ステップＳ３０４のＮｏ）。ステップＳ３０５で再生音量を上げるための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００における再生音量が上げられる。
【０１０２】
なお、一回の処理における再生音量の上げ幅は予めデフォルトとして設定しておくとよい。例えば、再生装置１００が再生音量が段階的に調整される仕様である場合には、一回の処理において１段階音量を上げる、などである。ただし、再生音量の上げ幅をユーザが任意に設定できるようにしてもよい。音量の上げ幅は、上述した段階的なものに限られず、具体的なデシベル（ｄＢ）値で設定してもよい。
【０１０３】
一方、ステップＳ３０４において現在の楽曲の再生状態における音量が再生装置１００における上限に達していると判定された場合、ステップＳ３０５における音量を上げる処理は行われない（ステップＳ３０４のＹｅｓ）。
【０１０４】
説明はステップＳ３０３に戻る。ステップＳ３０３で同調判定部４０２からの音量指示が音量アップ指示ではないと判定された場合、処理はステップＳ３０６に進む（ステップＳ３０３のＮｏ）。指示が音量アップ指示ではないと判定された場合とはすなわち、指示が音量ダウン指示である場合である。
【０１０５】
次にステップＳ３０６で、一つ前の音量指示が音量アップ指示であったか否かが判定される。そして、一つ前の音量指示が音量アップ指示であった場合には処理はステップＳ３０７に進み、ウェイトカウンタの値に１を加える（＋１を行う）（ステップＳ３０６のＹｅｓ）。次にステップＳ３０８で、ウェイトカウンタの値が所定の値に達したか否かが判定される。ウェイトカウンタと比較する所定の値は例えば１０回に設定される。ウェイトカウンタの値が所定の値に達したと判定された場合処理はステップＳ３０９に進む（ステップＳ３０８のＹｅｓ）。
【０１０６】
次に、ステップＳ３０９で現在の再生装置１００における音量が初期音量以上であるか否かが判定される。音量が初期音量以上であると判定された場合（ステップＳ３０９のＹｅｓ）、処理はステップＳ３１０に進み、再生音量を下げるための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００における再生音量が下げられる。
【０１０７】
なお、一回の処理における再生音量の下げ幅は予めデフォルトとして設定しておくとよい。例えば、再生装置１００が再生音量が段階的に調整される仕様である場合には、一回の処理において１段階音量を下げるなどである。ただし、再生音量の下げ幅をユーザが任意に設定できるようにしてもよい。音量の下げ幅は、上述した段階的なものに限られず、具体的なデシベル（ｄＢ）値で設定してもよい。
【０１０８】
一方、ステップＳ３０９で現在の再生音量が初期音量以上ではないと判定された場合（すなわち、再生音量が初期音量と等しい、または初期音量よりも低い）には音量制御データは生成されない（ステップＳ３０９のＮｏ）。このように本実施の形態においては再生音量を初期音量以下に下げないように処理を行う。
【０１０９】
説明はステップＳ３０８に戻る。ステップＳ３０８でウェイトカウンタの値が所定の値に達していないと判定された場合、ステップＳ３０９およびステップＳ３１０による音量を下げる処理は行われない（ステップＳ３０８のＮｏ）。このように、本実施の形態においては、ウェイトカウンタが所定の値に達している、すなわち、所定の回数連続して音量ダウン指示があった場合に限り、音量を下げるようにしている。これにより、同調判定部４０２から誤って音量ダウン指示が出された場合にその指示に従い再生音量を下げてしまうこと、頻繁に交互に音量アップ／ダウンが繰り返されることを防止することができる。
【０１１０】
また、音量ダウンは音量アップに比べて時間をかけて行われることとなり、初回の音量ダウンの指示から実際に音量が下げるまでに遅延期間が生じる。これにより、急激な音量の低下を防止してユーザに与える違和感を抑制することができる。
【０１１１】
説明はステップＳ３０６に戻る。一つ前の音量指示が音量アップ指示ではないと判定された場合、ステップＳ３０７およびステップＳ３０８の処理は行われず、ステップＳ３０９に進む（ステップＳ３０６のＮｏ）。そして、ステップＳ３０９およびステップＳ３１０で音量ダウンを行うための音量制御データの生成および送信が行われる。
【０１１２】
上述したように、ステップＳ３０７およびステップＳ３０８は交互に音量アップ／ダウンが繰り返されることなどを防止するための処理であるため、一つ前の音量指示が音量アップ指示ではないと判定された場合、すなわち、音量ダウン指示が連続でなされた場合には行う必要はない。
【０１１３】
次に処理はステップＳ３１１に進む。ステップＳ３１１ではユーザにより意図的に音量調整がなされたか否かが判定される。これは例えば、端末装置３００における音量調整手段である音量調整スライダ３５０に対するユーザの操作がなされたか否かにより判断する。ステップＳ３１１でユーザにより意図的に音量調整がなされたと判定された場合、処理はステップＳ３１２に進む（ステップＳ３１１のＹｅｓ）。そしてステップＳ３１２で、ユーザが指定する音量にするための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００の再生音量は、ユーザが指定した再生音量に変更される。
【０１１４】
ユーザが意図的に音量調整を行う場合、例えば、急な来客があった場合などに上述の処理が行われることによって、楽曲の再生音量がユーザの邪魔になることがない。
【０１１５】
そして、ステップＳ３１３で楽曲再生が終了したか否かが判定される。楽曲再生が終了した場合には音量制御処理は終了となる。一方、楽曲再生が終了していない場合には処理はステップＳ３０２に戻り、音量制御処理が引き続き行われる。
【０１１６】
以上、本技術の第１の実施の形態においては、再生される楽曲のビート情報とユーザ情報とが同調しているか否かが判定される。そして同調している場合には再生音量を上げるように制御を行う。これにより、ユーザが楽曲に合わせて盛り上がっている場合に再生音量を上げて、ユーザの盛り上がっている気持ちをさらに高めることができる。また、楽曲聴取時のユーザの行動（踊っている、横になっている、会話をしている、など）を中断して音量調節を手動で行うという煩わしさを解消することができる。
【０１１７】
一方、楽曲のビート情報とユーザ情報とが同調してない場合には再生音量を下げるように制御を行う。これにより、ユーザの盛り上がりがおさまった場合には、ユーザの盛り上がりに対応して大きくなっていた再生音量を適切な音量に抑えることができる。この場合も、楽曲聴取時のユーザの行動（踊っている、横になっている、会話をしている、など）を中断して音量調節を手動で行うという煩わしさを解消することができる。
【０１１８】
なお、上述の説明では、ユーザ情報がユーザが発生させる振動である場合を例にして説明を行ったが、ユーザ情報がユーザが発する歌声、鼻歌、手拍子などの音声であっても上述の処理と同様の処理により、音量制御処理を行うことができる。
【０１１９】
カラオケやパーティなどにおいて複数のユーザが楽曲を聴いている場合、楽曲に合わせて複数のユーザが手拍子や掛け声を行い、楽曲が聴きにくくなってしまう場合がある。ユーザ情報として音声を利用することにより、そのような場合においても、ユーザの手拍子や掛け声が楽曲に一致している（同調している）場合には楽曲の音量を上げるため、楽曲を聴きやすくすることができる。この際も音量調整を手動で行う必要はないため、楽曲を聴いて盛り上がっている気分を害することはない。
【０１２０】
＜２．第２の実施の形態＞
［２−１.音量制御処理］
以下、この発明の第２の実施の形態について説明を行う。なお、音量制御装置４００、並びにコンテンツ再生システム１を構成する再生装置１００、サーバ装置２００、端末装置３００の構成は第１の実施の形態と同様であるため、その説明を省略する。図１２は第２の実施の形態における音量制御処理の流れを示すフローチャートである。図１２において第１の実施の形態における音量制御処理と同一の処理については同一の符号を付してその説明を省略する。図１２に示す第２の実施形態のフローチャートは、ステップＳ４０１およびステップＳ４０２を有する点で第１の実施形態のフローチャートと異なっている。
【０１２１】
第２の実施の形態においては、楽曲解析情報に含まれるサビ情報に基づき、同調判定部４０２からの音量指示があった時点における楽曲の再生位置がサビ部分である場合には、再生位置がサビ部分以外である場合に比べて音量の上げ幅を大きくする。
【０１２２】
ステップＳ３０１乃至ステップＳ３０３は第１の実施の形態と同様であるため説明を省略する。ステップＳ３０４で現在の楽曲の再生状態における音量が再生装置１００における上限に達しているか否かが判定される。音量が上限に達していないと判定された場合処理はステップＳ４０１に進む（ステップＳ３０４のＮｏ）。そして、ステップＳ４０１で、同調判定部４０２からの音量指示があった時点における楽曲の再生位置がサビ部分であるか否かが判定される。再生位置がサビ部分であるか否かは、楽曲解析情報に含まれるサビ情報を参照することにより行うことができる。
【０１２３】
ステップＳ４０１で再生位置がサビ部分であると判定された場合、処理はステップＳ４０２に進む（ステップＳ４０１のＹｅｓ）。そして、ステップＳ４０２で再生音量を上げるための音量制御データが生成される。生成された音量制御データは通信部３０３およびネットワークを介して再生装置１００に送信される。これにより、再生装置１００における再生音量が上げられる。
【０１２４】
再生位置がサビ部分である場合における再生音量の上げ幅は、再生位置がサビ部分以外である場合における上げ幅よりも大きく設定する。例えば、再生装置１００において再生音量が段階的に調整され、サビ以外の部分における再生音量の上げ幅が１段階である場合には、サビ部分における再生音量の上げ幅はその倍の２段階にする、などである。ただし、ユーザが任意に設定することができるようにしてもよい。また、音量の上げ幅は、上述した段階的なものに限られず、具体的なデシベル（ｄＢ）値で設定してもよい。サビ以外の部分における再生音量の上げ幅が１０ｄＢである場合には、サビ部分における再生音量の上げ幅は２０ｄＢにする、などである。
【０１２５】
サビ部分は一般的に楽曲において最も盛り上がる部分である。したがって、サビ部分における再生音量の上げ幅をサビ以外の部分に比べて大きく設定することにより、ユーザの気分の盛り上がりをより高めることができる。また、サビ部分は楽曲において最も盛り上がる部分であるため、ユーザの手拍子や掛け声はサビ以外の部分に比べて大きくなると考えられる。そうすると、サビ部分においてはサビ以外の部分に比べて楽曲が聴きとりにくくなるおそれがある。そこで、サビ部分における再生音量の上げ幅が大きくすることにより、サビ部分において楽曲が聴きとりにくくなることを防止することができる。
【０１２６】
＜３．変形例＞
以上、本技術の一実施の形態について具体的に説明したが、本技術は上述の実施形態に限定されるものではなく、本技術の技術的思想に基づく各種の変形が可能である。
【０１２７】
上述の実施の形態では、ユーザ情報として加速度センサにより検出した振動を用いたが、マイクロホンにより取得したユーザが発した音声でも同様に音声制御処理を行うことができる。また、加速度センサにより検出した振動とマイクロホンにより取得した音声の両方を用いて音声制御処理を行うことも可能である。
【０１２８】
例えば、ユーザ情報検出部４０１として、映像の撮影を行うことができるカメラを用い、楽曲を聴取しているユーザを撮影する。そして、撮影により取得した映像からユーザの表情、動きを検出して、その検出結果に基づいて再生音量制御を行うようにしてもよい。
【０１２９】
具体的には、映像から公知の技術に基づく表情検出を行い、ユーザが笑顔である場合には再生音量を上げる、映像からユーザの動きを検出し、動きと楽曲のビートに一致し同調している場合には再生音量を上げる、などである。なお、ユーザ情報検出部４０１としてのカメラは端末装置３００自身が備えるようにしてもよいし、単体のカメラとして構成し、ネットワークを介してコンテンツ再生システム１に接続するようにしてもよい。
【０１３０】
また、実施の形態においては、サーバ装置２００が楽曲解析情報を生成するとして説明を行った。しかし、端末装置３００が楽曲解析を行うためのソフトウェアなどを備え、サーバ装置２００から端末装置３００に楽曲データを送信し、端末装置３００において楽曲解析情報を生成してもよい。
【０１３１】
また、図１においてコンテンツ再生システム１は、再生装置１００、サーバ装置２００および端末装置３００とから構成されているが、コンテンツ再生システムはそのような構成に限られるものではない。楽曲データなどのコンテンツを記憶し、再生装置に対してストリーム配信を行う端末装置と、スピーカなどのよりコンテンツ再生を行う再生装置とでコンテンツ再生システムを構成するようにしてもよい。
【０１３２】
また、本技術に係る音量制御装置はコンテンツ再生システムを構成する端末装置などに適用される場合に限られず、装置単体でコンテンツを記憶し、そのコンテンツを再生することができる装置に対しても適用可能である。
【０１３３】
また、第１および第２の実施の形態はコンテンツが楽曲である場合を例にして説明を行った。しかし、コンテンツは楽曲に限られるものではなく、音声を含む映像コンテンツであってもよい。例えば、ミュージシャンのライブ映像などのコンテンツに本技術を適用しても上述した実施の形態と同様の効果を奏することができる。
【０１３４】
上述の説明においてはコンテンツ再生システムの一例としてホームネットワークシステムを例にして説明を行った。しかし、本技術に係るコンテンツ再生システムは、ホームネットワークシステムに限らず、カラオケルーム、パーティ会場などにおけるコンテンツ再生システムとしても用いることができる。
【０１３５】
また、本技術は音量制御の他にも、コンテンツ再生システムを利用している室内の照明の明るさ、色、点滅周期などの調整に適用することも可能である。
【０１３６】
なお、本技術は以下のような構成も取ることができる。
【０１３７】
（１）コンテンツを利用するユーザに関するユーザ情報を検出するユーザ情報検出部と、前記コンテンツの楽曲解析情報と、前記ユーザ情報検出部により検出された前記ユーザ情報とが同調しているか否かを判定する同調判定部と、該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部とを備える音量制御装置。
【０１３８】
（２）前記ユーザ情報検出部は加速度センサを備え、前記ユーザ情報は前記ユーザが発する振動であり、前記コンテンツは楽曲であり、前記楽曲解析情報は前記楽曲のビート情報を含み、前記同調判定部は、前記振動と前記ビート情報とが一致しているか否かを判定する前記（１）に記載の音量制御装置。
【０１３９】
（３）前記音量制御部は、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行う前記（１）または（２）に記載の音量制御装置。
【０１４０】
（４）前記音量制御部は、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していないと判定された場合には前記コンテンツの再生音量を下げるよう制御を行う前記（１）乃至（３）のいずれかに記載の音量制御装置。
【０１４１】
（５）前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していると判定した場合に、前記ユーザ情報と前記解析情報とは同調しているとする判定結果を前記音量制御部に供給する前記（１）乃至（４）のいずれかに記載の音量制御装置。
【０１４２】
（６）前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していないと判定した場合に、前記ユーザ情報と前記解析情報とは同調していないとする判定結果を前記音量制御部に供給する前記（１）乃至（５）のいずれかに記載の音量制御装置。
【０１４３】
（７）前記音量制御部は、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行い、
前記コンテンツの再生位置がサビ部分である場合において、前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合には、前記サビ部分以外において前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していると判定された場合における前記再生音量の上げ幅に比べて大きく前記再生音量を上げるよう制御を行う前記（１）乃至（６）のいずれかに記載の音量制御装置。
【０１４４】
（８）前記音量制御部は、前記再生音量が前記コンテンツの再生開始時における音量以上である場合において前記同調判定部により前記ユーザ情報と前記楽曲解析情報とが同調していないと判定された場合にのみ前記コンテンツの再生音量を下げるよう制御を行う前記（４）に記載の音量制御装置。
【０１４５】
（９）前記同調判定部は、前記ビート情報に対応して同調判定領域を設定し、前記振動と前記同調判定領域とが所定の回数一致した場合に前記ユーザ情報と前記楽曲解析情報とが同調していると判定する前記（１）乃至（８）のいずれかに記載の音量制御装置。
【０１４６】
（１０）前記同調判定部は、前記ビート情報に対応して同調判定領域を設定し、前記振動と前記同調判定領域とが所定の回数一致しなかった場合に前記ユーザ情報と前記楽曲解析情報とが同調していないと判定する前記（１）乃至（８）のいずれかに記載の音量制御装置。
【０１４７】
（１１）前記音量制御部は、前記再生音量が所定の音量に達している場合には該再生音量を上げないように制御を行う前記（１）乃至（１０）のいずれかに記載の音量制御装置。
【０１４８】
（１２）前記音量制御部は、前記ユーザの操作入力を受け付ける入力部に対して前記再生音量を調整する入力が行われた場合には、前記同調判定部による判定結果に関わらず、前記ユーザの入力に従った音量制御を行う前記（１）乃至（１１）のいずれかに記載の音量制御装置。
【０１４９】
（１３）前記ユーザ情報検出部はマイクロホンを備え、前記ユーザ情報は前記ユーザが発する音声であり、前記コンテンツは楽曲であり、前記楽曲解析情報は前記コンテンツのビート情報を含み、前記同調判定部は、前記音声と前記ビート情報との一致の度合いを判定することにより前記ユーザ情報と前記楽曲解析情報とが同調しているか否かを判定する前記（１）乃至（１２）のいずれかに記載の音量制御装置。
【０１５０】
（１４）コンテンツを利用するユーザに関する情報をユーザ情報として検出し、前記コンテンツの楽曲解析情報と、前記ユーザ情報とが同調しているか否かを判定し、前記同調度合いの判定結果に基づいて前記コンテンツの再生音量を制御する音量制御方法。
【０１５１】
（１５）音量制御装置と、該音量制御装置とネットワークを介して接続される再生装置とからなり、前記音量制御装置は、コンテンツを利用するユーザに関する情報を検出するユーザ情報検出部と、前記コンテンツの楽曲解析情報と、前記ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、該音量制御部による音量制御情報を前記再生装置に送信する第１の通信部とを備え、前記再生装置は、前記コンテンツを再生する再生処理部と、前記第１の通信部から送信された前記音量制御情報を受信する第２の通信部と該第２の通信部により受信した前記音量制御情報に基づいて前記コンテンツの再生音量を調整する音量調整部とを備えるコンテンツ再生システム。
【符号の説明】
【０１５２】
１・・・・・・コンテンツ再生システム
１００・・・・再生装置
１０４Ａ・・・音量調整部
３００・・・・端末装置
４００・・・・音量制御装置
４０１・・・・ユーザ情報検出部
４０２・・・・同調判定部
４０３・・・・音量制御部
３０１・・・・入力部
３０８・・・・制御部
３０２・・・・表示部
３０３・・・・通信部
３０４・・・・記憶部
４０１Ａ・・・加速度センサ
４０１Ｂ・・・マイクロホン
【特許請求の範囲】
【請求項１】
コンテンツを利用するユーザに関するユーザ情報を検出するユーザ情報検出部と、
前記コンテンツの解析情報と、前記ユーザ情報検出部により検出された前記ユーザ情報とが同調しているか否かを判定する同調判定部と、
該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、
を備える
音量制御装置。
【請求項２】
前記ユーザ情報検出部は加速度センサであり、前記ユーザ情報は前記ユーザが発する振動であり、
前記コンテンツは楽曲であり、
前記解析情報は前記楽曲のビート情報を含み、
前記同調判定部は、前記振動と前記ビート情報とが同調しているか否かを判定する
請求項１に記載の音量制御装置。
【請求項３】
前記音量制御部は、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行う
請求項１記載の音量制御装置。
【請求項４】
前記音量制御部は、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していないと判定された場合には前記コンテンツの再生音量を下げるよう制御を行う
請求項１記載の音量制御装置。
【請求項５】
前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していると判定した場合に、前記ユーザ情報と前記解析情報とは同調しているとする判定結果を前記音量制御部に供給する請求項１に記載の音量制御装置。
【請求項６】
前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していないと判定した場合に、前記ユーザ情報と前記解析情報とは同調していないとする判定結果を前記音量制御部に供給する請求項１に記載の音量制御装置。
【請求項７】
前記音量制御部は、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行い、
前記コンテンツの再生位置がサビ部分である場合において、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合には、前記サビ部分以外において前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合における前記再生音量の上げ幅に比べて大きく前記再生音量を上げるよう制御を行う
請求項２に記載の音量制御装置。
【請求項８】
前記音量制御部は、前記再生音量が前記コンテンツの再生開始時における音量以上である場合において前記同調判定部により前記ユーザ情報と前記解析情報とが同調していないと判定された場合にのみ前記コンテンツの再生音量を下げるよう制御を行う
請求項４に記載の音量制御装置。
【請求項９】
前記同調判定部は、前記ビート情報に対応して同調判定区間を設定し、前記振動が前記同調判定区間内に位置する場合に前記ユーザ情報と前記解析情報とが同調していると判定する
請求項２に記載の音量制御装置。
【請求項１０】
前記同調判定部は、前記ビート情報に対応して同調判定区間を設定し、前記振動と前記同調判定区間内に位置しない場合に前記ユーザ情報と前記解析情報とが同調していないと判定する
請求項２に記載の音量制御装置。
【請求項１１】
前記音量制御部は、前記再生音量が所定の音量に達している場合には該再生音量を上げないように制御を行う
請求項３に記載の音量制御装置。
【請求項１２】
前記音量制御部は、前記ユーザの操作入力を受け付ける入力部に対して前記再生音量を調整する入力が行われた場合には、前記同調判定部による判定結果に関わらず、前記ユーザの入力に従った音量制御を行う
請求項１に記載の音量制御装置。
【請求項１３】
前記ユーザ情報検出部はマイクロホンであり、前記ユーザ情報は前記ユーザが発する音声であり、
前記コンテンツは楽曲であり、
前記解析情報は前記コンテンツのビート情報を含み、
前記同調判定部は、前記音声と前記ビート情報との一致の度合いを判定することにより前記ユーザ情報と前記解析情報とが同調しているか否かを判定する
請求項１に記載の音量制御装置。
【請求項１４】
コンテンツを利用するユーザに関する情報をユーザ情報として検出し、
前記コンテンツの解析情報と、前記ユーザ情報とが同調しているか否かを判定し、
前記同調度合いの判定結果に基づいて前記コンテンツの再生音量を制御する
音量制御方法。
【請求項１５】
音量制御装置と、該音量制御装置とネットワークを介して接続される再生装置とからなり、
前記音量制御装置は、
コンテンツを利用するユーザに関する情報を検出するユーザ情報検出部と、
前記コンテンツの解析情報と、前記ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、
該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、
該音量制御部による音量制御情報を前記再生装置に送信する第１の通信部と、
を備え、
前記再生装置は、
前記コンテンツを再生する再生処理部と、
前記第１の通信部から送信された前記音量制御情報を受信する第２の通信部と
該第２の通信部により受信した前記音量制御情報に基づいて前記コンテンツの再生音量を調整する音量調整部と、
を備える
コンテンツ再生システム。
【請求項１】
コンテンツを利用するユーザに関するユーザ情報を検出するユーザ情報検出部と、
前記コンテンツの解析情報と、前記ユーザ情報検出部により検出された前記ユーザ情報とが同調しているか否かを判定する同調判定部と、
該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、
を備える
音量制御装置。
【請求項２】
前記ユーザ情報検出部は加速度センサであり、前記ユーザ情報は前記ユーザが発する振動であり、
前記コンテンツは楽曲であり、
前記解析情報は前記楽曲のビート情報を含み、
前記同調判定部は、前記振動と前記ビート情報とが同調しているか否かを判定する
請求項１に記載の音量制御装置。
【請求項３】
前記音量制御部は、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行う
請求項１記載の音量制御装置。
【請求項４】
前記音量制御部は、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していないと判定された場合には前記コンテンツの再生音量を下げるよう制御を行う
請求項１記載の音量制御装置。
【請求項５】
前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していると判定した場合に、前記ユーザ情報と前記解析情報とは同調しているとする判定結果を前記音量制御部に供給する請求項１に記載の音量制御装置。
【請求項６】
前記同調判定部は、所定の回数連続して前記ユーザ情報と前記解析情報とが同調していないと判定した場合に、前記ユーザ情報と前記解析情報とは同調していないとする判定結果を前記音量制御部に供給する請求項１に記載の音量制御装置。
【請求項７】
前記音量制御部は、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合には前記コンテンツの再生音量を上げるよう制御を行い、
前記コンテンツの再生位置がサビ部分である場合において、前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合には、前記サビ部分以外において前記同調判定部により前記ユーザ情報と前記解析情報とが同調していると判定された場合における前記再生音量の上げ幅に比べて大きく前記再生音量を上げるよう制御を行う
請求項２に記載の音量制御装置。
【請求項８】
前記音量制御部は、前記再生音量が前記コンテンツの再生開始時における音量以上である場合において前記同調判定部により前記ユーザ情報と前記解析情報とが同調していないと判定された場合にのみ前記コンテンツの再生音量を下げるよう制御を行う
請求項４に記載の音量制御装置。
【請求項９】
前記同調判定部は、前記ビート情報に対応して同調判定区間を設定し、前記振動が前記同調判定区間内に位置する場合に前記ユーザ情報と前記解析情報とが同調していると判定する
請求項２に記載の音量制御装置。
【請求項１０】
前記同調判定部は、前記ビート情報に対応して同調判定区間を設定し、前記振動と前記同調判定区間内に位置しない場合に前記ユーザ情報と前記解析情報とが同調していないと判定する
請求項２に記載の音量制御装置。
【請求項１１】
前記音量制御部は、前記再生音量が所定の音量に達している場合には該再生音量を上げないように制御を行う
請求項３に記載の音量制御装置。
【請求項１２】
前記音量制御部は、前記ユーザの操作入力を受け付ける入力部に対して前記再生音量を調整する入力が行われた場合には、前記同調判定部による判定結果に関わらず、前記ユーザの入力に従った音量制御を行う
請求項１に記載の音量制御装置。
【請求項１３】
前記ユーザ情報検出部はマイクロホンであり、前記ユーザ情報は前記ユーザが発する音声であり、
前記コンテンツは楽曲であり、
前記解析情報は前記コンテンツのビート情報を含み、
前記同調判定部は、前記音声と前記ビート情報との一致の度合いを判定することにより前記ユーザ情報と前記解析情報とが同調しているか否かを判定する
請求項１に記載の音量制御装置。
【請求項１４】
コンテンツを利用するユーザに関する情報をユーザ情報として検出し、
前記コンテンツの解析情報と、前記ユーザ情報とが同調しているか否かを判定し、
前記同調度合いの判定結果に基づいて前記コンテンツの再生音量を制御する
音量制御方法。
【請求項１５】
音量制御装置と、該音量制御装置とネットワークを介して接続される再生装置とからなり、
前記音量制御装置は、
コンテンツを利用するユーザに関する情報を検出するユーザ情報検出部と、
前記コンテンツの解析情報と、前記ユーザ情報検出部により検出されたユーザ情報とが同調しているか否かを判定する同調判定部と、
該同調判定部による判定結果に基づいて前記コンテンツの再生音量を制御する音量制御部と、
該音量制御部による音量制御情報を前記再生装置に送信する第１の通信部と、
を備え、
前記再生装置は、
前記コンテンツを再生する再生処理部と、
前記第１の通信部から送信された前記音量制御情報を受信する第２の通信部と
該第２の通信部により受信した前記音量制御情報に基づいて前記コンテンツの再生音量を調整する音量調整部と、
を備える
コンテンツ再生システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１２−２２０５４７（Ｐ２０１２−２２０５４７Ａ）
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願番号】特願２０１１−８３３７３（Ｐ２０１１−８３３７３）
【出願日】平成２３年４月５日（２０１１．４．５）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２４年１１月１２日（２０１２．１１．１２）
【国際特許分類】
【出願日】平成２３年４月５日（２０１１．４．５）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]