情報管理装置、情報端末、および情報コンテンツ視聴方法
【課題】時間的な制約を受けることなく高い表現力で他のユーザと情報交換できる情報管理装置および情報端末、ならびに情報コンテンツ視聴方法を得る。
【解決手段】情報管理装置２は、情報端末４において情報コンテンツ（動画コンテンツＤＢ）を再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報（ユーザ音声データＤＣ）を１または複数の情報端末４から受信して収集する受信部（ネットワーク管理モジュール４０２および動画・音声・ユーザデータ登録削除モジュール４０９）と、受信部が受信した音声情報を、１または複数の情報端末に配信する配信部（ネットワーク管理モジュール４０２）とを備える。
【解決手段】情報管理装置２は、情報端末４において情報コンテンツ（動画コンテンツＤＢ）を再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報（ユーザ音声データＤＣ）を１または複数の情報端末４から受信して収集する受信部（ネットワーク管理モジュール４０２および動画・音声・ユーザデータ登録削除モジュール４０９）と、受信部が受信した音声情報を、１または複数の情報端末に配信する配信部（ネットワーク管理モジュール４０２）とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報コンテンツを視聴する際に、ユーザ間でコミュニケーションを図ることが可能な情報管理装置および情報端末、ならびに情報コンテンツ視聴方法に関する。
【背景技術】
【０００２】
近年、インターネットを用いた動画などの情報コンテンツ配信を行う際、単に情報コンテンツのみを配信するだけでなく、その情報コンテンツに関するユーザからの情報も含めて配信するシステムが注目されている。このようなシステムでは、ユーザ間で、例えば口コミ情報などの情報の交換ができるため、例えば似ている嗜好をもつユーザ同士を結ぶコミュニケーションツールとしても注目を集めている。
【０００３】
例えば、特許文献１には、動画を再生する際、その時どきの再生時刻に対応づけられたテキスト情報を、その動画に同期して再生表示するコメント配信システムが開示されている。このコメント配信システムでは、例えば、ユーザが、その時どきの動画表示内容に関連する内容のテキスト情報を登録することにより、他のユーザがその動画を再生する際にそのテキスト情報が同期して再生表示され、ユーザ間で情報交換を行うことができるようになっている。また、特許文献２には、必要に応じてマルチメディアコンテンツ（情報コンテンツ）を再生しながら、テレビ会議やチャットなどによりリアルタイムで情報交換できる情報通信サービスシステムが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第４２６３２１８号公報
【特許文献２】特開２００３−９１０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、例えば、特許文献１に開示されたコメント配信システムでは、ユーザからの情報がテキスト情報であるため、例えばユーザの感情を表現したい場合には忠実に表現するのが難しく、その感情が正確に他のユーザに伝わらない。つまり、テキスト情報を用いた情報交換は、その表現力に限界があるため、場合によってはユーザ間の情報交換が不十分になるおそれがある。
【０００６】
また、例えば、特許文献２に開示された情報通信サービスシステムは、リアルタイムで情報交換するものであるので、ユーザ間で情報のやりとりを行うためには同時刻にシステムを利用する必要があり、ユーザは自分の都合のよい時間に他のユーザとの情報交換を行うことができない。
【０００７】
本発明はかかる問題点に鑑みてなされたもので、その目的は、時間的な制約を受けることなく、高い表現力で他のユーザと情報交換できる情報管理装置、情報端末、および情報コンテンツ視聴方法を提供することにある。
【課題を解決するための手段】
【０００８】
本発明の情報管理装置は、受信部と、配信部とを備えている。受信部は、情報端末において情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を１または複数の情報端末から受信して収集する機能を有している。配信部は、受信部が受信した音声情報を、１または複数の情報端末に配信するものである。
【０００９】
本発明の情報端末は、再生部と、送信部と、受信部と、再生制御部とを備えている。再生部は、情報コンテンツを再生するものである。送信部は、再生部によって情報コンテンツを再生する際に視聴者がした音声発言と、音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を情報管理装置に送信する機能を有している。受信部は、情報管理装置が収集した音声発言と再生期間内相対時刻とを含む音声情報を情報管理装置から受信するものである。再生制御部は、受信部が受信した音声情報に基づき、情報コンテンツに同期して視聴者の音声を再生するように再生部を制御するものである。
【００１０】
本発明の情報コンテンツ視聴方法は、情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を収集し、それぞれに対して音声処理を施し、情報コンテンツに同期して再生するものである。
【００１１】
本発明の情報管理装置、情報端末、情報コンテンツ視聴方法では、情報端末において情報コンテンツを再生する際、過去にその情報コンテンツを視聴した視聴者により入力された音声情報がその情報コンテンツと同期して再生される。その際、音声情報は、音声情報に含まれる相対時刻情報に基づいて同期再生される。
【００１２】
音声処理は、以下に示すように、情報管理装置において行うようにしてもよいし、情報端末において行うようにしてもよい。
【００１３】
音声処理を情報管理装置において行う場合には、例えば、音声情報に所定の音声処理を施す音声処理部をさらに備え、配信部はその音声処理が施された音声情報を配信することが望ましい。この場合には、その音声処理は、例えばサラウンド音声生成処理を含むことが望ましい。この場合、そのサラウンド音声生成処理は、例えば、視聴者の地理座標情報に基づいて行われるようにしてもよいし、視聴者の音声発言における発言部分の数に基づいて行われるようにしてもよいし、視聴者の音声発言の音量に基づいて行われるようにしてもよい。また、このサラウンド音声生成処理の設定は、情報端末からの指示に基づいて修正されるようにしてもよい。音声処理部は、例えば、サラウンド音声生成処理の施された複数の音声情報を１の音声情報に合成する音声合成部を含むようにしてもよい。
【００１４】
音声処理を情報端末において行う場合には、例えば、再生制御部は、受信部が受信した音声情報に対して所定の音声処理を施したうえで、その音声処理後の音声情報に基づき、情報コンテンツに同期して視聴者の音声を再生するように再生部を制御するようにすることが望ましい。その音声処理は、サラウンド音声生成処理を含むことが望ましい。この場合、情報管理装置の配信部は、例えば、音声情報をそのまま配信するようにするのが望ましい。
【００１５】
情報管理装置では、配信部は、さらに情報コンテンツをも配信するようにしてもよい。
【００１６】
情報端末では、再生制御部は、例えば、情報コンテンツに同期して視聴者の音声をサラウンドシステムにより再生するように再生部を制御することが望ましい。再生部は、例えば、記録媒体に記録された情報コンテンツを再生するものであってもよい。
【００１７】
上記のような情報管理装置および情報端末は、例えば以下のようなプログラムによって実現可能となる。
【００１８】
情報管理装置用プログラムは、情報管理装置としてのコンピュータを、受信手段と、配信手段として機能させるためのものである。受信手段は、情報端末において情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を１または複数の情報端末から受信して収集するものである。配信手段は、受信手段が受信した音声情報を、１または複数の情報端末に配信するものである。
【００１９】
情報端末用プログラムは、情報端末としてのコンピュータを、再生手段と、送信手段と、受信手段と、再生制御手段として機能させるためのものである。再生手段は、情報コンテンツを再生するものである。送信手段は、再生手段によって情報コンテンツを再生する際に視聴者がした音声発言と、音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を情報管理装置に送信するものである。受信手段は、情報管理装置が収集した音声発言と再生期間内相対時刻とを含む音声情報を情報管理装置から受信するものである。再生制御手段は、受信手段が受信した音声情報に基づき、情報コンテンツに同期して視聴者の音声を再生するように再生手段を制御するものである。
【発明の効果】
【００２０】
本発明の情報管理装置、情報端末、情報コンテンツ視聴方法によれば、情報コンテンツに対する視聴者の発言を、その情報コンテンツの再生に同期して再生するようにしたので、音声がもつ高い表現力を利用した情報交換が可能となる。
【００２１】
また、情報コンテンツに対する視聴者の発言を、音声情報として情報管理装置に蓄積し、情報端末がその情報コンテンツを再生する際にそれらを受信して同期再生するようにしたので、ユーザは時間的な制約を受けることなく情報交換を行うことができる。
【図面の簡単な説明】
【００２２】
【図１】本発明の第１の実施の形態に係る情報コンテンツ視聴システムの一構成例を表すブロック図である。
【図２】図１に示した情報管理装置の一構成例を表すブロック図である。
【図３】図１に示した情報端末の一構成例を表すブロック図である。
【図４】図１に示した情報管理装置のソフトウェアの一構成例を表す構成図である。
【図５】図４に示したデータベースに係るユーザデータの一構成例を表す表である
【図６】図４に示したデータベースに係る動画コンテンツのメタ情報の一構成例を表す表である
【図７】図４に示したデータベースに係るユーザ音声データのメタ情報の一構成例を表す表である
【図８】図１に示した情報コンテンツ視聴システムに係るサラウンド処理設定データの一構成例を表す表および図である
【図９】図１に示した動画再生装置のソフトウェアの一構成例を表す構成図である。
【図１０】図１に示した情報コンテンツ視聴システムの一動作例を表す流れ図である。
【図１１】図１に示した情報コンテンツ視聴システムの一動作例における表示画面を表す図である。
【図１２】図１に示した情報コンテンツ視聴システムの他の動作例を表す流れ図である。
【図１３】図１に示した情報コンテンツ視聴システムの他の動作例における表示画面表す図である。
【図１４】図１に示した情報コンテンツ視聴システムの他の動作例を表す流れ図である。
【図１５】図１に示した情報コンテンツ視聴システムの他の動作例を表す流れ図である。
【図１６】図１に示した情報コンテンツ視聴システムの他の動作例における表示画面表す図である。
【図１７】本発明の第２の実施の形態に係る情報管理装置のソフトウェアの一構成例を表す構成図である。
【図１８】本発明の第２の実施の形態に係る動画再生装置のソフトウェアの一構成例を表す構成図である。
【図１９】本発明の第２の実施の形態に係る情報コンテンツ視聴システムの一動作例を表す流れ図である。
【図２０】実施の形態を適用した情報コンテンツ視聴システムのうち、適用例１の一構成例を表すブロック図である。
【図２１】適用例２の一構成例を表すブロック図である。
【発明を実施するための形態】
【００２３】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．適用例
【００２４】
＜１．第１の実施の形態＞
［構成例］
（全体構成例）
図１は、本発明の第１の実施の形態に係る情報コンテンツ視聴システムの一構成例を表すものである。この情報コンテンツ視聴システムは、情報管理装置に記憶された動画コンテンツを情報端末において再生する際、過去にその動画コンテンツを視聴したユーザが発言した内容を、その動画コンテンツに同期して再生するものである。なお、本発明の実施の形態に係る情報管理装置、情報端末、および情報コンテンツ視聴方法は、本実施の形態により具現化されるので、併せて説明する。
【００２５】
情報コンテンツ視聴システム１は、情報管理装置２と、複数の情報端末４とを備えている。情報管理装置２と複数の情報端末４は、インターネット９を介して接続されている。
【００２６】
情報管理装置２は、情報コンテンツ視聴システム１においてやりとりされる情報を管理するサーバである。具体的には、情報管理装置２は、後述するように、情報コンテンツ視聴システム１の各ユーザを管理するためのデータ（ユーザデータＤＡ）、動画コンテンツＤＢ、その動画コンテンツＤＢに対する各ユーザの感想などの音声情報（ユーザ音声データＤＣ）などを記録して管理している。そして、情報管理装置２は、情報端末４からの動画コンテンツＤＢの視聴要求に応じて、その動画コンテンツＤＢに対応づけられたユーザ音声データＤＣに対して音声処理を行い、音声処理されたユーザ音声データＤＣ２をその動画コンテンツＤＢとともに情報端末４に送信する機能を有している。
【００２７】
情報管理装置２は、図２に示したように、ＣＰＵ（Central Processing Unit）２０４と、主記憶装置２０２と、ネットワークコントローラ２０１とを備えている。
【００２８】
ＣＰＵ２０４は、ＲＯＭ２０５に記憶されたソフトウェアに基づいて、情報管理装置２内の各ブロックを制御するものである。各ブロックへの指示は、バス２０９を介して行われる。また、ＣＰＵ２０４は、後述するように、ユーザ音声データＤＣに対して、ユーザの位置情報などに基づいてサラウンド音声生成処理を行う機能も有している。ＣＰＵ２０４は、このサラウンド音声生成処理を行う場合などにおいて、一時記憶装置２０３をバッファ領域として使用するようになっている。
【００２９】
主記憶装置２０２は、ユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣなどを記憶する記憶装置であり、例えばＨＤＤ（Hard Disk Drive）などにより構成される。ネットワークコントローラ２０１は、情報端末４との間で、インターネット９を介してユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣ，ＤＣ２などをやりとりするためのものである。
【００３０】
その他、情報管理装置２は、この情報管理装置２を操作するための入出力装置を備えている。具体的には、情報管理装置２は、キーボードやマウスなどの入力装置２０９、その入力装置２０９からの入力を受け付けるＩ／Ｆ（Interface）部２０６、情報管理装置２における処理結果を出力するビデオ出力部２０７、オーディオ出力部２０８、および表示装置２１０を備えている。
【００３１】
以上の構成により、情報管理装置２では、情報端末４からの動画コンテンツＤＢの視聴要求に応じて、まずＣＰＵ２０４が主記憶装置２０２に記憶された、その動画コンテンツＤＢに対応づけられたユーザ音声データＤＣに対してサラウンド音声生成処理を行う。そして、情報管理装置２は、そのサラウンド音声生成処理されたユーザ音声データＤＣ２を、主記憶装置２０２に記憶された動画コンテンツＤＢとともにネットワークコントローラ２０１を介して情報端末４に対して送信するようになっている。
【００３２】
情報端末４は、情報コンテンツ視聴システム１においてユーザ８に対するインターフェースとなる端末である。具体的には、情報端末４は、後述するように、情報管理装置２から動画コンテンツＤＢやユーザ音声データＤＣ２を受信し、その動画コンテンツＤＢを再生する際に、ユーザ音声データＤＣ２を同期して再生するものである。さらに、情報端末４は、動画コンテンツを再生する際、ユーザ８の発言を記録し、再生時間におけるその発言時の相対時刻情報ともにユーザ音声データＤＣとして情報管理装置２に送信する機能を有している。
【００３３】
情報端末４は、図１に示したように、動画再生装置３と、表示装置１０４と、サラウンド音声出力装置１０５と、音声入力装置１０６とを備えている。動画再生装置３は、情報管理装置２との間で、ユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣ，ＤＣ２などを、インターネット９を介してやり取りするとともに、受信した動画コンテンツＤＢおよびユーザ音声データＤＣ２を再生する装置である。表示装置１０４は、例えばテレビやモニタなどであり、動画再生装置３において再生された動画コンテンツＤＢの映像を表示するものである。サラウンド音声出力装置１０５は、複数のスピーカから構成され、動画再生装置３において再生された動画コンテンツＤＢおよびユーザ音声データＤＣ２の音声を、例えば空間的な広がりをもつようなサラウンド環境で出力するようになっている。音声入力装置１０６は、ユーザ８の発言を入力するマイクである。
【００３４】
動画再生装置３は、図３に示したように、ＣＰＵ３１２と、ストリームプロセッサ３０２と、ビデオデコーダ３０４と、オーディオプロセッサ３０３と、グラフィックエンジン３０５と、ＧＰＳ受信機３１３と、Ｉ／Ｆ部３０９と、記憶装置３１０と、ネットワークコントローラ３０１とを備えている。
【００３５】
ＣＰＵ３１２は、ＲＯＭ３１１に記憶されたアプリケーションソフトウェアに基づいて、動画再生装置３内の各ブロックを制御するものである。各ブロックへの指示は、システムバス３１７および入出力バス３１６を介して行われる。ＣＰＵ３１２は、後述するように、動画コンテンツＤＢを再生する際、その再生時間におけるその相対時刻に対応づけられたユーザ音声データＤＣ２を、その動画コンテンツＤＢに同期して再生するように各ブロックを制御する。また、ＣＰＵ３１２は、後述するように、動画コンテンツＤＢの再生する際、音声入力装置１０６により入力されたユーザ８の発言に、その再生時間における発言時の相対時刻情報（動画再生時刻）などを加えたユーザ音声データＤＣを作成する機能も有している。ＣＰＵ３１２は、これらの各種処理を行う際、ＲＡＭ３０８をバッファ領域として使用し、ＲＡＭ３０８は、メモリバス３１８を介して各ブロックとの間でデータやり取りするようになっている。
【００３６】
ストリームプロセッサ３０２は、情報管理装置２から受信した動画コンテンツＤＢを映像情報と音声情報とに分離する機能を有している。ビデオデコーダ３０４は、ストリームプロセッサ３０２から供給された映像情報をデコードするものである。グラフィックエンジン３０５は、アプリケーショングラフィックスを生成する機能を有している。ビデオデコーダ３０４においてデコードされた映像情報およびグラフィックエンジン３０５において生成されたアプリケーショングラフィックスは、ビデオ出力部３０６を介して表示装置１０４に供給されて表示出力される。オーディオプロセッサ３０３は、ストリームプロセッサ３０２から供給された音声情報に対してサラウンド処理などの音声処理を行うものである。音声処理された音声情報は、オーディオ出力部３０７を介してサラウンド音声出力装置１０５に供給されて音声出力される。
【００３７】
ＧＰＳ受信機３１３は、動画再生装置３が設置されている地理上の位置情報（ＧＰＳ情報）を検出する機能を有している。得られた位置情報は、後述するように、ユーザ名などのユーザ情報とともにユーザデータＤＡとして情報管理装置２に記録され、情報管理装置２においてサラウンド音声生成処理を行う際などに使用される。Ｉ／Ｆ部３０９は、音声入力装置１０６や、キーイベント入力やＬＥＤ（Light Emitting Diode）発光などを行う外部機器１０７に対するインターフェースの機能を有している。記憶装置３１０は、音声入力装置１０６により入力された音声などを記憶する記憶装置であり、例えばＨＤＤなどにより構成される。ネットワークコントローラ３０１は、情報管理装置２との間で、インターネット９を介してユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣ，ＤＣ２などをやりとりするためのものである。
【００３８】
以上の構成により、情報端末４は、情報管理装置２から動画コンテンツＤＢおよびユーザ音声データＤＣ２を、ネットワークコントローラ３０１を介して受信し、表示装置１０４およびサラウンド音声出力装置１０５を用いて動画コンテンツＤＢの再生を行う。その際、ＣＰＵ３１２は、ユーザ音声データＤＣ２がもつ動画再生時刻の情報に基づいて、そのユーザ音声データＤＣを動画コンテンツＤＢに同期して再生するようにストリームプロセッサ３０２、ビデオデコーダ３０４、オーディオプロセッサ３０３などの各ブロックを制御するようになっている。
【００３９】
それと同時に、動画コンテンツＤＢを再生する際、ＣＰＵ３１２は、音声入力装置１０６を介して入力されたユーザ８の発言に、その再生時間におけるその発言時の相対時刻情報を加えたユーザ音声データＤＣを作成し、ネットワークコントローラ３０１を介して情報管理装置２に対して送信するようになっている。
【００４０】
なお、この例では、アプリケーションソフトウェアをＲＯＭ３１１に記録するようにしたが、これに限定されるものではなく、例えば、記録媒体を再生可能な再生機器を動画再生装置３に適用し、この記録媒体に記録するようにしてもよい。この場合の例については、適用例（後述）において説明する。
【００４１】
（ソフトウェア構成例）
次に、情報管理装置２および動画再生装置３のソフトウェア構成例を説明する。
【００４２】
図４は、情報管理装置２のソフトウェア構成の一例を表すものである。情報管理装置２は、データベース４０８と、動画・音声・ユーザデータ登録削除モジュール４０９と、ユーザ認証処理モジュール４０３と、動画コンテンツ一覧表示モジュール４０４と、サラウンド設定データ処理モジュール４０５と、音声処理モジュール４０６と、ネットワーク管理モジュール４０２と、画面表示制御モジュール４０７と、システム状態管理アプリケーション４０１とを備えている。図４において、各ソフトウェアは、上に示しているものほどアプリケーションに近いものであり、下に示しているものほどファームウェアに近いものである。
【００４３】
データベース４０８は、情報コンテンツ視聴システム１においてやりとりされる情報を管理するものである。具体的には、データベース４０８は、ユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣを管理している。以下に、データベース４０８が管理するこれらの情報について詳細に説明する。
【００４４】
図５は、ユーザデータＤＡの一例を表すものである。ユーザデータＤＡは、ユーザＩＤと、ユーザ名と、ユーザパスワードと、ＧＰＳ情報と、登録日時とを含んでいる。ユーザＩＤは、情報管理装置２から一意的に与えられる、各ユーザに固有の番号であり、データベース４０８における管理上の目的の他、後述するようにユーザデータＤＡとユーザ音声データＤＣとの対応づけのためにも用いられるものである。ユーザ名は、ユーザＩＤと同様に各ユーザに固有のものである。ユーザ名は、例えばアルファベットなどを用いて構成され、ユーザＩＤに比べ覚えやすいものである。よって、ユーザ名は、例えば、ユーザが情報コンテンツ視聴システム１にログインする際や、ユーザ間でコミュニティを構成する場合に各ユーザをより容易に特定する際などに特に便利である。ユーザパスワードは、情報管理装置２にログインする際のユーザ認証に用いられるものである。ＧＰＳ情報は、動画再生装置３のＧＰＳ受信機３１３によって得られた地理上の位置情報であり、後述するように、ユーザ音声データＤＣに対するサラウンド音声生成処理を行う際に、その音像定位位置（方向θ）を求める為に用いるものである。登録日時は、この情報コンテンツ視聴システム１に対してユーザ登録を行った日時である。さらに、このユーザデータＤＡは、この例では、課金情報や年齢情報などの情報を含んでいる。このユーザデータＤＡは、この情報コンテンツ視聴システム１に対してユーザ登録を行ったときに作成され、情報管理装置２のデータベース４０８において管理されるものである。
【００４５】
図６は、動画コンテンツＤＢに付随するメタ情報の一例を表すものである。このメタ情報は、動画コンテンツＩＤと、動画時間と、動画コンテンツ名と、登録日時と、平均音量とを含んでおり、実動画データと合わせて動画コンテンツＤＢを構成するものである。動画コンテンツＩＤは、各動画コンテンツＤＢに固有の番号であり、データベース４０８における管理上の目的の他、後述するように動画コンテンツＤＢとユーザ音声データＤＣとの対応づけのためにも用いられるものである。動画時間は、動画コンテンツＤＢの時間長（再生時間）である。登録日時は、その動画コンテンツＤＢを情報コンテンツ視聴システム１に登録した日時である。平均音量は、その動画コンテンツＤＢの全時間長にわたる音量の平均値であり、後述するように、ユーザ音声データＤＣに対するサラウンド音声生成処理を行う際に、その音像定位位置（距離ｒ）を求める為に用いるものである。さらに、このメタ情報は、この例では、画質、課金情報、視聴回数、お勧め度、視聴年齢情報などの情報を含んでいる。この動画コンテンツＤＢは、情報コンテンツ視聴システム１に動画コンテンツを登録したときに作成され、情報管理装置２のデータベース４０８において管理されるものである。
【００４６】
図７は、ユーザ音声データＤＣに付随するメタ情報の一例を表すものである。このメタ情報は、ユーザ音声データＩＤと、動画コンテンツＩＤと、動画再生時刻と、ユーザＩＤと、登録日時と、最大音量と、音声の長さと、実音声データとを含んでおり、実音声データと合わせてユーザ音声データＤＣを構成するものである。ユーザ音声データＩＤは、各ユーザ音声データに固有の番号である。動画コンテンツＩＤは、そのユーザ音声データＤＣに対応づけられた動画コンテンツのＩＤである。すなわち、この動画コンテンツＩＤは、情報端末４において、そのユーザ音声データＤＣに係る音声が入力されたときに再生されていた動画コンテンツのＩＤである。動画再生時刻は、そのユーザ音声データＤＣに対応づけられた動画コンテンツＤＢの再生時間における、そのユーザ音声データＤＣに対応づけられた相対時刻である。すなわち、この動画再生時刻は、情報端末４において、そのユーザ音声データＤＣに係る音声が入力されたときの、動画コンテンツＤＢの再生時間における相対時刻である。ユーザＩＤは、そのユーザ音声データＤＣに対応づけられたユーザＩＤである。すなわち、そのユーザ音声データＤＣに係る音声を発したユーザのＩＤである。登録日時は、そのユーザ音声データＤＣを情報コンテンツ視聴システム１に登録した日時である。最大音量は、そのユーザ音声データＤＣの全時間長にわたる音量の最大値である。音声の長さは、ユーザ音声データＤＣの時間長である。さらにこのユーザ音声データＤＣは、この例では、音質などの情報を含んでいる。ユーザ音声データＤＣは、情報端末４においてユーザが音声を入力したときに作成され、情報管理装置２に送信され登録された際、上記登録日時が記録され、情報管理装置２のデータベース４０８において管理されるものである。
【００４７】
このようなデータベース構成により、情報管理装置２は、情報端末４からの視聴要求に応じて動画コンテンツＤＢとユーザ音声データＤＣ２とを情報端末４に送信する際、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣを、ユーザ音声データＤＣのメタ情報（動画コンテンツＩＤ）を用いて検索し、さらに、その検索されたユーザ音声データＤＣのメタ情報（ユーザＩＤ）を用いて、その動画コンテンツＤＢを過去に視聴したユーザＩＤを取得し、これらを用いてユーザ音声データＤＣ２を生成できるようになっている。また、情報端末４は、その動画コンテンツＤＢを再生する際、ユーザ音声データＤＣのメタ情報（動画再生時刻）に基づいてそのユーザ音声データＤＣを再生することにより、ユーザ音声データＤＣを動画コンテンツＤＢに同期して再生することができるようになっている。
【００４８】
動画・音声・ユーザデータ登録削除モジュール４０９は、ユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣをデータベース４０８に新しく登録し、あるいは削除するモジュールである。ユーザ認証処理モジュール４０３は、ユーザデータＤＡに基づいて、情報コンテンツ視聴システム１（情報管理装置２）にアクセスする際のユーザ認証を行う機能を有している。動画コンテンツ一覧表示モジュール４０４は、情報管理装置２の管理の際に、必要に応じてデータベース４０８に記憶された動画コンテンツを検索して一覧表示する機能を有している。
【００４９】
サラウンド設定データ処理モジュール４０５は、再生する動画コンテンツＤＢに対応づけられたユーザ音声データＤＣをデータベース４０８において検索し、さらにそれらをユーザごとに分け、それらに基づいて音像定位位置を計算し、サラウンド処理設定データＤＤを作成する機能を有している。
【００５０】
図８（Ａ）は、サラウンド処理設定データＤＤの一例を表すものであり、図８（Ｂ）はその音像定位位置の設定例を表すものである。サラウンド処理設定データＤＤは、図８（Ａ）に示したように、ユーザ音声データＤＣの音声を発したユーザごとに、そのユーザＩＤと、そのユーザ音声データＤＣを再生するかどうかの設定（音声のＯＮ／ＯＦＦ）と、音像定位位置とを含むものである。この例では、音像定位位置の情報は、図８（Ｂ）に示したように、その動画コンテンツを視聴するユーザ８を基準としたときの、距離ｒおよび方向θにより構成されている。このサラウンド処理設定データＤＤにより、情報端末４では、ユーザ音声データＤＣの音声のそれぞれが、そのユーザごとに設定された音像定位により再生されるようになっている。
【００５１】
音声処理モジュール４０６は、サラウンド処理設定データＤＤに従って、ユーザ音声データＤＣに対する音像定位処理（サラウンド音声生成処理）を行い、ユーザ音声データＤＣ２を作成するものである。ユーザ音声データＤＣ２は、ユーザ音声データＤＣ（図７）において、実音声データをサラウンド音声生成処理されたものに置き換えたものである。つまり、ユーザ音声データＤＣ２のメタ情報は、ユーザ音声データＤＣのものと同じである。
【００５２】
ネットワーク管理モジュール４０２は、インターネット９を介して情報端末４と情報をやりとりするためのものである。画面表示制御モジュール４０７は、情報管理装置２の管理に用いられるものであり、情報コンテンツ視聴システム１などの状態を表示装置２１０の画面に表示するものである。
【００５３】
システム状態管理アプリケーション４０１は、ネットワーク管理モジュール４０２、ユーザ認証処理モジュール４０３、動画コンテンツ一覧表示モジュール４０４、サラウンド設定データ処理モジュール４０５、画面表示制御モジュール４０７、および動画・音声・ユーザデータ登録削除モジュール４０９に対して、これらのモジュールが連動して動作するように制御を行うアプリケーションソフトウェアである。
【００５４】
ネットワーク管理モジュール４０２、音声処理モジュール４０６、画面表示制御モジュール４０７、およびデータベース４０８は、基本ソフトウェアであるオペレーティングシステム４１０を介してドライバ４１１に指示を与えることにより、図２に示した情報管理装置２の各ハードウェアブロックを制御するようになっている。
【００５５】
図９は、動画再生装置３のソフトウェア構成の一例を表すものである。動画再生装置３は、動画コンテンツ管理・表示モジュール５０２と、動画コンテンツ再生モジュール５０３と、画面表示制御モジュール５０８と、動画再生制御モジュール５０９と、音声再生制御モジュール５１０と、ファイル管理モジュール５０７と、ネットワーク管理モジュール５０６と、ユーザ音声データ作成モジュール５０５と、入力情報制御アプリケーション５０４と、サラウンド音声共有アプリケーション５０１とを備えている。
【００５６】
動画コンテンツ管理・表示モジュール５０２は、情報管理装置２から供給された、ユーザ８が閲覧可能な動画コンテンツの一覧や音像定位情報の表示、ユーザ音声データＤＣの情報管理装置２に対する削除要請を処理する機能を有している。動画コンテンツ再生モジュール５０３は、動画コンテンツＤＢとユーザ音声データＤＣ２とを同期して再生する機能を有している。
【００５７】
画面表示制御モジュール５０８は、動画コンテンツ管理・表示モジュール５０２や動画コンテンツ再生モジュール５０３の指示に従い、表示装置１０４に表示する画面を制御する機能を有する。動画再生制御モジュール５０９は、動画コンテンツ再生モジュール５０３の指示に従い、動画コンテンツＤＢの映像情報の再生を制御するものである。音声再生制御モジュール５１０は、動画コンテンツ再生モジュール５０３の指示に従い、動画コンテンツＤＢの音声情報の再生を制御するものである。
【００５８】
ファイル管理モジュール５０７は、動画コンテンツ管理・表示モジュール５０２や動画コンテンツ再生モジュール５０３と連動して、各データ（ファイル）の管理を行うものである。ネットワーク管理モジュール５０６は、インターネット９を介して情報管理装置２と情報をやりとりするためのものである。
【００５９】
ユーザ音声データ作成モジュール５０５は、音声入力装置１０６を介してユーザ８が入力した音声に基づいてユーザ音声データＤＣを作成するものである。具体的には、ユーザ音声データ作成モジュール５０５は、動画再生装置３が動画コンテンツＤＢを再生している際にユーザ８が入力した発言に、その動画コンテンツＤＢの再生時間におけるその発言時の相対時刻情報（動画再生時刻）などの情報を付加し、図７に示したユーザ音声データＤＣを作成するようになっている。
【００６０】
入力情報制御アプリケーション５０４は、ユーザ８に対する入力インターフェースの機能を有し、ユーザからの操作を受け付けるものである。
【００６１】
サラウンド音声共有アプリケーション５０１は、動画コンテンツ管理・表示モジュール５０２、動画コンテンツ再生モジュール５０３、入力情報制御アプリケーション５０４、およびユーザ音声データ作成モジュール５０５に対して、これらのモジュールが連動して動作するように制御を行うアプリケーションソフトウェアである。
【００６２】
ネットワーク管理モジュール５０６、ファイル管理モジュール５０７、画面表示制御モジュール５０８、動画再生制御モジュール５０９、および音声再生制御モジュール５１０は、基本ソフトウェアであるオペレーティングシステム５１１を介してドライバ５１２に指示を与えることにより、図３に示した情報端末４の各ハードウェアブロックを制御するようになっている。
【００６３】
ここで、動画・音声・ユーザデータ登録削除モジュール４０９およびネットワーク管理モジュール４０２は、本発明の情報管理装置における「受信部」の一具体例に対応する。ネットワーク管理モジュール４０２は、本発明における「配信部」の一具体例に対応する。
【００６４】
サラウンド設定処理モジュール４０５および音声処理モジュール４０６は、本発明における「音声処理部」の一具体例に対応する。
【００６５】
動画再生制御モジュール５０９および音声再生制御モジュール５１０は、本発明における「再生部」の一具体例に対応する。ユーザ音声データ作成モジュール５０５およびネットワーク管理モジュール５０６は、本発明における「送信部」の一具体例に対応する。ネットワーク管理モジュール５０６は、本発明の情報端末における「受信部」の一具体例に対応する。動画コンテンツ再生モジュール５０３は、本発明における「再生制御部」の一具体例に対応する。
【００６６】
［動作および作用］
続いて、本実施の形態の情報コンテンツ視聴システム１の動作および作用について説明する。
【００６７】
（全体動作概要）
情報管理装置２では、情報端末４からの動画コンテンツ視聴要求に応じて、データベース４０８が、主記憶装置２０２に記録された動画コンテンツＤＢを検索する。サラウンド設定データ処理モジュール４０５は、データベース４０８と連携して、その動画コンテンツＤＢに対応づけられたユーザ音声データＤＣ、およびそのユーザ音声データＤＣと対応づけられたユーザデータＤＡに基づいて、過去に動画コンテンツＤＢを視聴したユーザの音像定位位置を算出し、サラウンド処理設定データＤＤを作成する。音声処理モジュール４０６は、サラウンド処理設定データＤＤに基づいて、ユーザ音声データＤＣのそれぞれに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成する。そしてネットワーク管理モジュール４０２は、ネットワークコントローラ２０１を制御し、その動画コンテンツＤＢおよびユーザ音声データＤＣ２を、インターネット９を介して情報端末４に送信する。
【００６８】
情報端末４では、動画再生装置３のネットワーク管理モジュール５０６がネットワークコントローラ３０１を制御し、情報管理装置２から動画コンテンツＤＢとユーザ音声データＤＣ２を受信する。そして、動画コンテンツ再生モジュール５０３は、その動画コンテンツＤＢを再生する際、ユーザ音声データＤＣ２を、そのメタ情報（動画再生時刻）を用いて動画コンテンツＤＢに同期して再生する。動画再生制御モジュール５０９は、ビデオデコーダ３０４やビデオ出力部３０６などを制御して、動画コンテンツＤＢの映像情報を表示装置１０４に供給し、表示装置１０４はその映像を表示する。音声再生制御モジュール５１０は、オーディオプロセッサ３０３やオーディオ出力部３０７などを制御して、動画コンテンツＤＢおよびユーザ音声データＤＣ２の音声情報をサラウンド音声出力装置１０５に供給し、サラウンド音声出力装置１０５はその音声情報を出力する。これにより、ユーザ音声データＤＣ２の音声は、動画コンテンツＤＢの音声に重畳され、動画コンテンツＤＢに同期して再生される。
【００６９】
情報端末４は、動画コンテンツＤＢを再生する際、音声入力装置１０６を介してユーザ８の音声を入力する。動画再生装置３のユーザ音声データ作成モジュール５０５は、入力されたユーザ８の発言に、その動画コンテンツＤＢの再生時間におけるその発言時の相対時刻情報（動画再生時刻）などの情報を付加し、ユーザ音声データＤＣを作成する。ネットワーク管理モジュール５０６は、このユーザ音声データＤＣを情報管理装置２に送信する。
【００７０】
情報管理装置２では、ネットワーク管理モジュール４０２が、情報端末４からこのユーザ音声データＤＣを受信する。動画・音声・ユーザデータ登録削除モジュール４０９は、このユーザ音声データＤＣをデータベース４０８（主記憶装置２０２）に記録する。
【００７１】
（詳細動作）
以下、情報コンテンツ視聴システム１の動作を、いくつかのフローチャートを用いて詳細に説明する。
【００７２】
（動画コンテンツの視聴）
図１０は、動画コンテンツＤＢの視聴を行う場合の流れ図を表すものである。ユーザ８は、情報端末４から情報管理装置２にログインした後、情報管理装置２に対して動画コンテンツＤＢの視聴要求を行う。情報管理装置２は、視聴要求された動画コンテンツＤＢに、過去に視聴履歴があるかどうかを調査し、視聴履歴がある場合において、視聴した各ユーザのＧＰＳ情報などに基づいてサラウンド音声生成処理を行い、情報端末４に対して動画コンテンツＤＢおよびユーザ音声データＤＣ２を送信する。情報端末４は、これらを受信して、同期再生を行う。以下に、フローの各ステップを詳細に説明する。
【００７３】
まず、情報端末４においてユーザ８がユーザ名とユーザパスワードを入力し、情報管理装置２のユーザ認証処理モジュール４０３がユーザ認証を行い（ステップＳ１０２）、ユーザ８が情報コンテンツ視聴システム１の登録ユーザかどうかを確認する（ステップＳ１０３）。ユーザ８が登録ユーザの場合にはステップＳ１０４に進み、登録ユーザではない場合にはこのフローを終了する。
【００７４】
次に、情報管理装置２が、視聴可能な動画コンテンツ一覧を作成して送信し、情報端末４がその一覧を表示する（ステップＳ１０４）。具体的には、情報管理装置２では、データベース４０８が、例えばユーザ８のユーザデータＤＡの課金情報に基づいて、ユーザ８が視聴可能な動画コンテンツを検索してその一覧を作成する。つまり、この例では、情報コンテンツ視聴システム１は有償登録制のものである。また、データベース４０８は、この課金情報の他、ユーザデータＤＡの年齢情報などに基づいて、動画コンテンツの一覧を作成するようにしてもよい。ネットワーク管理モジュール４０２は、その一覧を情報端末４に送信する。情報端末４の動画再生装置３では、ネットワーク管理モジュール５０６がその動画コンテンツの一覧を受信し、動画コンテンツ管理・表示モジュール５０２がその一覧を表示装置１０４に表示する。
【００７５】
次に、情報端末４において、ユーザ８が動画コンテンツの一覧から視聴したい動画コンテンツＤＢを選択する（ステップＳ１０５）。図示していないが、ユーザ８は、例えばこの動画コンテンツの一覧に視聴したいものがないなどの場合には、表示装置１０４に表示されるメニュー画面に従い、情報コンテンツ視聴システム１からログオフすることができる。また、ユーザ８は、表示装置１０４に表示されるメニュー画面に従い、例えば自身が所有する動画コンテンツを情報管理装置２にアップロードすることも可能である。
【００７６】
次に、情報管理装置２が、ユーザ８が選択した動画コンテンツＤＢに視聴履歴があるかどうかを確認する（ステップＳ１０６）。具体的には、データベース４０８が、例えば、登録されているユーザ音声データのうち、そのメタ情報（動画コンテンツＩＤ）が動画コンテンツＤＢのものと一致するものを検索することにより、その動画コンテンツＤＢに視聴履歴があるかどうかを確認する。動画コンテンツＤＢに視聴履歴が無い場合にはステップＳ１０７に進み、視聴履歴がある場合には、ステップＳ１０９に進む。
【００７７】
ステップＳ１０６において動画コンテンツＤＢに視聴履歴がない場合には、情報管理装置２のネットワーク管理モジュール４０２が情報端末４に対して動画コンテンツＤＢを送信し、動画再生装置３のネットワーク管理モジュール５０６がこれを受信する（ステップＳ１０７）。そして、情報端末４において、動画コンテンツ再生モジュール５０３が、動画再生制御モジュール５０９および音声再生制御モジュール５１０を制御し、表示装置１０４がその動画コンテンツＤＢの映像情報を表示するとともに、サラウンド音声出力装置１０５がその音声情報を出力する。これにより、ユーザ８はこの動画コンテンツＤＢを視聴することができる。
【００７８】
ステップＳ１０６において動画コンテンツＤＢに視聴履歴がある場合には、情報管理装置２は、サラウンド処理設定データＤＤを作成して情報端末４に送信し、情報端末４がこれを受信して、その音像定位情報を表示する（ステップＳ１０９）。具体的には、まず情報管理装置２では、サラウンド設定データ処理モジュール４０５が、視聴履歴がある各ユーザの音像定位位置の算出を行い、サラウンド処理設定データＤＤを作成する。その音像定位位置の算出は、詳細は後述するが、視聴履歴がある各ユーザの、その動画コンテンツＤＢに対する発言回数や、発言の平均最大音量、ＧＰＳ情報などに基づいて行われる。そして、情報管理装置２のネットワーク管理モジュール４０２が、サラウンド処理設定データＤＤを情報端末４に送信する。情報端末４では、ネットワーク管理モジュール５０６がこれを受信し、動画再生装置３の動画コンテンツ管理・表示モジュール５０２が、情報管理装置２から供給されたサラウンド処理設定データＤＤの情報に基づいて、音像定位情報を表示する。以下に、情報端末４における音像定位情報の表示例を説明する。
【００７９】
図１１は、音像定位情報の表示画面例を表すものである。この表示画面例は、ユーザ一覧画面１２０と、音像定位情報画面１１０とから構成されている。
【００８０】
ユーザ一覧画面１２０は、過去に動画コンテンツＤＢを視聴したユーザの一覧を示すものである。ユーザ一覧画面１２０は、各ユーザを示すアイコン１２１と、ユーザ数が多い場合などにユーザ一覧をスクロール表示するためのスクロールバー１２２とを含んでいる。各アイコン１２１は、ユーザ名と一緒に表示され、各アイコンと各ユーザとの対応がわかりやすく示されている。
【００８１】
音像定位情報画面１１０は、各ユーザの音像定位位置や、動画の音量などを模式的に示すものである。音像定位情報画面１１０には、情報端末４の構成要素（表示画面１０４およびサラウンド音声出力装置１０５）の配置が模式的に示されている。音像定位情報画面１１０は、この例では、アイコン１１８，１１９と、音量バー１１１、音量表示円１１２と、再生開始ボタン１１３とを含んでいる。アイコン１１８は、動画コンテンツＤＢを視聴するユーザ８の配置を示すものである。アイコン１１９は、過去に動画コンテンツＤＢを視聴したユーザの音像定位位置を示すものであり、ユーザ一覧画面１２０に表示された各アイコンと対応している。音量バー１１１は、動画コンテンツＤＢの再生音量を表示するとともに、その設定を行うことができるものであり、これにより、動画コンテンツＤＢの音量と、ユーザ音声データＤＣ２の音量とのバランスを調整することができる。音量表示円１１２は、音量バー１１１と連動して動画コンテンツＤＢの再生音量をわかりやすく表示するものであり、例えば、音量表示円１１２が大きいほどその音量が大きく、音量表示円１１２が小さいほどその音量が小さいことを示すものである。再生開始ボタン１１３は、この音像定位情報の表示を終了し、動画コンテンツＤＢの再生を開始するためのものである。
【００８２】
次に、ユーザ８は、サラウンド処理設定データＤＤの編集、および動画コンテンツＤＢの音量調整を行う（ステップＳ１１０）。具体的には、情報端末４では、入力情報制御アプリケーション５０４がユーザ８からの指示を受け付け、動画コンテンツ管理・表示モジュール５０２が各ユーザの音像定位情報を編集してサラウンド処理設定データＤＤを再作成する。以下に、図１１を参照して、その具体例を説明する。
【００８３】
図１１において、ユーザ一覧画面１２０に表示されたユーザを選択し、そのアイコンを音像定位情報画面１１０の任意の位置に配置することにより、各ユーザの音像定位位置を自由に設定することができる。また、ユーザ一覧画面１２０のユーザを選択し、設定を行うことにより、そのユーザの音声出力のオンオフを設定することができる。このオンオフ設定は、例えば、ある特定ユーザの音声だけを聞きたい場合や、ある特定ユーザの音声だけ聞きたくない場合などに使用することができる。音像定位情報画面１１０には、ユーザ一覧画面１２０に表示されたユーザのうち、音声出力がオンに設定されているユーザのみが表示されている。これらの設定の結果は、サラウンド処理設定データＤＤ（図８（Ａ））に反映される。すなわち、再生開始ボタン１１３を選択すると、動画コンテンツ管理・表示モジュール５０２が、この設定結果に基づいてサラウンド処理設定データＤＤを再作成する。
【００８４】
次に、情報端末４は、編集されたサラウンド処理設定データＤＤを情報管理装置２に送信し、情報管理装置２はこれを受信する（ステップＳ１１１）。具体的には、動画再生装置３のネットワーク管理モジュール５０６が、ステップＳ１１０において再作成されたサラウンド処理設定データＤＤを情報管理装置２に送信し、情報管理装置２のネットワーク管理モジュール４０２がこれを受信する。
【００８５】
次に、情報管理装置２は、ユーザ音声データＤＣに対してサラウンド音声生成処理を行う（ステップＳ１１２）。具体的には、音声処理モジュール４０６が、情報端末４において編集されたサラウンド処理設定データＤＤに基づいて、各ユーザ音声データＤＣに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成する。
【００８６】
情報管理装置２は、サラウンド音声生成処理が行われた複数のユーザ音声データＤＣ２を、そのメタ情報に含まれる動画再生時刻を用いて、例えば動画コンテンツＤＢと同じ時間長をもつ１つのユーザ音声データＤＣ３に合成することも可能である。この合成は、以下の場合に有効である。すなわち、情報端末４において動画コンテンツＤＢを再生する際に、複数のユーザ音声データＤＣ２がお互いに隣接した動画再生時刻を有する場合には、それらの複数のユーザ音声データＤＣ２の音声が重なることとなる。これは、複数のユーザ音声データＤＣ２に対して同時に処理を行う必要があるため、動画再生装置３の負荷がより重くなることを意味している。この時、例えば、動画再生装置３の機器性能によっては、複数のユーザ音声データＤＣ２を同時に再生することができない恐れがある。このような場合に、動画再生装置３は、複数のユーザ音声データＤＣ２に代えてこの合成されたユーザ音声データＤＣ３を用いることにより、同時に再生するユーザ音声データの数に関する制限をうけることなく、動画コンテンツＤＢとの同期再生を行うことができる。
【００８７】
次に、情報管理装置２は、動画コンテンツＤＢおよびユーザ音声データＤＣ２を、情報端末４に送信し、情報端末４がこれを受信する（ステップＳ１１３）。具体的には、情報管理装置２のネットワーク管理モジュール４０２が、ステップＳ１１２においてサラウンド音声生成処理されたユーザ音声データＤＣ２、もしくはこれらを合成したユーザ音声データＤＣ３を情報管理装置２に送信し、動画再生装置３のネットワーク管理モジュール５０６がこれらを受信する。
【００８８】
そして、情報端末４は、動画コンテンツＤＢとユーザ音声データＤＣ２の同期再生を行う（ステップＳ１１４）。具体的には、情報端末４が動画コンテンツＤＢおよびユーザ音声データＤＣ２を受信した場合には、コンテンツ再生モジュール５０３は、各ユーザ音声データＤＣ２のメタ情報に含まれる動画再生時刻が、その動画コンテンツＤＢの再生時刻と一致したときに、そのユーザ音声データＤＣ２の音声を再生する。また、情報端末４が動画コンテンツＤＢおよび合成されたユーザ音声データＤＣ３を受信した場合には、コンテンツ再生モジュール５０３は、その動画コンテンツＤＢの再生時刻と、構成されたユーザ音声データＤＣ３の再生時刻とが常に互いに等しくなるように再生を行う。
【００８９】
以上により、このフローは終了する。
【００９０】
（ユーザ音声データＤＣの作成・登録）
次に、情報端末４において動画コンテンツＤＢを再生している時に、ユーザ８が行った発言に基づいてユーザ音声データＤＣを作成する場合のフローを説明する。
【００９１】
図１２は、ユーザ音声データＤＣを作成する場合の流れ図を表すものである。動作再生装置３は、動画コンテンツＤＢを再生する際、ユーザ８が発言を行う度にユーザ音声データＤＣを作成し、情報管理装置２に送信する。情報管理装置２は、そのユーザ音声データＤＣを受信し、データベース４０８に蓄積する。以下に、フローの各ステップを詳細に説明する。
【００９２】
まず、情報端末４の動画再生装置３は、動画再生中かどうかを確認する（ステップＳ２０２）。言い換えれば、動画再生装置３は、一時停止中でないかどうか、あるいは早送りや巻き戻し中ではないかどうかを確認する。動作再生装置３が動画再生中の場合にはステップＳ２０３に進み、動画再生中でない場合にはこのフローを終了する。
【００９３】
次に、ユーザ８が発言を入力する（ステップＳ２０３）。具体的には、動画再生装置３の入力情報制御アプリケーション５０４が、音声入力装置１０６に入力されたユーザ８の発言を記録する。具体的には、例えば音声入力装置１０６にボタンを設け、あるいは外部機器１０７としてボタンを設け、ユーザ８がそのボタンを押下しながら発言したときに、音声入力装置１０６を介してその発言が記録される。もしくは、情報端末４は、例えば、入力音声の有無やその音量を分析して、ユーザ８が発言を行っていると判断し、その発言を記録するようにしてもよい。
【００９４】
次に、情報端末４は、発言時の動画再生時刻を取得する（ステップＳ２０４）。具体的には、ユーザ音声データ作成モジュール５０５が、動画コンテンツＤＢの再生時間における、発言時の相対時刻（動画再生時刻）を取得する。上記ボタンを設けた例では、ユーザ８がボタンを押下したときに、ユーザ音声データ作成モジュール５０５が、動画コンテンツの再生時間における相対時刻を取得する。
【００９５】
次に、情報端末４は、ユーザ音声データＤＣの作成を行う（ステップＳ２０５）。具体的には、ユーザ音声データ作成モジュール５０５が、ステップＳ２０３において記録した音声情報（実音声データ）、ステップＳ２０４において取得した動画再生時刻などに基づいて、図７に示したユーザ音声データＤＣを作成する。
【００９６】
次に、情報端末４は、ユーザ音声データＤＣを情報管理装置２に送信し（ステップＳ２０６）、情報管理装置２がこれを受信する（ステップＳ２０７）。
【００９７】
次に、情報管理装置２は、ユーザ音声データＤＣをデータベース４０８に登録する（ステップＳ２０８）。具体的には、動画・音声・ユーザデータ登録削除モジュール４０９が、ユーザ音声データＤＣをデータベース４０８に登録し蓄積する。
【００９８】
情報端末４は、動画の再生が終了するまでの間、ユーザ８が発言を行う度に、ユーザ音声データＤＣを作成し情報管理装置２に送信し、情報管理装置２は、これを受信しデータベース４０８に登録し蓄積する。
【００９９】
以上のフローは、動画の再生が終了すると終了する。
【０１００】
（サラウンド処理設定データＤＤの作成）
次に、図１０のステップＳ１０９に示した、サラウンド処理設定データＤＤの作成のフローについて、詳細に説明する。
【０１０１】
図１３は、サラウンド処理設定データＤＤを作成する場合の流れ図を表すものである。情報管理装置２では、過去に動画コンテンツＤＢを視聴したことがあるユーザごとに、その動画コンテンツＤＢに対する発言回数、発言の平均最大音量、およびそのユーザのＧＰＳ情報に基づいて音像定位位置を設定する。このフローは、全て情報管理装置２において実行される。以下に、フローの各ステップを詳細に説明する。
【０１０２】
まず、情報管理装置２は、動画コンテンツＤＢについて視聴履歴があるユーザの一覧を取得する（ステップＳ３０２）。具体的には、データベース４０８は、ステップＳ１０６において検索した、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣのメタ情報（ユーザＩＤ）を調べることにより、動画コンテンツＤＢの視聴履歴があるユーザの一覧を取得する。
【０１０３】
次に、情報管理装置２は、各ユーザのＧＰＳ情報を取得する（ステップＳ３０４）。具体的には、サラウンド設定データ処理モジュール４０５は、データベース４０８に登録されているユーザデータＤＡのメタ情報（ユーザＩＤおよびＧＰＳ情報）を用いて、ステップＳ３０２で得られたユーザ一覧の各ユーザのＧＰＳ情報を取得する。
【０１０４】
次に、情報管理装置２は、各ユーザの音像定位位置（方向θ）を決定する（ステップＳ３０５）。具体的には、サラウンド設定データ処理モジュール４０５は、ユーザ８のＧＰＳ情報と、ステップＳ３０４で得られた各ユーザのＧＰＳ情報とに基づいて、音像定位位置の方向θ（図８（Ｂ）参照）を決定する。これにより、例えば、ユーザ８は、動画コンテンツＤＢと同期してユーザ音声データＤＣ２を再生する際、実際に各ユーザが居住している方向から、そのユーザの音声（ユーザ音声データＤＣ２の音声）が発生しているように感じるようになる。
【０１０５】
次に、情報管理装置２は、各ユーザの発言回数、および各ユーザの平均最大音量を取得する（ステップＳ３０６）。具体的には、サラウンド設定データ処理モジュール４０５が、ステップＳ１０６において検索した、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣのうち、そのメタ情報（ユーザＩＤ）が各ユーザのものと一致するものを検索することにより、その動画コンテンツＤＢに対する各ユーザの発言回数を取得する。サラウンド設定データ処理モジュール４０５は、さらに、検索したユーザ音声データＤＣのメタ情報（最大音量）を用いて、その動画コンテンツＤＢに対する各発言の最大音量の平均値を取得する。
【０１０６】
次に、情報管理装置２は、各ユーザの音像定位位置（距離ｒ）を決定する（ステップＳ３０７）。具体的には、サラウンド設定データ処理モジュール４０５は、ステップＳ３０６において取得した各ユーザの発言回数、および各ユーザの平均最大音量に基づいて、音像定位位置の距離ｒ（図８（Ｂ）参照）を決定する。距離ｒは、例えば、発言回数が多いほど短くなり、また、平均最大音量が大きいほど長くなるように決定される。
【０１０７】
次に、情報管理装置２は、サラウンド処理設定データＤＤを作成する（ステップＳ３０８）。具体的には、サラウンド設定データ処理モジュール４０５が、ステップＳ３０５およびステップＳ３０７において取得した各ユーザの音像定位位置（方向θおよび距離ｒ）に基づいて、サラウンド処理設定データＤＤを作成する。
【０１０８】
以上により、このフローは終了する。
【０１０９】
（ユーザ音声データＤＣに対するサラウンド音声生成処理）
次に、図１０のステップＳ１１２に示した、ユーザ音声データＤＣに対するサラウンド音声生成処理のフローについて、詳細に説明する。
【０１１０】
図１４は、サラウンド音声生成処理の流れ図を表すものである。情報管理装置２では、サラウンド処理設定データＤＤに基づいて、過去に動画コンテンツＤＢを視聴したユーザごとに、それぞれのユーザ音声データＤＣに対してサラウンド音声生成処理を行う。つまり、このフローは、全て情報管理装置２において実行される。以下に、フローの各ステップを詳細に説明する。
【０１１１】
まず、情報管理装置２は、ユーザの音声がオン状態に設定されているかを確認する（ステップＳ４０２）。具体的には、音声処理モジュール４０６は、ステップＳ１１１において入手したサラウンド処理設定データＤＤ（図８（Ａ））において、ある着目したユーザ（視聴履歴のあるユーザ）の音声出力がオン状態に設定されているかどうかを確認する。オン状態に設定されている場合にはステップＳ４０３に進み、オフ状態に設定されている場合にはステップＳ４０７に進む。
【０１１２】
次に、情報管理装置２は、そのユーザに関連するユーザ音声データＤＣを検索し（ステップＳ４０３）、該当するユーザ音声データＤＣがあるかどうかを確認する（ステップＳ４０４）。具体的には、データベース４０８は、登録されたユーザ音声データＤＣのうち、そのメタ情報（動画コンテンツＩＤ）が動画コンテンツＤＢのものと一致するものを検索し、さらに、その検索したユーザ音声データＤＣのメタ情報（ユーザＩＤ）を調べ、着目したユーザのものがあるかどうかを調べる。該当するユーザ音声データＤＣがある場合にはステップＳ４０５に進み、該当するユーザ音声データＤＣがない場合にはステップＳ４０７に進む。
【０１１３】
次に、情報管理装置２は、ユーザ音声データＤＣに対してサラウンド音声生成処理を行い（ステップＳ４０５）、その結果を一時記憶装置２０３に格納する（ステップＳ４０６）。具体的には、音声処理モジュール４０６は、ステップＳ４０３において検索して該当した、動画コンテンツＤＢおよび着目ユーザに対応づけられた各ユーザ音声データＤＣのそれぞれに対して、サラウンド処理設定データＤＤに基づいて、音像定位処理（サラウンド音声生成処理）を行ってユーザ音声データＤＣ２を作成し、その結果を一時記憶装置２０３に格納する。
【０１１４】
次に、情報管理装置２は、以上の操作を、動画コンテンツＤＢに視聴履歴のある全てのユーザに対して行ったかどうかを確認する（ステップＳ４０７）。具体的には、音声処理モジュール４０６は、サラウンド処理設定データＤＤの全てのユーザに対してサラウンド音声生成処理（ステップＳ４０２〜Ｓ４０６）を行ったかどうかを確認する。全てのユーザに対して処理を行った場合にはステップＳ４０８に進み、まだ全てのユーザに対して処理を行っていない場合には、ステップＳ４０２に戻り、全てのユーザに対して処理が終了するまでそれを繰り返す。
【０１１５】
そして、情報管理装置２は、動画再生装置３に制限がある場合には、必要に応じて複数のユーザ音声データＤＣ２を１つのユーザ音声データＤＣ３に合成する。
【０１１６】
以上により、このフローは終了する。
【０１１７】
（ユーザ音声データＤＣの削除処理）
次に、情報管理装置２に登録された、ユーザ８自身のユーザ音声データＤＣを削除するフローについて、説明する。
【０１１８】
図１５は、ユーザ音声データＤＣの削除処理の流れ図を表すものである。まず、情報端末４は、動画コンテンツＤＢを再生するとともに、その動画コンテンツＤＢに対応づけられている、視聴しているユーザ８自身のユーザ音声データＤＣ２の一覧を表示する。ユーザ８は、その一覧から、削除したいユーザ音声データＤＣ２を選択する。情報管理装置２は、その指示に従って、データベース４０８に記録された、該当するユーザ音声データＤＣ２に対応するユーザ音声データＤＣを削除する。以下に、フローの各ステップを詳細に説明する。
【０１１９】
まず、情報端末４は、ユーザ８自身のユーザ音声データＤＣを取得する（ステップＳ５０２）。具体的には、動画再生装置３の動画コンテンツ管理・表示モジュール５０２は、動画コンテンツＤＢとともに受信したユーザ音声データＤＣ２から、そのメタ情報（ユーザＩＤ）を用いて、ユーザ８自身のユーザ音声データＤＣ２を検索する。
【０１２０】
次に、情報端末４は、ユーザ８自身のユーザ音声データＤＣ２の一覧を表示する（ステップＳ５０３）。具体的には、動画再生装置３の画面表示制御モジュール５０８は、動画コンテンツＤＢの再生画面に、ステップＳ５０３において取得したユーザ音声データＤＣ２の一覧を表示する。以下に、ユーザ音声データＤＣ２の一覧表示時の表示画面例について説明する。
【０１２１】
図１６は、ユーザ音声データＤＣ２の一覧表示時の表示画面例を表すものである。この表示画面例は、動画コンテンツ再生画面１３０と、ユーザ音声デ−タ一覧画面１４０とから構成されている。
【０１２２】
動画コンテンツ再生画面１３０は、動画コンテンツＤＢの映像情報を表示するものである。動画コンテンツ再生画面１３０には、タイムライン１３１が表示されている。タイムライン１３１は、現在再生している部分が、動画コンテンツＤＢのどの部分に位置するかをわかりやすく示したものである。
【０１２３】
ユーザ音声データ一覧画面１４０は、その動画コンテンツＤＢに対するユーザ８自身のユーザ音声データＤＣ２を一覧として示すものである。具体的には、それぞれのユーザ音声データＤＣ２の発言を行った日時と、動画コンテンツＤＢ内におけるそのユーザ音声データＤＣ２が対応づけられた相対時刻（動画再生時刻）とが一覧として表示されている。ユーザ８が、このユーザ音声データＤＣ２の一つを選択すると、動画コンテンツ再生画面１３０の動画表示は、そのユーザ音声データＤＣ２が対応付けされている動画再生時刻における表示にスキップするとともに、このユーザ音声データＤＣ２の音声が再生され、これにより、ユーザ８は、即座にユーザ音声データＤＣ２の内容を確認することができる。ユーザ音声データ一覧画面１４０は、チェックボックス１４１と、削除ボタン１４２を含んでいる。チェックボックス１４１は、削除したいユーザ音声データＤＣ２（ＤＣ）を選択するためのものである。削除ボタン１４２は、チェックボックス１４１がチェックされたユーザ音声データＤＣ２（ＤＣ）を削除するためのものである。
【０１２４】
次に、ユーザ８は、削除したいユーザ音声データＤＣ２（ＤＣ）があるかどうかを確認する（ステップＳ５０４）。ユーザ８は、削除したいユーザ音声データＤＣ２（ＤＣ）がある場合には、ユーザ音声データ一覧画面１４０（図１６）において、該当するチェックボックス１４１にチェックを入れる。削除したいユーザ音声データＤＣ２（ＤＣ）がある場合には、このフローを終了する。
【０１２５】
次に、情報端末４は、削除したいユーザ音声データＤＣ２（ＤＣ）のユーザ音声データＩＤを送信する（ステップＳ５０５）。具体的には、ユーザ８の削除ボタン１４２（図１６）の操作に従い、動画再生装置３の入力情報制御アプリケーション５０４が、ステップＳ５０４においてユーザ８がチェックを入れたユーザ音声データＤＣ２（ＤＣ）のユーザ音声データＩＤを、情報管理装置２に送信する。
【０１２６】
次に、情報管理装置２は、ユーザ音声データＩＤを受信し、該当するユーザ音声データＤＣをデータベース４０８から削除する（ステップＳ５０６）。具体的には、情報管理装置２の動画・音声・ユーザデータ登録削除モジュール４０９は、情報端末４からのユーザ音声データ削除の指示に従い、該当するユーザ音声データＩＤをもつユーザ音声データＤＣを削除する。その後、ステップＳ５０４に戻り、ユーザ８からの指示に従いユーザ音声データＤＣ２（ＤＣ）の削除を繰り返す。
【０１２７】
以上のフローは、削除したいユーザ音声データＤＣ２がなくなると終了する。
【０１２８】
［効果］
以上のように本実施の形態では、動画コンテンツに対する他のユーザの音声による発言を、その動画コンテンツの再生に同期して再生するようにしたので、文字情報の同期表示などに比べて高い表現力を有する情報交換が可能となる。
【０１２９】
また、本実施の形態では、動画コンテンツに対する他のユーザの発言を、ユーザ情報データとして情報管理装置に蓄積し、別のユーザがその動画コンテンツを視聴する際にそれらを受信して同期再生するようにしたので、ユーザは自分の都合のよい時間に他のユーザと情報交換を行うことができ、また、その内容を何度も楽しむことができる。
【０１３０】
また、本実施の形態では、ユーザ音声データＤＣに対し、音像定位を設定してサラウンド生成処理するようにしたので、他のユーザと一緒に会話（チャット）しながら同じ動画コンテンツの視聴を楽しんでいる感覚を得ることができる。
【０１３１】
また、本実施の形態では、ユーザごとに異なる音像定位を設定してサラウンド音声生成処理するようにしたので、情報端末４において動画コンテンツＤＢと同期してユーザ音声データＤＣ２を再生する際、動画コンテンツの音声や、各ユーザの音声がお互いに重なりにくくなり、その音声を聞き分けることができる。
【０１３２】
［変形例１−１］
上記実施の形態では、動画コンテンツは情報管理装置に記録されているものとしたが、これに限定されるものではなく、例えば、動画再生装置に記録されていてもよい。この場合、動画コンテンツが動画再生装置自体に記録されていてもよいし、動画再生装置が再生する記録媒体に記録されていてもよい。これらの場合では、情報管理装置は、ユーザデータＤＡおよびユーザ音声データＤＣを管理しており、動画再生装置が動画コンテンツＤＢを再生する際、その動画コンテンツＤＢを識別するコードを情報管理装置に送信し、それに基づいて情報管理装置がその動画コンテンツＤＢに対応づけされたユーザ音声データＤＣなどを情報端末に送ることにより、情報コンテンツ視聴システム１は上記実施の形態と同様に動作することができる。
【０１３３】
＜２．第２の実施の形態＞
次に、本発明の第２の実施の形態に係る情報コンテンツ視聴システムについて説明する。本実施の形態は、ユーザ情報データに対するサラウンド音声生成処理の主体が、上記第１の実施の形態と異なるものである。すなわち、上記第１の実施の形態（図１）では、情報管理装置２がサラウンド音声生成処理を行うようにしたが、これに代えて、本実施の形態では、情報端末（動画再生装置）がこのサラウンド音声生成処理が行うようにしている。その他の構成は、上記第１の実施の形態（図１）と同様である。なお、上記第１の実施の形態に係る情報コンテンツ視聴システムと実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。
【０１３４】
図１７は、情報管理装置２Ｂのソフトウェア構成の一例を表すものである。情報管理装置２Ｂは、第１の実施の形態に係る情報管理装置２（図４）と比べて、サラウンド設定データ処理モジュール４０５および音声処理モジュール４０６を省いたものである。
【０１３５】
図１８は、情報端末４Ｂにおける動画再生装置３Ｂのソフトウェア構成の一例を表すものである。動画再生装置３Ｂは、第１の実施の形態に係る動画再生装置３（図９）と比べて、サラウンド設定データ処理モジュール５１３および音声処理モジュール５１４を追加したものである。サラウンド設定データ処理モジュール５１３は、ユーザデータＤＡおよびユーザ音声データＤＣに基づいて音像定位位置を算出し、サラウンド処理設定データＤＤを作成する機能を有している。音声処理モジュール５１４は、サラウンド処理設定データＤＤに従って、ユーザ音声データＤＣに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成するものである。
【０１３６】
この構成により、本実施の形態に係る情報コンテンツ視聴システム１Ｂでは、動画コンテンツＤＢを再生する情報端末４Ｂがサラウンド音声生成処理を行うようになっている。
【０１３７】
以下に、情報コンテンツ視聴システム１Ｂにおいて、動画コンテンツＤＢの視聴を行う場合の動作を説明する。
【０１３８】
図１９は、動画コンテンツＤＢの視聴を行う場合の流れ図を表すものである。ユーザ８は、情報管理装置２Ｂに対して動画コンテンツＤＢの視聴要求を行うと、情報管理装置２Ｂは、視聴要求された動画コンテンツＤＢにユーザの視聴履歴があるかどうかを調査し、視聴履歴がある場合において、動画コンテンツＤＢに加え、ユーザデータＤＡと、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣとを情報端末４Ｂに対して送信する。動画再生装置３Ｂは、ユーザデータＤＡおよびユーザ音声データＤＣに基づいてユーザ音声データＤＣに対してサラウンド音声生成処理を行って、ユーザ音声データＤＣ２を作成し、動画コンテンツＤＢに同期して再生を行う。以下に、フローの各ステップを詳細に説明する。なお、ステップＳ１０１〜Ｓ１０８は、第１の実施の形態（図１０）と同じであるため説明を省略し、ここではステップＳ８０９以降の説明を行うこととする。
【０１３９】
ステップＳ１０６において動画コンテンツＤＢに視聴履歴がある場合には、情報管理装置２Ｂは、動画コンテンツＤＢ、視聴履歴のあるユーザのユーザ音声データＤＣ、およびそのユーザのユーザデータＤＡを情報端末４Ｂに送信する（ステップＳ８０９）。具体的には、データベース４０８は、登録されているユーザ音声データＤＣのうち、そのメタ情報（動画コンテンツＩＤ）が動画コンテンツＤＢのものと一致するものを検索する。データベース４０８は、さらにその検索されたユーザ音声データＤＣから、そのメタ情報（ユーザＩＤ）を用いて、視聴履歴のあるユーザを調べ、そのユーザデータＤＡを取得する。
そして、ネットワーク管理モジュール４０２は、これらのユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣを情報端末４Ｂに送信する。
【０１４０】
次に、情報端末４Ｂは、サラウンド処理設定データＤＤの作成を行う（ステップＳ８１０）。具体的には、まず、動画再生装置３Ｂのネットワーク管理モジュール５０６が、情報管理装置２Ｂから、ユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣを受信する。そして、サラウンド設定データ処理モジュール５１３が、図１３に示した処理方法と同様の方法で、視聴履歴がある各ユーザの音像定位位置の算出を行い、サラウンド処理設定データＤＤを作成する。
【０１４１】
次に、情報端末４Ｂは、サラウンド処理設定データＤＤの編集、および動画コンテンツＤＢの音量調整を行う（ステップＳ１１０）。その具体例は、第１の実施の形態のステップＳ１１０と同様である。
【０１４２】
次に、情報端末４Ｂは、ユーザ音声データＤＣに対するサラウンド音声生成処理を行う（ステップＳ８１２）。具体的には、動画再生装置３Ｂの音声処理モジュール５１４が、ステップＳ１１０において再作成されたサラウンド処理設定データＤＤに基づいて、各ユーザ音声データＤＣに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成する。また、例えば動画再生装置３Ｂの機器性能などにより、複数のユーザ音声データＤＣを同時に再生することができない場合には、第１の実施の形態と同様に、これらのユーザ音声データＤＣ２を合成するようにしてもよい。
【０１４３】
そして、情報端末４は、動画コンテンツＤＢとユーザ音声データＤＣ２の同期再生を行う（ステップＳ１１４）。その具体例は、第１の実施の形態のステップＳ１１４と同様である。
【０１４４】
以上により、このフローは終了する。
【０１４５】
以上のように本実施の形態では、サラウンド音声生成処理を情報端末側で行うようにしたので、情報管理装置の負荷を軽減することができる。その他の効果は、上記第１の実施の形態の場合と同様である。
【０１４６】
上記実施の形態では、動画コンテンツは情報管理装置に記録されているものとしたが、これに限定されるものではなく、例えば、上記第１の実施の形態の変形例と同様に、動画再生装置に記録されていてもよい。
【０１４７】
＜３．適用例＞
次に、図２０および図２１を参照して、上記実施の形態および変形例で説明した情報コンテンツ視聴システムの適用例について説明する。
【０１４８】
（適用例１）
図２０は、情報端末の動画再生装置として再生機器を用いた場合の情報コンテンツ視聴システムの構成例を表すものである。この情報コンテンツ視聴システム１Ｃは、情報管理装置２Ｃおよび情報端末４Ｃを有している。情報管理装置２Ｃは、この例ではＰＣ端末（Personal Computer）により構成されている。情報端末４Ｃの再生機器１０８は、例えば、Blu-ray Disc（登録商標）などを記録媒体１０９とした再生機器が適用可能である。この例では、記録媒体１０９（Blu-ray Disc）には、動画コンテンツＤＢおよびBD-Java（登録商標）プログラムが含まれている。BD-Java（登録商標）プログラムは、この例では図８や図１８に示したソフトウェア構成と同様の構成を有するプログラムである。言い換えれば、上記第１および第２の実施の形態では、プログラムはＲＯＭ３１１に記録されているものとしたが、本適用例では、プログラムは記録媒体１０９に記録されている。この構成により、情報端末４Ｃは、第１および第２の実施の形態に示した情報端末４と同様の機能を実現できる。
【０１４９】
この適用例では、情報端末４Ｃの記録媒体１０９が動画コンテンツＤＢを有するようにしたが、これに限定されるものではなく、情報端末４Ｃ自体が動画コンテンツＤＢをもつようにしてもよいし、上記第１および第２の実施の形態に示したように、情報管理装置２Ｃが動画コンテンツＤＢをもつようにしてもよい。いずれの場合でも、再生機器１０８はBD-Java（登録商標）プログラムにより、第１および第２の実施の形態に示した情報端末４の動画再生機器３と同様の機能を実現できる。
【０１５０】
（適用例２）
図２１は、情報端末の動画再生装置としてＰＣを用いた場合の情報コンテンツ視聴システムの構成例を表すものである。この情報端末４のＰＣ１１０には、この例では図８や図１８に示したソフトウェア構成を有するプログラムが記録されている。ＰＣ１１０にはサラウンドヘッドセット１１１が接続されており、サラウンド環境での音声再生が実現できるようになっている。この構成により、情報端末４Ｄは、第１および第２の実施の形態に示した情報端末４と同様の機能を実現できる。
【０１５１】
以上、いくつかの実施の形態および変形例、ならびにそれらの具体的な適用例を挙げて本発明を説明したが、本発明はこれらの実施の形態等には限定されず、種々の変形が可能である。
【０１５２】
例えば、上記の各実施の形態では、情報管理装置２と複数の情報端末４は、インターネット９を介して接続するものとしたが、これに限定されるものではなく、これに代えて、他の広域ネットワークを介して接続されていてもよい。
【０１５３】
また、例えば、上記の各実施の形態では、動画コンテンツを扱うものとしたが、これに限定されるものではなく、これに代えて、もしくはこれと共に、例えば音声コンテンツを扱うようにしてもよい。
【０１５４】
なお、上記の各実施の形態では、情報コンテンツ視聴システムは、情報管理装置および情報端末により構成されるものとしたが、これに限定されるものではない。
【符号の説明】
【０１５５】
１，１Ｂ，１Ｃ，１Ｄ…情報コンテンツ視聴システム、２，２Ｂ，２Ｃ…情報管理装置、３，３Ｂ，３Ｃ…動画再生装置、４，４Ｂ，４Ｃ，４Ｄ…情報端末、７Ａ，７Ｂ，８…ユーザ、９…インターネット、１０４、２１０…表示装置、１０５…サラウンド音声出力装置、１０６…音声入力装置、１０７…外部機器、１１０…音像定位情報画面、１１１…音量バー、１１２…音量表示円、１１３…再生開始ボタン、１２０…ユーザ一覧画面１２０、１１８，１１９，１２１…アイコン、１２２…スクロールバー、１３０…動画コンテンツ再生画面、１４０…ユーザ音声データ一覧画面、１４１…チェックボックス、１４２…削除ボタン、２０１、３０１…ネットワークコントローラ、２０２…主記憶装置、２０３…一時記憶装置、２０４、３１２…ＣＰＵ、２０５、３１１…ＲＯＭ、２０６、３０９…Ｉ／Ｆ部、２０７、３０６…ビデオ出力部、２０８、３０７…オーディオ出力部、２０９…入力装置、３０２…ストリームプロセッサ、３０３…オーディオプロセッサ、３０４…ビデオデコーダ、３０５…グラフィックエンジン、３０８…ＲＡＭ、３１０…記憶装置、３１３…ＧＰＳ受信機、４０１…システム状態管理アプリケーション、４０２…ネットワーク管理モジュール、４０３…ユーザ認証処理モジュール、４０４…動画コンテンツ一覧表示モジュール、４０５，５１３…サラウンド設定データ処理モジュール、４０６，５１４…音声処理モジュール、４０７…画面表示制御モジュール、４０８…データベース、４０９…動画・音声・ユーザデータ登録削除モジュール、４１０…オペレーティングシステム、４１１…ドライバ、ＤＡ…ユーザデータ、ＤＢ…動画コンテンツ、ＤＣ，ＤＣ２…ユーザ音声データ、ｒ…距離、θ…方向。
【技術分野】
【０００１】
本発明は、情報コンテンツを視聴する際に、ユーザ間でコミュニケーションを図ることが可能な情報管理装置および情報端末、ならびに情報コンテンツ視聴方法に関する。
【背景技術】
【０００２】
近年、インターネットを用いた動画などの情報コンテンツ配信を行う際、単に情報コンテンツのみを配信するだけでなく、その情報コンテンツに関するユーザからの情報も含めて配信するシステムが注目されている。このようなシステムでは、ユーザ間で、例えば口コミ情報などの情報の交換ができるため、例えば似ている嗜好をもつユーザ同士を結ぶコミュニケーションツールとしても注目を集めている。
【０００３】
例えば、特許文献１には、動画を再生する際、その時どきの再生時刻に対応づけられたテキスト情報を、その動画に同期して再生表示するコメント配信システムが開示されている。このコメント配信システムでは、例えば、ユーザが、その時どきの動画表示内容に関連する内容のテキスト情報を登録することにより、他のユーザがその動画を再生する際にそのテキスト情報が同期して再生表示され、ユーザ間で情報交換を行うことができるようになっている。また、特許文献２には、必要に応じてマルチメディアコンテンツ（情報コンテンツ）を再生しながら、テレビ会議やチャットなどによりリアルタイムで情報交換できる情報通信サービスシステムが開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特許第４２６３２１８号公報
【特許文献２】特開２００３−９１０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、例えば、特許文献１に開示されたコメント配信システムでは、ユーザからの情報がテキスト情報であるため、例えばユーザの感情を表現したい場合には忠実に表現するのが難しく、その感情が正確に他のユーザに伝わらない。つまり、テキスト情報を用いた情報交換は、その表現力に限界があるため、場合によってはユーザ間の情報交換が不十分になるおそれがある。
【０００６】
また、例えば、特許文献２に開示された情報通信サービスシステムは、リアルタイムで情報交換するものであるので、ユーザ間で情報のやりとりを行うためには同時刻にシステムを利用する必要があり、ユーザは自分の都合のよい時間に他のユーザとの情報交換を行うことができない。
【０００７】
本発明はかかる問題点に鑑みてなされたもので、その目的は、時間的な制約を受けることなく、高い表現力で他のユーザと情報交換できる情報管理装置、情報端末、および情報コンテンツ視聴方法を提供することにある。
【課題を解決するための手段】
【０００８】
本発明の情報管理装置は、受信部と、配信部とを備えている。受信部は、情報端末において情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を１または複数の情報端末から受信して収集する機能を有している。配信部は、受信部が受信した音声情報を、１または複数の情報端末に配信するものである。
【０００９】
本発明の情報端末は、再生部と、送信部と、受信部と、再生制御部とを備えている。再生部は、情報コンテンツを再生するものである。送信部は、再生部によって情報コンテンツを再生する際に視聴者がした音声発言と、音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を情報管理装置に送信する機能を有している。受信部は、情報管理装置が収集した音声発言と再生期間内相対時刻とを含む音声情報を情報管理装置から受信するものである。再生制御部は、受信部が受信した音声情報に基づき、情報コンテンツに同期して視聴者の音声を再生するように再生部を制御するものである。
【００１０】
本発明の情報コンテンツ視聴方法は、情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を収集し、それぞれに対して音声処理を施し、情報コンテンツに同期して再生するものである。
【００１１】
本発明の情報管理装置、情報端末、情報コンテンツ視聴方法では、情報端末において情報コンテンツを再生する際、過去にその情報コンテンツを視聴した視聴者により入力された音声情報がその情報コンテンツと同期して再生される。その際、音声情報は、音声情報に含まれる相対時刻情報に基づいて同期再生される。
【００１２】
音声処理は、以下に示すように、情報管理装置において行うようにしてもよいし、情報端末において行うようにしてもよい。
【００１３】
音声処理を情報管理装置において行う場合には、例えば、音声情報に所定の音声処理を施す音声処理部をさらに備え、配信部はその音声処理が施された音声情報を配信することが望ましい。この場合には、その音声処理は、例えばサラウンド音声生成処理を含むことが望ましい。この場合、そのサラウンド音声生成処理は、例えば、視聴者の地理座標情報に基づいて行われるようにしてもよいし、視聴者の音声発言における発言部分の数に基づいて行われるようにしてもよいし、視聴者の音声発言の音量に基づいて行われるようにしてもよい。また、このサラウンド音声生成処理の設定は、情報端末からの指示に基づいて修正されるようにしてもよい。音声処理部は、例えば、サラウンド音声生成処理の施された複数の音声情報を１の音声情報に合成する音声合成部を含むようにしてもよい。
【００１４】
音声処理を情報端末において行う場合には、例えば、再生制御部は、受信部が受信した音声情報に対して所定の音声処理を施したうえで、その音声処理後の音声情報に基づき、情報コンテンツに同期して視聴者の音声を再生するように再生部を制御するようにすることが望ましい。その音声処理は、サラウンド音声生成処理を含むことが望ましい。この場合、情報管理装置の配信部は、例えば、音声情報をそのまま配信するようにするのが望ましい。
【００１５】
情報管理装置では、配信部は、さらに情報コンテンツをも配信するようにしてもよい。
【００１６】
情報端末では、再生制御部は、例えば、情報コンテンツに同期して視聴者の音声をサラウンドシステムにより再生するように再生部を制御することが望ましい。再生部は、例えば、記録媒体に記録された情報コンテンツを再生するものであってもよい。
【００１７】
上記のような情報管理装置および情報端末は、例えば以下のようなプログラムによって実現可能となる。
【００１８】
情報管理装置用プログラムは、情報管理装置としてのコンピュータを、受信手段と、配信手段として機能させるためのものである。受信手段は、情報端末において情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を１または複数の情報端末から受信して収集するものである。配信手段は、受信手段が受信した音声情報を、１または複数の情報端末に配信するものである。
【００１９】
情報端末用プログラムは、情報端末としてのコンピュータを、再生手段と、送信手段と、受信手段と、再生制御手段として機能させるためのものである。再生手段は、情報コンテンツを再生するものである。送信手段は、再生手段によって情報コンテンツを再生する際に視聴者がした音声発言と、音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を情報管理装置に送信するものである。受信手段は、情報管理装置が収集した音声発言と再生期間内相対時刻とを含む音声情報を情報管理装置から受信するものである。再生制御手段は、受信手段が受信した音声情報に基づき、情報コンテンツに同期して視聴者の音声を再生するように再生手段を制御するものである。
【発明の効果】
【００２０】
本発明の情報管理装置、情報端末、情報コンテンツ視聴方法によれば、情報コンテンツに対する視聴者の発言を、その情報コンテンツの再生に同期して再生するようにしたので、音声がもつ高い表現力を利用した情報交換が可能となる。
【００２１】
また、情報コンテンツに対する視聴者の発言を、音声情報として情報管理装置に蓄積し、情報端末がその情報コンテンツを再生する際にそれらを受信して同期再生するようにしたので、ユーザは時間的な制約を受けることなく情報交換を行うことができる。
【図面の簡単な説明】
【００２２】
【図１】本発明の第１の実施の形態に係る情報コンテンツ視聴システムの一構成例を表すブロック図である。
【図２】図１に示した情報管理装置の一構成例を表すブロック図である。
【図３】図１に示した情報端末の一構成例を表すブロック図である。
【図４】図１に示した情報管理装置のソフトウェアの一構成例を表す構成図である。
【図５】図４に示したデータベースに係るユーザデータの一構成例を表す表である
【図６】図４に示したデータベースに係る動画コンテンツのメタ情報の一構成例を表す表である
【図７】図４に示したデータベースに係るユーザ音声データのメタ情報の一構成例を表す表である
【図８】図１に示した情報コンテンツ視聴システムに係るサラウンド処理設定データの一構成例を表す表および図である
【図９】図１に示した動画再生装置のソフトウェアの一構成例を表す構成図である。
【図１０】図１に示した情報コンテンツ視聴システムの一動作例を表す流れ図である。
【図１１】図１に示した情報コンテンツ視聴システムの一動作例における表示画面を表す図である。
【図１２】図１に示した情報コンテンツ視聴システムの他の動作例を表す流れ図である。
【図１３】図１に示した情報コンテンツ視聴システムの他の動作例における表示画面表す図である。
【図１４】図１に示した情報コンテンツ視聴システムの他の動作例を表す流れ図である。
【図１５】図１に示した情報コンテンツ視聴システムの他の動作例を表す流れ図である。
【図１６】図１に示した情報コンテンツ視聴システムの他の動作例における表示画面表す図である。
【図１７】本発明の第２の実施の形態に係る情報管理装置のソフトウェアの一構成例を表す構成図である。
【図１８】本発明の第２の実施の形態に係る動画再生装置のソフトウェアの一構成例を表す構成図である。
【図１９】本発明の第２の実施の形態に係る情報コンテンツ視聴システムの一動作例を表す流れ図である。
【図２０】実施の形態を適用した情報コンテンツ視聴システムのうち、適用例１の一構成例を表すブロック図である。
【図２１】適用例２の一構成例を表すブロック図である。
【発明を実施するための形態】
【００２３】
以下、本発明の実施の形態について、図面を参照して詳細に説明する。なお、説明は以下の順序で行う。
１．第１の実施の形態
２．第２の実施の形態
３．適用例
【００２４】
＜１．第１の実施の形態＞
［構成例］
（全体構成例）
図１は、本発明の第１の実施の形態に係る情報コンテンツ視聴システムの一構成例を表すものである。この情報コンテンツ視聴システムは、情報管理装置に記憶された動画コンテンツを情報端末において再生する際、過去にその動画コンテンツを視聴したユーザが発言した内容を、その動画コンテンツに同期して再生するものである。なお、本発明の実施の形態に係る情報管理装置、情報端末、および情報コンテンツ視聴方法は、本実施の形態により具現化されるので、併せて説明する。
【００２５】
情報コンテンツ視聴システム１は、情報管理装置２と、複数の情報端末４とを備えている。情報管理装置２と複数の情報端末４は、インターネット９を介して接続されている。
【００２６】
情報管理装置２は、情報コンテンツ視聴システム１においてやりとりされる情報を管理するサーバである。具体的には、情報管理装置２は、後述するように、情報コンテンツ視聴システム１の各ユーザを管理するためのデータ（ユーザデータＤＡ）、動画コンテンツＤＢ、その動画コンテンツＤＢに対する各ユーザの感想などの音声情報（ユーザ音声データＤＣ）などを記録して管理している。そして、情報管理装置２は、情報端末４からの動画コンテンツＤＢの視聴要求に応じて、その動画コンテンツＤＢに対応づけられたユーザ音声データＤＣに対して音声処理を行い、音声処理されたユーザ音声データＤＣ２をその動画コンテンツＤＢとともに情報端末４に送信する機能を有している。
【００２７】
情報管理装置２は、図２に示したように、ＣＰＵ（Central Processing Unit）２０４と、主記憶装置２０２と、ネットワークコントローラ２０１とを備えている。
【００２８】
ＣＰＵ２０４は、ＲＯＭ２０５に記憶されたソフトウェアに基づいて、情報管理装置２内の各ブロックを制御するものである。各ブロックへの指示は、バス２０９を介して行われる。また、ＣＰＵ２０４は、後述するように、ユーザ音声データＤＣに対して、ユーザの位置情報などに基づいてサラウンド音声生成処理を行う機能も有している。ＣＰＵ２０４は、このサラウンド音声生成処理を行う場合などにおいて、一時記憶装置２０３をバッファ領域として使用するようになっている。
【００２９】
主記憶装置２０２は、ユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣなどを記憶する記憶装置であり、例えばＨＤＤ（Hard Disk Drive）などにより構成される。ネットワークコントローラ２０１は、情報端末４との間で、インターネット９を介してユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣ，ＤＣ２などをやりとりするためのものである。
【００３０】
その他、情報管理装置２は、この情報管理装置２を操作するための入出力装置を備えている。具体的には、情報管理装置２は、キーボードやマウスなどの入力装置２０９、その入力装置２０９からの入力を受け付けるＩ／Ｆ（Interface）部２０６、情報管理装置２における処理結果を出力するビデオ出力部２０７、オーディオ出力部２０８、および表示装置２１０を備えている。
【００３１】
以上の構成により、情報管理装置２では、情報端末４からの動画コンテンツＤＢの視聴要求に応じて、まずＣＰＵ２０４が主記憶装置２０２に記憶された、その動画コンテンツＤＢに対応づけられたユーザ音声データＤＣに対してサラウンド音声生成処理を行う。そして、情報管理装置２は、そのサラウンド音声生成処理されたユーザ音声データＤＣ２を、主記憶装置２０２に記憶された動画コンテンツＤＢとともにネットワークコントローラ２０１を介して情報端末４に対して送信するようになっている。
【００３２】
情報端末４は、情報コンテンツ視聴システム１においてユーザ８に対するインターフェースとなる端末である。具体的には、情報端末４は、後述するように、情報管理装置２から動画コンテンツＤＢやユーザ音声データＤＣ２を受信し、その動画コンテンツＤＢを再生する際に、ユーザ音声データＤＣ２を同期して再生するものである。さらに、情報端末４は、動画コンテンツを再生する際、ユーザ８の発言を記録し、再生時間におけるその発言時の相対時刻情報ともにユーザ音声データＤＣとして情報管理装置２に送信する機能を有している。
【００３３】
情報端末４は、図１に示したように、動画再生装置３と、表示装置１０４と、サラウンド音声出力装置１０５と、音声入力装置１０６とを備えている。動画再生装置３は、情報管理装置２との間で、ユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣ，ＤＣ２などを、インターネット９を介してやり取りするとともに、受信した動画コンテンツＤＢおよびユーザ音声データＤＣ２を再生する装置である。表示装置１０４は、例えばテレビやモニタなどであり、動画再生装置３において再生された動画コンテンツＤＢの映像を表示するものである。サラウンド音声出力装置１０５は、複数のスピーカから構成され、動画再生装置３において再生された動画コンテンツＤＢおよびユーザ音声データＤＣ２の音声を、例えば空間的な広がりをもつようなサラウンド環境で出力するようになっている。音声入力装置１０６は、ユーザ８の発言を入力するマイクである。
【００３４】
動画再生装置３は、図３に示したように、ＣＰＵ３１２と、ストリームプロセッサ３０２と、ビデオデコーダ３０４と、オーディオプロセッサ３０３と、グラフィックエンジン３０５と、ＧＰＳ受信機３１３と、Ｉ／Ｆ部３０９と、記憶装置３１０と、ネットワークコントローラ３０１とを備えている。
【００３５】
ＣＰＵ３１２は、ＲＯＭ３１１に記憶されたアプリケーションソフトウェアに基づいて、動画再生装置３内の各ブロックを制御するものである。各ブロックへの指示は、システムバス３１７および入出力バス３１６を介して行われる。ＣＰＵ３１２は、後述するように、動画コンテンツＤＢを再生する際、その再生時間におけるその相対時刻に対応づけられたユーザ音声データＤＣ２を、その動画コンテンツＤＢに同期して再生するように各ブロックを制御する。また、ＣＰＵ３１２は、後述するように、動画コンテンツＤＢの再生する際、音声入力装置１０６により入力されたユーザ８の発言に、その再生時間における発言時の相対時刻情報（動画再生時刻）などを加えたユーザ音声データＤＣを作成する機能も有している。ＣＰＵ３１２は、これらの各種処理を行う際、ＲＡＭ３０８をバッファ領域として使用し、ＲＡＭ３０８は、メモリバス３１８を介して各ブロックとの間でデータやり取りするようになっている。
【００３６】
ストリームプロセッサ３０２は、情報管理装置２から受信した動画コンテンツＤＢを映像情報と音声情報とに分離する機能を有している。ビデオデコーダ３０４は、ストリームプロセッサ３０２から供給された映像情報をデコードするものである。グラフィックエンジン３０５は、アプリケーショングラフィックスを生成する機能を有している。ビデオデコーダ３０４においてデコードされた映像情報およびグラフィックエンジン３０５において生成されたアプリケーショングラフィックスは、ビデオ出力部３０６を介して表示装置１０４に供給されて表示出力される。オーディオプロセッサ３０３は、ストリームプロセッサ３０２から供給された音声情報に対してサラウンド処理などの音声処理を行うものである。音声処理された音声情報は、オーディオ出力部３０７を介してサラウンド音声出力装置１０５に供給されて音声出力される。
【００３７】
ＧＰＳ受信機３１３は、動画再生装置３が設置されている地理上の位置情報（ＧＰＳ情報）を検出する機能を有している。得られた位置情報は、後述するように、ユーザ名などのユーザ情報とともにユーザデータＤＡとして情報管理装置２に記録され、情報管理装置２においてサラウンド音声生成処理を行う際などに使用される。Ｉ／Ｆ部３０９は、音声入力装置１０６や、キーイベント入力やＬＥＤ（Light Emitting Diode）発光などを行う外部機器１０７に対するインターフェースの機能を有している。記憶装置３１０は、音声入力装置１０６により入力された音声などを記憶する記憶装置であり、例えばＨＤＤなどにより構成される。ネットワークコントローラ３０１は、情報管理装置２との間で、インターネット９を介してユーザデータＤＡ、動画コンテンツＤＢ、ユーザ音声データＤＣ，ＤＣ２などをやりとりするためのものである。
【００３８】
以上の構成により、情報端末４は、情報管理装置２から動画コンテンツＤＢおよびユーザ音声データＤＣ２を、ネットワークコントローラ３０１を介して受信し、表示装置１０４およびサラウンド音声出力装置１０５を用いて動画コンテンツＤＢの再生を行う。その際、ＣＰＵ３１２は、ユーザ音声データＤＣ２がもつ動画再生時刻の情報に基づいて、そのユーザ音声データＤＣを動画コンテンツＤＢに同期して再生するようにストリームプロセッサ３０２、ビデオデコーダ３０４、オーディオプロセッサ３０３などの各ブロックを制御するようになっている。
【００３９】
それと同時に、動画コンテンツＤＢを再生する際、ＣＰＵ３１２は、音声入力装置１０６を介して入力されたユーザ８の発言に、その再生時間におけるその発言時の相対時刻情報を加えたユーザ音声データＤＣを作成し、ネットワークコントローラ３０１を介して情報管理装置２に対して送信するようになっている。
【００４０】
なお、この例では、アプリケーションソフトウェアをＲＯＭ３１１に記録するようにしたが、これに限定されるものではなく、例えば、記録媒体を再生可能な再生機器を動画再生装置３に適用し、この記録媒体に記録するようにしてもよい。この場合の例については、適用例（後述）において説明する。
【００４１】
（ソフトウェア構成例）
次に、情報管理装置２および動画再生装置３のソフトウェア構成例を説明する。
【００４２】
図４は、情報管理装置２のソフトウェア構成の一例を表すものである。情報管理装置２は、データベース４０８と、動画・音声・ユーザデータ登録削除モジュール４０９と、ユーザ認証処理モジュール４０３と、動画コンテンツ一覧表示モジュール４０４と、サラウンド設定データ処理モジュール４０５と、音声処理モジュール４０６と、ネットワーク管理モジュール４０２と、画面表示制御モジュール４０７と、システム状態管理アプリケーション４０１とを備えている。図４において、各ソフトウェアは、上に示しているものほどアプリケーションに近いものであり、下に示しているものほどファームウェアに近いものである。
【００４３】
データベース４０８は、情報コンテンツ視聴システム１においてやりとりされる情報を管理するものである。具体的には、データベース４０８は、ユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣを管理している。以下に、データベース４０８が管理するこれらの情報について詳細に説明する。
【００４４】
図５は、ユーザデータＤＡの一例を表すものである。ユーザデータＤＡは、ユーザＩＤと、ユーザ名と、ユーザパスワードと、ＧＰＳ情報と、登録日時とを含んでいる。ユーザＩＤは、情報管理装置２から一意的に与えられる、各ユーザに固有の番号であり、データベース４０８における管理上の目的の他、後述するようにユーザデータＤＡとユーザ音声データＤＣとの対応づけのためにも用いられるものである。ユーザ名は、ユーザＩＤと同様に各ユーザに固有のものである。ユーザ名は、例えばアルファベットなどを用いて構成され、ユーザＩＤに比べ覚えやすいものである。よって、ユーザ名は、例えば、ユーザが情報コンテンツ視聴システム１にログインする際や、ユーザ間でコミュニティを構成する場合に各ユーザをより容易に特定する際などに特に便利である。ユーザパスワードは、情報管理装置２にログインする際のユーザ認証に用いられるものである。ＧＰＳ情報は、動画再生装置３のＧＰＳ受信機３１３によって得られた地理上の位置情報であり、後述するように、ユーザ音声データＤＣに対するサラウンド音声生成処理を行う際に、その音像定位位置（方向θ）を求める為に用いるものである。登録日時は、この情報コンテンツ視聴システム１に対してユーザ登録を行った日時である。さらに、このユーザデータＤＡは、この例では、課金情報や年齢情報などの情報を含んでいる。このユーザデータＤＡは、この情報コンテンツ視聴システム１に対してユーザ登録を行ったときに作成され、情報管理装置２のデータベース４０８において管理されるものである。
【００４５】
図６は、動画コンテンツＤＢに付随するメタ情報の一例を表すものである。このメタ情報は、動画コンテンツＩＤと、動画時間と、動画コンテンツ名と、登録日時と、平均音量とを含んでおり、実動画データと合わせて動画コンテンツＤＢを構成するものである。動画コンテンツＩＤは、各動画コンテンツＤＢに固有の番号であり、データベース４０８における管理上の目的の他、後述するように動画コンテンツＤＢとユーザ音声データＤＣとの対応づけのためにも用いられるものである。動画時間は、動画コンテンツＤＢの時間長（再生時間）である。登録日時は、その動画コンテンツＤＢを情報コンテンツ視聴システム１に登録した日時である。平均音量は、その動画コンテンツＤＢの全時間長にわたる音量の平均値であり、後述するように、ユーザ音声データＤＣに対するサラウンド音声生成処理を行う際に、その音像定位位置（距離ｒ）を求める為に用いるものである。さらに、このメタ情報は、この例では、画質、課金情報、視聴回数、お勧め度、視聴年齢情報などの情報を含んでいる。この動画コンテンツＤＢは、情報コンテンツ視聴システム１に動画コンテンツを登録したときに作成され、情報管理装置２のデータベース４０８において管理されるものである。
【００４６】
図７は、ユーザ音声データＤＣに付随するメタ情報の一例を表すものである。このメタ情報は、ユーザ音声データＩＤと、動画コンテンツＩＤと、動画再生時刻と、ユーザＩＤと、登録日時と、最大音量と、音声の長さと、実音声データとを含んでおり、実音声データと合わせてユーザ音声データＤＣを構成するものである。ユーザ音声データＩＤは、各ユーザ音声データに固有の番号である。動画コンテンツＩＤは、そのユーザ音声データＤＣに対応づけられた動画コンテンツのＩＤである。すなわち、この動画コンテンツＩＤは、情報端末４において、そのユーザ音声データＤＣに係る音声が入力されたときに再生されていた動画コンテンツのＩＤである。動画再生時刻は、そのユーザ音声データＤＣに対応づけられた動画コンテンツＤＢの再生時間における、そのユーザ音声データＤＣに対応づけられた相対時刻である。すなわち、この動画再生時刻は、情報端末４において、そのユーザ音声データＤＣに係る音声が入力されたときの、動画コンテンツＤＢの再生時間における相対時刻である。ユーザＩＤは、そのユーザ音声データＤＣに対応づけられたユーザＩＤである。すなわち、そのユーザ音声データＤＣに係る音声を発したユーザのＩＤである。登録日時は、そのユーザ音声データＤＣを情報コンテンツ視聴システム１に登録した日時である。最大音量は、そのユーザ音声データＤＣの全時間長にわたる音量の最大値である。音声の長さは、ユーザ音声データＤＣの時間長である。さらにこのユーザ音声データＤＣは、この例では、音質などの情報を含んでいる。ユーザ音声データＤＣは、情報端末４においてユーザが音声を入力したときに作成され、情報管理装置２に送信され登録された際、上記登録日時が記録され、情報管理装置２のデータベース４０８において管理されるものである。
【００４７】
このようなデータベース構成により、情報管理装置２は、情報端末４からの視聴要求に応じて動画コンテンツＤＢとユーザ音声データＤＣ２とを情報端末４に送信する際、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣを、ユーザ音声データＤＣのメタ情報（動画コンテンツＩＤ）を用いて検索し、さらに、その検索されたユーザ音声データＤＣのメタ情報（ユーザＩＤ）を用いて、その動画コンテンツＤＢを過去に視聴したユーザＩＤを取得し、これらを用いてユーザ音声データＤＣ２を生成できるようになっている。また、情報端末４は、その動画コンテンツＤＢを再生する際、ユーザ音声データＤＣのメタ情報（動画再生時刻）に基づいてそのユーザ音声データＤＣを再生することにより、ユーザ音声データＤＣを動画コンテンツＤＢに同期して再生することができるようになっている。
【００４８】
動画・音声・ユーザデータ登録削除モジュール４０９は、ユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣをデータベース４０８に新しく登録し、あるいは削除するモジュールである。ユーザ認証処理モジュール４０３は、ユーザデータＤＡに基づいて、情報コンテンツ視聴システム１（情報管理装置２）にアクセスする際のユーザ認証を行う機能を有している。動画コンテンツ一覧表示モジュール４０４は、情報管理装置２の管理の際に、必要に応じてデータベース４０８に記憶された動画コンテンツを検索して一覧表示する機能を有している。
【００４９】
サラウンド設定データ処理モジュール４０５は、再生する動画コンテンツＤＢに対応づけられたユーザ音声データＤＣをデータベース４０８において検索し、さらにそれらをユーザごとに分け、それらに基づいて音像定位位置を計算し、サラウンド処理設定データＤＤを作成する機能を有している。
【００５０】
図８（Ａ）は、サラウンド処理設定データＤＤの一例を表すものであり、図８（Ｂ）はその音像定位位置の設定例を表すものである。サラウンド処理設定データＤＤは、図８（Ａ）に示したように、ユーザ音声データＤＣの音声を発したユーザごとに、そのユーザＩＤと、そのユーザ音声データＤＣを再生するかどうかの設定（音声のＯＮ／ＯＦＦ）と、音像定位位置とを含むものである。この例では、音像定位位置の情報は、図８（Ｂ）に示したように、その動画コンテンツを視聴するユーザ８を基準としたときの、距離ｒおよび方向θにより構成されている。このサラウンド処理設定データＤＤにより、情報端末４では、ユーザ音声データＤＣの音声のそれぞれが、そのユーザごとに設定された音像定位により再生されるようになっている。
【００５１】
音声処理モジュール４０６は、サラウンド処理設定データＤＤに従って、ユーザ音声データＤＣに対する音像定位処理（サラウンド音声生成処理）を行い、ユーザ音声データＤＣ２を作成するものである。ユーザ音声データＤＣ２は、ユーザ音声データＤＣ（図７）において、実音声データをサラウンド音声生成処理されたものに置き換えたものである。つまり、ユーザ音声データＤＣ２のメタ情報は、ユーザ音声データＤＣのものと同じである。
【００５２】
ネットワーク管理モジュール４０２は、インターネット９を介して情報端末４と情報をやりとりするためのものである。画面表示制御モジュール４０７は、情報管理装置２の管理に用いられるものであり、情報コンテンツ視聴システム１などの状態を表示装置２１０の画面に表示するものである。
【００５３】
システム状態管理アプリケーション４０１は、ネットワーク管理モジュール４０２、ユーザ認証処理モジュール４０３、動画コンテンツ一覧表示モジュール４０４、サラウンド設定データ処理モジュール４０５、画面表示制御モジュール４０７、および動画・音声・ユーザデータ登録削除モジュール４０９に対して、これらのモジュールが連動して動作するように制御を行うアプリケーションソフトウェアである。
【００５４】
ネットワーク管理モジュール４０２、音声処理モジュール４０６、画面表示制御モジュール４０７、およびデータベース４０８は、基本ソフトウェアであるオペレーティングシステム４１０を介してドライバ４１１に指示を与えることにより、図２に示した情報管理装置２の各ハードウェアブロックを制御するようになっている。
【００５５】
図９は、動画再生装置３のソフトウェア構成の一例を表すものである。動画再生装置３は、動画コンテンツ管理・表示モジュール５０２と、動画コンテンツ再生モジュール５０３と、画面表示制御モジュール５０８と、動画再生制御モジュール５０９と、音声再生制御モジュール５１０と、ファイル管理モジュール５０７と、ネットワーク管理モジュール５０６と、ユーザ音声データ作成モジュール５０５と、入力情報制御アプリケーション５０４と、サラウンド音声共有アプリケーション５０１とを備えている。
【００５６】
動画コンテンツ管理・表示モジュール５０２は、情報管理装置２から供給された、ユーザ８が閲覧可能な動画コンテンツの一覧や音像定位情報の表示、ユーザ音声データＤＣの情報管理装置２に対する削除要請を処理する機能を有している。動画コンテンツ再生モジュール５０３は、動画コンテンツＤＢとユーザ音声データＤＣ２とを同期して再生する機能を有している。
【００５７】
画面表示制御モジュール５０８は、動画コンテンツ管理・表示モジュール５０２や動画コンテンツ再生モジュール５０３の指示に従い、表示装置１０４に表示する画面を制御する機能を有する。動画再生制御モジュール５０９は、動画コンテンツ再生モジュール５０３の指示に従い、動画コンテンツＤＢの映像情報の再生を制御するものである。音声再生制御モジュール５１０は、動画コンテンツ再生モジュール５０３の指示に従い、動画コンテンツＤＢの音声情報の再生を制御するものである。
【００５８】
ファイル管理モジュール５０７は、動画コンテンツ管理・表示モジュール５０２や動画コンテンツ再生モジュール５０３と連動して、各データ（ファイル）の管理を行うものである。ネットワーク管理モジュール５０６は、インターネット９を介して情報管理装置２と情報をやりとりするためのものである。
【００５９】
ユーザ音声データ作成モジュール５０５は、音声入力装置１０６を介してユーザ８が入力した音声に基づいてユーザ音声データＤＣを作成するものである。具体的には、ユーザ音声データ作成モジュール５０５は、動画再生装置３が動画コンテンツＤＢを再生している際にユーザ８が入力した発言に、その動画コンテンツＤＢの再生時間におけるその発言時の相対時刻情報（動画再生時刻）などの情報を付加し、図７に示したユーザ音声データＤＣを作成するようになっている。
【００６０】
入力情報制御アプリケーション５０４は、ユーザ８に対する入力インターフェースの機能を有し、ユーザからの操作を受け付けるものである。
【００６１】
サラウンド音声共有アプリケーション５０１は、動画コンテンツ管理・表示モジュール５０２、動画コンテンツ再生モジュール５０３、入力情報制御アプリケーション５０４、およびユーザ音声データ作成モジュール５０５に対して、これらのモジュールが連動して動作するように制御を行うアプリケーションソフトウェアである。
【００６２】
ネットワーク管理モジュール５０６、ファイル管理モジュール５０７、画面表示制御モジュール５０８、動画再生制御モジュール５０９、および音声再生制御モジュール５１０は、基本ソフトウェアであるオペレーティングシステム５１１を介してドライバ５１２に指示を与えることにより、図３に示した情報端末４の各ハードウェアブロックを制御するようになっている。
【００６３】
ここで、動画・音声・ユーザデータ登録削除モジュール４０９およびネットワーク管理モジュール４０２は、本発明の情報管理装置における「受信部」の一具体例に対応する。ネットワーク管理モジュール４０２は、本発明における「配信部」の一具体例に対応する。
【００６４】
サラウンド設定処理モジュール４０５および音声処理モジュール４０６は、本発明における「音声処理部」の一具体例に対応する。
【００６５】
動画再生制御モジュール５０９および音声再生制御モジュール５１０は、本発明における「再生部」の一具体例に対応する。ユーザ音声データ作成モジュール５０５およびネットワーク管理モジュール５０６は、本発明における「送信部」の一具体例に対応する。ネットワーク管理モジュール５０６は、本発明の情報端末における「受信部」の一具体例に対応する。動画コンテンツ再生モジュール５０３は、本発明における「再生制御部」の一具体例に対応する。
【００６６】
［動作および作用］
続いて、本実施の形態の情報コンテンツ視聴システム１の動作および作用について説明する。
【００６７】
（全体動作概要）
情報管理装置２では、情報端末４からの動画コンテンツ視聴要求に応じて、データベース４０８が、主記憶装置２０２に記録された動画コンテンツＤＢを検索する。サラウンド設定データ処理モジュール４０５は、データベース４０８と連携して、その動画コンテンツＤＢに対応づけられたユーザ音声データＤＣ、およびそのユーザ音声データＤＣと対応づけられたユーザデータＤＡに基づいて、過去に動画コンテンツＤＢを視聴したユーザの音像定位位置を算出し、サラウンド処理設定データＤＤを作成する。音声処理モジュール４０６は、サラウンド処理設定データＤＤに基づいて、ユーザ音声データＤＣのそれぞれに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成する。そしてネットワーク管理モジュール４０２は、ネットワークコントローラ２０１を制御し、その動画コンテンツＤＢおよびユーザ音声データＤＣ２を、インターネット９を介して情報端末４に送信する。
【００６８】
情報端末４では、動画再生装置３のネットワーク管理モジュール５０６がネットワークコントローラ３０１を制御し、情報管理装置２から動画コンテンツＤＢとユーザ音声データＤＣ２を受信する。そして、動画コンテンツ再生モジュール５０３は、その動画コンテンツＤＢを再生する際、ユーザ音声データＤＣ２を、そのメタ情報（動画再生時刻）を用いて動画コンテンツＤＢに同期して再生する。動画再生制御モジュール５０９は、ビデオデコーダ３０４やビデオ出力部３０６などを制御して、動画コンテンツＤＢの映像情報を表示装置１０４に供給し、表示装置１０４はその映像を表示する。音声再生制御モジュール５１０は、オーディオプロセッサ３０３やオーディオ出力部３０７などを制御して、動画コンテンツＤＢおよびユーザ音声データＤＣ２の音声情報をサラウンド音声出力装置１０５に供給し、サラウンド音声出力装置１０５はその音声情報を出力する。これにより、ユーザ音声データＤＣ２の音声は、動画コンテンツＤＢの音声に重畳され、動画コンテンツＤＢに同期して再生される。
【００６９】
情報端末４は、動画コンテンツＤＢを再生する際、音声入力装置１０６を介してユーザ８の音声を入力する。動画再生装置３のユーザ音声データ作成モジュール５０５は、入力されたユーザ８の発言に、その動画コンテンツＤＢの再生時間におけるその発言時の相対時刻情報（動画再生時刻）などの情報を付加し、ユーザ音声データＤＣを作成する。ネットワーク管理モジュール５０６は、このユーザ音声データＤＣを情報管理装置２に送信する。
【００７０】
情報管理装置２では、ネットワーク管理モジュール４０２が、情報端末４からこのユーザ音声データＤＣを受信する。動画・音声・ユーザデータ登録削除モジュール４０９は、このユーザ音声データＤＣをデータベース４０８（主記憶装置２０２）に記録する。
【００７１】
（詳細動作）
以下、情報コンテンツ視聴システム１の動作を、いくつかのフローチャートを用いて詳細に説明する。
【００７２】
（動画コンテンツの視聴）
図１０は、動画コンテンツＤＢの視聴を行う場合の流れ図を表すものである。ユーザ８は、情報端末４から情報管理装置２にログインした後、情報管理装置２に対して動画コンテンツＤＢの視聴要求を行う。情報管理装置２は、視聴要求された動画コンテンツＤＢに、過去に視聴履歴があるかどうかを調査し、視聴履歴がある場合において、視聴した各ユーザのＧＰＳ情報などに基づいてサラウンド音声生成処理を行い、情報端末４に対して動画コンテンツＤＢおよびユーザ音声データＤＣ２を送信する。情報端末４は、これらを受信して、同期再生を行う。以下に、フローの各ステップを詳細に説明する。
【００７３】
まず、情報端末４においてユーザ８がユーザ名とユーザパスワードを入力し、情報管理装置２のユーザ認証処理モジュール４０３がユーザ認証を行い（ステップＳ１０２）、ユーザ８が情報コンテンツ視聴システム１の登録ユーザかどうかを確認する（ステップＳ１０３）。ユーザ８が登録ユーザの場合にはステップＳ１０４に進み、登録ユーザではない場合にはこのフローを終了する。
【００７４】
次に、情報管理装置２が、視聴可能な動画コンテンツ一覧を作成して送信し、情報端末４がその一覧を表示する（ステップＳ１０４）。具体的には、情報管理装置２では、データベース４０８が、例えばユーザ８のユーザデータＤＡの課金情報に基づいて、ユーザ８が視聴可能な動画コンテンツを検索してその一覧を作成する。つまり、この例では、情報コンテンツ視聴システム１は有償登録制のものである。また、データベース４０８は、この課金情報の他、ユーザデータＤＡの年齢情報などに基づいて、動画コンテンツの一覧を作成するようにしてもよい。ネットワーク管理モジュール４０２は、その一覧を情報端末４に送信する。情報端末４の動画再生装置３では、ネットワーク管理モジュール５０６がその動画コンテンツの一覧を受信し、動画コンテンツ管理・表示モジュール５０２がその一覧を表示装置１０４に表示する。
【００７５】
次に、情報端末４において、ユーザ８が動画コンテンツの一覧から視聴したい動画コンテンツＤＢを選択する（ステップＳ１０５）。図示していないが、ユーザ８は、例えばこの動画コンテンツの一覧に視聴したいものがないなどの場合には、表示装置１０４に表示されるメニュー画面に従い、情報コンテンツ視聴システム１からログオフすることができる。また、ユーザ８は、表示装置１０４に表示されるメニュー画面に従い、例えば自身が所有する動画コンテンツを情報管理装置２にアップロードすることも可能である。
【００７６】
次に、情報管理装置２が、ユーザ８が選択した動画コンテンツＤＢに視聴履歴があるかどうかを確認する（ステップＳ１０６）。具体的には、データベース４０８が、例えば、登録されているユーザ音声データのうち、そのメタ情報（動画コンテンツＩＤ）が動画コンテンツＤＢのものと一致するものを検索することにより、その動画コンテンツＤＢに視聴履歴があるかどうかを確認する。動画コンテンツＤＢに視聴履歴が無い場合にはステップＳ１０７に進み、視聴履歴がある場合には、ステップＳ１０９に進む。
【００７７】
ステップＳ１０６において動画コンテンツＤＢに視聴履歴がない場合には、情報管理装置２のネットワーク管理モジュール４０２が情報端末４に対して動画コンテンツＤＢを送信し、動画再生装置３のネットワーク管理モジュール５０６がこれを受信する（ステップＳ１０７）。そして、情報端末４において、動画コンテンツ再生モジュール５０３が、動画再生制御モジュール５０９および音声再生制御モジュール５１０を制御し、表示装置１０４がその動画コンテンツＤＢの映像情報を表示するとともに、サラウンド音声出力装置１０５がその音声情報を出力する。これにより、ユーザ８はこの動画コンテンツＤＢを視聴することができる。
【００７８】
ステップＳ１０６において動画コンテンツＤＢに視聴履歴がある場合には、情報管理装置２は、サラウンド処理設定データＤＤを作成して情報端末４に送信し、情報端末４がこれを受信して、その音像定位情報を表示する（ステップＳ１０９）。具体的には、まず情報管理装置２では、サラウンド設定データ処理モジュール４０５が、視聴履歴がある各ユーザの音像定位位置の算出を行い、サラウンド処理設定データＤＤを作成する。その音像定位位置の算出は、詳細は後述するが、視聴履歴がある各ユーザの、その動画コンテンツＤＢに対する発言回数や、発言の平均最大音量、ＧＰＳ情報などに基づいて行われる。そして、情報管理装置２のネットワーク管理モジュール４０２が、サラウンド処理設定データＤＤを情報端末４に送信する。情報端末４では、ネットワーク管理モジュール５０６がこれを受信し、動画再生装置３の動画コンテンツ管理・表示モジュール５０２が、情報管理装置２から供給されたサラウンド処理設定データＤＤの情報に基づいて、音像定位情報を表示する。以下に、情報端末４における音像定位情報の表示例を説明する。
【００７９】
図１１は、音像定位情報の表示画面例を表すものである。この表示画面例は、ユーザ一覧画面１２０と、音像定位情報画面１１０とから構成されている。
【００８０】
ユーザ一覧画面１２０は、過去に動画コンテンツＤＢを視聴したユーザの一覧を示すものである。ユーザ一覧画面１２０は、各ユーザを示すアイコン１２１と、ユーザ数が多い場合などにユーザ一覧をスクロール表示するためのスクロールバー１２２とを含んでいる。各アイコン１２１は、ユーザ名と一緒に表示され、各アイコンと各ユーザとの対応がわかりやすく示されている。
【００８１】
音像定位情報画面１１０は、各ユーザの音像定位位置や、動画の音量などを模式的に示すものである。音像定位情報画面１１０には、情報端末４の構成要素（表示画面１０４およびサラウンド音声出力装置１０５）の配置が模式的に示されている。音像定位情報画面１１０は、この例では、アイコン１１８，１１９と、音量バー１１１、音量表示円１１２と、再生開始ボタン１１３とを含んでいる。アイコン１１８は、動画コンテンツＤＢを視聴するユーザ８の配置を示すものである。アイコン１１９は、過去に動画コンテンツＤＢを視聴したユーザの音像定位位置を示すものであり、ユーザ一覧画面１２０に表示された各アイコンと対応している。音量バー１１１は、動画コンテンツＤＢの再生音量を表示するとともに、その設定を行うことができるものであり、これにより、動画コンテンツＤＢの音量と、ユーザ音声データＤＣ２の音量とのバランスを調整することができる。音量表示円１１２は、音量バー１１１と連動して動画コンテンツＤＢの再生音量をわかりやすく表示するものであり、例えば、音量表示円１１２が大きいほどその音量が大きく、音量表示円１１２が小さいほどその音量が小さいことを示すものである。再生開始ボタン１１３は、この音像定位情報の表示を終了し、動画コンテンツＤＢの再生を開始するためのものである。
【００８２】
次に、ユーザ８は、サラウンド処理設定データＤＤの編集、および動画コンテンツＤＢの音量調整を行う（ステップＳ１１０）。具体的には、情報端末４では、入力情報制御アプリケーション５０４がユーザ８からの指示を受け付け、動画コンテンツ管理・表示モジュール５０２が各ユーザの音像定位情報を編集してサラウンド処理設定データＤＤを再作成する。以下に、図１１を参照して、その具体例を説明する。
【００８３】
図１１において、ユーザ一覧画面１２０に表示されたユーザを選択し、そのアイコンを音像定位情報画面１１０の任意の位置に配置することにより、各ユーザの音像定位位置を自由に設定することができる。また、ユーザ一覧画面１２０のユーザを選択し、設定を行うことにより、そのユーザの音声出力のオンオフを設定することができる。このオンオフ設定は、例えば、ある特定ユーザの音声だけを聞きたい場合や、ある特定ユーザの音声だけ聞きたくない場合などに使用することができる。音像定位情報画面１１０には、ユーザ一覧画面１２０に表示されたユーザのうち、音声出力がオンに設定されているユーザのみが表示されている。これらの設定の結果は、サラウンド処理設定データＤＤ（図８（Ａ））に反映される。すなわち、再生開始ボタン１１３を選択すると、動画コンテンツ管理・表示モジュール５０２が、この設定結果に基づいてサラウンド処理設定データＤＤを再作成する。
【００８４】
次に、情報端末４は、編集されたサラウンド処理設定データＤＤを情報管理装置２に送信し、情報管理装置２はこれを受信する（ステップＳ１１１）。具体的には、動画再生装置３のネットワーク管理モジュール５０６が、ステップＳ１１０において再作成されたサラウンド処理設定データＤＤを情報管理装置２に送信し、情報管理装置２のネットワーク管理モジュール４０２がこれを受信する。
【００８５】
次に、情報管理装置２は、ユーザ音声データＤＣに対してサラウンド音声生成処理を行う（ステップＳ１１２）。具体的には、音声処理モジュール４０６が、情報端末４において編集されたサラウンド処理設定データＤＤに基づいて、各ユーザ音声データＤＣに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成する。
【００８６】
情報管理装置２は、サラウンド音声生成処理が行われた複数のユーザ音声データＤＣ２を、そのメタ情報に含まれる動画再生時刻を用いて、例えば動画コンテンツＤＢと同じ時間長をもつ１つのユーザ音声データＤＣ３に合成することも可能である。この合成は、以下の場合に有効である。すなわち、情報端末４において動画コンテンツＤＢを再生する際に、複数のユーザ音声データＤＣ２がお互いに隣接した動画再生時刻を有する場合には、それらの複数のユーザ音声データＤＣ２の音声が重なることとなる。これは、複数のユーザ音声データＤＣ２に対して同時に処理を行う必要があるため、動画再生装置３の負荷がより重くなることを意味している。この時、例えば、動画再生装置３の機器性能によっては、複数のユーザ音声データＤＣ２を同時に再生することができない恐れがある。このような場合に、動画再生装置３は、複数のユーザ音声データＤＣ２に代えてこの合成されたユーザ音声データＤＣ３を用いることにより、同時に再生するユーザ音声データの数に関する制限をうけることなく、動画コンテンツＤＢとの同期再生を行うことができる。
【００８７】
次に、情報管理装置２は、動画コンテンツＤＢおよびユーザ音声データＤＣ２を、情報端末４に送信し、情報端末４がこれを受信する（ステップＳ１１３）。具体的には、情報管理装置２のネットワーク管理モジュール４０２が、ステップＳ１１２においてサラウンド音声生成処理されたユーザ音声データＤＣ２、もしくはこれらを合成したユーザ音声データＤＣ３を情報管理装置２に送信し、動画再生装置３のネットワーク管理モジュール５０６がこれらを受信する。
【００８８】
そして、情報端末４は、動画コンテンツＤＢとユーザ音声データＤＣ２の同期再生を行う（ステップＳ１１４）。具体的には、情報端末４が動画コンテンツＤＢおよびユーザ音声データＤＣ２を受信した場合には、コンテンツ再生モジュール５０３は、各ユーザ音声データＤＣ２のメタ情報に含まれる動画再生時刻が、その動画コンテンツＤＢの再生時刻と一致したときに、そのユーザ音声データＤＣ２の音声を再生する。また、情報端末４が動画コンテンツＤＢおよび合成されたユーザ音声データＤＣ３を受信した場合には、コンテンツ再生モジュール５０３は、その動画コンテンツＤＢの再生時刻と、構成されたユーザ音声データＤＣ３の再生時刻とが常に互いに等しくなるように再生を行う。
【００８９】
以上により、このフローは終了する。
【００９０】
（ユーザ音声データＤＣの作成・登録）
次に、情報端末４において動画コンテンツＤＢを再生している時に、ユーザ８が行った発言に基づいてユーザ音声データＤＣを作成する場合のフローを説明する。
【００９１】
図１２は、ユーザ音声データＤＣを作成する場合の流れ図を表すものである。動作再生装置３は、動画コンテンツＤＢを再生する際、ユーザ８が発言を行う度にユーザ音声データＤＣを作成し、情報管理装置２に送信する。情報管理装置２は、そのユーザ音声データＤＣを受信し、データベース４０８に蓄積する。以下に、フローの各ステップを詳細に説明する。
【００９２】
まず、情報端末４の動画再生装置３は、動画再生中かどうかを確認する（ステップＳ２０２）。言い換えれば、動画再生装置３は、一時停止中でないかどうか、あるいは早送りや巻き戻し中ではないかどうかを確認する。動作再生装置３が動画再生中の場合にはステップＳ２０３に進み、動画再生中でない場合にはこのフローを終了する。
【００９３】
次に、ユーザ８が発言を入力する（ステップＳ２０３）。具体的には、動画再生装置３の入力情報制御アプリケーション５０４が、音声入力装置１０６に入力されたユーザ８の発言を記録する。具体的には、例えば音声入力装置１０６にボタンを設け、あるいは外部機器１０７としてボタンを設け、ユーザ８がそのボタンを押下しながら発言したときに、音声入力装置１０６を介してその発言が記録される。もしくは、情報端末４は、例えば、入力音声の有無やその音量を分析して、ユーザ８が発言を行っていると判断し、その発言を記録するようにしてもよい。
【００９４】
次に、情報端末４は、発言時の動画再生時刻を取得する（ステップＳ２０４）。具体的には、ユーザ音声データ作成モジュール５０５が、動画コンテンツＤＢの再生時間における、発言時の相対時刻（動画再生時刻）を取得する。上記ボタンを設けた例では、ユーザ８がボタンを押下したときに、ユーザ音声データ作成モジュール５０５が、動画コンテンツの再生時間における相対時刻を取得する。
【００９５】
次に、情報端末４は、ユーザ音声データＤＣの作成を行う（ステップＳ２０５）。具体的には、ユーザ音声データ作成モジュール５０５が、ステップＳ２０３において記録した音声情報（実音声データ）、ステップＳ２０４において取得した動画再生時刻などに基づいて、図７に示したユーザ音声データＤＣを作成する。
【００９６】
次に、情報端末４は、ユーザ音声データＤＣを情報管理装置２に送信し（ステップＳ２０６）、情報管理装置２がこれを受信する（ステップＳ２０７）。
【００９７】
次に、情報管理装置２は、ユーザ音声データＤＣをデータベース４０８に登録する（ステップＳ２０８）。具体的には、動画・音声・ユーザデータ登録削除モジュール４０９が、ユーザ音声データＤＣをデータベース４０８に登録し蓄積する。
【００９８】
情報端末４は、動画の再生が終了するまでの間、ユーザ８が発言を行う度に、ユーザ音声データＤＣを作成し情報管理装置２に送信し、情報管理装置２は、これを受信しデータベース４０８に登録し蓄積する。
【００９９】
以上のフローは、動画の再生が終了すると終了する。
【０１００】
（サラウンド処理設定データＤＤの作成）
次に、図１０のステップＳ１０９に示した、サラウンド処理設定データＤＤの作成のフローについて、詳細に説明する。
【０１０１】
図１３は、サラウンド処理設定データＤＤを作成する場合の流れ図を表すものである。情報管理装置２では、過去に動画コンテンツＤＢを視聴したことがあるユーザごとに、その動画コンテンツＤＢに対する発言回数、発言の平均最大音量、およびそのユーザのＧＰＳ情報に基づいて音像定位位置を設定する。このフローは、全て情報管理装置２において実行される。以下に、フローの各ステップを詳細に説明する。
【０１０２】
まず、情報管理装置２は、動画コンテンツＤＢについて視聴履歴があるユーザの一覧を取得する（ステップＳ３０２）。具体的には、データベース４０８は、ステップＳ１０６において検索した、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣのメタ情報（ユーザＩＤ）を調べることにより、動画コンテンツＤＢの視聴履歴があるユーザの一覧を取得する。
【０１０３】
次に、情報管理装置２は、各ユーザのＧＰＳ情報を取得する（ステップＳ３０４）。具体的には、サラウンド設定データ処理モジュール４０５は、データベース４０８に登録されているユーザデータＤＡのメタ情報（ユーザＩＤおよびＧＰＳ情報）を用いて、ステップＳ３０２で得られたユーザ一覧の各ユーザのＧＰＳ情報を取得する。
【０１０４】
次に、情報管理装置２は、各ユーザの音像定位位置（方向θ）を決定する（ステップＳ３０５）。具体的には、サラウンド設定データ処理モジュール４０５は、ユーザ８のＧＰＳ情報と、ステップＳ３０４で得られた各ユーザのＧＰＳ情報とに基づいて、音像定位位置の方向θ（図８（Ｂ）参照）を決定する。これにより、例えば、ユーザ８は、動画コンテンツＤＢと同期してユーザ音声データＤＣ２を再生する際、実際に各ユーザが居住している方向から、そのユーザの音声（ユーザ音声データＤＣ２の音声）が発生しているように感じるようになる。
【０１０５】
次に、情報管理装置２は、各ユーザの発言回数、および各ユーザの平均最大音量を取得する（ステップＳ３０６）。具体的には、サラウンド設定データ処理モジュール４０５が、ステップＳ１０６において検索した、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣのうち、そのメタ情報（ユーザＩＤ）が各ユーザのものと一致するものを検索することにより、その動画コンテンツＤＢに対する各ユーザの発言回数を取得する。サラウンド設定データ処理モジュール４０５は、さらに、検索したユーザ音声データＤＣのメタ情報（最大音量）を用いて、その動画コンテンツＤＢに対する各発言の最大音量の平均値を取得する。
【０１０６】
次に、情報管理装置２は、各ユーザの音像定位位置（距離ｒ）を決定する（ステップＳ３０７）。具体的には、サラウンド設定データ処理モジュール４０５は、ステップＳ３０６において取得した各ユーザの発言回数、および各ユーザの平均最大音量に基づいて、音像定位位置の距離ｒ（図８（Ｂ）参照）を決定する。距離ｒは、例えば、発言回数が多いほど短くなり、また、平均最大音量が大きいほど長くなるように決定される。
【０１０７】
次に、情報管理装置２は、サラウンド処理設定データＤＤを作成する（ステップＳ３０８）。具体的には、サラウンド設定データ処理モジュール４０５が、ステップＳ３０５およびステップＳ３０７において取得した各ユーザの音像定位位置（方向θおよび距離ｒ）に基づいて、サラウンド処理設定データＤＤを作成する。
【０１０８】
以上により、このフローは終了する。
【０１０９】
（ユーザ音声データＤＣに対するサラウンド音声生成処理）
次に、図１０のステップＳ１１２に示した、ユーザ音声データＤＣに対するサラウンド音声生成処理のフローについて、詳細に説明する。
【０１１０】
図１４は、サラウンド音声生成処理の流れ図を表すものである。情報管理装置２では、サラウンド処理設定データＤＤに基づいて、過去に動画コンテンツＤＢを視聴したユーザごとに、それぞれのユーザ音声データＤＣに対してサラウンド音声生成処理を行う。つまり、このフローは、全て情報管理装置２において実行される。以下に、フローの各ステップを詳細に説明する。
【０１１１】
まず、情報管理装置２は、ユーザの音声がオン状態に設定されているかを確認する（ステップＳ４０２）。具体的には、音声処理モジュール４０６は、ステップＳ１１１において入手したサラウンド処理設定データＤＤ（図８（Ａ））において、ある着目したユーザ（視聴履歴のあるユーザ）の音声出力がオン状態に設定されているかどうかを確認する。オン状態に設定されている場合にはステップＳ４０３に進み、オフ状態に設定されている場合にはステップＳ４０７に進む。
【０１１２】
次に、情報管理装置２は、そのユーザに関連するユーザ音声データＤＣを検索し（ステップＳ４０３）、該当するユーザ音声データＤＣがあるかどうかを確認する（ステップＳ４０４）。具体的には、データベース４０８は、登録されたユーザ音声データＤＣのうち、そのメタ情報（動画コンテンツＩＤ）が動画コンテンツＤＢのものと一致するものを検索し、さらに、その検索したユーザ音声データＤＣのメタ情報（ユーザＩＤ）を調べ、着目したユーザのものがあるかどうかを調べる。該当するユーザ音声データＤＣがある場合にはステップＳ４０５に進み、該当するユーザ音声データＤＣがない場合にはステップＳ４０７に進む。
【０１１３】
次に、情報管理装置２は、ユーザ音声データＤＣに対してサラウンド音声生成処理を行い（ステップＳ４０５）、その結果を一時記憶装置２０３に格納する（ステップＳ４０６）。具体的には、音声処理モジュール４０６は、ステップＳ４０３において検索して該当した、動画コンテンツＤＢおよび着目ユーザに対応づけられた各ユーザ音声データＤＣのそれぞれに対して、サラウンド処理設定データＤＤに基づいて、音像定位処理（サラウンド音声生成処理）を行ってユーザ音声データＤＣ２を作成し、その結果を一時記憶装置２０３に格納する。
【０１１４】
次に、情報管理装置２は、以上の操作を、動画コンテンツＤＢに視聴履歴のある全てのユーザに対して行ったかどうかを確認する（ステップＳ４０７）。具体的には、音声処理モジュール４０６は、サラウンド処理設定データＤＤの全てのユーザに対してサラウンド音声生成処理（ステップＳ４０２〜Ｓ４０６）を行ったかどうかを確認する。全てのユーザに対して処理を行った場合にはステップＳ４０８に進み、まだ全てのユーザに対して処理を行っていない場合には、ステップＳ４０２に戻り、全てのユーザに対して処理が終了するまでそれを繰り返す。
【０１１５】
そして、情報管理装置２は、動画再生装置３に制限がある場合には、必要に応じて複数のユーザ音声データＤＣ２を１つのユーザ音声データＤＣ３に合成する。
【０１１６】
以上により、このフローは終了する。
【０１１７】
（ユーザ音声データＤＣの削除処理）
次に、情報管理装置２に登録された、ユーザ８自身のユーザ音声データＤＣを削除するフローについて、説明する。
【０１１８】
図１５は、ユーザ音声データＤＣの削除処理の流れ図を表すものである。まず、情報端末４は、動画コンテンツＤＢを再生するとともに、その動画コンテンツＤＢに対応づけられている、視聴しているユーザ８自身のユーザ音声データＤＣ２の一覧を表示する。ユーザ８は、その一覧から、削除したいユーザ音声データＤＣ２を選択する。情報管理装置２は、その指示に従って、データベース４０８に記録された、該当するユーザ音声データＤＣ２に対応するユーザ音声データＤＣを削除する。以下に、フローの各ステップを詳細に説明する。
【０１１９】
まず、情報端末４は、ユーザ８自身のユーザ音声データＤＣを取得する（ステップＳ５０２）。具体的には、動画再生装置３の動画コンテンツ管理・表示モジュール５０２は、動画コンテンツＤＢとともに受信したユーザ音声データＤＣ２から、そのメタ情報（ユーザＩＤ）を用いて、ユーザ８自身のユーザ音声データＤＣ２を検索する。
【０１２０】
次に、情報端末４は、ユーザ８自身のユーザ音声データＤＣ２の一覧を表示する（ステップＳ５０３）。具体的には、動画再生装置３の画面表示制御モジュール５０８は、動画コンテンツＤＢの再生画面に、ステップＳ５０３において取得したユーザ音声データＤＣ２の一覧を表示する。以下に、ユーザ音声データＤＣ２の一覧表示時の表示画面例について説明する。
【０１２１】
図１６は、ユーザ音声データＤＣ２の一覧表示時の表示画面例を表すものである。この表示画面例は、動画コンテンツ再生画面１３０と、ユーザ音声デ−タ一覧画面１４０とから構成されている。
【０１２２】
動画コンテンツ再生画面１３０は、動画コンテンツＤＢの映像情報を表示するものである。動画コンテンツ再生画面１３０には、タイムライン１３１が表示されている。タイムライン１３１は、現在再生している部分が、動画コンテンツＤＢのどの部分に位置するかをわかりやすく示したものである。
【０１２３】
ユーザ音声データ一覧画面１４０は、その動画コンテンツＤＢに対するユーザ８自身のユーザ音声データＤＣ２を一覧として示すものである。具体的には、それぞれのユーザ音声データＤＣ２の発言を行った日時と、動画コンテンツＤＢ内におけるそのユーザ音声データＤＣ２が対応づけられた相対時刻（動画再生時刻）とが一覧として表示されている。ユーザ８が、このユーザ音声データＤＣ２の一つを選択すると、動画コンテンツ再生画面１３０の動画表示は、そのユーザ音声データＤＣ２が対応付けされている動画再生時刻における表示にスキップするとともに、このユーザ音声データＤＣ２の音声が再生され、これにより、ユーザ８は、即座にユーザ音声データＤＣ２の内容を確認することができる。ユーザ音声データ一覧画面１４０は、チェックボックス１４１と、削除ボタン１４２を含んでいる。チェックボックス１４１は、削除したいユーザ音声データＤＣ２（ＤＣ）を選択するためのものである。削除ボタン１４２は、チェックボックス１４１がチェックされたユーザ音声データＤＣ２（ＤＣ）を削除するためのものである。
【０１２４】
次に、ユーザ８は、削除したいユーザ音声データＤＣ２（ＤＣ）があるかどうかを確認する（ステップＳ５０４）。ユーザ８は、削除したいユーザ音声データＤＣ２（ＤＣ）がある場合には、ユーザ音声データ一覧画面１４０（図１６）において、該当するチェックボックス１４１にチェックを入れる。削除したいユーザ音声データＤＣ２（ＤＣ）がある場合には、このフローを終了する。
【０１２５】
次に、情報端末４は、削除したいユーザ音声データＤＣ２（ＤＣ）のユーザ音声データＩＤを送信する（ステップＳ５０５）。具体的には、ユーザ８の削除ボタン１４２（図１６）の操作に従い、動画再生装置３の入力情報制御アプリケーション５０４が、ステップＳ５０４においてユーザ８がチェックを入れたユーザ音声データＤＣ２（ＤＣ）のユーザ音声データＩＤを、情報管理装置２に送信する。
【０１２６】
次に、情報管理装置２は、ユーザ音声データＩＤを受信し、該当するユーザ音声データＤＣをデータベース４０８から削除する（ステップＳ５０６）。具体的には、情報管理装置２の動画・音声・ユーザデータ登録削除モジュール４０９は、情報端末４からのユーザ音声データ削除の指示に従い、該当するユーザ音声データＩＤをもつユーザ音声データＤＣを削除する。その後、ステップＳ５０４に戻り、ユーザ８からの指示に従いユーザ音声データＤＣ２（ＤＣ）の削除を繰り返す。
【０１２７】
以上のフローは、削除したいユーザ音声データＤＣ２がなくなると終了する。
【０１２８】
［効果］
以上のように本実施の形態では、動画コンテンツに対する他のユーザの音声による発言を、その動画コンテンツの再生に同期して再生するようにしたので、文字情報の同期表示などに比べて高い表現力を有する情報交換が可能となる。
【０１２９】
また、本実施の形態では、動画コンテンツに対する他のユーザの発言を、ユーザ情報データとして情報管理装置に蓄積し、別のユーザがその動画コンテンツを視聴する際にそれらを受信して同期再生するようにしたので、ユーザは自分の都合のよい時間に他のユーザと情報交換を行うことができ、また、その内容を何度も楽しむことができる。
【０１３０】
また、本実施の形態では、ユーザ音声データＤＣに対し、音像定位を設定してサラウンド生成処理するようにしたので、他のユーザと一緒に会話（チャット）しながら同じ動画コンテンツの視聴を楽しんでいる感覚を得ることができる。
【０１３１】
また、本実施の形態では、ユーザごとに異なる音像定位を設定してサラウンド音声生成処理するようにしたので、情報端末４において動画コンテンツＤＢと同期してユーザ音声データＤＣ２を再生する際、動画コンテンツの音声や、各ユーザの音声がお互いに重なりにくくなり、その音声を聞き分けることができる。
【０１３２】
［変形例１−１］
上記実施の形態では、動画コンテンツは情報管理装置に記録されているものとしたが、これに限定されるものではなく、例えば、動画再生装置に記録されていてもよい。この場合、動画コンテンツが動画再生装置自体に記録されていてもよいし、動画再生装置が再生する記録媒体に記録されていてもよい。これらの場合では、情報管理装置は、ユーザデータＤＡおよびユーザ音声データＤＣを管理しており、動画再生装置が動画コンテンツＤＢを再生する際、その動画コンテンツＤＢを識別するコードを情報管理装置に送信し、それに基づいて情報管理装置がその動画コンテンツＤＢに対応づけされたユーザ音声データＤＣなどを情報端末に送ることにより、情報コンテンツ視聴システム１は上記実施の形態と同様に動作することができる。
【０１３３】
＜２．第２の実施の形態＞
次に、本発明の第２の実施の形態に係る情報コンテンツ視聴システムについて説明する。本実施の形態は、ユーザ情報データに対するサラウンド音声生成処理の主体が、上記第１の実施の形態と異なるものである。すなわち、上記第１の実施の形態（図１）では、情報管理装置２がサラウンド音声生成処理を行うようにしたが、これに代えて、本実施の形態では、情報端末（動画再生装置）がこのサラウンド音声生成処理が行うようにしている。その他の構成は、上記第１の実施の形態（図１）と同様である。なお、上記第１の実施の形態に係る情報コンテンツ視聴システムと実質的に同一の構成部分には同一の符号を付し、適宜説明を省略する。
【０１３４】
図１７は、情報管理装置２Ｂのソフトウェア構成の一例を表すものである。情報管理装置２Ｂは、第１の実施の形態に係る情報管理装置２（図４）と比べて、サラウンド設定データ処理モジュール４０５および音声処理モジュール４０６を省いたものである。
【０１３５】
図１８は、情報端末４Ｂにおける動画再生装置３Ｂのソフトウェア構成の一例を表すものである。動画再生装置３Ｂは、第１の実施の形態に係る動画再生装置３（図９）と比べて、サラウンド設定データ処理モジュール５１３および音声処理モジュール５１４を追加したものである。サラウンド設定データ処理モジュール５１３は、ユーザデータＤＡおよびユーザ音声データＤＣに基づいて音像定位位置を算出し、サラウンド処理設定データＤＤを作成する機能を有している。音声処理モジュール５１４は、サラウンド処理設定データＤＤに従って、ユーザ音声データＤＣに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成するものである。
【０１３６】
この構成により、本実施の形態に係る情報コンテンツ視聴システム１Ｂでは、動画コンテンツＤＢを再生する情報端末４Ｂがサラウンド音声生成処理を行うようになっている。
【０１３７】
以下に、情報コンテンツ視聴システム１Ｂにおいて、動画コンテンツＤＢの視聴を行う場合の動作を説明する。
【０１３８】
図１９は、動画コンテンツＤＢの視聴を行う場合の流れ図を表すものである。ユーザ８は、情報管理装置２Ｂに対して動画コンテンツＤＢの視聴要求を行うと、情報管理装置２Ｂは、視聴要求された動画コンテンツＤＢにユーザの視聴履歴があるかどうかを調査し、視聴履歴がある場合において、動画コンテンツＤＢに加え、ユーザデータＤＡと、動画コンテンツＤＢに対応づけられたユーザ音声データＤＣとを情報端末４Ｂに対して送信する。動画再生装置３Ｂは、ユーザデータＤＡおよびユーザ音声データＤＣに基づいてユーザ音声データＤＣに対してサラウンド音声生成処理を行って、ユーザ音声データＤＣ２を作成し、動画コンテンツＤＢに同期して再生を行う。以下に、フローの各ステップを詳細に説明する。なお、ステップＳ１０１〜Ｓ１０８は、第１の実施の形態（図１０）と同じであるため説明を省略し、ここではステップＳ８０９以降の説明を行うこととする。
【０１３９】
ステップＳ１０６において動画コンテンツＤＢに視聴履歴がある場合には、情報管理装置２Ｂは、動画コンテンツＤＢ、視聴履歴のあるユーザのユーザ音声データＤＣ、およびそのユーザのユーザデータＤＡを情報端末４Ｂに送信する（ステップＳ８０９）。具体的には、データベース４０８は、登録されているユーザ音声データＤＣのうち、そのメタ情報（動画コンテンツＩＤ）が動画コンテンツＤＢのものと一致するものを検索する。データベース４０８は、さらにその検索されたユーザ音声データＤＣから、そのメタ情報（ユーザＩＤ）を用いて、視聴履歴のあるユーザを調べ、そのユーザデータＤＡを取得する。
そして、ネットワーク管理モジュール４０２は、これらのユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣを情報端末４Ｂに送信する。
【０１４０】
次に、情報端末４Ｂは、サラウンド処理設定データＤＤの作成を行う（ステップＳ８１０）。具体的には、まず、動画再生装置３Ｂのネットワーク管理モジュール５０６が、情報管理装置２Ｂから、ユーザデータＤＡ、動画コンテンツＤＢ、およびユーザ音声データＤＣを受信する。そして、サラウンド設定データ処理モジュール５１３が、図１３に示した処理方法と同様の方法で、視聴履歴がある各ユーザの音像定位位置の算出を行い、サラウンド処理設定データＤＤを作成する。
【０１４１】
次に、情報端末４Ｂは、サラウンド処理設定データＤＤの編集、および動画コンテンツＤＢの音量調整を行う（ステップＳ１１０）。その具体例は、第１の実施の形態のステップＳ１１０と同様である。
【０１４２】
次に、情報端末４Ｂは、ユーザ音声データＤＣに対するサラウンド音声生成処理を行う（ステップＳ８１２）。具体的には、動画再生装置３Ｂの音声処理モジュール５１４が、ステップＳ１１０において再作成されたサラウンド処理設定データＤＤに基づいて、各ユーザ音声データＤＣに対してサラウンド音声生成処理を行い、ユーザ音声データＤＣ２を作成する。また、例えば動画再生装置３Ｂの機器性能などにより、複数のユーザ音声データＤＣを同時に再生することができない場合には、第１の実施の形態と同様に、これらのユーザ音声データＤＣ２を合成するようにしてもよい。
【０１４３】
そして、情報端末４は、動画コンテンツＤＢとユーザ音声データＤＣ２の同期再生を行う（ステップＳ１１４）。その具体例は、第１の実施の形態のステップＳ１１４と同様である。
【０１４４】
以上により、このフローは終了する。
【０１４５】
以上のように本実施の形態では、サラウンド音声生成処理を情報端末側で行うようにしたので、情報管理装置の負荷を軽減することができる。その他の効果は、上記第１の実施の形態の場合と同様である。
【０１４６】
上記実施の形態では、動画コンテンツは情報管理装置に記録されているものとしたが、これに限定されるものではなく、例えば、上記第１の実施の形態の変形例と同様に、動画再生装置に記録されていてもよい。
【０１４７】
＜３．適用例＞
次に、図２０および図２１を参照して、上記実施の形態および変形例で説明した情報コンテンツ視聴システムの適用例について説明する。
【０１４８】
（適用例１）
図２０は、情報端末の動画再生装置として再生機器を用いた場合の情報コンテンツ視聴システムの構成例を表すものである。この情報コンテンツ視聴システム１Ｃは、情報管理装置２Ｃおよび情報端末４Ｃを有している。情報管理装置２Ｃは、この例ではＰＣ端末（Personal Computer）により構成されている。情報端末４Ｃの再生機器１０８は、例えば、Blu-ray Disc（登録商標）などを記録媒体１０９とした再生機器が適用可能である。この例では、記録媒体１０９（Blu-ray Disc）には、動画コンテンツＤＢおよびBD-Java（登録商標）プログラムが含まれている。BD-Java（登録商標）プログラムは、この例では図８や図１８に示したソフトウェア構成と同様の構成を有するプログラムである。言い換えれば、上記第１および第２の実施の形態では、プログラムはＲＯＭ３１１に記録されているものとしたが、本適用例では、プログラムは記録媒体１０９に記録されている。この構成により、情報端末４Ｃは、第１および第２の実施の形態に示した情報端末４と同様の機能を実現できる。
【０１４９】
この適用例では、情報端末４Ｃの記録媒体１０９が動画コンテンツＤＢを有するようにしたが、これに限定されるものではなく、情報端末４Ｃ自体が動画コンテンツＤＢをもつようにしてもよいし、上記第１および第２の実施の形態に示したように、情報管理装置２Ｃが動画コンテンツＤＢをもつようにしてもよい。いずれの場合でも、再生機器１０８はBD-Java（登録商標）プログラムにより、第１および第２の実施の形態に示した情報端末４の動画再生機器３と同様の機能を実現できる。
【０１５０】
（適用例２）
図２１は、情報端末の動画再生装置としてＰＣを用いた場合の情報コンテンツ視聴システムの構成例を表すものである。この情報端末４のＰＣ１１０には、この例では図８や図１８に示したソフトウェア構成を有するプログラムが記録されている。ＰＣ１１０にはサラウンドヘッドセット１１１が接続されており、サラウンド環境での音声再生が実現できるようになっている。この構成により、情報端末４Ｄは、第１および第２の実施の形態に示した情報端末４と同様の機能を実現できる。
【０１５１】
以上、いくつかの実施の形態および変形例、ならびにそれらの具体的な適用例を挙げて本発明を説明したが、本発明はこれらの実施の形態等には限定されず、種々の変形が可能である。
【０１５２】
例えば、上記の各実施の形態では、情報管理装置２と複数の情報端末４は、インターネット９を介して接続するものとしたが、これに限定されるものではなく、これに代えて、他の広域ネットワークを介して接続されていてもよい。
【０１５３】
また、例えば、上記の各実施の形態では、動画コンテンツを扱うものとしたが、これに限定されるものではなく、これに代えて、もしくはこれと共に、例えば音声コンテンツを扱うようにしてもよい。
【０１５４】
なお、上記の各実施の形態では、情報コンテンツ視聴システムは、情報管理装置および情報端末により構成されるものとしたが、これに限定されるものではない。
【符号の説明】
【０１５５】
１，１Ｂ，１Ｃ，１Ｄ…情報コンテンツ視聴システム、２，２Ｂ，２Ｃ…情報管理装置、３，３Ｂ，３Ｃ…動画再生装置、４，４Ｂ，４Ｃ，４Ｄ…情報端末、７Ａ，７Ｂ，８…ユーザ、９…インターネット、１０４、２１０…表示装置、１０５…サラウンド音声出力装置、１０６…音声入力装置、１０７…外部機器、１１０…音像定位情報画面、１１１…音量バー、１１２…音量表示円、１１３…再生開始ボタン、１２０…ユーザ一覧画面１２０、１１８，１１９，１２１…アイコン、１２２…スクロールバー、１３０…動画コンテンツ再生画面、１４０…ユーザ音声データ一覧画面、１４１…チェックボックス、１４２…削除ボタン、２０１、３０１…ネットワークコントローラ、２０２…主記憶装置、２０３…一時記憶装置、２０４、３１２…ＣＰＵ、２０５、３１１…ＲＯＭ、２０６、３０９…Ｉ／Ｆ部、２０７、３０６…ビデオ出力部、２０８、３０７…オーディオ出力部、２０９…入力装置、３０２…ストリームプロセッサ、３０３…オーディオプロセッサ、３０４…ビデオデコーダ、３０５…グラフィックエンジン、３０８…ＲＡＭ、３１０…記憶装置、３１３…ＧＰＳ受信機、４０１…システム状態管理アプリケーション、４０２…ネットワーク管理モジュール、４０３…ユーザ認証処理モジュール、４０４…動画コンテンツ一覧表示モジュール、４０５，５１３…サラウンド設定データ処理モジュール、４０６，５１４…音声処理モジュール、４０７…画面表示制御モジュール、４０８…データベース、４０９…動画・音声・ユーザデータ登録削除モジュール、４１０…オペレーティングシステム、４１１…ドライバ、ＤＡ…ユーザデータ、ＤＢ…動画コンテンツ、ＤＣ，ＤＣ２…ユーザ音声データ、ｒ…距離、θ…方向。
【特許請求の範囲】
【請求項１】
情報端末において情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を１または複数の情報端末から受信して収集する受信部と、
前記受信部が受信した音声情報を、１または複数の情報端末に配信する配信部と
を備えた情報管理装置。
【請求項２】
前記音声情報に所定の音声処理を施す音声処理部をさらに備え、
前記配信部は、前記音声処理が施された音声情報を配信する
請求項１に記載の情報管理装置。
【請求項３】
前記配信部は、前記音声情報をそのまま配信する
請求項１に記載の情報管理装置。
【請求項４】
前記音声処理はサラウンド音声生成処理を含むものである
請求項２に記載の情報管理装置。
【請求項５】
前記サラウンド音声生成処理は、前記視聴者の地理座標情報に基づいて行われる
請求項４に記載の情報管理装置。
【請求項６】
前記サラウンド音声生成処理は、前記音声発言における前記発言部分の数に基づいて行われる
請求項４に記載の情報管理装置。
【請求項７】
前記サラウンド音声生成処理は、前記音声発言の音量に基づいて行われる
請求項４に記載の情報管理装置。
【請求項８】
前記サラウンド音声生成処理の設定は、情報端末からの指示に基づいて修正される
請求項４に記載の情報管理装置。
【請求項９】
前記音声処理部は、前記サラウンド音声生成処理の施された複数の前記音声情報を１の音声情報に合成する音声合成部を含む
請求項４に記載の情報管理装置。
【請求項１０】
前記配信部は、さらに、前記情報コンテンツをも配信する
請求項１に記載の情報管理装置。
【請求項１１】
情報コンテンツを再生する再生部と、
前記再生部によって情報コンテンツを再生する際に視聴者がした音声発言と、前記音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を情報管理装置に送信する送信部と、
前記情報管理装置が収集した前記音声発言と前記再生期間内相対時刻とを含む前記音声情報を前記情報管理装置から受信する受信部と、
前記受信部が受信した前記音声情報に基づき、前記情報コンテンツに同期して視聴者の音声を再生するように前記再生部を制御する再生制御部と
を備えた情報端末。
【請求項１２】
前記受信部が受信する音声情報は、前記情報管理装置において所定の音声処理が施されたものである
請求項１１に記載の情報端末。
【請求項１３】
前記再生制御部は、前記受信部が受信した前記音声情報に対して所定の音声処理を施したうえで、その音声処理後の音声情報に基づき、前記情報コンテンツに同期して視聴者の音声を再生するように前記再生部を制御する
請求項１１に記載の情報端末。
【請求項１４】
前記音声処理はサラウンド音声生成処理を含むものである
請求項１３に記載の情報端末。
【請求項１５】
前記再生制御部は、前記情報コンテンツに同期して視聴者の音声をサラウンドシステムにより再生するように前記再生部を制御する
請求項１１に記載の情報端末。
【請求項１６】
前記再生部は、記録媒体に記録された前記情報コンテンツを再生する
請求項１１に記載の情報端末。
【請求項１７】
情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を収集し、それぞれに対して音声処理を施し、前記情報コンテンツに同期して再生する
情報コンテンツ視聴方法。
【請求項１】
情報端末において情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を１または複数の情報端末から受信して収集する受信部と、
前記受信部が受信した音声情報を、１または複数の情報端末に配信する配信部と
を備えた情報管理装置。
【請求項２】
前記音声情報に所定の音声処理を施す音声処理部をさらに備え、
前記配信部は、前記音声処理が施された音声情報を配信する
請求項１に記載の情報管理装置。
【請求項３】
前記配信部は、前記音声情報をそのまま配信する
請求項１に記載の情報管理装置。
【請求項４】
前記音声処理はサラウンド音声生成処理を含むものである
請求項２に記載の情報管理装置。
【請求項５】
前記サラウンド音声生成処理は、前記視聴者の地理座標情報に基づいて行われる
請求項４に記載の情報管理装置。
【請求項６】
前記サラウンド音声生成処理は、前記音声発言における前記発言部分の数に基づいて行われる
請求項４に記載の情報管理装置。
【請求項７】
前記サラウンド音声生成処理は、前記音声発言の音量に基づいて行われる
請求項４に記載の情報管理装置。
【請求項８】
前記サラウンド音声生成処理の設定は、情報端末からの指示に基づいて修正される
請求項４に記載の情報管理装置。
【請求項９】
前記音声処理部は、前記サラウンド音声生成処理の施された複数の前記音声情報を１の音声情報に合成する音声合成部を含む
請求項４に記載の情報管理装置。
【請求項１０】
前記配信部は、さらに、前記情報コンテンツをも配信する
請求項１に記載の情報管理装置。
【請求項１１】
情報コンテンツを再生する再生部と、
前記再生部によって情報コンテンツを再生する際に視聴者がした音声発言と、前記音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を情報管理装置に送信する送信部と、
前記情報管理装置が収集した前記音声発言と前記再生期間内相対時刻とを含む前記音声情報を前記情報管理装置から受信する受信部と、
前記受信部が受信した前記音声情報に基づき、前記情報コンテンツに同期して視聴者の音声を再生するように前記再生部を制御する再生制御部と
を備えた情報端末。
【請求項１２】
前記受信部が受信する音声情報は、前記情報管理装置において所定の音声処理が施されたものである
請求項１１に記載の情報端末。
【請求項１３】
前記再生制御部は、前記受信部が受信した前記音声情報に対して所定の音声処理を施したうえで、その音声処理後の音声情報に基づき、前記情報コンテンツに同期して視聴者の音声を再生するように前記再生部を制御する
請求項１１に記載の情報端末。
【請求項１４】
前記音声処理はサラウンド音声生成処理を含むものである
請求項１３に記載の情報端末。
【請求項１５】
前記再生制御部は、前記情報コンテンツに同期して視聴者の音声をサラウンドシステムにより再生するように前記再生部を制御する
請求項１１に記載の情報端末。
【請求項１６】
前記再生部は、記録媒体に記録された前記情報コンテンツを再生する
請求項１１に記載の情報端末。
【請求項１７】
情報コンテンツを再生する際に視聴者がした音声発言と、その音声発言における各発言部分に対応づけられた再生期間内相対時刻とを含む音声情報を収集し、それぞれに対して音声処理を施し、前記情報コンテンツに同期して再生する
情報コンテンツ視聴方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【公開番号】特開２０１１−１９３３７２（Ｐ２０１１−１９３３７２Ａ）
【公開日】平成２３年９月２９日（２０１１．９．２９）
【国際特許分類】
【出願番号】特願２０１０−５９５８４（Ｐ２０１０−５９５８４）
【出願日】平成２２年３月１６日（２０１０．３．１６）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２３年９月２９日（２０１１．９．２９）
【国際特許分類】
【出願日】平成２２年３月１６日（２０１０．３．１６）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]