カラオケシステム、中央装置及びコンテンツデータ生成方法
【課題】自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができるカラオケシステムを提供する。
【解決手段】カラオケ曲データを送信する中央装置と、カラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステムにおいて、カラオケ端末装置は、カラオケ曲データを再生している間に行われた歌唱の映像及び音声に係る映像データ及び音声データ、並びに歌唱に対する評価結果を中央装置へ送信し、中央装置は、映像データ及び音声データ並びに評価結果を受信して、各データを複数組、対応付けて記憶手段に記憶し、記憶手段が記憶しているものの中からユーザによって選択された複数組のデータを用いてメドレーリレーのコンテンツデータを生成し、動画データと、採点結果が最も高い音声データと、楽曲データとを並行的に再生して公開する。
【解決手段】カラオケ曲データを送信する中央装置と、カラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステムにおいて、カラオケ端末装置は、カラオケ曲データを再生している間に行われた歌唱の映像及び音声に係る映像データ及び音声データ、並びに歌唱に対する評価結果を中央装置へ送信し、中央装置は、映像データ及び音声データ並びに評価結果を受信して、各データを複数組、対応付けて記憶手段に記憶し、記憶手段が記憶しているものの中からユーザによって選択された複数組のデータを用いてメドレーリレーのコンテンツデータを生成し、動画データと、採点結果が最も高い音声データと、楽曲データとを並行的に再生して公開する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステム、中央装置及びコンテンツデータ生成方法に関する。
【背景技術】
【０００２】
カラオケ歌唱中にユーザを撮像及び集音して得た映像データ及び音声データを、カラオケ店舗に設置されたカラオケ端末装置から中央装置へアップロードし、歌唱に係る動画コンテンツとして動画閲覧サイトで閲覧可能に公開するようにしたカラオケシステムが実用化されている。
一方、特許文献１および特許文献２には、カラオケ利用者の歌唱に対する採点結果を記憶しておき、各カラオケ利用者が得意とする楽曲を用いてメドレー楽曲を作成するカラオケ装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２９８６９０号公報
【特許文献２】特開２０００−１４８１６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の動画閲覧サイトは、ユーザが歌唱している姿を単純に動画コンテンツとして閲覧可能に公開するのみであり、より高い娯楽性が求められていた。
【０００５】
本発明は斯かる事情に鑑みてなされたものであり、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができるカラオケシステム、中央装置及びコンテンツデータ生成方法を提供することを目的とする。
なお、特許文献１，２によれば、メドレーリレー楽曲を作成することができるが、動画閲覧サイトにおける娯楽性を向上させることはできない。
【課題を解決するための手段】
【０００６】
本発明に係るカラオケシステムは、カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステムにおいて、前記カラオケ端末装置は、前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の映像が入力される映像入力手段と、前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の音声が入力される音声入力手段と、前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データを前記中央装置へ送信する送信手段とを備え、前記中央装置は、前記カラオケ端末装置から送信された映像データ及び音声データ、並びに前記歌唱の音声を異なる複数の再生時点で評価した評価結果を受信する手段と、受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段とを備え、前記公開手段は、各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてあることを特徴とする。
【０００７】
本発明に係るカラオケシステムは、前記カラオケ端末装置は、前記音声入力手段にて入力された音声に係る音声データを異なる複数の再生時点で評価する評価手段を備え、前記送信手段は、前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データ、並びに前記評価手段による評価結果を前記中央装置へ送信するようにしてあることを特徴とする。
【０００８】
本発明に係るカラオケシステムは、前記公開手段は、各映像データに係る映像が並置され、各映像データに係る音声が選択的に再生するようにしてあることを特徴とする。
【０００９】
本発明に係るカラオケシステムは、前記公開手段は、前記再生時点毎に、評価結果が最も高い音声データを選択的に再生するようにしてあることを特徴とする。
【００１０】
本発明に係る中央装置は、カラオケ曲データを送信する中央装置において、前記端末装置から送信された歌唱に係る映像データ及び音声データ並びに評価結果を受信する手段と、受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段とを備え、前記公開手段は、各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてあることを特徴とする。
【００１１】
本発明に係るコンテンツデータ生成方法は、カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを用いて、歌唱に係るコンテンツデータを生成するコンテンツデータ生成方法において、前記カラオケ端末装置は、カラオケ曲データを再生している間に行われた歌唱の映像及び音声が入力され、入力された音声に係る音声データを異なる複数の再生時点で評価し、入力された映像及び音声に係る映像データ及び音声データ、並びに評価結果を前記中央装置へ送信し、前記中央装置は、前記カラオケ端末装置から送信された映像データ及び音声データ並びに評価結果を受信し、受信した音声データ、映像データ及び評価結果を複数組、対応付けて記憶し、複数組の映像データ及び音声データを選択し、選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成し、生成したコンテンツデータを、該コンテンツデータを構成する各音声データに対する評価結果に応じて、一の音声データが選択的に再生されるように、視聴可能に公開することを特徴とする。
【００１２】
本発明にあっては、カラオケ端末装置は、歌唱に係る映像データ及び音声データを中央装置へ送信する。
中央装置は、カラオケ端末装置から送信された映像データ及び音声データ、並びにカラオケ端末装置又は外部の通信装置から送信された評価結果を受信し、記憶手段が各データを対応付けて記憶する。なお、歌唱の評価は、歌唱を聴いたユーザが主観に基づいて行っても良いし、歌唱の音声データに基づいて、機械的に行っても良い。そして、選択手段は、記憶手段が記憶している複数組の映像データ及び音声データを選択し、生成手段は、選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する。そして、該コンテンツデータは、各音声データに対する評価結果に応じて、一の音声データが選択的に再生されるように視聴可能に公開される。
【００１３】
本発明にあっては、カラオケ端末装置は、入力された歌唱の音声に係る音声データを異なる複数の再生時点で評価し、歌唱に係る映像データ及び音声データ、並びに該歌唱に対する評価結果を中央装置へ送信する。そして、中央装置は、カラオケ端末装置から送信された映像データ及び音声データ、並びに評価結果を受信し、記憶手段が各データを対応付けて記憶する。以下の処理は、上述と同様である。従って、歌唱の評価が自動的に行われ、コンテンツデータは、その評価結果に応じて、一の音声データが選択的に再生されるように視聴可能に公開される。
【００１４】
本発明にあっては、２つ以上の歌唱に係る映像データが並置され、評価結果に応じて選択された一の音声データが再生される。
【００１５】
本発明にあっては、採点結果が最も高い一の音声データが選択され再生されるため、コンテンツデータの品質ないし娯楽性が向上する。
【発明の効果】
【００１６】
本発明にあっては、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施の形態１に係るカラオケシステムの一構成例を模式的に示す説明図である。
【図２】中央装置の一構成例を示すブロック図である。
【図３】ユーザ情報ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図４】楽曲ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図５】動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図６】混成動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図７】カラオケ端末装置の一構成例を示すブロック図である。
【図８】混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。
【図９】歌唱に係る動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図１０】歌唱に係る動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図１１】混成動画コンテンツの生成及び公開に係る制御部の処理手順を示すフローチャートである。
【図１２】実施の形態２におけるユーザ情報ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図１３】実施の形態２における動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図１４】実施の形態２における混成動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図１５】実施の形態２における混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。
【図１６】動画コンテンツをサムネイル表示したユーザ画面の一例を示した模式図である。
【図１７】動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面の一例を示した模式図である。
【図１８】公開設定、カラオケ配信設定された動画コンテンツをサムネイル表示したユーザ画面の一例を示した模式図である。
【図１９】動画コンテンツが公開された公開画面の一例を示した模式図である。
【図２０】混成動画素材登録された動画コンテンツのサムネイル画像を表示したユーザ画面の一例を示した模式図である。
【図２１】混成動画コンテンツをサムネイル表示したユーザ画面の一例を示した模式図である。
【図２２】混成動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面の一例を示した模式図である。
【図２３】公開設定された混成動画コンテンツをサムネイル表示した公開画面の一例を示した模式図である。
【図２４】混成動画コンテンツの拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２５】混成動画コンテンツの拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２６】部分拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２７】部分拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２８】動画コンテンツの公開設定、カラオケ配信設定に係る制御部の処理手順を示すフローチャートである。
【図２９】動画コンテンツの公開に係る制御部の処理手順を示すフローチャートである。
【図３０】混成動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図３１】混成動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図３２】混成動画コンテンツの公開設定に係る制御部の処理手順を示すフローチャートである。
【図３３】混成動画コンテンツの公開に係る制御部の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明をその実施の形態を示す図面に基づいて詳述する。
本発明に係るカラオケシステムは、カラオケ店舗で歌唱しているユーザの姿を撮像及び集音して得た動画データ及び音声データを含む動画コンテンツを利用して、動画閲覧サイトにおける新たな娯楽を提供するものであり、詳細には、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させるものである。
【００１９】
以下、本発明をその実施の形態を示す図面に基づいて詳述する。
（実施の形態１）
図１は、本発明の実施の形態１に係るカラオケシステムの一構成例を模式的に示す説明図である。本実施の形態１に係るカラオケシステムは、カラオケ情報の配信を行うと共に、本発明に係る混成動画コンテンツの生成、管理及び公開を行う中央装置１と、各カラオケ店舗２それぞれに設置されており、通信網Ｎ１を介して中央装置１に接続されたカラオケ端末装置４と、通信網Ｎ２を介して中央装置１に接続された一又は複数のユーザ端末装置６とを備える。
【００２０】
通信網Ｎ１は、中央装置１と、カラオケ端末装置４との間で、カラオケ情報、混成動画コンテンツに係る情報を送受信するための専用通信回線であり、光ファイバ通信網、ＡＤＳＬ回線、公衆電話回線等にハードディスク内蔵型のルータ３１を接続して構成されている。なお、通信回線の種類は、中央装置１と、カラオケ端末装置４との間で情報を送受信できれば、これらに限定されるものでは無く、非専用回線であっても良い。
【００２１】
ルータ３１は、主に各カラオケ店舗２に設置されており、ルータ３１に内蔵されたハードディスクは、中央装置１から配信されたカラオケ情報を記憶すると共に、混成動画コンテンツの素材となる動画データ及び音声データを一時記憶する。ルータ３１は、各店舗及び中央装置１間でカラオケ情報、並びに動画データ及び音声データを中継し、カラオケ情報を共有乃至バックアップする機能を有している。
【００２２】
カラオケ端末装置４は、カラオケ店舗２の各個室２１に通常１台設置され、有線ＬＡＮ（Local Area Network）ケーブル３２を介して、該カラオケ店舗２に設置されたルータ３１に接続されている。また、各個室２１には、カラオケ端末装置４を遠隔操作するための遠隔操作装置５が一又は複数台、備えられている。遠隔操作装置５は、カラオケシステムへのユーザログイン、カラオケ曲の選曲、混成動画コンテンツに係る操作に用いられる。
【００２３】
遠隔操作装置５は、ペンタッチセンサを有する液晶パネルを備えたボード型であり、赤外線通信にて、同一個室２１内のカラオケ店舗２が紐付けられる。なお、携帯電話機に専用のアプリケーションを実行させ、遠隔操作装置５として機能させても良い。また、カラオケ店舗２には、有線ＬＡＮケーブル３２に接続されたアクセスポイント３３が設置されており、各個室２１に備えられた遠隔操作装置５は、アクセスポイント３３を介して、各種操作に係る情報を、紐付けられた同一個室２１内のカラオケ端末装置４との間で送受信している。
なお、カラオケ端末装置４間を接続する通信線として、有線ＬＡＮケーブル３２を例示したが、無線ＬＡＮ、その他の有線又は無線通信にて相互接続するように構成しても良い。また、アクセスポイント３３を設置する例を説明したが、カラオケ端末装置４と、遠隔操作装置５との間で直接、操作信号を送受信するように構成しても良い。
【００２４】
ユーザ端末装置６は、中央装置１との間で情報の送受信が可能な通信機器、例えば、パーソナルコンピュータ６ａ、携帯電話端末６ｂ、ＰＤＡ（Personal Digital Assistant）６ｃ等であり、カラオケ店舗２を利用するユーザが中央装置１にアクセスし、混成動画コンテンツに係る動画閲覧サイトを利用するためのものである。
【００２５】
図２は、中央装置１の一構成例を示すブロック図である。中央装置１は、該中央装置１の各構成部の動作を制御する制御部１０、例えば、ＣＰＵ（Central Processing Unit）を備え、制御部１０には、バスを介してＲＯＭ（Read Only Memory）１１と、ＲＡＭ（Random Access Memory）１２と、内部記憶装置１３と、外部記憶装置１４と、第１通信部１５と、第２通信部１６と、時計部１７とが接続されている。
【００２６】
制御部１０は、ＲＡＭ１２及び内部記憶装置１３に記録されたコンピュータプログラムをＲＡＭ１２に読み出して実行することにより、本実施の形態１に係るコンテンツデータ生成方法を実施、即ち後述の混成動画コンテンツデータの生成及び公開に係る処理を実行する。また、制御部１０は、動画閲覧サイトをユーザ端末装置に表示させるウェブサーバに係る処理を実行する。
【００２７】
ＲＯＭ１１は、コンピュータの動作に必要な制御プログラムを記憶したマスクＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリである。
【００２８】
ＲＡＭ１２は、制御部１０の演算処理を実行する際に生ずる各種データを一時記憶するＤＲＡＭ、ＳＲＡＭ等の揮発性メモリである。
【００２９】
外部記憶装置１４は、コンピュータを本発明に係る中央装置として機能させるためのコンピュータプログラムをコンピュータ読み取り可能に記録したＤＶＤ（Digital Versatile Disc）−ＲＯＭ，ＢＤ（Blu-ray Disc），ＣＤ（Compact Disc）−ＲＯＭ等の記録媒体からコンピュータプログラム、その他の各種データを読み取る光ディスクドライブである。なお、光ディスクドライブは、外部記憶装置１４の一例であり、ハードディスク、フレキシブルディスクのような磁気ディスク、光磁気ディスク、半導体メモリ等からデータを読み書きする装置で外部記憶装置１４を構成しても良い。
【００３０】
内部記憶装置１３は、コンピュータを、カラオケ装置１として機能させるためのコンピュータプログラムを記憶するハードディスク、不揮発性半導体メモリ等である。
また、内部記憶装置１３は、カラオケシステムのユーザに関する情報を格納するユーザ情報ＤＢ（Data Base）１３ａ、楽曲データ（カラオケ曲データ）等を格納した楽曲ＤＢ１３ｂ、ユーザによって作成された歌唱の動画コンテンツデータ等を格納する動画ＤＢ１３ｃ、ユーザによって作成された歌唱の混成動画コンテンツデータ等を格納する混成動画ＤＢ１３ｄ等を記憶する。各種データベースの詳細は後述する。
更に、内部記憶装置１３は、動画投稿サイトのユーザ画面、公開画面等を作成するための画像部品を記憶している。
【００３１】
第１通信部１５は、通信網Ｎ１を介して接続されたカラオケ端末装置４との間で、カラオケ情報、並びに歌唱の動画データ及び音声データ、その他、各種サービスに係るデータを送受信するインタフェースであり、第１通信部１５による各種情報の送受信は制御部１０によって制御される。
【００３２】
第２通信部１６は、通信網Ｎ２を介して接続されたユーザ端末装置６との間で、混成動画コンテンツに係る動画データ及び音声データ、その他、各種サービスに係るデータを送受信するインタフェースであり、第２通信部１６による各種情報の送受信は制御部１０によって制御される。なお通信網Ｎ１，Ｎ２の物理層が共通している場合、第１及び第２通信部１５，１６を、同一ハードウェアで構成しても良い。
【００３３】
時計部１７は、日時を計時しており、制御部１０からの求めに応じて、計時結果を制御部１０に与える回路である。時計部１７によって、カラオケ店舗２で歌唱しているユーザの姿を撮像した日時、撮像して得た動画データの保存期間などが管理される。
【００３４】
なお、中央装置１を、１台のコンピュータを用いて実現する例を説明したが、複数のコンピュータを用いて分散処理させても良いことは、言うまでも無い。
【００３５】
図３は、ユーザ情報ＤＢ１３ａのレコードレイアウトの一例を概念的に示す説明図である。ユーザ情報ＤＢ１３ａの表（ファイル）は、複数の列（フィールド）、例えば「ユーザＩＤ」列、「パスワード」列、「あだ名」列、「ユーザ情報」列、「私の動画」列等から構成されており、各行（レコード）には、各列に対応した情報が格納されている。
「ユーザＩＤ」列は、本実施の形態１に係るカラオケシステムを利用する複数のユーザそれぞれを識別するユーザＩＤ、例えばユーザの電子メールアドレスを格納する。ユーザＩＤは、ユーザがカラオケシステムにログインして、混成動画に係る各種サービスを利用する際に必要となる情報である。
「パスワード」列は、カラオケシステムへのログインに必要なパスワード情報を格納している。パスワード情報は、複数の英数字文字列からなる。
「あだ名」列は、ユーザのあだ名を格納する。あだ名は、動画投稿サイトにおけるユーザの仮の名称であり、カラオケシステムのユーザが互いを識別するためのものである。また、各ユーザに対して公開された混成動画コンテンツの作者を表示するために利用される。
「ユーザ情報」は、ユーザの性別、出身地等の情報を格納する。
「私の動画」列は、後述するように、当該ユーザによって作成された動画コンテンツを特定するための動画ＩＤを格納する。
「私の混成動画」列は、当該ユーザによって作成された混成動画を特定するための混成動画ＩＤを格納する。
【００３６】
図４は、楽曲ＤＢ１３ｂのレコードレイアウトの一例を概念的に示す説明図である。楽曲ＤＢ１３ｂの表は、複数の列、例えば楽曲を識別するための楽曲ＩＤを格納する「楽曲ＩＤ」列、当該楽曲の曲名を格納する「曲名」列、当該楽曲の歌手名を格納する「歌手名」列、当該楽曲の伴奏データを含む楽曲データを格納する「楽曲データ」列等から構成されている。楽曲データは、例えば、伴奏データ（カラオケ曲データ）、歌詞データ、主旋律データを格納している。また、楽曲データには、カラオケ曲を特定の再生区分、例えば「前奏」、「メロディー部分Ａ」、「メロディー部分Ｂ」、「サビ」、「間奏」…というように、区分した場合における区切り目を示す再生区分データが含まれている。なお、楽曲データの構造は特に限定されず、伴奏データ、歌詞データ及び主旋律データを一の楽曲ファイルで構成しても良いし、別個のファイルで構成し、各ファイルを対応付けて管理するようにしても良い。
伴奏データは、例えば、ＭＩＤＩ（Musical Instrument Digital Interface）データであり、音のオンオフを指定するデータ、音高を指定する音高データ、音量を指定する音量データ（ベロシティ）、楽器の制御データ、音を出力する楽器を指定する音色データ、時系列順に再生される各音の時間間隔を指定する時間データ（デルタタイム）等で構成されている。
主旋律データは、伴奏に合わせて歌唱すべき音の旋律、つまり、主旋律を構成する音のオンオフを示すデータ、音高データ、音量データ、時系列順に再生される主旋律の各音の時間間隔を示した時間データ等で構成されている。
【００３７】
図５は、動画ＤＢ１３ｃのレコードレイアウトの一例を概念的に示す説明図である。動画ＤＢ１３ｃの表は、複数の列、例えば「動画ＩＤ」列、「歌唱者」列、「楽曲ＩＤ」列、「動画コンテンツ」列、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「コメント」列、「評価」列等から構成されており、各列に対応した情報が格納されている。
「動画ＩＤ」列は、動画コンテンツを識別するための動画ＩＤを格納する。
「歌唱者」列は、動画ＩＤに対応付けられた動画コンテンツを作成した歌唱者のユーザＩＤを格納する。
「楽曲ＩＤ」列は、動画ＩＤに対応付けられた動画コンテンツを作成する際に利用した楽曲を識別する楽曲ＩＤを格納する。
「動画コンテンツ」列は、カラオケ店舗２で歌唱しているユーザの姿を撮像して得た動画データと、歌唱音声を集音して得た音声データと、該音声データに係る歌唱に対する評価を示した採点結果と、歌唱を聴いたユーザによる主観的な評価（以下、ユーザ評価結果という）とを独立的に含む動画コンテンツデータを格納する。動画コンテンツデータは、例えばｆｌｖ形式のファイルである。ユーザ評価結果は、例えば、「うまい」，「渋い」，「かっこいい」，「そっくり」等の歌唱に対する評価を数値化したものである。なお、言うまでもなく、少なくとも組をなす動画データ、音声データ及び採点結果が紐付けられていれば十分であり、動画コンテンツデータを複数のファイル、例えば動画データのファイルと、音声データのファイルと、採点結果ファイルとで構成しても良い。また、動画コンテンツデータのファイル形式も特に限定されない。
「撮影日時」列は、動画コンテンツに係る動画を撮像した日時を格納する。
「再生回数」列は、動画コンテンツの動画投稿サイトにおける再生回数を格納する。
「公開可否」列は、動画コンテンツの動画投稿サイトにおける公開の可否を示したデータを格納する。
「保存期間」列は、動画コンテンツを中央装置１が記憶及び公開する期間を示したデータを格納する。
「コメント」列は、動画コンテンツに対するコメントを格納する。
「評価」列は、動画コンテンツに対する評価を格納する。該評価は、例えば、動画コンテンツに対する第三者のコメント文である。また前記評価は、「かわいい」、「かっこいい」、「そっくり」、「うまい」、「渋い」、「おもしろい」、「泣ける」等の項目に対する投票結果を含む。
【００３８】
図６は、混成動画ＤＢ１３ｄのレコードレイアウトの一例を概念的に示す説明図である。混成動画ＤＢ１３ｄの表は、複数の列、例えば「混成動画ＩＤ」列、「楽曲ＩＤ」列、「第１歌唱者」列、「第２歌唱者」列、…、「動画コンテンツ１」列、「動画コンテンツ２」列、…、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「コメント」列、「評価」列等から構成されており、各列に対応した情報が格納されている。
「混成動画ＩＤ」列は、複数の歌唱に係る動画コンテンツを組み合わせてなる混成動画コンテンツを識別するための混成動画ＩＤを格納する。
「楽曲ＩＤ」列は、混成動画コンテンツの作成に利用した楽曲を識別する楽曲ＩＤを格納する。
「第１歌唱者」列は、混成動画コンテンツを構成する第１の動画コンテンツを作成したユーザを識別するデータを格納する。
「第２歌唱者」列は、混成動画コンテンツを構成する第２の動画コンテンツを再生したユーザを識別するデータを格納する。ここでは、二つの動画コンテンツを組み合わせてなる混成動画コンテンツを主に説明するが、３つ以上の「歌唱者」列を設け、３つ以上の動画コンテンツからなる混成動画コンテンツを作成できるようにすることもできる。
「動画コンテンツ１」列は、混成動画コンテンツを構成するための一の動画コンテンツデータを格納する。
「動画コンテンツ２」列は、混成動画コンテンツを構成するための他の動画コンテンツデータを格納する。
「撮影日時」列は、混成動画コンテンツの主となる動画コンテンツ、例えば最も新しく作成された動画コンテンツに係る動画を撮像した日時を示すデータを格納する。
「再生回数」列は、前記一の動画コンテンツ及び他のコンテンツを組み合わせてなる混成動画コンテンツデータの動画投稿サイトにおける再生回数を格納する。
「公開可否」列は、混成動画コンテンツの動画投稿サイトにおける公開の可否を示したデータを格納する。
「保存期間」列は、混成動画コンテンツを中央装置１が記憶及び公開する期間を示したデータを格納する。
「コメント」列は、混成動画コンテンツに対するコメントを格納する。
「評価」列は、混成動画コンテンツに対する評価を格納する。
【００３９】
図７は、カラオケ端末装置４の一構成例を示すブロック図である。カラオケ端末装置４は、該カラオケ端末装置４の各構成部の動作を制御する制御部４０を備え、制御部４０には、バスを介してＲＯＭ４１と、ＲＡＭ４２と、記憶装置４３と、通信部４４と、受信部４５と、映像エンコーダ４６ａと、映像制御回路４６ｂと、映像デコーダ４６ｃと、採点部４７と、音声エンコーダ４８ａと、音源４８ｂと、音声デコーダ４８ｃとが接続されている。また、映像制御回路４６ｂ、及び映像デコーダ４６ｃには、映像ミキサ４６ｄが接続され、音源４８ｂ、及び音声デコーダ４８ｃには、音声ミキサ４８ｄが接続されている。更に、カラオケ端末装置４は、図示しない映像入力端子、映像出力端子、音声入力端子、音声出力端子を備えており、各端子にはそれぞれ、撮像装置４６ｅ、映像表示装置４６ｆ、マイク４８ｅ、及びスピーカ４８ｆが接続されている。なお、映像表示装置４６ｆは、例えばＣＲＴ（Cathode-ray Tube）、液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイ等である。
【００４０】
制御部４０は、ＲＯＭ４１及び記憶装置４３に記録されたコンピュータプログラムをＲＡＭ４２に読み出して実行することにより、本発明に係る後述の混成動画コンテンツデータの生成、管理及び公開に係る処理を実行し、コンピュータをカラオケ端末装置４として機能させる。
【００４１】
ＲＯＭ４１は、コンピュータの動作に必要な制御プログラムを記憶したマスクＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリである。
【００４２】
ＲＡＭ４２は、制御部４０の演算処理を実行する際に生ずる各種データを一時記憶するＤＲＡＭ、ＳＲＡＭ等の揮発性メモリである。
【００４３】
記憶装置４３は、コンピュータを、カラオケ端末装置４として機能させるためのコンピュータプログラムを記憶するハードディスク、不揮発性半導体メモリ等である。また、記憶装置４３は、カラオケ端末用楽曲ＤＢ４３ａを記憶する。カラオケ端末用楽曲ＤＢ４３ａは、中央装置１から配信された楽曲データ等を格納しており、基本的な構成は楽曲ＤＢ１３ｂと同様である。
【００４４】
通信部４４は、通信網Ｎ１を介して接続されたカラオケ端末装置４との間で、カラオケ情報、混成動画コンテンツに係る情報、その他、各種サービスに係るデータを送受信するインタフェースであり、通信部４４による各種情報の送受信は制御部４０によって制御される。
【００４５】
受信部４５は、本カラオケ端末装置４と、遠隔操作装置５との紐付けを行うべく、遠隔操作装置５との間で赤外線通信を行う回路である。
【００４６】
映像エンコーダ４６ａは、撮像装置４６ｅから出力され、映像入力端子を通じて入力された映像データを圧縮符号化する回路であり、圧縮符号化された映像データは、一時的にＲＡＭ４２又は記憶装置４３に書き込まれる。なお、圧縮符号化の形式は、例えばＭＰＥＧ（Moving Picture Experts Group）であるが、特にこれに限定されない。
【００４７】
映像制御回路４６ｂは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から映像に係る情報を読み出して、各種映像を表現した映像データを生成し、映像ミキサ４６ｄに与える等、映像に関する各種制御処理を実行する。例えば、カラオケの楽曲データ再生時においては、映像制御回路４６ｂは、制御部４０から与えられた楽曲データに含まれる歌詞データに基づいて、歌詞を表現した映像データを映像ミキサ４６ｄに与える。また、映像制御回路４６ｂは、カラオケ娯楽に関するメニュー画面、採点結果表示画面等を表現した映像データ等を映像ミキサ４６ｄに与える。
【００４８】
映像デコーダ４６ｃは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から映像データ、例えば、カラオケ歌唱時に表示される所定の背景映像データを読み出して復号し、復号された映像データを映像ミキサ４６ｄに与える。背景映像データは、例えばＭＰＥＧ形式のデータである。
【００４９】
映像ミキサ４６ｄは、映像制御回路４６ｂと、映像デコーダ４６ｃと、撮像装置４６ｅとから与えられた映像の全部又はいずれか２つを合成し、合成して得た映像データを映像表示装置４６ｆへ出力する。映像表示装置４６ｆは、映像ミキサ４６ｄから出力された映像データに係る映像を表示する。
【００５０】
採点部４７は、マイク４８ｅから出力され音声入力端子を通じて入力された音声データを取得し、また、記憶装置４３から楽曲データを読み出し、前記音声データ及び楽曲データに含まれる主旋律データに基づいて、歌唱の音声及び主旋律における音高、音量、リズム等を比較することによって、歌唱を時系列順に逐次リアルタイムで採点し、採点結果をＲＡＭ４２に書き込む。
【００５１】
音声エンコーダ４８ａは、マイク４８ｅから出力され音声入力端子を通じて入力された音声データを取得し、取得した音声データを圧縮符号化する。なお、圧縮符号化の形式は、例えばＭＰ３、ＡＡＣ（Advanced Audio Coding）、ＡＣ３（Audio Code number 3）等であるが、特にこれに限定されない。
【００５２】
音源４８ｂは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から読み出した楽曲データに含まれる伴奏データ、例えばＭＩＤＩデータに基づいて楽器音を再現した音声データを作成するＭＩＤＩ音源であり、作成された音声データは、音声ミキサ４８ｄに与えられる。
【００５３】
音声デコーダ４８ｃは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から読み出した音声データを、復号し、復号して得た音声データを音声ミキサ４８ｄに与える。
【００５４】
音声ミキサ４８ｄは、音源４８ｂと、音声デコーダ４８ｃとから与えられた音声データに係る音声を合成し、合成して得た音声データを、音声出力端子を通じてスピーカ４８ｆへ出力する。スピーカ４８ｆは、音声ミキサ４８ｄから出力された音声データに係る音声を放音する。
【００５５】
なお、カラオケ端末装置４を専用機として構成する例を説明したが、汎用のコンピュータ、家庭用テレビゲームのコンピュータを用いてカラオケ端末装置４を構成しても良い。この場合、カラオケ端末装置４を構成するハードウェア回路の一部、例えば、採点部４７等をソフトウェア的に処理しても良い。
【００５６】
次に、混成動画コンテンツの生成及び公開の全体的な流れを説明し、次いで、中央装置１及びカラオケ端末装置４の制御部１０、４０の具体的な処理手順を説明する。
【００５７】
図８は、混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。なお、混成動画に係るサービスを利用するユーザは、該サービスを利用する前に、予めカラオケシステムにアクセスし、ユーザ登録を行う必要がある。通信網Ｎ２を介してユーザ端末装置６又は遠隔操作装置５からユーザ登録の要求があった場合、中央装置１の制御部１０は、ユーザ登録画面をユーザ端末装置６又は遠隔操作装置５に表示させ、ログインＩＤに相当する電子メールアドレス、パスワード、あだ名、性別、出身地等を受け付け、受け付けた各種情報を、上述のようにユーザ情報ＤＢ１３ａに登録する。以下、特に断りがない限り、ユーザは、カラオケシステムにログインして各種操作を行っているものとする。
【００５８】
＜１．歌唱・撮像・集音・採点＞
まず、一のユーザは、カラオケ店舗２の個室２１に設置されたカラオケ端末装置４の遠隔操作装置５を用いてカラオケシステムにログインし、所望のカラオケ曲を選曲する。カラオケ端末装置４は、選曲された楽曲データを再生し、該楽曲データが再生されている間に行われたユーザの歌唱をマイク４８ｅで集音すると共に、ユーザが歌唱している姿を撮像装置４６ｅにて撮像する。また、カラオケ端末装置４は、集音して得た音声データと、楽曲データに含まれる主旋律データとに基づいて、ユーザの歌唱を採点する。
【００５９】
＜２．投稿＞
歌唱終了後、ユーザは、撮像及び集音して得た歌唱に係る動画データ及び音声データを中央装置１へ投稿、即ちアップロードするか否かを選択する。カラオケ端末装置４は、アップロードを指示された場合、歌唱に係る動画データ、音声データ、採点結果をログインしているユーザのユーザＩＤ及び楽曲ＩＤと共に中央装置１へ送信する。中央装置１は、カラオケ端末装置４から送信されたユーザＩＤ、楽曲ＩＤ、動画データ、音声データ及び採点結果を受信し、受信した動画データ、音声データ及び採点結果を独立的に含む動画コンテンツデータを生成し、ユーザＩＤ及び楽曲ＩＤと対応付けて動画ＤＢ１３ｃに登録する。なお動画コンテンツデータを生成するとは、動画データ、音声データ及び採点結果を含んだ新たなデータを作成する処理のみならず、動画データ、音声データ及び採点結果を紐付ける処理も含む。また、該動画コンテンツデータに固有の動画ＩＤ、受信したユーザＩＤ等を、対応付けてユーザ情報ＤＢ１３ａに登録する。
【００６０】
＜３．動画の公開・カラオケ配信設定＞
次いで、カラオケを終えた前記一のユーザは、ユーザ端末装置６又は遠隔操作装置５を用いてカラオケシステムの動画投稿サイトにログインする。以下、動画投稿サイトへのログインは、ユーザ端末装置６を用いて行うものとして説明する。ログインに成功すると、ユーザ端末装置６の表示部にユーザ専用のユーザ画面が表示される。また、所定の操作を行うことによって、公開画面へ遷移した場合、ユーザ端末装置６の表示部には、中央装置１へアップロードされて生成された動画コンテンツのサムネイル一覧が表示される。なお、動画投稿サイトへのログインは、カラオケ店舗２外においてユーザ端末装置６を用いて行うのが通常であるが、カラオケ店舗２内で遠隔操作装置５を用いてログインしても良い。
【００６１】
ユーザは、公開画面で構成されている動画コンテンツの中から、混成動画コンテンツの素材とする動画コンテンツを複数選択し、混成動画コンテンツの作成を指示する。中央装置１は、ユーザによって選択された複数の動画コンテンツに基づいて、混成動画コンテンツを生成し、公開する。
【００６２】
中央装置１は、混成動画コンテンツの再生を指示された場合、混成動画コンテンツを構成する複数の動画コンテンツに係る動画を横方向に並置して並行的に再生する。例えば、図８に示すように３つの動画を横方向に並置して再生する。
また、中央装置２は、特定の採点区分、例えば「メロディー部分Ａ」、「メロディー部分Ｂ」、「サビ」の区切り目毎に、各動画コンテンツに含まれる採点結果を比較する。そして、最も採点結果が高い動画コンテンツに含まれる音声データと、楽曲データとを並行的に再生する。つまり、カラオケ曲の再生区分毎に採点結果が高かった音声データが順次再生される。図８に示した例では、「メロディー部分Ａ」において第１歌唱者の音声データが再生され、「メロディー部分Ｂ」において第３歌唱者の音声データが再生され、「サビ」において第２歌唱者の音声データが順次再生される。従って、得意なパートを各歌唱者が担当してメドレーリレー歌唱したような完成度が高い混成動画コンテンツが再生される。
【００６３】
次に、混成動画コンテンツの生成及び公開に係る制御部１０、４０の処理手順を説明する。以下の処理ではユーザがカラオケシステムにログインしている状態を前提として処理内容の要部を説明する。
【００６４】
図９及び図１０は、歌唱に係る動画コンテンツの生成及び登録に係る制御部１０、４０の処理手順を示すフローチャートである。ユーザはカラオケ店舗２で歌唱したい楽曲を、遠隔操作装置５を用いて選択することができ、カラオケ端末装置４の制御部４０は、遠隔操作装置５にて楽曲を受け付け（ステップＳ１１）、受け付けた楽曲に係る楽曲ＩＤを含む楽曲要求データを、通信部４４を介して中央装置１へ送信する（ステップＳ１２）。なお、制御部４０は、ステップＳ１１で受け付けた楽曲ＩＤを一時記憶している。
なお、以前に中央装置１からカラオケ端末装置４へ配信され、既にカラオケ端末用楽曲ＤＢ４３ａに登録されている場合、中央装置へ楽曲要求データを送信せず、記憶装置４３から楽曲データを読み出せば良い。また、ルータ３１のハードディスクが記憶している場合も同様である。
【００６５】
中央装置１の制御部１０は、カラオケ端末装置４から送信された楽曲要求データを、第１通信部１５を介して受信し（ステップＳ１３）、受信した楽曲データに含まれる楽曲ＩＤに対応する楽曲データを内部記憶装置１３の楽曲ＤＢ１３ｂから読み出し、読み出した楽曲データを、第２通信部１６を介して、楽曲要求元のカラオケ端末装置４へ送信する（ステップＳ１４）。
【００６６】
カラオケ端末装置４の制御部４０は、中央装置１から送信された楽曲データを、通信部４４を介して受信し（ステップＳ１５）、受信した楽曲データを再生する（ステップＳ１６）。次いで、制御部４０は、楽曲データを再生している間に行われた歌唱の動画を入力し（ステップＳ１７）、あわせて歌唱の音声データを入力する（ステップＳ１８）。
なお、撮像装置４６ｅから出力され、カラオケ端末装置４に入力した動画データは、映像エンコーダ４６ａにて圧縮符号化され、ＲＡＭ４２に書き込まれる。また、動画データは、映像ミキサ４６ｄに入力される。映像ミキサ４６ｄは、映像制御回路４６ｂから与えられた歌詞の文字画像を、該動画データに係る動画上に歌詞を重畳し、歌詞が重畳された動画に係る動画データは、映像表示装置４６ｆへ出力される。従って、映像表示装置４６ｆには、ユーザ自身の歌唱している姿が表示される。このため、ユーザは、撮像されている動画の内容を確認しながら歌唱することができる。
また、マイク４８ｅから出力され、カラオケ端末装置４に入力した音声データは、音声エンコーダ４８ａにて圧縮符号化され、ＲＡＭ４２に書き込まれる。また、音声データは、音声ミキサ４８ｄに入力される。音声ミキサ４８ｄは、マイク４８ｅから入力された音声データに係る音声と、音源から与えられた楽曲の音とを合成し、合成して得た音声データをマイク４８ｅへ出力する。
【００６７】
次いで、制御部４０は、入力された音声データを採点部４７に与えて、該音声データに係る歌唱に対する逐次採点を行う（ステップＳ１９）。
【００６８】
次いで、制御部４０は、遠隔操作装置５にてユーザ評価結果を受け付ける（ステップＳ２０）。つまり、ユーザはカラオケ店舗２で他のユーザの歌唱を聴き、該歌唱に対する評価を主観的に行い、ユーザ評価結果を遠隔操作装置５にて入力することができ、制御部４０は、遠隔操作装置５にて、入力されたユーザ評価結果を取得する。ユーザ評価結果の入力方法は、例えば、「うまい」、「渋い」、「かっこいい」等の項目を遠隔操作装置５のディスプレイに表示し、各項目に対して点数を入力できるように構成すれば良い。また点数に代えて、点数に対応する評価を表現した文字、例えば「すごくうまい」、「ややうまい」、「普通」、「やや下手」、「下手」等を表示し、いずれかの評価を選択できるように構成しても良い。また、言うまでも無く、ユーザ評価結果は、一人のユーザによる評価であっても、複数人のユーザによる評価であっても良い。
【００６９】
次いで、制御部４０は、楽曲データの再生を終了する否かを判定する（ステップＳ２１）。なお、再生の終了は、楽曲データを最後まで再生し終えた場合、遠隔操作装置５にて再生の中止を指示された場合等に行われる。再生を終了しないと判定した場合（ステップＳ２１：ＮＯ）、制御部４０は、処理をステップＳ１６へ戻す。再生を終了すると判定した場合（ステップＳ２１：ＹＥＳ）、制御部４０は、遠隔操作装置５の操作状態を監視し、入力された動画及び映像の動画データ及び音声データをアップロードするか否かを判定する（ステップＳ２２）。アップロードしないと判定した場合（ステップＳ２２：ＮＯ）、制御部４０は処理を終える。
【００７０】
アップロードすると判定した場合（ステップＳ２２：ＹＥＳ）、制御部４０は、ＲＡＭ４２が一時記憶しているユーザＩＤ、楽曲ＩＤ、動画データ、音声データ、採点結果及びユーザ評価結果を、通信部４４を介して中央装置１へ送信する（ステップＳ２３）。なお、ＲＡＭ４２が一時記憶しているユーザＩＤは、ユーザがカラオケシステムにログインした際に入力されたものである。
【００７１】
中央装置１の制御部１０は、カラオケ端末装置４から送信されたユーザＩＤ、楽曲ＩＤ、動画データ、音声データ、採点結果及びユーザ評価結果を、第１通信部１５を介して受信する（ステップＳ２４）。そして、制御部１０は、受信した動画データ、音声データ、採点結果及びユーザ評価結果を独立的に含む動画コンテンツデータを生成し、生成された動画コンテンツデータを、受信したユーザＩＤ、楽曲ＩＤ等と共に動画ＤＢ１３ｃに登録し、また動画ＤＢ１３ｃへの登録時に発行した動画ＩＤをユーザ情報ＤＢ１３ａに登録し（ステップＳ２５）、処理を終える。
【００７２】
図１１は、混成動画コンテンツの生成及び公開に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、公開画面をユーザ端末装置６の表示部に表示させる（ステップＳ３１）。そして、制御部１０は、ユーザからアップロードされた動画のサムネイル画像及び該動画の情報を一覧公開する。
【００７３】
次いで、制御部１０は、公開されている動画コンテンツの中から、混成動画コンテンツを構成するための複数の動画コンテンツを選択する（ステップＳ３３）。ユーザは、ユーザ端末装置６を用いて、混成動画コンテンツの素材として所望する複数の動画コンテンツを指定することができ、ユーザ端末装置６は、指定された動画コンテンツを示す混成素材指定情報を中央装置１へ送信する。制御部１０は、第２通信部１６を介して、混成素材指定情報を受信し、該混成素材指定情報に基づいて、動画コンテンツの選択を行う。
【００７４】
そして、制御部１０は、選択された複数の動画コンテンツをそれぞれ構成する動画データ及び音声データ、並びに採点結果及びユーザ評価結果を含む混成動画コンテンツデータを生成し、生成された混成動画コンテンツデータを、混成動画ＤＢ１３ｄに登録し、また混成動画ＤＢ１３ｄへの登録時に発行した混成動画ＩＤをユーザ情報ＤＢ１３ａに登録する（ステップＳ３４）。
【００７５】
次いで、制御部１０は、混成動画コンテンツのサムネイル画像、及び該動画の情報を一覧表示公開する（ステップＳ３５）。
【００７６】
そして、制御部１０は、混成動画コンテンツの再生指示があったか否かを判定する（ステップＳ３６）。ユーザは、ユーザ端末装置６を用いて、混成動画コンテンツの再生を指示することができる。例えば、サムネイル画像をクリックすることによって、再生を指示する。ユーザ端末装置６は、特定の混成動画コンテンツの再生を指示する情報を中央装置１へ送信する。制御部１０は、第２通信部１６を介して、該情報を受信し、再生指示があったか否かを判定する。なお、ここで選択可能な動画コンテンツは、同一の楽曲データに対応付けられた動画コンテンツのみである。
【００７７】
再生操作が無いと判定した場合（ステップＳ３６：ＮＯ）、制御部１０は、処理を終える。再生操作があると判定した場合（ステップＳ３６：ＹＥＳ）、制御部１０は、再生が指示された混成動画コンテンツを構成する複数の動画データをユーザ端末装置６へ送信し、該ユーザ端末装置６に混成動画コンテンツに含まれる２組の動画データを並行的に再生させる（ステップＳ３７）。
【００７８】
また、制御部１０は、特定の再生区分毎に、混成動画コンテンツを構成する複数の動画コンテンツに対する採点結果及びユーザ評価結果を比較し、採点結果及びユーザ評価結果の総合評価結果が最も高い動画コンテンツデータを構成する音声データと、楽曲データとをユーザ端末装置６へ送信し、動画データと共に、音声データ及び楽曲データを並行的に再生させる（ステップＳ３８）。なお、総合評価は、例えば採点結果及びユーザ評価結果の総和、最大値、平均値等であるが、特に算出方法は限定されない。また、楽曲データが記憶するデータに基づいて、再生区分を判定する例を説明したが、歌唱の無音期間など、他の方法で再生区分を決定しても良い。更に、動画コンテンツデータを構成する全ての音声データ及び楽曲データをユーザ端末装置６へ送信し、次いで、総合評価結果が最も高い音声データを指定する情報をユーザ端末装置６へ送信し、ユーザ端末装置６側で、音声出力する音声データを選択しても良い。
【００７９】
このように構成された実施の形態１に係るカラオケシステム、中央装置１及びコンテンツ生成方法にあっては、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーの混成動画コンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができる。
【００８０】
また、音声データ及び主旋律データを比較して得た採点結果と、歌唱を聴いたユーザによる主観的な採点結果とを総合して歌唱の評価を行い、総合的な評価結果が高い音声データを順次再生する構成であるため、より完成度が高い混成動画コンテンツを生成することができる。
【００８１】
なお、図１０に示したフローチャートでは、ユーザ評価結果を、カラオケ端末装置４が遠隔操作装置５にて受け付ける例を説明したが、ユーザが所有する携帯電話機、その他の通信機器を通じて、受け付けるように構成しても良い。
また、カラオケ端末装置４がユーザ評価結果を受け付け、中央装置１へ送信する例を説明したが、ユーザが所有する通信機器などを通じて、ユーザ評価結果を直接中央装置１へ送信するように構成しても良い。
更に、実施の形態１では、カラオケ端末装置４による採点結果と、ユーザ評価結果とを用いて、音声データを選択的に再生しているが、採点結果のみ、又はユーザ評価結果のみに基づいて、音声データを選択的に再生するように構成しても良い。後述の実施の形態では、採点結果のみを用いる例を説明する。
【００８２】
（実施の形態２）
実施の形態２に係るカラオケシステムは、主に混成動画コンテンツを構成する動画コンテンツの選択方法の詳細、ユーザ情報ＤＢ１３ａ、動画ＤＢ１３ｃ、混成動画ＤＢ１３ｄの構成、制御部１０，４０の処理手順が異なるため、以下では主に上記相異点について説明する。
【００８３】
図１２は、実施の形態２におけるユーザ情報ＤＢ１３ａのレコードレイアウトの一例を概念的に示す説明図である。ユーザ情報ＤＢ１３ａの表は、複数の列、例えば「ユーザＩＤ」列、「パスワード」列、「あだ名」列、「ユーザ情報」列、「私の動画」列、「私の混成動画素材」列等から構成されており、各行（レコード）には、各列に対応した情報が格納されている。特に、「私の混成動画素材」列は、当該ユーザが混成動画コンテンツを作成するための素材として登録した動画コンテンツを特定するための動画ＩＤを格納する。
【００８４】
図１３は、実施の形態２における動画ＤＢ１３ｃのレコードレイアウトの一例を概念的に示す説明図である。動画ＤＢ１３ｃの表は、複数の列、例えば「動画ＩＤ」列、「歌唱者」列、「楽曲ＩＤ」列、「動画コンテンツ」列、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「カラオケ配信」列、「コメント」列、「パートナー募集」列、「評価」列等から構成されており、各列に対応した情報が格納されている。特に、「カラオケ配信」列は、動画コンテンツを、混成動画コンテンツ素材としてカラオケ端末装置４へ配信することの可否を示したデータを格納する。また、「パートナー募集」列は、動画コンテンツを用いた混成動画コンテンツの生成を促すべく、動画投稿サイトにおける後述の「パートナー募集」欄に動画コンテンツを掲載するか否かを示したデータを格納する。
【００８５】
図１４は、実施の形態２における混成動画ＤＢ１３ｄのレコードレイアウトの一例を概念的に示す説明図である。混成動画ＤＢ１３ｄの表は、複数の列、例えば「混成動画ＩＤ」列、「歌唱者」列、「パートナー」列、「楽曲ＩＤ」列、「混成動画コンテンツ」列、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「コメント」列、「評価」列等から構成されており、各列に対応した情報が格納されている。特に、「混成動画コンテンツ」列は、２組の動画コンテンツデータを格納する。つまり、２組の動画コンテンツデータそれぞれを構成する動画データ、音声データ及び採点結果を格納する。
【００８６】
まず、混成動画コンテンツの生成及び公開の全体的な流れを説明し、次いで、中央装置１及びカラオケ端末装置４の制御部１０、４０の具体的な処理手順を説明する。
【００８７】
図１５は、実施の形態２における混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。以下、特に断りがない限り、ユーザは、カラオケシステムにログインして各種操作を行っているものとする。歌唱・撮像・集音及び投稿の処理は、実施の形態１と同様であるため、詳細な説明を省略し、動画の公開以降の説明を行う。
【００８８】
＜３．動画の公開・カラオケ配信設定＞
次いで、カラオケを終えた前記一のユーザは、ユーザ端末装置６又は遠隔操作装置５を用いてカラオケシステムの動画投稿サイトにログインする。以下、動画投稿サイトへのログインは、ユーザ端末装置６を用いて行うものとして説明する。ログインに成功すると、ユーザ端末装置６の表示部にユーザ専用のユーザ画面が表示される。なお、動画投稿サイトへのログインは、カラオケ店舗２外においてユーザ端末装置６を用いて行うのが通常であるが、カラオケ店舗２内で遠隔操作装置５を用いてログインしても良い。
【００８９】
図１６は、動画コンテンツをサムネイル表示したユーザ画面７の一例を示した模式図である。ユーザ画面７は、画面左側に表示されたユーザ情報表示部７１を含んで構成される。ユーザ情報表示部７１には、ログインした一のユーザのあだ名、例えば「○○さん」、該ユーザのプロフィール画像、カラオケ採点結果の全国順位、採点結果の最高得点などの情報が表示される。また、ユーザ情報表示部７１の上側には、「公開画面へ」ボタン７０が配されている。「公開画面へ」ボタン７０は、各ユーザによってアップロード乃至生成された動画コンテンツ、混成動画コンテンツが公開されている公開画面８へ遷移するためのボタンである。更に、ユーザ情報表示部７１の右側上部には、ユーザ画面７における表示内容を切り換えるためのハイパーリンク文字列７２が配されている。具体的には、ログインしているユーザ自身がアップロードした動画コンテンツをサムネイル表示した画面へ遷移させるハイパーリンク文字列「私の動画」、ログインユーザ自身が作成した混成動画コンテンツをサムネイル表示した画面へ遷移させるハイパーリンク文字列「私の混成動画」、混成動画コンテンツを作成するための素材として登録した動画コンテンツをサムネイル表示した画面へ遷移させるハイパーリンク文字列「私の混成動画素材」が横一列に表示されている。なお、図１６においては、ハイパーリンク文字列「私の動画」が選択された状態にある。更に、前記ハイパーリンク文字列の下方には、動画コンテンツ表示部７３が配されている。動画コンテンツ表示部７３は、ユーザ自身がアップロードした動画コンテンツの内容を示したサムネイル画像７３ａ、該動画コンテンツに係る歌唱を行った際に用いた楽曲の曲名及び歌手名７３ｂ、動画コンテンツに関する各種設定を行うための「設定」ボタン７３ｃ、動画コンテンツを削除するための「削除」ボタン７３ｄ、設定内容表示部７３ｅなどを含んで構成される。設定内容表示部７３ｅには、動画コンテンツの公開の可否、混成動画素材として動画コンテンツをカラオケ端末装置４へ配信することの可否等が表示される。
【００９０】
ここで、ユーザが「設定」ボタン７３ｃを操作した場合、ユーザ端末装置６の表示部に、動画コンテンツに係る各種設定を行うための設定画面が表示される。
【００９１】
図１７は、動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面７の一例を示した模式図である。設定画面は、ユーザ情報表示部７１と共に、各種設定を行う対象である動画コンテンツの内容を示した動画コンテンツ情報表示部７４、設定内容入力部７５を含んで構成される。設定内容入力部７５は、動画コンテンツの公開の可否を選択するためのラジオボタン７５ａ、動画コンテンツの保存期間を設定するためのラジオボタン７５ｂ、カラオケ配信の可否を選択するためのラジオボタン７５ｃ、動画コンテンツに対する自身のコメントを入力するテキスト入力フィールド７５ｄ、動画コンテンツが混成動画コンテンツの素材として利用されることを促すべく、後述の「パートナー募集」欄に、該動画コンテンツを掲載するか否かを選択するラジオボタン７５ｅ等を含み、構成されている。
【００９２】
ユーザは、設定内容入力部７５に、各種設定内容を入力する。ユーザ端末装置６は、動画コンテンツに対する各種設定内容を示したデータを中央装置１へ送信する。中央装置１は、ユーザ端末装置６から送信されたデータを受信し、各種設定内容を動画ＤＢ１３ｃの「公開可否」列、「カラオケ配信」列等に登録する。
【００９３】
図１８は、公開設定、カラオケ配信設定された動画コンテンツをサムネイル表示したユーザ画面７の一例を示した模式図である。特に、カラオケ配信を可に設定した場合、動画コンテンツ表示部７３に表示されたサムネイル画像７３ａ上に、混成素材登録アイコン７３ｆが表示される。混成素材登録アイコン７３ｆは、動画コンテンツを混成動画コンテンツの素材として選択するためのボタンである。
【００９４】
＜４．混成素材登録＞
ここで、図１５に示すように、あだ名が「××さん」である他のユーザが、ユーザ端末装置６を用いてカラオケシステムの動画投稿サイトへログインし、「公開画面へ」ボタン７０を操作した場合、中央装置１は、カラオケ端末装置４の表示部に公開画面８を表示させる。
【００９５】
図１９は、動画コンテンツが公開された公開画面８の一例を示した模式図である。公開画面８は、「ユーザ画面へ」ボタン８０、「パートナー募集」欄８１、「おすすめ動画」欄８２、「おすすめ混成動画」欄８３、動画再生画面８４を含み、構成されている。「ユーザ画面へ」ボタン８０は、ユーザ画面７へ遷移するためのボタンである。
「パートナー募集」欄８１は、動画コンテンツについて、「パートナー募集」欄へ掲載する旨の設定が行われている動画コンテンツのサムネイル画像８１ａが表示される。該サムネイル画像８１ａ上、例えばサムネイル画像８１ａの左下隅には、混成素材登録アイコン８１ｂが表示されている。また、サムネイル画像８１ａの右側には、動画コンテンツに係る曲名及び歌手名８１ｃが表示される。「パートナー募集」欄８１には、評価の高低に拘わらず、動画コンテンツのサムネイル画像８１ａが表示されるため、混成動画コンテンツに利用される可能性が高くなる。従って、混成動画コンテンツとしての利用を所望するユーザは、自身の動画コンテンツが、「パートナー募集」欄へ掲載されるように設定しておくと良い。
「おすすめ動画」欄８２には、各ユーザからの評価が高い動画コンテンツのサムネイル画像８２ａが表示される。また、カラオケ配信が許可されている動画コンテンツのサムネイル画像８２ａ上には、混成素材登録アイコン８２ｂが表示される。更に、サムネイル画像８２ａの下方には、曲名、歌手名、当該動画コンテンツを作成したユーザのあだ名が表示されている。
「おすすめ混成動画」欄８３については、後述する。
動画再生画面８４は、動画コンテンツに含まれる動画データを再生して得られる動画を表示する画面８４ａを有し、該画面８４ａ下には、動画コンテンツに係る曲名及び歌手名を表示する、曲名表示部８４ｂ、再生、一時停止、頭出し等を指示するための操作ボタン、タイムコードスライダ、音量調整スライダ等を含む操作部８４ｃが配されている。
【００９６】
ユーザは、視聴を所望する動画コンテンツのサムネイル画像８１ａ，８２ａを操作、例えばマウスでクリックすることによって、該動画コンテンツの再生を指示することができ、中央装置１は、該動画コンテンツと、該動画コンテンツに紐付けられた楽曲データをユーザ端末装置６へ送信し、ユーザ端末装置６は、中央装置１から送信された動画コンテンツに含まれる動画データ及び音声データと、楽曲データとを並行的に再生し、動画再生画面８４に表示させる。動画コンテンツ及び楽曲データを並行的に再生することによって、カラオケ店舗でユーザが歌唱している様子を再現することができる。
また、ユーザは、混成動画コンテンツの素材として所望する動画コンテンツのサムネイル画像８１ａ，８２ａ上に表示された混成素材登録アイコン８１ｂ，８２ｂを選択することによって、該動画コンテンツを混成動画コンテンツ素材として登録することができる。中央装置１は、混成素材登録アイコンが選択された場合、ログインしているユーザのユーザＩＤに対応付けて、混成素材として選択された動画コンテンツの動画ＩＤをユーザ情報ＤＢ１３ａの「私の混成動画素材」列に登録する。
【００９７】
図２０は、混成動画素材登録された動画コンテンツのサムネイル画像７６を表示したユーザ画面７の一例を示した模式図である。ユーザ画面７で、ハイパーリンク文字列「私の混成素材動画」が操作された場合、図２０に示すように、混成素材として登録された動画コンテンツのサムネイル画像７６が表示される。
【００９８】
＜５．カラオケ配信＞
そして、混成素材登録を終えた前記他のユーザ、即ちあだ名が「××さん」であるユーザは、カラオケ店舗２の個室２１に設置されたカラオケ端末装置４の遠隔操作装置５を用いてカラオケシステムにログインし、混成素材の動画コンテンツに係る楽曲を選曲する。中央装置１は、楽曲データと、混成素材の動画コンテンツに含まれる音声データとをカラオケ端末装置４へ送信する。
【００９９】
＜６．歌唱・撮像・集音・採点＞
カラオケ端末装置４は、中央装置１から送信された楽曲データ及び音声データを受信し、受信した楽曲データ及び音声データを並行的に再生する。該音声データは、混成動画素材に係る音声であるため、ここでユーザが歌唱を行うと、恰も二重唱を行っているかのような状態になり、ユーザは、その場にいないユーザと二重唱を楽しむことができると共に、混成動画コンテンツの創作を楽しむことができる。そして、カラオケ端末装置４は、該楽曲データ及び音声データが再生されている間に行われたユーザの歌唱をマイク４８ｅで集音すると共に、ユーザが歌唱している姿を撮像装置４６ｅにて撮像する。
【０１００】
＜７．投稿＞
歌唱終了後、歌唱者は、撮像及び集音して得た歌唱に係る動画データ及び音声データを中央装置１へ投稿、即ちアップロードするか否かを選択する。カラオケ端末装置４は、アップロードを指示された場合、歌唱に係る動画データ及び音声データをユーザＩＤ及び楽曲ＩＤと共に中央装置１へ送信する。中央装置１は、動画データ及び音声データと、混成素材として選択された動画データ及び音声データとを含む混成動画コンテンツデータを生成し、生成された混成動画コンテンツデータを、受信したユーザＩＤ及び楽曲ＩＤ等と共に混成動画ＤＢ１３ｄに登録する。また、該混成動画コンテンツデータに固有の混成動画ＩＤ、受信したユーザＩＤ等を、対応付けてユーザ情報ＤＢ１３ａに登録する。
【０１０１】
＜８．混成動画公開＞
次いで、カラオケを終えた前記他のユーザは、ユーザ端末装置６を用いて中央装置１にアクセスし、動画投稿サイトにログインする。ログインに成功すると、ユーザ端末装置６の表示部に一のユーザ専用のユーザ画面７が表示される。そして、ユーザ画面７で、ハイパーリンク文字列「私の混成動画」が操作された場合、前記他のユーザによって作成された混成動画コンテンツのサムネイル画像が表示される。
【０１０２】
図２１は、混成動画コンテンツをサムネイル表示したユーザ画面７の一例を示した模式図である。ユーザ画面７には、図２１に示すように、混成動画コンテンツ表示部７７が表示される。混成動画コンテンツ表示部７７には、ユーザ自身がアップロードして作成した混成動画コンテンツの内容を示したサムネイル画像７７ａ、該混成動画コンテンツに係る歌唱を行った際に用いた楽曲の曲名及び歌手名７７ｂ、混成動画コンテンツに関する各種設定を行うための「設定」ボタン７７ｃ、混成動画コンテンツを削除するための「削除」ボタン７７ｄ、設定内容表示部７７ｅ、混成動画コンテンツの素材である動画コンテンツを作成したユーザのプロフィール画像７７ｆなどを含んで構成される。設定内容表示部７７ｅには、混成動画コンテンツの公開の可否等が表示される。
【０１０３】
ここで、ユーザが「設定」ボタン７７ｃを操作した場合、ユーザ端末装置６の表示部に、混成動画コンテンツに係る各種設定を行うための設定画面が表示される。
【０１０４】
図２２は、混成動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面７の一例を示した模式図である。設定画面は、ユーザ情報表示部７１と共に、各種設定を行う対象である混成動画コンテンツの内容を示した混成動画コンテンツ情報表示部７８、設定内容入力部７９を含んで構成される。設定内容入力部７９は、混成動画コンテンツの公開の可否を選択するためのラジオボタン７９ａ、混成動画コンテンツの保存期間を設定するためのラジオボタン７９ｂ、混成動画コンテンツに対する自身のコメントを入力するテキスト入力フィールド７９ｃ等を含み、構成されている。
【０１０５】
図２３は、公開設定された混成動画コンテンツをサムネイル表示した公開画面８の一例を示した模式図である。「おすすめ混成動画」欄８３には、構成設定された混成動画コンテンツのサムネイル画像８３ａが表示される。ここで、ユーザは、視聴を所望する混成動画コンテンツのサムネイル画像８３ａを操作、例えばマウスでクリックすることによって、該混成動画コンテンツの再生を指示することができ、中央装置１は、該混成動画コンテンツ、楽曲データ及び採点結果をユーザ端末装置６へ送信し、ユーザ端末装置６は、中央装置１から送信された混成動画コンテンツに含まれる２組の動画データ、採点結果が最も高い音声データ、並びに楽曲データを並行的に再生する。つまり、二人のユーザが得意なパートを交互に歌唱しているかのような動画及び音声が再生される。また、ユーザは、図示しない拡大再生ボタンを表示することによって、混成動画コンテンツを拡大して再生し、より詳細な情報を表示させることができる。
【０１０６】
図２４及び図２５は、混成動画コンテンツの拡大再生画面が表示された公開画面８の一例を示した模式図である。拡大再生画面８６は、混成動画コンテンツを構成する一方の動画コンテンツが再生される画面部分８６ａと、他方の動画コンテンツが再生される画面部分８６ａとが横方向に並置されてなり、画面部分８６ａの上方には、動画コンテンツ又は混成動画コンテンツを検索するための検索条件入力部８５が配され、画面部分８６ａの下方には、曲名表示部、再生、一時停止、頭出し等を指示するための操作ボタン、タイムコードスライダ、音量調整スライダ等を含む操作部８６ｃが配されている。また、２つの動画コンテンツの音量を選択的に調整すべく、音量調整対象を選択するための音調調整対象選択部８６ｄが配されている。また、公開画面８には、混成動画コンテンツと同一の楽曲を用いて作成された動画コンテンツを表示した楽曲関連動画コンテンツ表示部８６ｅ、混成動画コンテンツに対する評価を行うための評価入力部８６ｆ、混成動画コンテンツに対するコメントが表示されたコメント表示部８６ｇ、コメントを入力するテキストフィールド８６ｈ、混成動画コンテンツを構成する各動画コンテンツを生成したユーザを表示したユーザ情報表示部８６ｉ、混成動画コンテンツに付与されたタグ情報を表示するタグ表示部８６ｊ、混成動画コンテンツの作成に用いられた楽曲の情報を表示する曲情報表示部８６ｋなどが表示される。
【０１０７】
また、ユーザは、拡大再生画面８６の画面部分８６ａを操作、例えばマウスにてクリックすることによって、該画面部分８６ａに表示されていた一の動画コンテンツのみを拡大して再生する部分拡大再生画面８７を表示させることができる。
【０１０８】
図２６及び図２７は、部分拡大再生画面８７が表示された公開画面８の一例を示した模式図である。部分拡大再生画面８７は、一の動画コンテンツが再生される画面を有し、該画面の下方には、曲名表示部、再生、一時停止、頭出し等を指示するための操作ボタン、タイムコードスライダ、音量調整スライダ等を含む操作部８７ｂが配されている。また、公開画面８には、一の動画コンテンツと同一の楽曲を用いて作成された動画コンテンツを表示した楽曲関連動画コンテンツ表示部８７ｃ、一の動画コンテンツに対する評価を行うための評価入力部８７ｄ、一の動画コンテンツと同一の楽曲を用いて作成された混成動画コンテンツを表示した楽曲関連混成動画コンテンツ表示部８７ｅ、一の動画コンテンツに対するコメントが表示されたコメント表示部８７ｆ、コメントを入力するテキストフィールド８７ｇ、一の動画コンテンツを構成する各動画コンテンツを生成したユーザを表示したユーザ情報表示部８７ｈなどが表示される。
【０１０９】
次に、混成動画コンテンツの生成及び公開に係る制御部１０、４０の処理手順を説明する。以下の処理ではユーザがカラオケシステムにログインしている状態を前提として処理内容の要部を説明する。なお、歌唱に係る動画コンテンツの生成及び登録に係る制御部の処理手順は、図９及び図１０に示した処理手順と同様であるため、詳細な説明は省略する。
【０１１０】
図２８は、動画コンテンツの公開設定、カラオケ配信設定に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、図１６に示すようにユーザ画面７をユーザ端末装置６の表示部に表示させる（ステップＳ５１）。より具体的には、制御部１０は、ユーザ画面７を表示するための画像データと、ログインしているユーザのユーザ情報とをユーザ端末装置６へ送信し、ユーザ端末装置６は、中央装置１から送信された画面データ及びユーザ情報に基づいてユーザ画面７を構築し、表示部に表示させる。以下、中央装置１からユーザ端末装置６の表示部に各種画面を表示させる処理の内容は同様であるため、以下、省略する。
【０１１１】
次いで、制御部１０は、私の動画、即ちログインしているユーザＩＤに基づいて中央装置１にアップロードされた動画を特定する（ステップＳ５２）。具体的には、ログインしているユーザのユーザＩＤに対応付けて、ユーザ情報ＤＢ１３ａの「私の動画」列に登録されている動画ＩＤを読み出すことによって、私の動画を特定する。
【０１１２】
そして、制御部１０は、私の動画のサムネイル画像７３ａ、該動画に関する設定を行うための「設定」ボタン７３ｃ、及び該動画の情報等をユーザ画面７に一覧表示させる（ステップＳ５３）。
【０１１３】
次いで、制御部１０は、「設定」ボタン７３ｃが操作されたか否かを判定する（ステップＳ５４）。具体的には、ユーザ端末装置６から、特定の動画に対応する「設定」ボタン７３ｃが操作されたことを示すデータが中央装置１へ送信された場合、中央装置１の制御部１０は、ユーザ端末装置６から送信された前記データを受信し、該データに基づいて、「設定」ボタン７３ｃが操作されたか否かを判定する。
【０１１４】
「設定」ボタン７３ｃが操作されたと判定した場合（ステップＳ５４：ＹＥＳ）、制御部１０は、設定画面をユーザ端末装置６の表示部に表示させる（ステップＳ５５）。そして、制御部１０は、公開設定及びカラオケ配信設定を受け付ける（ステップＳ５６）。具体的には、制御部１０は、ユーザ端末装置６から中央装置１へ送信された公開可否情報、カラオケ配信許可情報等を、第２通信部１６を介して受信する。そして、制御部１０は、ステップＳ５６で受け付けた公開可否情報、カラオケ配信可否情報等を動画ＤＢ１３ｃに登録する（ステップＳ５７）。
【０１１５】
ステップＳ５７の処理を終えた後、又はステップＳ５４で「設定」ボタン７３ｃが操作されていないと判定した場合（ステップＳ５４：ＮＯ）、制御部１０は、カラオケ配信が許可されている動画データを特定し、カラオケ配信が許可されている動画のサムネイル画像７３ａに、混成素材登録アイコン７３ｆを表示させる（ステップＳ５８）。
【０１１６】
次いで、制御部１０は、混成素材登録アイコン７３ｆが操作されたか否かを判定する（ステップＳ５９）。具体的には、ユーザ端末装置６から、特定の動画に対応する混成素材登録アイコン７３ｆが操作されたことを示す混成素材指定情報が中央装置１へ送信され、中央装置１の制御部１０は、ユーザ端末装置６から送信された混成素材指定情報を、第２通信部１６を介して受信する。
【０１１７】
混成素材登録アイコン７３ｆが操作されていないと判定した場合（ステップＳ５９：ＮＯ）、制御部１０は、処理を終える。混成素材登録アイコン７３ｆが操作されたと判定した場合（ステップＳ５９：ＹＥＳ）、制御部１０は、混成素材として選択された動画をユーザ情報ＤＢ１３ａに登録、つまり該動画の動画ＩＤをユーザ情報ＤＢ１３ａの「私の混成動画素材」列に登録し（ステップＳ６０）、処理を終える。
【０１１８】
図２９は、動画コンテンツの公開に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、図１９に示すように、公開画面８をユーザ端末装置６の表示部に表示させる（ステップＳ７１）。そして、制御部１０は、全ユーザからアップロードされた動画の内、公開が許可された動画を特定する（ステップＳ７２）。そして、制御部１０は、公開が許可された動画のサムネイル画像８１ａ，８２ａ、及び該動画の情報を公開する（ステップＳ７３）。
【０１１９】
次いで、制御部１０は、カラオケ配信が許可されている動画データを特定し、カラオケ配信が許可されている動画のサムネイル画像８１ａ，８２ａに、混成素材登録アイコン８１ｂ，８２ｂを表示させる（ステップＳ７４）。
【０１２０】
次いで、制御部１０は、混成素材登録アイコン８１ｂ，８２ｂが操作されたか否かを判定する（ステップＳ７５）。混成素材登録アイコン８１ｂ，８２ｂが操作されたと判定した場合（ステップＳ７５：ＹＥＳ）、制御部１０は、混成素材として選択された動画をユーザ情報ＤＢ１３ａに登録、つまり該動画の動画ＩＤをユーザ情報ＤＢ１３ａの「私の混成動画素材」列に登録する（ステップＳ７６）。
【０１２１】
ステップＳ７６の処理を終えた後、又はステップＳ７５で混成素材登録アイコン８１ｂ，８２ｂが操作されていないと判定した場合（ステップＳ７５：ＮＯ）、制御部１０は、動画コンテンツデータの再生操作があったか否かを判定する（ステップＳ７７）。再生操作が無いと判定した場合（ステップＳ７７：ＮＯ）、制御部１０は、処理を終える。
【０１２２】
再生操作があったと判定した場合（ステップＳ７７：ＹＥＳ）、制御部１０は、再生対象の動画コンテンツデータを動画ＤＢ１３ｃから読み出し、また、楽曲ＤＢ１３ｂから該動画コンテンツに紐付けられた楽曲データを読み出し、読み出された動画コンテンツデータに含まれる動画データ及び音声データ、並びに楽曲データを並行的に再生し（ステップＳ７８）、処理を終える。
【０１２３】
図３０及び図３１は、混成動画コンテンツの生成及び登録に係る制御部１０、４０の処理手順を示すフローチャートである。カラオケ端末装置４の制御部４０は、遠隔操作装置５にて楽曲を受け付け（ステップＳ９１）、ユーザＩＤ、及び受け付けた楽曲に係る楽曲ＩＤを含む楽曲要求データを、通信部４４を介して中央装置１へ送信する（ステップＳ９２）。
【０１２４】
中央装置１の制御部１０は、カラオケ端末装置４から送信された楽曲要求データを、第１通信部１５を介して受信し（ステップＳ９３）、受信した楽曲要求データに含まれるユーザＩＤ及び楽曲ＩＤに対応する混成動画素材の音声データを選択する（ステップＳ９４）。つまり、制御部１０は、ユーザＩＤに対応付けて「私の混成動画素材」列に登録されている動画ＩＤより、混成動画素材として登録されている動画コンテンツを特定し、登録されている動画コンテンツの内、受信した楽曲ＩＤと同一の楽曲ＩＤが対応付けられているものを特定する。
そして、制御部１０は、特定された楽曲データ及び音声データを、第１通信部１５を介してカラオケ端末装置４へ送信する（ステップＳ９５）。なお、ステップＳ９５では、動画コンテンツデータを構成する音声データのみを送信する例を説明したが、動画データ及び音声データを含む動画コンテンツデータを送信するように構成しても良い。
【０１２５】
カラオケ端末装置４の制御部４０は、中央装置１から送信された楽曲データ及び音声データを、通信部４４を介して受信する（ステップＳ９６）。そして、制御部４０は、受信した楽曲データ及び音声データを並行的に再生する（ステップＳ９７）。具体的には、制御部４０は、楽曲データを音源４８ｂに与え、音声データを音声デコーダに与える。音源４８ｂは、楽曲データに係る伴奏音を音声ミキサ４８ｄに与え、音声デコーダ４８ｃは、音声データを復号し、復号された音声データを音声ミキサ４８ｄに与える。音声ミキサ４８ｄは、音源４８ｂ及び音声デコーダ４８ｃからそれぞれ与えられた伴奏音及び音声を合成し、合成して得た音声データをスピーカ４８ｆへ出力する。従って、スピーカ４８ｆから、カラオケの伴奏に合わせて、混成動画素材に係る音声が再生される。
【０１２６】
次いで、制御部４０は、楽曲データを再生している間に行われた歌唱の動画を入力し（ステップＳ９８）、あわせて歌唱の音声を入力する（ステップＳ９９）。
マイク４８ｅから出力された音声データは、音声ミキサ４８ｄに入力され、音声ミキサ４８ｄは、カラオケの伴奏音と、混成素材動画に係る音声と、マイク４８ｅに入力された音声とを合成し、合成して得た音声データをスピーカへ出力する。従って、カラオケの伴奏に合わせて、二人のユーザがデュエット歌唱しているような状態になる。
【０１２７】
次いで、制御部４０は、入力された音声データを採点部４７に与えて、該音声データに係る歌唱に対する逐次採点を行う（ステップＳ１００）。
【０１２８】
次いで、制御部４０は、楽曲データの再生を終了する否かを判定する（ステップＳ１０１）。再生を終了しないと判定した場合（ステップＳ１０１：ＮＯ）、制御部４０は、処理をステップＳ９７へ戻す。再生を終了すると判定した場合（ステップＳ１０１：ＹＥＳ）、制御部４０は、遠隔操作装置５の操作状態を監視し、入力された動画データ及び音声データをアップロードするか否かを判定する（ステップＳ１０２）。アップロードしないと判定した場合（ステップＳ１０２：ＮＯ）、制御部４０は処理を終える。
【０１２９】
アップロードすると判定した場合（ステップＳ１０２：ＹＥＳ）、制御部４０は、ユーザＩＤ、楽曲ＩＤ、採点結果、動画データ及び音声データを、通信部４４を介して中央装置１へ送信する（ステップＳ１０３）。
【０１３０】
中央装置１の制御部１０は、カラオケ端末装置４から送信されたユーザＩＤ、楽曲ＩＤ、採点結果、動画データ及び音声データを、第１通信部１５にて受信する（ステップＳ１０４）。そして、制御部１０は、受信した動画データ及び音声データと、各音声データの採点結果と、混成素材として選択された動画データ及び音声データとを含む混成動画コンテンツデータを生成し、生成された混成動画コンテンツデータを、受信したユーザＩＤ、楽曲ＩＤ等と共に混成動画ＤＢ１３ｄに登録し、また混成動画ＤＢ１３ｄへの登録時に発行した混成動画ＩＤをユーザ情報ＤＢ１３ａに登録し（ステップＳ１０５）、処理を終える。
【０１３１】
図３２は、混成動画コンテンツの公開設定に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、図２１に示すように、ユーザ画面７をユーザ端末装置６の表示部に表示させる（ステップＳ１１１）。
【０１３２】
次いで、制御部１０は、私の混成動画、即ちログインしているユーザによって作成された混成動画を特定する（ステップＳ１１２）。具体的には、ログインしているユーザのユーザＩＤに対応付けて、ユーザ情報ＤＢ１３ａの「私の混成動画」列に登録されている混成動画ＩＤを読み出すことによって、私の動画を特定する。
【０１３３】
そして、制御部１０は、私の混成動画コンテンツサムネイル画像７７ａ、該混成動画に関する設定を行うための「設定」ボタン７７ｃ、及び該混成動画コンテンツ情報等をユーザ画面７に一覧表示させる（ステップＳ１１３）。
【０１３４】
次いで、制御部１０は、「設定」ボタン７７ｃが操作されたか否かを判定する（ステップＳ１１４）。具体的には、ユーザ端末装置６から、特定の動画に対応する「設定」ボタン７７ｃが操作されたことを示すデータが中央装置１へ送信され、中央装置１の制御部１０は、ユーザ端末装置６から送信された前記データを受信し、該データに基づいて、「設定」ボタン７７ｃが操作されたか否かを判定する。
【０１３５】
「設定」ボタン７７ｃが操作されていないと判定した場合（ステップＳ１１４：ＮＯ）、制御部１０は、処理を終える。「設定」ボタン７７ｃが操作されたと判定した場合（ステップＳ１１４：ＹＥＳ）、制御部１０は、図２２に示すように、設定画面の混成動画コンテンツ情報表示部７８、設定内容入力部７９をユーザ端末装置６の表示部に表示させる（ステップＳ１１５）。そして、制御部１０は、公開設定を受け付ける（ステップＳ１１６）。具体的には、ユーザ端末装置６に入力され、中央装置１へ送信された公開可否情報を、第２通信部１６を介して受信する。そして、制御部１０は、ステップＳ１１６で受け付けた公開可否情報、カラオケ配信可否情報等を動画ＤＢ１３ｃに登録し（ステップＳ１１７）、処理を終える。
【０１３６】
図３３は、混成動画コンテンツの公開に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、公開画面８をユーザ端末装置６の表示部に表示させる（ステップＳ１３１）。そして、制御部１０は、全ユーザによって生成された混成動画コンテンツの内、公開が許可された混成動画を特定する（ステップＳ１３２）。そして、制御部１０は、公開が許可された混成動画コンテンツのサムネイル画像８３ａ、及び該動画の情報を一覧表示公開する（ステップＳ１３３）。
【０１３７】
次いで、制御部１０は、混成動画コンテンツの再生操作があったか否かを判定する（ステップＳ１３４）。再生操作があったと判定した場合（ステップＳ１３４：ＹＥＳ）、制御部１０は、混成動画コンテンツ及び楽曲データをユーザ端末装置４へ送信し、該ユーザ端末装置に混成動画コンテンツに含まれる２組の動画データを並行的に再生させる（ステップＳ１３５）。
【０１３８】
また、制御部１０は、特定の再生区分毎に、混成動画コンテンツに含まれる複数の採点結果を比較し、採点結果が最も高い音声データと、楽曲データとを、並行的に再生させ（ステップＳ１３６）、処理を終える。
【０１３９】
このように構成された実施の形態２に係るカラオケシステム、中央装置１及びコンテンツデータ生成方法にあっては、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーのコンテンツの創作及び公開を可能にし、娯楽性を向上させることができる。
【０１４０】
また、中央装置１の動画ＤＢ１３ｃに登録されている複数の動画コンテンツの中から、混成動画コンテンツの素材として、一の動画コンテンツを選択し、混成動画コンテンツを作成することができるため、動画コンテンツを創作する自由度が高く、娯楽性が向上する。
【０１４１】
更に、一のユーザが作成した動画コンテンツは、動画閲覧サイトに公開され、他のユーザは公開されている動画閲覧サイトから、混成動画コンテンツの素材としての動画コンテンツを選択することができるため、自分で作成した動画コンテンツのみを用いて混成動画コンテンツを作成する場合に比べて、動画コンテンツを創作する自由度が高く、娯楽性が向上する。
【０１４２】
更にまた、動画コンテンツの動画投稿サイトへの公開の可否、動画コンテンツのカラオケ配信の可否を選択することができるため、動画コンテンツを公開したいが、カラオケ配信されることは避けたい等、動画投稿サイトに対する多用なニーズに対応することができる。
【０１４３】
更にまた、混成動画コンテンツを構成する各動画コンテンツの音声データの音量を各別に変更可能である。従って、コンテンツデータを視聴する際の娯楽性が向上する。
【０１４４】
なお、実施の形態２では、混成動画コンテンツを中央装置側で生成する例を説明したが、混成動画コンテンツをカラオケ端末装置側で生成し、中央装置へ送信するように構成しても良い。
【０１４５】
また、２つの動画コンテンツを組み合わせてなる混成動画コンテンツを生成する例を説明したが、３つ以上の動画コンテンツを組み合わせて混成動画コンテンツを生成しても良い。また、複数の動画コンテンツに係る動画の配列方法も特に限定されない。また、複数の動画コンテンツに含まれる音声データを並行的に再生しても良いが、選択的に再生しても良い。
【０１４６】
更に、歌唱の映像及び音声を組み合わせてなる混成コンテンツの素材として動画を説明したが、映像としてスライドショー形式で時系列順に切り替わる映像、静止画であっても良い。
【０１４７】
更にまた、混成動画コンテンツの素材である動画コンテンツとして、ユーザが歌唱している姿を撮像したものを利用しているが、予め用意した動画コンテンツを中央装置の内部記憶装置に記憶されておき、該動画コンテンツを用いて、混成動画コンテンツを生成するようにしても良い。
【０１４８】
更にまた、混成動画コンテンツの元になる動画コンテンツをユーザが選択する構成を例示したが、中央装置がランダムに選択し、カラオケ端末装置へ配信するように構成しても良い。
【０１４９】
今回開示された実施の形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０１５０】
１ 中央装置
２ カラオケ店舗
４ カラオケ端末装置
５ 遠隔操作装置
６ ユーザ端末装置
１０、４０ 制御部
１２，４２ ＲＡＭ
１３ 内部記憶装置
１３ａ ユーザ情報ＤＢ
１３ｂ 楽曲ＤＢ
１３ｃ 動画ＤＢ
１３ｄ 混成動画ＤＢ
１４ 外部記憶装置
１５ 第１通信部
１６ 第２通信部
４３ 記憶装置
４４ 通信部
４６ａ 映像エンコーダ
４６ｂ 映像制御回路
４６ｃ 映像デコーダ
４６ｄ 映像ミキサ
４６ｅ 撮像装置
４６ｆ 表示装置
４７ 採点部
４８ａ 音声エンコーダ
４８ｂ 音源
４８ｃ 音声デコーダ
４８ｄ 音声ミキサ
４８ｅ マイク
４８ｆ スピーカ
Ｎ１，Ｎ２ 通信網
【技術分野】
【０００１】
本発明は、カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステム、中央装置及びコンテンツデータ生成方法に関する。
【背景技術】
【０００２】
カラオケ歌唱中にユーザを撮像及び集音して得た映像データ及び音声データを、カラオケ店舗に設置されたカラオケ端末装置から中央装置へアップロードし、歌唱に係る動画コンテンツとして動画閲覧サイトで閲覧可能に公開するようにしたカラオケシステムが実用化されている。
一方、特許文献１および特許文献２には、カラオケ利用者の歌唱に対する採点結果を記憶しておき、各カラオケ利用者が得意とする楽曲を用いてメドレー楽曲を作成するカラオケ装置が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２９８６９０号公報
【特許文献２】特開２０００−１４８１６７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の動画閲覧サイトは、ユーザが歌唱している姿を単純に動画コンテンツとして閲覧可能に公開するのみであり、より高い娯楽性が求められていた。
【０００５】
本発明は斯かる事情に鑑みてなされたものであり、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができるカラオケシステム、中央装置及びコンテンツデータ生成方法を提供することを目的とする。
なお、特許文献１，２によれば、メドレーリレー楽曲を作成することができるが、動画閲覧サイトにおける娯楽性を向上させることはできない。
【課題を解決するための手段】
【０００６】
本発明に係るカラオケシステムは、カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステムにおいて、前記カラオケ端末装置は、前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の映像が入力される映像入力手段と、前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の音声が入力される音声入力手段と、前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データを前記中央装置へ送信する送信手段とを備え、前記中央装置は、前記カラオケ端末装置から送信された映像データ及び音声データ、並びに前記歌唱の音声を異なる複数の再生時点で評価した評価結果を受信する手段と、受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段とを備え、前記公開手段は、各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてあることを特徴とする。
【０００７】
本発明に係るカラオケシステムは、前記カラオケ端末装置は、前記音声入力手段にて入力された音声に係る音声データを異なる複数の再生時点で評価する評価手段を備え、前記送信手段は、前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データ、並びに前記評価手段による評価結果を前記中央装置へ送信するようにしてあることを特徴とする。
【０００８】
本発明に係るカラオケシステムは、前記公開手段は、各映像データに係る映像が並置され、各映像データに係る音声が選択的に再生するようにしてあることを特徴とする。
【０００９】
本発明に係るカラオケシステムは、前記公開手段は、前記再生時点毎に、評価結果が最も高い音声データを選択的に再生するようにしてあることを特徴とする。
【００１０】
本発明に係る中央装置は、カラオケ曲データを送信する中央装置において、前記端末装置から送信された歌唱に係る映像データ及び音声データ並びに評価結果を受信する手段と、受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段とを備え、前記公開手段は、各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてあることを特徴とする。
【００１１】
本発明に係るコンテンツデータ生成方法は、カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを用いて、歌唱に係るコンテンツデータを生成するコンテンツデータ生成方法において、前記カラオケ端末装置は、カラオケ曲データを再生している間に行われた歌唱の映像及び音声が入力され、入力された音声に係る音声データを異なる複数の再生時点で評価し、入力された映像及び音声に係る映像データ及び音声データ、並びに評価結果を前記中央装置へ送信し、前記中央装置は、前記カラオケ端末装置から送信された映像データ及び音声データ並びに評価結果を受信し、受信した音声データ、映像データ及び評価結果を複数組、対応付けて記憶し、複数組の映像データ及び音声データを選択し、選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成し、生成したコンテンツデータを、該コンテンツデータを構成する各音声データに対する評価結果に応じて、一の音声データが選択的に再生されるように、視聴可能に公開することを特徴とする。
【００１２】
本発明にあっては、カラオケ端末装置は、歌唱に係る映像データ及び音声データを中央装置へ送信する。
中央装置は、カラオケ端末装置から送信された映像データ及び音声データ、並びにカラオケ端末装置又は外部の通信装置から送信された評価結果を受信し、記憶手段が各データを対応付けて記憶する。なお、歌唱の評価は、歌唱を聴いたユーザが主観に基づいて行っても良いし、歌唱の音声データに基づいて、機械的に行っても良い。そして、選択手段は、記憶手段が記憶している複数組の映像データ及び音声データを選択し、生成手段は、選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する。そして、該コンテンツデータは、各音声データに対する評価結果に応じて、一の音声データが選択的に再生されるように視聴可能に公開される。
【００１３】
本発明にあっては、カラオケ端末装置は、入力された歌唱の音声に係る音声データを異なる複数の再生時点で評価し、歌唱に係る映像データ及び音声データ、並びに該歌唱に対する評価結果を中央装置へ送信する。そして、中央装置は、カラオケ端末装置から送信された映像データ及び音声データ、並びに評価結果を受信し、記憶手段が各データを対応付けて記憶する。以下の処理は、上述と同様である。従って、歌唱の評価が自動的に行われ、コンテンツデータは、その評価結果に応じて、一の音声データが選択的に再生されるように視聴可能に公開される。
【００１４】
本発明にあっては、２つ以上の歌唱に係る映像データが並置され、評価結果に応じて選択された一の音声データが再生される。
【００１５】
本発明にあっては、採点結果が最も高い一の音声データが選択され再生されるため、コンテンツデータの品質ないし娯楽性が向上する。
【発明の効果】
【００１６】
本発明にあっては、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施の形態１に係るカラオケシステムの一構成例を模式的に示す説明図である。
【図２】中央装置の一構成例を示すブロック図である。
【図３】ユーザ情報ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図４】楽曲ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図５】動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図６】混成動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図７】カラオケ端末装置の一構成例を示すブロック図である。
【図８】混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。
【図９】歌唱に係る動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図１０】歌唱に係る動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図１１】混成動画コンテンツの生成及び公開に係る制御部の処理手順を示すフローチャートである。
【図１２】実施の形態２におけるユーザ情報ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図１３】実施の形態２における動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図１４】実施の形態２における混成動画ＤＢのレコードレイアウトの一例を概念的に示す説明図である。
【図１５】実施の形態２における混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。
【図１６】動画コンテンツをサムネイル表示したユーザ画面の一例を示した模式図である。
【図１７】動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面の一例を示した模式図である。
【図１８】公開設定、カラオケ配信設定された動画コンテンツをサムネイル表示したユーザ画面の一例を示した模式図である。
【図１９】動画コンテンツが公開された公開画面の一例を示した模式図である。
【図２０】混成動画素材登録された動画コンテンツのサムネイル画像を表示したユーザ画面の一例を示した模式図である。
【図２１】混成動画コンテンツをサムネイル表示したユーザ画面の一例を示した模式図である。
【図２２】混成動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面の一例を示した模式図である。
【図２３】公開設定された混成動画コンテンツをサムネイル表示した公開画面の一例を示した模式図である。
【図２４】混成動画コンテンツの拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２５】混成動画コンテンツの拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２６】部分拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２７】部分拡大再生画面が表示された公開画面の一例を示した模式図である。
【図２８】動画コンテンツの公開設定、カラオケ配信設定に係る制御部の処理手順を示すフローチャートである。
【図２９】動画コンテンツの公開に係る制御部の処理手順を示すフローチャートである。
【図３０】混成動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図３１】混成動画コンテンツの生成及び登録に係る制御部の処理手順を示すフローチャートである。
【図３２】混成動画コンテンツの公開設定に係る制御部の処理手順を示すフローチャートである。
【図３３】混成動画コンテンツの公開に係る制御部の処理手順を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明をその実施の形態を示す図面に基づいて詳述する。
本発明に係るカラオケシステムは、カラオケ店舗で歌唱しているユーザの姿を撮像及び集音して得た動画データ及び音声データを含む動画コンテンツを利用して、動画閲覧サイトにおける新たな娯楽を提供するものであり、詳細には、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーコンテンツの創作及び視聴公開を可能にし、娯楽性を向上させるものである。
【００１９】
以下、本発明をその実施の形態を示す図面に基づいて詳述する。
（実施の形態１）
図１は、本発明の実施の形態１に係るカラオケシステムの一構成例を模式的に示す説明図である。本実施の形態１に係るカラオケシステムは、カラオケ情報の配信を行うと共に、本発明に係る混成動画コンテンツの生成、管理及び公開を行う中央装置１と、各カラオケ店舗２それぞれに設置されており、通信網Ｎ１を介して中央装置１に接続されたカラオケ端末装置４と、通信網Ｎ２を介して中央装置１に接続された一又は複数のユーザ端末装置６とを備える。
【００２０】
通信網Ｎ１は、中央装置１と、カラオケ端末装置４との間で、カラオケ情報、混成動画コンテンツに係る情報を送受信するための専用通信回線であり、光ファイバ通信網、ＡＤＳＬ回線、公衆電話回線等にハードディスク内蔵型のルータ３１を接続して構成されている。なお、通信回線の種類は、中央装置１と、カラオケ端末装置４との間で情報を送受信できれば、これらに限定されるものでは無く、非専用回線であっても良い。
【００２１】
ルータ３１は、主に各カラオケ店舗２に設置されており、ルータ３１に内蔵されたハードディスクは、中央装置１から配信されたカラオケ情報を記憶すると共に、混成動画コンテンツの素材となる動画データ及び音声データを一時記憶する。ルータ３１は、各店舗及び中央装置１間でカラオケ情報、並びに動画データ及び音声データを中継し、カラオケ情報を共有乃至バックアップする機能を有している。
【００２２】
カラオケ端末装置４は、カラオケ店舗２の各個室２１に通常１台設置され、有線ＬＡＮ（Local Area Network）ケーブル３２を介して、該カラオケ店舗２に設置されたルータ３１に接続されている。また、各個室２１には、カラオケ端末装置４を遠隔操作するための遠隔操作装置５が一又は複数台、備えられている。遠隔操作装置５は、カラオケシステムへのユーザログイン、カラオケ曲の選曲、混成動画コンテンツに係る操作に用いられる。
【００２３】
遠隔操作装置５は、ペンタッチセンサを有する液晶パネルを備えたボード型であり、赤外線通信にて、同一個室２１内のカラオケ店舗２が紐付けられる。なお、携帯電話機に専用のアプリケーションを実行させ、遠隔操作装置５として機能させても良い。また、カラオケ店舗２には、有線ＬＡＮケーブル３２に接続されたアクセスポイント３３が設置されており、各個室２１に備えられた遠隔操作装置５は、アクセスポイント３３を介して、各種操作に係る情報を、紐付けられた同一個室２１内のカラオケ端末装置４との間で送受信している。
なお、カラオケ端末装置４間を接続する通信線として、有線ＬＡＮケーブル３２を例示したが、無線ＬＡＮ、その他の有線又は無線通信にて相互接続するように構成しても良い。また、アクセスポイント３３を設置する例を説明したが、カラオケ端末装置４と、遠隔操作装置５との間で直接、操作信号を送受信するように構成しても良い。
【００２４】
ユーザ端末装置６は、中央装置１との間で情報の送受信が可能な通信機器、例えば、パーソナルコンピュータ６ａ、携帯電話端末６ｂ、ＰＤＡ（Personal Digital Assistant）６ｃ等であり、カラオケ店舗２を利用するユーザが中央装置１にアクセスし、混成動画コンテンツに係る動画閲覧サイトを利用するためのものである。
【００２５】
図２は、中央装置１の一構成例を示すブロック図である。中央装置１は、該中央装置１の各構成部の動作を制御する制御部１０、例えば、ＣＰＵ（Central Processing Unit）を備え、制御部１０には、バスを介してＲＯＭ（Read Only Memory）１１と、ＲＡＭ（Random Access Memory）１２と、内部記憶装置１３と、外部記憶装置１４と、第１通信部１５と、第２通信部１６と、時計部１７とが接続されている。
【００２６】
制御部１０は、ＲＡＭ１２及び内部記憶装置１３に記録されたコンピュータプログラムをＲＡＭ１２に読み出して実行することにより、本実施の形態１に係るコンテンツデータ生成方法を実施、即ち後述の混成動画コンテンツデータの生成及び公開に係る処理を実行する。また、制御部１０は、動画閲覧サイトをユーザ端末装置に表示させるウェブサーバに係る処理を実行する。
【００２７】
ＲＯＭ１１は、コンピュータの動作に必要な制御プログラムを記憶したマスクＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリである。
【００２８】
ＲＡＭ１２は、制御部１０の演算処理を実行する際に生ずる各種データを一時記憶するＤＲＡＭ、ＳＲＡＭ等の揮発性メモリである。
【００２９】
外部記憶装置１４は、コンピュータを本発明に係る中央装置として機能させるためのコンピュータプログラムをコンピュータ読み取り可能に記録したＤＶＤ（Digital Versatile Disc）−ＲＯＭ，ＢＤ（Blu-ray Disc），ＣＤ（Compact Disc）−ＲＯＭ等の記録媒体からコンピュータプログラム、その他の各種データを読み取る光ディスクドライブである。なお、光ディスクドライブは、外部記憶装置１４の一例であり、ハードディスク、フレキシブルディスクのような磁気ディスク、光磁気ディスク、半導体メモリ等からデータを読み書きする装置で外部記憶装置１４を構成しても良い。
【００３０】
内部記憶装置１３は、コンピュータを、カラオケ装置１として機能させるためのコンピュータプログラムを記憶するハードディスク、不揮発性半導体メモリ等である。
また、内部記憶装置１３は、カラオケシステムのユーザに関する情報を格納するユーザ情報ＤＢ（Data Base）１３ａ、楽曲データ（カラオケ曲データ）等を格納した楽曲ＤＢ１３ｂ、ユーザによって作成された歌唱の動画コンテンツデータ等を格納する動画ＤＢ１３ｃ、ユーザによって作成された歌唱の混成動画コンテンツデータ等を格納する混成動画ＤＢ１３ｄ等を記憶する。各種データベースの詳細は後述する。
更に、内部記憶装置１３は、動画投稿サイトのユーザ画面、公開画面等を作成するための画像部品を記憶している。
【００３１】
第１通信部１５は、通信網Ｎ１を介して接続されたカラオケ端末装置４との間で、カラオケ情報、並びに歌唱の動画データ及び音声データ、その他、各種サービスに係るデータを送受信するインタフェースであり、第１通信部１５による各種情報の送受信は制御部１０によって制御される。
【００３２】
第２通信部１６は、通信網Ｎ２を介して接続されたユーザ端末装置６との間で、混成動画コンテンツに係る動画データ及び音声データ、その他、各種サービスに係るデータを送受信するインタフェースであり、第２通信部１６による各種情報の送受信は制御部１０によって制御される。なお通信網Ｎ１，Ｎ２の物理層が共通している場合、第１及び第２通信部１５，１６を、同一ハードウェアで構成しても良い。
【００３３】
時計部１７は、日時を計時しており、制御部１０からの求めに応じて、計時結果を制御部１０に与える回路である。時計部１７によって、カラオケ店舗２で歌唱しているユーザの姿を撮像した日時、撮像して得た動画データの保存期間などが管理される。
【００３４】
なお、中央装置１を、１台のコンピュータを用いて実現する例を説明したが、複数のコンピュータを用いて分散処理させても良いことは、言うまでも無い。
【００３５】
図３は、ユーザ情報ＤＢ１３ａのレコードレイアウトの一例を概念的に示す説明図である。ユーザ情報ＤＢ１３ａの表（ファイル）は、複数の列（フィールド）、例えば「ユーザＩＤ」列、「パスワード」列、「あだ名」列、「ユーザ情報」列、「私の動画」列等から構成されており、各行（レコード）には、各列に対応した情報が格納されている。
「ユーザＩＤ」列は、本実施の形態１に係るカラオケシステムを利用する複数のユーザそれぞれを識別するユーザＩＤ、例えばユーザの電子メールアドレスを格納する。ユーザＩＤは、ユーザがカラオケシステムにログインして、混成動画に係る各種サービスを利用する際に必要となる情報である。
「パスワード」列は、カラオケシステムへのログインに必要なパスワード情報を格納している。パスワード情報は、複数の英数字文字列からなる。
「あだ名」列は、ユーザのあだ名を格納する。あだ名は、動画投稿サイトにおけるユーザの仮の名称であり、カラオケシステムのユーザが互いを識別するためのものである。また、各ユーザに対して公開された混成動画コンテンツの作者を表示するために利用される。
「ユーザ情報」は、ユーザの性別、出身地等の情報を格納する。
「私の動画」列は、後述するように、当該ユーザによって作成された動画コンテンツを特定するための動画ＩＤを格納する。
「私の混成動画」列は、当該ユーザによって作成された混成動画を特定するための混成動画ＩＤを格納する。
【００３６】
図４は、楽曲ＤＢ１３ｂのレコードレイアウトの一例を概念的に示す説明図である。楽曲ＤＢ１３ｂの表は、複数の列、例えば楽曲を識別するための楽曲ＩＤを格納する「楽曲ＩＤ」列、当該楽曲の曲名を格納する「曲名」列、当該楽曲の歌手名を格納する「歌手名」列、当該楽曲の伴奏データを含む楽曲データを格納する「楽曲データ」列等から構成されている。楽曲データは、例えば、伴奏データ（カラオケ曲データ）、歌詞データ、主旋律データを格納している。また、楽曲データには、カラオケ曲を特定の再生区分、例えば「前奏」、「メロディー部分Ａ」、「メロディー部分Ｂ」、「サビ」、「間奏」…というように、区分した場合における区切り目を示す再生区分データが含まれている。なお、楽曲データの構造は特に限定されず、伴奏データ、歌詞データ及び主旋律データを一の楽曲ファイルで構成しても良いし、別個のファイルで構成し、各ファイルを対応付けて管理するようにしても良い。
伴奏データは、例えば、ＭＩＤＩ（Musical Instrument Digital Interface）データであり、音のオンオフを指定するデータ、音高を指定する音高データ、音量を指定する音量データ（ベロシティ）、楽器の制御データ、音を出力する楽器を指定する音色データ、時系列順に再生される各音の時間間隔を指定する時間データ（デルタタイム）等で構成されている。
主旋律データは、伴奏に合わせて歌唱すべき音の旋律、つまり、主旋律を構成する音のオンオフを示すデータ、音高データ、音量データ、時系列順に再生される主旋律の各音の時間間隔を示した時間データ等で構成されている。
【００３７】
図５は、動画ＤＢ１３ｃのレコードレイアウトの一例を概念的に示す説明図である。動画ＤＢ１３ｃの表は、複数の列、例えば「動画ＩＤ」列、「歌唱者」列、「楽曲ＩＤ」列、「動画コンテンツ」列、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「コメント」列、「評価」列等から構成されており、各列に対応した情報が格納されている。
「動画ＩＤ」列は、動画コンテンツを識別するための動画ＩＤを格納する。
「歌唱者」列は、動画ＩＤに対応付けられた動画コンテンツを作成した歌唱者のユーザＩＤを格納する。
「楽曲ＩＤ」列は、動画ＩＤに対応付けられた動画コンテンツを作成する際に利用した楽曲を識別する楽曲ＩＤを格納する。
「動画コンテンツ」列は、カラオケ店舗２で歌唱しているユーザの姿を撮像して得た動画データと、歌唱音声を集音して得た音声データと、該音声データに係る歌唱に対する評価を示した採点結果と、歌唱を聴いたユーザによる主観的な評価（以下、ユーザ評価結果という）とを独立的に含む動画コンテンツデータを格納する。動画コンテンツデータは、例えばｆｌｖ形式のファイルである。ユーザ評価結果は、例えば、「うまい」，「渋い」，「かっこいい」，「そっくり」等の歌唱に対する評価を数値化したものである。なお、言うまでもなく、少なくとも組をなす動画データ、音声データ及び採点結果が紐付けられていれば十分であり、動画コンテンツデータを複数のファイル、例えば動画データのファイルと、音声データのファイルと、採点結果ファイルとで構成しても良い。また、動画コンテンツデータのファイル形式も特に限定されない。
「撮影日時」列は、動画コンテンツに係る動画を撮像した日時を格納する。
「再生回数」列は、動画コンテンツの動画投稿サイトにおける再生回数を格納する。
「公開可否」列は、動画コンテンツの動画投稿サイトにおける公開の可否を示したデータを格納する。
「保存期間」列は、動画コンテンツを中央装置１が記憶及び公開する期間を示したデータを格納する。
「コメント」列は、動画コンテンツに対するコメントを格納する。
「評価」列は、動画コンテンツに対する評価を格納する。該評価は、例えば、動画コンテンツに対する第三者のコメント文である。また前記評価は、「かわいい」、「かっこいい」、「そっくり」、「うまい」、「渋い」、「おもしろい」、「泣ける」等の項目に対する投票結果を含む。
【００３８】
図６は、混成動画ＤＢ１３ｄのレコードレイアウトの一例を概念的に示す説明図である。混成動画ＤＢ１３ｄの表は、複数の列、例えば「混成動画ＩＤ」列、「楽曲ＩＤ」列、「第１歌唱者」列、「第２歌唱者」列、…、「動画コンテンツ１」列、「動画コンテンツ２」列、…、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「コメント」列、「評価」列等から構成されており、各列に対応した情報が格納されている。
「混成動画ＩＤ」列は、複数の歌唱に係る動画コンテンツを組み合わせてなる混成動画コンテンツを識別するための混成動画ＩＤを格納する。
「楽曲ＩＤ」列は、混成動画コンテンツの作成に利用した楽曲を識別する楽曲ＩＤを格納する。
「第１歌唱者」列は、混成動画コンテンツを構成する第１の動画コンテンツを作成したユーザを識別するデータを格納する。
「第２歌唱者」列は、混成動画コンテンツを構成する第２の動画コンテンツを再生したユーザを識別するデータを格納する。ここでは、二つの動画コンテンツを組み合わせてなる混成動画コンテンツを主に説明するが、３つ以上の「歌唱者」列を設け、３つ以上の動画コンテンツからなる混成動画コンテンツを作成できるようにすることもできる。
「動画コンテンツ１」列は、混成動画コンテンツを構成するための一の動画コンテンツデータを格納する。
「動画コンテンツ２」列は、混成動画コンテンツを構成するための他の動画コンテンツデータを格納する。
「撮影日時」列は、混成動画コンテンツの主となる動画コンテンツ、例えば最も新しく作成された動画コンテンツに係る動画を撮像した日時を示すデータを格納する。
「再生回数」列は、前記一の動画コンテンツ及び他のコンテンツを組み合わせてなる混成動画コンテンツデータの動画投稿サイトにおける再生回数を格納する。
「公開可否」列は、混成動画コンテンツの動画投稿サイトにおける公開の可否を示したデータを格納する。
「保存期間」列は、混成動画コンテンツを中央装置１が記憶及び公開する期間を示したデータを格納する。
「コメント」列は、混成動画コンテンツに対するコメントを格納する。
「評価」列は、混成動画コンテンツに対する評価を格納する。
【００３９】
図７は、カラオケ端末装置４の一構成例を示すブロック図である。カラオケ端末装置４は、該カラオケ端末装置４の各構成部の動作を制御する制御部４０を備え、制御部４０には、バスを介してＲＯＭ４１と、ＲＡＭ４２と、記憶装置４３と、通信部４４と、受信部４５と、映像エンコーダ４６ａと、映像制御回路４６ｂと、映像デコーダ４６ｃと、採点部４７と、音声エンコーダ４８ａと、音源４８ｂと、音声デコーダ４８ｃとが接続されている。また、映像制御回路４６ｂ、及び映像デコーダ４６ｃには、映像ミキサ４６ｄが接続され、音源４８ｂ、及び音声デコーダ４８ｃには、音声ミキサ４８ｄが接続されている。更に、カラオケ端末装置４は、図示しない映像入力端子、映像出力端子、音声入力端子、音声出力端子を備えており、各端子にはそれぞれ、撮像装置４６ｅ、映像表示装置４６ｆ、マイク４８ｅ、及びスピーカ４８ｆが接続されている。なお、映像表示装置４６ｆは、例えばＣＲＴ（Cathode-ray Tube）、液晶ディスプレイ、プラズマディスプレイ、有機ＥＬディスプレイ等である。
【００４０】
制御部４０は、ＲＯＭ４１及び記憶装置４３に記録されたコンピュータプログラムをＲＡＭ４２に読み出して実行することにより、本発明に係る後述の混成動画コンテンツデータの生成、管理及び公開に係る処理を実行し、コンピュータをカラオケ端末装置４として機能させる。
【００４１】
ＲＯＭ４１は、コンピュータの動作に必要な制御プログラムを記憶したマスクＲＯＭ、ＥＥＰＲＯＭ等の不揮発性メモリである。
【００４２】
ＲＡＭ４２は、制御部４０の演算処理を実行する際に生ずる各種データを一時記憶するＤＲＡＭ、ＳＲＡＭ等の揮発性メモリである。
【００４３】
記憶装置４３は、コンピュータを、カラオケ端末装置４として機能させるためのコンピュータプログラムを記憶するハードディスク、不揮発性半導体メモリ等である。また、記憶装置４３は、カラオケ端末用楽曲ＤＢ４３ａを記憶する。カラオケ端末用楽曲ＤＢ４３ａは、中央装置１から配信された楽曲データ等を格納しており、基本的な構成は楽曲ＤＢ１３ｂと同様である。
【００４４】
通信部４４は、通信網Ｎ１を介して接続されたカラオケ端末装置４との間で、カラオケ情報、混成動画コンテンツに係る情報、その他、各種サービスに係るデータを送受信するインタフェースであり、通信部４４による各種情報の送受信は制御部４０によって制御される。
【００４５】
受信部４５は、本カラオケ端末装置４と、遠隔操作装置５との紐付けを行うべく、遠隔操作装置５との間で赤外線通信を行う回路である。
【００４６】
映像エンコーダ４６ａは、撮像装置４６ｅから出力され、映像入力端子を通じて入力された映像データを圧縮符号化する回路であり、圧縮符号化された映像データは、一時的にＲＡＭ４２又は記憶装置４３に書き込まれる。なお、圧縮符号化の形式は、例えばＭＰＥＧ（Moving Picture Experts Group）であるが、特にこれに限定されない。
【００４７】
映像制御回路４６ｂは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から映像に係る情報を読み出して、各種映像を表現した映像データを生成し、映像ミキサ４６ｄに与える等、映像に関する各種制御処理を実行する。例えば、カラオケの楽曲データ再生時においては、映像制御回路４６ｂは、制御部４０から与えられた楽曲データに含まれる歌詞データに基づいて、歌詞を表現した映像データを映像ミキサ４６ｄに与える。また、映像制御回路４６ｂは、カラオケ娯楽に関するメニュー画面、採点結果表示画面等を表現した映像データ等を映像ミキサ４６ｄに与える。
【００４８】
映像デコーダ４６ｃは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から映像データ、例えば、カラオケ歌唱時に表示される所定の背景映像データを読み出して復号し、復号された映像データを映像ミキサ４６ｄに与える。背景映像データは、例えばＭＰＥＧ形式のデータである。
【００４９】
映像ミキサ４６ｄは、映像制御回路４６ｂと、映像デコーダ４６ｃと、撮像装置４６ｅとから与えられた映像の全部又はいずれか２つを合成し、合成して得た映像データを映像表示装置４６ｆへ出力する。映像表示装置４６ｆは、映像ミキサ４６ｄから出力された映像データに係る映像を表示する。
【００５０】
採点部４７は、マイク４８ｅから出力され音声入力端子を通じて入力された音声データを取得し、また、記憶装置４３から楽曲データを読み出し、前記音声データ及び楽曲データに含まれる主旋律データに基づいて、歌唱の音声及び主旋律における音高、音量、リズム等を比較することによって、歌唱を時系列順に逐次リアルタイムで採点し、採点結果をＲＡＭ４２に書き込む。
【００５１】
音声エンコーダ４８ａは、マイク４８ｅから出力され音声入力端子を通じて入力された音声データを取得し、取得した音声データを圧縮符号化する。なお、圧縮符号化の形式は、例えばＭＰ３、ＡＡＣ（Advanced Audio Coding）、ＡＣ３（Audio Code number 3）等であるが、特にこれに限定されない。
【００５２】
音源４８ｂは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から読み出した楽曲データに含まれる伴奏データ、例えばＭＩＤＩデータに基づいて楽器音を再現した音声データを作成するＭＩＤＩ音源であり、作成された音声データは、音声ミキサ４８ｄに与えられる。
【００５３】
音声デコーダ４８ｃは、制御部４０の制御命令に従って、ＲＡＭ４２又は記憶装置４３から読み出した音声データを、復号し、復号して得た音声データを音声ミキサ４８ｄに与える。
【００５４】
音声ミキサ４８ｄは、音源４８ｂと、音声デコーダ４８ｃとから与えられた音声データに係る音声を合成し、合成して得た音声データを、音声出力端子を通じてスピーカ４８ｆへ出力する。スピーカ４８ｆは、音声ミキサ４８ｄから出力された音声データに係る音声を放音する。
【００５５】
なお、カラオケ端末装置４を専用機として構成する例を説明したが、汎用のコンピュータ、家庭用テレビゲームのコンピュータを用いてカラオケ端末装置４を構成しても良い。この場合、カラオケ端末装置４を構成するハードウェア回路の一部、例えば、採点部４７等をソフトウェア的に処理しても良い。
【００５６】
次に、混成動画コンテンツの生成及び公開の全体的な流れを説明し、次いで、中央装置１及びカラオケ端末装置４の制御部１０、４０の具体的な処理手順を説明する。
【００５７】
図８は、混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。なお、混成動画に係るサービスを利用するユーザは、該サービスを利用する前に、予めカラオケシステムにアクセスし、ユーザ登録を行う必要がある。通信網Ｎ２を介してユーザ端末装置６又は遠隔操作装置５からユーザ登録の要求があった場合、中央装置１の制御部１０は、ユーザ登録画面をユーザ端末装置６又は遠隔操作装置５に表示させ、ログインＩＤに相当する電子メールアドレス、パスワード、あだ名、性別、出身地等を受け付け、受け付けた各種情報を、上述のようにユーザ情報ＤＢ１３ａに登録する。以下、特に断りがない限り、ユーザは、カラオケシステムにログインして各種操作を行っているものとする。
【００５８】
＜１．歌唱・撮像・集音・採点＞
まず、一のユーザは、カラオケ店舗２の個室２１に設置されたカラオケ端末装置４の遠隔操作装置５を用いてカラオケシステムにログインし、所望のカラオケ曲を選曲する。カラオケ端末装置４は、選曲された楽曲データを再生し、該楽曲データが再生されている間に行われたユーザの歌唱をマイク４８ｅで集音すると共に、ユーザが歌唱している姿を撮像装置４６ｅにて撮像する。また、カラオケ端末装置４は、集音して得た音声データと、楽曲データに含まれる主旋律データとに基づいて、ユーザの歌唱を採点する。
【００５９】
＜２．投稿＞
歌唱終了後、ユーザは、撮像及び集音して得た歌唱に係る動画データ及び音声データを中央装置１へ投稿、即ちアップロードするか否かを選択する。カラオケ端末装置４は、アップロードを指示された場合、歌唱に係る動画データ、音声データ、採点結果をログインしているユーザのユーザＩＤ及び楽曲ＩＤと共に中央装置１へ送信する。中央装置１は、カラオケ端末装置４から送信されたユーザＩＤ、楽曲ＩＤ、動画データ、音声データ及び採点結果を受信し、受信した動画データ、音声データ及び採点結果を独立的に含む動画コンテンツデータを生成し、ユーザＩＤ及び楽曲ＩＤと対応付けて動画ＤＢ１３ｃに登録する。なお動画コンテンツデータを生成するとは、動画データ、音声データ及び採点結果を含んだ新たなデータを作成する処理のみならず、動画データ、音声データ及び採点結果を紐付ける処理も含む。また、該動画コンテンツデータに固有の動画ＩＤ、受信したユーザＩＤ等を、対応付けてユーザ情報ＤＢ１３ａに登録する。
【００６０】
＜３．動画の公開・カラオケ配信設定＞
次いで、カラオケを終えた前記一のユーザは、ユーザ端末装置６又は遠隔操作装置５を用いてカラオケシステムの動画投稿サイトにログインする。以下、動画投稿サイトへのログインは、ユーザ端末装置６を用いて行うものとして説明する。ログインに成功すると、ユーザ端末装置６の表示部にユーザ専用のユーザ画面が表示される。また、所定の操作を行うことによって、公開画面へ遷移した場合、ユーザ端末装置６の表示部には、中央装置１へアップロードされて生成された動画コンテンツのサムネイル一覧が表示される。なお、動画投稿サイトへのログインは、カラオケ店舗２外においてユーザ端末装置６を用いて行うのが通常であるが、カラオケ店舗２内で遠隔操作装置５を用いてログインしても良い。
【００６１】
ユーザは、公開画面で構成されている動画コンテンツの中から、混成動画コンテンツの素材とする動画コンテンツを複数選択し、混成動画コンテンツの作成を指示する。中央装置１は、ユーザによって選択された複数の動画コンテンツに基づいて、混成動画コンテンツを生成し、公開する。
【００６２】
中央装置１は、混成動画コンテンツの再生を指示された場合、混成動画コンテンツを構成する複数の動画コンテンツに係る動画を横方向に並置して並行的に再生する。例えば、図８に示すように３つの動画を横方向に並置して再生する。
また、中央装置２は、特定の採点区分、例えば「メロディー部分Ａ」、「メロディー部分Ｂ」、「サビ」の区切り目毎に、各動画コンテンツに含まれる採点結果を比較する。そして、最も採点結果が高い動画コンテンツに含まれる音声データと、楽曲データとを並行的に再生する。つまり、カラオケ曲の再生区分毎に採点結果が高かった音声データが順次再生される。図８に示した例では、「メロディー部分Ａ」において第１歌唱者の音声データが再生され、「メロディー部分Ｂ」において第３歌唱者の音声データが再生され、「サビ」において第２歌唱者の音声データが順次再生される。従って、得意なパートを各歌唱者が担当してメドレーリレー歌唱したような完成度が高い混成動画コンテンツが再生される。
【００６３】
次に、混成動画コンテンツの生成及び公開に係る制御部１０、４０の処理手順を説明する。以下の処理ではユーザがカラオケシステムにログインしている状態を前提として処理内容の要部を説明する。
【００６４】
図９及び図１０は、歌唱に係る動画コンテンツの生成及び登録に係る制御部１０、４０の処理手順を示すフローチャートである。ユーザはカラオケ店舗２で歌唱したい楽曲を、遠隔操作装置５を用いて選択することができ、カラオケ端末装置４の制御部４０は、遠隔操作装置５にて楽曲を受け付け（ステップＳ１１）、受け付けた楽曲に係る楽曲ＩＤを含む楽曲要求データを、通信部４４を介して中央装置１へ送信する（ステップＳ１２）。なお、制御部４０は、ステップＳ１１で受け付けた楽曲ＩＤを一時記憶している。
なお、以前に中央装置１からカラオケ端末装置４へ配信され、既にカラオケ端末用楽曲ＤＢ４３ａに登録されている場合、中央装置へ楽曲要求データを送信せず、記憶装置４３から楽曲データを読み出せば良い。また、ルータ３１のハードディスクが記憶している場合も同様である。
【００６５】
中央装置１の制御部１０は、カラオケ端末装置４から送信された楽曲要求データを、第１通信部１５を介して受信し（ステップＳ１３）、受信した楽曲データに含まれる楽曲ＩＤに対応する楽曲データを内部記憶装置１３の楽曲ＤＢ１３ｂから読み出し、読み出した楽曲データを、第２通信部１６を介して、楽曲要求元のカラオケ端末装置４へ送信する（ステップＳ１４）。
【００６６】
カラオケ端末装置４の制御部４０は、中央装置１から送信された楽曲データを、通信部４４を介して受信し（ステップＳ１５）、受信した楽曲データを再生する（ステップＳ１６）。次いで、制御部４０は、楽曲データを再生している間に行われた歌唱の動画を入力し（ステップＳ１７）、あわせて歌唱の音声データを入力する（ステップＳ１８）。
なお、撮像装置４６ｅから出力され、カラオケ端末装置４に入力した動画データは、映像エンコーダ４６ａにて圧縮符号化され、ＲＡＭ４２に書き込まれる。また、動画データは、映像ミキサ４６ｄに入力される。映像ミキサ４６ｄは、映像制御回路４６ｂから与えられた歌詞の文字画像を、該動画データに係る動画上に歌詞を重畳し、歌詞が重畳された動画に係る動画データは、映像表示装置４６ｆへ出力される。従って、映像表示装置４６ｆには、ユーザ自身の歌唱している姿が表示される。このため、ユーザは、撮像されている動画の内容を確認しながら歌唱することができる。
また、マイク４８ｅから出力され、カラオケ端末装置４に入力した音声データは、音声エンコーダ４８ａにて圧縮符号化され、ＲＡＭ４２に書き込まれる。また、音声データは、音声ミキサ４８ｄに入力される。音声ミキサ４８ｄは、マイク４８ｅから入力された音声データに係る音声と、音源から与えられた楽曲の音とを合成し、合成して得た音声データをマイク４８ｅへ出力する。
【００６７】
次いで、制御部４０は、入力された音声データを採点部４７に与えて、該音声データに係る歌唱に対する逐次採点を行う（ステップＳ１９）。
【００６８】
次いで、制御部４０は、遠隔操作装置５にてユーザ評価結果を受け付ける（ステップＳ２０）。つまり、ユーザはカラオケ店舗２で他のユーザの歌唱を聴き、該歌唱に対する評価を主観的に行い、ユーザ評価結果を遠隔操作装置５にて入力することができ、制御部４０は、遠隔操作装置５にて、入力されたユーザ評価結果を取得する。ユーザ評価結果の入力方法は、例えば、「うまい」、「渋い」、「かっこいい」等の項目を遠隔操作装置５のディスプレイに表示し、各項目に対して点数を入力できるように構成すれば良い。また点数に代えて、点数に対応する評価を表現した文字、例えば「すごくうまい」、「ややうまい」、「普通」、「やや下手」、「下手」等を表示し、いずれかの評価を選択できるように構成しても良い。また、言うまでも無く、ユーザ評価結果は、一人のユーザによる評価であっても、複数人のユーザによる評価であっても良い。
【００６９】
次いで、制御部４０は、楽曲データの再生を終了する否かを判定する（ステップＳ２１）。なお、再生の終了は、楽曲データを最後まで再生し終えた場合、遠隔操作装置５にて再生の中止を指示された場合等に行われる。再生を終了しないと判定した場合（ステップＳ２１：ＮＯ）、制御部４０は、処理をステップＳ１６へ戻す。再生を終了すると判定した場合（ステップＳ２１：ＹＥＳ）、制御部４０は、遠隔操作装置５の操作状態を監視し、入力された動画及び映像の動画データ及び音声データをアップロードするか否かを判定する（ステップＳ２２）。アップロードしないと判定した場合（ステップＳ２２：ＮＯ）、制御部４０は処理を終える。
【００７０】
アップロードすると判定した場合（ステップＳ２２：ＹＥＳ）、制御部４０は、ＲＡＭ４２が一時記憶しているユーザＩＤ、楽曲ＩＤ、動画データ、音声データ、採点結果及びユーザ評価結果を、通信部４４を介して中央装置１へ送信する（ステップＳ２３）。なお、ＲＡＭ４２が一時記憶しているユーザＩＤは、ユーザがカラオケシステムにログインした際に入力されたものである。
【００７１】
中央装置１の制御部１０は、カラオケ端末装置４から送信されたユーザＩＤ、楽曲ＩＤ、動画データ、音声データ、採点結果及びユーザ評価結果を、第１通信部１５を介して受信する（ステップＳ２４）。そして、制御部１０は、受信した動画データ、音声データ、採点結果及びユーザ評価結果を独立的に含む動画コンテンツデータを生成し、生成された動画コンテンツデータを、受信したユーザＩＤ、楽曲ＩＤ等と共に動画ＤＢ１３ｃに登録し、また動画ＤＢ１３ｃへの登録時に発行した動画ＩＤをユーザ情報ＤＢ１３ａに登録し（ステップＳ２５）、処理を終える。
【００７２】
図１１は、混成動画コンテンツの生成及び公開に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、公開画面をユーザ端末装置６の表示部に表示させる（ステップＳ３１）。そして、制御部１０は、ユーザからアップロードされた動画のサムネイル画像及び該動画の情報を一覧公開する。
【００７３】
次いで、制御部１０は、公開されている動画コンテンツの中から、混成動画コンテンツを構成するための複数の動画コンテンツを選択する（ステップＳ３３）。ユーザは、ユーザ端末装置６を用いて、混成動画コンテンツの素材として所望する複数の動画コンテンツを指定することができ、ユーザ端末装置６は、指定された動画コンテンツを示す混成素材指定情報を中央装置１へ送信する。制御部１０は、第２通信部１６を介して、混成素材指定情報を受信し、該混成素材指定情報に基づいて、動画コンテンツの選択を行う。
【００７４】
そして、制御部１０は、選択された複数の動画コンテンツをそれぞれ構成する動画データ及び音声データ、並びに採点結果及びユーザ評価結果を含む混成動画コンテンツデータを生成し、生成された混成動画コンテンツデータを、混成動画ＤＢ１３ｄに登録し、また混成動画ＤＢ１３ｄへの登録時に発行した混成動画ＩＤをユーザ情報ＤＢ１３ａに登録する（ステップＳ３４）。
【００７５】
次いで、制御部１０は、混成動画コンテンツのサムネイル画像、及び該動画の情報を一覧表示公開する（ステップＳ３５）。
【００７６】
そして、制御部１０は、混成動画コンテンツの再生指示があったか否かを判定する（ステップＳ３６）。ユーザは、ユーザ端末装置６を用いて、混成動画コンテンツの再生を指示することができる。例えば、サムネイル画像をクリックすることによって、再生を指示する。ユーザ端末装置６は、特定の混成動画コンテンツの再生を指示する情報を中央装置１へ送信する。制御部１０は、第２通信部１６を介して、該情報を受信し、再生指示があったか否かを判定する。なお、ここで選択可能な動画コンテンツは、同一の楽曲データに対応付けられた動画コンテンツのみである。
【００７７】
再生操作が無いと判定した場合（ステップＳ３６：ＮＯ）、制御部１０は、処理を終える。再生操作があると判定した場合（ステップＳ３６：ＹＥＳ）、制御部１０は、再生が指示された混成動画コンテンツを構成する複数の動画データをユーザ端末装置６へ送信し、該ユーザ端末装置６に混成動画コンテンツに含まれる２組の動画データを並行的に再生させる（ステップＳ３７）。
【００７８】
また、制御部１０は、特定の再生区分毎に、混成動画コンテンツを構成する複数の動画コンテンツに対する採点結果及びユーザ評価結果を比較し、採点結果及びユーザ評価結果の総合評価結果が最も高い動画コンテンツデータを構成する音声データと、楽曲データとをユーザ端末装置６へ送信し、動画データと共に、音声データ及び楽曲データを並行的に再生させる（ステップＳ３８）。なお、総合評価は、例えば採点結果及びユーザ評価結果の総和、最大値、平均値等であるが、特に算出方法は限定されない。また、楽曲データが記憶するデータに基づいて、再生区分を判定する例を説明したが、歌唱の無音期間など、他の方法で再生区分を決定しても良い。更に、動画コンテンツデータを構成する全ての音声データ及び楽曲データをユーザ端末装置６へ送信し、次いで、総合評価結果が最も高い音声データを指定する情報をユーザ端末装置６へ送信し、ユーザ端末装置６側で、音声出力する音声データを選択しても良い。
【００７９】
このように構成された実施の形態１に係るカラオケシステム、中央装置１及びコンテンツ生成方法にあっては、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーの混成動画コンテンツの創作及び視聴公開を可能にし、娯楽性を向上させることができる。
【００８０】
また、音声データ及び主旋律データを比較して得た採点結果と、歌唱を聴いたユーザによる主観的な採点結果とを総合して歌唱の評価を行い、総合的な評価結果が高い音声データを順次再生する構成であるため、より完成度が高い混成動画コンテンツを生成することができる。
【００８１】
なお、図１０に示したフローチャートでは、ユーザ評価結果を、カラオケ端末装置４が遠隔操作装置５にて受け付ける例を説明したが、ユーザが所有する携帯電話機、その他の通信機器を通じて、受け付けるように構成しても良い。
また、カラオケ端末装置４がユーザ評価結果を受け付け、中央装置１へ送信する例を説明したが、ユーザが所有する通信機器などを通じて、ユーザ評価結果を直接中央装置１へ送信するように構成しても良い。
更に、実施の形態１では、カラオケ端末装置４による採点結果と、ユーザ評価結果とを用いて、音声データを選択的に再生しているが、採点結果のみ、又はユーザ評価結果のみに基づいて、音声データを選択的に再生するように構成しても良い。後述の実施の形態では、採点結果のみを用いる例を説明する。
【００８２】
（実施の形態２）
実施の形態２に係るカラオケシステムは、主に混成動画コンテンツを構成する動画コンテンツの選択方法の詳細、ユーザ情報ＤＢ１３ａ、動画ＤＢ１３ｃ、混成動画ＤＢ１３ｄの構成、制御部１０，４０の処理手順が異なるため、以下では主に上記相異点について説明する。
【００８３】
図１２は、実施の形態２におけるユーザ情報ＤＢ１３ａのレコードレイアウトの一例を概念的に示す説明図である。ユーザ情報ＤＢ１３ａの表は、複数の列、例えば「ユーザＩＤ」列、「パスワード」列、「あだ名」列、「ユーザ情報」列、「私の動画」列、「私の混成動画素材」列等から構成されており、各行（レコード）には、各列に対応した情報が格納されている。特に、「私の混成動画素材」列は、当該ユーザが混成動画コンテンツを作成するための素材として登録した動画コンテンツを特定するための動画ＩＤを格納する。
【００８４】
図１３は、実施の形態２における動画ＤＢ１３ｃのレコードレイアウトの一例を概念的に示す説明図である。動画ＤＢ１３ｃの表は、複数の列、例えば「動画ＩＤ」列、「歌唱者」列、「楽曲ＩＤ」列、「動画コンテンツ」列、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「カラオケ配信」列、「コメント」列、「パートナー募集」列、「評価」列等から構成されており、各列に対応した情報が格納されている。特に、「カラオケ配信」列は、動画コンテンツを、混成動画コンテンツ素材としてカラオケ端末装置４へ配信することの可否を示したデータを格納する。また、「パートナー募集」列は、動画コンテンツを用いた混成動画コンテンツの生成を促すべく、動画投稿サイトにおける後述の「パートナー募集」欄に動画コンテンツを掲載するか否かを示したデータを格納する。
【００８５】
図１４は、実施の形態２における混成動画ＤＢ１３ｄのレコードレイアウトの一例を概念的に示す説明図である。混成動画ＤＢ１３ｄの表は、複数の列、例えば「混成動画ＩＤ」列、「歌唱者」列、「パートナー」列、「楽曲ＩＤ」列、「混成動画コンテンツ」列、「撮影日時」列、「再生回数」列、「公開可否」列、「保存期間」列、「コメント」列、「評価」列等から構成されており、各列に対応した情報が格納されている。特に、「混成動画コンテンツ」列は、２組の動画コンテンツデータを格納する。つまり、２組の動画コンテンツデータそれぞれを構成する動画データ、音声データ及び採点結果を格納する。
【００８６】
まず、混成動画コンテンツの生成及び公開の全体的な流れを説明し、次いで、中央装置１及びカラオケ端末装置４の制御部１０、４０の具体的な処理手順を説明する。
【００８７】
図１５は、実施の形態２における混成動画コンテンツの生成及び公開方法を概念的に示した説明図である。以下、特に断りがない限り、ユーザは、カラオケシステムにログインして各種操作を行っているものとする。歌唱・撮像・集音及び投稿の処理は、実施の形態１と同様であるため、詳細な説明を省略し、動画の公開以降の説明を行う。
【００８８】
＜３．動画の公開・カラオケ配信設定＞
次いで、カラオケを終えた前記一のユーザは、ユーザ端末装置６又は遠隔操作装置５を用いてカラオケシステムの動画投稿サイトにログインする。以下、動画投稿サイトへのログインは、ユーザ端末装置６を用いて行うものとして説明する。ログインに成功すると、ユーザ端末装置６の表示部にユーザ専用のユーザ画面が表示される。なお、動画投稿サイトへのログインは、カラオケ店舗２外においてユーザ端末装置６を用いて行うのが通常であるが、カラオケ店舗２内で遠隔操作装置５を用いてログインしても良い。
【００８９】
図１６は、動画コンテンツをサムネイル表示したユーザ画面７の一例を示した模式図である。ユーザ画面７は、画面左側に表示されたユーザ情報表示部７１を含んで構成される。ユーザ情報表示部７１には、ログインした一のユーザのあだ名、例えば「○○さん」、該ユーザのプロフィール画像、カラオケ採点結果の全国順位、採点結果の最高得点などの情報が表示される。また、ユーザ情報表示部７１の上側には、「公開画面へ」ボタン７０が配されている。「公開画面へ」ボタン７０は、各ユーザによってアップロード乃至生成された動画コンテンツ、混成動画コンテンツが公開されている公開画面８へ遷移するためのボタンである。更に、ユーザ情報表示部７１の右側上部には、ユーザ画面７における表示内容を切り換えるためのハイパーリンク文字列７２が配されている。具体的には、ログインしているユーザ自身がアップロードした動画コンテンツをサムネイル表示した画面へ遷移させるハイパーリンク文字列「私の動画」、ログインユーザ自身が作成した混成動画コンテンツをサムネイル表示した画面へ遷移させるハイパーリンク文字列「私の混成動画」、混成動画コンテンツを作成するための素材として登録した動画コンテンツをサムネイル表示した画面へ遷移させるハイパーリンク文字列「私の混成動画素材」が横一列に表示されている。なお、図１６においては、ハイパーリンク文字列「私の動画」が選択された状態にある。更に、前記ハイパーリンク文字列の下方には、動画コンテンツ表示部７３が配されている。動画コンテンツ表示部７３は、ユーザ自身がアップロードした動画コンテンツの内容を示したサムネイル画像７３ａ、該動画コンテンツに係る歌唱を行った際に用いた楽曲の曲名及び歌手名７３ｂ、動画コンテンツに関する各種設定を行うための「設定」ボタン７３ｃ、動画コンテンツを削除するための「削除」ボタン７３ｄ、設定内容表示部７３ｅなどを含んで構成される。設定内容表示部７３ｅには、動画コンテンツの公開の可否、混成動画素材として動画コンテンツをカラオケ端末装置４へ配信することの可否等が表示される。
【００９０】
ここで、ユーザが「設定」ボタン７３ｃを操作した場合、ユーザ端末装置６の表示部に、動画コンテンツに係る各種設定を行うための設定画面が表示される。
【００９１】
図１７は、動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面７の一例を示した模式図である。設定画面は、ユーザ情報表示部７１と共に、各種設定を行う対象である動画コンテンツの内容を示した動画コンテンツ情報表示部７４、設定内容入力部７５を含んで構成される。設定内容入力部７５は、動画コンテンツの公開の可否を選択するためのラジオボタン７５ａ、動画コンテンツの保存期間を設定するためのラジオボタン７５ｂ、カラオケ配信の可否を選択するためのラジオボタン７５ｃ、動画コンテンツに対する自身のコメントを入力するテキスト入力フィールド７５ｄ、動画コンテンツが混成動画コンテンツの素材として利用されることを促すべく、後述の「パートナー募集」欄に、該動画コンテンツを掲載するか否かを選択するラジオボタン７５ｅ等を含み、構成されている。
【００９２】
ユーザは、設定内容入力部７５に、各種設定内容を入力する。ユーザ端末装置６は、動画コンテンツに対する各種設定内容を示したデータを中央装置１へ送信する。中央装置１は、ユーザ端末装置６から送信されたデータを受信し、各種設定内容を動画ＤＢ１３ｃの「公開可否」列、「カラオケ配信」列等に登録する。
【００９３】
図１８は、公開設定、カラオケ配信設定された動画コンテンツをサムネイル表示したユーザ画面７の一例を示した模式図である。特に、カラオケ配信を可に設定した場合、動画コンテンツ表示部７３に表示されたサムネイル画像７３ａ上に、混成素材登録アイコン７３ｆが表示される。混成素材登録アイコン７３ｆは、動画コンテンツを混成動画コンテンツの素材として選択するためのボタンである。
【００９４】
＜４．混成素材登録＞
ここで、図１５に示すように、あだ名が「××さん」である他のユーザが、ユーザ端末装置６を用いてカラオケシステムの動画投稿サイトへログインし、「公開画面へ」ボタン７０を操作した場合、中央装置１は、カラオケ端末装置４の表示部に公開画面８を表示させる。
【００９５】
図１９は、動画コンテンツが公開された公開画面８の一例を示した模式図である。公開画面８は、「ユーザ画面へ」ボタン８０、「パートナー募集」欄８１、「おすすめ動画」欄８２、「おすすめ混成動画」欄８３、動画再生画面８４を含み、構成されている。「ユーザ画面へ」ボタン８０は、ユーザ画面７へ遷移するためのボタンである。
「パートナー募集」欄８１は、動画コンテンツについて、「パートナー募集」欄へ掲載する旨の設定が行われている動画コンテンツのサムネイル画像８１ａが表示される。該サムネイル画像８１ａ上、例えばサムネイル画像８１ａの左下隅には、混成素材登録アイコン８１ｂが表示されている。また、サムネイル画像８１ａの右側には、動画コンテンツに係る曲名及び歌手名８１ｃが表示される。「パートナー募集」欄８１には、評価の高低に拘わらず、動画コンテンツのサムネイル画像８１ａが表示されるため、混成動画コンテンツに利用される可能性が高くなる。従って、混成動画コンテンツとしての利用を所望するユーザは、自身の動画コンテンツが、「パートナー募集」欄へ掲載されるように設定しておくと良い。
「おすすめ動画」欄８２には、各ユーザからの評価が高い動画コンテンツのサムネイル画像８２ａが表示される。また、カラオケ配信が許可されている動画コンテンツのサムネイル画像８２ａ上には、混成素材登録アイコン８２ｂが表示される。更に、サムネイル画像８２ａの下方には、曲名、歌手名、当該動画コンテンツを作成したユーザのあだ名が表示されている。
「おすすめ混成動画」欄８３については、後述する。
動画再生画面８４は、動画コンテンツに含まれる動画データを再生して得られる動画を表示する画面８４ａを有し、該画面８４ａ下には、動画コンテンツに係る曲名及び歌手名を表示する、曲名表示部８４ｂ、再生、一時停止、頭出し等を指示するための操作ボタン、タイムコードスライダ、音量調整スライダ等を含む操作部８４ｃが配されている。
【００９６】
ユーザは、視聴を所望する動画コンテンツのサムネイル画像８１ａ，８２ａを操作、例えばマウスでクリックすることによって、該動画コンテンツの再生を指示することができ、中央装置１は、該動画コンテンツと、該動画コンテンツに紐付けられた楽曲データをユーザ端末装置６へ送信し、ユーザ端末装置６は、中央装置１から送信された動画コンテンツに含まれる動画データ及び音声データと、楽曲データとを並行的に再生し、動画再生画面８４に表示させる。動画コンテンツ及び楽曲データを並行的に再生することによって、カラオケ店舗でユーザが歌唱している様子を再現することができる。
また、ユーザは、混成動画コンテンツの素材として所望する動画コンテンツのサムネイル画像８１ａ，８２ａ上に表示された混成素材登録アイコン８１ｂ，８２ｂを選択することによって、該動画コンテンツを混成動画コンテンツ素材として登録することができる。中央装置１は、混成素材登録アイコンが選択された場合、ログインしているユーザのユーザＩＤに対応付けて、混成素材として選択された動画コンテンツの動画ＩＤをユーザ情報ＤＢ１３ａの「私の混成動画素材」列に登録する。
【００９７】
図２０は、混成動画素材登録された動画コンテンツのサムネイル画像７６を表示したユーザ画面７の一例を示した模式図である。ユーザ画面７で、ハイパーリンク文字列「私の混成素材動画」が操作された場合、図２０に示すように、混成素材として登録された動画コンテンツのサムネイル画像７６が表示される。
【００９８】
＜５．カラオケ配信＞
そして、混成素材登録を終えた前記他のユーザ、即ちあだ名が「××さん」であるユーザは、カラオケ店舗２の個室２１に設置されたカラオケ端末装置４の遠隔操作装置５を用いてカラオケシステムにログインし、混成素材の動画コンテンツに係る楽曲を選曲する。中央装置１は、楽曲データと、混成素材の動画コンテンツに含まれる音声データとをカラオケ端末装置４へ送信する。
【００９９】
＜６．歌唱・撮像・集音・採点＞
カラオケ端末装置４は、中央装置１から送信された楽曲データ及び音声データを受信し、受信した楽曲データ及び音声データを並行的に再生する。該音声データは、混成動画素材に係る音声であるため、ここでユーザが歌唱を行うと、恰も二重唱を行っているかのような状態になり、ユーザは、その場にいないユーザと二重唱を楽しむことができると共に、混成動画コンテンツの創作を楽しむことができる。そして、カラオケ端末装置４は、該楽曲データ及び音声データが再生されている間に行われたユーザの歌唱をマイク４８ｅで集音すると共に、ユーザが歌唱している姿を撮像装置４６ｅにて撮像する。
【０１００】
＜７．投稿＞
歌唱終了後、歌唱者は、撮像及び集音して得た歌唱に係る動画データ及び音声データを中央装置１へ投稿、即ちアップロードするか否かを選択する。カラオケ端末装置４は、アップロードを指示された場合、歌唱に係る動画データ及び音声データをユーザＩＤ及び楽曲ＩＤと共に中央装置１へ送信する。中央装置１は、動画データ及び音声データと、混成素材として選択された動画データ及び音声データとを含む混成動画コンテンツデータを生成し、生成された混成動画コンテンツデータを、受信したユーザＩＤ及び楽曲ＩＤ等と共に混成動画ＤＢ１３ｄに登録する。また、該混成動画コンテンツデータに固有の混成動画ＩＤ、受信したユーザＩＤ等を、対応付けてユーザ情報ＤＢ１３ａに登録する。
【０１０１】
＜８．混成動画公開＞
次いで、カラオケを終えた前記他のユーザは、ユーザ端末装置６を用いて中央装置１にアクセスし、動画投稿サイトにログインする。ログインに成功すると、ユーザ端末装置６の表示部に一のユーザ専用のユーザ画面７が表示される。そして、ユーザ画面７で、ハイパーリンク文字列「私の混成動画」が操作された場合、前記他のユーザによって作成された混成動画コンテンツのサムネイル画像が表示される。
【０１０２】
図２１は、混成動画コンテンツをサムネイル表示したユーザ画面７の一例を示した模式図である。ユーザ画面７には、図２１に示すように、混成動画コンテンツ表示部７７が表示される。混成動画コンテンツ表示部７７には、ユーザ自身がアップロードして作成した混成動画コンテンツの内容を示したサムネイル画像７７ａ、該混成動画コンテンツに係る歌唱を行った際に用いた楽曲の曲名及び歌手名７７ｂ、混成動画コンテンツに関する各種設定を行うための「設定」ボタン７７ｃ、混成動画コンテンツを削除するための「削除」ボタン７７ｄ、設定内容表示部７７ｅ、混成動画コンテンツの素材である動画コンテンツを作成したユーザのプロフィール画像７７ｆなどを含んで構成される。設定内容表示部７７ｅには、混成動画コンテンツの公開の可否等が表示される。
【０１０３】
ここで、ユーザが「設定」ボタン７７ｃを操作した場合、ユーザ端末装置６の表示部に、混成動画コンテンツに係る各種設定を行うための設定画面が表示される。
【０１０４】
図２２は、混成動画コンテンツに係る各種設定を行うための設定画面を含むユーザ画面７の一例を示した模式図である。設定画面は、ユーザ情報表示部７１と共に、各種設定を行う対象である混成動画コンテンツの内容を示した混成動画コンテンツ情報表示部７８、設定内容入力部７９を含んで構成される。設定内容入力部７９は、混成動画コンテンツの公開の可否を選択するためのラジオボタン７９ａ、混成動画コンテンツの保存期間を設定するためのラジオボタン７９ｂ、混成動画コンテンツに対する自身のコメントを入力するテキスト入力フィールド７９ｃ等を含み、構成されている。
【０１０５】
図２３は、公開設定された混成動画コンテンツをサムネイル表示した公開画面８の一例を示した模式図である。「おすすめ混成動画」欄８３には、構成設定された混成動画コンテンツのサムネイル画像８３ａが表示される。ここで、ユーザは、視聴を所望する混成動画コンテンツのサムネイル画像８３ａを操作、例えばマウスでクリックすることによって、該混成動画コンテンツの再生を指示することができ、中央装置１は、該混成動画コンテンツ、楽曲データ及び採点結果をユーザ端末装置６へ送信し、ユーザ端末装置６は、中央装置１から送信された混成動画コンテンツに含まれる２組の動画データ、採点結果が最も高い音声データ、並びに楽曲データを並行的に再生する。つまり、二人のユーザが得意なパートを交互に歌唱しているかのような動画及び音声が再生される。また、ユーザは、図示しない拡大再生ボタンを表示することによって、混成動画コンテンツを拡大して再生し、より詳細な情報を表示させることができる。
【０１０６】
図２４及び図２５は、混成動画コンテンツの拡大再生画面が表示された公開画面８の一例を示した模式図である。拡大再生画面８６は、混成動画コンテンツを構成する一方の動画コンテンツが再生される画面部分８６ａと、他方の動画コンテンツが再生される画面部分８６ａとが横方向に並置されてなり、画面部分８６ａの上方には、動画コンテンツ又は混成動画コンテンツを検索するための検索条件入力部８５が配され、画面部分８６ａの下方には、曲名表示部、再生、一時停止、頭出し等を指示するための操作ボタン、タイムコードスライダ、音量調整スライダ等を含む操作部８６ｃが配されている。また、２つの動画コンテンツの音量を選択的に調整すべく、音量調整対象を選択するための音調調整対象選択部８６ｄが配されている。また、公開画面８には、混成動画コンテンツと同一の楽曲を用いて作成された動画コンテンツを表示した楽曲関連動画コンテンツ表示部８６ｅ、混成動画コンテンツに対する評価を行うための評価入力部８６ｆ、混成動画コンテンツに対するコメントが表示されたコメント表示部８６ｇ、コメントを入力するテキストフィールド８６ｈ、混成動画コンテンツを構成する各動画コンテンツを生成したユーザを表示したユーザ情報表示部８６ｉ、混成動画コンテンツに付与されたタグ情報を表示するタグ表示部８６ｊ、混成動画コンテンツの作成に用いられた楽曲の情報を表示する曲情報表示部８６ｋなどが表示される。
【０１０７】
また、ユーザは、拡大再生画面８６の画面部分８６ａを操作、例えばマウスにてクリックすることによって、該画面部分８６ａに表示されていた一の動画コンテンツのみを拡大して再生する部分拡大再生画面８７を表示させることができる。
【０１０８】
図２６及び図２７は、部分拡大再生画面８７が表示された公開画面８の一例を示した模式図である。部分拡大再生画面８７は、一の動画コンテンツが再生される画面を有し、該画面の下方には、曲名表示部、再生、一時停止、頭出し等を指示するための操作ボタン、タイムコードスライダ、音量調整スライダ等を含む操作部８７ｂが配されている。また、公開画面８には、一の動画コンテンツと同一の楽曲を用いて作成された動画コンテンツを表示した楽曲関連動画コンテンツ表示部８７ｃ、一の動画コンテンツに対する評価を行うための評価入力部８７ｄ、一の動画コンテンツと同一の楽曲を用いて作成された混成動画コンテンツを表示した楽曲関連混成動画コンテンツ表示部８７ｅ、一の動画コンテンツに対するコメントが表示されたコメント表示部８７ｆ、コメントを入力するテキストフィールド８７ｇ、一の動画コンテンツを構成する各動画コンテンツを生成したユーザを表示したユーザ情報表示部８７ｈなどが表示される。
【０１０９】
次に、混成動画コンテンツの生成及び公開に係る制御部１０、４０の処理手順を説明する。以下の処理ではユーザがカラオケシステムにログインしている状態を前提として処理内容の要部を説明する。なお、歌唱に係る動画コンテンツの生成及び登録に係る制御部の処理手順は、図９及び図１０に示した処理手順と同様であるため、詳細な説明は省略する。
【０１１０】
図２８は、動画コンテンツの公開設定、カラオケ配信設定に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、図１６に示すようにユーザ画面７をユーザ端末装置６の表示部に表示させる（ステップＳ５１）。より具体的には、制御部１０は、ユーザ画面７を表示するための画像データと、ログインしているユーザのユーザ情報とをユーザ端末装置６へ送信し、ユーザ端末装置６は、中央装置１から送信された画面データ及びユーザ情報に基づいてユーザ画面７を構築し、表示部に表示させる。以下、中央装置１からユーザ端末装置６の表示部に各種画面を表示させる処理の内容は同様であるため、以下、省略する。
【０１１１】
次いで、制御部１０は、私の動画、即ちログインしているユーザＩＤに基づいて中央装置１にアップロードされた動画を特定する（ステップＳ５２）。具体的には、ログインしているユーザのユーザＩＤに対応付けて、ユーザ情報ＤＢ１３ａの「私の動画」列に登録されている動画ＩＤを読み出すことによって、私の動画を特定する。
【０１１２】
そして、制御部１０は、私の動画のサムネイル画像７３ａ、該動画に関する設定を行うための「設定」ボタン７３ｃ、及び該動画の情報等をユーザ画面７に一覧表示させる（ステップＳ５３）。
【０１１３】
次いで、制御部１０は、「設定」ボタン７３ｃが操作されたか否かを判定する（ステップＳ５４）。具体的には、ユーザ端末装置６から、特定の動画に対応する「設定」ボタン７３ｃが操作されたことを示すデータが中央装置１へ送信された場合、中央装置１の制御部１０は、ユーザ端末装置６から送信された前記データを受信し、該データに基づいて、「設定」ボタン７３ｃが操作されたか否かを判定する。
【０１１４】
「設定」ボタン７３ｃが操作されたと判定した場合（ステップＳ５４：ＹＥＳ）、制御部１０は、設定画面をユーザ端末装置６の表示部に表示させる（ステップＳ５５）。そして、制御部１０は、公開設定及びカラオケ配信設定を受け付ける（ステップＳ５６）。具体的には、制御部１０は、ユーザ端末装置６から中央装置１へ送信された公開可否情報、カラオケ配信許可情報等を、第２通信部１６を介して受信する。そして、制御部１０は、ステップＳ５６で受け付けた公開可否情報、カラオケ配信可否情報等を動画ＤＢ１３ｃに登録する（ステップＳ５７）。
【０１１５】
ステップＳ５７の処理を終えた後、又はステップＳ５４で「設定」ボタン７３ｃが操作されていないと判定した場合（ステップＳ５４：ＮＯ）、制御部１０は、カラオケ配信が許可されている動画データを特定し、カラオケ配信が許可されている動画のサムネイル画像７３ａに、混成素材登録アイコン７３ｆを表示させる（ステップＳ５８）。
【０１１６】
次いで、制御部１０は、混成素材登録アイコン７３ｆが操作されたか否かを判定する（ステップＳ５９）。具体的には、ユーザ端末装置６から、特定の動画に対応する混成素材登録アイコン７３ｆが操作されたことを示す混成素材指定情報が中央装置１へ送信され、中央装置１の制御部１０は、ユーザ端末装置６から送信された混成素材指定情報を、第２通信部１６を介して受信する。
【０１１７】
混成素材登録アイコン７３ｆが操作されていないと判定した場合（ステップＳ５９：ＮＯ）、制御部１０は、処理を終える。混成素材登録アイコン７３ｆが操作されたと判定した場合（ステップＳ５９：ＹＥＳ）、制御部１０は、混成素材として選択された動画をユーザ情報ＤＢ１３ａに登録、つまり該動画の動画ＩＤをユーザ情報ＤＢ１３ａの「私の混成動画素材」列に登録し（ステップＳ６０）、処理を終える。
【０１１８】
図２９は、動画コンテンツの公開に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、図１９に示すように、公開画面８をユーザ端末装置６の表示部に表示させる（ステップＳ７１）。そして、制御部１０は、全ユーザからアップロードされた動画の内、公開が許可された動画を特定する（ステップＳ７２）。そして、制御部１０は、公開が許可された動画のサムネイル画像８１ａ，８２ａ、及び該動画の情報を公開する（ステップＳ７３）。
【０１１９】
次いで、制御部１０は、カラオケ配信が許可されている動画データを特定し、カラオケ配信が許可されている動画のサムネイル画像８１ａ，８２ａに、混成素材登録アイコン８１ｂ，８２ｂを表示させる（ステップＳ７４）。
【０１２０】
次いで、制御部１０は、混成素材登録アイコン８１ｂ，８２ｂが操作されたか否かを判定する（ステップＳ７５）。混成素材登録アイコン８１ｂ，８２ｂが操作されたと判定した場合（ステップＳ７５：ＹＥＳ）、制御部１０は、混成素材として選択された動画をユーザ情報ＤＢ１３ａに登録、つまり該動画の動画ＩＤをユーザ情報ＤＢ１３ａの「私の混成動画素材」列に登録する（ステップＳ７６）。
【０１２１】
ステップＳ７６の処理を終えた後、又はステップＳ７５で混成素材登録アイコン８１ｂ，８２ｂが操作されていないと判定した場合（ステップＳ７５：ＮＯ）、制御部１０は、動画コンテンツデータの再生操作があったか否かを判定する（ステップＳ７７）。再生操作が無いと判定した場合（ステップＳ７７：ＮＯ）、制御部１０は、処理を終える。
【０１２２】
再生操作があったと判定した場合（ステップＳ７７：ＹＥＳ）、制御部１０は、再生対象の動画コンテンツデータを動画ＤＢ１３ｃから読み出し、また、楽曲ＤＢ１３ｂから該動画コンテンツに紐付けられた楽曲データを読み出し、読み出された動画コンテンツデータに含まれる動画データ及び音声データ、並びに楽曲データを並行的に再生し（ステップＳ７８）、処理を終える。
【０１２３】
図３０及び図３１は、混成動画コンテンツの生成及び登録に係る制御部１０、４０の処理手順を示すフローチャートである。カラオケ端末装置４の制御部４０は、遠隔操作装置５にて楽曲を受け付け（ステップＳ９１）、ユーザＩＤ、及び受け付けた楽曲に係る楽曲ＩＤを含む楽曲要求データを、通信部４４を介して中央装置１へ送信する（ステップＳ９２）。
【０１２４】
中央装置１の制御部１０は、カラオケ端末装置４から送信された楽曲要求データを、第１通信部１５を介して受信し（ステップＳ９３）、受信した楽曲要求データに含まれるユーザＩＤ及び楽曲ＩＤに対応する混成動画素材の音声データを選択する（ステップＳ９４）。つまり、制御部１０は、ユーザＩＤに対応付けて「私の混成動画素材」列に登録されている動画ＩＤより、混成動画素材として登録されている動画コンテンツを特定し、登録されている動画コンテンツの内、受信した楽曲ＩＤと同一の楽曲ＩＤが対応付けられているものを特定する。
そして、制御部１０は、特定された楽曲データ及び音声データを、第１通信部１５を介してカラオケ端末装置４へ送信する（ステップＳ９５）。なお、ステップＳ９５では、動画コンテンツデータを構成する音声データのみを送信する例を説明したが、動画データ及び音声データを含む動画コンテンツデータを送信するように構成しても良い。
【０１２５】
カラオケ端末装置４の制御部４０は、中央装置１から送信された楽曲データ及び音声データを、通信部４４を介して受信する（ステップＳ９６）。そして、制御部４０は、受信した楽曲データ及び音声データを並行的に再生する（ステップＳ９７）。具体的には、制御部４０は、楽曲データを音源４８ｂに与え、音声データを音声デコーダに与える。音源４８ｂは、楽曲データに係る伴奏音を音声ミキサ４８ｄに与え、音声デコーダ４８ｃは、音声データを復号し、復号された音声データを音声ミキサ４８ｄに与える。音声ミキサ４８ｄは、音源４８ｂ及び音声デコーダ４８ｃからそれぞれ与えられた伴奏音及び音声を合成し、合成して得た音声データをスピーカ４８ｆへ出力する。従って、スピーカ４８ｆから、カラオケの伴奏に合わせて、混成動画素材に係る音声が再生される。
【０１２６】
次いで、制御部４０は、楽曲データを再生している間に行われた歌唱の動画を入力し（ステップＳ９８）、あわせて歌唱の音声を入力する（ステップＳ９９）。
マイク４８ｅから出力された音声データは、音声ミキサ４８ｄに入力され、音声ミキサ４８ｄは、カラオケの伴奏音と、混成素材動画に係る音声と、マイク４８ｅに入力された音声とを合成し、合成して得た音声データをスピーカへ出力する。従って、カラオケの伴奏に合わせて、二人のユーザがデュエット歌唱しているような状態になる。
【０１２７】
次いで、制御部４０は、入力された音声データを採点部４７に与えて、該音声データに係る歌唱に対する逐次採点を行う（ステップＳ１００）。
【０１２８】
次いで、制御部４０は、楽曲データの再生を終了する否かを判定する（ステップＳ１０１）。再生を終了しないと判定した場合（ステップＳ１０１：ＮＯ）、制御部４０は、処理をステップＳ９７へ戻す。再生を終了すると判定した場合（ステップＳ１０１：ＹＥＳ）、制御部４０は、遠隔操作装置５の操作状態を監視し、入力された動画データ及び音声データをアップロードするか否かを判定する（ステップＳ１０２）。アップロードしないと判定した場合（ステップＳ１０２：ＮＯ）、制御部４０は処理を終える。
【０１２９】
アップロードすると判定した場合（ステップＳ１０２：ＹＥＳ）、制御部４０は、ユーザＩＤ、楽曲ＩＤ、採点結果、動画データ及び音声データを、通信部４４を介して中央装置１へ送信する（ステップＳ１０３）。
【０１３０】
中央装置１の制御部１０は、カラオケ端末装置４から送信されたユーザＩＤ、楽曲ＩＤ、採点結果、動画データ及び音声データを、第１通信部１５にて受信する（ステップＳ１０４）。そして、制御部１０は、受信した動画データ及び音声データと、各音声データの採点結果と、混成素材として選択された動画データ及び音声データとを含む混成動画コンテンツデータを生成し、生成された混成動画コンテンツデータを、受信したユーザＩＤ、楽曲ＩＤ等と共に混成動画ＤＢ１３ｄに登録し、また混成動画ＤＢ１３ｄへの登録時に発行した混成動画ＩＤをユーザ情報ＤＢ１３ａに登録し（ステップＳ１０５）、処理を終える。
【０１３１】
図３２は、混成動画コンテンツの公開設定に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、図２１に示すように、ユーザ画面７をユーザ端末装置６の表示部に表示させる（ステップＳ１１１）。
【０１３２】
次いで、制御部１０は、私の混成動画、即ちログインしているユーザによって作成された混成動画を特定する（ステップＳ１１２）。具体的には、ログインしているユーザのユーザＩＤに対応付けて、ユーザ情報ＤＢ１３ａの「私の混成動画」列に登録されている混成動画ＩＤを読み出すことによって、私の動画を特定する。
【０１３３】
そして、制御部１０は、私の混成動画コンテンツサムネイル画像７７ａ、該混成動画に関する設定を行うための「設定」ボタン７７ｃ、及び該混成動画コンテンツ情報等をユーザ画面７に一覧表示させる（ステップＳ１１３）。
【０１３４】
次いで、制御部１０は、「設定」ボタン７７ｃが操作されたか否かを判定する（ステップＳ１１４）。具体的には、ユーザ端末装置６から、特定の動画に対応する「設定」ボタン７７ｃが操作されたことを示すデータが中央装置１へ送信され、中央装置１の制御部１０は、ユーザ端末装置６から送信された前記データを受信し、該データに基づいて、「設定」ボタン７７ｃが操作されたか否かを判定する。
【０１３５】
「設定」ボタン７７ｃが操作されていないと判定した場合（ステップＳ１１４：ＮＯ）、制御部１０は、処理を終える。「設定」ボタン７７ｃが操作されたと判定した場合（ステップＳ１１４：ＹＥＳ）、制御部１０は、図２２に示すように、設定画面の混成動画コンテンツ情報表示部７８、設定内容入力部７９をユーザ端末装置６の表示部に表示させる（ステップＳ１１５）。そして、制御部１０は、公開設定を受け付ける（ステップＳ１１６）。具体的には、ユーザ端末装置６に入力され、中央装置１へ送信された公開可否情報を、第２通信部１６を介して受信する。そして、制御部１０は、ステップＳ１１６で受け付けた公開可否情報、カラオケ配信可否情報等を動画ＤＢ１３ｃに登録し（ステップＳ１１７）、処理を終える。
【０１３６】
図３３は、混成動画コンテンツの公開に係る制御部１０の処理手順を示すフローチャートである。中央装置１の制御部１０は、公開画面８をユーザ端末装置６の表示部に表示させる（ステップＳ１３１）。そして、制御部１０は、全ユーザによって生成された混成動画コンテンツの内、公開が許可された混成動画を特定する（ステップＳ１３２）。そして、制御部１０は、公開が許可された混成動画コンテンツのサムネイル画像８３ａ、及び該動画の情報を一覧表示公開する（ステップＳ１３３）。
【０１３７】
次いで、制御部１０は、混成動画コンテンツの再生操作があったか否かを判定する（ステップＳ１３４）。再生操作があったと判定した場合（ステップＳ１３４：ＹＥＳ）、制御部１０は、混成動画コンテンツ及び楽曲データをユーザ端末装置４へ送信し、該ユーザ端末装置に混成動画コンテンツに含まれる２組の動画データを並行的に再生させる（ステップＳ１３５）。
【０１３８】
また、制御部１０は、特定の再生区分毎に、混成動画コンテンツに含まれる複数の採点結果を比較し、採点結果が最も高い音声データと、楽曲データとを、並行的に再生させ（ステップＳ１３６）、処理を終える。
【０１３９】
このように構成された実施の形態２に係るカラオケシステム、中央装置１及びコンテンツデータ生成方法にあっては、自己又は他人の歌唱に係る複数の映像データ及び音声データを組み合わせたメドレーリレーのコンテンツの創作及び公開を可能にし、娯楽性を向上させることができる。
【０１４０】
また、中央装置１の動画ＤＢ１３ｃに登録されている複数の動画コンテンツの中から、混成動画コンテンツの素材として、一の動画コンテンツを選択し、混成動画コンテンツを作成することができるため、動画コンテンツを創作する自由度が高く、娯楽性が向上する。
【０１４１】
更に、一のユーザが作成した動画コンテンツは、動画閲覧サイトに公開され、他のユーザは公開されている動画閲覧サイトから、混成動画コンテンツの素材としての動画コンテンツを選択することができるため、自分で作成した動画コンテンツのみを用いて混成動画コンテンツを作成する場合に比べて、動画コンテンツを創作する自由度が高く、娯楽性が向上する。
【０１４２】
更にまた、動画コンテンツの動画投稿サイトへの公開の可否、動画コンテンツのカラオケ配信の可否を選択することができるため、動画コンテンツを公開したいが、カラオケ配信されることは避けたい等、動画投稿サイトに対する多用なニーズに対応することができる。
【０１４３】
更にまた、混成動画コンテンツを構成する各動画コンテンツの音声データの音量を各別に変更可能である。従って、コンテンツデータを視聴する際の娯楽性が向上する。
【０１４４】
なお、実施の形態２では、混成動画コンテンツを中央装置側で生成する例を説明したが、混成動画コンテンツをカラオケ端末装置側で生成し、中央装置へ送信するように構成しても良い。
【０１４５】
また、２つの動画コンテンツを組み合わせてなる混成動画コンテンツを生成する例を説明したが、３つ以上の動画コンテンツを組み合わせて混成動画コンテンツを生成しても良い。また、複数の動画コンテンツに係る動画の配列方法も特に限定されない。また、複数の動画コンテンツに含まれる音声データを並行的に再生しても良いが、選択的に再生しても良い。
【０１４６】
更に、歌唱の映像及び音声を組み合わせてなる混成コンテンツの素材として動画を説明したが、映像としてスライドショー形式で時系列順に切り替わる映像、静止画であっても良い。
【０１４７】
更にまた、混成動画コンテンツの素材である動画コンテンツとして、ユーザが歌唱している姿を撮像したものを利用しているが、予め用意した動画コンテンツを中央装置の内部記憶装置に記憶されておき、該動画コンテンツを用いて、混成動画コンテンツを生成するようにしても良い。
【０１４８】
更にまた、混成動画コンテンツの元になる動画コンテンツをユーザが選択する構成を例示したが、中央装置がランダムに選択し、カラオケ端末装置へ配信するように構成しても良い。
【０１４９】
今回開示された実施の形態はすべての点で例示であって、制限的なものではないと考えられるべきである。本発明の範囲は、上記した意味ではなく、特許請求の範囲によって示され、特許請求の範囲と均等の意味及び範囲内でのすべての変更が含まれることが意図される。
【符号の説明】
【０１５０】
１ 中央装置
２ カラオケ店舗
４ カラオケ端末装置
５ 遠隔操作装置
６ ユーザ端末装置
１０、４０ 制御部
１２，４２ ＲＡＭ
１３ 内部記憶装置
１３ａ ユーザ情報ＤＢ
１３ｂ 楽曲ＤＢ
１３ｃ 動画ＤＢ
１３ｄ 混成動画ＤＢ
１４ 外部記憶装置
１５ 第１通信部
１６ 第２通信部
４３ 記憶装置
４４ 通信部
４６ａ 映像エンコーダ
４６ｂ 映像制御回路
４６ｃ 映像デコーダ
４６ｄ 映像ミキサ
４６ｅ 撮像装置
４６ｆ 表示装置
４７ 採点部
４８ａ 音声エンコーダ
４８ｂ 音源
４８ｃ 音声デコーダ
４８ｄ 音声ミキサ
４８ｅ マイク
４８ｆ スピーカ
Ｎ１，Ｎ２ 通信網
【特許請求の範囲】
【請求項１】
カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステムにおいて、
前記カラオケ端末装置は、
前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の映像が入力される映像入力手段と、
前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の音声が入力される音声入力手段と、
前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データを前記中央装置へ送信する送信手段と
を備え、
前記中央装置は、
前記カラオケ端末装置から送信された映像データ及び音声データ、並びに前記歌唱の音声を異なる複数の再生時点で評価した評価結果を受信する手段と、
受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、
該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、
該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、
該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段と
を備え、
前記公開手段は、
各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてある
ことを特徴とするカラオケシステム。
【請求項２】
前記カラオケ端末装置は、
前記音声入力手段にて入力された音声に係る音声データを異なる複数の再生時点で評価する評価手段を備え、
前記送信手段は、前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データ、並びに前記評価手段による評価結果を前記中央装置へ送信するようにしてある
ことを特徴とする請求項１に記載のカラオケシステム。
【請求項３】
前記公開手段は、
各映像データに係る映像が並置され、各映像データに係る音声が選択的に再生するようにしてある
ことを特徴とする請求項１又は請求項２に記載のカラオケシステム。
【請求項４】
前記公開手段は、
前記再生時点毎に、評価結果が最も高い音声データを選択的に再生するようにしてある
ことを特徴とする請求項１乃至請求項３のいずれか一つに記載のカラオケシステム。
【請求項５】
カラオケ曲データを送信する中央装置において、
前記端末装置から送信された歌唱に係る映像データ及び音声データ並びに評価結果を受信する手段と、
受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、
該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、
該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、
該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段と
を備え、
前記公開手段は、
各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてあることを特徴とする中央装置。
【請求項６】
カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを用いて、歌唱に係るコンテンツデータを生成するコンテンツデータ生成方法において、
前記カラオケ端末装置は、
カラオケ曲データを再生している間に行われた歌唱の映像及び音声が入力され、
入力された音声に係る音声データを異なる複数の再生時点で評価し、
入力された映像及び音声に係る映像データ及び音声データ、並びに評価結果を前記中央装置へ送信し、
前記中央装置は、
前記カラオケ端末装置から送信された映像データ及び音声データ並びに評価結果を受信し、
受信した音声データ、映像データ及び評価結果を複数組、対応付けて記憶し、
複数組の映像データ及び音声データを選択し、
選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成し、
生成したコンテンツデータを、該コンテンツデータを構成する各音声データに対する評価結果に応じて、一の音声データが選択的に再生されるように、視聴可能に公開する
ことを特徴とするコンテンツデータ生成方法。
【請求項１】
カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを備えるカラオケシステムにおいて、
前記カラオケ端末装置は、
前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の映像が入力される映像入力手段と、
前記再生手段にてカラオケ曲データを再生している間に行われた歌唱の音声が入力される音声入力手段と、
前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データを前記中央装置へ送信する送信手段と
を備え、
前記中央装置は、
前記カラオケ端末装置から送信された映像データ及び音声データ、並びに前記歌唱の音声を異なる複数の再生時点で評価した評価結果を受信する手段と、
受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、
該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、
該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、
該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段と
を備え、
前記公開手段は、
各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてある
ことを特徴とするカラオケシステム。
【請求項２】
前記カラオケ端末装置は、
前記音声入力手段にて入力された音声に係る音声データを異なる複数の再生時点で評価する評価手段を備え、
前記送信手段は、前記映像入力手段及び音声入力手段にて入力された映像及び音声に係る映像データ及び音声データ、並びに前記評価手段による評価結果を前記中央装置へ送信するようにしてある
ことを特徴とする請求項１に記載のカラオケシステム。
【請求項３】
前記公開手段は、
各映像データに係る映像が並置され、各映像データに係る音声が選択的に再生するようにしてある
ことを特徴とする請求項１又は請求項２に記載のカラオケシステム。
【請求項４】
前記公開手段は、
前記再生時点毎に、評価結果が最も高い音声データを選択的に再生するようにしてある
ことを特徴とする請求項１乃至請求項３のいずれか一つに記載のカラオケシステム。
【請求項５】
カラオケ曲データを送信する中央装置において、
前記端末装置から送信された歌唱に係る映像データ及び音声データ並びに評価結果を受信する手段と、
受信した映像データ、音声データ及び評価結果を複数組、対応付けて記憶する記憶手段と、
該記憶手段が記憶している複数組の映像データ及び音声データを選択する選択手段と、
該選択手段にて選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成する生成手段と、
該生成手段にて生成したコンテンツデータを視聴可能に公開する公開手段と
を備え、
前記公開手段は、
各音声データに対する評価結果に応じて、一の音声データを選択的に再生するようにしてあることを特徴とする中央装置。
【請求項６】
カラオケ曲データを送信する中央装置と、該中央装置から送信されたカラオケ曲データを受信し、再生するカラオケ端末装置とを用いて、歌唱に係るコンテンツデータを生成するコンテンツデータ生成方法において、
前記カラオケ端末装置は、
カラオケ曲データを再生している間に行われた歌唱の映像及び音声が入力され、
入力された音声に係る音声データを異なる複数の再生時点で評価し、
入力された映像及び音声に係る映像データ及び音声データ、並びに評価結果を前記中央装置へ送信し、
前記中央装置は、
前記カラオケ端末装置から送信された映像データ及び音声データ並びに評価結果を受信し、
受信した音声データ、映像データ及び評価結果を複数組、対応付けて記憶し、
複数組の映像データ及び音声データを選択し、
選択された複数組の映像データ及び音声データを組み合わせたコンテンツデータを生成し、
生成したコンテンツデータを、該コンテンツデータを構成する各音声データに対する評価結果に応じて、一の音声データが選択的に再生されるように、視聴可能に公開する
ことを特徴とするコンテンツデータ生成方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図１７】
【図１８】
【図１９】
【図２０】
【図２１】
【図２２】
【図２３】
【図２４】
【図２５】
【図２６】
【図２７】
【図２８】
【図２９】
【図３０】
【図３１】
【図３２】
【図３３】
【公開番号】特開２０１１−５９６２０（Ｐ２０１１−５９６２０Ａ）
【公開日】平成２３年３月２４日（２０１１．３．２４）
【国際特許分類】
【出願番号】特願２００９−２１２３４６（Ｐ２００９−２１２３４６）
【出願日】平成２１年９月１４日（２００９．９．１４）
【出願人】（３９６００４８３３）株式会社エクシング (394)
【Ｆターム（参考）】
【公開日】平成２３年３月２４日（２０１１．３．２４）
【国際特許分類】
【出願日】平成２１年９月１４日（２００９．９．１４）
【出願人】（３９６００４８３３）株式会社エクシング (394)
【Ｆターム（参考）】
[ Back to top ]