アミューズメントシステム
【課題】歌を歌うユーザと、他のユーザとが一緒に楽しむことができるアミューズメントシステムを提供することを課題とする。
【解決手段】マイク４は、ユーザ１１の音声を入力して音声データ４Ａを生成する。リモートコントローラ５は、ユーザ１２の操作に応じて、ユーザ１１のパフォーマンスの演出内容を指示する演出指示情報６４を生成する。ライブデータ生成部２４は、楽曲データ６１と、音声データ４Ａと、会場データ６２を用いて、仮想的なライブの様子を示すライブデータ６３を作成する。ライブデータ６３が再生されることにより、ユーザ１１のパフォーマンスの状況を示す映像と音声とが、モニタ３から出力される。ライブデータ作成部２４は、演出指示情報６４に基づいて、ライブデータ６３の作成条件を変更する。これにより、ユーザ１２の演出指示が反映された映像及び音声が、モニタ３から出力される。
【解決手段】マイク４は、ユーザ１１の音声を入力して音声データ４Ａを生成する。リモートコントローラ５は、ユーザ１２の操作に応じて、ユーザ１１のパフォーマンスの演出内容を指示する演出指示情報６４を生成する。ライブデータ生成部２４は、楽曲データ６１と、音声データ４Ａと、会場データ６２を用いて、仮想的なライブの様子を示すライブデータ６３を作成する。ライブデータ６３が再生されることにより、ユーザ１１のパフォーマンスの状況を示す映像と音声とが、モニタ３から出力される。ライブデータ作成部２４は、演出指示情報６４に基づいて、ライブデータ６３の作成条件を変更する。これにより、ユーザ１２の演出指示が反映された映像及び音声が、モニタ３から出力される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ユーザが再生される楽曲データに合わせて歌を歌うことができるアミューズメントシステムに関する。
【背景技術】
【０００２】
カラオケでは、ユーザが選択した楽曲の演奏に合わせて歌を歌う形式が一般的である。カラオケ装置のモニタには、ユーザが選択した楽曲の歌詞が、楽曲の演奏の進行に合わせて表示される。これにより、ユーザは、選択した楽曲の歌詞を全て覚えていなくても、カラオケを楽しむことができる。モニタに表示される歌詞の背景には、歌を歌うキャラクタの映像や、楽曲のイメージに合わせた映像などが表示される。
【０００３】
カラオケは、家族あるいは友人同士などの少人数のグループで楽しむことが多い。カラオケを盛り上げるために、歌を歌うユーザに照明をあてることができるカラオケ装置が、特許文献１に開示されている。
【０００４】
特許文献１に係るカラオケ装置は、送信器と、カラオケ端末機と、照明器具とを備える。カラオケ端末機は、ユーザが選択した楽曲を再生する。ユーザは、再生される楽曲に合わせて、送信器を持ちながら歌を歌う。送信器は、照明器具の照射方向を制御する姿勢制御信号を照明器具に送信する。照明器具は、照射方向を姿勢制御信号の飛来方向に変更する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平１１−１３４６１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
カラオケでは、歌を歌うユーザ以外の他のユーザは、歌を聴いたり、次に歌う楽曲を探したりすることが多い。つまり、カラオケを少人数のグループで楽しむ場合であっても、グループのメンバー全員がカラオケを楽しむことはできない。特許文献１に係るカラオケ装置は、歌を歌うユーザが送信器を保持することにより、歌うユーザに照明をあてることができる。しかし、他のユーザは、照明を操作することができないため、カラオケに積極的に参加することはできない。
【０００７】
そこで、本発明は、前記問題点に鑑み、歌を歌うユーザと、他のユーザとが一緒に楽しむことができるアミューズメントシステムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、請求項１記載の発明は、選択された楽曲データを再生する本体装置と、第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、を備え、前記本体装置は、前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部と、前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観客の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部と、前記パフォーマンス状況データと前記反応データとを再生する再生部と、を備える。
【０００９】
請求項２記載の発明は、請求項１に記載のアミューズメントシステムにおいて、前記演出評価部は、前記パフォーマンス状況データが再生される期間に生成された全ての演出指示情報に基づいて、前記第１ユーザのパフォーマンスの演出を評価して全体評価情報を生成し、前記全体評価情報に対応する反応データの生成を指示する。
【００１０】
請求項３記載の発明は、請求項１または請求項２に記載のアミューズメントシステムにおいて、前記演出評価部は、前記本体装置に前記演出指示情報が入力されるたびに、前記第１ユーザのパフォーマンスの演出を評価して個別評価情報を生成し、前記個別評価情報に対応する反応データの生成を指示する。
【００１１】
請求項４記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記第２ユーザの音声を入力して音声データを生成する音声入力部と、前記パフォーマンス状況データの再生中に前記第２ユーザが読み上げるべき内容を表示し、前記音声データを前記演出指示情報として前記本体装置に出力する演出内容指示部と、を備え、前記パフォーマンス状況データ生成部は、前記音声データを含むパフォーマンス状況データを生成し、前記演出評価部は、前記音声データの入力が終了したタイミングに基づいて、前記パフォーマンスの演出を評価する。
【００１２】
請求項５記載の発明は、請求項４に記載のアミューズメントシステムにおいて、前記演出評価部は、前記音声データに対する音声認識処理を行って前記第２ユーザが前記音声入力部に入力した音声フレーズを特定し、前記音声フレーズと前記内容とを比較することにより、前記パフォーマンスの演出を評価する。
【００１３】
請求項６記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記第２ユーザにより選択された花火の種類と、前記選択された花火の打ち上げとを指示する打ち上げ情報を生成し、前記打ち上げ情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、を備え、前記パフォーマンス状況データ生成部は、前記打ち上げ情報に基づいて、前記第１ユーザのパフォーマンスを演出する花火が打ち上げられる様子を示すパフォーマンス状況データを生成し、
前記演出評価部は、前記打ち上げ情報に基づいて、前記パフォーマンスの演出を評価する。
【００１４】
請求項７記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記楽曲データは、楽曲の演奏パートのそれぞれに対応する複数のパートデータにより構成され、前記演出指示装置は、各パート楽曲データの再生条件を指定した再生条件情報を前記第２ユーザの操作に応じて生成し、前記再生条件情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、を備え、前記パフォーマンス状況データ生成部は、前記再生条件情報に基づいて、パート楽曲データの再生時の条件を変更したパフォーマンス状況データを生成し、前記演出評価部は、前記再生条件情報に基づいて、前記パフォーマンスの演出を評価する。
【００１５】
請求項８記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記第１ユーザのパフォーマンスを演出する照明の照射対象を示す照明対象情報を前記第２ユーザの操作に応じて生成し、前記照明対象情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、を備え、前記パフォーマンス状況データ生成部は、前記照明対象情報に基づいて、前記照明が照射される様子を示すパフォーマンス状況データを生成し、前記演出評価部は、前記照明対象情報に基づいて、前記パフォーマンスの演出を評価する。
【００１６】
請求項９記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記本体装置から送信される映像データを表示する表示部と、前記演出指示装置の動きを検出して、動き情報を生成する動き検出部と、前記動き情報を、前記演出指示情報として前記本体装置に出力する演出内容指示部と、を備え、前記本体装置は、さらに、前記動き情報に基づいて、前記第１ユーザのパフォーマンスを演出する照明の照射領域を特定し、前記照明領域に照明があたる様子を示す照明映像データを生成する照明映像データ生成部と、前記照明映像データを前記演出指示装置に出力する出力部と、を備える。
【００１７】
請求項１０記載の発明は、選択された楽曲データを再生する本体装置と、第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、通信可能な本体装置に搭載されるコンピュータを、前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部、前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観覧者の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部、前記パフォーマンス状況データと前記反応データとを再生する再生部、として機能されるためのプログラムである。
【発明の効果】
【００１８】
本発明において、本体装置は、第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを作成して再生する。演出指示装置は、第２ユーザの操作に応じて、第１ユーザのパフォーマンスの演出内容を指示する演出指示情報を生成する。本体装置２は、ライブデータの作成条件を演出指示情報に基づいて変更する。第２ユーザは、演出指示装置を操作することにより、第１ユーザのパフォーマンスの演出を行うことが可能となる。したがって、第２ユーザは、第１ユーザとともに、仮想的なライブを楽しむことが可能となる。
【００１９】
本体装置は、演出指示情報を参照して、第１ユーザのパフォーマンスの演出に対する評価を行う。第１ユーザのパフォーマンスの観客の反応を示す反応データが、評価結果に基づいて再生される。第２ユーザは、第１ユーザのパフォーマンスの演出に対する評価を観客の反応として知ることができるため、現実のライブに近い間隔でライブの演出を行うことができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施の形態に係るカラオケシステムの全体図である。
【図２】マイク及びリモートコントローラの使用方法を示す図である。
【図３】本体装置の機能的構成を示すブロック図である。
【図４】リモートコントローラの機能的構成を示すブロック図である。
【図５】本体装置の動作の流れを示すフローチャートである。
【図６】入場者の反応を示すライブデータが再生されたときの映像を示す図である。
【図７】楽曲紹介用の演出インタフェースを示す図である。
【図８】ミキサ操作用の演出インタフェースを示す図である。
【図９】楽曲データの構成を示す図である。
【図１０】花火打ち上げ用の演出インタフェースを示す図である。
【図１１】ライブ会場に花火が打ち上げられる様子を示す図である。
【図１２】照明指示用の演出インタフェースを示す図である。
【図１３】照明をあてる対象が選択された演出用インタフェースを示す図である。
【図１４】照明の照射方向を指示するときのリモートコントローラの操作方法を示す図である。
【図１５】入場者に照明があたる映像が表示されたリモートコントローラを示す図である。
【発明を実施するための形態】
【００２１】
以下、図面を参照しつつ、本発明の実施の形態について説明する。本実施の形態では、アミューズメントシステムの一例として、カラオケシステムについて説明する。
【００２２】
｛１．カラオケシステム１の全体構成｝
図１は、カラオケシステム１の全体図である。図１に示すように、カラオケシステム１は、カラオケシステム１は、本体装置２と、モニタ３と、マイク４と、リモートコントローラ５とを備える。
【００２３】
本体装置２は、カラオケシステム１の全体制御を行う処理装置である。本体装置２は、ユーザが選択した楽曲データを再生するとともに、仮想的なライブの映像を出力する。
【００２４】
モニタ３は、液晶ディスプレイなどであり、本体装置２から出力される仮想的なライブの映像を表示する。つまり、モニタの画面３ａには、大勢の観客が入場したライブ会場の様子が記録された映像が表示される。モニタ３は、図示しないスピーカを備えており、本体装置２により再生される楽曲データを音声として出力する。
【００２５】
マイク４は、ユーザが歌を歌うときに音声を入力する音声入力装置である。マイク４は、ユーザが入力する音声を音声データとして本体装置２に出力する。
【００２６】
リモートコントローラ５は、ユーザがカラオケで楽曲を選択するときに用いる装置である。リモートコントローラ５は、楽曲データが再生されているときに、仮想的なライブの演出を指示する演出指示装置として機能とする。リモートコントローラ５を演出指示装置として用いる場合、マイク４を持つユーザとは別のユーザが、リモートコントローラ５を操作する。
【００２７】
図２は、カラオケシステム１におけるマイク４及びリモートコントローラ５の使用方法を示す図である。図２では、本体装置２の表示を省略している。ユーザ１１は、マイク４を持って、本体装置２により再生される楽曲に合わせて歌を歌う。画面３ａには、仮想的なライブ会場でライブを行うキャラクタとして、ボーカル３１とギタリスト３２とが表示される。マイク４を持つユーザ１１は、仮想的なライブにおいて、ボーカル３１を担当する。
【００２８】
ユーザ１２は、リモートコントローラ５を操作して、仮想的なライブの演出を行う。つまり、ユーザ１２は、ライブの演出担当者として、画面３ａに表示される仮想的なライブの映像や音声を変化させる。ユーザ１２は、歌を歌わないときであっても、ユーザ１１とともに仮想的なライブを盛り上げることができる。このように、ユーザ１１，１２は、歌を歌うシンガーや演出担当者など、ライブにおける様々な役割を担当して仮想的なライブを盛り上げることができるため、カラオケを一緒に楽しむことができる。
【００２９】
図３は、本体装置２の機能的構成を示すブロック図である。図３に示すように、本体装置２は、無線通信部２１と、データ取得部２２と、記憶部２３と、ライブデータ作成部２４と、再生部２５と、演出評価部２６と、演出インタフェース作成部２７とを備える。
【００３０】
無線通信部２１は、マイク４及びリモートコントローラ５と無線通信を行う。無線通信部２１は、マイク４が生成した音声データ４Ａを受信する。無線通信部２１は、コントローラ５が生成した音声データ５Ａ及び演出指示情報６４を受信する。無線通信には、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＬＡＮ、赤外線通信などを利用することができる。
【００３１】
データ取得部２２は、ユーザが選択した楽曲に対応する楽曲データ６１を取得する。楽曲データ６１は、ユーザが選択した楽曲の演奏音を記録したデータである。
【００３２】
記憶部２３は、ハードディスク装置などであり、楽曲データ６１と、会場データ６２とを記憶する。会場データ６２は、仮想的なライブの映像及び音声が記録されたライブデータ６３を作成する際に用いられる。会場データ６２は、ボーカル３１、ギタリスト３２、ライブ会場の入場者などのオブジェクトデータを含む。会場データ６２は、ライブ会場の構造を示すデータとして、ステージや客席などの位置関係を示すデータを含む。
【００３３】
ライブデータ作成部２４は、マイク４から入力される音声データ４Ａと、楽曲データ６１と、会場データ６２とを用いて、仮想的なライブ会場で行われるライブの映像及び音声が記録されたライブデータ６３を作成する。ライブの映像は、ライブ会場のステージだけでなく、入場者や、ライブ会場全体の様子を示す映像を含む。ライブの音声は、楽曲データ６１の再生音及びユーザ１１の音声だけでなく、入場者の歓声、ユーザ１２に操作に基づく演出音などを含む。
【００３４】
ライブデータ作成部２４は、リモートコントローラ５から送信される演出指示情報６４に基づいて、ライブデータ６３の作成条件を変更する。演出指示情報６４は、仮想的なライブにおける演出内容を指示した情報であり、リモートコントローラ５から送信される。
【００３５】
再生部２５は、ライブデータ６３を再生して、ライブの映像及び音声をモニタ３に出力する。
【００３６】
演出評価部２６は、演出指示情報６４に基づいて、ライブの演出に対する評価を行う。演出評価部２６は、評価結果に基づいて、ライブの演出に対して反応する入場者の様子を示すライブデータ６３の作成を指示する。評価結果に基づいて、入場者が大きな歓声を上げたり、入場者がブーイングをしたりするライブデータ６３が作成される。
【００３７】
演出インタフェース作成部２７は、ユーザ１２が選択した演出方法に応じた演出インタフェースを作成する。演出インタフェースは、リモートコントローラ５のタッチパネル式ディプレイ５４（図４参照）に表示される。
【００３８】
図４は、リモートコントローラ５の機能的構成を示すブロック図である。図４に示すように、リモートコントローラ５は、音声入力部５１と、センサ部５２と、無線通信部５３と、タッチパネル式ディプレイ５４と、演出内容指示部５５とを備える。
【００３９】
音声入力部５１は、ユーザが発する音声を入力して電気信号に変換し、音声データ５Ａを出力する。センサ部５２は、リモートコントローラ５の動きの変化を検出する加速度センサを備えており、リモートコントローラ５の動きを示す動き情報５２Ａを出力する。センサ部５２は、加速度センサの他に、地磁気センサやジャイロスコープなどを備えていてもよい。
【００４０】
無線通信部５３は、本体装置２と無線通信を行い、音声データ５Ａ及び演出指示情報６４を本体装置２に送信する。タッチパネル式ディプレイ５４は、演出指示用のインタフェースを表示する。ユーザ１２は、タッチパネル式ディプレイ５４に表示されたインタフェースを利用して、仮想的なライブに対する演出を指示する。
【００４１】
演出内容指示部５５は、本体装置２から送信される演出インタフェースをタッチパネル式ディスプレイ５４に表示させる。演出内容指示部５５は、ユーザ１２による演出インタフェースの操作に基づいて、演出指示情報６４を作成して本体装置２に送信する。演出インタフェースの詳細は、後述する。
【００４２】
｛２．演出処理の概要｝
以下、ユーザ１２によるリモートコントローラ５の操作に応じて、仮想的なライブの演出が行われる処理について、本体装置２の動作を中心に説明する。図５は、本体装置２の動作の流れを示すフローチャートである。
【００４３】
最初に、ユーザ１１が、リモートコントローラ５を操作して、カラオケで歌いたい楽曲データ６１を選択する。データ取得部２２は、選択された楽曲データ６１を楽曲サーバ（図示省略）から取得する（ステップＳ１）。データ取得部２２は、取得した楽曲データ６１を記憶部２３に格納する。会場データ６２は、記憶部２３に予め格納されている。
【００４４】
ライブデータ作成部２４は、楽曲データ６１と会場データ６２とを用いて、ライブデータ６３の作成を開始する（ステップＳ２）。具体的には、ライブデータ作成部２４は、会場データ６１を用いて、仮想的なライブ会場の映像が記録された映像データを作成する。ライブデータ作成部２４は、作成した映像データと、楽曲データ６１とを含むデータを、ライブデータ６３として再生部２５に出力する。
【００４５】
本体装置２がマイク４から音声データ４Ａを受信した場合、ライブデータ作成部２４は、音声データ４Ａを含むライブデータ６３を作成する。これにより、ユーザ１１の歌が、モニタ３から出力される。ライブデータ作成部２４は、楽曲データ６１の前奏や、サビが再生されるタイミングに合わせて、入場者の歓声などが記録された音声データをライブデータ６３に含めてもよい。
【００４６】
再生部２５は、ライブデータ作成部２４が作成したライブデータ６３の再生を開始する（ステップＳ３）。ライブデータ６３が再生されることにより、仮想的なライブの映像が画面３ａに表示され、楽曲データ６１の再生音がモニタ３のスピーカから出力される。
【００４７】
本体装置２は、楽曲データ６１の再生が終了するまで（ステップＳ４においてＹｅｓ）、ステップＳ５〜ステップＳ８の処理を繰り返し実行する。図２に示すように、楽曲データ６１が再生されている間、ユーザ１１は、マイク４を持って歌を歌う。ユーザ１２は、リモートコントローラ５を操作して、仮想的なライブの演出を行う。リモートコントローラ５は、ユーザ１２の操作に応じた演出指示情報６４を作成し、リアルタイムに本体装置２に送信する。
【００４８】
本体装置２が演出指示情報６４を受信した場合（ステップＳ５においてＹｅｓ）、ライブデータ作成部２４は、演出指示情報６４に基づいて、ライブデータ６３の作成条件を変更する（ステップＳ６）。ライブデータ作成部２４は、演出指示情報６４に基づいて変更した作成条件に基づいて、ライブデータ６３を作成する（ステップＳ７）。たとえば、演出指示情報６４が、花火の打ち上げを指示する情報であった場合、ライブデータ６３は、ライブ会場に花火が打ち上げられる様子を示す映像を作成する。ユーザ１２が仮想的なライブにおいて演出できる内容の詳細は、後述する。
【００４９】
演出評価部２６は、演出指示情報６４が入力されたタイミング、及び演出指示情報６４により指示された演出の内容などに基づいて、演出に対する評価を行う（ステップＳ８）。たとえば、楽曲データ６１のサビの部分が再生されているときに、花火が打ち上げられた場合、演出評価部２６は、入場者を盛り上げることができたと判断して、ユーザ１２の演出に対して高い点数を付与する。
【００５０】
ライブデータ６３の再生が終了した（楽曲データ６１の再生が終了した）場合、演出評価部２６は、ユーザ１２の演出に対して付与された点数を合計する（ステップＳ９）。演出評価部２６は、点数の合計値に基づいて、入場者の反応を示すライブデータ６３の作成を指示する。ライブデータ作成部２４により作成されたライブデータ６３が、再生部２５により再生される（ステップＳ１０）。
【００５１】
図６は、入場者の反応を示すライブデータ６３が再生されたときのモニタ３の映像を示す図である。合計値がしきい値よりも高ければ、図６に示すように、入場者全員が拍手をする映像が、画面３ａに表示され、入場者の歓声が、モニタ３のスピーカから出力される。総得点が低ければ、入場者がブーイングをする映像及び音声が、モニタ３から出力される。
【００５２】
これにより、ユーザ１２は、仮想的なライブの演出に対する評価を知ることができる。ユーザ１２の演出に対する評価がライブ会場の入場者の反応として示されるため、ユーザ１２は、実際のライブの演出を行うときのような緊張感を持ちながら、リモートコントローラ５を操作することができる。
【００５３】
演出評価部２６は、ユーザ１２の演出に対する評価を行うたびに、評価結果に応じたライブデータ６３の生成をライブデータ作成部２４に指示してもよい。この場合、ライブデータ作成部２４は、演出指示情報６４に対応するライブデータ６３を作成した後に、演出評価部２６が付与した点数に対応するライブデータ６３（入場者の反応を示すデータ）を作成する。ユーザ１２がライブの演出を指示するたびに、ライブの演出に対する入場者の反応が、モニタ３から出力される。したがって、ユーザ１２は、リモートコントローラ５を操作するたびに、仮想的なライブに対する演出の評価を知ることができる。
【００５４】
｛３．演出の具体例｝
以下、ユーザ１２がリモートコントローラ５を操作することにより、仮想的なライブで行うことができる演出の具体例として、楽曲紹介、ミキサ操作、花火打ち上げ、照明指示について説明する。
【００５５】
｛３．１．楽曲紹介｝
楽曲紹介は、ユーザ１２がライブの司会者として、ユーザ１１が歌う楽曲を紹介する演出方法である。
【００５６】
楽曲紹介が行われる手順について、詳しく説明する。ユーザ１２は、リモートコントローラ５を操作して、演出方法の選択画面（図示省略）をタッチパネル式ディスプレイ５４に表示させる。ユーザ１２が「楽曲紹介」を選択することにより、楽曲紹介用の演出インタフェースが、タッチパネル式ディスプレイ５４に表示される。
【００５７】
図７は、楽曲紹介用の演出インタフェース７１が表示されたリモートコントローラ５を示す図である。ユーザ１２が楽曲紹介を選択した場合、演出内容指示部５５は、演出インタフェース７１の表示を本体装置２に要求する。演出インタフェース生成部２７は、演出内容指示部５５の要求に応じて、演出インタフェース７１を作成してリモートコントローラ５に送信する。これにより、図７に示すように、演出インタフェース７１が、タッチパネル式ディスプレイ５４に表示される。
【００５８】
演出インタフェース７１には、ユーザ１２が楽曲紹介をするための原稿データ７１Ａが表示される。演出インタフェース生成部２７には、様々なパターンの原稿データ７１Ａ，７１Ａ・・・が設定されている。演出インタフェース生成部２７は、ユーザ１１が選択した楽曲データ６１の前奏の長さや、楽曲データ６１のジャンルなどに基づいて原稿データ７１Ａを選択する。選択された原稿データ７１Ａに基づいて、演出インタフェース７１の画面データが作成される。
【００５９】
ユーザ１１により選択された楽曲データ６１の再生が開始された場合、ライブデータ作成部２４は、図２に示すように、ステージに立つボーカル３１やギタリスト３２などのキャラクタの映像が記録されたライブデータ６３を作成する。このとき、ライブデータ作成部２４は、ボーカル３１などとともに、ユーザ１２に対応する司会者の映像が記録されたライブデータ６３を作成してもよい。
【００６０】
ユーザ１２は、楽曲データ６１の前奏の再生が終了するまでに、演出インタフェース７１に表示された原稿データ７１Ａを音読することにより、ユーザ１１が歌う楽曲を紹介する。
【００６１】
具体的には、音声入力部５１は、ユーザ１２の音声を入力して音声データ５Ａを生成する。演出内容指示部５５は、音声データ５Ａを、演出指示情報６４としてリアルタイムに本体装置２へ送信する。ライブデータ作成部２４は、音声データ５Ａを含むライブデータ６３を作成して再生部２４に出力する。これにより、楽曲紹介の音声が、モニタ３のスピーカから出力される。ユーザ１２は、演出インタフェース７１に表示された原稿データ７１Ａを読み終わった場合（楽曲紹介が終了した場合）、終了ボタン７１Ｂにタッチする。これにより、演出内容指示部５５は、楽曲紹介が終了したことを示す演出指示情報６４（紹介終了通知）を、本体装置２に送信する。
【００６２】
演出評価部２６は、紹介終了通知に基づいてユーザ１２が行った楽曲紹介を評価する。具体的には、演出評価部２６は、前奏が終了するタイミング（ユーザ１１が歌い出す直前）に、楽曲紹介が終了した場合、ユーザ１２が行った楽曲紹介に対して高い点数を付与する。このとき、演出評価部２６は、楽曲紹介が終了したタイミングと、前奏が終了したタイミングとの差が小さいほど、楽曲紹介に対して付与する点数を高くしてもよい。前奏が終了するまでに楽曲紹介が終了しない場合、演出評価部２６は、楽曲紹介に対して点数を付与しない。
【００６３】
ライブデータ作成部２４は、付与された点数に基づいて、ライブ会場の入場者の反応を示すライブデータ６３を作成する。たとえば、点数が高い場合、ライブデータ作成部２４は、図６に示すように、入場者全員が拍手する映像が記録されたライブデータ６３を作成する。
【００６４】
演出評価部２６は、ユーザ１２が原稿を誤ることなく読めたかどうかを判定することにより、楽曲紹介の判定を行ってもよい。たとえば、演出評価部２６は、音声データ５Ａに対して音声認識処理を行うことにより、ユーザ１２が音声入力部５１に入力したフレーズを特定する。演出評価部２６は、特定したフレーズと、演出インタフェース７１に表示された原稿データ７１Ｂとを比較することにより、原稿の読み誤りがあるか否かを判定することができる。
【００６５】
演出評価部２６は、ユーザ１２が原稿を読むリズムに基づいて、ユーザ１２が行う楽曲紹介を評価してもよい。この場合、演出評価部２６は、音声データ５Ａに基づいて、ユーザ１２が原稿を読むリズムを検出する。前奏のリズムと、原稿を読むリズムとのずれが小さい場合、演出評価部２６は、楽曲紹介に対して高い点数を付与してもよい。
【００６６】
このように、ユーザ１２は、司会者としてライブの演出を行うことにより、カラオケで歌を歌わなくても、ライブの緊張感を疑似的に体験することができる。
【００６７】
｛３．２．ミキサ操作｝
ミキサ操作は、楽曲データ６１の再生条件を変更したり、マイク４のオン、オフを切り替えたりすることにより、ライブで演奏される楽曲の出力条件を調整する演出方法である。ユーザ１２は、タッチパネル式ディスプレイ５４に表示される仮想的なミキサを操作することにより、ライブの演出を行う。
【００６８】
図８は、ミキサ操作に対応する演出インタフェース７２が表示されたリモートコントローラ５を示す図である。ユーザ１２は、リモートコントローラ５を操作して、「ミキサ操作」を選択する。演出内容指示部５５は、ユーザ１２の選択に応じて、ミキサ操作用の演出インタフェース７２の表示を本体装置２に要求する。演出インタフェース作成部２７は、ミキサ操作に用いる演出インタフェース７２を作成して、リモートコントローラ５に送信する。これにより、図８に示す演出インタフェース７２が、リモートコントローラ５に表示される。
【００６９】
図９は、楽曲データ６１の構成を示す図である。図９に示すように、楽曲データ６１は、ギター、ベース、キーボード、及びバックコーラスの各パートに対応したパートデータ６１ａ〜６１ｄにより構成される。ユーザ１２は、演出インタフェース７２を操作して、パートデータ６１ａ〜６１ｄの音量を調整することができる。
【００７０】
図８に示すように、演出インタフェース７２には、マイク４及び各パートに対応する音量コントローラ７２ａ，７２ａ，・・・と、ミュートボタン７２ｂ，７２ｂ，・・・と、ミュート解除ボタン７２ｃ，７２ｃ，・・・とが表示される。音量コントローラ７２ａは、マイク４または各パートの音量を調節するためのインタフェースである。ミュートボタン７２ｂは、マイク４または各パートをミュートにするためのインタフェースである。ミュート解除ボタン７２ｃは、マイク４または各パートのミュートを解除するためのインタフェースである。図８では、マイク４または各パートにおいて、ミュートが指示された場合、ミュートボタン７２ｂがハッチングで表示される。ミュートの解除が指示された場合、ミュート解除ボタン７２ｃがハッチングで表示される。
【００７１】
演出内容指示部５５は、ユーザ１２による演出インタフェース７２の操作に応じた演出指示情報６４を作成し、本体装置２にリアルタイムに送信する。ミキサ操作に対応する演出指示情報６４は、音量調節の対象となるパートを指定する情報と、指定されたパートの音量を指示する情報とを含む。ライブデータ作成部２４は、ミキサ操作に対応する演出指示情報６４に基づいて、マイク４またはパートデータ６１ａ〜６１ｄの音量を調節したライブデータ６３を作成する。
【００７２】
たとえば、ユーザ１２は、演出インタフェース７２を用いて、マイク４の音量を調節することができる。楽曲データ６１の再生が開始されるとき、ユーザ１２は、マイク４に対応するミュートボタン７２ｂにタッチする。マイク４のミュートを指示する演出指示情報６４が、本体装置２に送信される。ライブデータ作成部２４は、マイク４のミュートが指示された場合、マイク４から送信される音声データ４Ａ（図２参照）を、ライブデータ６３に含めない。ユーザ１１がマイク４に音声を入力したとしても、ユーザ１１の音声は、モニタ３から出力されない。
【００７３】
ユーザ１２は、楽曲データ６１の前奏が終了するタイミングで、マイク４に対応するミュート解除ボタン７２ｃにタッチする。マイク４のミュートの解除を指示する演出指示情報６４が、本体装置２に送信される。ライブデータ作成部２４は、音声データ４Ａを含むライブデータ６３を作成する。これにより、ユーザ１１の歌声が、モニタ３から出力される。
【００７４】
ユーザ１２は、ギターのソロ演奏が行われるときに、ミキサ操作を行ってもよい。たとえば、ライブデータ作成部２４は、ギターのソロ演奏の開始タイミングと終了タイミングとを示すメッセージを付加した映像を作成することにより、ギターのソロ演奏の開始タイミングと終了タイミングとをユーザ１２に通知する。
【００７５】
ユーザ１２は、ソロ演奏が開始されるタイミングで、マイク４と、ギターを除く他のパートとの音量が小さくなるように、音量コントローラ７２ａをスライドさせる。ユーザ１２は、ギターの音量が大きくなるように、音量コントローラ７２ａをスライドさせることにより、パートデータ６１ａの音量を大きくしてもよい。ギターソロが終了するタイミングで、ユーザ１２は、マイク４と、ギターを除く各パートとに対応するミュート解除ボタン７２ｃにタッチする。これにより、通常の演奏を再開させることができる。
【００７６】
演出評価部２６は、演出指示情報６４により指示される音量調節の内容や、音量調節が指示されたタイミングなどに基づいて、ミキサ操作の演出に対する評価を行う。たとえば、上述のように、ユーザ１２が、前奏が終了するタイミングでマイク４のミュートを解除した場合、ミキサ操作に対して付与される点数が高くなる。このとき、演出評価部２６は、前奏が終了するタイミングと、マイク４のミュートが解除されたタイミングとの時間差が小さいほど、付与する点数を高くすればよい。前奏が終了してもマイク４のミュートが解除されない場合、ユーザ１１の歌声が、仮想的なライブ会場に流れないため、付与される点数が低くなる。
【００７７】
また、ユーザ１２は、各パートの音量を適切なレベルに調節することにより、ハウリングがライブ会場で発生することを防止することができる。音量コントローラ７２ａ，７２ａ，・・・の全ての音量レベルが所定レベル（たとえば、２以上）となった場合、ライブデータ作成部２４は、ハウリングの音声を含むライブデータ６３を作成する。この場合、演出評価部２６は、ユーザ１２がミキサの操作を誤ったと判断して、ミキサ操作に付与された点数を減点する。
【００７８】
図８では、各パートとマイク４の音量調節機能のみを有する演出インタフェース７２を示している。しかし、一般に用いられるオーディオミキサのように、演出インタフェース７２は、各パートデータの再生時の周波数特性を変更するイコライザ機能などを有していてもよい。
【００７９】
このように、ユーザ１１のマイクや、楽曲の各パートの音量調節をリアルタイムで行うことができる。したがって、ユーザ１２は、仮想的なライブの音響担当者としてリモートコントローラ５を操作することにより、ユーザ１１と一緒にカラオケを楽しむことができる。
【００８０】
｛３．３．花火の打ち上げ｝
花火の打ち上げは、楽曲データ６１の再生中に仮想的なライブ会場に花火を打ち上げる演出方法である。ユーザ１２は、花火打ち上げ用の演出インタフェースを操作することにより、ライブ会場で打ち上げられる花火の種類と、花火の打ち上げタイミングとを指示することができる。
【００８１】
図１０は、花火打ち上げ用の演出インタフェース７３が表示されたリモートコントローラ５を示す図である。演出内容指示部５５は、ユーザ１２の選択に応じて、花火の打ち上げ制御用の演出インタフェース７３の表示を本体装置２に要求する。演出インタフェース作成部２７は、演出インタフェース７３を作成して、リモートコントローラ５に送信する。これにより、図１０に示す演出インタフェース７３が、リモートコントローラ５に表示される。
【００８２】
ユーザ１２は、楽曲データ６１が再生されているときに、演出インタフェース７３を操作して、打ち上げる花火の選択と、選択した花火の打ち上げとを指示することができる。具体的には、ユーザ１２は、演出インタフェース７３に表示された花火７３ａ〜７３ｃのいずれかにタッチして、打ち上げる花火を選択する。図１０に示す演出インタフェース７３では、花火７３ｂが選択されている。ユーザ１２は、打ち上げボタン７３ｄにタッチすることにより、選択された花火７３ｂの打ち上げを指示する。
【００８３】
図１１は、ライブ会場に花火が打ち上げられる様子を示す図である。打ち上げボタン７３ｄがタッチされた場合、演出内容指示部５５は、選択された花火７３ｂの打ち上げを指示する演出指示情報６４を本体装置に送信する。ライブデータ作成部２４は、受信した演出指示情報６４に基づいて、ステージの背後に花火７３ｄが打ち上げられる映像と、花火の爆発音とを含むライブデータ６３を作成する。図１１に示すように、モニタ３の画面３ａには、ライブ会場のステージの背後に、花火が打ち上げられる映像が表示される。
【００８４】
ユーザ１２は、上述の操作を繰り返すことにより、ステージの背後に連続的に花火を打ち上げることができる。ユーザ１２は、花火７３ａ，７３ｂの両者を選択して、打ち上げ指示ボタン７３ｄにタッチしてもよい。この場合、ライブデータ作成部２４は、花火７３ａ，７３ｂが同時に打ち上げられる映像を含むライブデータ６３を作成する。
【００８５】
演出評価部２６は、花火の打ち上げを指示する演出指示情報６４に基づいて、花火の打ち上げに対する評価を行う。つまり、花火を打ち上げるタイミングや、打ち上げた花火の数などに基づいて、花火の打ち上げに対する採点が行われる。楽曲のサビの演奏が開始されるタイミングや、楽曲データ６１の再生が終了するタイミングに、花火の打ち上げが指示された場合、演出評価部２６は、花火の打ち上げの演出に対して、高い点数を付与する。
【００８６】
｛３．４．照明の演出（その１）｝
ユーザ１２は、ライブ会場の照明担当者となって、仮想的なライブの演出を行うことができる。つまり、ユーザ１２は、リモートコントローラ５を操作して、ライブ会場の様々な場所に照明をあてることができる。
【００８７】
図１２は、照明指示用の演出インタフェース７４が表示されたリモートコントローラ５を示す図である。ユーザ１２は、リモートコントローラ５を操作して、「照明指示」を選択する。演出内容指示部５５は、ユーザ１２の選択に応じて、照明指示用の演出インタフェース７４の表示を本体装置２に要求する。演出インタフェース作成部２７は、演出インタフェース７４を作成して、リモートコントローラ５に送信する。これにより、図１２に示すように、演出インタフェース７４が、リモートコントローラ５に表示される。
【００８８】
演出インタフェース７４は、映像表示欄７４ａと、照明指示欄７４ｂとを備える。映像表示欄７４ａは、ライブ会場のステージの様子を示す映像データ７４ｃを表示する。照明指示欄７４ｂは、照明のオン、オフを指示するボタンを表示する。モニタ３は、映像データ７４ｃと同じ映像を表示する。ユーザ１２は、演出インタフェース７４を操作することにより、ステージに立つボーカル３１や、ギタリスト３２に照明をあてることができる。
【００８９】
図１３は、照明をあてる対象が選択された演出用インタフェース７４を示す図である。ボーカル３１に照明をあてる場合、ユーザ１２は、映像表示欄７４ａに表示されたボーカル３１にタッチする。演出内容指示部５５は、照明をあてる対象として、映像表示欄７４ａに表示されたボーカル３１をハッチングで表示する。
【００９０】
次に、ユーザ１２は、照明指示欄７４ｂの「ＯＮ」にタッチすることにより、ボーカル７４に照明をあてることを指示する。演出内容指示部５５は、ボーカル３１に照明をあてることを指示する演出指示情報６４を作成して、本体装置２に送信する。ライブデータ作成部２４は、演出指示情報６４に基づいて、ボーカル３１に照明が当たる映像を含むライブデータ６３を作成する。
【００９１】
本体装置２は、作成されたライブデータ６３を、映像データ７４ｃとしてリモートコントローラ５に送信する。図１２に示すように、ボーカル３１に照明があたる様子を示す映像データ７４ｃが、映像表示欄７４ａに表示される。再生部２５がライブデータ６３を再生することにより、モニタ３は、図１２に示す映像データ７４ｃと同じ映像を表示する。
【００９２】
ユーザ１２は、照明をあてる対象を変更することができる。たとえば、楽曲データ６１の再生中に、ギターのソロ演奏が行われる場合、照明の対象をギタリスト３２に変更することができる。ユーザ１２は、映像表示欄７４ａに表示されたボーカル３１を選択して、照明指示欄７４ｂの「ＯＦＦ」をタッチする。次に、ユーザ１２は、映像表示欄７４ａに表示されたギタリスト３２を選択して、照明指示欄７４ｂの「ＯＮ」をタッチする。これにより、照明がボーカル３１からギタリスト３２に切り替わる。
【００９３】
また、ユーザ１２は、ボーカル３１及びギタリスト３２の両者を選択して、照明指示欄７４ｂの「ＯＮ」をタッチしてもよい。この場合、ボーカル３１及びギタリスト３２の両者に照明があたる映像データ７４ｃが、映像表示欄７４ａに表示される。
【００９４】
演出評価部２６は、演出指示情報６４の内容や、演出指示情報６４を受信したタイミングに基づいて、照明の演出に対する評価を行う。たとえば、楽曲のサビが再生されるタイミングで、ボーカル３１だけに照明が当てられた場合、照明の演出に対して高い点数が付与される。同様に、ギターのソロ演奏が行われるタイミングで、ギタリスト３２だけに照明をあてることにより、照明の演出に対して高い点数が付与される。サビが再生されるタイミングで、ボーカル３１ではなく、ギタリスト３２に照明が当てられた場合、演出評価部２６は、照明の演出に対して点数を付与しない。あるいは、演出評価部２６は、付与された点数を減点してもよい。
【００９５】
｛３．５．照明の演出（その２）｝
ユーザ１２は、リモートコントローラ５を動かすことにより、照明をあてる照射方向を指定してもよい。ユーザ１２は、ステージだけでなく、ライブ会場の入場者に照明をあてることが可能となる。この場合、照明方向が、センサ部５２から出力される動き情報５２Ａ（図４参照）に基づいて、決定される。
【００９６】
図１４は、照明方向を決定するときのリモートコントローラ５の操作方法を説明する図である。図１４では、リモートコントローラ５を持つユーザ１２の表示を省略している。楽曲データ６１の再生が開始される前に、ユーザ１２は、リモートコントローラ５の基準方向を決定する。具体的には、図１４に示すように、ユーザ１２は、タッチパネル式ディスプレイ５４をユーザ１２に対向させながら、リモートコントローラ５をモニタ３の方向（矢印７４ｄの方向）に向ける。演出内容指示部５５は、矢印７４ｄの方向を、リモートコントローラ５の基準方向に設定する。基準方向を示す情報が、演出指示情報６４として本体装置２に送信される。リモートコントローラ５の基準位置は、客席の最前列に対応すると仮定する。
【００９７】
ユーザ１２は、楽曲データ６１が再生されている間、リモートコントローラ５の向きを矢印７４ｅ，７４ｅの方向に変えることにより、照射方向を指定する。演出内容指示部５５は、センサ部５２から出力される動き情報５２Ａを、演出指示情報６４としてリアルタイムに本体装置２に送信する。
【００９８】
ライブデータ作成部２４は、リモートコントローラ５の基準位置、基準方向、及び動き情報５２Ａに基づいて、照射方向を決定する。ライブデータ作成部２４は、基準位置から照射方向を見たときのライブ会場の様子を示す映像データ７４ｃを作成する。本体装置２は、作成された映像データ７４ｃをリモートコントローラ５に送信する。照射方向に対応する映像データ７４ｃの作成及び送信は、リアルタイムで行われる。これにより、映像表示欄７４ａには、照射方向の会場の様子を示す映像データ７４ｃが表示される。
【００９９】
図１５は、照射方向の会場の様子を示す映像データ７４ｃが表示されたリモートコントローラ５を示す図である。ユーザ１２がリモートコントローラ５を基準方向の反対方向に向けた場合、照明方向は、基準位置から客席のある方向に設定される。この結果、図１５に示すように、ライブ会場の入場者が映像表示欄７４ａに表示される。
【０１００】
モニタ３の画面３ａには、楽曲データ６１が再生されている間、ライブ会場のステージの映像（図２参照）が表示される。したがって、ユーザ１１、１２は、それぞれの役割に応じた画面を見ながら、仮想的なライブを盛り上げることが可能となる。
【０１０１】
ユーザ１２は、入場者の映像が映像表示欄７４ａに表示された状態で、照明指示欄７４ｂの「ＯＮ」をタッチする。演出内容指示部５５は、照明をあてることを指示する演出指示情報６４を本体装置２に送信する。ライブデータ作成部２４は、演出指示情報６４と照射方向とに基づいて、客席に照明があたる様子を示す映像データ７４ｃを作成する。図１５において、ハッチング領域は、照明があたっている領域に対応する。ライブデータ作成部２４は、ハッチング領域にいる入場者が、大きく盛り上がる様子を示す映像データ７４ｃを作成してもよい。
【０１０２】
ユーザ１２は、照明指示欄７４ｂの「ＯＮ」を選択したままでリモートコントローラ５を動かしてもよい。この場合、照明があたる領域を、ライブ会場の中で移動させることができる。たとえば、楽曲データ６１の間奏が再生されているときなどに、ユーザ１２が入場者に照明をあてることにより、ライブを盛り上げることができる。
【０１０３】
ユーザ１２は、リモートコントローラ５をステージの方向に向けることにより、ボーカル３１及びギタリスト３２に照明をあてることができる。ライブデータ作成部２４は、照明方向がステージの方向であると判定した場合、ステージに照明があたる映像を含むライブデータ６３を作成する。この場合、モニタ３の画面３ａには、照明があたる様子を示す映像が表示される。
【０１０４】
演出評価部２６は、リモートコントローラ５を動かして照明位置を指示する場合にも、照明の演出に対する評価を行う。上述のように、ギターのソロ演奏が行われているときに、ギタリスト３２に照明をあてた場合には、演出評価部２６は、照明の演出に対して高い点数を付与する。また、楽曲データ６１の間奏が再生されているときに、入場者に照明があてた場合には、演出評価部２６は、照明の演出に対して高い点数を付与する。
【０１０５】
｛変形例｝
本実施の形態では、ユーザ１１が行うパフォーマンスとして、ユーザ１１がマイク４を持って歌う例について説明した。しかし、ユーザ１１は、他のパフォーマンスを行ってもよい。たとえば、ユーザ１１は、本体装置２と通信可能な電子楽器装置を用いて、ライブのパフォーマンスを行ってもよい。
【０１０６】
たとえば、ユーザ１１は、ギターの形状をした電子楽器装置を持って、電子楽器装置の弦をはじく動作を行う。電子楽器装置は、ユーザの操作に応じた情報を本体装置２に送信する。ライブデータ作成部２４は、音声データ４Ａに代えて、ギターの演奏音を含むライブデータ６３を作成する。これにより、ユーザ１１は、仮想的なライブ会場で、ギタリストとしてパフォーマンスを行うことができる。
【０１０７】
本実施の形態において、カラオケシステム１は、複数のリモートコントローラ５を備えてもよい。各リモートコントローラを操作するユーザが、楽曲紹介、ミキサ操作、花火打ち上げ、及び照明操作の演出を担当する。これにより、複数の演出を並行して実行することができるため、グループのメンバー全員で、仮想的なライブを盛り上げることが可能となる。
【０１０８】
本実施の形態において、ライブデータ作成部２４が、映像及び音声が記録されたライブデータ６３を生成する例を説明した。しかし、ライブデータ６３は、映像及び音声の少なくとも一方を含むデータであればよい。たとえば、カラオケシステム１が、モニタ３に代えてスピーカを備えている場合、ライブデータ作成部６３は、音声のみを含むライブデータ６３を作成する。
【符号の説明】
【０１０９】
１ カラオケシステム
２ 本体装置
３ モニタ
３ａ 画面
４ マイク
５ リモートコントローラ
２４ ライブデータ作成部
２５ 再生部
２６ 演出評価部
２７ 演出インタフェース作成部
５１ 音声入力部
５２ センサ部
５４ タッチパネル式ディスプレイ
５５ 演出内容指示部
【技術分野】
【０００１】
本発明は、ユーザが再生される楽曲データに合わせて歌を歌うことができるアミューズメントシステムに関する。
【背景技術】
【０００２】
カラオケでは、ユーザが選択した楽曲の演奏に合わせて歌を歌う形式が一般的である。カラオケ装置のモニタには、ユーザが選択した楽曲の歌詞が、楽曲の演奏の進行に合わせて表示される。これにより、ユーザは、選択した楽曲の歌詞を全て覚えていなくても、カラオケを楽しむことができる。モニタに表示される歌詞の背景には、歌を歌うキャラクタの映像や、楽曲のイメージに合わせた映像などが表示される。
【０００３】
カラオケは、家族あるいは友人同士などの少人数のグループで楽しむことが多い。カラオケを盛り上げるために、歌を歌うユーザに照明をあてることができるカラオケ装置が、特許文献１に開示されている。
【０００４】
特許文献１に係るカラオケ装置は、送信器と、カラオケ端末機と、照明器具とを備える。カラオケ端末機は、ユーザが選択した楽曲を再生する。ユーザは、再生される楽曲に合わせて、送信器を持ちながら歌を歌う。送信器は、照明器具の照射方向を制御する姿勢制御信号を照明器具に送信する。照明器具は、照射方向を姿勢制御信号の飛来方向に変更する。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平１１−１３４６１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
カラオケでは、歌を歌うユーザ以外の他のユーザは、歌を聴いたり、次に歌う楽曲を探したりすることが多い。つまり、カラオケを少人数のグループで楽しむ場合であっても、グループのメンバー全員がカラオケを楽しむことはできない。特許文献１に係るカラオケ装置は、歌を歌うユーザが送信器を保持することにより、歌うユーザに照明をあてることができる。しかし、他のユーザは、照明を操作することができないため、カラオケに積極的に参加することはできない。
【０００７】
そこで、本発明は、前記問題点に鑑み、歌を歌うユーザと、他のユーザとが一緒に楽しむことができるアミューズメントシステムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、請求項１記載の発明は、選択された楽曲データを再生する本体装置と、第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、を備え、前記本体装置は、前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部と、前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観客の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部と、前記パフォーマンス状況データと前記反応データとを再生する再生部と、を備える。
【０００９】
請求項２記載の発明は、請求項１に記載のアミューズメントシステムにおいて、前記演出評価部は、前記パフォーマンス状況データが再生される期間に生成された全ての演出指示情報に基づいて、前記第１ユーザのパフォーマンスの演出を評価して全体評価情報を生成し、前記全体評価情報に対応する反応データの生成を指示する。
【００１０】
請求項３記載の発明は、請求項１または請求項２に記載のアミューズメントシステムにおいて、前記演出評価部は、前記本体装置に前記演出指示情報が入力されるたびに、前記第１ユーザのパフォーマンスの演出を評価して個別評価情報を生成し、前記個別評価情報に対応する反応データの生成を指示する。
【００１１】
請求項４記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記第２ユーザの音声を入力して音声データを生成する音声入力部と、前記パフォーマンス状況データの再生中に前記第２ユーザが読み上げるべき内容を表示し、前記音声データを前記演出指示情報として前記本体装置に出力する演出内容指示部と、を備え、前記パフォーマンス状況データ生成部は、前記音声データを含むパフォーマンス状況データを生成し、前記演出評価部は、前記音声データの入力が終了したタイミングに基づいて、前記パフォーマンスの演出を評価する。
【００１２】
請求項５記載の発明は、請求項４に記載のアミューズメントシステムにおいて、前記演出評価部は、前記音声データに対する音声認識処理を行って前記第２ユーザが前記音声入力部に入力した音声フレーズを特定し、前記音声フレーズと前記内容とを比較することにより、前記パフォーマンスの演出を評価する。
【００１３】
請求項６記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記第２ユーザにより選択された花火の種類と、前記選択された花火の打ち上げとを指示する打ち上げ情報を生成し、前記打ち上げ情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、を備え、前記パフォーマンス状況データ生成部は、前記打ち上げ情報に基づいて、前記第１ユーザのパフォーマンスを演出する花火が打ち上げられる様子を示すパフォーマンス状況データを生成し、
前記演出評価部は、前記打ち上げ情報に基づいて、前記パフォーマンスの演出を評価する。
【００１４】
請求項７記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記楽曲データは、楽曲の演奏パートのそれぞれに対応する複数のパートデータにより構成され、前記演出指示装置は、各パート楽曲データの再生条件を指定した再生条件情報を前記第２ユーザの操作に応じて生成し、前記再生条件情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、を備え、前記パフォーマンス状況データ生成部は、前記再生条件情報に基づいて、パート楽曲データの再生時の条件を変更したパフォーマンス状況データを生成し、前記演出評価部は、前記再生条件情報に基づいて、前記パフォーマンスの演出を評価する。
【００１５】
請求項８記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記第１ユーザのパフォーマンスを演出する照明の照射対象を示す照明対象情報を前記第２ユーザの操作に応じて生成し、前記照明対象情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、を備え、前記パフォーマンス状況データ生成部は、前記照明対象情報に基づいて、前記照明が照射される様子を示すパフォーマンス状況データを生成し、前記演出評価部は、前記照明対象情報に基づいて、前記パフォーマンスの演出を評価する。
【００１６】
請求項９記載の発明は、請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、前記演出指示装置は、前記本体装置から送信される映像データを表示する表示部と、前記演出指示装置の動きを検出して、動き情報を生成する動き検出部と、前記動き情報を、前記演出指示情報として前記本体装置に出力する演出内容指示部と、を備え、前記本体装置は、さらに、前記動き情報に基づいて、前記第１ユーザのパフォーマンスを演出する照明の照射領域を特定し、前記照明領域に照明があたる様子を示す照明映像データを生成する照明映像データ生成部と、前記照明映像データを前記演出指示装置に出力する出力部と、を備える。
【００１７】
請求項１０記載の発明は、選択された楽曲データを再生する本体装置と、第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、通信可能な本体装置に搭載されるコンピュータを、前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部、前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観覧者の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部、前記パフォーマンス状況データと前記反応データとを再生する再生部、として機能されるためのプログラムである。
【発明の効果】
【００１８】
本発明において、本体装置は、第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを作成して再生する。演出指示装置は、第２ユーザの操作に応じて、第１ユーザのパフォーマンスの演出内容を指示する演出指示情報を生成する。本体装置２は、ライブデータの作成条件を演出指示情報に基づいて変更する。第２ユーザは、演出指示装置を操作することにより、第１ユーザのパフォーマンスの演出を行うことが可能となる。したがって、第２ユーザは、第１ユーザとともに、仮想的なライブを楽しむことが可能となる。
【００１９】
本体装置は、演出指示情報を参照して、第１ユーザのパフォーマンスの演出に対する評価を行う。第１ユーザのパフォーマンスの観客の反応を示す反応データが、評価結果に基づいて再生される。第２ユーザは、第１ユーザのパフォーマンスの演出に対する評価を観客の反応として知ることができるため、現実のライブに近い間隔でライブの演出を行うことができる。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施の形態に係るカラオケシステムの全体図である。
【図２】マイク及びリモートコントローラの使用方法を示す図である。
【図３】本体装置の機能的構成を示すブロック図である。
【図４】リモートコントローラの機能的構成を示すブロック図である。
【図５】本体装置の動作の流れを示すフローチャートである。
【図６】入場者の反応を示すライブデータが再生されたときの映像を示す図である。
【図７】楽曲紹介用の演出インタフェースを示す図である。
【図８】ミキサ操作用の演出インタフェースを示す図である。
【図９】楽曲データの構成を示す図である。
【図１０】花火打ち上げ用の演出インタフェースを示す図である。
【図１１】ライブ会場に花火が打ち上げられる様子を示す図である。
【図１２】照明指示用の演出インタフェースを示す図である。
【図１３】照明をあてる対象が選択された演出用インタフェースを示す図である。
【図１４】照明の照射方向を指示するときのリモートコントローラの操作方法を示す図である。
【図１５】入場者に照明があたる映像が表示されたリモートコントローラを示す図である。
【発明を実施するための形態】
【００２１】
以下、図面を参照しつつ、本発明の実施の形態について説明する。本実施の形態では、アミューズメントシステムの一例として、カラオケシステムについて説明する。
【００２２】
｛１．カラオケシステム１の全体構成｝
図１は、カラオケシステム１の全体図である。図１に示すように、カラオケシステム１は、カラオケシステム１は、本体装置２と、モニタ３と、マイク４と、リモートコントローラ５とを備える。
【００２３】
本体装置２は、カラオケシステム１の全体制御を行う処理装置である。本体装置２は、ユーザが選択した楽曲データを再生するとともに、仮想的なライブの映像を出力する。
【００２４】
モニタ３は、液晶ディスプレイなどであり、本体装置２から出力される仮想的なライブの映像を表示する。つまり、モニタの画面３ａには、大勢の観客が入場したライブ会場の様子が記録された映像が表示される。モニタ３は、図示しないスピーカを備えており、本体装置２により再生される楽曲データを音声として出力する。
【００２５】
マイク４は、ユーザが歌を歌うときに音声を入力する音声入力装置である。マイク４は、ユーザが入力する音声を音声データとして本体装置２に出力する。
【００２６】
リモートコントローラ５は、ユーザがカラオケで楽曲を選択するときに用いる装置である。リモートコントローラ５は、楽曲データが再生されているときに、仮想的なライブの演出を指示する演出指示装置として機能とする。リモートコントローラ５を演出指示装置として用いる場合、マイク４を持つユーザとは別のユーザが、リモートコントローラ５を操作する。
【００２７】
図２は、カラオケシステム１におけるマイク４及びリモートコントローラ５の使用方法を示す図である。図２では、本体装置２の表示を省略している。ユーザ１１は、マイク４を持って、本体装置２により再生される楽曲に合わせて歌を歌う。画面３ａには、仮想的なライブ会場でライブを行うキャラクタとして、ボーカル３１とギタリスト３２とが表示される。マイク４を持つユーザ１１は、仮想的なライブにおいて、ボーカル３１を担当する。
【００２８】
ユーザ１２は、リモートコントローラ５を操作して、仮想的なライブの演出を行う。つまり、ユーザ１２は、ライブの演出担当者として、画面３ａに表示される仮想的なライブの映像や音声を変化させる。ユーザ１２は、歌を歌わないときであっても、ユーザ１１とともに仮想的なライブを盛り上げることができる。このように、ユーザ１１，１２は、歌を歌うシンガーや演出担当者など、ライブにおける様々な役割を担当して仮想的なライブを盛り上げることができるため、カラオケを一緒に楽しむことができる。
【００２９】
図３は、本体装置２の機能的構成を示すブロック図である。図３に示すように、本体装置２は、無線通信部２１と、データ取得部２２と、記憶部２３と、ライブデータ作成部２４と、再生部２５と、演出評価部２６と、演出インタフェース作成部２７とを備える。
【００３０】
無線通信部２１は、マイク４及びリモートコントローラ５と無線通信を行う。無線通信部２１は、マイク４が生成した音声データ４Ａを受信する。無線通信部２１は、コントローラ５が生成した音声データ５Ａ及び演出指示情報６４を受信する。無線通信には、Ｂｌｕｅｔｏｏｔｈ（登録商標）、無線ＬＡＮ、赤外線通信などを利用することができる。
【００３１】
データ取得部２２は、ユーザが選択した楽曲に対応する楽曲データ６１を取得する。楽曲データ６１は、ユーザが選択した楽曲の演奏音を記録したデータである。
【００３２】
記憶部２３は、ハードディスク装置などであり、楽曲データ６１と、会場データ６２とを記憶する。会場データ６２は、仮想的なライブの映像及び音声が記録されたライブデータ６３を作成する際に用いられる。会場データ６２は、ボーカル３１、ギタリスト３２、ライブ会場の入場者などのオブジェクトデータを含む。会場データ６２は、ライブ会場の構造を示すデータとして、ステージや客席などの位置関係を示すデータを含む。
【００３３】
ライブデータ作成部２４は、マイク４から入力される音声データ４Ａと、楽曲データ６１と、会場データ６２とを用いて、仮想的なライブ会場で行われるライブの映像及び音声が記録されたライブデータ６３を作成する。ライブの映像は、ライブ会場のステージだけでなく、入場者や、ライブ会場全体の様子を示す映像を含む。ライブの音声は、楽曲データ６１の再生音及びユーザ１１の音声だけでなく、入場者の歓声、ユーザ１２に操作に基づく演出音などを含む。
【００３４】
ライブデータ作成部２４は、リモートコントローラ５から送信される演出指示情報６４に基づいて、ライブデータ６３の作成条件を変更する。演出指示情報６４は、仮想的なライブにおける演出内容を指示した情報であり、リモートコントローラ５から送信される。
【００３５】
再生部２５は、ライブデータ６３を再生して、ライブの映像及び音声をモニタ３に出力する。
【００３６】
演出評価部２６は、演出指示情報６４に基づいて、ライブの演出に対する評価を行う。演出評価部２６は、評価結果に基づいて、ライブの演出に対して反応する入場者の様子を示すライブデータ６３の作成を指示する。評価結果に基づいて、入場者が大きな歓声を上げたり、入場者がブーイングをしたりするライブデータ６３が作成される。
【００３７】
演出インタフェース作成部２７は、ユーザ１２が選択した演出方法に応じた演出インタフェースを作成する。演出インタフェースは、リモートコントローラ５のタッチパネル式ディプレイ５４（図４参照）に表示される。
【００３８】
図４は、リモートコントローラ５の機能的構成を示すブロック図である。図４に示すように、リモートコントローラ５は、音声入力部５１と、センサ部５２と、無線通信部５３と、タッチパネル式ディプレイ５４と、演出内容指示部５５とを備える。
【００３９】
音声入力部５１は、ユーザが発する音声を入力して電気信号に変換し、音声データ５Ａを出力する。センサ部５２は、リモートコントローラ５の動きの変化を検出する加速度センサを備えており、リモートコントローラ５の動きを示す動き情報５２Ａを出力する。センサ部５２は、加速度センサの他に、地磁気センサやジャイロスコープなどを備えていてもよい。
【００４０】
無線通信部５３は、本体装置２と無線通信を行い、音声データ５Ａ及び演出指示情報６４を本体装置２に送信する。タッチパネル式ディプレイ５４は、演出指示用のインタフェースを表示する。ユーザ１２は、タッチパネル式ディプレイ５４に表示されたインタフェースを利用して、仮想的なライブに対する演出を指示する。
【００４１】
演出内容指示部５５は、本体装置２から送信される演出インタフェースをタッチパネル式ディスプレイ５４に表示させる。演出内容指示部５５は、ユーザ１２による演出インタフェースの操作に基づいて、演出指示情報６４を作成して本体装置２に送信する。演出インタフェースの詳細は、後述する。
【００４２】
｛２．演出処理の概要｝
以下、ユーザ１２によるリモートコントローラ５の操作に応じて、仮想的なライブの演出が行われる処理について、本体装置２の動作を中心に説明する。図５は、本体装置２の動作の流れを示すフローチャートである。
【００４３】
最初に、ユーザ１１が、リモートコントローラ５を操作して、カラオケで歌いたい楽曲データ６１を選択する。データ取得部２２は、選択された楽曲データ６１を楽曲サーバ（図示省略）から取得する（ステップＳ１）。データ取得部２２は、取得した楽曲データ６１を記憶部２３に格納する。会場データ６２は、記憶部２３に予め格納されている。
【００４４】
ライブデータ作成部２４は、楽曲データ６１と会場データ６２とを用いて、ライブデータ６３の作成を開始する（ステップＳ２）。具体的には、ライブデータ作成部２４は、会場データ６１を用いて、仮想的なライブ会場の映像が記録された映像データを作成する。ライブデータ作成部２４は、作成した映像データと、楽曲データ６１とを含むデータを、ライブデータ６３として再生部２５に出力する。
【００４５】
本体装置２がマイク４から音声データ４Ａを受信した場合、ライブデータ作成部２４は、音声データ４Ａを含むライブデータ６３を作成する。これにより、ユーザ１１の歌が、モニタ３から出力される。ライブデータ作成部２４は、楽曲データ６１の前奏や、サビが再生されるタイミングに合わせて、入場者の歓声などが記録された音声データをライブデータ６３に含めてもよい。
【００４６】
再生部２５は、ライブデータ作成部２４が作成したライブデータ６３の再生を開始する（ステップＳ３）。ライブデータ６３が再生されることにより、仮想的なライブの映像が画面３ａに表示され、楽曲データ６１の再生音がモニタ３のスピーカから出力される。
【００４７】
本体装置２は、楽曲データ６１の再生が終了するまで（ステップＳ４においてＹｅｓ）、ステップＳ５〜ステップＳ８の処理を繰り返し実行する。図２に示すように、楽曲データ６１が再生されている間、ユーザ１１は、マイク４を持って歌を歌う。ユーザ１２は、リモートコントローラ５を操作して、仮想的なライブの演出を行う。リモートコントローラ５は、ユーザ１２の操作に応じた演出指示情報６４を作成し、リアルタイムに本体装置２に送信する。
【００４８】
本体装置２が演出指示情報６４を受信した場合（ステップＳ５においてＹｅｓ）、ライブデータ作成部２４は、演出指示情報６４に基づいて、ライブデータ６３の作成条件を変更する（ステップＳ６）。ライブデータ作成部２４は、演出指示情報６４に基づいて変更した作成条件に基づいて、ライブデータ６３を作成する（ステップＳ７）。たとえば、演出指示情報６４が、花火の打ち上げを指示する情報であった場合、ライブデータ６３は、ライブ会場に花火が打ち上げられる様子を示す映像を作成する。ユーザ１２が仮想的なライブにおいて演出できる内容の詳細は、後述する。
【００４９】
演出評価部２６は、演出指示情報６４が入力されたタイミング、及び演出指示情報６４により指示された演出の内容などに基づいて、演出に対する評価を行う（ステップＳ８）。たとえば、楽曲データ６１のサビの部分が再生されているときに、花火が打ち上げられた場合、演出評価部２６は、入場者を盛り上げることができたと判断して、ユーザ１２の演出に対して高い点数を付与する。
【００５０】
ライブデータ６３の再生が終了した（楽曲データ６１の再生が終了した）場合、演出評価部２６は、ユーザ１２の演出に対して付与された点数を合計する（ステップＳ９）。演出評価部２６は、点数の合計値に基づいて、入場者の反応を示すライブデータ６３の作成を指示する。ライブデータ作成部２４により作成されたライブデータ６３が、再生部２５により再生される（ステップＳ１０）。
【００５１】
図６は、入場者の反応を示すライブデータ６３が再生されたときのモニタ３の映像を示す図である。合計値がしきい値よりも高ければ、図６に示すように、入場者全員が拍手をする映像が、画面３ａに表示され、入場者の歓声が、モニタ３のスピーカから出力される。総得点が低ければ、入場者がブーイングをする映像及び音声が、モニタ３から出力される。
【００５２】
これにより、ユーザ１２は、仮想的なライブの演出に対する評価を知ることができる。ユーザ１２の演出に対する評価がライブ会場の入場者の反応として示されるため、ユーザ１２は、実際のライブの演出を行うときのような緊張感を持ちながら、リモートコントローラ５を操作することができる。
【００５３】
演出評価部２６は、ユーザ１２の演出に対する評価を行うたびに、評価結果に応じたライブデータ６３の生成をライブデータ作成部２４に指示してもよい。この場合、ライブデータ作成部２４は、演出指示情報６４に対応するライブデータ６３を作成した後に、演出評価部２６が付与した点数に対応するライブデータ６３（入場者の反応を示すデータ）を作成する。ユーザ１２がライブの演出を指示するたびに、ライブの演出に対する入場者の反応が、モニタ３から出力される。したがって、ユーザ１２は、リモートコントローラ５を操作するたびに、仮想的なライブに対する演出の評価を知ることができる。
【００５４】
｛３．演出の具体例｝
以下、ユーザ１２がリモートコントローラ５を操作することにより、仮想的なライブで行うことができる演出の具体例として、楽曲紹介、ミキサ操作、花火打ち上げ、照明指示について説明する。
【００５５】
｛３．１．楽曲紹介｝
楽曲紹介は、ユーザ１２がライブの司会者として、ユーザ１１が歌う楽曲を紹介する演出方法である。
【００５６】
楽曲紹介が行われる手順について、詳しく説明する。ユーザ１２は、リモートコントローラ５を操作して、演出方法の選択画面（図示省略）をタッチパネル式ディスプレイ５４に表示させる。ユーザ１２が「楽曲紹介」を選択することにより、楽曲紹介用の演出インタフェースが、タッチパネル式ディスプレイ５４に表示される。
【００５７】
図７は、楽曲紹介用の演出インタフェース７１が表示されたリモートコントローラ５を示す図である。ユーザ１２が楽曲紹介を選択した場合、演出内容指示部５５は、演出インタフェース７１の表示を本体装置２に要求する。演出インタフェース生成部２７は、演出内容指示部５５の要求に応じて、演出インタフェース７１を作成してリモートコントローラ５に送信する。これにより、図７に示すように、演出インタフェース７１が、タッチパネル式ディスプレイ５４に表示される。
【００５８】
演出インタフェース７１には、ユーザ１２が楽曲紹介をするための原稿データ７１Ａが表示される。演出インタフェース生成部２７には、様々なパターンの原稿データ７１Ａ，７１Ａ・・・が設定されている。演出インタフェース生成部２７は、ユーザ１１が選択した楽曲データ６１の前奏の長さや、楽曲データ６１のジャンルなどに基づいて原稿データ７１Ａを選択する。選択された原稿データ７１Ａに基づいて、演出インタフェース７１の画面データが作成される。
【００５９】
ユーザ１１により選択された楽曲データ６１の再生が開始された場合、ライブデータ作成部２４は、図２に示すように、ステージに立つボーカル３１やギタリスト３２などのキャラクタの映像が記録されたライブデータ６３を作成する。このとき、ライブデータ作成部２４は、ボーカル３１などとともに、ユーザ１２に対応する司会者の映像が記録されたライブデータ６３を作成してもよい。
【００６０】
ユーザ１２は、楽曲データ６１の前奏の再生が終了するまでに、演出インタフェース７１に表示された原稿データ７１Ａを音読することにより、ユーザ１１が歌う楽曲を紹介する。
【００６１】
具体的には、音声入力部５１は、ユーザ１２の音声を入力して音声データ５Ａを生成する。演出内容指示部５５は、音声データ５Ａを、演出指示情報６４としてリアルタイムに本体装置２へ送信する。ライブデータ作成部２４は、音声データ５Ａを含むライブデータ６３を作成して再生部２４に出力する。これにより、楽曲紹介の音声が、モニタ３のスピーカから出力される。ユーザ１２は、演出インタフェース７１に表示された原稿データ７１Ａを読み終わった場合（楽曲紹介が終了した場合）、終了ボタン７１Ｂにタッチする。これにより、演出内容指示部５５は、楽曲紹介が終了したことを示す演出指示情報６４（紹介終了通知）を、本体装置２に送信する。
【００６２】
演出評価部２６は、紹介終了通知に基づいてユーザ１２が行った楽曲紹介を評価する。具体的には、演出評価部２６は、前奏が終了するタイミング（ユーザ１１が歌い出す直前）に、楽曲紹介が終了した場合、ユーザ１２が行った楽曲紹介に対して高い点数を付与する。このとき、演出評価部２６は、楽曲紹介が終了したタイミングと、前奏が終了したタイミングとの差が小さいほど、楽曲紹介に対して付与する点数を高くしてもよい。前奏が終了するまでに楽曲紹介が終了しない場合、演出評価部２６は、楽曲紹介に対して点数を付与しない。
【００６３】
ライブデータ作成部２４は、付与された点数に基づいて、ライブ会場の入場者の反応を示すライブデータ６３を作成する。たとえば、点数が高い場合、ライブデータ作成部２４は、図６に示すように、入場者全員が拍手する映像が記録されたライブデータ６３を作成する。
【００６４】
演出評価部２６は、ユーザ１２が原稿を誤ることなく読めたかどうかを判定することにより、楽曲紹介の判定を行ってもよい。たとえば、演出評価部２６は、音声データ５Ａに対して音声認識処理を行うことにより、ユーザ１２が音声入力部５１に入力したフレーズを特定する。演出評価部２６は、特定したフレーズと、演出インタフェース７１に表示された原稿データ７１Ｂとを比較することにより、原稿の読み誤りがあるか否かを判定することができる。
【００６５】
演出評価部２６は、ユーザ１２が原稿を読むリズムに基づいて、ユーザ１２が行う楽曲紹介を評価してもよい。この場合、演出評価部２６は、音声データ５Ａに基づいて、ユーザ１２が原稿を読むリズムを検出する。前奏のリズムと、原稿を読むリズムとのずれが小さい場合、演出評価部２６は、楽曲紹介に対して高い点数を付与してもよい。
【００６６】
このように、ユーザ１２は、司会者としてライブの演出を行うことにより、カラオケで歌を歌わなくても、ライブの緊張感を疑似的に体験することができる。
【００６７】
｛３．２．ミキサ操作｝
ミキサ操作は、楽曲データ６１の再生条件を変更したり、マイク４のオン、オフを切り替えたりすることにより、ライブで演奏される楽曲の出力条件を調整する演出方法である。ユーザ１２は、タッチパネル式ディスプレイ５４に表示される仮想的なミキサを操作することにより、ライブの演出を行う。
【００６８】
図８は、ミキサ操作に対応する演出インタフェース７２が表示されたリモートコントローラ５を示す図である。ユーザ１２は、リモートコントローラ５を操作して、「ミキサ操作」を選択する。演出内容指示部５５は、ユーザ１２の選択に応じて、ミキサ操作用の演出インタフェース７２の表示を本体装置２に要求する。演出インタフェース作成部２７は、ミキサ操作に用いる演出インタフェース７２を作成して、リモートコントローラ５に送信する。これにより、図８に示す演出インタフェース７２が、リモートコントローラ５に表示される。
【００６９】
図９は、楽曲データ６１の構成を示す図である。図９に示すように、楽曲データ６１は、ギター、ベース、キーボード、及びバックコーラスの各パートに対応したパートデータ６１ａ〜６１ｄにより構成される。ユーザ１２は、演出インタフェース７２を操作して、パートデータ６１ａ〜６１ｄの音量を調整することができる。
【００７０】
図８に示すように、演出インタフェース７２には、マイク４及び各パートに対応する音量コントローラ７２ａ，７２ａ，・・・と、ミュートボタン７２ｂ，７２ｂ，・・・と、ミュート解除ボタン７２ｃ，７２ｃ，・・・とが表示される。音量コントローラ７２ａは、マイク４または各パートの音量を調節するためのインタフェースである。ミュートボタン７２ｂは、マイク４または各パートをミュートにするためのインタフェースである。ミュート解除ボタン７２ｃは、マイク４または各パートのミュートを解除するためのインタフェースである。図８では、マイク４または各パートにおいて、ミュートが指示された場合、ミュートボタン７２ｂがハッチングで表示される。ミュートの解除が指示された場合、ミュート解除ボタン７２ｃがハッチングで表示される。
【００７１】
演出内容指示部５５は、ユーザ１２による演出インタフェース７２の操作に応じた演出指示情報６４を作成し、本体装置２にリアルタイムに送信する。ミキサ操作に対応する演出指示情報６４は、音量調節の対象となるパートを指定する情報と、指定されたパートの音量を指示する情報とを含む。ライブデータ作成部２４は、ミキサ操作に対応する演出指示情報６４に基づいて、マイク４またはパートデータ６１ａ〜６１ｄの音量を調節したライブデータ６３を作成する。
【００７２】
たとえば、ユーザ１２は、演出インタフェース７２を用いて、マイク４の音量を調節することができる。楽曲データ６１の再生が開始されるとき、ユーザ１２は、マイク４に対応するミュートボタン７２ｂにタッチする。マイク４のミュートを指示する演出指示情報６４が、本体装置２に送信される。ライブデータ作成部２４は、マイク４のミュートが指示された場合、マイク４から送信される音声データ４Ａ（図２参照）を、ライブデータ６３に含めない。ユーザ１１がマイク４に音声を入力したとしても、ユーザ１１の音声は、モニタ３から出力されない。
【００７３】
ユーザ１２は、楽曲データ６１の前奏が終了するタイミングで、マイク４に対応するミュート解除ボタン７２ｃにタッチする。マイク４のミュートの解除を指示する演出指示情報６４が、本体装置２に送信される。ライブデータ作成部２４は、音声データ４Ａを含むライブデータ６３を作成する。これにより、ユーザ１１の歌声が、モニタ３から出力される。
【００７４】
ユーザ１２は、ギターのソロ演奏が行われるときに、ミキサ操作を行ってもよい。たとえば、ライブデータ作成部２４は、ギターのソロ演奏の開始タイミングと終了タイミングとを示すメッセージを付加した映像を作成することにより、ギターのソロ演奏の開始タイミングと終了タイミングとをユーザ１２に通知する。
【００７５】
ユーザ１２は、ソロ演奏が開始されるタイミングで、マイク４と、ギターを除く他のパートとの音量が小さくなるように、音量コントローラ７２ａをスライドさせる。ユーザ１２は、ギターの音量が大きくなるように、音量コントローラ７２ａをスライドさせることにより、パートデータ６１ａの音量を大きくしてもよい。ギターソロが終了するタイミングで、ユーザ１２は、マイク４と、ギターを除く各パートとに対応するミュート解除ボタン７２ｃにタッチする。これにより、通常の演奏を再開させることができる。
【００７６】
演出評価部２６は、演出指示情報６４により指示される音量調節の内容や、音量調節が指示されたタイミングなどに基づいて、ミキサ操作の演出に対する評価を行う。たとえば、上述のように、ユーザ１２が、前奏が終了するタイミングでマイク４のミュートを解除した場合、ミキサ操作に対して付与される点数が高くなる。このとき、演出評価部２６は、前奏が終了するタイミングと、マイク４のミュートが解除されたタイミングとの時間差が小さいほど、付与する点数を高くすればよい。前奏が終了してもマイク４のミュートが解除されない場合、ユーザ１１の歌声が、仮想的なライブ会場に流れないため、付与される点数が低くなる。
【００７７】
また、ユーザ１２は、各パートの音量を適切なレベルに調節することにより、ハウリングがライブ会場で発生することを防止することができる。音量コントローラ７２ａ，７２ａ，・・・の全ての音量レベルが所定レベル（たとえば、２以上）となった場合、ライブデータ作成部２４は、ハウリングの音声を含むライブデータ６３を作成する。この場合、演出評価部２６は、ユーザ１２がミキサの操作を誤ったと判断して、ミキサ操作に付与された点数を減点する。
【００７８】
図８では、各パートとマイク４の音量調節機能のみを有する演出インタフェース７２を示している。しかし、一般に用いられるオーディオミキサのように、演出インタフェース７２は、各パートデータの再生時の周波数特性を変更するイコライザ機能などを有していてもよい。
【００７９】
このように、ユーザ１１のマイクや、楽曲の各パートの音量調節をリアルタイムで行うことができる。したがって、ユーザ１２は、仮想的なライブの音響担当者としてリモートコントローラ５を操作することにより、ユーザ１１と一緒にカラオケを楽しむことができる。
【００８０】
｛３．３．花火の打ち上げ｝
花火の打ち上げは、楽曲データ６１の再生中に仮想的なライブ会場に花火を打ち上げる演出方法である。ユーザ１２は、花火打ち上げ用の演出インタフェースを操作することにより、ライブ会場で打ち上げられる花火の種類と、花火の打ち上げタイミングとを指示することができる。
【００８１】
図１０は、花火打ち上げ用の演出インタフェース７３が表示されたリモートコントローラ５を示す図である。演出内容指示部５５は、ユーザ１２の選択に応じて、花火の打ち上げ制御用の演出インタフェース７３の表示を本体装置２に要求する。演出インタフェース作成部２７は、演出インタフェース７３を作成して、リモートコントローラ５に送信する。これにより、図１０に示す演出インタフェース７３が、リモートコントローラ５に表示される。
【００８２】
ユーザ１２は、楽曲データ６１が再生されているときに、演出インタフェース７３を操作して、打ち上げる花火の選択と、選択した花火の打ち上げとを指示することができる。具体的には、ユーザ１２は、演出インタフェース７３に表示された花火７３ａ〜７３ｃのいずれかにタッチして、打ち上げる花火を選択する。図１０に示す演出インタフェース７３では、花火７３ｂが選択されている。ユーザ１２は、打ち上げボタン７３ｄにタッチすることにより、選択された花火７３ｂの打ち上げを指示する。
【００８３】
図１１は、ライブ会場に花火が打ち上げられる様子を示す図である。打ち上げボタン７３ｄがタッチされた場合、演出内容指示部５５は、選択された花火７３ｂの打ち上げを指示する演出指示情報６４を本体装置に送信する。ライブデータ作成部２４は、受信した演出指示情報６４に基づいて、ステージの背後に花火７３ｄが打ち上げられる映像と、花火の爆発音とを含むライブデータ６３を作成する。図１１に示すように、モニタ３の画面３ａには、ライブ会場のステージの背後に、花火が打ち上げられる映像が表示される。
【００８４】
ユーザ１２は、上述の操作を繰り返すことにより、ステージの背後に連続的に花火を打ち上げることができる。ユーザ１２は、花火７３ａ，７３ｂの両者を選択して、打ち上げ指示ボタン７３ｄにタッチしてもよい。この場合、ライブデータ作成部２４は、花火７３ａ，７３ｂが同時に打ち上げられる映像を含むライブデータ６３を作成する。
【００８５】
演出評価部２６は、花火の打ち上げを指示する演出指示情報６４に基づいて、花火の打ち上げに対する評価を行う。つまり、花火を打ち上げるタイミングや、打ち上げた花火の数などに基づいて、花火の打ち上げに対する採点が行われる。楽曲のサビの演奏が開始されるタイミングや、楽曲データ６１の再生が終了するタイミングに、花火の打ち上げが指示された場合、演出評価部２６は、花火の打ち上げの演出に対して、高い点数を付与する。
【００８６】
｛３．４．照明の演出（その１）｝
ユーザ１２は、ライブ会場の照明担当者となって、仮想的なライブの演出を行うことができる。つまり、ユーザ１２は、リモートコントローラ５を操作して、ライブ会場の様々な場所に照明をあてることができる。
【００８７】
図１２は、照明指示用の演出インタフェース７４が表示されたリモートコントローラ５を示す図である。ユーザ１２は、リモートコントローラ５を操作して、「照明指示」を選択する。演出内容指示部５５は、ユーザ１２の選択に応じて、照明指示用の演出インタフェース７４の表示を本体装置２に要求する。演出インタフェース作成部２７は、演出インタフェース７４を作成して、リモートコントローラ５に送信する。これにより、図１２に示すように、演出インタフェース７４が、リモートコントローラ５に表示される。
【００８８】
演出インタフェース７４は、映像表示欄７４ａと、照明指示欄７４ｂとを備える。映像表示欄７４ａは、ライブ会場のステージの様子を示す映像データ７４ｃを表示する。照明指示欄７４ｂは、照明のオン、オフを指示するボタンを表示する。モニタ３は、映像データ７４ｃと同じ映像を表示する。ユーザ１２は、演出インタフェース７４を操作することにより、ステージに立つボーカル３１や、ギタリスト３２に照明をあてることができる。
【００８９】
図１３は、照明をあてる対象が選択された演出用インタフェース７４を示す図である。ボーカル３１に照明をあてる場合、ユーザ１２は、映像表示欄７４ａに表示されたボーカル３１にタッチする。演出内容指示部５５は、照明をあてる対象として、映像表示欄７４ａに表示されたボーカル３１をハッチングで表示する。
【００９０】
次に、ユーザ１２は、照明指示欄７４ｂの「ＯＮ」にタッチすることにより、ボーカル７４に照明をあてることを指示する。演出内容指示部５５は、ボーカル３１に照明をあてることを指示する演出指示情報６４を作成して、本体装置２に送信する。ライブデータ作成部２４は、演出指示情報６４に基づいて、ボーカル３１に照明が当たる映像を含むライブデータ６３を作成する。
【００９１】
本体装置２は、作成されたライブデータ６３を、映像データ７４ｃとしてリモートコントローラ５に送信する。図１２に示すように、ボーカル３１に照明があたる様子を示す映像データ７４ｃが、映像表示欄７４ａに表示される。再生部２５がライブデータ６３を再生することにより、モニタ３は、図１２に示す映像データ７４ｃと同じ映像を表示する。
【００９２】
ユーザ１２は、照明をあてる対象を変更することができる。たとえば、楽曲データ６１の再生中に、ギターのソロ演奏が行われる場合、照明の対象をギタリスト３２に変更することができる。ユーザ１２は、映像表示欄７４ａに表示されたボーカル３１を選択して、照明指示欄７４ｂの「ＯＦＦ」をタッチする。次に、ユーザ１２は、映像表示欄７４ａに表示されたギタリスト３２を選択して、照明指示欄７４ｂの「ＯＮ」をタッチする。これにより、照明がボーカル３１からギタリスト３２に切り替わる。
【００９３】
また、ユーザ１２は、ボーカル３１及びギタリスト３２の両者を選択して、照明指示欄７４ｂの「ＯＮ」をタッチしてもよい。この場合、ボーカル３１及びギタリスト３２の両者に照明があたる映像データ７４ｃが、映像表示欄７４ａに表示される。
【００９４】
演出評価部２６は、演出指示情報６４の内容や、演出指示情報６４を受信したタイミングに基づいて、照明の演出に対する評価を行う。たとえば、楽曲のサビが再生されるタイミングで、ボーカル３１だけに照明が当てられた場合、照明の演出に対して高い点数が付与される。同様に、ギターのソロ演奏が行われるタイミングで、ギタリスト３２だけに照明をあてることにより、照明の演出に対して高い点数が付与される。サビが再生されるタイミングで、ボーカル３１ではなく、ギタリスト３２に照明が当てられた場合、演出評価部２６は、照明の演出に対して点数を付与しない。あるいは、演出評価部２６は、付与された点数を減点してもよい。
【００９５】
｛３．５．照明の演出（その２）｝
ユーザ１２は、リモートコントローラ５を動かすことにより、照明をあてる照射方向を指定してもよい。ユーザ１２は、ステージだけでなく、ライブ会場の入場者に照明をあてることが可能となる。この場合、照明方向が、センサ部５２から出力される動き情報５２Ａ（図４参照）に基づいて、決定される。
【００９６】
図１４は、照明方向を決定するときのリモートコントローラ５の操作方法を説明する図である。図１４では、リモートコントローラ５を持つユーザ１２の表示を省略している。楽曲データ６１の再生が開始される前に、ユーザ１２は、リモートコントローラ５の基準方向を決定する。具体的には、図１４に示すように、ユーザ１２は、タッチパネル式ディスプレイ５４をユーザ１２に対向させながら、リモートコントローラ５をモニタ３の方向（矢印７４ｄの方向）に向ける。演出内容指示部５５は、矢印７４ｄの方向を、リモートコントローラ５の基準方向に設定する。基準方向を示す情報が、演出指示情報６４として本体装置２に送信される。リモートコントローラ５の基準位置は、客席の最前列に対応すると仮定する。
【００９７】
ユーザ１２は、楽曲データ６１が再生されている間、リモートコントローラ５の向きを矢印７４ｅ，７４ｅの方向に変えることにより、照射方向を指定する。演出内容指示部５５は、センサ部５２から出力される動き情報５２Ａを、演出指示情報６４としてリアルタイムに本体装置２に送信する。
【００９８】
ライブデータ作成部２４は、リモートコントローラ５の基準位置、基準方向、及び動き情報５２Ａに基づいて、照射方向を決定する。ライブデータ作成部２４は、基準位置から照射方向を見たときのライブ会場の様子を示す映像データ７４ｃを作成する。本体装置２は、作成された映像データ７４ｃをリモートコントローラ５に送信する。照射方向に対応する映像データ７４ｃの作成及び送信は、リアルタイムで行われる。これにより、映像表示欄７４ａには、照射方向の会場の様子を示す映像データ７４ｃが表示される。
【００９９】
図１５は、照射方向の会場の様子を示す映像データ７４ｃが表示されたリモートコントローラ５を示す図である。ユーザ１２がリモートコントローラ５を基準方向の反対方向に向けた場合、照明方向は、基準位置から客席のある方向に設定される。この結果、図１５に示すように、ライブ会場の入場者が映像表示欄７４ａに表示される。
【０１００】
モニタ３の画面３ａには、楽曲データ６１が再生されている間、ライブ会場のステージの映像（図２参照）が表示される。したがって、ユーザ１１、１２は、それぞれの役割に応じた画面を見ながら、仮想的なライブを盛り上げることが可能となる。
【０１０１】
ユーザ１２は、入場者の映像が映像表示欄７４ａに表示された状態で、照明指示欄７４ｂの「ＯＮ」をタッチする。演出内容指示部５５は、照明をあてることを指示する演出指示情報６４を本体装置２に送信する。ライブデータ作成部２４は、演出指示情報６４と照射方向とに基づいて、客席に照明があたる様子を示す映像データ７４ｃを作成する。図１５において、ハッチング領域は、照明があたっている領域に対応する。ライブデータ作成部２４は、ハッチング領域にいる入場者が、大きく盛り上がる様子を示す映像データ７４ｃを作成してもよい。
【０１０２】
ユーザ１２は、照明指示欄７４ｂの「ＯＮ」を選択したままでリモートコントローラ５を動かしてもよい。この場合、照明があたる領域を、ライブ会場の中で移動させることができる。たとえば、楽曲データ６１の間奏が再生されているときなどに、ユーザ１２が入場者に照明をあてることにより、ライブを盛り上げることができる。
【０１０３】
ユーザ１２は、リモートコントローラ５をステージの方向に向けることにより、ボーカル３１及びギタリスト３２に照明をあてることができる。ライブデータ作成部２４は、照明方向がステージの方向であると判定した場合、ステージに照明があたる映像を含むライブデータ６３を作成する。この場合、モニタ３の画面３ａには、照明があたる様子を示す映像が表示される。
【０１０４】
演出評価部２６は、リモートコントローラ５を動かして照明位置を指示する場合にも、照明の演出に対する評価を行う。上述のように、ギターのソロ演奏が行われているときに、ギタリスト３２に照明をあてた場合には、演出評価部２６は、照明の演出に対して高い点数を付与する。また、楽曲データ６１の間奏が再生されているときに、入場者に照明があてた場合には、演出評価部２６は、照明の演出に対して高い点数を付与する。
【０１０５】
｛変形例｝
本実施の形態では、ユーザ１１が行うパフォーマンスとして、ユーザ１１がマイク４を持って歌う例について説明した。しかし、ユーザ１１は、他のパフォーマンスを行ってもよい。たとえば、ユーザ１１は、本体装置２と通信可能な電子楽器装置を用いて、ライブのパフォーマンスを行ってもよい。
【０１０６】
たとえば、ユーザ１１は、ギターの形状をした電子楽器装置を持って、電子楽器装置の弦をはじく動作を行う。電子楽器装置は、ユーザの操作に応じた情報を本体装置２に送信する。ライブデータ作成部２４は、音声データ４Ａに代えて、ギターの演奏音を含むライブデータ６３を作成する。これにより、ユーザ１１は、仮想的なライブ会場で、ギタリストとしてパフォーマンスを行うことができる。
【０１０７】
本実施の形態において、カラオケシステム１は、複数のリモートコントローラ５を備えてもよい。各リモートコントローラを操作するユーザが、楽曲紹介、ミキサ操作、花火打ち上げ、及び照明操作の演出を担当する。これにより、複数の演出を並行して実行することができるため、グループのメンバー全員で、仮想的なライブを盛り上げることが可能となる。
【０１０８】
本実施の形態において、ライブデータ作成部２４が、映像及び音声が記録されたライブデータ６３を生成する例を説明した。しかし、ライブデータ６３は、映像及び音声の少なくとも一方を含むデータであればよい。たとえば、カラオケシステム１が、モニタ３に代えてスピーカを備えている場合、ライブデータ作成部６３は、音声のみを含むライブデータ６３を作成する。
【符号の説明】
【０１０９】
１ カラオケシステム
２ 本体装置
３ モニタ
３ａ 画面
４ マイク
５ リモートコントローラ
２４ ライブデータ作成部
２５ 再生部
２６ 演出評価部
２７ 演出インタフェース作成部
５１ 音声入力部
５２ センサ部
５４ タッチパネル式ディスプレイ
５５ 演出内容指示部
【特許請求の範囲】
【請求項１】
選択された楽曲データを再生する本体装置と、
第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、
第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、
を備え、
前記本体装置は、
前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部と、
前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観客の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部と、
前記パフォーマンス状況データと前記反応データとを再生する再生部と、
を備えるアミューズメントシステム。
【請求項２】
請求項１に記載のアミューズメントシステムにおいて、
前記演出評価部は、前記パフォーマンス状況データが再生される期間に生成された全ての演出指示情報に基づいて、前記第１ユーザのパフォーマンスの演出を評価して全体評価情報を生成し、前記全体評価情報に対応する反応データの生成を指示するアミューズメントシステム。
【請求項３】
請求項１または請求項２に記載のアミューズメントシステムにおいて、
前記演出評価部は、前記本体装置に前記演出指示情報が入力されるたびに、前記第１ユーザのパフォーマンスの演出を評価して個別評価情報を生成し、前記個別評価情報に対応する反応データの生成を指示するアミューズメントシステム。
【請求項４】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記第２ユーザの音声を入力して音声データを生成する音声入力部と、
前記パフォーマンス状況データの再生中に前記第２ユーザが読み上げるべき内容を表示し、前記音声データを前記演出指示情報として前記本体装置に出力する演出内容指示部と、
を備え、
前記パフォーマンス状況データ生成部は、前記音声データを含むパフォーマンス状況データを生成し、
前記演出評価部は、前記音声データの入力が終了したタイミングに基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項５】
請求項４に記載のアミューズメントシステムにおいて、
前記演出評価部は、前記音声データに対する音声認識処理を行って前記第２ユーザが前記音声入力部に入力した音声フレーズを特定し、前記音声フレーズと前記内容とを比較することにより、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項６】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記第２ユーザにより選択された花火の種類と、前記選択された花火の打ち上げとを指示する打ち上げ情報を生成し、前記打ち上げ情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、
を備え、
前記パフォーマンス状況データ生成部は、前記打ち上げ情報に基づいて、前記第１ユーザのパフォーマンスを演出する花火が打ち上げられる様子を示すパフォーマンス状況データを生成し、
前記演出評価部は、前記打ち上げ情報に基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項７】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記楽曲データは、楽曲の演奏パートのそれぞれに対応する複数のパートデータにより構成され、
前記演出指示装置は、
各パート楽曲データの再生条件を指定した再生条件情報を前記第２ユーザの操作に応じて生成し、前記再生条件情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、
を備え、
前記パフォーマンス状況データ生成部は、前記再生条件情報に基づいて、パート楽曲データの再生時の条件を変更したパフォーマンス状況データを生成し、
前記演出評価部は、前記再生条件情報に基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項８】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記第１ユーザのパフォーマンスを演出する照明の照射対象を示す照明対象情報を前記第２ユーザの操作に応じて生成し、前記照明対象情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、
を備え、
前記パフォーマンス状況データ生成部は、前記照明対象情報に基づいて、前記照明が照射される様子を示すパフォーマンス状況データを生成し、
前記演出評価部は、前記照明対象情報に基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項９】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記本体装置から送信される映像データを表示する表示部と、
前記演出指示装置の動きを検出して、動き情報を生成する動き検出部と、
前記動き情報を、前記演出指示情報として前記本体装置に出力する演出内容指示部と、
を備え、
前記本体装置は、さらに、
前記動き情報に基づいて、前記第１ユーザのパフォーマンスを演出する照明の照射領域を特定し、前記照明領域に照明があたる様子を示す照明映像データを生成する照明映像データ生成部と、
前記照明映像データを前記演出指示装置に出力する出力部と、
を備えるアミューズメントシステム。
【請求項１０】
選択された楽曲データを再生する本体装置と、
第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、
第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、
通信可能な本体装置に搭載されるコンピュータを、
前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部、
前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観覧者の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部、
前記パフォーマンス状況データと前記反応データとを再生する再生部、
として機能されるためのプログラム。
【請求項１】
選択された楽曲データを再生する本体装置と、
第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、
第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、
を備え、
前記本体装置は、
前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部と、
前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観客の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部と、
前記パフォーマンス状況データと前記反応データとを再生する再生部と、
を備えるアミューズメントシステム。
【請求項２】
請求項１に記載のアミューズメントシステムにおいて、
前記演出評価部は、前記パフォーマンス状況データが再生される期間に生成された全ての演出指示情報に基づいて、前記第１ユーザのパフォーマンスの演出を評価して全体評価情報を生成し、前記全体評価情報に対応する反応データの生成を指示するアミューズメントシステム。
【請求項３】
請求項１または請求項２に記載のアミューズメントシステムにおいて、
前記演出評価部は、前記本体装置に前記演出指示情報が入力されるたびに、前記第１ユーザのパフォーマンスの演出を評価して個別評価情報を生成し、前記個別評価情報に対応する反応データの生成を指示するアミューズメントシステム。
【請求項４】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記第２ユーザの音声を入力して音声データを生成する音声入力部と、
前記パフォーマンス状況データの再生中に前記第２ユーザが読み上げるべき内容を表示し、前記音声データを前記演出指示情報として前記本体装置に出力する演出内容指示部と、
を備え、
前記パフォーマンス状況データ生成部は、前記音声データを含むパフォーマンス状況データを生成し、
前記演出評価部は、前記音声データの入力が終了したタイミングに基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項５】
請求項４に記載のアミューズメントシステムにおいて、
前記演出評価部は、前記音声データに対する音声認識処理を行って前記第２ユーザが前記音声入力部に入力した音声フレーズを特定し、前記音声フレーズと前記内容とを比較することにより、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項６】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記第２ユーザにより選択された花火の種類と、前記選択された花火の打ち上げとを指示する打ち上げ情報を生成し、前記打ち上げ情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、
を備え、
前記パフォーマンス状況データ生成部は、前記打ち上げ情報に基づいて、前記第１ユーザのパフォーマンスを演出する花火が打ち上げられる様子を示すパフォーマンス状況データを生成し、
前記演出評価部は、前記打ち上げ情報に基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項７】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記楽曲データは、楽曲の演奏パートのそれぞれに対応する複数のパートデータにより構成され、
前記演出指示装置は、
各パート楽曲データの再生条件を指定した再生条件情報を前記第２ユーザの操作に応じて生成し、前記再生条件情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、
を備え、
前記パフォーマンス状況データ生成部は、前記再生条件情報に基づいて、パート楽曲データの再生時の条件を変更したパフォーマンス状況データを生成し、
前記演出評価部は、前記再生条件情報に基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項８】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記第１ユーザのパフォーマンスを演出する照明の照射対象を示す照明対象情報を前記第２ユーザの操作に応じて生成し、前記照明対象情報を前記演出指示情報として前記本体装置に出力する演出内容指示部、
を備え、
前記パフォーマンス状況データ生成部は、前記照明対象情報に基づいて、前記照明が照射される様子を示すパフォーマンス状況データを生成し、
前記演出評価部は、前記照明対象情報に基づいて、前記パフォーマンスの演出を評価するアミューズメントシステム。
【請求項９】
請求項１ないし請求項３のいずれかに記載のアミューズメントシステムにおいて、
前記演出指示装置は、
前記本体装置から送信される映像データを表示する表示部と、
前記演出指示装置の動きを検出して、動き情報を生成する動き検出部と、
前記動き情報を、前記演出指示情報として前記本体装置に出力する演出内容指示部と、
を備え、
前記本体装置は、さらに、
前記動き情報に基づいて、前記第１ユーザのパフォーマンスを演出する照明の照射領域を特定し、前記照明領域に照明があたる様子を示す照明映像データを生成する照明映像データ生成部と、
前記照明映像データを前記演出指示装置に出力する出力部と、
を備えるアミューズメントシステム。
【請求項１０】
選択された楽曲データを再生する本体装置と、
第１ユーザのパフォーマンスに応じたパフォーマンス情報を生成するパフォーマンス情報生成装置と、
第２ユーザの操作に応じて、前記第１ユーザのパフォーマンスの演出を指示する演出指示情報を生成する演出指示装置と、
通信可能な本体装置に搭載されるコンピュータを、
前記楽曲データと前記パフォーマンス情報とに基づいて、前記第１ユーザのパフォーマンスの状況を示すパフォーマンス状況データを生成し、前記演出指示情報に応じて前記パフォーマンス状況データの生成条件を変更するパフォーマンス状況データ生成部、
前記演出指示情報を参照して前記第１ユーザのパフォーマンスの演出内容を評価し、前記第１ユーザのパフォーマンスを観覧する観覧者の反応を示す反応データの生成を、評価結果に基づいて前記パフォーマンス状況データ生成部に指示する演出評価部、
前記パフォーマンス状況データと前記反応データとを再生する再生部、
として機能されるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２０１２−１０８４１４（Ｐ２０１２−１０８４１４Ａ）
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願番号】特願２０１０−２５８７０７（Ｐ２０１０−２５８７０７）
【出願日】平成２２年１１月１９日（２０１０．１１．１９）
【出願人】（５９１１２８４５３）株式会社メガチップス (322)
【Ｆターム（参考）】
【公開日】平成２４年６月７日（２０１２．６．７）
【国際特許分類】
【出願日】平成２２年１１月１９日（２０１０．１１．１９）
【出願人】（５９１１２８４５３）株式会社メガチップス (322)
【Ｆターム（参考）】
[ Back to top ]