背景映像可変表示機能を備えるカラオケシステム
【課題】楽曲演奏時に背景映像を表示させるカラオケシステムにおいて、歌唱者に観客の実感性を向上させて歌唱できるようにする。
【解決手段】表示手段３２のフレームサイズより大でスクロール表示可能な背景映像データを画像ＤＢ５４に記憶しておき、顔写真データを利用者ＩＤを関連付けて利用者ＤＢに格納しておく。予約待ち行列５２に利用者ＩＤが関連付けられた楽曲の演奏の際に、歌唱者認識手段４８が当該利用者ＩＤから歌唱者として取得した顔写真データより生成した顔データから歌唱者を楽曲演奏中に随時認識し、視野変化量算出手段４９が認識された顔データから歌唱者の顔部分の移動、向きを解析し、解析データから歌唱者の顔部分の移動量ないし角度変化量を特定し、映像表示制御手段４６がスクロールテーブル５５から背景映像データのスクロール量を追従させて表示させる構成とする。
【解決手段】表示手段３２のフレームサイズより大でスクロール表示可能な背景映像データを画像ＤＢ５４に記憶しておき、顔写真データを利用者ＩＤを関連付けて利用者ＤＢに格納しておく。予約待ち行列５２に利用者ＩＤが関連付けられた楽曲の演奏の際に、歌唱者認識手段４８が当該利用者ＩＤから歌唱者として取得した顔写真データより生成した顔データから歌唱者を楽曲演奏中に随時認識し、視野変化量算出手段４９が認識された顔データから歌唱者の顔部分の移動、向きを解析し、解析データから歌唱者の顔部分の移動量ないし角度変化量を特定し、映像表示制御手段４６がスクロールテーブル５５から背景映像データのスクロール量を追従させて表示させる構成とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、楽曲演奏時に背景映像を表示させるカラオケシステムに関する。
【背景技術】
【０００２】
カラオケシステムの背景映像とは、演奏される楽曲のジャンルに合わせて適宜に選択された映像を再生するものである。しかしながらこのような背景映像は、同一ジャンルの楽曲が連続的に演奏されたりすると、同じような映像が何度も再生される場合があり利用者は歌唱意欲を失ったりする。このような背景映像のマンネリ化に対して、利用者に対する利用喚起や利用満足性の向上を図る種々の機能を提供してきている中で、背景映像への工夫は必要不可欠なものになっている。カラオケ利用者は、歌唱力が向上すると観客の前で歌唱することを望むことが多く、カラオケの利用喚起、歌唱喚起のために背景映像に観客を表示させて擬似的にステージ等で歌唱しているように演出するサービスを提供することも行われているが、利用者にさらなる興味を惹くサービスの提供が望まれる。
【０００３】
そして、従来、カラオケシステムにおいて背景映像を用いてステージ歌唱を疑似体験させる技術として、以下の特許文献等で提案されている。特許文献１は、歌手等がステージで歌ったときの歌手等や観客の反応を記録したソフトウェアを用いて、スピーカーより再生すると共に、ディスプレイ装置上で再生することで、当該ディスプレイ装置で再生される歌手等や観客の反応を見ながら歌唱させることが提案されている。この特許文献１は、一方で、歌手等や観客の反応を見ながら歌唱することは当該ソフトウェアの歌唱楽曲と同じ楽曲を歌唱しなければ反応等の内容に不自然さが生じてしまうこととなり、ソフトウェアの歌唱楽曲に制限されることとなる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２８７３６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１は予め記録しておいたソフトウェアを再生するのみで、歌唱者の動きや顔の向きに伴う視野の変化とは無関係に表示されるものであり、歌唱者による観客の擬似的な見え方で臨場感に欠け、ステージ等上での歌唱による疑似体験の実感性が削がれるという問題がある。
【０００６】
そこで、本発明は上記課題に鑑みなされたもので、実際の歌唱者の動きや顔の向きに対応した、歌唱者から見た観客席への視野をリアリティに再現することで臨場感を与えて歌唱可能とする背景映像可変表示機能を備えるカラオケシステムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、請求項１の発明では、歌唱者に観客の前で歌唱させることを疑似体験させる背景映像可変表示機能を備え、背景映像データ記憶手段、歌唱者撮像手段、歌唱者認識手段、視野変化量算出手段及び表示制御手段を有してなるカラオケシステムであって、上記背景映像データ記憶手段は、歌唱時に表示させる背景映像データを、スクロール表示可能に前記表示手段のフレームサイズより大として記憶し、上記歌唱者撮像手段は、単一の又は連設した複数の撮像カメラを備え、少なくとも顔部分を含む歌唱者を撮像し、上記歌唱者認識手段は、所定の前記撮像カメラから撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、上記表示制御手段は、予め設定された、前記記憶されている表示すべき背景映像データのスクロール量と顔部分の移動量ないし角度変化量との関連付けに基づき、前記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを前記表示手段で表示させる、構成とする。
【０００８】
請求項２の発明では、利用者情報データベース、利用者ＩＤ取得手段、利用者情報管理手段及び選曲楽曲登録手段を備え、上記利用者情報データベースは、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納し、上記利用者ＩＤ取得手段は、利用者より利用者ＩＤを取得し、上記利用者情報管理手段は、前記利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、前記利用者情報データベースより顔写真データを取得して利用者情報として管理し、上記選曲楽曲登録手段は、前記利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、前記歌唱者認識手段が、前記登録楽曲の演奏開始時に、前記予約待ち行列で当該演奏楽曲に関連付けられた利用者ＩＤから前記利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する、構成である。
【０００９】
請求項３〜５の発明では、「請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、前記顔部分の移動量ないし角度変化量を歌唱者水平位置の変化量としてスクロール量に関連付け、上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、該歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出する」構成であり、
「請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、前記顔部分の移動量ないし角度変化量を歌唱者前後位置の変化量としてズームスクロール量に関連付け、前記視野変化量算出手段が、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から顔部分の前後の移動量を算出する」構成であり、
「請求項１に記載の背景映像可変表示機能を備えるカラオケシステムであって、前記歌唱者撮像手段は、所定の角度毎に撮像方向を設定して連設した複数の撮像カメラを備え、前記顔部分の移動量ないし角度変化量を歌唱者の顔角度の変化量としてスクロール量に関連付け、前記視野変化量算出手段が、前記何れかの撮像カメラが所定の顔部分の向きを捉えているかを特定し、特定された撮像カメラの撮像方向に基づいて、当該歌唱者の顔部分の向きを解析し、当該解析データから当該歌唱者の顔部分の角度変化量を算出する」構成である。
【発明の効果】
【００１０】
請求項１の発明によれば、利用者に観客の前で歌唱させることを疑似体験させる背景映像のデータを、スクロール表示可能に表示手段のフレームサイズより大として記憶しておき、少なくとも顔部分を含む歌唱者を撮像し、楽曲演奏開始時に撮像データから任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、認識された顔データに基づき当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、表示すべき背景映像データのスクロール量を予め顔部分の移動量ないし角度変化量に関連付けておき、上記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを表示させる構成とすることにより、歌唱者の動きによる視野に関係させて背景映像を変化させて表示させることから、歌唱者に観客前で歌唱していることの実感性を向上させて歌唱させることができるものである。具体的には、スナックやバーのようなナイト店舗やカラオケボックスのパーティルーム等のようなステージが設置された部屋にて歌唱者が歌唱する場合において、コンサートホールのようにステージから観客席を前にして歌唱しているような擬似的な体験をさせることができると共に、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験することが可能となり、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
【００１１】
請求項２の発明によれば、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納しておき、利用者情報データベースより顔写真データを取得して利用者情報として管理し、また、利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、登録楽曲の演奏開始時に予約待ち行列で関連付けられた利用者ＩＤから利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識させる構成とすることにより、上記同様の効果の他に、利用者ＩＤで関連付けられた顔データから利用者のうちの歌唱者を容易に特定させることができるものである。あるいは、カラオケボックスの部屋のように特別な歌唱者用のステージや歌唱スペースがなく、複数人が１つの部屋の中で歌唱する場合でも、歌唱者を特定することができ、コンサートホールのようにステージから観客席を前にして歌唱するような疑似的な体験をさせることができると共に、歌唱者の顔部分の位置、顔部分の向きによって背景映像がスクロールすることにより、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させることが可能となり、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
【００１２】
請求項３〜５の発明によれば、顔部分の移動量ないし角度変化量を歌唱者水平位置の変化量、歌唱者前後位置の変化量及び歌唱者の顔角度の変化量の少なくとも何れかとして対応するスクロール量、ズームスクロール量、角度スクロール量に関連付け、随時認識された当該歌唱者の顔データに基づいて、当該歌唱者の歌唱者水平位置、歌唱者前後位置及び歌唱者の顔角度の少なくとも何れかの変化量を特定する構成とすることにより、請求項１又は２の歌唱者の顔部分の位置、顔部分の向きを具体的に特定することができ、上記効果を具体的に実現することができるものである。
【図面の簡単な説明】
【００１３】
【図１】本発明に係るカラオケシステムの系統構成図である。
【図２】本発明のカラオケシステムにおけるカラオケ演奏端末に係るブロック構成図である。
【図３】図２のスクロールテーブルの第１実施形態の説明図である。
【図４】図３の予約待ち行列の説明図である。
【図５】図２における歌唱者位置特定の説明図である。
【図６】図２における背景映像のスクロール表示の説明図である。
【図７】本発明におけるカラオケシステムの第２実施形態のスクロール表示の説明図である。
【図８】本発明におけるカラオケシステムの第３実施形態のスクロール表示に係る利用者ＤＢの説明図である。
【図９】図８のスクロール表示に係るスクロールテーブルの説明図である。
【図１０】図８及び図９におけるスクロール表示の説明図である。
【図１１】本発明におけるカラオケシステムの第４実施形態のスクロール表示の説明図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施形態を図により説明する。
図１に、本発明に係るカラオケシステムの系統構成図を示す。図１（Ａ）は通信ネットワークを使用して本システムを構成させた場合のネットワーク模式図、図１（Ｂ）はホスト装置の概要ブロック構成図、図１（Ｃ）は利用者データベース（利用者ＤＢ）の説明図である。
【００１５】
図１（Ａ）において、ホスト装置１１はカラオケシステムの一部を構成するものとして、通信ネットワーク１２を介して所定数のカラオケ演奏端末１３（１３Ａ〜１３Ｎ）を管理するものであり、相互にデータ授受自在に接続されたものである。上記通信ネットワーク１２としては、例えば、一般公衆電話回線やこれを用いたＡＤＳＬや光通信回線或いはインターネット、さらにはＬＡＮがあるが、インターネット上に構築されるＶＰＮが好ましい。
【００１６】
ホスト装置１１は、図１（Ｂ）に示すように、少なくとも送受信手段２１、制御手段２２及び利用者情報データベース（利用者ＤＢ）２３を備える。上記送受信手段２１は、各カラオケ演奏端末１３（１３Ａ〜１３Ｎ）との通信（データ授受）を行うために、通信ネットワーク１２の通信方式と整合性をとるための例えば物理的な通信用回路やプラットフォーム等のソフトウエアにより構成される。
【００１７】
上記制御手段２２は、当該ホスト装置１１を統括的に制御するもので、例えば物理的なＣＰＵであり、図示しないＲＯＭに格納されているプログラムのアルゴリズム処理を行う。上記利用者ＤＢ２３は、図１（Ｃ）に示すように、予め登録された利用者に利用者ＩＤを付し、少なくとも当該利用者の顔写真データを取得して当該利用者ＩＤに関連付けられて管理されるものである。この顔写真データは、ここでは、一例として利用者の正面の顔部分を撮像したビットマップデータである。
【００１８】
次に、図２に本発明のカラオケシステムにおけるカラオケ演奏端末に係るブロック構成図を示すと共に、図３に図２のスクロールテーブルの第１実施形態の説明図を示し、図４に図３の予約待ち行列の説明図を示す。
【００１９】
図２において、カラオケ演奏端末１３は、主要装置としてのカラオケ本体３１に有線又は無線で外部接続されるものとして、表示手段である表示部３２、ミキシングアンプ３３、マイク３４、スピーカ３５及び歌唱者撮像手段である撮像部３６を備える。また、有線又は無線で遠隔入出力端末３７が接続される。
【００２０】
上記表示部３２は、通常の楽曲選曲表示やカラオケ演奏時の背景映像等をを表示するもので、例えば液晶ディスプレイ（ＬＣＤ）、プラズマディスプレイ（ＰＤＰ）、その他種々のディスプレイを採用することができる。上記ミキシングアンプ３３は、カラオケ本体３１より送られてくる演奏データに、マイク３４からの音声信号をミキシングし、増幅してスピーカ３５より出力する。
【００２１】
上記撮像部３６は、後述の図５に示すように、歌唱者の歌唱位置（例えば、図５に示すように７位置）に応じて連設した７台の撮像カメラ３６Ａ〜３６Ｇを備え、当該７台の撮像カメラ３６Ａ〜３６Ｇはその撮像範囲の歌唱位置を常に撮像し、撮像データをカラオケ本体３１の歌唱者認識手段（４８）に出力するもので、何れかによって少なくとも顔部分を含む歌唱者を随時撮像することとなる。
【００２２】
遠隔入出力端末３７は、図示しない端末送受信部により、カラオケ本体３１に対して有線方式ないし無線方式（ＩＲ方式やブルートゥース（登録商標）機構のピコネット接続方式など）を利用してデータ授受を行うためのもので、少なくとも利用者ＩＤ取得手段３８及び選曲楽曲登録手段３９を適宜備える。
【００２３】
上記利用者ＩＤ取得手段３８は、利用者より利用者ＩＤを取得する読み取り装置である。取得した利用者ＩＤは、後述の利用者管理手段（５０）の送出される。利用者ＩＤの取得（ログイン者情報）は、例えば、利用者の所持するＩＣカードから行う。
【００２４】
上記選曲楽曲登録手段３９は、カラオケ装置として公知のユーザインタフェース機能により利用者ＩＤに基づいて、楽曲を検索させ、選曲させるテーブルを備えるプログラムである。これら選曲された楽曲は、後述のカラオケ本体３１における予約待ち行列（５２）に選曲者の利用者ＩＤが付帯されて登録される（図４で説明する）。
【００２５】
上記カラオケ本体３１は、バス４１、中央制御部４２、ＲＯＭ４３、ＲＡＭ４４、記憶部４５、表示制御手段である映像再生制御手段４６、音楽演奏制御部４７、歌唱者認識手段４８、視野変化量算出手段４９、利用者管理手段５０及び送受信部５０Ａ，５０Ｂを適宜備える。また、上記ＲＡＭ４４には、利用者情報５１及び予約待ち行列５２の記憶領域が形成され、記憶部４５には、楽曲ＤＢ５３、背景映像データ記憶手段である映像ＤＢ５４及びスクロールテーブル５５が記憶される。なお、上記各構成について、本発明の要旨と直接関連しない要素部分であっても、従前のカラオケ装置においても大部分が適用可能であることを示すために、装置全体を説明する。
【００２６】
上記中央制御部４２は、このシステムを統括的に処理制御する物理的なＣＰＵであり、ＲＯＭ４３に記憶されているプログラムに基づくアルゴリズム処理を行う。上記ＲＡＭ４４は、利用者情報５１及び予約待ち行列５２の記憶領域が形成される他に、上記種々のプログラムを展開、実行させるための作業領域としての役割をなすもので、例えば半導体メモリで構成され、仮想的にハードディスク上に構築される場合をも含む概念である。
【００２７】
上記映像再生制御手段４６は、演奏時に、映像ＤＢ５４より抽出された背景映像を表示部３２に出力するものであり、表示すべき背景映像データを、スクロールテーブル５５を参照して、後述の視野変化量算出手段４９で算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて表示部３２上でスクロール表示させるプログラム乃至電子回路である。詳細は、図５、図６で説明する。スクロール表示は、コンピュータ上の表示やコンピュータゲーム（テレビゲーム）の表示で使用されている公知のスクロール技術が使用される。
【００２８】
上記音楽演奏制御部４７は、楽曲コードで楽曲ＤＢ５３より抽出された音符データをデジタル出力し、アナログ変換してミキシングアンプ３３に出力する電子回路である。
【００２９】
上記歌唱者認識手段４８は、上記撮像部３６の所定の撮像カメラから撮像データを取得し、登録楽曲の演奏開始時に、予約待ち行列５１で当該演奏楽曲に関連付けられた利用者ＩＤから利用者情報５１の顔デ写真ータを歌唱者として取得し、当該歌唱者心データから顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識するプログラムである。なお、顔データの解析、認識は、例えばデジタルカメラなどで使用されている公知の顔認識技術を使用することができる。
【００３０】
上記視野変化量算出手段４９は、歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出するプログラムである。
【００３１】
上記利用者情報管理手段５０は、利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、送受信部５０Ｂを介してホスト装置１１にアクセスし、利用者ＤＢ２３より顔写真データを取得して後述の利用者情報（５１）として記憶するプログラムである。
【００３２】
上記送受信部５０Ａは、遠隔入出力端末３７との間で有線方式ないし無線方式（ＩＲ方式やブルートゥース（登録商標）機構のピコネット接続方式など）を利用してデータ授受を行うためのもので、そのための電子回路及びプログラムである。上記送受信部５０Ｂは、上記ホスト装置１１と上記通信ネットワーク１２を介してデータ授受を行うためのもので、通信方式と整合性をとるための例えば物理的な通信用回路やプラットフォーム等のソフトウエアにより構成されるものである。
【００３３】
上記記憶部４５に記憶されている楽曲ＤＢ５３は、楽曲毎に、音符データ及び歌詞データを格納する。演奏に関して、具体的には、楽曲ＩＤ、曲名及びアーチストＩＤ（アーチスト名）が関連付けられた楽曲テーブルを有し、楽曲毎に、楽曲ＩＤで管理される所定データ形式のカラオケ楽曲の音符データ（例えば、ＭＩＤＩ（登録商標）形式の音符データ）等で構成される楽曲データ（ファイル）について楽曲コードをファイル名としてそれぞれ格納したデータベースである。
【００３４】
上記記憶部４５に記憶されている映像ＤＢ５４は、背景映像表示のための所定数の背景映像データを所定数格納するデータベースである。背景映像データは、利用者に観客の前で歌唱させることを疑似体験させるための観客（及びその周辺）を、例えばコンピュータグラフィックス（ＣＧ）で２Ｄ又は３Ｄ（好ましくは３Ｄ）で静止画映像、動画映像を問わずに作成されたもので、歌唱時に表示させる背景映像データを、スクロール表示可能に上記表示部３２のフレームサイズより大としたものである。なお、上記楽曲ＤＢ５３及び映像ＤＢ５４を、カラオケ本体３１ではなく、上記ホスト装置１１に備えさせることとしてもよい。
【００３５】
また、記憶部４５に記憶されているスクロールテーブル５５は、表示すべき背景映像データのスクロール量を予め顔部分の移動量ないし角度変化量に関連付けたものである。一例として、図３に示すように、顔部分の位置を歌唱者水平位置（歌唱者が水平方向に移動したときの位置）として、水平スクロール位置に関連付けたもので、例えば歌唱者水平位置１〜７に対して水平スクロール位置を、例えば中央位置（歌唱者位置４）をＬ０とした場合に対してＬ３〜−Ｌ３とさせたものである。上記歌唱者水平位置の変化分が顔部分の移動量ないし角度変化量となり、水平スクロール位置の差分が水平位置のスクロール量となる。なお、スクロールテーブル５５において、スクロール位置を予め定めた距離（位置）Ｌとする場合の他に、このスクロール位置を、顔部分の水平位置をパラメータとして、所定のアルゴリズムによる演算にて求める構成としてもよい。このことは、以下の実施形態においても同様である。
【００３６】
一方、上記ＲＡＭ４４に記憶される利用者情報５１は、上記遠隔入出力端末３７の利用者ＩＤ取得手段３８によって利用者ＤＢ２３より取得した顔写真データが利用者ＩＤと関連付けられて少なくとも記憶されるものであるが、そのほかに利用者ＤＢ２３に適宜登録されている利用者の氏名、ニックネーム、年齢、性別などをも適宜記憶される。ＲＡＭ４４に記憶される予約待ち行列５２は、図４に示すように、演奏する楽曲が予約順の楽曲ＩＤに、その選曲者の利用者ＩＤが付帯されて登録される。
【００３７】
なお、カラオケ演奏端末１３をスタンドアローンのカラオケシステムとして適用させる場合には上記ホスト装置１１の利用者ＤＢ２３を当該カラオケ本体３１に備えさせる構成とすることにより実現することができる。
【００３８】
そこで、図５に図２における歌唱者位置特定の説明図を示すと共に、図６に図２における背景映像のスクロール表示の説明図を示す。まず、前提として、複数の利用者のグループ等がカラオケ演奏端末１３を利用するものとして、利用時に各利用者による利用者ＩＤをカード等で遠隔入出力端末３７の利用者ＩＤ取得手段３８により利用者ＩＤを取得させる。当該利用者ＩＤ取得手段３８は、取得した利用者ＩＤをカラオケ本体の送受信部５０Ａを介して利用者管理手段５０に送出する。当該利用者管理手段５０は、送受信部５０Ｂよりコンピュータネットワーク１２を介してホスト装置１１にアクセスし、利用者ＩＤに基づいて利用者ＤＢ２３より当該利用者ＩＤの顔写真データ等を取得し、ＲＡＭ４４の利用者情報５１に当該利用者ＩＤに関連付けて記憶する。
【００３９】
また、所定の利用者が、遠隔入出力端末３７を使用して選曲楽曲登録手段３９で利用者ＩＤに基づいて選曲登録した場合、ＲＡＭ４４の予約待ち行列５２には、図４に示すように、少なくもと楽曲ＩＤに利用者ＩＤが関連付けられて登録される。そして、予約待ち行列５２に登録された順に演奏されるもので、その楽曲演奏時に、歌唱者認識手段４８が、当該演奏楽曲に関連付けられた利用者ＩＤに基づいて、利用者情報５１より当該利用者の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき当該グループ中の利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する。
【００４０】
そして、視野変化量算出手段４９は、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出していく。例えば、歌唱者の顔部分の水平方向の移動が、図５に示すように、撮像カメラ３６Ｄで撮像された歌唱者水平位置「４」から、撮像カメラ３６Ｇで撮像された歌唱者水平位置「６」に変化した変化量を当該利用者の顔部分の移動量として特定する。
【００４１】
一方、映像表示制御手段４６は、図６（Ａ）に示すように、上記視野変化量算出手段４９で算出した歌唱者６１の水平位置での変化（移動）量に追従させて背景映像データ５４Ａの表示部４２上での表示フレーム３２Ａを、スクロールテーブル５５を参照して、水平方向のスクロール量を算出してスクロールさせる。図５の例では、図６（Ｂ）に示すように、上記視野変化量算出手段４９が算出した撮像カメラ３６Ｄで撮像された歌唱者水平位置「４」から、撮像カメラ３６Ｇで撮像された歌唱者水平位置「６」への変化量からスクロールテーブル５５を参照し、スクロール位置「Ｌ０」からスクロール位置「−Ｌ２］へのスクロール量を算出して表示部３２上の背景映像５４Ａをスクロール表示させる制御を行うものである。そして、視野変化量算出手段４９で算出された顔部分の移動量（歌唱者の水平位置変化量）に当該スクロール量を追従させて背景映像データ５４Ａを表示部３２で表示させるものである。なお、表示部４２上で表示される映像には、当該歌唱楽曲の歌詞テロップが当該楽曲に同期して表示される。
【００４２】
このように、実際の歌唱者の動きや顔の向きに対応して、歌唱者から見た観客席への視野をリアリティに再現することで歌唱者に臨場感を与えることができる。例えば、カラオケボックスの部屋のように特別な歌唱者用のステージや歌唱スペースがなく、複数人が1つの部屋の中で歌唱する場合でも、歌唱者を特定することができ、コンサートホールのようにステージから観客席を前に歌唱するように疑似的な体験をさせることができると共に、歌唱者の顔部分の位置、顔部分の向きによって背景映像がスクロールすることにより、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させることができ、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
【００４３】
なお、上記実施形態では、撮像部３６を複数の撮像カメラ３６Ａ〜３６Ｇで構成させた場合を示したが、単一の撮像カメラで構成してもよい。この場合、図５に示す歌唱者水平位置「１」〜歌唱者水平位置「７」が撮像範囲となる。歌唱者認識手段４８は、一の撮像データ中の各歌唱水平位置で歌唱者の顔データを随時認識するものであり、視野変化量算出手段４９が歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置を解析し、当該歌唱者の顔部分の移動量を算出するものである。このことは、以下の実施形態においても同様である。
【００４４】
ところで、上記実施形態では、歌唱者認識手段４８が歌唱者を特定するに際し、利用者ＩＤに基づいて利用者ＤＢ３２、予約待ち行列５２からの顔写真データによって歌唱者を特定する場合を示したが、利用者ＩＤを用いずに行うこともできる。
【００４５】
すなわち、歌唱者認識手段４８が所定の撮像カメラ３６から撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、上記視野変化量算出手段４９が、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置を解析し、当該顔部分の移動量を算出する。そして、映像表示制御手段４６が、図３に示すようなスクロールテーブル５５を参照して顔部分の移動量に応じたスクロール量で表示すべき背景映像データ５４Ａを表示部４２で表示させることで実現することができるものである。
【００４６】
このように利用者ＩＤを使用しない場合であっても、歌唱者の動きによる視野に関係させて背景映像を変化させて表示させることができ、歌唱者に観客前で歌唱していることの実感性を向上させて歌唱させることができるものである。例えば、スナックやバーのようなナイト店舗やカラオケボックスのパーティルーム等のようなステージが設置された部屋にて歌唱者が歌唱する場合において、コンサートホールのようにステージから観客席を前にして歌唱しているような擬似的な体験をさせることができると共に、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させて、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。このことは、以下の実施形態においても同様である。
【００４７】
次に、図７に、本発明におけるカラオケシステムの第２実施形態のスクロール表示の説明図を示す。この実施形態は、歌唱者の前後の移動に応じてスクロール表示をズーミングする場合を示している。すなわち、スクロールテーブル５５を、図７（Ａ）に示すように、顔部分の位置を歌唱者前後としてズームスクロール位置と関連付けたものである。すなわち、上記歌唱者前後位置の変化分が顔部分の移動量となり、ズームスクロール位置の差分がスクロール量となる。
【００４８】
この場合、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、図７（Ｂ）に示すように、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から歌唱者の前後位置「１」〜「７」に基づく前後の移動量を算出する。例えば、歌唱者が歌唱者前後位置「４」から歌唱者前後位置「６」に前方に移動して変化した場合、視野変化量算出手段４９が歌唱者の前後の移動量を算出し、当該移動量に基づき図７（Ａ）に示すスクロールテーブル５５を参照してズームスクロール位置の変化量を算出し、図７（Ｃ）に示すように、映像表示制御手段４６が、背景映像５４Ａをフレーム３２Ａ内でズーミングし多様に縮小拡大させて表示部４２上に表示させるものである。
【００４９】
このように、歌唱者の顔部分の位置を歌唱者前後位置によっても顔部分の前後の移動量を具体的に算出することができ、ズーミング表示を行わせることもできるものである。
【００５０】
次に、図８に本発明におけるカラオケシステムの第３実施形態のスクロール表示に係る利用者ＤＢの説明図を示すと共に、図９に図８のスクロール表示に係るスクロールテーブルの説明図を示し、図１０に図８及び図９におけるスクロール表示の説明図を示す。この実施形態は、歌唱者が顔を水平方向に廻した場合に応じてスクロール表示する場合を示している。この場合、歌唱者を撮像する撮像部３６を構成する単一の撮像カメラを歌唱者に向かって配置させている。
【００５１】
まず、ホスト装置１１の利用者ＤＢ２３では、図８（Ａ）、（Ｂ）に示すように、利用者毎に所定数の水平顔角度「θ」（例えば、＋−７５度）毎の顔写真データを、利用者ＩＤを関連付けて格納しておく。また、カラオケ本体３１における記憶部４６のスクロールテーブル５５を、図９に示すように、顔部分の向きを上記利用者ＤＢ２３に格納した水平顔角度「θ」に対応した歌唱者の水平顔角度「θ」としてスクロール位置（水平スクロール角度「θ」）と関連付けたものである。すなわち、上記歌唱者の水平顔角度の変化分が顔部分の移動量ないし角度変化量となり、水平スクロール角度の差分がスクロール量となる。
【００５２】
そこで、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の水平方向の向きを解析し、当該顔部分の角度変化量を算出しいく。また、映像表示制御手段４６は、図１０（Ａ）に示すように、歌唱者６１の水平角度「−θ５」〜「θ５」での変化（回転）で算出された顔部分の角度変化量に追従させて背景映像データ５４Ａを表示部４２のフレーム３２Ａ内で、図９に示すスクロールテーブル５５を参照し、水平スクロール角度の変化量を算出したスクロール量でスクロール表示させるものである。
【００５３】
例えば、図１０（Ｂ）に示すように、上記視野変化量算出手段４９は、歌唱者の水平顔角度「θ０」から水平顔角度「θ３」への変化分に応じた顔部分の角度変化量を算出し、図９に示すスクロールテーブル５５から水平スクロール角度「θ０」から「θ３］の変化量を算出して得たスクロール量で表示部３２上におけるフレーム３２Ａ内の背景映像５４Ａをスクロール表示させる制御を行うものである。これが、視野変化量算出手段４９で算出された水平顔角度の変化毎に当該水平スクロール角度の変化量を追従させて表示部３２で表示させるものである。
【００５４】
このように、歌唱者の顔部分の向きを水平顔角度によっても顔部分の水平角度変化量を具体的に算出することができ、スクロール角度に応じたスクロール表示を行わせることもできるものである。
【００５５】
ところで、撮像部３６における撮像カメラを、予め定めた水平角度「−θ５」〜「θ５」毎に、かつ歌唱者を正面視する向きであり、同距離で配置してもよい。この場合、ホスト装置１１の利用者ＤＢ２３には、図１（Ｃ）に示すような、利用者毎に正面の顔写真データを格納しておけばよい。この場合の、各撮像カメラでの撮像は、図５に示すような状態となるものである。このことは、以下の第４実施形態においても同様である。
【００５６】
図１１に、本発明におけるカラオケシステムの第４実施形態のスクロール表示の説明図を示す。この実施形態は、歌唱者が顔を垂直方向に廻した場合に応じてスクロール表示する場合を示している。この場合のおいても、歌唱者を撮像する撮像部３６を上記同様に単一の撮像カメラを配置してもよく、また、上記のように各角度毎に配置させてもよい。ここでは、撮像カメラを単一で配置させた場合として示している。
【００５７】
まず、ホスト装置１１の利用者ＤＢ２３では、図８と同様な形態で、利用者毎に所定数の垂直顔角度「θ」（例えば、＋−７５度）の顔写真データを、利用者ＩＤを関連付けて格納しておく。また、カラオケ本体３１における記憶部４６のスクロールテーブル５５を、図１１（Ｂ）に示すように、顔部分の向きを上記利用者ＤＢ２３に格納した水平顔角度「θ」に対応した歌唱者の垂直顔角度「Ｖθ」としてスクロール位置（垂直スクロール角度「Ｖθ」）と関連付けたものである。すなわち、上記歌唱者の垂直顔角度の変化分が顔部分の角度変化量となり、垂直スクロール角度の差分がスクロール量となる。
【００５８】
そこで、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の垂直方向の向きを解析し、当該顔部分の角度変化量を算出しいく。また、映像表示制御手段４６は、歌唱者６１の垂直角度「−Ｖθ５」〜「Ｖθ５」での変化（回転）で算出された顔部分の角度変化量に追従させて背景映像データ５４Ａを表示部４２のフレーム３２Ａ内で、図１１（Ｂ）に示すスクロールテーブル５５を参照し、垂直スクロール角度の変化量を算出したスクロール量でスクロール表示させるものである。
【００５９】
このように、歌唱者の顔部分の向きを垂直顔角度によっても顔部分の垂直角度変化量を具体的に算出することができ、スクロール角度に応じたスクロール表示を行わせることもできるものである。
【００６０】
ところで、上記第１実施形態〜第４実施形態を、各単独で、又は、適宜の組合せで実施することが可能である。すなわち、スクロールテーブル５５において、歌唱者水平位置、歌唱者前後位置及び歌唱者の水平顔角度、垂直角度の少なくとも何れかとしてその変化量を算出可能とし、これに対応する水平スクロール位置、ズームスクロール量、水平角度スクロール量、垂直角度スクロールに関連付けてスクロール量を算出可能とすることにより、随時認識された当該歌唱者の顔データに基づいて、当該歌唱者の歌唱者水平位置、歌唱者前後位置及び歌唱者の水平顔角度、垂直顔角度の少なくとも何れかの変化に対する顔部分の移動量ないし角度変化量を特定する構成とすることができるものである。
【産業上の利用可能性】
【００６１】
本発明の背景映像可変表示機能を備えるカラオケシステムは、カラオケの基本的機能を備えるカラオケ機器製造の分野に利用可能である。
【符号の説明】
【００６２】
１１ ホスト装置
１３ カラオケ演奏端末
２３ 利用者ＤＢ
３１ カラオケ本体
３２ 表示部
３６ 撮像部
３８ 利用者ＩＤ取得手段
４６ 映像表示制御手段
４８ 歌唱者認識手段
４９ 視野変化量算出手段
５０ 利用者情報管理手段
５１ 利用者情報
５２ 予約待ち行列
５５ スクロールテーブル
【技術分野】
【０００１】
本発明は、楽曲演奏時に背景映像を表示させるカラオケシステムに関する。
【背景技術】
【０００２】
カラオケシステムの背景映像とは、演奏される楽曲のジャンルに合わせて適宜に選択された映像を再生するものである。しかしながらこのような背景映像は、同一ジャンルの楽曲が連続的に演奏されたりすると、同じような映像が何度も再生される場合があり利用者は歌唱意欲を失ったりする。このような背景映像のマンネリ化に対して、利用者に対する利用喚起や利用満足性の向上を図る種々の機能を提供してきている中で、背景映像への工夫は必要不可欠なものになっている。カラオケ利用者は、歌唱力が向上すると観客の前で歌唱することを望むことが多く、カラオケの利用喚起、歌唱喚起のために背景映像に観客を表示させて擬似的にステージ等で歌唱しているように演出するサービスを提供することも行われているが、利用者にさらなる興味を惹くサービスの提供が望まれる。
【０００３】
そして、従来、カラオケシステムにおいて背景映像を用いてステージ歌唱を疑似体験させる技術として、以下の特許文献等で提案されている。特許文献１は、歌手等がステージで歌ったときの歌手等や観客の反応を記録したソフトウェアを用いて、スピーカーより再生すると共に、ディスプレイ装置上で再生することで、当該ディスプレイ装置で再生される歌手等や観客の反応を見ながら歌唱させることが提案されている。この特許文献１は、一方で、歌手等や観客の反応を見ながら歌唱することは当該ソフトウェアの歌唱楽曲と同じ楽曲を歌唱しなければ反応等の内容に不自然さが生じてしまうこととなり、ソフトウェアの歌唱楽曲に制限されることとなる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００４−２８７３６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記特許文献１は予め記録しておいたソフトウェアを再生するのみで、歌唱者の動きや顔の向きに伴う視野の変化とは無関係に表示されるものであり、歌唱者による観客の擬似的な見え方で臨場感に欠け、ステージ等上での歌唱による疑似体験の実感性が削がれるという問題がある。
【０００６】
そこで、本発明は上記課題に鑑みなされたもので、実際の歌唱者の動きや顔の向きに対応した、歌唱者から見た観客席への視野をリアリティに再現することで臨場感を与えて歌唱可能とする背景映像可変表示機能を備えるカラオケシステムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために、請求項１の発明では、歌唱者に観客の前で歌唱させることを疑似体験させる背景映像可変表示機能を備え、背景映像データ記憶手段、歌唱者撮像手段、歌唱者認識手段、視野変化量算出手段及び表示制御手段を有してなるカラオケシステムであって、上記背景映像データ記憶手段は、歌唱時に表示させる背景映像データを、スクロール表示可能に前記表示手段のフレームサイズより大として記憶し、上記歌唱者撮像手段は、単一の又は連設した複数の撮像カメラを備え、少なくとも顔部分を含む歌唱者を撮像し、上記歌唱者認識手段は、所定の前記撮像カメラから撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、上記表示制御手段は、予め設定された、前記記憶されている表示すべき背景映像データのスクロール量と顔部分の移動量ないし角度変化量との関連付けに基づき、前記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを前記表示手段で表示させる、構成とする。
【０００８】
請求項２の発明では、利用者情報データベース、利用者ＩＤ取得手段、利用者情報管理手段及び選曲楽曲登録手段を備え、上記利用者情報データベースは、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納し、上記利用者ＩＤ取得手段は、利用者より利用者ＩＤを取得し、上記利用者情報管理手段は、前記利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、前記利用者情報データベースより顔写真データを取得して利用者情報として管理し、上記選曲楽曲登録手段は、前記利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、前記歌唱者認識手段が、前記登録楽曲の演奏開始時に、前記予約待ち行列で当該演奏楽曲に関連付けられた利用者ＩＤから前記利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する、構成である。
【０００９】
請求項３〜５の発明では、「請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、前記顔部分の移動量ないし角度変化量を歌唱者水平位置の変化量としてスクロール量に関連付け、上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、該歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出する」構成であり、
「請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、前記顔部分の移動量ないし角度変化量を歌唱者前後位置の変化量としてズームスクロール量に関連付け、前記視野変化量算出手段が、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から顔部分の前後の移動量を算出する」構成であり、
「請求項１に記載の背景映像可変表示機能を備えるカラオケシステムであって、前記歌唱者撮像手段は、所定の角度毎に撮像方向を設定して連設した複数の撮像カメラを備え、前記顔部分の移動量ないし角度変化量を歌唱者の顔角度の変化量としてスクロール量に関連付け、前記視野変化量算出手段が、前記何れかの撮像カメラが所定の顔部分の向きを捉えているかを特定し、特定された撮像カメラの撮像方向に基づいて、当該歌唱者の顔部分の向きを解析し、当該解析データから当該歌唱者の顔部分の角度変化量を算出する」構成である。
【発明の効果】
【００１０】
請求項１の発明によれば、利用者に観客の前で歌唱させることを疑似体験させる背景映像のデータを、スクロール表示可能に表示手段のフレームサイズより大として記憶しておき、少なくとも顔部分を含む歌唱者を撮像し、楽曲演奏開始時に撮像データから任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、認識された顔データに基づき当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、表示すべき背景映像データのスクロール量を予め顔部分の移動量ないし角度変化量に関連付けておき、上記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを表示させる構成とすることにより、歌唱者の動きによる視野に関係させて背景映像を変化させて表示させることから、歌唱者に観客前で歌唱していることの実感性を向上させて歌唱させることができるものである。具体的には、スナックやバーのようなナイト店舗やカラオケボックスのパーティルーム等のようなステージが設置された部屋にて歌唱者が歌唱する場合において、コンサートホールのようにステージから観客席を前にして歌唱しているような擬似的な体験をさせることができると共に、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験することが可能となり、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
【００１１】
請求項２の発明によれば、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納しておき、利用者情報データベースより顔写真データを取得して利用者情報として管理し、また、利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、登録楽曲の演奏開始時に予約待ち行列で関連付けられた利用者ＩＤから利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識させる構成とすることにより、上記同様の効果の他に、利用者ＩＤで関連付けられた顔データから利用者のうちの歌唱者を容易に特定させることができるものである。あるいは、カラオケボックスの部屋のように特別な歌唱者用のステージや歌唱スペースがなく、複数人が１つの部屋の中で歌唱する場合でも、歌唱者を特定することができ、コンサートホールのようにステージから観客席を前にして歌唱するような疑似的な体験をさせることができると共に、歌唱者の顔部分の位置、顔部分の向きによって背景映像がスクロールすることにより、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させることが可能となり、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
【００１２】
請求項３〜５の発明によれば、顔部分の移動量ないし角度変化量を歌唱者水平位置の変化量、歌唱者前後位置の変化量及び歌唱者の顔角度の変化量の少なくとも何れかとして対応するスクロール量、ズームスクロール量、角度スクロール量に関連付け、随時認識された当該歌唱者の顔データに基づいて、当該歌唱者の歌唱者水平位置、歌唱者前後位置及び歌唱者の顔角度の少なくとも何れかの変化量を特定する構成とすることにより、請求項１又は２の歌唱者の顔部分の位置、顔部分の向きを具体的に特定することができ、上記効果を具体的に実現することができるものである。
【図面の簡単な説明】
【００１３】
【図１】本発明に係るカラオケシステムの系統構成図である。
【図２】本発明のカラオケシステムにおけるカラオケ演奏端末に係るブロック構成図である。
【図３】図２のスクロールテーブルの第１実施形態の説明図である。
【図４】図３の予約待ち行列の説明図である。
【図５】図２における歌唱者位置特定の説明図である。
【図６】図２における背景映像のスクロール表示の説明図である。
【図７】本発明におけるカラオケシステムの第２実施形態のスクロール表示の説明図である。
【図８】本発明におけるカラオケシステムの第３実施形態のスクロール表示に係る利用者ＤＢの説明図である。
【図９】図８のスクロール表示に係るスクロールテーブルの説明図である。
【図１０】図８及び図９におけるスクロール表示の説明図である。
【図１１】本発明におけるカラオケシステムの第４実施形態のスクロール表示の説明図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施形態を図により説明する。
図１に、本発明に係るカラオケシステムの系統構成図を示す。図１（Ａ）は通信ネットワークを使用して本システムを構成させた場合のネットワーク模式図、図１（Ｂ）はホスト装置の概要ブロック構成図、図１（Ｃ）は利用者データベース（利用者ＤＢ）の説明図である。
【００１５】
図１（Ａ）において、ホスト装置１１はカラオケシステムの一部を構成するものとして、通信ネットワーク１２を介して所定数のカラオケ演奏端末１３（１３Ａ〜１３Ｎ）を管理するものであり、相互にデータ授受自在に接続されたものである。上記通信ネットワーク１２としては、例えば、一般公衆電話回線やこれを用いたＡＤＳＬや光通信回線或いはインターネット、さらにはＬＡＮがあるが、インターネット上に構築されるＶＰＮが好ましい。
【００１６】
ホスト装置１１は、図１（Ｂ）に示すように、少なくとも送受信手段２１、制御手段２２及び利用者情報データベース（利用者ＤＢ）２３を備える。上記送受信手段２１は、各カラオケ演奏端末１３（１３Ａ〜１３Ｎ）との通信（データ授受）を行うために、通信ネットワーク１２の通信方式と整合性をとるための例えば物理的な通信用回路やプラットフォーム等のソフトウエアにより構成される。
【００１７】
上記制御手段２２は、当該ホスト装置１１を統括的に制御するもので、例えば物理的なＣＰＵであり、図示しないＲＯＭに格納されているプログラムのアルゴリズム処理を行う。上記利用者ＤＢ２３は、図１（Ｃ）に示すように、予め登録された利用者に利用者ＩＤを付し、少なくとも当該利用者の顔写真データを取得して当該利用者ＩＤに関連付けられて管理されるものである。この顔写真データは、ここでは、一例として利用者の正面の顔部分を撮像したビットマップデータである。
【００１８】
次に、図２に本発明のカラオケシステムにおけるカラオケ演奏端末に係るブロック構成図を示すと共に、図３に図２のスクロールテーブルの第１実施形態の説明図を示し、図４に図３の予約待ち行列の説明図を示す。
【００１９】
図２において、カラオケ演奏端末１３は、主要装置としてのカラオケ本体３１に有線又は無線で外部接続されるものとして、表示手段である表示部３２、ミキシングアンプ３３、マイク３４、スピーカ３５及び歌唱者撮像手段である撮像部３６を備える。また、有線又は無線で遠隔入出力端末３７が接続される。
【００２０】
上記表示部３２は、通常の楽曲選曲表示やカラオケ演奏時の背景映像等をを表示するもので、例えば液晶ディスプレイ（ＬＣＤ）、プラズマディスプレイ（ＰＤＰ）、その他種々のディスプレイを採用することができる。上記ミキシングアンプ３３は、カラオケ本体３１より送られてくる演奏データに、マイク３４からの音声信号をミキシングし、増幅してスピーカ３５より出力する。
【００２１】
上記撮像部３６は、後述の図５に示すように、歌唱者の歌唱位置（例えば、図５に示すように７位置）に応じて連設した７台の撮像カメラ３６Ａ〜３６Ｇを備え、当該７台の撮像カメラ３６Ａ〜３６Ｇはその撮像範囲の歌唱位置を常に撮像し、撮像データをカラオケ本体３１の歌唱者認識手段（４８）に出力するもので、何れかによって少なくとも顔部分を含む歌唱者を随時撮像することとなる。
【００２２】
遠隔入出力端末３７は、図示しない端末送受信部により、カラオケ本体３１に対して有線方式ないし無線方式（ＩＲ方式やブルートゥース（登録商標）機構のピコネット接続方式など）を利用してデータ授受を行うためのもので、少なくとも利用者ＩＤ取得手段３８及び選曲楽曲登録手段３９を適宜備える。
【００２３】
上記利用者ＩＤ取得手段３８は、利用者より利用者ＩＤを取得する読み取り装置である。取得した利用者ＩＤは、後述の利用者管理手段（５０）の送出される。利用者ＩＤの取得（ログイン者情報）は、例えば、利用者の所持するＩＣカードから行う。
【００２４】
上記選曲楽曲登録手段３９は、カラオケ装置として公知のユーザインタフェース機能により利用者ＩＤに基づいて、楽曲を検索させ、選曲させるテーブルを備えるプログラムである。これら選曲された楽曲は、後述のカラオケ本体３１における予約待ち行列（５２）に選曲者の利用者ＩＤが付帯されて登録される（図４で説明する）。
【００２５】
上記カラオケ本体３１は、バス４１、中央制御部４２、ＲＯＭ４３、ＲＡＭ４４、記憶部４５、表示制御手段である映像再生制御手段４６、音楽演奏制御部４７、歌唱者認識手段４８、視野変化量算出手段４９、利用者管理手段５０及び送受信部５０Ａ，５０Ｂを適宜備える。また、上記ＲＡＭ４４には、利用者情報５１及び予約待ち行列５２の記憶領域が形成され、記憶部４５には、楽曲ＤＢ５３、背景映像データ記憶手段である映像ＤＢ５４及びスクロールテーブル５５が記憶される。なお、上記各構成について、本発明の要旨と直接関連しない要素部分であっても、従前のカラオケ装置においても大部分が適用可能であることを示すために、装置全体を説明する。
【００２６】
上記中央制御部４２は、このシステムを統括的に処理制御する物理的なＣＰＵであり、ＲＯＭ４３に記憶されているプログラムに基づくアルゴリズム処理を行う。上記ＲＡＭ４４は、利用者情報５１及び予約待ち行列５２の記憶領域が形成される他に、上記種々のプログラムを展開、実行させるための作業領域としての役割をなすもので、例えば半導体メモリで構成され、仮想的にハードディスク上に構築される場合をも含む概念である。
【００２７】
上記映像再生制御手段４６は、演奏時に、映像ＤＢ５４より抽出された背景映像を表示部３２に出力するものであり、表示すべき背景映像データを、スクロールテーブル５５を参照して、後述の視野変化量算出手段４９で算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて表示部３２上でスクロール表示させるプログラム乃至電子回路である。詳細は、図５、図６で説明する。スクロール表示は、コンピュータ上の表示やコンピュータゲーム（テレビゲーム）の表示で使用されている公知のスクロール技術が使用される。
【００２８】
上記音楽演奏制御部４７は、楽曲コードで楽曲ＤＢ５３より抽出された音符データをデジタル出力し、アナログ変換してミキシングアンプ３３に出力する電子回路である。
【００２９】
上記歌唱者認識手段４８は、上記撮像部３６の所定の撮像カメラから撮像データを取得し、登録楽曲の演奏開始時に、予約待ち行列５１で当該演奏楽曲に関連付けられた利用者ＩＤから利用者情報５１の顔デ写真ータを歌唱者として取得し、当該歌唱者心データから顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識するプログラムである。なお、顔データの解析、認識は、例えばデジタルカメラなどで使用されている公知の顔認識技術を使用することができる。
【００３０】
上記視野変化量算出手段４９は、歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出するプログラムである。
【００３１】
上記利用者情報管理手段５０は、利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、送受信部５０Ｂを介してホスト装置１１にアクセスし、利用者ＤＢ２３より顔写真データを取得して後述の利用者情報（５１）として記憶するプログラムである。
【００３２】
上記送受信部５０Ａは、遠隔入出力端末３７との間で有線方式ないし無線方式（ＩＲ方式やブルートゥース（登録商標）機構のピコネット接続方式など）を利用してデータ授受を行うためのもので、そのための電子回路及びプログラムである。上記送受信部５０Ｂは、上記ホスト装置１１と上記通信ネットワーク１２を介してデータ授受を行うためのもので、通信方式と整合性をとるための例えば物理的な通信用回路やプラットフォーム等のソフトウエアにより構成されるものである。
【００３３】
上記記憶部４５に記憶されている楽曲ＤＢ５３は、楽曲毎に、音符データ及び歌詞データを格納する。演奏に関して、具体的には、楽曲ＩＤ、曲名及びアーチストＩＤ（アーチスト名）が関連付けられた楽曲テーブルを有し、楽曲毎に、楽曲ＩＤで管理される所定データ形式のカラオケ楽曲の音符データ（例えば、ＭＩＤＩ（登録商標）形式の音符データ）等で構成される楽曲データ（ファイル）について楽曲コードをファイル名としてそれぞれ格納したデータベースである。
【００３４】
上記記憶部４５に記憶されている映像ＤＢ５４は、背景映像表示のための所定数の背景映像データを所定数格納するデータベースである。背景映像データは、利用者に観客の前で歌唱させることを疑似体験させるための観客（及びその周辺）を、例えばコンピュータグラフィックス（ＣＧ）で２Ｄ又は３Ｄ（好ましくは３Ｄ）で静止画映像、動画映像を問わずに作成されたもので、歌唱時に表示させる背景映像データを、スクロール表示可能に上記表示部３２のフレームサイズより大としたものである。なお、上記楽曲ＤＢ５３及び映像ＤＢ５４を、カラオケ本体３１ではなく、上記ホスト装置１１に備えさせることとしてもよい。
【００３５】
また、記憶部４５に記憶されているスクロールテーブル５５は、表示すべき背景映像データのスクロール量を予め顔部分の移動量ないし角度変化量に関連付けたものである。一例として、図３に示すように、顔部分の位置を歌唱者水平位置（歌唱者が水平方向に移動したときの位置）として、水平スクロール位置に関連付けたもので、例えば歌唱者水平位置１〜７に対して水平スクロール位置を、例えば中央位置（歌唱者位置４）をＬ０とした場合に対してＬ３〜−Ｌ３とさせたものである。上記歌唱者水平位置の変化分が顔部分の移動量ないし角度変化量となり、水平スクロール位置の差分が水平位置のスクロール量となる。なお、スクロールテーブル５５において、スクロール位置を予め定めた距離（位置）Ｌとする場合の他に、このスクロール位置を、顔部分の水平位置をパラメータとして、所定のアルゴリズムによる演算にて求める構成としてもよい。このことは、以下の実施形態においても同様である。
【００３６】
一方、上記ＲＡＭ４４に記憶される利用者情報５１は、上記遠隔入出力端末３７の利用者ＩＤ取得手段３８によって利用者ＤＢ２３より取得した顔写真データが利用者ＩＤと関連付けられて少なくとも記憶されるものであるが、そのほかに利用者ＤＢ２３に適宜登録されている利用者の氏名、ニックネーム、年齢、性別などをも適宜記憶される。ＲＡＭ４４に記憶される予約待ち行列５２は、図４に示すように、演奏する楽曲が予約順の楽曲ＩＤに、その選曲者の利用者ＩＤが付帯されて登録される。
【００３７】
なお、カラオケ演奏端末１３をスタンドアローンのカラオケシステムとして適用させる場合には上記ホスト装置１１の利用者ＤＢ２３を当該カラオケ本体３１に備えさせる構成とすることにより実現することができる。
【００３８】
そこで、図５に図２における歌唱者位置特定の説明図を示すと共に、図６に図２における背景映像のスクロール表示の説明図を示す。まず、前提として、複数の利用者のグループ等がカラオケ演奏端末１３を利用するものとして、利用時に各利用者による利用者ＩＤをカード等で遠隔入出力端末３７の利用者ＩＤ取得手段３８により利用者ＩＤを取得させる。当該利用者ＩＤ取得手段３８は、取得した利用者ＩＤをカラオケ本体の送受信部５０Ａを介して利用者管理手段５０に送出する。当該利用者管理手段５０は、送受信部５０Ｂよりコンピュータネットワーク１２を介してホスト装置１１にアクセスし、利用者ＩＤに基づいて利用者ＤＢ２３より当該利用者ＩＤの顔写真データ等を取得し、ＲＡＭ４４の利用者情報５１に当該利用者ＩＤに関連付けて記憶する。
【００３９】
また、所定の利用者が、遠隔入出力端末３７を使用して選曲楽曲登録手段３９で利用者ＩＤに基づいて選曲登録した場合、ＲＡＭ４４の予約待ち行列５２には、図４に示すように、少なくもと楽曲ＩＤに利用者ＩＤが関連付けられて登録される。そして、予約待ち行列５２に登録された順に演奏されるもので、その楽曲演奏時に、歌唱者認識手段４８が、当該演奏楽曲に関連付けられた利用者ＩＤに基づいて、利用者情報５１より当該利用者の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき当該グループ中の利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する。
【００４０】
そして、視野変化量算出手段４９は、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出していく。例えば、歌唱者の顔部分の水平方向の移動が、図５に示すように、撮像カメラ３６Ｄで撮像された歌唱者水平位置「４」から、撮像カメラ３６Ｇで撮像された歌唱者水平位置「６」に変化した変化量を当該利用者の顔部分の移動量として特定する。
【００４１】
一方、映像表示制御手段４６は、図６（Ａ）に示すように、上記視野変化量算出手段４９で算出した歌唱者６１の水平位置での変化（移動）量に追従させて背景映像データ５４Ａの表示部４２上での表示フレーム３２Ａを、スクロールテーブル５５を参照して、水平方向のスクロール量を算出してスクロールさせる。図５の例では、図６（Ｂ）に示すように、上記視野変化量算出手段４９が算出した撮像カメラ３６Ｄで撮像された歌唱者水平位置「４」から、撮像カメラ３６Ｇで撮像された歌唱者水平位置「６」への変化量からスクロールテーブル５５を参照し、スクロール位置「Ｌ０」からスクロール位置「−Ｌ２］へのスクロール量を算出して表示部３２上の背景映像５４Ａをスクロール表示させる制御を行うものである。そして、視野変化量算出手段４９で算出された顔部分の移動量（歌唱者の水平位置変化量）に当該スクロール量を追従させて背景映像データ５４Ａを表示部３２で表示させるものである。なお、表示部４２上で表示される映像には、当該歌唱楽曲の歌詞テロップが当該楽曲に同期して表示される。
【００４２】
このように、実際の歌唱者の動きや顔の向きに対応して、歌唱者から見た観客席への視野をリアリティに再現することで歌唱者に臨場感を与えることができる。例えば、カラオケボックスの部屋のように特別な歌唱者用のステージや歌唱スペースがなく、複数人が1つの部屋の中で歌唱する場合でも、歌唱者を特定することができ、コンサートホールのようにステージから観客席を前に歌唱するように疑似的な体験をさせることができると共に、歌唱者の顔部分の位置、顔部分の向きによって背景映像がスクロールすることにより、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させることができ、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。
【００４３】
なお、上記実施形態では、撮像部３６を複数の撮像カメラ３６Ａ〜３６Ｇで構成させた場合を示したが、単一の撮像カメラで構成してもよい。この場合、図５に示す歌唱者水平位置「１」〜歌唱者水平位置「７」が撮像範囲となる。歌唱者認識手段４８は、一の撮像データ中の各歌唱水平位置で歌唱者の顔データを随時認識するものであり、視野変化量算出手段４９が歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置を解析し、当該歌唱者の顔部分の移動量を算出するものである。このことは、以下の実施形態においても同様である。
【００４４】
ところで、上記実施形態では、歌唱者認識手段４８が歌唱者を特定するに際し、利用者ＩＤに基づいて利用者ＤＢ３２、予約待ち行列５２からの顔写真データによって歌唱者を特定する場合を示したが、利用者ＩＤを用いずに行うこともできる。
【００４５】
すなわち、歌唱者認識手段４８が所定の撮像カメラ３６から撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、上記視野変化量算出手段４９が、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置を解析し、当該顔部分の移動量を算出する。そして、映像表示制御手段４６が、図３に示すようなスクロールテーブル５５を参照して顔部分の移動量に応じたスクロール量で表示すべき背景映像データ５４Ａを表示部４２で表示させることで実現することができるものである。
【００４６】
このように利用者ＩＤを使用しない場合であっても、歌唱者の動きによる視野に関係させて背景映像を変化させて表示させることができ、歌唱者に観客前で歌唱していることの実感性を向上させて歌唱させることができるものである。例えば、スナックやバーのようなナイト店舗やカラオケボックスのパーティルーム等のようなステージが設置された部屋にて歌唱者が歌唱する場合において、コンサートホールのようにステージから観客席を前にして歌唱しているような擬似的な体験をさせることができると共に、よりコンサートホールにて歌唱しているような緊張感や観客の声援及び応援を体験させて、歌唱者に対して実感性や歌唱意欲を向上させることができるものである。このことは、以下の実施形態においても同様である。
【００４７】
次に、図７に、本発明におけるカラオケシステムの第２実施形態のスクロール表示の説明図を示す。この実施形態は、歌唱者の前後の移動に応じてスクロール表示をズーミングする場合を示している。すなわち、スクロールテーブル５５を、図７（Ａ）に示すように、顔部分の位置を歌唱者前後としてズームスクロール位置と関連付けたものである。すなわち、上記歌唱者前後位置の変化分が顔部分の移動量となり、ズームスクロール位置の差分がスクロール量となる。
【００４８】
この場合、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、図７（Ｂ）に示すように、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から歌唱者の前後位置「１」〜「７」に基づく前後の移動量を算出する。例えば、歌唱者が歌唱者前後位置「４」から歌唱者前後位置「６」に前方に移動して変化した場合、視野変化量算出手段４９が歌唱者の前後の移動量を算出し、当該移動量に基づき図７（Ａ）に示すスクロールテーブル５５を参照してズームスクロール位置の変化量を算出し、図７（Ｃ）に示すように、映像表示制御手段４６が、背景映像５４Ａをフレーム３２Ａ内でズーミングし多様に縮小拡大させて表示部４２上に表示させるものである。
【００４９】
このように、歌唱者の顔部分の位置を歌唱者前後位置によっても顔部分の前後の移動量を具体的に算出することができ、ズーミング表示を行わせることもできるものである。
【００５０】
次に、図８に本発明におけるカラオケシステムの第３実施形態のスクロール表示に係る利用者ＤＢの説明図を示すと共に、図９に図８のスクロール表示に係るスクロールテーブルの説明図を示し、図１０に図８及び図９におけるスクロール表示の説明図を示す。この実施形態は、歌唱者が顔を水平方向に廻した場合に応じてスクロール表示する場合を示している。この場合、歌唱者を撮像する撮像部３６を構成する単一の撮像カメラを歌唱者に向かって配置させている。
【００５１】
まず、ホスト装置１１の利用者ＤＢ２３では、図８（Ａ）、（Ｂ）に示すように、利用者毎に所定数の水平顔角度「θ」（例えば、＋−７５度）毎の顔写真データを、利用者ＩＤを関連付けて格納しておく。また、カラオケ本体３１における記憶部４６のスクロールテーブル５５を、図９に示すように、顔部分の向きを上記利用者ＤＢ２３に格納した水平顔角度「θ」に対応した歌唱者の水平顔角度「θ」としてスクロール位置（水平スクロール角度「θ」）と関連付けたものである。すなわち、上記歌唱者の水平顔角度の変化分が顔部分の移動量ないし角度変化量となり、水平スクロール角度の差分がスクロール量となる。
【００５２】
そこで、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の水平方向の向きを解析し、当該顔部分の角度変化量を算出しいく。また、映像表示制御手段４６は、図１０（Ａ）に示すように、歌唱者６１の水平角度「−θ５」〜「θ５」での変化（回転）で算出された顔部分の角度変化量に追従させて背景映像データ５４Ａを表示部４２のフレーム３２Ａ内で、図９に示すスクロールテーブル５５を参照し、水平スクロール角度の変化量を算出したスクロール量でスクロール表示させるものである。
【００５３】
例えば、図１０（Ｂ）に示すように、上記視野変化量算出手段４９は、歌唱者の水平顔角度「θ０」から水平顔角度「θ３」への変化分に応じた顔部分の角度変化量を算出し、図９に示すスクロールテーブル５５から水平スクロール角度「θ０」から「θ３］の変化量を算出して得たスクロール量で表示部３２上におけるフレーム３２Ａ内の背景映像５４Ａをスクロール表示させる制御を行うものである。これが、視野変化量算出手段４９で算出された水平顔角度の変化毎に当該水平スクロール角度の変化量を追従させて表示部３２で表示させるものである。
【００５４】
このように、歌唱者の顔部分の向きを水平顔角度によっても顔部分の水平角度変化量を具体的に算出することができ、スクロール角度に応じたスクロール表示を行わせることもできるものである。
【００５５】
ところで、撮像部３６における撮像カメラを、予め定めた水平角度「−θ５」〜「θ５」毎に、かつ歌唱者を正面視する向きであり、同距離で配置してもよい。この場合、ホスト装置１１の利用者ＤＢ２３には、図１（Ｃ）に示すような、利用者毎に正面の顔写真データを格納しておけばよい。この場合の、各撮像カメラでの撮像は、図５に示すような状態となるものである。このことは、以下の第４実施形態においても同様である。
【００５６】
図１１に、本発明におけるカラオケシステムの第４実施形態のスクロール表示の説明図を示す。この実施形態は、歌唱者が顔を垂直方向に廻した場合に応じてスクロール表示する場合を示している。この場合のおいても、歌唱者を撮像する撮像部３６を上記同様に単一の撮像カメラを配置してもよく、また、上記のように各角度毎に配置させてもよい。ここでは、撮像カメラを単一で配置させた場合として示している。
【００５７】
まず、ホスト装置１１の利用者ＤＢ２３では、図８と同様な形態で、利用者毎に所定数の垂直顔角度「θ」（例えば、＋−７５度）の顔写真データを、利用者ＩＤを関連付けて格納しておく。また、カラオケ本体３１における記憶部４６のスクロールテーブル５５を、図１１（Ｂ）に示すように、顔部分の向きを上記利用者ＤＢ２３に格納した水平顔角度「θ」に対応した歌唱者の垂直顔角度「Ｖθ」としてスクロール位置（垂直スクロール角度「Ｖθ」）と関連付けたものである。すなわち、上記歌唱者の垂直顔角度の変化分が顔部分の角度変化量となり、垂直スクロール角度の差分がスクロール量となる。
【００５８】
そこで、視野変化量算出手段４９では、歌唱者認識手段４８による随時認識した当該歌唱者の顔データに基づいて、歌唱者の顔部分の垂直方向の向きを解析し、当該顔部分の角度変化量を算出しいく。また、映像表示制御手段４６は、歌唱者６１の垂直角度「−Ｖθ５」〜「Ｖθ５」での変化（回転）で算出された顔部分の角度変化量に追従させて背景映像データ５４Ａを表示部４２のフレーム３２Ａ内で、図１１（Ｂ）に示すスクロールテーブル５５を参照し、垂直スクロール角度の変化量を算出したスクロール量でスクロール表示させるものである。
【００５９】
このように、歌唱者の顔部分の向きを垂直顔角度によっても顔部分の垂直角度変化量を具体的に算出することができ、スクロール角度に応じたスクロール表示を行わせることもできるものである。
【００６０】
ところで、上記第１実施形態〜第４実施形態を、各単独で、又は、適宜の組合せで実施することが可能である。すなわち、スクロールテーブル５５において、歌唱者水平位置、歌唱者前後位置及び歌唱者の水平顔角度、垂直角度の少なくとも何れかとしてその変化量を算出可能とし、これに対応する水平スクロール位置、ズームスクロール量、水平角度スクロール量、垂直角度スクロールに関連付けてスクロール量を算出可能とすることにより、随時認識された当該歌唱者の顔データに基づいて、当該歌唱者の歌唱者水平位置、歌唱者前後位置及び歌唱者の水平顔角度、垂直顔角度の少なくとも何れかの変化に対する顔部分の移動量ないし角度変化量を特定する構成とすることができるものである。
【産業上の利用可能性】
【００６１】
本発明の背景映像可変表示機能を備えるカラオケシステムは、カラオケの基本的機能を備えるカラオケ機器製造の分野に利用可能である。
【符号の説明】
【００６２】
１１ ホスト装置
１３ カラオケ演奏端末
２３ 利用者ＤＢ
３１ カラオケ本体
３２ 表示部
３６ 撮像部
３８ 利用者ＩＤ取得手段
４６ 映像表示制御手段
４８ 歌唱者認識手段
４９ 視野変化量算出手段
５０ 利用者情報管理手段
５１ 利用者情報
５２ 予約待ち行列
５５ スクロールテーブル
【特許請求の範囲】
【請求項１】
歌唱者に観客の前で歌唱させることを疑似体験させる背景映像可変表示機能を備え、背景映像データ記憶手段、歌唱者撮像手段、歌唱者認識手段、視野変化量算出手段及び表示制御手段を有してなるカラオケシステムであって、
上記背景映像データ記憶手段は、歌唱時に表示させる背景映像データを、スクロール表示可能に前記表示手段のフレームサイズより大として記憶し、
上記歌唱者撮像手段は、単一の又は連設した複数の撮像カメラを備え、少なくとも顔部分を含む歌唱者を撮像し、
上記歌唱者認識手段は、所定の前記撮像カメラから撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、
上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、
上記表示制御手段は、予め設定された、前記記憶されている表示すべき背景映像データのスクロール量と顔部分の移動量ないし角度変化量との関連付けに基づき、前記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを前記表示手段で表示させる、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項２】
請求項１記載の背景映像可変表示機能を備えるカラオケシステムであって、
利用者情報データベース、利用者ＩＤ取得手段、利用者情報管理手段及び選曲楽曲登録手段を備え、
上記利用者情報データベースは、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納し、
上記利用者ＩＤ取得手段は、利用者より利用者ＩＤを取得し、
上記利用者情報管理手段は、前記利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、前記利用者情報データベースより顔写真データを取得して利用者情報として管理し、
上記選曲楽曲登録手段は、前記利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、
前記歌唱者認識手段が、前記登録楽曲の演奏開始時に、前記予約待ち行列で当該演奏楽曲に関連付けられた利用者ＩＤから前記利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項３】
請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、
前記顔部分の移動量を歌唱者水平位置の変化量としてスクロール量に関連付け、
上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項４】
請求項１〜３の少なくとも何れかに記載の背景映像可変表示機能を備えるカラオケシステムであって、
前記顔部分の移動量を歌唱者前後位置の変化量としてズームスクロール量に関連付け、
前記視野変化量算出手段が、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から顔部分の前後の移動量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項５】
請求項１〜４の少なくとも何れかに記載の背景映像可変表示機能を備えるカラオケシステムであって、
前記歌唱者撮像手段は、所定の角度毎に撮像方向を設定して連設した複数の撮像カメラを備え、
前記視野変化量算出手段が、前記何れかの撮像カメラが所定の顔部分の向きを捉えているかを特定し、特定された撮像カメラの撮像方向に基づいて、当該歌唱者の顔部分の向きを解析し、当該解析データから当該歌唱者の顔部分の角度変化量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項１】
歌唱者に観客の前で歌唱させることを疑似体験させる背景映像可変表示機能を備え、背景映像データ記憶手段、歌唱者撮像手段、歌唱者認識手段、視野変化量算出手段及び表示制御手段を有してなるカラオケシステムであって、
上記背景映像データ記憶手段は、歌唱時に表示させる背景映像データを、スクロール表示可能に前記表示手段のフレームサイズより大として記憶し、
上記歌唱者撮像手段は、単一の又は連設した複数の撮像カメラを備え、少なくとも顔部分を含む歌唱者を撮像し、
上記歌唱者認識手段は、所定の前記撮像カメラから撮像データを取得し、任意の楽曲の演奏開始時に顔データを生成して当該歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識し、
上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の位置、顔部分の向きの少なくとも何れかを解析し、当該顔部分の移動量ないし角度変化量を算出し、
上記表示制御手段は、予め設定された、前記記憶されている表示すべき背景映像データのスクロール量と顔部分の移動量ないし角度変化量との関連付けに基づき、前記算出された顔部分の移動量ないし角度変化量にスクロール量を追従させて当該背景映像データを前記表示手段で表示させる、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項２】
請求項１記載の背景映像可変表示機能を備えるカラオケシステムであって、
利用者情報データベース、利用者ＩＤ取得手段、利用者情報管理手段及び選曲楽曲登録手段を備え、
上記利用者情報データベースは、利用者毎に予め撮像した顔写真データを利用者ＩＤを関連付けて格納し、
上記利用者ＩＤ取得手段は、利用者より利用者ＩＤを取得し、
上記利用者情報管理手段は、前記利用者ＩＤ取得手段が取得した利用者ＩＤに基づいて、前記利用者情報データベースより顔写真データを取得して利用者情報として管理し、
上記選曲楽曲登録手段は、前記利用者ＩＤが取得された任意の利用者が選曲した楽曲を予約待ち行列に当該利用者ＩＤを関連付けて登録し、
前記歌唱者認識手段が、前記登録楽曲の演奏開始時に、前記予約待ち行列で当該演奏楽曲に関連付けられた利用者ＩＤから前記利用者情報の顔写真データを歌唱者として取得して顔データを生成し、当該顔データに基づき利用者のうちの歌唱者を特定し、当該楽曲の演奏中にて当該歌唱者の顔データを随時認識する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項３】
請求項１又は２記載の背景映像可変表示機能を備えるカラオケシステムであって、
前記顔部分の移動量を歌唱者水平位置の変化量としてスクロール量に関連付け、
上記視野変化量算出手段は、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、当該歌唱者の顔部分の移動を解析し、当該顔部分の移動量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項４】
請求項１〜３の少なくとも何れかに記載の背景映像可変表示機能を備えるカラオケシステムであって、
前記顔部分の移動量を歌唱者前後位置の変化量としてズームスクロール量に関連付け、
前記視野変化量算出手段が、前記歌唱者認識手段による随時認識した当該歌唱者の顔データに基づいて、縮小拡大の変化量を演算し、当該演算した縮小拡大の変化量から顔部分の前後の移動量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【請求項５】
請求項１〜４の少なくとも何れかに記載の背景映像可変表示機能を備えるカラオケシステムであって、
前記歌唱者撮像手段は、所定の角度毎に撮像方向を設定して連設した複数の撮像カメラを備え、
前記視野変化量算出手段が、前記何れかの撮像カメラが所定の顔部分の向きを捉えているかを特定し、特定された撮像カメラの撮像方向に基づいて、当該歌唱者の顔部分の向きを解析し、当該解析データから当該歌唱者の顔部分の角度変化量を算出する、
ことを特徴とする背景映像可変表示機能を備えるカラオケシステム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１１−５３２７６（Ｐ２０１１−５３２７６Ａ）
【公開日】平成２３年３月１７日（２０１１．３．１７）
【国際特許分類】
【出願番号】特願２００９−１９９６８１（Ｐ２００９−１９９６８１）
【出願日】平成２１年８月３１日（２００９．８．３１）
【出願人】（３９０００４７１０）株式会社第一興商 (537)
【Ｆターム（参考）】
【公開日】平成２３年３月１７日（２０１１．３．１７）
【国際特許分類】
【出願日】平成２１年８月３１日（２００９．８．３１）
【出願人】（３９０００４７１０）株式会社第一興商 (537)
【Ｆターム（参考）】
[ Back to top ]