デジタルテレビ対応カラオケシステム
【課題】 歌唱者が使用するデジタルテレビモニタのカラオケ映像表示タイミングと、スピーカシステムのカラオケ演奏音発生タイミングとを同期させる。
【解決手段】 複数のデジタルテレビモニタ（２４ａ〜ｃ）の各前面領域を撮影範囲とする撮影手段（２３ａ〜ｃ）、撮影顔画像に、その撮影領域に対応付けられた各モニタの識別データを付帯して撮影顔画像データ４３ｂとする人面識別手段４９、次曲予約者の登録顔画像データと撮影顔画像データ４３ｂとを比較し、両者が一致する利用者を特定する顔画像比較特定手段５０、特定利用者の撮影領域対応モニタを特定する使用予定モニタ特定手段５１、特定モニタのディレイ値を抽出するディレイ値抽出手段５４、抽出ディレイ値に基づき演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生遅延制御を行う演奏再生制御手段５６を備える。
【解決手段】 複数のデジタルテレビモニタ（２４ａ〜ｃ）の各前面領域を撮影範囲とする撮影手段（２３ａ〜ｃ）、撮影顔画像に、その撮影領域に対応付けられた各モニタの識別データを付帯して撮影顔画像データ４３ｂとする人面識別手段４９、次曲予約者の登録顔画像データと撮影顔画像データ４３ｂとを比較し、両者が一致する利用者を特定する顔画像比較特定手段５０、特定利用者の撮影領域対応モニタを特定する使用予定モニタ特定手段５１、特定モニタのディレイ値を抽出するディレイ値抽出手段５４、抽出ディレイ値に基づき演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生遅延制御を行う演奏再生制御手段５６を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像表示のために複数のデジタルテレビモニタが接続されたカラオケシステムにおいて、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムに関するものである。
【背景技術】
【０００２】
近年、テレビジョンにおける画像のデジタル化が促進されるとともに、地上アナログ放送から地上デジタル放送への変更が予定されている。このようなアナログテレビからデジタルテレビへの変更に伴い、映像表示タイミングと音声発生タイミングとの同期が問題となってきた。すなわち、映像信号と音声信号とをデジタル処理する場合に両者を比較すると、映像信号のデータ量が多いとともに、再生処理が複雑であるため、再生された音声に対して映像が遅延してしまう。
【０００３】
そこで、従来、デジタルテレビにおける映像表示タイミングと音声発生タイミングとを同期させるための技術が、種々提案されている（特許文献１参照）。特許文献１に記載された映像音声処理システムに関する技術は、映像処理装置とアンプ装置とが、少なくとも映像信号線路と制御信号線路とによって接続されている。そして、映像処理装置は、映像信号線路を通じて供給を受ける映像信号を処理して表示素子に供給する表示用映像信号を形成する映像信号処理手段と、映像信号線路を通じて供給を受ける映像信号を映像信号処理手段で処理して、当該映像信号に応じた映像を表示素子の表示画面に表示するまでに要する処理時間を示す処理時間情報を、制御信号線路を通じて提供するための提供手段と、を備えている。また、アンプ装置は、供給を受けた音声信号に対して所定の処理を行ってスピーカに供給する音声信号処理手段と、制御信号線路を通じて、提供手段から処理時間情報を取得する取得手段と、取得手段により取得した処理時間情報に応じた時間分、スピーカに供給する音声信号を遅延させる遅延処理手段と、を備えている。これにより、音声信号と映像信号とが異なる機器で処理されるシステムにおいて、いわゆるリップシンクのずれを発生させないようにすることができるとされている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−３３４３６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、カラオケ演奏装置では、スピーカシステムから発生するカラオケ演奏音の発生タイミングと、背景映像や歌詞テロップ等からなる映像の表示タイミングとを同期させている。カラオケ店で一般的に普及しているカラオケ演奏装置では、専用のモニタではなく、汎用のテレビモニタを利用して映像表示を行うことが多い。このような状況の下、上述したように、地上アナログ放送が終了して地上デジタル放送のみとなると、カラオケ店でも地上デジタル放送に対応したデジタルテレビモニタを使用することになる。
【０００６】
したがって、カラオケ演奏における音声発生タイミングと映像表示タイミングとのずれが問題となる。すなわち、カラオケ演奏音の発生タイミングと背景映像や歌詞テロップの表示タイミングとがずれることが考えられ、特に、カラオケ演奏音の発生タイミングと歌詞テロップの表示タイミングとがずれると、歌唱が困難となり、カラオケ演奏装置本来の機能が損なわれてしまう。
【０００７】
そこで、デジタルテレビモニタに対応して、カラオケ映像の表示タイミングと、スピーカシステムから発生するカラオケ演奏音の発生タイミングとを同期させることが可能なカラオケシステムの開発が望まれている。さらに、昨今のカラオケシステムでは、１台のカラオケ演奏装置に対して、歌唱者用のテレビモニタを複数設置する場合がある。この場合に、デジタルテレビモニタの機種毎に走査モードやデジタル処理能力等がそれぞれ異なっているので、機種毎に固有のディレイ値が存在し、一律な同期処理では対応できないという問題がある。
【０００８】
本発明は、上述した事情に鑑み提案されたもので、映像再生のために複数のデジタルテレビモニタが接続されたカラオケシステムにおいて、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させることが可能なデジタルテレビ対応カラオケシステムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明のデジタルテレビ対応カラオケシステムは、上述した目的を達成するため、以下の特徴点を有している。すなわち、本発明のデジタルテレビ対応カラオケシステムは、複数のデジタルビデオモニタを有し、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムであって、利用者顔画像登録手段と、ログイン利用者管理手段と、利用者別演奏予約手段と、モニタ別ディレイ値管理手段と、撮影手段と、人面識別手段と、顔画像比較特定手段と、使用予定モニタ特定手段と、ディレイ値抽出手段と、演奏再生制御手段と、を備えている。
【００１０】
利用者顔画像登録手段は、予め、利用者毎の顔画像データに利用者ＩＤを付帯して、利用者別の登録顔画像データとして利用者顔画像データベースに登録するための手段である。ログイン利用者管理手段は、現に当該カラオケシステムにログインしている利用者を、利用者ＩＤに基づき特定して管理するための手段である。利用者別演奏予約手段は、任意の利用者により選曲された楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、予約待ち行列にて管理するための手段である。モニタ別ディレイ値管理手段は、演奏音発生タイミングに対する、複数のデジタルテレビモニタ毎に固有の映像表示タイミングの遅れであるディレイ値を、予めモニタ別ディレイ値管理テーブルにて管理するための手段である。撮影手段は、複数のデジタルテレビモニタの各前面領域を撮影範囲として、各撮影範囲にそれぞれ対応付けられ、当該撮影範囲内にいる利用者の顔画像を撮影するための手段である。
【００１１】
人面識別手段は、次曲の演奏開始前に、撮影手段により撮影された利用者の顔画像を識別するとともに、当該識別された顔画像に、撮影領域にそれぞれ対応付けられた各デジタルテレビモニタの識別データを付帯して、撮影顔画像データとして所定の記憶部に記憶するための手段である。ここで、次曲の演奏開始前とは、当該次曲の演奏前の無演奏期間であることが好ましい。
【００１２】
顔画像比較特定手段は、次曲を予約した利用者の登録顔画像データと、撮影顔画像データとを比較することにより、両顔画像データが一致する利用者を特定するための手段である。使用予定モニタ特定手段は、特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタを特定するための手段である。ディレイ値抽出手段は、モニタ別ディレイ値管理テーブルから、特定されたデジタルテレビモニタのディレイ値を抽出するための手段である。演奏再生制御手段は、次曲の演奏において、抽出されたディレイ値に基づいて、演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行うための手段である。
【００１３】
このような構成からなるデジタルテレビ対応カラオケシステムでは、利用者顔画像登録手段の機能により、予め、利用者毎の顔画像データに利用者ＩＤを付帯した利用者別の登録顔画像データを作成し、ＨＤＤ等に格納された利用者顔画像データベースに登録する。また、ログイン利用者管理手段の機能により、現に当該カラオケシステムにログインしている利用者を、利用者ＩＤに基づき特定して管理する。この際、カードリーダ等からなる利用者ＩＤ取得手段の機能により、利用者ＩＤが記録されたＩＤカード等のＩＤ媒体から利用者ＩＤを取得する。また、利用者別演奏予約手段の機能により、任意の利用者により選曲された楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、ＲＡＭ等に記憶された予約待ち行列にて管理する。さらに、モニタ別ディレイ値管理手段の機能により、演奏音発生タイミングに対する、複数のデジタルテレビモニタ毎に固有の映像表示タイミングの遅れであるディレイ値を、モニタ別ディレイ値管理テーブルにて管理する。これにより、各デジタルテレビモニタのディレイ値を把握することができる。
【００１４】
また、複数のデジタルテレビモニタには、それぞれの前面領域を撮影範囲とする撮影手段が対応付けている。この撮影手段は、各デジタルテレビモニタの前面領域、すなわち各デジタルテレビモニタを視認することができる位置にいる利用者の存在領域（着座位置等）を撮影範囲としており、当該撮影範囲内にいる利用者の顔画像を撮影することができるようになっている。そして、人面識別手段の機能により、次曲の演奏開始前（例えば、当該次曲の演奏前の無演奏期間）に、撮影手段により撮影された利用者の顔画像を識別して、当該識別された顔画像に各撮影領域に対応付けられた各デジタルテレビモニタの識別データを付帯して撮影顔画像データを作成し、ＲＡＭ等からなる記憶部に記憶する。
【００１５】
そして、顔画像比較特定手段の機能により、次曲を予約した利用者の登録顔画像データを取得し、ＲＡＭ等からなる記憶部に記憶された撮影顔画像データと比較することにより、両者が一致する利用者を特定する。さらに、使用予定モニタ特定手段の機能により、特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタを特定する。
【００１６】
次曲の選曲予約者が使用するデジタルテレビモニタが特定されると、ディレイ値抽出手段の機能により、当該デジタルテレビモニタのディレイ値を抽出する。そして演奏再生制御手段の機能により、次曲の演奏において、抽出したディレイ値に基づいて、演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行う。
【００１７】
なお、本発明において、次曲とは、予約待ち行列において１曲目に選曲予約されたカラオケ楽曲の場合には当該カラオケ楽曲のことをいい、それ以外の場合には、現に演奏されているカラオケ楽曲の次に選曲予約されたカラオケ楽曲のことをいう。
【発明の効果】
【００１８】
本発明のデジタルテレビ対応カラオケシステムによれば、映像再生のために複数のデジタルテレビモニタが接続されたカラオケシステムにおいて、次曲の選曲予約者が使用するデジタルテレビモニタを特定し、次曲の演奏において、当該デジタルテレビモニタ固有のディレイ値に基づいて、演奏音発生タイミングと、少なくとも歌唱者が使用するデジタルテレビモニタの映像表示タイミングとを同期させることができる。このため、専用のモニタではなく、汎用のデジタルテレビモニタを複数利用して映像表示を行うカラオケシステムであっても、歌唱者が使用するデジタルテレビモニタに表示される歌詞テロップ及びその色変わりや背景映像の表示タイミングと、スピーカシステムから発生されるカラオケ演奏音の発生タイミングとがずれることがなく、カラオケ演奏装置本来の機能を発揮して、歌唱を楽しませることができる。
【００１９】
また、次に演奏されるカラオケ楽曲の演奏前に、その選曲予約者が使用するデジタルテレビモニタを特定する構成とした場合には、より一層的確に、当該歌唱者が使用するデジタルテレビモニタを特定することができる。すなわち、通常の場合、次曲の選曲予約者（歌唱者）は、次曲の演奏直前である曲間にスタンバイしている。そこで、このタイミングで、次曲の選曲予約者が使用するデジタルテレビモニタを特定するのが好ましいためである。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施形態に係るデジタルテレビ対応カラオケシステムを適用するカラオケ演奏装置のブロック図。
【図２】本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を示すフローチャート。
【図３】本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を模式的に示す説明図。
【図４】利用者顔画像データベースの一例を示す説明図。
【図５】モニタ別ディレイ値管理テーブルの一例を示す説明図。
【図６】予約待ち行列の一例を示す説明図。
【図７】撮影顔画像データの一例を示す説明図。
【発明を実施するための形態】
【００２１】
以下、図面を参照して、本発明のデジタルテレビ対応カラオケシステムの実施形態を説明する。本発明の実施形態に係るデジタルテレビ対応カラオケシステムは、複数のデジタルビデオモニタを有し、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムであって、主要な構成要素として、利用者顔画像登録手段と、ログイン利用者管理手段と、利用者別演奏予約手段と、モニタ別ディレイ値管理手段と、撮影手段と、人面識別手段と、顔画像比較特定手段と、使用予定モニタ特定手段と、ディレイ値抽出手段と、演奏再生制御手段と、を備えている。図１に、本発明の実施形態に係るデジタルテレビ対応カラオケシステムを適用するカラオケ演奏装置の構成を示す。
【００２２】
＜カラオケ演奏装置＞
本発明の実施形態に係るカラオケ演奏装置１１は、図１に示すように、カラオケ本体２１、カラオケリモコン装置２２、複数の撮影手段２３ａ，２３ｂ，２３ｃ、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃ、スピーカ２５、ミキシングアンプ２６、マイクロホン２７を備えている。
【００２３】
＜カラオケリモコン装置＞
カラオケリモコン装置２２は、ユーザインタフェース機能を備えており、カラオケ本体２１の送受信手段に対して有線方式又は無線方式によりデータの送受信を行うようになっている。このカラオケリモコン装置２２は、楽曲検索手段２２ａとして機能するプログラム、楽曲索引データベース２２ｂ、利用者ＩＤ取得手段２２ｃとして機能する回路基板及びプログラム、データの送受信を行うための回路基板及びプログラム、フラッシュメモリ等からなる記憶手段（図示せず）を備えている。このカラオケリモコン装置２２に付帯するスイッチ類や、入出力表示部（図示せず）に表示される各種のアイコン等を操作することにより、選曲操作等が行われる。
【００２４】
＜楽曲検索手段／楽曲索引データベース＞
楽曲検索手段２２ａは、利用者の指示に基づき、楽曲索引データベース２２ｂを参照して楽曲を検索するためのプログラムからなる。楽曲索引データベース２２ｂは、カラオケ演奏装置１１で演奏に供されるカラオケ楽曲についての属性情報を記述したデータベースであり、例えば、楽曲番号・曲名・歌手名・歌い出し部分の歌詞・流行時期・音楽ジャンル区分・デュエット曲か否かなど、種々の属性情報がこれに含まれている。
【００２５】
＜利用者ＩＤ取得手段＞
利用者ＩＤ取得手段２２ｃは、利用者がカラオケ演奏装置１１を利用する際に、利用者が所持するＩＤ媒体３１から利用者ＩＤを取得するための電子回路及びプログラムからなる。利用者ＩＤ取得手段２２ｃで取得した利用者ＩＤは、ＲＡＭ４３等に一時的に記憶され、ログイン利用者管理手段４６で管理される。ＩＤ媒体３１は、例えば、非接触型のＩＤカード、携帯電話、携帯情報端末等からなり、利用者ＩＤを記憶して、利用者ＩＤ取得手段２２ｃとの間でデータの送受信を行うことができるようになっている。
【００２６】
＜撮影手段＞
撮影手段２３ａ，２３ｂ，２３ｃは、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃの各前面領域を撮影範囲として、各撮影範囲にそれぞれ対応付けられ、当該撮影範囲内にいる利用者の顔画像を撮影するための装置であり、例えば、撮像レンズ及び撮像素子を備えたビデオカメラにより構成される。撮影手段２３ａ，２３ｂ，２３ｃでは、撮像レンズにより被写体からの光線を撮像素子上に結像させて、ビデオ信号に変換する。このビデオ信号は、カラオケ本体２１に送信される。
【００２７】
撮影手段２３ａ，２３ｂ，２３ｃは、最低限の構成として、撮像レンズ及び撮像素子を備えていればよいが、撮像画質を向上させるために、フォーカシング機構やズーミング機構を備えていてもよい。さらに、撮影範囲を広く確保するために、ビデオカメラの付帯装置として、パン・チルト機構を備えていてもよい。
【００２８】
フォーカシング機構は、被写体像を撮像素子上に合焦して結像させるための機構であり、オートフォーカス機構を備えていることが好ましい。オートフォーカス機構としては、例えば、適宜な間隔を隔てて設置した２つのセパレートレンズを用いて被写体を撮影し、被写体像を撮像素子上に結像させ、両画像の位相差に基づいて物体距離を検知する方式や、被写体上に赤外光を照射して、被写体からの拡散反射光をレンズで集光し、その結像位置に基づいて物体距離を検知する方式や、撮像素子から被写体のコントラスト情報を抽出し、結像状態を直接判定する方式等が知られている。なお、被写界深度の深いレンズからなる固定焦点の撮像レンズを用いることによりフォーカシング機構を省略することができる。
【００２９】
ズーミング機構は、ビデオカメラの画角を変更するための機構で、広角端から望遠端に至る所定の範囲で連続的に画角を変更できるようになっており、画角の変更を行うために、ズームレンズ群を構成する各レンズを光軸に沿って移動させるための機構を備えている。ズームレンズ群を構成する各レンズを光軸に沿って移動させるための機構は、例えば、レンズを光軸に沿って移動可能に支持する支持機構、及びレンズを光軸に沿って移動させるアクチュエータ等からなる。
【００３０】
パン・チルト機構は、ビデオカメラをパン及びチルトさせるための機構であり、互いに直交する２軸方向にそれぞれ回転するパンテーブル及びチルトテーブルと、このパンテーブル及びチルトテーブルを互いに直交する２軸方向にそれぞれ回転駆動するステッピングモータと、ステッピングモータの駆動制御装置とを備えている。
【００３１】
図１及び図３に示す例では、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに対して、それぞれの前面領域を撮影範囲とする複数の撮影手段２３ａ，２３ｂ，２３ｃを設けているが、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃの撮影範囲を１台のビデオカメラにより撮影してもよい。この場合には、１台のビデオカメラの撮影範囲を、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに対応させて区画したり、パン・チルト機構を用いてビデオカメラの向きを変更したりすることにより、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃの前面領域をそれぞれ撮影範囲とすることができる。
【００３２】
＜カラオケ本体＞
カラオケ本体２１は、中央制御手段４１、ＲＯＭ４２、ＲＡＭ４３、ＨＤＤ４４、送受信手段４５、ログイン利用者管理手段４６、利用者別演奏予約手段４７、利用者顔画像登録手段４８、人面識別手段４９、顔画像比較特定手段５０、使用予定モニタ特定手段５１、撮像データ受信手段５２、モニタ別ディレイ値管理手段５３、ディレイ値抽出手段５４、映像再生制御手段５５、演奏再生制御手段５６を備えている。
【００３３】
＜中央制御手段＞
中央制御手段４１は、カラオケ本体２１を総合的に制御するための手段であり、例えばＣＰＵ及びその周辺機器により構成されており、ＣＰＵ等がＲＯＭ４２等に記憶されたアプリケーションプログラムに従って動作することにより、制御機能を発揮することができるようになっている。
【００３４】
＜ＲＯＭ／ＲＡＭ＞
ＲＯＭ４２は、カラオケ本体２１を構成する各機器を制御するためのアプリケーションプログラムデータや数値データを記憶するための機器で、例えば半導体メモリ等で構成される。また、ＲＡＭ４３は、アプリケーションプログラムや各種データを一時的に記憶する一時記憶領域として機能するもので、例えば半導体メモリ等で構成される。なお、物理的な半導体メモリによりＲＡＭ４３を構成するのではなく、ハードディスク記憶装置等を用いて仮想的なＲＡＭ４３を構成してもよい。本実施形態では、ＲＡＭ４３に、予約待ち行列４３ａ、撮影顔画像データ４３ｂが記憶されるようになっている。
【００３５】
＜ＨＤＤ＞
ＨＤＤ４４は、大容量記憶装置として機能するもので、楽曲データベース４４ａ、映像データベース４４ｂ、利用者顔画像データベース４４ｃ、モニタ別ディレイ値管理テーブル４４ｄが格納されている。なお、ＨＤＤ４４に替えて、あるいはＨＤＤ４４とともに、データを書き替え可能なＤＶＤ等の大容量記憶装置を用いてもよい。
【００３６】
楽曲データベース４４ａは、演奏データ（ＭＩＤＩ（登録商標）データ）及び歌詞テロップデータが同期されて構成される楽曲データについて、楽曲ＩＤと対応付けてそれぞれ格納したデータベースである。演奏データは各楽曲の演奏データをデジタル化したものであり、歌詞テロップデータは演奏データに同期されたカラオケ楽曲の歌詞文字データである。なお、歌詞文字データには、歌詞文字の表示色データ、色変わりデータ等が含まれている。映像データベース４４ｂは、演奏されるカラオケ楽曲に対応した背景映像を、当該カラオケ楽曲の楽曲ＩＤに対応させた映像ファイルとして所定数格納したデータベースである。
【００３７】
利用者顔画像データベース４４ｃは、利用者顔画像登録手段４８の機能により、利用者ＩＤに紐付けされた利用者の顔画像データを複数格納して構築されたデータベースである。この利用者顔画像データベース４４ｃに格納された登録顔画像データは、顔画像比較特定手段５０において、撮影顔画像データ４３ｂとの比較に用いられる。図４に、利用者顔画像データベース４４ｃの一例を示す。利用者顔画像データベース４４ｃは、図４に示すように、各利用者の利用者ＩＤと、各利用者の顔画像データとを紐付けして構築したデータベースである。
【００３８】
モニタ別ディレイ値管理テーブル４４ｄは、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃにおけるそれぞれのディレイ値を格納したデータテーブルであり、モニタ別ディレイ値管理手段５３の機能により管理される。図５に、モニタ別ディレイ値管理テーブル４４ｄの一例を示す。モニタ別ディレイ値管理テーブル４４ｄは、図５に示すように、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃのモニタＩＤと、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値とを紐付けして構築したデータテーブルである。
【００３９】
＜送受信手段＞
送受信手段４５は、カラオケ本体２１とカラオケリモコン装置２２との間で、データの送受信を行うための電子回路及びプログラムからなる。本実施形態では、赤外線通信により、カラオケ本体２１とカラオケリモコン装置２２との間で、データの送受信が行われる。
【００４０】
＜撮像データ受信手段＞
撮像データ受信手段５２は、撮影手段２３ａ，２３ｂ，２３ｃからのビデオ信号を受信するための回路基板及びプログラムからなる。受信したビデオ信号は、利用者顔画像登録手段４８、人面識別手段４９等で使用される。なお、本実施形態では、歌唱者の撮影姿態を記録するための手段を設けていないが、このような撮影データ記録手段を設けてもよい。撮影データ記録手段を設けた場合には、撮影手段２３ａ，２３ｂ，２３ｃにより撮影され、撮像データ受信手段５２により受信したビデオ信号と、マイクロホン２７から入力された音声入力信号と、演奏再生制御手段５６によりデジタル再生される演奏とを同期させて撮影データを作成し、ＲＡＭ４３等に記憶させる。この撮影データは、ＤＶＤドライブ等の記録装置及び書込ソフトウェアを用いてＤＶＤ等の記憶媒体に記憶したり、インターネット回線を介してサーバに蓄積させることによりウェブ配信したりすることができる。
【００４１】
＜利用者別演奏予約手段＞
利用者別演奏予約手段４７は、任意の利用者により選曲されたカラオケ楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、予約待ち行列４３ａにて管理するためのプログラムからなる。具体的には、任意の利用者により楽曲検索手段２２ａの機能を用いて選曲され、送受信手段４５を介して受信した当該選曲者の利用者ＩＤ及び選曲された楽曲ＩＤを対応付けて予約待ち行列４３ａとしてＲＡＭ４３に格納して管理する。図６に、予約待ち行列４３ａの一例を示す。予約待ち行列４３ａは、図６に示すように、選曲予約されたカラオケ楽曲の楽曲ＩＤに利用者ＩＤを紐付けして、選曲予約順（演奏順）に並べたデータである。
【００４２】
＜ログイン利用者管理手段＞
ログイン利用者管理手段４６は、現に当該カラオケ演奏装置１１にログインしている利用者を、利用者ＩＤに基づき特定して管理するためのプログラムからなる。すなわち、ログイン利用者管理手段４６では、利用者ＩＤ取得手段２２ｃにより利用者ＩＤが取得された場合に、この利用者ＩＤに基づいてカラオケ演奏装置１１にログインしている利用者を特定して管理する。取得した利用者ＩＤは、選曲予約や顔画像データの比較を行う際に利用される。
【００４３】
＜利用者顔画像登録手段＞
利用者顔画像登録手段４８は、予め、利用者毎の顔画像データを利用者ＩＤに紐付けして利用者顔画像データベース４４ｃに登録するためのプログラムからなる。利用者の顔画像データは、例えば、撮影手段２３ａ，２３ｂ，２３ｃの機能により取得することができる。撮影手段２３ａ，２３ｂ，２３ｃの機能により取得された利用者の顔画像データは、利用者顔画像登録手段４８の機能により、利用者ＩＤに紐付けされて利用者顔画像データベース４４ｃに登録される。なお、利用者ＩＤは、利用者ＩＤ取得手段２２ｃの機能により、ＩＤ媒体３１から取得することができる。
【００４４】
＜人面識別手段＞
人面識別手段４９は、次曲の演奏開始前に、複数の撮影手段２３ａ，２３ｂ，２３ｃによりそれぞれ撮影された利用者の顔画像を識別するとともに、当該識別された顔画像に、撮影領域にそれぞれ対応付けられた各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃの識別データを付帯して、撮影顔画像データ４３ｂとしてＲＡＭ４３に記憶するためのプログラムからなる。図７に、撮影顔画像データ４３ｂの一例を示す。撮影顔画像データ４３ｂは、図７に示すように、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃのモニタＩＤに、当該デジタルテレビモニタ２４ａ，２４ｂ，２４ｃに対応付けられた撮影手段２３ａ，２３ｂ，２３ｃの撮影範囲内にいる利用者の撮影顔画像データ４３ｂを紐付けしたデータである。なお、撮影顔画像データ４３ｂは、顔画像比較特定手段５０における比較が行われる毎に、１つずつ取得してもよいし、予めまとめて取得してＲＡＭ４３に記憶しておいてもよい。
【００４５】
歌唱者の顔画像データを識別するためには、例えば、特開２０００−２８３３号公報（特許文献２）に記載されているように、エッジ検出により、撮影視野内に存在する画像の輪郭を抽出する。そして、輪郭で囲まれた領域のうち所定の大きさの面積を有する領域を顔画像領域として認識する。続いて、顔画像領域内で、その輪郭、目、鼻、口の位置を利用して、被写体の顔画像の特徴を認識することにより、撮影した顔画像データを識別する。
【００４６】
＜顔画像比較特定手段＞
顔画像比較特定手段５０は、次曲を予約した利用者の登録顔画像データと、撮影顔画像データ４３ｂとを比較することにより、両顔画像データが一致する利用者を特定するためのプログラムからなる。例えば、選曲予約されたカラオケ楽曲が演奏されると、予約待ち行列４３ａに記録された利用者ＩＤに基づいて、利用者顔画像データベース４４ｃに登録された当該利用者の顔画像データを登録顔画像データとして取得する。そして、撮影手段２３ａ，２３ｂ，２３ｃの機能により撮影されて、人面識別手段４９により識別された利用者の顔画像データ（撮影顔画像データ４３ｂ）と、利用者顔画像データベース４４ｃから取得した登録顔画像データとを比較し、両者の一致・不一致を判別する。両者の比較は、顔画像領域内における顔の輪郭、目、鼻、口の位置に基づいて行われる。具体的には、撮影顔画像データ４３ｂと、登録顔画像データとにおいて、顔画像領域内における顔の輪郭、目、鼻、口の位置を比較してその一致度を数値化し、一致度数が所定の閾値以下の場合に、両者は異なるデータであると判断する。一方、一致度数が所定の閾値を超えていれば、両者は同一のデータであると判断する。顔画像比較特定手段５０では、登録顔画像データと一致する撮影顔画像データ４３ｂを有する利用者を特定する。
【００４７】
＜使用予定モニタ特定手段＞
使用予定モニタ特定手段５１は、特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを特定するためのプログラムからなる。すなわち、顔画像比較特定手段５０の機能により特定された利用者は、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのいずれかの前面領域に着席等しており、そのデジタルテレビモニタ２４ａ，２４ｂ，２４ｃが、当該利用者が歌唱の際に使用するものとなる。
【００４８】
＜モニタ別ディレイ値管理手段＞
モニタ別ディレイ値管理手段５３は、演奏音発生タイミングに対する、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃ毎に固有の映像表示タイミングの遅れであるディレイ値を、予めモニタ別ディレイ値管理テーブル４４ｄにて管理するための手段である。すなわち、１台のカラオケ演奏装置１１に対して複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを設置している場合に、すべてのデジタルテレビモニタ２４ａ，２４ｂ，２４ｃが同一の特性を有しているとは限らない。例えば、デジタルテレビモニタ２４ａ，２４ｂ，２４ｃ毎に走査モードが異なっていると、ディレイ値もそれぞれ異なることになる。そこで、モニタ別ディレイ値管理手段５３では、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃにおけるそれぞれのディレイ値を管理して、演奏再生制御手段５６における同期制御処理に利用する。
【００４９】
＜ディレイ値抽出手段＞
ディレイ値抽出手段５４は、モニタ別ディレイ値管理テーブル４４ｄから、特定されたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値を抽出するためのプログラムからなる。ディレイ値抽出手段５４の機能により抽出されたディレイ値は、演奏再生制御手段５６における同期制御処理で使用される。
【００５０】
＜演奏再生制御手段＞
演奏再生制御手段５６は、楽曲ＩＤに基づいて楽曲データベース４４ａから抽出された演奏データをデジタル再生するとともにアナログ変換してミキシングアンプ２６に出力するとともに、次曲の演奏において、抽出されたディレイ値に基づいて、演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行うための電子回路及びプログラムからなる。
【００５１】
ミキシングアンプ２６は、マイクロホン２７から入力された歌唱者の歌唱音声信号と、演奏再生制御手段５６から送出される演奏音声信号とをミキシングするとともに、アンプ機能により増幅してスピーカ２５より出力させるための装置である。このように、選曲予約者が使用するデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを特定して、当該デジタルテレビモニタ２４ａ，２４ｂ，２４ｃに特有のディレイ値を用いて、同期制御処理（カラオケ演奏音の再生遅延処理）を行うことにより、少なくとも歌唱者が使用するデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに表示されるカラオケ映像の表示タイミングと、スピーカ２５から発生するカラオケ演奏音の発生タイミングとを同期させることができる。
【００５２】
＜映像再生制御手段＞
映像再生制御手段５５は、カラオケ楽曲の演奏中に、映像データベース４４ｂから抽出した映像データ及び楽曲データベース４４ａから抽出した楽曲データのうちの歌詞テロップデータ（歌詞文字データ）を、当該カラオケ楽曲の演奏データに同期させてデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに出力するための電子回路である。この際、カラオケ楽曲の演奏進行に従って、歌詞文字が色変わりして表示される。
【００５３】
＜デジタルテレビモニタ＞
デジタルテレビモニタ２４ａ，２４ｂ，２４ｃは、カラオケ演奏時の背景映像、歌詞テロップ等を表示するための装置で、例えば、デジタルデータに基づいて映像再生が行われるＣＲＴディスプレイ、液晶ディスプレイ、プラズマディスプレイ等により構成される。
【００５４】
＜同期制御処理＞
図２〜図７を参照して、本実施形態のデジタルテレビ対応カラオケシステムにおける同期制御処理を説明する。図２は、本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を示すフローチャートである。また、図３は、本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を示す説明図である。また、図４は、利用者顔画像データベースの一例を示す説明図、図５は、モニタ別ディレイ値管理テーブルの一例を示す説明図、図６は、予約待ち行列の一例を示す説明図、図７は、撮影顔画像データの一例を示す説明図である。
【００５５】
なお、本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を行うために、予め、利用者顔画像登録手段４８の機能により、利用者別の登録顔画像データが利用者顔画像データベース４４ｃに登録されており、さらに、利用者別演奏予約手段４７の機能により、選曲予約されたカラオケ楽曲の楽曲ＩＤに当該選曲予約者の利用者ＩＤが付帯されて、予約待ち行列４３ａにて管理されているものとする。
【００５６】
本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理では、図２及び図３に示すように、まず、次曲が存在するか否か、すなわち予約待ち行列４３ａに次曲が登録されているか否かを判断する（Ｓ１）。ここで、次曲が存在する場合には、利用者顔画像データベース４４ｃから、次曲の選曲予約者の登録顔画像データを取得する（Ｓ２）。続いて、撮影手段２３ａ，２３ｂ，２３ｃの機能により、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃの前面領域にいる利用者の顔画像を撮影するとともに、人面識別手段４９の機能により識別し、撮影顔画像データ４３ｂとしてＲＡＭ４３に記憶する（Ｓ３）。続いて、顔画像比較特定手段５０の機能により、次曲の選曲予約者の登録顔画像データと、撮影顔画像データ４３ｂとを比較する（Ｓ４）。
【００５７】
例えば、図６に示す予約待ち行列４３ａによれば、次曲の選曲予約者は利用者Ｃであるため、図４に示す利用者顔画像データベース４４ｃから、利用者Ｃの顔画像データ（＊＊＊＊Ｃ．ｊｐｇ）を取得し、図７に示す複数の撮影顔画像データ４３ｂとそれぞれ比較する。
【００５８】
そして、選曲予約者の登録顔画像データに一致する撮影顔画像データ４３ｂが存在するか否かを判断し（Ｓ５）、選曲予約者の登録顔画像データに一致する撮影顔画像データ４３ｂが存在した場合には、登録顔画像データに一致する利用者が存在する撮影領域を特定する（Ｓ６）。図３に示す例では、次曲の選曲予約者である利用者Ｃが存在する撮影領域（デジタルテレビモニタ２４ａの撮影領域）が特定される。
【００５９】
続いて、使用予定モニタ特定手段５１の機能により、特定した撮影領域に対応付けられたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを特定し（Ｓ７）、ディレイ値抽出手段５４の機能により、特定されたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値を抽出する（Ｓ８）。図３に示す例では、利用者（選曲予約者）が使用予定であるデジタルテレビモニタ２４ａ（モニタａ）が特定され、モニタ別ディレイ値管理テーブル４４ｄからモニタａのディレイ値を抽出する。
【００６０】
具体的には、利用者Ｃの顔画像データ（＊＊＊＊Ｃ．ｊｐｇ）と、複数の撮影顔画像データ４３ｂにおいて、モニタａに紐付けされた３番目の利用者の顔画像データ（ｐｈａ０３．ｊｐｇ）とが一致したとする。この場合には、撮影顔画像データ（ｐｈａ０３．ｊｐｇ）に紐付けられたモニタは、デジタルテレビモニタ２４ａ（モニタａ）であるため、図５に示すモニタ別ディレイ値管理テーブル４４ｄから、モニタａのディレイ値（５００ｍｓｅｃ）を抽出する。
【００６１】
続いて、次曲のカラオケ楽曲の演奏が開始されるのを待ち（Ｓ９）、演奏再生制御手段５６の機能により、次曲のカラオケ楽曲の再生において、当該カラオケ楽曲の選曲予約者が使用するとして特定されたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値に基づいて、カラオケ演奏の遅延制御を行い、映像と演奏音とを同期させる（Ｓ１０）。図３に示す例では、演奏再生制御手段５６がデジタルテレビモニタ２４ａ（モニタａ）のディレイ値（５００ｍｓｅｃ）に基づいて演奏再生制御を行うことにより、当該カラオケ楽曲の再生において、演奏音発生タイミングと選曲予約者が使用するデジタルテレビモニタ２４ａ（モニタａ）の映像表示タイミングとを同期させる。
【００６２】
＜他の実施形態＞
本発明のデジタルテレビ対応カラオケシステム及びその周辺装置を構成する機器や手段は上述したものに限定されず、その利用目的に応じて、必要な機器や手段のみの構成としたり、適宜他の機器や手段を付加したりすることができる。また、各手段をそれぞれ別個のものとして構成するのではなく、複数の機能を統合した手段として構成してもよい。
【００６３】
＜ネットワークカラオケシステム＞
また、上述した実施形態は、カラオケ演奏装置１１をスタンドアロンで使用した例を示しているが、各カラオケ店舗等に設置されたカラオケ演奏装置１１を端末装置とし、インターネット回線等を用いて、端末装置とホスト装置とをネットワーク接続した構成とすることもできる。この場合には、ホスト装置において、利用者ＩＤや、これに紐付けされた利用者の顔画像データ等を集中管理することにより、ネットワーク接続された各カラオケ演奏装置１１において同様のサービスを提供することができる。
【符号の説明】
【００６４】
１１ カラオケ演奏装置
２１ カラオケ本体
２２ カラオケリモコン装置
２２ａ 楽曲検索手段
２２ｂ 楽曲索引データベース
２２ｃ 利用者ＩＤ取得手段
２３ａ，２３ｂ，２３ｃ 撮影手段
２４ａ，２４ｂ，２４ｃ デジタルテレビモニタ
２５ スピーカ
２６ ミキシングアンプ
２７ マイクロホン
３１ ＩＤ媒体
４１ 中央制御手段
４２ ＲＯＭ
４３ ＲＡＭ
４３ａ 予約待ち行列
４３ｂ 撮影顔画像データ
４４ ＨＤＤ
４４ａ 楽曲データベース
４４ｂ 映像データベース
４４ｃ 利用者顔画像データベース
４４ｄ モニタ別ディレイ値管理テーブル
４５ 送受信手段
４６ ログイン利用者管理手段
４７ 利用者別演奏予約手段
４８ 利用者顔画像登録手段
４９ 人面識別手段
５０ 顔画像比較特定手段
５１ 使用予定モニタ特定手段
５２ 撮像データ受信手段
５３ モニタ別ディレイ値管理手段
５４ ディレイ値抽出手段
５５ 映像再生制御手段
５６ 演奏再生制御手段
【技術分野】
【０００１】
本発明は、映像表示のために複数のデジタルテレビモニタが接続されたカラオケシステムにおいて、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムに関するものである。
【背景技術】
【０００２】
近年、テレビジョンにおける画像のデジタル化が促進されるとともに、地上アナログ放送から地上デジタル放送への変更が予定されている。このようなアナログテレビからデジタルテレビへの変更に伴い、映像表示タイミングと音声発生タイミングとの同期が問題となってきた。すなわち、映像信号と音声信号とをデジタル処理する場合に両者を比較すると、映像信号のデータ量が多いとともに、再生処理が複雑であるため、再生された音声に対して映像が遅延してしまう。
【０００３】
そこで、従来、デジタルテレビにおける映像表示タイミングと音声発生タイミングとを同期させるための技術が、種々提案されている（特許文献１参照）。特許文献１に記載された映像音声処理システムに関する技術は、映像処理装置とアンプ装置とが、少なくとも映像信号線路と制御信号線路とによって接続されている。そして、映像処理装置は、映像信号線路を通じて供給を受ける映像信号を処理して表示素子に供給する表示用映像信号を形成する映像信号処理手段と、映像信号線路を通じて供給を受ける映像信号を映像信号処理手段で処理して、当該映像信号に応じた映像を表示素子の表示画面に表示するまでに要する処理時間を示す処理時間情報を、制御信号線路を通じて提供するための提供手段と、を備えている。また、アンプ装置は、供給を受けた音声信号に対して所定の処理を行ってスピーカに供給する音声信号処理手段と、制御信号線路を通じて、提供手段から処理時間情報を取得する取得手段と、取得手段により取得した処理時間情報に応じた時間分、スピーカに供給する音声信号を遅延させる遅延処理手段と、を備えている。これにより、音声信号と映像信号とが異なる機器で処理されるシステムにおいて、いわゆるリップシンクのずれを発生させないようにすることができるとされている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−３３４３６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
ところで、カラオケ演奏装置では、スピーカシステムから発生するカラオケ演奏音の発生タイミングと、背景映像や歌詞テロップ等からなる映像の表示タイミングとを同期させている。カラオケ店で一般的に普及しているカラオケ演奏装置では、専用のモニタではなく、汎用のテレビモニタを利用して映像表示を行うことが多い。このような状況の下、上述したように、地上アナログ放送が終了して地上デジタル放送のみとなると、カラオケ店でも地上デジタル放送に対応したデジタルテレビモニタを使用することになる。
【０００６】
したがって、カラオケ演奏における音声発生タイミングと映像表示タイミングとのずれが問題となる。すなわち、カラオケ演奏音の発生タイミングと背景映像や歌詞テロップの表示タイミングとがずれることが考えられ、特に、カラオケ演奏音の発生タイミングと歌詞テロップの表示タイミングとがずれると、歌唱が困難となり、カラオケ演奏装置本来の機能が損なわれてしまう。
【０００７】
そこで、デジタルテレビモニタに対応して、カラオケ映像の表示タイミングと、スピーカシステムから発生するカラオケ演奏音の発生タイミングとを同期させることが可能なカラオケシステムの開発が望まれている。さらに、昨今のカラオケシステムでは、１台のカラオケ演奏装置に対して、歌唱者用のテレビモニタを複数設置する場合がある。この場合に、デジタルテレビモニタの機種毎に走査モードやデジタル処理能力等がそれぞれ異なっているので、機種毎に固有のディレイ値が存在し、一律な同期処理では対応できないという問題がある。
【０００８】
本発明は、上述した事情に鑑み提案されたもので、映像再生のために複数のデジタルテレビモニタが接続されたカラオケシステムにおいて、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させることが可能なデジタルテレビ対応カラオケシステムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明のデジタルテレビ対応カラオケシステムは、上述した目的を達成するため、以下の特徴点を有している。すなわち、本発明のデジタルテレビ対応カラオケシステムは、複数のデジタルビデオモニタを有し、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムであって、利用者顔画像登録手段と、ログイン利用者管理手段と、利用者別演奏予約手段と、モニタ別ディレイ値管理手段と、撮影手段と、人面識別手段と、顔画像比較特定手段と、使用予定モニタ特定手段と、ディレイ値抽出手段と、演奏再生制御手段と、を備えている。
【００１０】
利用者顔画像登録手段は、予め、利用者毎の顔画像データに利用者ＩＤを付帯して、利用者別の登録顔画像データとして利用者顔画像データベースに登録するための手段である。ログイン利用者管理手段は、現に当該カラオケシステムにログインしている利用者を、利用者ＩＤに基づき特定して管理するための手段である。利用者別演奏予約手段は、任意の利用者により選曲された楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、予約待ち行列にて管理するための手段である。モニタ別ディレイ値管理手段は、演奏音発生タイミングに対する、複数のデジタルテレビモニタ毎に固有の映像表示タイミングの遅れであるディレイ値を、予めモニタ別ディレイ値管理テーブルにて管理するための手段である。撮影手段は、複数のデジタルテレビモニタの各前面領域を撮影範囲として、各撮影範囲にそれぞれ対応付けられ、当該撮影範囲内にいる利用者の顔画像を撮影するための手段である。
【００１１】
人面識別手段は、次曲の演奏開始前に、撮影手段により撮影された利用者の顔画像を識別するとともに、当該識別された顔画像に、撮影領域にそれぞれ対応付けられた各デジタルテレビモニタの識別データを付帯して、撮影顔画像データとして所定の記憶部に記憶するための手段である。ここで、次曲の演奏開始前とは、当該次曲の演奏前の無演奏期間であることが好ましい。
【００１２】
顔画像比較特定手段は、次曲を予約した利用者の登録顔画像データと、撮影顔画像データとを比較することにより、両顔画像データが一致する利用者を特定するための手段である。使用予定モニタ特定手段は、特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタを特定するための手段である。ディレイ値抽出手段は、モニタ別ディレイ値管理テーブルから、特定されたデジタルテレビモニタのディレイ値を抽出するための手段である。演奏再生制御手段は、次曲の演奏において、抽出されたディレイ値に基づいて、演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行うための手段である。
【００１３】
このような構成からなるデジタルテレビ対応カラオケシステムでは、利用者顔画像登録手段の機能により、予め、利用者毎の顔画像データに利用者ＩＤを付帯した利用者別の登録顔画像データを作成し、ＨＤＤ等に格納された利用者顔画像データベースに登録する。また、ログイン利用者管理手段の機能により、現に当該カラオケシステムにログインしている利用者を、利用者ＩＤに基づき特定して管理する。この際、カードリーダ等からなる利用者ＩＤ取得手段の機能により、利用者ＩＤが記録されたＩＤカード等のＩＤ媒体から利用者ＩＤを取得する。また、利用者別演奏予約手段の機能により、任意の利用者により選曲された楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、ＲＡＭ等に記憶された予約待ち行列にて管理する。さらに、モニタ別ディレイ値管理手段の機能により、演奏音発生タイミングに対する、複数のデジタルテレビモニタ毎に固有の映像表示タイミングの遅れであるディレイ値を、モニタ別ディレイ値管理テーブルにて管理する。これにより、各デジタルテレビモニタのディレイ値を把握することができる。
【００１４】
また、複数のデジタルテレビモニタには、それぞれの前面領域を撮影範囲とする撮影手段が対応付けている。この撮影手段は、各デジタルテレビモニタの前面領域、すなわち各デジタルテレビモニタを視認することができる位置にいる利用者の存在領域（着座位置等）を撮影範囲としており、当該撮影範囲内にいる利用者の顔画像を撮影することができるようになっている。そして、人面識別手段の機能により、次曲の演奏開始前（例えば、当該次曲の演奏前の無演奏期間）に、撮影手段により撮影された利用者の顔画像を識別して、当該識別された顔画像に各撮影領域に対応付けられた各デジタルテレビモニタの識別データを付帯して撮影顔画像データを作成し、ＲＡＭ等からなる記憶部に記憶する。
【００１５】
そして、顔画像比較特定手段の機能により、次曲を予約した利用者の登録顔画像データを取得し、ＲＡＭ等からなる記憶部に記憶された撮影顔画像データと比較することにより、両者が一致する利用者を特定する。さらに、使用予定モニタ特定手段の機能により、特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタを特定する。
【００１６】
次曲の選曲予約者が使用するデジタルテレビモニタが特定されると、ディレイ値抽出手段の機能により、当該デジタルテレビモニタのディレイ値を抽出する。そして演奏再生制御手段の機能により、次曲の演奏において、抽出したディレイ値に基づいて、演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行う。
【００１７】
なお、本発明において、次曲とは、予約待ち行列において１曲目に選曲予約されたカラオケ楽曲の場合には当該カラオケ楽曲のことをいい、それ以外の場合には、現に演奏されているカラオケ楽曲の次に選曲予約されたカラオケ楽曲のことをいう。
【発明の効果】
【００１８】
本発明のデジタルテレビ対応カラオケシステムによれば、映像再生のために複数のデジタルテレビモニタが接続されたカラオケシステムにおいて、次曲の選曲予約者が使用するデジタルテレビモニタを特定し、次曲の演奏において、当該デジタルテレビモニタ固有のディレイ値に基づいて、演奏音発生タイミングと、少なくとも歌唱者が使用するデジタルテレビモニタの映像表示タイミングとを同期させることができる。このため、専用のモニタではなく、汎用のデジタルテレビモニタを複数利用して映像表示を行うカラオケシステムであっても、歌唱者が使用するデジタルテレビモニタに表示される歌詞テロップ及びその色変わりや背景映像の表示タイミングと、スピーカシステムから発生されるカラオケ演奏音の発生タイミングとがずれることがなく、カラオケ演奏装置本来の機能を発揮して、歌唱を楽しませることができる。
【００１９】
また、次に演奏されるカラオケ楽曲の演奏前に、その選曲予約者が使用するデジタルテレビモニタを特定する構成とした場合には、より一層的確に、当該歌唱者が使用するデジタルテレビモニタを特定することができる。すなわち、通常の場合、次曲の選曲予約者（歌唱者）は、次曲の演奏直前である曲間にスタンバイしている。そこで、このタイミングで、次曲の選曲予約者が使用するデジタルテレビモニタを特定するのが好ましいためである。
【図面の簡単な説明】
【００２０】
【図１】本発明の実施形態に係るデジタルテレビ対応カラオケシステムを適用するカラオケ演奏装置のブロック図。
【図２】本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を示すフローチャート。
【図３】本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を模式的に示す説明図。
【図４】利用者顔画像データベースの一例を示す説明図。
【図５】モニタ別ディレイ値管理テーブルの一例を示す説明図。
【図６】予約待ち行列の一例を示す説明図。
【図７】撮影顔画像データの一例を示す説明図。
【発明を実施するための形態】
【００２１】
以下、図面を参照して、本発明のデジタルテレビ対応カラオケシステムの実施形態を説明する。本発明の実施形態に係るデジタルテレビ対応カラオケシステムは、複数のデジタルビデオモニタを有し、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムであって、主要な構成要素として、利用者顔画像登録手段と、ログイン利用者管理手段と、利用者別演奏予約手段と、モニタ別ディレイ値管理手段と、撮影手段と、人面識別手段と、顔画像比較特定手段と、使用予定モニタ特定手段と、ディレイ値抽出手段と、演奏再生制御手段と、を備えている。図１に、本発明の実施形態に係るデジタルテレビ対応カラオケシステムを適用するカラオケ演奏装置の構成を示す。
【００２２】
＜カラオケ演奏装置＞
本発明の実施形態に係るカラオケ演奏装置１１は、図１に示すように、カラオケ本体２１、カラオケリモコン装置２２、複数の撮影手段２３ａ，２３ｂ，２３ｃ、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃ、スピーカ２５、ミキシングアンプ２６、マイクロホン２７を備えている。
【００２３】
＜カラオケリモコン装置＞
カラオケリモコン装置２２は、ユーザインタフェース機能を備えており、カラオケ本体２１の送受信手段に対して有線方式又は無線方式によりデータの送受信を行うようになっている。このカラオケリモコン装置２２は、楽曲検索手段２２ａとして機能するプログラム、楽曲索引データベース２２ｂ、利用者ＩＤ取得手段２２ｃとして機能する回路基板及びプログラム、データの送受信を行うための回路基板及びプログラム、フラッシュメモリ等からなる記憶手段（図示せず）を備えている。このカラオケリモコン装置２２に付帯するスイッチ類や、入出力表示部（図示せず）に表示される各種のアイコン等を操作することにより、選曲操作等が行われる。
【００２４】
＜楽曲検索手段／楽曲索引データベース＞
楽曲検索手段２２ａは、利用者の指示に基づき、楽曲索引データベース２２ｂを参照して楽曲を検索するためのプログラムからなる。楽曲索引データベース２２ｂは、カラオケ演奏装置１１で演奏に供されるカラオケ楽曲についての属性情報を記述したデータベースであり、例えば、楽曲番号・曲名・歌手名・歌い出し部分の歌詞・流行時期・音楽ジャンル区分・デュエット曲か否かなど、種々の属性情報がこれに含まれている。
【００２５】
＜利用者ＩＤ取得手段＞
利用者ＩＤ取得手段２２ｃは、利用者がカラオケ演奏装置１１を利用する際に、利用者が所持するＩＤ媒体３１から利用者ＩＤを取得するための電子回路及びプログラムからなる。利用者ＩＤ取得手段２２ｃで取得した利用者ＩＤは、ＲＡＭ４３等に一時的に記憶され、ログイン利用者管理手段４６で管理される。ＩＤ媒体３１は、例えば、非接触型のＩＤカード、携帯電話、携帯情報端末等からなり、利用者ＩＤを記憶して、利用者ＩＤ取得手段２２ｃとの間でデータの送受信を行うことができるようになっている。
【００２６】
＜撮影手段＞
撮影手段２３ａ，２３ｂ，２３ｃは、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃの各前面領域を撮影範囲として、各撮影範囲にそれぞれ対応付けられ、当該撮影範囲内にいる利用者の顔画像を撮影するための装置であり、例えば、撮像レンズ及び撮像素子を備えたビデオカメラにより構成される。撮影手段２３ａ，２３ｂ，２３ｃでは、撮像レンズにより被写体からの光線を撮像素子上に結像させて、ビデオ信号に変換する。このビデオ信号は、カラオケ本体２１に送信される。
【００２７】
撮影手段２３ａ，２３ｂ，２３ｃは、最低限の構成として、撮像レンズ及び撮像素子を備えていればよいが、撮像画質を向上させるために、フォーカシング機構やズーミング機構を備えていてもよい。さらに、撮影範囲を広く確保するために、ビデオカメラの付帯装置として、パン・チルト機構を備えていてもよい。
【００２８】
フォーカシング機構は、被写体像を撮像素子上に合焦して結像させるための機構であり、オートフォーカス機構を備えていることが好ましい。オートフォーカス機構としては、例えば、適宜な間隔を隔てて設置した２つのセパレートレンズを用いて被写体を撮影し、被写体像を撮像素子上に結像させ、両画像の位相差に基づいて物体距離を検知する方式や、被写体上に赤外光を照射して、被写体からの拡散反射光をレンズで集光し、その結像位置に基づいて物体距離を検知する方式や、撮像素子から被写体のコントラスト情報を抽出し、結像状態を直接判定する方式等が知られている。なお、被写界深度の深いレンズからなる固定焦点の撮像レンズを用いることによりフォーカシング機構を省略することができる。
【００２９】
ズーミング機構は、ビデオカメラの画角を変更するための機構で、広角端から望遠端に至る所定の範囲で連続的に画角を変更できるようになっており、画角の変更を行うために、ズームレンズ群を構成する各レンズを光軸に沿って移動させるための機構を備えている。ズームレンズ群を構成する各レンズを光軸に沿って移動させるための機構は、例えば、レンズを光軸に沿って移動可能に支持する支持機構、及びレンズを光軸に沿って移動させるアクチュエータ等からなる。
【００３０】
パン・チルト機構は、ビデオカメラをパン及びチルトさせるための機構であり、互いに直交する２軸方向にそれぞれ回転するパンテーブル及びチルトテーブルと、このパンテーブル及びチルトテーブルを互いに直交する２軸方向にそれぞれ回転駆動するステッピングモータと、ステッピングモータの駆動制御装置とを備えている。
【００３１】
図１及び図３に示す例では、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに対して、それぞれの前面領域を撮影範囲とする複数の撮影手段２３ａ，２３ｂ，２３ｃを設けているが、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃの撮影範囲を１台のビデオカメラにより撮影してもよい。この場合には、１台のビデオカメラの撮影範囲を、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに対応させて区画したり、パン・チルト機構を用いてビデオカメラの向きを変更したりすることにより、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃの前面領域をそれぞれ撮影範囲とすることができる。
【００３２】
＜カラオケ本体＞
カラオケ本体２１は、中央制御手段４１、ＲＯＭ４２、ＲＡＭ４３、ＨＤＤ４４、送受信手段４５、ログイン利用者管理手段４６、利用者別演奏予約手段４７、利用者顔画像登録手段４８、人面識別手段４９、顔画像比較特定手段５０、使用予定モニタ特定手段５１、撮像データ受信手段５２、モニタ別ディレイ値管理手段５３、ディレイ値抽出手段５４、映像再生制御手段５５、演奏再生制御手段５６を備えている。
【００３３】
＜中央制御手段＞
中央制御手段４１は、カラオケ本体２１を総合的に制御するための手段であり、例えばＣＰＵ及びその周辺機器により構成されており、ＣＰＵ等がＲＯＭ４２等に記憶されたアプリケーションプログラムに従って動作することにより、制御機能を発揮することができるようになっている。
【００３４】
＜ＲＯＭ／ＲＡＭ＞
ＲＯＭ４２は、カラオケ本体２１を構成する各機器を制御するためのアプリケーションプログラムデータや数値データを記憶するための機器で、例えば半導体メモリ等で構成される。また、ＲＡＭ４３は、アプリケーションプログラムや各種データを一時的に記憶する一時記憶領域として機能するもので、例えば半導体メモリ等で構成される。なお、物理的な半導体メモリによりＲＡＭ４３を構成するのではなく、ハードディスク記憶装置等を用いて仮想的なＲＡＭ４３を構成してもよい。本実施形態では、ＲＡＭ４３に、予約待ち行列４３ａ、撮影顔画像データ４３ｂが記憶されるようになっている。
【００３５】
＜ＨＤＤ＞
ＨＤＤ４４は、大容量記憶装置として機能するもので、楽曲データベース４４ａ、映像データベース４４ｂ、利用者顔画像データベース４４ｃ、モニタ別ディレイ値管理テーブル４４ｄが格納されている。なお、ＨＤＤ４４に替えて、あるいはＨＤＤ４４とともに、データを書き替え可能なＤＶＤ等の大容量記憶装置を用いてもよい。
【００３６】
楽曲データベース４４ａは、演奏データ（ＭＩＤＩ（登録商標）データ）及び歌詞テロップデータが同期されて構成される楽曲データについて、楽曲ＩＤと対応付けてそれぞれ格納したデータベースである。演奏データは各楽曲の演奏データをデジタル化したものであり、歌詞テロップデータは演奏データに同期されたカラオケ楽曲の歌詞文字データである。なお、歌詞文字データには、歌詞文字の表示色データ、色変わりデータ等が含まれている。映像データベース４４ｂは、演奏されるカラオケ楽曲に対応した背景映像を、当該カラオケ楽曲の楽曲ＩＤに対応させた映像ファイルとして所定数格納したデータベースである。
【００３７】
利用者顔画像データベース４４ｃは、利用者顔画像登録手段４８の機能により、利用者ＩＤに紐付けされた利用者の顔画像データを複数格納して構築されたデータベースである。この利用者顔画像データベース４４ｃに格納された登録顔画像データは、顔画像比較特定手段５０において、撮影顔画像データ４３ｂとの比較に用いられる。図４に、利用者顔画像データベース４４ｃの一例を示す。利用者顔画像データベース４４ｃは、図４に示すように、各利用者の利用者ＩＤと、各利用者の顔画像データとを紐付けして構築したデータベースである。
【００３８】
モニタ別ディレイ値管理テーブル４４ｄは、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃにおけるそれぞれのディレイ値を格納したデータテーブルであり、モニタ別ディレイ値管理手段５３の機能により管理される。図５に、モニタ別ディレイ値管理テーブル４４ｄの一例を示す。モニタ別ディレイ値管理テーブル４４ｄは、図５に示すように、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃのモニタＩＤと、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値とを紐付けして構築したデータテーブルである。
【００３９】
＜送受信手段＞
送受信手段４５は、カラオケ本体２１とカラオケリモコン装置２２との間で、データの送受信を行うための電子回路及びプログラムからなる。本実施形態では、赤外線通信により、カラオケ本体２１とカラオケリモコン装置２２との間で、データの送受信が行われる。
【００４０】
＜撮像データ受信手段＞
撮像データ受信手段５２は、撮影手段２３ａ，２３ｂ，２３ｃからのビデオ信号を受信するための回路基板及びプログラムからなる。受信したビデオ信号は、利用者顔画像登録手段４８、人面識別手段４９等で使用される。なお、本実施形態では、歌唱者の撮影姿態を記録するための手段を設けていないが、このような撮影データ記録手段を設けてもよい。撮影データ記録手段を設けた場合には、撮影手段２３ａ，２３ｂ，２３ｃにより撮影され、撮像データ受信手段５２により受信したビデオ信号と、マイクロホン２７から入力された音声入力信号と、演奏再生制御手段５６によりデジタル再生される演奏とを同期させて撮影データを作成し、ＲＡＭ４３等に記憶させる。この撮影データは、ＤＶＤドライブ等の記録装置及び書込ソフトウェアを用いてＤＶＤ等の記憶媒体に記憶したり、インターネット回線を介してサーバに蓄積させることによりウェブ配信したりすることができる。
【００４１】
＜利用者別演奏予約手段＞
利用者別演奏予約手段４７は、任意の利用者により選曲されたカラオケ楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、予約待ち行列４３ａにて管理するためのプログラムからなる。具体的には、任意の利用者により楽曲検索手段２２ａの機能を用いて選曲され、送受信手段４５を介して受信した当該選曲者の利用者ＩＤ及び選曲された楽曲ＩＤを対応付けて予約待ち行列４３ａとしてＲＡＭ４３に格納して管理する。図６に、予約待ち行列４３ａの一例を示す。予約待ち行列４３ａは、図６に示すように、選曲予約されたカラオケ楽曲の楽曲ＩＤに利用者ＩＤを紐付けして、選曲予約順（演奏順）に並べたデータである。
【００４２】
＜ログイン利用者管理手段＞
ログイン利用者管理手段４６は、現に当該カラオケ演奏装置１１にログインしている利用者を、利用者ＩＤに基づき特定して管理するためのプログラムからなる。すなわち、ログイン利用者管理手段４６では、利用者ＩＤ取得手段２２ｃにより利用者ＩＤが取得された場合に、この利用者ＩＤに基づいてカラオケ演奏装置１１にログインしている利用者を特定して管理する。取得した利用者ＩＤは、選曲予約や顔画像データの比較を行う際に利用される。
【００４３】
＜利用者顔画像登録手段＞
利用者顔画像登録手段４８は、予め、利用者毎の顔画像データを利用者ＩＤに紐付けして利用者顔画像データベース４４ｃに登録するためのプログラムからなる。利用者の顔画像データは、例えば、撮影手段２３ａ，２３ｂ，２３ｃの機能により取得することができる。撮影手段２３ａ，２３ｂ，２３ｃの機能により取得された利用者の顔画像データは、利用者顔画像登録手段４８の機能により、利用者ＩＤに紐付けされて利用者顔画像データベース４４ｃに登録される。なお、利用者ＩＤは、利用者ＩＤ取得手段２２ｃの機能により、ＩＤ媒体３１から取得することができる。
【００４４】
＜人面識別手段＞
人面識別手段４９は、次曲の演奏開始前に、複数の撮影手段２３ａ，２３ｂ，２３ｃによりそれぞれ撮影された利用者の顔画像を識別するとともに、当該識別された顔画像に、撮影領域にそれぞれ対応付けられた各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃの識別データを付帯して、撮影顔画像データ４３ｂとしてＲＡＭ４３に記憶するためのプログラムからなる。図７に、撮影顔画像データ４３ｂの一例を示す。撮影顔画像データ４３ｂは、図７に示すように、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃのモニタＩＤに、当該デジタルテレビモニタ２４ａ，２４ｂ，２４ｃに対応付けられた撮影手段２３ａ，２３ｂ，２３ｃの撮影範囲内にいる利用者の撮影顔画像データ４３ｂを紐付けしたデータである。なお、撮影顔画像データ４３ｂは、顔画像比較特定手段５０における比較が行われる毎に、１つずつ取得してもよいし、予めまとめて取得してＲＡＭ４３に記憶しておいてもよい。
【００４５】
歌唱者の顔画像データを識別するためには、例えば、特開２０００−２８３３号公報（特許文献２）に記載されているように、エッジ検出により、撮影視野内に存在する画像の輪郭を抽出する。そして、輪郭で囲まれた領域のうち所定の大きさの面積を有する領域を顔画像領域として認識する。続いて、顔画像領域内で、その輪郭、目、鼻、口の位置を利用して、被写体の顔画像の特徴を認識することにより、撮影した顔画像データを識別する。
【００４６】
＜顔画像比較特定手段＞
顔画像比較特定手段５０は、次曲を予約した利用者の登録顔画像データと、撮影顔画像データ４３ｂとを比較することにより、両顔画像データが一致する利用者を特定するためのプログラムからなる。例えば、選曲予約されたカラオケ楽曲が演奏されると、予約待ち行列４３ａに記録された利用者ＩＤに基づいて、利用者顔画像データベース４４ｃに登録された当該利用者の顔画像データを登録顔画像データとして取得する。そして、撮影手段２３ａ，２３ｂ，２３ｃの機能により撮影されて、人面識別手段４９により識別された利用者の顔画像データ（撮影顔画像データ４３ｂ）と、利用者顔画像データベース４４ｃから取得した登録顔画像データとを比較し、両者の一致・不一致を判別する。両者の比較は、顔画像領域内における顔の輪郭、目、鼻、口の位置に基づいて行われる。具体的には、撮影顔画像データ４３ｂと、登録顔画像データとにおいて、顔画像領域内における顔の輪郭、目、鼻、口の位置を比較してその一致度を数値化し、一致度数が所定の閾値以下の場合に、両者は異なるデータであると判断する。一方、一致度数が所定の閾値を超えていれば、両者は同一のデータであると判断する。顔画像比較特定手段５０では、登録顔画像データと一致する撮影顔画像データ４３ｂを有する利用者を特定する。
【００４７】
＜使用予定モニタ特定手段＞
使用予定モニタ特定手段５１は、特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを特定するためのプログラムからなる。すなわち、顔画像比較特定手段５０の機能により特定された利用者は、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのいずれかの前面領域に着席等しており、そのデジタルテレビモニタ２４ａ，２４ｂ，２４ｃが、当該利用者が歌唱の際に使用するものとなる。
【００４８】
＜モニタ別ディレイ値管理手段＞
モニタ別ディレイ値管理手段５３は、演奏音発生タイミングに対する、複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃ毎に固有の映像表示タイミングの遅れであるディレイ値を、予めモニタ別ディレイ値管理テーブル４４ｄにて管理するための手段である。すなわち、１台のカラオケ演奏装置１１に対して複数のデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを設置している場合に、すべてのデジタルテレビモニタ２４ａ，２４ｂ，２４ｃが同一の特性を有しているとは限らない。例えば、デジタルテレビモニタ２４ａ，２４ｂ，２４ｃ毎に走査モードが異なっていると、ディレイ値もそれぞれ異なることになる。そこで、モニタ別ディレイ値管理手段５３では、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃにおけるそれぞれのディレイ値を管理して、演奏再生制御手段５６における同期制御処理に利用する。
【００４９】
＜ディレイ値抽出手段＞
ディレイ値抽出手段５４は、モニタ別ディレイ値管理テーブル４４ｄから、特定されたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値を抽出するためのプログラムからなる。ディレイ値抽出手段５４の機能により抽出されたディレイ値は、演奏再生制御手段５６における同期制御処理で使用される。
【００５０】
＜演奏再生制御手段＞
演奏再生制御手段５６は、楽曲ＩＤに基づいて楽曲データベース４４ａから抽出された演奏データをデジタル再生するとともにアナログ変換してミキシングアンプ２６に出力するとともに、次曲の演奏において、抽出されたディレイ値に基づいて、演奏音発生タイミングと映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行うための電子回路及びプログラムからなる。
【００５１】
ミキシングアンプ２６は、マイクロホン２７から入力された歌唱者の歌唱音声信号と、演奏再生制御手段５６から送出される演奏音声信号とをミキシングするとともに、アンプ機能により増幅してスピーカ２５より出力させるための装置である。このように、選曲予約者が使用するデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを特定して、当該デジタルテレビモニタ２４ａ，２４ｂ，２４ｃに特有のディレイ値を用いて、同期制御処理（カラオケ演奏音の再生遅延処理）を行うことにより、少なくとも歌唱者が使用するデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに表示されるカラオケ映像の表示タイミングと、スピーカ２５から発生するカラオケ演奏音の発生タイミングとを同期させることができる。
【００５２】
＜映像再生制御手段＞
映像再生制御手段５５は、カラオケ楽曲の演奏中に、映像データベース４４ｂから抽出した映像データ及び楽曲データベース４４ａから抽出した楽曲データのうちの歌詞テロップデータ（歌詞文字データ）を、当該カラオケ楽曲の演奏データに同期させてデジタルテレビモニタ２４ａ，２４ｂ，２４ｃに出力するための電子回路である。この際、カラオケ楽曲の演奏進行に従って、歌詞文字が色変わりして表示される。
【００５３】
＜デジタルテレビモニタ＞
デジタルテレビモニタ２４ａ，２４ｂ，２４ｃは、カラオケ演奏時の背景映像、歌詞テロップ等を表示するための装置で、例えば、デジタルデータに基づいて映像再生が行われるＣＲＴディスプレイ、液晶ディスプレイ、プラズマディスプレイ等により構成される。
【００５４】
＜同期制御処理＞
図２〜図７を参照して、本実施形態のデジタルテレビ対応カラオケシステムにおける同期制御処理を説明する。図２は、本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を示すフローチャートである。また、図３は、本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を示す説明図である。また、図４は、利用者顔画像データベースの一例を示す説明図、図５は、モニタ別ディレイ値管理テーブルの一例を示す説明図、図６は、予約待ち行列の一例を示す説明図、図７は、撮影顔画像データの一例を示す説明図である。
【００５５】
なお、本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理を行うために、予め、利用者顔画像登録手段４８の機能により、利用者別の登録顔画像データが利用者顔画像データベース４４ｃに登録されており、さらに、利用者別演奏予約手段４７の機能により、選曲予約されたカラオケ楽曲の楽曲ＩＤに当該選曲予約者の利用者ＩＤが付帯されて、予約待ち行列４３ａにて管理されているものとする。
【００５６】
本発明の実施形態に係るデジタルテレビ対応カラオケシステムにおける同期制御処理では、図２及び図３に示すように、まず、次曲が存在するか否か、すなわち予約待ち行列４３ａに次曲が登録されているか否かを判断する（Ｓ１）。ここで、次曲が存在する場合には、利用者顔画像データベース４４ｃから、次曲の選曲予約者の登録顔画像データを取得する（Ｓ２）。続いて、撮影手段２３ａ，２３ｂ，２３ｃの機能により、各デジタルテレビモニタ２４ａ，２４ｂ，２４ｃの前面領域にいる利用者の顔画像を撮影するとともに、人面識別手段４９の機能により識別し、撮影顔画像データ４３ｂとしてＲＡＭ４３に記憶する（Ｓ３）。続いて、顔画像比較特定手段５０の機能により、次曲の選曲予約者の登録顔画像データと、撮影顔画像データ４３ｂとを比較する（Ｓ４）。
【００５７】
例えば、図６に示す予約待ち行列４３ａによれば、次曲の選曲予約者は利用者Ｃであるため、図４に示す利用者顔画像データベース４４ｃから、利用者Ｃの顔画像データ（＊＊＊＊Ｃ．ｊｐｇ）を取得し、図７に示す複数の撮影顔画像データ４３ｂとそれぞれ比較する。
【００５８】
そして、選曲予約者の登録顔画像データに一致する撮影顔画像データ４３ｂが存在するか否かを判断し（Ｓ５）、選曲予約者の登録顔画像データに一致する撮影顔画像データ４３ｂが存在した場合には、登録顔画像データに一致する利用者が存在する撮影領域を特定する（Ｓ６）。図３に示す例では、次曲の選曲予約者である利用者Ｃが存在する撮影領域（デジタルテレビモニタ２４ａの撮影領域）が特定される。
【００５９】
続いて、使用予定モニタ特定手段５１の機能により、特定した撮影領域に対応付けられたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃを特定し（Ｓ７）、ディレイ値抽出手段５４の機能により、特定されたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値を抽出する（Ｓ８）。図３に示す例では、利用者（選曲予約者）が使用予定であるデジタルテレビモニタ２４ａ（モニタａ）が特定され、モニタ別ディレイ値管理テーブル４４ｄからモニタａのディレイ値を抽出する。
【００６０】
具体的には、利用者Ｃの顔画像データ（＊＊＊＊Ｃ．ｊｐｇ）と、複数の撮影顔画像データ４３ｂにおいて、モニタａに紐付けされた３番目の利用者の顔画像データ（ｐｈａ０３．ｊｐｇ）とが一致したとする。この場合には、撮影顔画像データ（ｐｈａ０３．ｊｐｇ）に紐付けられたモニタは、デジタルテレビモニタ２４ａ（モニタａ）であるため、図５に示すモニタ別ディレイ値管理テーブル４４ｄから、モニタａのディレイ値（５００ｍｓｅｃ）を抽出する。
【００６１】
続いて、次曲のカラオケ楽曲の演奏が開始されるのを待ち（Ｓ９）、演奏再生制御手段５６の機能により、次曲のカラオケ楽曲の再生において、当該カラオケ楽曲の選曲予約者が使用するとして特定されたデジタルテレビモニタ２４ａ，２４ｂ，２４ｃのディレイ値に基づいて、カラオケ演奏の遅延制御を行い、映像と演奏音とを同期させる（Ｓ１０）。図３に示す例では、演奏再生制御手段５６がデジタルテレビモニタ２４ａ（モニタａ）のディレイ値（５００ｍｓｅｃ）に基づいて演奏再生制御を行うことにより、当該カラオケ楽曲の再生において、演奏音発生タイミングと選曲予約者が使用するデジタルテレビモニタ２４ａ（モニタａ）の映像表示タイミングとを同期させる。
【００６２】
＜他の実施形態＞
本発明のデジタルテレビ対応カラオケシステム及びその周辺装置を構成する機器や手段は上述したものに限定されず、その利用目的に応じて、必要な機器や手段のみの構成としたり、適宜他の機器や手段を付加したりすることができる。また、各手段をそれぞれ別個のものとして構成するのではなく、複数の機能を統合した手段として構成してもよい。
【００６３】
＜ネットワークカラオケシステム＞
また、上述した実施形態は、カラオケ演奏装置１１をスタンドアロンで使用した例を示しているが、各カラオケ店舗等に設置されたカラオケ演奏装置１１を端末装置とし、インターネット回線等を用いて、端末装置とホスト装置とをネットワーク接続した構成とすることもできる。この場合には、ホスト装置において、利用者ＩＤや、これに紐付けされた利用者の顔画像データ等を集中管理することにより、ネットワーク接続された各カラオケ演奏装置１１において同様のサービスを提供することができる。
【符号の説明】
【００６４】
１１ カラオケ演奏装置
２１ カラオケ本体
２２ カラオケリモコン装置
２２ａ 楽曲検索手段
２２ｂ 楽曲索引データベース
２２ｃ 利用者ＩＤ取得手段
２３ａ，２３ｂ，２３ｃ 撮影手段
２４ａ，２４ｂ，２４ｃ デジタルテレビモニタ
２５ スピーカ
２６ ミキシングアンプ
２７ マイクロホン
３１ ＩＤ媒体
４１ 中央制御手段
４２ ＲＯＭ
４３ ＲＡＭ
４３ａ 予約待ち行列
４３ｂ 撮影顔画像データ
４４ ＨＤＤ
４４ａ 楽曲データベース
４４ｂ 映像データベース
４４ｃ 利用者顔画像データベース
４４ｄ モニタ別ディレイ値管理テーブル
４５ 送受信手段
４６ ログイン利用者管理手段
４７ 利用者別演奏予約手段
４８ 利用者顔画像登録手段
４９ 人面識別手段
５０ 顔画像比較特定手段
５１ 使用予定モニタ特定手段
５２ 撮像データ受信手段
５３ モニタ別ディレイ値管理手段
５４ ディレイ値抽出手段
５５ 映像再生制御手段
５６ 演奏再生制御手段
【特許請求の範囲】
【請求項１】
複数のデジタルビデオモニタを有し、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムであって、利用者顔画像登録手段と、ログイン利用者管理手段と、利用者別演奏予約手段と、モニタ別ディレイ値管理手段と、撮影手段と、人面識別手段と、顔画像比較特定手段と、使用予定モニタ特定手段と、ディレイ値抽出手段と、演奏再生制御手段と、を備え、
前記利用者顔画像登録手段は、予め、利用者毎の顔画像データに利用者ＩＤを付帯して、利用者別の登録顔画像データとして利用者顔画像データベースに登録し、
前記ログイン利用者管理手段は、現に当該カラオケシステムにログインしている利用者を、利用者ＩＤに基づき特定して管理し、
前記利用者別演奏予約手段は、任意の利用者により選曲された楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、予約待ち行列にて管理し、
前記モニタ別ディレイ値管理手段は、前記演奏音発生タイミングに対する、前記複数のデジタルテレビモニタ毎に固有の前記映像表示タイミングの遅れであるディレイ値を、予めモニタ別ディレイ値管理テーブルにて管理し、
前記撮影手段は、前記複数のデジタルテレビモニタの各前面領域を撮影範囲として、各撮影範囲にそれぞれ対応付けられ、当該撮影範囲内にいる利用者の顔画像を撮影し、
前記人面識別手段は、次曲の演奏開始前に、前記撮影手段により撮影された利用者の顔画像を識別するとともに、当該識別された顔画像に、前記撮影領域にそれぞれ対応付けられた各デジタルテレビモニタの識別データを付帯して、撮影顔画像データとして所定の記憶部に記憶し、
前記顔画像比較特定手段は、前記次曲を予約した利用者の前記登録顔画像データと、前記撮影顔画像データとを比較することにより、両顔画像データが一致する利用者を特定し、
前記使用予定モニタ特定手段は、前記特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタを特定し、
前記ディレイ値抽出手段は、前記モニタ別ディレイ値管理テーブルから、前記特定されたデジタルテレビモニタのディレイ値を抽出し、
前記演奏再生制御手段は、前記次曲の演奏において、前記抽出されたディレイ値に基づいて、前記演奏音発生タイミングと前記映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行う、
ことを特徴とするデジタルテレビ対応カラオケシステム。
【請求項２】
前記次曲の演奏開始前とは、当該次曲の演奏前の無演奏期間であることを特徴とする請求項１に記載のデジタルテレビ対応カラオケシステム。
【請求項１】
複数のデジタルビデオモニタを有し、少なくとも歌唱者が使用するデジタルテレビモニタにおけるカラオケ映像表示タイミングと、スピーカシステムにおけるカラオケ演奏音発生タイミングとを同期させるためのカラオケシステムであって、利用者顔画像登録手段と、ログイン利用者管理手段と、利用者別演奏予約手段と、モニタ別ディレイ値管理手段と、撮影手段と、人面識別手段と、顔画像比較特定手段と、使用予定モニタ特定手段と、ディレイ値抽出手段と、演奏再生制御手段と、を備え、
前記利用者顔画像登録手段は、予め、利用者毎の顔画像データに利用者ＩＤを付帯して、利用者別の登録顔画像データとして利用者顔画像データベースに登録し、
前記ログイン利用者管理手段は、現に当該カラオケシステムにログインしている利用者を、利用者ＩＤに基づき特定して管理し、
前記利用者別演奏予約手段は、任意の利用者により選曲された楽曲の楽曲ＩＤに当該利用者の利用者ＩＤを付帯して、予約待ち行列にて管理し、
前記モニタ別ディレイ値管理手段は、前記演奏音発生タイミングに対する、前記複数のデジタルテレビモニタ毎に固有の前記映像表示タイミングの遅れであるディレイ値を、予めモニタ別ディレイ値管理テーブルにて管理し、
前記撮影手段は、前記複数のデジタルテレビモニタの各前面領域を撮影範囲として、各撮影範囲にそれぞれ対応付けられ、当該撮影範囲内にいる利用者の顔画像を撮影し、
前記人面識別手段は、次曲の演奏開始前に、前記撮影手段により撮影された利用者の顔画像を識別するとともに、当該識別された顔画像に、前記撮影領域にそれぞれ対応付けられた各デジタルテレビモニタの識別データを付帯して、撮影顔画像データとして所定の記憶部に記憶し、
前記顔画像比較特定手段は、前記次曲を予約した利用者の前記登録顔画像データと、前記撮影顔画像データとを比較することにより、両顔画像データが一致する利用者を特定し、
前記使用予定モニタ特定手段は、前記特定された利用者が撮影された撮影領域に対応付けられたデジタルテレビモニタを特定し、
前記ディレイ値抽出手段は、前記モニタ別ディレイ値管理テーブルから、前記特定されたデジタルテレビモニタのディレイ値を抽出し、
前記演奏再生制御手段は、前記次曲の演奏において、前記抽出されたディレイ値に基づいて、前記演奏音発生タイミングと前記映像表示タイミングとが同期するように、カラオケ演奏の再生を遅延させる制御を行う、
ことを特徴とするデジタルテレビ対応カラオケシステム。
【請求項２】
前記次曲の演奏開始前とは、当該次曲の演奏前の無演奏期間であることを特徴とする請求項１に記載のデジタルテレビ対応カラオケシステム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２０１０−２６２０７２（Ｐ２０１０−２６２０７２Ａ）
【公開日】平成２２年１１月１８日（２０１０．１１．１８）
【国際特許分類】
【出願番号】特願２００９−１１１４０３（Ｐ２００９−１１１４０３）
【出願日】平成２１年４月３０日（２００９．４．３０）
【出願人】（３９０００４７１０）株式会社第一興商 (537)
【Ｆターム（参考）】
【公開日】平成２２年１１月１８日（２０１０．１１．１８）
【国際特許分類】
【出願日】平成２１年４月３０日（２００９．４．３０）
【出願人】（３９０００４７１０）株式会社第一興商 (537)
【Ｆターム（参考）】
[ Back to top ]