カラオケ歌唱者映像及び歌唱音声記録システム
【課題】 撮影カメラの位置を視聴者の位置と仮定し、視聴者が自然環境にいる場合と同様に歌唱音声が聞こえるようにして、臨場感を高める。
【解決手段】 歌唱者の歌唱姿態を撮影する撮影カメラ５６と、撮影カメラ５６から歌唱者までの距離を測定する歌唱者距離計測手段５７と、撮影カメラ５６から歌唱者までの距離と録音音量とを対応付けた相関テーブル３４ｃ又は相関関数に基づき、歌唱者位置に対応した録音音量となるように歌唱音声の増幅率を制御する録音音量制御手段４０と、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて録音録画記録部（ＨＤＤ３４）に書き込む録音録画データ書込手段４４と、を備える。
【解決手段】 歌唱者の歌唱姿態を撮影する撮影カメラ５６と、撮影カメラ５６から歌唱者までの距離を測定する歌唱者距離計測手段５７と、撮影カメラ５６から歌唱者までの距離と録音音量とを対応付けた相関テーブル３４ｃ又は相関関数に基づき、歌唱者位置に対応した録音音量となるように歌唱音声の増幅率を制御する録音音量制御手段４０と、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて録音録画記録部（ＨＤＤ３４）に書き込む録音録画データ書込手段４４と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カラオケ歌唱者の映像と共に、歌唱音声及びカラオケ演奏音を記録するためのカラオケ歌唱者映像及び歌唱音声記録システムに関するものである。
【背景技術】
【０００２】
近年、カラオケ演奏中の歌唱者の映像と歌唱音声とを歌唱映像として録画・録音し、ネットワークＰＣや携帯電話で歌唱映像を視聴できるようにするといった、カラオケ利用者を楽しませるサービスが実施されるようになった。このようなカラオケ歌唱者の姿態を撮影するための撮影カメラでは、被撮影者の顔を認識して被撮影者の位置を検出し、撮影方向やピント（焦点距離）を合わせる等の技術が開発されている。
【０００３】
ところで、カラオケ歌唱者を撮影する際に、歌唱者は振り付けや自らのパフォーマンスによって前後・左右に動き回ることがある。ここで、撮影カメラの位置を視聴者の位置と仮定した場合、歌唱者がカメラに近づいたり、カメラから遠ざかったりすると、視聴者にとっては、歌唱者が近づいたり、遠ざかったりするように見える。自然環境の中では、近づいてくる人物の声は徐々に大きく聞こえ、反対に遠ざかってゆく人物の声は徐々に小さく聞こえるものである。
【０００４】
従来、電子会議システムにおいて、相手の顔が表示されるウィンドウの大きさに応じて音量を変化させることにより、電子会議に臨場感を持たせる技術が開示されている（特許文献１参照）。この特許文献１に記載された技術は、相手の電子会議端末装置から送信された、ウィンドウに表示するための動画像データを、マウスから入力された当該ウィンドウの拡大指示の比率に応じて、拡大する旨をディスプレイドライバに対して指示し、さらに相手の電子会議端末装置から送信されたスピーカに出力するための音声データの音量を、当該拡大比率に応じて大きくする旨をサウンドデバイスドライバに対して指示するようにしたものである。
【０００５】
また、映像中の話者の位置に応じた位置から音声が聞こえるようにして、臨場感を持たせるようにした技術が開示されている（特許文献２参照）。この特許文献２に記載された技術は、映像データから画面内の話者の位置を検出し、検出された位置に基づいてボリューム制御部を制御し、音量の制御された音声を複数のスピーカへ出力することで、音声の定位を移動するようにしたものである。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平８−１６３５２７号公報
【特許文献２】特開平１１−３１３２７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、カラオケ演奏装置において歌唱を行う際には、歌唱者がカラオケマイクを持って歌唱するのが一般的であり、この場合には、歌唱者が移動しても、歌唱者の位置とカラオケマイクの位置との関係は常に同じである。したがって、歌唱者が声の大きさを自ら調整した場合は別として、歌唱者がカメラに近づいたり、カメラから遠ざかったりしても、歌唱音声の音量は変化しないため、視聴者にとっては、歌唱音声の聞こえ方が自然環境とは異なることになり、不自然さを感じる場合がある。このような場合に、従来のカラオケ歌唱者の映像及び歌唱音声を録画・録音するためのシステムでは、歌唱者の接近あるいは離隔に伴って音量を調整するための仕組みはなかった。
【０００８】
また、上述した特許文献１及び特許文献２に記載された技術は、被撮影者の位置に対応させて、音声が聞こえる方向を制御するものであり、被撮影者が撮影カメラに近づいたり、遠ざかったりした場合に対応させて、音量を調整するものではない、
【０００９】
本発明は、上述した事情に鑑み提案されたもので、撮影カメラの位置を視聴者の位置と仮定し、視聴者が自然環境にいる場合と同様に歌唱音声が聞こえるようにして、臨場感を高めることが可能なカラオケ歌唱者映像及び歌唱音声記録システムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明のカラオケ歌唱者映像及び歌唱音声記録システムは、上述した目的を達成するため、以下の特徴点を有している。すなわち、本発明のカラオケ歌唱者映像及び歌唱音声記録システムは、カラオケ歌唱者の歌唱姿態と共に歌唱音声及びカラオケ演奏音を記録するためのカラオケ歌唱者映像及び歌唱音声記録システムであって、撮影カメラと、歌唱者距離計測手段と、録音音量制御手段と、録音録画データ書込手段と、を備えたことを特徴とするものである。
【００１１】
ここで、撮影カメラは、歌唱者の歌唱姿態を撮影するための装置である。歌唱者距離計測手段は、撮影カメラから歌唱者までの距離を測定するための手段である。録音音量制御手段は、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブル又は相関関数に基づき、歌唱者距離計測手段による測定値に対応した録音音量となるように、カラオケマイクから入力される歌唱音声音量の増幅率を制御するための手段である。録音録画データ書込手段は、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラにより撮影した歌唱者映像とを同期させて録音録画記録部に書き込むための手段である。
【００１２】
このような構成からなるカラオケ歌唱者映像及び歌唱音声記録システムでは、撮影カメラにより歌唱者の歌唱姿態を撮影する。そして、録音録画の際、歌唱者距離計測手段の機能により、撮影カメラから歌唱者までの距離を測定する。歌唱者距離計測手段は、例えば、撮影カメラから歌唱者までの距離を実測するレーザ計測器により構成してもよいし、画像解析により、フレーム中に占める顔の大きさやカラオケマイクの風防の大きさ等により撮影カメラから歌唱者までの距離を推定する手段であってもよい。
【００１３】
本発明では、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブルや相関関数を有している。ここで、録音音量制御手段の機能により、相関テーブル又は相関関数に基づき、測定された距離に対応した録音音量となるように、マイク用プリアンプ等における音声信号の増幅率を制御して、カラオケマイクから入力される歌唱音声を増幅する。
【００１４】
そして、録音録画データ書込手段の機能により、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラにより撮影した歌唱者映像とを同期させてＨＤＤやバッファメモリ等からなる録音録画記録部に書き込む。
【００１５】
また、上述した構成に加えて、録音音量制御手段は、歌唱者距離計測手段による測定値に対応した録音音量となるように、歌唱音声音量に加えてカラオケ演奏音量の増幅率を制御する構成としてもよい。
【００１６】
このような構成からなるカラオケ歌唱者映像及び歌唱音声記録システムでは、録音音量制御手段の機能により、歌唱音声音量だけではなくカラオケ演奏音量の増幅も、歌唱者距離計測手段による測定値に対応した録音音量となるように制御される。
【発明の効果】
【００１７】
本発明のカラオケ歌唱者映像及び歌唱音声記録システムでは、カラオケ歌唱者の映像と共に、歌唱音声及びカラオケ演奏音を記録する際に、撮影カメラから歌唱者までの距離に対応した適切な音量となるように、歌唱音声音量の増幅率が制御される。したがって、歌唱者がカメラに近づいた場合には、歌唱音声の音量が大きくなり、歌唱者がカメラから遠ざかった場合には、歌唱音声の音量が小さくなる。このため、視聴者にとっては、歌唱音声の聞こえ方が自然環境と同様となり、違和感なく自然な臨場感ある歌唱者映像を視聴することが可能となる。
【００１８】
また、歌唱音声だけではなく、カラオケ演奏音量の増幅率も、撮影カメラから歌唱者までの距離に対応した適切な音量となるように制御した場合には、さらに一層、違和感なく自然な臨場感ある歌唱者映像を視聴することが可能となる。
【図面の簡単な説明】
【００１９】
【図１】本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムを適用したカラオケシステムの構成を示すブロック図。
【図２】本発明の第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図。
【図３】本発明の第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図。
【図４】撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブルの説明図。
【図５】撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関関数の説明図。
【発明を実施するための形態】
【００２０】
＜カラオケ歌唱者映像及び歌唱音声記録システム＞
以下、図面を参照して、本発明のカラオケ歌唱者映像及び歌唱音声記録システムの実施形態について説明する。図１〜図３は、本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムを示すもので、図１は、本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムを適用したカラオケシステムの構成を示すブロック図、図２は、第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図、図３は、第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図である。また、図４は、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブルの説明図、図５は、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関関数の説明図である。
【００２１】
本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、カラオケ歌唱者の歌唱映像と共に歌唱音声及びカラオケ演奏音を記録するためのシステムであり、図１に示すように、カラオケシステム１０に組み込まれている。すなわち、撮影カメラ５６により歌唱者の歌唱姿態を撮影すると共に、カラオケマイク５３により歌唱音声を取得し、さらに、歌唱者距離計測手段５７により撮影カメラ５６と歌唱者との距離を計測する。そして、録音録画データ書込手段４４の機能により、撮影カメラ５６と歌唱者との距離に対応した録音音量となるように増幅された歌唱音声と、カラオケ演奏音と、歌唱者映像とを同期させて録音録画データ３４ｄを作成するようになっている。
【００２２】
＜第１の実施形態＞
本発明の第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、カラオケマイク５３から入力される歌唱音声を録音する際に、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように増幅率を制御するようになっている。
【００２３】
第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、図２に示すように、主要な構成要素として、撮影カメラ５６（例えば、ビデオカメラ）、歌唱者距離計測手段５７、録音音量制御手段４０、録音録画データ書込手段４４を備えている。また、これらの主要な構成要素と共に動作する手段及び装置として、映像データ取得手段３８、距離データ取得手段３９、音声データ取得手段４１、歌唱音声用ゲイン調整器５８、マイク用プリアンプ５９、音楽再生制御手段４２、演奏音用プリアンプ６２、ミキシングアンプ６１、カラオケマイク５３、スピーカ５４、録音録画記録部として機能するＨＤＤ３４、録音音量制御手段４０が参照する相関テーブル３４ｃ（又は相関関数）を備えている。なお、上述した各手段及び機器は、録音録画を行わない場合にも、カラオケシステム１０の構成要素として機能するものがある。
【００２４】
＜撮影カメラ＞
撮影カメラ５６は、歌唱者の歌唱姿態を撮影するための装置で、ビデオカメラ等を使用することができる。この撮影カメラ５６は、例えば、ステージ上に立つ歌唱者に向けられており、歌唱者の動きに追従して焦点合わせを行うオートフォーカス機能や、パン・チルト機構を有していてもよい。
【００２５】
オートフォーカス機構としては、例えば、適宜な間隔を隔てて設置した２つのセパレートレンズを用いて被写体を撮影し、被写体像を撮像素子上に結像させ、両画像の位相差に基づいて物体距離を検知する方式や、被写体上に赤外光を照射して、被写体からの拡散反射光をレンズで集光し、その結像位置に基づいて物体距離を検知する方式や、撮像素子から被写体のコントラスト情報を抽出し、結像状態を直接判定する方式等が知られている。なお、被写界深度の深いレンズからなる固定焦点の撮像レンズを用いることによりフォーカシング機構を省略してもよい。
【００２６】
パン・チルト機構は、撮影カメラをパン及びチルトさせるための機構であり、互いに直交する２軸方向にそれぞれ回転するパンテーブル及びチルトテーブルと、このパンテーブル及びチルトテーブルを互いに直交する２軸方向にそれぞれ回転駆動するステッピングモータと、ステッピングモータの駆動制御装置とを備えて構成される。
【００２７】
＜歌唱者距離計測手段＞
歌唱者距離計測手段５７は、撮影カメラ５６から歌唱者までの距離を測定するための装置であり、レーザ計測器等を使用することができる。レーザ計測器は、レーザ光を歌唱者に照射し、歌唱者によりレーザ光を反射させて、歌唱者までの距離を時間や周波数、位相などのデータに基づいて求める装置である。レーザ光を用いて距離を計測する方式として、時間領域方式、周波数領域方式、位相領域方式がある。時間領域方式は、レーザ光が目標物までの間を往復した反射光の遅延時間に基づいて距離を求める方式である。周波数領域方式は、光の周波数を三角波状や鋸波状に変化させ、反射光と参照光を干渉させて生じたビート信号の周波数に基づいて距離を求める方式である。位相領域方式は、反射光の強度信号と参照信号との位相差に基づいて距離を求める方式である。
【００２８】
＜録音音量制御手段＞
録音音量制御手段４０は、撮影カメラ５６から歌唱者までの距離と録音音量とを対応付けた相関テーブル３４ｃ又は相関関数に基づき、歌唱者距離計測手段５７による測定値に対応した録音音量となるように、カラオケマイク５３から入力される歌唱音声音量の増幅率を制御するためのプログラムからなる。この録音音量制御手段４０により、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように、歌唱音声用ゲイン調整器５８を構成する録音用歌唱音声増幅率設定部５８ａにおける増幅率を設定する。そして、マイク用プリアンプ５９を構成する録音用歌唱音声の増幅器５９ａにおいて、録音用歌唱音声増幅率設定部５８ａで設定された増幅率により録音用歌唱音声を増幅する。
【００２９】
なお、本実施形態におけるプログラムとは、ＲＯＭ３２等に記憶されており、ＣＰＵにおいて実行されることにより、その機能を発揮するソフトウエア資源のことを言い、プログラムと同等の機能を発揮することが可能な論理回路を含む概念である（他の手段においても同様）。
【００３０】
＜相関テーブル／相関関数＞
録音音量制御手段４０が参照する相関テーブル３４ｃは、ＨＤＤ３４に格納されており（図１参照）、図４に示すように、撮影カメラ５６から歌唱者までの距離と録音音量レベルとを紐付けて構成されている。また、録音音量制御手段４０が相関関数を参照して録音音量を制御する構成とすることもできる。この相関関数は、撮影カメラ５６から歌唱者までの距離と録音音量とを規定した関数であり、相関関係は図５に示すようになっている。この相関関数は、相関テーブル３４ｃと同様に、ＨＤＤ３４に格納しておけばよい。
【００３１】
＜音声データ取得手段／映像データ取得手段＞
音声データ取得手段４１は、カラオケマイク５３から入力され、マイク用プリアンプ５９の増幅器５９ａにより増幅された歌唱音声信号を受信して、録音録画データ書込手段４４へ出力するためのプログラム及び信号送受信のためのインターフェースからなる。映像データ取得手段３８は、撮影カメラ５６により撮影した歌唱者映像信号を受信して録音録画データ書込手段４４へ出力するためのプログラム及び信号送受信のためのインターフェースからなる。
【００３２】
＜距離データ取得手段＞
距離データ取得手段３９は、歌唱者距離計測手段５７により計測した距離データを取得するためのプログラム及び信号送受信のためのインターフェースからなる。すなわち、歌唱者距離計測手段５７では計測した距離データをカラオケシステム１０へ送信するが、この際、距離データ取得手段３９により距離データの受信が行われる。
【００３３】
＜歌唱音声用ゲイン調整器＞
歌唱音声用ゲイン調整器５８は、マイク用プリアンプ５９における歌唱音声のゲインを調整するための機器であり、録音用歌唱音声増幅率設定部５８ａと、再生用歌唱音声増幅率設定部５８ｂとを備えている。録音用歌唱音声増幅率設定部５８ａは、録音音量制御手段４０の制御により動作し、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように、録音用歌唱音声信号の増幅率を設定する。再生用歌唱音声増幅率設定部５８ｂは、予め定めたデフォルト値、あるいは店員、サービスマン、利用者等がボリュームを操作することにより設定される設定値となるように、再生用歌唱音声信号の増幅率を設定する。
【００３４】
＜マイク用プリアンプ＞
マイク用プリアンプ５９は、カラオケマイク５３から入力される歌唱音声入力信号を、所定の音域毎に出力バランスを調整したり、ボリュームを調整したりするための機器であり、録音用歌唱音声の増幅器５９ａと、再生用歌唱音声の増幅器５９ｂとを備えている。録音用歌唱音声の増幅器５９ａは、録音用歌唱音声増幅率設定部５８ａで設定された増幅率により録音用歌唱音声信号を増幅して、増幅後の録音用歌唱音声信号を音声データ取得手段４１に出力する。再生用歌唱音声の増幅器５９ｂは、再生用歌唱音声増幅率設定部５８ｂで設定された増幅率により再生用歌唱音声信号を増幅して、増幅後の再生用歌唱音声信号をミキシングアンプ６１に出力する。
【００３５】
＜録音録画データ書込手段＞
録音録画データ書込手段４４は、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて、録音録画記録部として機能するＨＤＤ３４に書き込むためのプログラムからなる。すなわち、録音録画データ書込手段４４の機能により録音録画データ３４ｄが生成される。この録音録画データ３４ｄは、ＤＶＤ等の記録メディアに記録することにより利用者に配布することができ、また、インターネット等の通信回線を介してストリーミング配信することができる。
【００３６】
＜音楽再生制御手段＞
音楽再生制御手段４２は、楽曲ＩＤに基づいて楽曲データベース３４ａから抽出された演奏データをデジタル再生すると共にアナログ変換して演奏音用プリアンプ６２へ出力するための電子回路である。なお、後に詳述するが、楽曲データベース３４ａは、ＨＤＤ３４に格納されている。
【００３７】
＜演奏音用プリアンプ＞
演奏音用プリアンプ６２は、音楽再生制御手段４２からの演奏音信号を、所定の音域毎に出力バランスを調整したり、ボリュームを調整したりするための機器であり、調整後の演奏音信号をミキシングアンプ６１及び音声データ取得手段４１へ出力する。
【００３８】
＜ミキシングアンプ＞
ミキシングアンプ６１は、カラオケマイク５３から入力され、再生用歌唱音声の増幅器５９ｂで増幅された再生用歌唱音声信号と、音楽再生制御手段４２から送出され、演奏音用プリアンプ６２で調整された演奏音声信号とをミキシングすると共に、アンプ機能により増幅してスピーカ５４より出力させるための装置である。
【００３９】
＜ＨＤＤ＞
ＨＤＤ３４は、大容量記憶装置として機能する装置であり、本実施形態では録音録画部としても機能する。さらに、ＨＤＤ３４には、楽曲データベース３４ａ、映像データベース３４ｂ、相関テーブル３４ｃ、録音録画データ３４ｄが格納されている。楽曲データベース３４ａは、演奏データ（ＭＩＤＩ（登録商標）データ）及び歌詞描出データが同期されて構成される楽曲データについて、楽曲ＩＤと対応付けてそれぞれ構成したデータベースである。演奏データは各楽曲の演奏データをデジタル化したものであり、歌詞描出データは演奏に同期した歌詞文字の表示タイミングデータ及び色変わりデータを含んでいる。映像データベース３４ｂは、演奏されるカラオケ楽曲に対応した背景映像を、当該カラオケ楽曲の楽曲ＩＤに対応させた映像ファイルとして所定数格納したデータベースである。
【００４０】
録音録画データ３４ｄは、上述したように、カラオケマイク５３から入力され、録音用歌唱音声の増幅器５９ａで増幅された録音用歌唱音声信号、及び音楽再生制御手段４２から送出され、演奏音用プリアンプ６２で調整された演奏音声信号とからなる音声データと、撮影カメラ５６から入力される映像データとを同期させたデータであり、利用者を特定するために利用者ＩＤが付帯されている。
【００４１】
なお、本実施形態では、ＨＤＤ３４が録音録画部として機能し、ＨＤＤ３４に録音録画データ３４ｄが記録されるが、バッファメモリを録音録画部として機能させることにより、録音録画データ３４ｄのストリーミング配信に対応することができる。
【００４２】
＜第２の実施形態＞
本発明の第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、第１の実施形態の構成に加えて、音楽再生制御手段４２から入力される演奏音を録音する際に、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように増幅率を制御するようになっている。以下、第１の実施形態と異なる構成要素についてのみ説明し、第１の実施形態と同様の構成要素については同一の符号を付して説明を省略する。
【００４３】
本発明の第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、図３に示すように、第１の実施形態の構成に加えて演奏音用ゲイン調整器６３を備えており、さらに演奏音用プリアンプ６２は、録音用演奏音の増幅器６２ａと、再生用演奏音の増幅器６２ｂとを備えている。
【００４４】
＜演奏音用ゲイン調整器＞
演奏音用ゲイン調整器６３は、演奏音用プリアンプ６２における演奏音のゲインを調整するための機器であり、録音用演奏音増幅率設定部６３ａと、再生用演奏音増幅率設定部６３ｂとを備えている。録音用演奏音増幅率設定部６３ａは、録音音量制御手段４０の制御により動作し、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように、再生用演奏音信号の増幅率を設定する。再生用演奏音増幅率設定部６３ｂは、予め定めたデフォルト値、あるいは店員、サービスマン、利用者等がボリュームを操作することにより設定される設定値となるように、再生用演奏音信号の増幅率を設定する。
【００４５】
＜演奏音用プリアンプ＞
演奏音用プリアンプ６２は、上述したように、録音用演奏音の増幅器６２ａと、再生用演奏音の増幅器６２ｂとを備えている。録音用演奏音の増幅器６２ａは、録音用演奏音増幅率設定部６３ａで設定された増幅率により録音用演奏音声信号を増幅して、増幅後の録音用演奏音を音声データ取得手段４１に出力する。再生用演奏音の増幅器６２ｂは、再生用演奏音増幅率設定部６３ｂで設定された増幅率により再生用演奏音信号を増幅して、増幅後の再生用演奏音をミキシングアンプ６１に出力する。
【００４６】
＜カラオケシステム＞
本発明のカラオケ歌唱者映像及び歌唱音声記録システムを利用するカラオケシステム１０は、図１に示すように、カラオケ本体５１、カラオケリモコン装置５２、カラオケマイク５３、スピーカ５４、表示装置５５、撮影カメラ５６、歌唱者距離計測手段５７、歌唱音声用ゲイン調整器５８、マイク用プリアンプ５９、Ａ／Ｄコンバータ６０、ミキシングアンプ６１、演奏音用プリアンプ６２を備えており、さらに、演奏音用ゲイン調整器６３を備えることが可能である。以下、カラオケ歌唱者映像及び歌唱音声記録システムの構成要素として説明しなかった装置及び手段についてのみ説明を行う。
【００４７】
＜カラオケリモコン装置＞
カラオケリモコン装置５２は、ユーザインタフェース機能を備えており、カラオケ本体５１の送受信手段３５に対して有線方式又は無線方式によりデータの送受信を行うようになっている。このカラオケリモコン装置５２は、楽曲検索手段５２ａとして機能するプログラム、楽曲索引データベース５２ｂ、カードリーダ５２ｃ、データの送受信を行うための電子回路及びプログラム、フラッシュメモリ等からなる記憶手段（図示せず）を備えている。このカラオケリモコン装置５２に付帯するスイッチ類や、入出力表示部（図示せず）に表示される各種のアイコン等を操作することにより、選曲操作等が行われる。
【００４８】
＜楽曲検索手段／楽曲索引データベース＞
楽曲検索手段５２ａは、利用者の指示に基づき、楽曲索引データベース５２ｂを参照して楽曲を検索するためのプログラムからなる。楽曲索引データベース５２ｂは、カラオケシステム１０で演奏に供されるカラオケ楽曲についての属性情報を記述したデータベースであり、例えば、楽曲番号・曲名・歌手名・歌い出し部分の歌詞・流行時期・音楽ジャンル区分・デュエット曲か否かなど、種々の属性情報がこれに含まれている。
【００４９】
＜カードリーダ＞
カードリーダ５２ｃは、任意の利用者がカラオケシステム１０を利用する際に、当該利用者の利用者ＩＤを取得するための装置であり、本実施形態では、利用者がカラオケシステム１０を利用する際に、利用者が所持するＩＤ媒体６４から利用者ＩＤを読み取るようになっている。カードリーダ５２ｃで読み取った利用者ＩＤは、カラオケ本体５１のＲＡＭ３３において利用者管理テーブル３３ｂとして記憶され、利用者管理手段３６で管理される。ＩＤ媒体６４は、例えば非接触型の、ＩＤカード、携帯電話、携帯情報端末等からなり、利用者ＩＤを記憶して、カードリーダ５２ｃとの間でデータの送受信を行うことができるようになっている。
【００５０】
＜カラオケ本体＞
カラオケ本体５１は、中央制御手段３１、ＲＯＭ３２、ＲＡＭ３３、ＨＤＤ３４、送受信手段３５、利用者管理手段３６、予約管理手段３７、映像データ取得手段３８、距離データ取得手段３９、録音音量制御手段４０、音声データ取得手段４１、音楽再生制御手段４２、映像再生制御手段４３、録音録画データ書込手段４４を備えている。
【００５１】
＜中央制御手段＞
中央制御手段３１は、カラオケ本体５１を総合的に制御するための手段であり、例えばＣＰＵ及びその周辺機器により構成されており、ＣＰＵ等がＲＯＭ３２等に記憶されたプログラムに従って動作することにより、制御機能を発揮することができるようになっている。
【００５２】
＜ＲＯＭ／ＲＡＭ＞
ＲＯＭ３２は、カラオケ本体５１を構成する各機器を制御するためのプログラムデータや数値データを記憶するための機器で、例えば半導体メモリ等で構成される。また、ＲＡＭ３３は、プログラムや各種データを一時的に記憶する一時記憶領域として機能するもので、例えば半導体メモリ等で構成される。なお、物理的な半導体メモリによりＲＡＭ３３を構成するのではなく、ハードディスク記憶装置等を用いて仮想的なＲＡＭ３３を構成してもよい。本実施形態では、ＲＡＭ３３に、予約待ち行列３３ａ及び利用者管理テーブル３３ｂが記憶されるようになっている。
【００５３】
＜送受信手段＞
送受信手段３５は、カラオケ本体５１とカラオケリモコン装置５２との間で、データの送受信を行うための電子回路及びプログラムからなる。本実施形態では、赤外線通信により、カラオケ本体５１とカラオケリモコン装置５２との間でデータの送受信が行われる。
【００５４】
＜予約管理手段＞
予約管理手段３７は、利用者により楽曲検索手段５２ａの機能を用いて選曲され、送受信手段３５を介して受信した楽曲ＩＤを、選曲順に演奏予約待ち行列３３ａとしてＲＡＭ３３に格納し、管理するためのプログラムからなる。
【００５５】
＜利用者管理手段＞
利用者管理手段３６は、取得された利用者ＩＤに基づき利用者を特定して管理するためのプログラムからなる。すなわち、利用者管理手段３６では、カードリーダ５２ｃがＩＤ媒体６４から利用者ＩＤを読み取った場合に、この利用者ＩＤに基づいて利用者を特定し、利用者管理テーブル３３ｂにて管理する。取得した利用者ＩＤは、選曲予約や視聴者映像を録音録画する際に利用される。
【００５６】
＜映像再生制御手段＞
映像再生制御手段４３は、カラオケ楽曲の演奏中に、映像データベース３４ｂから抽出した映像データ及び楽曲データベース３４ａから抽出した楽曲データのうちの歌詞テロップデータ（歌詞文字データ）を、当該カラオケ楽曲の演奏データに同期させて表示装置５５に出力するための電子回路である。
【００５７】
＜表示装置＞
表示装置５５は、カラオケ演奏時の映像、歌詞テロップ等を表示するための装置で、例えば、液晶ディスプレイ等により構成される。
【００５８】
＜歌唱者映像の撮影及び歌唱音声の録音＞
本実施形態のカラオケ歌唱者映像及び歌唱音声記録システムでは、撮影カメラ５６により歌唱者の歌唱姿態を撮影する。撮影された歌唱者映像データは、映像データ取得手段３８の機能によりカラオケ本体５１に取り込まれる。また、歌唱者距離計測手段５７の機能により、撮影カメラ５６から歌唱者までの距離を測定する。
【００５９】
そして、録音音量制御手段４０の機能により、相関テーブル３４ｃや相関関数を参照し、測定された距離に対応した録音音量となるように、歌唱音声用ゲイン調整器５８の設定値を制御して、カラオケマイク５３から入力される歌唱音声信号を歌唱音声マイク用プリアンプ５９で増幅する。増幅された録音用の歌唱音声信号は、Ａ／Ｄコンバータ６０を介して、音声データ取得手段４１の機能によりカラオケ本体５１に取り込まれる。
【００６０】
そして、録音録画データ書込手段４４の機能により、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて、録音録画データ３４ｄとしてＨＤＤ３４に記憶する。
【００６１】
また、歌唱者距離計測手段５７による測定値に対応した録音音量となるように演奏音用プリアンプ６２を制御して、カラオケ演奏音量の増幅率を制御する構成とした場合には、録音音量制御手段４０の機能により、相関テーブル３４ｃや相関関数を参照し、測定された距離に対応した録音音量となるように、演奏音用ゲイン調整器６３の設定値を制御して、カラオケ演奏音信号を演奏音用プリアンプ６２で増幅する。そして、録音録画データ書込手段４４の機能により、音量が増幅された歌唱音声と、音量が増幅されたカラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて、録音録画データ３４ｄとしてＨＤＤ３４に記憶する。
【００６２】
＜他の実施形態＞
本発明のカラオケ歌唱者映像及び歌唱音声記録システム及びその周辺装置を構成する機器や手段は上述したものに限定されず、その利用目的に応じて、必要な機器や手段のみの構成としたり、適宜他の機器や手段を付加したりすることができる。また、各手段をそれぞれ別個のものとして構成するのではなく、複数の機能を統合した手段として構成してもよい。
【符号の説明】
【００６３】
１０ カラオケシステム
３１ 中央制御手段
３２ ＲＯＭ
３３ ＲＡＭ
３３ａ 予約待ち行列
３３ｂ 利用者管理テーブル
３４ ＨＤＤ
３４ａ 楽曲データベース
３４ｂ 映像データベース
３４ｃ 相関テーブル
３４ｄ 録音録画データ
３５ 送受信手段
３６ 利用者管理手段
３７ 予約管理手段
３８ 映像データ取得手段
３９ 距離データ取得手段
４０ 録音音量制御手段
４１ 音声データ取得手段
４２ 音楽再生制御手段
４３ 映像再生制御手段
４４ 録音録画データ書込手段
５１ カラオケ本体
５２ カラオケリモコン装置
５２ａ 楽曲検索手段
５２ｂ 楽曲索引データベース
５２ｃ カードリーダ
５３ カラオケマイク
５４ スピーカ
５５ 表示装置
５６ 撮影カメラ
５７ 歌唱者距離計測手段
５８ 歌唱音声用ゲイン調整器
５８ａ 録音用歌唱音声増幅率設定部
５８ｂ 再生用歌唱音声増幅率設定部
５９ マイク用プリアンプ
５９ａ 録音用歌唱音声の増幅器
５９ｂ 再生用歌唱音声の増幅器
６０ Ａ／Ｄコンバータ
６１ ミキシングアンプ
６２ 演奏音用プリアンプ
６２ａ 録音用演奏音の増幅器
６２ｂ 再生用演奏音の増幅器
６３ 演奏音用ゲイン調整器
６３ａ 録音用演奏音増幅率設定部
６３ｂ 再生用演奏音増幅率設定部
６４ ＩＤ媒体
【技術分野】
【０００１】
本発明は、カラオケ歌唱者の映像と共に、歌唱音声及びカラオケ演奏音を記録するためのカラオケ歌唱者映像及び歌唱音声記録システムに関するものである。
【背景技術】
【０００２】
近年、カラオケ演奏中の歌唱者の映像と歌唱音声とを歌唱映像として録画・録音し、ネットワークＰＣや携帯電話で歌唱映像を視聴できるようにするといった、カラオケ利用者を楽しませるサービスが実施されるようになった。このようなカラオケ歌唱者の姿態を撮影するための撮影カメラでは、被撮影者の顔を認識して被撮影者の位置を検出し、撮影方向やピント（焦点距離）を合わせる等の技術が開発されている。
【０００３】
ところで、カラオケ歌唱者を撮影する際に、歌唱者は振り付けや自らのパフォーマンスによって前後・左右に動き回ることがある。ここで、撮影カメラの位置を視聴者の位置と仮定した場合、歌唱者がカメラに近づいたり、カメラから遠ざかったりすると、視聴者にとっては、歌唱者が近づいたり、遠ざかったりするように見える。自然環境の中では、近づいてくる人物の声は徐々に大きく聞こえ、反対に遠ざかってゆく人物の声は徐々に小さく聞こえるものである。
【０００４】
従来、電子会議システムにおいて、相手の顔が表示されるウィンドウの大きさに応じて音量を変化させることにより、電子会議に臨場感を持たせる技術が開示されている（特許文献１参照）。この特許文献１に記載された技術は、相手の電子会議端末装置から送信された、ウィンドウに表示するための動画像データを、マウスから入力された当該ウィンドウの拡大指示の比率に応じて、拡大する旨をディスプレイドライバに対して指示し、さらに相手の電子会議端末装置から送信されたスピーカに出力するための音声データの音量を、当該拡大比率に応じて大きくする旨をサウンドデバイスドライバに対して指示するようにしたものである。
【０００５】
また、映像中の話者の位置に応じた位置から音声が聞こえるようにして、臨場感を持たせるようにした技術が開示されている（特許文献２参照）。この特許文献２に記載された技術は、映像データから画面内の話者の位置を検出し、検出された位置に基づいてボリューム制御部を制御し、音量の制御された音声を複数のスピーカへ出力することで、音声の定位を移動するようにしたものである。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平８−１６３５２７号公報
【特許文献２】特開平１１−３１３２７２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
ところで、カラオケ演奏装置において歌唱を行う際には、歌唱者がカラオケマイクを持って歌唱するのが一般的であり、この場合には、歌唱者が移動しても、歌唱者の位置とカラオケマイクの位置との関係は常に同じである。したがって、歌唱者が声の大きさを自ら調整した場合は別として、歌唱者がカメラに近づいたり、カメラから遠ざかったりしても、歌唱音声の音量は変化しないため、視聴者にとっては、歌唱音声の聞こえ方が自然環境とは異なることになり、不自然さを感じる場合がある。このような場合に、従来のカラオケ歌唱者の映像及び歌唱音声を録画・録音するためのシステムでは、歌唱者の接近あるいは離隔に伴って音量を調整するための仕組みはなかった。
【０００８】
また、上述した特許文献１及び特許文献２に記載された技術は、被撮影者の位置に対応させて、音声が聞こえる方向を制御するものであり、被撮影者が撮影カメラに近づいたり、遠ざかったりした場合に対応させて、音量を調整するものではない、
【０００９】
本発明は、上述した事情に鑑み提案されたもので、撮影カメラの位置を視聴者の位置と仮定し、視聴者が自然環境にいる場合と同様に歌唱音声が聞こえるようにして、臨場感を高めることが可能なカラオケ歌唱者映像及び歌唱音声記録システムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
本発明のカラオケ歌唱者映像及び歌唱音声記録システムは、上述した目的を達成するため、以下の特徴点を有している。すなわち、本発明のカラオケ歌唱者映像及び歌唱音声記録システムは、カラオケ歌唱者の歌唱姿態と共に歌唱音声及びカラオケ演奏音を記録するためのカラオケ歌唱者映像及び歌唱音声記録システムであって、撮影カメラと、歌唱者距離計測手段と、録音音量制御手段と、録音録画データ書込手段と、を備えたことを特徴とするものである。
【００１１】
ここで、撮影カメラは、歌唱者の歌唱姿態を撮影するための装置である。歌唱者距離計測手段は、撮影カメラから歌唱者までの距離を測定するための手段である。録音音量制御手段は、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブル又は相関関数に基づき、歌唱者距離計測手段による測定値に対応した録音音量となるように、カラオケマイクから入力される歌唱音声音量の増幅率を制御するための手段である。録音録画データ書込手段は、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラにより撮影した歌唱者映像とを同期させて録音録画記録部に書き込むための手段である。
【００１２】
このような構成からなるカラオケ歌唱者映像及び歌唱音声記録システムでは、撮影カメラにより歌唱者の歌唱姿態を撮影する。そして、録音録画の際、歌唱者距離計測手段の機能により、撮影カメラから歌唱者までの距離を測定する。歌唱者距離計測手段は、例えば、撮影カメラから歌唱者までの距離を実測するレーザ計測器により構成してもよいし、画像解析により、フレーム中に占める顔の大きさやカラオケマイクの風防の大きさ等により撮影カメラから歌唱者までの距離を推定する手段であってもよい。
【００１３】
本発明では、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブルや相関関数を有している。ここで、録音音量制御手段の機能により、相関テーブル又は相関関数に基づき、測定された距離に対応した録音音量となるように、マイク用プリアンプ等における音声信号の増幅率を制御して、カラオケマイクから入力される歌唱音声を増幅する。
【００１４】
そして、録音録画データ書込手段の機能により、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラにより撮影した歌唱者映像とを同期させてＨＤＤやバッファメモリ等からなる録音録画記録部に書き込む。
【００１５】
また、上述した構成に加えて、録音音量制御手段は、歌唱者距離計測手段による測定値に対応した録音音量となるように、歌唱音声音量に加えてカラオケ演奏音量の増幅率を制御する構成としてもよい。
【００１６】
このような構成からなるカラオケ歌唱者映像及び歌唱音声記録システムでは、録音音量制御手段の機能により、歌唱音声音量だけではなくカラオケ演奏音量の増幅も、歌唱者距離計測手段による測定値に対応した録音音量となるように制御される。
【発明の効果】
【００１７】
本発明のカラオケ歌唱者映像及び歌唱音声記録システムでは、カラオケ歌唱者の映像と共に、歌唱音声及びカラオケ演奏音を記録する際に、撮影カメラから歌唱者までの距離に対応した適切な音量となるように、歌唱音声音量の増幅率が制御される。したがって、歌唱者がカメラに近づいた場合には、歌唱音声の音量が大きくなり、歌唱者がカメラから遠ざかった場合には、歌唱音声の音量が小さくなる。このため、視聴者にとっては、歌唱音声の聞こえ方が自然環境と同様となり、違和感なく自然な臨場感ある歌唱者映像を視聴することが可能となる。
【００１８】
また、歌唱音声だけではなく、カラオケ演奏音量の増幅率も、撮影カメラから歌唱者までの距離に対応した適切な音量となるように制御した場合には、さらに一層、違和感なく自然な臨場感ある歌唱者映像を視聴することが可能となる。
【図面の簡単な説明】
【００１９】
【図１】本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムを適用したカラオケシステムの構成を示すブロック図。
【図２】本発明の第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図。
【図３】本発明の第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図。
【図４】撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブルの説明図。
【図５】撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関関数の説明図。
【発明を実施するための形態】
【００２０】
＜カラオケ歌唱者映像及び歌唱音声記録システム＞
以下、図面を参照して、本発明のカラオケ歌唱者映像及び歌唱音声記録システムの実施形態について説明する。図１〜図３は、本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムを示すもので、図１は、本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムを適用したカラオケシステムの構成を示すブロック図、図２は、第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図、図３は、第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムの概略構成を示すブロック図である。また、図４は、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関テーブルの説明図、図５は、撮影カメラから歌唱者までの距離と録音音量とを対応付けた相関関数の説明図である。
【００２１】
本発明の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、カラオケ歌唱者の歌唱映像と共に歌唱音声及びカラオケ演奏音を記録するためのシステムであり、図１に示すように、カラオケシステム１０に組み込まれている。すなわち、撮影カメラ５６により歌唱者の歌唱姿態を撮影すると共に、カラオケマイク５３により歌唱音声を取得し、さらに、歌唱者距離計測手段５７により撮影カメラ５６と歌唱者との距離を計測する。そして、録音録画データ書込手段４４の機能により、撮影カメラ５６と歌唱者との距離に対応した録音音量となるように増幅された歌唱音声と、カラオケ演奏音と、歌唱者映像とを同期させて録音録画データ３４ｄを作成するようになっている。
【００２２】
＜第１の実施形態＞
本発明の第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、カラオケマイク５３から入力される歌唱音声を録音する際に、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように増幅率を制御するようになっている。
【００２３】
第１の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、図２に示すように、主要な構成要素として、撮影カメラ５６（例えば、ビデオカメラ）、歌唱者距離計測手段５７、録音音量制御手段４０、録音録画データ書込手段４４を備えている。また、これらの主要な構成要素と共に動作する手段及び装置として、映像データ取得手段３８、距離データ取得手段３９、音声データ取得手段４１、歌唱音声用ゲイン調整器５８、マイク用プリアンプ５９、音楽再生制御手段４２、演奏音用プリアンプ６２、ミキシングアンプ６１、カラオケマイク５３、スピーカ５４、録音録画記録部として機能するＨＤＤ３４、録音音量制御手段４０が参照する相関テーブル３４ｃ（又は相関関数）を備えている。なお、上述した各手段及び機器は、録音録画を行わない場合にも、カラオケシステム１０の構成要素として機能するものがある。
【００２４】
＜撮影カメラ＞
撮影カメラ５６は、歌唱者の歌唱姿態を撮影するための装置で、ビデオカメラ等を使用することができる。この撮影カメラ５６は、例えば、ステージ上に立つ歌唱者に向けられており、歌唱者の動きに追従して焦点合わせを行うオートフォーカス機能や、パン・チルト機構を有していてもよい。
【００２５】
オートフォーカス機構としては、例えば、適宜な間隔を隔てて設置した２つのセパレートレンズを用いて被写体を撮影し、被写体像を撮像素子上に結像させ、両画像の位相差に基づいて物体距離を検知する方式や、被写体上に赤外光を照射して、被写体からの拡散反射光をレンズで集光し、その結像位置に基づいて物体距離を検知する方式や、撮像素子から被写体のコントラスト情報を抽出し、結像状態を直接判定する方式等が知られている。なお、被写界深度の深いレンズからなる固定焦点の撮像レンズを用いることによりフォーカシング機構を省略してもよい。
【００２６】
パン・チルト機構は、撮影カメラをパン及びチルトさせるための機構であり、互いに直交する２軸方向にそれぞれ回転するパンテーブル及びチルトテーブルと、このパンテーブル及びチルトテーブルを互いに直交する２軸方向にそれぞれ回転駆動するステッピングモータと、ステッピングモータの駆動制御装置とを備えて構成される。
【００２７】
＜歌唱者距離計測手段＞
歌唱者距離計測手段５７は、撮影カメラ５６から歌唱者までの距離を測定するための装置であり、レーザ計測器等を使用することができる。レーザ計測器は、レーザ光を歌唱者に照射し、歌唱者によりレーザ光を反射させて、歌唱者までの距離を時間や周波数、位相などのデータに基づいて求める装置である。レーザ光を用いて距離を計測する方式として、時間領域方式、周波数領域方式、位相領域方式がある。時間領域方式は、レーザ光が目標物までの間を往復した反射光の遅延時間に基づいて距離を求める方式である。周波数領域方式は、光の周波数を三角波状や鋸波状に変化させ、反射光と参照光を干渉させて生じたビート信号の周波数に基づいて距離を求める方式である。位相領域方式は、反射光の強度信号と参照信号との位相差に基づいて距離を求める方式である。
【００２８】
＜録音音量制御手段＞
録音音量制御手段４０は、撮影カメラ５６から歌唱者までの距離と録音音量とを対応付けた相関テーブル３４ｃ又は相関関数に基づき、歌唱者距離計測手段５７による測定値に対応した録音音量となるように、カラオケマイク５３から入力される歌唱音声音量の増幅率を制御するためのプログラムからなる。この録音音量制御手段４０により、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように、歌唱音声用ゲイン調整器５８を構成する録音用歌唱音声増幅率設定部５８ａにおける増幅率を設定する。そして、マイク用プリアンプ５９を構成する録音用歌唱音声の増幅器５９ａにおいて、録音用歌唱音声増幅率設定部５８ａで設定された増幅率により録音用歌唱音声を増幅する。
【００２９】
なお、本実施形態におけるプログラムとは、ＲＯＭ３２等に記憶されており、ＣＰＵにおいて実行されることにより、その機能を発揮するソフトウエア資源のことを言い、プログラムと同等の機能を発揮することが可能な論理回路を含む概念である（他の手段においても同様）。
【００３０】
＜相関テーブル／相関関数＞
録音音量制御手段４０が参照する相関テーブル３４ｃは、ＨＤＤ３４に格納されており（図１参照）、図４に示すように、撮影カメラ５６から歌唱者までの距離と録音音量レベルとを紐付けて構成されている。また、録音音量制御手段４０が相関関数を参照して録音音量を制御する構成とすることもできる。この相関関数は、撮影カメラ５６から歌唱者までの距離と録音音量とを規定した関数であり、相関関係は図５に示すようになっている。この相関関数は、相関テーブル３４ｃと同様に、ＨＤＤ３４に格納しておけばよい。
【００３１】
＜音声データ取得手段／映像データ取得手段＞
音声データ取得手段４１は、カラオケマイク５３から入力され、マイク用プリアンプ５９の増幅器５９ａにより増幅された歌唱音声信号を受信して、録音録画データ書込手段４４へ出力するためのプログラム及び信号送受信のためのインターフェースからなる。映像データ取得手段３８は、撮影カメラ５６により撮影した歌唱者映像信号を受信して録音録画データ書込手段４４へ出力するためのプログラム及び信号送受信のためのインターフェースからなる。
【００３２】
＜距離データ取得手段＞
距離データ取得手段３９は、歌唱者距離計測手段５７により計測した距離データを取得するためのプログラム及び信号送受信のためのインターフェースからなる。すなわち、歌唱者距離計測手段５７では計測した距離データをカラオケシステム１０へ送信するが、この際、距離データ取得手段３９により距離データの受信が行われる。
【００３３】
＜歌唱音声用ゲイン調整器＞
歌唱音声用ゲイン調整器５８は、マイク用プリアンプ５９における歌唱音声のゲインを調整するための機器であり、録音用歌唱音声増幅率設定部５８ａと、再生用歌唱音声増幅率設定部５８ｂとを備えている。録音用歌唱音声増幅率設定部５８ａは、録音音量制御手段４０の制御により動作し、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように、録音用歌唱音声信号の増幅率を設定する。再生用歌唱音声増幅率設定部５８ｂは、予め定めたデフォルト値、あるいは店員、サービスマン、利用者等がボリュームを操作することにより設定される設定値となるように、再生用歌唱音声信号の増幅率を設定する。
【００３４】
＜マイク用プリアンプ＞
マイク用プリアンプ５９は、カラオケマイク５３から入力される歌唱音声入力信号を、所定の音域毎に出力バランスを調整したり、ボリュームを調整したりするための機器であり、録音用歌唱音声の増幅器５９ａと、再生用歌唱音声の増幅器５９ｂとを備えている。録音用歌唱音声の増幅器５９ａは、録音用歌唱音声増幅率設定部５８ａで設定された増幅率により録音用歌唱音声信号を増幅して、増幅後の録音用歌唱音声信号を音声データ取得手段４１に出力する。再生用歌唱音声の増幅器５９ｂは、再生用歌唱音声増幅率設定部５８ｂで設定された増幅率により再生用歌唱音声信号を増幅して、増幅後の再生用歌唱音声信号をミキシングアンプ６１に出力する。
【００３５】
＜録音録画データ書込手段＞
録音録画データ書込手段４４は、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて、録音録画記録部として機能するＨＤＤ３４に書き込むためのプログラムからなる。すなわち、録音録画データ書込手段４４の機能により録音録画データ３４ｄが生成される。この録音録画データ３４ｄは、ＤＶＤ等の記録メディアに記録することにより利用者に配布することができ、また、インターネット等の通信回線を介してストリーミング配信することができる。
【００３６】
＜音楽再生制御手段＞
音楽再生制御手段４２は、楽曲ＩＤに基づいて楽曲データベース３４ａから抽出された演奏データをデジタル再生すると共にアナログ変換して演奏音用プリアンプ６２へ出力するための電子回路である。なお、後に詳述するが、楽曲データベース３４ａは、ＨＤＤ３４に格納されている。
【００３７】
＜演奏音用プリアンプ＞
演奏音用プリアンプ６２は、音楽再生制御手段４２からの演奏音信号を、所定の音域毎に出力バランスを調整したり、ボリュームを調整したりするための機器であり、調整後の演奏音信号をミキシングアンプ６１及び音声データ取得手段４１へ出力する。
【００３８】
＜ミキシングアンプ＞
ミキシングアンプ６１は、カラオケマイク５３から入力され、再生用歌唱音声の増幅器５９ｂで増幅された再生用歌唱音声信号と、音楽再生制御手段４２から送出され、演奏音用プリアンプ６２で調整された演奏音声信号とをミキシングすると共に、アンプ機能により増幅してスピーカ５４より出力させるための装置である。
【００３９】
＜ＨＤＤ＞
ＨＤＤ３４は、大容量記憶装置として機能する装置であり、本実施形態では録音録画部としても機能する。さらに、ＨＤＤ３４には、楽曲データベース３４ａ、映像データベース３４ｂ、相関テーブル３４ｃ、録音録画データ３４ｄが格納されている。楽曲データベース３４ａは、演奏データ（ＭＩＤＩ（登録商標）データ）及び歌詞描出データが同期されて構成される楽曲データについて、楽曲ＩＤと対応付けてそれぞれ構成したデータベースである。演奏データは各楽曲の演奏データをデジタル化したものであり、歌詞描出データは演奏に同期した歌詞文字の表示タイミングデータ及び色変わりデータを含んでいる。映像データベース３４ｂは、演奏されるカラオケ楽曲に対応した背景映像を、当該カラオケ楽曲の楽曲ＩＤに対応させた映像ファイルとして所定数格納したデータベースである。
【００４０】
録音録画データ３４ｄは、上述したように、カラオケマイク５３から入力され、録音用歌唱音声の増幅器５９ａで増幅された録音用歌唱音声信号、及び音楽再生制御手段４２から送出され、演奏音用プリアンプ６２で調整された演奏音声信号とからなる音声データと、撮影カメラ５６から入力される映像データとを同期させたデータであり、利用者を特定するために利用者ＩＤが付帯されている。
【００４１】
なお、本実施形態では、ＨＤＤ３４が録音録画部として機能し、ＨＤＤ３４に録音録画データ３４ｄが記録されるが、バッファメモリを録音録画部として機能させることにより、録音録画データ３４ｄのストリーミング配信に対応することができる。
【００４２】
＜第２の実施形態＞
本発明の第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、第１の実施形態の構成に加えて、音楽再生制御手段４２から入力される演奏音を録音する際に、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように増幅率を制御するようになっている。以下、第１の実施形態と異なる構成要素についてのみ説明し、第１の実施形態と同様の構成要素については同一の符号を付して説明を省略する。
【００４３】
本発明の第２の実施形態に係るカラオケ歌唱者映像及び歌唱音声記録システムは、図３に示すように、第１の実施形態の構成に加えて演奏音用ゲイン調整器６３を備えており、さらに演奏音用プリアンプ６２は、録音用演奏音の増幅器６２ａと、再生用演奏音の増幅器６２ｂとを備えている。
【００４４】
＜演奏音用ゲイン調整器＞
演奏音用ゲイン調整器６３は、演奏音用プリアンプ６２における演奏音のゲインを調整するための機器であり、録音用演奏音増幅率設定部６３ａと、再生用演奏音増幅率設定部６３ｂとを備えている。録音用演奏音増幅率設定部６３ａは、録音音量制御手段４０の制御により動作し、撮影カメラ５６から歌唱者までの距離に対応した録音音量となるように、再生用演奏音信号の増幅率を設定する。再生用演奏音増幅率設定部６３ｂは、予め定めたデフォルト値、あるいは店員、サービスマン、利用者等がボリュームを操作することにより設定される設定値となるように、再生用演奏音信号の増幅率を設定する。
【００４５】
＜演奏音用プリアンプ＞
演奏音用プリアンプ６２は、上述したように、録音用演奏音の増幅器６２ａと、再生用演奏音の増幅器６２ｂとを備えている。録音用演奏音の増幅器６２ａは、録音用演奏音増幅率設定部６３ａで設定された増幅率により録音用演奏音声信号を増幅して、増幅後の録音用演奏音を音声データ取得手段４１に出力する。再生用演奏音の増幅器６２ｂは、再生用演奏音増幅率設定部６３ｂで設定された増幅率により再生用演奏音信号を増幅して、増幅後の再生用演奏音をミキシングアンプ６１に出力する。
【００４６】
＜カラオケシステム＞
本発明のカラオケ歌唱者映像及び歌唱音声記録システムを利用するカラオケシステム１０は、図１に示すように、カラオケ本体５１、カラオケリモコン装置５２、カラオケマイク５３、スピーカ５４、表示装置５５、撮影カメラ５６、歌唱者距離計測手段５７、歌唱音声用ゲイン調整器５８、マイク用プリアンプ５９、Ａ／Ｄコンバータ６０、ミキシングアンプ６１、演奏音用プリアンプ６２を備えており、さらに、演奏音用ゲイン調整器６３を備えることが可能である。以下、カラオケ歌唱者映像及び歌唱音声記録システムの構成要素として説明しなかった装置及び手段についてのみ説明を行う。
【００４７】
＜カラオケリモコン装置＞
カラオケリモコン装置５２は、ユーザインタフェース機能を備えており、カラオケ本体５１の送受信手段３５に対して有線方式又は無線方式によりデータの送受信を行うようになっている。このカラオケリモコン装置５２は、楽曲検索手段５２ａとして機能するプログラム、楽曲索引データベース５２ｂ、カードリーダ５２ｃ、データの送受信を行うための電子回路及びプログラム、フラッシュメモリ等からなる記憶手段（図示せず）を備えている。このカラオケリモコン装置５２に付帯するスイッチ類や、入出力表示部（図示せず）に表示される各種のアイコン等を操作することにより、選曲操作等が行われる。
【００４８】
＜楽曲検索手段／楽曲索引データベース＞
楽曲検索手段５２ａは、利用者の指示に基づき、楽曲索引データベース５２ｂを参照して楽曲を検索するためのプログラムからなる。楽曲索引データベース５２ｂは、カラオケシステム１０で演奏に供されるカラオケ楽曲についての属性情報を記述したデータベースであり、例えば、楽曲番号・曲名・歌手名・歌い出し部分の歌詞・流行時期・音楽ジャンル区分・デュエット曲か否かなど、種々の属性情報がこれに含まれている。
【００４９】
＜カードリーダ＞
カードリーダ５２ｃは、任意の利用者がカラオケシステム１０を利用する際に、当該利用者の利用者ＩＤを取得するための装置であり、本実施形態では、利用者がカラオケシステム１０を利用する際に、利用者が所持するＩＤ媒体６４から利用者ＩＤを読み取るようになっている。カードリーダ５２ｃで読み取った利用者ＩＤは、カラオケ本体５１のＲＡＭ３３において利用者管理テーブル３３ｂとして記憶され、利用者管理手段３６で管理される。ＩＤ媒体６４は、例えば非接触型の、ＩＤカード、携帯電話、携帯情報端末等からなり、利用者ＩＤを記憶して、カードリーダ５２ｃとの間でデータの送受信を行うことができるようになっている。
【００５０】
＜カラオケ本体＞
カラオケ本体５１は、中央制御手段３１、ＲＯＭ３２、ＲＡＭ３３、ＨＤＤ３４、送受信手段３５、利用者管理手段３６、予約管理手段３７、映像データ取得手段３８、距離データ取得手段３９、録音音量制御手段４０、音声データ取得手段４１、音楽再生制御手段４２、映像再生制御手段４３、録音録画データ書込手段４４を備えている。
【００５１】
＜中央制御手段＞
中央制御手段３１は、カラオケ本体５１を総合的に制御するための手段であり、例えばＣＰＵ及びその周辺機器により構成されており、ＣＰＵ等がＲＯＭ３２等に記憶されたプログラムに従って動作することにより、制御機能を発揮することができるようになっている。
【００５２】
＜ＲＯＭ／ＲＡＭ＞
ＲＯＭ３２は、カラオケ本体５１を構成する各機器を制御するためのプログラムデータや数値データを記憶するための機器で、例えば半導体メモリ等で構成される。また、ＲＡＭ３３は、プログラムや各種データを一時的に記憶する一時記憶領域として機能するもので、例えば半導体メモリ等で構成される。なお、物理的な半導体メモリによりＲＡＭ３３を構成するのではなく、ハードディスク記憶装置等を用いて仮想的なＲＡＭ３３を構成してもよい。本実施形態では、ＲＡＭ３３に、予約待ち行列３３ａ及び利用者管理テーブル３３ｂが記憶されるようになっている。
【００５３】
＜送受信手段＞
送受信手段３５は、カラオケ本体５１とカラオケリモコン装置５２との間で、データの送受信を行うための電子回路及びプログラムからなる。本実施形態では、赤外線通信により、カラオケ本体５１とカラオケリモコン装置５２との間でデータの送受信が行われる。
【００５４】
＜予約管理手段＞
予約管理手段３７は、利用者により楽曲検索手段５２ａの機能を用いて選曲され、送受信手段３５を介して受信した楽曲ＩＤを、選曲順に演奏予約待ち行列３３ａとしてＲＡＭ３３に格納し、管理するためのプログラムからなる。
【００５５】
＜利用者管理手段＞
利用者管理手段３６は、取得された利用者ＩＤに基づき利用者を特定して管理するためのプログラムからなる。すなわち、利用者管理手段３６では、カードリーダ５２ｃがＩＤ媒体６４から利用者ＩＤを読み取った場合に、この利用者ＩＤに基づいて利用者を特定し、利用者管理テーブル３３ｂにて管理する。取得した利用者ＩＤは、選曲予約や視聴者映像を録音録画する際に利用される。
【００５６】
＜映像再生制御手段＞
映像再生制御手段４３は、カラオケ楽曲の演奏中に、映像データベース３４ｂから抽出した映像データ及び楽曲データベース３４ａから抽出した楽曲データのうちの歌詞テロップデータ（歌詞文字データ）を、当該カラオケ楽曲の演奏データに同期させて表示装置５５に出力するための電子回路である。
【００５７】
＜表示装置＞
表示装置５５は、カラオケ演奏時の映像、歌詞テロップ等を表示するための装置で、例えば、液晶ディスプレイ等により構成される。
【００５８】
＜歌唱者映像の撮影及び歌唱音声の録音＞
本実施形態のカラオケ歌唱者映像及び歌唱音声記録システムでは、撮影カメラ５６により歌唱者の歌唱姿態を撮影する。撮影された歌唱者映像データは、映像データ取得手段３８の機能によりカラオケ本体５１に取り込まれる。また、歌唱者距離計測手段５７の機能により、撮影カメラ５６から歌唱者までの距離を測定する。
【００５９】
そして、録音音量制御手段４０の機能により、相関テーブル３４ｃや相関関数を参照し、測定された距離に対応した録音音量となるように、歌唱音声用ゲイン調整器５８の設定値を制御して、カラオケマイク５３から入力される歌唱音声信号を歌唱音声マイク用プリアンプ５９で増幅する。増幅された録音用の歌唱音声信号は、Ａ／Ｄコンバータ６０を介して、音声データ取得手段４１の機能によりカラオケ本体５１に取り込まれる。
【００６０】
そして、録音録画データ書込手段４４の機能により、音量が増幅された歌唱音声と、カラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて、録音録画データ３４ｄとしてＨＤＤ３４に記憶する。
【００６１】
また、歌唱者距離計測手段５７による測定値に対応した録音音量となるように演奏音用プリアンプ６２を制御して、カラオケ演奏音量の増幅率を制御する構成とした場合には、録音音量制御手段４０の機能により、相関テーブル３４ｃや相関関数を参照し、測定された距離に対応した録音音量となるように、演奏音用ゲイン調整器６３の設定値を制御して、カラオケ演奏音信号を演奏音用プリアンプ６２で増幅する。そして、録音録画データ書込手段４４の機能により、音量が増幅された歌唱音声と、音量が増幅されたカラオケ演奏音と、撮影カメラ５６により撮影した歌唱者映像とを同期させて、録音録画データ３４ｄとしてＨＤＤ３４に記憶する。
【００６２】
＜他の実施形態＞
本発明のカラオケ歌唱者映像及び歌唱音声記録システム及びその周辺装置を構成する機器や手段は上述したものに限定されず、その利用目的に応じて、必要な機器や手段のみの構成としたり、適宜他の機器や手段を付加したりすることができる。また、各手段をそれぞれ別個のものとして構成するのではなく、複数の機能を統合した手段として構成してもよい。
【符号の説明】
【００６３】
１０ カラオケシステム
３１ 中央制御手段
３２ ＲＯＭ
３３ ＲＡＭ
３３ａ 予約待ち行列
３３ｂ 利用者管理テーブル
３４ ＨＤＤ
３４ａ 楽曲データベース
３４ｂ 映像データベース
３４ｃ 相関テーブル
３４ｄ 録音録画データ
３５ 送受信手段
３６ 利用者管理手段
３７ 予約管理手段
３８ 映像データ取得手段
３９ 距離データ取得手段
４０ 録音音量制御手段
４１ 音声データ取得手段
４２ 音楽再生制御手段
４３ 映像再生制御手段
４４ 録音録画データ書込手段
５１ カラオケ本体
５２ カラオケリモコン装置
５２ａ 楽曲検索手段
５２ｂ 楽曲索引データベース
５２ｃ カードリーダ
５３ カラオケマイク
５４ スピーカ
５５ 表示装置
５６ 撮影カメラ
５７ 歌唱者距離計測手段
５８ 歌唱音声用ゲイン調整器
５８ａ 録音用歌唱音声増幅率設定部
５８ｂ 再生用歌唱音声増幅率設定部
５９ マイク用プリアンプ
５９ａ 録音用歌唱音声の増幅器
５９ｂ 再生用歌唱音声の増幅器
６０ Ａ／Ｄコンバータ
６１ ミキシングアンプ
６２ 演奏音用プリアンプ
６２ａ 録音用演奏音の増幅器
６２ｂ 再生用演奏音の増幅器
６３ 演奏音用ゲイン調整器
６３ａ 録音用演奏音増幅率設定部
６３ｂ 再生用演奏音増幅率設定部
６４ ＩＤ媒体
【特許請求の範囲】
【請求項１】
カラオケ歌唱者の歌唱姿態と共に歌唱音声及びカラオケ演奏音を記録するためのカラオケ歌唱者映像及び歌唱音声記録システムであって、
撮影カメラと、歌唱者距離計測手段と、録音音量制御手段と、録音録画データ書込手段と、を備え、
前記撮影カメラは、歌唱者の歌唱姿態を撮影し、
前記歌唱者距離計測手段は、前記撮影カメラから前記歌唱者までの距離を測定し、
前記録音音量制御手段は、前記撮影カメラから前記歌唱者までの距離と録音音量とを対応付けた相関テーブル又は相関関数に基づき、前記歌唱者距離計測手段による測定値に対応した録音音量となるように、カラオケマイクから入力される歌唱音声音量の増幅率を制御し、
録音録画データ書込手段は、前記音量が増幅された歌唱音声と、カラオケ演奏音と、前記撮影カメラにより撮影した歌唱者映像とを同期させて録音録画記録部に書き込む、
ことを特徴とするカラオケ歌唱者映像及び歌唱音声記録システム。
【請求項２】
前記録音音量制御手段は、前記歌唱者距離計測手段による測定値に対応した録音音量となるように、前記歌唱音声音量に加えて前記カラオケ演奏音量の増幅率を制御する、
ことを特徴とする請求項１に記載のカラオケ歌唱者映像及び歌唱音声記録システム。
【請求項１】
カラオケ歌唱者の歌唱姿態と共に歌唱音声及びカラオケ演奏音を記録するためのカラオケ歌唱者映像及び歌唱音声記録システムであって、
撮影カメラと、歌唱者距離計測手段と、録音音量制御手段と、録音録画データ書込手段と、を備え、
前記撮影カメラは、歌唱者の歌唱姿態を撮影し、
前記歌唱者距離計測手段は、前記撮影カメラから前記歌唱者までの距離を測定し、
前記録音音量制御手段は、前記撮影カメラから前記歌唱者までの距離と録音音量とを対応付けた相関テーブル又は相関関数に基づき、前記歌唱者距離計測手段による測定値に対応した録音音量となるように、カラオケマイクから入力される歌唱音声音量の増幅率を制御し、
録音録画データ書込手段は、前記音量が増幅された歌唱音声と、カラオケ演奏音と、前記撮影カメラにより撮影した歌唱者映像とを同期させて録音録画記録部に書き込む、
ことを特徴とするカラオケ歌唱者映像及び歌唱音声記録システム。
【請求項２】
前記録音音量制御手段は、前記歌唱者距離計測手段による測定値に対応した録音音量となるように、前記歌唱音声音量に加えて前記カラオケ演奏音量の増幅率を制御する、
ことを特徴とする請求項１に記載のカラオケ歌唱者映像及び歌唱音声記録システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１１−２１５２２１（Ｐ２０１１−２１５２２１Ａ）
【公開日】平成２３年１０月２７日（２０１１．１０．２７）
【国際特許分類】
【出願番号】特願２０１０−８１０９４（Ｐ２０１０−８１０９４）
【出願日】平成２２年３月３１日（２０１０．３．３１）
【出願人】（３９０００４７１０）株式会社第一興商 (537)
【Ｆターム（参考）】
【公開日】平成２３年１０月２７日（２０１１．１０．２７）
【国際特許分類】
【出願日】平成２２年３月３１日（２０１０．３．３１）
【出願人】（３９０００４７１０）株式会社第一興商 (537)
【Ｆターム（参考）】
[ Back to top ]