カラオケ装置、カラオケシステム、セットトップボックス
【課題】歌詞テロップ等の撮影を禁止することができるカラオケ装置等を提供する。
【解決手段】画像処理部を備えたＳＴＢ３００は、カメラ４１０からのカメラ信号に、ディスプレイ４２１、４２２の映像信号（背景映像、歌詞テロップ）が含まれているか否かを判断し、カメラ信号に上記映像信号が含まれていると判断した場合に、コマンダ２００に対し、停止指示信号を送信する。コマンダ２００は、停止指示信号を受信すると、背景映像、歌詞テロップの記憶が禁止されている判断した場合に、当該カメラ信号に含まれている映像信号の出力を停止する。
【解決手段】画像処理部を備えたＳＴＢ３００は、カメラ４１０からのカメラ信号に、ディスプレイ４２１、４２２の映像信号（背景映像、歌詞テロップ）が含まれているか否かを判断し、カメラ信号に上記映像信号が含まれていると判断した場合に、コマンダ２００に対し、停止指示信号を送信する。コマンダ２００は、停止指示信号を受信すると、背景映像、歌詞テロップの記憶が禁止されている判断した場合に、当該カメラ信号に含まれている映像信号の出力を停止する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、歌唱者の映像を記録することができるカラオケ装置、カラオケシステム、セットトップボックス等に関するものである。
【背景技術】
【０００２】
従来、歌唱者の歌唱内容を記録することができるカラオケ装置が提案されている。例えば、下記特許文献１には、歌唱者の歌声を伴奏音楽と共に記録する点が開示されている。また、伴奏音楽のみを記録することを禁止する点が開示されている。
【０００３】
【特許文献１】特開２００３−１６７５９２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
歌唱内容の記録に関し、歌唱者の歌声のみならず歌唱者の歌唱の様子を撮影し映像として記録することにより、カラオケサービスの多様化、充実化を図ることができる。このようなサービスを提供することは、カラオケ事業者にとっては、集客力の向上という観点から好ましいと考えられる。
【０００５】
通常のカラオケシステムにおいて、歌唱者は、ディスプレイに表示された歌詞テロップを見ながら歌唱を行う。また、楽曲の再生中、所定の背景映像が前記ディスプレイに表示される。ここで、歌唱者の歌唱の様子を撮影する場合、歌唱者とともに前記ディスプレイの内容が撮影・記録されることが想定される。この点、歌詞テロップや背景映像の記録が禁止されているコンテンツを用いてカラオケ歌唱が行われる場合には、当該歌詞テロップや背景映像が記録されないための構成が必要である。
【０００６】
本発明は、上記問題点を解決するためになされたものであり、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるカラオケ装置等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一側面である請求項１に係る発明は、ディスプレイ、カメラ、記録手段、映像出力制御手段、音声出力手段、画像処理手段、とを備えるカラオケ装置であって、前記音声出力手段は、カラオケデータに含まれる楽音情報に基いて音声信号を出力し、前記記録手段は、前記カメラが撮影した映像信号を記録し、前記画像処理手段は、前記カラオケデータに含まれる映像信号と前記カメラが撮影した映像信号とを比較し、該比較結果を結果信号として出力し、前記映像出力制御手段は、前記カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記カラオケデータに対する制御フラグを取得し、 前記結果信号を受信し、前記制御フラグ及び前記結果信号に基いて、前記ディスプレイに出力する映像信号を制御することを特徴とする。
【０００８】
上記カラオケ装置によれば、再生するカラオケデータに対する制御フラグ及び画像処理の結果に応じて、前記カラオケデータに含まれる映像信号をディスプレイに出力するか否かを制御する。これにより、映像の記録が禁止されている場合に、当該映像が記録されることを効率的に防止することができる。
【０００９】
本発明の一側面である請求項２に係る発明は、請求項１のカラオケ装置において、前記カラオケデータには、背景映像及び歌詞テロップが含まれており、前記映像出力制御手段は、前記制御フラグ及び前記結果信号に基いて、前記歌詞テロップ及び／または前記背景映像を前記ディスプレイに出力するか否かを制御することを特徴とする。
【００１０】
上記カラオケ装置によれば、再生するカラオケデータに対する制御フラグ及び画像処理の結果に応じて、前記カラオケデータに含まれる歌詞テロップや背景映像をディスプレイに出力するか否かを制御する。これにより、歌詞テロップや背景映像の記録が禁止されている場合に、当該歌詞テロップや背景映像が記録されることを効率的に防止することができる。
【００１１】
本発明の一側面である請求項３に係る発明は、請求項１または請求項２のカラオケ装置において、前記結果信号は、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かを示すものであることを特徴とする。
【００１２】
上記カラオケ装置によれば、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かの情報を利用して、前記カラオケデータに含まれる映像信号をディスプレイに出力するか否かを制御する。これにより、映像の記録が禁止されている場合に、当該映像が記録されることを効率的に防止することができる。
【００１３】
本発明の一側面である請求項４に係る発明は、請求項１乃至請求項３いずれかのカラオケ装置において、前記制御フラグは、前記カラオケデータに含まれる映像信号の記録を許可するか否かを示すものであり、前記映像出力制御手段は、前記制御フラグ及び前記比較信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないことを特徴とする。
【００１４】
上記カラオケ装置によれば、制御フラグ及び結果信号に基いて、カラオケデータに含まれる映像信号がカメラによって撮影され、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない。これにより、記録が禁止されている映像が記録されることを効率的に防止することができる。
【００１５】
本発明の一側面である請求項５に係る発明は、コマンダ及びセットトップボックスからなるカラオケシステムであって、前記セットトップボックスは、カメラに接続され、前記カメラが撮影した映像信号を記憶する記憶手段を有し、前記コマンダは、ディスプレイに接続され、カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記ディスプレイに出力された映像信号を、前記セットトップボックスに出力し、さらに、 前記セットトップボックスは、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力し、前記コマンダは、前記結果信号を受信したときに、前記カラオケデータに対する制御フラグを取得し、 前記制御フラグ及び前記結果信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないことを特徴とする。
【００１６】
上記カラオケシステムによれば、制御フラグ及び結果信号に基いて、カラオケデータに含まれる映像信号がカメラによって撮影され、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない。これにより、記録が禁止されている映像が記録されることを効率的に防止することができる。さらに、コマンダに対し、セットトップボックスを外部接続することができるため、既存のコマンダを利用することができる。
【００１７】
本発明の一側面である請求項６に係る発明は、ディスプレイに接続されかつ映像出力制御手段を有するコマンダに接続されるセットトップボックスであって、カメラに接続され、前記カメラが撮影した映像信号を記憶する記憶手段を有し、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力することを特徴とする。
【００１８】
上記セットトップボックスによれば、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として前記コマンダに出力する。これにより、コマンダを介してディスプレイへの映像信号の制御を行うことができる。さらに、コマンダに対し、セットトップボックスを外部接続することができるため、既存のコマンダを利用することができる。
【発明の効果】
【００１９】
本発明によれば、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるので、カラオケ事業におけるサービスの多様化・充実化を図ることが可能となる。
【発明を実施するための最良の形態】
【００２０】
以下、本発明の一実施形態について説明する。
【００２１】
（システム構成）
図１は、本発明の一実施形態におけるカラオケシステムのネットワーク構成を示した図である。
本実施形態のカラオケシステムは、各地のカラオケ店舗等に設置されたカラオケ装置１００と、通信網と、サーバ６００と、基本的に構成される。
カラオケ装置１００は、カラオケ店舗の客室ごとに設置されている。
カラオケ装置１００とサーバ６００とは、例えば、カラオケ店舗内に設置されるルータを介して、通信網によって接続される。ここで、通信網としては、有線、無線、併用どのような形態でもよく、また、インターネットを利用したＶＰＮ（Virtual Private Network）であってもよい。
【００２２】
（サーバの構成）
まず、サーバ６００について説明する。
サーバ６００は、カラオケデータベース６１０、動画データベース６２０を有している。カラオケデータベース６１０には、カラオケ楽曲の再生に用いられるカラオケデータが記憶されている。カラオケデータには、カラオケ楽曲の生成起源となる楽音データ、歌詞テロップ、カラオケ楽曲の再生中に表示される背景映像（動画、静止画）の生成起源となる背景データが含まれる。また、カラオケデータベース６１０に記憶されているカラオケデータは、各カラオケ店舗に配信される。
【００２３】
動画データベース６２０には、カラオケ装置１００からアップロードされた撮影データ（後述）が記憶されている。また、動画データベース６２０は、所定の条件によりパソコン等からもアクセスすることができる。
【００２４】
（カラオケ装置の構成）
次に、カラオケ装置１００について説明する。
カラオケ装置１００は、カラオケ店舗の各客室に設置される。
カラオケ装置１００は、コマンダ２００、ＳＴＢ（セットトップボックス、Set Top Box）３００、カメラ４１０、ディスプレイ４２１、ディスプレイ４２２、マイク４３０、アンプ４４０、スピーカ４５０、リモコン５００、から構成されている。
【００２５】
リモコン５００は、ＣＰＵ、ＲＯＭ、ＲＡＭ、表示部、操作部、赤外線通信Ｉ／Ｆ、電波通信Ｉ／Ｆ、から基本的に構成される。
【００２６】
リモコン５００のＣＰＵは、種々のプログラムを実行する。リモコン５００のＲＯＭは、種々のデータを記憶する。リモコン５００のＲＡＭは、種々のデータを一時的に記憶する。リモコン５００の表示部は、種々の情報を表示する。リモコン５００の操作部は、表示部の表面にタッチパネルとして実現することができ、ユーザがリモコン５００を操作する際に用いられる。リモコン５００の赤外線通信Ｉ／Ｆ及び電波通信Ｉ／Ｆは、コマンダ２００との通信の際に用いられる。リモコン５００で受け付けた各種操作信号は、コマンダ２００に送信される。
【００２７】
コマンダ２００は、ＣＰＵ、ＲＯＭ、ＲＡＭ、赤外線通信Ｉ／Ｆ、電波通信Ｉ／Ｆ、補助記憶手段 映像再生手段、音声再生手段、から基本的に構成される。
【００２８】
コマンダ２００のＣＰＵは、種々のプログラムを実行する。コマンダ２００のＲＯＭは、種々のデータを記憶する。コマンダ２００のＲＡＭは、種々のデータを一時的に記憶する。コマンダ２００の赤外線通信Ｉ／Ｆ及び電波通信Ｉ／Ｆは、リモコン５００との通信の際に用いられる。また、種々の情報がコマンダ２００からリモコン５００に送信される。
【００２９】
リモコン５００及びコマンダ２００の赤外線通信Ｉ／Ｆは、赤外線を媒体とする無線通信（以下、「赤外線通信」という。）を行うためのインタフェースである。
リモコン５００及びコマンダ２００の電波通信Ｉ／Ｆは、電波を媒体とする無線通信（以下、「電波通信」という。）を行うためのインタフェースである。
【００３０】
また、リモコン５００及びコマンダ２００の電波通信Ｉ／Ｆを用いることにより、ホストとの間で種々の情報を送受信することも可能である。
また、リモコン５００及びコマンダ２００とは、アクセスポイントを介して無線通信を行ってもよい。また、赤外線通信と無線通信とは、送受信される情報の種類等に応じて適宜切り替えて用いることができる。
【００３１】
また、リモコン５００及びコマンダ２００がイーサネット（登録商標）等で接続されている場合は、それぞれの機器に対して固有のＩＰアドレスが付されている。また、ＩＰアドレスは、それぞれの機器が有する識別番号及び所定の生成式に基いて算出することができる。
【００３２】
なお、複数のリモコン５００が、コマンダ２００と通信可能となるように構成してもよい。
【００３３】
コマンダ２００の補助記憶手段には、例えば、楽曲の再生に必要な音声データ（楽音信号）及び映像データ等が記憶される。また、コマンダ２００の補助記憶手段には、ゲーム等のアプリケーションデータが記憶される。これらのデータは、サーバ６００のカラオケデータベース６１０からダウンロードすることができる。また、ダウンロードには、図示しないルータを用いてもよい。
【００３４】
コマンダ２００の映像音声再生手段は、楽曲の再生及び映像の再生を行う。また、図示しないホストから送信されたデータに基いてストリーミング再生を行うことも可能である。
【００３５】
また、リクエストされた楽曲は、リクエスト毎にサーバ６００のカラオケデータベース６１０からダウンロードしてもよく、また、ホストまたはコマンダ２００に一時的に記憶しておくように構成してもよい。また、一度ダウンロードした楽曲を所定時間のみ記憶するようにしてもよい。
【００３６】
マイク４３０は、コマンダ２００に接続されている。歌唱者は、マイク４３０を用いてカラオケ歌唱を行う。マイク４３０に入力されたマイク音声信号は、コマンダ２００に入力される。なお、マイク４３０の個数は適宜設定可能である。
コマンダ２００は、楽音信号とマイク４３０からのマイク音声信号を混合し、混合した音声信号（以下、「混合音声信号」という。）を所定の機器に出力することができる。また、マイク４３０からのマイク音声信号を、所定の機器に出力することができる。
【００３７】
アンプ４４０は、コマンダ２００に接続されている。アンプ４４０は、コマンダ２００から出力された音声信号を増幅する。
スピーカ４５０は、アンプ４４０に接続されている。スピーカ４５０は、アンプ４４０で増幅された音声信号を出力する。
【００３８】
ディスプレイ４２１、４２２は、コマンダ２００に接続されている。コマンダ２００が出力した映像信号がディスプレイ４２１、４２２に表示される。コマンダ２００から出力される映像信号については後述する。
【００３９】
ＳＴＢ３００は、ＣＰＵ、エンコーダ３１０、記憶手段３２０、画像処理部を有している。ＳＴＢ３００のＣＰＵは、ＳＴＢ３００全体を制御する。ＳＴＢ３００の画像処理部の詳細については後述する。
【００４０】
ＳＴＢ３００は、コマンダ２００に接続されている。ＳＴＢ３００は、コマンダ２００に外部接続装置として機能する。すなわち、既存のコマンダ２００に対し、ＳＴＢ３００を接続することで本発明を実現することができる。
コマンダ２００とＳＴＢ３００とは、制御線を介して接続されており、種々の制御信号を用いて互いの機器を制御することができる。
【００４１】
コマンダ２００は、ＳＴＢ３００に、マイク音声信号や混合音声信号を出力することができる。
【００４２】
カメラ４１０は、ＳＴＢ３００に接続されている。カメラ４１０が撮影したカメラ信号は、ＳＴＢ３００に入力される。また、ＳＴＢ３００とカメラ４１０とは制御線を介して接続されており、ＳＴＢ３００は、カメラ４１０のＯＮ／ＯＦＦ制御を行うことができる。
また、ＳＴＢ３００は、コマンダ２００に、カメラ４１０からのカメラ信号を出力することができる。
【００４３】
ＳＴＢ３００は、コマンダ２００から受信したマイク音声信号や混合音声信号と、カメラ信号とをエンコーダ３１０によってエンコードすることができる（以下、エンコードされたデータを、「撮影データ」という。）。また、撮影データは、記憶手段３２０に記憶される。
また、ＳＴＢ３００は、コマンダ２００に、撮影データを出力することができる。
【００４４】
記憶手段３２０に記憶された撮影データは、サーバ６００の動画データベース６２０にアップロードされる。また、撮影データのアップロードに用いるルータは、カラオケデータをダウンロードする際に用いるルータと別個に構成してもよい。
【００４５】
（コマンダ、ＳＴＢの内部構成）
次に、コマンダ２００及びＳＴＢ３００の内部構成（映像信号及び音声信号に係る部分）について説明する。
図２は、コマンダ及びＳＴＢの内部構成（映像信号及び音声信号に関する部分）の模式図である。
なお、図２においては、説明の便宜上、背景映像、歌詞テロップ、楽音信号をコマンダ２００内に記憶する構成としているが、これらの一部または全部を、ストリーミング再生するものとして構成してもよい。
【００４６】
図２に示すように、コマンダ２００は、スイッチ２０１〜２０７を有している。
【００４７】
スイッチ２０１がＯＮとなると、背景映像がディスプレイ４２１に出力される。スイッチ２０２がＯＮとなると、歌詞テロップがディスプレイ４２１に出力される。スイッチ２０３がＯＮとなると、ＳＴＢ３００から送信されたカメラ信号が出力される。すなわち、スイッチ２０１〜２０３を切り換えることにより、ディスプレイ４２１に表示させる映像信号を制御することができる。また、各スイッチの制御は、図示しないＣＰＵによって行われる。
【００４８】
スイッチ２０４がＯＮとなると、背景映像がディスプレイ４２２に出力される。スイッチ２０５がＯＮとなると、歌詞テロップがディスプレイ４２２に出力される。スイッチ２０６がＯＮとなると、ＳＴＢ３００から送信されたカメラ信号が出力される。すなわち、スイッチ２０４〜２０６を切り換えることにより、ディスプレイ４２１に表示させる映像信号を制御することができる。また、各スイッチの制御は、図示しないＣＰＵによって行われる。
【００４９】
スイッチ２０７がＯＮとなると、マイク音声信号に楽音信号が混合され、混合音声信号が、ＳＴＢ３００に出力される。
なお、楽音信号や混合音声信号は、アンプ４４０にも出力される。
【００５０】
図２に示すように、ＳＴＢ３００は、エンコーダ３１０、記憶手段３２０を有している。エンコーダ３１０には、カメラ４１０からのカメラ信号、及び、コマンダ２００からの音声信号（マイク音声信号や混合音声信号）をエンコードし、撮影データを作成する。ここで、撮影データのフォーマットは適宜選択することができ、例えば、ＡＶＩフォーマットとすることができる。エンコードされた撮影データは、記憶手段３２０に記憶される。これにより、カメラ４１０からのカメラ信号、及び、コマンダ２００からの音声信号（マイク音声信号や混合音声信号）は、ＳＴＢ３００によってキャプチャされることになる。
【００５１】
記憶手段３２０に記憶された撮影データは、ネットワークを介してサーバ６００の動画データベース６２０にアップロードされる。また、記憶手段３２０に記憶された撮影データは、コマンダ２００を介してディスプレイ４２１、４２２に表示することができる（なお、図２においては、撮影データがディスプレイ４２１、４２２に表示されるための経路は省略してある。）。
【００５２】
なお、上記内部構成は単なる一例である。また、本発明は、上述した内部構成と均等な内部構成で実現することができることはいうまでもない。
【００５３】
（コマンダとＳＴＢの処理の関係）
次に、コマンダ２００とＳＴＢ３００の処理の関係について説明する。図３は、コマンダ２００とＳＴＢ３００の処理の関係を示した説明図である。
【００５４】
コマンダ２００は、ユーザから楽曲再生の指示及び撮影の指示を受けると、ＳＴＢ３００に対し、起動指示信号を送信する（１）。
ＳＴＢ３００は、上記起動指示信号を受信すると、キャプチャを行うためのアプリケーションの起動を行う（２）。
【００５５】
コマンダ２００は、上記起動指示信号を送信したあと、オープニング動画再生を行う（３）。ここで、オープニング動画再生とは、今から始まるカメラ撮影の説明映像などの映像再生をいう。
このとき、ＳＴＢ３００からカメラ信号が出力される。
【００５６】
コマンダ２００は、ディスプレイ４２１、４２２に対する出力映像を制御する（４）。具体的には、ユーザによって指定された設定情報（背景映像＋歌詞テロップ、歌詞テロップのみ、背景映像のみ、いずれもオフ）に基いて、スイッチ２０１〜２０６を制御する。
【００５７】
コマンダ２００は、ＳＴＢ３００に対し、キャプチャ開始指示信号を送信する（５）。
また、コマンダ２００は、楽曲再生を開始する。このとき、マイク音声信号及び楽音信号がＳＴＢ３００に出力される。
【００５８】
ＳＴＢ３００は、コマンダ２００から出力された音声信号（マイク音声信号及び楽音信号）とカメラ４１０から出力されたカメラ信号をエンコードして撮影データを作成し、作成した撮影データを記憶手段３２０に記憶する。すなわち、音声信号及びカメラ信号をキャプチャする（７）。
【００５９】
コマンダ２００は、楽曲の再生が終了すると、ＳＴＢ３００に対し、キャプチャ終了指示信号を送信する（８）。
コマンダ２００は、リモコン５００の表示部に、選択画面を表示させる（９）。
図４は、選択画面の表示例を示している。
【００６０】
図４に示すように、選択画面上には、撮影（キャプチャ）が終了したことを示すメッセージ、及び、撮影データに対する動作指示のための選択肢（ボタン）が表示される。
コマンダ２００は、ＳＴＢ３００に対し、選択された選択肢に対応する動作指示信号を送信する（１０）。
ＳＴＢ３００は、受信した動作指示信号に基いた動作を行う（１１）。
【００６１】
図４に示した選択画面において、「再生」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを要求する信号」を送信する。
これにより、ＳＴＢ３００は、コマンダ２００に対し、記憶手段３２０に記憶している撮影データを送信する。送信された撮影データは、ディスプレイ４２１等に表示される。すなわち、撮影データが、コマンダ２００側において再生される。なお、撮影データの再生中において、リモコン５００の表示部上において、当該撮影データの再生を停止させるための停止ボタンを表示させてもよい。
【００６２】
また、図４に示した選択画面において、「アップロード」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データをサーバ６００の動画データベース６２０にアップロードさせることを要求する信号」を送信する。これにより、ＳＴＢ３００は、撮影データを、動画データベース６２０にアップロードする。
その後、当該撮影データを、記憶手段３２０から削除する。
【００６３】
また、図４に示した選択画面において、「消去」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを削除させることを要求する信号」を送信する。これにより、ＳＴＢ３００は、撮影データを、記憶手段３２０から削除する。
【００６４】
（歌唱態様、及び、表示・記憶される内容）
次に、上述したカラオケ装置１００を用いた歌唱態様について説明する。図５は、歌唱態様を示した説明図である。図５に示すように、歌唱者は、ディスプレイ４２２を見ながらカラオケ歌唱を行う。このとき、ディスプレイ４２２には、歌詞テロップ及び背景映像が表示される。
【００６５】
また、カメラ４１０が、歌唱者を撮影可能な位置に配置されている。なお、カメラ４１０は自由に移動させることができる。
なお、図５に示したカラオケ装置の外観は単なる一例であり、本発明は、当該外観を有するカラオケ装置に限定されるものではない。また、図５においては、配線の一部を省略してある。なお、図５では、ディスプレイの数を２つとしているが、ディスプレイ４２２を省略することもできる。
【００６６】
図６は、背景映像及び歌詞テロップの表示例を示した図である。ディスプレイ４２１、４２２には、図６に示した内容を表示させることができる。
【００６７】
図７は、カメラ４１０で撮影された映像の一例を示した図である。図５で示した歌唱態様においては、図７に示すように、歌唱者及びディスプレイ４２１等が撮影される。ＳＴＢ３００は、図７に示した内容を記憶することができる。
【００６８】
図８は、カメラ４１０で撮影された映像に歌詞テロップを合成した映像の一例を示した図である。図８に示す映像は、カメラ４１０で撮影された映像（図７）に歌詞テロップを合成したものである。ディスプレイ４２１、４２２には、図８に示した内容を表示させることができる。
【００６９】
図９は、背景映像及び歌詞テロップに歌唱者映像を合成した映像の一例を示した図である。図９に示す映像は、カメラ４１０で撮影した映像から歌唱者の部分を抽出し、抽出した映像を、背景映像及び歌詞テロップ上に合成したものである。ディスプレイ４２１、４２２には、図９に示した内容を表示させることができる。なお、歌唱者の部分のみを抽出するための画像処理は、ＳＴＢ３００またはコマンダ２００において実行される。当該画像処理は公知であるので、説明を省略する。
【００７０】
（背景映像、歌詞テロップに対する記憶の制限）
カラオケデータに含まれる背景映像、歌詞テロップについては、カラオケ歌唱のための「再生」は許可されているが、「記憶」が禁止されているものが存在する。ここで、上述した歌唱態様（図５参照）においては、カメラ４１０が撮影する映像に、背景映像、歌詞テロップが映ることが想定される（図７参照）。
【００７１】
カメラ４１０に、記憶が禁止されている背景映像、歌詞テロップが映っていることを検出した場合には、当該カメラ４１０に映っているディスプレイへの当該背景映像、歌詞テロップの表示を停止させる必要がある。
本実施形態においては、「カメラ信号」、及び、「背景映像の記憶を許可するか否かを示す情報、歌詞テロップの記憶を許可するか否かを示す情報」に基いて、ディスプレイ４２１、４２２への出力映像を制御する。
【００７２】
例えば、
（１）背景映像の記憶が禁止されている、及び、
（２）カメラ信号にカメラ４２１に出力された背景映像が含まれている、
という２つの条件を満たしていると判断した場合、コマンダ２００は、ディスプレイ４２１への背景映像の出力を停止する。
【００７３】
また、例えば、
（３）歌詞テロップの記憶が禁止されている、及び、
（４）カメラ信号にカメラ４２２に出力された歌詞テロップが含まれている、
という２つの条件を満たしていると判断した場合、コマンダ２００は、ディスプレイ４２２への歌詞テロップの出力を停止する。
【００７４】
背景映像、歌詞テロップの記憶が許可されているか否かは、制御フラグを調べることで把握することができる。制御フラグは、カラオケデータに付帯させることができる。また、楽曲ごとの制御フラグをテーブルとして定義してもよい。この場合、当該テーブルは、コマンダ２００の記憶手段に記憶される。
【００７５】
カメラ信号に背景映像・歌詞テロップが含まれているか否かは、画像処理の結果によって把握することができる。ＳＴＢ３００は、カメラ信号にコマンダ２００から送信された各映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）が含まれているか否かを判断する。
【００７６】
このとき、コマンダ２００から送信された各映像信号をテンプレートとして、カメラ信号に対しテンプレートマッチングを行うことで、上記画像処理を実現することができる。
また、歌詞テロップの画面上の位置や色が既知である場合は、それらの情報を用いて高速に処理することができる。
【００７７】
ここで、上記画像処理として、例えば、特開平１０−２５７４０１号（図３、図５）などに開示された技術（以下、「従来技術」）を用いてもよい。
具体的には、当該従来技術記載の「予約語」が「歌詞テロップ」に相当し、当該従来技術記載の「映像データ」が、カメラからの映像信号（ｅ）のディスプレイ１画面分の「映像信号テンプレート」に相当し、当該従来技術記載（例えば、図３）の「画像メモリ１２５」が、ＳＴＢ３００の画像処理部において前記テンプレート１画面分の画像を一時記憶するメモリ（図示せず。以下、「一時記憶メモリ」という。）に相当する。
【００７８】
そして、映像信号テンプレートを読み出し、１画面分の文字認識を行うことで前記テンプレートから文字列を抽出する。その後、歌詞テロップからの入力信号（ａ）と文字比較を行い、一定以上文字が一致している場合は、カメラ信号からの映像信号に歌詞テロップも撮影されているものと判断する処理を１画面毎に行う。
【００７９】
なお、上記一例では、画像処理として文字認識で画面の歌詞テロップを特定したが、歌詞テロップからの入力信号（ａ）の１画面分を歌詞テロップテンプレートとして一時記憶メモリに一時記憶し、映像信号テンプレートと比較して、映像パターンマッチングにより、両テンプレートが一定割合以上にイメージが一致していれば歌詞テロップが含まれていると判断することもできる。
【００８０】
そして、ＳＴＢ３００は、カメラ信号にコマンダ２００から送信された映像信号が含まれていると判断した場合に、コマンダ２００に対し、「停止指示信号」（結果信号）を送信する。この停止指示信号には、カメラ信号内で検出された映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）を示す識別番号が含まれる。また、いずれの映像信号も検出しない場合であっても、その旨を示す結果信号をコマンダ２００に送信するように構成してもよい。
【００８１】
コマンダ２００は、「停止指示信号」を受信し、かつ、背景映像及び／または歌詞テロップの記憶が禁止されている場合に限り、当該「停止指示信号」に含まれている映像信号の出力を停止するよう制御する。
【００８２】
（コマンダ、ＳＴＢの内部構成）
次に、コマンダ２００及びＳＴＢ３００の内部構成（画像処理に関する部分）について説明する。図１０では、図２と同じ構成要素については同じ符号を付している。
【００８３】
図１０に示すように、背景映像がディスプレイ４２１に出力されているとき（すなわち、スイッチ２０１がＯＮとなっているとき）は、当該背景映像が、ＳＴＢ３００の画像処理部の端子（ａ）に入力される。また、歌詞テロップがディスプレイ４２１に出力されているとき（すなわち、スイッチ２０２がＯＮとなっているとき）は、当該歌詞テロップが、ＳＴＢ３００の画像処理部の端子（ｂ）に入力される。また、背景映像がディスプレイ４２２に出力されているとき（すなわち、スイッチ２０４がＯＮとなっているとき）は、当該背景映像が、ＳＴＢ３００の画像処理部の端子（ｃ）に入力される。また、歌詞テロップがディスプレイ４２２に出力されているとき（すなわち、スイッチ２０５がＯＮとなっているとき）は、当該歌詞テロップが、ＳＴＢ３００の画像処理部の端子（ｄ）に入力される。これにより、各ディスプレイに映像信号が出力されていないときは、上記端子にも映像信号が出力されない。
【００８４】
また、カメラ４１０からのカメラ信号がＳＴＢ３００の画像処理部の端子（ｅ）に入力される。
画像処理部は、カメラ信号の中に、それぞれの端子に入力された映像信号が含まれているか否かを判断する。そして、画像処理結果に基く結果信号（停止指示信号）を、コマンダ２００に出力する。コマンダ２００は、結果信号（停止指示信号）に基いて、各ディスプレイ４２１、４２２への出力映像を制御する。
【００８５】
（ＳＴＢとコマンダの処理の関係）
次に、ＳＴＢとコマンダの処理の関係について説明する。図１１は、ＳＴＢとコマンダの処理の関係を示した図である。また、以下においては、ディスプレイ４２１に対する歌詞テロップの出力制御について説明する。また、以下においては、歌詞テロップの記憶が禁止されているものとする。
【００８６】
コマンダ２００は、停止指示信号を受信していない間は、歌詞テロップを含む映像信号をディスプレイ４２１に出力する。これにより、ディスプレイ４２１には、歌詞テロップが表示されることになる。
その後、ＳＴＢ３００が、カメラ信号にディスプレイ４２１の映像信号に歌詞テロップが含まれていると判断すると、コマンダ２００に対し、停止指示信号を送信する。
【００８７】
コマンダ２００は、停止指示信号を受信すると、ディスプレイ４２１に対する出力映像を切り換える。具体的には、歌詞テロップを表示させないように制御する。これにより、ディスプレイ４２１には、歌詞テロップが表示されないことになる。
【００８８】
その後、コマンダ２００は、停止指示信号を受信していないと判断すると、ディスプレイ４２１に対する出力映像を切り換える。具体的には、歌詞テロップを表示させるように制御する。これにより、ディスプレイ４２１には、歌詞テロップが表示されることになる。なお、停止指示信号を受信しているか否かの判断タイミングは、適宜決定することができ、例えば、所定時間ごとに上記判断をするように構成することができる。
【００８９】
なお、歌詞テロップの表示／非表示は、１画面毎に判断してもよいが、操作間違いによる一瞬の歌詞テロップの映り込みも考えられるし、１画面毎に表示と非表示とを繰り返すと故障だと利用者に誤解される場合もある。そこで、表示／非表示を切り換えた後は、一定時間上記判断をしないように構成してもよい。すなわち、表示／非表示の切替が短い時間で繰り返し行われないように構成してもよい。
【００９０】
なお、背景映像についても、同じように処理することができる。また、背景映像及び歌詞テロップの記憶が禁止されていない（すなわち、許可されている）場合は、上述した処理は実行されない。
【００９１】
（コマンダ側の処理）
次に、コマンダ側の処理について説明する。図１２は、コマンダ側の処理のフローチャートである。
Ｓ１１において、ユーザから指示を受け付ける。ユーザは、リモコン５００を用いて、楽曲再生の指示、及び、撮影の指示を入力することができる。また、各ディスプレイ上の表示態様（背景映像＋歌詞テロップ、歌詞テロップのみ、背景映像のみ、いずれもオフ）についても入力することができる。
【００９２】
Ｓ１２において、ＳＴＢ３００に対し、起動指示信号を送信する。これにより、ＳＴＢ３００は、キャプチャを開始するためのスタンバイ処理を実行する。スタンバイ処理の詳細については後述する。
【００９３】
Ｓ１３において、初期設定処理を実行する。初期設定処理では、歌詞テロップ、背景映像の記録が禁止されているか否かを示す制御フラグを取得する。そして、取得した制御フラグを、例えば、コマンダ２００内部のＲＡＭに記憶する。また、オープニング動画を再生する。
【００９４】
Ｓ１４において、ＳＴＢ３００に対し、キャプチャ開始指示信号を送信する。
Ｓ１５において、楽曲の再生を開始する。このとき、楽音信号とマイク音声信号との混合音声信号が、ＳＴＢ３００に出力される。
【００９５】
Ｓ１６において、出力映像切替処理を実行する。出力映像切替処理では、Ｓ１１で入力指示された出力態様となるように、出力映像を制御する。また、停止指示信号を受信した場合であって、背景映像、歌詞テロップの記憶が禁止されているときには、当該背景映像及び／または歌詞テロップの出力を停止する。
【００９６】
Ｓ１７において、楽曲の再生を終了したか否かを判断する。楽曲の再生を終了していないと判断した場合は（Ｓ１７：ＮＯ）、Ｓ１６に戻る。一方、楽曲の再生を終了したと判断した場合は（Ｓ１７：ＹＥＳ）、Ｓ１８に移行する。
Ｓ１８において、キャプチャ終了指示信号をＳＴＢ３００に送信する。
Ｓ１９において、撮影後処理を実行する。
【００９７】
次に、撮影後処理（コマンダ側）について説明する。図１３は、撮影後処理（コマンダ側）のフローチャートである。
【００９８】
Ｓ３１において、リモコン５００の表示部に、選択画面（図４参照）を表示させる。また、各ディスプレイにも当該選択画面を表示させてもよい。
Ｓ３２において、ユーザの入力を受け付ける。具体的には、図４に示される「再生」、「アップロード」、「消去」の入力を受け付ける。
【００９９】
Ｓ３３において、入力された指示内容を判断する。
【０１００】
入力された指示が「再生」であると判断した場合は、Ｓ３４に移行する。
Ｓ３４において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを要求する信号」を送信する。
Ｓ３５において、受信した撮影データの再生を開始する。このとき、リモコン５００の表示部上には、再生中の撮影データの停止を指示するための停止ボタンを表示させる。
【０１０１】
Ｓ３６において、停止ボタンが押下されたか否かを判断する。停止ボタンが押下されたと判断した場合は（Ｓ３６：ＹＥＳ）、Ｓ３１に戻る。一方、停止ボタンが押下されていないと判断した場合は（Ｓ３６：ＮＯ）、Ｓ３７に移行する。
【０１０２】
Ｓ３７において、撮影データの再生が終了したか否かを判断する。撮影データの再生は終了していないと判断した場合は（Ｓ３７：ＮＯ）、Ｓ３６に戻る。一方、撮影データの再生が終了したと判断した場合は（Ｓ３７：ＹＥＳ）、Ｓ３１に戻る。
【０１０３】
一方、Ｓ３３において、入力された指示が「アップロード」であると判断した場合は、Ｓ３８に移行する。
Ｓ３８において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データをサーバ６００の動画データベース６２０にアップロードさせることを要求する信号」を送信する。
【０１０４】
一方、Ｓ３３において、入力された指示が「消去」であると判断した場合は、Ｓ３９に移行する。
Ｓ３９において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを削除させることを要求する信号」を送信する。
【０１０５】
なお、コマンダ２００側において、アップロードする撮影データを編集するための機能を有するように構成してもよい。
【０１０６】
（ＳＴＢ側の処理）
次に、ＳＴＢ側の処理について説明する。図１４は、ＳＴＢ側の処理のフローチャートである。
Ｓ５１において、コマンダ２００から起動指示信号を受信する。
Ｓ５２において、スタンバイ処理を実行する。スタンバイ処理では、キャプチャを行うためのアプリケーションの起動を行う。また、カメラ４１０に対しＯＮ制御を行う。
【０１０７】
Ｓ５３において、キャプチャ開始指示信号を受信する。
Ｓ５４において、キャプチャを開始する。すなわち、カメラ４１０からのカメラ信号及びコマンダ２００からの音声信号が記憶手段３２０に記憶される。
【０１０８】
Ｓ５５において、カメラ信号にディスプレイの映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）が含まれているか否かを判断する。なお、Ｓ５５の条件判断は、コマンダ２００から出力される映像信号（図１０参照）ごとに行われる。
例えば、Ｓ５５の条件判断の１つは、上述した画像処理部における「映像信号から文字を抽出する機能」を、カメラ信号へディスプレイの映像信号に含まれた歌詞テロップの映り込み判断として作用させるものである。
【０１０９】
カメラ信号にディスプレイの映像信号は含まれていないと判断した場合は（Ｓ５５：ＮＯ）、Ｓ５７に移行する。一方、カメラ信号にディスプレイの映像信号が含まれていると判断した場合は（Ｓ５５：ＹＥＳ）、Ｓ５６に移行する。
Ｓ５６において、コマンダ２００に対し、停止指示信号を送信する。停止指示信号には、カメラ信号内で検出された映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）を示す識別番号が含まれる。
【０１１０】
Ｓ５７において、コマンダ２００からキャプチャ終了指示信号を受信したか否かを判断する。
キャプチャ終了指示信号を受信していないと判断した場合は（Ｓ５７：ＮＯ）、Ｓ５５に戻る。一方、キャプチャ終了指示信号を受信したと判断した場合は（Ｓ５７：ＹＥＳ）、Ｓ５８に移行する。
【０１１１】
Ｓ５８において、キャプチャを終了する。
Ｓ５９において、撮影後処理を実行する。
【０１１２】
次に、撮影後処理（ＳＴＢ側）について説明する。図１５は、撮影後処理（ＳＴＢ側）のフローチャートである。
【０１１３】
Ｓ７１において、指示信号を受信する。
Ｓ７２において、受信した指示信号が示す指示内容を判断する。
【０１１４】
指示内容が「撮影データ送信」であった場合は、Ｓ７３に移行する。
Ｓ７３において、コマンダ２００に対し、記憶手段３２０に記憶している撮影データを送信する。
【０１１５】
指示内容が「アップロード」であった場合は、Ｓ７４に移行する。
Ｓ７４において、撮影データを、動画データベース６２０にアップロードする。
Ｓ７５において、撮影データを、記憶手段３２０から削除する。
【０１１６】
指示内容が「消去」であった場合は、Ｓ７６に移行する。
Ｓ７６において、撮影データを、記憶手段３２０から削除する。
【０１１７】
以上説明したとおり、本発明は、画像処理部を備えたＳＴＢ３００を有し、ＳＴＢ３００は、カメラ４１０からのカメラ信号に、ディスプレイ４２１、４２２の映像信号（背景映像、歌詞テロップ）が含まれているか否かを判断し、カメラ信号に上記映像信号が含まれていると判断した場合に、コマンダ２００に対し、停止指示信号を送信する。コマンダ２００は、停止指示信号を受信すると、背景映像、歌詞テロップの記憶が禁止されている判断した場合に、当該カメラ信号に含まれている映像信号の出力を停止する。
これにより、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるので、カラオケ事業におけるサービスの多様化・充実化を図ることが可能となる。
【０１１８】
本発明は上述した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることはいうまでもない。
【０１１９】
例えば、カラオケ楽曲の再生中に、ユーザが指定した所望のタイミングに所望のテロップをディスプレイ上に表示させてもよい。このとき、ユーザは、テロップの内容及び表示タイミングを、リモコン５００を用いて編集することができる。また、ユーザが作成されたテロップは、カメラ４１０と各ディスプレイ４２１、４２２とが向き合う位置関係にあっても、常に表示される。
これにより、ユーザ自身が作成したテロップは、カラオケ楽曲の制御フラグの状態による影響を受けないので、ユーザによって作成されたテロップが常に映し込まれたビデオ映像は、撮影後に、ユーザがビデオメッセージとしてユーザの目的に応じて配布する場合にも有効となる。
【０１２０】
また、上述した各フローチャートは単なる一例であり、該各フローチャートの処理と同等の結果を得ることできるものであれば、他のフローチャートによって処理を実現してもよい。
【０１２１】
また、上述したカラオケ装置、カラオケシステム、ＳＴＢに係る方法、該方法をコンピュータに実行させるためのプログラム、該プログラムを記録した記録媒体等としても本発明は実現可能である。
【図面の簡単な説明】
【０１２２】
【図１】カラオケシステムの構成の一例を示した図である。
【図２】コマンダ及びＳＴＢの内部構成（映像信号及び音声信号に関する部分）の模式図である。
【図３】コマンダとＳＴＢの処理の関係を示した図である。
【図４】リモコンの表示部の表示例を示した図である。
【図５】歌唱態様を示した図である。
【図６】背景映像及び歌詞テロップの表示例を示した図である。
【図７】カメラで撮影された映像の一例を示した図である。
【図８】カメラで撮影された映像に歌詞テロップを合成した映像の一例を示した図である。
【図９】背景映像及び歌詞テロップに歌唱者映像を合成した映像の一例を示した図である。
【図１０】コマンダ及びＳＴＢの内部構成（画像処理に関する部分）の模式図である。
【図１１】ＳＴＢとコマンダの処理の関係を示した図である。
【図１２】コマンダ側の処理のフローチャートである。
【図１３】撮影後処理（コマンダ側）のフローチャートである。
【図１４】ＳＴＢ側の処理のフローチャートである。
【図１５】撮影後処理（ＳＴＢ側）のフローチャートである。
【符号の説明】
【０１２３】
１００ カラオケ装置
２００ コマンダ
３００ ＳＴＢ
４１０ カメラ
４２１ ディスプレイ
４２２ ディスプレイ
４３０ マイク
４４０ アンプ
４５０ スピーカ
５００ リモコン
６００ サーバ
６１０ カラオケデータベース
６２０ 動画データベース
【技術分野】
【０００１】
本発明は、歌唱者の映像を記録することができるカラオケ装置、カラオケシステム、セットトップボックス等に関するものである。
【背景技術】
【０００２】
従来、歌唱者の歌唱内容を記録することができるカラオケ装置が提案されている。例えば、下記特許文献１には、歌唱者の歌声を伴奏音楽と共に記録する点が開示されている。また、伴奏音楽のみを記録することを禁止する点が開示されている。
【０００３】
【特許文献１】特開２００３−１６７５９２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
歌唱内容の記録に関し、歌唱者の歌声のみならず歌唱者の歌唱の様子を撮影し映像として記録することにより、カラオケサービスの多様化、充実化を図ることができる。このようなサービスを提供することは、カラオケ事業者にとっては、集客力の向上という観点から好ましいと考えられる。
【０００５】
通常のカラオケシステムにおいて、歌唱者は、ディスプレイに表示された歌詞テロップを見ながら歌唱を行う。また、楽曲の再生中、所定の背景映像が前記ディスプレイに表示される。ここで、歌唱者の歌唱の様子を撮影する場合、歌唱者とともに前記ディスプレイの内容が撮影・記録されることが想定される。この点、歌詞テロップや背景映像の記録が禁止されているコンテンツを用いてカラオケ歌唱が行われる場合には、当該歌詞テロップや背景映像が記録されないための構成が必要である。
【０００６】
本発明は、上記問題点を解決するためになされたものであり、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるカラオケ装置等を提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の一側面である請求項１に係る発明は、ディスプレイ、カメラ、記録手段、映像出力制御手段、音声出力手段、画像処理手段、とを備えるカラオケ装置であって、前記音声出力手段は、カラオケデータに含まれる楽音情報に基いて音声信号を出力し、前記記録手段は、前記カメラが撮影した映像信号を記録し、前記画像処理手段は、前記カラオケデータに含まれる映像信号と前記カメラが撮影した映像信号とを比較し、該比較結果を結果信号として出力し、前記映像出力制御手段は、前記カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記カラオケデータに対する制御フラグを取得し、 前記結果信号を受信し、前記制御フラグ及び前記結果信号に基いて、前記ディスプレイに出力する映像信号を制御することを特徴とする。
【０００８】
上記カラオケ装置によれば、再生するカラオケデータに対する制御フラグ及び画像処理の結果に応じて、前記カラオケデータに含まれる映像信号をディスプレイに出力するか否かを制御する。これにより、映像の記録が禁止されている場合に、当該映像が記録されることを効率的に防止することができる。
【０００９】
本発明の一側面である請求項２に係る発明は、請求項１のカラオケ装置において、前記カラオケデータには、背景映像及び歌詞テロップが含まれており、前記映像出力制御手段は、前記制御フラグ及び前記結果信号に基いて、前記歌詞テロップ及び／または前記背景映像を前記ディスプレイに出力するか否かを制御することを特徴とする。
【００１０】
上記カラオケ装置によれば、再生するカラオケデータに対する制御フラグ及び画像処理の結果に応じて、前記カラオケデータに含まれる歌詞テロップや背景映像をディスプレイに出力するか否かを制御する。これにより、歌詞テロップや背景映像の記録が禁止されている場合に、当該歌詞テロップや背景映像が記録されることを効率的に防止することができる。
【００１１】
本発明の一側面である請求項３に係る発明は、請求項１または請求項２のカラオケ装置において、前記結果信号は、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かを示すものであることを特徴とする。
【００１２】
上記カラオケ装置によれば、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かの情報を利用して、前記カラオケデータに含まれる映像信号をディスプレイに出力するか否かを制御する。これにより、映像の記録が禁止されている場合に、当該映像が記録されることを効率的に防止することができる。
【００１３】
本発明の一側面である請求項４に係る発明は、請求項１乃至請求項３いずれかのカラオケ装置において、前記制御フラグは、前記カラオケデータに含まれる映像信号の記録を許可するか否かを示すものであり、前記映像出力制御手段は、前記制御フラグ及び前記比較信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないことを特徴とする。
【００１４】
上記カラオケ装置によれば、制御フラグ及び結果信号に基いて、カラオケデータに含まれる映像信号がカメラによって撮影され、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない。これにより、記録が禁止されている映像が記録されることを効率的に防止することができる。
【００１５】
本発明の一側面である請求項５に係る発明は、コマンダ及びセットトップボックスからなるカラオケシステムであって、前記セットトップボックスは、カメラに接続され、前記カメラが撮影した映像信号を記憶する記憶手段を有し、前記コマンダは、ディスプレイに接続され、カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、前記ディスプレイに出力された映像信号を、前記セットトップボックスに出力し、さらに、 前記セットトップボックスは、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力し、前記コマンダは、前記結果信号を受信したときに、前記カラオケデータに対する制御フラグを取得し、 前記制御フラグ及び前記結果信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しないことを特徴とする。
【００１６】
上記カラオケシステムによれば、制御フラグ及び結果信号に基いて、カラオケデータに含まれる映像信号がカメラによって撮影され、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない。これにより、記録が禁止されている映像が記録されることを効率的に防止することができる。さらに、コマンダに対し、セットトップボックスを外部接続することができるため、既存のコマンダを利用することができる。
【００１７】
本発明の一側面である請求項６に係る発明は、ディスプレイに接続されかつ映像出力制御手段を有するコマンダに接続されるセットトップボックスであって、カメラに接続され、前記カメラが撮影した映像信号を記憶する記憶手段を有し、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力することを特徴とする。
【００１８】
上記セットトップボックスによれば、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として前記コマンダに出力する。これにより、コマンダを介してディスプレイへの映像信号の制御を行うことができる。さらに、コマンダに対し、セットトップボックスを外部接続することができるため、既存のコマンダを利用することができる。
【発明の効果】
【００１９】
本発明によれば、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるので、カラオケ事業におけるサービスの多様化・充実化を図ることが可能となる。
【発明を実施するための最良の形態】
【００２０】
以下、本発明の一実施形態について説明する。
【００２１】
（システム構成）
図１は、本発明の一実施形態におけるカラオケシステムのネットワーク構成を示した図である。
本実施形態のカラオケシステムは、各地のカラオケ店舗等に設置されたカラオケ装置１００と、通信網と、サーバ６００と、基本的に構成される。
カラオケ装置１００は、カラオケ店舗の客室ごとに設置されている。
カラオケ装置１００とサーバ６００とは、例えば、カラオケ店舗内に設置されるルータを介して、通信網によって接続される。ここで、通信網としては、有線、無線、併用どのような形態でもよく、また、インターネットを利用したＶＰＮ（Virtual Private Network）であってもよい。
【００２２】
（サーバの構成）
まず、サーバ６００について説明する。
サーバ６００は、カラオケデータベース６１０、動画データベース６２０を有している。カラオケデータベース６１０には、カラオケ楽曲の再生に用いられるカラオケデータが記憶されている。カラオケデータには、カラオケ楽曲の生成起源となる楽音データ、歌詞テロップ、カラオケ楽曲の再生中に表示される背景映像（動画、静止画）の生成起源となる背景データが含まれる。また、カラオケデータベース６１０に記憶されているカラオケデータは、各カラオケ店舗に配信される。
【００２３】
動画データベース６２０には、カラオケ装置１００からアップロードされた撮影データ（後述）が記憶されている。また、動画データベース６２０は、所定の条件によりパソコン等からもアクセスすることができる。
【００２４】
（カラオケ装置の構成）
次に、カラオケ装置１００について説明する。
カラオケ装置１００は、カラオケ店舗の各客室に設置される。
カラオケ装置１００は、コマンダ２００、ＳＴＢ（セットトップボックス、Set Top Box）３００、カメラ４１０、ディスプレイ４２１、ディスプレイ４２２、マイク４３０、アンプ４４０、スピーカ４５０、リモコン５００、から構成されている。
【００２５】
リモコン５００は、ＣＰＵ、ＲＯＭ、ＲＡＭ、表示部、操作部、赤外線通信Ｉ／Ｆ、電波通信Ｉ／Ｆ、から基本的に構成される。
【００２６】
リモコン５００のＣＰＵは、種々のプログラムを実行する。リモコン５００のＲＯＭは、種々のデータを記憶する。リモコン５００のＲＡＭは、種々のデータを一時的に記憶する。リモコン５００の表示部は、種々の情報を表示する。リモコン５００の操作部は、表示部の表面にタッチパネルとして実現することができ、ユーザがリモコン５００を操作する際に用いられる。リモコン５００の赤外線通信Ｉ／Ｆ及び電波通信Ｉ／Ｆは、コマンダ２００との通信の際に用いられる。リモコン５００で受け付けた各種操作信号は、コマンダ２００に送信される。
【００２７】
コマンダ２００は、ＣＰＵ、ＲＯＭ、ＲＡＭ、赤外線通信Ｉ／Ｆ、電波通信Ｉ／Ｆ、補助記憶手段 映像再生手段、音声再生手段、から基本的に構成される。
【００２８】
コマンダ２００のＣＰＵは、種々のプログラムを実行する。コマンダ２００のＲＯＭは、種々のデータを記憶する。コマンダ２００のＲＡＭは、種々のデータを一時的に記憶する。コマンダ２００の赤外線通信Ｉ／Ｆ及び電波通信Ｉ／Ｆは、リモコン５００との通信の際に用いられる。また、種々の情報がコマンダ２００からリモコン５００に送信される。
【００２９】
リモコン５００及びコマンダ２００の赤外線通信Ｉ／Ｆは、赤外線を媒体とする無線通信（以下、「赤外線通信」という。）を行うためのインタフェースである。
リモコン５００及びコマンダ２００の電波通信Ｉ／Ｆは、電波を媒体とする無線通信（以下、「電波通信」という。）を行うためのインタフェースである。
【００３０】
また、リモコン５００及びコマンダ２００の電波通信Ｉ／Ｆを用いることにより、ホストとの間で種々の情報を送受信することも可能である。
また、リモコン５００及びコマンダ２００とは、アクセスポイントを介して無線通信を行ってもよい。また、赤外線通信と無線通信とは、送受信される情報の種類等に応じて適宜切り替えて用いることができる。
【００３１】
また、リモコン５００及びコマンダ２００がイーサネット（登録商標）等で接続されている場合は、それぞれの機器に対して固有のＩＰアドレスが付されている。また、ＩＰアドレスは、それぞれの機器が有する識別番号及び所定の生成式に基いて算出することができる。
【００３２】
なお、複数のリモコン５００が、コマンダ２００と通信可能となるように構成してもよい。
【００３３】
コマンダ２００の補助記憶手段には、例えば、楽曲の再生に必要な音声データ（楽音信号）及び映像データ等が記憶される。また、コマンダ２００の補助記憶手段には、ゲーム等のアプリケーションデータが記憶される。これらのデータは、サーバ６００のカラオケデータベース６１０からダウンロードすることができる。また、ダウンロードには、図示しないルータを用いてもよい。
【００３４】
コマンダ２００の映像音声再生手段は、楽曲の再生及び映像の再生を行う。また、図示しないホストから送信されたデータに基いてストリーミング再生を行うことも可能である。
【００３５】
また、リクエストされた楽曲は、リクエスト毎にサーバ６００のカラオケデータベース６１０からダウンロードしてもよく、また、ホストまたはコマンダ２００に一時的に記憶しておくように構成してもよい。また、一度ダウンロードした楽曲を所定時間のみ記憶するようにしてもよい。
【００３６】
マイク４３０は、コマンダ２００に接続されている。歌唱者は、マイク４３０を用いてカラオケ歌唱を行う。マイク４３０に入力されたマイク音声信号は、コマンダ２００に入力される。なお、マイク４３０の個数は適宜設定可能である。
コマンダ２００は、楽音信号とマイク４３０からのマイク音声信号を混合し、混合した音声信号（以下、「混合音声信号」という。）を所定の機器に出力することができる。また、マイク４３０からのマイク音声信号を、所定の機器に出力することができる。
【００３７】
アンプ４４０は、コマンダ２００に接続されている。アンプ４４０は、コマンダ２００から出力された音声信号を増幅する。
スピーカ４５０は、アンプ４４０に接続されている。スピーカ４５０は、アンプ４４０で増幅された音声信号を出力する。
【００３８】
ディスプレイ４２１、４２２は、コマンダ２００に接続されている。コマンダ２００が出力した映像信号がディスプレイ４２１、４２２に表示される。コマンダ２００から出力される映像信号については後述する。
【００３９】
ＳＴＢ３００は、ＣＰＵ、エンコーダ３１０、記憶手段３２０、画像処理部を有している。ＳＴＢ３００のＣＰＵは、ＳＴＢ３００全体を制御する。ＳＴＢ３００の画像処理部の詳細については後述する。
【００４０】
ＳＴＢ３００は、コマンダ２００に接続されている。ＳＴＢ３００は、コマンダ２００に外部接続装置として機能する。すなわち、既存のコマンダ２００に対し、ＳＴＢ３００を接続することで本発明を実現することができる。
コマンダ２００とＳＴＢ３００とは、制御線を介して接続されており、種々の制御信号を用いて互いの機器を制御することができる。
【００４１】
コマンダ２００は、ＳＴＢ３００に、マイク音声信号や混合音声信号を出力することができる。
【００４２】
カメラ４１０は、ＳＴＢ３００に接続されている。カメラ４１０が撮影したカメラ信号は、ＳＴＢ３００に入力される。また、ＳＴＢ３００とカメラ４１０とは制御線を介して接続されており、ＳＴＢ３００は、カメラ４１０のＯＮ／ＯＦＦ制御を行うことができる。
また、ＳＴＢ３００は、コマンダ２００に、カメラ４１０からのカメラ信号を出力することができる。
【００４３】
ＳＴＢ３００は、コマンダ２００から受信したマイク音声信号や混合音声信号と、カメラ信号とをエンコーダ３１０によってエンコードすることができる（以下、エンコードされたデータを、「撮影データ」という。）。また、撮影データは、記憶手段３２０に記憶される。
また、ＳＴＢ３００は、コマンダ２００に、撮影データを出力することができる。
【００４４】
記憶手段３２０に記憶された撮影データは、サーバ６００の動画データベース６２０にアップロードされる。また、撮影データのアップロードに用いるルータは、カラオケデータをダウンロードする際に用いるルータと別個に構成してもよい。
【００４５】
（コマンダ、ＳＴＢの内部構成）
次に、コマンダ２００及びＳＴＢ３００の内部構成（映像信号及び音声信号に係る部分）について説明する。
図２は、コマンダ及びＳＴＢの内部構成（映像信号及び音声信号に関する部分）の模式図である。
なお、図２においては、説明の便宜上、背景映像、歌詞テロップ、楽音信号をコマンダ２００内に記憶する構成としているが、これらの一部または全部を、ストリーミング再生するものとして構成してもよい。
【００４６】
図２に示すように、コマンダ２００は、スイッチ２０１〜２０７を有している。
【００４７】
スイッチ２０１がＯＮとなると、背景映像がディスプレイ４２１に出力される。スイッチ２０２がＯＮとなると、歌詞テロップがディスプレイ４２１に出力される。スイッチ２０３がＯＮとなると、ＳＴＢ３００から送信されたカメラ信号が出力される。すなわち、スイッチ２０１〜２０３を切り換えることにより、ディスプレイ４２１に表示させる映像信号を制御することができる。また、各スイッチの制御は、図示しないＣＰＵによって行われる。
【００４８】
スイッチ２０４がＯＮとなると、背景映像がディスプレイ４２２に出力される。スイッチ２０５がＯＮとなると、歌詞テロップがディスプレイ４２２に出力される。スイッチ２０６がＯＮとなると、ＳＴＢ３００から送信されたカメラ信号が出力される。すなわち、スイッチ２０４〜２０６を切り換えることにより、ディスプレイ４２１に表示させる映像信号を制御することができる。また、各スイッチの制御は、図示しないＣＰＵによって行われる。
【００４９】
スイッチ２０７がＯＮとなると、マイク音声信号に楽音信号が混合され、混合音声信号が、ＳＴＢ３００に出力される。
なお、楽音信号や混合音声信号は、アンプ４４０にも出力される。
【００５０】
図２に示すように、ＳＴＢ３００は、エンコーダ３１０、記憶手段３２０を有している。エンコーダ３１０には、カメラ４１０からのカメラ信号、及び、コマンダ２００からの音声信号（マイク音声信号や混合音声信号）をエンコードし、撮影データを作成する。ここで、撮影データのフォーマットは適宜選択することができ、例えば、ＡＶＩフォーマットとすることができる。エンコードされた撮影データは、記憶手段３２０に記憶される。これにより、カメラ４１０からのカメラ信号、及び、コマンダ２００からの音声信号（マイク音声信号や混合音声信号）は、ＳＴＢ３００によってキャプチャされることになる。
【００５１】
記憶手段３２０に記憶された撮影データは、ネットワークを介してサーバ６００の動画データベース６２０にアップロードされる。また、記憶手段３２０に記憶された撮影データは、コマンダ２００を介してディスプレイ４２１、４２２に表示することができる（なお、図２においては、撮影データがディスプレイ４２１、４２２に表示されるための経路は省略してある。）。
【００５２】
なお、上記内部構成は単なる一例である。また、本発明は、上述した内部構成と均等な内部構成で実現することができることはいうまでもない。
【００５３】
（コマンダとＳＴＢの処理の関係）
次に、コマンダ２００とＳＴＢ３００の処理の関係について説明する。図３は、コマンダ２００とＳＴＢ３００の処理の関係を示した説明図である。
【００５４】
コマンダ２００は、ユーザから楽曲再生の指示及び撮影の指示を受けると、ＳＴＢ３００に対し、起動指示信号を送信する（１）。
ＳＴＢ３００は、上記起動指示信号を受信すると、キャプチャを行うためのアプリケーションの起動を行う（２）。
【００５５】
コマンダ２００は、上記起動指示信号を送信したあと、オープニング動画再生を行う（３）。ここで、オープニング動画再生とは、今から始まるカメラ撮影の説明映像などの映像再生をいう。
このとき、ＳＴＢ３００からカメラ信号が出力される。
【００５６】
コマンダ２００は、ディスプレイ４２１、４２２に対する出力映像を制御する（４）。具体的には、ユーザによって指定された設定情報（背景映像＋歌詞テロップ、歌詞テロップのみ、背景映像のみ、いずれもオフ）に基いて、スイッチ２０１〜２０６を制御する。
【００５７】
コマンダ２００は、ＳＴＢ３００に対し、キャプチャ開始指示信号を送信する（５）。
また、コマンダ２００は、楽曲再生を開始する。このとき、マイク音声信号及び楽音信号がＳＴＢ３００に出力される。
【００５８】
ＳＴＢ３００は、コマンダ２００から出力された音声信号（マイク音声信号及び楽音信号）とカメラ４１０から出力されたカメラ信号をエンコードして撮影データを作成し、作成した撮影データを記憶手段３２０に記憶する。すなわち、音声信号及びカメラ信号をキャプチャする（７）。
【００５９】
コマンダ２００は、楽曲の再生が終了すると、ＳＴＢ３００に対し、キャプチャ終了指示信号を送信する（８）。
コマンダ２００は、リモコン５００の表示部に、選択画面を表示させる（９）。
図４は、選択画面の表示例を示している。
【００６０】
図４に示すように、選択画面上には、撮影（キャプチャ）が終了したことを示すメッセージ、及び、撮影データに対する動作指示のための選択肢（ボタン）が表示される。
コマンダ２００は、ＳＴＢ３００に対し、選択された選択肢に対応する動作指示信号を送信する（１０）。
ＳＴＢ３００は、受信した動作指示信号に基いた動作を行う（１１）。
【００６１】
図４に示した選択画面において、「再生」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを要求する信号」を送信する。
これにより、ＳＴＢ３００は、コマンダ２００に対し、記憶手段３２０に記憶している撮影データを送信する。送信された撮影データは、ディスプレイ４２１等に表示される。すなわち、撮影データが、コマンダ２００側において再生される。なお、撮影データの再生中において、リモコン５００の表示部上において、当該撮影データの再生を停止させるための停止ボタンを表示させてもよい。
【００６２】
また、図４に示した選択画面において、「アップロード」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データをサーバ６００の動画データベース６２０にアップロードさせることを要求する信号」を送信する。これにより、ＳＴＢ３００は、撮影データを、動画データベース６２０にアップロードする。
その後、当該撮影データを、記憶手段３２０から削除する。
【００６３】
また、図４に示した選択画面において、「消去」が選択されると、コマンダ２００は、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを削除させることを要求する信号」を送信する。これにより、ＳＴＢ３００は、撮影データを、記憶手段３２０から削除する。
【００６４】
（歌唱態様、及び、表示・記憶される内容）
次に、上述したカラオケ装置１００を用いた歌唱態様について説明する。図５は、歌唱態様を示した説明図である。図５に示すように、歌唱者は、ディスプレイ４２２を見ながらカラオケ歌唱を行う。このとき、ディスプレイ４２２には、歌詞テロップ及び背景映像が表示される。
【００６５】
また、カメラ４１０が、歌唱者を撮影可能な位置に配置されている。なお、カメラ４１０は自由に移動させることができる。
なお、図５に示したカラオケ装置の外観は単なる一例であり、本発明は、当該外観を有するカラオケ装置に限定されるものではない。また、図５においては、配線の一部を省略してある。なお、図５では、ディスプレイの数を２つとしているが、ディスプレイ４２２を省略することもできる。
【００６６】
図６は、背景映像及び歌詞テロップの表示例を示した図である。ディスプレイ４２１、４２２には、図６に示した内容を表示させることができる。
【００６７】
図７は、カメラ４１０で撮影された映像の一例を示した図である。図５で示した歌唱態様においては、図７に示すように、歌唱者及びディスプレイ４２１等が撮影される。ＳＴＢ３００は、図７に示した内容を記憶することができる。
【００６８】
図８は、カメラ４１０で撮影された映像に歌詞テロップを合成した映像の一例を示した図である。図８に示す映像は、カメラ４１０で撮影された映像（図７）に歌詞テロップを合成したものである。ディスプレイ４２１、４２２には、図８に示した内容を表示させることができる。
【００６９】
図９は、背景映像及び歌詞テロップに歌唱者映像を合成した映像の一例を示した図である。図９に示す映像は、カメラ４１０で撮影した映像から歌唱者の部分を抽出し、抽出した映像を、背景映像及び歌詞テロップ上に合成したものである。ディスプレイ４２１、４２２には、図９に示した内容を表示させることができる。なお、歌唱者の部分のみを抽出するための画像処理は、ＳＴＢ３００またはコマンダ２００において実行される。当該画像処理は公知であるので、説明を省略する。
【００７０】
（背景映像、歌詞テロップに対する記憶の制限）
カラオケデータに含まれる背景映像、歌詞テロップについては、カラオケ歌唱のための「再生」は許可されているが、「記憶」が禁止されているものが存在する。ここで、上述した歌唱態様（図５参照）においては、カメラ４１０が撮影する映像に、背景映像、歌詞テロップが映ることが想定される（図７参照）。
【００７１】
カメラ４１０に、記憶が禁止されている背景映像、歌詞テロップが映っていることを検出した場合には、当該カメラ４１０に映っているディスプレイへの当該背景映像、歌詞テロップの表示を停止させる必要がある。
本実施形態においては、「カメラ信号」、及び、「背景映像の記憶を許可するか否かを示す情報、歌詞テロップの記憶を許可するか否かを示す情報」に基いて、ディスプレイ４２１、４２２への出力映像を制御する。
【００７２】
例えば、
（１）背景映像の記憶が禁止されている、及び、
（２）カメラ信号にカメラ４２１に出力された背景映像が含まれている、
という２つの条件を満たしていると判断した場合、コマンダ２００は、ディスプレイ４２１への背景映像の出力を停止する。
【００７３】
また、例えば、
（３）歌詞テロップの記憶が禁止されている、及び、
（４）カメラ信号にカメラ４２２に出力された歌詞テロップが含まれている、
という２つの条件を満たしていると判断した場合、コマンダ２００は、ディスプレイ４２２への歌詞テロップの出力を停止する。
【００７４】
背景映像、歌詞テロップの記憶が許可されているか否かは、制御フラグを調べることで把握することができる。制御フラグは、カラオケデータに付帯させることができる。また、楽曲ごとの制御フラグをテーブルとして定義してもよい。この場合、当該テーブルは、コマンダ２００の記憶手段に記憶される。
【００７５】
カメラ信号に背景映像・歌詞テロップが含まれているか否かは、画像処理の結果によって把握することができる。ＳＴＢ３００は、カメラ信号にコマンダ２００から送信された各映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）が含まれているか否かを判断する。
【００７６】
このとき、コマンダ２００から送信された各映像信号をテンプレートとして、カメラ信号に対しテンプレートマッチングを行うことで、上記画像処理を実現することができる。
また、歌詞テロップの画面上の位置や色が既知である場合は、それらの情報を用いて高速に処理することができる。
【００７７】
ここで、上記画像処理として、例えば、特開平１０−２５７４０１号（図３、図５）などに開示された技術（以下、「従来技術」）を用いてもよい。
具体的には、当該従来技術記載の「予約語」が「歌詞テロップ」に相当し、当該従来技術記載の「映像データ」が、カメラからの映像信号（ｅ）のディスプレイ１画面分の「映像信号テンプレート」に相当し、当該従来技術記載（例えば、図３）の「画像メモリ１２５」が、ＳＴＢ３００の画像処理部において前記テンプレート１画面分の画像を一時記憶するメモリ（図示せず。以下、「一時記憶メモリ」という。）に相当する。
【００７８】
そして、映像信号テンプレートを読み出し、１画面分の文字認識を行うことで前記テンプレートから文字列を抽出する。その後、歌詞テロップからの入力信号（ａ）と文字比較を行い、一定以上文字が一致している場合は、カメラ信号からの映像信号に歌詞テロップも撮影されているものと判断する処理を１画面毎に行う。
【００７９】
なお、上記一例では、画像処理として文字認識で画面の歌詞テロップを特定したが、歌詞テロップからの入力信号（ａ）の１画面分を歌詞テロップテンプレートとして一時記憶メモリに一時記憶し、映像信号テンプレートと比較して、映像パターンマッチングにより、両テンプレートが一定割合以上にイメージが一致していれば歌詞テロップが含まれていると判断することもできる。
【００８０】
そして、ＳＴＢ３００は、カメラ信号にコマンダ２００から送信された映像信号が含まれていると判断した場合に、コマンダ２００に対し、「停止指示信号」（結果信号）を送信する。この停止指示信号には、カメラ信号内で検出された映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）を示す識別番号が含まれる。また、いずれの映像信号も検出しない場合であっても、その旨を示す結果信号をコマンダ２００に送信するように構成してもよい。
【００８１】
コマンダ２００は、「停止指示信号」を受信し、かつ、背景映像及び／または歌詞テロップの記憶が禁止されている場合に限り、当該「停止指示信号」に含まれている映像信号の出力を停止するよう制御する。
【００８２】
（コマンダ、ＳＴＢの内部構成）
次に、コマンダ２００及びＳＴＢ３００の内部構成（画像処理に関する部分）について説明する。図１０では、図２と同じ構成要素については同じ符号を付している。
【００８３】
図１０に示すように、背景映像がディスプレイ４２１に出力されているとき（すなわち、スイッチ２０１がＯＮとなっているとき）は、当該背景映像が、ＳＴＢ３００の画像処理部の端子（ａ）に入力される。また、歌詞テロップがディスプレイ４２１に出力されているとき（すなわち、スイッチ２０２がＯＮとなっているとき）は、当該歌詞テロップが、ＳＴＢ３００の画像処理部の端子（ｂ）に入力される。また、背景映像がディスプレイ４２２に出力されているとき（すなわち、スイッチ２０４がＯＮとなっているとき）は、当該背景映像が、ＳＴＢ３００の画像処理部の端子（ｃ）に入力される。また、歌詞テロップがディスプレイ４２２に出力されているとき（すなわち、スイッチ２０５がＯＮとなっているとき）は、当該歌詞テロップが、ＳＴＢ３００の画像処理部の端子（ｄ）に入力される。これにより、各ディスプレイに映像信号が出力されていないときは、上記端子にも映像信号が出力されない。
【００８４】
また、カメラ４１０からのカメラ信号がＳＴＢ３００の画像処理部の端子（ｅ）に入力される。
画像処理部は、カメラ信号の中に、それぞれの端子に入力された映像信号が含まれているか否かを判断する。そして、画像処理結果に基く結果信号（停止指示信号）を、コマンダ２００に出力する。コマンダ２００は、結果信号（停止指示信号）に基いて、各ディスプレイ４２１、４２２への出力映像を制御する。
【００８５】
（ＳＴＢとコマンダの処理の関係）
次に、ＳＴＢとコマンダの処理の関係について説明する。図１１は、ＳＴＢとコマンダの処理の関係を示した図である。また、以下においては、ディスプレイ４２１に対する歌詞テロップの出力制御について説明する。また、以下においては、歌詞テロップの記憶が禁止されているものとする。
【００８６】
コマンダ２００は、停止指示信号を受信していない間は、歌詞テロップを含む映像信号をディスプレイ４２１に出力する。これにより、ディスプレイ４２１には、歌詞テロップが表示されることになる。
その後、ＳＴＢ３００が、カメラ信号にディスプレイ４２１の映像信号に歌詞テロップが含まれていると判断すると、コマンダ２００に対し、停止指示信号を送信する。
【００８７】
コマンダ２００は、停止指示信号を受信すると、ディスプレイ４２１に対する出力映像を切り換える。具体的には、歌詞テロップを表示させないように制御する。これにより、ディスプレイ４２１には、歌詞テロップが表示されないことになる。
【００８８】
その後、コマンダ２００は、停止指示信号を受信していないと判断すると、ディスプレイ４２１に対する出力映像を切り換える。具体的には、歌詞テロップを表示させるように制御する。これにより、ディスプレイ４２１には、歌詞テロップが表示されることになる。なお、停止指示信号を受信しているか否かの判断タイミングは、適宜決定することができ、例えば、所定時間ごとに上記判断をするように構成することができる。
【００８９】
なお、歌詞テロップの表示／非表示は、１画面毎に判断してもよいが、操作間違いによる一瞬の歌詞テロップの映り込みも考えられるし、１画面毎に表示と非表示とを繰り返すと故障だと利用者に誤解される場合もある。そこで、表示／非表示を切り換えた後は、一定時間上記判断をしないように構成してもよい。すなわち、表示／非表示の切替が短い時間で繰り返し行われないように構成してもよい。
【００９０】
なお、背景映像についても、同じように処理することができる。また、背景映像及び歌詞テロップの記憶が禁止されていない（すなわち、許可されている）場合は、上述した処理は実行されない。
【００９１】
（コマンダ側の処理）
次に、コマンダ側の処理について説明する。図１２は、コマンダ側の処理のフローチャートである。
Ｓ１１において、ユーザから指示を受け付ける。ユーザは、リモコン５００を用いて、楽曲再生の指示、及び、撮影の指示を入力することができる。また、各ディスプレイ上の表示態様（背景映像＋歌詞テロップ、歌詞テロップのみ、背景映像のみ、いずれもオフ）についても入力することができる。
【００９２】
Ｓ１２において、ＳＴＢ３００に対し、起動指示信号を送信する。これにより、ＳＴＢ３００は、キャプチャを開始するためのスタンバイ処理を実行する。スタンバイ処理の詳細については後述する。
【００９３】
Ｓ１３において、初期設定処理を実行する。初期設定処理では、歌詞テロップ、背景映像の記録が禁止されているか否かを示す制御フラグを取得する。そして、取得した制御フラグを、例えば、コマンダ２００内部のＲＡＭに記憶する。また、オープニング動画を再生する。
【００９４】
Ｓ１４において、ＳＴＢ３００に対し、キャプチャ開始指示信号を送信する。
Ｓ１５において、楽曲の再生を開始する。このとき、楽音信号とマイク音声信号との混合音声信号が、ＳＴＢ３００に出力される。
【００９５】
Ｓ１６において、出力映像切替処理を実行する。出力映像切替処理では、Ｓ１１で入力指示された出力態様となるように、出力映像を制御する。また、停止指示信号を受信した場合であって、背景映像、歌詞テロップの記憶が禁止されているときには、当該背景映像及び／または歌詞テロップの出力を停止する。
【００９６】
Ｓ１７において、楽曲の再生を終了したか否かを判断する。楽曲の再生を終了していないと判断した場合は（Ｓ１７：ＮＯ）、Ｓ１６に戻る。一方、楽曲の再生を終了したと判断した場合は（Ｓ１７：ＹＥＳ）、Ｓ１８に移行する。
Ｓ１８において、キャプチャ終了指示信号をＳＴＢ３００に送信する。
Ｓ１９において、撮影後処理を実行する。
【００９７】
次に、撮影後処理（コマンダ側）について説明する。図１３は、撮影後処理（コマンダ側）のフローチャートである。
【００９８】
Ｓ３１において、リモコン５００の表示部に、選択画面（図４参照）を表示させる。また、各ディスプレイにも当該選択画面を表示させてもよい。
Ｓ３２において、ユーザの入力を受け付ける。具体的には、図４に示される「再生」、「アップロード」、「消去」の入力を受け付ける。
【００９９】
Ｓ３３において、入力された指示内容を判断する。
【０１００】
入力された指示が「再生」であると判断した場合は、Ｓ３４に移行する。
Ｓ３４において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを要求する信号」を送信する。
Ｓ３５において、受信した撮影データの再生を開始する。このとき、リモコン５００の表示部上には、再生中の撮影データの停止を指示するための停止ボタンを表示させる。
【０１０１】
Ｓ３６において、停止ボタンが押下されたか否かを判断する。停止ボタンが押下されたと判断した場合は（Ｓ３６：ＹＥＳ）、Ｓ３１に戻る。一方、停止ボタンが押下されていないと判断した場合は（Ｓ３６：ＮＯ）、Ｓ３７に移行する。
【０１０２】
Ｓ３７において、撮影データの再生が終了したか否かを判断する。撮影データの再生は終了していないと判断した場合は（Ｓ３７：ＮＯ）、Ｓ３６に戻る。一方、撮影データの再生が終了したと判断した場合は（Ｓ３７：ＹＥＳ）、Ｓ３１に戻る。
【０１０３】
一方、Ｓ３３において、入力された指示が「アップロード」であると判断した場合は、Ｓ３８に移行する。
Ｓ３８において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データをサーバ６００の動画データベース６２０にアップロードさせることを要求する信号」を送信する。
【０１０４】
一方、Ｓ３３において、入力された指示が「消去」であると判断した場合は、Ｓ３９に移行する。
Ｓ３９において、ＳＴＢ３００に対し、「記憶手段３２０に記憶されている撮影データを削除させることを要求する信号」を送信する。
【０１０５】
なお、コマンダ２００側において、アップロードする撮影データを編集するための機能を有するように構成してもよい。
【０１０６】
（ＳＴＢ側の処理）
次に、ＳＴＢ側の処理について説明する。図１４は、ＳＴＢ側の処理のフローチャートである。
Ｓ５１において、コマンダ２００から起動指示信号を受信する。
Ｓ５２において、スタンバイ処理を実行する。スタンバイ処理では、キャプチャを行うためのアプリケーションの起動を行う。また、カメラ４１０に対しＯＮ制御を行う。
【０１０７】
Ｓ５３において、キャプチャ開始指示信号を受信する。
Ｓ５４において、キャプチャを開始する。すなわち、カメラ４１０からのカメラ信号及びコマンダ２００からの音声信号が記憶手段３２０に記憶される。
【０１０８】
Ｓ５５において、カメラ信号にディスプレイの映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）が含まれているか否かを判断する。なお、Ｓ５５の条件判断は、コマンダ２００から出力される映像信号（図１０参照）ごとに行われる。
例えば、Ｓ５５の条件判断の１つは、上述した画像処理部における「映像信号から文字を抽出する機能」を、カメラ信号へディスプレイの映像信号に含まれた歌詞テロップの映り込み判断として作用させるものである。
【０１０９】
カメラ信号にディスプレイの映像信号は含まれていないと判断した場合は（Ｓ５５：ＮＯ）、Ｓ５７に移行する。一方、カメラ信号にディスプレイの映像信号が含まれていると判断した場合は（Ｓ５５：ＹＥＳ）、Ｓ５６に移行する。
Ｓ５６において、コマンダ２００に対し、停止指示信号を送信する。停止指示信号には、カメラ信号内で検出された映像信号（ディスプレイ４２１に送信可能な背景映像、ディスプレイ４２１に送信可能な歌詞テロップ、ディスプレイ４２２に送信可能な背景映像、ディスプレイ４２２に送信可能な歌詞テロップ）を示す識別番号が含まれる。
【０１１０】
Ｓ５７において、コマンダ２００からキャプチャ終了指示信号を受信したか否かを判断する。
キャプチャ終了指示信号を受信していないと判断した場合は（Ｓ５７：ＮＯ）、Ｓ５５に戻る。一方、キャプチャ終了指示信号を受信したと判断した場合は（Ｓ５７：ＹＥＳ）、Ｓ５８に移行する。
【０１１１】
Ｓ５８において、キャプチャを終了する。
Ｓ５９において、撮影後処理を実行する。
【０１１２】
次に、撮影後処理（ＳＴＢ側）について説明する。図１５は、撮影後処理（ＳＴＢ側）のフローチャートである。
【０１１３】
Ｓ７１において、指示信号を受信する。
Ｓ７２において、受信した指示信号が示す指示内容を判断する。
【０１１４】
指示内容が「撮影データ送信」であった場合は、Ｓ７３に移行する。
Ｓ７３において、コマンダ２００に対し、記憶手段３２０に記憶している撮影データを送信する。
【０１１５】
指示内容が「アップロード」であった場合は、Ｓ７４に移行する。
Ｓ７４において、撮影データを、動画データベース６２０にアップロードする。
Ｓ７５において、撮影データを、記憶手段３２０から削除する。
【０１１６】
指示内容が「消去」であった場合は、Ｓ７６に移行する。
Ｓ７６において、撮影データを、記憶手段３２０から削除する。
【０１１７】
以上説明したとおり、本発明は、画像処理部を備えたＳＴＢ３００を有し、ＳＴＢ３００は、カメラ４１０からのカメラ信号に、ディスプレイ４２１、４２２の映像信号（背景映像、歌詞テロップ）が含まれているか否かを判断し、カメラ信号に上記映像信号が含まれていると判断した場合に、コマンダ２００に対し、停止指示信号を送信する。コマンダ２００は、停止指示信号を受信すると、背景映像、歌詞テロップの記憶が禁止されている判断した場合に、当該カメラ信号に含まれている映像信号の出力を停止する。
これにより、記録が禁止されているカラオケコンテンツを用いた場合であっても、歌唱者の歌唱の様子を撮影し映像として記録することができるので、カラオケ事業におけるサービスの多様化・充実化を図ることが可能となる。
【０１１８】
本発明は上述した実施形態に限定されるものではなく、本発明の要旨を逸脱しない範囲内で種々の改良、変形が可能であることはいうまでもない。
【０１１９】
例えば、カラオケ楽曲の再生中に、ユーザが指定した所望のタイミングに所望のテロップをディスプレイ上に表示させてもよい。このとき、ユーザは、テロップの内容及び表示タイミングを、リモコン５００を用いて編集することができる。また、ユーザが作成されたテロップは、カメラ４１０と各ディスプレイ４２１、４２２とが向き合う位置関係にあっても、常に表示される。
これにより、ユーザ自身が作成したテロップは、カラオケ楽曲の制御フラグの状態による影響を受けないので、ユーザによって作成されたテロップが常に映し込まれたビデオ映像は、撮影後に、ユーザがビデオメッセージとしてユーザの目的に応じて配布する場合にも有効となる。
【０１２０】
また、上述した各フローチャートは単なる一例であり、該各フローチャートの処理と同等の結果を得ることできるものであれば、他のフローチャートによって処理を実現してもよい。
【０１２１】
また、上述したカラオケ装置、カラオケシステム、ＳＴＢに係る方法、該方法をコンピュータに実行させるためのプログラム、該プログラムを記録した記録媒体等としても本発明は実現可能である。
【図面の簡単な説明】
【０１２２】
【図１】カラオケシステムの構成の一例を示した図である。
【図２】コマンダ及びＳＴＢの内部構成（映像信号及び音声信号に関する部分）の模式図である。
【図３】コマンダとＳＴＢの処理の関係を示した図である。
【図４】リモコンの表示部の表示例を示した図である。
【図５】歌唱態様を示した図である。
【図６】背景映像及び歌詞テロップの表示例を示した図である。
【図７】カメラで撮影された映像の一例を示した図である。
【図８】カメラで撮影された映像に歌詞テロップを合成した映像の一例を示した図である。
【図９】背景映像及び歌詞テロップに歌唱者映像を合成した映像の一例を示した図である。
【図１０】コマンダ及びＳＴＢの内部構成（画像処理に関する部分）の模式図である。
【図１１】ＳＴＢとコマンダの処理の関係を示した図である。
【図１２】コマンダ側の処理のフローチャートである。
【図１３】撮影後処理（コマンダ側）のフローチャートである。
【図１４】ＳＴＢ側の処理のフローチャートである。
【図１５】撮影後処理（ＳＴＢ側）のフローチャートである。
【符号の説明】
【０１２３】
１００ カラオケ装置
２００ コマンダ
３００ ＳＴＢ
４１０ カメラ
４２１ ディスプレイ
４２２ ディスプレイ
４３０ マイク
４４０ アンプ
４５０ スピーカ
５００ リモコン
６００ サーバ
６１０ カラオケデータベース
６２０ 動画データベース
【特許請求の範囲】
【請求項１】
ディスプレイ、カメラ、記録手段、映像出力制御手段、音声出力手段、画像処理手段、とを備えるカラオケ装置であって、
前記音声出力手段は、カラオケデータに含まれる楽音情報に基いて音声信号を出力し、
前記記録手段は、前記カメラが撮影した映像信号を記録し、
前記画像処理手段は、前記カラオケデータに含まれる映像信号と前記カメラが撮影した映像信号とを比較し、該比較結果を結果信号として出力し、
前記映像出力制御手段は、
前記カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、
前記カラオケデータに対する制御フラグを取得し、
前記結果信号を受信し、
前記制御フラグ及び前記結果信号に基いて、前記ディスプレイに出力する映像信号を制御する、
ことを特徴とするカラオケ装置。
【請求項２】
前記カラオケデータには、背景映像及び歌詞テロップが含まれており、
前記映像出力制御手段は、前記制御フラグ及び前記結果信号に基いて、前記歌詞テロップ及び／または前記背景映像を前記ディスプレイに出力するか否かを制御する、
ことを特徴とする請求項１のカラオケ装置。
【請求項３】
前記結果信号は、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かを示すものである、
ことを特徴とする請求項１または請求項２のカラオケ装置。
【請求項４】
前記制御フラグは、前記カラオケデータに含まれる映像信号の記録を許可するか否かを示すものであり、
前記映像出力制御手段は、前記制御フラグ及び前記比較信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない、
ことを特徴とする請求項１乃至請求項３いずれかのカラオケ装置。
【請求項５】
コマンダ及びセットトップボックスからなるカラオケシステムにおいて、
前記セットトップボックスは、
カメラに接続され、
前記カメラが撮影した映像信号を記憶する記憶手段を有し、
前記コマンダは、
ディスプレイに接続され、
カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、
前記ディスプレイに出力された映像信号を、前記セットトップボックスに出力し、
さらに、
前記セットトップボックスは、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力し、
前記コマンダは、前記結果信号を受信したときに、
前記カラオケデータに対する制御フラグを取得し、
前記制御フラグ及び前記結果信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない、
ことを特徴とするカラオケシステム。
【請求項６】
ディスプレイに接続されかつ映像出力制御手段を有するコマンダに接続されるセットトップボックスにおいて、
カメラに接続され、
前記カメラが撮影した映像信号を記憶する記憶手段を有し、
前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として前記コマンダに出力する、
ことを特徴とするセットトップボックス。
【請求項１】
ディスプレイ、カメラ、記録手段、映像出力制御手段、音声出力手段、画像処理手段、とを備えるカラオケ装置であって、
前記音声出力手段は、カラオケデータに含まれる楽音情報に基いて音声信号を出力し、
前記記録手段は、前記カメラが撮影した映像信号を記録し、
前記画像処理手段は、前記カラオケデータに含まれる映像信号と前記カメラが撮影した映像信号とを比較し、該比較結果を結果信号として出力し、
前記映像出力制御手段は、
前記カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、
前記カラオケデータに対する制御フラグを取得し、
前記結果信号を受信し、
前記制御フラグ及び前記結果信号に基いて、前記ディスプレイに出力する映像信号を制御する、
ことを特徴とするカラオケ装置。
【請求項２】
前記カラオケデータには、背景映像及び歌詞テロップが含まれており、
前記映像出力制御手段は、前記制御フラグ及び前記結果信号に基いて、前記歌詞テロップ及び／または前記背景映像を前記ディスプレイに出力するか否かを制御する、
ことを特徴とする請求項１のカラオケ装置。
【請求項３】
前記結果信号は、前記カメラによって撮影された映像信号の中に前記カラオケデータに含まれる映像信号が含まれるか否かを示すものである、
ことを特徴とする請求項１または請求項２のカラオケ装置。
【請求項４】
前記制御フラグは、前記カラオケデータに含まれる映像信号の記録を許可するか否かを示すものであり、
前記映像出力制御手段は、前記制御フラグ及び前記比較信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない、
ことを特徴とする請求項１乃至請求項３いずれかのカラオケ装置。
【請求項５】
コマンダ及びセットトップボックスからなるカラオケシステムにおいて、
前記セットトップボックスは、
カメラに接続され、
前記カメラが撮影した映像信号を記憶する記憶手段を有し、
前記コマンダは、
ディスプレイに接続され、
カラオケデータに含まれる映像信号を前記ディスプレイに出力可能であり、
前記ディスプレイに出力された映像信号を、前記セットトップボックスに出力し、
さらに、
前記セットトップボックスは、前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として出力し、
前記コマンダは、前記結果信号を受信したときに、
前記カラオケデータに対する制御フラグを取得し、
前記制御フラグ及び前記結果信号に基いて、前記カラオケデータに含まれる映像信号が前記カメラによって撮影されており、かつ、当該映像信号の記録が禁止されていると判断したときに、当該禁止されている映像信号を前記ディスプレイに出力しない、
ことを特徴とするカラオケシステム。
【請求項６】
ディスプレイに接続されかつ映像出力制御手段を有するコマンダに接続されるセットトップボックスにおいて、
カメラに接続され、
前記カメラが撮影した映像信号を記憶する記憶手段を有し、
前記カメラが撮影した映像信号に前記コマンダが出力した映像信号が含まれるか否かを判断し、該判断結果を結果信号として前記コマンダに出力する、
ことを特徴とするセットトップボックス。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２０１０−３９００８（Ｐ２０１０−３９００８Ａ）
【公開日】平成２２年２月１８日（２０１０．２．１８）
【国際特許分類】
【出願番号】特願２００８−１９９０３８（Ｐ２００８−１９９０３８）
【出願日】平成２０年７月３１日（２００８．７．３１）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
【公開日】平成２２年２月１８日（２０１０．２．１８）
【国際特許分類】
【出願日】平成２０年７月３１日（２００８．７．３１）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
[ Back to top ]