音響再生装置
【課題】従来は、簡単な装置構成で、音響信号の再生音像を制御して、話者の台詞を聞き取り易くする方法が無かった。
【解決手段】映像表示装置に入力された音響信号に対して、台詞に相当する音声情報が含まれるか否かを台詞音声情報判定部で判定し、台詞に相当する音声情報があれば、その音声情報の再生音像位置を音像位置決定部で予め定められた再生音像位置に定位させる制御を行う音像位置制御部とを備える。
【解決手段】映像表示装置に入力された音響信号に対して、台詞に相当する音声情報が含まれるか否かを台詞音声情報判定部で判定し、台詞に相当する音声情報があれば、その音声情報の再生音像位置を音像位置決定部で予め定められた再生音像位置に定位させる制御を行う音像位置制御部とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、映像表示装置より取得した映像情報に付随する字幕情報、或いは映像の中央部に定位する台詞に相当する音声情報の変化に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御する音響再生装置に関するものである。
【背景技術】
【０００２】
ＤＶＤ（Digital Versatile Disc）、ＢＤ（Blu-ray Disc）等のパッケージメディアやデジタルテレビ放送には、音声の翻訳情報として字幕情報が搭載されている。この字幕情報は、主に他国語への翻訳を視覚的に補助する目的のために使用され、映像表示装置においては映像に登場する話者の台詞に同期して映像表示装置の画面に表示される仕組みとなっている。また、ＤＶＤ、ＢＤ等のパッケージメディアやデジタルテレビ放送では、５．１チャネル音声を代表に複数チャネルで構成される音響信号が用意されることもあり、映像に登場する話者の台詞は、映像の中央部に割り当てられるセンターチャネル信号に入っている。
【０００３】
装置外部から得た情報に基づいて音響効果を実現する例として、特許文献１に示される歌唱信号及び演奏信号の何れか一方、または両方の音像を制御する音像制御装置がある。この特許文献１では、カラオケ装置の歌唱信号及び演奏信号を、歌唱者の位置情報から作成した仮想音源位置の距離情報及び方向情報に基づいて音像を形成する方法について詳述している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平７−３１９４８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の音像制御装置は、音像を形成するのに距離情報と方向情報を使用し、その情報の取得方法には、歌唱者の位置を実測すると記載されている。歌唱者を本発明における映像に登場する話者と置き換えた場合は、話者の位置を特定するために映像情報の分析が必要になるが、映像情報から話者の距離情報と方向情報を特定するのは容易ではなく、結果として装置規模が大きくなってしまうという課題がある。
また、一般的な演奏においては、歌唱者が歌唱中に任意に移動することはあっても、演奏者は移動しない。よって、歌唱者が演奏者の位置と重なる可能性も考えられ、この場合は、歌唱信号が演奏信号によって聴き取り難くなってしまうという課題がある。歌唱者の音声情報を本発明における映像に登場する話者の台詞と置き換えた場合も同様であり、話者の台詞が別の音声情報に紛れて、聴き取り難くなってしまうという課題がある。
【０００６】
この発明は上記課題を解決するためになされたもので、映像に登場する話者の位置特定には、映像情報に付随する字幕情報、或いは映像の中央部に定位する台詞に相当する音声情報を利用することで映像情報を分析する手間を省き、また、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することで、視聴者にとって台詞の聞き取り易い音声を提供することを目的としている。
【課題を解決するための手段】
【０００７】
この発明に係る音響再生装置は、映像表示装置の表示映像に連動する入力音響信号に対して、台詞に相当する音声情報が含まれるか否かを判定する台詞音声情報判定部と、
スピーカから再生される台詞に相当する音声情報の再生音像位置を予め定められた位置に決定する音像位置決定部と、台詞に相当する音声情報の再生音像位置を前記音像位置決定部で決定された再生音像位置に定位させる制御を行う音像位置制御部とを備える。
【発明の効果】
【０００８】
この発明に係る音響再生装置によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形性が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【図面の簡単な説明】
【０００９】
【図１】この発明の実施の形態１に係る音響再生装置の機能ブロック構成を示した図である。
【図２】字幕情報と台詞音声情報判定部における判定結果を示した図である。
【図３】実施の形態１に係る音像位置決定部５の動作手順を示したフローチャートである。
【図４】音源位置Ａで発生させた音がダミーヘッドの左耳部及び右耳部に届く様子を示した図である。
【図５】発明の実施の形態１に係る音像位置制御部６の機能ブロック構成を示した図である。
【図６】発明の実施の形態２に係る音響再生装置の機能ブロック構成を示した図である。
【図７】センターチャネル信号と台詞音声情報判定部における判定結果を示した図である。
【図８】発明の実施の形態２に係る音像位置決定部Ａ１３の動作手順を示したフローチャートである。
【図９】発明の実施の形態２に係る音像位置制御部Ａ１４の機能ブロック構成を示した図である。
【図１０】発明の実施の形態３に係る音響再生装置の機能ブロック構成を示した図である。
【図１１】発明の実施の形態３に係る台詞音声情報判定部Ｂ１５の機能ブロック構成を示した図である。
【図１２】信号レベル差と台詞有無判定部１５６における判定結果を示した図である。
【図１３】発明の実施の形態３に係る音像位置決定部Ｂ１６の動作手順を示したフローチャートである。
【図１４】発明の実施の形態３に係る音像位置制御部Ｂ１７の動作手順を示したフローチャートである。
【発明を実施するための形態】
【００１０】
実施の形態１．
この発明の実施の形態１に係る音響再生装置は、スピーカから再生される台詞に相当する音声情報の再生音像位置を、映像表示装置より取得した映像情報に付随する字幕情報に連動して制御することで実現する。
その具体的な手順について図面を参照しながら説明する。
【００１１】
図１は、この発明の実施の形態１に係る音響再生装置の構成を示したものであり、音響再生装置の入力信号及び出力信号は、左チャネルと右チャネルの２チャネル音響信号の構成としている。図中の符号１は字幕情報の入力端子、２は左チャネル信号の入力端子、３は右チャネル信号の入力端子、４は台詞音声情報判定部、５は音像位置決定部、６は音像位置制御部、７は左チャネル信号の出力端子、８は右チャネル信号の出力端子である。
次に、これらの構成要素を用いて、音響再生装置の詳細を説明する。
【００１２】
入力端子１から入力される字幕情報とは、ＤＶＤやＢＤパッケージメディアに、音声の翻訳情報として搭載されている文字情報のことを指し、映像表示装置においては映像に登場する話者の台詞に同期して画面に表示される。また、デジタルテレビ放送においても、同様の情報が映像情報及び音声情報と一緒に電波で搬送されており、同じく映像表示装置においては映像に登場する話者の台詞に同期して画面に表示される。この字幕情報は、主にテキストの形式で情報多重されている。
ここで、字幕情報と台詞音声情報判定部４における判定結果との関係を図２に示す。台詞音声情報判定部４では、字幕のテキスト情報の有無に基づき、テキスト情報無しの場合は“台詞無し”、テキスト情報有りの場合は“台詞有り”と判定する。
【００１３】
次に、この判定結果を受けた音像位置決定部５の動作について、処理フローチャートを用いながら説明する。
図３は、音像位置決定部５の動作手順を、処理フローチャートにて示したものであり、５ａ、５ｃ、５ｄは処理ブロックであり、５ｂは条件分岐ブロックである。
【００１４】
処理ブロック５ａにおいては、台詞音声情報判定部４から台詞音声情報判定結果を取得する。
次に、分岐ブロック５ｂにおいて、台詞音声情報判定結果が“台詞無し”かの判定を行う。以降の処理は分岐ブロック５ｂにおける判定結果により異なる。
【００１５】
分岐ブロック５ｂにおいて、判定結果が“台詞無し”であった場合は、処理ブロック５ｃに進む。
処理ブロック５ｃにおいては、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号の再生音像位置を制御しない指示を音像位置制御部６に送出して、処理を終了する。
【００１６】
分岐ブロック５ｂにおいて、判定結果が“台詞無し”ではなかった場合は、判定結果が“台詞有り”であると見なし、処理ブロック５ｄに進む。
音響処理ブロック５ｄにおいては、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号の再生音像位置を、映像表示装置から見て視聴者側に定位させる制御を行う指示を音像位置制御部６に送出して、処理を終了する。
以上が音像位置決定部５の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００１７】
音像位置制御部６は、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号に対して、音像位置決定部５からの指示内容に従って再生音像位置の制御処理を行った後、出力端子７及び出力端子８を経由して左右のスピーカから音声出力される。
ここで、音像位置制御部６の動作について補足しておく。音像位置制御部６における再生音像位置の制御処理の内容は、再生音像位置を映像表示装置から見て視聴者側に定位させる処理であれば何でも良い。ここでは、その一例として、再生音像位置を映像表示装置から見て視聴者側に定位させる処理を用意しておき、この処理を行わないものを含めて、２つの動作モードを切り替える方法について、図４、図５を用いて説明する。
【００１８】
図４は、映像表示装置の音源位置を視聴者側に移動した音源位置Ａで発生させた音が、ダミーヘッドの左耳部及び右耳部に届く様子を示したものである。ここで、“映像表示装置の音源位置”は映像表示装置に付随する左右のスピーカ位置、“音源位置Ａ”は視聴者から見て映像表示装置の手前の位置にある左右のスピーカ位置である。また、ＨＡＬは音源位置Ａの左側で鳴動させた音に対する左耳部の頭部伝達関数、ＨＡＲは音源位置Ａの右側で鳴動させた音に対する右耳部の頭部伝達関数である。
【００１９】
音源位置Ａの左側に音像を定位させる頭部伝達関数を作成するには、例えば、スピーカを用いて音源位置Ａの左側からパルス信号を発生させ、ダミーヘッドの左耳部に予め設置しておいたマイクで集音してインパルス応答を求めればよい。なお、音源位置Ａの右側での頭部伝達関数も同様にして作成すればよい。
【００２０】
図５は、音像位置制御部６の詳細構成を示したものである。図５において、記号６１、６２、６３、６４はスイッチ、ＨＡＬ、ＨＡＲは、図４に示した頭部伝達関数である。次に、音像位置制御部６の動作について説明する。
【００２１】
音像位置制御部６は、音像位置決定部５からの指示に従って処理内容を変更する。音像位置決定部５からの指示が、再生音像位置を制御しない指示内容であった場合は、スイッチ６１とスイッチ６３を直接つなぎ、また、スイッチ６２とスイッチ６４を直接つないで、左チャネル信号及び右チャネル信号が、そのまま出力されるようにする。
【００２２】
一方、音像位置決定部５からの制御信号が、再生音像位置を映像表示装置から見て視聴者側に定位させる制御を行う指示内容であった場合は、スイッチ６１とスイッチ６３を頭部伝達関数ＨＡＬにつなぎ、また、スイッチ６２とスイッチ６４を頭部伝達関数ＨＡＲにつないで、左チャネル信号及び右チャネル信号に対して、再生音像を映像表示装置から見て視聴者側に定位させる頭部伝達関数の処理を行い、処理後の信号が出力されるようにする。
以上がこの発明の実施の形態１の詳細説明である。
【００２３】
なお、この実施の形態１に係る説明においては、図１に示した音響再生装置の構成として、音響再生装置の入力信号及び出力信号は、左チャネルと右チャネルの２チャネル音響信号の構成としていたが、この構成に限定するものではなく、入力及び出力するチャネル数を複数チャネルの構成にしてもよいことを付け加えておく。
【００２４】
以上のように、この実施の形態１によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形性が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【００２５】
実施の形態２．
この発明の実施の形態２に係る音響再生装置は、スピーカから再生される台詞に相当する音声情報の再生音像位置を、５．１チャネル音声など複数チャネルで構成される音響信号のうち、センターチャネル信号に収録される台詞に相当する音声情報に連動して制御することで実現する。
その具体的な手順について図面を参照しながら説明する。
【００２６】
図６は、この発明の実施の形態２に係る音響再生装置の構成を示したものであり、音響再生装置の入力信号及び出力信号は、左チャネルダウンミックス信号と右チャネルダウンミックス信号の２チャネル音響信号の構成としている。ここでいう左チャネルダウンミックス信号及び右チャネルダウンミックス信号とは、５．１チャネル音声など複数チャネルで構成される音響信号を、左右の２チャネルにダウンミックス処理した音響信号のことを指す。
図中の符号９は左チャネルダウンミックス信号の入力端子、１０は右チャネルダウンミックス信号の入力端子、１１はセンターチャネル信号の入力端子、１２は台詞音声情報判定部Ａ、１３は音像位置決定部Ａ、１４は音像位置制御部Ａであり、符号７、８は、発明の実施の形態１において、図１を用いて説明した構成要素と同一であることから説明を割愛する。
次に、これらの構成要素を用いて、音響再生装置の詳細を説明する。
【００２７】
入力端子１１から入力されるセンターチャネル信号とは、ＤＶＤ、ＢＤパッケージメディアやデジタルテレビ放送において、５．１チャネル音声を代表に複数チャネルで構成される音響信号のうち、センターチャネル信号のことを指す。センターチャネル信号は、映像の中央部から再生されるように作り込まれており、映像に登場する話者の台詞は、この信号に割り当てられている。
ここで、センターチャネル信号と台詞音声情報判定部Ａ１２における判定結果との関係を図７に示す。台詞音声情報判定部Ａ１２では、センターチャネル信号の有音・無音状態を判定し、その結果が無音の場合は“台詞無し”、有音の場合は“台詞有り”と判定する。ここで言う有音とは、音声信号成分が含まれる状態のことを指し、また無音とは、音声信号成分が含まれない状態のことを指す。
【００２８】
次に、この判定結果を受けた音像位置決定部Ａ１３の動作について、処理フローチャートを用いながら説明する。
図８は、音像位置決定部Ａ１３の動作手順を、処理フローチャートにて示したものであり、１３ａ、１３ｃ、１３ｄは処理ブロックであり、１３ｂは条件分岐ブロックである。
【００２９】
処理ブロック１３ａにおいては、台詞音声情報判定部Ａ１２から台詞音声情報判定結果を取得する。
次に、分岐ブロック１３ｂにおいて、台詞音声情報判定結果が“台詞無し”かの判定を行う。以降の処理は分岐ブロック１３ｂにおける判定結果により異なる。
【００３０】
分岐ブロック１３ｂにおいて、判定結果が“台詞無し”であった場合は、処理ブロック１３ｃに進む。
処理ブロック１３ｃにおいては、入力端子９及び入力端子１０から入力された左チャネルダウンミックス信号及び右チャネルダウンミックス信号の再生音像位置を制御しない指示を音像位置制御部Ａ１４に送出して、処理を終了する。
【００３１】
分岐ブロック１３ｂにおいて、判定結果が“台詞無し”ではなかった場合は、判定結果が“台詞有り”であると見なし、処理ブロック１３ｄに進む。
処理ブロック１３ｄにおいては、入力端子９及び入力端子１０から入力された左チャネルダウンミックス信号及び右チャネルダウンミックス信号の再生音像位置を、映像表示装置から見て視聴者側に定位させる制御を行う指示を音像位置制御部Ａ１４に送出して、処理を終了する。
以上が音像位置決定部Ａ１３の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００３２】
音像位置制御部Ａ１４は、入力端子９及び入力端子１０から入力された左チャネルダウンミックス信号及び右チャネルダウンミックス信号に対して、音像位置決定部Ａ１３からの指示内容に従って再生音像位置の制御処理を行った後、出力端子７及び出力端子８を経由して左右のスピーカから音声出力される。
ここで、音像位置制御部Ａ１４の動作について補足しておく。音像位置制御部Ａ１４における再生音像位置の制御処理の内容は、再生音像を映像表示装置から見て視聴者側に定位させる処理であれば何でも良い。ここでは、その一例として、再生音像位置を映像表示装置から見て視聴者側に定位させる処理を用意しておき、この処理を行わないものを含めて、２つの動作モードを切り替える方法について、図９を用いて説明する。
【００３３】
図９は、音像位置制御部Ａ１４の詳細構成を示したものである。図９において、符号１４１、１４２、１４３、１４４はスイッチ、ＨＡＬ、ＨＡＲは、発明の実施の形態１において、図４を用いて詳しく説明を行った頭部伝達関数と同一である。次に、音像位置制御部Ａ１４の動作について説明する。
【００３４】
音像位置制御部Ａ１４は、音像位置決定部Ａ１３からの指示に従って処理内容を変更する。音像位置決定部Ａ１３からの指示が、再生音像位置を制御しない指示内容であった場合は、スイッチ１４１とスイッチ１４３を直接つなぎ、また、スイッチ１４２とスイッチ１４４を直接つないで、左チャネルダウンミックス信号及び右チャネルダウンミックス信号が、そのまま出力されるようにする。
【００３５】
一方、音像位置決定部Ａ１３からの制御信号が、再生音像位置を映像表示装置から見て視聴者側に定位させる制御を行う指示内容であった場合は、スイッチ１４１とスイッチ１４３を頭部伝達関数ＨＡＬにつなぎ、また、スイッチ１４２とスイッチ１４４を頭部伝達関数ＨＡＲにつないで、左チャネルダウンミックス信号及び右チャネルダウンミックス信号に対して、再生音像位置を映像表示装置から見て視聴者側に定位させる頭部伝達関数の処理を行い、処理後の信号が出力されるようにする。
以上がこの発明の実施の形態２の詳細説明である。
【００３６】
なお、この実施の形態２に係る説明においては、図６に示した音響再生装置の構成として、音響再生装置の入力信号及び出力信号は、左チャネルダウンミックス信号と右チャネルダウンミックス信号の２チャネル音響信号の構成としていたが、この構成に限定するものではなく、入力及び出力する音響信号をダウンミックスしない複数チャネルの音響信号の構成にしてもよいことを付け加えておく。
【００３７】
以上のように、この実施の形態２によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形成が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【００３８】
実施の形態３．
この発明の実施の形態３に係る音響再生装置は、スピーカから再生される台詞に相当する音声情報の再生音像位置を、映像の中央部に定位する台詞に相当する音声情報に連動して制御することで実現する。
その具体的な手順について図面を参照しながら説明する。
【００３９】
図１０は、この発明の実施の形態３に係る音響再生装置の構成を示したものであり、音響再生装置の入力信号及び出力信号は、左チャネル信号と右チャネル信号の２チャネル音響信号の構成としている。
図中の符号１５は台詞音声情報判定部Ｂ、１６は音像位置決定部Ｂ、１７は音像位置制御部Ｂであり、符号２、３、７、８は、発明の実施の形態１において、図１を用いて説明した構成要素と同一であることから説明を割愛する。
次に、これらの構成要素を用いて、音響再生装置の詳細を説明する。
【００４０】
入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号は、台詞音声情報判定部Ｂ１５に入力される。ここで、台詞音声情報判定部Ｂ１５の動作について、図１１を用いて詳しく説明する。
図１１は台詞音声情報判定部Ｂ１５の機能ブロック構成を示した図であり、図中の符号１５１は加算器、１５２は減算器、１５３及び１５４は利得調整器、１５５は信号レベル差計算部、１５６は台詞有無判定部である。次に、これらの構成要素を用いて、台詞音声情報判定部Ｂ１５の動作について説明する。
【００４１】
加算器１５１においては、入力端子２からの左チャネル信号と入力端子３からの右チャネル信号の加算を行い、利得調整器１５３において信号レベルを１／２に調整した後、信号レベル差判定部１５５に渡す。この過程で生成された信号は、左チャネル信号と右チャネル信号の和信号となり、左チャネル信号及び右チャネル信号に同じ信号成分が多く含まれる場合は、信号レベルが大きくなるという特徴がある。
【００４２】
減算器１５２においては、入力端子２からの左チャネル信号から入力端子３からの右チャネル信号の減算を行い、利得調整器１５４において信号レベルを１／２に調整した後、信号レベル差判定部１５５に渡す。この過程で生成された信号は、左チャネル信号と右チャネル信号の差信号となり、左チャネル信号及び右チャネル信号に異なった信号成分が多く含まれる場合は、信号レベルが大きくなるという特徴がある。
【００４３】
信号レベル差計算部１５５では、和信号のレベル計算と差信号のレベル計算を行い、和信号と差信号の信号レベル差（和信号−差信号）を算出して、台詞有無判定部１５６に渡す。
最後に、台詞有無判定部１５６においては、信号レベル差に基づいて台詞に相当する音声情報があるか否かを判定する。
【００４４】
ここで着目すべき点としては、一般的に、話者の台詞は映像の中央に定位させるのが好ましいことから、２チャネル構成の音響信号においては、音声信号の収録時に台詞に相当する音声情報を左右チャネルに等分割で割り当てている点である。このことは、台詞に相当する音声情報がある場合は、和信号のレベルが大きくなり、逆に差信号のレベルが小さくなることを意味する。
【００４５】
ここで、信号レベル差と台詞有無判定部１５６における判定結果との関係を図１２に示す。台詞有無判定部１５６では、信号レベル差が小さい、例えばデシベル換算で２０ｄＢ未満の場合は “台詞無し”、逆に信号レベル差が大きい、例えばデシベル換算で２０ｄＢ以上の場合は“台詞有り”と判定し、その結果を音像位置決定部Ｂ１６に渡す。
以上が台詞音声情報判定部Ｂ１５の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００４６】
次に、この判定結果を受けた音像位置決定部Ｂ１６の動作について、処理フローチャートを用いながら説明する。
図１３は、音像位置決定部Ｂ１６の動作手順を、処理フローチャートにて示したものであり、１６ａ、１６ｃ、１６ｄは処理ブロックであり、１６ｂは条件分岐ブロックである。
【００４７】
処理ブロック１６ａにおいては、台詞音声情報判定部Ｂ１５から台詞音声情報判定結果を取得する。
次に、分岐ブロック１６ｂにおいて、台詞音声情報判定結果が“台詞無し”かの判定を行う。以降の処理は分岐ブロック１６ｂにおける判定結果により異なる。
【００４８】
分岐ブロック１６ｂにおいて、判定結果が“台詞無し”であった場合は、処理ブロック１６ｃに進む。
処理ブロック１６ｃにおいては、入力端子１及び入力端子２から入力された左チャネル信号及び右チャネル信号の再生音像位置を制御しない指示を音像位置制御部Ｂ１７に送出して、処理を終了する。
【００４９】
分岐ブロック１６ｂにおいて、判定結果が“台詞無し”ではなかった場合は、判定結果が“台詞有り”であると見なし、処理ブロック１６ｄに進む。
処理ブロック１６ｄにおいては、入力端子１及び入力端子２から入力された左チャネル信号及び右チャネル信号の再生音像位置を、映像表示装置から見て視聴者側に定位させる制御を行う指示を音像位置制御部Ｂ１７に送出して、処理を終了する。
以上が音像位置決定部Ｂ１６の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００５０】
音像位置制御部Ｂ１７は、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号に対して、音像位置決定部Ｂ１６からの指示内容に従って再生音像位置の制御処理を行った後、出力端子７及び出力端子８を経由して左右のスピーカから音声出力される。
ここで、音像位置制御部Ｂ１７の動作について補足しておく。音像位置制御部Ｂ１７における再生音像位置の制御処理の内容は、再生音像位置を映像表示装置から見て視聴者側に定位させる処理であれば何でも良い。ここでは、その一例として、再生音像位置を映像表示装置から見て視聴者側に定位させる処理を用意しておき、この処理を行わないものを含めて、２つの動作モードを切り替える方法について、図１４を用いて説明する。
【００５１】
図１４は、音像位置制御部Ｂ１７の詳細構成を示したものである。図１４において、符号１７１、１７２、１７３、１７４はスイッチ、ＨＡＬ、ＨＡＲは、発明の実施の形態１において、図４を用いて詳しく説明を行った頭部伝達関数と同一である。次に、音像位置制御部Ｂ１７の動作について説明する。
【００５２】
音像位置制御部Ｂ１７は、音像位置決定部Ｂ１６からの指示に従って処理内容を変更する。音像位置決定部Ｂ１６からの指示が、再生音像位置を制御しない指示内容であった場合は、スイッチ１７１とスイッチ１７３を直接つなぎ、また、スイッチ１７２とスイッチ１７４を直接つないで、左チャネル信号及び右チャネル信号が、そのまま出力されるようにする。
【００５３】
一方、音像位置決定部Ｂ１６からの制御信号が、再生音像位置を映像表示装置から見て視聴者側に定位させる制御を行う指示内容であった場合は、スイッチ１７１とスイッチ１７３を頭部伝達関数ＨＡＬにつなぎ、また、スイッチ１７２とスイッチ１７４を頭部伝達関数ＨＡＲにつないで、左チャネル信号及び右チャネル信号に対して、再生音像位置を映像表示装置から見て視聴者側に定位させる頭部伝達関数の処理を行い、処理後の信号が出力されるようにする。
以上がこの発明の実施の形態３の詳細説明である。
【００５４】
以上のように、この実施の形態３によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形成が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【産業上の利用可能性】
【００５５】
この発明の音響再生装置は、ＤＶＤ、ＢＤ等のパッケージメディア再生装置の音響再生装置やデジタルテレビジョン受像機の音響再生装置に利用される可能性がある。
【符号の説明】
【００５６】
１；字幕情報の入力端子、２；左チャネル信号の入力端子、３；右チャネル信号の入力端子、４；台詞音声情報判定部、５；音像位置決定部、６；音像位置制御部、７；左スピーカへの出力端子、８；右スピーカへの出力端子、９；左チャネルダウンミックス信号の入力端子、１０；右チャネルダウンミックス信号の入力端子、１１；センターチャネル信号の入力端子、１２；台詞音声情報判定部Ａ、１３；音像位置決定部Ａ、１４；音像位置制御部Ａ、１５；台詞音声情報判定部Ｂ、１６；音像位置決定部Ｂ、１７；音像位置制御部Ｂ、６１，６２，６３，６４；スイッチ、１４１，１４２，１４３，１４４；スイッチ、１５１；加算器、１５２；減算器、１５３，１５４；利得調整器、１５５；信号レベル差計算部、１５６；台詞有無判定部、１７１，１７２，１７３，１７４；スイッチ。
【技術分野】
【０００１】
この発明は、映像表示装置より取得した映像情報に付随する字幕情報、或いは映像の中央部に定位する台詞に相当する音声情報の変化に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御する音響再生装置に関するものである。
【背景技術】
【０００２】
ＤＶＤ（Digital Versatile Disc）、ＢＤ（Blu-ray Disc）等のパッケージメディアやデジタルテレビ放送には、音声の翻訳情報として字幕情報が搭載されている。この字幕情報は、主に他国語への翻訳を視覚的に補助する目的のために使用され、映像表示装置においては映像に登場する話者の台詞に同期して映像表示装置の画面に表示される仕組みとなっている。また、ＤＶＤ、ＢＤ等のパッケージメディアやデジタルテレビ放送では、５．１チャネル音声を代表に複数チャネルで構成される音響信号が用意されることもあり、映像に登場する話者の台詞は、映像の中央部に割り当てられるセンターチャネル信号に入っている。
【０００３】
装置外部から得た情報に基づいて音響効果を実現する例として、特許文献１に示される歌唱信号及び演奏信号の何れか一方、または両方の音像を制御する音像制御装置がある。この特許文献１では、カラオケ装置の歌唱信号及び演奏信号を、歌唱者の位置情報から作成した仮想音源位置の距離情報及び方向情報に基づいて音像を形成する方法について詳述している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平７−３１９４８７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の音像制御装置は、音像を形成するのに距離情報と方向情報を使用し、その情報の取得方法には、歌唱者の位置を実測すると記載されている。歌唱者を本発明における映像に登場する話者と置き換えた場合は、話者の位置を特定するために映像情報の分析が必要になるが、映像情報から話者の距離情報と方向情報を特定するのは容易ではなく、結果として装置規模が大きくなってしまうという課題がある。
また、一般的な演奏においては、歌唱者が歌唱中に任意に移動することはあっても、演奏者は移動しない。よって、歌唱者が演奏者の位置と重なる可能性も考えられ、この場合は、歌唱信号が演奏信号によって聴き取り難くなってしまうという課題がある。歌唱者の音声情報を本発明における映像に登場する話者の台詞と置き換えた場合も同様であり、話者の台詞が別の音声情報に紛れて、聴き取り難くなってしまうという課題がある。
【０００６】
この発明は上記課題を解決するためになされたもので、映像に登場する話者の位置特定には、映像情報に付随する字幕情報、或いは映像の中央部に定位する台詞に相当する音声情報を利用することで映像情報を分析する手間を省き、また、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することで、視聴者にとって台詞の聞き取り易い音声を提供することを目的としている。
【課題を解決するための手段】
【０００７】
この発明に係る音響再生装置は、映像表示装置の表示映像に連動する入力音響信号に対して、台詞に相当する音声情報が含まれるか否かを判定する台詞音声情報判定部と、
スピーカから再生される台詞に相当する音声情報の再生音像位置を予め定められた位置に決定する音像位置決定部と、台詞に相当する音声情報の再生音像位置を前記音像位置決定部で決定された再生音像位置に定位させる制御を行う音像位置制御部とを備える。
【発明の効果】
【０００８】
この発明に係る音響再生装置によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形性が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【図面の簡単な説明】
【０００９】
【図１】この発明の実施の形態１に係る音響再生装置の機能ブロック構成を示した図である。
【図２】字幕情報と台詞音声情報判定部における判定結果を示した図である。
【図３】実施の形態１に係る音像位置決定部５の動作手順を示したフローチャートである。
【図４】音源位置Ａで発生させた音がダミーヘッドの左耳部及び右耳部に届く様子を示した図である。
【図５】発明の実施の形態１に係る音像位置制御部６の機能ブロック構成を示した図である。
【図６】発明の実施の形態２に係る音響再生装置の機能ブロック構成を示した図である。
【図７】センターチャネル信号と台詞音声情報判定部における判定結果を示した図である。
【図８】発明の実施の形態２に係る音像位置決定部Ａ１３の動作手順を示したフローチャートである。
【図９】発明の実施の形態２に係る音像位置制御部Ａ１４の機能ブロック構成を示した図である。
【図１０】発明の実施の形態３に係る音響再生装置の機能ブロック構成を示した図である。
【図１１】発明の実施の形態３に係る台詞音声情報判定部Ｂ１５の機能ブロック構成を示した図である。
【図１２】信号レベル差と台詞有無判定部１５６における判定結果を示した図である。
【図１３】発明の実施の形態３に係る音像位置決定部Ｂ１６の動作手順を示したフローチャートである。
【図１４】発明の実施の形態３に係る音像位置制御部Ｂ１７の動作手順を示したフローチャートである。
【発明を実施するための形態】
【００１０】
実施の形態１．
この発明の実施の形態１に係る音響再生装置は、スピーカから再生される台詞に相当する音声情報の再生音像位置を、映像表示装置より取得した映像情報に付随する字幕情報に連動して制御することで実現する。
その具体的な手順について図面を参照しながら説明する。
【００１１】
図１は、この発明の実施の形態１に係る音響再生装置の構成を示したものであり、音響再生装置の入力信号及び出力信号は、左チャネルと右チャネルの２チャネル音響信号の構成としている。図中の符号１は字幕情報の入力端子、２は左チャネル信号の入力端子、３は右チャネル信号の入力端子、４は台詞音声情報判定部、５は音像位置決定部、６は音像位置制御部、７は左チャネル信号の出力端子、８は右チャネル信号の出力端子である。
次に、これらの構成要素を用いて、音響再生装置の詳細を説明する。
【００１２】
入力端子１から入力される字幕情報とは、ＤＶＤやＢＤパッケージメディアに、音声の翻訳情報として搭載されている文字情報のことを指し、映像表示装置においては映像に登場する話者の台詞に同期して画面に表示される。また、デジタルテレビ放送においても、同様の情報が映像情報及び音声情報と一緒に電波で搬送されており、同じく映像表示装置においては映像に登場する話者の台詞に同期して画面に表示される。この字幕情報は、主にテキストの形式で情報多重されている。
ここで、字幕情報と台詞音声情報判定部４における判定結果との関係を図２に示す。台詞音声情報判定部４では、字幕のテキスト情報の有無に基づき、テキスト情報無しの場合は“台詞無し”、テキスト情報有りの場合は“台詞有り”と判定する。
【００１３】
次に、この判定結果を受けた音像位置決定部５の動作について、処理フローチャートを用いながら説明する。
図３は、音像位置決定部５の動作手順を、処理フローチャートにて示したものであり、５ａ、５ｃ、５ｄは処理ブロックであり、５ｂは条件分岐ブロックである。
【００１４】
処理ブロック５ａにおいては、台詞音声情報判定部４から台詞音声情報判定結果を取得する。
次に、分岐ブロック５ｂにおいて、台詞音声情報判定結果が“台詞無し”かの判定を行う。以降の処理は分岐ブロック５ｂにおける判定結果により異なる。
【００１５】
分岐ブロック５ｂにおいて、判定結果が“台詞無し”であった場合は、処理ブロック５ｃに進む。
処理ブロック５ｃにおいては、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号の再生音像位置を制御しない指示を音像位置制御部６に送出して、処理を終了する。
【００１６】
分岐ブロック５ｂにおいて、判定結果が“台詞無し”ではなかった場合は、判定結果が“台詞有り”であると見なし、処理ブロック５ｄに進む。
音響処理ブロック５ｄにおいては、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号の再生音像位置を、映像表示装置から見て視聴者側に定位させる制御を行う指示を音像位置制御部６に送出して、処理を終了する。
以上が音像位置決定部５の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００１７】
音像位置制御部６は、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号に対して、音像位置決定部５からの指示内容に従って再生音像位置の制御処理を行った後、出力端子７及び出力端子８を経由して左右のスピーカから音声出力される。
ここで、音像位置制御部６の動作について補足しておく。音像位置制御部６における再生音像位置の制御処理の内容は、再生音像位置を映像表示装置から見て視聴者側に定位させる処理であれば何でも良い。ここでは、その一例として、再生音像位置を映像表示装置から見て視聴者側に定位させる処理を用意しておき、この処理を行わないものを含めて、２つの動作モードを切り替える方法について、図４、図５を用いて説明する。
【００１８】
図４は、映像表示装置の音源位置を視聴者側に移動した音源位置Ａで発生させた音が、ダミーヘッドの左耳部及び右耳部に届く様子を示したものである。ここで、“映像表示装置の音源位置”は映像表示装置に付随する左右のスピーカ位置、“音源位置Ａ”は視聴者から見て映像表示装置の手前の位置にある左右のスピーカ位置である。また、ＨＡＬは音源位置Ａの左側で鳴動させた音に対する左耳部の頭部伝達関数、ＨＡＲは音源位置Ａの右側で鳴動させた音に対する右耳部の頭部伝達関数である。
【００１９】
音源位置Ａの左側に音像を定位させる頭部伝達関数を作成するには、例えば、スピーカを用いて音源位置Ａの左側からパルス信号を発生させ、ダミーヘッドの左耳部に予め設置しておいたマイクで集音してインパルス応答を求めればよい。なお、音源位置Ａの右側での頭部伝達関数も同様にして作成すればよい。
【００２０】
図５は、音像位置制御部６の詳細構成を示したものである。図５において、記号６１、６２、６３、６４はスイッチ、ＨＡＬ、ＨＡＲは、図４に示した頭部伝達関数である。次に、音像位置制御部６の動作について説明する。
【００２１】
音像位置制御部６は、音像位置決定部５からの指示に従って処理内容を変更する。音像位置決定部５からの指示が、再生音像位置を制御しない指示内容であった場合は、スイッチ６１とスイッチ６３を直接つなぎ、また、スイッチ６２とスイッチ６４を直接つないで、左チャネル信号及び右チャネル信号が、そのまま出力されるようにする。
【００２２】
一方、音像位置決定部５からの制御信号が、再生音像位置を映像表示装置から見て視聴者側に定位させる制御を行う指示内容であった場合は、スイッチ６１とスイッチ６３を頭部伝達関数ＨＡＬにつなぎ、また、スイッチ６２とスイッチ６４を頭部伝達関数ＨＡＲにつないで、左チャネル信号及び右チャネル信号に対して、再生音像を映像表示装置から見て視聴者側に定位させる頭部伝達関数の処理を行い、処理後の信号が出力されるようにする。
以上がこの発明の実施の形態１の詳細説明である。
【００２３】
なお、この実施の形態１に係る説明においては、図１に示した音響再生装置の構成として、音響再生装置の入力信号及び出力信号は、左チャネルと右チャネルの２チャネル音響信号の構成としていたが、この構成に限定するものではなく、入力及び出力するチャネル数を複数チャネルの構成にしてもよいことを付け加えておく。
【００２４】
以上のように、この実施の形態１によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形性が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【００２５】
実施の形態２．
この発明の実施の形態２に係る音響再生装置は、スピーカから再生される台詞に相当する音声情報の再生音像位置を、５．１チャネル音声など複数チャネルで構成される音響信号のうち、センターチャネル信号に収録される台詞に相当する音声情報に連動して制御することで実現する。
その具体的な手順について図面を参照しながら説明する。
【００２６】
図６は、この発明の実施の形態２に係る音響再生装置の構成を示したものであり、音響再生装置の入力信号及び出力信号は、左チャネルダウンミックス信号と右チャネルダウンミックス信号の２チャネル音響信号の構成としている。ここでいう左チャネルダウンミックス信号及び右チャネルダウンミックス信号とは、５．１チャネル音声など複数チャネルで構成される音響信号を、左右の２チャネルにダウンミックス処理した音響信号のことを指す。
図中の符号９は左チャネルダウンミックス信号の入力端子、１０は右チャネルダウンミックス信号の入力端子、１１はセンターチャネル信号の入力端子、１２は台詞音声情報判定部Ａ、１３は音像位置決定部Ａ、１４は音像位置制御部Ａであり、符号７、８は、発明の実施の形態１において、図１を用いて説明した構成要素と同一であることから説明を割愛する。
次に、これらの構成要素を用いて、音響再生装置の詳細を説明する。
【００２７】
入力端子１１から入力されるセンターチャネル信号とは、ＤＶＤ、ＢＤパッケージメディアやデジタルテレビ放送において、５．１チャネル音声を代表に複数チャネルで構成される音響信号のうち、センターチャネル信号のことを指す。センターチャネル信号は、映像の中央部から再生されるように作り込まれており、映像に登場する話者の台詞は、この信号に割り当てられている。
ここで、センターチャネル信号と台詞音声情報判定部Ａ１２における判定結果との関係を図７に示す。台詞音声情報判定部Ａ１２では、センターチャネル信号の有音・無音状態を判定し、その結果が無音の場合は“台詞無し”、有音の場合は“台詞有り”と判定する。ここで言う有音とは、音声信号成分が含まれる状態のことを指し、また無音とは、音声信号成分が含まれない状態のことを指す。
【００２８】
次に、この判定結果を受けた音像位置決定部Ａ１３の動作について、処理フローチャートを用いながら説明する。
図８は、音像位置決定部Ａ１３の動作手順を、処理フローチャートにて示したものであり、１３ａ、１３ｃ、１３ｄは処理ブロックであり、１３ｂは条件分岐ブロックである。
【００２９】
処理ブロック１３ａにおいては、台詞音声情報判定部Ａ１２から台詞音声情報判定結果を取得する。
次に、分岐ブロック１３ｂにおいて、台詞音声情報判定結果が“台詞無し”かの判定を行う。以降の処理は分岐ブロック１３ｂにおける判定結果により異なる。
【００３０】
分岐ブロック１３ｂにおいて、判定結果が“台詞無し”であった場合は、処理ブロック１３ｃに進む。
処理ブロック１３ｃにおいては、入力端子９及び入力端子１０から入力された左チャネルダウンミックス信号及び右チャネルダウンミックス信号の再生音像位置を制御しない指示を音像位置制御部Ａ１４に送出して、処理を終了する。
【００３１】
分岐ブロック１３ｂにおいて、判定結果が“台詞無し”ではなかった場合は、判定結果が“台詞有り”であると見なし、処理ブロック１３ｄに進む。
処理ブロック１３ｄにおいては、入力端子９及び入力端子１０から入力された左チャネルダウンミックス信号及び右チャネルダウンミックス信号の再生音像位置を、映像表示装置から見て視聴者側に定位させる制御を行う指示を音像位置制御部Ａ１４に送出して、処理を終了する。
以上が音像位置決定部Ａ１３の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００３２】
音像位置制御部Ａ１４は、入力端子９及び入力端子１０から入力された左チャネルダウンミックス信号及び右チャネルダウンミックス信号に対して、音像位置決定部Ａ１３からの指示内容に従って再生音像位置の制御処理を行った後、出力端子７及び出力端子８を経由して左右のスピーカから音声出力される。
ここで、音像位置制御部Ａ１４の動作について補足しておく。音像位置制御部Ａ１４における再生音像位置の制御処理の内容は、再生音像を映像表示装置から見て視聴者側に定位させる処理であれば何でも良い。ここでは、その一例として、再生音像位置を映像表示装置から見て視聴者側に定位させる処理を用意しておき、この処理を行わないものを含めて、２つの動作モードを切り替える方法について、図９を用いて説明する。
【００３３】
図９は、音像位置制御部Ａ１４の詳細構成を示したものである。図９において、符号１４１、１４２、１４３、１４４はスイッチ、ＨＡＬ、ＨＡＲは、発明の実施の形態１において、図４を用いて詳しく説明を行った頭部伝達関数と同一である。次に、音像位置制御部Ａ１４の動作について説明する。
【００３４】
音像位置制御部Ａ１４は、音像位置決定部Ａ１３からの指示に従って処理内容を変更する。音像位置決定部Ａ１３からの指示が、再生音像位置を制御しない指示内容であった場合は、スイッチ１４１とスイッチ１４３を直接つなぎ、また、スイッチ１４２とスイッチ１４４を直接つないで、左チャネルダウンミックス信号及び右チャネルダウンミックス信号が、そのまま出力されるようにする。
【００３５】
一方、音像位置決定部Ａ１３からの制御信号が、再生音像位置を映像表示装置から見て視聴者側に定位させる制御を行う指示内容であった場合は、スイッチ１４１とスイッチ１４３を頭部伝達関数ＨＡＬにつなぎ、また、スイッチ１４２とスイッチ１４４を頭部伝達関数ＨＡＲにつないで、左チャネルダウンミックス信号及び右チャネルダウンミックス信号に対して、再生音像位置を映像表示装置から見て視聴者側に定位させる頭部伝達関数の処理を行い、処理後の信号が出力されるようにする。
以上がこの発明の実施の形態２の詳細説明である。
【００３６】
なお、この実施の形態２に係る説明においては、図６に示した音響再生装置の構成として、音響再生装置の入力信号及び出力信号は、左チャネルダウンミックス信号と右チャネルダウンミックス信号の２チャネル音響信号の構成としていたが、この構成に限定するものではなく、入力及び出力する音響信号をダウンミックスしない複数チャネルの音響信号の構成にしてもよいことを付け加えておく。
【００３７】
以上のように、この実施の形態２によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形成が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【００３８】
実施の形態３．
この発明の実施の形態３に係る音響再生装置は、スピーカから再生される台詞に相当する音声情報の再生音像位置を、映像の中央部に定位する台詞に相当する音声情報に連動して制御することで実現する。
その具体的な手順について図面を参照しながら説明する。
【００３９】
図１０は、この発明の実施の形態３に係る音響再生装置の構成を示したものであり、音響再生装置の入力信号及び出力信号は、左チャネル信号と右チャネル信号の２チャネル音響信号の構成としている。
図中の符号１５は台詞音声情報判定部Ｂ、１６は音像位置決定部Ｂ、１７は音像位置制御部Ｂであり、符号２、３、７、８は、発明の実施の形態１において、図１を用いて説明した構成要素と同一であることから説明を割愛する。
次に、これらの構成要素を用いて、音響再生装置の詳細を説明する。
【００４０】
入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号は、台詞音声情報判定部Ｂ１５に入力される。ここで、台詞音声情報判定部Ｂ１５の動作について、図１１を用いて詳しく説明する。
図１１は台詞音声情報判定部Ｂ１５の機能ブロック構成を示した図であり、図中の符号１５１は加算器、１５２は減算器、１５３及び１５４は利得調整器、１５５は信号レベル差計算部、１５６は台詞有無判定部である。次に、これらの構成要素を用いて、台詞音声情報判定部Ｂ１５の動作について説明する。
【００４１】
加算器１５１においては、入力端子２からの左チャネル信号と入力端子３からの右チャネル信号の加算を行い、利得調整器１５３において信号レベルを１／２に調整した後、信号レベル差判定部１５５に渡す。この過程で生成された信号は、左チャネル信号と右チャネル信号の和信号となり、左チャネル信号及び右チャネル信号に同じ信号成分が多く含まれる場合は、信号レベルが大きくなるという特徴がある。
【００４２】
減算器１５２においては、入力端子２からの左チャネル信号から入力端子３からの右チャネル信号の減算を行い、利得調整器１５４において信号レベルを１／２に調整した後、信号レベル差判定部１５５に渡す。この過程で生成された信号は、左チャネル信号と右チャネル信号の差信号となり、左チャネル信号及び右チャネル信号に異なった信号成分が多く含まれる場合は、信号レベルが大きくなるという特徴がある。
【００４３】
信号レベル差計算部１５５では、和信号のレベル計算と差信号のレベル計算を行い、和信号と差信号の信号レベル差（和信号−差信号）を算出して、台詞有無判定部１５６に渡す。
最後に、台詞有無判定部１５６においては、信号レベル差に基づいて台詞に相当する音声情報があるか否かを判定する。
【００４４】
ここで着目すべき点としては、一般的に、話者の台詞は映像の中央に定位させるのが好ましいことから、２チャネル構成の音響信号においては、音声信号の収録時に台詞に相当する音声情報を左右チャネルに等分割で割り当てている点である。このことは、台詞に相当する音声情報がある場合は、和信号のレベルが大きくなり、逆に差信号のレベルが小さくなることを意味する。
【００４５】
ここで、信号レベル差と台詞有無判定部１５６における判定結果との関係を図１２に示す。台詞有無判定部１５６では、信号レベル差が小さい、例えばデシベル換算で２０ｄＢ未満の場合は “台詞無し”、逆に信号レベル差が大きい、例えばデシベル換算で２０ｄＢ以上の場合は“台詞有り”と判定し、その結果を音像位置決定部Ｂ１６に渡す。
以上が台詞音声情報判定部Ｂ１５の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００４６】
次に、この判定結果を受けた音像位置決定部Ｂ１６の動作について、処理フローチャートを用いながら説明する。
図１３は、音像位置決定部Ｂ１６の動作手順を、処理フローチャートにて示したものであり、１６ａ、１６ｃ、１６ｄは処理ブロックであり、１６ｂは条件分岐ブロックである。
【００４７】
処理ブロック１６ａにおいては、台詞音声情報判定部Ｂ１５から台詞音声情報判定結果を取得する。
次に、分岐ブロック１６ｂにおいて、台詞音声情報判定結果が“台詞無し”かの判定を行う。以降の処理は分岐ブロック１６ｂにおける判定結果により異なる。
【００４８】
分岐ブロック１６ｂにおいて、判定結果が“台詞無し”であった場合は、処理ブロック１６ｃに進む。
処理ブロック１６ｃにおいては、入力端子１及び入力端子２から入力された左チャネル信号及び右チャネル信号の再生音像位置を制御しない指示を音像位置制御部Ｂ１７に送出して、処理を終了する。
【００４９】
分岐ブロック１６ｂにおいて、判定結果が“台詞無し”ではなかった場合は、判定結果が“台詞有り”であると見なし、処理ブロック１６ｄに進む。
処理ブロック１６ｄにおいては、入力端子１及び入力端子２から入力された左チャネル信号及び右チャネル信号の再生音像位置を、映像表示装置から見て視聴者側に定位させる制御を行う指示を音像位置制御部Ｂ１７に送出して、処理を終了する。
以上が音像位置決定部Ｂ１６の動作説明である。引き続き音響再生装置の詳細説明に戻る。
【００５０】
音像位置制御部Ｂ１７は、入力端子２及び入力端子３から入力された左チャネル信号及び右チャネル信号に対して、音像位置決定部Ｂ１６からの指示内容に従って再生音像位置の制御処理を行った後、出力端子７及び出力端子８を経由して左右のスピーカから音声出力される。
ここで、音像位置制御部Ｂ１７の動作について補足しておく。音像位置制御部Ｂ１７における再生音像位置の制御処理の内容は、再生音像位置を映像表示装置から見て視聴者側に定位させる処理であれば何でも良い。ここでは、その一例として、再生音像位置を映像表示装置から見て視聴者側に定位させる処理を用意しておき、この処理を行わないものを含めて、２つの動作モードを切り替える方法について、図１４を用いて説明する。
【００５１】
図１４は、音像位置制御部Ｂ１７の詳細構成を示したものである。図１４において、符号１７１、１７２、１７３、１７４はスイッチ、ＨＡＬ、ＨＡＲは、発明の実施の形態１において、図４を用いて詳しく説明を行った頭部伝達関数と同一である。次に、音像位置制御部Ｂ１７の動作について説明する。
【００５２】
音像位置制御部Ｂ１７は、音像位置決定部Ｂ１６からの指示に従って処理内容を変更する。音像位置決定部Ｂ１６からの指示が、再生音像位置を制御しない指示内容であった場合は、スイッチ１７１とスイッチ１７３を直接つなぎ、また、スイッチ１７２とスイッチ１７４を直接つないで、左チャネル信号及び右チャネル信号が、そのまま出力されるようにする。
【００５３】
一方、音像位置決定部Ｂ１６からの制御信号が、再生音像位置を映像表示装置から見て視聴者側に定位させる制御を行う指示内容であった場合は、スイッチ１７１とスイッチ１７３を頭部伝達関数ＨＡＬにつなぎ、また、スイッチ１７２とスイッチ１７４を頭部伝達関数ＨＡＲにつないで、左チャネル信号及び右チャネル信号に対して、再生音像位置を映像表示装置から見て視聴者側に定位させる頭部伝達関数の処理を行い、処理後の信号が出力されるようにする。
以上がこの発明の実施の形態３の詳細説明である。
【００５４】
以上のように、この実施の形態３によれば、映像に登場する話者の台詞の有無に連動して、スピーカから再生される台詞に相当する音声情報の再生音像位置を制御することが可能な構成としたので、台詞に相当する音声情報がある場合は、視聴者に近い位置での再生音像の形成が可能となり、視聴者にとって台詞の聞き取り易い音響再生装置を実現することができる。
【産業上の利用可能性】
【００５５】
この発明の音響再生装置は、ＤＶＤ、ＢＤ等のパッケージメディア再生装置の音響再生装置やデジタルテレビジョン受像機の音響再生装置に利用される可能性がある。
【符号の説明】
【００５６】
１；字幕情報の入力端子、２；左チャネル信号の入力端子、３；右チャネル信号の入力端子、４；台詞音声情報判定部、５；音像位置決定部、６；音像位置制御部、７；左スピーカへの出力端子、８；右スピーカへの出力端子、９；左チャネルダウンミックス信号の入力端子、１０；右チャネルダウンミックス信号の入力端子、１１；センターチャネル信号の入力端子、１２；台詞音声情報判定部Ａ、１３；音像位置決定部Ａ、１４；音像位置制御部Ａ、１５；台詞音声情報判定部Ｂ、１６；音像位置決定部Ｂ、１７；音像位置制御部Ｂ、６１，６２，６３，６４；スイッチ、１４１，１４２，１４３，１４４；スイッチ、１５１；加算器、１５２；減算器、１５３，１５４；利得調整器、１５５；信号レベル差計算部、１５６；台詞有無判定部、１７１，１７２，１７３，１７４；スイッチ。
【特許請求の範囲】
【請求項１】
映像表示装置に入力された音響信号をスピーカで再生出力する音響再生装置において、
入力された音響信号に対して、台詞に相当する音声情報が含まれるか否かを判定する台詞音声情報判定部と、
スピーカから再生される台詞に相当する音声情報の再生音像位置を予め定められた位置に決定する音像位置決定部と、
台詞に相当する音声情報の再生音像位置を前記音像位置決定部で決定された再生音像位置に定位させる制御を行う音像位置制御部とを備えることを特徴とする音響再生装置。
【請求項２】
台詞音声情報判定部は、映像情報に付随する字幕情報に基づいて、台詞に相当する音声情報が含まれるか否かを判定する手段を備えることを特徴とする請求項１に記載の音響再生装置。
【請求項３】
入力される音響信号はセンターチャネル信号を含む複数チャネルで構成される音響信号であり、台詞音声情報判定部は、複数チャネルで構成される音響信号のうち、センターチャネル信号に収録される台詞に相当する音声情報に基づいて、台詞に相当する音声情報が含まれるか否かを判定する手段を備えることを特徴とする請求項１に記載の音響再生装置。
【請求項４】
台詞音声情報判定部は、音像位置が映像の中央部に定位する台詞に相当する音声情報に基づいて、台詞の有無を判定する手段を備えることを特徴とする請求項１に記載の音響再生装置。
【請求項５】
音像位置制御部は、再生音像位置を変更する処理経路と、再生音像位置を変更しない処理経路とを備え、更に、これらの処理経路を切り替え制御が可能な手段を備えることを特徴とする請求項２から請求項４の何れか１項に記載の音響再生装置。
【請求項６】
再生音像位置を変更する処理経路が、再生音像位置を視聴者から見て映像表示装置の前方に定位させる制御を行う音像位置変更手段を備えることを特徴とする請求項５に記載の音響再生装置。
【請求項１】
映像表示装置に入力された音響信号をスピーカで再生出力する音響再生装置において、
入力された音響信号に対して、台詞に相当する音声情報が含まれるか否かを判定する台詞音声情報判定部と、
スピーカから再生される台詞に相当する音声情報の再生音像位置を予め定められた位置に決定する音像位置決定部と、
台詞に相当する音声情報の再生音像位置を前記音像位置決定部で決定された再生音像位置に定位させる制御を行う音像位置制御部とを備えることを特徴とする音響再生装置。
【請求項２】
台詞音声情報判定部は、映像情報に付随する字幕情報に基づいて、台詞に相当する音声情報が含まれるか否かを判定する手段を備えることを特徴とする請求項１に記載の音響再生装置。
【請求項３】
入力される音響信号はセンターチャネル信号を含む複数チャネルで構成される音響信号であり、台詞音声情報判定部は、複数チャネルで構成される音響信号のうち、センターチャネル信号に収録される台詞に相当する音声情報に基づいて、台詞に相当する音声情報が含まれるか否かを判定する手段を備えることを特徴とする請求項１に記載の音響再生装置。
【請求項４】
台詞音声情報判定部は、音像位置が映像の中央部に定位する台詞に相当する音声情報に基づいて、台詞の有無を判定する手段を備えることを特徴とする請求項１に記載の音響再生装置。
【請求項５】
音像位置制御部は、再生音像位置を変更する処理経路と、再生音像位置を変更しない処理経路とを備え、更に、これらの処理経路を切り替え制御が可能な手段を備えることを特徴とする請求項２から請求項４の何れか１項に記載の音響再生装置。
【請求項６】
再生音像位置を変更する処理経路が、再生音像位置を視聴者から見て映像表示装置の前方に定位させる制御を行う音像位置変更手段を備えることを特徴とする請求項５に記載の音響再生装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【公開番号】特開２０１２−１９９７８６（Ｐ２０１２−１９９７８６Ａ）
【公開日】平成２４年１０月１８日（２０１２．１０．１８）
【国際特許分類】
【出願番号】特願２０１１−６２７１６（Ｐ２０１１−６２７１６）
【出願日】平成２３年３月２２日（２０１１．３．２２）
【出願人】（０００００６０１３）三菱電機株式会社 (33,312)
【Ｆターム（参考）】
【公開日】平成２４年１０月１８日（２０１２．１０．１８）
【国際特許分類】
【出願日】平成２３年３月２２日（２０１１．３．２２）
【出願人】（０００００６０１３）三菱電機株式会社 (33,312)
【Ｆターム（参考）】
[ Back to top ]