情報処理装置、情報処理方法およびコンピュータプログラム
【課題】周波数分割多重処理により複数のコンテンツの音声を出力するとき、視聴者にとって最適な状態で各音声を出力できるようにする情報処理装置を提供する。
【解決手段】本情報処理装置は、同時に出力される複数の音声データに関連するトリガー情報に基づいて、各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、設定されたフォーカス値で前記各音声データを合成する音声処理部と、を備える。
【解決手段】本情報処理装置は、同時に出力される複数の音声データに関連するトリガー情報に基づいて、各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、設定されたフォーカス値で前記各音声データを合成する音声処理部と、を備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、複数のコンテンツの音声出力を調整する情報処理装置、情報処理方法およびコンピュータプログラムに関する。
【背景技術】
【０００２】
視聴者が複数のコンテンツの音声を同時に聞き分けできる音声信号処理技術が本願発明者らにより提案されている（例えば、特許文献１〜５）。この技術では、複数の音声信号について周波数帯域を分割して生成された分割帯域の割り当ておよび周波数成分の抽出、時分割、周期的な変調、加工、定位の割り当てを行い、音声信号の分離情報および強調の度合いに係る情報を付加する。分割帯域の割り当ては互いに聴覚的にマスキングされない周波数帯域を割り当てる。そして、これらの音声信号を混合して出力することで、視聴者に複数の音声を聴覚上分離して同時に聞かせることができる。分割帯域の割り当て量を変えることで、音声の強調の度合いを変えることができる。この音声の強調の度合いパラメータをフォーカス値と呼んでいる。要約すると、この音声信号処理技術は、各音声の強調の度合いであるフォーカス値を反映させ、かつ、聴覚上分離して認識できる複数の音声信号を生成することができる技術である。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−１３５８９２号公報
【特許文献２】特開２００８−１３５８９１号公報
【特許文献３】特開２００８−２０９６４１号公報
【特許文献４】特開２００８−２２６４００号公報
【特許文献５】特開２０１０−１３６１１７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、近年、液晶方式やプラズマ方式等、テレビの画面は薄型化、大型化している。画面サイズが大きくなることにより、１つのテレビの画面に複数の表示エリアを設定し、各表示リアに異なるコンテンツ（テレビ番組やビデオ）をそれぞれ表示させることが可能となった。これにより、ユーザは複数のコンテンツの映像を同時に見ることができる。
【０００５】
しかしながら、複数の表示エリアにそれぞれ異なるコンテンツの映像を表示させることができるものの、音声は１つのコンテンツの音声しか出力できなかった。複数のコンテンツの音声を同時に出力すると、視聴者が音声を聞き分けることができないためである。そこで、本願発明者らは、上記の音声信号処理技術を応用して各コンテンツの音声を聴覚上分離して認識できるように出力し、視聴者にとって最適な状態で各音声を出力できることを検討した。
【課題を解決するための手段】
【０００６】
本開示によれば、同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、設定されたフォーカス値で前記各音声データを合成する音声処理部と、を備える、情報処理装置が提供される。
【０００７】
また、本開示によれば、同時に出力される複数の音声データに関連するトリガー情報に基づいて、各音声データの強調の度合いを示すフォーカス値の割合を設定するステップと、設定されたフォーカス値で前記各音声データを合成するステップと、を含む、情報処理方法が提供される。
【０００８】
さらに、本開示によれば、コンピュータを、同時に出力される複数の音声データに関連するトリガー情報に基づいて、各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、設定されたフォーカス値で前記各音声データを合成する音声処理部と、を備える、情報処理装置として機能させるコンピュータプログラムが提供される。
【０００９】
本開示によれば、同時に出力される音声データの各フォーカス値をトリガー情報に基づいて変更することで、各音声データに適した適切な明瞭さで各音声を出力させることができる。
【発明の効果】
【００１０】
以上説明したように本開示によれば、コンテンツの視聴者が各音声をそれぞれ自由に調整できるようになる。
【図面の簡単な説明】
【００１１】
【図１】本開示の実施形態に係る音声出力システムをテレビに適用した場合の状況を示す説明図である。
【図２】同実施形態に係るリモコンの一構成例を示す説明図である。
【図３】同実施形態に係るフォーカス値割合を変更する操作入力部の変形例を示す説明図である。
【図４】フォーカス値割合変更スライダーのスライド部の位置に応じた、音声のフォーカス値および表示エリアの画面サイズの変化を示す説明図である。
【図５】同実施形態に係るリモコンの他の構成例を示す説明図である。
【図６】同実施形態に係る音声出力システムの処理を概念的に表したブロック図である。
【図７】テレビの一構成例を示すハードウェア構成図である。
【図８】リモコンの一構成例を示すハードウェア構成図である。
【図９】同実施形態に係るテレビおよびリモコンの一実施構成例を示すブロック図である。
【図１０】タブレット型デバイスでの操作インタフェースを説明する説明図である。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１３】
なお、説明は以下の順序で行うものとする。
＜１．複数のコンテンツの音声を同時出力する音声出力システム＞
［１−１．システム概要］
［１−２．リモコン構成］
［１−３．画面サイズとフォーカス値との連動］
＜２．音声出力システムの構成＞
［２−１．概念説明］
［２−２．ハードウェア構成例］
（２−２−１．テレビ）
（２−２−２．リモコン）
［２−３．テレビおよびリモコンの実施構成例］
＜３．音声出力システムの適用例＞
【００１４】
＜１．複数のコンテンツの音声を同時出力する音声出力システム＞
［１−１．システム概要］
まず、図１を参照して、本開示の実施形態に係る複数のコンテンツの音声を同時出力する音声出力システムについて説明する。なお、図１は、本実施形態に係る音声出力システムをテレビに適用した場合の状況を示す説明図である。
【００１５】
本実施形態では、画面に２つの表示エリアを有する２画面テレビに対して本実施形態に係る音声出力システムを適用し、２つの番組を同時に視聴する場合を一例として説明する。もちろん、本技術は後述するようにかかる例に限定されず、２以上の画面や音声を出力する装置に対しても適用可能である。また、当該システムを適用する対象も、テレビに限定されず、パーソナルコンピュータやＰＤＡ、カーナビゲーション等の情報機器の表示部にて複数のコンテンツを再生あるいは実行する場合にも適用可能である。
【００１６】
図１に示すように、視聴者がテレビ１００で２つの番組を視聴しているとする。テレビ１００の表示部１１０には第１の表示エリア１１２および第２の表示エリア１１４があり、各表示エリア１１２、１１４にはそれぞれ番組が表示される。また、表示エリア１１２、１１４に表示されている各番組の音声がスピーカ（図示せず。）から出力される。本実施形態に係る音声出力システムでは、例えば、特許文献１〜５に開示される周波数分割多重処理を用いており、複数の楽曲等の音声を同時かつ選択的に聞き分け可能に提供する。この周波数分割多重処理では、複数の音を混合しても同時に聞き分けでき、また、音量ではなくフォーカスというパラメータによって複数の音声を処理することができる。
【００１７】
ここで、フォーカスとは音の強調の度合いを表すパラメータであり、その値（「フォーカス値」と称する。）は例えば０〜１００の値をとる。したがって、１０１段階のステップで音声のフォーカスの値を変化させることができる。フォーカス値が大きいほど音声をはっきりと聞こえるように出力させることができ、フォーカス値が小さいほど音声はぼかされて出力される。
【００１８】
各番組の音声は、テレビ１００を操作するためのリモートコントローラ（以下、「リモコン」と略する。）２００により変更することができる。本実施形態に係るリモコン２００には、例えば表示部１１０の表示エリアを１つにする１画面モードと２つにする２画面モードとで切り替える表示モード切替ボタンや、２画面モードにおいて各番組の音声に対するフォーカス値の割合を変更するフォーカス値割合変更スライダー等が設けられる。ユーザは、フォーカス割合変更スライダーを用いて各番組のフォーカス値の割合を変更させることで、興味のある番組の音声をよりはっきりと出力させることができるとともに、他の番組の音声も邪魔にならずかつ認識可能なさりげない音質で出力できる。すなわち、視聴者の興味の度合いに応じた音質に変更できる。これにより、各視聴者の興味を満足させつつ、視聴者間で時間と場所を共有することができる。
【００１９】
［１−２．リモコン構成］
図２に、本実施形態に係るリモコン２００の一構成例を示す。図２では、リモコン２００の操作入力部のうち、選局ボタン２１０、２２０およびフォーカス割合変更スライダー２３０を示している。
【００２０】
リモコン２００には、通常のテレビのリモコンと同様に、電源ボタンや選局ボタン（符号２１０、２２０）、音量調節ボタン、表示モード切替ボタン等が設けられている。これらの操作入力部は、物理的に押下したりスライドしたりといった操作が可能な入力部であってもよく、リモコン２００の表示部にタッチパネル等を用いて構成されたソフトウェア入力部であってもよい。タッチパネルを用いた入力部の場合、表示部に仮想的にボタンやスライダー等が表示される。ユーザは、画面に対してタッチ等の操作入力を行うことで、ソフトウェア入力部を操作することができる。
【００２１】
本実施形態に係るリモコン２００は、表示モード切替ボタンにより２画面モードが選択されているときに各表示エリア１１２、１１４に表示させる番組を容易に選択できるように、２つの選局ボタン２１０、２２０を備えている。選局ボタン２１０、２２０は、チャンネルと対応する１０個のチャンネルボタンから構成されている。選局ボタン２１０のチャンネルボタンを操作すると、第１の表示エリア１１２に表示させる番組を選択することができ、選局ボタン２２０のチャンネルボタンを操作すると、第２の表示エリア１１４に表示させる番組を選択することができる。すなわち、選局ボタンは、表示部１１０に設定可能な表示エリアの数だけ設けられる。これにより、操作対象の表示エリアを選択する必要はなく、直接所望の表示エリアの番組を設定することができる。
【００２２】
また、リモコン２００には、２画面モード時の各表示エリア１１２、１１４に表示される番組の音声について、フォーカス割合を調整する音声調節部としてフォーカス割合変更スライダー２３０が設けられている。第１の表示エリア１１２で選択されているチャンネルをＣＨ１、第２の表示エリア１１４で選択されているチャンネルをＣＨ２とする。フォーカス割合変更スライダー２３０には、図２に示すように、直線上を移動可能なスライド部２３２が設けられている。スライド部２３２の直線上の位置に応じてチャンネルＣＨ１とＣＨ２とのフォーカス割合が設定される。
【００２３】
スライド部２３２を直線のチャンネルＣＨ１側の端部に位置させると、チャンネルＣＨ１とＣＨ２とのフォーカス割合は１００：０となり、チャンネルＣＨ１の音声がはっきりと聞こえるように調整される。一方、スライド部２３２を直線のチャンネルＣＨ２側の端部に位置させると、チャンネルＣＨ１とＣＨ２とのフォーカス割合は０：１００となり、チャンネルＣＨ２の音声がはっきりと聞こえるように調整される。直線の中央にスライド部２３２を位置させると、チャンネルＣＨ１とＣＨ２とのフォーカス割合は５０：５０となり、チャンネルＣＨ１およびＣＨ２の音声が同等に聞こえるように調整される。スライド部２３２を移動させることにより、連続的にフォーカス割合を変更することができる。
【００２４】
なお、図２では、フォーカス値割合を変更する音声調節部をスライダー型としたが、本技術はかかる例に限定されない。例えば、図３に示すように、つまみ型のフォーカス値割合変更部２３０Ａとしてもよい。つまみ型のフォーカス値割合変更部２３０Ａでは、基準位置からのつまみ部２３２Ａの回転角度に基づいて、チャンネルＣＨ１、ＣＨ２のフォーカス値割合を変更することができる。例えば、つまみ部２３２Ａを反時計回りに回すとチャンネルＣＨ２に対してチャンネルＣＨ１のフォーカス値割合を大きくすることができ、つまみ部２３２Ａを時計回りに回すとチャンネルＣＨ１に対してチャンネルＣＨ２のフォーカス値割合を大きくすることができる。また、図３の例では１つのつまみ型のフォーカス値割合変更部２３０Ａで２つのチャンネルのフォーカス値割合を調整したが、本技術はかかる例に限定されない。例えば各チャンネルにそれぞれ対応するつまみ型のフォーカス値割合変更部２３０Ａを設けてもよい。
【００２５】
あるいは、数値入力型のフォーカス値割合変更部２３０Ｂとしてもよい。数値入力型のフォーカス値割合変更部２３０Ｂでは、視聴者はテンキー２３２Ｂを用いて１つのチャンネル（例えばチャンネルＣＨ１）のフォーカス値を入力する。そうすると、もう１つのチャンネル（例えばチャンネルＣＨ２）のフォーカス値が自動的に決定される。
【００２６】
このように、フォーカス値割合を変更する操作入力部の形状は、リモコン２００の構成や使用形態に応じて適宜決定することができる。
【００２７】
リモコン２００は、通信部２４０を介してテレビ１００と無線通信を行う。通信部２４０の通信方式は、例えば赤外線通信方式でもよく、無線ＬＡＮを利用した通信方式でもよい。かかる通信部２４０により、リモコン２００から入力された入力情報をテレビ１００に通知することができる。
【００２８】
［１−３．画面サイズとフォーカス値との連動］
本実施形態では、テレビ１００を２画面モードで使用しているとき、表示エリアのサイズと音声のフォーカス値とを連動して変動させる。一般に、視聴者は、２つの番組のうち音声のフォーカス値を高く設定した番組を主として視聴したいと考えられる。そこで、フォーカス値割合変更スライダー２３０により設定されたフォーカス値割合に応じて、２つの表示エリア１１２、１１４のサイズを変更し、視聴者が視聴したい番組をよりはっきりと視聴できるようにする。
【００２９】
例えば、フォーカス値割合変更スライダー２３０の設定と表示エリア１１２、１１４との対応は以下のように設定することができる。スライド部２３２の位置が表示エリア１１２に表示されるチャンネルＣＨ１側端部に位置されたとき、表示エリア１１２の画面サイズが最大となり、表示エリア１１４の画面サイズは最小となる。一方、スライド部２３２の位置が表示エリア１１４に表示されるチャンネルＣＨ２側端部に位置されたとき、表示エリア１１４の画面サイズが最大となり、表示エリア１１２の画面サイズは最小となる。直線の中央にスライド部２３２を位置させると、表示エリア１１２、１１４の画面サイズは同サイズとなる。
【００３０】
すなわち、表示エリア１１２、１１４の画面サイズが０〜１００の割合で表されるとすると、以下の関係が成り立つ。
（Ａ１）チャンネルＣＨ１の表示エリアの画面サイズ＝スライド部の位置
（Ｂ１）チャンネルＣＨ２の表示エリアの画面サイズ＝１００−（スライド部の位置）
（Ｃ１）チャンネルＣＨ１の表示エリアの画面サイズ
＋チャンネルＣＨ２の表示エリアの画面サイズ＝１００
【００３１】
また、上述したフォーカス値については、以下の関係が成り立つ。
（Ａ２）チャンネルＣＨ１の音声のフォーカス値＝スライド部の位置
（Ｂ２）チャンネルＣＨ２の音声のフォーカス値＝１００−（スライド部の位置）
（Ｃ２）チャンネルＣＨ１の音声のフォーカス値
＋チャンネルＣＨ２の音声のフォーカス値＝１００
【００３２】
このように、スライド部２３２を移動させることにより、音声のフォーカス値および表示エリア１１２、１１４の画面サイズを連続的に変更することができる。一具体例を図４に示す。図４左には、フォーカス値割合変更スライダー２３０のスライド部２３２の位置が８０の位置にある場合を示している。このとき、チャンネルＣＨ１の音声のフォーカス値は８０となり、表示エリア１１２の画面サイズも８０となる。一方、チャンネルＣＨ２の音声のフォーカス値は２０となり、表示エリア１１４の画面サイズも２０となる。したがって、チャンネルＣＨ１の番組をはっきりと視聴できるようになる。
【００３３】
図４中央には、フォーカス値割合変更スライダー２３０のスライド部２３２の位置が５０の位置にある場合を示している。このとき、チャンネルＣＨ１およびＣＨ２ともに音声のフォーカス値は５０となり、表示エリア１１２、１１４の画面サイズも５０となる。したがって、チャンネルＣＨ１、ＣＨ２の番組を同じ画面サイズ、音声のフォーカス値で視聴することができるようになる。
【００３４】
そして、図４右には、フォーカス値割合変更スライダー２３０のスライド部２３２の位置が３０の位置にある場合を示している。このとき、チャンネルＣＨ１の音声のフォーカス値は３０となり、表示エリア１１２の画面サイズも３０となる。一方、チャンネルＣＨ２の音声のフォーカス値は７０となり、表示エリア１１４の画面サイズも７０となる。したがって、チャンネルＣＨ２の番組をはっきりと視聴できるようになる。
【００３５】
テレビ１００の表示部１１０には、フォーカス値割合変更スライダー２３０にて設定されたフォーカス値を表示エリア１１２、１１４に表示してもよい（図１の符号１１６、１１８）。このようにフォーカス値を表示することにより、視聴者は現在のフォーカス値を確認することができる。
【００３６】
なお、本例では、表示エリア１１２、１１４の画面サイズと音声のフォーカス値とを同じ値に設定したが、本技術はかかる例に限定されない。例えば視聴者の好みに応じて、画面サイズの変化率と音声のフォーカス値とを別々に設定してもよい。例えば図５に示すように、表示エリア１１２に表示される番組の音声のフォーカス値を設定するスライダー２３０ａと、表示エリア１１４に表示される番組の音声のフォーカス値を設定するスライダー２３０ｂとを別々に設けてもよい。また、表示エリア１１２および表示エリア１１４の画面サイズを設定する表示エリア調節部としてスライダー２５０ａ、２５０ｂをそれぞれ設けてもよい。これにより、各スライダーのスライド部２３２ａ、２３２ｂ、２５２ａ、２５２ｂの位置を動かすことで、各番組の音声のフォーカス値および表示エリア１１２、１１４の画面サイズを独立して設定することができる。
【００３７】
なお、図５に示す例では、チャンネルＣＨ１とチャンネルＣＨ２の画面サイズと音声のフォーカス値を独立に設定可能にしているが、画面サイズの２５２ａ、２５２ｂの２つを連動させて一つにまとめて設定可能にしてもよい。また、音声のフォーカス値の２３２ａ、２３２ｂの２つを連動させて一つにまとめて設定可能にしてもよい。
【００３８】
また、本例では、表示モード切替ボタンにより１画面モードと２画面モードとを切り替えたが、本技術はかかる例に限定されない。例えばフォーカス値割合変更スライダー２３０のスライド部２３２の位置が１００のとき１画面モードとし、スライド部２３２の位置が１００以外のとき２画面モードとして、表示モード切替ボタンを用いることなく自動的に設定されるようにしてもよい。
【００３９】
＜２．音声出力システムの構成＞
［２−１．概念説明］
図６に、本実施形態に係る音声出力システムの処理を概念的に表したブロック図を示す。本実施形態に係る音声出力システムでは、表示エリア１１２にチャンネルＣＨ１（プライマリ）の番組を、表示エリア１１４にチャンネルＣＨ２（セカンダリ）の番組をそれぞれ表示する。
【００４０】
例えば、チャンネルＣＨ１の番組は、地上波デジタル放送等の放送波を受信・復調し、圧縮されたデータストリーム１０を、動画デコーダーによりデコードすることにより得られる（Ｐ１１）。デコードされたデータストリーム１０は、画像データと音声データとに分離される。画像データは、指定された画像サイズにリサイズされた後（Ｐ１２）、画像ミキサーを経由して画像出力装置へ出力される（Ｐ１３）。一方、デコードの音声データは周波数分割多重処理により指定されたフォーカス値に処理された後（Ｐ１４）、音声ミキサーを経由して音声出力装置へ出力される（Ｐ１５）。
【００４１】
チャンネルＣＨ２の番組の処理も、チャンネルＣＨ１の番組の処理と同様に、まずデータスストリーム２０をデコードして画像データと音声データとに分離する（Ｐ２１）。そして、画像データを、指定された画像サイズにリサイズした後（Ｐ２２）、画像ミキサーを経由して画像出力装置へ出力する（Ｐ２３）。一方、デコードの音声データは周波数分割多重処理により指定されたフォーカス値に処理された後（Ｐ２４）、音声ミキサーを経由して音声出力装置へ出力される（Ｐ２５）。
【００４２】
チャンネルＣＨ１の番組の画像および音声と、チャンネルＣＨ２の番組の画像および音声とがそれぞれ出力されると、各画像は対応する表示エリア１１２、１１４に表示され、各音声はミックスして最終出力される。
【００４３】
［２−２．ハードウェア構成例］
（２−２−１．テレビ）
本実施形態に係るテレビ１００は、図７に示すように、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３とを備える。また、テレビ１００は、受信装置１０４と、外部記憶装置／デコード回路１０５と、通信装置１０６と、画像／音声出力処理装置１０７と、バス１０８とを備える。
【００４４】
ＣＰＵ１０１は、演算処理装置および制御装置として機能し、各種プログラムに従ってテレビ１００内の動作全般を制御する。また、ＣＰＵ１０１は、マイクロプロセッサであってもよい。ＲＯＭ１０２は、ＣＰＵ１０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ１０３は、ＣＰＵ１０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはバス１０８により相互に接続されている。
【００４５】
受信装置１０４は、テレビ１００の外部アンテナにて地上波デジタル放送等の放送波であるＲＦ信号を受信する装置である。受信装置１０４は、受信したＲＦ信号を増幅・復調する。復調された信号は、例えばＭＰＥＧ等の方式で圧縮されており、複数の番組の信号が含まれている。外部記憶装置／デコード回路１０５は、受信装置１０４にて復調された信号をデコードし、画像データと音声データとにそれぞれ分離する。このとき、復調された信号に含まれる各番組について、それぞれ画像データと音声データとが生成される。
【００４６】
通信装置１０６は、リモコン２００と通信するための通信インタフェースである。通信装置１０６は、赤外線通信装置であってもよく、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であってもよく、ワイヤレスＵＳＢ対応通信装置であってもよい。あるいは、通信装置１０６は、有線による通信を行うワイヤー通信装置であってもよい。
【００４７】
画像／音声出力処理装置１０７は、外部記憶装置／デコード回路１０５により分離して生成された画像データおよび音声データを出力する装置である。なお、これらの画像データおよび音声データは、画像／音声出力処理装置１０７に出力される前に画像処理および音声処理が施される。画像／音声出力装置１０７は、例えば画像データを表示する画像出力装置として液晶ディスプレイ装置や有機ＥＬディスプレイ装置等を用いることができ、音声データを表示する音声出力装置としてスピーカ等を用いることができる。
【００４８】
（２−２−２．リモコン）
本実施形態に係るリモコン２００は、図８に示すように、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３とを備える。また、リモコン２００は、ユーザインタフェース２０４と、通信装置２０５と、表示装置２０６と、バス２０７とを備える。
【００４９】
ＣＰＵ２０１は、演算処理装置および制御装置として機能し、各種プログラムに従ってリモコン２００内の動作全般を制御する。また、ＣＰＵ２０１は、マイクロプロセッサであってもよい。ＲＯＭ２０２は、ＣＰＵ２０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ２０３は、ＣＰＵ２０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはバス２０７により相互に接続されている。
【００５０】
ユーザインタフェース２０４は、テレビ１００を操作するための操作入力を行うための操作入力部である。ユーザインタフェース２０４は、上述したように、物理的なボタンやスライダー等により構成してもよく、タッチパネル付き液晶を用いてソフトウェアボタンやソフトウェアスライダー等を構成してもよい。なお、ソフトウェアボタン等の表示処理は、ＣＰＵ２０１を表示処理部として機能させることにより行うことができる。通信装置２０５は、テレビ１００と通信するための通信インタフェースである。通信装置２０５は、テレビ１００の通信装置１０６と対応する装置が設けられ、例えば赤外線通信装置や、無線ＬＡＮ対応通信装置、ワイヤレスＵＳＢ対応通信装置、あるいは有線による通信を行うワイヤー通信装置等を用いることができる。
【００５１】
表示装置２０６は、情報を表示する装置であって、液晶ディスプレイ装置や有機ＥＬディスプレイ装置等を用いることができる。ユーザインタフェース２０４がソフトウェアボタン等により構成される場合には、表示装置２０６にこれらを表示することもできる。
【００５２】
［２−３．テレビおよびリモコンの実施構成例］
図９に、本実施形態に係るテレビ１００およびリモコン２００の一実施構成例を示す。なお、図９において、図７に示したテレビ１００および図８に示したリモコン２００と同一の機能部については同一の符号を付し、詳細な説明は省略する。また、図９では、図７および図８に示した構成要素の記載を一部省略している。
【００５３】
まず、リモコン２００について説明すると、図９に示すように、リモコン２００は、ユーザインタフェース２０４と、通信装置２０５と、表示装置２０６とを備える。これらの構成要素は図８に示したユーザインタフェース２０４、通信装置２０５、および表示装置２０６と同様に機能する。また、図９に示すリモコン２００も、図８に示したＣＰＵ２０１、ＲＯＭ２０２およびＲＡＭ２０３を備えている。
【００５４】
リモコン２００のユーザインタフェース２０４は、表示モード切替ボタンやフォーカス値割合変更スライダー２３０等から構成されている。ユーザインタフェース２０４から入力された各番組の音声に対するフォーカス値の設定情報は、通信装置２０５を介してテレビ１００の通信装置１０６へ送信される。
【００５５】
一方、テレビ１００は、図９に示すように、受信装置１０４と、映像音響データデコード回路１０５ａと、通信装置１０６と、画像出力装置１０７ａおよび音声出力装置１０７ｂとを備える。また、テレビ１００は、パラメータ取得部１２１と、フォーカス割合設定部１２２と、画像サイズ変更装置１２３と、画像ミキサー装置１２４と、音声処理装置１２５と、音声ミキサー装置１２６とをさらに備える。受信装置１０４および通信装置１０６は図７に示した受信装置１０４および通信装置１０６と同様に機能する。また、映像音響データデコード回路１０５ａは外部記憶装置／デコード回路１０５に対応し、画像出力装置１０７ａおよび音声出力装置１０７ｂは画像／音声出力装置１０７に対応する。
【００５６】
パラメータ取得部１２１は、通信装置１０６を介してリモコン２００から送信された操作入力情報を表すパラメータを取得する。パラメータ取得部１２１は、例えば表示部１１０に表示する番組のチャンネルを表すチャンネル選択情報や、１画面モードあるいは２画面モードの切り替えを表す画面モード情報、音量を変更する音量情報、音声のフォーカス値の設定を表すフォーカス情報等を取得する。ここで、フォーカス情報は、フォーカス割合設定部１２２へ出力される。
【００５７】
フォーカス割合設定部１２２は、パラメータ取得部１２１から入力されたフォーカス情報に基づいて、画像サイズ変更装置１２３へ画像サイズ変更指示を出力し、音声処理装置１２５へ音声データ修正指示を出力する。フォーカス情報には、チャンネルＣＨ１の音声のフォーカス値が含まれる。フォーカス割合設定部１２２は、入力されたチャンネルＣＨ１の音声のフォーカス値に基づいて、上述の（Ｂ２）の関係に基づいてチャンネルＣＨ２の音声のフォーカス値を算出する。
【００５８】
また、フォーカス値割合設定部１２２は、各チャンネルＣＨ１、ＣＨ２のフォーカス値に基づいて、これらの画像データの表示エリア１１２、１１４の画面サイズを決定する。例えば、フォーカス割合と同様に画面サイズの割合が変更される場合には、チャンネルＣＨ１とＣＨ２とのフォーカス割合と同じ画面サイズ割合となるように表示エリア１１２、１１４の画面サイズが設定される。フォーカス割合設定部１２２は、設定された画面サイズを画像サイズ変更装置１２３へ出力し、フォーカス値を音声処理装置１２５へ出力する。
【００５９】
画像サイズ変更装置１２３は、フォーカス割合設定部１２２から入力された画像サイズ変更指示も基づいて、表示エリア１１２、１１４に表示する画像データの画像サイズを変更する。テレビ１００は、外部アンテナ１００ａにて地上波デジタル放送等の放送波であるＲＦ信号を受信装置１０４にて受信すると、受信装置１０４にて増幅・復調された信号が映像音響データデコード回路１０５ａでデコードされる。上述したように、復調された信号には複数の番組の信号が含まれており、復調信号は番組毎に画像データと音声データとに分離される。
【００６０】
画像サイズ変更装置１２３は、映像音響データデコード回路１０５ａにより画像データを受け取ると、フォーカス割合設定部１２２にて設定された表示エリアの画面サイズに適合するように、各表示エリアに対応する各画像データの画像サイズを変更する。画像サイズが変更された画像データは、画像ミキサー装置１２４を経由して画像出力装置１０７ａへ出力される。
【００６１】
音声処理装置１２５は、映像音響データデコード回路１０５ａにより音声データを受け取ると、フォーカス割合設定部１２２にて設定されたフォーカス値に適合するように、各番組の音声データを合成するフォーカス処理が行われる。フォーカス処理された音声データは、音声ミキサー装置１２６を経由して音声出力装置１０７ｂへ出力される。
【００６２】
以上、本実施形態に係る音声出力システムを適用したテレビ１００およびリモコン２００の構成とその機能について説明した。本技術によれば、フォーカス値割合設定部１２２により、複数の表示エリアに表示される番組の音声のフォーカス値を、フォーカス割合変更スライダー２３０により設定されたフォーカス情報に基づいて変更する。そして、音声処理装置１２５により、フォーカス割合設定部１２２にて設定されたフォーカス値に適合するように、各番組の音声データを合成する。これにより、視聴者が所望する番組の音声をよりはっきりと視聴できるとともに、他の番組についても音声を認識することが可能となる。また、音声のフォーカス割合に応じて表示エリアのサイズを変更してもよい。
【００６３】
＜３．音声出力システムの適用例＞
本実施形態に係る音声出力システムは、音声のフォーカス値を、出力される音声に関連するトリガー情報に基づき変更する。例えば、上述した例においては、フォーカス割合変更スライダー２３０のスライド部２３２がユーザにより操作されることで、フォーカス値割合設定部１２２により音声のフォーカス値が変更される。この場合、トリガー情報はフォーカス割合変更スライダー２３０の操作入力（スライド部２３２の位置に対応するフォーカス情報）となる。また、音声出力システムは、ユーザのいる環境や再生するコンテンツの内容に基づいて、フォーカス値割合設定部１２２により自動的にフォーカス値を変更することもできる。この場合、トリガー情報はユーザのいる環境や再生するコンテンツの内容となる。以下では、本実施形態に係る音声出力システムを適用し、トリガー情報に基づいて音声のフォーカス値を変更する処理例について説明する。
【００６４】
［適用例１］
例えば、家族がゲームをしている最中に視聴者Ａがニュース番組を視聴したい場合、家族あるいは視聴者Ａがリモコン２００よりテレビ１００の表示を２画面モードに切り替えることで、ゲームとニュース番組とを表示部１１０に表示させることができる。このとき、ニュース番組は音声から得られる内容を理解できればよいため、ユーザによりゲームの表示エリアがニュース番組の表示エリアより大きく設定されたとする（例えばゲームの表示エリアを７０％、ニュース番組の表示エリアを３０％に設定）。テレビ１００は、リモコン２００から表示エリアのサイズ変更指示を受信し、フォーカス割合設定部１２２により指定の表示エリアのサイズが設定され、画像サイズ変更装置１２３により指定されたサイズに各表示エリアが変更される。
【００６５】
このとき、フォーカス割合設定部１２２は、表示エリアのサイズの変更に応じて、音声のフォーカス値を変更する。ニュース番組の表示エリアは小さくてもよいが音声ははっきりと聞き取れるように、ニュース番組の音声のフォーカス値をゲームの音声のフォーカス値より大きくしてもよい。あるいは、表示サイズが小さいときには音声のフォーカス値も小さくするように設定してもよい。フォーカス割合設定部１２２にて設定されたフォーカス値の割合は音声処理装置１２５へ出力され、音声処理装置１２５により各番組の音声のフォーカス値が変更される。このように、表示されるコンテンツの内容や視聴者の要望をトリガー情報として表示エリアのサイズおよび音声のフォーカス値を設定することで、視聴者の要望に合った状況でコンテンツを視聴することが可能となる。
【００６６】
［適用例２］
他の例として、例えば、１９時から放送されているドラマの視聴中に、毎日チェックしている１９時２５分から放送される天気予報があったとする。本実施形態に係るテレビ１００は、この天気予報に関する情報（例えば番組名や番組を特定するＩＤ等）を保持することで、当該天気予報の放送が開始されると表示部１１０にポップアップ画面を自動的に表示して、視聴者に見せるようにする。すなわち、天気予報に関する情報をトリガー情報として、トリガー情報に一致する番組が放送されるときに表示部１１０に表示させる。このとき、ドラマの音声と天気予報の音声とが多重化されるとする。
【００６７】
この際、ドラマの視聴を妨げないように、フォーカス割合設定部１２２により、例えば表示部１１０の隅に小さなポップアップ画面が表示されるとともに、天気予報の音声のフォーカス値がドラマの音の妨げとならないように設定される。これにより、ドラマの視聴を妨げることなく天気予報の内容をユーザに通知することができる。そして、天気予報が終了するとポップアップ画面を非表示とし、ドラマのみが表示される画面に戻される。このとき、フォーカス割合設定部１２２は天気予報の音声のフォーカス値を０とし、消音する。天気予報の放送スケジュールは、例えば電子番組表を参照することにより取得可能であり、放送時間が変更されても当該天気予報が放送されるときにポップアップ画面により表示することができる。
【００６８】
［適用例３］
また、テレビ１００において、２つの番組を２画面表示しているとき、通常フォーカス割合設定部１２２は、主番組（プライマリ）として視聴している番組の音声のフォーカス値を、副番組（セカンダリ）として視聴している番組の音声のフォーカス値より大きく設定する。これにより、ユーザは、主番組の情報を主として認識できる。ここで、主番組のＣＭが検出されると、フォーカス割合設定部１２２は、主番組側のＣＭの音声のフォーカス値より副番組の音声のフォーカス値を大きく設定する。その後、フォーカス割合設定部１２２主番組側のＣＭ終了により主番組側のＣＭの音声のフォーカス値を大きく、副番組の音声のフォーカス値を小さく設定する。これにより、副番組の音声は、主番組の音声を妨げない程度に小さくされたり、あるいは消音されたりする。
【００６９】
なお、主番組と副番組とは同時に２画面表示されていなくてもよく、例えば、通常は主番組のみを表示し、主番組のＣＭを検出すると、主番組のＣＭ放送中は自動的に副番組の表示画面をポップアップ表示してもよい。この場合も、通常フォーカス割合設定部１２２は、主番組の音声のフォーカス値を副番組の音声のフォーカス値より大きく設定するが、主番組のＣＭが検出されると、主番組側のＣＭの音声のフォーカス値より副番組の音声のフォーカス値を大きく設定する。そして、主番組のＣＭが終了すると、副番組を表示しているポップアップ画面を非表示にして主番組のみを表示させるようにする。このとき、主番組側のＣＭ終了により副番組の音声は主番組の音声を妨げない程度に小さくされたり、あるいは消音されたりする。
【００７０】
このように主番組側のＣＭ開始をトリガー情報として通常時のフォーカス値の設定を変更することで、２つの番組の音声の強調の度合いを変化させ、ユーザにとって意味のある情報の音声を主として認識できるようにすることができる。
【００７１】
［適用例４］
さらに、テレビ１００に予めキーワードを登録し、このキーワードに基づいて自動的にお知らせ画面をポップアップ表示させてもよい。すなわち、キーワードがトリガー情報となる。キーワードとしては、例えば「天気予報」等の番組ジャンルや、人物やグループ名等を用いることができる。主番組を１画面モードで表示させているときに、主番組以外で当該キーワードに一致する番組が放送されると、テレビ１００は自動的に２画面モードとし、副番組として当該キーワードに一致する番組を表示する。キーワードに一致する番組の探索は、電子番組表を利用して行うことができる。
【００７２】
ここで、キーワードに対して予め重要度を付与することもできる。これにより、フォーカス割合設定部１２２は、キーワードの重要度に応じて副番組の音声のフォーカス値を設定することができる。例えば、重要度の高いキーワードに一致する番組が検出されたとき、フォーカス割合設定部１２２は当該番組のフォーカス値を大きく（例えば、主番組の音声のフォーカス値と同一またはそれ以上に）設定することで、視聴者に当該番組の放送を強く通知することができる。一方、重要度の低いキーワードに一致する番組が検出されたときには、フォーカス割合設定部１２２は当該番組のフォーカス値を小さく（例えば、主番組の音声のフォーカス値より小さく）設定するようにしてもよい。
【００７３】
なお、異なるキーワードについて、一致する番組が複数検出された場合には、キーワードの重要度の最も高い番組のみをポップアップ画面で表示させてもよい。あるいは、キーワードの重要度に応じてポップアップ画面のサイズおよびフォーカス値を変化させて、すべての検出された番組をポップアップ表示させてもよい。
【００７４】
［適用例５］
また、テレビ１００を視聴する視聴者の姿勢状態に応じて、番組の音声のフォーカス値を変化させてもよい。例えば、テレビ１００に視聴者の視線を認識可能な視線認識センサが設けられているとする。例えば視線認識センサは既に実用化されているＣＣＤセンサやＣＭＯＳセンサを使ったものを用いる。また視線認識ではないが、視聴状態の検出には、既に実用化されている赤外線センサを利用した人感センサを用いてもよい。このとき、フォーカス割合設定部１２２は、視線認識センサの検出結果をトリガー情報として、視聴者がテレビ１００を見ていると判断される場合には番組のフォーカス値を大きくし、視聴者がテレビ１００を見ていないと判断される場合には番組のフォーカス値を小さくする。なお、複数の番組が表示されている場合には、視聴者の視線の方向から視聴者が見ている番組を特定し、視聴者が見ていると特定した番組の音声のフォーカス値を他の番組の音声のフォーカス値より大きくするようにしてもよい。
【００７５】
視線認識センサの検出結果より、視聴者がテレビ１００を見ていないと判断される場合には番組の音声のフォーカス値を徐々に下げるようにしてもよい。このとき、フォーカス割合設定部１２２は、フォーカス値の減少とともに画面を暗くしてもよい。これにより、テレビ１００の消費電力を下げ、省エネルギでテレビ１００を稼動させておくことができる。
【００７６】
［適用例６］
さらに、フォーカス割合設定部１２２は、テレビ１００の周辺環境で発生した事件・事故等の緊急度に応じて、番組の音声のフォーカス値を変更してもよい。テレビ１００の周辺環境は、テレビ１００の位置情報に基づいて特定することができ、当該テレビ１００を視聴するユーザのいる環境と同視できる。そこで、フォーカス割合設定部１２２は、ユーザのいる環境（テレビ１００の位置情報）と、テレビ１００より通知しようとしている情報との関連性を判断し、その関連の度合いに応じてフォーカス値を変更する。例えば地震発生を伝える緊急地震速報を通知する際、テレビ１００の位置情報と地震発生位置との近さに応じて通知の緊急度を判定する。テレビ１００の現在位置と地震発生位置とが近いほど通知の緊急度の高い情報となる。
【００７７】
通知の緊急度が高い情報と判定した場合、視聴中の番組の音声と緊急地震速報の通知音とを混合して音声出力装置から出力するようにする。これにより、番組の音声を妨げることなく緊急地震速報の通知音を視聴者に確実に通知することができる。このとき、緊急地震速報の通知音のフォーカス値を大きくし、番組の音声のフォーカス値を下げるようにしてもよい。このように、フォーカス割合設定部１２２は、テレビ１００（すなわち、ユーザ）の位置情報との関係により通知の緊急度の高い情報をトリガー情報として、複数の音声を混合して出力させることができる。
【００７８】
［適用例７］
また、テレビ１００以外にも、例えば携帯電話機のような移動通信端末においても本実施形態の音声出力システムを適用することができる。例えば、携帯電話機において、話者の声と周囲の音（環境音）とを異なるマイクで集音し、これらの音声を周波数分割多重処理によって混合する。これにより、聞き手に対して話者の声および環境音のいずれもよく聞き取れるようにすることができ、聞き手の臨場感を高めることができる。このとき、話者の声を明確に聞き取れるようにするため、フォーカス割合設定部１２２は、話者の声のフォーカス値を大きくし、環境音のフォーカス値を小さくするようにしてもよい。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００７９】
［適用例８］
さらに、テレビ１００にてインターネット電話サービスやオンラインゲームサービスを受ける場合、テレビ電話でチャットしたりオンラインゲームをしたりしながら同時にテレビ番組を視聴することもできる。例えば主表示エリアにテレビ電話の通話相手を表示し、副表示エリアにテレビ番組を表示する。このとき、テレビ電話の音声を明確に聞き取れるようにするため、フォーカス割合設定部１２２は、テレビ電話の音声のフォーカス値を大きくし、テレビ番組の音声のフォーカス値を小さくするようにしてもよい。このように音声の内容をトリガー情報として各音声のフォーカス値を設定することができる。
【００８０】
［適用例９］
また、ラジオチューナー搭載の携帯型音楽プレーヤーに対して本実施形態に係る音声出力システムを適用することもできる。例えば、音楽プレーヤーに予め記録された音楽を聴いているときにラジオで交通渋滞情報や天気予報番組が開始されると、音楽とラジオの音声とを両方出力するようにする。このとき、これらの音声に対して周波数分割多重処理を行うことで、いずれの音声も聞き取り可能となる。また、ラジオから出力される音声情報を明確に聞き取れるようにするため、フォーカス割合設定部１２２は、ラジオの音声のフォーカス値を大きくし、音楽のフォーカス値を小さくするようにしてもよい。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８１】
［適用例１０］
さらに、テレビ１００の主音声と副音声を同時に出力する際に、本実施形態に係る音声出力システムを適用することもできる。これにより、主音声および副音声を同時に聞き取り易くすることができる。また、英語と日本語のように異なる２つの言語が主音声と副音声とで出力されている場合には、両言語を同時に聞けるので外国語の学習にも役立つ。この場合、フォーカス割合設定部１２２は、例えば主音声のフォーカス値を大きくし、副音声のフォーカス値を小さくするようにしてもよい。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８２】
［適用例１１］
また、テレビ１００にて複数の番組が視聴されているとき、視聴されている番組の内容に応じて各番組の音声のフォーカス値を自動的に変更してもよい。例えば、ニュース番組であれば、アナウンサーの声が聞き取れることが重要である。一方、野球やサッカー等のスポーツでは、試合映像や臨場感が重要となる。そこで、例えばスポーツ番組とニュース番組とが同時に視聴されるときには、フォーカス割合設定部１２２は、ニュース番組の音声のフォーカス値を大きくする。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８３】
さらに、人の声は約１〜５ｋＨｚの周波数帯域にあるため、音声処理装置１２５は、周波数分割多重処理においてこの周波数帯域をニュース番組の音声に優先的に割り当てるようにする。これにより、よりアナウンサーの声を聞き取り易くすることができる。一方、スポーツ番組においては低音域が重要であるため、音声処理装置１２５は、例えば約２０〜５００Ｈｚの周波数帯域をスポーツ番組の音声に優先的に割り当てるようにする。なお、音楽番組等においては高音域の周波数帯域を優先的に割り当てるとよい。また、同じジャンルの番組に対しては、均一に周波数帯域を割り当てるようにしてもよい。このように、周波数帯域に応じてフォーカス値を設定することで、コンテンツに適した音声をより明確に提供することができる。
【００８４】
［適用例１２］
カーナビゲーションシステムにおいても、交通情報の提供と同時に音楽やテレビ番組を提供することが可能である。ここで、カーナビゲーションシステムにより音楽を聴いているとき、渋滞情報や道路工事情報等の割り込みを、本実施形態に係る音声出力システムを用いて行うことで、音楽の再生を停止することなく割り込み情報を合成した音声で出力することが可能となる。このとき、割り込み情報は重要度の高い情報と考えられるため、フォーカス割合設定部１２２は、音楽のフォーカス値を小さくし、割り込み情報の合成音声のフォーカス値を大きくすることにより、割り込み情報を聞き取り易くすることができる。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８５】
以上の適用例は、それぞれ独立して実行することも可能であり、２以上のトリガー情報を組み合わせて実行することも可能である。
【００８６】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【００８７】
例えば、上記実施形態では、主としてテレビ１００およびリモコン２００に音声出力システムを適用した場合について説明したが、本技術はかかる例に限定されない。例えば、図１０に示すようなタブレット型デバイスに３００に適用してもよい。タブレット型デバイス３００では、例えばデバイス３００の表示部３１０に、テレビ番組を表示する表示エリア３１２、３１４と、テレビ番組を選択するためのテレビ番組動画リスト３２０とを表示させることができる。表示部３１０にはタッチセンサが対応して設けられており、表示部３１０の表示面に対して指やタッチペン等の操作体を接触させたり移動させたりすることで、表示内容を操作できる。
【００８８】
ユーザは、テレビ番組動画リスト３２０から視聴したいテレビ番組のアイコン３２１を選択し、任意の表示エリアにドラッグすることでその表示エリアに選択したテレビ番組を表示させることができる。各表示エリア３１２、３１４には、図１と同様、２つの表示エリア３１２、３１４に表示されているテレビ番組の音声のフォーカス値をそれぞれ表示させることができる。
【００８９】
タブレット型デバイス３００では、例えば任意の表示エリアにおいて、近接する２本の指を離隔するピンチアウト操作を行うと、当該表示エリアに表示されているテレビ番組の音声のフォーカス値を大きくすることができる。このとき、他方の表示エリアに表示されているテレビ番組の音声のフォーカス値を、一方のテレビ番組のフォーカス値が大きくされた分だけ自動的に小さくするようにしてもよい。また、例えば任意の表示エリアにおいて、離隔している２本の指を近接するピンチイン操作を行うと、当該表示エリアに表示されているテレビ番組の音声のフォーカス値を小さくすることができる。このとき、他方の表示エリアに表示されているテレビ番組の音声のフォーカス値を、一方のテレビ番組のフォーカス値が小さくされた分だけ自動的に大きくするようにしてもよい。
【００９０】
このように、音声のフォーカス値は、図２に示したようなフォーカス割合変更部を用いなくとも、例えばジェスチャ入力等によって設定、変更することができる。
【００９１】
また、本実施形態では、リモコン２００にフォーカス割合変更スライダー２３０等のフォーカス値を調節する音声調節部を設けたが、本技術はかかる例に限定されない。例えば音声調節部がソフトウェア入力部として提供されるとき、ネットワークを介して、各音声データのフォーカス値をそれぞれ調節可能な音声調節部を表示部に表示させるプログラムを提供するようにしてもよい。この場合、プログラムの提供を受けた機器においてプログラムが実行され、表示部に音声調節部を表示させる。あるいは、ネットワークを介して接続されたサーバ上で当該プログラムを実行させ、実行結果を受けた機器が、実行結果に基づいて表示部に音声調節部を表示させることもできる。
【００９２】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、
前記設定されたフォーカス値で前記各音声データを合成する音声処理部と、
を備える、情報処理装置。
（２）
前記フォーカス割合設定部は、前記トリガー情報としてユーザにより設定された前記フォーカス値の割合の変更情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）に記載の情報処理装置。
（３）
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの内容に関する情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）または（２）に記載の情報処理装置。
（４）
前記フォーカス割合設定部は、前記トリガー情報として、前記音声データが出力される環境と出力される前記音声データとの関連性に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）〜（３）のいずれか１項に記載の情報処理装置。
（５）
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの提供を受けるユーザの姿勢状態に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）〜（４）のいずれか１項に記載の情報処理装置。
（６）
前記音声処理部は、
周波数帯域を分割して生成された複数の分割帯域に対して、前記各音声データの内容に応じて当該音声データを割り当て、
前記各分割帯域に割り当てられた前記各音声データを合成する、前記（１）〜（５）のいずれか１項に記載の情報処理装置。
（７）
前記各音声データに対応する画像データが表示部に表示されるとき、前記フォーカス割合設定部は、前記画像データを表示する表示エリアの大きさに基づいて、前記音声データのフォーカス値を設定する、前記（１）〜（６）のいずれか１項に記載の情報処理装置。
【符号の説明】
【００９３】
１００ テレビ
１０１、２０１ ＣＰＵ
１０２、２０２ ＲＯＭ
１０３、２０３ ＲＡＭ
１０４ 受信装置
１０５ 外部記憶装置／デコード回路
１０６、２０５ 通信装置
１０７ 画像／音声出力装置
１１０ 表示部
１１２、１１４ 表示エリア
１１６、１１８ 表示されたフォーカス値
１２１ パラメータ取得部
１２２ フォーカス割合設定部
１２３ 画像サイズ変更装置
１２４ 画像ミキサー装置
１２５ 音声処理装置
１２６ 音声ミキサー装置
２００ リモコン
２０４ ユーザインタフェース
２０６ 表示装置
２１０、２２０ 選局ボタン
２３０ フォーカス割合変更スライダー
２３２ スライド部
２４０ 通信部
３００ タブレット型デバイス
【技術分野】
【０００１】
本開示は、複数のコンテンツの音声出力を調整する情報処理装置、情報処理方法およびコンピュータプログラムに関する。
【背景技術】
【０００２】
視聴者が複数のコンテンツの音声を同時に聞き分けできる音声信号処理技術が本願発明者らにより提案されている（例えば、特許文献１〜５）。この技術では、複数の音声信号について周波数帯域を分割して生成された分割帯域の割り当ておよび周波数成分の抽出、時分割、周期的な変調、加工、定位の割り当てを行い、音声信号の分離情報および強調の度合いに係る情報を付加する。分割帯域の割り当ては互いに聴覚的にマスキングされない周波数帯域を割り当てる。そして、これらの音声信号を混合して出力することで、視聴者に複数の音声を聴覚上分離して同時に聞かせることができる。分割帯域の割り当て量を変えることで、音声の強調の度合いを変えることができる。この音声の強調の度合いパラメータをフォーカス値と呼んでいる。要約すると、この音声信号処理技術は、各音声の強調の度合いであるフォーカス値を反映させ、かつ、聴覚上分離して認識できる複数の音声信号を生成することができる技術である。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−１３５８９２号公報
【特許文献２】特開２００８−１３５８９１号公報
【特許文献３】特開２００８−２０９６４１号公報
【特許文献４】特開２００８−２２６４００号公報
【特許文献５】特開２０１０−１３６１１７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、近年、液晶方式やプラズマ方式等、テレビの画面は薄型化、大型化している。画面サイズが大きくなることにより、１つのテレビの画面に複数の表示エリアを設定し、各表示リアに異なるコンテンツ（テレビ番組やビデオ）をそれぞれ表示させることが可能となった。これにより、ユーザは複数のコンテンツの映像を同時に見ることができる。
【０００５】
しかしながら、複数の表示エリアにそれぞれ異なるコンテンツの映像を表示させることができるものの、音声は１つのコンテンツの音声しか出力できなかった。複数のコンテンツの音声を同時に出力すると、視聴者が音声を聞き分けることができないためである。そこで、本願発明者らは、上記の音声信号処理技術を応用して各コンテンツの音声を聴覚上分離して認識できるように出力し、視聴者にとって最適な状態で各音声を出力できることを検討した。
【課題を解決するための手段】
【０００６】
本開示によれば、同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、設定されたフォーカス値で前記各音声データを合成する音声処理部と、を備える、情報処理装置が提供される。
【０００７】
また、本開示によれば、同時に出力される複数の音声データに関連するトリガー情報に基づいて、各音声データの強調の度合いを示すフォーカス値の割合を設定するステップと、設定されたフォーカス値で前記各音声データを合成するステップと、を含む、情報処理方法が提供される。
【０００８】
さらに、本開示によれば、コンピュータを、同時に出力される複数の音声データに関連するトリガー情報に基づいて、各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、設定されたフォーカス値で前記各音声データを合成する音声処理部と、を備える、情報処理装置として機能させるコンピュータプログラムが提供される。
【０００９】
本開示によれば、同時に出力される音声データの各フォーカス値をトリガー情報に基づいて変更することで、各音声データに適した適切な明瞭さで各音声を出力させることができる。
【発明の効果】
【００１０】
以上説明したように本開示によれば、コンテンツの視聴者が各音声をそれぞれ自由に調整できるようになる。
【図面の簡単な説明】
【００１１】
【図１】本開示の実施形態に係る音声出力システムをテレビに適用した場合の状況を示す説明図である。
【図２】同実施形態に係るリモコンの一構成例を示す説明図である。
【図３】同実施形態に係るフォーカス値割合を変更する操作入力部の変形例を示す説明図である。
【図４】フォーカス値割合変更スライダーのスライド部の位置に応じた、音声のフォーカス値および表示エリアの画面サイズの変化を示す説明図である。
【図５】同実施形態に係るリモコンの他の構成例を示す説明図である。
【図６】同実施形態に係る音声出力システムの処理を概念的に表したブロック図である。
【図７】テレビの一構成例を示すハードウェア構成図である。
【図８】リモコンの一構成例を示すハードウェア構成図である。
【図９】同実施形態に係るテレビおよびリモコンの一実施構成例を示すブロック図である。
【図１０】タブレット型デバイスでの操作インタフェースを説明する説明図である。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１３】
なお、説明は以下の順序で行うものとする。
＜１．複数のコンテンツの音声を同時出力する音声出力システム＞
［１−１．システム概要］
［１−２．リモコン構成］
［１−３．画面サイズとフォーカス値との連動］
＜２．音声出力システムの構成＞
［２−１．概念説明］
［２−２．ハードウェア構成例］
（２−２−１．テレビ）
（２−２−２．リモコン）
［２−３．テレビおよびリモコンの実施構成例］
＜３．音声出力システムの適用例＞
【００１４】
＜１．複数のコンテンツの音声を同時出力する音声出力システム＞
［１−１．システム概要］
まず、図１を参照して、本開示の実施形態に係る複数のコンテンツの音声を同時出力する音声出力システムについて説明する。なお、図１は、本実施形態に係る音声出力システムをテレビに適用した場合の状況を示す説明図である。
【００１５】
本実施形態では、画面に２つの表示エリアを有する２画面テレビに対して本実施形態に係る音声出力システムを適用し、２つの番組を同時に視聴する場合を一例として説明する。もちろん、本技術は後述するようにかかる例に限定されず、２以上の画面や音声を出力する装置に対しても適用可能である。また、当該システムを適用する対象も、テレビに限定されず、パーソナルコンピュータやＰＤＡ、カーナビゲーション等の情報機器の表示部にて複数のコンテンツを再生あるいは実行する場合にも適用可能である。
【００１６】
図１に示すように、視聴者がテレビ１００で２つの番組を視聴しているとする。テレビ１００の表示部１１０には第１の表示エリア１１２および第２の表示エリア１１４があり、各表示エリア１１２、１１４にはそれぞれ番組が表示される。また、表示エリア１１２、１１４に表示されている各番組の音声がスピーカ（図示せず。）から出力される。本実施形態に係る音声出力システムでは、例えば、特許文献１〜５に開示される周波数分割多重処理を用いており、複数の楽曲等の音声を同時かつ選択的に聞き分け可能に提供する。この周波数分割多重処理では、複数の音を混合しても同時に聞き分けでき、また、音量ではなくフォーカスというパラメータによって複数の音声を処理することができる。
【００１７】
ここで、フォーカスとは音の強調の度合いを表すパラメータであり、その値（「フォーカス値」と称する。）は例えば０〜１００の値をとる。したがって、１０１段階のステップで音声のフォーカスの値を変化させることができる。フォーカス値が大きいほど音声をはっきりと聞こえるように出力させることができ、フォーカス値が小さいほど音声はぼかされて出力される。
【００１８】
各番組の音声は、テレビ１００を操作するためのリモートコントローラ（以下、「リモコン」と略する。）２００により変更することができる。本実施形態に係るリモコン２００には、例えば表示部１１０の表示エリアを１つにする１画面モードと２つにする２画面モードとで切り替える表示モード切替ボタンや、２画面モードにおいて各番組の音声に対するフォーカス値の割合を変更するフォーカス値割合変更スライダー等が設けられる。ユーザは、フォーカス割合変更スライダーを用いて各番組のフォーカス値の割合を変更させることで、興味のある番組の音声をよりはっきりと出力させることができるとともに、他の番組の音声も邪魔にならずかつ認識可能なさりげない音質で出力できる。すなわち、視聴者の興味の度合いに応じた音質に変更できる。これにより、各視聴者の興味を満足させつつ、視聴者間で時間と場所を共有することができる。
【００１９】
［１−２．リモコン構成］
図２に、本実施形態に係るリモコン２００の一構成例を示す。図２では、リモコン２００の操作入力部のうち、選局ボタン２１０、２２０およびフォーカス割合変更スライダー２３０を示している。
【００２０】
リモコン２００には、通常のテレビのリモコンと同様に、電源ボタンや選局ボタン（符号２１０、２２０）、音量調節ボタン、表示モード切替ボタン等が設けられている。これらの操作入力部は、物理的に押下したりスライドしたりといった操作が可能な入力部であってもよく、リモコン２００の表示部にタッチパネル等を用いて構成されたソフトウェア入力部であってもよい。タッチパネルを用いた入力部の場合、表示部に仮想的にボタンやスライダー等が表示される。ユーザは、画面に対してタッチ等の操作入力を行うことで、ソフトウェア入力部を操作することができる。
【００２１】
本実施形態に係るリモコン２００は、表示モード切替ボタンにより２画面モードが選択されているときに各表示エリア１１２、１１４に表示させる番組を容易に選択できるように、２つの選局ボタン２１０、２２０を備えている。選局ボタン２１０、２２０は、チャンネルと対応する１０個のチャンネルボタンから構成されている。選局ボタン２１０のチャンネルボタンを操作すると、第１の表示エリア１１２に表示させる番組を選択することができ、選局ボタン２２０のチャンネルボタンを操作すると、第２の表示エリア１１４に表示させる番組を選択することができる。すなわち、選局ボタンは、表示部１１０に設定可能な表示エリアの数だけ設けられる。これにより、操作対象の表示エリアを選択する必要はなく、直接所望の表示エリアの番組を設定することができる。
【００２２】
また、リモコン２００には、２画面モード時の各表示エリア１１２、１１４に表示される番組の音声について、フォーカス割合を調整する音声調節部としてフォーカス割合変更スライダー２３０が設けられている。第１の表示エリア１１２で選択されているチャンネルをＣＨ１、第２の表示エリア１１４で選択されているチャンネルをＣＨ２とする。フォーカス割合変更スライダー２３０には、図２に示すように、直線上を移動可能なスライド部２３２が設けられている。スライド部２３２の直線上の位置に応じてチャンネルＣＨ１とＣＨ２とのフォーカス割合が設定される。
【００２３】
スライド部２３２を直線のチャンネルＣＨ１側の端部に位置させると、チャンネルＣＨ１とＣＨ２とのフォーカス割合は１００：０となり、チャンネルＣＨ１の音声がはっきりと聞こえるように調整される。一方、スライド部２３２を直線のチャンネルＣＨ２側の端部に位置させると、チャンネルＣＨ１とＣＨ２とのフォーカス割合は０：１００となり、チャンネルＣＨ２の音声がはっきりと聞こえるように調整される。直線の中央にスライド部２３２を位置させると、チャンネルＣＨ１とＣＨ２とのフォーカス割合は５０：５０となり、チャンネルＣＨ１およびＣＨ２の音声が同等に聞こえるように調整される。スライド部２３２を移動させることにより、連続的にフォーカス割合を変更することができる。
【００２４】
なお、図２では、フォーカス値割合を変更する音声調節部をスライダー型としたが、本技術はかかる例に限定されない。例えば、図３に示すように、つまみ型のフォーカス値割合変更部２３０Ａとしてもよい。つまみ型のフォーカス値割合変更部２３０Ａでは、基準位置からのつまみ部２３２Ａの回転角度に基づいて、チャンネルＣＨ１、ＣＨ２のフォーカス値割合を変更することができる。例えば、つまみ部２３２Ａを反時計回りに回すとチャンネルＣＨ２に対してチャンネルＣＨ１のフォーカス値割合を大きくすることができ、つまみ部２３２Ａを時計回りに回すとチャンネルＣＨ１に対してチャンネルＣＨ２のフォーカス値割合を大きくすることができる。また、図３の例では１つのつまみ型のフォーカス値割合変更部２３０Ａで２つのチャンネルのフォーカス値割合を調整したが、本技術はかかる例に限定されない。例えば各チャンネルにそれぞれ対応するつまみ型のフォーカス値割合変更部２３０Ａを設けてもよい。
【００２５】
あるいは、数値入力型のフォーカス値割合変更部２３０Ｂとしてもよい。数値入力型のフォーカス値割合変更部２３０Ｂでは、視聴者はテンキー２３２Ｂを用いて１つのチャンネル（例えばチャンネルＣＨ１）のフォーカス値を入力する。そうすると、もう１つのチャンネル（例えばチャンネルＣＨ２）のフォーカス値が自動的に決定される。
【００２６】
このように、フォーカス値割合を変更する操作入力部の形状は、リモコン２００の構成や使用形態に応じて適宜決定することができる。
【００２７】
リモコン２００は、通信部２４０を介してテレビ１００と無線通信を行う。通信部２４０の通信方式は、例えば赤外線通信方式でもよく、無線ＬＡＮを利用した通信方式でもよい。かかる通信部２４０により、リモコン２００から入力された入力情報をテレビ１００に通知することができる。
【００２８】
［１−３．画面サイズとフォーカス値との連動］
本実施形態では、テレビ１００を２画面モードで使用しているとき、表示エリアのサイズと音声のフォーカス値とを連動して変動させる。一般に、視聴者は、２つの番組のうち音声のフォーカス値を高く設定した番組を主として視聴したいと考えられる。そこで、フォーカス値割合変更スライダー２３０により設定されたフォーカス値割合に応じて、２つの表示エリア１１２、１１４のサイズを変更し、視聴者が視聴したい番組をよりはっきりと視聴できるようにする。
【００２９】
例えば、フォーカス値割合変更スライダー２３０の設定と表示エリア１１２、１１４との対応は以下のように設定することができる。スライド部２３２の位置が表示エリア１１２に表示されるチャンネルＣＨ１側端部に位置されたとき、表示エリア１１２の画面サイズが最大となり、表示エリア１１４の画面サイズは最小となる。一方、スライド部２３２の位置が表示エリア１１４に表示されるチャンネルＣＨ２側端部に位置されたとき、表示エリア１１４の画面サイズが最大となり、表示エリア１１２の画面サイズは最小となる。直線の中央にスライド部２３２を位置させると、表示エリア１１２、１１４の画面サイズは同サイズとなる。
【００３０】
すなわち、表示エリア１１２、１１４の画面サイズが０〜１００の割合で表されるとすると、以下の関係が成り立つ。
（Ａ１）チャンネルＣＨ１の表示エリアの画面サイズ＝スライド部の位置
（Ｂ１）チャンネルＣＨ２の表示エリアの画面サイズ＝１００−（スライド部の位置）
（Ｃ１）チャンネルＣＨ１の表示エリアの画面サイズ
＋チャンネルＣＨ２の表示エリアの画面サイズ＝１００
【００３１】
また、上述したフォーカス値については、以下の関係が成り立つ。
（Ａ２）チャンネルＣＨ１の音声のフォーカス値＝スライド部の位置
（Ｂ２）チャンネルＣＨ２の音声のフォーカス値＝１００−（スライド部の位置）
（Ｃ２）チャンネルＣＨ１の音声のフォーカス値
＋チャンネルＣＨ２の音声のフォーカス値＝１００
【００３２】
このように、スライド部２３２を移動させることにより、音声のフォーカス値および表示エリア１１２、１１４の画面サイズを連続的に変更することができる。一具体例を図４に示す。図４左には、フォーカス値割合変更スライダー２３０のスライド部２３２の位置が８０の位置にある場合を示している。このとき、チャンネルＣＨ１の音声のフォーカス値は８０となり、表示エリア１１２の画面サイズも８０となる。一方、チャンネルＣＨ２の音声のフォーカス値は２０となり、表示エリア１１４の画面サイズも２０となる。したがって、チャンネルＣＨ１の番組をはっきりと視聴できるようになる。
【００３３】
図４中央には、フォーカス値割合変更スライダー２３０のスライド部２３２の位置が５０の位置にある場合を示している。このとき、チャンネルＣＨ１およびＣＨ２ともに音声のフォーカス値は５０となり、表示エリア１１２、１１４の画面サイズも５０となる。したがって、チャンネルＣＨ１、ＣＨ２の番組を同じ画面サイズ、音声のフォーカス値で視聴することができるようになる。
【００３４】
そして、図４右には、フォーカス値割合変更スライダー２３０のスライド部２３２の位置が３０の位置にある場合を示している。このとき、チャンネルＣＨ１の音声のフォーカス値は３０となり、表示エリア１１２の画面サイズも３０となる。一方、チャンネルＣＨ２の音声のフォーカス値は７０となり、表示エリア１１４の画面サイズも７０となる。したがって、チャンネルＣＨ２の番組をはっきりと視聴できるようになる。
【００３５】
テレビ１００の表示部１１０には、フォーカス値割合変更スライダー２３０にて設定されたフォーカス値を表示エリア１１２、１１４に表示してもよい（図１の符号１１６、１１８）。このようにフォーカス値を表示することにより、視聴者は現在のフォーカス値を確認することができる。
【００３６】
なお、本例では、表示エリア１１２、１１４の画面サイズと音声のフォーカス値とを同じ値に設定したが、本技術はかかる例に限定されない。例えば視聴者の好みに応じて、画面サイズの変化率と音声のフォーカス値とを別々に設定してもよい。例えば図５に示すように、表示エリア１１２に表示される番組の音声のフォーカス値を設定するスライダー２３０ａと、表示エリア１１４に表示される番組の音声のフォーカス値を設定するスライダー２３０ｂとを別々に設けてもよい。また、表示エリア１１２および表示エリア１１４の画面サイズを設定する表示エリア調節部としてスライダー２５０ａ、２５０ｂをそれぞれ設けてもよい。これにより、各スライダーのスライド部２３２ａ、２３２ｂ、２５２ａ、２５２ｂの位置を動かすことで、各番組の音声のフォーカス値および表示エリア１１２、１１４の画面サイズを独立して設定することができる。
【００３７】
なお、図５に示す例では、チャンネルＣＨ１とチャンネルＣＨ２の画面サイズと音声のフォーカス値を独立に設定可能にしているが、画面サイズの２５２ａ、２５２ｂの２つを連動させて一つにまとめて設定可能にしてもよい。また、音声のフォーカス値の２３２ａ、２３２ｂの２つを連動させて一つにまとめて設定可能にしてもよい。
【００３８】
また、本例では、表示モード切替ボタンにより１画面モードと２画面モードとを切り替えたが、本技術はかかる例に限定されない。例えばフォーカス値割合変更スライダー２３０のスライド部２３２の位置が１００のとき１画面モードとし、スライド部２３２の位置が１００以外のとき２画面モードとして、表示モード切替ボタンを用いることなく自動的に設定されるようにしてもよい。
【００３９】
＜２．音声出力システムの構成＞
［２−１．概念説明］
図６に、本実施形態に係る音声出力システムの処理を概念的に表したブロック図を示す。本実施形態に係る音声出力システムでは、表示エリア１１２にチャンネルＣＨ１（プライマリ）の番組を、表示エリア１１４にチャンネルＣＨ２（セカンダリ）の番組をそれぞれ表示する。
【００４０】
例えば、チャンネルＣＨ１の番組は、地上波デジタル放送等の放送波を受信・復調し、圧縮されたデータストリーム１０を、動画デコーダーによりデコードすることにより得られる（Ｐ１１）。デコードされたデータストリーム１０は、画像データと音声データとに分離される。画像データは、指定された画像サイズにリサイズされた後（Ｐ１２）、画像ミキサーを経由して画像出力装置へ出力される（Ｐ１３）。一方、デコードの音声データは周波数分割多重処理により指定されたフォーカス値に処理された後（Ｐ１４）、音声ミキサーを経由して音声出力装置へ出力される（Ｐ１５）。
【００４１】
チャンネルＣＨ２の番組の処理も、チャンネルＣＨ１の番組の処理と同様に、まずデータスストリーム２０をデコードして画像データと音声データとに分離する（Ｐ２１）。そして、画像データを、指定された画像サイズにリサイズした後（Ｐ２２）、画像ミキサーを経由して画像出力装置へ出力する（Ｐ２３）。一方、デコードの音声データは周波数分割多重処理により指定されたフォーカス値に処理された後（Ｐ２４）、音声ミキサーを経由して音声出力装置へ出力される（Ｐ２５）。
【００４２】
チャンネルＣＨ１の番組の画像および音声と、チャンネルＣＨ２の番組の画像および音声とがそれぞれ出力されると、各画像は対応する表示エリア１１２、１１４に表示され、各音声はミックスして最終出力される。
【００４３】
［２−２．ハードウェア構成例］
（２−２−１．テレビ）
本実施形態に係るテレビ１００は、図７に示すように、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）１０３とを備える。また、テレビ１００は、受信装置１０４と、外部記憶装置／デコード回路１０５と、通信装置１０６と、画像／音声出力処理装置１０７と、バス１０８とを備える。
【００４４】
ＣＰＵ１０１は、演算処理装置および制御装置として機能し、各種プログラムに従ってテレビ１００内の動作全般を制御する。また、ＣＰＵ１０１は、マイクロプロセッサであってもよい。ＲＯＭ１０２は、ＣＰＵ１０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ１０３は、ＣＰＵ１０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはバス１０８により相互に接続されている。
【００４５】
受信装置１０４は、テレビ１００の外部アンテナにて地上波デジタル放送等の放送波であるＲＦ信号を受信する装置である。受信装置１０４は、受信したＲＦ信号を増幅・復調する。復調された信号は、例えばＭＰＥＧ等の方式で圧縮されており、複数の番組の信号が含まれている。外部記憶装置／デコード回路１０５は、受信装置１０４にて復調された信号をデコードし、画像データと音声データとにそれぞれ分離する。このとき、復調された信号に含まれる各番組について、それぞれ画像データと音声データとが生成される。
【００４６】
通信装置１０６は、リモコン２００と通信するための通信インタフェースである。通信装置１０６は、赤外線通信装置であってもよく、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）対応通信装置であってもよく、ワイヤレスＵＳＢ対応通信装置であってもよい。あるいは、通信装置１０６は、有線による通信を行うワイヤー通信装置であってもよい。
【００４７】
画像／音声出力処理装置１０７は、外部記憶装置／デコード回路１０５により分離して生成された画像データおよび音声データを出力する装置である。なお、これらの画像データおよび音声データは、画像／音声出力処理装置１０７に出力される前に画像処理および音声処理が施される。画像／音声出力装置１０７は、例えば画像データを表示する画像出力装置として液晶ディスプレイ装置や有機ＥＬディスプレイ装置等を用いることができ、音声データを表示する音声出力装置としてスピーカ等を用いることができる。
【００４８】
（２−２−２．リモコン）
本実施形態に係るリモコン２００は、図８に示すように、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）２０１と、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）２０２と、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）２０３とを備える。また、リモコン２００は、ユーザインタフェース２０４と、通信装置２０５と、表示装置２０６と、バス２０７とを備える。
【００４９】
ＣＰＵ２０１は、演算処理装置および制御装置として機能し、各種プログラムに従ってリモコン２００内の動作全般を制御する。また、ＣＰＵ２０１は、マイクロプロセッサであってもよい。ＲＯＭ２０２は、ＣＰＵ２０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ２０３は、ＣＰＵ２０１の実行において使用するプログラムや、その実行において適宜変化するパラメータ等を一時記憶する。これらはバス２０７により相互に接続されている。
【００５０】
ユーザインタフェース２０４は、テレビ１００を操作するための操作入力を行うための操作入力部である。ユーザインタフェース２０４は、上述したように、物理的なボタンやスライダー等により構成してもよく、タッチパネル付き液晶を用いてソフトウェアボタンやソフトウェアスライダー等を構成してもよい。なお、ソフトウェアボタン等の表示処理は、ＣＰＵ２０１を表示処理部として機能させることにより行うことができる。通信装置２０５は、テレビ１００と通信するための通信インタフェースである。通信装置２０５は、テレビ１００の通信装置１０６と対応する装置が設けられ、例えば赤外線通信装置や、無線ＬＡＮ対応通信装置、ワイヤレスＵＳＢ対応通信装置、あるいは有線による通信を行うワイヤー通信装置等を用いることができる。
【００５１】
表示装置２０６は、情報を表示する装置であって、液晶ディスプレイ装置や有機ＥＬディスプレイ装置等を用いることができる。ユーザインタフェース２０４がソフトウェアボタン等により構成される場合には、表示装置２０６にこれらを表示することもできる。
【００５２】
［２−３．テレビおよびリモコンの実施構成例］
図９に、本実施形態に係るテレビ１００およびリモコン２００の一実施構成例を示す。なお、図９において、図７に示したテレビ１００および図８に示したリモコン２００と同一の機能部については同一の符号を付し、詳細な説明は省略する。また、図９では、図７および図８に示した構成要素の記載を一部省略している。
【００５３】
まず、リモコン２００について説明すると、図９に示すように、リモコン２００は、ユーザインタフェース２０４と、通信装置２０５と、表示装置２０６とを備える。これらの構成要素は図８に示したユーザインタフェース２０４、通信装置２０５、および表示装置２０６と同様に機能する。また、図９に示すリモコン２００も、図８に示したＣＰＵ２０１、ＲＯＭ２０２およびＲＡＭ２０３を備えている。
【００５４】
リモコン２００のユーザインタフェース２０４は、表示モード切替ボタンやフォーカス値割合変更スライダー２３０等から構成されている。ユーザインタフェース２０４から入力された各番組の音声に対するフォーカス値の設定情報は、通信装置２０５を介してテレビ１００の通信装置１０６へ送信される。
【００５５】
一方、テレビ１００は、図９に示すように、受信装置１０４と、映像音響データデコード回路１０５ａと、通信装置１０６と、画像出力装置１０７ａおよび音声出力装置１０７ｂとを備える。また、テレビ１００は、パラメータ取得部１２１と、フォーカス割合設定部１２２と、画像サイズ変更装置１２３と、画像ミキサー装置１２４と、音声処理装置１２５と、音声ミキサー装置１２６とをさらに備える。受信装置１０４および通信装置１０６は図７に示した受信装置１０４および通信装置１０６と同様に機能する。また、映像音響データデコード回路１０５ａは外部記憶装置／デコード回路１０５に対応し、画像出力装置１０７ａおよび音声出力装置１０７ｂは画像／音声出力装置１０７に対応する。
【００５６】
パラメータ取得部１２１は、通信装置１０６を介してリモコン２００から送信された操作入力情報を表すパラメータを取得する。パラメータ取得部１２１は、例えば表示部１１０に表示する番組のチャンネルを表すチャンネル選択情報や、１画面モードあるいは２画面モードの切り替えを表す画面モード情報、音量を変更する音量情報、音声のフォーカス値の設定を表すフォーカス情報等を取得する。ここで、フォーカス情報は、フォーカス割合設定部１２２へ出力される。
【００５７】
フォーカス割合設定部１２２は、パラメータ取得部１２１から入力されたフォーカス情報に基づいて、画像サイズ変更装置１２３へ画像サイズ変更指示を出力し、音声処理装置１２５へ音声データ修正指示を出力する。フォーカス情報には、チャンネルＣＨ１の音声のフォーカス値が含まれる。フォーカス割合設定部１２２は、入力されたチャンネルＣＨ１の音声のフォーカス値に基づいて、上述の（Ｂ２）の関係に基づいてチャンネルＣＨ２の音声のフォーカス値を算出する。
【００５８】
また、フォーカス値割合設定部１２２は、各チャンネルＣＨ１、ＣＨ２のフォーカス値に基づいて、これらの画像データの表示エリア１１２、１１４の画面サイズを決定する。例えば、フォーカス割合と同様に画面サイズの割合が変更される場合には、チャンネルＣＨ１とＣＨ２とのフォーカス割合と同じ画面サイズ割合となるように表示エリア１１２、１１４の画面サイズが設定される。フォーカス割合設定部１２２は、設定された画面サイズを画像サイズ変更装置１２３へ出力し、フォーカス値を音声処理装置１２５へ出力する。
【００５９】
画像サイズ変更装置１２３は、フォーカス割合設定部１２２から入力された画像サイズ変更指示も基づいて、表示エリア１１２、１１４に表示する画像データの画像サイズを変更する。テレビ１００は、外部アンテナ１００ａにて地上波デジタル放送等の放送波であるＲＦ信号を受信装置１０４にて受信すると、受信装置１０４にて増幅・復調された信号が映像音響データデコード回路１０５ａでデコードされる。上述したように、復調された信号には複数の番組の信号が含まれており、復調信号は番組毎に画像データと音声データとに分離される。
【００６０】
画像サイズ変更装置１２３は、映像音響データデコード回路１０５ａにより画像データを受け取ると、フォーカス割合設定部１２２にて設定された表示エリアの画面サイズに適合するように、各表示エリアに対応する各画像データの画像サイズを変更する。画像サイズが変更された画像データは、画像ミキサー装置１２４を経由して画像出力装置１０７ａへ出力される。
【００６１】
音声処理装置１２５は、映像音響データデコード回路１０５ａにより音声データを受け取ると、フォーカス割合設定部１２２にて設定されたフォーカス値に適合するように、各番組の音声データを合成するフォーカス処理が行われる。フォーカス処理された音声データは、音声ミキサー装置１２６を経由して音声出力装置１０７ｂへ出力される。
【００６２】
以上、本実施形態に係る音声出力システムを適用したテレビ１００およびリモコン２００の構成とその機能について説明した。本技術によれば、フォーカス値割合設定部１２２により、複数の表示エリアに表示される番組の音声のフォーカス値を、フォーカス割合変更スライダー２３０により設定されたフォーカス情報に基づいて変更する。そして、音声処理装置１２５により、フォーカス割合設定部１２２にて設定されたフォーカス値に適合するように、各番組の音声データを合成する。これにより、視聴者が所望する番組の音声をよりはっきりと視聴できるとともに、他の番組についても音声を認識することが可能となる。また、音声のフォーカス割合に応じて表示エリアのサイズを変更してもよい。
【００６３】
＜３．音声出力システムの適用例＞
本実施形態に係る音声出力システムは、音声のフォーカス値を、出力される音声に関連するトリガー情報に基づき変更する。例えば、上述した例においては、フォーカス割合変更スライダー２３０のスライド部２３２がユーザにより操作されることで、フォーカス値割合設定部１２２により音声のフォーカス値が変更される。この場合、トリガー情報はフォーカス割合変更スライダー２３０の操作入力（スライド部２３２の位置に対応するフォーカス情報）となる。また、音声出力システムは、ユーザのいる環境や再生するコンテンツの内容に基づいて、フォーカス値割合設定部１２２により自動的にフォーカス値を変更することもできる。この場合、トリガー情報はユーザのいる環境や再生するコンテンツの内容となる。以下では、本実施形態に係る音声出力システムを適用し、トリガー情報に基づいて音声のフォーカス値を変更する処理例について説明する。
【００６４】
［適用例１］
例えば、家族がゲームをしている最中に視聴者Ａがニュース番組を視聴したい場合、家族あるいは視聴者Ａがリモコン２００よりテレビ１００の表示を２画面モードに切り替えることで、ゲームとニュース番組とを表示部１１０に表示させることができる。このとき、ニュース番組は音声から得られる内容を理解できればよいため、ユーザによりゲームの表示エリアがニュース番組の表示エリアより大きく設定されたとする（例えばゲームの表示エリアを７０％、ニュース番組の表示エリアを３０％に設定）。テレビ１００は、リモコン２００から表示エリアのサイズ変更指示を受信し、フォーカス割合設定部１２２により指定の表示エリアのサイズが設定され、画像サイズ変更装置１２３により指定されたサイズに各表示エリアが変更される。
【００６５】
このとき、フォーカス割合設定部１２２は、表示エリアのサイズの変更に応じて、音声のフォーカス値を変更する。ニュース番組の表示エリアは小さくてもよいが音声ははっきりと聞き取れるように、ニュース番組の音声のフォーカス値をゲームの音声のフォーカス値より大きくしてもよい。あるいは、表示サイズが小さいときには音声のフォーカス値も小さくするように設定してもよい。フォーカス割合設定部１２２にて設定されたフォーカス値の割合は音声処理装置１２５へ出力され、音声処理装置１２５により各番組の音声のフォーカス値が変更される。このように、表示されるコンテンツの内容や視聴者の要望をトリガー情報として表示エリアのサイズおよび音声のフォーカス値を設定することで、視聴者の要望に合った状況でコンテンツを視聴することが可能となる。
【００６６】
［適用例２］
他の例として、例えば、１９時から放送されているドラマの視聴中に、毎日チェックしている１９時２５分から放送される天気予報があったとする。本実施形態に係るテレビ１００は、この天気予報に関する情報（例えば番組名や番組を特定するＩＤ等）を保持することで、当該天気予報の放送が開始されると表示部１１０にポップアップ画面を自動的に表示して、視聴者に見せるようにする。すなわち、天気予報に関する情報をトリガー情報として、トリガー情報に一致する番組が放送されるときに表示部１１０に表示させる。このとき、ドラマの音声と天気予報の音声とが多重化されるとする。
【００６７】
この際、ドラマの視聴を妨げないように、フォーカス割合設定部１２２により、例えば表示部１１０の隅に小さなポップアップ画面が表示されるとともに、天気予報の音声のフォーカス値がドラマの音の妨げとならないように設定される。これにより、ドラマの視聴を妨げることなく天気予報の内容をユーザに通知することができる。そして、天気予報が終了するとポップアップ画面を非表示とし、ドラマのみが表示される画面に戻される。このとき、フォーカス割合設定部１２２は天気予報の音声のフォーカス値を０とし、消音する。天気予報の放送スケジュールは、例えば電子番組表を参照することにより取得可能であり、放送時間が変更されても当該天気予報が放送されるときにポップアップ画面により表示することができる。
【００６８】
［適用例３］
また、テレビ１００において、２つの番組を２画面表示しているとき、通常フォーカス割合設定部１２２は、主番組（プライマリ）として視聴している番組の音声のフォーカス値を、副番組（セカンダリ）として視聴している番組の音声のフォーカス値より大きく設定する。これにより、ユーザは、主番組の情報を主として認識できる。ここで、主番組のＣＭが検出されると、フォーカス割合設定部１２２は、主番組側のＣＭの音声のフォーカス値より副番組の音声のフォーカス値を大きく設定する。その後、フォーカス割合設定部１２２主番組側のＣＭ終了により主番組側のＣＭの音声のフォーカス値を大きく、副番組の音声のフォーカス値を小さく設定する。これにより、副番組の音声は、主番組の音声を妨げない程度に小さくされたり、あるいは消音されたりする。
【００６９】
なお、主番組と副番組とは同時に２画面表示されていなくてもよく、例えば、通常は主番組のみを表示し、主番組のＣＭを検出すると、主番組のＣＭ放送中は自動的に副番組の表示画面をポップアップ表示してもよい。この場合も、通常フォーカス割合設定部１２２は、主番組の音声のフォーカス値を副番組の音声のフォーカス値より大きく設定するが、主番組のＣＭが検出されると、主番組側のＣＭの音声のフォーカス値より副番組の音声のフォーカス値を大きく設定する。そして、主番組のＣＭが終了すると、副番組を表示しているポップアップ画面を非表示にして主番組のみを表示させるようにする。このとき、主番組側のＣＭ終了により副番組の音声は主番組の音声を妨げない程度に小さくされたり、あるいは消音されたりする。
【００７０】
このように主番組側のＣＭ開始をトリガー情報として通常時のフォーカス値の設定を変更することで、２つの番組の音声の強調の度合いを変化させ、ユーザにとって意味のある情報の音声を主として認識できるようにすることができる。
【００７１】
［適用例４］
さらに、テレビ１００に予めキーワードを登録し、このキーワードに基づいて自動的にお知らせ画面をポップアップ表示させてもよい。すなわち、キーワードがトリガー情報となる。キーワードとしては、例えば「天気予報」等の番組ジャンルや、人物やグループ名等を用いることができる。主番組を１画面モードで表示させているときに、主番組以外で当該キーワードに一致する番組が放送されると、テレビ１００は自動的に２画面モードとし、副番組として当該キーワードに一致する番組を表示する。キーワードに一致する番組の探索は、電子番組表を利用して行うことができる。
【００７２】
ここで、キーワードに対して予め重要度を付与することもできる。これにより、フォーカス割合設定部１２２は、キーワードの重要度に応じて副番組の音声のフォーカス値を設定することができる。例えば、重要度の高いキーワードに一致する番組が検出されたとき、フォーカス割合設定部１２２は当該番組のフォーカス値を大きく（例えば、主番組の音声のフォーカス値と同一またはそれ以上に）設定することで、視聴者に当該番組の放送を強く通知することができる。一方、重要度の低いキーワードに一致する番組が検出されたときには、フォーカス割合設定部１２２は当該番組のフォーカス値を小さく（例えば、主番組の音声のフォーカス値より小さく）設定するようにしてもよい。
【００７３】
なお、異なるキーワードについて、一致する番組が複数検出された場合には、キーワードの重要度の最も高い番組のみをポップアップ画面で表示させてもよい。あるいは、キーワードの重要度に応じてポップアップ画面のサイズおよびフォーカス値を変化させて、すべての検出された番組をポップアップ表示させてもよい。
【００７４】
［適用例５］
また、テレビ１００を視聴する視聴者の姿勢状態に応じて、番組の音声のフォーカス値を変化させてもよい。例えば、テレビ１００に視聴者の視線を認識可能な視線認識センサが設けられているとする。例えば視線認識センサは既に実用化されているＣＣＤセンサやＣＭＯＳセンサを使ったものを用いる。また視線認識ではないが、視聴状態の検出には、既に実用化されている赤外線センサを利用した人感センサを用いてもよい。このとき、フォーカス割合設定部１２２は、視線認識センサの検出結果をトリガー情報として、視聴者がテレビ１００を見ていると判断される場合には番組のフォーカス値を大きくし、視聴者がテレビ１００を見ていないと判断される場合には番組のフォーカス値を小さくする。なお、複数の番組が表示されている場合には、視聴者の視線の方向から視聴者が見ている番組を特定し、視聴者が見ていると特定した番組の音声のフォーカス値を他の番組の音声のフォーカス値より大きくするようにしてもよい。
【００７５】
視線認識センサの検出結果より、視聴者がテレビ１００を見ていないと判断される場合には番組の音声のフォーカス値を徐々に下げるようにしてもよい。このとき、フォーカス割合設定部１２２は、フォーカス値の減少とともに画面を暗くしてもよい。これにより、テレビ１００の消費電力を下げ、省エネルギでテレビ１００を稼動させておくことができる。
【００７６】
［適用例６］
さらに、フォーカス割合設定部１２２は、テレビ１００の周辺環境で発生した事件・事故等の緊急度に応じて、番組の音声のフォーカス値を変更してもよい。テレビ１００の周辺環境は、テレビ１００の位置情報に基づいて特定することができ、当該テレビ１００を視聴するユーザのいる環境と同視できる。そこで、フォーカス割合設定部１２２は、ユーザのいる環境（テレビ１００の位置情報）と、テレビ１００より通知しようとしている情報との関連性を判断し、その関連の度合いに応じてフォーカス値を変更する。例えば地震発生を伝える緊急地震速報を通知する際、テレビ１００の位置情報と地震発生位置との近さに応じて通知の緊急度を判定する。テレビ１００の現在位置と地震発生位置とが近いほど通知の緊急度の高い情報となる。
【００７７】
通知の緊急度が高い情報と判定した場合、視聴中の番組の音声と緊急地震速報の通知音とを混合して音声出力装置から出力するようにする。これにより、番組の音声を妨げることなく緊急地震速報の通知音を視聴者に確実に通知することができる。このとき、緊急地震速報の通知音のフォーカス値を大きくし、番組の音声のフォーカス値を下げるようにしてもよい。このように、フォーカス割合設定部１２２は、テレビ１００（すなわち、ユーザ）の位置情報との関係により通知の緊急度の高い情報をトリガー情報として、複数の音声を混合して出力させることができる。
【００７８】
［適用例７］
また、テレビ１００以外にも、例えば携帯電話機のような移動通信端末においても本実施形態の音声出力システムを適用することができる。例えば、携帯電話機において、話者の声と周囲の音（環境音）とを異なるマイクで集音し、これらの音声を周波数分割多重処理によって混合する。これにより、聞き手に対して話者の声および環境音のいずれもよく聞き取れるようにすることができ、聞き手の臨場感を高めることができる。このとき、話者の声を明確に聞き取れるようにするため、フォーカス割合設定部１２２は、話者の声のフォーカス値を大きくし、環境音のフォーカス値を小さくするようにしてもよい。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００７９】
［適用例８］
さらに、テレビ１００にてインターネット電話サービスやオンラインゲームサービスを受ける場合、テレビ電話でチャットしたりオンラインゲームをしたりしながら同時にテレビ番組を視聴することもできる。例えば主表示エリアにテレビ電話の通話相手を表示し、副表示エリアにテレビ番組を表示する。このとき、テレビ電話の音声を明確に聞き取れるようにするため、フォーカス割合設定部１２２は、テレビ電話の音声のフォーカス値を大きくし、テレビ番組の音声のフォーカス値を小さくするようにしてもよい。このように音声の内容をトリガー情報として各音声のフォーカス値を設定することができる。
【００８０】
［適用例９］
また、ラジオチューナー搭載の携帯型音楽プレーヤーに対して本実施形態に係る音声出力システムを適用することもできる。例えば、音楽プレーヤーに予め記録された音楽を聴いているときにラジオで交通渋滞情報や天気予報番組が開始されると、音楽とラジオの音声とを両方出力するようにする。このとき、これらの音声に対して周波数分割多重処理を行うことで、いずれの音声も聞き取り可能となる。また、ラジオから出力される音声情報を明確に聞き取れるようにするため、フォーカス割合設定部１２２は、ラジオの音声のフォーカス値を大きくし、音楽のフォーカス値を小さくするようにしてもよい。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８１】
［適用例１０］
さらに、テレビ１００の主音声と副音声を同時に出力する際に、本実施形態に係る音声出力システムを適用することもできる。これにより、主音声および副音声を同時に聞き取り易くすることができる。また、英語と日本語のように異なる２つの言語が主音声と副音声とで出力されている場合には、両言語を同時に聞けるので外国語の学習にも役立つ。この場合、フォーカス割合設定部１２２は、例えば主音声のフォーカス値を大きくし、副音声のフォーカス値を小さくするようにしてもよい。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８２】
［適用例１１］
また、テレビ１００にて複数の番組が視聴されているとき、視聴されている番組の内容に応じて各番組の音声のフォーカス値を自動的に変更してもよい。例えば、ニュース番組であれば、アナウンサーの声が聞き取れることが重要である。一方、野球やサッカー等のスポーツでは、試合映像や臨場感が重要となる。そこで、例えばスポーツ番組とニュース番組とが同時に視聴されるときには、フォーカス割合設定部１２２は、ニュース番組の音声のフォーカス値を大きくする。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８３】
さらに、人の声は約１〜５ｋＨｚの周波数帯域にあるため、音声処理装置１２５は、周波数分割多重処理においてこの周波数帯域をニュース番組の音声に優先的に割り当てるようにする。これにより、よりアナウンサーの声を聞き取り易くすることができる。一方、スポーツ番組においては低音域が重要であるため、音声処理装置１２５は、例えば約２０〜５００Ｈｚの周波数帯域をスポーツ番組の音声に優先的に割り当てるようにする。なお、音楽番組等においては高音域の周波数帯域を優先的に割り当てるとよい。また、同じジャンルの番組に対しては、均一に周波数帯域を割り当てるようにしてもよい。このように、周波数帯域に応じてフォーカス値を設定することで、コンテンツに適した音声をより明確に提供することができる。
【００８４】
［適用例１２］
カーナビゲーションシステムにおいても、交通情報の提供と同時に音楽やテレビ番組を提供することが可能である。ここで、カーナビゲーションシステムにより音楽を聴いているとき、渋滞情報や道路工事情報等の割り込みを、本実施形態に係る音声出力システムを用いて行うことで、音楽の再生を停止することなく割り込み情報を合成した音声で出力することが可能となる。このとき、割り込み情報は重要度の高い情報と考えられるため、フォーカス割合設定部１２２は、音楽のフォーカス値を小さくし、割り込み情報の合成音声のフォーカス値を大きくすることにより、割り込み情報を聞き取り易くすることができる。このように音声の内容（種類）をトリガー情報として各音声のフォーカス値を設定することができる。
【００８５】
以上の適用例は、それぞれ独立して実行することも可能であり、２以上のトリガー情報を組み合わせて実行することも可能である。
【００８６】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【００８７】
例えば、上記実施形態では、主としてテレビ１００およびリモコン２００に音声出力システムを適用した場合について説明したが、本技術はかかる例に限定されない。例えば、図１０に示すようなタブレット型デバイスに３００に適用してもよい。タブレット型デバイス３００では、例えばデバイス３００の表示部３１０に、テレビ番組を表示する表示エリア３１２、３１４と、テレビ番組を選択するためのテレビ番組動画リスト３２０とを表示させることができる。表示部３１０にはタッチセンサが対応して設けられており、表示部３１０の表示面に対して指やタッチペン等の操作体を接触させたり移動させたりすることで、表示内容を操作できる。
【００８８】
ユーザは、テレビ番組動画リスト３２０から視聴したいテレビ番組のアイコン３２１を選択し、任意の表示エリアにドラッグすることでその表示エリアに選択したテレビ番組を表示させることができる。各表示エリア３１２、３１４には、図１と同様、２つの表示エリア３１２、３１４に表示されているテレビ番組の音声のフォーカス値をそれぞれ表示させることができる。
【００８９】
タブレット型デバイス３００では、例えば任意の表示エリアにおいて、近接する２本の指を離隔するピンチアウト操作を行うと、当該表示エリアに表示されているテレビ番組の音声のフォーカス値を大きくすることができる。このとき、他方の表示エリアに表示されているテレビ番組の音声のフォーカス値を、一方のテレビ番組のフォーカス値が大きくされた分だけ自動的に小さくするようにしてもよい。また、例えば任意の表示エリアにおいて、離隔している２本の指を近接するピンチイン操作を行うと、当該表示エリアに表示されているテレビ番組の音声のフォーカス値を小さくすることができる。このとき、他方の表示エリアに表示されているテレビ番組の音声のフォーカス値を、一方のテレビ番組のフォーカス値が小さくされた分だけ自動的に大きくするようにしてもよい。
【００９０】
このように、音声のフォーカス値は、図２に示したようなフォーカス割合変更部を用いなくとも、例えばジェスチャ入力等によって設定、変更することができる。
【００９１】
また、本実施形態では、リモコン２００にフォーカス割合変更スライダー２３０等のフォーカス値を調節する音声調節部を設けたが、本技術はかかる例に限定されない。例えば音声調節部がソフトウェア入力部として提供されるとき、ネットワークを介して、各音声データのフォーカス値をそれぞれ調節可能な音声調節部を表示部に表示させるプログラムを提供するようにしてもよい。この場合、プログラムの提供を受けた機器においてプログラムが実行され、表示部に音声調節部を表示させる。あるいは、ネットワークを介して接続されたサーバ上で当該プログラムを実行させ、実行結果を受けた機器が、実行結果に基づいて表示部に音声調節部を表示させることもできる。
【００９２】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、
前記設定されたフォーカス値で前記各音声データを合成する音声処理部と、
を備える、情報処理装置。
（２）
前記フォーカス割合設定部は、前記トリガー情報としてユーザにより設定された前記フォーカス値の割合の変更情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）に記載の情報処理装置。
（３）
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの内容に関する情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）または（２）に記載の情報処理装置。
（４）
前記フォーカス割合設定部は、前記トリガー情報として、前記音声データが出力される環境と出力される前記音声データとの関連性に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）〜（３）のいずれか１項に記載の情報処理装置。
（５）
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの提供を受けるユーザの姿勢状態に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、前記（１）〜（４）のいずれか１項に記載の情報処理装置。
（６）
前記音声処理部は、
周波数帯域を分割して生成された複数の分割帯域に対して、前記各音声データの内容に応じて当該音声データを割り当て、
前記各分割帯域に割り当てられた前記各音声データを合成する、前記（１）〜（５）のいずれか１項に記載の情報処理装置。
（７）
前記各音声データに対応する画像データが表示部に表示されるとき、前記フォーカス割合設定部は、前記画像データを表示する表示エリアの大きさに基づいて、前記音声データのフォーカス値を設定する、前記（１）〜（６）のいずれか１項に記載の情報処理装置。
【符号の説明】
【００９３】
１００ テレビ
１０１、２０１ ＣＰＵ
１０２、２０２ ＲＯＭ
１０３、２０３ ＲＡＭ
１０４ 受信装置
１０５ 外部記憶装置／デコード回路
１０６、２０５ 通信装置
１０７ 画像／音声出力装置
１１０ 表示部
１１２、１１４ 表示エリア
１１６、１１８ 表示されたフォーカス値
１２１ パラメータ取得部
１２２ フォーカス割合設定部
１２３ 画像サイズ変更装置
１２４ 画像ミキサー装置
１２５ 音声処理装置
１２６ 音声ミキサー装置
２００ リモコン
２０４ ユーザインタフェース
２０６ 表示装置
２１０、２２０ 選局ボタン
２３０ フォーカス割合変更スライダー
２３２ スライド部
２４０ 通信部
３００ タブレット型デバイス
【特許請求の範囲】
【請求項１】
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、
前記設定されたフォーカス値で前記各音声データを合成する音声処理部と、
を備える、情報処理装置。
【請求項２】
前記フォーカス割合設定部は、前記トリガー情報としてユーザにより設定された前記フォーカス値の割合の変更情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項３】
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの内容に関する情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項４】
前記フォーカス割合設定部は、前記トリガー情報として、前記音声データが出力される環境と出力される前記音声データとの関連性に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項５】
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの提供を受けるユーザの姿勢状態に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項６】
前記音声処理部は、
周波数帯域を分割して生成された複数の分割帯域に対して、前記各音声データの内容に応じて当該音声データを割り当て、
前記各分割帯域に割り当てられた前記各音声データを合成する、請求項１に記載の情報処理装置。
【請求項７】
前記各音声データに対応する画像データが表示部に表示されるとき、前記フォーカス割合設定部は、前記画像データを表示する表示エリアの大きさに基づいて、前記音声データのフォーカス値を設定する、請求項１に記載の情報処理装置。
【請求項８】
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するステップと、
前記設定されたフォーカス値で前記各音声データを合成するステップと、
を含む、情報処理方法。
【請求項９】
コンピュータを、
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、
前記設定されたフォーカス値で前記各音声データを合成する音声処理部と、
を備える、情報処理装置として機能させるコンピュータプログラム。
【請求項１】
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、
前記設定されたフォーカス値で前記各音声データを合成する音声処理部と、
を備える、情報処理装置。
【請求項２】
前記フォーカス割合設定部は、前記トリガー情報としてユーザにより設定された前記フォーカス値の割合の変更情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項３】
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの内容に関する情報に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項４】
前記フォーカス割合設定部は、前記トリガー情報として、前記音声データが出力される環境と出力される前記音声データとの関連性に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項５】
前記フォーカス割合設定部は、前記トリガー情報として前記音声データの提供を受けるユーザの姿勢状態に基づいて、出力される前記各音声データの前記フォーカス値の割合を設定する、請求項１に記載の情報処理装置。
【請求項６】
前記音声処理部は、
周波数帯域を分割して生成された複数の分割帯域に対して、前記各音声データの内容に応じて当該音声データを割り当て、
前記各分割帯域に割り当てられた前記各音声データを合成する、請求項１に記載の情報処理装置。
【請求項７】
前記各音声データに対応する画像データが表示部に表示されるとき、前記フォーカス割合設定部は、前記画像データを表示する表示エリアの大きさに基づいて、前記音声データのフォーカス値を設定する、請求項１に記載の情報処理装置。
【請求項８】
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するステップと、
前記設定されたフォーカス値で前記各音声データを合成するステップと、
を含む、情報処理方法。
【請求項９】
コンピュータを、
同時に出力される複数の音声データに関連するトリガー情報に基づいて、前記各音声データの強調の度合いを示すフォーカス値の割合を設定するフォーカス割合設定部と、
前記設定されたフォーカス値で前記各音声データを合成する音声処理部と、
を備える、情報処理装置として機能させるコンピュータプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【公開番号】特開２０１３−６２６５２（Ｐ２０１３−６２６５２Ａ）
【公開日】平成２５年４月４日（２０１３．４．４）
【国際特許分類】
【出願番号】特願２０１１−１９９２２７（Ｐ２０１１−１９９２２７）
【出願日】平成２３年９月１３日（２０１１．９．１３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２５年４月４日（２０１３．４．４）
【国際特許分類】
【出願日】平成２３年９月１３日（２０１１．９．１３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]