オーディオ信号のアップミキシング
オーディオ装置は、オーディオチャネルの組を供給するプロセッサ（１０１）を有する。予測回路（１０３）は、適応フィルタによる第２チャネルの適応フィルタリングによって、第１チャネルに関し予測信号を生成する。適応プロセッサ（１０５）は、予測信号と第１チャネルとの間の差を示すコスト関数を最小化するよう適応フィルタを適応させる。次いで、補償プロセッサ（１０７）は、第１の信号に予測信号を補償することによって非予測信号を生成し、分配回路（１０９）は、出力オーディオ信号の組にわたって少なくとも予測信号と非予測信号とを分配することによって、出力オーディオチャネルの組を生成する。このとき、分配は、予測信号及び非予測信号に関し異なる。クロスチャネル予測フィルタリングは、発生音響の異なる空間特性を表し、従って、有利に出力チャネルごとに異なって分配される信号成分を供給する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、オーディオチャネルの他の組からのオーディオチャネルの組の生成に係り、特に、２よりも多いチャネルによるステレオ信号からマルチチャネル信号へのアップミキシングに係るがこれに限定されない。
【背景技術】
【０００２】
２よりも多いチャネルに基づく空間オーディオ再生は、この１０年でますます一般的になってきている。例えば、５又はそれ以上の音源を用いるマルチチャネル空間サラウンドシステムは非常に人気になっており、例えば、ホームシネマ・システムは、消費者市場において、大成功の製品になっている。
【０００３】
結果として、研究の増加量は、性能を改善し又は更なる柔軟性を空間サラウンドシステムに提供することができる技術及びアルゴリズムを発展させることに通じた。
【０００４】
例えば、そのような空間サラウンドシステムに関連する１つの問題は、レガシーコンテンツ及びオーディオマテリアルの多くが従来のステレオフォーマットにおいて取り込まれている点であり、従って、ステレオ信号の２つのチャネルから大部分の空間サラウンドシステムのより多くの数のチャネルへのフォーマット変換を実行可能であることが、システムにとって有利である。
【０００５】
また、多くの筋書きにおいて、空間オーディオコンテンツが最適化又は改善されることが望ましい。例えば、中央の音源が主チャネルに集中し、一方、中央にない音源がサイドチャネルにおいて（更に）表現されることを確かにすることによって、異なる音源の間で分化促進を提供することが、しばしば望ましい。これは、例えば、多くのホームシネマ・システムのために、音声の明りょうさの改善を提供することができる。
【０００６】
より大きな組のチャネルへのチャネルの組の拡張は、通常、アップミキシング（upmixing）と呼ばれ、そのようなフォーマット変換のための様々なアプローチが提案されている。
【０００７】
例えば、ステレオ信号を５つの空間チャネルへアップミキシングする簡単な方法は、２つのステレオ信号を５つの出力信号にマッピングする５×２行列を用いることである。そのようなアプローチは複雑性が低く、従って、低コストの解決法に該当するが、品質が比較的低い傾向がある。
【０００８】
このアプローチの拡張は、夫々の行列が信号特性から決定される別々の重みを有する複数のアップミキシング行列を使用することである。重みは、例えば、アップミキシングされるべきステレオ信号のエネルギ特性から決定されてよい。しかし、これは改善を提供するが、音響品質は依然として次善である傾向があり、更に、当該アプローチは実質的に複雑性を高めうる。一般的に、そのような技術は適応マトリクス化と呼ばれる。
【０００９】
他のアプローチは、R.Irwan及びR.M.Aarts、「Two-to-five channel sound processing」、Journal of the Audio Engineering Society、Vol.50(11)、pp.914-926、２００２年（非特許文献１）において提案されている。このアプローチは、支配的な音響位置を定めるツールとして主成分分析を用いる。その後に、適応アップミキシング行列の値が支配的な音響位置によって導かれる。しかし、高い品質が概して達成され得るものの、幾つかの筋書きにおいて性能は最適ではなく、更に、当該アプローチは比較的複雑である。例えば、典型的なオーディオは多くの音源を有し、アルゴリズムとして如何なる時間差も考慮しないので、空間イメージは時々何らかの歪みを示すことがある。
【００１０】
ステレオコンテンツを分析するためのより精巧な技術も知られている。しかし、それらの技術及びアプローチは品質を改善するが、比較的複雑である傾向があり、依然として多くの筋書きにおいて次善のオーディオ品質を提供する傾向がある。例えば、ＭＰＥＧ音響デコーダ標準は、送信される空間パラメータに依存することなくアップミキシングを行うことができるアップミキシングモード（ブラインド・アップミキシングモード）を含む。しかし、当該アプローチは、ステレオ信号の両方のチャネルを時間周波数タイルに分解しすることを伴い、これは、計算的に不利であり、相当な遅延を導入する。
【先行技術文献】
【非特許文献】
【００１１】
【非特許文献１】R.Irwan及びR.M.Aarts、「Two-to-five channel sound processing」、Journal of the Audio Engineering Society、Vol.50(11)、pp.914-926、２００２年
【発明の概要】
【発明が解決しようとする課題】
【００１２】
従って、改善されたシステムが有利であり、特に、高められた柔軟性、改善されたオーディオ品質、低減された複雑性、容易化された実施及び／又は動作、低減されたリソース要求、及び／又は改善された性能を可能にする、入力チャネルの組からオーディオチャネルの組を生成するアプローチが有利である。
【００１３】
然るに、本発明は、望ましくは、上記の欠点のうち１又はそれ以上を１つずつ又は組み合わせて解消し、軽減し又は取り除くことを目的とする。
【課題を解決するための手段】
【００１４】
本発明の態様に従って、オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する装置であって：前記オーディオチャネルの第１の組を供給する供給回路；適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成する予測回路；前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させる回路；前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成する回路；及び、出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成する分配回路を有し、前記分配は、前記予測信号及び前記非予測信号に関し異なる、装置が提供される。
【００１５】
本発明は、オーディオチャネルの出力される組の改善された生成を可能にすることができる。改善された品質が多くの筋書きにおいて達成可能であり、且つ／あるいは、低減された複雑性及び／又はリソース消費、及び／又は低減されたアルゴリズム遅延が達成可能である。多くの実施形態において、改善された空間的経験が達成可能である。
【００１６】
システムは、例えば、第１の組のチャネルの異なる信号成分を出力チャネルの組に分配することを最適化するために使用される相関情報を決定するために、クロスチャネル予測フィルタリング（cross-channel predictive filtering）を使用してよい。特に、予測及び非予測音響成分は、実質的に異なった空間特性を有し、従って、有利に異なって分配される成分に対応してよい。例えば、当該アプローチは、空間的に適切に定められた音源に対応する信号成分と、明確な空間的位置を有さない周囲の拡散した音源に対応する信号成分とを推定するための、複雑性が低いアプローチを提供してよい。他の例として、当該アプローチは、中央に位置付けられた音源に対応する信号成分と、中央に位置付けられていない音源に対応する信号成分とを推定するための、複雑性が低いアプローチを提供してよい。
【００１７】
当該アプローチは、具体的に、オーディオチャネルの改善されたアップミキシングを提供することができる。実際に、幾つかの実施形態において、オーディオチャネルの出力される組は、第１の組のオーディオチャネルよりも多いオーディオチャネルを有してよい。具体的に、第１の組のオーディオチャネルは、ステレオチャネルの組又はステレオチャネルの組から得られるチャネルを有してよい。
【００１８】
当然のことながら、如何なる適切なコスト関数も使用されてよい。更に、当然のことながら、コスト関数の最小化は、絶対的且つ数学的に正確な最小化でなくてよく、単に、例えばリソース制限、実際的制限等の他の制約を考慮しながらコスト関数を低減しようとする如何なるアプローチであってもよい。このように、語「最小化」は、その弱い意味においては、一般的に、その厳密な数学的意味においてよりもむしろ、技術的意味において適用される。また、当然のことながら、コスト関数は、所望の特性を示す関数を最適化することによって、間接的に最小化されてよい。例えば、コスト関数は、予測信号と第１の信号との間の相互の情報又は相関の程度を最大化することによって、最小化され得る。
【００１９】
前記適応フィルタは、例えばゲイン調整又はレンジ制限等の、信号の更なる処理を含んでよい。また、前記適応フィルタは、適応フィルタ部分及び非適応フィルタ部分を有してよい。例えば、適応フィルタ部分は、前置フィルタが先行し、後置フィルタが後に続いてよい。前置フィルタ及び／又は後置フィルタは、固定の静的フィルタであってよい。
【００２０】
幾つかの実施形態において、本発明は、異なる信号成分の改善された分離を提供することができる。例えば、幾つかの実施形態において、本発明は、センターチャネルにおける中央音源の改善された分離及び集束を提供することができる。
【００２１】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第１チャネルは前記差分信号を有する。
【００２２】
これは、多くの実施形態において、改善された性能を提供することができる。特に、予測及び非予測信号成分への差分信号の分割は、ステレオ信号における音源の異なる特性を反映するよう、異なる空間チャネルへの分配に特に適する信号を提供することができる。第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００２３】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間サラウンドチャネル又は空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大ききであるように、前記予測信号を分配するよう配置される。
【００２４】
これは、多くの実施形態において、改善された性能を提供することができる。特に、それは、改善された空間的経験を提供することができ、更に、適切に定められた音源の空間的位置が原のステレオ信号からそれらの位置をますます保つことを可能にすることができる。
【００２５】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間サイドチャネル又はサラウンドチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される。
【００２６】
これは、多くの実施形態において、改善された性能を提供することができる。特に、それは、改善された空間的経験を提供することができ、更に、適切に定められた空間的位置に対応しそうにない音源が、それらがサララウンド経験を提供するように分配されることを可能にすることができる。
【００２７】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の前記空間サイドチャネル及びサラウンドチャネルのうちいずれか２つのチャネルの間の非予測信号電力における変化が６デシベルよりも大きくないように、前記非予測信号を分配するよう配置される。
【００２８】
これは、多くの実施形態において、改善された性能を提供することができ、特に、多くの筋書きにおいて、より実体験のように感じるサラウンド経験を提供することができる。
【００２９】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第２チャネルは前記和信号を有する。
【００３０】
これは、多くの実施形態において、改善された性能を提供することができる。特に、他のチャネルに関し予測信号を生成するよう和信号に適用される予測フィルタリングは、複数のチャネルにおいて存在しうる適切に定められた音源を示す予測信号を提供する。具体的に、それは、適切に定められた音源位置に対応する予測成分と、拡散した周囲音源（例えば、室内反響）に対応する非予測成分とに第１の信号を分離することを改善することができる。
【００３１】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００３２】
第２チャネルの対する和信号の使用は、具体的に、特に有利な動作及び性能を提供するよう、第１チャネルに対する差分信号の使用と組み合わされてよい。
【００３３】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第１チャネルは前記和信号を有する。
【００３４】
これは、多くの実施形態において、改善された性能を提供することができる。特に、予測及び非予測信号成分への和信号の分割は、ステレオ信号における音源の異なる特性を反映するよう、異なる空間チャネルへの分配に特に適する信号を提供する。
【００３５】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００３６】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントセンターチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間フロントサイドチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される。
【００３７】
これは、多くの筋書きにおいて、特に有利な動作及び／又は性能を提供することができる。具体的に、それは、中央に位置付けられた音源の中央チャネルへの改善された割り当てを可能にすることができる。
【００３８】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大きさであるように、前記予測信号を分配するよう配置される。
【００３９】
これは、多くの筋書きにおいて、特に有利な動作及び／又は性能を提供することができる。具体的に、それは、音源の正面ポジショニングを保ちながら、中央に位置付けられていない音源のサイドチャネルへの改善された割り当てを可能にすることができる。
【００４０】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第２チャネルは前記差分信号を有する。
【００４１】
これは、多くの実施形態において、改善された性能を提供することができる。特に、和信号等の他のチャネルに関する予測信号を生成するために差分信号に適用される予測フィルタリングは、中央に位置付けられていない音源を示す予測信号と、中央に位置付けられた音源を示す非予測信号とを提供する。
【００４２】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００４３】
第２チャネルに対する差分信号の使用は、具体的に、特に有利な動作及び性能を提供するよう、第１チャネルに対する和信号の使用と組み合わされてよい。
【００４４】
本発明の任意の特徴に従って、前記第１チャネルは、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する。
【００４５】
これは、多くの実施形態において、改善された性能及び／又は容易化された動作を提供することができる。特に、それは、多くの場合に、改善された音響上演を提供するよう異なって分配されうる中央に位置付けられた音源及び中央に位置付けられていない音源への改善された分離を提供することができる。例えば、それは、発話等の中央の音源の改善された集束を提供することができる。
【００４６】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００４７】
本発明の任意の特徴に従って、前記分配回路は、前記非予測信号のゲイン係数の少なくとも２倍のゲイン係数を有して前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルに前記予測信号を分配するよう配置される。
【００４８】
これは、多くの筋書きにおいて、改善された性能を提供することができる。特に、それは、サイドチャネルにわたる中央位置の拡散が低減されることを可能にするとともに、中央チャネルの位置に対応するより具体的な予測位置を提供することができる。
【００４９】
本発明の任意の特徴に従って、前記分配回路は、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルのゲイン係数の少なくとも２倍のゲイン係数を有して前記出力オーディオチャネルの組の中の空間センターチャネルに前記非予測信号を分配するよう配置される。
【００５０】
これは、多くの筋書きにおいて、改善された性能を提供することができる。特に、それは、サイドチャネルにわたる中央位置の不鮮明化が低減されることを可能にするとともに、中央チャネルの話者の位置に対応するより具体的な予測位置を提供することができる。
【００５１】
本発明の任意の特徴に従って、前記予測回路は、遅延された予測信号として前記予測信号を生成するよう配置される。
【００５２】
これは、多くの筋書きにおいて、改善された性能を提供することができ、特に、前記適応フィルタを適応させるときに信号の過去及び将来の両方のサンプルを含むことによって、第２チャネルの信号からの第１の信号のより正確な予測を可能にすることができる。
【００５３】
本発明の態様に従って、オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する方法であって：前記オーディオチャネルの第１の組を供給するステップ；適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成するステップ；前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させるステップ；前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成するステップ；及び、出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成するステップを有し、前記分配は、前記予測信号及び前記非予測信号に関し異なる、方法が提供される。
【００５４】
本発明のこれらの及び他の態様、特徴及び利点は、以下で記載される実施形態から明らかであり、それらを参照して説明される。
【図面の簡単な説明】
【００５５】
【図１】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図２】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図３】本発明の幾つかの実施形態に従う出力チャネルへの信号の分配の例を表す。
【図４】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図５】本発明の幾つかの実施形態に従う出力チャネルへの信号の分配の例を表す。
【図６】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図７】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置に存在するオーディオ信号の例を表す。
【図８】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置に存在するオーディオ信号の例を表す。
【図９】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置に存在するオーディオ信号の例を表す。
【発明を実施するための形態】
【００５６】
本発明の実施形態について、一例として、図面を参照して記載する。
【００５７】
以下の記載は、２よりも多い空間チャネルを有するマルチチャネルへのステレオチャネルのアップミキシングに適用可能な本発明の実施形態に焦点を当てる。なお、当然のことながら、本発明はこの適用に限定されず、他の多くのオーディオ処理システムに適用されてよい。
【００５８】
図１は、入力チャネルの組から出力チャネルの組を生成するオーディオ装置の例を表す。オーディオ装置は、信号を予測部分及び非予測部分に分けるためにクロスチャネル予測フィルタリングを使用する。
【００５９】
このように、予測信号は、適応フィルタによって第２チャネルからの第２の信号をフィルタリングすることによって、第１チャネルからの第１の信号に関し生成される。適応フィルタは、可能な限り第１の信号に類似しており、従って、第１及び第２のフィルタの間の相関を反映する予測信号を生じさせるよう構成される。このように、予測信号成分は、少なくとも１つの他のチャネルにも存在しうる第１の信号の成分を反映する。このような筋書きは、例えば、適切に定められた位置を有する１又はそれ以上の特定の音源から生じ、従って、異なる空間チャネルの間で相関すると見込まれる成分に起因する。なお、残りの非予測信号は、分散した、拡散した、及びあまり定まっていない音源から生じると見込まれてよく、然るに、周囲音響を表すと考えられてよい。このように、クロスチャネル予測に基づく予測信号及び非予測信号への分離は、第１の信号が、異なる空間特性を有する異なるタイプの音響を表す信号に分割されることを可能にする。
【００６０】
図１のシステムは、出力チャネルにわたって異なって予測信号及び非予測信号を分配する。例えば、予測信号は、主に、適切に定められた音源位置の認知を可能にする特定の空間チャネルへ分配されてよく、一方、非予測信号は、より幅広く分配されてよく、具体的に、周囲環境経験を提供することを目的とするチャネルを含む更なるチャネルにわたって広げられてよい。
【００６１】
簡潔さ及び明りょうさのために、図１は、１つのチャネルのみが他の１つのチャネルに基づき予測信号及び非予測信号に分けられる例を表す。しかし、当然のことながら、他の実施形態においては、同じアプローチが複数のチャネルに適用されてよく、実際には、１つの信号／チャネルが複数の他のチャネルに基づき予測信号及び非予測信号に分けられてよい。
【００６２】
図１の例において、複数の信号が、１又はそれ以上の内部又は外部の音源から受信器１０１によって受信される。次いで、第１の信号ｘ１（ｎ）は、第２の信号ｘ２（ｎ）の適応予測フィルタリングに基づき予測信号成分ｙｐ（ｎ）及び非予測信号成分ｙｎｐ（ｎ）に分けられる。
【００６３】
第２の信号ｘ２（ｎ）は、適応フィルタ１０３へ供給される。適応フィルタ１０３は、第２の信号ｘ２（ｎ）をフィルタリングして、予測信号ｙｐ（ｎ）を生成するよう配置される。適応フィルタ１０３は、具体例において、適応ＦＩＲ（有限インパルス応答）フィルタである。適応フィルタ１０３のフィルタ係数は、適応プロセッサ１０５によって与えられる。適応プロセッサ１０５は、フィルタ係数が第１の信号ｘ１（ｎ）と結果として起こる予測信号ｙｐ（ｎ）との間の差を示すコスト関数を（例えば、第１の信号ｘ１（ｎ）と結果として起こる予測信号ｙｐ（ｎ）との間の相互の情報の指標を最大化することによって）最小化するように、フィルタ係数を生成する。このように、適応フィルタ１０３は、第２の信号ｘ２（ｎ）のフィルタリングによって、予測信号ｙｐ（ｎ）が可能な限り第１の信号ｘ１（ｎ）に類似しているように、適応プロセッサ１０５により適応される。このように、予測信号は、２つのチャネルの間を相互に関連づける第１の信号ｘ１（ｎ）の信号成分に相当する。
【００６４】
当然のことながら、適応フィルタ１０３は、他の処理を有してよく、非適応処理を有してもよいが、それは少なくとも１つの適応フィルタリング処理を有する。例えば、適応フィルタリングは、第２の信号ｘ２（ｎ）が適応フィルタ部によってフィルタリングされる前に、第２の信号ｘ２（ｎ）の固定の前置フィルタリングを含んでよい。結果として起こる信号は、更に、固定の後置フィルタによってポストフィルタリングされてよい。
【００６５】
当然のことながら、信号の予測フィルタリングのための多種多様なアプローチ及びアルゴリムが知られており、如何なる適切なアプローチ及び方法も本発明を損なうことなしに使用されてよい。例えば、適応フィルタ１０３は、ＦＩＲフィルタとして実施されてよいが、代替的に又は追加的に、ＩＩＲ（無限インパルス応答）フィルタを有してよい。また、当然のことながら、予測フィルタリングを提供するよう適応フィルタを適応させるための多種多様なアルゴリズム及び方法が知られており、そのような適切なアルゴリズム及びアプローチのいずれもが本発明を損なうことなしに使用されてよい。例えば、適応プロセッサ１０５は、係数を決定するためにＬＭＳ（Least-Mean-Squares）、ＮＬＭＳ（Normalized Least-Mean-Squares）又はＲＬＳ（Recursive Least-Squares）適応アルゴリズムを使用してよい。
【００６６】
図１の装置は、更に、第１の信号ｘ１（ｎ）に関し非予測信号ｙｎｐ（ｎ）を生成するよう配置される。従って、装置は、補償プロセッサ１０７を有する。補償プロセッサ１０７は、第１の信号ｘ１（ｎ）に予測信号ｙｐ（ｎ）を補償することによって非予測信号ｙｎｐ（ｎ）を生成するよう配置される。補償プロセッサ１０７は、適応フィルタ１０３に結合され、それから予測信号ｙｐ（ｎ）を受信する。次いで、補償プロセッサ１０７は、第１の信号ｘ１（ｎ）に予測信号ｙｐ（ｎ）を補償することによって非予測信号ｙｎｐ（ｎ）を生成する。具体例において、この補償は、第１の信号ｘ１（ｎ）からの予測信号ｙｐ（ｎ）の単純な減算であり、すなわち、非予測信号は、ｙｎｐ（ｎ）＝ｘ１（ｎ）−ｙｐ（ｎ）によって与えられる。
【００６７】
装置は、分配プロセッサ１０９を更に有する。分配プロセッサ１０９は、適応フィルタ１０３及び保証プロセッサ１０７へ結合されており、予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）を受信する。例において、分派プロセッサは、更に受信器１０１に結合されており、第２の信号ｘｎ（ｎ）も受信する。
【００６８】
分配プロセッサ１０９は、予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）、更に、例においては第２の信号ｘ２（ｎ）をオーディオ信号の出力される組にわたって分配することによって、オーディオチャネルの出力される組を生成するよう配置される。しかし、予測信号ｙｐ（ｎ）の分配は、非予測信号ｙｎｐ（ｎ）の分配とは異なる。
【００６９】
特に、分配プロセッサ１０９は、自身が受信する信号の夫々から出力チャネルの夫々へ実効ゲインを導入してよく、このゲインは、少なくとも１つのチャネルに関し予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）によって異なってよい。特に、ゲインは、例えば、幾つかのチャネルについて非予測信号ｙｎｐ（ｎ）に関しては零であるが、予測信号ｙｐ（ｎ）に関しては零でなく、結果として、予測信号ｙｐ（ｎ）はこのチャネルに分配されるが、非予測信号ｙｎｐ（ｎ）はこのチャネルに分配されない。
【００７０】
幾つかの実施形態において、分配は、例えば、予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）に関し異なる周波数応答を有することによって、他の態様においては異なってよい。
【００７１】
予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）は異なるタイプの音響特性を表し、具体的には、通常、異なる空間特性を表しうるので、分配は、これを反映するよう最適化されてよく、例えば、改善された空間的ユーザ経験を提供するために使用されてよい。
【００７２】
以下、空間マルチチャネルへのステレオチャネルのアップミキシングを目的とする具体例について、より詳細に説明する。例においては、５つのチャネル出力信号がステレオ入力信号から生成される。具体的に、例においては、右（Ｒ）及び左（Ｌ）信号が受信され、センター（Ｃ）、レフトフロント（ｌｆ）、ライトフロント（ｒｆ）、レフトサラウンド（ｌｓ）及びライトサラウンド（ｒｓ）に対応する５つの空間信号が生成される。
【００７３】
具体的なシステムは図２に表されており、図１に関して先に記載されたのと同じ要素を有する。しかし、図２のシステムでは、受信されるステレオ信号は、直接的に使用されず、むしろ最初に和信号（通常、ミッド信号と呼ばれる。）と差分信号（通常、サイド信号と呼ばれる。）とに変換される。具体例において、ミッド（和）信号ｍは、加算回路２０１によって、ｍ＝Ｒ＋Ｌとして生成される。同様に、サイド（差分）信号ｓは、減算回路２０３によって、ｓ＝Ｒ−Ｌとして生成される。
【００７４】
当然のことながら、特定の和信号及び差分信号（ミッド信号及びサイド信号）は他の実施形態においては異なってよく、特に、重みが、和信号及び差分信号（ミッド信号及びサイド信号）の計算において、左右信号に適用されてよい。また、当然のことながら、ミッド信号及びサイド信号を生成する機能は、受信器１０１の部分であると考えられてよい。
【００７５】
例において、ミッド信号及びサイド信号は受信器１０１へ供給される。受信器１０１は、図１を参照して説明された予測フィルタリングを実行する。特に、予測信号及び非予測信号が、ミッド信号の適応フィルタリングによって、サイド信号に関し生成される。このように、システムにおいて、予測フィルタは、ミッド信号からサイド信号を予測するために使用される。これは、
【００７６】
［外１］
及び非予測信号ｅを生じさせる。このように、図１のシステムと比較して、図１の第１チャネルは差分／サイド信号ｓを有すると考えられてよく、第２チャネルは和／ミッド信号ｍを有すると考えられてよい。
【００７７】
ミッド信号ｍ及び
【００７８】
［外２］
は、大部分は、ステレオ記録において明りょうな空間位置を有する音源に係る情報を含む。対照的に、非予測信号ｅは、大部分は、拡散した音源（例えば、反響）に関連する情報を含む。
【００７９】
このように、予測フィルタ１０３は、原の２つの信号から３つの信号を生成する。これら３つの信号は、次いで、分配プロセッサ１０９によって５つの出力信号に分配される。
【００８０】
具体的に、分配プロセッサ１０９は、分配行列Ｕを用いて、複雑性が低いマトリクス乗算を適用してよい：
【００８１】
【数１】
具体的に、分配は、改善された空間的経験が信号の異なる部分に関し異なるチャネル分配を用いることによって達成されるように、配置される。このように、３つの信号の間の定性的区別は、５つの出力チャネルへの単純なマッピングを定義する際に利用される。
【００８２】
実際に、システムにおいて、予測信号は、支配的にフロントサイドスピーカから提示されるように分配される。このように、予測信号は、主に、望ましくは左右両方のフロントチャネルに供給される。特に、有利な性能及び、特に、改善された空間的経験は、予測信号から生じる少なくとも１つのフロントサイドチャネルにおける信号成分からの信号電力が、空間サラウンドチャネル又は空間フロントセンターチャネルのいずれかにおけるそのような成分からの予測信号電力の少なくとも２倍の大きさである場合に、達成されることが分かっている。実際に、多くの実施形態において、予測信号は、フロントサイドチャネルにのみ（通常は一様に）分配されてよい。
【００８３】
このように、システムは、具体的に、
【００８４】
［外３］
が、主に左右のチャネルに共通でない情報を含み、従って、分散した音響位置を表すが、適切に定められた音源位置を示し、従って、聴取者の前に特定の位置で提示されるよう意図されると思われる、ことを利用する。
【００８５】
分配プロセッサ１０９は、更に、ミッド信号ｍをフロントチャネルに分配するよう配置されてよく、具体的には、主にこれをセンターチャネル並びに左右のフロントチャネルに分配してよい。これは、左右のチャネルの和信号が、一般的に、主に、２つのチャネルの間で相関する音源からの音響を含み、従って、ユーザの前方から再生されるよう意図される音響に対応すると思われる、ことを反映する。
【００８６】
更に、非予測信号は、むしろ拡散的に提示されるように、分配される。実際に、非予測信号は、全てのチャネルに、又はより一般的には、センターチャネルを除く全てのチャネルに分配されてよい。これは、非予測信号が、様々な方向から、及び主にユーザのすぐ前以外の他の方向からユーザに達することをもたらす。これは、比較的拡散的且つ非集束的な空間認知を提供し、かかる認知は、特に、拡散した周囲音響（例えば、室内反響）により生じる可能性が高い信号成分にとって望ましい。
【００８７】
特に、有利な性能は、２つのフロントサイドチャネルの間又は２つのサラウンドチャネルの間の、非予測信号から生ずる電力における変化が６デシベルよりも大きくない場合に、達成され得ることが分かっている。加えて、有利な性能は、１つのフロントサイドチャネルにおいて非予測信号から生じる電力が、サラウンドチャネルにおいて生じる電力よりも５倍低い場合に、達成され得ることが分かっている。
【００８８】
実際に、非予測サイド信号の分配は実験的に評価されている。幾つかの筋書きにおいて、もっぱらサラウンドチャネルにおける信号に焦点を当てることは、それらの位置からの過度の信号をもたらす傾向があることが分かった。また、フロント及びサラウンドサイドチャネルにおける一様な分配は、サラウンド音源から認知される信号が少なすぎることをもたらすことが分かった。道理にかなった譲歩が、４分の１のエネルギがフロントサイドチャネルに供給され、残りのエネルギがサラウンドチャネルに分配されることに関して、見出された。
【００８９】
また、サイド及びサラウンドチャネルのうち少なくとも１つにおいて非予測信号成分から生じる成分の電力は、フロントセンターチャネルにおけるそれの少なくとも２倍の大きさであることが特に有利であることが分かっている。
【００９０】
このように、出力チャネルにわたる異なる信号の分配は、信号が存在しうる音響の固有の特性を反映する。更に、システムは、ステレオ記録を生成する場合に記録技師によって行われる典型的な音響上演を考慮するように、信号を分配する。例えば、ほとんどの音楽記録は、ユーザの前方の音響ステージにおける様々な特定の位置に特定の重要な楽器を配置して、周囲ノイズ又は重要でない楽器を音響ステージにわたって広げる傾向がある。記載されるシステムは、このアプローチの認識を用いて、１次元の音響ステージを、主たる音源（例えば、主要な楽器）の位置付けを実質的に保ちながら、ユーザを囲む２次元音響ステージへ拡張する。このように、当該アプローチは、個々の音源について正確な音響ステージを依然として保ちながら、より実体験のように感じるサラウンドサウンド経験を提供することができる。
【００９１】
更に、アプローチは、低い複雑性を有して達成可能であり、且つ、低い計算リソースコストを有して非常に効率的な実施を可能にすることができる。実際に、適応フィルタリングは、時間領域に実行されてよく、分配プロセッサ１０９は、時間領域において信号に適用される簡単なマトリクス演算を実施してよい。このように、分配及びアップミキシングは、如何なる周波数変換又は個々の時間周波数ブロックの如何なる特性若しくは処理手続きも必要としない。
【００９２】
具体例として、分配プロセッサ１０９は、次のように与えられる単純行列を実施してよい：
【００９３】
【数２】
チャネルの対応する分配が図３に示されている。
【００９４】
係数ａ、ｂ、ｄ、ｆは、具体的に、
【００９５】
［外４］
の総エネルギが５つの出力信号の総エネルギに対応するように、選択される。例えば、ａ＝ｆ＝√２／２、ｂ＝ｄ＝０．５。行列のスケーリング係数は、ミッド信号及びサイド信号への左右の信号のマッピングによるエネルギの増大を補償するよう導入される。
【００９６】
このように、システムは、音響の２つの異なる分類を表すとのオーディオ信号の考慮に基づく、チャネルフォーマット変換のための、リソースコストが安い方法を用いる。第１の分類は、特定の空間位置を夫々有する適切に定められた音源に関連する。第２の分類は、更なる周囲音響、すなわち、より明りょうな空間位置を欠いた音響又は音響成分から成る。この分離は、以下の観点において、フォーマット変換にとって特に有益である。フォーマット変換を行う場合に、適切に定められた音源は変換時に実質的に同じ空間位置を保つことが望まれる。しかし、周囲オーディオコンテンツの位置は、よりずっと自由に操作されてよい。
【００９７】
従って、システムは、周囲及び非周囲信号部分の、リソースコストが安い推定と、その後の、出力チャネルへの周囲及び非周囲信号部分の異なるマッピングとから成る２段階プロシージャを用いる。周囲及び非周囲信号は、信号を予測及び非予測成分に分けるクロスチャネル適応フィルタリングによって得られる。このような信号の分割は、原則的に、帯域全体にわたって実行され（時間周波数分析を回避する。）、リソースコストが安い適応フィルタの使用によって生じる。予測及び非予測成分は、夫々、非周囲及び周囲信号の良好な推定を提供する。予測及び非予測成分への分割は、チャネル間の関係が把握されるという利点を有し、これは、それらの成分を出力チャネルにわたって分配する場合に、よりずっと良く空間ステレオイメージを保つことを可能にする。
【００９８】
次のステップは、意図されるフォーマット又は再生システムへのそれらの成分のマッピングである。このような信号成分のマッピング又は分配は、周囲及び非周囲信号成分ごとに実質的に異なる。すなわち、各信号成分は、それ自身の分配係数の組と関連づけられる。
【００９９】
このようなマッピングは原のフォーマット及び意図されるフォーマット又は再生システムに依存する。しかし、具体例において、ミッド及び予測可能なサイド信号の分配は、空間的イメージが実質的に保たれるように為される。すなわち、それらは、主に、フロンチャネルに分配される。対照的に、サイド信号の非予測部分は、明りょうな空間的イメージをもたらさない。すなわち、それは、より周辺的な特徴を備え、フロント及びリアチャネル又は主にリアチャネルにマッピングされて、より実体験のように感じるサラウンド経験を作り出すことができる。
【０１００】
予測フィルタは、具体的に、線形フィルタリングにより多数のリグレッサ（regressor）信号ｙｉ（ｉ＝１，・・・，Ｋ）を生成することによって、生成されてよい。これは、例えば、タップ付き遅延線、全域通過フィルタ等によってよい。次いで、
【０１０１】
［外５］
は、それらのリグレッサ信号の一次結合として生成されてよい：
【０１０２】
【数３】
ここで、重みｗｉは、ＲＬＳ又はＮＬＭＳアルゴリズム等の適切な適応アルゴリズムを用いて生成されてよい。
【０１０３】
幾つかの実施形態において、予測は、遅延された予測信号として予測信号を生成してよい。このように、実施形態は、サイド信号の遅延されたものを予測してよい。すなわち、実施形態は、Ｄが適切な遅延である場合に、
【０１０４】
［外６］
を生成してよい。これは、予測が（ミッド及びサイド信号の両方に関し）将来及び過去両方のサンプルに基づくことを可能にする。そのような遅延が適用される場合に、分配プロセッサ１０９に供給される信号を同期させることが必要であり、特に、ミッド信号は存続期間Ｄだけ遅延されてよい。
【０１０５】
上記の例において、予測及び非予測信号成分はサイド信号に関し生成された。しかし、代替的に又は付加的に、予測及び非予測信号成分はミッド信号に関し生成されてよい。
【０１０６】
実際に、幾つかの実施形態において、ミッド信号に係る予測信号成分は、サイド信号の適応フィルタリングによって生成されてよい。次いで、非予測信号は、ミッド信号にこの予測信号を補償することによって、生成されてよい。次いで、ミッド信号の予測及び非予測部分の分配は、出力チャネルにわたって異なって分配されてよい。そのようなアプローチは、サイド信号の処理手続きとは無関係であってよく、具体的に、サイド信号に関し如何なる分析又は分離も行われることなしに、実行されてよい。具体例として、分配プロセッサ１０９は、予測ミッド信号、非予測ミッド信号、及びサイド信号を受信してよく、出力チャネルを生成するよう３×５行列を適用してよい。
【０１０７】
なお、多くの実施形態において、改善された性能は、ミッド及びサイド信号の両方を分離することによって、達成され得る。このように、ミッド信号ｍの適応フィルタリングによって
【０１０８】
［外７］
及び非予測サイド信号ｅを生成することに加えて、システムは、また、サイド信号ｓの適応フィルタリングによって
【０１０９】
［外８］
及び非予測ミッド信号ｅｍを生成してもよい。このように、この例では、４つの信号が分配プロセッサ１０９に与えられる。
【０１１０】
そのようなシステムの例が図４に示されている。例において、左右入力信号がミッド／サイド（Ｍ／Ｓ）プロセッサ４０１に供給される。Ｍ／Ｓプロセッサ４０１は、図２のシステムに関し説明されたように、ミッド信号ｍ及びサイド信号ｓを生成する。次いで、ミッド信号ｍ及びサイド信号ｓは予測プロセッサ４０３に供給される。予測プロセッサ４０３は、図１及び図２に関し記載されたものに対応する適応フィルタリングによって、
【０１１１】
［外９］
、非予測サイド信号ｅ、
【０１１２】
［外１０］
及び非予測ミッド信号ｅｍを生成する。次いで、出力チャネルを生成するよう、次の式に従って、４×５行列がそれらの信号に適用される：
【０１１３】
【数４】
具体的に、分配は、適切な空間的経験を提供するようにミッド信号の
【０１１４】
［外１１］
をフロントサイドチャネルに整合させようとする（
【０１１５】
［外１２］
は、サイド信号からも導出可能であり且つ非中心音源に対応するミッド信号の成分を表すため。）。具体的に、有利な性能は、フロントサイドチャネルの一方又は両方における予測信号電力（
【０１１６】
［外１３］
からの電力）がセンターチャネルの予測信号電力の少なくとも２倍の大きさである場合に、達成され得ることが分かっている。
【０１１７】
更に、分配は、非予測ミッド信号ｅｍを、これが差分信号と相関しない（すなわち、適切に定められた非中央の音源に対応しそうにない）ミッド信号の要素であることを反映するよう、主にセンターチャネルに分配しようとする。特に、有利な性能は、センターチャネルにおける非予測信号電力（非予測ミッド信号ｅｍからの電力）がいずれかの空間フロントセンターサイドチャネル（及び一般的にいずれかのサラウンドチャネル）の非予測信号電力の少なくとも２倍の大きさである場合に、達成され得ることが分かっている。
【０１１８】
更に、非予測サイド信号の分配は、主にサラウンド信号に対してであってよく、具体的に、ミッド信号の処理手続きを反映するようフロントサイド信号を無視してよい。
【０１１９】
具体例として、以下のアップミキシング行列が使用されてよい：
【０１２０】
【数５】
ここで、Ｕ０は、例えば、エネルギ節約を提供するよう設定される設計定数である。図５は、このマッピングを表す。
【０１２１】
幾つかのシステムにおいては、低周波チャネルが生成されてもよい。これは、例えば、左右両方の信号に低域通過フィルタを適用して、これら２つの信号を足し合わせ、和信号を低周波チャネルに関し用いることによって、行われてよい。被低域通過フィルタリング信号は、被高域通過フィルタリング信号を生成するよう、原の入力信号から減じられてよい。それらの被高域通過フィルタリング信号は、その後に、記載されるアップミキシングシステムの入力信号として使用され得る。
【０１２２】
図６は、クロスチャネル予測フィルタリングを用いる他の応用例を表す。システムは、異なる音源の改善された分離を提供するために当該アプローチを用い、特に、サイドチャネルにおいては中央の音源の成分を低減しながら、センターチャネルに対する中央の音源の改善された集束を提供しようとする。そのようなアプローチは、具体的に、例えば、ステレオミックスから中央の音源を分離することに適する。これは、例えば、ステレオ記録における会話又は他の発話の明瞭性を高めることができる。
【０１２３】
例において、クロスチャネル予測フィルタリングは、サイド信号に基づく左（及び／又は右）ステレオ信号に関し予測信号を決定するために使用される。この予測信号は、左チャネルのうちどの程度が非中央音源に対応するのかを示す。次いで、左（及び／又は右）信号は、中央位置に対応する左（及び／又は右）信号の部分に対応する非予測信号を生成するよう、予測信号を補償される。次いで、サイドチャネルは、主に予測信号から生成され、それにより、中央の音源に関係する左右の信号の如何なる成分も抑制する。更に、センターチャネルが、左右のチャネルからの非予測信号から生成されてよい。
【０１２４】
システムはミッド／サイドプロセッサ６０１を有する。ミッド／サイドプロセッサ６０１は、左信号ｘｌ（ｎ）及び右信号ｘｒ（ｎ）を受信し、ｘｄ（ｎ）＝ｗｌｘｌ（ｎ）−ｗｒｘｒ（ｎ）に従って差分信号ｘｄ（ｎ）を生成する。ここで、ｗｌ及びｗｒは、例えば、主成分分析（ＰＣＡ）（Principal Component Analysis）によって決定されてよく、あるいは、例えば、ｗｌ＝ｗｒ＝１のように一定であってよい。後者の場合に、差分信号は、厳密にステレオミックスにおけるセンターにパンされていない信号成分しか含まない。
【０１２５】
次いで、結果として起こる差分信号は、２つの予測回路６０３及び６０５に供給される。予測回路６０３及び６０５の夫々は、左右の信号の夫々について予測信号成分を生成するために使用される適応ＦＩＲフィルタを有する。このように、（左チャネル用の）第１の予測回路６０３の適応フィルタは、差分信号のフィルタリングが、予測信号と左信号との間の差分を示す基準を最適化する（例えば、コスト関数を最小化する）ように、適応される。同じアプローチが、第２の予測回路６０５によって右チャネルに適用される。
【０１２６】
具体的に、第１の予測回路に関し、適応フィルタは、ｒｌ（ｎ）＝ｘｌ（ｎ）−ｙｌ（ｎ）によって与えられる左残留信号のエネルギを最小化するよう適応される。ここで、次の式は、適応フィルタのフィルタリングを表す：
【０１２７】
【数６】
適応フィルタ係数ａｌｋの適応は、例えば、ＮＬＭＳアルゴリズムを用いて実行されてよい。対応するアプローチは第２の予測回路６０５によって行われ、信号ｙｒ（ｎ）が得られる。
【０１２８】
左右のチャネルの夫々の予測信号は、このようにして、ｙｌ（ｎ）及びｙｒ（ｎ）によって与えられる。左チャネルに係る予測信号ｙｌ（ｎ）は減算回路６０７に供給される。減算回路６０７は、左チャネル信号ｘｌ（ｎ）から予測信号ｙｌ（ｎ）を減じることによって、左チャネルに係る非予測信号ｚｌ（ｎ）を生成する。同様に、右チャネルに係る予測信号ｙｒ（ｎ）は減算回路６０９に供給される。減算回路６０９は、右チャネル信号ｘｒ（ｎ）から予測信号ｙｒ（ｎ）を減じることによって、右チャネルに係る非予測信号ｚｒ（ｎ）を生成する。
【０１２９】
このように、処理は、左右夫々のチャネルについての予測信号成分及び非予測信号成分に対応する４つの信号成分を生成する。このとき、予測信号成分は、差分信号の予測フィルタリングによって生成される。
【０１３０】
次いで、システムは、３つのチャネル、すなわち、左、右及び中央のチャネル（例えば、システムはサラウンドチャネルを有さない。）にわたって、それら４つの信号を分配する。実際には、具体例において、予測信号は主に右／左チャネルに供給され、実際に、特に有利な性能は、左右のチャネルのうち一方に対する予測信号のゲイン係数が中央のチャネルに対するゲイン係数の少なくとも２倍である場合に、見出されている。このように、予測信号は主にサイドチャネルに供給される。更に、サイドチャネルへの非予測信号の分配は、通常は、よりずっと低く、実際には、具体例において、サイドチャネルに対する対応する予測信号のゲイン係数は、非予測信号の少なくとも２倍である。実際に、例において、サイドチャネルは、非予測信号からの寄与成分しか有さず、予測信号からの寄与成分を有さない。然るに、サイドチャネルは、差分信号と相関する信号成分しか含まないので、非中央音源の如何なる寄与成分も持っていない。
【０１３１】
更に、非予測信号成分は中央のチャネルに分配され、具体的に、左右のチャネルからの非予測信号成分は具体例において結合器６１１で結合され、結合器６１１はセンターチャネルＣを生じさせる。なお、例において、予測信号からの寄与成分のみが実質的に低減され、具体例においては、予測信号は、センターチャネルに如何なる寄与成分も与えない。
【０１３２】
特に、特に有利な性能は、センターチャネルに対する非予測信号のゲイン係数が予測信号のゲイン係数の少なくとも２倍である場合に、達成され得ることが分かっている。
【０１３３】
また、特に、特に有利な性能は、非予測信号が、サイドチャネルへの非予測信号の分配に適用されるゲイン係数の少なくとも２倍のゲイン係数を有してセンターチャネルに分配される場合に、達成され得ることが分かっている。このように、非予測信号は主にセンターチャネルに分配される。
【０１３４】
このように、図６の記載されるシステムは、中央部及び側部の音源の極めて有効な分離を提供する。更に、それは、中央の音源をサイドチャネルから実質的に減じ又は除去して、それらをセンターチャネルに集束させることができる。このようなアプローチは、多くの筋書きにおいて、改善された性能を提供することができ、具体的に、ステレオ記録において中央の音声の改善された明瞭性を可能にすることができる。
【０１３５】
図６のシステムの動作は、具体例によって説明される。例において、受信されるステレオ信号は、ノイズの３つの分離された帯域から成る。ノイズ帯域の１つは、ステレオイメージにおいて厳密に中央にパンされる。残り２つのノイズ帯域は、イメージにおいて極右及び極左にパンされる。信号のスペクトルが図７に表されている。差分信号はこの場合にωｌ＝ωｒ＝１を用いて計算され、差分信号のスペクトルは図８に表されている。図８は、また、参照用に和信号のスペクトルも表している。
【０１３６】
左右の予測信号（左右の出力チャネルに対応）及びセンターチャネル信号のスペクトルが図９に表されている。
【０１３７】
表されているように、アプローチは、ステレオ混合からの３つの成分の分離を達成する。この合成例において、サイドチャネルへのセンターチャネルの漏れは、極めて低いレベルにある。左右のチャネルは互いに漏れる。しかし、漏れ音響のレベルは、３０デシベル以上所望の音響のレベルを下回っている。加えて、図９においては、中央にパンされる音源が残留信号（非予測信号）のスペクトルを決定づけることが見られる。若干の漏れがサイド信号からセンターチャネルに起こるが、レベルは、約２０デシベルだけ所望の中央音源のレベルを下回っている。
【０１３８】
当然のことながら、以上の記載は、明りょうさのために、機能ごとの回路、ユニット及びプロセッサを参照して本発明の実施形態を記載してきた。しかし、機能ごとの回路、ユニット又はプロセッサの間の機能の如何なる適切な分配も、本発明を損なうことなく使用されてよいことは明らかである。例えば、別個のプロセッサ又はコントローラによって実行されるよう表されている機能が同じプロセッサ又はコントローラによって実行されてよい。従って、特定の機能ユニットへの言及は、厳密な論理的又は物理的構造又は体系を示しているわけではなく、単に、記載される機能を提供する適切な手段への言及と見なされるべきである。
【０１３９】
本発明は、ハードウェア、ソフトウェア、ファームウェア又はそれらのいずれかの組み合わせを含む如何なる適切な形態においても実施されてよい。本発明は、任意に、１又はそれ以上のデータプロセッサ及び／又はデジタル信号プロセッサで実行されるコンピュータソフトウェアとして少なくとも部分的に実施されてよい。本発明の実施形態の要素及び部品は、如何なる適切な方法においても物理的、機能的及び論理的に実施されてよい。実際に、機能は、単一のユニットにおいて、複数のユニットにおいて、又は他の機能ユニットの部分として、実施されてよい。そのようなものとして、本発明は単一のユニットにおいて実施されてよく、あるいは、異なるユニット及びプロセッサの間で物理的及び機能的に分配されてよい。
【０１４０】
本発明は幾つかの実施形態に関連して記載されてきたが、ここに挙げられている特定の形態に限定されるよう意図されない。むしろ、本発明の適用範囲は、添付の特許請求の範囲によってのみ制限される。更に、特徴は特定の実施形態に関連して記載されているように見えることがあるが、記載される実施形態の様々な特徴は本発明に従って組み合わされてよいことが当業者には認識されるであろう。特許請求の範囲において、語「有する（comprising）」は、他の要素又はステップの存在を除外しない。
【０１４１】
更に、たとえ個々に挙げられているとしても、複数の回路、手段、要素又は方法ステップは、例えば、単一のユニット又はプロセッサによって、実施されてよい。更に、個々の特徴が異なる請求項に含まれることがあるが、それらは場合により有利に組み合わされてよく、異なる請求項における包含は、特徴の組み合わせが実行可能でなく及び／又は有利でないことを暗示しているわけではない。また、１つのカテゴリの請求項における特徴の包含は、このカテゴリに制限されることを暗示するものではなく、むしろ、その特徴が、必要に応じて、他のカテゴリの請求項に同様に適用可能であることを示す。更に、特許請求の範囲における特徴の順序は、特徴が実行されるべき具体的な順序を暗示するものではなく、特に、方法の請求項における個々のステップの順序は、その順序がこの順序において実行されるべきことを暗示するものではない。むしろ、ステップは、如何なる適切な順序においても実行されてよい。加えて、単数参照は複数個を除かず、従って、「１つの（a又はan）」、「第１」及び「第２」等への言及は複数個を除かない。特許請求の範囲における参照符号は、単に、明らかな例として提供されており、特許請求の範囲の適用範囲を限定するものとして決して解されるべきではない。
【技術分野】
【０００１】
本発明は、オーディオチャネルの他の組からのオーディオチャネルの組の生成に係り、特に、２よりも多いチャネルによるステレオ信号からマルチチャネル信号へのアップミキシングに係るがこれに限定されない。
【背景技術】
【０００２】
２よりも多いチャネルに基づく空間オーディオ再生は、この１０年でますます一般的になってきている。例えば、５又はそれ以上の音源を用いるマルチチャネル空間サラウンドシステムは非常に人気になっており、例えば、ホームシネマ・システムは、消費者市場において、大成功の製品になっている。
【０００３】
結果として、研究の増加量は、性能を改善し又は更なる柔軟性を空間サラウンドシステムに提供することができる技術及びアルゴリズムを発展させることに通じた。
【０００４】
例えば、そのような空間サラウンドシステムに関連する１つの問題は、レガシーコンテンツ及びオーディオマテリアルの多くが従来のステレオフォーマットにおいて取り込まれている点であり、従って、ステレオ信号の２つのチャネルから大部分の空間サラウンドシステムのより多くの数のチャネルへのフォーマット変換を実行可能であることが、システムにとって有利である。
【０００５】
また、多くの筋書きにおいて、空間オーディオコンテンツが最適化又は改善されることが望ましい。例えば、中央の音源が主チャネルに集中し、一方、中央にない音源がサイドチャネルにおいて（更に）表現されることを確かにすることによって、異なる音源の間で分化促進を提供することが、しばしば望ましい。これは、例えば、多くのホームシネマ・システムのために、音声の明りょうさの改善を提供することができる。
【０００６】
より大きな組のチャネルへのチャネルの組の拡張は、通常、アップミキシング（upmixing）と呼ばれ、そのようなフォーマット変換のための様々なアプローチが提案されている。
【０００７】
例えば、ステレオ信号を５つの空間チャネルへアップミキシングする簡単な方法は、２つのステレオ信号を５つの出力信号にマッピングする５×２行列を用いることである。そのようなアプローチは複雑性が低く、従って、低コストの解決法に該当するが、品質が比較的低い傾向がある。
【０００８】
このアプローチの拡張は、夫々の行列が信号特性から決定される別々の重みを有する複数のアップミキシング行列を使用することである。重みは、例えば、アップミキシングされるべきステレオ信号のエネルギ特性から決定されてよい。しかし、これは改善を提供するが、音響品質は依然として次善である傾向があり、更に、当該アプローチは実質的に複雑性を高めうる。一般的に、そのような技術は適応マトリクス化と呼ばれる。
【０００９】
他のアプローチは、R.Irwan及びR.M.Aarts、「Two-to-five channel sound processing」、Journal of the Audio Engineering Society、Vol.50(11)、pp.914-926、２００２年（非特許文献１）において提案されている。このアプローチは、支配的な音響位置を定めるツールとして主成分分析を用いる。その後に、適応アップミキシング行列の値が支配的な音響位置によって導かれる。しかし、高い品質が概して達成され得るものの、幾つかの筋書きにおいて性能は最適ではなく、更に、当該アプローチは比較的複雑である。例えば、典型的なオーディオは多くの音源を有し、アルゴリズムとして如何なる時間差も考慮しないので、空間イメージは時々何らかの歪みを示すことがある。
【００１０】
ステレオコンテンツを分析するためのより精巧な技術も知られている。しかし、それらの技術及びアプローチは品質を改善するが、比較的複雑である傾向があり、依然として多くの筋書きにおいて次善のオーディオ品質を提供する傾向がある。例えば、ＭＰＥＧ音響デコーダ標準は、送信される空間パラメータに依存することなくアップミキシングを行うことができるアップミキシングモード（ブラインド・アップミキシングモード）を含む。しかし、当該アプローチは、ステレオ信号の両方のチャネルを時間周波数タイルに分解しすることを伴い、これは、計算的に不利であり、相当な遅延を導入する。
【先行技術文献】
【非特許文献】
【００１１】
【非特許文献１】R.Irwan及びR.M.Aarts、「Two-to-five channel sound processing」、Journal of the Audio Engineering Society、Vol.50(11)、pp.914-926、２００２年
【発明の概要】
【発明が解決しようとする課題】
【００１２】
従って、改善されたシステムが有利であり、特に、高められた柔軟性、改善されたオーディオ品質、低減された複雑性、容易化された実施及び／又は動作、低減されたリソース要求、及び／又は改善された性能を可能にする、入力チャネルの組からオーディオチャネルの組を生成するアプローチが有利である。
【００１３】
然るに、本発明は、望ましくは、上記の欠点のうち１又はそれ以上を１つずつ又は組み合わせて解消し、軽減し又は取り除くことを目的とする。
【課題を解決するための手段】
【００１４】
本発明の態様に従って、オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する装置であって：前記オーディオチャネルの第１の組を供給する供給回路；適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成する予測回路；前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させる回路；前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成する回路；及び、出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成する分配回路を有し、前記分配は、前記予測信号及び前記非予測信号に関し異なる、装置が提供される。
【００１５】
本発明は、オーディオチャネルの出力される組の改善された生成を可能にすることができる。改善された品質が多くの筋書きにおいて達成可能であり、且つ／あるいは、低減された複雑性及び／又はリソース消費、及び／又は低減されたアルゴリズム遅延が達成可能である。多くの実施形態において、改善された空間的経験が達成可能である。
【００１６】
システムは、例えば、第１の組のチャネルの異なる信号成分を出力チャネルの組に分配することを最適化するために使用される相関情報を決定するために、クロスチャネル予測フィルタリング（cross-channel predictive filtering）を使用してよい。特に、予測及び非予測音響成分は、実質的に異なった空間特性を有し、従って、有利に異なって分配される成分に対応してよい。例えば、当該アプローチは、空間的に適切に定められた音源に対応する信号成分と、明確な空間的位置を有さない周囲の拡散した音源に対応する信号成分とを推定するための、複雑性が低いアプローチを提供してよい。他の例として、当該アプローチは、中央に位置付けられた音源に対応する信号成分と、中央に位置付けられていない音源に対応する信号成分とを推定するための、複雑性が低いアプローチを提供してよい。
【００１７】
当該アプローチは、具体的に、オーディオチャネルの改善されたアップミキシングを提供することができる。実際に、幾つかの実施形態において、オーディオチャネルの出力される組は、第１の組のオーディオチャネルよりも多いオーディオチャネルを有してよい。具体的に、第１の組のオーディオチャネルは、ステレオチャネルの組又はステレオチャネルの組から得られるチャネルを有してよい。
【００１８】
当然のことながら、如何なる適切なコスト関数も使用されてよい。更に、当然のことながら、コスト関数の最小化は、絶対的且つ数学的に正確な最小化でなくてよく、単に、例えばリソース制限、実際的制限等の他の制約を考慮しながらコスト関数を低減しようとする如何なるアプローチであってもよい。このように、語「最小化」は、その弱い意味においては、一般的に、その厳密な数学的意味においてよりもむしろ、技術的意味において適用される。また、当然のことながら、コスト関数は、所望の特性を示す関数を最適化することによって、間接的に最小化されてよい。例えば、コスト関数は、予測信号と第１の信号との間の相互の情報又は相関の程度を最大化することによって、最小化され得る。
【００１９】
前記適応フィルタは、例えばゲイン調整又はレンジ制限等の、信号の更なる処理を含んでよい。また、前記適応フィルタは、適応フィルタ部分及び非適応フィルタ部分を有してよい。例えば、適応フィルタ部分は、前置フィルタが先行し、後置フィルタが後に続いてよい。前置フィルタ及び／又は後置フィルタは、固定の静的フィルタであってよい。
【００２０】
幾つかの実施形態において、本発明は、異なる信号成分の改善された分離を提供することができる。例えば、幾つかの実施形態において、本発明は、センターチャネルにおける中央音源の改善された分離及び集束を提供することができる。
【００２１】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第１チャネルは前記差分信号を有する。
【００２２】
これは、多くの実施形態において、改善された性能を提供することができる。特に、予測及び非予測信号成分への差分信号の分割は、ステレオ信号における音源の異なる特性を反映するよう、異なる空間チャネルへの分配に特に適する信号を提供することができる。第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００２３】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間サラウンドチャネル又は空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大ききであるように、前記予測信号を分配するよう配置される。
【００２４】
これは、多くの実施形態において、改善された性能を提供することができる。特に、それは、改善された空間的経験を提供することができ、更に、適切に定められた音源の空間的位置が原のステレオ信号からそれらの位置をますます保つことを可能にすることができる。
【００２５】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間サイドチャネル又はサラウンドチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される。
【００２６】
これは、多くの実施形態において、改善された性能を提供することができる。特に、それは、改善された空間的経験を提供することができ、更に、適切に定められた空間的位置に対応しそうにない音源が、それらがサララウンド経験を提供するように分配されることを可能にすることができる。
【００２７】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の前記空間サイドチャネル及びサラウンドチャネルのうちいずれか２つのチャネルの間の非予測信号電力における変化が６デシベルよりも大きくないように、前記非予測信号を分配するよう配置される。
【００２８】
これは、多くの実施形態において、改善された性能を提供することができ、特に、多くの筋書きにおいて、より実体験のように感じるサラウンド経験を提供することができる。
【００２９】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第２チャネルは前記和信号を有する。
【００３０】
これは、多くの実施形態において、改善された性能を提供することができる。特に、他のチャネルに関し予測信号を生成するよう和信号に適用される予測フィルタリングは、複数のチャネルにおいて存在しうる適切に定められた音源を示す予測信号を提供する。具体的に、それは、適切に定められた音源位置に対応する予測成分と、拡散した周囲音源（例えば、室内反響）に対応する非予測成分とに第１の信号を分離することを改善することができる。
【００３１】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００３２】
第２チャネルの対する和信号の使用は、具体的に、特に有利な動作及び性能を提供するよう、第１チャネルに対する差分信号の使用と組み合わされてよい。
【００３３】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第１チャネルは前記和信号を有する。
【００３４】
これは、多くの実施形態において、改善された性能を提供することができる。特に、予測及び非予測信号成分への和信号の分割は、ステレオ信号における音源の異なる特性を反映するよう、異なる空間チャネルへの分配に特に適する信号を提供する。
【００３５】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００３６】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントセンターチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間フロントサイドチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される。
【００３７】
これは、多くの筋書きにおいて、特に有利な動作及び／又は性能を提供することができる。具体的に、それは、中央に位置付けられた音源の中央チャネルへの改善された割り当てを可能にすることができる。
【００３８】
本発明の任意の特徴に従って、前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大きさであるように、前記予測信号を分配するよう配置される。
【００３９】
これは、多くの筋書きにおいて、特に有利な動作及び／又は性能を提供することができる。具体的に、それは、音源の正面ポジショニングを保ちながら、中央に位置付けられていない音源のサイドチャネルへの改善された割り当てを可能にすることができる。
【００４０】
本発明の任意の特徴に従って、前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第２チャネルは前記差分信号を有する。
【００４１】
これは、多くの実施形態において、改善された性能を提供することができる。特に、和信号等の他のチャネルに関する予測信号を生成するために差分信号に適用される予測フィルタリングは、中央に位置付けられていない音源を示す予測信号と、中央に位置付けられた音源を示す非予測信号とを提供する。
【００４２】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００４３】
第２チャネルに対する差分信号の使用は、具体的に、特に有利な動作及び性能を提供するよう、第１チャネルに対する和信号の使用と組み合わされてよい。
【００４４】
本発明の任意の特徴に従って、前記第１チャネルは、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する。
【００４５】
これは、多くの実施形態において、改善された性能及び／又は容易化された動作を提供することができる。特に、それは、多くの場合に、改善された音響上演を提供するよう異なって分配されうる中央に位置付けられた音源及び中央に位置付けられていない音源への改善された分離を提供することができる。例えば、それは、発話等の中央の音源の改善された集束を提供することができる。
【００４６】
第１及び第２の空間チャネルは、具体的に、例えばステレオ信号の左右のチャネルであってよい。
【００４７】
本発明の任意の特徴に従って、前記分配回路は、前記非予測信号のゲイン係数の少なくとも２倍のゲイン係数を有して前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルに前記予測信号を分配するよう配置される。
【００４８】
これは、多くの筋書きにおいて、改善された性能を提供することができる。特に、それは、サイドチャネルにわたる中央位置の拡散が低減されることを可能にするとともに、中央チャネルの位置に対応するより具体的な予測位置を提供することができる。
【００４９】
本発明の任意の特徴に従って、前記分配回路は、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルのゲイン係数の少なくとも２倍のゲイン係数を有して前記出力オーディオチャネルの組の中の空間センターチャネルに前記非予測信号を分配するよう配置される。
【００５０】
これは、多くの筋書きにおいて、改善された性能を提供することができる。特に、それは、サイドチャネルにわたる中央位置の不鮮明化が低減されることを可能にするとともに、中央チャネルの話者の位置に対応するより具体的な予測位置を提供することができる。
【００５１】
本発明の任意の特徴に従って、前記予測回路は、遅延された予測信号として前記予測信号を生成するよう配置される。
【００５２】
これは、多くの筋書きにおいて、改善された性能を提供することができ、特に、前記適応フィルタを適応させるときに信号の過去及び将来の両方のサンプルを含むことによって、第２チャネルの信号からの第１の信号のより正確な予測を可能にすることができる。
【００５３】
本発明の態様に従って、オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する方法であって：前記オーディオチャネルの第１の組を供給するステップ；適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成するステップ；前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させるステップ；前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成するステップ；及び、出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成するステップを有し、前記分配は、前記予測信号及び前記非予測信号に関し異なる、方法が提供される。
【００５４】
本発明のこれらの及び他の態様、特徴及び利点は、以下で記載される実施形態から明らかであり、それらを参照して説明される。
【図面の簡単な説明】
【００５５】
【図１】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図２】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図３】本発明の幾つかの実施形態に従う出力チャネルへの信号の分配の例を表す。
【図４】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図５】本発明の幾つかの実施形態に従う出力チャネルへの信号の分配の例を表す。
【図６】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置の要素の例を表す。
【図７】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置に存在するオーディオ信号の例を表す。
【図８】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置に存在するオーディオ信号の例を表す。
【図９】本発明の幾つかの実施形態に従って他の組のチャネルから出力チャネルの組を生成するオーディオ装置に存在するオーディオ信号の例を表す。
【発明を実施するための形態】
【００５６】
本発明の実施形態について、一例として、図面を参照して記載する。
【００５７】
以下の記載は、２よりも多い空間チャネルを有するマルチチャネルへのステレオチャネルのアップミキシングに適用可能な本発明の実施形態に焦点を当てる。なお、当然のことながら、本発明はこの適用に限定されず、他の多くのオーディオ処理システムに適用されてよい。
【００５８】
図１は、入力チャネルの組から出力チャネルの組を生成するオーディオ装置の例を表す。オーディオ装置は、信号を予測部分及び非予測部分に分けるためにクロスチャネル予測フィルタリングを使用する。
【００５９】
このように、予測信号は、適応フィルタによって第２チャネルからの第２の信号をフィルタリングすることによって、第１チャネルからの第１の信号に関し生成される。適応フィルタは、可能な限り第１の信号に類似しており、従って、第１及び第２のフィルタの間の相関を反映する予測信号を生じさせるよう構成される。このように、予測信号成分は、少なくとも１つの他のチャネルにも存在しうる第１の信号の成分を反映する。このような筋書きは、例えば、適切に定められた位置を有する１又はそれ以上の特定の音源から生じ、従って、異なる空間チャネルの間で相関すると見込まれる成分に起因する。なお、残りの非予測信号は、分散した、拡散した、及びあまり定まっていない音源から生じると見込まれてよく、然るに、周囲音響を表すと考えられてよい。このように、クロスチャネル予測に基づく予測信号及び非予測信号への分離は、第１の信号が、異なる空間特性を有する異なるタイプの音響を表す信号に分割されることを可能にする。
【００６０】
図１のシステムは、出力チャネルにわたって異なって予測信号及び非予測信号を分配する。例えば、予測信号は、主に、適切に定められた音源位置の認知を可能にする特定の空間チャネルへ分配されてよく、一方、非予測信号は、より幅広く分配されてよく、具体的に、周囲環境経験を提供することを目的とするチャネルを含む更なるチャネルにわたって広げられてよい。
【００６１】
簡潔さ及び明りょうさのために、図１は、１つのチャネルのみが他の１つのチャネルに基づき予測信号及び非予測信号に分けられる例を表す。しかし、当然のことながら、他の実施形態においては、同じアプローチが複数のチャネルに適用されてよく、実際には、１つの信号／チャネルが複数の他のチャネルに基づき予測信号及び非予測信号に分けられてよい。
【００６２】
図１の例において、複数の信号が、１又はそれ以上の内部又は外部の音源から受信器１０１によって受信される。次いで、第１の信号ｘ１（ｎ）は、第２の信号ｘ２（ｎ）の適応予測フィルタリングに基づき予測信号成分ｙｐ（ｎ）及び非予測信号成分ｙｎｐ（ｎ）に分けられる。
【００６３】
第２の信号ｘ２（ｎ）は、適応フィルタ１０３へ供給される。適応フィルタ１０３は、第２の信号ｘ２（ｎ）をフィルタリングして、予測信号ｙｐ（ｎ）を生成するよう配置される。適応フィルタ１０３は、具体例において、適応ＦＩＲ（有限インパルス応答）フィルタである。適応フィルタ１０３のフィルタ係数は、適応プロセッサ１０５によって与えられる。適応プロセッサ１０５は、フィルタ係数が第１の信号ｘ１（ｎ）と結果として起こる予測信号ｙｐ（ｎ）との間の差を示すコスト関数を（例えば、第１の信号ｘ１（ｎ）と結果として起こる予測信号ｙｐ（ｎ）との間の相互の情報の指標を最大化することによって）最小化するように、フィルタ係数を生成する。このように、適応フィルタ１０３は、第２の信号ｘ２（ｎ）のフィルタリングによって、予測信号ｙｐ（ｎ）が可能な限り第１の信号ｘ１（ｎ）に類似しているように、適応プロセッサ１０５により適応される。このように、予測信号は、２つのチャネルの間を相互に関連づける第１の信号ｘ１（ｎ）の信号成分に相当する。
【００６４】
当然のことながら、適応フィルタ１０３は、他の処理を有してよく、非適応処理を有してもよいが、それは少なくとも１つの適応フィルタリング処理を有する。例えば、適応フィルタリングは、第２の信号ｘ２（ｎ）が適応フィルタ部によってフィルタリングされる前に、第２の信号ｘ２（ｎ）の固定の前置フィルタリングを含んでよい。結果として起こる信号は、更に、固定の後置フィルタによってポストフィルタリングされてよい。
【００６５】
当然のことながら、信号の予測フィルタリングのための多種多様なアプローチ及びアルゴリムが知られており、如何なる適切なアプローチ及び方法も本発明を損なうことなしに使用されてよい。例えば、適応フィルタ１０３は、ＦＩＲフィルタとして実施されてよいが、代替的に又は追加的に、ＩＩＲ（無限インパルス応答）フィルタを有してよい。また、当然のことながら、予測フィルタリングを提供するよう適応フィルタを適応させるための多種多様なアルゴリズム及び方法が知られており、そのような適切なアルゴリズム及びアプローチのいずれもが本発明を損なうことなしに使用されてよい。例えば、適応プロセッサ１０５は、係数を決定するためにＬＭＳ（Least-Mean-Squares）、ＮＬＭＳ（Normalized Least-Mean-Squares）又はＲＬＳ（Recursive Least-Squares）適応アルゴリズムを使用してよい。
【００６６】
図１の装置は、更に、第１の信号ｘ１（ｎ）に関し非予測信号ｙｎｐ（ｎ）を生成するよう配置される。従って、装置は、補償プロセッサ１０７を有する。補償プロセッサ１０７は、第１の信号ｘ１（ｎ）に予測信号ｙｐ（ｎ）を補償することによって非予測信号ｙｎｐ（ｎ）を生成するよう配置される。補償プロセッサ１０７は、適応フィルタ１０３に結合され、それから予測信号ｙｐ（ｎ）を受信する。次いで、補償プロセッサ１０７は、第１の信号ｘ１（ｎ）に予測信号ｙｐ（ｎ）を補償することによって非予測信号ｙｎｐ（ｎ）を生成する。具体例において、この補償は、第１の信号ｘ１（ｎ）からの予測信号ｙｐ（ｎ）の単純な減算であり、すなわち、非予測信号は、ｙｎｐ（ｎ）＝ｘ１（ｎ）−ｙｐ（ｎ）によって与えられる。
【００６７】
装置は、分配プロセッサ１０９を更に有する。分配プロセッサ１０９は、適応フィルタ１０３及び保証プロセッサ１０７へ結合されており、予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）を受信する。例において、分派プロセッサは、更に受信器１０１に結合されており、第２の信号ｘｎ（ｎ）も受信する。
【００６８】
分配プロセッサ１０９は、予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）、更に、例においては第２の信号ｘ２（ｎ）をオーディオ信号の出力される組にわたって分配することによって、オーディオチャネルの出力される組を生成するよう配置される。しかし、予測信号ｙｐ（ｎ）の分配は、非予測信号ｙｎｐ（ｎ）の分配とは異なる。
【００６９】
特に、分配プロセッサ１０９は、自身が受信する信号の夫々から出力チャネルの夫々へ実効ゲインを導入してよく、このゲインは、少なくとも１つのチャネルに関し予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）によって異なってよい。特に、ゲインは、例えば、幾つかのチャネルについて非予測信号ｙｎｐ（ｎ）に関しては零であるが、予測信号ｙｐ（ｎ）に関しては零でなく、結果として、予測信号ｙｐ（ｎ）はこのチャネルに分配されるが、非予測信号ｙｎｐ（ｎ）はこのチャネルに分配されない。
【００７０】
幾つかの実施形態において、分配は、例えば、予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）に関し異なる周波数応答を有することによって、他の態様においては異なってよい。
【００７１】
予測信号ｙｐ（ｎ）及び非予測信号ｙｎｐ（ｎ）は異なるタイプの音響特性を表し、具体的には、通常、異なる空間特性を表しうるので、分配は、これを反映するよう最適化されてよく、例えば、改善された空間的ユーザ経験を提供するために使用されてよい。
【００７２】
以下、空間マルチチャネルへのステレオチャネルのアップミキシングを目的とする具体例について、より詳細に説明する。例においては、５つのチャネル出力信号がステレオ入力信号から生成される。具体的に、例においては、右（Ｒ）及び左（Ｌ）信号が受信され、センター（Ｃ）、レフトフロント（ｌｆ）、ライトフロント（ｒｆ）、レフトサラウンド（ｌｓ）及びライトサラウンド（ｒｓ）に対応する５つの空間信号が生成される。
【００７３】
具体的なシステムは図２に表されており、図１に関して先に記載されたのと同じ要素を有する。しかし、図２のシステムでは、受信されるステレオ信号は、直接的に使用されず、むしろ最初に和信号（通常、ミッド信号と呼ばれる。）と差分信号（通常、サイド信号と呼ばれる。）とに変換される。具体例において、ミッド（和）信号ｍは、加算回路２０１によって、ｍ＝Ｒ＋Ｌとして生成される。同様に、サイド（差分）信号ｓは、減算回路２０３によって、ｓ＝Ｒ−Ｌとして生成される。
【００７４】
当然のことながら、特定の和信号及び差分信号（ミッド信号及びサイド信号）は他の実施形態においては異なってよく、特に、重みが、和信号及び差分信号（ミッド信号及びサイド信号）の計算において、左右信号に適用されてよい。また、当然のことながら、ミッド信号及びサイド信号を生成する機能は、受信器１０１の部分であると考えられてよい。
【００７５】
例において、ミッド信号及びサイド信号は受信器１０１へ供給される。受信器１０１は、図１を参照して説明された予測フィルタリングを実行する。特に、予測信号及び非予測信号が、ミッド信号の適応フィルタリングによって、サイド信号に関し生成される。このように、システムにおいて、予測フィルタは、ミッド信号からサイド信号を予測するために使用される。これは、
【００７６】
［外１］
及び非予測信号ｅを生じさせる。このように、図１のシステムと比較して、図１の第１チャネルは差分／サイド信号ｓを有すると考えられてよく、第２チャネルは和／ミッド信号ｍを有すると考えられてよい。
【００７７】
ミッド信号ｍ及び
【００７８】
［外２］
は、大部分は、ステレオ記録において明りょうな空間位置を有する音源に係る情報を含む。対照的に、非予測信号ｅは、大部分は、拡散した音源（例えば、反響）に関連する情報を含む。
【００７９】
このように、予測フィルタ１０３は、原の２つの信号から３つの信号を生成する。これら３つの信号は、次いで、分配プロセッサ１０９によって５つの出力信号に分配される。
【００８０】
具体的に、分配プロセッサ１０９は、分配行列Ｕを用いて、複雑性が低いマトリクス乗算を適用してよい：
【００８１】
【数１】
具体的に、分配は、改善された空間的経験が信号の異なる部分に関し異なるチャネル分配を用いることによって達成されるように、配置される。このように、３つの信号の間の定性的区別は、５つの出力チャネルへの単純なマッピングを定義する際に利用される。
【００８２】
実際に、システムにおいて、予測信号は、支配的にフロントサイドスピーカから提示されるように分配される。このように、予測信号は、主に、望ましくは左右両方のフロントチャネルに供給される。特に、有利な性能及び、特に、改善された空間的経験は、予測信号から生じる少なくとも１つのフロントサイドチャネルにおける信号成分からの信号電力が、空間サラウンドチャネル又は空間フロントセンターチャネルのいずれかにおけるそのような成分からの予測信号電力の少なくとも２倍の大きさである場合に、達成されることが分かっている。実際に、多くの実施形態において、予測信号は、フロントサイドチャネルにのみ（通常は一様に）分配されてよい。
【００８３】
このように、システムは、具体的に、
【００８４】
［外３］
が、主に左右のチャネルに共通でない情報を含み、従って、分散した音響位置を表すが、適切に定められた音源位置を示し、従って、聴取者の前に特定の位置で提示されるよう意図されると思われる、ことを利用する。
【００８５】
分配プロセッサ１０９は、更に、ミッド信号ｍをフロントチャネルに分配するよう配置されてよく、具体的には、主にこれをセンターチャネル並びに左右のフロントチャネルに分配してよい。これは、左右のチャネルの和信号が、一般的に、主に、２つのチャネルの間で相関する音源からの音響を含み、従って、ユーザの前方から再生されるよう意図される音響に対応すると思われる、ことを反映する。
【００８６】
更に、非予測信号は、むしろ拡散的に提示されるように、分配される。実際に、非予測信号は、全てのチャネルに、又はより一般的には、センターチャネルを除く全てのチャネルに分配されてよい。これは、非予測信号が、様々な方向から、及び主にユーザのすぐ前以外の他の方向からユーザに達することをもたらす。これは、比較的拡散的且つ非集束的な空間認知を提供し、かかる認知は、特に、拡散した周囲音響（例えば、室内反響）により生じる可能性が高い信号成分にとって望ましい。
【００８７】
特に、有利な性能は、２つのフロントサイドチャネルの間又は２つのサラウンドチャネルの間の、非予測信号から生ずる電力における変化が６デシベルよりも大きくない場合に、達成され得ることが分かっている。加えて、有利な性能は、１つのフロントサイドチャネルにおいて非予測信号から生じる電力が、サラウンドチャネルにおいて生じる電力よりも５倍低い場合に、達成され得ることが分かっている。
【００８８】
実際に、非予測サイド信号の分配は実験的に評価されている。幾つかの筋書きにおいて、もっぱらサラウンドチャネルにおける信号に焦点を当てることは、それらの位置からの過度の信号をもたらす傾向があることが分かった。また、フロント及びサラウンドサイドチャネルにおける一様な分配は、サラウンド音源から認知される信号が少なすぎることをもたらすことが分かった。道理にかなった譲歩が、４分の１のエネルギがフロントサイドチャネルに供給され、残りのエネルギがサラウンドチャネルに分配されることに関して、見出された。
【００８９】
また、サイド及びサラウンドチャネルのうち少なくとも１つにおいて非予測信号成分から生じる成分の電力は、フロントセンターチャネルにおけるそれの少なくとも２倍の大きさであることが特に有利であることが分かっている。
【００９０】
このように、出力チャネルにわたる異なる信号の分配は、信号が存在しうる音響の固有の特性を反映する。更に、システムは、ステレオ記録を生成する場合に記録技師によって行われる典型的な音響上演を考慮するように、信号を分配する。例えば、ほとんどの音楽記録は、ユーザの前方の音響ステージにおける様々な特定の位置に特定の重要な楽器を配置して、周囲ノイズ又は重要でない楽器を音響ステージにわたって広げる傾向がある。記載されるシステムは、このアプローチの認識を用いて、１次元の音響ステージを、主たる音源（例えば、主要な楽器）の位置付けを実質的に保ちながら、ユーザを囲む２次元音響ステージへ拡張する。このように、当該アプローチは、個々の音源について正確な音響ステージを依然として保ちながら、より実体験のように感じるサラウンドサウンド経験を提供することができる。
【００９１】
更に、アプローチは、低い複雑性を有して達成可能であり、且つ、低い計算リソースコストを有して非常に効率的な実施を可能にすることができる。実際に、適応フィルタリングは、時間領域に実行されてよく、分配プロセッサ１０９は、時間領域において信号に適用される簡単なマトリクス演算を実施してよい。このように、分配及びアップミキシングは、如何なる周波数変換又は個々の時間周波数ブロックの如何なる特性若しくは処理手続きも必要としない。
【００９２】
具体例として、分配プロセッサ１０９は、次のように与えられる単純行列を実施してよい：
【００９３】
【数２】
チャネルの対応する分配が図３に示されている。
【００９４】
係数ａ、ｂ、ｄ、ｆは、具体的に、
【００９５】
［外４］
の総エネルギが５つの出力信号の総エネルギに対応するように、選択される。例えば、ａ＝ｆ＝√２／２、ｂ＝ｄ＝０．５。行列のスケーリング係数は、ミッド信号及びサイド信号への左右の信号のマッピングによるエネルギの増大を補償するよう導入される。
【００９６】
このように、システムは、音響の２つの異なる分類を表すとのオーディオ信号の考慮に基づく、チャネルフォーマット変換のための、リソースコストが安い方法を用いる。第１の分類は、特定の空間位置を夫々有する適切に定められた音源に関連する。第２の分類は、更なる周囲音響、すなわち、より明りょうな空間位置を欠いた音響又は音響成分から成る。この分離は、以下の観点において、フォーマット変換にとって特に有益である。フォーマット変換を行う場合に、適切に定められた音源は変換時に実質的に同じ空間位置を保つことが望まれる。しかし、周囲オーディオコンテンツの位置は、よりずっと自由に操作されてよい。
【００９７】
従って、システムは、周囲及び非周囲信号部分の、リソースコストが安い推定と、その後の、出力チャネルへの周囲及び非周囲信号部分の異なるマッピングとから成る２段階プロシージャを用いる。周囲及び非周囲信号は、信号を予測及び非予測成分に分けるクロスチャネル適応フィルタリングによって得られる。このような信号の分割は、原則的に、帯域全体にわたって実行され（時間周波数分析を回避する。）、リソースコストが安い適応フィルタの使用によって生じる。予測及び非予測成分は、夫々、非周囲及び周囲信号の良好な推定を提供する。予測及び非予測成分への分割は、チャネル間の関係が把握されるという利点を有し、これは、それらの成分を出力チャネルにわたって分配する場合に、よりずっと良く空間ステレオイメージを保つことを可能にする。
【００９８】
次のステップは、意図されるフォーマット又は再生システムへのそれらの成分のマッピングである。このような信号成分のマッピング又は分配は、周囲及び非周囲信号成分ごとに実質的に異なる。すなわち、各信号成分は、それ自身の分配係数の組と関連づけられる。
【００９９】
このようなマッピングは原のフォーマット及び意図されるフォーマット又は再生システムに依存する。しかし、具体例において、ミッド及び予測可能なサイド信号の分配は、空間的イメージが実質的に保たれるように為される。すなわち、それらは、主に、フロンチャネルに分配される。対照的に、サイド信号の非予測部分は、明りょうな空間的イメージをもたらさない。すなわち、それは、より周辺的な特徴を備え、フロント及びリアチャネル又は主にリアチャネルにマッピングされて、より実体験のように感じるサラウンド経験を作り出すことができる。
【０１００】
予測フィルタは、具体的に、線形フィルタリングにより多数のリグレッサ（regressor）信号ｙｉ（ｉ＝１，・・・，Ｋ）を生成することによって、生成されてよい。これは、例えば、タップ付き遅延線、全域通過フィルタ等によってよい。次いで、
【０１０１】
［外５］
は、それらのリグレッサ信号の一次結合として生成されてよい：
【０１０２】
【数３】
ここで、重みｗｉは、ＲＬＳ又はＮＬＭＳアルゴリズム等の適切な適応アルゴリズムを用いて生成されてよい。
【０１０３】
幾つかの実施形態において、予測は、遅延された予測信号として予測信号を生成してよい。このように、実施形態は、サイド信号の遅延されたものを予測してよい。すなわち、実施形態は、Ｄが適切な遅延である場合に、
【０１０４】
［外６］
を生成してよい。これは、予測が（ミッド及びサイド信号の両方に関し）将来及び過去両方のサンプルに基づくことを可能にする。そのような遅延が適用される場合に、分配プロセッサ１０９に供給される信号を同期させることが必要であり、特に、ミッド信号は存続期間Ｄだけ遅延されてよい。
【０１０５】
上記の例において、予測及び非予測信号成分はサイド信号に関し生成された。しかし、代替的に又は付加的に、予測及び非予測信号成分はミッド信号に関し生成されてよい。
【０１０６】
実際に、幾つかの実施形態において、ミッド信号に係る予測信号成分は、サイド信号の適応フィルタリングによって生成されてよい。次いで、非予測信号は、ミッド信号にこの予測信号を補償することによって、生成されてよい。次いで、ミッド信号の予測及び非予測部分の分配は、出力チャネルにわたって異なって分配されてよい。そのようなアプローチは、サイド信号の処理手続きとは無関係であってよく、具体的に、サイド信号に関し如何なる分析又は分離も行われることなしに、実行されてよい。具体例として、分配プロセッサ１０９は、予測ミッド信号、非予測ミッド信号、及びサイド信号を受信してよく、出力チャネルを生成するよう３×５行列を適用してよい。
【０１０７】
なお、多くの実施形態において、改善された性能は、ミッド及びサイド信号の両方を分離することによって、達成され得る。このように、ミッド信号ｍの適応フィルタリングによって
【０１０８】
［外７］
及び非予測サイド信号ｅを生成することに加えて、システムは、また、サイド信号ｓの適応フィルタリングによって
【０１０９】
［外８］
及び非予測ミッド信号ｅｍを生成してもよい。このように、この例では、４つの信号が分配プロセッサ１０９に与えられる。
【０１１０】
そのようなシステムの例が図４に示されている。例において、左右入力信号がミッド／サイド（Ｍ／Ｓ）プロセッサ４０１に供給される。Ｍ／Ｓプロセッサ４０１は、図２のシステムに関し説明されたように、ミッド信号ｍ及びサイド信号ｓを生成する。次いで、ミッド信号ｍ及びサイド信号ｓは予測プロセッサ４０３に供給される。予測プロセッサ４０３は、図１及び図２に関し記載されたものに対応する適応フィルタリングによって、
【０１１１】
［外９］
、非予測サイド信号ｅ、
【０１１２】
［外１０］
及び非予測ミッド信号ｅｍを生成する。次いで、出力チャネルを生成するよう、次の式に従って、４×５行列がそれらの信号に適用される：
【０１１３】
【数４】
具体的に、分配は、適切な空間的経験を提供するようにミッド信号の
【０１１４】
［外１１］
をフロントサイドチャネルに整合させようとする（
【０１１５】
［外１２］
は、サイド信号からも導出可能であり且つ非中心音源に対応するミッド信号の成分を表すため。）。具体的に、有利な性能は、フロントサイドチャネルの一方又は両方における予測信号電力（
【０１１６】
［外１３］
からの電力）がセンターチャネルの予測信号電力の少なくとも２倍の大きさである場合に、達成され得ることが分かっている。
【０１１７】
更に、分配は、非予測ミッド信号ｅｍを、これが差分信号と相関しない（すなわち、適切に定められた非中央の音源に対応しそうにない）ミッド信号の要素であることを反映するよう、主にセンターチャネルに分配しようとする。特に、有利な性能は、センターチャネルにおける非予測信号電力（非予測ミッド信号ｅｍからの電力）がいずれかの空間フロントセンターサイドチャネル（及び一般的にいずれかのサラウンドチャネル）の非予測信号電力の少なくとも２倍の大きさである場合に、達成され得ることが分かっている。
【０１１８】
更に、非予測サイド信号の分配は、主にサラウンド信号に対してであってよく、具体的に、ミッド信号の処理手続きを反映するようフロントサイド信号を無視してよい。
【０１１９】
具体例として、以下のアップミキシング行列が使用されてよい：
【０１２０】
【数５】
ここで、Ｕ０は、例えば、エネルギ節約を提供するよう設定される設計定数である。図５は、このマッピングを表す。
【０１２１】
幾つかのシステムにおいては、低周波チャネルが生成されてもよい。これは、例えば、左右両方の信号に低域通過フィルタを適用して、これら２つの信号を足し合わせ、和信号を低周波チャネルに関し用いることによって、行われてよい。被低域通過フィルタリング信号は、被高域通過フィルタリング信号を生成するよう、原の入力信号から減じられてよい。それらの被高域通過フィルタリング信号は、その後に、記載されるアップミキシングシステムの入力信号として使用され得る。
【０１２２】
図６は、クロスチャネル予測フィルタリングを用いる他の応用例を表す。システムは、異なる音源の改善された分離を提供するために当該アプローチを用い、特に、サイドチャネルにおいては中央の音源の成分を低減しながら、センターチャネルに対する中央の音源の改善された集束を提供しようとする。そのようなアプローチは、具体的に、例えば、ステレオミックスから中央の音源を分離することに適する。これは、例えば、ステレオ記録における会話又は他の発話の明瞭性を高めることができる。
【０１２３】
例において、クロスチャネル予測フィルタリングは、サイド信号に基づく左（及び／又は右）ステレオ信号に関し予測信号を決定するために使用される。この予測信号は、左チャネルのうちどの程度が非中央音源に対応するのかを示す。次いで、左（及び／又は右）信号は、中央位置に対応する左（及び／又は右）信号の部分に対応する非予測信号を生成するよう、予測信号を補償される。次いで、サイドチャネルは、主に予測信号から生成され、それにより、中央の音源に関係する左右の信号の如何なる成分も抑制する。更に、センターチャネルが、左右のチャネルからの非予測信号から生成されてよい。
【０１２４】
システムはミッド／サイドプロセッサ６０１を有する。ミッド／サイドプロセッサ６０１は、左信号ｘｌ（ｎ）及び右信号ｘｒ（ｎ）を受信し、ｘｄ（ｎ）＝ｗｌｘｌ（ｎ）−ｗｒｘｒ（ｎ）に従って差分信号ｘｄ（ｎ）を生成する。ここで、ｗｌ及びｗｒは、例えば、主成分分析（ＰＣＡ）（Principal Component Analysis）によって決定されてよく、あるいは、例えば、ｗｌ＝ｗｒ＝１のように一定であってよい。後者の場合に、差分信号は、厳密にステレオミックスにおけるセンターにパンされていない信号成分しか含まない。
【０１２５】
次いで、結果として起こる差分信号は、２つの予測回路６０３及び６０５に供給される。予測回路６０３及び６０５の夫々は、左右の信号の夫々について予測信号成分を生成するために使用される適応ＦＩＲフィルタを有する。このように、（左チャネル用の）第１の予測回路６０３の適応フィルタは、差分信号のフィルタリングが、予測信号と左信号との間の差分を示す基準を最適化する（例えば、コスト関数を最小化する）ように、適応される。同じアプローチが、第２の予測回路６０５によって右チャネルに適用される。
【０１２６】
具体的に、第１の予測回路に関し、適応フィルタは、ｒｌ（ｎ）＝ｘｌ（ｎ）−ｙｌ（ｎ）によって与えられる左残留信号のエネルギを最小化するよう適応される。ここで、次の式は、適応フィルタのフィルタリングを表す：
【０１２７】
【数６】
適応フィルタ係数ａｌｋの適応は、例えば、ＮＬＭＳアルゴリズムを用いて実行されてよい。対応するアプローチは第２の予測回路６０５によって行われ、信号ｙｒ（ｎ）が得られる。
【０１２８】
左右のチャネルの夫々の予測信号は、このようにして、ｙｌ（ｎ）及びｙｒ（ｎ）によって与えられる。左チャネルに係る予測信号ｙｌ（ｎ）は減算回路６０７に供給される。減算回路６０７は、左チャネル信号ｘｌ（ｎ）から予測信号ｙｌ（ｎ）を減じることによって、左チャネルに係る非予測信号ｚｌ（ｎ）を生成する。同様に、右チャネルに係る予測信号ｙｒ（ｎ）は減算回路６０９に供給される。減算回路６０９は、右チャネル信号ｘｒ（ｎ）から予測信号ｙｒ（ｎ）を減じることによって、右チャネルに係る非予測信号ｚｒ（ｎ）を生成する。
【０１２９】
このように、処理は、左右夫々のチャネルについての予測信号成分及び非予測信号成分に対応する４つの信号成分を生成する。このとき、予測信号成分は、差分信号の予測フィルタリングによって生成される。
【０１３０】
次いで、システムは、３つのチャネル、すなわち、左、右及び中央のチャネル（例えば、システムはサラウンドチャネルを有さない。）にわたって、それら４つの信号を分配する。実際には、具体例において、予測信号は主に右／左チャネルに供給され、実際に、特に有利な性能は、左右のチャネルのうち一方に対する予測信号のゲイン係数が中央のチャネルに対するゲイン係数の少なくとも２倍である場合に、見出されている。このように、予測信号は主にサイドチャネルに供給される。更に、サイドチャネルへの非予測信号の分配は、通常は、よりずっと低く、実際には、具体例において、サイドチャネルに対する対応する予測信号のゲイン係数は、非予測信号の少なくとも２倍である。実際に、例において、サイドチャネルは、非予測信号からの寄与成分しか有さず、予測信号からの寄与成分を有さない。然るに、サイドチャネルは、差分信号と相関する信号成分しか含まないので、非中央音源の如何なる寄与成分も持っていない。
【０１３１】
更に、非予測信号成分は中央のチャネルに分配され、具体的に、左右のチャネルからの非予測信号成分は具体例において結合器６１１で結合され、結合器６１１はセンターチャネルＣを生じさせる。なお、例において、予測信号からの寄与成分のみが実質的に低減され、具体例においては、予測信号は、センターチャネルに如何なる寄与成分も与えない。
【０１３２】
特に、特に有利な性能は、センターチャネルに対する非予測信号のゲイン係数が予測信号のゲイン係数の少なくとも２倍である場合に、達成され得ることが分かっている。
【０１３３】
また、特に、特に有利な性能は、非予測信号が、サイドチャネルへの非予測信号の分配に適用されるゲイン係数の少なくとも２倍のゲイン係数を有してセンターチャネルに分配される場合に、達成され得ることが分かっている。このように、非予測信号は主にセンターチャネルに分配される。
【０１３４】
このように、図６の記載されるシステムは、中央部及び側部の音源の極めて有効な分離を提供する。更に、それは、中央の音源をサイドチャネルから実質的に減じ又は除去して、それらをセンターチャネルに集束させることができる。このようなアプローチは、多くの筋書きにおいて、改善された性能を提供することができ、具体的に、ステレオ記録において中央の音声の改善された明瞭性を可能にすることができる。
【０１３５】
図６のシステムの動作は、具体例によって説明される。例において、受信されるステレオ信号は、ノイズの３つの分離された帯域から成る。ノイズ帯域の１つは、ステレオイメージにおいて厳密に中央にパンされる。残り２つのノイズ帯域は、イメージにおいて極右及び極左にパンされる。信号のスペクトルが図７に表されている。差分信号はこの場合にωｌ＝ωｒ＝１を用いて計算され、差分信号のスペクトルは図８に表されている。図８は、また、参照用に和信号のスペクトルも表している。
【０１３６】
左右の予測信号（左右の出力チャネルに対応）及びセンターチャネル信号のスペクトルが図９に表されている。
【０１３７】
表されているように、アプローチは、ステレオ混合からの３つの成分の分離を達成する。この合成例において、サイドチャネルへのセンターチャネルの漏れは、極めて低いレベルにある。左右のチャネルは互いに漏れる。しかし、漏れ音響のレベルは、３０デシベル以上所望の音響のレベルを下回っている。加えて、図９においては、中央にパンされる音源が残留信号（非予測信号）のスペクトルを決定づけることが見られる。若干の漏れがサイド信号からセンターチャネルに起こるが、レベルは、約２０デシベルだけ所望の中央音源のレベルを下回っている。
【０１３８】
当然のことながら、以上の記載は、明りょうさのために、機能ごとの回路、ユニット及びプロセッサを参照して本発明の実施形態を記載してきた。しかし、機能ごとの回路、ユニット又はプロセッサの間の機能の如何なる適切な分配も、本発明を損なうことなく使用されてよいことは明らかである。例えば、別個のプロセッサ又はコントローラによって実行されるよう表されている機能が同じプロセッサ又はコントローラによって実行されてよい。従って、特定の機能ユニットへの言及は、厳密な論理的又は物理的構造又は体系を示しているわけではなく、単に、記載される機能を提供する適切な手段への言及と見なされるべきである。
【０１３９】
本発明は、ハードウェア、ソフトウェア、ファームウェア又はそれらのいずれかの組み合わせを含む如何なる適切な形態においても実施されてよい。本発明は、任意に、１又はそれ以上のデータプロセッサ及び／又はデジタル信号プロセッサで実行されるコンピュータソフトウェアとして少なくとも部分的に実施されてよい。本発明の実施形態の要素及び部品は、如何なる適切な方法においても物理的、機能的及び論理的に実施されてよい。実際に、機能は、単一のユニットにおいて、複数のユニットにおいて、又は他の機能ユニットの部分として、実施されてよい。そのようなものとして、本発明は単一のユニットにおいて実施されてよく、あるいは、異なるユニット及びプロセッサの間で物理的及び機能的に分配されてよい。
【０１４０】
本発明は幾つかの実施形態に関連して記載されてきたが、ここに挙げられている特定の形態に限定されるよう意図されない。むしろ、本発明の適用範囲は、添付の特許請求の範囲によってのみ制限される。更に、特徴は特定の実施形態に関連して記載されているように見えることがあるが、記載される実施形態の様々な特徴は本発明に従って組み合わされてよいことが当業者には認識されるであろう。特許請求の範囲において、語「有する（comprising）」は、他の要素又はステップの存在を除外しない。
【０１４１】
更に、たとえ個々に挙げられているとしても、複数の回路、手段、要素又は方法ステップは、例えば、単一のユニット又はプロセッサによって、実施されてよい。更に、個々の特徴が異なる請求項に含まれることがあるが、それらは場合により有利に組み合わされてよく、異なる請求項における包含は、特徴の組み合わせが実行可能でなく及び／又は有利でないことを暗示しているわけではない。また、１つのカテゴリの請求項における特徴の包含は、このカテゴリに制限されることを暗示するものではなく、むしろ、その特徴が、必要に応じて、他のカテゴリの請求項に同様に適用可能であることを示す。更に、特許請求の範囲における特徴の順序は、特徴が実行されるべき具体的な順序を暗示するものではなく、特に、方法の請求項における個々のステップの順序は、その順序がこの順序において実行されるべきことを暗示するものではない。むしろ、ステップは、如何なる適切な順序においても実行されてよい。加えて、単数参照は複数個を除かず、従って、「１つの（a又はan）」、「第１」及び「第２」等への言及は複数個を除かない。特許請求の範囲における参照符号は、単に、明らかな例として提供されており、特許請求の範囲の適用範囲を限定するものとして決して解されるべきではない。
【特許請求の範囲】
【請求項１】
オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する装置であって：
前記オーディオチャネルの第１の組を供給する供給回路；
適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成する予測回路；
前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させる回路；
前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成する回路；及び
出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成する分配回路
を有し、
前記分配は、前記予測信号及び前記非予測信号に関し異なる、装置。
【請求項２】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第１チャネルは前記差分信号を有する、
請求項１に記載の装置。
【請求項３】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間サラウンドチャネル又は空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大ききであるように、前記予測信号を分配するよう配置される、
請求項２に記載の装置。
【請求項４】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間サイドチャネル又はサラウンドチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される、
請求項２に記載の装置。
【請求項５】
前記分配回路は、前記出力オーディオチャネルの組の中の前記空間サイドチャネル及びサラウンドチャネルのうちいずれか２つのチャネルの間の非予測信号電力における変化が６デシベルよりも大きくないように、前記非予測信号を分配するよう配置される、
請求項４に記載の装置。
【請求項６】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第２チャネルは前記和信号を有する、
請求項１に記載の装置。
【請求項７】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第１チャネルは前記和信号を有する、
請求項１に記載の装置。
【請求項８】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントセンターチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間フロントサイドチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される、
請求項７に記載の装置。
【請求項９】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大きさであるように、前記予測信号を分配するよう配置される、
請求項９に記載の装置。
【請求項１０】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第２チャネルは前記差分信号を有する、
請求項１に記載の装置。
【請求項１１】
前記第１チャネルは、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する、
請求項１０に記載の装置。
【請求項１２】
前記分配回路は、前記非予測信号のゲイン係数の少なくとも２倍のゲイン係数を有して前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルに前記予測信号を分配するよう配置される、
請求項１１に記載の装置。
【請求項１３】
前記分配回路は、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルのゲイン係数の少なくとも２倍のゲイン係数を有して前記出力オーディオチャネルの組の中の空間センターチャネルに前記非予測信号を分配するよう配置される、
請求項１１に記載の装置。
【請求項１４】
前記予測回路は、遅延された予測信号として前記予測信号を生成するよう配置される、
請求項１に記載の装置。
【請求項１５】
オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する方法であって：
前記オーディオチャネルの第１の組を供給するステップ；
適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成するステップ；
前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させるステップ；
前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成するステップ；及び
出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成するステップ
を有し、
前記分配は、前記予測信号及び前記非予測信号に関し異なる、方法。
【請求項１】
オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する装置であって：
前記オーディオチャネルの第１の組を供給する供給回路；
適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成する予測回路；
前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させる回路；
前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成する回路；及び
出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成する分配回路
を有し、
前記分配は、前記予測信号及び前記非予測信号に関し異なる、装置。
【請求項２】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第１チャネルは前記差分信号を有する、
請求項１に記載の装置。
【請求項３】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間サラウンドチャネル又は空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大ききであるように、前記予測信号を分配するよう配置される、
請求項２に記載の装置。
【請求項４】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間サイドチャネル又はサラウンドチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される、
請求項２に記載の装置。
【請求項５】
前記分配回路は、前記出力オーディオチャネルの組の中の前記空間サイドチャネル及びサラウンドチャネルのうちいずれか２つのチャネルの間の非予測信号電力における変化が６デシベルよりも大きくないように、前記非予測信号を分配するよう配置される、
請求項４に記載の装置。
【請求項６】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第２チャネルは前記和信号を有する、
請求項１に記載の装置。
【請求項７】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから和信号を生成するよう配置され、前記第１チャネルは前記和信号を有する、
請求項１に記載の装置。
【請求項８】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントセンターチャネルにおける非予測信号電力が、前記出力オーディオチャネルの組の中のいずれかの空間フロントサイドチャネルにおける非予測信号電力の少なくとも２倍の大きさであるように、前記非予測信号を分配するよう配置される、
請求項７に記載の装置。
【請求項９】
前記分配回路は、前記出力オーディオチャネルの組の中の少なくとも１つの空間フロントサイドチャネルにおける予測信号電力が、前記出力オーディオチャネルの組の中の空間フロントセンターチャネルにおける予測信号電力の少なくとも２倍の大きさであるように、前記予測信号を分配するよう配置される、
請求項９に記載の装置。
【請求項１０】
前記供給回路は、第１の空間チャネル及び第２の空間チャネルから差分信号を生成するよう配置され、前記第２チャネルは前記差分信号を有する、
請求項１に記載の装置。
【請求項１１】
前記第１チャネルは、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する、
請求項１０に記載の装置。
【請求項１２】
前記分配回路は、前記非予測信号のゲイン係数の少なくとも２倍のゲイン係数を有して前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルに前記予測信号を分配するよう配置される、
請求項１１に記載の装置。
【請求項１３】
前記分配回路は、前記第１の空間チャネル及び前記第２の空間チャネルのうちの一方に対応する前記出力オーディオチャネルの組の中の空間チャネルのゲイン係数の少なくとも２倍のゲイン係数を有して前記出力オーディオチャネルの組の中の空間センターチャネルに前記非予測信号を分配するよう配置される、
請求項１１に記載の装置。
【請求項１４】
前記予測回路は、遅延された予測信号として前記予測信号を生成するよう配置される、
請求項１に記載の装置。
【請求項１５】
オーディオチャネルの第１の組から出力オーディオチャネルの組を生成する方法であって：
前記オーディオチャネルの第１の組を供給するステップ；
適応フィルタによる前記オーディオチャネルの第１の組の中の第２チャネルの信号の適応フィルタリングによって、前記オーディオチャネルの第１の組の中の第１チャネルに関し予測信号を生成するステップ；
前記予測信号と前記第１チャネルの第１の信号との間の差を示すコスト関数を最小化するよう前記適応フィルタを適応させるステップ；
前記第１の信号に前記予測信号を補償することによって、前記第１チャネルに関し非予測信号を生成するステップ；及び
出力オーディオ信号の組にわたって少なくとも前記予測信号と前記非予測信号とを分配することによって、前記出力オーディオチャネルの組を生成するステップ
を有し、
前記分配は、前記予測信号及び前記非予測信号に関し異なる、方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公表番号】特表２０１２−５２９２１６（Ｐ２０１２−５２９２１６Ａ）
【公表日】平成２４年１１月１５日（２０１２．１１．１５）
【国際特許分類】
【出願番号】特願２０１２−５１３７１２（Ｐ２０１２−５１３７１２）
【出願日】平成２２年５月３１日（２０１０．５．３１）
【国際出願番号】ＰＣＴ／ＩＢ２０１０／０５２４１２
【国際公開番号】ＷＯ２０１０／１４０１０５
【国際公開日】平成２２年１２月９日（２０１０．１２．９）
【出願人】（５９００００２４８）コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ (12,071)
【Ｆターム（参考）】
【公表日】平成２４年１１月１５日（２０１２．１１．１５）
【国際特許分類】
【出願日】平成２２年５月３１日（２０１０．５．３１）
【国際出願番号】ＰＣＴ／ＩＢ２０１０／０５２４１２
【国際公開番号】ＷＯ２０１０／１４０１０５
【国際公開日】平成２２年１２月９日（２０１０．１２．９）
【出願人】（５９００００２４８）コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ (12,071)
【Ｆターム（参考）】
[ Back to top ]