ユーザ体感品質推定システムおよび方法、ユーザ体感品質推定装置、受信状況情報送信装置、送信端末、受信端末
【課題】リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できるようにする。
【解決手段】メディア通信システムの送信端末１側にユーザ体感品質推定装置１０を設けるとともに、受信端末２側に受信状況情報送信装置２０を設け、インサービスで送信端末１からパケット網３を介して受信端末２へ送信したメディア信号に関する受信状況を受信状況情報送信装置２０で取得してパケット網３を介してユーザ体感品質推定装置１０へ通知し、この受信状況情報に基づきユーザ体感品質推定装置１０によりメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質値を推定する。
【解決手段】メディア通信システムの送信端末１側にユーザ体感品質推定装置１０を設けるとともに、受信端末２側に受信状況情報送信装置２０を設け、インサービスで送信端末１からパケット網３を介して受信端末２へ送信したメディア信号に関する受信状況を受信状況情報送信装置２０で取得してパケット網３を介してユーザ体感品質推定装置１０へ通知し、この受信状況情報に基づきユーザ体感品質推定装置１０によりメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質値を推定する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信品質評価技術に関し、特にＶｏＩＰ（Voice over IP）やストリーミングなどの通信技術を利用して音声や映像などのメディアをリアルタイムで通信するリアルタイム系アプリケーション通信について、そのユーザ体感品質（主観品質）を推定する技術に関する。
【背景技術】
【０００２】
パケット網上でＩＰ電話や映像配信などのリアルタイム系のメディア情報を取り扱うサービスでは、メディア情報の転送に用いる例えばＩＰ網などの中継網自体で通信品質が保証されていない。このため、このようなサービスを利用する際に用いられるリアルタイム系アプリケーションの通信品質を精度よく評価して、パケット網の品質設計や品質管理を行う技術が必要とされている。
【０００３】
従来、このようなリアルタイム系アプリケーションの品質を評価する技術として、メディア情報に関する例えばパケット損失率などの通信状況を示すネットワーク品質に代えて、実際にリアルタイム系アプリケーションを利用するユーザレベルでの主観的な品質すなわちユーザ体感品質を推定する技術が提案されている（例えば、非特許文献１など参照）。
また、例えば音声や動画などのデータストリームをリアルタイムに転送するのに用いられるＲＴＰ（Real time Transport Protocol：IETF RFC1889）などのデータ転送プロトコルを利用したリアルタイム系アプリケーションのインサービスにおいて、パケットの挙動や端末の受信状態などの管理情報を通信相手に送るのに用いられるＲＴＣＰ（RTP Control Protocol：IETF RFC3611）などのプロトコルを利用して得られる品質レポート情報から、主観品質を推定する技術も提案されている（例えば、非特許文献２〜４など参照）。
【０００４】
なお、出願人は、本明細書に記載した先行技術文献情報で特定される先行技術文献以外には、本発明に関連する先行技術文献を出願時までに発見するには至らなかった。
【非特許文献１】「基礎から理解するVoIP技術」、OPEN DESIGN、March 2003、ＣＱ出版、pp.59-60
【非特許文献２】R.Caceres and A.Clark,"RTP Control Protocol Extended Reports(RTCP XR)",IETF RFC3611,May.2003
【非特許文献３】ETSI TIPHON TS101 329-5 Annex E, "Method for determining an equipment impairement factor using passive monitoring,", Nov.2000
【非特許文献４】Telchemy Inc., "Vqmon,", http://www.telchemy.com/
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、このような従来技術は、ネットワークおよび端末の品質情報と、経験値または予測したある一定のアルゴリズムによって作成された品質推定モデルを用いて、メディアの品質情報（劣化に関する情報）、またはそれに対するユーザ体感品質（主観品質）を「推定」する技術であった。そのため、アプリケーションの実装特性や設定によっては推定誤差が生じるという問題点があった。
【０００６】
本来、アプリケーションに対するユーザ体感品質を推定するには、音声や映像等のメディアを、直接、機械的に評価する客観評価法が有効であるとされてきた。ＩＰ電話等の狭帯域音声等では、ＩＴＵ−Ｔ勧告 P.862 ＰＥＳＱ（Perceptual Evaluation of Speech Quality）など、送信側のリファレンス信号と受信側で得られたメディア信号との比較を行うフルリファレンス（Full reference）による評価技術が存在し、ユーザ体感品質の推定精度も非常に高く、十分に主観評価の代用となりうることが示されている。
【０００７】
近年、上記ＰＥＳＱと同様に、音声メディアを直接評価するＩＴＵ−Ｔ勧告 P.563 ＳＥＡＭ（Single-ended method for objective speech quality assessment in narrow-band telephony applications）といったリファレンス信号との比較を行わないノンリファレンス（Non reference）による評価技術も提案されている。メディアを直接評価する方法は、ユーザ体感品質の推定精度が高い。しかしながら、この方法によれば、サービス提供中すなわちインサービスでの品質評価に適用する場合、全ユーザ対象とする常時監視を実施する必要がある。このため、メディア信号の収録装置（音声／映像の録音／録画装置）を各対置（ユーザ通信端末）に設置していなければならず、現実問題として実現不可能である。現在、これらの技術は、上記理由からインサービスでの品質評価ではなく、サンプリング測定など限定的な利用にとどまっている。
【０００８】
このように、従来技術としては、ネットワーク／端末の情報をネットワーク品質測定によって取得し、アプリケーション通信のユーザ体感品質値を推定するスケーラビリティの高い手法と、メディアを直接客観的に評価する高い推定精度の品質評価技術の２つが存在している。しかし、インサービスでの常時監視も可能とし、スケーラビリティが高く、ユーザ体感品質を高い精度で推定できる技術はなかった。
【０００９】
本発明はこのような課題を解決するためのものであり、各対地（通信端末）に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できるユーザ体感品質推定システムおよび方法、ユーザ体感品質推定装置、受信状況情報送信装置、送信端末、受信端末を提供することを目的としている。
【課題を解決するための手段】
【００１０】
このような目的を達成するために、本発明にかかるユーザ体感品質推定システムは、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムであって、受信端末側に設けられ、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、この受信状況情報を含む制御用パケットを送信する制御用パケット送信部とを有する受信状況情報送信装置と、送信端末側に設けられ、パケット網を介して受信した受信状況情報送信装置からの制御用パケットから受信状況情報を取得する受信状況取得部と、この受信状況情報に基づきリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部とを有するユーザ体感品質推定装置とを備えている。
【００１１】
この際、受信状況解析部で、受信状況情報として受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、ユーザ体感品質推定装置に、受信状況取得部により受信状況情報として得られた劣化情報に基づいて送信端末から送信されたメディアデータを加工することにより受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに設け、ユーザ体感品質推定部で、劣化メディア信号に基づきユーザ体感品質値を推定するようにしてもよい。
【００１２】
さらに、ユーザ体感品質推定部で、送信端末から送信されたメディアデータのメディア信号と劣化メディア信号とを比較することによりユーザ体感品質値を推定するようにしてもよい。
【００１３】
また、受信状況解析部で、受信状況情報として受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、ユーザ体感品質推定部で、受信状況取得部により受信状況情報として得られた特徴量情報に基づきユーザ体感品質値を推定するようにしてもよい。
【００１４】
さらに、ユーザ体感品質推定装置に、送信端末から送信されたメディアデータのメディア信号からその特徴量を示す特徴量情報を取得する特徴量抽出部をさらに設け、ユーザ体感品質推定部は、特徴量抽出部で取得された特徴量情報と受信状況取得部で取得された特徴量情報とを比較することによりユーザ体感品質値を推定するようにしてもよい。
【００１５】
また、ユーザ体感品質推定装置に、所定の評価用メディアデータを記憶する記憶部と、送信端末から送信するメディアデータとして評価用メディアデータを送信端末へ出力するメディアデータ出力部とをさらに設けてもよい。
【００１６】
また、本発明にかかるユーザ体感品質推定方法は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定方法であって、受信端末側に設けられた受信状況情報送信装置により、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析ステップと、受信状況情報送信装置により、受信状況情報を含む制御用パケットを送信する制御用パケット送信ステップと、送信端末側に設けられたユーザ体感品質推定装置により、パケット網を介して受信した受信状況情報送信装置からの制御用パケットから受信状況情報を取得する受信状況取得ステップと、ユーザ体感品質推定装置により、この受信状況情報に基づきリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定ステップとを備えている。
【００１７】
この際、受信状況解析ステップで、受信状況情報として受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、ユーザ体感品質推定装置により、受信状況情報に含まれる劣化情報に基づいて送信端末から送信されたメディアデータを加工することにより受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成ステップをさらに設け、ユーザ体感品質推定ステップで、劣化メディア信号に基づきユーザ体感品質値を推定するようにしてもよい。
【００１８】
さらに、受信状況解析ステップで、受信状況情報として受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、ユーザ体感品質推定ステップで、受信状況情報に含まれる特徴量情報に基づきユーザ体感品質値を推定するようにしてもよい。
【００１９】
また、ユーザ体感品質推定装置により、所定の評価用メディアデータを記憶する記憶ステップと、ユーザ体感品質推定装置により、送信端末側から送信するメディアデータとして評価用メディアデータを送信端末へ出力するメディアデータ出力ステップとをさらに設けてもよい。
【００２０】
また、本発明にかかるユーザ体感品質推定装置は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、送信端末側に設けられるユーザ体感品質推定装置であって、受信端末側に設けられた受信端末状況情報送信装置から送信された、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を含む制御用パケットをパケット網を介して受信して、その制御用パケットから受信状況情報を取得する受信状況取得部と、この受信状況情報に基づきリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部とを備えている。
【００２１】
この際、受信状況取得部により得られた受信状況情報である、受信端末で得られたメディアデータからその劣化状況を示す劣化情報に基づいて、送信端末から送信されたメディアデータを加工することにより受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに設け、ユーザ体感品質推定部は、劣化メディア信号に基づきユーザ体感品質値を推定するようにしてもよい。
【００２２】
あるいは、ユーザ体感品質推定部で、受信状況取得部により得られた受信状況情報である、受信端末で得られたメディア信号の特徴量を示す特徴量情報に基づき、ユーザ体感品質値を推定するようにしてもよい。
【００２３】
また、本発明にかかる受信状況情報送信装置は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、受信端末側に設けられる受信状況情報送信装置であって、送信端末側に設けられたユーザ体感品質推定装置でリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定する際に用いられ、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、この受信状況情報を含む制御用パケットを送信する制御用パケット送信部とを備えている。
【００２４】
この際、受信状況解析部で、受信状況情報として受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得するようにしてもよい。
【００２５】
あるいは、受信状況解析部で、受信状況情報として受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得するようにしてもよい。
【００２６】
また、本発明にかかる送信端末は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの送信端末であって、前述したユーザ体感品質推定装置を備えている。
【００２７】
また、本発明にかかる受信端末は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの受信端末であって、前述した受信状況情報送信装置を備えている。
【発明の効果】
【００２８】
本発明によれば、送信端末からパケット網を介して受信端末へ送信されたメディア信号に関する受信状況が受信状況情報送信装置で取得されてパケット網を介してユーザ体感品質推定装置へ通知され、この受信状況情報に基づきユーザ体感品質推定装置によりリアルタイム系アプリケーション通信のユーザ体感品質が推定されるため、各対地（ユーザ通信端末）に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや推定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【発明を実施するための最良の形態】
【００２９】
次に、本発明の実施の形態について図面を参照して説明する。
［各実施の形態の概要］
まず、図１〜図３を参照して、本発明の各実施の形態の概要について説明する。図１は、リアルタイム系アプリケーションに関するインサービスでのユーザ体感品質推定方法の分類を示す説明図である。図２は、本発明におけるアプリケーション組込型のユーザ体感品質推定方法を示す説明図である。図３は、本発明における測定器型のユーザ体感品質推定方法を示す説明図である。
【００３０】
一般に、リアルタイム系アプリケーションに関するインサービスでのユーザ体感品質の測定方法には、図１に示すように、ネットワーク品質を測定した結果からメディアの品質を推定するネットワーク品質測定方法９Ａと、メディアの品質を直接測定し評価するメディア品質測定方法９Ｂがある。
【００３１】
前者のネットワーク品質測定方法９Ａは、パケット網３およびリアルタイム系アプリケーション端末１，２などのハードウェアの振る舞いを示す客観的な通信品質情報に基づき、リアルタイム系アプリケーション通信を利用するユーザが感じる主観的なユーザ体感品質（主観品質）を推定する方法である。この方法は、パケット網３およびリアルタイム系アプリケーション端末１，２で得られた通信品質情報を、例えばＲＴＣＰ ＸＲなどの制御用パケットによって転送することで、第三者がその通信品質情報を用いて品質管理を実施することも可能となり、スケーラビリティや測定容易性は非常に高い。ただし、メディア信号を直接評価する方法ではないため、ユーザ体感品質推定精度はメディア品質測定方法に比べて低い。
【００３２】
一方、後者のメディア品質測定方法９Ｂは、リアルタイム系アプリケーション端末１，２間でやり取りするメディア信号を直接評価する技術であり、ユーザ体感品質の推定精度は非常に高い。しかし、前述のように、この方法を適用するには各ユーザの端末にメディア信号を収録（録音／録画）するメディア信号収録装置８を設置する必要がある。したがって、各ユーザに対して常時品質監視を行う場合、全ユーザに収録装置を設置することは実質的に不可能であることから、スケーラビリティや測定容易性が低い。
【００３３】
本発明の各実施の形態では、受信側のリアルタイム系アプリケーション端末（以下、受信端末という）２側に設けた受信状況情報送信装置２０で、受信メディア信号に関する受信状況を示す物理量を取得して受信状況情報として送信側のリアルタイム系アプリケーション端末（以下、送信端末という）１へ通知し、送信端末１側に設けたユーザ体感品質推定装置１０において、受信状況情報送信装置２０からの受信状況情報に基づきユーザ体感品質を推定することにより、前述したネットワーク品質測定方法９Ａやメディア品質測定方法９Ｂの問題点を解決し、各対地に別途メディア信号収録装置８を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで呼毎（Call-by-Call）に常時監視でき、スケーラビリティが高く、ユーザ体感品質を高い精度で推定できるようにしたものである。
【００３４】
また、本発明において、インサービスでユーザ体感品質の測定方法を実現する構成としては、ユーザ体感品質を推定する手段を送信端末のアプリケーションに組み込む構成と、送信端末に外付けされる測定器型の装置に組み込む構成がある。
前者のアプリケーション組込型は、図２に示すように、送信端末１のアプリケーションに、受信状況取得機能、客観品質評価機能、品質評価保存機能など、ユーザ体感品質推定に要する手段が組み込まれる。
【００３５】
後者の測定器型は、図３に示すように、送信端末１にユーザ体感品質推定装置１０を外付けで設置し、このユーザ体感品質推定装置１０に、受信状況取得機能、客観品質評価機能、品質評価保存機能など、ユーザ体感品質推定に要する手段を実装したものである。受信端末２から送信端末１へ通知される受信状況情報を、ハブやスイッチなどの中継装置６を介してユーザ体感品質推定装置１０で取得（キャプチャ）し、このユーザ体感品質推定装置１０によりユーザ体感品質値が推定される。
【００３６】
また、本発明の各実施の形態では、それぞれのユーザ体感品質推定方法において、リファレンス評価方法とノンリファレンス評価方法について説明する。
フルリファレンス評価法は、リファレンス信号（原信号）と、評価対象とするメディア信号すなわちネットワークを介して受信端末で収録されたメディア信号との２つを比較することによってユーザ体感品質値を推定する方法である。一方、ノンリファレンス評価法は、リファレンス信号との比較を行わず、評価対象とするメディア信号すなわちネットワークを介して受信端末側で収録された信号のみでユーザ体感品質値を推定する方法である。
【００３７】
本発明の第１および第２の実施の形態では、受信端末２で受信したメディア情報をデコード（復号処理）する前のパケット形態におけるメディア情報（以下、メディアデータという）に関する劣化を示す劣化情報からなる受信状況情報を用いて、ユーザ体感品質値を推定するユーザ体感品質推定装置について説明する。
一方、第３および第４の実施の形態では、受信端末２で受信したメディア情報をデコード（復号処理）した後のメディア情報（以下、メディア信号という）に関する特徴量を示す特徴量情報からなる受信状況情報を用いて、ユーザ体感品質値を推定するユーザ体感品質推定装置について説明する。
【００３８】
また、これら各実施の形態のうち、第１および第３の実施の形態では、ユーザ体感品質推定に要する各種手段を送信端末１のアプリケーションに組み込んだ構成について説明し、第２および第４の実施の形態では、ユーザ体感品質推定に要する各種手段を送信端末１に外付けしたユーザ体感品質推定装置１０で実現する構成について説明する。
さらに、各実施の形態では、それぞれの実施の形態におけるノンリファレンス評価方法とフルリファレンス評価方法についても説明する。
【００３９】
［第１の実施の形態］
まず、図４を参照して、本発明の第１の実施の形態にかかるユーザ体感品質推定システムについて説明する。図４は、本発明の第１の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
図４において、送信端末１と受信端末２はメディア通信システムを構成するリアルタイム系アプリケーション端末である。
【００４０】
送信端末１は、パケット網３を介して各種パケットをやり取りする通信端末装置からなり、主な構成として、所望のメディア信号をエンコードしてメディアデータを出力するメディア信号エンコード部１Ａと、このメディアデータをパケット化して送信するメディアデータ送信処理部１Ｂとを有している。
受信端末２は、パケット網３を介して各種パケットをやり取りする通信端末装置からなり、主な構成として、パケット網３を介して受信したメディアパケットからメディアデータを生成するメディアデータ受信処理部２Ａと、このメディアデータをデコードして元のメディア信号を再生出力するメディアデータデコード部２Ｂとを有している。
【００４１】
本実施の形態にかかるユーザ体感品質推定システムは、このようなメディア通信システムの受信端末２で受信したメディアデータの劣化を示す劣化情報からなる受信状況情報を用いて、送信端末１で当該リアルタイム系アプリケーション通信のユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図２に示したように、送信端末１内にユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【００４２】
［ユーザ体感品質推定装置］
次に、図１を参照して、ユーザ体感品質推定装置１０の構成について詳細に説明する。ユーザ体感品質推定装置１０は、主な機能部として、メディアデータ取得部１１、メディアデータ記憶部１２、受信状況取得部１４、劣化メディア信号生成部１５、劣化メディア信号記憶部１６、ユーザ体感品質推定部１７、推定ユーザ体感品質加工部１８、および推定ユーザ体感品質データ記憶部１９を備えている。
【００４３】
これら機能部のうち、メディアデータ取得部１１、受信状況取得部１４、劣化メディア信号生成部１５、ユーザ体感品質推定部１７、および推定ユーザ体感品質加工部１８は、各種信号処理回路やＣＰＵなどの情報処理回路から構成されており、メディアデータ記憶部１２、劣化メディア信号記憶部１６、および推定ユーザ体感品質データ記憶部１９は、ハードディスクやメモリなどの記憶装置から構成されている。これら構成は、送信端末１の持つハードウェアあるいは新たなハードウェアと、新たなプログラムとを協動させることにより実現できる。
【００４４】
メディアデータ取得部１１は、送信端末１のメディア信号エンコード部１Ａで生成されたメディアデータを取得してメディアデータ記憶部１２に格納する機能を有している。受信状況取得部１４は、パケット網３を介して受信端末２からの制御用パケットを取り込む制御用パケット取り込み手段１４Ａと、この制御用パケットを解析して受信端末２からの受信状況情報を抽出する制御用パケット解析手段１４Ｂとを有している。劣化メディア信号生成部１５は、受信状況取得部１４で得られた受信状況情報に基づきメディアデータ記憶部１２内のメディアデータを加工して劣化メディアデータを生成するメディアデータ加工手段１５Ａと、この劣化メディアデータをデコードすることにより受信端末２で得られたメディア信号に対応する劣化メディア信号を復元して劣化メディア信号記憶部１６へ格納する劣化メディアデータデコード手段１５Ｂとを有している。
【００４５】
ユーザ体感品質推定部１７は、公知のメディア品質客観評価技術に基づいて、劣化メディア信号記憶部１６内の劣化メディアデータから、送信端末１と受信端末２とのリアルタイム系アプリケーションにおける所望のユーザ体感品質値を推定する機能を有している。推定ユーザ体感品質加工部１８は、ユーザ体感品質推定部１７で得られたユーザ体感品質値を統計処理して、例えばネットワーク管理プロトコルＳＮＭＰ（Simple Network Management Protocol）で用いるデータベースＭＩＢ（Management Information Base）など第三者が取得できる形式に加工し、推定ユーザ体感品質データ記憶部１９へ格納する機能を有している。
【００４６】
［受信状況情報送信装置］
次に、図１を参照して、受信状況情報送信装置２０の構成について詳細に説明する。受信状況情報送信装置２０は、主な機能部として、受信状況解析部２１、制御用パケット生成部２２、および制御用パケット送信部２３とを備えている。
これら機能部は、各種信号処理回路やＣＰＵなどの情報処理回路から構成されている。これら構成は、受信端末２の持つハードウェアあるいは新たなハードウェアと、新たなプログラムとを協動させることにより実現できる。
【００４７】
受信状況解析部２１は、受信端末２のメディアデータ受信処理部２Ａで受信メディアパケットから生成されたメディアデータについて劣化状況を解析しその内容を劣化情報として出力する劣化状況解析手段２１Ａと、受信端末２のメディアデータデコード部２Ｂでのデコード処理に関するコーデック情報を取得するコーデック情報取得手段２１Ｂとを有している。制御用パケット生成部２２は、受信状況解析部２１で生成された劣化情報とコーデック情報とからなる受信状況情報を含む制御用パケット、例えばＲＴＰ（Real-time Transport Protocol：IETF RFC1889）で用いられるＲＴＣＰ ＸＲ（RTP Control Protocol Extended Reports：IETF RFC3611）の制御用パケットを生成する機能を有している。制御用パケット送信部２３は、この制御用パケットをパケット網３を介して送信端末１へ通知する機能を有している。
【００４８】
［第１の実施の形態の動作］
次に、図５を参照して、本発明の第１の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図５は、本発明の第１の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図である。
【００４９】
メディア通信システムでは、インサービスにおいて、送信端末１へ入力された所定のメディア信号４をメディア信号エンコード部１Ａでデコードし（ステップ１００）、得られたメディアデータをメディアデータ送信処理部１Ｂでパケット化し、パケット網３を介して受信端末２へ送信する（ステップ１０１）。
この際、ユーザ体感品質推定装置１０は、メディアデータ取得部１１により、メディア信号エンコード部１Ａで生成されたメディアデータを取得（コピー）し（ステップ１０２）、メディアデータ記憶部１２へ格納する（ステップ１０３）。
【００５０】
一方、受信端末２は、メディアデータ受信処理部２Ａにより送信端末１からのメディアパケットを受信してメディアデータを生成し、このメディアデータをメディアデータデコード部２Ｂでデコードしメディア信号５として再生出力する（ステップ１１０）。これにより、所望のメディア信号５が受信端末２の画面表示部（図示せず）や音声処理部（図示せず）で再生され、ユーザへ提供される。
この際、受信状況情報送信装置２０は、受信状況解析部２１の劣化状況解析手段２１Ａにより、メディアデータ受信処理部２Ａで受信されたメディアデータ、ここでは揺らぎ吸収バッファを通過した後でデコードされる前のデータについて、その劣化状況を解析して劣化情報を得る（ステップ１１１）。
【００５１】
例えば、メディアデータが音声／映像であれば、次のような欠落情報が生成される。まず、音声については、受信したメディアパケットのＩＤ番号順に損失の有無を０／１で記録し、損失の処理が無音挿入であったか詰めたかの情報を加え、無音挿入の場合、何ｍｓ挿入したかの情報も記録する。また、映像については、例えばＩＰ網上で発生するパケット損失への対策として前方誤り訂正符号ＦＥＣ(Forward Error Correction)機能を付加した動画圧縮技術であるＭＰＥＧ２ＴＳ（Moving Picture Experts Group 2 Transport Stream）が用いられている場合、何番目のＴＳ（Transport Stream）パケットが欠落したかの情報を記録する。
また、受信状況解析部２１のコーデック情報取得手段２１Ｂにより、受信端末２のメディアデータデコード部２Ｂでのデコード処理に関するコーデック情報を取得する（ステップ１１２）。
【００５２】
次に、受信状況解析部２１は、制御用パケット生成部２２により、受信状況解析部２１で得られた劣化情報およびコーデック情報を含む制御用パケットを生成し（ステップ１１３）、この制御用パケットを制御用パケット送信部２３によりパケット網３を介して送信端末１へ送信する（ステップ１１４）。
【００５３】
一方、送信端末１のユーザ体感品質推定装置１０は、受信状況取得部１４の制御用パケット取り込み手段１４Ａにより、受信端末２から送信端末１宛の制御用パケットを取り込み（キャプチャし）、この制御用パケットを制御用パケット解析手段１４Ｂにより解析して受信端末２からの受信状況情報、ここでは劣化情報とコーデック情報とを抽出する（ステップ１２０）。
【００５４】
続いて、劣化メディア信号生成部１５のメディアデータ加工手段１５Ａにより、受信状況取得部１４で得られた劣化情報に基づきメディアデータ記憶部１２内のメディアデータを加工して劣化メディアデータを生成し（ステップ１２１）、劣化メディアデータデコード手段１５Ｂにより、この劣化メディアデータを受信状況取得部１４で得られたコーデック情報に基づきデコードして劣化メディア信号を生成し（ステップ１２２）、劣化メディア信号記憶部１６へ格納する（ステップ１２３）。これにより、受信端末２で得られた劣化を含むメディア信号に対応する劣化メディア信号がユーザ体感品質推定装置１０で復元されたことになる。
【００５５】
次に、ユーザ体感品質推定装置１０は、ユーザ体感品質推定部１７により、公知のメディア品質客観評価技術に基づいて、劣化メディア信号記憶部１６内の劣化メディア信号から、送信端末１と受信端末２とのリアルタイム系アプリケーション通信における所望のユーザ体感品質値を推定する（ステップ１２４）。
【００５６】
このようにして、順次通知される受信状況情報に応じてユーザ体感品質値をそれぞれ推定し、メディア通信システムでの当該リアルタイム系アプリケーション通信が終了した後、推定ユーザ体感品質加工部１８により、ユーザ体感品質推定部１７で得られたユーザ体感品質推定値を統計処理して例えば時系列順に並び替え、ＭＩＢなど第三者が取得できる形式に加工する（ステップ１２５）。そして、推定ユーザ体感品質データ記憶部１９へ格納し（ステップ１２６）、一連のユーザ体感品質推定動作を終了する。
【００５７】
このように、本発明は、メディア通信システムの送信端末１側にユーザ体感品質推定装置１０を設けるとともに、受信側に受信状況情報送信装置２０を設け、インサービスで送信端末１からパケット網３を介して受信端末２へ送信したメディア信号に関する受信状況を受信状況情報送信装置２０で取得してパケット網３を介してユーザ体感品質推定装置１０へ通知し、この受信状況情報に基づきユーザ体感品質推定装置１０によりメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質値を推定するようにしたものである。
【００５８】
したがって、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや推定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【００５９】
また、本発明のユーザ体感品質推定装置１０や受信状況情報送信装置２０の構成は、送信端末１や受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の送信端末１や受信端末２へ容易に実装することができる。
【００６０】
また、本実施の形態では、受信状況情報送信装置２０により、受信状況情報としてメディアデータの劣化の状況を示す劣化情報を通知し、ユーザ体感品質推定装置１０により、この劣化情報に基づいて送信した元のメディアデータを加工して、受信端末２で得られたメディア信号に対応する劣化メディア信号を復元し、この劣化メディア信号に基づきユーザ体感品質を推定するようにしたので、受信側で収録したメディア信号からユーザ体感品質を推定するメディア品質推定方法と同様に、ユーザ体感品質値について高い推定精度が得られる。
【００６１】
この際、受信状況情報として劣化情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
また、受信端末２のメディアデータ受信処理部２Ａで受信され、揺らぎ吸収バッファを通過した後でデコードされる前のメディアデータから劣化情報を取得するようにしたので、例えばメディア信号が音声などのアナログ形式からなる場合には、デコード後のアナログ形式のメディア信号から劣化情報を取得する場合と比較して、デジタル形式のメディアデータからリアルタイム系アプリケーション通知の振る舞いを示す的確な劣化情報を容易に取得でき、また受信状況情報送信装置２０の構成を簡素化できる。
【００６２】
また、本実施の形態では、インサービスで送信端末１から受信端末２へ送信されるメディア信号を利用してユーザ体感品質を推定するようにしたので、別個に評価用メディアデータを用意する必要がない。また、ユーザが所望するメディアデータが送信されていない期間に評価用メディアデータを送信したり、ユーザ体感品質推定専用の評価用メディアデータを送信するためにユーザが所望するメディアデータの送信を中断させる必要もない。したがって、ユーザ体感品質の推定動作を行う負担を軽減でき、ユーザ体感品質を極めて容易に推定できる。
【００６３】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）との比較を行わず、劣化メディア信号のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号との比較を行うフルリファレンス評価方法を採用してもよい。
【００６４】
この際、フルリファレンス評価方法で用いるリファレンス信号については、メディアデータ記憶部１２に格納されているメディアデータをデコードして送信端末１から送信したメディア信号４を生成し、そのメディア信号と劣化メディア信号記憶部１６の劣化メディア信号とを比較してユーザ体感品質を推定すればよい。また、送信端末１から送信したメディア信号４をメディアデータ取得部１１により取得してメディアデータ記憶部１２に格納しておき、このメディア信号をユーザ体感品質推定に用いてもよい。
【００６５】
［第２の実施の形態］
次に、図６を参照して、本発明の第２の実施の形態にかかるユーザ体感品質推定システムについて説明する。図６は、本発明の第２の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図であり、前述した図４と同じまたは同等部分には同一符号をしてある。
【００６６】
本実施の形態にかかるユーザ体感品質推定システムは、前述した第１の実施の形態（図４参照）と同様に、メディア通信システムの受信端末２で受信したメディアデータの劣化を示す劣化情報からなる受信状況情報を用いて、送信端末１でユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図３に示したように、ユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を、送信端末１に外付けして設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【００６７】
本実施の形態にかかるユーザ体感品質推定装置１０は、前述の図４と比較して、メディアデータ記憶部１２に代えて評価用メディアデータを予め記憶する評価用メディアデータ記憶部１２Ａを備えている。また、メディアデータ取得部１１に代えて、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出して送信端末１へ出力するメディアデータ出力部１１Ａを備えている。なお、ユーザ体感品質推定装置１０および受信状況情報送信装置２０における他の構成については、前述の第１の実施の形態と同様であり、ここでの詳細な説明は省略する。
【００６８】
［第２の実施の形態の動作］
次に、図７を参照して、本発明の第２の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図７は、本発明の第２の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図であり、前述した図５と同じまたは同等部分には同一符号を付してある。
【００６９】
まず、ユーザ体感品質推定装置１０は、メディアデータ出力部１１Ａにより、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出し（ステップ１３０）、送信端末１へ出力する（ステップ１３１）。
これにより、送信端末１は、通常のメディア信号４をエンコードして得られたメディアデータと同様にして、メディアデータ送信処理部１Ｂから評価用メディアデータを送信する（ステップ１３２）。
【００７０】
この後、通常のメディアデータが評価用メディアデータに置き換えられたものの、受信端末２、受信状況情報送信装置２０、およびユーザ体感品質推定装置１０で、前述の図５と同様の処理が行われる。
したがって、受信状況情報送信装置２０により、受信端末２で受信された評価用メディアデータから劣化情報が取得され、制御用パケットによりパケット網３を介して送信端末１へ送信される（ステップ１１０〜１１４）。
【００７１】
また、ユーザ体感品質推定装置１０により、受信状況情報送信装置２０からの劣化情報に基づき、受信端末２で得られた劣化を含む評価用メディア信号に対応する劣化評価用メディア信号が復元され、この劣化評価用メディア信号に基づいてメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質が推定される。
【００７２】
このように、本実施の形態では、ユーザ体感品質推定装置により、所定の評価用メディアデータを記憶しておき、送信端末から送信するメディアデータとして評価用メディアデータを送信端末へ出力するようにしたので、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
【００７３】
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや測定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【００７４】
また、本発明のユーザ体感品質推定装置１０や受信状況情報送信装置２０の構成は、送信端末１や受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の送信端末１や受信端末２へ容易に実装することができる。
【００７５】
また、本実施の形態では、受信状況情報送信装置２０により、受信状況情報としてメディアデータの劣化の状況を示す劣化情報を通知し、ユーザ体感品質推定装置１０により、この劣化情報に基づいて送信した元のメディアデータを加工して、受信端末２で得られたメディア信号に対応する劣化メディア信号を復元し、この劣化メディア信号に基づきユーザ体感品質を推定するようにしたので、受信側で収録したメディア信号からユーザ体感品質を推定するメディア品質推定方法と同様に、ユーザ体感品質値について高い推定精度が得られる。
【００７６】
この際、受信状況情報として劣化情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
また、受信端末２のメディアデータ受信処理部２Ａで受信され、揺らぎ吸収バッファを通過した後でデコードされる前のメディアデータから劣化情報を取得するようにしたので、例えばメディア信号が音声などのアナログ形式からなる場合には、デコード後のアナログ形式のメディア信号から劣化情報を取得する場合と比較して、デジタル形式のメディアデータからリアルタイム系アプリケーション通知の振る舞いを示す的確な劣化情報を容易に取得でき、また受信状況情報送信装置２０の構成を簡素化できる。
【００７７】
また、本実施の形態では、ユーザ体感品質の推定専用の評価用メディアデータを用いるようにしたので、ユーザが所望するメディアデータが送信されていない期間や当該メディアデータの送信を一時中断して評価用メディアデータを送信する必要があるものの、利用者が所望するメディアデータとは異なり、例えばメディアデータの内容に偏りのない、リアルタイム系アプリケーション通信のユーザ体感品質値を推定するのに適したメディアデータを用いることができ、より正確なユーザ体感品質値を推定できる。
【００７８】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）との比較を行わず、劣化メディア信号のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号との比較を行うフルリファレンス評価方法を採用してもよい。
【００７９】
この際、フルリファレンス評価方法で用いるリファレンス信号については、評価メディアデータ記憶部１２Ａに格納されている評価メディアデータをデコードして送信端末１から送信した評価用メディア信号を生成し、その評価用メディア信号と劣化メディア信号記憶部１６の劣化評価用メディア信号とを比較してユーザ体感品質を推定すればよい。
【００８０】
［第３の実施の形態］
次に、図８を参照して、本発明の第３の実施の形態にかかるユーザ体感品質推定システムについて説明する。図８は、本発明の第３の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図であり、前述した図４と同じまたは同等部分には同一符号をしてある。
【００８１】
本実施の形態にかかるユーザ体感品質推定システムは、前述した第１の実施の形態（図４参照）とは異なり、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報からなる受信状況情報を用いて、ユーザ体感品質推定装置１０でユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図２に示したように、送信端末１内にユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【００８２】
本実施の形態にかかる受信状況情報送信装置２０は、前述の図４と比較して、受信状況解析部２１に、劣化状況解析手段２１Ａおよびコーデック情報取得手段２１Ｂに代えて、受信端末２のメディアデータデコード部２Ｂで受信メディアデータがデコードされて得られたメディア信号５からその特徴量を抽出し、特徴量情報として出力する特徴量抽出手段２１Ｃを備えている。
【００８３】
また、本実施の形態にかかるユーザ体感品質推定装置１０は、前述の図４と比較して、メディアデータ取得部１１に代えて、送信端末１のメディア信号エンコード部１Ａに入力されたメディア信号４を取得するメディア信号取得部１１Ｂを備えている。また、メディアデータ記憶部１２に代えて、メディア信号取得部１１Ｂで取得したメディア信号を記憶するメディア信号記憶部１２Ｂを備え、さらにこのメディア信号記憶部１２Ｂのメディア信号から特徴量を抽出する特徴量抽出部１３を備えている。
【００８４】
なお、メディア信号取得部１１Ｂ、メディア信号記憶部１２Ｂ、および特徴量抽出部１３については、フルリファレンス評価法を用いる場合にのみ必要となる構成であり、ノンリファレンス評価方法を用いる場合、これら構成は不要となる。
ユーザ体感品質推定装置１０および受信状況情報送信装置２０における他の構成については、前述の第１の実施の形態と同様であり、ここでの詳細な説明は省略する。
【００８５】
［第３の実施の形態の動作］
次に、図９を参照して、本発明の第３の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図９は、本発明の第３の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図である。
【００８６】
メディア通信システムでは、インサービスにおいて、送信端末１へ入力された所定のメディア信号をメディア信号エンコード部１Ａでデコードし（ステップ２００）、得られたメディアデータをメディアデータ送信処理部１Ｂでパケット化し、パケット網３を介して受信端末２へ送信する（ステップ２０１）。
【００８７】
一方、受信端末２は、メディアデータ受信処理部２Ａにより送信端末１からのメディアパケットを受信してメディアデータを生成し、このメディアデータをメディアデータデコード部２Ｂでデコードしメディア信号５として再生出力する（ステップ２１０）。これにより、所望のメディア信号５が受信端末２の画面表示部（図示せず）や音声処理部（図示せず）で再生され、ユーザへ提供される。
この際、受信状況情報送信装置２０は、受信状況解析部２１の特徴量抽出手段２１Ｃにより、メディアデータデコード部２Ｂでデコードされたメディア信号から、例えばＩＴＵ−Ｔ勧告P.862 ＰＥＳＱなどで利用される音声メディア信号のスペクトル量やパワー、あるいはリデュースドリファレンス（擬似二重刺激）法などで利用されるＰＳＮＲなどの特徴量を抽出して特徴量情報を得る（ステップ２１１）。
【００８８】
次に、受信状況解析部２１は、制御用パケット生成部２２により、受信状況解析部２１で得られた特徴量情報を含む制御用パケットを生成し（ステップ２１２）、この制御用パケットを制御用パケット送信部２３によりパケット網３を介して送信端末１へ送信する（ステップ２１３）。
【００８９】
一方、送信端末１のユーザ体感品質推定装置１０は、受信状況取得部１４の制御用パケット取り込み手段１４Ａにより、受信端末２からの制御用パケットを取り込み、この制御用パケットを制御用パケット解析手段１４Ｂにより解析して受信端末２からの受信状況情報、ここでは特徴量情報を抽出する（ステップ２２０）。
【００９０】
次に、ユーザ体感品質推定部１７により、公知のメディア品質客観評価技術に基づいて、受信状況取得部１４で得られた特徴量情報から、送信端末１と受信端末２とのリアルタイム系アプリケーション通信における所望のユーザ体感品質値を推定する（ステップ２２１）。
【００９１】
このようにして、順次通知される受信状況情報に応じてユーザ体感品質値をそれぞれ推定し、メディア通信システムでの当該リアルタイム系アプリケーション通信が終了した後、推定ユーザ体感品質加工部１８により、ユーザ体感品質推定部１７で得られたユーザ体感品質推定値を統計処理して例えば時系列順に並び替え、ＭＩＢなど第三者が取得できる形式に加工する（ステップ２２２）。そして、推定ユーザ体感品質データ記憶部１９へ格納し（ステップ２２３）、一連のユーザ体感品質推定動作を終了する。
【００９２】
このように、本実施の形態では、受信状況情報送信装置２０により、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報を抽出してこれを受信状況情報として送信し、この特徴量情報に基づいてユーザ体感品質推定装置１０でユーザ体感品質を推定するようにしたので、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
【００９３】
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや測定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【００９４】
また、本発明の受信状況情報送信装置２０の構成は、受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の受信端末２へ容易に実装することができる。
【００９５】
また、本実施の形態では、受信状況情報として特徴量情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
さらに、その特徴量から所望のユーザ体感品質値を直接推定でき、第１および第２の実施の形態のように劣化情報を通知する場合と比較して、劣化メディア信号を生成する必要がなくなり、ユーザ体感品質推定装置の構成を簡略化できる。
【００９６】
また、本実施の形態では、インサービスで送信端末１から受信端末２へ送信されるメディア信号を利用してユーザ体感品質を推定するようにしたので、別個に評価用メディアデータを用意する必要がない。また、ユーザが所望するメディアデータが送信されていない期間に評価用メディアデータを送信したり、ユーザ体感品質推定専用の評価用メディアデータを送信するためにユーザが所望するメディアデータの送信を中断させる必要もない。したがって、ユーザ体感品質の推定動作を行う負担を軽減でき、ユーザ体感品質を極めて容易に推定できる。
【００９７】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）の特徴量との比較を行わず、受信端末２で得られたメディア信号の特徴量のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号の特徴量との比較を行うフルリファレンス評価方法を採用してもよい。
【００９８】
この際、フルリファレンス評価方法で用いるリファレンス信号の特徴量については、メディア信号取得部１１Ｂによりメディア信号記憶部１２Ｂに格納されているメディア信号から、特徴量抽出部１３により特徴量を抽出し、この特徴量と受信状況取得部１４からの特徴量とを比較してユーザ体感品質を推定すればよい。また、前述した第１の実施の形態と同様に、送信端末１から送信したメディアデータをメディアデータ取得部１１により取得してメディアデータ記憶部１２に格納しておき、このメディアデータを特徴量抽出部１３によりデコードして元のメディア信号を生成し、このメディア信号から特徴量を抽出するようにしてもよい。
【００９９】
［第４の実施の形態］
次に、図１０を参照して、本発明の第４の実施の形態にかかるユーザ体感品質推定システムについて説明する。図１０は、本発明の第４の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図であり、前述した図８と同じまたは同等部分には同一符号をしてある。
【０１００】
本実施の形態にかかるユーザ体感品質推定システムは、前述した第１の実施の形態（図４参照）とは異なり、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報からなる受信状況情報を用いて、ユーザ体感品質推定装置１０でユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図３に示したように、ユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を、送信端末１に外付けして設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【０１０１】
本実施の形態にかかるユーザ体感品質推定装置１０は、前述の図８と比較して、メディア信号記憶部１２Ｂに代えて評価用メディアデータを予め記憶する評価用メディアデータ記憶部１２Ａを備え、さらにメディア信号取得部１１Ｂに代えて、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出して送信端末１へ出力するメディアデータ出力部１１Ａを備えている。また、評価用メディアデータ記憶部１２Ａの評価用メディアデータから特徴量を抽出する特徴量抽出部１３を備えている。
【０１０２】
なお、特徴量抽出部１３については、フルリファレンス評価法を用いる場合にのみ必要となる構成であり、ノンリファレンス評価方法を用いる場合、これら構成は不要となる。
ユーザ体感品質推定装置１０および受信状況情報送信装置２０における他の構成については、前述の第３の実施の形態と同様であり、ここでの詳細な説明は省略する。
【０１０３】
［第４の実施の形態の動作］
次に、図１１を参照して、本発明の第４の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図１１は、本発明の第４の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図であり、前述した図９と同じまたは同等部分には同一符号を付してある。
【０１０４】
まず、ユーザ体感品質推定装置１０は、メディアデータ出力部１１Ａより、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出し（ステップ２３０）、送信端末１へ出力する（ステップ２３１）。
これにより、送信端末１は、通常のメディア信号４をエンコードして得られたメディアデータと同様にして、メディアデータ送信処理部１Ｂから評価用メディアデータを送信する（ステップ２３２）。
【０１０５】
この後、通常のメディアデータが評価用メディアデータに置き換えられるものの、受信端末２、受信状況情報送信装置２０、およびユーザ体感品質推定装置１０で、前述の図９と同様の処理が行われる。
したがって、受信状況情報送信装置２０により、受信端末２で受信された評価用メディア信号から特徴量情報が取得され、制御用パケットによりパケット網３を介して送信端末１へ送信される（ステップ２１０〜２１３）。
また、ユーザ体感品質推定装置１０により、受信状況情報送信装置２０からの特徴量情報に基づいてメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質が推定される。
【０１０６】
このように、本実施の形態では、受信状況情報送信装置２０により、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報を抽出してこれを受信状況情報として送信し、この特徴量情報に基づいてユーザ体感品質推定装置１０でユーザ体感品質を推定するようにしたので、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
【０１０７】
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや測定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【０１０８】
また、本発明の受信状況情報送信装置２０の構成は、受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の受信端末２へ容易に実装することができる。
【０１０９】
また、本実施の形態では、受信状況情報として特徴量情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
さらに、その特徴量から所望のユーザ体感品質値を直接推定でき、第１および第２の実施の形態のように劣化情報を通知する場合と比較して、劣化メディア信号を生成する必要がなくなり、ユーザ体感品質推定装置の構成を簡略化できる。
【０１１０】
また、本実施の形態では、ユーザ体感品質の推定専用の評価用メディアデータを用いるようにしたので、ユーザが所望するメディアデータが送信されていない期間や当該メディアデータの送信を一時中断して評価用メディアデータを送信する必要があるものの、利用者が所望するメディアデータとは異なり、例えばメディアデータの内容に偏りのない、リアルタイム系アプリケーション通信のユーザ体感品質値を推定するのに適したメディアデータを用いることができ、より正確なユーザ体感品質値を推定できる。
【０１１１】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）の特徴量との比較を行わず、受信端末２で得られたメディア信号の特徴量のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号の特徴量との比較を行うフルリファレンス評価方法を採用してもよい。
【０１１２】
この際、フルリファレンス評価方法で用いるリファレンス信号の特徴量については、評価メディアデータ記憶部１２Ａに格納されている評価メディアデータを特徴量抽出部１３によりデコードして評価メディア信号を生成し、この評価メディア信号から特徴量を抽出するようにしてもよい。
なお、評価メディアデータ記憶部１２Ａに、評価メディアデータに対応する評価メディア信号を予め格納しておき、特徴量抽出部１３によりこの評価メディア信号から特徴量を抽出するようにしてもよい。
【０１１３】
［実施の形態の拡張］
以上の各実施の形態において、各ユーザ体感品質値を推定する推定処理間隔としては、例えば１５秒間隔など、メディア品質客観評価技術でユーザ体感品質の推定精度が高いとされている間隔、もしくは主観品質評価法（ITU-T勧告P.800,P.830）で示される間隔で行うようにしてもよい。
さらに、ユーザ体感品質推定値の統計処理では、上記推定処理間隔で推定した各ユーザ体感品質値の平均値や標準偏差を算出するようにしてもよい。
【０１１４】
なお、第１および第３の実施の形態では、ユーザ体感品質推定装置１０を送信端末１に外付けで設置した場合を例として説明したが、ユーザ体感品質推定装置１０を送信端末１内に実装してもよい。同様に、第２および第４の実施の形態では、ユーザ体感品質推定装置１０を送信端末１内に実装した場合を例として説明したが、ユーザ体感品質推定装置１０を送信端末１に外付けで設置してもよい。
また、各実施の形態では、受信状況情報送信装置２０を受信端末２内に実装した場合を例として説明したが、受信状況情報送信装置２０を受信端末２に外付けで設置してもよい。
【図面の簡単な説明】
【０１１５】
【図１】リアルタイム系アプリケーションに関するインサービスでのユーザ体感品質推定方法の分類を示す説明図である。
【図２】本発明におけるアプリケーション組込型のユーザ体感品質推定方法を示す説明図である。
【図３】本発明における測定器型のユーザ体感品質推定方法を示す説明図である。
【図４】本発明の第１の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図５】本発明の第１の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【図６】本発明の第２の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図７】本発明の第２の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【図８】本発明の第３の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図９】本発明の第３の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【図１０】本発明の第４の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図１１】本発明の第４の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【符号の説明】
【０１１６】
１…送信端末、１Ａ…メディア信号エンコード部、１Ｂ…メディアデータ送信処理部、２…受信端末、２Ａ…メディアデータ受信処理部、２Ｂ…メディアデータデコード部、３…パケット網、４…メディア信号（送信側）、５…メディア信号（受信側）、６…中継装置、１０…ユーザ体感品質推定装置、１１…メディアデータ取得部、１１Ａ…メディアデータ出力部、１１Ｂ…メディア信号取得部、１２…メディアデータ記憶部、１２Ａ…評価用メディアデータ記憶部、１２Ｂ…メディア信号記憶部、１３…特徴量抽出部、１４…受信状況取得部、１４Ａ…制御用パケット取り込み手段、１４Ｂ…制御用パケット解析手段、１５…劣化メディア信号生成部、１５Ａ…メディアデータ加工手段、１５Ｂ…劣化メディアデータデコード手段、１６…劣化メディア信号記憶部、１７…ユーザ体感品質推定部、１８…推定ユーザ体感品質加工部、１９…推定ユーザ体感品質データ記憶部、２０…受信状況情報送信装置、２１…受信状況解析部、２１Ａ…劣化状況解析手段、２１Ｂ…コーデック情報取得手段、２１Ｃ…特徴量抽出手段、２２…制御用パケット生成部、２３…制御用パケット送信部。
【技術分野】
【０００１】
本発明は、通信品質評価技術に関し、特にＶｏＩＰ（Voice over IP）やストリーミングなどの通信技術を利用して音声や映像などのメディアをリアルタイムで通信するリアルタイム系アプリケーション通信について、そのユーザ体感品質（主観品質）を推定する技術に関する。
【背景技術】
【０００２】
パケット網上でＩＰ電話や映像配信などのリアルタイム系のメディア情報を取り扱うサービスでは、メディア情報の転送に用いる例えばＩＰ網などの中継網自体で通信品質が保証されていない。このため、このようなサービスを利用する際に用いられるリアルタイム系アプリケーションの通信品質を精度よく評価して、パケット網の品質設計や品質管理を行う技術が必要とされている。
【０００３】
従来、このようなリアルタイム系アプリケーションの品質を評価する技術として、メディア情報に関する例えばパケット損失率などの通信状況を示すネットワーク品質に代えて、実際にリアルタイム系アプリケーションを利用するユーザレベルでの主観的な品質すなわちユーザ体感品質を推定する技術が提案されている（例えば、非特許文献１など参照）。
また、例えば音声や動画などのデータストリームをリアルタイムに転送するのに用いられるＲＴＰ（Real time Transport Protocol：IETF RFC1889）などのデータ転送プロトコルを利用したリアルタイム系アプリケーションのインサービスにおいて、パケットの挙動や端末の受信状態などの管理情報を通信相手に送るのに用いられるＲＴＣＰ（RTP Control Protocol：IETF RFC3611）などのプロトコルを利用して得られる品質レポート情報から、主観品質を推定する技術も提案されている（例えば、非特許文献２〜４など参照）。
【０００４】
なお、出願人は、本明細書に記載した先行技術文献情報で特定される先行技術文献以外には、本発明に関連する先行技術文献を出願時までに発見するには至らなかった。
【非特許文献１】「基礎から理解するVoIP技術」、OPEN DESIGN、March 2003、ＣＱ出版、pp.59-60
【非特許文献２】R.Caceres and A.Clark,"RTP Control Protocol Extended Reports(RTCP XR)",IETF RFC3611,May.2003
【非特許文献３】ETSI TIPHON TS101 329-5 Annex E, "Method for determining an equipment impairement factor using passive monitoring,", Nov.2000
【非特許文献４】Telchemy Inc., "Vqmon,", http://www.telchemy.com/
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、このような従来技術は、ネットワークおよび端末の品質情報と、経験値または予測したある一定のアルゴリズムによって作成された品質推定モデルを用いて、メディアの品質情報（劣化に関する情報）、またはそれに対するユーザ体感品質（主観品質）を「推定」する技術であった。そのため、アプリケーションの実装特性や設定によっては推定誤差が生じるという問題点があった。
【０００６】
本来、アプリケーションに対するユーザ体感品質を推定するには、音声や映像等のメディアを、直接、機械的に評価する客観評価法が有効であるとされてきた。ＩＰ電話等の狭帯域音声等では、ＩＴＵ−Ｔ勧告 P.862 ＰＥＳＱ（Perceptual Evaluation of Speech Quality）など、送信側のリファレンス信号と受信側で得られたメディア信号との比較を行うフルリファレンス（Full reference）による評価技術が存在し、ユーザ体感品質の推定精度も非常に高く、十分に主観評価の代用となりうることが示されている。
【０００７】
近年、上記ＰＥＳＱと同様に、音声メディアを直接評価するＩＴＵ−Ｔ勧告 P.563 ＳＥＡＭ（Single-ended method for objective speech quality assessment in narrow-band telephony applications）といったリファレンス信号との比較を行わないノンリファレンス（Non reference）による評価技術も提案されている。メディアを直接評価する方法は、ユーザ体感品質の推定精度が高い。しかしながら、この方法によれば、サービス提供中すなわちインサービスでの品質評価に適用する場合、全ユーザ対象とする常時監視を実施する必要がある。このため、メディア信号の収録装置（音声／映像の録音／録画装置）を各対置（ユーザ通信端末）に設置していなければならず、現実問題として実現不可能である。現在、これらの技術は、上記理由からインサービスでの品質評価ではなく、サンプリング測定など限定的な利用にとどまっている。
【０００８】
このように、従来技術としては、ネットワーク／端末の情報をネットワーク品質測定によって取得し、アプリケーション通信のユーザ体感品質値を推定するスケーラビリティの高い手法と、メディアを直接客観的に評価する高い推定精度の品質評価技術の２つが存在している。しかし、インサービスでの常時監視も可能とし、スケーラビリティが高く、ユーザ体感品質を高い精度で推定できる技術はなかった。
【０００９】
本発明はこのような課題を解決するためのものであり、各対地（通信端末）に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できるユーザ体感品質推定システムおよび方法、ユーザ体感品質推定装置、受信状況情報送信装置、送信端末、受信端末を提供することを目的としている。
【課題を解決するための手段】
【００１０】
このような目的を達成するために、本発明にかかるユーザ体感品質推定システムは、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムであって、受信端末側に設けられ、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、この受信状況情報を含む制御用パケットを送信する制御用パケット送信部とを有する受信状況情報送信装置と、送信端末側に設けられ、パケット網を介して受信した受信状況情報送信装置からの制御用パケットから受信状況情報を取得する受信状況取得部と、この受信状況情報に基づきリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部とを有するユーザ体感品質推定装置とを備えている。
【００１１】
この際、受信状況解析部で、受信状況情報として受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、ユーザ体感品質推定装置に、受信状況取得部により受信状況情報として得られた劣化情報に基づいて送信端末から送信されたメディアデータを加工することにより受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに設け、ユーザ体感品質推定部で、劣化メディア信号に基づきユーザ体感品質値を推定するようにしてもよい。
【００１２】
さらに、ユーザ体感品質推定部で、送信端末から送信されたメディアデータのメディア信号と劣化メディア信号とを比較することによりユーザ体感品質値を推定するようにしてもよい。
【００１３】
また、受信状況解析部で、受信状況情報として受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、ユーザ体感品質推定部で、受信状況取得部により受信状況情報として得られた特徴量情報に基づきユーザ体感品質値を推定するようにしてもよい。
【００１４】
さらに、ユーザ体感品質推定装置に、送信端末から送信されたメディアデータのメディア信号からその特徴量を示す特徴量情報を取得する特徴量抽出部をさらに設け、ユーザ体感品質推定部は、特徴量抽出部で取得された特徴量情報と受信状況取得部で取得された特徴量情報とを比較することによりユーザ体感品質値を推定するようにしてもよい。
【００１５】
また、ユーザ体感品質推定装置に、所定の評価用メディアデータを記憶する記憶部と、送信端末から送信するメディアデータとして評価用メディアデータを送信端末へ出力するメディアデータ出力部とをさらに設けてもよい。
【００１６】
また、本発明にかかるユーザ体感品質推定方法は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定方法であって、受信端末側に設けられた受信状況情報送信装置により、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析ステップと、受信状況情報送信装置により、受信状況情報を含む制御用パケットを送信する制御用パケット送信ステップと、送信端末側に設けられたユーザ体感品質推定装置により、パケット網を介して受信した受信状況情報送信装置からの制御用パケットから受信状況情報を取得する受信状況取得ステップと、ユーザ体感品質推定装置により、この受信状況情報に基づきリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定ステップとを備えている。
【００１７】
この際、受信状況解析ステップで、受信状況情報として受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、ユーザ体感品質推定装置により、受信状況情報に含まれる劣化情報に基づいて送信端末から送信されたメディアデータを加工することにより受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成ステップをさらに設け、ユーザ体感品質推定ステップで、劣化メディア信号に基づきユーザ体感品質値を推定するようにしてもよい。
【００１８】
さらに、受信状況解析ステップで、受信状況情報として受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、ユーザ体感品質推定ステップで、受信状況情報に含まれる特徴量情報に基づきユーザ体感品質値を推定するようにしてもよい。
【００１９】
また、ユーザ体感品質推定装置により、所定の評価用メディアデータを記憶する記憶ステップと、ユーザ体感品質推定装置により、送信端末側から送信するメディアデータとして評価用メディアデータを送信端末へ出力するメディアデータ出力ステップとをさらに設けてもよい。
【００２０】
また、本発明にかかるユーザ体感品質推定装置は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、送信端末側に設けられるユーザ体感品質推定装置であって、受信端末側に設けられた受信端末状況情報送信装置から送信された、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を含む制御用パケットをパケット網を介して受信して、その制御用パケットから受信状況情報を取得する受信状況取得部と、この受信状況情報に基づきリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部とを備えている。
【００２１】
この際、受信状況取得部により得られた受信状況情報である、受信端末で得られたメディアデータからその劣化状況を示す劣化情報に基づいて、送信端末から送信されたメディアデータを加工することにより受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに設け、ユーザ体感品質推定部は、劣化メディア信号に基づきユーザ体感品質値を推定するようにしてもよい。
【００２２】
あるいは、ユーザ体感品質推定部で、受信状況取得部により得られた受信状況情報である、受信端末で得られたメディア信号の特徴量を示す特徴量情報に基づき、ユーザ体感品質値を推定するようにしてもよい。
【００２３】
また、本発明にかかる受信状況情報送信装置は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、受信端末側に設けられる受信状況情報送信装置であって、送信端末側に設けられたユーザ体感品質推定装置でリアルタイム系アプリケーション通信に関するユーザ体感品質値を推定する際に用いられ、受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、この受信状況情報を含む制御用パケットを送信する制御用パケット送信部とを備えている。
【００２４】
この際、受信状況解析部で、受信状況情報として受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得するようにしてもよい。
【００２５】
あるいは、受信状況解析部で、受信状況情報として受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得するようにしてもよい。
【００２６】
また、本発明にかかる送信端末は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの送信端末であって、前述したユーザ体感品質推定装置を備えている。
【００２７】
また、本発明にかかる受信端末は、所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの受信端末であって、前述した受信状況情報送信装置を備えている。
【発明の効果】
【００２８】
本発明によれば、送信端末からパケット網を介して受信端末へ送信されたメディア信号に関する受信状況が受信状況情報送信装置で取得されてパケット網を介してユーザ体感品質推定装置へ通知され、この受信状況情報に基づきユーザ体感品質推定装置によりリアルタイム系アプリケーション通信のユーザ体感品質が推定されるため、各対地（ユーザ通信端末）に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや推定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【発明を実施するための最良の形態】
【００２９】
次に、本発明の実施の形態について図面を参照して説明する。
［各実施の形態の概要］
まず、図１〜図３を参照して、本発明の各実施の形態の概要について説明する。図１は、リアルタイム系アプリケーションに関するインサービスでのユーザ体感品質推定方法の分類を示す説明図である。図２は、本発明におけるアプリケーション組込型のユーザ体感品質推定方法を示す説明図である。図３は、本発明における測定器型のユーザ体感品質推定方法を示す説明図である。
【００３０】
一般に、リアルタイム系アプリケーションに関するインサービスでのユーザ体感品質の測定方法には、図１に示すように、ネットワーク品質を測定した結果からメディアの品質を推定するネットワーク品質測定方法９Ａと、メディアの品質を直接測定し評価するメディア品質測定方法９Ｂがある。
【００３１】
前者のネットワーク品質測定方法９Ａは、パケット網３およびリアルタイム系アプリケーション端末１，２などのハードウェアの振る舞いを示す客観的な通信品質情報に基づき、リアルタイム系アプリケーション通信を利用するユーザが感じる主観的なユーザ体感品質（主観品質）を推定する方法である。この方法は、パケット網３およびリアルタイム系アプリケーション端末１，２で得られた通信品質情報を、例えばＲＴＣＰ ＸＲなどの制御用パケットによって転送することで、第三者がその通信品質情報を用いて品質管理を実施することも可能となり、スケーラビリティや測定容易性は非常に高い。ただし、メディア信号を直接評価する方法ではないため、ユーザ体感品質推定精度はメディア品質測定方法に比べて低い。
【００３２】
一方、後者のメディア品質測定方法９Ｂは、リアルタイム系アプリケーション端末１，２間でやり取りするメディア信号を直接評価する技術であり、ユーザ体感品質の推定精度は非常に高い。しかし、前述のように、この方法を適用するには各ユーザの端末にメディア信号を収録（録音／録画）するメディア信号収録装置８を設置する必要がある。したがって、各ユーザに対して常時品質監視を行う場合、全ユーザに収録装置を設置することは実質的に不可能であることから、スケーラビリティや測定容易性が低い。
【００３３】
本発明の各実施の形態では、受信側のリアルタイム系アプリケーション端末（以下、受信端末という）２側に設けた受信状況情報送信装置２０で、受信メディア信号に関する受信状況を示す物理量を取得して受信状況情報として送信側のリアルタイム系アプリケーション端末（以下、送信端末という）１へ通知し、送信端末１側に設けたユーザ体感品質推定装置１０において、受信状況情報送信装置２０からの受信状況情報に基づきユーザ体感品質を推定することにより、前述したネットワーク品質測定方法９Ａやメディア品質測定方法９Ｂの問題点を解決し、各対地に別途メディア信号収録装置８を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで呼毎（Call-by-Call）に常時監視でき、スケーラビリティが高く、ユーザ体感品質を高い精度で推定できるようにしたものである。
【００３４】
また、本発明において、インサービスでユーザ体感品質の測定方法を実現する構成としては、ユーザ体感品質を推定する手段を送信端末のアプリケーションに組み込む構成と、送信端末に外付けされる測定器型の装置に組み込む構成がある。
前者のアプリケーション組込型は、図２に示すように、送信端末１のアプリケーションに、受信状況取得機能、客観品質評価機能、品質評価保存機能など、ユーザ体感品質推定に要する手段が組み込まれる。
【００３５】
後者の測定器型は、図３に示すように、送信端末１にユーザ体感品質推定装置１０を外付けで設置し、このユーザ体感品質推定装置１０に、受信状況取得機能、客観品質評価機能、品質評価保存機能など、ユーザ体感品質推定に要する手段を実装したものである。受信端末２から送信端末１へ通知される受信状況情報を、ハブやスイッチなどの中継装置６を介してユーザ体感品質推定装置１０で取得（キャプチャ）し、このユーザ体感品質推定装置１０によりユーザ体感品質値が推定される。
【００３６】
また、本発明の各実施の形態では、それぞれのユーザ体感品質推定方法において、リファレンス評価方法とノンリファレンス評価方法について説明する。
フルリファレンス評価法は、リファレンス信号（原信号）と、評価対象とするメディア信号すなわちネットワークを介して受信端末で収録されたメディア信号との２つを比較することによってユーザ体感品質値を推定する方法である。一方、ノンリファレンス評価法は、リファレンス信号との比較を行わず、評価対象とするメディア信号すなわちネットワークを介して受信端末側で収録された信号のみでユーザ体感品質値を推定する方法である。
【００３７】
本発明の第１および第２の実施の形態では、受信端末２で受信したメディア情報をデコード（復号処理）する前のパケット形態におけるメディア情報（以下、メディアデータという）に関する劣化を示す劣化情報からなる受信状況情報を用いて、ユーザ体感品質値を推定するユーザ体感品質推定装置について説明する。
一方、第３および第４の実施の形態では、受信端末２で受信したメディア情報をデコード（復号処理）した後のメディア情報（以下、メディア信号という）に関する特徴量を示す特徴量情報からなる受信状況情報を用いて、ユーザ体感品質値を推定するユーザ体感品質推定装置について説明する。
【００３８】
また、これら各実施の形態のうち、第１および第３の実施の形態では、ユーザ体感品質推定に要する各種手段を送信端末１のアプリケーションに組み込んだ構成について説明し、第２および第４の実施の形態では、ユーザ体感品質推定に要する各種手段を送信端末１に外付けしたユーザ体感品質推定装置１０で実現する構成について説明する。
さらに、各実施の形態では、それぞれの実施の形態におけるノンリファレンス評価方法とフルリファレンス評価方法についても説明する。
【００３９】
［第１の実施の形態］
まず、図４を参照して、本発明の第１の実施の形態にかかるユーザ体感品質推定システムについて説明する。図４は、本発明の第１の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
図４において、送信端末１と受信端末２はメディア通信システムを構成するリアルタイム系アプリケーション端末である。
【００４０】
送信端末１は、パケット網３を介して各種パケットをやり取りする通信端末装置からなり、主な構成として、所望のメディア信号をエンコードしてメディアデータを出力するメディア信号エンコード部１Ａと、このメディアデータをパケット化して送信するメディアデータ送信処理部１Ｂとを有している。
受信端末２は、パケット網３を介して各種パケットをやり取りする通信端末装置からなり、主な構成として、パケット網３を介して受信したメディアパケットからメディアデータを生成するメディアデータ受信処理部２Ａと、このメディアデータをデコードして元のメディア信号を再生出力するメディアデータデコード部２Ｂとを有している。
【００４１】
本実施の形態にかかるユーザ体感品質推定システムは、このようなメディア通信システムの受信端末２で受信したメディアデータの劣化を示す劣化情報からなる受信状況情報を用いて、送信端末１で当該リアルタイム系アプリケーション通信のユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図２に示したように、送信端末１内にユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【００４２】
［ユーザ体感品質推定装置］
次に、図１を参照して、ユーザ体感品質推定装置１０の構成について詳細に説明する。ユーザ体感品質推定装置１０は、主な機能部として、メディアデータ取得部１１、メディアデータ記憶部１２、受信状況取得部１４、劣化メディア信号生成部１５、劣化メディア信号記憶部１６、ユーザ体感品質推定部１７、推定ユーザ体感品質加工部１８、および推定ユーザ体感品質データ記憶部１９を備えている。
【００４３】
これら機能部のうち、メディアデータ取得部１１、受信状況取得部１４、劣化メディア信号生成部１５、ユーザ体感品質推定部１７、および推定ユーザ体感品質加工部１８は、各種信号処理回路やＣＰＵなどの情報処理回路から構成されており、メディアデータ記憶部１２、劣化メディア信号記憶部１６、および推定ユーザ体感品質データ記憶部１９は、ハードディスクやメモリなどの記憶装置から構成されている。これら構成は、送信端末１の持つハードウェアあるいは新たなハードウェアと、新たなプログラムとを協動させることにより実現できる。
【００４４】
メディアデータ取得部１１は、送信端末１のメディア信号エンコード部１Ａで生成されたメディアデータを取得してメディアデータ記憶部１２に格納する機能を有している。受信状況取得部１４は、パケット網３を介して受信端末２からの制御用パケットを取り込む制御用パケット取り込み手段１４Ａと、この制御用パケットを解析して受信端末２からの受信状況情報を抽出する制御用パケット解析手段１４Ｂとを有している。劣化メディア信号生成部１５は、受信状況取得部１４で得られた受信状況情報に基づきメディアデータ記憶部１２内のメディアデータを加工して劣化メディアデータを生成するメディアデータ加工手段１５Ａと、この劣化メディアデータをデコードすることにより受信端末２で得られたメディア信号に対応する劣化メディア信号を復元して劣化メディア信号記憶部１６へ格納する劣化メディアデータデコード手段１５Ｂとを有している。
【００４５】
ユーザ体感品質推定部１７は、公知のメディア品質客観評価技術に基づいて、劣化メディア信号記憶部１６内の劣化メディアデータから、送信端末１と受信端末２とのリアルタイム系アプリケーションにおける所望のユーザ体感品質値を推定する機能を有している。推定ユーザ体感品質加工部１８は、ユーザ体感品質推定部１７で得られたユーザ体感品質値を統計処理して、例えばネットワーク管理プロトコルＳＮＭＰ（Simple Network Management Protocol）で用いるデータベースＭＩＢ（Management Information Base）など第三者が取得できる形式に加工し、推定ユーザ体感品質データ記憶部１９へ格納する機能を有している。
【００４６】
［受信状況情報送信装置］
次に、図１を参照して、受信状況情報送信装置２０の構成について詳細に説明する。受信状況情報送信装置２０は、主な機能部として、受信状況解析部２１、制御用パケット生成部２２、および制御用パケット送信部２３とを備えている。
これら機能部は、各種信号処理回路やＣＰＵなどの情報処理回路から構成されている。これら構成は、受信端末２の持つハードウェアあるいは新たなハードウェアと、新たなプログラムとを協動させることにより実現できる。
【００４７】
受信状況解析部２１は、受信端末２のメディアデータ受信処理部２Ａで受信メディアパケットから生成されたメディアデータについて劣化状況を解析しその内容を劣化情報として出力する劣化状況解析手段２１Ａと、受信端末２のメディアデータデコード部２Ｂでのデコード処理に関するコーデック情報を取得するコーデック情報取得手段２１Ｂとを有している。制御用パケット生成部２２は、受信状況解析部２１で生成された劣化情報とコーデック情報とからなる受信状況情報を含む制御用パケット、例えばＲＴＰ（Real-time Transport Protocol：IETF RFC1889）で用いられるＲＴＣＰ ＸＲ（RTP Control Protocol Extended Reports：IETF RFC3611）の制御用パケットを生成する機能を有している。制御用パケット送信部２３は、この制御用パケットをパケット網３を介して送信端末１へ通知する機能を有している。
【００４８】
［第１の実施の形態の動作］
次に、図５を参照して、本発明の第１の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図５は、本発明の第１の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図である。
【００４９】
メディア通信システムでは、インサービスにおいて、送信端末１へ入力された所定のメディア信号４をメディア信号エンコード部１Ａでデコードし（ステップ１００）、得られたメディアデータをメディアデータ送信処理部１Ｂでパケット化し、パケット網３を介して受信端末２へ送信する（ステップ１０１）。
この際、ユーザ体感品質推定装置１０は、メディアデータ取得部１１により、メディア信号エンコード部１Ａで生成されたメディアデータを取得（コピー）し（ステップ１０２）、メディアデータ記憶部１２へ格納する（ステップ１０３）。
【００５０】
一方、受信端末２は、メディアデータ受信処理部２Ａにより送信端末１からのメディアパケットを受信してメディアデータを生成し、このメディアデータをメディアデータデコード部２Ｂでデコードしメディア信号５として再生出力する（ステップ１１０）。これにより、所望のメディア信号５が受信端末２の画面表示部（図示せず）や音声処理部（図示せず）で再生され、ユーザへ提供される。
この際、受信状況情報送信装置２０は、受信状況解析部２１の劣化状況解析手段２１Ａにより、メディアデータ受信処理部２Ａで受信されたメディアデータ、ここでは揺らぎ吸収バッファを通過した後でデコードされる前のデータについて、その劣化状況を解析して劣化情報を得る（ステップ１１１）。
【００５１】
例えば、メディアデータが音声／映像であれば、次のような欠落情報が生成される。まず、音声については、受信したメディアパケットのＩＤ番号順に損失の有無を０／１で記録し、損失の処理が無音挿入であったか詰めたかの情報を加え、無音挿入の場合、何ｍｓ挿入したかの情報も記録する。また、映像については、例えばＩＰ網上で発生するパケット損失への対策として前方誤り訂正符号ＦＥＣ(Forward Error Correction)機能を付加した動画圧縮技術であるＭＰＥＧ２ＴＳ（Moving Picture Experts Group 2 Transport Stream）が用いられている場合、何番目のＴＳ（Transport Stream）パケットが欠落したかの情報を記録する。
また、受信状況解析部２１のコーデック情報取得手段２１Ｂにより、受信端末２のメディアデータデコード部２Ｂでのデコード処理に関するコーデック情報を取得する（ステップ１１２）。
【００５２】
次に、受信状況解析部２１は、制御用パケット生成部２２により、受信状況解析部２１で得られた劣化情報およびコーデック情報を含む制御用パケットを生成し（ステップ１１３）、この制御用パケットを制御用パケット送信部２３によりパケット網３を介して送信端末１へ送信する（ステップ１１４）。
【００５３】
一方、送信端末１のユーザ体感品質推定装置１０は、受信状況取得部１４の制御用パケット取り込み手段１４Ａにより、受信端末２から送信端末１宛の制御用パケットを取り込み（キャプチャし）、この制御用パケットを制御用パケット解析手段１４Ｂにより解析して受信端末２からの受信状況情報、ここでは劣化情報とコーデック情報とを抽出する（ステップ１２０）。
【００５４】
続いて、劣化メディア信号生成部１５のメディアデータ加工手段１５Ａにより、受信状況取得部１４で得られた劣化情報に基づきメディアデータ記憶部１２内のメディアデータを加工して劣化メディアデータを生成し（ステップ１２１）、劣化メディアデータデコード手段１５Ｂにより、この劣化メディアデータを受信状況取得部１４で得られたコーデック情報に基づきデコードして劣化メディア信号を生成し（ステップ１２２）、劣化メディア信号記憶部１６へ格納する（ステップ１２３）。これにより、受信端末２で得られた劣化を含むメディア信号に対応する劣化メディア信号がユーザ体感品質推定装置１０で復元されたことになる。
【００５５】
次に、ユーザ体感品質推定装置１０は、ユーザ体感品質推定部１７により、公知のメディア品質客観評価技術に基づいて、劣化メディア信号記憶部１６内の劣化メディア信号から、送信端末１と受信端末２とのリアルタイム系アプリケーション通信における所望のユーザ体感品質値を推定する（ステップ１２４）。
【００５６】
このようにして、順次通知される受信状況情報に応じてユーザ体感品質値をそれぞれ推定し、メディア通信システムでの当該リアルタイム系アプリケーション通信が終了した後、推定ユーザ体感品質加工部１８により、ユーザ体感品質推定部１７で得られたユーザ体感品質推定値を統計処理して例えば時系列順に並び替え、ＭＩＢなど第三者が取得できる形式に加工する（ステップ１２５）。そして、推定ユーザ体感品質データ記憶部１９へ格納し（ステップ１２６）、一連のユーザ体感品質推定動作を終了する。
【００５７】
このように、本発明は、メディア通信システムの送信端末１側にユーザ体感品質推定装置１０を設けるとともに、受信側に受信状況情報送信装置２０を設け、インサービスで送信端末１からパケット網３を介して受信端末２へ送信したメディア信号に関する受信状況を受信状況情報送信装置２０で取得してパケット網３を介してユーザ体感品質推定装置１０へ通知し、この受信状況情報に基づきユーザ体感品質推定装置１０によりメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質値を推定するようにしたものである。
【００５８】
したがって、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや推定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【００５９】
また、本発明のユーザ体感品質推定装置１０や受信状況情報送信装置２０の構成は、送信端末１や受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の送信端末１や受信端末２へ容易に実装することができる。
【００６０】
また、本実施の形態では、受信状況情報送信装置２０により、受信状況情報としてメディアデータの劣化の状況を示す劣化情報を通知し、ユーザ体感品質推定装置１０により、この劣化情報に基づいて送信した元のメディアデータを加工して、受信端末２で得られたメディア信号に対応する劣化メディア信号を復元し、この劣化メディア信号に基づきユーザ体感品質を推定するようにしたので、受信側で収録したメディア信号からユーザ体感品質を推定するメディア品質推定方法と同様に、ユーザ体感品質値について高い推定精度が得られる。
【００６１】
この際、受信状況情報として劣化情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
また、受信端末２のメディアデータ受信処理部２Ａで受信され、揺らぎ吸収バッファを通過した後でデコードされる前のメディアデータから劣化情報を取得するようにしたので、例えばメディア信号が音声などのアナログ形式からなる場合には、デコード後のアナログ形式のメディア信号から劣化情報を取得する場合と比較して、デジタル形式のメディアデータからリアルタイム系アプリケーション通知の振る舞いを示す的確な劣化情報を容易に取得でき、また受信状況情報送信装置２０の構成を簡素化できる。
【００６２】
また、本実施の形態では、インサービスで送信端末１から受信端末２へ送信されるメディア信号を利用してユーザ体感品質を推定するようにしたので、別個に評価用メディアデータを用意する必要がない。また、ユーザが所望するメディアデータが送信されていない期間に評価用メディアデータを送信したり、ユーザ体感品質推定専用の評価用メディアデータを送信するためにユーザが所望するメディアデータの送信を中断させる必要もない。したがって、ユーザ体感品質の推定動作を行う負担を軽減でき、ユーザ体感品質を極めて容易に推定できる。
【００６３】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）との比較を行わず、劣化メディア信号のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号との比較を行うフルリファレンス評価方法を採用してもよい。
【００６４】
この際、フルリファレンス評価方法で用いるリファレンス信号については、メディアデータ記憶部１２に格納されているメディアデータをデコードして送信端末１から送信したメディア信号４を生成し、そのメディア信号と劣化メディア信号記憶部１６の劣化メディア信号とを比較してユーザ体感品質を推定すればよい。また、送信端末１から送信したメディア信号４をメディアデータ取得部１１により取得してメディアデータ記憶部１２に格納しておき、このメディア信号をユーザ体感品質推定に用いてもよい。
【００６５】
［第２の実施の形態］
次に、図６を参照して、本発明の第２の実施の形態にかかるユーザ体感品質推定システムについて説明する。図６は、本発明の第２の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図であり、前述した図４と同じまたは同等部分には同一符号をしてある。
【００６６】
本実施の形態にかかるユーザ体感品質推定システムは、前述した第１の実施の形態（図４参照）と同様に、メディア通信システムの受信端末２で受信したメディアデータの劣化を示す劣化情報からなる受信状況情報を用いて、送信端末１でユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図３に示したように、ユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を、送信端末１に外付けして設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【００６７】
本実施の形態にかかるユーザ体感品質推定装置１０は、前述の図４と比較して、メディアデータ記憶部１２に代えて評価用メディアデータを予め記憶する評価用メディアデータ記憶部１２Ａを備えている。また、メディアデータ取得部１１に代えて、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出して送信端末１へ出力するメディアデータ出力部１１Ａを備えている。なお、ユーザ体感品質推定装置１０および受信状況情報送信装置２０における他の構成については、前述の第１の実施の形態と同様であり、ここでの詳細な説明は省略する。
【００６８】
［第２の実施の形態の動作］
次に、図７を参照して、本発明の第２の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図７は、本発明の第２の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図であり、前述した図５と同じまたは同等部分には同一符号を付してある。
【００６９】
まず、ユーザ体感品質推定装置１０は、メディアデータ出力部１１Ａにより、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出し（ステップ１３０）、送信端末１へ出力する（ステップ１３１）。
これにより、送信端末１は、通常のメディア信号４をエンコードして得られたメディアデータと同様にして、メディアデータ送信処理部１Ｂから評価用メディアデータを送信する（ステップ１３２）。
【００７０】
この後、通常のメディアデータが評価用メディアデータに置き換えられたものの、受信端末２、受信状況情報送信装置２０、およびユーザ体感品質推定装置１０で、前述の図５と同様の処理が行われる。
したがって、受信状況情報送信装置２０により、受信端末２で受信された評価用メディアデータから劣化情報が取得され、制御用パケットによりパケット網３を介して送信端末１へ送信される（ステップ１１０〜１１４）。
【００７１】
また、ユーザ体感品質推定装置１０により、受信状況情報送信装置２０からの劣化情報に基づき、受信端末２で得られた劣化を含む評価用メディア信号に対応する劣化評価用メディア信号が復元され、この劣化評価用メディア信号に基づいてメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質が推定される。
【００７２】
このように、本実施の形態では、ユーザ体感品質推定装置により、所定の評価用メディアデータを記憶しておき、送信端末から送信するメディアデータとして評価用メディアデータを送信端末へ出力するようにしたので、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
【００７３】
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや測定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【００７４】
また、本発明のユーザ体感品質推定装置１０や受信状況情報送信装置２０の構成は、送信端末１や受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の送信端末１や受信端末２へ容易に実装することができる。
【００７５】
また、本実施の形態では、受信状況情報送信装置２０により、受信状況情報としてメディアデータの劣化の状況を示す劣化情報を通知し、ユーザ体感品質推定装置１０により、この劣化情報に基づいて送信した元のメディアデータを加工して、受信端末２で得られたメディア信号に対応する劣化メディア信号を復元し、この劣化メディア信号に基づきユーザ体感品質を推定するようにしたので、受信側で収録したメディア信号からユーザ体感品質を推定するメディア品質推定方法と同様に、ユーザ体感品質値について高い推定精度が得られる。
【００７６】
この際、受信状況情報として劣化情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
また、受信端末２のメディアデータ受信処理部２Ａで受信され、揺らぎ吸収バッファを通過した後でデコードされる前のメディアデータから劣化情報を取得するようにしたので、例えばメディア信号が音声などのアナログ形式からなる場合には、デコード後のアナログ形式のメディア信号から劣化情報を取得する場合と比較して、デジタル形式のメディアデータからリアルタイム系アプリケーション通知の振る舞いを示す的確な劣化情報を容易に取得でき、また受信状況情報送信装置２０の構成を簡素化できる。
【００７７】
また、本実施の形態では、ユーザ体感品質の推定専用の評価用メディアデータを用いるようにしたので、ユーザが所望するメディアデータが送信されていない期間や当該メディアデータの送信を一時中断して評価用メディアデータを送信する必要があるものの、利用者が所望するメディアデータとは異なり、例えばメディアデータの内容に偏りのない、リアルタイム系アプリケーション通信のユーザ体感品質値を推定するのに適したメディアデータを用いることができ、より正確なユーザ体感品質値を推定できる。
【００７８】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）との比較を行わず、劣化メディア信号のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号との比較を行うフルリファレンス評価方法を採用してもよい。
【００７９】
この際、フルリファレンス評価方法で用いるリファレンス信号については、評価メディアデータ記憶部１２Ａに格納されている評価メディアデータをデコードして送信端末１から送信した評価用メディア信号を生成し、その評価用メディア信号と劣化メディア信号記憶部１６の劣化評価用メディア信号とを比較してユーザ体感品質を推定すればよい。
【００８０】
［第３の実施の形態］
次に、図８を参照して、本発明の第３の実施の形態にかかるユーザ体感品質推定システムについて説明する。図８は、本発明の第３の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図であり、前述した図４と同じまたは同等部分には同一符号をしてある。
【００８１】
本実施の形態にかかるユーザ体感品質推定システムは、前述した第１の実施の形態（図４参照）とは異なり、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報からなる受信状況情報を用いて、ユーザ体感品質推定装置１０でユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図２に示したように、送信端末１内にユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【００８２】
本実施の形態にかかる受信状況情報送信装置２０は、前述の図４と比較して、受信状況解析部２１に、劣化状況解析手段２１Ａおよびコーデック情報取得手段２１Ｂに代えて、受信端末２のメディアデータデコード部２Ｂで受信メディアデータがデコードされて得られたメディア信号５からその特徴量を抽出し、特徴量情報として出力する特徴量抽出手段２１Ｃを備えている。
【００８３】
また、本実施の形態にかかるユーザ体感品質推定装置１０は、前述の図４と比較して、メディアデータ取得部１１に代えて、送信端末１のメディア信号エンコード部１Ａに入力されたメディア信号４を取得するメディア信号取得部１１Ｂを備えている。また、メディアデータ記憶部１２に代えて、メディア信号取得部１１Ｂで取得したメディア信号を記憶するメディア信号記憶部１２Ｂを備え、さらにこのメディア信号記憶部１２Ｂのメディア信号から特徴量を抽出する特徴量抽出部１３を備えている。
【００８４】
なお、メディア信号取得部１１Ｂ、メディア信号記憶部１２Ｂ、および特徴量抽出部１３については、フルリファレンス評価法を用いる場合にのみ必要となる構成であり、ノンリファレンス評価方法を用いる場合、これら構成は不要となる。
ユーザ体感品質推定装置１０および受信状況情報送信装置２０における他の構成については、前述の第１の実施の形態と同様であり、ここでの詳細な説明は省略する。
【００８５】
［第３の実施の形態の動作］
次に、図９を参照して、本発明の第３の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図９は、本発明の第３の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図である。
【００８６】
メディア通信システムでは、インサービスにおいて、送信端末１へ入力された所定のメディア信号をメディア信号エンコード部１Ａでデコードし（ステップ２００）、得られたメディアデータをメディアデータ送信処理部１Ｂでパケット化し、パケット網３を介して受信端末２へ送信する（ステップ２０１）。
【００８７】
一方、受信端末２は、メディアデータ受信処理部２Ａにより送信端末１からのメディアパケットを受信してメディアデータを生成し、このメディアデータをメディアデータデコード部２Ｂでデコードしメディア信号５として再生出力する（ステップ２１０）。これにより、所望のメディア信号５が受信端末２の画面表示部（図示せず）や音声処理部（図示せず）で再生され、ユーザへ提供される。
この際、受信状況情報送信装置２０は、受信状況解析部２１の特徴量抽出手段２１Ｃにより、メディアデータデコード部２Ｂでデコードされたメディア信号から、例えばＩＴＵ−Ｔ勧告P.862 ＰＥＳＱなどで利用される音声メディア信号のスペクトル量やパワー、あるいはリデュースドリファレンス（擬似二重刺激）法などで利用されるＰＳＮＲなどの特徴量を抽出して特徴量情報を得る（ステップ２１１）。
【００８８】
次に、受信状況解析部２１は、制御用パケット生成部２２により、受信状況解析部２１で得られた特徴量情報を含む制御用パケットを生成し（ステップ２１２）、この制御用パケットを制御用パケット送信部２３によりパケット網３を介して送信端末１へ送信する（ステップ２１３）。
【００８９】
一方、送信端末１のユーザ体感品質推定装置１０は、受信状況取得部１４の制御用パケット取り込み手段１４Ａにより、受信端末２からの制御用パケットを取り込み、この制御用パケットを制御用パケット解析手段１４Ｂにより解析して受信端末２からの受信状況情報、ここでは特徴量情報を抽出する（ステップ２２０）。
【００９０】
次に、ユーザ体感品質推定部１７により、公知のメディア品質客観評価技術に基づいて、受信状況取得部１４で得られた特徴量情報から、送信端末１と受信端末２とのリアルタイム系アプリケーション通信における所望のユーザ体感品質値を推定する（ステップ２２１）。
【００９１】
このようにして、順次通知される受信状況情報に応じてユーザ体感品質値をそれぞれ推定し、メディア通信システムでの当該リアルタイム系アプリケーション通信が終了した後、推定ユーザ体感品質加工部１８により、ユーザ体感品質推定部１７で得られたユーザ体感品質推定値を統計処理して例えば時系列順に並び替え、ＭＩＢなど第三者が取得できる形式に加工する（ステップ２２２）。そして、推定ユーザ体感品質データ記憶部１９へ格納し（ステップ２２３）、一連のユーザ体感品質推定動作を終了する。
【００９２】
このように、本実施の形態では、受信状況情報送信装置２０により、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報を抽出してこれを受信状況情報として送信し、この特徴量情報に基づいてユーザ体感品質推定装置１０でユーザ体感品質を推定するようにしたので、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
【００９３】
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや測定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【００９４】
また、本発明の受信状況情報送信装置２０の構成は、受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の受信端末２へ容易に実装することができる。
【００９５】
また、本実施の形態では、受信状況情報として特徴量情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
さらに、その特徴量から所望のユーザ体感品質値を直接推定でき、第１および第２の実施の形態のように劣化情報を通知する場合と比較して、劣化メディア信号を生成する必要がなくなり、ユーザ体感品質推定装置の構成を簡略化できる。
【００９６】
また、本実施の形態では、インサービスで送信端末１から受信端末２へ送信されるメディア信号を利用してユーザ体感品質を推定するようにしたので、別個に評価用メディアデータを用意する必要がない。また、ユーザが所望するメディアデータが送信されていない期間に評価用メディアデータを送信したり、ユーザ体感品質推定専用の評価用メディアデータを送信するためにユーザが所望するメディアデータの送信を中断させる必要もない。したがって、ユーザ体感品質の推定動作を行う負担を軽減でき、ユーザ体感品質を極めて容易に推定できる。
【００９７】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）の特徴量との比較を行わず、受信端末２で得られたメディア信号の特徴量のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号の特徴量との比較を行うフルリファレンス評価方法を採用してもよい。
【００９８】
この際、フルリファレンス評価方法で用いるリファレンス信号の特徴量については、メディア信号取得部１１Ｂによりメディア信号記憶部１２Ｂに格納されているメディア信号から、特徴量抽出部１３により特徴量を抽出し、この特徴量と受信状況取得部１４からの特徴量とを比較してユーザ体感品質を推定すればよい。また、前述した第１の実施の形態と同様に、送信端末１から送信したメディアデータをメディアデータ取得部１１により取得してメディアデータ記憶部１２に格納しておき、このメディアデータを特徴量抽出部１３によりデコードして元のメディア信号を生成し、このメディア信号から特徴量を抽出するようにしてもよい。
【００９９】
［第４の実施の形態］
次に、図１０を参照して、本発明の第４の実施の形態にかかるユーザ体感品質推定システムについて説明する。図１０は、本発明の第４の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図であり、前述した図８と同じまたは同等部分には同一符号をしてある。
【０１００】
本実施の形態にかかるユーザ体感品質推定システムは、前述した第１の実施の形態（図４参照）とは異なり、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報からなる受信状況情報を用いて、ユーザ体感品質推定装置１０でユーザ体感品質値を推定するようにしたものである。
また、本実施の形態にかかるユーザ体感品質推定システムの実装形態としては、前述の図３に示したように、ユーザ体感品質推定に要する各種手段を持つユーザ体感品質推定装置１０を、送信端末１に外付けして設けるとともに、受信端末２内に受信状況情報を送信端末１へ通知する受信状況情報送信装置２０を設けたものである。
【０１０１】
本実施の形態にかかるユーザ体感品質推定装置１０は、前述の図８と比較して、メディア信号記憶部１２Ｂに代えて評価用メディアデータを予め記憶する評価用メディアデータ記憶部１２Ａを備え、さらにメディア信号取得部１１Ｂに代えて、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出して送信端末１へ出力するメディアデータ出力部１１Ａを備えている。また、評価用メディアデータ記憶部１２Ａの評価用メディアデータから特徴量を抽出する特徴量抽出部１３を備えている。
【０１０２】
なお、特徴量抽出部１３については、フルリファレンス評価法を用いる場合にのみ必要となる構成であり、ノンリファレンス評価方法を用いる場合、これら構成は不要となる。
ユーザ体感品質推定装置１０および受信状況情報送信装置２０における他の構成については、前述の第３の実施の形態と同様であり、ここでの詳細な説明は省略する。
【０１０３】
［第４の実施の形態の動作］
次に、図１１を参照して、本発明の第４の実施の形態にかかるユーザ体感品質推定システムの動作について説明する。図１１は、本発明の第４の実施の形態にかかるユーザ体感品質推定システムの品質推定動作を示すシーケンス図であり、前述した図９と同じまたは同等部分には同一符号を付してある。
【０１０４】
まず、ユーザ体感品質推定装置１０は、メディアデータ出力部１１Ａより、評価用メディアデータ記憶部１２Ａから評価用メディアデータを読み出し（ステップ２３０）、送信端末１へ出力する（ステップ２３１）。
これにより、送信端末１は、通常のメディア信号４をエンコードして得られたメディアデータと同様にして、メディアデータ送信処理部１Ｂから評価用メディアデータを送信する（ステップ２３２）。
【０１０５】
この後、通常のメディアデータが評価用メディアデータに置き換えられるものの、受信端末２、受信状況情報送信装置２０、およびユーザ体感品質推定装置１０で、前述の図９と同様の処理が行われる。
したがって、受信状況情報送信装置２０により、受信端末２で受信された評価用メディア信号から特徴量情報が取得され、制御用パケットによりパケット網３を介して送信端末１へ送信される（ステップ２１０〜２１３）。
また、ユーザ体感品質推定装置１０により、受信状況情報送信装置２０からの特徴量情報に基づいてメディア通信システムで行われているリアルタイム系アプリケーション通信のユーザ体感品質が推定される。
【０１０６】
このように、本実施の形態では、受信状況情報送信装置２０により、メディア通信システムの受信端末２で受信したメディア信号の特徴量を示す特徴量情報を抽出してこれを受信状況情報として送信し、この特徴量情報に基づいてユーザ体感品質推定装置１０でユーザ体感品質を推定するようにしたので、各対地に受信メディア信号の収録装置を設置することなく、リアルタイム系アプリケーション通信のユーザ体感品質値をインサービスで推定できる。
【０１０７】
これにより、各対地に受信メディア信号の収録装置を設置する必要がある従来のユーザ体感品質推定方法と比較して、高いスケーラビリティや測定容易性が得られ、多くの通信端末あるいは広い範囲を対象として高精度のユーザ体感品質推定値を取得でき、パケット網の品質設計や品質管理を行う場合に極めて有用である。
【０１０８】
また、本発明の受信状況情報送信装置２０の構成は、受信端末２が有するハードウェアを利用して、例えばリアルタイム系アプリケーション用プログラムに付属するソフトウェアにより実現できことから、任意の受信端末２へ容易に実装することができる。
【０１０９】
また、本実施の形態では、受信状況情報として特徴量情報を通知するようにしたので、受信側のメディア信号をユーザ体感品質推定装置１０へ通知する場合と比較して、受信状況情報のデータ量を大幅に削減でき、ユーザ体感品質の推定動作に起因するネットワーク負荷を大場に削減できる。
さらに、その特徴量から所望のユーザ体感品質値を直接推定でき、第１および第２の実施の形態のように劣化情報を通知する場合と比較して、劣化メディア信号を生成する必要がなくなり、ユーザ体感品質推定装置の構成を簡略化できる。
【０１１０】
また、本実施の形態では、ユーザ体感品質の推定専用の評価用メディアデータを用いるようにしたので、ユーザが所望するメディアデータが送信されていない期間や当該メディアデータの送信を一時中断して評価用メディアデータを送信する必要があるものの、利用者が所望するメディアデータとは異なり、例えばメディアデータの内容に偏りのない、リアルタイム系アプリケーション通信のユーザ体感品質値を推定するのに適したメディアデータを用いることができ、より正確なユーザ体感品質値を推定できる。
【０１１１】
また、本実施の形態では、ユーザ体感品質推定装置１０のユーザ体感品質推定部１７により、リファレンス信号（原信号）の特徴量との比較を行わず、受信端末２で得られたメディア信号の特徴量のみを用いるノンリファレンス評価方法に基づきユーザ体感品質を推定する場合を例として説明したが、これに限定されるものではなく、リファレンス信号の特徴量との比較を行うフルリファレンス評価方法を採用してもよい。
【０１１２】
この際、フルリファレンス評価方法で用いるリファレンス信号の特徴量については、評価メディアデータ記憶部１２Ａに格納されている評価メディアデータを特徴量抽出部１３によりデコードして評価メディア信号を生成し、この評価メディア信号から特徴量を抽出するようにしてもよい。
なお、評価メディアデータ記憶部１２Ａに、評価メディアデータに対応する評価メディア信号を予め格納しておき、特徴量抽出部１３によりこの評価メディア信号から特徴量を抽出するようにしてもよい。
【０１１３】
［実施の形態の拡張］
以上の各実施の形態において、各ユーザ体感品質値を推定する推定処理間隔としては、例えば１５秒間隔など、メディア品質客観評価技術でユーザ体感品質の推定精度が高いとされている間隔、もしくは主観品質評価法（ITU-T勧告P.800,P.830）で示される間隔で行うようにしてもよい。
さらに、ユーザ体感品質推定値の統計処理では、上記推定処理間隔で推定した各ユーザ体感品質値の平均値や標準偏差を算出するようにしてもよい。
【０１１４】
なお、第１および第３の実施の形態では、ユーザ体感品質推定装置１０を送信端末１に外付けで設置した場合を例として説明したが、ユーザ体感品質推定装置１０を送信端末１内に実装してもよい。同様に、第２および第４の実施の形態では、ユーザ体感品質推定装置１０を送信端末１内に実装した場合を例として説明したが、ユーザ体感品質推定装置１０を送信端末１に外付けで設置してもよい。
また、各実施の形態では、受信状況情報送信装置２０を受信端末２内に実装した場合を例として説明したが、受信状況情報送信装置２０を受信端末２に外付けで設置してもよい。
【図面の簡単な説明】
【０１１５】
【図１】リアルタイム系アプリケーションに関するインサービスでのユーザ体感品質推定方法の分類を示す説明図である。
【図２】本発明におけるアプリケーション組込型のユーザ体感品質推定方法を示す説明図である。
【図３】本発明における測定器型のユーザ体感品質推定方法を示す説明図である。
【図４】本発明の第１の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図５】本発明の第１の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【図６】本発明の第２の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図７】本発明の第２の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【図８】本発明の第３の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図９】本発明の第３の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【図１０】本発明の第４の実施の形態にかかるユーザ体感品質推定システムの構成を示すブロック図である。
【図１１】本発明の第４の実施の形態にかかるユーザ体感品質推定システムのユーザ体感品質推定動作を示すシーケンス図である。
【符号の説明】
【０１１６】
１…送信端末、１Ａ…メディア信号エンコード部、１Ｂ…メディアデータ送信処理部、２…受信端末、２Ａ…メディアデータ受信処理部、２Ｂ…メディアデータデコード部、３…パケット網、４…メディア信号（送信側）、５…メディア信号（受信側）、６…中継装置、１０…ユーザ体感品質推定装置、１１…メディアデータ取得部、１１Ａ…メディアデータ出力部、１１Ｂ…メディア信号取得部、１２…メディアデータ記憶部、１２Ａ…評価用メディアデータ記憶部、１２Ｂ…メディア信号記憶部、１３…特徴量抽出部、１４…受信状況取得部、１４Ａ…制御用パケット取り込み手段、１４Ｂ…制御用パケット解析手段、１５…劣化メディア信号生成部、１５Ａ…メディアデータ加工手段、１５Ｂ…劣化メディアデータデコード手段、１６…劣化メディア信号記憶部、１７…ユーザ体感品質推定部、１８…推定ユーザ体感品質加工部、１９…推定ユーザ体感品質データ記憶部、２０…受信状況情報送信装置、２１…受信状況解析部、２１Ａ…劣化状況解析手段、２１Ｂ…コーデック情報取得手段、２１Ｃ…特徴量抽出手段、２２…制御用パケット生成部、２３…制御用パケット送信部。
【特許請求の範囲】
【請求項１】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムであって、
前記受信端末側に設けられ、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、この受信状況情報を含む制御用パケットを送信する制御用パケット送信部とを有する受信状況情報送信装置と、
前記送信端末側に設けられ、前記パケット網を介して受信した前記受信状況情報送信装置からの制御用パケットから前記受信状況情報を取得する受信状況取得部と、この受信状況情報に基づき前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部とを有するユーザ体感品質推定装置と
を備えることを特徴とするユーザ体感品質推定システム。
【請求項２】
請求項１に記載のユーザ体感品質推定システムにおいて、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、
前記ユーザ体感品質推定装置は、前記受信状況取得部により受信状況情報として得られた劣化情報に基づいて前記送信端末から送信されたメディアデータを加工することにより前記受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに有し、
前記ユーザ体感品質推定部は、前記劣化メディア信号に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定システム。
【請求項３】
請求項２に記載のユーザ体感品質推定システムにおいて、
前記ユーザ体感品質推定部は、前記送信端末から送信されたメディアデータのメディア信号と前記劣化メディア信号とを比較することにより前記ユーザ体感品質値を推定することを特徴とするユーザ体感品質推定システム。
【請求項４】
請求項１に記載のユーザ体感品質推定システムにおいて、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、
前記ユーザ体感品質推定部は、前記受信状況取得部により受信状況情報として得られた特徴量情報に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定システム。
【請求項５】
請求項４に記載のユーザ体感品質推定システムにおいて、
前記ユーザ体感品質推定装置は、前記送信端末から送信されたメディアデータのメディア信号からその特徴量を示す特徴量情報を取得する特徴量抽出部をさらに有し、
前記ユーザ体感品質推定部は、前記特徴量抽出部で取得された特徴量情報と前記受信状況取得部で取得された特徴量情報とを比較することにより前記ユーザ体感品質値を推定することを特徴とするユーザ体感品質推定システム。
【請求項６】
請求項１に記載のユーザ体感品質推定システムにおいて、
前記ユーザ体感品質推定装置は、所定の評価用メディアデータを記憶する記憶部と、前記送信端末から送信するメディアデータとして前記評価用メディアデータを前記送信端末へ出力するメディアデータ出力部とをさらに有することを特徴とするユーザ体感品質推定システム。
【請求項７】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定方法であって、
前記受信端末側に設けられた受信状況情報送信装置により、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析ステップと、
前記受信状況情報送信装置により、前記受信状況情報を含む制御用パケットを送信する制御用パケット送信ステップと、
前記送信端末側に設けられたユーザ体感品質推定装置により、前記パケット網を介して受信した前記受信状況情報送信装置からの制御用パケットから前記受信状況情報を取得する受信状況取得ステップと、
前記ユーザ体感品質推定装置により、この受信状況情報に基づき前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定ステップと
を備えることを特徴とするユーザ体感品質推定方法。
【請求項８】
請求項７に記載のユーザ体感品質推定方法において、
前記受信状況解析ステップは、前記受信状況情報として前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、
前記ユーザ体感品質推定装置により、前記受信状況情報に含まれる劣化情報に基づいて前記送信端末から送信されたメディアデータを加工することにより前記受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成ステップをさらに備え、
前記ユーザ体感品質推定ステップは、前記劣化メディア信号に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定方法。
【請求項９】
請求項７に記載のユーザ体感品質推定方法において、
前記受信状況解析ステップは、前記受信状況情報として前記受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、
前記ユーザ体感品質推定ステップは、前記受信状況情報に含まれる特徴量情報に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定方法。
【請求項１０】
請求項７に記載のユーザ体感品質推定方法において、
前記ユーザ体感品質推定装置により、所定の評価用メディアデータを記憶する記憶ステップと、
前記ユーザ体感品質推定装置により、前記送信端末側から送信するメディアデータとして前記評価用メディアデータを前記送信端末へ出力するメディアデータ出力ステップと
をさらに備えることを特徴とするユーザ体感品質推定方法。
【請求項１１】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、前記送信端末側に設けられるユーザ体感品質推定装置であって、
前記受信端末側に設けられた受信端末状況情報送信装置から送信された、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を含む制御用パケットを前記パケット網を介して受信して、その制御用パケットから前記受信状況情報を取得する受信状況取得部と、
この受信状況情報に基づき前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部と
を備えることを特徴とするユーザ体感品質推定装置。
【請求項１２】
請求項１１に記載のユーザ体感品質推定装置において、
前記受信状況取得部により得られた前記受信状況情報である、前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報に基づいて、前記送信端末から送信されたメディアデータを加工することにより前記受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに備え、
前記ユーザ体感品質推定部は、前記劣化メディア信号に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定装置。
【請求項１３】
請求項１１に記載のユーザ体感品質推定装置において、
前記ユーザ体感品質推定部は、前記受信状況取得部により得られた受信状況情報である、前記受信端末で得られたメディア信号の特徴量を示す特徴量情報に基づき、前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定装置。
【請求項１４】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、前記受信端末側に設けられる受信状況情報送信装置であって、
前記送信端末側に設けられたユーザ体感品質推定装置で前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定する際に用いられ、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、
この受信状況情報を含む制御用パケットを送信する制御用パケット送信部と
を備えることを特徴とする受信状況情報送信装置。
【請求項１５】
請求項１４に記載の受信状況情報送信装置において、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得することを特徴とする受信状況情報送信装置。
【請求項１６】
請求項１４に記載の受信状況情報送信装置において、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得することを特徴とする受信状況情報送信装置。
【請求項１７】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの送信端末であって、
請求項１１に記載のユーザ体感品質推定装置を備えることを特徴とする送信端末。
【請求項１８】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの受信端末であって、
請求項１４に記載の受信状況情報送信装置を備えることを特徴とする受信端末。
【請求項１】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムであって、
前記受信端末側に設けられ、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、この受信状況情報を含む制御用パケットを送信する制御用パケット送信部とを有する受信状況情報送信装置と、
前記送信端末側に設けられ、前記パケット網を介して受信した前記受信状況情報送信装置からの制御用パケットから前記受信状況情報を取得する受信状況取得部と、この受信状況情報に基づき前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部とを有するユーザ体感品質推定装置と
を備えることを特徴とするユーザ体感品質推定システム。
【請求項２】
請求項１に記載のユーザ体感品質推定システムにおいて、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、
前記ユーザ体感品質推定装置は、前記受信状況取得部により受信状況情報として得られた劣化情報に基づいて前記送信端末から送信されたメディアデータを加工することにより前記受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに有し、
前記ユーザ体感品質推定部は、前記劣化メディア信号に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定システム。
【請求項３】
請求項２に記載のユーザ体感品質推定システムにおいて、
前記ユーザ体感品質推定部は、前記送信端末から送信されたメディアデータのメディア信号と前記劣化メディア信号とを比較することにより前記ユーザ体感品質値を推定することを特徴とするユーザ体感品質推定システム。
【請求項４】
請求項１に記載のユーザ体感品質推定システムにおいて、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、
前記ユーザ体感品質推定部は、前記受信状況取得部により受信状況情報として得られた特徴量情報に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定システム。
【請求項５】
請求項４に記載のユーザ体感品質推定システムにおいて、
前記ユーザ体感品質推定装置は、前記送信端末から送信されたメディアデータのメディア信号からその特徴量を示す特徴量情報を取得する特徴量抽出部をさらに有し、
前記ユーザ体感品質推定部は、前記特徴量抽出部で取得された特徴量情報と前記受信状況取得部で取得された特徴量情報とを比較することにより前記ユーザ体感品質値を推定することを特徴とするユーザ体感品質推定システム。
【請求項６】
請求項１に記載のユーザ体感品質推定システムにおいて、
前記ユーザ体感品質推定装置は、所定の評価用メディアデータを記憶する記憶部と、前記送信端末から送信するメディアデータとして前記評価用メディアデータを前記送信端末へ出力するメディアデータ出力部とをさらに有することを特徴とするユーザ体感品質推定システム。
【請求項７】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定方法であって、
前記受信端末側に設けられた受信状況情報送信装置により、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析ステップと、
前記受信状況情報送信装置により、前記受信状況情報を含む制御用パケットを送信する制御用パケット送信ステップと、
前記送信端末側に設けられたユーザ体感品質推定装置により、前記パケット網を介して受信した前記受信状況情報送信装置からの制御用パケットから前記受信状況情報を取得する受信状況取得ステップと、
前記ユーザ体感品質推定装置により、この受信状況情報に基づき前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定ステップと
を備えることを特徴とするユーザ体感品質推定方法。
【請求項８】
請求項７に記載のユーザ体感品質推定方法において、
前記受信状況解析ステップは、前記受信状況情報として前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得し、
前記ユーザ体感品質推定装置により、前記受信状況情報に含まれる劣化情報に基づいて前記送信端末から送信されたメディアデータを加工することにより前記受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成ステップをさらに備え、
前記ユーザ体感品質推定ステップは、前記劣化メディア信号に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定方法。
【請求項９】
請求項７に記載のユーザ体感品質推定方法において、
前記受信状況解析ステップは、前記受信状況情報として前記受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得し、
前記ユーザ体感品質推定ステップは、前記受信状況情報に含まれる特徴量情報に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定方法。
【請求項１０】
請求項７に記載のユーザ体感品質推定方法において、
前記ユーザ体感品質推定装置により、所定の評価用メディアデータを記憶する記憶ステップと、
前記ユーザ体感品質推定装置により、前記送信端末側から送信するメディアデータとして前記評価用メディアデータを前記送信端末へ出力するメディアデータ出力ステップと
をさらに備えることを特徴とするユーザ体感品質推定方法。
【請求項１１】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、前記送信端末側に設けられるユーザ体感品質推定装置であって、
前記受信端末側に設けられた受信端末状況情報送信装置から送信された、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を含む制御用パケットを前記パケット網を介して受信して、その制御用パケットから前記受信状況情報を取得する受信状況取得部と、
この受信状況情報に基づき前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定するユーザ体感品質推定部と
を備えることを特徴とするユーザ体感品質推定装置。
【請求項１２】
請求項１１に記載のユーザ体感品質推定装置において、
前記受信状況取得部により得られた前記受信状況情報である、前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報に基づいて、前記送信端末から送信されたメディアデータを加工することにより前記受信端末で再生されたメディア信号に対応する劣化メディア信号を復元する劣化メディア信号生成部をさらに備え、
前記ユーザ体感品質推定部は、前記劣化メディア信号に基づき前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定装置。
【請求項１３】
請求項１１に記載のユーザ体感品質推定装置において、
前記ユーザ体感品質推定部は、前記受信状況取得部により得られた受信状況情報である、前記受信端末で得られたメディア信号の特徴量を示す特徴量情報に基づき、前記ユーザ体感品質値を推定する
ことを特徴とするユーザ体感品質推定装置。
【請求項１４】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末との間で行われるリアルタイム系アプリケーション通信について、当該通信を利用するユーザの主観的な品質評価を示すユーザ体感品質値を推定するユーザ体感品質推定システムで、前記受信端末側に設けられる受信状況情報送信装置であって、
前記送信端末側に設けられたユーザ体感品質推定装置で前記リアルタイム系アプリケーション通信に関するユーザ体感品質値を推定する際に用いられ、前記受信端末で得られたメディア信号に関する受信状況を示す受信状況情報を取得する受信状況解析部と、
この受信状況情報を含む制御用パケットを送信する制御用パケット送信部と
を備えることを特徴とする受信状況情報送信装置。
【請求項１５】
請求項１４に記載の受信状況情報送信装置において、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディアデータからその劣化状況を示す劣化情報を取得することを特徴とする受信状況情報送信装置。
【請求項１６】
請求項１４に記載の受信状況情報送信装置において、
前記受信状況解析部は、前記受信状況情報として前記受信端末で得られたメディア信号からその特徴量を示す特徴量情報を取得することを特徴とする受信状況情報送信装置。
【請求項１７】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの送信端末であって、
請求項１１に記載のユーザ体感品質推定装置を備えることを特徴とする送信端末。
【請求項１８】
所望のメディア信号をエンコードして得たメディアデータを送信する送信端末と、パケット網を介して受信したメディアデータをデコードして所望のメディア信号を再生出力する受信端末とからなり、これら送信端末と受信端末との間でリアルタイム系アプリケーション通信を行うメディア通信システムの受信端末であって、
請求項１４に記載の受信状況情報送信装置を備えることを特徴とする受信端末。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２００６−１５７２２３（Ｐ２００６−１５７２２３Ａ）
【公開日】平成１８年６月１５日（２００６．６．１５）
【国際特許分類】
【出願番号】特願２００４−３４１９２９（Ｐ２００４−３４１９２９）
【出願日】平成１６年１１月２６日（２００４．１１．２６）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
【公開日】平成１８年６月１５日（２００６．６．１５）
【国際特許分類】
【出願日】平成１６年１１月２６日（２００４．１１．２６）
【出願人】（０００００４２２６）日本電信電話株式会社 (13,992)
【Ｆターム（参考）】
[ Back to top ]