音評価システム
【課題】音評価システムにおいて、ユーザを含む複数の評価者による客観的評価に近い評価結果を得る。
【解決手段】ユーザ端末１４（１）では、実歌唱信号と基準歌唱信号とで音響特徴を分析・比較してピッチずれ等の比較結果を得る。実歌唱信号についてユーザ等の評価者に採点を行なわせる。比較結果、採点結果等のデータを通信ネットワーク１０を介してサーバ１８に送る。１４（２）等の端末についても同様とする。サーバ１８は、曲毎に複数のユーザ端末からのデータを記憶する記憶部を有する。サーバ１８では、あるユーザ端末における比較結果に基づいて評価処理により第１の採点結果を求め、ユーザ端末に表示させる。この際に、ユーザ端末の歌と同一の曲に関する複数の採点結果に基づいて目標採点結果を求め、この目標採点結果に近づくように評価処理を修正して第２の採点結果を求め、ユーザ端末に表示させる。
【解決手段】ユーザ端末１４（１）では、実歌唱信号と基準歌唱信号とで音響特徴を分析・比較してピッチずれ等の比較結果を得る。実歌唱信号についてユーザ等の評価者に採点を行なわせる。比較結果、採点結果等のデータを通信ネットワーク１０を介してサーバ１８に送る。１４（２）等の端末についても同様とする。サーバ１８は、曲毎に複数のユーザ端末からのデータを記憶する記憶部を有する。サーバ１８では、あるユーザ端末における比較結果に基づいて評価処理により第１の採点結果を求め、ユーザ端末に表示させる。この際に、ユーザ端末の歌と同一の曲に関する複数の採点結果に基づいて目標採点結果を求め、この目標採点結果に近づくように評価処理を修正して第２の採点結果を求め、ユーザ端末に表示させる。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、通信カラオケシステム等に用いるに好適な音評価システムの改良に関するものである。
【背景技術】
【０００２】
従来、音評価システムとしては、入力音声から抽出した音響特徴を事前保存モデルと比較すると共にその比較結果をユーザ発音の審査に使用する構成にしたものが知られている（例えば、特許文献１参照）。
【０００３】
また、音声認識システムとしては、音声分析及び音韻抽出までの処理をクライアントで行なうと共に残りの言語レベルの認識処理をサーバで行なうことによりクライアントの処理負荷の低減を図ったものが知られている（例えば、特許文献２参照）。
【特許文献１】特表２００２−５１５１３６
【特許文献２】特開２００３−４４０９１
【発明の開示】
【発明が解決しようとする課題】
【０００４】
一般に、歌唱、楽器演奏等に対する評価は、歌い手や演奏者等のユーザの主観的な評価に依存する。例えば、カラオケ等の評価処理において、基準歌唱に近いからといって高い点数を出しても、ユーザの主観的評価と一致するとは限らない。また、ユーザ仲間では、サビがうまければ高得点、面白いと感じれば高得点ということもある。
【０００５】
上記した従来の音評価システムによると、正しいとされる発音が予め判明していることが前提になっており、ユーザの嗜好や時代性等による評価基準の変化に追従できないという問題点がある。
【０００６】
また、上記した従来の音声認識システムにおいても、音声判定基準は固定されており、ユーザの主観的評価との乖離があった場合でも補正できないという問題点がある。
【０００７】
この発明の目的は、ユーザを含む複数の評価者による客観的評価に近い評価結果を得ることができる新規な音評価システムを提供することにある。
【０００８】
この発明の他の目的は、評価者の属する国等の評価区分を指定可能であると共に指定に係る評価区分内の複数の評価者による客観的評価に近い評価結果を得ることができる新規な音評価システムを提供することにある。
【課題を解決するための手段】
【０００９】
この発明に係る第１の音評価システムは、
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データを記憶する記憶手段と、
前記サーバに設けられ、前記記憶手段に記憶された複数の評価結果データに基づいて目標評価結果を決定する決定手段と、
前記サーバ設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価結果の入力に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にしたものである。
【００１０】
第１の音評価システムによれば、サーバの記憶手段には、各ユーザ端末の入力手段からの評価結果データ（ユーザ等の評価者による主観的評価結果を表わすデータ）が記憶される。例えば、多数のユーザ端末が国内に分散配置されているものとすると、記憶手段には、多数のユーザの主観的評価結果をそれぞれ表わす多数の評価結果データが記憶されることになる。決定手段は、記憶手段に記憶された複数（又は多数）の評価結果データに基づいて（例えば平均処理するなどして）目標評価結果を決定する。この目標評価結果は、複数（又は多数）の主観的評価結果が反映されたもので、客観的評価結果といえる。修正手段は、目標評価結果に近づくように評価処理を修正して評価手段から第２の評価結果を得る。この第２の評価結果は、複数（又は多数）の評価者による客観的評価結果に近いもので、評価結果を入力したユーザ端末の表示手段で表示される。従って、ユーザは、ユーザ端末で評価結果を入力することで第２の評価結果（ユーザ主観も含めた客観的評価結果に近い評価結果）を知ることができ、しかも自己の主観的評価結果が第２の評価結果からどの程度乖離しているか知ることができる。
【００１１】
なお、入力音の評価結果を入力したユーザ端末の表示手段には、第２の評価結果の表示に関連して第１の評価結果（機械的評価結果）を表示するようにしてもよい。このようにすると、ユーザは、第１及び第２の評価結果を比較することで機械的評価結果（第１の評価結果）が客観的評価に近い評価結果（第２の評価結果）によりどの程度修正されたか知ることができる。
【００１２】
この発明に係る第２の音評価システムは、
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する第１の入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち前記入力音の評価者の属する評価区分を入力する第２の入力手段であって、入力に係る評価区分を表わす評価区分データを送出するものと、
前記サーバに設けられ、各ユーザ端末の第１の入力手段からの評価結果データと、該ユーザ端末の第２の入力手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にしたものである。
【００１３】
第２の音評価システムによれば、各ユーザ端末毎に第２の入力手段を設け、所定の複数の評価区分（例えば国別評価区分）のうち入力音の評価者の属する評価区分（例えば日本）を入力して入力に係る評価区分を表わす評価区分データを送出し、第１の入力手段からの評価結果データと第２の入力手段からの評価区分データとを組にして記憶手段に記憶させるようにしたので、記憶手段には、評価結果データ及び評価区分データの組が多数記憶されることになる。各ユーザ端末に設けられた指定手段は、複数の評価区分のうち入力音に関して評価をなすべき所望の評価区分を指定するもので、記憶手段の記憶データを利用するために使用される。
【００１４】
決定手段は、記憶手段に記憶された多数の評価区分データのうち指定手段での指定に係る評価区分（例えば日本）と同一の評価区分を表わす複数の評価区分データをサーチすると共に該複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて目標評価結果を決定する。この目標評価結果は、指定に係る評価区分（例えば日本）内の複数（又は多数）の主観的評価結果が反映されたもので、客観的評価結果といえる。修正手段は、目標評価結果に近づくように評価処理を修正して評価手段から第２の評価結果を得る。この第２の評価結果は、指定に係る評価区分内の複数（又は多数）の評価者による客観的評価に近いもので、評価区分を指定したユーザ端末の表示手段で表示される。従って、ユーザは、ユーザ端末で評価区分を指定することで第２の評価結果（指定に係る評価区分内のユーザ主観を含めた客観的評価に近い評価結果）を知ることができ、しかも自己の主観的評価が客観的評価に近い評価結果（第２の評価結果）からどの程度乖離しているか知ることができる。
【００１５】
その上、指定手段では入力音に関して評価をなすべき評価区分を適宜変更できるので、評価区分を例えば日本から韓国に変更するなどして他の評価区分内における客観的評価に近い評価結果（第２の評価結果）を知ることができる。また、評価者の評価区分及び評価をなすべき評価区分は、いずれも国別に限らず、地方別、年齢層別等にしてもよく、このようにすれば一層多様な客観的評価に近い評価結果を得ることができる。
【００１６】
この発明に係る第３の音評価システムは、
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち該ユーザ端末に対応する評価区分を表わす評価区分データを生成する生成手段と、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データと、該ユーザ端末の生成手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にしたものである。
【００１７】
第３の音評価システムは、前述した第２の音評価システムにおいて、第２の入力手段の代りに生成手段を設けたものに相当する。生成手段は、各ユーザ端末に設けられ、所定の複数の評価区分のうち該ユーザ端末に対応する評価区分を表わす評価区分データを生成する。記憶手段では、各ユーザ端末の入力手段からの評価結果データと、該ユーザ端末の生成手段からの評価区分データとを組にして記憶する。その他の動作は、第２の音評価システムに関して前述したと同様である。
【００１８】
第３の音評価システムによれば、ユーザは、評価区分を入力しなくてよい。例えば、ユーザ端末の設置場所が固定されていたり、ユーザの年齢層等の属性が予め判明していたりした場合、ユーザ端末毎に評価区分を対応付けすることで該ユーザ端末に対応する評価区分データを自動的に生成することができ、ユーザが入力するのは、入力音の評価結果のみとなる。あるユーザ端末にてユーザが指定手段により所望の評価区分を指定すると、該ユーザ端末の表示手段には第２の評価結果（指定に係る評価区分のユーザ主観を含めた客観的評価に近い評価結果）が表示され、ユーザは、第２の評価結果を知ることができる。
【００１９】
なお、第２又は第３の音評価システムにおいて、評価区分を指定したユーザ端末の表示手段には、第２の評価結果の表示に関連して第１の評価結果（機械的評価結果）を表示するようにしてもよい。このようにすると、ユーザは、第１及び第２の評価結果を比較することで機械的評価結果（第１の評価結果）が指定に係る区分内の客観的評価結果（第２の評価結果）によりどの程度修正されたか知ることができる。
【発明の効果】
【００２０】
この発明によれば、ユーザ等の複数の評価者の主観的評価を通信ネットワークを介して集計すると共に集計結果に基づいて目標評価結果を決定し、この目標評価結果に近づくように評価処理を修正してユーザの主観を含む客観的評価に近い評価結果を得るようにしたので、ユーザの嗜好や時代性等による評価基準の変化に追従できる効果が得られる。また、多くの評価者の評価結果が反映された評価結果を見ることで、ユーザ自身の主観的評価の客観性を高める学習効果も期待できる。
【００２１】
その上、評価をなすべき複数の評価区分のうち任意の評価区分を指定して該評価区分内の客観的評価に近い評価結果が得られるようにしたので、ユーザが多様な評価結果を利用可能となる効果も得られる。
【発明を実施するための最良の形態】
【００２２】
図１は、この発明の一実施形態に係る音評価システムの構成を示すものである。この音評価システムは、例えば通信カラオケシステムに用いることができる。
【００２３】
図１に示す音評価システムにおいて、通信ネットワーク１０には、通信インターフェース１２（１）〜１２（Ｎ）（Ｎは２以上の整数）をそれぞれ介してユーザ端末１４（１）〜１４（Ｎ）が接続されると共に、通信インターフェース１６を介してサーバ１８が接続されている。通信ネットワーク１０は、例えばＬＡＮ（ローカル・エリア・ネットワーク）、インターネット又は電話回線等からなり、１４（１）等の各ユーザ端末は、一例として通信カラオケ装置からなる。ユーザ端末１４（１）〜１４（Ｎ）の構成は、互いに同一であり、代表としてユーザ端末１４（１）の一構成例を図２に示す。
【００２４】
図２に示すユーザ端末１４（１）において、基準音声データ記憶部２０は、複数曲のうちの各曲毎に基準歌唱音データからなる基準音声データを記憶したもので、基準音声データ記憶部２０から読出されるべき基準音声データは、入力操作部３０からの曲選択データＳ１により選択されるようになっている。基準音声データ記憶部２０から読出された基準音声データＳ２は、音響特徴分析部２２及び音声再生・記録部２４に供給される。
【００２５】
音声再生・記録部２４は、基準音声データＳ２に基づいて基準音声信号として基準歌唱音信号（アナログ信号）を再生し、この信号は、スピーカＳＰにより基準歌唱音に変換される。ユーザは、自分で歌う前に基準歌唱音を聴くことができる。音声再生・記録部２４は、マイクロホンＭＣを介して入力される実歌唱音信号からなる音声信号をディジタル音声データに変換して磁気ディスク等に記録可能なもので、記録した実歌唱音データは、基準音声データに関して前述したと同様にしてスピーカＳＰを介して実歌唱音として再生可能である。ユーザは、自分で歌った実歌唱音を再生して聴取することにより採点を行なうことができる。マイクロホンＭＣから入力された実歌唱音信号に基づく実歌唱音データ（磁気ディスク等から読出したものでも可）からなる音声データＳ３は、音響特徴分析部２６に供給される。
【００２６】
音響特徴分析部２２は、基準歌唱音データからなる基準音声データＳ２に基づいて基準音声信号の音響特徴を分析し、抽出するもので、抽出に係る音響特徴を表わす分析データＳ４を分析データ比較部２８に一方の比較入力として供給する。音響特徴分析部２６は、ユーザの実歌唱音データからなる音声データＳ３に基づいてユーザの実歌唱音の音響特徴を分析し、抽出するもので、抽出に係る音響特徴を表わす分析データＳ５を分析データ比較部２８に他方の比較入力として供給する。音響特徴分析部２２，２６のいずれにおいても、音響特徴としては、ピッチ（音高）、発音タイミング、音量、音色（例えば周波数スペクトル又はフォルマント）等の経時的変化を分析し、抽出することができる。分析データ比較部２８では、分析データＳ４，Ｓ５を互いに比較して両者の差異を表わす比較結果データ（例えば差分データ）Ｓ６を送出する。
【００２７】
入力操作部３０は、曲選択データＳ１、採点結果データＳ７等を発生するもので、その一構成例を図３に示す。入力操作部３０において、テンキー部Ｋ１０には、数字１〜１０に対応した１０個又はそれ以上の数のキーが設けられている。選曲スイッチＫ１１は、歌唱者が所望の曲を選択する際に操作されるものであり、採点スイッチＫ１２は、入力した歌唱音について歌唱者又は同伴者等の評価者が採点を行なう（採点結果を入力する）際に操作されものである。
【００２８】
図２に示す表示部３２は、例えば液晶表示パネル等の表示パネルを有するものである。表示部３２には、選曲スイッチＫ１１の押圧に応じて複数の候補曲の曲番号及び曲名が表示される。この状態で、歌唱者がテンキー部Ｋ１０でのキー操作により所望の曲の曲番号を指定すると、指定に係る曲番号を表わす曲選択データＳ１が基準音声データ記憶部２０に供給される。そして、曲選択データＳ１により選択された基準歌唱の再生が開始される。歌い終わって採点を行なう際には、テンキー部Ｋ１０でのキー操作により所望の点数を入力すると、採点結果を表わす採点結果データＳ７が送出される。
【００２９】
図２に示す端末データ作成部３４は、サーバ１８に送信すべき端末データＳ８を作成するものである。端末データＳ８としては、図４に示すように１回の歌唱につき第１端末データＡ１１及び第２端末データＡ１２の２つのデータが作成される。第１端末データＡ１１は、識別情報Ｓ０及び比較結果データＳ６を含むものである。識別情報Ｓ０は、ユーザ端末番号及び曲選択データＳ１からなっている。第２端末データＡ１２は、第１端末データＡ１１と同じ識別情報Ｓ０と、採点結果データＳ７とからなっている。
【００３０】
図４において、Ａ２１…Ａｎ１（ｎは２より大きい整数）は、いずれも第１端末データＡ１１と同様のフォーマットを有する第１端末データであり、Ａ２２…Ａｎ２は、いずれも第２端末データＡ１２と同様のフォーマットを有する第２端末データである。第１端末データＡ１１及び第２端末データＡ１２が図２のユーザ端末１４（１）から送出されたものとすると、第１端末データＡ２１及び第２端末データＡ２２は、ユーザ端末１４（１）から送出されることもあれば、他のユーザ端末（例えば図１の１４（Ｎ））から送出されることもある。このことは、Ａｎ１，Ａｎ２等の他の第１，第２端末データについても同様である。第１端末データＡ１１〜Ａｎ１及び第２端末データＡ１２〜Ａｎ２は、いずれもサーバ１８に送信される。
【００３１】
図５は、サーバ１８の一構成例を示すものである。サーバ１８は、評価学習部３８Ａ及び評価部４４Ａを備え、評価学習部３８Ａには、端末データ記憶部４０Ａ及び修正情報作成部４２Ａが設けられている。端末データ記憶部４０Ａには、曲毎に図４に示した第１及び第２端末データが記憶される。曲は、図４に示した識別情報Ｓ０中の曲選択データＳ１により識別可能である。
【００３２】
評価部４４Ａでは、端末データ記憶部４０Ａに記憶された第１端末データ中の比較結果データＳ６に基づいて評価処理により第１の採点結果（機械的採点結果）が求められる。評価処理としては、（イ）比較結果データが表わす個々の比較結果パラメータ（ピッチ、発音タイミング、音量、音色等の差の時間的変化（積算値又は平均値））を多項式の多数項にそれぞれ割り当てて採点結果を算出する方式、（ロ）入力層に比較結果データを入力して出力層から採点結果を導出するニューラルネット方式、（ハ）比較結果パラメータ数分のパラメータ−得点変換テーブルを用い、これらの変換テーブルから得られる得点に基づいて採点結果を算出する方式等が公知であり、いずれかの方式を用いて自動的に採点を行なうことができる。
【００３３】
評価部４４Ａからは、第１の採点結果を表わす採点結果データＳ９が送出され、比較結果データＳ６の送信があったユーザ端末に送信される。ここで、比較結果データＳ６の送信があったユーザ端末は、例えば図４の第１端末データＡ１１の識別情報Ｓ０中のユーザ端末番号により識別可能である。一例として、ユーザ端末１４（１）において曲を選択し、歌ったのであれば、ユーザ端末１４（１）の表示部３２に採点結果データＳ９が供給され、表示部３２に第１の採点結果（機械的採点結果）が表示される。
【００３４】
次に、ユーザ端末１４（１）において、ユーザ等の評価者が記録に係る歌唱を聴いて入力操作部３０で採点結果を入力すると、その採点結果を表わす採点結果データＳ７を含む第２端末データ（例えば図４のＡ１２）が端末データ記憶部４０Ａに記憶される。これと同様にして、端末データ記憶部４０Ａには、ユーザ端末１４（１）からの複数回の採点結果やユーザ端末１４（２）〜１４（Ｎ）からの１又は複数回の採点結果が記憶される。修正情報作成部４２Ａは、ある曲の採点結果データＳ７が端末データ記憶部４０Ａに記憶されると、該採点結果データＳ７を含めて該曲に関してそれまで記憶されている複数（又は多数）の採点結果データＳ７に基づいて例えば該複数（又は多数）の採点結果データＳ７の表わす採点結果を平均するなどして目標採点結果を求める。ここで、複数の採点結果データＳ７が同一曲に関するものか否かは、第２端末データの識別情報Ｓ０中の曲番号を参照すれば判明する。修正情報作成部４２Ａは、目標採点結果に近づくように評価部４４Ａの評価処理を修正するための修正情報Ｓ１０を作成して評価部４４Ａに供給する。修正情報Ｓ１０としては、前述した（イ）の多項式による算出方式を用いる場合は、多項式の多数項の係数を表わす情報を作成し、前述した（ロ）のニューラルネット方式を用いる場合は、ニューラルネットの構成情報と各ノードのパラメータセットとを作成し、前述した（ハ）の変換テーブル方式を用いる場合は、既存の変換テーブルの代りに用いるべき新たな変換テーブルを作成する。
【００３５】
評価部４４Ａでは、修正情報作成部４２Ａからの修正情報Ｓ１０に基づいて評価処理を修正することによりユーザ主観を含む目標採点結果に近い第２の採点結果（客観的採点結果）を求める。この第２の採点結果を表わす採点結果データＳ９は、採点結果データＳ７の送信があったユーザ端末に送信される。ここで、採点結果データＳ７の送信があったユーザ端末は、例えば図４の第２端末データＡ１２の識別情報Ｓ０中のユーザ端末番号により識別可能である。一例として、ユーザ端末１４（１）において採点を行なったのであれば、ユーザ端末１４（１）の表示部３２に採点結果データＳ９が供給され、表示部３２に第２の採点結果（目標採点結果に近い客観的採点結果）が表示される。
【００３６】
上記した説明では、主としてユーザ端末１４（１）から比較結果及び採点結果がサーバ１８に送信されたときのサーバ１８の構成及び動作を述べたが、このような構成及び動作は、１４（２）等の他のユーザ端末から比較結果及び採点結果がサーバ１８に送信されたときも同様である。上記した実施形態によれば、ユーザは、ユーザ端末に歌唱音を入力することで第１の採点結果（機械的採点結果）を知ることができると共に、ユーザ端末に自己の主観的採点結果を入力することで第２の採点結果（客観的採点結果）を知ることができる。また、自己の主観的採点結果が第２の採点結果からどの程度乖離しているか知ることができると共に、第１の採点結果が第２の採点結果によりどの程度修正されたか知ることができる。
【００３７】
なお、上記した実施形態では、マイクロホンＭＣを介して歌唱音信号を入力する例を示したが、ユーザ端末間で通信ネットワーク１０を介して歌唱音データを授受することによりあるユーザ端末で入力した歌唱音データについて他のユーザ端末で採点を行なうことも可能である。また、上記した実施形態では、入力音毎に第１の採点結果（機械的採点結果）を求め、表示するようにしたが、次回の入力音に対応する第１の採点結果には今回の入力音に対応する修正情報Ｓ１０を反映させるようにしてもよい。このためには、今回の入力音に関して第２の採点結果（客観的採点結果）を得るために作成された修正情報Ｓ１０（前述の（イ）の場合は多項式の係数、前述の（ロ）の場合はニューラルネットワークの構成情報及びパラメータセット、前述の（ハ）の場合は変換テーブル）をメモリ等の保存手段（図示せず）に保存しておき、次回の入力音に対応する第１の採点結果を求める際には該保存手段に保存された修正情報Ｓ１０を参照して第１の採点結果を求めるようにすればよい。このようにすると、次回の第１の採点結果としては、今回の第２の採点結果（客観的採点結果）を反映した採点結果が求められ、表示されるので、過去の学習結果が生かされることになる。
【００３８】
図６は、入力操作部３０の他の構成例を示すもので、図３と同様の部分には同様の符号を付して詳細な説明を省略する。図６の構成例の特徴は、評価者の属する国、地方又は年齢層を評価区分として入力可能にすると共に、評価をなすべき国、地方又は年齢層を評価区分として指定可能にしたことである。すなわち、評価者スイッチＫ２１及び評価区分スイッチＫ２２が並設されると共に、これらのスイッチＫ２１，Ｋ２２に共通に使用可能なように「日本」，「韓国」…等に対応する国別スイッチＫａ１，Ｋａ２…と、「関東」，「関西」…等に対応する地方別スイッチＫｂ１，Ｋｂ２…と、「１０代」，「２０代」…等に対応する年齢層別スイッチＫｃ１，Ｋｃ２…とが設けられている。
【００３９】
採点スイッチＫ１２及びテンキー部Ｋ１０を用いてユーザ等の評価者が採点を行なう際には、評価者スイッチＫ２１を押した後、国別スイッチＫａ１，Ｋａ２…のいずれかと、地方別スイッチＫｂ１，Ｋｂ２…のいずれかと、年齢層別スイッチＫｃ１，Ｋｃ２…のいずれかとを押して評価者の属する国、地方及び年齢層を評価区分として入力可能である。この場合、国、地方及び年齢層のすべてを入力してもよいが、そのうちの１又は複数を入力してもよい。このようにして入力された評価区分データは、図２において破線Ｓ１１で示すように端末データ作成部３４に供給され、図４に示すように第２端末データＡ１２において採点結果データＳ７と組をなすように採点結果データＳ７に評価区分データＳ１１が付加される。これと同様にして、他の第２端末データＡ２２…Ａｎ２にも、採点を行なったユーザ端末にて評価区分データＳ１１が付加される。
【００４０】
また、ユーザ等の評価者が採点を行なう際には、評価区分スイッチＫ２２を押した後、評価をなすべきいずれかの評価区分のスイッチ（「国別」「地方別」又は「年齢層別」のいずれかに属するスイッチ）を押す。例えばスイッチＫａ２を押すと、評価区分として韓国が指定され、スイッチＫｂ２を押すと、評価区分として関西地方が指定され、スイッチＫｃ２を押すと、評価区分として２０代が指定される。このときに押すのは、国別、地方別及び年齢層別のうちのいずれか１種類のスイッチとする。１種類のスイッチを押した後、他の種類のスイッチを押すとき（評価区分の種類を変更するとき）は、その前に評価区分スイッチＫ２２を押すものとする。入力操作部３０からは、図２に示すように指定に係る評価区分を表わす評価区分指定データＳ１２が送出され、サーバ１８に送信される。このときに送信される評価区分指定データＳ１２には、図４に示した識別情報Ｓ０と同様の識別情報が付加される。
【００４１】
図７は、図６の入力操作部３０を用いる場合におけるサーバ１８の構成例を示すものである。図７に示すサーバ１８において、修正情報作成部４２Ｂ及び評価部４４Ｂは、図５に示した修正情報作成部４２Ａ及び評価部４４Ａとそれぞれ同様のものであるが、端末データ記憶部４０Ｂに関してサーチ部４６を設けた点が図５のサーバ１８とは異なる。
【００４２】
端末データ記憶部４０Ｂには、端末データ記憶部４０Ａについて前述したと同様に曲毎に図４に示した第１及び第２端末データが記憶される。あるユーザ端末から比較結果データＳ６を含む第１端末データがサーバ１８に送信され、端末データ記憶部４０Ｂに記憶されると、評価部４４Ａについて前述したと同様に評価部４４Ｂが比較結果データＳ６に基づいて評価処理により第１の採点結果（機械的採点結果）を求める。この第１の採点結果を表わす採点結果データＳ９は、比較結果データＳ６の送信があったユーザ端末に送信され、データＳ９の表わす第１の採点結果が表示される。
【００４３】
端末データ記憶部４０Ｂには、端末データ記憶部４０Ａについて前述したと同様に１又は複数のユーザ端末から送信された第２の端末データが記憶される。この場合、各第２端末データには、前述したように評価区分データＳ１１が採点結果データＳ７と組をなした状態で含まれている。サーチ部４６は、端末データ記憶部４０Ｂから読出した評価区分データＳ１１と、ユーザ端末から送信されてくる評価区分指定データＳ１２とを比較して評価区分指定データＳ１２の表わす評価区分と同一の評価区分を表わす評価区分データＳ１１を複数サーチするものである。サーチ部４６が複数の評価区分データＳ１１をサーチすると、該複数の評価区分データＳ１１とそれぞれ組をなす複数の採点結果データＳ７が端末データ記憶部４０Ｂから読出されて修正情報作成部４２Ｂに供給される。ここで、評価区分データＳ１１と採点結果データＳ７とが組をなすか否かは第２端末データの識別情報Ｓ０を参照すれば判明する。例えば、上記のように第１の採点結果が表示されたユーザ端末からユーザ等の評価者の採点結果と評価区分とが入力されると共に評価をなすべき評価区分が指定されると、サーチ部４６は、評価区分指定データＳ１２と同一の評価区分（例えば「日本」）を表わす評価区分データＳ１１を複数サーチすると共に、サーチに係る複数の評価区分データＳ１１とそれぞれ組をなす複数の採点結果データＳ７を修正情報作成部４２Ｂに供給する。
【００４４】
修正情報作成部４２Ｂは、修正情報作成部４２Ａに関して前述したと同様に端末データ記憶部４０Ｂからの複数の採点結果データＳ７に基づいて指定に係る評価区分内の目標採点結果（例えば「日本」の客観的採点結果）を求め、この目標採点結果に近づくように評価処理を修正するための修正情報Ｓ１０を作成して評価部４４Ｂに供給する。評価部４４Ｂは、評価部４４Ａに関して前述したと同様に修正情報作成部４２Ｂからの修正情報Ｓ１０に基づいて評価処理を修正して目標採点結果に近い第２の採点結果を求め、この第２の採点結果を表わす採点結果データＳ９を採点結果データＳ７、評価区分データＳ１１及び評価区分指定データＳ１２の送信があったユーザ端末に送信する。送信を受けたユーザ端末では、採点結果データＳ９に基づいて第２の採点結果が表示される。
【００４５】
この後、図６の入力操作部３０において、スイッチＫ２２，Ｋａ２の操作により評価をなすべき評価区分の指定を例えば「日本」から「韓国」に変更すると、上記したと同様にサーチ、修正情報作成及び評価の処理が行なわれる。そして、評価区分の指定を行なったユーザ端末では、採点結果データＳ９に基づいて第２の採点結果として「韓国」の客観的採点結果が表示される。このような評価区分の変更は、国別評価区分に限らず、地方別評価区分又は年齢層別評価区分についても同様にして行なうことができる。
【００４６】
図６，７に関して上記した実施形態によれば、ユーザが歌唱音を入力することで第１の採点結果（機械的採点結果）が表示されると共に、ユーザが主観的採点結果及び評価区分を入力し且つ評価区分を指定することで第２の採点結果として指定に係る評価区分内でユーザ主観を含む客観的採点結果を表示することができる。従って、ユーザは、自己の主観的採点結果が指定に係る評価区分内の第２の採点結果からどの程度乖離しているか知ることができると共に、第１の採点結果が指定に係る評価区分内の第２の採点結果によりどの程度修正されたか知ることができる。また、第２の採点結果の表示は、指定に係る評価区分毎に行なわれるので、評価区分の指定を変更することで多様な採点結果を利用することができる。
【００４７】
図８は、ユーザ端末１４（１）の他の構成例を示し、図９は、図８のユーザ端末を用いる場合におけるサーバ１８の構成例を示すものである。図８，９に示す構成において、図２，５と同様の部分には同様の符号を付して詳細な説明を省略する。図８，９の構成例の特徴は、基準音に関する音響特徴の分析・抽出を予め行なって抽出に係る音響特徴を表わす基準音声分析データをサーバ１８の基準音声分析データ記憶部５４に記憶しておき、サーバ１８に設けた分析データ比較部２８でユーザ端末からの音声分析データと基準音声データとの比較を行なうようにしたことである。
【００４８】
ユーザ端末１４（１）において、端末データ作成部５０では、第１端末データを次のようにして作成する。すなわち、このとき作成する第１端末データは、図４に示す端末データＡ１１において、比較結果データＳ６の代りに、音響特徴分析部２６からの分析データ（抽出に係る音響特徴を表わすデータ）Ｓ５を配置したものに相当する。識別情報Ｓ０は、ユーザ端末番号及び曲選択データＳ１からなっている。端末データ作成部５０では、図４に関して前述したと同様にして第２端末データ（採点結果データＳ７を含むデータ）も作成される。第１端末データ又は第２端末データからなる端末データＳ２０は、図９のサーバ１８に送信され、端末データ記憶部５２に記憶される。
【００４９】
あるユーザ端末から送信された第１端末データが端末データ記憶部５２に記憶されると、第１端末データ中の分析データＳ５は、分析データ比較部２８に一方の比較入力として供給される。また、第１端末データ中の曲選択データＳ１は、 基準音声分析データ記憶部５４に供給され、選択曲に対応する基準音声分析データＳ４を読出するのに用いられる。基準音声分析データ記憶部５４からの分析データＳ４は、分析データ比較部２８に他方の比較入力として供給される。分析データ比較部２８では、図２に関して前述したと同様に分析データＳ４，Ｓ５を互いに比較して両者の差異を表わす比較結果データＳ６を送出する。
【００５０】
評価部４４Ａは、分析データ比較部２８からの比較結果データＳ６に基づいて第１の採点結果（機械的採点結果）を求める。この第１の採点結果を表わす採点結果データＳ９は、歌唱音の入力がなされたユーザ端末に送信され、このユーザ端末ではデータＳ９に応じた第１の採点結果が表示される。
【００５１】
修正情報作成部４２Ａは、図５に関して前述したと同様に端末データ記憶部５２からの複数の採点結果データＳ７に基づいて目標採点結果を求め、この目標採点結果に近づくように評価処理を修正するための修正情報Ｓ１０を作成する。評価部４４Ａでは、修正情報作成部４２Ａからの修正情報Ｓ１０に基づいて評価処理を修正することにより目標採点結果に近い第２の採点結果（客観的採点結果）を求める。この第２の採点結果を表わす採点結果データＳ９は、採点結果データＳ７の送信があったユーザ端末に送信され、このユーザ端末ではデータＳ９に応じた第２の採点結果が表示される。
【００５２】
図８，９に関して上記した音評価システムによれば、予め基準音の音響特徴を分析・抽出して基準音声分析データ記憶部５４に記憶しておくので、構成又は処理が簡単となり、処理効率が向上する。なお、図８，９に示した構成は、図６，７の実施形態でも採用可能である。
【００５３】
この発明は上記した実施形態に限定されるものではなく、種々の改変形態で実施可能なものである。例えば、次のような変更が可能である。
【００５４】
（ａ）上記した実施形態では、通信カラオケシステムにこの発明を適用する例を示したが、この発明は、歌唱音に限らず、楽器演奏音又はスピーチ音（例えば英会話等の会話練習音）等の評価にも適用可能である。特に、図６，７に関して前述した構成は、例えば英会話の練習に用いる場合、英語を使用する点では同じであっても、発音が微妙に異なるアメリカ人、イギリス人又はオーストラリア人等について別々に評価を受けることができ、好都合である。
【００５５】
（ｂ）上記した実施形態では、図５のサーバ又は図７のサーバのいずれか一方を設ける例を示したが、図５，７のサーバを並設し、いずれか一方をユーザが選択して使用する構成にしてもよい。この場合、評価部は、評価学習部３８Ａ，３８Ｂに共通に１つだけ設けることができる。
【００５６】
（ｃ）上記した実施形態では、サーバ側に評価部を設けた例を示したが、評価部は、ユーザ端末に設けてもよい。
【００５７】
（ｄ）上記した実施形態では、基準音（基準歌唱音）を予めユーザに聴かせる例を示したが、基準音の聴取は、例えば有名な歌手の曲でユーザが曲内容を十分に知っているようなときは省略してもよい。
【００５８】
（ｅ）上記した実施形態では、ユーザ等の評価者が採点結果を入力する前にシステム側の採点結果を表示する例を示したが、システム側の採点結果は、評価者が採点結果を入力すると同時又は入力した後に表示するようにしてもよい。
【００５９】
（ｆ）上記した実施形態では、ユーザ端末からサーバに評価者の採点結果を送信するたびに修正に係る採点結果を表示する例を示したが、端末データ記憶部に所定の複数の採点結果データが記憶されることを条件として修正に係る採点結果を表示するようにしてもよい。
【００６０】
（ｇ）上記した実施形態では、音響特徴分析部２６をユーザ端末に設けたが、サーバに設けるようにしてもよい。
【００６１】
（ｈ）上記した実施形態では、図６の入力操作部３０から評価者の属する国、地方、年齢層等の評価区分を入力する構成にしたが、各ユーザ端末毎に該ユーザ端末に対応する評価区分データをメモリ等の記憶手段（図示せず）から読出すなどして自動的に生成するようにしてもよい。
【００６２】
（ｉ）上記した実施形態では、評価結果を点数で表示する例を示したが、評価結果は、Ａ，Ｂ，Ｃ…、甲，乙，丙…等のように段階的に表示することもできる。
【図面の簡単な説明】
【００６３】
【図１】この発明の一実施形態に係る音評価システムの構成を示すブロック図である。
【図２】ユーザ端末の一構成例を示すブロック図である。
【図３】入力操作部の一構成例を示す平面図である。
【図４】端末データのフォーマットを示す図である。
【図５】サーバの一構成例を示すブロック図である。
【図６】入力操作部の他の構成例を示す平面図である。
【図７】図６の入力操作部を用いる場合におけるサーバの構成例を示すブロック図である。
【図８】ユーザ端末の他の構成例を示すブロック図である。
【図９】図８のユーザ端末を用いる場合におけるサーバの構成例を示すブロック図である。
【符号の説明】
【００６４】
１０：通信ネットワーク、１２（１）〜１２（Ｎ），１６：通信インターフェース、１４（１）〜１４（Ｎ）：ユーザ端末、１８：サーバ、２０：基準音声データ記憶部、２２，２６：音響特徴分析部、２４：音声再生・記録部、２８：分析データ比較部、３０：入力操作部、３２：表示部、３４，５０：端末データ作成部、３８Ａ，３８Ｂ：評価学習部、４０Ａ，４０Ｂ，５２：端末データ記憶部、４２Ａ，４２Ｂ：修正情報作成部、４４Ａ，４４Ｂ：評価部、４６：サーチ部、５４：基準音声分析データ記憶部。
【技術分野】
【０００１】
この発明は、通信カラオケシステム等に用いるに好適な音評価システムの改良に関するものである。
【背景技術】
【０００２】
従来、音評価システムとしては、入力音声から抽出した音響特徴を事前保存モデルと比較すると共にその比較結果をユーザ発音の審査に使用する構成にしたものが知られている（例えば、特許文献１参照）。
【０００３】
また、音声認識システムとしては、音声分析及び音韻抽出までの処理をクライアントで行なうと共に残りの言語レベルの認識処理をサーバで行なうことによりクライアントの処理負荷の低減を図ったものが知られている（例えば、特許文献２参照）。
【特許文献１】特表２００２−５１５１３６
【特許文献２】特開２００３−４４０９１
【発明の開示】
【発明が解決しようとする課題】
【０００４】
一般に、歌唱、楽器演奏等に対する評価は、歌い手や演奏者等のユーザの主観的な評価に依存する。例えば、カラオケ等の評価処理において、基準歌唱に近いからといって高い点数を出しても、ユーザの主観的評価と一致するとは限らない。また、ユーザ仲間では、サビがうまければ高得点、面白いと感じれば高得点ということもある。
【０００５】
上記した従来の音評価システムによると、正しいとされる発音が予め判明していることが前提になっており、ユーザの嗜好や時代性等による評価基準の変化に追従できないという問題点がある。
【０００６】
また、上記した従来の音声認識システムにおいても、音声判定基準は固定されており、ユーザの主観的評価との乖離があった場合でも補正できないという問題点がある。
【０００７】
この発明の目的は、ユーザを含む複数の評価者による客観的評価に近い評価結果を得ることができる新規な音評価システムを提供することにある。
【０００８】
この発明の他の目的は、評価者の属する国等の評価区分を指定可能であると共に指定に係る評価区分内の複数の評価者による客観的評価に近い評価結果を得ることができる新規な音評価システムを提供することにある。
【課題を解決するための手段】
【０００９】
この発明に係る第１の音評価システムは、
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データを記憶する記憶手段と、
前記サーバに設けられ、前記記憶手段に記憶された複数の評価結果データに基づいて目標評価結果を決定する決定手段と、
前記サーバ設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価結果の入力に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にしたものである。
【００１０】
第１の音評価システムによれば、サーバの記憶手段には、各ユーザ端末の入力手段からの評価結果データ（ユーザ等の評価者による主観的評価結果を表わすデータ）が記憶される。例えば、多数のユーザ端末が国内に分散配置されているものとすると、記憶手段には、多数のユーザの主観的評価結果をそれぞれ表わす多数の評価結果データが記憶されることになる。決定手段は、記憶手段に記憶された複数（又は多数）の評価結果データに基づいて（例えば平均処理するなどして）目標評価結果を決定する。この目標評価結果は、複数（又は多数）の主観的評価結果が反映されたもので、客観的評価結果といえる。修正手段は、目標評価結果に近づくように評価処理を修正して評価手段から第２の評価結果を得る。この第２の評価結果は、複数（又は多数）の評価者による客観的評価結果に近いもので、評価結果を入力したユーザ端末の表示手段で表示される。従って、ユーザは、ユーザ端末で評価結果を入力することで第２の評価結果（ユーザ主観も含めた客観的評価結果に近い評価結果）を知ることができ、しかも自己の主観的評価結果が第２の評価結果からどの程度乖離しているか知ることができる。
【００１１】
なお、入力音の評価結果を入力したユーザ端末の表示手段には、第２の評価結果の表示に関連して第１の評価結果（機械的評価結果）を表示するようにしてもよい。このようにすると、ユーザは、第１及び第２の評価結果を比較することで機械的評価結果（第１の評価結果）が客観的評価に近い評価結果（第２の評価結果）によりどの程度修正されたか知ることができる。
【００１２】
この発明に係る第２の音評価システムは、
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する第１の入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち前記入力音の評価者の属する評価区分を入力する第２の入力手段であって、入力に係る評価区分を表わす評価区分データを送出するものと、
前記サーバに設けられ、各ユーザ端末の第１の入力手段からの評価結果データと、該ユーザ端末の第２の入力手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にしたものである。
【００１３】
第２の音評価システムによれば、各ユーザ端末毎に第２の入力手段を設け、所定の複数の評価区分（例えば国別評価区分）のうち入力音の評価者の属する評価区分（例えば日本）を入力して入力に係る評価区分を表わす評価区分データを送出し、第１の入力手段からの評価結果データと第２の入力手段からの評価区分データとを組にして記憶手段に記憶させるようにしたので、記憶手段には、評価結果データ及び評価区分データの組が多数記憶されることになる。各ユーザ端末に設けられた指定手段は、複数の評価区分のうち入力音に関して評価をなすべき所望の評価区分を指定するもので、記憶手段の記憶データを利用するために使用される。
【００１４】
決定手段は、記憶手段に記憶された多数の評価区分データのうち指定手段での指定に係る評価区分（例えば日本）と同一の評価区分を表わす複数の評価区分データをサーチすると共に該複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて目標評価結果を決定する。この目標評価結果は、指定に係る評価区分（例えば日本）内の複数（又は多数）の主観的評価結果が反映されたもので、客観的評価結果といえる。修正手段は、目標評価結果に近づくように評価処理を修正して評価手段から第２の評価結果を得る。この第２の評価結果は、指定に係る評価区分内の複数（又は多数）の評価者による客観的評価に近いもので、評価区分を指定したユーザ端末の表示手段で表示される。従って、ユーザは、ユーザ端末で評価区分を指定することで第２の評価結果（指定に係る評価区分内のユーザ主観を含めた客観的評価に近い評価結果）を知ることができ、しかも自己の主観的評価が客観的評価に近い評価結果（第２の評価結果）からどの程度乖離しているか知ることができる。
【００１５】
その上、指定手段では入力音に関して評価をなすべき評価区分を適宜変更できるので、評価区分を例えば日本から韓国に変更するなどして他の評価区分内における客観的評価に近い評価結果（第２の評価結果）を知ることができる。また、評価者の評価区分及び評価をなすべき評価区分は、いずれも国別に限らず、地方別、年齢層別等にしてもよく、このようにすれば一層多様な客観的評価に近い評価結果を得ることができる。
【００１６】
この発明に係る第３の音評価システムは、
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち該ユーザ端末に対応する評価区分を表わす評価区分データを生成する生成手段と、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データと、該ユーザ端末の生成手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にしたものである。
【００１７】
第３の音評価システムは、前述した第２の音評価システムにおいて、第２の入力手段の代りに生成手段を設けたものに相当する。生成手段は、各ユーザ端末に設けられ、所定の複数の評価区分のうち該ユーザ端末に対応する評価区分を表わす評価区分データを生成する。記憶手段では、各ユーザ端末の入力手段からの評価結果データと、該ユーザ端末の生成手段からの評価区分データとを組にして記憶する。その他の動作は、第２の音評価システムに関して前述したと同様である。
【００１８】
第３の音評価システムによれば、ユーザは、評価区分を入力しなくてよい。例えば、ユーザ端末の設置場所が固定されていたり、ユーザの年齢層等の属性が予め判明していたりした場合、ユーザ端末毎に評価区分を対応付けすることで該ユーザ端末に対応する評価区分データを自動的に生成することができ、ユーザが入力するのは、入力音の評価結果のみとなる。あるユーザ端末にてユーザが指定手段により所望の評価区分を指定すると、該ユーザ端末の表示手段には第２の評価結果（指定に係る評価区分のユーザ主観を含めた客観的評価に近い評価結果）が表示され、ユーザは、第２の評価結果を知ることができる。
【００１９】
なお、第２又は第３の音評価システムにおいて、評価区分を指定したユーザ端末の表示手段には、第２の評価結果の表示に関連して第１の評価結果（機械的評価結果）を表示するようにしてもよい。このようにすると、ユーザは、第１及び第２の評価結果を比較することで機械的評価結果（第１の評価結果）が指定に係る区分内の客観的評価結果（第２の評価結果）によりどの程度修正されたか知ることができる。
【発明の効果】
【００２０】
この発明によれば、ユーザ等の複数の評価者の主観的評価を通信ネットワークを介して集計すると共に集計結果に基づいて目標評価結果を決定し、この目標評価結果に近づくように評価処理を修正してユーザの主観を含む客観的評価に近い評価結果を得るようにしたので、ユーザの嗜好や時代性等による評価基準の変化に追従できる効果が得られる。また、多くの評価者の評価結果が反映された評価結果を見ることで、ユーザ自身の主観的評価の客観性を高める学習効果も期待できる。
【００２１】
その上、評価をなすべき複数の評価区分のうち任意の評価区分を指定して該評価区分内の客観的評価に近い評価結果が得られるようにしたので、ユーザが多様な評価結果を利用可能となる効果も得られる。
【発明を実施するための最良の形態】
【００２２】
図１は、この発明の一実施形態に係る音評価システムの構成を示すものである。この音評価システムは、例えば通信カラオケシステムに用いることができる。
【００２３】
図１に示す音評価システムにおいて、通信ネットワーク１０には、通信インターフェース１２（１）〜１２（Ｎ）（Ｎは２以上の整数）をそれぞれ介してユーザ端末１４（１）〜１４（Ｎ）が接続されると共に、通信インターフェース１６を介してサーバ１８が接続されている。通信ネットワーク１０は、例えばＬＡＮ（ローカル・エリア・ネットワーク）、インターネット又は電話回線等からなり、１４（１）等の各ユーザ端末は、一例として通信カラオケ装置からなる。ユーザ端末１４（１）〜１４（Ｎ）の構成は、互いに同一であり、代表としてユーザ端末１４（１）の一構成例を図２に示す。
【００２４】
図２に示すユーザ端末１４（１）において、基準音声データ記憶部２０は、複数曲のうちの各曲毎に基準歌唱音データからなる基準音声データを記憶したもので、基準音声データ記憶部２０から読出されるべき基準音声データは、入力操作部３０からの曲選択データＳ１により選択されるようになっている。基準音声データ記憶部２０から読出された基準音声データＳ２は、音響特徴分析部２２及び音声再生・記録部２４に供給される。
【００２５】
音声再生・記録部２４は、基準音声データＳ２に基づいて基準音声信号として基準歌唱音信号（アナログ信号）を再生し、この信号は、スピーカＳＰにより基準歌唱音に変換される。ユーザは、自分で歌う前に基準歌唱音を聴くことができる。音声再生・記録部２４は、マイクロホンＭＣを介して入力される実歌唱音信号からなる音声信号をディジタル音声データに変換して磁気ディスク等に記録可能なもので、記録した実歌唱音データは、基準音声データに関して前述したと同様にしてスピーカＳＰを介して実歌唱音として再生可能である。ユーザは、自分で歌った実歌唱音を再生して聴取することにより採点を行なうことができる。マイクロホンＭＣから入力された実歌唱音信号に基づく実歌唱音データ（磁気ディスク等から読出したものでも可）からなる音声データＳ３は、音響特徴分析部２６に供給される。
【００２６】
音響特徴分析部２２は、基準歌唱音データからなる基準音声データＳ２に基づいて基準音声信号の音響特徴を分析し、抽出するもので、抽出に係る音響特徴を表わす分析データＳ４を分析データ比較部２８に一方の比較入力として供給する。音響特徴分析部２６は、ユーザの実歌唱音データからなる音声データＳ３に基づいてユーザの実歌唱音の音響特徴を分析し、抽出するもので、抽出に係る音響特徴を表わす分析データＳ５を分析データ比較部２８に他方の比較入力として供給する。音響特徴分析部２２，２６のいずれにおいても、音響特徴としては、ピッチ（音高）、発音タイミング、音量、音色（例えば周波数スペクトル又はフォルマント）等の経時的変化を分析し、抽出することができる。分析データ比較部２８では、分析データＳ４，Ｓ５を互いに比較して両者の差異を表わす比較結果データ（例えば差分データ）Ｓ６を送出する。
【００２７】
入力操作部３０は、曲選択データＳ１、採点結果データＳ７等を発生するもので、その一構成例を図３に示す。入力操作部３０において、テンキー部Ｋ１０には、数字１〜１０に対応した１０個又はそれ以上の数のキーが設けられている。選曲スイッチＫ１１は、歌唱者が所望の曲を選択する際に操作されるものであり、採点スイッチＫ１２は、入力した歌唱音について歌唱者又は同伴者等の評価者が採点を行なう（採点結果を入力する）際に操作されものである。
【００２８】
図２に示す表示部３２は、例えば液晶表示パネル等の表示パネルを有するものである。表示部３２には、選曲スイッチＫ１１の押圧に応じて複数の候補曲の曲番号及び曲名が表示される。この状態で、歌唱者がテンキー部Ｋ１０でのキー操作により所望の曲の曲番号を指定すると、指定に係る曲番号を表わす曲選択データＳ１が基準音声データ記憶部２０に供給される。そして、曲選択データＳ１により選択された基準歌唱の再生が開始される。歌い終わって採点を行なう際には、テンキー部Ｋ１０でのキー操作により所望の点数を入力すると、採点結果を表わす採点結果データＳ７が送出される。
【００２９】
図２に示す端末データ作成部３４は、サーバ１８に送信すべき端末データＳ８を作成するものである。端末データＳ８としては、図４に示すように１回の歌唱につき第１端末データＡ１１及び第２端末データＡ１２の２つのデータが作成される。第１端末データＡ１１は、識別情報Ｓ０及び比較結果データＳ６を含むものである。識別情報Ｓ０は、ユーザ端末番号及び曲選択データＳ１からなっている。第２端末データＡ１２は、第１端末データＡ１１と同じ識別情報Ｓ０と、採点結果データＳ７とからなっている。
【００３０】
図４において、Ａ２１…Ａｎ１（ｎは２より大きい整数）は、いずれも第１端末データＡ１１と同様のフォーマットを有する第１端末データであり、Ａ２２…Ａｎ２は、いずれも第２端末データＡ１２と同様のフォーマットを有する第２端末データである。第１端末データＡ１１及び第２端末データＡ１２が図２のユーザ端末１４（１）から送出されたものとすると、第１端末データＡ２１及び第２端末データＡ２２は、ユーザ端末１４（１）から送出されることもあれば、他のユーザ端末（例えば図１の１４（Ｎ））から送出されることもある。このことは、Ａｎ１，Ａｎ２等の他の第１，第２端末データについても同様である。第１端末データＡ１１〜Ａｎ１及び第２端末データＡ１２〜Ａｎ２は、いずれもサーバ１８に送信される。
【００３１】
図５は、サーバ１８の一構成例を示すものである。サーバ１８は、評価学習部３８Ａ及び評価部４４Ａを備え、評価学習部３８Ａには、端末データ記憶部４０Ａ及び修正情報作成部４２Ａが設けられている。端末データ記憶部４０Ａには、曲毎に図４に示した第１及び第２端末データが記憶される。曲は、図４に示した識別情報Ｓ０中の曲選択データＳ１により識別可能である。
【００３２】
評価部４４Ａでは、端末データ記憶部４０Ａに記憶された第１端末データ中の比較結果データＳ６に基づいて評価処理により第１の採点結果（機械的採点結果）が求められる。評価処理としては、（イ）比較結果データが表わす個々の比較結果パラメータ（ピッチ、発音タイミング、音量、音色等の差の時間的変化（積算値又は平均値））を多項式の多数項にそれぞれ割り当てて採点結果を算出する方式、（ロ）入力層に比較結果データを入力して出力層から採点結果を導出するニューラルネット方式、（ハ）比較結果パラメータ数分のパラメータ−得点変換テーブルを用い、これらの変換テーブルから得られる得点に基づいて採点結果を算出する方式等が公知であり、いずれかの方式を用いて自動的に採点を行なうことができる。
【００３３】
評価部４４Ａからは、第１の採点結果を表わす採点結果データＳ９が送出され、比較結果データＳ６の送信があったユーザ端末に送信される。ここで、比較結果データＳ６の送信があったユーザ端末は、例えば図４の第１端末データＡ１１の識別情報Ｓ０中のユーザ端末番号により識別可能である。一例として、ユーザ端末１４（１）において曲を選択し、歌ったのであれば、ユーザ端末１４（１）の表示部３２に採点結果データＳ９が供給され、表示部３２に第１の採点結果（機械的採点結果）が表示される。
【００３４】
次に、ユーザ端末１４（１）において、ユーザ等の評価者が記録に係る歌唱を聴いて入力操作部３０で採点結果を入力すると、その採点結果を表わす採点結果データＳ７を含む第２端末データ（例えば図４のＡ１２）が端末データ記憶部４０Ａに記憶される。これと同様にして、端末データ記憶部４０Ａには、ユーザ端末１４（１）からの複数回の採点結果やユーザ端末１４（２）〜１４（Ｎ）からの１又は複数回の採点結果が記憶される。修正情報作成部４２Ａは、ある曲の採点結果データＳ７が端末データ記憶部４０Ａに記憶されると、該採点結果データＳ７を含めて該曲に関してそれまで記憶されている複数（又は多数）の採点結果データＳ７に基づいて例えば該複数（又は多数）の採点結果データＳ７の表わす採点結果を平均するなどして目標採点結果を求める。ここで、複数の採点結果データＳ７が同一曲に関するものか否かは、第２端末データの識別情報Ｓ０中の曲番号を参照すれば判明する。修正情報作成部４２Ａは、目標採点結果に近づくように評価部４４Ａの評価処理を修正するための修正情報Ｓ１０を作成して評価部４４Ａに供給する。修正情報Ｓ１０としては、前述した（イ）の多項式による算出方式を用いる場合は、多項式の多数項の係数を表わす情報を作成し、前述した（ロ）のニューラルネット方式を用いる場合は、ニューラルネットの構成情報と各ノードのパラメータセットとを作成し、前述した（ハ）の変換テーブル方式を用いる場合は、既存の変換テーブルの代りに用いるべき新たな変換テーブルを作成する。
【００３５】
評価部４４Ａでは、修正情報作成部４２Ａからの修正情報Ｓ１０に基づいて評価処理を修正することによりユーザ主観を含む目標採点結果に近い第２の採点結果（客観的採点結果）を求める。この第２の採点結果を表わす採点結果データＳ９は、採点結果データＳ７の送信があったユーザ端末に送信される。ここで、採点結果データＳ７の送信があったユーザ端末は、例えば図４の第２端末データＡ１２の識別情報Ｓ０中のユーザ端末番号により識別可能である。一例として、ユーザ端末１４（１）において採点を行なったのであれば、ユーザ端末１４（１）の表示部３２に採点結果データＳ９が供給され、表示部３２に第２の採点結果（目標採点結果に近い客観的採点結果）が表示される。
【００３６】
上記した説明では、主としてユーザ端末１４（１）から比較結果及び採点結果がサーバ１８に送信されたときのサーバ１８の構成及び動作を述べたが、このような構成及び動作は、１４（２）等の他のユーザ端末から比較結果及び採点結果がサーバ１８に送信されたときも同様である。上記した実施形態によれば、ユーザは、ユーザ端末に歌唱音を入力することで第１の採点結果（機械的採点結果）を知ることができると共に、ユーザ端末に自己の主観的採点結果を入力することで第２の採点結果（客観的採点結果）を知ることができる。また、自己の主観的採点結果が第２の採点結果からどの程度乖離しているか知ることができると共に、第１の採点結果が第２の採点結果によりどの程度修正されたか知ることができる。
【００３７】
なお、上記した実施形態では、マイクロホンＭＣを介して歌唱音信号を入力する例を示したが、ユーザ端末間で通信ネットワーク１０を介して歌唱音データを授受することによりあるユーザ端末で入力した歌唱音データについて他のユーザ端末で採点を行なうことも可能である。また、上記した実施形態では、入力音毎に第１の採点結果（機械的採点結果）を求め、表示するようにしたが、次回の入力音に対応する第１の採点結果には今回の入力音に対応する修正情報Ｓ１０を反映させるようにしてもよい。このためには、今回の入力音に関して第２の採点結果（客観的採点結果）を得るために作成された修正情報Ｓ１０（前述の（イ）の場合は多項式の係数、前述の（ロ）の場合はニューラルネットワークの構成情報及びパラメータセット、前述の（ハ）の場合は変換テーブル）をメモリ等の保存手段（図示せず）に保存しておき、次回の入力音に対応する第１の採点結果を求める際には該保存手段に保存された修正情報Ｓ１０を参照して第１の採点結果を求めるようにすればよい。このようにすると、次回の第１の採点結果としては、今回の第２の採点結果（客観的採点結果）を反映した採点結果が求められ、表示されるので、過去の学習結果が生かされることになる。
【００３８】
図６は、入力操作部３０の他の構成例を示すもので、図３と同様の部分には同様の符号を付して詳細な説明を省略する。図６の構成例の特徴は、評価者の属する国、地方又は年齢層を評価区分として入力可能にすると共に、評価をなすべき国、地方又は年齢層を評価区分として指定可能にしたことである。すなわち、評価者スイッチＫ２１及び評価区分スイッチＫ２２が並設されると共に、これらのスイッチＫ２１，Ｋ２２に共通に使用可能なように「日本」，「韓国」…等に対応する国別スイッチＫａ１，Ｋａ２…と、「関東」，「関西」…等に対応する地方別スイッチＫｂ１，Ｋｂ２…と、「１０代」，「２０代」…等に対応する年齢層別スイッチＫｃ１，Ｋｃ２…とが設けられている。
【００３９】
採点スイッチＫ１２及びテンキー部Ｋ１０を用いてユーザ等の評価者が採点を行なう際には、評価者スイッチＫ２１を押した後、国別スイッチＫａ１，Ｋａ２…のいずれかと、地方別スイッチＫｂ１，Ｋｂ２…のいずれかと、年齢層別スイッチＫｃ１，Ｋｃ２…のいずれかとを押して評価者の属する国、地方及び年齢層を評価区分として入力可能である。この場合、国、地方及び年齢層のすべてを入力してもよいが、そのうちの１又は複数を入力してもよい。このようにして入力された評価区分データは、図２において破線Ｓ１１で示すように端末データ作成部３４に供給され、図４に示すように第２端末データＡ１２において採点結果データＳ７と組をなすように採点結果データＳ７に評価区分データＳ１１が付加される。これと同様にして、他の第２端末データＡ２２…Ａｎ２にも、採点を行なったユーザ端末にて評価区分データＳ１１が付加される。
【００４０】
また、ユーザ等の評価者が採点を行なう際には、評価区分スイッチＫ２２を押した後、評価をなすべきいずれかの評価区分のスイッチ（「国別」「地方別」又は「年齢層別」のいずれかに属するスイッチ）を押す。例えばスイッチＫａ２を押すと、評価区分として韓国が指定され、スイッチＫｂ２を押すと、評価区分として関西地方が指定され、スイッチＫｃ２を押すと、評価区分として２０代が指定される。このときに押すのは、国別、地方別及び年齢層別のうちのいずれか１種類のスイッチとする。１種類のスイッチを押した後、他の種類のスイッチを押すとき（評価区分の種類を変更するとき）は、その前に評価区分スイッチＫ２２を押すものとする。入力操作部３０からは、図２に示すように指定に係る評価区分を表わす評価区分指定データＳ１２が送出され、サーバ１８に送信される。このときに送信される評価区分指定データＳ１２には、図４に示した識別情報Ｓ０と同様の識別情報が付加される。
【００４１】
図７は、図６の入力操作部３０を用いる場合におけるサーバ１８の構成例を示すものである。図７に示すサーバ１８において、修正情報作成部４２Ｂ及び評価部４４Ｂは、図５に示した修正情報作成部４２Ａ及び評価部４４Ａとそれぞれ同様のものであるが、端末データ記憶部４０Ｂに関してサーチ部４６を設けた点が図５のサーバ１８とは異なる。
【００４２】
端末データ記憶部４０Ｂには、端末データ記憶部４０Ａについて前述したと同様に曲毎に図４に示した第１及び第２端末データが記憶される。あるユーザ端末から比較結果データＳ６を含む第１端末データがサーバ１８に送信され、端末データ記憶部４０Ｂに記憶されると、評価部４４Ａについて前述したと同様に評価部４４Ｂが比較結果データＳ６に基づいて評価処理により第１の採点結果（機械的採点結果）を求める。この第１の採点結果を表わす採点結果データＳ９は、比較結果データＳ６の送信があったユーザ端末に送信され、データＳ９の表わす第１の採点結果が表示される。
【００４３】
端末データ記憶部４０Ｂには、端末データ記憶部４０Ａについて前述したと同様に１又は複数のユーザ端末から送信された第２の端末データが記憶される。この場合、各第２端末データには、前述したように評価区分データＳ１１が採点結果データＳ７と組をなした状態で含まれている。サーチ部４６は、端末データ記憶部４０Ｂから読出した評価区分データＳ１１と、ユーザ端末から送信されてくる評価区分指定データＳ１２とを比較して評価区分指定データＳ１２の表わす評価区分と同一の評価区分を表わす評価区分データＳ１１を複数サーチするものである。サーチ部４６が複数の評価区分データＳ１１をサーチすると、該複数の評価区分データＳ１１とそれぞれ組をなす複数の採点結果データＳ７が端末データ記憶部４０Ｂから読出されて修正情報作成部４２Ｂに供給される。ここで、評価区分データＳ１１と採点結果データＳ７とが組をなすか否かは第２端末データの識別情報Ｓ０を参照すれば判明する。例えば、上記のように第１の採点結果が表示されたユーザ端末からユーザ等の評価者の採点結果と評価区分とが入力されると共に評価をなすべき評価区分が指定されると、サーチ部４６は、評価区分指定データＳ１２と同一の評価区分（例えば「日本」）を表わす評価区分データＳ１１を複数サーチすると共に、サーチに係る複数の評価区分データＳ１１とそれぞれ組をなす複数の採点結果データＳ７を修正情報作成部４２Ｂに供給する。
【００４４】
修正情報作成部４２Ｂは、修正情報作成部４２Ａに関して前述したと同様に端末データ記憶部４０Ｂからの複数の採点結果データＳ７に基づいて指定に係る評価区分内の目標採点結果（例えば「日本」の客観的採点結果）を求め、この目標採点結果に近づくように評価処理を修正するための修正情報Ｓ１０を作成して評価部４４Ｂに供給する。評価部４４Ｂは、評価部４４Ａに関して前述したと同様に修正情報作成部４２Ｂからの修正情報Ｓ１０に基づいて評価処理を修正して目標採点結果に近い第２の採点結果を求め、この第２の採点結果を表わす採点結果データＳ９を採点結果データＳ７、評価区分データＳ１１及び評価区分指定データＳ１２の送信があったユーザ端末に送信する。送信を受けたユーザ端末では、採点結果データＳ９に基づいて第２の採点結果が表示される。
【００４５】
この後、図６の入力操作部３０において、スイッチＫ２２，Ｋａ２の操作により評価をなすべき評価区分の指定を例えば「日本」から「韓国」に変更すると、上記したと同様にサーチ、修正情報作成及び評価の処理が行なわれる。そして、評価区分の指定を行なったユーザ端末では、採点結果データＳ９に基づいて第２の採点結果として「韓国」の客観的採点結果が表示される。このような評価区分の変更は、国別評価区分に限らず、地方別評価区分又は年齢層別評価区分についても同様にして行なうことができる。
【００４６】
図６，７に関して上記した実施形態によれば、ユーザが歌唱音を入力することで第１の採点結果（機械的採点結果）が表示されると共に、ユーザが主観的採点結果及び評価区分を入力し且つ評価区分を指定することで第２の採点結果として指定に係る評価区分内でユーザ主観を含む客観的採点結果を表示することができる。従って、ユーザは、自己の主観的採点結果が指定に係る評価区分内の第２の採点結果からどの程度乖離しているか知ることができると共に、第１の採点結果が指定に係る評価区分内の第２の採点結果によりどの程度修正されたか知ることができる。また、第２の採点結果の表示は、指定に係る評価区分毎に行なわれるので、評価区分の指定を変更することで多様な採点結果を利用することができる。
【００４７】
図８は、ユーザ端末１４（１）の他の構成例を示し、図９は、図８のユーザ端末を用いる場合におけるサーバ１８の構成例を示すものである。図８，９に示す構成において、図２，５と同様の部分には同様の符号を付して詳細な説明を省略する。図８，９の構成例の特徴は、基準音に関する音響特徴の分析・抽出を予め行なって抽出に係る音響特徴を表わす基準音声分析データをサーバ１８の基準音声分析データ記憶部５４に記憶しておき、サーバ１８に設けた分析データ比較部２８でユーザ端末からの音声分析データと基準音声データとの比較を行なうようにしたことである。
【００４８】
ユーザ端末１４（１）において、端末データ作成部５０では、第１端末データを次のようにして作成する。すなわち、このとき作成する第１端末データは、図４に示す端末データＡ１１において、比較結果データＳ６の代りに、音響特徴分析部２６からの分析データ（抽出に係る音響特徴を表わすデータ）Ｓ５を配置したものに相当する。識別情報Ｓ０は、ユーザ端末番号及び曲選択データＳ１からなっている。端末データ作成部５０では、図４に関して前述したと同様にして第２端末データ（採点結果データＳ７を含むデータ）も作成される。第１端末データ又は第２端末データからなる端末データＳ２０は、図９のサーバ１８に送信され、端末データ記憶部５２に記憶される。
【００４９】
あるユーザ端末から送信された第１端末データが端末データ記憶部５２に記憶されると、第１端末データ中の分析データＳ５は、分析データ比較部２８に一方の比較入力として供給される。また、第１端末データ中の曲選択データＳ１は、 基準音声分析データ記憶部５４に供給され、選択曲に対応する基準音声分析データＳ４を読出するのに用いられる。基準音声分析データ記憶部５４からの分析データＳ４は、分析データ比較部２８に他方の比較入力として供給される。分析データ比較部２８では、図２に関して前述したと同様に分析データＳ４，Ｓ５を互いに比較して両者の差異を表わす比較結果データＳ６を送出する。
【００５０】
評価部４４Ａは、分析データ比較部２８からの比較結果データＳ６に基づいて第１の採点結果（機械的採点結果）を求める。この第１の採点結果を表わす採点結果データＳ９は、歌唱音の入力がなされたユーザ端末に送信され、このユーザ端末ではデータＳ９に応じた第１の採点結果が表示される。
【００５１】
修正情報作成部４２Ａは、図５に関して前述したと同様に端末データ記憶部５２からの複数の採点結果データＳ７に基づいて目標採点結果を求め、この目標採点結果に近づくように評価処理を修正するための修正情報Ｓ１０を作成する。評価部４４Ａでは、修正情報作成部４２Ａからの修正情報Ｓ１０に基づいて評価処理を修正することにより目標採点結果に近い第２の採点結果（客観的採点結果）を求める。この第２の採点結果を表わす採点結果データＳ９は、採点結果データＳ７の送信があったユーザ端末に送信され、このユーザ端末ではデータＳ９に応じた第２の採点結果が表示される。
【００５２】
図８，９に関して上記した音評価システムによれば、予め基準音の音響特徴を分析・抽出して基準音声分析データ記憶部５４に記憶しておくので、構成又は処理が簡単となり、処理効率が向上する。なお、図８，９に示した構成は、図６，７の実施形態でも採用可能である。
【００５３】
この発明は上記した実施形態に限定されるものではなく、種々の改変形態で実施可能なものである。例えば、次のような変更が可能である。
【００５４】
（ａ）上記した実施形態では、通信カラオケシステムにこの発明を適用する例を示したが、この発明は、歌唱音に限らず、楽器演奏音又はスピーチ音（例えば英会話等の会話練習音）等の評価にも適用可能である。特に、図６，７に関して前述した構成は、例えば英会話の練習に用いる場合、英語を使用する点では同じであっても、発音が微妙に異なるアメリカ人、イギリス人又はオーストラリア人等について別々に評価を受けることができ、好都合である。
【００５５】
（ｂ）上記した実施形態では、図５のサーバ又は図７のサーバのいずれか一方を設ける例を示したが、図５，７のサーバを並設し、いずれか一方をユーザが選択して使用する構成にしてもよい。この場合、評価部は、評価学習部３８Ａ，３８Ｂに共通に１つだけ設けることができる。
【００５６】
（ｃ）上記した実施形態では、サーバ側に評価部を設けた例を示したが、評価部は、ユーザ端末に設けてもよい。
【００５７】
（ｄ）上記した実施形態では、基準音（基準歌唱音）を予めユーザに聴かせる例を示したが、基準音の聴取は、例えば有名な歌手の曲でユーザが曲内容を十分に知っているようなときは省略してもよい。
【００５８】
（ｅ）上記した実施形態では、ユーザ等の評価者が採点結果を入力する前にシステム側の採点結果を表示する例を示したが、システム側の採点結果は、評価者が採点結果を入力すると同時又は入力した後に表示するようにしてもよい。
【００５９】
（ｆ）上記した実施形態では、ユーザ端末からサーバに評価者の採点結果を送信するたびに修正に係る採点結果を表示する例を示したが、端末データ記憶部に所定の複数の採点結果データが記憶されることを条件として修正に係る採点結果を表示するようにしてもよい。
【００６０】
（ｇ）上記した実施形態では、音響特徴分析部２６をユーザ端末に設けたが、サーバに設けるようにしてもよい。
【００６１】
（ｈ）上記した実施形態では、図６の入力操作部３０から評価者の属する国、地方、年齢層等の評価区分を入力する構成にしたが、各ユーザ端末毎に該ユーザ端末に対応する評価区分データをメモリ等の記憶手段（図示せず）から読出すなどして自動的に生成するようにしてもよい。
【００６２】
（ｉ）上記した実施形態では、評価結果を点数で表示する例を示したが、評価結果は、Ａ，Ｂ，Ｃ…、甲，乙，丙…等のように段階的に表示することもできる。
【図面の簡単な説明】
【００６３】
【図１】この発明の一実施形態に係る音評価システムの構成を示すブロック図である。
【図２】ユーザ端末の一構成例を示すブロック図である。
【図３】入力操作部の一構成例を示す平面図である。
【図４】端末データのフォーマットを示す図である。
【図５】サーバの一構成例を示すブロック図である。
【図６】入力操作部の他の構成例を示す平面図である。
【図７】図６の入力操作部を用いる場合におけるサーバの構成例を示すブロック図である。
【図８】ユーザ端末の他の構成例を示すブロック図である。
【図９】図８のユーザ端末を用いる場合におけるサーバの構成例を示すブロック図である。
【符号の説明】
【００６４】
１０：通信ネットワーク、１２（１）〜１２（Ｎ），１６：通信インターフェース、１４（１）〜１４（Ｎ）：ユーザ端末、１８：サーバ、２０：基準音声データ記憶部、２２，２６：音響特徴分析部、２４：音声再生・記録部、２８：分析データ比較部、３０：入力操作部、３２：表示部、３４，５０：端末データ作成部、３８Ａ，３８Ｂ：評価学習部、４０Ａ，４０Ｂ，５２：端末データ記憶部、４２Ａ，４２Ｂ：修正情報作成部、４４Ａ，４４Ｂ：評価部、４６：サーチ部、５４：基準音声分析データ記憶部。
【特許請求の範囲】
【請求項１】
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データを記憶する記憶手段と、
前記サーバに設けられ、前記記憶手段に記憶された複数の評価結果データに基づいて目標評価結果を決定する決定手段と、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価結果の入力に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にした音評価システム。
【請求項２】
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する第１の入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち前記入力音の評価者の属する評価区分を入力する第２の入力手段であって、入力に係る評価区分を表わす評価区分データを送出するものと、
前記サーバに設けられ、各ユーザ端末の第１の入力手段からの評価結果データと、該ユーザ端末の第２の入力手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にした音評価システム。
【請求項３】
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち該ユーザ端末に対応する評価区分を表わす評価区分データを生成する生成手段と、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データと、該ユーザ端末の生成手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にした音評価システム。
【請求項４】
いずれかのユーザ端末における前記第２の評価結果の表示に関連して該ユーザ端末の表示手段に前記第１の評価結果を表示させる構成にした請求項１〜３のいずれかに記載の音評価システム。
【請求項５】
前記修正手段が前記評価処理を修正するために今回用いた修正情報を保存する保存手段を前記サーバに設け、前記評価手段で次回に第１の評価結果を求める際には前記保存手段に保存された修正情報を参照して該第１の評価結果を求める構成にした請求項１〜３のいずれかに記載の音評価システム。
【請求項１】
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データを記憶する記憶手段と、
前記サーバに設けられ、前記記憶手段に記憶された複数の評価結果データに基づいて目標評価結果を決定する決定手段と、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価結果の入力に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にした音評価システム。
【請求項２】
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する第１の入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち前記入力音の評価者の属する評価区分を入力する第２の入力手段であって、入力に係る評価区分を表わす評価区分データを送出するものと、
前記サーバに設けられ、各ユーザ端末の第１の入力手段からの評価結果データと、該ユーザ端末の第２の入力手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にした音評価システム。
【請求項３】
複数のユーザ端末とサーバとを通信ネットワークを介して接続した音評価システムであって、
各ユーザ端末又は前記サーバに設けられ、評価されるべき入力音の音響特徴を抽出する抽出手段と、
各ユーザ端末又は前記サーバに設けられ、基準音の音響特徴を発生する発生手段と、
各ユーザ端末又は前記サーバに設けられ、前記入力音の音響特徴と前記基準音の音響特徴とを比較して両者の差異を表わす比較結果データを送出する比較手段と、
各ユーザ端末又は前記サーバに設けられ、前記比較結果データに基づいて評価処理により第１の評価結果を求める評価手段と、
各ユーザ端末に設けられた表示手段と、
各ユーザ端末に設けられ、前記入力音の評価結果を入力する入力手段であって、入力に係る評価結果を表わす評価結果データを送出するものと、
各ユーザ端末に設けられ、所定の複数の評価区分のうち該ユーザ端末に対応する評価区分を表わす評価区分データを生成する生成手段と、
前記サーバに設けられ、各ユーザ端末の入力手段からの評価結果データと、該ユーザ端末の生成手段からの評価区分データとを組にして記憶する記憶手段と、
各ユーザ端末に設けられ、前記複数の評価区分のうち前記入力音に関して評価をなすべき所望の評価区分を指定する指定手段と、
前記サーバに設けられたサーチ手段であって、前記記憶手段に記憶された評価区分データのうち前記指定手段での指定に係る評価区分と同一の評価区分を表わす複数の評価区分データをサーチするものと、
前記サーバに設けられ、目標評価結果を決定する決定手段であって、前記サーチ手段でサーチされた複数の評価区分データとそれぞれ組をなす複数の評価結果データに基づいて前記目標評価結果の決定を行なうものと、
前記サーバに設けられ、前記目標評価結果に近づくように前記評価処理を修正して前記評価手段から第２の評価結果を得る修正手段と
を備え、いずれかのユーザ端末における評価区分の指定に基づいて該ユーザ端末の表示手段に前記第２の評価結果を表示させる構成にした音評価システム。
【請求項４】
いずれかのユーザ端末における前記第２の評価結果の表示に関連して該ユーザ端末の表示手段に前記第１の評価結果を表示させる構成にした請求項１〜３のいずれかに記載の音評価システム。
【請求項５】
前記修正手段が前記評価処理を修正するために今回用いた修正情報を保存する保存手段を前記サーバに設け、前記評価手段で次回に第１の評価結果を求める際には前記保存手段に保存された修正情報を参照して該第１の評価結果を求める構成にした請求項１〜３のいずれかに記載の音評価システム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２００７−２４１０１５（Ｐ２００７−２４１０１５Ａ）
【公開日】平成１９年９月２０日（２００７．９．２０）
【国際特許分類】
【出願番号】特願２００６−６５１７５（Ｐ２００６−６５１７５）
【出願日】平成１８年３月１０日（２００６．３．１０）
【出願人】（０００００４０７５）ヤマハ株式会社 (5,930)
【Ｆターム（参考）】
【公開日】平成１９年９月２０日（２００７．９．２０）
【国際特許分類】
【出願日】平成１８年３月１０日（２００６．３．１０）
【出願人】（０００００４０７５）ヤマハ株式会社 (5,930)
【Ｆターム（参考）】
[ Back to top ]