通信装置
【課題】複数の通信端末間で音声通信を行う際に、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することのできる技術を提供する。
【解決手段】端末１０は、他の端末１０からデータを受信すると、受信したデータから通知データを抽出する。複数の通知データは通知音合成部１３の導通判定部１３１に供給される。導通判定部１３１は、供給される通知データが全て「ＯＫ」を示す値である場合には、効果音成分が出力されるようにスイッチ部を切り替える一方、それ以外の場合には、効果音成分が出力されないようにスイッチ部を切り替える。通知音合成部１３の合成音生成部１３３は、マイクロホンＭＣから出力される音声信号に基づいた効果音成分を出力する。
【解決手段】端末１０は、他の端末１０からデータを受信すると、受信したデータから通知データを抽出する。複数の通知データは通知音合成部１３の導通判定部１３１に供給される。導通判定部１３１は、供給される通知データが全て「ＯＫ」を示す値である場合には、効果音成分が出力されるようにスイッチ部を切り替える一方、それ以外の場合には、効果音成分が出力されないようにスイッチ部を切り替える。通知音合成部１３の合成音生成部１３３は、マイクロホンＭＣから出力される音声信号に基づいた効果音成分を出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信装置に関する。
【背景技術】
【０００２】
近年、通信網を介して接続された複数の通信端末を用いて会議を行う遠隔会議システムが普及している。このような遠隔会議システムにおいては、発話者と聴取者が直接対面していないため、発話者が聴取者の反応を感じることが困難であり、自身の声が相手に届いているかを不安に感じる場合がある。そこで、特許文献１には、発話者の不安を解消するために、送信した音声・画像データが受信側においてどのような状態で届いているかを送信側でリアルタイムに表示する技術が提案されている。また、特許文献２には、ネットワークを介して接続された複数の拠点同士で音声データの送受信する音声会議システムにおいて、ネットワークを介して接続された他の拠点（自拠点）から伝送された入力音声のエコーの音声信号を他の拠点に送り返すことにより、送り返された他の拠点にて、相手拠点において期待する明瞭な音声品質で再生されているかを確認することができる技術が提案されている。
【特許文献１】特開２００５−２６９４９８号公報
【特許文献２】特開２００７−２７４１７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上述の特許文献１に記載の技術では、表示モニタが必要であり、表示モニタのない音声会議装置には適用することができない。また、特許文献２に記載の技術では、自身の音声のエコー音を聞いて確認する必要があるが、確認と会話が別々になってしまうため、会話をしながら同時に確認することはできない。
本発明は上述した背景に鑑みてなされたものであり、複数の通信端末間で音声通信を行う際に、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することのできる技術を提供することを目的とする。
【課題を解決するための手段】
【０００４】
上記課題を解決するために、本発明は、通信ネットワークを介して接続された他の端末から送信されてくるデータを受信する受信手段と、収音手段によって収音された音声を表す音声データを、前記他の端末へ送信する送信手段と、前記収音手段によって収音された音声を表す音声データを用いて、該音声の音響効果の成分を表す効果音成分信号を生成する効果音成分生成手段と、前記受信手段によって受信されるデータを解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを判定する判定手段と、前記判定手段による判定結果が肯定的である場合に、前記効果音成分生成手段によって生成された効果音成分信号を、放音手段に出力する放音制御手段とを具備することを特徴とする通信装置を提供する。
【０００５】
本発明の好ましい態様において、前記受信手段は、複数の端末からデータを受信し、前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、前記効果音成分生成手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方に応じて、生成する効果音成分信号を異ならせてもよい。
【０００６】
本発明の更に好ましい態様において、前記受信手段は、複数の端末からデータを受信し、前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、前記放音制御手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方が予め定められた条件を満たす場合に、前記効果音成分信号を前記放音手段に出力してもよい。
【０００７】
また、本発明の更に好ましい態様において、前記複数の端末の位置を示す位置データを前記端末毎に記憶する位置データ記憶手段を具備し、前記放音制御手段は、前記放音手段から放音される音声が、前記位置データ記憶手段に記憶された位置データと前記判定手段による前記端末毎の判定結果とに応じた方向に音像定位するように制御してもよい。
【０００８】
また、本発明の更に好ましい態様において、前記放音手段による放音の態様を示す放音態様データを、前記端末毎に記憶する放音態様データ記憶手段を具備し、前記放音制御手段は、前記判定手段による判定結果が肯定的である端末に対応する放音態様データの示す放音態様で放音させてもよい。
【０００９】
また、本発明の更に好ましい態様において、前記判定手段は、前記受信手段によって受信されるデータから、前記送信手段によって送信された音声データが前記他の端末で正常に再生されているか否かを示す通知データを抽出し、抽出した通知データに応じて判定してもよい。
【００１０】
また、本発明の更に好ましい態様において、前記判定手段は、前記受信手段によって受信される音声データの音圧を検出し、検出した音圧が予め定められた条件を満たすか否かを判定してもよい。
【００１１】
また、本発明の更に好ましい態様のおいて、前記受信手段は、音声データを含むデータを前記他の端末から受信し、前記判定手段は、前記受信手段によって受信されるデータに含まれる音声データを解析し、解析結果に応じて判定してもよい。
【００１２】
また、音声又は音声の特徴を表す照合データを記憶する照合データ記憶手段を具備し、前記判定手段は、前記受信手段によって受信される音声データを前記照合データ記憶手段に記憶された照合データと照合し、照合結果が予め定められた条件を満たす音声データが含まれるか否かを判定してもよい。
【発明の効果】
【００１３】
本発明によれば、複数の通信端末間で音声通信を行う際に、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することができる。
【発明を実施するための最良の形態】
【００１４】
＜構成＞
図１は、この発明の一実施形態である遠隔会議システム１の構成を示すブロック図である。この遠隔会議システム１は、各地に設置された複数の端末１０ａ，１０ｂ，１０ｃ…が、インターネット等の通信網２０に接続されて構成される。なお、以下の説明においては、説明の便宜上、端末１０ａ，１０ｂ，１０ｃ…を各々区別する必要がない場合には、これらを「端末１０」と称して説明する。遠隔会議の参加者が端末１０を用いて音声通信を行うことで、遠隔会議が実現される。
【００１５】
図２は、端末１０の構成の一例を示すブロック図である。図において、マイクロホンＭＣは、会議に参加している者（以下「参加者」という）が発声した音声を収音し、収音した音声を表す音声信号（アナログ信号）を出力する収音手段である。マイクロホンＭＣから出力される音声信号は、ＣＯＤＥＣ１６に出力される。ＣＯＤＥＣ１６は、マイクロホンＭＣから出力される音声信号をデジタルデータに変換する。操作部１８は、会議の参加者による操作に応じた信号を出力する。操作部１８には、会議の参加者が他の参加者の話をきちんと聞いている旨を入力するための専用のボタンＢ１が設けられている。以下の説明では、説明の便宜上、ボタンＢ１が押下されたときに操作部１８から出力される信号を「操作信号Ｓ１」と称して説明する。操作部１８から出力される操作信号Ｓ１はパケット合成部１７に出力される。パケット合成部１７は、操作部１８から出力される操作信号Ｓ１を検出し、操作信号Ｓ１が検出されたタイミングで検出した操作信号Ｓ１に応じて通知データを生成する。パケット合成部１７は、ＣＯＤＥＣ１６から出力される音声データと、操作部１８から出力される操作信号Ｓ１に応じた通知データとをパケット化して他の端末１０へ送信する。この通知データは、参加者が専用のボタンＢ１を能動的に押下することによって生成されるデータであるから、会議の参加者が発話者の話をきちんと聞いているかを示すデータとして用いることができる。
【００１６】
端末１０には、音声通信を行う他の端末１０毎にそれぞれデータ受信部２２が設けられる。端末１０は、他の端末１０のそれぞれから受信されるデータを個別に受信する。パケット分離部１１は、通信網２０を介して接続された他の端末１０から送信されてくるデータを受信する。他の端末１０から送信されてくるデータには、他の端末１０のマイクロホンＭＣで収音された音声を表す音声データと、他の参加者の聴取状況（参加者が発話者の話をきちんと聞いているか否か）を示す通知データとが含まれる。パケット分離部１１は、受信したデータから音声データと通知データとを分離し、音声データをＣＯＤＥＣ１２に出力するとともに、通知データを通知音合成部１３に出力する。ＣＯＤＥＣ１２は、受信された音声データをデコードし、音声ミキサ１４に出力する。音声ミキサ１４は、複数の他の端末１０のそれぞれに対応するＣＯＤＥＣ１２，１２，…から出力される音声信号をミキシングし、加算器１５に出力する。
【００１７】
通知音合成部１３は、パケット分離部１１から供給される他端末１０の通知データに応じて、聴取者が発話者の話をきちんと聞いているか否かを判定し、判定結果が肯定的である場合に、マイクロホンＭＣから出力される音声信号を用いて、音声の音響効果の成分を表す効果音成分信号を生成する。
図３は、通知音合成部１３の構成の一例を示すブロック図である。図において、導通判定部１３１は、他の端末１０から送信されてくる通知データを端末１０毎に判定し、端末１０毎の通知データが予め定められた条件を満たすか否かを判定する。この実施形態では、導通判定部１３１は、他の端末１０から受信した通知データの値が全て「ＯＫ」を示す値である場合に、予め定められた条件を満たす（以下「導通ＯＫ」という）と判定する。一方、他の端末１０から受信された通知データのうちの少なくともいずれかひとつが「ＮＧ」である場合には、導通判定部１３１は予め定められた条件を満たさない（以下「導通ＮＧ」という）と判定する。スイッチ部１３２は、導通判定部１３１の制御によって切り替えられる。導通判定部１３１は、判定結果が「導通ＯＫ」である場合には効果音成分が出力されるようにスイッチ部１３２を切り替える。一方、判定結果が「導通ＮＧ」である場合には、導通判定部１３１は、効果音成分が出力されないようにスイッチ部１３２を切り替える。
【００１８】
合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を用いて、その音声信号の示す音声の音響効果の成分を表す効果音成分信号を生成し、生成した効果音成分信号をスイッチ部１３２に出力する。ここでは、合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を用いて、所定の音響空間において該音声信号の表す音声が放音されたときのリバーブ効果音を表す音声信号（効果音成分信号）を生成する。
図４は、合成音生成部１３３が行う処理の内容の一例を示す図である。図４（ａ）は、マイクロホンＭＣから出力される音声信号の一例を示す図であり、図４（ｂ）は、合成音生成部１３３が生成する効果音成分信号の一例を表す図である。図において、横軸は時刻を示し、縦軸は振幅を示す。図示のように、合成音生成部１３３は、マイクロホンＭＣから出力される音声信号に対してリバーブ効果が付与された音声信号を生成するのではなく、マイクロホンＭＣから出力される音声信号の表す音声が所定の空間において放音されたときに発生し得るリバーブ効果音のみを表す音声信号を生成する。
【００１９】
通知音合成部１３から出力される効果音成分信号は、加算器１５に出力される。加算器１５では、音声ミキサ１４から出力される音声信号と通知音合成部１３から出力される効果音成分信号とが加算され、スピーカＳＰに出力される。これにより、スピーカＳＰからは、他の端末１０から受信された音声データの表す音声に加えて、効果音成分が放音される。
【００２０】
＜動作＞
次に、本実施形態の動作について説明する。まず、端末１０は相互に音声通信を行う。端末１０は、マイクロホンＭＣで収音した音声を表す音声データを、他の端末１０に送信するとともに、他の端末１０から通信網２０を介して受信される音声データを受信し、受信した音声データをスピーカＳＰから音として放音する。これにより、遠隔会議が実現される。
【００２１】
端末１０の利用者は、操作部１８を操作して、専用のボタンＢ１を所定時間長毎に押下しつつ、発話者の話を聞く。ここで、ボタンＢ１が押下されると、操作部１８は、操作された内容に応じて操作信号Ｓ１を出力する。マイクロホンＭＣで収音された音声はＣＯＤＥＣ１６でコード化されて音声データとしてパケット合成部１７に出力される。パケット合成部１７は、ＣＯＤＥＣ１６から出力される音声データと操作部１８から出力された操作信号Ｓ１に応じた通知データとをパケット化して、他の端末１０へ送信する。
【００２２】
一方、パケット分離部１１は、受信したデータから音声データと通知データとを分離し、音声データをＣＯＤＥＣ１２に出力するとともに、通知データを通知音合成部１３に出力する。ＣＯＤＥＣ１２は、供給される音声データをデコードし、音声ミキサ１４に出力する。音声ミキサ１４は、複数のＣＯＤＥＣ１２から出力される音声データをミキシングして加算器１５に出力する。
【００２３】
パケット分離部１１で分離された複数の通知データは通知音合成部１３の導通判定部１３１に供給される。導通判定部１３１は、供給される通知データの値が全て「ＯＫ」である場合には、効果音成分信号が出力されるようにスイッチ部１３２を切り替える一方、それ以外の場合には、効果音成分信号が出力されないようにスイッチ部１３２を切り替える。
【００２４】
通知音合成部１３の合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を基にして効果音成分信号を生成し、加算器１５に出力する。すなわち、通知音合成部１３は、他の端末１０から受信した通知データの値が全て「ＯＫ」である場合に効果音成分信号を出力する。一方、他の端末１０から受信した通知データのなかに「ＮＧ」であるものが含まれる場合には、スイッチ部１３２が切り替えられることにより効果音成分信号は出力されない。
【００２５】
合成音生成部１３３から出力される効果音成分信号は、加算器１５において、音声ミキサ１４から出力される音声信号とミキシングされ、スピーカＳＰに出力される。これにより、スピーカＳＰからは、他の端末１０から受信された音声データの表す音声に加えて、効果音成分信号の表す効果音成分が放音される。
【００２６】
このように、本実施形態によれば、端末１０は、マイクロホンＭＣから出力される音声信号から効果音成分信号を生成し、「導通ＯＫ」である場合に効果音成分を再生する。このようにすることにより、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することができる。
また、本実施形態によれば、接続地点数が多い場合でも全体を総合評価して一つの効果音にするので話者が全体を把握するのが容易になる。
また、本実施形態では、効果音が付与された音声全体ではなく、効果音のみを出力することで、聴取者の聴取状況を発話者に対してより自然に通知することができる。
【００２７】
＜変形例＞
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されることなく、他の様々な形態で実施可能である。以下にその例を示す。なお、以下の各態様を適宜に組み合わせてもよい。
（１）上述の実施形態では、本発明に係る端末を用いて遠隔会議を行う場合について説明したが、本発明はこれに限らず、例えば、通信ネットワークを介して講義や講演を行う場合においても本発明を適用することができる。
【００２８】
（２）上述の実施形態では、合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を用いてリバーブ効果音を表す効果音成分信号を生成したが、生成する効果音成分信号はこれに限らず、例えば、エコーやサラウンド効果等の効果音を表す音声信号であってもよく、空間系エフェクトの効果音（音響成分）を表す音声信号であればどのようなものであってもよい。
また、合成音生成部１３３が生成する効果音成分信号は音響成分を表す音声信号に限らず、例えば、音声信号との差が所定度となるようなハモリ音を表す音声信号を効果音成分信号として生成してもよい。
【００２９】
（３）上述の実施形態では、他の端末１０から受信した通知データが全て「ＯＫ」である場合にのみ効果音成分を放音するようにしたが、効果音成分を放音する判定の態様はこれに限らず、例えば、他の端末１０から受信した通知データの過半数が「ＯＫ」である場合に効果音成分を放音するようにしてもよく、また、他の端末１０から受信した通知データにおいて「ＯＫ」のものが予め定められた閾値以上ある場合に、効果音成分を放音するようにしてもよい。要は、他の端末１０のうちの導通がＯＫである端末の数及び割合の少なくともいずれか一方が予め定められた条件を満たす場合に効果音成分信号を出力するようにすればよい。
【００３０】
また、上述の実施形態において、端末１０が、通知データが「ＯＫ」である端末１０の数や割合に応じて、生成する効果音成分信号を異ならせるようにしてもよい。この場合は、例えば、通知音合成部１３が、「ＯＫ」を示す通知データの数が多いほど（すなわち聞いている人が多いほど）音響効果が高くなる（効果音が豪華になる）ように効果音成分信号を生成するようにしてもよい。この場合は、発話者の話を聴取している者が多いほど発話者の声に対する空間エフェクトが豪華になっていくから、これにより、発話者は、聴取者が多いほど気持ちよく話すことができる。また、例えば、端末１０が、通知データが「ＯＫ」である端末１０の数が多いほど効果音の音圧を大きくするようにしてもよく、また、例えば、通知データが「ＯＫ」である端末１０の数に応じた和音を放音するようにしてもよい。また、例えば、通知データが「ＯＫ」である端末１０の割合が大きいほど高い音程の効果音を放音するようにしてもよい。
【００３１】
また、上述の実施形態において、端末１０が、聞いている人が少ない（「ＮＧ」を示す通知データの数が多い）場合に、効果音成分に代えてオーディエンスの雑音や口笛音を放音するようにしてもよい。
また、上述の実施形態では、「導通ＯＫ」である場合に効果音を放音するようにしたが、これに限らず、例えば、「導通ＮＧ」と判定された場合に効果音を放音するようにしてもよく、端末１０の設計等に応じて適宜変更可能である。要は、聴取者の聴取状況（発話者の話を聞いているか否か、音声通信が正常に確立されているか否か、等）を、発話者に対して報知し得る態様であればよい。
【００３２】
（４）上述の実施形態では、利用者によって専用のボタンＢ１が押下された旨を示す通知データを用いたが、通知データはこれに限らず、通知音合成部１３が、端末１０のマイクロホンＭＣによって収音された音声を表す音声データを解析することによって通知データを生成するようにしてもよい。要は、端末１０が、自端末から送信した音声データが他の端末で正常に再生されているか否かを示すデータを通知データとして用いるようにしてもよい。要は、相手がきちんと話を聞いている（又は通信が正常に接続されている）ことを示す情報であればどのようなものであってもよい。
【００３３】
（５）上述の実施形態では、他の端末１０から受信する通知データの値を判定することによって、導通がＯＫか否かを判定したが、導通の判定方法はこれに限らず、例えば、他の端末１０から受信する音声データを解析し、解析結果に応じて判定するようにしてもよい。より具体的には、例えば、他の端末１０から受信される音声データの音圧を検出し、検出した音圧が予め定められた条件を満たす場合に、導通ＯＫであると判定するようにしてもよい。
【００３４】
また、他の例として、例えば、他の端末１０から受信される音声データからうなずき音が検出されるか否かによって判定するようにしてもよい。この場合の具体的な構成の一例について、図５を参照しつつ説明する。図５に示す端末１０Ａにおいて、パケット分離部１１，ＣＯＤＥＣ１２，通知音合成部１３，加算器１５，ＣＯＤＥＣ１６，パケット合成部１７は、上述した実施形態における端末１０の各部と同様であり、ここではその詳細な説明を省略する。図５において、メモリ２４には、うなずき音声やうなずき音声の特徴を表す照合用データが記憶されている。音声解析部２３は、他の端末１０から受信された音声データをメモリ２１に記憶された照合データと照合し、受信した音声データから照合結果が予め定められた条件を満たすデータ（以下「うなずき音データ」という）を検出する。音声解析部２３は、予め定められた頻度でうなずき音データが検出されている場合には「ＯＫ」を示す導通情報を通知音合成部１３に出力する一方、それ以外の場合には「ＮＧ」を示す導通情報を通知音合成部１３に出力する。なお、通知音合成部１３の動作は上述の実施形態と同様であり、ここではその詳細な説明を省略する。
すなわち、この態様では、相手が話しを聞いているか否かをうなずき音声データが検出されるか否かによって判定する。うなずき音声データの検出の態様としては、照合用データと照合して検出するようにしてもよく、また、他の端末１０から受信された音声データを解析し、音声認識できなかったものをうなずき音声として検出するようにしてもよい。
【００３５】
（６）また、上述の実施形態において、画像解析によってうなずき動作を検出するようにしてもよい。この場合は、端末１０に利用者を撮影する撮影手段を設ける構成とし、端末１０が、撮影手段から出力される映像データを画像解析し、解析結果に応じてうなずき動作を検出し、うなずき動作が検出されたか否かを判定するようにすればよい。
【００３６】
（７）上述の実施形態において、端末１０が、他の端末１０の位置情報に応じて、放音する効果音をパンニングするようにしてもよい。この場合は、他の端末１０の位置を示す位置データを他の端末１０毎に記憶しておき、端末１０が、端末１０毎の判定結果と各端末の位置情報とに応じた方向に音像定位するように制御するようにしてもよい。
【００３７】
（８）上述の実施形態において、端末１０が、話者のジェスチャーを検出し、検出結果に応じた効果音を放音するようにしてもよい。この場合、ジェスチャーは国によって意味が異なるため、国毎にデータベースを異ならせるようにしてもよい。具体的には、端末１０に利用者を撮影する撮影手段を設ける構成とし、端末１０が、撮影手段から出力される映像データを画像解析し、解析結果を予め定められたデータベースに登録された照合用データと照合して話者のジェスチャーを検出し、検出したジェスチャーに対応する効果音を、ジェスチャーと効果音との対応関係を記憶するデータベースを参照して特定し、特定した効果音を放音するようにしてもよい。
【００３８】
（９）上述の実施形態における端末１０又は端末１０Ａの各部は、ハードウェアとして構成されてもよく、また、ＣＰＵ（Central Processing Unit）等の制御部がハードウェア等の記憶手段に記憶されたコンピュータプログラムを実行することによってソフトウェアとして実現するようにしてもよい。また、この場合、制御部によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記録した状態で提供し得る。また、インターネットのようなネットワーク経由で各装置にダウンロードさせることも可能である。
【図面の簡単な説明】
【００３９】
【図１】遠隔会議システムの構成の一例を示すブロック図である。
【図２】端末の構成の一例を示すブロック図である。
【図３】通知音合成部の構成の一例を示すブロック図である。
【図４】合成音生成部が行う処理の内容を説明するための図である。
【図５】端末の構成の一例を示すブロック図である。
【符号の説明】
【００４０】
１…遠隔会議システム、１０…端末、１１…パケット分離部、１２…ＣＯＤＥＣ、１３…通知音合成部、１４…音声ミキサ、１５…加算器、１６…ＣＯＤＥＣ、１７…パケット合成部、１８…操作部、２０…通信網、２４…メモリ、２３…音声解析部、２２…データ受信部、１３１…導通判定部、１３２…スイッチ部、１３３…合成音生成部。
【技術分野】
【０００１】
本発明は、通信装置に関する。
【背景技術】
【０００２】
近年、通信網を介して接続された複数の通信端末を用いて会議を行う遠隔会議システムが普及している。このような遠隔会議システムにおいては、発話者と聴取者が直接対面していないため、発話者が聴取者の反応を感じることが困難であり、自身の声が相手に届いているかを不安に感じる場合がある。そこで、特許文献１には、発話者の不安を解消するために、送信した音声・画像データが受信側においてどのような状態で届いているかを送信側でリアルタイムに表示する技術が提案されている。また、特許文献２には、ネットワークを介して接続された複数の拠点同士で音声データの送受信する音声会議システムにおいて、ネットワークを介して接続された他の拠点（自拠点）から伝送された入力音声のエコーの音声信号を他の拠点に送り返すことにより、送り返された他の拠点にて、相手拠点において期待する明瞭な音声品質で再生されているかを確認することができる技術が提案されている。
【特許文献１】特開２００５−２６９４９８号公報
【特許文献２】特開２００７−２７４１７６号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上述の特許文献１に記載の技術では、表示モニタが必要であり、表示モニタのない音声会議装置には適用することができない。また、特許文献２に記載の技術では、自身の音声のエコー音を聞いて確認する必要があるが、確認と会話が別々になってしまうため、会話をしながら同時に確認することはできない。
本発明は上述した背景に鑑みてなされたものであり、複数の通信端末間で音声通信を行う際に、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することのできる技術を提供することを目的とする。
【課題を解決するための手段】
【０００４】
上記課題を解決するために、本発明は、通信ネットワークを介して接続された他の端末から送信されてくるデータを受信する受信手段と、収音手段によって収音された音声を表す音声データを、前記他の端末へ送信する送信手段と、前記収音手段によって収音された音声を表す音声データを用いて、該音声の音響効果の成分を表す効果音成分信号を生成する効果音成分生成手段と、前記受信手段によって受信されるデータを解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを判定する判定手段と、前記判定手段による判定結果が肯定的である場合に、前記効果音成分生成手段によって生成された効果音成分信号を、放音手段に出力する放音制御手段とを具備することを特徴とする通信装置を提供する。
【０００５】
本発明の好ましい態様において、前記受信手段は、複数の端末からデータを受信し、前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、前記効果音成分生成手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方に応じて、生成する効果音成分信号を異ならせてもよい。
【０００６】
本発明の更に好ましい態様において、前記受信手段は、複数の端末からデータを受信し、前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、前記放音制御手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方が予め定められた条件を満たす場合に、前記効果音成分信号を前記放音手段に出力してもよい。
【０００７】
また、本発明の更に好ましい態様において、前記複数の端末の位置を示す位置データを前記端末毎に記憶する位置データ記憶手段を具備し、前記放音制御手段は、前記放音手段から放音される音声が、前記位置データ記憶手段に記憶された位置データと前記判定手段による前記端末毎の判定結果とに応じた方向に音像定位するように制御してもよい。
【０００８】
また、本発明の更に好ましい態様において、前記放音手段による放音の態様を示す放音態様データを、前記端末毎に記憶する放音態様データ記憶手段を具備し、前記放音制御手段は、前記判定手段による判定結果が肯定的である端末に対応する放音態様データの示す放音態様で放音させてもよい。
【０００９】
また、本発明の更に好ましい態様において、前記判定手段は、前記受信手段によって受信されるデータから、前記送信手段によって送信された音声データが前記他の端末で正常に再生されているか否かを示す通知データを抽出し、抽出した通知データに応じて判定してもよい。
【００１０】
また、本発明の更に好ましい態様において、前記判定手段は、前記受信手段によって受信される音声データの音圧を検出し、検出した音圧が予め定められた条件を満たすか否かを判定してもよい。
【００１１】
また、本発明の更に好ましい態様のおいて、前記受信手段は、音声データを含むデータを前記他の端末から受信し、前記判定手段は、前記受信手段によって受信されるデータに含まれる音声データを解析し、解析結果に応じて判定してもよい。
【００１２】
また、音声又は音声の特徴を表す照合データを記憶する照合データ記憶手段を具備し、前記判定手段は、前記受信手段によって受信される音声データを前記照合データ記憶手段に記憶された照合データと照合し、照合結果が予め定められた条件を満たす音声データが含まれるか否かを判定してもよい。
【発明の効果】
【００１３】
本発明によれば、複数の通信端末間で音声通信を行う際に、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することができる。
【発明を実施するための最良の形態】
【００１４】
＜構成＞
図１は、この発明の一実施形態である遠隔会議システム１の構成を示すブロック図である。この遠隔会議システム１は、各地に設置された複数の端末１０ａ，１０ｂ，１０ｃ…が、インターネット等の通信網２０に接続されて構成される。なお、以下の説明においては、説明の便宜上、端末１０ａ，１０ｂ，１０ｃ…を各々区別する必要がない場合には、これらを「端末１０」と称して説明する。遠隔会議の参加者が端末１０を用いて音声通信を行うことで、遠隔会議が実現される。
【００１５】
図２は、端末１０の構成の一例を示すブロック図である。図において、マイクロホンＭＣは、会議に参加している者（以下「参加者」という）が発声した音声を収音し、収音した音声を表す音声信号（アナログ信号）を出力する収音手段である。マイクロホンＭＣから出力される音声信号は、ＣＯＤＥＣ１６に出力される。ＣＯＤＥＣ１６は、マイクロホンＭＣから出力される音声信号をデジタルデータに変換する。操作部１８は、会議の参加者による操作に応じた信号を出力する。操作部１８には、会議の参加者が他の参加者の話をきちんと聞いている旨を入力するための専用のボタンＢ１が設けられている。以下の説明では、説明の便宜上、ボタンＢ１が押下されたときに操作部１８から出力される信号を「操作信号Ｓ１」と称して説明する。操作部１８から出力される操作信号Ｓ１はパケット合成部１７に出力される。パケット合成部１７は、操作部１８から出力される操作信号Ｓ１を検出し、操作信号Ｓ１が検出されたタイミングで検出した操作信号Ｓ１に応じて通知データを生成する。パケット合成部１７は、ＣＯＤＥＣ１６から出力される音声データと、操作部１８から出力される操作信号Ｓ１に応じた通知データとをパケット化して他の端末１０へ送信する。この通知データは、参加者が専用のボタンＢ１を能動的に押下することによって生成されるデータであるから、会議の参加者が発話者の話をきちんと聞いているかを示すデータとして用いることができる。
【００１６】
端末１０には、音声通信を行う他の端末１０毎にそれぞれデータ受信部２２が設けられる。端末１０は、他の端末１０のそれぞれから受信されるデータを個別に受信する。パケット分離部１１は、通信網２０を介して接続された他の端末１０から送信されてくるデータを受信する。他の端末１０から送信されてくるデータには、他の端末１０のマイクロホンＭＣで収音された音声を表す音声データと、他の参加者の聴取状況（参加者が発話者の話をきちんと聞いているか否か）を示す通知データとが含まれる。パケット分離部１１は、受信したデータから音声データと通知データとを分離し、音声データをＣＯＤＥＣ１２に出力するとともに、通知データを通知音合成部１３に出力する。ＣＯＤＥＣ１２は、受信された音声データをデコードし、音声ミキサ１４に出力する。音声ミキサ１４は、複数の他の端末１０のそれぞれに対応するＣＯＤＥＣ１２，１２，…から出力される音声信号をミキシングし、加算器１５に出力する。
【００１７】
通知音合成部１３は、パケット分離部１１から供給される他端末１０の通知データに応じて、聴取者が発話者の話をきちんと聞いているか否かを判定し、判定結果が肯定的である場合に、マイクロホンＭＣから出力される音声信号を用いて、音声の音響効果の成分を表す効果音成分信号を生成する。
図３は、通知音合成部１３の構成の一例を示すブロック図である。図において、導通判定部１３１は、他の端末１０から送信されてくる通知データを端末１０毎に判定し、端末１０毎の通知データが予め定められた条件を満たすか否かを判定する。この実施形態では、導通判定部１３１は、他の端末１０から受信した通知データの値が全て「ＯＫ」を示す値である場合に、予め定められた条件を満たす（以下「導通ＯＫ」という）と判定する。一方、他の端末１０から受信された通知データのうちの少なくともいずれかひとつが「ＮＧ」である場合には、導通判定部１３１は予め定められた条件を満たさない（以下「導通ＮＧ」という）と判定する。スイッチ部１３２は、導通判定部１３１の制御によって切り替えられる。導通判定部１３１は、判定結果が「導通ＯＫ」である場合には効果音成分が出力されるようにスイッチ部１３２を切り替える。一方、判定結果が「導通ＮＧ」である場合には、導通判定部１３１は、効果音成分が出力されないようにスイッチ部１３２を切り替える。
【００１８】
合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を用いて、その音声信号の示す音声の音響効果の成分を表す効果音成分信号を生成し、生成した効果音成分信号をスイッチ部１３２に出力する。ここでは、合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を用いて、所定の音響空間において該音声信号の表す音声が放音されたときのリバーブ効果音を表す音声信号（効果音成分信号）を生成する。
図４は、合成音生成部１３３が行う処理の内容の一例を示す図である。図４（ａ）は、マイクロホンＭＣから出力される音声信号の一例を示す図であり、図４（ｂ）は、合成音生成部１３３が生成する効果音成分信号の一例を表す図である。図において、横軸は時刻を示し、縦軸は振幅を示す。図示のように、合成音生成部１３３は、マイクロホンＭＣから出力される音声信号に対してリバーブ効果が付与された音声信号を生成するのではなく、マイクロホンＭＣから出力される音声信号の表す音声が所定の空間において放音されたときに発生し得るリバーブ効果音のみを表す音声信号を生成する。
【００１９】
通知音合成部１３から出力される効果音成分信号は、加算器１５に出力される。加算器１５では、音声ミキサ１４から出力される音声信号と通知音合成部１３から出力される効果音成分信号とが加算され、スピーカＳＰに出力される。これにより、スピーカＳＰからは、他の端末１０から受信された音声データの表す音声に加えて、効果音成分が放音される。
【００２０】
＜動作＞
次に、本実施形態の動作について説明する。まず、端末１０は相互に音声通信を行う。端末１０は、マイクロホンＭＣで収音した音声を表す音声データを、他の端末１０に送信するとともに、他の端末１０から通信網２０を介して受信される音声データを受信し、受信した音声データをスピーカＳＰから音として放音する。これにより、遠隔会議が実現される。
【００２１】
端末１０の利用者は、操作部１８を操作して、専用のボタンＢ１を所定時間長毎に押下しつつ、発話者の話を聞く。ここで、ボタンＢ１が押下されると、操作部１８は、操作された内容に応じて操作信号Ｓ１を出力する。マイクロホンＭＣで収音された音声はＣＯＤＥＣ１６でコード化されて音声データとしてパケット合成部１７に出力される。パケット合成部１７は、ＣＯＤＥＣ１６から出力される音声データと操作部１８から出力された操作信号Ｓ１に応じた通知データとをパケット化して、他の端末１０へ送信する。
【００２２】
一方、パケット分離部１１は、受信したデータから音声データと通知データとを分離し、音声データをＣＯＤＥＣ１２に出力するとともに、通知データを通知音合成部１３に出力する。ＣＯＤＥＣ１２は、供給される音声データをデコードし、音声ミキサ１４に出力する。音声ミキサ１４は、複数のＣＯＤＥＣ１２から出力される音声データをミキシングして加算器１５に出力する。
【００２３】
パケット分離部１１で分離された複数の通知データは通知音合成部１３の導通判定部１３１に供給される。導通判定部１３１は、供給される通知データの値が全て「ＯＫ」である場合には、効果音成分信号が出力されるようにスイッチ部１３２を切り替える一方、それ以外の場合には、効果音成分信号が出力されないようにスイッチ部１３２を切り替える。
【００２４】
通知音合成部１３の合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を基にして効果音成分信号を生成し、加算器１５に出力する。すなわち、通知音合成部１３は、他の端末１０から受信した通知データの値が全て「ＯＫ」である場合に効果音成分信号を出力する。一方、他の端末１０から受信した通知データのなかに「ＮＧ」であるものが含まれる場合には、スイッチ部１３２が切り替えられることにより効果音成分信号は出力されない。
【００２５】
合成音生成部１３３から出力される効果音成分信号は、加算器１５において、音声ミキサ１４から出力される音声信号とミキシングされ、スピーカＳＰに出力される。これにより、スピーカＳＰからは、他の端末１０から受信された音声データの表す音声に加えて、効果音成分信号の表す効果音成分が放音される。
【００２６】
このように、本実施形態によれば、端末１０は、マイクロホンＭＣから出力される音声信号から効果音成分信号を生成し、「導通ＯＫ」である場合に効果音成分を再生する。このようにすることにより、聴取者の聴取状況を、発話を妨げることなく発話者に対して報知することができる。
また、本実施形態によれば、接続地点数が多い場合でも全体を総合評価して一つの効果音にするので話者が全体を把握するのが容易になる。
また、本実施形態では、効果音が付与された音声全体ではなく、効果音のみを出力することで、聴取者の聴取状況を発話者に対してより自然に通知することができる。
【００２７】
＜変形例＞
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されることなく、他の様々な形態で実施可能である。以下にその例を示す。なお、以下の各態様を適宜に組み合わせてもよい。
（１）上述の実施形態では、本発明に係る端末を用いて遠隔会議を行う場合について説明したが、本発明はこれに限らず、例えば、通信ネットワークを介して講義や講演を行う場合においても本発明を適用することができる。
【００２８】
（２）上述の実施形態では、合成音生成部１３３は、マイクロホンＭＣから出力される音声信号を用いてリバーブ効果音を表す効果音成分信号を生成したが、生成する効果音成分信号はこれに限らず、例えば、エコーやサラウンド効果等の効果音を表す音声信号であってもよく、空間系エフェクトの効果音（音響成分）を表す音声信号であればどのようなものであってもよい。
また、合成音生成部１３３が生成する効果音成分信号は音響成分を表す音声信号に限らず、例えば、音声信号との差が所定度となるようなハモリ音を表す音声信号を効果音成分信号として生成してもよい。
【００２９】
（３）上述の実施形態では、他の端末１０から受信した通知データが全て「ＯＫ」である場合にのみ効果音成分を放音するようにしたが、効果音成分を放音する判定の態様はこれに限らず、例えば、他の端末１０から受信した通知データの過半数が「ＯＫ」である場合に効果音成分を放音するようにしてもよく、また、他の端末１０から受信した通知データにおいて「ＯＫ」のものが予め定められた閾値以上ある場合に、効果音成分を放音するようにしてもよい。要は、他の端末１０のうちの導通がＯＫである端末の数及び割合の少なくともいずれか一方が予め定められた条件を満たす場合に効果音成分信号を出力するようにすればよい。
【００３０】
また、上述の実施形態において、端末１０が、通知データが「ＯＫ」である端末１０の数や割合に応じて、生成する効果音成分信号を異ならせるようにしてもよい。この場合は、例えば、通知音合成部１３が、「ＯＫ」を示す通知データの数が多いほど（すなわち聞いている人が多いほど）音響効果が高くなる（効果音が豪華になる）ように効果音成分信号を生成するようにしてもよい。この場合は、発話者の話を聴取している者が多いほど発話者の声に対する空間エフェクトが豪華になっていくから、これにより、発話者は、聴取者が多いほど気持ちよく話すことができる。また、例えば、端末１０が、通知データが「ＯＫ」である端末１０の数が多いほど効果音の音圧を大きくするようにしてもよく、また、例えば、通知データが「ＯＫ」である端末１０の数に応じた和音を放音するようにしてもよい。また、例えば、通知データが「ＯＫ」である端末１０の割合が大きいほど高い音程の効果音を放音するようにしてもよい。
【００３１】
また、上述の実施形態において、端末１０が、聞いている人が少ない（「ＮＧ」を示す通知データの数が多い）場合に、効果音成分に代えてオーディエンスの雑音や口笛音を放音するようにしてもよい。
また、上述の実施形態では、「導通ＯＫ」である場合に効果音を放音するようにしたが、これに限らず、例えば、「導通ＮＧ」と判定された場合に効果音を放音するようにしてもよく、端末１０の設計等に応じて適宜変更可能である。要は、聴取者の聴取状況（発話者の話を聞いているか否か、音声通信が正常に確立されているか否か、等）を、発話者に対して報知し得る態様であればよい。
【００３２】
（４）上述の実施形態では、利用者によって専用のボタンＢ１が押下された旨を示す通知データを用いたが、通知データはこれに限らず、通知音合成部１３が、端末１０のマイクロホンＭＣによって収音された音声を表す音声データを解析することによって通知データを生成するようにしてもよい。要は、端末１０が、自端末から送信した音声データが他の端末で正常に再生されているか否かを示すデータを通知データとして用いるようにしてもよい。要は、相手がきちんと話を聞いている（又は通信が正常に接続されている）ことを示す情報であればどのようなものであってもよい。
【００３３】
（５）上述の実施形態では、他の端末１０から受信する通知データの値を判定することによって、導通がＯＫか否かを判定したが、導通の判定方法はこれに限らず、例えば、他の端末１０から受信する音声データを解析し、解析結果に応じて判定するようにしてもよい。より具体的には、例えば、他の端末１０から受信される音声データの音圧を検出し、検出した音圧が予め定められた条件を満たす場合に、導通ＯＫであると判定するようにしてもよい。
【００３４】
また、他の例として、例えば、他の端末１０から受信される音声データからうなずき音が検出されるか否かによって判定するようにしてもよい。この場合の具体的な構成の一例について、図５を参照しつつ説明する。図５に示す端末１０Ａにおいて、パケット分離部１１，ＣＯＤＥＣ１２，通知音合成部１３，加算器１５，ＣＯＤＥＣ１６，パケット合成部１７は、上述した実施形態における端末１０の各部と同様であり、ここではその詳細な説明を省略する。図５において、メモリ２４には、うなずき音声やうなずき音声の特徴を表す照合用データが記憶されている。音声解析部２３は、他の端末１０から受信された音声データをメモリ２１に記憶された照合データと照合し、受信した音声データから照合結果が予め定められた条件を満たすデータ（以下「うなずき音データ」という）を検出する。音声解析部２３は、予め定められた頻度でうなずき音データが検出されている場合には「ＯＫ」を示す導通情報を通知音合成部１３に出力する一方、それ以外の場合には「ＮＧ」を示す導通情報を通知音合成部１３に出力する。なお、通知音合成部１３の動作は上述の実施形態と同様であり、ここではその詳細な説明を省略する。
すなわち、この態様では、相手が話しを聞いているか否かをうなずき音声データが検出されるか否かによって判定する。うなずき音声データの検出の態様としては、照合用データと照合して検出するようにしてもよく、また、他の端末１０から受信された音声データを解析し、音声認識できなかったものをうなずき音声として検出するようにしてもよい。
【００３５】
（６）また、上述の実施形態において、画像解析によってうなずき動作を検出するようにしてもよい。この場合は、端末１０に利用者を撮影する撮影手段を設ける構成とし、端末１０が、撮影手段から出力される映像データを画像解析し、解析結果に応じてうなずき動作を検出し、うなずき動作が検出されたか否かを判定するようにすればよい。
【００３６】
（７）上述の実施形態において、端末１０が、他の端末１０の位置情報に応じて、放音する効果音をパンニングするようにしてもよい。この場合は、他の端末１０の位置を示す位置データを他の端末１０毎に記憶しておき、端末１０が、端末１０毎の判定結果と各端末の位置情報とに応じた方向に音像定位するように制御するようにしてもよい。
【００３７】
（８）上述の実施形態において、端末１０が、話者のジェスチャーを検出し、検出結果に応じた効果音を放音するようにしてもよい。この場合、ジェスチャーは国によって意味が異なるため、国毎にデータベースを異ならせるようにしてもよい。具体的には、端末１０に利用者を撮影する撮影手段を設ける構成とし、端末１０が、撮影手段から出力される映像データを画像解析し、解析結果を予め定められたデータベースに登録された照合用データと照合して話者のジェスチャーを検出し、検出したジェスチャーに対応する効果音を、ジェスチャーと効果音との対応関係を記憶するデータベースを参照して特定し、特定した効果音を放音するようにしてもよい。
【００３８】
（９）上述の実施形態における端末１０又は端末１０Ａの各部は、ハードウェアとして構成されてもよく、また、ＣＰＵ（Central Processing Unit）等の制御部がハードウェア等の記憶手段に記憶されたコンピュータプログラムを実行することによってソフトウェアとして実現するようにしてもよい。また、この場合、制御部によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記録した状態で提供し得る。また、インターネットのようなネットワーク経由で各装置にダウンロードさせることも可能である。
【図面の簡単な説明】
【００３９】
【図１】遠隔会議システムの構成の一例を示すブロック図である。
【図２】端末の構成の一例を示すブロック図である。
【図３】通知音合成部の構成の一例を示すブロック図である。
【図４】合成音生成部が行う処理の内容を説明するための図である。
【図５】端末の構成の一例を示すブロック図である。
【符号の説明】
【００４０】
１…遠隔会議システム、１０…端末、１１…パケット分離部、１２…ＣＯＤＥＣ、１３…通知音合成部、１４…音声ミキサ、１５…加算器、１６…ＣＯＤＥＣ、１７…パケット合成部、１８…操作部、２０…通信網、２４…メモリ、２３…音声解析部、２２…データ受信部、１３１…導通判定部、１３２…スイッチ部、１３３…合成音生成部。
【特許請求の範囲】
【請求項１】
通信ネットワークを介して接続された他の端末から送信されてくるデータを受信する受信手段と、
収音手段によって収音された音声を表す音声データを、前記他の端末へ送信する送信手段と、
前記収音手段によって収音された音声を表す音声データを用いて、該音声の音響効果の成分を表す効果音成分信号を生成する効果音成分生成手段と、
前記受信手段によって受信されるデータを解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを判定する判定手段と、
前記判定手段による判定結果が肯定的である場合に、前記効果音成分生成手段によって生成された効果音成分信号を、放音手段に出力する放音制御手段と
を具備することを特徴とする通信装置。
【請求項２】
前記受信手段は、複数の端末からデータを受信し、
前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、
前記効果音成分生成手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方に応じて、生成する効果音成分信号を異ならせる
ことを特徴とする請求項１に記載の通信装置。
【請求項３】
前記受信手段は、複数の端末からデータを受信し、
前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、
前記放音制御手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方が予め定められた条件を満たす場合に、前記効果音成分信号を前記放音手段に出力する
ことを特徴とする請求項１又は２に記載の通信装置。
【請求項４】
前記複数の端末の位置を示す位置データを前記端末毎に記憶する位置データ記憶手段を具備し、
前記放音制御手段は、前記放音手段から放音される音声が、前記位置データ記憶手段に記憶された位置データと前記判定手段による前記端末毎の判定結果とに応じた方向に音像定位するように制御する
ことを特徴とする請求項２又は３に記載の通信装置。
【請求項５】
前記放音手段による放音の態様を示す放音態様データを、前記端末毎に記憶する放音態様データ記憶手段
を具備し、
前記放音制御手段は、前記判定手段による判定結果が肯定的である端末に対応する放音態様データの示す放音態様で放音させる
ことを特徴とする請求項２乃至４のいずれか１項に記載の通信装置。
【請求項６】
前記判定手段は、前記受信手段によって受信されるデータから、前記送信手段によって送信された音声データが前記他の端末で正常に再生されているか否かを示す通知データを抽出し、抽出した通知データに応じて判定する
ことを特徴とする請求項１乃至５のいずれか１項に記載の通信装置。
【請求項７】
前記判定手段は、前記受信手段によって受信される音声データの音圧を検出し、検出した音圧が予め定められた条件を満たすか否かを判定する
ことを特徴とする請求項１乃至５のいずれか１項に記載の通信装置。
【請求項８】
前記受信手段は、音声データを含むデータを前記他の端末から受信し、
前記判定手段は、前記受信手段によって受信されるデータに含まれる音声データを解析し、解析結果に応じて判定する
ことを特徴とする請求項１乃至５のいずれか１項に記載の通信装置。
【請求項９】
音声又は音声の特徴を表す照合データを記憶する照合データ記憶手段
を具備し、
前記判定手段は、前記受信手段によって受信される音声データを前記照合データ記憶手段に記憶された照合データと照合し、照合結果が予め定められた条件を満たす音声データが含まれるか否かを判定する
ことを特徴とする請求項８に記載の通信装置。
【請求項１】
通信ネットワークを介して接続された他の端末から送信されてくるデータを受信する受信手段と、
収音手段によって収音された音声を表す音声データを、前記他の端末へ送信する送信手段と、
前記収音手段によって収音された音声を表す音声データを用いて、該音声の音響効果の成分を表す効果音成分信号を生成する効果音成分生成手段と、
前記受信手段によって受信されるデータを解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを判定する判定手段と、
前記判定手段による判定結果が肯定的である場合に、前記効果音成分生成手段によって生成された効果音成分信号を、放音手段に出力する放音制御手段と
を具備することを特徴とする通信装置。
【請求項２】
前記受信手段は、複数の端末からデータを受信し、
前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、
前記効果音成分生成手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方に応じて、生成する効果音成分信号を異ならせる
ことを特徴とする請求項１に記載の通信装置。
【請求項３】
前記受信手段は、複数の端末からデータを受信し、
前記判定手段は、前記受信手段によって受信されるデータを前記端末毎に解析し、解析結果に応じて該データが予め定められた条件を満たすか否かを前記端末毎に判定し、
前記放音制御手段は、前記判定手段による判定結果が肯定的である端末の数及び割合の少なくともいずれか一方が予め定められた条件を満たす場合に、前記効果音成分信号を前記放音手段に出力する
ことを特徴とする請求項１又は２に記載の通信装置。
【請求項４】
前記複数の端末の位置を示す位置データを前記端末毎に記憶する位置データ記憶手段を具備し、
前記放音制御手段は、前記放音手段から放音される音声が、前記位置データ記憶手段に記憶された位置データと前記判定手段による前記端末毎の判定結果とに応じた方向に音像定位するように制御する
ことを特徴とする請求項２又は３に記載の通信装置。
【請求項５】
前記放音手段による放音の態様を示す放音態様データを、前記端末毎に記憶する放音態様データ記憶手段
を具備し、
前記放音制御手段は、前記判定手段による判定結果が肯定的である端末に対応する放音態様データの示す放音態様で放音させる
ことを特徴とする請求項２乃至４のいずれか１項に記載の通信装置。
【請求項６】
前記判定手段は、前記受信手段によって受信されるデータから、前記送信手段によって送信された音声データが前記他の端末で正常に再生されているか否かを示す通知データを抽出し、抽出した通知データに応じて判定する
ことを特徴とする請求項１乃至５のいずれか１項に記載の通信装置。
【請求項７】
前記判定手段は、前記受信手段によって受信される音声データの音圧を検出し、検出した音圧が予め定められた条件を満たすか否かを判定する
ことを特徴とする請求項１乃至５のいずれか１項に記載の通信装置。
【請求項８】
前記受信手段は、音声データを含むデータを前記他の端末から受信し、
前記判定手段は、前記受信手段によって受信されるデータに含まれる音声データを解析し、解析結果に応じて判定する
ことを特徴とする請求項１乃至５のいずれか１項に記載の通信装置。
【請求項９】
音声又は音声の特徴を表す照合データを記憶する照合データ記憶手段
を具備し、
前記判定手段は、前記受信手段によって受信される音声データを前記照合データ記憶手段に記憶された照合データと照合し、照合結果が予め定められた条件を満たす音声データが含まれるか否かを判定する
ことを特徴とする請求項８に記載の通信装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図２】
【図３】
【図４】
【図５】
【公開番号】特開２０１０−２１９２４（Ｐ２０１０−２１９２４Ａ）
【公開日】平成２２年１月２８日（２０１０．１．２８）
【国際特許分類】
【出願番号】特願２００８−１８２５３８（Ｐ２００８−１８２５３８）
【出願日】平成２０年７月１４日（２００８．７．１４）
【出願人】（０００００４０７５）ヤマハ株式会社 (5,930)
【Ｆターム（参考）】
【公開日】平成２２年１月２８日（２０１０．１．２８）
【国際特許分類】
【出願日】平成２０年７月１４日（２００８．７．１４）
【出願人】（０００００４０７５）ヤマハ株式会社 (5,930)
【Ｆターム（参考）】
[ Back to top ]