通信装置、通信制御方法、および通信制御プログラム
【課題】通信コストを抑えると共に、通話が途切れることを防止する通信装置、通信制御方法、および通信制御プログラムを提供する。
【解決手段】ＩＰネットワーク１１の通信品質が劣化していない場合、画像データと音声データとを含む合成データが、ＩＰネットワーク１１を介して、通信装置２と他の拠点の通信装置との間で送受信される。ＩＰネットワーク１１の通信品質が劣化すると、音声データが送受信される経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。これによって、画像データは、ＩＰネットワークを介して送受信される（経路７３）。音声データは、ＰＳＴＮ網１２を介して送受信される（経路７４）。また、合成データが、テレビ電話装置４とＣＰＵ２１との間で送受信される（経路７２）。
【解決手段】ＩＰネットワーク１１の通信品質が劣化していない場合、画像データと音声データとを含む合成データが、ＩＰネットワーク１１を介して、通信装置２と他の拠点の通信装置との間で送受信される。ＩＰネットワーク１１の通信品質が劣化すると、音声データが送受信される経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。これによって、画像データは、ＩＰネットワークを介して送受信される（経路７３）。音声データは、ＰＳＴＮ網１２を介して送受信される（経路７４）。また、合成データが、テレビ電話装置４とＣＰＵ２１との間で送受信される（経路７２）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自装置とは異なる通信装置と自装置との間で、音声データと画像データとを送受信する通信装置、通信制御方法、および通信制御プログラムに関する。
【背景技術】
【０００２】
従来、自装置とは異なる通信装置と自装置との間で、音声データと画像データとを送受信する通信装置が知られている。例えば、特許文献１に記載のテレビ会議システムでは、テレビ会議のビデオデータを送受信するためにインターネットプロトコル（ＩＰ）ベースの通信チャネルを使用し、テレビ会議の音声データを送受信するために、ＰＳＴＮ網を使用して、テレビ会議を行っている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２００５−５２４３０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の通信装置では、音声データの送受信に、ＰＳＴＮ網（公衆回線網）を使用しているため、時間が経過する毎に使用料金が発生する。このため、通信コストが大きくなるという問題点があった。また、音声データと画像データとの送受信を、ＩＰネットワークを使用して行った場合、ＩＰネットワークの通信品質が劣化することによって、通話が途切れる場合があるという問題点があった。
【０００５】
本発明の目的は、通信コストを抑えると共に、通話が途切れることを防止する通信装置、通信制御方法、および通信制御プログラムを提供することである。
【課題を解決するための手段】
【０００６】
本発明の第１の態様に係る通信装置は、自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置であって、前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信手段と、前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信手段と、前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断手段とを備え、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信手段は、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する。
【０００７】
この場合において、他装置と自装置との間におけるＩＰネットワークの通信品質が劣化していない場合、第一合成データと第二合成データとがＩＰネットワークを介して送受信される。これによって、第一音声データ、第二音声データ、第一画像データ、および第二画像データがＩＰネットワークを介して送受信される。また、他装置と自装置との間におけるＩＰネットワークの通信品質が劣化した場合、第一音声データと第二音声データとが、公衆回線網を介して送受信される。つまり、第一音声データと第二音声データとを送受信する経路が、ＩＰネットワークから公衆回線網に切り替えられる。このように、ＩＰネットワークの通信品質が劣化した場合にのみ公衆回線網が使用されるので、常に公衆回線網を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワークの通信品質が劣化した場合に、第一音声データと第二音声データとを送受信する経路が公衆回線網に切り替えられるため、ＩＰネットワークの通信品質の劣化によって通話が途切れることを防止できる。
【０００８】
前記通信装置は、音声取得手段によって取得された音声と、画像取得手段によって取得された画像とを符号化して前記第一合成データを作成し、前記通信装置に送信する第一合成データ送信手段と、前記通信装置から送信された前記第二合成データに含まれる前記第二画像データに基づく画像を表示手段に表示させる表示制御手段と、前記第二合成データに含まれる前記第二音声データに基づく音声を音声出力手段に出力させる音声出力制御手段とを備えたテレビ電話装置に接続する接続手段と、前記接続手段によって接続された前記テレビ電話装置に前記第二合成データを送信する第二データ送信手段と、前記テレビ電話装置の前記第一合成データ送信手段によって作成されて送信される前記第一合成データを受信する第二データ受信手段と、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第二データ受信手段によって受信された前記第一合成データを前記第一画像データと前記第一音声データとに分離する分離手段と、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第一受信手段によって前記ＩＰネットワークを介して受信された前記第二画像データと、前記第一受信手段によって前記公衆回線網を介して受信された前記第二音声データとを合成して、前記第二合成データを作成する合成手段とを備え、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信手段は、前記第二データ受信手段によって受信された前記第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第二データ送信手段は、前記第一データ受信手段によって受信された、前記他装置から前記ＩＰネットワークを介して送信される前記第二合成データを、前記テレビ電話装置に送信し、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第一データ送信手段は、前記分離手段によって前記第一合成データから分離された前記第一画像データと前記第一音声データとのうち、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第二データ送信手段は、前記合成手段によって作成された前記第二合成データを前記テレビ電話装置に送信してもよい。
【０００９】
この場合、テレビ電話装置が通信経路を切り替える機能を備えていない場合でも、通信装置が第一音声データと第二音声データとを送受信する経路を、ＩＰネットワークから公衆回線網に切り替えることで、テレビ電話装置において通話が途切れることを防止することができる。
【００１０】
前記通信装置は、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えることについてのユーザによる指示である切り替え指示を検出する指示検出手段を備え、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出されていない場合に、前記第一データ送信手段は、前記合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データと前記第二音声データと受信し、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出された場合に、前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信してもよい。
【００１１】
この場合、第一音声データと第二音声データとを送受信する経路を、ＩＰネットワークから公衆回線網に切り替えるか否かをユーザに選択させることができる。
【００１２】
前記通信装置は、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合において、前記第一データ送信手段が、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第一データ受信手段が、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えたことをユーザに報知する報知手段を備えてもよい。この場合、第一音声データと第二音声データとを送受信する経路を、ＩＰネットワークから公衆回線網に切り替える場合に、ユーザに報知することができる。
【００１３】
本発明の第２の態様に係る通信制御方法は、自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において行われる通信制御方法であって、前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップとを備え、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する。
【００１４】
この場合、ＩＰネットワークの通信品質が劣化した場合にのみ公衆回線網が使用されるので、常に公衆回線網を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワークの通信品質が劣化した場合に、第一音声データと第二音声データとを送受信する経路が公衆回線網に切り替えられるため、ＩＰネットワークの通信品質の劣化によって通話が途切れることを防止できる。
【００１５】
本発明の第３の態様に係る通信制御プログラムは、自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において実行される通信制御プログラムであって、前記通信装置のＣＰＵに、前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップとを備え、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する処理を実行させることを特徴とする。
【００１６】
この場合、ＩＰネットワークの通信品質が劣化した場合にのみ公衆回線網が使用されるので、常に公衆回線網を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワークの通信品質が劣化した場合に、第一音声データと第二音声データとを送受信する経路が公衆回線網に切り替えられるため、ＩＰネットワークの通信品質の劣化によって通話が途切れることを防止できる。
【図面の簡単な説明】
【００１７】
【図１】通信システム１の構成を示す図である。
【図２】通信装置２の電気的構成を示すブロック図である。
【図３】テレビ電話装置４の電気的構成を示すブロック図である。
【図４】テレビ電話メイン処理を示すフローチャートである。
【図５】第一メイン処理を示すフローチャートである。
【図６】データの送受信の経路を示すブロック図である。
【図７】データの送受信の経路を示すブロック図である。
【図８】第一切替後通信処理を示すフローチャートである。
【図９】通信システム１の構成を示す図である。
【図１０】通信装置２の電気的構成を示すブロック図である。
【図１１】データの送受信の経路を示すブロック図である。
【図１２】第二メイン処理を示すフローチャートである。
【図１３】第二メイン処理を示すフローチャートである。
【図１４】データの送受信の経路を示すブロック図である。
【図１５】第二切替後通信処理を示すフローチャートである。
【図１６】図１３に示す第二メイン処理の変形例を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明に係る通信装置および制御プログラムを具現化した通信システムおよび通信装置について、図面を参照して説明する。なおこれらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている通信装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。
【００１９】
図１を参照して、第一実施形態における通信装置２，３を構成要素とする通信システム１について説明する。通信システム１は、通信装置２，３とテレビ電話装置４，５とを備えている。通信装置２とテレビ電話装置４とは、拠点６に設けられている。通信装置３とテレビ電話装置５とは、拠点７に設けられている。拠点６と拠点７は、それぞれ離れた拠点である。拠点６と拠点７との間には、ＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワーク１１、および公衆回線網１２（以下、「ＰＳＴＮ（Ｐｕｂｌｉｃ Ｓｗｉｔｃｈｅｄ Ｔｅｌｅｐｈｏｎｅ Ｎｅｔｗｏｒｋｓ）網１２」という。）が存在している。ＩＰネットワーク１１は、インターネットプロトコルを使用する種々の機器を、相互接続して構築されたネットワークである。
【００２０】
通信装置２，３には、それぞれ後述するＷＡＮポート２７、ＬＡＮポート２８、ＦＸＯ２９が設けられている。通信装置２，３のＷＡＮポート２７は、ＩＰネットワーク１１に接続されている。通信装置２，３は、ＩＰネットワーク１１を介して接続され、通信を行うことができる。通信装置２，３のＦＸＯ２９は、ＰＳＴＮ網１２に接続されている。通信装置２，３は、ＰＳＴＮ網１２を介して接続され、通信を行うことができる。通信装置２のＬＡＮポート２８は、テレビ電話装置４に接続されている。通信装置３のＬＡＮポート２８は、テレビ電話装置５に接続されている。通信システム１では、テレビ電話装置４，５において取得される音声のデータや画像のデータが相互に送受信され、テレビ電話が実行される。以下の説明では、音声データと画像データとが合成されたデータを合成データという。
【００２１】
図２を参照して、通信装置２，３の電気的構成について説明する。通信装置２，３の電気的構成は、略同一であるので、通信装置２の電気的構成について説明する。図２に示すように、通信装置２は、通信装置２にて実行される各処理の制御を司るＣＰＵ２１、ＣＰＵ２１にて実行されるプログラム等が記憶される不揮発性記憶素子であるＲＯＭ２２、ＣＰＵ２１が処理を実行するために必要となる一時的な記憶領域を提供するための揮発性記憶素子であるＲＡＭ２３、種々のデータが記憶される記憶装置２４（例えば、メモリーカードやフラッシュメモリなど）が設けられている。ＲＯＭ２２、ＲＡＭ２３、および記憶装置２４と、ＣＰＵ２１とは、バス２５を介して電気的に接続されている。ＣＰＵ２１は、ＲＯＭ２２、ＲＡＭ２３、および記憶装置２４の記憶領域にアクセスすることができる。
【００２２】
通信装置２は、イーサネット（登録商標）インタフェース（イーサネット（登録商標）Ｉ／Ｆ）２６を備えている。イーサネット（登録商標）Ｉ／ＦとＣＰＵ２１とは、バス２５を介して電気的に接続されている。イーサネット（登録商標）Ｉ／Ｆ２６には、ＷＡＮポート２７、ＬＡＮポート２８がそれぞれ電気的に接続されている。ＷＡＮポート２７は、ＩＰネットワーク１１（図１参照）と電気的に接続されている。通信装置２のＣＰＵ２１は、イーサネット（登録商標）Ｉ／Ｆ２６、ＷＡＮポート２７、およびＩＰネットワーク１１を介して、通信装置３と通信を行うことができる。また、通信装置２のＣＰＵ２１は、イーサネット（登録商標）Ｉ／Ｆ２６およびＬＡＮポート２８を介して、テレビ電話装置４と通信を行うことができる。
【００２３】
通信装置２は、ＰＳＴＮ網１２（図１参照）と接続するためのアナログ電話回線用インタフェース（Ｆｏｒｅｉｇｎ Ｅｘｃｈａｎｇｅ Ｏｆｆｉｃｅ、ＦＸＯ）２９を備えている。ＣＰＵ２１とＦＸＯ２９とは、バス２５を介して電気的に接続されている。通信装置２のＣＰＵ２１は、ＦＸＯ２９およびＰＳＴＮ網１２を介して、通信装置３と通信を行うことができる。
【００２４】
通信装置２は、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）３７を備えている。ＣＰＵ２１とＬＥＤ３７とはバス２５を介して電気的に接続されている。ＣＰＵ２１は、ＬＥＤ３７を制御して、ＬＥＤを点灯させることができる。
【００２５】
上述のように本実施の形態では、通信装置２は、イーサネット（登録商標）Ｉ／Ｆ３５およびＦＸＯ２９の両方を備えることにより、ＩＰネットワーク１１を介した通信、および、ＰＳＴＮ網１２を介した通信の両方が実行可能となっている。
【００２６】
図３を参照して、テレビ電話装置４，５の電気的構成について説明する。テレビ電話装置４，５の電気的構成は、略同一であるので、テレビ電話装置４の電気的構成について説明する。図３に示すように、テレビ電話装置４は、テレビ電話装置４にて実行される各処理の制御を司るＣＰＵ４１、ＣＰＵ４１にて実行されるプログラム等が記憶される不揮発性記憶素子であるＲＯＭ４２、ＣＰＵ４１が処理を実行するために必要となる一時的な記憶領域を提供するための揮発性記憶素子であるＲＡＭ４３、および、種々のデータが記憶される記憶装置４４（例えば、メモリカードやフラッシュメモリなど）が設けられている。ＲＯＭ４２、ＲＡＭ４３、および記憶装置４４と、ＣＰＵ４１とは、バス５２を介して電気的に接続されている。ＣＰＵ４１は、ＲＯＭ４２、ＲＡＭ４３、および記憶装置４４の記憶領域にアクセスすることができる。
【００２７】
テレビ電話装置４は、共通の入出力制御（インピーダンス変換、タイミング制御等）を行うための入出力部４５を備えている。入出力部４５とＣＵＰ４１とは、バス５２を介して電気的に接続されている。テレビ電話装置４は、画像を取得するためのカメラ４６、音声を取得するためのマイク４７、音声を出力するためのスピーカ４８、所望の画像を表示させることが可能なディスプレイ４９、および、ユーザからの指示を取得するための操作部５０を備えている。これらのインタフェースは、それぞれ入出力部４５と電気的に接続されている。ＣＰＵ４１は、それぞれのインタフェースからの入力信号を認識することができる。また、ＣＰＵ４１は、それぞれのインタフェースを制御することができる。
【００２８】
テレビ電話装置４は、通信装置３のＬＡＮポート２８（図２参照）と接続して、通信を行うための通信Ｉ／Ｆ５１を備えている。ＣＰＵ４１は、通信装置２および通信装置３を介して、テレビ電話装置５との間で各種データを送受信することができる。
【００２９】
次に、図４〜図８を参照して、本実施形態における処理について説明する。なお、以下の説明において、音声データ、画像データ、合成データの例として、自拠点音声データ、自拠点画像データ、自拠点合成データ、他拠点音声データ、他拠点画像データ、および他拠点合成データ等について述べている。以下の説明では、同じデータでも、拠点６を基準にするか、拠点７を基準にするかによって、「自拠点」「他拠点」の記述が変わってくる。例えば、通信装置２とテレビ電話装置４とが存在する拠点６を基準にすると、自拠点画像データ、自拠点音声データ、および自拠点合成データは、拠点６において取得された音声や画像を含んだデータである。また、他拠点画像データ、他拠点音声データ、および他拠点合成データは、拠点７において取得された音声や画像を含んだデータである。一方、通信装置３とテレビ電話装置５とが存在する拠点７を基準にすると、自拠点画像データ、自拠点音声データ、および自拠点合成データは、拠点７において取得された音声や画像を含んだデータである。また、他拠点画像データ、他拠点音声データ、および他拠点合成データは、拠点６において取得された音声や画像を含んだデータである。例えば、拠点６から拠点７に合成データが送信される場合、拠点６を基準にすると、拠点６において作成された自拠点合成データが拠点７に送信されることなる。一方、拠点７を基準にすると、拠点６において作成された他拠点合成データが、拠点６から拠点７に送信されることになる。
【００３０】
図４に示すフローチャートを参照して、テレビ電話装置４，５のＣＰＵ４１によるテレビ電話メイン処理について説明する。テレビ電話装置４とテレビ電話装置５とにおいて行われるテレビ電話メイン処理は、略同一であるので、ここでは、テレビ電話装置４のテレビ電話メイン処理について説明する。テレビ電話メイン処理は、例えば、ユーザによって操作部５０を介して、通話先の電話番号が入力されることを契機に開始される。
【００３１】
図４に示すように、テレビ電話メイン処理では、まず、テレビ電話装置４とテレビ電話装置５の間のＩＰネットワーク１１を介した通信が確立される（Ｓ１１）。詳細には、テレビ電話装置４，５のＳ１１の処理と、通信装置２，３のＳ３１の処理（図５参照）によって通信が確立される。Ｓ１１の処理とＳ３１の処理における通信の確立には、種々の方法を使用することができる。
【００３２】
一例として、以下のような手順で、通信が確立される。テレビ電話装置４のユーザが、操作部５０を介して、テレビ電話装置５の電話番号を入力する。入力された電話番号は、通信装置２に送信される。通信装置２は、ＩＰネットワーク１１上のＳＩＰ（Ｓｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌ）サーバ（図示外）に呼び出し要求（ＩＮＶＩＴＥ）を送信する。呼び出し要求を受信したＳＩＰサーバは、通信装置３に呼び出し要求（ＩＮＶＩＴＥ）を送信する。呼び出し要求を受信した通信装置３は、テレビ電話装置５に、呼び出し音を出力するように指示する。テレビ電話装置５は、呼び出し音を出力する。呼び出し音に応じてユーザが、テレビ電話装置５の受話器をとると、通信装置３は、ＳＩＰサーバに呼び出し成功の信号（２００ ＯＫ）を送信する。ＳＩＰサーバは、通信装置２に呼び出し成功の信号（２００ ＯＫ）を送信する。通信装置２は、通信の開通を了解するためにＡＣＫ信号をＳＩＰサーバに送信する。ＳＩＰサーバは通信装置３にＡＣＫ信号を送信する。通信装置３はＡＣＫ信号を受信する。そして、通信が開始される。
【００３３】
以上の手順により通信が開始されると、以後の通信では、ＳＩＰサーバを介することなく、テレビ電話装置４とテレビ電話装置５との間のＩＰネットワーク１１を介した通信が行われる。これによって、テレビ電話装置４とテレビ電話装置５との間でテレビ電話が行われる。
【００３４】
通信が確立されると（Ｓ１１）、マイク４７（図３参照）を介して音声が取得される（Ｓ１２）。これによって、例えば、ユーザの話し声が取得される。次いで、カメラ４６（図３参照）を介して画像が取得される（Ｓ１３）。これによって、例えば、ユーザの姿の画像が取得される。なお、取得される画像は、静止画でもよいし、動画でもよい。次いで、Ｓ１２およびＳ１３の処理において取得された音声と画像とに基づいて、自拠点合成データが作成される（Ｓ１４）。自拠点合成データは、Ｓ１２の処理において取得された音声に基づく自拠点音声データと、Ｓ１３の処理において取得された画像に基づく自拠点画像データとが合成されたデータである。次いで、Ｓ１４の処理において作成された自拠点合成データが、通信装置２に送信される（Ｓ１５）。これによって、自拠点画像データと自拠点音声データとが、通信装置２に送信される（Ｓ１５）。自拠点合成データには、自拠点画像データと自拠点音声データとが含まれているからである。
【００３５】
Ｓ１５の処理で送信された自拠点合成データは、後述する通信装置２のＳ３３の処理において受信され、Ｓ３４の処理において通信装置３に送信される（図５参照）。そして、通信装置３のＳ３５の処理において受信され、Ｓ３６の処理によってテレビ電話装置５に送信される（図５参照）。そして、テレビ電話装置５の後述するＳ１６の処理において受信される。これによって、テレビ電話装置４のＳ１５の処理において送信された自拠点合成データが、テレビ電話装置５のＳ１６の処理において受信される。なお、音声データの送受信の経路が変更された場合については、後で詳述する。
【００３６】
Ｓ１５の処理が行われたら、次いで、テレビ電話装置５のＳ１５の処理において送信された、他拠点合成データが受信されたか否かが判断される（Ｓ１６）。なお、他拠点合成データは、テレビ電話装置５のＳ１５の処理において通信装置３に送信され、通信装置３のＳ３３の処理（図５参照）において受信される。そして、通信装置３のＳ３４の処理において通信装置２に送信され、通信装置２のＳ３５の処理（図５参照）において受信される。そして、通信装置２のＳ３６の処理（図５参照）においてテレビ電話装置４に送信され、テレビ電話装置４のＳ１６の処理において受信される。これによって、テレビ電話装置５のＳ１５の処理において送信された他拠点合成データが、テレビ電話装置４のＳ１６の処理において受信される。なお、音声データの送受信の経路が変更された場合については、後で詳述する。
【００３７】
他拠点合成データが受信されていない場合には（Ｓ１６：ＮＯ）、Ｓ１２に戻り、処理が繰り返される。他拠点合成データが受信された場合には（Ｓ１６：ＹＥＳ）、受信された他拠点合成データに含まれる他拠点音声データが復号され、スピーカ４８（図３参照）から出力される（Ｓ１６）。次いで、Ｓ１６の処理において受信された他拠点合成データに含まれる他拠点画像データが復号され、ディスプレイ４９（図３参照）に表示される（Ｓ１８）。次いで、Ｓ１２に戻り、処理が繰り返される。Ｓ１２〜Ｓ１８の処理が継続されることによって、テレビ電話装置４，５相互間において、テレビ電話が継続される。
【００３８】
次に、図５〜図８を参照して、通信装置２，３による処理について説明する。まず、図５に示すフローチャートを参照して、通信装置２、３のＣＰＵ２１による第一メイン処理について説明する。通信装置２，３において行われる第一メイン処理は、略同一なので、ここでは、主に、通信装置２の第一メイン処理について説明する。第一メイン処理は、テレビ電話装置４，５のＳ１１の処理において、通信の確立の処理が開始されることを契機に開始される。
【００３９】
第一メイン処理では、まず、通信が確立される（Ｓ３１）。通信の確立方法は、Ｓ１１の処理（図４参照）において説明した通りである。次いで、電話番号がＲＡＭ２３（図２参照）に記憶される（Ｓ３２）。Ｓ１１の処理（図４参照）、およびＳ３１の処理（図５参照）において通信が確立される場合、通信を確立するために送受信される信号には、テレビ電話装置４，５の電話番号が含まれている。Ｓ３２の処理では、Ｓ３１の処理において送受信される信号に含まれるテレビ電話装置４，５の電話番号がＲＡＭ２５に記憶される。本実施形態の場合、一例として、テレビ電話装置４の電話番号が「０００−１１１−２２２２」であるとし、テレビ電話装置５の電話番号が「０００−３３３−４４４４」であるとする。
【００４０】
次いで、テレビ電話装置４のＳ１５の処理（図４参照）において送信される、自拠点合成データが受信されたか否かが判断される（Ｓ３３）。自拠点合成データが受信されていない場合には（Ｓ３３：ＮＯ）、後述するＳ３５の処理が行われる。自拠点合成データが受信された場合には（Ｓ３３：ＹＥＳ）、受信された自拠点合成データが、ＩＰネットワーク１１を介して通信装置３に送信される（Ｓ３４）。送信された自拠点合成データは、通信装置３のＳ３５の処理（後述）において受信される。
【００４１】
次いで、通信装置３のＳ３４の処理において送信される他拠点合成データが受信されたか否かが判断される（Ｓ３５）。他拠点合成データが受信されていない場合には（Ｓ３５：ＮＯ）、後述するＳ３７の処理が実行される。他拠点合成データが受信された場合には（Ｓ３５：ＹＥＳ）、受信された他拠点合成データが、テレビ電話装置４に送信される（Ｓ３６）。送信された他拠点合成データは、テレビ電話装置４のＳ１６の処理（図４参照）において受信される。
【００４２】
次いで、通信装置２と通信装置３とのＩＰネットワーク１１を介した通信の遅延時間が測定される（Ｓ３７）。遅延時間の測定方法としては、公知の種々の測定方法を用いることができる。次いで、Ｓ３７の処理において測定された遅延時間が、所定の閾値以上であるか否かが判断されることで、通信装置２および通信装置３の間のＩＰネットワーク１１の通信品質が劣化したか否かが判断される（Ｓ３８）。所定の閾値は、例えば、通信品質が劣化したことによって、画像や音声が乱れる可能性がある値（例えば、１５０ｍｓ（ミリ秒））に設定されている。所定の閾値は、記憶装置２４に予め記憶されている。Ｓ３７の処理において測定された遅延時間が、所定の閾値より小さい場合には、通信品質が劣化していないと判断され（Ｓ３８：ＮＯ）、通信装置３のＳ４０の処理（後述）において、ＰＳＴＮ網１２を介して送信される接続要求信号（後述）が受信されたか否かが判断される（Ｓ３９）。接続要求信号が受信されていない場合には（Ｓ３９：ＮＯ）、Ｓ３３に戻り、処理が繰り返される。
【００４３】
上述のように、Ｓ３３〜Ｓ３９の処理が繰り返されることで、ＩＰネットワーク１１を介して、合成データの送受信が行われ、テレビ電話が実行される。Ｓ３３〜Ｓ３６の処理において、合成データの送受信が行われる経路を図６に示す。図６において、経路７１は、合成データが送受信される経路である。なお、図６では、拠点６側の通信装置２およびテレビ電話装置４における経路７１のみを図示しているが、拠点７側の通信装置３およびテレビ電話装置５においても同様の経路で、データが送受信される（後述する図７、図１１、および図１４における経路の場合も同様）。図６の経路７１に示すように、合成データ（自拠点合成データ、他拠点合成データ）は、通信装置２のＬＡＮポート２８、ＣＰＵ２１、ＷＡＮポート２７、ＩＰネットワーク１１を介して送受信される。つまり、ＰＳＴＮ網１２は、使用されていない。
【００４４】
図５のＳ３８の処理において、通信品質が劣化したと判断された場合には（Ｓ３８：ＹＥＳ）、接続要求信号が、ＰＳＴＮ網１２を介して、通信装置３に送信される（Ｓ４０）。Ｓ４０の処理では、例えば、Ｓ３２の処理において記憶された通信装置３の電話番号「０００−３３３−４４４４」が使用されて、通信装置３に対して、ＰＳＴＮ網１２を介して接続要求信号が送信される。接続要求信号は、ＰＳＴＮ網１２を介して音声データの送受信を行うために、ＰＳＴＮ網１２を介しての接続を要求する信号である。Ｓ４０の処理において送信された接続要求信号は、通信装置３のＳ３９の処理において受信される。
【００４５】
次いで、通信装置３のＳ４３の処理（後述）においてＰＳＴＮ網１２を介して送信される、接続応答信号（後述）が受信されたか否かが判断される（Ｓ４１）。接続応答信号が受信されていない場合には（Ｓ４１：ＮＯ）、Ｓ４１に戻り、処理が繰り返される。接続応答信号が受信された場合には（Ｓ４１：ＹＥＳ）、後述するＳ４４の処理が行われる。
【００４６】
Ｓ３９の処理において、通信装置３のＳ４０の処理によってＰＳＴＮ網１２を介して送信される、接続要求信号が受信された場合には（Ｓ３９：ＹＥＳ）、オフフックを行い、ＰＳＴＮ網１２における通信を開始する（Ｓ４２）。次いで、Ｓ４２の処理でオフフックを行って、ＰＳＴＮ網１２を介して通信が可能になったことを示す信号である接続応答信号が、通信装置３に送信される（Ｓ４３）。送信された接続応答信号は、通信装置３のＳ４１の処理において受信される。次いで、Ｓ４４の処理が行われる。
【００４７】
通信装置２においてＳ３８、Ｓ４０、およびＳ４１の処理が行われ、通信装置３においてＳ３９、Ｓ４２，およびＳ４３の処理が行われると、ＰＳＴＮ網１２を介した通信が可能となる。同様に、通信装置３においてＳ３８、Ｓ４０、およびＳ４１の処理が行われ、通信装置２においてＳ３９、Ｓ４２，およびＳ４３の処理が行われると、ＰＳＴＮ網１２を介した通信が可能となる。すなわち、通信装置２のＣＰＵ２１が、通信装置３のＣＰＵ２１より先に通信品質の劣化を検出した場合には（Ｓ３８：ＹＥＳ）、通信装置２は、Ｓ４０およびＳ４１の処理を行う。逆に、通信装置３のＣＰＵ２１が、通信装置２のＣＰＵ２１より先に通信品質の劣化を検出した場合には、通信装置３のＳ４０の処理によって接続要求信号が送信されるため、通信装置２は、Ｓ３９、Ｓ４２、Ｓ４３の処理を行う。以上のようにしてＰＳＴＮ網１２を介した通信が可能となる。以後の処理では、音声データはＰＳＴＮ網１２を介して送受信され、画像データはＩＰネットワーク１１を介して送受信される。つまり、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。
【００４８】
Ｓ４１の処理またはＳ４３の処理が行われると、次いで、ＬＥＤ３７（図２参照）が点滅される（Ｓ４４）。これによって、自拠点音声データと他拠点音声データとを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられたことをユーザに報知することができる。次いで、第一切替後通信処理が行われる（Ｓ４５）。
【００４９】
図７および図８を参照して、第一切替後通信処理について説明する。第一切替号通信処理では、画像データがＩＰネットワーク１１を介して送受信され、音声データがＰＳＴＮ網１２を介して送受信される。
【００５０】
まず、図７を参照して、第一切替後通信処理において各データが送受信される経路について説明する。図７において、経路７２は、ＬＡＮポート２８を介してテレビ電話装置４とＣＰＵ２１とを結ぶ経路である。経路７３は、ＷＡＮポート２７およびＩＰネットワーク１１を介して、通信装置２のＣＰＵ２１と通信装置３とを結ぶ経路である。経路７４は、ＦＸＯ２９とＰＳＴＮ網１２を介して、通信装置２のＣＰＵ２１と通信装置３とを結ぶ経路である。経路７２は、合成データ（自拠点合成データおよび他拠点合成データ）が送受信される経路である。経路７３は、画像データ（自拠点画像データおよび他拠点画像データ）が送受信される経路である。経路７４は、音声データ（自拠点音声データおよび他拠点音声データ）が送受信される経路である。ＣＰＵ２１は、経路７２を介して受信された自拠点合成データを、自拠点画像データと自拠点音声データとに分離している（Ｓ５２、後述）。また、ＣＰＵ２１は、経路７３を介して受信された他拠点画像データと、経路７４を介して受信された他拠点音声データとを合成して、他拠点合成データを作成している（図８のＳ５６、後述）。
【００５１】
図７を参照しながら図８に示す第一切替後処理について説明する。なお、以下の説明では、処理の符号と共に、各データが送受信される経路を示しながら説明する。第一切替後通信処理では、まず、Ｓ３３の処理（図５参照）と同様に、テレビ電話装置４のＳ１５の処理（図４参照）において送信される、自拠点合成データが受信されたか否かが判断される（Ｓ５１、経路７２）。自拠点合成データが受信されていない場合には（Ｓ５１：ＮＯ）、後述するＳ５５の処理が行われる。自拠点合成データが受信された場合には（Ｓ５１：ＹＥＳ）、受信された自拠点合成データから、自拠点合成データに含まれる自拠点音声データと自拠点画像データとが分離される（Ｓ５２）。
【００５２】
次いで、Ｓ５２の処理において分離された自拠点画像データが、ＩＰネットワーク１１を介して通信装置３に送信される（Ｓ５３、経路７３）。送信された自拠点画像データは、通信装置３のＳ５５の処理（後述）において受信される。次いで、Ｓ５２の処理において分離された自拠点音声データが、ＰＳＴＮ網１２を介して通信装置３に送信される（Ｓ５４、経路７４）。送信された自拠点音声データは、通信装置３のＳ５５の処理において受信される。
【００５３】
Ｓ５４の処理が行われたら、通信装置３のＳ５３の処理において、ＩＰネットワーク１１を介して送信される他拠点画像データ（経路７３）と、通信装置３のＳ５４の処理において、ＰＳＴＮ網１２を介して送信される他拠点音声データ（経路７４）とが、受信されたか否かが判断される（Ｓ５５）。他拠点画像データと他拠点音声データとが受信されていない場合には（Ｓ５５：ＮＯ）、Ｓ５１に戻り、処理が繰り返される。他拠点画像データと他拠点音声データとが受信された場合には（Ｓ５５：ＹＥＳ）、他拠点画像データと他拠点音声データとが合成され、他拠点合成データが作成される（Ｓ５６）。次いで、作成された他拠点合成データが、テレビ電話装置４に送信される（Ｓ５７、経路７２）。送信された他拠点画像データは、テレビ電話装置のＳ１６の処理（図４参照）において受信され、音声が出力され（Ｓ１７）、画像が表示される（Ｓ１８）。次いで、Ｓ５１に戻り、処理が繰り返される。
【００５４】
上述のように、Ｓ５１〜Ｓ５７の処理が繰り返されることで、ＩＰネットワーク１１を介して画像データが送受信され（経路７３）、ＰＳＴＮ網１２を介して音声データが送受信される（経路７４）。また、テレビ電話装置４と通信装置２との間で合成データが送受信される（経路７２）。これによって、テレビ電話が継続される。
【００５５】
以上、説明したように、第一実施形態における処理が行われる。本実施形態では、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化していない場合（Ｓ３８：ＮＯ、図５参照）、自拠点合成データと他拠点合成データとがＩＰネットワーク１１を介して送受信される（図５のＳ３４およびＳ３５参照）。言い換えると、自拠点音声データ、他拠点音声データ、自拠点画像データ、他拠点画像データがＩＰネットワーク１１を介して送受信される。合成データには、音声データと画像データとが含まれているからである。
【００５６】
また、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化している場合（Ｓ３８：ＹＥＳ、図５参照）、自拠点音声データと他拠点音声データとが、ＰＳＴＮ網１２を介して送受信される（図８のＳ５４およびＳ５５参照）。つまり、自拠点音声データと他拠点音声データとを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。このように、ＩＰネットワーク１１の通信品質が劣化した場合にのみＰＳＴＮ網１２が使用される。ＰＳＴＮ網１２を使用する場合は、時間が経過するごとに使用料金が発生する。本実施形態では、ＩＰネットワーク１１の通信品質が劣化した場合にのみＰＳＴＮ網１２が使用されるので、常にＰＳＴＮ網１２を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとを送受信する経路が、ＰＳＴＮ網１２に切り替えられるため、ＩＰネットワーク１１の通信品質の劣化によって、通話が途切れることを防止できる。
【００５７】
また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとを送受信する経路がＰＳＴＮ網１２に切り替えられる。このため、ＩＰネットワーク１１では、自拠点画像データと他拠点画像データのみが送受信される（図８のＳ５３およびＳ５５参照）。このため、自拠点合成データと他拠点合成データとをＩＰネットワーク１１を介して送受信する場合に比べて、ＩＰネットワーク１１における通信量が少なくなる。このため、ＩＰネットワーク１１への負荷が減少し、例えば、画像が途切れることを防止できる。
【００５８】
また、本実施形態では、音声データを送受信する経路を切り替えるか否かに関わらず、テレビ電話装置４，５が行う処理は同じである（図４参照）。言い換えると、通信装置２，３を使用することで、テレビ電話装置４，５が通信経路を切り替える機能を備えていない場合でも、自拠点音声データと他拠点音声データとを送受信する経路を、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えることができる。このため、テレビ電話装置４，５において通話が途切れることを防止することができる。また、一般的に販売されているテレビ電話装置４，５を用いた場合でも、通信装置２，３を使用することで、自拠点音声データと他拠点音声データとを送受信する経路を切り替える機能を実現することができる。
【００５９】
次に、第一実施形態における通信システム１の変形例である、第二実施形態について説明する。第一実施形態では、通信装置２，３とは別にテレビ電話装置４，５が設けられていた（図１参照）。第二実施形態では、通信装置２，３自体が、テレビ電話の機能を有する場合について述べる。
【００６０】
図９を参照して、第二実施形態における通信システム１について説明する。図９に示すように、第一実施形態の場合（図１参照）と異なり、テレビ電話装置４，５が設けられていない。通信装置２，３自体が、テレビ電話機能の機能を有するからである。また、第一実施形態と同様に、通信装置２，３は、ＩＰネットワーク１１、ＰＳＴＮ網１２を介して接続されている。
【００６１】
図１０を参照して、通信装置２，３の電気的構成について説明する。通信装置２，３の電気的構成は、略同一であるので、通信装置２の電気的構成について説明する。図１０に示すように、第二実施形態における通信装置２は、第一実施形態の通信装置２の電気的構成（図２参照）に加え、第一実施形態におけるテレビ電話装置４（図３参照）と同様に、入出力部４５、カメラ４６、マイク４７、スピーカ４８、ディスプレイ４９、および操作部５０を備えている。入出力部４５は、バス２５を介してＣＰＵ２１に接続されている。カメラ４６、マイク４７、スピーカ４８、ディスプレイ４９、および操作部５０は、それぞれ入出力部４５に接続されている。ＣＰＵ２１は、それぞれのインタフェースからの入力信号を認識することができる。また、ＣＰＵ２１は、それぞれのインタフェースを制御することができる。
【００６２】
また、通信装置２，３には、第一実施形態の場合（図２参照）と異なり、ＬＡＮポート２８とＬＥＤ３７とが設けられていない。なお、ＬＡＮポート２８およびＬＥＤ３７を設けてもよい。
【００６３】
次に、図１１、図１２、および図１３を参照して、通信装置２、３のＣＰＵ２１による第二メイン処理について説明する。まず図１１を参照して、第二メイン処理において各データが送受信される経路について説明する。図１１において、経路８１は、通信装置２のＣＰＵ２１から、ＷＡＮポート２７およびＩＰネットワーク１１を介して、通信装置３に向かう経路である。経路８２は、通信装置３から、ＩＰネットワーク１１およびＷＡＮポート２７を介して、通信装置２のＣＰＵ２１に向かう経路である。経路８３は、カメラ４６からＣＰＵ２１に向かう経路である。経路８４は、マイク４７からＣＰＵ２１に向かう経路である。経路８５は、ＣＰＵ２１からディスプレイ４９に向かう経路である。経路８６は、ＣＰＵ２１からスピーカ４８に向かう経路である。経路８１は、自拠点合成データが送信される経路である。経路８２は、他拠点合成データが受信される経路である。また、ＣＰＵ２１は、経路８３および経路８４を介して取得された画像と音声とに基づいて、自拠点合成データを作成する（図１２のＳ１４参照）。また、ＣＰＵ２１は、経路８２を介して受信された他拠点合成データを復号する（図１２のＳ１７およびＳ１８参照）。なお、後述する処理によって、音声データが送受信する経路が切り替えられると、図１４に示す経路で各データが送受信される。詳細については、後述する。
【００６４】
図１１を参照しながら、図１２および図１３に示す第二メイン処理について説明する。通信装置２，３のＣＰＵ２１によって行われる第二メイン処理は、略同一なので、ここでは、主に、通信装置２の第二メイン処理について説明する。第二メイン処理は、例えば、ユーザによって操作部５０を介して、通話先の電話番号が入力されることを契機に開始される。なお、第二メイン処理において、テレビ電話メイン処理（図４参照）および第一メイン処理（図５参照）と同様の処理は、同じ符号で示し、詳細の説明は省略する。
【００６５】
図１２および図１３に示すように、第二メイン処理では、まず、通信装置２と通信装置３の間のＩＰネットワーク１１を介した通信が確立される（Ｓ６１）。Ｓ６１の処理では、第一実施形態の場合のＳ１１の処理（図４参照）およびＳ３１の処理（図５参照）と同様に、通信の確立のために、種々の方法を使用することができる。
【００６６】
次いで、通話先の電話番号がＲＡＭ２３（図１０参照）に記憶される（Ｓ６２）。Ｓ６２の処理では、ユーザによって入力される通信装置３の電話番号、または、Ｓ６１の処理において送受信される通信装置３の電話番号が記憶される。
【００６７】
次いで、テレビ電話メイン処理（図４参照）と同様に、Ｓ１２〜Ｓ１８の処理が行われる。なお、第一実施形態の場合には、Ｓ１５およびＳ１６の処理において合成データが送受信される場合、通信装置２，３を介して、テレビ電話装置４，５間で送受信されていた。しかし、第二実施形態では、通信装置２が、テレビ電話の機能を有しているため、Ｓ１５およびＳ１６の処理において、通信装置２，３の間で直接、合成データの送受信が行われる（経路８１および経路８２）。また、Ｓ１２およびＳ１３の処理では、音声がマイク４７を介して取得され（経路８４）、画像がカメラ４６を介して取得される（経路８３）。また、Ｓ１７の処理およびＳ１８の処理では、音声がスピーカ４８（図１０参照）で出力され（経路８６）、画像がディスプレイ４９（図１０参照）で表示される（経路８５）。
【００６８】
Ｓ１８の処理が行われたら、次いで、遅延時間が測定される（Ｓ３７）。Ｓ１６の処理において、他拠点合成データが受信されていないと判断された場合にも（Ｓ１６：ＮＯ）、Ｓ３７の処理が行われる。次いで、第二実施形態の場合と同様に、Ｓ３８〜Ｓ４３の処理が行われる。なお、Ｓ４０の処理では、Ｓ６２の処理において記憶された通信装置３の電話番号が使用される。また、Ｓ３９の処理において、接続要求信号が受信されていないと判断された場合には（Ｓ３９：ＮＯ）、Ｓ１２に戻り、処理が繰り返される。つまり、通信品質が劣化しておらず（Ｓ３８：ＮＯ）、接続要求信号が受信されていない場合には（Ｓ３９：ＮＯ）、Ｓ１２〜Ｓ１８、Ｓ３７、Ｓ３８、およびＳ３９の処理が繰り返されて、テレビ電話が継続される。この場合、ＩＰネットワーク１１を介して合成データが送受信される（経路８１および経路８２）。また、通信品質が劣化した場合には、第一実施形態で述べたように、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる（Ｓ３８〜Ｓ４３）。
【００６９】
Ｓ４１またはＳ４３の処理が行われると、次いで、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられた旨を示す表示が、ディスプレイ４９に表示される（Ｓ６３）。これによって、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられたことをユーザに報知することができる。Ｓ６３の処理では、例えば、「通信品質が劣化しているため、音声データの送受信の経路を切り替えました」というテキストがディスプレイ４９に表示される。なお、例えば、ＬＥＤ３７（図２参照）を設けて、第一実施形態のＳ４４の処理（図５参照）と同様に、ＬＥＤ３７を点滅させることで、ユーザに報知してもよい。次いで、第二切替後通信処理が実行される（Ｓ６４）。
【００７０】
図１４および図１５を参照して、第二切替後通信処理について説明する。第二切替後通信処理では、画像データが、ＩＰネットワーク１１を介して送受信され、音声データが、ＰＳＴＮ網１２を介して送受信される。
【００７１】
まず、図１４を参照して、第二切替後通信処置において各データが送受信される経路について説明する。図１４において、経路８３〜８６は、図１１と同様である。経路８７は、通信装置２のＣＰＵ２１から、ＷＡＮポート２７およびネットワーク１１を介して、通信装置３に向かう経路である。経路８８は、通信装置２のＣＰＵ２１から、ＦＸＯ２９およびＰＳＴＮ網１２を介して、通信装置３に向かう経路である。経路８９は、通信装置３から、ＩＰネットワーク１１およびＷＡＮポート２７を介して、通信装置２のＣＰＵ２１に向かう経路である。経路９０は、ＰＳＴＮ網１２およびＦＸＯ２９を介して、通信装置２のＣＰＵ２１に向かう経路である。
【００７２】
経路８７は、自拠点画像データが送信される経路である。経路８８は、自拠点音声データが送信される経路である。経路８９は、他拠点画像データが受信される経路である。経路９０は、他拠点音声データが受信される経路である。ＣＰＵ２１は、経路８３および経路８４を介して取得された画像と音声とをそれぞれ符号化し、自拠点画像データと自拠点音声データとを作成する（図１５のＳ７２およびＳ７５）。また、ＣＰＵ２１は、経路８９および経路９０を介して受信された他拠点画像データと自拠点音声データとをそれぞれ復号し、ディスプレイ４９に表示し、スピーカ４８から出力する（図１５のＳ７８およびＳ８０）。
【００７３】
図１４を参照しながら、図１５に示す第二切替後通信処理について説明する。図１５に示すように、第二切替後通信処理では、まず、マイク４７を介して音声が取得される（Ｓ７１、経路８４）。これによって、例えば、ユーザの話し声が取得される。次いで、Ｓ７１の処理によって取得された音声が符号化され、自拠点音声データが作成される（Ｓ７２）。次いで、Ｓ７２において作成された自拠点音声データが、ＰＳＴＮ網１２を介して、通信装置３に送信される（Ｓ７３、経路８８）。Ｓ７３の処理において送信された自拠点音声データは、通信装置３のＳ７７の処理（後述）において受信される。
【００７４】
次いで、カメラ４６を介して画像が取得される（Ｓ７４、経路８３）。これによって、例えば、ユーザの姿の画像が取得される。次いで、Ｓ７４の処理によって取得された画像が符号化され、自拠点画像データが作成される（Ｓ７５）。次いで、Ｓ７５の処理において作成された自拠点画像データが、ＩＰネットワーク１１を介して、通信装置３に送信される（Ｓ７６、経路８７）。Ｓ７６の処理において送信された自拠点画像データは、通信装置３のＳ７９の処理（後述）において受信される。
【００７５】
次いで、通信装置３のＳ７３の処理においてＰＳＴＮ網１２を介して送信される、他拠点音声データが受信されたか否かが判断される（Ｓ７７、経路９０）。他拠点音声データが受信されていない場合には（Ｓ７７：ＮＯ）、後述するＳ７９の処理が行われる。他拠点音声データが受信された場合には（Ｓ７７：ＹＥＳ）、受信された他拠点音声データが復号され、スピーカ４８において出力される（Ｓ７８、経路８６）。
【００７６】
次いで、通信装置３のＳ７６の処理においてＩＰネットワーク１１を介して送信される、他拠点画像データが受信されたか否かが判断される（Ｓ７９、経路８９）。他拠点画像データが受信されていない場合には（Ｓ７９：ＮＯ）、Ｓ７１に戻り、処理が繰り返される。他拠点画像データが受信された場合には（Ｓ７９：ＹＥＳ）、受信された他拠点画像データが復号され、ディスプレイ４９に表示される（Ｓ８０、経路８５）。次いで、Ｓ７１に戻り、処理が繰り返される。
【００７７】
以上、第二実施形態における処理が行われる。本実施形態では、第一実施形態の場合と同様に、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化していない場合（Ｓ３８：ＮＯ、図１３参照）、自拠点合成データと他拠点合成データとがＩＰネットワーク１１を介して送受信される（図１２のＳ１５およびＳ１６参照）。言い換えると、自拠点音声データ、他拠点音声データ、自拠点画像データ、他拠点画像データがＩＰネットワーク１１を介して送受信される。合成データには、音声データと画像データとが含まれているからである。
【００７８】
また、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化している場合（Ｓ３８：ＹＥＳ、図１３参照）、自拠点音声データと他拠点音声データとが、ＰＳＴＮ網１２を介して送受信される（図１５のＳ７３およびＳ７７参照）。つまり、自拠点音声データと他拠点音声データとを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えされる。このように、ＩＰネットワーク１１の通信品質が劣化した場合にのみＰＳＴＮ網１２が使用される。このため、常にＰＳＴＮ網１２を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとを送受信する経路が、ＰＳＴＮ網１２に切り替えられるため、ＩＰネットワーク１１の通信品質の劣化によって、通話が途切れることを防止できる。
【００７９】
また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとがＰＳＴＮ網１２に切り替えられることによって、ＩＰネットワーク１１では、自拠点画像データと他拠点画像データのみが送受信される（図１５のＳ７６およびＳ７９参照）。このため、自拠点合成データと他拠点合成データとをＩＰネットワーク１１を介して送受信する場合に比べて、ＩＰネットワーク１１における通信量が少なくなる。このため、ＩＰネットワーク１１への負荷が減少し、例えば、画像が途切れることを防止できる。
【００８０】
上記実施形態において、自拠点画像データが、本発明の「第一画像データ」に相当し、自拠点音声データが、本発明の「第一音声データ」に相当する。他拠点画像データが、本発明の「第二画像データ」に相当し、他拠点音声データが、本発明の「第二音声データ」に相当する。自拠点合成データが、本発明の「第一合成データ」に相当し、他拠点合成データが、本発明の「第二合成データ」に相当する。図５のＳ３４、図８のＳ５３、Ｓ５４、図１２のＳ１５、図１５のＳ７３、Ｓ７６の処理を行うＣＰＵ２１が、本発明の「第一データ送信手段」に相当し、図５のＳ３５、図８のＳ５５、図１２のＳ１６、図１５のＳ７７、Ｓ７９の処理を行うＣＰＵ２１が、本発明の「第一データ受信手段」に相当する。図５および図１３のＳ３８の処理を行うＣＰＵ２１が、本発明の「劣化判断手段」に相当する。
【００８１】
図４のＳ１４およびＳ１５の処理を行うＣＰＵ４１が、本発明の「第一合成データ送信手段」に相当し、図３のディスプレイ４９が本発明の「表示手段」に相当する。図４のＳ１８の処理を行うＣＰＵ４１が、本発明の「表示制御手段」に相当し、図３のスピーカ４８、が本発明の「音声出力手段」に相当する。図４のＳ１７の処理を行うＣＰＵ４１が、本発明の「音声出力制御手段」に相当し、図２のＬＡＮポート２８が、本発明の「接続手段」に相当する。図５のＳ３６および図８のＳ５７の処理を行うＣＰＵ２１が、本発明の「第二データ送信手段」に相当し、図５のＳ３３および図８のＳ５１の処理を行うＣＰＵ２１が、本発明の「第二データ受信手段」に相当する。図８のＳ５２の処理を行うＣＰＵ２１が、本発明の「分離手段」に相当し、図８のＳ５６の処理を行うＣＰＵ２１が、本発明の「合成手段」に相当する。図５のＳ４４、図１３のＳ６３の処理を行うＣＰＵ２１が、本発明の「報知手段」に相当する。
【００８２】
図５のＳ３４、図８のＳ５３、Ｓ５４、図１２のＳ１５、図１５のＳ７３、Ｓ７６の処理が、本発明の「第一データ送信ステップ」に相当し、図５のＳ３５、図８のＳ５５、図１２のＳ１６、図１５のＳ７７、Ｓ７９の処理が、本発明の「第一データ受信ステップ」に相当する。図５および図１３のＳ３８の処理が、本発明の「劣化判断ステップ」に相当する。
【００８３】
なお、本発明は上記の実施形態に限定されるものではなく、種々の変更が可能である。例えば、通信品質として、遅延時間が測定され（図５等のＳ３７）、遅延時間の閾値が所定の閾値以上であるか否かが判断されることで、通信品質が劣化したか否かが判断されていた（図５等のＳ３８）。しかし、これに限定されない。例えば、通信品質として、使用している通信帯域である通信使用帯域やエラーレートなどを測定してもよい。そして、通信使用帯域やエラーレートなどが所定の閾値より劣化したか否かによって、通信品質が劣化したか否かを判断してもよい。なお、通信品質が劣化する原因としては、例えば、ＩＰネットワーク１１におけるデータの通信量が多くなったことが挙げられる。
【００８４】
また、図５のＳ３２および図１２のＳ６２の処理で、電話番号が記憶され、それぞれ、図５のＳ４０および図１３のＳ４０の処理で使用されていたが、これに限定されない。例えば、電話番号を、予め通信装置２，３の記憶装置２４に記憶しておき、記憶されている電話番号を使用してもよい。また、電話番号を、予めテレビ電話装置４，５の記憶装置４４に記憶しておき、通信装置２，３がテレビ電話装置４，５から電話番号を取得して、使用してもよい。
【００８５】
また、通信品質が劣化した場合に、図５および図１３のＳ３８〜Ｓ４３の処理において、音声データの送受信する経路が、自動で、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられていたが、これに限定されない。例えば、音声データの送受信する経路を、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えるか否かを、ユーザに選択させるようにしてもよい。以下、詳細に説明する。
【００８６】
図１６は、第二メイン処理のうち、図１３に示すフローチャートの変形例である。以下の説明では、図１３との相違点のみについて説明する。また、図１３と同様の処理は同じ符号で示し、詳細の説明は省略する。
【００８７】
図１６において、通信品質が劣化したと判断された場合には（Ｓ３８：ＹＥＳ）、通信品質が劣化したことを報知するための表示と、音声データの送受信の経路を入れ替えるか否かの判断をすることをユーザに促すための表示がディスプレイ４９に表示される（Ｓ９１）。Ｓ９１の処理では、例えば、「通信品質が劣化しています。音声データの送受信の経路を切り替えますか？」というテキストが、ディスプレイ４９に表示される。
【００８８】
次いで、ユーザによって操作部５０（図１０参照）を介して入力される、音声データの送受信の経路を切り替える指示である切り替え指示、もしくは、音声データの送受信の経路を切り替えない指示である切り替え拒否指示が入力されたか否かが判断される（Ｓ９２）。切り替え指示、もしくは切り替え拒否指示が入力されていない場合には（Ｓ９２：ＮＯ）、Ｓ９２に戻り、処理が繰り返される。切り替え指示、もしくは切り替え拒否指示が入力された場合には（Ｓ９２：ＹＥＳ）、Ｓ９２の処理において入力された指示が、切り替え指示であるか否かが判断される（Ｓ９３）。切り替え指示である場合には（Ｓ９３：ＹＥＳ）、Ｓ４０以降の処理が実行され、音声データの送受信の経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。
【００８９】
切り替え拒否指示である場合には、切り替え指示ではないと判断され（Ｓ９３：ＮＯ）、図１２のＳ１２に戻り、処理が繰り返される。つまり、音声データの送受信の経路は切り替えられないまま、テレビ電話が継続される。なお、一度、切り替え拒否指示が入力された場合には、あらためて切り替え指示が入力されるまで、Ｓ１２〜Ｓ１８、Ｓ３７、Ｓ３８の「ＮＯ」、およびＳ３９の「ＮＯ」の処理が繰り返されて、テレビ電話が継続される。
【００９０】
以上、変形例においての処理が行われる。変形例では、自拠点音声データと他拠点音声データとを送受信する経路を、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えるか否かをユーザに選択させることができる。なお、図１６のＳ９２およびＳ９３の処理において切り替え指示を検出する処理を行うＣＰＵ２１が、本発明の「指示検出手段」に相当する。
【符号の説明】
【００９１】
１ 通信システム
２，３ 通信装置
４，５ テレビ電話装置
１１ ＩＰネットワーク
１２ ＰＳＴＮ網
２１，４１ ＣＰＵ
４６ カメラ
４７ マイク
４８ スピーカ
４９ ディスプレイ
【技術分野】
【０００１】
本発明は、自装置とは異なる通信装置と自装置との間で、音声データと画像データとを送受信する通信装置、通信制御方法、および通信制御プログラムに関する。
【背景技術】
【０００２】
従来、自装置とは異なる通信装置と自装置との間で、音声データと画像データとを送受信する通信装置が知られている。例えば、特許文献１に記載のテレビ会議システムでは、テレビ会議のビデオデータを送受信するためにインターネットプロトコル（ＩＰ）ベースの通信チャネルを使用し、テレビ会議の音声データを送受信するために、ＰＳＴＮ網を使用して、テレビ会議を行っている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特表２００５−５２４３０１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の通信装置では、音声データの送受信に、ＰＳＴＮ網（公衆回線網）を使用しているため、時間が経過する毎に使用料金が発生する。このため、通信コストが大きくなるという問題点があった。また、音声データと画像データとの送受信を、ＩＰネットワークを使用して行った場合、ＩＰネットワークの通信品質が劣化することによって、通話が途切れる場合があるという問題点があった。
【０００５】
本発明の目的は、通信コストを抑えると共に、通話が途切れることを防止する通信装置、通信制御方法、および通信制御プログラムを提供することである。
【課題を解決するための手段】
【０００６】
本発明の第１の態様に係る通信装置は、自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置であって、前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信手段と、前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信手段と、前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断手段とを備え、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信手段は、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する。
【０００７】
この場合において、他装置と自装置との間におけるＩＰネットワークの通信品質が劣化していない場合、第一合成データと第二合成データとがＩＰネットワークを介して送受信される。これによって、第一音声データ、第二音声データ、第一画像データ、および第二画像データがＩＰネットワークを介して送受信される。また、他装置と自装置との間におけるＩＰネットワークの通信品質が劣化した場合、第一音声データと第二音声データとが、公衆回線網を介して送受信される。つまり、第一音声データと第二音声データとを送受信する経路が、ＩＰネットワークから公衆回線網に切り替えられる。このように、ＩＰネットワークの通信品質が劣化した場合にのみ公衆回線網が使用されるので、常に公衆回線網を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワークの通信品質が劣化した場合に、第一音声データと第二音声データとを送受信する経路が公衆回線網に切り替えられるため、ＩＰネットワークの通信品質の劣化によって通話が途切れることを防止できる。
【０００８】
前記通信装置は、音声取得手段によって取得された音声と、画像取得手段によって取得された画像とを符号化して前記第一合成データを作成し、前記通信装置に送信する第一合成データ送信手段と、前記通信装置から送信された前記第二合成データに含まれる前記第二画像データに基づく画像を表示手段に表示させる表示制御手段と、前記第二合成データに含まれる前記第二音声データに基づく音声を音声出力手段に出力させる音声出力制御手段とを備えたテレビ電話装置に接続する接続手段と、前記接続手段によって接続された前記テレビ電話装置に前記第二合成データを送信する第二データ送信手段と、前記テレビ電話装置の前記第一合成データ送信手段によって作成されて送信される前記第一合成データを受信する第二データ受信手段と、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第二データ受信手段によって受信された前記第一合成データを前記第一画像データと前記第一音声データとに分離する分離手段と、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第一受信手段によって前記ＩＰネットワークを介して受信された前記第二画像データと、前記第一受信手段によって前記公衆回線網を介して受信された前記第二音声データとを合成して、前記第二合成データを作成する合成手段とを備え、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信手段は、前記第二データ受信手段によって受信された前記第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第二データ送信手段は、前記第一データ受信手段によって受信された、前記他装置から前記ＩＰネットワークを介して送信される前記第二合成データを、前記テレビ電話装置に送信し、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第一データ送信手段は、前記分離手段によって前記第一合成データから分離された前記第一画像データと前記第一音声データとのうち、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第二データ送信手段は、前記合成手段によって作成された前記第二合成データを前記テレビ電話装置に送信してもよい。
【０００９】
この場合、テレビ電話装置が通信経路を切り替える機能を備えていない場合でも、通信装置が第一音声データと第二音声データとを送受信する経路を、ＩＰネットワークから公衆回線網に切り替えることで、テレビ電話装置において通話が途切れることを防止することができる。
【００１０】
前記通信装置は、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えることについてのユーザによる指示である切り替え指示を検出する指示検出手段を備え、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出されていない場合に、前記第一データ送信手段は、前記合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データと前記第二音声データと受信し、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出された場合に、前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信してもよい。
【００１１】
この場合、第一音声データと第二音声データとを送受信する経路を、ＩＰネットワークから公衆回線網に切り替えるか否かをユーザに選択させることができる。
【００１２】
前記通信装置は、前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合において、前記第一データ送信手段が、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第一データ受信手段が、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えたことをユーザに報知する報知手段を備えてもよい。この場合、第一音声データと第二音声データとを送受信する経路を、ＩＰネットワークから公衆回線網に切り替える場合に、ユーザに報知することができる。
【００１３】
本発明の第２の態様に係る通信制御方法は、自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において行われる通信制御方法であって、前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップとを備え、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する。
【００１４】
この場合、ＩＰネットワークの通信品質が劣化した場合にのみ公衆回線網が使用されるので、常に公衆回線網を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワークの通信品質が劣化した場合に、第一音声データと第二音声データとを送受信する経路が公衆回線網に切り替えられるため、ＩＰネットワークの通信品質の劣化によって通話が途切れることを防止できる。
【００１５】
本発明の第３の態様に係る通信制御プログラムは、自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において実行される通信制御プログラムであって、前記通信装置のＣＰＵに、前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップとを備え、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する処理を実行させることを特徴とする。
【００１６】
この場合、ＩＰネットワークの通信品質が劣化した場合にのみ公衆回線網が使用されるので、常に公衆回線網を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワークの通信品質が劣化した場合に、第一音声データと第二音声データとを送受信する経路が公衆回線網に切り替えられるため、ＩＰネットワークの通信品質の劣化によって通話が途切れることを防止できる。
【図面の簡単な説明】
【００１７】
【図１】通信システム１の構成を示す図である。
【図２】通信装置２の電気的構成を示すブロック図である。
【図３】テレビ電話装置４の電気的構成を示すブロック図である。
【図４】テレビ電話メイン処理を示すフローチャートである。
【図５】第一メイン処理を示すフローチャートである。
【図６】データの送受信の経路を示すブロック図である。
【図７】データの送受信の経路を示すブロック図である。
【図８】第一切替後通信処理を示すフローチャートである。
【図９】通信システム１の構成を示す図である。
【図１０】通信装置２の電気的構成を示すブロック図である。
【図１１】データの送受信の経路を示すブロック図である。
【図１２】第二メイン処理を示すフローチャートである。
【図１３】第二メイン処理を示すフローチャートである。
【図１４】データの送受信の経路を示すブロック図である。
【図１５】第二切替後通信処理を示すフローチャートである。
【図１６】図１３に示す第二メイン処理の変形例を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明に係る通信装置および制御プログラムを具現化した通信システムおよび通信装置について、図面を参照して説明する。なおこれらの図面は、本発明が採用しうる技術的特徴を説明するために用いられるものであり、記載されている通信装置の構成、各種処理のフローチャートなどは、それのみに限定する趣旨ではなく、単なる説明例である。
【００１９】
図１を参照して、第一実施形態における通信装置２，３を構成要素とする通信システム１について説明する。通信システム１は、通信装置２，３とテレビ電話装置４，５とを備えている。通信装置２とテレビ電話装置４とは、拠点６に設けられている。通信装置３とテレビ電話装置５とは、拠点７に設けられている。拠点６と拠点７は、それぞれ離れた拠点である。拠点６と拠点７との間には、ＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワーク１１、および公衆回線網１２（以下、「ＰＳＴＮ（Ｐｕｂｌｉｃ Ｓｗｉｔｃｈｅｄ Ｔｅｌｅｐｈｏｎｅ Ｎｅｔｗｏｒｋｓ）網１２」という。）が存在している。ＩＰネットワーク１１は、インターネットプロトコルを使用する種々の機器を、相互接続して構築されたネットワークである。
【００２０】
通信装置２，３には、それぞれ後述するＷＡＮポート２７、ＬＡＮポート２８、ＦＸＯ２９が設けられている。通信装置２，３のＷＡＮポート２７は、ＩＰネットワーク１１に接続されている。通信装置２，３は、ＩＰネットワーク１１を介して接続され、通信を行うことができる。通信装置２，３のＦＸＯ２９は、ＰＳＴＮ網１２に接続されている。通信装置２，３は、ＰＳＴＮ網１２を介して接続され、通信を行うことができる。通信装置２のＬＡＮポート２８は、テレビ電話装置４に接続されている。通信装置３のＬＡＮポート２８は、テレビ電話装置５に接続されている。通信システム１では、テレビ電話装置４，５において取得される音声のデータや画像のデータが相互に送受信され、テレビ電話が実行される。以下の説明では、音声データと画像データとが合成されたデータを合成データという。
【００２１】
図２を参照して、通信装置２，３の電気的構成について説明する。通信装置２，３の電気的構成は、略同一であるので、通信装置２の電気的構成について説明する。図２に示すように、通信装置２は、通信装置２にて実行される各処理の制御を司るＣＰＵ２１、ＣＰＵ２１にて実行されるプログラム等が記憶される不揮発性記憶素子であるＲＯＭ２２、ＣＰＵ２１が処理を実行するために必要となる一時的な記憶領域を提供するための揮発性記憶素子であるＲＡＭ２３、種々のデータが記憶される記憶装置２４（例えば、メモリーカードやフラッシュメモリなど）が設けられている。ＲＯＭ２２、ＲＡＭ２３、および記憶装置２４と、ＣＰＵ２１とは、バス２５を介して電気的に接続されている。ＣＰＵ２１は、ＲＯＭ２２、ＲＡＭ２３、および記憶装置２４の記憶領域にアクセスすることができる。
【００２２】
通信装置２は、イーサネット（登録商標）インタフェース（イーサネット（登録商標）Ｉ／Ｆ）２６を備えている。イーサネット（登録商標）Ｉ／ＦとＣＰＵ２１とは、バス２５を介して電気的に接続されている。イーサネット（登録商標）Ｉ／Ｆ２６には、ＷＡＮポート２７、ＬＡＮポート２８がそれぞれ電気的に接続されている。ＷＡＮポート２７は、ＩＰネットワーク１１（図１参照）と電気的に接続されている。通信装置２のＣＰＵ２１は、イーサネット（登録商標）Ｉ／Ｆ２６、ＷＡＮポート２７、およびＩＰネットワーク１１を介して、通信装置３と通信を行うことができる。また、通信装置２のＣＰＵ２１は、イーサネット（登録商標）Ｉ／Ｆ２６およびＬＡＮポート２８を介して、テレビ電話装置４と通信を行うことができる。
【００２３】
通信装置２は、ＰＳＴＮ網１２（図１参照）と接続するためのアナログ電話回線用インタフェース（Ｆｏｒｅｉｇｎ Ｅｘｃｈａｎｇｅ Ｏｆｆｉｃｅ、ＦＸＯ）２９を備えている。ＣＰＵ２１とＦＸＯ２９とは、バス２５を介して電気的に接続されている。通信装置２のＣＰＵ２１は、ＦＸＯ２９およびＰＳＴＮ網１２を介して、通信装置３と通信を行うことができる。
【００２４】
通信装置２は、ＬＥＤ（Ｌｉｇｈｔ Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）３７を備えている。ＣＰＵ２１とＬＥＤ３７とはバス２５を介して電気的に接続されている。ＣＰＵ２１は、ＬＥＤ３７を制御して、ＬＥＤを点灯させることができる。
【００２５】
上述のように本実施の形態では、通信装置２は、イーサネット（登録商標）Ｉ／Ｆ３５およびＦＸＯ２９の両方を備えることにより、ＩＰネットワーク１１を介した通信、および、ＰＳＴＮ網１２を介した通信の両方が実行可能となっている。
【００２６】
図３を参照して、テレビ電話装置４，５の電気的構成について説明する。テレビ電話装置４，５の電気的構成は、略同一であるので、テレビ電話装置４の電気的構成について説明する。図３に示すように、テレビ電話装置４は、テレビ電話装置４にて実行される各処理の制御を司るＣＰＵ４１、ＣＰＵ４１にて実行されるプログラム等が記憶される不揮発性記憶素子であるＲＯＭ４２、ＣＰＵ４１が処理を実行するために必要となる一時的な記憶領域を提供するための揮発性記憶素子であるＲＡＭ４３、および、種々のデータが記憶される記憶装置４４（例えば、メモリカードやフラッシュメモリなど）が設けられている。ＲＯＭ４２、ＲＡＭ４３、および記憶装置４４と、ＣＰＵ４１とは、バス５２を介して電気的に接続されている。ＣＰＵ４１は、ＲＯＭ４２、ＲＡＭ４３、および記憶装置４４の記憶領域にアクセスすることができる。
【００２７】
テレビ電話装置４は、共通の入出力制御（インピーダンス変換、タイミング制御等）を行うための入出力部４５を備えている。入出力部４５とＣＵＰ４１とは、バス５２を介して電気的に接続されている。テレビ電話装置４は、画像を取得するためのカメラ４６、音声を取得するためのマイク４７、音声を出力するためのスピーカ４８、所望の画像を表示させることが可能なディスプレイ４９、および、ユーザからの指示を取得するための操作部５０を備えている。これらのインタフェースは、それぞれ入出力部４５と電気的に接続されている。ＣＰＵ４１は、それぞれのインタフェースからの入力信号を認識することができる。また、ＣＰＵ４１は、それぞれのインタフェースを制御することができる。
【００２８】
テレビ電話装置４は、通信装置３のＬＡＮポート２８（図２参照）と接続して、通信を行うための通信Ｉ／Ｆ５１を備えている。ＣＰＵ４１は、通信装置２および通信装置３を介して、テレビ電話装置５との間で各種データを送受信することができる。
【００２９】
次に、図４〜図８を参照して、本実施形態における処理について説明する。なお、以下の説明において、音声データ、画像データ、合成データの例として、自拠点音声データ、自拠点画像データ、自拠点合成データ、他拠点音声データ、他拠点画像データ、および他拠点合成データ等について述べている。以下の説明では、同じデータでも、拠点６を基準にするか、拠点７を基準にするかによって、「自拠点」「他拠点」の記述が変わってくる。例えば、通信装置２とテレビ電話装置４とが存在する拠点６を基準にすると、自拠点画像データ、自拠点音声データ、および自拠点合成データは、拠点６において取得された音声や画像を含んだデータである。また、他拠点画像データ、他拠点音声データ、および他拠点合成データは、拠点７において取得された音声や画像を含んだデータである。一方、通信装置３とテレビ電話装置５とが存在する拠点７を基準にすると、自拠点画像データ、自拠点音声データ、および自拠点合成データは、拠点７において取得された音声や画像を含んだデータである。また、他拠点画像データ、他拠点音声データ、および他拠点合成データは、拠点６において取得された音声や画像を含んだデータである。例えば、拠点６から拠点７に合成データが送信される場合、拠点６を基準にすると、拠点６において作成された自拠点合成データが拠点７に送信されることなる。一方、拠点７を基準にすると、拠点６において作成された他拠点合成データが、拠点６から拠点７に送信されることになる。
【００３０】
図４に示すフローチャートを参照して、テレビ電話装置４，５のＣＰＵ４１によるテレビ電話メイン処理について説明する。テレビ電話装置４とテレビ電話装置５とにおいて行われるテレビ電話メイン処理は、略同一であるので、ここでは、テレビ電話装置４のテレビ電話メイン処理について説明する。テレビ電話メイン処理は、例えば、ユーザによって操作部５０を介して、通話先の電話番号が入力されることを契機に開始される。
【００３１】
図４に示すように、テレビ電話メイン処理では、まず、テレビ電話装置４とテレビ電話装置５の間のＩＰネットワーク１１を介した通信が確立される（Ｓ１１）。詳細には、テレビ電話装置４，５のＳ１１の処理と、通信装置２，３のＳ３１の処理（図５参照）によって通信が確立される。Ｓ１１の処理とＳ３１の処理における通信の確立には、種々の方法を使用することができる。
【００３２】
一例として、以下のような手順で、通信が確立される。テレビ電話装置４のユーザが、操作部５０を介して、テレビ電話装置５の電話番号を入力する。入力された電話番号は、通信装置２に送信される。通信装置２は、ＩＰネットワーク１１上のＳＩＰ（Ｓｅｓｓｉｏｎ Ｉｎｉｔｉａｔｉｏｎ Ｐｒｏｔｏｃｏｌ）サーバ（図示外）に呼び出し要求（ＩＮＶＩＴＥ）を送信する。呼び出し要求を受信したＳＩＰサーバは、通信装置３に呼び出し要求（ＩＮＶＩＴＥ）を送信する。呼び出し要求を受信した通信装置３は、テレビ電話装置５に、呼び出し音を出力するように指示する。テレビ電話装置５は、呼び出し音を出力する。呼び出し音に応じてユーザが、テレビ電話装置５の受話器をとると、通信装置３は、ＳＩＰサーバに呼び出し成功の信号（２００ ＯＫ）を送信する。ＳＩＰサーバは、通信装置２に呼び出し成功の信号（２００ ＯＫ）を送信する。通信装置２は、通信の開通を了解するためにＡＣＫ信号をＳＩＰサーバに送信する。ＳＩＰサーバは通信装置３にＡＣＫ信号を送信する。通信装置３はＡＣＫ信号を受信する。そして、通信が開始される。
【００３３】
以上の手順により通信が開始されると、以後の通信では、ＳＩＰサーバを介することなく、テレビ電話装置４とテレビ電話装置５との間のＩＰネットワーク１１を介した通信が行われる。これによって、テレビ電話装置４とテレビ電話装置５との間でテレビ電話が行われる。
【００３４】
通信が確立されると（Ｓ１１）、マイク４７（図３参照）を介して音声が取得される（Ｓ１２）。これによって、例えば、ユーザの話し声が取得される。次いで、カメラ４６（図３参照）を介して画像が取得される（Ｓ１３）。これによって、例えば、ユーザの姿の画像が取得される。なお、取得される画像は、静止画でもよいし、動画でもよい。次いで、Ｓ１２およびＳ１３の処理において取得された音声と画像とに基づいて、自拠点合成データが作成される（Ｓ１４）。自拠点合成データは、Ｓ１２の処理において取得された音声に基づく自拠点音声データと、Ｓ１３の処理において取得された画像に基づく自拠点画像データとが合成されたデータである。次いで、Ｓ１４の処理において作成された自拠点合成データが、通信装置２に送信される（Ｓ１５）。これによって、自拠点画像データと自拠点音声データとが、通信装置２に送信される（Ｓ１５）。自拠点合成データには、自拠点画像データと自拠点音声データとが含まれているからである。
【００３５】
Ｓ１５の処理で送信された自拠点合成データは、後述する通信装置２のＳ３３の処理において受信され、Ｓ３４の処理において通信装置３に送信される（図５参照）。そして、通信装置３のＳ３５の処理において受信され、Ｓ３６の処理によってテレビ電話装置５に送信される（図５参照）。そして、テレビ電話装置５の後述するＳ１６の処理において受信される。これによって、テレビ電話装置４のＳ１５の処理において送信された自拠点合成データが、テレビ電話装置５のＳ１６の処理において受信される。なお、音声データの送受信の経路が変更された場合については、後で詳述する。
【００３６】
Ｓ１５の処理が行われたら、次いで、テレビ電話装置５のＳ１５の処理において送信された、他拠点合成データが受信されたか否かが判断される（Ｓ１６）。なお、他拠点合成データは、テレビ電話装置５のＳ１５の処理において通信装置３に送信され、通信装置３のＳ３３の処理（図５参照）において受信される。そして、通信装置３のＳ３４の処理において通信装置２に送信され、通信装置２のＳ３５の処理（図５参照）において受信される。そして、通信装置２のＳ３６の処理（図５参照）においてテレビ電話装置４に送信され、テレビ電話装置４のＳ１６の処理において受信される。これによって、テレビ電話装置５のＳ１５の処理において送信された他拠点合成データが、テレビ電話装置４のＳ１６の処理において受信される。なお、音声データの送受信の経路が変更された場合については、後で詳述する。
【００３７】
他拠点合成データが受信されていない場合には（Ｓ１６：ＮＯ）、Ｓ１２に戻り、処理が繰り返される。他拠点合成データが受信された場合には（Ｓ１６：ＹＥＳ）、受信された他拠点合成データに含まれる他拠点音声データが復号され、スピーカ４８（図３参照）から出力される（Ｓ１６）。次いで、Ｓ１６の処理において受信された他拠点合成データに含まれる他拠点画像データが復号され、ディスプレイ４９（図３参照）に表示される（Ｓ１８）。次いで、Ｓ１２に戻り、処理が繰り返される。Ｓ１２〜Ｓ１８の処理が継続されることによって、テレビ電話装置４，５相互間において、テレビ電話が継続される。
【００３８】
次に、図５〜図８を参照して、通信装置２，３による処理について説明する。まず、図５に示すフローチャートを参照して、通信装置２、３のＣＰＵ２１による第一メイン処理について説明する。通信装置２，３において行われる第一メイン処理は、略同一なので、ここでは、主に、通信装置２の第一メイン処理について説明する。第一メイン処理は、テレビ電話装置４，５のＳ１１の処理において、通信の確立の処理が開始されることを契機に開始される。
【００３９】
第一メイン処理では、まず、通信が確立される（Ｓ３１）。通信の確立方法は、Ｓ１１の処理（図４参照）において説明した通りである。次いで、電話番号がＲＡＭ２３（図２参照）に記憶される（Ｓ３２）。Ｓ１１の処理（図４参照）、およびＳ３１の処理（図５参照）において通信が確立される場合、通信を確立するために送受信される信号には、テレビ電話装置４，５の電話番号が含まれている。Ｓ３２の処理では、Ｓ３１の処理において送受信される信号に含まれるテレビ電話装置４，５の電話番号がＲＡＭ２５に記憶される。本実施形態の場合、一例として、テレビ電話装置４の電話番号が「０００−１１１−２２２２」であるとし、テレビ電話装置５の電話番号が「０００−３３３−４４４４」であるとする。
【００４０】
次いで、テレビ電話装置４のＳ１５の処理（図４参照）において送信される、自拠点合成データが受信されたか否かが判断される（Ｓ３３）。自拠点合成データが受信されていない場合には（Ｓ３３：ＮＯ）、後述するＳ３５の処理が行われる。自拠点合成データが受信された場合には（Ｓ３３：ＹＥＳ）、受信された自拠点合成データが、ＩＰネットワーク１１を介して通信装置３に送信される（Ｓ３４）。送信された自拠点合成データは、通信装置３のＳ３５の処理（後述）において受信される。
【００４１】
次いで、通信装置３のＳ３４の処理において送信される他拠点合成データが受信されたか否かが判断される（Ｓ３５）。他拠点合成データが受信されていない場合には（Ｓ３５：ＮＯ）、後述するＳ３７の処理が実行される。他拠点合成データが受信された場合には（Ｓ３５：ＹＥＳ）、受信された他拠点合成データが、テレビ電話装置４に送信される（Ｓ３６）。送信された他拠点合成データは、テレビ電話装置４のＳ１６の処理（図４参照）において受信される。
【００４２】
次いで、通信装置２と通信装置３とのＩＰネットワーク１１を介した通信の遅延時間が測定される（Ｓ３７）。遅延時間の測定方法としては、公知の種々の測定方法を用いることができる。次いで、Ｓ３７の処理において測定された遅延時間が、所定の閾値以上であるか否かが判断されることで、通信装置２および通信装置３の間のＩＰネットワーク１１の通信品質が劣化したか否かが判断される（Ｓ３８）。所定の閾値は、例えば、通信品質が劣化したことによって、画像や音声が乱れる可能性がある値（例えば、１５０ｍｓ（ミリ秒））に設定されている。所定の閾値は、記憶装置２４に予め記憶されている。Ｓ３７の処理において測定された遅延時間が、所定の閾値より小さい場合には、通信品質が劣化していないと判断され（Ｓ３８：ＮＯ）、通信装置３のＳ４０の処理（後述）において、ＰＳＴＮ網１２を介して送信される接続要求信号（後述）が受信されたか否かが判断される（Ｓ３９）。接続要求信号が受信されていない場合には（Ｓ３９：ＮＯ）、Ｓ３３に戻り、処理が繰り返される。
【００４３】
上述のように、Ｓ３３〜Ｓ３９の処理が繰り返されることで、ＩＰネットワーク１１を介して、合成データの送受信が行われ、テレビ電話が実行される。Ｓ３３〜Ｓ３６の処理において、合成データの送受信が行われる経路を図６に示す。図６において、経路７１は、合成データが送受信される経路である。なお、図６では、拠点６側の通信装置２およびテレビ電話装置４における経路７１のみを図示しているが、拠点７側の通信装置３およびテレビ電話装置５においても同様の経路で、データが送受信される（後述する図７、図１１、および図１４における経路の場合も同様）。図６の経路７１に示すように、合成データ（自拠点合成データ、他拠点合成データ）は、通信装置２のＬＡＮポート２８、ＣＰＵ２１、ＷＡＮポート２７、ＩＰネットワーク１１を介して送受信される。つまり、ＰＳＴＮ網１２は、使用されていない。
【００４４】
図５のＳ３８の処理において、通信品質が劣化したと判断された場合には（Ｓ３８：ＹＥＳ）、接続要求信号が、ＰＳＴＮ網１２を介して、通信装置３に送信される（Ｓ４０）。Ｓ４０の処理では、例えば、Ｓ３２の処理において記憶された通信装置３の電話番号「０００−３３３−４４４４」が使用されて、通信装置３に対して、ＰＳＴＮ網１２を介して接続要求信号が送信される。接続要求信号は、ＰＳＴＮ網１２を介して音声データの送受信を行うために、ＰＳＴＮ網１２を介しての接続を要求する信号である。Ｓ４０の処理において送信された接続要求信号は、通信装置３のＳ３９の処理において受信される。
【００４５】
次いで、通信装置３のＳ４３の処理（後述）においてＰＳＴＮ網１２を介して送信される、接続応答信号（後述）が受信されたか否かが判断される（Ｓ４１）。接続応答信号が受信されていない場合には（Ｓ４１：ＮＯ）、Ｓ４１に戻り、処理が繰り返される。接続応答信号が受信された場合には（Ｓ４１：ＹＥＳ）、後述するＳ４４の処理が行われる。
【００４６】
Ｓ３９の処理において、通信装置３のＳ４０の処理によってＰＳＴＮ網１２を介して送信される、接続要求信号が受信された場合には（Ｓ３９：ＹＥＳ）、オフフックを行い、ＰＳＴＮ網１２における通信を開始する（Ｓ４２）。次いで、Ｓ４２の処理でオフフックを行って、ＰＳＴＮ網１２を介して通信が可能になったことを示す信号である接続応答信号が、通信装置３に送信される（Ｓ４３）。送信された接続応答信号は、通信装置３のＳ４１の処理において受信される。次いで、Ｓ４４の処理が行われる。
【００４７】
通信装置２においてＳ３８、Ｓ４０、およびＳ４１の処理が行われ、通信装置３においてＳ３９、Ｓ４２，およびＳ４３の処理が行われると、ＰＳＴＮ網１２を介した通信が可能となる。同様に、通信装置３においてＳ３８、Ｓ４０、およびＳ４１の処理が行われ、通信装置２においてＳ３９、Ｓ４２，およびＳ４３の処理が行われると、ＰＳＴＮ網１２を介した通信が可能となる。すなわち、通信装置２のＣＰＵ２１が、通信装置３のＣＰＵ２１より先に通信品質の劣化を検出した場合には（Ｓ３８：ＹＥＳ）、通信装置２は、Ｓ４０およびＳ４１の処理を行う。逆に、通信装置３のＣＰＵ２１が、通信装置２のＣＰＵ２１より先に通信品質の劣化を検出した場合には、通信装置３のＳ４０の処理によって接続要求信号が送信されるため、通信装置２は、Ｓ３９、Ｓ４２、Ｓ４３の処理を行う。以上のようにしてＰＳＴＮ網１２を介した通信が可能となる。以後の処理では、音声データはＰＳＴＮ網１２を介して送受信され、画像データはＩＰネットワーク１１を介して送受信される。つまり、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。
【００４８】
Ｓ４１の処理またはＳ４３の処理が行われると、次いで、ＬＥＤ３７（図２参照）が点滅される（Ｓ４４）。これによって、自拠点音声データと他拠点音声データとを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられたことをユーザに報知することができる。次いで、第一切替後通信処理が行われる（Ｓ４５）。
【００４９】
図７および図８を参照して、第一切替後通信処理について説明する。第一切替号通信処理では、画像データがＩＰネットワーク１１を介して送受信され、音声データがＰＳＴＮ網１２を介して送受信される。
【００５０】
まず、図７を参照して、第一切替後通信処理において各データが送受信される経路について説明する。図７において、経路７２は、ＬＡＮポート２８を介してテレビ電話装置４とＣＰＵ２１とを結ぶ経路である。経路７３は、ＷＡＮポート２７およびＩＰネットワーク１１を介して、通信装置２のＣＰＵ２１と通信装置３とを結ぶ経路である。経路７４は、ＦＸＯ２９とＰＳＴＮ網１２を介して、通信装置２のＣＰＵ２１と通信装置３とを結ぶ経路である。経路７２は、合成データ（自拠点合成データおよび他拠点合成データ）が送受信される経路である。経路７３は、画像データ（自拠点画像データおよび他拠点画像データ）が送受信される経路である。経路７４は、音声データ（自拠点音声データおよび他拠点音声データ）が送受信される経路である。ＣＰＵ２１は、経路７２を介して受信された自拠点合成データを、自拠点画像データと自拠点音声データとに分離している（Ｓ５２、後述）。また、ＣＰＵ２１は、経路７３を介して受信された他拠点画像データと、経路７４を介して受信された他拠点音声データとを合成して、他拠点合成データを作成している（図８のＳ５６、後述）。
【００５１】
図７を参照しながら図８に示す第一切替後処理について説明する。なお、以下の説明では、処理の符号と共に、各データが送受信される経路を示しながら説明する。第一切替後通信処理では、まず、Ｓ３３の処理（図５参照）と同様に、テレビ電話装置４のＳ１５の処理（図４参照）において送信される、自拠点合成データが受信されたか否かが判断される（Ｓ５１、経路７２）。自拠点合成データが受信されていない場合には（Ｓ５１：ＮＯ）、後述するＳ５５の処理が行われる。自拠点合成データが受信された場合には（Ｓ５１：ＹＥＳ）、受信された自拠点合成データから、自拠点合成データに含まれる自拠点音声データと自拠点画像データとが分離される（Ｓ５２）。
【００５２】
次いで、Ｓ５２の処理において分離された自拠点画像データが、ＩＰネットワーク１１を介して通信装置３に送信される（Ｓ５３、経路７３）。送信された自拠点画像データは、通信装置３のＳ５５の処理（後述）において受信される。次いで、Ｓ５２の処理において分離された自拠点音声データが、ＰＳＴＮ網１２を介して通信装置３に送信される（Ｓ５４、経路７４）。送信された自拠点音声データは、通信装置３のＳ５５の処理において受信される。
【００５３】
Ｓ５４の処理が行われたら、通信装置３のＳ５３の処理において、ＩＰネットワーク１１を介して送信される他拠点画像データ（経路７３）と、通信装置３のＳ５４の処理において、ＰＳＴＮ網１２を介して送信される他拠点音声データ（経路７４）とが、受信されたか否かが判断される（Ｓ５５）。他拠点画像データと他拠点音声データとが受信されていない場合には（Ｓ５５：ＮＯ）、Ｓ５１に戻り、処理が繰り返される。他拠点画像データと他拠点音声データとが受信された場合には（Ｓ５５：ＹＥＳ）、他拠点画像データと他拠点音声データとが合成され、他拠点合成データが作成される（Ｓ５６）。次いで、作成された他拠点合成データが、テレビ電話装置４に送信される（Ｓ５７、経路７２）。送信された他拠点画像データは、テレビ電話装置のＳ１６の処理（図４参照）において受信され、音声が出力され（Ｓ１７）、画像が表示される（Ｓ１８）。次いで、Ｓ５１に戻り、処理が繰り返される。
【００５４】
上述のように、Ｓ５１〜Ｓ５７の処理が繰り返されることで、ＩＰネットワーク１１を介して画像データが送受信され（経路７３）、ＰＳＴＮ網１２を介して音声データが送受信される（経路７４）。また、テレビ電話装置４と通信装置２との間で合成データが送受信される（経路７２）。これによって、テレビ電話が継続される。
【００５５】
以上、説明したように、第一実施形態における処理が行われる。本実施形態では、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化していない場合（Ｓ３８：ＮＯ、図５参照）、自拠点合成データと他拠点合成データとがＩＰネットワーク１１を介して送受信される（図５のＳ３４およびＳ３５参照）。言い換えると、自拠点音声データ、他拠点音声データ、自拠点画像データ、他拠点画像データがＩＰネットワーク１１を介して送受信される。合成データには、音声データと画像データとが含まれているからである。
【００５６】
また、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化している場合（Ｓ３８：ＹＥＳ、図５参照）、自拠点音声データと他拠点音声データとが、ＰＳＴＮ網１２を介して送受信される（図８のＳ５４およびＳ５５参照）。つまり、自拠点音声データと他拠点音声データとを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。このように、ＩＰネットワーク１１の通信品質が劣化した場合にのみＰＳＴＮ網１２が使用される。ＰＳＴＮ網１２を使用する場合は、時間が経過するごとに使用料金が発生する。本実施形態では、ＩＰネットワーク１１の通信品質が劣化した場合にのみＰＳＴＮ網１２が使用されるので、常にＰＳＴＮ網１２を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとを送受信する経路が、ＰＳＴＮ網１２に切り替えられるため、ＩＰネットワーク１１の通信品質の劣化によって、通話が途切れることを防止できる。
【００５７】
また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとを送受信する経路がＰＳＴＮ網１２に切り替えられる。このため、ＩＰネットワーク１１では、自拠点画像データと他拠点画像データのみが送受信される（図８のＳ５３およびＳ５５参照）。このため、自拠点合成データと他拠点合成データとをＩＰネットワーク１１を介して送受信する場合に比べて、ＩＰネットワーク１１における通信量が少なくなる。このため、ＩＰネットワーク１１への負荷が減少し、例えば、画像が途切れることを防止できる。
【００５８】
また、本実施形態では、音声データを送受信する経路を切り替えるか否かに関わらず、テレビ電話装置４，５が行う処理は同じである（図４参照）。言い換えると、通信装置２，３を使用することで、テレビ電話装置４，５が通信経路を切り替える機能を備えていない場合でも、自拠点音声データと他拠点音声データとを送受信する経路を、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えることができる。このため、テレビ電話装置４，５において通話が途切れることを防止することができる。また、一般的に販売されているテレビ電話装置４，５を用いた場合でも、通信装置２，３を使用することで、自拠点音声データと他拠点音声データとを送受信する経路を切り替える機能を実現することができる。
【００５９】
次に、第一実施形態における通信システム１の変形例である、第二実施形態について説明する。第一実施形態では、通信装置２，３とは別にテレビ電話装置４，５が設けられていた（図１参照）。第二実施形態では、通信装置２，３自体が、テレビ電話の機能を有する場合について述べる。
【００６０】
図９を参照して、第二実施形態における通信システム１について説明する。図９に示すように、第一実施形態の場合（図１参照）と異なり、テレビ電話装置４，５が設けられていない。通信装置２，３自体が、テレビ電話機能の機能を有するからである。また、第一実施形態と同様に、通信装置２，３は、ＩＰネットワーク１１、ＰＳＴＮ網１２を介して接続されている。
【００６１】
図１０を参照して、通信装置２，３の電気的構成について説明する。通信装置２，３の電気的構成は、略同一であるので、通信装置２の電気的構成について説明する。図１０に示すように、第二実施形態における通信装置２は、第一実施形態の通信装置２の電気的構成（図２参照）に加え、第一実施形態におけるテレビ電話装置４（図３参照）と同様に、入出力部４５、カメラ４６、マイク４７、スピーカ４８、ディスプレイ４９、および操作部５０を備えている。入出力部４５は、バス２５を介してＣＰＵ２１に接続されている。カメラ４６、マイク４７、スピーカ４８、ディスプレイ４９、および操作部５０は、それぞれ入出力部４５に接続されている。ＣＰＵ２１は、それぞれのインタフェースからの入力信号を認識することができる。また、ＣＰＵ２１は、それぞれのインタフェースを制御することができる。
【００６２】
また、通信装置２，３には、第一実施形態の場合（図２参照）と異なり、ＬＡＮポート２８とＬＥＤ３７とが設けられていない。なお、ＬＡＮポート２８およびＬＥＤ３７を設けてもよい。
【００６３】
次に、図１１、図１２、および図１３を参照して、通信装置２、３のＣＰＵ２１による第二メイン処理について説明する。まず図１１を参照して、第二メイン処理において各データが送受信される経路について説明する。図１１において、経路８１は、通信装置２のＣＰＵ２１から、ＷＡＮポート２７およびＩＰネットワーク１１を介して、通信装置３に向かう経路である。経路８２は、通信装置３から、ＩＰネットワーク１１およびＷＡＮポート２７を介して、通信装置２のＣＰＵ２１に向かう経路である。経路８３は、カメラ４６からＣＰＵ２１に向かう経路である。経路８４は、マイク４７からＣＰＵ２１に向かう経路である。経路８５は、ＣＰＵ２１からディスプレイ４９に向かう経路である。経路８６は、ＣＰＵ２１からスピーカ４８に向かう経路である。経路８１は、自拠点合成データが送信される経路である。経路８２は、他拠点合成データが受信される経路である。また、ＣＰＵ２１は、経路８３および経路８４を介して取得された画像と音声とに基づいて、自拠点合成データを作成する（図１２のＳ１４参照）。また、ＣＰＵ２１は、経路８２を介して受信された他拠点合成データを復号する（図１２のＳ１７およびＳ１８参照）。なお、後述する処理によって、音声データが送受信する経路が切り替えられると、図１４に示す経路で各データが送受信される。詳細については、後述する。
【００６４】
図１１を参照しながら、図１２および図１３に示す第二メイン処理について説明する。通信装置２，３のＣＰＵ２１によって行われる第二メイン処理は、略同一なので、ここでは、主に、通信装置２の第二メイン処理について説明する。第二メイン処理は、例えば、ユーザによって操作部５０を介して、通話先の電話番号が入力されることを契機に開始される。なお、第二メイン処理において、テレビ電話メイン処理（図４参照）および第一メイン処理（図５参照）と同様の処理は、同じ符号で示し、詳細の説明は省略する。
【００６５】
図１２および図１３に示すように、第二メイン処理では、まず、通信装置２と通信装置３の間のＩＰネットワーク１１を介した通信が確立される（Ｓ６１）。Ｓ６１の処理では、第一実施形態の場合のＳ１１の処理（図４参照）およびＳ３１の処理（図５参照）と同様に、通信の確立のために、種々の方法を使用することができる。
【００６６】
次いで、通話先の電話番号がＲＡＭ２３（図１０参照）に記憶される（Ｓ６２）。Ｓ６２の処理では、ユーザによって入力される通信装置３の電話番号、または、Ｓ６１の処理において送受信される通信装置３の電話番号が記憶される。
【００６７】
次いで、テレビ電話メイン処理（図４参照）と同様に、Ｓ１２〜Ｓ１８の処理が行われる。なお、第一実施形態の場合には、Ｓ１５およびＳ１６の処理において合成データが送受信される場合、通信装置２，３を介して、テレビ電話装置４，５間で送受信されていた。しかし、第二実施形態では、通信装置２が、テレビ電話の機能を有しているため、Ｓ１５およびＳ１６の処理において、通信装置２，３の間で直接、合成データの送受信が行われる（経路８１および経路８２）。また、Ｓ１２およびＳ１３の処理では、音声がマイク４７を介して取得され（経路８４）、画像がカメラ４６を介して取得される（経路８３）。また、Ｓ１７の処理およびＳ１８の処理では、音声がスピーカ４８（図１０参照）で出力され（経路８６）、画像がディスプレイ４９（図１０参照）で表示される（経路８５）。
【００６８】
Ｓ１８の処理が行われたら、次いで、遅延時間が測定される（Ｓ３７）。Ｓ１６の処理において、他拠点合成データが受信されていないと判断された場合にも（Ｓ１６：ＮＯ）、Ｓ３７の処理が行われる。次いで、第二実施形態の場合と同様に、Ｓ３８〜Ｓ４３の処理が行われる。なお、Ｓ４０の処理では、Ｓ６２の処理において記憶された通信装置３の電話番号が使用される。また、Ｓ３９の処理において、接続要求信号が受信されていないと判断された場合には（Ｓ３９：ＮＯ）、Ｓ１２に戻り、処理が繰り返される。つまり、通信品質が劣化しておらず（Ｓ３８：ＮＯ）、接続要求信号が受信されていない場合には（Ｓ３９：ＮＯ）、Ｓ１２〜Ｓ１８、Ｓ３７、Ｓ３８、およびＳ３９の処理が繰り返されて、テレビ電話が継続される。この場合、ＩＰネットワーク１１を介して合成データが送受信される（経路８１および経路８２）。また、通信品質が劣化した場合には、第一実施形態で述べたように、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる（Ｓ３８〜Ｓ４３）。
【００６９】
Ｓ４１またはＳ４３の処理が行われると、次いで、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられた旨を示す表示が、ディスプレイ４９に表示される（Ｓ６３）。これによって、音声データを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられたことをユーザに報知することができる。Ｓ６３の処理では、例えば、「通信品質が劣化しているため、音声データの送受信の経路を切り替えました」というテキストがディスプレイ４９に表示される。なお、例えば、ＬＥＤ３７（図２参照）を設けて、第一実施形態のＳ４４の処理（図５参照）と同様に、ＬＥＤ３７を点滅させることで、ユーザに報知してもよい。次いで、第二切替後通信処理が実行される（Ｓ６４）。
【００７０】
図１４および図１５を参照して、第二切替後通信処理について説明する。第二切替後通信処理では、画像データが、ＩＰネットワーク１１を介して送受信され、音声データが、ＰＳＴＮ網１２を介して送受信される。
【００７１】
まず、図１４を参照して、第二切替後通信処置において各データが送受信される経路について説明する。図１４において、経路８３〜８６は、図１１と同様である。経路８７は、通信装置２のＣＰＵ２１から、ＷＡＮポート２７およびネットワーク１１を介して、通信装置３に向かう経路である。経路８８は、通信装置２のＣＰＵ２１から、ＦＸＯ２９およびＰＳＴＮ網１２を介して、通信装置３に向かう経路である。経路８９は、通信装置３から、ＩＰネットワーク１１およびＷＡＮポート２７を介して、通信装置２のＣＰＵ２１に向かう経路である。経路９０は、ＰＳＴＮ網１２およびＦＸＯ２９を介して、通信装置２のＣＰＵ２１に向かう経路である。
【００７２】
経路８７は、自拠点画像データが送信される経路である。経路８８は、自拠点音声データが送信される経路である。経路８９は、他拠点画像データが受信される経路である。経路９０は、他拠点音声データが受信される経路である。ＣＰＵ２１は、経路８３および経路８４を介して取得された画像と音声とをそれぞれ符号化し、自拠点画像データと自拠点音声データとを作成する（図１５のＳ７２およびＳ７５）。また、ＣＰＵ２１は、経路８９および経路９０を介して受信された他拠点画像データと自拠点音声データとをそれぞれ復号し、ディスプレイ４９に表示し、スピーカ４８から出力する（図１５のＳ７８およびＳ８０）。
【００７３】
図１４を参照しながら、図１５に示す第二切替後通信処理について説明する。図１５に示すように、第二切替後通信処理では、まず、マイク４７を介して音声が取得される（Ｓ７１、経路８４）。これによって、例えば、ユーザの話し声が取得される。次いで、Ｓ７１の処理によって取得された音声が符号化され、自拠点音声データが作成される（Ｓ７２）。次いで、Ｓ７２において作成された自拠点音声データが、ＰＳＴＮ網１２を介して、通信装置３に送信される（Ｓ７３、経路８８）。Ｓ７３の処理において送信された自拠点音声データは、通信装置３のＳ７７の処理（後述）において受信される。
【００７４】
次いで、カメラ４６を介して画像が取得される（Ｓ７４、経路８３）。これによって、例えば、ユーザの姿の画像が取得される。次いで、Ｓ７４の処理によって取得された画像が符号化され、自拠点画像データが作成される（Ｓ７５）。次いで、Ｓ７５の処理において作成された自拠点画像データが、ＩＰネットワーク１１を介して、通信装置３に送信される（Ｓ７６、経路８７）。Ｓ７６の処理において送信された自拠点画像データは、通信装置３のＳ７９の処理（後述）において受信される。
【００７５】
次いで、通信装置３のＳ７３の処理においてＰＳＴＮ網１２を介して送信される、他拠点音声データが受信されたか否かが判断される（Ｓ７７、経路９０）。他拠点音声データが受信されていない場合には（Ｓ７７：ＮＯ）、後述するＳ７９の処理が行われる。他拠点音声データが受信された場合には（Ｓ７７：ＹＥＳ）、受信された他拠点音声データが復号され、スピーカ４８において出力される（Ｓ７８、経路８６）。
【００７６】
次いで、通信装置３のＳ７６の処理においてＩＰネットワーク１１を介して送信される、他拠点画像データが受信されたか否かが判断される（Ｓ７９、経路８９）。他拠点画像データが受信されていない場合には（Ｓ７９：ＮＯ）、Ｓ７１に戻り、処理が繰り返される。他拠点画像データが受信された場合には（Ｓ７９：ＹＥＳ）、受信された他拠点画像データが復号され、ディスプレイ４９に表示される（Ｓ８０、経路８５）。次いで、Ｓ７１に戻り、処理が繰り返される。
【００７７】
以上、第二実施形態における処理が行われる。本実施形態では、第一実施形態の場合と同様に、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化していない場合（Ｓ３８：ＮＯ、図１３参照）、自拠点合成データと他拠点合成データとがＩＰネットワーク１１を介して送受信される（図１２のＳ１５およびＳ１６参照）。言い換えると、自拠点音声データ、他拠点音声データ、自拠点画像データ、他拠点画像データがＩＰネットワーク１１を介して送受信される。合成データには、音声データと画像データとが含まれているからである。
【００７８】
また、通信装置２と通信装置３との間のＩＰネットワーク１１の通信品質が劣化している場合（Ｓ３８：ＹＥＳ、図１３参照）、自拠点音声データと他拠点音声データとが、ＰＳＴＮ網１２を介して送受信される（図１５のＳ７３およびＳ７７参照）。つまり、自拠点音声データと他拠点音声データとを送受信する経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えされる。このように、ＩＰネットワーク１１の通信品質が劣化した場合にのみＰＳＴＮ網１２が使用される。このため、常にＰＳＴＮ網１２を使用する場合に比べて通信コストを抑えることができる。また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとを送受信する経路が、ＰＳＴＮ網１２に切り替えられるため、ＩＰネットワーク１１の通信品質の劣化によって、通話が途切れることを防止できる。
【００７９】
また、ＩＰネットワーク１１の通信品質が劣化した場合に、自拠点音声データと他拠点音声データとがＰＳＴＮ網１２に切り替えられることによって、ＩＰネットワーク１１では、自拠点画像データと他拠点画像データのみが送受信される（図１５のＳ７６およびＳ７９参照）。このため、自拠点合成データと他拠点合成データとをＩＰネットワーク１１を介して送受信する場合に比べて、ＩＰネットワーク１１における通信量が少なくなる。このため、ＩＰネットワーク１１への負荷が減少し、例えば、画像が途切れることを防止できる。
【００８０】
上記実施形態において、自拠点画像データが、本発明の「第一画像データ」に相当し、自拠点音声データが、本発明の「第一音声データ」に相当する。他拠点画像データが、本発明の「第二画像データ」に相当し、他拠点音声データが、本発明の「第二音声データ」に相当する。自拠点合成データが、本発明の「第一合成データ」に相当し、他拠点合成データが、本発明の「第二合成データ」に相当する。図５のＳ３４、図８のＳ５３、Ｓ５４、図１２のＳ１５、図１５のＳ７３、Ｓ７６の処理を行うＣＰＵ２１が、本発明の「第一データ送信手段」に相当し、図５のＳ３５、図８のＳ５５、図１２のＳ１６、図１５のＳ７７、Ｓ７９の処理を行うＣＰＵ２１が、本発明の「第一データ受信手段」に相当する。図５および図１３のＳ３８の処理を行うＣＰＵ２１が、本発明の「劣化判断手段」に相当する。
【００８１】
図４のＳ１４およびＳ１５の処理を行うＣＰＵ４１が、本発明の「第一合成データ送信手段」に相当し、図３のディスプレイ４９が本発明の「表示手段」に相当する。図４のＳ１８の処理を行うＣＰＵ４１が、本発明の「表示制御手段」に相当し、図３のスピーカ４８、が本発明の「音声出力手段」に相当する。図４のＳ１７の処理を行うＣＰＵ４１が、本発明の「音声出力制御手段」に相当し、図２のＬＡＮポート２８が、本発明の「接続手段」に相当する。図５のＳ３６および図８のＳ５７の処理を行うＣＰＵ２１が、本発明の「第二データ送信手段」に相当し、図５のＳ３３および図８のＳ５１の処理を行うＣＰＵ２１が、本発明の「第二データ受信手段」に相当する。図８のＳ５２の処理を行うＣＰＵ２１が、本発明の「分離手段」に相当し、図８のＳ５６の処理を行うＣＰＵ２１が、本発明の「合成手段」に相当する。図５のＳ４４、図１３のＳ６３の処理を行うＣＰＵ２１が、本発明の「報知手段」に相当する。
【００８２】
図５のＳ３４、図８のＳ５３、Ｓ５４、図１２のＳ１５、図１５のＳ７３、Ｓ７６の処理が、本発明の「第一データ送信ステップ」に相当し、図５のＳ３５、図８のＳ５５、図１２のＳ１６、図１５のＳ７７、Ｓ７９の処理が、本発明の「第一データ受信ステップ」に相当する。図５および図１３のＳ３８の処理が、本発明の「劣化判断ステップ」に相当する。
【００８３】
なお、本発明は上記の実施形態に限定されるものではなく、種々の変更が可能である。例えば、通信品質として、遅延時間が測定され（図５等のＳ３７）、遅延時間の閾値が所定の閾値以上であるか否かが判断されることで、通信品質が劣化したか否かが判断されていた（図５等のＳ３８）。しかし、これに限定されない。例えば、通信品質として、使用している通信帯域である通信使用帯域やエラーレートなどを測定してもよい。そして、通信使用帯域やエラーレートなどが所定の閾値より劣化したか否かによって、通信品質が劣化したか否かを判断してもよい。なお、通信品質が劣化する原因としては、例えば、ＩＰネットワーク１１におけるデータの通信量が多くなったことが挙げられる。
【００８４】
また、図５のＳ３２および図１２のＳ６２の処理で、電話番号が記憶され、それぞれ、図５のＳ４０および図１３のＳ４０の処理で使用されていたが、これに限定されない。例えば、電話番号を、予め通信装置２，３の記憶装置２４に記憶しておき、記憶されている電話番号を使用してもよい。また、電話番号を、予めテレビ電話装置４，５の記憶装置４４に記憶しておき、通信装置２，３がテレビ電話装置４，５から電話番号を取得して、使用してもよい。
【００８５】
また、通信品質が劣化した場合に、図５および図１３のＳ３８〜Ｓ４３の処理において、音声データの送受信する経路が、自動で、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられていたが、これに限定されない。例えば、音声データの送受信する経路を、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えるか否かを、ユーザに選択させるようにしてもよい。以下、詳細に説明する。
【００８６】
図１６は、第二メイン処理のうち、図１３に示すフローチャートの変形例である。以下の説明では、図１３との相違点のみについて説明する。また、図１３と同様の処理は同じ符号で示し、詳細の説明は省略する。
【００８７】
図１６において、通信品質が劣化したと判断された場合には（Ｓ３８：ＹＥＳ）、通信品質が劣化したことを報知するための表示と、音声データの送受信の経路を入れ替えるか否かの判断をすることをユーザに促すための表示がディスプレイ４９に表示される（Ｓ９１）。Ｓ９１の処理では、例えば、「通信品質が劣化しています。音声データの送受信の経路を切り替えますか？」というテキストが、ディスプレイ４９に表示される。
【００８８】
次いで、ユーザによって操作部５０（図１０参照）を介して入力される、音声データの送受信の経路を切り替える指示である切り替え指示、もしくは、音声データの送受信の経路を切り替えない指示である切り替え拒否指示が入力されたか否かが判断される（Ｓ９２）。切り替え指示、もしくは切り替え拒否指示が入力されていない場合には（Ｓ９２：ＮＯ）、Ｓ９２に戻り、処理が繰り返される。切り替え指示、もしくは切り替え拒否指示が入力された場合には（Ｓ９２：ＹＥＳ）、Ｓ９２の処理において入力された指示が、切り替え指示であるか否かが判断される（Ｓ９３）。切り替え指示である場合には（Ｓ９３：ＹＥＳ）、Ｓ４０以降の処理が実行され、音声データの送受信の経路が、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えられる。
【００８９】
切り替え拒否指示である場合には、切り替え指示ではないと判断され（Ｓ９３：ＮＯ）、図１２のＳ１２に戻り、処理が繰り返される。つまり、音声データの送受信の経路は切り替えられないまま、テレビ電話が継続される。なお、一度、切り替え拒否指示が入力された場合には、あらためて切り替え指示が入力されるまで、Ｓ１２〜Ｓ１８、Ｓ３７、Ｓ３８の「ＮＯ」、およびＳ３９の「ＮＯ」の処理が繰り返されて、テレビ電話が継続される。
【００９０】
以上、変形例においての処理が行われる。変形例では、自拠点音声データと他拠点音声データとを送受信する経路を、ＩＰネットワーク１１からＰＳＴＮ網１２に切り替えるか否かをユーザに選択させることができる。なお、図１６のＳ９２およびＳ９３の処理において切り替え指示を検出する処理を行うＣＰＵ２１が、本発明の「指示検出手段」に相当する。
【符号の説明】
【００９１】
１ 通信システム
２，３ 通信装置
４，５ テレビ電話装置
１１ ＩＰネットワーク
１２ ＰＳＴＮ網
２１，４１ ＣＰＵ
４６ カメラ
４７ マイク
４８ スピーカ
４９ ディスプレイ
【特許請求の範囲】
【請求項１】
自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置であって、
前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信手段と、
前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信手段と、
前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断手段と
を備え、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信手段は、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、
前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信することを特徴とする通信装置。
【請求項２】
音声取得手段によって取得された音声と、画像取得手段によって取得された画像とを符号化して前記第一合成データを作成し、前記通信装置に送信する第一合成データ送信手段と、前記通信装置から送信された前記第二合成データに含まれる前記第二画像データに基づく画像を表示手段に表示させる表示制御手段と、前記第二合成データに含まれる前記第二音声データに基づく音声を音声出力手段に出力させる音声出力制御手段とを備えたテレビ電話装置に接続する接続手段と、
前記接続手段によって接続された前記テレビ電話装置に前記第二合成データを送信する第二データ送信手段と、
前記テレビ電話装置の前記第一合成データ送信手段によって作成されて送信される前記第一合成データを受信する第二データ受信手段と、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第二データ受信手段によって受信された前記第一合成データを前記第一画像データと前記第一音声データとに分離する分離手段と、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第一受信手段によって前記ＩＰネットワークを介して受信された前記第二画像データと、前記第一受信手段によって前記公衆回線網を介して受信された前記第二音声データとを合成して、前記第二合成データを作成する合成手段と
を備え、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信手段は、前記第二データ受信手段によって受信された前記第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第二データ送信手段は、前記第一データ受信手段によって受信された、前記他装置から前記ＩＰネットワークを介して送信される前記第二合成データを、前記テレビ電話装置に送信し、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、
前記第一データ送信手段は、前記分離手段によって前記第一合成データから分離された前記第一画像データと前記第一音声データとのうち、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、
前記第二データ送信手段は、前記合成手段によって作成された前記第二合成データを前記テレビ電話装置に送信することを特徴とする請求項１に記載の通信装置。
【請求項３】
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えることについてのユーザによる指示である切り替え指示を検出する指示検出手段を備え、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出されていない場合に、
前記第一データ送信手段は、前記合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データと前記第二音声データと受信し、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出された場合に、
前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信することを特徴とする請求項１または２に記載の通信装置。
【請求項４】
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合において、前記第一データ送信手段が、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第一データ受信手段が、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えたことをユーザに報知する報知手段を備えたことを特徴とする請求項１から３のいずれかに記載の通信装置。
【請求項５】
自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において行われる通信制御方法であって、
前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、
前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、
前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップと
を備え、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、
前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信することを特徴とする通信制御方法。
【請求項６】
自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において実行される通信制御プログラムであって、
前記通信装置のＣＰＵに、
前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、
前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、
前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップと
を備え、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、
前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する処理を実行させることを特徴とする通信制御プログラム。
【請求項１】
自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置であって、
前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信手段と、
前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信手段と、
前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断手段と
を備え、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信手段は、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、
前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信することを特徴とする通信装置。
【請求項２】
音声取得手段によって取得された音声と、画像取得手段によって取得された画像とを符号化して前記第一合成データを作成し、前記通信装置に送信する第一合成データ送信手段と、前記通信装置から送信された前記第二合成データに含まれる前記第二画像データに基づく画像を表示手段に表示させる表示制御手段と、前記第二合成データに含まれる前記第二音声データに基づく音声を音声出力手段に出力させる音声出力制御手段とを備えたテレビ電話装置に接続する接続手段と、
前記接続手段によって接続された前記テレビ電話装置に前記第二合成データを送信する第二データ送信手段と、
前記テレビ電話装置の前記第一合成データ送信手段によって作成されて送信される前記第一合成データを受信する第二データ受信手段と、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第二データ受信手段によって受信された前記第一合成データを前記第一画像データと前記第一音声データとに分離する分離手段と、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、前記第一受信手段によって前記ＩＰネットワークを介して受信された前記第二画像データと、前記第一受信手段によって前記公衆回線網を介して受信された前記第二音声データとを合成して、前記第二合成データを作成する合成手段と
を備え、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信手段は、前記第二データ受信手段によって受信された前記第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第二データ送信手段は、前記第一データ受信手段によって受信された、前記他装置から前記ＩＰネットワークを介して送信される前記第二合成データを、前記テレビ電話装置に送信し、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合に、
前記第一データ送信手段は、前記分離手段によって前記第一合成データから分離された前記第一画像データと前記第一音声データとのうち、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、
前記第二データ送信手段は、前記合成手段によって作成された前記第二合成データを前記テレビ電話装置に送信することを特徴とする請求項１に記載の通信装置。
【請求項３】
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えることについてのユーザによる指示である切り替え指示を検出する指示検出手段を備え、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出されていない場合に、
前記第一データ送信手段は、前記合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される、前記第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データと前記第二音声データと受信し、
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断され、且つ、前記指示検出手段によって前記切り替え指示が検出された場合に、
前記第一データ送信手段は、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、
前記第一データ受信手段は、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信することを特徴とする請求項１または２に記載の通信装置。
【請求項４】
前記劣化判断手段によって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していると判断された場合において、前記第一データ送信手段が、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、前記公衆回線網を介して前記他装置に送信し、前記第一データ受信手段が、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する場合に、前記第一音声データと前記第二音声データとを送受信する経路を、前記ＩＰネットワークから前記公衆回線網に切り替えたことをユーザに報知する報知手段を備えたことを特徴とする請求項１から３のいずれかに記載の通信装置。
【請求項５】
自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において行われる通信制御方法であって、
前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、
前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、
前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップと
を備え、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、
前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信することを特徴とする通信制御方法。
【請求項６】
自装置から、自装置とは異なる装置である他装置に送信される画像のデータである第一画像データと、自装置から前記他装置に送信される音声のデータである第一音声データと、前記他装置から自装置に送信される画像のデータである第二画像データと、前記他装置から自装置に送信される音声のデータである第二音声データとを、前記他装置と自装置との間で送受信する通信装置において実行される通信制御プログラムであって、
前記通信装置のＣＰＵに、
前記他装置に前記第一音声データと前記第一画像データとを送信する第一データ送信ステップと、
前記他装置から送信される前記第二画像データと前記第二音声データとを受信する第一データ受信ステップと、
前記他装置と自装置との間におけるＩＰ（Ｉｎｔｅｒｎｅｔ Ｐｒｏｔｏｃｏｌ）ネットワークの通信品質が所定の値より劣化したか否かを判断する劣化判断ステップと
を備え、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化していないと判断された場合に、
前記第一データ送信ステップは、前記第一画像データと前記第一音声データとが合成されたデータである第一合成データを、前記ＩＰネットワークを介して前記他装置に送信することで、前記第一画像データと前記第一音声データとを、前記ＩＰネットワークを介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとが合成されたデータである第二合成データを受信することで、前記ＩＰネットワークを介して前記他装置から送信される、前記第二画像データと前記第二音声データとを受信し、
前記劣化判断ステップによって前記他装置と自装置との間における前記ＩＰネットワークの前記通信品質が前記所定の値より劣化したと判断された場合に、
前記第一データ送信ステップは、前記第一画像データを、前記ＩＰネットワークを介して前記他装置に送信し、前記第一音声データを、公衆回線網を介して前記他装置に送信し、
前記第一データ受信ステップは、前記ＩＰネットワークを介して前記他装置から送信される前記第二画像データを受信し、前記公衆回線網を介して前記他装置から送信される前記第二音声データを受信する処理を実行させることを特徴とする通信制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図１６】
【公開番号】特開２０１２−７４９９３（Ｐ２０１２−７４９９３Ａ）
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願番号】特願２０１０−２１９２１７（Ｐ２０１０−２１９２１７）
【出願日】平成２２年９月２９日（２０１０．９．２９）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
【公開日】平成２４年４月１２日（２０１２．４．１２）
【国際特許分類】
【出願日】平成２２年９月２９日（２０１０．９．２９）
【出願人】（０００００５２６７）ブラザー工業株式会社 (13,856)
【Ｆターム（参考）】
[ Back to top ]