通信装置、通信システムおよび通信方法
【課題】 通信相手の表示画面ではどのような表示を行っているかを確実に把握する。
【解決手段】 ネットワークを介して映像の通信を行う通信装置において、ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、通信相手から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、入力された映像を符号化し、符号化映像信号を出力する映像符号化手段と、を備え、上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力する。
【解決手段】 ネットワークを介して映像の通信を行う通信装置において、ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、通信相手から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、入力された映像を符号化し、符号化映像信号を出力する映像符号化手段と、を備え、上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、通信装置、通信システムおよび通信方法に関する。
【背景技術】
【０００２】
上記技術分野の背景技術として、特開２０１０−１４１６６２号公報（特許文献１）がある。この公報には、相手拠点の表示画面ではどのような表示を行っているかを把握するために、相手画面のレイアウト情報を受信し、その情報に基づいて自拠点側で相手側画面のレイアウトを再現し表示する旨が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−１４１６６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記特許文献１では、相手側の画面レイアウト情報のみを受信して、自拠点側で改めて相手側の画面レイアウトを再現している。その際、画面を構成する際に使用する個々の画像データそのものは、相手側から送信された画像データを使用するのではなく、自拠点側に存在する画像データを使用して画面レイアウトを再現する。そのため例えば、通信の不具合等の何らかの原因により、自拠点側の映像が正常に相手に届かない等の事態が発生した場合、相手側の使用している画像データと、自拠点側に存在する画像データに食い違いが生じるが、そのことを確認することができないため、結果的に、相手側の表示画面内容と、自拠点側で再現した相手画面の表示画面内容が食い違ってしまうという問題がある。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、ネットワークを介して映像の通信を行う通信装置において、ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、通信相手から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、入力された映像を符号化し、符号化映像信号を出力する映像符号化手段とを備え、上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする。
【発明の効果】
【０００６】
上記手段によれば、相手拠点の表示画面ではどのような表示を行っているかを把握することが可能になる。さらに、通信の不具合等の何らかの原因により自拠点側の映像が正常に相手に届かない等の場合においても、相手側に実際に表示されている画像を確実に把握することが可能になる。
【図面の簡単な説明】
【０００７】
【図１】通信装置の構成図の例である。
【図２】通信システムの構成図の例である。
【図３】拠点Ａの画像データの例である。
【図４】拠点Ｂの表示画面の例である。
【図５】通信装置の構成図の例である。
【図６】拠点Ｂの表示画面の例である。
【発明を実施するための形態】
【０００８】
以下、実施例を図面を用いて説明する。
【実施例１】
【０００９】
図２は実施例１における映像信号や音声信号等のメディアデータの送受信を行う通信システムの例を示す。ここで、メディアとは、情報を表現する形式のことであり、映像信号や音声信号のほか、文字情報やコンピュータの電子ファイルなども含まれる。
【００１０】
図２には拠点Ａと拠点Ｂの２つの拠点があり、拠点Ａには送受信装置１１とホームゲートウエイ（以下ＨＧＷ）１２が設置され、これらは互いに宅内ネットワーク１３で接続されている。ＨＧＷ１２は公衆ネットワーク３に接続されている。送受信装置１１にはアドレスＡ１が、ＨＧＷ１２には公衆ネットワーク側にはアドレスＡ２が、宅内ネットワーク側にはアドレスＡ３がそれぞれ割り当てられている。
【００１１】
同様に、拠点Ｂには送受信装置２１とＨＧＷ２２が設置され、これらは互いに宅内ネットワーク２３で接続されている。ＨＧＷ２２は公衆ネットワーク３に接続されている。送受信装置２１にはアドレスＢ１が、ＨＧＷ２２には公衆ネットワーク側にはアドレスＢ２が、宅内ネットワーク側にはアドレスＢ３がそれぞれ割り当てられている。
【００１２】
さらに、公衆ネットワーク３には、ＳＩＰサーバ４が接続されている。
【００１３】
図１を用いて、送受信装置１１の構成について説明する。図１は送受信装置１１の構成図の例である。送受信装置１１は、内部にネットワーク送受信部１１１、メディア復号化部１１２、表示レイアウト部１１３、スピーカ１１４、制御部１１５、ＵＩ処理部１１６、撮像処理部１１７、マイク１１８、メディア符号化部１１９、ＳＩＰ通信部１１１０を備える。
【００１４】
ネットワーク送受信部１１１は、宅内ネットワーク１３に接続されており、制御部１１５の指示に基づき、メッセージや、映像・音声などのメディアデータの送受信処理を行う。ネットワーク送受信部１１１で受信したメディアデータは、メディア復号化部１１２に送られる。
【００１５】
メディア復号化部１１２では、ネットワーク送受信部１１１からメディアデータを受け取り、制御部１１５の指示に基づいて、映像および音声の復号化処理を行う。メディア復号化部１１２で復号化された映像は、表示レイアウト部１１３に送られる。メディア復号化部１１２は複数の映像データを復号化することが可能である。すなわち、ネットワーク送受信部１１１から複数の映像メディアデータを受け取った場合には、それぞれを復号化して、復号化した結果をそれぞれ表示レイアウト部１１３に送る。図１においては、便宜上、主映像、副映像として図示している。
【００１６】
また、メディア復号化部１１２で復号化された音声は、スピーカ１１４を介して出力される。
【００１７】
表示レイアウト部１１３では、メディア復号化部１１２から受け取った複数の映像データを用いて、映像の合成・重畳などを行って表示画面を構成するレイアウト処理を行う。表示レイアウト部１１３から出力された表示画面データは、表示出力端子を介して、図示しない外部の表示装置に出力され、表示される。
【００１８】
制御部１１５は、通信処理を行うために必要な状態遷移を管理しており、ネットワーク送受信部１１１、メディア復号化部１１２、ＵＩ処理部１１６、およびメディア符号化部１１９の動作を制御する。
また、制御部１１５は、外部装置への送信メッセージを作成し、ネットワーク送受信部１１１を介して送信する。また、制御部１１５は、ネットワーク送受信部１１１を介して外部装置からの受信メッセージを受信し、解釈し、その内容に基づいて上記制御を行う。
【００１９】
ＵＩ処理部１１６は、ユーザインターフェイスの処理を行う。すなわち、ユーザからの発信、切断、受信操作などの入力操作を受け付け、その内容を制御部１１６に通知する。また、制御部１１５からの指示に基づき、表示レイアウト部１１３および／またはスピーカ１１４を介して、ユーザに対して着信通知等の出力を行う。
【００２０】
なお、送受信装置１１は必ずしもスピーカ１１４を備える必要は無く、外部のスピーカに音声データを出力する構成でもよい。以下、送受信装置２１も、送受信装置１１と同様の構成を備えているものとして説明するが、両者が全く同じ構成を備える必要はない。
【００２１】
以下の説明においては、メディア復号化部１１２、表示レイアウト部１１３、ＵＩ処理部１１６、およびメディア符号化部１１９はハードウェアとして説明される。しかしこれらは、制御部１１５が、上記各々に対応する機能を持つプログラムを、図示しないメモリに展開して実行することにより、各機能をソフトウェアでも実現可能である。以下では説明の簡略化のため、各機能に対応するプログラムを制御回路１１５が実行する場合も含め、メディア復号化部１１２、表示レイアウト部１１３、ＵＩ処理部１１６、およびメディア符号化部１１９が動作主体として各処理を実行するように説明する。
【００２２】
同様に、送受信装置１１は必ずしも外部の表示装置を介して映像を表示する必要は無く、表示装置を内蔵する構成でもよい。
【００２３】
次に、メディアデータの送信に関する動作を説明する。
撮像処理部１１７は、内部にレンズおよび撮像素子を備え、映像の撮像を行ってその内容をメディア符号化部１１９に送る。マイク１１８は、音声の入力を行い、その内容をメディア符号化部１１９に送る。
【００２４】
メディア符号化部１１９は、撮像処理部１１７およびマイク１１８からそれぞれ映像および音声を受け取り、制御部１１５の指示に基づいて、該映像および音声をメディアデータに符号化処理する。
【００２５】
さらにメディア符号化部１１９に対しては、外部映像入力端子を介して、図示しない外部の映像ソース、例えばパーソナルコンピュータ（以下ＰＣ）の画面などを入力することを可能にしている。外部の映像ソースが入力された場合には、制御部１１５の指示に基づいて、当該外部の映像ソースをメディアデータに符号化処理する。
【００２６】
符号化されたメディアデータはネットワーク送受信部１１１に送られる。その後、ネットワーク送受信部１１１を介して外部のネットワークに送信される。
【００２７】
ＳＩＰ通信部１１１０は、ＨＧＷ１２を介して、ＳＩＰサーバ４に対し、本送受信装置１１のＳＩＰ−ＵＲＩの登録を行う。さらにＳＩＰ通信部１１１０は上記のＳＩＰ−ＵＲＩの登録のほか、公衆ネットワーク上の他のＳＩＰ機器とＳＩＰを用いて通信する。このＳＩＰ通信には帯域保証型セッションの確立も含まれる。
【００２８】
なお、送受信装置２１は、上記の送受信装置１１と同一の構成であり、説明を省略する。
【００２９】
次に、拠点Ａにおける映像の送信について説明する。
【００３０】
拠点Ａの送受信装置１１では、拠点ＡのユーザＡｎｄｙの映像を内蔵された撮像処理部１１７により上記のように撮影する。撮影された映像を図３（ａ）に示す。さらに送受信装置１１の外部入力端子にはＰＣが接続されており、当該ＰＣからの出力映像（図３（ｂ））が入力される。
【００３１】
これらの映像はメディア符号化部１１９でそれぞれ符号化処理が行われ、符号化されたメディアデータがそれぞれネットワーク送受信部１１１を介して拠点Ｂの送受信装置に送出される。
【００３２】
次に拠点Ｂにおける処理について説明する。
拠点Ｂの送受信装置２１は、拠点Ａの送受信装置１１から送出された上記メディアデータをネットワーク送受信部１１１で受信する。このうち映像のメディアデータには上記のように複数のメディアデータが含まれる。
受信したメディアデータは、メディア復号化部１１２に送られ、映像および音声の復号化処理が行われる。復号化された映像のうち、拠点ＡのユーザＡｎｄｙの映像は主映像、拠点ＡのＰＣ画像は副映像として表示レイアウト部１１３に送られる。
【００３３】
表示レイアウト部１１３は、メディア復号化部１１２から受け取った上記の映像データを用いて、映像の合成・重畳などを行って表示画面を構成するレイアウト処理を行う。図４に構成された表示画面データの例を示す。（ａ）は主映像単独、（ｂ）は副映像単独、（ｃ）および（ｄ）は主映像と副映像の合成画面の例である。これらのレイアウトの選択に関しては、ユーザの指示がＵＩ処理部１１６を介して表示レイアウト部１１３に伝えられ、その指示に基づいて選択される。
【００３４】
表示レイアウト部１１３で構成された表示画面データはメディア符号化部１１９に送られる。メディア符号化部１１９は受け取った上記表示画面データをメディアデータに符号化する。また、拠点Ｂの撮像処理部１１７で撮像された映像、およびマイク１１８から入力された音声も同様にメディア符号化部１１９でメディアデータに符号化される。符号化されたこれらのメディアデータは、ネットワーク送受信部１１１を介して、拠点Ａの送受信装置１１に送られる。
【００３５】
次に、拠点Ａにおける映像の受信について説明する。
【００３６】
拠点Ａの送受信装置１１は、ネットワーク送受信部１１１で拠点Ｂの送受信装置２１から送られた上記メディアデータを受信する。受信されたメディアデータは、メディア復号化部１１２に送られ、映像および音声の復号化処理が行われる。復号化された映像の中には、上記拠点Ｂの撮像処理部１１７で撮像された映像および上記拠点Ｂの表示画面データが含まれる。制御部１１５は、拠点Ｂの撮像処理部１１７で撮像された映像および拠点Ｂの表示画面データを、レイアウト表示部１１３を介して表示装置に出力し、表示装置により表示する。このとき、拠点Ａのレイアウト表示部１１３は、拠点Ｂで撮像された映像に比して拠点Ｂにおける表示画面データが小さくなるように表示画面データを構成すれば、拠点Ｂにおけるユーザの画像の表示を妨げることなく、拠点Ａのユーザ自身の映像を確認可能にできる。
【００３７】
一方、拠点Ａのユーザが、拠点Ｂでの表示画面を、より詳細に見ることを所望する場合には、拠点Ａのユーザの指示により、拠点Ａに表示された拠点Ｂの表示画面を例えば全画面に拡大し、拠点Ｂのユーザの映像を隠すようにしても良い。これにより、拠点Ａのユーザは、拠点Ａから送信したＰＣ画面が、どの程度の解像度で拠点Ｂに表示されているかを確認可能である。
【００３８】
以上により、拠点Ｂの表示画面の内容を、拠点Ａの側で確認することが可能である。また、上記拠点Ｂの表示画面データは、拠点Ｂで実際に受信している映像を用いて作成している。したがって、万一何らかの原因により、拠点Ａから拠点Ｂへの映像送信に不具合が生じていた場合でも、その不具合画面も含めて拠点Ｂの表示内容を拠点Ａ側で確認・把握することが可能である。
【００３９】
なお、上記の説明において、拠点Ｂのメディア符号化部１１９は、表示画面データをメディアデータに符号化する際、必要に応じ当該表示画面データの解像度もしくはフレームレートを落としてから符号化しても良い。主映像である拠点Ｂの撮像処理部１１７で撮像された映像よりも表示画面データの解像度もしくはフレームレートを下げて符号化することにより、ネットワーク回線の帯域やメディア符号化部１１９の符号化能力が限られているような場合でも、主映像側の映像品質を優先させ、かつ表示画面の確認を行わせることが可能である。
【００４０】
また、上記実施例において、拠点Ｂの送受信装置２１は、表示レイアウト部１１３で構成された表示画面全体のデータをメディア符号化部１１９で符号化し、ネットワーク送受信部１１１を介して拠点Ａの送受信装置１１に送信しているが、拠点Ａの送受信装置１１から送出されたメディアデータをもって表示画面全体のデータに代えても良い。これにより、拠点Ａのユーザは、拠点Ｂに送信したデータが実際に拠点Ｂに到達したことを確認可能である。このとき、拠点Ｂの送受信装置２１は、拠点Ａの送受信装置１１から受信したメディアデータを一旦復号化し再度符号化しないこともでき、この場合、拠点Ｂの送受信装置２１における処理負荷を軽減できる。これは特に、拠点Ｂの送受信装置２１が、拠点Ａからの主映像（または副映像）を受信した映像にレイアウト処理を加えず全画面に表示している場合に、拠点Ａから受信した符号化映像信号が拠点Ｂにおける表示画面そのものとなるため有効である。
【００４１】
なお、本実施例において、拠点Ａの送受信装置１１が、拠点ＡのＰＣ画像を副映像として拠点Ｂに送信するものとして説明したが、拠点Ａの送受信装置は、ＰＣ画像として表示されるファイルを、ファイルとして拠点Ｂに送信しても良い。この場合、拠点Ｂの送受信装置２１が、受信したファイルを解釈し映像として構成し主映像と重畳したものを拠点Ｂにおける表示データとすれば良い。
【実施例２】
【００４２】
次に、実施例２について説明する。実施例１と同様の部分は説明を省略する。
実施例１との違いは、拠点Ｂ側の表示画面の送信を、拠点Ａ側からの要求に基づいて行うことである。
【００４３】
拠点Ａ側の送受信装置１１は、拠点Ｂに対する表示画面の送信を要求するユーザの指示をＵＩ処理部１１６において受け付ける。ＵＩ処理部１１６はその指示を制御部１１５に伝える。制御部１１５では、上記指示を受け取ると、ネットワーク送受信部１１１を介して、拠点Ｂ側の送受信装置２１に対して、表示画面の送信要求を送信する。
【００４４】
拠点Ｂ側の送受信装置１２では、ネットワーク送受信部１１１において、拠点Ａ側から上記表示画面の送信要求を受信し、それを制御部１１５に伝える。制御部１１５では、上記表示画面の送信要求を受け取ると、それに基づいてメディア符号化部１１９を制御し、上記表示画面データをメディアデータに符号化させ、そのメディアデータを拠点Ａ側の送受信装置１２に対して送信させる。
【００４５】
以上のようにして、拠点Ｂ側の表示画面を拠点Ａ側に送信するか否かを、拠点Ａ側からの要求に応じて制御することが可能である。
【００４６】
さらに、拠点Ｂ側の送受信装置２１が、上記表示画面の送信を無効化する指示を、ＵＩ処理部１１６を通じて拠点Ｂ側のユーザから受け付けた場合は、その指示を受けた制御部１１５は、拠点Ａから上記表示画面の送信要求を受け取っているにもかかわらず、上記表示画面データの拠点Ａに対する送信を行わないようメディア符号化部１１９を制御するようにしても良い。その場合は、拠点Ｂのユーザの意向に配慮して、上記表示画面の送信を行わないようにすることができ、プライバシーを守ることが可能である。
【００４７】
また、さらにその場合、制御部１１５は、拠点Ａに対して、上記表示画面の送信要求が無効化された旨の通知をネットワーク送受信部１１１を介して送信するようにしても良い。当該通知を受け取った拠点Ａ側の送受信装置１１は、その通知に応じたメッセージを表示して拠点Ａ側のユーザに知らせても良い。その場合は、拠点Ａ側のユーザは、拠点Ｂの表示画面の送信要求を指示したにもかかわらず、その画面が表示されない理由を知ることができ、ユーザの利便性を向上させることが可能である。
【実施例３】
【００４８】
次に、実施例３について説明する。実施例１と同様の部分は説明を省略する。
【００４９】
図５に、本実施例における送受信装置１１の構成図の例を示す。図１との違いは、撮像処理部１１７の出力が表示レイアウト部１１３に入力されていることである。それにより、表示レイアウト部１１３は、拠点Ａ側から送られてきた映像に加え、必要に応じて拠点Ｂ側のローカルのカメラ映像を用いて表示画面を構成するレイアウト処理を行うことが可能である。すなわち、図４に示した表示画面データの例に加え、図６（ａ）に示すように、ローカルのカメラ映像を用いた表示画面を作成することが可能である。表示レイアウト部１１３から出力された表示画面データは、表示出力端子を介して、図示しない外部の表示装置に出力され、拠点Ｂ側のユーザに対して表示される。それにより、拠点Ｂ側のユーザは自分がどのように撮影されているかを確認することが出来、ユーザの利便性を高めることが可能である。
【００５０】
またさらに、表示レイアウト部１１３では、図６（ａ）の表示画面を上記表示出力端子に出力するとともに、そこからローカルのカメラ映像のみを除いた図６（ｂ）に示す画面データを同時に作成し、この後者をメディア符号化部１１９に送り、その映像をメディアデータに符号化して、拠点Ａ側に対して送信するようにしても良い。
【００５１】
その場合は、上記表示画面データとは別にメディア符号化部１１９で符号化されて拠点Ａ側に送信されている拠点Ｂのカメラ映像（撮像処理部１１７で撮影された映像）と画像内容の重複を避けることができ、ユーザにとっての分かり易さを向上させることが可能である。
【００５２】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
【００５３】
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。
【００５４】
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際にはほとんど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【００５５】
１…拠点Ａ
２…拠点Ｂ
３…宅外ネットワーク（公衆ネットワーク）
４…ＳＩＰサーバ
１１，１２…送受信装置
１３，２３…宅内ネットワーク
【技術分野】
【０００１】
本発明は、通信装置、通信システムおよび通信方法に関する。
【背景技術】
【０００２】
上記技術分野の背景技術として、特開２０１０−１４１６６２号公報（特許文献１）がある。この公報には、相手拠点の表示画面ではどのような表示を行っているかを把握するために、相手画面のレイアウト情報を受信し、その情報に基づいて自拠点側で相手側画面のレイアウトを再現し表示する旨が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−１４１６６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記特許文献１では、相手側の画面レイアウト情報のみを受信して、自拠点側で改めて相手側の画面レイアウトを再現している。その際、画面を構成する際に使用する個々の画像データそのものは、相手側から送信された画像データを使用するのではなく、自拠点側に存在する画像データを使用して画面レイアウトを再現する。そのため例えば、通信の不具合等の何らかの原因により、自拠点側の映像が正常に相手に届かない等の事態が発生した場合、相手側の使用している画像データと、自拠点側に存在する画像データに食い違いが生じるが、そのことを確認することができないため、結果的に、相手側の表示画面内容と、自拠点側で再現した相手画面の表示画面内容が食い違ってしまうという問題がある。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、例えば特許請求の範囲に記載の構成を採用する。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、ネットワークを介して映像の通信を行う通信装置において、ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、通信相手から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、入力された映像を符号化し、符号化映像信号を出力する映像符号化手段とを備え、上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする。
【発明の効果】
【０００６】
上記手段によれば、相手拠点の表示画面ではどのような表示を行っているかを把握することが可能になる。さらに、通信の不具合等の何らかの原因により自拠点側の映像が正常に相手に届かない等の場合においても、相手側に実際に表示されている画像を確実に把握することが可能になる。
【図面の簡単な説明】
【０００７】
【図１】通信装置の構成図の例である。
【図２】通信システムの構成図の例である。
【図３】拠点Ａの画像データの例である。
【図４】拠点Ｂの表示画面の例である。
【図５】通信装置の構成図の例である。
【図６】拠点Ｂの表示画面の例である。
【発明を実施するための形態】
【０００８】
以下、実施例を図面を用いて説明する。
【実施例１】
【０００９】
図２は実施例１における映像信号や音声信号等のメディアデータの送受信を行う通信システムの例を示す。ここで、メディアとは、情報を表現する形式のことであり、映像信号や音声信号のほか、文字情報やコンピュータの電子ファイルなども含まれる。
【００１０】
図２には拠点Ａと拠点Ｂの２つの拠点があり、拠点Ａには送受信装置１１とホームゲートウエイ（以下ＨＧＷ）１２が設置され、これらは互いに宅内ネットワーク１３で接続されている。ＨＧＷ１２は公衆ネットワーク３に接続されている。送受信装置１１にはアドレスＡ１が、ＨＧＷ１２には公衆ネットワーク側にはアドレスＡ２が、宅内ネットワーク側にはアドレスＡ３がそれぞれ割り当てられている。
【００１１】
同様に、拠点Ｂには送受信装置２１とＨＧＷ２２が設置され、これらは互いに宅内ネットワーク２３で接続されている。ＨＧＷ２２は公衆ネットワーク３に接続されている。送受信装置２１にはアドレスＢ１が、ＨＧＷ２２には公衆ネットワーク側にはアドレスＢ２が、宅内ネットワーク側にはアドレスＢ３がそれぞれ割り当てられている。
【００１２】
さらに、公衆ネットワーク３には、ＳＩＰサーバ４が接続されている。
【００１３】
図１を用いて、送受信装置１１の構成について説明する。図１は送受信装置１１の構成図の例である。送受信装置１１は、内部にネットワーク送受信部１１１、メディア復号化部１１２、表示レイアウト部１１３、スピーカ１１４、制御部１１５、ＵＩ処理部１１６、撮像処理部１１７、マイク１１８、メディア符号化部１１９、ＳＩＰ通信部１１１０を備える。
【００１４】
ネットワーク送受信部１１１は、宅内ネットワーク１３に接続されており、制御部１１５の指示に基づき、メッセージや、映像・音声などのメディアデータの送受信処理を行う。ネットワーク送受信部１１１で受信したメディアデータは、メディア復号化部１１２に送られる。
【００１５】
メディア復号化部１１２では、ネットワーク送受信部１１１からメディアデータを受け取り、制御部１１５の指示に基づいて、映像および音声の復号化処理を行う。メディア復号化部１１２で復号化された映像は、表示レイアウト部１１３に送られる。メディア復号化部１１２は複数の映像データを復号化することが可能である。すなわち、ネットワーク送受信部１１１から複数の映像メディアデータを受け取った場合には、それぞれを復号化して、復号化した結果をそれぞれ表示レイアウト部１１３に送る。図１においては、便宜上、主映像、副映像として図示している。
【００１６】
また、メディア復号化部１１２で復号化された音声は、スピーカ１１４を介して出力される。
【００１７】
表示レイアウト部１１３では、メディア復号化部１１２から受け取った複数の映像データを用いて、映像の合成・重畳などを行って表示画面を構成するレイアウト処理を行う。表示レイアウト部１１３から出力された表示画面データは、表示出力端子を介して、図示しない外部の表示装置に出力され、表示される。
【００１８】
制御部１１５は、通信処理を行うために必要な状態遷移を管理しており、ネットワーク送受信部１１１、メディア復号化部１１２、ＵＩ処理部１１６、およびメディア符号化部１１９の動作を制御する。
また、制御部１１５は、外部装置への送信メッセージを作成し、ネットワーク送受信部１１１を介して送信する。また、制御部１１５は、ネットワーク送受信部１１１を介して外部装置からの受信メッセージを受信し、解釈し、その内容に基づいて上記制御を行う。
【００１９】
ＵＩ処理部１１６は、ユーザインターフェイスの処理を行う。すなわち、ユーザからの発信、切断、受信操作などの入力操作を受け付け、その内容を制御部１１６に通知する。また、制御部１１５からの指示に基づき、表示レイアウト部１１３および／またはスピーカ１１４を介して、ユーザに対して着信通知等の出力を行う。
【００２０】
なお、送受信装置１１は必ずしもスピーカ１１４を備える必要は無く、外部のスピーカに音声データを出力する構成でもよい。以下、送受信装置２１も、送受信装置１１と同様の構成を備えているものとして説明するが、両者が全く同じ構成を備える必要はない。
【００２１】
以下の説明においては、メディア復号化部１１２、表示レイアウト部１１３、ＵＩ処理部１１６、およびメディア符号化部１１９はハードウェアとして説明される。しかしこれらは、制御部１１５が、上記各々に対応する機能を持つプログラムを、図示しないメモリに展開して実行することにより、各機能をソフトウェアでも実現可能である。以下では説明の簡略化のため、各機能に対応するプログラムを制御回路１１５が実行する場合も含め、メディア復号化部１１２、表示レイアウト部１１３、ＵＩ処理部１１６、およびメディア符号化部１１９が動作主体として各処理を実行するように説明する。
【００２２】
同様に、送受信装置１１は必ずしも外部の表示装置を介して映像を表示する必要は無く、表示装置を内蔵する構成でもよい。
【００２３】
次に、メディアデータの送信に関する動作を説明する。
撮像処理部１１７は、内部にレンズおよび撮像素子を備え、映像の撮像を行ってその内容をメディア符号化部１１９に送る。マイク１１８は、音声の入力を行い、その内容をメディア符号化部１１９に送る。
【００２４】
メディア符号化部１１９は、撮像処理部１１７およびマイク１１８からそれぞれ映像および音声を受け取り、制御部１１５の指示に基づいて、該映像および音声をメディアデータに符号化処理する。
【００２５】
さらにメディア符号化部１１９に対しては、外部映像入力端子を介して、図示しない外部の映像ソース、例えばパーソナルコンピュータ（以下ＰＣ）の画面などを入力することを可能にしている。外部の映像ソースが入力された場合には、制御部１１５の指示に基づいて、当該外部の映像ソースをメディアデータに符号化処理する。
【００２６】
符号化されたメディアデータはネットワーク送受信部１１１に送られる。その後、ネットワーク送受信部１１１を介して外部のネットワークに送信される。
【００２７】
ＳＩＰ通信部１１１０は、ＨＧＷ１２を介して、ＳＩＰサーバ４に対し、本送受信装置１１のＳＩＰ−ＵＲＩの登録を行う。さらにＳＩＰ通信部１１１０は上記のＳＩＰ−ＵＲＩの登録のほか、公衆ネットワーク上の他のＳＩＰ機器とＳＩＰを用いて通信する。このＳＩＰ通信には帯域保証型セッションの確立も含まれる。
【００２８】
なお、送受信装置２１は、上記の送受信装置１１と同一の構成であり、説明を省略する。
【００２９】
次に、拠点Ａにおける映像の送信について説明する。
【００３０】
拠点Ａの送受信装置１１では、拠点ＡのユーザＡｎｄｙの映像を内蔵された撮像処理部１１７により上記のように撮影する。撮影された映像を図３（ａ）に示す。さらに送受信装置１１の外部入力端子にはＰＣが接続されており、当該ＰＣからの出力映像（図３（ｂ））が入力される。
【００３１】
これらの映像はメディア符号化部１１９でそれぞれ符号化処理が行われ、符号化されたメディアデータがそれぞれネットワーク送受信部１１１を介して拠点Ｂの送受信装置に送出される。
【００３２】
次に拠点Ｂにおける処理について説明する。
拠点Ｂの送受信装置２１は、拠点Ａの送受信装置１１から送出された上記メディアデータをネットワーク送受信部１１１で受信する。このうち映像のメディアデータには上記のように複数のメディアデータが含まれる。
受信したメディアデータは、メディア復号化部１１２に送られ、映像および音声の復号化処理が行われる。復号化された映像のうち、拠点ＡのユーザＡｎｄｙの映像は主映像、拠点ＡのＰＣ画像は副映像として表示レイアウト部１１３に送られる。
【００３３】
表示レイアウト部１１３は、メディア復号化部１１２から受け取った上記の映像データを用いて、映像の合成・重畳などを行って表示画面を構成するレイアウト処理を行う。図４に構成された表示画面データの例を示す。（ａ）は主映像単独、（ｂ）は副映像単独、（ｃ）および（ｄ）は主映像と副映像の合成画面の例である。これらのレイアウトの選択に関しては、ユーザの指示がＵＩ処理部１１６を介して表示レイアウト部１１３に伝えられ、その指示に基づいて選択される。
【００３４】
表示レイアウト部１１３で構成された表示画面データはメディア符号化部１１９に送られる。メディア符号化部１１９は受け取った上記表示画面データをメディアデータに符号化する。また、拠点Ｂの撮像処理部１１７で撮像された映像、およびマイク１１８から入力された音声も同様にメディア符号化部１１９でメディアデータに符号化される。符号化されたこれらのメディアデータは、ネットワーク送受信部１１１を介して、拠点Ａの送受信装置１１に送られる。
【００３５】
次に、拠点Ａにおける映像の受信について説明する。
【００３６】
拠点Ａの送受信装置１１は、ネットワーク送受信部１１１で拠点Ｂの送受信装置２１から送られた上記メディアデータを受信する。受信されたメディアデータは、メディア復号化部１１２に送られ、映像および音声の復号化処理が行われる。復号化された映像の中には、上記拠点Ｂの撮像処理部１１７で撮像された映像および上記拠点Ｂの表示画面データが含まれる。制御部１１５は、拠点Ｂの撮像処理部１１７で撮像された映像および拠点Ｂの表示画面データを、レイアウト表示部１１３を介して表示装置に出力し、表示装置により表示する。このとき、拠点Ａのレイアウト表示部１１３は、拠点Ｂで撮像された映像に比して拠点Ｂにおける表示画面データが小さくなるように表示画面データを構成すれば、拠点Ｂにおけるユーザの画像の表示を妨げることなく、拠点Ａのユーザ自身の映像を確認可能にできる。
【００３７】
一方、拠点Ａのユーザが、拠点Ｂでの表示画面を、より詳細に見ることを所望する場合には、拠点Ａのユーザの指示により、拠点Ａに表示された拠点Ｂの表示画面を例えば全画面に拡大し、拠点Ｂのユーザの映像を隠すようにしても良い。これにより、拠点Ａのユーザは、拠点Ａから送信したＰＣ画面が、どの程度の解像度で拠点Ｂに表示されているかを確認可能である。
【００３８】
以上により、拠点Ｂの表示画面の内容を、拠点Ａの側で確認することが可能である。また、上記拠点Ｂの表示画面データは、拠点Ｂで実際に受信している映像を用いて作成している。したがって、万一何らかの原因により、拠点Ａから拠点Ｂへの映像送信に不具合が生じていた場合でも、その不具合画面も含めて拠点Ｂの表示内容を拠点Ａ側で確認・把握することが可能である。
【００３９】
なお、上記の説明において、拠点Ｂのメディア符号化部１１９は、表示画面データをメディアデータに符号化する際、必要に応じ当該表示画面データの解像度もしくはフレームレートを落としてから符号化しても良い。主映像である拠点Ｂの撮像処理部１１７で撮像された映像よりも表示画面データの解像度もしくはフレームレートを下げて符号化することにより、ネットワーク回線の帯域やメディア符号化部１１９の符号化能力が限られているような場合でも、主映像側の映像品質を優先させ、かつ表示画面の確認を行わせることが可能である。
【００４０】
また、上記実施例において、拠点Ｂの送受信装置２１は、表示レイアウト部１１３で構成された表示画面全体のデータをメディア符号化部１１９で符号化し、ネットワーク送受信部１１１を介して拠点Ａの送受信装置１１に送信しているが、拠点Ａの送受信装置１１から送出されたメディアデータをもって表示画面全体のデータに代えても良い。これにより、拠点Ａのユーザは、拠点Ｂに送信したデータが実際に拠点Ｂに到達したことを確認可能である。このとき、拠点Ｂの送受信装置２１は、拠点Ａの送受信装置１１から受信したメディアデータを一旦復号化し再度符号化しないこともでき、この場合、拠点Ｂの送受信装置２１における処理負荷を軽減できる。これは特に、拠点Ｂの送受信装置２１が、拠点Ａからの主映像（または副映像）を受信した映像にレイアウト処理を加えず全画面に表示している場合に、拠点Ａから受信した符号化映像信号が拠点Ｂにおける表示画面そのものとなるため有効である。
【００４１】
なお、本実施例において、拠点Ａの送受信装置１１が、拠点ＡのＰＣ画像を副映像として拠点Ｂに送信するものとして説明したが、拠点Ａの送受信装置は、ＰＣ画像として表示されるファイルを、ファイルとして拠点Ｂに送信しても良い。この場合、拠点Ｂの送受信装置２１が、受信したファイルを解釈し映像として構成し主映像と重畳したものを拠点Ｂにおける表示データとすれば良い。
【実施例２】
【００４２】
次に、実施例２について説明する。実施例１と同様の部分は説明を省略する。
実施例１との違いは、拠点Ｂ側の表示画面の送信を、拠点Ａ側からの要求に基づいて行うことである。
【００４３】
拠点Ａ側の送受信装置１１は、拠点Ｂに対する表示画面の送信を要求するユーザの指示をＵＩ処理部１１６において受け付ける。ＵＩ処理部１１６はその指示を制御部１１５に伝える。制御部１１５では、上記指示を受け取ると、ネットワーク送受信部１１１を介して、拠点Ｂ側の送受信装置２１に対して、表示画面の送信要求を送信する。
【００４４】
拠点Ｂ側の送受信装置１２では、ネットワーク送受信部１１１において、拠点Ａ側から上記表示画面の送信要求を受信し、それを制御部１１５に伝える。制御部１１５では、上記表示画面の送信要求を受け取ると、それに基づいてメディア符号化部１１９を制御し、上記表示画面データをメディアデータに符号化させ、そのメディアデータを拠点Ａ側の送受信装置１２に対して送信させる。
【００４５】
以上のようにして、拠点Ｂ側の表示画面を拠点Ａ側に送信するか否かを、拠点Ａ側からの要求に応じて制御することが可能である。
【００４６】
さらに、拠点Ｂ側の送受信装置２１が、上記表示画面の送信を無効化する指示を、ＵＩ処理部１１６を通じて拠点Ｂ側のユーザから受け付けた場合は、その指示を受けた制御部１１５は、拠点Ａから上記表示画面の送信要求を受け取っているにもかかわらず、上記表示画面データの拠点Ａに対する送信を行わないようメディア符号化部１１９を制御するようにしても良い。その場合は、拠点Ｂのユーザの意向に配慮して、上記表示画面の送信を行わないようにすることができ、プライバシーを守ることが可能である。
【００４７】
また、さらにその場合、制御部１１５は、拠点Ａに対して、上記表示画面の送信要求が無効化された旨の通知をネットワーク送受信部１１１を介して送信するようにしても良い。当該通知を受け取った拠点Ａ側の送受信装置１１は、その通知に応じたメッセージを表示して拠点Ａ側のユーザに知らせても良い。その場合は、拠点Ａ側のユーザは、拠点Ｂの表示画面の送信要求を指示したにもかかわらず、その画面が表示されない理由を知ることができ、ユーザの利便性を向上させることが可能である。
【実施例３】
【００４８】
次に、実施例３について説明する。実施例１と同様の部分は説明を省略する。
【００４９】
図５に、本実施例における送受信装置１１の構成図の例を示す。図１との違いは、撮像処理部１１７の出力が表示レイアウト部１１３に入力されていることである。それにより、表示レイアウト部１１３は、拠点Ａ側から送られてきた映像に加え、必要に応じて拠点Ｂ側のローカルのカメラ映像を用いて表示画面を構成するレイアウト処理を行うことが可能である。すなわち、図４に示した表示画面データの例に加え、図６（ａ）に示すように、ローカルのカメラ映像を用いた表示画面を作成することが可能である。表示レイアウト部１１３から出力された表示画面データは、表示出力端子を介して、図示しない外部の表示装置に出力され、拠点Ｂ側のユーザに対して表示される。それにより、拠点Ｂ側のユーザは自分がどのように撮影されているかを確認することが出来、ユーザの利便性を高めることが可能である。
【００５０】
またさらに、表示レイアウト部１１３では、図６（ａ）の表示画面を上記表示出力端子に出力するとともに、そこからローカルのカメラ映像のみを除いた図６（ｂ）に示す画面データを同時に作成し、この後者をメディア符号化部１１９に送り、その映像をメディアデータに符号化して、拠点Ａ側に対して送信するようにしても良い。
【００５１】
その場合は、上記表示画面データとは別にメディア符号化部１１９で符号化されて拠点Ａ側に送信されている拠点Ｂのカメラ映像（撮像処理部１１７で撮影された映像）と画像内容の重複を避けることができ、ユーザにとっての分かり易さを向上させることが可能である。
【００５２】
なお、本発明は上記した実施例に限定されるものではなく、様々な変形例が含まれる。例えば、上記した実施例は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。また、ある実施例の構成の一部を他の実施例の構成に置き換えることが可能であり、また、ある実施例の構成に他の実施例の構成を加えることも可能である。また、各実施例の構成の一部について、他の構成の追加・削除・置換をすることが可能である。
【００５３】
また、上記の各構成、機能、処理部、処理手段等は、それらの一部又は全部を、例えば集積回路で設計する等によりハードウェアで実現してもよい。また、上記の各構成、機能等は、プロセッサがそれぞれの機能を実現するプログラムを解釈し、実行することによりソフトウェアで実現してもよい。各機能を実現するプログラム、テーブル、ファイル等の情報は、メモリや、ハードディスク、ＳＳＤ（Solid State Drive）等の記録装置、または、ＩＣカード、ＳＤカード、ＤＶＤ等の記録媒体に置くことができる。
【００５４】
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際にはほとんど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【００５５】
１…拠点Ａ
２…拠点Ｂ
３…宅外ネットワーク（公衆ネットワーク）
４…ＳＩＰサーバ
１１，１２…送受信装置
１３，２３…宅内ネットワーク
【特許請求の範囲】
【請求項１】
ネットワークを介して映像の通信を行う通信装置において、
ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、
通信相手から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化手段と、
を備え、
上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信装置。
【請求項２】
請求項１に記載の通信装置において、
上記ネットワーク送受信手段とは別に、ローカル映像を入力するローカル映像入力手段を備え、
上記映像符号化手段は、上記第１の映像信号に加え、上記映像入力手段から入力されたローカル映像を第２の映像信号として入力され、当該第２の映像信号を符号化して、符号化映像信号を出力し、
上記第１の映像信号の解像度は、上記第２の映像信号の解像度と比較して、同じまたはそれより小さいことを特徴とする通信装置。
【請求項３】
請求項１に記載の通信装置において、
上記ネットワーク送受信手段とは別に、ローカル映像を入力するローカル映像入力手段を備え、
上記映像符号化手段は、上記第１の映像信号に加え、上記映像入力手段から入力されたローカル映像を第２の映像信号として入力され、当該第２の映像信号を符号化して、符号化映像信号を出力するとともに、上記第１の映像信号を符号化するフレームレートは、上記第２の映像信号を符号化するフレームレートと比較して、同じまたはそれより小さいことを特徴とする通信装置。
【請求項４】
請求項１に記載の通信装置において、
上記通信相手から上記ネットワーク送受信手段を通じて構成画面の送信要求を受信する制御手段を備え、
上記制御手段は、上記通信相手から上記構成画面の送信要求を受信した場合に、上記符号化映像信号の出力を許可するよう上記映像符号化手段を制御することを特徴とする通信装置。
【請求項５】
請求項４に記載の通信装置において、
ユーザからの操作を受け付ける操作入力手段を備え、
上記制御手段は、
上記操作入力手段を介してユーザから構成画面の送信の無効化を指示された場合には、上記通信相手から上記構成画面の送信要求の受信の有無に関わらず、上記符号化映像信号の出力を不許可とするよう上記映像符号化手段を制御することを特徴とする通信装置。
【請求項６】
請求項５に記載の通信装置において、
上記制御手段は、
上記操作入力手段を介してユーザから構成画面の送信の無効化を指示され、かつ上記通信相手から上記構成画面の送信要求を受信した場合には、上記通信相手に対して無効化通知を送信することを特徴とする通信装置。
【請求項７】
請求項１に記載の通信装置において、
画面表示用の表示出力と、
上記ネットワーク送受信手段とは別に、ローカル映像を入力するローカル映像入力手段を備え、
上記画面構成手段は、
上記ローカル映像信号を入力され、当該ローカル映像信号を含めて画面を構成した第１の構成画面と、
当該ローカル映像信号を含めずに画面を構成した第２の構成画面とを出力し、
上記映像符号化手段は、上記画面構成手段において構成された第２の構成画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力し、
上記第１の構成画面を上記表示出力から出力することを特徴とする通信装置。
【請求項８】
請求項１に記載の通信装置において、
前記映像符号化手段は、ファイルの入力を受け、入力されたファイルを符号化して、前記符号化映像信号に含めることを特徴とする通信装置。
【請求項９】
ネットワークを介して第１の通信装置と第２の通信装置との間で映像の通信を行う通信システムにおいて、
上記第１の通信装置は、
ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、
上記第２の通信装置から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化手段と、
を備え、
上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信装置であり、
上記第２の通信装置は、
上記第１の通信装置に対して符号化映像信号を送信するとともに、上記第１の通信装置から送信された符号化映像信号を受信して、復号化し、表示することを特徴とする通信装置であることを特徴とする通信システム。
【請求項１０】
ネットワークを介して第１の通信装置と第２の通信装置との間で映像の通信を行う通信システムにおける第２の通信装置であって、
上記第１の通信装置は、
ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、
上記第２の通信装置から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化手段と、
を備え、
上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信装置であり、
上記第２の通信装置は、
上記第１の通信装置に対して符号化映像信号を送信するとともに、上記第１の通信装置から送信された符号化映像信号を受信して、復号化し、表示することを特徴とする通信装置であることを特徴とする通信装置。
【請求項１１】
ネットワークを介して映像の通信を行う通信方法において、
ネットワークからデータの受信を行うネットワーク受信ステップと、
通信相手から受信した符号化映像信号を復号化して復号化映像信号を出力する復号化ステップと、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成ステップと、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化ステップと、
ネットワークに対してデータの送信を行うネットワーク送信ステップと、
を備え、
上記映像符号化ステップは、上記画面構成ステップにおいて構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信方法。
【請求項１】
ネットワークを介して映像の通信を行う通信装置において、
ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、
通信相手から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化手段と、
を備え、
上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信装置。
【請求項２】
請求項１に記載の通信装置において、
上記ネットワーク送受信手段とは別に、ローカル映像を入力するローカル映像入力手段を備え、
上記映像符号化手段は、上記第１の映像信号に加え、上記映像入力手段から入力されたローカル映像を第２の映像信号として入力され、当該第２の映像信号を符号化して、符号化映像信号を出力し、
上記第１の映像信号の解像度は、上記第２の映像信号の解像度と比較して、同じまたはそれより小さいことを特徴とする通信装置。
【請求項３】
請求項１に記載の通信装置において、
上記ネットワーク送受信手段とは別に、ローカル映像を入力するローカル映像入力手段を備え、
上記映像符号化手段は、上記第１の映像信号に加え、上記映像入力手段から入力されたローカル映像を第２の映像信号として入力され、当該第２の映像信号を符号化して、符号化映像信号を出力するとともに、上記第１の映像信号を符号化するフレームレートは、上記第２の映像信号を符号化するフレームレートと比較して、同じまたはそれより小さいことを特徴とする通信装置。
【請求項４】
請求項１に記載の通信装置において、
上記通信相手から上記ネットワーク送受信手段を通じて構成画面の送信要求を受信する制御手段を備え、
上記制御手段は、上記通信相手から上記構成画面の送信要求を受信した場合に、上記符号化映像信号の出力を許可するよう上記映像符号化手段を制御することを特徴とする通信装置。
【請求項５】
請求項４に記載の通信装置において、
ユーザからの操作を受け付ける操作入力手段を備え、
上記制御手段は、
上記操作入力手段を介してユーザから構成画面の送信の無効化を指示された場合には、上記通信相手から上記構成画面の送信要求の受信の有無に関わらず、上記符号化映像信号の出力を不許可とするよう上記映像符号化手段を制御することを特徴とする通信装置。
【請求項６】
請求項５に記載の通信装置において、
上記制御手段は、
上記操作入力手段を介してユーザから構成画面の送信の無効化を指示され、かつ上記通信相手から上記構成画面の送信要求を受信した場合には、上記通信相手に対して無効化通知を送信することを特徴とする通信装置。
【請求項７】
請求項１に記載の通信装置において、
画面表示用の表示出力と、
上記ネットワーク送受信手段とは別に、ローカル映像を入力するローカル映像入力手段を備え、
上記画面構成手段は、
上記ローカル映像信号を入力され、当該ローカル映像信号を含めて画面を構成した第１の構成画面と、
当該ローカル映像信号を含めずに画面を構成した第２の構成画面とを出力し、
上記映像符号化手段は、上記画面構成手段において構成された第２の構成画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力し、
上記第１の構成画面を上記表示出力から出力することを特徴とする通信装置。
【請求項８】
請求項１に記載の通信装置において、
前記映像符号化手段は、ファイルの入力を受け、入力されたファイルを符号化して、前記符号化映像信号に含めることを特徴とする通信装置。
【請求項９】
ネットワークを介して第１の通信装置と第２の通信装置との間で映像の通信を行う通信システムにおいて、
上記第１の通信装置は、
ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、
上記第２の通信装置から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化手段と、
を備え、
上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信装置であり、
上記第２の通信装置は、
上記第１の通信装置に対して符号化映像信号を送信するとともに、上記第１の通信装置から送信された符号化映像信号を受信して、復号化し、表示することを特徴とする通信装置であることを特徴とする通信システム。
【請求項１０】
ネットワークを介して第１の通信装置と第２の通信装置との間で映像の通信を行う通信システムにおける第２の通信装置であって、
上記第１の通信装置は、
ネットワークに対してデータの送信／受信を行うネットワーク送受信手段と、
上記第２の通信装置から上記ネットワーク送受信手段を通じて受信した符号化映像信号を復号化して復号化映像信号を出力する復号化手段と、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成手段と、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化手段と、
を備え、
上記映像符号化手段は、上記画面構成手段において構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信装置であり、
上記第２の通信装置は、
上記第１の通信装置に対して符号化映像信号を送信するとともに、上記第１の通信装置から送信された符号化映像信号を受信して、復号化し、表示することを特徴とする通信装置であることを特徴とする通信装置。
【請求項１１】
ネットワークを介して映像の通信を行う通信方法において、
ネットワークからデータの受信を行うネットワーク受信ステップと、
通信相手から受信した符号化映像信号を復号化して復号化映像信号を出力する復号化ステップと、
上記復号化映像信号を含む１つ以上の映像信号を用いて画面を構成する画面構成ステップと、
入力された映像信号を符号化し、符号化映像信号を出力する映像符号化ステップと、
ネットワークに対してデータの送信を行うネットワーク送信ステップと、
を備え、
上記映像符号化ステップは、上記画面構成ステップにおいて構成された画面を第１の映像信号として入力され、当該第１の映像信号を符号化して、符号化映像信号を出力することを特徴とする通信方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２０１３−９３７４１（Ｐ２０１３−９３７４１Ａ）
【公開日】平成２５年５月１６日（２０１３．５．１６）
【国際特許分類】
【出願番号】特願２０１１−２３４５８１（Ｐ２０１１−２３４５８１）
【出願日】平成２３年１０月２６日（２０１１．１０．２６）
【出願人】（５０９１８９４４４）日立コンシューマエレクトロニクス株式会社 (998)
【Ｆターム（参考）】
【公開日】平成２５年５月１６日（２０１３．５．１６）
【国際特許分類】
【出願日】平成２３年１０月２６日（２０１１．１０．２６）
【出願人】（５０９１８９４４４）日立コンシューマエレクトロニクス株式会社 (998)
【Ｆターム（参考）】
[ Back to top ]