画像通信システムおよび画像通信方法
【課題】 簡単な構成で、相手側に対象物を明確に把握させることができる画像通信システムおよび画像通信方法を提供する。
【解決手段】 第１画像通信装置１００の操作者は、第１ディスプレイ１０２に第２画像通信装置２００から送信されてきた画像が表示されている状態で、タッチペン１０４により、第１タッチパネル１０３を介して対象物３３０が表示されている指定領域１０５を入力すると、入力された指定領域１０５に表示されていた対象物３００が表示されていた部分の画像についての情報が、第２画像通信装置２００へと送信される。第２画像通信装置２００では、受信した情報に基づいて、指定領域１０５内に表示されていた画像を、自機の第２ディスプレイ２０２に表示する。このとき、第１画像通信装置１００から送られてくる撮影画像と、対象物３００が表示されている画像とは、第２ディスプレイ２０２に重畳されて表示される。
【解決手段】 第１画像通信装置１００の操作者は、第１ディスプレイ１０２に第２画像通信装置２００から送信されてきた画像が表示されている状態で、タッチペン１０４により、第１タッチパネル１０３を介して対象物３３０が表示されている指定領域１０５を入力すると、入力された指定領域１０５に表示されていた対象物３００が表示されていた部分の画像についての情報が、第２画像通信装置２００へと送信される。第２画像通信装置２００では、受信した情報に基づいて、指定領域１０５内に表示されていた画像を、自機の第２ディスプレイ２０２に表示する。このとき、第１画像通信装置１００から送られてくる撮影画像と、対象物３００が表示されている画像とは、第２ディスプレイ２０２に重畳されて表示される。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムおよび画像通信方法に関する。
【背景技術】
【０００２】
データ通信の通信帯域の増加に伴い、電話通信と同時に画像通信を行う、いわゆるテレビ電話通信が容易に実現可能となっている。
【０００３】
テレビ電話通信を実現するテレビ電話通信装置（以下では単に「通信装置」と略称する。）は、通話者の画像を撮像するための撮像手段、音声データおよび画像データを送受信するための通信手段、画像を表示する表示手段、音声の入出力を行う送受話器などを備えている。
【０００４】
撮像手段によって撮像された画像は、画像データとして相手側通信装置に送信されるとともに、通話者の確認用に表示手段の一部に表示される。
【０００５】
このような通信システムは、たとえば遠隔地を結んでのテレビ会議やプレゼンテーションなどに利用される。
【０００６】
会議やプレゼンテーション中には、相手側から送られてくる画像に表示されている物を指定して説明を求めたり、質問する場合が想定されるが、そのときは、口頭でその対象物を指定する必要がある。対象物が明確なものであれば、口頭での説明であっても十分に伝わるかもしれないが、対象物が不明確なものもあり、口頭で正確に対象物を指定することが困難なときがある。対象物を指定するだけで長時間を要することになったり、相手側で対象物とは別の物を対象物として誤って認識してしまうと、意思の疎通ができずに会議やプレゼンテーションがスムーズに進まなくなってしまう。
【０００７】
特許文献１記載の画像入出力システムでは、プレゼンテーション側で自機器の表示タブレットの位置情報入力部を用いて原稿画像上の特定の箇所を示す位置情報を入力すると、その位置情報が送信部を介して相手装置に送られ、相手装置ではその送られてきた位置情報に基づき、表示タブレットの原稿画像表示部に表示された原稿画像の対応する位置にカーソルを表示させる。
【０００８】
特許文献２記載の情報入力装置は、ポインタの位置を認識するカメラ装置とディスプレイ装置とが、それぞれ異なる偏光を通過させる偏光フィルタを有し、カメラパラメータなどを相手側に伝送することで、情報を表示した画面に、通信相手の映像を一致するように表示する。
【０００９】
【特許文献１】特開平８−９０７５号公報
【特許文献２】特開２００５−１１７２８５号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
特許文献１記載の発明では、原稿画像の特定位置を指定することができるが、プレゼンテーション側が自らの原稿の位置を指定できることに留まっており、プレゼンテーションを受ける側からは何ら指定することができない。特許文献２記載の発明では、指定位置を相手側に伝えるために伝送すべきデータ量が多く、さらにカメラ装置とディスプレイ装置とで異なる偏光フィルタの貼り付けを行う必要があるなどハードウェア構成を追加する必要がある。
【００１１】
本発明の目的は、簡単な構成で、相手側に対象物を明確に把握させることができる画像通信システムおよび画像通信方法を提供することである。
【課題を解決するための手段】
【００１２】
本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記映像抽出手段にて抽出した副映像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる副映像を受信する受信手段と、
前記受信手段にて受信した副映像を表示する表示手段とを備えることを特徴とする画像通信システムである。
【００１３】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信手段を備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる範囲情報を受信する受信手段と、
第１画像通信装置に送信した第２主映像から、前記受信手段にて受信した範囲情報に基づいて、副映像を抽出する抽出手段と、
前記抽出手段にて抽出した副映像を表示する表示手段とを備えることを特徴とする画像通信システムである。
【００１４】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記第１撮像手段で撮像した第１主映像と前記映像抽出手段にて抽出した副映像と合成して合成画像を生成する合成手段と、
前記合成手段にて合成された合成画像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信手段と、
前記受信手段にて受信した前記合成画像を表示する表示手段とを備えることを特徴とする画像通信システムである。
【００１５】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
抽出した副映像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる副映像を受信する受信工程と、
受信した副映像を表示する表示工程とを実行することを特徴とする画像通信方法である。
【００１６】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信工程を実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる範囲情報を受信する受信工程と、
第１画像通信装置に送信した第２主映像から、受信した範囲情報に基づいて、副映像を抽出する抽出工程と、
抽出した副映像を表示する表示工程とを実行することを特徴とする画像通信方法である。
【００１７】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
撮像した第１主映像と抽出した副映像と合成して合成画像を生成する合成工程と、
合成された合成画像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信工程と、
受信した前記合成画像を表示する表示工程とを実行することを特徴とする画像通信方法である。
【発明の効果】
【００１８】
本発明によれば、前記第１画像通信装置では、映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出手段が、前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する。送信手段は、前記映像抽出手段にて抽出した副映像を前記第２画像通信装置に送信する。
【００１９】
前記第２画像通信装置では、受信手段が、前記第１画像通信装置から送られてくる副映像を受信すると、表示手段が、前記受信手段にて受信した副映像を表示する。
【００２０】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００２１】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。
また本発明によれば、前記第１画像通信装置では、映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、送信手段が、第１撮像手段で撮像した第１主映像および前記映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する。
【００２２】
前記第２画像通信装置は、受信手段が、前記第１画像通信装置から送られてくる第１主映像および範囲情報を受信すると、抽出手段が、第１画像通信装置に送信した第２主映像から、前記受信手段にて受信した範囲情報に基づいて、副映像を抽出し、表示手段が、前記受信手段にて受信した前記抽出手段にて抽出した副映像を表示する。
【００２３】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００２４】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、画像データそのものではなく範囲情報、たとえば座標などを送信すればよいので、送信するデータ量も少なくて済む。
【００２５】
また本発明によれば、前記第１画像通信装置では、映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出手段が、前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する。合成手段は、第１撮像手段で撮像した第１主映像と前記映像抽出手段にて抽出した副映像と合成して合成画像を生成し、送信手段が、前記合成手段にて合成された合成画像を前記第２画像通信装置に送信する。
【００２６】
前記第２画像通信装置では、受信手段が、前記第１画像通信装置から送られてくる前記合成画像を受信すると、表示手段が、前記受信手段にて受信した前記合成画像を表示する。
【００２７】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００２８】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、第２画像通信装置は、受信した画像を表示するだけでよいので、より簡単な構成、たとえば従来の画像通信装置であっても副映像を表示させることができる。
【００２９】
また本発明によれば、前記第１画像通信装置では、映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出工程では、前記映像位置指定工程にて指定された範囲に表示されている映像を副映像として抽出する。送信工程では、予め撮像された第１主映像および前記映像抽出工程にて抽出した副映像を前記第２画像通信装置に送信する。
【００３０】
前記第２画像通信装置では、受信工程で、前記第１画像通信装置から送られてくる副映像を受信すると、表示工程で、前記受信工程にて受信した副映像を表示する。
【００３１】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００３２】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。
また本発明によれば、前記第１画像通信装置では、映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、送信工程で、予め撮像された第１主映像および前記映像位置指定工程にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する。
【００３３】
前記第２画像通信装置では、受信工程で、前記第１画像通信装置から送られてくる第１主映像および範囲情報を受信すると、抽出工程で、第１画像通信装置に送信した第２主映像から、前記受信工程にて受信した範囲情報に基づいて、副映像を抽出し、表示工程で、前記受信工程にて受信した第１主映像および前記抽出工程にて抽出した副映像を表示する。
【００３４】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００３５】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、画像データそのものではなく範囲情報、たとえば座標などを送信すればよいので、送信するデータ量も少なくて済む。
【００３６】
また本発明によれば、前記第１画像通信装置では、映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出工程で、前記映像位置指定工程にて指定された範囲に表示されている映像を副映像として抽出する。合成工程では、予め撮像された第１主映像と前記映像抽出工程にて抽出した副映像と合成して合成画像を生成し、送信工程で、前記合成工程にて合成された合成画像を前記第２画像通信装置に送信する。
【００３７】
前記第２画像通信装置では、受信工程で、前記第１画像通信装置から送られてくる前記合成画像を受信すると、表示工程で、前記受信工程にて受信した前記合成画像を表示する。
【００３８】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００３９】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、第２画像通信装置は、受信した画像を表示するだけでよいので、より簡単な構成、たとえば従来の画像通信装置であっても副映像を表示させることができる。
【発明を実施するための最良の形態】
【００４０】
図１は、本発明の実施の一形態である画像通信システム１の概略を示す模式図である。
本発明の画像通信システム１は、２つの画像通信装置、第１画像通信装置１００と第２画像通信装置２００とで構成され、第１画像通信装置１００のカメラ１０１で撮像された映像が画像通信によって第２画像通信装置２００に送信され、第２画像通信装置の第２ディスプレイ２０２では、受信した画像を表示する。これと並行して第２画像通信装置２００のカメラ２０１で撮像された映像が画像通信によって第１画像通信装置１００に送信され、第１画像通信装置の第１ディスプレイ１０２では、受信した画像を表示する。
【００４１】
さらに、第１画像通信装置１００は、第１タッチパネル１０３を第１ディスプレイ１０２に重ねて設け、第１ディスプレイ１０２に表示されている画像に対して、特定の領域を指定することが可能となっている。具体的には、第２カメラ２０１により撮影された画像の中で、第１画像通信装置１００の操作者が対象物３００を指定したいとする。
【００４２】
第１画像通信装置１００の操作者は、第１ディスプレイ１０２に第２画像通信装置２００から送信されてきた画像が表示されている状態で、タッチペン１０４により、第１タッチパネル１０３を介して対象物３３０が表示されている指定領域１０５を入力すると、入力された指定領域１０５に表示されていた対象物３００の部分の画像についての情報が、第２画像通信装置２００へと送信される。
【００４３】
第２画像通信装置２００では、受信した情報に基づいて、指定領域１０５内に表示されていた画像を、自機の第２ディスプレイ２０２に表示する。このとき、第１画像通信装置１００から送られてくる撮影画像と、対象物３００が表示されている画像とは、第２ディスプレイ２０２に重畳されて表示される。
【００４４】
第２画像通信装置２００の操作者は、第２ディスプレイ２０２に表示された画像を見ることで、第１画像通信装置１００の操作者が指定する対象物３００を明確に、かつ迅速に把握することができる。
【００４５】
指定領域１０５の中の一部をさらに指定するために、第１タッチパネル１０３を介して指定領域内の指定部分をポインタ（カーソル、矢印など）で指定すると、その指定部分の情報が第２画像通信装置２００に送信され、第２画像通信装置２００では、指定領域内の画像に指定部分のポインタを加えて表示する。
【００４６】
また、第１ディスプレイ１０２に表示されている対象物３００が小さい場合や、指定部分を明確にしたい場合などには、指定領域１０５の画像を拡大するように指示を入力すると、拡大指示が第２画像通信装置２００へと送信され、第２画像通信装置２００では、第２ディスプレイ２０２に、指定領域１０５の画像が拡大されて表示される。
【００４７】
なお、第２画像通信装置２００にも、第２タッチパネル２０３が備えられており、第１画像通信装置１００と同様に、指定領域の入力などを行える。すなわち、第１画像通信装置１００と第２画像通信装置２００とは同一の構成を有しており、指定領域を入力する側の装置が、第１画像通信装置１００であっても第２画像通信装置２００であってもよい。
【００４８】
図２は、画像通信システム１の構成を示すブロック図である。
本実施形態では、画像通信システム１は、２つの画像通信装置、第１画像通信装置１００と第２画像通信装置２００とで構成される。
【００４９】
第１画像通信装置（以下では「第１装置」と略称する）１００は、第１撮像部１０、第１画像処理部１１とで構成され、第１画像処理部１１は、さらに第１映像処理部１２、第１通信部１３、第１記憶部１４、第１ポインタ制御部１５、第１座標検出部１６、第１表示部１７、第１タブレット１８を含んで構成される。
【００５０】
また、第１映像処理部１２は、共有映像生成部１２ａ、画像拡大処理部１２ｂ、ＰＩＰ処理部１２ｃ、映像合成部１２ｄを含む。
【００５１】
第２画像通信装置（以下では「第２装置」と略称する）２００は、第２撮像部２０、第２画像処理部２１とで構成され、第２画像処理部２１は、さらに第２映像処理部２２、第２通信部２３、第２記憶部２４、第２ポインタ制御部２５、第２座標検出部２６、第２表示部２７、第２タブレット２８を含んで構成される。
【００５２】
また、第２映像処理部２２は、共有映像生成部２２ａ、画像拡大処理部２２ｂ、ＰＩＰ処理部２２ｃ、映像合成部２２ｄを含む。
【００５３】
上記のように、第１装置１００と第２装置２００とは、同一の構成であるので、以下では、第１装置１００の構成について説明する。また、図１に示したように、指定領域１０５を指定する側が第１装置１００であり、指定された画像を表示する側が第２装置２００であるものとする。
【００５４】
第１撮像部１０は、たとえば、たとえば、ＣＣＤ（電荷結合素子）カメラなどで実現され、被写体からの反射光を受光し、その受光量をアナログ映像信号として出力する第１カメラ１０１である。
【００５５】
第１画像処理部１１は、第１撮像部１０から出力される映像信号をデジタル映像データに変換し、必要な画像処理を施して、第２装置２００へと送信する。また、第１タブレット１８で入力された指定領域内の画像についても必要な画像処理を施して、第２装置２００へと送信する。
【００５６】
共有映像生成部１２ａは、副映像である共有映像に関する情報として共有映像座標情報３０を取得して記憶する。共有映像とは、図１で示したように、指定領域１０５を入力したときに、指定領域１０５内に表示されている画像のことで、第２装置２００で撮像されて送られてくる画像（主映像）の一部を切り出したものに相当する。
【００５７】
画像拡大処理部１２ｂは、共有映像または主映像の拡大処理を行い、入力された拡大サイズ（拡大倍率、拡大後の寸法など）３１を記憶しておく。
【００５８】
ＰＩＰ処理部１２ｃは、ピクチャインピクチャ（ＰＩＰ）処理により、主映像に共有映像を重畳して表示させる。
【００５９】
主映像に重畳させて表示させる共有映像いついては、指定領域を指定する側の装置と指定された共有映像を受信する側の装置では異なっている。
【００６０】
指定領域１０５を指定する側の第１装置１００では、第２装置２００から受信した画像データに基づく主映像と、自装置で指定された指定領域１０５内の共有映像を重畳して第１表示部１７に表示する。
【００６１】
指定された共有映像を受信する側の第２装置２００では、第１装置１００から受信した画像データに基づく主映像と、第１装置１００で指定された指定領域１０５内の共有映像を重畳して第２表示部２７に表示する。
【００６２】
ＰＩＰ処理部１２ｃは、ＰＩＰ処理、すなわち指定領域を入力して共有映像を表示するか、指定された共有映像を表示するかいずれにしても共有映像の表示を行うかどうかを示すＰＩＰ ＯＮ／ＯＦＦ情報を記憶する。共有映像を第１表示部１７に表示するときはＰＩＰ ＯＮであり、表示しないときはＰＩＰ ＯＦＦである。ＰＩＰ位置情報３３およびＰＩＰサイズ情報３４は、ＰＩＰ表示を行うときに、共有映像を第１表示部１７に表示させる位置座標と、そのサイズを示す情報である。これらの情報は、装置の操作者が任意に変更できるように、第１タブレット１８から変更値が入力可能で、入力されると記憶しているそれぞれの情報を更新するように構成される。また、変更されない場合には、予め与えられる初期値に基づいてＰＩＰ処理を行う。
【００６３】
映像合成部１２ｄは、ＰＩＰ処理において、共有映像を主映像に重ね合わせるのではなく、主映像と共有映像とを合成して１つの画像データを作成し、合成後の画像データを第２装置２００へ送信する。
【００６４】
第１通信部１３は、第２装置２００と画像通信、電話通信およびデータ通信可能に構成されており、公衆電話通信網を介する通信、ＬＡＮ（Local Area network）を介する通信などが可能で特に通信インフラには限定されない。
【００６５】
第１通信部１３は、接続先情報３５として接続先の通信装置、本実施形態では第２装置２００の通信に関する情報、たとえば、電話番号、ＩＰアドレス、使用する通信プロトコルなどを参照して第２装置２００との通信を行う。
【００６６】
第１記憶部１４は、第２装置２００から送られてきた主映像を記憶する主映像記憶部１４ａと、第１撮像部１０で撮像し、第２装置２００へと送信する映像および主映像の一部である指定領域内の共有映像を記憶する送信映像記憶部１４ｂを有し、さらにＰＩＰ処理部１２ｃがＰＩＰ処理を行う際に主映像に重畳するための映像であるＰＩＰ映像３６も記憶される。
【００６７】
第１ポインタ制御部１５は、第１タブレット１８により入力されたポインタの位置を制御する。第１座標検出部１６は、第１タブレット１８により入力された座標を検出し、必要に応じて検出した座標情報を第１ポインタ制御部１５および第１映像処理部１２に受け渡す。第１表示部１７は、第２装置２００から送られてきた主映像および指定領域内の共有映像を主に表示する第１ディスプレイ１０２である。
【００６８】
第１タブレット１８は、第１タッチパネル１０３とペン１０４などの入力デバイスで構成され、操作者がペン１０４を用いて、第１タッチパネル１０３が重ねて設けられた第１ディスプレイ１０２の上をなぞることで該当箇所の座標が入力されるので、直感的な操作が可能となる。
【００６９】
以下では、フローチャートを用いて画像通信システム１による画像通信処理について詳細に説明する。
【００７０】
第２装置２００において共有映像を表示させるにあたっては、第１装置１００から共有映像に関する情報を第２装置２００へ送信し、第２装置２００では、その関連情報に基づいて共有映像を第２表示部２７に表示する。
【００７１】
共有映像に関する情報については、指定領域１０５内の画像データを情報として送信する第１形態、指定領域の座標を情報として送信する第２形態、指定領域１０５内の共有映像と、第１撮像部で撮像した主映像とを合成し、合成映像を情報として送信する第３形態とがある。
【００７２】
図３は、第１形態の画像通信処理を示すフローチャートである。図３Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図３Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。
【００７３】
第１装置１００では、ステップＡ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＡ２で第１表示部１７に主映像を表示させる。
【００７４】
ステップＡ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＡ４に進み、入力されなければステップＡ１に戻って主映像の受信と表示を繰り返す。
【００７５】
ステップＡ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＡ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定された領域部分の画像データを関連情報として記憶する。
【００７６】
ステップＡ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＡ７で、表示サイズを読み込む。
【００７７】
ステップＡ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。
【００７８】
ステップＡ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＡ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＡ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＡ１２で、第２装置２００へ送信する共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。
【００７９】
なお、サイズの変更はたとえば、第１タブレット１８を介して現在表示されている共有映像の縁をドラッグ操作することにより変更できる。ポインタの追加も、第１タブレット１８を介して現在表示されている共有映像のいずれかをポインティング操作することにより追加できる。
【００８０】
ステップＡ１３では、共有映像を第２装置２００の第２表示部２７に表示させるために共有映像表示コマンドを第２装置２００へ送信する。共有映像表示コマンドは、第２装置２００において、ＰＩＰ処理部２２ｃを起動させて、送信した共有映像をＰＩＰ表示させるためのコマンドである。
【００８１】
ステップＡ１４では、送信映像記憶部１４ｂに記憶された共有映像となる部分画像データを第２装置２００へ送信する。
【００８２】
図示はしていないが、第１装置１００は、第１撮像部１０で主映像を撮影し、第２装置２００へ送信している。主映像の送信のタイミングは、共有映像の送信ステップで同時に送信してもよいし、異なるステップで送信してもよい。
【００８３】
第２装置２００では、ステップＢ１で、第２撮像部２０が主映像を撮影し、ステップＢ２では、第１装置１００へ主映像となる画像データを送信する。
【００８４】
ステップＢ３で共有映像表示コマンドを受信したかどうかを判断し、受信していればステップＢ４に進み、受信していなければステップＢ１に戻って主映像の撮影と送信とを繰り返す。
【００８５】
ステップＢ４では、共有映像となる部分画像データを受信し、ステップＢ５では、ＰＩＰ処理部２２が起動してステップＢ５で表示位置の読み込みとステップＢ６で表示サイズの読み込みを行う。
【００８６】
ステップＢ７では、ＰＩＰ処理部２２が、第１装置１００から送られてくる主映像に共有映像を重ね合わせて、第２表示部２７にＰＩＰ表示させる。ステップＢ８では、所定の入力手順により共有映像の表示位置が変更されると、ステップＢ９で表示されている共有映像の表示位置を変更する。
【００８７】
ステップＢ１０で所定の入力手順により共有映像のサイズが変更されると、ステップＢ１１で表示されている共有映像のサイズを変更する。
【００８８】
なお、表示位置の変更は、たとえば、第２タブレット２８を介して現在表示されている共有映像の縁以外の部分をドラッグ操作することにより変更できる。サイズの変更は、たとえば、第２タブレット２８を介して現在表示されている共有映像の縁をドラッグ操作することにより変更できる。
【００８９】
ステップＢ１２で、共有映像の表示を終了する指示が入力されると共有映像を消して処理を終了する。終了の指示が入力されなければステップＢ７に戻って表示を継続する。
【００９０】
図４は、第２形態の画像通信処理を示すフローチャートである。図４Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図４Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。
【００９１】
第１装置１００では、ステップＣ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＣ２で第１表示部１７に主映像を表示させる。
【００９２】
ステップＣ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＣ４に進み、入力されなければステップＣ１に戻って主映像の受信と表示を繰り返す。
【００９３】
ステップＣ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＣ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定領域の座標情報を第２装置２００に送信する関連情報として記憶する。
【００９４】
ステップＣ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＣ７で、表示サイズを読み込む。
【００９５】
ステップＣ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。
【００９６】
ステップＣ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＣ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＣ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＣ１２で、第２装置２００へ送信する共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。
【００９７】
ステップＣ１３では、共有映像を第２装置２００の第２表示部２７に表示させるために共有映像表示コマンドを第２装置２００へ送信する。共有映像表示コマンドは、第２装置２００において、ＰＩＰ処理部２２ｃを起動させて、送信した共有映像の座標情報を基に、共有映像をＰＩＰ表示させるためのコマンドである。
【００９８】
ステップＣ１４では、送信映像記憶部１４ｂに記憶された共有映像となる指定領域を示す座標情報を第２装置２００へ送信する。
【００９９】
座標情報に続けてステップＣ１５では、共有映像の表示サイズを示す情報を第２装置２００へ送信し、ステップＣ１６では、共有映像に追加されたポインタ位置を示す情報を第２装置２００へ送信する。
【０１００】
図示はしていないが、第１装置１００は、第１撮像部１０で主映像を撮影し、第２装置２００へ送信している。主映像の送信のタイミングは、共有映像の送信ステップで同時に送信してもよいし、異なるステップで送信してもよい。
【０１０１】
第２装置２００では、ステップＤ１で、第２撮像部２０が主映像を撮影し、ステップＤ２では、第１装置１００へ主映像となる画像データを送信する。
【０１０２】
ステップＤ３で共有映像表示コマンドを受信したかどうかを判断し、受信していればステップＤ４に進み、受信していなければステップＤ１に戻って主映像の撮影と送信とを繰り返す。
【０１０３】
ステップＤ４では、共有映像をとなる部分を示す座標情報を受信し、続いてステップＤ５では、共有映像の表示サイズ情報を受信し、ステップＤ６では、ポインタ位置を示す情報を受信する。
【０１０４】
ステップＤ７では、第１表示部１００へ送信した撮像映像に、座標情報を適用し、該当部分の画像を共有映像として抽出する。ステップＤ８では、受信した表示サイズに基づいて共有映像の表示サイズを変更する。
【０１０５】
ステップＤ９では、ポインタ表示追加情報を受信したかどうかを判断し、受信していればステップＤ１０で共有映像にポインタを追加する。
【０１０６】
ステップＤ１１では、ＰＩＰ処理部２２ｃが、第１装置１００から送られてくる主映像に抽出された共有映像を重ね合わせて、第２表示部２７にＰＩＰ表示する。ステップＤ１２では、所定の入力手順により共有映像の表示位置が変更されると、ステップＤ１３で表示されている共有映像の表示位置を変更する。
【０１０７】
ステップＤ１４で所定の入力手順により共有映像のサイズが変更されると、ステップＤ１５で表示されている共有映像のサイズを変更する。
【０１０８】
ステップＤ１６で、共有映像の表示を終了する指示が入力されると共有映像を消して処理を終了する。終了の指示が入力されなければステップＤ１１に戻って表示を継続する。
【０１０９】
図５は、第３形態の画像通信処理を示すフローチャートである。図５Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図５Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。
【０１１０】
第１装置１００では、ステップＥ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＥ２で第１表示部１７に主映像を表示させる。
【０１１１】
ステップＥ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＥ４に進み、入力されなければステップＥ１に戻って主映像の受信と表示を繰り返す。
【０１１２】
ステップＥ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＥ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定された領域部分の画像データを記憶する。
【０１１３】
ステップＥ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＥ７で、表示サイズを読み込む。
【０１１４】
ステップＥ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。
【０１１５】
ステップＥ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＥ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＥ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＥ１２で、共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。
【０１１６】
ステップＥ１３では、第１撮像部１０が主映像を撮影し、ステップＥ１４で、主映像となる画像データと共有映像となる部分画像データとを合成する。ステップＥ１５では、合成画像データを関連情報として第２装置２００へ送信する。
【０１１７】
第１装置１００による主映像の撮影について、本実施形態では、撮影していることが明確になるように、ステップＥ１３として説明したが、撮影のタイミングはこれに限らず、ステップＥ１４で共有映像と合成するまでに撮影しておけばよい。
【０１１８】
第２装置２００では、ステップＦ１で、第２撮像部２０が主映像を撮影し、ステップＦ２では、第１装置１００へ主映像となる画像データを送信する。
【０１１９】
ステップＦ３で第１装置１００から主映像と共有映像が合成された合成映像となる合成画像データを受信し、ステップＦ４で合成画像を表示する。
【０１２０】
以上のように、第１装置１００側で領域を指定し、相手側の第２装置２００に指定した領域の画像を表示させることで、第２装置２００の操作者は第１装置１
００の操作者が対象としている物を容易にかつ明確に把握することができる。
【０１２１】
なお、上記の説明では、第１形態では、１度指定領域を指定すると該当する画像データを相手側に送信しているが、第１装置１００において、共有映像の指定取り止めの指示が入力されるまでは、第２通信装置１００から主映像が送られてくるたびに、共有映像となる画像データを生成して第２装置２００に送り続けることも可能である。また、第２形態では、座標の変更や、共有映像の指定取り止めの指示が入力されるまでは、第２通信装置１００において、共有映像となる画像データを生成して表示し続けることも可能である。
【図面の簡単な説明】
【０１２２】
【図１】本発明の実施の一形態である画像通信システム１の概略を示す模式図である。
【図２】画像通信システム１の構成を示すブロック図である。
【図３Ａ】第１形態の画像通信処理を示すフローチャートである。
【図３Ｂ】第１形態の画像通信処理を示すフローチャートである。
【図４Ａ】第２形態の画像通信処理を示すフローチャートである。
【図４Ｂ】第２形態の画像通信処理を示すフローチャートである。
【図５Ａ】第３形態の画像通信処理を示すフローチャートである。
【図５Ｂ】第３形態の画像通信処理を示すフローチャートである。
【符号の説明】
【０１２３】
１ 画像通信システム
１００ 第１画像通信装置
１０１，２０１ カメラ
１０２ 第１ディスプレイ
１０３ 第１タッチパネル
１０４ ペン
１０５ 指定領域
２００ 第２画像通信装置
２０２ 第２ディスプレイ
２０３ 第２タッチパネル
３００ 対象物
【技術分野】
【０００１】
本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムおよび画像通信方法に関する。
【背景技術】
【０００２】
データ通信の通信帯域の増加に伴い、電話通信と同時に画像通信を行う、いわゆるテレビ電話通信が容易に実現可能となっている。
【０００３】
テレビ電話通信を実現するテレビ電話通信装置（以下では単に「通信装置」と略称する。）は、通話者の画像を撮像するための撮像手段、音声データおよび画像データを送受信するための通信手段、画像を表示する表示手段、音声の入出力を行う送受話器などを備えている。
【０００４】
撮像手段によって撮像された画像は、画像データとして相手側通信装置に送信されるとともに、通話者の確認用に表示手段の一部に表示される。
【０００５】
このような通信システムは、たとえば遠隔地を結んでのテレビ会議やプレゼンテーションなどに利用される。
【０００６】
会議やプレゼンテーション中には、相手側から送られてくる画像に表示されている物を指定して説明を求めたり、質問する場合が想定されるが、そのときは、口頭でその対象物を指定する必要がある。対象物が明確なものであれば、口頭での説明であっても十分に伝わるかもしれないが、対象物が不明確なものもあり、口頭で正確に対象物を指定することが困難なときがある。対象物を指定するだけで長時間を要することになったり、相手側で対象物とは別の物を対象物として誤って認識してしまうと、意思の疎通ができずに会議やプレゼンテーションがスムーズに進まなくなってしまう。
【０００７】
特許文献１記載の画像入出力システムでは、プレゼンテーション側で自機器の表示タブレットの位置情報入力部を用いて原稿画像上の特定の箇所を示す位置情報を入力すると、その位置情報が送信部を介して相手装置に送られ、相手装置ではその送られてきた位置情報に基づき、表示タブレットの原稿画像表示部に表示された原稿画像の対応する位置にカーソルを表示させる。
【０００８】
特許文献２記載の情報入力装置は、ポインタの位置を認識するカメラ装置とディスプレイ装置とが、それぞれ異なる偏光を通過させる偏光フィルタを有し、カメラパラメータなどを相手側に伝送することで、情報を表示した画面に、通信相手の映像を一致するように表示する。
【０００９】
【特許文献１】特開平８−９０７５号公報
【特許文献２】特開２００５−１１７２８５号公報
【発明の開示】
【発明が解決しようとする課題】
【００１０】
特許文献１記載の発明では、原稿画像の特定位置を指定することができるが、プレゼンテーション側が自らの原稿の位置を指定できることに留まっており、プレゼンテーションを受ける側からは何ら指定することができない。特許文献２記載の発明では、指定位置を相手側に伝えるために伝送すべきデータ量が多く、さらにカメラ装置とディスプレイ装置とで異なる偏光フィルタの貼り付けを行う必要があるなどハードウェア構成を追加する必要がある。
【００１１】
本発明の目的は、簡単な構成で、相手側に対象物を明確に把握させることができる画像通信システムおよび画像通信方法を提供することである。
【課題を解決するための手段】
【００１２】
本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記映像抽出手段にて抽出した副映像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる副映像を受信する受信手段と、
前記受信手段にて受信した副映像を表示する表示手段とを備えることを特徴とする画像通信システムである。
【００１３】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信手段を備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる範囲情報を受信する受信手段と、
第１画像通信装置に送信した第２主映像から、前記受信手段にて受信した範囲情報に基づいて、副映像を抽出する抽出手段と、
前記抽出手段にて抽出した副映像を表示する表示手段とを備えることを特徴とする画像通信システムである。
【００１４】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記第１撮像手段で撮像した第１主映像と前記映像抽出手段にて抽出した副映像と合成して合成画像を生成する合成手段と、
前記合成手段にて合成された合成画像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信手段と、
前記受信手段にて受信した前記合成画像を表示する表示手段とを備えることを特徴とする画像通信システムである。
【００１５】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
抽出した副映像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる副映像を受信する受信工程と、
受信した副映像を表示する表示工程とを実行することを特徴とする画像通信方法である。
【００１６】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信工程を実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる範囲情報を受信する受信工程と、
第１画像通信装置に送信した第２主映像から、受信した範囲情報に基づいて、副映像を抽出する抽出工程と、
抽出した副映像を表示する表示工程とを実行することを特徴とする画像通信方法である。
【００１７】
また本発明は、撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
撮像した第１主映像と抽出した副映像と合成して合成画像を生成する合成工程と、
合成された合成画像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信工程と、
受信した前記合成画像を表示する表示工程とを実行することを特徴とする画像通信方法である。
【発明の効果】
【００１８】
本発明によれば、前記第１画像通信装置では、映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出手段が、前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する。送信手段は、前記映像抽出手段にて抽出した副映像を前記第２画像通信装置に送信する。
【００１９】
前記第２画像通信装置では、受信手段が、前記第１画像通信装置から送られてくる副映像を受信すると、表示手段が、前記受信手段にて受信した副映像を表示する。
【００２０】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００２１】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。
また本発明によれば、前記第１画像通信装置では、映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、送信手段が、第１撮像手段で撮像した第１主映像および前記映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する。
【００２２】
前記第２画像通信装置は、受信手段が、前記第１画像通信装置から送られてくる第１主映像および範囲情報を受信すると、抽出手段が、第１画像通信装置に送信した第２主映像から、前記受信手段にて受信した範囲情報に基づいて、副映像を抽出し、表示手段が、前記受信手段にて受信した前記抽出手段にて抽出した副映像を表示する。
【００２３】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００２４】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、画像データそのものではなく範囲情報、たとえば座標などを送信すればよいので、送信するデータ量も少なくて済む。
【００２５】
また本発明によれば、前記第１画像通信装置では、映像位置指定手段が、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出手段が、前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する。合成手段は、第１撮像手段で撮像した第１主映像と前記映像抽出手段にて抽出した副映像と合成して合成画像を生成し、送信手段が、前記合成手段にて合成された合成画像を前記第２画像通信装置に送信する。
【００２６】
前記第２画像通信装置では、受信手段が、前記第１画像通信装置から送られてくる前記合成画像を受信すると、表示手段が、前記受信手段にて受信した前記合成画像を表示する。
【００２７】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００２８】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、第２画像通信装置は、受信した画像を表示するだけでよいので、より簡単な構成、たとえば従来の画像通信装置であっても副映像を表示させることができる。
【００２９】
また本発明によれば、前記第１画像通信装置では、映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出工程では、前記映像位置指定工程にて指定された範囲に表示されている映像を副映像として抽出する。送信工程では、予め撮像された第１主映像および前記映像抽出工程にて抽出した副映像を前記第２画像通信装置に送信する。
【００３０】
前記第２画像通信装置では、受信工程で、前記第１画像通信装置から送られてくる副映像を受信すると、表示工程で、前記受信工程にて受信した副映像を表示する。
【００３１】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００３２】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。
また本発明によれば、前記第１画像通信装置では、映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、送信工程で、予め撮像された第１主映像および前記映像位置指定工程にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する。
【００３３】
前記第２画像通信装置では、受信工程で、前記第１画像通信装置から送られてくる第１主映像および範囲情報を受信すると、抽出工程で、第１画像通信装置に送信した第２主映像から、前記受信工程にて受信した範囲情報に基づいて、副映像を抽出し、表示工程で、前記受信工程にて受信した第１主映像および前記抽出工程にて抽出した副映像を表示する。
【００３４】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００３５】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、画像データそのものではなく範囲情報、たとえば座標などを送信すればよいので、送信するデータ量も少なくて済む。
【００３６】
また本発明によれば、前記第１画像通信装置では、映像位置指定工程で、第２画像通信装置から送られてきた第２主映像の任意の範囲を指定すると、映像抽出工程で、前記映像位置指定工程にて指定された範囲に表示されている映像を副映像として抽出する。合成工程では、予め撮像された第１主映像と前記映像抽出工程にて抽出した副映像と合成して合成画像を生成し、送信工程で、前記合成工程にて合成された合成画像を前記第２画像通信装置に送信する。
【００３７】
前記第２画像通信装置では、受信工程で、前記第１画像通信装置から送られてくる前記合成画像を受信すると、表示工程で、前記受信工程にて受信した前記合成画像を表示する。
【００３８】
第１画像通信装置の操作者は、相手側に知らせたい対象物が表示されている範囲を指定するだけでよく、第１画像通信装置の操作者は、表示された副映像を見るだけでよい。
【００３９】
したがって、簡単な構成で、相手側に対象物を明確に把握させることができる。さらに、第２画像通信装置は、受信した画像を表示するだけでよいので、より簡単な構成、たとえば従来の画像通信装置であっても副映像を表示させることができる。
【発明を実施するための最良の形態】
【００４０】
図１は、本発明の実施の一形態である画像通信システム１の概略を示す模式図である。
本発明の画像通信システム１は、２つの画像通信装置、第１画像通信装置１００と第２画像通信装置２００とで構成され、第１画像通信装置１００のカメラ１０１で撮像された映像が画像通信によって第２画像通信装置２００に送信され、第２画像通信装置の第２ディスプレイ２０２では、受信した画像を表示する。これと並行して第２画像通信装置２００のカメラ２０１で撮像された映像が画像通信によって第１画像通信装置１００に送信され、第１画像通信装置の第１ディスプレイ１０２では、受信した画像を表示する。
【００４１】
さらに、第１画像通信装置１００は、第１タッチパネル１０３を第１ディスプレイ１０２に重ねて設け、第１ディスプレイ１０２に表示されている画像に対して、特定の領域を指定することが可能となっている。具体的には、第２カメラ２０１により撮影された画像の中で、第１画像通信装置１００の操作者が対象物３００を指定したいとする。
【００４２】
第１画像通信装置１００の操作者は、第１ディスプレイ１０２に第２画像通信装置２００から送信されてきた画像が表示されている状態で、タッチペン１０４により、第１タッチパネル１０３を介して対象物３３０が表示されている指定領域１０５を入力すると、入力された指定領域１０５に表示されていた対象物３００の部分の画像についての情報が、第２画像通信装置２００へと送信される。
【００４３】
第２画像通信装置２００では、受信した情報に基づいて、指定領域１０５内に表示されていた画像を、自機の第２ディスプレイ２０２に表示する。このとき、第１画像通信装置１００から送られてくる撮影画像と、対象物３００が表示されている画像とは、第２ディスプレイ２０２に重畳されて表示される。
【００４４】
第２画像通信装置２００の操作者は、第２ディスプレイ２０２に表示された画像を見ることで、第１画像通信装置１００の操作者が指定する対象物３００を明確に、かつ迅速に把握することができる。
【００４５】
指定領域１０５の中の一部をさらに指定するために、第１タッチパネル１０３を介して指定領域内の指定部分をポインタ（カーソル、矢印など）で指定すると、その指定部分の情報が第２画像通信装置２００に送信され、第２画像通信装置２００では、指定領域内の画像に指定部分のポインタを加えて表示する。
【００４６】
また、第１ディスプレイ１０２に表示されている対象物３００が小さい場合や、指定部分を明確にしたい場合などには、指定領域１０５の画像を拡大するように指示を入力すると、拡大指示が第２画像通信装置２００へと送信され、第２画像通信装置２００では、第２ディスプレイ２０２に、指定領域１０５の画像が拡大されて表示される。
【００４７】
なお、第２画像通信装置２００にも、第２タッチパネル２０３が備えられており、第１画像通信装置１００と同様に、指定領域の入力などを行える。すなわち、第１画像通信装置１００と第２画像通信装置２００とは同一の構成を有しており、指定領域を入力する側の装置が、第１画像通信装置１００であっても第２画像通信装置２００であってもよい。
【００４８】
図２は、画像通信システム１の構成を示すブロック図である。
本実施形態では、画像通信システム１は、２つの画像通信装置、第１画像通信装置１００と第２画像通信装置２００とで構成される。
【００４９】
第１画像通信装置（以下では「第１装置」と略称する）１００は、第１撮像部１０、第１画像処理部１１とで構成され、第１画像処理部１１は、さらに第１映像処理部１２、第１通信部１３、第１記憶部１４、第１ポインタ制御部１５、第１座標検出部１６、第１表示部１７、第１タブレット１８を含んで構成される。
【００５０】
また、第１映像処理部１２は、共有映像生成部１２ａ、画像拡大処理部１２ｂ、ＰＩＰ処理部１２ｃ、映像合成部１２ｄを含む。
【００５１】
第２画像通信装置（以下では「第２装置」と略称する）２００は、第２撮像部２０、第２画像処理部２１とで構成され、第２画像処理部２１は、さらに第２映像処理部２２、第２通信部２３、第２記憶部２４、第２ポインタ制御部２５、第２座標検出部２６、第２表示部２７、第２タブレット２８を含んで構成される。
【００５２】
また、第２映像処理部２２は、共有映像生成部２２ａ、画像拡大処理部２２ｂ、ＰＩＰ処理部２２ｃ、映像合成部２２ｄを含む。
【００５３】
上記のように、第１装置１００と第２装置２００とは、同一の構成であるので、以下では、第１装置１００の構成について説明する。また、図１に示したように、指定領域１０５を指定する側が第１装置１００であり、指定された画像を表示する側が第２装置２００であるものとする。
【００５４】
第１撮像部１０は、たとえば、たとえば、ＣＣＤ（電荷結合素子）カメラなどで実現され、被写体からの反射光を受光し、その受光量をアナログ映像信号として出力する第１カメラ１０１である。
【００５５】
第１画像処理部１１は、第１撮像部１０から出力される映像信号をデジタル映像データに変換し、必要な画像処理を施して、第２装置２００へと送信する。また、第１タブレット１８で入力された指定領域内の画像についても必要な画像処理を施して、第２装置２００へと送信する。
【００５６】
共有映像生成部１２ａは、副映像である共有映像に関する情報として共有映像座標情報３０を取得して記憶する。共有映像とは、図１で示したように、指定領域１０５を入力したときに、指定領域１０５内に表示されている画像のことで、第２装置２００で撮像されて送られてくる画像（主映像）の一部を切り出したものに相当する。
【００５７】
画像拡大処理部１２ｂは、共有映像または主映像の拡大処理を行い、入力された拡大サイズ（拡大倍率、拡大後の寸法など）３１を記憶しておく。
【００５８】
ＰＩＰ処理部１２ｃは、ピクチャインピクチャ（ＰＩＰ）処理により、主映像に共有映像を重畳して表示させる。
【００５９】
主映像に重畳させて表示させる共有映像いついては、指定領域を指定する側の装置と指定された共有映像を受信する側の装置では異なっている。
【００６０】
指定領域１０５を指定する側の第１装置１００では、第２装置２００から受信した画像データに基づく主映像と、自装置で指定された指定領域１０５内の共有映像を重畳して第１表示部１７に表示する。
【００６１】
指定された共有映像を受信する側の第２装置２００では、第１装置１００から受信した画像データに基づく主映像と、第１装置１００で指定された指定領域１０５内の共有映像を重畳して第２表示部２７に表示する。
【００６２】
ＰＩＰ処理部１２ｃは、ＰＩＰ処理、すなわち指定領域を入力して共有映像を表示するか、指定された共有映像を表示するかいずれにしても共有映像の表示を行うかどうかを示すＰＩＰ ＯＮ／ＯＦＦ情報を記憶する。共有映像を第１表示部１７に表示するときはＰＩＰ ＯＮであり、表示しないときはＰＩＰ ＯＦＦである。ＰＩＰ位置情報３３およびＰＩＰサイズ情報３４は、ＰＩＰ表示を行うときに、共有映像を第１表示部１７に表示させる位置座標と、そのサイズを示す情報である。これらの情報は、装置の操作者が任意に変更できるように、第１タブレット１８から変更値が入力可能で、入力されると記憶しているそれぞれの情報を更新するように構成される。また、変更されない場合には、予め与えられる初期値に基づいてＰＩＰ処理を行う。
【００６３】
映像合成部１２ｄは、ＰＩＰ処理において、共有映像を主映像に重ね合わせるのではなく、主映像と共有映像とを合成して１つの画像データを作成し、合成後の画像データを第２装置２００へ送信する。
【００６４】
第１通信部１３は、第２装置２００と画像通信、電話通信およびデータ通信可能に構成されており、公衆電話通信網を介する通信、ＬＡＮ（Local Area network）を介する通信などが可能で特に通信インフラには限定されない。
【００６５】
第１通信部１３は、接続先情報３５として接続先の通信装置、本実施形態では第２装置２００の通信に関する情報、たとえば、電話番号、ＩＰアドレス、使用する通信プロトコルなどを参照して第２装置２００との通信を行う。
【００６６】
第１記憶部１４は、第２装置２００から送られてきた主映像を記憶する主映像記憶部１４ａと、第１撮像部１０で撮像し、第２装置２００へと送信する映像および主映像の一部である指定領域内の共有映像を記憶する送信映像記憶部１４ｂを有し、さらにＰＩＰ処理部１２ｃがＰＩＰ処理を行う際に主映像に重畳するための映像であるＰＩＰ映像３６も記憶される。
【００６７】
第１ポインタ制御部１５は、第１タブレット１８により入力されたポインタの位置を制御する。第１座標検出部１６は、第１タブレット１８により入力された座標を検出し、必要に応じて検出した座標情報を第１ポインタ制御部１５および第１映像処理部１２に受け渡す。第１表示部１７は、第２装置２００から送られてきた主映像および指定領域内の共有映像を主に表示する第１ディスプレイ１０２である。
【００６８】
第１タブレット１８は、第１タッチパネル１０３とペン１０４などの入力デバイスで構成され、操作者がペン１０４を用いて、第１タッチパネル１０３が重ねて設けられた第１ディスプレイ１０２の上をなぞることで該当箇所の座標が入力されるので、直感的な操作が可能となる。
【００６９】
以下では、フローチャートを用いて画像通信システム１による画像通信処理について詳細に説明する。
【００７０】
第２装置２００において共有映像を表示させるにあたっては、第１装置１００から共有映像に関する情報を第２装置２００へ送信し、第２装置２００では、その関連情報に基づいて共有映像を第２表示部２７に表示する。
【００７１】
共有映像に関する情報については、指定領域１０５内の画像データを情報として送信する第１形態、指定領域の座標を情報として送信する第２形態、指定領域１０５内の共有映像と、第１撮像部で撮像した主映像とを合成し、合成映像を情報として送信する第３形態とがある。
【００７２】
図３は、第１形態の画像通信処理を示すフローチャートである。図３Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図３Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。
【００７３】
第１装置１００では、ステップＡ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＡ２で第１表示部１７に主映像を表示させる。
【００７４】
ステップＡ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＡ４に進み、入力されなければステップＡ１に戻って主映像の受信と表示を繰り返す。
【００７５】
ステップＡ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＡ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定された領域部分の画像データを関連情報として記憶する。
【００７６】
ステップＡ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＡ７で、表示サイズを読み込む。
【００７７】
ステップＡ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。
【００７８】
ステップＡ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＡ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＡ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＡ１２で、第２装置２００へ送信する共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。
【００７９】
なお、サイズの変更はたとえば、第１タブレット１８を介して現在表示されている共有映像の縁をドラッグ操作することにより変更できる。ポインタの追加も、第１タブレット１８を介して現在表示されている共有映像のいずれかをポインティング操作することにより追加できる。
【００８０】
ステップＡ１３では、共有映像を第２装置２００の第２表示部２７に表示させるために共有映像表示コマンドを第２装置２００へ送信する。共有映像表示コマンドは、第２装置２００において、ＰＩＰ処理部２２ｃを起動させて、送信した共有映像をＰＩＰ表示させるためのコマンドである。
【００８１】
ステップＡ１４では、送信映像記憶部１４ｂに記憶された共有映像となる部分画像データを第２装置２００へ送信する。
【００８２】
図示はしていないが、第１装置１００は、第１撮像部１０で主映像を撮影し、第２装置２００へ送信している。主映像の送信のタイミングは、共有映像の送信ステップで同時に送信してもよいし、異なるステップで送信してもよい。
【００８３】
第２装置２００では、ステップＢ１で、第２撮像部２０が主映像を撮影し、ステップＢ２では、第１装置１００へ主映像となる画像データを送信する。
【００８４】
ステップＢ３で共有映像表示コマンドを受信したかどうかを判断し、受信していればステップＢ４に進み、受信していなければステップＢ１に戻って主映像の撮影と送信とを繰り返す。
【００８５】
ステップＢ４では、共有映像となる部分画像データを受信し、ステップＢ５では、ＰＩＰ処理部２２が起動してステップＢ５で表示位置の読み込みとステップＢ６で表示サイズの読み込みを行う。
【００８６】
ステップＢ７では、ＰＩＰ処理部２２が、第１装置１００から送られてくる主映像に共有映像を重ね合わせて、第２表示部２７にＰＩＰ表示させる。ステップＢ８では、所定の入力手順により共有映像の表示位置が変更されると、ステップＢ９で表示されている共有映像の表示位置を変更する。
【００８７】
ステップＢ１０で所定の入力手順により共有映像のサイズが変更されると、ステップＢ１１で表示されている共有映像のサイズを変更する。
【００８８】
なお、表示位置の変更は、たとえば、第２タブレット２８を介して現在表示されている共有映像の縁以外の部分をドラッグ操作することにより変更できる。サイズの変更は、たとえば、第２タブレット２８を介して現在表示されている共有映像の縁をドラッグ操作することにより変更できる。
【００８９】
ステップＢ１２で、共有映像の表示を終了する指示が入力されると共有映像を消して処理を終了する。終了の指示が入力されなければステップＢ７に戻って表示を継続する。
【００９０】
図４は、第２形態の画像通信処理を示すフローチャートである。図４Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図４Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。
【００９１】
第１装置１００では、ステップＣ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＣ２で第１表示部１７に主映像を表示させる。
【００９２】
ステップＣ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＣ４に進み、入力されなければステップＣ１に戻って主映像の受信と表示を繰り返す。
【００９３】
ステップＣ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＣ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定領域の座標情報を第２装置２００に送信する関連情報として記憶する。
【００９４】
ステップＣ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＣ７で、表示サイズを読み込む。
【００９５】
ステップＣ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。
【００９６】
ステップＣ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＣ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＣ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＣ１２で、第２装置２００へ送信する共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。
【００９７】
ステップＣ１３では、共有映像を第２装置２００の第２表示部２７に表示させるために共有映像表示コマンドを第２装置２００へ送信する。共有映像表示コマンドは、第２装置２００において、ＰＩＰ処理部２２ｃを起動させて、送信した共有映像の座標情報を基に、共有映像をＰＩＰ表示させるためのコマンドである。
【００９８】
ステップＣ１４では、送信映像記憶部１４ｂに記憶された共有映像となる指定領域を示す座標情報を第２装置２００へ送信する。
【００９９】
座標情報に続けてステップＣ１５では、共有映像の表示サイズを示す情報を第２装置２００へ送信し、ステップＣ１６では、共有映像に追加されたポインタ位置を示す情報を第２装置２００へ送信する。
【０１００】
図示はしていないが、第１装置１００は、第１撮像部１０で主映像を撮影し、第２装置２００へ送信している。主映像の送信のタイミングは、共有映像の送信ステップで同時に送信してもよいし、異なるステップで送信してもよい。
【０１０１】
第２装置２００では、ステップＤ１で、第２撮像部２０が主映像を撮影し、ステップＤ２では、第１装置１００へ主映像となる画像データを送信する。
【０１０２】
ステップＤ３で共有映像表示コマンドを受信したかどうかを判断し、受信していればステップＤ４に進み、受信していなければステップＤ１に戻って主映像の撮影と送信とを繰り返す。
【０１０３】
ステップＤ４では、共有映像をとなる部分を示す座標情報を受信し、続いてステップＤ５では、共有映像の表示サイズ情報を受信し、ステップＤ６では、ポインタ位置を示す情報を受信する。
【０１０４】
ステップＤ７では、第１表示部１００へ送信した撮像映像に、座標情報を適用し、該当部分の画像を共有映像として抽出する。ステップＤ８では、受信した表示サイズに基づいて共有映像の表示サイズを変更する。
【０１０５】
ステップＤ９では、ポインタ表示追加情報を受信したかどうかを判断し、受信していればステップＤ１０で共有映像にポインタを追加する。
【０１０６】
ステップＤ１１では、ＰＩＰ処理部２２ｃが、第１装置１００から送られてくる主映像に抽出された共有映像を重ね合わせて、第２表示部２７にＰＩＰ表示する。ステップＤ１２では、所定の入力手順により共有映像の表示位置が変更されると、ステップＤ１３で表示されている共有映像の表示位置を変更する。
【０１０７】
ステップＤ１４で所定の入力手順により共有映像のサイズが変更されると、ステップＤ１５で表示されている共有映像のサイズを変更する。
【０１０８】
ステップＤ１６で、共有映像の表示を終了する指示が入力されると共有映像を消して処理を終了する。終了の指示が入力されなければステップＤ１１に戻って表示を継続する。
【０１０９】
図５は、第３形態の画像通信処理を示すフローチャートである。図５Ａ（ａ）は、共有映像を指定する側の第１装置１００のフローを示し、図５Ｂ（ｂ）は、指定された共有映像を表示する側の第２装置２００のフローを示す。
【０１１０】
第１装置１００では、ステップＥ１で、第１通信部１３が相手側通信装置である第２装置２００から主映像となる画像データを受信し、ステップＥ２で第１表示部１７に主映像を表示させる。
【０１１１】
ステップＥ３では、第１タブレット１８を介して指定領域１０５が入力されたかどうかを判断し、入力されればステップＥ４に進み、入力されなければステップＥ１に戻って主映像の受信と表示を繰り返す。
【０１１２】
ステップＥ４では、第１座標検出部１６の検出結果に基づいて、入力された領域の座標を抽出し、共有映像生成部１２ａに記憶する。ステップＥ５では、記憶された共有映像座標情報３０に基づいて、第２装置２００から受信した主映像のうち、指定領域１０５に相当する部分の画像を共有映像とし、指定された領域部分の画像データを記憶する。
【０１１３】
ステップＥ６では、主映像と重ねて表示したときに区別しやすいように共有映像に縁取りを行い、ステップＥ７で、表示サイズを読み込む。
【０１１４】
ステップＥ８では、ＰＩＰ処理部１２ｃによって、第１表示部１７に読み込まれた表示サイズおよび表示位置に共有画像をＰＩＰ表示させる。第１装置１００では、操作者が自ら指定した共有映像を第１表示部１７にＰＩＰ表示された画像を見て確認することができる。
【０１１５】
ステップＥ９で、所定の入力手順により共有映像のサイズが変更されると、ステップＥ１０で第２装置２００へ送信する共有映像のサイズ情報３４を更新する。また、ステップＥ１１で、所定の入力手順により共有映像内にポインタが追加されると、ステップＥ１２で、共有映像にポインタ画像を追加して送信映像記憶部１４ｂに記憶する。
【０１１６】
ステップＥ１３では、第１撮像部１０が主映像を撮影し、ステップＥ１４で、主映像となる画像データと共有映像となる部分画像データとを合成する。ステップＥ１５では、合成画像データを関連情報として第２装置２００へ送信する。
【０１１７】
第１装置１００による主映像の撮影について、本実施形態では、撮影していることが明確になるように、ステップＥ１３として説明したが、撮影のタイミングはこれに限らず、ステップＥ１４で共有映像と合成するまでに撮影しておけばよい。
【０１１８】
第２装置２００では、ステップＦ１で、第２撮像部２０が主映像を撮影し、ステップＦ２では、第１装置１００へ主映像となる画像データを送信する。
【０１１９】
ステップＦ３で第１装置１００から主映像と共有映像が合成された合成映像となる合成画像データを受信し、ステップＦ４で合成画像を表示する。
【０１２０】
以上のように、第１装置１００側で領域を指定し、相手側の第２装置２００に指定した領域の画像を表示させることで、第２装置２００の操作者は第１装置１
００の操作者が対象としている物を容易にかつ明確に把握することができる。
【０１２１】
なお、上記の説明では、第１形態では、１度指定領域を指定すると該当する画像データを相手側に送信しているが、第１装置１００において、共有映像の指定取り止めの指示が入力されるまでは、第２通信装置１００から主映像が送られてくるたびに、共有映像となる画像データを生成して第２装置２００に送り続けることも可能である。また、第２形態では、座標の変更や、共有映像の指定取り止めの指示が入力されるまでは、第２通信装置１００において、共有映像となる画像データを生成して表示し続けることも可能である。
【図面の簡単な説明】
【０１２２】
【図１】本発明の実施の一形態である画像通信システム１の概略を示す模式図である。
【図２】画像通信システム１の構成を示すブロック図である。
【図３Ａ】第１形態の画像通信処理を示すフローチャートである。
【図３Ｂ】第１形態の画像通信処理を示すフローチャートである。
【図４Ａ】第２形態の画像通信処理を示すフローチャートである。
【図４Ｂ】第２形態の画像通信処理を示すフローチャートである。
【図５Ａ】第３形態の画像通信処理を示すフローチャートである。
【図５Ｂ】第３形態の画像通信処理を示すフローチャートである。
【符号の説明】
【０１２３】
１ 画像通信システム
１００ 第１画像通信装置
１０１，２０１ カメラ
１０２ 第１ディスプレイ
１０３ 第１タッチパネル
１０４ ペン
１０５ 指定領域
２００ 第２画像通信装置
２０２ 第２ディスプレイ
２０３ 第２タッチパネル
３００ 対象物
【特許請求の範囲】
【請求項１】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記映像抽出手段にて抽出した副映像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる副映像を受信する受信手段と、
前記受信手段にて受信した副映像を表示する表示手段とを備えることを特徴とする画像通信システム。
【請求項２】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信手段を備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる範囲情報を受信する受信手段と、
第１画像通信装置に送信した第２主映像から、前記受信手段にて受信した範囲情報に基づいて、副映像を抽出する抽出手段と、
前記抽出手段にて抽出した副映像を表示する表示手段とを備えることを特徴とする画像通信システム。
【請求項３】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記第１撮像手段で撮像した第１主映像と前記映像抽出手段にて抽出した副映像と合成して合成画像を生成する合成手段と、
前記合成手段にて合成された合成画像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信手段と、
前記受信手段にて受信した前記合成画像を表示する表示手段とを備えることを特徴とする画像通信システム。
【請求項４】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
抽出した副映像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる副映像を受信する受信工程と、
受信した副映像を表示する表示工程とを実行することを特徴とする画像通信方法。
【請求項５】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信工程を実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる範囲情報を受信する受信工程と、
第１画像通信装置に送信した第２主映像から、受信した範囲情報に基づいて、副映像を抽出する抽出工程と、
抽出した副映像を表示する表示工程とを実行することを特徴とする画像通信方法。
【請求項６】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
撮像した第１主映像と抽出した副映像と合成して合成画像を生成する合成工程と、
合成された合成画像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信工程と、
受信した前記合成画像を表示する表示工程とを実行することを特徴とする画像通信方法。
【請求項１】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記映像抽出手段にて抽出した副映像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる副映像を受信する受信手段と、
前記受信手段にて受信した副映像を表示する表示手段とを備えることを特徴とする画像通信システム。
【請求項２】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信手段を備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる範囲情報を受信する受信手段と、
第１画像通信装置に送信した第２主映像から、前記受信手段にて受信した範囲情報に基づいて、副映像を抽出する抽出手段と、
前記抽出手段にて抽出した副映像を表示する表示手段とを備えることを特徴とする画像通信システム。
【請求項３】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信システムにおいて、
前記第１画像通信装置は、
第１主映像を撮像する第１撮像手段と、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定手段と、
前記映像位置指定手段にて指定された範囲に表示されている映像を副映像として抽出する映像抽出手段と、
前記第１撮像手段で撮像した第１主映像と前記映像抽出手段にて抽出した副映像と合成して合成画像を生成する合成手段と、
前記合成手段にて合成された合成画像を前記第２画像通信装置に送信する送信手段とを備え、
前記第２画像通信装置は、
第２主映像を撮像する第２撮像手段と、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信手段と、
前記受信手段にて受信した前記合成画像を表示する表示手段とを備えることを特徴とする画像通信システム。
【請求項４】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
抽出した副映像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる副映像を受信する受信工程と、
受信した副映像を表示する表示工程とを実行することを特徴とする画像通信方法。
【請求項５】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定した範囲を示す範囲情報を前記第２画像通信装置に送信する送信工程を実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる範囲情報を受信する受信工程と、
第１画像通信装置に送信した第２主映像から、受信した範囲情報に基づいて、副映像を抽出する抽出工程と、
抽出した副映像を表示する表示工程とを実行することを特徴とする画像通信方法。
【請求項６】
撮影した映像を第１、第２画像通信装置の双方が送受信することにより、受信した映像を互いの画面に表示する画像通信方法において、
前記第１画像通信装置では、
第２画像通信装置から送られてきた第２主映像の任意の範囲を指定する映像位置指定工程と、
指定された範囲に表示されている映像を副映像として抽出する映像抽出工程と、
撮像した第１主映像と抽出した副映像と合成して合成画像を生成する合成工程と、
合成された合成画像を前記第２画像通信装置に送信する送信工程とを実行し、
前記第２画像通信装置では、
前記第１画像通信装置から送られてくる前記合成画像を受信する受信工程と、
受信した前記合成画像を表示する表示工程とを実行することを特徴とする画像通信方法。
【図１】
【図２】
【図３Ａ】
【図３Ｂ】
【図４Ａ】
【図４Ｂ】
【図５Ａ】
【図５Ｂ】
【図２】
【図３Ａ】
【図３Ｂ】
【図４Ａ】
【図４Ｂ】
【図５Ａ】
【図５Ｂ】
【公開番号】特開２００９−２３２２９０（Ｐ２００９−２３２２９０Ａ）
【公開日】平成２１年１０月８日（２００９．１０．８）
【国際特許分類】
【出願番号】特願２００８−７６８８９（Ｐ２００８−７６８８９）
【出願日】平成２０年３月２４日（２００８．３．２４）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
【公開日】平成２１年１０月８日（２００９．１０．８）
【国際特許分類】
【出願日】平成２０年３月２４日（２００８．３．２４）
【出願人】（０００００５０４９）シャープ株式会社 (33,933)
【Ｆターム（参考）】
[ Back to top ]