画像送信装置、画角制御方法、画像受信装置、画像表示システム、画像表示方法
【課題】テレビ会議システムにおいて、できるだけ簡単な操作と、単純なシステム構成と制御処理によって、表示される撮像画像を所望のサイズに変更できるようにする。
【解決手段】撮像部による撮像に基づいて得られる画像信号を送信する画像送信装置において、画像受信装置側の表示装置が有する表示画面部の物理的なサイズを示す物理画面サイズ情報と、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報とを、画像受信装置から送信してもらうことで取得する。画像送信装置は、測距により得た被写体間距離と、上記物理画面サイズ情報とに基づいて、上記表示倍率指示情報が示す表示倍率が実際の表示画像上において得られるように撮像部の画角制御を実行する。
【解決手段】撮像部による撮像に基づいて得られる画像信号を送信する画像送信装置において、画像受信装置側の表示装置が有する表示画面部の物理的なサイズを示す物理画面サイズ情報と、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報とを、画像受信装置から送信してもらうことで取得する。画像送信装置は、測距により得た被写体間距離と、上記物理画面サイズ情報とに基づいて、上記表示倍率指示情報が示す表示倍率が実際の表示画像上において得られるように撮像部の画角制御を実行する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばテレビ会議システムにおける端末装置などとして利用され、撮像により得た画像信号を送信することが可能とされる画像送信装置と、この画像送信装置から送信される画像信号を受信して表示出力のための処理を実行可能な上記画像受信装置と、これら画像送信装置、画像受信装置が、画像送信装置側の撮像部の画角を可変制御する際の画角制御方法に関する。また、上記画像送信装置及び画像受信装置とから成る画像表示システムと、これに対応する画像表示方法とに関する。
【背景技術】
【０００２】
テレビ会議システムにおいては、互いに離れた会議場などの場所ごとにテレビ会議システム対応の端末装置を設け、さらにこの端末装置に撮像装置及びディスプレイ装置を接続する。そして、１つの近端としての或る会議場においては、例えばその会議場に居る会議参加者などを撮像装置により撮像して得た撮像画像を端末装置経由で、遠端となる他の会議場の端末装置に対して送信する。遠端側の端末装置は、近端側から送信されてきた撮像画像を受信し、これを自身に接続されているディスプレイに表示させる。
また、端末装置には、マイクロフォンとスピーカも接続され、近端側のマイクロフォンにより収音して得られる近端話者の音声信号を、端末装置経由で遠端側に送信する。遠端側の端末装置では、受信した音声信号をスピーカから出力する。
これにより、テレビ会議システムによっては、通信相手の会議場の様子をディスプレイ装置に表示させながら会話を行うようにして、会議を進行させていくことができる。
【０００３】
ところで、テレビ会議システムにあっては、撮像画像を表示させるのにあたって、例えば表示画像において被写体を実物と同じサイズで表示させたい場合がある。例えば、テレビ会議システムにより、或る製品、部品などを撮像して表示してもらいながら説明するのにあたり、その被写体となる製品、部品のサイズが話の要点となっているような場合を挙げることができる。
【０００４】
また、近年においては、例えばフラットパネルディスプレイの普及に伴い、相当に大型の表示画面部を有するディスプレイ装置も普及してきており、テレビ会議システムにおいても、このような大型表示画面部のディスプレイ装置が利用されることが多くなってきている。このようなことを背景とすると、テレビ会議システムにおいては、相手側から送信されてきた撮像画像を、例えば実物大のサイズにより表示できることになる。このようにして、実物大サイズで撮像画像を表示すれば、例えば臨場感が増して、例えば会議参加者の気持ちも盛り上げられる。
【０００５】
このようにして、テレビ会議システムにおいては、撮像により得られた画像信号を送信して相手側の端末装置にて画像として表示出力させる場合において、そのときに撮像している被写体についての画像について、実物に対して或る倍率となる、しかるべきサイズとしたい場合がある。
【０００６】
【特許文献１】特開平６−２６９００８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
撮像により撮像して得られる画像内の被写体のサイズを変更するのには、例えば撮像装置がズーム（画角）可変機能を有していれば、この画角を変更すればよい。
しかし、一般的に、テレビ会議システムにおいて、撮像装置の画角制御は、通信相手側の端末装置と接続されるディスプレイ装置の表示画面部の物理的サイズとは無関係であって、独立して調整される。
このために、これまでのテレビ会議システムにおいて、表示中の撮像画像における被写体のサイズを調整するのにあたっては、例えば画像送信側の会議参加者から聞くなどして被写体の実物サイズを予め知ったうえで、画像送信側の撮像装置の画角を、画像受信側の会議参加者が遠隔操作するようなことを行わなければならない。
また、表示中の撮像画像内の被写体の実寸サイズは、画像送信側における撮像装置から被写体までの距離であるとか、画像受信側で使用するディスプレイ装置の表示画面部の物理的寸法などの条件に応じて変わり得るものなので、このような条件が変わる都度、画像受信側では画角の調整を行う必要があり、面倒なものとなっている。
さらには、テレビ会議システムでは、例えば画像圧縮符号化を施した画像信号を送受信することがしばしばあるが、この場合には、表示される画像の遅延が生じやすい。このようにして遅延して表示される撮像画像を見ながらの遠隔操作による画角調整は非常にやりにくい。このことからも、現状のテレビ会議システムにおける、表示中の相手側撮像画像における被写体のサイズ調整のための画角遠隔操作は、非常に面倒なものであることが分かる。
【０００８】
そこで、本願発明としては、上記のような表示中の相手側撮像画像における被写体のサイズ調整のための画角制御を自動的に行えるようにすることとしたうえで、例えばテレビ会議システムなどにおいて適用しやすい、より有用なものを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明は上記した課題を考慮して、画像送信装置として次のように構成する。
つまり、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行可能な画像受信装置に対して、撮像部による撮像に基づいて得られる画像信号を送信する送信手段と、画像受信装置から送信されてくる、表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、撮像部が撮像する被写体までの距離を示す被写体間距離情報を得る被写体間距離情報取得手段と、物理画面サイズ情報と被写体間距離情報とに基づいて、表示倍率指示情報が指示する倍率に応じた実サイズにより表示画面部にて被写体が表示されるための画角である必要画角を求めて取得する必要画角取得手段と、必要画角が得られるように、画角が可変の撮像部により撮像される画角を変更する制御を実行する画角変更制御手段とを備えることとした。
【００１０】
また、画像受信装置として次のように構成することとした。
つまり、画像送信装置から送信される撮像部による撮像に基づいて得られる画像信号を受信する画像信号受信手段と、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、この画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、画像送信手段が撮像部の画角を制御するために利用する制御情報の１つであって、表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、物理画面サイズ情報を画像送信装置に対して送信する物理画面サイズ情報送信手段と、画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、画像送信手段が上記撮像部の画角を制御するために利用する制御情報の１つであって、表示画面部にて表示させる画像における画像被写体についての実サイズに対する倍率を指示するための入力操作に応じて得られる表示倍率指示情報を画像送信装置に対して送信する表示倍率指示情報送信手段とを備えることとした。
【００１１】
また、画像表示システムとして次のように構成することとした。
つまり、この画像表示システムは、画像送信装置と、画像受信装置とから成る。そのうえで、画像送信装置において、撮像部による撮像に基づいて得られる画像信号を送信する画像信号送信手段と、画像受信装置において、画像送信装置から送信されてきた画像信号を受信する画像信号受信手段と、画像受信装置において、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、画像受信装置において、表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、画像受信装置において、上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手段と、画像送信装置において、送信されてきた物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、画像送信装置において、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、画像送信装置において、撮像部が撮像する被写体までの距離を示す被写体間距離情報を取得する被写体間距離情報取得手段と、画像送信装置において、物理画面サイズ情報と被写体間距離情報とに基づいて、表示倍率指示情報が指示する倍率に応じた実サイズにより表示画面部にて被写体が表示されるための画角である必要画角を求めて取得する必要画角取得手段と、画像送信装置において、必要画角が得られるように、画角が可変の撮像部により撮像される画角を変更する制御を実行する画角変更制御手段とを備えることとした。
【００１２】
上記各構成によっては、撮像部による撮像に基づいて得られる画像信号を送信する画像送信装置において、画角制御のための制御情報として、画像受信装置側の表示装置が有する表示画面部の物理的なサイズを示す物理画面サイズ情報と、撮像部から被写体までの距離を示す被写体間距離情報と、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報とを取得するようにされる。
そして、画像送信装置は、被写体間距離情報と、上記物理画面サイズ情報とに基づいて、上記表示倍率指示情報が示す表示倍率が実際の表示画像上において得られるようにして、撮像部の画角制御が行われるようにされる。
【発明の効果】
【００１３】
このように、本願発明によれば、画像送信装置側において、画像受信装置側の表示装置が有する表示画面部の物理的なサイズの情報（物理画面サイズ情報）と、被写体間距離の情報を取得すると共に、表示倍率の指示さえ得られれば、この指示された表示倍率となる画角を常に自動で設定できることになる。これにより、例えばテレビ会議システムなどにより適合した、有用な被写体画像のサイズ調整機能を提供できる。
【発明を実施するための最良の形態】
【００１４】
本願発明を実施するための最良の形態（以下、実施の形態という）としては、テレビジョン会議システム(テレビ会議システム)における画像送受信系に本願発明を適用する。
テレビ会議システムは、場所の異なる会議場ごとに通信端末であるテレビ会議端末装置を設置し、このテレビ会議端末装置から、撮像装置により撮影した画像と、マイクロフォンにより収音した音声を他のテレビ会議端末装置に送信させると共に、他のテレビ会議端末装置から送信されてきた画像と音声を受信して、それぞれ、ディスプレイ装置、スピーカから出力させるように構成される。つまり、テレビ会議システムでは、画像を相互に送受信する画像送受信系と、音声を相互に送受信する音声送受信系とを備える。そして、本実施の形態としては、上記画像送受信系として撮像画像を送受信するために設けられるテレビ会議端末装置を中核とするシステムが該当する。
【００１５】
図１は、テレビ会議システムにおける画像送受信系を主体とするシステム構成例を示している。
この場合には、互いに離れた２つの場所Ａ、場所Ｂが会議場とされており、これらの場所Ａ，Ｂのそれぞれにおいて、テレビ会議端末装置１−１、１−２が設置される。これらのテレビ会議端末装置１−１、１−２は、所定の通信方式に対応する通信回線により接続されて、相互通信が可能なようにされている。
また、場所Ａにおいては、テレビ会議端末装置１−１とともに、撮像装置２−１、雲台３−１、ディスプレイ装置４−１が備えられる。
撮像装置２−１は、画角調整のためのズーム機構を備え、雲台３−１に取り付けられている。雲台３−１は、パン機構とチルト機構を備えることで、取り付けられた撮像装置の撮像方向（撮像視野）を、所定角度範囲で上下方向及び左右方向に変更することが可能とされている。
また、リモートコントローラ５−１は、テレビ会議端末装置１−１の動作をユーザが遠隔操作するために設けられる。
【００１６】
同様にして、場所Ｂにおいては、テレビ会議端末装置１−２とともに、撮像装置２−２、雲台３−２、ディスプレイ装置４−２、及びリモートコントローラ５−２が備えられる。
【００１７】
なお、以降の説明において、テレビ会議端末装置、撮像装置、雲台、ディスプレイ装置、リモートコントローラ、などについて、特に離れた場所にある同一のものを区別する必要のない場合には、テレビ会議端末装置１、撮像装置２、雲台３、ディスプレイ装置４、リモートコントローラ５などのようにして表記する。
また、音声送受信系については、ここでは図示は省略している。
【００１８】
この図に示される画像送受信系の基本的動作は、例えば次のようになる。
先ず、場所Ａにおいて、撮像装置２−１により撮像して得られた動画像としての画像信号(撮像画像信号)は、テレビ会議端末装置１−１に入力される。テレビ会議端末装置１−１は、入力された画像信号を、通信回線を経由してテレビ会議端末装置１−２に対して送信する。テレビ会議端末装置１−２は、上記のようにして送信されてきた撮像画像信号を受信し、ディスプレイ装置４−２から出力させる。
また、同様にして、場所Ｂ内の撮像装置２−２により撮像して得られた画像信号は、テレビ会議端末装置１−２によりテレビ会議端末装置１−１に送信される。テレビ会議端末装置１−１では、受信した画像信号を、ディスプレイ装置４−１から出力させる。
このようにして、テレビ会議システムの画像送受信系では、映像の双方向通信を行うものであり、これにより、例えば或る１つの場所にいる会議参加者は、他の場所の会議場の様子を視覚的に把握することができる。
なお、内部の信号切り換えにより、テレビ会議端末装置１−１は、撮像装置２−１から入力される撮像画像信号の画像を、ディスプレイ装置４−１により表示出力させることも可能である。
【００１９】
図２は、１つの場所において備えられるテレビ会議システム（テレビ会議端末装置とその周辺装置）を、テレビ会議端末装置１の内部構成例とともに示している。なお、図１との対応では、テレビ会議端末装置１−１、１−２は、この図２に示す構成を共通に有するものとして考えてよい。また、この図においても、音声送受信系に対応する部位についての図示は省略している。
【００２０】
この場合の撮像装置２においては、撮像のための光学系と、撮像光を利用して非圧縮の動画像としての画像信号を生成する信号処理部とを備えるものとされる。撮像装置２から出力される画像信号（撮像画像信号）は、テレビ会議端末装置１における画像信号処理／表示制御部１１に対して入力される。
また、撮像装置２の光学系に対応しては、ズームレンズの位置を移動させて画角を変更するための機構を有して成る、ズーム機構部２ａを備える。
また、撮像装置２は、測距部２ｂを備える。この測距部２ｂは、例えば撮像装置２から被写体までの距離（被写体間距離）を測定するもので、この測距部２ｂにより測定された被写体間距離の情報は、自動的に被写体に対して合焦するようにしてフォーカスレンズを駆動する、いわゆるオートフォーカス制御に用いることができる。なお、この測距部２ｂにおいて採用する測距方式、測距の手法などについては、これまでに知られている技術が採用されればよい。
また、雲台３は、取り付けられた撮像装置２の撮像視野を左右に変更するための機構であるパン機構部３ａと、上記撮像視野を上下に変更するための機構であるチルト機構部３ｂとを有して成る。
【００２１】
画像信号処理／表示制御部１１は、入力される画像信号について必要に応じて所定の信号処理を実行するとともに、ディスプレイ装置４に対して画像を表示させるための表示制御を実行する。
【００２２】
例えば、画像信号処理／表示制御部１１は、撮像装置２から入力される撮像画像信号について必要に応じて所要の信号処理を施したうえで、エンコーダ１２に転送する。
【００２３】
エンコーダ１２は、入力される画像信号について所定方式による画像圧縮符号化処理を実行して、通信部１４に対して転送する。通信部１４は、制御部１８の制御に応じて、エンコーダ１２から転送されてくる圧縮画像信号について、所定の通信方式に従って、通信回線経由で、他のテレビ会議端末装置に対して送信する。
【００２４】
また、他のテレビ会議端末装置から送信されてきた圧縮画像信号は、通信部１４にて受信されて、デコーダ１３に転送される。
デコーダ１３は、入力されてくる圧縮画像信号について、画像圧縮符号化に対する復調（デコード）処理を実行して所定形式の画像信号を得る。このようにして得た画像信号を画像信号処理／表示制御部１１に転送する。
【００２５】
画像信号処理／表示制御部１１は、例えば上記のようにしてデコーダ１３から転送される画像信号の画像がディスプレイ装置４にて表示されるようにするための表示制御を実行することができる。これにより、他の会議場において撮影された画像が、ディスプレイ装置４にて表示されることになる。
また、画像信号処理／表示制御部１１は、上記撮像画像信号について、ディスプレイ装置４にて所定の態様により表示されるようにして表示制御を実行することも可能とされている。
さらに、画像信号処理／表示制御部１１は、制御部１８の制御に応じて、各種の操作画像をディスプレイ装置４により表示させるための画像生成処理、表示制御処理を実行可能とされている。
なお、画像信号処理／表示制御部１１は、その一部、あるいは全ての機能をＤＳＰ(Digital Signal Processor)により構成することができる。
【００２６】
また、このテレビ会議端末装置１は、撮像装置２の撮像視野を可変制御する機能を有するものとされている。ここでの撮像視野の可変は、パン制御、チルト制御、ズーム制御の組み合わせによるものとする。パン制御、チルト制御は、撮像方向をそれぞれ左右方向と上下方向とで可変する制御で、ズーム制御は、撮像装置の画角を変更する制御である。これに対応して、テレビ会議端末装置１は、ＰＴＺ（ＰＴＺ:Pan(Panning),Tilt(Tilting),Zoom(Zooming)）駆動制御部１５を備える。
【００２７】
ＰＴＺ駆動制御部１５は、図示するようにして、パン／チルト駆動制御部１６とズーム駆動制御部１７とを備える。
パン／チルト駆動制御部１６は、制御部１８からのパン方向における移動量の指示情報に応じて、雲台３が備えるとされるパン機構部３ａにおけるパンモータを駆動するための駆動信号を生成して出力する。同様に、制御部１８からのチルト方向における移動量の指示情報に応じて、雲台３が備えるとされるチルト機構部３ｂにおけるチルトモータを駆動するための駆動信号を生成して出力する。これにより、撮像装置２の撮像視野として、左右方向（パン方向）と上下方向（チルト方向）の撮像方向を変更する変更することが可能とされる。
また、ズーム駆動制御部１７は、制御部１９からの画角変更量の指示情報に応じて、撮像装置２の光学系において備えられるズーム機構部２ａにおけるズームモータを駆動するための駆動信号を生成して出力する。これにより、撮像視野として、画角を変更することが可能になる。
【００２８】
制御部１８は、例えばＣＰＵ、ＲＯＭ、ＲＡＭなどを有して成るマイクロコンピュータなどにより構成されるもので、テレビ会議端末装置１についての全体制御を実行する。
【００２９】
記憶部１９は、例えば不揮発性の記憶デバイスから成るもので、制御部１８が必要な各種のプログラム、データなどを記憶する。
【００３０】
リモートコントローラ５は、テレビ会議端末装置１の動作についての各種の操作をユーザが行うための所要の操作子を備え、これらの操作子に対する操作に応じて、赤外線、あるいは電波などにより操作情報信号を送信する。この操作情報信号は、受信部２０にて受信復調されて制御部１８に入力される。制御部１８は、入力される操作情報信号に応答して所要の制御、処理を実行する。
【００３１】
上記構成によるテレビ会議システムにおいては、これまでの説明から理解されるように、テレビ会議端末装置１−１側の撮像装置２−１により撮像して得られた画像信号を、テレビ会議端末装置１−２側にて受信してディスプレイ装置４−２にて画像(撮像画像)として表示させることができる。そのうえで、本実施の形態においては、このように表示される撮像画像における被写体について、実物のサイズを１倍率（基準）としたうえで、指定した倍率に応じたサイズとなるようにして、自動的に、撮像装置２−１についてのズーム制御（実寸基準倍率対応ズーム制御）が行われるように構成される。以降、この点について説明を行っていく。
【００３２】
なお、以降においては、上記もしているように、図１との対応として、テレビ会議端末装置１−１側が、撮像装置２−１により撮像して得られた画像信号（撮像画像信号）を送信する側であり、テレビ会議端末装置１−２が、受信した撮像画像信号の画像（撮像画像）を表示させる側であるものとして説明を行う。また、以降の説明にあっては、テレビ会議端末装置１−１（画像送信装置）側のシステム構成を「撮像側」といい、テレビ会議端末装置１−２（画像受信装置）側のシステム構成を「表示側」ともいうことにする。
また、確認のために述べておくと、実際においては、上記とは逆に、テレビ会議端末装置１−２側が「撮像側」となり、テレビ会議端末装置１−１側が「表示側」となって動作することも可能である。
【００３３】
先ず、図３を参照して、本実施の形態における実寸基準倍率対応ズーム制御を実現するための原理、技術概念について説明する。
ここで、図３（ａ）には、撮像側において撮像装置２−１により撮像される実物としての被写体である実被写体４１が示されている。ここで、実被写体４１の垂直方向における実寸長（実被写体サイズ）をＹ２とし、撮像装置２−１から実被写体４２までの被写体間距離をＬとし、撮像装置２−１において設定されている画角をφとし、画角φにより被写体間距離Ｌの位置にある実被写体４１を撮像しているときに得られる垂直方向の撮像範囲の実寸（垂直撮像範囲）をＨ２とする。
また、図３（ｂ）には、撮像側にて図３（ａ）に示される実被写体４１を撮像装置２−１により撮像して得られる画像信号を、表示側のディスプレイ装置４−２の表示画面部３０において受信して表示させたときの撮像画像の状態例を示している。
ここで、ディスプレイ装置４−２における表示画面部３０（この場合には有効画像表示領域となる）としての物理的な画面の実寸として、垂直方向における実寸（垂直画面サイズ）をＨ１とし、表示画面部３０において表示されている被写体の部分（画像被写体４２）についての垂直方向における実寸（垂直画像被写体サイズ）をＹ１とする。
さらに、ここでは、実被写体サイズＹ２に対する画像被写体サイズＹ１の倍率（Ｙ１／Ｙ２）を、表示倍率αとして定義する。
具体的には、画像被写体４２を、実被写体４１と同じ実寸、即ち実物大サイズにより表示させるとすれば、表示倍率α＝１（＝１／１）となる。また、垂直方向の実寸について、画像被写体４２を実被写体４１の１／２の長さとなるサイズで表示させるとすれば、表示倍率α＝１／２となる。さらに、垂直方向の実寸について、画像被写体４２を実被写体４１の２倍の長さとなるサイズで表示させるとすれば、表示倍率α＝２となる。
【００３４】
ここで、画像被写体４２について、表示倍率αにより表示させようとする場合を考える。すると、画像被写体サイズＹ１と実被写体サイズＹ２との関係は、
Ｙ１＝α×Ｙ２・・・（式１）
により表される。
また、上記式１が成立する場合における、垂直画面サイズＨ１と垂直撮像範囲Ｈ２との関係は、
Ｈ２＝Ｈ１／α・・・（式２）
により表される。
【００３５】
また、画角φ、被写体間距離Ｌ、及び垂直撮像範囲Ｈ２の関係については、
（Ｈ２／２）／Ｌ＝tan（φ／２）・・・（式３）
のようにして表すことができる。この（式３）により、画角φについては、
φ＝２×arctan（（Ｈ２／２）／Ｌ）・・・（式４）
により求められることが導かれる。
さらに、上記（式４）におけるＨ２について（式２）の右辺を代入することにより、上記（式４）は、
φ＝２×arctan｛（Ｈ１／（２×α））／Ｌ｝・・・（式５）
のようにして表すことができ、さらに（式５）は、
φ＝２×arctan｛（Ｈ１／（２×α×Ｌ）｝・・・（式６）
のようにして変形することができる。
【００３６】
これまでの説明及び（式６）によると、画像被写体４２について、表示倍率αに応じた垂直画像被写体サイズＹ１（＝α×Ｙ２）となるようにて表示するための画角φは、パラメータとして、この表示倍率αと、被写体間距離Ｌ及び垂直画面サイズＨ１が分かっていれば求められるということが分かる。
そして、このことは、撮像側のテレビ会議端末装置１−１にて、表示倍率α、被写体間距離Ｌ及び垂直画面サイズＨ１についての情報が得られさえすれば、表示倍率αに対応する画角φを求めて、この画角φとなるようにして撮像装置２−１のズーム機構部２ａを制御することが可能であり、これにより、実寸基準倍率対応ズーム制御が実現される、ということを意味する。
【００３７】
上記したことに基づき、本実施の形態のテレビ会議端末装置１−１、１−２としては、以降説明するようにして、実寸基準倍率対応ズーム制御を実現するための構成を与えることとした。
【００３８】
先ず、図４のフローチャートは、撮像側テレビ会議端末装置１−１が垂直画面サイズＨ１の情報を取得するために、撮像側テレビ会議端末装置１−１と表示側テレビ会議端末装置１−２とが行う処理手順例を示している。
【００３９】
ここでは、先ず、表示側テレビ会議端末装置１−２において、ステップＳ１０１により、垂直画面サイズＨ１の情報が、入力されたか否かについての判別を行っている。
垂直画面サイズＨ１は、ディスプレイ装置４−２の表示画面部３０についてのものとされるが、テレビ会議端末装置１に対して接続されるディスプレイ装置４−２が固定ではなく、不定の環境であることを前提にすると、表示側テレビ会議端末装置４−２にとって垂直画面サイズＨ１は既知ではないことになる。そこで、先ずは表示側テレビ会議端末装置１−２に対して、現在接続されているディスプレイ装置４−２の表示画面部３０についての垂直画面サイズＨ１を入力してやる必要があることになる。ステップＳ１０１では、この垂直画面サイズＨ１の入力を待機している。
【００４０】
この場合において、表示側テレビ会議端末装置１−２に対する垂直画面サイズＨ１の入力の態様としては、次のようなものを考えることができる。
１つには、例えば表示側のユーザが、リモートコントローラ５−２に対する所定操作を行うことにより、即ちユーザ操作により、テレビ会議端末装置１−２に対して垂直画面サイズＨ１を入力するものである。この場合、ユーザは、取扱説明書などの記載を見たり、あるいは、実際に表示画面部３０の垂直方向の寸法を測るなどして、垂直画面サイズＨ１に対応する寸法を把握した上で、その把握した寸法に対応した数値を入力する操作を行うことになる。
またもう１つには、例えば表示側テレビ会議端末装置１−２とディスプレイ装置４−２とをデータインターフェイスにより接続している環境の下で、このデータインターフェイス経由で、ディスプレイ装置４−２から垂直画面サイズＨ１を示す情報を送信し、表示側テレビ会議端末装置１−２がこの情報を受信取得して垂直画面サイズＨ１としての情報を得たことを以て、垂直画面サイズＨ１の入力が行われたとして扱うものである。
なお、このようなデータインターフェイスとしては、例えば１つには、ＨＤＭＩ(High Definition Multimedia Interface)におけるＤＤＣ(Display Data Channel)といわれる制御信号経路を用いることが考えられる。
【００４１】
ステップＳ１０１にて垂直画面サイズＨ１が入力されたとして肯定の判別結果が得られたのであれば、ステップＳ１０２に進んで、入力した垂直画面サイズＨ１の情報を、例えば制御部１８内のＲＡＭなどの記憶領域に保持しておくようにされる。なお、例えば記憶部１９などの不揮発性の記憶領域に記憶させることとしてもよいが、テレビ会議端末装置１に接続されるディスプレイ装置が不定となる環境を考慮した場合には、例えばテレビ会議端末装置１が起動した都度、垂直画面サイズＨ１の入力を受けることとした仕様のほうが妥当であると考えられ、この場合には不揮発性の記憶領域に記憶させておくことの必要性は特にないことから、ここではＲＡＭに保持させることとしているものである。
【００４２】
次のステップＳ１０３においては、上記ステップＳ１０２にて保持した垂直画面サイズＨ１の情報を、撮像側テレビ会議端末装置１−１に対して送信することが可能な状態であるか否かについて判別することとしている。例えば、表示側テレビ会議端末装置１−２が起動していても、撮像側テレビ会議端末装置１−１が起動していない、あるいは起動していても相互の通信が確立された状態でなければ垂直画面サイズＨ１の送信が可能にはならない。そして、ステップＳ１０３において、相互の通信が確立されているとして垂直画面サイズＨ１の送信が可能であると判別されると、ステップＳ１０４により、撮像側テレビ会議端末装置１−１に対して、例えば所定のコマンドを利用して垂直画面サイズＨ１のデータを送信する。
【００４３】
撮像側テレビ会議端末装置１−１では、ステップＳ２０１により、上記ステップＳ１０４により送信されてくる垂直画面サイズＨ１のデータ（物理画面サイズ情報）が受信されるのを待機しており、受信されたことを判別するとステップＳ２０２に進む。
ステップＳ２０２においては、受信した垂直画面サイズＨ１のデータを、例えば制御部１８内のＲＡＭなどの記憶領域に保持させておくようにする。
【００４４】
なお、実際的なこととして、撮像側テレビ会議端末装置１−１側で新規に垂直画面サイズＨ１を保持した後において、撮像側テレビ会議端末装置１−１が起動している状態の下で垂直画面サイズＨ１が変更される可能性を考えることができる。例えば、表示側において、テレビ会議端末装置１−２に接続するディスプレイ装置４−２としての機器を変更したような場合である。このような場合には、例えば変更されたディスプレイ装置４−２の表示画面部３０の垂直画面サイズＨ１が、新たに表示側テレビ会議端末装置１−２に対して、ユーザ操作若しくはデータインターフェイス経由で入力されたことに応じて、表示側テレビ会議端末装置１−２は、ステップＳ１０１にて肯定の判別結果が得られたものとして、ステップＳ１０２〜Ｓ１０４の手順を実行する（この場合のステップＳ１０２は、垂直画面サイズＨ１を新規に入力されたものにより書き換えて保持し直すことになる）。このような場合には、撮像側テレビ会議端末装置１−１は、ステップＳ２０１にて、垂直画面サイズＨ１を改めて受信したうえで、ステップＳ２０２によっては、これまで保持していた垂直画面サイズＨ１を、今回受信した垂直画面サイズＨ１により書き換えるようにして保持し直す。
【００４５】
図５のフローチャートは、撮像側テレビ会議端末装置１−１が表示倍率αの情報を取得するために、撮像側テレビ会議端末装置１−１と表示側テレビ会議端末装置１−２とが実行する処理手順例を示している。
ここでは先ず、表示側テレビ会議端末装置１−２において、ステップＳ３０１により表示倍率αの入力が行われるのを待機している。例えば表示側のユーザは、ディスプレイ装置４−２にて表示される撮像画像における画像被写体４２の表示画面部３０上でのサイズを、例えば画像被写体４２に対応する実被写体４１の実寸に対する倍率値（即ち表示倍率αとしての値）を入力することが指定できるようにされている。この表示倍率αの入力操作は、例えばリモートコントローラ５−２を利用して行うことができる。
そして、上記したユーザによる表示倍率αの入力操作に応じて、制御部１８が表示倍率αを入力して取得したとされると、ステップＳ３０１にて肯定の判別結果が得られることとなって、ステップＳ３０２に進むようにされる。
【００４６】
ステップＳ３０２においては、上記ステップＳ３０１に対応して入力取得した表示倍率αを、例えば制御部１８内のＲＡＭなどに保持しておくようにされる。
【００４７】
次のステップＳ３０３においては、上記ステップＳ３０２にて保持した表示倍率αの情報を、撮像側テレビ会議端末装置１−１に対して送信することが可能な状態であるか否かについて判別しており、例えば相互の通信が確立されているとして表示倍率αの送信が可能であると判別されると、ステップ３０４により、撮像側テレビ会議端末装置１−１に対して、表示倍率αのデータ（表示倍率指示情報）を送信する。
【００４８】
なお、上記ステップＳ３０２の記載では、この表示倍率αについて、ＲＡＭなどの揮発性の記憶領域に保持させることとしている。しかし、表示倍率αを、例えば記憶部１９などの不揮発性の記憶領域に記憶させておくことも考えられ、表示倍率αを不揮発性の記憶領域に記憶させることによっては次のような利点も得られる。つまり、画像被写体４２の表示倍率については、或る程度、固定的になる場合もあると考えられるからである。そこで、表示倍率αについては不揮発性の記憶領域に記憶させておくこととすれば、次回の会議に応じてテレビ会議端末装置１−２を起動させたときには、さしあたり記憶されている表示倍率αを読み出してステップＳ３０４により送信することができ、例えば起動ごとにユーザが表示倍率αを入力する手間は省かれる。
【００４９】
撮像側テレビ会議端末装置１−１では、ステップＳ４０１により、上記ステップＳ３０４により送信されてくる表示倍率αのデータが受信されるのを待機しており、受信されたことを判別するとステップＳ４０２に進み、受信した表示倍率αのデータを、例えば制御部１８内のＲＡＭなどの記憶領域に保持させる。
また、ここでは、表示側テレビ会議端末装置１−２側のユーザは、いつでも、表示倍率αを変更（入力）する操作を行うことができるものとしている。このようにして、表示倍率αを変更する操作が行われる都度、表示側テレビ会議端末装置１−２では、ステップＳ３０１〜Ｓ３０４までの手順を実行する。これに応じて、撮像側テレビ会議端末装置１−１においては、ステップＳ４０１により新たに送信されてきた表示倍率αのデータを受信して、ステップＳ４０２により、これまで保持していた表示倍率αのデータを、新たに受信した表示倍率αのデータにより書き換えて保持し直す。
なお、表示倍率αは、このようにして通信を利用して表示側テレビ会議端末装置１−２から送信してもらって撮像側テレビ会議端末装置１−１にて取得できるようにすることが自動化を図るうえでは有効になる。しかし、例えば、撮像側のユーザ(会議参加者)が表示側のユーザから表示倍率を伝えてもらったうえで、撮像側のユーザが撮像側テレビ会議端末装置１−１に対して表示倍率の指定入力操作を行うことで、撮像側テレビ会議端末装置１−１が表示倍率αの情報を取得できるようにしてもよい。
【００５０】
図６のフローチャートは、撮像側テレビ会議端末装置１−１が実行する、実寸基準倍率対応ズーム制御のための処理手順例を示している。
先ず、ステップＳ５０１においては、垂直画面サイズＨ１及び表示倍率αの各データを、例えば制御部１８内のＲＡＭ（若しくは記憶部１９）に保持している状態であるか否かを待機している。先の図４及び図５により示したように、撮像側テレビ会議端末装置１−１は、表示側テレビ会議端末装置１−２から送信されてくる垂直画面サイズＨ１のデータ、及び表示倍率αのデータを受信取得して、これより以前に保持されていなければ新規に保持し、既に保持していたのであれば書き換えを行うようにして保持し直すようにしている。ステップＳ５０１においては、このようにして撮像側テレビ会議端末装置１−１にて保持しているべき垂直画面サイズＨ１のデータと表示倍率αのデータについて、そのいずれもが保持されている状態にあるか否かを判別する。
【００５１】
ステップＳ５０１にて否定の判別結果が得られた場合には、垂直画面サイズＨ１のデータと表示倍率αのデータの少なくともいずれか一方が保持されている状態にない、ということになる。これは、本実施の形態の実寸基準倍率対応ズーム制御に必要なパラメータ（制御情報）が揃っていないということを意味し、実寸基準倍率対応ズーム制御を実行することはできない。そこで、この場合には、ステップＳ５０１により肯定の判別結果が得られるのを待機する状態を継続することになる。
【００５２】
これに対してステップＳ５０１にて肯定の判別結果が得られた場合には、実寸基準倍率対応ズーム制御を実行可能とされることに応じて、ステップＳ５０２以降の手順に進む。
ステップＳ５０２においては、現在においてＲＡＭ（若しくは記憶部１９）にて保持しているとされる垂直画面サイズＨ１及び表示倍率αのデータを読み出して取得する。
ステップＳ５０３では、自身に接続されている撮像装置２−１の測距部２ｂにより現在測定されている被写体間距離の値を取り込み、これを被写体間距離Ｌのデータとして取得する。
このようにステップＳ５０２、Ｓ５０３により、画像被写体４２についての表示倍率αが把握されるとともに、この表示倍率αに応じたサイズ（垂直画像被写体サイズＹ１）で画像被写体４２が表示されるようにするために必要なパラメータである、垂直画面サイズＨ１及び被写体間距離Ｌのデータが取得されたことになる。
【００５３】
そこで、ステップＳ５０４においては、画像被写体４２を表示倍率αに応じた垂直画像被写体サイズＹ１により表示するための画角φを求める（算出する）。このためには、例えば（式６）におけるＨ１、α、Ｌの項に対して、それぞれ、上記ステップＳ５０２、Ｓ５０３により取得された垂直画面サイズＨ１、表示倍率α、及び被写体間距離Ｌの値を代入して演算を行えばよい。
そして、次のステップＳ５０５により、上記ステップＳ５０４により算出された画角φが得られるようにしてズーム駆動制御部１７に対する指示を行う。この指示に応じてズーム駆動制御部１７が、撮像装置２−１のズーム機構部２ａを駆動することで、現実に画角φが得られることになる。
この画角φにより撮像して得られる画像の画像信号は、撮像側テレビ会議端末装置１−１から表示側テレビ会議端末装置１−２に対して送信され、表示側テレビ会議端末装置１−２では、この画像信号をディスプレイ装置４−２の表示画面部３０に対して表示出力することになる。この結果、先の図３による説明から理解されるように、ディスプレイ装置４−２の表示画面部３０において表示される画像被写体４２の実寸サイズは、表示倍率αに対応したものとなっている。例えば仮に、実被写体４１の実被写体サイズＹ２が１メートルであり、表示倍率α＝１であれば、画像被写体４２も画像被写体サイズＹ１が１メートルとなる大きさで表示される。つまり、実物大の表示が行われる。また、表示倍率が１．２倍であれば、画像被写体４２の画像被写体サイズＹ１は１．２メートルとなるようにして表示されることになる。
【００５４】
なお、図６においては図示していないが、本実施の形態としては、ステップＳ５０５によるズーム駆動制御とともに、表示画面部３０における画像被写体４２の位置が適切なものとなるようにして、パン・チルト駆動制御を実行できるように構成することが考えられる。これにより、例えば画角を変更したことに応じて表示画面上における画像被写体４２の位置(構図)が不適正になったとしても、適切な位置に自動的に戻すことができる。このような構成は、例えば表示側テレビ会議端末装置１−２の画像信号処理／表示制御部１１において、先ず撮像画像信号についての被写体検知処理を行って、この検知した被写体の画像領域部分の表示画像上での最適位置との誤差を求める。さらに、この誤差に応じたパン方向、チルト方向ごとの移動量(制御量)を求める。そして、この移動量を示す駆動指示信号を、撮像側テレビ会議端末装置１−１に対して送信する。撮像側テレビ会議端末装置１−１の制御部１８及びＰＴＺ駆動制御部１５は、受信した駆動指示信号が示す移動量だけパン方向、チルト方向への移動が行われるようにして、雲台３−１のパン機構部ａ、チルト機構部３ｂの駆動制御を実行する。これにより、画像被写体４２は、適切な構図で表示されることになる。
【００５５】
これまで述べてきたようにして、本実施の形態では、撮像側テレビ会議端末装置１−１において、垂直画面サイズＨ１、表示倍率α、及び被写体間距離Ｌの情報を収集して画角φを求めてズーム駆動制御を行うことで、実寸基準倍率対応ズーム制御を実現している。
このような実寸基準倍率対応ズーム制御では、先ず、画像被写体４２のサイズ調整としてのズーム（画角）制御は、ユーザの手動によるものではなく、自動で実行されるものとなる。
そして、実寸基準倍率対応ズーム制御に必要な制御情報である、垂直画面サイズＨ１、表示倍率α、及び被写体間距離Ｌの情報のうち、垂直画面サイズＨ１及び表示倍率αは、表示側テレビ会議端末装置１−２側から送信させることで撮像側テレビ会議端末装置１−１が取得できるようにされているが、これは、テレビ会議システムにおける端末間通信を利用することで簡単に実現できる。また、被写体間距離Ｌの情報は、撮像側テレビ会議端末装置１−１側にて接続される撮像部２−１が、例えばオートフォーカスなどのために備える測距部２ｂとしての測距機能を利用して得ることができる。テレビ会議システムでは、端末相違ごとに対応して撮像装置を備えることが一般的であるから、本実施の形態としては、この撮像装置が有する測距機能を流用すればよいわけであり、被写体間距離Ｌの情報取得のために、別途、測距のための装置を追加する必要もない。
また、これまでの説明からも理解できるように、例えば表示側テレビ会議端末装置１−２側にてユーザ操作により表示倍率αについての変更設定が行われれば、変更された表示倍率αが撮像側テレビ会議端末装置１−１に対して送信されることで、撮像側テレビ会議端末装置１−１は、変更された表示倍率αに対応してズーム制御を適正に実行できる。テレビ会議においては、表示倍率を途中で変更したくなる状況も少なからずあると考えられるが、本実施の形態であれば、例えば表示側テレビ会議端末装置１−２のユーザが表示倍率αを変更する操作を行いさえすれば、その新たに指示された表示倍率αに応じた画像被写体４２が表示されるようにして自動でズーム制御が実行される。
さらに、何らかの事情で、表示側テレビ会議端末装置１−２に接続するディスプレイ装置を変更したことで、その垂直画面サイズＨ１が代わったとしても、表示側テレビ会議端末装置１−２にて新たな垂直画面サイズＨ１を入力しさえすれば、この垂直画面サイズＨ１のデータが撮像側テレビ会議端末装置１−１に送信されることになり、結果として新たな垂直画面サイズＨ１に応じた実寸基準倍率対応ズーム制御が適正に実行される。
また、会議中においては実被写体４１が動いて被写体間距離Ｌが変化し得るが、本実施の形態では、撮像側テレビ会議端末装置１−１が、図６のステップＳ５０３として示したようにして、定常的に、撮像装置２−１の測距部２ｂの測定結果を取り込んで被写体間距離Ｌを取得したうえで、ステップＳ５０４、Ｓ５０５による画角φの算出及びズーム駆動制御を実行するものとしている。つまり、時間経過に伴って被写体間距離Ｌが変化しても、これに追随して実寸基準倍率対応ズーム制御を適正に実行することができる。
これらのことから、本実施の形態の実寸基準倍率対応ズーム制御は、例えばテレビ会議システムに採用して非常に有用である、といえる。
【００５６】
また、例えば、特許文献１には、「実物空間Ａにあるオブジェクトを空間撮像用カメラ１Ａで撮像し、その画像を通信インターフェース、画像入力部を介して表示サイズ比較部へ送ると共に遠隔空間Ｂの表示部で表示する。表示サイズ比較部は、その画像と空間撮像用カメラ１Ｂで撮像した表示部の表示画像とをオーバーレイ合成し、両画像の差分を検出する。スケール補正信号送信部は、その差分から制御量を算出し通信インターフェースを介して空間撮像用カメラ１Ａの光学的ズームアップ、ダウンを行う」ようにされた構成が示されている。この構成では、実物空間Ａにてオブジェクトの実物を撮像するだけではなく、実物空間Ｂにおいても、同じオブジェクトが表示される表示部の表示画像を撮像する必要性がある。つまり、実寸表示のために撮像側と表示側との双方で、実物と表示画像の違いはあるものの、同じオブジェクトを対象にして撮像を行う必要があり、システム構成が複雑に成らざるを得ない。また、画像をオーバーレイ合成したり、画像の差分から制御量を求めるなど、処理、演算も軽くはない。
これに対して、表示倍率αに応じた画像被写体サイズＹ１となるように画像被写体４２を表示させるために、表示側でも撮像側と同じ対象を撮影するためのカメラを別途備える必要はない。つまり、本実施の形態では、例えば図１に示した通常のテレビ会議システムの構成で足りる。
また、本実施の形態では、先の（式６）に対応した比較的簡単な演算で画角φを求めたうえで、ズーム駆動制御を実行すればよいので、処理、演算も軽いものとなっており、例えばテレビ会議端末装置１−１における制御部１８の処理負担も軽くて済む。
【００５７】
ところで、本実施の形態では、画像被写体４２の表示倍率αは、実被写体４１の実寸サイズを基準としているものであり、従って、表示側テレビ会議端末装置１−２のユーザが表示倍率αを入力して設定する際には、実被写体４１についての実物サイズを意識していることになる。
そこで、本実施の形態としては、画像被写体４２を表示させているときに、その実物サイズとの対応がより把握しやすくなるようにして、例えば図７に示すような表示の態様をとることも可能なように構成することとする。
【００５８】
先ず、図７（ａ）では、表示側のディスプレイ装置４−２の表示画面部３０において、表示倍率α＝１により被写体画像４２が表示されている状態例が示されている。そのうえで、ここでは、垂直、水平の各方向に沿うようにして、表示画面部３０においてグリッドライン３１を重畳表示させている。この場合のグリッドライン３１ａにおけるグリッド幅３１ａは、或る決まった現実の長さが表示中の画像上では、どのような長さとなっているのか、という対応を示すものとなる。例として、グリッドライン３１ａのグリッド幅が対応する現実の長さが１０ｃｍであるとすると、図７（ａ）の場合は、表示倍率α＝１なので、表示画面上において表示されるグリッド幅３１ａの実際の長さＷも、同じ１０ｃｍとなる。
【００５９】
また、例えば図７（ａ）の表示画面部３０の左下において、破線で括って示しているように、本実施の形態では、表示倍率指示画像３２も表示させることが可能とされている。図７（ａ）の場合には設定されている表示倍率α＝１であることに応じて、ここでは、「×１」のようにして、１倍であることを示す文字を表示させている。
なお、グリッドライン３１ａ及び表示倍率指示画像３２は、図示した以外の位置にて表示されるようにしてもよい。
また、グリッドライン３１ａと、表示倍率指示画像３２は、例えば表示側のユーザが行うリモートコントローラ５−２に対する所定操作に応じて、それぞれ、独立して表示・消去させることが可能であることとする。
【００６０】
また、比較として、図７（ｂ）には、表示倍率α＝２が設定された場合の画像被写体４２が表示されている状態を示している。
ここでは、表示倍率α＝２とされていることに応じて、図７（ａ）と同じとされる実被写体４１を撮像して得られたとされる画像被写体４２は、図７（ａ）に対して２倍の画像被写体サイズにより表示されているものである。
また、表示倍率α＝２とされていることに応じて、グリッドライン３１ａのグリッド幅３１ａは、その実際の長さが２×Ｗで表されるものとなる。つまり、表示されているグリッド幅３１ａの実際としては、図７（ａ）の場合の２倍となる。これは、例えばグリッドライン３１ａのグリッド幅が対応する現実の長さが１０ｃｍであると、現在において表示画面部３０にて表示されているグリッド幅３１ａの実際の長さは２０ｃｍとなる。つまり、表示画面部３０において表示されている画像被写体４２の２０ｃｍ分が、現実には、実被写体４１における１０ｃｍ分となることを示している。
【００６１】
また、図７（ｂ）における表示倍率指示画像３２については、「×２」との文字表示により、表示倍率α＝２が設定されていることを示すようにされる。
【００６２】
図８のフローチャートは、表示側テレビ会議端末装置１−２が実行する、グリッドライン３１の表示に関する処理手順例を示している。
先ず、表示側テレビ会議端末装置１−２では、ステップＳ６０１により、グリッドライン３１の表示を開始させるための操作が行われるのを待機しており、この操作に応じた操作信号が受信部２０から制御部１８に渡されたことに応じて、例えばステップＳ６０２以降の手順を実行する。
【００６３】
ステップＳ６０２では、現在において有効な垂直画面サイズＨ１と、表示倍率αの両者のデータを保持（記憶）しているか否かについての判別を行う。ここで否定の判別結果が得られた場合には、現在において、実寸基準倍率対応ズーム制御は行われていないことになるので、グリッドラインを表示することの意味はない。そこで、この場合には、ステップＳ６０９により、例えば垂直画面サイズＨ１及び表示倍率αが未だ入力されていないのでグリッドライン３１を表示させることができない旨をユーザに伝えるための警告表示（或いは音声による警告に代えてもよい、また、音声による警告と併用してもよい）を実行させる。また、これとともに、ステップＳ６０８により、今回のグリッドライン３１の表示開始を指示する操作をキャンセルして無効化する。
【００６４】
これに対してステップＳ６０２において肯定の判別結果が得られた場合には、ステップＳ６０３により、現在保持している垂直画面サイズＨ１及び表示倍率αを読み出し、ステップＳ６０４に進む。
【００６５】
ステップＳ６０４においては、読み出した垂直画面サイズＨ１と表示倍率αを利用して、例えば画像信号処理／表示制御部１１にてグリッドライン３１を描画させ、表示画面部３０に表示出力させている撮像画像上に重畳表示させるための処理を実行する。
まず例えば、「グリッド幅３１ａは１０ｃｍを示す」というように、グリッド幅３１ａが対応すべき寸法が決まっていさえすれば、垂直画面サイズＨ１に基づいて、表示用のフレーム画像におけるグリッド幅３１ａが対応する垂直方向及び水平方向における連続画素数を求めることができる。そこで、グリッドラインの描画に際しては、上記のようにして求めた連続画素数に対応して決まるフレーム画像における位置に対して、グリッド幅３１ａに対応する区切り線を描画すればよい。
【００６６】
上記ステップＳ６０４によりグリッドライン３１を表示させた後は、ステップＳ６０５により、現在表示させているグリッドライン３１についての消去操作が行われるのを待機している。そのうえで、ここでは、ステップＳ６０５において否定の判別結果が得られた場合には、ステップＳ６０７の手順により、これまでにおいて保持している垂直画面サイズＨ１又は表示倍率αについての書き換えが行われたか否かを判別することとしている。
【００６７】
垂直画面サイズＨ１又は表示倍率αについての書き換えが行われたとしてステップＳ６０７にて否定の判別結果が得られた場合には、ステップＳ６０３の手順に戻る。これにより、書き換えにより更新された垂直画面サイズＨ１又は表示倍率αに応じたグリッド幅３１ａを有する新たなグリッドライン３１が表示されることになる。ステップＳ６０７にて否定の判別結果が得られたのであれば、ステップＳ６０５に戻る。
【００６８】
そして、ステップＳ６０５においてグリッドライン３１を消去する操作が行われたとして肯定の判別結果が得られたのであれば、ステップＳ６０６により、これまで表示させていたグリッドライン３１を消去するための処理を実行してステップＳ１０１に戻る。
【００６９】
また、表示倍率指示画像３２の表示に関する処理手順としては、上記図８に準ずることになる。
ただし、表示倍率指示画像３２の表示に関しては、垂直画面サイズＨ１を利用しない描画処理が可能であるから、ステップＳ６０３、Ｓ６０４においては、そのときに保持されている垂直画面サイズＨ１、表示倍率αのうち、表示倍率αのみを読み出し、この読み出した表示倍率αが反映されるようにして表示倍率指示画像３２についての描画処理を行って表示させるようにしてよい。
また、ステップＳ６０７としても、表示倍率αの書き換えが行われたか否かのみを判別すればよく、垂直画面サイズＨ１の書き換えについての判別を行わない処理とすることができる。
【００７０】
また、グリッドラインの表示に関する変形例として、図９（ａ）（ｂ）に示すようにして、指標画像３３を表示可能に構成することも考えられる。
なお、ここでは指標画像３３を表示画面部３０の右下に表示させているが、その表示位置については特に限定されない。また、この図では、指標画像３３とともに、図７においても示した表示倍率指示画像３２も同時に表示させた態様を示している。この指標画像３３に関しても、その表示・消去の操作は、表示倍率指示画像３２とは独立して行えるものとする。
【００７１】
この場合の指標画像３３は、表示画面部３０上において、その画面サイズ（例えばこの場合であれば、垂直画面サイズＨ１）に対して一定比率となる固定長のバーを表示させると共に、そのバーの長さが対応する現実の被写体の長さ（対応サイズ）を文字数字により表示させたものとなる。
【００７２】
図９（ａ）は、表示倍率α＝１の場合の表示態様例を示しているものとされるが、ここでは、指標画像３３において示される対応サイズは「５０ｃｍ」であるとしている。この場合、例えば表示画面部３０において表示されている指標画像３３のバーの長さを測れば、現実に５０ｃｍとなっているものである。
【００７３】
図９（ｂ）には比較として、図９（ａ）と同じ実被写体４１を撮像したうえで、表示倍率α＝１／２を設定した場合の表示態様例を示す。
この場合には、表示倍率α＝１／２が設定されていることに応じて、画像被写体４２の垂直画像被写体サイズＹ１は、図９（ａ）に対して１／２となっている。
また、これとともに、指標画像３３において表示される対応サイズは、１ｍとされ、図９（ａ）の２倍となっている。ちなみに、指標画像３３において表示されるバーの長さ自体は、図９（ａ）、（ｂ）とで同じである。
【００７４】
この図９に示される指標画像３３の表示に関する処理手順としても、図８に準ずることになる。ステップＳ６０４としては、例えば垂直画面サイズＨ１に応じて、フレーム画像内にて配置する指標画像３３のバーの長さを決定するとともに、表示されるバーの実際の長さを求めて、さらにこの求めた長さと表示倍率αとに基づいて対応サイズを求める。そして、このようにして求めた対応サイズが反映されるように文字数字の描画を実行する。
【００７５】
ここで、図７及び図９に示したグリッドライン３１、指標画像３３は、表示画面部３０において画像として表示される画像被写体４２についての、実物（実被写体４１）のサイズとの対応を視覚的に把握するための目盛りとなる画像であるが、このようなグリッドライン３１、指標画像３３の表示態様の詳細については適宜考えることができる。また、グリッドライン３１、指標画像３３以外で、このような画像被写体４２と実物（実被写体４１）サイズとの対応をとることのできる目盛り画像の態様もいくつか考えることができる。例えば、所定の現実の長さに対応する半径を有する円周の画像を、撮像画像に重畳表示させることも考えられる。
【００７６】
また、これまでの説明においては、ディスプレイ装置の表示画面部全体に撮像画像を表示させる例を挙げてきたが、例えば実際においては、例えば表示画面部全体の画像表示領域を所定のパターンで分割して得られる分割画像表示領域に撮像画像を表示させることも行われる。このような場合においても、表示側テレビ会議端末装置１−２にて、撮像画像を縮小する処理を行わなければ、その分割画像表示領域内にて、表示倍率αに応じた適正な画像被写体４２のサイズが得られた状態での表示が行われるものである。
【００７７】
また、実際においては、３以上のテレビ会議端末装置１が相互に通信を行って、撮像により得られる画像信号の送受信を行うと共に、各テレビ会議端末装置１により受信画像の表示出力を実行するようにしてテレビ会議システムが構築される場合がしばしばある。本実施の形態としては、これまで説明を簡単なものとするために、２つのテレビ会議端末装置１によりテレビ会議システムを構築した場合を前提としているが、本実施の形態に基づいた構成は、上記のような３以上のテレビ会議端末装置によりテレビ会議システムを構築する場合においても何ら問題なく適用できる。
また、例えば図１、図２に示したテレビ会議システムの構成であるとか、テレビ会議端末装置１の内部構成などについても適宜変更されてよい。
【００７８】
また、例えば図４〜図６、図８の各フローチャートに示す処理は、撮像側テレビ会議端末装置１−１、若しくは表示側テレビ会議端末装置１−２の制御部１８を形成するものとされるＣＰＵが、ＲＯＭ或いは不揮発性メモリなどに記憶されるプログラムを実行することで実現されるものとしてみることができる。
また、このプログラムは、上記のようにして、例えばＲＯＭなどに対して製造時などに書き込んで記憶させるほか、リムーバブルの記憶媒体に記憶させておいたうえで、この記憶媒体からインストール(アップデートも含む)させるようにして、例えば記憶部１９などの不揮発性の記憶領域に記憶させることが考えられる。また、データインターフェイス経由により、他のホストとなる機器からの制御によってプログラムのインストールを行えるようにすることも考えられる。さらに、ネットワーク上のサーバなどにおける記憶装置に記憶させておいたうえで、例えばネットワーク経由などでサーバからダウンロードして取得できるように構成することも考えられる。
【図面の簡単な説明】
【００７９】
【図１】本発明の実施の形態に対応するテレビ会議システムの構成例を示す図である。
【図２】実施の形態のテレビ会議端末装置の内部構成例を、これと接続される撮像装置、ディスプレイ装置等と共に示す図である。
【図３】実施の形態における実寸基準倍率対応ズーム制御を実現するための原理、技術概念を説明するための図である。
【図４】実施の形態において、撮像側テレビ会議端末装置が垂直画面サイズの情報を取得するために、撮像側テレビ会議端末装置と表示側テレビ会議端末装置とが行う処理手順例を示すフローチャートである。
【図５】実施の形態において、撮像側テレビ会議端末装置が表示倍率の情報を取得するために、撮像側テレビ会議端末装置と表示側テレビ会議端末装置とが実行する処理手順例を示すフローチャートである。
【図６】撮像側テレビ会議端末装置が実行する、実寸基準倍率対応ズーム制御のための処理手順例を示すフローチャートである。
【図７】グリッドライン及び表示倍率指示画像の表示態様例を示す図である。
【図８】グリッドライン表示に関する処理手順例を示すフローチャートである。
【図９】指標画像及び表示倍率指示画像の表示態様例を示す図である。
【符号の説明】
【００８０】
１（１−１、１−２） テレビ会議端末装置、２（２−１、２−２） 撮像装置、２ａ ズーム機構部、２ｂ 測距部、３ａ パン機構部、３ｂ チルト機構部、４（４−１、４−２） ディスプレイ装置、５（５−１、５−２） リモートコントローラ、１１ 画像信号処理／表示制御部、１２ エンコーダ、１３ デコーダ、１４ 通信部、１５ ＰＴＺ駆動制御部、１６ パン／チルト駆動制御部、１７ ズーム駆動制御部、１８ 制御部、１９ 記憶部、２０ 受信部、３０ 表示画面部、３１ グリッドライン、３１ａ グリッド幅、３２ 表示倍率指示画像、３３ 指標画像、４１ 実被写体、４２ 画像被写体
【技術分野】
【０００１】
本発明は、例えばテレビ会議システムにおける端末装置などとして利用され、撮像により得た画像信号を送信することが可能とされる画像送信装置と、この画像送信装置から送信される画像信号を受信して表示出力のための処理を実行可能な上記画像受信装置と、これら画像送信装置、画像受信装置が、画像送信装置側の撮像部の画角を可変制御する際の画角制御方法に関する。また、上記画像送信装置及び画像受信装置とから成る画像表示システムと、これに対応する画像表示方法とに関する。
【背景技術】
【０００２】
テレビ会議システムにおいては、互いに離れた会議場などの場所ごとにテレビ会議システム対応の端末装置を設け、さらにこの端末装置に撮像装置及びディスプレイ装置を接続する。そして、１つの近端としての或る会議場においては、例えばその会議場に居る会議参加者などを撮像装置により撮像して得た撮像画像を端末装置経由で、遠端となる他の会議場の端末装置に対して送信する。遠端側の端末装置は、近端側から送信されてきた撮像画像を受信し、これを自身に接続されているディスプレイに表示させる。
また、端末装置には、マイクロフォンとスピーカも接続され、近端側のマイクロフォンにより収音して得られる近端話者の音声信号を、端末装置経由で遠端側に送信する。遠端側の端末装置では、受信した音声信号をスピーカから出力する。
これにより、テレビ会議システムによっては、通信相手の会議場の様子をディスプレイ装置に表示させながら会話を行うようにして、会議を進行させていくことができる。
【０００３】
ところで、テレビ会議システムにあっては、撮像画像を表示させるのにあたって、例えば表示画像において被写体を実物と同じサイズで表示させたい場合がある。例えば、テレビ会議システムにより、或る製品、部品などを撮像して表示してもらいながら説明するのにあたり、その被写体となる製品、部品のサイズが話の要点となっているような場合を挙げることができる。
【０００４】
また、近年においては、例えばフラットパネルディスプレイの普及に伴い、相当に大型の表示画面部を有するディスプレイ装置も普及してきており、テレビ会議システムにおいても、このような大型表示画面部のディスプレイ装置が利用されることが多くなってきている。このようなことを背景とすると、テレビ会議システムにおいては、相手側から送信されてきた撮像画像を、例えば実物大のサイズにより表示できることになる。このようにして、実物大サイズで撮像画像を表示すれば、例えば臨場感が増して、例えば会議参加者の気持ちも盛り上げられる。
【０００５】
このようにして、テレビ会議システムにおいては、撮像により得られた画像信号を送信して相手側の端末装置にて画像として表示出力させる場合において、そのときに撮像している被写体についての画像について、実物に対して或る倍率となる、しかるべきサイズとしたい場合がある。
【０００６】
【特許文献１】特開平６−２６９００８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
撮像により撮像して得られる画像内の被写体のサイズを変更するのには、例えば撮像装置がズーム（画角）可変機能を有していれば、この画角を変更すればよい。
しかし、一般的に、テレビ会議システムにおいて、撮像装置の画角制御は、通信相手側の端末装置と接続されるディスプレイ装置の表示画面部の物理的サイズとは無関係であって、独立して調整される。
このために、これまでのテレビ会議システムにおいて、表示中の撮像画像における被写体のサイズを調整するのにあたっては、例えば画像送信側の会議参加者から聞くなどして被写体の実物サイズを予め知ったうえで、画像送信側の撮像装置の画角を、画像受信側の会議参加者が遠隔操作するようなことを行わなければならない。
また、表示中の撮像画像内の被写体の実寸サイズは、画像送信側における撮像装置から被写体までの距離であるとか、画像受信側で使用するディスプレイ装置の表示画面部の物理的寸法などの条件に応じて変わり得るものなので、このような条件が変わる都度、画像受信側では画角の調整を行う必要があり、面倒なものとなっている。
さらには、テレビ会議システムでは、例えば画像圧縮符号化を施した画像信号を送受信することがしばしばあるが、この場合には、表示される画像の遅延が生じやすい。このようにして遅延して表示される撮像画像を見ながらの遠隔操作による画角調整は非常にやりにくい。このことからも、現状のテレビ会議システムにおける、表示中の相手側撮像画像における被写体のサイズ調整のための画角遠隔操作は、非常に面倒なものであることが分かる。
【０００８】
そこで、本願発明としては、上記のような表示中の相手側撮像画像における被写体のサイズ調整のための画角制御を自動的に行えるようにすることとしたうえで、例えばテレビ会議システムなどにおいて適用しやすい、より有用なものを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明は上記した課題を考慮して、画像送信装置として次のように構成する。
つまり、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行可能な画像受信装置に対して、撮像部による撮像に基づいて得られる画像信号を送信する送信手段と、画像受信装置から送信されてくる、表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、撮像部が撮像する被写体までの距離を示す被写体間距離情報を得る被写体間距離情報取得手段と、物理画面サイズ情報と被写体間距離情報とに基づいて、表示倍率指示情報が指示する倍率に応じた実サイズにより表示画面部にて被写体が表示されるための画角である必要画角を求めて取得する必要画角取得手段と、必要画角が得られるように、画角が可変の撮像部により撮像される画角を変更する制御を実行する画角変更制御手段とを備えることとした。
【００１０】
また、画像受信装置として次のように構成することとした。
つまり、画像送信装置から送信される撮像部による撮像に基づいて得られる画像信号を受信する画像信号受信手段と、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、この画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、画像送信手段が撮像部の画角を制御するために利用する制御情報の１つであって、表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、物理画面サイズ情報を画像送信装置に対して送信する物理画面サイズ情報送信手段と、画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、画像送信手段が上記撮像部の画角を制御するために利用する制御情報の１つであって、表示画面部にて表示させる画像における画像被写体についての実サイズに対する倍率を指示するための入力操作に応じて得られる表示倍率指示情報を画像送信装置に対して送信する表示倍率指示情報送信手段とを備えることとした。
【００１１】
また、画像表示システムとして次のように構成することとした。
つまり、この画像表示システムは、画像送信装置と、画像受信装置とから成る。そのうえで、画像送信装置において、撮像部による撮像に基づいて得られる画像信号を送信する画像信号送信手段と、画像受信装置において、画像送信装置から送信されてきた画像信号を受信する画像信号受信手段と、画像受信装置において、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、画像受信装置において、表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、画像受信装置において、上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手段と、画像送信装置において、送信されてきた物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、画像送信装置において、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、画像送信装置において、撮像部が撮像する被写体までの距離を示す被写体間距離情報を取得する被写体間距離情報取得手段と、画像送信装置において、物理画面サイズ情報と被写体間距離情報とに基づいて、表示倍率指示情報が指示する倍率に応じた実サイズにより表示画面部にて被写体が表示されるための画角である必要画角を求めて取得する必要画角取得手段と、画像送信装置において、必要画角が得られるように、画角が可変の撮像部により撮像される画角を変更する制御を実行する画角変更制御手段とを備えることとした。
【００１２】
上記各構成によっては、撮像部による撮像に基づいて得られる画像信号を送信する画像送信装置において、画角制御のための制御情報として、画像受信装置側の表示装置が有する表示画面部の物理的なサイズを示す物理画面サイズ情報と、撮像部から被写体までの距離を示す被写体間距離情報と、表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報とを取得するようにされる。
そして、画像送信装置は、被写体間距離情報と、上記物理画面サイズ情報とに基づいて、上記表示倍率指示情報が示す表示倍率が実際の表示画像上において得られるようにして、撮像部の画角制御が行われるようにされる。
【発明の効果】
【００１３】
このように、本願発明によれば、画像送信装置側において、画像受信装置側の表示装置が有する表示画面部の物理的なサイズの情報（物理画面サイズ情報）と、被写体間距離の情報を取得すると共に、表示倍率の指示さえ得られれば、この指示された表示倍率となる画角を常に自動で設定できることになる。これにより、例えばテレビ会議システムなどにより適合した、有用な被写体画像のサイズ調整機能を提供できる。
【発明を実施するための最良の形態】
【００１４】
本願発明を実施するための最良の形態（以下、実施の形態という）としては、テレビジョン会議システム(テレビ会議システム)における画像送受信系に本願発明を適用する。
テレビ会議システムは、場所の異なる会議場ごとに通信端末であるテレビ会議端末装置を設置し、このテレビ会議端末装置から、撮像装置により撮影した画像と、マイクロフォンにより収音した音声を他のテレビ会議端末装置に送信させると共に、他のテレビ会議端末装置から送信されてきた画像と音声を受信して、それぞれ、ディスプレイ装置、スピーカから出力させるように構成される。つまり、テレビ会議システムでは、画像を相互に送受信する画像送受信系と、音声を相互に送受信する音声送受信系とを備える。そして、本実施の形態としては、上記画像送受信系として撮像画像を送受信するために設けられるテレビ会議端末装置を中核とするシステムが該当する。
【００１５】
図１は、テレビ会議システムにおける画像送受信系を主体とするシステム構成例を示している。
この場合には、互いに離れた２つの場所Ａ、場所Ｂが会議場とされており、これらの場所Ａ，Ｂのそれぞれにおいて、テレビ会議端末装置１−１、１−２が設置される。これらのテレビ会議端末装置１−１、１−２は、所定の通信方式に対応する通信回線により接続されて、相互通信が可能なようにされている。
また、場所Ａにおいては、テレビ会議端末装置１−１とともに、撮像装置２−１、雲台３−１、ディスプレイ装置４−１が備えられる。
撮像装置２−１は、画角調整のためのズーム機構を備え、雲台３−１に取り付けられている。雲台３−１は、パン機構とチルト機構を備えることで、取り付けられた撮像装置の撮像方向（撮像視野）を、所定角度範囲で上下方向及び左右方向に変更することが可能とされている。
また、リモートコントローラ５−１は、テレビ会議端末装置１−１の動作をユーザが遠隔操作するために設けられる。
【００１６】
同様にして、場所Ｂにおいては、テレビ会議端末装置１−２とともに、撮像装置２−２、雲台３−２、ディスプレイ装置４−２、及びリモートコントローラ５−２が備えられる。
【００１７】
なお、以降の説明において、テレビ会議端末装置、撮像装置、雲台、ディスプレイ装置、リモートコントローラ、などについて、特に離れた場所にある同一のものを区別する必要のない場合には、テレビ会議端末装置１、撮像装置２、雲台３、ディスプレイ装置４、リモートコントローラ５などのようにして表記する。
また、音声送受信系については、ここでは図示は省略している。
【００１８】
この図に示される画像送受信系の基本的動作は、例えば次のようになる。
先ず、場所Ａにおいて、撮像装置２−１により撮像して得られた動画像としての画像信号(撮像画像信号)は、テレビ会議端末装置１−１に入力される。テレビ会議端末装置１−１は、入力された画像信号を、通信回線を経由してテレビ会議端末装置１−２に対して送信する。テレビ会議端末装置１−２は、上記のようにして送信されてきた撮像画像信号を受信し、ディスプレイ装置４−２から出力させる。
また、同様にして、場所Ｂ内の撮像装置２−２により撮像して得られた画像信号は、テレビ会議端末装置１−２によりテレビ会議端末装置１−１に送信される。テレビ会議端末装置１−１では、受信した画像信号を、ディスプレイ装置４−１から出力させる。
このようにして、テレビ会議システムの画像送受信系では、映像の双方向通信を行うものであり、これにより、例えば或る１つの場所にいる会議参加者は、他の場所の会議場の様子を視覚的に把握することができる。
なお、内部の信号切り換えにより、テレビ会議端末装置１−１は、撮像装置２−１から入力される撮像画像信号の画像を、ディスプレイ装置４−１により表示出力させることも可能である。
【００１９】
図２は、１つの場所において備えられるテレビ会議システム（テレビ会議端末装置とその周辺装置）を、テレビ会議端末装置１の内部構成例とともに示している。なお、図１との対応では、テレビ会議端末装置１−１、１−２は、この図２に示す構成を共通に有するものとして考えてよい。また、この図においても、音声送受信系に対応する部位についての図示は省略している。
【００２０】
この場合の撮像装置２においては、撮像のための光学系と、撮像光を利用して非圧縮の動画像としての画像信号を生成する信号処理部とを備えるものとされる。撮像装置２から出力される画像信号（撮像画像信号）は、テレビ会議端末装置１における画像信号処理／表示制御部１１に対して入力される。
また、撮像装置２の光学系に対応しては、ズームレンズの位置を移動させて画角を変更するための機構を有して成る、ズーム機構部２ａを備える。
また、撮像装置２は、測距部２ｂを備える。この測距部２ｂは、例えば撮像装置２から被写体までの距離（被写体間距離）を測定するもので、この測距部２ｂにより測定された被写体間距離の情報は、自動的に被写体に対して合焦するようにしてフォーカスレンズを駆動する、いわゆるオートフォーカス制御に用いることができる。なお、この測距部２ｂにおいて採用する測距方式、測距の手法などについては、これまでに知られている技術が採用されればよい。
また、雲台３は、取り付けられた撮像装置２の撮像視野を左右に変更するための機構であるパン機構部３ａと、上記撮像視野を上下に変更するための機構であるチルト機構部３ｂとを有して成る。
【００２１】
画像信号処理／表示制御部１１は、入力される画像信号について必要に応じて所定の信号処理を実行するとともに、ディスプレイ装置４に対して画像を表示させるための表示制御を実行する。
【００２２】
例えば、画像信号処理／表示制御部１１は、撮像装置２から入力される撮像画像信号について必要に応じて所要の信号処理を施したうえで、エンコーダ１２に転送する。
【００２３】
エンコーダ１２は、入力される画像信号について所定方式による画像圧縮符号化処理を実行して、通信部１４に対して転送する。通信部１４は、制御部１８の制御に応じて、エンコーダ１２から転送されてくる圧縮画像信号について、所定の通信方式に従って、通信回線経由で、他のテレビ会議端末装置に対して送信する。
【００２４】
また、他のテレビ会議端末装置から送信されてきた圧縮画像信号は、通信部１４にて受信されて、デコーダ１３に転送される。
デコーダ１３は、入力されてくる圧縮画像信号について、画像圧縮符号化に対する復調（デコード）処理を実行して所定形式の画像信号を得る。このようにして得た画像信号を画像信号処理／表示制御部１１に転送する。
【００２５】
画像信号処理／表示制御部１１は、例えば上記のようにしてデコーダ１３から転送される画像信号の画像がディスプレイ装置４にて表示されるようにするための表示制御を実行することができる。これにより、他の会議場において撮影された画像が、ディスプレイ装置４にて表示されることになる。
また、画像信号処理／表示制御部１１は、上記撮像画像信号について、ディスプレイ装置４にて所定の態様により表示されるようにして表示制御を実行することも可能とされている。
さらに、画像信号処理／表示制御部１１は、制御部１８の制御に応じて、各種の操作画像をディスプレイ装置４により表示させるための画像生成処理、表示制御処理を実行可能とされている。
なお、画像信号処理／表示制御部１１は、その一部、あるいは全ての機能をＤＳＰ(Digital Signal Processor)により構成することができる。
【００２６】
また、このテレビ会議端末装置１は、撮像装置２の撮像視野を可変制御する機能を有するものとされている。ここでの撮像視野の可変は、パン制御、チルト制御、ズーム制御の組み合わせによるものとする。パン制御、チルト制御は、撮像方向をそれぞれ左右方向と上下方向とで可変する制御で、ズーム制御は、撮像装置の画角を変更する制御である。これに対応して、テレビ会議端末装置１は、ＰＴＺ（ＰＴＺ:Pan(Panning),Tilt(Tilting),Zoom(Zooming)）駆動制御部１５を備える。
【００２７】
ＰＴＺ駆動制御部１５は、図示するようにして、パン／チルト駆動制御部１６とズーム駆動制御部１７とを備える。
パン／チルト駆動制御部１６は、制御部１８からのパン方向における移動量の指示情報に応じて、雲台３が備えるとされるパン機構部３ａにおけるパンモータを駆動するための駆動信号を生成して出力する。同様に、制御部１８からのチルト方向における移動量の指示情報に応じて、雲台３が備えるとされるチルト機構部３ｂにおけるチルトモータを駆動するための駆動信号を生成して出力する。これにより、撮像装置２の撮像視野として、左右方向（パン方向）と上下方向（チルト方向）の撮像方向を変更する変更することが可能とされる。
また、ズーム駆動制御部１７は、制御部１９からの画角変更量の指示情報に応じて、撮像装置２の光学系において備えられるズーム機構部２ａにおけるズームモータを駆動するための駆動信号を生成して出力する。これにより、撮像視野として、画角を変更することが可能になる。
【００２８】
制御部１８は、例えばＣＰＵ、ＲＯＭ、ＲＡＭなどを有して成るマイクロコンピュータなどにより構成されるもので、テレビ会議端末装置１についての全体制御を実行する。
【００２９】
記憶部１９は、例えば不揮発性の記憶デバイスから成るもので、制御部１８が必要な各種のプログラム、データなどを記憶する。
【００３０】
リモートコントローラ５は、テレビ会議端末装置１の動作についての各種の操作をユーザが行うための所要の操作子を備え、これらの操作子に対する操作に応じて、赤外線、あるいは電波などにより操作情報信号を送信する。この操作情報信号は、受信部２０にて受信復調されて制御部１８に入力される。制御部１８は、入力される操作情報信号に応答して所要の制御、処理を実行する。
【００３１】
上記構成によるテレビ会議システムにおいては、これまでの説明から理解されるように、テレビ会議端末装置１−１側の撮像装置２−１により撮像して得られた画像信号を、テレビ会議端末装置１−２側にて受信してディスプレイ装置４−２にて画像(撮像画像)として表示させることができる。そのうえで、本実施の形態においては、このように表示される撮像画像における被写体について、実物のサイズを１倍率（基準）としたうえで、指定した倍率に応じたサイズとなるようにして、自動的に、撮像装置２−１についてのズーム制御（実寸基準倍率対応ズーム制御）が行われるように構成される。以降、この点について説明を行っていく。
【００３２】
なお、以降においては、上記もしているように、図１との対応として、テレビ会議端末装置１−１側が、撮像装置２−１により撮像して得られた画像信号（撮像画像信号）を送信する側であり、テレビ会議端末装置１−２が、受信した撮像画像信号の画像（撮像画像）を表示させる側であるものとして説明を行う。また、以降の説明にあっては、テレビ会議端末装置１−１（画像送信装置）側のシステム構成を「撮像側」といい、テレビ会議端末装置１−２（画像受信装置）側のシステム構成を「表示側」ともいうことにする。
また、確認のために述べておくと、実際においては、上記とは逆に、テレビ会議端末装置１−２側が「撮像側」となり、テレビ会議端末装置１−１側が「表示側」となって動作することも可能である。
【００３３】
先ず、図３を参照して、本実施の形態における実寸基準倍率対応ズーム制御を実現するための原理、技術概念について説明する。
ここで、図３（ａ）には、撮像側において撮像装置２−１により撮像される実物としての被写体である実被写体４１が示されている。ここで、実被写体４１の垂直方向における実寸長（実被写体サイズ）をＹ２とし、撮像装置２−１から実被写体４２までの被写体間距離をＬとし、撮像装置２−１において設定されている画角をφとし、画角φにより被写体間距離Ｌの位置にある実被写体４１を撮像しているときに得られる垂直方向の撮像範囲の実寸（垂直撮像範囲）をＨ２とする。
また、図３（ｂ）には、撮像側にて図３（ａ）に示される実被写体４１を撮像装置２−１により撮像して得られる画像信号を、表示側のディスプレイ装置４−２の表示画面部３０において受信して表示させたときの撮像画像の状態例を示している。
ここで、ディスプレイ装置４−２における表示画面部３０（この場合には有効画像表示領域となる）としての物理的な画面の実寸として、垂直方向における実寸（垂直画面サイズ）をＨ１とし、表示画面部３０において表示されている被写体の部分（画像被写体４２）についての垂直方向における実寸（垂直画像被写体サイズ）をＹ１とする。
さらに、ここでは、実被写体サイズＹ２に対する画像被写体サイズＹ１の倍率（Ｙ１／Ｙ２）を、表示倍率αとして定義する。
具体的には、画像被写体４２を、実被写体４１と同じ実寸、即ち実物大サイズにより表示させるとすれば、表示倍率α＝１（＝１／１）となる。また、垂直方向の実寸について、画像被写体４２を実被写体４１の１／２の長さとなるサイズで表示させるとすれば、表示倍率α＝１／２となる。さらに、垂直方向の実寸について、画像被写体４２を実被写体４１の２倍の長さとなるサイズで表示させるとすれば、表示倍率α＝２となる。
【００３４】
ここで、画像被写体４２について、表示倍率αにより表示させようとする場合を考える。すると、画像被写体サイズＹ１と実被写体サイズＹ２との関係は、
Ｙ１＝α×Ｙ２・・・（式１）
により表される。
また、上記式１が成立する場合における、垂直画面サイズＨ１と垂直撮像範囲Ｈ２との関係は、
Ｈ２＝Ｈ１／α・・・（式２）
により表される。
【００３５】
また、画角φ、被写体間距離Ｌ、及び垂直撮像範囲Ｈ２の関係については、
（Ｈ２／２）／Ｌ＝tan（φ／２）・・・（式３）
のようにして表すことができる。この（式３）により、画角φについては、
φ＝２×arctan（（Ｈ２／２）／Ｌ）・・・（式４）
により求められることが導かれる。
さらに、上記（式４）におけるＨ２について（式２）の右辺を代入することにより、上記（式４）は、
φ＝２×arctan｛（Ｈ１／（２×α））／Ｌ｝・・・（式５）
のようにして表すことができ、さらに（式５）は、
φ＝２×arctan｛（Ｈ１／（２×α×Ｌ）｝・・・（式６）
のようにして変形することができる。
【００３６】
これまでの説明及び（式６）によると、画像被写体４２について、表示倍率αに応じた垂直画像被写体サイズＹ１（＝α×Ｙ２）となるようにて表示するための画角φは、パラメータとして、この表示倍率αと、被写体間距離Ｌ及び垂直画面サイズＨ１が分かっていれば求められるということが分かる。
そして、このことは、撮像側のテレビ会議端末装置１−１にて、表示倍率α、被写体間距離Ｌ及び垂直画面サイズＨ１についての情報が得られさえすれば、表示倍率αに対応する画角φを求めて、この画角φとなるようにして撮像装置２−１のズーム機構部２ａを制御することが可能であり、これにより、実寸基準倍率対応ズーム制御が実現される、ということを意味する。
【００３７】
上記したことに基づき、本実施の形態のテレビ会議端末装置１−１、１−２としては、以降説明するようにして、実寸基準倍率対応ズーム制御を実現するための構成を与えることとした。
【００３８】
先ず、図４のフローチャートは、撮像側テレビ会議端末装置１−１が垂直画面サイズＨ１の情報を取得するために、撮像側テレビ会議端末装置１−１と表示側テレビ会議端末装置１−２とが行う処理手順例を示している。
【００３９】
ここでは、先ず、表示側テレビ会議端末装置１−２において、ステップＳ１０１により、垂直画面サイズＨ１の情報が、入力されたか否かについての判別を行っている。
垂直画面サイズＨ１は、ディスプレイ装置４−２の表示画面部３０についてのものとされるが、テレビ会議端末装置１に対して接続されるディスプレイ装置４−２が固定ではなく、不定の環境であることを前提にすると、表示側テレビ会議端末装置４−２にとって垂直画面サイズＨ１は既知ではないことになる。そこで、先ずは表示側テレビ会議端末装置１−２に対して、現在接続されているディスプレイ装置４−２の表示画面部３０についての垂直画面サイズＨ１を入力してやる必要があることになる。ステップＳ１０１では、この垂直画面サイズＨ１の入力を待機している。
【００４０】
この場合において、表示側テレビ会議端末装置１−２に対する垂直画面サイズＨ１の入力の態様としては、次のようなものを考えることができる。
１つには、例えば表示側のユーザが、リモートコントローラ５−２に対する所定操作を行うことにより、即ちユーザ操作により、テレビ会議端末装置１−２に対して垂直画面サイズＨ１を入力するものである。この場合、ユーザは、取扱説明書などの記載を見たり、あるいは、実際に表示画面部３０の垂直方向の寸法を測るなどして、垂直画面サイズＨ１に対応する寸法を把握した上で、その把握した寸法に対応した数値を入力する操作を行うことになる。
またもう１つには、例えば表示側テレビ会議端末装置１−２とディスプレイ装置４−２とをデータインターフェイスにより接続している環境の下で、このデータインターフェイス経由で、ディスプレイ装置４−２から垂直画面サイズＨ１を示す情報を送信し、表示側テレビ会議端末装置１−２がこの情報を受信取得して垂直画面サイズＨ１としての情報を得たことを以て、垂直画面サイズＨ１の入力が行われたとして扱うものである。
なお、このようなデータインターフェイスとしては、例えば１つには、ＨＤＭＩ(High Definition Multimedia Interface)におけるＤＤＣ(Display Data Channel)といわれる制御信号経路を用いることが考えられる。
【００４１】
ステップＳ１０１にて垂直画面サイズＨ１が入力されたとして肯定の判別結果が得られたのであれば、ステップＳ１０２に進んで、入力した垂直画面サイズＨ１の情報を、例えば制御部１８内のＲＡＭなどの記憶領域に保持しておくようにされる。なお、例えば記憶部１９などの不揮発性の記憶領域に記憶させることとしてもよいが、テレビ会議端末装置１に接続されるディスプレイ装置が不定となる環境を考慮した場合には、例えばテレビ会議端末装置１が起動した都度、垂直画面サイズＨ１の入力を受けることとした仕様のほうが妥当であると考えられ、この場合には不揮発性の記憶領域に記憶させておくことの必要性は特にないことから、ここではＲＡＭに保持させることとしているものである。
【００４２】
次のステップＳ１０３においては、上記ステップＳ１０２にて保持した垂直画面サイズＨ１の情報を、撮像側テレビ会議端末装置１−１に対して送信することが可能な状態であるか否かについて判別することとしている。例えば、表示側テレビ会議端末装置１−２が起動していても、撮像側テレビ会議端末装置１−１が起動していない、あるいは起動していても相互の通信が確立された状態でなければ垂直画面サイズＨ１の送信が可能にはならない。そして、ステップＳ１０３において、相互の通信が確立されているとして垂直画面サイズＨ１の送信が可能であると判別されると、ステップＳ１０４により、撮像側テレビ会議端末装置１−１に対して、例えば所定のコマンドを利用して垂直画面サイズＨ１のデータを送信する。
【００４３】
撮像側テレビ会議端末装置１−１では、ステップＳ２０１により、上記ステップＳ１０４により送信されてくる垂直画面サイズＨ１のデータ（物理画面サイズ情報）が受信されるのを待機しており、受信されたことを判別するとステップＳ２０２に進む。
ステップＳ２０２においては、受信した垂直画面サイズＨ１のデータを、例えば制御部１８内のＲＡＭなどの記憶領域に保持させておくようにする。
【００４４】
なお、実際的なこととして、撮像側テレビ会議端末装置１−１側で新規に垂直画面サイズＨ１を保持した後において、撮像側テレビ会議端末装置１−１が起動している状態の下で垂直画面サイズＨ１が変更される可能性を考えることができる。例えば、表示側において、テレビ会議端末装置１−２に接続するディスプレイ装置４−２としての機器を変更したような場合である。このような場合には、例えば変更されたディスプレイ装置４−２の表示画面部３０の垂直画面サイズＨ１が、新たに表示側テレビ会議端末装置１−２に対して、ユーザ操作若しくはデータインターフェイス経由で入力されたことに応じて、表示側テレビ会議端末装置１−２は、ステップＳ１０１にて肯定の判別結果が得られたものとして、ステップＳ１０２〜Ｓ１０４の手順を実行する（この場合のステップＳ１０２は、垂直画面サイズＨ１を新規に入力されたものにより書き換えて保持し直すことになる）。このような場合には、撮像側テレビ会議端末装置１−１は、ステップＳ２０１にて、垂直画面サイズＨ１を改めて受信したうえで、ステップＳ２０２によっては、これまで保持していた垂直画面サイズＨ１を、今回受信した垂直画面サイズＨ１により書き換えるようにして保持し直す。
【００４５】
図５のフローチャートは、撮像側テレビ会議端末装置１−１が表示倍率αの情報を取得するために、撮像側テレビ会議端末装置１−１と表示側テレビ会議端末装置１−２とが実行する処理手順例を示している。
ここでは先ず、表示側テレビ会議端末装置１−２において、ステップＳ３０１により表示倍率αの入力が行われるのを待機している。例えば表示側のユーザは、ディスプレイ装置４−２にて表示される撮像画像における画像被写体４２の表示画面部３０上でのサイズを、例えば画像被写体４２に対応する実被写体４１の実寸に対する倍率値（即ち表示倍率αとしての値）を入力することが指定できるようにされている。この表示倍率αの入力操作は、例えばリモートコントローラ５−２を利用して行うことができる。
そして、上記したユーザによる表示倍率αの入力操作に応じて、制御部１８が表示倍率αを入力して取得したとされると、ステップＳ３０１にて肯定の判別結果が得られることとなって、ステップＳ３０２に進むようにされる。
【００４６】
ステップＳ３０２においては、上記ステップＳ３０１に対応して入力取得した表示倍率αを、例えば制御部１８内のＲＡＭなどに保持しておくようにされる。
【００４７】
次のステップＳ３０３においては、上記ステップＳ３０２にて保持した表示倍率αの情報を、撮像側テレビ会議端末装置１−１に対して送信することが可能な状態であるか否かについて判別しており、例えば相互の通信が確立されているとして表示倍率αの送信が可能であると判別されると、ステップ３０４により、撮像側テレビ会議端末装置１−１に対して、表示倍率αのデータ（表示倍率指示情報）を送信する。
【００４８】
なお、上記ステップＳ３０２の記載では、この表示倍率αについて、ＲＡＭなどの揮発性の記憶領域に保持させることとしている。しかし、表示倍率αを、例えば記憶部１９などの不揮発性の記憶領域に記憶させておくことも考えられ、表示倍率αを不揮発性の記憶領域に記憶させることによっては次のような利点も得られる。つまり、画像被写体４２の表示倍率については、或る程度、固定的になる場合もあると考えられるからである。そこで、表示倍率αについては不揮発性の記憶領域に記憶させておくこととすれば、次回の会議に応じてテレビ会議端末装置１−２を起動させたときには、さしあたり記憶されている表示倍率αを読み出してステップＳ３０４により送信することができ、例えば起動ごとにユーザが表示倍率αを入力する手間は省かれる。
【００４９】
撮像側テレビ会議端末装置１−１では、ステップＳ４０１により、上記ステップＳ３０４により送信されてくる表示倍率αのデータが受信されるのを待機しており、受信されたことを判別するとステップＳ４０２に進み、受信した表示倍率αのデータを、例えば制御部１８内のＲＡＭなどの記憶領域に保持させる。
また、ここでは、表示側テレビ会議端末装置１−２側のユーザは、いつでも、表示倍率αを変更（入力）する操作を行うことができるものとしている。このようにして、表示倍率αを変更する操作が行われる都度、表示側テレビ会議端末装置１−２では、ステップＳ３０１〜Ｓ３０４までの手順を実行する。これに応じて、撮像側テレビ会議端末装置１−１においては、ステップＳ４０１により新たに送信されてきた表示倍率αのデータを受信して、ステップＳ４０２により、これまで保持していた表示倍率αのデータを、新たに受信した表示倍率αのデータにより書き換えて保持し直す。
なお、表示倍率αは、このようにして通信を利用して表示側テレビ会議端末装置１−２から送信してもらって撮像側テレビ会議端末装置１−１にて取得できるようにすることが自動化を図るうえでは有効になる。しかし、例えば、撮像側のユーザ(会議参加者)が表示側のユーザから表示倍率を伝えてもらったうえで、撮像側のユーザが撮像側テレビ会議端末装置１−１に対して表示倍率の指定入力操作を行うことで、撮像側テレビ会議端末装置１−１が表示倍率αの情報を取得できるようにしてもよい。
【００５０】
図６のフローチャートは、撮像側テレビ会議端末装置１−１が実行する、実寸基準倍率対応ズーム制御のための処理手順例を示している。
先ず、ステップＳ５０１においては、垂直画面サイズＨ１及び表示倍率αの各データを、例えば制御部１８内のＲＡＭ（若しくは記憶部１９）に保持している状態であるか否かを待機している。先の図４及び図５により示したように、撮像側テレビ会議端末装置１−１は、表示側テレビ会議端末装置１−２から送信されてくる垂直画面サイズＨ１のデータ、及び表示倍率αのデータを受信取得して、これより以前に保持されていなければ新規に保持し、既に保持していたのであれば書き換えを行うようにして保持し直すようにしている。ステップＳ５０１においては、このようにして撮像側テレビ会議端末装置１−１にて保持しているべき垂直画面サイズＨ１のデータと表示倍率αのデータについて、そのいずれもが保持されている状態にあるか否かを判別する。
【００５１】
ステップＳ５０１にて否定の判別結果が得られた場合には、垂直画面サイズＨ１のデータと表示倍率αのデータの少なくともいずれか一方が保持されている状態にない、ということになる。これは、本実施の形態の実寸基準倍率対応ズーム制御に必要なパラメータ（制御情報）が揃っていないということを意味し、実寸基準倍率対応ズーム制御を実行することはできない。そこで、この場合には、ステップＳ５０１により肯定の判別結果が得られるのを待機する状態を継続することになる。
【００５２】
これに対してステップＳ５０１にて肯定の判別結果が得られた場合には、実寸基準倍率対応ズーム制御を実行可能とされることに応じて、ステップＳ５０２以降の手順に進む。
ステップＳ５０２においては、現在においてＲＡＭ（若しくは記憶部１９）にて保持しているとされる垂直画面サイズＨ１及び表示倍率αのデータを読み出して取得する。
ステップＳ５０３では、自身に接続されている撮像装置２−１の測距部２ｂにより現在測定されている被写体間距離の値を取り込み、これを被写体間距離Ｌのデータとして取得する。
このようにステップＳ５０２、Ｓ５０３により、画像被写体４２についての表示倍率αが把握されるとともに、この表示倍率αに応じたサイズ（垂直画像被写体サイズＹ１）で画像被写体４２が表示されるようにするために必要なパラメータである、垂直画面サイズＨ１及び被写体間距離Ｌのデータが取得されたことになる。
【００５３】
そこで、ステップＳ５０４においては、画像被写体４２を表示倍率αに応じた垂直画像被写体サイズＹ１により表示するための画角φを求める（算出する）。このためには、例えば（式６）におけるＨ１、α、Ｌの項に対して、それぞれ、上記ステップＳ５０２、Ｓ５０３により取得された垂直画面サイズＨ１、表示倍率α、及び被写体間距離Ｌの値を代入して演算を行えばよい。
そして、次のステップＳ５０５により、上記ステップＳ５０４により算出された画角φが得られるようにしてズーム駆動制御部１７に対する指示を行う。この指示に応じてズーム駆動制御部１７が、撮像装置２−１のズーム機構部２ａを駆動することで、現実に画角φが得られることになる。
この画角φにより撮像して得られる画像の画像信号は、撮像側テレビ会議端末装置１−１から表示側テレビ会議端末装置１−２に対して送信され、表示側テレビ会議端末装置１−２では、この画像信号をディスプレイ装置４−２の表示画面部３０に対して表示出力することになる。この結果、先の図３による説明から理解されるように、ディスプレイ装置４−２の表示画面部３０において表示される画像被写体４２の実寸サイズは、表示倍率αに対応したものとなっている。例えば仮に、実被写体４１の実被写体サイズＹ２が１メートルであり、表示倍率α＝１であれば、画像被写体４２も画像被写体サイズＹ１が１メートルとなる大きさで表示される。つまり、実物大の表示が行われる。また、表示倍率が１．２倍であれば、画像被写体４２の画像被写体サイズＹ１は１．２メートルとなるようにして表示されることになる。
【００５４】
なお、図６においては図示していないが、本実施の形態としては、ステップＳ５０５によるズーム駆動制御とともに、表示画面部３０における画像被写体４２の位置が適切なものとなるようにして、パン・チルト駆動制御を実行できるように構成することが考えられる。これにより、例えば画角を変更したことに応じて表示画面上における画像被写体４２の位置(構図)が不適正になったとしても、適切な位置に自動的に戻すことができる。このような構成は、例えば表示側テレビ会議端末装置１−２の画像信号処理／表示制御部１１において、先ず撮像画像信号についての被写体検知処理を行って、この検知した被写体の画像領域部分の表示画像上での最適位置との誤差を求める。さらに、この誤差に応じたパン方向、チルト方向ごとの移動量(制御量)を求める。そして、この移動量を示す駆動指示信号を、撮像側テレビ会議端末装置１−１に対して送信する。撮像側テレビ会議端末装置１−１の制御部１８及びＰＴＺ駆動制御部１５は、受信した駆動指示信号が示す移動量だけパン方向、チルト方向への移動が行われるようにして、雲台３−１のパン機構部ａ、チルト機構部３ｂの駆動制御を実行する。これにより、画像被写体４２は、適切な構図で表示されることになる。
【００５５】
これまで述べてきたようにして、本実施の形態では、撮像側テレビ会議端末装置１−１において、垂直画面サイズＨ１、表示倍率α、及び被写体間距離Ｌの情報を収集して画角φを求めてズーム駆動制御を行うことで、実寸基準倍率対応ズーム制御を実現している。
このような実寸基準倍率対応ズーム制御では、先ず、画像被写体４２のサイズ調整としてのズーム（画角）制御は、ユーザの手動によるものではなく、自動で実行されるものとなる。
そして、実寸基準倍率対応ズーム制御に必要な制御情報である、垂直画面サイズＨ１、表示倍率α、及び被写体間距離Ｌの情報のうち、垂直画面サイズＨ１及び表示倍率αは、表示側テレビ会議端末装置１−２側から送信させることで撮像側テレビ会議端末装置１−１が取得できるようにされているが、これは、テレビ会議システムにおける端末間通信を利用することで簡単に実現できる。また、被写体間距離Ｌの情報は、撮像側テレビ会議端末装置１−１側にて接続される撮像部２−１が、例えばオートフォーカスなどのために備える測距部２ｂとしての測距機能を利用して得ることができる。テレビ会議システムでは、端末相違ごとに対応して撮像装置を備えることが一般的であるから、本実施の形態としては、この撮像装置が有する測距機能を流用すればよいわけであり、被写体間距離Ｌの情報取得のために、別途、測距のための装置を追加する必要もない。
また、これまでの説明からも理解できるように、例えば表示側テレビ会議端末装置１−２側にてユーザ操作により表示倍率αについての変更設定が行われれば、変更された表示倍率αが撮像側テレビ会議端末装置１−１に対して送信されることで、撮像側テレビ会議端末装置１−１は、変更された表示倍率αに対応してズーム制御を適正に実行できる。テレビ会議においては、表示倍率を途中で変更したくなる状況も少なからずあると考えられるが、本実施の形態であれば、例えば表示側テレビ会議端末装置１−２のユーザが表示倍率αを変更する操作を行いさえすれば、その新たに指示された表示倍率αに応じた画像被写体４２が表示されるようにして自動でズーム制御が実行される。
さらに、何らかの事情で、表示側テレビ会議端末装置１−２に接続するディスプレイ装置を変更したことで、その垂直画面サイズＨ１が代わったとしても、表示側テレビ会議端末装置１−２にて新たな垂直画面サイズＨ１を入力しさえすれば、この垂直画面サイズＨ１のデータが撮像側テレビ会議端末装置１−１に送信されることになり、結果として新たな垂直画面サイズＨ１に応じた実寸基準倍率対応ズーム制御が適正に実行される。
また、会議中においては実被写体４１が動いて被写体間距離Ｌが変化し得るが、本実施の形態では、撮像側テレビ会議端末装置１−１が、図６のステップＳ５０３として示したようにして、定常的に、撮像装置２−１の測距部２ｂの測定結果を取り込んで被写体間距離Ｌを取得したうえで、ステップＳ５０４、Ｓ５０５による画角φの算出及びズーム駆動制御を実行するものとしている。つまり、時間経過に伴って被写体間距離Ｌが変化しても、これに追随して実寸基準倍率対応ズーム制御を適正に実行することができる。
これらのことから、本実施の形態の実寸基準倍率対応ズーム制御は、例えばテレビ会議システムに採用して非常に有用である、といえる。
【００５６】
また、例えば、特許文献１には、「実物空間Ａにあるオブジェクトを空間撮像用カメラ１Ａで撮像し、その画像を通信インターフェース、画像入力部を介して表示サイズ比較部へ送ると共に遠隔空間Ｂの表示部で表示する。表示サイズ比較部は、その画像と空間撮像用カメラ１Ｂで撮像した表示部の表示画像とをオーバーレイ合成し、両画像の差分を検出する。スケール補正信号送信部は、その差分から制御量を算出し通信インターフェースを介して空間撮像用カメラ１Ａの光学的ズームアップ、ダウンを行う」ようにされた構成が示されている。この構成では、実物空間Ａにてオブジェクトの実物を撮像するだけではなく、実物空間Ｂにおいても、同じオブジェクトが表示される表示部の表示画像を撮像する必要性がある。つまり、実寸表示のために撮像側と表示側との双方で、実物と表示画像の違いはあるものの、同じオブジェクトを対象にして撮像を行う必要があり、システム構成が複雑に成らざるを得ない。また、画像をオーバーレイ合成したり、画像の差分から制御量を求めるなど、処理、演算も軽くはない。
これに対して、表示倍率αに応じた画像被写体サイズＹ１となるように画像被写体４２を表示させるために、表示側でも撮像側と同じ対象を撮影するためのカメラを別途備える必要はない。つまり、本実施の形態では、例えば図１に示した通常のテレビ会議システムの構成で足りる。
また、本実施の形態では、先の（式６）に対応した比較的簡単な演算で画角φを求めたうえで、ズーム駆動制御を実行すればよいので、処理、演算も軽いものとなっており、例えばテレビ会議端末装置１−１における制御部１８の処理負担も軽くて済む。
【００５７】
ところで、本実施の形態では、画像被写体４２の表示倍率αは、実被写体４１の実寸サイズを基準としているものであり、従って、表示側テレビ会議端末装置１−２のユーザが表示倍率αを入力して設定する際には、実被写体４１についての実物サイズを意識していることになる。
そこで、本実施の形態としては、画像被写体４２を表示させているときに、その実物サイズとの対応がより把握しやすくなるようにして、例えば図７に示すような表示の態様をとることも可能なように構成することとする。
【００５８】
先ず、図７（ａ）では、表示側のディスプレイ装置４−２の表示画面部３０において、表示倍率α＝１により被写体画像４２が表示されている状態例が示されている。そのうえで、ここでは、垂直、水平の各方向に沿うようにして、表示画面部３０においてグリッドライン３１を重畳表示させている。この場合のグリッドライン３１ａにおけるグリッド幅３１ａは、或る決まった現実の長さが表示中の画像上では、どのような長さとなっているのか、という対応を示すものとなる。例として、グリッドライン３１ａのグリッド幅が対応する現実の長さが１０ｃｍであるとすると、図７（ａ）の場合は、表示倍率α＝１なので、表示画面上において表示されるグリッド幅３１ａの実際の長さＷも、同じ１０ｃｍとなる。
【００５９】
また、例えば図７（ａ）の表示画面部３０の左下において、破線で括って示しているように、本実施の形態では、表示倍率指示画像３２も表示させることが可能とされている。図７（ａ）の場合には設定されている表示倍率α＝１であることに応じて、ここでは、「×１」のようにして、１倍であることを示す文字を表示させている。
なお、グリッドライン３１ａ及び表示倍率指示画像３２は、図示した以外の位置にて表示されるようにしてもよい。
また、グリッドライン３１ａと、表示倍率指示画像３２は、例えば表示側のユーザが行うリモートコントローラ５−２に対する所定操作に応じて、それぞれ、独立して表示・消去させることが可能であることとする。
【００６０】
また、比較として、図７（ｂ）には、表示倍率α＝２が設定された場合の画像被写体４２が表示されている状態を示している。
ここでは、表示倍率α＝２とされていることに応じて、図７（ａ）と同じとされる実被写体４１を撮像して得られたとされる画像被写体４２は、図７（ａ）に対して２倍の画像被写体サイズにより表示されているものである。
また、表示倍率α＝２とされていることに応じて、グリッドライン３１ａのグリッド幅３１ａは、その実際の長さが２×Ｗで表されるものとなる。つまり、表示されているグリッド幅３１ａの実際としては、図７（ａ）の場合の２倍となる。これは、例えばグリッドライン３１ａのグリッド幅が対応する現実の長さが１０ｃｍであると、現在において表示画面部３０にて表示されているグリッド幅３１ａの実際の長さは２０ｃｍとなる。つまり、表示画面部３０において表示されている画像被写体４２の２０ｃｍ分が、現実には、実被写体４１における１０ｃｍ分となることを示している。
【００６１】
また、図７（ｂ）における表示倍率指示画像３２については、「×２」との文字表示により、表示倍率α＝２が設定されていることを示すようにされる。
【００６２】
図８のフローチャートは、表示側テレビ会議端末装置１−２が実行する、グリッドライン３１の表示に関する処理手順例を示している。
先ず、表示側テレビ会議端末装置１−２では、ステップＳ６０１により、グリッドライン３１の表示を開始させるための操作が行われるのを待機しており、この操作に応じた操作信号が受信部２０から制御部１８に渡されたことに応じて、例えばステップＳ６０２以降の手順を実行する。
【００６３】
ステップＳ６０２では、現在において有効な垂直画面サイズＨ１と、表示倍率αの両者のデータを保持（記憶）しているか否かについての判別を行う。ここで否定の判別結果が得られた場合には、現在において、実寸基準倍率対応ズーム制御は行われていないことになるので、グリッドラインを表示することの意味はない。そこで、この場合には、ステップＳ６０９により、例えば垂直画面サイズＨ１及び表示倍率αが未だ入力されていないのでグリッドライン３１を表示させることができない旨をユーザに伝えるための警告表示（或いは音声による警告に代えてもよい、また、音声による警告と併用してもよい）を実行させる。また、これとともに、ステップＳ６０８により、今回のグリッドライン３１の表示開始を指示する操作をキャンセルして無効化する。
【００６４】
これに対してステップＳ６０２において肯定の判別結果が得られた場合には、ステップＳ６０３により、現在保持している垂直画面サイズＨ１及び表示倍率αを読み出し、ステップＳ６０４に進む。
【００６５】
ステップＳ６０４においては、読み出した垂直画面サイズＨ１と表示倍率αを利用して、例えば画像信号処理／表示制御部１１にてグリッドライン３１を描画させ、表示画面部３０に表示出力させている撮像画像上に重畳表示させるための処理を実行する。
まず例えば、「グリッド幅３１ａは１０ｃｍを示す」というように、グリッド幅３１ａが対応すべき寸法が決まっていさえすれば、垂直画面サイズＨ１に基づいて、表示用のフレーム画像におけるグリッド幅３１ａが対応する垂直方向及び水平方向における連続画素数を求めることができる。そこで、グリッドラインの描画に際しては、上記のようにして求めた連続画素数に対応して決まるフレーム画像における位置に対して、グリッド幅３１ａに対応する区切り線を描画すればよい。
【００６６】
上記ステップＳ６０４によりグリッドライン３１を表示させた後は、ステップＳ６０５により、現在表示させているグリッドライン３１についての消去操作が行われるのを待機している。そのうえで、ここでは、ステップＳ６０５において否定の判別結果が得られた場合には、ステップＳ６０７の手順により、これまでにおいて保持している垂直画面サイズＨ１又は表示倍率αについての書き換えが行われたか否かを判別することとしている。
【００６７】
垂直画面サイズＨ１又は表示倍率αについての書き換えが行われたとしてステップＳ６０７にて否定の判別結果が得られた場合には、ステップＳ６０３の手順に戻る。これにより、書き換えにより更新された垂直画面サイズＨ１又は表示倍率αに応じたグリッド幅３１ａを有する新たなグリッドライン３１が表示されることになる。ステップＳ６０７にて否定の判別結果が得られたのであれば、ステップＳ６０５に戻る。
【００６８】
そして、ステップＳ６０５においてグリッドライン３１を消去する操作が行われたとして肯定の判別結果が得られたのであれば、ステップＳ６０６により、これまで表示させていたグリッドライン３１を消去するための処理を実行してステップＳ１０１に戻る。
【００６９】
また、表示倍率指示画像３２の表示に関する処理手順としては、上記図８に準ずることになる。
ただし、表示倍率指示画像３２の表示に関しては、垂直画面サイズＨ１を利用しない描画処理が可能であるから、ステップＳ６０３、Ｓ６０４においては、そのときに保持されている垂直画面サイズＨ１、表示倍率αのうち、表示倍率αのみを読み出し、この読み出した表示倍率αが反映されるようにして表示倍率指示画像３２についての描画処理を行って表示させるようにしてよい。
また、ステップＳ６０７としても、表示倍率αの書き換えが行われたか否かのみを判別すればよく、垂直画面サイズＨ１の書き換えについての判別を行わない処理とすることができる。
【００７０】
また、グリッドラインの表示に関する変形例として、図９（ａ）（ｂ）に示すようにして、指標画像３３を表示可能に構成することも考えられる。
なお、ここでは指標画像３３を表示画面部３０の右下に表示させているが、その表示位置については特に限定されない。また、この図では、指標画像３３とともに、図７においても示した表示倍率指示画像３２も同時に表示させた態様を示している。この指標画像３３に関しても、その表示・消去の操作は、表示倍率指示画像３２とは独立して行えるものとする。
【００７１】
この場合の指標画像３３は、表示画面部３０上において、その画面サイズ（例えばこの場合であれば、垂直画面サイズＨ１）に対して一定比率となる固定長のバーを表示させると共に、そのバーの長さが対応する現実の被写体の長さ（対応サイズ）を文字数字により表示させたものとなる。
【００７２】
図９（ａ）は、表示倍率α＝１の場合の表示態様例を示しているものとされるが、ここでは、指標画像３３において示される対応サイズは「５０ｃｍ」であるとしている。この場合、例えば表示画面部３０において表示されている指標画像３３のバーの長さを測れば、現実に５０ｃｍとなっているものである。
【００７３】
図９（ｂ）には比較として、図９（ａ）と同じ実被写体４１を撮像したうえで、表示倍率α＝１／２を設定した場合の表示態様例を示す。
この場合には、表示倍率α＝１／２が設定されていることに応じて、画像被写体４２の垂直画像被写体サイズＹ１は、図９（ａ）に対して１／２となっている。
また、これとともに、指標画像３３において表示される対応サイズは、１ｍとされ、図９（ａ）の２倍となっている。ちなみに、指標画像３３において表示されるバーの長さ自体は、図９（ａ）、（ｂ）とで同じである。
【００７４】
この図９に示される指標画像３３の表示に関する処理手順としても、図８に準ずることになる。ステップＳ６０４としては、例えば垂直画面サイズＨ１に応じて、フレーム画像内にて配置する指標画像３３のバーの長さを決定するとともに、表示されるバーの実際の長さを求めて、さらにこの求めた長さと表示倍率αとに基づいて対応サイズを求める。そして、このようにして求めた対応サイズが反映されるように文字数字の描画を実行する。
【００７５】
ここで、図７及び図９に示したグリッドライン３１、指標画像３３は、表示画面部３０において画像として表示される画像被写体４２についての、実物（実被写体４１）のサイズとの対応を視覚的に把握するための目盛りとなる画像であるが、このようなグリッドライン３１、指標画像３３の表示態様の詳細については適宜考えることができる。また、グリッドライン３１、指標画像３３以外で、このような画像被写体４２と実物（実被写体４１）サイズとの対応をとることのできる目盛り画像の態様もいくつか考えることができる。例えば、所定の現実の長さに対応する半径を有する円周の画像を、撮像画像に重畳表示させることも考えられる。
【００７６】
また、これまでの説明においては、ディスプレイ装置の表示画面部全体に撮像画像を表示させる例を挙げてきたが、例えば実際においては、例えば表示画面部全体の画像表示領域を所定のパターンで分割して得られる分割画像表示領域に撮像画像を表示させることも行われる。このような場合においても、表示側テレビ会議端末装置１−２にて、撮像画像を縮小する処理を行わなければ、その分割画像表示領域内にて、表示倍率αに応じた適正な画像被写体４２のサイズが得られた状態での表示が行われるものである。
【００７７】
また、実際においては、３以上のテレビ会議端末装置１が相互に通信を行って、撮像により得られる画像信号の送受信を行うと共に、各テレビ会議端末装置１により受信画像の表示出力を実行するようにしてテレビ会議システムが構築される場合がしばしばある。本実施の形態としては、これまで説明を簡単なものとするために、２つのテレビ会議端末装置１によりテレビ会議システムを構築した場合を前提としているが、本実施の形態に基づいた構成は、上記のような３以上のテレビ会議端末装置によりテレビ会議システムを構築する場合においても何ら問題なく適用できる。
また、例えば図１、図２に示したテレビ会議システムの構成であるとか、テレビ会議端末装置１の内部構成などについても適宜変更されてよい。
【００７８】
また、例えば図４〜図６、図８の各フローチャートに示す処理は、撮像側テレビ会議端末装置１−１、若しくは表示側テレビ会議端末装置１−２の制御部１８を形成するものとされるＣＰＵが、ＲＯＭ或いは不揮発性メモリなどに記憶されるプログラムを実行することで実現されるものとしてみることができる。
また、このプログラムは、上記のようにして、例えばＲＯＭなどに対して製造時などに書き込んで記憶させるほか、リムーバブルの記憶媒体に記憶させておいたうえで、この記憶媒体からインストール(アップデートも含む)させるようにして、例えば記憶部１９などの不揮発性の記憶領域に記憶させることが考えられる。また、データインターフェイス経由により、他のホストとなる機器からの制御によってプログラムのインストールを行えるようにすることも考えられる。さらに、ネットワーク上のサーバなどにおける記憶装置に記憶させておいたうえで、例えばネットワーク経由などでサーバからダウンロードして取得できるように構成することも考えられる。
【図面の簡単な説明】
【００７９】
【図１】本発明の実施の形態に対応するテレビ会議システムの構成例を示す図である。
【図２】実施の形態のテレビ会議端末装置の内部構成例を、これと接続される撮像装置、ディスプレイ装置等と共に示す図である。
【図３】実施の形態における実寸基準倍率対応ズーム制御を実現するための原理、技術概念を説明するための図である。
【図４】実施の形態において、撮像側テレビ会議端末装置が垂直画面サイズの情報を取得するために、撮像側テレビ会議端末装置と表示側テレビ会議端末装置とが行う処理手順例を示すフローチャートである。
【図５】実施の形態において、撮像側テレビ会議端末装置が表示倍率の情報を取得するために、撮像側テレビ会議端末装置と表示側テレビ会議端末装置とが実行する処理手順例を示すフローチャートである。
【図６】撮像側テレビ会議端末装置が実行する、実寸基準倍率対応ズーム制御のための処理手順例を示すフローチャートである。
【図７】グリッドライン及び表示倍率指示画像の表示態様例を示す図である。
【図８】グリッドライン表示に関する処理手順例を示すフローチャートである。
【図９】指標画像及び表示倍率指示画像の表示態様例を示す図である。
【符号の説明】
【００８０】
１（１−１、１−２） テレビ会議端末装置、２（２−１、２−２） 撮像装置、２ａ ズーム機構部、２ｂ 測距部、３ａ パン機構部、３ｂ チルト機構部、４（４−１、４−２） ディスプレイ装置、５（５−１、５−２） リモートコントローラ、１１ 画像信号処理／表示制御部、１２ エンコーダ、１３ デコーダ、１４ 通信部、１５ ＰＴＺ駆動制御部、１６ パン／チルト駆動制御部、１７ ズーム駆動制御部、１８ 制御部、１９ 記憶部、２０ 受信部、３０ 表示画面部、３１ グリッドライン、３１ａ グリッド幅、３２ 表示倍率指示画像、３３ 指標画像、４１ 実被写体、４２ 画像被写体
【特許請求の範囲】
【請求項１】
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行可能な画像受信装置に対して、撮像部による撮像に基づいて得られる画像信号を送信する送信手段と、
上記画像受信装置から送信されてくる、上記表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、
上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、
上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を得る被写体間距離情報取得手段と、
上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手段と、
上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手段と、
を備えることを特徴とする画像送信装置。
【請求項２】
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行可能な画像受信装置に対して、撮像部による撮像に基づいて得られる画像信号を送信する送信手順と、
上記画像受信装置から送信されてくる、上記表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手順と、
上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手順と、
上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を得る被写体間距離情報取得手順と、
上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手順と、
上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手順と、
を実行することを特徴とする画角制御方法。
【請求項３】
画像送信装置から送信される撮像部による撮像に基づいて得られる画像信号を受信する画像信号受信手段と、
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、
上記画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手段が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、
上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手段と、
上記画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手段が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示画面部にて表示させる画像における画像被写体についての実サイズに対する倍率を指示するための入力操作に応じて得られる上記表示倍率指示情報を、上記画像送信装置に対して送信する表示倍率指示情報送信手段と、
を備えることを特徴とする画像受信装置。
【請求項４】
上記画像処理手段は、
上記物理画面サイズ情報及び上記表示倍率指示情報に基づいて、受信した画像信号の画像上に対して、画像被写体についての実物のサイズとの対応を視覚的に把握することに利用できる、目盛りとしての機能を有する画像である目盛り画像を重畳表示させる、
ことを特徴とする請求項３に記載の画像受信装置。
【請求項５】
上記画像処理手段は、
上記表示倍率指示情報に基づいて、受信した画像信号の画像上に対して、現在の表示倍率を示す表示倍率指示画像を重畳表示させる、
ことを特徴とする請求項３に記載の画像受信装置。
【請求項６】
画像送信装置から送信される撮像部による撮像に基づいて得られる画像信号を受信する画像信号受信手順と、
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手順と、
上記画像処理手順により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手順が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手順と、
上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手順と、
上記画像処理手順により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手順が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示画面部にて表示させる画像における画像被写体についての実サイズに対する倍率を指示するための入力操作に応じて得られる上記表示倍率指示情報を、上記画像送信装置に対して送信する表示倍率指示情報送信手順と、
を実行することを特徴とする画角制御方法。
【請求項７】
画像送信装置と、画像受信装置とから成り、
上記画像送信装置において、撮像部による撮像に基づいて得られる画像信号を送信する画像信号送信手段と、
上記画像受信装置において、上記画像送信装置から送信されてきた画像信号を受信する画像信号受信手段と、
上記画像受信装置において、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、
上記画像受信装置において、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、
上記画像受信装置において、上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手段と、
上記画像送信装置において、送信されてきた上記物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、
上記画像送信装置において、上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、
上記画像送信装置において、上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を取得する被写体間距離情報取得手段と、
上記画像送信装置において、上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手段と、
上記画像送信装置において、上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手段と、
を備えることを特徴とする画像表示システム。
【請求項８】
画像送信装置と、画像受信装置とから成る画像表示システムにおける画像表示方法であり、
上記画像送信装置において、撮像部による撮像に基づいて得られる画像信号を送信する画像信号送信手順と、
上記画像受信装置において、上記画像送信装置から送信されてきた画像信号を受信する画像信号受信手順と、
上記画像受信装置において、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手順と、
上記画像受信装置において、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手順と、
上記画像受信装置において、上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手順と、
上記画像送信装置において、送信されてきた上記物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手順と、
上記画像送信装置において、上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手順と、
上記画像送信装置において、上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を取得する被写体間距離情報取得手順と、
上記画像送信装置において、上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手順と、
上記画像送信装置において、上記画角可変手順により上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手順と、
を実行することを特徴とする画像表示方法。
【請求項１】
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行可能な画像受信装置に対して、撮像部による撮像に基づいて得られる画像信号を送信する送信手段と、
上記画像受信装置から送信されてくる、上記表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、
上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、
上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を得る被写体間距離情報取得手段と、
上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手段と、
上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手段と、
を備えることを特徴とする画像送信装置。
【請求項２】
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行可能な画像受信装置に対して、撮像部による撮像に基づいて得られる画像信号を送信する送信手順と、
上記画像受信装置から送信されてくる、上記表示装置の表示画面部の物理的なサイズを示す情報である物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手順と、
上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手順と、
上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を得る被写体間距離情報取得手順と、
上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手順と、
上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手順と、
を実行することを特徴とする画角制御方法。
【請求項３】
画像送信装置から送信される撮像部による撮像に基づいて得られる画像信号を受信する画像信号受信手段と、
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、
上記画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手段が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、
上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手段と、
上記画像処理手段により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手段が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示画面部にて表示させる画像における画像被写体についての実サイズに対する倍率を指示するための入力操作に応じて得られる上記表示倍率指示情報を、上記画像送信装置に対して送信する表示倍率指示情報送信手段と、
を備えることを特徴とする画像受信装置。
【請求項４】
上記画像処理手段は、
上記物理画面サイズ情報及び上記表示倍率指示情報に基づいて、受信した画像信号の画像上に対して、画像被写体についての実物のサイズとの対応を視覚的に把握することに利用できる、目盛りとしての機能を有する画像である目盛り画像を重畳表示させる、
ことを特徴とする請求項３に記載の画像受信装置。
【請求項５】
上記画像処理手段は、
上記表示倍率指示情報に基づいて、受信した画像信号の画像上に対して、現在の表示倍率を示す表示倍率指示画像を重畳表示させる、
ことを特徴とする請求項３に記載の画像受信装置。
【請求項６】
画像送信装置から送信される撮像部による撮像に基づいて得られる画像信号を受信する画像信号受信手順と、
受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手順と、
上記画像処理手順により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手順が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手順と、
上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手順と、
上記画像処理手順により表示出力される画像被写体について、表示倍率指示情報が指示する倍率に応じたサイズとなるように、上記画像送信手順が上記撮像部の画角を制御するために利用する制御情報の１つであって、上記表示画面部にて表示させる画像における画像被写体についての実サイズに対する倍率を指示するための入力操作に応じて得られる上記表示倍率指示情報を、上記画像送信装置に対して送信する表示倍率指示情報送信手順と、
を実行することを特徴とする画角制御方法。
【請求項７】
画像送信装置と、画像受信装置とから成り、
上記画像送信装置において、撮像部による撮像に基づいて得られる画像信号を送信する画像信号送信手段と、
上記画像受信装置において、上記画像送信装置から送信されてきた画像信号を受信する画像信号受信手段と、
上記画像受信装置において、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手段と、
上記画像受信装置において、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手段と、
上記画像受信装置において、上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手段と、
上記画像送信装置において、送信されてきた上記物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手段と、
上記画像送信装置において、上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手段と、
上記画像送信装置において、上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を取得する被写体間距離情報取得手段と、
上記画像送信装置において、上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手段と、
上記画像送信装置において、上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手段と、
を備えることを特徴とする画像表示システム。
【請求項８】
画像送信装置と、画像受信装置とから成る画像表示システムにおける画像表示方法であり、
上記画像送信装置において、撮像部による撮像に基づいて得られる画像信号を送信する画像信号送信手順と、
上記画像受信装置において、上記画像送信装置から送信されてきた画像信号を受信する画像信号受信手順と、
上記画像受信装置において、受信した画像信号を画像として表示装置にて表示出力させるための画像処理を実行する画像処理手順と、
上記画像受信装置において、上記表示装置の表示画面部の物理的なサイズを示す情報である、物理画面サイズ情報を取得する物理画面サイズ情報取得手順と、
上記画像受信装置において、上記物理画面サイズ情報を上記画像送信装置に対して送信する物理画面サイズ情報送信手順と、
上記画像送信装置において、送信されてきた上記物理画面サイズ情報を受信して保持する物理画面サイズ情報保持手順と、
上記画像送信装置において、上記表示画面部にて表示させる画像における被写体についての実サイズに対する倍率を指示する情報である表示倍率指示情報を外部から取得して保持する表示倍率指示情報取得手順と、
上記画像送信装置において、上記撮像部が撮像する被写体までの距離を示す被写体間距離情報を取得する被写体間距離情報取得手順と、
上記画像送信装置において、上記物理画面サイズ情報と上記被写体間距離情報とに基づいて、上記表示倍率指示情報が指示する倍率に応じた実サイズにより上記表示画面部にて被写体が表示されるための上記画角である必要画角を求めて取得する必要画角取得手順と、
上記画像送信装置において、上記画角可変手順により上記必要画角が得られるように、画角が可変の上記撮像部により撮像される上記画角を変更する制御を実行する画角変更制御手順と、
を実行することを特徴とする画像表示方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２００９−２００６９７（Ｐ２００９−２００６９７Ａ）
【公開日】平成２１年９月３日（２００９．９．３）
【国際特許分類】
【出願番号】特願２００８−３８７０１（Ｐ２００８−３８７０１）
【出願日】平成２０年２月２０日（２００８．２．２０）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成２１年９月３日（２００９．９．３）
【国際特許分類】
【出願日】平成２０年２月２０日（２００８．２．２０）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]