情報処理装置及びその制御方法
【課題】 一台のカメラで、複数の画像をディスプレイ一画面に並べて表示することはができない。
【解決手段】 第１の撮像対象物の映像を表示させている最中に撮像して取得した第１の撮像対象物の映像を記憶装置に記憶させる（Ｓ３０２）。撮影方向の制御により前記第１の撮像対象物よりも後に撮像された第１の撮像対象物とは異なる第２の撮像対象物の映像を表示装置に表示させる場合（Ｓ３０３）に、記憶装置に記憶された第１の撮像対象物の映像を、第２の撮像対象物の映像と併せて表示させるよう表示装置を制御する（Ｓ３０４）。
【解決手段】 第１の撮像対象物の映像を表示させている最中に撮像して取得した第１の撮像対象物の映像を記憶装置に記憶させる（Ｓ３０２）。撮影方向の制御により前記第１の撮像対象物よりも後に撮像された第１の撮像対象物とは異なる第２の撮像対象物の映像を表示装置に表示させる場合（Ｓ３０３）に、記憶装置に記憶された第１の撮像対象物の映像を、第２の撮像対象物の映像と併せて表示させるよう表示装置を制御する（Ｓ３０４）。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の撮像対象物の映像をディスプレイ画面に並べて表示する情報処理装置及びその制御方法に関する。
【背景技術】
【０００２】
テレビ会議システムでは、第１の撮像対象物（会議の参加者）をテレビジョンに表示させるだけでなく、第２の撮像対象物（例えば、ホワイトボードやプロトタイプ）をテレビジョンに表示しながら説明することによって、テレビ会議を円滑に行う場合が多い。そして、このような２つの撮像対象物を一画面に並べて表示をして議論することにより、更にテレビ会議が円滑に進む。
【０００３】
特許文献１には、複数の撮像対象物を一画面にマルチ表示させる場合に関する方法が開示されている。この方法では、複数のネットワークカメラを用いて複数の撮像対象物を撮像し、撮像して得られた映像を一画面に並べて表示する。
【特許文献１】特開2006-340319号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、上記した特許文献１に記載の方法では、複数のネットワークカメラを用いて複数の撮像対象物を撮像しなければならない。つまり、一台のネットワークカメラを用いてテレビ会議を行いたい場合は、複数の撮像対象物を同時に一画面に表示することが不可能である。
【０００５】
したがって、本発明は、一台のネットワークカメラで複数の撮像対象物を同時に一画面に表示できる情報処理装置及びその制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一側面は、撮像装置の撮影方向を制御することで複数の撮像対象物を撮像し、該撮像により得た映像を表示装置に表示させる情報処理装置に係り、第１の撮像対象物の映像を前記表示装置に表示させている最中に撮像して得た前記第１の撮像対象物の映像を記憶装置に記憶させる記憶制御手段と、前記撮影方向の制御により前記第１の撮像対象物よりも後に撮像された前記第１の撮像対象物とは異なる第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する表示制御手段とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、一台のネットワークカメラで複数の撮像対象物を一画面に並べて表示できる。
【発明を実施するための最良の形態】
【０００８】
以下、図面を参照して本発明の好適な実施形態について詳細に説明する。なお、本発明は以下の実施形態に限定されるものではなく、本発明の実施に有利な具体例を示すにすぎない。また、以下の実施形態の中で説明されている特徴の組み合わせの全てが本発明の課題解決手段として必須のものであるとは限らない。
【０００９】
（実施形態１）
図１は、本実施形態に係るテレビ会議システムの構成を示すブロック図である。
【００１０】
１００は、撮像装置１０５の撮影方向を制御することで複数の撮像対象物の映像を撮像し、該映像を表示装置１０６に表示させる情報処理装置である。情報処理装置１００において、１０１は数値演算・制御等の処理を行う中央処理装置（ＣＰＵ）であり、本発明の手順に従って演算を行う。１０２はディスク装置や不揮発メモリ等の外部記憶装置である。１０３はＲＡＭ等の一時情報を保持するメモリであり、本発明における処理を行う為の一時的なデータが保持される。１０４は制御メモリ（ＲＯＭ）である。
【００１１】
１０５は撮像対象物を撮像する撮像装置であり、パン、チルト、ズーム機能を備えたカメラ等である。なお、本明細書において、「映像」は静止画像、動画像を含みうるものとする。１０６は映像を表示する表示装置であり、モニタあるいはディスプレイ等ともいう。１０７は撮像装置１０５の遠隔操作ができる遠隔操作装置（以下、単に「リモコン」ともいう。）である。
【００１２】
図２は、本実施形態における情報処理装置の機能構成を示すブロック図である。
【００１３】
図２において、撮像部２０１は撮像装置１０５を用いて撮像対象物を撮像する。表示制御部２０２は、撮像部２０１で撮像された映像の表示装置１０６への表示を制御する。記憶制御部２０２は、撮像部２０１で生成された映像データの外部記憶装置１０２への記憶を制御する。遠隔操作部２０４は、遠隔操作装置１０７からの操作情報に基づき、撮像装置１０５のパン、チルト、ズーム等の遠隔操作を行う。
【００１４】
図３は、本実施形態における情報処理装置１００の処理を示すフローチャートである。
【００１５】
ステップＳ３０１では、撮像部２０１が第１の撮像対象物を撮像し、第１の撮像対象物の映像を生成する。また、表示制御部２０２は、撮像部２０１が生成した第１の対象物の映像を表示装置１０６に表示する。
【００１６】
ステップＳ３０２では、撮像部２０１が、遠隔操作部２０４から、第１の撮像対象物とは異なる第２の撮像対象物に撮像装置１０５を向ける旨の信号を受信する。また、撮像部２０１が、第１の撮像対象物の映像（例えば、静止画像）を生成する。生成された静止画像は、第１の撮像対象物の映像の表示の最中に、外部記憶装置１０２に保持される。
【００１７】
ステップＳ３０３では、第２の撮像対象物に撮像装置１０５を向ける。
【００１８】
ステップＳ３０４では、撮像部２０１が、第２の撮像対象物を撮像し、第２の撮像対象物の映像を生成する。また、表示制御部２０２は、撮像部２０１が生成した第２の対象物の映像および外部記憶装置１０２に保持されている第１の撮像対象物の静止画像を併せて表示装置１０６に表示する。
【００１９】
以上の図３に示した制御処理の流れを、具体例を用いて示す。ここでは、２拠点で音声や映像を通信するテレビ会議システムを想定している。撮像対象物はホワイトボードと会議の参加者である。第１の撮像対象物をホワイトボード、第２の撮像対象物を会議の参加者とする。ネットワークカメラ（撮像装置１０５）でホワイトボードと会議の参加者を撮像する。これらの映像を２拠点のディスプレイで表示する。なお、ネットワークカメラは、パン、チルト、ズームの機能を備えており、リモコンにより遠隔操作ができる。
【００２０】
図７および図８は、実施形態１におけるテレビ会議システムの動作例を示す図である。
【００２１】
ステップＳ３０１では、ネットワークカメラ７０１がホワイトボード７０２を撮像し、ホワイトボード７０２の映像８０２を生成する。また、ディスプレイ８０１は、ネットワークカメラ７０１が生成したホワイトボード７０２の映像８０２を表示する。ここで、図７のテレビ会議室にあるディスプレイ７０３と図８のディスプレイ８０１は同じディスプレイである（図８（ａ））。
【００２２】
ステップＳ３０２では、会議の参加者７０４を撮像するために操作された遠隔操作装置１０７からのリモコン信号を受信する。また、ネットワークカメラ７０１が、リモコン操作開始の旨の信号を受信し、ホワイトボード７０２の静止画像８０４を生成する。
【００２３】
ステップＳ３０３では、リモコンの操作により、ネットワークカメラ７０１を会議の参加者７０４に向ける。
【００２４】
ステップＳ３０４では、ネットワークカメラ７０１が参加者７０４を撮像し、会議の参加者７０４の映像８０３を生成する。このとき、ディスプレイ８０１には、ネットワークカメラ７０１が生成した会議の参加者７０４の映像８０３と、静止画像８０４が併せて表示される（図８（ｂ））。
【００２５】
ここで更に、ホワイトボード７０２を撮像するためにリモコン操作を開始すると、会議の参加者７０４の静止画像８０６を生成する。
【００２６】
次に、リモコン操作によりネットワークカメラ７０１がホワイトボード７０２に向き、ホワイトボード７０２を撮像する。このとき、ディスプレイ８０１には、撮像したホワイトボード７０２の映像８０５と会議の参加者７０４の静止画像８０６が併せて表示される。（図８（ｃ））
【００２７】
ここで、ステップＳ３０１〜Ｓ３０４において、リモコン操作により初期のホワイトボードの映像のみを表示した状態に戻すように指示すると、ネットワークカメラがホワイトボードを撮像し、ディスプレイにはホワイトボードの映像のみが表示される。
【００２８】
本実施形態では、ステップＳ３０３において静止画像を生成し表示したが、ある一定の間に撮像した動画像を生成し表示してもよい。
【００２９】
また、本実施形態では、リモコン操作によりネットワークカメラを制御していたが、キーボードやマウス等のその他のデバイスを用いて制御してもよい。
【００３０】
また、ステップＳ３０３で生成する静止画像はステップＳ３０２でリモコン信号を受信した時に生成していたが、ステップＳ３０１で映像を生成している時に静止画像を生成しても良いことはいうまでもない。
【００３１】
また、第１の撮像対象物と第２の撮像対象物にディスプレイに表示する優先順位を付与し、優先順位が高いほうを表示してもよい。この場合、例えば外部記憶装置１０２は優先順位記憶手段として、優先順位を記憶しておく。ここで、各撮影対象物の映像は、各撮影対象物の優先順位と対応付けて記憶される。
【００３２】
また、上記実施形態では、ステップＳ３０４において、会議の参加者とホワイトボードの２つの撮像対象物があった場合、会議の参加者とホワイトボードの２つの静止画像を生成し表示した。しかし、このかわりに、２つの撮像対象物に優先順位を付与し、２つのうち優先順位の高い方の撮像対象物のみ静止画像を生成し表示してもよい。あるいは、２つの撮像対象物に優先順位を付与するのではなく、２つの撮像対象物の内、一つにフラグを立て、フラグを立てた撮像対象物のみ静止画像を生成し表示してもよい。
【００３３】
また、上記実施形態では、２拠点で画像や音声を通信しあうテレビ会議システムを想定した。ただし、一方の拠点のテレビ会議室にあるディスプレイ７０３で表示する画像を、もう一方の拠点のディスプレイで表示しても良いことは言うまでもない。
【００３４】
また、２拠点で通信しあうテレビ会議システムだけでなく、３拠点以上で通信しあうテレビ会議システムも考えられる。この場合、ディスプレイ７０３で表示する画像は、複数の拠点にあるディスプレイで表示しても良いことは言うまでもない。
【００３５】
また、本実施形態ではテレビ会議システムを想定したが、本発明はこれに限らず、監視用モニタリングシステム等のネットワークカメラを用いたシステムに適用できることは言うまでもない。
【００３６】
（実施形態２）
上述の実施形態１では、ステップＳ３０２で第２の撮像対象物にパン、チルト、ズームをするタイミングは、リモコン等の遠隔操作部により決定されていたが、本実施形態ではこれに限定されるものではない。
【００３７】
具体的には、音声方向検知技術を用いれば、第２の撮像対象物から音声を検知し、撮像部からの第２の撮像対象物の音源方向を特定することができる。次に、撮像装置は、特定された音源方向にパン、チルト、ズームし第２の撮像対象物を撮像する。
【００３８】
ここで、音声とは、撮像対象物方向から発生する音声であり、例えば会議の参加者の会話やホワイトボードを書く時に出る音である。撮像装置が適切にパン、チルト、ズームをすることができるように、雑音や短い時間の音声に反応しないように制御することが望ましい。
【００３９】
図１１は、本実施形態に係るテレビ会議システムの構成を示すブロック図である。情報処理装置１１００における１１０１乃至１１０６の機能はそれぞれ、図１の１０１乃至１０６の機能と同じである。１１０７は、音声の発生方向を検知する音声方向検知装置である。
【００４０】
図１２は、本実施形態における情報処理装置の機能構成を示すブロック図である。１２０１乃至１２０３の機能はそれぞれ、図２の２０１乃至２０３の機能と同じである。音声方向検知部１２０４は、音声方向検知装置１１０７を用いて、撮像対象物の方向から音声を検知し、撮像対象物の方向を特定する。
【００４１】
図４は、本実施形態における情報処理装置１１００の処理を示すフローチャートである。
【００４２】
ステップＳ１３０１はステップＳ３０１と同じである。すなわち、ステップＳ１３０１では、撮像部１２０１が第１の撮像対象物を撮像し、第１の撮像対象物の映像を生成する。また、表示制御部１２０２は、撮像部１２０１が生成した第１の対象物の映像を表示装置１１０６に表示する。
【００４３】
ステップＳ１３０２では、音声方向検知部１２０４が第２の撮像対象物方向から音声を検知し第２の撮像対象物の方向を特定する。また、第１の撮像対象物の静止画像を生成する。
【００４４】
ステップＳ１３０３では、方向が特定された第２の撮像対象物に撮像装置１１０５を向ける。
【００４５】
ステップＳ１３０４は、ステップＳ３０４と同じである。すなわち、ステップＳ１３０４では、撮像部１２０１が、第２の撮像対象物を撮像し、第２の撮像対象物の映像を生成する。また、表示制御部１２０２は、撮像部１２０１が生成した第２の対象物の映像および外部記憶装置１１０２に保持されている第１の撮像対象物の静止画像を併せて表示装置１１０６に表示する。
【００４６】
ここで本実施形態では、ステップＳ１３０３で生成する静止画像はステップＳ１３０２で音声を検知した時に生成したが、ステップＳ１３０１で映像を生成している時に静止画像を生成してもよい。
【００４７】
（実施形態３）
上述の実施形態１、２では、第１と第２の２個の撮像対象物を撮像する場合を想定していた。以下の実施形態３では、Ｋ（Ｋ≧３）個の撮像対象物を撮像する場合を説明する。
【００４８】
図５は、実施形態３における情報処理装置の機能構成を示すブロック図である。
【００４９】
図５において、５０１乃至５０４の機能はそれぞれ、図１２の１２０１乃至１２０４の機能と同じである。優先順位保持部５０５は、Ｋ個の撮像対象物に付与される優先順位の優先順位情報が外部記憶装置１１０２に保持される。
【００５０】
図６は、本実施形態における情報処理装置の処理を示すフローチャートである。
【００５１】
ステップＳ６０１では、Ｋ個の撮像対象物に対して優先順位が決定される。Ｋ個の撮像対象物と優先順位の優先順位情報が優先順位保持部５０５に保持される。
【００５２】
ステップＳ６０２では、撮像部５０１が撮像対象物Ｍを撮像し、撮像対象物Ｍの映像を生成する（撮像対象物Ｍは、Ｋ個の撮像対象物のうち、どれか一つである。）。また、表示制御部５０２が、撮像部５０１が生成した撮像対象物Ｍの映像を表示装置１１０６に表示する。
【００５３】
ステップＳ６０３では、音声方向検知部５０４が撮像対象物Ｎの方向から音声を検知し撮像対象物Ｎの方向を特定する。次に、方向検知された撮像対象物Ｎが、撮像対象物Ｍと異なる場合、ステップＳ６０４に移る。
【００５４】
ステップＳ６０４では、撮像部５０１が、ステップＳ６０３の条件を満たした時に第１の撮像対象物Ｍの静止画像を生成する。生成された静止画像は、記憶制御部５０３によって外部記憶装置１１０２に保持される。
【００５５】
ステップＳ６０５では、撮像装置１１０５を、音声方向検知部５０４が検知した撮像対象物Ｎに向け、撮像対象物Ｎを撮像し、撮像対象物Ｎの映像を生成する。また、表示制御部５０２が、撮像部５０１が生成した撮像対象物Ｎの映像および外部記憶装置１１０２に保持されている撮像対象物Ｍの静止画像を表示する。表示される静止画像は、優先順位保持部５０５が保持している優先順位情報をもとに、外部記憶装置１１０２に保持されている静止画像の中から、映像を生成している撮像対象物Ｎ以外であって、一番優先順位の高い静止画像を合わせて表示する。
【００５６】
ステップＳ６０５が終了するとステップＳ６０３に戻る。ここで、ステップＳ６０５の撮像対象物ＮとステップＳ６０３に戻った時の撮像対象物Ｎは異なる。
【００５７】
また、ステップＳ６０２とステップＳ６０５では、ステップＳ６０３の条件が満たされない限り、ステップＳ６０２とステップＳ６０５を継続して行う。
【００５８】
以上の図６の処理の流れを、具体例を用いて示す。ここでは、テレビ会議システムを想定しており、撮像対象物はホワイトボードと会議の参加者およびプロトタイプである。ネットワークカメラでホワイトボードと会議の参加者とプロトタイプを撮像し、映像と静止画像を生成する。生成した映像と静止画像をディスプレイの２つのウィンドウで表示する。２つのウィンドウは、映像を表示するウィンドウと静止画像を表示するウィンドウである。なお、ネットワークカメラは、パン、チルト、ズームの機能を備えており、撮像部５０１と音声方向検知部５０４の機能を備えている。ネットワークカメラが、ホワイトボード、プロトタイプ、会議の参加者の順番で撮像し、最後にホワイトボードを再び撮像する。２つのウィンドウに対する３つの撮像対象物の映像と静止画像の表示方法を説明する。
【００５９】
図９および図１０は、本実施形態３におけるテレビ会議システムの動作例を示す図である。
【００６０】
ステップＳ６０１では、ホワイトボード９０２と会議の参加者９０４とプロトタイプ９０５に対して優先順位を決定する。ここで優先順位を、ホワイトボード９０２を１番、プロトタイプ９０５を２番、会議の参加者９０４を３番とした。
【００６１】
ステップＳ６０２では、ネットワークカメラ９０１がホワイトボード９０２を撮像し、ホワイトボード９０２の映像１００２を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成したホワイトボード９０２の映像１００２を表示する。ここで、図９のテレビ会議室にあるディスプレイ９０３と図８のディスプレイ１００１は同じディスプレイである（図１０（ａ））。
【００６２】
ステップＳ６０３では、ネットワークカメラ９０１が会議のプロトタイプ９０５の方向から音声を検知しプロトタイプ９０５の方向を特定するとステップＳ６０４に移る。
【００６３】
ステップＳ６０４では、ネットワークカメラ９０１が、ステップＳ６０３で音声を検知した時にホワイトボード９０２の静止画像１００４を生成する。
【００６４】
ステップＳ６０５では、ネットワークカメラ９０１が方向を検知したプロトタイプ９０５を撮像し、プロトタイプ９０５の映像１００３を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成した会議のプロトタイプ９０５の映像１００３と、静止画像１００４を表示する。この時点で、生成された静止画像は、静止画像１００４のみなので、静止画像１００４の優先順位が一番高くなる（図１０（ｂ））。
【００６５】
ここで、ステップＳ６０３に戻り、ネットワークカメラ９０１が会議の参加者９０４の方向から音声を検知し会議の参加者９０４の方向を特定するとステップＳ６０４に移る。
【００６６】
ステップＳ６０４では、ネットワークカメラ９０１が、ステップＳ６０３でホワイトボード以外からの音声を検知した時にプロトタイプ９０５の静止画像１００８を生成する。
【００６７】
ステップＳ６０５では、ネットワークカメラ９０１が方向を検知した会議の参加者９０４を撮像し、会議の参加者９０４の映像１００５を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成した会議の参加者９０４の映像１００５を表示する。ここで、ホワイトボード９０２とプロトタイプ９０５では、ホワイトボード９０２のほうが優先順位が高いので、ホワイトボード９０２の静止画像１００４をディスプレイ１００１に表示する（図１０（ｃ））。
【００６８】
ここで、再度、ステップＳ６０３に戻り、ネットワークカメラ９０１がホワイトボード９０２の方向から音声を検知しホワイトボード９０２の方向を特定するとステップＳ６０４に移る。
【００６９】
ステップＳ６０４では、ネットワークカメラ９０１が、ステップＳ６０３で会議の参加者以外からのプロトタイプ以外からの音声を検知した時に会議の参加者９０４の静止画像を生成する。
【００７０】
ステップＳ６０５では、ネットワークカメラ９０１が方向を検知したホワイトボード９０２を撮像し、ホワイトボード９０２の映像１００７を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成したホワイトボード９０２の映像１００７を表示する。ここで、会議の参加者９０４とプロトタイプ９０５では、プロトタイプ９０５のほうが優先順位が高いので、プロトタイプ９０５の静止画像１００８をディスプレイ１００１に表示する（図１０（ｄ））。
【００７１】
本実施形態では、ディスプレイの２つのウィンドウに映像１００７と静止画像１００８を表示していたが、本発明ではこれに限らず、ディスプレイのウィンドウを３つ以上にし、それぞれに映像を表示してもよい。
【００７２】
また、優先順位に基づき、映像の配置や表示するウィンドウの大きさを調整してもよい。
【００７３】
また、ステップＳ６０５では、ディスプレイの２つのウィンドウに映像１００７と静止画像１００８を表示していた。しかし、一番優先度が高い撮像対象物を撮像し映像を生成している場合は、撮像した映像のみをディスプレイに表示してもよい。
【００７４】
（他の実施形態）
以上、本発明の実施形態を詳述したが、本発明は、複数の機器から構成されるシステムに適用してもよいし、また、一つの機器からなる装置に適用してもよい。
【００７５】
なお、本発明は、前述した実施形態の各機能を実現するプログラムを、システム又は装置に直接又は遠隔から供給し、そのシステム又は装置に含まれるコンピュータがその供給されたプログラムコードを読み出して実行することによっても達成される。
【００７６】
したがって、本発明の機能・処理をコンピュータで実現するために、そのコンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、上記機能・処理を実現するためのコンピュータプログラム自体も本発明の一つである。
【００７７】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【００７８】
プログラムを供給するためのコンピュータ読み取り可能な記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷなどがある。また、記録媒体としては、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などもある。
【００７９】
また、プログラムは、クライアントコンピュータのブラウザを用いてインターネットのホームページからダウンロードしてもよい。すなわち、ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードしてもよい。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードする形態も考えられる。つまり、本発明の機能・処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明の構成要件となる場合がある。
【００８０】
また、本発明のプログラムを暗号化してコンピュータ読み取り可能なＣＤ−ＲＯＭ等のコンピュータ読み取り可能な記憶媒体に格納してユーザに配布してもよい。この場合、所定条件をクリアしたユーザにのみ、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報で暗号化されたプログラムを復号して実行し、プログラムをコンピュータにインストールしてもよい。
【００８１】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現されてもよい。なお、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部又は全部を行ってもよい。もちろん、この場合も、前述した実施形態の機能が実現され得る。
【００８２】
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれてもよい。そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行ってもよい。このようにして、前述した実施形態の機能が実現されることもある。
【図面の簡単な説明】
【００８３】
【図１】実施形態１に係るテレビ会議システムの構成を示すブロック図である。
【図２】実施形態１における情報処理装置の機能構成を示すブロック図である。
【図３】実施形態１における情報処理装置の制御処理を示すフローチャートである。
【図４】実施形態２における情報処理装置の制御処理を示すフローチャートである。
【図５】実施形態３における情報処理装置の機能構成を示すブロック図である。
【図６】実施形態３における情報処理装置の制御処理を示すフローチャートである。
【図７】実施形態１におけるテレビ会議システムの動作例を示す図である。
【図８】実施形態１における画面表示例を示す図である。
【図９】実施形態３におけるテレビ会議システムの動作例を示す図である。
【図１０】実施形態３における画面表示例を示す図である。
【図１１】実施形態２におけるテレビ会議システムの構成を示す図である。
【図１２】実施形態２における情報処理装置の機能構成を示すブロック図である。
【技術分野】
【０００１】
本発明は、複数の撮像対象物の映像をディスプレイ画面に並べて表示する情報処理装置及びその制御方法に関する。
【背景技術】
【０００２】
テレビ会議システムでは、第１の撮像対象物（会議の参加者）をテレビジョンに表示させるだけでなく、第２の撮像対象物（例えば、ホワイトボードやプロトタイプ）をテレビジョンに表示しながら説明することによって、テレビ会議を円滑に行う場合が多い。そして、このような２つの撮像対象物を一画面に並べて表示をして議論することにより、更にテレビ会議が円滑に進む。
【０００３】
特許文献１には、複数の撮像対象物を一画面にマルチ表示させる場合に関する方法が開示されている。この方法では、複数のネットワークカメラを用いて複数の撮像対象物を撮像し、撮像して得られた映像を一画面に並べて表示する。
【特許文献１】特開2006-340319号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、上記した特許文献１に記載の方法では、複数のネットワークカメラを用いて複数の撮像対象物を撮像しなければならない。つまり、一台のネットワークカメラを用いてテレビ会議を行いたい場合は、複数の撮像対象物を同時に一画面に表示することが不可能である。
【０００５】
したがって、本発明は、一台のネットワークカメラで複数の撮像対象物を同時に一画面に表示できる情報処理装置及びその制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一側面は、撮像装置の撮影方向を制御することで複数の撮像対象物を撮像し、該撮像により得た映像を表示装置に表示させる情報処理装置に係り、第１の撮像対象物の映像を前記表示装置に表示させている最中に撮像して得た前記第１の撮像対象物の映像を記憶装置に記憶させる記憶制御手段と、前記撮影方向の制御により前記第１の撮像対象物よりも後に撮像された前記第１の撮像対象物とは異なる第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する表示制御手段とを備えることを特徴とする。
【発明の効果】
【０００７】
本発明によれば、一台のネットワークカメラで複数の撮像対象物を一画面に並べて表示できる。
【発明を実施するための最良の形態】
【０００８】
以下、図面を参照して本発明の好適な実施形態について詳細に説明する。なお、本発明は以下の実施形態に限定されるものではなく、本発明の実施に有利な具体例を示すにすぎない。また、以下の実施形態の中で説明されている特徴の組み合わせの全てが本発明の課題解決手段として必須のものであるとは限らない。
【０００９】
（実施形態１）
図１は、本実施形態に係るテレビ会議システムの構成を示すブロック図である。
【００１０】
１００は、撮像装置１０５の撮影方向を制御することで複数の撮像対象物の映像を撮像し、該映像を表示装置１０６に表示させる情報処理装置である。情報処理装置１００において、１０１は数値演算・制御等の処理を行う中央処理装置（ＣＰＵ）であり、本発明の手順に従って演算を行う。１０２はディスク装置や不揮発メモリ等の外部記憶装置である。１０３はＲＡＭ等の一時情報を保持するメモリであり、本発明における処理を行う為の一時的なデータが保持される。１０４は制御メモリ（ＲＯＭ）である。
【００１１】
１０５は撮像対象物を撮像する撮像装置であり、パン、チルト、ズーム機能を備えたカメラ等である。なお、本明細書において、「映像」は静止画像、動画像を含みうるものとする。１０６は映像を表示する表示装置であり、モニタあるいはディスプレイ等ともいう。１０７は撮像装置１０５の遠隔操作ができる遠隔操作装置（以下、単に「リモコン」ともいう。）である。
【００１２】
図２は、本実施形態における情報処理装置の機能構成を示すブロック図である。
【００１３】
図２において、撮像部２０１は撮像装置１０５を用いて撮像対象物を撮像する。表示制御部２０２は、撮像部２０１で撮像された映像の表示装置１０６への表示を制御する。記憶制御部２０２は、撮像部２０１で生成された映像データの外部記憶装置１０２への記憶を制御する。遠隔操作部２０４は、遠隔操作装置１０７からの操作情報に基づき、撮像装置１０５のパン、チルト、ズーム等の遠隔操作を行う。
【００１４】
図３は、本実施形態における情報処理装置１００の処理を示すフローチャートである。
【００１５】
ステップＳ３０１では、撮像部２０１が第１の撮像対象物を撮像し、第１の撮像対象物の映像を生成する。また、表示制御部２０２は、撮像部２０１が生成した第１の対象物の映像を表示装置１０６に表示する。
【００１６】
ステップＳ３０２では、撮像部２０１が、遠隔操作部２０４から、第１の撮像対象物とは異なる第２の撮像対象物に撮像装置１０５を向ける旨の信号を受信する。また、撮像部２０１が、第１の撮像対象物の映像（例えば、静止画像）を生成する。生成された静止画像は、第１の撮像対象物の映像の表示の最中に、外部記憶装置１０２に保持される。
【００１７】
ステップＳ３０３では、第２の撮像対象物に撮像装置１０５を向ける。
【００１８】
ステップＳ３０４では、撮像部２０１が、第２の撮像対象物を撮像し、第２の撮像対象物の映像を生成する。また、表示制御部２０２は、撮像部２０１が生成した第２の対象物の映像および外部記憶装置１０２に保持されている第１の撮像対象物の静止画像を併せて表示装置１０６に表示する。
【００１９】
以上の図３に示した制御処理の流れを、具体例を用いて示す。ここでは、２拠点で音声や映像を通信するテレビ会議システムを想定している。撮像対象物はホワイトボードと会議の参加者である。第１の撮像対象物をホワイトボード、第２の撮像対象物を会議の参加者とする。ネットワークカメラ（撮像装置１０５）でホワイトボードと会議の参加者を撮像する。これらの映像を２拠点のディスプレイで表示する。なお、ネットワークカメラは、パン、チルト、ズームの機能を備えており、リモコンにより遠隔操作ができる。
【００２０】
図７および図８は、実施形態１におけるテレビ会議システムの動作例を示す図である。
【００２１】
ステップＳ３０１では、ネットワークカメラ７０１がホワイトボード７０２を撮像し、ホワイトボード７０２の映像８０２を生成する。また、ディスプレイ８０１は、ネットワークカメラ７０１が生成したホワイトボード７０２の映像８０２を表示する。ここで、図７のテレビ会議室にあるディスプレイ７０３と図８のディスプレイ８０１は同じディスプレイである（図８（ａ））。
【００２２】
ステップＳ３０２では、会議の参加者７０４を撮像するために操作された遠隔操作装置１０７からのリモコン信号を受信する。また、ネットワークカメラ７０１が、リモコン操作開始の旨の信号を受信し、ホワイトボード７０２の静止画像８０４を生成する。
【００２３】
ステップＳ３０３では、リモコンの操作により、ネットワークカメラ７０１を会議の参加者７０４に向ける。
【００２４】
ステップＳ３０４では、ネットワークカメラ７０１が参加者７０４を撮像し、会議の参加者７０４の映像８０３を生成する。このとき、ディスプレイ８０１には、ネットワークカメラ７０１が生成した会議の参加者７０４の映像８０３と、静止画像８０４が併せて表示される（図８（ｂ））。
【００２５】
ここで更に、ホワイトボード７０２を撮像するためにリモコン操作を開始すると、会議の参加者７０４の静止画像８０６を生成する。
【００２６】
次に、リモコン操作によりネットワークカメラ７０１がホワイトボード７０２に向き、ホワイトボード７０２を撮像する。このとき、ディスプレイ８０１には、撮像したホワイトボード７０２の映像８０５と会議の参加者７０４の静止画像８０６が併せて表示される。（図８（ｃ））
【００２７】
ここで、ステップＳ３０１〜Ｓ３０４において、リモコン操作により初期のホワイトボードの映像のみを表示した状態に戻すように指示すると、ネットワークカメラがホワイトボードを撮像し、ディスプレイにはホワイトボードの映像のみが表示される。
【００２８】
本実施形態では、ステップＳ３０３において静止画像を生成し表示したが、ある一定の間に撮像した動画像を生成し表示してもよい。
【００２９】
また、本実施形態では、リモコン操作によりネットワークカメラを制御していたが、キーボードやマウス等のその他のデバイスを用いて制御してもよい。
【００３０】
また、ステップＳ３０３で生成する静止画像はステップＳ３０２でリモコン信号を受信した時に生成していたが、ステップＳ３０１で映像を生成している時に静止画像を生成しても良いことはいうまでもない。
【００３１】
また、第１の撮像対象物と第２の撮像対象物にディスプレイに表示する優先順位を付与し、優先順位が高いほうを表示してもよい。この場合、例えば外部記憶装置１０２は優先順位記憶手段として、優先順位を記憶しておく。ここで、各撮影対象物の映像は、各撮影対象物の優先順位と対応付けて記憶される。
【００３２】
また、上記実施形態では、ステップＳ３０４において、会議の参加者とホワイトボードの２つの撮像対象物があった場合、会議の参加者とホワイトボードの２つの静止画像を生成し表示した。しかし、このかわりに、２つの撮像対象物に優先順位を付与し、２つのうち優先順位の高い方の撮像対象物のみ静止画像を生成し表示してもよい。あるいは、２つの撮像対象物に優先順位を付与するのではなく、２つの撮像対象物の内、一つにフラグを立て、フラグを立てた撮像対象物のみ静止画像を生成し表示してもよい。
【００３３】
また、上記実施形態では、２拠点で画像や音声を通信しあうテレビ会議システムを想定した。ただし、一方の拠点のテレビ会議室にあるディスプレイ７０３で表示する画像を、もう一方の拠点のディスプレイで表示しても良いことは言うまでもない。
【００３４】
また、２拠点で通信しあうテレビ会議システムだけでなく、３拠点以上で通信しあうテレビ会議システムも考えられる。この場合、ディスプレイ７０３で表示する画像は、複数の拠点にあるディスプレイで表示しても良いことは言うまでもない。
【００３５】
また、本実施形態ではテレビ会議システムを想定したが、本発明はこれに限らず、監視用モニタリングシステム等のネットワークカメラを用いたシステムに適用できることは言うまでもない。
【００３６】
（実施形態２）
上述の実施形態１では、ステップＳ３０２で第２の撮像対象物にパン、チルト、ズームをするタイミングは、リモコン等の遠隔操作部により決定されていたが、本実施形態ではこれに限定されるものではない。
【００３７】
具体的には、音声方向検知技術を用いれば、第２の撮像対象物から音声を検知し、撮像部からの第２の撮像対象物の音源方向を特定することができる。次に、撮像装置は、特定された音源方向にパン、チルト、ズームし第２の撮像対象物を撮像する。
【００３８】
ここで、音声とは、撮像対象物方向から発生する音声であり、例えば会議の参加者の会話やホワイトボードを書く時に出る音である。撮像装置が適切にパン、チルト、ズームをすることができるように、雑音や短い時間の音声に反応しないように制御することが望ましい。
【００３９】
図１１は、本実施形態に係るテレビ会議システムの構成を示すブロック図である。情報処理装置１１００における１１０１乃至１１０６の機能はそれぞれ、図１の１０１乃至１０６の機能と同じである。１１０７は、音声の発生方向を検知する音声方向検知装置である。
【００４０】
図１２は、本実施形態における情報処理装置の機能構成を示すブロック図である。１２０１乃至１２０３の機能はそれぞれ、図２の２０１乃至２０３の機能と同じである。音声方向検知部１２０４は、音声方向検知装置１１０７を用いて、撮像対象物の方向から音声を検知し、撮像対象物の方向を特定する。
【００４１】
図４は、本実施形態における情報処理装置１１００の処理を示すフローチャートである。
【００４２】
ステップＳ１３０１はステップＳ３０１と同じである。すなわち、ステップＳ１３０１では、撮像部１２０１が第１の撮像対象物を撮像し、第１の撮像対象物の映像を生成する。また、表示制御部１２０２は、撮像部１２０１が生成した第１の対象物の映像を表示装置１１０６に表示する。
【００４３】
ステップＳ１３０２では、音声方向検知部１２０４が第２の撮像対象物方向から音声を検知し第２の撮像対象物の方向を特定する。また、第１の撮像対象物の静止画像を生成する。
【００４４】
ステップＳ１３０３では、方向が特定された第２の撮像対象物に撮像装置１１０５を向ける。
【００４５】
ステップＳ１３０４は、ステップＳ３０４と同じである。すなわち、ステップＳ１３０４では、撮像部１２０１が、第２の撮像対象物を撮像し、第２の撮像対象物の映像を生成する。また、表示制御部１２０２は、撮像部１２０１が生成した第２の対象物の映像および外部記憶装置１１０２に保持されている第１の撮像対象物の静止画像を併せて表示装置１１０６に表示する。
【００４６】
ここで本実施形態では、ステップＳ１３０３で生成する静止画像はステップＳ１３０２で音声を検知した時に生成したが、ステップＳ１３０１で映像を生成している時に静止画像を生成してもよい。
【００４７】
（実施形態３）
上述の実施形態１、２では、第１と第２の２個の撮像対象物を撮像する場合を想定していた。以下の実施形態３では、Ｋ（Ｋ≧３）個の撮像対象物を撮像する場合を説明する。
【００４８】
図５は、実施形態３における情報処理装置の機能構成を示すブロック図である。
【００４９】
図５において、５０１乃至５０４の機能はそれぞれ、図１２の１２０１乃至１２０４の機能と同じである。優先順位保持部５０５は、Ｋ個の撮像対象物に付与される優先順位の優先順位情報が外部記憶装置１１０２に保持される。
【００５０】
図６は、本実施形態における情報処理装置の処理を示すフローチャートである。
【００５１】
ステップＳ６０１では、Ｋ個の撮像対象物に対して優先順位が決定される。Ｋ個の撮像対象物と優先順位の優先順位情報が優先順位保持部５０５に保持される。
【００５２】
ステップＳ６０２では、撮像部５０１が撮像対象物Ｍを撮像し、撮像対象物Ｍの映像を生成する（撮像対象物Ｍは、Ｋ個の撮像対象物のうち、どれか一つである。）。また、表示制御部５０２が、撮像部５０１が生成した撮像対象物Ｍの映像を表示装置１１０６に表示する。
【００５３】
ステップＳ６０３では、音声方向検知部５０４が撮像対象物Ｎの方向から音声を検知し撮像対象物Ｎの方向を特定する。次に、方向検知された撮像対象物Ｎが、撮像対象物Ｍと異なる場合、ステップＳ６０４に移る。
【００５４】
ステップＳ６０４では、撮像部５０１が、ステップＳ６０３の条件を満たした時に第１の撮像対象物Ｍの静止画像を生成する。生成された静止画像は、記憶制御部５０３によって外部記憶装置１１０２に保持される。
【００５５】
ステップＳ６０５では、撮像装置１１０５を、音声方向検知部５０４が検知した撮像対象物Ｎに向け、撮像対象物Ｎを撮像し、撮像対象物Ｎの映像を生成する。また、表示制御部５０２が、撮像部５０１が生成した撮像対象物Ｎの映像および外部記憶装置１１０２に保持されている撮像対象物Ｍの静止画像を表示する。表示される静止画像は、優先順位保持部５０５が保持している優先順位情報をもとに、外部記憶装置１１０２に保持されている静止画像の中から、映像を生成している撮像対象物Ｎ以外であって、一番優先順位の高い静止画像を合わせて表示する。
【００５６】
ステップＳ６０５が終了するとステップＳ６０３に戻る。ここで、ステップＳ６０５の撮像対象物ＮとステップＳ６０３に戻った時の撮像対象物Ｎは異なる。
【００５７】
また、ステップＳ６０２とステップＳ６０５では、ステップＳ６０３の条件が満たされない限り、ステップＳ６０２とステップＳ６０５を継続して行う。
【００５８】
以上の図６の処理の流れを、具体例を用いて示す。ここでは、テレビ会議システムを想定しており、撮像対象物はホワイトボードと会議の参加者およびプロトタイプである。ネットワークカメラでホワイトボードと会議の参加者とプロトタイプを撮像し、映像と静止画像を生成する。生成した映像と静止画像をディスプレイの２つのウィンドウで表示する。２つのウィンドウは、映像を表示するウィンドウと静止画像を表示するウィンドウである。なお、ネットワークカメラは、パン、チルト、ズームの機能を備えており、撮像部５０１と音声方向検知部５０４の機能を備えている。ネットワークカメラが、ホワイトボード、プロトタイプ、会議の参加者の順番で撮像し、最後にホワイトボードを再び撮像する。２つのウィンドウに対する３つの撮像対象物の映像と静止画像の表示方法を説明する。
【００５９】
図９および図１０は、本実施形態３におけるテレビ会議システムの動作例を示す図である。
【００６０】
ステップＳ６０１では、ホワイトボード９０２と会議の参加者９０４とプロトタイプ９０５に対して優先順位を決定する。ここで優先順位を、ホワイトボード９０２を１番、プロトタイプ９０５を２番、会議の参加者９０４を３番とした。
【００６１】
ステップＳ６０２では、ネットワークカメラ９０１がホワイトボード９０２を撮像し、ホワイトボード９０２の映像１００２を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成したホワイトボード９０２の映像１００２を表示する。ここで、図９のテレビ会議室にあるディスプレイ９０３と図８のディスプレイ１００１は同じディスプレイである（図１０（ａ））。
【００６２】
ステップＳ６０３では、ネットワークカメラ９０１が会議のプロトタイプ９０５の方向から音声を検知しプロトタイプ９０５の方向を特定するとステップＳ６０４に移る。
【００６３】
ステップＳ６０４では、ネットワークカメラ９０１が、ステップＳ６０３で音声を検知した時にホワイトボード９０２の静止画像１００４を生成する。
【００６４】
ステップＳ６０５では、ネットワークカメラ９０１が方向を検知したプロトタイプ９０５を撮像し、プロトタイプ９０５の映像１００３を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成した会議のプロトタイプ９０５の映像１００３と、静止画像１００４を表示する。この時点で、生成された静止画像は、静止画像１００４のみなので、静止画像１００４の優先順位が一番高くなる（図１０（ｂ））。
【００６５】
ここで、ステップＳ６０３に戻り、ネットワークカメラ９０１が会議の参加者９０４の方向から音声を検知し会議の参加者９０４の方向を特定するとステップＳ６０４に移る。
【００６６】
ステップＳ６０４では、ネットワークカメラ９０１が、ステップＳ６０３でホワイトボード以外からの音声を検知した時にプロトタイプ９０５の静止画像１００８を生成する。
【００６７】
ステップＳ６０５では、ネットワークカメラ９０１が方向を検知した会議の参加者９０４を撮像し、会議の参加者９０４の映像１００５を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成した会議の参加者９０４の映像１００５を表示する。ここで、ホワイトボード９０２とプロトタイプ９０５では、ホワイトボード９０２のほうが優先順位が高いので、ホワイトボード９０２の静止画像１００４をディスプレイ１００１に表示する（図１０（ｃ））。
【００６８】
ここで、再度、ステップＳ６０３に戻り、ネットワークカメラ９０１がホワイトボード９０２の方向から音声を検知しホワイトボード９０２の方向を特定するとステップＳ６０４に移る。
【００６９】
ステップＳ６０４では、ネットワークカメラ９０１が、ステップＳ６０３で会議の参加者以外からのプロトタイプ以外からの音声を検知した時に会議の参加者９０４の静止画像を生成する。
【００７０】
ステップＳ６０５では、ネットワークカメラ９０１が方向を検知したホワイトボード９０２を撮像し、ホワイトボード９０２の映像１００７を生成する。また、ディスプレイ１００１が、ネットワークカメラ９０１が生成したホワイトボード９０２の映像１００７を表示する。ここで、会議の参加者９０４とプロトタイプ９０５では、プロトタイプ９０５のほうが優先順位が高いので、プロトタイプ９０５の静止画像１００８をディスプレイ１００１に表示する（図１０（ｄ））。
【００７１】
本実施形態では、ディスプレイの２つのウィンドウに映像１００７と静止画像１００８を表示していたが、本発明ではこれに限らず、ディスプレイのウィンドウを３つ以上にし、それぞれに映像を表示してもよい。
【００７２】
また、優先順位に基づき、映像の配置や表示するウィンドウの大きさを調整してもよい。
【００７３】
また、ステップＳ６０５では、ディスプレイの２つのウィンドウに映像１００７と静止画像１００８を表示していた。しかし、一番優先度が高い撮像対象物を撮像し映像を生成している場合は、撮像した映像のみをディスプレイに表示してもよい。
【００７４】
（他の実施形態）
以上、本発明の実施形態を詳述したが、本発明は、複数の機器から構成されるシステムに適用してもよいし、また、一つの機器からなる装置に適用してもよい。
【００７５】
なお、本発明は、前述した実施形態の各機能を実現するプログラムを、システム又は装置に直接又は遠隔から供給し、そのシステム又は装置に含まれるコンピュータがその供給されたプログラムコードを読み出して実行することによっても達成される。
【００７６】
したがって、本発明の機能・処理をコンピュータで実現するために、そのコンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、上記機能・処理を実現するためのコンピュータプログラム自体も本発明の一つである。
【００７７】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等、プログラムの形態を問わない。
【００７８】
プログラムを供給するためのコンピュータ読み取り可能な記録媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷなどがある。また、記録媒体としては、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などもある。
【００７９】
また、プログラムは、クライアントコンピュータのブラウザを用いてインターネットのホームページからダウンロードしてもよい。すなわち、ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードしてもよい。また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードする形態も考えられる。つまり、本発明の機能・処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明の構成要件となる場合がある。
【００８０】
また、本発明のプログラムを暗号化してコンピュータ読み取り可能なＣＤ−ＲＯＭ等のコンピュータ読み取り可能な記憶媒体に格納してユーザに配布してもよい。この場合、所定条件をクリアしたユーザにのみ、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報で暗号化されたプログラムを復号して実行し、プログラムをコンピュータにインストールしてもよい。
【００８１】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施形態の機能が実現されてもよい。なお、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部又は全部を行ってもよい。もちろん、この場合も、前述した実施形態の機能が実現され得る。
【００８２】
さらに、記録媒体から読み出されたプログラムが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれてもよい。そのプログラムの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部又は全部を行ってもよい。このようにして、前述した実施形態の機能が実現されることもある。
【図面の簡単な説明】
【００８３】
【図１】実施形態１に係るテレビ会議システムの構成を示すブロック図である。
【図２】実施形態１における情報処理装置の機能構成を示すブロック図である。
【図３】実施形態１における情報処理装置の制御処理を示すフローチャートである。
【図４】実施形態２における情報処理装置の制御処理を示すフローチャートである。
【図５】実施形態３における情報処理装置の機能構成を示すブロック図である。
【図６】実施形態３における情報処理装置の制御処理を示すフローチャートである。
【図７】実施形態１におけるテレビ会議システムの動作例を示す図である。
【図８】実施形態１における画面表示例を示す図である。
【図９】実施形態３におけるテレビ会議システムの動作例を示す図である。
【図１０】実施形態３における画面表示例を示す図である。
【図１１】実施形態２におけるテレビ会議システムの構成を示す図である。
【図１２】実施形態２における情報処理装置の機能構成を示すブロック図である。
【特許請求の範囲】
【請求項１】
撮像装置の撮影方向を制御することで複数の撮像対象物を撮像し、該撮像により得た映像を表示装置に表示させる情報処理装置であって、
第１の撮像対象物の映像を前記表示装置に表示させている最中に撮像して得た前記第１の撮像対象物の映像を記憶装置に記憶させる記憶制御手段と、
前記撮影方向の制御により前記第１の撮像対象物よりも後に撮像された前記第１の撮像対象物とは異なる第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する表示制御手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記第１の撮像対象物は、前記第２の撮像対象物よりも優先順位が高いことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記記憶制御手段は、前記第１の撮像対象物の映像を、該第１の撮像対象物の優先順位と対応付けて記憶させ、
前記表示制御手段は、前記第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像の内、前記優先順位が最も高い映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項４】
音声の発生方向を検知する音声方向検知手段と、
前記音声方向検知手段で検知した方向を撮影するよう前記撮像装置を制御する手段と、
を更に備えることを特徴とする請求項１に記載の情報処理装置。
【請求項５】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記表示制御手段は、前記第２の撮像対象物の映像を表示装置に表示させる場合に、該第２の撮像対象物の優先順位が最も高い場合は、該第２の撮像対象物の映像のみを前記表示装置に表示させることを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記表示制御手段は、前記優先順位に基づいて、前記記憶装置に記憶された静止画像又は所定の動画像を前記表示装置へ表示する際の画像の配置方法及び大きさの少なくともいずれかを調整することを特徴とする請求項１に記載の情報処理装置。
【請求項７】
撮像装置の撮影方向を制御することで複数の撮像対象物を撮像し、該撮像により得た映像を表示装置に表示させる情報処理装置の制御方法であって、
第１の撮像対象物の映像を前記表示装置に表示させている最中に撮像して得た前記第１の撮像対象物の映像を記憶装置に記憶させる記憶制御工程と、
前記撮影方向の制御により前記第１の撮像対象物よりも後に撮像された前記第１の撮像対象物とは異なる第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する表示制御工程と、
を有することを特徴とする情報処理の制御方法。
【請求項８】
前記複数の撮像対象物それぞれの優先順位があらかじめ記憶装置に記憶されており、前記第１の撮像対象物は、前記第２の撮像対象物よりも優先順位が高いことを特徴とする請求項７に記載の情報処理方法。
【請求項９】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶工程を更に有し、
前記記憶制御工程は、前記第１の撮像対象物の映像を、該第１の撮像対象物の優先順位と対応付けて記憶させ、
前記表示制御工程は、前記第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像の内、前記優先順位が最も高い映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する
ことを特徴とする請求項７に記載の情報処理装置の制御方法。
【請求項１０】
音声の発生方向を検知する音声方向検知工程と、
前記音声方向検知工程で検知した方向を撮影するよう前記撮像装置を制御する工程と、
を更に有することを特徴とする請求項７に記載の情報処理装置の制御方法。
【請求項１１】
前記複数の撮像対象物それぞれの優先順位があらかじめ記憶装置に記憶されており、前記表示制御工程は、前記第２の撮像対象物の映像を前記表示装置に表示させる場合に、該第２の撮像対象物の優先順位が最も高い場合は、該第２の撮像対象物の映像のみを前記表示装置に表示させることを特徴とする請求項１０に記載の情報処理装置の制御方法。
【請求項１２】
前記複数の撮像対象物それぞれの優先順位があらかじめ記憶装置に記憶されており、前記表示制御工程は、前記優先順位に基づいて、前記記憶装置に記憶された前記第１の撮像対象物の映像を前記表示装置へ表示する際の画像の配置方法及び大きさの少なくともいずれかを調整することを特徴とする請求項７に記載の情報処理装置の制御方法。
【請求項１３】
請求項７乃至１２のいずれか１項に記載の情報処理装置の制御方法を該情報処理装置に実行させるためのプログラム。
【請求項１】
撮像装置の撮影方向を制御することで複数の撮像対象物を撮像し、該撮像により得た映像を表示装置に表示させる情報処理装置であって、
第１の撮像対象物の映像を前記表示装置に表示させている最中に撮像して得た前記第１の撮像対象物の映像を記憶装置に記憶させる記憶制御手段と、
前記撮影方向の制御により前記第１の撮像対象物よりも後に撮像された前記第１の撮像対象物とは異なる第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する表示制御手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記第１の撮像対象物は、前記第２の撮像対象物よりも優先順位が高いことを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記記憶制御手段は、前記第１の撮像対象物の映像を、該第１の撮像対象物の優先順位と対応付けて記憶させ、
前記表示制御手段は、前記第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像の内、前記優先順位が最も高い映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する
ことを特徴とする請求項１に記載の情報処理装置。
【請求項４】
音声の発生方向を検知する音声方向検知手段と、
前記音声方向検知手段で検知した方向を撮影するよう前記撮像装置を制御する手段と、
を更に備えることを特徴とする請求項１に記載の情報処理装置。
【請求項５】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記表示制御手段は、前記第２の撮像対象物の映像を表示装置に表示させる場合に、該第２の撮像対象物の優先順位が最も高い場合は、該第２の撮像対象物の映像のみを前記表示装置に表示させることを特徴とする請求項４に記載の情報処理装置。
【請求項６】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶手段を更に備え、
前記表示制御手段は、前記優先順位に基づいて、前記記憶装置に記憶された静止画像又は所定の動画像を前記表示装置へ表示する際の画像の配置方法及び大きさの少なくともいずれかを調整することを特徴とする請求項１に記載の情報処理装置。
【請求項７】
撮像装置の撮影方向を制御することで複数の撮像対象物を撮像し、該撮像により得た映像を表示装置に表示させる情報処理装置の制御方法であって、
第１の撮像対象物の映像を前記表示装置に表示させている最中に撮像して得た前記第１の撮像対象物の映像を記憶装置に記憶させる記憶制御工程と、
前記撮影方向の制御により前記第１の撮像対象物よりも後に撮像された前記第１の撮像対象物とは異なる第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する表示制御工程と、
を有することを特徴とする情報処理の制御方法。
【請求項８】
前記複数の撮像対象物それぞれの優先順位があらかじめ記憶装置に記憶されており、前記第１の撮像対象物は、前記第２の撮像対象物よりも優先順位が高いことを特徴とする請求項７に記載の情報処理方法。
【請求項９】
前記複数の撮像対象物それぞれの優先順位を記憶する優先順位記憶工程を更に有し、
前記記憶制御工程は、前記第１の撮像対象物の映像を、該第１の撮像対象物の優先順位と対応付けて記憶させ、
前記表示制御工程は、前記第２の撮像対象物の映像を前記表示装置に表示させる場合に、前記記憶装置に記憶された前記第１の撮像対象物の映像の内、前記優先順位が最も高い映像を、前記第２の撮像対象物の映像と併せて表示させるよう制御する
ことを特徴とする請求項７に記載の情報処理装置の制御方法。
【請求項１０】
音声の発生方向を検知する音声方向検知工程と、
前記音声方向検知工程で検知した方向を撮影するよう前記撮像装置を制御する工程と、
を更に有することを特徴とする請求項７に記載の情報処理装置の制御方法。
【請求項１１】
前記複数の撮像対象物それぞれの優先順位があらかじめ記憶装置に記憶されており、前記表示制御工程は、前記第２の撮像対象物の映像を前記表示装置に表示させる場合に、該第２の撮像対象物の優先順位が最も高い場合は、該第２の撮像対象物の映像のみを前記表示装置に表示させることを特徴とする請求項１０に記載の情報処理装置の制御方法。
【請求項１２】
前記複数の撮像対象物それぞれの優先順位があらかじめ記憶装置に記憶されており、前記表示制御工程は、前記優先順位に基づいて、前記記憶装置に記憶された前記第１の撮像対象物の映像を前記表示装置へ表示する際の画像の配置方法及び大きさの少なくともいずれかを調整することを特徴とする請求項７に記載の情報処理装置の制御方法。
【請求項１３】
請求項７乃至１２のいずれか１項に記載の情報処理装置の制御方法を該情報処理装置に実行させるためのプログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１０−４５５３９（Ｐ２０１０−４５５３９Ａ）
【公開日】平成２２年２月２５日（２０１０．２．２５）
【国際特許分類】
【出願番号】特願２００８−２０７４０２（Ｐ２００８−２０７４０２）
【出願日】平成２０年８月１１日（２００８．８．１１）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
【公開日】平成２２年２月２５日（２０１０．２．２５）
【国際特許分類】
【出願日】平成２０年８月１１日（２００８．８．１１）
【出願人】（０００００１００７）キヤノン株式会社 (59,756)
【Ｆターム（参考）】
[ Back to top ]