制御装置、制御システムと制御方法
【課題】 集音の品質を向上させる。
【解決手段】
左右へのパン動作可能なイメージ取得手段と、集音範囲を変更可能な集音手段と、を制御する制御装置であって、前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更手段を備える、ことを特徴とする。
【解決手段】
左右へのパン動作可能なイメージ取得手段と、集音範囲を変更可能な集音手段と、を制御する制御装置であって、前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更手段を備える、ことを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、集音装置を制御する技術に関するものである。
【背景技術】
【０００２】
従来より、マイク内蔵型ビデオカメラ等によりマイクの指向特性とカメラの振れ角、ズーム角を連動させるテレビ会議装置の技術が存在する（特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１０−１５５１０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記技術では、カメラとマイクが一体化されているものであるため、テレビ会議等において集音品質を高めるためにマイクを会議卓の中央等に設置すると、撮影できる被写体（参加者）が限られてしまう。
【０００５】
本発明の目的は、集音の品質を向上させる技術を提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決すべく、本発明に係る制御装置は、左右へのパン動作可能なイメージ取得手段と、集音範囲を変更可能な集音手段と、を制御する制御装置であって、前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更手段を備える、ことを特徴とする。
【０００７】
また、本発明に係る制御システムは、左右へのパン動作手段を備える撮像装置と、集音範囲の変更手段を備える集音装置と、前記撮像装置および前記集音装置を制御する制御装置と、を備え、前記制御装置は、前記撮像装置の位置と前記撮像装置により取得される映像に映りこむ被写体の位置との間の距離と、前記撮像装置のパンの方向と、前記撮像装置の位置と前記集音装置の位置との間の距離と、前記撮像装置の位置を基準とした前記集音装置の位置の方向と、を用いて前記集音装置の集音範囲を変更するよう指示する集音範囲変更指示手段を備える、ことを特徴とする。
【０００８】
また、本発明に係る撮像装置は、左右へのパン動作を行うパン動作手段と、撮影している画角を変更する動作を行う画角変更動作手段と、パン方向を特定するパン方向情報を取得するパン方向情報取得手段と、被写体までの距離を特定する距離情報を取得する距離情報取得手段と、撮影している画角を特定する画角情報を取得する画角情報取得手段と、前記パン方向情報と、前記距離情報と、前記画角情報と、を出力する出力手段と、を備え、前記出力手段は、前記パン動作手段および前記画角変更動作手段のいずれの動作も終了して所定の時間経過した場合に、前記出力を行う、ことを特徴とする。
【０００９】
また、本発明に係る制御方法は、左右へのパン動作可能なイメージ取得手段と、集音範囲を変更可能な集音手段と、を制御する制御装置の制御方法であって、前記制御装置は、前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更ステップを実施する、ことを特徴とする。
【発明の効果】
【００１０】
本発明によると、カメラとマイクを独立して配置可能としつつ集音の品質を向上させることができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態に係るテレビ会議システムの構成例を示す図である。
【図２】テレビ会議システムの機能構成例を示す図である。
【図３】テレビ会議システムのハードウェア構成を示す図である。
【図４】マイクアレイ装置の構成を示す図である。
【図５】テレビ会議システムの配置例を示す図である。
【図６】マイクアレイ位置テーブルの構成例を示す図である。
【図７】マイクアレイ出力レベルテーブルの構成例を示す図である。
【図８】マイクアレイ設定処理のシーケンス図である。
【図９】マイクアレイ位置設定の初期化処理の画面例を説明する説明図である。
【図１０】マイクアレイ設定算出の仕組みを説明する説明図である。
【図１１】出力レベル調整テーブルの構成例を示す図である。
【図１２】マイクアレイ出力レベル調整の仕組みを説明する説明図である。
【発明を実施するための形態】
【００１２】
以下に、本発明に係る第一の実施形態を適用したマイクロホン制御装置を含むテレビ会議システム１について、図面を参照して説明する。
【００１３】
図１は、本発明の実施形態におけるテレビ会議システム１を示す図である。本発明におけるテレビ会議システム１は、サーバー８０と、ネットワーク７０を介してサーバー８０に接続可能な会議端末Ａ２０、会議端末Ｂ２１、会議端末Ｃ２２と、を含む。基本的には、会議端末Ａ２０は会議室Ａ１０に配置され、会議端末Ｂ２１は会議室Ｂ１１に配置され、会議端末Ｃ２２は会議室Ｃ１２に配置されることを想定している。
【００１４】
会議端末Ａ２０には、会議端末Ａ２０と通信可能なカメラＡ３０、マイクアレイＡ４０、ディスプレイＡ５０、スピーカーＡ６０が接続される。会議端末Ａ２０は、マイクロホン制御装置として動作しうる。
【００１５】
カメラＡ３０は、映像情報をデジタルデータとして取得して会議端末Ａ２０に送信し、会議端末Ａ２０から撮影範囲の指示を受け付けて、撮影を行ういわゆるイメージ取得装置、例えばビデオカメラ等である。
【００１６】
マイクアレイＡ４０は、周囲の音を集音してデジタルデータとして取得して会議端末Ａ２０に送信し、会議端末Ａ２０から集音方向および集音感度等の指示を受け付けて、集音を行ういわゆるマイクロホンである。マイクアレイＡ４０は、後述するが、マイクアレイＡ４０の設置位置から放射状に全周にわたる集音範囲を持つように、所定の範囲を集音するマイクを複数配列した装置であり、マイク毎にゲイン調節が可能である。
【００１７】
ディスプレイＡ５０は、接続される会議端末Ａ２０から送信される表示情報を表示出力する。当該表示情報には、会議端末Ａ２０がカメラＡ３０を介して取得した映像情報または他の会議端末Ｂ２１または会議端末Ｃ２２からネットワーク７０を介して受信した映像情報等が含まれる。また、その他、ディスプレイＡ５０は、会議端末Ａ２０から送信される設定値等の設定画面を表示することも可能である。
【００１８】
スピーカーＡ６０は、接続される会議端末Ａ２０から送信される音声情報を出力する。当該音声情報には、会議端末Ａ２０がマイクアレイＡ４０を介して取得した音声情報または他の会議端末Ｂ２１または会議端末Ｃ２２からネットワーク７０を介して受信した音声情報等が含まれる。また、その他、スピーカーＡ６０は、会議端末Ａ２０から送信されるガイダンス等の音声を出力することも可能である。
【００１９】
会議端末Ｂ２１には、会議端末Ｂ２１と通信可能なカメラＢ３１、マイクアレイＢ４１、ディスプレイＢ５１、スピーカーＢ６１が接続される。会議端末Ｂ２１は、マイクロホン制御装置として動作しうる。
【００２０】
カメラＢ３１は、映像情報をデジタルデータとして取得して会議端末Ｂ２１に送信し、会議端末Ｂ２１から撮影範囲の指示を受け付けて、撮影を行ういわゆるイメージ取得装置、例えばビデオカメラ等である。
【００２１】
マイクアレイＢ４１は、周囲の音を集音してデジタルデータとして取得して会議端末Ｂ２１に送信し、会議端末Ｂ２１から集音方向および集音感度等の指示を受け付けて、集音を行ういわゆるマイクロホンである。マイクアレイＢ４１は、後述するが、マイクアレイＢ４１の設置位置から放射状に全周にわたる集音範囲を持つように、所定の範囲を集音するマイクを複数配列した装置であり、マイク毎にゲイン調節が可能である。
【００２２】
ディスプレイＢ５１は、接続される会議端末Ｂ２１から送信される表示情報を表示出力する。当該表示情報には、会議端末Ｂ２１がカメラＢ３１を介して取得した映像情報または他の会議端末Ａ２０または会議端末Ｃ２２からネットワーク７０を介して受信した映像情報等が含まれる。また、その他、ディスプレイＢ５１は、会議端末Ｂ２１から送信される設定値等の設定画面を表示することも可能である。
【００２３】
スピーカーＢ６１は、接続される会議端末Ｂ２１から送信される音声情報を出力する。当該音声情報には、会議端末Ｂ２１がマイクアレイＢ４１を介して取得した音声情報または他の会議端末Ａ２０または会議端末Ｃ２２からネットワーク７０を介して受信した音声情報等が含まれる。また、その他、スピーカーＢ６１は、会議端末Ｂ２１から送信されるガイダンス等の音声を出力することも可能である。
【００２４】
会議端末Ｃ２２には、会議端末Ｃ２２と通信可能なカメラＣ３２、マイクアレイＣ４２、ディスプレイＣ５２、スピーカーＣ６２が接続される。会議端末Ｃ２２は、マイクロホン制御装置として動作しうる。
【００２５】
カメラＣ３２は、映像情報をデジタルデータとして取得して会議端末Ｃ２２に送信し、会議端末Ｃ２２から撮影範囲の指示を受け付けて、撮影を行ういわゆるイメージ取得装置、例えばビデオカメラ等である。
【００２６】
マイクアレイＣ４２は、周囲の音を集音してデジタルデータとして取得して会議端末Ｃ２２に送信し、会議端末Ｃ２２から集音方向および集音感度等の指示を受け付けて、集音を行ういわゆるマイクロホンである。マイクアレイＣ４２は、後述するが、マイクアレイＣ４２の設置位置から放射状に全周にわたる集音範囲を持つように、所定の範囲を集音するマイクを複数配列した装置であり、マイク毎にゲイン調節が可能である。
【００２７】
ディスプレイＣ５２は、接続される会議端末Ｃ２２から送信される表示情報を表示出力する。当該表示情報には、会議端末Ｃ２２がカメラＣ３２を介して取得した映像情報または他の会議端末Ａ２０または会議端末Ｂ２１からネットワーク７０を介して受信した映像情報等が含まれる。また、その他、ディスプレイＣ５２は、会議端末Ｃ２２から送信される設定値等の設定画面を表示することも可能である。
【００２８】
スピーカーＣ６２は、接続される会議端末Ｃ２２から送信される音声情報を出力する。当該音声情報には、会議端末Ｃ２２がマイクアレイＣ４２を介して取得した音声情報または他の会議端末Ａ２０または会議端末Ｂ２１からネットワーク７０を介して受信した音声情報等が含まれる。また、その他、スピーカーＣ６２は、会議端末Ｃ２２から送信されるガイダンス等の音声を出力することも可能である。
【００２９】
ネットワーク７０は、本実施形態においては、いわゆるインターネット等のＴＣＰ／ＩＰ等に準拠した広域ネットワークを想定しているが、これに限られず、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）等のネットワークであってもよい。
【００３０】
サーバー８０は、ネットワーク７０を介して、会議端末Ａ２０、会議端末Ｂ２１、会議端末Ｃ２２間のテレビ会議サービスを実現する。具体的には、例えば、サーバー８０は、会議に参加する対象の会議端末間で仮想会議室を構成・管理し、参加する対象の会議端末間の通信を仲介する。なお、本実施形態においては、サーバー８０は、会議端末の映像データおよび音声データを取得して他の会議端末に配信するものではなく、会議端末間の映像データと音声データの通信経路を構築するに留まる。しかし、これに限らず、会議端末間の映像データおよび音声データを集中的に取得して会議に参加する他の会議端末に配信するものであってもよい。
【００３１】
図２は、テレビ会議システム１の会議室Ａ１０に配置されるカメラＡ３０、会議端末Ａ２０、マイクアレイＡ４０についての機能構成例を示す図である。なお、会議室Ｂ１１、会議室Ｃ１２についてのカメラＢ３１、会議端末Ｂ２１、マイクアレイＢ４１、カメラＣ３２、会議端末Ｃ２２およびマイクアレイＣ４２についても、基本的に同様の機能構成を備えるものとする。また、ディスプレイＡ５０、スピーカーＡ６０、ディスプレイＢ５１、スピーカーＢ６１、ディスプレイＣ５２、スピーカーＣ６２については、図示していないが、通常の機能構成を備えるものとする。
【００３２】
図２に示すように、カメラＡ３０は、パン／ズーム制御部３１０と、カメラ情報通知部３２０と、カメラ操作有効／無効制御部３３０と、を備える。パン／ズーム制御部３１０は、カメラＡ３０が撮影する画角および撮影する方向、すなわち映像に映りこむ範囲を制御する。パン／ズーム制御部３１０は、具体的には、左右への振れ角の変更指示を受け付けると、指示に従って後述する光学装置３５の振れ角の変更を行う。また、画角の変更指示を受け付けると、指示に従って後述する光学装置３５の画角の変更を行う。
【００３３】
なお、パン／ズーム制御部３１０は、パンまたはズームの変更指示に従うことができない場合、例えば、振れ角の変更指示によると、光学装置３５の物理的な可動範囲を超えるような場合、あるいは例えば、画角の変更指示によると、光学装置３５の光学的あるいは画像処理上のズーム（光学ズームあるいはデジタルズーム等）の範囲を超えるような場合には、変更可能な範囲で指示に従うよう制御する。
【００３４】
カメラ情報通知部３２０は、所定のタイミングで振れ角（パン方向）、被写体までの距離、画角についての情報を取得して、接続されている会議端末Ａ２０に対して出力する。なお、本実施形態においては、カメラ情報通知部３２０は、パン／ズーム操作がなされた後、所定の時間（例えば３秒）パン／ズーム操作がなされない場合に、振れ角（パン方向）、被写体までの距離、画角についての情報を取得して、接続されている会議端末Ａ２０に対して出力するものとする。なお、本実施形態においては、振れ角（パン方向）は、台座の向き（正面）とカメラの光軸の向きの差から求められ、被写体までの距離は、所定の測距点において被写体にピントが合った状態の焦点距離から求まる距離であり、画角は、レンズ群の繰り出し量に応じて求められる画角である。
【００３５】
カメラ操作有効／無効制御部３３０は、カメラＡ３０に対する会議端末Ａ２０からの操作の受付の有効／無効を制御する。具体的には、カメラ操作有効／無効制御部３３０は、会議端末Ａ２０からカメラ操作ロック指示を受け付けると、パン／ズーム制御部３１０に対するパン／ズームの変更指示を受け付けないよう操作ロックを行う。また、カメラ操作有効／無効制御部３３０は、会議端末Ａ２０からカメラ操作ロック解除指示を受け付けると、パン／ズーム制御部３１０に対するパン／ズームの変更指示を受け付けるよう操作ロックの解除を行う。
【００３６】
なお、カメラＡ３０は、図示しないが、通常のカメラと同様に、画像取得を開始する指示を受け付けて画像を取得する画像取得制御部、画像取得を終了する指示を受け付けて画像取得を終了する画像取得終了制御部、取得した画像を会議端末Ａ２０等の外部装置またはカメラＡ３０に取り付けられたメモリーカード等の記憶媒体に出力する画像出力制御部、被写体までの距離を特定する測距部、光学装置３５の焦点位置（ピント）を調整するフォーカス制御部等の制御部を備える。また、カメラＡ３０は、会議室Ａ１０のオペレーター（あるいは会議参加者）または会議相手のオペレーター（あるいは会議参加者）からパン、ズーム操作を受け付けて、パンおよびズームを行うことが可能である。
【００３７】
会議端末Ａ２０は、カメラ状態検知部２１０と、マイクアレイ制御部２２０と、マイクアレイ位置データメモリ２３０と、カメラ操作有効／無効指示部２４０と、カメラ操作指示部２５０と、を備える。カメラ状態検知部２１０は、接続されたカメラＡ３０の状態を検知する。具体的には、カメラ状態検知部２１０は、接続されたカメラＡ３０から、振れ角（パン方向）、被写体までの距離、画角についての情報を取得する。さらに、カメラ状態検知部２１０は、カメラＡ３０が撮影した画像内のマイクアレイＡ４０が所定の画面内の位置に有る場合には、カメラＡ３０の振れ角と被写体までの距離に応じて、マイクアレイＡ４０の位置を特定する。
【００３８】
マイクアレイ制御部２２０は、マイクアレイＡ４０の位置と、カメラＡ３０の被写体の位置と、画角と、に応じて、マイクアレイＡ４０のマイクごとのゲイン調整を行う。具体的には、マイクアレイ制御部２２０は、マイクアレイＡ４０の相対的な位置（カメラＡ３０の正面方向からのパン角度と、カメラＡ３０からマイクアレイＡ４０までの直線距離）を記憶したマイクアレイ位置データメモリ２３０からマイク位置を取得する。
【００３９】
そして、マイクアレイ制御部２２０は、カメラＡ３０が映す被写体のカメラ位置から見た方向（振れ角に基づき特定）と、被写体までの距離と、画角と、マイク位置と、を用いて、マイク位置からみた被写体の方向を特定する。マイクアレイ制御部２２０は、マイク位置からみた被写体の方向に応じて、マイクアレイＡ４０のマイクロホンごとに、予め定められたマイクゲイン調整値を含むマイクゲイン調整指示をマイクアレイＡ４０に対して出力する。なお、本実施形態においては、カメラ画角が６０°以上の場合はマイクアンプの出力レベルは調整されないようになっている。しかし、カメラ画角が６０°未満になると、マイクロホンの出力レベルを増減させ、集音範囲の制御が行われる。
【００４０】
マイクアレイ位置データメモリ２３０は、マイクアレイＡ４０の位置を特定する情報を格納する。具体的には、マイクアレイ位置データメモリ２３０は、図６に示すマイクアレイ位置テーブル６００と、図７に示すマイクアレイ出力レベルテーブル６５０とを備える。
【００４１】
マイクアレイ位置テーブル６００は、マイクアレイの位置を格納する。マイクアレイ位置テーブル６００には、カメラＡとマイクアレイＡ間の距離を特定する情報が格納されるカメラＡとマイクアレイＡ間の距離６０１と、カメラの正面からみたマイクアレイのパン方向を特定する基準パン方向角度６０２と、が含まれる。例えば、基準パン方向角度６０２が「−５°」である場合は、カメラＡ３０の正面からマイナス５°方向、つまり左方向に５°パンした方向にマイクアレイが存在する、ということを示す。
【００４２】
マイクアレイ出力レベルテーブル６５０は、マイクアレイを構成するマイクごとの出力レベルを調整する情報を格納する。マイクアレイ出力レベルテーブル６５０は、カメラＡ３０が撮影している画角であるカメラ画角６５１と、集音方向として選択されたマイクロホンの出力レベルとして設定する集音方向として選択されたマイクロホンの出力レベル６５２と、選択されたマイクロホンに隣接するマイクロホンの出力レベルとして設定する選択されたマイクロホンに隣接するマイクロホンの出力レベル６５３と、選択されたマイクロホンおよび隣接するマイクロホンを除くその他のマイクロホンの出力レベルとして設定するその他のマイクロホンの出力レベル６５４と、が含まれる。なお、マイクアレイ出力レベルテーブル６５０に格納された出力レベルは、マイクアレイＡ４０が集音範囲の制御を実施していない状態（３６０°集音状態）の出力レベルを０ｄＢとして、カメラ画角に対応する各マイクアンプの出力レベルを特定するものである。
【００４３】
カメラ操作有効／無効指示部２４０は、カメラＡ３０に対する会議端末Ａ２０からの操作を指示する。具体的には、カメラ操作有効／無効指示部２４０は、カメラＡ３０に対してのカメラ操作ロック指示／カメラ操作ロック解除を指示する。
【００４４】
カメラ操作指示部２５０は、カメラＡ３０、またはネットワーク７０を介して会議中の他のカメラＢ３１またはカメラＣ３２に対する会議端末Ａ２０からの操作を指示する。具体的には、カメラ操作指示部２５０は、同一の会議に参加している会議端末に接続されたカメラのうち指定されたカメラのパン／ズーム操作を受け付けると、当該操作対象のカメラに対してパン／ズームの変更指示を出力する。その際、他の会議端末に接続されたカメラが操作対象であれば、当該会議端末をあて先としてネットワーク７０上に変更指示の情報が含まれる情報を送出する。
【００４５】
また、カメラ操作指示部２５０は、ネットワーク７０を介してカメラのパン／ズームの変更指示を受信すると、接続されているカメラＡ３０に対して、当該変更指示に応じたパン／ズームの変更指示を出力する。このようにすることで、会議に参加中の各会議端末を介して、相手先会議室あるいは自会議室のカメラのパン／ズームを実施することができる。
【００４６】
マイクアレイＡ４０は、マイクゲイン制御部４１０と、マイクロホン４２０ａ〜マイクロホン４２０ｌと、マイクロホン４２０ａ〜４２０ｌのそれぞれに対応してマイクのゲインを調整するマイクアンプ４３０ａ〜４３０ｌと、マイクアンプ４３０ａ〜４３０ｌから得られたゲインを合成するミキサ４４０と、ミキサ４４０で得られた合成出力を音声情報に変換する音声符号化部４５０と、を備える。
【００４７】
マイクゲイン制御部４１０は、マイクロホン４２０ａ〜４２０ｌの各マイクロホンについて、マイクアンプ４３０ａ〜４３０ｌのゲイン調整を行う。本実施形態においては、マイクゲイン制御部４１０は、会議端末Ａ２０からマイクロホン４２０ａ〜４２０ｌのゲイン調整指示を受けて、対応するマイクアンプ４３０ａ〜４３０ｌのゲインを調整する。
【００４８】
音声符号化部４５０は、ミキサ４４０から出力された音声情報を所定のフレームレートでサンプリングし、音声データを出力する。当該処理は、通常の符号化処理である。
【００４９】
図３は、カメラＡ３０と、会議端末Ａ２０と、マイクアレイＡ４０と、についてのハードウェア構成例を示す図である。なお、カメラＢ３１、会議端末Ｂ２１、マイクアレイＢ４１、カメラＣ３２、会議端末Ｃ２２、マイクアレイＣ４２についても、同様のハードウェア構成を備えるものとする。
【００５０】
カメラＡ３０は、本実施形態においては、いわゆる独立して動作を行うビデオカメラ装置である。しかし、これに限らず、ＰＣ（パーソナルコンピュータ）や、ワークステーション、各種携帯電話端末、ＰＤＡ（Personal Digital Assistant）、スマートフォンなどに分類される計算機であってもよい。
【００５１】
カメラＡ３０は、バス１３１と、演算装置１３２と、主記憶装置１３３と、通信装置１３４と、光学装置１３５と、を備える。演算装置１３２は、例えばＣＰＵ（Central Processing Unit）などの演算装置である。
【００５２】
主記憶装置１３３は、例えばＲＡＭ（Random Access Memory）などのメモリ装置である。
【００５３】
通信装置１３４は、インターネットあるいはＬＡＮ等のネットワーク７０に接続される装置および専用ケーブル等で接続される会議端末Ａ２０との通信を行う通信装置である。
【００５４】
光学装置１３５は、例えばビデオカメラレンズ群およびそのフォーカス駆動部、ＣＣＤあるいはＣＭＯＳ等によるイメージャおよび画像生成処理を行う画像処理部等を備えるいわゆる撮像装置である。
【００５５】
演算装置１３２と、主記憶装置１３３と、通信装置１３４と、光学装置１３５とは、バス１３１により互いに接続される。
【００５６】
上記したカメラＡ３０のパン／ズーム制御部３１０は、光学装置１３５により実現される。また、カメラ情報通知部３２０およびカメラ操作有効／無効制御部３３０は、演算装置１３２に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１３３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１３３上にロードされ、演算装置１３２により実行される。
【００５７】
会議端末Ａ２０は、本実施形態においては、独立して動作を行ういわゆる端末装置である。しかし、これに限らず、ＰＣ（パーソナルコンピュータ）や、ワークステーション、サーバー装置、各種携帯電話端末、ＰＤＡ（Personal Digital Assistant）、スマートフォンなどに分類される計算機であってもよい。
【００５８】
会議端末Ａ２０は、バス１２１と、演算装置１２２と、主記憶装置１２３と、通信装置１２４と、を備える。演算装置１２２は、例えばＣＰＵ（Central Processing Unit）などの演算装置である。
【００５９】
主記憶装置１２３は、例えばＲＡＭ（Random Access Memory）などのメモリ装置である。
【００６０】
通信装置１２４は、インターネットあるいはＬＡＮ等のネットワーク７０に接続される装置および専用ケーブル等で接続される他の会議端末およびカメラＡ３０、マイクアレイＡ４０、ディスプレイＡ５０、スピーカーＡ６０等の接続される装置との通信を行う通信装置である。
【００６１】
演算装置１２２と、主記憶装置１２３と、通信装置１２４とは、バス１２１により互いに接続される。
【００６２】
上記した会議端末Ａ２０のカメラ状態検知部２１０、マイクアレイ制御部２２０およびカメラ操作有効／無効指示部２４０は、演算装置１２２に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１２３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１２３上にロードされ、演算装置１２２により実行される。
【００６３】
また、会議端末Ａ２０のマイクアレイ位置データメモリ２３０は、主記憶装置１２３に格納されることで実現される。
【００６４】
マイクアレイＡ４０は、本実施形態においては、独立して動作を行うマイク装置である。マイクアレイＡ４０は、バス１４１と、演算装置１４２と、主記憶装置１４３と、通信装置１４４と、集音装置１４５と、を備える。演算装置１４２は、例えばＣＰＵ（Central Processing Unit）などの演算装置である。
【００６５】
主記憶装置１４３は、例えばＲＡＭ（Random Access Memory）などのメモリ装置である。
【００６６】
通信装置１４４は、インターネットあるいはＬＡＮ等のネットワーク７０に接続される装置および専用ケーブル等で接続される会議端末Ａ２０との通信を行う通信装置である。
【００６７】
集音装置１４５は、例えば図４に示すような構造をしている。図４はマイクアレイ装置の構成を示す図である。マイクアレイＡ４０は、環状に均等に配置された複数のマイクロホン４２０ａ〜４２０ｌにより構成される。一つのマイクロホン（図４ではマイクロホン４２０ａ）には、マイクアレイＡ４０の集音方向の基準となる基準位置マーク４６０が外観上明確に認識可能に設けられている。
【００６８】
マイクロホン４２０ａ〜４２０ｌは、夫々が集音範囲に指向性を持つ。本実施形態においては、夫々が左右各３０度の放射状の範囲で集音可能なマイクロホン４２０ａ〜４２０ｌの１２個が組み合わされてマイクアレイＡ４０を構成する。そのため、マイクアレイＡ４０は周囲３６０°（全方位）について集音範囲を備えるものであるといえる。
【００６９】
マイクアレイＡ４０は、全方位について集音範囲を有するものであるが、上記したように、複数のマイクロホン４２０ａ〜４２０ｌと、および各マイクロホンごとに調整を行うことができるマイクアンプ４３０ａ〜４３０ｌと、を含んで構成されるため、マイクロホンごとのゲインを調整することで、集音範囲を制御することができる。
【００７０】
例えば、図４においては、発言者の方向（角度４６１）を基準位置マーク４６０を基準に特定し、当該方向に集音範囲を備えるマイクロホン４２０ｅのゲインを他のマイクロホンのゲインよりも高くすることで、より発言者の発言を集音し易く、周囲の雑音を抑えることができる。
【００７１】
演算装置１４２と、主記憶装置１４３と、通信装置１４４と、集音装置１４５とは、バス１４１により互いに接続される。
【００７２】
上記したマイクアレイＡ４０のマイクロホン４２０ａ〜４２０ｌ、マイクアンプ４３０ａ〜４３０ｌおよびミキサ４４０は、集音装置１４５により実現される。また、マイクアレイＡ４０のマイクゲイン制御部４１０および音声符号化部４５０は、演算装置１４２に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１４３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１４３上にロードされ、演算装置１４２により実行される。
【００７３】
以上が、本実施形態におけるテレビ会議システム１のハードウェア構成例である。しかし、これに限らず、その他のハードウェアを用いて構成されるものであってもよい。例えば、ネットワーク７０を無線によるネットワークあるいは携帯電話網とし、会議端末とカメラ、マイクアレイ、ディスプレイ、スピーカーをBluetooth（登録商標）等の無線通信により接続可能とするものであってもよい。
【００７４】
[動作の説明]次に、本実施形態におけるテレビ会議システム１の動作を説明する。図５は、本実施形態におけるテレビ会議システム１のカメラＡ３０とマイクアレイＡ４０についての配置例を示す図である。図５においては、マイクアレイＡ４０を会議卓上（望ましくは、会議参加者の中心付近）、カメラＡ３０を会議卓の片端に配置する。この時、マイクアレイＡ４０は基準位置マーク４６０がカメラＡ３０の正面に向けて設置されるものとする。
【００７５】
ここで、カメラＡ３０の正面方向を基準（０度）とし、右方向をプラス方向、左方向をマイナス方向として３６０度法により表すと、カメラＡ３０からみたマイクアレイＡ４０の設置方向５０１は、マイナス（−）５°、すなわちカメラＡ３０の正面より若干左方向にマイクアレイＡ４０が配置されているものとする。なお、マイクアレイＡ４０の位置の基準は、基準位置マーク４６０の位置としている。また、カメラＡ３０からマイクアレイＡ４０までの距離５００は、２ｍであるとする。
【００７６】
当該情報は、後述する初期化処理において特定され、マイクアレイ位置データメモリ２３０のマイクアレイ位置テーブル６００に格納される。
【００７７】
ここで、初期化処理について説明する。まず、カメラＡ３０によりマイクアレイＡ４０を図９に示すようにズームアップして初期設定映像３４０として撮影し、焦点をマイクアレイＡ４０の基準位置マーク４６０に合わせる。当該操作は、会議室Ａ１０を使用する会議参加者が適宜光学装置３５を操作して実施する。
【００７８】
その際、会議端末Ａ２０の図示しない制御部は、会議室Ａ１０のディスプレイＡ５０に初期設定映像３４０を表示させる。制御部は、初期化処理においては映像の中心に照準の基準を示すスコープ３５０を重畳して表示させる。会議参加者は、スコープ３５０が基準位置マーク４６０と重なるようにカメラＡ３０の向き（パン方向）を調整しピントを合わせる。
【００７９】
カメラ情報通知部３２０は、被写体にピントが合った時の焦点距離に基づき、カメラＡ３０とマイクアレイＡ４０間の距離５００および設置方向５０１を特定し、会議端末Ａ２０に対し通知する。
【００８０】
以上が、初期化処理の流れである。初期化処理により、カメラＡ３０からみたマイクアレイＡ４０の位置を特定できる。
【００８１】
次に、図８を用いて、会議室Ａ１０に関する会議中のマイクアレイ制御処理について説明する。マイクアレイ制御処理では、カメラが映す被写体周辺の音声を高品質に集音する。
【００８２】
まず、カメラＡ３０は、パン／ズーム操作を行う（ステップＳ００１）。具体的には、カメラＡ３０のカメラ操作有効／無効制御部３３０は、会議室Ａ１０の会議参加者による会議端末Ａ２０の操作、または会議に参加している他の会議端末Ｂ２１または会議端末Ｃ２２の操作に応じたカメラＡ３０に対するパン／ズームの変更指示を受け付ける。そして、カメラ操作が有効である場合に、パン／ズーム制御部３１０は、受け付けた変更指示に応じたパン／ズーム操作を実現するよう光学装置３５を制御する。なお、カメラ操作が無効であれば、カメラ操作有効／無効制御部３３０は、受け付けた変更指示を破棄し、応答しない。
【００８３】
次に、カメラ情報通知部３２０は、規定の時間、カメラ操作がなされなかったか否かを判定する（ステップＳ００２）。具体的には、カメラ情報通知部３２０は、直近に実施したステップＳ００１のパン／ズーム操作の終了後、所定の時間（例えば、３秒）が経過したか否かを判定する。規定の時間内にカメラ操作がなされた場合、すなわち所定の時間が経っていない場合（ステップＳ００２にて「Ｎｏ」の場合）には、カメラ情報通知部３２０は、ステップＳ００２を再度実施する。
【００８４】
規定の時間内にカメラ操作がなされなかった場合、すなわち所定の時間が経った場合（ステップＳ００２にて「Ｙｅｓ」の場合）には、カメラ情報通知部３２０は、カメラのパン方向を特定して会議端末Ａ２０に通知し（ステップＳ００３）、カメラと被写体との距離を特定して会議端末Ａ２０に通知し（ステップＳ００４）、カメラが撮影している画角を特定して会議端末Ａ２０に通知する（ステップＳ００５）。
【００８５】
なお、上記したように、本実施形態においては、カメラ情報通知部３２０は、パン方向は、台座の向き（正面）とカメラの光軸の向きの差から特定し、被写体までの距離は、所定の測距点において被写体にピントが合った状態の焦点距離から求め、画角は、レンズ群の繰り出し量に応じて求める。
【００８６】
会議端末Ａ２０のカメラ状態検知部２１０が、ステップＳ００３〜Ｓ００５による通知を受け付けると、カメラ操作有効／無効指示部２４０は、カメラ操作ロック指示をカメラＡ３０に対して行う（ステップＳ００６）。
【００８７】
カメラＡ３０のカメラ操作有効／無効制御部３３０は、ステップＳ００６においてカメラ操作ロック指示を受け付けると、パン／ズームの操作を無効に設定する（ステップＳ００７）。
【００８８】
会議端末Ａ２０のマイクアレイ制御部２２０は、後述するマイクアレイ設定算出処理を実施する（ステップＳ００８）。
【００８９】
そして、マイクアレイ制御部２２０は、マイクアレイ設定算出処理により特定したマイクゲインの設定値を含むマイクゲイン設定指示をマイクアレイＡ４０のマイクゲイン制御部４１０に対して行う（ステップＳ００９）。
【００９０】
マイクアレイＡ４０のマイクゲイン制御部４１０は、マイクゲイン設定処理を実施する（ステップＳ０１０）。具体的には、マイクゲイン制御部４１０は、ステップＳ００９において指示されたマイクゲイン設定指示に応じて、マイクアンプ４３０ａ〜４３０ｌのそれぞれに対してマイクゲインを設定する。
【００９１】
カメラ操作有効／無効指示部２４０は、カメラ操作ロック解除指示をカメラＡ３０に対して行う（ステップＳ０１１）。
【００９２】
カメラＡ３０のカメラ操作有効／無効制御部３３０は、ステップＳ０１１においてカメラ操作ロック解除指示を受け付けると、カメラ操作ロック解除処理を行う（ステップＳ０１２）。具体的には、カメラ操作有効／無効制御部３３０は、パン／ズームの操作を有効に受け付ける状態へ移行する。
【００９３】
以上が、マイクアレイ制御処理の流れである。マイクアレイ制御処理によると、左右へのパン動作可能なイメージ取得手段の位置とイメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、イメージ取得手段のパンの方向と、イメージ取得手段の位置と集音範囲を変更可能な集音手段の位置との間の距離と、イメージ取得手段の位置を基準とした集音手段の位置の方向と、を用いて集音手段の集音範囲を変更することができる。すなわち、カメラとマイクが独立して配置されている状態において、被写体の方向にマイク感度を高めることができるため、集音の品質を向上させることができるといえる。
【００９４】
次に、図１０を用いて、上記マイクアレイ制御処理のステップＳ００８にて実施するマイクアレイ設定算出処理の処理およびその原理について説明する。本説明においては、図１０に示すような配置で会議がなされている前提とする。すなわち、図５に示したカメラＡ３０とマイクアレイＡ４０の配置がなされている状態で、発言者に向けられたカメラＡ３０の光軸方向（パン角度５０３）と、カメラＡ３０からみたマイクアレイＡ４０の方向（設置方向５０１）と、の差分を差分角α５０４とする。すなわち、カメラＡ３０の正面からのパン角度５０３は、設置方向５０１と、差分角α５０４とを合成した角度とする。
【００９５】
また、マイクアレイＡ４０と被写体との距離を距離ａとし、被写体とカメラＡ３０との距離を距離ｂ５０２とし、カメラＡ３０とマイクアレイＡ４０との距離をｃ５００とする。また、カメラＡ３０の撮影する画角５０５は、発言者が十分に視野に捕捉可能な画角であるとする。
【００９６】
また、発言者からみたマイクアレイＡ４０の方向と、カメラＡ３０の方向と、の差分の角度を差分角γとし、マイクアレイＡ４０からみた発言者の方向と、カメラＡ３０の方向と、の差分の角度を差分角βとする。
【００９７】
上記のように配置される場合において、距離ａ、距離ｂ５０２、距離ｃ５００および差分角α５０４、差分角β、差分角γの間では、余弦定理９０（下記式１、式２、式３）の関係が成立する。
【００９８】
【００９９】
【０１００】
【０１０１】
すなわち、上記の関係が成立するといえる。そのため、マイクアレイ制御部２２０は、上記式１、式２、式３の式を解くことで、マイクアレイＡ４０が集音する方向（すなわち、差分角β）を特定する。
【０１０２】
本実施形態においては、マイクアレイ制御部２２０は、ステップＳ００３にてパン方向を、ステップＳ００４にてカメラＡ３０から被写体までの距離を、ステップＳ００５にて画角の情報を受け取っており、初期化処理において格納したマイクアレイ位置テーブル６００のカメラＡとマイクアレイＡ間の距離６０１と、基準パン方向角度６０２とを読み出すことができる。マイクアレイ制御部２２０は、パン方向と基準パン方向角度６０２との差から差分角α５０４を特定し、カメラＡ３０から被写体までの距離を距離ｂ５０２として特定し、カメラＡとマイクアレイＡ間の距離６０１を距離ｃ５００として特定し、余弦定理９０の各式に代入することで、差分角βを算出する。
【０１０３】
そして、マイクアレイ制御部２２０は、差分角βの方向が含まれるマイクロホン４２０を集音方向のマイクロホンとして特定し、当該マイクロホンに隣接するマイクロホン４２０についても特定する。そして、ステップＳ００５にて受け取った画角の情報と、マイクアレイ出力レベルテーブル６５０の情報と、を用いてマイクアンプ４３０の出力レベル（マイクゲイン設定値）を特定する。なお、集音方向のマイクロホンの感度（ゲイン）を他のいずれのマイクロホンの感度よりも高く設定し、集音方向のマイクロホンおよび集音方向のマイクロホンに隣接するマイクロホン以外のマイクロホンの感度（ゲイン）を他のいずれのマイクロホンの感度よりも低く設定することで、より発言者の発言内容を高品質に得ることができる。
【０１０４】
以上が、マイクアレイ設定算出処理の原理および処理内容である。
【０１０５】
以上、本発明に係る第一の実施形態を適用したマイクロホン制御装置を含むテレビ会議システム１について説明した。第一の実施形態を適用したマイクロホン制御装置である会議端末Ａ２０、Ｂ２１、Ｃ２２によると、カメラとマイクが独立して配置されている状態において、被写体の方向にマイク感度を高めることができるため、集音の品質を向上させることができるといえる。
【０１０６】
本発明は、上記第一の実施形態に制限されない。上記第一の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。例えば、上記第一の実施形態においては、会議端末Ａ２０は、画角に応じて集音方向のマイクアンプの出力レベルを特定している。しかし、これに限られず、マイクアレイから発言者までの距離に応じて出力レベルを調整するようにしてもよい。例えば、図１１に示す出力レベル調整テーブル７００をマイクアレイ位置データメモリ２３０に格納しておき、マイクアレイ設定算出処理において算出した出力レベルを調整ようにしてもよい。これにより、より適切な出力レベルを設定することができるため、適切な音質を確保することができるといえる。
【０１０７】
具体的に説明すると、出力レベル調整テーブル７００は、マイクアレイから発言者までの距離７０１に応じて、集音方向として選択されたマイクロホンの出力レベル７０２が対応付けて記憶されている。マイクアレイ制御部２２０は、マイクアレイＡ４０から発言者までの距離、すなわち距離ａを余弦定理９０により算出すると、出力レベル調整テーブル７００を用いて当該距離ａに応じてマイクロホンの出力レベルを取得する。なお、マイクアレイ制御部２２０は、マイクアレイ出力レベルテーブル６５０と画角とを用いて特定した集音方向のマイクロホンの出力レベル以下の範囲内で、出力レベルを設定するものとする。そして、マイクアレイ制御部２２０は、取得した出力レベルでマイクゲイン設定指示を行う。
【０１０８】
すなわち、当該変形実施形態によると、マイクアレイＡ４０の集音方向、集音範囲の制御だけでなく、発言者の背景雑音低減をも行うことができるといえる。
【０１０９】
例を挙げると、図１２に示すように、マイクアレイＡ４０の集音可能範囲５２０が会議参加者の着座位置に対して十分に広い範囲であるとする。この場合、第一の実施形態におけるマイクロホン制御装置での集音範囲制御実施後のマイクアレイＡ４０の集音範囲は制御後の集音範囲５２１となる。この時、集音方向として選択されたマイクロホン４２０の出力レベルを、図１１で示されるテーブルを用いて低減させることにより、マイクアレイＡ４０の集音範囲は集音範囲５２２に減少する。つまり、発言者の背後に発生する雑音を低減することができる。
【０１１０】
ここまで説明した実施形態においては、マイクアレイＡ４０を会議卓上に配置し、カメラＡ３０を会議卓端に配置するものとしているが、マイクアレイＡ４０の集音範囲内、カメラＡ３０の撮影範囲内であって、かつカメラＡ３０で撮影可能な位置に会議参加者がいるのであれば、それぞれをどこに置いても構わない。また、本実施例において説明した会議端末Ａ２０内の各部の機能を、カメラＡ３０またはマイクアレイＡ４０に分散させて内蔵し、カメラＡ３０とマイクアレイＡ４０間で連携して処理を行うようにしても良い。さらに、本発明はテレビ会議システムだけではなく、ネットワーク監視カメラを用いた監視システムでも同様に適用することができる。
【０１１１】
また、上記した実施形態の変形は、単独で適用されてもよいし、部分的に組み合わされて適用されるようにしてもよい。
【０１１２】
以上、本発明について、実施形態を中心に説明した。なお、上記の実施形態では、インターネット等の通信はＨＴＴＰやＦＴＰ、ＳＩＰ、ＰＯＰ、ＳＭＴＰ、ＴＣＰ／ＩＰ等の既存のプロトコルによる通信を想定しているが、これに限らず、他のプロトコルによる通信であってもよい。
【符号の説明】
【０１１３】
１・・・テレビ会議システム、１０・・・会議室Ａ、１１・・・会議室Ｂ、１２・・・会議室Ｃ、２０・・・会議端末Ａ、２１・・・会議端末Ｂ、２２・・・会議端末Ｃ、３０・・・カメラＡ、３１・・・カメラＢ、３２・・・カメラＣ、４０・・・マイクアレイＡ、４１・・・マイクアレイＢ、４２・・・マイクアレイＣ、５０・・・ディスプレイＡ、５１・・・ディスプレイＢ、５２・・・ディスプレイＣ、６０・・・スピーカーＡ、６１・・・スピーカーＢ、６２・・・スピーカーＣ、７０・・・ネットワーク、８０・・・サーバー、９０・・・余弦定理、３４０・・・初期設定映像、３５０・・・スコープ、４２０ａ-４２０ｌ・・・マイクロホン、４３０ａ-４３０ｌ・・・マイクアンプ、５００・・・距離ｃ、５０１・・・設置方向、５０２・・・距離ｂ、５０３・・・パン角度、５０４・・・差分角α、５０５・・・画角、５２０・・・集音可能範囲、５２１・・・集音範囲、５２２・・・集音範囲、６００・・・マイクアレイ位置テーブル、６５０・・・マイクアレイ出力レベルテーブル、７００・・・出力レベル調整テーブル
【技術分野】
【０００１】
本発明は、集音装置を制御する技術に関するものである。
【背景技術】
【０００２】
従来より、マイク内蔵型ビデオカメラ等によりマイクの指向特性とカメラの振れ角、ズーム角を連動させるテレビ会議装置の技術が存在する（特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平１０−１５５１０７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記技術では、カメラとマイクが一体化されているものであるため、テレビ会議等において集音品質を高めるためにマイクを会議卓の中央等に設置すると、撮影できる被写体（参加者）が限られてしまう。
【０００５】
本発明の目的は、集音の品質を向上させる技術を提供することにある。
【課題を解決するための手段】
【０００６】
上記課題を解決すべく、本発明に係る制御装置は、左右へのパン動作可能なイメージ取得手段と、集音範囲を変更可能な集音手段と、を制御する制御装置であって、前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更手段を備える、ことを特徴とする。
【０００７】
また、本発明に係る制御システムは、左右へのパン動作手段を備える撮像装置と、集音範囲の変更手段を備える集音装置と、前記撮像装置および前記集音装置を制御する制御装置と、を備え、前記制御装置は、前記撮像装置の位置と前記撮像装置により取得される映像に映りこむ被写体の位置との間の距離と、前記撮像装置のパンの方向と、前記撮像装置の位置と前記集音装置の位置との間の距離と、前記撮像装置の位置を基準とした前記集音装置の位置の方向と、を用いて前記集音装置の集音範囲を変更するよう指示する集音範囲変更指示手段を備える、ことを特徴とする。
【０００８】
また、本発明に係る撮像装置は、左右へのパン動作を行うパン動作手段と、撮影している画角を変更する動作を行う画角変更動作手段と、パン方向を特定するパン方向情報を取得するパン方向情報取得手段と、被写体までの距離を特定する距離情報を取得する距離情報取得手段と、撮影している画角を特定する画角情報を取得する画角情報取得手段と、前記パン方向情報と、前記距離情報と、前記画角情報と、を出力する出力手段と、を備え、前記出力手段は、前記パン動作手段および前記画角変更動作手段のいずれの動作も終了して所定の時間経過した場合に、前記出力を行う、ことを特徴とする。
【０００９】
また、本発明に係る制御方法は、左右へのパン動作可能なイメージ取得手段と、集音範囲を変更可能な集音手段と、を制御する制御装置の制御方法であって、前記制御装置は、前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更ステップを実施する、ことを特徴とする。
【発明の効果】
【００１０】
本発明によると、カメラとマイクを独立して配置可能としつつ集音の品質を向上させることができる。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態に係るテレビ会議システムの構成例を示す図である。
【図２】テレビ会議システムの機能構成例を示す図である。
【図３】テレビ会議システムのハードウェア構成を示す図である。
【図４】マイクアレイ装置の構成を示す図である。
【図５】テレビ会議システムの配置例を示す図である。
【図６】マイクアレイ位置テーブルの構成例を示す図である。
【図７】マイクアレイ出力レベルテーブルの構成例を示す図である。
【図８】マイクアレイ設定処理のシーケンス図である。
【図９】マイクアレイ位置設定の初期化処理の画面例を説明する説明図である。
【図１０】マイクアレイ設定算出の仕組みを説明する説明図である。
【図１１】出力レベル調整テーブルの構成例を示す図である。
【図１２】マイクアレイ出力レベル調整の仕組みを説明する説明図である。
【発明を実施するための形態】
【００１２】
以下に、本発明に係る第一の実施形態を適用したマイクロホン制御装置を含むテレビ会議システム１について、図面を参照して説明する。
【００１３】
図１は、本発明の実施形態におけるテレビ会議システム１を示す図である。本発明におけるテレビ会議システム１は、サーバー８０と、ネットワーク７０を介してサーバー８０に接続可能な会議端末Ａ２０、会議端末Ｂ２１、会議端末Ｃ２２と、を含む。基本的には、会議端末Ａ２０は会議室Ａ１０に配置され、会議端末Ｂ２１は会議室Ｂ１１に配置され、会議端末Ｃ２２は会議室Ｃ１２に配置されることを想定している。
【００１４】
会議端末Ａ２０には、会議端末Ａ２０と通信可能なカメラＡ３０、マイクアレイＡ４０、ディスプレイＡ５０、スピーカーＡ６０が接続される。会議端末Ａ２０は、マイクロホン制御装置として動作しうる。
【００１５】
カメラＡ３０は、映像情報をデジタルデータとして取得して会議端末Ａ２０に送信し、会議端末Ａ２０から撮影範囲の指示を受け付けて、撮影を行ういわゆるイメージ取得装置、例えばビデオカメラ等である。
【００１６】
マイクアレイＡ４０は、周囲の音を集音してデジタルデータとして取得して会議端末Ａ２０に送信し、会議端末Ａ２０から集音方向および集音感度等の指示を受け付けて、集音を行ういわゆるマイクロホンである。マイクアレイＡ４０は、後述するが、マイクアレイＡ４０の設置位置から放射状に全周にわたる集音範囲を持つように、所定の範囲を集音するマイクを複数配列した装置であり、マイク毎にゲイン調節が可能である。
【００１７】
ディスプレイＡ５０は、接続される会議端末Ａ２０から送信される表示情報を表示出力する。当該表示情報には、会議端末Ａ２０がカメラＡ３０を介して取得した映像情報または他の会議端末Ｂ２１または会議端末Ｃ２２からネットワーク７０を介して受信した映像情報等が含まれる。また、その他、ディスプレイＡ５０は、会議端末Ａ２０から送信される設定値等の設定画面を表示することも可能である。
【００１８】
スピーカーＡ６０は、接続される会議端末Ａ２０から送信される音声情報を出力する。当該音声情報には、会議端末Ａ２０がマイクアレイＡ４０を介して取得した音声情報または他の会議端末Ｂ２１または会議端末Ｃ２２からネットワーク７０を介して受信した音声情報等が含まれる。また、その他、スピーカーＡ６０は、会議端末Ａ２０から送信されるガイダンス等の音声を出力することも可能である。
【００１９】
会議端末Ｂ２１には、会議端末Ｂ２１と通信可能なカメラＢ３１、マイクアレイＢ４１、ディスプレイＢ５１、スピーカーＢ６１が接続される。会議端末Ｂ２１は、マイクロホン制御装置として動作しうる。
【００２０】
カメラＢ３１は、映像情報をデジタルデータとして取得して会議端末Ｂ２１に送信し、会議端末Ｂ２１から撮影範囲の指示を受け付けて、撮影を行ういわゆるイメージ取得装置、例えばビデオカメラ等である。
【００２１】
マイクアレイＢ４１は、周囲の音を集音してデジタルデータとして取得して会議端末Ｂ２１に送信し、会議端末Ｂ２１から集音方向および集音感度等の指示を受け付けて、集音を行ういわゆるマイクロホンである。マイクアレイＢ４１は、後述するが、マイクアレイＢ４１の設置位置から放射状に全周にわたる集音範囲を持つように、所定の範囲を集音するマイクを複数配列した装置であり、マイク毎にゲイン調節が可能である。
【００２２】
ディスプレイＢ５１は、接続される会議端末Ｂ２１から送信される表示情報を表示出力する。当該表示情報には、会議端末Ｂ２１がカメラＢ３１を介して取得した映像情報または他の会議端末Ａ２０または会議端末Ｃ２２からネットワーク７０を介して受信した映像情報等が含まれる。また、その他、ディスプレイＢ５１は、会議端末Ｂ２１から送信される設定値等の設定画面を表示することも可能である。
【００２３】
スピーカーＢ６１は、接続される会議端末Ｂ２１から送信される音声情報を出力する。当該音声情報には、会議端末Ｂ２１がマイクアレイＢ４１を介して取得した音声情報または他の会議端末Ａ２０または会議端末Ｃ２２からネットワーク７０を介して受信した音声情報等が含まれる。また、その他、スピーカーＢ６１は、会議端末Ｂ２１から送信されるガイダンス等の音声を出力することも可能である。
【００２４】
会議端末Ｃ２２には、会議端末Ｃ２２と通信可能なカメラＣ３２、マイクアレイＣ４２、ディスプレイＣ５２、スピーカーＣ６２が接続される。会議端末Ｃ２２は、マイクロホン制御装置として動作しうる。
【００２５】
カメラＣ３２は、映像情報をデジタルデータとして取得して会議端末Ｃ２２に送信し、会議端末Ｃ２２から撮影範囲の指示を受け付けて、撮影を行ういわゆるイメージ取得装置、例えばビデオカメラ等である。
【００２６】
マイクアレイＣ４２は、周囲の音を集音してデジタルデータとして取得して会議端末Ｃ２２に送信し、会議端末Ｃ２２から集音方向および集音感度等の指示を受け付けて、集音を行ういわゆるマイクロホンである。マイクアレイＣ４２は、後述するが、マイクアレイＣ４２の設置位置から放射状に全周にわたる集音範囲を持つように、所定の範囲を集音するマイクを複数配列した装置であり、マイク毎にゲイン調節が可能である。
【００２７】
ディスプレイＣ５２は、接続される会議端末Ｃ２２から送信される表示情報を表示出力する。当該表示情報には、会議端末Ｃ２２がカメラＣ３２を介して取得した映像情報または他の会議端末Ａ２０または会議端末Ｂ２１からネットワーク７０を介して受信した映像情報等が含まれる。また、その他、ディスプレイＣ５２は、会議端末Ｃ２２から送信される設定値等の設定画面を表示することも可能である。
【００２８】
スピーカーＣ６２は、接続される会議端末Ｃ２２から送信される音声情報を出力する。当該音声情報には、会議端末Ｃ２２がマイクアレイＣ４２を介して取得した音声情報または他の会議端末Ａ２０または会議端末Ｂ２１からネットワーク７０を介して受信した音声情報等が含まれる。また、その他、スピーカーＣ６２は、会議端末Ｃ２２から送信されるガイダンス等の音声を出力することも可能である。
【００２９】
ネットワーク７０は、本実施形態においては、いわゆるインターネット等のＴＣＰ／ＩＰ等に準拠した広域ネットワークを想定しているが、これに限られず、ＬＡＮ（Local Area Network）やＷＡＮ（Wide Area Network）等のネットワークであってもよい。
【００３０】
サーバー８０は、ネットワーク７０を介して、会議端末Ａ２０、会議端末Ｂ２１、会議端末Ｃ２２間のテレビ会議サービスを実現する。具体的には、例えば、サーバー８０は、会議に参加する対象の会議端末間で仮想会議室を構成・管理し、参加する対象の会議端末間の通信を仲介する。なお、本実施形態においては、サーバー８０は、会議端末の映像データおよび音声データを取得して他の会議端末に配信するものではなく、会議端末間の映像データと音声データの通信経路を構築するに留まる。しかし、これに限らず、会議端末間の映像データおよび音声データを集中的に取得して会議に参加する他の会議端末に配信するものであってもよい。
【００３１】
図２は、テレビ会議システム１の会議室Ａ１０に配置されるカメラＡ３０、会議端末Ａ２０、マイクアレイＡ４０についての機能構成例を示す図である。なお、会議室Ｂ１１、会議室Ｃ１２についてのカメラＢ３１、会議端末Ｂ２１、マイクアレイＢ４１、カメラＣ３２、会議端末Ｃ２２およびマイクアレイＣ４２についても、基本的に同様の機能構成を備えるものとする。また、ディスプレイＡ５０、スピーカーＡ６０、ディスプレイＢ５１、スピーカーＢ６１、ディスプレイＣ５２、スピーカーＣ６２については、図示していないが、通常の機能構成を備えるものとする。
【００３２】
図２に示すように、カメラＡ３０は、パン／ズーム制御部３１０と、カメラ情報通知部３２０と、カメラ操作有効／無効制御部３３０と、を備える。パン／ズーム制御部３１０は、カメラＡ３０が撮影する画角および撮影する方向、すなわち映像に映りこむ範囲を制御する。パン／ズーム制御部３１０は、具体的には、左右への振れ角の変更指示を受け付けると、指示に従って後述する光学装置３５の振れ角の変更を行う。また、画角の変更指示を受け付けると、指示に従って後述する光学装置３５の画角の変更を行う。
【００３３】
なお、パン／ズーム制御部３１０は、パンまたはズームの変更指示に従うことができない場合、例えば、振れ角の変更指示によると、光学装置３５の物理的な可動範囲を超えるような場合、あるいは例えば、画角の変更指示によると、光学装置３５の光学的あるいは画像処理上のズーム（光学ズームあるいはデジタルズーム等）の範囲を超えるような場合には、変更可能な範囲で指示に従うよう制御する。
【００３４】
カメラ情報通知部３２０は、所定のタイミングで振れ角（パン方向）、被写体までの距離、画角についての情報を取得して、接続されている会議端末Ａ２０に対して出力する。なお、本実施形態においては、カメラ情報通知部３２０は、パン／ズーム操作がなされた後、所定の時間（例えば３秒）パン／ズーム操作がなされない場合に、振れ角（パン方向）、被写体までの距離、画角についての情報を取得して、接続されている会議端末Ａ２０に対して出力するものとする。なお、本実施形態においては、振れ角（パン方向）は、台座の向き（正面）とカメラの光軸の向きの差から求められ、被写体までの距離は、所定の測距点において被写体にピントが合った状態の焦点距離から求まる距離であり、画角は、レンズ群の繰り出し量に応じて求められる画角である。
【００３５】
カメラ操作有効／無効制御部３３０は、カメラＡ３０に対する会議端末Ａ２０からの操作の受付の有効／無効を制御する。具体的には、カメラ操作有効／無効制御部３３０は、会議端末Ａ２０からカメラ操作ロック指示を受け付けると、パン／ズーム制御部３１０に対するパン／ズームの変更指示を受け付けないよう操作ロックを行う。また、カメラ操作有効／無効制御部３３０は、会議端末Ａ２０からカメラ操作ロック解除指示を受け付けると、パン／ズーム制御部３１０に対するパン／ズームの変更指示を受け付けるよう操作ロックの解除を行う。
【００３６】
なお、カメラＡ３０は、図示しないが、通常のカメラと同様に、画像取得を開始する指示を受け付けて画像を取得する画像取得制御部、画像取得を終了する指示を受け付けて画像取得を終了する画像取得終了制御部、取得した画像を会議端末Ａ２０等の外部装置またはカメラＡ３０に取り付けられたメモリーカード等の記憶媒体に出力する画像出力制御部、被写体までの距離を特定する測距部、光学装置３５の焦点位置（ピント）を調整するフォーカス制御部等の制御部を備える。また、カメラＡ３０は、会議室Ａ１０のオペレーター（あるいは会議参加者）または会議相手のオペレーター（あるいは会議参加者）からパン、ズーム操作を受け付けて、パンおよびズームを行うことが可能である。
【００３７】
会議端末Ａ２０は、カメラ状態検知部２１０と、マイクアレイ制御部２２０と、マイクアレイ位置データメモリ２３０と、カメラ操作有効／無効指示部２４０と、カメラ操作指示部２５０と、を備える。カメラ状態検知部２１０は、接続されたカメラＡ３０の状態を検知する。具体的には、カメラ状態検知部２１０は、接続されたカメラＡ３０から、振れ角（パン方向）、被写体までの距離、画角についての情報を取得する。さらに、カメラ状態検知部２１０は、カメラＡ３０が撮影した画像内のマイクアレイＡ４０が所定の画面内の位置に有る場合には、カメラＡ３０の振れ角と被写体までの距離に応じて、マイクアレイＡ４０の位置を特定する。
【００３８】
マイクアレイ制御部２２０は、マイクアレイＡ４０の位置と、カメラＡ３０の被写体の位置と、画角と、に応じて、マイクアレイＡ４０のマイクごとのゲイン調整を行う。具体的には、マイクアレイ制御部２２０は、マイクアレイＡ４０の相対的な位置（カメラＡ３０の正面方向からのパン角度と、カメラＡ３０からマイクアレイＡ４０までの直線距離）を記憶したマイクアレイ位置データメモリ２３０からマイク位置を取得する。
【００３９】
そして、マイクアレイ制御部２２０は、カメラＡ３０が映す被写体のカメラ位置から見た方向（振れ角に基づき特定）と、被写体までの距離と、画角と、マイク位置と、を用いて、マイク位置からみた被写体の方向を特定する。マイクアレイ制御部２２０は、マイク位置からみた被写体の方向に応じて、マイクアレイＡ４０のマイクロホンごとに、予め定められたマイクゲイン調整値を含むマイクゲイン調整指示をマイクアレイＡ４０に対して出力する。なお、本実施形態においては、カメラ画角が６０°以上の場合はマイクアンプの出力レベルは調整されないようになっている。しかし、カメラ画角が６０°未満になると、マイクロホンの出力レベルを増減させ、集音範囲の制御が行われる。
【００４０】
マイクアレイ位置データメモリ２３０は、マイクアレイＡ４０の位置を特定する情報を格納する。具体的には、マイクアレイ位置データメモリ２３０は、図６に示すマイクアレイ位置テーブル６００と、図７に示すマイクアレイ出力レベルテーブル６５０とを備える。
【００４１】
マイクアレイ位置テーブル６００は、マイクアレイの位置を格納する。マイクアレイ位置テーブル６００には、カメラＡとマイクアレイＡ間の距離を特定する情報が格納されるカメラＡとマイクアレイＡ間の距離６０１と、カメラの正面からみたマイクアレイのパン方向を特定する基準パン方向角度６０２と、が含まれる。例えば、基準パン方向角度６０２が「−５°」である場合は、カメラＡ３０の正面からマイナス５°方向、つまり左方向に５°パンした方向にマイクアレイが存在する、ということを示す。
【００４２】
マイクアレイ出力レベルテーブル６５０は、マイクアレイを構成するマイクごとの出力レベルを調整する情報を格納する。マイクアレイ出力レベルテーブル６５０は、カメラＡ３０が撮影している画角であるカメラ画角６５１と、集音方向として選択されたマイクロホンの出力レベルとして設定する集音方向として選択されたマイクロホンの出力レベル６５２と、選択されたマイクロホンに隣接するマイクロホンの出力レベルとして設定する選択されたマイクロホンに隣接するマイクロホンの出力レベル６５３と、選択されたマイクロホンおよび隣接するマイクロホンを除くその他のマイクロホンの出力レベルとして設定するその他のマイクロホンの出力レベル６５４と、が含まれる。なお、マイクアレイ出力レベルテーブル６５０に格納された出力レベルは、マイクアレイＡ４０が集音範囲の制御を実施していない状態（３６０°集音状態）の出力レベルを０ｄＢとして、カメラ画角に対応する各マイクアンプの出力レベルを特定するものである。
【００４３】
カメラ操作有効／無効指示部２４０は、カメラＡ３０に対する会議端末Ａ２０からの操作を指示する。具体的には、カメラ操作有効／無効指示部２４０は、カメラＡ３０に対してのカメラ操作ロック指示／カメラ操作ロック解除を指示する。
【００４４】
カメラ操作指示部２５０は、カメラＡ３０、またはネットワーク７０を介して会議中の他のカメラＢ３１またはカメラＣ３２に対する会議端末Ａ２０からの操作を指示する。具体的には、カメラ操作指示部２５０は、同一の会議に参加している会議端末に接続されたカメラのうち指定されたカメラのパン／ズーム操作を受け付けると、当該操作対象のカメラに対してパン／ズームの変更指示を出力する。その際、他の会議端末に接続されたカメラが操作対象であれば、当該会議端末をあて先としてネットワーク７０上に変更指示の情報が含まれる情報を送出する。
【００４５】
また、カメラ操作指示部２５０は、ネットワーク７０を介してカメラのパン／ズームの変更指示を受信すると、接続されているカメラＡ３０に対して、当該変更指示に応じたパン／ズームの変更指示を出力する。このようにすることで、会議に参加中の各会議端末を介して、相手先会議室あるいは自会議室のカメラのパン／ズームを実施することができる。
【００４６】
マイクアレイＡ４０は、マイクゲイン制御部４１０と、マイクロホン４２０ａ〜マイクロホン４２０ｌと、マイクロホン４２０ａ〜４２０ｌのそれぞれに対応してマイクのゲインを調整するマイクアンプ４３０ａ〜４３０ｌと、マイクアンプ４３０ａ〜４３０ｌから得られたゲインを合成するミキサ４４０と、ミキサ４４０で得られた合成出力を音声情報に変換する音声符号化部４５０と、を備える。
【００４７】
マイクゲイン制御部４１０は、マイクロホン４２０ａ〜４２０ｌの各マイクロホンについて、マイクアンプ４３０ａ〜４３０ｌのゲイン調整を行う。本実施形態においては、マイクゲイン制御部４１０は、会議端末Ａ２０からマイクロホン４２０ａ〜４２０ｌのゲイン調整指示を受けて、対応するマイクアンプ４３０ａ〜４３０ｌのゲインを調整する。
【００４８】
音声符号化部４５０は、ミキサ４４０から出力された音声情報を所定のフレームレートでサンプリングし、音声データを出力する。当該処理は、通常の符号化処理である。
【００４９】
図３は、カメラＡ３０と、会議端末Ａ２０と、マイクアレイＡ４０と、についてのハードウェア構成例を示す図である。なお、カメラＢ３１、会議端末Ｂ２１、マイクアレイＢ４１、カメラＣ３２、会議端末Ｃ２２、マイクアレイＣ４２についても、同様のハードウェア構成を備えるものとする。
【００５０】
カメラＡ３０は、本実施形態においては、いわゆる独立して動作を行うビデオカメラ装置である。しかし、これに限らず、ＰＣ（パーソナルコンピュータ）や、ワークステーション、各種携帯電話端末、ＰＤＡ（Personal Digital Assistant）、スマートフォンなどに分類される計算機であってもよい。
【００５１】
カメラＡ３０は、バス１３１と、演算装置１３２と、主記憶装置１３３と、通信装置１３４と、光学装置１３５と、を備える。演算装置１３２は、例えばＣＰＵ（Central Processing Unit）などの演算装置である。
【００５２】
主記憶装置１３３は、例えばＲＡＭ（Random Access Memory）などのメモリ装置である。
【００５３】
通信装置１３４は、インターネットあるいはＬＡＮ等のネットワーク７０に接続される装置および専用ケーブル等で接続される会議端末Ａ２０との通信を行う通信装置である。
【００５４】
光学装置１３５は、例えばビデオカメラレンズ群およびそのフォーカス駆動部、ＣＣＤあるいはＣＭＯＳ等によるイメージャおよび画像生成処理を行う画像処理部等を備えるいわゆる撮像装置である。
【００５５】
演算装置１３２と、主記憶装置１３３と、通信装置１３４と、光学装置１３５とは、バス１３１により互いに接続される。
【００５６】
上記したカメラＡ３０のパン／ズーム制御部３１０は、光学装置１３５により実現される。また、カメラ情報通知部３２０およびカメラ操作有効／無効制御部３３０は、演算装置１３２に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１３３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１３３上にロードされ、演算装置１３２により実行される。
【００５７】
会議端末Ａ２０は、本実施形態においては、独立して動作を行ういわゆる端末装置である。しかし、これに限らず、ＰＣ（パーソナルコンピュータ）や、ワークステーション、サーバー装置、各種携帯電話端末、ＰＤＡ（Personal Digital Assistant）、スマートフォンなどに分類される計算機であってもよい。
【００５８】
会議端末Ａ２０は、バス１２１と、演算装置１２２と、主記憶装置１２３と、通信装置１２４と、を備える。演算装置１２２は、例えばＣＰＵ（Central Processing Unit）などの演算装置である。
【００５９】
主記憶装置１２３は、例えばＲＡＭ（Random Access Memory）などのメモリ装置である。
【００６０】
通信装置１２４は、インターネットあるいはＬＡＮ等のネットワーク７０に接続される装置および専用ケーブル等で接続される他の会議端末およびカメラＡ３０、マイクアレイＡ４０、ディスプレイＡ５０、スピーカーＡ６０等の接続される装置との通信を行う通信装置である。
【００６１】
演算装置１２２と、主記憶装置１２３と、通信装置１２４とは、バス１２１により互いに接続される。
【００６２】
上記した会議端末Ａ２０のカメラ状態検知部２１０、マイクアレイ制御部２２０およびカメラ操作有効／無効指示部２４０は、演算装置１２２に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１２３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１２３上にロードされ、演算装置１２２により実行される。
【００６３】
また、会議端末Ａ２０のマイクアレイ位置データメモリ２３０は、主記憶装置１２３に格納されることで実現される。
【００６４】
マイクアレイＡ４０は、本実施形態においては、独立して動作を行うマイク装置である。マイクアレイＡ４０は、バス１４１と、演算装置１４２と、主記憶装置１４３と、通信装置１４４と、集音装置１４５と、を備える。演算装置１４２は、例えばＣＰＵ（Central Processing Unit）などの演算装置である。
【００６５】
主記憶装置１４３は、例えばＲＡＭ（Random Access Memory）などのメモリ装置である。
【００６６】
通信装置１４４は、インターネットあるいはＬＡＮ等のネットワーク７０に接続される装置および専用ケーブル等で接続される会議端末Ａ２０との通信を行う通信装置である。
【００６７】
集音装置１４５は、例えば図４に示すような構造をしている。図４はマイクアレイ装置の構成を示す図である。マイクアレイＡ４０は、環状に均等に配置された複数のマイクロホン４２０ａ〜４２０ｌにより構成される。一つのマイクロホン（図４ではマイクロホン４２０ａ）には、マイクアレイＡ４０の集音方向の基準となる基準位置マーク４６０が外観上明確に認識可能に設けられている。
【００６８】
マイクロホン４２０ａ〜４２０ｌは、夫々が集音範囲に指向性を持つ。本実施形態においては、夫々が左右各３０度の放射状の範囲で集音可能なマイクロホン４２０ａ〜４２０ｌの１２個が組み合わされてマイクアレイＡ４０を構成する。そのため、マイクアレイＡ４０は周囲３６０°（全方位）について集音範囲を備えるものであるといえる。
【００６９】
マイクアレイＡ４０は、全方位について集音範囲を有するものであるが、上記したように、複数のマイクロホン４２０ａ〜４２０ｌと、および各マイクロホンごとに調整を行うことができるマイクアンプ４３０ａ〜４３０ｌと、を含んで構成されるため、マイクロホンごとのゲインを調整することで、集音範囲を制御することができる。
【００７０】
例えば、図４においては、発言者の方向（角度４６１）を基準位置マーク４６０を基準に特定し、当該方向に集音範囲を備えるマイクロホン４２０ｅのゲインを他のマイクロホンのゲインよりも高くすることで、より発言者の発言を集音し易く、周囲の雑音を抑えることができる。
【００７１】
演算装置１４２と、主記憶装置１４３と、通信装置１４４と、集音装置１４５とは、バス１４１により互いに接続される。
【００７２】
上記したマイクアレイＡ４０のマイクロホン４２０ａ〜４２０ｌ、マイクアンプ４３０ａ〜４３０ｌおよびミキサ４４０は、集音装置１４５により実現される。また、マイクアレイＡ４０のマイクゲイン制御部４１０および音声符号化部４５０は、演算装置１４２に処理を行わせるプログラムによって実現される。このプログラムは、主記憶装置１４３または図示しないＲＯＭ装置内に記憶され、実行にあたって主記憶装置１４３上にロードされ、演算装置１４２により実行される。
【００７３】
以上が、本実施形態におけるテレビ会議システム１のハードウェア構成例である。しかし、これに限らず、その他のハードウェアを用いて構成されるものであってもよい。例えば、ネットワーク７０を無線によるネットワークあるいは携帯電話網とし、会議端末とカメラ、マイクアレイ、ディスプレイ、スピーカーをBluetooth（登録商標）等の無線通信により接続可能とするものであってもよい。
【００７４】
[動作の説明]次に、本実施形態におけるテレビ会議システム１の動作を説明する。図５は、本実施形態におけるテレビ会議システム１のカメラＡ３０とマイクアレイＡ４０についての配置例を示す図である。図５においては、マイクアレイＡ４０を会議卓上（望ましくは、会議参加者の中心付近）、カメラＡ３０を会議卓の片端に配置する。この時、マイクアレイＡ４０は基準位置マーク４６０がカメラＡ３０の正面に向けて設置されるものとする。
【００７５】
ここで、カメラＡ３０の正面方向を基準（０度）とし、右方向をプラス方向、左方向をマイナス方向として３６０度法により表すと、カメラＡ３０からみたマイクアレイＡ４０の設置方向５０１は、マイナス（−）５°、すなわちカメラＡ３０の正面より若干左方向にマイクアレイＡ４０が配置されているものとする。なお、マイクアレイＡ４０の位置の基準は、基準位置マーク４６０の位置としている。また、カメラＡ３０からマイクアレイＡ４０までの距離５００は、２ｍであるとする。
【００７６】
当該情報は、後述する初期化処理において特定され、マイクアレイ位置データメモリ２３０のマイクアレイ位置テーブル６００に格納される。
【００７７】
ここで、初期化処理について説明する。まず、カメラＡ３０によりマイクアレイＡ４０を図９に示すようにズームアップして初期設定映像３４０として撮影し、焦点をマイクアレイＡ４０の基準位置マーク４６０に合わせる。当該操作は、会議室Ａ１０を使用する会議参加者が適宜光学装置３５を操作して実施する。
【００７８】
その際、会議端末Ａ２０の図示しない制御部は、会議室Ａ１０のディスプレイＡ５０に初期設定映像３４０を表示させる。制御部は、初期化処理においては映像の中心に照準の基準を示すスコープ３５０を重畳して表示させる。会議参加者は、スコープ３５０が基準位置マーク４６０と重なるようにカメラＡ３０の向き（パン方向）を調整しピントを合わせる。
【００７９】
カメラ情報通知部３２０は、被写体にピントが合った時の焦点距離に基づき、カメラＡ３０とマイクアレイＡ４０間の距離５００および設置方向５０１を特定し、会議端末Ａ２０に対し通知する。
【００８０】
以上が、初期化処理の流れである。初期化処理により、カメラＡ３０からみたマイクアレイＡ４０の位置を特定できる。
【００８１】
次に、図８を用いて、会議室Ａ１０に関する会議中のマイクアレイ制御処理について説明する。マイクアレイ制御処理では、カメラが映す被写体周辺の音声を高品質に集音する。
【００８２】
まず、カメラＡ３０は、パン／ズーム操作を行う（ステップＳ００１）。具体的には、カメラＡ３０のカメラ操作有効／無効制御部３３０は、会議室Ａ１０の会議参加者による会議端末Ａ２０の操作、または会議に参加している他の会議端末Ｂ２１または会議端末Ｃ２２の操作に応じたカメラＡ３０に対するパン／ズームの変更指示を受け付ける。そして、カメラ操作が有効である場合に、パン／ズーム制御部３１０は、受け付けた変更指示に応じたパン／ズーム操作を実現するよう光学装置３５を制御する。なお、カメラ操作が無効であれば、カメラ操作有効／無効制御部３３０は、受け付けた変更指示を破棄し、応答しない。
【００８３】
次に、カメラ情報通知部３２０は、規定の時間、カメラ操作がなされなかったか否かを判定する（ステップＳ００２）。具体的には、カメラ情報通知部３２０は、直近に実施したステップＳ００１のパン／ズーム操作の終了後、所定の時間（例えば、３秒）が経過したか否かを判定する。規定の時間内にカメラ操作がなされた場合、すなわち所定の時間が経っていない場合（ステップＳ００２にて「Ｎｏ」の場合）には、カメラ情報通知部３２０は、ステップＳ００２を再度実施する。
【００８４】
規定の時間内にカメラ操作がなされなかった場合、すなわち所定の時間が経った場合（ステップＳ００２にて「Ｙｅｓ」の場合）には、カメラ情報通知部３２０は、カメラのパン方向を特定して会議端末Ａ２０に通知し（ステップＳ００３）、カメラと被写体との距離を特定して会議端末Ａ２０に通知し（ステップＳ００４）、カメラが撮影している画角を特定して会議端末Ａ２０に通知する（ステップＳ００５）。
【００８５】
なお、上記したように、本実施形態においては、カメラ情報通知部３２０は、パン方向は、台座の向き（正面）とカメラの光軸の向きの差から特定し、被写体までの距離は、所定の測距点において被写体にピントが合った状態の焦点距離から求め、画角は、レンズ群の繰り出し量に応じて求める。
【００８６】
会議端末Ａ２０のカメラ状態検知部２１０が、ステップＳ００３〜Ｓ００５による通知を受け付けると、カメラ操作有効／無効指示部２４０は、カメラ操作ロック指示をカメラＡ３０に対して行う（ステップＳ００６）。
【００８７】
カメラＡ３０のカメラ操作有効／無効制御部３３０は、ステップＳ００６においてカメラ操作ロック指示を受け付けると、パン／ズームの操作を無効に設定する（ステップＳ００７）。
【００８８】
会議端末Ａ２０のマイクアレイ制御部２２０は、後述するマイクアレイ設定算出処理を実施する（ステップＳ００８）。
【００８９】
そして、マイクアレイ制御部２２０は、マイクアレイ設定算出処理により特定したマイクゲインの設定値を含むマイクゲイン設定指示をマイクアレイＡ４０のマイクゲイン制御部４１０に対して行う（ステップＳ００９）。
【００９０】
マイクアレイＡ４０のマイクゲイン制御部４１０は、マイクゲイン設定処理を実施する（ステップＳ０１０）。具体的には、マイクゲイン制御部４１０は、ステップＳ００９において指示されたマイクゲイン設定指示に応じて、マイクアンプ４３０ａ〜４３０ｌのそれぞれに対してマイクゲインを設定する。
【００９１】
カメラ操作有効／無効指示部２４０は、カメラ操作ロック解除指示をカメラＡ３０に対して行う（ステップＳ０１１）。
【００９２】
カメラＡ３０のカメラ操作有効／無効制御部３３０は、ステップＳ０１１においてカメラ操作ロック解除指示を受け付けると、カメラ操作ロック解除処理を行う（ステップＳ０１２）。具体的には、カメラ操作有効／無効制御部３３０は、パン／ズームの操作を有効に受け付ける状態へ移行する。
【００９３】
以上が、マイクアレイ制御処理の流れである。マイクアレイ制御処理によると、左右へのパン動作可能なイメージ取得手段の位置とイメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、イメージ取得手段のパンの方向と、イメージ取得手段の位置と集音範囲を変更可能な集音手段の位置との間の距離と、イメージ取得手段の位置を基準とした集音手段の位置の方向と、を用いて集音手段の集音範囲を変更することができる。すなわち、カメラとマイクが独立して配置されている状態において、被写体の方向にマイク感度を高めることができるため、集音の品質を向上させることができるといえる。
【００９４】
次に、図１０を用いて、上記マイクアレイ制御処理のステップＳ００８にて実施するマイクアレイ設定算出処理の処理およびその原理について説明する。本説明においては、図１０に示すような配置で会議がなされている前提とする。すなわち、図５に示したカメラＡ３０とマイクアレイＡ４０の配置がなされている状態で、発言者に向けられたカメラＡ３０の光軸方向（パン角度５０３）と、カメラＡ３０からみたマイクアレイＡ４０の方向（設置方向５０１）と、の差分を差分角α５０４とする。すなわち、カメラＡ３０の正面からのパン角度５０３は、設置方向５０１と、差分角α５０４とを合成した角度とする。
【００９５】
また、マイクアレイＡ４０と被写体との距離を距離ａとし、被写体とカメラＡ３０との距離を距離ｂ５０２とし、カメラＡ３０とマイクアレイＡ４０との距離をｃ５００とする。また、カメラＡ３０の撮影する画角５０５は、発言者が十分に視野に捕捉可能な画角であるとする。
【００９６】
また、発言者からみたマイクアレイＡ４０の方向と、カメラＡ３０の方向と、の差分の角度を差分角γとし、マイクアレイＡ４０からみた発言者の方向と、カメラＡ３０の方向と、の差分の角度を差分角βとする。
【００９７】
上記のように配置される場合において、距離ａ、距離ｂ５０２、距離ｃ５００および差分角α５０４、差分角β、差分角γの間では、余弦定理９０（下記式１、式２、式３）の関係が成立する。
【００９８】
【００９９】
【０１００】
【０１０１】
すなわち、上記の関係が成立するといえる。そのため、マイクアレイ制御部２２０は、上記式１、式２、式３の式を解くことで、マイクアレイＡ４０が集音する方向（すなわち、差分角β）を特定する。
【０１０２】
本実施形態においては、マイクアレイ制御部２２０は、ステップＳ００３にてパン方向を、ステップＳ００４にてカメラＡ３０から被写体までの距離を、ステップＳ００５にて画角の情報を受け取っており、初期化処理において格納したマイクアレイ位置テーブル６００のカメラＡとマイクアレイＡ間の距離６０１と、基準パン方向角度６０２とを読み出すことができる。マイクアレイ制御部２２０は、パン方向と基準パン方向角度６０２との差から差分角α５０４を特定し、カメラＡ３０から被写体までの距離を距離ｂ５０２として特定し、カメラＡとマイクアレイＡ間の距離６０１を距離ｃ５００として特定し、余弦定理９０の各式に代入することで、差分角βを算出する。
【０１０３】
そして、マイクアレイ制御部２２０は、差分角βの方向が含まれるマイクロホン４２０を集音方向のマイクロホンとして特定し、当該マイクロホンに隣接するマイクロホン４２０についても特定する。そして、ステップＳ００５にて受け取った画角の情報と、マイクアレイ出力レベルテーブル６５０の情報と、を用いてマイクアンプ４３０の出力レベル（マイクゲイン設定値）を特定する。なお、集音方向のマイクロホンの感度（ゲイン）を他のいずれのマイクロホンの感度よりも高く設定し、集音方向のマイクロホンおよび集音方向のマイクロホンに隣接するマイクロホン以外のマイクロホンの感度（ゲイン）を他のいずれのマイクロホンの感度よりも低く設定することで、より発言者の発言内容を高品質に得ることができる。
【０１０４】
以上が、マイクアレイ設定算出処理の原理および処理内容である。
【０１０５】
以上、本発明に係る第一の実施形態を適用したマイクロホン制御装置を含むテレビ会議システム１について説明した。第一の実施形態を適用したマイクロホン制御装置である会議端末Ａ２０、Ｂ２１、Ｃ２２によると、カメラとマイクが独立して配置されている状態において、被写体の方向にマイク感度を高めることができるため、集音の品質を向上させることができるといえる。
【０１０６】
本発明は、上記第一の実施形態に制限されない。上記第一の実施形態は、本発明の技術的思想の範囲内で様々な変形が可能である。例えば、上記第一の実施形態においては、会議端末Ａ２０は、画角に応じて集音方向のマイクアンプの出力レベルを特定している。しかし、これに限られず、マイクアレイから発言者までの距離に応じて出力レベルを調整するようにしてもよい。例えば、図１１に示す出力レベル調整テーブル７００をマイクアレイ位置データメモリ２３０に格納しておき、マイクアレイ設定算出処理において算出した出力レベルを調整ようにしてもよい。これにより、より適切な出力レベルを設定することができるため、適切な音質を確保することができるといえる。
【０１０７】
具体的に説明すると、出力レベル調整テーブル７００は、マイクアレイから発言者までの距離７０１に応じて、集音方向として選択されたマイクロホンの出力レベル７０２が対応付けて記憶されている。マイクアレイ制御部２２０は、マイクアレイＡ４０から発言者までの距離、すなわち距離ａを余弦定理９０により算出すると、出力レベル調整テーブル７００を用いて当該距離ａに応じてマイクロホンの出力レベルを取得する。なお、マイクアレイ制御部２２０は、マイクアレイ出力レベルテーブル６５０と画角とを用いて特定した集音方向のマイクロホンの出力レベル以下の範囲内で、出力レベルを設定するものとする。そして、マイクアレイ制御部２２０は、取得した出力レベルでマイクゲイン設定指示を行う。
【０１０８】
すなわち、当該変形実施形態によると、マイクアレイＡ４０の集音方向、集音範囲の制御だけでなく、発言者の背景雑音低減をも行うことができるといえる。
【０１０９】
例を挙げると、図１２に示すように、マイクアレイＡ４０の集音可能範囲５２０が会議参加者の着座位置に対して十分に広い範囲であるとする。この場合、第一の実施形態におけるマイクロホン制御装置での集音範囲制御実施後のマイクアレイＡ４０の集音範囲は制御後の集音範囲５２１となる。この時、集音方向として選択されたマイクロホン４２０の出力レベルを、図１１で示されるテーブルを用いて低減させることにより、マイクアレイＡ４０の集音範囲は集音範囲５２２に減少する。つまり、発言者の背後に発生する雑音を低減することができる。
【０１１０】
ここまで説明した実施形態においては、マイクアレイＡ４０を会議卓上に配置し、カメラＡ３０を会議卓端に配置するものとしているが、マイクアレイＡ４０の集音範囲内、カメラＡ３０の撮影範囲内であって、かつカメラＡ３０で撮影可能な位置に会議参加者がいるのであれば、それぞれをどこに置いても構わない。また、本実施例において説明した会議端末Ａ２０内の各部の機能を、カメラＡ３０またはマイクアレイＡ４０に分散させて内蔵し、カメラＡ３０とマイクアレイＡ４０間で連携して処理を行うようにしても良い。さらに、本発明はテレビ会議システムだけではなく、ネットワーク監視カメラを用いた監視システムでも同様に適用することができる。
【０１１１】
また、上記した実施形態の変形は、単独で適用されてもよいし、部分的に組み合わされて適用されるようにしてもよい。
【０１１２】
以上、本発明について、実施形態を中心に説明した。なお、上記の実施形態では、インターネット等の通信はＨＴＴＰやＦＴＰ、ＳＩＰ、ＰＯＰ、ＳＭＴＰ、ＴＣＰ／ＩＰ等の既存のプロトコルによる通信を想定しているが、これに限らず、他のプロトコルによる通信であってもよい。
【符号の説明】
【０１１３】
１・・・テレビ会議システム、１０・・・会議室Ａ、１１・・・会議室Ｂ、１２・・・会議室Ｃ、２０・・・会議端末Ａ、２１・・・会議端末Ｂ、２２・・・会議端末Ｃ、３０・・・カメラＡ、３１・・・カメラＢ、３２・・・カメラＣ、４０・・・マイクアレイＡ、４１・・・マイクアレイＢ、４２・・・マイクアレイＣ、５０・・・ディスプレイＡ、５１・・・ディスプレイＢ、５２・・・ディスプレイＣ、６０・・・スピーカーＡ、６１・・・スピーカーＢ、６２・・・スピーカーＣ、７０・・・ネットワーク、８０・・・サーバー、９０・・・余弦定理、３４０・・・初期設定映像、３５０・・・スコープ、４２０ａ-４２０ｌ・・・マイクロホン、４３０ａ-４３０ｌ・・・マイクアンプ、５００・・・距離ｃ、５０１・・・設置方向、５０２・・・距離ｂ、５０３・・・パン角度、５０４・・・差分角α、５０５・・・画角、５２０・・・集音可能範囲、５２１・・・集音範囲、５２２・・・集音範囲、６００・・・マイクアレイ位置テーブル、６５０・・・マイクアレイ出力レベルテーブル、７００・・・出力レベル調整テーブル
【特許請求の範囲】
【請求項１】
左右へのパン動作可能なイメージ取得手段と、
集音範囲を変更可能な集音手段と、を制御する制御装置であって、
前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更手段を備える、
ことを特徴とする制御装置。
【請求項２】
請求項１に記載の制御装置であって、
前記集音範囲変更手段は、
前記集音手段の位置からみた前記被写体の方向を特定して当該方向に集音範囲を変更する、
ことを特徴とする制御装置。
【請求項３】
請求項１または２に記載の制御装置であって、
前記集音範囲変更手段は、
前記集音手段の位置と前記被写体との間の距離を求め、当該距離に応じて前記集音手段のゲインを調整する、
ことを特徴とする制御装置。
【請求項４】
請求項１〜３のいずれか一項に記載の制御装置であって、
前記集音手段は、所定の集音範囲を有する複数のマイクロホンを備え、
前記集音範囲変更手段は、前記マイクロホンごとのゲインを調整することで集音範囲を変更する、
ことを特徴とする制御装置。
【請求項５】
請求項４に記載の制御装置であって、
前記集音範囲変更手段は、前記被写体の方向を集音するマイクロホンのゲインを、他の方向を集音するマイクロホンのゲインよりも高く設定する、
ことを特徴とする制御装置。
【請求項６】
請求項１〜５のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記イメージ取得手段から画角を特定する情報を取得し、取得した画角に応じて前記集音範囲を変更する、
ことを特徴とする制御装置。
【請求項７】
請求項６に記載の制御装置であって、
前記集音範囲変更手段は、前記画角が狭いほど前記集音範囲の感度を高めて集音する、
ことを特徴とする制御装置。
【請求項８】
請求項１〜７のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向に基づき、前記イメージ取得手段のパンの方向との差分を算出し、余弦定理を用いて被写体の方向を特定し、前記集音範囲を変更する、
ことを特徴とする制御装置。
【請求項９】
請求項１〜８のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記イメージ取得手段のパン動作が所定の時間なされない場合に、前記集音範囲の変更を行う、
ことを特徴とする制御装置。
【請求項１０】
請求項１〜９のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記集音範囲の変更を行う間、前記イメージ取得手段のパン動作を無効にする、
ことを特徴とする制御装置。
【請求項１１】
左右へのパン動作手段を備える撮像装置と、
集音範囲の変更手段を備える集音装置と、
前記撮像装置および前記集音装置を制御する制御装置と、を備え、
前記制御装置は、
前記撮像装置の位置と前記撮像装置により取得される映像に映りこむ被写体の位置との間の距離と、前記撮像装置のパンの方向と、前記撮像装置の位置と前記集音装置の位置との間の距離と、前記撮像装置の位置を基準とした前記集音装置の位置の方向と、を用いて前記集音装置の集音範囲を変更するよう指示する集音範囲変更指示手段を備える、
ことを特徴とする制御システム。
【請求項１２】
左右へのパン動作を行うパン動作手段と、
撮影している画角を変更する動作を行う画角変更動作手段と、
パン方向を特定するパン方向情報を取得するパン方向情報取得手段と、
被写体までの距離を特定する距離情報を取得する距離情報取得手段と、
撮影している画角を特定する画角情報を取得する画角情報取得手段と、
前記パン方向情報と、前記距離情報と、前記画角情報と、を出力する出力手段と、を備え、
前記出力手段は、前記パン動作手段および前記画角変更動作手段のいずれの動作も終了して所定の時間経過した場合に、前記出力を行う、
ことを特徴とする撮像装置。
【請求項１３】
左右へのパン動作可能なイメージ取得手段と、
集音範囲を変更可能な集音手段と、を制御する制御装置の制御方法であって、
前記制御装置は、
前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更ステップを実施する、
ことを特徴とする制御方法。
【請求項１】
左右へのパン動作可能なイメージ取得手段と、
集音範囲を変更可能な集音手段と、を制御する制御装置であって、
前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更手段を備える、
ことを特徴とする制御装置。
【請求項２】
請求項１に記載の制御装置であって、
前記集音範囲変更手段は、
前記集音手段の位置からみた前記被写体の方向を特定して当該方向に集音範囲を変更する、
ことを特徴とする制御装置。
【請求項３】
請求項１または２に記載の制御装置であって、
前記集音範囲変更手段は、
前記集音手段の位置と前記被写体との間の距離を求め、当該距離に応じて前記集音手段のゲインを調整する、
ことを特徴とする制御装置。
【請求項４】
請求項１〜３のいずれか一項に記載の制御装置であって、
前記集音手段は、所定の集音範囲を有する複数のマイクロホンを備え、
前記集音範囲変更手段は、前記マイクロホンごとのゲインを調整することで集音範囲を変更する、
ことを特徴とする制御装置。
【請求項５】
請求項４に記載の制御装置であって、
前記集音範囲変更手段は、前記被写体の方向を集音するマイクロホンのゲインを、他の方向を集音するマイクロホンのゲインよりも高く設定する、
ことを特徴とする制御装置。
【請求項６】
請求項１〜５のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記イメージ取得手段から画角を特定する情報を取得し、取得した画角に応じて前記集音範囲を変更する、
ことを特徴とする制御装置。
【請求項７】
請求項６に記載の制御装置であって、
前記集音範囲変更手段は、前記画角が狭いほど前記集音範囲の感度を高めて集音する、
ことを特徴とする制御装置。
【請求項８】
請求項１〜７のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向に基づき、前記イメージ取得手段のパンの方向との差分を算出し、余弦定理を用いて被写体の方向を特定し、前記集音範囲を変更する、
ことを特徴とする制御装置。
【請求項９】
請求項１〜８のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記イメージ取得手段のパン動作が所定の時間なされない場合に、前記集音範囲の変更を行う、
ことを特徴とする制御装置。
【請求項１０】
請求項１〜９のいずれか一項に記載の制御装置であって、
前記集音範囲変更手段は、前記集音範囲の変更を行う間、前記イメージ取得手段のパン動作を無効にする、
ことを特徴とする制御装置。
【請求項１１】
左右へのパン動作手段を備える撮像装置と、
集音範囲の変更手段を備える集音装置と、
前記撮像装置および前記集音装置を制御する制御装置と、を備え、
前記制御装置は、
前記撮像装置の位置と前記撮像装置により取得される映像に映りこむ被写体の位置との間の距離と、前記撮像装置のパンの方向と、前記撮像装置の位置と前記集音装置の位置との間の距離と、前記撮像装置の位置を基準とした前記集音装置の位置の方向と、を用いて前記集音装置の集音範囲を変更するよう指示する集音範囲変更指示手段を備える、
ことを特徴とする制御システム。
【請求項１２】
左右へのパン動作を行うパン動作手段と、
撮影している画角を変更する動作を行う画角変更動作手段と、
パン方向を特定するパン方向情報を取得するパン方向情報取得手段と、
被写体までの距離を特定する距離情報を取得する距離情報取得手段と、
撮影している画角を特定する画角情報を取得する画角情報取得手段と、
前記パン方向情報と、前記距離情報と、前記画角情報と、を出力する出力手段と、を備え、
前記出力手段は、前記パン動作手段および前記画角変更動作手段のいずれの動作も終了して所定の時間経過した場合に、前記出力を行う、
ことを特徴とする撮像装置。
【請求項１３】
左右へのパン動作可能なイメージ取得手段と、
集音範囲を変更可能な集音手段と、を制御する制御装置の制御方法であって、
前記制御装置は、
前記イメージ取得手段の位置と前記イメージ取得手段により取得されるイメージに映りこむ被写体の位置との間の距離と、前記イメージ取得手段のパンの方向と、前記イメージ取得手段の位置と前記集音手段の位置との間の距離と、前記イメージ取得手段の位置を基準とした前記集音手段の位置の方向と、を用いて前記集音手段の集音範囲を変更する集音範囲変更ステップを実施する、
ことを特徴とする制御方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【公開番号】特開２０１２−１８６５５１（Ｐ２０１２−１８６５５１Ａ）
【公開日】平成２４年９月２７日（２０１２．９．２７）
【国際特許分類】
【出願番号】特願２０１１−４６６８６（Ｐ２０１１−４６６８６）
【出願日】平成２３年３月３日（２０１１．３．３）
【出願人】（０００００５１０８）株式会社日立製作所 (27,607)
【Ｆターム（参考）】
【公開日】平成２４年９月２７日（２０１２．９．２７）
【国際特許分類】
【出願日】平成２３年３月３日（２０１１．３．３）
【出願人】（０００００５１０８）株式会社日立製作所 (27,607)
【Ｆターム（参考）】
[ Back to top ]