映像監視システム
【目的】監視領域全体を撮影したカメラ映像をもとに監視を行う映像監視システムを提供する。
【構成】カメラ映像をもとに動き検出したターゲットの映像を自動追尾して拡大表示する自動追尾機能と、オペレータが全体映像上で指定したターゲットの映像を自動追尾して拡大表示する指定追尾機能と、オペレータが全体映像上で指定する位置を追随するように追尾して拡大表示するマニュアル追尾機能と、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能と、オペレータが全体映像上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有し、状況に応じて設定される各機能の優先度に従ってターゲットの映像を選択し、自動的に表示形式を切替えてターゲットの映像を表示する。
【構成】カメラ映像をもとに動き検出したターゲットの映像を自動追尾して拡大表示する自動追尾機能と、オペレータが全体映像上で指定したターゲットの映像を自動追尾して拡大表示する指定追尾機能と、オペレータが全体映像上で指定する位置を追随するように追尾して拡大表示するマニュアル追尾機能と、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能と、オペレータが全体映像上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有し、状況に応じて設定される各機能の優先度に従ってターゲットの映像を選択し、自動的に表示形式を切替えてターゲットの映像を表示する。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、表示装置に表示した映像をもとに、監視カメラで撮影した領域を監視する映像監視システムに関する。
【背景技術】
【０００２】
近年、監視カメラと表示装置を備えた撮影監視システムが、商業分野や金融機関等において、防犯等の目的のため、広く利用されている。
そして、撮影カメラから入力される映像をもとに、監視領域の全体映像と、この全体映像中にあるターゲットの拡大映像を取得し、監視精度を高めたいといった要求がある。
従来技術では、監視領域全体の映像を取得するための広角カメラを設置するとともに、監視領域内の一区画についての拡大映像を取得するためのカメラを監視領域内の各区画（複数）に設置し、広角カメラで撮影した全体映像に基づいて着目したい部分があれば、その区画に設置されたカメラで撮影した拡大映像を取得し、監視領域全体の映像と、ターゲットの拡大映像とを取得するといった、複数カメラによる撮影監視システムが用いられていた。
しかし、複数のカメラを必要とする撮影監視システムでは、装置コスト、設置工事、メンテナンス、カメラ設置スペースなどの問題を抱えており、シンプルな構成が求められていた。
【０００３】
そして近年、高解像度ＣＣＤカメラの出現により、１台の高解像度・広角カメラで高解像度の広角映像を取得することが可能となり、１台のカメラから取得した高解像度の映像から、目的とする領域の映像（ターゲットの映像）を切り出してモニタに拡大表示する技術が開発された。（例えば、特許文献１を参照）
【特許文献１】特願２００２−１６７３１０
【発明の開示】
【発明が解決しようとする課題】
【０００４】
監視カメラから入力された高解像度の全体映像に基づいて、ターゲットの拡大映像をモニタに表示する場合、検出したターゲットの位置情報（アドレス）に基づいて全体映像から部分的に映像を切り出し、ターゲットの拡大映像をモニタに表示する。
従って、モニタに表示された映像を観察する監視者が、監視領域の異常を的確に把握するためには、全体映像から状況に合わせて的確にターゲットを検出し、その拡大映像をモニタに表示することが望まれている。またモニタを観察する監視者の負担を軽減するために、検出したターゲットの位置を容易に把握できるように表示することが望まれている。
【課題を解決するための手段】
【０００５】
上述の目的を達成するため、この発明は、監視領域全体を撮影したカメラ映像をもとに、監視領域の全体映像をモニタの全体映像表示領域に表示するとともに、全体映像中のターゲットの拡大映像をモニタの拡大映像表示領域に表示する映像監視システムであって、監視領域全体を撮影したカメラ映像をもとに、動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する自動追尾機能と、監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上で指定したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する指定追尾機能と、監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、モニタに表示された映像をもとにオペレータがモニタ（全体映像）上で経時的に指定する位置を、オペレータの指定に追随して一定時間またはその指定がなくなるまで追尾し、その領域の映像を全体映像から切り出して拡大表示するマニュアル追尾機能と、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能と、監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有し、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能を使用するにあたって、監視領域全体を撮影したカメラ映像をもとに動き検出したターゲットの位置を検出し、この動き検出したターゲットの位置を包含する範囲内において、オートパン機能による拡大表示を行うものである。
【０００６】
以下に、本発明の実施形態について、図面を参照にして説明する。
【０００７】
図１は、この発明の実施形態による映像監視システムのブロック図を示すものである。
この実施例では、４台のカメラ１ａ〜１ｄを使用して監視領域全体を撮影し、各映像を連結することによって監視領域全体のカメラ映像を取得した。
各カメラ１ａ〜１ｄで撮影した映像は、それぞれＡ／Ｄ変換器２ａ〜２ｄに入力された後、同期メモリ３ａ〜３ｄに入力され、その後、連結部４に入力される。そして、連結部４において各カメラ映像を連結し、監視領域全体のカメラ映像を取得する。
【０００８】
監視領域全体のカメラ映像はフレームメモリ５に入力されるとともに、表示映像設定部６に入力され、この表示映像設定部６で、フレームメモリ５に格納されているカメラ映像から目的に応じたターゲットの映像を切り出し、Ｄ／Ａ変換器９を介してモニタ１０に入力する。
つまり、フレームメモリ５に格納されたカメラ映像から、監視領域の全体映像を読み出す（切り出す）とともに、全体映像中から目的とする領域（以下、ターゲットという）の映像を読み出す（切り出す）ことによって、監視領域の全体映像と、ターゲットの拡大映像とをモニタに表示できるように構成した。
【０００９】
なおこの実施例ではカーソルポジションレジスタ７及びカーソル表示部８を設け、拡大表示されるターゲットの映像（フレームメモリ５に格納されている映像から切り出した映像）の位置を、監視領域全体を表示する全体映像中でカーソル表示するように構成した。
そして、モニタに監視領域の全体映像とターゲットの拡大映像を同時に表示するにあたって、カーソルポジションレジスタ７において、カーソルの表示／非表示を設定するとともに、カーソル表示の種類や色を設定し、その設定に基づいてカーソル表示部８で、全体映像中のターゲットの位置にカーソルを表示し、拡大表示されたターゲットの全体映像中の位置を容易に把握できるようにした。
【００１０】
図２は、広域の監視領域を撮影するためのカメラ配置の例を示すものである。
図２（ａ）に示すカメラの配置例では、４台のカメラ（撮影画角３０°）１ａ〜１ｄを扇状に配置して撮影し、連続性がある（互いに隣合う）４つのカメラ映像Ｃ１〜Ｃ４を取得する。そして前記各カメラ映像Ｃ１〜Ｃ４を連結部４に入力して映像を連結し、広域の監視領域全体のカメラ映像（撮影画角１２０°）を取得する。
【００１１】
図２（ｂ）に示すカメラの配置例では、扇状に配置した２台のカメラ（撮影画角３０°）１ａ及び１ｂをグループ化し、連続性がある（互いに隣合う）２つのカメラ映像Ｃ５及びＣ６を取得するとともに、扇状に配置した２台のカメラ（撮影画角３０°）１ｃ及び１ｄをグループ化し、連続性がある（互いに隣合う）２つのカメラ映像Ｃ７及びＣ８を取得し、これらのカメラ映像Ｃ５〜Ｃ８をそれぞれ連結部４に入力する。そして各カメラ映像Ｃ５〜Ｃ８を連結した全体映像を取得するとともに、前記の全体映像について、カメラ１ａ及び１ｂで撮影したカメラ映像Ｃ５及びＣ６と、カメラ１ｃ及び１ｄで撮影したカメラ映像Ｃ７及びＣ８とに、それぞれグループ化し、これらグループ化したカメラ映像（映像画角６０°）毎に区別して扱うように構成した。
【００１２】
なお１台のカメラで監視領域全体を撮影し、このカメラ映像をもとに表示映像設定部６がフレームメモリ５から映像を読み出し（切り出し）、モニタに表示するように構成してもよい。
【００１３】
続いて、フレームメモリ５に格納されたカメラ映像をもとに、モニタにターゲットの拡大映像を表示する方法について図３を参照して説明する。
図３は、この発明の実施形態による表示映像設定部６のブロック図を示すものである。
【００１４】
この実施例による映像監視システムは、監視領域全体を撮影したカメラ映像をもとに、前記カメラ映像からターゲットの映像を切り出して拡大表示するものであって、監視領域の全体映像と、用途に応じたターゲットの拡大映像とを、モニタに同時に表示するものである。
【００１５】
この実施例によれば、（１）監視領域全体を撮影したカメラ映像をもとに、監視領域内に設定したセンスエリア内で動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示する自動追尾機能と、（２）監視領域全体を撮影したカメラ映像をもとに、監視領域内全体から動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示する自動追尾機能と、（３）監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上で指定したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示する指定追尾機能と、（４）監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、モニタに表示された映像をもとにオペレータがモニタ（全体映像）上で経時的に指定する位置を、オペレータの指定に追随して一定時間またはその指定がなくなるまで追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示するマニュアル追尾機能とを有する。
【００１６】
また、（５）監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように一定区画を経時的に移動させ、その巡回する一定区画の映像を切り出して拡大表示するオートパン機能と、（６）監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有する。
【００１７】
図３に示す実施形態において、第1動き検出部１１は、オペレータが設定したセンスエリア内で動き検出する。監視領域全体を撮影したカメラ映像をもとにモニタの全体映像表示領域に全体映像を表示し、この全体映像をもとに、オペレータが前記映像内の任意の区画をセンスエリアとして設定し（図６を参照）、第１動き検出部１１は、前記カメラ映像をもとにセンスエリア内で動き検出を行い、動き検出したターゲットの数とその位置を検出する。
第２動き検出部１２は、監視領域全体を撮影したカメラ映像の全体で動き検出を行い、動き検出したターゲットの数とその位置を検出する。
指定追尾設定部１３は、マウスやキーボードやボタンなどの指示装置を用いてオペレータがモニタに表示された全体映像中にターゲットを指定した場合、そのターゲットの位置を検出する。
マニュアル追尾設定部１４は、マウスやキーボードやボタンなどの指示装置を用いてオペレータがモニタに表示された全体映像中にターゲットを指定した場合、そのターゲットの位置をオペレータの指示に追随して検出する。
【００１８】
検出したターゲットの数と位置の情報は、検出手段毎に追尾優先度判定部１７に入力される。追尾優先度判定部１７では、優先度設定部１５で設定した優先順位に従ってターゲットを選択し、第1動き検出部１１、第２動き検出部１２、指定追尾設定部１３で検出したターゲットのうち優先順位の高いターゲットを、それぞれ自動追尾部１８ａ、１８ｂで自動追尾する。またマニュアル追尾部１４でターゲットを検出した場合、マニュアル追尾部１９において、オペレータによる指示に追随してマニュアル追尾する。
【００１９】
この実施例では、優先度設定部１５において、第1動き検出部１１、第２動き検出部１２、指定追尾設定部１３、マニュアル追尾設定部１４の順に優先順位を設定した。また第1動き検出部１１、第２動き検出部１２、指定追尾設定部１３から入力されたそれぞれのターゲットから、前記優先順位に従って２つのターゲットを選択し、自動追尾するように構成した。つまりセンスエリア内の動き検出を行う第１動き検出部１１で動き検出されない場合は、監視領域の映像全体から動き検出を行う第２動き検出部１２で検出したターゲットが選択される。
そして第１及び第２自動追尾部１８ａ，１８ｂを設け、追尾優先度判定部１７で選択した２つのターゲットについて、優先順位が一番目のターゲットを第１自動追尾部１８ａで自動追尾し、優先順位が２番目のターゲットを第２自動追尾部１８ｂで自動追尾するように設定した。
【００２０】
なお監視領域全体（映像全体）で動き検出する第２動き検出部１２の作動（使用／未使用）を制御し、監視領域全体から動き検出する第２動き検出部１２を使用せず、オペレータが監視領域の映像（全体映像）をもとに設定したセンスエリア内で動き検出したターゲットが検出されない場合、指定追尾設定部１３で指定したターゲットを選択するように構築してもよい。
【００２１】
第１及び第２自動追尾部１８ａ，１８ｂでは、ターゲットが動き検出されてから一定時間、または動き検出しなくなるまで、ターゲットの自動追尾を継続する。
なお自動追尾したターゲットの動きが検出されなくなるまでターゲットを自動追尾する場合において、この実施例では、ターゲットが動き検出されなくなってから一定時間経過まではそのターゲットの自動追尾を継続し、一旦動き検出されなくなっても、動き検出されなくなってから一定時間経過前に動き検出された場合は、そのターゲットの自動追尾を継続して行う。
第1及び第２自動追尾部１８ａ，１８ｂでは、自動追尾したターゲットの動き検出が継続している場合は、動き検出したターゲットの位置情報を第1または第２切り出しカウンタ２０ａ，２０ｂに入力し、自動追尾したターゲットの動きが検出されなくなった場合は、動き検出されなくなってから一定時間経過までのあいだ、最後に動き検出したターゲットの位置情報を切り出しカウンタ２０ａ，２０ｂに入力する。そして上記のターゲットの位置情報をもとに、自動追尾したターゲットの映像が、フレームメモリ５に格納されているカメラ映像から切り出される。
【００２２】
第1及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲットの位置情報は、それぞれ第１及び第２切り出しカウンタ２０ａ，２０ｂに入力され、第１及び第２切り出しカウンタ２０ａ，２０ｂにおいて、位置情報と表示サイズに応じてターゲット映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から、ターゲットの映像を切り出し、モニタにターゲットの自動追尾映像を拡大表示する。
【００２３】
この実施例では、第１及び第２自動追尾部１８ａ，１８ｂにおいて、２つのターゲットを自動追尾する場合、第１及び第２切り出しカウンタ２０ａ，２０ｂで切り出したターゲットの映像を拡大表示するため、モニタの拡大映像表示領域を分割して、２つの追尾画面を設定するように構築した。
また第１及び第２自動追尾部１８ａ，１８ｂにおいて、２つのターゲットを自動追尾する場合、各ターゲットの位置関係（左右関係）にあわせて２つの追尾画面に並列表示するため、第１及び第２自動追尾部１８ａ，１８ｂで自動追尾した各ターゲットの位置情報を表示位置判定部２６に入力し、ターゲットの位置判定を行った。
また２つのターゲットを自動追尾する場合、互いのターゲットが近接したときに、モニタの拡大映像表示領域に設定された２つの追尾画面を結合し、２つのターゲットを包括して表示するため、表示位置判定部２６に入力された各ターゲットの位置情報（第１及び第２自動追尾部１８ａ，１８ｂで自動追尾した各ターゲットの位置情報）を追尾画面判定部２７に入力し、追尾画面の結合・分割を判定した。
【００２４】
なお図３に示す実施形態では、自動追尾映像による映像監視だけではなく、アラーム等による警告を行うための追尾ターゲット検出部３３を設けた。
例えば、図４に示す映像監視システムによる監視方法のように、監視領域全体を４台のカメラ１ａ〜１ｄで撮影したカメラ映像をもとに監視領域を監視するとともに、グループ化した２台のカメラ１ａ及び１ｂで撮影した特定区域に進入したターゲットを優先して監視する場合、前記特定区域内（グループ化したカメラ１ａ及び１ｂで撮影したカメラ映像）で動き検出したターゲットを自動追尾し、自動追尾したターゲットの拡大映像をモニタに表示するとともに、アラームを鳴らすように構成した。
この実施例では、カメラ映像をもとに特定区域の入口にセンスエリアを設定し（オペレータが映像内にセンスエリアを設定し）、このセンスエリアを通過して特定区域内にターゲットが進入し、第1動き検出部１１によって前記ターゲットが検出され、第1または第２自動追尾部１８ａ，１８ｂでターゲットを自動追尾した場合、前記ターゲットの特定区域への進入をアラーム等を鳴らして監視者等に警告するため、第１または第２自動追尾部１８ａ，１８ｂによってターゲットを自動追尾しているあいだ、追尾ターゲット検出部３３では検出信号を出力し、アラームを鳴らすように構成した。なおこの実施例では、グループ化したカメラ１ａ及び１ｂで撮影した特定区域の映像内でのみターゲットを自動追尾するように構成した。
【００２５】
マニュアル追尾部１９でマニュアル追尾したターゲットの位置情報は、第３切り出しカウンタ２０ｃに入力され、第３切り出しカウンタ２０ｃにおいて、前記位置情報と表示サイズに応じてターゲット映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から、ターゲットの映像を切り出し、モニタにターゲットのマニュアル追尾映像を拡大表示する。
【００２６】
さらに図３に示す実施形態では、オートパンカウンタ２１でオートパン機能の設定を行い、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能を備える。
この実施例では、オートパンカウンタ２１に、オートパン機能による移動パターンやその速度を設定することによって、監視領域内を巡回するように経時的に移動する一定区画の位置情報（例えば一定区画の中心座標）を決定する。そしてこの位置情報は、第４切り出しカウンタ２０ｄに入力され、第４切り出しカウンタ２０ｄにおいて、位置情報と表示サイズに応じてオートパンによる映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から映像を切り出し、オートパン機能による監視領域内の巡回移動映像をモニタに拡大表示する。
【００２７】
すなわちオートパンカウンタ２１から第４切り出しカウンタ２０ｄに入力される位置情報は、オートパンカウンタ２１に設定した移動パターンや移動速度によって決定される。そしてオートパンカウンタ２１に設定した移動パターンによって、例えば、移動方向を折り返して巡回移動させ、右端から左端に向かって移動するとともに、左端で方向転換して左端から右端に向かって移動し、さらに右端で方向転換して右端から左端に向かって再び移動する一定区画の映像をモニタに拡大表示することや、例えば、一方向の移動を繰返すことによって巡回移動させ、左端から右端への一方向、若しくは右端から左端への一方向を、繰返して移動する一定区画の映像をモニタの拡大映像表示領域に拡大表示することができる。
【００２８】
なお、監視領域全体を撮影したカメラ映像をもとに監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能は、カメラ映像中の特定の範囲を除外し、除外しない範囲内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するように設定してもよい。
【００２９】
例えば、図２（ｂ）に示すように、グループ化したカメラ１ａ及び１ｂと、グループ化したカメラ１ｃ及び１ｄとを使用して監視領域を撮影した場合において、グループ化したカメラ１ａ及び１ｂで撮影したカメラ映像Ｃ５及びＣ６の範囲を除外し、グループ化したカメラ１ｃ及び１ｄで撮影したカメラ映像Ｃ７及びＣ８の範囲内で、経時的に巡回移動する一定区画の映像を切り出して拡大表示するように設定してもよい。
【００３０】
さらに、カメラ映像全体を動き検出する第２動き検出部１２で検出したターゲットの位置を求め、動き検出した全てのターゲットの位置を包含する範囲を求め、この範囲内で、経時的に巡回移動する一定区画の映像を切り出して拡大表示するように設定してもよい。
【００３１】
またこの実施例では、オペレータが任意に設定した範囲内で動き検出する第３動き検出部１６を設け、前記第３動き検出部１６による動き検出が、オートパン判定部２８に設定した閾値を超える場合は、第１及び第２動き検出部１１，１２で検出したターゲットを自動追尾する自動追尾機能を使用せず、オートパン機能による自動巡回移動映像を切り出して拡大表示するようにした。
【００３２】
図５に示すように、モニタに表示された全体映像をもとにオペレータが設定した任意の範囲を第３動き検出部１６で動き検出し、前記設定範囲に多数の人が存在して多くの動きが検出された場合、自動追尾機能によって検出したターゲットの拡大映像を優先して表示するのではなく、監視領域全体を巡回移動する一定区画の拡大映像を表示する。これによって監視領域内に多くの動きが検出されたときに、監視領域全体を見渡すようにして監視することができる。
この実施例では、第３動き検出部で動き検出するにあたって、第1及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲットの映像範囲（自動追尾による切り出し範囲）を除いて動き検出した。
そして前記設定範囲において多数の動きが検出され、オートパン判定部２８に設定した閾値を超えた場合、自動追尾機能によるターゲットの拡大表示を使用せず、オートパン機能による拡大表示を優先的に選択するように表示領域判定部３０を設定し、この表示領域判定部３０の情報に基づいて表示制御部３１でマルチプレクサ３２を制御して、フレームメモリ５からの映像の切り出しを制御した。
【００３３】
監視領域内に多数の人が存在する場合、自動追尾機能によって検出したターゲットの拡大映像を表示するのではなく、監視領域全体を巡回移動するように一定区画の拡大映像を表示することによって、監視領域全体を見渡すことができる。
【００３４】
さらに図３に示す実施形態では、監視領域全体を撮影したカメラ映像をもとに監視領域の全体映像をモニタに表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でホームポジションとしてターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能を備える。
この実施例では、マウスやキーボードやボタンなどの指示装置を用いてオペレータがモニタの全体映像表示領域に表示された全体映像をもとにホームポジションとしてモニタ（全体映像）上でターゲットを指定した場合、そのホームポジション（ターゲット）の位置（例えば、オペレータが指定した位置座標）をホームポジションレジスタ２２で検出する。
そしてこの位置情報は、第５切り出しカウンタ２０ｅに入力され、第５切り出しカウンタ２０ｅにおいて、位置情報と表示サイズに応じてホームポジション機能による映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から映像を切り出し、監視領域内に設定したホームポジションの映像をモニタに拡大表示する。
【００３５】
なおこの実施例では、ホームポジションレジスタ２２において、表示優先度の高い第1ホームポジションと、表示優先度の低い第２ホームポジションとを設定できるように構成した。すなわち、ホームポジション（ターゲット）の映像を全体映像から切り出して拡大表示するにあたって、ホームポジションレジスタ２２では、モニタに常に表示していたい位置を第１ホームポジションとして設定し、前記第1ホームポジションの拡大映像を優先して表示する。また第1ホームポジションの設定がない場合に、自動追尾機能や指定追尾機能やマニュアル追尾機能やオートパン機能によって切り出した映像よりも、表示優先度の低いホームポジション（ターゲット）の映像を第２ホームポジションとして設定し、自動追尾機能や指定追尾機能やマニュアル追尾機能やオートパン機能の各機能でターゲットを検出しなかった場合は、前記第２ホームポジションとして設定したターゲットの拡大映像を表示する。
【００３６】
第１及び第２切り出しカウンタ２０ａ，２０ｂには、第１及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲットの位置情報と、追尾画面判定部２７で算出した表示サイズが入力され、第３ないし第５切り出しカウンタ２０ｃ〜２０ｅには、マニュアル追尾部１９、オートパンカウンタ２１、ホームポジションレジスタ２２で検出したターゲットの位置情報と、表示フレーム判定部２３で算出した表示サイズが入力される。そして前記位置情報と表示サイズに基づいて、各切り出しカウンタ２０ａ〜２０ｅで各切り出し範囲を設定し、各切り出しカウンタ２０ａ〜２０ｅは、前記切り出し範囲（読み出しアドレス）をもとに、フレームメモリ５に格納されているカメラ映像からターゲットの映像を部分的に切り出し（読み出し）、モニタの拡大映像表示領域に各ターゲットの拡大映像を表示する。
また第６切り出しカウンタ２０ｆには、モニタの全体映像表示領域に監視領域の全体映像を表示するための表示サイズが入力され、第６切り出しカウンタ２０ｆは、フレームメモリ５に格納されているカメラ映像から監視領域全体を切り出す（読み出す）とともに、前記表示サイズに基づいて、モニタの全体映像表示領域に全体映像を表示する。
【００３７】
第１ないし第５切り出しカウンタ２０ａ〜２０ｅに入力される表示サイズは、表示フレーム判定部２３及び追尾画面判定部２７で算出される。
表示フレーム判定部２３には、予め拡大映像表示領域全体のサイズが入力されており、この拡大映像表示領域全体のサイズと、自動追尾機能などの各機能で検出したターゲットの数とに基づいて、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの表示サイズを算出する。なお、自動追尾機能及び指定追尾機能によって検出したターゲット（つまり第１及び第２自動追尾部で追尾したターゲット）の表示サイズは、前記表示フレーム判定部２３で算出した表示サイズと、表示位置判定部２６で検出したターゲットの位置関係（近接／離隔）とに基づいて算出され、第1及び第２切り出しカウンタ２０ａ，２０ｂに入力される。
【００３８】
図３に示す実施形態では、表示フレーム判定部２３は、第１及び第２自動追尾部１８ａ，１８ｂ、マニュアル追尾部１９で追尾したターゲットの数にあわせて拡大映像表示領域を分割し、その分割数に基づいて表示サイズを算出するように構成した。つまり表示フレーム判定部２３は、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの数に基づいて画面分割数を決め、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの表示サイズを算出した。
【００３９】
この実施例では、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能でターゲットが検出され、第1及び第２自動追尾部１８ａ，１８ｂまたはマニュアル追尾部１９でターゲットを追尾した場合は、追尾したターゲットの数にあわせて拡大映像表示領域を分割する。
そして第1及び第２自動追尾部１８ａ，１８ｂまたはマニュアル追尾部１９で追尾したターゲットが存在しない場合は、拡大映像表示領域を分割せず、オートパン機能若しくはホームポジション機能によるターゲットの拡大映像を拡大映像表示領域に表示する。なお、オートパン機能とホームポジション機能の両方でターゲットを検出した場合は、表示項目判定部２５に設定した優先度に従って、優先度の高いターゲットの映像を優先して表示する。
【００４０】
また表示フレーム判定部２３において、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの数に基づいて、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの表示サイズを算出する場合、常にモニタに表示したい第1ホームポジションをホームポジションレジスタ２２で設定したときは、第1及び第２自動追尾部１８ａ，１８ｂまたはマニュアル追尾部１９で追尾したターゲットの数に、第1ホームポジションとして設定したターゲットの数を加えた数で、モニタの拡大映像表示領域を分割し、第１ホームポジションと追尾したターゲットの映像を表示するように構成してもよい。
【００４１】
さらに、表示フレーム判定部２３で表示サイズを算出するにあたって、第１及び第２自動追尾部１８ａ，１８ｂ、マニュアル追尾部１９で追尾したターゲットの数だけでなく、オートパンカウンタ２１やホームポジションレジスタ２２で検出したターゲットの数を表示フレーム判定部２３に入力し、これらターゲットの総数に基づいて表示サイズを算出するように構成し、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの数にあわせて拡大映像表示領域を分割し、各機能で検出したターゲットを表示するように構成してもよい。
【００４２】
なお、表示フレーム判定部２３で算出した表示サイズは表示領域判定部３０に入力され、表示領域判定部３０でモニタ画面を構築するにあたって、自動追尾機能などの各機能で検出したターゲットの数にあわせて拡大映像表示領域を分割するようにモニタ画面を構築する。
これによってよって、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの拡大映像を、モニタの拡大映像表示領域を分割した画面にそれぞれ表示することができる。
【００４３】
さらにこの実施例では、表示領域判定部３０でモニタ画面を構築するにあたって、拡大映像表示領域の分割数（画面分割数）に上限を設けた。
表示フレーム判定部２３に上限値を設定し、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの総数が前記上限を超えた場合は、前記上限値をもとに表示サイズを算出し、この表示サイズと画面分割数をもとに表示領域判定部３０でモニタ画面を構築し、拡大映像表示領域を上限値で分割するようにした。また表示優先度設定部２４によって、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能の表示優先順位を表示項目判定部２５に設定し、表示項目の優先順位が設定された表示項目判定部２５に、表示フレーム判定部２３で設定した画面分割数を入力した。
そして、前記表示項目判定部２５に設定した優先順位と、表示項目判定部２５に入力された画面分割数とに基づいて、表示制御部３１でマルチプレクサ３２を制御した。つまりマルチプレクサ３２において、優先順位を高く設定した表示項目の映像を切り出すための切り出しカウンタを優先して選択し、選択した切り出しカウンタによってフレームメモリ５のカメラ映像から切り出し、ターゲットの映像を拡大表示した。
【００４４】
例えば、表示優先度設定部２４で、ホームポジションレジスタ２２で設定した第１ホームポジション、第１及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲット、マニュアル追尾部１９で追尾したターゲット、オートパンカウンタ２２で設定したオートパン、ホームポジションレジスタ２２で設定した第２ホームポジションの順序で表示項目の優先順位を設定するとともに、表示フレーム判定部２３に設定した拡大映像表示領域の分割上限値を「２」と設定した場合、表示フレーム判定部２３で検出したターゲットの総数が２つを超えると、表示フレーム判定部２３は、画面分割数の上限値を表示項目判定部２５に入力し、さらに画面の分割数（上限値）にあわせて算出した表示サイズを表示領域判定部３０と、第３ないし第５切り出しカウンタ２０ｃ〜２０ｅに入力する。なお第１及び第２切り出しカウンタ２０ａ，２０ｂには、画面の分割数（上限値）にあわせて算出した表示サイズとターゲットの位置情報をもとに、追尾画面設定部２７で算出した表示サイズを入力する。
【００４５】
そして表示領域判定部３０は画面分割数と表示サイズに基づいて、図６に示すように、全体映像を表示するための全体映像表示領域とターゲットの拡大映像を表示するための拡大映像表示領域を設定するとともに、前記拡大映像表示領域を２分割したモニタ画面を構築する。また表示制御部３１は、表示領域判定部３０に入力された情報に基づいてマルチプレクサ３２を制御し、マルチプレクサ３２は、表示項目判定部２５に設定された表示項目優先順位をもとに２つの切り出しカウンタを選択し、選択した切り出しカウンタによってフレームメモリ５に格納されているカメラ映像からターゲットの映像を部分的に切り出す。
【００４６】
さらにこの実施例では、第３動き検出部１６において、オペレータが任意に設定した範囲内で動き検出を行い、この動き検出がオートパン判定部２８に設定した閾値（例えば「４」）を超える場合は、第1及び第２動き検出部１１，１２で検出したターゲットを自動追尾する自動追尾機能を使用せず、オートパン機能を優先して使用するように構成した。
【００４７】
なお図３に示す実施形態では、モニタに監視領域の全体映像を表示するにあたって、前記全体映像の表示／非表示を設定するための全体映像設定部２９を設け、全体映像設定部２９において全体映像を表示すると設定した場合、その情報が表示領域判定部３０に入力され、表示制御部３１はこの情報に基づいてマルチプレクサ３２を制御し、マルチプレクサ３２で第６切り出しカウンタ２０ｆを選択し、この第６切り出しカウンタ２０ｆによってフレームメモリ５に格納されているカメラ映像から監視領域全体の映像を切り出し、モニタに設定した全体映像表示領域に監視領域の全体映像を表示した。
【００４８】
すなわち表示領域判定部３０は、表示項目判定部２５から入力された表示項目と、表示フレーム判定部２３や追尾画面判定部２７から入力された表示サイズと、オートパン判定部２８から入力された情報と、全体映像設定部２９から入力された情報とに基づいて、モニタ画面を構築し、さらにモニタ画面の構築情報に基づいて表示制御部３１はマルチプレクサ３２を制御する。
【００４９】
図７は、表示領域判定部３０におけるモニタ画面の構築例を示すものである。
図７（ａ）に示すモニタ画面は、全体映像を表示するための全体映像表示領域と、ターゲットの拡大映像を表示するための拡大映像表示領域を設定するとともに、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの数（２つ）にあわせて前記拡大映像表示領域を２つに分割し、上記各機能で検出したターゲットの拡大映像を表示したものである。
なお拡大映像表示領域の画面分割数に上限を設けた場合、前記上限値を超えるターゲットが検出された場合は、上限値で拡大映像表示領域を分割してモニタ画面を構築するとともに、表示項目判定部２５に設定された表示項目の優先順位とオートパン判定部２８の情報をもとに表示制御部３１がマルチプレクサ３２を制御して、優先順位の高い切り出しカウンタを選択し、画面分割数にあわせて算出した表示サイズに基づいてターゲットの映像を切り出し、拡大映像表示領域に各ターゲットの拡大映像を表示する。なお自動追尾機能や指定追尾機能で検出したターゲットの映像は、追尾画面判定部２７で算出した表示サイズに基づいて切り出され、２つのターゲットが近接した場合は、拡大映像表示領域に設定された結合画面に２つのターゲットを包含した映像が拡大表示される。
【００５０】
また表示領域判定部３０においてモニタ画面を構築するにあたって、図７（ｂ）に示すようにモニタの拡大映像表示領域を分割し、自動追尾機能で検出したターゲットの映像を表示するための表示位置（表示区画）と、指定追尾機能で検出したターゲットの映像を表示するための表示位置（表示区画）と、マニュアル追尾機能で検出したターゲットの映像を表示するための表示位置（表示区画）と、オートパン機能で検出した一定区画の映像を表示するための表示位置（表示区画）と、ホームポジション機能で設定したターゲットの映像を表示するための表示位置（表示区画）とをそれぞれ設定し、機能毎に設定した各表示位置に、各機能で検出したターゲットの拡大映像をそれぞれ表示するようにモニタ画面を構築してもよい。
また表示領域判定部３０において、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の機能毎に設定した表示位置をさらに分割し、各機能で検出した複数のターゲットをそれぞれの表示位置に表示するようにモニタ画面を構築してもよい。
また機能毎に設定した表示位置の分割数に上限を設け、前記各機能で検出したターゲットの数が前記分割数の上限を超えた場合は、機能毎に設定した表示位置を上限値で分割するとともに、優先度に従って機能毎にターゲットを選択するように、表示フレーム判定部２３と表示項目判定部２５とを設定してもよい。
【００５１】
以上説明したように、この実施例では表示領域判定部３０でモニタ画面を構築し、この情報をもとに表示制御部３１がマルチプレクサ３２を制御する。また第１ないし第６切り出しカウンタ２０ａ〜２０ｆに入力した表示サイズに基づいて映像の切り出し範囲を設定するとともに、表示制御部３１によって制御されるマルチプレクサ３２で選択した切り出しカウンタによって、フレームメモリ５に格納されているカメラ映像から映像を切り出し（読み出し）、モニタの全体映像表示領域に監視領域の全体映像を表示するとともに、拡大映像表示領域にターゲットの拡大映像を表示する。
つまり表示制御部３１による制御によって、モニタの拡大映像表示領域には各機能で検出したターゲットの拡大映像が自動的に表示形式を切替えて表示される。
【００５２】
第1切り出しカウンタ２０ａには、第１自動追尾部１８ａで自動追尾したターゲットの位置情報と、追尾画面判定部２７で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。
第２切り出しカウンタ２０ｂには、第１自動追尾部１８ｂで自動追尾したターゲットの位置情報と、追尾画面判定部２７で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲（読み出しアドレス）を決定する。
【００５３】
第１及び第２切り出しカウンタ２０ａ，２０ｂでは、自動追尾したターゲットの外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなる位置情報を取得し、前記位置情報と表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。これによって、ターゲットの上半身の映像が途切れることなく、自動追尾したターゲットの映像を拡大表示することができる。
また、自動追尾した２つのターゲットが近接し、追尾画面判定部２７で画面の結合が設定された場合は、２つのターゲットの位置情報（ターゲットの外接矩形の中心のＸ座標および外接矩形上端のＹ座標）について、各Ｘ座標の中点座標（Ｘ座標）と、各Ｙ座標のうち大きい方の座標（Ｙ座標）とからなる位置情報を取得し、この位置情報と結合画面の表示サイズに基づいて、第１または第２切り出しカウンタ２０ａ，２０ｂのどちらか一方で、切り出し範囲（読み出しアドレス）を設定する。なお近接した２つのターゲットが離隔し、追尾画面判定部２７で画面の分割が設定された場合は、自動追尾したターゲットの外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなるそれぞれの位置情報と、追尾画面の表示サイズに基づいて、第１及び第２切り出しカウンタ２０ａ，２０ｂのそれぞれで、切り出し範囲（読み出しアドレス）を設定する。
【００５４】
第３切り出しカウンタ２０ｃには、マニュアル追尾部１９で追尾したターゲットの位置情報と、表示フレーム判定部２３で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。第３切り出しカウンタ２０ｃでは、モニタに表示された全体映像に基づいてマウスやキーボードやボタンなどの指示装置を用いてオペレータが指定した領域の全体映像中の位置座標を取得し、全体映像中の前記位置座標を中心とした一定の範囲を切り出すように、表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。
【００５５】
第４切り出しカウンタ２０ｄには、オートパンカウンタ２１で設定した一定区画（巡回区画）の位置情報と、表示フレーム判定部２３で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。第４切り出しカウンタ２０ｄでは、オートパンカウンタ２１で設定された位置座標を取得し、全体映像中の前記位置座標を中心とした一定の範囲（一定区画）を切り出すように、表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。
【００５６】
第５切り出しカウンタ２０ｅには、ホームポジションレジスタ２２で設定したホームポジションの位置情報と、表示フレーム判定部２３で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。モニタに表示された全体映像に基づいてマウスやキーボードやボタンなどの指示装置を用いてオペレータが指定した領域の全体映像中の位置座標を取得し、全体映像中の前記位置座標を中心とした一定の範囲を切り出すように、表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。
【００５７】
第1ないし第５切り出しカウンタ２０ａ〜２０ｅによる情報は、表示制御部３１によって制御されているマルチプレクサ３２に入力され、表示項目の優先順位や画面分割数に基づいてマルチプレクサ３２で切り出しカウンタが選択され、選択した切り出しカウンタによる切り出し範囲（読み出しアドレス）をもとに、フレームメモリ５に格納されたカメラ映像から部分的に映像を切り出し（図１を参照）、この部分的に切り出した映像をモニタに拡大表示する。
【００５８】
またこの実施例では、第６切り出しカウンタ２０ｆにおいて全体映像の表示サイズを予め設定（入力）しておき、この第６切り出しカウンタ２０ｆによる情報を表示制御部３１によって制御されているマルチプレクサ３２に入力する。そして全体映像を表示する場合は、マルチプレクサ３２で第６切り出しカウンタ２０ｆを選択し、この第６切り出しカウンタ２０ｆの情報をもとに、フレームメモリ５に格納されたカメラ映像から監視領域全体の映像を切り出し（図１を参照）、モニタの全体映像表示領域に全体映像を表示する。
【００５９】
なお図６に示すように、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能によって検出したターゲットの拡大映像と、監視領域の全体映像とを同時に表示するにあたって、各機能によって検出したターゲットの映像を切り出した位置を全体映像中にカーソル表示するとともに、前記機能毎にカーソルを区別してカーソル表示をすることが好ましい。
【図面の簡単な説明】
【００６０】
【図１】本発明の実施形態による映像監視システムのブロック図。
【図２】カメラの配置例を示す図。
【図３】この発明の実施形態による表示映像設定部のブロック図。
【図４】この発明の映像監視システムによる監視方法の実施例を説明する図。
【図５】第３動き検出部による動き検出を説明する図。
【図６】本発明の映像監視システムによる表示方法を説明する図。
【図７】モニタ画面の構築例を示す図。
【符号の説明】
【００６１】
１ａ〜１ｄ カメラ
２ａ〜２ｄ Ａ／Ｄ変換器
３ａ〜３ｄ 同期メモリ
４ 連結部
５ フレームメモリ
６ 表示映像設定部
７ カーソルポジションレジスタ
８ カーソル表示部
９ Ｄ／Ａ変換器
１０ モニタ
１１ 第1動き検出部
１２ 第２動き検出部
１３ 指定追尾設定部
１４ マニュアル追尾設定部
１５ 優先度設定部
１６ 第３動き検出部
１７ 追尾優先度判定部
１８ａ，１８ｂ 第１，第２自動追尾部
１９ マニュアル追尾部
２０ａ〜２０ｆ 第1〜第６切り出しカウンタ
２１ オートパンカウンタ
２２ ホームポジションレジスタ
２３ 表示フレーム判定部
２４ 表示優先度設定部
２５ 表示項目判定部
２６ 表示位置判定部
２７ 追尾画面判定部
２８ オートパン判定部
２９ 全体映像設定部
３０ 表示領域判定部
３１ 表示制御部
３２ マルチプレクサ
【技術分野】
【０００１】
この発明は、表示装置に表示した映像をもとに、監視カメラで撮影した領域を監視する映像監視システムに関する。
【背景技術】
【０００２】
近年、監視カメラと表示装置を備えた撮影監視システムが、商業分野や金融機関等において、防犯等の目的のため、広く利用されている。
そして、撮影カメラから入力される映像をもとに、監視領域の全体映像と、この全体映像中にあるターゲットの拡大映像を取得し、監視精度を高めたいといった要求がある。
従来技術では、監視領域全体の映像を取得するための広角カメラを設置するとともに、監視領域内の一区画についての拡大映像を取得するためのカメラを監視領域内の各区画（複数）に設置し、広角カメラで撮影した全体映像に基づいて着目したい部分があれば、その区画に設置されたカメラで撮影した拡大映像を取得し、監視領域全体の映像と、ターゲットの拡大映像とを取得するといった、複数カメラによる撮影監視システムが用いられていた。
しかし、複数のカメラを必要とする撮影監視システムでは、装置コスト、設置工事、メンテナンス、カメラ設置スペースなどの問題を抱えており、シンプルな構成が求められていた。
【０００３】
そして近年、高解像度ＣＣＤカメラの出現により、１台の高解像度・広角カメラで高解像度の広角映像を取得することが可能となり、１台のカメラから取得した高解像度の映像から、目的とする領域の映像（ターゲットの映像）を切り出してモニタに拡大表示する技術が開発された。（例えば、特許文献１を参照）
【特許文献１】特願２００２−１６７３１０
【発明の開示】
【発明が解決しようとする課題】
【０００４】
監視カメラから入力された高解像度の全体映像に基づいて、ターゲットの拡大映像をモニタに表示する場合、検出したターゲットの位置情報（アドレス）に基づいて全体映像から部分的に映像を切り出し、ターゲットの拡大映像をモニタに表示する。
従って、モニタに表示された映像を観察する監視者が、監視領域の異常を的確に把握するためには、全体映像から状況に合わせて的確にターゲットを検出し、その拡大映像をモニタに表示することが望まれている。またモニタを観察する監視者の負担を軽減するために、検出したターゲットの位置を容易に把握できるように表示することが望まれている。
【課題を解決するための手段】
【０００５】
上述の目的を達成するため、この発明は、監視領域全体を撮影したカメラ映像をもとに、監視領域の全体映像をモニタの全体映像表示領域に表示するとともに、全体映像中のターゲットの拡大映像をモニタの拡大映像表示領域に表示する映像監視システムであって、監視領域全体を撮影したカメラ映像をもとに、動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する自動追尾機能と、監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上で指定したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する指定追尾機能と、監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、モニタに表示された映像をもとにオペレータがモニタ（全体映像）上で経時的に指定する位置を、オペレータの指定に追随して一定時間またはその指定がなくなるまで追尾し、その領域の映像を全体映像から切り出して拡大表示するマニュアル追尾機能と、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能と、監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有し、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能を使用するにあたって、監視領域全体を撮影したカメラ映像をもとに動き検出したターゲットの位置を検出し、この動き検出したターゲットの位置を包含する範囲内において、オートパン機能による拡大表示を行うものである。
【０００６】
以下に、本発明の実施形態について、図面を参照にして説明する。
【０００７】
図１は、この発明の実施形態による映像監視システムのブロック図を示すものである。
この実施例では、４台のカメラ１ａ〜１ｄを使用して監視領域全体を撮影し、各映像を連結することによって監視領域全体のカメラ映像を取得した。
各カメラ１ａ〜１ｄで撮影した映像は、それぞれＡ／Ｄ変換器２ａ〜２ｄに入力された後、同期メモリ３ａ〜３ｄに入力され、その後、連結部４に入力される。そして、連結部４において各カメラ映像を連結し、監視領域全体のカメラ映像を取得する。
【０００８】
監視領域全体のカメラ映像はフレームメモリ５に入力されるとともに、表示映像設定部６に入力され、この表示映像設定部６で、フレームメモリ５に格納されているカメラ映像から目的に応じたターゲットの映像を切り出し、Ｄ／Ａ変換器９を介してモニタ１０に入力する。
つまり、フレームメモリ５に格納されたカメラ映像から、監視領域の全体映像を読み出す（切り出す）とともに、全体映像中から目的とする領域（以下、ターゲットという）の映像を読み出す（切り出す）ことによって、監視領域の全体映像と、ターゲットの拡大映像とをモニタに表示できるように構成した。
【０００９】
なおこの実施例ではカーソルポジションレジスタ７及びカーソル表示部８を設け、拡大表示されるターゲットの映像（フレームメモリ５に格納されている映像から切り出した映像）の位置を、監視領域全体を表示する全体映像中でカーソル表示するように構成した。
そして、モニタに監視領域の全体映像とターゲットの拡大映像を同時に表示するにあたって、カーソルポジションレジスタ７において、カーソルの表示／非表示を設定するとともに、カーソル表示の種類や色を設定し、その設定に基づいてカーソル表示部８で、全体映像中のターゲットの位置にカーソルを表示し、拡大表示されたターゲットの全体映像中の位置を容易に把握できるようにした。
【００１０】
図２は、広域の監視領域を撮影するためのカメラ配置の例を示すものである。
図２（ａ）に示すカメラの配置例では、４台のカメラ（撮影画角３０°）１ａ〜１ｄを扇状に配置して撮影し、連続性がある（互いに隣合う）４つのカメラ映像Ｃ１〜Ｃ４を取得する。そして前記各カメラ映像Ｃ１〜Ｃ４を連結部４に入力して映像を連結し、広域の監視領域全体のカメラ映像（撮影画角１２０°）を取得する。
【００１１】
図２（ｂ）に示すカメラの配置例では、扇状に配置した２台のカメラ（撮影画角３０°）１ａ及び１ｂをグループ化し、連続性がある（互いに隣合う）２つのカメラ映像Ｃ５及びＣ６を取得するとともに、扇状に配置した２台のカメラ（撮影画角３０°）１ｃ及び１ｄをグループ化し、連続性がある（互いに隣合う）２つのカメラ映像Ｃ７及びＣ８を取得し、これらのカメラ映像Ｃ５〜Ｃ８をそれぞれ連結部４に入力する。そして各カメラ映像Ｃ５〜Ｃ８を連結した全体映像を取得するとともに、前記の全体映像について、カメラ１ａ及び１ｂで撮影したカメラ映像Ｃ５及びＣ６と、カメラ１ｃ及び１ｄで撮影したカメラ映像Ｃ７及びＣ８とに、それぞれグループ化し、これらグループ化したカメラ映像（映像画角６０°）毎に区別して扱うように構成した。
【００１２】
なお１台のカメラで監視領域全体を撮影し、このカメラ映像をもとに表示映像設定部６がフレームメモリ５から映像を読み出し（切り出し）、モニタに表示するように構成してもよい。
【００１３】
続いて、フレームメモリ５に格納されたカメラ映像をもとに、モニタにターゲットの拡大映像を表示する方法について図３を参照して説明する。
図３は、この発明の実施形態による表示映像設定部６のブロック図を示すものである。
【００１４】
この実施例による映像監視システムは、監視領域全体を撮影したカメラ映像をもとに、前記カメラ映像からターゲットの映像を切り出して拡大表示するものであって、監視領域の全体映像と、用途に応じたターゲットの拡大映像とを、モニタに同時に表示するものである。
【００１５】
この実施例によれば、（１）監視領域全体を撮影したカメラ映像をもとに、監視領域内に設定したセンスエリア内で動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示する自動追尾機能と、（２）監視領域全体を撮影したカメラ映像をもとに、監視領域内全体から動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示する自動追尾機能と、（３）監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上で指定したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示する指定追尾機能と、（４）監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、モニタに表示された映像をもとにオペレータがモニタ（全体映像）上で経時的に指定する位置を、オペレータの指定に追随して一定時間またはその指定がなくなるまで追尾し、その領域（ターゲット）の映像を全体映像から切り出して拡大表示するマニュアル追尾機能とを有する。
【００１６】
また、（５）監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように一定区画を経時的に移動させ、その巡回する一定区画の映像を切り出して拡大表示するオートパン機能と、（６）監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有する。
【００１７】
図３に示す実施形態において、第1動き検出部１１は、オペレータが設定したセンスエリア内で動き検出する。監視領域全体を撮影したカメラ映像をもとにモニタの全体映像表示領域に全体映像を表示し、この全体映像をもとに、オペレータが前記映像内の任意の区画をセンスエリアとして設定し（図６を参照）、第１動き検出部１１は、前記カメラ映像をもとにセンスエリア内で動き検出を行い、動き検出したターゲットの数とその位置を検出する。
第２動き検出部１２は、監視領域全体を撮影したカメラ映像の全体で動き検出を行い、動き検出したターゲットの数とその位置を検出する。
指定追尾設定部１３は、マウスやキーボードやボタンなどの指示装置を用いてオペレータがモニタに表示された全体映像中にターゲットを指定した場合、そのターゲットの位置を検出する。
マニュアル追尾設定部１４は、マウスやキーボードやボタンなどの指示装置を用いてオペレータがモニタに表示された全体映像中にターゲットを指定した場合、そのターゲットの位置をオペレータの指示に追随して検出する。
【００１８】
検出したターゲットの数と位置の情報は、検出手段毎に追尾優先度判定部１７に入力される。追尾優先度判定部１７では、優先度設定部１５で設定した優先順位に従ってターゲットを選択し、第1動き検出部１１、第２動き検出部１２、指定追尾設定部１３で検出したターゲットのうち優先順位の高いターゲットを、それぞれ自動追尾部１８ａ、１８ｂで自動追尾する。またマニュアル追尾部１４でターゲットを検出した場合、マニュアル追尾部１９において、オペレータによる指示に追随してマニュアル追尾する。
【００１９】
この実施例では、優先度設定部１５において、第1動き検出部１１、第２動き検出部１２、指定追尾設定部１３、マニュアル追尾設定部１４の順に優先順位を設定した。また第1動き検出部１１、第２動き検出部１２、指定追尾設定部１３から入力されたそれぞれのターゲットから、前記優先順位に従って２つのターゲットを選択し、自動追尾するように構成した。つまりセンスエリア内の動き検出を行う第１動き検出部１１で動き検出されない場合は、監視領域の映像全体から動き検出を行う第２動き検出部１２で検出したターゲットが選択される。
そして第１及び第２自動追尾部１８ａ，１８ｂを設け、追尾優先度判定部１７で選択した２つのターゲットについて、優先順位が一番目のターゲットを第１自動追尾部１８ａで自動追尾し、優先順位が２番目のターゲットを第２自動追尾部１８ｂで自動追尾するように設定した。
【００２０】
なお監視領域全体（映像全体）で動き検出する第２動き検出部１２の作動（使用／未使用）を制御し、監視領域全体から動き検出する第２動き検出部１２を使用せず、オペレータが監視領域の映像（全体映像）をもとに設定したセンスエリア内で動き検出したターゲットが検出されない場合、指定追尾設定部１３で指定したターゲットを選択するように構築してもよい。
【００２１】
第１及び第２自動追尾部１８ａ，１８ｂでは、ターゲットが動き検出されてから一定時間、または動き検出しなくなるまで、ターゲットの自動追尾を継続する。
なお自動追尾したターゲットの動きが検出されなくなるまでターゲットを自動追尾する場合において、この実施例では、ターゲットが動き検出されなくなってから一定時間経過まではそのターゲットの自動追尾を継続し、一旦動き検出されなくなっても、動き検出されなくなってから一定時間経過前に動き検出された場合は、そのターゲットの自動追尾を継続して行う。
第1及び第２自動追尾部１８ａ，１８ｂでは、自動追尾したターゲットの動き検出が継続している場合は、動き検出したターゲットの位置情報を第1または第２切り出しカウンタ２０ａ，２０ｂに入力し、自動追尾したターゲットの動きが検出されなくなった場合は、動き検出されなくなってから一定時間経過までのあいだ、最後に動き検出したターゲットの位置情報を切り出しカウンタ２０ａ，２０ｂに入力する。そして上記のターゲットの位置情報をもとに、自動追尾したターゲットの映像が、フレームメモリ５に格納されているカメラ映像から切り出される。
【００２２】
第1及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲットの位置情報は、それぞれ第１及び第２切り出しカウンタ２０ａ，２０ｂに入力され、第１及び第２切り出しカウンタ２０ａ，２０ｂにおいて、位置情報と表示サイズに応じてターゲット映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から、ターゲットの映像を切り出し、モニタにターゲットの自動追尾映像を拡大表示する。
【００２３】
この実施例では、第１及び第２自動追尾部１８ａ，１８ｂにおいて、２つのターゲットを自動追尾する場合、第１及び第２切り出しカウンタ２０ａ，２０ｂで切り出したターゲットの映像を拡大表示するため、モニタの拡大映像表示領域を分割して、２つの追尾画面を設定するように構築した。
また第１及び第２自動追尾部１８ａ，１８ｂにおいて、２つのターゲットを自動追尾する場合、各ターゲットの位置関係（左右関係）にあわせて２つの追尾画面に並列表示するため、第１及び第２自動追尾部１８ａ，１８ｂで自動追尾した各ターゲットの位置情報を表示位置判定部２６に入力し、ターゲットの位置判定を行った。
また２つのターゲットを自動追尾する場合、互いのターゲットが近接したときに、モニタの拡大映像表示領域に設定された２つの追尾画面を結合し、２つのターゲットを包括して表示するため、表示位置判定部２６に入力された各ターゲットの位置情報（第１及び第２自動追尾部１８ａ，１８ｂで自動追尾した各ターゲットの位置情報）を追尾画面判定部２７に入力し、追尾画面の結合・分割を判定した。
【００２４】
なお図３に示す実施形態では、自動追尾映像による映像監視だけではなく、アラーム等による警告を行うための追尾ターゲット検出部３３を設けた。
例えば、図４に示す映像監視システムによる監視方法のように、監視領域全体を４台のカメラ１ａ〜１ｄで撮影したカメラ映像をもとに監視領域を監視するとともに、グループ化した２台のカメラ１ａ及び１ｂで撮影した特定区域に進入したターゲットを優先して監視する場合、前記特定区域内（グループ化したカメラ１ａ及び１ｂで撮影したカメラ映像）で動き検出したターゲットを自動追尾し、自動追尾したターゲットの拡大映像をモニタに表示するとともに、アラームを鳴らすように構成した。
この実施例では、カメラ映像をもとに特定区域の入口にセンスエリアを設定し（オペレータが映像内にセンスエリアを設定し）、このセンスエリアを通過して特定区域内にターゲットが進入し、第1動き検出部１１によって前記ターゲットが検出され、第1または第２自動追尾部１８ａ，１８ｂでターゲットを自動追尾した場合、前記ターゲットの特定区域への進入をアラーム等を鳴らして監視者等に警告するため、第１または第２自動追尾部１８ａ，１８ｂによってターゲットを自動追尾しているあいだ、追尾ターゲット検出部３３では検出信号を出力し、アラームを鳴らすように構成した。なおこの実施例では、グループ化したカメラ１ａ及び１ｂで撮影した特定区域の映像内でのみターゲットを自動追尾するように構成した。
【００２５】
マニュアル追尾部１９でマニュアル追尾したターゲットの位置情報は、第３切り出しカウンタ２０ｃに入力され、第３切り出しカウンタ２０ｃにおいて、前記位置情報と表示サイズに応じてターゲット映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から、ターゲットの映像を切り出し、モニタにターゲットのマニュアル追尾映像を拡大表示する。
【００２６】
さらに図３に示す実施形態では、オートパンカウンタ２１でオートパン機能の設定を行い、監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能を備える。
この実施例では、オートパンカウンタ２１に、オートパン機能による移動パターンやその速度を設定することによって、監視領域内を巡回するように経時的に移動する一定区画の位置情報（例えば一定区画の中心座標）を決定する。そしてこの位置情報は、第４切り出しカウンタ２０ｄに入力され、第４切り出しカウンタ２０ｄにおいて、位置情報と表示サイズに応じてオートパンによる映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から映像を切り出し、オートパン機能による監視領域内の巡回移動映像をモニタに拡大表示する。
【００２７】
すなわちオートパンカウンタ２１から第４切り出しカウンタ２０ｄに入力される位置情報は、オートパンカウンタ２１に設定した移動パターンや移動速度によって決定される。そしてオートパンカウンタ２１に設定した移動パターンによって、例えば、移動方向を折り返して巡回移動させ、右端から左端に向かって移動するとともに、左端で方向転換して左端から右端に向かって移動し、さらに右端で方向転換して右端から左端に向かって再び移動する一定区画の映像をモニタに拡大表示することや、例えば、一方向の移動を繰返すことによって巡回移動させ、左端から右端への一方向、若しくは右端から左端への一方向を、繰返して移動する一定区画の映像をモニタの拡大映像表示領域に拡大表示することができる。
【００２８】
なお、監視領域全体を撮影したカメラ映像をもとに監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能は、カメラ映像中の特定の範囲を除外し、除外しない範囲内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するように設定してもよい。
【００２９】
例えば、図２（ｂ）に示すように、グループ化したカメラ１ａ及び１ｂと、グループ化したカメラ１ｃ及び１ｄとを使用して監視領域を撮影した場合において、グループ化したカメラ１ａ及び１ｂで撮影したカメラ映像Ｃ５及びＣ６の範囲を除外し、グループ化したカメラ１ｃ及び１ｄで撮影したカメラ映像Ｃ７及びＣ８の範囲内で、経時的に巡回移動する一定区画の映像を切り出して拡大表示するように設定してもよい。
【００３０】
さらに、カメラ映像全体を動き検出する第２動き検出部１２で検出したターゲットの位置を求め、動き検出した全てのターゲットの位置を包含する範囲を求め、この範囲内で、経時的に巡回移動する一定区画の映像を切り出して拡大表示するように設定してもよい。
【００３１】
またこの実施例では、オペレータが任意に設定した範囲内で動き検出する第３動き検出部１６を設け、前記第３動き検出部１６による動き検出が、オートパン判定部２８に設定した閾値を超える場合は、第１及び第２動き検出部１１，１２で検出したターゲットを自動追尾する自動追尾機能を使用せず、オートパン機能による自動巡回移動映像を切り出して拡大表示するようにした。
【００３２】
図５に示すように、モニタに表示された全体映像をもとにオペレータが設定した任意の範囲を第３動き検出部１６で動き検出し、前記設定範囲に多数の人が存在して多くの動きが検出された場合、自動追尾機能によって検出したターゲットの拡大映像を優先して表示するのではなく、監視領域全体を巡回移動する一定区画の拡大映像を表示する。これによって監視領域内に多くの動きが検出されたときに、監視領域全体を見渡すようにして監視することができる。
この実施例では、第３動き検出部で動き検出するにあたって、第1及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲットの映像範囲（自動追尾による切り出し範囲）を除いて動き検出した。
そして前記設定範囲において多数の動きが検出され、オートパン判定部２８に設定した閾値を超えた場合、自動追尾機能によるターゲットの拡大表示を使用せず、オートパン機能による拡大表示を優先的に選択するように表示領域判定部３０を設定し、この表示領域判定部３０の情報に基づいて表示制御部３１でマルチプレクサ３２を制御して、フレームメモリ５からの映像の切り出しを制御した。
【００３３】
監視領域内に多数の人が存在する場合、自動追尾機能によって検出したターゲットの拡大映像を表示するのではなく、監視領域全体を巡回移動するように一定区画の拡大映像を表示することによって、監視領域全体を見渡すことができる。
【００３４】
さらに図３に示す実施形態では、監視領域全体を撮影したカメラ映像をもとに監視領域の全体映像をモニタに表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でホームポジションとしてターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能を備える。
この実施例では、マウスやキーボードやボタンなどの指示装置を用いてオペレータがモニタの全体映像表示領域に表示された全体映像をもとにホームポジションとしてモニタ（全体映像）上でターゲットを指定した場合、そのホームポジション（ターゲット）の位置（例えば、オペレータが指定した位置座標）をホームポジションレジスタ２２で検出する。
そしてこの位置情報は、第５切り出しカウンタ２０ｅに入力され、第５切り出しカウンタ２０ｅにおいて、位置情報と表示サイズに応じてホームポジション機能による映像の切り出し範囲が設定され、この切り出し範囲（読み出しアドレス）に基づいて、フレームメモリ５（図１を参照）に格納されたカメラ映像から映像を切り出し、監視領域内に設定したホームポジションの映像をモニタに拡大表示する。
【００３５】
なおこの実施例では、ホームポジションレジスタ２２において、表示優先度の高い第1ホームポジションと、表示優先度の低い第２ホームポジションとを設定できるように構成した。すなわち、ホームポジション（ターゲット）の映像を全体映像から切り出して拡大表示するにあたって、ホームポジションレジスタ２２では、モニタに常に表示していたい位置を第１ホームポジションとして設定し、前記第1ホームポジションの拡大映像を優先して表示する。また第1ホームポジションの設定がない場合に、自動追尾機能や指定追尾機能やマニュアル追尾機能やオートパン機能によって切り出した映像よりも、表示優先度の低いホームポジション（ターゲット）の映像を第２ホームポジションとして設定し、自動追尾機能や指定追尾機能やマニュアル追尾機能やオートパン機能の各機能でターゲットを検出しなかった場合は、前記第２ホームポジションとして設定したターゲットの拡大映像を表示する。
【００３６】
第１及び第２切り出しカウンタ２０ａ，２０ｂには、第１及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲットの位置情報と、追尾画面判定部２７で算出した表示サイズが入力され、第３ないし第５切り出しカウンタ２０ｃ〜２０ｅには、マニュアル追尾部１９、オートパンカウンタ２１、ホームポジションレジスタ２２で検出したターゲットの位置情報と、表示フレーム判定部２３で算出した表示サイズが入力される。そして前記位置情報と表示サイズに基づいて、各切り出しカウンタ２０ａ〜２０ｅで各切り出し範囲を設定し、各切り出しカウンタ２０ａ〜２０ｅは、前記切り出し範囲（読み出しアドレス）をもとに、フレームメモリ５に格納されているカメラ映像からターゲットの映像を部分的に切り出し（読み出し）、モニタの拡大映像表示領域に各ターゲットの拡大映像を表示する。
また第６切り出しカウンタ２０ｆには、モニタの全体映像表示領域に監視領域の全体映像を表示するための表示サイズが入力され、第６切り出しカウンタ２０ｆは、フレームメモリ５に格納されているカメラ映像から監視領域全体を切り出す（読み出す）とともに、前記表示サイズに基づいて、モニタの全体映像表示領域に全体映像を表示する。
【００３７】
第１ないし第５切り出しカウンタ２０ａ〜２０ｅに入力される表示サイズは、表示フレーム判定部２３及び追尾画面判定部２７で算出される。
表示フレーム判定部２３には、予め拡大映像表示領域全体のサイズが入力されており、この拡大映像表示領域全体のサイズと、自動追尾機能などの各機能で検出したターゲットの数とに基づいて、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの表示サイズを算出する。なお、自動追尾機能及び指定追尾機能によって検出したターゲット（つまり第１及び第２自動追尾部で追尾したターゲット）の表示サイズは、前記表示フレーム判定部２３で算出した表示サイズと、表示位置判定部２６で検出したターゲットの位置関係（近接／離隔）とに基づいて算出され、第1及び第２切り出しカウンタ２０ａ，２０ｂに入力される。
【００３８】
図３に示す実施形態では、表示フレーム判定部２３は、第１及び第２自動追尾部１８ａ，１８ｂ、マニュアル追尾部１９で追尾したターゲットの数にあわせて拡大映像表示領域を分割し、その分割数に基づいて表示サイズを算出するように構成した。つまり表示フレーム判定部２３は、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの数に基づいて画面分割数を決め、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの表示サイズを算出した。
【００３９】
この実施例では、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能でターゲットが検出され、第1及び第２自動追尾部１８ａ，１８ｂまたはマニュアル追尾部１９でターゲットを追尾した場合は、追尾したターゲットの数にあわせて拡大映像表示領域を分割する。
そして第1及び第２自動追尾部１８ａ，１８ｂまたはマニュアル追尾部１９で追尾したターゲットが存在しない場合は、拡大映像表示領域を分割せず、オートパン機能若しくはホームポジション機能によるターゲットの拡大映像を拡大映像表示領域に表示する。なお、オートパン機能とホームポジション機能の両方でターゲットを検出した場合は、表示項目判定部２５に設定した優先度に従って、優先度の高いターゲットの映像を優先して表示する。
【００４０】
また表示フレーム判定部２３において、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの数に基づいて、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの表示サイズを算出する場合、常にモニタに表示したい第1ホームポジションをホームポジションレジスタ２２で設定したときは、第1及び第２自動追尾部１８ａ，１８ｂまたはマニュアル追尾部１９で追尾したターゲットの数に、第1ホームポジションとして設定したターゲットの数を加えた数で、モニタの拡大映像表示領域を分割し、第１ホームポジションと追尾したターゲットの映像を表示するように構成してもよい。
【００４１】
さらに、表示フレーム判定部２３で表示サイズを算出するにあたって、第１及び第２自動追尾部１８ａ，１８ｂ、マニュアル追尾部１９で追尾したターゲットの数だけでなく、オートパンカウンタ２１やホームポジションレジスタ２２で検出したターゲットの数を表示フレーム判定部２３に入力し、これらターゲットの総数に基づいて表示サイズを算出するように構成し、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの数にあわせて拡大映像表示領域を分割し、各機能で検出したターゲットを表示するように構成してもよい。
【００４２】
なお、表示フレーム判定部２３で算出した表示サイズは表示領域判定部３０に入力され、表示領域判定部３０でモニタ画面を構築するにあたって、自動追尾機能などの各機能で検出したターゲットの数にあわせて拡大映像表示領域を分割するようにモニタ画面を構築する。
これによってよって、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能で検出したターゲットの拡大映像を、モニタの拡大映像表示領域を分割した画面にそれぞれ表示することができる。
【００４３】
さらにこの実施例では、表示領域判定部３０でモニタ画面を構築するにあたって、拡大映像表示領域の分割数（画面分割数）に上限を設けた。
表示フレーム判定部２３に上限値を設定し、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの総数が前記上限を超えた場合は、前記上限値をもとに表示サイズを算出し、この表示サイズと画面分割数をもとに表示領域判定部３０でモニタ画面を構築し、拡大映像表示領域を上限値で分割するようにした。また表示優先度設定部２４によって、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の各機能の表示優先順位を表示項目判定部２５に設定し、表示項目の優先順位が設定された表示項目判定部２５に、表示フレーム判定部２３で設定した画面分割数を入力した。
そして、前記表示項目判定部２５に設定した優先順位と、表示項目判定部２５に入力された画面分割数とに基づいて、表示制御部３１でマルチプレクサ３２を制御した。つまりマルチプレクサ３２において、優先順位を高く設定した表示項目の映像を切り出すための切り出しカウンタを優先して選択し、選択した切り出しカウンタによってフレームメモリ５のカメラ映像から切り出し、ターゲットの映像を拡大表示した。
【００４４】
例えば、表示優先度設定部２４で、ホームポジションレジスタ２２で設定した第１ホームポジション、第１及び第２自動追尾部１８ａ，１８ｂで自動追尾したターゲット、マニュアル追尾部１９で追尾したターゲット、オートパンカウンタ２２で設定したオートパン、ホームポジションレジスタ２２で設定した第２ホームポジションの順序で表示項目の優先順位を設定するとともに、表示フレーム判定部２３に設定した拡大映像表示領域の分割上限値を「２」と設定した場合、表示フレーム判定部２３で検出したターゲットの総数が２つを超えると、表示フレーム判定部２３は、画面分割数の上限値を表示項目判定部２５に入力し、さらに画面の分割数（上限値）にあわせて算出した表示サイズを表示領域判定部３０と、第３ないし第５切り出しカウンタ２０ｃ〜２０ｅに入力する。なお第１及び第２切り出しカウンタ２０ａ，２０ｂには、画面の分割数（上限値）にあわせて算出した表示サイズとターゲットの位置情報をもとに、追尾画面設定部２７で算出した表示サイズを入力する。
【００４５】
そして表示領域判定部３０は画面分割数と表示サイズに基づいて、図６に示すように、全体映像を表示するための全体映像表示領域とターゲットの拡大映像を表示するための拡大映像表示領域を設定するとともに、前記拡大映像表示領域を２分割したモニタ画面を構築する。また表示制御部３１は、表示領域判定部３０に入力された情報に基づいてマルチプレクサ３２を制御し、マルチプレクサ３２は、表示項目判定部２５に設定された表示項目優先順位をもとに２つの切り出しカウンタを選択し、選択した切り出しカウンタによってフレームメモリ５に格納されているカメラ映像からターゲットの映像を部分的に切り出す。
【００４６】
さらにこの実施例では、第３動き検出部１６において、オペレータが任意に設定した範囲内で動き検出を行い、この動き検出がオートパン判定部２８に設定した閾値（例えば「４」）を超える場合は、第1及び第２動き検出部１１，１２で検出したターゲットを自動追尾する自動追尾機能を使用せず、オートパン機能を優先して使用するように構成した。
【００４７】
なお図３に示す実施形態では、モニタに監視領域の全体映像を表示するにあたって、前記全体映像の表示／非表示を設定するための全体映像設定部２９を設け、全体映像設定部２９において全体映像を表示すると設定した場合、その情報が表示領域判定部３０に入力され、表示制御部３１はこの情報に基づいてマルチプレクサ３２を制御し、マルチプレクサ３２で第６切り出しカウンタ２０ｆを選択し、この第６切り出しカウンタ２０ｆによってフレームメモリ５に格納されているカメラ映像から監視領域全体の映像を切り出し、モニタに設定した全体映像表示領域に監視領域の全体映像を表示した。
【００４８】
すなわち表示領域判定部３０は、表示項目判定部２５から入力された表示項目と、表示フレーム判定部２３や追尾画面判定部２７から入力された表示サイズと、オートパン判定部２８から入力された情報と、全体映像設定部２９から入力された情報とに基づいて、モニタ画面を構築し、さらにモニタ画面の構築情報に基づいて表示制御部３１はマルチプレクサ３２を制御する。
【００４９】
図７は、表示領域判定部３０におけるモニタ画面の構築例を示すものである。
図７（ａ）に示すモニタ画面は、全体映像を表示するための全体映像表示領域と、ターゲットの拡大映像を表示するための拡大映像表示領域を設定するとともに、自動追尾機能、指定追尾機能、マニュアル追尾機能の各機能で検出したターゲットの数（２つ）にあわせて前記拡大映像表示領域を２つに分割し、上記各機能で検出したターゲットの拡大映像を表示したものである。
なお拡大映像表示領域の画面分割数に上限を設けた場合、前記上限値を超えるターゲットが検出された場合は、上限値で拡大映像表示領域を分割してモニタ画面を構築するとともに、表示項目判定部２５に設定された表示項目の優先順位とオートパン判定部２８の情報をもとに表示制御部３１がマルチプレクサ３２を制御して、優先順位の高い切り出しカウンタを選択し、画面分割数にあわせて算出した表示サイズに基づいてターゲットの映像を切り出し、拡大映像表示領域に各ターゲットの拡大映像を表示する。なお自動追尾機能や指定追尾機能で検出したターゲットの映像は、追尾画面判定部２７で算出した表示サイズに基づいて切り出され、２つのターゲットが近接した場合は、拡大映像表示領域に設定された結合画面に２つのターゲットを包含した映像が拡大表示される。
【００５０】
また表示領域判定部３０においてモニタ画面を構築するにあたって、図７（ｂ）に示すようにモニタの拡大映像表示領域を分割し、自動追尾機能で検出したターゲットの映像を表示するための表示位置（表示区画）と、指定追尾機能で検出したターゲットの映像を表示するための表示位置（表示区画）と、マニュアル追尾機能で検出したターゲットの映像を表示するための表示位置（表示区画）と、オートパン機能で検出した一定区画の映像を表示するための表示位置（表示区画）と、ホームポジション機能で設定したターゲットの映像を表示するための表示位置（表示区画）とをそれぞれ設定し、機能毎に設定した各表示位置に、各機能で検出したターゲットの拡大映像をそれぞれ表示するようにモニタ画面を構築してもよい。
また表示領域判定部３０において、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能の機能毎に設定した表示位置をさらに分割し、各機能で検出した複数のターゲットをそれぞれの表示位置に表示するようにモニタ画面を構築してもよい。
また機能毎に設定した表示位置の分割数に上限を設け、前記各機能で検出したターゲットの数が前記分割数の上限を超えた場合は、機能毎に設定した表示位置を上限値で分割するとともに、優先度に従って機能毎にターゲットを選択するように、表示フレーム判定部２３と表示項目判定部２５とを設定してもよい。
【００５１】
以上説明したように、この実施例では表示領域判定部３０でモニタ画面を構築し、この情報をもとに表示制御部３１がマルチプレクサ３２を制御する。また第１ないし第６切り出しカウンタ２０ａ〜２０ｆに入力した表示サイズに基づいて映像の切り出し範囲を設定するとともに、表示制御部３１によって制御されるマルチプレクサ３２で選択した切り出しカウンタによって、フレームメモリ５に格納されているカメラ映像から映像を切り出し（読み出し）、モニタの全体映像表示領域に監視領域の全体映像を表示するとともに、拡大映像表示領域にターゲットの拡大映像を表示する。
つまり表示制御部３１による制御によって、モニタの拡大映像表示領域には各機能で検出したターゲットの拡大映像が自動的に表示形式を切替えて表示される。
【００５２】
第1切り出しカウンタ２０ａには、第１自動追尾部１８ａで自動追尾したターゲットの位置情報と、追尾画面判定部２７で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。
第２切り出しカウンタ２０ｂには、第１自動追尾部１８ｂで自動追尾したターゲットの位置情報と、追尾画面判定部２７で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲（読み出しアドレス）を決定する。
【００５３】
第１及び第２切り出しカウンタ２０ａ，２０ｂでは、自動追尾したターゲットの外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなる位置情報を取得し、前記位置情報と表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。これによって、ターゲットの上半身の映像が途切れることなく、自動追尾したターゲットの映像を拡大表示することができる。
また、自動追尾した２つのターゲットが近接し、追尾画面判定部２７で画面の結合が設定された場合は、２つのターゲットの位置情報（ターゲットの外接矩形の中心のＸ座標および外接矩形上端のＹ座標）について、各Ｘ座標の中点座標（Ｘ座標）と、各Ｙ座標のうち大きい方の座標（Ｙ座標）とからなる位置情報を取得し、この位置情報と結合画面の表示サイズに基づいて、第１または第２切り出しカウンタ２０ａ，２０ｂのどちらか一方で、切り出し範囲（読み出しアドレス）を設定する。なお近接した２つのターゲットが離隔し、追尾画面判定部２７で画面の分割が設定された場合は、自動追尾したターゲットの外接矩形の中心のＸ座標および外接矩形上端のＹ座標からなるそれぞれの位置情報と、追尾画面の表示サイズに基づいて、第１及び第２切り出しカウンタ２０ａ，２０ｂのそれぞれで、切り出し範囲（読み出しアドレス）を設定する。
【００５４】
第３切り出しカウンタ２０ｃには、マニュアル追尾部１９で追尾したターゲットの位置情報と、表示フレーム判定部２３で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。第３切り出しカウンタ２０ｃでは、モニタに表示された全体映像に基づいてマウスやキーボードやボタンなどの指示装置を用いてオペレータが指定した領域の全体映像中の位置座標を取得し、全体映像中の前記位置座標を中心とした一定の範囲を切り出すように、表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。
【００５５】
第４切り出しカウンタ２０ｄには、オートパンカウンタ２１で設定した一定区画（巡回区画）の位置情報と、表示フレーム判定部２３で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。第４切り出しカウンタ２０ｄでは、オートパンカウンタ２１で設定された位置座標を取得し、全体映像中の前記位置座標を中心とした一定の範囲（一定区画）を切り出すように、表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。
【００５６】
第５切り出しカウンタ２０ｅには、ホームポジションレジスタ２２で設定したホームポジションの位置情報と、表示フレーム判定部２３で算出した表示サイズ情報とが入力され、これらの情報に基づいて、フレームメモリ５に格納されたカメラ映像からの映像切り出し範囲を決定する。モニタに表示された全体映像に基づいてマウスやキーボードやボタンなどの指示装置を用いてオペレータが指定した領域の全体映像中の位置座標を取得し、全体映像中の前記位置座標を中心とした一定の範囲を切り出すように、表示サイズに基づいて切り出し範囲（読み出しアドレス）を設定する。
【００５７】
第1ないし第５切り出しカウンタ２０ａ〜２０ｅによる情報は、表示制御部３１によって制御されているマルチプレクサ３２に入力され、表示項目の優先順位や画面分割数に基づいてマルチプレクサ３２で切り出しカウンタが選択され、選択した切り出しカウンタによる切り出し範囲（読み出しアドレス）をもとに、フレームメモリ５に格納されたカメラ映像から部分的に映像を切り出し（図１を参照）、この部分的に切り出した映像をモニタに拡大表示する。
【００５８】
またこの実施例では、第６切り出しカウンタ２０ｆにおいて全体映像の表示サイズを予め設定（入力）しておき、この第６切り出しカウンタ２０ｆによる情報を表示制御部３１によって制御されているマルチプレクサ３２に入力する。そして全体映像を表示する場合は、マルチプレクサ３２で第６切り出しカウンタ２０ｆを選択し、この第６切り出しカウンタ２０ｆの情報をもとに、フレームメモリ５に格納されたカメラ映像から監視領域全体の映像を切り出し（図１を参照）、モニタの全体映像表示領域に全体映像を表示する。
【００５９】
なお図６に示すように、自動追尾機能、指定追尾機能、マニュアル追尾機能、オートパン機能、ホームポジション機能によって検出したターゲットの拡大映像と、監視領域の全体映像とを同時に表示するにあたって、各機能によって検出したターゲットの映像を切り出した位置を全体映像中にカーソル表示するとともに、前記機能毎にカーソルを区別してカーソル表示をすることが好ましい。
【図面の簡単な説明】
【００６０】
【図１】本発明の実施形態による映像監視システムのブロック図。
【図２】カメラの配置例を示す図。
【図３】この発明の実施形態による表示映像設定部のブロック図。
【図４】この発明の映像監視システムによる監視方法の実施例を説明する図。
【図５】第３動き検出部による動き検出を説明する図。
【図６】本発明の映像監視システムによる表示方法を説明する図。
【図７】モニタ画面の構築例を示す図。
【符号の説明】
【００６１】
１ａ〜１ｄ カメラ
２ａ〜２ｄ Ａ／Ｄ変換器
３ａ〜３ｄ 同期メモリ
４ 連結部
５ フレームメモリ
６ 表示映像設定部
７ カーソルポジションレジスタ
８ カーソル表示部
９ Ｄ／Ａ変換器
１０ モニタ
１１ 第1動き検出部
１２ 第２動き検出部
１３ 指定追尾設定部
１４ マニュアル追尾設定部
１５ 優先度設定部
１６ 第３動き検出部
１７ 追尾優先度判定部
１８ａ，１８ｂ 第１，第２自動追尾部
１９ マニュアル追尾部
２０ａ〜２０ｆ 第1〜第６切り出しカウンタ
２１ オートパンカウンタ
２２ ホームポジションレジスタ
２３ 表示フレーム判定部
２４ 表示優先度設定部
２５ 表示項目判定部
２６ 表示位置判定部
２７ 追尾画面判定部
２８ オートパン判定部
２９ 全体映像設定部
３０ 表示領域判定部
３１ 表示制御部
３２ マルチプレクサ
【特許請求の範囲】
【請求項１】
監視領域全体を撮影したカメラ映像をもとに、監視領域の全体映像をモニタの全体映像表示領域に表示するとともに、全体映像中のターゲットの拡大映像をモニタの拡大映像表示領域に表示する映像監視システムであって、
監視領域全体を撮影したカメラ映像をもとに、動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する自動追尾機能と、
監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上で指定したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する指定追尾機能と、
監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、モニタに表示された映像をもとにオペレータがモニタ（全体映像）上で経時的に指定する位置を、オペレータの指定に追随して一定時間またはその指定がなくなるまで追尾し、その領域の映像を全体映像から切り出して拡大表示するマニュアル追尾機能と、
監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能と、
監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有し、
監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能を使用するにあたって、
監視領域全体を撮影したカメラ映像をもとに動き検出したターゲットの位置を検出し、この動き検出したターゲットの位置を包含する範囲内において、オートパン機能による拡大表示を行うことを特徴とする映像監視装置。
【請求項１】
監視領域全体を撮影したカメラ映像をもとに、監視領域の全体映像をモニタの全体映像表示領域に表示するとともに、全体映像中のターゲットの拡大映像をモニタの拡大映像表示領域に表示する映像監視システムであって、
監視領域全体を撮影したカメラ映像をもとに、動き検出したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する自動追尾機能と、
監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上で指定したターゲットを一定時間または動き検出しなくなるまで自動追尾し、その領域の映像を全体映像から切り出して拡大表示する指定追尾機能と、
監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、モニタに表示された映像をもとにオペレータがモニタ（全体映像）上で経時的に指定する位置を、オペレータの指定に追随して一定時間またはその指定がなくなるまで追尾し、その領域の映像を全体映像から切り出して拡大表示するマニュアル追尾機能と、
監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能と、
監視領域全体を撮影したカメラ映像をもとにモニタに全体映像を表示し、この全体映像をもとにオペレータがモニタ（全体映像）上でターゲットを指定し、その領域の映像を全体映像から切り出して拡大表示するホームポジション機能とを有し、
監視領域全体を撮影したカメラ映像をもとに、監視領域内を巡回するように経時的に移動する一定区画の映像を切り出して拡大表示するオートパン機能を使用するにあたって、
監視領域全体を撮影したカメラ映像をもとに動き検出したターゲットの位置を検出し、この動き検出したターゲットの位置を包含する範囲内において、オートパン機能による拡大表示を行うことを特徴とする映像監視装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【公開番号】特開２００６−２３００２４（Ｐ２００６−２３００２４Ａ）
【公開日】平成１８年８月３１日（２００６．８．３１）
【国際特許分類】
【出願番号】特願２００６−１４１３７３（Ｐ２００６−１４１３７３）
【出願日】平成１８年５月２２日（２００６．５．２２）
【分割の表示】特願２００３−４０３５２０（Ｐ２００３−４０３５２０）の分割
【原出願日】平成１５年１２月２日（２００３．１２．２）
【出願人】（０００２１０９６４）中央電子株式会社 (81)
【Ｆターム（参考）】
【公開日】平成１８年８月３１日（２００６．８．３１）
【国際特許分類】
【出願日】平成１８年５月２２日（２００６．５．２２）
【分割の表示】特願２００３−４０３５２０（Ｐ２００３−４０３５２０）の分割
【原出願日】平成１５年１２月２日（２００３．１２．２）
【出願人】（０００２１０９６４）中央電子株式会社 (81)
【Ｆターム（参考）】
[ Back to top ]