監視装置と監視方法
【課題】多様な監視動作を容易に行えるようにする。
【解決手段】映像データ取得部３１１は、監視端末から映像データを取得する。メタデータ取得部３１２は、監視端末からメタデータを取得する。メタデータフィルタ部３１３は、フィルタ設定蓄積部３１４に蓄積されたフィルタ設定ＦＳを用いてメタデータのフィルタ処理を行い、フィルタ処理結果ＦＪを出力部３２３に供給する。出力部３２３は、フィルタ処理結果ＦＪに基づいて、監視結果を示す表示信号ＵＳを出力する。メタデータに監視対象に関する種々の情報を含めるものとして、フィルタ設定蓄積部３１４には、メタデータに含まれる情報に対応したフィルタ設定ＦＳを蓄積させておくことで、多様な監視動作を容易に行える。
【解決手段】映像データ取得部３１１は、監視端末から映像データを取得する。メタデータ取得部３１２は、監視端末からメタデータを取得する。メタデータフィルタ部３１３は、フィルタ設定蓄積部３１４に蓄積されたフィルタ設定ＦＳを用いてメタデータのフィルタ処理を行い、フィルタ処理結果ＦＪを出力部３２３に供給する。出力部３２３は、フィルタ処理結果ＦＪに基づいて、監視結果を示す表示信号ＵＳを出力する。メタデータに監視対象に関する種々の情報を含めるものとして、フィルタ設定蓄積部３１４には、メタデータに含まれる情報に対応したフィルタ設定ＦＳを蓄積させておくことで、多様な監視動作を容易に行える。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、監視装置と監視方法に関する。この発明においては、監視端末から映像データとメタデータを取得して、このメタデータのフィルタ処理を行い、このフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、監視結果の出力を行うものである。
【背景技術】
【０００２】
従来の監視システムでは、ネットワークを介して監視端末から監視装置に監視映像の映像データを供給し、この映像データを監視装置で記録することで、異常発生時の監視映像の確認等を監視装置で行うことができるようになされている（例えば特許文献１）。
【０００３】
【特許文献１】特開２００３−２７４３９０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところで、監視システムで監視を行う場合、予め設定した１つの情報に基づいて異常発生の有無を判別するものとしたとき、多様な監視動作を行うことができない。例えば、監視装置は、監視端末から供給された動体の検出結果を示す動体検知情報に基づいて異常発生の有無を判別するものとした場合、動体の動きが異常発生の通知を行う必要のない動きであっても、異常発生として判別されてしまう。
【０００５】
また、動体検知情報とは異なる情報に基づいて異常発生の有無を判別するものとした場合、動体検知情報とは異なる情報を正しく受信できるように、この情報のフォーマットやタイミングに対応可能な情報取得部を監視装置に設けなければならない。このため、種々の情報を利用可能として多様な監視動作を行うものとする場合、各情報に対応した情報取得部を設けなければならず、監視装置の機能の拡張を容易に行うことができない。
【０００６】
そこで、この発明では、多様な監視動作を容易に行うことができる監視装置および監視方法を提供するものである。
【課題を解決するための手段】
【０００７】
この発明は、監視端末から映像データと、監視対象に関する情報を示すメタデータを取得する。フィルタ設定蓄積部には、フィルタ設定を蓄積させておき、この蓄積されているフィルタ設定を用いてメタデータのフィルタ処理を行い、フィルタ処理結果に基づいて監視結果の出力を行うものである。
【０００８】
監視結果の出力では、映像データに基づく映像とメタデータに基づく映像とメタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、監視結果を示す映像を出力するものである。
【０００９】
さらに、取得した映像データやメタデータの蓄積を行い、蓄積した映像データやメタデータを再生可能とする。ここで、映像データとメタデータを共に再生するとき、再生同期部によって、再生される映像データに同期したメタデータを再生させる。
【００１０】
この発明において、監視装置で動体の監視を行う場合、監視対象に関する情報には、動体が検出されているか否かを示す動体検知情報や動体の位置を示す動体位置情報を含めるものとする。また、監視端末で監視する領域がどのような状態であるか監視する場合、監視対象に関する情報には、監視映像の輝度を示す情報や温度を示す情報を含めるものとする。
【００１１】
フィルタ設定蓄積部には、監視対象に関する情報に基づいて警報等を行う必要があるか否かの判断基準となるフィルタ設定を、情報毎に蓄積させておく。このフィルタ設定を用いてメタデータのフィルタ処理を行うことで、監視対象に関する情報毎に、警報等を行う必要があることをフィルタ処理結果で示すことができる。このフィルタ処理結果に基づいて監視結果を出力することで、監視対象に関する情報毎の警報等を出力することが可能となる。例えば、動体が検出されたときや、動体が予め設定した領域に入り込んだとき、監視する領域が暗くなったり、温度の異常が生じたときなど、それぞれの状態に対応した警報等を出力させることが可能となる。
【００１２】
また、映像データに基づく映像とメタデータに基づく映像とメタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、監視結果を示す映像の出力が行われるので、グラフィカルに監視結果が表示させることとなり、容易かつ正しく監視結果を認識することが可能となる。
【００１３】
また、監視対象に関する情報をマークアップ言語で記述することにより、監視対象に関する情報の変更や追加を行う場合、フィルタ設定の変更や追加を容易に行うことが可能となる。
【発明の効果】
【００１４】
この発明によれば、監視端末から映像データと、監視対象に関する情報を示すメタデータが監視装置で取得される。また、監視装置では、フィルタ設定蓄積部に蓄積されたフィルタ設定を用いてメタデータのフィルタ処理が行われて、このフィルタ処理結果に基づいて監視結果の出力が行われる。このため、メタデータに監視対象に関する種々の情報を含めるものとして、フィルタ設定蓄積部には、メタデータに含まれる情報に対応したフィルタ設定を蓄積させておくことで、多様な監視動作を容易に可能として、監視結果を出力させることができる。
【発明を実施するための最良の形態】
【００１５】
以下、図を参照しながら、この発明の実施の一形態について説明する。図１は、監視システム１０の構成を示している。監視端末２０と監視装置３０はネットワーク４０を介して接続されている。監視端末２０は、監視映像の映像データの生成および監視対象に関する情報を示したメタデータの生成を行う。監視装置３０は、監視端末２０の遠隔制御や、監視端末２０で生成された映像データやメタデータの取得や解析，蓄積および蓄積されている映像の閲覧等を行う。
【００１６】
図２は監視端末の機能ブロック図である。監視端末２０は映像データ生成部２１とメタデータ生成部２３を有している。映像データ生成部２１は監視映像の映像データＤtを生成する。すなわち、撮像部２１２は、レンズ部２１１を介して入射された入射光に基づき、撮像信号Ｓvを生成して撮像信号処理部２１３に供給する。撮像信号処理部２１３は、例えばＡ／Ｄ変換やニー補正、プロセス処理等を行い、映像データＤvを生成する。
【００１７】
データ処理部２１４は、監視映像の通信を行う際のデータ量を少なくするため、映像データＤvの符号化処理を行って映像データＤtを生成する。さらに、データ処理部２１４は、生成した映像データＤtを所定のデータ構造として監視装置３０に供給する。
【００１８】
撮像動作切替部２２は、監視装置３０からの切替指示信号ＣＡに基づき、最適な監視映像が得られるように監視端末２０の動作切り替えを行う。例えば、撮像動作切替部２２は、制御信号ＣＭaをレンズ部２１１に供給してズーム比やアイリスの切り替え、制御信号ＣＭbを撮像部２１２と撮像信号処理部２１３に供給して監視映像のフレームレートの切り替え、制御信号ＣＭcをデータ処理部２１４に供給して映像データの圧縮率の切替等を行う。さらに、撮像動作切替部２２は、撮像方向の切替等を行う。
【００１９】
メタデータ生成部２３は、監視対象に関する情報を示したメタデータＤmの生成を行う。例えば、動体を監視対象とする場合、映像データ生成部２１で生成された映像データＤvを用いて動体の検出を行い、動体が検出されているか否かを示す動体検知情報や、検出された動体がいずれの位置であるかを示す動体位置情報を生成して、この情報を監視対象に関する情報としてメタデータに含めるものとする。さらに、メタデータ生成部２３は、動体の種類や状態等に関する情報を監視対象に関する情報として用いるものとしてもよい。
【００２０】
また、監視対象に関する情報は動体に関連した情報に限られるものではなく、監視端末で監視する領域の状態を示す情報であってもよい、例えば監視する領域の温度や明るさ等を示す情報を用いるものとする。また、監視する領域で行われた操作等の情報を用いるものとしてもよい。温度を監視対象とするとき、メタデータ生成部２３は、温度測定結果をメタデータに含める。また、明るさを監視対象とするとき、メタデータ生成部２３は、映像データ生成部２１で生成された映像データＤvに基づいて例えば監視映像の平均輝度を判別して、この判別結果をメタデータに含める。さらに、ＡＴＭ(Automated Teller Machine)やＰＯＳ(Point Of Sales)端末等において行われたユーザ操作を監視対象として、メタデータ生成部２３は、操作キーや操作パネル等で行われたユーザ操作を示す情報をメタデータに含める。さらに、メタデータ生成部２３は、撮像動作切替部２２から供給された撮像動作情報ＱＦ（例えば監視映像の映像データを生成したときの撮影方向やズーム状態および映像データ生成部の設定状態等を示す情報）や、時刻情報等をメタデータに含めることで、メタデータが生成された時刻や映像データがどのように生成されたものであるかを判別することが可能となる。
【００２１】
図３は、映像データとメタデータのデータ構造を示している。映像データとメタデータは、リンク情報とデータ本体で構成する。データ本体は、映像データの場合、監視映像の映像データである。またメタデータの場合、データ本体は、監視対象を示す情報等と、この情報の記述方式を定義した属性情報を記述したものである。リンク情報は、映像データとメタデータとの関連付けを示す関連付け情報と、この情報の内容の記述方式を定義した属性情報等を記述したものである。
【００２２】
関連付け情報は、例えば映像データを特定するためのタイムスタンプやシーケンス番号を使用する。タイムスタンプは、映像データの生成時刻を与える情報（時刻情報）である。シーケンス番号は、コンテンツデータの生成順序を与える情報（順序情報）であり、タイムスタンプの等しい監視映像が複数存在するような場合、タイムスタンプの等しい映像データの生成順序を識別することができる。また、関連付け情報には、映像データを生成する機器を特定するための情報（例えば製造会社名や機種名、製造番号等）を使用するものとしてもよい。
【００２３】
ここで、リンク情報やメタデータ本体の記述は、Ｗｅｂ上で交換される情報を記述する方法として定義されたマークアップ言語を用いる。このように、マークアップ言語を用いるものとすれば、ネットワーク４０を介した情報の交換を容易に行うことができる。さらに、マークアップ言語、例えば文書や電子データの交換に利用されているＸＭＬを用いることで、映像データとメタデータの交換も容易に行うことができる。ＸＭＬを用いるものとした場合、情報の記述方式を定義した属性情報は、例えばＸＭＬSchemaを使用する。
【００２４】
監視端末２０で生成した映像データやメタデータは、１つのストリームとして監視装置３０に供給するものとしてもよく、また映像データとメタデータを別のストリームで非同期に監視装置３０に供給するものとしてもよい。
【００２５】
図４は監視装置の機能ブロック図である。なお、監視装置の各機能ブロックは、ハードウェアで構成するものとしてもよく、またソフトウェアで構成するものとしてもよい。
【００２６】
監視装置３０の映像データ取得部３１１は、監視端末２０から映像データＤtを取得する。また、映像データ取得部３１１は、符号化されている映像データＤtの復号化処理を行い、得られた映像データＤvを映像データ取得部３１１に設けられているバッファ（図示せず）に保持する。さらに、映像データ取得部３１１は、保持している映像データＤvを順次出力部３２３に供給する。このようにバッファに映像データを保持することで、監視端末からの映像データのタイミングに依らず、出力部３２３に対して順次映像データを供給できる。また、映像データ取得部３１１は、後述する切替指示部３１５からの蓄積指示信号ＣＲに基づき、保持している映像データＤvを映像データ蓄積部３１６に蓄積させる。なお、映像データ蓄積部３１６には、符号化されている映像データＤtを蓄積して、後述する映像データ再生部３２０で復号化を行うものとしてもよい。
【００２７】
メタデータ取得部３１２は、監視端末２０からメタデータＤmを取得して、メタデータ取得部３１２に設けられているバッファ（図示せず）に保持する。また、メタデータ取得部３１２は、保持しているメタデータＤmを出力部３２３に順次供給する。また、保持しているメタデータＤmをメタデータフィルタ部３１３に供給する処理も行う。このようにバッファにメタデータを保持することで、監視端末からのメタデータのタイミングに依らず、出力部３２３に対して順次メタデータを供給できる。また、映像データと同期させてメタデータを出力部３２３に供給できる。さらに、メタデータ取得部３１２は、監視端末２０から取得したメタデータＤmをメタデータ蓄積部３１７に蓄積させる。ここで、メタデータＤmをメタデータ蓄積部３１７に蓄積する際に、メタデータＤmと同期する映像データＤvの時刻情報を付加しておけば、メタデータＤmの内容を読み出して時刻を判別しなくとも、付加されている時刻情報を利用して、所望の時刻のメタデータをメタデータ蓄積部３１７から読み出すことが可能となる。
【００２８】
メタデータフィルタ部３１３は、フィルタ設定蓄積部３１４に蓄積されているフィルタ設定ＦＳを用いて、メタデータ取得部３１２で取得したメタデータＤm、あるいはメタデータ蓄積部３１７から供給されたメタデータＤmpのフィルタ処理を行い、フィルタ処理結果ＦＪを切替指示部３１５と出力部３２３に供給する。
【００２９】
フィルタ設定蓄積部３１４は、フィルタ設定ＦＳを蓄積しており、メタデータフィルタ部３１３で行うフィルタ処理に応じたフィルタ設定をメタデータフィルタ部３１３に供給する。このフィルタ設定ＦＳは、警報等の出力や監視端末の撮像動作切替を行う必要があるか否かの判断基準を、メタデータに含まれている監視対象に関する情報毎に示すものである。このフィルタ設定ＦＳを用いてメタデータのフィルタ処理を行うことで、監視対象に関する情報毎に、警報等の出力を行う必要があることや監視端末の撮像動作切替が必要であることをフィルタ処理結果で示すことができる。
【００３０】
切替指示部３１５は、メタデータフィルタ部３１３からのフィルタ処理結果ＦＪに基づいて、切替指示信号ＣＡを生成して監視端末２０に供給する。例えば、フィルタ処理結果ＦＪに基づき、監視に適した監視映像が得られるように監視端末２０の動作を切り替える。また、切替指示部３１５は、フィルタ処理結果ＦＪに基づき、映像データ蓄積部３１６に対して蓄積指示信号ＣＲを供給して、映像データ取得部３１１で取得した映像データＤvを映像データ蓄積部３１６に蓄積させる。
【００３１】
また、切替指示部３１５では、映像データＤvの蓄積モードを選択可能とする。例えば動的検索モードと最小限モードのいずれかを選択可能とする。動的検索モードがユーザによって選択されている場合、切替指示部３１５は、フィルタ処理結果ＦＪによって動体が検出されていることが示されたとき、映像データ取得部３１１で取得した映像データＤvを映像データ蓄積部３１６に蓄積させる。また、最小限モードが選択されている場合、切替指示部３１５は、フィルタ処理結果ＦＪによって注意報や警報の出力を行うような状態が生じたと判別したとき、映像データ取得部３１１で取得した映像データＤvを映像データ蓄積部３１６に蓄積させる。ここで、動的検索モードが選択されたときには、動体が検出されているときの映像データＤvが蓄積される。このため、後述する映像データ再生部３２０によって、蓄積されている映像データＤvを再生して、再生された映像データＤvと同期するメタデータに対して所望のフィルタ設定でフィルタ処理を行うものとすれば、このフィルタ設定を満たす映像データを検索できる。また、最小限モードが選択されたときは、注意報や警報の出力を行うような状態の映像データを容易かつ速やかに再生できる。また、蓄積する映像データのデータ量を少なくできる。
【００３２】
映像データ蓄積部３１６は、映像データ取得部３１１で取得された映像データＤvを蓄積する。またメタデータ蓄積部３１７は、メタデータ取得部３１２で取得されたメタデータＤmを蓄積する。
【００３３】
映像データ再生部３２０は、映像データ蓄積部３１６に蓄積されている映像データＤvの再生処理を行う。すなわち、映像データ再生部３２０は、ユーザによって指示された再生位置から順次映像データを読み出して、読み出した映像データＤvpを出力部３２３に供給する。また、映像データ再生部３２０は、再生している映像データの再生位置（再生時刻）ＪＳを再生同期部３２１に供給する。
【００３４】
再生同期部３２１は、映像データ再生部３２０から供給された再生位置ＪＳと、メタデータ再生部３２２で、メタデータ蓄積部３１７に蓄積されているメタデータを再生するときの再生位置が同期するように、同期制御信号ＣＰをメタデータ再生部３２２に供給して、メタデータ再生部３２２の動作を制御する。
【００３５】
メタデータ再生部３２２は、メタデータ蓄積部３１７に蓄積されているメタデータＤmの再生処理を行う。すなわち、メタデータ再生部３２２は、ユーザによって指示された再生位置から順次メタデータを読み出して、読み出したメタデータＤmpをメタデータフィルタ部３１３と出力部３２３に供給する。また、映像データとメタデータの双方を再生する場合、メタデータ再生部３２２は、上述のように再生同期部３２１から供給された同期制御信号ＣＰに基づいて再生動作制御して、映像データＤvpに同期したメタデータＤmpを出力する。
【００３６】
出力部３２３は、映像データ取得部３１１から供給された映像データＤvや映像データ再生部３２０から供給された映像データＤvp、メタデータ取得部３１２から供給されたメタデータＤmやメタデータ再生部３２２から供給されたメタデータＤmp、メタデータフィルタ部３１３からのフィルタ設定ＦＳに基づき、監視映像やメタデータの映像やフィルタ設定の映像のいずれか、あるいはこれらを合成した映像を用いて、フィルタ処理結果ＦＪに基づく監視結果を示す映像の表示信号ＶＳを生成して出力する。
【００３７】
制御部３２５には、操作キーやリモートコントロール信号受信器等で構成されたユーザインタフェース部３２６が接続されている。ユーザインタフェース部３２６は、ユーザ操作に応じた操作信号ＳＰを生成して制御部３２５に供給する。制御部３２５は、操作信号ＳＰに基づいた制御信号ＣＴを生成して各部に供給することで、監視装置３０の動作がユーザ操作に応じた動作となるように制御する。
【００３８】
次に各部をソフトウェアで構成した場合の動作についてフローチャートを用いて説明する。
【００３９】
図５は、制御部の動作を示している。ステップＳＴ１で制御部３２５は、監視動作の開始指示を行う。この監視動作の開始指示によって、映像データ再生部３２０とメタデータ再生部３２２を除く各部の動作を開始させてステップＳＴ２に進む。
【００４０】
ステップＳＴ２で制御部３２５は、フィルタ設定が完了しているか否かを判別する。制御部３２５は、メタデータフィルタ部３１３に対するフィルタ設定が完了していないときステップＳＴ３に進み、フィルタ設定が完了しているときステップＳＴ４に進む。
【００４１】
ステップＳＴ３で制御部３２５は、フィルタ設定を行う。フィルタ設定では、例えば表示装置の画面上に、メタデータフィルタ部３１３に対するフィルタ設定が完了していない旨の表示を行う。その後、ユーザインタフェース部３２６から供給された操作信号ＳＰに基づき、ユーザ操作に応じたフィルタ設定をメタデータフィルタ部３１３に設定してステップＳＴ４に進む。
【００４２】
ステップＳＴ４で制御部３２５は、監視モードから再生モードへの切替指示が行われたか否かを判別する。監視モードとは、映像データ取得部３１１に保持されている映像データやメタデータ取得部３１２に保持されているメタデータに基づく映像を出力部３２３から出力させる動作モードを示している。また、再生モードとは、映像データ再生部３２０で再生された映像データやメタデータ再生部３２２で再生されたメタデータに基づく映像を出力部３２３から出力させる動作モードを示している。
【００４３】
制御部３２５は、ユーザインタフェース部３２６からの操作信号ＳＰに基づき再生モードへの切替指示が行われた判別したときステップＳＴ５に進み、切替指示が行われたと判別されないときはステップＳＴ１６に進む。
【００４４】
ステップＳＴ５で制御部３２５は、再生位置の指定がなされた否かを判別する。制御部３２５は、再生位置の指定がなされていないときステップＳＴ５に戻り、操作信号ＳＰによって再生位置の指定がなされたときステップＳＴ６に進む。
【００４５】
ステップＳＴ６で制御部３２５は、再生モードにおけるフィルタ設定が完了しているか否かを判別する。制御部３２５は、メタデータフィルタ部３１３に対するフィルタ設定が完了していないときステップＳＴ７に進み、フィルタ設定が完了しているときステップＳＴ８に進む。
【００４６】
ステップＳＴ７で制御部３２５は、ステップＳＴ３と同様にフィルタ設定を行いステップＳＴ８に進む。
【００４７】
ステップＳＴ８で制御部３２５は、再生開始指示を行いステップＳＴ９に進む。すなわち、制御部３２５は、映像データ再生部３２０や再生同期部３２１およびメタデータ再生部３２２の動作を開始させて、ステップＳＴ５で指定されていると判別した再生位置から映像データやメタデータの再生を行わせる。
【００４８】
ステップＳＴ９で制御部３２５は、表示切替指示を行いステップＳＴ１０に進む。すなわち、制御部３２５は、表示切替指示を出力部３２３に対して行い、映像データ再生部３２０で再生された映像データに基づく映像と、メタデータ再生部３２２で再生されたメタデータに基づく映像と、メタデータフィルタ部３１３のフィルタ設定に基づいた映像を合成した映像の表示信号ＶＳを出力部３２３から出力させる。
【００４９】
ステップＳＴ１０で制御部３２５は、再生モードの終了操作が行われたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが再生モードの終了操作を示していないときステップＳＴ１１に進み、再生モードの終了操作を示しているときステップＳＴ１４に進む。
【００５０】
ステップＳＴ１１で制御部３２５は、終了操作が行われたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが再生モードの終了操作を示していないときステップＳＴ１２に進み、再生モードの終了操作を示しているとき監視装置３０の動作を終了する。
【００５１】
ステップＳＴ１２で制御部３２５は、変更操作がなされたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが変更操作を示していないときステップＳＴ１０に戻り、変更操作を示しているときステップＳＴ１３に進む。
【００５２】
ステップＳＴ１３で制御部３２５は、変更操作に応じた変更指示を行いステップＳＴ１０に戻る。例えば、制御部３２５は、再生位置を変更する変更操作が行われたとき、変更後の再生位置から再生動作を行うことができるように、映像データ再生部３２０やメタデータ再生部３２２に対して指示を行う。また、フィルタ設定を変更する変更操作が行われたとき、変更後のフィルタ設定でフィルタ処理を行うことができるように、メタデータフィルタ部３１３に対して指示を行う。
【００５３】
ステップＳＴ１０からステップＳＴ１４に進むと、制御部３２５は、監視モードへの切替指示を行いステップＳＴ１５に進む。すなわち、制御部３２５は、映像データ再生部３２０や再生同期部３２１、メタデータ再生部３２２の動作を終了させる。また、制御部３２５は、メタデータフィルタ部３１３のフィルタ設定を、監視モードのフィルタ設定に戻す。
【００５４】
ステップＳＴ１５で制御部３２５は、表示切替指示を行いステップＳＴ１６に進む。すなわち、制御部３２５は、表示切替指示によって出力部３２３を制御して、映像データ取得部３１１からの映像データに基づく映像と、メタデータ取得部３１２からのメタデータに基づく映像と、メタデータフィルタ部３１３のフィルタ設定に基づいた映像を合成した映像を表示する表示信号を生成して、出力部３２３から出力させる。
【００５５】
ステップＳＴ１６で制御部３２５は、終了操作が行われたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが終了操作を示していないときステップＳＴ１７に進み、終了操作を示したとき監視装置の動作を終了する。
【００５６】
ステップＳＴ１７で制御部３２５は、変更操作がなされたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが変更操作を示していないときステップＳＴ４に戻り、変更操作を示しているときステップＳＴ１８に進む。
【００５７】
ステップＳＴ１８で制御部３２５は、変更操作に応じた変更指示を行いステップＳＴ４に戻る。例えば、制御部３２５は、フィルタ設定を変更する変更操作が行われたとき、変更後のフィルタ設定でフィルタ処理を行うことができるように、メタデータフィルタ部３１３に対して指示を行う。
【００５８】
図６は、映像データ取得部の動作を示すフローチャートである。ステップＳＴ２１で映像データ取得部３１１は、映像データ取得処理を行う。すなわち、映像データ取得部３１１は、監視端末２０に対する映像データの要求や監視端末２０とのセッションを確立してステップＳＴ２２に進む。
【００５９】
ステップＳＴ２２で映像データ取得部３１１は、監視端末２０から映像データが供給されたか否かを判別する。映像データ取得部３１１は、映像データが供給されたときステップＳＴ２３に進み、映像データが供給されていないときステップＳＴ２６に進む。
【００６０】
ステップＳＴ２３で映像データ取得部３１１は、映像データのバッファ処理を行いステップＳＴ２４に進む。このバッファ処理において、映像データ取得部３１１は、監視端末２０から供給された映像データを保持する。さらに、映像データ取得部３１１は、保持している映像データを出力部３２３に供給する。
【００６１】
ステップＳＴ２４で映像データ取得部３１１は、切替指示部３１５から蓄積指示が供給されたか否かを判別する。映像データ取得部３１１は、蓄積指示信号ＣＲが供給されたときステップＳＴ２５に進み、蓄積指示信号ＣＲが供給されていないときはステップＳＴ２６に進む。
【００６２】
ステップＳＴ２５で映像データ取得部３１１は、映像データ蓄積処理を行い、保持している映像データを映像データ蓄積部３１６に蓄積させてステップＳＴ２６に進む。
【００６３】
ステップＳＴ２６で映像データ取得部３１１は、制御部３２５から終了指示が供給されたか否かを判別する。映像データ取得部３１１は、制御部３２５から終了指示が供給されていないときステップＳＴ２７に進み、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００６４】
ステップＳＴ２７で映像データ取得部３１１は、監視端末２０とのセッションが切断されているか否かを判別する。映像データ取得部３１１は、セッションが切断されていないときステップＳＴ２２に戻る。また、セッションが切断されているときステップＳＴ２１に戻り、再度セッションを確立して映像データの取得を行う。
【００６５】
図７は、メタデータ取得部の動作を示すフローチャートである。ステップＳＴ３１でメタデータ取得部３１２は、メタデータ取得処理を行う。すなわち、監視端末２０に対するメタデータの要求や監視端末２０とのセッションを確立してステップＳＴ３２に進む。
【００６６】
ステップＳＴ３２でメタデータ取得部３１２は、監視端末２０からメタデータが供給されたか否かを判別する。メタデータ取得部３１２は、メタデータが供給されたときステップＳＴ３３に進み、メタデータが供給されていないときステップＳＴ３６に進む。
【００６７】
ステップＳＴ３３でメタデータ取得部３１２は、メタデータのバッファ処理を行いステップＳＴ３４に進む。このバッファ処理において、メタデータ取得部３１２は、監視端末２０から供給されたメタデータを保持する。さらに、メタデータ取得部３１２は、保持しているメタデータを出力部３２３に供給する。
【００６８】
ステップＳＴ３４でメタデータ取得部３１２は、保持しているメタデータをメタデータフィルタ部３１３に出力してステップＳＴ３５に進む。
【００６９】
ステップＳＴ３５でメタデータ取得部３１２は、保持しているメタデータをメタデータ蓄積部３１７に蓄積させてステップＳＴ３６に進む。
【００７０】
ステップＳＴ３６でメタデータ取得部３１２は、制御部３２５から終了指示が供給されたか否かを判別する。メタデータ取得部３１２は、制御部３２５から終了指示が供給されていないときステップＳＴ３７に進み、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００７１】
ステップＳＴ３７でメタデータ取得部３１２は、監視端末２０とのセッションが切断されているか否かを判別する。メタデータ取得部３１２は、セッションが切断されていないときステップＳＴ３２に戻る。また、セッションが切断されているときステップＳＴ３１に戻り、再度セッションを確立してメタデータの取得を行う。
【００７２】
図８は、メタデータフィルタ部の動作を示すフローチャートである。ステップＳＴ４１でメタデータフィルタ部３１３は、メタデータが供給されたか否かを判別する。メタデータフィルタ部３１３は、メタデータが供給されていないときステップＳＴ４１に戻り、メタデータが供給されたときステップＳＴ４２に進む。
【００７３】
ステップＳＴ４２でメタデータフィルタ部３１３は、メタデータのフィルタ処理を行いステップＳＴ４３に進む。
【００７４】
ステップＳＴ４３でメタデータフィルタ部３１３は、フィルタ処理結果の通知が必要か否かを判別する。メタデータフィルタ部３１３は、通知が必要でないと判別したときステップＳＴ４１に戻り、通知が必要と判別したときステップＳＴ４４に進む。例えば、注意報や警報の出力が必要ないと判別したときはステップＳＴ４１に戻り、注意報や警報の出力が必要と判別したときステップＳＴ４４に進む。
【００７５】
ステップＳＴ４４でメタデータフィルタ部３１３は、フィルタ処理結果の通知を行う。すなわち、メタデータフィルタ部３１３は、フィルタ処理結果を切替指示部３１５や出力部３２３に供給してステップＳＴ４５に進む。
【００７６】
ステップＳＴ４５でメタデータフィルタ部３１３は、制御部３２５から終了指示が供給されたか否かを判別する。メタデータフィルタ部３１３は、制御部３２５から終了指示が供給されていないときステップＳＴ４１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００７７】
図９は、切替指示部の動作を示すフローチャートである。ステップＳＴ５１で切替指示部３１５は、メタデータフィルタ部３１３からフィルタ処理結果が通知されたか否かを判別する。切替指示部３１５は、通知がないときステップＳＴ５１に戻り、通知があったときステップＳＴ５２に進む。
【００７８】
ステップＳＴ５２で切替指示部３１５は、フィルタ処理結果の内容判別を行ってステップＳＴ５３に進む。
【００７９】
ステップＳＴ５３で切替指示部３１５は、切替指示の出力処理を行う。すなわち、切替指示部３１５は、内容判別の結果に基づいた切替指示を生成して出力する。例えば、映像データ取得部３１１に対して、取得した映像データを映像データ蓄積部３１６に蓄積させる蓄積指示信号ＣＲを供給する。また、監視に適した監視映像の映像データが監視端末２０で生成されるように、監視端末２０に対して切替指示信号ＣＡを供給する。
【００８０】
ステップＳＴ５４で切替指示部３１５は、制御部３２５から終了指示が供給されたか否かを判別する。切替指示部３１５は、制御部３２５から終了指示が供給されていないときステップＳＴ５１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００８１】
図１０は、映像データ再生部の動作を示すフローチャートである。ステップＳＴ６１で映像データ再生部３２０は、再生位置の設定を行う。すなわち、映像データ再生部３２０は、ユーザインタフェース部３２６を介してユーザによって指定された位置を再生位置に設定してステップＳＴ６２に進む。
【００８２】
ステップＳＴ６２で映像データ再生部３２０は、再生動作を開始して、映像データ蓄積部３１６に蓄積されている映像データを再生位置から順次読み出して出力部３２３に供給する。
【００８３】
ステップＳＴ６３で映像データ再生部３２０は、再生されている映像データの再生位置を再生同期部３２１に通知してステップＳＴ６４に進む。
【００８４】
ステップＳＴ６４で映像データ再生部３２０は、映像データが終了した否かを判別する。映像データ再生部３２０は、映像データが終了していないときステップＳＴ６５に進み、映像データが終了したとき動作を終了する。
【００８５】
ステップＳＴ６５で映像データ再生部３２０は、制御部３２５から終了指示が供給されたか否かを判別する。映像データ再生部３２０は、制御部３２５から終了指示が供給されていないときステップＳＴ６３に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００８６】
図１１は、再生同期部の動作を示すフローチャートである。ステップＳＴ７１で再生同期部３２１は、映像データ再生部３２０から映像データの再生位置を取得してステップＳＴ７２に進む。
【００８７】
ステップＳＴ７２で再生同期部３２１は、メタデータ再生部３２２におけるメタデータの再生位置を判別してステップＳＴ７３に進む。
【００８８】
ステップＳＴ７３で再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも進んでいるか否かを判別する。再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも進んでいるときステップＳＴ７４に進み、映像データの再生位置よりも進んでいないときステップＳＴ７５に進む。
【００８９】
ステップＳＴ７４で再生同期部３２１は、メタデータの再生位置を映像データの再生位置に同期させる再生位置同期処理を行ってステップＳＴ７７に進む。再生同期部３２１は、メタデータ再生部３２２に対して再生位置を同期させるための同期制御信号ＣＰを供給して、例えばメタデータの再生を一時停止して、映像データの再生位置がメタデータの再生位置と等しくなったとき再生を開始する。あるいは、メタデータの再生位置を映像データの再生位置に戻して再生位置を同期させる。
【００９０】
ステップＳＴ７５で再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも遅れているか否かを判別する。再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも遅れているときステップＳＴ７６に進み、映像データの再生位置よりも遅れていないときステップＳＴ７７に進む。
【００９１】
ステップＳＴ７６で再生同期部３２１は、メタデータの再生位置を映像データの再生位置に同期させる再生位置同期処理を行ってステップＳＴ７７に進む。すなわち再生同期部３２１は、メタデータ再生部３２２に対して同期制御信号ＣＰを供給して、例えばメタデータの再生位置を映像データの再生位置に進めて再生位置を同期させる。
【００９２】
ステップＳＴ７７で再生同期部３２１は、制御部３２５から終了指示が供給されたか否かを判別する。再生同期部３２１は、制御部３２５から終了指示が供給されていないときステップＳＴ７１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００９３】
図１２は、メタデータ再生部の動作を示すフローチャートである。ステップＳＴ８１でメタデータ再生部３２２は、再生位置の設定を行う。すなわち、メタデータ再生部３２２は、ユーザインタフェース部３２６を介してユーザによって指定された位置を再生位置に設定してステップＳＴ８２に進む。
【００９４】
ステップＳＴ８２でメタデータ再生部３２２は、再生動作を開始して、メタデータ蓄積部３１７に蓄積されているメタデータを再生位置から順次読み出して出力部３２３に供給する。
【００９５】
ステップＳＴ８３でメタデータ再生部３２２は、再生同期部３２１から再生同期指示が行われたか否かを判別する。メタデータ再生部３２２は、再生同期部３２１から同期制御信号ＣＰが供給されて再生同期指示がなされたときステップＳＴ８４に進み、再生同期指示がなされていないときステップＳＴ８５に進む。
【００９６】
ステップＳＴ８４でメタデータ再生部３２２は、再生同期部３２１からの再生同期指示に基づき再生動作の切替処理を行ってステップＳＴ８５に進む。例えば同期制御信号ＣＰに基づき再生動作を一時停止したり、再生位置を進めるように動作切替を行い、メタデータの再生位置を映像データの再生位置に同期させる。
【００９７】
ステップＳＴ８５でメタデータ再生部３２２は、メタデータが終了した否かを判別する。メタデータ再生部３２２は、メタデータが終了していないときステップＳＴ８６に進み、メタデータが終了したとき動作を終了する。
【００９８】
ステップＳＴ８６でメタデータ再生部３２２は、制御部３２５から終了指示が供給されたか否かを判別する。メタデータ再生部３２２は、制御部３２５から終了指示が供給されていないときステップＳＴ８３に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００９９】
図１３は、出力部の動作を示すフローチャートである。ステップＳＴ９１で出力部３２３は、監視モードと再生モードのいずれに設定されているか判別する。出力部３２３は、監視モードに設定されているときステップＳＴ９２に進み、監視モードに設定されていないとき、すなわち再生モードに設定されているときステップＳＴ９４に進む。
【０１００】
ステップＳＴ９２で出力部３２３は、映像データ取得部３１１からの映像データを取得してステップＳＴ９３に進む。ステップＳＴ９３で出力部３２３は、メタデータ取得部３１２からのメタデータを取得してステップＳＴ９６に進む。
【０１０１】
ステップＳＴ９４で出力部３２３は、映像データ再生部３２０からの映像データを取得してステップＳＴ９５に進む。ステップＳＴ９５で出力部３２３は、メタデータ再生部３２２からのメタデータを取得してステップＳＴ９６に進む。
【０１０２】
ステップＳＴ９６で出力部３２３は、メタデータフィルタ部３１３に設定されているフィルタ設定とフィルタ処理結果を取得してステップＳＴ９７に進む。
【０１０３】
ステップＳＴ９７で出力部３２３は、映像合成処理を行ってステップＳＴ９８に進む。この映像合成処理では、映像データに基づいた監視映像上にメタデータに基づく映像やフィルタ設定の映像、フィルタ処理結果基づく映像を合成させる。
【０１０４】
ステップＳＴ９８で出力部３２３は、表示出力を行い、映像合成処理で得られた映像信号を映像表示装置に出力してステップＳＴ９９に進む。
【０１０５】
ステップＳＴ９９で出力部３２３は、データが終了した否かを判別する。出力部３２３は、データが終了していないときステップＳＴ１００に進み、データが終了したとき動作を終了する。
【０１０６】
ステップＳＴ１００で出力部３２３は、制御部３２５から終了指示が供給されたか否かを判別する。出力部３２３は、制御部３２５から終了指示が供給されていないときステップＳＴ９１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【０１０７】
次に、監視システムの動作について説明する。監視システム１０では、監視端末２０で生成されたメタデータを監視装置３０で取得する。監視装置３０は、取得したメタデータを用いてフィルタ処理を行い、フィルタ処理結果に基づいて自己の動作や監視端末２０の動作切替を行う。
【０１０８】
フィルタ設定蓄積部３１４には、メタデータＤmに含まれている監視対象を示す情報に対応したフィルタ設定ＦＳを蓄積させておく。例えば、メタデータＤmに動体が検出されたか否かを示す動体検知情報が含まれる場合、ユーザは動体検知情報を検出するフィルタ設定を蓄積させるものとして、このフィルタ設定を用いることで、動体が検出された否かを示すフィルタ処理結果を得られるようにする。また、メタデータＤmに動体の位置を示す情報が含まれている場合、ユーザは、予め設定した領域を示すフィルタ設定を蓄積させておき、このフィルタ設定を用いることで、動体がユーザの設定した領域内に入った否かを示すフィルタ処理結果を得られるようにする。また、予め設定した領域の外側に注意領域を設定して注意領域を示すフィルタ設定を蓄積させておき、このフィルタ設定を用いることで、動体がユーザの設定した領域に近づいたか否かを示すフィルタ処理結果を得られるようにする。メタデータＤmに温度を示す情報が含まれている場合、ユーザは、温度の閾値をフィルタ設定として蓄積させておき、このフィルタ設定を用いることで、監視端末２０が設けられている場所の温度が例えば閾値を超えているか否かを示すフィルタ処理結果を得られるようにする。メタデータＤmに監視画像の輝度を示す情報が含まれている場合、ユーザは、輝度の閾値をフィルタ設定として蓄積させておき、このフィルタ設定を用いることで、監視映像が閾値よりも暗いか否か等を示すフィルタ処理結果を得られるようにする。さらに、メタデータＤmにユーザ操作を示す情報が含まれている場合、所定の操作をフィルタ設定として蓄積させておき、このフィルタ設定を用いることで、所定の操作が行われたか否か等を示すフィルタ処理結果を得られるようにすることもできる。
【０１０９】
ここで、フィルタ処理結果ＦＪに基づいて監視装置３０の動作切替を行う場合について説明する。監視装置３０が監視モードに設定されている場合、メタデータフィルタ部３１３は、メタデータ取得部３１２から供給されたメタデータＤmのフィルタ処理を行い、フィルタ処理結果ＦＪを切替指示部３１５と出力部３２３に供給する。切替指示部３１５は、フィルタ処理結果ＦＪに基づいて、監視映像を蓄積する必要があると判別したとき、映像データ取得部３１１に蓄積指示信号ＣＲを供給して、取得した映像データを映像データ蓄積部３１６に蓄積させる。また、出力部３２３は、フィルタ処理結果ＦＪに基づいて注意報や警報の出力を行う。
【０１１０】
切替指示部３１５が動的アラームモードに設定されている場合、動体が検出されていることをフィルタ処理結果が示すとき、切替指示部３１５は、映像データ取得部３１１に対して蓄積指示信号ＣＲを供給して、映像データ取得部３１１で取得した映像データを映像データ蓄積部３１６に蓄積させる。
【０１１１】
このように、動体が検出されていることをフィルタ処理結果が示すとき、映像データを映像データ蓄積部３１６に蓄積させるものとすれば、動体が検出されている期間の映像データが映像データ蓄積部３１６に蓄積される。したがって、動体の確認をする必要のない期間の映像データが映像データ蓄積部３１６に蓄積されないので、映像データ蓄積部３１６に効率よく映像データを蓄積させることができる。
【０１１２】
切替指示部３１５が最小限モードに設定されている場合、動体の位置が予めユーザの設定した領域に近づいたことをフィルタ処理結果が示すとき、あるいは動体の位置が予めユーザの設定した領域内となったことをフィルタ処理が示すとき、切替指示部３１５は映像データ取得部３１１に対して蓄積指示信号ＣＲを供給して、映像データ取得部３１１で取得した映像データを映像データ蓄積部３１６に蓄積させる。
【０１１３】
このように、動体の位置が予めユーザの設定した領域に近づいたことや、設定した領域内となったことをフィルタ処理結果が示すとき、映像データを映像データ蓄積部３１６に蓄積させるものとすれば、動体の位置が予めユーザの設定した領域に近づいて注意報を出力するような期間、あるいは動体の位置が予めユーザの設定した領域内となって警報を出力するような期間の映像データが映像データ蓄積部３１６に蓄積される。したがって、注意報や警報を出力するような状態での映像データのみを映像データ蓄積部３１６に蓄積させることができるので、映像データ蓄積部３１６に対して、さらに効率よく映像データを蓄積させることができる。
【０１１４】
また、動体の位置が予めユーザの設定した領域に近づいたとき映像データの蓄積を開始すれば、その後、動体の位置が予めユーザの設定した領域内となって警報を出力する場合が生じたときに、警報が出力される直前の監視映像を確認することが可能となる。
【０１１５】
さらに、後述するように切替指示部３１５によって監視端末２０撮像動作の切替指示を行い、監視に適した監視映像を得るものとする場合、例えば動体の位置が予めユーザの設定した領域に近づいたときに映像データの蓄積や撮像動作の切替指示を行うものとしてもよい。ここで、動体の位置が予めユーザの設定した領域内となって警報を出力するときに、撮像動作の切り替えや映像データの蓄積を行うと、撮像動作の切り替えによって、警報の出力時の監視映像を蓄積できないおそれがある。しかし、動体の位置が予めユーザの設定した領域に近づいたときに映像データの蓄積や撮像動作の切替指示を行うものとすれば、その後、動体の位置が予めユーザの設定した領域内となったときには、監視に適した監視映像が得られるので、警報の出力時の監視映像を監視に適した映像として蓄積させることもできる。
【０１１６】
次に、フィルタ処理結果に基づいて表示切替動作を行う場合について説明する。出力部３２３は、監視モードであるとき、映像データ取得部３１１から供給された映像データＤv、メタデータ取得部３１２から供給されたメタデータＤm、メタデータフィルタ部３１３から供給されたフィルタ設定ＦＳに基づき、監視映像やメタデータおよびフィルタ設定のいずれか、あるいはこれらを合成して表示装置の画面上に表示するための表示信号ＶＳを生成する。また、出力部３２３は、メタデータフィルタ部３１３のフィルタ処理結果ＦＪに基づいて表示切替を行う。
【０１１７】
図１４は、監視映像とメタデータの映像およびフィルタ設定の映像を個々に示している。図１４Ａは映像データに基づいた監視映像である。図１４Ｂはメタデータの映像を例示しており、メタデータに動体位置情報が含まれているとき、この動体位置情報に基づく動体位置表示ＨＰである。なお破線は動体ＭＢを示している。図１４Ｃはフィルタ設定の映像を例示している。台形状の領域ＰＡや境界線ＬＮから矢印方向の領域ＰＢは、注意報や警報の出力を行うか否かの区分領域である。
【０１１８】
出力部３２３は、監視映像とメタデータの映像およびフィルタ設定の映像を合成して図１５Ａに示す合成映像の表示信号ＶＳを生成して出力する。ここで、動体ＭＢが移動して、動体ＭＢの位置が予めユーザの設定した領域に近づいたことをフィルタ処理結果が示したとき、出力部３２３は表示切替を実施して、監視結果である注意報の出力を行う。動体ＭＢの位置は動体位置情報で判別できることから、例えば図１５Ｂに示すように、動体ＭＢが領域ＰＢに近づいたとき、動体ＭＢの位置に矩形状の点線表示である注意報ＨＷを表示する。また、動体ＭＢの位置が予めユーザの設定した領域内となったことをフィルタ処理結果が示したとき、出力部３２３は表示切替を実施して、監視結果である警報の出力を行う。例えば図１５Ｃに示すように、動体ＭＢが領域ＰＢに入ったとき、動体ＭＢの位置に矩形状の線表示である警報ＨＡを表示する。また、図１５Ｄに示すように、動体ＭＢが領域ＰＡに入ったとき、動体ＭＢの位置に矩形状の線表示である警報ＨＡを表示する。このように、監視結果である注意報ＨＷや警報ＨＡをグラフィカルに表示することで、表示信号ＶＳに基づく映像によって監視結果を容易かつ正しく認識することができる。
【０１１９】
また、出力部３２３は、温度や輝度および異常操作等に関するフィルタ処理結果が示されたとき、これらの情報に関する注意報や警報を文字や図形等で出力するものとしてもよい。
【０１２０】
次に、監視装置３０が再生モードに設定されている場合について説明する。メタデータフィルタ部３１３は、メタデータ再生部３２２から供給されたメタデータＤmpのフィルタ処理を行い、フィルタ処理結果ＦＪを出力部３２３に供給する。出力部３２３は、映像データ再生部３２０から供給された映像データＤvp、メタデータ再生部３２２から供給されたメタデータＤmp、メタデータフィルタ部３１３から供給されたフィルタ設定ＦＳに基づき、監視映像やメタデータおよびフィルタ設定のいずれか、あるいはこれらを合成して表示装置の画面上に表示するための表示信号ＶＳを生成する。また、出力部３２３は、メタデータフィルタ部３１３のフィルタ処理結果ＦＪに基づいて表示切替を行う。
【０１２１】
映像データ再生部３２０は、ユーザによって指示された位置から映像データの再生を行い、映像データ蓄積部３１６から読み出した映像データＤvpを出力部３２３に供給する。また、再生同期部３２１が設けられていることから、映像データＤvpに同期したメタデータがメタデータ再生部３２２によってメタデータ蓄積部３１７から読み出されて出力部３２３に供給される。
【０１２２】
出力部３２３は、再生した監視映像と再生したメタデータの映像およびフィルタ設定の映像を合成して表示信号ＶＳを生成して出力する。ここで、動体の位置が予めユーザの設定した領域に近づいたことや、設定した領域内であることをフィルタ処理結果が示しているときは、監視モードの場合と同様に、注意報や警報を出力する。
【０１２３】
また、異常操作が行われたか否かを判別できるように、ユーザがフィルタ設定を行った場合、メタデータフィルタ部３１３のフィルタ処理結果に基づき、異常操作が行われた位置で注意報や警報を出力させることもできる。さらに、ユーザが設定した文字情報等に基づいてメタデータのフィルタ処理を行うものとすれば、メタデータに該当する情報が含まれた位置で注意報や警報を出力させることもできる。
【０１２４】
このように、メタデータのフィルタ処理を行うものとすれば、監視対象の情報を変更したり監視対象の情報を増やす場合でも、フィルタ設定と、このフィルタ設定を用いたときのフィルタ処理結果に応じた切替指示を設定するだけで、種々の監視対象の情報を利用して多様な監視動作を容易に行うことができる。
【０１２５】
また、種々のフィルタ設定を設けておくことで、多種多様な通知を行うことができる。例えば、上述のように動体が予め設定した領域に近づいたときには注意報の出力を行い、領域に入ったときに警報を出力させることができるので、詳細な監視動作を容易に行うことができる。
【０１２６】
さらに、メタデータでは、マークアップ言語で監視対象の情報の記述を行っていることから、メタデータフィルタ部やメタデータ再生部は、マークアップ言語を読み取る機能を有すればよい。したがって、メタデータのフォーマット毎にメタデータフィルタ部やメタデータ再生部を設ける必要がないので、監視装置の構成が簡単となる。また、メタデータのフォーマットに依存することなく所望の監視対象の情報を再生したりフィルタ処理を行うことができるので、様々なメタデータを監視映像に同期させて再生することができる。
【０１２７】
また、監視装置３０では、監視装置３０が再生モードに設定されている場合、ユーザによって指示された位置から映像データの再生を映像データ再生部３２０で行い、メタデータ再生部３２２では、映像データＤvpに同期したメタデータを再生するものとしている。しかし、メタデータ蓄積部３１７には、監視対象に関する種々の情報が蓄積可能とされており、メタデータ再生部３２２では、蓄積されているメタデータの情報が再生可能とされていることから、ユーザによって指示された情報をメタデータ再生部３２２によって再生させて、映像データ再生部３２０では、再生されるメタデータの情報に同期した映像データを再生するようにしてもよい。この場合、メタデータ再生部３２２は、再生したメタデータの再生位置を再生同期部３２１に通知する。再生同期部３２１は、メタデータ再生部３２２から通知された再生位置と、映像データ再生部３２０で映像データ蓄積部３１６に蓄積されている映像データを再生するときの再生位置が同期するように、同期制御信号を映像データ再生部３２０に供給して、映像データ再生部３２０の動作を制御する。
【０１２８】
このようにすれば、ユーザは、映像データに対して再生位置を指定して監視映像の確認等を行うことができるだけでなく、メタデータの所望の情報を選択して再生させることで、この情報に同期した監視映像が自動的に再生されて、監視映像の確認を行うことが可能となる。また、所望の情報を選択して再生させることで、この再生される情報に基づいた注意報や警報を出力させることもできる。なお、監視モードや再生モードにおける注意報や警報の出力は、出力部によってグラフィカルに表示する場合に限られるものではなく、音声で注意報や警報を出力するものとしたり、発光素子等の表示デバイスを用いて注意報や警報を表示するものとしてもよい。
【０１２９】
ところで、フィルタ処理結果に基づいた動作切替は、監視装置３０だけでなく監視端末２０に対しても行うことができる。以下、フィルタ処理結果に基づいて監視端末２０の動作切替を行う場合を簡単に説明する。
【０１３０】
メタデータフィルタ部３１３は、メタデータ取得部３１２から供給されたメタデータＤmのフィルタ処理を行い、フィルタ処理結果ＦＪを切替指示部３１５に供給する。切替指示部３１５は、フィルタ処理結果ＦＪに基づいて、切替指示信号ＣＡを生成して監視端末２０に供給する。ここで、切替指示部３１５は、例えば監視映像のフレームレートを高くするように監視端末２０の動作を切り替える。このとき、各監視映像の時間間隔が短くなることから、動体の動きを詳細な時間間隔で監視することができる。また、動体が検出されていないときは、監視映像のフレームレートが低いので、監視端末２０から監視装置３０への映像データの供給回数が少なくなる。したがって、監視端末２０を複数用いた場合に、ネットワーク４０のトラフィックが増大して監視端末２０から監視装置３０への映像データの供給が遅延してしまうことを防止できる。また、切替指示部３１５は、圧縮率を低くすることで、監視映像の画質の劣化を少なくできるので、画質の良好な映像で動体の確認を行うことができる。また、動体が検出されていないときは、圧縮率が高いので、データ量が少ないことから、監視端末２０を複数用いた場合に、ネットワーク４０のトラフィックが増大して監視端末２０から監視装置３０への映像データの供給が遅延してしまうことを防止できる。
【０１３１】
監視映像が明るすぎる状態あるいは暗すぎる状態であることをフィルタ処理結果が示すとき、切替指示部３１５は、撮像動作切替部２２によって、レンズ部２１１や撮像部２１２あるいは撮像信号処理部２１３の動作を制御して、所望の明るさの監視映像が得られるように切替指示信号ＣＡを生成して監視端末２０に供給する。このように切替指示信号ＣＡを生成すれば、監視端末２０から供給される監視映像を自動的に適正な明るさとすることができる。
【０１３２】
異常操作が行われたことをフィルタ処理結果が示すとき、切替指示部３１５は、撮像動作切替部２２によって、レンズ部２１１の動作や撮像方向を制御して、異常操作が行われた方向の監視映像を得られるように切替指示信号ＣＡを生成して監視端末２０に供給する。このように切替指示信号ＣＡを生成すれば、監視端末２０を効率よく活用して監視に適した監視映像を得ることができる。
【０１３３】
以上のように、メタデータのフィルタ処理結果に基づいて監視端末２０の動作切替を行うことで、監視に適した監視映像を自動的に得ることができる。また、メタデータのフィルタ処理結果を用いることで、監視対象の情報を変更したり監視対象の情報を増やす場合でも、フィルタ設定とこのフィルタ設定を用いたときのフィルタ処理結果に応じた切替指示信号ＣＡの生成を行うだけで、変更後の監視対象の情報や追加した監視対象の情報に基づく最適な監視映像を自動的に得ることができる。
【図面の簡単な説明】
【０１３４】
【図１】監視システムの構成を示す図である。
【図２】監視端末の機能ブロック図である。
【図３】データ構造を示す図である。
【図４】監視装置の機能ブロック図である。
【図５】制御部の動作を示すフローチャートである。
【図６】映像データ取得部の動作を示すフローチャートである。
【図７】メタデータ取得部の動作を示すフローチャートである。
【図８】メタデータフィルタ部の動作を示すフローチャートである。
【図９】切替指示部の動作を示すフローチャートである。
【図１０】映像データ再生部の動作を示すフローチャートである。
【図１１】再生同期部の動作を示すフローチャートである。
【図１２】メタデータ再生部の動作を示すフローチャートである。
【図１３】出力部の動作を示すフローチャートである。
【図１４】監視映像とメタデータに基づく映像とフィルタ設定の映像を示す図である。
【図１５】出力部から出力される映像を示す図である。
【符号の説明】
【０１３５】
１０・・・監視システム、２０・・・監視端末、２１・・・映像データ生成部、２２・・・撮像動作切替部、２３・・・メタデータ生成部、３０・・・監視装置、４０・・・ネットワーク、２１１・・・レンズ部、２１２・・・撮像部、２１３・・・撮像信号処理部、２１４・・・データ処理部、３１１・・・映像データ取得部、３１２・・・メタデータ取得部、３１３・・・メタデータフィルタ部、３１４・・・フィルタ設定蓄積部、３１５・・・切替指示部、３１６・・・映像データ蓄積部、３１７・・・メタデータ蓄積部、３２０・・・映像データ再生部、３２１・・・再生同期部、３２２・・・メタデータ再生部、３２３・・・出力部、３２５・・・制御部、３２６・・・ユーザインタフェース部
【技術分野】
【０００１】
この発明は、監視装置と監視方法に関する。この発明においては、監視端末から映像データとメタデータを取得して、このメタデータのフィルタ処理を行い、このフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、監視結果の出力を行うものである。
【背景技術】
【０００２】
従来の監視システムでは、ネットワークを介して監視端末から監視装置に監視映像の映像データを供給し、この映像データを監視装置で記録することで、異常発生時の監視映像の確認等を監視装置で行うことができるようになされている（例えば特許文献１）。
【０００３】
【特許文献１】特開２００３−２７４３９０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところで、監視システムで監視を行う場合、予め設定した１つの情報に基づいて異常発生の有無を判別するものとしたとき、多様な監視動作を行うことができない。例えば、監視装置は、監視端末から供給された動体の検出結果を示す動体検知情報に基づいて異常発生の有無を判別するものとした場合、動体の動きが異常発生の通知を行う必要のない動きであっても、異常発生として判別されてしまう。
【０００５】
また、動体検知情報とは異なる情報に基づいて異常発生の有無を判別するものとした場合、動体検知情報とは異なる情報を正しく受信できるように、この情報のフォーマットやタイミングに対応可能な情報取得部を監視装置に設けなければならない。このため、種々の情報を利用可能として多様な監視動作を行うものとする場合、各情報に対応した情報取得部を設けなければならず、監視装置の機能の拡張を容易に行うことができない。
【０００６】
そこで、この発明では、多様な監視動作を容易に行うことができる監視装置および監視方法を提供するものである。
【課題を解決するための手段】
【０００７】
この発明は、監視端末から映像データと、監視対象に関する情報を示すメタデータを取得する。フィルタ設定蓄積部には、フィルタ設定を蓄積させておき、この蓄積されているフィルタ設定を用いてメタデータのフィルタ処理を行い、フィルタ処理結果に基づいて監視結果の出力を行うものである。
【０００８】
監視結果の出力では、映像データに基づく映像とメタデータに基づく映像とメタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、監視結果を示す映像を出力するものである。
【０００９】
さらに、取得した映像データやメタデータの蓄積を行い、蓄積した映像データやメタデータを再生可能とする。ここで、映像データとメタデータを共に再生するとき、再生同期部によって、再生される映像データに同期したメタデータを再生させる。
【００１０】
この発明において、監視装置で動体の監視を行う場合、監視対象に関する情報には、動体が検出されているか否かを示す動体検知情報や動体の位置を示す動体位置情報を含めるものとする。また、監視端末で監視する領域がどのような状態であるか監視する場合、監視対象に関する情報には、監視映像の輝度を示す情報や温度を示す情報を含めるものとする。
【００１１】
フィルタ設定蓄積部には、監視対象に関する情報に基づいて警報等を行う必要があるか否かの判断基準となるフィルタ設定を、情報毎に蓄積させておく。このフィルタ設定を用いてメタデータのフィルタ処理を行うことで、監視対象に関する情報毎に、警報等を行う必要があることをフィルタ処理結果で示すことができる。このフィルタ処理結果に基づいて監視結果を出力することで、監視対象に関する情報毎の警報等を出力することが可能となる。例えば、動体が検出されたときや、動体が予め設定した領域に入り込んだとき、監視する領域が暗くなったり、温度の異常が生じたときなど、それぞれの状態に対応した警報等を出力させることが可能となる。
【００１２】
また、映像データに基づく映像とメタデータに基づく映像とメタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、監視結果を示す映像の出力が行われるので、グラフィカルに監視結果が表示させることとなり、容易かつ正しく監視結果を認識することが可能となる。
【００１３】
また、監視対象に関する情報をマークアップ言語で記述することにより、監視対象に関する情報の変更や追加を行う場合、フィルタ設定の変更や追加を容易に行うことが可能となる。
【発明の効果】
【００１４】
この発明によれば、監視端末から映像データと、監視対象に関する情報を示すメタデータが監視装置で取得される。また、監視装置では、フィルタ設定蓄積部に蓄積されたフィルタ設定を用いてメタデータのフィルタ処理が行われて、このフィルタ処理結果に基づいて監視結果の出力が行われる。このため、メタデータに監視対象に関する種々の情報を含めるものとして、フィルタ設定蓄積部には、メタデータに含まれる情報に対応したフィルタ設定を蓄積させておくことで、多様な監視動作を容易に可能として、監視結果を出力させることができる。
【発明を実施するための最良の形態】
【００１５】
以下、図を参照しながら、この発明の実施の一形態について説明する。図１は、監視システム１０の構成を示している。監視端末２０と監視装置３０はネットワーク４０を介して接続されている。監視端末２０は、監視映像の映像データの生成および監視対象に関する情報を示したメタデータの生成を行う。監視装置３０は、監視端末２０の遠隔制御や、監視端末２０で生成された映像データやメタデータの取得や解析，蓄積および蓄積されている映像の閲覧等を行う。
【００１６】
図２は監視端末の機能ブロック図である。監視端末２０は映像データ生成部２１とメタデータ生成部２３を有している。映像データ生成部２１は監視映像の映像データＤtを生成する。すなわち、撮像部２１２は、レンズ部２１１を介して入射された入射光に基づき、撮像信号Ｓvを生成して撮像信号処理部２１３に供給する。撮像信号処理部２１３は、例えばＡ／Ｄ変換やニー補正、プロセス処理等を行い、映像データＤvを生成する。
【００１７】
データ処理部２１４は、監視映像の通信を行う際のデータ量を少なくするため、映像データＤvの符号化処理を行って映像データＤtを生成する。さらに、データ処理部２１４は、生成した映像データＤtを所定のデータ構造として監視装置３０に供給する。
【００１８】
撮像動作切替部２２は、監視装置３０からの切替指示信号ＣＡに基づき、最適な監視映像が得られるように監視端末２０の動作切り替えを行う。例えば、撮像動作切替部２２は、制御信号ＣＭaをレンズ部２１１に供給してズーム比やアイリスの切り替え、制御信号ＣＭbを撮像部２１２と撮像信号処理部２１３に供給して監視映像のフレームレートの切り替え、制御信号ＣＭcをデータ処理部２１４に供給して映像データの圧縮率の切替等を行う。さらに、撮像動作切替部２２は、撮像方向の切替等を行う。
【００１９】
メタデータ生成部２３は、監視対象に関する情報を示したメタデータＤmの生成を行う。例えば、動体を監視対象とする場合、映像データ生成部２１で生成された映像データＤvを用いて動体の検出を行い、動体が検出されているか否かを示す動体検知情報や、検出された動体がいずれの位置であるかを示す動体位置情報を生成して、この情報を監視対象に関する情報としてメタデータに含めるものとする。さらに、メタデータ生成部２３は、動体の種類や状態等に関する情報を監視対象に関する情報として用いるものとしてもよい。
【００２０】
また、監視対象に関する情報は動体に関連した情報に限られるものではなく、監視端末で監視する領域の状態を示す情報であってもよい、例えば監視する領域の温度や明るさ等を示す情報を用いるものとする。また、監視する領域で行われた操作等の情報を用いるものとしてもよい。温度を監視対象とするとき、メタデータ生成部２３は、温度測定結果をメタデータに含める。また、明るさを監視対象とするとき、メタデータ生成部２３は、映像データ生成部２１で生成された映像データＤvに基づいて例えば監視映像の平均輝度を判別して、この判別結果をメタデータに含める。さらに、ＡＴＭ(Automated Teller Machine)やＰＯＳ(Point Of Sales)端末等において行われたユーザ操作を監視対象として、メタデータ生成部２３は、操作キーや操作パネル等で行われたユーザ操作を示す情報をメタデータに含める。さらに、メタデータ生成部２３は、撮像動作切替部２２から供給された撮像動作情報ＱＦ（例えば監視映像の映像データを生成したときの撮影方向やズーム状態および映像データ生成部の設定状態等を示す情報）や、時刻情報等をメタデータに含めることで、メタデータが生成された時刻や映像データがどのように生成されたものであるかを判別することが可能となる。
【００２１】
図３は、映像データとメタデータのデータ構造を示している。映像データとメタデータは、リンク情報とデータ本体で構成する。データ本体は、映像データの場合、監視映像の映像データである。またメタデータの場合、データ本体は、監視対象を示す情報等と、この情報の記述方式を定義した属性情報を記述したものである。リンク情報は、映像データとメタデータとの関連付けを示す関連付け情報と、この情報の内容の記述方式を定義した属性情報等を記述したものである。
【００２２】
関連付け情報は、例えば映像データを特定するためのタイムスタンプやシーケンス番号を使用する。タイムスタンプは、映像データの生成時刻を与える情報（時刻情報）である。シーケンス番号は、コンテンツデータの生成順序を与える情報（順序情報）であり、タイムスタンプの等しい監視映像が複数存在するような場合、タイムスタンプの等しい映像データの生成順序を識別することができる。また、関連付け情報には、映像データを生成する機器を特定するための情報（例えば製造会社名や機種名、製造番号等）を使用するものとしてもよい。
【００２３】
ここで、リンク情報やメタデータ本体の記述は、Ｗｅｂ上で交換される情報を記述する方法として定義されたマークアップ言語を用いる。このように、マークアップ言語を用いるものとすれば、ネットワーク４０を介した情報の交換を容易に行うことができる。さらに、マークアップ言語、例えば文書や電子データの交換に利用されているＸＭＬを用いることで、映像データとメタデータの交換も容易に行うことができる。ＸＭＬを用いるものとした場合、情報の記述方式を定義した属性情報は、例えばＸＭＬSchemaを使用する。
【００２４】
監視端末２０で生成した映像データやメタデータは、１つのストリームとして監視装置３０に供給するものとしてもよく、また映像データとメタデータを別のストリームで非同期に監視装置３０に供給するものとしてもよい。
【００２５】
図４は監視装置の機能ブロック図である。なお、監視装置の各機能ブロックは、ハードウェアで構成するものとしてもよく、またソフトウェアで構成するものとしてもよい。
【００２６】
監視装置３０の映像データ取得部３１１は、監視端末２０から映像データＤtを取得する。また、映像データ取得部３１１は、符号化されている映像データＤtの復号化処理を行い、得られた映像データＤvを映像データ取得部３１１に設けられているバッファ（図示せず）に保持する。さらに、映像データ取得部３１１は、保持している映像データＤvを順次出力部３２３に供給する。このようにバッファに映像データを保持することで、監視端末からの映像データのタイミングに依らず、出力部３２３に対して順次映像データを供給できる。また、映像データ取得部３１１は、後述する切替指示部３１５からの蓄積指示信号ＣＲに基づき、保持している映像データＤvを映像データ蓄積部３１６に蓄積させる。なお、映像データ蓄積部３１６には、符号化されている映像データＤtを蓄積して、後述する映像データ再生部３２０で復号化を行うものとしてもよい。
【００２７】
メタデータ取得部３１２は、監視端末２０からメタデータＤmを取得して、メタデータ取得部３１２に設けられているバッファ（図示せず）に保持する。また、メタデータ取得部３１２は、保持しているメタデータＤmを出力部３２３に順次供給する。また、保持しているメタデータＤmをメタデータフィルタ部３１３に供給する処理も行う。このようにバッファにメタデータを保持することで、監視端末からのメタデータのタイミングに依らず、出力部３２３に対して順次メタデータを供給できる。また、映像データと同期させてメタデータを出力部３２３に供給できる。さらに、メタデータ取得部３１２は、監視端末２０から取得したメタデータＤmをメタデータ蓄積部３１７に蓄積させる。ここで、メタデータＤmをメタデータ蓄積部３１７に蓄積する際に、メタデータＤmと同期する映像データＤvの時刻情報を付加しておけば、メタデータＤmの内容を読み出して時刻を判別しなくとも、付加されている時刻情報を利用して、所望の時刻のメタデータをメタデータ蓄積部３１７から読み出すことが可能となる。
【００２８】
メタデータフィルタ部３１３は、フィルタ設定蓄積部３１４に蓄積されているフィルタ設定ＦＳを用いて、メタデータ取得部３１２で取得したメタデータＤm、あるいはメタデータ蓄積部３１７から供給されたメタデータＤmpのフィルタ処理を行い、フィルタ処理結果ＦＪを切替指示部３１５と出力部３２３に供給する。
【００２９】
フィルタ設定蓄積部３１４は、フィルタ設定ＦＳを蓄積しており、メタデータフィルタ部３１３で行うフィルタ処理に応じたフィルタ設定をメタデータフィルタ部３１３に供給する。このフィルタ設定ＦＳは、警報等の出力や監視端末の撮像動作切替を行う必要があるか否かの判断基準を、メタデータに含まれている監視対象に関する情報毎に示すものである。このフィルタ設定ＦＳを用いてメタデータのフィルタ処理を行うことで、監視対象に関する情報毎に、警報等の出力を行う必要があることや監視端末の撮像動作切替が必要であることをフィルタ処理結果で示すことができる。
【００３０】
切替指示部３１５は、メタデータフィルタ部３１３からのフィルタ処理結果ＦＪに基づいて、切替指示信号ＣＡを生成して監視端末２０に供給する。例えば、フィルタ処理結果ＦＪに基づき、監視に適した監視映像が得られるように監視端末２０の動作を切り替える。また、切替指示部３１５は、フィルタ処理結果ＦＪに基づき、映像データ蓄積部３１６に対して蓄積指示信号ＣＲを供給して、映像データ取得部３１１で取得した映像データＤvを映像データ蓄積部３１６に蓄積させる。
【００３１】
また、切替指示部３１５では、映像データＤvの蓄積モードを選択可能とする。例えば動的検索モードと最小限モードのいずれかを選択可能とする。動的検索モードがユーザによって選択されている場合、切替指示部３１５は、フィルタ処理結果ＦＪによって動体が検出されていることが示されたとき、映像データ取得部３１１で取得した映像データＤvを映像データ蓄積部３１６に蓄積させる。また、最小限モードが選択されている場合、切替指示部３１５は、フィルタ処理結果ＦＪによって注意報や警報の出力を行うような状態が生じたと判別したとき、映像データ取得部３１１で取得した映像データＤvを映像データ蓄積部３１６に蓄積させる。ここで、動的検索モードが選択されたときには、動体が検出されているときの映像データＤvが蓄積される。このため、後述する映像データ再生部３２０によって、蓄積されている映像データＤvを再生して、再生された映像データＤvと同期するメタデータに対して所望のフィルタ設定でフィルタ処理を行うものとすれば、このフィルタ設定を満たす映像データを検索できる。また、最小限モードが選択されたときは、注意報や警報の出力を行うような状態の映像データを容易かつ速やかに再生できる。また、蓄積する映像データのデータ量を少なくできる。
【００３２】
映像データ蓄積部３１６は、映像データ取得部３１１で取得された映像データＤvを蓄積する。またメタデータ蓄積部３１７は、メタデータ取得部３１２で取得されたメタデータＤmを蓄積する。
【００３３】
映像データ再生部３２０は、映像データ蓄積部３１６に蓄積されている映像データＤvの再生処理を行う。すなわち、映像データ再生部３２０は、ユーザによって指示された再生位置から順次映像データを読み出して、読み出した映像データＤvpを出力部３２３に供給する。また、映像データ再生部３２０は、再生している映像データの再生位置（再生時刻）ＪＳを再生同期部３２１に供給する。
【００３４】
再生同期部３２１は、映像データ再生部３２０から供給された再生位置ＪＳと、メタデータ再生部３２２で、メタデータ蓄積部３１７に蓄積されているメタデータを再生するときの再生位置が同期するように、同期制御信号ＣＰをメタデータ再生部３２２に供給して、メタデータ再生部３２２の動作を制御する。
【００３５】
メタデータ再生部３２２は、メタデータ蓄積部３１７に蓄積されているメタデータＤmの再生処理を行う。すなわち、メタデータ再生部３２２は、ユーザによって指示された再生位置から順次メタデータを読み出して、読み出したメタデータＤmpをメタデータフィルタ部３１３と出力部３２３に供給する。また、映像データとメタデータの双方を再生する場合、メタデータ再生部３２２は、上述のように再生同期部３２１から供給された同期制御信号ＣＰに基づいて再生動作制御して、映像データＤvpに同期したメタデータＤmpを出力する。
【００３６】
出力部３２３は、映像データ取得部３１１から供給された映像データＤvや映像データ再生部３２０から供給された映像データＤvp、メタデータ取得部３１２から供給されたメタデータＤmやメタデータ再生部３２２から供給されたメタデータＤmp、メタデータフィルタ部３１３からのフィルタ設定ＦＳに基づき、監視映像やメタデータの映像やフィルタ設定の映像のいずれか、あるいはこれらを合成した映像を用いて、フィルタ処理結果ＦＪに基づく監視結果を示す映像の表示信号ＶＳを生成して出力する。
【００３７】
制御部３２５には、操作キーやリモートコントロール信号受信器等で構成されたユーザインタフェース部３２６が接続されている。ユーザインタフェース部３２６は、ユーザ操作に応じた操作信号ＳＰを生成して制御部３２５に供給する。制御部３２５は、操作信号ＳＰに基づいた制御信号ＣＴを生成して各部に供給することで、監視装置３０の動作がユーザ操作に応じた動作となるように制御する。
【００３８】
次に各部をソフトウェアで構成した場合の動作についてフローチャートを用いて説明する。
【００３９】
図５は、制御部の動作を示している。ステップＳＴ１で制御部３２５は、監視動作の開始指示を行う。この監視動作の開始指示によって、映像データ再生部３２０とメタデータ再生部３２２を除く各部の動作を開始させてステップＳＴ２に進む。
【００４０】
ステップＳＴ２で制御部３２５は、フィルタ設定が完了しているか否かを判別する。制御部３２５は、メタデータフィルタ部３１３に対するフィルタ設定が完了していないときステップＳＴ３に進み、フィルタ設定が完了しているときステップＳＴ４に進む。
【００４１】
ステップＳＴ３で制御部３２５は、フィルタ設定を行う。フィルタ設定では、例えば表示装置の画面上に、メタデータフィルタ部３１３に対するフィルタ設定が完了していない旨の表示を行う。その後、ユーザインタフェース部３２６から供給された操作信号ＳＰに基づき、ユーザ操作に応じたフィルタ設定をメタデータフィルタ部３１３に設定してステップＳＴ４に進む。
【００４２】
ステップＳＴ４で制御部３２５は、監視モードから再生モードへの切替指示が行われたか否かを判別する。監視モードとは、映像データ取得部３１１に保持されている映像データやメタデータ取得部３１２に保持されているメタデータに基づく映像を出力部３２３から出力させる動作モードを示している。また、再生モードとは、映像データ再生部３２０で再生された映像データやメタデータ再生部３２２で再生されたメタデータに基づく映像を出力部３２３から出力させる動作モードを示している。
【００４３】
制御部３２５は、ユーザインタフェース部３２６からの操作信号ＳＰに基づき再生モードへの切替指示が行われた判別したときステップＳＴ５に進み、切替指示が行われたと判別されないときはステップＳＴ１６に進む。
【００４４】
ステップＳＴ５で制御部３２５は、再生位置の指定がなされた否かを判別する。制御部３２５は、再生位置の指定がなされていないときステップＳＴ５に戻り、操作信号ＳＰによって再生位置の指定がなされたときステップＳＴ６に進む。
【００４５】
ステップＳＴ６で制御部３２５は、再生モードにおけるフィルタ設定が完了しているか否かを判別する。制御部３２５は、メタデータフィルタ部３１３に対するフィルタ設定が完了していないときステップＳＴ７に進み、フィルタ設定が完了しているときステップＳＴ８に進む。
【００４６】
ステップＳＴ７で制御部３２５は、ステップＳＴ３と同様にフィルタ設定を行いステップＳＴ８に進む。
【００４７】
ステップＳＴ８で制御部３２５は、再生開始指示を行いステップＳＴ９に進む。すなわち、制御部３２５は、映像データ再生部３２０や再生同期部３２１およびメタデータ再生部３２２の動作を開始させて、ステップＳＴ５で指定されていると判別した再生位置から映像データやメタデータの再生を行わせる。
【００４８】
ステップＳＴ９で制御部３２５は、表示切替指示を行いステップＳＴ１０に進む。すなわち、制御部３２５は、表示切替指示を出力部３２３に対して行い、映像データ再生部３２０で再生された映像データに基づく映像と、メタデータ再生部３２２で再生されたメタデータに基づく映像と、メタデータフィルタ部３１３のフィルタ設定に基づいた映像を合成した映像の表示信号ＶＳを出力部３２３から出力させる。
【００４９】
ステップＳＴ１０で制御部３２５は、再生モードの終了操作が行われたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが再生モードの終了操作を示していないときステップＳＴ１１に進み、再生モードの終了操作を示しているときステップＳＴ１４に進む。
【００５０】
ステップＳＴ１１で制御部３２５は、終了操作が行われたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが再生モードの終了操作を示していないときステップＳＴ１２に進み、再生モードの終了操作を示しているとき監視装置３０の動作を終了する。
【００５１】
ステップＳＴ１２で制御部３２５は、変更操作がなされたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが変更操作を示していないときステップＳＴ１０に戻り、変更操作を示しているときステップＳＴ１３に進む。
【００５２】
ステップＳＴ１３で制御部３２５は、変更操作に応じた変更指示を行いステップＳＴ１０に戻る。例えば、制御部３２５は、再生位置を変更する変更操作が行われたとき、変更後の再生位置から再生動作を行うことができるように、映像データ再生部３２０やメタデータ再生部３２２に対して指示を行う。また、フィルタ設定を変更する変更操作が行われたとき、変更後のフィルタ設定でフィルタ処理を行うことができるように、メタデータフィルタ部３１３に対して指示を行う。
【００５３】
ステップＳＴ１０からステップＳＴ１４に進むと、制御部３２５は、監視モードへの切替指示を行いステップＳＴ１５に進む。すなわち、制御部３２５は、映像データ再生部３２０や再生同期部３２１、メタデータ再生部３２２の動作を終了させる。また、制御部３２５は、メタデータフィルタ部３１３のフィルタ設定を、監視モードのフィルタ設定に戻す。
【００５４】
ステップＳＴ１５で制御部３２５は、表示切替指示を行いステップＳＴ１６に進む。すなわち、制御部３２５は、表示切替指示によって出力部３２３を制御して、映像データ取得部３１１からの映像データに基づく映像と、メタデータ取得部３１２からのメタデータに基づく映像と、メタデータフィルタ部３１３のフィルタ設定に基づいた映像を合成した映像を表示する表示信号を生成して、出力部３２３から出力させる。
【００５５】
ステップＳＴ１６で制御部３２５は、終了操作が行われたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが終了操作を示していないときステップＳＴ１７に進み、終了操作を示したとき監視装置の動作を終了する。
【００５６】
ステップＳＴ１７で制御部３２５は、変更操作がなされたか否かを判別する。制御部３２５は、供給された操作信号ＳＰが変更操作を示していないときステップＳＴ４に戻り、変更操作を示しているときステップＳＴ１８に進む。
【００５７】
ステップＳＴ１８で制御部３２５は、変更操作に応じた変更指示を行いステップＳＴ４に戻る。例えば、制御部３２５は、フィルタ設定を変更する変更操作が行われたとき、変更後のフィルタ設定でフィルタ処理を行うことができるように、メタデータフィルタ部３１３に対して指示を行う。
【００５８】
図６は、映像データ取得部の動作を示すフローチャートである。ステップＳＴ２１で映像データ取得部３１１は、映像データ取得処理を行う。すなわち、映像データ取得部３１１は、監視端末２０に対する映像データの要求や監視端末２０とのセッションを確立してステップＳＴ２２に進む。
【００５９】
ステップＳＴ２２で映像データ取得部３１１は、監視端末２０から映像データが供給されたか否かを判別する。映像データ取得部３１１は、映像データが供給されたときステップＳＴ２３に進み、映像データが供給されていないときステップＳＴ２６に進む。
【００６０】
ステップＳＴ２３で映像データ取得部３１１は、映像データのバッファ処理を行いステップＳＴ２４に進む。このバッファ処理において、映像データ取得部３１１は、監視端末２０から供給された映像データを保持する。さらに、映像データ取得部３１１は、保持している映像データを出力部３２３に供給する。
【００６１】
ステップＳＴ２４で映像データ取得部３１１は、切替指示部３１５から蓄積指示が供給されたか否かを判別する。映像データ取得部３１１は、蓄積指示信号ＣＲが供給されたときステップＳＴ２５に進み、蓄積指示信号ＣＲが供給されていないときはステップＳＴ２６に進む。
【００６２】
ステップＳＴ２５で映像データ取得部３１１は、映像データ蓄積処理を行い、保持している映像データを映像データ蓄積部３１６に蓄積させてステップＳＴ２６に進む。
【００６３】
ステップＳＴ２６で映像データ取得部３１１は、制御部３２５から終了指示が供給されたか否かを判別する。映像データ取得部３１１は、制御部３２５から終了指示が供給されていないときステップＳＴ２７に進み、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００６４】
ステップＳＴ２７で映像データ取得部３１１は、監視端末２０とのセッションが切断されているか否かを判別する。映像データ取得部３１１は、セッションが切断されていないときステップＳＴ２２に戻る。また、セッションが切断されているときステップＳＴ２１に戻り、再度セッションを確立して映像データの取得を行う。
【００６５】
図７は、メタデータ取得部の動作を示すフローチャートである。ステップＳＴ３１でメタデータ取得部３１２は、メタデータ取得処理を行う。すなわち、監視端末２０に対するメタデータの要求や監視端末２０とのセッションを確立してステップＳＴ３２に進む。
【００６６】
ステップＳＴ３２でメタデータ取得部３１２は、監視端末２０からメタデータが供給されたか否かを判別する。メタデータ取得部３１２は、メタデータが供給されたときステップＳＴ３３に進み、メタデータが供給されていないときステップＳＴ３６に進む。
【００６７】
ステップＳＴ３３でメタデータ取得部３１２は、メタデータのバッファ処理を行いステップＳＴ３４に進む。このバッファ処理において、メタデータ取得部３１２は、監視端末２０から供給されたメタデータを保持する。さらに、メタデータ取得部３１２は、保持しているメタデータを出力部３２３に供給する。
【００６８】
ステップＳＴ３４でメタデータ取得部３１２は、保持しているメタデータをメタデータフィルタ部３１３に出力してステップＳＴ３５に進む。
【００６９】
ステップＳＴ３５でメタデータ取得部３１２は、保持しているメタデータをメタデータ蓄積部３１７に蓄積させてステップＳＴ３６に進む。
【００７０】
ステップＳＴ３６でメタデータ取得部３１２は、制御部３２５から終了指示が供給されたか否かを判別する。メタデータ取得部３１２は、制御部３２５から終了指示が供給されていないときステップＳＴ３７に進み、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００７１】
ステップＳＴ３７でメタデータ取得部３１２は、監視端末２０とのセッションが切断されているか否かを判別する。メタデータ取得部３１２は、セッションが切断されていないときステップＳＴ３２に戻る。また、セッションが切断されているときステップＳＴ３１に戻り、再度セッションを確立してメタデータの取得を行う。
【００７２】
図８は、メタデータフィルタ部の動作を示すフローチャートである。ステップＳＴ４１でメタデータフィルタ部３１３は、メタデータが供給されたか否かを判別する。メタデータフィルタ部３１３は、メタデータが供給されていないときステップＳＴ４１に戻り、メタデータが供給されたときステップＳＴ４２に進む。
【００７３】
ステップＳＴ４２でメタデータフィルタ部３１３は、メタデータのフィルタ処理を行いステップＳＴ４３に進む。
【００７４】
ステップＳＴ４３でメタデータフィルタ部３１３は、フィルタ処理結果の通知が必要か否かを判別する。メタデータフィルタ部３１３は、通知が必要でないと判別したときステップＳＴ４１に戻り、通知が必要と判別したときステップＳＴ４４に進む。例えば、注意報や警報の出力が必要ないと判別したときはステップＳＴ４１に戻り、注意報や警報の出力が必要と判別したときステップＳＴ４４に進む。
【００７５】
ステップＳＴ４４でメタデータフィルタ部３１３は、フィルタ処理結果の通知を行う。すなわち、メタデータフィルタ部３１３は、フィルタ処理結果を切替指示部３１５や出力部３２３に供給してステップＳＴ４５に進む。
【００７６】
ステップＳＴ４５でメタデータフィルタ部３１３は、制御部３２５から終了指示が供給されたか否かを判別する。メタデータフィルタ部３１３は、制御部３２５から終了指示が供給されていないときステップＳＴ４１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００７７】
図９は、切替指示部の動作を示すフローチャートである。ステップＳＴ５１で切替指示部３１５は、メタデータフィルタ部３１３からフィルタ処理結果が通知されたか否かを判別する。切替指示部３１５は、通知がないときステップＳＴ５１に戻り、通知があったときステップＳＴ５２に進む。
【００７８】
ステップＳＴ５２で切替指示部３１５は、フィルタ処理結果の内容判別を行ってステップＳＴ５３に進む。
【００７９】
ステップＳＴ５３で切替指示部３１５は、切替指示の出力処理を行う。すなわち、切替指示部３１５は、内容判別の結果に基づいた切替指示を生成して出力する。例えば、映像データ取得部３１１に対して、取得した映像データを映像データ蓄積部３１６に蓄積させる蓄積指示信号ＣＲを供給する。また、監視に適した監視映像の映像データが監視端末２０で生成されるように、監視端末２０に対して切替指示信号ＣＡを供給する。
【００８０】
ステップＳＴ５４で切替指示部３１５は、制御部３２５から終了指示が供給されたか否かを判別する。切替指示部３１５は、制御部３２５から終了指示が供給されていないときステップＳＴ５１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００８１】
図１０は、映像データ再生部の動作を示すフローチャートである。ステップＳＴ６１で映像データ再生部３２０は、再生位置の設定を行う。すなわち、映像データ再生部３２０は、ユーザインタフェース部３２６を介してユーザによって指定された位置を再生位置に設定してステップＳＴ６２に進む。
【００８２】
ステップＳＴ６２で映像データ再生部３２０は、再生動作を開始して、映像データ蓄積部３１６に蓄積されている映像データを再生位置から順次読み出して出力部３２３に供給する。
【００８３】
ステップＳＴ６３で映像データ再生部３２０は、再生されている映像データの再生位置を再生同期部３２１に通知してステップＳＴ６４に進む。
【００８４】
ステップＳＴ６４で映像データ再生部３２０は、映像データが終了した否かを判別する。映像データ再生部３２０は、映像データが終了していないときステップＳＴ６５に進み、映像データが終了したとき動作を終了する。
【００８５】
ステップＳＴ６５で映像データ再生部３２０は、制御部３２５から終了指示が供給されたか否かを判別する。映像データ再生部３２０は、制御部３２５から終了指示が供給されていないときステップＳＴ６３に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００８６】
図１１は、再生同期部の動作を示すフローチャートである。ステップＳＴ７１で再生同期部３２１は、映像データ再生部３２０から映像データの再生位置を取得してステップＳＴ７２に進む。
【００８７】
ステップＳＴ７２で再生同期部３２１は、メタデータ再生部３２２におけるメタデータの再生位置を判別してステップＳＴ７３に進む。
【００８８】
ステップＳＴ７３で再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも進んでいるか否かを判別する。再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも進んでいるときステップＳＴ７４に進み、映像データの再生位置よりも進んでいないときステップＳＴ７５に進む。
【００８９】
ステップＳＴ７４で再生同期部３２１は、メタデータの再生位置を映像データの再生位置に同期させる再生位置同期処理を行ってステップＳＴ７７に進む。再生同期部３２１は、メタデータ再生部３２２に対して再生位置を同期させるための同期制御信号ＣＰを供給して、例えばメタデータの再生を一時停止して、映像データの再生位置がメタデータの再生位置と等しくなったとき再生を開始する。あるいは、メタデータの再生位置を映像データの再生位置に戻して再生位置を同期させる。
【００９０】
ステップＳＴ７５で再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも遅れているか否かを判別する。再生同期部３２１は、メタデータの再生位置が映像データの再生位置よりも遅れているときステップＳＴ７６に進み、映像データの再生位置よりも遅れていないときステップＳＴ７７に進む。
【００９１】
ステップＳＴ７６で再生同期部３２１は、メタデータの再生位置を映像データの再生位置に同期させる再生位置同期処理を行ってステップＳＴ７７に進む。すなわち再生同期部３２１は、メタデータ再生部３２２に対して同期制御信号ＣＰを供給して、例えばメタデータの再生位置を映像データの再生位置に進めて再生位置を同期させる。
【００９２】
ステップＳＴ７７で再生同期部３２１は、制御部３２５から終了指示が供給されたか否かを判別する。再生同期部３２１は、制御部３２５から終了指示が供給されていないときステップＳＴ７１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００９３】
図１２は、メタデータ再生部の動作を示すフローチャートである。ステップＳＴ８１でメタデータ再生部３２２は、再生位置の設定を行う。すなわち、メタデータ再生部３２２は、ユーザインタフェース部３２６を介してユーザによって指定された位置を再生位置に設定してステップＳＴ８２に進む。
【００９４】
ステップＳＴ８２でメタデータ再生部３２２は、再生動作を開始して、メタデータ蓄積部３１７に蓄積されているメタデータを再生位置から順次読み出して出力部３２３に供給する。
【００９５】
ステップＳＴ８３でメタデータ再生部３２２は、再生同期部３２１から再生同期指示が行われたか否かを判別する。メタデータ再生部３２２は、再生同期部３２１から同期制御信号ＣＰが供給されて再生同期指示がなされたときステップＳＴ８４に進み、再生同期指示がなされていないときステップＳＴ８５に進む。
【００９６】
ステップＳＴ８４でメタデータ再生部３２２は、再生同期部３２１からの再生同期指示に基づき再生動作の切替処理を行ってステップＳＴ８５に進む。例えば同期制御信号ＣＰに基づき再生動作を一時停止したり、再生位置を進めるように動作切替を行い、メタデータの再生位置を映像データの再生位置に同期させる。
【００９７】
ステップＳＴ８５でメタデータ再生部３２２は、メタデータが終了した否かを判別する。メタデータ再生部３２２は、メタデータが終了していないときステップＳＴ８６に進み、メタデータが終了したとき動作を終了する。
【００９８】
ステップＳＴ８６でメタデータ再生部３２２は、制御部３２５から終了指示が供給されたか否かを判別する。メタデータ再生部３２２は、制御部３２５から終了指示が供給されていないときステップＳＴ８３に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【００９９】
図１３は、出力部の動作を示すフローチャートである。ステップＳＴ９１で出力部３２３は、監視モードと再生モードのいずれに設定されているか判別する。出力部３２３は、監視モードに設定されているときステップＳＴ９２に進み、監視モードに設定されていないとき、すなわち再生モードに設定されているときステップＳＴ９４に進む。
【０１００】
ステップＳＴ９２で出力部３２３は、映像データ取得部３１１からの映像データを取得してステップＳＴ９３に進む。ステップＳＴ９３で出力部３２３は、メタデータ取得部３１２からのメタデータを取得してステップＳＴ９６に進む。
【０１０１】
ステップＳＴ９４で出力部３２３は、映像データ再生部３２０からの映像データを取得してステップＳＴ９５に進む。ステップＳＴ９５で出力部３２３は、メタデータ再生部３２２からのメタデータを取得してステップＳＴ９６に進む。
【０１０２】
ステップＳＴ９６で出力部３２３は、メタデータフィルタ部３１３に設定されているフィルタ設定とフィルタ処理結果を取得してステップＳＴ９７に進む。
【０１０３】
ステップＳＴ９７で出力部３２３は、映像合成処理を行ってステップＳＴ９８に進む。この映像合成処理では、映像データに基づいた監視映像上にメタデータに基づく映像やフィルタ設定の映像、フィルタ処理結果基づく映像を合成させる。
【０１０４】
ステップＳＴ９８で出力部３２３は、表示出力を行い、映像合成処理で得られた映像信号を映像表示装置に出力してステップＳＴ９９に進む。
【０１０５】
ステップＳＴ９９で出力部３２３は、データが終了した否かを判別する。出力部３２３は、データが終了していないときステップＳＴ１００に進み、データが終了したとき動作を終了する。
【０１０６】
ステップＳＴ１００で出力部３２３は、制御部３２５から終了指示が供給されたか否かを判別する。出力部３２３は、制御部３２５から終了指示が供給されていないときステップＳＴ９１に戻り、制御部３２５から終了指示が供給されたときは、動作を終了する。
【０１０７】
次に、監視システムの動作について説明する。監視システム１０では、監視端末２０で生成されたメタデータを監視装置３０で取得する。監視装置３０は、取得したメタデータを用いてフィルタ処理を行い、フィルタ処理結果に基づいて自己の動作や監視端末２０の動作切替を行う。
【０１０８】
フィルタ設定蓄積部３１４には、メタデータＤmに含まれている監視対象を示す情報に対応したフィルタ設定ＦＳを蓄積させておく。例えば、メタデータＤmに動体が検出されたか否かを示す動体検知情報が含まれる場合、ユーザは動体検知情報を検出するフィルタ設定を蓄積させるものとして、このフィルタ設定を用いることで、動体が検出された否かを示すフィルタ処理結果を得られるようにする。また、メタデータＤmに動体の位置を示す情報が含まれている場合、ユーザは、予め設定した領域を示すフィルタ設定を蓄積させておき、このフィルタ設定を用いることで、動体がユーザの設定した領域内に入った否かを示すフィルタ処理結果を得られるようにする。また、予め設定した領域の外側に注意領域を設定して注意領域を示すフィルタ設定を蓄積させておき、このフィルタ設定を用いることで、動体がユーザの設定した領域に近づいたか否かを示すフィルタ処理結果を得られるようにする。メタデータＤmに温度を示す情報が含まれている場合、ユーザは、温度の閾値をフィルタ設定として蓄積させておき、このフィルタ設定を用いることで、監視端末２０が設けられている場所の温度が例えば閾値を超えているか否かを示すフィルタ処理結果を得られるようにする。メタデータＤmに監視画像の輝度を示す情報が含まれている場合、ユーザは、輝度の閾値をフィルタ設定として蓄積させておき、このフィルタ設定を用いることで、監視映像が閾値よりも暗いか否か等を示すフィルタ処理結果を得られるようにする。さらに、メタデータＤmにユーザ操作を示す情報が含まれている場合、所定の操作をフィルタ設定として蓄積させておき、このフィルタ設定を用いることで、所定の操作が行われたか否か等を示すフィルタ処理結果を得られるようにすることもできる。
【０１０９】
ここで、フィルタ処理結果ＦＪに基づいて監視装置３０の動作切替を行う場合について説明する。監視装置３０が監視モードに設定されている場合、メタデータフィルタ部３１３は、メタデータ取得部３１２から供給されたメタデータＤmのフィルタ処理を行い、フィルタ処理結果ＦＪを切替指示部３１５と出力部３２３に供給する。切替指示部３１５は、フィルタ処理結果ＦＪに基づいて、監視映像を蓄積する必要があると判別したとき、映像データ取得部３１１に蓄積指示信号ＣＲを供給して、取得した映像データを映像データ蓄積部３１６に蓄積させる。また、出力部３２３は、フィルタ処理結果ＦＪに基づいて注意報や警報の出力を行う。
【０１１０】
切替指示部３１５が動的アラームモードに設定されている場合、動体が検出されていることをフィルタ処理結果が示すとき、切替指示部３１５は、映像データ取得部３１１に対して蓄積指示信号ＣＲを供給して、映像データ取得部３１１で取得した映像データを映像データ蓄積部３１６に蓄積させる。
【０１１１】
このように、動体が検出されていることをフィルタ処理結果が示すとき、映像データを映像データ蓄積部３１６に蓄積させるものとすれば、動体が検出されている期間の映像データが映像データ蓄積部３１６に蓄積される。したがって、動体の確認をする必要のない期間の映像データが映像データ蓄積部３１６に蓄積されないので、映像データ蓄積部３１６に効率よく映像データを蓄積させることができる。
【０１１２】
切替指示部３１５が最小限モードに設定されている場合、動体の位置が予めユーザの設定した領域に近づいたことをフィルタ処理結果が示すとき、あるいは動体の位置が予めユーザの設定した領域内となったことをフィルタ処理が示すとき、切替指示部３１５は映像データ取得部３１１に対して蓄積指示信号ＣＲを供給して、映像データ取得部３１１で取得した映像データを映像データ蓄積部３１６に蓄積させる。
【０１１３】
このように、動体の位置が予めユーザの設定した領域に近づいたことや、設定した領域内となったことをフィルタ処理結果が示すとき、映像データを映像データ蓄積部３１６に蓄積させるものとすれば、動体の位置が予めユーザの設定した領域に近づいて注意報を出力するような期間、あるいは動体の位置が予めユーザの設定した領域内となって警報を出力するような期間の映像データが映像データ蓄積部３１６に蓄積される。したがって、注意報や警報を出力するような状態での映像データのみを映像データ蓄積部３１６に蓄積させることができるので、映像データ蓄積部３１６に対して、さらに効率よく映像データを蓄積させることができる。
【０１１４】
また、動体の位置が予めユーザの設定した領域に近づいたとき映像データの蓄積を開始すれば、その後、動体の位置が予めユーザの設定した領域内となって警報を出力する場合が生じたときに、警報が出力される直前の監視映像を確認することが可能となる。
【０１１５】
さらに、後述するように切替指示部３１５によって監視端末２０撮像動作の切替指示を行い、監視に適した監視映像を得るものとする場合、例えば動体の位置が予めユーザの設定した領域に近づいたときに映像データの蓄積や撮像動作の切替指示を行うものとしてもよい。ここで、動体の位置が予めユーザの設定した領域内となって警報を出力するときに、撮像動作の切り替えや映像データの蓄積を行うと、撮像動作の切り替えによって、警報の出力時の監視映像を蓄積できないおそれがある。しかし、動体の位置が予めユーザの設定した領域に近づいたときに映像データの蓄積や撮像動作の切替指示を行うものとすれば、その後、動体の位置が予めユーザの設定した領域内となったときには、監視に適した監視映像が得られるので、警報の出力時の監視映像を監視に適した映像として蓄積させることもできる。
【０１１６】
次に、フィルタ処理結果に基づいて表示切替動作を行う場合について説明する。出力部３２３は、監視モードであるとき、映像データ取得部３１１から供給された映像データＤv、メタデータ取得部３１２から供給されたメタデータＤm、メタデータフィルタ部３１３から供給されたフィルタ設定ＦＳに基づき、監視映像やメタデータおよびフィルタ設定のいずれか、あるいはこれらを合成して表示装置の画面上に表示するための表示信号ＶＳを生成する。また、出力部３２３は、メタデータフィルタ部３１３のフィルタ処理結果ＦＪに基づいて表示切替を行う。
【０１１７】
図１４は、監視映像とメタデータの映像およびフィルタ設定の映像を個々に示している。図１４Ａは映像データに基づいた監視映像である。図１４Ｂはメタデータの映像を例示しており、メタデータに動体位置情報が含まれているとき、この動体位置情報に基づく動体位置表示ＨＰである。なお破線は動体ＭＢを示している。図１４Ｃはフィルタ設定の映像を例示している。台形状の領域ＰＡや境界線ＬＮから矢印方向の領域ＰＢは、注意報や警報の出力を行うか否かの区分領域である。
【０１１８】
出力部３２３は、監視映像とメタデータの映像およびフィルタ設定の映像を合成して図１５Ａに示す合成映像の表示信号ＶＳを生成して出力する。ここで、動体ＭＢが移動して、動体ＭＢの位置が予めユーザの設定した領域に近づいたことをフィルタ処理結果が示したとき、出力部３２３は表示切替を実施して、監視結果である注意報の出力を行う。動体ＭＢの位置は動体位置情報で判別できることから、例えば図１５Ｂに示すように、動体ＭＢが領域ＰＢに近づいたとき、動体ＭＢの位置に矩形状の点線表示である注意報ＨＷを表示する。また、動体ＭＢの位置が予めユーザの設定した領域内となったことをフィルタ処理結果が示したとき、出力部３２３は表示切替を実施して、監視結果である警報の出力を行う。例えば図１５Ｃに示すように、動体ＭＢが領域ＰＢに入ったとき、動体ＭＢの位置に矩形状の線表示である警報ＨＡを表示する。また、図１５Ｄに示すように、動体ＭＢが領域ＰＡに入ったとき、動体ＭＢの位置に矩形状の線表示である警報ＨＡを表示する。このように、監視結果である注意報ＨＷや警報ＨＡをグラフィカルに表示することで、表示信号ＶＳに基づく映像によって監視結果を容易かつ正しく認識することができる。
【０１１９】
また、出力部３２３は、温度や輝度および異常操作等に関するフィルタ処理結果が示されたとき、これらの情報に関する注意報や警報を文字や図形等で出力するものとしてもよい。
【０１２０】
次に、監視装置３０が再生モードに設定されている場合について説明する。メタデータフィルタ部３１３は、メタデータ再生部３２２から供給されたメタデータＤmpのフィルタ処理を行い、フィルタ処理結果ＦＪを出力部３２３に供給する。出力部３２３は、映像データ再生部３２０から供給された映像データＤvp、メタデータ再生部３２２から供給されたメタデータＤmp、メタデータフィルタ部３１３から供給されたフィルタ設定ＦＳに基づき、監視映像やメタデータおよびフィルタ設定のいずれか、あるいはこれらを合成して表示装置の画面上に表示するための表示信号ＶＳを生成する。また、出力部３２３は、メタデータフィルタ部３１３のフィルタ処理結果ＦＪに基づいて表示切替を行う。
【０１２１】
映像データ再生部３２０は、ユーザによって指示された位置から映像データの再生を行い、映像データ蓄積部３１６から読み出した映像データＤvpを出力部３２３に供給する。また、再生同期部３２１が設けられていることから、映像データＤvpに同期したメタデータがメタデータ再生部３２２によってメタデータ蓄積部３１７から読み出されて出力部３２３に供給される。
【０１２２】
出力部３２３は、再生した監視映像と再生したメタデータの映像およびフィルタ設定の映像を合成して表示信号ＶＳを生成して出力する。ここで、動体の位置が予めユーザの設定した領域に近づいたことや、設定した領域内であることをフィルタ処理結果が示しているときは、監視モードの場合と同様に、注意報や警報を出力する。
【０１２３】
また、異常操作が行われたか否かを判別できるように、ユーザがフィルタ設定を行った場合、メタデータフィルタ部３１３のフィルタ処理結果に基づき、異常操作が行われた位置で注意報や警報を出力させることもできる。さらに、ユーザが設定した文字情報等に基づいてメタデータのフィルタ処理を行うものとすれば、メタデータに該当する情報が含まれた位置で注意報や警報を出力させることもできる。
【０１２４】
このように、メタデータのフィルタ処理を行うものとすれば、監視対象の情報を変更したり監視対象の情報を増やす場合でも、フィルタ設定と、このフィルタ設定を用いたときのフィルタ処理結果に応じた切替指示を設定するだけで、種々の監視対象の情報を利用して多様な監視動作を容易に行うことができる。
【０１２５】
また、種々のフィルタ設定を設けておくことで、多種多様な通知を行うことができる。例えば、上述のように動体が予め設定した領域に近づいたときには注意報の出力を行い、領域に入ったときに警報を出力させることができるので、詳細な監視動作を容易に行うことができる。
【０１２６】
さらに、メタデータでは、マークアップ言語で監視対象の情報の記述を行っていることから、メタデータフィルタ部やメタデータ再生部は、マークアップ言語を読み取る機能を有すればよい。したがって、メタデータのフォーマット毎にメタデータフィルタ部やメタデータ再生部を設ける必要がないので、監視装置の構成が簡単となる。また、メタデータのフォーマットに依存することなく所望の監視対象の情報を再生したりフィルタ処理を行うことができるので、様々なメタデータを監視映像に同期させて再生することができる。
【０１２７】
また、監視装置３０では、監視装置３０が再生モードに設定されている場合、ユーザによって指示された位置から映像データの再生を映像データ再生部３２０で行い、メタデータ再生部３２２では、映像データＤvpに同期したメタデータを再生するものとしている。しかし、メタデータ蓄積部３１７には、監視対象に関する種々の情報が蓄積可能とされており、メタデータ再生部３２２では、蓄積されているメタデータの情報が再生可能とされていることから、ユーザによって指示された情報をメタデータ再生部３２２によって再生させて、映像データ再生部３２０では、再生されるメタデータの情報に同期した映像データを再生するようにしてもよい。この場合、メタデータ再生部３２２は、再生したメタデータの再生位置を再生同期部３２１に通知する。再生同期部３２１は、メタデータ再生部３２２から通知された再生位置と、映像データ再生部３２０で映像データ蓄積部３１６に蓄積されている映像データを再生するときの再生位置が同期するように、同期制御信号を映像データ再生部３２０に供給して、映像データ再生部３２０の動作を制御する。
【０１２８】
このようにすれば、ユーザは、映像データに対して再生位置を指定して監視映像の確認等を行うことができるだけでなく、メタデータの所望の情報を選択して再生させることで、この情報に同期した監視映像が自動的に再生されて、監視映像の確認を行うことが可能となる。また、所望の情報を選択して再生させることで、この再生される情報に基づいた注意報や警報を出力させることもできる。なお、監視モードや再生モードにおける注意報や警報の出力は、出力部によってグラフィカルに表示する場合に限られるものではなく、音声で注意報や警報を出力するものとしたり、発光素子等の表示デバイスを用いて注意報や警報を表示するものとしてもよい。
【０１２９】
ところで、フィルタ処理結果に基づいた動作切替は、監視装置３０だけでなく監視端末２０に対しても行うことができる。以下、フィルタ処理結果に基づいて監視端末２０の動作切替を行う場合を簡単に説明する。
【０１３０】
メタデータフィルタ部３１３は、メタデータ取得部３１２から供給されたメタデータＤmのフィルタ処理を行い、フィルタ処理結果ＦＪを切替指示部３１５に供給する。切替指示部３１５は、フィルタ処理結果ＦＪに基づいて、切替指示信号ＣＡを生成して監視端末２０に供給する。ここで、切替指示部３１５は、例えば監視映像のフレームレートを高くするように監視端末２０の動作を切り替える。このとき、各監視映像の時間間隔が短くなることから、動体の動きを詳細な時間間隔で監視することができる。また、動体が検出されていないときは、監視映像のフレームレートが低いので、監視端末２０から監視装置３０への映像データの供給回数が少なくなる。したがって、監視端末２０を複数用いた場合に、ネットワーク４０のトラフィックが増大して監視端末２０から監視装置３０への映像データの供給が遅延してしまうことを防止できる。また、切替指示部３１５は、圧縮率を低くすることで、監視映像の画質の劣化を少なくできるので、画質の良好な映像で動体の確認を行うことができる。また、動体が検出されていないときは、圧縮率が高いので、データ量が少ないことから、監視端末２０を複数用いた場合に、ネットワーク４０のトラフィックが増大して監視端末２０から監視装置３０への映像データの供給が遅延してしまうことを防止できる。
【０１３１】
監視映像が明るすぎる状態あるいは暗すぎる状態であることをフィルタ処理結果が示すとき、切替指示部３１５は、撮像動作切替部２２によって、レンズ部２１１や撮像部２１２あるいは撮像信号処理部２１３の動作を制御して、所望の明るさの監視映像が得られるように切替指示信号ＣＡを生成して監視端末２０に供給する。このように切替指示信号ＣＡを生成すれば、監視端末２０から供給される監視映像を自動的に適正な明るさとすることができる。
【０１３２】
異常操作が行われたことをフィルタ処理結果が示すとき、切替指示部３１５は、撮像動作切替部２２によって、レンズ部２１１の動作や撮像方向を制御して、異常操作が行われた方向の監視映像を得られるように切替指示信号ＣＡを生成して監視端末２０に供給する。このように切替指示信号ＣＡを生成すれば、監視端末２０を効率よく活用して監視に適した監視映像を得ることができる。
【０１３３】
以上のように、メタデータのフィルタ処理結果に基づいて監視端末２０の動作切替を行うことで、監視に適した監視映像を自動的に得ることができる。また、メタデータのフィルタ処理結果を用いることで、監視対象の情報を変更したり監視対象の情報を増やす場合でも、フィルタ設定とこのフィルタ設定を用いたときのフィルタ処理結果に応じた切替指示信号ＣＡの生成を行うだけで、変更後の監視対象の情報や追加した監視対象の情報に基づく最適な監視映像を自動的に得ることができる。
【図面の簡単な説明】
【０１３４】
【図１】監視システムの構成を示す図である。
【図２】監視端末の機能ブロック図である。
【図３】データ構造を示す図である。
【図４】監視装置の機能ブロック図である。
【図５】制御部の動作を示すフローチャートである。
【図６】映像データ取得部の動作を示すフローチャートである。
【図７】メタデータ取得部の動作を示すフローチャートである。
【図８】メタデータフィルタ部の動作を示すフローチャートである。
【図９】切替指示部の動作を示すフローチャートである。
【図１０】映像データ再生部の動作を示すフローチャートである。
【図１１】再生同期部の動作を示すフローチャートである。
【図１２】メタデータ再生部の動作を示すフローチャートである。
【図１３】出力部の動作を示すフローチャートである。
【図１４】監視映像とメタデータに基づく映像とフィルタ設定の映像を示す図である。
【図１５】出力部から出力される映像を示す図である。
【符号の説明】
【０１３５】
１０・・・監視システム、２０・・・監視端末、２１・・・映像データ生成部、２２・・・撮像動作切替部、２３・・・メタデータ生成部、３０・・・監視装置、４０・・・ネットワーク、２１１・・・レンズ部、２１２・・・撮像部、２１３・・・撮像信号処理部、２１４・・・データ処理部、３１１・・・映像データ取得部、３１２・・・メタデータ取得部、３１３・・・メタデータフィルタ部、３１４・・・フィルタ設定蓄積部、３１５・・・切替指示部、３１６・・・映像データ蓄積部、３１７・・・メタデータ蓄積部、３２０・・・映像データ再生部、３２１・・・再生同期部、３２２・・・メタデータ再生部、３２３・・・出力部、３２５・・・制御部、３２６・・・ユーザインタフェース部
【特許請求の範囲】
【請求項１】
監視端末から映像データを取得する映像データ取得部と、
前記監視端末から監視対象に関する情報を示すメタデータを取得するメタデータ取得部と、
フィルタ設定を蓄積したフィルタ設定蓄積部と、
前記フィルタ設定蓄積部に蓄積されているフィルタ設定を用いて前記メタデータのフィルタ処理を行うメタデータフィルタ部と、
前記メタデータフィルタ部でフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、監視結果の出力を行う出力部を有する
ことを特徴とする監視装置。
【請求項２】
前記出力部は、前記映像データ取得部で取得された映像データに基づく映像と、前記メタデータ取得部で取得されたメタデータに基づく映像と、前記メタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、前記監視結果を示す映像を出力する
ことを特徴とする請求項１記載の監視装置。
【請求項３】
前記映像データを蓄積する映像データ蓄積部と、
前記メタデータを蓄積するメタデータ蓄積部と、
前記映像データ蓄積部に蓄積されている映像データを再生する映像データ再生部と、
前記メタデータ蓄積部に蓄積されているメタデータを生成するメタデータ再生部と、
前記映像データと前記メタデータを共に再生するとき、前記映像データ再生部で再生される映像データに同期したメタデータを前記メタデータ再生部で再生させる再生同期部を有し、
前記メタデータフィルタ部では、前記フィルタ設定蓄積部に蓄積されているフィルタ設定を用いて、前記メタデータ再生部で再生されたメタデータのフィルタ処理を行うものとし、
前記出力部は、前記映像データ再生部で再生された映像データに基づく映像と、前記メタデータ再生部で再生されたメタデータに基づく映像と、前記メタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、前記監視結果を示す映像を出力する
ことを特徴とする請求項１記載の監視装置。
【請求項４】
前記映像データ取得部は、前記メタデータフィルタ部でフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、前記取得した映像データを前記映像データ蓄積部に蓄積させる
ことを特徴とする請求項３記載の監視装置。
【請求項５】
前記映像データ取得部と前記メタデータ取得部は、ネットワークを介して前記監視端末から前記映像データと前記メタデータを取得する
ことを特徴とする請求項１記載の監視装置。
【請求項６】
前記メタデータでは、監視対象に関する情報をマークアップ言語で記述した
ことを特徴とする請求項１記載の監視装置。
【請求項７】
前記監視対象に関する情報は、動体が検出されているか否かを示す動体検知情報、および／または検出された動体の位置を示す動体位置情報を有する
ことを特徴とする請求項１記載の監視装置。
【請求項８】
前記監視対象に関する情報は、前記監視端末で監視する領域の状態を示す情報を有することを特徴とする請求項１記載の監視装置。
【請求項９】
映像データを取得する映像データ取得工程と、
メタデータを取得するメタデータ取得工程と、
フィルタ設定を用いて前記メタデータのフィルタ処理を行うメタデータフィルタ工程と、
前記メタデータフィルタ工程でフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、監視結果の出力を行う出力工程を有する
ことを特徴とする監視方法。
【請求項１】
監視端末から映像データを取得する映像データ取得部と、
前記監視端末から監視対象に関する情報を示すメタデータを取得するメタデータ取得部と、
フィルタ設定を蓄積したフィルタ設定蓄積部と、
前記フィルタ設定蓄積部に蓄積されているフィルタ設定を用いて前記メタデータのフィルタ処理を行うメタデータフィルタ部と、
前記メタデータフィルタ部でフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、監視結果の出力を行う出力部を有する
ことを特徴とする監視装置。
【請求項２】
前記出力部は、前記映像データ取得部で取得された映像データに基づく映像と、前記メタデータ取得部で取得されたメタデータに基づく映像と、前記メタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、前記監視結果を示す映像を出力する
ことを特徴とする請求項１記載の監視装置。
【請求項３】
前記映像データを蓄積する映像データ蓄積部と、
前記メタデータを蓄積するメタデータ蓄積部と、
前記映像データ蓄積部に蓄積されている映像データを再生する映像データ再生部と、
前記メタデータ蓄積部に蓄積されているメタデータを生成するメタデータ再生部と、
前記映像データと前記メタデータを共に再生するとき、前記映像データ再生部で再生される映像データに同期したメタデータを前記メタデータ再生部で再生させる再生同期部を有し、
前記メタデータフィルタ部では、前記フィルタ設定蓄積部に蓄積されているフィルタ設定を用いて、前記メタデータ再生部で再生されたメタデータのフィルタ処理を行うものとし、
前記出力部は、前記映像データ再生部で再生された映像データに基づく映像と、前記メタデータ再生部で再生されたメタデータに基づく映像と、前記メタデータフィルタ部で用いたフィルタ設定を示す映像のいずれか、あるいは複数の映像を合成した映像を用いて、前記監視結果を示す映像を出力する
ことを特徴とする請求項１記載の監視装置。
【請求項４】
前記映像データ取得部は、前記メタデータフィルタ部でフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、前記取得した映像データを前記映像データ蓄積部に蓄積させる
ことを特徴とする請求項３記載の監視装置。
【請求項５】
前記映像データ取得部と前記メタデータ取得部は、ネットワークを介して前記監視端末から前記映像データと前記メタデータを取得する
ことを特徴とする請求項１記載の監視装置。
【請求項６】
前記メタデータでは、監視対象に関する情報をマークアップ言語で記述した
ことを特徴とする請求項１記載の監視装置。
【請求項７】
前記監視対象に関する情報は、動体が検出されているか否かを示す動体検知情報、および／または検出された動体の位置を示す動体位置情報を有する
ことを特徴とする請求項１記載の監視装置。
【請求項８】
前記監視対象に関する情報は、前記監視端末で監視する領域の状態を示す情報を有することを特徴とする請求項１記載の監視装置。
【請求項９】
映像データを取得する映像データ取得工程と、
メタデータを取得するメタデータ取得工程と、
フィルタ設定を用いて前記メタデータのフィルタ処理を行うメタデータフィルタ工程と、
前記メタデータフィルタ工程でフィルタ処理を行うことにより得られたフィルタ処理結果に基づいて、監視結果の出力を行う出力工程を有する
ことを特徴とする監視方法。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図１２】
【図１３】
【図１４】
【図１５】
【公開番号】特開２００７−２８１６１５（Ｐ２００７−２８１６１５Ａ）
【公開日】平成１９年１０月２５日（２００７．１０．２５）
【国際特許分類】
【出願番号】特願２００６−１０２２９１（Ｐ２００６−１０２２９１）
【出願日】平成１８年４月３日（２００６．４．３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成１９年１０月２５日（２００７．１０．２５）
【国際特許分類】
【出願日】平成１８年４月３日（２００６．４．３）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]