監視装置
【課題】 撮影範囲を撮像することにより生成された画像を監視する際に、監視員の労力の負担を軽減しつつ、監視の利便性を向上させる。
【解決手段】 撮影範囲を撮像することにより生成された画像を監視する際に、生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を順次検出し、検出した輝度レベルの差異を、予め設定された閾値と比較し、また輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較結果に応じて表示すべき画像につき所定の情報を付加する。また表示する何れか一の画像に対して処理動作が実行された場合には、当該実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させる。
【解決手段】 撮影範囲を撮像することにより生成された画像を監視する際に、生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を順次検出し、検出した輝度レベルの差異を、予め設定された閾値と比較し、また輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較結果に応じて表示すべき画像につき所定の情報を付加する。また表示する何れか一の画像に対して処理動作が実行された場合には、当該実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させる。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影範囲を撮像することにより生成された画像を監視する監視装置及び方法、プログラム並びに記録媒体に関する。
【背景技術】
【０００２】
近年、一つの建物の中に複数のスクリーンを設置したいわゆるシネマコンプレックスと呼ばれる複合映画館が各地でオープンしている。この複合映画館において観客が持参した入場券を確認する担当者は、通常、建物の入口付近に配置されているが、各スクリーンが設置された映写室毎には配置されていない場合が多い。このため、館内に入場した観客による映写室間の自由な出入りを許すことになり、特に映写室毎に別途入場料金を課す料金体系を採用する複合映画館において極めて不合理となる。
【０００３】
従って各複合映画館では、入場料金を払うことなく映写室間を自由に出入りする観客を随時監視すべく監視員の増員等を図らんとしてきたが、コストパフォーマンス性が悪かった。
【０００４】
また各複合映画館では、各座席に設置されたスイッチを介して、着席状況の自動的な判別を試みようとしてきた。この方法では、上記スイッチを、押圧入力により電気信号を生成する圧電素子として構成し、観客の着席に応じた押圧入力により生成された電気信号を後段のシステムで検出することにより着席状況を自動的に判別する。しかしながら、各映写室の座席数に応じたスイッチを購入し、これを座席毎に設置する必要があるため、コストや労力の削減を図ることができなかった。また圧電素子としてのスイッチの信頼性にばらつきがあるため、着席状況を精度よく判別することができなかった。
【０００５】
このため、信頼性が高くコストパフォーマンス性にも優れた監視を実現するために、カメラの撮影方向を順にシフトさせながら撮影対象を撮影し、これらを合成してパノラマ画像を得ることにより、広範囲の状況を監視することができるモニタリングシステムが提案されている（例えば、特許文献１参照。）。また、設置された複数の監視用ビデオカメラから監視映像を集めてビデオテープ等の記録媒体に記録し、監視を行うことを可能とする集中監視記録システムも提案されている（例えば、特許文献２参照。）。
【０００６】
【特許文献１】特開平１０−１０８１６３号公報
【特許文献２】特開２０００−２４３０６２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、上述の如く記録媒体に記録された画像を利用して、撮影範囲における何らかの変化を検出する場合に、監視員は、１スキャン毎に刻々と入力される監視画像の状況を隅々まで観察しなければならなかった。特に監視員は、細かい画像の変化や、微小な対象物の出現等につき常に識別しなければならず、過大な労力や時間を必要とし、さらには、かかる監視員の眼に依存するシステムであるが故に、かかる状況変化の見落としが生じる危険性もあった。
【０００８】
また、撮影範囲を撮像することにより生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある画像との間で輝度レベルの差異を比較し、かかる輝度レベルにつき差異が生じた場合に、撮影範囲に何らかの変化が生じたものとして監視員に注意を喚起する監視方法も提案されている。この監視方法によれば、注意喚起された場合に初めてその詳細につき画像を介して確認すれば足りるため、監視労力を大幅に低減させることができる。
【０００９】
しかしながら、この監視方法では、図１１に示すように、現在表示されている画像において、輝度レベルの差異が検出された枠１０１につきマーキングして表示することになる。枠１０１が設定された領域につき、先に撮像された同一撮影方向上にある画像から確認するためには、現在表示されている画像からの切り替え処理を実行する必要があるところ、ユーザの労力の軽減を図ることができない。また両画像を並べてこれを直接的に対比する対比監視ができないために、ユーザ自身がかかる差異の原因を効率よく識別することができないという問題点もあった。
【００１０】
さらにこれら両画像を並べて対比監視するときに、画像の表示位置や表示倍率等を変更させて画像内容の確認を望む場合もある。かかる場合において、一方の画像に対して施された表示位置や表示倍率等を変更するための処理動作を、他方の画像に反映させることにより、監視の利便性の向上を図る必要もある。
【００１１】
そこで、本発明は、上述した問題点に鑑みて案出されたものであり、その目的とするところは、撮影範囲を撮像することにより生成された画像を監視する際に、監視員の労力の負担を軽減しつつ、監視の利便性を向上させた監視装置及び方法、プログラム、記録媒体並びに監視システムを提供することにある。
【課題を解決するための手段】
【００１２】
本発明に係る監視装置は、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視する監視装置において、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出手段と、差異検出手段により検出された輝度レベルの差異を予め設定された閾値と比較する比較手段と、差異検出手段により輝度レベルの差異が検出された２枚以上の画像を同一画面上に並べて表示するとともに比較手段による比較結果に応じて表示すべき上記画像につき差異検出枠毎に所定の情報を付加する表示手段と、表示手段により表示されている何れか一の画像に対して処理動作を実行するための操作手段とを備え、表示手段は、上記操作手段により実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させる。
【００１３】
本発明に係る監視方法は、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視する監視方法において、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、差異検出ステップにおいて検出した輝度レベルの差異を予め設定された閾値と比較する比較ステップと、差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに比較ステップにおける比較結果に応じて表示すべき画像につき差異検出枠毎に所定の情報を付加する表示ステップと、表示ステップにおいて表示する何れか一の画像に対して処理動作を実行させるための操作ステップとを有し、表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させる。
【００１４】
本発明に係るプログラムは、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムにおいて、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、差異検出ステップにおいて検出した輝度レベルの差異を予め設定された閾値と比較する比較ステップと、差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに比較ステップにおける比較結果に応じて表示すべき画像につき差異検出枠毎に所定の情報を付加する表示ステップと、表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、表示ステップでは、操作ステップにおいて実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させる。
【００１５】
本発明に係る記録媒体は、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムが記録された記録媒体において、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、差異検出ステップにおいて検出した輝度レベルの差異を予め設定された閾値と比較する比較ステップと、差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに比較ステップにおける比較結果に応じて表示すべき画像につき差異検出枠毎に所定の情報を付加する表示ステップと、表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、表示ステップでは、操作ステップにおいて実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させるためのプログラムが記録されている。
【発明の効果】
【００１６】
本発明は、異なる時刻に撮影された同一撮影方向にある複数の画像を並べてこれを直接的に対比するいわゆる対比監視を行なうことができるため、従来と比較して表示画像を随時切り換える必要がなくなり、ユーザの労力の軽減を図ることができる。また、この対比監視を可能とする本発明では、ユーザ自身が輝度レベルの差異の原因を効率よく識別することができる。さらに、本発明では、画面上において表示した各画像につき、一方の画像に対して施された処理動作を、他方の画像に反映させることにより、監視の利便性の向上を図ることができる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明を実施するための最良の形態について図面を参照しながら詳細に説明する。本発明を適用した監視システム１は、例えば図１に示すように、被写体を撮像して画像信号を生成するカメラユニット２と、上記画像信号が伝送される監視装置５と、監視装置５に接続されるディスプレイ６と、複数のユーザがアプリケーションを実行するための端末装置９と、端末装置９に接続される端末ディスプレイ１０と、カメラユニット２並びに監視装置５,端末装置９間で双方向通信を実現するためのネットワーク８とを備えている。
【００１８】
この監視システム１におけるカメラユニット２は、図２に示すように、パンチルタ部３と、カメラ部４とが一体的に構成されてなる。パンチルタ部３は、例えばパン、チルトの２軸につき撮影方向を自在に変更するための回転台として構成される。
【００１９】
カメラ部４は、パンチルタ部３を構成する回転台上に配設され、監視装置５による制御に応じて、撮影方向を水平方向或いは垂直方向に調整しつつ、被写体を撮像する。またこのカメラ部４は、監視装置５による制御に応じて、撮影画角を順次変更することにより、撮影倍率を拡大又は縮小して被写体を撮像する。このカメラ部４を一の監視装置５に対して複数設置することにより、同一の被写体につき、互いに異なる撮影角度で撮像することができ、多面的な画像情報を得ることも可能となる。
【００２０】
監視装置５は、図２に示すように、カメラユニット２より伝送された画像信号に所定の処理を施す画像入出力部１３と、この画像入出力部１３に接続され、上記画像信号に基づく動画像を生成する演算処理部１５と、演算処理部１５に接続され上記画像信号を記録するサーバ５３と、ユーザが監視装置５を制御するための操作部１６とを備えている。
【００２１】
この監視装置５は、例えばパーソナルコンピュータ（ＰＣ）等の電子機器により構成され、カメラユニット２から伝送される画像信号を記録し、また記録した画像信号につきディスプレイ６を介してユーザに表示する。またこの監視装置５は、ユーザから所望の画像領域又は画像位置が指定された場合には、記録した画像信号の中から最適なものを選択してこれを表示するように制御する。この監視装置５は、このネットワーク８全体を制御するためのいわゆる中央制御装置としての役割も担い、他の端末装置９からの要求に応じて画像を送信する。なお監視装置５の構成の詳細については、後述する。
【００２２】
ネットワーク８は、例えば監視装置５と電話回線を介して接続されるインターネット網を始め、ＴＡ／モデムと接続されるＩＳＤＮ（Integrated Services Digital Network）／Ｂ（broadband）−ＩＳＤＮ等のように、情報の双方向送受信を可能とした公衆通信網である。ちなみにこの監視システム１を、一定の狭いエリア内で運用する場合には、このネットワーク８を、ＬＡＮ（Local Area Network）で構成してもよい。さらにこのネットワーク８は、静止画像に加えてＭＰＥＧ画像をも送信できるようにしてもよい。かかる場合には、インターネットプロトコル（ＩＰ）に基づき、ＭＰＥＧデータがある一つのチャネルから継続的に送信され、静止画像データは別のチャネルから一定時間毎に送信されることになる。
【００２３】
端末装置９は、各家庭や企業等に待機するユーザがネットワーク８を介して監視装置５から画像を取得し、所望の処理を実行するためのＰＣである。複数の端末装置９をネットワーク８に接続することにより、複数のユーザに対してこの監視システム１のアプリケーションを同時に提供することが可能となる。この端末装置９は、監視装置５から取得した画像を、端末ディスプレイ１０に対して表示する。またこの端末装置９は、ユーザによる指定操作に応じて要求信号を生成し、これを監視装置５に対して送信する。なお端末装置９のブロック構成については、後述する監視装置５の構成を引用し、説明を省略する。
【００２４】
次に、本発明を適用した監視システム１におけるカメラユニット２,監視装置５について詳細に説明する。
【００２５】
図３は、カメラユニット２,監視装置５の詳細な構成を示している。この図２では、共通のコントローラバス２１に対して、カメラユニット２並びに監視装置５の各構成要素が接続されている。
【００２６】
カメラユニット２を構成するパンチルタ部３は、撮像方向を変更するための回転台を制御するTilt部３ａ、Pan部３ｂとを有する。また、カメラユニット２を構成するカメラ部４は、主としてレンズ部２２の画角を変更するためのレンズ制御部２３と、レンズ部２２の光軸に直交する位置に配設される撮像部２４と、撮像部２４により生成された画像信号を画像入出力部１３へ送信するためのＩＥＥＥ(Institute of Electrical and Electronics Engineers)１３９４インターフェース２５と、カメラユニット２の現在位置を検出するためのＧＰＳ(Global Positioning System)受信部２８と、ＧＰＳ受信部２８に装着されるメタデータ生成部２９とを備えている。ちなみに、ＩＥＥＥ１３９４インターフェース２５は、イーサネット（登録商標）に代替してもよい。
【００２７】
また画像入出力部１３は、ＩＥＥＥ１３９４インターフェース２５に接続されるバッファメモリ５１と、バッファメモリ５１に接続されるエンコーダ５２とを備えている。
【００２８】
また演算処理部１５は、サーバ５３から読み出された画像を圧縮するための画像圧縮部５４と、サーバ５３及び画像圧縮部５４に接続され、ディスプレイ６上に表示する画像を作り出すグラフィックコントローラ５５と、コントローラバス２１を介して各部を制御するためのＣＰＵ５６と、Ｉ／Ｏポート５８にそれぞれ接続されるメモリカード６１並びに時計６２とを備えている。
【００２９】
また操作部１６は、ディスプレイ６上に表示されている画像からユーザが所望の画像領域、画像位置を指定するためのキーボード５９並びにマウス６０を備えている。
【００３０】
Tilt部３ａ並びにPan部３ｂは、ＣＰＵ５６からの駆動信号に基づき、回転台の駆動源として構成されているステッピングモータを回転させる。これにより回転台上に載置されてなるカメラ部４の撮影方向を水平方向、或いは垂直方向に変更することができる。
【００３１】
レンズ制御部２３は、ＣＰＵ５６からの駆動信号に基づき、レンズ部２２に対して自動絞り制御動作や自動焦点制御動作を実行する。またこのレンズ制御部２３は、かかる駆動信号に基づき、被写体に対する撮影画角を変更する。これにより、カメラ部４は、撮影倍率を順次調整して被写体を撮像することも可能となる。
【００３２】
撮像部２４は、例えばＣＣＤ（Charge Coupled Device ）等の固体撮像素子により構成され、レンズ部２２を介して入射される被写体像を撮像面上に結像させ、光電変換により画像信号を生成し、これをＩＥＥＥ１３９４インターフェース２５へ送信する。
【００３３】
ＧＰＳ受信部２８は、ＧＰＳシステムにより送出される信号に基づき、カメラユニット２の設置場所や撮影方向を検出する。このＧＰＳ受信部２８を設けることにより、特に複数のカメラユニット２を設置する場合において、双方の撮影方向を連動して制御することが可能となる。ＧＰＳ受信部２８からの出力信号は、メタデータ生成部２９に供給され、ＧＰＳによる測位結果に基づく、緯度、経度、方位、高度等の位置情報、並びに時刻や各種パラメータ等からなるメタデータが生成される。メタデータ生成部２９は、この生成した位置情報やメタデータをエンコーダ５２へ供給する。なお本発明では、このＧＰＳ受信部２８、メタデータ生成部２９の構成を省略してもよい。
【００３４】
バッファメモリ５１は、ＣＰＵ５６からの制御信号に基づき、ＩＥＥＥ１３９４インターフェース２５から供給される画像信号を一時的に格納する。このバッファメモリ５１において一時的に格納された画像信号は、エンコーダ５２に供給され、例えばＪＰＥＧ（Joint Photographic Experts Group）等の規格に基づいて圧縮符号化される。ちなみに、このエンコーダ５２は、圧縮符号化する画像信号に対して、メタデータ生成部２９から供給される位置情報やメタデータを付加してもよい。エンコーダ５２は、圧縮符号化した画像信号をサーバ５３或いは画像圧縮部５４へ出力する。なお供給される画像信号につき、圧縮符号化を行わない場合には、このエンコーダ５２における処理は省略される。
【００３５】
サーバ５３は、エンコーダ５２から出力される画像信号を位置情報やメタデータと関連付けて順次記録する。ちなみに、このサーバ５３は、例えばハードディスクや、着脱自在なディスク状記録媒体に代替してもよい。サーバ５３に記録された画像信号は、ＣＰＵ５６による制御に基づき、画像圧縮部５４やグラフィックコントローラ５５へ読み出される。なおサーバ５３に記録される画像信号をメモリカード６１へ記録するように制御することにより、ユーザは、かかる撮像した画像を他のＰＣへ移し換えることも可能となる。また、このサーバ５３に記録されている画像信号を上述した図示しないネットワークサーバに記録するように制御することにより、サーバ５３を図示しないネットワークサーバに代替することも可能となる。
【００３６】
画像圧縮部５４は、サーバ５３から読み出したＪＰＥＧ形式の画像信号につき、それぞれ圧縮画像又はサムネイル画像を生成する。また、この画像圧縮部５４は、ＣＰＵ５６による制御に従い、サーバ５３に記録されている画像を読み出して、動画像を生成する。ちなみにこの動画像を生成する際の圧縮方法としては、例えばＭＰＥＧ、Ｍｏｔｉｏｎ−ＪＰＥＧ、Ｍｏｔｉｏｎ−ＪＰＥＧ２０００等に基づき実行してもよい。
【００３７】
グラフィックコントローラ５５は、サーバ５３から読み出した画像信号、又は画像圧縮部５４から出力される画像信号に基づき、ディスプレイ６への絵画処理を実行する。また、このグラフィックコントローラ５５は、ＣＰＵ５６による制御に基づき、ディスプレイ６におけるコントラスト、輝度の制御を実行する。
【００３８】
ＣＰＵ５６は、ユーザによりキーボード５９やマウス６０を介して画像領域、画像位置が指定された場合に、パンチルタ部３やレンズ制御部２３を駆動するための駆動信号や、監視装置５内の各部を制御するための制御信号を、コントローラバス２１を介して送信する。また、このＣＰＵ５６は、端末装置９から所定の要求信号を受けて、サーバ５３に記録されている最適な静止画像、動画像、或いは各種情報を選択し、これを当該端末装置９へ送信するように制御する。
【００３９】
次に本発明を適用した監視システム１における撮像動作について説明をする。
【００４０】
図４は、カメラユニット２により、黒枠で示される撮影範囲内を撮影画角ｕで撮像する場合について示している。撮影範囲を撮影画角ｕで全て撮像するためには、撮影方向を水平方向又は垂直方向へ順にシフトさせて撮像する必要がある。仮に撮影範囲のサイズが、任意の撮影画角ｕで撮像することにより得られるフレーム（以下、単位画像という。）のサイズのｉ×ｊ倍で表せるときには、少なくともｉ×ｊ通りの撮影方向を設定する必要がある。この撮影画角ｕで撮像したｉ×ｊ個の単位画像を貼り合わせることにより撮影範囲全体を表した全体画像を合成することができる。
【００４１】
ここで、撮影範囲の各単位画像の座標（Ｍ，Ｎ）を、水平方向につき、左端から順に１、２、・・Ｍ・、ｉとし、垂直方向につき上端から順に１、２、・・Ｎ・、ｊとしたとき、ＣＰＵ５６は、Tilt部３ａ並びにPan部３ｂに対して駆動信号を送信することにより、カメラ部４の撮影方向を、先ず左上に位置する座標（１，１）に合わせて撮像を実行させる。この座標（１，１）について撮像することにより生成された単位画像に基づく画像信号は、バッファメモリ５１に一時的に格納され、エンコーダ５２において、ＪＰＥＧ規格に基づいて圧縮符号化される。そしてこの画像信号は、ＧＰＳ２８から送信される撮影方向等を示す位置情報やメタデータが同時に付加され、サーバ５３に記録される。
【００４２】
同様にＣＰＵ５６は、Tilt部３ａ並びにPan部３ｂに対して駆動信号を送信することにより、カメラ部４の撮影方向を、右側に１画枠分シフトさせて座標（２，１）に合わせて撮像を実行する。この座標（２，１）について撮像することにより生成された画像信号も同様にサーバ５３へ記録される。ＣＰＵ５６による制御に基づき、カメラ部４は、撮影方向を座標（３，１）、（４，１）・・（ｉ，１）と水平方向へ順次変更させて撮像を実行する。
【００４３】
カメラ部４は、１列目の撮像を終了させた後、ＣＰＵ５６による制御に基づき、撮影方向を２列目の座標（１，２）に調整して撮像を実行し、その後、水平方向へ順次シフトさせながら撮像を実行する。かかる動作を繰り返して座標（ｉ，ｊ）まで撮像を終了させた時、サーバ５３は、座標毎に撮像したｉ×ｊ個の単位画像に基づく画像信号が記録されている状態になる。
【００４４】
ちなみに、このサーバ５３に記録されている各単位画像に基づく画像信号は、画像圧縮部５４により順次読み出されて、ディスプレイ６の表示画面のサイズに適合するように縮小される。この縮小された各単位画像は、グラフィックコントローラ１５を経てディスプレイ６に表示される。サーバ５３に記録されたｉ×ｊ個の単位画像を全てディスプレイ６に表示させることにより、１枚のパノラマ状の全体画像（パノラマ画像）が合成されることになる。上述の撮像動作を一定の間隔で実行することにより、撮影範囲の最新の状況を示す全体画像を取得することが可能となる。
【００４５】
図５は、撮像したｉ×ｊ個の単位画像を貼り合わせることにより合成した全体画像を、ディスプレイ６の全体画像表示部７０に表示する例を示している。なお、この監視装置５は、全体画像表示部７０に対して、全体画像を構成する各単位画像間の境界を表示させてもよいし、シームレスな全体画像のみを表示させてもよい。また監視装置５は、パノラマ状の全体画像の代替として、撮影範囲全体を捉えることができる撮影画角で撮影した１枚の全体画像を、この全体画像表示部７０に表示させてもよい。
【００４６】
ちなみに表示画面４５には、単位画像を拡大した拡大画像を表示するための拡大画像表示部７１がさらに設けられている。この拡大画像表示部７１は、全体画像表示部７０に表示される全体画像を構成する単位画像のうち、ユーザにより指定された一の単位画像を拡大して表示してもよいし、またかかる一の単位画像の撮影方向につき、動画を順次表示してもよい。これによりユーザは、指定した単位画像における撮影方向の状況につき、リアルタイムに確認することもできる。
【００４７】
ユーザは、全体画像表示部７０や拡大画像表示部７１に対して、キーボード５９やマウス６０を用いて、所望の画像領域、画像位置を指定することができる。なお、各表示部７０,７１には、マウス６０等の動きに連動させて上述の指定操作を実行するための照準線やポインタをさらに表示させてもよい。
【００４８】
また表示画面４５上においてマウス６０を介した入力動作を実行することにより、拡大画像表示部７１に表示されている単位画像につき撮影倍率を拡大又は縮小させ、カメラ部４の撮影方向を水平、垂直方向において調整するための撮影方向制御、各種モードの設定を行うことができる。ちなみに、全体画像表示部７０において表示される全体画像の履歴は、履歴表示部８１を介して表示され、全体画像表示部７０に表示される全体画像の濃淡については、濃淡表示部８２を介して表示される。また拡大画像表示部７１に表示されている単位画像につき変更された撮影倍率は、倍率表示部８３を介して表示される。
【００４９】
また、この表示画面４５上に表示されている差異検出ボタン８４がマウス６０を介してクリックされると、生成された全体画像を構成する一の単位画像と、当該単位画像よりも先に撮像された同一撮影方向上の単位画像との間で輝度レベルの差異が検出される。
【００５０】
この差異検出は、サーバ５３に記録されている単位画像から構成される全体画像につき、基準となる全体画像との間で輝度レベルを比較することにより実行する。ここで画像上の差異を検出する全体画像を比較全体画像といい、基準となる全体画像を基準全体画像という。
【００５１】
図６(a)に示すように、基準全体画像を全体画像ａ１とした場合において、比較全体画像としての全体画像ａ２につき画像上に生じた差異を検出する場合には、全体画像ａ２を構成する単位画像と、全体画像ａ１を構成する単位画像との間で輝度レベルを比較する。この輝度レベルの比較は、図６(a)に示すように、同一座標（１，１）、（２，１）、（３，１）、・・・、（Ｍ，Ｎ）にある単位画像間で、換言すれば同一撮影方向にある単位画像間で実行する。これにより、基準全体画像に対する比較全体画像の輝度レベルの変化を、各撮影方向に応じて検出することができる。
【００５２】
ＣＰＵ５６は、比較全体画像（全体画像ａ２）と基準全体画像（全体画像ａ１）との間で、例えば座標（Ｍ，Ｎ）にある単位画像の輝度レベルを比較する場合には、先ず、これら二つの単位画像をサーバ５３から読み出す。次にＣＰＵ５６は、例えば図６(b)に示すように、読み出した二つの単位画像間において同一位置にある各画素(ｍ,ｎ)につき輝度レベルを比較する。この輝度レベルの比較は、同一位置にある画素(ｍ,ｎ)につき、輝度レベルの差分を求めるようにしてもよい。ＣＰＵ５６は、読み出した単位画像間の輝度レベルの差異を、各画素につき求めた輝度レベルの差分値を介して検出することができる。ちなみに、この各画素間の輝度レベルの比較は、単位画像を構成する全ての画素につき実行してもよいし、単位画像を構成する一部の画素のみに対して実行するようにしてもよい。
【００５３】
ちなみに、本発明では、比較全体画像を構成する一部の単位画像のみについて、上述の如く輝度レベルを比較してもよい。このときユーザは、マウス６０等を用いて、所望の単位画像を指定することにより、かかる指定された単位画像のみにつき輝度レベルの差異を検出することが可能となる。
【００５４】
なお、次のタイミングにおいてサーバ５３に全体画像ａ３を構成する単位画像が記録された場合には、当該全体画像ａ３が比較全体画像となり、基準全体画像としての全体画像ａ２の間で、同一撮影方向における単位画像間で差異が検出されることになる。さらに次のタイミングにおいて、サーバ５３に全体画像ａ４を構成する単位画像が記録された場合には、当該全体画像ａ４が比較全体画像となり、基準全体画像としての全体画像ａ３の間で、同一撮影方向における単位画像間で差異が検出されることになる。
【００５５】
上述の如く輝度レベルの差異が比較されるに基準全体画像と比較全体画像は、ディスプレイ６の画面９０上において、図７に示すように並べて表示してもよい。この画面９０では、より以前に撮像された基準全体画像を表示するための基準画像表示部９１と、より直近に撮像された比較全体画像を表示するための比較全体画像表示部９２と、基準全体画像表示部９１に表示されている基準全体画像を水平方向にスクロールさせるための水平スクロールバー９３と、この基準全体画像を垂直方向へスクロールさせるための垂直スクロールバー９４と、比較全体画像表示部９２に表示されている比較全体画像を水平方向にスクロールさせるための水平スクロールバー９５と、比較全体画像を垂直方向へスクロールさせるための垂直スクロールバー９６と、各画像を拡大又は縮小させるためのズーム指定部９７と、表示切換指定部９９により構成されている。
【００５６】
また、この図７に示す例において、空席状態の基準全体画像並びに比較全体画像の同一位置に対して差異検出枠（ＩＤ−１〜ＩＤ−４）が設定されている。この差異検出枠については任意に設定することができ、例えば指定席についてのみ着席状況を監視する場合には、かかる指定席のみに差異検出枠を設定するようにしてもよい。
【００５７】
表示画面４５上に表示されている差異検出ボタン８４がマウス６０を介してクリックされると、基準全体画像と比較全体画像との間で、かかる差異検出枠を構成する画素における輝度レベルの差異が抽出される。求められた輝度レベルの差異は、予め設定された閾値と比較され、その閾値を超える場合にその差異検出枠において輝度レベルの差異が生じたものと判断し、図７に示すように色付き表示することで、ユーザに対して注意を促す。ちなみに、輝度レベルの差異が生じた差異検出枠については、所定の情報が付加されていれば、色付き表示を行う場合に限定されるものではない。
【００５８】
ユーザは、ディスプレイ６上に表示されている色付きの差異検出枠を視認することにより、差異が生じた箇所を容易に識別することができる。また、基準全体画像並びに比較全体画像は、同一画面上において互いに並べて表示されるため、差異が検出された画像領域につき、輝度レベルが具体的にどのように変化したのかをユーザ自身が容易に識別することができ、また両画像間において何らかの動きが生じた結果、輝度レベルが変化した場合には、かかる動きの対象物や要因を効率よく解析することができる。
【００５９】
即ち、本発明を適用した監視システム１では、異なる時刻に撮影された同一撮影方向にある複数の画像を並べてこれを直接的に対比するいわゆる対比監視を行なうことができるため、従来と比較して表示画像を随時切り換える必要がなくなり、ユーザの労力の軽減を図ることができる。また、この対比監視を可能とする監視システム１では、ユーザ自身が輝度レベルの差異の原因を効率よく識別することができる。
【００６０】
なお、この図７に示す例において、マウス６０を介して水平スクロールバー９３が操作され、基準全体画像表示部９１に表示されている基準全体画像が水平方向へスクロール表示されるが、かかるスクロール表示を比較全体画像表示部９５に表示されている比較全体画像に反映させるようにしてもよい。かかる場合には、マウス６０を介して水平スクロールバー９３の位置が変更されることになるが、かかる変更後の水平スクロールバー９３の位置を取得し、これを水平スクロールバー９５の位置として設定し直す。これにより、比較全体画像の水平方向の動きを、ユーザによりなされた基準全体画像の水平方向への動きに同期させることができ、違和感も解消することができる。
【００６１】
またマウス６０を介して水平スクロールバー９５が操作された場合には、これを水平スクロールバー９３の動きに反映させるようにしてもよい。これにより、ユーザにより指示された比較全体画像の動きを、基準全体画像の動きに反映させることができる。
【００６２】
同様に、マウス６０を介して垂直スクロールバー９４が操作され、基準全体画像表示部９１に表示されている基準全体画像が垂直方向へスクロール表示されるが、かかるスクロール表示を比較全体画像表示部９５に表示されている比較全体画像に反映させるようにしてもよい。かかる場合には、マウス６０を介して垂直スクロールバー９４の位置が変更されることになるが、かかる変更後の垂直スクロールバー９４の位置を取得し、これを垂直スクロールバー９６の位置として設定し直す。これにより、比較全体画像の垂直方向の動きを、ユーザによりなされた基準全体画像の垂直方向への動きに同期させることができる。
【００６３】
またマウス６０を介して垂直スクロールバー９６が操作された場合には、これを垂直スクロールバー９４の動きに反映させるようにしてもよい。
【００６４】
このように、本発明を適用した監視システム１では、同一画面上に並べて表示した各画像をスクロールさせるためのスクロールバー９３〜９６を表示し、マウス６０により実行された一の画像に対するスクロールバー９３〜９６の処理動作に応じて、同一画面上に並べて表示した他の画像をスクロールさせる。これにより、一方の画像につき所望の画像位置へスクロール表示させた場合に、これを他方の画像に反映させることができるため、監視の利便性を向上させることができる。
【００６５】
また、この図７に示す例において、画像の表示倍率の拡大又は縮小につき、ズーム指定部９７を介して指定された場合には、これに応じて、同一画面上に並べて表示した基準全体画像並びに比較全体画像の表示倍率を同時に変更するようにしてもよい。ズーム指定部９７におけるスライドスイッチ９８の上下方向への操作を受け付けた場合に、これに応じた画像のズーム処理を、基準全体画像表示部９１並びに比較全体画像表示部９２に表示されている各全体画像につき同時に実行する。これにより、監視の利便性をさらに向上させることができる。
【００６６】
また、この図７に示す例において、基準全体画像表示部９１又は比較全体画像表示部９２に表示されている何れかの全体画像につき、マウス６０を介して表示位置がピンポイントで指定された場合には、同一画面上に並べて表示した各全体画像を当該指定された表示位置へ移動させるようにしてもよい。かかる場合には、基準全体画像表示部９１又は比較全体画像表示部９２の何れかにつき指定された表示位置を識別し、これを他の双方の全体画像の表示位置となるように移動させることで、監視の利便性を向上させることができる。
【００６７】
このように、本発明を適用した監視システム１では、画面９０上において基準全体画像と比較全体画像につき、表示位置や表示倍率等を変更させて画像内容の確認する場合に、一方の画像に対して施された表示位置や表示倍率等を変更するための処理動作を、他方の画像に反映させることにより、いわば両画像間でなされる処理動作を互いに連動させることができ、監視の利便性の向上を図ることができる。
【００６８】
ちなみに、表示切換部９９をマウス６０を介してクリックすることにより、比較全体画像表示部９２に表示されている比較全体画像のみを画面９０上に拡大表示させることができ、詳細を確認することもできる。
【００６９】
なお、この監視システム１において、各画像に対して施される処理動作は上述した実施の形態に限定されるものではなく、他の如何なる画像に対する処理動作も含まれる。
【００７０】
また、上述した実施の形態では、あくまで基準全体画像と比較全体画像の２枚を画面９０上に表示する例につき説明をしたが、これに限定されるものではなく、３枚以上の画像を表示するようにしてもよい。かかる場合には、各タイミングにつき取得された全体画像を時系列で表示するようしてもよい。
【００７１】
また、この監視システム１は、パノラマ状の全体画像を構成する各単位画像間で輝度レベルの差異を比較する場合に限定するものではない。即ち、この監視システム１は、撮像された一枚の画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を検出し、その輝度レベルの差異が検出された２枚以上の画像を同一画面上に並べて表示するものであってもよい。換言すれば、上述した同一撮影方向にある単位画像のみを画面９０上に並べて表示し、何れか一の単位画像に対して実行された処理動作を、他の単位画像に反映させるものであってもよい。これにより、単位画像のみに焦点をあてて監視を行なう場合においても、その利便性を向上させることが可能となる。
【００７２】
また、本発明は、上述した処理をコンピュータに実行させるためのプログラムや、かかるプログラムが記録された記録媒体に適用してもよいことは勿論である。
【００７３】
また、本発明では、図８に示すように、輝度レベルの差異の検出結果を上記差異検出枠毎に比較全体画像表示部９２に表示してもよい。かかる場合において、差異検出枠（ＩＤ−４）における差異の検出結果を枠１００内に示すようにしてもよい。ユーザは、かかる比較全体画像表示部９２を枠１００とともに視認することにより、差異が検出された色付きの差異検出枠については、輝度レベルが具体的にどの程度変化したか容易に識別することができる。また差異が検出されなかった差異検出枠についても、その枠１００において検出結果を表示させることにより、色付きの差異検出枠の検出結果との間で容易に比較することもできる。
【００７４】
ちなみに、この比較全体画像表示部９２では、マウス６０によるポインタが合わせられた差異検出枠につき、検出結果が書き込まれた枠１００を順次表示させるようにしてもよい。
【００７５】
また、これら差異検出枠に検出結果を同時に表示することにより、以下に説明する各種設定時に、これを参照させることもできる。
【００７６】
図９は、かかる各種設定を実行する際に表示される設定画面１１０を示している。この設定画面１１０は、原色成分毎に輝度レベルの差異を検出する場合につき各種設定を行うためのＲＧＢ設定部１１１と、差異検出枠の分割数並びに形状を選択するための選択部１１４と、輝度レベルの差異を比較する際に用いる上述の閾値を設定するための閾値設定部１１５と、画面を照明する光源を選択するための光源選択部１１６とにより構成されている。
【００７７】
ＲＧＢ設定部１１１には、Ｒ,Ｇ,Ｂの原色成分の何れかを選択するためのチェック項目が設けられている。ユーザは、Ｒ,Ｇ,Ｂの原色成分のうち、いかなる原色成分に基づいて輝度レベルの差異を検出するかを決定した場合には、当該決定した原色成分のチェック項目のみに対し、マウス６０を用いてチェックを入れる。例えば原色成分としてＲ（赤）を選択する場合には、ＲＧＢ設定部１１１における“Ｒｅｄ”のチェック項目にチェックを入れることにより、輝度レベルの差異は、原色成分としてのＲ（赤）毎に比較されることになる。
【００７８】
即ち、Ｒ,Ｇ,Ｂ毎に単独で差異を検出することにより、実際に表示画面４５上において表示される比較全体画像において、視覚的に検出することが不可能な微小な状況変化までも高精度に検出することができる。
【００７９】
なお、原色成分の全てを使用する場合には、ユーザは、このＲＧＢ設定部１１１に関しては、Ｒ,Ｇ,Ｂの全てにつきチェックを入れるように設定することになる。
【００８０】
選択部１１４は、差異検出枠をブロック単位で設定するための入力項目が設けられている。この入力項目において、例えば図９に示すようにＸにつき２が、Ｙにつき３が入力された場合には、図１０に示すようなＸ方向につき２ブロック、Ｙ方向につき３ブロックで構成される縦長の差異検出枠が設定されることになる。即ち、この選択部１１４においてＸ、Ｙを設定することにより、差異検出枠がＸ方向、Ｙ方向につき入力された数に応じて分割されることになる。即ち、この選択部１１４においては、差異検出枠のサイズ、形状に加えて、差異検出枠の分割数、換言すれば差異検出枠をいかなる数のブロックで構成するかにつき、設定することができる。
【００８１】
ちなみに、分割されたブロック毎に差異検出結果が平均化されることになるため、この差異検出枠の分割数を適度に設定することにより、画像に生じたノイズを軽減させることも可能となる。特にナイトショット等で撮影した時や、カメラ部４の設定においてゲインを上げた時には、得られる画像につきノイズがかなり発生するため、差異検出枠の分割数を減らすことにより、輝度レベルを比較する画像間の各ノイズ情報を平均化し、より正確な差異検出を行うことが可能となる。また、輝度レベルの比較を望む対象や場所に応じて、この選択部１１４における設定値を変えることにより、差異検出枠の形状をより最適化することで、正確な差異検出を行うことが可能となる。
【００８２】
閾値設定部１１５は、差異検出を行う画素数や色情報に応じて、ユーザ自身が閾値を適宜変更することができるように設けられたものである。この閾値設定部１１５では、上記設定した差異検出枠毎に異なる閾値を設定するようにしてもよいし、また原色成分毎に異なる閾値を設定するようにしてもよい。
【００８３】
光源選択部１１６は、比較する画像の周囲の明るさ等に応じてユーザ自身がディスプレイ６上の画面の照明方法を選択できるようにするために設けられたものである。この光源選択部１１６において、“Regularity”が選択された場合には、ＣＰＵ５６は、通常の方法でディスプレイ上の画面を照明するように制御する。これに対して、“Random”が選択された場合には、ＣＰＵ５６は、ディスプレイ６上の画面につきランダムな位置を照明するように制御する。この光源選択部１１６では、比較する画像の周囲の明るさが同じ場合に、“Regularity”が選択され、また比較する画像の周囲の明るさが異なる場合に、“Random”が選択されることにより、ディスプレイ６上の視認性を向上させることができる。
【００８４】
次に、上述の如き設定画面１１０を介した各種設定例につき説明をする。
【００８５】
先ず、駐車場における車の駐車状態を夜間監視する場合には、周囲の明るさは、比較全体画像と基準全体画像間で互いに同等であるため、光源選択部は“Regularity”に設定する。また画像の比較時において、Ｒ,Ｇ,Ｂの各原色成分を使用することからＲＧＢ設定部１１１は、全ての原色成分につきチェックする。また選択部１１４では、差異検出枠があまりに大きいと、同一の差異検出枠内において複数の車が入ることになり、監視の実効が保てなくなることから、例えばＸにつき２、Ｙにつき３となるように設定を行う。また閾値設定部１１５についても、駐車場の輝度レベルと車の輝度レベルを参照しつつ、最適な値となるように設定を行う。
【００８６】
また、映画館における観客の着席状態を監視する場合には、周囲の明るさは、比較全体画像と基準全体画像間で互いに異なるため、光源選択部は“Random”に設定する。また画像の比較時において、Ｒ,Ｇ,Ｂの各原色成分を使用することからＲＧＢ設定部１１１は、全ての原色成分につきチェックする。また選択部１１４では、差異検出枠があまりに縦長であると、同一の差異検出枠内において、監視対象の座席に着席している観客に加えて、その前列或いは後列の座席に着席している観客も入ることになり、監視の実効が保てなくなることから、例えばＸにつき１０、Ｙにつき１となるように設定を行う。また閾値設定部１１５についても、座席の輝度レベルと観客の輝度レベルを参照しつつ、最適な値となるように設定を行う。
【００８７】
このように、本発明を適用した監視システム１では、上述の如くユーザが監視方法の詳細を任意に設定することができるため、監視環境に応じてより正確な差異検出を行うことができ、監視の実効性を高めることが可能となる。特にユーザは、枠１００に記載されている以前の検出結果を参照することもできるため、監視方法の設定を容易に実行することも可能となる。また、これら画像を監視する際に、上述の如く基準全体画像と比較全体画像間で処理動作を互いに連動させることにより、より精度の高い監視を、より利便性を高めつつ実行することができる。
【図面の簡単な説明】
【００８８】
【図１】本発明を適用した監視システムの構成を示す図である。
【図２】本発明を適用した監視システムの構成につき更に説明するための図である。
【図３】カメラユニット,監視装置のブロック構成図である。
【図４】カメラユニットにより、黒枠で示される撮影範囲内を撮影画角ｕで撮像する場合について説明するための図である。
【図５】ディスプレイ上の表示画面の構成例を示す図である。
【図６】本発明を適用した監視システムの動作について説明するための図である。
【図７】生成した全体画像を時系列に同一画面上に並べて表示する例につき説明するための図である。
【図８】輝度レベルの差異の検出結果を差異検出枠毎に比較全体画像表示部に表示する例を示す図である。
【図９】各種設定を実行する際に表示される設定画面につき説明するための図である。
【図１０】Ｘ方向につき２ブロック、Ｙ方向につき３ブロックで構成される縦長の差異検出枠を設定する例につき示す図である。
【図１１】現在表示されている画像において、輝度レベルの差異が検出された枠につきマーキングして表示する例につき説明するための図である。
【符号の説明】
【００８９】
１ 監視システム、２ カメラユニット、３ パンチルタ部、４ カメラ部、５ 監視装置、６ ディスプレイ、８ ネットワーク、９ 端末装置、１０ 端末ディスプレイ、２２ レンズ部、２３ レンズ制御部、２４ 撮像部、２５ ＩＥＥＥ１３９４インターフェース、２８ ＧＰＳ受信部、２９ メタデータ生成部、５１ バッファメモリ、５２ エンコーダ、５３ サーバ、５４ 画像圧縮部、５５ グラフィックコントローラ、５６ ＣＰＵ、５８ Ｉ／Ｏポート、５９ キーボード、６０ マウス
【技術分野】
【０００１】
本発明は、撮影範囲を撮像することにより生成された画像を監視する監視装置及び方法、プログラム並びに記録媒体に関する。
【背景技術】
【０００２】
近年、一つの建物の中に複数のスクリーンを設置したいわゆるシネマコンプレックスと呼ばれる複合映画館が各地でオープンしている。この複合映画館において観客が持参した入場券を確認する担当者は、通常、建物の入口付近に配置されているが、各スクリーンが設置された映写室毎には配置されていない場合が多い。このため、館内に入場した観客による映写室間の自由な出入りを許すことになり、特に映写室毎に別途入場料金を課す料金体系を採用する複合映画館において極めて不合理となる。
【０００３】
従って各複合映画館では、入場料金を払うことなく映写室間を自由に出入りする観客を随時監視すべく監視員の増員等を図らんとしてきたが、コストパフォーマンス性が悪かった。
【０００４】
また各複合映画館では、各座席に設置されたスイッチを介して、着席状況の自動的な判別を試みようとしてきた。この方法では、上記スイッチを、押圧入力により電気信号を生成する圧電素子として構成し、観客の着席に応じた押圧入力により生成された電気信号を後段のシステムで検出することにより着席状況を自動的に判別する。しかしながら、各映写室の座席数に応じたスイッチを購入し、これを座席毎に設置する必要があるため、コストや労力の削減を図ることができなかった。また圧電素子としてのスイッチの信頼性にばらつきがあるため、着席状況を精度よく判別することができなかった。
【０００５】
このため、信頼性が高くコストパフォーマンス性にも優れた監視を実現するために、カメラの撮影方向を順にシフトさせながら撮影対象を撮影し、これらを合成してパノラマ画像を得ることにより、広範囲の状況を監視することができるモニタリングシステムが提案されている（例えば、特許文献１参照。）。また、設置された複数の監視用ビデオカメラから監視映像を集めてビデオテープ等の記録媒体に記録し、監視を行うことを可能とする集中監視記録システムも提案されている（例えば、特許文献２参照。）。
【０００６】
【特許文献１】特開平１０−１０８１６３号公報
【特許文献２】特開２０００−２４３０６２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、上述の如く記録媒体に記録された画像を利用して、撮影範囲における何らかの変化を検出する場合に、監視員は、１スキャン毎に刻々と入力される監視画像の状況を隅々まで観察しなければならなかった。特に監視員は、細かい画像の変化や、微小な対象物の出現等につき常に識別しなければならず、過大な労力や時間を必要とし、さらには、かかる監視員の眼に依存するシステムであるが故に、かかる状況変化の見落としが生じる危険性もあった。
【０００８】
また、撮影範囲を撮像することにより生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある画像との間で輝度レベルの差異を比較し、かかる輝度レベルにつき差異が生じた場合に、撮影範囲に何らかの変化が生じたものとして監視員に注意を喚起する監視方法も提案されている。この監視方法によれば、注意喚起された場合に初めてその詳細につき画像を介して確認すれば足りるため、監視労力を大幅に低減させることができる。
【０００９】
しかしながら、この監視方法では、図１１に示すように、現在表示されている画像において、輝度レベルの差異が検出された枠１０１につきマーキングして表示することになる。枠１０１が設定された領域につき、先に撮像された同一撮影方向上にある画像から確認するためには、現在表示されている画像からの切り替え処理を実行する必要があるところ、ユーザの労力の軽減を図ることができない。また両画像を並べてこれを直接的に対比する対比監視ができないために、ユーザ自身がかかる差異の原因を効率よく識別することができないという問題点もあった。
【００１０】
さらにこれら両画像を並べて対比監視するときに、画像の表示位置や表示倍率等を変更させて画像内容の確認を望む場合もある。かかる場合において、一方の画像に対して施された表示位置や表示倍率等を変更するための処理動作を、他方の画像に反映させることにより、監視の利便性の向上を図る必要もある。
【００１１】
そこで、本発明は、上述した問題点に鑑みて案出されたものであり、その目的とするところは、撮影範囲を撮像することにより生成された画像を監視する際に、監視員の労力の負担を軽減しつつ、監視の利便性を向上させた監視装置及び方法、プログラム、記録媒体並びに監視システムを提供することにある。
【課題を解決するための手段】
【００１２】
本発明に係る監視装置は、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視する監視装置において、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出手段と、差異検出手段により検出された輝度レベルの差異を予め設定された閾値と比較する比較手段と、差異検出手段により輝度レベルの差異が検出された２枚以上の画像を同一画面上に並べて表示するとともに比較手段による比較結果に応じて表示すべき上記画像につき差異検出枠毎に所定の情報を付加する表示手段と、表示手段により表示されている何れか一の画像に対して処理動作を実行するための操作手段とを備え、表示手段は、上記操作手段により実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させる。
【００１３】
本発明に係る監視方法は、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視する監視方法において、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、差異検出ステップにおいて検出した輝度レベルの差異を予め設定された閾値と比較する比較ステップと、差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに比較ステップにおける比較結果に応じて表示すべき画像につき差異検出枠毎に所定の情報を付加する表示ステップと、表示ステップにおいて表示する何れか一の画像に対して処理動作を実行させるための操作ステップとを有し、表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させる。
【００１４】
本発明に係るプログラムは、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムにおいて、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、差異検出ステップにおいて検出した輝度レベルの差異を予め設定された閾値と比較する比較ステップと、差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに比較ステップにおける比較結果に応じて表示すべき画像につき差異検出枠毎に所定の情報を付加する表示ステップと、表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、表示ステップでは、操作ステップにおいて実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させる。
【００１５】
本発明に係る記録媒体は、上述した課題を解決するために、撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムが記録された記録媒体において、生成された画像と当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、差異検出ステップにおいて検出した輝度レベルの差異を予め設定された閾値と比較する比較ステップと、差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに比較ステップにおける比較結果に応じて表示すべき画像につき差異検出枠毎に所定の情報を付加する表示ステップと、表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、表示ステップでは、操作ステップにおいて実行された一の画像に対する処理動作を同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させるためのプログラムが記録されている。
【発明の効果】
【００１６】
本発明は、異なる時刻に撮影された同一撮影方向にある複数の画像を並べてこれを直接的に対比するいわゆる対比監視を行なうことができるため、従来と比較して表示画像を随時切り換える必要がなくなり、ユーザの労力の軽減を図ることができる。また、この対比監視を可能とする本発明では、ユーザ自身が輝度レベルの差異の原因を効率よく識別することができる。さらに、本発明では、画面上において表示した各画像につき、一方の画像に対して施された処理動作を、他方の画像に反映させることにより、監視の利便性の向上を図ることができる。
【発明を実施するための最良の形態】
【００１７】
以下、本発明を実施するための最良の形態について図面を参照しながら詳細に説明する。本発明を適用した監視システム１は、例えば図１に示すように、被写体を撮像して画像信号を生成するカメラユニット２と、上記画像信号が伝送される監視装置５と、監視装置５に接続されるディスプレイ６と、複数のユーザがアプリケーションを実行するための端末装置９と、端末装置９に接続される端末ディスプレイ１０と、カメラユニット２並びに監視装置５,端末装置９間で双方向通信を実現するためのネットワーク８とを備えている。
【００１８】
この監視システム１におけるカメラユニット２は、図２に示すように、パンチルタ部３と、カメラ部４とが一体的に構成されてなる。パンチルタ部３は、例えばパン、チルトの２軸につき撮影方向を自在に変更するための回転台として構成される。
【００１９】
カメラ部４は、パンチルタ部３を構成する回転台上に配設され、監視装置５による制御に応じて、撮影方向を水平方向或いは垂直方向に調整しつつ、被写体を撮像する。またこのカメラ部４は、監視装置５による制御に応じて、撮影画角を順次変更することにより、撮影倍率を拡大又は縮小して被写体を撮像する。このカメラ部４を一の監視装置５に対して複数設置することにより、同一の被写体につき、互いに異なる撮影角度で撮像することができ、多面的な画像情報を得ることも可能となる。
【００２０】
監視装置５は、図２に示すように、カメラユニット２より伝送された画像信号に所定の処理を施す画像入出力部１３と、この画像入出力部１３に接続され、上記画像信号に基づく動画像を生成する演算処理部１５と、演算処理部１５に接続され上記画像信号を記録するサーバ５３と、ユーザが監視装置５を制御するための操作部１６とを備えている。
【００２１】
この監視装置５は、例えばパーソナルコンピュータ（ＰＣ）等の電子機器により構成され、カメラユニット２から伝送される画像信号を記録し、また記録した画像信号につきディスプレイ６を介してユーザに表示する。またこの監視装置５は、ユーザから所望の画像領域又は画像位置が指定された場合には、記録した画像信号の中から最適なものを選択してこれを表示するように制御する。この監視装置５は、このネットワーク８全体を制御するためのいわゆる中央制御装置としての役割も担い、他の端末装置９からの要求に応じて画像を送信する。なお監視装置５の構成の詳細については、後述する。
【００２２】
ネットワーク８は、例えば監視装置５と電話回線を介して接続されるインターネット網を始め、ＴＡ／モデムと接続されるＩＳＤＮ（Integrated Services Digital Network）／Ｂ（broadband）−ＩＳＤＮ等のように、情報の双方向送受信を可能とした公衆通信網である。ちなみにこの監視システム１を、一定の狭いエリア内で運用する場合には、このネットワーク８を、ＬＡＮ（Local Area Network）で構成してもよい。さらにこのネットワーク８は、静止画像に加えてＭＰＥＧ画像をも送信できるようにしてもよい。かかる場合には、インターネットプロトコル（ＩＰ）に基づき、ＭＰＥＧデータがある一つのチャネルから継続的に送信され、静止画像データは別のチャネルから一定時間毎に送信されることになる。
【００２３】
端末装置９は、各家庭や企業等に待機するユーザがネットワーク８を介して監視装置５から画像を取得し、所望の処理を実行するためのＰＣである。複数の端末装置９をネットワーク８に接続することにより、複数のユーザに対してこの監視システム１のアプリケーションを同時に提供することが可能となる。この端末装置９は、監視装置５から取得した画像を、端末ディスプレイ１０に対して表示する。またこの端末装置９は、ユーザによる指定操作に応じて要求信号を生成し、これを監視装置５に対して送信する。なお端末装置９のブロック構成については、後述する監視装置５の構成を引用し、説明を省略する。
【００２４】
次に、本発明を適用した監視システム１におけるカメラユニット２,監視装置５について詳細に説明する。
【００２５】
図３は、カメラユニット２,監視装置５の詳細な構成を示している。この図２では、共通のコントローラバス２１に対して、カメラユニット２並びに監視装置５の各構成要素が接続されている。
【００２６】
カメラユニット２を構成するパンチルタ部３は、撮像方向を変更するための回転台を制御するTilt部３ａ、Pan部３ｂとを有する。また、カメラユニット２を構成するカメラ部４は、主としてレンズ部２２の画角を変更するためのレンズ制御部２３と、レンズ部２２の光軸に直交する位置に配設される撮像部２４と、撮像部２４により生成された画像信号を画像入出力部１３へ送信するためのＩＥＥＥ(Institute of Electrical and Electronics Engineers)１３９４インターフェース２５と、カメラユニット２の現在位置を検出するためのＧＰＳ(Global Positioning System)受信部２８と、ＧＰＳ受信部２８に装着されるメタデータ生成部２９とを備えている。ちなみに、ＩＥＥＥ１３９４インターフェース２５は、イーサネット（登録商標）に代替してもよい。
【００２７】
また画像入出力部１３は、ＩＥＥＥ１３９４インターフェース２５に接続されるバッファメモリ５１と、バッファメモリ５１に接続されるエンコーダ５２とを備えている。
【００２８】
また演算処理部１５は、サーバ５３から読み出された画像を圧縮するための画像圧縮部５４と、サーバ５３及び画像圧縮部５４に接続され、ディスプレイ６上に表示する画像を作り出すグラフィックコントローラ５５と、コントローラバス２１を介して各部を制御するためのＣＰＵ５６と、Ｉ／Ｏポート５８にそれぞれ接続されるメモリカード６１並びに時計６２とを備えている。
【００２９】
また操作部１６は、ディスプレイ６上に表示されている画像からユーザが所望の画像領域、画像位置を指定するためのキーボード５９並びにマウス６０を備えている。
【００３０】
Tilt部３ａ並びにPan部３ｂは、ＣＰＵ５６からの駆動信号に基づき、回転台の駆動源として構成されているステッピングモータを回転させる。これにより回転台上に載置されてなるカメラ部４の撮影方向を水平方向、或いは垂直方向に変更することができる。
【００３１】
レンズ制御部２３は、ＣＰＵ５６からの駆動信号に基づき、レンズ部２２に対して自動絞り制御動作や自動焦点制御動作を実行する。またこのレンズ制御部２３は、かかる駆動信号に基づき、被写体に対する撮影画角を変更する。これにより、カメラ部４は、撮影倍率を順次調整して被写体を撮像することも可能となる。
【００３２】
撮像部２４は、例えばＣＣＤ（Charge Coupled Device ）等の固体撮像素子により構成され、レンズ部２２を介して入射される被写体像を撮像面上に結像させ、光電変換により画像信号を生成し、これをＩＥＥＥ１３９４インターフェース２５へ送信する。
【００３３】
ＧＰＳ受信部２８は、ＧＰＳシステムにより送出される信号に基づき、カメラユニット２の設置場所や撮影方向を検出する。このＧＰＳ受信部２８を設けることにより、特に複数のカメラユニット２を設置する場合において、双方の撮影方向を連動して制御することが可能となる。ＧＰＳ受信部２８からの出力信号は、メタデータ生成部２９に供給され、ＧＰＳによる測位結果に基づく、緯度、経度、方位、高度等の位置情報、並びに時刻や各種パラメータ等からなるメタデータが生成される。メタデータ生成部２９は、この生成した位置情報やメタデータをエンコーダ５２へ供給する。なお本発明では、このＧＰＳ受信部２８、メタデータ生成部２９の構成を省略してもよい。
【００３４】
バッファメモリ５１は、ＣＰＵ５６からの制御信号に基づき、ＩＥＥＥ１３９４インターフェース２５から供給される画像信号を一時的に格納する。このバッファメモリ５１において一時的に格納された画像信号は、エンコーダ５２に供給され、例えばＪＰＥＧ（Joint Photographic Experts Group）等の規格に基づいて圧縮符号化される。ちなみに、このエンコーダ５２は、圧縮符号化する画像信号に対して、メタデータ生成部２９から供給される位置情報やメタデータを付加してもよい。エンコーダ５２は、圧縮符号化した画像信号をサーバ５３或いは画像圧縮部５４へ出力する。なお供給される画像信号につき、圧縮符号化を行わない場合には、このエンコーダ５２における処理は省略される。
【００３５】
サーバ５３は、エンコーダ５２から出力される画像信号を位置情報やメタデータと関連付けて順次記録する。ちなみに、このサーバ５３は、例えばハードディスクや、着脱自在なディスク状記録媒体に代替してもよい。サーバ５３に記録された画像信号は、ＣＰＵ５６による制御に基づき、画像圧縮部５４やグラフィックコントローラ５５へ読み出される。なおサーバ５３に記録される画像信号をメモリカード６１へ記録するように制御することにより、ユーザは、かかる撮像した画像を他のＰＣへ移し換えることも可能となる。また、このサーバ５３に記録されている画像信号を上述した図示しないネットワークサーバに記録するように制御することにより、サーバ５３を図示しないネットワークサーバに代替することも可能となる。
【００３６】
画像圧縮部５４は、サーバ５３から読み出したＪＰＥＧ形式の画像信号につき、それぞれ圧縮画像又はサムネイル画像を生成する。また、この画像圧縮部５４は、ＣＰＵ５６による制御に従い、サーバ５３に記録されている画像を読み出して、動画像を生成する。ちなみにこの動画像を生成する際の圧縮方法としては、例えばＭＰＥＧ、Ｍｏｔｉｏｎ−ＪＰＥＧ、Ｍｏｔｉｏｎ−ＪＰＥＧ２０００等に基づき実行してもよい。
【００３７】
グラフィックコントローラ５５は、サーバ５３から読み出した画像信号、又は画像圧縮部５４から出力される画像信号に基づき、ディスプレイ６への絵画処理を実行する。また、このグラフィックコントローラ５５は、ＣＰＵ５６による制御に基づき、ディスプレイ６におけるコントラスト、輝度の制御を実行する。
【００３８】
ＣＰＵ５６は、ユーザによりキーボード５９やマウス６０を介して画像領域、画像位置が指定された場合に、パンチルタ部３やレンズ制御部２３を駆動するための駆動信号や、監視装置５内の各部を制御するための制御信号を、コントローラバス２１を介して送信する。また、このＣＰＵ５６は、端末装置９から所定の要求信号を受けて、サーバ５３に記録されている最適な静止画像、動画像、或いは各種情報を選択し、これを当該端末装置９へ送信するように制御する。
【００３９】
次に本発明を適用した監視システム１における撮像動作について説明をする。
【００４０】
図４は、カメラユニット２により、黒枠で示される撮影範囲内を撮影画角ｕで撮像する場合について示している。撮影範囲を撮影画角ｕで全て撮像するためには、撮影方向を水平方向又は垂直方向へ順にシフトさせて撮像する必要がある。仮に撮影範囲のサイズが、任意の撮影画角ｕで撮像することにより得られるフレーム（以下、単位画像という。）のサイズのｉ×ｊ倍で表せるときには、少なくともｉ×ｊ通りの撮影方向を設定する必要がある。この撮影画角ｕで撮像したｉ×ｊ個の単位画像を貼り合わせることにより撮影範囲全体を表した全体画像を合成することができる。
【００４１】
ここで、撮影範囲の各単位画像の座標（Ｍ，Ｎ）を、水平方向につき、左端から順に１、２、・・Ｍ・、ｉとし、垂直方向につき上端から順に１、２、・・Ｎ・、ｊとしたとき、ＣＰＵ５６は、Tilt部３ａ並びにPan部３ｂに対して駆動信号を送信することにより、カメラ部４の撮影方向を、先ず左上に位置する座標（１，１）に合わせて撮像を実行させる。この座標（１，１）について撮像することにより生成された単位画像に基づく画像信号は、バッファメモリ５１に一時的に格納され、エンコーダ５２において、ＪＰＥＧ規格に基づいて圧縮符号化される。そしてこの画像信号は、ＧＰＳ２８から送信される撮影方向等を示す位置情報やメタデータが同時に付加され、サーバ５３に記録される。
【００４２】
同様にＣＰＵ５６は、Tilt部３ａ並びにPan部３ｂに対して駆動信号を送信することにより、カメラ部４の撮影方向を、右側に１画枠分シフトさせて座標（２，１）に合わせて撮像を実行する。この座標（２，１）について撮像することにより生成された画像信号も同様にサーバ５３へ記録される。ＣＰＵ５６による制御に基づき、カメラ部４は、撮影方向を座標（３，１）、（４，１）・・（ｉ，１）と水平方向へ順次変更させて撮像を実行する。
【００４３】
カメラ部４は、１列目の撮像を終了させた後、ＣＰＵ５６による制御に基づき、撮影方向を２列目の座標（１，２）に調整して撮像を実行し、その後、水平方向へ順次シフトさせながら撮像を実行する。かかる動作を繰り返して座標（ｉ，ｊ）まで撮像を終了させた時、サーバ５３は、座標毎に撮像したｉ×ｊ個の単位画像に基づく画像信号が記録されている状態になる。
【００４４】
ちなみに、このサーバ５３に記録されている各単位画像に基づく画像信号は、画像圧縮部５４により順次読み出されて、ディスプレイ６の表示画面のサイズに適合するように縮小される。この縮小された各単位画像は、グラフィックコントローラ１５を経てディスプレイ６に表示される。サーバ５３に記録されたｉ×ｊ個の単位画像を全てディスプレイ６に表示させることにより、１枚のパノラマ状の全体画像（パノラマ画像）が合成されることになる。上述の撮像動作を一定の間隔で実行することにより、撮影範囲の最新の状況を示す全体画像を取得することが可能となる。
【００４５】
図５は、撮像したｉ×ｊ個の単位画像を貼り合わせることにより合成した全体画像を、ディスプレイ６の全体画像表示部７０に表示する例を示している。なお、この監視装置５は、全体画像表示部７０に対して、全体画像を構成する各単位画像間の境界を表示させてもよいし、シームレスな全体画像のみを表示させてもよい。また監視装置５は、パノラマ状の全体画像の代替として、撮影範囲全体を捉えることができる撮影画角で撮影した１枚の全体画像を、この全体画像表示部７０に表示させてもよい。
【００４６】
ちなみに表示画面４５には、単位画像を拡大した拡大画像を表示するための拡大画像表示部７１がさらに設けられている。この拡大画像表示部７１は、全体画像表示部７０に表示される全体画像を構成する単位画像のうち、ユーザにより指定された一の単位画像を拡大して表示してもよいし、またかかる一の単位画像の撮影方向につき、動画を順次表示してもよい。これによりユーザは、指定した単位画像における撮影方向の状況につき、リアルタイムに確認することもできる。
【００４７】
ユーザは、全体画像表示部７０や拡大画像表示部７１に対して、キーボード５９やマウス６０を用いて、所望の画像領域、画像位置を指定することができる。なお、各表示部７０,７１には、マウス６０等の動きに連動させて上述の指定操作を実行するための照準線やポインタをさらに表示させてもよい。
【００４８】
また表示画面４５上においてマウス６０を介した入力動作を実行することにより、拡大画像表示部７１に表示されている単位画像につき撮影倍率を拡大又は縮小させ、カメラ部４の撮影方向を水平、垂直方向において調整するための撮影方向制御、各種モードの設定を行うことができる。ちなみに、全体画像表示部７０において表示される全体画像の履歴は、履歴表示部８１を介して表示され、全体画像表示部７０に表示される全体画像の濃淡については、濃淡表示部８２を介して表示される。また拡大画像表示部７１に表示されている単位画像につき変更された撮影倍率は、倍率表示部８３を介して表示される。
【００４９】
また、この表示画面４５上に表示されている差異検出ボタン８４がマウス６０を介してクリックされると、生成された全体画像を構成する一の単位画像と、当該単位画像よりも先に撮像された同一撮影方向上の単位画像との間で輝度レベルの差異が検出される。
【００５０】
この差異検出は、サーバ５３に記録されている単位画像から構成される全体画像につき、基準となる全体画像との間で輝度レベルを比較することにより実行する。ここで画像上の差異を検出する全体画像を比較全体画像といい、基準となる全体画像を基準全体画像という。
【００５１】
図６(a)に示すように、基準全体画像を全体画像ａ１とした場合において、比較全体画像としての全体画像ａ２につき画像上に生じた差異を検出する場合には、全体画像ａ２を構成する単位画像と、全体画像ａ１を構成する単位画像との間で輝度レベルを比較する。この輝度レベルの比較は、図６(a)に示すように、同一座標（１，１）、（２，１）、（３，１）、・・・、（Ｍ，Ｎ）にある単位画像間で、換言すれば同一撮影方向にある単位画像間で実行する。これにより、基準全体画像に対する比較全体画像の輝度レベルの変化を、各撮影方向に応じて検出することができる。
【００５２】
ＣＰＵ５６は、比較全体画像（全体画像ａ２）と基準全体画像（全体画像ａ１）との間で、例えば座標（Ｍ，Ｎ）にある単位画像の輝度レベルを比較する場合には、先ず、これら二つの単位画像をサーバ５３から読み出す。次にＣＰＵ５６は、例えば図６(b)に示すように、読み出した二つの単位画像間において同一位置にある各画素(ｍ,ｎ)につき輝度レベルを比較する。この輝度レベルの比較は、同一位置にある画素(ｍ,ｎ)につき、輝度レベルの差分を求めるようにしてもよい。ＣＰＵ５６は、読み出した単位画像間の輝度レベルの差異を、各画素につき求めた輝度レベルの差分値を介して検出することができる。ちなみに、この各画素間の輝度レベルの比較は、単位画像を構成する全ての画素につき実行してもよいし、単位画像を構成する一部の画素のみに対して実行するようにしてもよい。
【００５３】
ちなみに、本発明では、比較全体画像を構成する一部の単位画像のみについて、上述の如く輝度レベルを比較してもよい。このときユーザは、マウス６０等を用いて、所望の単位画像を指定することにより、かかる指定された単位画像のみにつき輝度レベルの差異を検出することが可能となる。
【００５４】
なお、次のタイミングにおいてサーバ５３に全体画像ａ３を構成する単位画像が記録された場合には、当該全体画像ａ３が比較全体画像となり、基準全体画像としての全体画像ａ２の間で、同一撮影方向における単位画像間で差異が検出されることになる。さらに次のタイミングにおいて、サーバ５３に全体画像ａ４を構成する単位画像が記録された場合には、当該全体画像ａ４が比較全体画像となり、基準全体画像としての全体画像ａ３の間で、同一撮影方向における単位画像間で差異が検出されることになる。
【００５５】
上述の如く輝度レベルの差異が比較されるに基準全体画像と比較全体画像は、ディスプレイ６の画面９０上において、図７に示すように並べて表示してもよい。この画面９０では、より以前に撮像された基準全体画像を表示するための基準画像表示部９１と、より直近に撮像された比較全体画像を表示するための比較全体画像表示部９２と、基準全体画像表示部９１に表示されている基準全体画像を水平方向にスクロールさせるための水平スクロールバー９３と、この基準全体画像を垂直方向へスクロールさせるための垂直スクロールバー９４と、比較全体画像表示部９２に表示されている比較全体画像を水平方向にスクロールさせるための水平スクロールバー９５と、比較全体画像を垂直方向へスクロールさせるための垂直スクロールバー９６と、各画像を拡大又は縮小させるためのズーム指定部９７と、表示切換指定部９９により構成されている。
【００５６】
また、この図７に示す例において、空席状態の基準全体画像並びに比較全体画像の同一位置に対して差異検出枠（ＩＤ−１〜ＩＤ−４）が設定されている。この差異検出枠については任意に設定することができ、例えば指定席についてのみ着席状況を監視する場合には、かかる指定席のみに差異検出枠を設定するようにしてもよい。
【００５７】
表示画面４５上に表示されている差異検出ボタン８４がマウス６０を介してクリックされると、基準全体画像と比較全体画像との間で、かかる差異検出枠を構成する画素における輝度レベルの差異が抽出される。求められた輝度レベルの差異は、予め設定された閾値と比較され、その閾値を超える場合にその差異検出枠において輝度レベルの差異が生じたものと判断し、図７に示すように色付き表示することで、ユーザに対して注意を促す。ちなみに、輝度レベルの差異が生じた差異検出枠については、所定の情報が付加されていれば、色付き表示を行う場合に限定されるものではない。
【００５８】
ユーザは、ディスプレイ６上に表示されている色付きの差異検出枠を視認することにより、差異が生じた箇所を容易に識別することができる。また、基準全体画像並びに比較全体画像は、同一画面上において互いに並べて表示されるため、差異が検出された画像領域につき、輝度レベルが具体的にどのように変化したのかをユーザ自身が容易に識別することができ、また両画像間において何らかの動きが生じた結果、輝度レベルが変化した場合には、かかる動きの対象物や要因を効率よく解析することができる。
【００５９】
即ち、本発明を適用した監視システム１では、異なる時刻に撮影された同一撮影方向にある複数の画像を並べてこれを直接的に対比するいわゆる対比監視を行なうことができるため、従来と比較して表示画像を随時切り換える必要がなくなり、ユーザの労力の軽減を図ることができる。また、この対比監視を可能とする監視システム１では、ユーザ自身が輝度レベルの差異の原因を効率よく識別することができる。
【００６０】
なお、この図７に示す例において、マウス６０を介して水平スクロールバー９３が操作され、基準全体画像表示部９１に表示されている基準全体画像が水平方向へスクロール表示されるが、かかるスクロール表示を比較全体画像表示部９５に表示されている比較全体画像に反映させるようにしてもよい。かかる場合には、マウス６０を介して水平スクロールバー９３の位置が変更されることになるが、かかる変更後の水平スクロールバー９３の位置を取得し、これを水平スクロールバー９５の位置として設定し直す。これにより、比較全体画像の水平方向の動きを、ユーザによりなされた基準全体画像の水平方向への動きに同期させることができ、違和感も解消することができる。
【００６１】
またマウス６０を介して水平スクロールバー９５が操作された場合には、これを水平スクロールバー９３の動きに反映させるようにしてもよい。これにより、ユーザにより指示された比較全体画像の動きを、基準全体画像の動きに反映させることができる。
【００６２】
同様に、マウス６０を介して垂直スクロールバー９４が操作され、基準全体画像表示部９１に表示されている基準全体画像が垂直方向へスクロール表示されるが、かかるスクロール表示を比較全体画像表示部９５に表示されている比較全体画像に反映させるようにしてもよい。かかる場合には、マウス６０を介して垂直スクロールバー９４の位置が変更されることになるが、かかる変更後の垂直スクロールバー９４の位置を取得し、これを垂直スクロールバー９６の位置として設定し直す。これにより、比較全体画像の垂直方向の動きを、ユーザによりなされた基準全体画像の垂直方向への動きに同期させることができる。
【００６３】
またマウス６０を介して垂直スクロールバー９６が操作された場合には、これを垂直スクロールバー９４の動きに反映させるようにしてもよい。
【００６４】
このように、本発明を適用した監視システム１では、同一画面上に並べて表示した各画像をスクロールさせるためのスクロールバー９３〜９６を表示し、マウス６０により実行された一の画像に対するスクロールバー９３〜９６の処理動作に応じて、同一画面上に並べて表示した他の画像をスクロールさせる。これにより、一方の画像につき所望の画像位置へスクロール表示させた場合に、これを他方の画像に反映させることができるため、監視の利便性を向上させることができる。
【００６５】
また、この図７に示す例において、画像の表示倍率の拡大又は縮小につき、ズーム指定部９７を介して指定された場合には、これに応じて、同一画面上に並べて表示した基準全体画像並びに比較全体画像の表示倍率を同時に変更するようにしてもよい。ズーム指定部９７におけるスライドスイッチ９８の上下方向への操作を受け付けた場合に、これに応じた画像のズーム処理を、基準全体画像表示部９１並びに比較全体画像表示部９２に表示されている各全体画像につき同時に実行する。これにより、監視の利便性をさらに向上させることができる。
【００６６】
また、この図７に示す例において、基準全体画像表示部９１又は比較全体画像表示部９２に表示されている何れかの全体画像につき、マウス６０を介して表示位置がピンポイントで指定された場合には、同一画面上に並べて表示した各全体画像を当該指定された表示位置へ移動させるようにしてもよい。かかる場合には、基準全体画像表示部９１又は比較全体画像表示部９２の何れかにつき指定された表示位置を識別し、これを他の双方の全体画像の表示位置となるように移動させることで、監視の利便性を向上させることができる。
【００６７】
このように、本発明を適用した監視システム１では、画面９０上において基準全体画像と比較全体画像につき、表示位置や表示倍率等を変更させて画像内容の確認する場合に、一方の画像に対して施された表示位置や表示倍率等を変更するための処理動作を、他方の画像に反映させることにより、いわば両画像間でなされる処理動作を互いに連動させることができ、監視の利便性の向上を図ることができる。
【００６８】
ちなみに、表示切換部９９をマウス６０を介してクリックすることにより、比較全体画像表示部９２に表示されている比較全体画像のみを画面９０上に拡大表示させることができ、詳細を確認することもできる。
【００６９】
なお、この監視システム１において、各画像に対して施される処理動作は上述した実施の形態に限定されるものではなく、他の如何なる画像に対する処理動作も含まれる。
【００７０】
また、上述した実施の形態では、あくまで基準全体画像と比較全体画像の２枚を画面９０上に表示する例につき説明をしたが、これに限定されるものではなく、３枚以上の画像を表示するようにしてもよい。かかる場合には、各タイミングにつき取得された全体画像を時系列で表示するようしてもよい。
【００７１】
また、この監視システム１は、パノラマ状の全体画像を構成する各単位画像間で輝度レベルの差異を比較する場合に限定するものではない。即ち、この監視システム１は、撮像された一枚の画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を検出し、その輝度レベルの差異が検出された２枚以上の画像を同一画面上に並べて表示するものであってもよい。換言すれば、上述した同一撮影方向にある単位画像のみを画面９０上に並べて表示し、何れか一の単位画像に対して実行された処理動作を、他の単位画像に反映させるものであってもよい。これにより、単位画像のみに焦点をあてて監視を行なう場合においても、その利便性を向上させることが可能となる。
【００７２】
また、本発明は、上述した処理をコンピュータに実行させるためのプログラムや、かかるプログラムが記録された記録媒体に適用してもよいことは勿論である。
【００７３】
また、本発明では、図８に示すように、輝度レベルの差異の検出結果を上記差異検出枠毎に比較全体画像表示部９２に表示してもよい。かかる場合において、差異検出枠（ＩＤ−４）における差異の検出結果を枠１００内に示すようにしてもよい。ユーザは、かかる比較全体画像表示部９２を枠１００とともに視認することにより、差異が検出された色付きの差異検出枠については、輝度レベルが具体的にどの程度変化したか容易に識別することができる。また差異が検出されなかった差異検出枠についても、その枠１００において検出結果を表示させることにより、色付きの差異検出枠の検出結果との間で容易に比較することもできる。
【００７４】
ちなみに、この比較全体画像表示部９２では、マウス６０によるポインタが合わせられた差異検出枠につき、検出結果が書き込まれた枠１００を順次表示させるようにしてもよい。
【００７５】
また、これら差異検出枠に検出結果を同時に表示することにより、以下に説明する各種設定時に、これを参照させることもできる。
【００７６】
図９は、かかる各種設定を実行する際に表示される設定画面１１０を示している。この設定画面１１０は、原色成分毎に輝度レベルの差異を検出する場合につき各種設定を行うためのＲＧＢ設定部１１１と、差異検出枠の分割数並びに形状を選択するための選択部１１４と、輝度レベルの差異を比較する際に用いる上述の閾値を設定するための閾値設定部１１５と、画面を照明する光源を選択するための光源選択部１１６とにより構成されている。
【００７７】
ＲＧＢ設定部１１１には、Ｒ,Ｇ,Ｂの原色成分の何れかを選択するためのチェック項目が設けられている。ユーザは、Ｒ,Ｇ,Ｂの原色成分のうち、いかなる原色成分に基づいて輝度レベルの差異を検出するかを決定した場合には、当該決定した原色成分のチェック項目のみに対し、マウス６０を用いてチェックを入れる。例えば原色成分としてＲ（赤）を選択する場合には、ＲＧＢ設定部１１１における“Ｒｅｄ”のチェック項目にチェックを入れることにより、輝度レベルの差異は、原色成分としてのＲ（赤）毎に比較されることになる。
【００７８】
即ち、Ｒ,Ｇ,Ｂ毎に単独で差異を検出することにより、実際に表示画面４５上において表示される比較全体画像において、視覚的に検出することが不可能な微小な状況変化までも高精度に検出することができる。
【００７９】
なお、原色成分の全てを使用する場合には、ユーザは、このＲＧＢ設定部１１１に関しては、Ｒ,Ｇ,Ｂの全てにつきチェックを入れるように設定することになる。
【００８０】
選択部１１４は、差異検出枠をブロック単位で設定するための入力項目が設けられている。この入力項目において、例えば図９に示すようにＸにつき２が、Ｙにつき３が入力された場合には、図１０に示すようなＸ方向につき２ブロック、Ｙ方向につき３ブロックで構成される縦長の差異検出枠が設定されることになる。即ち、この選択部１１４においてＸ、Ｙを設定することにより、差異検出枠がＸ方向、Ｙ方向につき入力された数に応じて分割されることになる。即ち、この選択部１１４においては、差異検出枠のサイズ、形状に加えて、差異検出枠の分割数、換言すれば差異検出枠をいかなる数のブロックで構成するかにつき、設定することができる。
【００８１】
ちなみに、分割されたブロック毎に差異検出結果が平均化されることになるため、この差異検出枠の分割数を適度に設定することにより、画像に生じたノイズを軽減させることも可能となる。特にナイトショット等で撮影した時や、カメラ部４の設定においてゲインを上げた時には、得られる画像につきノイズがかなり発生するため、差異検出枠の分割数を減らすことにより、輝度レベルを比較する画像間の各ノイズ情報を平均化し、より正確な差異検出を行うことが可能となる。また、輝度レベルの比較を望む対象や場所に応じて、この選択部１１４における設定値を変えることにより、差異検出枠の形状をより最適化することで、正確な差異検出を行うことが可能となる。
【００８２】
閾値設定部１１５は、差異検出を行う画素数や色情報に応じて、ユーザ自身が閾値を適宜変更することができるように設けられたものである。この閾値設定部１１５では、上記設定した差異検出枠毎に異なる閾値を設定するようにしてもよいし、また原色成分毎に異なる閾値を設定するようにしてもよい。
【００８３】
光源選択部１１６は、比較する画像の周囲の明るさ等に応じてユーザ自身がディスプレイ６上の画面の照明方法を選択できるようにするために設けられたものである。この光源選択部１１６において、“Regularity”が選択された場合には、ＣＰＵ５６は、通常の方法でディスプレイ上の画面を照明するように制御する。これに対して、“Random”が選択された場合には、ＣＰＵ５６は、ディスプレイ６上の画面につきランダムな位置を照明するように制御する。この光源選択部１１６では、比較する画像の周囲の明るさが同じ場合に、“Regularity”が選択され、また比較する画像の周囲の明るさが異なる場合に、“Random”が選択されることにより、ディスプレイ６上の視認性を向上させることができる。
【００８４】
次に、上述の如き設定画面１１０を介した各種設定例につき説明をする。
【００８５】
先ず、駐車場における車の駐車状態を夜間監視する場合には、周囲の明るさは、比較全体画像と基準全体画像間で互いに同等であるため、光源選択部は“Regularity”に設定する。また画像の比較時において、Ｒ,Ｇ,Ｂの各原色成分を使用することからＲＧＢ設定部１１１は、全ての原色成分につきチェックする。また選択部１１４では、差異検出枠があまりに大きいと、同一の差異検出枠内において複数の車が入ることになり、監視の実効が保てなくなることから、例えばＸにつき２、Ｙにつき３となるように設定を行う。また閾値設定部１１５についても、駐車場の輝度レベルと車の輝度レベルを参照しつつ、最適な値となるように設定を行う。
【００８６】
また、映画館における観客の着席状態を監視する場合には、周囲の明るさは、比較全体画像と基準全体画像間で互いに異なるため、光源選択部は“Random”に設定する。また画像の比較時において、Ｒ,Ｇ,Ｂの各原色成分を使用することからＲＧＢ設定部１１１は、全ての原色成分につきチェックする。また選択部１１４では、差異検出枠があまりに縦長であると、同一の差異検出枠内において、監視対象の座席に着席している観客に加えて、その前列或いは後列の座席に着席している観客も入ることになり、監視の実効が保てなくなることから、例えばＸにつき１０、Ｙにつき１となるように設定を行う。また閾値設定部１１５についても、座席の輝度レベルと観客の輝度レベルを参照しつつ、最適な値となるように設定を行う。
【００８７】
このように、本発明を適用した監視システム１では、上述の如くユーザが監視方法の詳細を任意に設定することができるため、監視環境に応じてより正確な差異検出を行うことができ、監視の実効性を高めることが可能となる。特にユーザは、枠１００に記載されている以前の検出結果を参照することもできるため、監視方法の設定を容易に実行することも可能となる。また、これら画像を監視する際に、上述の如く基準全体画像と比較全体画像間で処理動作を互いに連動させることにより、より精度の高い監視を、より利便性を高めつつ実行することができる。
【図面の簡単な説明】
【００８８】
【図１】本発明を適用した監視システムの構成を示す図である。
【図２】本発明を適用した監視システムの構成につき更に説明するための図である。
【図３】カメラユニット,監視装置のブロック構成図である。
【図４】カメラユニットにより、黒枠で示される撮影範囲内を撮影画角ｕで撮像する場合について説明するための図である。
【図５】ディスプレイ上の表示画面の構成例を示す図である。
【図６】本発明を適用した監視システムの動作について説明するための図である。
【図７】生成した全体画像を時系列に同一画面上に並べて表示する例につき説明するための図である。
【図８】輝度レベルの差異の検出結果を差異検出枠毎に比較全体画像表示部に表示する例を示す図である。
【図９】各種設定を実行する際に表示される設定画面につき説明するための図である。
【図１０】Ｘ方向につき２ブロック、Ｙ方向につき３ブロックで構成される縦長の差異検出枠を設定する例につき示す図である。
【図１１】現在表示されている画像において、輝度レベルの差異が検出された枠につきマーキングして表示する例につき説明するための図である。
【符号の説明】
【００８９】
１ 監視システム、２ カメラユニット、３ パンチルタ部、４ カメラ部、５ 監視装置、６ ディスプレイ、８ ネットワーク、９ 端末装置、１０ 端末ディスプレイ、２２ レンズ部、２３ レンズ制御部、２４ 撮像部、２５ ＩＥＥＥ１３９４インターフェース、２８ ＧＰＳ受信部、２９ メタデータ生成部、５１ バッファメモリ、５２ エンコーダ、５３ サーバ、５４ 画像圧縮部、５５ グラフィックコントローラ、５６ ＣＰＵ、５８ Ｉ／Ｏポート、５９ キーボード、６０ マウス
【特許請求の範囲】
【請求項１】
撮影範囲を撮像することにより生成された画像を監視する監視装置において、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出手段と、
上記差異検出手段により検出された輝度レベルの差異を、予め設定された閾値と比較する比較手段と、
上記差異検出手段により輝度レベルの差異が検出された２枚以上の画像を同一画面上に並べて表示するとともに、上記比較手段による比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示手段と、
上記表示手段により表示されている何れか一の画像に対して処理動作を実行するための操作手段とを備え、
上記表示手段は、上記操作手段により実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させること
を特徴とする監視装置。
【請求項２】
上記表示手段は、同一画面上に並べて表示した各画像をスクロールさせるためのスクロールバーを表示し、上記操作手段により実行された一の画像に対する上記スクロールバーの処理動作に応じて、同一画面上に並べて表示した他の画像をスクロールさせること
を特徴とする請求項１記載の監視装置。
【請求項３】
上記表示手段は、上記操作手段により各画像の表示倍率を変更するための処理動作が実行された場合には、当該処理動作に応じて、同一画面上に並べて表示した各画像の表示倍率を同時に変更させること
を特徴とする請求項１記載の監視装置。
【請求項４】
上記表示手段は、上記操作手段を介して一の画像につき表示位置が指定された場合には、同一画面上に並べて表示した各画像を当該指定された表示位置へ移動させること
を特徴とする請求項１記載の監視装置。
【請求項５】
撮影方向を変化させて上記撮影範囲を撮像することにより、複数の単位画像からなるパノラマ画像を順次生成する撮像手段をさらに備え、
上記差異検出手段は、上記生成されたパノラマ画像を構成する一の単位画像と、当該単位画像よりも先に撮像された同一撮影方向上の単位画像との間で輝度レベルの差異を順次検出すること
を特徴とする請求項１記載の監視装置。
【請求項６】
上記表示手段は、上記差異検出手段による輝度レベルの差異の検出結果を上記差異検出枠毎に所定の情報とともに付加すること
を特徴とする請求項１記載の監視装置。
【請求項７】
上記差異検出手段は、原色成分毎に輝度レベルの差異を順次検出すること
を特徴とする請求項１記載の監視装置。
【請求項８】
上記差異検出枠の分割数並びに形状を選択するための選択手段を更に備えること
を特徴とする請求項１記載の監視装置。
【請求項９】
上記閾値を設定するための閾値設定手段を更に備えること
を特徴とする請求項１記載の監視装置。
【請求項１０】
上記表示手段における画面の照明方法を選択するための照明選択手段を更に備えること
を特徴とする請求項１記載の監視装置。
【請求項１１】
撮影範囲を撮像することにより生成された画像を監視する監視方法において、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、
上記差異検出ステップにおいて検出した輝度レベルの差異を、予め設定された閾値と比較する比較ステップと、
上記差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較ステップにおける比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示ステップと、
上記表示ステップにおいて表示する何れか一の画像に対して処理動作を実行させるための操作ステップとを有し、
上記表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させること
を特徴とする監視方法。
【請求項１２】
上記表示ステップでは、同一画面上に並べて表示した各画像をスクロールさせるためのスクロールバーを表示し、上記操作手段により実行された一の画像に対する上記スクロールバーの処理動作に応じて、同一画面上に並べて表示した他の画像をスクロールさせること
を特徴とする請求項１１記載の監視方法。
【請求項１３】
上記表示ステップでは、上記操作ステップにおいて、各画像の表示倍率を変更するための処理動作が実行された場合には、当該処理動作に応じて、同一画面上に並べて表示した各画像の表示倍率を同時に変更すること
を特徴とする請求項１１記載の監視方法。
【請求項１４】
上記表示ステップでは、上記操作ステップにおいて、一の画像につき表示位置が指定された場合には、同一画面上に並べて表示した各画像を当該指定された表示位置へ移動させること
を特徴とする請求項１１記載の監視方法。
【請求項１５】
撮影方向を変化させて上記撮影範囲を撮像することにより、複数の単位画像からなるパノラマ画像を順次生成する撮像ステップをさらに有し、
上記差異検出ステップでは、上記生成したパノラマ画像を構成する一の単位画像と、当該単位画像よりも先に撮像された同一撮影方向上の単位画像との間で輝度レベルの差異を順次検出すること
を特徴とする請求項１１記載の監視方法。
【請求項１６】
上記表示ステップでは、上記差異検出手段による輝度レベルの差異の検出結果を上記差異検出枠毎に所定の情報とともに付加すること
を特徴とする請求項１１記載の監視方法。
【請求項１７】
上記差異検出ステップでは、原色成分毎に輝度レベルの差異を順次検出すること
を特徴とする請求項１１記載の監視方法。
【請求項１８】
上記差異検出枠の分割数並びに形状を選択するための選択ステップを更に有すること
を特徴とする請求項１１記載の監視方法。
【請求項１９】
上記閾値を設定するための閾値設定ステップを更に有すること
を特徴とする請求項１１記載の監視方法。
【請求項２０】
上記表示手段における画面の照明方法を選択するための照明選択ステップを更に有すること
を特徴とする請求項１１記載の監視方法。
【請求項２１】
撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムにおいて、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、
上記差異検出ステップにおいて検出した輝度レベルの差異を、予め設定された閾値と比較する比較ステップと、
上記差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較ステップにおける比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示ステップと、
上記表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、
上記表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させるためのプログラム。
【請求項２２】
撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムが記録された記録媒体において、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、
上記差異検出ステップにおいて検出した輝度レベルの差異を、予め設定された閾値と比較する比較ステップと、
上記差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較ステップにおける比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示ステップと、
上記表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、
上記表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させるためのプログラムが記録された記録媒体。
【請求項１】
撮影範囲を撮像することにより生成された画像を監視する監視装置において、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出手段と、
上記差異検出手段により検出された輝度レベルの差異を、予め設定された閾値と比較する比較手段と、
上記差異検出手段により輝度レベルの差異が検出された２枚以上の画像を同一画面上に並べて表示するとともに、上記比較手段による比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示手段と、
上記表示手段により表示されている何れか一の画像に対して処理動作を実行するための操作手段とを備え、
上記表示手段は、上記操作手段により実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させること
を特徴とする監視装置。
【請求項２】
上記表示手段は、同一画面上に並べて表示した各画像をスクロールさせるためのスクロールバーを表示し、上記操作手段により実行された一の画像に対する上記スクロールバーの処理動作に応じて、同一画面上に並べて表示した他の画像をスクロールさせること
を特徴とする請求項１記載の監視装置。
【請求項３】
上記表示手段は、上記操作手段により各画像の表示倍率を変更するための処理動作が実行された場合には、当該処理動作に応じて、同一画面上に並べて表示した各画像の表示倍率を同時に変更させること
を特徴とする請求項１記載の監視装置。
【請求項４】
上記表示手段は、上記操作手段を介して一の画像につき表示位置が指定された場合には、同一画面上に並べて表示した各画像を当該指定された表示位置へ移動させること
を特徴とする請求項１記載の監視装置。
【請求項５】
撮影方向を変化させて上記撮影範囲を撮像することにより、複数の単位画像からなるパノラマ画像を順次生成する撮像手段をさらに備え、
上記差異検出手段は、上記生成されたパノラマ画像を構成する一の単位画像と、当該単位画像よりも先に撮像された同一撮影方向上の単位画像との間で輝度レベルの差異を順次検出すること
を特徴とする請求項１記載の監視装置。
【請求項６】
上記表示手段は、上記差異検出手段による輝度レベルの差異の検出結果を上記差異検出枠毎に所定の情報とともに付加すること
を特徴とする請求項１記載の監視装置。
【請求項７】
上記差異検出手段は、原色成分毎に輝度レベルの差異を順次検出すること
を特徴とする請求項１記載の監視装置。
【請求項８】
上記差異検出枠の分割数並びに形状を選択するための選択手段を更に備えること
を特徴とする請求項１記載の監視装置。
【請求項９】
上記閾値を設定するための閾値設定手段を更に備えること
を特徴とする請求項１記載の監視装置。
【請求項１０】
上記表示手段における画面の照明方法を選択するための照明選択手段を更に備えること
を特徴とする請求項１記載の監視装置。
【請求項１１】
撮影範囲を撮像することにより生成された画像を監視する監視方法において、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、
上記差異検出ステップにおいて検出した輝度レベルの差異を、予め設定された閾値と比較する比較ステップと、
上記差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較ステップにおける比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示ステップと、
上記表示ステップにおいて表示する何れか一の画像に対して処理動作を実行させるための操作ステップとを有し、
上記表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させること
を特徴とする監視方法。
【請求項１２】
上記表示ステップでは、同一画面上に並べて表示した各画像をスクロールさせるためのスクロールバーを表示し、上記操作手段により実行された一の画像に対する上記スクロールバーの処理動作に応じて、同一画面上に並べて表示した他の画像をスクロールさせること
を特徴とする請求項１１記載の監視方法。
【請求項１３】
上記表示ステップでは、上記操作ステップにおいて、各画像の表示倍率を変更するための処理動作が実行された場合には、当該処理動作に応じて、同一画面上に並べて表示した各画像の表示倍率を同時に変更すること
を特徴とする請求項１１記載の監視方法。
【請求項１４】
上記表示ステップでは、上記操作ステップにおいて、一の画像につき表示位置が指定された場合には、同一画面上に並べて表示した各画像を当該指定された表示位置へ移動させること
を特徴とする請求項１１記載の監視方法。
【請求項１５】
撮影方向を変化させて上記撮影範囲を撮像することにより、複数の単位画像からなるパノラマ画像を順次生成する撮像ステップをさらに有し、
上記差異検出ステップでは、上記生成したパノラマ画像を構成する一の単位画像と、当該単位画像よりも先に撮像された同一撮影方向上の単位画像との間で輝度レベルの差異を順次検出すること
を特徴とする請求項１１記載の監視方法。
【請求項１６】
上記表示ステップでは、上記差異検出手段による輝度レベルの差異の検出結果を上記差異検出枠毎に所定の情報とともに付加すること
を特徴とする請求項１１記載の監視方法。
【請求項１７】
上記差異検出ステップでは、原色成分毎に輝度レベルの差異を順次検出すること
を特徴とする請求項１１記載の監視方法。
【請求項１８】
上記差異検出枠の分割数並びに形状を選択するための選択ステップを更に有すること
を特徴とする請求項１１記載の監視方法。
【請求項１９】
上記閾値を設定するための閾値設定ステップを更に有すること
を特徴とする請求項１１記載の監視方法。
【請求項２０】
上記表示手段における画面の照明方法を選択するための照明選択ステップを更に有すること
を特徴とする請求項１１記載の監視方法。
【請求項２１】
撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムにおいて、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、
上記差異検出ステップにおいて検出した輝度レベルの差異を、予め設定された閾値と比較する比較ステップと、
上記差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較ステップにおける比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示ステップと、
上記表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、
上記表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させるためのプログラム。
【請求項２２】
撮影範囲を撮像することにより生成された画像を監視することをコンピュータに実行させるためのプログラムが記録された記録媒体において、
上記生成された画像と、当該画像よりも先に撮像された同一撮影方向上にある少なくとも１枚の画像との間で輝度レベルの差異を差異検出枠毎に順次検出する差異検出ステップと、
上記差異検出ステップにおいて検出した輝度レベルの差異を、予め設定された閾値と比較する比較ステップと、
上記差異検出ステップにおいて輝度レベルの差異を検出した２枚以上の画像につき同一画面上に並べて表示するとともに、上記比較ステップにおける比較結果に応じて、表示すべき上記画像につき上記差異検出枠毎に所定の情報を付加する表示ステップと、
上記表示ステップにおいて表示する何れか一の画像に対して処理動作が実行される操作ステップとを有し、
上記表示ステップでは、上記操作ステップにおいて実行された一の画像に対する処理動作を、同一画面上に並べて表示した他の画像に反映させることをコンピュータに実行させるためのプログラムが記録された記録媒体。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２００６−１４２１５（Ｐ２００６−１４２１５Ａ）
【公開日】平成１８年１月１２日（２００６．１．１２）
【国際特許分類】
【出願番号】特願２００４−１９１９３６（Ｐ２００４−１９１９３６）
【出願日】平成１６年６月２９日（２００４．６．２９）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
【公開日】平成１８年１月１２日（２００６．１．１２）
【国際特許分類】
【出願日】平成１６年６月２９日（２００４．６．２９）
【出願人】（０００００２１８５）ソニー株式会社 (34,172)
【Ｆターム（参考）】
[ Back to top ]