画像処理装置
【課題】高負荷に耐え得る装置構成を用いることなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを記録、又は表示する。
【解決手段】受信した低解像度の撮影画像データと時刻情報とを記憶する低解像度画像記憶手段１３ａと、受信した高解像度の撮影画像データと時刻情報とを記憶する高解像度画像記憶手段１３ｂと、最後に記憶された低解像度の撮影画像データの時刻前後の高解像度の撮影画像データが記憶されているか否かを判定する画像判定手段１１ｃと、記憶されていると判定された場合、最後に記憶された低解像度の撮影画像データを用いて異常を検出する異常検出手段１１ｄと、異常が検出された場合に最後に記憶された低解像度の撮影画像データの時刻に最も近い時刻の高解像度の撮影画像を選択する画像選択手段１１ｅと、選択された高解像度の撮影画像データを光ディスクドライブ１４に記録させる出力制御手段１１ｆとを備える。
【解決手段】受信した低解像度の撮影画像データと時刻情報とを記憶する低解像度画像記憶手段１３ａと、受信した高解像度の撮影画像データと時刻情報とを記憶する高解像度画像記憶手段１３ｂと、最後に記憶された低解像度の撮影画像データの時刻前後の高解像度の撮影画像データが記憶されているか否かを判定する画像判定手段１１ｃと、記憶されていると判定された場合、最後に記憶された低解像度の撮影画像データを用いて異常を検出する異常検出手段１１ｄと、異常が検出された場合に最後に記憶された低解像度の撮影画像データの時刻に最も近い時刻の高解像度の撮影画像を選択する画像選択手段１１ｅと、選択された高解像度の撮影画像データを光ディスクドライブ１４に記録させる出力制御手段１１ｆとを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラとネットワークを介して接続され、カメラにより撮影された撮影画像データを受信し、受信した撮影画像データの画像解析結果に基づいて、撮影画像データを記録、又は表示する画像処理装置に関する。
【背景技術】
【０００２】
ホテル、商用ビル、又はコンビニエンスストア等には、犯罪防止を目的として、監視カメラと、この監視カメラが撮影した画像を解析する画像解析装置とを備えた監視カメラシステムが設置されることが多い。
【０００３】
また、昨今のネットワークの普及により、ネットワークに接続することができるネットワークカメラが普及してきている。そこで、このようなネットワークカメラと、ネットワークカメラが撮影した撮影画像データを受信し、受信した撮影画像データの画像解析を行う画像解析装置とを備えた監視カメラシステムがある。
【０００４】
ここで、ネットワークカメラは、撮影画像データを、例えば、７２０×４８０画素のフレーム画像を１秒間に３０枚の伝送レートで画像解析装置へ送信する。そこで、画像解析装置は、このような膨大なデータ量の撮影画像データについての画像解析処理を行う必要があり、この負荷に耐え得るだけの処理能力が必要であった。そのため、これを実現するためには、高性能なＣＰＵ（Central Processing Unit）を搭載する等、装置全体として製造費用などのコストが増大するという問題があった。
【０００５】
そこで、特許文献１には、カメラから入力された原画像から縮小画像を作成し、縮小画像を解析することで一次判定を行い、この一次判定で詳細に解析すべき領域を絞り込み、絞り込んだ領域について原画像を詳細に解析する画像センサ装置が提案されている。
【特許文献１】特開２００６−１２７１９５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の画像センサ装置では、カメラから入力された原画像から縮小画像を作成するので、この縮小する処理自体が装置にとって高負荷となっていた。そのため、特許文献１に記載の画像センサ装置を実現するには、高性能なＭＰＵ（Micro Processing Unit）を搭載する等、装置全体として製造費用などのコストが増大するという問題があった。
【０００７】
本発明は、上記問題に鑑みてなされたものであり、高負荷に耐え得る装置構成を用いることなく、画像解析により異常を検出し、異常時における画像を記録、又は強調表示することが可能な画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を解決するため、本発明に係る画像処理装置の第１の特徴は、カメラとネットワークを介して接続され、カメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、受信した低解像度の撮影画像データの画像解析結果に基づいて、受信した高解像度の撮影画像データを記録、又は表示する画像処理装置であって、カメラより受信した低解像度の撮影画像データと、この低解像度の撮影画像データを受信したときの時刻、又は低解像度の撮影画像データがカメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する低解像度画像記憶手段と、カメラより受信した高解像度の撮影画像データと、この高解像度の撮影画像データを受信したときの時刻、又は高解像度の撮影画像データがカメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する高解像度画像記憶手段と、低解像度画像記憶手段に最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻の前後所定時間内の時刻情報に対応する高解像度の撮影画像データが、高解像度画像記憶手段に記憶されているか否かを判定する画像判定手段と、画像判定手段により、高解像度画像記憶手段に記憶されていると判定された場合に、最後に記憶された低解像度の撮影画像データを用いて画像解析を行い、この画像解析結果に基づいて画像上の異常を検出する異常検出手段と、異常検出手段により、画像上の異常が検出された場合に、高解像度画像記憶手段から、最後に記憶された低解像度の撮影画像データに対応する時刻情報が示す時刻に最も近い時刻を示す時刻情報に対応する高解像度の撮影画像データを選択する画像選択手段と、選択された高解像度の撮影画像データを記録部に記録させ、又は選択された高解像度の撮影画像データを表示部に強調表示させる出力制御手段とを備えたことにある。
【０００９】
上記目的を解決するため、本発明に係る画像処理装置の第２の特徴は、異常検出手段は、画像判定手段により、高解像度画像記憶手段に記憶されていると判定された場合に、低解像度画像記憶手段に記憶された最も古い時刻情報に対応する低解像度の撮影画像データと、最後に記憶された低解像度の撮影画像データとの差分が所定の閾値以上である場合には、画像上の異常があると判定し、出力制御手段は、低解像度撮影画像記憶手段に、最後に記憶された低解像度の撮影画像データに対応する時刻情報より所定時間より前の時刻情報に対応する低解像度の撮影画像データを削除させると共に、選択された高解像度の撮影画像データを記録部に記録させ、又は選択された高解像度の撮影画像データを表示部に強調表示させるをことにある。
【００１０】
上記目的を解決するため、本発明に係る画像処理装置の第３の特徴は、異常検出手段は、画像判定手段により、高解像度画像記憶手段に記憶されていると判定された場合に、最後に記憶された低解像度の撮影画像データのうち、所定の色を示す画素数が所定の閾値以上である場合には、異常があると判定するをことにある。
【発明の効果】
【００１１】
本発明に係る画像処理装置によれば、高負荷に耐え得る装置構成を用いることなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを記録、又は強調表示することができる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明を実施するための最良の形態について図面を参照して説明する。
【実施例１】
【００１３】
本発明の実施例１では、ネットワークカメラを用いた監視カメラシステムに適用され、ネットワークカメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、最新の低画像の撮影画像データと所定時間前の低画像の撮影画像データとの差が閾値以上か否かによって異常を検出し、異常が検出された時刻付近の高解像度の撮影画像データを光ディスクに記憶する画像処理装置を例に挙げて説明する。
【００１４】
＜監視カメラシステムの構成＞
図１は、本発明の実施例１である画像処理装置を適用した監視カメラシステムの構成を示した構成図である。
【００１５】
図１に示すように、監視カメラシステム１００は、画像処理装置１と、ネットワークカメラＣ１及びＣ２と、サーバ３とを備え、各々はネットワーク２を介して接続されている。
【００１６】
ネットワークカメラＣ１及びＣ２は、図示しないが、レンズ等による光学系と、ＣＣＤ等の光電変換回路を有した撮像部と、撮像した画像を符号化する符号化部と、ネットワーク２に接続して通信するためのネットワークインタフェース部とを備えており、撮影した撮影画像データを符号化してネットワーク２へ送信する。また、ネットワークカメラＣ１及びＣ２は、解像度が異なる複数の撮影画像データを送信でき、例えば、VGA（Video Graphics Array：６４０×４８０画素）の画像とQQVGA（Quarter Quarter VGA：１６０×１２０画素）の撮影画像データとを送信できる。ここでは、VGAの画像を高解像度の撮影画像データ、QQVGAの画像を低解像度の撮影画像データとして説明する。なお、ネットワークカメラＣ１及びＣ２は、アナログカメラと、アナログカメラにより撮影されたアナログ撮影画像データをＡ／Ｄ（Analog／Digital）するＡ／Ｄ変換器と、Ａ／Ｄ変換された撮影画像データを符号化する符号化部と、ネットワーク２に接続して通信するためのネットワークインタフェース部とを備えた構成としてもよい。
【００１７】
サーバ３は、不図示ではあるが、ハードディスクや光ディスクドライブ等の記憶装置を備え、各種サービスを提供すると共に、画像処理装置１から受信した高解像度の撮影画像データを記憶装置に記憶する。
【００１８】
画像処理装置１は、ＣＰＵ１１と、ネットワークインタフェース１２と、メモリ１３と、光ディスクドライブ１４と、ハードディスク１５と、表示部１６とを備え、各々はバス２０を介して同図のごとく接続されている。
【００１９】
ネットワークインタフェース１２は、ネットワークカードなどの通信装置であり、このネットワークインタフェース１２を介してネットワーク２に接続することによって、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データを受信することができる。
【００２０】
メモリ１３は、その機能ブロックとして、低解像度画像記憶手段１３ａと、高解像度画像記憶手段１３ｂとを備える。
【００２１】
低解像度画像記憶手段１３ａは、ネットワークカメラＣ１及びＣ２より受信した低解像度の撮影画像データと、この低解像度の撮影画像データを受信した時刻、又は低解像度の撮影画像データがネットワークカメラＣ１及びＣ２より送信された時刻を示す時刻情報とを関連づけて記憶する。
【００２２】
高解像度画像記憶手段１３ｂは、ネットワークカメラＣ１及びＣ２より受信した高解像度の撮影画像データと、この高解像度の撮影画像データを受信した時刻、又は高解像度の撮影画像データがネットワークカメラＣ１及びＣ２より送信された時刻を示す時刻情報とを関連づけて記憶する。
【００２３】
光ディスクドライブ１４は、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した高解像度の撮影画像データを光ディスクに記録する。
【００２４】
ハードディスク１５には、オペレーティングシステムなどのプログラムの他に、本発明の実施例１である画像処理装置１が実行する画像処理プログラム等も記録されている。また、ハードディスク１５は、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した高解像度の撮影画像データを記録する。
【００２５】
なお、光ディスクドライブ１４に記録されるデータをハードディスク１５に記録するようにし、光ディスクドライブ１４を備えないようにしてもよい。
【００２６】
表示部１６は、液晶ディスプレイやＣＲＴディスプレイ等で構成され、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データを表示する。
【００２７】
なお、表示部１６は、画像処理装置１に内蔵されるものであってよいし、外部装置として画像処理装置１に接続されるものであってもよい。
【００２８】
画像処理装置１のＣＰＵ１１は、自装置の中枢的な制御を行い、画像処理プログラムを実行することによって、その機能上、受信画像判定手段１１ａと、記憶制御手段１１ｂと、画像判定手段１１ｃと、異常検出手段１１ｄと、画像選択手段１１ｅと、出力制御手段１１ｆとを実装する。
【００２９】
ＣＰＵ１１の受信画像判定手段１１ａは、ネットワークカメラＣ１及びＣ２から送信され、ネットワーク２を介してネットワークインタフェース１２で受信した撮影画像データが高解像度の撮影画像データであるか、又は低解像度の撮影画像データであるかを判定する。
【００３０】
ＣＰＵ１１の記憶制御手段１１ｂは、ＣＰＵ１１の受信画像判定手段１１ａにより受信した撮影画像データが低解像度の撮影画像データであると判定された場合には、受信した低解像度の撮影画像データをメモリ１３の低解像度画像記憶手段１３ａに記憶させる。一方、ＣＰＵ１１の受信画像判定手段１１ａにより受信した撮影画像データが高解像度の撮影画像データであると判定された場合には、受信した高解像度の撮影画像データをメモリ１３の高解像度画像記憶手段１３ｂに記憶させる。
【００３１】
画像判定手段１１ｃは、低解像度画像記憶手段１３ａに最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報に対応する高解像度の撮影画像データが、高解像度画像記憶手段１３ｂに記憶されているか否かを判定する。
【００３２】
異常検出手段１１ｄは、画像判定手段１１ｃにより、高解像度画像記憶手段１３ｂに記憶されていると判定された場合に、低解像度画像記憶手段１３ａに記憶された最も古い時刻情報に対応する低解像度の撮影画像データと、最後に記憶された低解像度の撮影画像データとの差分が所定の閾値以上である場合には、異常として検出する。
【００３３】
画像選択手段１１ｅは、異常検出手段１１ｄにより、異常が検出された場合に、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データに対応する時刻情報が示す時刻に最も近い時刻を示す時刻情報に対応する高解像度の撮影画像を選択する。
【００３４】
出力制御手段１１ｆは、低解像度画像記憶手段１３ａに、最後に記憶された低解像度の撮影画像データに対応する時刻情報より所定時間以前の時刻情報に対応する低解像度の撮影画像データを削除させると共に、選択された高解像度の撮影画像を光ディスクドライブ１４に記録させる。
【００３５】
＜監視カメラシステム１００の作用＞
次に、本発明の実施例１である画像処理装置１が適用された監視カメラシステム１００の作用について図面を参照して説明する。
【００３６】
図２は、本発明の実施例１である画像処理装置１が適用された監視カメラシステム１００における撮影画像データの送受信を説明した図であり、同図（ａ）は、撮影画像データをマルチキャストパケットで送受信した場合を説明した図であり、同図（ｂ）は、撮影画像データをユニキャストパケットで送受信した場合を説明した図である。
【００３７】
図２（ａ）に示すように、ネットワークカメラＣ１及びＣ２は、複数の撮影画像データを送信することが可能である。図２（ａ）では、ネットワークカメラＣ１及びＣ２が、マルチキャストｍ１で高解像度の撮影画像データをネットワーク２へ送信している。一般に、マルチキャストパケットはネットワーク２に接続された全ての機器に到達するので、ネットワークカメラＣ１及びＣ２から送信された高解像度の撮影画像データは、画像処理装置１に到達すると共に、サーバ３にも到達する。
【００３８】
同様に、ネットワークカメラＣ１及びＣ２は、マルチキャストｍ２で低解像度の撮影画像データをネットワーク２へ送信する。そして、ネットワークカメラＣ１及びＣ２から送信された低解像度の画像データは、画像処理装置１に到達すると共に、サーバ３にも到達する。
【００３９】
また、図２（ｂ）に示すように、ネットワークカメラＣ１及びＣ２は、複数のユニキャストパケットを送信することも可能である。図２（ｂ）に示した例では、ネットワークカメラＣ１及びＣ２は、ユニキャストｕ１で高解像度の画像データをネットワーク２へ送信し、ユニキャストｕ２で低解像度の画像データをネットワーク２へ送信する。一般に、ユニキャストパケットはネットワーク２内の特定の機器に到達するので、図２（ｂ）に示した例では、ネットワークカメラＣ１及びＣ２から送信された撮影画像データは指定された画像処理装置１のみに到達する。
【００４０】
このように、ネットワークカメラＣ１及びＣ２は、マルチキャストパケット、又はユニキャストパケットのいずれを用いて撮影画像データを送信してもよい。
【００４１】
また、ネットワークカメラＣ１及びＣ２は、マルチキャストパケット、又はユニキャストパケットのいずれを用いた場合においても、送信する撮影画像データに送信時の時刻情報を付加することもできる。具体的には、ネットワークカメラＣ１及びＣ２は、高解像度の撮影画像データに時刻情報を付加し、低解像度の撮影画像データにも同様に時刻情報を付加してネットワーク２へ送信することができる。時刻情報としては、例えば、RFC1889に記述されているRTP（Real-time Transport Protocol）のタイムスタンプを用いる。
【００４２】
ここで、ネットワークカメラＣ１及びＣ２が、撮影画像データを送信するタイミングは、ネットワークカメラ毎に設定されており、例えば、ｔ１時点に高解像度の撮影画像データを送信し、ｔ２時点に低解像度の撮影画像データを送信する等のように、高解像度の撮影画像データと低解像度の撮影画像データと順に送信するようにしてもよいし、高解像度の撮影画像データと低解像度の撮影画像データと同時に送信するようにしてもよい。
【００４３】
また、ネットワークカメラＣ１及びＣ２が送信した撮影画像データは、送信された順に画像処理装置１に到達するとは限らない。これは送信する撮影画像データの大きさや、ネットワーク２の負荷状態等に起因し、例えば、ネットワークカメラＣ１及びＣ２が、ｔ１時点に高解像度の撮影画像データを送信し、その後のｔ２時点に低解像度の撮影画像データを送信した場合において、画像処理装置１は、ｔ３時点に低解像度の撮影画像データを受信し、その後のｔ４時点に高解像度の撮影画像データを受信する場合もある。
【００４４】
このようにして、画像処理装置１は、ネットワークカメラＣ１及びＣ２から送信された撮影画像データを、ネットワーク２を介して受信する。そして、撮影画像データを受信した画像処理装置１は、以下に詳述するように、画像一時記憶処理、及び画像記録処理を実行する。
【００４５】
≪画像一時記憶処理≫
図３は、本発明の実施例１である画像処理装置１における画像一時記憶処理の処理手順を示したフローチャートである。
【００４６】
図３に示すように、画像処理装置１の受信画像判定手段１１ａは、ネットワークカメラＣ１及びＣ２から送信された撮影画像データを、ネットワーク２を介してネットワークインタフェース１２で受信し取得する（ステップＳ１０１）。
【００４７】
次に、受信画像判定手段１１ａは、受信した撮影画像データが高解像度の撮影画像データであるか、又は低解像度の撮影画像データであるかを判定する（ステップＳ１０２）。具体的には、高解像度の撮影画像データを受信する際のポート番号と、低解像度の撮影画像データを受信する際のポート番号とを異なるポート番号として割り当て、受信したパケットの宛先ポート番号によって、受信した撮影画像データが高解像度の撮影画像データであるか、又は低解像度の撮影画像データであるかを判定する。
【００４８】
ステップＳ１０２において、受信画像判定手段１１ａが、受信した撮影画像データが低解像度の撮影画像データであると判定した場合には、受信した低解像度の撮影画像データに時刻情報が付加されているか否かを判定する（ステップＳ１０３）。
【００４９】
ステップ１０３において、受信した低解像度の撮影画像データに時刻情報が付加されていると判定した場合には、受信画像判定手段１１ａは、受信した低解像度の撮影画像データとこの低解像度の撮影画像データに付加された時刻情報とを関連づけて、メモリ１３の低解像度画像記憶手段１３ａに記憶させる（ステップＳ１０５）。
【００５０】
一方、ステップＳ１０３において、受信画像判定手段１１ａが、受信した低解像度の撮影画像データに時刻情報が付加されていないと判定した場合には、この低解像度の撮影画像データを受信した時刻を時刻情報として生成し（ステップＳ１０４）、この生成した時刻情報と受信した低解像度の撮影画像データとを関連づけて、メモリ１３の低解像度画像記憶手段１３ａに記憶させる（ステップＳ１０５）。
【００５１】
また、ステップＳ１０２において、受信画像判定手段１１ａが、受信した撮影画像データが高解像度の撮影画像データであると判定した場合には、ステップＳ１０３の処理と同様に、受信した高解像度の撮影画像データに時刻情報が付加されているか否かを判定する（ステップＳ１０６）。
【００５２】
ステップＳ１０６において、受信画像判定手段１１ａが、受信した高解像度の撮影画像データに時刻情報が付加されていると判定した場合には、受信した高解像度の撮影画像データとこの高解像度の撮影画像データに付加された時刻情報とを関連づけて、メモリ１３の高解像度画像記憶手段１３ｂに記憶させる（ステップＳ１０８）。
【００５３】
一方、ステップＳ１０６において、受信画像判定手段１１ａが、受信した高解像度の撮影画像データに時刻情報が付加されていないと判定した場合には、ステップＳ１０７の処理と同様に、この高解像度の撮影画像データを受信した時刻を時刻情報として生成し（ステップＳ１０７）、この生成した時刻情報と受信した高解像度の撮影画像データとを関連づけて、メモリ１３の高解像度画像記憶手段１３ｂに記憶させる（ステップＳ１０８）。
【００５４】
≪画像記録処理≫
図４は、本発明の実施例１である画像処理装置１における画像記録処理の処理手順を示したフローチャートである。
【００５５】
まず、ＣＰＵ１１の画像判定手段１１ｃは、記憶制御手段１１ｂにより新たに低解像度の撮影画像データが記憶されたか否かを判定する（ステップＳ２０１）。
【００５６】
ステップＳ２０１において、新たに低解像度の撮影画像データが記憶されたと判定した場合、この新たに記憶された、即ち低解像度画像記憶手段１３ａに最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報に対応する高解像度の撮影画像データが記憶されているか否かを判定する（ステップＳ２０２）。
【００５７】
具体的には、画像判定手段１１ｃは、メモリ１３の低解像度画像記憶手段１３ａから、最後に記憶された低解像度の撮影画像データに関連づけられた時刻情報を読み出す。そして、画像判定手段１１ｃは、メモリ１３の高解像度画像記憶手段１３ｂから、高解像度の撮影画像データに関連付けられた時刻情報を読み出し、読み出した時刻情報の中に、最後に記憶された低解像度の撮影画像データに関連付けられた時刻情報が示す時刻の前後の時刻に対応する時刻情報が存在するか否かを判定する。そして、この時刻情報が存在していれば、画像判定手段１１ｃは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報に対応する高解像度の撮影画像データが記憶されていると判定する。
【００５８】
ステップＳ２０２において、該当の高解像度の撮影画像データが記憶されていると判定された場合、異常検出手段１１ｄは、画像解析により、最後に記憶された低解像度の撮影画像データと最も古い低解像度の撮影画像データとの差分を計算し、この結果により異常があるか否かを判定する（ステップＳ２０３，Ｓ２０４）。
【００５９】
具体的には、異常検出手段１１ｄは、メモリ１３の低解像度画像記憶手段１３ａから、最も古い時刻情報に関連づけられた低解像度の撮影画像データを読み出す。そして、異常検出手段１１ｄは、読み出した低解像度の撮影画像データと最後に記憶された低解像度の撮影画像データとをそれぞれ所定の画像エリアに分割し、分割された画像エリア毎に両撮影画像データの差分を算出する。そして、異常検出手段１１ｄは、算出した差分を累積加算し、この累積加算された差分合計値が予め定めた閾値を越えている場合には、異常として検出する。
【００６０】
ここで、この閾値は、高すぎると両撮影画像データが常に類似すると判定され、異常を検出できなくなり、低すぎると両撮影画像データの差が例えばノイズのような微少な場合でも異常を検出してしまう。そのため、予め提供者等が実測に基づいた適正な値を予め算出し、提供者や利用者等が予め適正な値を設定しておく必要がある。
【００６１】
次に、異常検出手段１１ｄにより異常が検出された場合には、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択する（ステップＳ２０５）。
【００６２】
そして、出力制御手段１１ｆは、光ディスクドライブ１４を制御して、画像選択手段１１ｅにより選択された高解像度の撮影画像データを光ディスクに記録させる（ステップＳ２０６）。
【００６３】
なお、出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを光ディスクに記憶させる替わりに、選択された高解像度の撮影画像データをハードディスク１５に記憶させるようにしてもよいし、ネットワークインタフェース１２を介して、ネットワーク２に接続されたサーバ３が内蔵するハーディスクに記憶させるようにしてもよい。
【００６４】
次に、出力制御手段１１ｆは、ステップＳ２０５において選択された高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ２０７）。
【００６５】
さらに、出力制御手段１１ｆは、ステップＳ２０５において選択された高解像度の撮影画像データの時刻情報が示す時刻より古い時刻情報に関連づけられた高解像度の撮影画像データを時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ２０９）。
【００６６】
次に、出力制御手段１１ｆは、所定時間より前の時刻情報に関連づけられた低解像度の撮影画像データをこの時刻情報と共に、メモリ１３の低解像度画像記憶手段１３ａから削除する（ステップＳ２１０）。
【００６７】
ここで、この所定時間は長すぎると、大容量のメモリ１３を備える必要があり、装置のコストが高くなる。また所定時間が短すぎると、ネットワークカメラＣ１及びＣ２が撮影する被写体の動きが遅い場合、異常を検出できなくなる。そのため、予め提供者等が実測に基づいた適正な値を予め算出し、提供者や利用者等が予め適正な値を設定しておく必要がある。
【００６８】
一方、ステップＳ２０４において、異常検出手段１１ｄにより異常が検出されない場合は、ステップＳ２０５の処理と同様に、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択し、処理をステップＳ２０９へ移行する（ステップＳ２０８）。
【００６９】
なお、ステップＳ２０３，Ｓ２０４において、異常検出手段１１ｄは、分割された画像エリア毎に両撮影画像データの差分を算出し、この差分を累積加算した差分合計値が予め定めた閾値を越えている場合には、異常として検出したが、さらに高解像度の撮影画像データを用いて画像解析を行い、その画像解析結果により異常を検出するようにしてもよい。
【００７０】
具体的には、異常検出手段１１ｄは、分割された低解像度の撮影画像データにおける画像エリアのうち、差分が高い画像エリアを抽出する。そして、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを高解像度画像記憶手段１３ｂから読み出すと共に、最も古い時刻情報に関連づけられた高解像度の撮影画像データを高解像度画像記憶手段１３ｂから読み出す。そして、異常検出手段１１ｄは、読み出されたこれらの高解像度の撮影画像データにおいて、抽出された差分が高い低解像度の画像エリアに対応する高解像度の画像エリアを抽出し、抽出した高解像度の画像エリアについて、さらに所定の第２の画像エリアに分割し、分割された第２の画像エリア毎に両高解像度の画像エリアの差分を算出する。そして、異常検出手段１１ｄは、算出した差分を累積加算し、この累積加算された第２の差分値が予め定めた第２の閾値を越えている場合には、異常として検出するようにしてもよい。
【００７１】
このように、本発明の実施例１である画像処理装置１によれば、低解像度の撮影画像データに基づいて、異常を検出したか否かを判定し、異常を検出した場合のみ高解像度の撮影画像データを光ディスクに記録するので、画像の縮小等の装置にとって高負荷が掛かる処理を伴うことなく、異常を検出した付近の高解像度の撮影画像データを記録することができる。
【００７２】
図５は、本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順に到達した場合の画像一時記憶処理及び画像記録処理のタイムチャートである。なお、図５中のＴ１〜Ｔ１９は、時間軸上のある時点を示しており、時間の経過に沿って符号を昇順で示している。
【００７３】
図５に示すように、画像処理装置１は、Ｔ１１時点において、ネットワークカメラＣ１からＴ１時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信する。そして、画像処理装置１は、この受信した低解像度の撮影画像データをメモリ１３に記憶する。同様に、Ｔ１２時点において、ネットワークカメラＣ１からＴ２時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶し、Ｔ１３時点において、ネットワークカメラＣ１からＴ４時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信してメモリ１３に記憶し、Ｔ１４時点において、ネットワークカメラＣ１からＴ５時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶している。ここで、Ｔ２時点〜Ｔ４時点までの時間の方が、Ｔ４時点〜Ｔ５時点までの時間より長いとする。
【００７４】
そして、Ｔ１３時点において、新たに低解像度の撮影画像データが記憶され、かつ、Ｔ１４時点において、最後に記憶されたＴ４時点の低解像度の撮影画像データの前後の時刻情報であるＴ２時点及びＴ５時点の高解像度の撮影画像データが記憶されているので、Ｔ１４時点において、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データに基づいて、画像解析を開始する。そして、Ｔ１５時点において、異常検出手段１１ｄは、解析の結果、異常を検出する。
【００７５】
次に、異常が検出されたので、Ｔ１６時点において、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、Ｔ４時点に最も近い時刻であるＴ５時点の時刻情報に関連付けられた高解像度の撮影画像データを選択し、出力制御手段１１ｆは、光ディスクドライブ１４を制御して、この選択されたＴ５時点の高解像度の撮影画像データを光ディスクに記録させる。
【００７６】
そして、Ｔ１７時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ５時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に削除する。
【００７７】
次に、Ｔ１８時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ５時点の高解像度の撮影画像データの時刻情報が示す時刻より古い時刻であるＴ２時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、削除する。
【００７８】
さらに、Ｔ１９時点において、出力制御手段１１ｆは、メモリ１３の低解像度画像記憶手段１３ａから、所定時間より前の時刻であるＴ１時点の低解像度の撮影画像データをこの時刻情報と共に、削除する。
【００７９】
図６は、本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順と到達した順が一致しない場合の処理の画像一時記憶処理及び画像記録処理を示したタイムチャートである。なお、図６中のＴ１〜Ｔ３０は、時間軸上のある時点を示しており、時間の経過に沿って符号を昇順で示している。
【００８０】
図６に示すように、画像処理装置１は、Ｔ２１時点において、ネットワークカメラＣ１からＴ１時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信する。そして、画像処理装置１は、この受信した高解像度の撮影画像データと時刻情報とを関連づけてメモリ１３に記憶する。同様に、Ｔ２２時点において、ネットワークカメラＣ１からＴ２時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信してメモリ１３に記憶し、Ｔ２３時点において、ネットワークカメラＣ１からＴ３時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶する。そして、Ｔ２４時点において、ネットワークカメラＣ１からＴ２４時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶する。そして、Ｔ２５時点において、ネットワークカメラＣ１からＴ５時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信してメモリ１３に記憶する。ネットワーク２では、データを送信した順序でデータが受信されるとは限らないので、ここではＴ５時点に送信された撮影画像データよりもＴ２４時点で送信された撮影画像データのほうが先に受信されている。ここで、Ｔ５時点〜Ｔ２４時点までの時間の方が、Ｔ３時点〜Ｔ５時点までの時間より長いとする。
【００８１】
そして、Ｔ２５時点において、新たに低解像度の撮影画像データが記憶され、かつ、最後に記憶されたＴ５時点の低解像度の撮影画像データの前後の時刻情報であるＴ３時点及びＴ２４時点の高解像度の撮影画像データが記憶されているので、Ｔ２５時点において、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データに基づいて、画像解析を開始する。そして、Ｔ２６時点において、異常検出手段１１ｄは、解析の結果、異常を検出する。
【００８２】
次に、異常が検出されたので、Ｔ２７時点において、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、Ｔ５時点に最も近い時刻であるＴ３時点の時刻情報に関連付けられた高解像度の撮影画像データを選択し、出力制御手段１１ｆは、光ディスクドライブ１４を制御して、この選択されたＴ３時点の高解像度の撮影画像データを光ディスクに記録させる。
【００８３】
そして、Ｔ２８時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ３時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に削除する。
【００８４】
次に、Ｔ２９時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ３時点の高解像度の撮影画像データの時刻情報が示す時刻より古い時刻であるＴ１時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、削除する。
【００８５】
さらに、Ｔ３０時点において、出力制御手段１１ｆは、メモリ１３の低解像度画像記憶手段１３ａから、所定時間より前の時刻であるＴ２時点の低解像度の撮影画像データをこの時刻情報と共に、削除する。
【００８６】
このように、本発明の実施例１である画像処理装置１によれば、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順と到達した順が一致しない場合においても、低解像度の撮影画像データに基づいて、異常を検出したか否かを判定することができる。そして、異常を検出した場合のみ高解像度の撮影画像データを光ディスクに記憶するので、画像の縮小等の装置にとって高負荷がかかる処理を伴うことなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを記録することができる。
【００８７】
また、本発明の実施例１である画像処理装置１によれば、差分合計値に基づいて、異常を検出するので、ネットワークカメラＣ１及びＣ２によって、撮影された画像に変化があった場合に、変化があった高解像度の撮影画像データを記録することができる。
【実施例２】
【００８８】
本発明の実施例２では、ネットワークカメラを用いた監視カメラシステムに適用され、ネットワークカメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、低画像の撮影画像データについて特定色が閾値以上であるか否かを判定することによって、異常を検出し、異常が検出された時刻付近の高解像度の撮影画像データを表示部に強調表示する画像処理装置を例に挙げて説明する。
【００８９】
＜監視カメラシステムの構成＞
図７は、本発明の実施例２である画像処理装置を適用した監視カメラシステムの構成を示した構成図である。
【００９０】
図７に示すように、監視カメラシステム１０１は、画像処理装置１０と、ネットワークカメラＣ１及びＣ２と、サーバ３と、表示装置４とを備え、各々はネットワーク２を介して接続されている。
【００９１】
表示装置４は、液晶ディスプレイなどであり、画像処理装置１０からの信号により、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データなどを受信して表示する。また、画像処理装置１からの要求により、画像処理装置１のＣＰＵ１１の画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示する。
【００９２】
なお、図７に示すネットワークカメラＣ１及びＣ２と、サーバ３とは、図１に示した本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００に備えられたものと同一構成を有するので、説明を省略する。
【００９３】
画像処理装置１は、ＣＰＵ１１と、ネットワークインタフェース１２と、メモリ１３と、光ディスクドライブ１４と、ハードディスク１５と、表示部１６とを備え、各々はバス２０を介して同図のごとく接続されている。なお、ネットワークインタフェース１２と、メモリ１３と、光ディスクドライブ１４と、ハードディスク１５とは、図１に示した本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００に備えられたものと同一であるので、説明を省略する。
【００９４】
画像処理装置１のＣＰＵ１１は、自装置の中枢的な制御を行い、画像解析プログラムを実行することによって、その機能上、受信画像判定手段１１ａと、記憶制御手段１１ｂと、画像判定手段１１ｃと、異常検出手段１１ｄと、画像選択手段１１ｅと、出力制御手段１１ｆとを実装する。
【００９５】
異常検出手段１１ｄは、画像判定手段１１ｃにより、高解像度画像記憶手段１３ｂに記憶されている判定された場合に、最後に記憶された低解像度の撮影画像データのうち、所定の色を示す画素数が所定の閾値以上である場合には、異常として検出する。
【００９６】
出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示させる。
【００９７】
なお、受信画像判定手段１１ａと、記憶制御手段１１ｂと、画像判定手段１１ｃと、画像選択手段１１ｅとは、図１に示した本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００に備えられたものと同一であるので、説明を省略する。
【００９８】
表示部１６は、液晶ディスプレイやＣＲＴディスプレイ等で構成され、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データを表示する。また、出力制御手段１１ｆの指示により、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示する。
【００９９】
＜監視カメラシステム１００の作用＞
次に、本発明の実施例２である画像処理装置１０が適用された監視カメラシステム１０１の作用について図面を参照して説明する。
【０１００】
本発明の実施例２である画像処理装置１０は、本発明の実施例１である画像処理装置１と同様に、ネットワークカメラＣ１及びＣ２から、マルチキャストパケット、又はユニキャストパケット等を用いて撮影画像データをネットワーク２を介して受信する。
【０１０１】
そして、撮影画像データを受信した画像処理装置１０は、画像一時記憶処理、及び画像強調表示処理を行う。ここで、画像一時記憶処理については、本発明の実施例１である画像処理装置１における画像一時記憶処理と同一であるので、説明を省略する。
【０１０２】
≪画像強調表示処理≫
図８は、本発明の実施例２である画像処理装置１０における画像強調表示処理の処理手順を示したフローチャートである。
【０１０３】
まず、ＣＰＵ１１の画像判定手段１１ｃは、記憶制御手段１１ｂにより新たに低解像度の撮影画像データが記憶されたか否かを判定する（ステップＳ３０１）。
【０１０４】
ステップＳ３０１において、新たに低解像度の撮影画像データが記憶されたと判定した場合、この新たに記憶された、即ち低解像度画像記憶手段１３ａに最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報を有する高解像度の撮影画像データが記憶されているか否かを判定する（ステップＳ３０２）。
【０１０５】
具体的には、画像判定手段１１ｃは、メモリ１３の低解像度画像記憶手段１３ａから、最後に記憶された低解像度の撮影画像データに関連づけられた時刻情報を読み出す。そして、画像判定手段１１ｃは、メモリ１３の高解像度画像記憶手段１３ｂから、高解像度の撮影画像データに関連付けられた時刻情報を読み出し、読み出した時刻情報の中に、最後に記憶された低解像度の撮影画像データに関連付けられた時刻情報が示す時刻の前後の時刻に対応する時刻情報が存在するか否かを判定する。そして、この時刻情報が存在していれば、画像判定手段１１ｃは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報を有する高解像度の撮影画像データが記憶されていると判定する。
【０１０６】
ステップＳ３０２において、該当の高解像度の撮影画像データが記憶されていると判定された場合、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データの画像解析を行い、異常があるか否かを判定する（ステップＳ３０３）。具体的には、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データのうち、例えば、肌色を示す画素数が所定の閾値以上である場合には、異常として検出する。
【０１０７】
ここで、この閾値は、高すぎると人間が撮影されているにもかかわらず、異常を検出できなくなり、低すぎると人間以外の小さな肌色を有する物体が撮影された場合にも異常を検出してしまう。そのため、予め提供者等が実測に基づいた適正な値を予め算出し、提供者や利用者等が予め適正な値を設定しておく必要がある。
【０１０８】
次に、異常検出手段１１ｄにより異常が検出された場合には、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択する（ステップＳ３０５）。
【０１０９】
次に、出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調して表示させる（ステップＳ３０６）。具体的には、出力制御手段１１ｆは、表示部１６に選択された高解像度の撮影画像データを表示させる共に、表示された高解像度の撮影画像データの表示エリアの周りに赤い枠を表示させたり、高解像度の撮影画像データの表示エリア上の一部に、赤いランプの絵を表示させる。
【０１１０】
なお、出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調して表示させる替わりに、ネットワークインタフェース１２を介して、ネットワーク２に接続された表示装置４に画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示させるようにしてもよい。
【０１１１】
次に、出力制御手段１１ｆは、ステップＳ３０５において選択された高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ３０７）。
【０１１２】
さらに、出力制御手段１１ｆは、ステップＳ３０５において選択された高解像度の撮影画像データの時刻情報が示す時刻より古い時刻情報に関連づけられた高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ３０９）。
【０１１３】
次に、出力制御手段１１ｆは、最後に記憶された低解像度の撮影画像データをこの時刻情報と共に、メモリ１３の低解像度画像記憶手段１３ａから削除する（ステップＳ３１０）。
【０１１４】
一方、ステップＳ３０４において、異常検出手段１１ｄにより異常が検出されない場合は、ステップＳ３０５の処理と同様に、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択し、処理をステップＳ３０９へ移行する（ステップＳ３０８）。
【０１１５】
なお、ステップステップＳ３０３，Ｓ３０４において、異常検出手段１１ｄは、肌色を示す画素数が所定の閾値以上である場合には、異常として検出したが、さらに高解像度の撮影画像データを用いて画像解析を行い、その画像解析結果により異常を検出するようにしてもよい。
【０１１６】
具体的には、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを高解像度画像記憶手段１３ｂから読み出す。そして、読み出された高解像度の撮影画像データから、低解像度の撮影画像データにおいて肌色を示す画素を含む画像エリアに対応する高解像度の画像エリアを抽出し、抽出した高解像度の画像エリアについて、人間の顔の色彩パターンと類似するか否かを判定し、この判定結果により、抽出した高解像度の画像エリアに人間の顔の画像が含まれると判定した場合には、異常として検出するようにしてもよい。
【０１１７】
このように、本発明の実施例２である画像処理装置１０によれば、低解像度の撮影画像データに基づいて、画像解析を行い、その画像解析結果により異常を検出したか否かを判定し、異常を検出した場合のみ高解像度の撮影画像データを強調表示するので、画像の縮小等の装置にとって高負荷が掛かる処理を伴うことなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを強調表示することができる。
【０１１８】
また、本発明の実施例２である画像処理装置１０によれば、肌色の画素数に基づいて、異常を検出するので、ネットワークカメラＣ１及びＣ２によって、人間が撮影された場合に、人間が撮影された高解像度の撮影画像データを強調表示することができる。
【図面の簡単な説明】
【０１１９】
【図１】本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００の構成を示した構成図である。
【図２】本発明の実施例１である画像処理装置１が適用された監視カメラシステム１００における撮影画像データの送受信を説明した図である。
【図３】本発明の実施例１である画像処理装置１における画像一時記憶処理の処理手順を示したフローチャートである。
【図４】本発明の実施例１である画像処理装置１における画像記録処理の処理手順を示したフローチャートである。
【図５】本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順に到達した場合の画像一時記憶処理及び画像記録処理のタイムチャートである。
【図６】本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順と到達した順が一致しない場合の処理の画像一時記憶処理及び画像記録処理を示したタイムチャートである。
【図７】本発明の実施例２である画像処理装置を適用した監視カメラシステム１０１の構成を示した構成図である。
【図８】本発明の実施例２である画像処理装置１０における画像強調表示処理の処理手順を示したフローチャートである。
【符号の説明】
【０１２０】
１，１０…画像処理装置
２…ネットワーク
３…サーバ
４…表示装置
１１…ＣＰＵ
１１ａ…受信画像判定手段
１１ｂ…記憶制御手段
１１ｃ…画像判定手段
１１ｄ…異常検出手段
１１ｅ…画像選択手段
１１ｆ…出力制御手段
１３…メモリ
１３ａ…低解像度画像記憶手段
１３ｂ…高解像度画像記憶手段
１４…光ディスクドライブ（記録部）
１５…ハードディスク（記録部）
１６…表示部
２０…バス
１００，１０１…監視カメラシステム
【技術分野】
【０００１】
本発明は、カメラとネットワークを介して接続され、カメラにより撮影された撮影画像データを受信し、受信した撮影画像データの画像解析結果に基づいて、撮影画像データを記録、又は表示する画像処理装置に関する。
【背景技術】
【０００２】
ホテル、商用ビル、又はコンビニエンスストア等には、犯罪防止を目的として、監視カメラと、この監視カメラが撮影した画像を解析する画像解析装置とを備えた監視カメラシステムが設置されることが多い。
【０００３】
また、昨今のネットワークの普及により、ネットワークに接続することができるネットワークカメラが普及してきている。そこで、このようなネットワークカメラと、ネットワークカメラが撮影した撮影画像データを受信し、受信した撮影画像データの画像解析を行う画像解析装置とを備えた監視カメラシステムがある。
【０００４】
ここで、ネットワークカメラは、撮影画像データを、例えば、７２０×４８０画素のフレーム画像を１秒間に３０枚の伝送レートで画像解析装置へ送信する。そこで、画像解析装置は、このような膨大なデータ量の撮影画像データについての画像解析処理を行う必要があり、この負荷に耐え得るだけの処理能力が必要であった。そのため、これを実現するためには、高性能なＣＰＵ（Central Processing Unit）を搭載する等、装置全体として製造費用などのコストが増大するという問題があった。
【０００５】
そこで、特許文献１には、カメラから入力された原画像から縮小画像を作成し、縮小画像を解析することで一次判定を行い、この一次判定で詳細に解析すべき領域を絞り込み、絞り込んだ領域について原画像を詳細に解析する画像センサ装置が提案されている。
【特許文献１】特開２００６−１２７１９５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に記載の画像センサ装置では、カメラから入力された原画像から縮小画像を作成するので、この縮小する処理自体が装置にとって高負荷となっていた。そのため、特許文献１に記載の画像センサ装置を実現するには、高性能なＭＰＵ（Micro Processing Unit）を搭載する等、装置全体として製造費用などのコストが増大するという問題があった。
【０００７】
本発明は、上記問題に鑑みてなされたものであり、高負荷に耐え得る装置構成を用いることなく、画像解析により異常を検出し、異常時における画像を記録、又は強調表示することが可能な画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を解決するため、本発明に係る画像処理装置の第１の特徴は、カメラとネットワークを介して接続され、カメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、受信した低解像度の撮影画像データの画像解析結果に基づいて、受信した高解像度の撮影画像データを記録、又は表示する画像処理装置であって、カメラより受信した低解像度の撮影画像データと、この低解像度の撮影画像データを受信したときの時刻、又は低解像度の撮影画像データがカメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する低解像度画像記憶手段と、カメラより受信した高解像度の撮影画像データと、この高解像度の撮影画像データを受信したときの時刻、又は高解像度の撮影画像データがカメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する高解像度画像記憶手段と、低解像度画像記憶手段に最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻の前後所定時間内の時刻情報に対応する高解像度の撮影画像データが、高解像度画像記憶手段に記憶されているか否かを判定する画像判定手段と、画像判定手段により、高解像度画像記憶手段に記憶されていると判定された場合に、最後に記憶された低解像度の撮影画像データを用いて画像解析を行い、この画像解析結果に基づいて画像上の異常を検出する異常検出手段と、異常検出手段により、画像上の異常が検出された場合に、高解像度画像記憶手段から、最後に記憶された低解像度の撮影画像データに対応する時刻情報が示す時刻に最も近い時刻を示す時刻情報に対応する高解像度の撮影画像データを選択する画像選択手段と、選択された高解像度の撮影画像データを記録部に記録させ、又は選択された高解像度の撮影画像データを表示部に強調表示させる出力制御手段とを備えたことにある。
【０００９】
上記目的を解決するため、本発明に係る画像処理装置の第２の特徴は、異常検出手段は、画像判定手段により、高解像度画像記憶手段に記憶されていると判定された場合に、低解像度画像記憶手段に記憶された最も古い時刻情報に対応する低解像度の撮影画像データと、最後に記憶された低解像度の撮影画像データとの差分が所定の閾値以上である場合には、画像上の異常があると判定し、出力制御手段は、低解像度撮影画像記憶手段に、最後に記憶された低解像度の撮影画像データに対応する時刻情報より所定時間より前の時刻情報に対応する低解像度の撮影画像データを削除させると共に、選択された高解像度の撮影画像データを記録部に記録させ、又は選択された高解像度の撮影画像データを表示部に強調表示させるをことにある。
【００１０】
上記目的を解決するため、本発明に係る画像処理装置の第３の特徴は、異常検出手段は、画像判定手段により、高解像度画像記憶手段に記憶されていると判定された場合に、最後に記憶された低解像度の撮影画像データのうち、所定の色を示す画素数が所定の閾値以上である場合には、異常があると判定するをことにある。
【発明の効果】
【００１１】
本発明に係る画像処理装置によれば、高負荷に耐え得る装置構成を用いることなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを記録、又は強調表示することができる。
【発明を実施するための最良の形態】
【００１２】
以下、本発明を実施するための最良の形態について図面を参照して説明する。
【実施例１】
【００１３】
本発明の実施例１では、ネットワークカメラを用いた監視カメラシステムに適用され、ネットワークカメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、最新の低画像の撮影画像データと所定時間前の低画像の撮影画像データとの差が閾値以上か否かによって異常を検出し、異常が検出された時刻付近の高解像度の撮影画像データを光ディスクに記憶する画像処理装置を例に挙げて説明する。
【００１４】
＜監視カメラシステムの構成＞
図１は、本発明の実施例１である画像処理装置を適用した監視カメラシステムの構成を示した構成図である。
【００１５】
図１に示すように、監視カメラシステム１００は、画像処理装置１と、ネットワークカメラＣ１及びＣ２と、サーバ３とを備え、各々はネットワーク２を介して接続されている。
【００１６】
ネットワークカメラＣ１及びＣ２は、図示しないが、レンズ等による光学系と、ＣＣＤ等の光電変換回路を有した撮像部と、撮像した画像を符号化する符号化部と、ネットワーク２に接続して通信するためのネットワークインタフェース部とを備えており、撮影した撮影画像データを符号化してネットワーク２へ送信する。また、ネットワークカメラＣ１及びＣ２は、解像度が異なる複数の撮影画像データを送信でき、例えば、VGA（Video Graphics Array：６４０×４８０画素）の画像とQQVGA（Quarter Quarter VGA：１６０×１２０画素）の撮影画像データとを送信できる。ここでは、VGAの画像を高解像度の撮影画像データ、QQVGAの画像を低解像度の撮影画像データとして説明する。なお、ネットワークカメラＣ１及びＣ２は、アナログカメラと、アナログカメラにより撮影されたアナログ撮影画像データをＡ／Ｄ（Analog／Digital）するＡ／Ｄ変換器と、Ａ／Ｄ変換された撮影画像データを符号化する符号化部と、ネットワーク２に接続して通信するためのネットワークインタフェース部とを備えた構成としてもよい。
【００１７】
サーバ３は、不図示ではあるが、ハードディスクや光ディスクドライブ等の記憶装置を備え、各種サービスを提供すると共に、画像処理装置１から受信した高解像度の撮影画像データを記憶装置に記憶する。
【００１８】
画像処理装置１は、ＣＰＵ１１と、ネットワークインタフェース１２と、メモリ１３と、光ディスクドライブ１４と、ハードディスク１５と、表示部１６とを備え、各々はバス２０を介して同図のごとく接続されている。
【００１９】
ネットワークインタフェース１２は、ネットワークカードなどの通信装置であり、このネットワークインタフェース１２を介してネットワーク２に接続することによって、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データを受信することができる。
【００２０】
メモリ１３は、その機能ブロックとして、低解像度画像記憶手段１３ａと、高解像度画像記憶手段１３ｂとを備える。
【００２１】
低解像度画像記憶手段１３ａは、ネットワークカメラＣ１及びＣ２より受信した低解像度の撮影画像データと、この低解像度の撮影画像データを受信した時刻、又は低解像度の撮影画像データがネットワークカメラＣ１及びＣ２より送信された時刻を示す時刻情報とを関連づけて記憶する。
【００２２】
高解像度画像記憶手段１３ｂは、ネットワークカメラＣ１及びＣ２より受信した高解像度の撮影画像データと、この高解像度の撮影画像データを受信した時刻、又は高解像度の撮影画像データがネットワークカメラＣ１及びＣ２より送信された時刻を示す時刻情報とを関連づけて記憶する。
【００２３】
光ディスクドライブ１４は、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した高解像度の撮影画像データを光ディスクに記録する。
【００２４】
ハードディスク１５には、オペレーティングシステムなどのプログラムの他に、本発明の実施例１である画像処理装置１が実行する画像処理プログラム等も記録されている。また、ハードディスク１５は、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した高解像度の撮影画像データを記録する。
【００２５】
なお、光ディスクドライブ１４に記録されるデータをハードディスク１５に記録するようにし、光ディスクドライブ１４を備えないようにしてもよい。
【００２６】
表示部１６は、液晶ディスプレイやＣＲＴディスプレイ等で構成され、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データを表示する。
【００２７】
なお、表示部１６は、画像処理装置１に内蔵されるものであってよいし、外部装置として画像処理装置１に接続されるものであってもよい。
【００２８】
画像処理装置１のＣＰＵ１１は、自装置の中枢的な制御を行い、画像処理プログラムを実行することによって、その機能上、受信画像判定手段１１ａと、記憶制御手段１１ｂと、画像判定手段１１ｃと、異常検出手段１１ｄと、画像選択手段１１ｅと、出力制御手段１１ｆとを実装する。
【００２９】
ＣＰＵ１１の受信画像判定手段１１ａは、ネットワークカメラＣ１及びＣ２から送信され、ネットワーク２を介してネットワークインタフェース１２で受信した撮影画像データが高解像度の撮影画像データであるか、又は低解像度の撮影画像データであるかを判定する。
【００３０】
ＣＰＵ１１の記憶制御手段１１ｂは、ＣＰＵ１１の受信画像判定手段１１ａにより受信した撮影画像データが低解像度の撮影画像データであると判定された場合には、受信した低解像度の撮影画像データをメモリ１３の低解像度画像記憶手段１３ａに記憶させる。一方、ＣＰＵ１１の受信画像判定手段１１ａにより受信した撮影画像データが高解像度の撮影画像データであると判定された場合には、受信した高解像度の撮影画像データをメモリ１３の高解像度画像記憶手段１３ｂに記憶させる。
【００３１】
画像判定手段１１ｃは、低解像度画像記憶手段１３ａに最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報に対応する高解像度の撮影画像データが、高解像度画像記憶手段１３ｂに記憶されているか否かを判定する。
【００３２】
異常検出手段１１ｄは、画像判定手段１１ｃにより、高解像度画像記憶手段１３ｂに記憶されていると判定された場合に、低解像度画像記憶手段１３ａに記憶された最も古い時刻情報に対応する低解像度の撮影画像データと、最後に記憶された低解像度の撮影画像データとの差分が所定の閾値以上である場合には、異常として検出する。
【００３３】
画像選択手段１１ｅは、異常検出手段１１ｄにより、異常が検出された場合に、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データに対応する時刻情報が示す時刻に最も近い時刻を示す時刻情報に対応する高解像度の撮影画像を選択する。
【００３４】
出力制御手段１１ｆは、低解像度画像記憶手段１３ａに、最後に記憶された低解像度の撮影画像データに対応する時刻情報より所定時間以前の時刻情報に対応する低解像度の撮影画像データを削除させると共に、選択された高解像度の撮影画像を光ディスクドライブ１４に記録させる。
【００３５】
＜監視カメラシステム１００の作用＞
次に、本発明の実施例１である画像処理装置１が適用された監視カメラシステム１００の作用について図面を参照して説明する。
【００３６】
図２は、本発明の実施例１である画像処理装置１が適用された監視カメラシステム１００における撮影画像データの送受信を説明した図であり、同図（ａ）は、撮影画像データをマルチキャストパケットで送受信した場合を説明した図であり、同図（ｂ）は、撮影画像データをユニキャストパケットで送受信した場合を説明した図である。
【００３７】
図２（ａ）に示すように、ネットワークカメラＣ１及びＣ２は、複数の撮影画像データを送信することが可能である。図２（ａ）では、ネットワークカメラＣ１及びＣ２が、マルチキャストｍ１で高解像度の撮影画像データをネットワーク２へ送信している。一般に、マルチキャストパケットはネットワーク２に接続された全ての機器に到達するので、ネットワークカメラＣ１及びＣ２から送信された高解像度の撮影画像データは、画像処理装置１に到達すると共に、サーバ３にも到達する。
【００３８】
同様に、ネットワークカメラＣ１及びＣ２は、マルチキャストｍ２で低解像度の撮影画像データをネットワーク２へ送信する。そして、ネットワークカメラＣ１及びＣ２から送信された低解像度の画像データは、画像処理装置１に到達すると共に、サーバ３にも到達する。
【００３９】
また、図２（ｂ）に示すように、ネットワークカメラＣ１及びＣ２は、複数のユニキャストパケットを送信することも可能である。図２（ｂ）に示した例では、ネットワークカメラＣ１及びＣ２は、ユニキャストｕ１で高解像度の画像データをネットワーク２へ送信し、ユニキャストｕ２で低解像度の画像データをネットワーク２へ送信する。一般に、ユニキャストパケットはネットワーク２内の特定の機器に到達するので、図２（ｂ）に示した例では、ネットワークカメラＣ１及びＣ２から送信された撮影画像データは指定された画像処理装置１のみに到達する。
【００４０】
このように、ネットワークカメラＣ１及びＣ２は、マルチキャストパケット、又はユニキャストパケットのいずれを用いて撮影画像データを送信してもよい。
【００４１】
また、ネットワークカメラＣ１及びＣ２は、マルチキャストパケット、又はユニキャストパケットのいずれを用いた場合においても、送信する撮影画像データに送信時の時刻情報を付加することもできる。具体的には、ネットワークカメラＣ１及びＣ２は、高解像度の撮影画像データに時刻情報を付加し、低解像度の撮影画像データにも同様に時刻情報を付加してネットワーク２へ送信することができる。時刻情報としては、例えば、RFC1889に記述されているRTP（Real-time Transport Protocol）のタイムスタンプを用いる。
【００４２】
ここで、ネットワークカメラＣ１及びＣ２が、撮影画像データを送信するタイミングは、ネットワークカメラ毎に設定されており、例えば、ｔ１時点に高解像度の撮影画像データを送信し、ｔ２時点に低解像度の撮影画像データを送信する等のように、高解像度の撮影画像データと低解像度の撮影画像データと順に送信するようにしてもよいし、高解像度の撮影画像データと低解像度の撮影画像データと同時に送信するようにしてもよい。
【００４３】
また、ネットワークカメラＣ１及びＣ２が送信した撮影画像データは、送信された順に画像処理装置１に到達するとは限らない。これは送信する撮影画像データの大きさや、ネットワーク２の負荷状態等に起因し、例えば、ネットワークカメラＣ１及びＣ２が、ｔ１時点に高解像度の撮影画像データを送信し、その後のｔ２時点に低解像度の撮影画像データを送信した場合において、画像処理装置１は、ｔ３時点に低解像度の撮影画像データを受信し、その後のｔ４時点に高解像度の撮影画像データを受信する場合もある。
【００４４】
このようにして、画像処理装置１は、ネットワークカメラＣ１及びＣ２から送信された撮影画像データを、ネットワーク２を介して受信する。そして、撮影画像データを受信した画像処理装置１は、以下に詳述するように、画像一時記憶処理、及び画像記録処理を実行する。
【００４５】
≪画像一時記憶処理≫
図３は、本発明の実施例１である画像処理装置１における画像一時記憶処理の処理手順を示したフローチャートである。
【００４６】
図３に示すように、画像処理装置１の受信画像判定手段１１ａは、ネットワークカメラＣ１及びＣ２から送信された撮影画像データを、ネットワーク２を介してネットワークインタフェース１２で受信し取得する（ステップＳ１０１）。
【００４７】
次に、受信画像判定手段１１ａは、受信した撮影画像データが高解像度の撮影画像データであるか、又は低解像度の撮影画像データであるかを判定する（ステップＳ１０２）。具体的には、高解像度の撮影画像データを受信する際のポート番号と、低解像度の撮影画像データを受信する際のポート番号とを異なるポート番号として割り当て、受信したパケットの宛先ポート番号によって、受信した撮影画像データが高解像度の撮影画像データであるか、又は低解像度の撮影画像データであるかを判定する。
【００４８】
ステップＳ１０２において、受信画像判定手段１１ａが、受信した撮影画像データが低解像度の撮影画像データであると判定した場合には、受信した低解像度の撮影画像データに時刻情報が付加されているか否かを判定する（ステップＳ１０３）。
【００４９】
ステップ１０３において、受信した低解像度の撮影画像データに時刻情報が付加されていると判定した場合には、受信画像判定手段１１ａは、受信した低解像度の撮影画像データとこの低解像度の撮影画像データに付加された時刻情報とを関連づけて、メモリ１３の低解像度画像記憶手段１３ａに記憶させる（ステップＳ１０５）。
【００５０】
一方、ステップＳ１０３において、受信画像判定手段１１ａが、受信した低解像度の撮影画像データに時刻情報が付加されていないと判定した場合には、この低解像度の撮影画像データを受信した時刻を時刻情報として生成し（ステップＳ１０４）、この生成した時刻情報と受信した低解像度の撮影画像データとを関連づけて、メモリ１３の低解像度画像記憶手段１３ａに記憶させる（ステップＳ１０５）。
【００５１】
また、ステップＳ１０２において、受信画像判定手段１１ａが、受信した撮影画像データが高解像度の撮影画像データであると判定した場合には、ステップＳ１０３の処理と同様に、受信した高解像度の撮影画像データに時刻情報が付加されているか否かを判定する（ステップＳ１０６）。
【００５２】
ステップＳ１０６において、受信画像判定手段１１ａが、受信した高解像度の撮影画像データに時刻情報が付加されていると判定した場合には、受信した高解像度の撮影画像データとこの高解像度の撮影画像データに付加された時刻情報とを関連づけて、メモリ１３の高解像度画像記憶手段１３ｂに記憶させる（ステップＳ１０８）。
【００５３】
一方、ステップＳ１０６において、受信画像判定手段１１ａが、受信した高解像度の撮影画像データに時刻情報が付加されていないと判定した場合には、ステップＳ１０７の処理と同様に、この高解像度の撮影画像データを受信した時刻を時刻情報として生成し（ステップＳ１０７）、この生成した時刻情報と受信した高解像度の撮影画像データとを関連づけて、メモリ１３の高解像度画像記憶手段１３ｂに記憶させる（ステップＳ１０８）。
【００５４】
≪画像記録処理≫
図４は、本発明の実施例１である画像処理装置１における画像記録処理の処理手順を示したフローチャートである。
【００５５】
まず、ＣＰＵ１１の画像判定手段１１ｃは、記憶制御手段１１ｂにより新たに低解像度の撮影画像データが記憶されたか否かを判定する（ステップＳ２０１）。
【００５６】
ステップＳ２０１において、新たに低解像度の撮影画像データが記憶されたと判定した場合、この新たに記憶された、即ち低解像度画像記憶手段１３ａに最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報に対応する高解像度の撮影画像データが記憶されているか否かを判定する（ステップＳ２０２）。
【００５７】
具体的には、画像判定手段１１ｃは、メモリ１３の低解像度画像記憶手段１３ａから、最後に記憶された低解像度の撮影画像データに関連づけられた時刻情報を読み出す。そして、画像判定手段１１ｃは、メモリ１３の高解像度画像記憶手段１３ｂから、高解像度の撮影画像データに関連付けられた時刻情報を読み出し、読み出した時刻情報の中に、最後に記憶された低解像度の撮影画像データに関連付けられた時刻情報が示す時刻の前後の時刻に対応する時刻情報が存在するか否かを判定する。そして、この時刻情報が存在していれば、画像判定手段１１ｃは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報に対応する高解像度の撮影画像データが記憶されていると判定する。
【００５８】
ステップＳ２０２において、該当の高解像度の撮影画像データが記憶されていると判定された場合、異常検出手段１１ｄは、画像解析により、最後に記憶された低解像度の撮影画像データと最も古い低解像度の撮影画像データとの差分を計算し、この結果により異常があるか否かを判定する（ステップＳ２０３，Ｓ２０４）。
【００５９】
具体的には、異常検出手段１１ｄは、メモリ１３の低解像度画像記憶手段１３ａから、最も古い時刻情報に関連づけられた低解像度の撮影画像データを読み出す。そして、異常検出手段１１ｄは、読み出した低解像度の撮影画像データと最後に記憶された低解像度の撮影画像データとをそれぞれ所定の画像エリアに分割し、分割された画像エリア毎に両撮影画像データの差分を算出する。そして、異常検出手段１１ｄは、算出した差分を累積加算し、この累積加算された差分合計値が予め定めた閾値を越えている場合には、異常として検出する。
【００６０】
ここで、この閾値は、高すぎると両撮影画像データが常に類似すると判定され、異常を検出できなくなり、低すぎると両撮影画像データの差が例えばノイズのような微少な場合でも異常を検出してしまう。そのため、予め提供者等が実測に基づいた適正な値を予め算出し、提供者や利用者等が予め適正な値を設定しておく必要がある。
【００６１】
次に、異常検出手段１１ｄにより異常が検出された場合には、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択する（ステップＳ２０５）。
【００６２】
そして、出力制御手段１１ｆは、光ディスクドライブ１４を制御して、画像選択手段１１ｅにより選択された高解像度の撮影画像データを光ディスクに記録させる（ステップＳ２０６）。
【００６３】
なお、出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを光ディスクに記憶させる替わりに、選択された高解像度の撮影画像データをハードディスク１５に記憶させるようにしてもよいし、ネットワークインタフェース１２を介して、ネットワーク２に接続されたサーバ３が内蔵するハーディスクに記憶させるようにしてもよい。
【００６４】
次に、出力制御手段１１ｆは、ステップＳ２０５において選択された高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ２０７）。
【００６５】
さらに、出力制御手段１１ｆは、ステップＳ２０５において選択された高解像度の撮影画像データの時刻情報が示す時刻より古い時刻情報に関連づけられた高解像度の撮影画像データを時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ２０９）。
【００６６】
次に、出力制御手段１１ｆは、所定時間より前の時刻情報に関連づけられた低解像度の撮影画像データをこの時刻情報と共に、メモリ１３の低解像度画像記憶手段１３ａから削除する（ステップＳ２１０）。
【００６７】
ここで、この所定時間は長すぎると、大容量のメモリ１３を備える必要があり、装置のコストが高くなる。また所定時間が短すぎると、ネットワークカメラＣ１及びＣ２が撮影する被写体の動きが遅い場合、異常を検出できなくなる。そのため、予め提供者等が実測に基づいた適正な値を予め算出し、提供者や利用者等が予め適正な値を設定しておく必要がある。
【００６８】
一方、ステップＳ２０４において、異常検出手段１１ｄにより異常が検出されない場合は、ステップＳ２０５の処理と同様に、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択し、処理をステップＳ２０９へ移行する（ステップＳ２０８）。
【００６９】
なお、ステップＳ２０３，Ｓ２０４において、異常検出手段１１ｄは、分割された画像エリア毎に両撮影画像データの差分を算出し、この差分を累積加算した差分合計値が予め定めた閾値を越えている場合には、異常として検出したが、さらに高解像度の撮影画像データを用いて画像解析を行い、その画像解析結果により異常を検出するようにしてもよい。
【００７０】
具体的には、異常検出手段１１ｄは、分割された低解像度の撮影画像データにおける画像エリアのうち、差分が高い画像エリアを抽出する。そして、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを高解像度画像記憶手段１３ｂから読み出すと共に、最も古い時刻情報に関連づけられた高解像度の撮影画像データを高解像度画像記憶手段１３ｂから読み出す。そして、異常検出手段１１ｄは、読み出されたこれらの高解像度の撮影画像データにおいて、抽出された差分が高い低解像度の画像エリアに対応する高解像度の画像エリアを抽出し、抽出した高解像度の画像エリアについて、さらに所定の第２の画像エリアに分割し、分割された第２の画像エリア毎に両高解像度の画像エリアの差分を算出する。そして、異常検出手段１１ｄは、算出した差分を累積加算し、この累積加算された第２の差分値が予め定めた第２の閾値を越えている場合には、異常として検出するようにしてもよい。
【００７１】
このように、本発明の実施例１である画像処理装置１によれば、低解像度の撮影画像データに基づいて、異常を検出したか否かを判定し、異常を検出した場合のみ高解像度の撮影画像データを光ディスクに記録するので、画像の縮小等の装置にとって高負荷が掛かる処理を伴うことなく、異常を検出した付近の高解像度の撮影画像データを記録することができる。
【００７２】
図５は、本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順に到達した場合の画像一時記憶処理及び画像記録処理のタイムチャートである。なお、図５中のＴ１〜Ｔ１９は、時間軸上のある時点を示しており、時間の経過に沿って符号を昇順で示している。
【００７３】
図５に示すように、画像処理装置１は、Ｔ１１時点において、ネットワークカメラＣ１からＴ１時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信する。そして、画像処理装置１は、この受信した低解像度の撮影画像データをメモリ１３に記憶する。同様に、Ｔ１２時点において、ネットワークカメラＣ１からＴ２時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶し、Ｔ１３時点において、ネットワークカメラＣ１からＴ４時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信してメモリ１３に記憶し、Ｔ１４時点において、ネットワークカメラＣ１からＴ５時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶している。ここで、Ｔ２時点〜Ｔ４時点までの時間の方が、Ｔ４時点〜Ｔ５時点までの時間より長いとする。
【００７４】
そして、Ｔ１３時点において、新たに低解像度の撮影画像データが記憶され、かつ、Ｔ１４時点において、最後に記憶されたＴ４時点の低解像度の撮影画像データの前後の時刻情報であるＴ２時点及びＴ５時点の高解像度の撮影画像データが記憶されているので、Ｔ１４時点において、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データに基づいて、画像解析を開始する。そして、Ｔ１５時点において、異常検出手段１１ｄは、解析の結果、異常を検出する。
【００７５】
次に、異常が検出されたので、Ｔ１６時点において、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、Ｔ４時点に最も近い時刻であるＴ５時点の時刻情報に関連付けられた高解像度の撮影画像データを選択し、出力制御手段１１ｆは、光ディスクドライブ１４を制御して、この選択されたＴ５時点の高解像度の撮影画像データを光ディスクに記録させる。
【００７６】
そして、Ｔ１７時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ５時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に削除する。
【００７７】
次に、Ｔ１８時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ５時点の高解像度の撮影画像データの時刻情報が示す時刻より古い時刻であるＴ２時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、削除する。
【００７８】
さらに、Ｔ１９時点において、出力制御手段１１ｆは、メモリ１３の低解像度画像記憶手段１３ａから、所定時間より前の時刻であるＴ１時点の低解像度の撮影画像データをこの時刻情報と共に、削除する。
【００７９】
図６は、本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順と到達した順が一致しない場合の処理の画像一時記憶処理及び画像記録処理を示したタイムチャートである。なお、図６中のＴ１〜Ｔ３０は、時間軸上のある時点を示しており、時間の経過に沿って符号を昇順で示している。
【００８０】
図６に示すように、画像処理装置１は、Ｔ２１時点において、ネットワークカメラＣ１からＴ１時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信する。そして、画像処理装置１は、この受信した高解像度の撮影画像データと時刻情報とを関連づけてメモリ１３に記憶する。同様に、Ｔ２２時点において、ネットワークカメラＣ１からＴ２時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信してメモリ１３に記憶し、Ｔ２３時点において、ネットワークカメラＣ１からＴ３時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶する。そして、Ｔ２４時点において、ネットワークカメラＣ１からＴ２４時点に送信されたことを示す時刻情報が付加された高解像度の撮影画像データを受信してメモリ１３に記憶する。そして、Ｔ２５時点において、ネットワークカメラＣ１からＴ５時点に送信されたことを示す時刻情報が付加された低解像度の撮影画像データを受信してメモリ１３に記憶する。ネットワーク２では、データを送信した順序でデータが受信されるとは限らないので、ここではＴ５時点に送信された撮影画像データよりもＴ２４時点で送信された撮影画像データのほうが先に受信されている。ここで、Ｔ５時点〜Ｔ２４時点までの時間の方が、Ｔ３時点〜Ｔ５時点までの時間より長いとする。
【００８１】
そして、Ｔ２５時点において、新たに低解像度の撮影画像データが記憶され、かつ、最後に記憶されたＴ５時点の低解像度の撮影画像データの前後の時刻情報であるＴ３時点及びＴ２４時点の高解像度の撮影画像データが記憶されているので、Ｔ２５時点において、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データに基づいて、画像解析を開始する。そして、Ｔ２６時点において、異常検出手段１１ｄは、解析の結果、異常を検出する。
【００８２】
次に、異常が検出されたので、Ｔ２７時点において、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、Ｔ５時点に最も近い時刻であるＴ３時点の時刻情報に関連付けられた高解像度の撮影画像データを選択し、出力制御手段１１ｆは、光ディスクドライブ１４を制御して、この選択されたＴ３時点の高解像度の撮影画像データを光ディスクに記録させる。
【００８３】
そして、Ｔ２８時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ３時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に削除する。
【００８４】
次に、Ｔ２９時点において、出力制御手段１１ｆは、メモリ１３の高解像度画像記憶手段１３ｂから、選択されたＴ３時点の高解像度の撮影画像データの時刻情報が示す時刻より古い時刻であるＴ１時点の高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、削除する。
【００８５】
さらに、Ｔ３０時点において、出力制御手段１１ｆは、メモリ１３の低解像度画像記憶手段１３ａから、所定時間より前の時刻であるＴ２時点の低解像度の撮影画像データをこの時刻情報と共に、削除する。
【００８６】
このように、本発明の実施例１である画像処理装置１によれば、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順と到達した順が一致しない場合においても、低解像度の撮影画像データに基づいて、異常を検出したか否かを判定することができる。そして、異常を検出した場合のみ高解像度の撮影画像データを光ディスクに記憶するので、画像の縮小等の装置にとって高負荷がかかる処理を伴うことなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを記録することができる。
【００８７】
また、本発明の実施例１である画像処理装置１によれば、差分合計値に基づいて、異常を検出するので、ネットワークカメラＣ１及びＣ２によって、撮影された画像に変化があった場合に、変化があった高解像度の撮影画像データを記録することができる。
【実施例２】
【００８８】
本発明の実施例２では、ネットワークカメラを用いた監視カメラシステムに適用され、ネットワークカメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、低画像の撮影画像データについて特定色が閾値以上であるか否かを判定することによって、異常を検出し、異常が検出された時刻付近の高解像度の撮影画像データを表示部に強調表示する画像処理装置を例に挙げて説明する。
【００８９】
＜監視カメラシステムの構成＞
図７は、本発明の実施例２である画像処理装置を適用した監視カメラシステムの構成を示した構成図である。
【００９０】
図７に示すように、監視カメラシステム１０１は、画像処理装置１０と、ネットワークカメラＣ１及びＣ２と、サーバ３と、表示装置４とを備え、各々はネットワーク２を介して接続されている。
【００９１】
表示装置４は、液晶ディスプレイなどであり、画像処理装置１０からの信号により、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データなどを受信して表示する。また、画像処理装置１からの要求により、画像処理装置１のＣＰＵ１１の画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示する。
【００９２】
なお、図７に示すネットワークカメラＣ１及びＣ２と、サーバ３とは、図１に示した本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００に備えられたものと同一構成を有するので、説明を省略する。
【００９３】
画像処理装置１は、ＣＰＵ１１と、ネットワークインタフェース１２と、メモリ１３と、光ディスクドライブ１４と、ハードディスク１５と、表示部１６とを備え、各々はバス２０を介して同図のごとく接続されている。なお、ネットワークインタフェース１２と、メモリ１３と、光ディスクドライブ１４と、ハードディスク１５とは、図１に示した本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００に備えられたものと同一であるので、説明を省略する。
【００９４】
画像処理装置１のＣＰＵ１１は、自装置の中枢的な制御を行い、画像解析プログラムを実行することによって、その機能上、受信画像判定手段１１ａと、記憶制御手段１１ｂと、画像判定手段１１ｃと、異常検出手段１１ｄと、画像選択手段１１ｅと、出力制御手段１１ｆとを実装する。
【００９５】
異常検出手段１１ｄは、画像判定手段１１ｃにより、高解像度画像記憶手段１３ｂに記憶されている判定された場合に、最後に記憶された低解像度の撮影画像データのうち、所定の色を示す画素数が所定の閾値以上である場合には、異常として検出する。
【００９６】
出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示させる。
【００９７】
なお、受信画像判定手段１１ａと、記憶制御手段１１ｂと、画像判定手段１１ｃと、画像選択手段１１ｅとは、図１に示した本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００に備えられたものと同一であるので、説明を省略する。
【００９８】
表示部１６は、液晶ディスプレイやＣＲＴディスプレイ等で構成され、ＣＰＵ１１の指示に従い、ネットワークカメラＣ１及びＣ２が撮影した撮影画像データを表示する。また、出力制御手段１１ｆの指示により、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示する。
【００９９】
＜監視カメラシステム１００の作用＞
次に、本発明の実施例２である画像処理装置１０が適用された監視カメラシステム１０１の作用について図面を参照して説明する。
【０１００】
本発明の実施例２である画像処理装置１０は、本発明の実施例１である画像処理装置１と同様に、ネットワークカメラＣ１及びＣ２から、マルチキャストパケット、又はユニキャストパケット等を用いて撮影画像データをネットワーク２を介して受信する。
【０１０１】
そして、撮影画像データを受信した画像処理装置１０は、画像一時記憶処理、及び画像強調表示処理を行う。ここで、画像一時記憶処理については、本発明の実施例１である画像処理装置１における画像一時記憶処理と同一であるので、説明を省略する。
【０１０２】
≪画像強調表示処理≫
図８は、本発明の実施例２である画像処理装置１０における画像強調表示処理の処理手順を示したフローチャートである。
【０１０３】
まず、ＣＰＵ１１の画像判定手段１１ｃは、記憶制御手段１１ｂにより新たに低解像度の撮影画像データが記憶されたか否かを判定する（ステップＳ３０１）。
【０１０４】
ステップＳ３０１において、新たに低解像度の撮影画像データが記憶されたと判定した場合、この新たに記憶された、即ち低解像度画像記憶手段１３ａに最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報を有する高解像度の撮影画像データが記憶されているか否かを判定する（ステップＳ３０２）。
【０１０５】
具体的には、画像判定手段１１ｃは、メモリ１３の低解像度画像記憶手段１３ａから、最後に記憶された低解像度の撮影画像データに関連づけられた時刻情報を読み出す。そして、画像判定手段１１ｃは、メモリ１３の高解像度画像記憶手段１３ｂから、高解像度の撮影画像データに関連付けられた時刻情報を読み出し、読み出した時刻情報の中に、最後に記憶された低解像度の撮影画像データに関連付けられた時刻情報が示す時刻の前後の時刻に対応する時刻情報が存在するか否かを判定する。そして、この時刻情報が存在していれば、画像判定手段１１ｃは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻前後の時刻情報を有する高解像度の撮影画像データが記憶されていると判定する。
【０１０６】
ステップＳ３０２において、該当の高解像度の撮影画像データが記憶されていると判定された場合、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データの画像解析を行い、異常があるか否かを判定する（ステップＳ３０３）。具体的には、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データのうち、例えば、肌色を示す画素数が所定の閾値以上である場合には、異常として検出する。
【０１０７】
ここで、この閾値は、高すぎると人間が撮影されているにもかかわらず、異常を検出できなくなり、低すぎると人間以外の小さな肌色を有する物体が撮影された場合にも異常を検出してしまう。そのため、予め提供者等が実測に基づいた適正な値を予め算出し、提供者や利用者等が予め適正な値を設定しておく必要がある。
【０１０８】
次に、異常検出手段１１ｄにより異常が検出された場合には、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択する（ステップＳ３０５）。
【０１０９】
次に、出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調して表示させる（ステップＳ３０６）。具体的には、出力制御手段１１ｆは、表示部１６に選択された高解像度の撮影画像データを表示させる共に、表示された高解像度の撮影画像データの表示エリアの周りに赤い枠を表示させたり、高解像度の撮影画像データの表示エリア上の一部に、赤いランプの絵を表示させる。
【０１１０】
なお、出力制御手段１１ｆは、画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調して表示させる替わりに、ネットワークインタフェース１２を介して、ネットワーク２に接続された表示装置４に画像選択手段１１ｅにより選択された高解像度の撮影画像データを表示部１６に強調表示させるようにしてもよい。
【０１１１】
次に、出力制御手段１１ｆは、ステップＳ３０５において選択された高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ３０７）。
【０１１２】
さらに、出力制御手段１１ｆは、ステップＳ３０５において選択された高解像度の撮影画像データの時刻情報が示す時刻より古い時刻情報に関連づけられた高解像度の撮影画像データをこれに関連づけられた時刻情報と共に、メモリ１３の高解像度画像記憶手段１３ｂから削除する（ステップＳ３０９）。
【０１１３】
次に、出力制御手段１１ｆは、最後に記憶された低解像度の撮影画像データをこの時刻情報と共に、メモリ１３の低解像度画像記憶手段１３ａから削除する（ステップＳ３１０）。
【０１１４】
一方、ステップＳ３０４において、異常検出手段１１ｄにより異常が検出されない場合は、ステップＳ３０５の処理と同様に、画像選択手段１１ｅは、メモリ１３の高解像度画像記憶手段１３ｂから、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを選択し、処理をステップＳ３０９へ移行する（ステップＳ３０８）。
【０１１５】
なお、ステップステップＳ３０３，Ｓ３０４において、異常検出手段１１ｄは、肌色を示す画素数が所定の閾値以上である場合には、異常として検出したが、さらに高解像度の撮影画像データを用いて画像解析を行い、その画像解析結果により異常を検出するようにしてもよい。
【０１１６】
具体的には、異常検出手段１１ｄは、最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻に最も近い時刻を示す時刻情報に関連付けられた高解像度の撮影画像データを高解像度画像記憶手段１３ｂから読み出す。そして、読み出された高解像度の撮影画像データから、低解像度の撮影画像データにおいて肌色を示す画素を含む画像エリアに対応する高解像度の画像エリアを抽出し、抽出した高解像度の画像エリアについて、人間の顔の色彩パターンと類似するか否かを判定し、この判定結果により、抽出した高解像度の画像エリアに人間の顔の画像が含まれると判定した場合には、異常として検出するようにしてもよい。
【０１１７】
このように、本発明の実施例２である画像処理装置１０によれば、低解像度の撮影画像データに基づいて、画像解析を行い、その画像解析結果により異常を検出したか否かを判定し、異常を検出した場合のみ高解像度の撮影画像データを強調表示するので、画像の縮小等の装置にとって高負荷が掛かる処理を伴うことなく、画像解析により異常を検出し、異常時における高解像度の撮影画像データを強調表示することができる。
【０１１８】
また、本発明の実施例２である画像処理装置１０によれば、肌色の画素数に基づいて、異常を検出するので、ネットワークカメラＣ１及びＣ２によって、人間が撮影された場合に、人間が撮影された高解像度の撮影画像データを強調表示することができる。
【図面の簡単な説明】
【０１１９】
【図１】本発明の実施例１である画像処理装置１を適用した監視カメラシステム１００の構成を示した構成図である。
【図２】本発明の実施例１である画像処理装置１が適用された監視カメラシステム１００における撮影画像データの送受信を説明した図である。
【図３】本発明の実施例１である画像処理装置１における画像一時記憶処理の処理手順を示したフローチャートである。
【図４】本発明の実施例１である画像処理装置１における画像記録処理の処理手順を示したフローチャートである。
【図５】本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順に到達した場合の画像一時記憶処理及び画像記録処理のタイムチャートである。
【図６】本発明の実施例１である画像処理装置１において、低解像度の撮影画像データと高解像度の撮影画像データとが送信された順と到達した順が一致しない場合の処理の画像一時記憶処理及び画像記録処理を示したタイムチャートである。
【図７】本発明の実施例２である画像処理装置を適用した監視カメラシステム１０１の構成を示した構成図である。
【図８】本発明の実施例２である画像処理装置１０における画像強調表示処理の処理手順を示したフローチャートである。
【符号の説明】
【０１２０】
１，１０…画像処理装置
２…ネットワーク
３…サーバ
４…表示装置
１１…ＣＰＵ
１１ａ…受信画像判定手段
１１ｂ…記憶制御手段
１１ｃ…画像判定手段
１１ｄ…異常検出手段
１１ｅ…画像選択手段
１１ｆ…出力制御手段
１３…メモリ
１３ａ…低解像度画像記憶手段
１３ｂ…高解像度画像記憶手段
１４…光ディスクドライブ（記録部）
１５…ハードディスク（記録部）
１６…表示部
２０…バス
１００，１０１…監視カメラシステム
【特許請求の範囲】
【請求項１】
カメラとネットワークを介して接続され、前記カメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、受信した低解像度の撮影画像データの画像解析結果に基づいて、前記受信した高解像度の撮影画像データを記録、又は表示する画像処理装置であって、
前記カメラより受信した低解像度の撮影画像データと、この低解像度の撮影画像データを受信したときの時刻、又は前記低解像度の撮影画像データが前記カメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する低解像度画像記憶手段と、
前記カメラより受信した高解像度の撮影画像データと、この高解像度の撮影画像データを受信したときの時刻、又は前記高解像度の撮影画像データが前記カメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する高解像度画像記憶手段と、
前記低解像度画像記憶手段に最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻の前後所定時間内の時刻情報に対応する前記高解像度の撮影画像データが、前記高解像度画像記憶手段に記憶されているか否かを判定する画像判定手段と、
前記画像判定手段により、前記高解像度画像記憶手段に記憶されていると判定された場合に、前記最後に記憶された低解像度の撮影画像データを用いて画像解析を行い、この画像解析結果に基づいて画像上の異常を検出する異常検出手段と、
前記異常検出手段により、画像上の異常が検出された場合に、前記高解像度画像記憶手段から、前記最後に記憶された低解像度の撮影画像データに対応する時刻情報が示す時刻に最も近い時刻を示す時刻情報に対応する前記高解像度の撮影画像データを選択する画像選択手段と、
前記選択された高解像度の撮影画像データを記録部に記録させ、又は前記選択された高解像度の撮影画像データを表示部に強調表示させる出力制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項２】
前記異常検出手段は、
前記画像判定手段により、前記高解像度画像記憶手段に記憶されていると判定された場合に、前記低解像度画像記憶手段に記憶された最も古い時刻情報に対応する前記低解像度の撮影画像データと、前記最後に記憶された低解像度の撮影画像データとの差分が所定の閾値以上である場合には、画像上の異常があると判定し、
前記出力制御手段は、
前記低解像度撮影画像記憶手段に、前記最後に記憶された低解像度の撮影画像データに対応する時刻情報より所定時間より前の時刻情報に対応する前記低解像度の撮影画像データを削除させると共に、前記選択された高解像度の撮影画像データを記録部に記録させ、又は前記選択された高解像度の撮影画像データを表示部に強調表示させる
ことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記異常検出手段は、
前記画像判定手段により、前記高解像度画像記憶手段に記憶されていると判定された場合に、前記最後に記憶された低解像度の撮影画像データのうち、所定の色を示す画素数が所定の閾値以上である場合には、異常があると判定する
ことを特徴とする請求項１記載の画像処理装置。
【請求項１】
カメラとネットワークを介して接続され、前記カメラにより撮影された低解像度の撮影画像データと高解像度の撮影画像データとを受信し、受信した低解像度の撮影画像データの画像解析結果に基づいて、前記受信した高解像度の撮影画像データを記録、又は表示する画像処理装置であって、
前記カメラより受信した低解像度の撮影画像データと、この低解像度の撮影画像データを受信したときの時刻、又は前記低解像度の撮影画像データが前記カメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する低解像度画像記憶手段と、
前記カメラより受信した高解像度の撮影画像データと、この高解像度の撮影画像データを受信したときの時刻、又は前記高解像度の撮影画像データが前記カメラより送信されたときの時刻を示す時刻情報とを関連づけて、記憶する高解像度画像記憶手段と、
前記低解像度画像記憶手段に最後に記憶された低解像度の撮影画像データの時刻情報が示す時刻の前後所定時間内の時刻情報に対応する前記高解像度の撮影画像データが、前記高解像度画像記憶手段に記憶されているか否かを判定する画像判定手段と、
前記画像判定手段により、前記高解像度画像記憶手段に記憶されていると判定された場合に、前記最後に記憶された低解像度の撮影画像データを用いて画像解析を行い、この画像解析結果に基づいて画像上の異常を検出する異常検出手段と、
前記異常検出手段により、画像上の異常が検出された場合に、前記高解像度画像記憶手段から、前記最後に記憶された低解像度の撮影画像データに対応する時刻情報が示す時刻に最も近い時刻を示す時刻情報に対応する前記高解像度の撮影画像データを選択する画像選択手段と、
前記選択された高解像度の撮影画像データを記録部に記録させ、又は前記選択された高解像度の撮影画像データを表示部に強調表示させる出力制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項２】
前記異常検出手段は、
前記画像判定手段により、前記高解像度画像記憶手段に記憶されていると判定された場合に、前記低解像度画像記憶手段に記憶された最も古い時刻情報に対応する前記低解像度の撮影画像データと、前記最後に記憶された低解像度の撮影画像データとの差分が所定の閾値以上である場合には、画像上の異常があると判定し、
前記出力制御手段は、
前記低解像度撮影画像記憶手段に、前記最後に記憶された低解像度の撮影画像データに対応する時刻情報より所定時間より前の時刻情報に対応する前記低解像度の撮影画像データを削除させると共に、前記選択された高解像度の撮影画像データを記録部に記録させ、又は前記選択された高解像度の撮影画像データを表示部に強調表示させる
ことを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記異常検出手段は、
前記画像判定手段により、前記高解像度画像記憶手段に記憶されていると判定された場合に、前記最後に記憶された低解像度の撮影画像データのうち、所定の色を示す画素数が所定の閾値以上である場合には、異常があると判定する
ことを特徴とする請求項１記載の画像処理装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【公開番号】特開２００９−８８６６６（Ｐ２００９−８８６６６Ａ）
【公開日】平成２１年４月２３日（２００９．４．２３）
【国際特許分類】
【出願番号】特願２００７−２５２１３０（Ｐ２００７−２５２１３０）
【出願日】平成１９年９月２７日（２００７．９．２７）
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
【公開日】平成２１年４月２３日（２００９．４．２３）
【国際特許分類】
【出願日】平成１９年９月２７日（２００７．９．２７）
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
[ Back to top ]