動体情報解析装置、動体情報解析システム、動体情報解析装置の制御方法、および動体情報解析装置の制御プログラム
【課題】通行人の通行量を求めた際の実際の現場の様子をユーザが容易に把握すること。
【解決手段】監視領域における動体の情報を解析する動体情報解析装置であって、動体の情報を示すログ情報と監視領域の画像情報を取得する情報取得手段と、解析領域を決定する解析領域決定手段と、解析領域にログ情報があるか否かを判定する判定手段と、解析領域のログ情報を単位時間ごとに演算する演算手段と、単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段と、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする。
【解決手段】監視領域における動体の情報を解析する動体情報解析装置であって、動体の情報を示すログ情報と監視領域の画像情報を取得する情報取得手段と、解析領域を決定する解析領域決定手段と、解析領域にログ情報があるか否かを判定する判定手段と、解析領域のログ情報を単位時間ごとに演算する演算手段と、単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段と、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視されている領域において、通行人などの動体が通行する通行量および通行量の変化を解析する、動体情報解析装置、動体情報解析システム、動体情報解析装置の制御方法、および動体情報解析装置の制御プログラムに関する。
【背景技術】
【０００２】
従来から、道路の交差点に可視画像のカメラを設置し、このカメラにより、横断歩道を含む所定範囲の監視領域内の画像を撮像して、道路の交差点における歩行者の状況や人数を調べることにより、車両用信号および歩行者用信号の制御をより効率的に行ない、結果として歩行者の安全を向上させることができる技術が知られている。
【０００３】
また、通行人の軌跡データそのものを方向別に色分けし、また、通行人の正確な位置の追跡処理を行うために、通行軌跡から空間内の各通行人同士の接近相対距離及び進行方向ベクトルがなす交差角を求めて、通行人同士の衝突現象を検知し、距離画像を用いて正確に通行人の行動を解析することができる通行人行動解析システムが、例えば、特許文献１に記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３４６６１７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来技術では、ある領域内の通行密度を求め、それを色分けして表示する機能を備えているが、色分けして表示された画像には実際の画像を使用していない。そのために、通行人の通行量または通行人の通行密度を求めた際の実際の現場の様子をユーザが把握することができない、という問題がある。
【０００６】
本発明は、上記課題を解決するためになされたものであり、監視領域(カメラ撮影領域)内を通行する動体の数を計測し、単位時間における通行数の高低によって解析領域をレベル付けし、解析領域に対応する監視領域の実際の画像を抽出画像として切り出して保存する動体情報解析装置、動体情報解析システム、動体情報解析装置の制御方法、および動体情報解析装置の制御プログラムを提供しようというものである。
【課題を解決するための手段】
【０００７】
上記課題を解決するため、本発明は次のような構成を採用する。
【０００８】
すなわち、請求項１に係る発明は、監視領域における動体の情報を解析する動体情報解析装置であって、動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段と、情報取得手段で取得された監視領域の画像情報から，少なくとも１つ以上の解析領域を決定する解析領域決定手段と、情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段と、判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段と、演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段と、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段と、を備え、切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする。
【０００９】
また、請求項２に記載される発明は、請求項１に記載に動体情報解析装置において、切出手段によって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する動体画像抽出手段と、動体画像抽出手段によって抽出された動体画像を置換画像に置き換える動体画像置換手段と、を備えることを特徴とする。
【００１０】
また、請求項３に記載される発明は、請求項１または２に記載の動体情報解析装置において、切出手段によって切り出される切り出し画像情報、または動体画像置換手段によって動体画像が置換画像に置き換えられた切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する出力作成手段と、を備えることを特徴とする。
【００１１】
また、請求項４に記載される発明は、請求項３に記載の動体情報解析装置において、表示画像情報は、切り出し画像情報の少なくとも一部の領域がレベル付け情報に対応して認識できる画像であることを特徴とする。
【００１２】
また、請求項５に記載される発明は、請求項１乃至３の何れかに記載の動体情報解析装置において、出力作成手段は、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力することを特徴とする。
【００１３】
また、請求項６に記載される発明は、請求項５に記載の動体情報解析装置において、出力作成手段は、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力することを特徴とする。
【００１４】
また、請求項７に記載される発明は、請求項３乃至６の何れかに記載の動体情報解析装置において、層状３次元形状情報が指定される指定手段と、指定手段によって層状３次元形状情報のどの３次元形状情報が指定されたかを検知する検知手段と、をさらに備え、検知手段によって、層状３次元形状情報の３次元形状情報が指定された場合には、指定された３次元形状情報に対応する切り出し画像情報を出力することを特徴とする。
【００１５】
また、請求項８に記載される発明は、請求項１乃至７の何れかに記載の動体情報解析装置において、切出手段によって切り出される切り出し画像情報は、単位時間の中で、少なくとも１つのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする。
【００１６】
また、請求項９に記載される発明は、請求項１乃至７の何れかに記載の動体情報解析装置において、切出手段によって切り出される切り出し画像情報は、単位時間の中で、最も多くのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする。
【００１７】
また、請求項１０に記載される発明は、請求項３乃至９の何れかに記載の動体情報解析装置と、動体情報解析装置の出力作成手段から出力された情報を表示する表示手段と、監視領域の画像情報を取得する画像情報取得手段と、を備え、動体情報解析装置は、画像情報取得手段によって取得された画像情報を受信する画像情報受信手段と、画像情報取得手段によって取得された画像情報から動体を検出する動体検出手段と、動体検出手段によって検出された動体の移動経路を追跡する移動経路追跡手段と、をさらに備え、移動経路追跡手段によって追跡された動体の移動経路をログ情報として出力することを特徴とする。
【００１８】
また、請求項１１に記載される発明は、監視領域における動体の情報を解析する動体情報解析装置の制御方法であって、動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得工程と、情報取得工程において取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定工程と、情報取得工程において取得されたログ情報を解析し、解析領域決定工程において決定された解析領域にログ情報があるか否かを判定する判定工程と、判定工程において判定された解析領域のログ情報を単位時間ごとに演算する演算工程と、演算工程において演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け工程と、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出工程と、を備え、切出工程は、さらに、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする。
【００１９】
また、請求項１２に記載される発明は、監視領域における動体の情報を解析する動体情報解析装置に含まれるコンピュータを、動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段、情報取得手段で取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定手段、情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段、判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段、演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段、として機能させ、切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶する機能を発揮することを特徴とする。
【発明の効果】
【００２０】
本発明によれば、通行数の多い領域、または少ない領域を監視画像から切り取って保存することにより、通行数を求めた際の実際の現場の様子を把握することができる。
【００２１】
また、解析領域に人が写りこんでいた場合に、人検出技術や性別判定技術を利用して物体を判定し、適切なマーク等の置換画像などで、写りこんでいる人の画像を置き換えすることにより、プライバシーを保護することができる。また、写りこんでいる人物の画像を置き換えすることにより、肖像権を適切に保護することができる。
【００２２】
さらに、解析領域ごとに、通行量（通行数が多いかまたは少ないか）を、レベル付けして監視画像とともに表示するので、通行数を求めた際の実際の現場の様子をレベル付けによって容易、かつ、瞬時に判断することができる。
【００２３】
また、監視画像の一部（監視画像の縁など）がレベル付けによって、監視画像と異なる色相などに視覚化されるので、解析領域ごとに通行量を容易、かつ、瞬時に判断することができる。
【００２４】
また、解析領域に対応する単位時間ごとの切り出し画像情報を使用することにより、通行人の通行量を求めた際の実際の現場の様子をユーザが容易に把握することができるので、データ解析領域の絞込みを容易に行うことができる。
【００２５】
また、レベル付けされた３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量を容易、かつ、瞬時に判断することができる。
【００２６】
さらに、レベル付けされた３次元形状情報を単位時間ごとに重ねた層状３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量の変化を容易、かつ、瞬時に判断することができる。
【００２７】
さらに、層状３次元形状情報が、監視領域に対応する画像情報の中の対応する位置に表示されるので、ユーザはいずれの解析領域の層状３次元形状情報であるかを容易、かつ、瞬時に判断することができる。
【００２８】
また、マウスなどの指定手段によって、層状３次元形状情報が指定された場合に、解析領域に対応する単位時間ごとの切り出し画像情報を表示するようにしたので、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【００２９】
さらに、３次元グラフをアニメーション表示することにより、通行数分布の時間変化を視覚的に容易、かつ、瞬時に把握できる。
【００３０】
さらに、切り出し画像情報を静止画像情報とすることで、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【００３１】
さらに、切り出し画像情報を単位時間の中で通行数が最も多い静止画像情報とすることで、通行数を求めた際の実際の現場の混雑の様子を容易、かつ、瞬時に把握することができる。
【図面の簡単な説明】
【００３２】
【図１】本発明に係る動体情報解析システムの機能的な構成を示す機能ブロック図である。
【図２】本発明に係る動体情報解析システムによる処理手順の全体フローチャートの一部である。
【図３】本発明に係る動体情報解析システムによる処理手順の全体フローチャートのその他の一部である。
【図４】（Ａ）本発明に係る動体情報解析システムによる処理手順の初期設定サブルーチンのフローチャートである。（Ｂ）本発明に係る動体情報解析システムによる処理手順の解析領域切り出しサブルーチンのフローチャートである。（Ｃ）本発明に係る動体情報解析システムによる処理手順の解析結果表示サブルーチンのフローチャートである。
【図５】本発明に係る監視領域の画像情報において解析領域ごとにレベル付けして表示した画像の一例を示す図である。
【図６】本発明に係る動体画像の置き換え概念の一例を表示した図である。
【図７】本発明に係る層状３次元形状情報の概念の一例を表示した図である。
【図８】本発明に係る監視領域の画像情報において解析領域ごとに層状３次元形状情報の概念の一例を表示した図である。
【図９】本発明に係る図８の表示例において、指定手段によって層状３次元形状情報が指定された場合の表示例の一例を示す図である。
【発明を実施するための形態】
【００３３】
以下、図面を参照して本発明を実施するための形態について説明する。
【００３４】
最初に、本発明の実施形態について図１、図５〜図９を参照しながら説明する。
【００３５】
［システム全体構成］
図１には、本実施形態に係る、画像情報取得手段としての画像情報取得部１０と、動体情報解析装置２０と、記憶手段としての記憶部３０と、表示手段としての表示部４０とから構成される動体情報解析システムを示す。なお、図１においては、画像情報取得部１０と、情報処理装置２０と、記憶部３０と、表示部４０とがそれぞれ一つずつで示されているが、これに限られず、それぞれ複数台で構成されていても良い。
【００３６】
また、本発明に係る動体情報解析システムは、上述のような構成を有することにより、監視領域の画像情報を取得し、取得された画像情報から人間等の動体を検出し、動体の移動経路を追跡して動体のログ情報を生成し、監視領域の画像情報から，少なくとも１つ以上の解析領域を決定し、単位時間ごとに解析領域の動体の数をレベル付けし、動体が存在する解析領域に対応する画像情報を切り出し、切り出した画像をレベル付けされた３次元画像にモデリングし、レベル付けされた切り出した画像やモデリングした３次元画像を表示する機能を有する。
【００３７】
ここで、当該機能を発揮するための構成について、図１に示す機能ブロック図を用いて説明する。
【００３８】
画像情報取得部１０は、監視領域の画像情報を取得する機能を有する。
【００３９】
画像情報取得部１０の一例としては、デジタルビデオがあり、デジタルビデオによって撮像する目標となる監視領域を撮像する。監視領域の一例としては、商品を陳列しているショップ、売店、駅の構内などの人が移動する空間、道路、交差点、駐車場などの人と他の移動物体が混在する空間などが挙げられる。また、画像情報取得部１０は撮像した画像情報を画像情報受信部２０ａへ送信する機能も有する。
【００４０】
動体情報解析装置２０は、図示しないＣＰＵ（Central Processing Unit）（マルチプロセッサ構成では複数のＣＰＵが追加されても良い）、バスライン、通信Ｉ／Ｆ（Ｉ／Ｆ：インタフェース）、メインメモリ、ＢＩＯＳ(Basic Input Output System)、Ｉ／Ｏコントローラ、ハードディスク、光ディスクドライブ、並びに半導体メモリを備える。
【００４１】
ＣＰＵ（Central Processing Unit）には、動体検出手段としての動体検出部２０ｂ、動体追跡手段としての動体追跡部２０ｃ、情報取得手段、解析領域決定手段、判定手段、演算手段、レベル付け手段としての通行数演算部２０ｄ、切出手段としての解析領域切出部２０ｅ、動体画像抽出手段としての動体抽出部２０ｆ、動体画像置換手段としての動体置換部２０ｇ、出力作成手段としての出力作成部２０ｈ、検知手段としての検知部２０ｉが含まれる。
【００４２】
画像情報受信部２０ａは、画像情報取得部１０が監視領域を撮像した画像情報を受信する機能を有する。画像情報取得部１０と画像情報受信部２０ａとの間の画像情報の送受信は無線または有線の任意の通信手段を使用できる。また、画像情報受信部２０ａは画像情報取得部１０が監視領域を撮像した画像情報を通行数演算部２０ｅに転送する機能も有する。
【００４３】
動体検出部２０ｂは画像情報取得部２０ａによって取得された画像情報から動体を検出する機能を有する。動体には人間、車、自転車などの任意の移動体が含まれる。
【００４４】
動体追跡部２０ｃは動体検出部２０ｂによって検出された動体の移動経路を追跡する機能を有する。一例として、画像情報には座標情報が含まれているので、動体の移動経路を画像情報の座標軸であらわし、動体の識別情報と移動経路の座標情報とを対応させ、動体の識別情報と移動経路の座標情報とをログ情報として、ログ情報記憶部３０ａへ送信する。動体の座標は１つの座標で示されるが、これに限定されることなく、動体の座標を複数の座標であらわし、動体を形状情報としてもよい。
【００４５】
通行数演算部２０ｄは情報取得手段、解析領域決定手段、判定手段、演算手段、レベル付け手段として機能する。
【００４６】
情報取得手段は、動体の情報を示すログ情報と、監視領域の画像情報を取得する機能を有する。ログ情報には動体の識別情報と移動経路の座標情報とが含まれる。また、監視領域の画像情報は、画像情報受信部２０ａから受信し、または、画像情報受信部２０ａからログ情報記憶部３０ａに記憶された監視領域の画像情報を受信してもよい。
【００４７】
解析領域決定手段として、情報取得手段で取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する機能を有する。
【００４８】
一例として、監視領域の画像情報を、図５に示すように、複数の矩形領域に区分し、矩形領域に区分されたそれぞれの領域を解析領域として決定する。なお、解析領域はこれに限られるわけではなく、監視領域の画像情報を任意に区分した領域を解析領域として決定することができる。また、あらかじめ監視領域の画像情報の解析領域の位置情報を記憶部３０に記憶しておき、記憶部３０に記憶されている位置情報に基づいて、監視領域の画像情報の解析領域を決定してもよい。
【００４９】
判定手段は、情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する機能を有する。
【００５０】
ログ情報には、動体の識別情報と移動経路の座標情報とが含まれるので、動体の座標情報から、動体がどの解析領域に位置するかを判定手段は判定することができる。
【００５１】
一例として、ログ情報に対して解析領域の識別情報を対応付けて、半導体メモリ等の一時記憶媒体に記憶させる。
【００５２】
演算手段は、判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する機能を有する。一例として、単位時間として５分を設定し、単位時間ごと、すなわちこの場合には５分ごとに、図５の各矩形領域にいくつのログ情報に対応する動体が入ったかを演算する。例えば、５分間に１つの矩形領域に、同一の識別情報を有する動体がいくつ存在したかを、ログ情報と矩形領域の座標情報とから判定手段が演算する。
【００５３】
なお、単位時間は５分に限定されるわけではなく、動体の解析に適合する任意の時間を設定することができる。
【００５４】
レベル付け手段は、演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けする機能を有する。
【００５５】
単位時間内の同一の識別情報を有する動体の数に応じて、解析領域ごとにレベル付けする。一例として、単位時間内の動体の数が０の場合にはレベル０と決定し、動体の数が１〜１０の場合にはレベル１と決定し、動体の数が１１〜３０の場合にはレベル２と決定し、動体の数が３１〜５０の場合にはレベル３と決定し、動体の数が５１以上の場合にはレベル４と決定する（図５参照）。解析領域ごとにレベル付けされたレベル数をレベル付け識別情報として、解析領域を識別する解析領域情報と対応させて半導体メモリ等の一時記憶媒体に記憶させる。
【００５６】
なお、レベルとそのレベルに対応する動体の数の範囲はユーザが任意に決定することができる。
【００５７】
切出手段としての解析領域切出部２０ｅは、単位時間ごとに、ログ情報を有する解析領域に対応する切り出し画像情報を切り出す機能を有する。
【００５８】
すなわち、解析領域切出部２０ｅは、レベル付け識別情報を有する時刻に対応する監視領域の画像情報から、レベル付け識別情報を有する時刻の解析領域に対応する領域を切り出し画像情報として切り出す。
【００５９】
一例として、図５に示すように、解析領域切出部２０ｅは監視領域の画像情報６０から、切り出し画像情報６１、６２、６３を切り出す。切り出し画像情報６１には通行人が一人撮影されているので、レベル付け識別情報としてレベル１（動体の数が１〜１０の場合）を有する。
【００６０】
また、切り出し画像情報６２には通行人が単位時間の間に１１人も撮影されているので（説明の都合上、図５の切り出し画像情報６２には通行人を図示せず）、レベル付け識別情報としてレベル２（動体の数が１１〜３０の場合）を有する。
【００６１】
また、切り出し画像情報６３には通行人が単位時間の間に３１人も撮影されているので（説明の都合上、図５の切り出し画像情報６３には通行人を図示せず）、レベル付け識別情報としてレベル３（動体の数が３１〜５０の場合）を有する。
【００６２】
一例としての図５の切り出し画像情報６２、６３には説明の都合上、通行人が図示されていないが、切り出し画像情報６２によって示される解析領域には単位時間に合計で１１人が通行したことになる。すなわち切り出し画像情報６２によって示される解析領域に１１個の動体の識別情報が異なるログ情報が存在する。また、切り出し画像情報６３によって示される解析領域には単位時間に合計で３１人が通行したことになる。すなわち切り出し画像情報６３によって示される解析領域には、動体の識別情報が異なる３１個のログ情報が存在する。
【００６３】
図５の場合には、監視領域の画像情報６０から、切り出し画像情報６１、６２、６３を切り出す様子を概念的に説明しているので、レベル０に対応する解析領域に対応する切り出し画像情報が切り出されているが、動体の数が１〜１０の場合のレベル１以上のログ情報を有する解析領域に対応する切り出し画像情報だけを切り出すことによって、記憶部３０に記憶する画像情報を低減し、動体情報解析装置２０および動体情報解析の処理スピードの向上、および記憶部３０の記憶領域を有効に活用することが可能になる。
【００６４】
さらに、切出手段としての解析領域切出部２０ｅは、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて解析領域情報記憶部３０ｂに記憶する機能を有する。
【００６５】
解析領域情報とは、一例として、切り出し画像情報６１、６２、６３の監視領域の画像情報６０の中の位置を示す情報であり、同一の解析領域には同一の解析領域情報が付与される。レベル付け情報は上述したように単位時間あたりの動体の個数をレベル分けした情報である。切り出し画像情報は一例としてログ情報を有する切り出し画像情報６１、６２、６３のそれぞれの画像情報である。
【００６６】
動体抽出部２０ｆは、解析領域切出部２０ｅによって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する機能を有する。
【００６７】
例えば、図６に示されるように、解析領域切出部２０ｅによって切り出される切り出し画像情報である図６（Ａ）から、既存の人検出技術や性別判定技術を利用して、ログ情報に対応する動体画像６４を抽出する。
【００６８】
動体置換部２０ｇは、動体抽出部２０ｆによって抽出された動体画像６４を置換画像６５に置き換える機能を有する。動体抽出部２０ｆによって抽出された動体画像６４は、大人の男性であることが性別判定技術によって判定されているので、サラリーマン風の背広を着てネクタイをした大人の男性を示す置換画像６５を、動体画像６４の代わりに置き換える。なお、背景の画像はそのままにする。また、動体置換部２０ｇは、置換画像６５と、動体画像６４と、切り出し画像情報とを対応付けて置換画像情報記憶部３０ｃに記憶する。
【００６９】
このように、偶然撮影してしまった人物などの画像を、デザイン化された置換画像６５に置き換えることで、個人のプライバシーを保護することができる。また、写りこんでいる人物の画像を置き換えすることにより、肖像権を適切に保護することができる。
【００７０】
出力作成部２０ｈは、解析領域切出部２０ｅによって切り出される切り出し画像情報、または、動体置換部２０ｇによって動体画像が置換画像に置き換えられた切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する機能を有する。
【００７１】
一例として、監視領域の画像情報６０とともに切り出し画像情報６１、切り出し画像情報６２、切り出し画像情報６３を表示し、切り出し画像情報６１がレベル１であること、切り出し画像情報６２がレベル２であること、切り出し画像情報６３がレベル３であることを示すレベル付け情報としてのテキスト情報を表示することができる（図示せず）。
【００７２】
また、出力作成部２０ｈは、切り出し画像情報の少なくとも一部の領域がレベル付け情報に対応して認識できる画像にする機能を有する。
【００７３】
一例として、レベル付け情報に対応して認識できる画像には色、模様を変化させた画像が含まれる。
【００７４】
例えば、図６に示すように、切り出し画像情報６１の周囲の枠部分６１ａの色をレベル付けされたレベルに対応する色に着色する。
【００７５】
また、例えば、図５に示すように、切り出し画像情報６１の周囲の枠部分６１ａ、切り出し画像情報６２の周囲の枠部分６２ａ、切り出し画像情報６３の周囲の枠部分６３ａ、をレベル付け情報によって色、模様を変える。例えば、レベル１の枠部分６１ａを赤色とし、レベル２の枠部分６２ａを黄色とし、レベル３の枠部分６３ａを緑色とする。このように監視画像の一部である切り出し画像情報がレベル付けによって、監視画像と異なる色相などに視覚化されるので、解析領域ごとに通行量を容易、かつ、瞬時に判断することができる。
【００７６】
なお、切り出し画像情報６１、切り出し画像情報６２、切り出し画像情報６３はそれぞれ単独で表示しても、図５のように監視画像の全体と一緒に表示してもよい。
【００７７】
また、一例として、図６（Ｂ）の切り出し画像情報６６において切り出し画像情報６６の周囲の枠部分６６ａをレベル付け情報によって色、模様を変えて表示してもよい。
【００７８】
また出力作成部２０ｈは、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力する機能を有する。
【００７９】
一例として、図７に示すように、切り出し画像情報６７ａ〜切り出し画像情報６７ｆは、解析領域６０ａ（図５参照）において、単位時間５分の間の代表的な切り出し画像をそれぞれ一枚ずつ示し、予め定められた時間として３０分間監視した結果、６枚（３０分間／５分間）の代表的な切り出し画像を示している。
【００８０】
すなわち、切り出し画像情報６７ａは、最初の５分間のある時点で、通行人が解析領域６０ａを通過したことを示すログ情報に対応する切り出し画像である。切り出し画像情報６７ｂは、次の５分間のある時点で、通行人が解析領域６０ａを通過したことを示すログ情報に対応する切り出し画像である。最後の切り出し画像情報６７ｆは、３０分間の中の最後の５分間のある時点で、通行人が解析領域６０ａを通過したことを示すログ情報に対応する切り出し画像である。
【００８１】
図７に示す場合には、切り出し画像情報６７ａはレベル１（動体の数が１〜１０の場合）であるので、切り出し画像情報６７ａに対応する３次元形状情報６８ａも赤色で表示する。
【００８２】
同様に、切り出し画像情報６７ｂはレベル１であるので、切り出し画像情報６７ｂに対応する３次元形状情報６８ｂも赤色で表示する。さらに、切り出し画像情報６７ｃ〜６７ｆもレベル１であるので、切り出し画像情報６７ｃに対応する３次元形状情報６８ｃ、切り出し画像情報６７ｄに対応する３次元形状情報６８ｄ、切り出し画像情報６７ｅに対応する３次元形状情報６８ｅ、切り出し画像情報６７ｆに対応する３次元形状情報６８ｆも赤色で表示する。図７の場合には、３次元形状情報６８ａ〜６８ｆを直方体で示しているが３次元形状情報は任意の形状で表示することができる。また、３次元形状情報６８ａ〜６８ｆを層状に重ねた全体を層状３次元形状情報６８と称する。
【００８３】
また、層状３次元形状情報６８のぞれぞれの３次元形状情報はレベルに対応して色を変化させることができる。
【００８４】
このように、レベル付けされた３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量を容易、かつ、瞬時に判断することができる。
【００８５】
さらに、出力作成部２０ｈは、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力する機能を有する。
【００８６】
一例として、図８に示すように、解析領域ごとに作成された層状３次元形状情報６８を、監視領域の画像情報の解析領域に対応する位置、すなわち、一例として、図５の解析領域６０ａ対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報、一例として図８の監視領域の画像情報６０の範囲形状情報７５とともに、解析領域に対応する位置（一例として、図５の解析領域６０ａ）に配置された層状３次元形状情報（一例として、図８の層状３次元形状情報６８）を出力する機能を有する。
【００８７】
このように、レベル付けされた３次元形状情報を単位時間ごとに重ねた層状３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量の変化を容易、かつ、瞬時に判断することができる。
【００８８】
さらに、出力作成部２０ｈは、層状３次元形状情報が指定されるマウス、キーボード等の指定部４１と、指定部４１によって層状３次元形状情報のどの３次元形状情報が指定されたかを検知する検知部２０ｉと、をさらに備え、検知部２０ｉによって、層状３次元形状情報の３次元形状情報が指定された場合には、指定された３次元形状情報に対応する切り出し画像情報を出力する機能を有する。
【００８９】
一例として、図９に示すように、図８で示された表示において、カーソル７６で、層状３次元形状情報６８の３次元形状情報６８ｅが指定されたことを検知部２０ｉが検知すると、３次元形状情報６８ｅに対応する時間帯における切り出し画像情報６８ｅ１〜６８ｅ４を出力する。
【００９０】
このように、マウスなどの指定手段によって、層状３次元形状情報が指定された場合に、解析領域に対応する単位時間ごとの切り出し画像情報を表示するようにしたので、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【００９１】
解析結果情報記憶部３０ｄは、出力作成部２０ｈで作成された３次元形状情報、層状３次元形状情報等の表示部３０に表示される情報を記憶する。
【００９２】
なお、ログ情報記憶部３０ａ、解析領域情報記憶部３０ｂ、置換画像情報記憶部３０ｃ、解析結果情報記憶部３０ｄを含む記憶部３０は、動体情報解析装置２０の外部記憶装置、または動体情報解析装置２０に内蔵されてもよい。また、動体情報解析装置２０の外部記憶装置とする場合には、記憶部３０を、ネットワークを介したデータベースまたはサーバ装置の記憶装置とするように構成できる。
【００９３】
［処理手順］
ここで、本発明を適用した場合において実現され得る具体的な処理手順について、図２〜図４に示すフローチャートを参照して説明する。なお、以下に示す処理手順は、一例であってこれ以外にも実現され得る処理手順は無数に存在する。
【００９４】
なお、以下の手順は、本発明に係る動体情報解析システムにおいて、監視領域の画像情報を取得し、取得された画像情報から人間等の動体を検出し、動体の移動経路を追跡して動体のログ情報を生成し、監視領域の画像情報から，少なくとも1つ以上の解析領域を決定し、単位時間ごとに解析領域の動体の数をレベル付けし、動体が存在する解析領域に対応する画像情報を切り出し、切り出した画像をレベル付けされた３次元画像にモデリングし、レベル付けされた切り出した画像やモデリングした３次元画像を表示する機能を発揮するための処理手順である。
【００９５】
ステップＳ１において、情報取得手段としての通行数演算部２０ｄは、動体の情報を示すログ情報を取得する。ここで、ログ情報には動体の識別情報と移動経路の座標情報とが含まれる。
【００９６】
ステップＳ２において、情報取得手段としての通行数演算部２０ｄは、監視領域の画像情報を取得する。監視領域の画像情報は、画像情報受信部２０ａから受信し、または、画像情報受信部２０ａからログ情報記憶部３０ａに記憶された監視領域の画像情報を受信してもよい。
【００９７】
ステップＳ３において、通行数演算部２０ｄは、単位時間の設定、解析領域サイズの設定、通行した動体の通行数に基づくレベル付けなどの初期設定を初期設定サブルーチン（図４（Ａ））で実行する。（詳細は図４（Ａ）のステップＳ２１〜ステップ２４において説明する。）
【００９８】
ステップＳ４において、通行数演算部２０ｄは、ステップＳ１において取得したログ情報を解析する。具体的には、ステップＳ３において設定された、解析領域ごとに、単位時間あたりの動体数を演算する。
【００９９】
ステップＳ５において、通行数演算部２０ｄは設定されている解析領域の数の処理が実行されたか否かを判断する。設定されている解析領域の数の処理が実行された場合（ステップＳ５：ＹＥＳ）にはステップＳ９（図３参照）に進み、設定されている解析領域の数の処理が実行されていない場合（ステップＳ５：ＮＯ）にはステップＳ６に進む。
【０１００】
ステップＳ６において、通行数演算部２０ｄはステップＳ４における解析結果に基づいて、解析領域のレベル付けを実行する。一例として、解析領域の単位時間内の動体の総和の数が０の場合にはレベル０と決定し、動体の総和の数が１〜１０の場合にはレベル１と決定し、動体の総和数が１１〜３０の場合にはレベル２と決定し、動体の総和数が３１〜５０の場合にはレベル３と決定し、動体の総和数が５１以上の場合にはレベル４と決定する。なお、レベルとそのレベルに対応する動体の数の範囲はユーザが任意に決定することができる。
【０１０１】
ステップＳ７において、解析領域切出部２０ｅは、監視領域の画像情報から、解析領域に対応する領域を有する、切り出し画像情報を切り出すための、解析領域切り出しサブルーチン（図４（Ｂ））を実行する。（詳細は図４（Ｂ）のステップＳ３１〜ステップ３２において説明する）
【０１０２】
一例として、図５に示すように、解析領域切出部２０ｅは監視領域の画像情報６０から、切り出し画像情報６１、６２、６３を切り出す。
【０１０３】
ステップＳ８において、動体抽出部２０ｆが、解析領域切出部２０ｅによって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する。
【０１０４】
一例として、図６（Ａ）に示されるように、解析領域切出部２０ｅによって切り出される切り出し画像情報６１から、既存の人検出技術や性別判定技術を利用して、ログ情報に対応する動体画像６４を抽出する。そして、図６（Ｂ）に示すように、動体置換部２０ｇが、動体抽出部２０ｆによって抽出された動体画像６４を置換画像６５に置き換える。
【０１０５】
ステップＳ９において、通行数演算部２０ｄは、ステップＳ６において実行された解析領域のレベル付け情報を記憶する。すなわち、解析領域ごとにレベル付けされたレベル数をレベル付け識別情報として、解析領域を識別する解析領域情報と対応させて半導体メモリ等の一時記憶媒体に記憶させる。
【０１０６】
ステップＳ１０において、解析領域切出部２０ｅは、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて解析領域情報記憶部３０ｂに記憶する。
【０１０７】
ステップＳ１１において、解析結果の表示に伴うステップを解析結果の表示サブルーチン（図４（Ｃ））で実行する。（詳細は図４（Ｃ）のステップＳ４１〜ステップ４３において、説明する。）
【０１０８】
解析結果の表示サブルーチンにおいて、出力作成部２０ｈは、解析領域ごとに、解析結果を３次元形状などの様々な形状画像、またはテキスト情報を使用して表示部４０に表示する。
【０１０９】
ステップＳ１２において、アプリケーションプログラムが終了したかが判断され、アプリケーションプログラムが終了していない場合（ステップＳ１２：ＮＯ）には、ステップＳ１３に進む。
【０１１０】
ステップＳ１３において、層状３次元形状情報を指定するマウス、キーボード等の指定部４１によって、検知部２０ｉが層状３次元形状情報のいずれかの３次元形状情報が指定されたことを検知した場合（ステップＳ１３：ＹＥＳ）には、ステップＳ１４に進み、検知しない場合（ステップＳ１３：ＮＯ）にはステップＳ１２に戻る。
【０１１１】
ステップＳ１４において、カーソル７６で、層状３次元形状情報６８の３次元形状情報６８ｅが指定されたことを検知部２０ｉが検知すると、出力作成部２０ｈは、３次元形状情報６８ｅに対応する時間帯における切り出し画像情報６８ｅ１〜６８ｅ４を出力する（前述および後述する図９参照）。
【０１１２】
ステップＳ１５において、出力作成部２０ｈは、ステップＳ１４において検知された層状３次元形状情報の中の３次元形状情報に関する解析結果を表示部４０にテキスト情報で表示する（後述する図９参照）。
【０１１３】
次に、初期設定サブルーチン（ステップＳ２１〜ステップＳ２４）について説明する。
【０１１４】
ステップＳ２１において、通行数演算部２０ｄは、単位時間の設定を実施する。単位時間とは、監視領域の画像情報６０から、解析領域ごとに動体の通行数を積算するための時間である。本実施形態では、単位時間を５分間と設定しているが、ユーザは領域解析に適切な任意の時間を設定することができる。単位時間は、ユーザが動体情報解析装置２０にキーボード等の入力デバイスで直接入力することができる他に、記憶部３０にあらかじめ記憶しておき、ステップＳ２１において通行数演算部２０ｄが設定情報を記憶部３０から読み出して、単位時間を設定してもよい。
【０１１５】
ステップＳ２２において、通行数演算部２０ｄは、監視領域の画像情報６０から、解析の対象となる解析領域を設定する。監視領域の画像情報６０には位置座標が含まれるので、監視領域の画像情報６０の中に任意の大きさの解析領域を設定することができる。一例として、図５に示されるように解析領域を矩形形状とすることもできる。解析領域の形状も、ユーザが動体情報解析装置２０にキーボード等の入力デバイスで直接入力することができる他に、記憶部３０にあらかじめ記憶しておき、ステップＳ２２において通行数演算部２０ｄが設定情報を記憶部３０から読み出して、解析領域を設定してもよい。
【０１１６】
ステップＳ２３において、通行数演算部２０ｄは、解析領域の単位時間内の動体の総和の数に基づくレベル付けのレベル区分を設定する。一例として、図５に示すように、解析領域の単位時間内の動体の総和の数が０の場合にはレベル０と設定し、動体の総和の数が１〜１０の場合にはレベル１と設定し、動体の総和数が１１〜３０の場合にはレベル２と設定し、動体の総和数が３１〜５０の場合にはレベル３と設定し、動体の総和数が５１以上の場合にはレベル４と設定する。なお、レベルとそのレベルに対応する動体の数の範囲はユーザが任意に設定することができる。
【０１１７】
ステップＳ２４において、通行数演算部２０ｄは、解析領域の単位時間内の動体の総和の数に基づいてレベル付けを実施する（図５参照）。
【０１１８】
次に、解析領域切り出しサブルーチン（ステップＳ３１〜ステップＳ３２）について説明する。
【０１１９】
ステップＳ３１において、解析領域切出部２０ｅは、監視領域の画像情報６０から、特定の時刻のフレーム画像を抽出する。デジタルビデオ等の画像情報取得部１０は、フレーム単位で監視領域を撮影し、それぞれのフレーム単位には撮影された時刻情報が対応しているので、解析領域切出部２０ｅは、監視領域の画像情報６０から、特定の時刻のフレーム画像を抽出することができる。また、ログ情報にも撮影された時刻情報が対応しているので、解析領域切出部２０ｅは、ログ情報によって指定される指定時刻のフレーム画像を抽出することができる。
【０１２０】
ステップＳ３２において、解析領域切出部２０ｅは、ステップＳ２２において設定された解析領域に対応する画像情報である切り出し画像情報を切り出し、解析領域情報記憶部３０ｂに記憶する。
【０１２１】
次に、解析結果の表示サブルーチン（ステップＳ４１〜ステップＳ４３）について説明する。
【０１２２】
ステップＳ４１において、出力作成部２０ｈは、解析領域切出部２０ｅによって切り出される切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する（図５参照）。この場合に、出力作成部２０ｈは、切り出し画像情報の一部の枠領域をレベル付け情報に対応して認識できる色にする（図５、図６参照）。
【０１２３】
ステップＳ４２において、出力作成部２０ｈは、同一の解析領域において、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力する（前述した図７参照）。
【０１２４】
さらに、出力作成部２０ｈは、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力する（前述および後述する図８参照）。
【０１２５】
ステップＳ４３において、図８に示された画像情報を、監視されている時間に沿って次々に表示することで、ユーザにアニメーションを見ているかのようにして、通行数の変化を把握させる。
【０１２６】
［表示部４０の画面の表示例］
次に図６を用いて、表示部４０の画面表示例の一例について説明する。
【０１２７】
図６では、切り出し画像情報６１の周囲の枠部分６１ａの色を切り出し画像情報６１の解析領域を通過した通行数に基づいてレベル付けされたレベルに対応する色に着色する。
【０１２８】
このように切り出し画像情報６１の周囲の枠を着色することで、監視領域の中の実際の現場の様子と、その現場を通行した通行数のおおよそのレベルを一瞬で視認することができる。
【０１２９】
なお、図６（Ｂ）は、動体抽出部２０ｆによって抽出された動体画像６４を置換画像６５に置き換えた画像情報で、置換画像６５を含む切り出し画像情報６６の場合にも、周囲の枠部分６６ａの色をレベル付けされたレベルに対応する色に着色する。
【０１３０】
図７は前述したように、出力作成部２０ｈが、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力した結果表示される画面の一例である。
【０１３１】
図７に示すように、切り出し画像情報６７ａ〜切り出し画像情報６７ｆは、解析領域６０ａ（図５参照）において、単位時間５分の間の代表的な切り出し画像をそれぞれ一枚ずつ示し、予め定められた時間として３０分間監視した結果、６枚（３０分間／５分間）の代表的な切り出し画像を示している。なお、層状３次元形状情報６８のぞれぞれの３次元形状情報６８ａ〜６８ｆはレベル付け手段によってレベル付けされたレベルに対応して色を変化させることができる。
【０１３２】
図７では、切り出し画像情報６７ａ〜６７ｆはレベル１（動体の数が１〜１０の場合）であるので、切り出し画像情報６７ａ〜６７ｆに対応する３次元形状情報６８ａ〜６８ｆは赤色で着色されている。なお、３次元形状情報６８ａ〜６８ｆの形状および色は任意に設定されることができる。このように、３次元形状情報６８ａ〜６８ｆを含む層状３次元形状情報を単独で表示部４０に表示させることもできる。
【０１３３】
図８は、本発明に係る監視領域の画像情報において解析領域ごとに層状３次元形状情報を表示する一例を示す図である。
【０１３４】
図８では、表示部４０の画面に、監視領域の画像情報６０の範囲形状情報７５、すなわち監視領域の外形形状７５、を表示し、監視領域の画像情報６０の中の解析領域ごとに、層状３次元形状情報を表示する。すなわち、層状３次元形状情報６８は図５の解析領域６０ａにおける層状３次元形状情報であり、層状３次元形状情報６９は図５の解析領域６０ｂにおける層状３次元形状情報であり、層状３次元形状情報７０は図５の解析領域６０ｃにおける層状３次元形状情報であり、層状３次元形状情報７１は図５の解析領域６０ｄにおける層状３次元形状情報であり、層状３次元形状情報７２は図５の解析領域６０ｅにおける層状３次元形状情報であり、層状３次元形状情報７３は図５の解析領域６０ｆにおける層状３次元形状情報であり、層状３次元形状情報７４は図５の解析領域６０ｇにおける層状３次元形状情報である。
【０１３５】
このように、レベル付けされた３次元形状情報を単位時間ごとに重ねた層状３次元形状情報が、解析領域ごとに表示部４０で視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量の変化を容易、かつ、瞬時に判断することができる。
【０１３６】
図９では、図８の表示において、カーソル７６で、層状３次元形状情報６８の３次元形状情報６８ｅが指定されたことを検知部２０ｉが検知すると、３次元形状情報６８ｅに対応する時間帯における切り出し画像情報６８ｅ１〜６８ｅ４が表示される。
【０１３７】
層状３次元形状情報６８は午前１０時００分から、５分間隔で、３０分間、監視領域の画像情報における解析領域６０ａ（図５参照）を解析した結果を示した層状３次元形状情報である。
【０１３８】
３次元形状情報６８ａは、最初の５分間（午前１０時００分から午前１０時０５分）の間に、解析領域６０ａ（図５参照）を通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。例えば、レベル１の場合には赤色である。３次元形状情報６８ｂは、次の５分間（午前１０時０５分から午前１０時１０分）の間に、解析領域６０ａを通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。３次元形状情報６８ｃは、次の５分間（午前１０時１０分から午前１０時１５分）の間に、解析領域６０ａを通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。同様に、３次元形状情報６８ｅは、（午前１０時２０分から午前１０時２５分）の５分間に、解析領域６０ａを通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。
【０１３９】
図９の場合には、３次元形状情報６８ｅがカーソル７６で指定されているので、午前１０時２０分から午前１０時２５分の５分間の切り出し画像情報６８ｅ１〜６８ｅ５が表示部４０に表示される。図９の場合には、一分ごとに切り出し画像が表示されているが、動体が含まれる任意の画像を切り出し画像として、任意の数だけ表示することができる。
【０１４０】
このように、マウスなどの指定手段によって、層状３次元形状情報が指定された場合に、解析領域に対応する単位時間ごとの切り出し画像情報を表示するようにしたので、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【０１４１】
また、切り出し画像情報６８ｅ１〜６８ｅ５の補助情報として、カーソル７６で指定された３次元形状情報６８ｅの情報（日付、単位時間、単位時間の最初と最後の時刻、表示されている切り出し画像の枚数、解析領域を通過した通行数に基づくレベル付け情報、通行数などの情報）をテキスト情報７７で表示することもできる。
【０１４２】
さらに、図９ではあらかじめ定められた時間として３０分間の監視領域の通行数を一画面だけ表示しているが、数時間の通行数の変化を視覚的に捉えるために、最初の３０分間の監視領域の通行数の様子を図９のように３次元表示した後に、次の３０分間の監視領域の通行数の様子を図９のように３次元表示し、さらにその次の３０分間の監視領域の通行数の様子を図９のように３次元表示し、３０分間ごと通行数の様子をあらわす図９の画面を、次々に時間の経過に沿って順番に表示することによって、ユーザはアニメーションを見ているかの感覚で、通行数の変化を視覚的に容易に把握することができる。
【０１４３】
また、切り出し画像情報は図５等に示すように静止画であるが、単位時間の中で最も通行数が多い画像情報を切り出し画像情報とすることができる。また、単位時間の中で最初に通行する物体を捉えた画像情報を切り出し画像情報とし、単位時間の中で最後に通行する物体を捉えた画像情報を切り出し画像情報とすることもできる。
【０１４４】
なお、図５は、以上に説明した表示部４０に表示される画面として説明されていないが、図５に表示されている画面の全体または一部を表示部４０に表示するように構成することもできる。
【０１４５】
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではなく、種々の変更が可能である。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施例に記載されたものに限定されるものではない。
【符号の説明】
【０１４６】
１０…画像情報取得部
２０…動体情報解析装置
２０ａ…画像情報受信部
２０ｂ…動体検出部
２０ｃ…動体追跡部
２０ｄ…通行数演算部
２０ｅ…解析領域切出部
２０ｆ…動体抽出部
２０ｇ…動体置換部
２０ｈ…出力作成部
２０ｉ…検知部
３０…記憶部
４０…表示部
４１…指定部
【技術分野】
【０００１】
本発明は、監視されている領域において、通行人などの動体が通行する通行量および通行量の変化を解析する、動体情報解析装置、動体情報解析システム、動体情報解析装置の制御方法、および動体情報解析装置の制御プログラムに関する。
【背景技術】
【０００２】
従来から、道路の交差点に可視画像のカメラを設置し、このカメラにより、横断歩道を含む所定範囲の監視領域内の画像を撮像して、道路の交差点における歩行者の状況や人数を調べることにより、車両用信号および歩行者用信号の制御をより効率的に行ない、結果として歩行者の安全を向上させることができる技術が知られている。
【０００３】
また、通行人の軌跡データそのものを方向別に色分けし、また、通行人の正確な位置の追跡処理を行うために、通行軌跡から空間内の各通行人同士の接近相対距離及び進行方向ベクトルがなす交差角を求めて、通行人同士の衝突現象を検知し、距離画像を用いて正確に通行人の行動を解析することができる通行人行動解析システムが、例えば、特許文献１に記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００５−３４６６１７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来技術では、ある領域内の通行密度を求め、それを色分けして表示する機能を備えているが、色分けして表示された画像には実際の画像を使用していない。そのために、通行人の通行量または通行人の通行密度を求めた際の実際の現場の様子をユーザが把握することができない、という問題がある。
【０００６】
本発明は、上記課題を解決するためになされたものであり、監視領域(カメラ撮影領域)内を通行する動体の数を計測し、単位時間における通行数の高低によって解析領域をレベル付けし、解析領域に対応する監視領域の実際の画像を抽出画像として切り出して保存する動体情報解析装置、動体情報解析システム、動体情報解析装置の制御方法、および動体情報解析装置の制御プログラムを提供しようというものである。
【課題を解決するための手段】
【０００７】
上記課題を解決するため、本発明は次のような構成を採用する。
【０００８】
すなわち、請求項１に係る発明は、監視領域における動体の情報を解析する動体情報解析装置であって、動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段と、情報取得手段で取得された監視領域の画像情報から，少なくとも１つ以上の解析領域を決定する解析領域決定手段と、情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段と、判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段と、演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段と、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段と、を備え、切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする。
【０００９】
また、請求項２に記載される発明は、請求項１に記載に動体情報解析装置において、切出手段によって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する動体画像抽出手段と、動体画像抽出手段によって抽出された動体画像を置換画像に置き換える動体画像置換手段と、を備えることを特徴とする。
【００１０】
また、請求項３に記載される発明は、請求項１または２に記載の動体情報解析装置において、切出手段によって切り出される切り出し画像情報、または動体画像置換手段によって動体画像が置換画像に置き換えられた切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する出力作成手段と、を備えることを特徴とする。
【００１１】
また、請求項４に記載される発明は、請求項３に記載の動体情報解析装置において、表示画像情報は、切り出し画像情報の少なくとも一部の領域がレベル付け情報に対応して認識できる画像であることを特徴とする。
【００１２】
また、請求項５に記載される発明は、請求項１乃至３の何れかに記載の動体情報解析装置において、出力作成手段は、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力することを特徴とする。
【００１３】
また、請求項６に記載される発明は、請求項５に記載の動体情報解析装置において、出力作成手段は、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力することを特徴とする。
【００１４】
また、請求項７に記載される発明は、請求項３乃至６の何れかに記載の動体情報解析装置において、層状３次元形状情報が指定される指定手段と、指定手段によって層状３次元形状情報のどの３次元形状情報が指定されたかを検知する検知手段と、をさらに備え、検知手段によって、層状３次元形状情報の３次元形状情報が指定された場合には、指定された３次元形状情報に対応する切り出し画像情報を出力することを特徴とする。
【００１５】
また、請求項８に記載される発明は、請求項１乃至７の何れかに記載の動体情報解析装置において、切出手段によって切り出される切り出し画像情報は、単位時間の中で、少なくとも１つのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする。
【００１６】
また、請求項９に記載される発明は、請求項１乃至７の何れかに記載の動体情報解析装置において、切出手段によって切り出される切り出し画像情報は、単位時間の中で、最も多くのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする。
【００１７】
また、請求項１０に記載される発明は、請求項３乃至９の何れかに記載の動体情報解析装置と、動体情報解析装置の出力作成手段から出力された情報を表示する表示手段と、監視領域の画像情報を取得する画像情報取得手段と、を備え、動体情報解析装置は、画像情報取得手段によって取得された画像情報を受信する画像情報受信手段と、画像情報取得手段によって取得された画像情報から動体を検出する動体検出手段と、動体検出手段によって検出された動体の移動経路を追跡する移動経路追跡手段と、をさらに備え、移動経路追跡手段によって追跡された動体の移動経路をログ情報として出力することを特徴とする。
【００１８】
また、請求項１１に記載される発明は、監視領域における動体の情報を解析する動体情報解析装置の制御方法であって、動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得工程と、情報取得工程において取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定工程と、情報取得工程において取得されたログ情報を解析し、解析領域決定工程において決定された解析領域にログ情報があるか否かを判定する判定工程と、判定工程において判定された解析領域のログ情報を単位時間ごとに演算する演算工程と、演算工程において演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け工程と、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出工程と、を備え、切出工程は、さらに、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする。
【００１９】
また、請求項１２に記載される発明は、監視領域における動体の情報を解析する動体情報解析装置に含まれるコンピュータを、動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段、情報取得手段で取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定手段、情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段、判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段、演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段、単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段、として機能させ、切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶する機能を発揮することを特徴とする。
【発明の効果】
【００２０】
本発明によれば、通行数の多い領域、または少ない領域を監視画像から切り取って保存することにより、通行数を求めた際の実際の現場の様子を把握することができる。
【００２１】
また、解析領域に人が写りこんでいた場合に、人検出技術や性別判定技術を利用して物体を判定し、適切なマーク等の置換画像などで、写りこんでいる人の画像を置き換えすることにより、プライバシーを保護することができる。また、写りこんでいる人物の画像を置き換えすることにより、肖像権を適切に保護することができる。
【００２２】
さらに、解析領域ごとに、通行量（通行数が多いかまたは少ないか）を、レベル付けして監視画像とともに表示するので、通行数を求めた際の実際の現場の様子をレベル付けによって容易、かつ、瞬時に判断することができる。
【００２３】
また、監視画像の一部（監視画像の縁など）がレベル付けによって、監視画像と異なる色相などに視覚化されるので、解析領域ごとに通行量を容易、かつ、瞬時に判断することができる。
【００２４】
また、解析領域に対応する単位時間ごとの切り出し画像情報を使用することにより、通行人の通行量を求めた際の実際の現場の様子をユーザが容易に把握することができるので、データ解析領域の絞込みを容易に行うことができる。
【００２５】
また、レベル付けされた３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量を容易、かつ、瞬時に判断することができる。
【００２６】
さらに、レベル付けされた３次元形状情報を単位時間ごとに重ねた層状３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量の変化を容易、かつ、瞬時に判断することができる。
【００２７】
さらに、層状３次元形状情報が、監視領域に対応する画像情報の中の対応する位置に表示されるので、ユーザはいずれの解析領域の層状３次元形状情報であるかを容易、かつ、瞬時に判断することができる。
【００２８】
また、マウスなどの指定手段によって、層状３次元形状情報が指定された場合に、解析領域に対応する単位時間ごとの切り出し画像情報を表示するようにしたので、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【００２９】
さらに、３次元グラフをアニメーション表示することにより、通行数分布の時間変化を視覚的に容易、かつ、瞬時に把握できる。
【００３０】
さらに、切り出し画像情報を静止画像情報とすることで、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【００３１】
さらに、切り出し画像情報を単位時間の中で通行数が最も多い静止画像情報とすることで、通行数を求めた際の実際の現場の混雑の様子を容易、かつ、瞬時に把握することができる。
【図面の簡単な説明】
【００３２】
【図１】本発明に係る動体情報解析システムの機能的な構成を示す機能ブロック図である。
【図２】本発明に係る動体情報解析システムによる処理手順の全体フローチャートの一部である。
【図３】本発明に係る動体情報解析システムによる処理手順の全体フローチャートのその他の一部である。
【図４】（Ａ）本発明に係る動体情報解析システムによる処理手順の初期設定サブルーチンのフローチャートである。（Ｂ）本発明に係る動体情報解析システムによる処理手順の解析領域切り出しサブルーチンのフローチャートである。（Ｃ）本発明に係る動体情報解析システムによる処理手順の解析結果表示サブルーチンのフローチャートである。
【図５】本発明に係る監視領域の画像情報において解析領域ごとにレベル付けして表示した画像の一例を示す図である。
【図６】本発明に係る動体画像の置き換え概念の一例を表示した図である。
【図７】本発明に係る層状３次元形状情報の概念の一例を表示した図である。
【図８】本発明に係る監視領域の画像情報において解析領域ごとに層状３次元形状情報の概念の一例を表示した図である。
【図９】本発明に係る図８の表示例において、指定手段によって層状３次元形状情報が指定された場合の表示例の一例を示す図である。
【発明を実施するための形態】
【００３３】
以下、図面を参照して本発明を実施するための形態について説明する。
【００３４】
最初に、本発明の実施形態について図１、図５〜図９を参照しながら説明する。
【００３５】
［システム全体構成］
図１には、本実施形態に係る、画像情報取得手段としての画像情報取得部１０と、動体情報解析装置２０と、記憶手段としての記憶部３０と、表示手段としての表示部４０とから構成される動体情報解析システムを示す。なお、図１においては、画像情報取得部１０と、情報処理装置２０と、記憶部３０と、表示部４０とがそれぞれ一つずつで示されているが、これに限られず、それぞれ複数台で構成されていても良い。
【００３６】
また、本発明に係る動体情報解析システムは、上述のような構成を有することにより、監視領域の画像情報を取得し、取得された画像情報から人間等の動体を検出し、動体の移動経路を追跡して動体のログ情報を生成し、監視領域の画像情報から，少なくとも１つ以上の解析領域を決定し、単位時間ごとに解析領域の動体の数をレベル付けし、動体が存在する解析領域に対応する画像情報を切り出し、切り出した画像をレベル付けされた３次元画像にモデリングし、レベル付けされた切り出した画像やモデリングした３次元画像を表示する機能を有する。
【００３７】
ここで、当該機能を発揮するための構成について、図１に示す機能ブロック図を用いて説明する。
【００３８】
画像情報取得部１０は、監視領域の画像情報を取得する機能を有する。
【００３９】
画像情報取得部１０の一例としては、デジタルビデオがあり、デジタルビデオによって撮像する目標となる監視領域を撮像する。監視領域の一例としては、商品を陳列しているショップ、売店、駅の構内などの人が移動する空間、道路、交差点、駐車場などの人と他の移動物体が混在する空間などが挙げられる。また、画像情報取得部１０は撮像した画像情報を画像情報受信部２０ａへ送信する機能も有する。
【００４０】
動体情報解析装置２０は、図示しないＣＰＵ（Central Processing Unit）（マルチプロセッサ構成では複数のＣＰＵが追加されても良い）、バスライン、通信Ｉ／Ｆ（Ｉ／Ｆ：インタフェース）、メインメモリ、ＢＩＯＳ(Basic Input Output System)、Ｉ／Ｏコントローラ、ハードディスク、光ディスクドライブ、並びに半導体メモリを備える。
【００４１】
ＣＰＵ（Central Processing Unit）には、動体検出手段としての動体検出部２０ｂ、動体追跡手段としての動体追跡部２０ｃ、情報取得手段、解析領域決定手段、判定手段、演算手段、レベル付け手段としての通行数演算部２０ｄ、切出手段としての解析領域切出部２０ｅ、動体画像抽出手段としての動体抽出部２０ｆ、動体画像置換手段としての動体置換部２０ｇ、出力作成手段としての出力作成部２０ｈ、検知手段としての検知部２０ｉが含まれる。
【００４２】
画像情報受信部２０ａは、画像情報取得部１０が監視領域を撮像した画像情報を受信する機能を有する。画像情報取得部１０と画像情報受信部２０ａとの間の画像情報の送受信は無線または有線の任意の通信手段を使用できる。また、画像情報受信部２０ａは画像情報取得部１０が監視領域を撮像した画像情報を通行数演算部２０ｅに転送する機能も有する。
【００４３】
動体検出部２０ｂは画像情報取得部２０ａによって取得された画像情報から動体を検出する機能を有する。動体には人間、車、自転車などの任意の移動体が含まれる。
【００４４】
動体追跡部２０ｃは動体検出部２０ｂによって検出された動体の移動経路を追跡する機能を有する。一例として、画像情報には座標情報が含まれているので、動体の移動経路を画像情報の座標軸であらわし、動体の識別情報と移動経路の座標情報とを対応させ、動体の識別情報と移動経路の座標情報とをログ情報として、ログ情報記憶部３０ａへ送信する。動体の座標は１つの座標で示されるが、これに限定されることなく、動体の座標を複数の座標であらわし、動体を形状情報としてもよい。
【００４５】
通行数演算部２０ｄは情報取得手段、解析領域決定手段、判定手段、演算手段、レベル付け手段として機能する。
【００４６】
情報取得手段は、動体の情報を示すログ情報と、監視領域の画像情報を取得する機能を有する。ログ情報には動体の識別情報と移動経路の座標情報とが含まれる。また、監視領域の画像情報は、画像情報受信部２０ａから受信し、または、画像情報受信部２０ａからログ情報記憶部３０ａに記憶された監視領域の画像情報を受信してもよい。
【００４７】
解析領域決定手段として、情報取得手段で取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する機能を有する。
【００４８】
一例として、監視領域の画像情報を、図５に示すように、複数の矩形領域に区分し、矩形領域に区分されたそれぞれの領域を解析領域として決定する。なお、解析領域はこれに限られるわけではなく、監視領域の画像情報を任意に区分した領域を解析領域として決定することができる。また、あらかじめ監視領域の画像情報の解析領域の位置情報を記憶部３０に記憶しておき、記憶部３０に記憶されている位置情報に基づいて、監視領域の画像情報の解析領域を決定してもよい。
【００４９】
判定手段は、情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する機能を有する。
【００５０】
ログ情報には、動体の識別情報と移動経路の座標情報とが含まれるので、動体の座標情報から、動体がどの解析領域に位置するかを判定手段は判定することができる。
【００５１】
一例として、ログ情報に対して解析領域の識別情報を対応付けて、半導体メモリ等の一時記憶媒体に記憶させる。
【００５２】
演算手段は、判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する機能を有する。一例として、単位時間として５分を設定し、単位時間ごと、すなわちこの場合には５分ごとに、図５の各矩形領域にいくつのログ情報に対応する動体が入ったかを演算する。例えば、５分間に１つの矩形領域に、同一の識別情報を有する動体がいくつ存在したかを、ログ情報と矩形領域の座標情報とから判定手段が演算する。
【００５３】
なお、単位時間は５分に限定されるわけではなく、動体の解析に適合する任意の時間を設定することができる。
【００５４】
レベル付け手段は、演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けする機能を有する。
【００５５】
単位時間内の同一の識別情報を有する動体の数に応じて、解析領域ごとにレベル付けする。一例として、単位時間内の動体の数が０の場合にはレベル０と決定し、動体の数が１〜１０の場合にはレベル１と決定し、動体の数が１１〜３０の場合にはレベル２と決定し、動体の数が３１〜５０の場合にはレベル３と決定し、動体の数が５１以上の場合にはレベル４と決定する（図５参照）。解析領域ごとにレベル付けされたレベル数をレベル付け識別情報として、解析領域を識別する解析領域情報と対応させて半導体メモリ等の一時記憶媒体に記憶させる。
【００５６】
なお、レベルとそのレベルに対応する動体の数の範囲はユーザが任意に決定することができる。
【００５７】
切出手段としての解析領域切出部２０ｅは、単位時間ごとに、ログ情報を有する解析領域に対応する切り出し画像情報を切り出す機能を有する。
【００５８】
すなわち、解析領域切出部２０ｅは、レベル付け識別情報を有する時刻に対応する監視領域の画像情報から、レベル付け識別情報を有する時刻の解析領域に対応する領域を切り出し画像情報として切り出す。
【００５９】
一例として、図５に示すように、解析領域切出部２０ｅは監視領域の画像情報６０から、切り出し画像情報６１、６２、６３を切り出す。切り出し画像情報６１には通行人が一人撮影されているので、レベル付け識別情報としてレベル１（動体の数が１〜１０の場合）を有する。
【００６０】
また、切り出し画像情報６２には通行人が単位時間の間に１１人も撮影されているので（説明の都合上、図５の切り出し画像情報６２には通行人を図示せず）、レベル付け識別情報としてレベル２（動体の数が１１〜３０の場合）を有する。
【００６１】
また、切り出し画像情報６３には通行人が単位時間の間に３１人も撮影されているので（説明の都合上、図５の切り出し画像情報６３には通行人を図示せず）、レベル付け識別情報としてレベル３（動体の数が３１〜５０の場合）を有する。
【００６２】
一例としての図５の切り出し画像情報６２、６３には説明の都合上、通行人が図示されていないが、切り出し画像情報６２によって示される解析領域には単位時間に合計で１１人が通行したことになる。すなわち切り出し画像情報６２によって示される解析領域に１１個の動体の識別情報が異なるログ情報が存在する。また、切り出し画像情報６３によって示される解析領域には単位時間に合計で３１人が通行したことになる。すなわち切り出し画像情報６３によって示される解析領域には、動体の識別情報が異なる３１個のログ情報が存在する。
【００６３】
図５の場合には、監視領域の画像情報６０から、切り出し画像情報６１、６２、６３を切り出す様子を概念的に説明しているので、レベル０に対応する解析領域に対応する切り出し画像情報が切り出されているが、動体の数が１〜１０の場合のレベル１以上のログ情報を有する解析領域に対応する切り出し画像情報だけを切り出すことによって、記憶部３０に記憶する画像情報を低減し、動体情報解析装置２０および動体情報解析の処理スピードの向上、および記憶部３０の記憶領域を有効に活用することが可能になる。
【００６４】
さらに、切出手段としての解析領域切出部２０ｅは、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて解析領域情報記憶部３０ｂに記憶する機能を有する。
【００６５】
解析領域情報とは、一例として、切り出し画像情報６１、６２、６３の監視領域の画像情報６０の中の位置を示す情報であり、同一の解析領域には同一の解析領域情報が付与される。レベル付け情報は上述したように単位時間あたりの動体の個数をレベル分けした情報である。切り出し画像情報は一例としてログ情報を有する切り出し画像情報６１、６２、６３のそれぞれの画像情報である。
【００６６】
動体抽出部２０ｆは、解析領域切出部２０ｅによって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する機能を有する。
【００６７】
例えば、図６に示されるように、解析領域切出部２０ｅによって切り出される切り出し画像情報である図６（Ａ）から、既存の人検出技術や性別判定技術を利用して、ログ情報に対応する動体画像６４を抽出する。
【００６８】
動体置換部２０ｇは、動体抽出部２０ｆによって抽出された動体画像６４を置換画像６５に置き換える機能を有する。動体抽出部２０ｆによって抽出された動体画像６４は、大人の男性であることが性別判定技術によって判定されているので、サラリーマン風の背広を着てネクタイをした大人の男性を示す置換画像６５を、動体画像６４の代わりに置き換える。なお、背景の画像はそのままにする。また、動体置換部２０ｇは、置換画像６５と、動体画像６４と、切り出し画像情報とを対応付けて置換画像情報記憶部３０ｃに記憶する。
【００６９】
このように、偶然撮影してしまった人物などの画像を、デザイン化された置換画像６５に置き換えることで、個人のプライバシーを保護することができる。また、写りこんでいる人物の画像を置き換えすることにより、肖像権を適切に保護することができる。
【００７０】
出力作成部２０ｈは、解析領域切出部２０ｅによって切り出される切り出し画像情報、または、動体置換部２０ｇによって動体画像が置換画像に置き換えられた切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する機能を有する。
【００７１】
一例として、監視領域の画像情報６０とともに切り出し画像情報６１、切り出し画像情報６２、切り出し画像情報６３を表示し、切り出し画像情報６１がレベル１であること、切り出し画像情報６２がレベル２であること、切り出し画像情報６３がレベル３であることを示すレベル付け情報としてのテキスト情報を表示することができる（図示せず）。
【００７２】
また、出力作成部２０ｈは、切り出し画像情報の少なくとも一部の領域がレベル付け情報に対応して認識できる画像にする機能を有する。
【００７３】
一例として、レベル付け情報に対応して認識できる画像には色、模様を変化させた画像が含まれる。
【００７４】
例えば、図６に示すように、切り出し画像情報６１の周囲の枠部分６１ａの色をレベル付けされたレベルに対応する色に着色する。
【００７５】
また、例えば、図５に示すように、切り出し画像情報６１の周囲の枠部分６１ａ、切り出し画像情報６２の周囲の枠部分６２ａ、切り出し画像情報６３の周囲の枠部分６３ａ、をレベル付け情報によって色、模様を変える。例えば、レベル１の枠部分６１ａを赤色とし、レベル２の枠部分６２ａを黄色とし、レベル３の枠部分６３ａを緑色とする。このように監視画像の一部である切り出し画像情報がレベル付けによって、監視画像と異なる色相などに視覚化されるので、解析領域ごとに通行量を容易、かつ、瞬時に判断することができる。
【００７６】
なお、切り出し画像情報６１、切り出し画像情報６２、切り出し画像情報６３はそれぞれ単独で表示しても、図５のように監視画像の全体と一緒に表示してもよい。
【００７７】
また、一例として、図６（Ｂ）の切り出し画像情報６６において切り出し画像情報６６の周囲の枠部分６６ａをレベル付け情報によって色、模様を変えて表示してもよい。
【００７８】
また出力作成部２０ｈは、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力する機能を有する。
【００７９】
一例として、図７に示すように、切り出し画像情報６７ａ〜切り出し画像情報６７ｆは、解析領域６０ａ（図５参照）において、単位時間５分の間の代表的な切り出し画像をそれぞれ一枚ずつ示し、予め定められた時間として３０分間監視した結果、６枚（３０分間／５分間）の代表的な切り出し画像を示している。
【００８０】
すなわち、切り出し画像情報６７ａは、最初の５分間のある時点で、通行人が解析領域６０ａを通過したことを示すログ情報に対応する切り出し画像である。切り出し画像情報６７ｂは、次の５分間のある時点で、通行人が解析領域６０ａを通過したことを示すログ情報に対応する切り出し画像である。最後の切り出し画像情報６７ｆは、３０分間の中の最後の５分間のある時点で、通行人が解析領域６０ａを通過したことを示すログ情報に対応する切り出し画像である。
【００８１】
図７に示す場合には、切り出し画像情報６７ａはレベル１（動体の数が１〜１０の場合）であるので、切り出し画像情報６７ａに対応する３次元形状情報６８ａも赤色で表示する。
【００８２】
同様に、切り出し画像情報６７ｂはレベル１であるので、切り出し画像情報６７ｂに対応する３次元形状情報６８ｂも赤色で表示する。さらに、切り出し画像情報６７ｃ〜６７ｆもレベル１であるので、切り出し画像情報６７ｃに対応する３次元形状情報６８ｃ、切り出し画像情報６７ｄに対応する３次元形状情報６８ｄ、切り出し画像情報６７ｅに対応する３次元形状情報６８ｅ、切り出し画像情報６７ｆに対応する３次元形状情報６８ｆも赤色で表示する。図７の場合には、３次元形状情報６８ａ〜６８ｆを直方体で示しているが３次元形状情報は任意の形状で表示することができる。また、３次元形状情報６８ａ〜６８ｆを層状に重ねた全体を層状３次元形状情報６８と称する。
【００８３】
また、層状３次元形状情報６８のぞれぞれの３次元形状情報はレベルに対応して色を変化させることができる。
【００８４】
このように、レベル付けされた３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量を容易、かつ、瞬時に判断することができる。
【００８５】
さらに、出力作成部２０ｈは、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力する機能を有する。
【００８６】
一例として、図８に示すように、解析領域ごとに作成された層状３次元形状情報６８を、監視領域の画像情報の解析領域に対応する位置、すなわち、一例として、図５の解析領域６０ａ対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報、一例として図８の監視領域の画像情報６０の範囲形状情報７５とともに、解析領域に対応する位置（一例として、図５の解析領域６０ａ）に配置された層状３次元形状情報（一例として、図８の層状３次元形状情報６８）を出力する機能を有する。
【００８７】
このように、レベル付けされた３次元形状情報を単位時間ごとに重ねた層状３次元形状情報が解析領域ごとに視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量の変化を容易、かつ、瞬時に判断することができる。
【００８８】
さらに、出力作成部２０ｈは、層状３次元形状情報が指定されるマウス、キーボード等の指定部４１と、指定部４１によって層状３次元形状情報のどの３次元形状情報が指定されたかを検知する検知部２０ｉと、をさらに備え、検知部２０ｉによって、層状３次元形状情報の３次元形状情報が指定された場合には、指定された３次元形状情報に対応する切り出し画像情報を出力する機能を有する。
【００８９】
一例として、図９に示すように、図８で示された表示において、カーソル７６で、層状３次元形状情報６８の３次元形状情報６８ｅが指定されたことを検知部２０ｉが検知すると、３次元形状情報６８ｅに対応する時間帯における切り出し画像情報６８ｅ１〜６８ｅ４を出力する。
【００９０】
このように、マウスなどの指定手段によって、層状３次元形状情報が指定された場合に、解析領域に対応する単位時間ごとの切り出し画像情報を表示するようにしたので、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【００９１】
解析結果情報記憶部３０ｄは、出力作成部２０ｈで作成された３次元形状情報、層状３次元形状情報等の表示部３０に表示される情報を記憶する。
【００９２】
なお、ログ情報記憶部３０ａ、解析領域情報記憶部３０ｂ、置換画像情報記憶部３０ｃ、解析結果情報記憶部３０ｄを含む記憶部３０は、動体情報解析装置２０の外部記憶装置、または動体情報解析装置２０に内蔵されてもよい。また、動体情報解析装置２０の外部記憶装置とする場合には、記憶部３０を、ネットワークを介したデータベースまたはサーバ装置の記憶装置とするように構成できる。
【００９３】
［処理手順］
ここで、本発明を適用した場合において実現され得る具体的な処理手順について、図２〜図４に示すフローチャートを参照して説明する。なお、以下に示す処理手順は、一例であってこれ以外にも実現され得る処理手順は無数に存在する。
【００９４】
なお、以下の手順は、本発明に係る動体情報解析システムにおいて、監視領域の画像情報を取得し、取得された画像情報から人間等の動体を検出し、動体の移動経路を追跡して動体のログ情報を生成し、監視領域の画像情報から，少なくとも1つ以上の解析領域を決定し、単位時間ごとに解析領域の動体の数をレベル付けし、動体が存在する解析領域に対応する画像情報を切り出し、切り出した画像をレベル付けされた３次元画像にモデリングし、レベル付けされた切り出した画像やモデリングした３次元画像を表示する機能を発揮するための処理手順である。
【００９５】
ステップＳ１において、情報取得手段としての通行数演算部２０ｄは、動体の情報を示すログ情報を取得する。ここで、ログ情報には動体の識別情報と移動経路の座標情報とが含まれる。
【００９６】
ステップＳ２において、情報取得手段としての通行数演算部２０ｄは、監視領域の画像情報を取得する。監視領域の画像情報は、画像情報受信部２０ａから受信し、または、画像情報受信部２０ａからログ情報記憶部３０ａに記憶された監視領域の画像情報を受信してもよい。
【００９７】
ステップＳ３において、通行数演算部２０ｄは、単位時間の設定、解析領域サイズの設定、通行した動体の通行数に基づくレベル付けなどの初期設定を初期設定サブルーチン（図４（Ａ））で実行する。（詳細は図４（Ａ）のステップＳ２１〜ステップ２４において説明する。）
【００９８】
ステップＳ４において、通行数演算部２０ｄは、ステップＳ１において取得したログ情報を解析する。具体的には、ステップＳ３において設定された、解析領域ごとに、単位時間あたりの動体数を演算する。
【００９９】
ステップＳ５において、通行数演算部２０ｄは設定されている解析領域の数の処理が実行されたか否かを判断する。設定されている解析領域の数の処理が実行された場合（ステップＳ５：ＹＥＳ）にはステップＳ９（図３参照）に進み、設定されている解析領域の数の処理が実行されていない場合（ステップＳ５：ＮＯ）にはステップＳ６に進む。
【０１００】
ステップＳ６において、通行数演算部２０ｄはステップＳ４における解析結果に基づいて、解析領域のレベル付けを実行する。一例として、解析領域の単位時間内の動体の総和の数が０の場合にはレベル０と決定し、動体の総和の数が１〜１０の場合にはレベル１と決定し、動体の総和数が１１〜３０の場合にはレベル２と決定し、動体の総和数が３１〜５０の場合にはレベル３と決定し、動体の総和数が５１以上の場合にはレベル４と決定する。なお、レベルとそのレベルに対応する動体の数の範囲はユーザが任意に決定することができる。
【０１０１】
ステップＳ７において、解析領域切出部２０ｅは、監視領域の画像情報から、解析領域に対応する領域を有する、切り出し画像情報を切り出すための、解析領域切り出しサブルーチン（図４（Ｂ））を実行する。（詳細は図４（Ｂ）のステップＳ３１〜ステップ３２において説明する）
【０１０２】
一例として、図５に示すように、解析領域切出部２０ｅは監視領域の画像情報６０から、切り出し画像情報６１、６２、６３を切り出す。
【０１０３】
ステップＳ８において、動体抽出部２０ｆが、解析領域切出部２０ｅによって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する。
【０１０４】
一例として、図６（Ａ）に示されるように、解析領域切出部２０ｅによって切り出される切り出し画像情報６１から、既存の人検出技術や性別判定技術を利用して、ログ情報に対応する動体画像６４を抽出する。そして、図６（Ｂ）に示すように、動体置換部２０ｇが、動体抽出部２０ｆによって抽出された動体画像６４を置換画像６５に置き換える。
【０１０５】
ステップＳ９において、通行数演算部２０ｄは、ステップＳ６において実行された解析領域のレベル付け情報を記憶する。すなわち、解析領域ごとにレベル付けされたレベル数をレベル付け識別情報として、解析領域を識別する解析領域情報と対応させて半導体メモリ等の一時記憶媒体に記憶させる。
【０１０６】
ステップＳ１０において、解析領域切出部２０ｅは、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて解析領域情報記憶部３０ｂに記憶する。
【０１０７】
ステップＳ１１において、解析結果の表示に伴うステップを解析結果の表示サブルーチン（図４（Ｃ））で実行する。（詳細は図４（Ｃ）のステップＳ４１〜ステップ４３において、説明する。）
【０１０８】
解析結果の表示サブルーチンにおいて、出力作成部２０ｈは、解析領域ごとに、解析結果を３次元形状などの様々な形状画像、またはテキスト情報を使用して表示部４０に表示する。
【０１０９】
ステップＳ１２において、アプリケーションプログラムが終了したかが判断され、アプリケーションプログラムが終了していない場合（ステップＳ１２：ＮＯ）には、ステップＳ１３に進む。
【０１１０】
ステップＳ１３において、層状３次元形状情報を指定するマウス、キーボード等の指定部４１によって、検知部２０ｉが層状３次元形状情報のいずれかの３次元形状情報が指定されたことを検知した場合（ステップＳ１３：ＹＥＳ）には、ステップＳ１４に進み、検知しない場合（ステップＳ１３：ＮＯ）にはステップＳ１２に戻る。
【０１１１】
ステップＳ１４において、カーソル７６で、層状３次元形状情報６８の３次元形状情報６８ｅが指定されたことを検知部２０ｉが検知すると、出力作成部２０ｈは、３次元形状情報６８ｅに対応する時間帯における切り出し画像情報６８ｅ１〜６８ｅ４を出力する（前述および後述する図９参照）。
【０１１２】
ステップＳ１５において、出力作成部２０ｈは、ステップＳ１４において検知された層状３次元形状情報の中の３次元形状情報に関する解析結果を表示部４０にテキスト情報で表示する（後述する図９参照）。
【０１１３】
次に、初期設定サブルーチン（ステップＳ２１〜ステップＳ２４）について説明する。
【０１１４】
ステップＳ２１において、通行数演算部２０ｄは、単位時間の設定を実施する。単位時間とは、監視領域の画像情報６０から、解析領域ごとに動体の通行数を積算するための時間である。本実施形態では、単位時間を５分間と設定しているが、ユーザは領域解析に適切な任意の時間を設定することができる。単位時間は、ユーザが動体情報解析装置２０にキーボード等の入力デバイスで直接入力することができる他に、記憶部３０にあらかじめ記憶しておき、ステップＳ２１において通行数演算部２０ｄが設定情報を記憶部３０から読み出して、単位時間を設定してもよい。
【０１１５】
ステップＳ２２において、通行数演算部２０ｄは、監視領域の画像情報６０から、解析の対象となる解析領域を設定する。監視領域の画像情報６０には位置座標が含まれるので、監視領域の画像情報６０の中に任意の大きさの解析領域を設定することができる。一例として、図５に示されるように解析領域を矩形形状とすることもできる。解析領域の形状も、ユーザが動体情報解析装置２０にキーボード等の入力デバイスで直接入力することができる他に、記憶部３０にあらかじめ記憶しておき、ステップＳ２２において通行数演算部２０ｄが設定情報を記憶部３０から読み出して、解析領域を設定してもよい。
【０１１６】
ステップＳ２３において、通行数演算部２０ｄは、解析領域の単位時間内の動体の総和の数に基づくレベル付けのレベル区分を設定する。一例として、図５に示すように、解析領域の単位時間内の動体の総和の数が０の場合にはレベル０と設定し、動体の総和の数が１〜１０の場合にはレベル１と設定し、動体の総和数が１１〜３０の場合にはレベル２と設定し、動体の総和数が３１〜５０の場合にはレベル３と設定し、動体の総和数が５１以上の場合にはレベル４と設定する。なお、レベルとそのレベルに対応する動体の数の範囲はユーザが任意に設定することができる。
【０１１７】
ステップＳ２４において、通行数演算部２０ｄは、解析領域の単位時間内の動体の総和の数に基づいてレベル付けを実施する（図５参照）。
【０１１８】
次に、解析領域切り出しサブルーチン（ステップＳ３１〜ステップＳ３２）について説明する。
【０１１９】
ステップＳ３１において、解析領域切出部２０ｅは、監視領域の画像情報６０から、特定の時刻のフレーム画像を抽出する。デジタルビデオ等の画像情報取得部１０は、フレーム単位で監視領域を撮影し、それぞれのフレーム単位には撮影された時刻情報が対応しているので、解析領域切出部２０ｅは、監視領域の画像情報６０から、特定の時刻のフレーム画像を抽出することができる。また、ログ情報にも撮影された時刻情報が対応しているので、解析領域切出部２０ｅは、ログ情報によって指定される指定時刻のフレーム画像を抽出することができる。
【０１２０】
ステップＳ３２において、解析領域切出部２０ｅは、ステップＳ２２において設定された解析領域に対応する画像情報である切り出し画像情報を切り出し、解析領域情報記憶部３０ｂに記憶する。
【０１２１】
次に、解析結果の表示サブルーチン（ステップＳ４１〜ステップＳ４３）について説明する。
【０１２２】
ステップＳ４１において、出力作成部２０ｈは、解析領域切出部２０ｅによって切り出される切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する（図５参照）。この場合に、出力作成部２０ｈは、切り出し画像情報の一部の枠領域をレベル付け情報に対応して認識できる色にする（図５、図６参照）。
【０１２３】
ステップＳ４２において、出力作成部２０ｈは、同一の解析領域において、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力する（前述した図７参照）。
【０１２４】
さらに、出力作成部２０ｈは、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力する（前述および後述する図８参照）。
【０１２５】
ステップＳ４３において、図８に示された画像情報を、監視されている時間に沿って次々に表示することで、ユーザにアニメーションを見ているかのようにして、通行数の変化を把握させる。
【０１２６】
［表示部４０の画面の表示例］
次に図６を用いて、表示部４０の画面表示例の一例について説明する。
【０１２７】
図６では、切り出し画像情報６１の周囲の枠部分６１ａの色を切り出し画像情報６１の解析領域を通過した通行数に基づいてレベル付けされたレベルに対応する色に着色する。
【０１２８】
このように切り出し画像情報６１の周囲の枠を着色することで、監視領域の中の実際の現場の様子と、その現場を通行した通行数のおおよそのレベルを一瞬で視認することができる。
【０１２９】
なお、図６（Ｂ）は、動体抽出部２０ｆによって抽出された動体画像６４を置換画像６５に置き換えた画像情報で、置換画像６５を含む切り出し画像情報６６の場合にも、周囲の枠部分６６ａの色をレベル付けされたレベルに対応する色に着色する。
【０１３０】
図７は前述したように、出力作成部２０ｈが、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力した結果表示される画面の一例である。
【０１３１】
図７に示すように、切り出し画像情報６７ａ〜切り出し画像情報６７ｆは、解析領域６０ａ（図５参照）において、単位時間５分の間の代表的な切り出し画像をそれぞれ一枚ずつ示し、予め定められた時間として３０分間監視した結果、６枚（３０分間／５分間）の代表的な切り出し画像を示している。なお、層状３次元形状情報６８のぞれぞれの３次元形状情報６８ａ〜６８ｆはレベル付け手段によってレベル付けされたレベルに対応して色を変化させることができる。
【０１３２】
図７では、切り出し画像情報６７ａ〜６７ｆはレベル１（動体の数が１〜１０の場合）であるので、切り出し画像情報６７ａ〜６７ｆに対応する３次元形状情報６８ａ〜６８ｆは赤色で着色されている。なお、３次元形状情報６８ａ〜６８ｆの形状および色は任意に設定されることができる。このように、３次元形状情報６８ａ〜６８ｆを含む層状３次元形状情報を単独で表示部４０に表示させることもできる。
【０１３３】
図８は、本発明に係る監視領域の画像情報において解析領域ごとに層状３次元形状情報を表示する一例を示す図である。
【０１３４】
図８では、表示部４０の画面に、監視領域の画像情報６０の範囲形状情報７５、すなわち監視領域の外形形状７５、を表示し、監視領域の画像情報６０の中の解析領域ごとに、層状３次元形状情報を表示する。すなわち、層状３次元形状情報６８は図５の解析領域６０ａにおける層状３次元形状情報であり、層状３次元形状情報６９は図５の解析領域６０ｂにおける層状３次元形状情報であり、層状３次元形状情報７０は図５の解析領域６０ｃにおける層状３次元形状情報であり、層状３次元形状情報７１は図５の解析領域６０ｄにおける層状３次元形状情報であり、層状３次元形状情報７２は図５の解析領域６０ｅにおける層状３次元形状情報であり、層状３次元形状情報７３は図５の解析領域６０ｆにおける層状３次元形状情報であり、層状３次元形状情報７４は図５の解析領域６０ｇにおける層状３次元形状情報である。
【０１３５】
このように、レベル付けされた３次元形状情報を単位時間ごとに重ねた層状３次元形状情報が、解析領域ごとに表示部４０で視覚化されるので、ユーザは解析領域ごとに単位時間ごとの通行量の変化を容易、かつ、瞬時に判断することができる。
【０１３６】
図９では、図８の表示において、カーソル７６で、層状３次元形状情報６８の３次元形状情報６８ｅが指定されたことを検知部２０ｉが検知すると、３次元形状情報６８ｅに対応する時間帯における切り出し画像情報６８ｅ１〜６８ｅ４が表示される。
【０１３７】
層状３次元形状情報６８は午前１０時００分から、５分間隔で、３０分間、監視領域の画像情報における解析領域６０ａ（図５参照）を解析した結果を示した層状３次元形状情報である。
【０１３８】
３次元形状情報６８ａは、最初の５分間（午前１０時００分から午前１０時０５分）の間に、解析領域６０ａ（図５参照）を通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。例えば、レベル１の場合には赤色である。３次元形状情報６８ｂは、次の５分間（午前１０時０５分から午前１０時１０分）の間に、解析領域６０ａを通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。３次元形状情報６８ｃは、次の５分間（午前１０時１０分から午前１０時１５分）の間に、解析領域６０ａを通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。同様に、３次元形状情報６８ｅは、（午前１０時２０分から午前１０時２５分）の５分間に、解析領域６０ａを通過した通行人の数に基づくレベル付け情報に対応した色を有する３次元形状情報である。
【０１３９】
図９の場合には、３次元形状情報６８ｅがカーソル７６で指定されているので、午前１０時２０分から午前１０時２５分の５分間の切り出し画像情報６８ｅ１〜６８ｅ５が表示部４０に表示される。図９の場合には、一分ごとに切り出し画像が表示されているが、動体が含まれる任意の画像を切り出し画像として、任意の数だけ表示することができる。
【０１４０】
このように、マウスなどの指定手段によって、層状３次元形状情報が指定された場合に、解析領域に対応する単位時間ごとの切り出し画像情報を表示するようにしたので、通行数を求めた際の実際の現場の様子を容易、かつ、瞬時に把握することができる。
【０１４１】
また、切り出し画像情報６８ｅ１〜６８ｅ５の補助情報として、カーソル７６で指定された３次元形状情報６８ｅの情報（日付、単位時間、単位時間の最初と最後の時刻、表示されている切り出し画像の枚数、解析領域を通過した通行数に基づくレベル付け情報、通行数などの情報）をテキスト情報７７で表示することもできる。
【０１４２】
さらに、図９ではあらかじめ定められた時間として３０分間の監視領域の通行数を一画面だけ表示しているが、数時間の通行数の変化を視覚的に捉えるために、最初の３０分間の監視領域の通行数の様子を図９のように３次元表示した後に、次の３０分間の監視領域の通行数の様子を図９のように３次元表示し、さらにその次の３０分間の監視領域の通行数の様子を図９のように３次元表示し、３０分間ごと通行数の様子をあらわす図９の画面を、次々に時間の経過に沿って順番に表示することによって、ユーザはアニメーションを見ているかの感覚で、通行数の変化を視覚的に容易に把握することができる。
【０１４３】
また、切り出し画像情報は図５等に示すように静止画であるが、単位時間の中で最も通行数が多い画像情報を切り出し画像情報とすることができる。また、単位時間の中で最初に通行する物体を捉えた画像情報を切り出し画像情報とし、単位時間の中で最後に通行する物体を捉えた画像情報を切り出し画像情報とすることもできる。
【０１４４】
なお、図５は、以上に説明した表示部４０に表示される画面として説明されていないが、図５に表示されている画面の全体または一部を表示部４０に表示するように構成することもできる。
【０１４５】
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限るものではなく、種々の変更が可能である。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施例に記載されたものに限定されるものではない。
【符号の説明】
【０１４６】
１０…画像情報取得部
２０…動体情報解析装置
２０ａ…画像情報受信部
２０ｂ…動体検出部
２０ｃ…動体追跡部
２０ｄ…通行数演算部
２０ｅ…解析領域切出部
２０ｆ…動体抽出部
２０ｇ…動体置換部
２０ｈ…出力作成部
２０ｉ…検知部
３０…記憶部
４０…表示部
４１…指定部
【特許請求の範囲】
【請求項１】
監視領域における動体の情報を解析する動体情報解析装置であって、
動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段と、
情報取得手段で取得された監視領域の画像情報から，少なくとも１つ以上の解析領域を決定する解析領域決定手段と、
情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段と、
判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段と、
演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段と、
単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段と、を備え、
切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする動体情報解析装置。
【請求項２】
請求項１に記載に動体情報解析装置において、
切出手段によって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する動体画像抽出手段と、
動体画像抽出手段によって抽出された動体画像を置換画像に置き換える動体画像置換手段と、
を備えることを特徴とする動体情報解析装置。
【請求項３】
請求項１または２に記載の動体情報解析装置において、
切出手段によって切り出される切り出し画像情報、または動体画像置換手段によって動体画像が置換画像に置き換えられた切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する出力作成手段と、
を備えることを特徴とする動体情報解析装置。
【請求項４】
請求項３に記載の動体情報解析装置において、
表示画像情報は、切り出し画像情報の少なくとも一部の領域がレベル付け情報に対応して認識できる画像であることを特徴とする動体情報解析装置。
【請求項５】
請求項１乃至３の何れかに記載の動体情報解析装置において、
出力作成手段は、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力することを特徴とする動体情報解析装置。
【請求項６】
請求項５に記載の動体情報解析装置において、
出力作成手段は、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力することを特徴とする動体情報解析装置。
【請求項７】
請求項３乃至６の何れかに記載の動体情報解析装置において、
層状３次元形状情報が指定される指定手段と、
指定手段によって層状３次元形状情報のどの３次元形状情報が指定されたかを検知する検知手段と、
をさらに備え、
検知手段によって、層状３次元形状情報の３次元形状情報が指定された場合には、指定された３次元形状情報に対応する切り出し画像情報を出力することを特徴とする動体情報解析装置。
【請求項８】
請求項１乃至７の何れかに記載の動体情報解析装置において、
切出手段によって切り出される切り出し画像情報は、単位時間の中で、少なくとも１つのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする動体情報解析装置。
【請求項９】
請求項１乃至７の何れかに記載の動体情報解析装置において、
切出手段によって切り出される切り出し画像情報は、単位時間の中で、最も多くのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする動体情報解析装置。
【請求項１０】
請求項３乃至９の何れかに記載の動体情報解析装置と、
動体情報解析装置の出力作成手段から出力された情報を表示する表示手段と、
監視領域の画像情報を取得する画像情報取得手段と、を備え、
動体情報解析装置は、画像情報取得手段によって取得された画像情報を受信する画像情報受信手段と、画像情報取得手段によって取得された画像情報から動体を検出する動体検出手段と、動体検出手段によって検出された動体の移動経路を追跡する移動経路追跡手段と、をさらに備え、移動経路追跡手段によって追跡された動体の移動経路をログ情報として出力することを特徴とする動体情報解析システム。
【請求項１１】
監視領域における動体の情報を解析する動体情報解析装置の制御方法であって、
動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得工程と、
情報取得工程において取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定工程と、
情報取得工程において取得されたログ情報を解析し、解析領域決定工程において決定された解析領域にログ情報があるか否かを判定する判定工程と、
判定工程において判定された解析領域のログ情報を単位時間ごとに演算する演算工程と、
演算工程において演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け工程と、
単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出工程と、を備え、
切出工程は、さらに、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする動体情報解析装置の制御方法。
【請求項１２】
監視領域における動体の情報を解析する動体情報解析装置に含まれるコンピュータを、
動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段、
情報取得手段で取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定手段、
情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段、
判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段、
演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段、
単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段、として機能させ、
切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶する機能を発揮することを特徴とする動体情報解析装置の制御プログラム。
【請求項１】
監視領域における動体の情報を解析する動体情報解析装置であって、
動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段と、
情報取得手段で取得された監視領域の画像情報から，少なくとも１つ以上の解析領域を決定する解析領域決定手段と、
情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段と、
判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段と、
演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段と、
単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段と、を備え、
切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする動体情報解析装置。
【請求項２】
請求項１に記載に動体情報解析装置において、
切出手段によって切り出される切り出し画像情報から、動体の情報を示すログ情報に対応する動体画像を抽出する動体画像抽出手段と、
動体画像抽出手段によって抽出された動体画像を置換画像に置き換える動体画像置換手段と、
を備えることを特徴とする動体情報解析装置。
【請求項３】
請求項１または２に記載の動体情報解析装置において、
切出手段によって切り出される切り出し画像情報、または動体画像置換手段によって動体画像が置換画像に置き換えられた切り出し画像情報を、レベル付け手段によってレベル付けされたレベル付け情報とともに表示させる表示画像情報を作成し、出力する出力作成手段と、
を備えることを特徴とする動体情報解析装置。
【請求項４】
請求項３に記載の動体情報解析装置において、
表示画像情報は、切り出し画像情報の少なくとも一部の領域がレベル付け情報に対応して認識できる画像であることを特徴とする動体情報解析装置。
【請求項５】
請求項１乃至３の何れかに記載の動体情報解析装置において、
出力作成手段は、解析領域ごとに、レベル付け手段によってレベル付けされたレベル付け情報を３次元形状化した３次元形状情報を作成し、予め定められた時間の中で、３次元形状情報を単位時間ごとに重ねた層状３次元形状情報を作成し、層状３次元形状情報を出力することを特徴とする動体情報解析装置。
【請求項６】
請求項５に記載の動体情報解析装置において、
出力作成手段は、解析領域ごとに作成された層状３次元形状情報を、監視領域の画像情報の解析領域に対応する位置に配置し、監視領域の画像情報の範囲を示す範囲形状情報とともに、解析領域に対応する位置に配置された層状３次元形状情報を出力することを特徴とする動体情報解析装置。
【請求項７】
請求項３乃至６の何れかに記載の動体情報解析装置において、
層状３次元形状情報が指定される指定手段と、
指定手段によって層状３次元形状情報のどの３次元形状情報が指定されたかを検知する検知手段と、
をさらに備え、
検知手段によって、層状３次元形状情報の３次元形状情報が指定された場合には、指定された３次元形状情報に対応する切り出し画像情報を出力することを特徴とする動体情報解析装置。
【請求項８】
請求項１乃至７の何れかに記載の動体情報解析装置において、
切出手段によって切り出される切り出し画像情報は、単位時間の中で、少なくとも１つのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする動体情報解析装置。
【請求項９】
請求項１乃至７の何れかに記載の動体情報解析装置において、
切出手段によって切り出される切り出し画像情報は、単位時間の中で、最も多くのログ情報を有する解析領域に対応する静止画像情報であることを特徴とする動体情報解析装置。
【請求項１０】
請求項３乃至９の何れかに記載の動体情報解析装置と、
動体情報解析装置の出力作成手段から出力された情報を表示する表示手段と、
監視領域の画像情報を取得する画像情報取得手段と、を備え、
動体情報解析装置は、画像情報取得手段によって取得された画像情報を受信する画像情報受信手段と、画像情報取得手段によって取得された画像情報から動体を検出する動体検出手段と、動体検出手段によって検出された動体の移動経路を追跡する移動経路追跡手段と、をさらに備え、移動経路追跡手段によって追跡された動体の移動経路をログ情報として出力することを特徴とする動体情報解析システム。
【請求項１１】
監視領域における動体の情報を解析する動体情報解析装置の制御方法であって、
動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得工程と、
情報取得工程において取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定工程と、
情報取得工程において取得されたログ情報を解析し、解析領域決定工程において決定された解析領域にログ情報があるか否かを判定する判定工程と、
判定工程において判定された解析領域のログ情報を単位時間ごとに演算する演算工程と、
演算工程において演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け工程と、
単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出工程と、を備え、
切出工程は、さらに、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶することを特徴とする動体情報解析装置の制御方法。
【請求項１２】
監視領域における動体の情報を解析する動体情報解析装置に含まれるコンピュータを、
動体の情報を示すログ情報と、監視領域の画像情報を取得する情報取得手段、
情報取得手段で取得された監視領域の画像情報から、少なくとも１つ以上の解析領域を決定する解析領域決定手段、
情報取得手段によって取得されたログ情報を解析し、解析領域決定手段によって決定された解析領域にログ情報があるか否かを判定する判定手段、
判定手段によって判定された解析領域のログ情報を単位時間ごとに演算する演算手段、
演算手段によって演算された単位時間ごとの解析領域のログ情報から、単位時間ごとの解析領域のログ情報量をレベル付けするレベル付け手段、
単位時間ごとに、ログ情報を有する解析領域に対応する画像情報を切り出す切出手段、として機能させ、
切出手段は、解析領域を識別する解析領域情報と、単位時間ごとの解析領域ごとにレベル付けされたレベル付け情報と、レベル付けされた解析領域に対応する単位時間ごとの切り出し画像情報と、を対応付けて記憶手段に記憶する機能を発揮することを特徴とする動体情報解析装置の制御プログラム。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【公開番号】特開２０１２−８４０７８（Ｐ２０１２−８４０７８Ａ）
【公開日】平成２４年４月２６日（２０１２．４．２６）
【国際特許分類】
【出願番号】特願２０１０−２３１８２１（Ｐ２０１０−２３１８２１）
【出願日】平成２２年１０月１４日（２０１０．１０．１４）
【出願人】（０００００２８９７）大日本印刷株式会社 (14,506)
【Ｆターム（参考）】
【公開日】平成２４年４月２６日（２０１２．４．２６）
【国際特許分類】
【出願日】平成２２年１０月１４日（２０１０．１０．１４）
【出願人】（０００００２８９７）大日本印刷株式会社 (14,506)
【Ｆターム（参考）】
[ Back to top ]