監視情報生成装置
【課題】 監視者が常駐することを必要とせず、過去に発生したイベントの有無と、イベントが検知された際のイベント内容を容易に確認することが可能な表示情報を生成する。
【解決手段】 イベントが発生したときの典型的な音声データと当該イベントの内容を示すイベント内容データとを対応させた参照音声データを予め記憶する参照データ記憶部６０８と、マイク２０から受信した解析対象の音声データに該当する参照音声データがあれば対応するイベント内容データを抽出する音声解析部６０９と、所定期間前までに受信した音声データの音圧レベル値を時間軸上にグラフ表示するための音声情報表示データを生成し、時間軸上の該当する位置にイベント内容データを関連付ける音声情報生成部６１０と、監視カメラ１０から受信された映像データに生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部６１２とを備える。
【解決手段】 イベントが発生したときの典型的な音声データと当該イベントの内容を示すイベント内容データとを対応させた参照音声データを予め記憶する参照データ記憶部６０８と、マイク２０から受信した解析対象の音声データに該当する参照音声データがあれば対応するイベント内容データを抽出する音声解析部６０９と、所定期間前までに受信した音声データの音圧レベル値を時間軸上にグラフ表示するための音声情報表示データを生成し、時間軸上の該当する位置にイベント内容データを関連付ける音声情報生成部６１０と、監視カメラ１０から受信された映像データに生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部６１２とを備える。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視エリアの映像情報および音声に関する情報を表示させるための表示情報を生成する監視情報生成装置に関する。
【背景技術】
【０００２】
近年、監視カメラで撮影したデジタル映像信号やデジタル音声信号を表示装置または記録装置へ伝送するときの伝送媒体として、イーサネット（登録商標）等の通信ネットワークを用いるネットワーク型の監視システムが急速に普及している。
【０００３】
このようなネットワーク型の監視システムにおいては、複数の監視カメラで撮影した映像信号や音声信号を１本のケーブルで重畳して伝送することが可能である。
【０００４】
そのため、監視対象の施設内に予めネットワークケーブルを配線しておくことにより、設置する監視カメラの台数を後から任意に変更することが可能になる。
【０００５】
また、このようなネットワーク型の監視システムでは、監視カメラにおけるパン・チルト・ズーム等の撮影方向、尺度の制御を行うための制御信号もネットワークケーブルを利用して遠隔から送信することが可能であり、アナログ信号で伝送する監視システムのように別途制御信号送信用の配線をする必要がないという利点がある。
【０００６】
このような監視システムにおいては、従来は映像情報のみによる監視が主であったが、監視対象の場所の状況をより詳しく知るために音声情報も加えたいという要求が高まってきている。
【０００７】
監視の対象に音声情報も加えることにより、映像に映っていないエリアの情報、例えば映像に映っていないエリアで不審者によりガラスが割られた場合の情報などを検知できる可能性が高くなる。ここで、音声情報を加えた監視システムに関する技術として、特許文献１および２に記載された技術がある。
【０００８】
特許文献１には、監視エリアから得られた映像情報と音声情報とを単に監視者に提示するだけでなく、音声情報を分析することにより異常音が検出されたときに、表示する映像情報を異常音の発生場所の監視カメラで撮影された映像情報に切り替える監視モニター装置が記載されている。この監視モニター装置により、監視エリアで異常音が発生したときの映像による確認を容易に行うことができる。
【０００９】
しかし、この特許文献１の監視モニター装置については、監視者が常にモニター装置の前に常駐する必要があり、監視者が不在のときに発生したイベントに関する情報を残すことが困難であった。
【００１０】
また、特許文献２には、映像情報の表示とともに、過去から現在に至るまでに取得した音声情報をグラフを用いてモニター上に履歴表示する監視システム装置が記載されている。この監視システム装置によれば、監視者がモニターの前に常駐することなく過去に取得した音声情報の履歴を確認することが可能になる。
【特許文献１】特開２００４−１３９２６１号公報
【特許文献２】特開２００１−３０７２５２号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
特許文献１記載の監視モニター装置によれば、モニターの表示が切り替えられたことにより監視者は何らかの異常が発生したことは知ることができるが、異常が発生してからどのくらいの時間が経過しているかを知る手段や、異常音の発生に関する映像が映っていなかった場合にどのような異常が発生したかを知る手段が提供されていないという問題があった。
【００１２】
また、特許文献２の技術では、あくまでも音声情報がどのように変化したかを示すのみであり、示された情報から異常発生に関する有意な情報を得るためには監視映像を確認する作業が別途必要であるという問題があった。
【００１３】
そこで本発明は、上記問題に鑑みなされたものであり、監視者が常駐することを必要とせず、過去に発生したイベントの有無、およびイベントが検知された際のイベント内容を容易に確認することが可能な表示情報を生成する監視情報生成装置を提供することを目的とする。
【課題を解決するための手段】
【００１４】
上記目的を達成するための本発明の監視情報生成装置（６０−１〜６０−３）は、監視エリアを撮影する監視カメラ（１０−１〜１０−３）と、前記監視エリアおよびその近傍の音を集音するマイク（２０−１〜２０−３）と、表示装置（７０−１〜７０−３）と、監視情報生成装置（６０−１〜６０−３）とを備えた監視システム（１）における監視情報生成装置（６０−１〜６０−３）であって、前記監視カメラ（１０−１〜１０−３）で撮影された前記監視エリアの映像の映像データと、前記マイク（２０−１〜２０−３）で集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部（６０１）と、音声発生イベントに応じた典型的な音声データを所定の周波数帯域ごとの音圧レベル値で示した参照周波数特徴データと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部（６０８）と、前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部（６０７）と、前記受信された音声データを取得し、この音声データを前記周波数帯域ごとの音圧レベル値で示した解析周波数特徴データに変換して参照データ記憶部（６０８）に記憶されている各前記参照周波数特徴データと帯域ごとに比較し、前記解析周波数特徴データに該当する前記参照周波数特徴データがある場合にこの参照周波数特徴データに対応するイベント内容データを抽出する音声解析部（６０９）と、前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部（６０９）でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記抽出されたイベント内容データを前記マークに関連付ける音声情報生成部（６１０）と、前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部（６１２）と、前記生成されたディスプレイ表示データを、前記表示装置（７０−１〜７０−３）に出力する映像出力部（６１３）とを備えたことを特徴とする。
【００１５】
また、本発明の他の形態の監視情報生成装置（６０−１〜６０−３）は、監視エリアを撮影する監視カメラ（１０−１〜１０−３）と、前記監視エリアおよびその近傍の音を集音するマイク（２０−１〜２０−３）と、表示装置（７０−１〜７０−３）と、監視情報生成装置（６０−１〜６０−３）とを備えた監視システム（２）における監視情報生成装置（６０−１〜６０−３）であって、前記監視カメラ（１０−１〜１０−３）で撮影された前記監視エリアの映像の映像データと、前記マイク（２０−１〜２０−３）で集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部（６０１）と、音声発生イベントに応じた典型的な音声データの、所定期間の音圧レベル値の変動パターンを示す参照変動パターンデータと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部（６０８）と、前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部（６０７）と、前記算出された音圧レベル値を解析対象データとして取得し、この解析対象データと前記参照データ記憶部（６０８）に記憶されている前記各参照変動パターンデータとを所定時間幅ごとに比較し、前記解析対象データに該当する前記参照変動パターンデータがある場合にこの参照変動パターンデータに対応するイベント内容データを抽出する音声解析部（６０９）と、前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部（６０９）でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記音声解析部（６０９）で抽出されたイベント内容データを前記マークに関連付ける音声情報生成部（６１０）と、前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部（６１２）と、前記生成されたディスプレイ表示データを、前記表示装置（７０−１〜７０−３）に出力する映像出力部（６１３）とを備えたことを特徴とする。
【発明の効果】
【００１６】
本発明の監視情報生成装置によれば、監視者が常駐することを必要とせず、過去に発生した音声発生イベントの有無、および音声発生イベントが検知された際のイベント内容を容易に確認することが可能な表示情報を生成することができる。
【発明を実施するための最良の形態】
【００１７】
《第１実施形態》
本発明の第１実施形態による監視情報生成装置は、監視エリアおよびその近辺の音声の周波数特性に基づいて音声を発する特異な事態（イベントまたは音声発生イベントと言う）が起こったか否かを判断するとともに、イベントが起こったと判断されたときにこのイベントの内容を特定し、これらの情報を表示装置に表示させることを特徴としている。
【００１８】
〈第１実施形態による監視システムの構成〉
本実施形態である監視情報生成装置を適用した監視システムの構成を、図１を参照して説明する。
【００１９】
〈第１実施形態による監視システム〉
本実施形態による監視システム１は、複数の監視カメラ１０−１〜１０−３と、これらの監視カメラ１０−１〜１０−３にそれぞれ接続されたマイク２０−１〜２０−３と、監視カメラ１０−１〜１０−３に接続されたネットワークハブ３０と、ネットワーク４０を介してネットワークハブ３０に接続されたネットワークハブ５０と、ネットワークハブ５０に接続され、監視カメラ１０−１〜１０−３にそれぞれ対応させた複数の監視情報生成装置６０−１〜６０−３と、これらの監視情報生成装置６０−１〜６０−３にそれぞれ接続された表示装置としてのディスプレイ７０−１〜７０−３およびスピーカ８０−１〜８０−３とを備えている。
【００２０】
監視カメラ１０−１〜１０−３は、それぞれ、各監視エリアを撮影して映像データを生成した後ＪＰＥＧ等の形式で圧縮し、ネットワークハブ３０、ネットワーク４０、およびネットワークハブ５０を介して、それぞれ対応する監視情報生成装置６０−１〜６０−３に送信する。
【００２１】
また、監視カメラ１０−１〜１０−３は、それぞれ接続されたマイク２０−１〜２０−３から音声データを取得し、ＭＰ３等の形式で圧縮して映像データと同様にネットワークハブ３０、ネットワーク４０、およびネットワークハブ５０を介して、対応する監視情報生成装置６０−１〜６０−３に送信する。
【００２２】
マイク２０−１〜２０−３は、それぞれ、監視エリアおよびその近辺の音声を取得して音声データに変換し、接続された監視カメラ１０−１〜１０−３に送出する。
【００２３】
監視情報生成装置６０−１〜６０−３は、それぞれ図２に示す（同図においては、監視情報生成装置６０と記す）ように、データ受信部６０１と、映像復号部６０２と、映像メモリ部６０３と、音声復号部６０４と、音声メモリ部６０５と、音声出力部６０６と、音圧レベル値算出部６０７と、参照データ記憶部６０８と、音声解析部６０９と、音声情報生成部６１０と、音声情報記憶部６１１と、データ重畳部６１２と、映像出力部６１３とを有する。
【００２４】
データ受信部６０１は、監視カメラ１０−１〜１０−３から送信された、圧縮された映像データおよび音声データを受信する。映像復号部６０２は、データ受信部６０１で受信された、圧縮された映像データを伸張する。映像メモリ部６０３は、映像復号部６０２で復号された映像データを記憶する。
【００２５】
音声復号部６０４は、データ受信部６０１で受信された、圧縮された音声データを復号する。音声メモリ部６０５は、音声復号部６０４で復号された音声データを記憶する。音声出力部６０６は、音声メモリ部６０５に記憶されたデジタル音声データを一定の周期で取得してアナログ音声データに変換し、接続されたスピーカ８０−１〜８０−３に送信する。
【００２６】
音圧レベル値算出部６０７は、音声復号部６０４で復号された音声データを取得し、一定期間ごとの音圧レベル値を算出する。
【００２７】
参照データ記憶部６０８には、イベントが発生したときの典型的な音声データである、ガラスが破壊されたときの音やドアが閉まるときの音などを、所定の周波数帯域ごとの音圧レベル値で示した参照周波数特徴データと、イベントの内容を示すテキストデータであるイベント内容データとから構成された参照音声データを、予め複数個記憶しておく。
【００２８】
音声解析部６０９は、音声復号部６０４で復号された音声データを取得し、参照周波数特徴データと同様の周波数帯域ごとの音圧レベル値で示した解析対象データである解析周波数特徴データに変換して参照データ記憶部６０８に記憶されている各参照周波数特徴データと帯域ごとに比較し、変換した解析周波数特徴データに該当する参照周波数特徴データがあればこの参照周波数特徴データに対応するイベント内容データを抽出する。音声データを解析周波数特徴データに変換する際は、ＦＦＴ（高速フーリエ変換）の手法を用いることができる。
【００２９】
音声情報生成部６１０は、音圧レベル値算出部６０７で算出された過去の音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、音声解析部６０９でいずれかのイベント内容データが抽出されたときには、抽出された時刻に該当する時間軸上の位置にイベント発生を示すマークを付し、さらに音声解析部６０９で抽出されたイベント内容データをこのマークに関連付ける。
【００３０】
音声情報記憶部６１１は、音声情報生成部６１０で生成された音声情報表示データを記憶する。
【００３１】
データ重畳部６１２は、映像メモリ部６０３に蓄積された映像データおよび音声情報記憶部６１１に記憶された音声情報表示データを取得して、取得した映像データに当該音声情報表示データを重畳して表示用のディスプレイ表示データを生成する。
【００３２】
映像出力部６１３は、データ重畳部６１２で生成されたディスプレイ表示データをＤ／Ａ変換し、接続されたディスプレイ７０−１〜７０−３のいずれかに送信する。
【００３３】
ディスプレイ７０−１〜７０−３は、接続された監視情報生成装置６０−１〜６０−３から送信されたディスプレイ表示データを取得して表示する。
【００３４】
スピーカ８０−１〜８０−３は、音声出力部６０６から送信された音声データを取得して出力する。
【００３５】
〈第１実施形態による監視システムの動作〉
次に、本実施形態である監視システム１の動作について説明する。
【００３６】
本実施形態の監視システム１の監視カメラ１０−１〜１０−３は、それぞれ、各監視エリアを撮影して映像データを生成し、さらにこの映像データをＪＰＥＧ等の形式で圧縮する。
【００３７】
また、監視カメラ１０−１〜１０−３にそれぞれ接続されたマイク２０−１〜２０−３では、それぞれ、監視エリアおよびその近辺の音声が音声データに変換され、接続された監視カメラ１０−１〜１０−３に送出される。そして、監視カメラ１０−１〜１０−３においてＭＰ３等の形式で圧縮される。
【００３８】
圧縮された映像データおよび音声データは、監視カメラ１０−１〜１０−３からネットワークハブ３０、ネットワーク４０、およびネットワークハブ５０を介して、それぞれ対応する監視情報生成装置６０−１〜６０−３に送信される。
【００３９】
次に、監視情報生成装置６０−１〜６０−３が、圧縮された映像データおよび音声データを受信し、接続されたディスプレイ７０−１〜７０−３に表示させるための表示データを生成する場合の処理について、図３のフローチャートを併せ参照して説明する。
【００４０】
まず、監視情報生成装置６０−１〜６０−３のデータ受信部６０１が圧縮された映像データおよび音声データを受信すると（Ｓ１）、これらのうち圧縮された映像データが映像復号部６０２で伸張され、映像メモリ部６０３に記憶される。また、データ受信部６０１で受信された圧縮された音声データは、音声復号部６０４で復号され、音声メモリ部６０５に記憶される（Ｓ２）。
【００４１】
音声復号部６０４で復号された音声データは音圧レベル値算出部６０７でも取得され、一定期間ごと（例えば１秒ごと）の音圧レベル値が算出される（Ｓ３）。
【００４２】
また、音声復号部６０４で復号された音声データは音声解析部６０９でも取得され、一定期間ごとの音声データが、参照周波数特徴データと同様の周波数帯域ごとの音圧レベル値で示した解析対象データである解析周波数特徴データに変換される。
【００４３】
変換された解析周波数特徴データは、音声解析部６０９において参照データ記憶部６０８に記憶されている各参照周波数特徴データと帯域ごとに比較され、当該解析周波数特徴データに該当する参照周波数特徴データがあるか否かが判定される（Ｓ４）。
【００４４】
音声解析部６０９における解析周波数特徴データと参照周波数特徴データとの比較処理について、図４のフローチャートおよび図５の周波数特徴データの例を併せ参照して説明する。
【００４５】
参照データ記憶部６０８には複数の第n参照周波数特徴データが記憶されており、図５（ａ）においては、第１〜第３参照周波数特徴データの３つが記憶されている（n=1〜3）。
【００４６】
これらの参照周波数特徴データは分割された周波数帯域(m)ごとの音圧レベル値で示されており、図５（ａ）においては、６つの周波数帯域(1)〜(6)ごとの音圧レベル値で示されている（m=1〜6）。
【００４７】
また、図５（ｂ）は、音声解析部６０９において変換された解析周波数特徴データの例である。ここでは、解析周波数特徴データも、参照周波数特徴データと同様の周波数帯域(m)（m=1〜6）ごとの音圧レベル値で示されているものとする。
【００４８】
まず、音声解析部６０９において解析周波数特徴データと参照周波数特徴データとの比較処理が開始されると、参照周波数特徴データの中の１つの第n参照周波数特徴データが取得される。nの初期値は１であり、まずは第１参照周波数特徴データが取得され、ｍの初期値が１となる（Ｓ１１、Ｓ１２）。
【００４９】
第１参照周波数特徴データが取得されると、このデータの中の１つの周波数帯域(m)について第１参照周波数特徴データと解析周波数特徴データとが比較される。mの初期値は１であり、まずは周波数帯域(1)について第１参照周波数特徴データと解析周波数特徴データとが比較される。
【００５０】
比較の結果、解析周波数特徴データの周波数帯域(1)の音圧レベル値が参照周波数特徴データの周波数帯域(1)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１３）。
【００５１】
この参照周波数特徴データの周波数帯域の音圧レベル値の一定の可変範囲とは、同一のイベントによる当該周波数帯域(m)の音声データであると認めるための許容範囲であり、ここでは当該周波数帯域の音圧レベル値の±５％以内の値を可変範囲内の値として定める。
【００５２】
図５においては、解析周波数特徴データの周波数帯域(1)の音圧レベル値は第１参照周波数特徴データの周波数帯域(1)の可変範囲内には含まれないと判定され（Ｓ１３の「NO」）、ステップＳ１４に移動する。
【００５３】
ステップＳ１４において第２参照周波数特徴データの処理に移り、ステップＳ１２に戻って第２参照周波数特徴データが取得される（Ｓ１４、Ｓ１５、Ｓ１２）。
【００５４】
第２参照周波数特徴データが取得されると、周波数帯域(m)について第２参照周波数特徴データと解析周波数特徴データとが比較される。mの初期値は１となり、まずは周波数帯域(1)について第２参照周波数特徴データと解析周波数特徴データとが比較される。
【００５５】
比較の結果、解析周波数特徴データの周波数帯域(1)の音圧レベル値が参照周波数特徴データの周波数帯域(1)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１３）。
【００５６】
図５においては、解析周波数特徴データの周波数帯域(1)の音圧レベル値は第２参照周波数特徴データの周波数帯域(1)の可変範囲内には含まれないと判定され（Ｓ１３の「NO」）、ステップＳ１４に移動する。
【００５７】
ステップＳ１４では第３参照周波数特徴データの処理に移り、ステップＳ１２に戻って第３参照周波数特徴データが取得される（Ｓ１４、Ｓ１５、Ｓ１２）。
【００５８】
第３参照周波数特徴データが取得されると、周波数帯域(m)について第３参照周波数特徴データと解析周波数特徴データとが比較される。mの初期値は１となり、まずは周波数帯域(1)について第３参照周波数特徴データと解析周波数特徴データとが比較される。
【００５９】
比較の結果、解析周波数特徴データの周波数帯域(1)の音圧レベル値が参照周波数特徴データの周波数帯域(1)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１３）。
【００６０】
図５において、解析周波数特徴データの周波数帯域(1)の音圧レベル値は第３参照周波数特徴データの周波数帯域(1)の可変範囲内には含まれると判定され（Ｓ１３の「YES」）、ステップＳ１６に移動する。
【００６１】
ステップＳ１６では周波数帯域(2)の処理に移り、ステップＳ１３に戻って、解析周波数特徴データの周波数帯域(2)の音圧レベル値が第３参照周波数特徴データの周波数帯域(2)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１６、Ｓ１７、Ｓ１３）。
【００６２】
図５において、解析周波数特徴データの周波数帯域(2)の音圧レベル値は第３参照周波数特徴データの周波数帯域(2)の可変範囲内には含まれると判定され（Ｓ１３の「YES」）、ステップＳ１６に移動する。
【００６３】
図５においては、ステップＳ１３、Ｓ１６の処理を周波数帯域(6)（m=6）まで繰り返すことにより、全ての周波数帯域において解析周波数特徴データの音圧レベル値が第３参照周波数特徴データの音圧レベル値の可変範囲内に含まれると判定され（Ｓ１３、Ｓ１６、Ｓ１７）、この第３参照周波数特徴データは解析周波数特徴データに該当するデータであると判定される（Ｓ１８）。
【００６４】
また、ステップＳ１３において、解析周波数特徴データの周波数帯域(m)の音圧レベル値は第n参照周波数特徴データの周波数帯域(m)の可変範囲内には含まれないと判定され、参照データ記憶部６０８内の全ての参照周波数特徴データについての比較処理が終了したとき（Ｓ１５の「YES」）は、解析周波数特徴データに該当する参照周波数特徴データはないと判定される（Ｓ１９）。
【００６５】
以上で、音声解析部６０９における解析周波数特徴データと参照周波数特徴データとの比較処理についての説明を終了する。
【００６６】
図３の説明に戻り、ステップＳ４において解析周波数特徴データに該当する参照周波数特徴データがあると判定されたときには、この参照周波数特徴データに対応するイベント内容データが抽出される（Ｓ５）。
【００６７】
ステップＳ５においてイベント内容データが抽出されたとき、またはステップＳ４において解析周波数特徴データに該当する参照周波数特徴データがないと判定されたとき（Ｓ４の「NO」）は、音声情報生成部６１０において音圧レベル値算出部６０７で算出された過去の音圧レベル値が取得され、時間軸上にグラフ表示するための音声情報表示データが生成される（Ｓ６）。ここで取得される音圧レベル値は過去数十分〜数時間程度が好ましい。
【００６８】
ここで、音声解析部６０９においていずれかのイベント内容データが抽出されているときには、音声情報生成部６１０により、この音声情報表示データにイベント内容データが抽出された時刻に該当するグラフデータの時間軸上の位置にイベント発生を示すマークが付され、さらに音声解析部６０９で抽出されたイベント内容データがこのマークに関連付けられる。
【００６９】
音声情報生成部６１０で生成された音声情報表示データは、音声情報記憶部６１１に記憶される（Ｓ７）。
【００７０】
次に、データ重畳部６１２において映像メモリ部６０３に蓄積された映像データおよび音声情報記憶部６１１に記憶された音声情報表示データが取得され、取得した映像データに当該音声情報表示データが重畳されて表示用のディスプレイ表示データが生成される（Ｓ８）。
【００７１】
データ重畳部６１２で生成されたディスプレイ表示データは、映像出力部６１３においてＤ／Ａ変換されて接続されたディスプレイ７０−１〜７０−３のいずれかに送信される。
【００７２】
映像出力部６１３から送信されたディスプレイ表示データは、ディスプレイ７０−１〜７０−３でそれぞれ表示される。ディスプレイ７０−１〜７０−３に表示されたディスプレイ表示データの例を、図６に示す。
【００７３】
図６（ａ）は監視カメラ１０−１で撮影された映像データおよびマイク２０−１で取得された音声データに基づいて監視情報生成装置６０−１で生成されたディスプレイ表示データがディスプレイ７０−１に表示された例であり、図６（ｂ）は監視カメラ１０−２で撮影された映像データおよびマイク２０−２で取得された音声データに基づいて監視情報生成装置６０−２で生成されたディスプレイ表示データがディスプレイ７０−２に表示された例であり、図６（ｃ）は監視カメラ１０−３で撮影された映像データおよびマイク２０−３で取得された音声データに基づいて監視情報生成装置６０−３で生成されたディスプレイ表示データがディスプレイ７０−３に表示された例である。
【００７４】
それぞれのディスプレイ表示データは、映像データ７１−１〜７１−３と、音声情報表示データ７２−１〜７２−３とから構成されている。
【００７５】
また、音声情報表示データ７２−１〜７２−３内には、イベントが発生したと認識された時刻位置に付せられたマーク７３−１〜７３−３が表示されるとともに、これらのマーク７３−１〜７３−３のいずれかにカーソルを近づけると、当該マークに関連付けられたイベント内容データが表示される。
【００７６】
図６（ｂ）においては、マーク７３−２にカーソルが近づけられたことにより、マーク７３−２に関連付けられたイベント内容データである「ガラス破壊音」のテキストデータ７４−２が表示されている。
【００７７】
また、音声メモリ部６０５に蓄積された音声データは、音声出力部６０６においてＤ／Ａ変換されて接続されたスピーカ８０−１〜８０−３に送信され、スピーカ８０−１〜８０−３から出力される（Ｓ９）。
【００７８】
以上の第１実施形態の監視システム１によれば、監視エリアおよびその近辺から取得された音声データの周波数特性に基づいてイベントの有無を検知し、さらにイベントが検知された際にこのイベントの内容を容易に確認することができるため、監視者が常駐することを必要とせずに所定期間の適切な監視を行うことができる。
【００７９】
この第１実施形態においては、音声解析部６０９において解析周波数特徴データと参照周波数特徴データとが比較される際、設定された全ての周波数帯域において解析周波数特徴データの音圧レベル値が参照周波数特徴データの音圧レベル値の可変範囲内に含まれると判定されたときに当該参照周波数特徴データが解析周波数特徴データに該当するデータであると判定される場合について説明したが、周波数帯域の数が多い場合（数十〜数百等）には、設定された周波数帯域のうちある程度の割合（例えば９５％）の帯域で解析周波数特徴データの音圧レベル値が参照周波数特徴データの音圧レベル値の可変範囲内に含まれれば、当該参照周波数特徴データが解析周波数特徴データに該当するデータであると判定するようにしてもよい。
【００８０】
《第２実施形態》
本発明の第２実施形態による監視情報生成装置は、監視エリアおよびその近辺の音声の音声レベル変動パターンに基づいてイベントが起こったか否かを判断するとともに、イベントが起こったと判断されたときにこのイベントの内容を特定し、これらの情報を表示させることにより監視者に提供する。
【００８１】
〈第２実施形態による監視システムの構成〉
本実施形態による監視システムの構成２は、第１実施形態による監視システム１の構成と同様であるため、同一の機能の構成部については詳細な説明は省略する。
【００８２】
本実施形態における監視情報生成装置６０−１〜６０−３の参照データ記憶部６０８は、イベントが発生したときの典型的な音声データの音圧レベル値の所定期間の変動パターンを示す参照変動パターンデータと、当該イベントの内容を示すテキストデータであるイベント内容データとからなる参照音声データを、予め複数個記憶しておく。
【００８３】
音声解析部６０９は、音圧レベル値算出部６０７で算出された音圧レベル値を解析対象データとして取得し、この解析対象データの所定期間ごとの音圧レベル値の変動データを参照データ記憶部６０８に記憶されている各参照変動パターンデータと比較し、当該解析対象データに該当する参照変動パターンデータがあればこの参照変動パターンデータに対応するイベント内容データを抽出する。
【００８４】
〈第２実施形態による監視システムの動作〉
次に、本実施形態による監視システム２の動作について説明する。
【００８５】
本実施形態の監視システム２においても、第１実施形態で説明した場合と同様に、監視カメラ１０−１〜１０−３で撮影された映像の映像データおよびマイク２０−１〜２０−３で取得された監視エリアおよびその近辺の音声の音声データが圧縮され、ネットワーク４０を介して対応する監視情報生成装置６０−１〜６０−３に送信される。
【００８６】
監視情報生成装置６０−１〜６０−３において、圧縮された映像データおよび音声データを受信し、接続されたディスプレイ７０−１〜７０−３に表示させるための表示データを生成するときの処理は、図３のフローチャートのステップＳ４における参照データ記憶部６０８に記憶されたデータを用いた比較処理を除いては第１実施形態と同様であるため、詳細な説明は省略する。
【００８７】
本実施形態においては、ステップＳ３において算出された音圧レベル値が解析対象データとして音声解析部６０９で取得され、この解析対象データの所定期間ごとの音圧レベル値の変動データが参照データ記憶部６０８に記憶されている各参照変動パターンデータと比較され、当該解析対象データの変動データに該当する参照変動パターンデータがあるか否かが判定される（Ｓ４）。
【００８８】
参照変動パターンデータと解析対象データとは、参照変動パターンデータの時間幅が予め設定された数で分割されたときの単位時間(m)ごとに、図４のフローチャートで示した処理と同様の手順で平均音圧レベル値が比較されることにより、解析対象データに該当する参照変動パターンデータの有無が判定される。
【００８９】
ここでも、参照変動パターンデータの分割された単位時間ごとの平均音圧レベル値は可変範囲を有しており、解析対象データの各単位時間あたりの平均音圧レベル値が、参照変動パターンデータのそれぞれの対応する単位時間あたりの平均音圧レベル値の可変範囲内に含まれていれば、同一のイベントによる音声データであると認められる。
【００９０】
以下、ステップＳ５〜Ｓ９の処理は、第１実施形態で説明した処理と同様であるため、詳細な説明は省略する。
【００９１】
以上の第２実施形態の監視システム２によれば、監視エリアおよびその近辺から取得された音声の変動データに基づいてイベントの有無を検知し、さらにイベントが検知された際にこのイベントの内容を容易に確認することができるため、監視者が常駐することを必要とせずに所定期間の適切な監視を行うことができる。
【００９２】
この第２実施形態においては、音声解析部６０９において解析対象データと参照変動パターンデータとが比較される際、分割された全ての単位時間において解析対象データの音圧レベル値が参照変動パターンデータの音圧レベル値の可変範囲内に含まれると判定されたときに当該参照変動パターンデータが解析対象データに該当するデータであると判定される場合について説明したが、参照変動パターンデータの時間幅の分割数が多い場合（数十〜数百等）には、分割された単位時間のうちある程度の割合（例えば９５％）で解析対象データの音圧レベル値が参照変動パターンデータの音圧レベル値の可変範囲内に含まれれば、当該参照変動パターンデータが解析対象データに該当するデータであると判定するようにしてもよい。
【００９３】
また、上記の各実施形態の監視情報生成装置の機能構成をプログラム化してコンピュータに組み込むことにより、当該コンピュータを監視情報生成装置として機能させることも可能である。
【図面の簡単な説明】
【００９４】
【図１】本発明の第１実施形態および第２実施形態である監視情報生成装置６０を利用した監視システム１，２の構成を示す全体図である。
【図２】本発明の第１実施形態および第２実施形態である監視情報生成装置６０の構成を示すブロック図である。
【図３】本発明の第１実施形態および第２実施形態である監視情報生成装置６０の動作を示すフローチャートである。
【図４】本発明の第１実施形態および第２実施形態である監視情報生成装置６０の音声解析部６０９の動作を示すフローチャートである。
【図５】本発明の第１実施形態である監視情報生成装置６０の参照データ記憶部６０８に記憶されている参照周波数特徴データの例（ａ）、および音声解析部６０９で変換された解析周波数特徴データの例（ｂ）である。
【図６】本発明の第１実施形態および第２実施形態である監視情報生成装置６０に接続されたディスプレイ７０−１〜７０−３に表示された表示データの例（ａ）〜（ｃ）である。
【符号の説明】
【００９５】
１…監視システム
２…監視システム
１０…監視カメラ
２０…マイク
３０…ネットワークハブ
４０…ネットワーク
５０…ネットワークハブ
６０…監視情報生成装置
７０…ディスプレイ
７１…映像データ
７２…音声情報表示データ
７３…マーク
７４…テキストデータ
８０…スピーカ
６０１…データ受信部
６０２…映像復号部
６０３…映像メモリ部
６０４…音声復号部
６０５…音声メモリ部
６０６…音声出力部
６０７…音圧レベル値算出部
６０８…参照データ記憶部
６０９…音声解析部
６１０…音声情報生成部
６１１…音声情報記憶部
６１２…データ重畳部
６１３…映像出力部
【技術分野】
【０００１】
本発明は、監視エリアの映像情報および音声に関する情報を表示させるための表示情報を生成する監視情報生成装置に関する。
【背景技術】
【０００２】
近年、監視カメラで撮影したデジタル映像信号やデジタル音声信号を表示装置または記録装置へ伝送するときの伝送媒体として、イーサネット（登録商標）等の通信ネットワークを用いるネットワーク型の監視システムが急速に普及している。
【０００３】
このようなネットワーク型の監視システムにおいては、複数の監視カメラで撮影した映像信号や音声信号を１本のケーブルで重畳して伝送することが可能である。
【０００４】
そのため、監視対象の施設内に予めネットワークケーブルを配線しておくことにより、設置する監視カメラの台数を後から任意に変更することが可能になる。
【０００５】
また、このようなネットワーク型の監視システムでは、監視カメラにおけるパン・チルト・ズーム等の撮影方向、尺度の制御を行うための制御信号もネットワークケーブルを利用して遠隔から送信することが可能であり、アナログ信号で伝送する監視システムのように別途制御信号送信用の配線をする必要がないという利点がある。
【０００６】
このような監視システムにおいては、従来は映像情報のみによる監視が主であったが、監視対象の場所の状況をより詳しく知るために音声情報も加えたいという要求が高まってきている。
【０００７】
監視の対象に音声情報も加えることにより、映像に映っていないエリアの情報、例えば映像に映っていないエリアで不審者によりガラスが割られた場合の情報などを検知できる可能性が高くなる。ここで、音声情報を加えた監視システムに関する技術として、特許文献１および２に記載された技術がある。
【０００８】
特許文献１には、監視エリアから得られた映像情報と音声情報とを単に監視者に提示するだけでなく、音声情報を分析することにより異常音が検出されたときに、表示する映像情報を異常音の発生場所の監視カメラで撮影された映像情報に切り替える監視モニター装置が記載されている。この監視モニター装置により、監視エリアで異常音が発生したときの映像による確認を容易に行うことができる。
【０００９】
しかし、この特許文献１の監視モニター装置については、監視者が常にモニター装置の前に常駐する必要があり、監視者が不在のときに発生したイベントに関する情報を残すことが困難であった。
【００１０】
また、特許文献２には、映像情報の表示とともに、過去から現在に至るまでに取得した音声情報をグラフを用いてモニター上に履歴表示する監視システム装置が記載されている。この監視システム装置によれば、監視者がモニターの前に常駐することなく過去に取得した音声情報の履歴を確認することが可能になる。
【特許文献１】特開２００４−１３９２６１号公報
【特許文献２】特開２００１−３０７２５２号公報
【発明の開示】
【発明が解決しようとする課題】
【００１１】
特許文献１記載の監視モニター装置によれば、モニターの表示が切り替えられたことにより監視者は何らかの異常が発生したことは知ることができるが、異常が発生してからどのくらいの時間が経過しているかを知る手段や、異常音の発生に関する映像が映っていなかった場合にどのような異常が発生したかを知る手段が提供されていないという問題があった。
【００１２】
また、特許文献２の技術では、あくまでも音声情報がどのように変化したかを示すのみであり、示された情報から異常発生に関する有意な情報を得るためには監視映像を確認する作業が別途必要であるという問題があった。
【００１３】
そこで本発明は、上記問題に鑑みなされたものであり、監視者が常駐することを必要とせず、過去に発生したイベントの有無、およびイベントが検知された際のイベント内容を容易に確認することが可能な表示情報を生成する監視情報生成装置を提供することを目的とする。
【課題を解決するための手段】
【００１４】
上記目的を達成するための本発明の監視情報生成装置（６０−１〜６０−３）は、監視エリアを撮影する監視カメラ（１０−１〜１０−３）と、前記監視エリアおよびその近傍の音を集音するマイク（２０−１〜２０−３）と、表示装置（７０−１〜７０−３）と、監視情報生成装置（６０−１〜６０−３）とを備えた監視システム（１）における監視情報生成装置（６０−１〜６０−３）であって、前記監視カメラ（１０−１〜１０−３）で撮影された前記監視エリアの映像の映像データと、前記マイク（２０−１〜２０−３）で集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部（６０１）と、音声発生イベントに応じた典型的な音声データを所定の周波数帯域ごとの音圧レベル値で示した参照周波数特徴データと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部（６０８）と、前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部（６０７）と、前記受信された音声データを取得し、この音声データを前記周波数帯域ごとの音圧レベル値で示した解析周波数特徴データに変換して参照データ記憶部（６０８）に記憶されている各前記参照周波数特徴データと帯域ごとに比較し、前記解析周波数特徴データに該当する前記参照周波数特徴データがある場合にこの参照周波数特徴データに対応するイベント内容データを抽出する音声解析部（６０９）と、前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部（６０９）でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記抽出されたイベント内容データを前記マークに関連付ける音声情報生成部（６１０）と、前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部（６１２）と、前記生成されたディスプレイ表示データを、前記表示装置（７０−１〜７０−３）に出力する映像出力部（６１３）とを備えたことを特徴とする。
【００１５】
また、本発明の他の形態の監視情報生成装置（６０−１〜６０−３）は、監視エリアを撮影する監視カメラ（１０−１〜１０−３）と、前記監視エリアおよびその近傍の音を集音するマイク（２０−１〜２０−３）と、表示装置（７０−１〜７０−３）と、監視情報生成装置（６０−１〜６０−３）とを備えた監視システム（２）における監視情報生成装置（６０−１〜６０−３）であって、前記監視カメラ（１０−１〜１０−３）で撮影された前記監視エリアの映像の映像データと、前記マイク（２０−１〜２０−３）で集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部（６０１）と、音声発生イベントに応じた典型的な音声データの、所定期間の音圧レベル値の変動パターンを示す参照変動パターンデータと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部（６０８）と、前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部（６０７）と、前記算出された音圧レベル値を解析対象データとして取得し、この解析対象データと前記参照データ記憶部（６０８）に記憶されている前記各参照変動パターンデータとを所定時間幅ごとに比較し、前記解析対象データに該当する前記参照変動パターンデータがある場合にこの参照変動パターンデータに対応するイベント内容データを抽出する音声解析部（６０９）と、前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部（６０９）でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記音声解析部（６０９）で抽出されたイベント内容データを前記マークに関連付ける音声情報生成部（６１０）と、前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部（６１２）と、前記生成されたディスプレイ表示データを、前記表示装置（７０−１〜７０−３）に出力する映像出力部（６１３）とを備えたことを特徴とする。
【発明の効果】
【００１６】
本発明の監視情報生成装置によれば、監視者が常駐することを必要とせず、過去に発生した音声発生イベントの有無、および音声発生イベントが検知された際のイベント内容を容易に確認することが可能な表示情報を生成することができる。
【発明を実施するための最良の形態】
【００１７】
《第１実施形態》
本発明の第１実施形態による監視情報生成装置は、監視エリアおよびその近辺の音声の周波数特性に基づいて音声を発する特異な事態（イベントまたは音声発生イベントと言う）が起こったか否かを判断するとともに、イベントが起こったと判断されたときにこのイベントの内容を特定し、これらの情報を表示装置に表示させることを特徴としている。
【００１８】
〈第１実施形態による監視システムの構成〉
本実施形態である監視情報生成装置を適用した監視システムの構成を、図１を参照して説明する。
【００１９】
〈第１実施形態による監視システム〉
本実施形態による監視システム１は、複数の監視カメラ１０−１〜１０−３と、これらの監視カメラ１０−１〜１０−３にそれぞれ接続されたマイク２０−１〜２０−３と、監視カメラ１０−１〜１０−３に接続されたネットワークハブ３０と、ネットワーク４０を介してネットワークハブ３０に接続されたネットワークハブ５０と、ネットワークハブ５０に接続され、監視カメラ１０−１〜１０−３にそれぞれ対応させた複数の監視情報生成装置６０−１〜６０−３と、これらの監視情報生成装置６０−１〜６０−３にそれぞれ接続された表示装置としてのディスプレイ７０−１〜７０−３およびスピーカ８０−１〜８０−３とを備えている。
【００２０】
監視カメラ１０−１〜１０−３は、それぞれ、各監視エリアを撮影して映像データを生成した後ＪＰＥＧ等の形式で圧縮し、ネットワークハブ３０、ネットワーク４０、およびネットワークハブ５０を介して、それぞれ対応する監視情報生成装置６０−１〜６０−３に送信する。
【００２１】
また、監視カメラ１０−１〜１０−３は、それぞれ接続されたマイク２０−１〜２０−３から音声データを取得し、ＭＰ３等の形式で圧縮して映像データと同様にネットワークハブ３０、ネットワーク４０、およびネットワークハブ５０を介して、対応する監視情報生成装置６０−１〜６０−３に送信する。
【００２２】
マイク２０−１〜２０−３は、それぞれ、監視エリアおよびその近辺の音声を取得して音声データに変換し、接続された監視カメラ１０−１〜１０−３に送出する。
【００２３】
監視情報生成装置６０−１〜６０−３は、それぞれ図２に示す（同図においては、監視情報生成装置６０と記す）ように、データ受信部６０１と、映像復号部６０２と、映像メモリ部６０３と、音声復号部６０４と、音声メモリ部６０５と、音声出力部６０６と、音圧レベル値算出部６０７と、参照データ記憶部６０８と、音声解析部６０９と、音声情報生成部６１０と、音声情報記憶部６１１と、データ重畳部６１２と、映像出力部６１３とを有する。
【００２４】
データ受信部６０１は、監視カメラ１０−１〜１０−３から送信された、圧縮された映像データおよび音声データを受信する。映像復号部６０２は、データ受信部６０１で受信された、圧縮された映像データを伸張する。映像メモリ部６０３は、映像復号部６０２で復号された映像データを記憶する。
【００２５】
音声復号部６０４は、データ受信部６０１で受信された、圧縮された音声データを復号する。音声メモリ部６０５は、音声復号部６０４で復号された音声データを記憶する。音声出力部６０６は、音声メモリ部６０５に記憶されたデジタル音声データを一定の周期で取得してアナログ音声データに変換し、接続されたスピーカ８０−１〜８０−３に送信する。
【００２６】
音圧レベル値算出部６０７は、音声復号部６０４で復号された音声データを取得し、一定期間ごとの音圧レベル値を算出する。
【００２７】
参照データ記憶部６０８には、イベントが発生したときの典型的な音声データである、ガラスが破壊されたときの音やドアが閉まるときの音などを、所定の周波数帯域ごとの音圧レベル値で示した参照周波数特徴データと、イベントの内容を示すテキストデータであるイベント内容データとから構成された参照音声データを、予め複数個記憶しておく。
【００２８】
音声解析部６０９は、音声復号部６０４で復号された音声データを取得し、参照周波数特徴データと同様の周波数帯域ごとの音圧レベル値で示した解析対象データである解析周波数特徴データに変換して参照データ記憶部６０８に記憶されている各参照周波数特徴データと帯域ごとに比較し、変換した解析周波数特徴データに該当する参照周波数特徴データがあればこの参照周波数特徴データに対応するイベント内容データを抽出する。音声データを解析周波数特徴データに変換する際は、ＦＦＴ（高速フーリエ変換）の手法を用いることができる。
【００２９】
音声情報生成部６１０は、音圧レベル値算出部６０７で算出された過去の音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、音声解析部６０９でいずれかのイベント内容データが抽出されたときには、抽出された時刻に該当する時間軸上の位置にイベント発生を示すマークを付し、さらに音声解析部６０９で抽出されたイベント内容データをこのマークに関連付ける。
【００３０】
音声情報記憶部６１１は、音声情報生成部６１０で生成された音声情報表示データを記憶する。
【００３１】
データ重畳部６１２は、映像メモリ部６０３に蓄積された映像データおよび音声情報記憶部６１１に記憶された音声情報表示データを取得して、取得した映像データに当該音声情報表示データを重畳して表示用のディスプレイ表示データを生成する。
【００３２】
映像出力部６１３は、データ重畳部６１２で生成されたディスプレイ表示データをＤ／Ａ変換し、接続されたディスプレイ７０−１〜７０−３のいずれかに送信する。
【００３３】
ディスプレイ７０−１〜７０−３は、接続された監視情報生成装置６０−１〜６０−３から送信されたディスプレイ表示データを取得して表示する。
【００３４】
スピーカ８０−１〜８０−３は、音声出力部６０６から送信された音声データを取得して出力する。
【００３５】
〈第１実施形態による監視システムの動作〉
次に、本実施形態である監視システム１の動作について説明する。
【００３６】
本実施形態の監視システム１の監視カメラ１０−１〜１０−３は、それぞれ、各監視エリアを撮影して映像データを生成し、さらにこの映像データをＪＰＥＧ等の形式で圧縮する。
【００３７】
また、監視カメラ１０−１〜１０−３にそれぞれ接続されたマイク２０−１〜２０−３では、それぞれ、監視エリアおよびその近辺の音声が音声データに変換され、接続された監視カメラ１０−１〜１０−３に送出される。そして、監視カメラ１０−１〜１０−３においてＭＰ３等の形式で圧縮される。
【００３８】
圧縮された映像データおよび音声データは、監視カメラ１０−１〜１０−３からネットワークハブ３０、ネットワーク４０、およびネットワークハブ５０を介して、それぞれ対応する監視情報生成装置６０−１〜６０−３に送信される。
【００３９】
次に、監視情報生成装置６０−１〜６０−３が、圧縮された映像データおよび音声データを受信し、接続されたディスプレイ７０−１〜７０−３に表示させるための表示データを生成する場合の処理について、図３のフローチャートを併せ参照して説明する。
【００４０】
まず、監視情報生成装置６０−１〜６０−３のデータ受信部６０１が圧縮された映像データおよび音声データを受信すると（Ｓ１）、これらのうち圧縮された映像データが映像復号部６０２で伸張され、映像メモリ部６０３に記憶される。また、データ受信部６０１で受信された圧縮された音声データは、音声復号部６０４で復号され、音声メモリ部６０５に記憶される（Ｓ２）。
【００４１】
音声復号部６０４で復号された音声データは音圧レベル値算出部６０７でも取得され、一定期間ごと（例えば１秒ごと）の音圧レベル値が算出される（Ｓ３）。
【００４２】
また、音声復号部６０４で復号された音声データは音声解析部６０９でも取得され、一定期間ごとの音声データが、参照周波数特徴データと同様の周波数帯域ごとの音圧レベル値で示した解析対象データである解析周波数特徴データに変換される。
【００４３】
変換された解析周波数特徴データは、音声解析部６０９において参照データ記憶部６０８に記憶されている各参照周波数特徴データと帯域ごとに比較され、当該解析周波数特徴データに該当する参照周波数特徴データがあるか否かが判定される（Ｓ４）。
【００４４】
音声解析部６０９における解析周波数特徴データと参照周波数特徴データとの比較処理について、図４のフローチャートおよび図５の周波数特徴データの例を併せ参照して説明する。
【００４５】
参照データ記憶部６０８には複数の第n参照周波数特徴データが記憶されており、図５（ａ）においては、第１〜第３参照周波数特徴データの３つが記憶されている（n=1〜3）。
【００４６】
これらの参照周波数特徴データは分割された周波数帯域(m)ごとの音圧レベル値で示されており、図５（ａ）においては、６つの周波数帯域(1)〜(6)ごとの音圧レベル値で示されている（m=1〜6）。
【００４７】
また、図５（ｂ）は、音声解析部６０９において変換された解析周波数特徴データの例である。ここでは、解析周波数特徴データも、参照周波数特徴データと同様の周波数帯域(m)（m=1〜6）ごとの音圧レベル値で示されているものとする。
【００４８】
まず、音声解析部６０９において解析周波数特徴データと参照周波数特徴データとの比較処理が開始されると、参照周波数特徴データの中の１つの第n参照周波数特徴データが取得される。nの初期値は１であり、まずは第１参照周波数特徴データが取得され、ｍの初期値が１となる（Ｓ１１、Ｓ１２）。
【００４９】
第１参照周波数特徴データが取得されると、このデータの中の１つの周波数帯域(m)について第１参照周波数特徴データと解析周波数特徴データとが比較される。mの初期値は１であり、まずは周波数帯域(1)について第１参照周波数特徴データと解析周波数特徴データとが比較される。
【００５０】
比較の結果、解析周波数特徴データの周波数帯域(1)の音圧レベル値が参照周波数特徴データの周波数帯域(1)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１３）。
【００５１】
この参照周波数特徴データの周波数帯域の音圧レベル値の一定の可変範囲とは、同一のイベントによる当該周波数帯域(m)の音声データであると認めるための許容範囲であり、ここでは当該周波数帯域の音圧レベル値の±５％以内の値を可変範囲内の値として定める。
【００５２】
図５においては、解析周波数特徴データの周波数帯域(1)の音圧レベル値は第１参照周波数特徴データの周波数帯域(1)の可変範囲内には含まれないと判定され（Ｓ１３の「NO」）、ステップＳ１４に移動する。
【００５３】
ステップＳ１４において第２参照周波数特徴データの処理に移り、ステップＳ１２に戻って第２参照周波数特徴データが取得される（Ｓ１４、Ｓ１５、Ｓ１２）。
【００５４】
第２参照周波数特徴データが取得されると、周波数帯域(m)について第２参照周波数特徴データと解析周波数特徴データとが比較される。mの初期値は１となり、まずは周波数帯域(1)について第２参照周波数特徴データと解析周波数特徴データとが比較される。
【００５５】
比較の結果、解析周波数特徴データの周波数帯域(1)の音圧レベル値が参照周波数特徴データの周波数帯域(1)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１３）。
【００５６】
図５においては、解析周波数特徴データの周波数帯域(1)の音圧レベル値は第２参照周波数特徴データの周波数帯域(1)の可変範囲内には含まれないと判定され（Ｓ１３の「NO」）、ステップＳ１４に移動する。
【００５７】
ステップＳ１４では第３参照周波数特徴データの処理に移り、ステップＳ１２に戻って第３参照周波数特徴データが取得される（Ｓ１４、Ｓ１５、Ｓ１２）。
【００５８】
第３参照周波数特徴データが取得されると、周波数帯域(m)について第３参照周波数特徴データと解析周波数特徴データとが比較される。mの初期値は１となり、まずは周波数帯域(1)について第３参照周波数特徴データと解析周波数特徴データとが比較される。
【００５９】
比較の結果、解析周波数特徴データの周波数帯域(1)の音圧レベル値が参照周波数特徴データの周波数帯域(1)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１３）。
【００６０】
図５において、解析周波数特徴データの周波数帯域(1)の音圧レベル値は第３参照周波数特徴データの周波数帯域(1)の可変範囲内には含まれると判定され（Ｓ１３の「YES」）、ステップＳ１６に移動する。
【００６１】
ステップＳ１６では周波数帯域(2)の処理に移り、ステップＳ１３に戻って、解析周波数特徴データの周波数帯域(2)の音圧レベル値が第３参照周波数特徴データの周波数帯域(2)の音圧レベル値の一定の可変範囲内に含まれるか否かが判定される（Ｓ１６、Ｓ１７、Ｓ１３）。
【００６２】
図５において、解析周波数特徴データの周波数帯域(2)の音圧レベル値は第３参照周波数特徴データの周波数帯域(2)の可変範囲内には含まれると判定され（Ｓ１３の「YES」）、ステップＳ１６に移動する。
【００６３】
図５においては、ステップＳ１３、Ｓ１６の処理を周波数帯域(6)（m=6）まで繰り返すことにより、全ての周波数帯域において解析周波数特徴データの音圧レベル値が第３参照周波数特徴データの音圧レベル値の可変範囲内に含まれると判定され（Ｓ１３、Ｓ１６、Ｓ１７）、この第３参照周波数特徴データは解析周波数特徴データに該当するデータであると判定される（Ｓ１８）。
【００６４】
また、ステップＳ１３において、解析周波数特徴データの周波数帯域(m)の音圧レベル値は第n参照周波数特徴データの周波数帯域(m)の可変範囲内には含まれないと判定され、参照データ記憶部６０８内の全ての参照周波数特徴データについての比較処理が終了したとき（Ｓ１５の「YES」）は、解析周波数特徴データに該当する参照周波数特徴データはないと判定される（Ｓ１９）。
【００６５】
以上で、音声解析部６０９における解析周波数特徴データと参照周波数特徴データとの比較処理についての説明を終了する。
【００６６】
図３の説明に戻り、ステップＳ４において解析周波数特徴データに該当する参照周波数特徴データがあると判定されたときには、この参照周波数特徴データに対応するイベント内容データが抽出される（Ｓ５）。
【００６７】
ステップＳ５においてイベント内容データが抽出されたとき、またはステップＳ４において解析周波数特徴データに該当する参照周波数特徴データがないと判定されたとき（Ｓ４の「NO」）は、音声情報生成部６１０において音圧レベル値算出部６０７で算出された過去の音圧レベル値が取得され、時間軸上にグラフ表示するための音声情報表示データが生成される（Ｓ６）。ここで取得される音圧レベル値は過去数十分〜数時間程度が好ましい。
【００６８】
ここで、音声解析部６０９においていずれかのイベント内容データが抽出されているときには、音声情報生成部６１０により、この音声情報表示データにイベント内容データが抽出された時刻に該当するグラフデータの時間軸上の位置にイベント発生を示すマークが付され、さらに音声解析部６０９で抽出されたイベント内容データがこのマークに関連付けられる。
【００６９】
音声情報生成部６１０で生成された音声情報表示データは、音声情報記憶部６１１に記憶される（Ｓ７）。
【００７０】
次に、データ重畳部６１２において映像メモリ部６０３に蓄積された映像データおよび音声情報記憶部６１１に記憶された音声情報表示データが取得され、取得した映像データに当該音声情報表示データが重畳されて表示用のディスプレイ表示データが生成される（Ｓ８）。
【００７１】
データ重畳部６１２で生成されたディスプレイ表示データは、映像出力部６１３においてＤ／Ａ変換されて接続されたディスプレイ７０−１〜７０−３のいずれかに送信される。
【００７２】
映像出力部６１３から送信されたディスプレイ表示データは、ディスプレイ７０−１〜７０−３でそれぞれ表示される。ディスプレイ７０−１〜７０−３に表示されたディスプレイ表示データの例を、図６に示す。
【００７３】
図６（ａ）は監視カメラ１０−１で撮影された映像データおよびマイク２０−１で取得された音声データに基づいて監視情報生成装置６０−１で生成されたディスプレイ表示データがディスプレイ７０−１に表示された例であり、図６（ｂ）は監視カメラ１０−２で撮影された映像データおよびマイク２０−２で取得された音声データに基づいて監視情報生成装置６０−２で生成されたディスプレイ表示データがディスプレイ７０−２に表示された例であり、図６（ｃ）は監視カメラ１０−３で撮影された映像データおよびマイク２０−３で取得された音声データに基づいて監視情報生成装置６０−３で生成されたディスプレイ表示データがディスプレイ７０−３に表示された例である。
【００７４】
それぞれのディスプレイ表示データは、映像データ７１−１〜７１−３と、音声情報表示データ７２−１〜７２−３とから構成されている。
【００７５】
また、音声情報表示データ７２−１〜７２−３内には、イベントが発生したと認識された時刻位置に付せられたマーク７３−１〜７３−３が表示されるとともに、これらのマーク７３−１〜７３−３のいずれかにカーソルを近づけると、当該マークに関連付けられたイベント内容データが表示される。
【００７６】
図６（ｂ）においては、マーク７３−２にカーソルが近づけられたことにより、マーク７３−２に関連付けられたイベント内容データである「ガラス破壊音」のテキストデータ７４−２が表示されている。
【００７７】
また、音声メモリ部６０５に蓄積された音声データは、音声出力部６０６においてＤ／Ａ変換されて接続されたスピーカ８０−１〜８０−３に送信され、スピーカ８０−１〜８０−３から出力される（Ｓ９）。
【００７８】
以上の第１実施形態の監視システム１によれば、監視エリアおよびその近辺から取得された音声データの周波数特性に基づいてイベントの有無を検知し、さらにイベントが検知された際にこのイベントの内容を容易に確認することができるため、監視者が常駐することを必要とせずに所定期間の適切な監視を行うことができる。
【００７９】
この第１実施形態においては、音声解析部６０９において解析周波数特徴データと参照周波数特徴データとが比較される際、設定された全ての周波数帯域において解析周波数特徴データの音圧レベル値が参照周波数特徴データの音圧レベル値の可変範囲内に含まれると判定されたときに当該参照周波数特徴データが解析周波数特徴データに該当するデータであると判定される場合について説明したが、周波数帯域の数が多い場合（数十〜数百等）には、設定された周波数帯域のうちある程度の割合（例えば９５％）の帯域で解析周波数特徴データの音圧レベル値が参照周波数特徴データの音圧レベル値の可変範囲内に含まれれば、当該参照周波数特徴データが解析周波数特徴データに該当するデータであると判定するようにしてもよい。
【００８０】
《第２実施形態》
本発明の第２実施形態による監視情報生成装置は、監視エリアおよびその近辺の音声の音声レベル変動パターンに基づいてイベントが起こったか否かを判断するとともに、イベントが起こったと判断されたときにこのイベントの内容を特定し、これらの情報を表示させることにより監視者に提供する。
【００８１】
〈第２実施形態による監視システムの構成〉
本実施形態による監視システムの構成２は、第１実施形態による監視システム１の構成と同様であるため、同一の機能の構成部については詳細な説明は省略する。
【００８２】
本実施形態における監視情報生成装置６０−１〜６０−３の参照データ記憶部６０８は、イベントが発生したときの典型的な音声データの音圧レベル値の所定期間の変動パターンを示す参照変動パターンデータと、当該イベントの内容を示すテキストデータであるイベント内容データとからなる参照音声データを、予め複数個記憶しておく。
【００８３】
音声解析部６０９は、音圧レベル値算出部６０７で算出された音圧レベル値を解析対象データとして取得し、この解析対象データの所定期間ごとの音圧レベル値の変動データを参照データ記憶部６０８に記憶されている各参照変動パターンデータと比較し、当該解析対象データに該当する参照変動パターンデータがあればこの参照変動パターンデータに対応するイベント内容データを抽出する。
【００８４】
〈第２実施形態による監視システムの動作〉
次に、本実施形態による監視システム２の動作について説明する。
【００８５】
本実施形態の監視システム２においても、第１実施形態で説明した場合と同様に、監視カメラ１０−１〜１０−３で撮影された映像の映像データおよびマイク２０−１〜２０−３で取得された監視エリアおよびその近辺の音声の音声データが圧縮され、ネットワーク４０を介して対応する監視情報生成装置６０−１〜６０−３に送信される。
【００８６】
監視情報生成装置６０−１〜６０−３において、圧縮された映像データおよび音声データを受信し、接続されたディスプレイ７０−１〜７０−３に表示させるための表示データを生成するときの処理は、図３のフローチャートのステップＳ４における参照データ記憶部６０８に記憶されたデータを用いた比較処理を除いては第１実施形態と同様であるため、詳細な説明は省略する。
【００８７】
本実施形態においては、ステップＳ３において算出された音圧レベル値が解析対象データとして音声解析部６０９で取得され、この解析対象データの所定期間ごとの音圧レベル値の変動データが参照データ記憶部６０８に記憶されている各参照変動パターンデータと比較され、当該解析対象データの変動データに該当する参照変動パターンデータがあるか否かが判定される（Ｓ４）。
【００８８】
参照変動パターンデータと解析対象データとは、参照変動パターンデータの時間幅が予め設定された数で分割されたときの単位時間(m)ごとに、図４のフローチャートで示した処理と同様の手順で平均音圧レベル値が比較されることにより、解析対象データに該当する参照変動パターンデータの有無が判定される。
【００８９】
ここでも、参照変動パターンデータの分割された単位時間ごとの平均音圧レベル値は可変範囲を有しており、解析対象データの各単位時間あたりの平均音圧レベル値が、参照変動パターンデータのそれぞれの対応する単位時間あたりの平均音圧レベル値の可変範囲内に含まれていれば、同一のイベントによる音声データであると認められる。
【００９０】
以下、ステップＳ５〜Ｓ９の処理は、第１実施形態で説明した処理と同様であるため、詳細な説明は省略する。
【００９１】
以上の第２実施形態の監視システム２によれば、監視エリアおよびその近辺から取得された音声の変動データに基づいてイベントの有無を検知し、さらにイベントが検知された際にこのイベントの内容を容易に確認することができるため、監視者が常駐することを必要とせずに所定期間の適切な監視を行うことができる。
【００９２】
この第２実施形態においては、音声解析部６０９において解析対象データと参照変動パターンデータとが比較される際、分割された全ての単位時間において解析対象データの音圧レベル値が参照変動パターンデータの音圧レベル値の可変範囲内に含まれると判定されたときに当該参照変動パターンデータが解析対象データに該当するデータであると判定される場合について説明したが、参照変動パターンデータの時間幅の分割数が多い場合（数十〜数百等）には、分割された単位時間のうちある程度の割合（例えば９５％）で解析対象データの音圧レベル値が参照変動パターンデータの音圧レベル値の可変範囲内に含まれれば、当該参照変動パターンデータが解析対象データに該当するデータであると判定するようにしてもよい。
【００９３】
また、上記の各実施形態の監視情報生成装置の機能構成をプログラム化してコンピュータに組み込むことにより、当該コンピュータを監視情報生成装置として機能させることも可能である。
【図面の簡単な説明】
【００９４】
【図１】本発明の第１実施形態および第２実施形態である監視情報生成装置６０を利用した監視システム１，２の構成を示す全体図である。
【図２】本発明の第１実施形態および第２実施形態である監視情報生成装置６０の構成を示すブロック図である。
【図３】本発明の第１実施形態および第２実施形態である監視情報生成装置６０の動作を示すフローチャートである。
【図４】本発明の第１実施形態および第２実施形態である監視情報生成装置６０の音声解析部６０９の動作を示すフローチャートである。
【図５】本発明の第１実施形態である監視情報生成装置６０の参照データ記憶部６０８に記憶されている参照周波数特徴データの例（ａ）、および音声解析部６０９で変換された解析周波数特徴データの例（ｂ）である。
【図６】本発明の第１実施形態および第２実施形態である監視情報生成装置６０に接続されたディスプレイ７０−１〜７０−３に表示された表示データの例（ａ）〜（ｃ）である。
【符号の説明】
【００９５】
１…監視システム
２…監視システム
１０…監視カメラ
２０…マイク
３０…ネットワークハブ
４０…ネットワーク
５０…ネットワークハブ
６０…監視情報生成装置
７０…ディスプレイ
７１…映像データ
７２…音声情報表示データ
７３…マーク
７４…テキストデータ
８０…スピーカ
６０１…データ受信部
６０２…映像復号部
６０３…映像メモリ部
６０４…音声復号部
６０５…音声メモリ部
６０６…音声出力部
６０７…音圧レベル値算出部
６０８…参照データ記憶部
６０９…音声解析部
６１０…音声情報生成部
６１１…音声情報記憶部
６１２…データ重畳部
６１３…映像出力部
【特許請求の範囲】
【請求項１】
監視エリアを撮影する監視カメラと、前記監視エリアおよびその近傍の音を集音するマイクと、表示装置と、監視情報生成装置とを備えた監視システムにおける監視情報生成装置であって、
前記監視カメラで撮影された前記監視エリアの映像の映像データと、前記マイクで集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部と、
音声発生イベントに応じた典型的な音声データを所定の周波数帯域ごとの音圧レベル値で示した参照周波数特徴データと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部と、
前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部と、
前記受信された音声データを取得し、この音声データを前記周波数帯域ごとの音圧レベル値で示した解析周波数特徴データに変換して参照データ記憶部に記憶されている各前記参照周波数特徴データと帯域ごとに比較し、前記解析周波数特徴データに該当する前記参照周波数特徴データがある場合にこの参照周波数特徴データに対応するイベント内容データを抽出する音声解析部と、
前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記抽出されたイベント内容データを前記マークに関連付ける音声情報生成部と、
前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部と、
前記生成されたディスプレイ表示データを、前記表示装置に出力する映像出力部と、
を備えた監視情報生成装置。
【請求項２】
監視エリアを撮影する監視カメラと、前記監視エリアおよびその近傍の音を集音するマイクと、表示装置と、監視情報生成装置とを備えた監視システムにおける監視情報生成装置であって、
前記監視カメラで撮影された前記監視エリアの映像の映像データと、前記マイクで集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部と、
音声発生イベントに応じた典型的な音声データの、所定期間の音圧レベル値の変動パターンを示す参照変動パターンデータと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部と、
前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部と、
前記算出された音圧レベル値を解析対象データとして取得し、この解析対象データと前記参照データ記憶部に記憶されている前記各参照変動パターンデータとを所定時間幅ごとに比較し、前記解析対象データに該当する前記参照変動パターンデータがある場合にこの参照変動パターンデータに対応するイベント内容データを抽出する音声解析部と、
前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記音声解析部で抽出されたイベント内容データを前記マークに関連付ける音声情報生成部と、
前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部と、
前記生成されたディスプレイ表示データを、前記表示装置に出力する映像出力部と、
を備えた監視情報生成装置。
【請求項１】
監視エリアを撮影する監視カメラと、前記監視エリアおよびその近傍の音を集音するマイクと、表示装置と、監視情報生成装置とを備えた監視システムにおける監視情報生成装置であって、
前記監視カメラで撮影された前記監視エリアの映像の映像データと、前記マイクで集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部と、
音声発生イベントに応じた典型的な音声データを所定の周波数帯域ごとの音圧レベル値で示した参照周波数特徴データと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部と、
前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部と、
前記受信された音声データを取得し、この音声データを前記周波数帯域ごとの音圧レベル値で示した解析周波数特徴データに変換して参照データ記憶部に記憶されている各前記参照周波数特徴データと帯域ごとに比較し、前記解析周波数特徴データに該当する前記参照周波数特徴データがある場合にこの参照周波数特徴データに対応するイベント内容データを抽出する音声解析部と、
前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記抽出されたイベント内容データを前記マークに関連付ける音声情報生成部と、
前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部と、
前記生成されたディスプレイ表示データを、前記表示装置に出力する映像出力部と、
を備えた監視情報生成装置。
【請求項２】
監視エリアを撮影する監視カメラと、前記監視エリアおよびその近傍の音を集音するマイクと、表示装置と、監視情報生成装置とを備えた監視システムにおける監視情報生成装置であって、
前記監視カメラで撮影された前記監視エリアの映像の映像データと、前記マイクで集音された前記監視エリアおよびその近傍の音の音声データとを受信するデータ受信部と、
音声発生イベントに応じた典型的な音声データの、所定期間の音圧レベル値の変動パターンを示す参照変動パターンデータと、前記音声発生イベントの内容を示すテキストデータであるイベント内容データとにより構成された参照音声データを、予め複数個記憶する参照データ記憶部と、
前記受信された音声データを取得し、この音声データの一定期間ごとの音圧レベル値を算出する音圧レベル値算出部と、
前記算出された音圧レベル値を解析対象データとして取得し、この解析対象データと前記参照データ記憶部に記憶されている前記各参照変動パターンデータとを所定時間幅ごとに比較し、前記解析対象データに該当する前記参照変動パターンデータがある場合にこの参照変動パターンデータに対応するイベント内容データを抽出する音声解析部と、
前記算出された現在から所定期間前までの音圧レベル値を取得して時間軸上にグラフ表示するための音声情報表示データを生成し、前記音声解析部でいずれかのイベント内容データが抽出されている場合には、抽出された時刻に該当する前記時間軸上の位置にイベント発生を示すマークを付すとともに、前記音声解析部で抽出されたイベント内容データを前記マークに関連付ける音声情報生成部と、
前記受信された映像データに、前記生成された音声情報表示データを重畳して表示用のディスプレイ表示データを生成するデータ重畳部と、
前記生成されたディスプレイ表示データを、前記表示装置に出力する映像出力部と、
を備えた監視情報生成装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図２】
【図３】
【図４】
【図５】
【図６】
【公開番号】特開２００９−１１１５０６（Ｐ２００９−１１１５０６Ａ）
【公開日】平成２１年５月２１日（２００９．５．２１）
【国際特許分類】
【出願番号】特願２００７−２７９３２８（Ｐ２００７−２７９３２８）
【出願日】平成１９年１０月２６日（２００７．１０．２６）
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
【公開日】平成２１年５月２１日（２００９．５．２１）
【国際特許分類】
【出願日】平成１９年１０月２６日（２００７．１０．２６）
【出願人】（０００００４３２９）日本ビクター株式会社 (3,896)
【Ｆターム（参考）】
[ Back to top ]