電子看板装置
【課題】電子看板装置において、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更する。
【解決手段】電子看板装置１は、ディスプレイ２と、赤外サーモパイルアレイセンサ４と、演算処理部５とを備える。ディスプレイ２は、液晶パネル２１にバックライト２２からの光を透過させることにより画像を表示し、この画像によって、広告、宣伝する各種情報を表示する。演算処理部５は、第１の演算処理部５１と、第２の演算処理部５２とを備える。第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて、電子看板装置１の前の人体の有無を判断する。第２の演算処理部５２は、第１の演算処理部５１における人体の有無の判断結果に応じて、ディスプレイ２の明るさを変更する。第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを変更することにより、ディスプレイ２の明るさを変更する。
【解決手段】電子看板装置１は、ディスプレイ２と、赤外サーモパイルアレイセンサ４と、演算処理部５とを備える。ディスプレイ２は、液晶パネル２１にバックライト２２からの光を透過させることにより画像を表示し、この画像によって、広告、宣伝する各種情報を表示する。演算処理部５は、第１の演算処理部５１と、第２の演算処理部５２とを備える。第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて、電子看板装置１の前の人体の有無を判断する。第２の演算処理部５２は、第１の演算処理部５１における人体の有無の判断結果に応じて、ディスプレイ２の明るさを変更する。第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを変更することにより、ディスプレイ２の明るさを変更する。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、各種情報を広告、宣伝するために用いられる電子看板装置に関するものである。
【背景技術】
【０００２】
従来から、電子看板装置は、各種情報をディスプレイに表示することにより、各種情報を広告、宣伝するようになっている。電子看板装置は、例えば、大規模小売店等において設置され、商品やサービス等の各種情報を広告、宣伝するために用いられる。
【０００３】
このような電子看板装置において、常時、ディスプレイを点灯しているものがある。しかしながら、このような電子看板装置は、電子看板装置の近くに人が居ない場合でもディスプレイを点灯しているため、省電力の観点からは、好ましくない。
【０００４】
また、電子看板装置において、カメラを搭載し、このカメラによって、電子看板装置の近くに人が居るか否かを検出して、電子看板装置の近くに人が居る場合にだけ、ディスプレイを点灯するようにしたものがある。しかしながら、このような電子看板装置は、人の検出にカメラを用いているため、個人のプライバシー保護の観点からは、好ましくない。
【０００５】
一方、パーソナルコンピュータにおいては、ディスプレイのバックライトの自動パワーオフ機能を有するものが多い。しかしながら、この自動パワーオフ機能は、マウスやキーボード等の操作入力がない状態から、一定時間経過すると、バックライトを消灯するというものである。従って、パーソナルコンピュータにおけるディスプレイのバックライトの自動パワーオフ機能は、マウスやキーボード等の操作入力を行う手段を持たない電子看板装置には、適用できない。
【０００６】
そこで、電子看板装置において、赤外センサや遮光センサによって、近くに人が居るか否かを検出して、近くに人が居るか否かに応じて、ディスプレイの明るさを変更するようにしたものが知られている（例えば特許文献１参照）。また、電子看板装置において、焦電形の赤外線センサによって、近くに人が居るか否かを検出して、近くに人が居るか否かに応じて、ディスプレイの明るさを変更するようにしたものも知られている（例えば特許文献２参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平８−１５６６５号公報
【特許文献２】実開平５−５９４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した特許文献１に開示されている赤外センサ及び遮光センサや、特許文献２に開示されている焦電形の赤外線センサでは、人体の接近等の人の動きを検知することができるが、動きのない人体の滞在を検出することはできない。つまり、特許文献１の電子看板装置や特許文献２の電子看板装置では、近くに人が居るか否かに応じてディスプレイの明るさを変更することができるとは言い難い。
【０００９】
本発明は、上記課題を解決するためになされたものであり、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更することができる電子看板装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するために本発明の電子看板装置は、明るさの変更が可能なディスプレイを備える電子看板装置において、赤外サーモパイルアレイセンサと、赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、この人体の有無の判断結果に応じてディスプレイの明るさを変更する演算処理部とを備える、ものである。
【００１１】
本発明の電子看板装置において、演算処理部は、赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、人体の有無の判断結果の情報を送信する第１の演算処理部と、第１の演算処理部から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じてディスプレイの明るさを変更する第２の演算処理部とを備える、ものが好ましい。
【００１２】
また、本発明の電子看板装置において、第１の演算処理部は、赤外サーモパイルアレイセンサの出力に基いて本装置周辺の放射温度を測定して、測定した本装置周辺の放射温度とこの放射温度の変化に基いて人体の有無の判断として本装置の前の人体の接近、滞在、及び不在の各状態を判断し、人体の有無の判断結果の情報として本装置の前の人体の接近、滞在、及び不在の各状態の情報を送信する、ものが好ましい。
【００１３】
また、本発明の電子看板装置において、第２の演算処理部は、第１の演算処理部から送信される本装置の前の人体の接近、滞在、及び不在の各状態の情報を受信し、本装置の前の人体が不在の状態のときは、ディスプレイの明るさを最低レベルに設定し、本装置の前の人体が接近又は滞在の状態のときは、ディスプレイの明るさを標準レベル又は最高レベルに設定する、ものが好ましい。
【発明の効果】
【００１４】
本発明によれば、赤外サーモパイルアレイセンサの出力に基いて人体の有無が判断されて、ディスプレイの明るさが変更されるため、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更することができる。
【図面の簡単な説明】
【００１５】
【図１】（ａ）は、本発明の一実施形態に係る電子看板装置の構成を示す斜視図、（ｂ）は同電子看板装置の検出領域を説明する図。
【図２】同電子看板装置の電気的ブロック構成図。
【図３】同電子看板装置の第１の演算処理部の動作を示すフローチャート。
【図４】同電子看板装置の第１の演算処理部の動作における、初期背景温度画像取得処理を示すフローチャート。
【図５】同電子看板装置の第１の演算処理部の動作における、測定温度画像取得処理を示すフローチャート。
【図６】同電子看板装置の第１の演算処理部の動作における、物体検出処理を示すフローチャート。
【図７】同電子看板装置の第１の演算処理部の動作における、物体検出処理で行われる特徴量計算処理を示すフローチャート。
【図８】同電子看板装置の第１の演算処理部の動作における、状態識別処理を示すフローチャート。
【図９】同電子看板装置の第１の演算処理部の動作における、物体検出処理で求められる人体面積値の変化と状態識別処理で識別される現在の状態の推移との関係を示す図。
【図１０】同電子看板装置の第１の演算処理部の動作における、背景温度画像更新処理を示すフローチャート。
【図１１】同電子看板装置の第２の演算処理部の動作を示すフローチャート。
【発明を実施するための形態】
【００１６】
以下、本発明を具体化した実施形態による電子看板装置について図面を参照して説明する。図１（ａ）（ｂ）は、本実施形態による電子看板装置の構成を示す。電子看板装置１は、各種情報を広告、宣伝するために用いられる装置である。電子看板装置１は、例えば、店舗等の入口付近において、テーブルの上や地面の上などに設置され、店舗における商品やサービス等の各種情報を広告、宣伝するために用いられる。
【００１７】
電子看板装置１は、広告、宣伝する各種情報を表示するためのディスプレイ２と、電子看板装置１を設置するための基台部３とを備える。また、電子看板装置１は、電子看板装置１の周辺の放射温度を測定するための赤外サーモパイルアレイセンサ４と、赤外サーモパイルアレイセンサ４の出力に基いてディスプレイ２の明るさを制御する演算処理部５とを備える。
【００１８】
ディスプレイ２は、液晶パネル２１を用いて画像を表示する液晶ディスプレイであり、液晶パネル２１及びバックライト２２がディスプレイ筐体２３内に収納され、液晶パネル２１がディスプレイ筐体２３の表示開口２３ａに臨んだ構成となっている。ディスプレイ２は、液晶パネル２１にバックライト２２からの光を透過させることにより画像を表示し、この画像によって、広告、宣伝する各種情報を表示する。ディスプレイ２は、バックライト２２の光の強さを変更することにより、ディスプレイ２の明るさ（表示する画像の明るさ）が変更可能になっている。
【００１９】
基台部３は、設置板３１と、支柱３２とを有している。設置板３１と支柱３２は、一体的に構成されている。支柱３２は、ディスプレイ２の背面部分（ディスプレイ筐体２３の背面部分であって、表示開口２３ａと反対側の部分）に接続されている。すなわち、ディスプレイ２は、背面部分を支柱３２側に向けて、支柱３２に取付けられている。電子看板装置１は、設置板３１の底面をテーブルの上面や地面などに向かい合わせるようにして、テーブルの上や地面の上などに置くことにより、テーブルの上や地面の上などに設置される。
【００２０】
赤外サーモパイルアレイセンサ４は、サーモパイルアレイ４１によって赤外線を検出するセンサであり、サーモパイルアレイ４１及び受光レンズ４２がセンサ筐体４３に収納され、受光レンズ４２がセンサ筐体４３の受光窓４３ａに臨んだ構成となっている。赤外サーモパイルアレイセンサ４は、検出領域Ｒ内から放射される赤外線を、センサ筐体４３の受光窓４３ａ及び受光レンズ４２を介して、サーモパイルアレイ４１によって受光する。
【００２１】
サーモパイルアレイ４１は、縦横（ｕ行×ｖ列）に配列された複数個（ｕ×ｖ個）のサーモパイル４４xy（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）を備えている。本実施形態では、サーモパイルアレイ４１は、８行×８列（ｕ＝８、ｖ＝８）に配列された６４個のサーモパイル４４ｘｙを備えている。
【００２２】
サーモパイル４４ｘｙは、検出領域Ｒをサーモパイル４４ｘｙの配列に対応して縦横（ｕ行×ｖ列）に分割した部分小領域Ｒxy（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）内から放射される赤外線を受光する。すなわち、サーモパイル４４11、４４12、・・・、４４uvは、各々、部分小領域Ｒ11、Ｒ12、・・・、Ｒuvから放射される赤外線を受光する。
【００２３】
赤外サーモパイルアレイセンサ４は、各サーモパイル４４xyによる赤外線の受光強度に対応した値、すなわち、検出領域Ｒの各部分小領域Ｒxyの温度に対応する値、を示す検出温度画像Ｔ(x,y)（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）を出力する。つまり、各部分小領域Ｒ11、Ｒ12、・・・Ｒuvの温度に対応する値を、各々、Ｔ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)とすると、赤外サーモパイルアレイセンサ４は、これらＴ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)を検出温度画像Ｔ(x,y)として出力する。検出温度画像Ｔ(x,y)の(x,y)=(1,1)、(1,2)、・・・、(u,v)における値が、各々、Ｔ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)である。
【００２４】
赤外サーモパイルアレイセンサ４は、ディスプレイ２の上方に位置するように、連結体４９を介して、基台部３の支柱３２に取付けられている。また、赤外サーモパイルアレイセンサ４は、検出領域Ｒがディスプレイ２の正面方向に存在する空間（ディスプレイ筐体２３の表示開口２３ａ側に存在する空間）を含むように、取付けられている。
【００２５】
演算処理部５は、ディスプレイ筐体２３内に設けられている。演算処理部５は、不図示の電気配線及び電気コネクタを介して、赤外サーモパイルアレイセンサ４の出力を受信する。演算処理部５は、第１の演算処理部５１と、第２の演算処理部５２とを備える。演算処理部５は、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒ内の人体の有無（すなわち、電子看板装置１の周辺であって、ディスプレイ２の正面付近に、人が居るか否か）を判断する。そして、演算処理部５は、この人体の有無の判断結果に応じて、ディスプレイ２の明るさ（ディスプレイ２の表示する画像の明るさ）を制御する。
【００２６】
図２は、電子看板装置１の電気的ブロック構成を示す。ディスプレイ２は、バックライト２２を点灯すると共に、液晶パネル２１の各画素を駆動することにより、液晶パネル２１にバックライト２２からの光を透過させて、画像を表示する。ディスプレイ２が表示する画像（すなわち、広告、宣伝する各種情報）は、事前に、例えばパソコンなどの外部装置から任意のものが入力される。すなわち、例えばパソコンなどの外部装置からの事前の入力によって、任意の画像（情報）がディスプレイ２に表示される。
【００２７】
赤外サーモパイルアレイセンサ４は、検出領域Ｒ内から放射される赤外線をサーモパイルアレイ４１によって受光して、検出温度画像Ｔ(x,y)を出力する。検出温度画像Ｔ(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔ(i,j)（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）は、サーモパイルアレイ４１の各サーモパイル４４ijによる赤外線の受光強度に対応し、検出領域Ｒの各部分小領域Ｒijの温度に対応する。検出温度画像Ｔ(x,y)は、部分小領域Ｒxyを単位とした検出領域Ｒの温度分布を示す。
【００２８】
第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力基いて、検出領域Ｒ内の人体の有無を判断し、人体の有無の判断結果の情報を第２の演算処理部５２に送信する。
【００２９】
このとき、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒの放射温度（すなわち、電子看板装置１の周辺の放射温度であって、ディスプレイ２の正面付近の放射温度）を測定する。そして、第１の演算処理部５１は、測定した放射温度とこの放射温度の変化に基いて、人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を判断する。第１の演算処理部５１は、人体の有無の判断結果の情報として、電子看板装置１の前の人体の接近、滞在、及び不在の各状態の情報を第２の演算処理部５２に送信する。
【００３０】
第２の演算処理部５２は、第１の演算処理部５１から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じてディスプレイ２の明るさを変更する。
【００３１】
このとき、第２の演算処理部５２は、第１の演算処理部５１から送信される電子看板装置１の前の人体の接近、滞在、及び不在の各状態の情報を受信する。そして、第２の演算処理部５２は、電子看板装置１の前の人体が不在の状態のときは、ディスプレイ２の明るさを最低レベルに設定する。また、第２の演算処理部５２は、電子看板装置１の前の人体が接近の状態のときは、ディスプレイ２の明るさを標準レベルに設定し、電子看板装置１の前の人体が滞在の状態のときは、ディスプレイ２の明るさを最高レベルに設定する。第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを変更（設定）することにより、ディスプレイ２の明るさを変更（設定）する。なお、ディスプレイ２の明るさを最低レベルに設定するとは、ディスプレイ２を消灯（ディスプレイ２のバックライト２２を消灯）することを含んでいる。
【００３２】
図３は、電子看板装置１の第１の演算処理部５１の動作のフローチャートを示す。第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて検出領域Ｒ内の人体の有無を判断するために、以下のように動作する。
【００３３】
第１の演算処理部５１は、電子看板装置１の電源が投入されると、まず、初期背景温度画像取得処理を行う（Ｓ１）。初期背景温度画像取得処理とは、初期時（電子看板装置１の電源の投入時）における背景温度画像ＴB(x,y)を取得する処理である。背景温度画像ＴB(x,y)とは、検出領域Ｒ内の人体を検出するための基準となる温度画像（検出領域Ｒの各部分小領域Ｒxyの背景温度に対応する値）である。初期背景温度画像取得処理において、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)に基いて、初期時における背景温度画像ＴB(x,y)を取得する。電子看板装置１の電源の投入は、電子看板装置１を設置した状態で、かつ、検出領域Ｒ内に人が居ない状態で行われる。
【００３４】
続いて、第１の演算処理部５１は、測定温度画像取得処理を行う（Ｓ２）。測定温度画像取得処理とは、測定温度画像Ｔave(x,y)を取得する処理である。測定温度画像Ｔave(x,y)とは、検出領域Ｒ内の人体を検出するために、背景温度画像ＴB(x,y)と比較する温度画像（検出領域Ｒの各部分小領域Ｒxyの測定温度に対応する値）である。測定温度画像取得処理において、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)に基いて、測定温度画像Ｔave(x,y)を取得する。
【００３５】
続いて、第１の演算処理部５１は、物体検出処理を行う（Ｓ３）。物体検出処理とは、検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Sを求める処理である。人体面積値Sとは、検出した人体の赤外サーモパイルアレイセンサ４からの見かけ上の面積に対応する値である。物体検出処理において、第１の演算処理部５１は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差から、検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Sを求める。
【００３６】
続いて、第１の演算処理部５１は、状態識別処理を行う（Ｓ４）。状態識別処理とは、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別する処理である。状態識別処理において、第１の演算処理部５１は、人体面積値Sに基いて、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を識別する。第１の演算処理部５１は、状態識別処理により検出領域Ｒ内の人体の有無を判断したとき、その人体の有無の判断結果（電子看板装置１の前の人体の接近、滞在、及び不在の各状態の識別結果）の情報を第２の演算処理部５２に送信する。
【００３７】
続いて、第１の演算処理部５１は、背景温度更新処理を行う（Ｓ５）。背景温度更新処理とは、検出領域Ｒの（各部分小領域Ｒｘｙの）背景温度が時間の経過につれて変化することに対応するために、背景温度画像ＴB(x,y)を更新する処理である。背景温度更新処理において、第１の演算処理部５１は、そのときの背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)に基いて、背景温度画像ＴB(x,y)を更新する。背景温度更新処理の後、第１の演算処理部５１は、上記Ｓ２以降の処理を繰り返す。Ｓ２、Ｓ３、Ｓ４、Ｓ５の処理は、例えば０．１秒程度の周期で、繰り返される。
【００３８】
図４は、上記初期背景温度画像取得処理のフローチャートを示す。初期背景温度画像取得処理では、第１の演算処理部５１は、まず、検出温度画像積算値ＳT(x,y)を０にクリアする（Ｓ１−１）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(1,1)、ＳT(1,2)、・・・、ＳT(u,v)を、それぞれ、０にクリアする。
【００３９】
続いて、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４から、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)を取得する（Ｓ１−２）。
【００４０】
そして、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)を計算する（Ｓ１−３）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)に検出温度画像Ｔ(x,y)を加算する。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＳT(i,j)にＴ(i,j)を加算する。ＳT(i,j)は、検出温度画像積算値ＳT(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔ(i,j)は、検出温度画像Ｔ(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、ＳT(1,1)にＴ(1,1)を加算し、ＳT(1,2)にＴ(1,2)を加算し、・・・、ＳT(u,v)にＴ(u,v)を加算する。
【００４１】
ここで、第１の演算処理部５１は、平均値計算カウンタの値が所定の設定値Ｋ（例えばＫ＝１０）に達しているか否かを判断する（Ｓ１−４）。なお、平均値計算カウンタの値は、初期時（電子看板装置１の電源の投入時）に０にセットされる。
【００４２】
平均値計算カウンタの値が設定値Ｋに達していなければ（Ｓ１−４でＮＯ）、第１の演算処理部５１は、平均値計算カウンタの値を１加算して（Ｓ１−５）、上記Ｓ１−２以降の処理を繰り返す。Ｓ１−２〜Ｓ１−５の処理は、例えば０．１秒程度の周期で、繰り返される。Ｓ１−２〜Ｓ１−５の処理が繰り返されることにより、検出温度画像積算値ＳT(x,y)は、赤外サーモパイルアレイセンサ４から異なる時刻（例えば、０．１秒間隔の異なる時刻）出力された複数の検出温度画像Ｔ(x,y)を積算したものとなる。
【００４３】
そして、平均値計算カウンタの値が設定値Ｋに達していれば（Ｓ１−４でＹＥＳ）、第１の演算処理部５１は、背景温度画像ＴB(x,y)を計算する（Ｓ１−６）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)／設定値Ｋを背景温度画像ＴB(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＳT(i,j)／ＫをＴB(i,j)とする。ＴB(i,j)は、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、ＳT(1,1)／ＫをＴB(1,1)とし、ＳT(1,2)／ＫをＴB(1,2)とし、・・・ＳT(u,v)／ＫをＴB(u,v)として、背景温度画像ＴB(x,y)を求める。
【００４４】
背景温度画像ＴB(x,y)は、赤外サーモパイルアレイセンサ４から異なる時刻に出力された（上記Ｓ１−２〜Ｓ１−５の処理が繰り返される時間間隔で出力された）設定回数Ｋ回分の検出温度画像Ｔ(x,y)の平均値である。背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)は、検出領域Ｒの各部分小領域Ｒijの背景温度に対応する。Ｓ１−６の処理の後、第１の演算処理部５１は、平均値計算カウンタの値を０にクリアして（Ｓ１−７）、初期背景温度画像取得処理を終了する。
【００４５】
初期背景温度画像取得処理では、第１の演算処理部５１は、このようにして背景温度画像ＴB(x,y)を取得する。すなわち、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４から異なる時刻に出力された複数（設定回数Ｋ回分）の検出温度画像Ｔ(x,y)の平均値を背景温度画像ＴB(x,y)とする。複数の検出温度画像Ｔ(x,y)の平均値を背景温度画像ＴB(x,y)とするため、ノイズの影響が軽減される。
【００４６】
図５は、上記測定温度画像取得処理のフローチャートを示す。測定温度画像取得処理では、第１の演算処理部５１は、まず、赤外サーモパイルアレイセンサ４から、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)を取得する（Ｓ２−１）。
【００４７】
続いて、第１の演算処理部５１は、温度ログデータＴlog[N-1](x,y)、Ｔlog[N-2](x,y)、・・・、Ｔlog[1](x,y)（Ｎは例えば１０）を更新する（Ｓ２−２）。すなわち、第１の演算処理部５１は、Ｔlog[N-2](x,y)をＴlog[N-1](x,y)とし、Ｔlog[N-3](x,y)をＴlog[N-2](x,y)とし、・・・、Ｔlog[1](x,y)をＴlog[0](x,y)とする。
【００４８】
また、第１の演算処理部５１は、温度ログデータＴlog[0](x,y)を更新する（Ｓ２−３）。すなわち、第１の演算処理部５１は、今回の測定温度画像取得処理で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)をＴlog[0](x,y)とする。
【００４９】
Ｓ２−２、Ｓ２−３の処理により、温度ログデータＴlog[n](x,y)（ｎ＝０、１、２、・・・、Ｎ−１）は、ｎ回前の測定温度画像取得処理で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)となる。但し、温度ログデータＴlog[0](x,y)は、今回の測定温度画像取得処理）で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)である。従って、温度ログデータＴlog[n](x,y)は、上記Ｓ２〜Ｓ５の処理（上記図３参照）が繰り返されることにより赤外サーモパイルアレイセンサ４から取得した時系列の複数の検出温度画像Ｔ(x,y)である。
【００５０】
そして、第１の演算処理部５１は、測定温度画像Ｔave(x,y)を計算する（Ｓ２−４）。すなわち、第１の演算処理部５１は、（Ｔlog[0](x,y)＋Ｔlog[1](x,y)＋Ｔlog[2](x,y)＋・・・＋Ｔlog[N-1](x,y)）／Ｎを測定温度画像Ｔave(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、（Ｔlog[0](i,j)＋Ｔlog[1](i,j)＋Ｔlog[2](i,j)＋・・・＋Ｔlog[N-1](i,j)）／ＮをＴave(i,j)とする。Ｔlog[0](i,j)、Ｔlog[1](i,j)、Ｔlog[2](i,j)、・・・、Ｔlog[N-1](i,j)は、それぞれ、各温度ログデータＴlog[0](x,y)、Ｔlog[1](x,y)、Ｔlog[2](x,y)、・・・、Ｔlog[N-1](x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。Ｔave(i,j)は、測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、（Ｔlog[0](1,1)＋Ｔlog[1](1,1)＋・・・＋Ｔlog[N-1](1,1)）／ＮをＴave(1,1)とする。同様に、（Ｔlog[0](1,2)＋Ｔlog[1](1,2)＋・・・＋Ｔlog[N-1](1,2)）／ＮをＴave(1,2)とし、・・・、（Ｔlog[0](u,v)＋Ｔlog[1](u,v)＋・・・＋Ｔlog[N-1](u,v)）／ＮをＴave(u,v)とする。第１の演算処理部５１は、このようにして、測定温度画像Ｔave(x,y)を求める。
【００５１】
測定温度画像Ｔave(x,y)は、温度ログデータＴlog[n](x,y)（ｎ＝０、１、２、・・・、Ｎ−１）の平均値であって、上記Ｓ２〜Ｓ５の処理が繰り返されることにより赤外サーモパイルアレイセンサ４から出力された時系列の複数の検出温度画像Ｔ(x,y)の平均値である。測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔave(i,j)は、検出領域Ｒの各部分小領域Ｒijの測定温度に対応する。Ｓ２−４の処理の後、第１の演算処理部５１は、測定温度画像取得処理を終了する。
【００５２】
測定温度画像取得処理では、第１の演算処理部５１は、このようにして測定温度画像Ｔave(x,y)を取得する。すなわち、第１の演算処理部５１は、温度ログデータＴlog[n](x,y)）（ｎ＝０、１、２、・・・、Ｎ−１）の平均値、従って、時系列の複数の検出温度画像Ｔ(x,y)の平均値を測定温度画像Ｔave(x,y)とする。時系列の複数の検出温度画像Ｔ(x,y)の平均値を測定温度画像Ｔave(x,y)とするため、ノイズの影響が軽減される。
【００５３】
図６は、上記物体検出処理のフローチャートを示し、図７は、物体検出処理で行われる特徴量計算処理のフローチャートを示す。物体検出処理では、第１の演算処理部５１は、まず、差分画像Ｔdiff(x,y)を計算する（Ｓ３−１）。すなわち、第１の演算処理部５１は、Ｔave(x,y)−ＴB(x,y)をＴdiff(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｔave(i,j)−ＴB(i,j)をＴdiff(i,j)とする。Ｔave(i,j)は、測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴB(i,j)は、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔdiff(i,j)は、Ｔdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｔave(1,1)−ＴB(1,1)をＴdiff(1,1)とし、Ｔave(1,2)−ＴB(1,2)をＴdiff(1,2)とし、・・・、Ｔave(u,v)−ＴB(u,v)をＴdiff(u,v)として、差分画像Ｔdiff(x,y)を計算する。
【００５４】
差分画像Ｔdiff(x,y)は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差分である。差分画像Ｔdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔdiff(i,j)は、検出領域Ｒの各部分小領域Ｒijにおける背景温度と測定温度との差分に対応する。
【００５５】
続いて、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)を作成する（Ｓ３−２）。すなわち、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｔdiff(i,j)が設定しきい値よりも大きければ、Ｉdiff(i,j)を１とし、Ｔdiff(i,j)が設定しきい値よりも大きくなければ、Ｉdiff(i,j)を０として、物体検出画像Ｉdiff(x,y)とする。Ｉdiff(i,j)は、Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｔdiff(1,1)が設定しきい値よりも大きければ、Ｉdiff(1,1)を１とし、Ｔdiff(1,1)が設定しきい値よりも大きくなければ、Ｉdiff(1,1)を０とする。同様に、Ｔdiff(1,2)が設定しきい値よりも大きければ、Ｉdiff(1,2)を１とし、Ｔdiff(1,2)が設定しきい値よりも大きくなければ、Ｉdiff(1,2)を０とする。また、同様に、Ｔdiff(1,3)、・・・、Ｔdiff(u,v)についても、それぞれ、設定しきい値よりも大きければ、１とし、大きくなければ、０とする。第１の演算処理部５１は、このようにして、物体検出画像Ｉdiff(x,y)を作成する。
【００５６】
物体検出画像Ｉdiff(x,y)は、差分画像Ｔdiff(x,y)を２値化した画像である。物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)は、検出領域Ｒの各部分小領域Ｒijにおける背景温度と測定温度との差分を2値化した値に対応する。
【００５７】
そして、第１の演算処理部５１は、特徴量計算処理を行う（Ｓ３−３）。特徴量計算処理は、物体検出画像Ｉdiff(x,y)に基いて人体面積値Sを求める処理である。
【００５８】
図７に示すように、特徴量計算処理では、第１の演算処理部５１は、まず、物体面積値Ｓ(m)（ｍ＝１、２、・・・、Ｍ）（Ｍは例えば１０）の値を０に設定する（Ｓ３−３−１）。すなわち、第１の演算処理部５１は、物体面積値Ｓ(1) 、Ｓ(2) 、・・・、Ｓ(M)を、それぞれ、０に設定する。
【００５９】
続いて、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)をラベリング処理する（Ｓ３−３−２）。すなわち、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)の中から、Ｉdiff(i,j)が１である部分の塊を検出する。Ｉdiff(i,j)が１である部分の塊とは、物体検出画像Ｉdiff(x,y)がｘ行×ｙ列に配列された画素から成る画像であり、Ｉdiff(i,j)がＩdiff(x,y)のｉ行×ｊ列における画素の値であると考えた場合に、Ｉdiff(i,j)が１である画素が連続している領域のことである。そして、第１の演算処理部５１は、この検出したＩdiff(i,j)が１である部分の塊を物体画像（熱を有する物体の画像）とし、物体画像にラベル番号Ｌを付与する。このとき、物体検出画像Ｉdiff(x,y)の中に、物体画像（Ｉdiff(i,j)が１である部分の塊）が１つだけ存在する場合には、その物体画像にラベル番号Ｌ＝１を付与する。また、物体検出画像Ｉdiff(x,y)の中に、物体画像が複数存在する場合には、それらの各物体画像にラベル番号Ｌ＝１、ラベル番号Ｌ＝２、・・・を付与する。
【００６０】
続いて、第１の演算処理部５１は、物体画像の面積を物体面積値Ｓ(m)として、物体面積値Ｓ(m)を計算する（Ｓ３−３−３）。すなわち、第１の演算処理部５１は、ラベル番号Ｌ＝１の物体画像の面積を物体面積値Ｓ(1)、ラベル番号Ｌ＝２の物体画像の面積を物体面積値Ｓ(2)、・・・、ラベル番号Ｌ＝Ｍの物体画像の面積を物体面積値Ｓ(M)として、物体面積値Ｓ(m)を計算する。物体面積値Ｓ(m)は、物体画像（Ｉdiff(i,j)が１である部分の塊）を構成しているＩdiff(i,j)の個数である。例えば、物体画像がＩdiff(4,4)、Ｉdiff(4,5)、Ｉdiff(5,4)、Ｉdiff(5,5)の４つのＩdiff(i,j)で構成されているとすると、その物体面積値Ｓ(m)は４となる。物体面積値Ｓ(m)は、物体の赤外サーモパイルアレイセンサ４からの見かけ上の面積に対応する。
【００６１】
続いて、第１の演算処理部５１は、物体面積値Ｓ(m)の中から、物体面積値Ｓ(m)の最大値である最大物体面積値Ｓmaxを求める（Ｓ３−３−４）。すなわち、第１の演算処理部５１は、物体面積値Ｓ(1)、Ｓ(2)、・・・、Ｓ(M)を比較して、物体面積値Ｓ(1)、Ｓ(2)、・・・、Ｓ(M)のうちの最大値を最大物体面積値Ｓmaxとする。物体画像が１つだけ検出された場合には、その物体画像の物体面積値Ｓ(1)が最大物体面積値Ｓmaxとなり、物体画像が複数検出された場合には、それら複数の物体画像の物体面積値Ｓ(m)のうちの最大値が最大物体面積値Ｓmaxとなる。
【００６２】
そして、第１の演算処理部５１は、最大物体面積値Ｓmaxの物体画像が人体の画像であるとみなして、検出領域Ｒ内の人体を検出し、最大物体面積値Ｓmaxを人体面積値Ｓとする。人体面積値Ｓは、赤外サーモパイルアレイセンサ４からの人体の見かけ上の面積に対応する。その後、第１の演算処理部５１は、特徴量計算処理を終了する。特徴量計算処理の後（Ｓ３−３の処理の後）、第１の演算処理部５１は、物体検出処理を終了する。
【００６３】
物体検出処理では、第１の演算処理部５１は、このようにして検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Ｓ（最大物体面積値Ｓmax）を求める。すなわち、第１の演算処理部５１は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差分である差分画像Ｔdiff(x,y)を計算し、この差分画像Ｔdiff(x,y)を０と１で２値化した物体検出画像Ｉdiff(x,y)を作成する。そして、物体検出画像Ｉdiff(x,y)の中のＩdiff(i,j)が１である部分の塊を物体画像とし、物体面積値Ｓ(m)が最大の物体画像が人体の画像であるとみなして、検出領域Ｒ内の人体を検出する。また、物体面積値Ｓ(m)が最大の物体画像の面積（最大物体面積値Ｓmax）を人体面積値Ｓとする。
【００６４】
図８は、上記状態識別処理のフローチャートを示し、図９は、最大物体面積値Ｓmax（人体面積値Ｓ）の変化と状態識別処理で識別される現在の状態の推移との関係を示す。なお、図９の各物体検出画像Ｉdiff(x,y)において、Ｉdiff(i,j)が１である部分を白色で示し、Ｉdiff(i,j)が０である部分を灰色で示している。状態識別処理では、第１の演算処理部５１は、まず、「現在の状態」を判断する（Ｓ４−１）。ここで、「現在の状態」とは、その時点での「電子看板装置１の前の人体の状態の識別結果」のことであって、前回の状態識別処理における「電子看板装置１の前の人体の状態の識別結果」である。つまり、Ｓ４−１の処理では、その時点での「電子看板装置の前の人体の状態の識別結果」が、「電子看板装置の前の人体が不在の状態」「電子看板装置の前の人体が接近の状態」「電子看板装置の前の人体が滞在の状態」のいずれであるかを判断する。なお、「電子看板装置の前の人体の状態の識別結果」は、初期時（電子看板装置１の電源の投入時）に、「電子看板装置の前の人体が不在の状態」にセットされる。
【００６５】
そして、「現在の状態」が「電子看板装置の前の人体が不在の状態」である場合（Ｓ４−１で不在）、第１の演算処理部５１は、最大物体面積値Smaxが第１の接近判定しきい値Ｚ１（例えばＺ１＝５）よりも大きいか否かを判断する（Ｓ４−２）。
【００６６】
ここで、最大物体面積値Smaxが第１の接近判定しきい値Ｚ１よりも大きければ（Ｓ４−２でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に更新して（Ｓ４−３）、状態識別処理を終了する。最大物体面積値Smaxが第１の接近判定しきい値Ｚ１よりも大きくなければ（Ｓ４−２でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が不在の状態」に維持して、状態識別処理を終了する。
【００６７】
また、「現在の状態」が「電子看板装置の前の人体が接近の状態」である場合（Ｓ４−１で接近）、第１の演算処理部５１は、最大物体面積値Smaxが滞在判定しきい値Ｚ２（例えばＺ２＝１５）よりも大きいか否かを判断する（Ｓ４−４）。
【００６８】
ここで、最大物体面積値Smaxが滞在判定しきい値Ｚ２よりも大きければ（Ｓ４−４でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が滞在の状態」に更新して（Ｓ４−５）、状態識別処理を終了する。最大物体面積値Smaxが滞在判定しきい値Ｚ２よりも大きくなければ（Ｓ４−４でＮＯ）、第１の演算処理部５１は、最大物体面積値Smaxが不在判定しきい値Ｚ３（例えばＺ３＝５）よりも小さいか否かを判断する（Ｓ４−６）。
【００６９】
ここで、最大物体面積値Smaxが不在判定しきい値Ｚ３よりも小さければ（Ｓ４−６でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が不在の状態」に更新して（Ｓ４−７）、状態識別処理を終了する。最大物体面積値Smaxが不在判定しきい値Ｚ３よりも小さくなければ（Ｓ４−６でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に維持して、状態識別処理を終了する。
【００７０】
また、「現在の状態」が「電子看板装置の前の人体が滞在の状態」である場合（Ｓ４−１で滞在）、第１の演算処理部５１は、最大物体面積値Smaxが第２の接近判定しきい値Ｚ４（例えばＺ４＝１５）よりも小さいか否かを判断する（Ｓ４−８）。
【００７１】
ここで、最大物体面積値Smaxが第２の接近判定しきい値Ｚ４よりも小さければ（Ｓ４−８でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に更新して（Ｓ４−９）、状態識別処理を終了する。最大物体面積値Smaxが第２の接近判定しきい値Ｚ４よりも小さくなければ（Ｓ４−８でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が滞在の状態」に維持して、状態識別処理を終了する。
【００７２】
状態識別処理では、第１の演算処理部５１は、このようにして電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別する。すなわち、第１の演算処理部５１は、人体面積値S（人体面積値Sは、電子看板装置１から人体までの距離に対応する）に基いて、検出領域Ｒ内の人体の有無を判断する。このとき、第１の演算処理部５１は、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を識別する。すなわち、第１の演算処理部５１は、「現在の状態」に応じて、最大物体面積値Smax（人体面積値Ｓ）を第１の接近判定しきい値Ｚ１、滞在判定しきい値Ｚ２、不在判定しきい値Ｚ３、第２の接近判定しきい値Ｚ４と比較する。そして、その比較結果に基いて、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを判断する。つまり、第１の演算処理部５１は、最大物体面積値Smaxに基いて、電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別し、最大物体面積値Smaxの増減によって、電子看板装置１の前の人体の接近、滞在、及び不在の各状態間の推移を判断する。
【００７３】
また、第１の演算処理部５１は、この状態識別処理における識別結果を示す情報を、人体の有無の判断結果の情報として、第２の演算処理部５２に送信する。すなわち、第１の演算処理部５１は、人体の有無の判断結果の情報として、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを示す情報を送信する。
【００７４】
図１０は、上記背景温度画像更新処理のフローチャートを示す。背景温度画像更新処理では、第１の演算処理部５１は、まず、背景温度更新時間カウンタの値が所定の設定値Ｗ（例えば１５分に相当する値）を超えているか否か、すなわち、背景温度更新時間（例えば１５分）経過しているか否かを判断する（Ｓ５−１）。なお、背景温度更新時間カウンタの値は、上記Ｓ１の初期背景温度画像取得処理の終了時に０にセットされる。
【００７５】
背景温度更新時間カウンタの値が設定値Ｗを超えていなければ、すなわち、背景温度更新時間経過していなければ（Ｓ５−１でＮＯ）、第１の演算処理部５１は、背景温度更新時間カウンタの値を加算して（Ｓ５−２）、背景温度画像更新処理を終了する。
【００７６】
背景温度更新時間カウンタの値が設定値Ｗを超えていれば、すなわち、背景温度更新時間経過していれば（Ｓ５−１でＹＥＳ）、第１の演算処理部５１は、背景温度画像ＴB(x,y)、測定温度画像Ｔave(x,y)、物体検出画像Ｉdiff(x,y)を取得する（Ｓ５−３）。また、第１の演算処理部５１は、背景温度更新時間カウンタの値を０にクリアする（Ｓ５−４）。
【００７７】
続いて、第１の演算処理部５１は、背景温度画像ＴB(x,y)、測定温度画像Ｔave(x,y)、及び物体検出画像Ｉdiff(x,y)に基いて、新背景温度画像ＴBNEW(x,y)を作成する（Ｓ５−５）。すなわち、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｉdiff(i,j)が１であれば、（１−α）×ＴB(i,j)＋α×Ｔave(i,j)をＴBNEW(i,j)とし、Ｉdiff(i,j)が０であれば、ＴB(i,j)をＴBNEW(i,j)とする。ここで、αは、背景温度更新係数であり、０＜α＜１の実数（例えばα＝０．５）である。Ｉdiff(i,j)は、Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴB(i,j)は、ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔave(i,j)は、Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴBNEW(i,j)は、ＴBNEW(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｉdiff(1,1)が１であれば、（１−α）×ＴB(1,1)＋α×Ｔave(1,1)をＴBNEW(1,1)とし、Ｉdiff(1,1)が０であれば、ＴB(1,1)をＴBNEW(1,1)とする。同様に、Ｉdiff(1,2)が１であれば、（１−α）×ＴB(1,2)＋α×Ｔave(1,2)をＴBNEW(1,2)とし、Ｉdiff(1,2)が０であれば、ＴB(1,2)をＴBNEW(1,2)とする。(i,j)= (1,3),・・・,(u,v)についても同様である。第１の演算処理部５１は、このようにして、新背景温度画像ＴBNEW(x,y)を求める。
【００７８】
新背景温度画像ＴBNEW(x,y)は、物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)が１であるとすると、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)を、（１−α）×ＴB(i,j)＋α×Ｔave(i,j)に置き換えたものである。
【００７９】
そして、第１の演算処理部５１は、新背景温度画像ＴBNEW(x,y)を更新する（Ｓ５−６）。すなわち、第１の演算処理部５１は、新背景温度画像ＴBNEW(x,y)を背景温度画像ＴB(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＴBNEW(i,j)をＴB(i,j)とする。従って、第１の演算処理部５１は、ＴBNEW(1,1)をＴB(1,1)とし、ＴBNEW(1,2)をＴB(1,2)とし、・・・、ＴBNEW(u,v)をＴB(u,v)とする。Ｓ５−６の処理の後、第１の演算処理部５１は、背景温度画像更新処理を終了する。
【００８０】
背景温度画像更新処理では、第１の演算処理部５１は、このようにして背景温度画像ＴB(x,y)を更新する。すなわち、第１の演算処理部５１は、背景温度更新時間経過すると（背景温度更新時間経過する都度）、背景温度画像ＴB(x,y)を更新する。このとき、物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)が１であるとすると、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)を（１−α）×ＴB(i,j)＋α×Ｔave(i,j)に置き換えることにより、背景温度画像ＴB(x,y)を更新する。ここで、αは、背景温度更新係数（０＜α＜１の実数）であり、Ｔave(i,j)は、Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。
【００８１】
図１１は、電子看板装置１の第２の演算処理部５２の動作のフローチャートを示す。第２の演算処理部５２は、第１の演算処理部５１における人体の有無の判断結果に応じてディスプレイ２の明るさを変更するために、第１の演算処理部５１から受信した人体の有無の判断結果の情報に基いて、以下のように動作する。
【００８２】
第２の演算処理部５２は、まず、第１の演算処理部５１から受信した人体の有無の判断結果の情報に基いて、電子看板装置１の前の人体の状態を判断する（Ｓ６）。第２の演算処理部５２は、第１の演算処理部５１から、人体の有無の判断結果の情報として、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを示す情報を受信する。すなわち、Ｓ６の処理では、この情報に基いて、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態のいずれであるかを判断する。
【００８３】
そして、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態のときは（Ｓ６で不在）、第２の演算処理部５２は、ディスプレイ２の明るさを最低レベルに設定する（Ｓ７）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを最低レベルに設定する。なお、ディスプレイ２のバックライト２２の光の強さを最低レベルに設定するとは、ディスプレイ２のバックライト２２を消灯することを含んでいる。
【００８４】
また、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が接近の状態のときは（Ｓ６で接近）、第２の演算処理部５２は、ディスプレイ２の明るさを標準レベルに設定する（Ｓ８）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを標準レベルに設定する。
【００８５】
また、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が滞在の状態のときは（Ｓ６で滞在）、第２の演算処理部５２は、ディスプレイ２の明るさを最高レベルに設定する（Ｓ９）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを最高レベルに設定する。
【００８６】
このような構成の電子看板装置１によれば、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒ内の人体の有無（すなわち、電子看板装置１の周辺であって、ディスプレイ２の正面付近に、人が居るか否か）が判断される。そして、この人体の有無の判断結果に応じて、ディスプレイ２の明るさ（ディスプレイ２の表示する画像の明るさ）が変更される。
【００８７】
赤外サーモパイルアレイセンサ４を用いることで、赤外線（温度）によって人体の有無が判断されて、ディスプレイ２の明るさが変更されるため、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイ２の明るさを変更することができる。また、赤外サーモパイルアレイセンサ４を用いることで、可視光カメラでは判断が困難な暗視下においても、人体の有無を判断することができる。
【００８８】
また、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態が判断される。すなわち、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態のいずれであるかが判断される。そして、電子看板装置１の前の人体が不在の状態のときは、ディスプレイ２の明るさが最低レベルに設定される。また、電子看板装置１の前の人体が接近の状態のときは、ディスプレイ２の明るさが標準レベルに設定される。また、電子看板装置１の前の人体が滞在の状態のときは、ディスプレイ２の明るさが最高レベルに設定される。
【００８９】
従って、電子看板装置１の前に人が居ないときに、電子看板装置１のディスプレイ２の明るさが最低レベルになることにより、各種情報を広告、宣伝する必要がないときに、ディスプレイ２での消費電力を抑えることができ、省電力化することができる。しかも、電子看板装置１の前に人が来たときに、ディスプレイ２の明るさが明るくなる（ディスプレイ２の明るさが最低レベルから標準レベルになる）ことにより、人目を引くことができ、各種情報を効果的に広告、宣伝することができる。
【００９０】
なお、本発明は、上記実施形態の構成に限られず、種々の変形が可能である。例えば、第２の演算処理部は、電子看板装置の前の人体の状態が滞在の状態のときに、ディスプレイの明るさを標準レベルに設定するようにしてもよい。また、電子看板装置の前の人体の状態が接近の状態のときに、ディスプレイの明るさを最高レベルに設定するようにしてもよい。また、ディスプレイは、液晶ディスプレイに限られず、明るさ（広告、宣伝する各種情報として表示する画像の明るさ）が変更可能なものであれば、どのようなものであってもよい。また、電子看板装置は、広告、宣伝する各種情報をディスプレイに（画像によって）表示することに加え、広告、宣伝する各種情報を音声によって出力するようにし、人体の有無の判断結果に応じて、出力する音声の大きさを変更するようにしてもよい。また、電子看板装置は、テーブルの上や地面の上などに設置されるものに限られず、建物の壁面に取付けられるものであってもよい。
【符号の説明】
【００９１】
１ 電子看板装置
２ ディスプレイ
３ 基台部
４ 赤外サーモパイルアレイセンサ
５ 演算処理部
２１ 液晶パネル
２２ バックライト
２３ ディスプレイ筐体
２３ａ 表示開口
３１ 設置板
３２ 支柱
４１ サーモパイルアレイ
４２ 受光レンズ
４３ センサ筐体
４３ａ 受光窓
４４ サーモパイル
４９ 連結体
５１ 第１の演算処理部
５２ 第２の演算処理部
【技術分野】
【０００１】
本発明は、各種情報を広告、宣伝するために用いられる電子看板装置に関するものである。
【背景技術】
【０００２】
従来から、電子看板装置は、各種情報をディスプレイに表示することにより、各種情報を広告、宣伝するようになっている。電子看板装置は、例えば、大規模小売店等において設置され、商品やサービス等の各種情報を広告、宣伝するために用いられる。
【０００３】
このような電子看板装置において、常時、ディスプレイを点灯しているものがある。しかしながら、このような電子看板装置は、電子看板装置の近くに人が居ない場合でもディスプレイを点灯しているため、省電力の観点からは、好ましくない。
【０００４】
また、電子看板装置において、カメラを搭載し、このカメラによって、電子看板装置の近くに人が居るか否かを検出して、電子看板装置の近くに人が居る場合にだけ、ディスプレイを点灯するようにしたものがある。しかしながら、このような電子看板装置は、人の検出にカメラを用いているため、個人のプライバシー保護の観点からは、好ましくない。
【０００５】
一方、パーソナルコンピュータにおいては、ディスプレイのバックライトの自動パワーオフ機能を有するものが多い。しかしながら、この自動パワーオフ機能は、マウスやキーボード等の操作入力がない状態から、一定時間経過すると、バックライトを消灯するというものである。従って、パーソナルコンピュータにおけるディスプレイのバックライトの自動パワーオフ機能は、マウスやキーボード等の操作入力を行う手段を持たない電子看板装置には、適用できない。
【０００６】
そこで、電子看板装置において、赤外センサや遮光センサによって、近くに人が居るか否かを検出して、近くに人が居るか否かに応じて、ディスプレイの明るさを変更するようにしたものが知られている（例えば特許文献１参照）。また、電子看板装置において、焦電形の赤外線センサによって、近くに人が居るか否かを検出して、近くに人が居るか否かに応じて、ディスプレイの明るさを変更するようにしたものも知られている（例えば特許文献２参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開平８−１５６６５号公報
【特許文献２】実開平５−５９４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、上述した特許文献１に開示されている赤外センサ及び遮光センサや、特許文献２に開示されている焦電形の赤外線センサでは、人体の接近等の人の動きを検知することができるが、動きのない人体の滞在を検出することはできない。つまり、特許文献１の電子看板装置や特許文献２の電子看板装置では、近くに人が居るか否かに応じてディスプレイの明るさを変更することができるとは言い難い。
【０００９】
本発明は、上記課題を解決するためになされたものであり、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更することができる電子看板装置を提供することを目的とする。
【課題を解決するための手段】
【００１０】
上記目的を達成するために本発明の電子看板装置は、明るさの変更が可能なディスプレイを備える電子看板装置において、赤外サーモパイルアレイセンサと、赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、この人体の有無の判断結果に応じてディスプレイの明るさを変更する演算処理部とを備える、ものである。
【００１１】
本発明の電子看板装置において、演算処理部は、赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、人体の有無の判断結果の情報を送信する第１の演算処理部と、第１の演算処理部から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じてディスプレイの明るさを変更する第２の演算処理部とを備える、ものが好ましい。
【００１２】
また、本発明の電子看板装置において、第１の演算処理部は、赤外サーモパイルアレイセンサの出力に基いて本装置周辺の放射温度を測定して、測定した本装置周辺の放射温度とこの放射温度の変化に基いて人体の有無の判断として本装置の前の人体の接近、滞在、及び不在の各状態を判断し、人体の有無の判断結果の情報として本装置の前の人体の接近、滞在、及び不在の各状態の情報を送信する、ものが好ましい。
【００１３】
また、本発明の電子看板装置において、第２の演算処理部は、第１の演算処理部から送信される本装置の前の人体の接近、滞在、及び不在の各状態の情報を受信し、本装置の前の人体が不在の状態のときは、ディスプレイの明るさを最低レベルに設定し、本装置の前の人体が接近又は滞在の状態のときは、ディスプレイの明るさを標準レベル又は最高レベルに設定する、ものが好ましい。
【発明の効果】
【００１４】
本発明によれば、赤外サーモパイルアレイセンサの出力に基いて人体の有無が判断されて、ディスプレイの明るさが変更されるため、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更することができる。
【図面の簡単な説明】
【００１５】
【図１】（ａ）は、本発明の一実施形態に係る電子看板装置の構成を示す斜視図、（ｂ）は同電子看板装置の検出領域を説明する図。
【図２】同電子看板装置の電気的ブロック構成図。
【図３】同電子看板装置の第１の演算処理部の動作を示すフローチャート。
【図４】同電子看板装置の第１の演算処理部の動作における、初期背景温度画像取得処理を示すフローチャート。
【図５】同電子看板装置の第１の演算処理部の動作における、測定温度画像取得処理を示すフローチャート。
【図６】同電子看板装置の第１の演算処理部の動作における、物体検出処理を示すフローチャート。
【図７】同電子看板装置の第１の演算処理部の動作における、物体検出処理で行われる特徴量計算処理を示すフローチャート。
【図８】同電子看板装置の第１の演算処理部の動作における、状態識別処理を示すフローチャート。
【図９】同電子看板装置の第１の演算処理部の動作における、物体検出処理で求められる人体面積値の変化と状態識別処理で識別される現在の状態の推移との関係を示す図。
【図１０】同電子看板装置の第１の演算処理部の動作における、背景温度画像更新処理を示すフローチャート。
【図１１】同電子看板装置の第２の演算処理部の動作を示すフローチャート。
【発明を実施するための形態】
【００１６】
以下、本発明を具体化した実施形態による電子看板装置について図面を参照して説明する。図１（ａ）（ｂ）は、本実施形態による電子看板装置の構成を示す。電子看板装置１は、各種情報を広告、宣伝するために用いられる装置である。電子看板装置１は、例えば、店舗等の入口付近において、テーブルの上や地面の上などに設置され、店舗における商品やサービス等の各種情報を広告、宣伝するために用いられる。
【００１７】
電子看板装置１は、広告、宣伝する各種情報を表示するためのディスプレイ２と、電子看板装置１を設置するための基台部３とを備える。また、電子看板装置１は、電子看板装置１の周辺の放射温度を測定するための赤外サーモパイルアレイセンサ４と、赤外サーモパイルアレイセンサ４の出力に基いてディスプレイ２の明るさを制御する演算処理部５とを備える。
【００１８】
ディスプレイ２は、液晶パネル２１を用いて画像を表示する液晶ディスプレイであり、液晶パネル２１及びバックライト２２がディスプレイ筐体２３内に収納され、液晶パネル２１がディスプレイ筐体２３の表示開口２３ａに臨んだ構成となっている。ディスプレイ２は、液晶パネル２１にバックライト２２からの光を透過させることにより画像を表示し、この画像によって、広告、宣伝する各種情報を表示する。ディスプレイ２は、バックライト２２の光の強さを変更することにより、ディスプレイ２の明るさ（表示する画像の明るさ）が変更可能になっている。
【００１９】
基台部３は、設置板３１と、支柱３２とを有している。設置板３１と支柱３２は、一体的に構成されている。支柱３２は、ディスプレイ２の背面部分（ディスプレイ筐体２３の背面部分であって、表示開口２３ａと反対側の部分）に接続されている。すなわち、ディスプレイ２は、背面部分を支柱３２側に向けて、支柱３２に取付けられている。電子看板装置１は、設置板３１の底面をテーブルの上面や地面などに向かい合わせるようにして、テーブルの上や地面の上などに置くことにより、テーブルの上や地面の上などに設置される。
【００２０】
赤外サーモパイルアレイセンサ４は、サーモパイルアレイ４１によって赤外線を検出するセンサであり、サーモパイルアレイ４１及び受光レンズ４２がセンサ筐体４３に収納され、受光レンズ４２がセンサ筐体４３の受光窓４３ａに臨んだ構成となっている。赤外サーモパイルアレイセンサ４は、検出領域Ｒ内から放射される赤外線を、センサ筐体４３の受光窓４３ａ及び受光レンズ４２を介して、サーモパイルアレイ４１によって受光する。
【００２１】
サーモパイルアレイ４１は、縦横（ｕ行×ｖ列）に配列された複数個（ｕ×ｖ個）のサーモパイル４４xy（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）を備えている。本実施形態では、サーモパイルアレイ４１は、８行×８列（ｕ＝８、ｖ＝８）に配列された６４個のサーモパイル４４ｘｙを備えている。
【００２２】
サーモパイル４４ｘｙは、検出領域Ｒをサーモパイル４４ｘｙの配列に対応して縦横（ｕ行×ｖ列）に分割した部分小領域Ｒxy（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）内から放射される赤外線を受光する。すなわち、サーモパイル４４11、４４12、・・・、４４uvは、各々、部分小領域Ｒ11、Ｒ12、・・・、Ｒuvから放射される赤外線を受光する。
【００２３】
赤外サーモパイルアレイセンサ４は、各サーモパイル４４xyによる赤外線の受光強度に対応した値、すなわち、検出領域Ｒの各部分小領域Ｒxyの温度に対応する値、を示す検出温度画像Ｔ(x,y)（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）を出力する。つまり、各部分小領域Ｒ11、Ｒ12、・・・Ｒuvの温度に対応する値を、各々、Ｔ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)とすると、赤外サーモパイルアレイセンサ４は、これらＴ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)を検出温度画像Ｔ(x,y)として出力する。検出温度画像Ｔ(x,y)の(x,y)=(1,1)、(1,2)、・・・、(u,v)における値が、各々、Ｔ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)である。
【００２４】
赤外サーモパイルアレイセンサ４は、ディスプレイ２の上方に位置するように、連結体４９を介して、基台部３の支柱３２に取付けられている。また、赤外サーモパイルアレイセンサ４は、検出領域Ｒがディスプレイ２の正面方向に存在する空間（ディスプレイ筐体２３の表示開口２３ａ側に存在する空間）を含むように、取付けられている。
【００２５】
演算処理部５は、ディスプレイ筐体２３内に設けられている。演算処理部５は、不図示の電気配線及び電気コネクタを介して、赤外サーモパイルアレイセンサ４の出力を受信する。演算処理部５は、第１の演算処理部５１と、第２の演算処理部５２とを備える。演算処理部５は、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒ内の人体の有無（すなわち、電子看板装置１の周辺であって、ディスプレイ２の正面付近に、人が居るか否か）を判断する。そして、演算処理部５は、この人体の有無の判断結果に応じて、ディスプレイ２の明るさ（ディスプレイ２の表示する画像の明るさ）を制御する。
【００２６】
図２は、電子看板装置１の電気的ブロック構成を示す。ディスプレイ２は、バックライト２２を点灯すると共に、液晶パネル２１の各画素を駆動することにより、液晶パネル２１にバックライト２２からの光を透過させて、画像を表示する。ディスプレイ２が表示する画像（すなわち、広告、宣伝する各種情報）は、事前に、例えばパソコンなどの外部装置から任意のものが入力される。すなわち、例えばパソコンなどの外部装置からの事前の入力によって、任意の画像（情報）がディスプレイ２に表示される。
【００２７】
赤外サーモパイルアレイセンサ４は、検出領域Ｒ内から放射される赤外線をサーモパイルアレイ４１によって受光して、検出温度画像Ｔ(x,y)を出力する。検出温度画像Ｔ(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔ(i,j)（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）は、サーモパイルアレイ４１の各サーモパイル４４ijによる赤外線の受光強度に対応し、検出領域Ｒの各部分小領域Ｒijの温度に対応する。検出温度画像Ｔ(x,y)は、部分小領域Ｒxyを単位とした検出領域Ｒの温度分布を示す。
【００２８】
第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力基いて、検出領域Ｒ内の人体の有無を判断し、人体の有無の判断結果の情報を第２の演算処理部５２に送信する。
【００２９】
このとき、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒの放射温度（すなわち、電子看板装置１の周辺の放射温度であって、ディスプレイ２の正面付近の放射温度）を測定する。そして、第１の演算処理部５１は、測定した放射温度とこの放射温度の変化に基いて、人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を判断する。第１の演算処理部５１は、人体の有無の判断結果の情報として、電子看板装置１の前の人体の接近、滞在、及び不在の各状態の情報を第２の演算処理部５２に送信する。
【００３０】
第２の演算処理部５２は、第１の演算処理部５１から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じてディスプレイ２の明るさを変更する。
【００３１】
このとき、第２の演算処理部５２は、第１の演算処理部５１から送信される電子看板装置１の前の人体の接近、滞在、及び不在の各状態の情報を受信する。そして、第２の演算処理部５２は、電子看板装置１の前の人体が不在の状態のときは、ディスプレイ２の明るさを最低レベルに設定する。また、第２の演算処理部５２は、電子看板装置１の前の人体が接近の状態のときは、ディスプレイ２の明るさを標準レベルに設定し、電子看板装置１の前の人体が滞在の状態のときは、ディスプレイ２の明るさを最高レベルに設定する。第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを変更（設定）することにより、ディスプレイ２の明るさを変更（設定）する。なお、ディスプレイ２の明るさを最低レベルに設定するとは、ディスプレイ２を消灯（ディスプレイ２のバックライト２２を消灯）することを含んでいる。
【００３２】
図３は、電子看板装置１の第１の演算処理部５１の動作のフローチャートを示す。第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて検出領域Ｒ内の人体の有無を判断するために、以下のように動作する。
【００３３】
第１の演算処理部５１は、電子看板装置１の電源が投入されると、まず、初期背景温度画像取得処理を行う（Ｓ１）。初期背景温度画像取得処理とは、初期時（電子看板装置１の電源の投入時）における背景温度画像ＴB(x,y)を取得する処理である。背景温度画像ＴB(x,y)とは、検出領域Ｒ内の人体を検出するための基準となる温度画像（検出領域Ｒの各部分小領域Ｒxyの背景温度に対応する値）である。初期背景温度画像取得処理において、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)に基いて、初期時における背景温度画像ＴB(x,y)を取得する。電子看板装置１の電源の投入は、電子看板装置１を設置した状態で、かつ、検出領域Ｒ内に人が居ない状態で行われる。
【００３４】
続いて、第１の演算処理部５１は、測定温度画像取得処理を行う（Ｓ２）。測定温度画像取得処理とは、測定温度画像Ｔave(x,y)を取得する処理である。測定温度画像Ｔave(x,y)とは、検出領域Ｒ内の人体を検出するために、背景温度画像ＴB(x,y)と比較する温度画像（検出領域Ｒの各部分小領域Ｒxyの測定温度に対応する値）である。測定温度画像取得処理において、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)に基いて、測定温度画像Ｔave(x,y)を取得する。
【００３５】
続いて、第１の演算処理部５１は、物体検出処理を行う（Ｓ３）。物体検出処理とは、検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Sを求める処理である。人体面積値Sとは、検出した人体の赤外サーモパイルアレイセンサ４からの見かけ上の面積に対応する値である。物体検出処理において、第１の演算処理部５１は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差から、検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Sを求める。
【００３６】
続いて、第１の演算処理部５１は、状態識別処理を行う（Ｓ４）。状態識別処理とは、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別する処理である。状態識別処理において、第１の演算処理部５１は、人体面積値Sに基いて、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を識別する。第１の演算処理部５１は、状態識別処理により検出領域Ｒ内の人体の有無を判断したとき、その人体の有無の判断結果（電子看板装置１の前の人体の接近、滞在、及び不在の各状態の識別結果）の情報を第２の演算処理部５２に送信する。
【００３７】
続いて、第１の演算処理部５１は、背景温度更新処理を行う（Ｓ５）。背景温度更新処理とは、検出領域Ｒの（各部分小領域Ｒｘｙの）背景温度が時間の経過につれて変化することに対応するために、背景温度画像ＴB(x,y)を更新する処理である。背景温度更新処理において、第１の演算処理部５１は、そのときの背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)に基いて、背景温度画像ＴB(x,y)を更新する。背景温度更新処理の後、第１の演算処理部５１は、上記Ｓ２以降の処理を繰り返す。Ｓ２、Ｓ３、Ｓ４、Ｓ５の処理は、例えば０．１秒程度の周期で、繰り返される。
【００３８】
図４は、上記初期背景温度画像取得処理のフローチャートを示す。初期背景温度画像取得処理では、第１の演算処理部５１は、まず、検出温度画像積算値ＳT(x,y)を０にクリアする（Ｓ１−１）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(1,1)、ＳT(1,2)、・・・、ＳT(u,v)を、それぞれ、０にクリアする。
【００３９】
続いて、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４から、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)を取得する（Ｓ１−２）。
【００４０】
そして、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)を計算する（Ｓ１−３）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)に検出温度画像Ｔ(x,y)を加算する。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＳT(i,j)にＴ(i,j)を加算する。ＳT(i,j)は、検出温度画像積算値ＳT(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔ(i,j)は、検出温度画像Ｔ(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、ＳT(1,1)にＴ(1,1)を加算し、ＳT(1,2)にＴ(1,2)を加算し、・・・、ＳT(u,v)にＴ(u,v)を加算する。
【００４１】
ここで、第１の演算処理部５１は、平均値計算カウンタの値が所定の設定値Ｋ（例えばＫ＝１０）に達しているか否かを判断する（Ｓ１−４）。なお、平均値計算カウンタの値は、初期時（電子看板装置１の電源の投入時）に０にセットされる。
【００４２】
平均値計算カウンタの値が設定値Ｋに達していなければ（Ｓ１−４でＮＯ）、第１の演算処理部５１は、平均値計算カウンタの値を１加算して（Ｓ１−５）、上記Ｓ１−２以降の処理を繰り返す。Ｓ１−２〜Ｓ１−５の処理は、例えば０．１秒程度の周期で、繰り返される。Ｓ１−２〜Ｓ１−５の処理が繰り返されることにより、検出温度画像積算値ＳT(x,y)は、赤外サーモパイルアレイセンサ４から異なる時刻（例えば、０．１秒間隔の異なる時刻）出力された複数の検出温度画像Ｔ(x,y)を積算したものとなる。
【００４３】
そして、平均値計算カウンタの値が設定値Ｋに達していれば（Ｓ１−４でＹＥＳ）、第１の演算処理部５１は、背景温度画像ＴB(x,y)を計算する（Ｓ１−６）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)／設定値Ｋを背景温度画像ＴB(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＳT(i,j)／ＫをＴB(i,j)とする。ＴB(i,j)は、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、ＳT(1,1)／ＫをＴB(1,1)とし、ＳT(1,2)／ＫをＴB(1,2)とし、・・・ＳT(u,v)／ＫをＴB(u,v)として、背景温度画像ＴB(x,y)を求める。
【００４４】
背景温度画像ＴB(x,y)は、赤外サーモパイルアレイセンサ４から異なる時刻に出力された（上記Ｓ１−２〜Ｓ１−５の処理が繰り返される時間間隔で出力された）設定回数Ｋ回分の検出温度画像Ｔ(x,y)の平均値である。背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)は、検出領域Ｒの各部分小領域Ｒijの背景温度に対応する。Ｓ１−６の処理の後、第１の演算処理部５１は、平均値計算カウンタの値を０にクリアして（Ｓ１−７）、初期背景温度画像取得処理を終了する。
【００４５】
初期背景温度画像取得処理では、第１の演算処理部５１は、このようにして背景温度画像ＴB(x,y)を取得する。すなわち、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４から異なる時刻に出力された複数（設定回数Ｋ回分）の検出温度画像Ｔ(x,y)の平均値を背景温度画像ＴB(x,y)とする。複数の検出温度画像Ｔ(x,y)の平均値を背景温度画像ＴB(x,y)とするため、ノイズの影響が軽減される。
【００４６】
図５は、上記測定温度画像取得処理のフローチャートを示す。測定温度画像取得処理では、第１の演算処理部５１は、まず、赤外サーモパイルアレイセンサ４から、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)を取得する（Ｓ２−１）。
【００４７】
続いて、第１の演算処理部５１は、温度ログデータＴlog[N-1](x,y)、Ｔlog[N-2](x,y)、・・・、Ｔlog[1](x,y)（Ｎは例えば１０）を更新する（Ｓ２−２）。すなわち、第１の演算処理部５１は、Ｔlog[N-2](x,y)をＴlog[N-1](x,y)とし、Ｔlog[N-3](x,y)をＴlog[N-2](x,y)とし、・・・、Ｔlog[1](x,y)をＴlog[0](x,y)とする。
【００４８】
また、第１の演算処理部５１は、温度ログデータＴlog[0](x,y)を更新する（Ｓ２−３）。すなわち、第１の演算処理部５１は、今回の測定温度画像取得処理で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)をＴlog[0](x,y)とする。
【００４９】
Ｓ２−２、Ｓ２−３の処理により、温度ログデータＴlog[n](x,y)（ｎ＝０、１、２、・・・、Ｎ−１）は、ｎ回前の測定温度画像取得処理で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)となる。但し、温度ログデータＴlog[0](x,y)は、今回の測定温度画像取得処理）で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)である。従って、温度ログデータＴlog[n](x,y)は、上記Ｓ２〜Ｓ５の処理（上記図３参照）が繰り返されることにより赤外サーモパイルアレイセンサ４から取得した時系列の複数の検出温度画像Ｔ(x,y)である。
【００５０】
そして、第１の演算処理部５１は、測定温度画像Ｔave(x,y)を計算する（Ｓ２−４）。すなわち、第１の演算処理部５１は、（Ｔlog[0](x,y)＋Ｔlog[1](x,y)＋Ｔlog[2](x,y)＋・・・＋Ｔlog[N-1](x,y)）／Ｎを測定温度画像Ｔave(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、（Ｔlog[0](i,j)＋Ｔlog[1](i,j)＋Ｔlog[2](i,j)＋・・・＋Ｔlog[N-1](i,j)）／ＮをＴave(i,j)とする。Ｔlog[0](i,j)、Ｔlog[1](i,j)、Ｔlog[2](i,j)、・・・、Ｔlog[N-1](i,j)は、それぞれ、各温度ログデータＴlog[0](x,y)、Ｔlog[1](x,y)、Ｔlog[2](x,y)、・・・、Ｔlog[N-1](x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。Ｔave(i,j)は、測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、（Ｔlog[0](1,1)＋Ｔlog[1](1,1)＋・・・＋Ｔlog[N-1](1,1)）／ＮをＴave(1,1)とする。同様に、（Ｔlog[0](1,2)＋Ｔlog[1](1,2)＋・・・＋Ｔlog[N-1](1,2)）／ＮをＴave(1,2)とし、・・・、（Ｔlog[0](u,v)＋Ｔlog[1](u,v)＋・・・＋Ｔlog[N-1](u,v)）／ＮをＴave(u,v)とする。第１の演算処理部５１は、このようにして、測定温度画像Ｔave(x,y)を求める。
【００５１】
測定温度画像Ｔave(x,y)は、温度ログデータＴlog[n](x,y)（ｎ＝０、１、２、・・・、Ｎ−１）の平均値であって、上記Ｓ２〜Ｓ５の処理が繰り返されることにより赤外サーモパイルアレイセンサ４から出力された時系列の複数の検出温度画像Ｔ(x,y)の平均値である。測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔave(i,j)は、検出領域Ｒの各部分小領域Ｒijの測定温度に対応する。Ｓ２−４の処理の後、第１の演算処理部５１は、測定温度画像取得処理を終了する。
【００５２】
測定温度画像取得処理では、第１の演算処理部５１は、このようにして測定温度画像Ｔave(x,y)を取得する。すなわち、第１の演算処理部５１は、温度ログデータＴlog[n](x,y)）（ｎ＝０、１、２、・・・、Ｎ−１）の平均値、従って、時系列の複数の検出温度画像Ｔ(x,y)の平均値を測定温度画像Ｔave(x,y)とする。時系列の複数の検出温度画像Ｔ(x,y)の平均値を測定温度画像Ｔave(x,y)とするため、ノイズの影響が軽減される。
【００５３】
図６は、上記物体検出処理のフローチャートを示し、図７は、物体検出処理で行われる特徴量計算処理のフローチャートを示す。物体検出処理では、第１の演算処理部５１は、まず、差分画像Ｔdiff(x,y)を計算する（Ｓ３−１）。すなわち、第１の演算処理部５１は、Ｔave(x,y)−ＴB(x,y)をＴdiff(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｔave(i,j)−ＴB(i,j)をＴdiff(i,j)とする。Ｔave(i,j)は、測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴB(i,j)は、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔdiff(i,j)は、Ｔdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｔave(1,1)−ＴB(1,1)をＴdiff(1,1)とし、Ｔave(1,2)−ＴB(1,2)をＴdiff(1,2)とし、・・・、Ｔave(u,v)−ＴB(u,v)をＴdiff(u,v)として、差分画像Ｔdiff(x,y)を計算する。
【００５４】
差分画像Ｔdiff(x,y)は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差分である。差分画像Ｔdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔdiff(i,j)は、検出領域Ｒの各部分小領域Ｒijにおける背景温度と測定温度との差分に対応する。
【００５５】
続いて、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)を作成する（Ｓ３−２）。すなわち、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｔdiff(i,j)が設定しきい値よりも大きければ、Ｉdiff(i,j)を１とし、Ｔdiff(i,j)が設定しきい値よりも大きくなければ、Ｉdiff(i,j)を０として、物体検出画像Ｉdiff(x,y)とする。Ｉdiff(i,j)は、Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｔdiff(1,1)が設定しきい値よりも大きければ、Ｉdiff(1,1)を１とし、Ｔdiff(1,1)が設定しきい値よりも大きくなければ、Ｉdiff(1,1)を０とする。同様に、Ｔdiff(1,2)が設定しきい値よりも大きければ、Ｉdiff(1,2)を１とし、Ｔdiff(1,2)が設定しきい値よりも大きくなければ、Ｉdiff(1,2)を０とする。また、同様に、Ｔdiff(1,3)、・・・、Ｔdiff(u,v)についても、それぞれ、設定しきい値よりも大きければ、１とし、大きくなければ、０とする。第１の演算処理部５１は、このようにして、物体検出画像Ｉdiff(x,y)を作成する。
【００５６】
物体検出画像Ｉdiff(x,y)は、差分画像Ｔdiff(x,y)を２値化した画像である。物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)は、検出領域Ｒの各部分小領域Ｒijにおける背景温度と測定温度との差分を2値化した値に対応する。
【００５７】
そして、第１の演算処理部５１は、特徴量計算処理を行う（Ｓ３−３）。特徴量計算処理は、物体検出画像Ｉdiff(x,y)に基いて人体面積値Sを求める処理である。
【００５８】
図７に示すように、特徴量計算処理では、第１の演算処理部５１は、まず、物体面積値Ｓ(m)（ｍ＝１、２、・・・、Ｍ）（Ｍは例えば１０）の値を０に設定する（Ｓ３−３−１）。すなわち、第１の演算処理部５１は、物体面積値Ｓ(1) 、Ｓ(2) 、・・・、Ｓ(M)を、それぞれ、０に設定する。
【００５９】
続いて、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)をラベリング処理する（Ｓ３−３−２）。すなわち、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)の中から、Ｉdiff(i,j)が１である部分の塊を検出する。Ｉdiff(i,j)が１である部分の塊とは、物体検出画像Ｉdiff(x,y)がｘ行×ｙ列に配列された画素から成る画像であり、Ｉdiff(i,j)がＩdiff(x,y)のｉ行×ｊ列における画素の値であると考えた場合に、Ｉdiff(i,j)が１である画素が連続している領域のことである。そして、第１の演算処理部５１は、この検出したＩdiff(i,j)が１である部分の塊を物体画像（熱を有する物体の画像）とし、物体画像にラベル番号Ｌを付与する。このとき、物体検出画像Ｉdiff(x,y)の中に、物体画像（Ｉdiff(i,j)が１である部分の塊）が１つだけ存在する場合には、その物体画像にラベル番号Ｌ＝１を付与する。また、物体検出画像Ｉdiff(x,y)の中に、物体画像が複数存在する場合には、それらの各物体画像にラベル番号Ｌ＝１、ラベル番号Ｌ＝２、・・・を付与する。
【００６０】
続いて、第１の演算処理部５１は、物体画像の面積を物体面積値Ｓ(m)として、物体面積値Ｓ(m)を計算する（Ｓ３−３−３）。すなわち、第１の演算処理部５１は、ラベル番号Ｌ＝１の物体画像の面積を物体面積値Ｓ(1)、ラベル番号Ｌ＝２の物体画像の面積を物体面積値Ｓ(2)、・・・、ラベル番号Ｌ＝Ｍの物体画像の面積を物体面積値Ｓ(M)として、物体面積値Ｓ(m)を計算する。物体面積値Ｓ(m)は、物体画像（Ｉdiff(i,j)が１である部分の塊）を構成しているＩdiff(i,j)の個数である。例えば、物体画像がＩdiff(4,4)、Ｉdiff(4,5)、Ｉdiff(5,4)、Ｉdiff(5,5)の４つのＩdiff(i,j)で構成されているとすると、その物体面積値Ｓ(m)は４となる。物体面積値Ｓ(m)は、物体の赤外サーモパイルアレイセンサ４からの見かけ上の面積に対応する。
【００６１】
続いて、第１の演算処理部５１は、物体面積値Ｓ(m)の中から、物体面積値Ｓ(m)の最大値である最大物体面積値Ｓmaxを求める（Ｓ３−３−４）。すなわち、第１の演算処理部５１は、物体面積値Ｓ(1)、Ｓ(2)、・・・、Ｓ(M)を比較して、物体面積値Ｓ(1)、Ｓ(2)、・・・、Ｓ(M)のうちの最大値を最大物体面積値Ｓmaxとする。物体画像が１つだけ検出された場合には、その物体画像の物体面積値Ｓ(1)が最大物体面積値Ｓmaxとなり、物体画像が複数検出された場合には、それら複数の物体画像の物体面積値Ｓ(m)のうちの最大値が最大物体面積値Ｓmaxとなる。
【００６２】
そして、第１の演算処理部５１は、最大物体面積値Ｓmaxの物体画像が人体の画像であるとみなして、検出領域Ｒ内の人体を検出し、最大物体面積値Ｓmaxを人体面積値Ｓとする。人体面積値Ｓは、赤外サーモパイルアレイセンサ４からの人体の見かけ上の面積に対応する。その後、第１の演算処理部５１は、特徴量計算処理を終了する。特徴量計算処理の後（Ｓ３−３の処理の後）、第１の演算処理部５１は、物体検出処理を終了する。
【００６３】
物体検出処理では、第１の演算処理部５１は、このようにして検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Ｓ（最大物体面積値Ｓmax）を求める。すなわち、第１の演算処理部５１は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差分である差分画像Ｔdiff(x,y)を計算し、この差分画像Ｔdiff(x,y)を０と１で２値化した物体検出画像Ｉdiff(x,y)を作成する。そして、物体検出画像Ｉdiff(x,y)の中のＩdiff(i,j)が１である部分の塊を物体画像とし、物体面積値Ｓ(m)が最大の物体画像が人体の画像であるとみなして、検出領域Ｒ内の人体を検出する。また、物体面積値Ｓ(m)が最大の物体画像の面積（最大物体面積値Ｓmax）を人体面積値Ｓとする。
【００６４】
図８は、上記状態識別処理のフローチャートを示し、図９は、最大物体面積値Ｓmax（人体面積値Ｓ）の変化と状態識別処理で識別される現在の状態の推移との関係を示す。なお、図９の各物体検出画像Ｉdiff(x,y)において、Ｉdiff(i,j)が１である部分を白色で示し、Ｉdiff(i,j)が０である部分を灰色で示している。状態識別処理では、第１の演算処理部５１は、まず、「現在の状態」を判断する（Ｓ４−１）。ここで、「現在の状態」とは、その時点での「電子看板装置１の前の人体の状態の識別結果」のことであって、前回の状態識別処理における「電子看板装置１の前の人体の状態の識別結果」である。つまり、Ｓ４−１の処理では、その時点での「電子看板装置の前の人体の状態の識別結果」が、「電子看板装置の前の人体が不在の状態」「電子看板装置の前の人体が接近の状態」「電子看板装置の前の人体が滞在の状態」のいずれであるかを判断する。なお、「電子看板装置の前の人体の状態の識別結果」は、初期時（電子看板装置１の電源の投入時）に、「電子看板装置の前の人体が不在の状態」にセットされる。
【００６５】
そして、「現在の状態」が「電子看板装置の前の人体が不在の状態」である場合（Ｓ４−１で不在）、第１の演算処理部５１は、最大物体面積値Smaxが第１の接近判定しきい値Ｚ１（例えばＺ１＝５）よりも大きいか否かを判断する（Ｓ４−２）。
【００６６】
ここで、最大物体面積値Smaxが第１の接近判定しきい値Ｚ１よりも大きければ（Ｓ４−２でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に更新して（Ｓ４−３）、状態識別処理を終了する。最大物体面積値Smaxが第１の接近判定しきい値Ｚ１よりも大きくなければ（Ｓ４−２でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が不在の状態」に維持して、状態識別処理を終了する。
【００６７】
また、「現在の状態」が「電子看板装置の前の人体が接近の状態」である場合（Ｓ４−１で接近）、第１の演算処理部５１は、最大物体面積値Smaxが滞在判定しきい値Ｚ２（例えばＺ２＝１５）よりも大きいか否かを判断する（Ｓ４−４）。
【００６８】
ここで、最大物体面積値Smaxが滞在判定しきい値Ｚ２よりも大きければ（Ｓ４−４でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が滞在の状態」に更新して（Ｓ４−５）、状態識別処理を終了する。最大物体面積値Smaxが滞在判定しきい値Ｚ２よりも大きくなければ（Ｓ４−４でＮＯ）、第１の演算処理部５１は、最大物体面積値Smaxが不在判定しきい値Ｚ３（例えばＺ３＝５）よりも小さいか否かを判断する（Ｓ４−６）。
【００６９】
ここで、最大物体面積値Smaxが不在判定しきい値Ｚ３よりも小さければ（Ｓ４−６でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が不在の状態」に更新して（Ｓ４−７）、状態識別処理を終了する。最大物体面積値Smaxが不在判定しきい値Ｚ３よりも小さくなければ（Ｓ４−６でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に維持して、状態識別処理を終了する。
【００７０】
また、「現在の状態」が「電子看板装置の前の人体が滞在の状態」である場合（Ｓ４−１で滞在）、第１の演算処理部５１は、最大物体面積値Smaxが第２の接近判定しきい値Ｚ４（例えばＺ４＝１５）よりも小さいか否かを判断する（Ｓ４−８）。
【００７１】
ここで、最大物体面積値Smaxが第２の接近判定しきい値Ｚ４よりも小さければ（Ｓ４−８でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に更新して（Ｓ４−９）、状態識別処理を終了する。最大物体面積値Smaxが第２の接近判定しきい値Ｚ４よりも小さくなければ（Ｓ４−８でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が滞在の状態」に維持して、状態識別処理を終了する。
【００７２】
状態識別処理では、第１の演算処理部５１は、このようにして電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別する。すなわち、第１の演算処理部５１は、人体面積値S（人体面積値Sは、電子看板装置１から人体までの距離に対応する）に基いて、検出領域Ｒ内の人体の有無を判断する。このとき、第１の演算処理部５１は、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を識別する。すなわち、第１の演算処理部５１は、「現在の状態」に応じて、最大物体面積値Smax（人体面積値Ｓ）を第１の接近判定しきい値Ｚ１、滞在判定しきい値Ｚ２、不在判定しきい値Ｚ３、第２の接近判定しきい値Ｚ４と比較する。そして、その比較結果に基いて、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを判断する。つまり、第１の演算処理部５１は、最大物体面積値Smaxに基いて、電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別し、最大物体面積値Smaxの増減によって、電子看板装置１の前の人体の接近、滞在、及び不在の各状態間の推移を判断する。
【００７３】
また、第１の演算処理部５１は、この状態識別処理における識別結果を示す情報を、人体の有無の判断結果の情報として、第２の演算処理部５２に送信する。すなわち、第１の演算処理部５１は、人体の有無の判断結果の情報として、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを示す情報を送信する。
【００７４】
図１０は、上記背景温度画像更新処理のフローチャートを示す。背景温度画像更新処理では、第１の演算処理部５１は、まず、背景温度更新時間カウンタの値が所定の設定値Ｗ（例えば１５分に相当する値）を超えているか否か、すなわち、背景温度更新時間（例えば１５分）経過しているか否かを判断する（Ｓ５−１）。なお、背景温度更新時間カウンタの値は、上記Ｓ１の初期背景温度画像取得処理の終了時に０にセットされる。
【００７５】
背景温度更新時間カウンタの値が設定値Ｗを超えていなければ、すなわち、背景温度更新時間経過していなければ（Ｓ５−１でＮＯ）、第１の演算処理部５１は、背景温度更新時間カウンタの値を加算して（Ｓ５−２）、背景温度画像更新処理を終了する。
【００７６】
背景温度更新時間カウンタの値が設定値Ｗを超えていれば、すなわち、背景温度更新時間経過していれば（Ｓ５−１でＹＥＳ）、第１の演算処理部５１は、背景温度画像ＴB(x,y)、測定温度画像Ｔave(x,y)、物体検出画像Ｉdiff(x,y)を取得する（Ｓ５−３）。また、第１の演算処理部５１は、背景温度更新時間カウンタの値を０にクリアする（Ｓ５−４）。
【００７７】
続いて、第１の演算処理部５１は、背景温度画像ＴB(x,y)、測定温度画像Ｔave(x,y)、及び物体検出画像Ｉdiff(x,y)に基いて、新背景温度画像ＴBNEW(x,y)を作成する（Ｓ５−５）。すなわち、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｉdiff(i,j)が１であれば、（１−α）×ＴB(i,j)＋α×Ｔave(i,j)をＴBNEW(i,j)とし、Ｉdiff(i,j)が０であれば、ＴB(i,j)をＴBNEW(i,j)とする。ここで、αは、背景温度更新係数であり、０＜α＜１の実数（例えばα＝０．５）である。Ｉdiff(i,j)は、Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴB(i,j)は、ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔave(i,j)は、Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴBNEW(i,j)は、ＴBNEW(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｉdiff(1,1)が１であれば、（１−α）×ＴB(1,1)＋α×Ｔave(1,1)をＴBNEW(1,1)とし、Ｉdiff(1,1)が０であれば、ＴB(1,1)をＴBNEW(1,1)とする。同様に、Ｉdiff(1,2)が１であれば、（１−α）×ＴB(1,2)＋α×Ｔave(1,2)をＴBNEW(1,2)とし、Ｉdiff(1,2)が０であれば、ＴB(1,2)をＴBNEW(1,2)とする。(i,j)= (1,3),・・・,(u,v)についても同様である。第１の演算処理部５１は、このようにして、新背景温度画像ＴBNEW(x,y)を求める。
【００７８】
新背景温度画像ＴBNEW(x,y)は、物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)が１であるとすると、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)を、（１−α）×ＴB(i,j)＋α×Ｔave(i,j)に置き換えたものである。
【００７９】
そして、第１の演算処理部５１は、新背景温度画像ＴBNEW(x,y)を更新する（Ｓ５−６）。すなわち、第１の演算処理部５１は、新背景温度画像ＴBNEW(x,y)を背景温度画像ＴB(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＴBNEW(i,j)をＴB(i,j)とする。従って、第１の演算処理部５１は、ＴBNEW(1,1)をＴB(1,1)とし、ＴBNEW(1,2)をＴB(1,2)とし、・・・、ＴBNEW(u,v)をＴB(u,v)とする。Ｓ５−６の処理の後、第１の演算処理部５１は、背景温度画像更新処理を終了する。
【００８０】
背景温度画像更新処理では、第１の演算処理部５１は、このようにして背景温度画像ＴB(x,y)を更新する。すなわち、第１の演算処理部５１は、背景温度更新時間経過すると（背景温度更新時間経過する都度）、背景温度画像ＴB(x,y)を更新する。このとき、物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)が１であるとすると、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)を（１−α）×ＴB(i,j)＋α×Ｔave(i,j)に置き換えることにより、背景温度画像ＴB(x,y)を更新する。ここで、αは、背景温度更新係数（０＜α＜１の実数）であり、Ｔave(i,j)は、Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。
【００８１】
図１１は、電子看板装置１の第２の演算処理部５２の動作のフローチャートを示す。第２の演算処理部５２は、第１の演算処理部５１における人体の有無の判断結果に応じてディスプレイ２の明るさを変更するために、第１の演算処理部５１から受信した人体の有無の判断結果の情報に基いて、以下のように動作する。
【００８２】
第２の演算処理部５２は、まず、第１の演算処理部５１から受信した人体の有無の判断結果の情報に基いて、電子看板装置１の前の人体の状態を判断する（Ｓ６）。第２の演算処理部５２は、第１の演算処理部５１から、人体の有無の判断結果の情報として、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを示す情報を受信する。すなわち、Ｓ６の処理では、この情報に基いて、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態のいずれであるかを判断する。
【００８３】
そして、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態のときは（Ｓ６で不在）、第２の演算処理部５２は、ディスプレイ２の明るさを最低レベルに設定する（Ｓ７）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを最低レベルに設定する。なお、ディスプレイ２のバックライト２２の光の強さを最低レベルに設定するとは、ディスプレイ２のバックライト２２を消灯することを含んでいる。
【００８４】
また、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が接近の状態のときは（Ｓ６で接近）、第２の演算処理部５２は、ディスプレイ２の明るさを標準レベルに設定する（Ｓ８）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを標準レベルに設定する。
【００８５】
また、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が滞在の状態のときは（Ｓ６で滞在）、第２の演算処理部５２は、ディスプレイ２の明るさを最高レベルに設定する（Ｓ９）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを最高レベルに設定する。
【００８６】
このような構成の電子看板装置１によれば、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒ内の人体の有無（すなわち、電子看板装置１の周辺であって、ディスプレイ２の正面付近に、人が居るか否か）が判断される。そして、この人体の有無の判断結果に応じて、ディスプレイ２の明るさ（ディスプレイ２の表示する画像の明るさ）が変更される。
【００８７】
赤外サーモパイルアレイセンサ４を用いることで、赤外線（温度）によって人体の有無が判断されて、ディスプレイ２の明るさが変更されるため、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイ２の明るさを変更することができる。また、赤外サーモパイルアレイセンサ４を用いることで、可視光カメラでは判断が困難な暗視下においても、人体の有無を判断することができる。
【００８８】
また、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態が判断される。すなわち、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態のいずれであるかが判断される。そして、電子看板装置１の前の人体が不在の状態のときは、ディスプレイ２の明るさが最低レベルに設定される。また、電子看板装置１の前の人体が接近の状態のときは、ディスプレイ２の明るさが標準レベルに設定される。また、電子看板装置１の前の人体が滞在の状態のときは、ディスプレイ２の明るさが最高レベルに設定される。
【００８９】
従って、電子看板装置１の前に人が居ないときに、電子看板装置１のディスプレイ２の明るさが最低レベルになることにより、各種情報を広告、宣伝する必要がないときに、ディスプレイ２での消費電力を抑えることができ、省電力化することができる。しかも、電子看板装置１の前に人が来たときに、ディスプレイ２の明るさが明るくなる（ディスプレイ２の明るさが最低レベルから標準レベルになる）ことにより、人目を引くことができ、各種情報を効果的に広告、宣伝することができる。
【００９０】
なお、本発明は、上記実施形態の構成に限られず、種々の変形が可能である。例えば、第２の演算処理部は、電子看板装置の前の人体の状態が滞在の状態のときに、ディスプレイの明るさを標準レベルに設定するようにしてもよい。また、電子看板装置の前の人体の状態が接近の状態のときに、ディスプレイの明るさを最高レベルに設定するようにしてもよい。また、ディスプレイは、液晶ディスプレイに限られず、明るさ（広告、宣伝する各種情報として表示する画像の明るさ）が変更可能なものであれば、どのようなものであってもよい。また、電子看板装置は、広告、宣伝する各種情報をディスプレイに（画像によって）表示することに加え、広告、宣伝する各種情報を音声によって出力するようにし、人体の有無の判断結果に応じて、出力する音声の大きさを変更するようにしてもよい。また、電子看板装置は、テーブルの上や地面の上などに設置されるものに限られず、建物の壁面に取付けられるものであってもよい。
【符号の説明】
【００９１】
１ 電子看板装置
２ ディスプレイ
３ 基台部
４ 赤外サーモパイルアレイセンサ
５ 演算処理部
２１ 液晶パネル
２２ バックライト
２３ ディスプレイ筐体
２３ａ 表示開口
３１ 設置板
３２ 支柱
４１ サーモパイルアレイ
４２ 受光レンズ
４３ センサ筐体
４３ａ 受光窓
４４ サーモパイル
４９ 連結体
５１ 第１の演算処理部
５２ 第２の演算処理部
【特許請求の範囲】
【請求項１】
明るさの変更が可能なディスプレイを備える電子看板装置において、
赤外サーモパイルアレイセンサと、
前記赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、この人体の有無の判断結果に応じて前記ディスプレイの明るさを変更する演算処理部とを備える、ことを特徴とする電子看板装置。
【請求項２】
前記演算処理部は、
前記赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、人体の有無の判断結果の情報を送信する第１の演算処理部と、
前記第１の演算処理部から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じて前記ディスプレイの明るさを変更する第２の演算処理部とを備える、ことを特徴とする請求項１に記載の電子看板装置。
【請求項３】
前記第１の演算処理部は、前記赤外サーモパイルアレイセンサの出力に基いて本装置周辺の放射温度を測定して、測定した本装置周辺の放射温度とこの放射温度の変化に基いて人体の有無の判断として本装置の前の人体の接近、滞在、及び不在の各状態を判断し、人体の有無の判断結果の情報として本装置の前の人体の接近、滞在、及び不在の各状態の情報を送信する、ことを特徴とする請求項２に記載の電子看板装置。
【請求項４】
前記第２の演算処理部は、前記第１の演算処理部から送信される本装置の前の人体の接近、滞在、及び不在の各状態の情報を受信し、本装置の前の人体が不在の状態のときは、前記ディスプレイの明るさを最低レベルに設定し、本装置の前の人体が接近又は滞在の状態のときは、前記ディスプレイの明るさを標準レベル又は最高レベルに設定する、ことを特徴とする請求項３に記載の電子看板装置。
【請求項１】
明るさの変更が可能なディスプレイを備える電子看板装置において、
赤外サーモパイルアレイセンサと、
前記赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、この人体の有無の判断結果に応じて前記ディスプレイの明るさを変更する演算処理部とを備える、ことを特徴とする電子看板装置。
【請求項２】
前記演算処理部は、
前記赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、人体の有無の判断結果の情報を送信する第１の演算処理部と、
前記第１の演算処理部から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じて前記ディスプレイの明るさを変更する第２の演算処理部とを備える、ことを特徴とする請求項１に記載の電子看板装置。
【請求項３】
前記第１の演算処理部は、前記赤外サーモパイルアレイセンサの出力に基いて本装置周辺の放射温度を測定して、測定した本装置周辺の放射温度とこの放射温度の変化に基いて人体の有無の判断として本装置の前の人体の接近、滞在、及び不在の各状態を判断し、人体の有無の判断結果の情報として本装置の前の人体の接近、滞在、及び不在の各状態の情報を送信する、ことを特徴とする請求項２に記載の電子看板装置。
【請求項４】
前記第２の演算処理部は、前記第１の演算処理部から送信される本装置の前の人体の接近、滞在、及び不在の各状態の情報を受信し、本装置の前の人体が不在の状態のときは、前記ディスプレイの明るさを最低レベルに設定し、本装置の前の人体が接近又は滞在の状態のときは、前記ディスプレイの明るさを標準レベル又は最高レベルに設定する、ことを特徴とする請求項３に記載の電子看板装置。
【図１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【図２】
【図３】
【図４】
【図５】
【図６】
【図７】
【図８】
【図９】
【図１０】
【図１１】
【公開番号】特開２０１３−４４８８１（Ｐ２０１３−４４８８１Ａ）
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願番号】特願２０１１−１８１７００（Ｐ２０１１−１８１７００）
【出願日】平成２３年８月２３日（２０１１．８．２３）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
【公開日】平成２５年３月４日（２０１３．３．４）
【国際特許分類】
【出願日】平成２３年８月２３日（２０１１．８．２３）
【出願人】（０００００５８２１）パナソニック株式会社 (73,050)
【Ｆターム（参考）】
[ Back to top ]