JP2013044881A - Electronic advertising device - Google Patents
Electronic advertising device Download PDFInfo
- Publication number
- JP2013044881A JP2013044881A JP2011181700A JP2011181700A JP2013044881A JP 2013044881 A JP2013044881 A JP 2013044881A JP 2011181700 A JP2011181700 A JP 2011181700A JP 2011181700 A JP2011181700 A JP 2011181700A JP 2013044881 A JP2013044881 A JP 2013044881A
- Authority
- JP
- Japan
- Prior art keywords
- processing unit
- arithmetic processing
- human body
- display
- absence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Abstract
Description
本発明は、各種情報を広告、宣伝するために用いられる電子看板装置に関するものである。 The present invention relates to an electronic signboard device used for advertising and promoting various information.
従来から、電子看板装置は、各種情報をディスプレイに表示することにより、各種情報を広告、宣伝するようになっている。電子看板装置は、例えば、大規模小売店等において設置され、商品やサービス等の各種情報を広告、宣伝するために用いられる。 2. Description of the Related Art Conventionally, an electronic signage apparatus has been configured to advertise and advertise various information by displaying various information on a display. The electronic signage device is installed, for example, in a large-scale retail store or the like, and is used to advertise and advertise various information such as products and services.
このような電子看板装置において、常時、ディスプレイを点灯しているものがある。しかしながら、このような電子看板装置は、電子看板装置の近くに人が居ない場合でもディスプレイを点灯しているため、省電力の観点からは、好ましくない。 Among such digital signage devices, there is one that always lights the display. However, such a digital signage device is not preferable from the viewpoint of power saving because the display is lit even when there is no person near the digital signage device.
また、電子看板装置において、カメラを搭載し、このカメラによって、電子看板装置の近くに人が居るか否かを検出して、電子看板装置の近くに人が居る場合にだけ、ディスプレイを点灯するようにしたものがある。しかしながら、このような電子看板装置は、人の検出にカメラを用いているため、個人のプライバシー保護の観点からは、好ましくない。 In addition, in the electronic signage apparatus, a camera is mounted, and it is detected by this camera whether or not there is a person near the electronic signage apparatus, and the display is turned on only when there is a person near the electronic signage apparatus. There is something like that. However, such a digital signage apparatus uses a camera for human detection, which is not preferable from the viewpoint of personal privacy protection.
一方、パーソナルコンピュータにおいては、ディスプレイのバックライトの自動パワーオフ機能を有するものが多い。しかしながら、この自動パワーオフ機能は、マウスやキーボード等の操作入力がない状態から、一定時間経過すると、バックライトを消灯するというものである。従って、パーソナルコンピュータにおけるディスプレイのバックライトの自動パワーオフ機能は、マウスやキーボード等の操作入力を行う手段を持たない電子看板装置には、適用できない。 On the other hand, many personal computers have an automatic power-off function of a display backlight. However, this automatic power-off function turns off the backlight after a certain period of time has passed since no operation input from a mouse, keyboard, or the like. Therefore, the automatic power-off function of the display backlight in a personal computer cannot be applied to an electronic signboard apparatus that does not have means for performing operation input such as a mouse or a keyboard.
そこで、電子看板装置において、赤外センサや遮光センサによって、近くに人が居るか否かを検出して、近くに人が居るか否かに応じて、ディスプレイの明るさを変更するようにしたものが知られている（例えば特許文献１参照）。また、電子看板装置において、焦電形の赤外線センサによって、近くに人が居るか否かを検出して、近くに人が居るか否かに応じて、ディスプレイの明るさを変更するようにしたものも知られている（例えば特許文献２参照）。 Therefore, in the electronic signage device, it is detected whether there is a person nearby by using an infrared sensor or a light shielding sensor, and the brightness of the display is changed depending on whether there is a person nearby. Those are known (for example, see Patent Document 1). Also, in the electronic signage device, the pyroelectric infrared sensor detects whether there is a person nearby, and the brightness of the display is changed depending on whether there is a person nearby. The thing is also known (for example, refer patent document 2).
しかしながら、上述した特許文献１に開示されている赤外センサ及び遮光センサや、特許文献２に開示されている焦電形の赤外線センサでは、人体の接近等の人の動きを検知することができるが、動きのない人体の滞在を検出することはできない。つまり、特許文献１の電子看板装置や特許文献２の電子看板装置では、近くに人が居るか否かに応じてディスプレイの明るさを変更することができるとは言い難い。
However, the infrared sensor and the light-shielding sensor disclosed in
本発明は、上記課題を解決するためになされたものであり、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更することができる電子看板装置を提供することを目的とする。 The present invention has been made to solve the above-described problems, and provides an electronic signage apparatus that can change the brightness of a display according to whether or not there is a person while protecting personal privacy. For the purpose.
上記目的を達成するために本発明の電子看板装置は、明るさの変更が可能なディスプレイを備える電子看板装置において、赤外サーモパイルアレイセンサと、赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、この人体の有無の判断結果に応じてディスプレイの明るさを変更する演算処理部とを備える、ものである。 In order to achieve the above object, an electronic signboard apparatus according to the present invention is an electronic signboard apparatus provided with a display capable of changing brightness. Infrared thermopile array sensor and presence / absence of human body based on output of infrared thermopile array sensor And an arithmetic processing unit that changes the brightness of the display in accordance with the result of the presence / absence determination of the human body.
本発明の電子看板装置において、演算処理部は、赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、人体の有無の判断結果の情報を送信する第１の演算処理部と、第１の演算処理部から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じてディスプレイの明るさを変更する第２の演算処理部とを備える、ものが好ましい。 In the electronic signage apparatus of the present invention, the arithmetic processing unit determines the presence or absence of a human body based on the output of the infrared thermopile array sensor, and transmits information on the determination result of the presence or absence of the human body, It is preferable to include a second calculation processing unit that receives information on the determination result of the presence or absence of a human body transmitted from one calculation processing unit and changes the brightness of the display according to the determination result of the presence or absence of a human body. .
また、本発明の電子看板装置において、第１の演算処理部は、赤外サーモパイルアレイセンサの出力に基いて本装置周辺の放射温度を測定して、測定した本装置周辺の放射温度とこの放射温度の変化に基いて人体の有無の判断として本装置の前の人体の接近、滞在、及び不在の各状態を判断し、人体の有無の判断結果の情報として本装置の前の人体の接近、滞在、及び不在の各状態の情報を送信する、ものが好ましい。 In the electronic signage device of the present invention, the first arithmetic processing unit measures the radiation temperature around the device based on the output of the infrared thermopile array sensor, and measures the radiation temperature around the device and the radiation. Based on the change in temperature, the presence, absence and presence of the human body in front of this device are judged as the presence of the human body, and the approach of the human body in front of this device as information on the result of the judgment of the presence of the human body. It is preferable to transmit information on each state of stay and absence.
また、本発明の電子看板装置において、第２の演算処理部は、第１の演算処理部から送信される本装置の前の人体の接近、滞在、及び不在の各状態の情報を受信し、本装置の前の人体が不在の状態のときは、ディスプレイの明るさを最低レベルに設定し、本装置の前の人体が接近又は滞在の状態のときは、ディスプレイの明るさを標準レベル又は最高レベルに設定する、ものが好ましい。 Further, in the electronic signage device of the present invention, the second arithmetic processing unit receives information on each state of approaching, staying, and absence of the human body in front of the device transmitted from the first arithmetic processing unit, When the human body in front of the device is absent, the brightness of the display is set to the lowest level.When the human body in front of the device is in the approaching or staying state, the brightness of the display is set to the standard level or the highest level. What is set at the level is preferred.
本発明によれば、赤外サーモパイルアレイセンサの出力に基いて人体の有無が判断されて、ディスプレイの明るさが変更されるため、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイの明るさを変更することができる。 According to the present invention, the presence or absence of the human body is determined based on the output of the infrared thermopile array sensor, and the brightness of the display is changed. Therefore, according to whether or not there is a person while protecting personal privacy. You can change the brightness of the display.
以下、本発明を具体化した実施形態による電子看板装置について図面を参照して説明する。図１（ａ）（ｂ）は、本実施形態による電子看板装置の構成を示す。電子看板装置１は、各種情報を広告、宣伝するために用いられる装置である。電子看板装置１は、例えば、店舗等の入口付近において、テーブルの上や地面の上などに設置され、店舗における商品やサービス等の各種情報を広告、宣伝するために用いられる。
Hereinafter, an electronic signboard device according to an embodiment of the present invention will be described with reference to the drawings. 1A and 1B show the configuration of the electronic signage apparatus according to the present embodiment. The
電子看板装置１は、広告、宣伝する各種情報を表示するためのディスプレイ２と、電子看板装置１を設置するための基台部３とを備える。また、電子看板装置１は、電子看板装置１の周辺の放射温度を測定するための赤外サーモパイルアレイセンサ４と、赤外サーモパイルアレイセンサ４の出力に基いてディスプレイ２の明るさを制御する演算処理部５とを備える。
The
ディスプレイ２は、液晶パネル２１を用いて画像を表示する液晶ディスプレイであり、液晶パネル２１及びバックライト２２がディスプレイ筐体２３内に収納され、液晶パネル２１がディスプレイ筐体２３の表示開口２３ａに臨んだ構成となっている。ディスプレイ２は、液晶パネル２１にバックライト２２からの光を透過させることにより画像を表示し、この画像によって、広告、宣伝する各種情報を表示する。ディスプレイ２は、バックライト２２の光の強さを変更することにより、ディスプレイ２の明るさ（表示する画像の明るさ）が変更可能になっている。
The
基台部３は、設置板３１と、支柱３２とを有している。設置板３１と支柱３２は、一体的に構成されている。支柱３２は、ディスプレイ２の背面部分（ディスプレイ筐体２３の背面部分であって、表示開口２３ａと反対側の部分）に接続されている。すなわち、ディスプレイ２は、背面部分を支柱３２側に向けて、支柱３２に取付けられている。電子看板装置１は、設置板３１の底面をテーブルの上面や地面などに向かい合わせるようにして、テーブルの上や地面の上などに置くことにより、テーブルの上や地面の上などに設置される。
The
赤外サーモパイルアレイセンサ４は、サーモパイルアレイ４１によって赤外線を検出するセンサであり、サーモパイルアレイ４１及び受光レンズ４２がセンサ筐体４３に収納され、受光レンズ４２がセンサ筐体４３の受光窓４３ａに臨んだ構成となっている。赤外サーモパイルアレイセンサ４は、検出領域Ｒ内から放射される赤外線を、センサ筐体４３の受光窓４３ａ及び受光レンズ４２を介して、サーモパイルアレイ４１によって受光する。
The infrared
サーモパイルアレイ４１は、縦横（ｕ行×ｖ列）に配列された複数個（ｕ×ｖ個）のサーモパイル４４xy（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）を備えている。本実施形態では、サーモパイルアレイ４１は、８行×８列（ｕ＝８、ｖ＝８）に配列された６４個のサーモパイル４４ｘｙを備えている。
The
サーモパイル４４ｘｙは、検出領域Ｒをサーモパイル４４ｘｙの配列に対応して縦横（ｕ行×ｖ列）に分割した部分小領域Ｒxy（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）内から放射される赤外線を受光する。すなわち、サーモパイル４４11、４４12、・・・、４４uvは、各々、部分小領域Ｒ11、Ｒ12、・・・、Ｒuvから放射される赤外線を受光する。
The
赤外サーモパイルアレイセンサ４は、各サーモパイル４４xyによる赤外線の受光強度に対応した値、すなわち、検出領域Ｒの各部分小領域Ｒxyの温度に対応する値、を示す検出温度画像Ｔ(x,y)（ｘ＝１，２，・・・，ｕ：ｙ＝１，２，・・・，ｖ）を出力する。つまり、各部分小領域Ｒ11、Ｒ12、・・・Ｒuvの温度に対応する値を、各々、Ｔ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)とすると、赤外サーモパイルアレイセンサ４は、これらＴ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)を検出温度画像Ｔ(x,y)として出力する。検出温度画像Ｔ(x,y)の(x,y)=(1,1)、(1,2)、・・・、(u,v)における値が、各々、Ｔ(1,1)、Ｔ(1,2)、・・・、Ｔ(u,v)である。
The infrared
赤外サーモパイルアレイセンサ４は、ディスプレイ２の上方に位置するように、連結体４９を介して、基台部３の支柱３２に取付けられている。また、赤外サーモパイルアレイセンサ４は、検出領域Ｒがディスプレイ２の正面方向に存在する空間（ディスプレイ筐体２３の表示開口２３ａ側に存在する空間）を含むように、取付けられている。
The infrared
演算処理部５は、ディスプレイ筐体２３内に設けられている。演算処理部５は、不図示の電気配線及び電気コネクタを介して、赤外サーモパイルアレイセンサ４の出力を受信する。演算処理部５は、第１の演算処理部５１と、第２の演算処理部５２とを備える。演算処理部５は、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒ内の人体の有無（すなわち、電子看板装置１の周辺であって、ディスプレイ２の正面付近に、人が居るか否か）を判断する。そして、演算処理部５は、この人体の有無の判断結果に応じて、ディスプレイ２の明るさ（ディスプレイ２の表示する画像の明るさ）を制御する。
The
図２は、電子看板装置１の電気的ブロック構成を示す。ディスプレイ２は、バックライト２２を点灯すると共に、液晶パネル２１の各画素を駆動することにより、液晶パネル２１にバックライト２２からの光を透過させて、画像を表示する。ディスプレイ２が表示する画像（すなわち、広告、宣伝する各種情報）は、事前に、例えばパソコンなどの外部装置から任意のものが入力される。すなわち、例えばパソコンなどの外部装置からの事前の入力によって、任意の画像（情報）がディスプレイ２に表示される。
FIG. 2 shows an electrical block configuration of the
赤外サーモパイルアレイセンサ４は、検出領域Ｒ内から放射される赤外線をサーモパイルアレイ４１によって受光して、検出温度画像Ｔ(x,y)を出力する。検出温度画像Ｔ(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔ(i,j)（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）は、サーモパイルアレイ４１の各サーモパイル４４ijによる赤外線の受光強度に対応し、検出領域Ｒの各部分小領域Ｒijの温度に対応する。検出温度画像Ｔ(x,y)は、部分小領域Ｒxyを単位とした検出領域Ｒの温度分布を示す。
The infrared
第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力基いて、検出領域Ｒ内の人体の有無を判断し、人体の有無の判断結果の情報を第２の演算処理部５２に送信する。
The first
このとき、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒの放射温度（すなわち、電子看板装置１の周辺の放射温度であって、ディスプレイ２の正面付近の放射温度）を測定する。そして、第１の演算処理部５１は、測定した放射温度とこの放射温度の変化に基いて、人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を判断する。第１の演算処理部５１は、人体の有無の判断結果の情報として、電子看板装置１の前の人体の接近、滞在、及び不在の各状態の情報を第２の演算処理部５２に送信する。
At this time, based on the output of the infrared
第２の演算処理部５２は、第１の演算処理部５１から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じてディスプレイ２の明るさを変更する。
The second
このとき、第２の演算処理部５２は、第１の演算処理部５１から送信される電子看板装置１の前の人体の接近、滞在、及び不在の各状態の情報を受信する。そして、第２の演算処理部５２は、電子看板装置１の前の人体が不在の状態のときは、ディスプレイ２の明るさを最低レベルに設定する。また、第２の演算処理部５２は、電子看板装置１の前の人体が接近の状態のときは、ディスプレイ２の明るさを標準レベルに設定し、電子看板装置１の前の人体が滞在の状態のときは、ディスプレイ２の明るさを最高レベルに設定する。第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを変更（設定）することにより、ディスプレイ２の明るさを変更（設定）する。なお、ディスプレイ２の明るさを最低レベルに設定するとは、ディスプレイ２を消灯（ディスプレイ２のバックライト２２を消灯）することを含んでいる。
At this time, the second
図３は、電子看板装置１の第１の演算処理部５１の動作のフローチャートを示す。第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力に基いて検出領域Ｒ内の人体の有無を判断するために、以下のように動作する。
FIG. 3 shows a flowchart of the operation of the first
第１の演算処理部５１は、電子看板装置１の電源が投入されると、まず、初期背景温度画像取得処理を行う（Ｓ１）。初期背景温度画像取得処理とは、初期時（電子看板装置１の電源の投入時）における背景温度画像ＴB(x,y)を取得する処理である。背景温度画像ＴB(x,y)とは、検出領域Ｒ内の人体を検出するための基準となる温度画像（検出領域Ｒの各部分小領域Ｒxyの背景温度に対応する値）である。初期背景温度画像取得処理において、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)に基いて、初期時における背景温度画像ＴB(x,y)を取得する。電子看板装置１の電源の投入は、電子看板装置１を設置した状態で、かつ、検出領域Ｒ内に人が居ない状態で行われる。
When the
続いて、第１の演算処理部５１は、測定温度画像取得処理を行う（Ｓ２）。測定温度画像取得処理とは、測定温度画像Ｔave(x,y)を取得する処理である。測定温度画像Ｔave(x,y)とは、検出領域Ｒ内の人体を検出するために、背景温度画像ＴB(x,y)と比較する温度画像（検出領域Ｒの各部分小領域Ｒxyの測定温度に対応する値）である。測定温度画像取得処理において、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)に基いて、測定温度画像Ｔave(x,y)を取得する。
Subsequently, the first
続いて、第１の演算処理部５１は、物体検出処理を行う（Ｓ３）。物体検出処理とは、検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Sを求める処理である。人体面積値Sとは、検出した人体の赤外サーモパイルアレイセンサ４からの見かけ上の面積に対応する値である。物体検出処理において、第１の演算処理部５１は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差から、検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Sを求める。
Subsequently, the first
続いて、第１の演算処理部５１は、状態識別処理を行う（Ｓ４）。状態識別処理とは、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別する処理である。状態識別処理において、第１の演算処理部５１は、人体面積値Sに基いて、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を識別する。第１の演算処理部５１は、状態識別処理により検出領域Ｒ内の人体の有無を判断したとき、その人体の有無の判断結果（電子看板装置１の前の人体の接近、滞在、及び不在の各状態の識別結果）の情報を第２の演算処理部５２に送信する。
Subsequently, the first
続いて、第１の演算処理部５１は、背景温度更新処理を行う（Ｓ５）。背景温度更新処理とは、検出領域Ｒの（各部分小領域Ｒｘｙの）背景温度が時間の経過につれて変化することに対応するために、背景温度画像ＴB(x,y)を更新する処理である。背景温度更新処理において、第１の演算処理部５１は、そのときの背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)に基いて、背景温度画像ＴB(x,y)を更新する。背景温度更新処理の後、第１の演算処理部５１は、上記Ｓ２以降の処理を繰り返す。Ｓ２、Ｓ３、Ｓ４、Ｓ５の処理は、例えば０．１秒程度の周期で、繰り返される。
Subsequently, the first
図４は、上記初期背景温度画像取得処理のフローチャートを示す。初期背景温度画像取得処理では、第１の演算処理部５１は、まず、検出温度画像積算値ＳT(x,y)を０にクリアする（Ｓ１−１）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(1,1)、ＳT(1,2)、・・・、ＳT(u,v)を、それぞれ、０にクリアする。
FIG. 4 is a flowchart of the initial background temperature image acquisition process. In the initial background temperature image acquisition process, the first
続いて、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４から、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)を取得する（Ｓ１−２）。
Subsequently, the first
そして、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)を計算する（Ｓ１−３）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)に検出温度画像Ｔ(x,y)を加算する。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＳT(i,j)にＴ(i,j)を加算する。ＳT(i,j)は、検出温度画像積算値ＳT(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔ(i,j)は、検出温度画像Ｔ(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、ＳT(1,1)にＴ(1,1)を加算し、ＳT(1,2)にＴ(1,2)を加算し、・・・、ＳT(u,v)にＴ(u,v)を加算する。
Then, the first
ここで、第１の演算処理部５１は、平均値計算カウンタの値が所定の設定値Ｋ（例えばＫ＝１０）に達しているか否かを判断する（Ｓ１−４）。なお、平均値計算カウンタの値は、初期時（電子看板装置１の電源の投入時）に０にセットされる。
Here, the first
平均値計算カウンタの値が設定値Ｋに達していなければ（Ｓ１−４でＮＯ）、第１の演算処理部５１は、平均値計算カウンタの値を１加算して（Ｓ１−５）、上記Ｓ１−２以降の処理を繰り返す。Ｓ１−２〜Ｓ１−５の処理は、例えば０．１秒程度の周期で、繰り返される。Ｓ１−２〜Ｓ１−５の処理が繰り返されることにより、検出温度画像積算値ＳT(x,y)は、赤外サーモパイルアレイセンサ４から異なる時刻（例えば、０．１秒間隔の異なる時刻）出力された複数の検出温度画像Ｔ(x,y)を積算したものとなる。
If the value of the average value calculation counter has not reached the set value K (NO in S1-4), the first
そして、平均値計算カウンタの値が設定値Ｋに達していれば（Ｓ１−４でＹＥＳ）、第１の演算処理部５１は、背景温度画像ＴB(x,y)を計算する（Ｓ１−６）。すなわち、第１の演算処理部５１は、検出温度画像積算値ＳT(x,y)／設定値Ｋを背景温度画像ＴB(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＳT(i,j)／ＫをＴB(i,j)とする。ＴB(i,j)は、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、ＳT(1,1)／ＫをＴB(1,1)とし、ＳT(1,2)／ＫをＴB(1,2)とし、・・・ＳT(u,v)／ＫをＴB(u,v)として、背景温度画像ＴB(x,y)を求める。
If the value of the average value calculation counter has reached the set value K (YES in S1-4), the first
背景温度画像ＴB(x,y)は、赤外サーモパイルアレイセンサ４から異なる時刻に出力された（上記Ｓ１−２〜Ｓ１−５の処理が繰り返される時間間隔で出力された）設定回数Ｋ回分の検出温度画像Ｔ(x,y)の平均値である。背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)は、検出領域Ｒの各部分小領域Ｒijの背景温度に対応する。Ｓ１−６の処理の後、第１の演算処理部５１は、平均値計算カウンタの値を０にクリアして（Ｓ１−７）、初期背景温度画像取得処理を終了する。
The background temperature image T B (x, y) is output from the infrared
初期背景温度画像取得処理では、第１の演算処理部５１は、このようにして背景温度画像ＴB(x,y)を取得する。すなわち、第１の演算処理部５１は、赤外サーモパイルアレイセンサ４から異なる時刻に出力された複数（設定回数Ｋ回分）の検出温度画像Ｔ(x,y)の平均値を背景温度画像ＴB(x,y)とする。複数の検出温度画像Ｔ(x,y)の平均値を背景温度画像ＴB(x,y)とするため、ノイズの影響が軽減される。
In the initial background temperature image acquisition process, the first
図５は、上記測定温度画像取得処理のフローチャートを示す。測定温度画像取得処理では、第１の演算処理部５１は、まず、赤外サーモパイルアレイセンサ４から、赤外サーモパイルアレイセンサ４の出力である検出温度画像Ｔ(x,y)を取得する（Ｓ２−１）。
FIG. 5 shows a flowchart of the measured temperature image acquisition process. In the measurement temperature image acquisition process, the first
続いて、第１の演算処理部５１は、温度ログデータＴlog[N-1](x,y)、Ｔlog[N-2](x,y)、・・・、Ｔlog[1](x,y)（Ｎは例えば１０）を更新する（Ｓ２−２）。すなわち、第１の演算処理部５１は、Ｔlog[N-2](x,y)をＴlog[N-1](x,y)とし、Ｔlog[N-3](x,y)をＴlog[N-2](x,y)とし、・・・、Ｔlog[1](x,y)をＴlog[0](x,y)とする。
Subsequently, the first
また、第１の演算処理部５１は、温度ログデータＴlog[0](x,y)を更新する（Ｓ２−３）。すなわち、第１の演算処理部５１は、今回の測定温度画像取得処理で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)をＴlog[0](x,y)とする。
The first
Ｓ２−２、Ｓ２−３の処理により、温度ログデータＴlog[n](x,y)（ｎ＝０、１、２、・・・、Ｎ−１）は、ｎ回前の測定温度画像取得処理で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)となる。但し、温度ログデータＴlog[0](x,y)は、今回の測定温度画像取得処理）で赤外サーモパイルアレイセンサ４から取得した検出温度画像Ｔ(x,y)である。従って、温度ログデータＴlog[n](x,y)は、上記Ｓ２〜Ｓ５の処理（上記図３参照）が繰り返されることにより赤外サーモパイルアレイセンサ４から取得した時系列の複数の検出温度画像Ｔ(x,y)である。
Through the processing of S2-2 and S2-3, the temperature log data T log [n] (x, y) (n = 0, 1, 2,..., N−1) is the measured temperature image n times before. The detected temperature image T (x, y) acquired from the infrared
そして、第１の演算処理部５１は、測定温度画像Ｔave(x,y)を計算する（Ｓ２−４）。すなわち、第１の演算処理部５１は、（Ｔlog[0](x,y)＋Ｔlog[1](x,y)＋Ｔlog[2](x,y)＋・・・＋Ｔlog[N-1](x,y)）／Ｎを測定温度画像Ｔave(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、（Ｔlog[0](i,j)＋Ｔlog[1](i,j)＋Ｔlog[2](i,j)＋・・・＋Ｔlog[N-1](i,j)）／ＮをＴave(i,j)とする。Ｔlog[0](i,j)、Ｔlog[1](i,j)、Ｔlog[2](i,j)、・・・、Ｔlog[N-1](i,j)は、それぞれ、各温度ログデータＴlog[0](x,y)、Ｔlog[1](x,y)、Ｔlog[2](x,y)、・・・、Ｔlog[N-1](x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。Ｔave(i,j)は、測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、（Ｔlog[0](1,1)＋Ｔlog[1](1,1)＋・・・＋Ｔlog[N-1](1,1)）／ＮをＴave(1,1)とする。同様に、（Ｔlog[0](1,2)＋Ｔlog[1](1,2)＋・・・＋Ｔlog[N-1](1,2)）／ＮをＴave(1,2)とし、・・・、（Ｔlog[0](u,v)＋Ｔlog[1](u,v)＋・・・＋Ｔlog[N-1](u,v)）／ＮをＴave(u,v)とする。第１の演算処理部５１は、このようにして、測定温度画像Ｔave(x,y)を求める。
Then, the first
測定温度画像Ｔave(x,y)は、温度ログデータＴlog[n](x,y)（ｎ＝０、１、２、・・・、Ｎ−１）の平均値であって、上記Ｓ２〜Ｓ５の処理が繰り返されることにより赤外サーモパイルアレイセンサ４から出力された時系列の複数の検出温度画像Ｔ(x,y)の平均値である。測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔave(i,j)は、検出領域Ｒの各部分小領域Ｒijの測定温度に対応する。Ｓ２−４の処理の後、第１の演算処理部５１は、測定温度画像取得処理を終了する。
The measured temperature image T ave (x, y) is an average value of the temperature log data T log [n] (x, y) (n = 0, 1, 2,..., N−1). It is an average value of a plurality of time-series detected temperature images T (x, y) output from the infrared
測定温度画像取得処理では、第１の演算処理部５１は、このようにして測定温度画像Ｔave(x,y)を取得する。すなわち、第１の演算処理部５１は、温度ログデータＴlog[n](x,y)）（ｎ＝０、１、２、・・・、Ｎ−１）の平均値、従って、時系列の複数の検出温度画像Ｔ(x,y)の平均値を測定温度画像Ｔave(x,y)とする。時系列の複数の検出温度画像Ｔ(x,y)の平均値を測定温度画像Ｔave(x,y)とするため、ノイズの影響が軽減される。
In the measurement temperature image acquisition process, the first
図６は、上記物体検出処理のフローチャートを示し、図７は、物体検出処理で行われる特徴量計算処理のフローチャートを示す。物体検出処理では、第１の演算処理部５１は、まず、差分画像Ｔdiff(x,y)を計算する（Ｓ３−１）。すなわち、第１の演算処理部５１は、Ｔave(x,y)−ＴB(x,y)をＴdiff(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｔave(i,j)−ＴB(i,j)をＴdiff(i,j)とする。Ｔave(i,j)は、測定温度画像Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴB(i,j)は、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔdiff(i,j)は、Ｔdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｔave(1,1)−ＴB(1,1)をＴdiff(1,1)とし、Ｔave(1,2)−ＴB(1,2)をＴdiff(1,2)とし、・・・、Ｔave(u,v)−ＴB(u,v)をＴdiff(u,v)として、差分画像Ｔdiff(x,y)を計算する。
FIG. 6 shows a flowchart of the object detection process, and FIG. 7 shows a flowchart of the feature amount calculation process performed in the object detection process. In the object detection process, the first
差分画像Ｔdiff(x,y)は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差分である。差分画像Ｔdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｔdiff(i,j)は、検出領域Ｒの各部分小領域Ｒijにおける背景温度と測定温度との差分に対応する。 The difference image T diff (x, y) is a difference between the background temperature image T B (x, y) and the measured temperature image T ave (x, y). The value T diff (i, j) at x = i, y = j of the difference image T diff (x, y) corresponds to the difference between the background temperature and the measured temperature in each partial small region R ij of the detection region R. .
続いて、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)を作成する（Ｓ３−２）。すなわち、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｔdiff(i,j)が設定しきい値よりも大きければ、Ｉdiff(i,j)を１とし、Ｔdiff(i,j)が設定しきい値よりも大きくなければ、Ｉdiff(i,j)を０として、物体検出画像Ｉdiff(x,y)とする。Ｉdiff(i,j)は、Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｔdiff(1,1)が設定しきい値よりも大きければ、Ｉdiff(1,1)を１とし、Ｔdiff(1,1)が設定しきい値よりも大きくなければ、Ｉdiff(1,1)を０とする。同様に、Ｔdiff(1,2)が設定しきい値よりも大きければ、Ｉdiff(1,2)を１とし、Ｔdiff(1,2)が設定しきい値よりも大きくなければ、Ｉdiff(1,2)を０とする。また、同様に、Ｔdiff(1,3)、・・・、Ｔdiff(u,v)についても、それぞれ、設定しきい値よりも大きければ、１とし、大きくなければ、０とする。第１の演算処理部５１は、このようにして、物体検出画像Ｉdiff(x,y)を作成する。
Subsequently, the first
物体検出画像Ｉdiff(x,y)は、差分画像Ｔdiff(x,y)を２値化した画像である。物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)は、検出領域Ｒの各部分小領域Ｒijにおける背景温度と測定温度との差分を2値化した値に対応する。
The object detection image I diff (x, y) is an image obtained by binarizing the difference image T diff (x, y). The value I diff (i, j) at x = i, y = j of the object detection image I diff (x, y) is the difference between the background temperature and the measurement temperature in each partial small region R ij of the
そして、第１の演算処理部５１は、特徴量計算処理を行う（Ｓ３−３）。特徴量計算処理は、物体検出画像Ｉdiff(x,y)に基いて人体面積値Sを求める処理である。
Then, the first
図７に示すように、特徴量計算処理では、第１の演算処理部５１は、まず、物体面積値Ｓ(m)（ｍ＝１、２、・・・、Ｍ）（Ｍは例えば１０）の値を０に設定する（Ｓ３−３−１）。すなわち、第１の演算処理部５１は、物体面積値Ｓ(1) 、Ｓ(2) 、・・・、Ｓ(M)を、それぞれ、０に設定する。
As shown in FIG. 7, in the feature amount calculation process, the first
続いて、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)をラベリング処理する（Ｓ３−３−２）。すなわち、第１の演算処理部５１は、物体検出画像Ｉdiff(x,y)の中から、Ｉdiff(i,j)が１である部分の塊を検出する。Ｉdiff(i,j)が１である部分の塊とは、物体検出画像Ｉdiff(x,y)がｘ行×ｙ列に配列された画素から成る画像であり、Ｉdiff(i,j)がＩdiff(x,y)のｉ行×ｊ列における画素の値であると考えた場合に、Ｉdiff(i,j)が１である画素が連続している領域のことである。そして、第１の演算処理部５１は、この検出したＩdiff(i,j)が１である部分の塊を物体画像（熱を有する物体の画像）とし、物体画像にラベル番号Ｌを付与する。このとき、物体検出画像Ｉdiff(x,y)の中に、物体画像（Ｉdiff(i,j)が１である部分の塊）が１つだけ存在する場合には、その物体画像にラベル番号Ｌ＝１を付与する。また、物体検出画像Ｉdiff(x,y)の中に、物体画像が複数存在する場合には、それらの各物体画像にラベル番号Ｌ＝１、ラベル番号Ｌ＝２、・・・を付与する。
Subsequently, the first
続いて、第１の演算処理部５１は、物体画像の面積を物体面積値Ｓ(m)として、物体面積値Ｓ(m)を計算する（Ｓ３−３−３）。すなわち、第１の演算処理部５１は、ラベル番号Ｌ＝１の物体画像の面積を物体面積値Ｓ(1)、ラベル番号Ｌ＝２の物体画像の面積を物体面積値Ｓ(2)、・・・、ラベル番号Ｌ＝Ｍの物体画像の面積を物体面積値Ｓ(M)として、物体面積値Ｓ(m)を計算する。物体面積値Ｓ(m)は、物体画像（Ｉdiff(i,j)が１である部分の塊）を構成しているＩdiff(i,j)の個数である。例えば、物体画像がＩdiff(4,4)、Ｉdiff(4,5)、Ｉdiff(5,4)、Ｉdiff(5,5)の４つのＩdiff(i,j)で構成されているとすると、その物体面積値Ｓ(m)は４となる。物体面積値Ｓ(m)は、物体の赤外サーモパイルアレイセンサ４からの見かけ上の面積に対応する。
Subsequently, the first
続いて、第１の演算処理部５１は、物体面積値Ｓ(m)の中から、物体面積値Ｓ(m)の最大値である最大物体面積値Ｓmaxを求める（Ｓ３−３−４）。すなわち、第１の演算処理部５１は、物体面積値Ｓ(1)、Ｓ(2)、・・・、Ｓ(M)を比較して、物体面積値Ｓ(1)、Ｓ(2)、・・・、Ｓ(M)のうちの最大値を最大物体面積値Ｓmaxとする。物体画像が１つだけ検出された場合には、その物体画像の物体面積値Ｓ(1)が最大物体面積値Ｓmaxとなり、物体画像が複数検出された場合には、それら複数の物体画像の物体面積値Ｓ(m)のうちの最大値が最大物体面積値Ｓmaxとなる。
Subsequently, the first
そして、第１の演算処理部５１は、最大物体面積値Ｓmaxの物体画像が人体の画像であるとみなして、検出領域Ｒ内の人体を検出し、最大物体面積値Ｓmaxを人体面積値Ｓとする。人体面積値Ｓは、赤外サーモパイルアレイセンサ４からの人体の見かけ上の面積に対応する。その後、第１の演算処理部５１は、特徴量計算処理を終了する。特徴量計算処理の後（Ｓ３−３の処理の後）、第１の演算処理部５１は、物体検出処理を終了する。
Then, the first
物体検出処理では、第１の演算処理部５１は、このようにして検出領域Ｒ内の人体を検出し、検出した人体の人体面積値Ｓ（最大物体面積値Ｓmax）を求める。すなわち、第１の演算処理部５１は、背景温度画像ＴB(x,y)と測定温度画像Ｔave(x,y)との差分である差分画像Ｔdiff(x,y)を計算し、この差分画像Ｔdiff(x,y)を０と１で２値化した物体検出画像Ｉdiff(x,y)を作成する。そして、物体検出画像Ｉdiff(x,y)の中のＩdiff(i,j)が１である部分の塊を物体画像とし、物体面積値Ｓ(m)が最大の物体画像が人体の画像であるとみなして、検出領域Ｒ内の人体を検出する。また、物体面積値Ｓ(m)が最大の物体画像の面積（最大物体面積値Ｓmax）を人体面積値Ｓとする。
In the object detection process, the first
図８は、上記状態識別処理のフローチャートを示し、図９は、最大物体面積値Ｓmax（人体面積値Ｓ）の変化と状態識別処理で識別される現在の状態の推移との関係を示す。なお、図９の各物体検出画像Ｉdiff(x,y)において、Ｉdiff(i,j)が１である部分を白色で示し、Ｉdiff(i,j)が０である部分を灰色で示している。状態識別処理では、第１の演算処理部５１は、まず、「現在の状態」を判断する（Ｓ４−１）。ここで、「現在の状態」とは、その時点での「電子看板装置１の前の人体の状態の識別結果」のことであって、前回の状態識別処理における「電子看板装置１の前の人体の状態の識別結果」である。つまり、Ｓ４−１の処理では、その時点での「電子看板装置の前の人体の状態の識別結果」が、「電子看板装置の前の人体が不在の状態」「電子看板装置の前の人体が接近の状態」「電子看板装置の前の人体が滞在の状態」のいずれであるかを判断する。なお、「電子看板装置の前の人体の状態の識別結果」は、初期時（電子看板装置１の電源の投入時）に、「電子看板装置の前の人体が不在の状態」にセットされる。
FIG. 8 shows a flowchart of the state identification process, and FIG. 9 shows the relationship between the change in the maximum object area value S max (human body area value S) and the transition of the current state identified in the state identification process. In each object detection image I diff (x, y) in FIG. 9, a portion where I diff (i, j) is 1 is shown in white, and a portion where I diff (i, j) is 0 is shown in gray. Show. In the state identification process, the first
そして、「現在の状態」が「電子看板装置の前の人体が不在の状態」である場合（Ｓ４−１で不在）、第１の演算処理部５１は、最大物体面積値Smaxが第１の接近判定しきい値Ｚ１（例えばＺ１＝５）よりも大きいか否かを判断する（Ｓ４−２）。
When the “current state” is “the state where the human body in front of the electronic signage device is absent” (absent in S4-1), the first
ここで、最大物体面積値Smaxが第１の接近判定しきい値Ｚ１よりも大きければ（Ｓ４−２でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に更新して（Ｓ４−３）、状態識別処理を終了する。最大物体面積値Smaxが第１の接近判定しきい値Ｚ１よりも大きくなければ（Ｓ４−２でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が不在の状態」に維持して、状態識別処理を終了する。
Here, if the maximum object area value S max is larger than the first approach determination threshold value Z 1 (YES in S 4-2), the first
また、「現在の状態」が「電子看板装置の前の人体が接近の状態」である場合（Ｓ４−１で接近）、第１の演算処理部５１は、最大物体面積値Smaxが滞在判定しきい値Ｚ２（例えばＺ２＝１５）よりも大きいか否かを判断する（Ｓ４−４）。
In addition, when the “current state” is “a state where the human body in front of the electronic signboard is approaching” (approached in S4-1), the first
ここで、最大物体面積値Smaxが滞在判定しきい値Ｚ２よりも大きければ（Ｓ４−４でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が滞在の状態」に更新して（Ｓ４−５）、状態識別処理を終了する。最大物体面積値Smaxが滞在判定しきい値Ｚ２よりも大きくなければ（Ｓ４−４でＮＯ）、第１の演算処理部５１は、最大物体面積値Smaxが不在判定しきい値Ｚ３（例えばＺ３＝５）よりも小さいか否かを判断する（Ｓ４−６）。
Here, (YES in S4-4) larger if than the maximum object area value S max stay determination threshold Z 2, the first
ここで、最大物体面積値Smaxが不在判定しきい値Ｚ３よりも小さければ（Ｓ４−６でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が不在の状態」に更新して（Ｓ４−７）、状態識別処理を終了する。最大物体面積値Smaxが不在判定しきい値Ｚ３よりも小さくなければ（Ｓ４−６でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に維持して、状態識別処理を終了する。
Here, if the maximum object area value S max is smaller than the absence determination threshold value Z 3 (YES in S 4-6), the first
また、「現在の状態」が「電子看板装置の前の人体が滞在の状態」である場合（Ｓ４−１で滞在）、第１の演算処理部５１は、最大物体面積値Smaxが第２の接近判定しきい値Ｚ４（例えばＺ４＝１５）よりも小さいか否かを判断する（Ｓ４−８）。
Further, when the “current state” is “the state where the human body in front of the electronic signboard device is staying” (staying in S4-1), the first
ここで、最大物体面積値Smaxが第２の接近判定しきい値Ｚ４よりも小さければ（Ｓ４−８でＹＥＳ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が接近の状態」に更新して（Ｓ４−９）、状態識別処理を終了する。最大物体面積値Smaxが第２の接近判定しきい値Ｚ４よりも小さくなければ（Ｓ４−８でＮＯ）、第１の演算処理部５１は、「現在の状態」を「電子看板装置の前の人体が滞在の状態」に維持して、状態識別処理を終了する。
Here, if the maximum object area value S max is smaller than the second approach determination threshold value Z 4 (YES in S 4-8), the first
状態識別処理では、第１の演算処理部５１は、このようにして電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別する。すなわち、第１の演算処理部５１は、人体面積値S（人体面積値Sは、電子看板装置１から人体までの距離に対応する）に基いて、検出領域Ｒ内の人体の有無を判断する。このとき、第１の演算処理部５１は、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態を識別する。すなわち、第１の演算処理部５１は、「現在の状態」に応じて、最大物体面積値Smax（人体面積値Ｓ）を第１の接近判定しきい値Ｚ１、滞在判定しきい値Ｚ２、不在判定しきい値Ｚ３、第２の接近判定しきい値Ｚ４と比較する。そして、その比較結果に基いて、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを判断する。つまり、第１の演算処理部５１は、最大物体面積値Smaxに基いて、電子看板装置１の前の人体の接近、滞在、及び不在の各状態を識別し、最大物体面積値Smaxの増減によって、電子看板装置１の前の人体の接近、滞在、及び不在の各状態間の推移を判断する。
In the state identification process, the first
また、第１の演算処理部５１は、この状態識別処理における識別結果を示す情報を、人体の有無の判断結果の情報として、第２の演算処理部５２に送信する。すなわち、第１の演算処理部５１は、人体の有無の判断結果の情報として、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを示す情報を送信する。
In addition, the first
図１０は、上記背景温度画像更新処理のフローチャートを示す。背景温度画像更新処理では、第１の演算処理部５１は、まず、背景温度更新時間カウンタの値が所定の設定値Ｗ（例えば１５分に相当する値）を超えているか否か、すなわち、背景温度更新時間（例えば１５分）経過しているか否かを判断する（Ｓ５−１）。なお、背景温度更新時間カウンタの値は、上記Ｓ１の初期背景温度画像取得処理の終了時に０にセットされる。
FIG. 10 is a flowchart of the background temperature image update process. In the background temperature image update process, the first
背景温度更新時間カウンタの値が設定値Ｗを超えていなければ、すなわち、背景温度更新時間経過していなければ（Ｓ５−１でＮＯ）、第１の演算処理部５１は、背景温度更新時間カウンタの値を加算して（Ｓ５−２）、背景温度画像更新処理を終了する。
If the value of the background temperature update time counter does not exceed the set value W, that is, if the background temperature update time has not elapsed (NO in S5-1), the first
背景温度更新時間カウンタの値が設定値Ｗを超えていれば、すなわち、背景温度更新時間経過していれば（Ｓ５−１でＹＥＳ）、第１の演算処理部５１は、背景温度画像ＴB(x,y)、測定温度画像Ｔave(x,y)、物体検出画像Ｉdiff(x,y)を取得する（Ｓ５−３）。また、第１の演算処理部５１は、背景温度更新時間カウンタの値を０にクリアする（Ｓ５−４）。
If the value of the background temperature update time counter exceeds the set value W, i.e., if the elapsed background temperature update time (YES in S5-1), the first
続いて、第１の演算処理部５１は、背景温度画像ＴB(x,y)、測定温度画像Ｔave(x,y)、及び物体検出画像Ｉdiff(x,y)に基いて、新背景温度画像ＴBNEW(x,y)を作成する（Ｓ５−５）。すなわち、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、Ｉdiff(i,j)が１であれば、（１−α）×ＴB(i,j)＋α×Ｔave(i,j)をＴBNEW(i,j)とし、Ｉdiff(i,j)が０であれば、ＴB(i,j)をＴBNEW(i,j)とする。ここで、αは、背景温度更新係数であり、０＜α＜１の実数（例えばα＝０．５）である。Ｉdiff(i,j)は、Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴB(i,j)は、ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、Ｔave(i,j)は、Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値であり、ＴBNEW(i,j)は、ＴBNEW(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。従って、第１の演算処理部５１は、Ｉdiff(1,1)が１であれば、（１−α）×ＴB(1,1)＋α×Ｔave(1,1)をＴBNEW(1,1)とし、Ｉdiff(1,1)が０であれば、ＴB(1,1)をＴBNEW(1,1)とする。同様に、Ｉdiff(1,2)が１であれば、（１−α）×ＴB(1,2)＋α×Ｔave(1,2)をＴBNEW(1,2)とし、Ｉdiff(1,2)が０であれば、ＴB(1,2)をＴBNEW(1,2)とする。(i,j)= (1,3),・・・,(u,v)についても同様である。第１の演算処理部５１は、このようにして、新背景温度画像ＴBNEW(x,y)を求める。
Subsequently, the first
新背景温度画像ＴBNEW(x,y)は、物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)が１であるとすると、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)を、（１−α）×ＴB(i,j)＋α×Ｔave(i,j)に置き換えたものである。 The new background temperature image T BNEW (x, y) is obtained by assuming that the value I diff (i, j) at x = i and y = j of the object detection image I diff (x, y) is 1. Replace the value T B (i, j) of T B (x, y) at x = i, y = j with (1−α) × T B (i, j) + α × T ave (i, j) It is a thing.
そして、第１の演算処理部５１は、新背景温度画像ＴBNEW(x,y)を更新する（Ｓ５−６）。すなわち、第１の演算処理部５１は、新背景温度画像ＴBNEW(x,y)を背景温度画像ＴB(x,y)とする。つまり、第１の演算処理部５１は、各ｉ、ｊ（ｉ＝１，２，・・・，ｕ：ｊ＝１，２，・・・，ｖ）について、ＴBNEW(i,j)をＴB(i,j)とする。従って、第１の演算処理部５１は、ＴBNEW(1,1)をＴB(1,1)とし、ＴBNEW(1,2)をＴB(1,2)とし、・・・、ＴBNEW(u,v)をＴB(u,v)とする。Ｓ５−６の処理の後、第１の演算処理部５１は、背景温度画像更新処理を終了する。
Then, the first
背景温度画像更新処理では、第１の演算処理部５１は、このようにして背景温度画像ＴB(x,y)を更新する。すなわち、第１の演算処理部５１は、背景温度更新時間経過すると（背景温度更新時間経過する都度）、背景温度画像ＴB(x,y)を更新する。このとき、物体検出画像Ｉdiff(x,y)のｘ＝ｉ、ｙ＝ｊにおける値Ｉdiff(i,j)が１であるとすると、背景温度画像ＴB(x,y)のｘ＝ｉ、ｙ＝ｊにおける値ＴB(i,j)を（１−α）×ＴB(i,j)＋α×Ｔave(i,j)に置き換えることにより、背景温度画像ＴB(x,y)を更新する。ここで、αは、背景温度更新係数（０＜α＜１の実数）であり、Ｔave(i,j)は、Ｔave(x,y)のｘ＝ｉ、ｙ＝ｊにおける値である。
In the background temperature image update process, the first
図１１は、電子看板装置１の第２の演算処理部５２の動作のフローチャートを示す。第２の演算処理部５２は、第１の演算処理部５１における人体の有無の判断結果に応じてディスプレイ２の明るさを変更するために、第１の演算処理部５１から受信した人体の有無の判断結果の情報に基いて、以下のように動作する。
FIG. 11 shows a flowchart of the operation of the second
第２の演算処理部５２は、まず、第１の演算処理部５１から受信した人体の有無の判断結果の情報に基いて、電子看板装置１の前の人体の状態を判断する（Ｓ６）。第２の演算処理部５２は、第１の演算処理部５１から、人体の有無の判断結果の情報として、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態、のいずれであるかを示す情報を受信する。すなわち、Ｓ６の処理では、この情報に基いて、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態のいずれであるかを判断する。
First, the second
そして、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態のときは（Ｓ６で不在）、第２の演算処理部５２は、ディスプレイ２の明るさを最低レベルに設定する（Ｓ７）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを最低レベルに設定する。なお、ディスプレイ２のバックライト２２の光の強さを最低レベルに設定するとは、ディスプレイ２のバックライト２２を消灯することを含んでいる。
Then, when the state of the human body in front of the
また、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が接近の状態のときは（Ｓ６で接近）、第２の演算処理部５２は、ディスプレイ２の明るさを標準レベルに設定する（Ｓ８）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを標準レベルに設定する。
In addition, when the state of the human body in front of the
また、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が滞在の状態のときは（Ｓ６で滞在）、第２の演算処理部５２は、ディスプレイ２の明るさを最高レベルに設定する（Ｓ９）。すなわち、第２の演算処理部５２は、ディスプレイ２のバックライト２２の光の強さを最高レベルに設定する。
When the state of the human body in front of the
このような構成の電子看板装置１によれば、赤外サーモパイルアレイセンサ４の出力に基いて、検出領域Ｒ内の人体の有無（すなわち、電子看板装置１の周辺であって、ディスプレイ２の正面付近に、人が居るか否か）が判断される。そして、この人体の有無の判断結果に応じて、ディスプレイ２の明るさ（ディスプレイ２の表示する画像の明るさ）が変更される。
According to the
赤外サーモパイルアレイセンサ４を用いることで、赤外線（温度）によって人体の有無が判断されて、ディスプレイ２の明るさが変更されるため、個人のプライバシーを保護しつつ、人が居るか否かに応じてディスプレイ２の明るさを変更することができる。また、赤外サーモパイルアレイセンサ４を用いることで、可視光カメラでは判断が困難な暗視下においても、人体の有無を判断することができる。
By using the infrared
また、検出領域Ｒ内の人体の有無の判断として、電子看板装置１の前（電子看板装置１の周辺であって、ディスプレイ２の正面付近）の人体の接近、滞在、及び不在の各状態が判断される。すなわち、電子看板装置１の前の人体の状態が、電子看板装置１の前の人体が不在の状態、電子看板装置１の前の人体が接近の状態、電子看板装置１の前の人体が滞在の状態のいずれであるかが判断される。そして、電子看板装置１の前の人体が不在の状態のときは、ディスプレイ２の明るさが最低レベルに設定される。また、電子看板装置１の前の人体が接近の状態のときは、ディスプレイ２の明るさが標準レベルに設定される。また、電子看板装置１の前の人体が滞在の状態のときは、ディスプレイ２の明るさが最高レベルに設定される。
Further, as the determination of the presence or absence of a human body in the detection region R, the states of approaching, staying, and absence of the human body in front of the electronic signage apparatus 1 (around the
従って、電子看板装置１の前に人が居ないときに、電子看板装置１のディスプレイ２の明るさが最低レベルになることにより、各種情報を広告、宣伝する必要がないときに、ディスプレイ２での消費電力を抑えることができ、省電力化することができる。しかも、電子看板装置１の前に人が来たときに、ディスプレイ２の明るさが明るくなる（ディスプレイ２の明るさが最低レベルから標準レベルになる）ことにより、人目を引くことができ、各種情報を効果的に広告、宣伝することができる。
Accordingly, when there is no person in front of the
なお、本発明は、上記実施形態の構成に限られず、種々の変形が可能である。例えば、第２の演算処理部は、電子看板装置の前の人体の状態が滞在の状態のときに、ディスプレイの明るさを標準レベルに設定するようにしてもよい。また、電子看板装置の前の人体の状態が接近の状態のときに、ディスプレイの明るさを最高レベルに設定するようにしてもよい。また、ディスプレイは、液晶ディスプレイに限られず、明るさ（広告、宣伝する各種情報として表示する画像の明るさ）が変更可能なものであれば、どのようなものであってもよい。また、電子看板装置は、広告、宣伝する各種情報をディスプレイに（画像によって）表示することに加え、広告、宣伝する各種情報を音声によって出力するようにし、人体の有無の判断結果に応じて、出力する音声の大きさを変更するようにしてもよい。また、電子看板装置は、テーブルの上や地面の上などに設置されるものに限られず、建物の壁面に取付けられるものであってもよい。 In addition, this invention is not restricted to the structure of the said embodiment, A various deformation | transformation is possible. For example, the second arithmetic processing unit may set the brightness of the display to a standard level when the state of the human body in front of the electronic signboard device is a staying state. Further, the brightness of the display may be set to the highest level when the state of the human body in front of the electronic signboard device is an approaching state. The display is not limited to a liquid crystal display, and any display may be used as long as the brightness (the brightness of an image displayed as various information for advertisement and promotion) can be changed. In addition to displaying various information to be advertised and advertised (by an image) on the display, the electronic signboard device outputs various information to be advertised and advertised by voice, and according to the determination result of the presence or absence of the human body, You may make it change the magnitude | size of the audio | voice to output. Further, the electronic signboard device is not limited to the one installed on the table or the ground, but may be one attached to the wall surface of the building.
１ 電子看板装置
２ ディスプレイ
３ 基台部
４ 赤外サーモパイルアレイセンサ
５ 演算処理部
２１ 液晶パネル
２２ バックライト
２３ ディスプレイ筐体
２３ａ 表示開口
３１ 設置板
３２ 支柱
４１ サーモパイルアレイ
４２ 受光レンズ
４３ センサ筐体
４３ａ 受光窓
４４ サーモパイル
４９ 連結体
５１ 第１の演算処理部
５２ 第２の演算処理部
DESCRIPTION OF
Claims (4)
赤外サーモパイルアレイセンサと、
前記赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、この人体の有無の判断結果に応じて前記ディスプレイの明るさを変更する演算処理部とを備える、ことを特徴とする電子看板装置。 In an electronic signage apparatus having a display capable of changing brightness,
An infrared thermopile array sensor,
An electronic signboard comprising: an arithmetic processing unit that determines the presence or absence of a human body based on the output of the infrared thermopile array sensor and changes the brightness of the display according to the determination result of the presence or absence of the human body apparatus.
前記赤外サーモパイルアレイセンサの出力に基いて人体の有無を判断し、人体の有無の判断結果の情報を送信する第１の演算処理部と、
前記第１の演算処理部から送信される人体の有無の判断結果の情報を受信し、人体の有無の判断結果に応じて前記ディスプレイの明るさを変更する第２の演算処理部とを備える、ことを特徴とする請求項１に記載の電子看板装置。 The arithmetic processing unit includes:
A first arithmetic processing unit that determines the presence or absence of a human body based on an output of the infrared thermopile array sensor, and transmits information on a determination result of the presence or absence of a human body;
Receiving a human body presence / absence determination result information transmitted from the first arithmetic processing unit, and changing the brightness of the display according to the human body presence / absence determination result, The electronic signage apparatus according to claim 1, wherein
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011181700A JP2013044881A (en) | 2011-08-23 | 2011-08-23 | Electronic advertising device |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011181700A JP2013044881A (en) | 2011-08-23 | 2011-08-23 | Electronic advertising device |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2013044881A true JP2013044881A (en) | 2013-03-04 |
Family
ID=48008849
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2011181700A Withdrawn JP2013044881A (en) | 2011-08-23 | 2011-08-23 | Electronic advertising device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2013044881A (en) |
Cited By (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015222191A (en) * | 2014-05-22 | 2015-12-10 | 学校法人慶應義塾 | Behavior detection system and method using infrared array sensor |
| CN105277997A (en) * | 2015-11-11 | 2016-01-27 | 国家电网公司 | Signboard monitoring device |
| JP2016045502A (en) * | 2014-08-19 | 2016-04-04 | キヤノン株式会社 | Information processing apparatus, control method thereof, and program |
| JP6091693B1 (en) * | 2016-09-21 | 2017-03-08 | 京セラ株式会社 | Electronics |
| CN107170381A (en) * | 2017-07-17 | 2017-09-15 | 合肥左成传媒科技有限公司 | A kind of teaching building corridor hangs drawing board with electronics |
| CN107566869A (en) * | 2017-10-23 | 2018-01-09 | 四川长虹电器股份有限公司 | A kind of advertisement TV display brightness dynamic adjusting system and method |
| CN111951058A (en) * | 2020-08-24 | 2020-11-17 | 珠海格力电器股份有限公司 | Commodity attention analysis method, device and system based on electronic price tags |
| JP2020536740A (en) * | 2017-10-12 | 2020-12-17 | プレシテック ゲーエムベーハー ウント ツェーオー カーゲー | Equipment for laser machining systems, laser machining systems using it, and methods for adjusting the focal position of optics |
| JP2022530603A (en) * | 2019-06-17 | 2022-06-30 | グーグル エルエルシー | Mobile device-based radar system for applying different power modes to multimode interfaces |
| US11550048B2 (en) | 2019-05-20 | 2023-01-10 | Google Llc | Mobile device-based radar system for providing a multi-mode interface |
-
2011
- 2011-08-23 JP JP2011181700A patent/JP2013044881A/en not_active Withdrawn
Cited By (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2015222191A (en) * | 2014-05-22 | 2015-12-10 | 学校法人慶應義塾 | Behavior detection system and method using infrared array sensor |
| JP2016045502A (en) * | 2014-08-19 | 2016-04-04 | キヤノン株式会社 | Information processing apparatus, control method thereof, and program |
| US10442189B2 (en) | 2014-08-19 | 2019-10-15 | Canon Kabushiki Kaisha | Printing apparatus, method for controlling printing apparatus, and recording medium |
| CN105277997A (en) * | 2015-11-11 | 2016-01-27 | 国家电网公司 | Signboard monitoring device |
| JP2018050175A (en) * | 2016-09-21 | 2018-03-29 | 京セラ株式会社 | Electronic apparatus |
| JP6091693B1 (en) * | 2016-09-21 | 2017-03-08 | 京セラ株式会社 | Electronics |
| CN107170381A (en) * | 2017-07-17 | 2017-09-15 | 合肥左成传媒科技有限公司 | A kind of teaching building corridor hangs drawing board with electronics |
| JP2020536740A (en) * | 2017-10-12 | 2020-12-17 | プレシテック ゲーエムベーハー ウント ツェーオー カーゲー | Equipment for laser machining systems, laser machining systems using it, and methods for adjusting the focal position of optics |
| CN107566869A (en) * | 2017-10-23 | 2018-01-09 | 四川长虹电器股份有限公司 | A kind of advertisement TV display brightness dynamic adjusting system and method |
| US11550048B2 (en) | 2019-05-20 | 2023-01-10 | Google Llc | Mobile device-based radar system for providing a multi-mode interface |
| JP2022530603A (en) * | 2019-06-17 | 2022-06-30 | グーグル エルエルシー | Mobile device-based radar system for applying different power modes to multimode interfaces |
| JP7163513B2 (en) | 2019-06-17 | 2022-10-31 | グーグル エルエルシー | A mobile device-based radar system for applying different power modes to multimode interfaces |
| US11740680B2 (en) | 2019-06-17 | 2023-08-29 | Google Llc | Mobile device-based radar system for applying different power modes to a multi-mode interface |
| JP7433397B2 (en) | 2019-06-17 | 2024-02-19 | グーグル エルエルシー | Mobile device-based radar system for applying different power modes to multimode interfaces |
| CN111951058A (en) * | 2020-08-24 | 2020-11-17 | 珠海格力电器股份有限公司 | Commodity attention analysis method, device and system based on electronic price tags |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP2013044881A (en) | Electronic advertising device | |
| CA3028003C (en) | Mirror having an integrated electronic display | |
| KR102040388B1 (en) | light intensity detection method, device and SMART terminal | |
| KR20180134236A (en) | Digital signage and operating method thereof | |
| CN103871377B (en) | The display packing of tool high light visuality and the electronic installation using this method | |
| US8350827B2 (en) | Display with infrared backlight source and multi-touch sensing function | |
| US9123285B2 (en) | Transparent display device and transparency adjustment method thereof | |
| CN104112425B (en) | Show equipment and its driving method | |
| US20030122810A1 (en) | Method and apparatus to adjust the brightness of a display screen | |
| CN101814272B (en) | Display device and brightness adjusting method thereof | |
| CN106594644A (en) | Solar monitoring street lamp and solar monitoring street lamp control method | |
| CN107968939B (en) | Display screen processing method and device, storage medium and electronic device | |
| KR101239992B1 (en) | Outdoor advertisement device using transparent lcd | |
| KR20120114624A (en) | Led signboard and advertising method of led signboard for vehicle | |
| KR101197982B1 (en) | Electronic shelf label apparatus for switching pagess of screen and method thereof | |
| KR102179298B1 (en) | Shadow-Compensated LED Electronic Board According To The Shadow And Solar Angle According To The Surrounding Environment | |
| KR20210122463A (en) | Digital sign board system and method for controlling the same | |
| US10552111B2 (en) | Control device | |
| US20150302825A1 (en) | Method and apparatus for displaying content | |
| AU2020287393B2 (en) | Portable dynamic display apparatus and system | |
| CN108694911A (en) | Temperature sensing module and temperature sensing method of display device and display device | |
| CN101019157A (en) | Electronic floor display with alerting | |
| CN106898331B (en) | Screen display adjusting method and device | |
| KR102390514B1 (en) | Method for managing managing power consumption of LED(light emitting diode) sign and LED sign for performing the method | |
| KR20160094056A (en) | Apparatus and method for display used as light |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20141104 |