JP2010015465A - Visitor management system - Google Patents
Visitor management system Download PDFInfo
- Publication number
- JP2010015465A JP2010015465A JP2008176231A JP2008176231A JP2010015465A JP 2010015465 A JP2010015465 A JP 2010015465A JP 2008176231 A JP2008176231 A JP 2008176231A JP 2008176231 A JP2008176231 A JP 2008176231A JP 2010015465 A JP2010015465 A JP 2010015465A
- Authority
- JP
- Japan
- Prior art keywords
- visitor
- visitors
- image data
- time
- management system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Image Analysis (AREA)
- Time Recorders, Dirve Recorders, Access Control (AREA)
- Image Processing (AREA)
Abstract
Description
本発明は、監視カメラで取得した動画像データの中から、動く物体を検出し、該動く物体の数を計測することによって、予め定めた領域への入場者数を算出する技術に関する。 The present invention relates to a technique for calculating the number of visitors to a predetermined area by detecting moving objects from moving image data acquired by a monitoring camera and measuring the number of moving objects.
近年、動画像のデジタル圧縮技術等に代表されるマルチメディア映像技術の発展に伴い、様々な分野で映像情報サービスが提供されており、さらなる高速化・高品質化が求められている。特に、一般生活環境における、人、物、車両などの移動している物体の移動状態を検出し、記録する用途など応用範囲の広い映像情報提供サービスの期待が大きい。 In recent years, with the development of multimedia video technology represented by moving image digital compression technology, video information services have been provided in various fields, and higher speed and higher quality have been demanded. In particular, there is a great expectation for a video information providing service with a wide range of applications such as use for detecting and recording the moving state of moving objects such as people, objects and vehicles in a general living environment.
ところで、小売業者の店舗等では、顧客入場者数や売り場間移動の動向、各売り場における滞在時間等は、収益環境を改善させるためにとても重要な情報と成り得るが、これらの情報を的確、かつ、容易に取得することは非常に困難な状況である。 By the way, at retailers' stores, etc., the number of customer visitors, trends in movement between sales floors, staying time at each sales floor, etc. can be very important information for improving the profit environment. And it is a very difficult situation to get easily.
他方、店舗や該店舗が備える駐車場等には防犯や安全のために監視カメラが設置され、当該監視カメラが撮影した映像は、例えば、不審人物、不審車両を発見することに役立てられ、または、店舗等で行われた万引き、強盗等の犯罪を事後的に検証するために役立てられている。 On the other hand, a surveillance camera is installed in a store or a parking lot provided in the store for the purpose of crime prevention or safety, and the video taken by the surveillance camera is used, for example, to find a suspicious person or a suspicious vehicle, or It is useful for ex-post verification of shoplifting, robbery and other crimes at stores.
しかしながら、店舗や該店舗の駐車場等に設置された監視カメラが取得した映像には、店舗等に入場した顧客に関する情報が含まれているにも関わらず、該顧客に関する情報を有効に、または、十分には活用されていないという問題点があった。 However, even though the video acquired by the surveillance camera installed in the store or the parking lot of the store contains information about the customer who entered the store, the information about the customer is effective, or There was a problem that it was not fully utilized.
そこで、本発明では、店舗や該店舗の駐車場等に設置された監視カメラから得られる画像データを利用して、顧客動向の重要な情報である店舗等への入場者の数を計測する入場者管理システムを提供することを目的とする。 Therefore, in the present invention, an entrance that measures the number of visitors to a store or the like, which is important information on customer trends, using image data obtained from a surveillance camera installed in a store or a parking lot of the store. It aims at providing a person management system.
本発明に係る入場者管理システムは、所定の場所を所定の時間間隔で撮影した画像データと共に、該所定の場所を撮影した時刻を出力する監視カメラを備えた入場者管理システムであって、前記時刻に関して連続する2つの前記画像データの所定領域部分について、対応する画素毎に比較した結果に基づいて、前記画像データの所定領域の中で動く物体であって、該所定領域に入場した入場者を検出する入場者検出手段と、前記時刻に関して連続する2つの前記画像データ間における、前記入場者が検出された位置関係に基づいて、前記入場者をそれぞれ識別する入場者識別手段と、前記入場者識別手段により識別される前記入場者の数を計測する入場者数計測手段と、を有することを特徴とする。 An attendee management system according to the present invention is an attendee management system including a monitoring camera that outputs a time when a predetermined place is photographed together with image data obtained by photographing a predetermined place at a predetermined time interval. A moving object in the predetermined area of the image data based on a result of comparison for each corresponding pixel with respect to two predetermined area portions of the image data that are continuous with respect to time, and a visitor who has entered the predetermined area A visitor detection means for detecting the visitor, and a visitor identification means for identifying each of the visitors based on a positional relationship between the two pieces of image data that are consecutive with respect to the time, wherein the visitor is detected. And a number of visitors counting means for measuring the number of visitors identified by the person identification means.
また、本発明に係る入場者管理システムの一形態において、前記入場者識別手段により識別された前記入場者毎に、該入場者が前記所定領域に入場した時刻を検出する入場時刻検出手段を有し、前記入場者数計測手段は、前記入場時刻検出手段により検出された前記入場した時刻に基づいて、時間帯毎に、前記入場者の数を計測することを特徴とする。 Further, in one form of the visitor management system according to the present invention, for each visitor identified by the visitor identification means, there is an entry time detection means for detecting the time when the visitor entered the predetermined area. The attendance number measuring means measures the number of visitors for each time zone based on the time of entry detected by the entrance time detection means.
また、本発明に係る入場者管理システムの一形態において、前記入場時刻検出手段は、前記入場者検出手段により前記入場者が最初に検出された時刻に基づいて、前記入場した時刻を検出することを特徴とする。 Moreover, in one form of the attendee management system according to the present invention, the entrance time detection means detects the time of entry based on the time when the attendee was first detected by the attendance detection means. It is characterized by.
また、本発明に係る入場者管理システムの一形態において、性別の特徴を表す所定の性別特徴データと前記入場者に対応する画像データとを比較した結果に基づいて、前記入場者識別手段により識別された前記入場者毎に、該入場者の性別を判定する性別判定手段を有し、前記入場者数計測手段は、前記性別判定手段により判定された前記性別に基づいて、該性別毎に、前記入場者の数を計測することを特徴とする。 Further, in one form of the visitor management system according to the present invention, identification by the visitor identification means is based on a result of comparing predetermined gender feature data representing a gender feature and image data corresponding to the visitor. The gender determining means for determining the gender of the visitors for each of the visitors, and the number of visitors counting means is based on the gender determined by the gender determining means for each gender. The number of visitors is measured.
また、本発明に係る入場者管理システムの一形態において、年齢の特徴を表す所定の年齢特徴データと前記入場者に対応する画像データとを比較した結果に基づいて、前記入場者識別手段により識別された前記入場者毎に、該入場者の年齢を判定する年齢判定手段を有し、前記入場者数計測手段は、前記年齢判定手段により判定された前記年齢に基づいて、該年齢毎に、前記入場者の数を計測することを特徴とする。 Further, in one form of the visitor management system according to the present invention, identification is performed by the visitor identification means based on a result of comparing predetermined age feature data representing an age feature and image data corresponding to the visitor. For each of the visitors, there is an age determination means for determining the age of the visitor, and the number of visitors counting means is based on the age determined by the age determination means for each age, The number of visitors is measured.
したがって、本発明では、店舗や該店舗の駐車場等に設置された監視カメラから得られる画像データを利用して、顧客動向の重要な情報である店舗等への入場者の数を計測する入場者管理システムを提供することができる。 Therefore, in the present invention, an entrance that measures the number of visitors to a store or the like, which is important information on customer trends, using image data obtained from a surveillance camera installed in a store or a parking lot of the store. A person management system can be provided.
本発明では、店舗や該店舗の駐車場等に設置された監視カメラから得られる画像データを利用して、顧客動向の重要な情報である店舗等への入場者の数を計測する入場者管理システムを提供することができる。 In the present invention, visitor management that measures the number of visitors to a store or the like, which is important information on customer trends, using image data obtained from a monitor camera installed in a store or a parking lot of the store. A system can be provided.
図面を参照しながら、本発明を実施するための最良の形態について説明する。
<本実施の形態に係る入場者管理システムの動作原理>
ここでは、図1〜3を用いて、本実施の形態に係る入場者管理システム100の動作原理について説明する。はじめに、図1、2を用いて、入場者管理システム100の概要を説明することとするが、図1は入場者管理システム100の設置例を示す図であり、図2は入場者管理システム100の撮影した画像データの一例を示す図である。
The best mode for carrying out the present invention will be described with reference to the drawings.
<Operation Principle of Visitor Management System According to the Present Embodiment>
Here, the operation principle of the
図1で示すように、入場者管理システム100では、店舗300の天井に設置した監視カメラ250によって店舗300内の全体を撮影するものであり、店舗300の入場口320から入場する入場者310が監視カメラ250によって撮影される。図1では、監視カメラ250は1つのみ図示しているが、監視カメラ250は複数であっても良い。また、監視カメラ250は天井の真ん中部分に設置されるように図示しているが、監視カメラ250の設置場所は天井のみならず、店舗300の壁(側面)とする形態としても良く、天井の端とする形態としても良い。また、監視カメラ250は、平面レンズを用いて撮影する形態としても良く、(360°の)魚眼レンズを用いて撮影する形態としても良い。
As shown in FIG. 1, in the
そして、入場者管理システム100は、監視カメラ250が撮影した動画像データに対して、後述する所定の情報処理を行うことによって動く物体を検出した上で、この動く物体を店舗300への入場者と判定する。
The
通常、店舗300への入場者は1人ではなく、複数人である場合が多いと考えられるが、この場合、入場者管理システム100は、監視カメラ250が撮影した動画像データに対して、上記所定の情報処理で検出された複数の入場者を、入場者毎に識別する処理を行う。図2で示すように、例えば、入場者310が3人いた場合には、3人の入場者を動画像データ上でそれぞれ識別する。こういった処理により、入場者管理ステム100は、この識別された入場者の数を計測(計数)することで、店舗300への入場者数を取得することができる。また、監視カメラ250の撮影した画像データ内を、例えば、エリアA330、エリアB340などと異なる領域を設定して、エリアA330には1人の入場者310が存在し、エリアB340には2人の入場者310が存在すると、設定した領域毎の入場者数を計測することもできる。
Usually, it is considered that the number of visitors to the
また、この入場者の数には、店舗300に現に存在する入場者310のみでなく、店舗300に現在は存在しないものの過去に存在した入場者310を含めて計測することで、過去からの入場者数を取得することができる。
また、入場者管理システム100は、店舗300に入場した入場者310毎に、入場時刻を検出し、また、性別、年齢を判定することで、時間帯毎、性別毎、年齢毎の入場者数を取得することができる。
In addition, the number of visitors includes not only the
In addition, the
次に、図3を用いて、入場者管理システム100の動作原理を説明することとするが、図3は入場者管理システム100の動作原理を説明するための図である。図3で示すように、入場者管理システム100は、入場者検出手段110、入場者識別手段120、入場時刻検出手段130、性別判定手段140、年齢判定手段150、入場者数計測手段160、記憶装置240、監視カメラ250を有する。
Next, the operating principle of the
監視カメラ250は、先に述べたように、例えば、店舗300の天井又は壁に設置され、店舗300内を撮影するカメラである。監視カメラ250は、予め定められる一方向を継続して撮影するものであるが、レンズに関しては、平面レンズを備える形態でも良く、魚眼レンズ(例えば、360°の魚眼レンズ)を備え、店舗300内を撮影する形態としても良い。そして、監視カメラ250は、所定の時間間隔で、撮影した画像データと撮影時刻とを出力し、出力した画像データと撮影時刻は記憶装置240に記憶される。ただし、入場者管理システム100は、当該画像データと撮影時刻をRAM230等のワークメモリに一旦記憶し、該記憶したデータに対しリアルタイムで後述する情報処理を行う形態としても良い。また、監視カメラ250は一台であっても複数台であっても良く、複数台である場合には、各監視カメラ250が撮影した画像データの重なる部分を認識し、この重なる部分で複数の画像データを繋げて、1つの画像データとして取り扱うことで、後述の情報処理を行うことする。
As described above, the
記憶装置240は、監視カメラ250の撮影した画像データを記憶する装置であり、例えば、HDD(Hard Disc Drive)のような大容量の記憶装置である。監視カメラ250により撮影された画像データはMPEG(Moving Picture Experts Group)技術によりデータ圧縮され、圧縮された画像データはHDD240に記録されるものとし、以下で説明する各手段は、特段の断りのない限り、HDD240に記録された画像データに対して所定の情報処理を行うものとする。
The
入場者検出手段110は、監視カメラ250が撮影した動画像データに基づいて、動く物体を検出し、該動く物体を店舗300に入場した入場者310として判定する、つまり、入場者310を検出する情報処理を行う。具体的には、監視カメラ250は所定の時間間隔で(静止)画像データを出力するので、入場者検出手段110は、撮影時刻が連続する2つの画像データに関して、相対応する画素毎に画素値の差分を取り、該差分がゼロではない画素が有れば、この画素位置を動く物体として検出する。特に、本実施の形態においては、各画素の明度に着目して画素毎の差分を取り、動く物体を検出する。そして、画像データ内での入場者310の大きさを定めた画素範囲(以下、ウィンドウ)を考えた場合、上記の動く物体が検出された画素位置にはウィンドウで示す大きさの入場者310が存在すると認識(判定)する。また、ウィンドウの大きさは、監視カメラ250が撮影した画像データの中で、ユーザの指定により自由に定めることができ(画素数単位で指定する)、例えば、(縦20画素、横10画素)の画素範囲を指定して定めることができる。
The visitor detection means 110 detects a moving object based on the moving image data captured by the
また、入場者検出手段110は、監視カメラ250が撮影した画像データの中で、予め定めた所定領域(例えば、図2中のエリアA330、エリアB340毎)を対象として、上記の説明と同じ処理、つまり、所定領域の中で動く物体を検出し、入場者310と判定する処理を行う。ここで、所定領域は、監視カメラ250が撮影した画像データの中で、ユーザの指定により自由に定めることができ(画素位置と画素範囲とで指定する)、所定領域は1つでも複数指定されても良い。また、監視カメラ250の撮影した画像データ全体を所定領域とすることもできる。こうすることで、店舗内300の所定領域への入場者数を計測することができる。
Further, the visitor detection means 110 performs the same processing as described above for a predetermined area (for example, for each of the areas A330 and B340 in FIG. 2) in the image data captured by the
入場者識別手段120は、入場者検出手段110により検出された入場者310が複数いる場合に、入場者毎に該入場者310を識別する。具体的には、上記ウィンドウの存在する画素位置と、該画素位置にあるウィンドウを識別するための識別情報(以下、ウィンドウID)とを関連付けて記憶装置240(RAM230でも良い)に記憶する。そして、撮影時刻が連続する2つの画像データに関して、撮影時刻の早い画像データにおいてウィンドウの存在する画素位置(第1の画素位置)と、次の撮影時刻の画像データにおいてウィンドウの存在する画素位置(第2の画素位置)とが適当な位置関係に有る場合に、第1の画素位置に関するウィンドウIDを第2の画素位置に関するウィンドウIDとする。ここで、適当な位置関係は、第1の画素位置と第2の画素位置との距離が所定の距離内である関係であっても良く、複数の第2の画素位置が有る場合に、第1の画素位置に最も近い第2の画素位置としても良い。つまり、撮影時刻が連続する2つの画像データどうしで、同じ入場者310を識別するという目的の範囲内において適宜定めることができるものとする。
The
入場時刻検出手段130は、入場者310が店舗300に入場した時刻を検出し、入場者310毎に、入場した時刻を記憶装置240(RAM230でも良い)に記憶する。具体的には、入場時刻検出手段130は、入場者310が店舗300に入場した時刻を検出し、入場者310に対応するウィンドウIDと関連付けて、該入場した時刻を記憶装置240(RAM230でも良い)に記録する。
また、入場者時刻検出手段130の一形態では、入場者検出手段110により各入場者310(動く物体)が最初に検出された時刻を入場時刻とし、この最初に検出された時刻は、動く物体が最初に検出された画像データの撮影された時刻である。
The entry time detection means 130 detects the time when the
Further, in one form of the visitor time detection means 130, the time when each visitor 310 (moving object) is first detected by the visitor detection means 110 is set as the entry time, and this first detected time is the moving object. Is the time when the first detected image data was taken.
そして、入場時刻検出手段130は、監視カメラ250が撮影した画像データの中で、予め定めた所定領域を対象として、上記の説明と同じ処理、つまり、所定領域に入場した時刻を検出する処理を行い、それは、所定領域で各入場者310が最初に検出された時刻を入場時刻とする処理であっても良い。
Then, the entrance time detection means 130 performs the same process as described above, that is, the process of detecting the time of entering the predetermined area, for a predetermined area in the image data captured by the
性別判定手段140は、入場者310毎に性別を判定し、各入場者310に対応するウィンドウIDと関連付けて、該性別を記憶装置240(RAM230でも良い)に記録する。具体的には、性別判定手段140は、予め定めた性別毎の特徴データと上記ウィンドウ部分の画像データとをパターンマッチングすることにより、入場者310の性別を判定する。ここで、性別毎の特徴データは、頭髪部分のボリュームに関するデータ、服装部分の色彩に関するデータ、唇部分の色彩に関するデータ等であり、また、性別をパターンマッチングにより判定するという目的に合致する限り、性別を特徴付ける他のデータであっても良い。
The
また、頭髪部分のボリュームに関するデータを用いる場合、入場者310の頭部分を検出する前処理を行った後、該検出された頭部分とパターンマッチングさせ、服装部分の色彩に関するデータを用いる場合、入場者310の胴体部分を検出する前処理を行った後、該検出された胴体部分とパターンマッチングさせ、唇部分の色彩に関するデータを用いる場合、入場者310の顔部分を検出する前処理を行った後、該検出された顔部分とパターンマッチングさせる形態としても良い。そして、性別毎の特徴データを複数用いてパターンマッチングを行う場合のデータ間の重み付けは適宜定めることができるものとする。
In addition, when using data related to the volume of the hair part, after performing preprocessing for detecting the head part of the
年齢判定手段150は、入場者310毎に年齢を判定し、各入場者310に対応するウィンドウIDと関連付けて、該年齢を記憶装置240(RAM230でも良い)に記録する。具体的には、年齢判定手段150は、予め定めた年齢毎の特徴データと上記ウィンドウ部分の画像データとをパターンマッチングすることにより、入場者310の年齢を判定する。ここで、年齢毎の特徴データは、身長と体型のバランスに関するデータ、等身比率に関するデータ、顔部分の皮膚のつやに関するデータ、皺の量に関するデータ等であり、また、年齢をパターンマッチングにより判定するという目的に合致する限り、年齢を特徴付ける他のデータであっても良い。
The age determination means 150 determines the age for each
また、顔部分の皮膚のつやに関するデータ及び皺の量に関するデータを用いる場合、入場者310の顔部分を検出する前処理を行った後、該検出された顔部分とパターンマッチングさせる形態としても良い。そして、年齢毎の特徴データを複数用いてパターンマッチングを行う場合のデータ間の重み付けは適宜定めることができるものとする。また、上記でいう年齢は、年齢そのものであっても良く、年齢に一定の幅を持たせた年代(例えば、子供、年齢ゾーン)の形態でも良い。
Further, in the case of using data relating to the skin gloss of the face portion and data relating to the amount of wrinkles, a pre-processing for detecting the face portion of the
入場者数計測手段160は、入場者識別手段120により識別された入場者310の数を計測することによって、店舗300への入場者数を取得するが、具体的には、ウィンドウIDが付与された数を計測し、店舗300への入場者数を取得する。
The visitor number measuring means 160 acquires the number of visitors to the
また、入場者数計測手段160は、入場時刻検出手段130により検出された入場者310毎の入場時刻に基づいて、時間帯毎に、入場者識別手段120により識別された入場者310の数を計測し、店舗300への入場者数を取得する。ここでも、上記と同様に、ウィンドウIDが付与された数を時間帯毎に計測する。時間帯毎には、時間単位、日単位、週単位、月単位等の概念を含み、ここに挙げない他の時間の概念も含むものとする。
Also, the visitor number measuring means 160 calculates the number of
また、入場者数計測手段160は、性別判定手段140により判定した性別毎に、入場者識別手段120により識別された入場者310の数を計測することによって、性別毎に、店舗300への入場者数を取得する。ここでも、上記と同様に、ウィンドウIDが付与された数を性別毎に計測する。
Further, the visitor number measuring means 160 measures the number of
また、入場者数計測手段160は、年齢判定手段150により判定した年齢毎に、入場者識別手段120により識別された入場者310の数を計測することによって、年齢毎に、店舗300への入場者数を取得する。ここでも、上記と同様に、ウィンドウIDが付与された数を年齢毎に計測する。また、年齢毎には、年代毎、子供と大人毎、年齢帯毎も含める。
そして、上記処理を組み合わせて、具体的には、時間帯毎、性別毎、年齢毎の切り口を組み合わせて、店舗300への入場者数を取得することができる。
In addition, the visitor number measurement means 160 counts the number of
The number of visitors to the
上で説明した処理を行うことで、本発明に係る入場者管理システム100は、店舗や該店舗の駐車場等に設置された監視カメラから得られる画像データを利用して、顧客動向の重要な情報である店舗等への入場者の数を計測することができる。また、この入場者の数は、時間帯別、性別、年齢別の様々な分類で計測することができる。
By performing the processing described above, the
<本実施の形態に係る入場者管理システムのハードウェア構成>
図4を用いて、本実施の形態に係る入場者管理システム100のハードウェア構成について説明する。図4は、本実施の形態に係る入場者管理システム100のハードウェア構成の一例を示す図である。
入場者管理システム100は、CPU(Central Processing Unit)210、ROM(Read-Only Memory)220、RAM(Random Access Memory)230、HDD240、監視カメラ250、表示装置260、通信I/F(InterFace)270を有する。
<Hardware Configuration of Visitor Management System According to this Embodiment>
The hardware configuration of the
The
CPU210は、ROM220に記憶されたプログラムを実行する装置で、RAM230に展開(ロード)されたデータを、プログラムの命令に従って演算処理し、入場者管理システム100全体を制御する。ROM220は、CPU210が実行するプログラムやデータを記憶している。RAM230は、CPU210でROM220に記憶されたプログラムを実行する際に、実行するプログラムやデータが展開(ロード)され、演算の間、演算データを一時的に保持する。本実施の形態において、リアルタイム処理を行う場合、監視カメラ250により撮影された画像データは、一時的にRAM230に保存される形態としても良い。
The
HDD240は、基本ソフトウェアであるOS(Operating System)、本実施の形態に係るアプリケーションプログラム等を、関連するデータとともに記憶する装置である。本実施の基本的形態として、監視カメラ250により撮影された画像データは、MPEG技術によるデータ圧縮後、HDD240に一旦記録され、該記録された画像データを各手段により画像処理する。また、入場者管理システム100の備える各手段により付与、判定、検出されるウィンドウIDとそれに対応する入場時刻、性別、年齢は、HDD240に記録され、また、HDD240から読み出される。
The
監視カメラ250は、入場者管理システム100の動作原理で説明した通りである。
The
表示装置260は、ハードキーによるキースイッチ、LCD(Liquid Crystal Display)等から構成され、入場者管理システム100が有する機能をユーザが利用する(例えば、処理結果を表示する)際や、各種設定を行う際のユーザインタフェースとして機能する装置である。
The
通信I/F270は、インターネットやLAN(Local Area Network)等の通信ネットワークを介して接続された他の通信制御機能を備えた周辺機器と情報(データ)の授受を行う際のインタフェースである。本実施の形態においては、通信I/F270を介して接続されるPC(Personal Computer)端末から、入場者管理システム100の処理開始、処理内容(所定領域の指定、入場者数を計測する際のデータ属性の指定等)の指示を受け付けたり、入場者管理システム100の処理結果を通知する形態であっても良い。
The communication I /
また、入場者管理システム100における各手段は、CPU210が、ROM220又はHDD240に記憶された各手段に対応するプログラムを実行することにより実現される形態としても良く、該各手段をハードウェアとして実現する形態としても良い。
Further, each means in the
<本実施の形態に係る入場者管理システムによる処理例>
図5を用いて、本実施の形態に係る入場者管理システム100による処理例を説明する。図5は、本実施の形態に係る入場者管理システム100による処理の一例を示すフローチャートである。
ここでは、図1で示すように、店舗300の天井に設置した監視カメラ250により撮影された画像データに基づいて、店舗300への入場者310の数を計測する処理を行うものとする。
<Example of processing by the visitor management system according to the present embodiment>
An example of processing performed by the
Here, as shown in FIG. 1, it is assumed that processing for measuring the number of
S10で入場者管理システム100が、監視カメラ250の撮影した画像データに基づき、店舗300への入場者数を計測する処理を開始する。該処理の開始は、入場者管理システム100の電源をオンにすることで開始するとしても良いし、ユーザによる開始指示を受け付けたことを以て開始するとしても良い。
In S10, the
S20で監視カメラ250が、店舗300内を所定の時間間隔で撮影した画像データを撮影時刻と共に出力し、出力された画像データはMPEG技術等によりデータ圧縮されて、HDD240に記録される。
In S20, the
S30で入場者検出手段110が、HDD240に記録された画像データに基づいて、該画像データ内の所定領域の中で動く物体を検出し、該動く物体を店舗300への入場者310と判定し、該動く物体が検出された画素位置にウィンドウの大きさの入場者310が存在すると認識する。ここで、所定領域は、ユーザによって指定することができ、1つ指定されても複数指定されても良く、また、画像データ全体を所定領域としても良い。
In S <b> 30, the visitor detection unit 110 detects a moving object in a predetermined area in the image data based on the image data recorded in the
S40で、図2で示すように、入場者検出手段110により検出された入場者310が店舗300内に複数存在する場合、入場者識別手段120が、HDD240に記録された画像データに基づいて、各入場者310に対応するウィンドウにそれぞれウィンドウIDを付与し、HDD240に記録する。ウィンドウIDは新たに付与される毎に、HDD240に記録される。入場者管理システム100は、この処理により(ウィンドウIDにより)、それぞれの入場者310を識別している。
In S40, as shown in FIG. 2, when there are a plurality of
S50で入場時刻検出手段130が、入場者識別手段120により識別される入場者310毎に、店舗300への入場時刻を検出し、入場者310のウィンドウIDと対応付けてHDD240に記録する。ここで、入場時刻検出手段130は、入場者検出手段110により入場者310が最初に検出された時刻を店舗300への入場時刻とする。入場者管理システム100は、この処理により、時間帯毎の入場者数を計測することができる。
In S <b> 50, the entry
S60で性別判定手段140が、HDD240に記録された画像データ内の各入場者310に対応する画素位置にあるウィンドウ部分と、性別の特徴を表す所定の性別特徴データとのパターンマッチング処理を行うことで、各入場者310の性別を判定し、該判定された性別を各入場者310に対応するウィンドウIDと対応付けてHDD240に記録する。入場者管理システム100は、この処理により、性別毎の入場者数を計測することができる。
In S60, the
S70で年齢判定手段150が、HDD240に記録された画像データ内の各入場者310に対応する画素位置にあるウィンドウ部分と、年齢別の特徴を表す所定の年齢特徴データとのパターンマッチング処理を行うことで、各入場者310の年齢を判定し、該判定された年齢を各入場者310に対応するウィンドウIDと対応付けてHDD240に記録する。入場者管理システム100は、この処理により、年齢毎の入場者数を計測することができる。
In S <b> 70, the
S80で入場者数計測手段160が、入場者識別手段120により付与されたウィンドウIDの数を計測することで、店舗300への入場者数を取得する。そして、入場者数計測手段160は、HDD240にウィンドウIDと関連付けて記録された入場時刻、性別、年齢毎にウィンドウIDの数を計測し、時間帯毎、性別毎、年齢毎の入場者数を取得する。
In S <b> 80, the visitor number measuring means 160 measures the number of window IDs given by the visitor identification means 120, thereby acquiring the number of visitors to the
S90で入場者管理システム100が、監視カメラ250の撮影した画像データに基づき、店舗300への入場者数を計測する処理を終了する。該処理の終了は、入場者管理システム100の電源をオフにすることで終了するとしても良いし、ユーザによる終了指示を受け付けたことを以て終了するとしても良い。
In S90, the
(総括)
本発明では、店舗や該店舗の駐車場等に設置された監視カメラから得られる画像データを利用して、顧客動向の重要な情報である店舗等への入場者の数を計測する入場者管理システムを提供することができる。
以上、本発明の実施の形態について詳述したが、本発明は係る特定の実施の形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲において、種々の変形・変更が可能である。
(Summary)
In the present invention, visitor management that measures the number of visitors to a store or the like, which is important information on customer trends, using image data obtained from a monitor camera installed in a store or a parking lot of the store. A system can be provided.
Although the embodiment of the present invention has been described in detail above, the present invention is not limited to the specific embodiment, and various modifications are possible within the scope of the gist of the present invention described in the claims.・ Change is possible.
100 入場者管理システム
110 入場者検出手段
120 入場者識別手段
130 入場時刻検出手段
140 性別判定手段
150 年齢判定手段
160 入場者数計測手段
210 CPU
220 ROM
230 RAM
240 HDD
250 監視カメラ
260 表示装置
270 通信I/F
300 店舗
310 入場者
320 入場口
330 エリアA
340 エリアB
DESCRIPTION OF
220 ROM
230 RAM
240 HDD
250
300
340 Area B
Claims (5)
前記時刻に関して連続する2つの前記画像データの所定領域部分について、対応する画素毎に比較した結果に基づいて、前記画像データの所定領域の中で動く物体であって、該所定領域に入場した入場者を検出する入場者検出手段と、
前記時刻に関して連続する2つの前記画像データ間における、前記入場者が検出された位置関係に基づいて、前記入場者をそれぞれ識別する入場者識別手段と、
前記入場者識別手段により識別される前記入場者の数を計測する入場者数計測手段と、を有することを特徴とする入場者管理システム。 A visitor management system provided with a monitoring camera that outputs the time at which the predetermined place is photographed together with image data obtained by photographing the predetermined place at predetermined time intervals,
An object that moves in the predetermined area of the image data based on a result of comparison for each corresponding pixel with respect to a predetermined area portion of the two image data that is continuous with respect to the time, and that has entered the predetermined area A visitor detection means for detecting a person,
Visitor identification means for identifying each of the visitors based on the positional relationship between the two detected image data with respect to the time and where the visitors are detected;
A visitor management system comprising: a visitor number measuring means for measuring the number of the visitors identified by the visitor identifying means.
前記入場者数計測手段は、前記入場時刻検出手段により検出された前記入場した時刻に基づいて、時間帯毎に、前記入場者の数を計測することを特徴とする請求項1に記載の入場者管理システム。 For each visitor identified by the visitor identification means, it has an entry time detection means for detecting the time when the visitor entered the predetermined area,
2. The entrance according to claim 1, wherein the number of visitors counting unit measures the number of visitors for each time zone based on the time of entrance detected by the entrance time detection unit. Management system.
前記入場者数計測手段は、前記性別判定手段により判定された前記性別に基づいて、該性別毎に、前記入場者の数を計測することを特徴とする請求項1乃至3の何れか一に記載の入場者管理システム。 Based on the result of comparing predetermined gender feature data representing a gender feature and image data corresponding to the visitor, the gender of the visitor is determined for each visitor identified by the visitor identification means. Gender determination means to
4. The number of visitors according to any one of claims 1 to 3, wherein the number-of-visitors measuring unit measures the number of visitors for each gender based on the gender determined by the gender determining unit. The attendee management system described.
前記入場者数計測手段は、前記年齢判定手段により判定された前記年齢に基づいて、該年齢毎に、前記入場者の数を計測することを特徴とする請求項1乃至4の何れか一に記載の入場者管理システム。 The age of the visitor is determined for each visitor identified by the visitor identification means based on the result of comparing predetermined age feature data representing the feature of age and image data corresponding to the visitor. Has an age determination means to
5. The number of visitors according to any one of claims 1 to 4, wherein the number-of-visitors measuring unit measures the number of visitors for each age based on the age determined by the age determining unit. The attendee management system described.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008176231A JP2010015465A (en) | 2008-07-04 | 2008-07-04 | Visitor management system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2008176231A JP2010015465A (en) | 2008-07-04 | 2008-07-04 | Visitor management system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2010015465A true JP2010015465A (en) | 2010-01-21 |
Family
ID=41701519
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2008176231A Pending JP2010015465A (en) | 2008-07-04 | 2008-07-04 | Visitor management system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2010015465A (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10095931B2 (en) | 2016-03-25 | 2018-10-09 | Fuji Xerox Co., Ltd. | Store-entering person attribute extraction apparatus, store-entering person attribute extraction method, and non-transitory computer readable medium |
CN111932585A (en) * | 2020-07-28 | 2020-11-13 | 浙江新再灵科技股份有限公司 | Intelligent elevator room trailing behavior identification method based on big data |
-
2008
- 2008-07-04 JP JP2008176231A patent/JP2010015465A/en active Pending
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10095931B2 (en) | 2016-03-25 | 2018-10-09 | Fuji Xerox Co., Ltd. | Store-entering person attribute extraction apparatus, store-entering person attribute extraction method, and non-transitory computer readable medium |
CN111932585A (en) * | 2020-07-28 | 2020-11-13 | 浙江新再灵科技股份有限公司 | Intelligent elevator room trailing behavior identification method based on big data |
CN111932585B (en) * | 2020-07-28 | 2022-10-14 | 浙江新再灵科技股份有限公司 | Intelligent elevator room trailing behavior identification method based on big data |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11321592B2 (en) | Method and system for tracking an object-of-interest without any required tracking tag theron | |
JP4984728B2 (en) | Subject collation device and subject collation method | |
US8159537B2 (en) | Video surveillance equipment and video surveillance system | |
US8295545B2 (en) | System and method for model based people counting | |
JP5390322B2 (en) | Image processing apparatus and image processing method | |
US7668345B2 (en) | Image processing apparatus, image processing system and recording medium for programs therefor | |
JP2018116692A (en) | Human flow analysis apparatus and system | |
WO2018096787A1 (en) | Person's behavior monitoring device and person's behavior monitoring system | |
JPWO2017122258A1 (en) | Congestion status monitoring system and congestion status monitoring method | |
JP6590609B2 (en) | Image analysis apparatus and image analysis method | |
KR20180086048A (en) | Camera and imgae processing method thereof | |
US9245207B2 (en) | Differentiating abandoned and removed object using temporal edge information | |
JP6749498B2 (en) | Imaging target tracking device and imaging target tracking method | |
TWI671707B (en) | Image analysis method, electronic system and non-transitory computer-readable recording medium | |
JP2010015466A (en) | Visitor management system | |
JP5865584B2 (en) | Specific person detection system and detection method | |
JP4985742B2 (en) | Imaging system, method and program | |
JP2010015465A (en) | Visitor management system | |
JP2012212238A (en) | Article detection device and stationary-person detection device | |
WO2017135310A1 (en) | Passing number count device, passing number count method, program, and storage medium | |
JP2010015467A (en) | Visitor management system | |
JP5618594B2 (en) | Face image matching device | |
JP2020095651A (en) | Productivity evaluation system, productivity evaluation device, productivity evaluation method, and program | |
JP7329967B2 (en) | IMAGE PROCESSING APPARATUS, SYSTEM, IMAGE PROCESSING APPARATUS CONTROL METHOD, AND PROGRAM | |
JP5618366B2 (en) | Monitoring system, monitoring device, monitoring method, and program |