JP5726596B2 - 画像監視装置 - Google Patents
画像監視装置 Download PDFInfo
- Publication number
- JP5726596B2 JP5726596B2 JP2011076330A JP2011076330A JP5726596B2 JP 5726596 B2 JP5726596 B2 JP 5726596B2 JP 2011076330 A JP2011076330 A JP 2011076330A JP 2011076330 A JP2011076330 A JP 2011076330A JP 5726596 B2 JP5726596 B2 JP 5726596B2
- Authority
- JP
- Japan
- Prior art keywords
- face
- image
- suspicious person
- head region
- monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012806 monitoring device Methods 0.000 title claims description 14
- 238000012544 monitoring process Methods 0.000 claims description 100
- 230000001815 facial effect Effects 0.000 claims description 63
- 238000001514 detection method Methods 0.000 claims description 43
- 238000000605 extraction Methods 0.000 claims description 24
- 239000000284 extract Substances 0.000 claims description 13
- 238000003384 imaging method Methods 0.000 claims description 9
- 210000003128 head Anatomy 0.000 description 165
- 238000000034 method Methods 0.000 description 25
- 238000012545 processing Methods 0.000 description 12
- 238000004891 communication Methods 0.000 description 11
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 230000008921 facial expression Effects 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 238000002474 experimental method Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000001788 irregular Effects 0.000 description 1
- 238000012423 maintenance Methods 0.000 description 1
- 230000000873 masking effect Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
Landscapes
- Image Processing (AREA)
- Closed-Circuit Television Systems (AREA)
- Alarm Systems (AREA)
- Image Analysis (AREA)
Description
また、特許文献2には、人相を隠した状態であることの一例として、サングラス、マスク、あるいは手などで顔の一部を隠蔽していることや、フルフェイスのヘルメット等をかぶっていることを検出する監視装置について開示されている。特許文献2は、撮像画像から目鼻口といった顔の特徴部位を認識してその位置関係により顔を隠した状態か否かを判定し、顔を隠した人物(不審者)が検出されると店員に報知を行う。
本実施形態では、監視区域(監視空間)として金融機関や商店などの事務所エリアにおける重要監視物周辺を監視する場合を例示するが、本発明の範囲はこれに限定されるものではなく、事務所室内全域や街頭などを監視区域として監視するよう用いられてよい。
図1は、重要監視物として金庫など内部に収納空間を有した保管庫2及び画像監視装置3が設置された監視区域を模式的に示している。図1に示すように、本実施形態の監視システム1は、監視区域の床面に固定設置された保管庫2の上部に載置される監視装置3と、遠隔の監視センタ5とを、通信回線網4を介して接続して構成されている。
なお、監視カメラ31は画像監視装置3の筐体に内蔵される例に限らず、少なくとも監視区域内の人物が撮像可能に保管庫2の上部空間や背後壁面などに別途監視カメラが設置され、画像監視装置3と接続される構成としてもよい。また、画像監視装置3も、保管庫2の上部に載置される例に限らず、保管庫2の上部空間や背後壁面などに設定されてよい。
そして、不審者が存在することが判定されると、画像監視装置3は、遠隔の監視センタ5に監視区域で非常事態が発生していることを示す非常信号を送信するとともに、不審者の検出に用いた画像データを監視センタ5に送信する。
次に、図2を用いて画像監視装置3の構成について説明する。図2は、画像監視装置3の構成を示すブロック図である。
画像監視装置3は、監視センタ5と通信可能に通信回線網4と接続されて、保管庫2の上部に固定載置されている。
不審者画像は、制御部34による判定処理により現在の画像データに含まれる人物が不審者と判定された際にこの画像データを記憶するものである。
B. Triggs, "Histograms of oriented gradients for
human detection", Proc. of IEEE Conference on Computer Vision and Pattern
Recognition (CVPR), pp.886-893, 2005などがある。
また、直前フレームの頭部領域と対応付けがなされない場合、現フレームで抽出された頭部領域は監視区域に新規に出現した頭部領域として判定される。新規に出現した頭部領域は、新規な頭部領域として記憶部33のトラッキング情報に記憶される。
顔特徴判定部344は、入力画像において、抽出された頭部領域を複数の矩形領域に分割し、各分割矩形領域毎、及び隣接する分割矩形領域を統合したブロック毎に顔特徴情報に記憶した顔画像の輝度パターンとのパターンマッチングを行う。そして、類似度が高く算出された輝度パターンの属性から、固有ラベルが付された頭部領域毎に何れの属性の顔画像が含まれているか又は顔画像が含まれていないかの識別結果を出力する。
顔特徴判定部344の識別結果は、現在周期を識別可能な周期番号又は時刻と対応づけられて、頭部領域の固有ラベルごとに記憶部33の判定履歴情報に記憶される。
Boosted Cascade of Simple Features", IEEE CVPR, vol.1, pp.511-518, 2001に開示されている。
以上のように構成された監視システム1について、図面を参照してその動作を説明する。まず、図3を用いて画像監視装置3の処理概要について説明する。図3は画像監視装置3による不審者の監視処理を模式的に示した図である。
ここで、図3は、周期Tにおいて、変動領域11、12として抽出された人物が暗く撮像されている例を示している。この場合において、顔特徴判定部344による処理では、頭部領域内の画像情報が不足し、目鼻口など顔の特徴情報が抽出できないおそれがある。図3の例では、頭部領域f1、f2の何れについても目鼻口など顔の特徴情報を有さない(素顔でない)と識別された場合を示している。顔特徴判定部344の識別結果は、記憶部33の判定履歴情報に記憶される。
そして、不審者検出部345は、過去nフレームの入力画像について、対応する頭部領域が判定閾値(例えば2)以上「素顔」と判定されていれば、当該頭部領域は現フレームにおいては不審者でないことを判定する。他方、過去nフレームの入力画像について、対応する頭部領域が判定閾値以上「素顔」と判定されていなければ、当該頭部領域に含まれた顔画像は不審者であると判定し、通報処理を行う。
したがって、図3の例では、過去フレームの判定履歴情報から頭部領域f1については不審者でないと判定され、頭部領域f2については不審者の顔画像と判定されることとなる。
画像監視装置3は、所定周期(例えば0.2秒周期、すなわち5fps(フレーム/秒))ごとに監視カメラ31が撮像した画像データの出力を受け付けて制御部34に入力する(ステップST1)。変動領域抽出部341は、入力画像と記憶部33の基準画像との差分を算出して変動領域を抽出する(ステップST2)。変動領域が抽出できなければ一連の処理を終了し、次回の実行タイミングにてステップST1より処理が実行される。
次に、図4のステップST6における不審者検出処理について図5を参照して説明する。図5は不審者検出部345による不審者検出処理のフローチャートである。図5において、不審者検出部345は、現フレームの頭部領域の何れかに着目し、顔特徴判定部344によりこの頭部領域が人体の頭部と識別されているか、即ち何れかの属性の顔画像が含まれていると識別されたかを調べる(ステップST21)。
不審者検出部345は、ステップST27において、全ての頭部領域について着目したか判定し、未だ着目していない頭部領域が存在すれば(ステップST27−No)、当該頭部領域に注目して処理が実行される。全ての頭部領域について着目した処理が終了すると(ステップST27−Yes)、かかる不審者検出処理を終了する。
これにより、監視区域において、正当な利用者が逆光位置やダウンライト下、又は陰となる位置に移動した場合、若しくは俯き動作を行った場合など、偶々現フレームにおいて素顔であることが判定できない場合であっても、過去に判定された素顔らしさを用いて、一時的に顔の情報が取得できない利用者を不審者であると誤判定することを防止し、顔を隠蔽した不審者の判定精度を向上させることが可能となる。
以下、本実施形態の変形例について上述した実施形態と異なる部分を説明する。
2 保管庫
3 画像監視装置
31 監視カメラ
32 通信部
33 記憶部
34 制御部
341変動領域抽出部
342頭部抽出部
343追跡部
344顔特徴判定部
345不審者検出部
4 通信回線網
5 監視センタ
51 センタ装置
52 ディスプレイ
11、12 変動領域
f1、f2 頭部領域
Claims (2)
- 監視空間において顔を隠蔽した不審者を検出する画像監視装置であって、
周期的に前記監視空間を撮像して監視画像を取得する撮像部と、
予め人物の顔特徴情報を記憶する記憶部と、
前記監視画像から人物の頭部に相当する入力頭部領域を抽出する頭部抽出部と、
前記入力頭部領域が顔の特徴情報を有しているか前記顔特徴情報を用いて判定する顔特徴判定部と、
前記周期的に取得される複数の監視画像間において前記入力頭部領域を追跡して対応付けを行う追跡部と、
前記顔特徴判定部にて入力頭部領域に顔の特徴情報無しと判定された場合、前記追跡部にて対応付けされた過去の入力頭部領域を用いて顔を隠蔽した不審者であるか否かを判定する不審者検出部と、を備え、
前記不審者検出部は、
前記入力頭部領域に顔の特徴情報無しと判定された場合、直近から所定過去までの間で前記対応付けされた何れかの入力頭部領域が顔の特徴情報ありと判定されていなければ、顔を隠蔽した不審者と判定することを特徴とした画像監視装置。
- 前記顔特徴判定部は、
前記入力頭部領域と前記顔特徴情報とを比較して顔らしさの類似度となる素顔度を算出し、該素顔度に基づいて前記入力頭部領域が顔の特徴情報を有しているか否かを判定し、
前記不審者検出部は、
前記顔特徴判定部にて顔の特徴情報無しと判定されると、直近から所定過去までの間に前記対応付けされた入力頭部領域にて算出された素顔度を加算して蓄積素顔度を算出し、該蓄積素顔度が閾値以下である場合に、顔を隠蔽した不審者と判定する請求項1に記載の画像監視装置。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011076330A JP5726596B2 (ja) | 2011-03-30 | 2011-03-30 | 画像監視装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011076330A JP5726596B2 (ja) | 2011-03-30 | 2011-03-30 | 画像監視装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012212969A JP2012212969A (ja) | 2012-11-01 |
JP5726596B2 true JP5726596B2 (ja) | 2015-06-03 |
Family
ID=47266602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011076330A Active JP5726596B2 (ja) | 2011-03-30 | 2011-03-30 | 画像監視装置 |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP5726596B2 (ja) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2014156733A1 (ja) * | 2013-03-26 | 2014-10-02 | 株式会社日立国際電気 | 人数計数装置および人数計数方法 |
CN106462962B (zh) * | 2014-06-03 | 2020-08-04 | 住友重机械工业株式会社 | 施工机械用人检测***以及挖土机 |
JP6630999B2 (ja) * | 2014-10-15 | 2020-01-15 | 日本電気株式会社 | 画像認識装置、画像認識方法、および、画像認識プログラム |
US10671837B2 (en) | 2015-09-08 | 2020-06-02 | Nec Corporation | Face recognition system, face recognition method, display control apparatus, display control method, and display control program |
JPWO2017056948A1 (ja) * | 2015-09-28 | 2018-07-19 | 株式会社日立国際電気 | 画像処理システムおよび画像処理方法 |
WO2018128015A1 (ja) * | 2017-01-05 | 2018-07-12 | 日本電気株式会社 | 不審度推定モデル生成装置 |
JP7102137B2 (ja) * | 2017-12-19 | 2022-07-19 | セコム株式会社 | 不審者検知装置 |
JP6852779B2 (ja) * | 2019-12-12 | 2021-03-31 | 日本電気株式会社 | 画像認識装置、画像認識方法、および、画像認識プログラム |
CN112329554B (zh) * | 2020-10-19 | 2024-06-18 | 通辽第二发电有限责任公司 | 低分辨率图像安全帽识别方法和装置 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3736836B2 (ja) * | 1999-09-30 | 2006-01-18 | 株式会社日立国際電気 | 物体検出方法及び物体検出装置及びプログラム |
US6754367B1 (en) * | 1999-09-30 | 2004-06-22 | Hitachi Denshi Kabushiki Kaisha | Method and apparatus for automatically detecting intrusion object into view of image pickup device |
US20080080748A1 (en) * | 2006-09-28 | 2008-04-03 | Kabushiki Kaisha Toshiba | Person recognition apparatus and person recognition method |
JP2008108243A (ja) * | 2006-09-28 | 2008-05-08 | Toshiba Corp | 人物認識装置および人物認識方法 |
JP2010079740A (ja) * | 2008-09-26 | 2010-04-08 | Secom Co Ltd | 監視システム及び監視装置 |
JP5203281B2 (ja) * | 2009-03-31 | 2013-06-05 | 綜合警備保障株式会社 | 人物検出装置、人物検出方法、及び人物検出プログラム |
-
2011
- 2011-03-30 JP JP2011076330A patent/JP5726596B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2012212969A (ja) | 2012-11-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5726596B2 (ja) | 画像監視装置 | |
CA3077830C (en) | System and method for appearance search | |
US10755080B2 (en) | Information processing apparatus, information processing method, and storage medium | |
US9323979B2 (en) | Face recognition performance using additional image features | |
Goyal et al. | Face detection and tracking: Using OpenCV | |
CN105354563B (zh) | 结合深度和彩色图像的遮挡人脸检测预警装置及实现方法 | |
KR100695155B1 (ko) | 가리어진 얼굴 검출장치 및 방법과 이를 이용한 부정거래자식별장치 및 방법 | |
JP5106356B2 (ja) | 画像監視装置 | |
KR101159164B1 (ko) | 위조 영상 판별 장치 및 그 방법 | |
JP5218168B2 (ja) | 撮像装置、動体検知方法、動体検知回路、プログラム、及び監視システム | |
JP2008146539A (ja) | 顔認証装置 | |
JP5851108B2 (ja) | 画像監視装置 | |
JP5726595B2 (ja) | 画像監視装置 | |
CN107862298B (zh) | 一种基于红外摄像装置下眨眼的活体检测方法 | |
JP5752976B2 (ja) | 画像監視装置 | |
JP5752977B2 (ja) | 画像監視装置 | |
Gangopadhyay et al. | FACE DETECTION AND RECOGNITION USING HAAR CLASSIFIER AND LBP HISTOGRAM. | |
KR20200060868A (ko) | 객체 탐지 및 자동 추적이 가능한 다시점 영상 감시 시스템 | |
JP5752975B2 (ja) | 画像監視装置 | |
Dosi et al. | Seg-dgdnet: Segmentation based disguise guided dropout network for low resolution face recognition | |
Hemdan et al. | Facial features-based method for human tracking | |
Guan et al. | An unsupervised face detection based on skin color and geometric information | |
KR20160017152A (ko) | 이진 하르 캐스케이드에 기반한 성별 분류 방법 | |
KR102579610B1 (ko) | Atm 이상행동감지 장치 및 그 장치의 구동방법 | |
Danti et al. | An adaptive skin color model for a human face detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20140203 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20141009 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20141021 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20141216 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20150331 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20150401 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5726596 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |