KR101744184B1 - System and method for reporting automatically using by face recognition - Google Patents
System and method for reporting automatically using by face recognition Download PDFInfo
- Publication number
- KR101744184B1 KR101744184B1 KR1020150036223A KR20150036223A KR101744184B1 KR 101744184 B1 KR101744184 B1 KR 101744184B1 KR 1020150036223 A KR1020150036223 A KR 1020150036223A KR 20150036223 A KR20150036223 A KR 20150036223A KR 101744184 B1 KR101744184 B1 KR 101744184B1
- Authority
- KR
- South Korea
- Prior art keywords
- visitor
- worker
- image
- face image
- photographing
- Prior art date
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G06K9/00268—
-
- G06K9/00302—
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/10—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- Emergency Management (AREA)
- Business, Economics & Management (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Alarm Systems (AREA)
Abstract
본 발명은 얼굴 인식을 이용한 자동신고 시스템 및 그 방법에 관한 것으로, 구체적으로는 편의점, 개인 점포 및 은행에서 근무하는 근무자가 방문자로 인한 위험 상황에 노출될 경우, 근무자의 얼굴 표정을 인식하여 위험 상황의 발생을 자동으로 신고하는 얼굴 인식을 이용한 자동신고 시스템 및 그 방법에 관한 것이다.
또한, 본 발명은 방문자를 대면하는 근무자의 얼굴 영상을 촬영하고, 또한, 촬영된 얼굴 영상이 사전에 저장된 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하며, 또한, 위험 상황의 발생 시, 기설정된 비상연락망으로 신고 또는 위험 알림 메세지를 자동 전송하도록 구비되므로, 방문자로 인한 근무자의 위험 상황을 신속하게 외부로 신고 또는 알릴 수 있다.The present invention relates to an automatic reporting system using face recognition and a method thereof. Specifically, when a worker working at a convenience store, a personal store or a bank is exposed to a risk situation caused by a visitor, The present invention relates to an automatic reporting system using face recognition and a method thereof.
Further, according to the present invention, it is determined that a dangerous situation occurs when a face image of a worker facing the visitor is photographed and the photographed face image is matched with a dangerous face image stored in advance, , It is possible to report a risk situation of a worker caused by a visitor to the external emergency notification system or notify the outside of the risk notification system automatically.
Description
본 발명은 얼굴 인식을 이용한 자동신고 시스템 및 그 방법에 관한 것으로, 구체적으로는 편의점, 개인 점포 및 은행에서 근무하는 근무자가 방문자로 인한 위험 상황에 노출될 경우, 근무자의 얼굴 표정을 인식하여 위험 상황의 발생을 자동으로 신고하는 얼굴 인식을 이용한 자동신고 시스템 및 그 방법에 관한 것이다.The present invention relates to an automatic reporting system using face recognition and a method thereof. Specifically, when a worker working at a convenience store, a personal store or a bank is exposed to a risk situation caused by a visitor, The present invention relates to an automatic reporting system using face recognition and a method thereof.
일반적으로, 편의점, 개인 점포 및 은행에서 근무하는 근무자는 방문자와 직접적인 대면을 통해 업무를 처리하고 있으므로, 방문자에 의한 각종 위험 상황에 노출되고 있는 실정이다. 특히, 편의점 및 개인 점포와 같은 독립상가는 1명의 근무자가 혼자서 근무하고 있어서 방문자에 의한 위험 상황에 쉽게 노출될 수 있다.Generally, a convenience store, a private store, and a worker at a bank are in direct contact with a visitor and are exposed to a variety of risk by a visitor. In particular, independent shops such as convenience stores and private stores can easily be exposed to the risk situation caused by visitors because one worker is working alone.
즉, 방문자가 위협을 가하며 금품을 요구하거나 폭력 또는 추행을 하는 상황이 발생할 수 있으며, 이때, 근무자는 주변에 도와줄 사람이 전혀 없는 무방비 상태로 방문자에게 굴복하게 되므로, 근무자가 직접 외부로 신고를 하거나 위험 상황을 알리기도 어려운 상황에 봉착하게 된다. 이로 인하여, 물적 피해가 발생함은 물론이고 근무자가 상해를 입는 상황도 발생하고 있다.In other words, a visitor may threaten, ask for money, or commit violence or harassment. In this case, the worker succumbs to the visitor with no defenses at all. Or it is difficult to notify a dangerous situation. As a result, not only material damage but also a worker is injured.
이에 대한, 보안 대책으로 대부분의 편의점 및 개인점포에는 CCTV(closed circuit television)를 설치하고 있으나, 종래의 CCTV는 단순히 촬영 기능만을 구비한 것이어서 근무자의 위험 상황을 외부로 알릴 수 없는 문제점이 있었다.Most of the convenience stores and private stores have CCTV (Closed Circuit Television) installed as a security countermeasure thereto. However, the conventional CCTV has only a photographing function, and thus can not inform the outside of the dangerous situation of the worker.
따라서, 편의점, 개인 점포 및 은행에서 근무하는 근무자가 방문자에 의한 위험 상황에 노출될 경우, 이러한 위험 상황을 신속하게 외부로 신고할 수 있는 시스템의 도입이 절실한 실정이다.Therefore, when a worker at a convenience store, a personal store, or a bank is exposed to the risk of a visitor, it is urgent to introduce a system capable of promptly reporting the risk to the outside.
본 발명은 상기와 같은 문제점을 감안하여 안출된 것으로, 근무자의 얼굴 표정을 인식하여 근무자의 위험 상황을 자동으로 신고하거나 알릴 수 있는 얼굴 인식을 이용한 자동신고 시스템 및 그 방법을 제공하는데 그 목적이 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide an automatic reporting system and method for recognizing a facial expression of a worker by using facial recognition capable of automatically reporting or informing a dangerous situation of a worker .
또한, 본 발명은 위험 상황을 야기한 방문자에 대하여 정확한 증거 자료를 확보할 수 있는 얼굴 인식을 이용한 자동신고 시스템 및 그 방법을 제공하는데 그 목적이 있다.It is another object of the present invention to provide an automatic notification system and method using face recognition that can provide accurate evidence for a visitor who has caused a dangerous situation.
본 발명의 목적들은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.The objects of the present invention are not limited to the above-mentioned objects, and other objects not mentioned can be clearly understood by those skilled in the art from the following description.
상기와 같은 목적을 달성하기 위한 본 발명은 방문자를 대면하는 근무자의 얼굴 영상을 촬영하는 근무자 촬영부; 근무자의 얼굴 영상들(위험 상황을 나타내는 위험 상황 얼굴 영상을 포함함)을 저장하는 저장부; 상기 근무자 촬영부로부터 입력된 얼굴 영상을 상기 저장부에 저장된 복수의 얼굴 영상과 비교하여, 상기 얼굴 영상이 상기 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하는 제어부; 및 상기 제어부의 제어하에, 상기 위험 상황의 발생을 기설정된 비상연락망으로 신고하거나 위험 알림 메세지로 전송하는 신고부;를 포함하는 얼굴 인식을 이용한 자동신고 시스템을 제공한다.According to an aspect of the present invention, there is provided an image processing apparatus comprising: a worker photographing unit for photographing a face image of a worker facing a visitor; A storage unit for storing face images of a worker (including a dangerous situation face image indicating a dangerous situation); A control unit comparing the face image input from the worker photographing unit with a plurality of face images stored in the storage unit and determining that a dangerous situation occurs when the face image matches the dangerous situation face image; And a notification unit for reporting the occurrence of the dangerous situation to a predetermined emergency network under a control of the control unit or transmitting the risk notification message to a risk notification message.
바람직한 실시예에 있어서, 상기 제어부는, 상기 근무자 촬영부로부터 입력된 얼굴 영상이 정상 상태의 얼굴 영상과 매칭될 경우에는 근무자의 출근, 퇴근 또는 정상 근무가 이루어지는 것으로 판단한다.In a preferred embodiment, when the face image input from the worker photographing unit is matched with the face image in the normal state, the control unit determines that the worker is going to work, leaving work or working normally.
바람직한 실시예에 있어서, 상기 위험 상황의 발생 시, 상기 제어부의 제어하에 비상 경보를 소리로 출력하는 경보부;를 더 포함한다.In a preferred embodiment of the present invention, the alarm unit further includes an alarm unit for outputting an emergency alarm under the control of the control unit when the dangerous situation occurs.
바람직한 실시예에 있어서, 상기 근무자 촬영부는 촬영각도 및 촬영위치 중에서 적어도 하나를 조절할 수 있도록 구비된다.
In a preferred embodiment, the worker photographing unit is provided to adjust at least one of the photographing angle and the photographing position.
또한, 본 발명은 방문자를 대면하는 근무자의 얼굴 영상을 촬영하는 근무자 촬영부; 방문자 영상을 촬영하는 방문자 촬영부; 근무자의 얼굴 영상들(위험 상황을 나타내는 위험 상황 얼굴 영상을 포함함)을 저장하는 저장부; 상기 근무자 촬영부로부터 입력된 얼굴 영상을 상기 저장부에 저장된 복수의 얼굴 영상과 비교하여, 상기 얼굴 영상이 상기 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하고 상기 방문자 촬영부로부터 촬영된 방문자 영상을 상기 저장부에서 저장하는 제어부; 상기 제어부의 제어하에, 상기 위험 상황의 발생을 기설정된 비상연락망으로 신고하거나 위험 알림 메세지로 전송하는 신고부;를 포함하는 얼굴 인식을 이용한 자동신고 시스템을 제공한다.The present invention also relates to a worker photographing section for photographing a face image of a worker facing a visitor; A visitor photographing unit for photographing a visitor image; A storage unit for storing face images of a worker (including a dangerous situation face image indicating a dangerous situation); A face image input from the worker photographing unit is compared with a plurality of face images stored in the storage unit to determine that a dangerous situation occurs when the face image matches the dangerous situation face image, A controller for storing a visitor image in the storage unit; And a notification unit for reporting the occurrence of the dangerous situation to a predetermined emergency network under a control of the control unit or transmitting the risky notification message to a risk notification message.
바람직한 실시예에 있어서, 상기 신고부는, 상기 위험 상황의 발생 시 상기 방문자 촬영부로부터 촬영되는 방문자 영상 또는 상기 저장부에서 저장된 방문자 영상을, 사전에 설정된 외부 단말로 전송한다.In a preferred embodiment, the notification unit transmits a visitor image photographed from the visitor photographing unit or a visitor image stored in the storage unit to a preset external terminal when the dangerous situation occurs.
바람직한 실시예에 있어서, 방문자의 음성을 입력받아, 전기적인 음성신호로 출력하는 방문자 음성 입력부;를 더 포함하고, 상기 제어부는, 상기 방문자 영상의 저장 시 방문자의 음성신호를 상기 저장부에서 더 저장한다.In another preferred embodiment of the present invention, a visitor voice input unit receives a voice of a visitor and outputs the voice as an electric voice signal. The control unit further stores the voice signal of the visitor in the storage unit do.
바람직한 실시예에 있어서, 상기 신고부는 상기 방문자 영상의 전송 시, 방문자의 음성신호를 더 전송한다.In a preferred embodiment, the notification unit further transmits a visitor's voice signal when the visitor image is transmitted.
바람직한 실시예에 있어서, 상기 제어부는, 상기 근무자 촬영부로부터 입력된 얼굴 영상이 정상 상태의 얼굴 영상과 매칭될 경우에는 근무자의 출근, 퇴근 또는 정상 근무가 이루어지는 것으로 판단한다.In a preferred embodiment, when the face image input from the worker photographing unit is matched with the face image in the normal state, the control unit determines that the worker is going to work, leaving work or working normally.
바람직한 실시예에 있어서, 상기 위험 상황의 발생 시, 상기 제어부의 제어하에 비상 경보를 소리로 출력하는 경보부;를 더 포함한다.In a preferred embodiment of the present invention, the alarm unit further includes an alarm unit for outputting an emergency alarm under the control of the control unit when the dangerous situation occurs.
바람직한 실시예에 있어서, 상기 근무자 촬영부는, 촬영각도 및 촬영위치 중에서 적어도 하나를 조절할 수 있도록 구비된다.In a preferred embodiment, the worker photographing unit is provided to be capable of adjusting at least one of the photographing angle and the photographing position.
바람직한 실시예에 있어서, 상기 방문자 촬영부는, 촬영각도 및 촬영위치 중에서 적어도 하나를 조절할 수 있도록 구비된다.
In a preferred embodiment, the visitor photographing unit is provided to adjust at least one of the photographing angle and the photographing position.
또한, 본 발명은 (1) 방문자를 대면하는 근무자의 얼굴 영상을 촬영하는 단계; (2) 근무자의 얼굴 영상을 입력받아, 데이터베이스에 저장된 복수의 얼굴 영상과 비교하는 단계; (3) 근무자의 얼굴 영상이, 기저장된 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하는 단계; 및 (4) 상기 위험 상황의 발생을, 기설정된 비상연락망으로 신고하거나 위험 알림 메세지로 전송하는 단계;를 포함하는 얼굴 인식을 이용한 자동신고 방법을 제공한다.According to another aspect of the present invention, there is provided an image processing method comprising the steps of: (1) photographing a face image of a worker facing a visitor; (2) receiving a face image of a worker and comparing the face image with a plurality of face images stored in a database; (3) determining that a dangerous situation occurs when a face image of a worker is matched with a previously stored dangerous face image; And (4) reporting the occurrence of the dangerous situation to a predetermined emergency contact network or transmitting the dangerous notification message to a risk notification message.
바람직한 실시예에 있어서, 상기 제 (1)단계 이전에, (A) 근무자별로 상기 위험 상황 얼굴 영상 및 정상 상태의 얼굴 영상을 포함하는 복수의 얼굴 영상을 저장하여, 상기 데이터베이스를 구축하는 단계;를 더 포함한다.In a preferred embodiment, before the step (1), (A) building the database by storing a plurality of face images including the face image of the critical condition and the face image of the normal condition for each worker, .
바람직한 실시예에 있어서, 상기 제 (3)단계는, 근무자의 얼굴 영상이 상기 정상 상태의 얼굴 영상과 매칭될 경우 근무자의 출근, 퇴근 또는 정상 근무가 이루어진 것으로 판단한다.In a preferred embodiment, the step (3) determines that a worker's work, a work or a normal work has been performed when a face image of a worker is matched with a face image of the steady state.
바람직한 실시예에 있어서, 상기 제 (4)단계는, 상기 위험 상황의 발생에 따른 비상 경보를 소리로 출력한다.
In a preferred embodiment, the step (4) outputs an emergency alarm according to the occurrence of the dangerous situation.
또한, 본 발명은 (1) 방문자를 대면하는 근무자의 얼굴 영상 및 방문자 영상을 각각 촬영하는 단계; (2) 근무자의 얼굴 영상을 입력받아, 데이터베이스에 저장된 복수의 얼굴 영상과 비교하는 단계; (3) 근무자의 얼굴 영상이, 기저장된 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하고, 상기 촬영된 방문자 영상을 저장하는 단계; (4) 상기 위험 상황의 발생을, 기설정된 비상연락망으로 신고하거나 위험 알림 메세지로 전송하는 단계; 및 (5) 상기 저장된 방문자 영상 또는 실시간으로 촬영되는 방문자 영상을, 사전에 설정된 외부 단말로 전송하는 단계;를 포함하는 얼굴 인식을 이용한 자동신고 방법을 제공한다.(1) photographing a face image and a visitor image of a worker facing a visitor, respectively; (2) receiving a face image of a worker and comparing the face image with a plurality of face images stored in a database; (3) storing the photographed visitor image when it is determined that a dangerous situation occurs when a face image of a worker is matched with a previously stored dangerous face image; (4) reporting the occurrence of the dangerous situation to a predetermined emergency communication network or transmitting it as a danger notification message; And (5) transmitting the stored visitor image or the visitor image photographed in real time to an external terminal set in advance.
바람직한 실시예에 있어서, 상기 제 (3)단계는 상기 방문자 영상의 저장 시, 방문자의 음성신호를 더 저장한다.In a preferred embodiment, step (3) further stores a visitor's voice signal when storing the visitor image.
바람직한 실시예에 있어서, 상기 제 (5)단계는 상기 방문자 영상의 전송 시, 방문자의 음성신호를 더 전송한다.In a preferred embodiment, the step (5) further transmits a visitor's voice signal when the visitor image is transmitted.
바람직한 실시예에 있어서, 상기 제 (1)단계 이전에, (A) 근무자별로 상기 위험 상황 얼굴 영상 및 정상 상태의 얼굴 영상을 포함하는 복수의 얼굴 영상을 저장하여, 상기 데이터베이스를 구축하는 단계;를 더 포함한다.In a preferred embodiment, before the step (1), (A) building the database by storing a plurality of face images including the face image of the critical condition and the face image of the normal condition for each worker, .
바람직한 실시예에 있어서, 상기 제 (3)단계는, 근무자의 얼굴 영상이 상기 정상 상태의 얼굴 영상과 매칭될 경우 근무자의 출근, 퇴근 또는 정상 근무가 이루어진 것으로 판단한다.In a preferred embodiment, the step (3) determines that a worker's work, a work or a normal work has been performed when a face image of a worker is matched with a face image of the steady state.
바람직한 실시예에 있어서, 상기 제 (4)단계는, 상기 위험 상황의 발생에 따른 비상 경보를 소리로 출력한다.In a preferred embodiment, the step (4) outputs an emergency alarm according to the occurrence of the dangerous situation.
전술한 과제해결 수단에 의해 본 발명은 방문자를 대면하는 근무자의 얼굴 영상을 촬영하고, 또한, 촬영된 얼굴 영상이 사전에 저장된 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하며, 또한, 위험 상황의 발생 시, 기설정된 비상연락망으로 신고 또는 위험 알림 메세지를 자동 전송하도록 구비되므로, 방문자로 인한 근무자의 위험 상황을 신속하게 외부로 신고 또는 알릴 수 있는 효과가 있다.According to the above-mentioned problem solving means, the present invention takes a face image of a worker who faces a visitor and determines that a dangerous situation occurs when the photographed face image is matched with a previously stored dangerous situation face image, When a dangerous situation occurs, it is provided to report to a predetermined emergency network or automatically transmit a danger notification message, so that it is possible to promptly report or inform the dangerous situation of a worker caused by a visitor.
또한, 본 발명은 근무자의 얼굴 표정을 인식하여 자동으로 신고가 이루어지므로, 방문자가 모르게 근무자의 위험 상황을 외부로 신고 또는 알릴 수 있다.In addition, since the present invention recognizes the facial expression of a worker and automatically reports it, the risk situation of a worker can be reported or announced to the outside without the visitor knowing it.
또한, 본 발명은 위험 상황의 발생 시, 방문자에 대한 영상 및 음성을 저장부에 저장하거나 외부 단말로 전송하도록 구비되므로, 위험 상황을 야기한 방문자에 대하여 정확한 증거 자료를 확보할 수 있는 효과가 있다.In addition, the present invention is configured to store images and voices for visitors in a storage unit or transmit them to an external terminal when a dangerous situation occurs, so that it is possible to secure accurate evidence for visitors who have caused a dangerous situation.
도 1은 본 발명의 제 1실시예에 따른 자동신고 시스템을 설명하기 위한 도면.
도 2는 본 발명의 제 2실시예에 따른 자동신고 시스템을 설명하기 위한 도면.
도 3은 본 발명의 제 1실시예에 따른 자동신고 방법을 설명하기 위한 도면.
도 4는 본 발명의 제 2실시예에 따른 자동신고 방법을 설명하기 위한 도면.1 is a view for explaining an automatic reporting system according to a first embodiment of the present invention;
2 is a view for explaining an automatic reporting system according to a second embodiment of the present invention;
3 is a view for explaining an automatic reporting method according to the first embodiment of the present invention.
4 is a view for explaining an automatic reporting method according to a second embodiment of the present invention.
하기의 설명에서 본 발명의 특정 상세들이 본 발명의 보다 전반적인 이해를 제공하기 위해 나타나 있는데, 이들 특정 상세들 없이 또한 이들의 변형에 의해서도 본 발명이 용이하게 실시될 수 있다는 것은 이 기술분야에서 통상의 지식을 가진 자에게 자명할 것이다.It should be understood that the specific details of the invention are set forth in the following description to provide a more thorough understanding of the present invention and that the present invention may be readily practiced without these specific details, It will be clear to those who have knowledge.
이하, 본 발명에 따른 바람직한 실시예를 첨부된 도 1 내지 도 4를 참조하여 상세히 설명하되, 본 발명에 따른 동작 및 작용을 이해하는데 필요한 부분을 중심으로 설명한다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments according to the present invention will be described in detail with reference to FIGS. 1 to 4. FIG.
도 1은 본 발명의 제 1실시예에 따른 자동신고 시스템을 설명하기 위한 도면이다.1 is a view for explaining an automatic notification system according to a first embodiment of the present invention.
도 1을 참조하면, 본 발명의 제 1실시예에 따른 자동신고 시스템은, 근무자 촬영부(110), 저장부(120), 제어부(130), 신고부(140) 및 경보부(150)를 포함하여 구성된다.1, the automatic notification system according to the first embodiment of the present invention includes a
여기서, 제 1실시예에 따른 자동신고 시스템은, 로봇 형상의 외관을 갖도록 구비되거나 블랙박스 또는 CCTV 형태로 구비될 수 있으며, 편의점, 개인 점포 및 은행과 같이 근무자가 방문자와 직접적인 대면을 통해 업무를 처리하여야 하는 장소에 설치되어 사용될 수 있다.Here, the automatic reporting system according to the first embodiment may be provided with a robot-like appearance or may be provided in the form of a black box or a CCTV, and a worker, such as a convenience store, a personal store, and a bank, It can be installed and used in a place to be treated.
상기 근무자 촬영부(110)는 근무자를 촬영하기 위한 것으로, 방문자를 대면하는 근무자의 얼굴 영상을 촬영하도록 구비되며, 촬영된 얼굴 영상은 후술할 제어부(130)로 입력되거나 저장부(120)에서 근무자별 얼굴 영상으로 등록될 수 있다.The
바람직하게, 상기 근무자 촬영부(110)는 적외선 카메라로 구비될 수 있으며, 근무자의 존재 유무를 감지하기 위해 렌즈 주변에 구비되는 감지수단 및 근무자가 감지되면 조명을 비추는 조명 조사수단을 더 포함할 수도 있다.Preferably, the
또한, 상기 근무자 촬영부(110)는 촬영각도 및 촬영위치 중에서 적어도 하나의 조절이 가능하게 구비되며, 예컨대, 상기 근무자 촬영부(110) 자체의 각도가 상,하,좌,우로 회동하도록 구비되거나, 레일 상에서 상,하,좌,우로 이동하는 방식으로 촬영위치를 조절할 수 있게 구비되거나 이를 모두 포함하는 방식으로 구비될 수 있다.In addition, the
또한, 상기 근무자 촬영부(110)는 외부의 조작에 의해 촬영각도 및 촬영위치를 수동으로 조작할 수 있게 구비되거나, 근무자의 위치 또는 얼굴을 추적하여 자동으로 촬영각도 및 촬영위치를 조절하도록 구비될 수 있다.The
상기 저장부(120)는 근무자의 얼굴 영상을 저장 또는 등록하기 위한 것으로, 근무자의 얼굴 인식을 위한 복수의 얼굴 영상이 저장되며, 특히, 얼굴 영상 자체를 저장하도록 구비되거나 얼굴 영상에서 얼굴 인식에 이용되는 특징적인 정보들만을 별도로 추출하여 저장하거나 얼굴 영상 자체와 이로부터 추출된 특징 정보를 모두 저장할 수 있다. 이하에서 이용되는 "얼굴 영상"이란 이 모두를 포함하는 개념임을 주의해야 한다.The
바람직하게, 상기 저장부(120)는 데이터베이스로 구비될 수 있으며, 후술할 제어부(130)의 제어하에서 상기 얼굴 영상들을 저장하거나 근무자별로 복수의 얼굴 영상을 등록하도록 구비될 수 있다. 이때, 얼굴 영상의 등록 및 설정을 위한 사용자 명령을 입력받기 위한 입력수단, 예컨대, 입력버튼, 키패드 또는 터치스크린이 더 구비될 수도 있다.The
또한, 상기 저장부(120)에서 저장되는 복수의 얼굴 영상은, 근무자의 표정 변화에 따른 정상 상태의 얼굴 영상과 위험 상황을 나타내는 위험 상황 얼굴 영상을 모두 포함한다. 이때, 상기 위험 상황 얼굴 영상은, 근무자가 위험 상황에 이용하기 위하여, 얼굴을 찡그린 표정 및 놀란 표정 등의 위급상황을 나타내는 표정의 얼굴 영상으로 등록된 것일 수 있다.In addition, the plurality of face images stored in the
상기 제어부(130)는 상기 근무자 촬영부(110)로부터 입력된 얼굴 영상을 이용하여 위험 상황의 발생 여부를 판단하기 위한 것으로, 상기 근무자 촬영부(110)로부터 입력된 얼굴 영상을 상기 저장부(120)에 저장된 복수의 얼굴 영상과 비교하는 과정을 수행하여, 상기 입력된 얼굴 영상이 상기 위험 상황 얼굴 영상과 매칭되면 상기 위험 상황이 발생한 것으로 판단하도록 구비되어 있다.The
또한, 상기 제어부(130)는 상기 근무자 촬영부(110)로부터 입력된 얼굴 영상과 상기 복수의 얼굴 영상 간의 비교 시, 얼굴 영상 자체를 비교하거나 각 얼굴 영상의 특징적인 정보들을 비교하거나 얼굴 영상 자체와 이로부터 추출된 특징 정보를 모두 비교하는 방식으로 수행되도록 구비될 수 있다.When comparing the face image inputted from the
또한, 상기 제어부(130)는 상기 위험 상황이 발생하게 되면 후술할 신고부(140)를 제어하여 자동으로 외부에 신고가 이루어지게 하므로, 위험 상황을 야기한 방문자가 모르게 신고하거나 위험 상황을 알릴 수 있다. 또한, 상기 제어부(130)는 후술할 경고부를 제어하여 비상 경보를 출력하게 할 수도 있다.In addition, when the dangerous situation occurs, the
또한, 상기 제어부(130)는 상기 근무자 촬영부(110)로부터 입력된 얼굴 영상이 정상 상태의 얼굴 영상과 매칭되면, 근무자의 출근, 퇴근 또는 정상 근무가 이루어지는 것으로 판단하도록 구비된다. 또한, 상기 제어부(130)는 근무자에 대한 정상 상태의 얼굴 영상이 매칭된 시간을 상기 저장부(120)에 저장하여, 출퇴근 보고 용도의 정보로 사용할 수 있다.If the face image inputted from the
한편, 상기 제어부(130)에는 상기 근무자 촬영부(110)에서 촬영된 얼굴 영상과 상기 복수의 얼굴 영상 간의 비교를 위하여, 상기 근무자 촬영부(110)로부터 입력되는 얼굴 영상에 대해서 사이즈 조절, 픽셀 변환, 얼굴 영역 추출과 같은 전처리를 수행하는 전처리 수단이 더 포함될 수도 있다. 이때, 상기 전처리 수단은 얼굴 영상에서 사용자의 얼굴 영역을 추출하고, 상기 영상을 사전에 정의된 사이즈로 변환하거나 픽셀값을 변환하는 등의 전처리 과정을 수행하여 출력하도록 구비될 수 있다. 또한, 상기 전처리 수단에 의해 수행되는 전처리 과정은 종래에 공지된 전처리 방식이 적용될 수 있다.In order to compare the facial image photographed by the
상기 신고부(140)는 근무자에게 발생한 위험 상황을 외부로 신고하거나 알리기 위한 것으로, 상기 제어부(130)의 제어하에, 상기 위험 상황의 발생을 기설정된 비상연락망(10)으로 신고하거나 위험 알림 메세지를 자동으로 전송하도록 구비된다.The
즉, 상기 신고부(140)는 상기 위험 상황이 발생하게 되면 별도의 사용자 명령을 입력하지 않더라도 실시간으로 상기 비상연락망(10)에 연락을 취하도록 구비되며, 신고 또는 위험 알림 메세지의 전송을 위해 사전에 설정된 근무자의 음성 또는 메세지가 저장되어 있을 수 있다.That is, the
또한, 상기 신고부(140)는 유,무선 통신망 또는 인터넷망에 상시 연결되며, 예컨대, 전화통신망, 와이파이(Wifi), LTE, 블루투스 및 인터넷 통신 중에서 적어도 하나의 통신을 수행할 수 있는 통신모듈로 구비될 수 있다.The
또한, 상기 비상연락망(10)은 상기 신고부(140) 또는 상기 제어부(130)에서 사전에 설정되며, 예컨대, 경찰서, 관리자의 모바일폰, 가족 또는 지인의 모바일폰에 대한 전화 번호가 저장되어 있을 수 있다. 또한, 상기 비상연락망(10)은 근무자가 임의로 설정하여 저장할 수 있도록 구비될 수 있다.The
상기 경보부(150)는 비상 경보를 출력하기 위한 것으로, 상기 위험 상황이 발생하게 되면 사이렌과 같이 비상 경보를 소리로 출력하도록 구비된다.The
또한, 상기 경보부(150)는 상기 제어부(130)의 제어하에 동작하여 비상 경보를 출력하며, 상기 근무자 촬영부(110), 상기 저장부(120), 상기 제어부(130) 및 상기 신고부(140)와 일체로 형성할 수도 있으나 근무처의 특정 위치에 별도로 설치될 수도 있다.The
즉, 본 발명의 제 1실시예에 따른 자동신고 시스템은, 근무자의 얼굴 표정을 인식하여 근무자의 위험 상황을 판단할 수 있고 근무자가 별도로 조작하지 않더라도 자동으로 신고 또는 위험 알림 메세지를 전송하므로, 방문자로 인한 근무자의 위험 상황을 신속하게 외부로 알릴 수 있게 한다.
That is, the automatic reporting system according to the first embodiment of the present invention recognizes the facial expression of a worker to determine a dangerous situation of a worker and automatically transmits a report or risk alert message even if the worker does not operate it separately, To inform the outside of the dangerous situation of the workers due to the accident.
도 2는 본 발명의 제 2실시예에 따른 자동신고 시스템을 설명하기 위한 도면이다.2 is a view for explaining an automatic reporting system according to a second embodiment of the present invention.
도 2를 참조하면, 본 발명의 제 2실시예에 따른 자동신고 시스템은, 근무자 촬영부(210), 방문자 촬영부(220), 저장부(230), 제어부(240), 신고부(250), 방문자 음성 입력부(260) 및 경보부(270)를 포함하여 구성된다.2, the automatic notification system according to the second embodiment of the present invention includes a
또한, 본 발명의 제 2실시예에 따른 자동신고 시스템의 경우에도, 로봇 형상의 외관을 갖도록 구비되거나 블랙박스 또는 CCTV 형상으로 구비될 수 있으며, 편의점, 개인 점포 및 은행과 같이 근무자가 방문자와 직접적인 대면을 통해 업무를 처리하여야 하는 장소에 설치되어 사용될 수 있다.Also, in case of the automatic notification system according to the second embodiment of the present invention, the automatic notification system according to the second embodiment of the present invention may be provided with a robot-like appearance or a black box or a CCTV shape. In the case of a convenience store, It can be installed and used in a place where business should be handled through face to face.
상기 근무자 촬영부(210)는 근무자의 얼굴 영상을 촬영하기 위한 것으로, 적외선 카메라로 구비될 수 있으며, 근무자의 존재 유무를 감지하기 위해 렌즈 주변에 구비되는 감지수단 및 근무자가 감지되면 조명을 비추는 조명 조사수단을 더 포함할 수도 있다.The
바람직하게, 상기 근무자 촬영부(210)는 촬영각도 및 촬영위치 중에서 적어도 하나의 조절이 가능하게 구비되며, 예컨대, 상기 근무자 촬영부(210) 자체의 각도를 회동시킬 수 있게 구비하거나 레일 상에서 이동할 수 있게 구비하거나 각도 조절 및 위치 이동이 모두 가능하게 구비할 수 있다.Preferably, the
이때, 상기 근무자 촬영부(210)의 촬영각도 및 촬영위치는, 외부의 조작에 의해 조절되는 수동 방식 또는 근무자의 얼굴 또는 위치를 추적하여 자동으로 조절되는 방식으로 구현될 수 있다.At this time, the photographing angle and the photographing position of the
상기 방문자 촬영부(220)는 방문자 영상을 촬영하기 위한 것으로, 촬영된 방문자 영상은 후술할 제어부(240)에 의해 저장부(230)에 저장되거나 외부 단말(20)로 전송되게 된다.The
또한, 상기 방문자 촬영부(220)는 컬러 영상을 촬영하는 컬러 카메라로 구비되며, 바람직하게, 상기 근무자 촬영부(210)와는 촬영각도 또는 촬영방향이 다르게 설정되어 근무자가 마주하는 방문자를 정면에서 촬영하게 된다. 또한, 방문자에 의한 위험 상황이 발생할 경우 상기 방문자 촬영부(220)에 의해 방문자의 얼굴 및 행동 등이 촬영된다.The
또한, 상기 방문자 촬영부(220)의 경우에도 정해진 방향만을 촬영하는 것이 아니라, 전술한 바와 같이 촬영각도 및 촬영위치의 조절이 가능하게 구비될 수 있다. 한편, 상기 방문자 촬영부(220) 및 상기 근무자 촬영부(110)를 탑재한 단말 장치 자체의 촬영각도 및 촬영위치를 조절할 수 있게 구비할 수도 있다.Also, in the case of the
상기 저장부(230)는 근무자의 얼굴 영상들과 방문자 영상을 저장하기 위한 것으로, 후술할 제어부(240)의 제어하에 근무자별로 복수의 얼굴 영상을 등록하거나, 상기 방문자 영상을 저장하도록 구비된다.The
바람직하게, 상기 저장부(230)에는 상기 근무자의 얼굴 영상들이 저장되는 데이터베이스와 상기 방문자 영상이 저장되는 저장수단이 각각 구비되거나, 동일한 저장 공간 상에서 저장되도록 구비될 수 있다.Preferably, the
또한, 상기 저장부(230)는 상기 근무자별 얼굴 영상의 저장 시, 얼굴 영상 자체를 저장하거나 얼굴 영상에서 얼굴 인식에 이용되는 특징적인 정보들만을 별도로 추출하여 저장하거나 얼굴 영상 자체와 이로부터 추출된 특징 정보를 모두 저장할 수 있다. 한편, 상기 저장부(230)로 얼굴 영상을 등록하거나 설정하기 위한 사용자 명령을 입력받는 입력수단, 예컨대, 입력버튼, 키패드 또는 터치스크린이 더 구비될 수도 있다.In addition, the
또한, 상기 저장부(230)에서 저장되는 복수의 얼굴 영상은, 근무자의 표정 변화에 따른 정상 상태의 얼굴 영상과 위험 상황을 나타내는 위험 상황 얼굴 영상을 모두 포함한다. 이때, 상기 위험 상황 얼굴 영상은, 근무자가 위험 상황에 이용하기 위하여, 얼굴을 찡그린 표정 및 놀란 표정 등의 위급상황을 나타내는 표정의 얼굴 영상으로 등록된 것일 수 있다.In addition, the plurality of face images stored in the
또한, 상기 저장부(230)는, 상기 방문자 촬영부(220)로부터 촬영되는 방문자 영상을 상시 저장하도록 구비될 수 있다. 이때, 상기 방문자 영상은, 상기 방문자 촬영부(220)로부터 촬영된 방문자의 얼굴 및 행동 등을 포함한 영상일 수 있다.Also, the
또한, 상기 저장부(230)의 저장 공간이 한정될 수 있으므로 일정 시간이 경과한 방문자 영상을 자동으로 삭제하되, 상기 위험 상황이 발생한 시점의 방문자 영상에 대해서는 보존하도록 구비하는 것이 바람직하다. 다른 예로, 후술할 제어부(240)에서 상기 위험 상황의 발생을 판단한 시점부터 촬영되는 방문자 영상을 상기 저장부(230)에서 저장되게 할 수도 있다.In addition, since the storage space of the
상기 제어부(240)는 상기 근무자 촬영부(210)로부터 입력된 얼굴 영상을 이용하여 위험 상황의 발생 여부를 판단하기 위한 것으로, 상기 근무자 촬영부(210)로부터 입력된 얼굴 영상을 상기 저장부(230)에 저장된 복수의 얼굴 영상과 비교하는 과정을 수행하여, 상기 입력된 얼굴 영상이 상기 위험 상황 얼굴 영상과 매칭되면 상기 위험 상황이 발생한 것으로 판단하는 점에서 전술한 본 발명의 제 1실시예에 따른 제어부(130)와 동일한 기능 및 구성을 가지므로, 중복되는 설명은 생략하고 차이를 갖는 부분에 대해 상세하게 설명한다.The control unit 240 determines whether or not a dangerous situation occurs using the face image input from the
먼저, 상기 제어부(240)는 상기 위험 상황이 발생한 것으로 판단되는 경우, 상기 방문자 촬영부(220)에서 촬영되는 상기 방문자 영상 및 후술할 방문자 음성 입력부(260)로부터 입력되는 방문자의 음성신호가 상기 저장부(230)에서 저장되게 한다.First, when it is determined that the dangerous situation has occurred, the control unit 240 determines whether the visitor image photographed by the
또한, 상기 제어부(240)는 후술할 신고부(250)를 제어하여, 상기 방문자 영상 및 상기 방문자의 음성신호를 기설정된 외부 단말(20)로 전송되게 한다.The control unit 240 controls the
즉, 상기 제어부(240)는 방문자의 얼굴 및 행동이 포함된 영상인 상기 방문자 영상을 저장하거나 상기 외부 단말(20)로 전송시켜, 위험 상황을 야기한 방문자에 대하여 정확한 증거 자료를 확보할 수 있게 한다.That is, the controller 240 stores the visitor image, which is the image including the face and the behavior of the visitor, or transmits the visitor image to the
상기 신고부(250)는 근무자에게 발생한 위험 상황을 외부로 신고하거나 알리기 위한 것으로, 상기 제어부(240)의 제어하에, 상기 위험 상황의 발생을 기설정된 비상연락망(10)으로 신고하거나 위험 알림 메세지를 자동으로 전송하고, 상기 방문자 영상 및 방문자의 음성신호를 사전에 설정된 외부 단말(20)로 전송하도록 구비된다.The
즉, 상기 신고부(250)는 상기 위험 상황이 발생하게 되면 별도의 사용자 명령을 입력하지 않더라도, 상기 비상연락망(10)으로 연락을 취하고 상기 외부 단말(20)로 상기 방문자 영상 및 상기 방문자의 음성 신호를 전송하도록 구비된다.That is, when the dangerous situation occurs, the
또한, 상기 신고부(250)는 상기 방문자 촬영부(220)로부터 촬영되는 방문자 영상 및 후술할 방문자 음성 입력부(260)로부터 입력되는 방문자의 음성신호를, 실시간으로 상기 외부 단말(20)에 전송하도록 구비된다. Also, the
따라서, 상기 외부 단말(20)을 소유한 경찰서, 관리자, 가족 또는 지인이 실시간으로 위험 상황을 모니터링할 수 있다.Therefore, a police station, an administrator, a family member or an acquaintance who owns the
또한, 상기 비상연락망(10)은 상기 신고부(250) 또는 상기 제어부(240)에 기설정된 경찰서, 관리자의 모바일폰, 가족 또는 지인의 모바일폰에 대한 전화 번호일 수 있고, 상기 외부 단말(20)은 사전에 설정된 모바일폰, 유선 또는 무선으로 연결된 퍼스널 컴퓨터 및 인터넷 망에 연결된 웹 상의 웹서버를 포함할 수 있다. 또한, 상기 비상연락망(10) 및 상기 외부 단말(20)은 근무자가 임의로 설정할 수 있도록 구비된다.The
바람직하게, 상기 신고부(250)는 유,무선 통신망 또는 인터넷망에 상시 연결되며, 예컨대, 전화통신망, 와이파이(Wifi), LTE, 블루투스 및 인터넷 통신 중에서 적어도 하나의 통신을 수행할 수 있는 통신모듈로 구비될 수 있다.The
상기 방문자 음성 입력부(260)는 방문자의 음성을 신호로 획득하기 위한 것으로, 예컨대, 마이크로 구비할 수 있으며, 방문자의 음성을 입력받아 상기 제어부(240) 또는 상기 저장부(230)로 전기적인 음성신호를 출력하도록 구비될 수 있다.The visitor
또한, 상기 방문자 음성 입력부(260)에서 출력되는 방문자의 음성신호는, 상기 저장부(230)에서 저장되거나 상기 신고부(250)를 통해 상기 외부 단말(20)로 전송될 수 있다.The visitor's voice signal output from the visitor
상기 경보부(270)는 비상 경보를 출력하기 위한 것으로, 상기 위험 상황의 발생 시 상기 제어부(240)의 제어하에 동작하여 비상 경보를 소리로 출력하도록 구비된다.The
즉, 본 발명의 제 2실시예에 따른 자동신고 시스템은, 근무자의 얼굴 표정을 인식하여 근무자의 위험 상황을 판단한 후 자동으로 신고 또는 위험 알림 메세지를 전송하고, 또한, 방문자 영상 및 방문자의 음성신호를 외부 단말(20)로 전송하도록 구비되므로, 근무자의 위험 상황을 신속하게 외부에 알릴 수 있음은 물론이고, 위험 상황을 야기한 방문자에 대한 증거자료를 확보할 수 있게 한다.
That is, the automatic reporting system according to the second embodiment of the present invention recognizes the facial expression of a worker, determines a dangerous situation of a worker, and automatically transmits a report or risk alert message, and also displays a visitor image and a voice signal To the
도 3은 본 발명의 제 1실시예에 따른 자동신고 방법을 설명하기 위한 도면이다.3 is a view for explaining an automatic reporting method according to the first embodiment of the present invention.
도 3을 참조하여, 본 발명의 제 1실시예에 따른 자동신고 시스템에서 수행되는 자동신고 방법을 설명한다. 다만, 도 3에 도시된 자동신고 방법에서 수행되는 기능은 모두 도 1을 참조하여 설명한 자동신고 시스템에서 수행되므로, 명시적인 설명이 없어도, 도 1을 참조하여 설명한 모든 기능은 본 발명의 바람직한 실시예에 따른 자동신고 방법에서 수행되고, 도 3을 참조하여 설명하는 모든 기능은 본 발명의 바람직한 실시예에 따른 자동신고 시스템에서 그대로 수행됨을 주의해야 한다.Referring to FIG. 3, an automatic reporting method performed in the automatic reporting system according to the first embodiment of the present invention will be described. However, since all the functions performed in the automatic reporting method shown in FIG. 3 are performed in the automatic reporting system described with reference to FIG. 1, all the functions described with reference to FIG. 1 are not described in the preferred embodiment And all the functions described with reference to FIG. 3 are performed in the automatic reporting system according to the preferred embodiment of the present invention.
먼저, 근무자의 얼굴 영상을 저장한 데이터베이스가 구축된다(S110).First, a database storing a face image of a worker is constructed (S110).
이때, 저장부에 근무자별로 복수의 얼굴 영상을 저장하여 상기 데이터베이스를 구축할 수 있으며, 근무자 촬영부를 이용하여 근무자의 얼굴 영상을 촬영하여 저장하게 된다.At this time, the database can be constructed by storing a plurality of face images for each worker in the storage unit, and the face image of the worker is photographed and stored using the worker photographing unit.
또한, 상기 복수의 얼굴 영상은 위험 상황을 나타내는 위험 상황 얼굴 영상 및 정상 상태의 얼굴 영상을 포함하며, 이때, 상기 위험 상황 얼굴 영상은 근무자가 얼굴을 찡그린 표정 또는 놀란 표정으로 촬영된 영상일 수 있다.In addition, the plurality of face images may include a dangerous situation facial image indicating a dangerous situation and a normal facial image, wherein the dangerous situation facial image may be an image of a worker having a facial expression or a surprised facial expression .
다음, 방문자를 대면하는 근무자의 얼굴 영상이 촬영된다(S120).Next, the face image of the worker facing the visitor is photographed (S120).
이때, 상기 근무자 촬영부는 적외선 카메라로 구비되어, 상기 근무자의 얼굴 영상을 촬영하여 제어부로 출력하게 된다.At this time, the worker photographing unit is provided with an infrared camera, and photographs the face image of the worker and outputs the image to the control unit.
다음, 근무자의 얼굴 영상과 상기 데이터베이스의 복수의 얼굴 영상을 비교하게 된다(S130).Next, the face image of the worker is compared with a plurality of face images of the database (S130).
이때, 상기 제어부는 상기 근무자 촬영부로부터 촬영되는 얼굴 영상을 상기 복수의 얼굴 영상과 비교하는 과정을 수행하며, 얼굴 영상 자체를 비교하거나 각 얼굴 영상의 특징적인 정보들을 비교하거나 얼굴 영상 자체와 이로부터 추출된 특징 정보를 모두 비교하게 된다.At this time, the control unit compares a face image photographed from the worker photographing unit with the plurality of face images, compares the face images themselves, compares characteristic information of each face image, And the extracted feature information is all compared.
다음, 근무자의 얼굴 영상에 대한 비교 결과에 따라, 위험 상황의 발생 여부를 판단한다(S140).Next, it is determined whether or not a dangerous situation occurs according to the result of the comparison of the face image of the employee (S140).
이때, 상기 제어부는 상기 근무자 촬영부로부터 입력된 얼굴 영상이, 상기 데이터베이스에 저장된 상기 위험 상황 얼굴 영상과 매칭되면 위험 상황이 발생한 것으로 판단하게 된다. 즉, 근무자의 얼굴 표정을 인식하여, 위험 상황의 발생 여부를 판단하게 되는 것이다.At this time, the controller determines that a dangerous situation occurs when the face image inputted from the worker photographing unit matches the dangerous situation face image stored in the database. That is, the facial expression of the worker is recognized and it is judged whether or not a dangerous situation occurs.
다만, 상기 제어부는 근무자의 얼굴 영상이 상기 정상 상태의 얼굴 영상과 매칭될 경우에는 근무자의 출근, 퇴근 또는 정상 근무가 이루어진 것으로 판단하도록 구비될 수 있다. 이 경우에는, 상기 정상 상태의 얼굴 영상에 대한 매칭 시간을 저장하여 출퇴근 보고 용도의 정보로 사용할 수 있다.However, when the face image of the worker is matched with the face image of the steady state, the controller may be configured to determine that the worker is going to work, leaving work or working normally. In this case, the matching time for the face image in the steady state can be stored and used as information for commuting report.
다음, 위험 상황의 발생에 따라, 비상연락망으로 신고 또는 위험 알림 메세지가 자동으로 전송된다(S150).Then, according to the occurrence of the dangerous situation, the notification or the danger warning message is automatically transmitted to the emergency communication network (S150).
이때, 신고부는 유,무선 통신망 또는 인터넷망에 상시 연결되어 있고 상기 비상연락망이 사전에 설정되어 있으므로, 별도의 사용자 명령이 입력되지 않더라도 자동으로 신고 또는 위험 알림 메세지를 전송시키게 된다. 또한, 경보부를 통해 상기 위험 상황의 발생에 따른 비상 경보를 소리로 출력할 수도 있다.At this time, since the notification unit is always connected to the wired, wireless communication network, or the Internet network and the emergency communication network is set in advance, the notification unit automatically transmits a notification or danger notification message even if no user command is input. In addition, the emergency alarm may be output through the alarm unit in response to the occurrence of the dangerous situation.
한편, 상기 제 S150단계가 수행된 이후에는, 상기 제 S120단계를 반복하여 수행할 수 있다.
After the step S150 is performed, the step S120 may be repeated.
도 4는 본 발명의 제 2실시예에 따른 자동신고 방법을 설명하기 위한 도면이다.4 is a view for explaining an automatic reporting method according to a second embodiment of the present invention.
도 4를 참조하여, 본 발명의 제 2실시예에 따른 자동신고 시스템에서 수행되는 자동신고 방법을 설명한다. 다만, 도 4에 도시된 자동신고 방법에서 수행되는 기능은 모두 도 2을 참조하여 설명한 자동신고 시스템에서 수행되므로, 명시적인 설명이 없어도, 도 2을 참조하여 설명한 모든 기능은 본 발명의 바람직한 실시예에 따른 자동신고 방법에서 수행되고, 도 4를 참조하여 설명하는 모든 기능은 본 발명의 바람직한 실시예에 따른 자동신고 시스템에서 그대로 수행됨을 주의해야 한다.Referring to FIG. 4, an automatic reporting method performed in the automatic reporting system according to the second embodiment of the present invention will be described. However, all functions performed in the automatic reporting method shown in FIG. 4 are performed in the automatic reporting system described with reference to FIG. 2, so that all the functions described with reference to FIG. 2 are not described in the preferred embodiment And all functions described with reference to FIG. 4 are performed in the automatic reporting system according to the preferred embodiment of the present invention.
한편, 도 4에서 도시된 제 S210단계 내지 제 S250단계에 대해, 도 3을 참조하여 설명한 본 발명의 제 1실시예에 따른 자동신고 방법의 제 S110단계 내지 제 S150단계의 설명과 중복되는 부분은 생략하고 차이를 갖는 부분에 대해 설명한다.Meanwhile, with respect to steps S210 to S250 shown in FIG. 4, a part overlapping with the description of steps S110 to S150 of the automatic reporting method according to the first embodiment of the present invention described with reference to FIG. 3 Explanation will be made on the part which is omitted and the difference is made.
먼저, 근무자의 얼굴 영상을 저장한 데이터베이스를 구축한 후(S210), 방문자를 대면하는 근무자의 얼굴 영상을 촬영하여(S220), 상기 촬영된 근무자의 얼굴 영상과 상기 데이터베이스의 복수의 얼굴 영상을 비교하고(S230), 근무자의 얼굴 영상에 대한 비교 결과에 따라 위험 상황의 발생 여부를 판단하며(S240), 위험 상황이 발생한 경우에는 비상연락망으로 신고 또는 위험 알림 메세지를 자동으로 전송하는 단계(S250)가 수행되게 된다.First, a database storing a face image of a worker is constructed (S210), a face image of a worker facing a visitor is photographed (S220), and a face image of the employee photographed is compared with a plurality of face images of the database (S230). In step S240, it is determined whether or not a dangerous situation occurs according to the comparison result of the face image of the worker (S240). If the dangerous situation occurs, .
이때, 상기 제 S220단계는, 방문자 촬영부 및 방문자 음성 입력부에 의해 방문자 영상 및 방문자의 음성신호가 더 수집될 수 있다.At this time, in step S220, the visitor image and the visitor's voice signal may be further collected by the visitor photographing unit and the visitor voice input unit.
또한, 상기 제 S240단계는, 상기 위험 상황이 발생하게 되면 상기 방문자 영상 및 상기 방문자의 음성 신호를 저장부에서 저장하여, 위험 상황을 야기한 방문자에 대하여 증거자료를 확보할 수 있게 한다.Also, in operation S240, when the dangerous situation occurs, the visitor image and the voice signal of the visitor are stored in the storage unit, so that the evidence data can be obtained for the visitor who caused the dangerous situation.
그리고, 상기 방문자 영상 및 방문자의 음성신호를 외부 단말로 전송하는 단계가 더 수행될 수 있다(S260).In addition, the step of transmitting the visitor image and the voice signal of the visitor to the external terminal may be further performed (S260).
이때, 신고부는 상기 비상연락망으로 신고 또는 위험 알림 메세지를 전송하면서 동시에 상기 방문자 영상 및 방문자의 음성신호를 전송하거나, 신고 또는 위험 알림 메세지를 전송한 이후에 상기 방문자 영상 및 방문자의 음성신호를 전송하게 된다. 바람직하게, 상기 방문자 영상은 방문자 촬영부로부터 실시간으로 촬영되는 영상이거나, 상기 방문자 촬영부로부터 촬영되어 저장부에 저장된 영상일 수 있다.At this time, the declaration unit transmits the visitor image and the voice signal of the visitor, or transmits the visitor image and the voice signal of the visitor after transmitting the notification signal or the risk alert message, while simultaneously transmitting the notification message or the risk alert message to the emergency contact network do. Preferably, the visitor image may be an image captured in real time from the visitor photographing unit, or an image captured from the visitor photographing unit and stored in the storage unit.
또한, 상기 외부 단말은 사전에 설정된 모바일폰, 유선 또는 무선으로 연결된 퍼스널 컴퓨터 및 인터넷 망에 연결된 웹 상의 웹서버일 수 있다.The external terminal may be a predetermined mobile phone, a wired or wirelessly connected personal computer, and a web server on the web connected to the Internet.
또한, 상기 제 S260단계가 수행된 이후에는, 상기 제 S220단계를 반복하여 수행하게 된다.
After the operation S260, the operation S220 is repeatedly performed.
본 발명의 각 실시예들은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기 테이프, 플라피디스크, 광데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The embodiments of the present invention can also be embodied as computer-readable codes on a computer-readable recording medium. A computer-readable recording medium includes all kinds of recording apparatuses in which data that can be read by a computer system is stored. Examples of the computer-readable recording medium include a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk, an optical data storage device, and the like, and also implemented in the form of a carrier wave (for example, transmission over the Internet) . The computer readable recording medium may also be distributed over a networked computer system so that computer readable code can be stored and executed in a distributed manner.
이상에서는 본 발명의 바람직한 실시예를 예시적으로 설명하였으나, 본 발명의 범위는 이와 같은 특정 실시예에만 한정되는 것은 아니며, 특허청구범위에 기재된 범주 내에서 적절하게 변경 가능한 것이다. While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the invention.
110, 210 : 근무자 촬영부
120, 230 : 저장부
130, 240 : 제어부
140, 250 : 신고부
150, 270 : 경보부
220 : 방문자 촬영부
260 : 방문자 음성 입력부110, 210:
120, and 230:
130, 240:
140, 250:
150, 270:
220: visitor shooting section
260: visitor voice input unit
Claims (22)
방문자를 대면하는 근무자의 얼굴 영상을 촬영하는 근무자 촬영부;
상기 근무자 촬영부와 촬영방향이 다르게 설정되어 근무자가 마주하는 방문자의 방문자 영상을 촬영하는 방문자 촬영부;
근무자의 얼굴 영상들(위험 상황을 나타내는 위험 상황 얼굴 영상을 포함함)을 저장하는 저장부;
상기 근무자 촬영부로부터 입력된 얼굴 영상을 상기 저장부에 저장된 복수의 얼굴 영상과 비교하여, 상기 얼굴 영상이 상기 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하고 상기 방문자 촬영부로부터 촬영된 방문자 영상을 상기 저장부에 저장하는 제어부;
상기 제어부의 제어하에, 상기 위험 상황의 발생을 기설정된 비상연락망으로 신고하거나 위험 알림 메세지로 전송하고, 상기 방문자 촬영부로부터 촬영되는 방문자 영상 또는 상기 저장부에 저장된 방문자 영상을 사전에 설정된 외부 단말로 전송하는 신고부;
상기 위험 상황의 발생 시, 상기 제어부의 제어하에 비상 경보를 소리로 출력하는 경보부; 및
방문자의 음성을 입력받아, 전기적인 음성신호로 출력하는 방문자 음성 입력부;를 포함하고,
상기 자동신고 시스템은, 로봇 형상의 외관을 갖도록 구비되며,
상기 제어부는, 상기 방문자 영상의 저장 시 방문자의 음성신호를 상기 저장부에서 더 저장하며,
상기 신고부는, 상기 방문자 영상의 전송 시 방문자의 음성신호를 더 전송하며,
상기 제어부는, 상기 근무자 촬영부로부터 입력된 얼굴 영상이 정상 상태의 얼굴 영상과 매칭될 경우에는 근무자의 출근, 퇴근 또는 정상 근무가 이루어지는 것으로 판단하며,
상기 근무자 촬영부 및 상기 방문자 촬영부는, 촬영각도 및 촬영위치 중에서 적어도 하나를 조절할 수 있도록 구비되는 것을 특징으로 하는 얼굴 인식을 이용한 자동신고 시스템.
An automatic reporting system installed in a place where a worker must deal with a visitor directly, including a convenience store, a personal store, and a bank,
A worker photographing section for photographing a face image of a worker facing a visitor;
A visitor photographing unit photographing a visitor image of a visitor who is set up differently from the photographing direction of the worker photographing unit and facing the worker;
A storage unit for storing face images of a worker (including a dangerous situation face image indicating a dangerous situation);
A face image input from the worker photographing unit is compared with a plurality of face images stored in the storage unit to determine that a dangerous situation occurs when the face image matches the dangerous situation face image, A controller for storing a visitor image in the storage unit;
The control unit controls the control unit to notify the occurrence of the dangerous situation to a predetermined emergency network or transmit it to the risk alert message, and send a visitor image photographed from the visitor photographing unit or a visitor image stored in the storage unit to a predetermined external terminal A notification part for transmitting;
An alarm unit for alerting an emergency alarm under the control of the control unit when the dangerous situation occurs; And
And a visitor voice input unit for receiving a voice of a visitor and outputting the voice as an electrical voice signal,
The automatic reporting system is provided to have a robot-like appearance,
Wherein the control unit further stores the visitor's voice signal in the storage unit when the visitor image is stored,
Wherein the notification unit further transmits a visitor's voice signal when the visitor image is transmitted,
Wherein the control unit determines that a worker arrives at work, leaves work, or performs normal work when a face image input from the worker photographing unit matches a normal face image,
Wherein the worker photographing unit and the visitor photographing unit are provided to adjust at least one of a photographing angle and a photographing position.
(A) 근무자별로 위험 상황 얼굴 영상 및 정상 상태의 얼굴 영상을 포함하는 복수의 얼굴 영상을 저장하여 데이터베이스를 구축하는 단계;
(1) 방문자를 대면하는 근무자의 얼굴 영상 및 근무자가 마주하는 방문자의 방문자 영상을 각각 촬영하는 단계;
(2) 근무자의 얼굴 영상을 입력받아, 상기 데이터베이스에 저장된 복수의 얼굴 영상과 비교하는 단계;
(3) 근무자의 얼굴 영상이, 기저장된 위험 상황 얼굴 영상과 매칭될 경우 위험 상황이 발생한 것으로 판단하고, 상기 촬영된 방문자 영상을 저장하는 단계;
(4) 상기 위험 상황의 발생을, 기설정된 비상연락망으로 신고하거나 위험 알림 메세지로 전송하는 단계; 및
(5) 상기 저장된 방문자 영상 또는 실시간으로 촬영되는 방문자 영상을, 사전에 설정된 외부 단말로 전송하는 단계;를 포함하고,
상기 제 (3)단계는, 상기 방문자 영상의 저장 시 방문자의 음성신호를 더 저장하고, 근무자의 얼굴 영상이 상기 정상 상태의 얼굴 영상과 매칭될 경우 근무자의 출근, 퇴근 또는 정상 근무가 이루어진 것으로 판단하며,
상기 제 (4)단계는, 상기 위험 상황의 발생에 따른 비상 경보를 소리로 출력하며,
상기 제 (5)단계는, 상기 방문자 영상의 전송 시 방문자의 음성신호를 더 전송하는 것을 특징으로 하는 얼굴 인식을 이용한 자동신고 방법.1. An automatic reporting method carried out in an automatic reporting system installed in a place where a worker should process a business through a face-to-face meeting with a visitor, including a convenience store, a personal store and a bank,
(A) constructing a database by storing a plurality of facial images including a face image of a critical condition and a face image of a normal state for each worker;
(1) photographing a face image of a worker facing a visitor and a visitor image of a visitor facing the worker, respectively;
(2) receiving a face image of a worker and comparing the face image with a plurality of face images stored in the database;
(3) storing the photographed visitor image when it is determined that a dangerous situation occurs when a face image of a worker is matched with a previously stored dangerous face image;
(4) reporting the occurrence of the dangerous situation to a predetermined emergency communication network or transmitting it as a danger notification message; And
(5) transmitting the stored visitor image or a visitor image photographed in real time to a predetermined external terminal,
The step (3) further stores the visitor's voice signal when storing the visitor image, and when the face image of the worker is matched with the face image of the normal state, it is judged that the worker is going to work, In addition,
Wherein the step (4) further comprises the steps of: outputting an emergency alarm according to the occurrence of the dangerous situation,
Wherein the step (5) further transmits a visitor's voice signal when the visitor image is transmitted.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150036223A KR101744184B1 (en) | 2015-03-16 | 2015-03-16 | System and method for reporting automatically using by face recognition |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020150036223A KR101744184B1 (en) | 2015-03-16 | 2015-03-16 | System and method for reporting automatically using by face recognition |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20160111277A KR20160111277A (en) | 2016-09-26 |
KR101744184B1 true KR101744184B1 (en) | 2017-06-12 |
Family
ID=57068541
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020150036223A KR101744184B1 (en) | 2015-03-16 | 2015-03-16 | System and method for reporting automatically using by face recognition |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101744184B1 (en) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108537980A (en) * | 2018-03-30 | 2018-09-14 | 百度在线网络技术(北京)有限公司 | Face recognition opens method, apparatus, storage medium and the terminal device of locker |
-
2015
- 2015-03-16 KR KR1020150036223A patent/KR101744184B1/en active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
KR20160111277A (en) | 2016-09-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
EP3229214B1 (en) | System and method for tracking unauthorized intruders using drones integrated with a security system | |
CN110933955B (en) | Improved generation of alarm events based on detection of objects from camera images | |
US20190026564A1 (en) | Video surveillance system and video surveillance method | |
KR101297295B1 (en) | Security control system by face recognition | |
KR101825045B1 (en) | Alarm method and device | |
KR101544019B1 (en) | Fire detection system using composited video and method thereof | |
KR101387469B1 (en) | Communication function of the mobile terminal using the remote control and security systems safe | |
KR20130085315A (en) | Method for video surveillance system based on human identification | |
KR101036947B1 (en) | The automatic guard system to prevent the crime and accident using computer video image analysis technology | |
CA2983316C (en) | Monitoring system having personal information protection function and method thereof | |
KR101381924B1 (en) | System and method for monitoring security using camera monitoring apparatus | |
KR101442669B1 (en) | Method and apparatus for criminal acts distinction using intelligent object sensing | |
KR101470314B1 (en) | Closed-circuit television system of automatic recognizing/classifying object and method thereof | |
KR20230004421A (en) | System for detecting abnormal behavior based on artificial intelligence | |
KR102233679B1 (en) | Apparatus and method for detecting invader and fire for energy storage system | |
JP2011145839A (en) | Monitoring system, device, method and program | |
US10510239B1 (en) | Systems and methods for managing alert notifications from a secured area | |
KR101744184B1 (en) | System and method for reporting automatically using by face recognition | |
JP2017167800A (en) | Monitoring system, information processor, monitoring method, and monitoring program | |
US9847016B2 (en) | System and method of communicating data from an alarm system to emergency services personnel | |
JP2019140652A (en) | Door bell | |
KR101167605B1 (en) | Intelligent controller using camera and method thereof | |
KR101524922B1 (en) | Apparatus, method, and recording medium for emergency alert | |
KR101223606B1 (en) | System for intelligently monitoring image for monitoring elevator | |
KR102313283B1 (en) | A artificial intelligence multipurpose emergency bell system with video analysis function |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) |