KR101687296B1 - 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법 - Google Patents
음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법 Download PDFInfo
- Publication number
- KR101687296B1 KR101687296B1 KR1020160086015A KR20160086015A KR101687296B1 KR 101687296 B1 KR101687296 B1 KR 101687296B1 KR 1020160086015 A KR1020160086015 A KR 1020160086015A KR 20160086015 A KR20160086015 A KR 20160086015A KR 101687296 B1 KR101687296 B1 KR 101687296B1
- Authority
- KR
- South Korea
- Prior art keywords
- event
- sound
- information
- control device
- frequency
- Prior art date
Links
- 238000004458 analytical method Methods 0.000 title claims abstract description 113
- 238000000034 method Methods 0.000 title claims abstract description 47
- 230000019771 cognition Effects 0.000 title 1
- 238000003909 pattern recognition Methods 0.000 claims abstract description 22
- 238000001514 detection method Methods 0.000 claims description 14
- 230000005540 biological transmission Effects 0.000 claims description 7
- 238000000605 extraction Methods 0.000 claims description 4
- 230000008054 signal transmission Effects 0.000 claims description 3
- 230000033001 locomotion Effects 0.000 description 16
- 238000004891 communication Methods 0.000 description 13
- 239000000284 extract Substances 0.000 description 5
- 238000010586 diagram Methods 0.000 description 4
- 238000010295 mobile communication Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 3
- 230000000712 assembly Effects 0.000 description 2
- 238000000429 assembly Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000002265 prevention Effects 0.000 description 2
- 238000006424 Flood reaction Methods 0.000 description 1
- 241001364096 Pachycephalidae Species 0.000 description 1
- 206010039203 Road traffic accident Diseases 0.000 description 1
- 206010039740 Screaming Diseases 0.000 description 1
- 230000003542 behavioural effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19654—Details concerning communication with a camera
- G08B13/1966—Wireless systems, other than telephone systems, used to communicate with a camera
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/16—Actuation by interference with mechanical vibrations in air or other fluid
- G08B13/1654—Actuation by interference with mechanical vibrations in air or other fluid using passive vibration detection systems
- G08B13/1672—Actuation by interference with mechanical vibrations in air or other fluid using passive vibration detection systems using sonic detecting means, e.g. a microphone operating in the audio frequency range
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19602—Image analysis to detect motion of the intruder, e.g. by frame subtraction
- G08B13/19608—Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B13/00—Burglar, theft or intruder alarms
- G08B13/18—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
- G08B13/189—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
- G08B13/194—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
- G08B13/196—Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
- G08B13/19617—Surveillance camera constructional details
- G08B13/1963—Arrangements allowing camera rotation to change view, e.g. pivoting camera, pan-tilt and zoom [PTZ]
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/02—Alarms for ensuring the safety of persons
- G08B21/0202—Child monitoring systems using a transmitter-receiver system carried by the parent and the child
- G08B21/028—Communication between parent and child units via remote transmission means, e.g. satellite network
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B21/00—Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
- G08B21/18—Status alarms
- G08B21/182—Level alarms, e.g. alarms responsive to variables exceeding a threshold
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/016—Personal emergency signalling and security systems
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/12—Manually actuated calamity alarm transmitting arrangements emergency non-personal manually actuated alarm, activators, e.g. details of alarm push buttons mounted on an infrastructure
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/14—Central alarm receiver or annunciator arrangements
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B27/00—Alarm systems in which the alarm condition is signalled from a central station to a plurality of substations
- G08B27/001—Signalling to an emergency team, e.g. firemen
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Child & Adolescent Psychology (AREA)
- Multimedia (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Computer Security & Cryptography (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computer Networks & Wireless Communication (AREA)
- Alarm Systems (AREA)
Abstract
본 발명은 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법에 관한 것이다. 본 발명은, 하나의 음향 주파수 인식 장치가 미리 설정된 범위의 주파수의 단발음을 감지하는 제 1 단계; 상기 음향 주파수 인식 장치가 단말음이 미리 설정된 임계치 데시벨(dB) 이상인지를 분석하여 음향 이벤트 발생 여부를 판단하는 제 2 단계; 음향 이벤트가 발생한 경우, 음향 주파수 인식 장치가 음성 이벤트 발생정보를 생성한 뒤 제어장치로 음성 이벤트 발생정보를 전송하는 제 3 단계; 상기 제어장치가 긴급 상황 발생 인지 분석을 개시하기 위해, 긴급 상황 발생 인지 분석을 위해 수신된 단발음을 감지한 음향 주파수 인식 장치로부터 단발음 주파수 정보를 수신하는 제 4 단계; 상기 제어장치가 단발음을 감지한 음향 주파수 인식 장치와 동일한 영역에 위치한 고정형 촬영장치로부터 영상 이벤트 정보를 수신하는 제 5 단계; 상기 제어장치가 상기 음성 이벤트 발생정보와 상기 영상 이벤트 정보를 통해 피사체의 긴급상황을 분석하고 긴급상황인 경우 회전형 카메라에 촬영되기 위한 대상 영역 또는 대상 객체에 관한 정보를 생성하는 제 6 단계; 상기 제어장치가 결정된 대상 영역 또는 대상 객체에 관한 정보를 단발음을 감지한 음향 주파수 인식 장치와 동일한 영역에 위치한 회전형 카메라로 전송하는 제 7 단계; 상기 회전형 카메라가 상기 제어장치로부터 결정된 대상 영역 또는 대상 객체가 촬영되도록 하여, 이벤트 촬영정보를 생성하여 상기 제어장치로 반송하는 제 8 단계; 및 상기 제어장치가 수신한 이벤트 촬영정보를 이용해 이벤트 분석값을 생성하여 이벤트 분석값과 맞는 메시지를 평판형 스피커로 출력하도록 제어하는 제 9 단계; 를 포함하며, 상기 제 5 단계는, 상기 제어장치가 긴급 상황 발생 인지 분석을 위해 수신된 단발음을 감지한 상기 음향 주파수 인식 장치로부터 단발음 주파수 정보를 수신하는 제 5-1 단계; 상기 제어장치가 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 음향 주파수에 해당하는지 여부를 판단하는 제 5-2 단계; 분석 결과 단발음이 도움 요청 음향 주파수에 해당하는 경우는 상기 제어장치가 제 1 영상 이벤트 감지를 수행하는데, 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라로부터 촬영된 영상으로부터 제 1 영상 이벤트(피사체 기반 긴급 상황 발생 증명 영상 이벤트 추출) 감지를 수행하며, 반대로 단발음이 도움 요청 음향 주파수에 해당하지 않는 경우 상기 제어장치가 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 도구에 의해 발생한 음향 주파수(호루라기 음향 주파수)에 해당하는지 여부를 판단하는 제 5-3 단계; 및 분석 결과 단발음이 도움 요청 도구에 의해 발생한 음향 주파수(호루라기 음향 주파수)에 해당하는 경우 상기 제어장치가 제 2 영상 이벤트 감지(피사체 및 도움 요청 도구 기반 긴급 상황 발생 증명 영상 이벤트 추출)를 수행하는데, 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라로부터 촬영된 영상으로부터 제 2 영상 이벤트 감지를 수행하며, 반대로 단발음이 호루라기 음향 주파수에 해당하지 않는 경우 상기 제어장치가 제 3 영상 이벤트 감지(두 개의 피사체 기반 긴급 상황 발생 증명 영상 이벤트 추출)를 수행하는 제 5-4 단계; 를 포함하며, 상기 제 6 단계는, 상기 제어장치가 상기 제 5 단계에서 단발음이 도움 요청 음향 주파수이며, 제 1 내지 제 3 영상 이벤트 중 적어도 하나 이상을 감지하는 경우 피사체의 긴급상황으로 분석한 뒤, 상기 회전형 카메라의 촬영 대상 영역 또는 대상 객체를 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하며, 상기 제 9 단계는, 상기 제어장치가 상기 이벤트 촬영정보를 이용해 이벤트 분석값을 생성시, 이벤트 분석값은 제 1 영상 이벤트와 매칭되는 '도움 이벤트 분석값', 제 2 영상 이벤트와 매칭되는 '도움 요청 도구(호루라기) 이벤트 분석값', 제 3 영상 이벤트와 매칭되는 '폭력 행사 이벤트 분석값', 그 밖의 노멀 이벤트와 매칭되는 '노멀 이벤트 분석값'으로 구분되며, 노멀 이벤트 분석값은, 긴급 상황 가능성 있는 이벤트 촬영정보의 경우(출입통제지역의 주출입문 주변에서 이동 객체가 이동하다가 주출입문에서 이동 객체가 일정한 시간 동안 배회하거나 주출입문을 마주한 채 일정한 시간 동안 정지해 있는 경우의 도난 가능성이 있는 상황)에 생성되는 것을 특징으로 한다.
이에 의해, 한 문장으로 말할 수 있는 2 내지 5초에 해당하는 단발음에 대한 음향 주파수를 기반으로 긴급상황에 높인 추적 대상을 1차적으로 선정하고, 이를 검증하기 위해 고정형 카메라에 의한 행동 패턴으로 필터링을 수행함으로써, 긴급상황에 놓인 추적 대상에 대한 선택 확률을 획기적으로 높여서 정밀한 추적이 가능한 효과를 제공한다.
이에 의해, 한 문장으로 말할 수 있는 2 내지 5초에 해당하는 단발음에 대한 음향 주파수를 기반으로 긴급상황에 높인 추적 대상을 1차적으로 선정하고, 이를 검증하기 위해 고정형 카메라에 의한 행동 패턴으로 필터링을 수행함으로써, 긴급상황에 놓인 추적 대상에 대한 선택 확률을 획기적으로 높여서 정밀한 추적이 가능한 효과를 제공한다.
Description
본 발명은 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법에 관한 것으로, 보다 구체적으로는, "주로 실내에서" 한 문장으로 말할 수 있는 2 내지 5초에 해당하는 단발음에 대한 음향 주파수를 기반으로 긴급상황에 높인 추적 대상을 1차적으로 선정하고, 이를 검증하기 위해 고정형 카메라에 의한 행동 패턴으로 필터링을 수행함으로써, 긴급상황에 놓인 추적 대상에 대한 선택 확률을 획기적으로 높여서 정밀한 추적이 가능하도록 하기 위한 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법에 관한 것이다.
근래에 이르러 범죄 발생을 예방하기 위해 우범지역이나 한적한 장소에 감시 카메라가 설치되는 경우가 빈번해지고 있으며, 유동 인구가 많거나 차량 통행이 많아 사고 위험이 빈번한 장소에서도 사고 수습 목적으로 감시카메라가 설치되고 있다.
이러한 감시 카메라 설치 시에는 설치 비용에 비해 얼마나 많은 정보를 획득할 수 있는지에 대한 여부와 사각지역에 대한 해결 여부가 관건이 된다.
이에 따라, 해당 기술분야에서는 자동으로 긴급상황을 인식하여 관제센터에 통지하기 위한 정밀 분석 기술이 요구되고 있다.
한편, 종래의 기술 1에 해당하는 대한민국 특허등록공보 등록번호 제10-1291728호 "카메라의 상승 및 하강이 가능한 CCTV 폴 시스템(CCTV POLE SYSTEM CAPABLE OF MOVING CAMERA UP AND DOWN)"은 CCTV 카메라 등을 폴 상단부에 간편하게 설치하거나 폴 하단부로 내려 효율적으로 점검 및 보수할 수 있는 카메라의 상승 및 하강이 가능한 CCTV 폴 시스템에 관한 것이나, 이는 상부 하부에 대한 높이 조절을 통해 객체에 대한 효율적인 감시에 목적이 있을 뿐, 객체에 대한 효과적인 인식 및 추적에 대해서는 제시하지 못하는 한계점이 있다.
종래의 기술 2에 해당하는 대한민국 특허등록공보 등록번호 제10-1581795호 "CCTV 카메라가 내장된 LED 가로등 제조방법(MANUFACTURING METHOD OF LED STREET LIGHT WITH CCTV CAMERA)"은 차량이 주행하는 도로를 조명하기 위한 가로등 또는 주택가에 설치되어 보행자들이 보행하는 도로를 조명하기 위한 보안등을 비롯하여 소정의 피조물을 조명하는데 사용되는 LED(Light Emitting Diode) 조명등에 CCTV(Closed Circuit Television) 카메라를 구비하여 소정의 피사체를 촬영할 수 있도록 하는 CCTV 카메라가 내장된 LED 가로등에 관한 것이나, 이는 선명한 피사체의 영상을 획득하는 것에 목적이 있을 뿐, 객체에 대한 효과적인 인식 및 추적에 대해서는 제시하지 못하는 한계점이 있다.
종래의 기술 3에 해당하는 대한민국 특허공개공보 공개번호 제10-2016-0070922호 "지하철 객실 감시 CCTV시스템 및 그것을 이용한 지하철 객실정보 전송방법(Surveillance CCTV system for subway cabin and transmission method for subway cabin information using the same)"은 지하철 객실 내의 상황을 역사에서 실시간으로 체크할 수 있도록 해상도 높은 정보를 끊김 없이 전송할 수 있도록 한 지하철 객실 감시 CCTV시스템 및 그것을 이용한 지하철 객실정보 전송방법에 관한 것이나, 지하철에 한정되어 외부의 도로에서의 광범위용 CCTV 시스템으로 사용할 수는 없는 한계점이 있다.
종래의 기술 4에 해당하는 대한민국 특허등록공보 등록번호 제10-1507978호 "다목적 CCTV 방범 시스템(VERSATILE CLOSED CIRCUIT TELEVISION SECURITY SYSTEM)"은 다목적 CCTV 방범 시스템에 관한 것으로, 화장실의 내부에 배치되어, 사용자의 푸시 명령에 상응하는 무선 신호를 송출하는 비상 버튼; 상기 화장실의 내부에 배치되어, 상기 비상 버튼으로부터의 상기 무선 신호를 수신하는 무선 비상벨 수신기; 상기 무선 비상벨 수신기로부터 상기 무선 신호를 수신하면, 비상시 무선 신호를 송신하도록 제어하는 신호 처리부; 상기 신호 처리부의 제어에 의해 상기 비상시 무선 신호를 송신하는 무선 송신부; 상기 송신된 상기 비상시 무선 신호를 수신하는 무선 수신부; 및 상기 무선 수신부가 설치되며, 상기 무선 수신부에 상기 비상시 무선 신호가 수신되면 동작하는 CCTV 카메라를 포함하는 CCTV 방범 폴;을 포함함으로써, 주로 실내에서 CCTV를 활용한 감시 방법으로 실외에서는 긴급상황을 감시할 수 없는 한계점이 있다.
본 발명은 상기의 문제점을 해결하기 위한 것으로, 한 문장으로 말할 수 있는 2 내지 5초에 해당하는 단발음에 대한 음향 주파수를 기반으로 긴급상황에 높인 추적 대상을 1차적으로 선정하고, 이를 검증하기 위해 고정형 카메라에 의한 행동 패턴으로 필터링을 수행함으로써, 긴급상황에 놓인 추적 대상에 대한 선택 확률을 획기적으로 높여서 정밀한 추적이 가능하도록 하기 위한 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법을 제공하기 위한 것이다.
그러나 본 발명의 목적들은 상기에 언급된 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
상기의 목적을 달성하기 위해 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법은, 하나의 음향 주파수 인식 장치가 미리 설정된 범위의 주파수의 단발음을 감지하는 제 1 단계; 상기 음향 주파수 인식 장치가 단말음이 미리 설정된 임계치 데시벨(dB) 이상인지를 분석하여 음향 이벤트 발생 여부를 판단하는 제 2 단계; 음향 이벤트가 발생한 경우, 음향 주파수 인식 장치가 음성 이벤트 발생정보를 생성한 뒤 제어장치로 음성 이벤트 발생정보를 전송하는 제 3 단계; 상기 제어장치가 긴급 상황 발생 인지 분석을 개시하기 위해, 긴급 상황 발생 인지 분석을 위해 수신된 단발음을 감지한 음향 주파수 인식 장치로부터 단발음 주파수 정보를 수신하는 제 4 단계; 상기 제어장치가 단발음을 감지한 음향 주파수 인식 장치와 동일한 영역에 위치한 고정형 촬영장치로부터 영상 이벤트 정보를 수신하는 제 5 단계; 상기 제어장치가 상기 음성 이벤트 발생정보와 상기 영상 이벤트 정보를 통해 피사체의 긴급상황을 분석하고 긴급상황인 경우 회전형 카메라에 촬영되기 위한 대상 영역 또는 대상 객체에 관한 정보를 생성하는 제 6 단계; 상기 제어장치가 결정된 대상 영역 또는 대상 객체에 관한 정보를 단발음을 감지한 음향 주파수 인식 장치와 동일한 영역에 위치한 회전형 카메라로 전송하는 제 7 단계; 상기 회전형 카메라가 상기 제어장치로부터 결정된 대상 영역 또는 대상 객체가 촬영되도록 하여, 이벤트 촬영정보를 생성하여 상기 제어장치로 반송하는 제 8 단계; 및 상기 제어장치가 수신한 이벤트 촬영정보를 이용해 이벤트 분석값을 생성하여 이벤트 분석값과 맞는 메시지를 평판형 스피커로 출력하도록 제어하는 제 9 단계; 를 포함하며, 상기 제 5 단계는, 상기 제어장치가 긴급 상황 발생 인지 분석을 위해 수신된 단발음을 감지한 상기 음향 주파수 인식 장치로부터 단발음 주파수 정보를 수신하는 제 5-1 단계; 상기 제어장치가 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 음향 주파수에 해당하는지 여부를 판단하는 제 5-2 단계; 분석 결과 단발음이 도움 요청 음향 주파수에 해당하는 경우는 상기 제어장치가 제 1 영상 이벤트 감지를 수행하는데, 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라로부터 촬영된 영상으로부터 제 1 영상 이벤트(피사체 기반 긴급 상황 발생 증명 영상 이벤트 추출) 감지를 수행하며, 반대로 단발음이 도움 요청 음향 주파수에 해당하지 않는 경우 상기 제어장치가 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 도구에 의해 발생한 음향 주파수(호루라기 음향 주파수)에 해당하는지 여부를 판단하는 제 5-3 단계; 및 분석 결과 단발음이 도움 요청 도구에 의해 발생한 음향 주파수(호루라기 음향 주파수)에 해당하는 경우 상기 제어장치가 제 2 영상 이벤트 감지(피사체 및 도움 요청 도구 기반 긴급 상황 발생 증명 영상 이벤트 추출)를 수행하는데, 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라로부터 촬영된 영상으로부터 제 2 영상 이벤트 감지를 수행하며, 반대로 단발음이 호루라기 음향 주파수에 해당하지 않는 경우 상기 제어장치가 제 3 영상 이벤트 감지(두 개의 피사체 기반 긴급 상황 발생 증명 영상 이벤트 추출)를 수행하는 제 5-4 단계; 를 포함하며, 상기 제 6 단계는, 상기 제어장치가 상기 제 5 단계에서 단발음이 도움 요청 음향 주파수이며, 제 1 내지 제 3 영상 이벤트 중 적어도 하나 이상을 감지하는 경우 피사체의 긴급상황으로 분석한 뒤, 상기 회전형 카메라의 촬영 대상 영역 또는 대상 객체를 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하며, 상기 제 9 단계는, 상기 제어장치가 상기 이벤트 촬영정보를 이용해 이벤트 분석값을 생성시, 이벤트 분석값은 제 1 영상 이벤트와 매칭되는 '도움 이벤트 분석값', 제 2 영상 이벤트와 매칭되는 '도움 요청 도구(호루라기) 이벤트 분석값', 제 3 영상 이벤트와 매칭되는 '폭력 행사 이벤트 분석값', 그 밖의 노멀 이벤트와 매칭되는 '노멀 이벤트 분석값'으로 구분되며, 노멀 이벤트 분석값은, 긴급 상황 가능성 있는 이벤트 촬영정보의 경우(출입통제지역의 주출입문 주변에서 이동 객체가 이동하다가 주출입문에서 이동 객체가 일정한 시간 동안 배회하거나 주출입문을 마주한 채 일정한 시간 동안 정지해 있는 경우의 도난 가능성이 있는 상황)에 생성되는 것을 특징으로 한다.
이때, 상기 제 9 단계는, 상기 제어장치가 생성된 이벤트 분석값이 복수개인지에 대한 여부를 판단하는 제 9-1 단계; 상기 제어장치가 촬영이 결정된 대상 영역에서 이동 객체가 복수개로 확인되는 경우, 복수의 이벤트 분석값 중 우선순위에 따라 최우선되는 이벤트 분석값을 선택하는 제 9-2 단계; 상기 제어장치가 선택된 이벤트 분석값에 대응되는 이벤트 분석값에 대응되는 메시지를 추출하는 제 9-3 단계; 상기 제어장치가 추출된 메시지에 대응되는 음향정보를 평판형 스피커로 전송하는 제 9-4 단계; 및 상기 평판형 스피커가 음향정보를 추신하여 음향정보가 음성 또는 경보음으로 출력하는 제 9-5 단계; 를 더 포함하며, 상기 우선순위는, '도움 이벤트 분석값', '도움 요청 도구(호루라기) 이벤트 분석값', 폭력 행사 이벤트 분석값', '노멀 이벤트 분석값'에 대한 순서를 통해 설정될 되는 것을 특징으로 한다.
또한, 고정형 카메라, 회전형 카메라, 스피커, 음향 주파수 인식 장치 및 비콘 무선 신호 송수신부가 셋트화되어 기확정된 감시 대상 영역의 주변의 현장에 설치되고, 상기 제어장치가 외부의 관제센터에 별도로 설치되는 경우, 상기 관제센터의 제어장치가 각 모바일단말 중 안전귀가 어플을 실행한 모바일단말로부터 비콘 무선 신호를 수신하도록 셋트화되어 기확정된 감시 대상 영역의 각 주변의 현장의 상기 비콘 무선 신호 송수신부를 제어하여 네트워크를 통해 수신한 뒤, 송출 귀가 위치를 미리 설정된 지인의 모바일단말로 송출하는 것을 특징으로 하는 한다.
이때, 상기 제 9 단계는, 상기 제어장치가 생성된 이벤트 분석값이 복수개인지에 대한 여부를 판단하는 제 9-1 단계; 상기 제어장치가 촬영이 결정된 대상 영역에서 이동 객체가 복수개로 확인되는 경우, 복수의 이벤트 분석값 중 우선순위에 따라 최우선되는 이벤트 분석값을 선택하는 제 9-2 단계; 상기 제어장치가 선택된 이벤트 분석값에 대응되는 이벤트 분석값에 대응되는 메시지를 추출하는 제 9-3 단계; 상기 제어장치가 추출된 메시지에 대응되는 음향정보를 평판형 스피커로 전송하는 제 9-4 단계; 및 상기 평판형 스피커가 음향정보를 추신하여 음향정보가 음성 또는 경보음으로 출력하는 제 9-5 단계; 를 더 포함하며, 상기 우선순위는, '도움 이벤트 분석값', '도움 요청 도구(호루라기) 이벤트 분석값', 폭력 행사 이벤트 분석값', '노멀 이벤트 분석값'에 대한 순서를 통해 설정될 되는 것을 특징으로 한다.
또한, 고정형 카메라, 회전형 카메라, 스피커, 음향 주파수 인식 장치 및 비콘 무선 신호 송수신부가 셋트화되어 기확정된 감시 대상 영역의 주변의 현장에 설치되고, 상기 제어장치가 외부의 관제센터에 별도로 설치되는 경우, 상기 관제센터의 제어장치가 각 모바일단말 중 안전귀가 어플을 실행한 모바일단말로부터 비콘 무선 신호를 수신하도록 셋트화되어 기확정된 감시 대상 영역의 각 주변의 현장의 상기 비콘 무선 신호 송수신부를 제어하여 네트워크를 통해 수신한 뒤, 송출 귀가 위치를 미리 설정된 지인의 모바일단말로 송출하는 것을 특징으로 하는 한다.
삭제
삭제
삭제
본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법은, 한 문장으로 말할 수 있는 2 내지 5초에 해당하는 단발음에 대한 음향 주파수를 기반으로 긴급상황에 높인 추적 대상을 1차적으로 선정하고, 이를 검증하기 위해 고정형 카메라에 의한 행동 패턴으로 필터링을 수행함으로써, 긴급상황에 놓인 추적 대상에 대한 선택 확률을 획기적으로 높여서 정밀한 추적이 가능한 효과를 제공한다.
도 1은 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템을 나타내는 도면이다.
도 2 및 도 3은 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 중 음향 인식 기반의 방식을 나타내는 흐름도이다.
도 4는 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 중 음향 인식 기반의 방식을 나타내는 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템을 나타내는 도면이다.
도 2 및 도 3은 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 중 음향 인식 기반의 방식을 나타내는 흐름도이다.
도 4는 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 중 음향 인식 기반의 방식을 나타내는 흐름도이다.
도 5는 본 발명의 다른 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템을 나타내는 도면이다.
이하, 본 발명의 바람직한 실시예의 상세한 설명은 첨부된 도면들을 참조하여 설명할 것이다. 하기에서 본 발명을 설명함에 있어서, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다.
본 명세서에 있어서는 어느 하나의 구성요소가 다른 구성요소로 데이터 또는 신호를 '전송'하는 경우에는 구성요소는 다른 구성요소로 직접 상기 데이터 또는 신호를 전송할 수 있고, 적어도 하나의 또 다른 구성요소를 통하여 데이터 또는 신호를 다른 구성요소로 전송할 수 있음을 의미한다.
도 1은 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템을 나타내는 도면이다. 도 1을 참조하면, 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템은 획득한 영상 정보를 이용해 촬영된 대상 영역 또는 대상 객체를 추적하고, 대상 영역 또는 대상 객체의 패턴을 분석하여 분석된 결과값에 대응되는 음성 또는 경보음이 출력되도록 한다.
그리고 본 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템은 결과값에 따라 다른 음성 또는 경보임이 출력되도록 함으로써 응급상황이 발생되면 주변에서 응급상황을 인지할 수 있도록 하거나, 범죄 상황이 발생되면 주변에서 범죄 상황을 인지하도록 하여 응급상황에 대한 빠르게 대처하거나 범죄자의 범행을 사전에 방지할 수 있도록 한다.
이를 위해 본 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템은 고정형 카메라 집합체(100G; 100-1 내지 100-N, N은 2 이상의 자연수), 회전형 카메라 집합체(200G; 200-1 내지 200-N), 제어장치(300), 지향성 평판형 스피커 집합체(400G; 400-1 내지 400-N), 음성 인식 주파수 장치 집합체(500G; 500-1 내지 500-N), 그리고 비콘 무선 신호 송수신부 집합체(600G; 600-1 내지 600-N)를 포함하도록 구성된다.
고정형 카메라 집합체(100G)를 이루는 각 고정형 카메라(100)는 기설정된 영역을 촬영하고 특정 이벤트가 발생하는지에 대한 여부를 감지하기 위해 마련된다.
이를 위해 고정형 카메라(100)는 기설정된 영역이 광범위하게 촬영될 수 있는 곳에 위치된다.
구체적으로, 본 실시예에 따른 객체 추적 시스템이 출입통제지역에 사용되는 경우라면 고정형 카메라(100)는 출입통제지역을 입출(入出)할 수 있는 문과 그 문 주변에 위치된 창문 등을 촬영할 수 있는 곳에 위치된다.
그리고 고정형 카메라(100)는 기설정된 영역이 촬영되도록 하면서 특정 영상 이벤트인 제 1 내지 제 3 영상 이벤트, 노멀 이벤트가 감지되면 제 1 내지 제 3 영상 이벤트, 노멀 이벤트 발생정보를 생성하여 제어장치(300)로 전송한다.
여기에서, 제 1 영상 이벤트는 특정 영역 내에서 "피사체가 뛰어가는 것", "피사체가 손을 흔드는 것", "피사체가 넘어져 있는 것" 등과 같이 도움 요청이 감지되는 경우를 나타내며, 제 2 영상 이벤트는 특정 영역 내에서 "피사체가 호루라기를 물거나 들고 있는 것", "피사체가 호루라기를 물거나 들고 뛰어가는 것", "피사체가 호루라기를 물거나 들고 손을 흔드는 것", "피사체가 호루라기를 물거나 들고 넘어져 있는 것" 등과 같이 호루라기를 통해 도움 요청이 감지되는 경우를 나타내며, 제 3 영상 이벤트는 특정 영역 내에서 "두 개의 피사체가 엉켜있는 것", "두 개의 피사체가 미리 설정된 간격 미만에 위치하는 것", "두 개의 피사체가 엉켜있거나 미리 설정된 간격 미안에 위치한 상태에서 두 개의 피사체 중 적어도 하나 이상이 넘어져 있거나, 손을 흔드는 것" 등과 같이 제 1 영상 이벤트 및 제 2 영상 이벤트를 제외한 긴급상황의 개연성이 높은 경우를 나타내며, 마지막으로, 노멀 이벤트는 특정 영역 내에서 적어도 움직이는 피사체가 감지되는 경우를 나타낸다. 즉, 고정형 카메라(100)는 특정 영역 내에 움직이는 피사체의 존재 여부를 감지하는 기능을 수행하게 된다.
이를 위해 고정형 카메라(100)는 도면에는 미도시 되었으나 이동객체를 감지하거나 소리를 인식할 수 있는 감지센서를 포함할 수 있다.
그리고 고정형 카메라(100)에서 생성되는 제 1 내지 제 3 영상 이벤트, 노멀 이벤트 발생정보는 고정형 카메라(100) 고유의 식별정보, 시간정보, 소리정보, 영상정보 중 적어도 하나를 포함한다.
여기서 고유의 식별정보는 고정형 카메라(100)의 시리얼넘버, 고정형 카메라(100)가 촬영하고 있는 영역의 좌표 정보 등 고정형 카메라(100)에 미리 설정되어 있는 모든 종류의 정보들일 수 있다.
또한, 고정형 카메라(100)는 도시된 바와 같이 복수개로 마련되어 제어장치(300)와 정보를 송수신할 수도 있다.
한편 회전형 카메라(200)는 결정된 대상 영역 또는 결정된 객체를 추적촬영하기 위해 사용되고, 회전형 카메라(200)는 대상 영역 또는 객체를 확대하거나 축소하기 위해 렌즈가 회전하거나 줌 인-아웃(zoom in-out)되도록 마련된다.
그리고, 회전형 카메라(200)는 고정형 카메라(100)에서 생성된 이벤트 발생정보에 따라 결정된 대상 영역 또는 결정된 객체 정보를 제어장치(300)로부터 수신한다.
음향 주파수 인식 장치(500)에서 제어장치(300)로 음향 이벤트 발생정보를 전송하고, 고정형 카메라(100)에서 제어장치(300)로 제 1 내지 제 3 영상 이벤트, 노멀 이벤트 발생정보를 전송하면, 제어장치(300)는 음향 이벤트 발생정보와 제 1 내지 제 3 영상 이벤트, 노멀 이벤트 발생정보를 이용하여 종합적으로 판단하여 회전형 카메라(200)가 촬영해야 하는 영역 또는 촬영해야 하는 객체를 결정하고, 결정된 대상 영역 또는 결정된 객체에 대한 정보를 회전형 카메라(200)로 전송하게 되는데, 이와 관련해서는 후술할 제어장치(300)에서 보다 자세히 설명하기로 한다.
또한, 회전형 카메라(200)는 결정된 대상 영역 또는 결정된 객체를 촬영하여 이벤트 촬영정보를 생성하고, 촬영된 이벤트 촬영정보를 제어장치(300)로 전송한다.
이를 위해 회전형 카메라(200)는 제 1 내지 제 3 영상 이벤트, 노멀 이벤트 발생정보를 생성한 하나의 '고정형 카메라(100)', 그리고 음향 이벤트 발생정보를 생성한 하나의 '음향 주파수 인식 장치(500)'와 매칭되어 주변에 위치되어 결정된 대상 영역 또는 결정된 객체가 촬영되도록 한다.
구체적으로, 이상에와 같이 출입통제구역에 본 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템이 사용되는 경우를 예로 들면, 이벤트 발생정보(음향 이벤트 발생정보, 그리고 제 1 내지 제 3, 노멀 이벤트 발생정보)에 따라 제어장치(300)로부터 수신된 결정된 객체가 출입통제구역에 형성된 문 주변에 위치한 사람이라면 회전형 카메라(200)는 사람을 인식하여 사람의 움직임에 따라 렌즈를 이동시켜 사람을 촬영함으로써 이벤트 촬영정보를 생성한다.
그리고 회전형 카메라(200)는 고정형 카메라(100) 및 음향 주파수 인식 장치(500)와 마찬가지로 도시된 바와 같이 복수개로 마련되어 제어장치(300)와 정보를 송수신할 수도 있다.
이를 통해 최초로 제어장치(300)로부터 결정된 객체 정보를 수신한 회전형 카메라(200)가 더 이상 사람을 인식할 수 없는 경우에는, 제어장치(300)를 통해 최초의 회전형 카메라(200) 주변에 위치되되 객체의 이동방향에 위치된 다른 회전형 카메라(200)를 통해 객체의 추가 추적이 가능할 수도 있다.
한편, 제어장치(300)는 고정형 카메라(100), 회전형 카메라(200) 및 평판형 스피커(400), 음향 주파수 인식 장치(500)를 제어하고, 이벤트 발생시 음향 및 영상 이벤트를 분석하여 분석된 결과값에 따라 음성 또는 경보음이 자동으로 송출되도록 하기 위해 마련된다.
그리고 제어장치(300)는 고정형 카메라(100), 회전형 카메라(200), 평판형 스피커(400), 음향 주파수 인식 장치(500)의 주변에 설치되거나, 별도의 서버로 마련 되는데, 별도의 서버로 마련되는 경우에는 도시된 바와 같이 다수의 고정형 카메라(100-1 내지 100-N), 회전형 카메라(200-1 내지 200-N), 평판형 스피커(400-1 내지 400-N), 음향 주파수 인식 장치(500-1 내지 500-N)들과 정보를 송수신한다.
또한, 제어장치(300)는 통신부(310), 이동객체 인식부(320), 패턴분석부(330), 메시지DB부(340) 및 제어부(350)를 포함하도록 구성된다.
통신부(310)는 제어장치(300)가 고정형 카메라(100), 회전형 카메라(200) 및 평판형 스피커(400), 음향 주파수 인식 장치(500)와 정보를 송수신하기 위해 마련되는 것으로, 고정형 카메라(100)로부터 이벤트 발생정보를 수신하고, 이동객체 인식부(320)를 통해 결정된 촬영되어야 하는 대상 영역 또는 객체정보를 회전형 카메라(200)로 전송한다.
그리고 통신부(310)는 회전형 카메라(200)가 결정된 대상 영역 또는 결정된 객체를 추적촬영하여 생성한 이벤트 촬영정보를 수신하여 제어부(350)로 전송하고, 메시지DB부(340)에 저장된 소리정보를 평판형 스피커(400)로 전송한다.
한편, 이동객체 인식부(320)는 통신부(310)를 통해 수신된 이벤트 발생정보를 통해 회전형 카메라(200)가 촬영해야 하는 대상 영역 또는 대상 객체를 결정하고, 이벤트 발생정보에서 결정된 대상 객체를 검지하여 결정된 대상 객체의 이동 좌표를 생성하기 위해 마련된다.
구체적으로, 출입통제구역의 주출입문에서 '음향'이 감지되는 경우를 예로 들면 이동객체 인식부(320)는 주출입문을 촬영 대상 영역으로 결정하고 움직임의 원인이 된 객체를 검지하여 촬영되어야 하는 객체를 결정하며, 결정된 객체의 이동이 지속적으로 감지되면 결정된 객체가 추적 촬영될 수 있도록 결정된 객체의 이동 방향 및 이동 좌표를 생성한다.
그리고 이동객체 인식부(320)는 결정된 대상 영역 또는 대상 객체정보 및 객체의 이동 방향 및 이동 좌표가 통신부(310)를 통해 회전형 카메라(200)로 전송되도록 한다.
한편, 패턴분석부(330)는 회전형 카메라(200)를 통해 수신한 이벤트 촬영정보를 통해 대상 영역 또는 대상 객체의 상황 및 행동패턴을 분석하여 이벤트 분석값을 생성하기 위해 마련된다.
그리고 패턴분석부(330)에는 대상 영역 또는 대상 객체의 상황 및 행동패턴에 따른 이벤트 분석값이 미리 저장되어 있거나 생성된 이벤트 분석값을 저장하고, 이벤트 분석값은 기설정된 우선순위가 설정되어 저장된다.
여기서 우선순위는 응급상황도에 따라 설정되며 응급상황도는 자연재해, 위험물, 폭력, 대상 객체의 위급도, 도난 중 적어도 하나를 기준으로 설정된 순위일 수 있다.
자연재해라 함은 홍수, 해일, 폭우 등과 관련된 정보이고, 위험물은 폭발물, 총포류 등을 포함하는 무기와 관련된 정보이며, 폭력은 단일 또는 다수의 객체 간의 충돌 등을 의미할 수 있다. 물론 이는 예시적 사항에 불과할 뿐, 본 실시예에 따른 응급상황도는 더 세분화되어 분류될 수도 있다.
그리고 본 실시예에서의 응급상황도는 단일의 카테고리로 설정될 수도 있지만 다수의 카테고리가 조합되어 설정될 수도 있다. 예를 들면 위험물과 관련된 분석값과 폭력과 관련된 분석값이 동시에 분석되었고, 폭력와 관련된 분석값과 도난과 관련된 분석값이 동시에 분석된 경우에는 위험물과 폭력의 조합이 폭력과 도난의 조합보다 응급상황도가 높게 설정되는 것이다.
또한, 패턴분석부(330)는 보다 정밀하게 상황을 판단하기 위해 정밀 패턴분석부를 더 포함할 수도 있을 것이며, 정밀 패턴분석부를 더 포함하게 되는 경우에는 패턴분석부(330)에서 생성된 분석값을 이용하여 분석값을 더 세분화된 카테고리별로 분류하도록 할 수도 있다.
한편, 메시지DB부(340)는 패턴분석부(330)에서 생성한 이벤트 분석값에 대응되는 메시지 및 메시지에 따라 평판형 스피커(400)에서 출력되어야 하는 음향정보가 저장된다.
메시지DB부(340)에 저장되는 소리정보는 평판형 스피커(400)를 통해서 사람의 음성이나 사이렌과 같은 경보음으로 출력될 수 있는 정보이고, 메시지에 대응되어 저장된다.
한편 제어부(350)는 통신부(310), 이동객체 인식부(320), 패턴분석부(330) 및 메시지DB부(340)를 제어하여 제어장치(300)가 고정형 카메라(100), 회전형 카메라(200) 및 평판형 스피커(400), 음향 주파수 인식 장치(500)와 정보를 송수신하도록 한다.
구체적으로 제어부(350)는 고정형 카메라(100)로부터 제 1 내지 제 3 이벤트 발생정보, 노멀 이벤트 발생정보가 수신되고, 음향 주파수 인식 장치(500)로부터 음향 이벤트 발생정보를 수신하도록 통신부(310)를 제어하며, 이동객체 인식부(320)가 수신된 제 1 내지 제 3 이벤트 발생정보, 음향 이벤트 발생정보를 통해 회전형 카메라(200)가 촬영해야 하는 대상 영역 또는 대상 객체를 결정하고, 결정된 대상 객체를 검지하여 결정된 대상 객체의 이동 좌표를 생성하도록 한다.
그리고 제어부(350)는 이동객체 인식부(320)에서 결정된 대상 영역 또는 대상 객체와 이상에서 생성된 이동 좌표가 통신부(310)를 통해 회전형 카메라(200)로 전송되도록 하고, 통신부(310)를 통해 회전형 카메라(200)로부터 생성되는 이벤트 촬영정보를 수신하여 패턴분석부(330)로 전송한다.
또한 제어부(350)는 패턴분석부(330)에서 생성된 이벤트 분석값에 대응되는 메시지를 메시지DB부(340)에서 추출하고 추출된 메시지에 따라 출력되어야 하는 음향정보를 통신부(310)를 통해 평판형 스피커(400)로 전송되도록 한다.
한편 평판형 스피커(400)는 이벤트 분석값에 따른 음향정보를 사람의 음성 또는 경보음으로 출력하기 위해 마련되는 것으로, 제어장치(300)로부터 소리정보를 수신한다.
도시된 예에서는 평판형 스피커(400)가 별도의 구성요소로 마련되는 것으로 상정하였으나, 이는 설명의 편의를 위한 예시적 사항에 불과하며, 평판형 스피커(400)는 제어장치(300)에 포함되도록 마련되거나 고정형 카메라(100) 또는 회전형 카메라(200)에 마련될 수도 있다.
도 2 및 도 3은 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 중 음향 인식 기반의 방식을 나타내는 흐름도이다. 먼저, 도 2를 참조하면, 다수의 음향 주파수 인식 장치(500-1 내지 500-N) 중 하나의 음향 주파수 인식 장치(500)는 미리 설정된 범위의 주파수의 단발음을 감지한다(S11).
단계(S11) 이후, 음향 주파수 인식 장치(500)는 단계(S21)의 단말음이 미리 설정된 임계치 데시벨(dB) 이상인지를 분석하여 음향 이벤트 발생 여부를 판단한다(S12).
단계(S12)의 판단 결과 음향 이벤트가 발생한 경우, 음향 주파수 인식 장치(500)는 음성 이벤트 발생정보를 생성한 뒤(S13), 제어장치(300)로 음성 이벤트 발생정보를 전송한다(S14).
단계(S14) 이후, 제어장치(300)는 긴급 상황 발생 인지 분석을 개시하기 위해(S15), 긴급 상황 발생 인지 분석을 위해 단계(S14)에서 수신된 단발음을 감지한 음향 주파수 인식 장치(500)로부터 단발음 주파수 정보를 수신한다.
단계(S15) 이후, 제어장치(300)는 단계(S15)에서 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 음향 주파수에 해당하는지 여부를 판단한다(S16). 여기서 도움 요청 음향 주파수는 도움을 요청하는 '도와주세요', '살려주세요' 등과 같은 사람의 음성에 의한 문장으로 문장을 이루는 각 문자의 조합으로 주파수 출력이 가능한 모든 정보를 미리 저장함으로써, 제어장치(300)는 미리 저장된 문장의 각 문자별 주파수 출력 범위로부터 미리 설정된 범위의 오차 범위 내에서 인식을 수행한 뒤, 각 인식된 문자의 조합으로 도움 요청 음향 주파수와 매칭되는 문장이 인식되는지 여부를 분석하는 것이다.
단계(S16)의 분석 결과 단발음이 도움 요청 음향 주파수에 해당하는 경우는 단계(S16a)로 진행하며, 반대로 단발음이 도움 요청 음향 주파수에 해당하지 않는 경우 단계(S13)으로 진행하여, 제어장치(300)는 단계(S15)에서 수신된 단발음 주파수 정보를 분석하여 단발음이 호루라기 음향 주파수에 해당하는지 여부를 판단한다(S17).
보다 구체적으로 단계(S16a)에서는 제어장치(300)는 제 1 영상 이벤트 감지를 수행하는데, 단계(S15)에서 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라(100)로부터 촬영된 영상으로부터 제 1 영상 이벤트에 해당하는 "피사체가 뛰어가는 이미지", "피사체가 손을 흔드는 이미지", "피사체가 넘어져 있는 이미지" 등이 있는지 여부의 추출을 통해 판단한다(S16a).
단계(S16)에서 단발음이 도움 요청 음향 주파수인 것(제 1 판단)이며, 단계(S16a)의 판단 결과 제 1 영상 이벤트를 감지한 경우(제 2 판단)에 해당하는 것으로의 연속된 판단을 통해 최종적으로 제어장치(300)는 피사체의 긴급상황으로 분석한 뒤, 회전형 카메라(400)의 촬영 대상 영역 또는 대상 객체를 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하게 된다(S19).
그리고 제어장치(300)는 결정된 대상 영역 또는 대상 객체에 관한 정보를 회전형 카메라(200)로 전송한다(S20).
회전형 카메라(200)는 제어장치(300)로부터 결정된 대상 영역 또는 대상 객체가 촬영되도록 한다(S21). 여기서 회전형 카메라(200)는 대상 영역 또는 대상 객체를 확대하거나 축소하여 촬영할 수 있음은 물론, 대상 객체가 이동하는 경우에는 대상 객체의 이동경로를 따라 대상 객체를 추적 촬영할 수 있다.
또한, 대상 객체가 이동함에 따라 회전형 카메라(200)와 대상 객체의 거리가 멀어져 촬영이 어려운 경우에는 대상 객체의 이동 경로에 있는 다른 회전형 카메라(200)가 대상 객체를 추적 촬영할 수도 있다.
그리고 회전형 카메라(200)는 대상 영역 또는 대상 객체를 촬영하여 이벤트 촬영정보를 생성한다(S22). 구체적으로 결정된 객체가 출입통제구역에 형성된 문 주변에 위치한 사람이라면 회전형 카메라(200)는 사람을 인식하여 사람의 움직임에 따라 렌즈를 이동시켜 사람을 촬영함으로써 이벤트 촬영정보를 생성한다. 이때 이벤트 촬영정보에는 영상정보와 함께 객체가 이동하는 경우에는 이동경로를 나타내기 위한 이동좌표가 포함될 수 있다.
이후 회전형 카메라(200)는 생성된 이벤트 촬영정보를 제어장치(300)로 전송한다(S23).
이에 따라, 제어장치(300)는 수신한 이벤트 촬영정보를 이용해 이벤트 분석값을 생성한다(S23a). 이벤트 분석값은 제어장치(300)의 패턴분석부(330)에서 이벤트 촬영정보를 이용해 이벤트의 상황을 감지하고 그에 맞는 메시지를 출력하기 위한 결과값이다.
한편, 단계(S16)로 회귀하여 단발음이 도움 요청 음향 주파수가 아닌 경우, 제어장치(300) 단계(S15)에서 수신된 단발음 주파수 정보를 분석하여 단발음이 호루라기 음향 주파수에 해당하는지 여부를 판단한다(S17).
여기서 호루라기 음향 주파수는 시중에 유통되는 호루라기의 주파수 출력으로 가능한 모든 정보를 미리 저장함으로써, 제어장치(300)는 미리 저장된 호루라기 주파수 출력 범위로부터 미리 설정된 범위의 오차 범위 내에서 인식을 수행하며, 각 인식된 호루라기 주파수의 출력 강도의 경우의 수를 조합하여 호루라기 음향 주파수에 해당하는지 여부를 분석하는 것이다.
단계(S17)의 분석 결과 단발음이 호루라기 음향 주파수에 해당하는 경우 단계(S18a)로 진행하며, 반대로 단발음이 호루라기 음향 주파수에 해당하지 않는 경우 단계(S18)로 진행한다.
보다 구체적으로 단계(S18a)에서는 제어장치(300)는 제 2 영상 이벤트 감지를 수행하는데, 단계(S15)에서 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라(100)로부터 촬영된 영상으로부터 제 2 영상 이벤트에 해당하는 "피사체가 호루라기를 물거나 들고 있는 이미지", "피사체가 호루라기를 물거나 들고 뛰어가는 이미지", "피사체가 호루라기를 물거나 들고 손을 흔드는 이미지", "피사체가 호루라기를 물거나 들고 넘어져 있는 이미지" 등이 있는지 여부를 판단한다.
단계(S17)에서 단발음이 호루라기 음향 주파수인 것(제 1 판단)이며, 단계(S18a)의 판단 결과 제 2 영상 이벤트를 감지한 경우(제 2 판단)에 해당하는 것으로의 연속된 판단을 통해 최종적으로 제어장치(300)는 피사체의 긴급상황으로 분석한 뒤, 제어장치(300)는 회전형 카메라(200)의 촬영 대상 영역을 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하게 된다(S19). 단계(S20) 내지 단계(S23a)의 과정은 상술한 바와 같다.
다음으로 단계(S16)로 회귀하여 단계(S16)의 분석 결과 단발음이 도움 요청 음향 주파수가 아니고(제 1 판단), 이후의 단계(S17)의 분석 결과 단발음이 호루라기 음향 주파수도 아닌 경우(제 2 판단), 제어장치(300)는 고정형 카메라(100)에 의해 촬영된 피사체에 대한 영상을 통해 제 3 영상 이벤트에 대한 감지 여부를 판단한다(S18). 단계(S18)에서, 제 3 영상 이벤트에 대한 판단에 있어서, 제어장치 (300)는 단계(S15)에서 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라(100)로부터 촬영된 영상으로부터 제 3 영상 이벤트에 해당하는 "두 개의 피사체가 엉켜있는 이미지", "두 개의 피사체가 미리 설정된 간격 미만에 위치하는 이미지", "두 개의 피사체가 엉켜있거나 미리 설정된 간격 미안에 위치한 상태에서 두 개의 피사체 중 적어도 하나 이상이 넘어져 있거나, 손을 흔드는 이미지" 등 중 적어도 하나의 이미지가 있는지 여부를 통해 판단한다.
단계(S18)의 판단 결과, 제어장치(300)는 제 3 영상 이벤트를 감지하는 경우, 피사체의 긴급상황으로 분석한 뒤, 회전형 카메라(200)의 촬영 대상 영역을 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하게 된다(S19). 단계(S20) 내지 단계(S23a)의 과정은 상술한 바와 같다.
이후 회전형 카메라(200)는 생성된 이벤트 촬영정보를 제어장치(300)로 전송한다(S23).
한편, 단계(S23a)에서 제어장치(300)에 의한 수신한 이벤트 촬영정보를 이용해 이벤트 분석값을 생성시, 이벤트 분석값은 제 1 영상 이벤트와 매칭되는 '도움 이벤트 분석값', 제 2 영상 이벤트와 매칭되는 '호루라기 이벤트 분석값', 제 3 영상 이벤트와 매칭되는 '폭력 행사 이벤트 분석값', 그리고 도 4에서의 노멀 이벤트와 매칭되는 '노멀 이벤트 분석값'으로 구분될 수 있다. 노멀 이벤트에 대한 구체적인 예를 들면 출입통제지역의 주출입문 주변에서 이동 객체가 이동하다가 주출입문에서 이동 객체가 일정한 시간 동안 배회하거나 주출입문을 마주한 채 일정한 시간 동안 정지해 있는 경우 제어장치(300)는 이를 도난 가능성이 있는 상황으로 판단할 수 있다. 그러면 제어장치(300)는 '세분화된 노멀 이벤트 분석값'으로 도난 분석값을 생성하게 되는 것이다.
다음으로 도 3을 참조하면, 단계(S23a) 이후, 제어장치(300)는 단계(S23a)에서 생성된 이벤트 분석값이 복수개인지에 대한 여부를 판단한다(S24). 구체적으로 촬영이 결정된 대상 영역에서 이동 객체가 복수개로 확인되는 경우, 제어장치(300)는 각각의 이동 객체를 검지하여 이동 객체의 행동을 판단하게 된다. 예를 들어 이동 객체가 2명이면 제 1 이동 객체 및 제 2 이동 객체의 행동을 각각 판단하게 된다.
단계(S24)의 판단 결과 복수개인 경우 단계(S25)로 진행하며, 반대로 복수개가 아닌 경우 단계(S26)로 진행한다.
즉 단계(S25)에서 제어장치(300)는 우선순위에 따라 최우선되는 이벤트 분석값 선택한다(S25). 보다 구체적으로, 만약 이벤트 분석값이 복수개인 경우에는(S24-Yes), 제어장치(300)는 복수의 이벤트 분석값 중 우선순위에 따라 최우선되는 이벤트 분석값을 선택한다.
제어장치(300)는 이벤트 분석값을 생성하거나 저장할 때 우선순위정보가 이벤트 분석값에 포함되도록 하거나, 우선순위별로 카테고리화하여 해당 카테고리에 저장되도록 할 수 있다.
여기서 우선순위는 '도움 이벤트 분석값', '호루라기 이벤트 분석값', 폭력 행사 이벤트 분석값', '노멀 이벤트 분석값'에 대한 순서를 통해 설정될 수 있으며, 다른 실시예로, 노멀 이벤트 분석값을 이루는 세분화된 분석값에 대한 개별적인 순서 또는 다른 이벤트 분석값과 세분화된 노멀 이벤트 분석값 간의 순서를 통해 설정될 수 있다. 또한, 우선순위는, 세분화된 노멀 이벤트 분석값 중 응급상황도에 따라 설정될 수 있으며, 응급상황도는 자연재해, 위험물, 폭력, 대상 객체의 위급도, 도난 중 적어도 하나를 기준으로 설정된 순위일 수 있다.
구체적으로 위험물이 도난보다 우선순위가 높은 것으로 설정된 경우를 예로 들면, 제 1 이동 객체가 주출입문 입구에서 일정시간 배회하는 것으로 판단되어 이벤트 분석값이 도난으로 분류되고, 제 2 이동 객체가 주출입문 주변에 위험물을 방치한 것으로 판단되어 이벤트 분석값이 위험물로 분류되면, 우선순위가 높은 위험물로 분류된 제 2 이동 객체가 선택되는 것이다.
단계(S25) 이후, 제어장치(300)는 선택된 이벤트 분석값에 대응되는 이벤트 석값에 대응되는 메시지를 추출한다(S26). 이벤트 분석값이 위험물인 경우에는 제어장치(300)가 메시지DB부(340)에 저장된 메시지 중 위험물과 관련된 메시지를 추출하게 되는 것이다. 이를 위해 메시지는 응급상황도에 대응되는 카테고리별로 저장될 수 있다.
반면 이벤트 분석값이 복수 개가 아닌 경우에는(S24-NO), 제어장치(300)는 이벤트 분석값을 선택할 필요없이 생성된 분석값 자체가 선택된 분석값이므로 이에 대응되는 메시지를 추출하게 된다(S26).
단계(S26) 이후, 제어장치(300)는 단계(S26)에서 추출된 메시지에 대응되는 음향정보를 지향성 평판형 스피커(400)로 전송한다(S27).
단계(S27) 이후, 평판형 스피커(400)는 음향정보를 추신하여 음향정보가 음성 또는 경보음으로 출력되도록 한다(S28). 만약 위험물과 관련된 노멀 이벤트 분석값과 매칭되는 메시지가 추출되었고, 해당 메시지에 대응되는 음향정보가 화재경보음인 경우 평판형 스피커(400)에서는 화재경보음이 울리게 되는 것이다.
한편, 단계(S28) 이후, 제어장치(300)는 다른 음향 주파수 인식 장치(500)에서 다른 음향 이벤트 발생정보를 수신했는지를 판단한다(S29).
단계(S29)의 판단 결과 제어장치(300)는 다른 음향 이벤트 발생정보를 수신하는 경우 단계(S30)로 진행하고, 반대로 다른 음향 이벤트 발생정보를 수신하지 않는 경우는 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 프로세스를 종료한다.
즉 단계(S30)에 따라 다른 음향 주파수 인식 장치(500)에서 다른 음향 이벤트 발생정보를 수신하는 경우(S29-YES)에는, 제어장치(300)는 다른 회전형 카메라(200)로부터 다른 음향 이벤트 발생정보를 수신한다. 이 과정에서 제어장치(300)가 촬영되어야 하는 대상 영역 또는 대상 객체를 결정하여{단계(S15) 내지 단계(S19)} 다른 회전형 카메라(200)에 전송하고 다른 회전형 카메라(200)에서 다른 이벤트 촬영정보를 생성하여 전송하는 과정{단계(S21) 내지 단계(S23)}은 전술한 바와 동일하거나 충분히 유추가능한바 자세한 내용은 생략하기로 한다.
반면, 다른 음향 주파수 인식 장치(500)에서 다른 음향 이벤트 발생정보를 수신하지 않은 경우(S29-N))에는 처음 단계로 회귀하거나 종료된다.
단계(S30) 이후, 제어장치(300)는 다른 이벤트 분석값을 생성한다(S31).
단계(S31) 이후, 제어장치(300)는 단계(S27) 및 단계(S28)의 과정에 따라 평판형 스피커(400)에서 출력중인 이벤트 분석값보다 우선순위가 높은지 여부를 판단한다(S32).
단계(S32)의 판단 결과 만약 평판형 스피커(400)에서 출력중인 음성 또는 경보음에 대응되는 이벤트 분석값보다 다른 이벤트 분석값의 우선순위가 높으면(S32-Yes), 제어장치(300)는 다른 이벤트 분석값에 대응되는 메시지를 추출한다(S33).
단계(S33) 이후, 제어장치(300)는 평판형 스피커(400)로 출력중인 음성 또는 경보음 중단을 요청한다(S34).
단계(S4) 이후, 제어장치(300)는 추출된 다른 메시지에 대응되는 음향정보를 평판형 스피커(400)로 전송한다(S35).
단계(S35) 이후, 평판형 스피커(400)는 다른 음성 또는 경보음을 출력한다(S36).
반면, 만약 평판형 스피커(400)에서 출력중인 음성 또는 경보음에 대응되는 이벤트 분석값보다 다른 이벤트 분석값의 우선순위가 낮으면(S190-Y), 제어장치(300)는 평판형 스피커(400)에서 출력중인 음성 또는 경보음의 송출이 유지되도록 한다.
이때, 음성 또는 경보음은 평판형 스피커(400)에서 출력되어야 하는 시간이 미리 설정되어 제어장치(300)에 저장될 수 있으며, 평판형 스피커(400)에서 출력중인 음성 또는 경보음이 미리 설정된 시간만큼 출력이 되었다면 자동으로 설정된 시간이 경과되면 중단될 수 있다.
도 4는 본 발명의 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법 중 음향 인식 기반의 방식을 나타내는 흐름도이다. 도 4의 방법에 따른 흐름은, 도 3에서 단계(S16a, NO), 도 3에서 단계(S18, NO), 도 3에서 단계(S18a, NO) 외에 독자적으로 수행될 수 있다.
여기서 도 3에서 단계(S16a, NO)는, "단계(S16)에서 단발음이 도움 요청 음향 주파수인 것(제 1 판단)이며, 단계(S16a)의 판단 결과 제 1 영상 이벤트를 감지하지 못한 경우(제 2 판단)에 해당하는 경우"로 다음 과정으로 도 4의 단계(S100)로 진행한다.
또한, 도 3에서 단계(S18, NO)는, 단발음이 도움 요청 음향 주파수 및 호루라기 음향 주파수가 아닌 것(제 1 판단)이며, 제 3 영상 이벤트를 감지하는 경우가 아닌 경우"로 다음 과정으로 도 4의 단계(S100)로 진행한다.
한편, 여기서 제 3 영상 이벤트는 제어장치(300)가 감지를 수행하는데, 제 3 영상 이벤트에 대한 판단에 있어서, 제어장치(300)는 단계(S15)에서 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라(100)로부터 촬영된 영상으로부터 제 3 영상 이벤트에 해당하는 "두 개의 피사체가 엉켜있는 이미지", "두 개의 피사체가 미리 설정된 간격 미만에 위치하는 이미지", "두 개의 피사체가 엉켜있거나 미리 설정된 간격 미안에 위치한 상태에서 두 개의 피사체 중 적어도 하나 이상이 넘어져 있거나, 손을 흔드는 이미지" 등 중 적어도 하나의 이미지가 있는지 여부를 통해 판단한다.
마지막으로, 도 3에서 단계(S18a, NO)는, "단계(S17)의 판단 결과 단발음이 호루라기 음향 주파수인 것(제 1 판단)이며, 단계(S18a)의 판단 결과 제 2 영상 이벤트를 감지하는 경우가 아닌 경우"로 도 4의 단계(S100)로 진행한다.
보다 구체적으로, 단계(S100)에 대해서 살펴보도록 한다.
먼저, 제어장치(300)는 다수의 고정형 카메라(100) 중 하나로부터 노멀 이벤트를 감지한다(S110). 여기에서, 노멀 이벤트는 특정 영역 내에서 적어도 움직이는 피사체가 감지되는 경우를 나타낸다. 즉, 고정형 카메라(100)는 특정 영역 내에 움직이는 피사체의 존재 여부를 감지하는 기능을 수행하게 된다.
단계(S110) 이후, 제어장치(300)는 '단발음 dB(데시벨)≥제 1 dB(데시벨)값'인지 여부를 판단한다(S120). 즉, 제어장치(300)는 다수의 음향 주파수 인식 장치(500) 중 단계(S110)에서 노멀 이벤트를 감지한 고정형 카메라(100)가 매칭되는 영역에 배치된 음향 주파수 인식 장치(500)를 통해 수신된 단발음의 음향 주파수 신호의 크기인 단발음 데시벨(dB)를 분석한 뒤, 미리 설정된 제 1 데시벨(dB)값보다 큰지 여부를 판단한다.
여기에서, 제 1 dB값은 주변에서 평상시에 발생되는 소음보다 큰 음향 주파수 신호 dB값을 나타낸다. 즉, 제 1 dB값 이상의 음향 주파수 신호가 발생되는 것은 평소와 다른 사건이 발생된 것으로 인식할 수 있는 것이다. 따라서, 제어장치(300)는 제 1 dB값 이상의 음향 주파수 신호가 인식된 경우에, 음향 주파수 신호가 발생된 영역을 촬영할 수 있도록 회전형 카메라(200)를 제어하게 되는 것이다.
이러한 경우는 주로, 고정형 카메라(100)의 사각지대에서 발생되는 범죄나 사고 현장을 음향 주파수 신호로 판단하여 촬영하기 위한 방안으로 사용되게 될 것이다.
한편, 단계(S120)의 판단 결과 단발음 dB가 제 1 dB값 이상인 경우, 제어장치(300)는 '단발음 dB≥제 2 dB값'인지 여부를 판단한다(S130).
단계(S130)의 판단 결과 단말음 dB가 제 2 dB값 이상인 경우, 제어장치(300)는 단계(S170)로 진행하여 단발음 방향으로 회전형 카메라의 대상 영역을 결정하며, 반대로 단말음 dB가 제 2 dB값 미만인 경우, 단계(S140)로 진행하여 기설정된 우선순위에 따라 대상영역을 결정한다.
즉, 단계(S130)의 판단 결과 단말음 dB가 제 2 dB값 이상인 경우, 제어장치(300)는 회전형 카메라(200)의 촬영 대상 영역을 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하게 된다.
보다 구체적으로 살펴보면, 단발음의 음향 주파수 신호의 세기가 제 2 dB값 이상인 경우, 제어장치(300)는 인식된 음향 주파수 신호 정보를 이용하여 음향 주파수 신호의 방향을 산출하고, 음향 주파수 신호의 방향을 대상 영역으로 곧바로 결정할 수도 있다. 이후, 제어장치(300)는 회전형 카메라(200)가 해당 음향 주파수 신호가 감지된 방향을 촬영하게 함으로써, 음향 주파수 신호의 발생 원인을 촬영하도록 제어하게 된다. 즉, 고정형 카메라(100)에서 노멀 이벤트가 발생된 경우라도 이러한 이벤트를 무시하고 곧바로 음향 주파수 신호의 방향을 대상 영역으로 결정할 수 있는 것이다.
여기에서, 제 2 dB값은 위험에 처했을 때 발생되는 고음(예를 들면, 비명음향 주파수 신호) 또는 충격음(예를 들면, 총음향 주파수 신호, 폭탄 음향 주파수 신호 등)의 세기에 해당되는 것이다. 즉, 제 2 dB값은 제 1 dB값보다 큰 값이 된다. 따라서, 제어 장치(300)가 제 2 dB값 이상의 음향 주파수 신호를 인식한 경우, 위험 상황에 해당되므로 해당 음향 주파수 신호가 감지된 영역을 우선적으로 촬영하도록 회전형 카메라(200)를 제어하게 된다.
단계(S130)의 판단 결과 반대로, 음향 주파수 신호 세기에 해당하는 단발음 dB가 제 2 dB값보다 작은 경우, 제어장치(300)는 미리 설정된 우선 순위에 따라 회전형 카메라(200)가 피사체를 촬영하기 위한 대상영역을 결정하게 된다(S140).
이런 우선 순위에는, 음향 주파수 신호의 방향이 노멀 이벤트가 발생된 특정 영역에 포함되는지 여부도 포함될 수 있으며, 만약 음향 주파수 신호의 방향이 이벤트가 발생된 특정 영역에 포함되는 경우 최우선 순위로 하여 회전형 카메라(200)가 촬영할 방향을 결정할 수 있다. 또한, 만약 음향 주파수 신호의 방향이 이벤트가 발생된 특정 영역에 포함되지 않는 경우, 사용자에 의해 미리 설정된 다양한 우선순위에 따라 촬영할 방향이 결정되도록 할 수 있을 것이다.
즉, 제어장치(300)는 고정형 카메라(100)에서 복수 개의 노멀 이벤트가 감지된 경우, 복수 개의 노멀 이벤트 중 우선 순위가 가장 높은 하나의 이벤트가 감지된 카메라가 촬영하는 특정 영역을 회전형 카메라(200)가 자세하게 촬영하도록 제어할 수도 있다.
예를 들어, 제어장치(300)는 사용자의 설정이나 조작에 따라, "제 1 dB값과 제 2 dB값 사이의 범위 중 음향 주파수 신호 dB값 A > 움직임 이벤트 a > 제 1 dB값과 제 2 dB값 사이의 범위 중 음향 주파수 신호 dB값 B > 움직임 이벤트 b > …"와 같은 우선 순위를 정할 수 있고, 여기서 음향 주파수 신호 dB값 A는 음향 주파수 신호 dB값 B보다 크며, 움직임 이벤트 a는 팔이 빠르게 움직이는 이벤트이고, 움직임 이벤트 b는 다리가 빠르게 움직이는 이벤트로 설정될 수 있다. 음향 주파수 신호가 작은 경우보다 음향 주파수 신호가 큰 경우가, 그리고, 다리가 빠르게 움직이는 경우보다 팔이 빠르게 움직이는 경우가 범죄 발생 가능성이나 사고 발생 가능성이 높기 때문이다.
한편, 단계(S120)의 판단 결과 단발음 dB가 제 1 dB값 미만인 경우, 제어장치(300)는 단계(S150)로 진행하여 노멀 이벤트 영역으로 회전형 카메라(200)의 대상영역을 결정한다(S150).
그리고 단계(S110)의 판단 결과 노멀 이벤트가 감지되지 않은 경우, 단계(S160)으로 진행하여, 제어장치(300)는 "단발음 dB≥제 1 dB값" 인지 여부를 판단한 뒤(S160), 단발음 dB가 제 1 dB값보다 작은 경우는 도 2의 단계(S11)로 회귀하며, 반대로 단발음 dB가 제 1 dB값 이상인 경우는 단발음 방향으로 회전형 카메라의 대상 영역을 결정한다(S170).
또한, 단계(S130)의 판단 결과 단말음 dB가 제 2 dB값 이상인 경우도 단계(S170)로 진행하여 제어장치(300)는 단발음 방향으로 회전형 카메라의 대상 영역을 결정한다(S170).
인식된 단발음의 음향 주파수 신호의 세기가 제 1 dB값과 제 2 dB값의 사이인 경우{단계(S130, NO)}의 제어장치(300)에 의한 회전형 카메라(200)의 제어에 대해서 좀 더 살펴보면, 제어장치(300)는 음향 주파수 신호 정보와 제 1 내지 제 3 이벤트 정보, 노멀 이벤트 정보를 조합하거나 비교하여 우선순위에 따라 촬영 대상을 결정하게 된다.
이를 위해 제어장치(300)는 단발음의 음향 주파수 신호 정보를 이용하여 음향 주파수 신호의 방향을 산출하고, 적어도 하나의 고정형 카메라(100)가 촬영하는 영역에서 노멀 이벤트가 감지되는지 여부를 판단하게 된다. 그리고, 고정형 카메라(100)가 촬영하는 특정 영역에서 노멀 이벤트가 감지된 경우, 제어장치(300)는 산출된 음향 주파수 신호의 방향이 이벤트가 감지된 고정형 카메라(100)가 촬영하는 특정영역에 포함되는지 여부를 판단하게 된다.
만약, 산출된 음향 주파수 신호의 방향이 이벤트가 발생된 고정형 카메라(100)가 촬영하는 특정 영역에 포함되는 경우, 제어장치(300)는 회전형 카메라(200)가 산출된 음향 주파수 신호의 방향에 대응되는 특정 영역을 촬영하도록 제어하게 된다.
반면, 산출된 음향 주파수 신호의 방향이 이벤트가 감지된 고정형 카메라(100)가 촬영하는 특정 영역에 포함되지 않는 경우, 제어장치(300)는 이벤트가 감지된 고정형 카메라(100)가 촬영하는 특정 영역을 촬영하게 된다.
또한, 이 경우, 제어장치(300)는 노멀 이벤트 정보의 우선순위와 음향 주파수 신호 정보의 우선순위를 서로 비교하여 우선순위가 높은 것에 대응되는 방향을 촬영하도록 회전형 카메라(200)를 제어할 수도 있다.
이를 위해, 제어장치(300)는 이벤트를 다양한 레벨로 우선순위를 할당할 수도 있고, 음향 주파수 신호 정보를 세기별로 다양한 레벨을 두어 우선순위를 할당할 수도 있다. 그리고, 제어장치(300)는 복수 개의 고정형 카메라(100)에서 복수 개의 이벤트가 감지된 경우, 복수 개의 노멀 이벤트 중 우선 순위가 가장 높은 하나의 노멀 이벤트가 감지된 카메라가 촬영하는 특정 영역을 회전형 카메라(200)가 자세하게 촬영하도록 제어할 수도 있다.
한편, 고정형 카메라(100)가 촬영하는 특정 영역에서 노멀 이벤트가 감지되지 않은 경우, 제어장치(300)는 인식된 음향 주파수 신호 정보를 이용하여 음향 주파수 신호의 방향을 산출하고, 음향 주파수 신호의 방향을 대상 영역으로 결정하게 된다.
또한, 음향 주파수 인식 장치(500)에 음향 주파수 신호가 인식되지 않고 고정형 카메라(100)에서 이벤트가 감지된 경우, 제어장치(300)는 이벤트가 감지된 고정형 카메라(100)에서 촬영 중인 특정 영역을 대상 영역을 결정하고 결정된 대상 영역을 촬영하도록 회전형 카메라(200)의 렌즈 방향을 제어하게 된다.
이와 같은 구성의 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템은 고정형 카메라(100)의 이벤트 감지정보뿐만 아니라 음향 주파수 신호 정보까지 인식하여 감시를 하게 되므로, 사각 지역 없이 다양한 영역을 감시할 수 있게 된다.
도 5는 본 발명의 다른 실시예에 따른 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템을 나타내는 도면이다. 도 5를 참조하면, 고정형 카메라(100), 회전형 카메라(200), 평판형 스피커(400), 음향 주파수 인식 장치(500) 및 비콘 무선 신호 송수신부(600)는 셋트화되어 기확정된 감시 대상 영역의 주변의 현장(1-1 ,1-2, …, 1-m; m은 2 이상의 자연수)에 설치되고, 제어장치(300)는 외부의 관제센터(3)에 별도로 설치될 수 있으며, 이 경우 외부의 관제센터(3) 또는 제어장치(300)는 복수의 셋트를 개별적으로 모두 관리하거나 제어할 수 있게 된다.
이로 인해, 불필요한 리소스의 중복을 막을 수 있고 일괄적인 관리 및 현장의 이동에 따라 발생되는 범죄나 사고에 대한 연속적이고 총체적인 관리가 가능하게 된다.
한편, 네트워크(2)는 대용량, 장거리 음성 및 데이터 서비스가 가능한 대형 통신망의 고속 기간 망인 통신망이며, 인터넷(Internet) 또는 고속의 멀티미디어 서비스를 제공하기 위한 차세대 유선 및 무선 망일 수 있다. 네트워크(2)가 이동통신망일 경우 동기식 이동 통신망일 수도 있고, 비동기식 이동 통신망일 수도 있다. 비동기식 이동 통신망의 일 실시 예로서, WCDMA(Wideband Code Division Multiple Access) 방식의 통신망을 들 수 있다. 이 경우 도면에 도시되진 않았지만, 네트워크(2)는 RNC(Radio Network Controller)을 포함할 수 있다. 한편, WCDMA망을 일 예로 들었지만, 3G LTE망, 4G망 등 차세대 통신망, 그 밖의 IP를 기반으로 한 IP망일 수 있다. 네트워크(2)는 관제센터(3)와 셋트화되어 기확정된 감시 대상 영역의 주변의 현장(1-1, 1-2, …, 1-m)의 고정형 카메라(100), 회전형 카메라(200), 평판형 스피커(400), 음향 주파수 인식 장치(500) 및 비콘 무선 신호 송수신부(600), 제 1 내지 제 m 모바일단말(4-1 내지 4-m, m은 2 이상의 자연수) 그 밖의 시스템 상호 간의 신호 및 데이터를 상호 전달하는 역할을 한다.
이러한 구성을 통해 관제센터(3)의 제어장치(300)는 긴급상황 인식이 발생한 위치의 영상을 이동형 카메라(200)를 통해 확대하고 그 영역으로 지향성 평판형 스피커(400)를 통해 경고 방송을 송출함으로써, 인근 주민들의 민원을 줄일 수 있다.
또한, 관제센터(3)의 제어장치(300)는 각 모바일단말(1-1 내지 1-m) 중 안전귀가 어플을 실행한 모바일단말로부터 비콘 무선 신호를 수신하도록 셋트화되어 기확정된 감시 대상 영역의 각 주변의 현장(1-1 , 1-2, …, 1-m)의 비콘 무선 신호 송수신부(600)를 제어하여 네트워크(2)를 통해 수신한 뒤, 송출 귀가 위치를 미리 설정된 지인의 모바일단말로 송출할 수 있다.
또한, 관제센터(3)의 제어장치(300)는 각 모바일단말(4-1 내지 4-m) 중 안전귀가 어플을 실행한 모바일단말로 긴급상황 버튼이 입력된 경우, 버튼 입력에 따라 비콘 무선 신호를 수신한 비콘 무선 신호 송수신부(600)의 식별번호를 추출한 뒤, 동일한 식별번호를 갖는 셋트화되어 기확정된 동일한 감시 대상 영역에 위치한 평판형 스피커(400)를 제어하여 경고 방송 출력과 함께 가장 인접한 방범 센터로 긴급상황 신고를 수행한다.
본 발명은 또한 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록 장치를 포함한다.
컴퓨터가 읽을 수 있는 기록매체의 예로는 ROM, RAM, CD-ROM, 자기테이프, 플로피 디스크, 광 데이터 저장장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다.
또한 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다. 그리고 본 발명을 구현하기 위한 기능적인(functional) 프로그램, 코드 및 코드 세그먼트들은 본 발명이 속하는 기술 분야의 프로그래머들에 의해 용이하게 추론될 수 있다.
이상과 같이, 본 명세서와 도면에는 본 발명의 바람직한 실시예에 대하여 개시하였으며, 비록 특정 용어들이 사용되었으나, 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위한 일반적인 의미에서 사용된 것이지, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시예 외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
1-1 내지 1-m : 현장
2 : 네트워크
3 : 관제센터
4-1 내지 4-m : 제 1 내지 제 m 모바일단말
100 : 고정형 카메라
100G(100-1 내지 100-N) : 고정형 카메라 집합체
200 : 회전형 카메라
200G(200-1 내지 200-N) : 회전형 카메라 집합체
300 : 제어장치
310 : 통신부
320 : 이동객체 인식부
330 : 패턴분석부
340 : 메시지DB부
350 : 제어부
400 : 지향성 평판형 스피커
400G(400-1 내지 400-N) : 지향성 평판형 스피커 집합체
500 : 음성 인식 주파수 장치
500G(500-1 내지 500-N) : 음성 인식 주파수 장치 집합체
600 : 비콘 무선 신호 송수신부
600G(600-1 내지 600-N) : 비콘 무선 신호 송수신부 집합체
2 : 네트워크
3 : 관제센터
4-1 내지 4-m : 제 1 내지 제 m 모바일단말
100 : 고정형 카메라
100G(100-1 내지 100-N) : 고정형 카메라 집합체
200 : 회전형 카메라
200G(200-1 내지 200-N) : 회전형 카메라 집합체
300 : 제어장치
310 : 통신부
320 : 이동객체 인식부
330 : 패턴분석부
340 : 메시지DB부
350 : 제어부
400 : 지향성 평판형 스피커
400G(400-1 내지 400-N) : 지향성 평판형 스피커 집합체
500 : 음성 인식 주파수 장치
500G(500-1 내지 500-N) : 음성 인식 주파수 장치 집합체
600 : 비콘 무선 신호 송수신부
600G(600-1 내지 600-N) : 비콘 무선 신호 송수신부 집합체
Claims (5)
- 하나의 음향 주파수 인식 장치가 미리 설정된 범위의 주파수의 단발음을 감지하는 제 1 단계;
상기 음향 주파수 인식 장치가 단말음이 미리 설정된 임계치 데시벨(dB) 이상인지를 분석하여 음향 이벤트 발생 여부를 판단하는 제 2 단계;
음향 이벤트가 발생한 경우, 음향 주파수 인식 장치가 음성 이벤트 발생정보를 생성한 뒤 제어장치로 음성 이벤트 발생정보를 전송하는 제 3 단계;
상기 제어장치가 긴급 상황 발생 인지 분석을 개시하기 위해, 긴급 상황 발생 인지 분석을 위해 수신된 단발음을 감지한 음향 주파수 인식 장치로부터 단발음 주파수 정보를 수신하는 제 4 단계;
상기 제어장치가 단발음을 감지한 음향 주파수 인식 장치와 동일한 영역에 위치한 고정형 촬영장치로부터 영상 이벤트 정보를 수신하는 제 5 단계;
상기 제어장치가 상기 음성 이벤트 발생정보와 상기 영상 이벤트 정보를 통해 피사체의 긴급상황을 분석하고 긴급상황인 경우 회전형 카메라에 촬영되기 위한 대상 영역 또는 대상 객체에 관한 정보를 생성하는 제 6 단계;
상기 제어장치가 결정된 대상 영역 또는 대상 객체에 관한 정보를 단발음을 감지한 음향 주파수 인식 장치와 동일한 영역에 위치한 회전형 카메라로 전송하는 제 7 단계;
상기 회전형 카메라가 상기 제어장치로부터 결정된 대상 영역 또는 대상 객체가 촬영되도록 하여, 이벤트 촬영정보를 생성하여 상기 제어장치로 반송하는 제 8 단계; 및
상기 제어장치가 수신한 이벤트 촬영정보를 이용해 이벤트 분석값을 생성하여 이벤트 분석값과 맞는 메시지를 평판형 스피커로 출력하도록 제어하는 제 9 단계; 를 포함하며,
상기 제 5 단계는, 상기 제어장치가 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 음향 주파수에 해당하는지 여부를 판단하는 제 5-1 단계;
분석 결과 단발음이 도움 요청 음향 주파수에 해당하는 경우는 상기 제어장치가 제 1 영상 이벤트 감지를 수행하는데, 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라로부터 촬영된 영상으로부터 제 1 영상 이벤트(피사체 기반 긴급 상황 발생 증명 영상 이벤트 추출) 감지를 수행하며, 반대로 단발음이 도움 요청 음향 주파수에 해당하지 않는 경우 상기 제어장치가 수신된 단발음 주파수 정보를 분석하여 단발음이 도움 요청 도구에 의해 발생한 음향 주파수(호루라기 음향 주파수)에 해당하는지 여부를 판단하는 제 5-2 단계; 및
분석 결과 단발음이 도움 요청 도구에 의해 발생한 음향 주파수(호루라기 음향 주파수)에 해당하는 경우 상기 제어장치가 제 2 영상 이벤트 감지(피사체 및 도움 요청 도구 기반 긴급 상황 발생 증명 영상 이벤트 추출)를 수행하는데, 수신된 단발음 주파수 신호의 방향을 산출한 뒤, 방향과 매칭되는 영역에 배치된 고정형 카메라로부터 촬영된 영상으로부터 제 2 영상 이벤트 감지를 수행하며, 반대로 단발음이 호루라기 음향 주파수에 해당하지 않는 경우 상기 제어장치가 제 3 영상 이벤트 감지(두 개의 피사체 기반 긴급 상황 발생 증명 영상 이벤트 추출)를 수행하는 제 5-3 단계; 를 포함하며,
상기 제 6 단계는,
상기 제어장치가 상기 제 5 단계에서 단발음이 도움 요청 음향 주파수이며, 제 1 내지 제 3 영상 이벤트 중 적어도 하나 이상을 감지하는 경우 피사체의 긴급상황으로 분석한 뒤, 상기 회전형 카메라의 촬영 대상 영역 또는 대상 객체를 음향 주파수 신호 방향(즉, 음향 주파수 신호가 감지된 방향)으로 결정하며,
상기 제 9 단계는,
상기 제어장치가 상기 이벤트 촬영정보를 이용해 이벤트 분석값을 생성시, 이벤트 분석값은 제 1 영상 이벤트와 매칭되는 '도움 이벤트 분석값', 제 2 영상 이벤트와 매칭되는 '도움 요청 도구(호루라기) 이벤트 분석값', 제 3 영상 이벤트와 매칭되는 '폭력 행사 이벤트 분석값', 그 밖의 노멀 이벤트와 매칭되는 '노멀 이벤트 분석값'으로 구분되며, 노멀 이벤트 분석값은, 긴급 상황 가능성 있는 이벤트 촬영정보의 경우(출입통제지역의 주출입문 주변에서 이동 객체가 이동하다가 주출입문에서 이동 객체가 일정한 시간 동안 배회하거나 주출입문을 마주한 채 일정한 시간 동안 정지해 있는 경우의 도난 가능성이 있는 상황)에 생성되는 것을 특징으로 하는 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법.
- 청구항 1에 있어서, 상기 제 9 단계는,
상기 제어장치가 생성된 이벤트 분석값이 복수개인지에 대한 여부를 판단하는 제 9-1 단계;
상기 제어장치가 촬영이 결정된 대상 영역에서 이동 객체가 복수개로 확인되는 경우, 복수의 이벤트 분석값 중 우선순위에 따라 최우선되는 이벤트 분석값을 선택하는 제 9-2 단계;
상기 제어장치가 선택된 이벤트 분석값에 대응되는 메시지를 추출하는 제 9-3 단계;
상기 제어장치가 추출된 메시지에 대응되는 음향정보를 평판형 스피커로 전송하는 제 9-4 단계; 및
상기 평판형 스피커가 음향정보를 수신하여 음향정보가 음성 또는 경보음으로 출력하는 제 9-5 단계; 를 더 포함하며,
상기 우선순위는, '도움 이벤트 분석값', '도움 요청 도구(호루라기) 이벤트 분석값', 폭력 행사 이벤트 분석값', '노멀 이벤트 분석값'에 대한 순서를 통해 설정되는 것을 특징으로 하는 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법.
- 청구항 1에 있어서,
고정형 카메라, 회전형 카메라, 스피커, 음향 주파수 인식 장치 및 비콘 무선 신호 송수신부가 셋트화되어 기확정된 감시 대상 영역의 주변의 현장에 설치되고, 상기 제어장치가 외부의 관제센터에 별도로 설치되는 경우,
상기 관제센터의 제어장치가 각 모바일단말 중 안전귀가 어플을 실행한 모바일단말로부터 비콘 무선 신호를 수신하도록 셋트화되어 기확정된 감시 대상 영역의 각 주변의 현장의 상기 비콘 무선 신호 송수신부를 제어하여 네트워크를 통해 수신한 뒤, 송출 귀가 위치를 미리 설정된 지인의 모바일단말로 송출하는 것을 특징으로 하는 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 방법.
- 삭제
- 삭제
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160086015A KR101687296B1 (ko) | 2016-07-07 | 2016-07-07 | 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020160086015A KR101687296B1 (ko) | 2016-07-07 | 2016-07-07 | 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR101687296B1 true KR101687296B1 (ko) | 2016-12-16 |
Family
ID=57735822
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020160086015A KR101687296B1 (ko) | 2016-07-07 | 2016-07-07 | 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법 |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR101687296B1 (ko) |
Cited By (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180045610A (ko) * | 2016-10-26 | 2018-05-04 | 현대자동차주식회사 | 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량 |
| KR20190046220A (ko) * | 2017-10-25 | 2019-05-07 | 한화테크윈 주식회사 | 이벤트 판별 방법 |
| KR20210065639A (ko) * | 2019-11-27 | 2021-06-04 | 넥서스텍(주) | 모션과 감성 감지를 통한 cctv 시스템 및 그 운영 방법 |
| KR20210120710A (ko) * | 2020-03-27 | 2021-10-07 | 동명대학교산학협력단 | 경험적 학습기반 음원을 이용한 상황인식 시스템 및 그 방법 |
| KR102472369B1 (ko) * | 2022-08-05 | 2022-11-30 | 에코아이넷 주식회사 | 긴급도움 요청 음원을 통한 객체 추적시스템 및 추적방법 |
| KR102513372B1 (ko) | 2023-01-12 | 2023-03-23 | 에코아이넷 주식회사 | 음향과 영상을 연계한 하이브리드형 객체 연속 추적시스템 및 제어방법 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20130039844A (ko) * | 2011-10-13 | 2013-04-23 | 주식회사 나임코리아 | 지능형 카메라 장치 및 이를 이용한 지능형 감시방법 |
| KR101291728B1 (ko) | 2010-12-17 | 2013-07-31 | 김응욱 | 카메라의 상승 및 하강이 가능한 ｃｃｔｖ 폴 시스템 |
| KR101485022B1 (ko) * | 2014-10-20 | 2015-01-21 | 에코아이넷 주식회사 | 행동 패턴 분석이 가능한 객체 추적 시스템 및 이를 이용한 방법 |
| KR101506120B1 (ko) * | 2014-08-21 | 2015-03-31 | 안양시 | 스마트폰과 안전 지도를 이용한 방범 cctv 통합 관제 시스템 |
| KR101507978B1 (ko) | 2014-10-17 | 2015-04-07 | 주식회사 신관산업 | 다목적 ｃｃｔｖ 방범 시스템 |
| KR101581795B1 (ko) | 2015-06-17 | 2015-12-31 | 영남엘이디 주식회사 | Cctv 카메라가 내장된 led 가로등 제조방법 |
| KR20160070922A (ko) | 2014-12-10 | 2016-06-21 | (주)위아이티 | 지하철 객실 감시 cctv시스템 및 그것을 이용한 지하철 객실정보 전송방법 |
-
2016
- 2016-07-07 KR KR1020160086015A patent/KR101687296B1/ko active IP Right Grant
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101291728B1 (ko) | 2010-12-17 | 2013-07-31 | 김응욱 | 카메라의 상승 및 하강이 가능한 ｃｃｔｖ 폴 시스템 |
| KR20130039844A (ko) * | 2011-10-13 | 2013-04-23 | 주식회사 나임코리아 | 지능형 카메라 장치 및 이를 이용한 지능형 감시방법 |
| KR101506120B1 (ko) * | 2014-08-21 | 2015-03-31 | 안양시 | 스마트폰과 안전 지도를 이용한 방범 cctv 통합 관제 시스템 |
| KR101507978B1 (ko) | 2014-10-17 | 2015-04-07 | 주식회사 신관산업 | 다목적 ｃｃｔｖ 방범 시스템 |
| KR101485022B1 (ko) * | 2014-10-20 | 2015-01-21 | 에코아이넷 주식회사 | 행동 패턴 분석이 가능한 객체 추적 시스템 및 이를 이용한 방법 |
| KR20160070922A (ko) | 2014-12-10 | 2016-06-21 | (주)위아이티 | 지하철 객실 감시 cctv시스템 및 그것을 이용한 지하철 객실정보 전송방법 |
| KR101581795B1 (ko) | 2015-06-17 | 2015-12-31 | 영남엘이디 주식회사 | Cctv 카메라가 내장된 led 가로등 제조방법 |
Cited By (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20180045610A (ko) * | 2016-10-26 | 2018-05-04 | 현대자동차주식회사 | 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량 |
| KR101892028B1 (ko) | 2016-10-26 | 2018-08-27 | 현대자동차주식회사 | 음향 추적 정보 제공 방법, 차량용 음향 추적 장치, 및 이를 포함하는 차량 |
| US10810881B2 (en) | 2016-10-26 | 2020-10-20 | Hyundai Motor Company | Method of providing sound tracking information, sound tracking apparatus for vehicles, and vehicle having the same |
| KR20190046220A (ko) * | 2017-10-25 | 2019-05-07 | 한화테크윈 주식회사 | 이벤트 판별 방법 |
| KR102402882B1 (ko) * | 2017-10-25 | 2022-05-27 | 한화테크윈 주식회사 | 이벤트 판별 방법 |
| KR20210065639A (ko) * | 2019-11-27 | 2021-06-04 | 넥서스텍(주) | 모션과 감성 감지를 통한 cctv 시스템 및 그 운영 방법 |
| KR102330346B1 (ko) * | 2019-11-27 | 2021-11-29 | 넥서스텍(주) | 모션과 감성 감지를 통한 cctv 시스템 및 그 운영 방법 |
| KR20210120710A (ko) * | 2020-03-27 | 2021-10-07 | 동명대학교산학협력단 | 경험적 학습기반 음원을 이용한 상황인식 시스템 및 그 방법 |
| KR102354035B1 (ko) | 2020-03-27 | 2022-01-20 | 동명대학교 산학협력단 | 경험적 학습기반 음원을 이용한 상황인식 시스템 및 그 방법 |
| KR102472369B1 (ko) * | 2022-08-05 | 2022-11-30 | 에코아이넷 주식회사 | 긴급도움 요청 음원을 통한 객체 추적시스템 및 추적방법 |
| KR102513372B1 (ko) | 2023-01-12 | 2023-03-23 | 에코아이넷 주식회사 | 음향과 영상을 연계한 하이브리드형 객체 연속 추적시스템 및 제어방법 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101687296B1 (ko) | 음향 및 행동 패턴 인식 기반의 하이브리드 패턴 분석이 가능한 객체 추적 시스템 및 객체 추적 방법 | |
| KR101445367B1 (ko) | 이상 음원에 대한 인식율 향상을 통하여 긴급상황 판별 성능을 개선한 지능형 영상감시 시스템 및 이를 이용한 긴급상황 판별방법 | |
| USRE44527E1 (en) | Abnormality detection and surveillance system | |
| KR101700395B1 (ko) | 경호용 드론 및 이를 이용한 이동식 경호 시스템 | |
| AU2014101406A4 (en) | A portable alerting system and a method thereof | |
| US10616396B2 (en) | Danger detection system | |
| KR101248054B1 (ko) | 물체의 이동 경로를 추적하는 물체 추적 시스템 및 그 방법 | |
| US20060227237A1 (en) | Video surveillance system and method with combined video and audio recognition | |
| KR102390405B1 (ko) | 도어벨 장치 | |
| MX2009001254A (es) | Sistema de vigilancia de video y metodo con reconocimiento de video y audio combinado. | |
| KR101899436B1 (ko) | 비명인식 기반 안전감지센서 | |
| JP5173471B2 (ja) | 避難経路導出装置および避難経路導出方法 | |
| KR20180066509A (ko) | 후방 차량의 시각화 정보 제공 장치 및 방법 | |
| KR20030033127A (ko) | 통신망을 이용한 위급 상황 알림 시스템 및 방법 | |
| EP1875449B1 (en) | Security system, and alarm verification system | |
| KR101321447B1 (ko) | 네트워크를 통한 현장 모니터링 방법, 및 이에 사용되는 관리 서버 | |
| KR102472369B1 (ko) | 긴급도움 요청 음원을 통한 객체 추적시스템 및 추적방법 | |
| CN110634506A (zh) | 一种语音数据的处理方法及装置 | |
| KR101794260B1 (ko) | 음성인식을 이용한 보안등 및 보안시스템 | |
| KR101002130B1 (ko) | Ｒｆｉｄ와 네트워크ｃｃｔｖ의 연동을 이용한 영상 기반이동체 위치 확인 방법과, 이를 위한 이동체 휴대용ｒｆｉｄ 태그 | |
| KR102513372B1 (ko) | 음향과 영상을 연계한 하이브리드형 객체 연속 추적시스템 및 제어방법 | |
| JP2021180374A (ja) | ドローン警備システム、ドローン警備システムのプログラム、移動体警備システム、移動体警備システムのプログラム | |
| KR101882309B1 (ko) | 음성인식을 이용한 보안등 및 보안시스템 | |
| KR101651158B1 (ko) | 음향 및 하이브리드 인식 기반의 긴급상황 인지 ｃｃｔｖ 방범 시스템 및 ｃｃｔｖ 방범 제공 방법 | |
| JP4175180B2 (ja) | 監視通報システム |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E90F | Notification of reason for final refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |