KR100985816B1 - 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법 - Google Patents

터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법 Download PDF

Info

Publication number
KR100985816B1
KR100985816B1 KR1020100026657A KR20100026657A KR100985816B1 KR 100985816 B1 KR100985816 B1 KR 100985816B1 KR 1020100026657 A KR1020100026657 A KR 1020100026657A KR 20100026657 A KR20100026657 A KR 20100026657A KR 100985816 B1 KR100985816 B1 KR 100985816B1
Authority
KR
South Korea
Prior art keywords
fire
tunnel
emergency
vehicle
camera
Prior art date
Application number
KR1020100026657A
Other languages
English (en)
Inventor
이의용
Original Assignee
주식회사 창성에이스산업
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 창성에이스산업 filed Critical 주식회사 창성에이스산업
Priority to KR1020100026657A priority Critical patent/KR100985816B1/ko
Application granted granted Critical
Publication of KR100985816B1 publication Critical patent/KR100985816B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/12Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions
    • G08B17/125Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions by using a video camera to detect fire or smoke
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)

Abstract

본 발명은 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템에 관한 것이다. 본 발명은 하나 이상의 터널상황 감지장치, 통제실 단말기를 포함하는 터널 내 화재 또는 비상상황감지 및 자동속보시스템에 있어서, 상기 터널상황 감지장치는, 레이져를 이용하여 터널 내 화재 또는 비상상황 발생시, 그 화재 또는 비상상황 발생 위치의 거리값을 산출하는 엘알에프(LRF :Lazer Range Finder)와, 적외선 영상을 촬영하여 제어부에 전송하는 적외선 카메라와, 씨씨디 영상을 촬영하여 제어부에 전송하는 씨씨디 카메라와, 상기 적외선 카메라 및 씨씨디 카메라로부터 전송된 촬영 영상을 분석하여 터널 내 화재 또는 비상상황 발생 여부를 판단하고, 화재 또는 비상상황이 발생하였다고 판단하면 씨씨디 카메라가 그 터널 내 화재 또는 비상상황이 발생한 구역을 촬영하도록 처리하며, 상기 적외선 카메라의 설치위치 좌표값, 엘알에프로부터 수신된 거리값 및 적외선 카메라로부터 수신된 촬영 각도값을 이용하여 그 터널 내 화재 또는 비상상황 이 발생한 구역의 위치를 판단하며, 상기 적외선 카메라 또는 씨씨디 카메라가 촬영한 영상이 통제실의 단말기에 출력되도록 처리하는 제어부 그리고 상기 제어부의 제어에 따라 화재 또는 비상상황 발생시, 경고음 또는 경고메세지를 출력하는 경보부를 포함한다. 본 발명은 터널 내 화재 또는 비상상황 발생 시 신속하게 적절한 경보를 할 수 있는 장점이 있다.

Description

터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법{.}
본 발명은 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법에 관한 것으로, 보다 상세하게는 터널의 인근에 설치되는 엘알에프(LRF)가 부착된 터널상황 감지장치가 터널 내 화재 또는 비상상황을 감지하기 위한 영상을 촬영하고, 그 영상의 모양패턴을 분석하여 화재 또는 비상상황의 발생 여부, 그리고 그 화재 또는 비상상황 발생장소를 정확하고 빠르게 감지하여 적절한 경보를 하도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법에 관한 것이다.
본 발명은 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법에 관한 것이다.
일반적으로 터널 내부는 밀폐된 공간상의 특징으로 교통사고나 화재와 같은 재난 발생시 빠른 대처를 하지 않으면 더 큰 사고로 진행되기 때문에 터널 내부에는 각종 센서를 일정간격으로 설치하여 감지하고, 감지된 데이터를 실시간으로 터널 장비실과 원격지의 운영센터로 전송함으로써, 관리자에게 사고발생을 신속하게 알리고 조치할 수 있도록 하는 시스템을 설치하여 운영하고 있다.
현재 이러한 시스템에서 터널 내부의 유고상황을 감지하는 수단을 살펴보면,먼저 교통사고를 감지하기 위해 터널 노면에 루프코일센서를 매설하고 노면으로부터 형성된 자계가 파손되는 시간을 분석하여 교통사고 유무를 판단하는 차량속도 감지기와, 터널 내부의 화재를 감지하기 위해 열이나 연기를 감지하여 화재 유무를 판단하는 센서를 터널 내부의 일정간격으로 설치하여 사용하고 있다.
그리고 터널 내부를 실시간으로 촬영하는 감시카메라를 설치하여 촬영된 영상을 원격지운영센터로 전송함으로써, 관리자가 사고현장을 가지 않고도 육안으로 확인하고 유관기관으로 연락하여 조치할 수 있도록 하고 있다.
상기와 같이 구성된 시스템은 차량속도 감지기와 온도 및 연기센서로 감지한 교통사고나 화재 발생정보를 터널 내부를 촬영한 영상과 함께 실시간으로 원격지 운영센터로 전송한다.
이후 원격지 운영센터에서는 전송되는 정보를 확인하여 사고 발생시 알람 경고하면, 관리자는 상기 감시카메라를 수동으로 조작하면서 사고 현장을 정밀하게 확인한 뒤 유관기관으로 사고 상황을 알려 조치한다.
하지만 교통사고를 감지하는 상기 차량속도 감지기는 터널의 노면에 루프코일센서를 설치할 때 도로굴착에 따른 초기 투자비가 많이 들고, 도로 공사시에는 바닥에 설치된 루프코일을 재설치해야 하며, 잦은 도로공사와 도로 파손으로 인해 루프코일센서가 손상되고, 유지보수시에는 차선을 제한해야 하는 단점이 있다.
그리고 상기 온도센서와 연기센서는 설치된 위치에서 감지 가능한 위치까지 열이나 연기가 도달되어야 정상적으로 작동된다. 그러나 터널에 설치된 환기 팬과 도로를 주행하는 차량에서 발생 되는 빠른 기류는 연기를 날려버려 묽게 하고, 화재로 발생 되는 온도를 떨어뜨리게 함으로써, 상기 센서는 화재를 조기에 감지하지 못하는 단점이 있다.
또한, 종래의 감시카메라는 터널 내부를 단순히 촬영하는 수단으로 원격지의 관리자가 항상 육안으로 감시해야하고, 사고가 발생 된 후에 관리자가 수동으로 감시카메라를 조작해야 하기 때문에 관리자가 부재중일 때는 정밀한(Zoom/Pan/Tilt) 제어를 할 수 없으며, 더욱이 감시카메라로 촬영 중인 공간 밖에서 일어난 사고현장은 관리자의 조작 없이는 촬영하지 못한다는 문제점이 있다.
게다가 터널 내 화재나 인명사고 발생시 어떤 차량이 그 터널 내에 있는지 파악이 어렵고, 그 현장상황을 제보자로부터 전해들어야 하기 때문에 사고현장을 정확하게 파악하지 못함으로써 사고 상황에 적합한 후속조치를 할 수 없는 문제점이 있고, 또한 피해자의 가족에게 정확한 전달이 어려운 문제점이 있다.
따라서 본 발명은 상기와 같은 종래의 문제점을 해결하기 위하여 안출된 것으로, 본 발명의 목적은 적외선 카메라를 이용하여 터널 내 화재 또는 비상상황(예컨대, 터널 내 교통사고 등)을 감지하기 위한 영상을 촬영하고, 그 영상의 모양패턴 및 색상을 분석하여 터널 내 화재 또는 비상상황의 발생 여부를 판단하고, 엘알에프(LRF)를 이용하여 터널 내 화재 또는 비상상황 발생장소를 정확하고 빠르게 판단하여 적절한 경보를 하도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법을 제공하는 데에 있다.
또한, 본 발명의 다른 목적은 적외선 카메라의 열감지 기능을 이용하여 자동으로 화재발생 여부를 판단하고, 화재 발생 후에는 고화질의 씨씨디 카메라가 화재 지역을 촬영하도록 하여 터널 내 화재지역을 용이하게 관찰할 수 있도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법을 제공하는 데에 있다.
또한, 본 발명의 또 다른 목적은 터널 내 사고가 발생한 경우, 영상을 분석하여 그 사고현장(터널 내)에 있는 피해자를 판단한 뒤, 그 피해자의 사고정보를 피해자의 가족 또는 피해자가 가입한 해당 자동차 보험회사에 자동으로 전달하도록 함으로써 사후처리가 정확하고 신속하게 처리될 수 있도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법을 제공하는 데에 있다.
상기한 바와 같은 목적을 달성하기 위한 본 발명의 특징에 따르면, 본 발명은 적외선 카메라 및 씨씨디 카메라를 구비하여 터널 내부를 촬영하고, 그 촬영 영상을 분석하여 터널 내 화재 또는 비상상황 발생 여부를 판단하며, 그 촬영 영상을 통제실 단말기에 전송하는 하나 이상의 터널상황 감지장치; 및 상기 터널상황 감지장치로부터 제공받은 촬영영상을 출력부를 통해 출력하는 통제실 단말기;를 포함하고, 상기 터널상황 감지장치는 터널의 입구, 터널 내부, 터널의 출구에 각각 설치되고, 화재 또는 비상상황 발생시, 상기 통제실 단말기는, 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 입구에 설치된 터널상황 감지장치가 촬영한 영상을 가져온 뒤, 그 영상에서 터널에 진입하는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하며, 상기 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 출구에 설치된 터널상황 감지장치가 촬영한 영상을 가져온 뒤, 그 영상에서 터널을 나가는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하며, 상기 터널에 진입하는 차량의 차량번호들과 터널을 나가는 차량의 차량번호들을 비교하여 터널에 진입하였는데 터널을 나가지 못한 차량이 있는 경우, 그 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단하는 것을 특징으로 한다.
이때, 상기 터널상황 감지장치는, 레이져를 이용하여 터널 내 화재 또는 비상상황 발생시, 그 화재 또는 비상상황 발생 위치의 거리값을 산출하는 엘알에프(LRF :Lazer Range Finder)와; 적외선 영상을 촬영하여 제어부에 전송하는 적외선 카메라와; 씨씨디 영상을 촬영하여 제어부에 전송하는 씨씨디 카메라와; 상기 적외선 카메라 및 씨씨디 카메라로부터 전송된 촬영 영상을 분석하여 터널 내 화재 또는 비상상황 발생 여부를 판단하고, 화재 또는 비상상황이 발생하였다고 판단하면 씨씨디 카메라가 그 터널 내 화재 또는 비상상황이 발생한 구역을 촬영하도록 처리하며, 상기 적외선 카메라의 설치위치 좌표값, 엘알에프로부터 수신된 거리값 및 적외선 카메라로부터 수신된 촬영 각도값을 이용하여 그 터널 내 화재 또는 비상상황 이 발생한 구역의 위치를 판단하며, 상기 적외선 카메라 또는 씨씨디 카메라가 촬영한 영상이 통제실의 단말기에 출력되도록 처리하는 제어부; 및 상기 제어부의 제어에 따라 화재 또는 비상상황 발생시, 경고음 또는 경고메세지를 출력하는 경보부;를 포함한다.
이때, 상기 제어부는 적외선 카메라로부터 전송받은 촬영영상 내에 기준온도 이상이 되는 구역이 발생하면 화재구역으로 판단하고, 그 화재구역 영상의 외곽선을 추출하여 화재구역 외곽선을 생성하고, 상기 외곽선이 미리 설정된 시간 이상 지속적으로 변동되는 경우, 상기 외곽선 영역을 화염으로 판단하는 것이 바람직하다.
또, 상기 제어부는, 상기 화염의 크기정보 및 화염이 번지는 속도를 산출하여 상기 통제실의 단말기에 출력되도록 처리한다.
또, 상기 제어부는, 화재 발생시, 화재여부, 화재발생 위치정보, 화염의 크기정보 또는 화염이 번지는 속도정보가 미리 지정된 방재센터에 제공되도록 처리하는 것이 바람직하다.
또, 상기 제어부는 씨씨디 카메라로부터 전송받은 촬영영상에서 차량을 검출하고, 그 차량이 미리 설정된 방향으로 이동하지 않는 경우 비상상황이라 판단하고, 속도측정부로부터 차량의 속도를 전달받고 차량의 속도가 단시간 내에 제1속도 이상 감속한 뒤 그 차량이 터널 내에서 정지하는 경우 급정거로 인식하여 비상상황이라 판단하는 것이 바람직하다.
한편, 상기 적외선 카메라 또는 씨씨디 카메라는, 제어부의 제어에 따라 적외선 카메라 또는 씨씨디 카메라의 포커싱, 트래킹의 동작을 제어할 수 있는 카메라 구동부가 더 포함되는 것이 바람직하다.
또, 차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스;를 더 포함한다.
삭제
이때, 상기 통제실 단말기가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 상기 통제실 단말기는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주의 보호자 단말기 번호를 상기 차주정보 데이터베이스에서 가져온 뒤, 사고발생을 알리는 메세지를 그 차주의 보호자 단말기에 전송하는 것이 바람직하다.
또, 상기 통제실 단말기가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 상기 통제실 단말기는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주가 가입한 차량의 보험회사 정보를 상기 차주정보 데이터베이스에서 가져온 뒤, 그 보험회사에 화재 또는 비상상황 사고를 접수하여 해당 보험회사의 상담원 접수 및 보상 담당자 접수가 자동으로 이루어지도록 처리하는 것이 바람직하다.
상기한 바와 같은 목적을 달성하기 위한 본 발명의 다른 특징에 따르면, 본 발명은 (A)터널상황 감지장치의 적외선 카메라 및 씨씨디 카메라가 터널 내부의 화재 또는 비상상황을 감지하기 위하여 촬영하는 단계; (B)터널상황 감지장치의 제어부가 적외선 카메라 및 씨씨디 카메라의 촬영 영상을 통제실의 단말기에 전송하고, 그 촬영 영상을 분석하여, 화재 또는 비상상황이 발생하였는지 판단하는 단계; (C)상기 (B)단계에서 화재 또는 비상상황이 발생하였다고 판단되면, 화재 또는 비상상황이 발생한 지역을 씨씨디 카메라가 촬영하고, 터널상황 감지장치의 제어부는 씨씨디 카메라가 촬영한 씨씨디 영상을 통제실의 단말기에 전송하며, 적외선 카메라의 설치위치 좌표값, 엘알에프로부터 수신된 거리값 및 적외선 카메라로부터 수신된 촬영 각도값을 이용하여 화재 또는 비상상황 발생위치를 판단하는 단계; 및 (D)상기 (B)단계에서 화재 또는 비상상황이 발생하였다고 판단되면, 경보신호를 출력하는 단계; (F)상기 (B)단계에서 화재 또는 비상상황으로 판단되면, 통제실 단말기가 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 입구에 설치된 씨씨디 카메라가 촬영한 영상을 가져온 뒤, 그 영상에서 터널에 진입하는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하는 단계; (G)통제실 단말기가 상기 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 출구에 설치된 씨씨디 카메라가 촬영한 영상을 가져온 뒤, 그 영상에서 터널을 나가는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하는 단계; 및 (H)통제실 단말기가 상기 터널에 진입하는 차량의 차량번호들과 터널을 나가는 차량의 차량번호들을 비교하여 터널에 진입하였는데 터널을 나가지 못한 차량이 있는 경우, 그 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단하는 단계;를 포함한다.
이때, 상기 (B)단계는, 터널상황 감지장치의 제어부가 적외선 카메라로부터 전송받은 촬영영상 내에 기준온도 이상이 되는 구역이 발생하면 화재구역으로 판단하고, 그 화재구역 영상의 외곽선을 추출하여 화재구역 외곽선을 생성하고, 상기 외곽선이 미리 설정된 시간 이상 지속적으로 변동되는 경우, 상기 외곽선 영역을 화염으로 판단하는 것이 바람직하다.
그리고 (E)터널상황 감지장치의 제어부는 화재 발생시, 화재여부, 화재발생 위치정보, 화염의 크기정보 또는 화염이 번지는 속도정보를 미리 지정된 방재센터에 제공하는 단계;를 더 포함하는 것이 바람직하다.
또, 터널상황 감지장치의 제어부가 씨씨디 카메라로부터 전송받은 촬영영상에서 차량을 검출하고, 그 차량이 미리 설정된 방향으로 이동하지 않는 경우 비상상황이라 판단하고, 속도측정부로부터 차량의 속도를 전달받고 차량의 속도가 단시간 내에 제1속도 이상 감속한 뒤 그 차량이 터널 내에서 정지하는 경우 급정거로 인식하여 비상상황이라 판단하는 것이 바람직하다.
또, (I)통제실 단말기가 상기 (H)단계에서 화재 또는 비상상황 구역에 차량이 있다고 판단한 경우, 차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스에서 그 화재 또는 비상상황이 발생한 구역에 있는 차량번호에 대응되는 차주의 보호자 단말기 번호를 추출하는 단계; 및 (J)통제실 단말기가 사고발생을 알리는 메세지를 상기 (H)단계에서 추출한 차주의 보호자 단말기에 전송하는 단계;를 더 포함하는 것이 바람직하다.
삭제
또, (K)통제실 단말기가 상기 (H)단계에서 화재 또는 비상상황 구역에 차량이 있다고 판단한 경우, 차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스에서 그 화재 또는 비상상황이 발생한 구역에 있는 차량번호에 대응되는 차주가 가입한 차량 보험회사 정보를 추출하는 단계; 및 (L)통제실 단말기가 상기 (K)단계에서 추출한 그 보험회사 서버에 화재 또는 비상상황 사고를 접수하여 해당 보험회사의 상담원 접수 및 보상 담당자 접수가 자동으로 이루어지도록 처리하는 단계;를 더 포함하는 것이 바람직하다.
위에서 설명한 바와 같은 본 발명에 따르면, 본 발명은 적외선 카메라를 이용하여 터널 내 화재 또는 비상상황(예컨대, 터널 내 교통사고 등)을 감지하기 위한 영상을 촬영하고, 그 영상의 모양패턴 및 색상을 분석하여 화재 또는 비상상황의 발생여부를 판단하고, 엘알에프(LRF)를 이용하여 터널 내 화재 또는 비상상황 발생장소를 정확하고 빠르게 판단하여 적절한 경보를 하도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법을 제공할 수 있다.
또한, 본 발명은 적외선 카메라의 열감지 기능을 이용하여 자동으로 화재발생 여부를 판단하고, 화재 발생 후에는 고화질의 씨씨디 카메라가 화재 지역을 촬영하도록 하여 터널 내 화재지역을 용이하게 관찰할 수 있도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법을 제공할 수 있다.
또한, 본 발명은 터널 내 사고가 발생한 경우, 영상을 분석하여 그 사고현장(터널 내)에 있는 피해자를 판단한 뒤, 그 피해자의 사고정보를 피해자의 가족 또는 피해자가 가입한 해당 자동차 보험회사에 자동으로 전달하도록 함으로써 사후처리가 정확하고 신속하게 처리될 수 있도록 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법을 제공할 수 있다.
도 1은 본 발명의 바람직한 실시예에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템의 전체시스템도.
도 2는 본 발명의 바람직한 실시예에 의한 터널상황 감지장치의 내부 구성을 도시한 블럭도.
도 3은 본 발명의 바람직한 실시예에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템이 설치된 모습을 보여주는 설명도.
도 4는 본 발명의 바람직한 실시예에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템의 동작과정을 도시한 순서도.
도 5 및 도 6은 도 4에 도시된 S110를 상세하게 도시한 상세 순서도.
이하에서는 상기한 바와 같은 본 발명에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템의 바람직한 실시예를 첨부된 도면을 참고로 하여 상세하게 설명한다.
도 1에는 본 발명의 바람직한 실시예에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템의 전체시스템도가 도시되어 있고, 도 2에는 본 발명의 바람직한 실시예에 의한 터널상황 감지장치의 내부 구성을 도시한 블럭도가 도시되어 있다.
이들 도면에 도시된 바와 같이, 본 발명은 터널상황 감지장치(100), 통제실 단말기(200), 방제센터(300), 차주정보 데이터베이스(400), 자동차 보험회사 서버(500), 차주의 보호자 단말기(600)를 포함한다.
터널상황 감지장치(100)는 적외선 카메라(110), 씨씨디(CCD) 카메라(120), 엘알에프(125), 제어부(130), 통신부(150), 통제실 인터페이스부(140)를 포함한다.
적외선 카메라(110)는 적외선 영상을 촬영하여 제어부에 전송한다. 여기서, 적외선 영상이라 함은 적외선 카메라(110)가 촬영한 영상을 의미한다.
씨씨디 카메라(120)는 씨씨디 영상을 촬영하여 제어부에 전송한다. 여기서, 씨씨디 영상이라 함은 씨씨디 카메라(120)가 촬영한 영상을 의미한다.
적외선 카메라(110)와 씨씨디 카메라(120)에는 후술되는 제어부(130)의 제어에 따라 적외선 카메라 또는 씨씨디 카메라의 포커싱, 트래킹 등의 동작을 제어할 수 있는 카메라 구동부(미도시)가 더 포함되는 것이 바람직하다.
엘알에프(LRF :Lazer Range Finder)(125)는 레이저를 이용한 거리측정기로서, 통상적으로 많이 사용되는 기구이므로 엘알에프의 상세한 구성에 대한 설명은 생략한다.
제어부(130)는 화재 판단부(131), 비상상황 판단부(132), 카메라 변환부(133), 위치판단부(134), 경보부(135)를 포함한다.
화재판단부(131)는 적외선 카메라(110)로부터 전송받은 촬영영상 내에 기준온도(예컨대; 200 °C) 이상이 되는 지역이 발생하면 화재구역으로 판단하고, 그 화재구역 영상의 외곽선을 추출하여 화재구역 외곽선을 생성하고, 상기 외곽선이 미리 설정된 시간 이상 지속적으로 변동되는 경우(예컨대; 붉은 계열 색상의 일렁이는 패턴), 상기 외곽선 영역을 화염으로 판단하는 것이 바람직하다.
이때, 화염 외곽선이 일정시간 이상 지속적으로 변동하는 경우에 화재로 판단하는 것은 예컨대 라이터 같은 불은 모양이 거의 일정하니까 화재로 판단되지 않기 때문이다.
비상상황 판단부(132)는 씨씨디 카메라(120)로부터 전송받은 촬영영상에서 차량을 검출하고, 그 차량이 미리 설정된 방향으로 이동하지 않는 경우 비상상황이라 판단하고, 속도측정부로부터 차량의 속도를 전달받고 차량의 속도가 단시간 내에 제1속도 이상 감속한 뒤 그 차량이 터널 내에서 정지하는 경우 급정거로 인식하여 비상상황이라 판단한다. 이때, 차량의 속도가 단시간 내에 제1속도 이상 감속 하는지 판단하는 것은 차량이 갑자기 급감속하는 것인지 판단하기 위함이다.
카메라 변환부(133)는 화재판단부(131) 또는 비상상황 판단부(132)의 판단결과 터널 내 화재 또는 비상상황이 발생한 경우, 그 화재 또는 비상상황 지역을 촬영하기 위하여 작동하던 적외선 카메라(110)를 씨씨디 카메라(120)로 변환한다. 이는 적외선 카메라(110)가 열감지의 기능을 구비하여 화재 발생 여부를 자동으로 체크할 수 있고, 씨씨디 카메라(120)는 화질이 우수하여 화재 또는 비상상황 발생 후, 그 화재 또는 비상상황 구역을 관리자가 용이하게 관찰할 수 있기 때문이다.
위치판단부(134)는 적외선 카메라(110)의 설치위치 좌표값, 엘알에프(125)로부터 수신된 거리값 및 적외선 카메라(110)로부터 수신된 촬영 각도값을 이용하여 화재 또는 비상상황이 발생한 구역의 위치를 판단한다.
경보부(135)는 터널 내 화재 또는 비상상황이 발생하였다고 판단되면, 상기 화재 또는 비상상황 발생 위치정보를 통제실의 단말기(200)에 출력되도록 처리한다. 이때, 화재가 발생한 경우에는 화염의 크기정보 및 화염이 번지는 속도를 산출하여 통제실의 단말기(200)에 함께 출력되도록 처리하는 것이 바람직하다.
또한, 경보부(137)는 화재 발생시, 화재여부를 미리 설정된 방재센터에 신고되도록 처리하고, 상기 화재발생 위치정보, 화염의 크기정보 및 화염이 번지는 속도정보가 제공되도록 처리한다.
한편, 제어부(130)는 상기 통제실의 단말기(200)로부터 상기 적외선 카메라(110) 또는 씨씨디 카메라(120)의 포커싱 또는 트래킹을 조작할 수 있는 신호를 입력받아, 카메라 구동부(미도시)를 제어한다. 또한, 적외선 카메라(110), 씨씨디 카메라(120)가 촬영한 영상이 통제실 인터페이스부(140)를 통해 통제실 단말기(200)에 출력되도록 처리한다.
즉, 제어부(130)는 적외선 카메라(110), 씨씨디 카메라(120)의 촬영영상을 이용하여, 터널 내 화재 또는 비상상황이 발생되었는지 판단하고, 화재 또는 비상상황이 발생하는 경우, 이를 방재센터 및 통제실에 알리는 등의 전반적인 동작이 수행되도록 처리하며, 이는 마이크로프로세서나 DSP(digital signal processor) 등으로 이루어질 수 있다.
통제실 단말기(200)는 터널상황 감지장치(100)로부터 촬영영상을 전송받아 이를 출력부(미도시)에 출력한다. 또한, 입력부(미도시)를 통해 터널 내 어느 특정 구역의 영상을 보고자 적외선 카메라(110) 또는 씨씨디 카메라(120)의 카메라 구동부를 제어할 수도 있다.
또한, 통제실 단말기(200)는 터널 내에 화재 또는 비상상황 발생 시, 그 터널 내에 있는 차주의 보호자 또는 차주가 가입한 자동차 보험회사에 자동으로 그 사고를 알리는 메세지가 전송되도록 처리한다. 이는 하기에 설명되는 도 3을 참조하여 더욱 상세하게 설명하기로 한다.
한편, 차주정보 데이터베이스(400)에는 차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장된다.
도 3에는 본 발명의 바람직한 실시예에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템이 설치된 모습을 보여주는 설명도가 도시되어 있다.
도 3에 도시된 바와 같이 터널상황 감지장치는 터널의 입구(100A), 터널 내부(100B, 100C, 100D), 터널의 출구(100E)에 각각 설치될 수 있다. 이때, 터널상황 감지장치(100A, 100B, 100C, 100D, 100E)가 촬영한 영상은 터널상황 감지장치(100)의 제어부(130)의 제어하에 무선통신망을 통해 통제실 단말기(200)에 전송된다.
한편, 화재 또는 비상상황 발생시, 통제실 단말기(200)는, 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 입구에 설치된 터널상황 감지장치(100A)가 촬영한 영상을 가져온 뒤, 그 영상에서 터널에 진입하는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단한다. 여기서, 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점이라고 하는 것은 화재 또는 비상상황이 발생했다는 신호를 받은 시점보다 소정시간 앞선 시점을 의미하는 것이다. 예컨대, 터널상황 감지장치로부터 3시 1분에 화재가 발생했다는 신호를 받으면, 통제실 단말기는 3시 1분보다 조금 앞선 2시 55분부터 입구에 설치된 터널상황 감지장치가 촬영한 영상을 가져오는 것이다.
또, 통제실 단말기(200)는 상기 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 출구에 설치된 터널상황 감지장치(100E)가 촬영한 영상을 가져온 뒤, 그 영상에서 터널을 나가는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호를 판단한다.
이후, 통제실 단말기(200)는 그 터널에 진입하는 차량의 차량번호와 터널을 나가는 차량의 차량번호를 비교하여 터널에 진입하였는데 터널을 나가지 못한 차량이 있는 경우, 그 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단한다.
그리고 통제실 단말기(200)가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 통제실 단말기(200)는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주의 보호자 단말기 번호를 차주정보 데이터베이스(400)에서 가져온 뒤, 사고발생을 알리는 메세지를 그 차주의 보호자 단말기에 전송하는 것이 바람직하다.
또, 통제실 단말기(200)가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 통제실 단말기(200)는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주가 가입한 차량의 보험회사 정보를 상기 차주정보 데이터베이스(400)에서 가져온 뒤, 그 보험회사에 화재 또는 비상상황 사고를 접수하여 해당 보험회사의 상담원 접수 및 보상 담당자 접수가 자동으로 이루어지도록 처리한다.
상술한 바에 따르면, 터널 내 화재나 비상상황이 발생하는 경우, 그 피해자의 가족 또는 그 피해자가 가입한 해당 자동차 보험회사에 자동으로 그 사고상황이 전달되도록 함으로써 사후처리가 정확하고 신속하게 처리될 수 있는 장점이 있다.
이하에서는 본 발명에 따른 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템의 동작과정을 도면을 참조하여 상세하게 설명하기로 한다.
도 4에는 본 발명의 바람직한 실시예에 의한 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템의 동작과정을 도시한 순서도가 도시되어 있다.
우선, 터널상황 감지장치(100)의 적외선 카메라(110) 및 씨씨디 카메라(120)가 터널 내부의 화재 또는 비상상황을 감지하기 위하여 촬영한다(단계 S100).
이후, 제어부(130)는 적외선 카메라(110)의 적외선 영상 및 씨씨디 카메라(120)의 씨씨디 영상을 통제실의 단말기(200)에 전송한다.
그리고 화재 판단부(131)와 비상상황 판단부(132)는 적외선 영상 및 씨씨디 영상을 분석하여, 터널 내 화재 또는 비상상황이 발생하였는지 판단한다.
도 5에는 비상상황 판단부가 동작하는 모습을 설명하는 순서도가 도시되어 있다.
도 5를 참조하면, 비상상황 판단부(132)가 씨씨디 카메라(120)로부터 전송받은 촬영영상을 액세스 한다(단계 S111). 이후, 촬영영상에서 차량을 추출한 뒤(단계 S111), 그 차량이 미리 설정된 방향을 이탈할지 않는지 판단한다(단계 S113).
그리고 비상상황 판단부(132)는 속도측정부로부터 차량의 속도를 전달받고 차량의 속도가 단시간 내에 제1속도 이상 급감속한 뒤 차량이 정지하는지 판단한다(단계 S114). 비상상황 판단부(132)는 단계 S113 및 단계 S114의 판단결과 그 차량이 미리 설정된 방향으로 이동하지 않거나 소정 차량의 속도가 단시간 내에 제1속도 이상 급감속한 뒤 터널 내에서 차량이 정지하는 경우 급정거로 인식하여 비상상황이 발생하였다고 판단한다(단계 S115).
도 6에는 화재 판단부가 동작하는 모습을 설명하는 순서도가 도시되어 있다.
도 6을 참조하면, 화재판단부(131)는 적외선 카메라(110)로부터 전송받은 촬영영상을 액세스한다(단계 S116). 이후, 상기 촬영영상 내에 기준온도(예컨대; 200°C) 이상이 되는 지역이 있는지 판단한다(단계 S117).
단계 S117의 판단결과, 기준온도 이상이 되는 지역이 있다면, 화재판단부(131)는 그 지역을 화재지역으로 판단하고, 그 화재지역 영상의 외곽선을 추출하여 화재지역 외곽선을 생성하고(단계 S118), 상기 외곽선이 미리 설정된 시간 이상 지속적으로 변동되는 경우(예컨대; 붉은 계열 색상의 일렁이는 패턴), 상기 외곽선 영역을(단계 S119), 특정 영역을 화염으로 판단한다(단계 S120).
이때, 화재판단부(131) 또는 비상상황 판단부(132)가 화재 또는 비상상황이 발생하였다고 판단하는 경우, 제어부(130)는 적외선 카메라(110)의 설치위치 좌표값, 엘알에프(125)로부터 수신된 거리값 및 적외선 카메라(110)로부터 수신된 촬영 각도값을 이용하여 화재 또는 비상상황 발생위치를 판단하고, 그 발생위치 정보를 통제실 단말기(200)에 제공한다(단계 S150). 이때, 적외선 카메라(110)의 설치위치 좌표값은 터널상황 감지장치(110)의 메모리(미도시)에 미리 저장되어 있다.
이후, 터널 내 화재 또는 비상상황 발생한 경우, 경보부(135)는 터널상황 감지장치(100)와 통제실 단말기(200)에 경보음 또는 경보메세지가 출력되도록 처리하고, (단계 S170). 이때, 화재가 발생한 경우에는 미리 지정된 방재센터(300)에 신고되도록 처리한다.
한편, 화재 또는 비상상황 발생시, 통제실 단말기(200)는, 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 입구에 설치된 터널상황 감지장치(100A)가 촬영한 영상을 가져온 뒤, 그 영상에서 터널에 진입하는 차량의 차량번호판을 추출하고(단계 S180), 그 차량번호판에서 차량번호들을 판단한다(단계 S190).
또, 통제실 단말기(200)는 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 출구에 설치된 터널상황 감지장치(100E)가 촬영한 영상을 가져온 뒤(단계 S200), 그 영상에서 터널을 나가는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단한다(단계 S210).
이후, 통제실 단말기(200)는 그 터널에 진입하는 차량의 차량번호와 터널을 나가는 차량의 차량번호를 비교하여 터널에 진입하였는데 터널을 나가지 못한 차량이 있는 경우, 그 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단한다(단계 S220). 예컨대, 단계 S190에서 차량번호가 1111, 2222, 3333, 4444인 차량들이 터널에 진입하였다고 판단하고, 단계 S210에서 차량번호가 0000, 1234, 2222, 4444인 차량들이 터널을 나갔다고 판단한 경우, 통제실 단말기는 그 차량번호들을 비교하여 차량번호가 1111, 3333인 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단하는 것이다.
그리고 통제실 단말기(200)가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 통제실 단말기(200)는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주의 보호자 단말기 번호를 차주정보 데이터베이스(400)에서 가져온 뒤, 사고발생을 알리는 메세지를 그 차주의 보호자 단말기에 전송한다(단계 S230).
본 발명의 권리는 위에서 설명된 실시예에 한정되지 않고 청구범위에 기재된 바에 의해 정의되며, 본 발명의 분야에서 통상의 지식을 가진 자가 청구범위에 기재된 권리범위 내에서 다양한 변형과 개작을 할 수 있다는 것은 자명하다.
* 도면의 주요 부분에 대한 부호의 설명 *
100 : 터널상황 감지장치 110 : 적외선 카메라
120 : 씨씨디 카메라 130 : 제어부
131 : 화재판단부 133 : 카메라 변환부
137 : 경보부 140 : 통제실 인터페이스부
150 : 통신부 200 : 통제실 단말기
300 : 방재 센터 400 : 차주정보 데이터베이스
500 : 보험회사 서버 600 : 차주 보호자 단말기

Claims (17)

  1. 적외선 카메라 및 씨씨디 카메라를 구비하여 터널 내부를 촬영하고, 그 촬영 영상을 분석하여 터널 내 화재 또는 비상상황 발생 여부를 판단하며, 그 촬영 영상을 통제실 단말기에 전송하는 하나 이상의 터널상황 감지장치; 및
    상기 터널상황 감지장치로부터 제공받은 촬영영상을 출력부를 통해 출력하는 통제실 단말기;를 포함하고,
    상기 터널상황 감지장치는 터널의 입구, 터널 내부, 터널의 출구에 각각 설치되고,
    화재 또는 비상상황 발생시, 상기 통제실 단말기는, 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 입구에 설치된 터널상황 감지장치가 촬영한 영상을 가져온 뒤, 그 영상에서 터널에 진입하는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하며,
    상기 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 출구에 설치된 터널상황 감지장치가 촬영한 영상을 가져온 뒤, 그 영상에서 터널을 나가는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하며,
    상기 터널에 진입하는 차량의 차량번호들과 터널을 나가는 차량의 차량번호들을 비교하여 터널에 진입하였는데 터널을 나가지 못한 차량이 있는 경우, 그 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  2. 제1항에 있어서, 상기 터널상황 감지장치는,
    레이져를 이용하여 터널 내 화재 또는 비상상황 발생시, 그 화재 또는 비상상황 발생 위치의 거리값을 산출하는 엘알에프(LRF :Lazer Range Finder)와;
    적외선 영상을 촬영하여 제어부에 전송하는 적외선 카메라와;
    씨씨디 영상을 촬영하여 제어부에 전송하는 씨씨디 카메라와;
    상기 적외선 카메라 및 씨씨디 카메라로부터 전송된 촬영 영상을 분석하여 터널 내 화재 또는 비상상황 발생 여부를 판단하고, 화재 또는 비상상황이 발생하였다고 판단하면 씨씨디 카메라가 그 터널 내 화재 또는 비상상황이 발생한 구역을 촬영하도록 처리하며, 상기 적외선 카메라의 설치위치 좌표값, 엘알에프로부터 수신된 거리값 및 적외선 카메라로부터 수신된 촬영 각도값을 이용하여 그 터널 내 화재 또는 비상상황이 발생한 구역의 위치를 판단하며, 상기 적외선 카메라 또는 씨씨디 카메라가 촬영한 영상이 통제실의 단말기에 출력되도록 처리하는 제어부; 및
    상기 제어부의 제어에 따라 화재 또는 비상상황 발생시, 경고음 또는 경고메세지를 출력하는 경보부;를 포함하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  3. 제2항에 있어서, 상기 제어부는,
    적외선 카메라로부터 전송받은 촬영영상 내에 기준온도 이상이 되는 구역이 발생하면 화재구역으로 판단하고, 그 화재구역 영상의 외곽선을 추출하여 화재구역 외곽선을 생성하고, 상기 외곽선이 미리 설정된 시간 이상 지속적으로 변동되는 경우, 상기 외곽선 영역을 화염으로 판단하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  4. 제3항에 있어서, 상기 제어부는,
    상기 화염의 크기정보 및 화염이 번지는 속도를 산출하여 상기 통제실의 단말기에 출력되도록 처리하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  5. 제4항에 있어서, 상기 제어부는,
    화재 발생시, 화재여부, 화재발생 위치정보, 화염의 크기정보 또는 화염이 번지는 속도정보가 미리 지정된 방재센터에 제공되도록 처리함을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  6. 제2항에 있어서, 상기 제어부는
    씨씨디 카메라로부터 전송받은 촬영영상에서 차량을 검출하고, 그 차량이 미리 설정된 방향으로 이동하지 않는 경우 비상상황이라 판단하고, 속도측정부로부터 차량의 속도를 전달받고 차량의 속도가 단시간 내에 제1속도 이상 감속한 뒤 터널 내에서 정지하는 경우 급정거로 인식하여 비상상황이라 판단하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  7. 제2항에 있어서,
    상기 적외선 카메라 또는 씨씨디 카메라는,
    제어부의 제어에 따라 적외선 카메라 또는 씨씨디 카메라의 포커싱, 트래킹의 동작을 제어할 수 있는 카메라 구동부가 더 포함되는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  8. 삭제
  9. 제1항에 있어서,
    차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스;를 더 포함하고,
    상기 통제실 단말기가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 상기 통제실 단말기는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주의 보호자 단말기 번호를 상기 차주정보 데이터베이스에서 가져온 뒤, 사고발생을 알리는 메세지를 그 차주의 보호자 단말기에 전송하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  10. 제1항에 있어서,
    차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스;를 더 포함하고,
    상기 통제실 단말기가 화재 또는 비상상황이 발생한 구역에 차량이 있다고 판단하는 경우, 상기 통제실 단말기는 화재 또는 비상상황이 발생한 구역에 있는 차량의 차량번호에 대응되는 차주가 가입한 차량의 보험회사 정보를 상기 차주정보 데이터베이스에서 가져온 뒤, 그 보험회사 서버에 화재 또는 비상상황 사고를 접수하여 해당 보험회사의 상담원 접수 및 보상 담당자 접수가 자동으로 이루어지도록 처리하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템.
  11. (A)터널상황 감지장치의 적외선 카메라 및 씨씨디 카메라가 터널 내부의 화재 또는 비상상황을 감지하기 위하여 촬영하는 단계;
    (B)터널상황 감지장치의 제어부가 적외선 카메라 및 씨씨디 카메라의 촬영 영상을 통제실의 단말기에 전송하고, 그 촬영 영상을 분석하여, 화재 또는 비상상황이 발생하였는지 판단하는 단계;
    (C)상기 (B)단계에서 화재 또는 비상상황이 발생하였다고 판단되면, 화재 또는 비상상황이 발생한 지역을 씨씨디 카메라가 촬영하고, 터널상황 감지장치의 제어부는 씨씨디 카메라가 촬영한 씨씨디 영상을 통제실의 단말기에 전송하며, 적외선 카메라의 설치위치 좌표값, 엘알에프로부터 수신된 거리값 및 적외선 카메라로부터 수신된 촬영 각도값을 이용하여 화재 또는 비상상황 발생위치를 판단하는 단계;
    (D)상기 (B)단계에서 화재 또는 비상상황이 발생하였다고 판단되면, 경보신호를 출력하는 단계;
    (F)상기 (B)단계에서 화재 또는 비상상황으로 판단되면, 통제실 단말기가 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 입구에 설치된 씨씨디 카메라가 촬영한 영상을 가져온 뒤, 그 영상에서 터널에 진입하는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하는 단계;
    (G)통제실 단말기가 상기 화재 또는 비상상황이 발생한 시각보다 미리 설정된 시간 이전의 시점부터 터널의 출구에 설치된 씨씨디 카메라가 촬영한 영상을 가져온 뒤, 그 영상에서 터널을 나가는 차량의 차량번호판을 추출하고, 그 차량번호판에서 차량번호들을 판단하는 단계; 및
    (H)통제실 단말기가 상기 터널에 진입하는 차량의 차량번호들과 터널을 나가는 차량의 차량번호들을 비교하여 터널에 진입하였는데 터널을 나가지 못한 차량이 있는 경우, 그 차량이 화재 또는 비상상황이 발생한 구역에 있다고 판단하는 단계;
    를 포함하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 방법.
  12. 제11항에 있어서, 상기 (B)단계는,
    터널상황 감지장치의 제어부가 적외선 카메라로부터 전송받은 촬영영상 내에 기준온도 이상이 되는 구역이 발생하면 화재구역으로 판단하고, 그 화재구역 영상의 외곽선을 추출하여 화재구역 외곽선을 생성하고, 상기 외곽선이 미리 설정된 시간 이상 지속적으로 변동되는 경우, 상기 외곽선 영역을 화염으로 판단하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 방법.
  13. 제12항에 있어서,
    (E)터널상황 감지장치의 제어부는 화재 발생시, 화재여부, 화재발생 위치정보, 화염의 크기정보 또는 화염이 번지는 속도정보를 미리 지정된 방재센터에 제공하는 단계;를 더 포함하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 방법.
  14. 제11항에 있어서, 상기 (B)단계는,
    터널상황 감지장치의 제어부가 씨씨디 카메라로부터 전송받은 촬영영상에서 차량을 검출하고, 그 차량이 미리 설정된 방향으로 이동하지 않는 경우 비상상황이라 판단하고, 속도측정부로부터 차량의 속도를 전달받고 차량의 속도가 단시간 내에 제1속도 이상 감속한 뒤 터널 내에서 정지하는 경우 급정거로 인식하여 비상상황이라 판단하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 방법.
  15. 삭제
  16. 제11항에 있어서,
    (I)통제실 단말기가 상기 (H)단계에서 화재 또는 비상상황 구역에 차량이 있다고 판단한 경우, 차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스에서 그 화재 또는 비상상황이 발생한 구역에 있는 차량번호에 대응되는 차주의 보호자 단말기 번호를 추출하는 단계; 및
    (J)통제실 단말기가 사고발생을 알리는 메세지를 상기 (H)단계에서 추출한 차주의 보호자 단말기에 전송하는 단계;를 더 포함하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 방법.
  17. 제11항에 있어서,
    (K)통제실 단말기가 상기 (H)단계에서 화재 또는 비상상황 구역에 차량이 있다고 판단한 경우, 차량번호별 차주의 이름, 성별, 주민등록번호, 전화번호, 차주의 보호자 단말기 번호, 차주가 가입한 차량 보험회사 정보가 저장되는 차주정보 데이터베이스에서 그 화재 또는 비상상황이 발생한 구역에 있는 차량번호에 대응되는 차주가 가입한 차량 보험회사 정보를 추출하는 단계; 및
    (L)통제실 단말기가 상기 (K)단계에서 추출한 그 보험회사 서버에 화재 또는 비상상황 사고를 접수하여 해당 보험회사의 상담원 접수 및 보상 담당자 접수가 자동으로 이루어지도록 처리하는 단계;를 더 포함하는 것을 특징으로 하는 터널 내 화재와 비상상황을 감지하고 자동속보하는 방법.

KR1020100026657A 2010-03-25 2010-03-25 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법 KR100985816B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020100026657A KR100985816B1 (ko) 2010-03-25 2010-03-25 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100026657A KR100985816B1 (ko) 2010-03-25 2010-03-25 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법

Publications (1)

Publication Number Publication Date
KR100985816B1 true KR100985816B1 (ko) 2010-10-08

Family

ID=43135071

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100026657A KR100985816B1 (ko) 2010-03-25 2010-03-25 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법

Country Status (1)

Country Link
KR (1) KR100985816B1 (ko)

Cited By (50)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101229945B1 (ko) * 2012-04-06 2013-02-06 김명호 터널 사고 검출 및 경보시스템
US9058653B1 (en) 2011-06-10 2015-06-16 Flir Systems, Inc. Alignment of visible light sources based on thermal images
US9143703B2 (en) 2011-06-10 2015-09-22 Flir Systems, Inc. Infrared camera calibration techniques
US9207708B2 (en) 2010-04-23 2015-12-08 Flir Systems, Inc. Abnormal clock rate detection in imaging sensor arrays
US9208542B2 (en) 2009-03-02 2015-12-08 Flir Systems, Inc. Pixel-wise noise reduction in thermal images
US9235023B2 (en) 2011-06-10 2016-01-12 Flir Systems, Inc. Variable lens sleeve spacer
US9235876B2 (en) 2009-03-02 2016-01-12 Flir Systems, Inc. Row and column noise reduction in thermal images
US9292909B2 (en) 2009-06-03 2016-03-22 Flir Systems, Inc. Selective image correction for infrared imaging devices
USD765081S1 (en) 2012-05-25 2016-08-30 Flir Systems, Inc. Mobile communications device attachment with camera
US9451183B2 (en) 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9473681B2 (en) 2011-06-10 2016-10-18 Flir Systems, Inc. Infrared camera system housing with metalized surface
US9509924B2 (en) 2011-06-10 2016-11-29 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US9521289B2 (en) 2011-06-10 2016-12-13 Flir Systems, Inc. Line based image processing and flexible memory system
US9517679B2 (en) 2009-03-02 2016-12-13 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9635285B2 (en) 2009-03-02 2017-04-25 Flir Systems, Inc. Infrared imaging enhancement with fusion
US9635220B2 (en) 2012-07-16 2017-04-25 Flir Systems, Inc. Methods and systems for suppressing noise in images
US9674458B2 (en) 2009-06-03 2017-06-06 Flir Systems, Inc. Smart surveillance camera systems and methods
US9706139B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Low power and small form factor infrared imaging
US9706137B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Electrical cabinet infrared monitor
US9706138B2 (en) 2010-04-23 2017-07-11 Flir Systems, Inc. Hybrid infrared sensor array having heterogeneous infrared sensors
US9716843B2 (en) 2009-06-03 2017-07-25 Flir Systems, Inc. Measurement device for electrical installations and related methods
US9723227B2 (en) 2011-06-10 2017-08-01 Flir Systems, Inc. Non-uniformity correction techniques for infrared imaging devices
US9756264B2 (en) 2009-03-02 2017-09-05 Flir Systems, Inc. Anomalous pixel detection
US9756262B2 (en) 2009-06-03 2017-09-05 Flir Systems, Inc. Systems and methods for monitoring power systems
US9807319B2 (en) 2009-06-03 2017-10-31 Flir Systems, Inc. Wearable imaging devices, systems, and methods
US9811884B2 (en) 2012-07-16 2017-11-07 Flir Systems, Inc. Methods and systems for suppressing atmospheric turbulence in images
US9819880B2 (en) 2009-06-03 2017-11-14 Flir Systems, Inc. Systems and methods of suppressing sky regions in images
US9843742B2 (en) 2009-03-02 2017-12-12 Flir Systems, Inc. Thermal image frame capture using de-aligned sensor array
US9848134B2 (en) 2010-04-23 2017-12-19 Flir Systems, Inc. Infrared imager with integrated metal layers
US9900526B2 (en) 2011-06-10 2018-02-20 Flir Systems, Inc. Techniques to compensate for calibration drifts in infrared imaging devices
US9918023B2 (en) 2010-04-23 2018-03-13 Flir Systems, Inc. Segmented focal plane array architecture
US9948872B2 (en) 2009-03-02 2018-04-17 Flir Systems, Inc. Monitor and control systems and methods for occupant safety and energy efficiency of structures
US9961277B2 (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Infrared focal plane array heat spreaders
US9973692B2 (en) 2013-10-03 2018-05-15 Flir Systems, Inc. Situational awareness by compressed display of panoramic views
US9986175B2 (en) 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US9998697B2 (en) 2009-03-02 2018-06-12 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US10051210B2 (en) 2011-06-10 2018-08-14 Flir Systems, Inc. Infrared detector array with selectable pixel binning systems and methods
US10079982B2 (en) 2011-06-10 2018-09-18 Flir Systems, Inc. Determination of an absolute radiometric value using blocked infrared sensors
US10091439B2 (en) 2009-06-03 2018-10-02 Flir Systems, Inc. Imager with array of multiple infrared imaging modules
US10169666B2 (en) 2011-06-10 2019-01-01 Flir Systems, Inc. Image-assisted remote control vehicle systems and methods
US10244190B2 (en) 2009-03-02 2019-03-26 Flir Systems, Inc. Compact multi-spectrum imaging with fusion
US10389953B2 (en) 2011-06-10 2019-08-20 Flir Systems, Inc. Infrared imaging device having a shutter
JP2019139657A (ja) * 2018-02-14 2019-08-22 古河電気工業株式会社 トンネル内部状況検知装置およびこれを装備したトンネル並びにトンネル内部状況監視システム
US10757308B2 (en) 2009-03-02 2020-08-25 Flir Systems, Inc. Techniques for device attachment with dual band imaging sensor
KR20200126746A (ko) * 2019-04-30 2020-11-09 주식회사 참좋은넷 차량번호 인식을 기반으로 하는 재난 경보시스템
US10841508B2 (en) 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
KR20210023273A (ko) 2019-08-22 2021-03-04 아이브스 주식회사 터널 상황 판단 장치 및 그 방법
US11297264B2 (en) 2014-01-05 2022-04-05 Teledyne Fur, Llc Device attachment with dual band imaging sensor
CN115457728A (zh) * 2022-08-18 2022-12-09 合肥未来计算机技术开发有限公司 一种隧道施工人员作业安全防护方法
KR102538250B1 (ko) * 2022-05-31 2023-05-31 주식회사 트로닉스 등기구의 디밍 제어 방법 및 이를 이용한 디밍 제어 시스템

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09654A (ja) * 1995-06-20 1997-01-07 Shinko Electric Co Ltd トンネル内消火システム
JP2003272086A (ja) * 2002-03-14 2003-09-26 Mitsubishi Heavy Ind Ltd トンネル内監視システム、プログラムおよび記録媒体
KR100901784B1 (ko) * 2008-11-11 2009-06-11 주식회사 창성에이스산업 화재 발생 감지시스템 및 그 방법
KR20090076485A (ko) * 2008-01-09 2009-07-13 주식회사 토페스 터널에서의 사고감시 시스템 및 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09654A (ja) * 1995-06-20 1997-01-07 Shinko Electric Co Ltd トンネル内消火システム
JP2003272086A (ja) * 2002-03-14 2003-09-26 Mitsubishi Heavy Ind Ltd トンネル内監視システム、プログラムおよび記録媒体
KR20090076485A (ko) * 2008-01-09 2009-07-13 주식회사 토페스 터널에서의 사고감시 시스템 및 방법
KR100901784B1 (ko) * 2008-11-11 2009-06-11 주식회사 창성에이스산업 화재 발생 감지시스템 및 그 방법

Cited By (61)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9948872B2 (en) 2009-03-02 2018-04-17 Flir Systems, Inc. Monitor and control systems and methods for occupant safety and energy efficiency of structures
US9208542B2 (en) 2009-03-02 2015-12-08 Flir Systems, Inc. Pixel-wise noise reduction in thermal images
US9756264B2 (en) 2009-03-02 2017-09-05 Flir Systems, Inc. Anomalous pixel detection
US10757308B2 (en) 2009-03-02 2020-08-25 Flir Systems, Inc. Techniques for device attachment with dual band imaging sensor
US9517679B2 (en) 2009-03-02 2016-12-13 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9843742B2 (en) 2009-03-02 2017-12-12 Flir Systems, Inc. Thermal image frame capture using de-aligned sensor array
US9235876B2 (en) 2009-03-02 2016-01-12 Flir Systems, Inc. Row and column noise reduction in thermal images
US9635285B2 (en) 2009-03-02 2017-04-25 Flir Systems, Inc. Infrared imaging enhancement with fusion
US10033944B2 (en) 2009-03-02 2018-07-24 Flir Systems, Inc. Time spaced infrared image enhancement
US9451183B2 (en) 2009-03-02 2016-09-20 Flir Systems, Inc. Time spaced infrared image enhancement
US9998697B2 (en) 2009-03-02 2018-06-12 Flir Systems, Inc. Systems and methods for monitoring vehicle occupants
US9986175B2 (en) 2009-03-02 2018-05-29 Flir Systems, Inc. Device attachment with infrared imaging sensor
US10244190B2 (en) 2009-03-02 2019-03-26 Flir Systems, Inc. Compact multi-spectrum imaging with fusion
US9843743B2 (en) 2009-06-03 2017-12-12 Flir Systems, Inc. Infant monitoring systems and methods using thermal imaging
US9292909B2 (en) 2009-06-03 2016-03-22 Flir Systems, Inc. Selective image correction for infrared imaging devices
US9674458B2 (en) 2009-06-03 2017-06-06 Flir Systems, Inc. Smart surveillance camera systems and methods
US10091439B2 (en) 2009-06-03 2018-10-02 Flir Systems, Inc. Imager with array of multiple infrared imaging modules
US9819880B2 (en) 2009-06-03 2017-11-14 Flir Systems, Inc. Systems and methods of suppressing sky regions in images
US9716843B2 (en) 2009-06-03 2017-07-25 Flir Systems, Inc. Measurement device for electrical installations and related methods
US9807319B2 (en) 2009-06-03 2017-10-31 Flir Systems, Inc. Wearable imaging devices, systems, and methods
US9756262B2 (en) 2009-06-03 2017-09-05 Flir Systems, Inc. Systems and methods for monitoring power systems
US9918023B2 (en) 2010-04-23 2018-03-13 Flir Systems, Inc. Segmented focal plane array architecture
US9848134B2 (en) 2010-04-23 2017-12-19 Flir Systems, Inc. Infrared imager with integrated metal layers
US9207708B2 (en) 2010-04-23 2015-12-08 Flir Systems, Inc. Abnormal clock rate detection in imaging sensor arrays
US9706138B2 (en) 2010-04-23 2017-07-11 Flir Systems, Inc. Hybrid infrared sensor array having heterogeneous infrared sensors
US9538038B2 (en) 2011-06-10 2017-01-03 Flir Systems, Inc. Flexible memory systems and methods
US9058653B1 (en) 2011-06-10 2015-06-16 Flir Systems, Inc. Alignment of visible light sources based on thermal images
US9723228B2 (en) 2011-06-10 2017-08-01 Flir Systems, Inc. Infrared camera system architectures
US10841508B2 (en) 2011-06-10 2020-11-17 Flir Systems, Inc. Electrical cabinet infrared monitor systems and methods
US9716844B2 (en) 2011-06-10 2017-07-25 Flir Systems, Inc. Low power and small form factor infrared imaging
US9706137B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Electrical cabinet infrared monitor
US9706139B2 (en) 2011-06-10 2017-07-11 Flir Systems, Inc. Low power and small form factor infrared imaging
US9723227B2 (en) 2011-06-10 2017-08-01 Flir Systems, Inc. Non-uniformity correction techniques for infrared imaging devices
US9900526B2 (en) 2011-06-10 2018-02-20 Flir Systems, Inc. Techniques to compensate for calibration drifts in infrared imaging devices
US10389953B2 (en) 2011-06-10 2019-08-20 Flir Systems, Inc. Infrared imaging device having a shutter
US9521289B2 (en) 2011-06-10 2016-12-13 Flir Systems, Inc. Line based image processing and flexible memory system
US9961277B2 (en) 2011-06-10 2018-05-01 Flir Systems, Inc. Infrared focal plane array heat spreaders
US10250822B2 (en) 2011-06-10 2019-04-02 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US9509924B2 (en) 2011-06-10 2016-11-29 Flir Systems, Inc. Wearable apparatus with integrated infrared imaging module
US9473681B2 (en) 2011-06-10 2016-10-18 Flir Systems, Inc. Infrared camera system housing with metalized surface
US9143703B2 (en) 2011-06-10 2015-09-22 Flir Systems, Inc. Infrared camera calibration techniques
US10051210B2 (en) 2011-06-10 2018-08-14 Flir Systems, Inc. Infrared detector array with selectable pixel binning systems and methods
US10079982B2 (en) 2011-06-10 2018-09-18 Flir Systems, Inc. Determination of an absolute radiometric value using blocked infrared sensors
US9235023B2 (en) 2011-06-10 2016-01-12 Flir Systems, Inc. Variable lens sleeve spacer
US10169666B2 (en) 2011-06-10 2019-01-01 Flir Systems, Inc. Image-assisted remote control vehicle systems and methods
US10230910B2 (en) 2011-06-10 2019-03-12 Flir Systems, Inc. Infrared camera system architectures
KR101229945B1 (ko) * 2012-04-06 2013-02-06 김명호 터널 사고 검출 및 경보시스템
USD765081S1 (en) 2012-05-25 2016-08-30 Flir Systems, Inc. Mobile communications device attachment with camera
US9811884B2 (en) 2012-07-16 2017-11-07 Flir Systems, Inc. Methods and systems for suppressing atmospheric turbulence in images
US9635220B2 (en) 2012-07-16 2017-04-25 Flir Systems, Inc. Methods and systems for suppressing noise in images
US9973692B2 (en) 2013-10-03 2018-05-15 Flir Systems, Inc. Situational awareness by compressed display of panoramic views
US11297264B2 (en) 2014-01-05 2022-04-05 Teledyne Fur, Llc Device attachment with dual band imaging sensor
JP2019139657A (ja) * 2018-02-14 2019-08-22 古河電気工業株式会社 トンネル内部状況検知装置およびこれを装備したトンネル並びにトンネル内部状況監視システム
JP7000195B2 (ja) 2018-02-14 2022-01-19 古河電気工業株式会社 トンネル内部状況検知装置およびこれを装備したトンネル並びにトンネル内部状況監視システム
KR102319628B1 (ko) * 2019-04-30 2021-11-01 주식회사 참좋은넷 차량번호 인식을 기반으로 하는 재난 경보시스템
KR20200126746A (ko) * 2019-04-30 2020-11-09 주식회사 참좋은넷 차량번호 인식을 기반으로 하는 재난 경보시스템
KR20210023273A (ko) 2019-08-22 2021-03-04 아이브스 주식회사 터널 상황 판단 장치 및 그 방법
KR102538250B1 (ko) * 2022-05-31 2023-05-31 주식회사 트로닉스 등기구의 디밍 제어 방법 및 이를 이용한 디밍 제어 시스템
WO2023234468A1 (ko) * 2022-05-31 2023-12-07 주식회사 트로닉스 등기구의 디밍 제어 방법 및 이를 이용한 디밍 제어 시스템
CN115457728A (zh) * 2022-08-18 2022-12-09 合肥未来计算机技术开发有限公司 一种隧道施工人员作业安全防护方法
CN115457728B (zh) * 2022-08-18 2023-12-26 合肥未来计算机技术开发有限公司 一种隧道施工人员作业安全防护方法

Similar Documents

Publication Publication Date Title
KR100985816B1 (ko) 터널 내 화재와 비상상황을 감지하고 자동속보하는 시스템 및 그 방법
KR101700395B1 (ko) 경호용 드론 및 이를 이용한 이동식 경호 시스템
CN109906614B (zh) 监视***以及移动机器人装置
KR100801293B1 (ko) 터널 영상 유고 또는 사고감지 시스템 및 방법
KR101544019B1 (ko) 합성 영상을 이용한 화재감지시스템 및 방법
KR101772806B1 (ko) 화재 발생 위치에 따라 대피 방향이 자동으로 변환되는 비상 대피 유도 방법 및 그 시스템
CN105513272A (zh) 车辆及防止儿童误锁车内的方法、***
KR101936837B1 (ko) 맵기반 지능형 영상통합 감시시스템 및 이를 이용한 감시 방법
KR20110060342A (ko) 위치기반 서비스를 이용한 cctv 카메라 장치와 안전관제 센터 서버, 그를 포함한 지능형 보안 시스템 및 그 방법
KR101514696B1 (ko) 교량 안전사고 관리시스템
KR20180097954A (ko) 터널안전을 위한 유,무선 스마트 통합 감지시스템
KR100956978B1 (ko) 교통사고 유의지역 통합관리 시스템
CN102708655A (zh) 一种消防通道占用监测报警方法及其***
KR101459104B1 (ko) 동작분석을 통하여 위급상황을 감지하는 지능형 cctv시스템 및 이를 이용한 위급상황 감지방법
KR101498985B1 (ko) Ip cctv를 이용한 gps 위치정보 기반의 비상상황 발생 현장 촬영 및 모니터링 시스템 그리고 이를 이용한 비상상황 발생 현장의 촬영 및 모니터링 방법
KR101467352B1 (ko) 위치기반 통합관제시스템
CN104658188A (zh) 通道安全预警***以及通道预警方法
KR101392628B1 (ko) 통합 관제를 이용한 안심 귀가 시스템
US20040216165A1 (en) Surveillance system and surveillance method with cooperative surveillance terminals
KR101317961B1 (ko) 스마트기기와 cctv를 활용한 재난 및 방범 관리 시스템
KR20160002119A (ko) 감시장치 관제시스템 및 이의 관제방법
KR20110108497A (ko) 지능형 아이피 카메라를 이용한 자동 화재 인식 경보 시스템 및 그 방법
KR101957637B1 (ko) 버스 정보 안내기를 이용한 불법 주정차 단속 시스템 및 그의 처리 방법
KR101166075B1 (ko) 위치기반 사용자 보호 시스템 및 방법
KR101281494B1 (ko) 스마트폰을 이용한 지능형 카메라 자동제어 시스템

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130910

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20150917

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20160921

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20180913

Year of fee payment: 9

FPAY Annual fee payment

Payment date: 20190827

Year of fee payment: 10