KR20160103713A - 졸음 운전 예방 시스템 - Google Patents

졸음 운전 예방 시스템 Download PDF

Info

Publication number
KR20160103713A
KR20160103713A KR1020150026398A KR20150026398A KR20160103713A KR 20160103713 A KR20160103713 A KR 20160103713A KR 1020150026398 A KR1020150026398 A KR 1020150026398A KR 20150026398 A KR20150026398 A KR 20150026398A KR 20160103713 A KR20160103713 A KR 20160103713A
Authority
KR
South Korea
Prior art keywords
user
vehicle
eyes
drowsy
control unit
Prior art date
Application number
KR1020150026398A
Other languages
English (en)
Other versions
KR101708872B1 (ko
Inventor
김건중
Original Assignee
김건중
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 김건중 filed Critical 김건중
Priority to KR1020150026398A priority Critical patent/KR101708872B1/ko
Publication of KR20160103713A publication Critical patent/KR20160103713A/ko
Application granted granted Critical
Publication of KR101708872B1 publication Critical patent/KR101708872B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60QARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q1/00Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
    • B60Q1/26Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic
    • B60Q1/50Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking
    • B60Q1/52Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor the devices being primarily intended to indicate the vehicle, or parts thereof, or to give signals, to other traffic for indicating other intentions or conditions, e.g. request for waiting or overtaking for indicating emergencies
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18Eye characteristics, e.g. of the iris
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/0104Measuring and analyzing of parameters relative to traffic conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Multimedia (AREA)
  • Mathematical Physics (AREA)
  • Combustion & Propulsion (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Analytical Chemistry (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Ophthalmology & Optometry (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 사용자의 졸음 상태를 신속히 파악하여 경보하고, 졸음 상태의 판별에 오류가 발생한 경우 사용자의 시선 및 동작을 분산시키지 않아도 이의 해제가 가능하며, 졸음을 억지로 참으며 운전하는 사용자에게 적절한 휴식을 권장하고, 사용자가 충분한 휴식을 취하지 않고 재운행을 시도하지 못하도록 하여 안전한 운행이 될 수 있도록 하는 졸음 운전 예방 시스템에 관한 것으로서, 차량 내부에 설치되어 사용자를 촬영하는 카메라; 상기 카메라로부터 촬영된 화상을 입력받아 상기 사용자의 눈 깜빡임을 감지하고, 상기 사용자의 눈 깜박임으로부터 상기 사용자의 졸음 상태를 판별하며, 판별된 결과에 따라 ECU에 제어 신호를 전송하는 제어부;를 포함하되, 상기 제어부는, 상기 화상에서 상기 사용자의 얼굴 윤곽선을 획득하고, 획득된 얼굴 윤곽선으로부터 양 눈의 위치를 추정하며, 추정된 양 눈의 위치로부터 양 눈의 동공 윤곽선을 획득하되, 상기 얼굴 윤곽선에 대한 상기 동공 윤곽선의 위치에서 상기 동공 윤곽선이 획득되지 않는 경우 이를 상기 사용자가 눈을 감은 것으로 판단하며, 눈을 감은 것으로 판단된 횟수가 평균치로부터 급격히 변화한 경우 졸음 운전으로 판단한다.

Description

졸음 운전 예방 시스템{Anti drowsy driving system}
본 발명은 졸음 운전 예방 시스템에 관한 것으로서, 더욱 상세하게는 사용자의 졸음 상태를 신속히 파악하여 경보하고, 졸음 상태의 판별에 오류가 발생한 경우 사용자의 시선 및 동작을 분산시키지 않아도 이의 해제가 가능하며, 졸음을 억지로 참으며 운전하는 사용자에게 적절한 휴식을 권장하고, 사용자가 충분한 휴식을 취하지 않고 재운행을 시도하지 못하도록 하여 안전한 운행이 될 수 있도록 하고, 졸음 운전중인 차량의 주변 차량들에게 해당 차량의 이상 징후를 미리 경고하여 대처할 수 있도록 하는 졸음 운전 예방 시스템에 관한 것이다.
현대 사회의 가장 보편적인 이동수단인 자동차는 우리나라의 경우 2013년 기준 1900만대를 돌파하여 매년 2%의 지속적인 증가율을 보이고 있다. 이는 1 가구당 1 대의 자동차를 보유하고 있음을 뜻하며, 동시에 교통사고의 위험성 역시 증가하고 있음을 의미한다. 특히 고속도로와 같이 고속으로 운행하는 자동차들이 많은 구역에서는 사소한 실수가 큰 부상으로 이어지는 치명적인 교통사고가 발생할 가능성이 매우 높으므로 운전자의 각별한 주의가 필요하다.
그러나, 고속도로의 특성상 직선 주로가 많고 시선이 고정되어 졸음 운전이 발생될 확률이 매우 높고, 졸음 운전 사고의 경우 해당 운전자 뿐만 아니라 주변의 다른 운전자에게도 큰 부상을 입히는 대형 사고를 유발할 가능성이 매우 높으므로 고속도로 주행시에는 졸음 운전을 하지 않도록 각별한 주의가 필요한 실정이다.
이러한 졸음 운전을 예방하기 위하여 종래에는 주기적으로 알람을 울리고, 알람의 중지를 위하여 스마트폰의 화면을 손으로 터치하는 기술이 공지되었다. 그러나, 종래의 기술은 알람의 울림이 단순히 설정된 시간마다 이루어져 그 동작 방식이 수동적이고, 또한 알람의 중지를 위하여 사용자가 화면을 보고 손으로 터치하므로 시선이 분산되고 주의력이 흐트러지는 문제가 있었다.
또한, 종래의 기술은 해당 차량을 운전중인 사용자의 주의만 환기시킬 뿐 졸음 운전이 예상되는 차량의 주변 차량들에게 경고할 수 있는 구성이 부족하여 해당 차량의 운전자가 알람 소리를 무시하거나 억지로 졸음을 참으며 무리하게 운전을 지속할 경우 주변 차량들과의 후속 사고가 발생할 수 있는 위험이 여전히 존재하였다.
따라서, 사용자의 졸음 상태를 신속히 파악하여 경보하고, 졸음 상태의 판별에 오류가 발생한 경우 사용자의 시선 및 동작을 분산시키지 않아도 이의 해제가 가능하며, 졸음을 억지로 참으며 운전하는 사용자에게 적절한 휴식을 권장하고, 사용자가 충분한 휴식을 취하지 않고 재운행을 시도하지 못하도록 하여 안전한 운행이 될 수 있도록 하며, 졸음 운전중인 차량의 주변 차량들에게 해당 차량의 이상 징후를 미리 경고하여 대처할 수 있도록 하는 졸음 운전 예방 시스템의 개발이 필요로 하게 되었다.
KR10-2012-0031335(공개번호) 2012.04.03
본 발명은, 사용자의 졸음 상태를 신속히 파악하여 경보하고, 졸음 상태의 판별에 오류가 발생한 경우 사용자의 시선 및 동작을 분산시키지 않아도 이의 해제가 가능한 졸음 운전 예방 시스템을 제공하는데 그 목적이 있다.
또한, 본 발명은, 졸음을 억지로 참으며 운전하는 사용자에게 적절한 휴식을 권장하고, 사용자가 충분한 휴식을 취하지 않고 재운행을 시도하지 못하도록 하여 안전한 운행이 될 수 있도록 하는 졸음 운전 예방 시스템을 제공하는데 그 목적이 있다.
또한, 본 발명은, 졸음 운전중인 차량이 있음을 외부에 알림으로써 후속 사고의 위험을 저감할 수 있는 졸음 운전 예방 시스템을 제공하는데 그 목적이 있다.
본 발명은, 차량 내부에 설치되어 사용자를 촬영하는 카메라; 상기 카메라로부터 촬영된 화상을 입력받아 상기 사용자의 눈 깜빡임을 감지하고, 상기 사용자의 눈 깜박임으로부터 상기 사용자의 졸음 상태를 판별하며, 판별된 결과에 따라 ECU에 제어 신호를 전송하는 제어부;를 포함하되, 상기 제어부는, 상기 화상에서 상기 사용자의 얼굴 윤곽선을 획득하고, 획득된 얼굴 윤곽선으로부터 양 눈의 위치를 추정하며, 추정된 양 눈의 위치로부터 양 눈의 동공 윤곽선을 획득하되, 상기 얼굴 윤곽선에 대한 상기 동공 윤곽선의 위치에서 상기 동공 윤곽선이 획득되지 않는 경우 이를 상기 사용자가 눈을 감은 것으로 판단하며, 눈을 감은 것으로 판단된 횟수가 평균치로부터 급격히 변화한 경우 졸음 운전으로 판단한다.
또한, 본 발명의 상기 제어부는, 상기 사용자가 졸음 운전인 것으로 판단될 경우 경보음을 출력하도록 상기 ECU에 제어 신호를 전송하며, 상기 사용자의 기 설정된 액션에 의해 상기 경보음을 중지하도록 상기 ECU에 제어 신호를 전송한다.
또한, 본 발명의 상기 제어부는, 기 설정된 시간 내에 상기 사용자가 졸음 운전인 것으로 판단된 횟수가 설정 수치 이상인 경우 상기 차량의 외부 램프를 점등하고, 경보음을 출력하도록 상기 ECU에 제어 신호를 전송한다.
또한, 본 발명의 상기 제어부는, 상기 차량의 시동이 꺼진 경우 상기 차량의 외부 램프 점등을 중지하고, 상기 경보음을 중지하도록 상기 ECU에 제어 신호를 전송하며, 상기 차량의 시동이 꺼진 시점으로부터 설정된 시간 내에 재시동되지 않도록 상기 ECU에 제어 신호를 전송한다.
또한, 본 발명은 상기 차량의 현재 위치 정보를 획득하여 상기 제어부에 전송하는 GPS 장치;를 더 포함하고, 상기 제어부는, 상기 GPS 장치로부터 제공된 상기 차량의 현재 위치 정보가 기 입력된 휴게소 또는 졸음 쉼터의 위치와 일치하는 경우 상기 차량의 외부 램프 점등을 중지하고, 상기 경보음을 중지하도록 상기 ECU에 제어 신호를 전송하며, 상기 제어부는, 상기 차량이 상기 휴게소 또는 졸음 쉼터에 위치된 시점으로부터 설정된 시간 내에 상기 휴게소 또는 졸음 쉼터를 벗어날 경우 상기 차량의 외부 램프를 점등하고, 경보음을 출력하도록 상기 ECU에 제어 신호를 전송한다.
본 발명은, 사용자의 졸음 상태를 신속히 파악하여 경보함으로써 안전한 차량(10) 운전이 이루어질 수 있도록 하는 효과가 있다.
또한, 본 발명은, 졸음 상태의 판별에 오류가 발생한 경우 사용자의 시선 및 동작을 분산시키지 않아도 이의 해제가 가능하므로 사용자의 주의를 흐트리지 않는 효과가 있다.
또한, 본 발명은, 졸음을 억지로 참으며 운전하는 사용자에게 적절한 휴식을 권장함으로써 안전한 차량(10) 운전이 이루어질 수 있도록 하는 효과가 있다.
또한, 본 발명은, 졸음 운전중인 차량(10)이 있음을 외부에 알림으로써 후속 사고의 위험을 저감할 수 있는 효과가 있다.
또한, 본 발명은, 사용자가 충분한 휴식을 취하지 않고 재운행을 시도하지 못하도록 함으로써 안전한 차량(10) 운전이 이루어질 수 있도록 하는 효과가 있다.
도 1 은 본 발명의 실시예에 따른 졸음 운전 예방 시스템의 블럭도.
도 2 는 본 발명의 실시예에 따른 졸음 운전 예방 시스템의 제어부의 제어 신호 생성 순서도.
도 3 은 본 발명의 실시예에 따른 졸음 운전 예방 시스템의 외부 경고시의 예시도.
이하에서, 본 발명의 실시예에 대하여 첨부한 도면을 참조하여 상세히 설명한다.
본 발명은 차량(10) 내부에 설치되어 사용자를 촬영하는 카메라(100), 카메라(100)로부터 촬영된 화상을 입력받아 사용자의 눈 깜빡임 패턴을 생성하고, 생성된 눈 깜빡임 패턴으로부터 사용자의 졸음 상태를 판별하며, 판별된 결과에 따라 ECU에 제어 신호를 전송하는 제어부(200)를 포함하여 구성된다.
이러한 본 발명은 카메라(100)와 제어부(200)가 별도로 설치된 개개의 장치일 수 있으며, 또는 카메라(100)만 별도로 설치되고 제어부(200)는 차량(10)용 ECU의 여러 기능 중 하나의 기능으로서 구비될 수 있다. 그러나, 별도의 추가 비용이 발생되지 않도록 일측에 카메라(100)가 구비되고 내측에 제어부(200), 즉, 연산 장치가 내장된 스마트폰으로 차량(10)용 ECU와 블루투스, 캔 통신 등으로 연결되는 것이 바람직하다.
카메라(100)는, 화상을 촬영하여 제어부(200)에 전송하는 역할을 하며, 통상의 스마트폰 카메라(100), 블랙박스의 실내측 카메라(100) 등이 이에 해당된다. 이때, 스마트폰 카메라(100)는 기본적으로 스마트폰의 연산 장치, 즉, 제어부(200)와 전기회로로 연결되어 있고, 블랙박스는 스마트폰과 블루투스 페어링, 와이파이 연결 등으로 통신하는 기능이 이미 시중에 출시되었기 때문에 카메라(100)와 제어부(200)의 데이터 전송은 무난하게 해결된다.
제어부(200)는, 카메라(100)로부터 화상을 입력받아 사용자의 눈 깜빡임 패턴을 생성하고, 생성된 눈 깜빡임 패턴으로부터 사용자의 졸음 상태를 판별하여서 이를 토대로 ECU에 제어 신호를 전송하는 역할을 한다.
이러한 제어부(200)의 동작을 상세히 살펴보면, 우선, 제어부(200)는 화상으로부터 사용자의 얼굴 윤곽선을 획득한다. 얼굴 윤곽선의 획득은 사용자가 탑승하지 않은 상태에서 차량(10)의 배경을 획득하고, 사용자의 탑승 후 차량(10)의 배경으로부터 변경된 픽셀을 취득하여 이를 토대로 얼굴, 몸통, 팔 등을 추정할 수 있고, 또는 사용자가 탑승해있는 상태라 하더라도, 사용자는 계속적으로 미세하게 움직이기 때문에 이러한 픽셀 변화를 감지하여 윤곽선을 획득할 수 있게 된다.
제어부(200)는 얼굴 윤곽선이 획득되면, 획득된 얼굴 윤곽선으로부터 양 눈의 위치를 추정한다. 얼굴 윤곽선에 대한 눈의 위치는 통계에 의해 설정 가능하며, 이때 눈의 위치는 눈동자의 윤곽선을 획득하기 위한 범위를 설정하기 위한 수단으로 활용된다.
이후 제어부(200)는 추정된 양 눈의 위치로부터 양 눈의 동공 윤곽선을 획득한다. 동공 윤곽선은 흰자위와 검은자위의 색상 차이로부터 획득될 수 있으며, 사용자가 왼쪽 또는 오른쪽을 볼 경우를 상정하여 동공의 어느 한 쪽 윤곽선만 획득되어도 동공의 윤곽선이 획득된 것으로 판단한다.
그러나, 이러한 얼굴 윤곽선, 동공 윤곽선의 획득시 사용되는 이미지 처리 방법은 이에 한정되지 아니하고, 공지의 이미지 처리 방법 중에서 적절히 선택될 수 있다.
그리고, 이후 제어부(200)는 얼굴 윤곽선에 대한 동공 윤광선의 위치에서 동공 윤곽선이 획득되지 않는 경우 이를 사용자가 눈을 감은 것으로 판단하며, 눈을 감은 것으로 판단된 시간당 횟수를 측정하여 평균치를 도출한다. 사람은 특별한 스트레스 상황이 아닌 경우 눈을 깜빡이는 횟수가 급격히 변화되지 않으므로, 눈을 깜빡이는 것으로 판단된 횟수가 급격히 변화되는 경우는 졸음에 의해 눈을 감고 있는 경우 또는 졸음을 참기 위해 눈을 심하게 깜빡이는 경우로 추정할 수 있다. 따라서, 제어부(200)는 눈을 감은 것으로 판단된 횟수가 평균치로부터 증가 또는 감소 등 급격히 변화한 경우 이를 졸음 운전으로 판단하며, 사용자의 주의를 환기시키기 위하여 경보음을 출력하도록 ECU에 제어 신호를 전송한다. 예를 들어, 10초 이내에 50%가 감소한 경우 눈꺼풀이 무거워지고 있는 것으로 판단하거나, 수초 이내에 100%이상 증가한 경우 졸음을 참으려 눈을 깜빡이는 것으로 판단하는 것이 그 예이다. 이러한 설정 수치는 일례로서 다양한 설정이 가능함은 물론이다. 그리고 이때, 경보음은 사용자가 충분히 졸음을 깰 수 있도록 지속 반복적으로 높은 음을 내는 것이 바람직하다.
그러나, 졸음 상황이 아니더라도 긴장을 할 때 눈을 부릅뜨거나 빠르게 깜빡이기도 하고, 눈이 건조할 경우에도 눈을 깜빡이는 횟수가 증가하는 등 눈 깜빡임 횟수에 변동이 올 수 있으므로, 이 경우 경보음을 중지시킬 수단이 있어야 한다. 경보음의 중지는 사용자가 미리 설정된 어떠한 액션을 취할 때에 실행되는데, 예를 들면 음성 인식으로 경보음 중지를 명령하거나, 눈을 빠르게 3번, 느리게 3번 깜빡이는 동작으로 경보음 중지를 명령할 수 있다. 이외에 스마트폰의 경우 화면에 경보음 중지 버튼이 출력되도록 하여 이를 사용자가 터치할 때 경보음을 중지하도록 할 수 있다. 물론 경보음 중지의 방법은 이에 한정하지 아니하고, 여러 가능한 액션을 미리 설정할 수 있다.
한편, 졸음 운전시의 운전자는 자신이 운전을 계속 하는 중에 졸음을 이겨낼 수 있을 것이라 판단하고 휴식을 취하지 않는 문제가 있다. 대부분의 졸음 운전은 졸음이 오려는 때에 적절한 휴식을 취하면 해결할 수 있으나, 휴식을 취하는 시간이 아까워 운전을 하며 졸음을 이겨내려 하기 때문에 더더욱 몸이 피곤해지고, 한번 몰려온 졸음은 쉬이 쫓아낼 수 있는 것이 아니기 때문에 결국 대형 사고로 이어지게 된다. 따라서, 본 발명의 제어부(200)는 사용자가 실제로 졸아 경보음이 울렸으나, 사용자가 이를 무시하고 경보음을 중지시켜가면서 계속 운전을 할 경우를 상정하여, 설정된 시간 내에 졸음 운전인 것으로 판단된 횟수가 설정 수치 이상인 경우 사용자의 액션과 상관 없이 경보음이 꺼지지 않도록 구성된다. 이 경우, 설정 시간은 30분, 설정 횟수는 3회인 것이 적절하나 이에 한정하지 아니한다. 또한, 제어부(200)는 이 때에 차량(10)의 전조등, 후미등, 방향 지시등 등 외부 램프를 점등하여 주변 차량(10)들에게 사용자의 졸음 상태를 알림으로써 주변 차량(10)들로 하여금 미리 거리를 벌리는 등 안전 대책을 강구할 수 있도록 한다. 그리고, 경우에 따라 미리 설정해놓은 가족, 지인의 휴대전화로 메시지를 발송하여 사용자의 졸음 상태를 알리고, 가족, 지인들로 하여금 사용자에게 전화를 걸어 사용자를 설득할 수 있도록 한다. 동시에 제어부(200)는 음성 또는 화면 등으로 졸음 쉼터 또는 휴게소의 위치를 사용자에게 안내하여 사용자가 휴식을 취할 수 있도록 한다.
또한, 제어부(200)는 사용자가 졸음 상태인 것으로 판단되면 근거리 무선 통신 등을 사용하여 반경 50m 정도의 주변에 있는 동일 어플리케이션 사용자들에게 해당 차량(10)의 운전자가 졸음 운전 상태인 것을 알림으로써, 주변 차량에 탑재된 스마트폰에서 음성으로 해당 졸음 운전 차량(10)의 차량 번호, 차종, 색상 등을 안내할 수 있도록 한다.
이후, 제어부(200)는 사용자가 차량(10)을 정지하고 시동을 끌 경우 사용자의 휴식 의도가 있는 것으로 판단하고 경보음의 출력 및 외부 램프의 점등을 중지하도록 ECU에 제어 신호를 전송한다. 그리고 제어부(200)는 사용자가 충분한 휴식을 취하지 않으면 차량(10)을 이동하지 못하도록 설정된 시간 내에는 다시 시동이 걸리지 않게 ECU에 제어 명령을 전송한다. 그러나, 이 경우, 한여름, 한겨울 등 차량(10) 내부에 냉난방을 해야 할 경우가 발생하게 되는데, 이를 위하여 본 발명은 차량(10)의 현재 위치 정보를 획득하여 이를 제어부(200)에 전송하는 GPS 장치(300)를 더 포함하여 구성된다. 제어부(200)는 GPS 장치(300)로부터 제공된 차량(10)의 현재 위치 정보가 미리 입력된 휴게소 또는 졸음 쉼터의 위치와 일치하는 경우 차량(10)의 외부 램프 점등을 중지하고, 경보음을 중지하도록 ECU에 제어 신호를 전송한다. 물론 이 경우에도 사용자가 충분한 휴식을 취하지 않은 채 다시 차량(10)을 이동시킬 것에 대비하여, 차량(10)의 현재 위치 정보가 휴게소 또는 졸음 쉼터에 위치된 시점으로부터 설정된 시간 내에 휴게소 또는 졸음 쉼터를 벗어날 경우 다시 차량(10)의 외부 램프를 점등하고, 경보음을 출력하도록 ECU에 제어 신호를 전송한다.
또한 제어부(200)는 차량의 시동이 꺼지면 스마트폰의 화면에 휴식 버튼이 출력되도록 함으로써 사용자가 휴식 버튼을 눌러 휴식중임을 제어부(200)에 인식시킬 수 있도록 한다. 이는 사용자가 어느 지점까지 졸음을 참고 진행하였다가 해당 지점에서 타인의 차량에 탑승한 채 자리를 이탈할 경우에 대비하기 위함이며, 이로서 사용자가 GPS 장치(300)로 활용중이던 스마트폰을 들고 자리를 이탈하게 될 경우 다시 경보음이 울리고 외부 램프가 점등되는 것이 방지된다. 물론 이 경우에도 설정 시간 이내에는 차량의 시동이 걸리지 않게 되는 것이 바람직하다.
상술한 구성으로 이루어진 본 발명은, 사용자의 졸음 상태를 신속히 파악하여 경보함으로써 안전한 차량(10) 운전이 이루어질 수 있도록 하는 효과가 있다.
또한, 본 발명은, 졸음 상태의 판별에 오류가 발생한 경우 사용자의 시선 및 동작을 분산시키지 않아도 이의 해제가 가능하므로 사용자의 주의를 흐트리지 않는 효과가 있다.
또한, 본 발명은, 졸음을 억지로 참으며 운전하는 사용자에게 적절한 휴식을 권장함으로써 안전한 차량(10) 운전이 이루어질 수 있도록 하는 효과가 있다.
또한, 본 발명은, 졸음 운전중인 차량(10)이 있음을 외부에 알림으로써 후속 사고의 위험을 저감할 수 있는 효과가 있다.
또한, 본 발명은, 사용자가 충분한 휴식을 취하지 않고 재운행을 시도하지 못하도록 함으로써 안전한 차량(10) 운전이 이루어질 수 있도록 하는 효과가 있다.
10 : 차량 100 : 카메라
200 : 제어부 300 : GPS 장치

Claims (5)

  1. 차량 내부에 설치되어 사용자를 촬영하는 카메라;
    상기 카메라로부터 촬영된 화상을 입력받아 상기 사용자의 눈 깜빡임을 감지하고, 상기 사용자의 눈 깜박임으로부터 상기 사용자의 졸음 상태를 판별하며, 판별된 결과에 따라 ECU에 제어 신호를 전송하는 제어부;
    를 포함하되,
    상기 제어부는, 상기 화상에서 상기 사용자의 얼굴 윤곽선을 획득하고, 획득된 얼굴 윤곽선으로부터 양 눈의 위치를 추정하며, 추정된 양 눈의 위치로부터 양 눈의 동공 윤곽선을 획득하되, 상기 얼굴 윤곽선에 대한 상기 동공 윤곽선의 위치에서 상기 동공 윤곽선이 획득되지 않는 경우 이를 상기 사용자가 눈을 감은 것으로 판단하며, 눈을 감은 것으로 판단된 횟수가 평균치로부터 설정 비율 이상 변화한 경우 졸음 운전으로 판단하는 졸음 운전 예방 시스템.
  2. 제 1 항에 있어서,
    상기 제어부는, 상기 사용자가 졸음 운전인 것으로 판단될 경우 경보음을 출력하도록 상기 ECU에 제어 신호를 전송하며, 상기 사용자의 기 설정된 액션에 의해 상기 경보음을 중지하도록 상기 ECU에 제어 신호를 전송하는 졸음 운전 예방 시스템.는 졸음 운전 예방 시스템.
  3. 제 2 항에 있어서,
    상기 제어부는, 기 설정된 시간 내에 상기 사용자가 졸음 운전인 것으로 판단된 횟수가 설정 수치 이상인 경우 상기 차량의 외부 램프를 점등하고, 경보음을 출력하도록 상기 ECU에 제어 신호를 전송하는 졸음 운전 예방 시스템.
  4. 제 3 항에 있어서,
    상기 제어부는, 상기 차량의 시동이 꺼진 경우 상기 차량의 외부 램프 점등을 중지하고, 상기 경보음을 중지하도록 상기 ECU에 제어 신호를 전송하며, 상기 차량의 시동이 꺼진 시점으로부터 설정된 시간 내에 재시동되지 않도록 상기 ECU에 제어 신호를 전송하는 졸음 운전 예방 시스템.
  5. 제 3 항에 있어서,
    상기 차량의 현재 위치 정보를 획득하여 상기 제어부에 전송하는 GPS 장치;를 더 포함하고,
    상기 제어부는, 상기 GPS 장치로부터 제공된 상기 차량의 현재 위치 정보가 기 입력된 휴게소 또는 졸음 쉼터의 위치와 일치하는 경우 상기 차량의 외부 램프 점등을 중지하고, 상기 경보음을 중지하도록 상기 ECU에 제어 신호를 전송하며, 상기 제어부는, 상기 차량이 상기 휴게소 또는 졸음 쉼터에 위치된 시점으로부터 설정된 시간 내에 상기 휴게소 또는 졸음 쉼터를 벗어날 경우 상기 차량의 외부 램프를 점등하고, 경보음을 출력하도록 상기 ECU에 제어 신호를 전송하는 졸음 운전 예방 시스템.
KR1020150026398A 2015-02-25 2015-02-25 졸음 운전 예방 시스템 KR101708872B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150026398A KR101708872B1 (ko) 2015-02-25 2015-02-25 졸음 운전 예방 시스템

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150026398A KR101708872B1 (ko) 2015-02-25 2015-02-25 졸음 운전 예방 시스템

Publications (2)

Publication Number Publication Date
KR20160103713A true KR20160103713A (ko) 2016-09-02
KR101708872B1 KR101708872B1 (ko) 2017-02-21

Family

ID=56942936

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150026398A KR101708872B1 (ko) 2015-02-25 2015-02-25 졸음 운전 예방 시스템

Country Status (1)

Country Link
KR (1) KR101708872B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180076464A (ko) * 2016-12-28 2018-07-06 (주)이로움 운전자 졸음 경고 시스템
KR102403887B1 (ko) * 2020-11-26 2022-05-30 동의대학교 산학협력단 졸음 운전 방지 시스템 및 그 방법

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2541689B2 (ja) * 1990-05-21 1996-10-09 日産自動車株式会社 眼位置検出装置及び被検者状態検出装置
KR20010001694A (ko) * 1999-06-08 2001-01-05 이계철 영상 압축이미지를 이용한 유사이미지 검색시스템 및 그 방법
JP4687573B2 (ja) * 2006-06-14 2011-05-25 トヨタ自動車株式会社 車両用運転支援装置
KR20120031335A (ko) 2010-09-24 2012-04-03 박준형 스마트폰을 이용한 고속주행차량의 돌발상황 정보전달방법
KR20130039150A (ko) * 2011-10-11 2013-04-19 현대모비스 주식회사 운전자 졸음 방지 시스템 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2541689B2 (ja) * 1990-05-21 1996-10-09 日産自動車株式会社 眼位置検出装置及び被検者状態検出装置
KR20010001694A (ko) * 1999-06-08 2001-01-05 이계철 영상 압축이미지를 이용한 유사이미지 검색시스템 및 그 방법
JP4687573B2 (ja) * 2006-06-14 2011-05-25 トヨタ自動車株式会社 車両用運転支援装置
KR20120031335A (ko) 2010-09-24 2012-04-03 박준형 스마트폰을 이용한 고속주행차량의 돌발상황 정보전달방법
KR20130039150A (ko) * 2011-10-11 2013-04-19 현대모비스 주식회사 운전자 졸음 방지 시스템 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180076464A (ko) * 2016-12-28 2018-07-06 (주)이로움 운전자 졸음 경고 시스템
KR102403887B1 (ko) * 2020-11-26 2022-05-30 동의대학교 산학협력단 졸음 운전 방지 시스템 및 그 방법

Also Published As

Publication number Publication date
KR101708872B1 (ko) 2017-02-21

Similar Documents

Publication Publication Date Title
CN106585629B (zh) 一种车辆控制方法和装置
RU151784U1 (ru) Устройство уведомления водителя, покидающего остановленный автомобиль, если в автомобиле находится еще одно лицо или животное
JP4400624B2 (ja) 居眠り防止装置及び方法
US20200216095A1 (en) Vehicle driving assistance apparatus
US20150379362A1 (en) Imaging device based occupant monitoring system supporting multiple functions
KR20120058230A (ko) 이동체 안전운행 장치 및 방법
JP2013152700A (ja) ドライバモニタ装置
JP6627811B2 (ja) 集中度判定装置、集中度判定方法及び集中度判定のためのプログラム
JP5880740B1 (ja) 衝突回避システム及び衝突回避方法
US11279348B2 (en) Safety, security and control system for vehicle
WO2019196625A1 (zh) 监控装置、车辆、监控方法及信息处理装置
JP2019086813A (ja) 漫然運転抑制システム
CN112133059A (zh) 驾驶管控***
KR101708872B1 (ko) 졸음 운전 예방 시스템
JP2008305190A (ja) 居眠り警告装置及び自動車
JP2009166783A (ja) 症状推定装置
JP2000351337A (ja) 移動体制御装置
KR20150061668A (ko) 졸음운전 경보 장치 및 그 방법
JPH08290726A (ja) 居眠り警報装置
JP6977589B2 (ja) 車両用警報装置
KR20090043221A (ko) 운전자 상태 맞춤형 차선 이탈 방지 경고 방법 및 시스템
JP7441417B2 (ja) ドライバ状態推定装置
KR101844243B1 (ko) 스마트폰 카메라를 이용한 운전자 상태 확인시스템 및 그 방법
KR20230055433A (ko) 자동차의 음주운전 방지장치와 방법, 음주운전 자동차 수배시스템
JP2021144580A (ja) ドライバ状態推定装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
FPAY Annual fee payment

Payment date: 20200103

Year of fee payment: 4