KR20170055624A - 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법 - Google Patents

헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법 Download PDF

Info

Publication number
KR20170055624A
KR20170055624A KR1020150158461A KR20150158461A KR20170055624A KR 20170055624 A KR20170055624 A KR 20170055624A KR 1020150158461 A KR1020150158461 A KR 1020150158461A KR 20150158461 A KR20150158461 A KR 20150158461A KR 20170055624 A KR20170055624 A KR 20170055624A
Authority
KR
South Korea
Prior art keywords
lane
display
image
type
head
Prior art date
Application number
KR1020150158461A
Other languages
English (en)
Inventor
금병직
오형석
Original Assignee
현대오트론 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대오트론 주식회사 filed Critical 현대오트론 주식회사
Priority to KR1020150158461A priority Critical patent/KR20170055624A/ko
Publication of KR20170055624A publication Critical patent/KR20170055624A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/10—Path keeping
    • B60W30/12—Lane keeping
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/01—Satellite radio beacon positioning systems transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0183—Adaptation to parameters characterising the motion of the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Chemical & Material Sciences (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Combustion & Propulsion (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

본 발명은 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법이 개시된다. 본 발명의 헤드업 디스플레이를 이용한 차선 표시장치는, 차량의 전면 유리창에 디스플레이하는 헤드업 디스플레이; 차량에 설치되어 차량의 전방 영상을 촬영하여 출력하는 영상 촬영부; 차선의 종류에 따른 속성을 저장하는 차선정보 저장부; 및 영상 촬영부로부터 촬영된 전방 영상으로부터 차선을 인식하고, 인식된 차선의 종류를 분석한 후 디스플레이할 차선의 위치를 결정하고, 차선의 종류에 따른 속성을 차선정보 저장부로부터 읽어와 표시할 차선의 영상을 생성하여 헤드업 디스플레이에 표시하는 제어부;를 포함하는 것을 특징으로 한다.

Description

헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법{APPARATUS FOR DISPLAYING TRAFFIC LANE USING HEAD-UP DISPLAY AND METHOD THEREOF}
본 발명은 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법에 관한 것으로서, 보다 상세하게는 전방 영상으로부터 차선을 인식하여 종류를 분석하고, 차선의 종류에 따른 속성에 부합하도록 차선과 관련 정보를 표시하는 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법에 관한 것이다.
최근 대부분의 차량에는 내비게이션이 장착되어, 운전자에게 목적지와 길 안내를 제공하도록 하고 있으며, 또한 최근에는 차량의 앞 유리창에 원하는 정보를 투사하여 운전자가 전방을 주시하면서도 투사된 정보를 획득할 수 있도록 하는 헤드업 디스플레이(HUD : Head-Up Display)를 장착한 차량이 출시되고 있다.
나아가 헤드업 디스플레이를 통해 특정 정보를 증강현실의 형식으로 디스플레이할 수 있도록 하는 연구가 진행되고 있는 상황이다.
증강현실(AR : Augmented Reality)은 사용자가 눈으로 보는 현실세계에 3차원의 가상 물체를 겹쳐 보여주는 기술로서, 현실세계에 실시간으로 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주므로 혼합현실(Mixed Reality, MR)이라고도 한다.
그러나 이러한 헤드업 디스플레이는 단순히 내비게이션 정보를 헤드업 디스플레이에 표시하기만 하였다. 즉, 내비게이션 정보를 헤드업 디스플레이에 표시할 때 차량의 위치와 실제의 차선이 일치되지 않음으로써 안전사고 방지를 위한 정보들을 증강현실로 표시해 주지 못하는 문제점이 있었다.
예컨대 가로등이 없는 야간이나, 안개, 눈, 비와 같은 악천후로 인해 차선을 운전자의 시각으로 인지할 수 없을 경우, 안전사고 방지를 위하여 차선을 운전자에게 인지시킬 수 있는 보조 정보들을 표시해 주지 못하는 문제점이 있었다.
따라서, 이러한 문제점을 해결하기 위해 차선을 인식하여 실제 차선의 위치에 맞춰 증강현실로 가상의 차선을 표시해줄 수 있도록 하는 기술이 제안되었다.
관련 선행기술로는 한국공개특허 제2015-0055183호(2015.05.21.)인 "헤드업 디스플레이를 이용한 차선 표시 장치 및 방법"이 있다.
종래에는 이와 같은 헤드업 디스플레이를 통해 전면 유리창에 증강현실로 가상의 차선을 표시하고 있으나, 차선의 종류에 따라 차선이 갖는 의미 및 부가 정보에 대해서는 제공하지 않고 단순히 차선만 표시하고 있으며, 노면의 노후상태 및 주변 환경에 따라 차선이 촬영되지 않을 경우 표시할 수 없는 문제점이 있었다.
본 발명은 상기와 같은 문제점들을 개선하기 위하여 안출된 것으로, 본 발명의 목적은 전방 영상으로부터 차선을 인식하여 종류를 분석하고, 차선의 종류에 따른 속성에 부합하도록 차선과 관련 정보를 표시하는 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법을 제공하는 것이다.
또한, 본 발명의 다른 목적은 전방 영상으로부터 차선을 인식할 수 없을 때 맵데이터를 기반으로 차선정보를 추출하여 차선을 표시하는 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법을 제공하는 것이다.
또한, 본 발명의 또 다른 목적은 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선의 경우 해당 차선으로의 접근 여부에 따라 경보를 발생시키는 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법을 제공하는 것이다.
본 발명의 일 측면에 따른 헤드업 디스플레이를 이용한 차선 표시장치는, 차량의 전면에 디스플레이하는 헤드업 디스플레이; 차량에 설치되어 차량의 전방 영상을 촬영하여 출력하는 영상 촬영부; 차선의 종류에 따른 속성을 저장하는 차선정보 저장부; 및 영상 촬영부로부터 촬영된 전방 영상으로부터 차선을 인식하고, 인식된 차선의 종류를 분석한 후 디스플레이할 차선의 위치를 결정하고, 차선의 종류에 따른 속성을 차선정보 저장부로부터 읽어와 표시할 차선의 영상을 생성하여 헤드업 디스플레이에 표시하는 제어부;를 포함하는 것을 특징으로 한다.
본 발명은 GPS 위치정보를 수신하는 GPS 수신부; 및 차선정보를 포함한 맵데이터를 입력받는 맵데이터 입력부;를 더 포함하며, 제어부는 GPS 수신부로부터 수신된 GPS 위치정보로부터 차량의 위치를 판단하고, 차량의 위치를 기반으로 맵데이터 입력부를 통해 맵데이터를 입력받아 맵데이터의 차선정보로부터 차선의 종류를 추출하여 차선을 표시하는 것을 특징으로 한다.
본 발명에서 제어부는, 영상 촬영부에 의해 전방 영상으로부터 차선이 인식되지 않을 경우 맵데이터의 차선정보로부터 차선의 종류를 추출하여 차선을 표시하는 것을 특징으로 한다.
본 발명에서 제어부는, 차선의 종류에 따른 속성을 표시하기 위한 아이콘을 차선과 더불어 표시하는 것을 특징으로 한다.
본 발명에서 제어부는, 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선으로 차량이 접근할 경우 차선의 영상을 경고 영상으로 생성하여 표시하는 것을 특징으로 한다.
본 발명은 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선으로 차량이 접근할 경우 제어부로부터 경고신호를 입력받아 출력하는 경고부를 더 포함하는 것을 특징으로 한다.
본 발명의 다른 측면에 따른 헤드업 디스플레이를 이용한 차선 표시방법은, 제어부가 영상 촬영부로부터 차량의 전방 영상을 입력받아 차선을 인식하는 단계; 제어부가 인식된 차선으로부터 차선의 종류를 분석하는 단계; 및 제어부가 차선의 종류를 분석한 후 디스플레이할 차선의 위치를 결정하여 헤드업 디스플레이에 차선을 표시하는 단계를 포함하는 것을 특징으로 한다.
본 발명은 제어부가 차선의 종류에 따른 속성을 차선정보 저장부로부터 추출하는 단계; 및 제어부가 차선의 속성에 따른 아이콘을 헤드업 디스플레이에 표시하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명에서 제어부가 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선이 있는지 판단하는 단계; 판단결과 차선변경이 금지된 차선이 있는 경우, 제어부가 차선변경이 금지된 차선으로 차량이 접근하는지 판단하여 차선의 영상을 경고 영상으로 생성하는 단계; 및 제어부가 경고 영상으로 헤드업 디스플레이에 차선을 표시하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명은 제어부가 차선변경이 금지된 차선으로 차량이 접근할 경우 경고부를 통해 경고신호를 출력하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명은 제어부가 GPS 수신부로부터 GPS 위치정보를 수신하는 단계; 제어부가 GPS 위치정보로부터 차량의 위치를 판단하는 단계; 제어부가 차량의 위치를 기반으로 맵데이터 입력부로부터 맵데이터를 입력받아 맵데이터의 차선정보로부터 차량의 위치에 따른 차선의 종류를 추출하는 단계; 및 제어부가 차선의 종류에 따라 디스플레이할 차선의 위치를 결정하여 차선을 헤드업 디스플레이에 표시하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명에서 GPS 위치정보를 수신하는 단계는, 전방 영상으로부터 차선이 인식되지 않은 경우, 제어부가 GPS 위치정보를 수신하는 것을 특징으로 한다.
본 발명에 따른 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법은 전방 영상으로부터 차선을 인식하여 종류를 분석하고, 차선의 종류에 따른 속성에 부합하도록 차선과 관련 정보를 표시하여 차선의 의미를 운전자가 인지할 수 있도록 한다.
또한, 본 발명에 따르면, 전방 영상으로부터 차선을 인식할 수 없을 때 맵데이터를 기반으로 차선정보를 추출하여 차선을 표시할 수 있어 노면이 노후하고 주변 환경이 차선을 인식하지 못하는 상황에서도 차선을 표시하여 안전운전을 가이드 할 수 있다.
또한 본 발명에 따르면, 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선의 경우 해당 차선으로의 접근 여부에 따라 경보를 발생시켜 차선 위반에 따른 위험 요소를 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시장치를 나타낸 블록구성도이다.
도 2는 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시장치를 통해 차선을 표시한 예시도면이다.
도 3은 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시방법을 설명하기 위한 흐름도이다.
이하, 첨부된 도면들을 참조하여 본 발명에 따른 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법을 설명한다. 이 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시장치를 나타낸 블록구성도이고, 도 2는 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시장치를 통해 차선을 표시한 예시도면이다.
도 1에 도시된 바와 같이 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시장치는, 헤드업 디스플레이(60), 영상 촬영부(10), 차선정보 저장부(20) 및 제어부(50)를 포함한다.
헤드업 디스플레이(60)는 차량의 전면 유리창에 영상을 투사하여 디스플레이 한다.
영상 촬영부(10)는 차량의 전방에 설치되어 차량의 전방 영상을 촬영하여 제공한다.
차선정보 저장부(20)는 차선의 종류 예를 들어, 실선, 이중실선, 점선, 청색실선, 황색실선 등 차선의 종류에 따른 속성을 저장한다. 즉, 차선의 종류에 따른 속성으로 청색실선은 버스 전용차로를 구분하는 차선으로 승용차의 진입이 금지되거나 선택적으로 허용될 수 있음이 저장되고, 황색실선은 중앙선으로 차선변경이 금지된 차선임이 저장된다.
제어부(50)는 영상 촬영부(10)로부터 촬영된 전방 영상으로부터 차선을 인식하고, 인식된 차선의 종류를 분석한 후 디스플레이할 차선의 위치를 결정한다.
즉, 제어부(50)는 전방 영상으로부터 실제의 차선을 검출하여 인식한 후, 차선의 종류를 분석하고, 실제의 차선의 위치에 맞춰 가상의 차선을 증강현실로 헤드업 디스플레이(60)에 표시하기 위한 차선의 위치를 결정한다.
따라서, 야간이나 악천후에 실제 차선이 운전자의 육안으로 쉽게 인식되지 않는 상황에서도 헤드업 디스플레이(60)에 차선을 표시하여 운전자의 안전운전을 안내할 수 있도록 한다.
또한, 제어부(50)는 차선의 종류에 따른 속성을 차선정보 저장부(20)로부터 읽어와 표시할 차선의 영상을 생성하여 헤드업 디스플레이(60)에 표시한다.
이때 차선의 종류에 따른 속성을 표시하기 위해 아이콘을 통해 표시할 수 있다.
예를 들어, 차선의 종류가 청색실선인 경우 속성을 표시하기 위해 버스를 아이콘으로 차선과 함께 화면하단에 표시할 수 있다.
또한, 도 2에 도시된 바와 같이 황색실선인 경우 중앙선으로 차선변경이 금지된 차선임을 알리기 위해 화살표에 금지 표시를 하여 운전자가 중앙선을 인지할 수 있도록 할 수 있다.
한편, 중앙선과 같이 차선변경이 금지된 차선이 존재하는 경우, 제어부(50)는 인식된 차선과 영상으로부터 차량의 위치를 판단하여 차량이 차선에 접근하게 되면 차선의 영상을 경고 영상으로 생성하여 표시할 수 있다.
예를 들어, 경고 영상으로 차선이 적색으로 점멸되거나, 장벽처럼 솟아오르도록 생성하여 표시함으로써 차량이 접근하고 있음을 인지할 수 있도록 할 수 있다.
또한, 경고부(70)는 차선변경이 금지된 차선으로 차량이 접근할 경우 제어부(50)로부터 경고신호를 입력받아 청각적으로 인지할 수 있도록 음향을 출력할 수 있다.
한편, 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시장치는 GPS 수신부(30)와 맵데이터 입력부(40)를 더 포함할 수 있다.
GPS 수신부(30)는 GPS 위치정보를 수신하여 현재 차량의 위치를 판단할 수 있도록 한다.
맵데이터 입력부(40)는 차선정보를 포함한 맵데이터를 네비게이션(미도시)이나 서버(미도시)로부터 입력받아 차량의 위치를 기반으로 차선의 종류를 추출할 수 있도록 한다.
이와 같이 GPS 수신부(30)와 맵데이터 입력부(40)를 포함한 경우, 제어부(50)는 GPS 수신부(30)로부터 수신된 GPS 위치정보로부터 차량의 위치를 판단하고, 차량의 위치를 기반으로 맵데이터 입력부(40)를 통해 맵데이터를 입력받아 맵데이터의 차선정보로부터 차선의 종류를 추출하여 차선을 표시할 수 있다.
이렇게 GPS 위치정보와 맵데이터를 기반으로 차선의 종류를 추출하여 차선을 표시하는 경우는, 제어부(50)가 영상 촬영부(10)로부터 촬영된 전방 영상으로부터 차선이 인식되지 않을 경우 선택적으로 사용할 수 있다.
상술한 바와 같이, 본 발명의 실시예에 의한 헤드업 디스플레이를 이용한 차선 표시장치에 따르면, 전방 영상으로부터 차선을 인식하여 종류를 분석하고, 차선의 종류에 따른 속성에 부합하도록 차선과 관련 정보를 표시하여 차선의 의미를 운전자가 인지할 수 있도록 하며, 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선의 경우 해당 차선으로의 접근 여부에 따라 경보를 발생시켜 차선 위반에 따른 위험 요소를 줄일 수 있다.
또한, 전방 영상으로부터 차선을 인식할 수 없을 때 맵데이터를 기반으로 차선정보를 추출하여 차선을 표시할 수 있어 노면이 노후하고 주변 환경이 차선을 인식하지 못하는 상황에서도 차선을 표시하여 안전운전을 가이드 할 수 있다.
도 3은 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시방법을 설명하기 위한 흐름도이다.
도 3에 도시된 바와 같이 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 차선 표시방법에서는 먼저, 제어부(50)가 영상 촬영부(10)로부터 차량의 전방 영상을 입력받는다(S10).
이후 제어부(50)는 S10 단계에서 입력된 전방 영상으로부터 차선을 추출하여 차선을 인식한다(S12).
S12 단계에서 차선을 인식한 후 제어부(50)가 차선이 인식되었는지 판단할 수 있다(S14).
S14 단계에서 차선이 인식되었는지 판단하여 차선이 인식되지 않은 경우, 제어부(50)는 맵데이터의 차선정보로부터 차선의 종류를 추출할 수 있다(S34~S38).
반면, S14 단계에서 차선이 인식되었는지 판단하여 차선이 인식된 경우, 제어부(50)는 인식된 차선으로부터 차선의 종류를 분석한다(S16).
예를 들어, 실선, 이중실선, 점선, 청색실선, 황색실선 등과 같이 차선의 종류를 분석한다.
S16 단계에서 차선의 종류를 분석한 후 제어부(50)는 디스플레이할 차선의 위치를 결정한다(S18).
제어부(50)는 실제의 차선의 위치에 맞춰 가상의 차선을 증강현실로 헤드업 디스플레이(60)에 표시하기 위한 차선의 위치를 결정한다.
S18 단계에서 헤드업 디스플레이(60)에 표시할 차선의 위치가 결정되면, 제어부(50)는 차선의 영상을 생성하여 헤드업 디스플레이(60)에 표시한다(S20).
한편, S20 단계에서 헤드업 디스플레이(60)에 차선을 표시한 후, 제어부(50)는 차선의 종류에 따른 속성을 차선정보 저장부(20)로부터 추출한다(S22).
S22 단계에서 차선의 속성을 추출한 후, 제어부(50)는 차선의 속성에 따른 아이콘을 헤드업 디스플레이(60)에 표시한다(S24).
예를 들어, 차선의 종류가 청색실선인 경우, 제어부(50)는 버스전용 차로를 구분하는 차선임을 인지할 수 있도록 차선의 속성으로 버스를 아이콘으로 하여 차선과 함께 화면하단에 표시할 수 있다.
또한, 도 2에 도시된 바와 같이 차선의 종류가 황색실선인 경우, 제어부(50)는 중앙선으로 차선변경이 금지된 차선임을 알리기 위해 화살표에 금지 표시를 하여 운전자가 중앙선을 인지할 수 있도록 할 수 있다.
이와 같이 S24 단계에서 차선의 종류에 따른 속성으로 아이콘을 함께 표시한 후, 제어부(50)는 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선이 존재하는지 판단한다(S26).
S26 단계에서 차선변경이 금지된 차선이 존재하지 않는 경우, 제어부(50)는 S10 단계로 리턴되어 위의 과정을 반복 수행하면서 차선을 표시한다.
반면, S26 단계에서 차선변경이 금지된 차선이 존재하는 경우, 제어부(50)는 차선변경이 금지된 차선으로 차량이 접근하는지 판단한다(S28).
S28 단계에서 차량이 차선변경이 금지된 차선으로 접근하지 않는 경우, 제어부(50)는 S10 단계로 리턴되어 위의 과정을 반복 수행하면서 차선을 표시한다.
그러나, S28 단계에서 차량이 차선변경이 금지된 차선으로 접근할 경우, 제어부(50)는 차선의 영상을 경고 영상으로 생성하여 헤드업 디스플레이(60)에 표시한다(S30).
예를 들어, 경고 영상으로 차선이 적색으로 점멸되거나, 장벽처럼 솟아오르도록 생성하여 표시함으로써 차량이 접근하고 있음을 인지할 수 있도록 할 수 있다.
또한, S30 단계에서 경고 영상으로 생성하여 헤드업 디스플레이(60)에 표시하면서, 제어부(50)는 경고부(70)로 경고신호를 출력하여 청각적으로 운전자 인지할 수 있도록 할 수 있다(S32).
한편, S14 단계에서 차선이 인식되었는지 판단하여 차선이 인식되지 않은 경우, 제어부(50)는 GPS 수신부(30)로부터 GPS 위치정보를 수신하여 차량의 위치를 판단한다(S34).
S34 단계에서 차량의 위치를 판단한 후, 제어부(50)는 차량의 위치를 기반으로 맵데이터 입력부(40)로부터 차선정보가 포함된 맵데이터를 입력받는다(S36).
이후 제어부(50)는 S36 단계에서 입력된 맵데이터의 차선정보로부터 차선의 종류를 추출한다(S38).
이와 같이 맵데이터로부터 차선의 종류를 추출한 후, 제어부(50)는 S18 단계로 진행하여 차선의 종류에 따라 디스플레이할 차선의 위치를 결정하여 차선을 헤드업 디스플레이(60)에 표시하고, 이후의 과정을 수행한다.
상술한 바와 같이, 본 발명의 실시예에 의한 헤드업 디스플레이를 이용한 차선 표시방법에 따르면, 전방 영상으로부터 차선을 인식하여 종류를 분석하고, 차선의 종류에 따른 속성에 부합하도록 차선과 관련 정보를 표시하여 차선의 의미를 운전자가 인지할 수 있으며, 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선의 경우 해당 차선으로의 접근 여부에 따라 경보를 발생시켜 차선 위반에 따른 위험 요소를 줄일 수 있다.
또한, 전방 영상으로부터 차선을 인식할 수 없을 때 맵데이터를 기반으로 차선정보를 추출하여 차선을 표시할 수 있어 노면이 노후하고 주변 환경이 차선을 인식하지 못하는 상황에서도 차선을 표시하여 안전운전을 가이드 할 수 있다.
본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다.
따라서 본 발명의 진정한 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.
10 : 영상 촬영부 20 : 차선정보 저장부
30 : GPS 수신부 40 : 맵데이터 입력부
50 : 제어부 60 : 헤드업 디스플레이
70 : 경고부

Claims (12)

  1. 차량의 전면에 디스플레이하는 헤드업 디스플레이;
    상기 차량에 설치되어 상기 차량의 전방 영상을 촬영하여 출력하는 영상 촬영부;
    차선의 종류에 따른 속성을 저장하는 차선정보 저장부; 및
    상기 영상 촬영부로부터 촬영된 상기 전방 영상으로부터 상기 차선을 인식하고, 인식된 상기 차선의 종류를 분석한 후 디스플레이할 상기 차선의 위치를 결정하고, 상기 차선의 종류에 따른 속성을 상기 차선정보 저장부로부터 읽어와 표시할 상기 차선의 영상을 생성하여 상기 헤드업 디스플레이에 표시하는 제어부;를 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시장치.
  2. 제 1항에 있어서, GPS 위치정보를 수신하는 GPS 수신부; 및
    차선정보를 포함한 맵데이터를 입력받는 맵데이터 입력부;를 더 포함하며,
    상기 제어부는 상기 GPS 수신부로부터 수신된 상기 GPS 위치정보로부터 상기 차량의 위치를 판단하고, 상기 차량의 위치를 기반으로 상기 맵데이터 입력부를 통해 상기 맵데이터를 입력받아 상기 맵데이터의 차선정보로부터 상기 차선의 종류를 추출하여 상기 차선을 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시장치.
  3. 제 2항에 있어서, 상기 제어부는, 상기 영상 촬영부에 의해 촬영된 상기 전방 영상으로부터 상기 차선이 인식되지 않을 경우 상기 맵데이터의 차선정보로부터 상기 차선의 종류를 추출하여 상기 차선을 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시장치.
  4. 제 1항에 있어서, 상기 제어부는, 상기 차선의 종류에 따른 속성을 표시하기 위한 아이콘을 상기 차선과 더불어 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시장치.
  5. 제 1항에 있어서, 상기 제어부는, 상기 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선으로 상기 차량이 접근할 경우 상기 차선의 영상을 경고 영상으로 생성하여 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시장치.
  6. 제 1항에 있어서, 상기 차선의 종류에 따른 속성으로부터 상기 차선변경이 금지된 차선으로 상기 차량이 접근할 경우 상기 제어부로부터 경고신호를 입력받아 출력하는 경고부를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시장치.
  7. 제어부가 영상 촬영부로부터 차량의 전방 영상을 입력받아 차선을 인식하는 단계;
    상기 제어부가 인식된 상기 차선으로부터 상기 차선의 종류를 분석하는 단계; 및
    상기 제어부가 상기 차선의 종류를 분석한 후 디스플레이할 상기 차선의 위치를 결정하여 헤드업 디스플레이에 상기 차선을 표시하는 단계를 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시방법.
  8. 제 7항에 있어서, 상기 제어부가 상기 차선의 종류에 따른 속성을 차선정보 저장부로부터 추출하는 단계; 및
    상기 제어부가 상기 차선의 속성에 따른 아이콘을 상기 헤드업 디스플레이에 표시하는 단계를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시방법.
  9. 제 7항에 있어서, 상기 제어부가 상기 차선의 종류에 따른 속성으로부터 차선변경이 금지된 차선이 있는지 판단하는 단계;
    상기 판단결과 상기 차선변경이 금지된 차선이 있는 경우, 상기 제어부가 상기 차선변경이 금지된 차선으로 상기 차량이 접근하는지 판단하여 상기 차선의 영상을 경고 영상으로 생성하는 단계; 및
    상기 제어부가 상기 경고 영상으로 상기 헤드업 디스플레이에 상기 차선을 표시하는 단계를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시방법.
  10. 제 9항에 있어서, 상기 제어부가 상기 차선변경이 금지된 차선으로 상기 차량이 접근할 경우 경고부를 통해 경고신호를 출력하는 단계를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시방법.
  11. 제 7항에 있어서, 상기 제어부가 GPS 수신부로부터 GPS 위치정보를 수신하는 단계;
    상기 제어부가 상기 GPS 위치정보로부터 상기 차량의 위치를 판단하는 단계;
    상기 제어부가 상기 차량의 위치를 기반으로 맵데이터 입력부로부터 맵데이터를 입력받아 상기 맵데이터의 차선정보로부터 상기 차량의 위치에 따른 상기 차선의 종류를 추출하는 단계; 및
    상기 제어부가 상기 차선의 종류에 따라 디스플레이할 상기 차선의 위치를 결정하여 상기 차선을 상기 헤드업 디스플레이에 표시하는 단계를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시방법.
  12. 제 11항에 있어서, 상기 GPS 위치정보를 수신하는 단계는, 상기 전방 영상으로부터 상기 차선이 인식되지 않은 경우, 상기 제어부가 상기 GPS 위치정보를 수신하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 차선 표시방법.
KR1020150158461A 2015-11-11 2015-11-11 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법 KR20170055624A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020150158461A KR20170055624A (ko) 2015-11-11 2015-11-11 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020150158461A KR20170055624A (ko) 2015-11-11 2015-11-11 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20170055624A true KR20170055624A (ko) 2017-05-22

Family

ID=59050193

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020150158461A KR20170055624A (ko) 2015-11-11 2015-11-11 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR20170055624A (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020117115A (ja) * 2019-01-25 2020-08-06 トヨタ自動車株式会社 運転支援装置
US11650069B2 (en) 2017-12-13 2023-05-16 Samsung Electronics Co., Ltd. Content visualizing method and device

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11650069B2 (en) 2017-12-13 2023-05-16 Samsung Electronics Co., Ltd. Content visualizing method and device
JP2020117115A (ja) * 2019-01-25 2020-08-06 トヨタ自動車株式会社 運転支援装置

Similar Documents

Publication Publication Date Title
US9723243B2 (en) User interface method for terminal for vehicle and apparatus thereof
WO2018066710A1 (ja) 走行支援装置及びコンピュータプログラム
US11377025B2 (en) Blocked information displaying method and system for use in autonomous vehicle
US7605773B2 (en) Head-up display system and method for carrying out the location-correct display of an object situated outside a vehicle with regard to the position of the driver
US6411898B2 (en) Navigation device
US20200324787A1 (en) Augmented reality method and apparatus for driving assistance
CN107848416B (zh) 显示控制装置、显示装置及显示控制方法
CN105599610B (zh) 标识信息显示***及标识信息显示方法
JP6459205B2 (ja) 車両用表示システム
CN115620545A (zh) 用于辅助驾驶的增强现实的方法及装置
US11525694B2 (en) Superimposed-image display device and computer program
US20200320676A1 (en) Virtual overlay system and method for occluded objects
US20230135641A1 (en) Superimposed image display device
JP2014181927A (ja) 情報提供装置、及び情報提供プログラム
JP7476568B2 (ja) 重畳画像表示装置、重畳画像描画方法及びコンピュータプログラム
US10996469B2 (en) Method and apparatus for providing driving information of vehicle, and recording medium
CN113272877B (zh) 用于车辆的控制***
KR20150051671A (ko) 차량 및 사용자 동작 인식에 따른 화면 제어 장치 및 그 운영방법
CN114103981A (zh) 车载显示装置、车载显示方法以及计算机可读存储介质
JP6102509B2 (ja) 車両用表示装置
KR20170055624A (ko) 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법
KR101767434B1 (ko) 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법
CN113396314A (zh) 平视显示***
KR20170056752A (ko) 헤드업 디스플레이를 이용한 차선 표시장치 및 그 방법
WO2015186326A1 (ja) 車載ナビゲーション装置及び経路誘導案内表示方法

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment