KR20150055181A - 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법 - Google Patents

헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법 Download PDF

Info

Publication number
KR20150055181A
KR20150055181A KR1020130136700A KR20130136700A KR20150055181A KR 20150055181 A KR20150055181 A KR 20150055181A KR 1020130136700 A KR1020130136700 A KR 1020130136700A KR 20130136700 A KR20130136700 A KR 20130136700A KR 20150055181 A KR20150055181 A KR 20150055181A
Authority
KR
South Korea
Prior art keywords
display
night vision
image
head
displaying
Prior art date
Application number
KR1020130136700A
Other languages
English (en)
Inventor
오형석
이준묵
양지혁
금병직
Original Assignee
현대오트론 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대오트론 주식회사 filed Critical 현대오트론 주식회사
Priority to KR1020130136700A priority Critical patent/KR20150055181A/ko
Publication of KR20150055181A publication Critical patent/KR20150055181A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/48—Thermography; Techniques using wholly visual means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Instrument Panels (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

본 발명은 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법에 관한 것으로, 상기 장치는 헤드업 디스플레이와, 전방 객체의 열 감지 영상을 촬영하는 나이트 비전 및 상기 나이트 비전을 통해 촬영된 영상을 처리하여 차량 전방의 객체를 감지하며, 상기 헤드업 디스플레이의 화면과 상기 나이트 비전 영상의 좌표를 매칭시키고, 상기 좌표 매칭 결과에 따라 상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 내부에 있을 경우 상기 객체가 있는 실제 위치에 맞춰 경고용 인디케이터 이미지를 표시하는 제어부를 포함한다.

Description

헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법{APPARATUS FOR DISPLAYING NIGHT VISION INFORMATION USING HEAD-UP DISPLAY AND METHOD THEREOF}
본 발명은 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법에 관한 것으로, 보다 상세하게는 야간이나 기상 악천후 시 나이트 비전을 통해 감지된 정보를 운전자의 시각에 맞춰 경고용 인디케이터 이미지를 이용해 증강현실로 표시해 줄 수 있도록 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법에 관한 것이다.
최근 대부분의 차량에는 내비게이션이 장착되어, 운전자에게 목적지와 길 안내를 제공하도록 하고 있으며, 또한 최근에는 차량의 앞 유리창에 원하는 정보를 투사하여 운전자가 전방을 주시하면서도 투사된 정보를 획득할 수 있도록 하는 헤드업 디스플레이(HUD : Head-Up Display)를 장착한 차량이 출시되고 있기도 하다. 나아가 상기 헤드업 디스플레이를 통해 특정 정보를 증강현실의 형식으로 디스플레이할 수 있도록 하는 연구가 진행되고 있는 상황이다.
상기 증강현실(AR : Augmented Reality)은 사용자가 눈으로 보는 현실세계에 3차원의 가상 물체를 겹쳐 보여주는 기술로서, 현실세계에 실시간으로 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여주므로 혼합현실(Mixed Reality, MR)이라고도 한다.
그러나 종래의 헤드업 디스플레이는 단순히 내비게이션 정보를 헤드업 디스플레이에 표시하기만 하였다. 즉, 안전사고 위험이 많은 야간에도 주간과 마찬가지로 단순히 내비게이션 정보만 헤드업 디스플레이에 표시하였다. 다시 말해 종래의 헤드업 디스플레이는 야간에 안전사고를 방지하기 위한 정보들을 증강현실로 표시해 주지 못하는 문제점이 있었다.
따라서 최근의 차량에는 상기와 같이 야간에 안전사고 방지를 위한 정보를 운전자에게 제공하기 위한 시스템으로서 나이트 비전(Night Vision)을 부착하기도 한다. 상기 나이트 비전 시스템은 어둠 속에서 인간의 시각능력을 훨씬 능가하는 시각정보를 제공하며 운전자가 위험한 상황을 감지할 수 있도록 하여 자동차의 안전성을 향상시키는 안전장치이다.
즉, 야간에는 가시성이 떨어지므로 야간 운전은 주간보다 휠씬 위험 하지만 현재까지 우리가 취할 수 있는 방법은 전조등을 켜고 더 천천히 주행하는 것 밖에 없었다. 따라서 이를 보완하기 위해 군사용 목적으로 개발되어 제한적으로 사용되던 열 감지 시스템을 차량에 적용한 기술이 나이트 비전(Night Vision)이다.
그러나 상기 헤드업 디스플레이 및 나이트 비전은 별도의 시스템으로 차량에 장착되어 각기 독립적인 기능을 수행하였을 뿐, 두 시스템의 기능을 융합하여 야간 운전 시 사용자의 안전운전에 도움을 주는 기능을 제공하지는 못하였다.
본 발명의 배경기술은 대한민국 공개특허 10-2009-0076242호(2009.07.31.공개, 차량용 헤드 업 디스플레이 장치 및 그 동작 제어 방법)에 개시되어 있다.
본 발명은 상기와 같은 문제점을 해결하기 위해 창작된 것으로서, 야간이나 기상 악천후 시 나이트 비전을 통해 감지된 정보를 운전자의 시각에 맞춰 경고용 인디케이터 이미지를 이용해 증강현실로 표시해 줄 수 있도록 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법을 제공하는데 그 목적이 있다.
본 발명의 일 측면에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치는, 헤드업 디스플레이; 전방 객체의 열 감지 영상을 촬영하는 나이트 비전; 및 상기 나이트 비전을 통해 촬영된 영상을 처리하여 차량 전방의 객체를 감지하며, 상기 헤드업 디스플레이의 화면과 상기 나이트 비전 영상의 좌표를 매칭시키고, 상기 좌표 매칭 결과에 따라 상기 객체가 있는 실제 위치에 맞춰 경고용 인디케이터 이미지를 표시하는 제어부;를 포함하는 것을 특징으로 한다.
본 발명에 있어서, 상기 제어부는, 상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 외부에 있을 경우 상기 객체가 있는 실제 방향을 지시하는 경고용 인디케이터 이미지를 표시하는 것을 특징으로 한다.
본 발명에 있어서, 상기 제어부는, 나이트 비전의 온/오프 상태를 확인하여 상기 헤드업 디스플레이 화면에 상기 나이트 비전의 온/오프 상태를 표시하는 것을 특징으로 한다.
본 발명에 있어서, 상기 경고용 인디케이터 이미지는, 상기 나이트 비전의 영상에서 감지된 객체의 실제 위치를 운전자에게 인지시키기 위한 이미지로서, 객체의 전체나 부분을 둘러싸는 형상, 객체를 가리키는 형상 및 객체를 대체하는 가상의 형상 중 적어도 하나 이상을 포함하는 것을 특징으로 한다.
본 발명에 있어서, 상기 경고용 인디케이터 이미지는, 적어도 하나 이상의 색상이 부가되고, 크기 및 명암이 조절되며, 경고 효과를 향상시키기 위하여 깜박임, 확대/축소, 3차원 효과 및 색상 채우기 중 적어도 하나 이상의 특수효과가 부가되는 것을 특징으로 한다.
본 발명의 다른 측면에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법은, 나이트 비전을 통해 전방 객체의 열 감지 영상을 촬영하는 단계; 제어부가 상기 촬영된 영상을 처리하여 차량 전방의 객체를 감지하는 단계; 제어부가 상기 나이트 비전의 영상 좌표를 헤드업 디스플레이의 화면에 매칭시키는 단계; 및 상기 좌표 매칭 후 상기 감지된 객체가 상기 헤드업 디스플레이 화면의 표시 영역 내부에 있는지 혹은 외부에 있는지 여부에 따라 경고용 인디케이터 이미지를 헤드업 디스플레이의 화면을 통해 증강현실로 표시하는 단계;를 포함하는 것을 특징으로 한다.
본 발명은, 상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 내부에 있을 경우, 제어부가 상기 객체가 있는 실제 위치에 맞춰 경고용 인디케이터 이미지를 표시하는 것을 특징으로 한다.
본 발명은, 상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 외부에 있을 경우, 제어부가 상기 객체가 있는 실제 방향을 지시하는 경고용 인디케이터 이미지를 표시하는 것을 특징으로 한다.
본 발명은, 상기 제어부가 상기 나이트 비전의 온/오프 상태를 확인하여 상기 헤드업 디스플레이 화면에 상기 나이트 비전의 온/오프 상태를 표시하는 단계;를 더 포함하는 것을 특징으로 한다.
본 발명에 있어서, 상기 경고용 인디케이터 이미지는, 상기 나이트 비전의 영상에서 감지된 객체의 실제 위치를 운전자에게 인지시키기 위한 이미지로서, 객체의 전체나 부분을 둘러싸는 형상, 객체를 가리키는 형상 및 객체를 대체하는 가상의 형상 중 적어도 하나 이상을 포함하고, 적어도 하나 이상의 색상이 부가되며, 그의 크기 및 명암이 조절되고, 또한 깜박임, 확대/축소, 3차원 효과 및 색상 채우기 중 적어도 하나 이상의 특수효과가 부가되는 것을 특징으로 한다.
본 발명은 야간이나 기상 악천후 시 나이트 비전을 통해 감지된 정보를 운전자의 시각에 맞춰 경고용 인디케이터 이미지를 이용해 증강현실로 표시해 줄 수 있도록 함으로써 운전자의 가시성이 떨어지는 야간 및 악천후 시에도 안전운전을 수행할 수 있도록 한다.
도 1은 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치의 개략적인 구성을 보인 예시도.
도 2는 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법을 설명하기 위한 흐름도.
도 3은 상기 도 2에 있어서, 나이트 비전 정보를 표시하는 방법을 설명하기 위한 예시도.
이하, 첨부된 도면을 참조하여 본 발명에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법의 일 실시예를 설명한다.
이 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치의 개략적인 구성을 보인 예시도이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치(100)는, 카메라부(110), 나이트 비전(120), 제어부(130) 및 헤드업 디스플레이(140)를 포함한다.
상기 카메라부(110)는 차량 전방의 영상을 촬영하기 위한 수단으로서, 디지털 이미지 센서를 포함하는 적어도 하나 이상의 카메라로 구성된다.
상기 카메라부(110)는 주시방향(또는 차량 주행방향)을 촬영하여 보행자(또는 장애물) 영상을 획득한다.
본 실시예에서는 차선(또는 차로)을 검출하거나 도로의 주변에 있는 건물, 물체, 동물 및 보행자 등의 영상을 촬영하는데 이용할 수 있다.
예컨대 상기 카메라는 FIR(Far Infra Red) 카메라 및/또는 CMOS 카메라(또는 CCD 카메라)를 포함할 수 있다.
참고로 상기 CMOS 카메라(또는 CCD 카메라)는 가시광 영역의 빛을 감지하여 투영하는 역할을 하기 때문에 사람의 눈으로 보는 것과 비슷한 영상을 획득한다. 그리고 상기 FIR 카메라는 사람이 보지 못하는 적외선 대역의 빛을 투영하여 영상을 획득한다. 특히 FIR 대역은 온도에 따라 파장이 변하기 때문에 온도를 구별할 수 있는 장점이 있다.
상기 카메라부(110)는 상기 기재된 카메라에 한정되지 않고 다른 방식(예 : 레이저 투사 등)으로 차선을 검출할 수 있는 카메라를 더 포함할 수도 있다.
본 실시예에서는 상기 카메라부(110)를 이용하여 나이트 비전의 기능을 구현할 수도 있다. 그러나 이미 야간 영상 촬영에 특화된 나이트 비전 시스템(이하, 나이트 비전으로 기재)이 출시되어 있으므로, 본 실시예에서는 상기 카메라부(110)의 기능과 차별화되는 기능의 나이트 비전을 이용하여 야간 주행 중 객체(예 : 동물, 보행자, 차량 등)를 검출하는 것으로 설명한다.
상기 나이트 비전(120)은 가시성이 떨어지는 야간에 운전자의 시각적 인지 기능을 보완하기 위하여 객체(예 : 동물, 보행자, 차량 등)의 열 감지 영상을 촬영하여 출력한다.
상기 나이트 비전(120)은 주시방향(또는 차량 주행방향)에 있는 객체(예 : 동물, 보행자, 차량 등)로부터 방출(또는 반사)되는 열 감지 신호를 검출하여 증폭하여 출력한다.
상기 나이트 비전(120)을 통해 촬영되는 영상에서도 차선을 검출할 수 있으며, 상기 카메라부(110)를 통해 검출되는 차선이나 객체 영상과 조합하여 검출 정확도를 향상시킬 수 있다.
상기 제어부(130)는 객체 감지부(131), 좌표 매칭부(132), 인디케이터 이미지 생성부(133), 및 인디케이터 이미지 출력부(134)를 포함한다. 상기 각 구성수단(131 ~ 134)은 해당 기능을 별도로 수행할 수도 있고, 상기 제어부(130)에서 모든 기능을 통합하여 수행할 수도 있다. 편의상 본 실시예에서는 상기 각 구성수단(131 ~ 134)의 기능을 개별적으로 설명한다.
상기 객체 감지부(131)는 상기 카메라부(110) 및 나이트 비전(120) 중 적어도 어느 하나로부터 입력된 정보를 분석하여 객체(예 : 동물, 보행자, 차량 등)를 감지 및 인식한다.
예컨대 야간이더라도 상기 나이트 비전(120)이 오프(OFF)되어 있거나 주간인 경우에는 상기 카메라부(110)로부터 입력된 정보(영상)를 처리하여 객체(예 : 동물, 보행자, 차량 등)를 감지 및 인식하고, 상기 나이트 비전(120)이 온(ON)되어 있을 경우에는 상기 나이트 비전(120)으로부터 출력된 정보를 메인 정보로 사용하고, 상기 카메라부(110)로부터 입력된 정보(영상)는 객체 검출의 정확도 향상을 위한 보조적인 정보로서 사용할 수 있다. 따라서 본 실시예에서는 편의상 상기 나이트 비전(120)에서 출력된 정보를 처리하여 표시하는 방법을 중심으로 설명한다.
상기 좌표 매칭부(132)는 상기 나이트 비전(120)으로부터 촬영된 영상의 좌표와 상기 나이트 비전(120)의 영상을 출력할 상기 헤드업 디스플레이(140) 화면의 좌표를 매칭한다.
상기 좌표 매칭을 통해 운전자가 바라보는 시각(실제 객체가 있는 위치)에 맞춰 경고용 인디케이터 이미지를 출력할 수 있도록 한다.
상기 인디케이터 이미지 생성부(133)는 상기 나이트 비전(120)을 통해 감지된 객체의 위치를 운전자에게 인지시키기 위한 경고용 인디케이터 이미지를 생성한다. 예컨대 상기 경고용 인디케이터 이미지는 객체의 전체나 부분을 둘러싸는 형상(예 : 박스, 동그라미, 다각형 등), 객체를 가리키는 형상(예 : 화살표, 손가락, 별표 등), 및 객체를 대체하는 가상의 형상(예 : 아이콘, 캐릭터, 이모티콘 등) 중 적어도 하나 이상을 포함할 수 있다.
상기 인디케이터 이미지 생성부(133)는 상기 경고용 인디케이터 이미지에 다양한 색상, 크기 및 명암을 부가하고 조절할 수 있다.
상기 인디케이터 이미지 출력부(134)는 상기 생성된 경고용 인디케이터 이미지에 특수효과(예 : 깜박임, 확대/축소, 색상 채우기 등)를 부가하여 운전자에 대한 경고 효과를 향상시킬 수 있도록 한다.
상기 인디케이터 이미지 출력부(134)는 상기 경고용 인디케이터 이미지에 3차원 효과(예 : depth 조절)를 부가하여 상기 검출된 객체의 주변으로 경고용 인디케이터 이미지가 있는 것처럼 표시할 수 있도록 한다.
이때 상기 객체의 더 정확한 위치를 판단하기 위하여 상기 나이트 비전(120) 이외에 다른 방식으로 객체의 존재와 위치를 검출하는 센서들(미도시)을 더 포함할 수 있다. 또는 차량에 이미 설치된 적어도 하나 이상의 센서들(미도시)로부터 필요한 정보들을 입력받아 객체의 검출에 이용할 수도 있다.
예컨대 본 발명의 일 실시예에 따른 장치는, 도 3에 도시된 바와 같이, 야간 도로 주행 중 나이트 비전을 통해 객체가 검출되면, 상기 검출된 객체의 위치(예 : HUD 영역의 내부/외부)나 크기에 따라 객체를 둘러싸는 경고용 인디케이터 이미지를 표시하거나, 대체 이미지(예 : 아이콘)를 표시할 수 있다. 또한 헤드업 디스플레이(140)의 화면에 나이트 비전(NV)의 온/오프 상태를 표시하여 운전자가 인지할 수 있도록 한다. 이때 상기 경고용 인디케이터 이미지(또는 대체 이미지)는 운전자의 시각을 객체에 집중시킬 수 있는 특수효과를 부가하여 사용자의 시각(객체의 실제 위치)에 맞춰 증강현실로 표시된다.
상기 헤드업 디스플레이(140)는 상기 제어부(130)에서 출력된 나이트 비전 정보(예 : 경고용 인디케이터 이미지(또는 대체 이미지))를 사용자의 시각(객체의 실제 위치)에 맞춰 증강현실로 표시한다.
도 2는 본 발명의 일 실시예에 따른 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법을 설명하기 위한 흐름도이고, 도 3은 상기 도 2에 있어서, 나이트 비전 정보를 표시하는 방법을 설명하기 위한 예시도이다. 이하 도 2 및 도 3을 참조하여 야간 운전 중 나이트 비전 정보를 헤드업 디스플레이에 융합시켜 표시하는 방법을 설명한다.
도 2에 도시된 바와 같이, 상기 제어부(130)는 나이트 비전(NV)(120)의 온/오프 상태를 확인한다(S101).
그리고 상기 검출된 상태에 따라 헤드업 디스플레이(HUD)(140)에 상기 나이트 비전(120)의 온/오프 상태를 표시한다(S102).
본 실시예에서는 나이트 비전(120)이 온 되어 있는 경우에 대해서 설명한다.
상기 제어부(130)는 상기 나이트 비전(120)을 통해 검출된 정보(영상)를 처리하여 차량 전방의 객체(예 : 동물, 보행자, 차량 등)를 감지한다(S103).
편의상 본 실시예에서는, 도 3에 도시된 바와 같이, 보행자가 있는지 여부를 감지한다고 가정한다.
야간 주행 중 상기 나이트 비전(120)을 통해 객체(즉, 보행자)가 감지될 경우(S103의 예), 상기 제어부(130)는 상기 헤드업 디스플레이(140) 화면과 상기 나이트 비전(120) 영상의 좌표를 매칭시킨다(S104).
상기 헤드업 디스플레이(140) 화면과 상기 나이트 비전(120) 영상의 좌표가 매칭된 후, 상기 객체(즉, 보행자)가 상기 헤드업 디스플레이(140) 화면의 표시 영역 내부에 있는지 아닌지를 판단한다(S105).
다시 말해 상기 좌표 매칭 결과에 따라, 상기 나이트 비전(120)을 통해 감지된 객체(즉, 보행자)가 상기 헤드업 디스플레이(140) 화면의 표시 영역 내부에 있을 경우(S105의 예)에는 상기 객체(즉, 보행자)가 있는 실제 위치에 맞춰 경고용 인디케이터 이미지를 표시한다(S106)(도 3 참조).
그런데 상기 나이트 비전(120)을 통해 감지된 객체(즉, 보행자)가 상기 헤드업 디스플레이(140) 화면의 표시 영역을 벗어나 외부에 있을 경우(S105의 아니오)에는 상기 객체(즉, 보행자)가 있는 방향(예 : 상측, 하측, 좌측, 우측 등)에 맞춰(즉, 보행자가 있는 방향을 지시하는) 경고용 인디케이터 이미지(에 : 대체 이미지, 보행자 아이콘 등)를 표시한다(S107)(도 3 참조).
편의상 도 3에는 상기 나이트 비전(120)을 통해 감지된 객체(즉, 보행자)가 상기 헤드업 디스플레이(140) 화면의 경계 부분에 걸쳐 있는 것으로 도시되었으나, 만약 객체(즉, 보행자) 전체가 화면의 외부에 있을 경우에는 객체가 있음을 나타내는 경고용 인디케이터 이미지(에 : 대체 이미지, 보행자 아이콘 등)를 객체가 있는 방향에 맞춰 표시한다.
이때 상기 경고용 인디케이터 이미지와 객체 이미지를 객체가 실제로 있는 위치나 방향에 맞춰 증강현실로 표시하기 위해서 상기 헤드업 디스플레이(140)는 증강현실 헤드업 디스플레이(AR-HUD)를 사용할 수 있다.
본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.
110 : 카메라부 120 : 나이트 비전
130 : 제어부 131 : 객체 감지부
132 : 좌표 매칭부 133 : 인디케이터 이미지 생성부
134 : 인디케이터 이미지 출력부 140 : 헤드업 디스플레이

Claims (10)

  1. 헤드업 디스플레이;
    전방 객체의 열 감지 영상을 촬영하는 나이트 비전; 및
    상기 나이트 비전을 통해 촬영된 영상을 처리하여 차량 전방의 객체를 감지하며, 상기 헤드업 디스플레이의 화면과 상기 나이트 비전 영상의 좌표를 매칭시키고, 상기 좌표 매칭 결과에 따라 상기 객체가 있는 실제 위치에 맞춰 경고용 인디케이터 이미지를 표시하는 제어부;를 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치.
  2. 제 1항에 있어서, 상기 제어부는,
    상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 외부에 있을 경우 상기 객체가 있는 실제 방향을 지시하는 경고용 인디케이터 이미지를 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치.
  3. 제 1항에 있어서, 상기 제어부는,
    나이트 비전의 온/오프 상태를 확인하여 상기 헤드업 디스플레이 화면에 상기 나이트 비전의 온/오프 상태를 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치.
  4. 제 1항 또는 제 2항에 있어서, 상기 경고용 인디케이터 이미지는,
    상기 나이트 비전의 영상에서 감지된 객체의 실제 위치를 운전자에게 인지시키기 위한 이미지로서,
    객체의 전체나 부분을 둘러싸는 형상, 객체를 가리키는 형상 및 객체를 대체하는 가상의 형상 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치.
  5. 제 4항에 있어서, 상기 경고용 인디케이터 이미지는,
    적어도 하나 이상의 색상이 부가되고, 크기 및 명암이 조절되며,
    경고 효과를 향상시키기 위하여 깜박임, 확대/축소, 3차원 효과 및 색상 채우기 중 적어도 하나 이상의 특수효과가 부가되는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치.
  6. 나이트 비전을 통해 전방 객체의 열 감지 영상을 촬영하는 단계;
    제어부가 상기 촬영된 영상을 처리하여 차량 전방의 객체를 감지하는 단계;
    제어부가 상기 나이트 비전의 영상 좌표를 헤드업 디스플레이의 화면에 매칭시키는 단계; 및
    상기 좌표 매칭 후 상기 감지된 객체가 상기 헤드업 디스플레이 화면의 표시 영역 내부에 있는지 혹은 외부에 있는지 여부에 따라 경고용 인디케이터 이미지를 헤드업 디스플레이의 화면을 통해 증강현실로 표시하는 단계;를 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법.
  7. 제 6항에 있어서,
    상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 내부에 있을 경우,
    제어부가 상기 객체가 있는 실제 위치에 맞춰 경고용 인디케이터 이미지를 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법.
  8. 제 6항에 있어서,
    상기 객체가 상기 헤드업 디스플레이 화면의 표시 영역 외부에 있을 경우,
    제어부가 상기 객체가 있는 실제 방향을 지시하는 경고용 인디케이터 이미지를 표시하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법.
  9. 제 6항에 있어서,
    상기 제어부가 상기 나이트 비전의 온/오프 상태를 확인하여 상기 헤드업 디스플레이 화면에 상기 나이트 비전의 온/오프 상태를 표시하는 단계;를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법.
  10. 제 6항에 있어서, 상기 경고용 인디케이터 이미지는,
    상기 나이트 비전의 영상에서 감지된 객체의 실제 위치를 운전자에게 인지시키기 위한 이미지로서,
    객체의 전체나 부분을 둘러싸는 형상, 객체를 가리키는 형상 및 객체를 대체하는 가상의 형상 중 적어도 하나 이상을 포함하고, 적어도 하나 이상의 색상이 부가되며, 그의 크기 및 명암이 조절되고,
    또한 깜박임, 확대/축소, 3차원 효과 및 색상 채우기 중 적어도 하나 이상의 특수효과가 부가되는 것을 특징으로 하는 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 방법.
KR1020130136700A 2013-11-12 2013-11-12 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법 KR20150055181A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020130136700A KR20150055181A (ko) 2013-11-12 2013-11-12 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130136700A KR20150055181A (ko) 2013-11-12 2013-11-12 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법

Publications (1)

Publication Number Publication Date
KR20150055181A true KR20150055181A (ko) 2015-05-21

Family

ID=53390835

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130136700A KR20150055181A (ko) 2013-11-12 2013-11-12 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법

Country Status (1)

Country Link
KR (1) KR20150055181A (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170133747A (ko) * 2016-05-26 2017-12-06 현대자동차주식회사 증강현실 헤드업 디스플레이 시스템에서 월드좌표를 활용한 정보 표시 방법
KR20190053612A (ko) 2017-11-10 2019-05-20 현대오트론 주식회사 차량 추적 장치 및 그것의 동작 방법
US10539790B2 (en) 2015-11-24 2020-01-21 Hyundai Autron Co., Ltd. Coordinate matching apparatus for head-up display
US10696226B2 (en) 2017-12-27 2020-06-30 Toyota Research Institute, Inc. Vehicles and methods for displaying objects located beyond a headlight illumination line

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10539790B2 (en) 2015-11-24 2020-01-21 Hyundai Autron Co., Ltd. Coordinate matching apparatus for head-up display
KR20170133747A (ko) * 2016-05-26 2017-12-06 현대자동차주식회사 증강현실 헤드업 디스플레이 시스템에서 월드좌표를 활용한 정보 표시 방법
KR20190053612A (ko) 2017-11-10 2019-05-20 현대오트론 주식회사 차량 추적 장치 및 그것의 동작 방법
US10696226B2 (en) 2017-12-27 2020-06-30 Toyota Research Institute, Inc. Vehicles and methods for displaying objects located beyond a headlight illumination line

Similar Documents

Publication Publication Date Title
JP3855439B2 (ja) 夜間運転視界支援装置
KR101511587B1 (ko) 헤드업 디스플레이 정보 표시 장치 및 방법
CN107850944B (zh) 在机动车辆中运行数据眼镜的方法以及带有数据眼镜的***
JP6806097B2 (ja) 画像表示装置及び画像表示方法
WO2015163205A1 (ja) 車両用表示システム
JP4702348B2 (ja) 車載画像表示装置
KR101349025B1 (ko) 원적외선 스마트 나이트 뷰를 위한 차선 정보 합성 장치 및 방법
JP2010130646A (ja) 車両周辺確認装置
JP2003200755A (ja) 車両用表示装置
JP2010234851A (ja) 車両用表示装置
JP2008018760A (ja) 運転支援装置
JP4103518B2 (ja) 車載画像表示装置
JP2015226304A (ja) 車両用投影装置及びヘッドアップディスプレイシステム
WO2018159019A1 (ja) 俯瞰映像生成装置、俯瞰映像生成システム、俯瞰映像生成方法およびプログラム
KR20150055181A (ko) 헤드업 디스플레이를 이용한 나이트 비전 정보 표시 장치 및 방법
JP5131152B2 (ja) 視覚支援装置
JP2017056909A (ja) 車両用画像表示装置
CN108725321A (zh) 信息提示装置
JP3884815B2 (ja) 車両用情報表示装置
JP2016031603A (ja) 車両用表示システム
KR20150055183A (ko) 헤드업 디스플레이를 이용한 차선 표시 장치 및 방법
JP2009230225A (ja) 車両用周囲監視装置
KR101767435B1 (ko) 헤드업 디스플레이의 표시 제어 장치 및 방법
KR20170065738A (ko) 헤드업 디스플레이 제어 장치 및 방법
KR101786581B1 (ko) 헤드업 디스플레이의 표시 제어 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment