KR20180026418A - 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법 - Google Patents

헤드업 디스플레이의 좌표 매칭 장치 및 그 방법 Download PDF

Info

Publication number
KR20180026418A
KR20180026418A KR1020180021886A KR20180021886A KR20180026418A KR 20180026418 A KR20180026418 A KR 20180026418A KR 1020180021886 A KR1020180021886 A KR 1020180021886A KR 20180021886 A KR20180021886 A KR 20180021886A KR 20180026418 A KR20180026418 A KR 20180026418A
Authority
KR
South Korea
Prior art keywords
display
head
coordinates
measuring unit
peripheral information
Prior art date
Application number
KR1020180021886A
Other languages
English (en)
Inventor
오형석
금병직
Original Assignee
현대오트론 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대오트론 주식회사 filed Critical 현대오트론 주식회사
Priority to KR1020180021886A priority Critical patent/KR20180026418A/ko
Publication of KR20180026418A publication Critical patent/KR20180026418A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C19/00—Gyroscopes; Turn-sensitive devices using vibrating masses; Turn-sensitive devices without moving masses; Measuring angular rate using gyroscopic effects
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01H—MEASUREMENT OF MECHANICAL VIBRATIONS OR ULTRASONIC, SONIC OR INFRASONIC WAVES
    • G01H1/00—Measuring characteristics of vibrations in solids by using direct conduction to the detector
    • G01H1/12—Measuring characteristics of vibrations in solids by using direct conduction to the detector of longitudinal or not specified vibrations
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01P—MEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P15/00—Measuring acceleration; Measuring deceleration; Measuring shock, i.e. sudden change of acceleration
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0183—Adaptation to parameters characterising the motion of the vehicle

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Optics & Photonics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Instrument Panels (AREA)

Abstract

본 발명은 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법이 개시된다. 본 발명의 헤드업 디스플레이의 좌표 매칭 장치는, 차량의 전면 유리창에 영상을 디스플레이하는 헤드업 디스플레이; 차량에 설치되어 전방의 물체를 측정하는 주변정보 측정부; 및 주변정보 측정부의 설치위치에 따른 좌표와 헤드업 디스플레이의 좌표를 일치시켜 주변정보 측정부에서 측정된 물체의 위치를 헤드업 디스플레이의 좌표에 매칭시켜 표시하는 제어부;를 포함하는 것을 특징으로 한다.

Description

헤드업 디스플레이의 좌표 매칭 장치 및 그 방법{APPARATUS FOR MATCHING COORDINATE OF HEAD-UP DISPLAY}
본 발명은 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법에 관한 것으로서, 보다 상세하게는 주변정보 측정장치로부터 측정된 정보를 표시하기 위해 주변정보 측정장치의 좌표와 헤드업 디스플레이의 좌표를 일치시킬 뿐만 아니라 화각을 일치시켜 헤드업 디스플레이에 표시할 수 있도록 물체의 위치를 변환시키는 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법에 관한 것이다.
최근 대부분의 차량에는 내비게이션이 장착되어, 운전자에게 목적지와 길 안내를 제공하도록 하고 있으며, 또한 최근에는 차량의 앞 유리창에 원하는 정보를 투사하여 운전자가 전방을 주시하면서도 투사된 정보를 획득할 수 있도록 하는 헤드업 디스플레이(HUD : Head-Up Display)를 장착한 차량이 출시되고 있다.
나아가 헤드업 디스플레이를 통해 특정 정보를 증강현실의 형식으로 디스플레이할 수 있도록 하는 연구가 진행되고 있는 상황이다.
증강현실(AR : Augmented Reality)은 사용자가 눈으로 보는 현실세계에 3차원의 가상 물체를 겹쳐 보여주는 기술로서, 현실세계에 실시간으로 부가정보를 갖는 가상세계를 합쳐 하나의 영상으로 보여 주므로 혼합현실(Mixed Reality, MR)이라고도 한다.
그러나 이러한 헤드업 디스플레이는 단순히 내비게이션 정보 및 차량 주행에 대한 단순한 정보만 표시하였다.
관련 선행기술로는 한국공개특허 제2005-0010429호(2005.01.27.)인 "헤드업 디스플레이 영상위치 조절장치"가 있다.
이와 같이 차량의 주변정보를 측정하여 헤드업 디스플레이에 증강현실로 표시할 때 주변정보 측정장치의 설치위치나 화각과 헤드업 디스플레이를 통해 표시하는 영상의 화각 및 좌표가 서로 상이할 경우 물체의 크기가 상이하거나 표시되는 위치가 어긋나는 문제점이 있다.
본 발명은 상기와 같은 문제점들을 개선하기 위하여 안출된 것으로, 본 발명의 일 측면에 따르면, 본 발명의 목적은 주변정보 측정장치로부터 측정된 정보를 표시하기 위해 주변정보 측정장치의 좌표와 헤드업 디스플레이의 좌표를 일치시킬 뿐만 아니라 화각을 일치시켜 헤드업 디스플레이에 표시할 수 있도록 물체의 위치를 변환시키는 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법을 제공하는 것이다.
본 발명의 일 측면에 따른 헤드업 디스플레이의 좌표 매칭 장치는, 차량의 전면 유리창에 영상을 디스플레이하는 헤드업 디스플레이; 차량에 설치되어 전방의 물체를 측정하는 주변정보 측정부; 및 주변정보 측정부의 설치위치에 따른 좌표와 헤드업 디스플레이의 좌표를 일치시켜 주변정보 측정부에서 측정된 물체의 위치를 헤드업 디스플레이의 좌표에 매칭시켜 헤드업 디스플레이에 표시하는 제어부;를 포함하는 것을 특징으로 한다.
본 발명은 차량의 진동 및 자세를 측정하는 차량자세 측정부를 더 포함하며, 제어부는 차량의 자세에 따른 좌표의 변화에 대해 헤드업 디스플레이의 좌표를 보정하는 것을 특징으로 한다.
본 발명에서 차량자세 측정부는, 진동센서, 가속도센서 및 자이로센서 중 어느 하나 이상을 포함하는 것을 특징으로 한다.
본 발명에서 주변정보 측정부는, 카메라, 레이더 및 라이다 중 어느 하나 이상을 포함하는 것을 특징으로 한다.
본 발명에서 제어부는, 주변정보 측정부의 측정 화각과 헤드업 디스플레이를 통해 표시되는 영상의 화각이 일치되도록 주변정보 측정부에서 측정된 물체의 위치를 변환하는 것을 특징으로 한다.
본 발명에서 제어부는, 주변정보 측정부의 설치위치에 따른 좌표와 헤드업 디스플레이의 좌표를 일치시키기 위한 시점변환 매트릭스를 통해 주변정보 측정부에서 측정된 물체의 위치를 헤드업 디스플레이의 좌표에 매칭시키는 것을 특징으로 한다.
본 발명의 다른 측면에 따른 헤드업 디스플레이의 좌표 매칭 방법은, 제어부가 주변정보 측정부로부터 측정한 물체의 감시영상을 입력 받는 단계; 제어부가 주변정보 측정부의 설치위치에 따른 좌표와 헤드업 디스플레이의 좌표를 일치시키는 단계; 및 제어부가 물체의 위치를 헤드업 디스플레이의 좌표에 매칭시켜 헤드업 디스플레이에 표시하는 단계;를 포함하는 것을 특징으로 한다.
본 발명에서 헤드업 디스플레이의 좌표와 일치시키는 단계는, 제어부가 차량자세 측정부로부터 차량자세에 따른 좌표의 변화가 입력될 경우 헤드업 디스플레이의 좌표를 보정하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명에서 차량자세 측정부는, 진동센서, 가속도센서 및 자이로센서 중 어느 하나 이상을 포함하는 것을 특징으로 한다.
본 발명은 제어부가 주변정보 측정부의 측정 화각과 헤드업 디스플레이를 통해 표시되는 영상의 화각이 일치되도록 주변정보 측정부에서 측정된 물체의 위치를 변환하는 단계를 더 포함하는 것을 특징으로 한다.
본 발명에서 물체의 위치를 헤드업 디스플레이의 좌표에 매칭시켜 헤드업 디스플레이에 표시하는 단계는, 제어부가 주변정보 측정부의 설치위치에 따른 좌표와 헤드업 디스플레이의 좌표를 일치시키기 위한 시점변환 매트릭스를 통해 주변정보 측정부에서 측정된 물체의 위치를 헤드업 디스플레이의 좌표로 매칭시키는 것을 특징으로 한다.
본 발명에서 주변정보 측정부는, 카메라, 레이더 및 라이다 중 어느 하나 이상을 포함하는 것을 특징으로 한다.
본 발명의 일 측면에 따른 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법은 주변정보 측정장치로부터 측정된 정보를 표시하기 위해 주변정보 측정장치의 좌표와 헤드업 디스플레이의 좌표를 일치시킬 뿐만 아니라 화각을 일치시켜 헤드업 디스플레이에 표시할 수 있도록 물체의 위치를 변환시킴으로써 실제 물체와 영상에서의 물체 간 위치와 크기가 매칭되도록 하여 이질감을 줄일 수 있다.
도 1은 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치를 나타낸 블록구성도이다.
도 2는 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치에서의 다양한 좌표계를 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치에서 시점변환 과정을 나타낸 예시도면이다.
도 4는 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 방법을 설명하기 위한 흐름도이다.
이하, 첨부된 도면들을 참조하여 본 발명에 따른 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법을 설명한다. 이 과정에서 도면에 도시된 선들의 두께나 구성요소의 크기 등은 설명의 명료성과 편의상 과장되게 도시되어 있을 수 있다. 또한, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 그러므로 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.
도 1은 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치를 나타낸 블록구성도이고, 도 2는 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치에서의 다양한 좌표계를 나타낸 도면이며, 도 3은 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치에서 시점변환 과정을 나타낸 예시도면이다.
도 1에 도시된 바와 같이 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 장치는, 헤드업 디스플레이(40), 주변정보 측정부(10) 및 제어부(30)를 비롯하여 차량자세 측정부(20)를 포함한다.
헤드업 디스플레이(40)는 차량(미도시)의 전면 유리창에 영상을 투사하여 디스플레이한다.
주변정보 측정부(10)는 차량에 설치되어 전방의 물체를 측정하여 감지영상을 제공한다.
여기서 주변정보 측정부(10)는, 카메라, 레이더 및 라이다 중 어느 하나 이상을 포함할 수 있다.
이들 주변정보 측정부(10)는 차량의 전방을 촬영하여 물체를 감지하기 위해 차량의 다양한 위치에 설치될 수 있다. 따라서, 주변정보 측정부(10)에서 측정하는 좌표와 주변정보 측정부(10)에서 촬영된 영상을 헤드업 디스플레이(40)를 통해 표시할 때 헤드업 디스플레이(40)의 좌표가 서로 일치하지 않으면 물체의 위치와 실제 물체의 위치 및 크기가 틀어져 보이게 된다.
이를 방지하기 위해 제어부(30)는 주변정보 측정부(10)의 설치위치에 따른 좌표와 헤드업 디스플레이(40)의 좌표를 일치시킨다.
예를 들어, 주변정보 측정부(10)로써 카메라가 차량의 전면 하부에서 전방의 물체를 측정하게 되면 헤드업 디스플레이(40)는 차량의 중앙에서 전면 유리창에 영상을 표시하기 때문에 동일한 물체라 하더라도 각각의 좌표계를 통해 볼 때 위치가 상이하게 된다. 따라서, 제어부(30)는 동일한 좌표로 해당 물체가 표시될 수 있도록 좌표를 일치시키게 된다.
한편, 차량자세 측정부(20)는 진동센서, 가속도센서 및 자이로센서 중 어느 하나 이상을 포함하여 차량의 진동 및 자세를 측정하여 제공한다.
따라서, 제어부(30)는 차량자세 측정부(20)로부터 차량의 자세에 따른 좌표의 변화에 대해 헤드업 디스플레이(40)의 좌표를 보정할 수도 있다.
즉, 도 2에 도시된 바와 같이 월드 좌표계를 기준으로 볼 때 헤드업 디스플레이(40)의 좌표를 나타내는 HUD 좌표계와, 주변정보 측정부(10)의 좌표를 나타내는 카메라 좌표계 및 차량자세 측정부(20)의 좌표를 나타내는 자세센서 좌표계가 서로 상이하게 됨에 따라 이들 좌표계를 서로 통합하여 동일한 물체에 대해 동일한 위치에 표시될 수 있도록 좌표를 일치시킨다.
또한, 제어부(30)는 주변정보 측정부(10)의 측정 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상의 화각이 일치되도록 주변정보 측정부(10)에서 측정된 물체의 위치를 변환한다.
즉, 주변정보 측정부(10)가 전방 물체를 측정하기 위해 설치 위치에 따라 전방을 바라보는 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상의 화각이 상이할 경우, 화면에서 물체의 크기가 서로 상이하기 때문에 이를 단순히 매칭시켜 표시하게 되면 물체의 위치와 크기가 달라져 실제 물체와 영상에서의 물체가 다르게 보이게 된다.
따라서, 제어부(30)는 주변정보 측정부(10)의 측정 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상의 화각이 일치되도록 주변정보 측정부(10)에서 측정된 물체의 위치 및 크기를 변환한 후 헤드업 디스플레이(40)를 통해 표시되는 영역을 추출하여 헤드업 디스플레이(40)에 함으로써 실제 물체와 영상에서의 물체의 위치가 일치되어 표시된다.
예를 들어, 도 3에 도시된 바와 같이 주변정보 측정부(10)의 카메라를 통해 촬영된 영상(A)의 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상(B)의 화각을 일치시키기 위해 수학식 1과 같은 시점변환 매트릭스를 통해 카메라의 영상좌표를 헤드업 디스플레이(40)의 좌표로 변환한다.
Figure pat00001
여기서, 시점변환 매트릭스는 카메라의 화각과 헤드업 디스플레이의 화각에 따라 다르게 정의된다. 즉, 화각에 따라 시점변환 매트릭스를 정의함으로써 상호 좌표변환을 통해 시점을 일치시킬 수 있게 된다.
Figure pat00002
따라서, 수학식 2와 같이 카메라의 영상좌표 (x,y)에 대해 시점변환 매트릭스를 통해 헤드업 디스플레이(40)의 좌표 (x',y')로 변환하여 좌표를 일치시킬 수 있다. 이후 헤드업 디스플레이(40)를 통해 표시되는 영역(C)을 추출하여 디스플레이할 경우 실제 물체와 영상에서의 물체의 위치가 일치되어 표시된다.
상술한 바와 같이, 본 발명의 실시예에 의한 헤드업 디스플레이의 좌표 매칭 장치에 따르면, 주변정보 측정장치로부터 측정된 정보를 표시하기 위해 주변정보 측정장치의 좌표와 헤드업 디스플레이의 좌표를 일치시킬 뿐만 아니라 화각을 일치시켜 헤드업 디스플레이에 표시할 수 있도록 물체의 위치를 변환시킴으로써 실제 물체와 영상에서의 물체 간 위치와 크기가 매칭되도록 하여 이질감을 줄일 수 있다.
도 4는 본 발명의 일 실시예에 따른 헤드업 디스플레이의 좌표 매칭 방법을 설명하기 위한 흐름도이다.
도 4에 도시된 바와 같이 헤드업 디스플레이의 좌표 매칭 방법에서는 먼저, 제어부(30)가 주변정보 측정부(10)로부터 측정한 물체의 감지영상을 입력 받는다(S10).
여기서 주변정보 측정부(10)는, 카메라, 레이더 및 라이다 중 어느 하나 이상을 포함할 수 있다.
이들 주변정보 측정부(10)는 차량의 전방을 촬영하여 물체를 감지하기 위해 차량의 다양한 위치에 설치될 수 있다. 따라서, 주변정보 측정부(10)에서 측정하는 좌표와 주변정보 측정부(10)에서 촬영된 물체의 위치를 헤드업 디스플레이(40)를 통해 표시할 때 헤드업 디스플레이(40)의 좌표가 서로 일치하지 않으면 물체의 위치와 실제 물체의 위치 및 크기가 틀어져 보이게 된다.
S10 단계에서 물체의 감지영상을 입력받은 후 제어부(30)는 주변정보 측정부(10)의 설치위치에 따른 좌표와 헤드업 디스플레이(40)의 좌표를 일치시킨다(S20).
예를 들어, 주변정보 측정부(10)로써 카메라가 차량의 전면 하부에서 전방의 물체를 측정하게 되면 헤드업 디스플레이(40)는 차량의 중앙에서 전면 유리창에 영상을 표시하기 때문에, 동일한 물체라 하더라도 각각의 좌표계를 통해 볼 때 위치가 상이하게 된다. 따라서, 제어부(30)가 동일한 좌표로 해당 물체가 표시될 수 있도록 좌표를 일치시키게 된다.
또한, S20 단계에서 헤드업 디스플레이(40)의 좌표를 일치시킨 후 제어부(30)는 차량자세 측정부(20)로부터 차량의 자세에 따른 좌표의 변화를 입력 받는다(S30).
따라서, 차량의 자세에 따른 좌표의 변화가 발생할 경우 이에 대해 제어부(30)가 헤드업 디스플레이(40)의 좌표를 보정한다(S40). 이때 차량자세 측정부(10)는 진동센서, 가속도센서 및 자이로센서 중 어느 하나 이상을 포함할 수 있다.
도 2에 도시된 바와 같이 월드 좌표계를 기준으로 볼 때 헤드업 디스플레이(40)의 좌표를 나타내는 HUD 좌표계와, 주변정보 측정부(10)의 좌표를 나타내는 카메라 좌표계 및 차량자세 측정부(20)의 좌표를 나타내는 자세센서 좌표계가 서로 상이하게 됨에 따라 이들 좌표계를 서로 통합하여 동일한 물체에 대해 동일한 위치에 표시될 수 있도록 좌표를 일치시킨다.
S40 단계를 통해 좌표를 일치시킨 후 제어부(30)는 주변정보 측정부(10)의 측정 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상의 화각이 일치되도록 주변정보 측정부(10)에서 측정된 물체의 위치를 변환한다(S50).
즉, 주변정보 측정부(10)가 전방 물체를 측정하기 위해 설치 위치에 따라 전방을 바라보는 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상의 화각이 상이할 경우, 화면에서 물체의 크기가 서로 상이하기 때문에 이를 단순히 매칭시켜 표시하게 되면 물체의 위치와 크기가 달라져 실제 물체와 영상에서의 물체가 다르게 보이게 된다.
따라서, 도 3에 도시된 바와 같이 주변정보 측정부(10)의 카메라를 통해 촬영된 영상(A)의 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상(B)의 화각을 일치시키기 위해 수학식 3과 같은 시점변환 매트릭스를 통해 카메라의 영상좌표를 헤드업 디스플레이(40)의 좌표로 변환한다.
Figure pat00003
여기서, 시점변환 매트릭스는 카메라의 화각과 헤드업 디스플레이의 화각에 따라 다르게 정의된다. 즉, 화각에 따라 시점변환 매트릭스를 정의함으로써 상호 좌표변환을 통해 시점을 일치시킬 수 있게 된다.
S50 단계에서 제어부(30)는 주변정보 측정부(10)의 측정 화각과 헤드업 디스플레이(40)를 통해 표시되는 영상의 화각이 일치되도록 주변정보 측정부(10)에서 측정된 물체의 위치를 수학식 4와 같이 시점변환 매트릭스를 통해 변환한 후 헤드업 디스플레이(40)를 통해 표시되는 영역(C)을 추출하여 디스플레이할 경우 실제 물체와 영상에서의 물체의 위치가 일치되어 표시된다.
Figure pat00004
즉, 카메라의 영상좌표 (x,y)에 대해 시점변환 매트릭스를 통해 헤드업 디스플레이(40)의 좌표 (x',y')로 변환하여 좌표를 일치시킬 수 있다.
상술한 바와 같이, 본 발명의 실시예에 의한 헤드업 디스플레이의 좌표 매칭 방법에 따르면, 주변정보 측정장치로부터 측정된 정보를 표시하기 위해 주변정보 측정장치의 좌표와 헤드업 디스플레이의 좌표를 일치시킬 뿐만 아니라 화각을 일치시켜 헤드업 디스플레이에 표시할 수 있도록 영상을 변환시킴으로써 실제 물체와 영상에서의 물체 간 위치와 크기가 매칭되도록 하여 이질감을 줄일 수 있다.
본 발명은 도면에 도시된 실시예를 참고로 하여 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술이 속하는 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다.
따라서 본 발명의 진정한 기술적 보호범위는 아래의 특허청구범위에 의해서 정하여져야 할 것이다.
10 : 주변정보 측정부 20 : 차량자세 측정부
30 : 제어부 40 : 헤드업 디스플레이

Claims (12)

  1. 차량의 전면 유리창에 영상을 디스플레이하는 헤드업 디스플레이;
    상기 차량에 설치되어 전방의 물체를 측정하는 주변정보 측정부; 및
    상기 주변정보 측정부의 설치위치에 따른 좌표와 상기 헤드업 디스플레이의 좌표를 일치시켜 상기 주변정보 측정부에서 측정된 물체의 위치를 상기 헤드업 디스플레이의 좌표에 매칭시켜 상기 헤드업 디스플레이에 표시하는 제어부;를 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 장치.
  2. 제 1항에 있어서, 상기 차량의 진동 및 자세를 측정하는 차량자세 측정부를 더 포함하며, 상기 제어부는 상기 차량의 자세에 따른 좌표의 변화에 대해 상기 헤드업 디스플레이의 좌표를 보정하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 장치.
  3. 제 2항에 있어서, 상기 차량자세 측정부는, 진동센서, 가속도센서 및 자이로센서 중 어느 하나 이상을 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 장치.
  4. 제 1항에 있어서, 상기 주변정보 측정부는, 카메라, 레이더 및 라이다 중 어느 하나 이상을 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 장치.
  5. 제 1항에 있어서, 상기 제어부는, 상기 주변정보 측정부의 측정 화각과 상기 헤드업 디스플레이를 통해 표시되는 영상의 화각이 일치되도록 상기 주변정보 측정부에서 측정된 상기 물체의 위치를 변환하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 장치.
  6. 제 1항에 있어서, 상기 제어부는, 상기 주변정보 측정부의 설치위치에 따른 좌표와 상기 헤드업 디스플레이의 좌표를 일치시키기 위한 시점변환 매트릭스를 통해 상기 주변정보 측정부에서 측정된 물체의 위치를 상기 헤드업 디스플레이의 좌표에 매칭시키는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 장치.
  7. 제어부가 주변정보 측정부로부터 측정한 물체의 감지영상을 입력 받는 단계;
    상기 제어부가 상기 주변정보 측정부의 설치위치에 따른 좌표와 헤드업 디스플레이의 좌표를 일치시키는 단계; 및
    상기 제어부가 상기 물체의 위치를 상기 헤드업 디스플레이의 좌표에 매칭시켜 상기 헤드업 디스플레이에 표시하는 단계;를 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 방법.
  8. 제 7항에 있어서, 상기 헤드업 디스플레이의 좌표와 일치시키는 단계는, 상기 제어부가 차량자세 측정부로부터 차량자세에 따른 좌표의 변화가 입력될 경우 상기 헤드업 디스플레이의 좌표를 보정하는 단계를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 방법.
  9. 제 8항에 있어서, 상기 차량자세 측정부는, 진동센서, 가속도센서 및 자이로센서 중 어느 하나 이상을 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 방법.
  10. 제 7항에 있어서, 상기 제어부가 상기 주변정보 측정부의 측정 화각과 상기 헤드업 디스플레이를 통해 표시되는 영상의 화각이 일치되도록 상기 주변정보 측정부에서 측정된 상기 물체의 위치를 변환하는 단계를 더 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 방법.
  11. 제 7항에 있어서, 상기 물체의 위치를 상기 헤드업 디스플레이의 좌표에 매칭시켜 상기 헤드업 디스플레이에 표시하는 단계는, 상기 제어부가 상기 주변정보 측정부의 설치위치에 따른 좌표와 상기 헤드업 디스플레이의 좌표를 일치시키기 위한 시점변환 매트릭스를 통해 상기 주변정보 측정부에서 측정된 상기 물체의 위치를 상기 헤드업 디스플레이의 좌표로 매칭시키는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 방법.
  12. 제 7항에 있어서, 상기 주변정보 측정부는, 카메라, 레이더 및 라이다 중 어느 하나 이상을 포함하는 것을 특징으로 하는 헤드업 디스플레이의 좌표 매칭 방법.
KR1020180021886A 2018-02-23 2018-02-23 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법 KR20180026418A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020180021886A KR20180026418A (ko) 2018-02-23 2018-02-23 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180021886A KR20180026418A (ko) 2018-02-23 2018-02-23 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
KR1020150164758A Division KR20170060652A (ko) 2015-11-24 2015-11-24 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20180026418A true KR20180026418A (ko) 2018-03-12

Family

ID=61729178

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180021886A KR20180026418A (ko) 2018-02-23 2018-02-23 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법

Country Status (1)

Country Link
KR (1) KR20180026418A (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11391956B2 (en) 2019-12-30 2022-07-19 Samsung Electronics Co., Ltd. Method and apparatus for providing augmented reality (AR) object to user

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11391956B2 (en) 2019-12-30 2022-07-19 Samsung Electronics Co., Ltd. Method and apparatus for providing augmented reality (AR) object to user

Similar Documents

Publication Publication Date Title
KR20170060652A (ko) 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법
US11241960B2 (en) Head up display apparatus and display control method thereof
CN107554425B (zh) 一种增强现实车载平视显示器ar-hud
US10510276B1 (en) Apparatus and method for controlling a display of a vehicle
US20200012097A1 (en) Head-up display device, display control method, and control program
US10183621B2 (en) Vehicular image processing apparatus and vehicular image processing system
JP6968676B2 (ja) 車両用表示装置
US20130194110A1 (en) Automotive augmented reality head-up display apparatus and method
US10789744B2 (en) Method and apparatus for augmented reality display on vehicle windscreen
JP2017188744A (ja) 車両用周辺監視装置
US11325470B2 (en) Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a transportation vehicle
US10453173B2 (en) Panel transform
US20220326028A1 (en) Method and system of vehicle driving assistance
CN112242009A (zh) 显示效果融合方法、***、存储介质及主控单元
WO2021020145A1 (ja) 表示制御装置
KR20120066472A (ko) 전방 물체를 이용한 증강 현실 출력 장치 및 방법
KR101826627B1 (ko) 헤드업 디스플레이를 이용한 안전 운전정보 표시장치 및 그 제어방법
KR102020629B1 (ko) 증강 현실을 이용하여 헤드업 디스플레이 향상 방법 및 시스템
KR20180026418A (ko) 헤드업 디스플레이의 좌표 매칭 장치 및 그 방법
CN210139817U (zh) 汽车增强现实显示***及汽车
KR101835409B1 (ko) 헤드업 디스플레이의 제어 장치 및 그 방법
KR101767432B1 (ko) 헤드업 디스플레이를 이용한 전방 차량 표시장치 및 그 방법
KR101767433B1 (ko) 헤드업 디스플레이의 영상 매칭 장치 및 그 방법
JP2019081480A (ja) ヘッドアップディスプレイ装置
US20240208415A1 (en) Display control device and display control method

Legal Events

Date Code Title Description
A107 Divisional application of patent
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X601 Decision of rejection after re-examination