KR20140004412A - System of head up display using augmented reality and method for providing information of head up display using augmented reality - Google Patents
System of head up display using augmented reality and method for providing information of head up display using augmented reality Download PDFInfo
- Publication number
- KR20140004412A KR20140004412A KR1020120071926A KR20120071926A KR20140004412A KR 20140004412 A KR20140004412 A KR 20140004412A KR 1020120071926 A KR1020120071926 A KR 1020120071926A KR 20120071926 A KR20120071926 A KR 20120071926A KR 20140004412 A KR20140004412 A KR 20140004412A
- Authority
- KR
- South Korea
- Prior art keywords
- information
- vehicle
- augmented reality
- mobile communication
- head
- Prior art date
Links
- 230000003190 augmentative effect Effects 0.000 title claims abstract description 79
- 238000000034 method Methods 0.000 title claims abstract description 9
- 238000010295 mobile communication Methods 0.000 claims abstract description 51
- QVGXLLKOCUKJST-UHFFFAOYSA-N atomic oxygen Chemical compound [O] QVGXLLKOCUKJST-UHFFFAOYSA-N 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 239000001301 oxygen Substances 0.000 description 3
- 229910052760 oxygen Inorganic materials 0.000 description 3
- 239000000446 fuel Substances 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 239000002826 coolant Substances 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000007789 gas Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000002347 injection Methods 0.000 description 1
- 239000007924 injection Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B27/0103—Head-up displays characterised by optical features comprising holographic elements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
- G06Q50/40—Business processes related to the transportation industry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G1/00—Traffic control systems for road vehicles
- G08G1/09—Arrangements for giving variable traffic instructions
- G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
- G08G1/0968—Systems involving transmission of navigation instructions to the vehicle
- G08G1/096877—Systems involving transmission of navigation instructions to the vehicle where the input to the navigation device is provided by a suitable I/O arrangement
- G08G1/096883—Systems involving transmission of navigation instructions to the vehicle where the input to the navigation device is provided by a suitable I/O arrangement where input information is obtained using a mobile device, e.g. a mobile phone, a PDA
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Combustion & Propulsion (AREA)
- Health & Medical Sciences (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Chemical & Material Sciences (AREA)
- Computer Graphics (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Optics & Photonics (AREA)
- Software Systems (AREA)
- Economics (AREA)
- General Health & Medical Sciences (AREA)
- Human Resources & Organizations (AREA)
- Marketing (AREA)
- Primary Health Care (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- General Business, Economics & Management (AREA)
- Traffic Control Systems (AREA)
- Instrument Panels (AREA)
Abstract
Description
본 발명은 증강현실 헤드 업 디스플레이 시스템 및 증강현실을 이용한 헤드 업 디스플레이 정보 제공 방법에 관한 것이다. 보다 상세하게는, 본 발명은 차량의 각종 장치에서 수집된 정보를 이동통신 단말의 무선 이동통신을 이용하여 증강현실 서버와 연동하여 운전자에게 실시간 증강현실 운행정보를 제공하는 증강현실 헤드 업 디스플레이 시스템 및 증강현실을 이용한 헤드 업 디스플레이 정보 제공 방법에 관한 것이다.The present invention relates to an augmented reality head up display system and a method for providing head up display information using augmented reality. More specifically, the present invention provides an augmented reality head-up display system for providing the driver with real-time augmented reality driving information in connection with the augmented reality server using the information collected from the various devices of the vehicle wireless communication of the mobile terminal; The present invention relates to a head up display information providing method using augmented reality.
헤드 업 디스플레이(Head Up Displays)는 차량의 운행 정보가 차량의 전면 유리에 표시되도록 설계된 전방 표시 장치이다. 처음에는 비행기에서 조종사의 전방 시야를 확보하기 위하여 도입되었으나, 최근에는 차량에서도 주행 정보 제공이나 운전자가 운전 중 고개를 숙임으로써 발생하는 사고 감소 등의 목적을 위하여 도입되고 있다.Head Up Displays are front display devices designed to display vehicle driving information on the vehicle's windshield. Initially, the aircraft was introduced to secure a forward view of the pilot, but recently, the vehicle has been introduced for the purpose of providing driving information and reducing accidents caused by the driver's bow while driving.
현재 차량에 도입된 헤드 업 디스플레이는 몇 가지의 단순한 정보만을 제시하며, 무선 이동통신을 이용하는 경우도 드물다.The head-up displays currently introduced in vehicles present only a few simple pieces of information and rarely use wireless mobile communications.
또한, 무선 이동통신을 이용하는 경우에도 차량에 별도의 무선 이동통신 장치를 추가로 장착해야 하는 문제가 존재한다.In addition, even when using wireless mobile communication, there is a problem in that an additional wireless mobile communication device must be additionally installed in a vehicle.
본 발명은 상기한 문제점을 해결하기 위하여 안출된 것으로서, 차량의 각종 장치에서 수집된 정보를 이동통신 단말의 무선 이동통신을 이용하여 증강현실 서버와 연동하여 운전자에게 실시간 증강현실 운행정보를 제공하는 증강현실 헤드 업 디스플레이 시스템을 제공하는 것을 목적으로 한다.The present invention has been made to solve the above problems, the augmented to provide real-time augmented reality driving information to the driver in conjunction with the augmented reality server using the information collected from the various devices of the vehicle wireless communication of the mobile communication terminal It is an object to provide a realistic head-up display system.
상기한 문제점을 해결하기 위한 증강현실 헤드 업 디스플레이 시스템은 차량에 연결되어 상기 차량의 상태정보, 상기 차량의 운행 정보 또는 상기 차량 주변에 관한 정보 중 적어도 어느 하나를 획득하는 정보획득장치; 상기 획득된 정보를 이동통신 단말의 무선 이동통신을 이용하여 전송 받으며, 상기 전송받은 획득된 정보를 이용하여 상기 증강현실을 이용하여 증강현실화된 차량의 상태정보 또는 증강현실화된 상기 차량의 운행과 관련된 정보를 생성하는 증강현실 서버; 및 상기 생성된 정보를 상기 이동통신 단말의 무선 이동통신을 이용하여 전송받고, 상기 전송받은 생성된 정보를 상기 차량의 전면에 출력하는 헤드 업 디스플레이(HUD, Head UP Display) 장치를 포함할 수 있다.An augmented reality head-up display system for solving the above problems is an information acquisition device connected to a vehicle to obtain at least one of the state information of the vehicle, the driving information of the vehicle or the information about the vehicle surroundings; The obtained information is transmitted using wireless mobile communication of a mobile communication terminal, and the state information of the augmented reality vehicle or the operation of the augmented reality vehicle using the augmented reality using the received information is transmitted. Augmented reality server for generating information; And a head up display (HUD) device for receiving the generated information by using wireless mobile communication of the mobile communication terminal and outputting the generated generated information to the front of the vehicle. .
바람직하게는 상기 정보 획득장치는 차량의 카메라, 차량의 위성항법장치, 차량의 네비게이션, 차량의 각종 센서, 차량의 계기판, 차량의 상태정보 수집장치 또는 차량의 블랙박스 중 적어도 어느 하나일 수 있다.Preferably, the information acquisition device may be at least one of a camera of a vehicle, a satellite navigation apparatus of a vehicle, a navigation of a vehicle, various sensors of a vehicle, a dashboard of a vehicle, a state information collection apparatus of a vehicle, or a black box of a vehicle.
상기한 문제점을 해결하기 위한 증강현실을 이용한 헤드 업 디스플레이 정보 제공 방법은 차량에 연결되어 상기 차량의 상태정보, 상기 차량의 운행 정보 또는 상기 차량 주변에 관한 정보 중 적어도 어느 하나를 획득하는 정보획득단계; 상기 획득된 정보를 이동통신 단말의 무선 이동통신을 이용하여 전송받으며, 상기 전송받은 획득된 정보를 이용하여 상기 증강현실을 이용하여 증강현실화된 차량의 상태정보 또는 증강현실화된 상기 차량의 운행과 관련된 정보를 생성하는 증강현실정보 생성단계; 및 상기 생성된 정보를 상기 이동통신 단말의 무선 이동통신을 이용하여 전송받고, 상기 전송받은 생성된 정보를 상기 차량의 전면에 출력하는 HUD단계를 포함할 수 있다.In the method for providing head-up display information using augmented reality for solving the above problem, an information acquisition step of obtaining at least one of state information of the vehicle, driving information of the vehicle, and information about the surroundings of the vehicle is connected to a vehicle. ; The obtained information is transmitted using wireless mobile communication of a mobile communication terminal, and the state information of the augmented reality vehicle or the operation of the augmented reality vehicle using the augmented reality using the received obtained information. Augmented reality information generating step of generating information; And a HUD step of receiving the generated information by using wireless mobile communication of the mobile communication terminal and outputting the received generated information to the front of the vehicle.
본 발명은 차량의 각종 장치에서 수집된 다양한 정보를 이용하여 증강현실 운행정보를 제공함으로써 운전자에게 안전하고 편리한 운전을 할 수 있도록 보조한다.The present invention assists the driver in driving safely and conveniently by providing augmented reality driving information using various information collected from various devices of the vehicle.
또한, 본 발명은 운전자의 이동통신 단말을 이용하여 차량에서 수집된 정보와 증강현실 서버를 연결함으로써, 무선 이동통신을 위한 추가적인 장비가 필요없는 장점이 존재한다.In addition, the present invention has the advantage that no additional equipment for wireless mobile communication by connecting the information collected in the vehicle and augmented reality server using the driver's mobile communication terminal.
도 1은 본 발명의 바람직한 실시예에 따른 증강현실 헤드 업 디스플레이 시스템에 관한 블록도이다.
도 2는 본 발명에 따른 증강현실 헤드 업 디스플레이 시스템을 이용하여 다양한 정보를 운전자에게 제공하고 있는 모습의 일 예를 나타내는 예시도이다.
도 3은 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 헤드 업 디스플레이 정보 제공 방법에 관한 흐름도이다.1 is a block diagram of an augmented reality head up display system according to a preferred embodiment of the present invention.
Figure 2 is an exemplary view showing an example of the appearance of providing a variety of information to the driver using the augmented reality head-up display system according to the present invention.
3 is a flowchart illustrating a method for providing head-up display information using augmented reality according to a preferred embodiment of the present invention.
이하에서는 도면을 참조하여 본 발명의 바람직한 실시예들을 상세히 설명한다. 이하의 설명 및 첨부된 도면들에서 실질적으로 동일한 구성요소들은 각각 동일한 부호들로 나타냄으로써 중복 설명을 생략하기로 한다. 또한 본 발명을 설명함에 있어 관련된 공지기능 혹은 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그에 대한 상세한 설명은 생략하기로 한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the drawings. In the following description and the accompanying drawings, substantially the same components are denoted by the same reference numerals, respectively, and redundant description will be omitted. In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear.
어떤 구성요소가 다른 구성요소에 “연결되어”있다거나 “접속되어”있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 “직접 연결되어”있다거나 “직접 접속되어”있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.It is to be understood that when an element is referred to as being "connected" or "connected" to another element, it may be directly connected or connected to the other element, . On the other hand, when an element is referred to as being "directly connected" or "directly connected" to another element, it should be understood that there are no other elements in between.
본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함될 수 있다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성요소, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.In this specification, a singular form may include plural forms unless specifically stated in the phrase. It is noted that the terms "comprises" and / or "comprising" used in the specification are intended to be inclusive in a manner similar to the components, steps, operations, and / Or additions.
본 발명에 따른 증강현실 헤드 업 디스플레이 시스템은 차량의 카메라, 차량의 위성항법장치(GPS, Global Positioning System) 차량의 센서 등의 차량의 상태나 운행정보 등의 정보를 수집하는 차량의 각종 장치에서 수집된 정보를 스마트폰 등의 이동통신 단말의 무선 이동통신을 이용하여 증강현실 서버로 전송하고, 전송된 정보를 증강현실화 하여 헤드 업 디스플레이를 이용하여 운전자에게 정보를 제공하는 발명이다.The augmented reality head-up display system according to the present invention is collected from various devices of the vehicle to collect information such as the vehicle status and driving information, such as the camera of the vehicle, the sensor of the vehicle GPS (Global Positioning System) The present invention transmits the information to augmented reality server using wireless mobile communication of a mobile communication terminal such as a smartphone, and augments the transmitted information to provide information to a driver using a head-up display.
도 1은 본 발명의 바람직한 실시예에 따른 증강현실 헤드 업 디스플레이 시스템에 관한 블록도이다.1 is a block diagram of an augmented reality head up display system according to a preferred embodiment of the present invention.
도 1을 참조하여 증강현실 헤드 업 디스플레이 시스템에 관하여 구체적으로 설명한다.Referring to Figure 1 will be described in detail with respect to the augmented reality head-up display system.
헤드 업 디스플레이 시스템은 정보획득장치(110), 이동통신 단말(120), 증강현실 서버(130) 및 헤드 업 디스플레이(140)를 포함한다.The head up display system includes an information acquisition device 110, a mobile communication terminal 120, an augmented reality server 130, and a head up display 140.
정보획득장치(110)는 카메라(112) 및 추가정보 획득부(114)를 포함할 수 있다.The information acquisition device 110 may include a camera 112 and an additional information acquisition unit 114.
카메라(112)는 차량에 구비되어 차량의 내부 또는 외부를 촬영하여 정보를 수집하며, 추가정보 획득부(114)는 차량의 위성항법장치, 차량의 네비게이션, 차량의 각종 센서, 차량의 계기판, 차량의 블랙박스 또는 차량의 상태정보 수집장치 등 차량에 구비된 카메라(112) 이외의 정보 수집 장치가 될 수 있다. 추가정보 획득부는(114) 차량에 구비된 카메라(112) 이외의 정보 수집 장치로부터 추가적인 정보를 획득할 수 있다. 획득된 정보는 증강현실서버(130)에서 정보생성에 이용될 수 있다.The camera 112 is provided in the vehicle to collect information by photographing the inside or outside of the vehicle, and the additional information acquisition unit 114 is a satellite navigation device of the vehicle, navigation of the vehicle, various sensors of the vehicle, instrument panel of the vehicle, vehicle It may be an information collecting device other than the camera 112 provided in the vehicle, such as a black box or a state information collecting device of the vehicle. The additional information obtaining unit 114 may obtain additional information from an information collecting device other than the camera 112 provided in the vehicle. The obtained information may be used to generate information in the augmented reality server 130.
차량에 구비된 카메라(112)는 차량의 전방 또는 후방의 도로, 주변 차량 또는 주변 건물 등의 정보를 획득한다. 차량의 위성항법장치는 차량의 위치정보 또는 차량 주변 물체에 관한 위치 정보 등을 획득한다. 차량의 네비게이션은 차량의 주행정보, 도로정보 또는 주변 건물 정보 등을 획득한다.The camera 112 provided in the vehicle acquires information such as a road in front of or behind the vehicle, a nearby vehicle, or a neighboring building. The satellite navigation apparatus of the vehicle acquires the position information of the vehicle or the position information about the objects around the vehicle. Navigation of the vehicle acquires driving information, road information, or neighboring building information of the vehicle.
차량의 각종 센서는 차량이 흡입하는 공기량을 측정하는 공기 유량 센서(AFS), 차량의 흡입 공기 입구에 부착되어 흡입 공기의 온도를 측정하는 흡기온도 센서(ATS), 차량의 고도에 따른 기압차를 이용하여 연료분사량과 점화시기를 보정하는데 이용되는 대기압 센서(BPS), 냉각수의 온도를 검출하는 수온센서(WTS), 스로틀 밸브의 개도를 검출하는 스로틀 위치센서(TPS), 플런저의 위치를 검출하는 모터 포지션 센서(MPS), 배기가스 중의 산소농도와 대기중의 산소농도를 비교 검출하는 산소세서, 차량을 검지하는 차량 검지센서(Vehicle Detecting Sensor) 또는 차량의 속도를 측정하는 차량속도센서 등 차량의 상태와 주행정보를 수집하는 다양한 센서가 존재할 수 있다.Various sensors of the vehicle include an air flow sensor (AFS) that measures the amount of air sucked by the vehicle, an intake temperature sensor (ATS) attached to the intake air inlet of the vehicle to measure the temperature of the intake air, and an air pressure difference according to the altitude of the vehicle. Atmospheric pressure sensor (BPS) used to correct fuel injection and ignition timing, water temperature sensor (WTS) for detecting coolant temperature, throttle position sensor (TPS) for detecting opening of throttle valve, and position of plunger The motor position sensor (MPS), the oxygen sensor that compares the oxygen concentration in the exhaust gas with the oxygen concentration in the atmosphere, the vehicle detection sensor (Vehicle Detecting Sensor) that detects the vehicle, or the vehicle speed sensor that measures the speed of the vehicle There may be various sensors that collect status and driving information.
차량의 계기판은 차량에 저장된 연료량, 현재 속도, 각종 경고등 또는 회전수(RPM) 등 다양한 정보를 수신하여 표시한다.The instrument panel of the vehicle receives and displays various information such as the amount of fuel stored in the vehicle, the current speed, various warning lights, or the RPM.
차량의 블랙박스는 차량 외부 또는 내부의 영상이나 음성 정보 등을 수집하고 저장한다. 차량의 상태정보 수집장치는 차량의 카메라(112), 각종센서, GPS, 네비게이션, 블랙박스 외에 차량의 상태, 주행 정보 또는 차량 주변에 관한 정보 등을 수집하는 차량과 연결된 장치를 의미한다. 정보획득장치(110)는 제시한 예에 국한되는 것은 아니며, 차량과 연결되어 차량의 상태, 차량의 주행정보 또는 차량 주변에 관한 정보를 수집하는 장치는 모두 포함될 수 있다.The black box of the vehicle collects and stores video or audio information of the outside or inside of the vehicle. The state information collecting device of the vehicle refers to a device connected to the vehicle that collects the state of the vehicle, driving information, or information about the surroundings of the vehicle in addition to the camera 112 of the vehicle, various sensors, GPS, navigation, and a black box. The information acquisition device 110 is not limited to the examples presented, and may include any device connected to the vehicle to collect the state of the vehicle, driving information of the vehicle, or information about the surroundings of the vehicle.
정보획득장치(110)에서 획득된 차량의 상태, 차량의 주행정보 또는 차량 주변에 관한 정보는 차량 내부에 존재하는 이동통신 단말(120)을 이용하여 증강현실 서버(130)로 전송될 수 있다.The state of the vehicle, driving information of the vehicle, or information about the surroundings of the vehicle obtained by the information acquisition apparatus 110 may be transmitted to the augmented reality server 130 using the mobile communication terminal 120 existing in the vehicle.
차량 내부에 존재하는 이동통신 단말(120)은 무선 이통통신이 가능한 스마트폰, 태블릿 PC 등의 모바일 장치가 바람직한 예가 될 수 있다.As the mobile communication terminal 120 existing inside the vehicle, a mobile device such as a smartphone, a tablet PC, or the like capable of wireless mobile communication may be a preferable example.
차량의 운전자 또는 동승자가 소지한 스마트폰 또는 태블릿 PC의 무선 이동통신을 이용하여 정보획득장치(110)에서 획득한 정보를 증강현실 서버(130)로 전송할 수 있다.Information obtained from the information acquisition device 110 may be transmitted to the augmented reality server 130 using wireless mobile communication of a smartphone or tablet PC possessed by the driver or passenger of the vehicle.
증강현실 서버(130)는 정보획득장치(110)에서 획득된 정보를 수신하여 증강현실(AR, Augmented Reality) 기술을 이용하여 운전자의 편의성 또는 안전성을 위한 정보를 생성한다. 증강현실 기술은 공지기술인바 자세한 설명은 생략하도록 한다.The augmented reality server 130 receives the information obtained from the information acquisition device 110 and generates information for the convenience or safety of the driver by using Augmented Reality (AR) technology. Augmented reality technology is a well-known technology bar detailed description thereof will be omitted.
증강현실 서버(130)에서 생성된 정보는 차량 내부에 존재하는 이동통신 단말(120)의 무선 이동통신을 이용하여 차량의 헤드 업 디스플레이(HUD, Head Up Display)(130)로 전달된다.The information generated by the augmented reality server 130 is transmitted to the head up display (HUD) 130 of the vehicle using wireless mobile communication of the mobile communication terminal 120 existing in the vehicle.
증강현실 서버(130)에서 헤드 업 디스플레이(140)로 생성된 정보를 전송하는데 이용되는 차량 내부에 존재하는 이동통신 단말(120)은 앞서 증강현실로 정보획득장치(110)에서 획득된 정보를 제공하는데 이용된 이동통신 단말(120)과 동일하거나 상이할 수 있으나, 실시간 정보 송수신의 안정성을 위하여 동일한 단말인 것이 바람직할 것이다.The mobile communication terminal 120 existing inside the vehicle used to transmit the generated information from the augmented reality server 130 to the head-up display 140 provides information previously obtained from the information acquisition device 110 through augmented reality. Although it may be the same as or different from the mobile communication terminal 120 used, it will be preferable that the same terminal for the stability of real-time information transmission and reception.
헤드 업 디스플레이(140)는 증강현실 서버(130)에서 생성된 정보를 수신하여 운전자가 정보를 안전하고 편리하게 획득할 수 있는 위치에 정보를 표시한다. 바람직하게는 헤드 업 디스플레이(140)는 운전자의 운전 시야를 방해하지 않는 범위에서 차량 전면의 유리에 생성된 정보를 출력할 수 있다.The head-up display 140 receives the information generated by the augmented reality server 130 and displays the information in a position where the driver can safely and conveniently obtain the information. Preferably, the head-up display 140 may output the information generated on the glass in front of the vehicle in a range that does not interfere with the driver's field of view.
도 2는 본 발명에 따른 증강현실 헤드 업 디스플레이 시스템을 이용하여 다양한 정보를 운전자에게 제공하고 있는 모습의 일 예를 나타내는 예시도이다.Figure 2 is an exemplary view showing an example of the appearance of providing a variety of information to the driver using the augmented reality head-up display system according to the present invention.
도 2를 참조하면, 차량의 전면 유리에 건물의 이름 및 전화번호 주소 등의 정보가 제공되고 있으며, 전방에 존재하는 다리의 이름, 다리의 길이 및 진입 방향이 표시되고 있음을 살펴볼 수 있다. 이러한 정보는 차량의 카메라(112), 네비게이션, GPS 등에서 획득된 정보를 이용하여 증강현실 서버(130)에서 생성한 정보일 수 있다.Referring to FIG. 2, information such as a name of a building and a phone number address are provided on a windshield of a vehicle, and a name of a bridge, a length of a bridge, and a direction of entry are displayed. Such information may be information generated by the augmented reality server 130 using information obtained from a camera 112, a navigation, a GPS, or the like of the vehicle.
도 2는 본 발명에 따른 증강현실 헤드 업 디스플레이 시스템을 이용한 일 예에 불과하며, 증강현실 서버(130)에서 생성된 정보는 차량에 다양하게 표시될 수 있다.2 is only an example using the augmented reality head-up display system according to the present invention, the information generated by the augmented reality server 130 may be displayed in various ways on the vehicle.
본 발명에 따른 증강현실 헤드 업 디스플레이 시스템(100)은 차량의 각종 장치에서 수집된 다양한 정보를 이용하여 증강현실 운행정보를 제공함으로써 운전자에게 안전하고 편리한 운전을 할 수 있도록 보조한다.The augmented reality head-up display system 100 according to the present invention assists the driver in driving safely and conveniently by providing augmented reality driving information using various information collected from various devices of the vehicle.
또한, 본 발명에 따른 증강현실 헤드 업 디스플레이(140) 시스템(100)은 운전자의 이동통신 단말(120)을 이용하여 차량에서 수집된 정보와 증강현실 서버(130)를 연결함으로써, 무선 이동통신을 위한 추가적인 장비가 필요없는 장점이 존재한다.In addition, the augmented reality head-up display 140 system 100 according to the present invention by connecting the information collected from the vehicle and the augmented reality server 130 by using the driver's mobile communication terminal 120, wireless communication There is an advantage that does not require additional equipment.
도 3은 본 발명의 바람직한 실시예에 따른 증강현실을 이용한 헤드 업 디스플레이 정보 제공 방법에 관한 흐름도이다.3 is a flowchart illustrating a method for providing head-up display information using augmented reality according to a preferred embodiment of the present invention.
도 3을 참조하면, 정보획득장치(110)가 차량의 상태정보, 차량의 운행정보 또는 차량 주변에 관한 정보 중 적어도 어느 하나를 획득한다(S310 단계).Referring to FIG. 3, the information acquisition device 110 obtains at least one of state information of the vehicle, driving information of the vehicle, and information about the surroundings of the vehicle (S310).
정보획득장치(110)는 획득된 정보를 이동통신 단말(120)의 무선 이동통신을 이용하여 증강현실 서버(130)로 전송한다(S320 단계). 정보획득장치(110)에서 증강현실 서버(130)로 무선 이동통신을 이용하여 직접 획득된 정보를 전송할 수 있으며, 이동통신 단말(120)의 무선 이동통신을 이용하여 전송하기 위하여 정보획득장치(110)에서 획득된 정보가 다른 장치로 전송된 후 증강현실 서버(130)로 전송될 수도 있다.The information acquisition device 110 transmits the obtained information to the augmented reality server 130 using wireless mobile communication of the mobile communication terminal 120 (step S320). The information acquisition apparatus 110 may directly transmit information obtained by using wireless mobile communication to the augmented reality server 130, and the information acquisition apparatus 110 may be transmitted by using the wireless mobile communication of the mobile communication terminal 120. The information obtained in FIG. 1 may be transmitted to another device and then transmitted to the AR server 130.
증강현실 서버(130)는 전송된 정보를 이용하여 증강현실화된 정보를 생성한다(S330 단계). 증강현실 서버(130)에서 생성된 증강현실화된 정보는 운전자의 편의선과 안정성을 위한 정보인 것이 바람직하다.The augmented reality server 130 generates augmented reality information by using the transmitted information (step S330). The augmented reality information generated in the augmented reality server 130 is preferably information for convenience and stability of the driver.
증강현실 서버(130)는 생성된 정보를 이동통신 단말(120)의 무선 이동통신을 이용하여 헤드 업 디스플레이(140)로 전송한다(S340 단계).The augmented reality server 130 transmits the generated information to the head-up display 140 using the wireless mobile communication of the mobile communication terminal 120 (step S340).
헤드 업 디스플레이(140)는 증강현실 서버(130)로부터 수신한 생성된 정보를 차량 전면에 출력하여 운전자에게 정보를 제공한다(S350 단계).The head-up display 140 outputs the generated information received from the augmented reality server 130 to the front of the vehicle and provides the information to the driver (S350).
본 발명의 바람직한 실시예에 따른 증강현실 헤드 업 디스플레이 시스템(100)의 블록도는 발명의 원리를 구체화하는 예시적인 개념적 관점을 나타내는 것으로 이해되어야 한다. 이와 유사하게, 모든 흐름도는 컴퓨터가 판독 가능한 매체에 실질적으로 나타낼 수 있고 컴퓨터 또는 프로세서가 명백히 도시되었는지 여부를 불문하고 컴퓨터 또는 프로세서에 의해 수행되는 다양한 프로세스를 나타내는 것으로 이해되어야 한다.It is to be understood that the block diagram of the augmented reality head up display system 100 according to a preferred embodiment of the present invention represents an exemplary conceptual aspect embodying the principles of the invention. Similarly, all of the flowcharts should be understood to represent various processes that may be substantially represented on a computer-readable medium and executed by a computer or processor, whether the computer or processor is explicitly shown.
프로세서 또는 이와 유사한 개념으로 표시된 기능 블록을 포함하는 도면에 도시된 다양한 소자의 기능은 전용 하드웨어뿐만 아니라 적절한 소프트웨어와 관련하여 소프트웨어를 실행할 능력을 가진 하드웨어의 사용으로 제공될 수 있다. 프로세서에 의해 제공될 때, 상기 기능은 단일 전용 프로세서, 단일 공유 프로세서 또는 복수의 개별적 프로세서에 의해 제공될 수 있고, 이들 중 일부는 공유될 수 있다. The functionality of the various elements shown in the figures, including functional blocks represented by a processor or similar concept, can be provided by the use of dedicated hardware as well as hardware capable of executing software in association with appropriate software. When provided by a processor, the functions may be provided by a single dedicated processor, a single shared processor, or a plurality of individual processors, some of which may be shared.
또한 프로세서, 제어 또는 이와 유사한 개념으로 제시되는 용어의 명확한 사용은 소프트웨어를 실행할 능력을 가진 하드웨어를 배타적으로 인용하여 해석되어서는 아니되고, 제한 없이 디지털 신호 프로세서(DSP) 하드웨어, 소프트웨어를 저장하기 위한 롬(ROM), 램(RAM) 및 비 휘발성 메모리를 암시적으로 포함하는 것으로 이해되어야 한다. 주지관용의 다른 하드웨어도 포함될 수 있다.Also, the explicit use of terms such as processor, control, or similar concepts should not be interpreted exclusively as hardware capable of running software, and may be used without limitation as a digital signal processor (DSP) (ROM), random access memory (RAM), and non-volatile memory. Other hardware may also be included.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 다양한 수정, 변경 및 치환이 가능할 것이다. 따라서, 본 발명에 개시된 실시예 및 첨부된 도면들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시예 및 첨부된 도면에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구 범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리 범위에 포함되는 것으로 해석되어야 할 것이다.It will be apparent to those skilled in the art that various modifications, substitutions and substitutions are possible, without departing from the scope and spirit of the invention as disclosed in the accompanying claims. will be. Accordingly, the embodiments disclosed in the present invention and the accompanying drawings are not intended to limit the technical spirit of the present invention but to describe the present invention, and the scope of the technical idea of the present invention is not limited by the embodiments and the accompanying drawings. . The scope of protection of the present invention should be construed according to the following claims, and all technical ideas within the scope of equivalents should be construed as falling within the scope of the present invention.
Claims (3)
상기 획득된 정보를 이동통신 단말의 무선 이동통신을 이용하여 전송받으며, 상기 전송받은 획득된 정보를 이용하여 상기 증강현실을 이용하여 증강현실화된 차량의 상태정보 또는 증강현실화된 상기 차량의 운행과 관련된 정보를 생성하는 증강현실 서버; 및
상기 생성된 정보를 상기 이동통신 단말의 무선 이동통신을 이용하여 전송받고, 상기 전송받은 생성된 정보를 상기 차량의 전면에 출력하는 헤드 업 디스플레이(HUD, Head UP Display) 장치를 포함하는 것을 특징으로 하는 증강현실 헤드 업 디스플레이 시스템.
An information acquisition device connected to a vehicle and obtaining at least one of state information of the vehicle, driving information of the vehicle, and information about the surroundings of the vehicle;
The obtained information is transmitted using wireless mobile communication of a mobile communication terminal, and the state information of the augmented reality vehicle or the operation of the augmented reality vehicle using the augmented reality using the received obtained information. Augmented reality server for generating information; And
And a head up display (HUD) device for receiving the generated information by using wireless mobile communication of the mobile communication terminal and outputting the generated generated information to the front of the vehicle. Augmented reality head-up display system.
상기 정보 획득장치는 차량의 카메라, 차량의 위성항법장치, 차량의 네비게이션, 차량의 각종 센서, 차량의 계기판, 차량의 상태정보 수집장치 또는 차량의 블랙박스 중 적어도 어느 하나인 것을 특징으로 하는 증강현실 헤드 업 디스플레이 시스템.
The method of claim 1,
The apparatus for acquiring information is at least one of a camera of a vehicle, a satellite navigation apparatus of a vehicle, navigation of a vehicle, various sensors of a vehicle, a dashboard of a vehicle, a state information collection device of a vehicle, and a black box of a vehicle. Head-up display system.
상기 획득된 정보를 이동통신 단말의 무선 이동통신을 이용하여 전송받으며, 상기 전송받은 획득된 정보를 이용하여 상기 증강현실을 이용하여 증강현실화된 차량의 상태정보 또는 증강현실화된 상기 차량의 운행과 관련된 정보를 생성하는 증강현실정보 생성단계; 및
상기 생성된 정보를 상기 이동통신 단말의 무선 이동통신을 이용하여 전송받고, 상기 전송받은 생성된 정보를 상기 차량의 전면에 출력하는 HUD단계를 포함하는 것을 특징으로 하는 증강현실을 이용한 헤드 업 디스플레이 정보 제공 방법An information acquisition step of being connected to a vehicle and acquiring at least one of state information of the vehicle, driving information of the vehicle, and information about the surroundings of the vehicle;
The obtained information is transmitted using wireless mobile communication of a mobile communication terminal, and the state information of the augmented reality vehicle or the operation of the augmented reality vehicle using the augmented reality using the received obtained information. Augmented reality information generating step of generating information; And
And receiving the generated information by using wireless mobile communication of the mobile communication terminal, and outputting the generated generated information to the front of the vehicle. How to Provide
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120071926A KR20140004412A (en) | 2012-07-02 | 2012-07-02 | System of head up display using augmented reality and method for providing information of head up display using augmented reality |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020120071926A KR20140004412A (en) | 2012-07-02 | 2012-07-02 | System of head up display using augmented reality and method for providing information of head up display using augmented reality |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| KR20140004412A true KR20140004412A (en) | 2014-01-13 |
Family
ID=50140406
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020120071926A KR20140004412A (en) | 2012-07-02 | 2012-07-02 | System of head up display using augmented reality and method for providing information of head up display using augmented reality |
Country Status (1)
| Country | Link |
|---|---|
| KR (1) | KR20140004412A (en) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160146384A (en) * | 2015-06-12 | 2016-12-21 | 주식회사 파인디지털 | An augment reality navigation system and method of route guidance of an augment reality navigation system |
| KR102188462B1 (en) | 2020-07-16 | 2020-12-08 | 엠아이엠테크 주식회사 | Safe driving assistant system for trains using head-up display and method thereof |
| WO2021177594A1 (en) * | 2020-03-06 | 2021-09-10 | 삼성전자 주식회사 | Method and device for assisting driver in driving using ar hud |
| KR20230142183A (en) | 2022-04-01 | 2023-10-11 | (주) 브라이튼코퍼레이션 | Holographic picture generaton unit and and vehicle head-up display device having the same |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20040057691A (en) * | 2002-12-26 | 2004-07-02 | 한국전자통신연구원 | System and Method of Car Navigation using Augmented Reality |
| KR20100070973A (en) * | 2008-12-18 | 2010-06-28 | 박호철 | Head-up display navigation apparatus, system and service implementation method thereof |
| KR20110097729A (en) * | 2010-02-25 | 2011-08-31 | 주식회사 제니텀 | Method and system for providing peripheral information to mobile device |
| KR20120018690A (en) * | 2010-08-23 | 2012-03-05 | 르노삼성자동차 주식회사 | System and method of car navigation using augmentedreality |
-
2012
- 2012-07-02 KR KR1020120071926A patent/KR20140004412A/en not_active Application Discontinuation
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20040057691A (en) * | 2002-12-26 | 2004-07-02 | 한국전자통신연구원 | System and Method of Car Navigation using Augmented Reality |
| KR20100070973A (en) * | 2008-12-18 | 2010-06-28 | 박호철 | Head-up display navigation apparatus, system and service implementation method thereof |
| KR20110097729A (en) * | 2010-02-25 | 2011-08-31 | 주식회사 제니텀 | Method and system for providing peripheral information to mobile device |
| KR20120018690A (en) * | 2010-08-23 | 2012-03-05 | 르노삼성자동차 주식회사 | System and method of car navigation using augmentedreality |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20160146384A (en) * | 2015-06-12 | 2016-12-21 | 주식회사 파인디지털 | An augment reality navigation system and method of route guidance of an augment reality navigation system |
| WO2021177594A1 (en) * | 2020-03-06 | 2021-09-10 | 삼성전자 주식회사 | Method and device for assisting driver in driving using ar hud |
| KR102188462B1 (en) | 2020-07-16 | 2020-12-08 | 엠아이엠테크 주식회사 | Safe driving assistant system for trains using head-up display and method thereof |
| KR20230142183A (en) | 2022-04-01 | 2023-10-11 | (주) 브라이튼코퍼레이션 | Holographic picture generaton unit and and vehicle head-up display device having the same |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111161008B (en) | AR/VR/MR ride sharing assistant | |
| KR100721560B1 (en) | System and method for provision of 3-dimensional car information with arbitrary viewpoint | |
| KR20180039924A (en) | Method for providing visual guarantee image to vehicle, electric apparatus and computer readable recording medium therefor | |
| US20140203923A1 (en) | Display apparatus, illumination apparatus and vehicle having projector device | |
| JP2007257286A (en) | Display system for vehicle | |
| WO2013140557A1 (en) | Navigation system | |
| US20230016775A1 (en) | Vehicular scalable security system | |
| EP3499876A1 (en) | Vehicular display control device and vehicle driving assistance system | |
| JP2014201197A (en) | Head-up display apparatus | |
| KR20140004412A (en) | System of head up display using augmented reality and method for providing information of head up display using augmented reality | |
| JP6750531B2 (en) | Display control device and display control program | |
| WO2016051447A1 (en) | Information display control system and information display control method | |
| WO2017033424A1 (en) | Sign recognition and display device | |
| WO2017219885A1 (en) | Electronic map processing method, device and system | |
| JP2002367080A (en) | Method and device for visual support for vehicle | |
| KR20160065724A (en) | Electronic apparatus, control method of electronic apparatus, computer program and computer readable recording medium | |
| JP4858212B2 (en) | Car navigation system | |
| KR101430881B1 (en) | Camera equipped with the operating state of the vehicle monitoring device for monitoring vehicle | |
| US8666655B2 (en) | Systems and methods for navigation | |
| CN105774657B (en) | Single-camera panoramic reverse image system | |
| JP6186905B2 (en) | In-vehicle display device and program | |
| KR101595700B1 (en) | Digital tachogragh | |
| JP2018032986A (en) | Information processing device and method, vehicle, and information processing system | |
| KR102020629B1 (en) | Method of improving Head Up Display using augmented reality and the system thereof | |
| KR20160065723A (en) | Electronic apparatus, control method of electronic apparatus, computer program and computer readable recording medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| E902 | Notification of reason for refusal | ||
| E601 | Decision to refuse application |