KR102403915B1 - 멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기 - Google Patents

멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기 Download PDF

Info

Publication number
KR102403915B1
KR102403915B1 KR1020207011994A KR20207011994A KR102403915B1 KR 102403915 B1 KR102403915 B1 KR 102403915B1 KR 1020207011994 A KR1020207011994 A KR 1020207011994A KR 20207011994 A KR20207011994 A KR 20207011994A KR 102403915 B1 KR102403915 B1 KR 102403915B1
Authority
KR
South Korea
Prior art keywords
vehicle
data glasses
virtual
scene
data
Prior art date
Application number
KR1020207011994A
Other languages
English (en)
Other versions
KR20200062266A (ko
Inventor
다니엘 프로펜디네르
Original Assignee
아우디 아게
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 아우디 아게 filed Critical 아우디 아게
Publication of KR20200062266A publication Critical patent/KR20200062266A/ko
Application granted granted Critical
Publication of KR102403915B1 publication Critical patent/KR102403915B1/ko

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A63F13/21—Input arrangements for video game devices characterised by their sensors, purposes or types
    • A63F13/213—Input arrangements for video game devices characterised by their sensors, purposes or types comprising photodetecting means, e.g. cameras, photodiodes or infrared cells
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3602—Input other than that of destination using image analysis, e.g. detection of road signs, lanes, buildings, real preceding vehicles using a camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02—Viewing or reading apparatus
    • G02B27/022—Viewing apparatus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/194—Transmission of image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80—Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M21/00—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis
    • A61M2021/0005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus
    • A61M2021/0044—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense
    • A61M2021/005—Other devices or methods to cause a change in the state of consciousness; Devices for producing or ending sleep by mechanical, optical, or acoustical means, e.g. for hypnosis by the use of a particular sense, or stimulus by the sight sense images, e.g. video
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/33—Controlling, regulating or measuring
    • A61M2205/332—Force measuring means
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3546—Range
    • A61M2205/3569—Range sublocal, e.g. between console and disposable
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/35—Communication
    • A61M2205/3576—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver
    • A61M2205/3592—Communication with non implanted data transmission devices, e.g. using external transmitter or receiver using telemetric means, e.g. radio or optical transmission
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/50—General characteristics of the apparatus with microprocessors or computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61M—DEVICES FOR INTRODUCING MEDIA INTO, OR ONTO, THE BODY; DEVICES FOR TRANSDUCING BODY MEDIA OR FOR TAKING MEDIA FROM THE BODY; DEVICES FOR PRODUCING OR ENDING SLEEP OR STUPOR
    • A61M2205/00—General characteristics of the apparatus
    • A61M2205/50—General characteristics of the apparatus with microprocessors or computers
    • A61M2205/502—User interfaces, e.g. screens or keyboards
    • A61M2205/507—Head Mounted Displays [HMD]
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/80—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game specially adapted for executing a specific type of game
    • A63F2300/8082—Virtual reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0183—Adaptation to parameters characterising the motion of the vehicle
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Hematology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Anesthesiology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Biomedical Technology (AREA)
  • Computer Hardware Design (AREA)
  • Psychology (AREA)
  • Computer Graphics (AREA)
  • Acoustics & Sound (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Automation & Control Theory (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 멀미를 겪지 않고 차량에서 디지털 콘텐츠를 볼 수 있게 하는 시스템에 관한 것이다. 상기 시스템은 제어 유닛 및 상기 제어 유닛에 연결된 복수의 센서를 갖는 차량과, 디지털 콘텐츠를 통합한 가상 3D 장면을 표현하기 위한 증강 현실 안경을 포함하며, 상기 안경은 제어 유닛에 무선으로 연결될 수 있다.

Description

멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기
본 발명은 멀미를 겪지 않고 차량에서 디지털 콘텐츠를 보기 위한 시스템에 관한 것으로서, 상기 시스템은 제어 유닛 및 이러한 제어 유닛에 연결되는 복수의 센서를 구비하는 차량과, 디지털 콘텐츠를 통합한 가상 3D 장면을 표현하기 위해 제어 유닛에 무선으로 연결될 수 있는 데이터 안경(헤드 마운트 디바이스)(HMD)을 포함한다.
차량의 탑승자는 주행 중에 상이한 가속도에 노출된다. 가속도에는, 한편으로는, 가속 또는 제동에 의해 발생하여 차량의 이동 방향으로 작용하는 차량의 선형 가속도(종가속도)가 포함된다. 다른 한편으로는, 탑승자는 회전 가속도(횡가속도)를 경험하는데, 이 회전 가속도는 차량의 주행 방향에 대한 회전축의 공간적 배향에 따라, 피치(주행 방향에 대해 수평 및 수직인 회전축), 롤링(주행 방향과 평행한 회전축) 또는 요잉(주행 방향에 대해 직각 및 수직인 회전축)으로 지칭된다. 회전 가속도는 조향 및 지면의 토폴로지에 의해 직접적으로 발생하며, 위에서 언급된 모든 직접 가속도에 대한 스프링 반응으로 간접적으로 발생한다.
차량 탑승자는, 자신에게 눈(시각)을 통해 전달되는 위치, 배향 및 가속도에 대한 시각적 인식이 전정 기관(vestibular apparatus)(균형 감각)을 통해 전달되는 동일한 크기의 인식과 일치하지 않으면, 차량 내에서 주행 중에 현기증, 두통, 심박수 증가, 메스꺼움 또는 구토(멀미)에 시달리게 될 수 있다.
이러한 불일치는 예를 들어 주행 중에 책을 읽거나 또는 스마트 폰 또는 태블릿과 같은 모바일 단말기에서 디지털 콘텐츠를 보고 있는 차량 내의 탑승자에 대해 발생할 수 있다. 이 경우, 탑승자는 가능한 한 잠잠히 유지되는 책의 페이지 또는 가능한 한 잠자히 유지되는 모바일 단말기의 디스플레이를 하강된 시선으로 고정시키는 한편, 그의 균형 감각은 주행으로 인한 차량의 가속도에 의해 지속적으로 자극된다. 그러나, 책을 읽지 않거나 또는 모바일 단말기의 디스플레이를 보지는 않지만 차량의 주변에 대한 시각적 인식이 제한되거나 또는 방해되는 탑승자 - 예를 들어 차량 내에서 후방에 앉아 있는 탑승자의 전방을 향한 자유 시야는 전방 차량 시트 및 머리 받침대를 통해 부분적으로 차단될 수 있음 - 는 멀미의 영향을 받을 수 있다.
US 2006/0015000 A1은 차량의 후방에 앉아 있는 탑승자를 멀미로부터 보호하기 위한 차량을 위한 시스템, 방법 및 장치를 개시하고 있다. 상기 시스템은 차량에 연결되고 전방을 향하는 외부 카메라, 및 차량의 전방 머리 받침대의 후방 측면에 부착되고 후방에 앉아 있는 탑승자의 시야에 배치되는 디스플레이 유닛을 포함한다. 디스플레이 유닛은 외부 카메라에 의해 기록된 비디오 스트림을 계속해서 탑승자에게 보이게 할 수 있게 한다. 이 경우, 외부 카메라에 의해 기록되는 차량 전방의 주변 영역은 항상 차량의 공간 위치 및 배향에 직접 의존하여, 실시간으로 주행 중에 발생하는 모든 가속도를 반영하므로, 후방 시트에 앉아 있는 탑승자에 대한 멀미의 위험이 감소되거나 또는 제거될 수 있다. 비디오 스트림은 또한 디스플레이 유닛에 의해 전경에 표현되는 정적 텍스트의 배경으로서 기능할 수 있다. 이 경우, 후방에 앉아 있는 탑승자는 동시에 텍스트를 읽고, 전정 가속도 인식과 일치하는 시각적 자극을 받을 수 있다.
그러나, 이러한 해결 방법에서는, 후방에 앉아 있는 탑승자의 시선 방향은 디스플레이 유닛의 위치에 의해 미리 결정된다. 일반적으로 머리가 경사진 상태로 읽는 책과는 달리, 이러한 읽기는 직선으로 지향된 시선으로 수행되고, 이에 의해 탑승자는 차량 또는 차량의 주변으로부터의 자극에 의해 쉽게 산만해질 수 있다. 또한, 이러한 해결 방안은, 전방에 앉아 있는 탑승자에 대해 디스플레이 유닛을 그에 상응하게 부착하는 것이 어렵기 때문에, 주로 후방에 앉아 있는 탑승자에게 적합하다. 그러나, 이러한 단점은 회피될 수 있다.
예를 들어, US 2016/238852 A1 및 US 2017/227765 A1은 각각 차량에서의 디스플레이 유닛으로서 적합한 데이터 안경(헤드 마운트 디바이스)(HMD)을 개시하고 있다.
예를 들어, DE 10 2014 019 579 A1은 차량에서 디스플레이 유닛을 작동시키기 위한 시스템을 개시하고 있다. 디스플레이 유닛은 데이터 안경으로서 설계될 수 있고, 데이터 안경을 착용한 차량의 탑승자에게 판독을 위한 텍스트를 보이게 할 수 있다. 차량은 차량의 이동 정보를 검출하기 위한 복수의 센서를 갖는다. 디스플레이 유닛은 이동 정보를 수신하고 텍스트를 위한 방해받지 않는 배경을 표현하도록 구성되며, 이러한 배경은 수신된 이동 정보에 따라 실시간으로 차량의 가속도에 일치하도록 계산된다. 이러한 방식으로, 텍스트를 읽는 동안 데이터 안경의 착용자에 대해 멀미의 위험이 감소된다.
유사한 시스템이 US 2014/362113 A1, DE 10 2014 019579, 및 DE 101 56 219 C1에 설명되어 있다.
한편, DE 101 56 219 C1은 차량에서 동화상을 볼 때 멀미를 감소시키기 위한 방법을 개시하고 있다. 상기 방법에 적합한 장치는 6 개의 가속도 센서, 위치/배향 센서[6DOF 트래커(Six Degress Of Freedom Tracker)] 및 선택적인 미니 카메라를 구비하고 탑승자의 머리에 부착되는 디스플레이 유닛(헤드 마운트 디바이스)(Head Mounted Device)(HMD)을 포함한다. 디스플레이 유닛은 차량에서 디스플레이 유닛과 별도로 배열되는 컴퓨터에 무선으로 또는 케이블에 의해 연결된다. 컴퓨터는 DVD(Digital Versatile Disc), 비디오, VR 적용(Virtual Reality) 또는 AR 적용(Augmented Reality)의 데이터를 재생하고, 이를 디스플레이 유닛의 센서의 신호에 따라 연산적으로 변환하여, 디스플레이 유닛 상에 출력하여, 디스플레이 유닛의 착용자의 시각적 인식이 그의 전정 인식과 일치하도록 구성된다.
이러한 방법은 컴퓨터로부터 디스플레이 유닛으로 동화상 스트림을 전송하기 위해 높은 대역폭을 요구한다. 디스플레이 유닛이 케이블을 통해 컴퓨터에 연결되면, 충분한 대역폭은 문제없이 구현될 수 있다. 그러나, 케이블로 인해 이러한 변형예에는 디스플레이 유닛을 취급하기가 어렵다. 한편, 무선 연결의 경우에는, 간단한 취급은 문제가 되지 않지만, 그러나 고해상도 및 높은 이미지 변화율의 경우에는 동화상 스트림이 전송될 때 충분한 대역폭이 항상 보장될 수는 없다. 이러한 문제는 차량의 복수의 탑승자가 각각 동시에 디스플레이 유닛을 사용하고 상이한 동화상 스트림을 볼 때 악화된다.
따라서, 본 발명의 목적은 탑승자를 위해 취급하기 용이하고 작은 대역폭으로 달성될 수 있는, 차량에서 디지털 콘텐츠를 볼 때 멀미를 감소시키기 위한 개선된 시스템을 제공하는 것이다. 또한, 본 발명의 목적은 차량에 디지털 콘텐츠를 표현하기 위한 개선된 방법을 제공하는 것이다.
본 발명의 일 대상은 멀미를 겪지 않고 차량에서 디지털 콘텐츠를 보기 위한 시스템에 관한 것이다. 상기 시스템은 제어 유닛 및 이러한 제어 유닛에 연결되는 복수의 센서를 구비하는 차량과, 디지털 콘텐츠를 통합한 가상 3D 장면을 표현하기 위해 제어 유닛에 무선으로 연결될 수 있는 데이터 안경을 포함한다.
본 발명에 따르면, 차량의 제어 유닛은 센서로부터 수신된 센서 데이터로부터 제어 변수를 계산하고 제어 변수를 데이터 안경으로 전송하도록 구성된다. 따라서, 제어 유닛은, 이들로부터 데이터 안경을 위한 제어 변수를 계산함으로써, 센서 데이터를 전처리한다. 제어 유닛에 의한 센서 데이터의 전처리는, 수신된 센서 데이터보다 더 적은 제어 변수가 필요한 경우, 전송될 데이터 볼륨의 감소로 이어질 수 있다. 제어 변수 계산의 주파수가 센서 데이터 수신의 주파수보다 작도록 선택되면, 추가의 감소가 달성될 수 있다.
따라서, 본 발명에 따르면, 데이터 안경은 제어 변수를 수신하고 수신된 제어 변수에 따라 가상 3D 장면(가상 현실)(VR)을 계산하도록 구성될 수 있다. 가상 3D 장면은 이를 표현하기 위해 일반적으로 큰 데이터 볼륨을 필요로 한다. 가상 3D 장면이 멀미를 방지해야 하는 경우, 이러한 데이터 볼륨은 차량의 가속도와 실시간으로 일치하게 계산되어, 데이터 안경에 디스플레이되어야 한다. 본 발명은 제어 변수에 따라 가상 3D 장면을 계산하도록 데이터 안경을 구성하는 것을 고려한 것에 기초한다. 이러한 방식으로, 데이터 안경에 표현하기 위해 데이터 집약적인 가상 3D 장면이 데이터 안경으로 전송될 필요가 없다. 오히려 계산과 관련된 적은 제어 변수를 전송하는 것으로 충분하며, 이를 위해 훨씬 더 적은 대역폭이 요구된다.
일 실시예에서, 차량 및 데이터 안경은 각각 서로 상보적인 무선 통신 인터페이스, 특히 IR 인터페이스, 블루투스 인터페이스, WiFi 인터페이스 및/또는 NFC 인터페이스를 포함한다. 언급된 통신 인터페이스와 상이한 공지된 또는 미래의 통신 인터페이스도 본 발명의 보호 범위 내에 있다. 물론, 차량 및 데이터 안경은 또한 복수의 상보적인 인터페이스 쌍을 가질 수 있으며, 이들 중에서 데이터 안경의 착용자는 데이터 안경을 차량에 연결하기 위해 임의의 인터페이스 쌍을 선택할 수 있다.
바람직한 실시예에서, 제어 유닛에 의해 계산된 제어 변수는 차량의 절대 위치, 수평선에 대한 각도, 횡가속도 및 종가속도를 포함하고 그리고/또는 데이터 안경은 가상 3D 장면을 계산하기 전에 수신된 제어 변수를 후처리하도록, 특히 평활화하도록 구성된다. 다른 말로 하면, 차량의 가속도와 일치하는 가상 3D 장면을 계산하기 위해 4 개의 제어 변수로 충분하다. 차량의 절대 위치는 가상 3D 장면 내에서의 공간 배치를 위해 사용될 수 있다. 수평선에 대한 각도를 사용하여, 가상 3D 장면에 대한 데이터 안경의 착용자의 관점이 실제 보기 방향에 따라 시뮬레이션될 수 있다. 종가속도 및 횡가속도는 멀미의 위험을 감소시키기 위한 가장 중요한 제어 변수를 나타낸다. 이들은 차량과 일치하도록 3D 가상 장면을 가속화하는데 사용될 수 있고, 이를 통해 시각적 인식과 전정 인식 사이의 불일치가 감소되거나 또는 회피될 수 있다.
다른 실시예에서, 상기 시스템은 차량 파라미터 및/또는 주행 파라미터를 디스플레이하기 위해 차량 및/또는 데이터 안경에 무선으로 연결될 수 있는 모바일 단말기, 특히 스마트 워치를 포함하고, 데이터 안경은 모바일 단말기에 대응하는 가상 단말기를 계산된 가상 3D 장면에 통합하도록 구성되어, 모바일 단말기에 의해 디스플레이되는 차량 파라미터 및/또는 주행 파라미터가 가상 단말기 상에 보여질 수 있다. 모바일 단말기와 그의 대응하는 가상 단말기를 동시에 사용하면, 데이터 안경의 착용자에게 실제 세계와 가상 세계의 한계를 초월하는 균일한 상호 작용 경험이 제공된다. 착용자가 손목에 지속적으로 착용하고 그 사용이 매우 편리하기 때문에, 스마트 워치가 특히 적합하다.
일 실시예에서, 데이터 안경은 데이터 안경의 착용자에게 데이터 안경의 제거를 요청하기 위해, 데이터 안경의 착용자, 특히 차량의 운전자를 위한 시각적 표시, 특히 은유적 표시를 계산된 가상 3D 장면에 통합하도록 구성된다. 예를 들어, 계산된 가상 3D 장면은 착용자가 데이터 안경을 제거할 때 가상으로 전달되는 포털을 포함할 수 있다. 이러한 방식으로, 데이터 안경의 착용자에게 매우 자연스러운 상호 작용 경험이 가능하게 된다.
다른 실시예에서, 데이터 안경은 데이터 안경의 주변을 검출하기 위한 적어도 하나의 광학 센서, 특히 카메라 및 차량의 내부 주변의 디지털 모델을 포함하고, 데이터 안경은 디지털 모델을 사용하여 내부 주변에 대응하는 검출된 주변의 정적 부분과, 차량 창문을 통해 볼 수 있는 차량의 이동하는 외부 주변에 대응하는 검출된 주변의 동적 부분을 구별하도록 구성된다. 검출된 동적 부분에 의해, 차량의 주변에 대한 데이터 안경의 이동이 결정될 수 있다. 데이터 안경과 주변 사이의 상대 이동을 추가로 고려하면, 시각적 인식과 전정 인식 사이의 불일치가 더 감소될 수 있다.
일 실시예에서, 차량은 데이터 안경의 사용에 따라, 차량 구성요소의 조절 범위, 특히 전방 시트의 위치 조절 범위를 다르게 제공하도록 구성된다. 예를 들어, 데이터 안경을 사용하는 경우, 착용자의 머리에 부착되는 데이터 안경과 차량의 에어백 사이의 거리는 데이터 안경의 공간 요구로 인해 착용자의 머리와 차량의 에어백 사이의 거리에 비해 감소되고, 그 결과, 전개된 에어백은 데이터 안경 및 간접적으로 착용자의 머리에 충격을 전달할 수 있으며, 이는 탑승자에게 상해의 위험을 초래할 수 있다. 이는 데이터 안경을 착용한 사람이 데이터 안경을 착용하지 않은 차량의 탑승자보다 덜 앞쪽으로 차량 시트를 조정할 수 있게 함으로써 방지될 수 있다. 다른 말로 하면, 차량 시트에 앉아 있는 탑승자가 데이터 안경을 착용하는 경우, 차량 시트의 전방 영역으로의 조절 범위는 감소될 수 있다.
다른 실시예에서, 데이터 안경은 차량의 주변에 있는 물체와 관련된 정보를 계산된 가상 3D 장면에, 특히 은유적으로 통합하도록 구성된다. 예를 들어, 차량의 주변에 있는 제공자로부터의 광경, 즉 흥미로운 지점(관심 지점)(Point Of Interest)(POI) 또는 흥미로운 제품(제품 배치)이 가상 3D 장면에 통합될 수 있다. 이 경우, 가상 3D 장면의 테마와 일치하는 은유가 사용될 수 있다.
바람직한 실시예에서, 데이터 안경은 2 차원 동화상 스트림, 특히 영화를 가상 스크린 상에 재생하고, 가상 스크린을, 상기 2 차원 동화상에 콘텐츠에 있어서 대응하는 계산된 가상 3D 장면으로 표현하도록 구성된다. 다른 말로 하면, 가상 3D 장면에 대해, 가상 스크린에서 재생되는 동화상 스트림과 일치하는 테마가 선택될 수 있다. 이것은 데이터 안경의 착용자가 특히 균일한 경험을 할 수 있게 한다.
본 발명의 다른 대상은 차량을 위한 데이터 안경으로서, 차량과 함께, 본 발명에 따른 시스템을 형성하도록 설계되고 구성되는, 데이터 안경에 관한 것이다. 이러한 데이터 안경은 차량의 제어 유닛에 무선으로 연결될 수 있어, 데이터 안경을 착용한 차량의 탑승자가 멀미를 겪지 않고 가상 3D 장면에 포함된 디지털 콘텐츠를 보는 것을 가능하게 하고, 이 경우 작은 대역폭의 무선 연결을 수행할 수 있게 한다.
본 발명의 대상은 또한 특히 본 발명에 따른 시스템에 의해, 차량에서 디지털 콘텐츠를 표현하기 위한 방법에 관한 것으로서, 차량에 제공되는 제어 유닛에 의해, 차량에 제공된 복수의 센서로부터 수신된 센서 데이터로부터, 제어 변수가 계산되고, 계산된 제어 변수는 차량으로부터, 차량에 무선으로 연결되는 데이터 안경으로 전송되고, 데이터 안경에 의해, 디지털 콘텐츠를 통합한 가상 3D 장면이 수신된 제어 변수에 따라 계산된다. 본 발명에 따른 방법에서, 가상 3D 장면의 계산은 차량 측에서 이루어지는 것이 아니라, 데이터 안경을 통해 이루어진다. 그 결과, 대량의 데이터 볼륨이 차량으로부터 데이터 안경으로 전송될 필요는 없다. 차량의 가속도와 일치하는 가상 3D 장면의 경우, 오히려 센서 데이터로부터 계산된 몇몇의 제어 변수로 충분하며, 그의 연속 전송에는 차량과 데이터 안경 사이의 무선 연결을 위한 작은 대역폭이 필요하다.
본 발명은 아래에서 멀미를 겪지 않고 차량에서 승객이 디지털 콘텐츠를 보기 위한 본 발명에 따른 시스템의 실시예를 사용하여 예시되고 더 설명될 것이다.
본 시스템은 차량에 제공되는 제어 유닛, 및 이러한 제어 유닛에 연결되어 차량에 제공되는 복수의 센서를 구비하는 차량을 포함한다. 이러한 시스템은 또한 디지털 콘텐츠를 통합한 가상 3D 장면을 표현하기 위한 데이터 안경을 포함한다. 차량, 특히 차량에 제공된 센서 및 데이터 안경은 서로에 대해 상보적인 무선 WiFi 통신 인터페이스를 포함하며, 이를 통해 이들은 서로 연결된다.
제어 유닛은 전처리의 일부로서 센서로부터 수신된 센서 데이터로부터, 데이터 안경을 위한 제어 변수를 계산하고 WiFi 통신 인터페이스를 통해 제어 변수를 데이터 안경에 무선으로 전송하도록 구성된다. 제어 변수는 차량의 절대 위치, 수평선에 대한 각도, 횡가속도 및 종가속도를 포함한다.
데이터 안경은 제어 유닛에 의해 계산된 제어 변수를 수신하여, 이를 후처리하고, 수신되어 후처리된 제어 변수에 따라 가상 3D 장면을 계산하도록 구성된다. 개별 시점에 수신된 제어 변수의 후처리는 평활화를 통해 제어 변수의 연속적인 프로파일을 보간하는 역할을 한다.
본 시스템은 또한 예를 들어 주행 목적지까지의 잔여 거리 또는 이용 가능한 에너지 공급과 같은 차량 또는 주행 파라미터를 디스플레이하기 위한 스마트 워치를 포함한다. 스마트 워치는 무선 WiFi 통신 인터페이스를 포함하며, 차량 또는 데이터 안경에 무선으로 연결되어 있다. 데이터 안경은 스마트 워치에 대응하는 가상 스마트 워치를 계산된 가상 3D 장면에 통합하도록 구성되어, 스마트 워치에 의해 디스플레이되는 차량 파라미터 또는 주행 파라미터가 또한 가상 스마트 워치 상에서도 보여질 수 있다.
데이터 안경은 데이터 안경의 착용자에게 데이터 안경의 제거를 요청하기 위해, 데이터 안경의 착용자, 특히 차량의 운전자를 위한 시각적 표시, 특히 은유적 표시를 계산된 가상 3D 장면에 통합하도록 구성된다. 은유적 표시로서, 데이터 안경은 데이터 안경을 착용하는 차량의 운전자에 의해 가상으로 전달되는 포털을 나타낸다.
데이터 안경은 데이터 안경의 주변을 검출하기 위한 카메라 및 차량의 내부 주변의 디지털 모델을 포함한다. 데이터 안경은 디지털 모델을 사용하여 내부 주변, 즉 차량의 내부에 대응하는 검출된 주변의 정적 부분과, 차량 창문을 통해 볼 수 있는 차량의 이동하는 외부 주변에 대응하는 검출된 주변의 동적 부분을 구별하도록 구성된다.
차량은 전방 시트에 앉아 있는 탑승자가 데이터 안경을 착용하고 있는지 또는 아닌지에 따라 전방 시트의 위치 조절 범위를 다르게 제공하도록 구성된다.
데이터 안경은 차량의 주변에 있는 물체와 관련된 정보를 계산된 가상 3D 장면에, 특히 은유적으로 통합하도록 구성된다. 이를 위해, 예를 들어 차량의 주변에 있는 특정 제공자의 위치, 특수 광고 정보 또는 차량의 주변에 있는 명소에 대한 관광 정보가 가상 3D 장면의 테마와 일치하게 표현된다.
데이터 안경은 가상 3D 장면에 통합된 가상 스크린에서 영화를 재생하도록 구성된다. 이 경우, 가상 스크린은 2 차원 동화상에 테마에 있어서 대응하는 계산된 가상 3D 장면으로 표현된다. 예를 들어, 가상 스크린에서 스타워즈 영화 중 하나의 에피소드가 재생되는 동안, 가상 3D 장면은 스타워즈 영화로부터 알려진 죽음의 별을 통한 비행을 시뮬레이션할 수 있다.
본 발명에 따른 시스템의 작동 동안, 제어 유닛에 의해 센서 데이터로부터 제어 변수가 계산되어, 차량에 무선으로 연결된 데이터 안경으로 전송된다. 수신된 제어 변수에 따라 데이터 안경은 디지털 콘텐츠를 통합한 가상 3D 장면을 계산한다.
본 발명에 따른 시스템의 장점은, 디지털 콘텐츠와 테마가 일치하는 데이터 집약적 VR 적용의 일부로서, 데이터 안경을 착용한 차량의 탑승자가 멀미를 겪지 않고 디지털 콘텐츠를 보는 것이 가능하게 되고, 데이터 안경과 차량 사이의 무선 연결을 위해 큰 대역폭이 제공되지 않는다는 점이다. 이를 통해, 데이터 안경의 착용자에게 디지털 콘텐츠에 대한 균일하고 전체적인 경험이 제공되고 이와 동시에 용이한 취급이 가능하게 된다. 이러한 장점은 차량의 복수의 탑승자가 동시에 상이한 디지털 콘텐츠를 보고 있는 경우에 더욱 상승한다.

Claims (10)

  1. 멀미를 겪지 않고 차량에서 디지털 콘텐츠를 보기 위한 시스템으로서,
    상기 시스템은, 제어 유닛 및 상기 제어 유닛에 연결되는 복수의 센서를 구비하는 차량과, 상기 디지털 콘텐츠를 통합한 가상 3D 장면을 표현하기 위해 상기 제어 유닛에 무선으로 연결될 수 있는 데이터 안경을 포함하고,
    상기 제어 유닛은, 상기 센서로부터 수신된 센서 데이터로부터 상기 차량의 절대 위치, 수평선에 대한 각도, 횡가속도 및 종가속도를 포함하는 제어 변수를 계산하고 상기 제어 변수를 상기 데이터 안경으로 전송하도록 구성되며,
    상기 데이터 안경은, 상기 제어 변수를 수신하고, 상기 수신된 제어 변수를 평활화에 의해 후처리하고, 상기 수신된 제어 변수에 따라 상기 가상 3D 장면을 계산하도록 구성되는, 시스템.
  2. 제 1 항에 있어서,
    상기 차량 및 상기 데이터 안경은 각각 서로 상보적인 무선 통신 인터페이스를 포함하는 것인, 시스템.
  3. 제 1 항 또는 제 2 항에 있어서,
    상기 시스템은 차량 파라미터 및 주행 파라미터 중 적어도 하나를 디스플레이하기 위해 상기 차량 및 상기 데이터 안경 중 적어도 하나에 무선으로 연결될 수 있는 모바일 단말기를 포함하고, 상기 데이터 안경은 상기 모바일 단말기에 대응하는 가상 단말기를 상기 계산된 가상 3D 장면에 통합하도록 구성되어, 상기 모바일 단말기에 의해 디스플레이되는 상기 차량 파라미터 및 주행 파라미터 중 적어도 하나가 상기 가상 단말기 상에 보여질 수 있는 것인, 시스템.
  4. 제 1 항 또는 제 2 항에 있어서,
    상기 데이터 안경은 상기 데이터 안경의 착용자에게 상기 데이터 안경의 제거를 요청하기 위해, 상기 데이터 안경의 상기 착용자를 위한 시각적 표시를 상기 계산된 가상 3D 장면에 통합하도록 구성되는 것인, 시스템.
  5. 제 1 항 또는 제 2 항에 있어서,
    상기 데이터 안경은 상기 데이터 안경의 주변을 검출하기 위한 적어도 하나의 광학 센서 및 상기 차량의 내부 주변의 디지털 모델을 포함하고, 상기 데이터 안경은 상기 디지털 모델을 사용하여 상기 내부 주변에 대응하는 상기 검출된 주변의 정적 부분과, 차량 창문을 통해 볼 수 있는 상기 차량의 이동하는 외부 주변에 대응하는 상기 검출된 주변의 동적 부분을 구별하도록 구성되는 것인, 시스템.
  6. 제 1 항 또는 제 2 항에 있어서,
    상기 차량은 상기 데이터 안경의 사용에 따라, 차량 구성요소의 조절 범위를 다르게 제공하도록 구성되는 것인, 시스템.
  7. 제 1 항 또는 제 2 항에 있어서,
    상기 데이터 안경은 상기 차량의 주변에 있는 물체와 관련된 정보를 상기 계산된 가상 3D 장면에 통합하도록 구성되거나, 또는 2 차원 동화상 스트림을 가상 스크린 상에 재생하고, 상기 가상 스크린을, 상기 2 차원 동화상에 콘텐츠에 있어서 대응하는 계산된 가상 3D 장면으로 표현하도록 구성되는 것인, 시스템.
  8. 차량을 위한 데이터 안경으로서,
    상기 차량과 함께, 제 1 항 또는 제 2 항에 따른 시스템을 형성하도록 설계되고 구성되는, 데이터 안경.
  9. 제 1 항 또는 제 2 항에 따른 시스템에 의해, 차량에서 디지털 콘텐츠를 표현하기 위한 방법으로서,
    상기 차량에 제공되는 제어 유닛에 의해, 상기 차량에 제공된 복수의 센서로부터 수신된 센서 데이터로부터, 제어 변수가 계산되고, 상기 계산된 제어 변수는 상기 차량으로부터, 상기 차량에 무선으로 연결되는 데이터 안경으로 전송되고, 상기 데이터 안경에 의해, 상기 디지털 콘텐츠를 통합한 가상 3D 장면이 상기 수신된 제어 변수에 따라 계산되는, 방법.
  10. 삭제
KR1020207011994A 2017-10-04 2018-09-20 멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기 KR102403915B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102017217592.3A DE102017217592A1 (de) 2017-10-04 2017-10-04 Kinetosefreies Betrachten eines digitalen Inhalts in einem Fahrzeug
DE102017217592.3 2017-10-04
PCT/EP2018/075497 WO2019068477A1 (de) 2017-10-04 2018-09-20 Kinetosefreies betrachten eines digitalen inhalts in einem fahrzeug

Publications (2)

Publication Number Publication Date
KR20200062266A KR20200062266A (ko) 2020-06-03
KR102403915B1 true KR102403915B1 (ko) 2022-05-31

Family

ID=63685966

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020207011994A KR102403915B1 (ko) 2017-10-04 2018-09-20 멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기

Country Status (7)

Country Link
US (1) US20200242361A1 (ko)
EP (1) EP3691729A1 (ko)
JP (1) JP7002648B2 (ko)
KR (1) KR102403915B1 (ko)
CN (1) CN111182940B (ko)
DE (1) DE102017217592A1 (ko)
WO (1) WO2019068477A1 (ko)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019152980A (ja) * 2018-03-01 2019-09-12 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
DE102019116713B4 (de) * 2019-06-19 2021-01-28 Bayerische Motoren Werke Aktiengesellschaft Verfahren, Vorrichtung und Fortbewegungsmittel für eine kinetosevermeidende Darstellung einer virtuellen Flüssigkeit in einer Datenbrille im Fortbewegungsmittel
DE102020105196A1 (de) * 2020-02-27 2021-09-02 Audi Aktiengesellschaft Verfahren zum Betreiben einer Datenbrille in einem Kraftfahrzeug sowie System mit einem Kraftfahrzeug und einer Datenbrille
GB2592397A (en) * 2020-02-27 2021-09-01 Daimler Ag Method and system for mitigating motion sickness of users in a moving vehicle
JP7135052B2 (ja) * 2020-10-29 2022-09-12 ソフトバンク株式会社 制御装置、プログラム、及び制御方法
DE102021117904A1 (de) * 2021-07-12 2023-01-12 Valeo Comfort And Driving Assistance Videostreamen von einem Fahrzeug zu einem entfernten Virtuelle-Realität-System
CN113986165B (zh) * 2021-10-09 2024-04-26 上海瑾盛通信科技有限公司 显示控制方法、电子装置及可读存储介质
US11676311B1 (en) 2021-11-29 2023-06-13 International Business Machines Corporation Augmented reality replica of missing device interface

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10156219C1 (de) * 2001-11-15 2003-08-14 Daimler Chrysler Ag Verfahren und Vorrichtung zur Reduzierung von Kinetose-Störungen
JP2014200018A (ja) * 2013-03-29 2014-10-23 アイシン精機株式会社 画像表示制御装置および画像表示システム
US20140362113A1 (en) * 2013-06-11 2014-12-11 Sony Computer Entertainment Europe Limited Change nature of display according to overall motion
DE102013021137A1 (de) * 2013-12-13 2015-06-18 Audi Ag Verfahren zum Betreiben einer Datenschnittstelle eines Kraftwagens und Kraftwagen
JP2015204616A (ja) * 2014-04-14 2015-11-16 ハーマン インターナショナル インダストリーズ インコーポレイテッド ヘッドマウントディスプレイの提示の調整
DE102014213021A1 (de) * 2014-07-04 2016-01-07 Bayerische Motoren Werke Aktiengesellschaft Lokalisierung eines HMD im Fahrzeug
WO2016208546A1 (ja) * 2015-06-26 2016-12-29 株式会社ソニー・インタラクティブエンタテインメント ヘッドマウントディスプレイ、通知装置、通知システム、通知方法及びプログラム
JP2017001634A (ja) * 2015-06-16 2017-01-05 東日本旅客鉄道株式会社 徐行区間注意喚起システム
JP2017003946A (ja) * 2015-06-16 2017-01-05 株式会社Ｊｖｃケンウッド 虚像提示システム、画像投射装置および虚像提示方法
DE102015011616A1 (de) * 2015-09-04 2017-03-09 Audi Ag Virtual-Reality-System und Verfahren zum Betreiben eines Virtual-Reality-Systems
JP2017146963A (ja) * 2016-02-18 2017-08-24 国立大学法人名古屋大学 仮想空間表示システム

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7722526B2 (en) 2004-07-16 2010-05-25 Samuel Kim System, method and apparatus for preventing motion sickness
US20090225434A1 (en) * 2008-03-10 2009-09-10 Nicholas Clayton L Vehicle rear view apparatus utilizing heads up display and rear looking sensors
US9994228B2 (en) * 2010-05-14 2018-06-12 Iarmourholdings, Inc. Systems and methods for controlling a vehicle or device in response to a measured human response to a provocative environment
US9283349B2 (en) * 2011-05-13 2016-03-15 Mobitv, Inc. Methods and apparatus for device based prevention of kinetosis
US9630631B2 (en) * 2013-10-03 2017-04-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
US9547173B2 (en) * 2013-10-03 2017-01-17 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality
DE102014019579B4 (de) 2014-12-30 2016-12-08 Audi Ag System und Verfahren zum Betreiben einer Anzeigeeinrichtung
DE102015202099A1 (de) * 2015-02-06 2016-08-11 Bayerische Motoren Werke Aktiengesellschaft Verarbeiten von Sensordaten für ein Fahrerassistenzsystem
KR20160097411A (ko) * 2015-02-06 2016-08-18 이강우 웨어러블 디바이스를 이용한 운동정보 제공 시스템 및 운동정보 제공 방법
US20160238852A1 (en) * 2015-02-13 2016-08-18 Castar, Inc. Head mounted display performing post render processing
DE102015004749A1 (de) * 2015-04-11 2016-10-13 Audi Ag Verfahren zum Betreiben einer Virtual-Reality-Brille und System mit einer Virtual-Reality-Brille
US10338673B2 (en) * 2015-09-16 2019-07-02 Google Llc Touchscreen hover detection in an augmented and/or virtual reality environment
US10310266B2 (en) * 2016-02-10 2019-06-04 Advanced Micro Devices, Inc. Method and system for streaming information in wireless virtual reality
CN107128264A (zh) * 2016-02-28 2017-09-05 司文奎 防晕车的信号获取及发送、接收及处理方法和发送端
US10274737B2 (en) * 2016-02-29 2019-04-30 Microsoft Technology Licensing, Llc Selecting portions of vehicle-captured video to use for display
US9459692B1 (en) * 2016-03-29 2016-10-04 Ariadne's Thread (Usa), Inc. Virtual reality headset with relative motion head tracker
CN106056973B (zh) * 2016-06-29 2020-09-11 北京小米移动软件有限公司 基于虚拟现实技术的停车引导方法及***
US10503245B2 (en) * 2016-09-21 2019-12-10 Apple Inc. Relative intertial measurement system
US10837790B2 (en) * 2017-08-01 2020-11-17 Nio Usa, Inc. Productive and accident-free driving modes for a vehicle

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE10156219C1 (de) * 2001-11-15 2003-08-14 Daimler Chrysler Ag Verfahren und Vorrichtung zur Reduzierung von Kinetose-Störungen
JP2014200018A (ja) * 2013-03-29 2014-10-23 アイシン精機株式会社 画像表示制御装置および画像表示システム
US20140362113A1 (en) * 2013-06-11 2014-12-11 Sony Computer Entertainment Europe Limited Change nature of display according to overall motion
DE102013021137A1 (de) * 2013-12-13 2015-06-18 Audi Ag Verfahren zum Betreiben einer Datenschnittstelle eines Kraftwagens und Kraftwagen
JP2015204616A (ja) * 2014-04-14 2015-11-16 ハーマン インターナショナル インダストリーズ インコーポレイテッド ヘッドマウントディスプレイの提示の調整
DE102014213021A1 (de) * 2014-07-04 2016-01-07 Bayerische Motoren Werke Aktiengesellschaft Lokalisierung eines HMD im Fahrzeug
JP2017001634A (ja) * 2015-06-16 2017-01-05 東日本旅客鉄道株式会社 徐行区間注意喚起システム
JP2017003946A (ja) * 2015-06-16 2017-01-05 株式会社Ｊｖｃケンウッド 虚像提示システム、画像投射装置および虚像提示方法
WO2016208546A1 (ja) * 2015-06-26 2016-12-29 株式会社ソニー・インタラクティブエンタテインメント ヘッドマウントディスプレイ、通知装置、通知システム、通知方法及びプログラム
DE102015011616A1 (de) * 2015-09-04 2017-03-09 Audi Ag Virtual-Reality-System und Verfahren zum Betreiben eines Virtual-Reality-Systems
JP2017146963A (ja) * 2016-02-18 2017-08-24 国立大学法人名古屋大学 仮想空間表示システム

Also Published As

Publication number Publication date
JP7002648B2 (ja) 2022-01-20
JP2020536331A (ja) 2020-12-10
CN111182940A (zh) 2020-05-19
EP3691729A1 (de) 2020-08-12
DE102017217592A1 (de) 2019-04-04
WO2019068477A1 (de) 2019-04-11
CN111182940B (zh) 2022-02-25
US20200242361A1 (en) 2020-07-30
KR20200062266A (ko) 2020-06-03

Similar Documents

Publication Publication Date Title
KR102403915B1 (ko) 멀미를 겪지 않고 차량에서 디지털 콘텐츠 보기
US10762714B2 (en) Method and system for calibrating a virtual reality system
EP3491494B1 (en) Immersive virtual display
CN104781873B (zh) 图像显示装置、图像显示方法、移动装置、图像显示***
EP3163422B1 (en) Information processing device, information processing method, computer program, and image processing system
US20170036111A1 (en) Head position detecting apparatus and head position detecting method, image processing apparatus and image processing method, display apparatus, and computer program
JP4892731B2 (ja) 乗り物酔い防止回復装置
US20150245017A1 (en) Virtual see-through instrument cluster with live video
US20140362113A1 (en) Change nature of display according to overall motion
EP2365701A1 (en) Display device, terminal device, and display method
EP1774479A1 (en) Device and method for presenting an image of the surrounding world
JP2020537257A (ja) 頭部着用型の電子表示装置の操作方法および仮想コンテンツを表示する表示システム
CN110383142A (zh) 用于机动车的娱乐***和用于运行娱乐***的方法
RU2734063C1 (ru) Устройство для визуального наблюдения для пилота летательного аппарата
US9679352B2 (en) Method for operating a display device and system with a display device
KR20150131745A (ko) 원근법에 의한 교통수단의 3d 가상훈련 화면 구현 방법
CN118144652A (zh) 车辆座椅控制方法、装置、设备及存储介质

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant