DE102017219468B4 - Method and device for using a virtual reality device - Google Patents

Method and device for using a virtual reality device Download PDF

Info

Publication number
DE102017219468B4
DE102017219468B4 DE102017219468.5A DE102017219468A DE102017219468B4 DE 102017219468 B4 DE102017219468 B4 DE 102017219468B4 DE 102017219468 A DE102017219468 A DE 102017219468A DE 102017219468 B4 DE102017219468 B4 DE 102017219468B4
Authority
DE
Germany
Prior art keywords
virtual
vehicle
user
movement
virtual reality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
DE102017219468.5A
Other languages
German (de)
Other versions
DE102017219468A1 (en
Inventor
Frederik Meysel
Michael Heuer
Mikael Johansson
Marc-Michael Meinecke
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Volkswagen AG
Original Assignee
Volkswagen AG
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Volkswagen AG filed Critical Volkswagen AG
Priority to DE102017219468.5A priority Critical patent/DE102017219468B4/en
Priority to PCT/EP2018/077644 priority patent/WO2019086222A1/en
Publication of DE102017219468A1 publication Critical patent/DE102017219468A1/en
Application granted granted Critical
Publication of DE102017219468B4 publication Critical patent/DE102017219468B4/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/167Vehicle dynamics information
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

Verfahren zur Nutzung einer Virtuell-Reality-Funktion einer Virtual-Reality-Einrichtung (4, 5, 44) durch einen Nutzer (2, 3) in einem Fahrzeug (1) mit den Schritten:Ermittlung einer Eigenbewegung des Fahrzeugs (1),Ermittlung einer Position und einer Orientierung des Kopfes des Nutzers (2, 3) im Fahrzeug (1),Einblenden zusätzlicher optischer visueller Merkmale (9, 31) in einen von der Virtual-Reality-Einrichtung erzeugten virtuellen Raum, welcher virtuelle Objekte und eine virtuelle Szene umfasst, wobeidie zusätzlichen optischen visuellen Merkmale (9, 31) nicht auf die virtuellen Objekte und die virtuelle Szene des virtuellen Raums abgebildet werden, unddie optischen visuellen Merkmale (9, 31) mit der Eigenbewegung des Fahrzeugs (1) sowie der Position und der Orientierung des Kopfes des Nutzers (2, 3) im Fahrzeug (1) korrespondieren.Method for using a virtual reality function of a virtual reality device (4, 5, 44) by a user (2, 3) in a vehicle (1), with the steps: determining a movement of the vehicle (1), determining a position and an orientation of the head of the user (2, 3) in the vehicle (1), showing additional optical visual features (9, 31) in a virtual space generated by the virtual reality device, which virtual objects and a virtual scene comprises, wherein the additional optical visual features (9, 31) are not mapped onto the virtual objects and the virtual scene of the virtual space, and the optical visual features (9, 31) with the own movement of the vehicle (1) and the position and the orientation of the head of the user (2, 3) in the vehicle (1).

Description

Die Erfindung betrifft ein Verfahren zur Nutzung einer Virtual-Reality-Einrichtung durch einen Nutzer in einem Fahrzeug sowie eine entsprechende Vorrichtung.The invention relates to a method for using a virtual reality device by a user in a vehicle and a corresponding device.

Im Zuge automatischer Fahrfunktionen und der zunehmenden Verbreitung von Virtual-Reality-Einrichtungen, wie beispielsweise einer Virtual- Reality-Brille, abgekürzt VR-Brille, bekommt die Nutzung solcher VR-Brillen auch in Fahrzeugen eine zunehmende Bedeutung. Insassen und Fahrer können während der Fahrt eine solche Brille nutzen, die andere Inhalte als die tatsächliche Umgebung des Fahrzeuginnenraums abbildet.In the course of automatic driving functions and the increasing spread of virtual reality devices, such as virtual reality glasses, VR glasses for short, the use of such VR glasses in vehicles is also becoming increasingly important. Occupants and drivers can use such glasses while driving, which depict content other than the actual environment of the vehicle interior.

Es ist bekannt, dass Kopfbewegungen und damit verbundene Beschleunigungs- und Drehreize, die dem Nutzer nicht durch die visuelle Darstellung zurückgemeldet werden, in sehr kurzer Zeit, teilweise innerhalb weniger Sekunden, zu sehr unangenehmen körperlichen Wahrnehmungen führen können. Hierzu gehören Schwindel und Übelkeit bis hin zu Desorientierung, Kopfschmerzen und Kreislauferscheinungen. Nach dem heutigen Stand der Forschung wird die Ursache in eben den auf den Körper wirkenden Beschleunigungsreize vermutet, zu denen ein visuelles Feedback fehlt.It is known that head movements and the associated acceleration and rotation stimuli, which are not reported back to the user through the visual representation, can lead to very unpleasant physical perceptions in a very short time, sometimes within a few seconds. These include dizziness and nausea through to disorientation, headaches and circulatory symptoms. According to the current state of research, the cause is assumed to be the acceleration stimuli acting on the body, for which there is no visual feedback.

Erschwerend zur Situation im Fahrzeug kommt hinzu, dass zusätzlich zu den eigenen Körperbewegungen über die Bewegung des Fahrzeugs weitere Beschleunigungskräfte auf den Nutzer einwirken.The situation in the vehicle is aggravated by the fact that in addition to the user's own body movements, further acceleration forces act on the user via the movement of the vehicle.

Zur Milderung des auftretenden Schwindelgefühls in unbewegten Umgebungen sind zahlreiche Erkenntnisse verfügbar, was sowohl die Gestaltung der dargebotenen virtuellen Umgebungen, die Verarbeitung von Benutzereingaben als auch Vorrichtungen zur Erzeugung von zusätzlichen Inhalten, die dem Nutzer eine visuelle Rückmeldung passend zu den von ihm wahrgenommenen Reizen bieten, betrifft. Darunter findet sich ein Verfahren, das ein dünnes Koordinatennetz in die virtuelle Welt einblendet, das vom Nutzer jederzeit zur Orientierung genutzt werden kann.Numerous findings are available to mitigate the dizziness that occurs in still environments, including the design of the virtual environments presented, the processing of user input, and devices for generating additional content that provide the user with visual feedback appropriate to the stimuli perceived by him. regards. Among them is a process that displays a thin grid of coordinates in the virtual world, which the user can use at any time for orientation.

Die Druckschrift DE 10 2014 009 301 A1 betrifft ein Verfahren zum Betreiben einer Virtual-Reality-Brille, mit den Schritten Anzeigen zumindest eines virtuellen Objekts aus einem von einem ersten virtuellen Beobachtungspunkt ausgehenden ersten Blickwinkel, wobei dieser in Abhängigkeit von einer fortlaufend ermittelten Ausrichtung der Virtual-Reality-Brille vorgegeben wird, falls eine vorbestimmte Bedingung erfüllt wird, Durchführen eines virtuellen Positionswechsels vom ersten Beobachtungspunkt zu einem zweiten virtuellen Beobachtungspunkt, wonach das virtuelle Objekt von einem vom zweiten virtuellen Beobachtungspunkt ausgehenden zweiten Blickwinkel angezeigt wird, wobei dieser in Abhängigkeit von der fortlaufend ermittelten Ausrichtung der Virtual-Reality-Brille vorgegeben wird, wobei während des virtuellen Positionswechsels eine virtuelle Blende derart geschlossen und wieder geöffnet wird, dass ein Blick eines Trägers der Virtual-Reality-Brille auf das virtuelle Objekt gerichtet wird.The pamphlet DE 10 2014 009 301 A1 relates to a method for operating virtual reality glasses, with the steps of displaying at least one virtual object from a first virtual observation point starting from a first viewing angle, this being specified as a function of a continuously determined alignment of the virtual reality glasses, if a predetermined condition is met, performing a virtual change of position from the first observation point to a second virtual observation point, after which the virtual object is displayed from a second viewing angle originating from the second virtual observation point, this angle depending on the continuously determined alignment of the virtual reality glasses is specified, with a virtual aperture being closed and opened again during the virtual change of position in such a way that a view of a wearer of the virtual reality glasses is directed at the virtual object.

Die Druckschrift DE 10 2014 015 871 A1 betrifft ein Anzeigesystem für einen Kraftwagen, mit zumindest einer elektronischen Datenbrille; einer Erfassungseinrichtung, welche dazu ausgebildet ist, sowohl eine Position und eine Geste zumindest eines Fahrzeuginsassen als auch eine Position der zumindest einen elektronischen Datenbrille innerhalb des Kraftwagens zu erfassen; einer Steuereinrichtung, welche dazu ausgebildet ist, die zumindest eine elektronische Datenbrille in Abhängigkeit von der mittels der Erfassungseinrichtung erfassten Position der zumindest einen elektronischen Datenbrille anzusteuern.The pamphlet DE 10 2014 015 871 A1 relates to a display system for a motor vehicle, with at least one pair of electronic data glasses; a detection device which is designed to detect both a position and a gesture of at least one vehicle occupant and a position of the at least one electronic pair of data glasses inside the motor vehicle; a control device which is designed to control the at least one electronic data goggle as a function of the position of the at least one electronic data goggle detected by the detection device.

Die Druckschrift WO 2016/150541 A1 betrifft ein Verfahren zum Betreiben einer in einem Kraftfahrzeug angeordneten Virtual-Reality-Brille mit den Schritten: Erfassen der Bewegung des Kraftfahrzeugs; Anzeigen einer ersten virtuellen Umgebung mittels der Virtual-Reality-Brille in einem ersten Anzeigebereich der Virtual-Reality-Brille, welche unabhängig von der erfassten Bewegung des Kraftfahrzeugs dargestellt wird; simultanes Anzeigen einer zweiten virtuellen Umgebung mittels der Virtual-Reality-Brille in einem zweiten Anzeigebereich der Virtual-Reality-Brille, welche korrespondierend zu der erfassten Bewegung des Kraftfahrzeugs dargestellt wird.The pamphlet WO 2016/150541 A1 relates to a method for operating virtual reality glasses arranged in a motor vehicle, with the steps: detecting the movement of the motor vehicle; Displaying a first virtual environment using the virtual reality glasses in a first display area of the virtual reality glasses, which is displayed independently of the detected movement of the motor vehicle; simultaneous display of a second virtual environment using the virtual reality glasses in a second display area of the virtual reality glasses, which is displayed corresponding to the detected movement of the motor vehicle.

Die Druckschrift WO 2016/165799 A1 betrifft ein Verfahren zum Betreiben einer Virtual-Reality-Brille, bei welchem jeweilige virtuelle Beobachtungspositionen korrespondierend zu einer fortlaufend erfassten Position der Virtual-Reality-Brille vorgegeben werden, wobei ein virtuelles Objekt sowie ein das virtuelle Objekt umgebender Nahbereich einer virtuellen Umgebung aus der momentan vorgegebenen virtuellen Beobachtungsposition und ein den Nahbereich umgebender Fernbereich der virtuellen Umgebung unabhängig von der erfassten Position der Virtual-Reality-Brille aus einer unveränderbaren virtuellen Beobachtungsposition angezeigt werden.The pamphlet WO 2016/165799 A1 relates to a method for operating virtual reality glasses, in which respective virtual observation positions corresponding to a continuously detected position of the virtual reality glasses are specified, with a virtual object and a virtual object surrounding the near area of a virtual environment from the currently specified virtual observation position and a remote area surrounding the near area of the virtual environment are displayed independently of the detected position of the virtual reality glasses from an unchangeable virtual observation position.

Die Druckschrift US 2017/0075117 A1 beschreibt ein Verfahren und eine Vorrichtung zum Erzeugen eines ortsgebundenen Virtual-Reality-Systems. Es wird eine Benutzerschnittstelle geschaffen, die eine intuitive Navigation des ortsgebundenen virtuellen Realitätssystems als Funktion der Position des Kopfes des Benutzers. Das ortsgebundene Virtual-Reality-System kann eine Desktop-Rechnerumgebung erzeugen. Der Benutzer kann das Virtual-Reality-System einen Augmented-Reality-Betrachtungsmodus oder einen Reale-Welt-Betrachtungsmodus umschalten, so dass der Benutzer die zusammengefügte ortsfeste Umgebung steuern und beeinflussen kann. Zwischen den Moden kann ferner gewechselt werden, um dem Benutzer eine umfassendere Erfassung der Situation und eine längere Betriebsdauer zu ermöglichen.The pamphlet U.S. 2017/0075117 A1 describes a method and a device for generating a location-based virtual reality system. A user interface is provided that allows intuitive navigation of the location-based virtual reality system as a function of the position of the user's head. The location-based Vir tual reality system can create a desktop computing environment. The user can switch the virtual reality system to an augmented reality viewing mode or a real world viewing mode so that the user can control and manipulate the composite stationary environment. Modes can also be toggled to give the user more comprehensive situational awareness and longer service life.

Die Druckschrift WO 2016/205175 A1 offenbart ein computerimplementiertes Verfahren zum Anzeigen eines Objekts in einer ersten Virtual-Reality-Ansicht auf beispielsweise einer Anzeige einer elektronischen Vorrichtung. Das Verfahren kann ferner das Einblenden einer Betonung innerhalb der ersten Virtual-Reality-Ansicht des Objekts auf der Anzeige beinhalten, wobei das Verfahren weiterhin den Übergang der Darstellung des Objekts ausgehend von der ersten Virtual-Reality-Ansicht mit der Betonung in eine Darstellung in einer zweiten Virtuellen-Reality-Ansicht umfasst. Die zweite Virtual-Reality-Ansicht kann eine Detail-Ansicht eines Teils des Objekts sein, die innerhalb der Betonung der ersten Virtual-Reality-Ansicht liegt.The pamphlet WO 2016/205175 A1 discloses a computer-implemented method for displaying an object in a first virtual reality view on, for example, a display of an electronic device. The method may further include overlaying an emphasis within the first virtual reality view of the object on the display, the method further transitioning the representation of the object from the first virtual reality view with the emphasis to a representation in a second virtual reality view includes. The second virtual reality view may be a detail view of a portion of the object that is within the focus of the first virtual reality view.

Die Druckschrift DE 10 2014 220 053 A1 betrifft ein Verfahren für eine fahrzeuginterne dynamische virtuelle Realität. Dies schließt ein Empfangen von Fahrzeugdaten von einem oder mehreren Fahrzeugsystemen eines Fahrzeugs, wobei die Fahrzeugdaten Fahrzeugdynamikdaten einschließen, und ein Empfangen von Benutzerdaten von einem Virtual-Reality-Gerät ein. Das Verfahren schließt ein Erzeugen einer virtuellen Ansicht basierend auf den Fahrzeugdaten, den Benutzerdaten und einem Modell einer virtuellen Welt ein, wobei das Modell der virtuellen Welt eine oder mehrere Komponenten einschließt, die die virtuelle Ansicht definieren, wobei das Erzeugen der virtuellen Ansicht ein Erweitern einer oder mehrerer Komponenten des Modells der virtuellen Welt gemäß den Fahrzeugdaten und/oder den Benutzerdaten und ein Rendern der virtuellen Ansicht an ein Ausgabegerät einschließt, indem das Ausgabegerät so geregelt bzw. gesteuert wird, dass eine Anzeige der virtuellen Ansicht gemäß den Fahrzeugdynamikdaten aktualisiert wird.The pamphlet DE 10 2014 220 053 A1 relates to an in-vehicle dynamic virtual reality method. This includes receiving vehicle data from one or more vehicle systems of a vehicle, the vehicle data including vehicle dynamics data, and receiving user data from a virtual reality device. The method includes creating a virtual view based on the vehicle data, the user data, and a virtual world model, the virtual world model including one or more components that define the virtual view, wherein creating the virtual view includes augmenting a one or more components of the virtual world model according to the vehicle data and/or the user data and rendering the virtual view to an output device by controlling the output device to update a display of the virtual view according to the vehicle dynamics data.

Der Erfindung liegt daher die Aufgabe zugrunde, ein Verfahren und eine Vorrichtung zur Nutzung der Reality-Funktion einer Virtual-Reality-Einrichtung, insbesondere eine Virtual-Reality-Brille, zu schaffen, die dem Nutzer die Wahrnehmung körperlicher Unannehmlichkeiten bzw. Unpässlichkeiten erspart oder diese zumindest verringert.The invention is therefore based on the object of creating a method and a device for using the reality function of a virtual reality device, in particular virtual reality glasses, which prevent the user from experiencing physical inconveniences or indispositions or these at least reduced.

Diese Aufgabe wird durch ein Verfahren mit den Merkmalen des Anspruchs 1 sowie durch eine Vorrichtung mit den Merkmalen des Anspruchs 10 gelöst. Bevorzugte Ausführungsformen der Erfindung sind Gegenstand der Unteransprüche.This object is achieved by a method having the features of claim 1 and by a device having the features of claim 10. Preferred embodiments of the invention are the subject matter of the dependent claims.

Das erfindungsgemäße Verfahren zur Nutzung der Virtual-Reality-Funktion einer Virtual-Reality-Einrichtung durch einen Nutzer in einem Fahrzeug führt die folgenden Schritte aus:

  • - Ermittlung der Eigenbewegung des Fahrzeugs,
  • - Ermittlung der Position und der Orientierung des Kopfes des Nutzers im Fahrzeug,
  • - Einblenden zusätzlicher optischer visueller Merkmale in den von der Virtual-Reality-Einrichtung erzeugten virtuellen Raum, welcher virtuelle Objekte und virtuelle Szenen umfasst, wobei die zusätzlichen optischen visuellen Merkmale nicht auf die virtuellen Objekte und die virtuelle Szene des virtuellen Raums abgebildet werden, und
  • - die optischen visuellen Merkmale mit der Eigenbewegung des Fahrzeugs sowie der Position und der Orientierung des Kopfes des Nutzers im Fahrzeug korrespondieren.
The method according to the invention for using the virtual reality function of a virtual reality device by a user in a vehicle carries out the following steps:
  • - determination of the vehicle's own movement,
  • - determining the position and orientation of the user's head in the vehicle,
  • - Displaying additional optical visual features in the virtual space generated by the virtual reality device, which includes virtual objects and virtual scenes, with the additional optical visual features not being mapped onto the virtual objects and the virtual scene of the virtual space, and
  • - the optical visual features correspond to the vehicle's own movement and the position and orientation of the user's head in the vehicle.

Durch das visuelle Feedback werden die unangenehmen körperlichen Wahrnehmungen zumindest gemildert, im optimalen Fall verhindert. Dabei bezieht sich das Feedback sowohl auf die Eigenbewegung des Fahrzeugs als auch auf die Position und die Orientierung des Kopfes des Nutzers.The visual feedback at least alleviates the unpleasant physical perceptions, ideally prevents them. The feedback refers both to the vehicle's own movement and to the position and orientation of the user's head.

Vorzugsweise umfasst die Eigenbewegung des Fahrzeugs die Geschwindigkeit einschließlich der Fahrtrichtung und die Beschleunigung des Fahrzeugs einschließlich messbarer Wankbewegungen, Rollbewegungen und Nickbewegungen. Es wird daher das visuelle Feedback als Funktion der genannten Größen erzeugt, so dass der Nutzer in seiner virtuellen Umgebung Signale von der auf ihn einwirkenden realen Umgebung erhält. The vehicle's own movement preferably includes the speed including the direction of travel and the acceleration of the vehicle including measurable rolling movements, rolling movements and pitching movements. The visual feedback is therefore generated as a function of the variables mentioned, so that the user in his virtual environment receives signals from the real environment affecting him.

Weiter bevorzugt wird die Virtual-Reality-Einrichtung durch eine vom Nutzer getragene Virtual-Reality-Brille verwirklicht, die in einer automotiven Umgebung zum Einsatz kommen soll.More preferably, the virtual reality device is implemented by virtual reality glasses worn by the user, which are to be used in an automotive environment.

Weiter bevorzugt werden die optischen visuellen Merkmale durch ein Partikelfeld gebildet, welches sich korrespondierend zur Eigenbewegung des Fahrzeugs im virtuellen Raum fließend fortbewegt. Auf diese Weise kann dem Nutzer die Eigenbewegung des Fahrzeugs vermittelt werden.More preferably, the optical visual features are formed by a particle field, which moves smoothly corresponding to the vehicle's own movement in the virtual space. In this way, the user can be informed of the vehicle's own movement.

Weiter bevorzugt werden die messbaren Wankbewegungen, Rollbewegungen und Nickbewegungen auf ein visuelles Modell in dem virtuellen Raum übertragen, wobei das visuelle Modell durch die optischen visuellen Merkmale gebildet wird.The measurable rolling movements, rolling movements and pitching movements are more preferably based on a visual model in the virtual Transmitted space, the visual model being formed by the optical visual features.

Weiter bevorzugt können die optischen visuellen Merkmale durch ein sich im virtuellen Raum bewegendes Ensemble beziehungsweise Feld von Pfeilen, Strichen und/oder Punkten gebildet werden. Dabei können die optischen visuellen Merkmale in ihrer Art, Anzahl, Strichstärke, Transparenz und Farbe an die Eigenbewegung des Fahrzeugs sowie an die Position und die Orientierung des Kopfes des Nutzers angepasst sein.More preferably, the optical visual features can be formed by an ensemble or field of arrows, lines and/or dots moving in virtual space. The type, number, line thickness, transparency and color of the optical visual features can be adapted to the vehicle's own movement and to the position and orientation of the user's head.

Weiter bevorzugt wird durch die Eigenbewegung des Fahrzeugs die Beobachterposition in dem virtuellen Raum beeinflusst. Ferner kann die Eigenbewegung des Fahrzeugs in der virtuellen Umgebung abgebildet werden. Mit anderen Worten, die Beobachterposition wird durch die Eigenbewegung verändert und/oder die Eigenbewegung spiegelt sich in der virtuellen Umgebung, beispielsweise in den Objekten, wider.More preferably, the observer's position in the virtual space is influenced by the vehicle's own movement. Furthermore, the vehicle's own movement can be mapped in the virtual environment. In other words, the observer's position is changed by their own movement and/or their own movement is reflected in the virtual environment, for example in the objects.

Weiter bevorzugt können Teile der ermittelten Eigenbewegung auf die optischen visuellen Merkmale abgebildet werden, während weitere Teile der ermittelten Eigenbewegung in die virtuellen Objekte und in die virtuelle Szene abgebildet werden können. Dies könnte so ausgeführt werden, dass globale niedrigfrequente Bewegungen des Fahrzeugs auf die künstlichen Merkmale moduliert werden, während sprunghafte Erschütterungen zusätzlich auch auf die Objekte in der Szene abgebildet werden. Auch eine umgekehrte Anwendung kann sich je nach Situation als vorteilhaft erweisen.More preferably, parts of the determined self-motion can be mapped onto the optical visual features, while other parts of the determined self-motion can be mapped into the virtual objects and into the virtual scene. This could be done in such a way that global low-frequency movements of the vehicle are modulated onto the artificial features, while erratic vibrations are additionally also mapped onto the objects in the scene. A reverse application can also prove advantageous depending on the situation.

Entwickler von Virtual-Reality-Anwendungen können solche Objekte und Inhalte der künstlichen Umgebung an einer Schnittstelle besonders dafür ausweisen, dass diese geeignet sind, solche Beschleunigungsmessungen abzubilden. So könnte beispielsweise für eine Anwendung, in der man in einem virtuellen Raum sitzt und durch Fenster die äußere Umgebung betrachtet, das Objekte welches den fernen Himmel abbildet, den sogenannten Skydome, entsprechende Beschleunigungsmessungen als Bewegungen abbilden. Durch den sich bewegenden Himmel würde für den Benutzer in der virtuellen Umgebung wiederum ein visueller Eindruck entstehen, der gut zu seinen Wahrnehmungen passt.Developers of virtual reality applications can identify such objects and content of the artificial environment at an interface as being suitable for depicting such acceleration measurements. For example, for an application in which one sits in a virtual room and looks at the external environment through windows, the objects that depict the distant sky, the so-called skydome, could depict corresponding acceleration measurements as movements. The moving sky would in turn create a visual impression for the user in the virtual environment that fits well with their perceptions.

Die erfindungsgemäße Vorrichtung zur Nutzung der Virtual-Reality-Funktion einer Virtual-Reality-Einrichtung durch einen Nutzer in einem Fahrzeug, wobei die Vorrichtung zur Durchführung des im Vorangegangenen erläuterten Verfahrens eingerichtet und ausgelegt ist, umfasst:

  • - eine Virtual-Reality-Einrichtung,
  • - eine Einrichtung zur Ermittlung der Eigenbewegung des Fahrzeugs,
  • - eine Einrichtung zur Bestimmung der Position und der Orientierung des Kopfes des Nutzers, und
  • - eine Einrichtung zur Erzeugung zusätzlicher optischer visueller Merkmale und deren Einblendung in den von der Virtual-Reality-Einrichtung erzeugten virtuellen Raum, wobei die optischen visuellen Merkmale eine Funktion der Eigenbewegung des Fahrzeugs sowie der Position und Orientierung des Kopfes des Nutzers sind.
The device according to the invention for using the virtual reality function of a virtual reality device by a user in a vehicle, the device being set up and designed to carry out the method explained above comprises:
  • - a virtual reality facility,
  • - a device for determining the vehicle's own movement,
  • - means for determining the position and orientation of the user's head, and
  • - A device for generating additional optical visual features and their display in the virtual space generated by the virtual reality device, wherein the optical visual features are a function of the vehicle's own movement and the position and orientation of the user's head.

Der Gegenstand der Erfindung betrifft zusammenfassend ein System, das die Eigenbewegung und auftretende Beschleunigungen des Fahrzeugs sehr genau misst und dem Nutzer der VR-Brille kombiniert mit dem verfügbaren Wissen über die Position und die Orientierung seines Kopfes im Fahrzeugreferenzsystem geeignete visuelle Inhalte darbietet, anhand derer der Nutzer passende Reize wahrnimmt, die mit den wahrgenommenen Beschleunigungen geeignet korrespondieren.In summary, the subject of the invention relates to a system that measures the vehicle's own movement and accelerations that occur very precisely and, combined with the available knowledge about the position and orientation of his head in the vehicle reference system, presents the user of the VR glasses with suitable visual content, on the basis of which the User perceives suitable stimuli that correspond appropriately with the perceived accelerations.

Dabei sind diverse Ausgestaltungen möglich. So könnte das Fahrerleben durch einen visuellen Effekt in der virtuellen Umgebung derart repräsentiert werden, dass den Betrachter scheinbar ein Partikelfeld umgibt, das sich korrespondierend zur Fahrzeugbewegung sowie der Blickrichtung des Nutzers fließend fortbewegt.Various configurations are possible. For example, the driver's life could be represented by a visual effect in the virtual environment in such a way that the viewer is surrounded by a particle field that moves smoothly in accordance with the vehicle's movement and the user's line of sight.

Es könnte aber auch von einer Fließbewegung Abstand genommen werden und rein das messbare Wanken, Rollen und Nicken der Fahrzeugkabine auf ein statisches visuelles Modell in der virtuellen Umgebung übertragen werden, beispielsweise ein dünn gezeichnetes Koordinatengitter, wobei gegebenenfalls sich die restlichen Inhalte der virtuellen Umgebung entsprechend mitbewegen können.However, a flow movement could also be avoided and the measurable rolling, rolling and pitching of the vehicle cabin transferred to a static visual model in the virtual environment, for example a thinly drawn coordinate grid, with the remaining contents of the virtual environment possibly moving accordingly can.

Ferner könnte das System so ausgestaltet sein, dass es von den sensorisch erfassten Beschleunigungen abgeleitet visuelle Reize darbietet, aber die Beschleunigungen nicht originalgetreu wiedergibt, sondern in abgewandelter Form, die nachweislich ebenso zu einer Milderung des nachteiligen Effektes führt, aber gleichzeitig den Betrachter nicht so stark visuell fordert.Furthermore, the system could be designed in such a way that it presents visual stimuli derived from the sensory detected accelerations, but does not reproduce the accelerations true to the original, but in a modified form, which demonstrably also leads to a mitigation of the disadvantageous effect, but at the same time does not affect the viewer as much visually demands.

Die Vorteile der Lösung liegen insbesondere darin, dass virtuelle Umgebungen während der Fahrt genutzt werden können, ohne dass durch die von außen zugeführte Beschleunigungsreize nachteilige Effekte beim Benutzer entstehen.The advantages of the solution are, in particular, that virtual environments can be used while driving without the user having any adverse effects from external acceleration stimuli.

Der Benutzer erhält intuitiv erfahrbare visuelle Rückmeldungen über den Bewegungszustand des Fahrzeugs, wie Stillstand, Anfahren oder Fahrt, ohne die Immersion in die virtuelle Umgebung aufgeben zu müssen.The user receives intuitive visual feedback about the vehicle's movement status, such as standstill, starting or driving, without having to give up immersion in the virtual environment.

Eine bevorzugte Ausführungsform der Erfindung wird nachfolgend anhand der Zeichnungen erläutert. Dabei zeigt

  • 1a zwei in Fahrtrichtung sitzende Personen in einem Fahrzeug mit VR-Brillen,
  • 1b die Personen der 1a mit nicht mit der Fahrtrichtung übereinstimmenden Sitzrichtungen,
  • 1c die Personen der 1b mit visuellen Hinweisen im Virtual-Reality-Raum,
  • 2a eine virtuelle Arbeitsumgebung ohne visuelle Merkmale im Virtual-Reality-Raum,
  • 2b eine virtuelle Arbeitsumgebung mit visuellen Merkmalen im Virtual-Reality-Raum, und
  • 3 eine schematische Darstellung der Vorrichtung zur Nutzung der Virtual-Reality-Funktion einer Virtual-Reality-Einrichtung.
A preferred embodiment of the invention is explained below with reference to the drawings. while showing
  • 1a two people sitting in the direction of travel in a vehicle with VR glasses,
  • 1b the people of 1a with seat directions that do not match the direction of travel,
  • 1c the people of 1b with visual cues in virtual reality space,
  • 2a a virtual work environment without visual features in virtual reality space,
  • 2 B a virtual work environment with visual features in virtual reality space, and
  • 3 a schematic representation of the device for using the virtual reality function of a virtual reality device.

1a zeigt ein Beispiel zweier sich in einem Fahrzeug 1 befindlichen Personen 2, 3, wobei jede Person 2, 3 jeweils eine VR-Brille 4, 5 trägt, die eine virtuelle Umgebung für die jeweilige Person 2, 3 erzeugt, wobei sich das Fahrzeug 1 in Richtung des Pfeils 8 bewegt. Durch die Benutzung der VR-Brillen 4, 5 während der Fahrt nehmen die Personen 2, 3 somit eine Umgebung wahr, die nicht mit den realen vom Menschen sensorisch gefühlten Umgebungsbewegungen übereinstimmen. Selbst wenn die Personen 2, 3 wie in der 1a in Fahrtrichtung 8 sitzend platziert sind, was durch die eingezeichneten, in Fahrtrichtung 8 zeigenden Blickrichtungen 6, 7 dargestellt wird, kann es schnell zu negativen Effekten kommen. 1a shows an example of two people 2, 3 in a vehicle 1, with each person 2, 3 wearing VR glasses 4, 5, which generate a virtual environment for the respective person 2, 3, with the vehicle 1 in Direction of arrow 8 moves. By using the VR goggles 4, 5 while driving, the people 2, 3 perceive an environment that does not match the real environmental movements sensed by humans. Even if the people are 2, 3 as in the 1a are seated in the direction of travel 8, which is represented by the drawn viewing directions 6, 7 pointing in the direction of travel 8, negative effects can quickly occur.

1b zeigt eine ähnliche Situation wie in 1a, wobei nunmehr die im Fahrzeug 1 sitzenden Personen 2, 3 mit jeweiliger VR-Brille 4, 5 nicht in Fahrtrichtung 8 sitzen. So ist die Blickrichtung 6 der einen Person 2 zur Fahrtrichtung 8 entgegengesetzt, während die Blickrichtung 7 der zweiten Person 3 schräg seitwärts nach vorne ist. Die zu erwartenden negativen Effekte können in dieser Konstellation noch deutlich ausgeprägter und unangenehmer ausfallen. 1b shows a similar situation as in 1a , the persons 2, 3 sitting in the vehicle 1 with the respective VR glasses 4, 5 not sitting in the direction of travel 8. The line of sight 6 of one person 2 is opposite to the direction of travel 8, while the line of sight 7 of the second person 3 is obliquely sideways forward. In this constellation, the expected negative effects can be even more pronounced and unpleasant.

1c zeigt die Situation der 1b mit den beiden Personen 2, 3 in dem Fahrzeug 1 mit der Fahrtrichtung 8 sowie den VR-Brillen 4, 5 mit den Blickrichtungen 6, 7. Zur Abbildung der Bewegung des Fahrzeugs 1 in Richtung 8 können in die durch die VR-Brillen erzeugte virtuelle Realität optische Merkmale künstlich hinzugefügt werden, welche hier als in Richtung der Bewegung 8 des Fahrzeugs zeigende Pfeile 9 dargestellt sind. Da die Pfeile 9 in Richtung der Bewegung zeigen, wird auf diese Weise versucht die Bewegung des Fahrzeugs in die virtuelle Umgebung einzubringen. Auf diese Weise können negative Effekte auf die Personen 2, 3 vermieden oder doch zumindest verringert werden. 1c shows the situation of 1b with the two people 2, 3 in the vehicle 1 with the direction of travel 8 and the VR glasses 4, 5 with the directions of view 6, 7. To map the movement of the vehicle 1 in direction 8 can in the generated by the VR glasses virtual Reality optical features are artificially added, which are shown here as arrows 9 pointing in the direction of movement 8 of the vehicle. Since the arrows 9 point in the direction of movement, an attempt is made in this way to introduce the movement of the vehicle into the virtual environment. In this way, negative effects on people 2, 3 can be avoided or at least reduced.

In 2 ist eine virtuelle Arbeitsumgebung dargestellt, wie sie die in 1b und 1c schräg angeordnete Person 3 mit der Blickrichtung 7 schräg nach rechts oben sehen könnte.In 2 a virtual working environment is shown, as in 1b and 1c obliquely arranged person 3 could see with the line of sight 7 obliquely to the right above.

Dabei zeigt 2a den in 1b beschriebenen Fall der Person 3 mit der schrägen Blickrichtung 7 ohne künstlich hinzugefügte zusätzliche optische Hinweise. Dargestellt in 2a ist eine virtuelle Arbeitsumgebung mit Tastatur 20, den Händen 21, 22 der Person 3 der 1b und einer Vielzahl von Bildschirminhalten 23 bis 30.while showing 2a the in 1b described case of the person 3 with the oblique line of sight 7 without artificially added additional visual information. Shown in 2a is a virtual work environment with a keyboard 20, the hands 21, 22 of the person 3 of the 1b and a variety of screen content 23 to 30.

2b zeigt die gleiche Umgebung wie 2a, d.h. eine virtuelle Arbeitsumgebung mit Tastatur 20, Händen 21, 22 der in der 1 dargestellten Person 3 und Bildschirme 23 bis 30 mit Bildschirminhalten. Zusätzlich werden in die virtuelle Arbeitsumgebung von zur Fahrtrichtung und Fahrtbewegung korrespondierende visuelle Merkmale eingeblendet, im vorliegenden Fall eine Schar von Pfeilen 31. Diese optischen Merkmale 31 können hinsichtlich ihrer Art, Anzahl, Strichstärke, Transparenz und Farbe so angepasst werden, dass sie die Aufgabe der visuellen Rückmeldung erfüllen und gleichzeitig nicht als störend wahrgenommen werden. 2 B shows the same environment as 2a , ie a virtual work environment with keyboard 20, hands 21, 22 in the 1 represented person 3 and screens 23 to 30 with screen contents. In addition, visual features corresponding to the direction of travel and driving movement are displayed in the virtual work environment, in the present case a group of arrows 31. These optical features 31 can be adjusted in terms of their type, number, line width, transparency and color so that they fulfill the task of fulfill visual feedback and at the same time not be perceived as annoying.

Diese optischen Merkmale 31 können auch als Funktion der gemessenen Bewegungen des Fahrzeugs 1 der 1 variiert werden, so dass beispielsweise bei ruhendem Fahrzeug 1 ein Punktnetz dargestellt wird, welches sich beim Anfahren zu einem Liniennetz aufweitet, das wiederum bei schneller Fahrt selbst bewegt durch das Blickfeld gleitet.These optical features 31 can also be used as a function of the measured movements of the vehicle 1 1 be varied, so that, for example, when the vehicle 1 is stationary, a network of points is displayed, which widens when starting to form a network of lines, which in turn slides through the field of vision when driving at high speed.

In einer weiteren Variante können die Messungen der Eigenbewegung des Fahrzeugs 1 sowie der Blickrichtung des Nutzers nicht nur auf die künstlich zur Orientierung hinzugefügten visuellen Merkmale 31 angewendet werden, sondern auch auf die eigentlichen Inhalte der Simulation selbst, also auf die Tastatur 20 und Bildschirme 23 bis 30 mit Bildschirminhalten.In a further variant, the measurements of the movement of the vehicle 1 and the direction of the user's line of sight can be applied not only to the visual features 31 artificially added for orientation, but also to the actual contents of the simulation itself, i.e. to the keyboard 20 and screens 23 to 30 with screen content.

Ferner kann durch derartige Messungen der Fahrzeugbewegung sowohl die Beobachterposition in der künstlichen Welt beeinflusst als auch die künstliche virtuelle Umgebung die Bewegungen des Fahrzeugs 1 abgebildet werden. So könnte zum Beispiel die Tastatur 20 und ein Bildschirm der Bildschirme 23 bis 30 in der virtuellen Umgebung eine genau passende sprunghafte Bewegung ausführen, wenn das Fahrzeug 1 über eine Bodenwelle fährt, so dass der Benutzer 2, 3 auch über diese sichtbaren Bewegungen der Objekte seiner virtuellen Umgebung eine genaue und passende Rückmeldung zu den wahrgenommenen Beschleunigungsreizen erhält.Furthermore, such measurements of the vehicle movement can influence both the observer's position in the artificial world and the artificial virtual environment can influence the movements of the vehicle Vehicle 1 are shown. For example, the keyboard 20 and a screen of the screens 23 to 30 in the virtual environment could perform a precisely fitting erratic movement when the vehicle 1 drives over a bump in the road, so that the user 2, 3 can also see these visible movements of the objects virtual environment receives accurate and appropriate feedback on the perceived acceleration stimuli.

3 zeigt in schematischer Darstellung die Vorrichtung 40 zur Nutzung der Virtuell-Reality-Funktion einer Virtual-Reality-Einrichtung 44 wie eine VR-Brille. Eine Einrichtung 41 ermittelt die Eigenbewegung des Fahrzeugs einschließlich der Geschwindigkeit, der Fahrtrichtung und der Beschleunigungen um die Längsachse, die Querachse und die Hochachse des Fahrzeugs, also die Nick- Wank- und Rollbewegungen, und führt diese Informationen einer Einrichtung 43 zur Erzeugung optischer visueller Merkmale in dem virtuellen Raum zu. Eine weitere Einrichtung 42 ermittelt die Position des Nutzers, d.h. seine Blickrichtung in Bezug zum Fahrzeug. Diese Information wird ebenfalls der Einrichtung 43 zur Erzeugung optischer visueller Merkmale zugeführt, die die optischen visuellen Merkmale der Virtual-Reality-Einrichtung 44, üblicherweise eine VR-Brille, zuführt, so dass die optischen visuellen Merkmale in den virtuellen Raum eingeblendet werden können. 3 shows a schematic representation of the device 40 for using the virtual reality function of a virtual reality device 44 such as VR glasses. A device 41 determines the vehicle's own movement, including the speed, the direction of travel and the accelerations around the longitudinal axis, the lateral axis and the vertical axis of the vehicle, i.e. the pitching, rolling and rolling movements, and feeds this information to a device 43 for generating optical visual features in the virtual space too. A further device 42 determines the position of the user, ie his viewing direction in relation to the vehicle. This information is also supplied to the device 43 for generating optical visual features, which supplies the optical visual features to the virtual reality device 44, usually VR glasses, so that the optical visual features can be displayed in the virtual space.

BezugszeichenlisteReference List

11
Fahrzeugvehicle
22
Personperson
33
Personperson
44
VR-BrilleVR glasses
55
VR-BrilleVR glasses
66
Blickrichtungline of sight
77
Blickrichtungline of sight
88th
Fahrtrichtungdriving direction
99
optische Merkmale optical features
2020
TastaturKeyboard
2121
Handhand
2222
Handhand
2323
Bildschirm mit Bildschirminhaltscreen with screen content
2424
Bildschirm mit Bildschirminhaltscreen with screen content
2525
Bildschirm mit Bildschirminhaltscreen with screen content
2626
Bildschirm mit Bildschirminhaltscreen with screen content
2727
Bildschirm mit Bildschirminhaltscreen with screen content
2828
Bildschirm mit Bildschirminhaltscreen with screen content
2929
Bildschirm mit Bildschirminhaltscreen with screen content
3030
Bildschirm mit Bildschirminhaltscreen with screen content
3131
eingeblendete Pfeile als optische MerkmaleSuperimposed arrows as optical features
4040
Vorrichtung zur Nutzung der Virtual-Reality-EinrichtungDevice for using the virtual reality device
4141
Einrichtung zur Ermittlung der EigenbewegungDevice for determining the proper motion
4242
Einrichtung zur Ermittlung der Position des NutzersDevice for determining the position of the user
4343
Einrichtung zur Erzeugung optischer visueller MerkmaleDevice for generating optical visual characteristics
4444
Virtual-Reality-EinrichtungVirtual Reality Facility

Claims (10)

Verfahren zur Nutzung einer Virtuell-Reality-Funktion einer Virtual-Reality-Einrichtung (4, 5, 44) durch einen Nutzer (2, 3) in einem Fahrzeug (1) mit den Schritten: Ermittlung einer Eigenbewegung des Fahrzeugs (1), Ermittlung einer Position und einer Orientierung des Kopfes des Nutzers (2, 3) im Fahrzeug (1), Einblenden zusätzlicher optischer visueller Merkmale (9, 31) in einen von der Virtual-Reality-Einrichtung erzeugten virtuellen Raum, welcher virtuelle Objekte und eine virtuelle Szene umfasst, wobei die zusätzlichen optischen visuellen Merkmale (9, 31) nicht auf die virtuellen Objekte und die virtuelle Szene des virtuellen Raums abgebildet werden, und die optischen visuellen Merkmale (9, 31) mit der Eigenbewegung des Fahrzeugs (1) sowie der Position und der Orientierung des Kopfes des Nutzers (2, 3) im Fahrzeug (1) korrespondieren.Method for using a virtual reality function of a virtual reality device (4, 5, 44) by a user (2, 3) in a vehicle (1), with the steps: Determination of a movement of the vehicle (1), Determining a position and an orientation of the user's (2, 3) head in the vehicle (1), Fading in additional optical visual features (9, 31) in a virtual space generated by the virtual reality device, which includes virtual objects and a virtual scene the additional optical visual features (9, 31) are not mapped onto the virtual objects and the virtual scene of the virtual space, and the optical visual features (9, 31) correspond to the movement of the vehicle (1) and the position and orientation of the user's (2, 3) head in the vehicle (1). Verfahren nach Anspruch 1, dadurch gekennzeichnet, dass die Eigenbewegung des Fahrzeugs (1) eine Geschwindigkeit einschließlich einer Fahrtrichtung (8) und einer Beschleunigung des Fahrzeugs (1) einschließlich messbarer Wankbewegungen, Rollbewegungen und Nickbewegungen umfasst.procedure after claim 1 , characterized in that the movement of the vehicle (1) includes a speed including a direction of travel (8) and an acceleration of the vehicle (1) including measurable rolling movements, rolling movements and pitching movements. Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass die Virtual-Reality-Einrichtung (4, 5, 44) eine vom Nutzer (2, 3) getragene Virtual-Reality-Brille (4, 5) ist.Method according to one of the preceding claims, characterized in that the virtual reality device (4, 5, 44) is virtual reality glasses (4, 5) worn by the user (2, 3). Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass die optischen visuellen Merkmale (9,31) durch ein Partikelfeld gebildet werden, welches sich korrespondierend zur Eigenbewegung des Fahrzeugs (1) im virtuellen Raum fließend fortbewegt.Method according to one of the preceding claims, characterized in that the optical visual features (9, 31) are formed by a particle field which moves continuously in virtual space corresponding to the movement of the vehicle (1) itself. Verfahren nach einem der Ansprüche 2 oder 3, dadurch gekennzeichnet, dass die messbaren Wankbewegungen, Rollbewegungen und Nickbewegungen auf ein visuelles Modell in dem virtuellen Raum übertragen werden, wobei das visuelle Modell durch die optischen visuellen Merkmale (9, 31) gebildet wird.Procedure according to one of claims 2 or 3 , characterized in that the measurable Rolling movements, rolling movements and pitching movements are transferred to a visual model in the virtual space, the visual model being formed by the optical visual features (9, 31). Verfahren nach einem der Ansprüche 1 bis 3, dadurch gekennzeichnet, dass die optischen visuellen Merkmale (9, 31) durch ein sich im virtuellen Raum bewegendes Ensemble von Pfeilen oder Strichen gebildet werden.Procedure according to one of Claims 1 until 3 , characterized in that the optical visual features (9, 31) are formed by an ensemble of arrows or lines moving in virtual space. Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass die optischen visuellen Merkmale (9, 31) in ihrer Art, Anzahl, Strichstärke, Transparenz und Farbe an die Eigenbewegung des Fahrzeugs (1) sowie die Position und Orientierung des Kopfes des Nutzers (2, 3) angepasst werden.Method according to one of the preceding claims, characterized in that the type, number, line thickness, transparency and color of the optical visual features (9, 31) are adapted to the movement of the vehicle (1) and the position and orientation of the user's head (2nd , 3) to be adjusted. Verfahren nach einem der vorangegangenen Ansprüche, dadurch gekennzeichnet, dass durch die Eigenbewegung des Fahrzeugs (1) eine Beobachterposition in dem virtuellen Raum beeinflusst wird und/oder dass die virtuelle Umgebung die Eigenbewegung abbildet.Method according to one of the preceding claims, characterized in that an observer's position in the virtual space is influenced by the movement of the vehicle (1) and/or that the virtual environment depicts the movement of the vehicle. Verfahren nach Anspruch 8, dadurch gekennzeichnet, dass Teile der ermittelten Eigenbewegung auf die optischen visuellen Merkmale (9, 31) abgebildet werden und dass Teile der ermittelten Eigenbewegung in die virtuellen Objekte und in die virtuelle Szene abgebildet werden.procedure after claim 8 , characterized in that parts of the determined self-motion are mapped onto the optical visual features (9, 31) and that parts of the determined self-motion are mapped into the virtual objects and into the virtual scene. Vorrichtung (40) zur Nutzung der Virtuell-Reality-Funktion einer Virtual-Reality-Einrichtung (4, 5, 44) durch einen Nutzer (2, 3) in einem Fahrzeug (1), wobei die Vorrichtung zur Durchführung des Verfahrens nach einem der vorangegangenen Ansprüche eingerichtet und ausgelegt ist, mit einer Virtual-Reality-Einrichtung (4, 5, 44), einer Einrichtung (41) zur Ermittlung der Eigenbewegung des Fahrzeugs (1), einer Einrichtung (42) zur Ermittlung der Position des Nutzers (2, 3), und einer Einrichtung (43) zur Erzeugung zusätzlicher optischer visueller Merkmale (9, 31) und deren Einblendung im von der Virtual-Reality-Einrichtung (4, 5, 44) erzeugten virtuellen Raum, wobei die optischen visuellen Merkmale (9, 31) eine Funktion der Eigenbewegung des Fahrzeugs (1) und der Position des Nutzers (2, 3) sind.Device (40) for using the virtual reality function of a virtual reality device (4, 5, 44) by a user (2, 3) in a vehicle (1), the device for performing the method according to one of preceding claims is furnished and designed with a virtual reality facility (4, 5, 44), a device (41) for determining the movement of the vehicle (1), a device (42) for determining the position of the user (2, 3), and a device (43) for generating additional optical visual features (9, 31) and displaying them in the virtual space generated by the virtual reality device (4, 5, 44), the optical visual features (9, 31) having a function the movement of the vehicle (1) and the position of the user (2, 3).
DE102017219468.5A 2017-11-01 2017-11-01 Method and device for using a virtual reality device Active DE102017219468B4 (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
DE102017219468.5A DE102017219468B4 (en) 2017-11-01 2017-11-01 Method and device for using a virtual reality device
PCT/EP2018/077644 WO2019086222A1 (en) 2017-11-01 2018-10-10 Method and device for using a virtual reality device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
DE102017219468.5A DE102017219468B4 (en) 2017-11-01 2017-11-01 Method and device for using a virtual reality device

Publications (2)

Publication Number Publication Date
DE102017219468A1 DE102017219468A1 (en) 2019-05-02
DE102017219468B4 true DE102017219468B4 (en) 2023-06-22

Family

ID=63857915

Family Applications (1)

Application Number Title Priority Date Filing Date
DE102017219468.5A Active DE102017219468B4 (en) 2017-11-01 2017-11-01 Method and device for using a virtual reality device

Country Status (2)

Country Link
DE (1) DE102017219468B4 (en)
WO (1) WO2019086222A1 (en)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014220053A1 (en) 2013-10-03 2015-07-23 Honda Motor Co., Ltd. SYSTEM AND METHOD FOR DYNAMIC VEHICLE INTERNAL VIRTUAL REALITY
DE102014009301A1 (en) 2014-06-26 2016-03-03 Audi Ag Method for operating a virtual reality glasses and system with a virtual reality glasses
DE102014015871A1 (en) 2014-10-25 2016-04-28 Audi Ag A display system for a motor vehicle, motor vehicle with a display system and method of operating a display system
WO2016150541A1 (en) 2015-03-26 2016-09-29 Audi Ag Method for operating virtual reality goggles arranged in a motor vehicle, and virtual reality system
WO2016165799A1 (en) 2015-04-11 2016-10-20 Audi Ag Method for operating virtual reality goggles and system comprising virtual reality goggles
WO2016205175A1 (en) 2015-06-15 2016-12-22 Google Inc. Virtual reality content presentation including viewpoint transitions to prevent simulator sickness
US20170075117A1 (en) 2015-09-10 2017-03-16 Connectivity Labs Inc. Sedentary virtual reality method and systems

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6497649B2 (en) * 2001-01-21 2002-12-24 University Of Washington Alleviating motion, simulator, and virtual environmental sickness by presenting visual scene components matched to inner ear vestibular sensations
US20140176296A1 (en) * 2012-12-19 2014-06-26 HeadsUp Technologies, Inc. Methods and systems for managing motion sickness
GB201310367D0 (en) * 2013-06-11 2013-07-24 Sony Comp Entertainment Europe Head-mountable apparatus and systems
US9630631B2 (en) * 2013-10-03 2017-04-25 Honda Motor Co., Ltd. System and method for dynamic in-vehicle virtual reality

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102014220053A1 (en) 2013-10-03 2015-07-23 Honda Motor Co., Ltd. SYSTEM AND METHOD FOR DYNAMIC VEHICLE INTERNAL VIRTUAL REALITY
DE102014009301A1 (en) 2014-06-26 2016-03-03 Audi Ag Method for operating a virtual reality glasses and system with a virtual reality glasses
DE102014015871A1 (en) 2014-10-25 2016-04-28 Audi Ag A display system for a motor vehicle, motor vehicle with a display system and method of operating a display system
WO2016150541A1 (en) 2015-03-26 2016-09-29 Audi Ag Method for operating virtual reality goggles arranged in a motor vehicle, and virtual reality system
WO2016165799A1 (en) 2015-04-11 2016-10-20 Audi Ag Method for operating virtual reality goggles and system comprising virtual reality goggles
WO2016205175A1 (en) 2015-06-15 2016-12-22 Google Inc. Virtual reality content presentation including viewpoint transitions to prevent simulator sickness
US20170075117A1 (en) 2015-09-10 2017-03-16 Connectivity Labs Inc. Sedentary virtual reality method and systems

Also Published As

Publication number Publication date
WO2019086222A1 (en) 2019-05-09
DE102017219468A1 (en) 2019-05-02

Similar Documents

Publication Publication Date Title
EP3394708B1 (en) Method for operating a virtual reality system, and virtual reality system
DE102014019579B4 (en) System and method for operating a display device
EP3837595B1 (en) Control apparatus and method for reducing motion sickness in a user when looking at a media content by means of smart glasses while travelling in a motor vehicle
EP3191919B1 (en) Determining the pose of a head-mounted display
DE102014015871B4 (en) Display system for a motor vehicle, motor vehicle with a display system and method for operating a display system
EP3116737B1 (en) Method and apparatus for providing a graphical user interface in a vehicle
DE102017220268B4 (en) Detection and visualization of system uncertainty when displaying augmented image content in head-up displays
WO2019057439A1 (en) Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a motor vehicle
EP2987057A1 (en) Method for selecting an information source from a plurality of information sources for display on a display of data spectacles
DE102014012723A1 (en) display system
DE102016225268A1 (en) Method and device for operating a display system with data glasses
WO2016165799A1 (en) Method for operating virtual reality goggles and system comprising virtual reality goggles
DE102016225261A1 (en) Method and device for operating a display system with data glasses
DE102014009299A1 (en) Method for operating a virtual reality glasses and system with a virtual reality glasses
DE102020212412B3 (en) Method for operating a head-up display device and a head-up display device
DE102017219468B4 (en) Method and device for using a virtual reality device
EP3296795A1 (en) Method for displaying an image object in a vehicle on a display seen inside and outside the vehicle
DE102019105216A1 (en) Method and device for operating a display system with data glasses
EP3959647B1 (en) Displaying additional information in the correct position on a display unit of a vehicle
EP4005894A1 (en) Method for depicting a virtual element
DE102016225262A1 (en) Method and device for operating a display system with data glasses
WO2020088902A1 (en) Method for avoiding a field of view disturbance for an operator of an object, device for carrying out the method as well as vehicle and computer program
WO2019228780A1 (en) Concept for the control of a display of an augmented reality device
DE102022109576B4 (en) SYSTEM, METHOD AND SOFTWARE FOR DISPLAYING A DISTANCE MARKING
DE102017200325A1 (en) A method of operating a display system with data glasses in a motor vehicle

Legal Events

Date Code Title Description
R012 Request for examination validly filed
R016 Response to examination communication
R018 Grant decision by examination section/examining division
R020 Patent grant now final