DE102020115055A1 - Device and method for displaying augmented reality information - Google Patents
Device and method for displaying augmented reality information Download PDFInfo
- Publication number
- DE102020115055A1 DE102020115055A1 DE102020115055.5A DE102020115055A DE102020115055A1 DE 102020115055 A1 DE102020115055 A1 DE 102020115055A1 DE 102020115055 A DE102020115055 A DE 102020115055A DE 102020115055 A1 DE102020115055 A1 DE 102020115055A1
- Authority
- DE
- Germany
- Prior art keywords
- augmented reality
- display device
- observer
- reality information
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Classifications
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Processing Or Creating Images (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
Um eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen bereitzustellen, bei welcher Erweiterte-Realität-Informationen derart dargestellt werden, dass diese mit der Bewegung eines Beobachters gekoppelt und perfekt an die Umwelt angepasst werden, so dass für den Beobachter ein Eindruck von Tiefe entsteht, wird eine Vorrichtung (100) zur Darstellung von Erweiterte-Realität-Informationen (23) vorgeschlagen, umfassend eine Anzeigevorrichtung (12) mit einem Transparenzgrad größer 0%, eine in einen ersten Halbraum vor der Anzeigevorrichtung (12) gerichtete erste Erfassungsvorrichtung (15), eine in einen zweiten Halbraum hinter der Anzeigevorrichtung (12) gerichtete zweite Erfassungsvorrichtung (19), und eine Rechenvorrichtung (21), wobei die Rechenvorrichtung (21) ausgebildet ist, eine Erweiterte-Realität-Information (23) auszuwählen und einem Objekt die Erweiterte-Realität-Information (23) zuzuordnen und die Anzeigevorrichtung (12) anzuweisen, die dem Objekt (20, 20a, 20b) zugeordnete Erweiterte-Realität-Information (23) anzuzeigen, und wobei die Rechenvorrichtung (21) ausgebildet ist, eine sich bei einer Änderung einer Beobachterposition und/oder einer Objektposition für den Beobachter (17, 17a, 17b) ergebende Bewegungsparallaxe der auf der Anzeigevorrichtung (12) angezeigten Erweiterte-Realität-Information (23) zu bestimmen und die Bewegungsparallaxe auszugleichen.In order to provide a device for displaying augmented reality information, in which augmented reality information is displayed in such a way that it is coupled with the movement of an observer and perfectly adapted to the environment, so that an impression of depth is created for the observer A device (100) for displaying augmented reality information (23) is proposed, comprising a display device (12) with a degree of transparency greater than 0%, a first detection device (15) directed into a first half-space in front of the display device (12) , a second detection device (19) directed into a second half-space behind the display device (12), and a computing device (21), wherein the computing device (21) is designed to select an augmented reality information item (23) and an object the augmented reality -Associate reality information (23) and instruct the display device (12) that the object (20, 20a, 20b) associated augmented reality information (23), and the computing device (21) being designed to display a movement parallax of the movement parallax on the display device (17, 17a, 17b) resulting from a change in an observer's position and / or an object position for the observer ( 12) to determine the displayed augmented reality information (23) and to compensate for the parallax of movement.
Description
Die vorliegende Erfindung betrifft eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen gemäß dem Oberbegriff nach Anspruch 1.The present invention relates to a device for displaying augmented reality information according to the preamble of claim 1.
Ferner betrifft die vorliegende Erfindung ein Transportmittel umfassend eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen, ein Informationssystem umfassend eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen und ein Verfahren zur Darstellung von Erweiterte-Realität-Informationen.The present invention also relates to a means of transport comprising a device for displaying augmented reality information, an information system comprising a device for displaying augmented reality information and a method for displaying augmented reality information.
Technologischer HintergrundTechnological background
Unter der Bezeichnung „Erweiterte Realität“ oder „Augmented Reality“ wird eine computergestützte Darstellung von Informationen verstanden, bei der die reale Welt in Echtzeit durch kontextabhängige virtuelle Komponenten erweitert wird. Diese können in verschiedenen Formen auftreten, wie beispielsweise als zwei- oder dreidimensionale Textinformationen oder zwei- oder dreidimensionale Abbildungen. Die Wahrnehmung eines Nutzers wird so beeinflusst, dass für ihn der Eindruck entsteht, dass sich die virtuellen Komponenten tatsächlich in der realen Welt befinden.The term “augmented reality” is understood to mean a computer-aided display of information in which the real world is expanded in real time by context-dependent virtual components. These can appear in various forms, such as two- or three-dimensional text information or two- or three-dimensional images. A user's perception is influenced in such a way that he gets the impression that the virtual components are actually in the real world.
Aus der
Die
Die
Aus der
Aus dem Stand der Technik sind für die Anwendung in Kraftfahrzeugen sogenannte Erweiterte-Realität-Headup-Displays (HUDs) bekannt, bei denen Erweiterte-Realität-Informationen in das Blickfeld eines Fahrers eines Kraftfahrzeuges eingeblendet werden. Mittels derartiger Headup-Displays sollen dem Fahrer während der Fahrt Informationen bereitgestellt werden, ohne dass der Fahrer den Blick von der Straße abwenden muss. Bei den bekannten Headup-Displays werden die Informationen üblicherweise auf die Windschutzscheibe projiziert, wodurch die Informationen vor dem durch die Windschutzscheibe betrachteten Hintergrund zu schweben scheinen. Diese Art der Darstellung von Informationen kann für den Fahrer irritierend sein und zu einer verstärkten Ablenkung führen.So-called augmented reality head-up displays (HUDs) are known from the prior art for use in motor vehicles, in which augmented reality information is displayed in the field of vision of a driver of a motor vehicle. Such head-up displays are intended to provide the driver with information while driving, without the driver having to take his eyes off the road. In the known head-up displays, the information is usually projected onto the windshield, as a result of which the information appears to float in front of the background viewed through the windshield. This type of presentation of information can be irritating for the driver and lead to an increased distraction.
Ferner sind im Stand der Technik digitale Vorrichtungen zur Darstellung von Werbeanzeigen bekannt, welche im städtischen Raum aufgestellt sind. Auf derartigen Vorrichtungen werden beispielsweise Bilder oder kurze Werbefilme abgespielt. Derartige Vorrichtungen können aufgrund ihrer Größe und der damit einhergehenden Einschränkung des Sichtfelds als störend empfunden werden.Furthermore, digital devices for displaying advertisements which are set up in urban areas are known in the prior art. Images or short advertising films, for example, are played on such devices. Such devices can be perceived as annoying due to their size and the associated restriction of the field of view.
Darstellung der Erfindung: Aufgabe, Lösung, VorteilePresentation of the invention: task, solution, advantages
Der vorliegenden Erfindung liegt die Aufgabe zugrunde, eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen bereitzustellen, bei welcher Erweiterte-Realität-Informationen derart dargestellt werden, dass sich diese mit der Bewegung eines Beobachters gekoppelt verändern und perfekt an die Umwelt angepasst werden, so dass für den Beobachter ein Eindruck von Tiefe und bevorzugt von Mehrdimensionalität der dargestellten Erweiterte-Realität-Informationen entsteht.The present invention is based on the object of providing a device for displaying augmented reality information, in which augmented reality information is displayed in such a way that it changes perfectly, coupled with the movement of an observer can be adapted to the environment, so that the observer gets an impression of depth and preferably of multidimensionality of the augmented reality information presented.
Ferner liegt der Erfindung die Aufgabe zugrunde, ein Transportmittel mit einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen, ein Informationssystem mit einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen und ein Verfahren zur Anzeige von Erweiterte-Realität-Informationen bereitzustellen, mit welchen die vorgenannte Aufgabe gelöst wird.Furthermore, the invention is based on the object of providing a means of transport with a device for displaying augmented reality information, an information system with a device for displaying augmented reality information and a method for displaying augmented reality information, with which the aforementioned problem is solved.
Zur Lösung der der Erfindung zugrundeliegenden Aufgabe wird eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen vorgeschlagen, wobei die Vorrichtung eine Anzeigevorrichtung mit einem Transparenzgrad größer 0 %, eine in einen ersten Halbraum vor der Anzeigevorrichtung gerichtete erste Erfassungsvorrichtung, wobei die erste Erfassungsvorrichtung zur Erfassung von zur Bestimmung einer Beobachterposition eines Beobachters im ersten Halbraum relativ zu der Anzeigevorrichtung geeigneten Daten ausgebildet ist, eine in einen zweiten Halbraum hinter der Anzeigevorrichtung gerichtete zweite Erfassungsvorrichtung, wobei die zweite Erfassungsvorrichtung zur Erfassung von zur Bestimmung einer Objektposition eines Objektes im zweiten Halbraum relativ zu der Anzeigevorrichtung geeigneten Daten ausgebildet ist, und eine Rechenvorrichtung umfasst, wobei die Rechenvorrichtung ausgebildet ist, aus den von der ersten Erfassungsvorrichtung erfassten Daten die Beobachterposition relativ zu der Anzeigevorrichtung zu bestimmen, wobei die Rechenvorrichtung ausgebildet, aus den von der zweiten Erfassungsvorrichtung erfassten Daten die Objektposition relativ zu der Anzeigevorrichtung zu bestimmen, wobei die Rechenvorrichtung ausgebildet ist, eine Erweiterte-Realität-Information auszuwählen und dem Objekt die Erweiterte-Realität-Information zuzuordnen und eine Anzeigeposition der Erweiterte-Realität-Information auf der Anzeigevorrichtung auf Basis der Beobachterposition und der Objektposition zu bestimmen, wobei die Rechenvorrichtung ausgebildet ist, die Anzeigevorrichtung anzuweisen, die dem Objekt zugeordnete Erweiterte-Realität-Information an der Anzeigeposition anzuzeigen, wobei ferner vorgesehen ist, dass die Rechenvorrichtung ausgebildet ist, eine sich bei einer Änderung der Beobachterposition und/oder der Objektposition für den Beobachter ergebende Bewegungsparallaxe der auf der Anzeigevorrichtung angezeigten Erweiterte-Realität-Information zu bestimmen und die Bewegungsparallaxe durch Aktualisierung der Anzeigeposition auszugleichen.To solve the problem on which the invention is based, a device for displaying augmented reality information is proposed, the device being a display device with a degree of transparency greater than 0%, a first detection device directed into a first half-space in front of the display device, the first detection device for detection of data suitable for determining an observer position of an observer in the first half-space relative to the display device, a second detection device directed into a second half-space behind the display device, the second detection device for detecting for determining an object position of an object in the second half-space relative to the Display device suitable data is formed, and comprises a computing device, wherein the computing device is designed to determine the observer position relatively z u of the display device, wherein the computing device is designed to determine the object position relative to the display device from the data captured by the second detection device, the computing device being designed to select augmented reality information and the object the augmented reality information and to determine a display position of the augmented reality information on the display device based on the observer position and the object position, the computing device being designed to instruct the display device to display the augmented reality information assigned to the object at the display position, further provided is that the computing device is designed to determine a movement parallax of the augmented reality information displayed on the display device resulting from a change in the observer position and / or the object position for the observer and to determine the movement Compensate for parallax by updating the display position.
Eine weitere Lösung der der Erfindung zugrundeliegenden Aufgabe besteht in der Bereitstellung eines Transportmittels, insbesondere eines Kraftfahrzeuges, Schienenfahrzeuges, Wasserfahrzeuges oder Luftfahrzeuges, umfassend eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen. Eine noch weitere Lösung der der Erfindung zugrundeliegenden Aufgabe besteht in der Bereitstellung eines Informationssystems umfassend ein Haltevorrichtung und eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen.Another solution to the problem on which the invention is based is to provide a means of transport, in particular a motor vehicle, rail vehicle, watercraft or aircraft, comprising a device for displaying augmented reality information. Yet another solution to the object on which the invention is based is to provide an information system comprising a holding device and a device for displaying augmented reality information.
Die erfindungsgemäße Vorrichtung umfasst eine Anzeigevorrichtung mit einem Transparenzgrad größer 0 %. Die Vorrichtung weist insbesondere im optischen Spektrum einen Transparenzgrad von größer als 0% auf, sodass hinter der Anzeigevorrichtung angeordnete Objekte für einen Beobachter vor der Anzeigevorrichtung zumindest teilweise durch die Anzeigevorrichtung hindurch sichtbar sind.The device according to the invention comprises a display device with a degree of transparency greater than 0%. In particular, the device has a degree of transparency of greater than 0% in the optical spectrum, so that objects arranged behind the display device are at least partially visible to an observer in front of the display device through the display device.
Gemäß der vorliegenden Erfindung ist somit vorgesehen, dass die Darstellung der Erweiterte-Realität-Informationen anders als bei dem aus dem Stand der Technik bekannten Video-Based-Seethrough-Verfahren in einem sogenannten Optical-Based-Seethrough-Verfahren erfolgt. Der Ansatz des Video-Based-Seethrough-Verfahrens kommt häufig bei Smartphones oder Tablets zur Anwendung, bei denen der Nutzer nicht durch das Gerät hindurchsehen kann. Stattdessen nimmt eine dort integrierte Kamera die Umwelt auf und platziert ein Video der Umwelt flächendeckend auf der Anzeigefläche des Geräts. In dieses Video werden dann Erweiterte-Realität-Informationen positions- und ausrichtungsabhängig eingefügt und zusätzlich dargestellt. Im Gegensatz dazu nimmt ein Beobachter beim Optical-Based-Seethrough-Verfahren die Umgebung durch eine transparente Anzeigevorrichtung selber mit den Augen wahr. Auf der Anzeigevorrichtung werden nur die Erweiterte-Realität-Informationen positions- und ausrichtungsabhängig dargestellt und somit automatisch in die direkt wahrgenommene Außenwelt integriert.According to the present invention, it is therefore provided that the representation of the augmented reality information takes place in a so-called optical-based see-through method, unlike in the video-based-see-through method known from the prior art. The video-based see-through approach is often used with smartphones or tablets where the user cannot see through the device. Instead, a camera integrated there records the environment and places a video of the environment covering the entire area on the display surface of the device. Augmented reality information is then inserted into this video depending on the position and orientation and also displayed. In contrast to this, in the case of the optical-based see-through method, an observer perceives the surroundings with his eyes through a transparent display device. Only the augmented reality information is shown on the display device as a function of position and orientation and is thus automatically integrated into the directly perceived outside world.
Die Anzeigevorrichtung weist eine Vorderseite und eine Rückseite auf, wobei zumindest von der Vorderseite aus auf der Anzeigevorrichtung angezeigte Erweiterte-Realität-Informationen sichtbar sind. Eine gedachte, zwischen der Vorderseite und der Rückseite angeordnete Trennebene teilt den die Anzeigevorrichtung umgebenden Raum in zwei Halbräume auf, einen ersten Halbraum vor der Anzeigevorrichtung und einen zweiten Halbraum hinter der Anzeigevorrichtung. Die erste Erfassungsvorrichtung ist in den ersten Halbraum gerichtet. Dies bedeutet, dass die erste Anzeigevorrichtung Daten betreffend den ersten Halbraum erfassen kann. Dabei kann vorgesehen sein, dass die erste Anzeigevorrichtung nur einen Teilbereich, ein Teilvolumen oder ein Teilsegment des ersten Halbraumes erfasst. Die zweite Erfassungsvorrichtung ist in den zweiten Halbraum gerichtet. Dies bedeutet, dass die zweite Anzeigevorrichtung Daten betreffend den zweiten Halbraum erfassen kann. Dabei kann vorgesehen sein, dass die zweite Anzeigevorrichtung nur einen Teilbereich, ein Teilvolumen oder ein Teilsegment des zweiten Halbraumes erfasst.The display device has a front side and a rear side, with augmented reality information displayed on the display device being visible at least from the front side. An imaginary parting plane arranged between the front side and the rear side divides the space surrounding the display device into two half-spaces, a first half-space in front of the display device and a second half-space behind the display device. The first detection device is directed into the first half-space. This means that the first display device has data relating to the first half-space can capture. It can be provided that the first display device only records a partial area, a partial volume or a partial segment of the first half-space. The second detection device is directed into the second half-space. This means that the second display device can acquire data relating to the second half-space. It can be provided that the second display device only records a partial area, a partial volume or a partial segment of the second half-space.
Bevorzugt können auch mehr als eine erste Erfassungsvorrichtung und/oder mehr als eine zweite Erfassungsvorrichtung vorgesehen sein.Preferably, more than one first detection device and / or more than one second detection device can also be provided.
Die Rechenvorrichtung kann beispielsweise als Personal Computer (PC) oder als Mini-PC ausgebildet sein. Die Rechenvorrichtung kann auch als modulare Rechenvorrichtung mit mehreren, insbesondere physischen, Rechenmodulen ausgebildet sein, wobei die Gesamtheit der Rechenmodule die Rechenvorrichtung ausbildet. Beispielsweise kann ein erstes Rechenmodul der Rechenvorrichtung Teil der ersten Erfassungsvorrichtung sein, und ausgebildet sein, die Beobachterposition des Beobachters relativ zu der Anzeigevorrichtung aus den von der ersten Erfassungsvorrichtung erfassten Daten zu bestimmen. Ferner kann ein zweites Rechenmodul der Rechenvorrichtung Teil der zweiten Erfassungsvorrichtung sein, und ausgebildet sein, die Objektposition des Beobachters relativ zu der Anzeigevorrichtung aus den von der zweiten Erfassungsvorrichtung erfassten Daten zu bestimmen. Ein drittes Modul der Rechenvorrichtung kann als Mini-PC oder als Teil eines Mini-PCs ausgebildet sein, und ausgebildet sein, die Erweiterte-Realität-Informationen auszuwählen, die Anzeigeposition der Erweiterte-Realität-Informationen auf der Anzeigevorrichtung zu ermitteln, die Bewegungsparallaxe zu bestimmen und die Anzeigeposition zu aktualisieren. Es ist auch möglich, dass Teile der Rechenvorrichtung als eine externe Rechenvorrichtung ausgebildet sind, oder als in einer Cloud bereitgestellt Rechenleistung zur Verfügung gestellt werden. The computing device can be designed, for example, as a personal computer (PC) or as a mini-PC. The computing device can also be designed as a modular computing device with several, in particular physical, computing modules, the totality of the computing modules forming the computing device. For example, a first computation module of the computing device can be part of the first acquisition device and be designed to determine the observer's position of the observer relative to the display device from the data acquired by the first acquisition device. Furthermore, a second computation module of the computing device can be part of the second acquisition device and be designed to determine the object position of the observer relative to the display device from the data acquired by the second acquisition device. A third module of the computing device can be designed as a mini PC or as part of a mini PC and designed to select the augmented reality information, to determine the display position of the augmented reality information on the display device, to determine the parallax of movement and update the display position. It is also possible that parts of the computing device are designed as an external computing device, or are made available as computing power provided in a cloud.
Eine Bewegungsparallaxe entsteht bei der Bewegung eines Beobachters oder seines Umfelds, wobei sich Abstand und Geschwindigkeit reziprok proportional zueinander verhalten.A movement parallax arises when an observer or his surroundings move, with the distance and speed being reciprocally proportional to each other.
Erfindungsgemäß ist nun vorgesehen, dass ein Beobachter aus der Beobachterposition im ersten Halbraum vor der Anzeigevorrichtung durch die zumindest teiltransparente Anzeigevorrichtung hindurch ein Objekt im zweiten Halbraum hinter der Anzeigevorrichtung betrachten kann und dass eine dem Objekt zugeordnete Erweiterte-Realität-Information auf der Anzeigevorrichtung angezeigt wird. Da die Erweiterte-Realität-Informationen in einer anderen räumlichen Ebene als das durch die Anzeigevorrichtung betrachtete Objekt angeordnet ist, kann es zu einer Bewegungsparallaxe kommen, wenn sich die Beobachterposition oder die Objektposition relativ zu der Anzeigevorrichtung ändert. Erfindungsgemäß ermittelt nun die Rechenvorrichtung aus einer Änderung der Beobachterposition und/oder der Objektposition die sich für den Beobachter ergebende Bewegungsparallaxe und gleicht die Bewegungsparallaxe durch Aktualisierung der Anzeigeposition der Erweiterte-Realität-Information auf der Anzeigevorrichtung aus.According to the invention it is now provided that an observer from the observer position in the first half space in front of the display device can view an object in the second half space behind the display device through the at least partially transparent display device and that augmented reality information assigned to the object is displayed on the display device. Since the augmented reality information is arranged in a different spatial plane than the object viewed by the display device, movement parallax can occur if the observer position or the object position changes relative to the display device. According to the invention, the computing device now determines the resulting movement parallax for the observer from a change in the observer position and / or the object position and compensates for the movement parallax by updating the display position of the augmented reality information on the display device.
Die erfindungsgemäße Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen kann in vielen technischen Bereichen eingesetzt werden. In nicht einschränkender Weise wird im Folgenden die Erfindung anhand der Verwendung der Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem Transportmittel, insbesondere in einem Kraftfahrzeug, einem Schienenfahrzeug, einem Wasserfahrzeug oder einem Luftfahrzeug, und anhand der Verwendung in einem Informationssystem mit einer Haltevorrichtung, wobei die Haltevorrichtung ein Stadtmöbel, ein Aufsteller oder eine Fensterscheibe eines Gebäudes ist, erläutert.The device according to the invention for displaying augmented reality information can be used in many technical areas. In the following, the invention is explained in a non-restrictive manner on the basis of the use of the device for displaying augmented reality information in a means of transport, in particular in a motor vehicle, a rail vehicle, a watercraft or an aircraft, and on the basis of the use in an information system with a holding device , wherein the holding device is a piece of street furniture, a display or a window pane of a building.
Die Erfindung kann in jeglichen geeigneten Transportmitteln, beispielsweise in PKW, LKW, landwirtschaftlichen Maschinen, motorisierten Zwei- und Dreirädern, Schiffen, Zügen, Flugzeugen, Baumaschinen etc., eingesetzt werden, um einem Benutzer des Transportmittels Erweiterte-Realität-Informationen in einer Art und Weise anzuzeigen, dass diese nahtlos in die durch die Anzeigevorrichtung hindurch betrachtete Umgebung eingefügt erscheinen. So kann besonders bevorzugt vorgesehen sein, dass die Vorrichtung zur Darstellung von Erweiterte-Realitäts-Informationen in einem Personenkraftwagen eingesetzt wird. Die Anzeigevorrichtung der Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen ist dann insbesondere bevorzugt in oder an einer Windschutzscheibe und/oder in oder an einer Seitenscheibe des Personenkraftwagens angeordnet.The invention can be used in any suitable means of transport, for example in cars, trucks, agricultural machines, motorized two- and three-wheelers, ships, trains, aircraft, construction machinery, etc., in order to provide a user of the means of transport with augmented reality information in a kind and Way to indicate that these appear seamlessly inserted into the environment viewed through the display device. It can thus be particularly preferably provided that the device is used to display extended reality information in a passenger vehicle. The display device of the device for displaying augmented reality information is then particularly preferably arranged in or on a windshield and / or in or on a side window of the passenger vehicle.
Es ist bekannt, dass die Ablenkung am Steuer die Hauptursache für Unfälle im Straßenverkehr ist. So nutzt jeder zweite Autofahrer während der Fahrt ein Navigationssystem, dessen Informationen entweder auf einem externen Gerät, wie einem Smartphone, oder auf einem internen Display innerhalb des Kraftfahrzeuges angezeigt werden. In jedem Fall muss der Fahrer zur Betrachtung der Navigationsinformationen seinen Blick von der Straße abwenden und auf das Display fokussieren. In dem dafür notwendigen Zeitraum kann das Fahrzeug erhebliche Strecken zurücklegen, während deren der Fahrer sich nicht vollständig auf den Straßenverkehr konzentrieren kann.It is well known that distraction at the wheel is the leading cause of road accidents. Every second driver uses a navigation system while driving, the information of which is displayed either on an external device, such as a smartphone, or on an internal display inside the vehicle. In any case, the driver has to look away from the road to view the navigation information and focus on the display. In the time required for this, the vehicle can cover considerable distances, during which the driver cannot fully concentrate on the road traffic.
Im Stand der Technik bekannte Headup-Displays projizieren Fahrzeuginformationen oder Navigationsinformation auf die Windschutzscheibe. Bei derartigen Systemen scheinen die Informationen jedoch vor dem Straßenbild zu schweben. Wenn sich der Fahrer innerhalb des Kraftfahrzeugs bewegt oder wenn das Kraftfahrzeug selbst in Bewegung ist tritt für die auf die Windschutzscheibe projizierten Informationen eine Bewegungsparallaxe auf, welche bei bekannten Headup-Displays nicht ausgeglichen werden kann. Zudem ist bei bekannten Headup-Displays der Raumwinkel, aus dem die auf die Windschutzscheibe projizierten Informationen sichtbar sind, sehr klein. Daher müssen bei einem Fahrerwechsel die meist sehr teure Linsenoptiken auf den neuen Fahrer eingestellt werden. Desweiteren benötigen bekannte Headup-Displays einen erheblichen Bauraum im Fahrzeug.Head-up displays known in the prior art project vehicle information or navigation information onto the windshield. In such systems, however, the information appears to float in front of the street scene. When the driver moves inside the motor vehicle or when the motor vehicle itself is in motion for the information projected onto the windshield, a movement parallax which cannot be compensated for in known head-up displays. In addition, in known head-up displays, the solid angle from which the information projected onto the windshield is visible is very small. Therefore, when the driver changes, the usually very expensive lens optics have to be adjusted to the new driver. Furthermore, known head-up displays require a considerable amount of space in the vehicle.
Bei der Anwendung der erfindungsgemäßen Vorrichtung in einem Personenkraftwagen kann ein Fahrer vor der Ablenkung am Steuer geschützt werden, indem wichtige Informationen, bevorzugt alle wichtigen Informationen, beispielsweise Navigationsinformationen, direkt im Blickfeld des Fahrers dargestellt, und einem Objekt in der Außenumgebung als Erweiterte-Realität-Informationen zugeordnet werden. Die angezeigten Navigationsinformationen können beispielsweise einer spezifischen Spur, einer Autobahnausfahrt oder einem Verkehrszeichen zugeordnet sein. Da eine Bewegungsparallaxe ausgeglichen wird, schweben die Informationen nicht vor dem Hintergrund, sondern wirken aus Sicht des Fahrers nahtlos in das Straßengeschehen eingefügt. Da die Informationen zudem nicht auf eine Windschutzscheibe projiziert werden, sind die Erweiterte-Realität-Informationen aus einem viel größeren Winkelbereich und bevorzugt von allen Positionen innerhalb des ersten Halbraumes sichtbar, im Gegensatz zu bekannten Headup-Displaysystemen. Insbesondere entfällt das Einstellen einer Linsenoptik bei einem Fahrerwechsel.When the device according to the invention is used in a passenger car, a driver can be protected from being distracted at the wheel by displaying important information, preferably all important information, for example navigation information, directly in the driver's field of vision, and an object in the outside environment as augmented reality. Information can be assigned. The navigation information displayed can be assigned to a specific lane, a motorway exit or a traffic sign, for example. Since movement parallax is compensated for, the information does not float in front of the background, but from the driver's point of view appears to be seamlessly integrated into the road. Since the information is also not projected onto a windshield, the augmented reality information is visible from a much larger angular range and preferably from all positions within the first half-space, in contrast to known head-up display systems. In particular, there is no need to adjust lens optics when the driver changes.
Wird die Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem Informationssystem umfassend eine Haltevorrichtung verwendet, wobei die Anzeigevorrichtung an der Haltevorrichtung angebracht ist, so kann das Informationssystem beispielsweise als Vorrichtung zur Anzeige von Werbeinformationen ausgebildet sein. Die Haltevorrichtung kann bevorzugt als Schaufensterscheibe eines Ladengeschäfts ausgebildet sein, an oder in der die Anzeigevorrichtung angeordnet ist.If the device is used to display augmented reality information in an information system comprising a holding device, the display device being attached to the holding device, the information system can be designed, for example, as a device for displaying advertising information. The holding device can preferably be designed as a shop window pane on or in which the display device is arranged.
Es ist bekannt, sogenannte Digital-Out-of-Home-Werbung (DOOH) in Einkaufszentren, an Bushaltestellen, an Bahnhöfen, Flughäfen, an Straßen, im Kino oder auch an den Schaufenstern oder innerhalb von Ladengeschäften zur Kundenbindung und Kundengewinnung einzusetzen. Nach Schätzungen wird zwar 71 % der DOOH-Werbungen von Menschen wahrgenommen, aber nur 13 % der Beobachter werden zum Kauf der dargestellten Produkte animiert.It is known to use so-called digital out-of-home advertising (DOOH) in shopping centers, at bus stops, at train stations, airports, on streets, in cinemas or also on shop windows or within shops for customer loyalty and customer acquisition. It is estimated that 71% of DOOH advertisements are viewed by people, but only 13% of observers are encouraged to buy the products presented.
Verschiedene Zielgruppen nehmen zudem Werbung und die Umgebung grundsätzlich unterschiedlich wahr, achten auf verschiedene Details oder werden zum Teil durch unterschiedliche Reize zum Kauf eines Produktes angeregt. Aus diesem Grund können nicht alle Menschen mit einer fest definierten Werbung erreicht werden.Different target groups also perceive advertising and the environment fundamentally differently, pay attention to different details or are sometimes stimulated to buy a product by different stimuli. For this reason, not all people can be reached with a clearly defined advertising.
In jüngerer Zeit werden für die Werbung im Außenbereich digitale Displays verwendet, auf welchen Bilder, Videobilder im 2D-Format oder Animationen angezeigt werden können. Derartige Displays weisen oft größere Abmessungen auf und können die Sicht auf ansässige Ladengeschäfte verdecken, was für die Geschäfte nachteilig ist.More recently, digital displays have been used for outdoor advertising, on which images, video images in 2D format or animations can be displayed. Such displays often have larger dimensions and can obscure the view of local shops, which is disadvantageous for the shops.
Bei der Verwendung der erfindungsgemäßen Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem als Vorrichtung zur Anzeige von Werbung ausgebildeten Informationssystem können auf der Anzeigevorrichtung auf einen Beobachter zugeschnittene Werbeinformationen angezeigt werden. Gleichzeitig ist es dem Beobachter möglich, durch die Anzeigevorrichtung hindurchzuschauen und Gegenstände hinter der Anzeigevorrichtung zu erkennen. Die Beeinträchtigung des Blickbereichs wird somit minimiert. Gleichzeitig können die Werbeinformationen für den Beobachter in visuell ansprechender Weise in sein Blickfeld integriert werden, da eine durch die Bewegung des Beobachters entstehende Bewegungsparallaxe der Werbeinformationen ausgeglichen wird. Die Werbeinformationen erscheinen für den Beobachter als in den Hintergrund eingefügte Erweiterte-Realität-Informationen.When using the device according to the invention for displaying augmented reality information in an information system designed as a device for displaying advertising, advertising information tailored to an observer can be displayed on the display device. At the same time it is possible for the observer to look through the display device and to recognize objects behind the display device. The impairment of the viewing area is thus minimized. At the same time, the advertising information for the observer can be integrated into his field of vision in a visually appealing way, since a movement parallax of the advertising information that is caused by the movement of the observer is compensated for. The advertising information appears to the observer as augmented reality information inserted in the background.
Mit Vorteil ist eine Speichervorrichtung vorgesehen, wobei in der Speichervorrichtung eine Vielzahl von Erweiterte-Realität-Informationen abgespeichert ist.A storage device is advantageously provided, a large number of augmented reality information items being stored in the storage device.
Weiter bevorzugt ist die Rechenvorrichtung ausgebildet ist, die ausgewählte Erweiterte-Realität-Information von der Speichervorrichtung herunterzuladen.More preferably, the computing device is designed to download the selected augmented reality information from the storage device.
Die auf der Anzeigevorrichtung angezeigte Erweiterte-Realität-Information kann von der Rechenvorrichtung aus einer Vielzahl von Erweiterte-Realität-Informationen beobachter-, kontext- oder situationsabhängig ausgewählt und auf der Anzeigevorrichtung angezeigt werden. Die Speichervorrichtung kann eine lokale Speichervorrichtung, beispielsweise die Festplatte eines Personal Computers, eine externe Festplatte oder Speichermedium, wie ein USB-Stick, sein. Bei der Speichervorrichtung kann es sich jedoch auch um eine dezentrale Speichervorrichtung im Internet, wie beispielsweise einem sogenannten Cloud-Speicher handeln.The augmented reality information displayed on the display device can be selected by the computing device from a large number of augmented reality information on an observer, context or situation-dependent basis and displayed on the display device. The storage device can be a local storage device, for example the hard drive of a personal computer, an external hard drive or a storage medium such as a USB stick. The storage device can, however, also be a decentralized storage device on the Internet, such as a so-called cloud storage device.
Die Erweiterte-Realität-Informationen können Texte, Bilder, zweidimensionale Objekte oder 3D-Objekte, sowie Bildsequenzen oder Animationen umfassen. Die Erweiterte-Realität-Informationen können statisch oder bewegt, insbesondere animiert sein. Die Erweiterte-Realität-Informationen können Bilder oder Videos sein.The augmented reality information can include texts, images, two-dimensional objects or 3D objects, as well as image sequences or animations. The augmented reality information can be static or moving, especially animated. The augmented reality information can be pictures or videos.
Wird die Vorrichtung in einem Transportmittel wie einem Kraftfahrzeug eingesetzt, kann es sich bei den Erweiterte-Realität-Informationen beispielsweise um Navigationssymbole, Pfeile, Hinweise oder Informationen zu Verkehrszeichen, Informationen aus einem externen Gerät, oder Multimediasystem, Fahrzeuginformationen betreffend die Geschwindigkeit, den Fahrzeugzustand oder Informationen zur Bildung einer Rettungsgasse etc. handeln.If the device is used in a means of transport such as a motor vehicle, the augmented reality information can be, for example, navigation symbols, arrows, instructions or information on traffic signs, information from an external device or multimedia system, vehicle information relating to the speed, the vehicle status or Act information on the formation of a rescue alley, etc.
Wird die Vorrichtung in einem Informationssystem wie beispielsweise in einer Vorrichtung zur Anzeige von Werbung eingesetzt, so kann es sich bei den Erweiterte-Realität-Informationen um Videos, Bilder, Texte mit Werbebotschaften oder um zwei- oder dreidimensionale Repräsentationen von Produkten handeln.If the device is used in an information system such as a device for displaying advertising, the augmented reality information can be videos, images, texts with advertising messages or two- or three-dimensional representations of products.
Bevorzugt ist vorgesehen, dass die auf der Anzeigevorrichtung angezeigte Erweiterte-Realität-Information aus der Beobachterposition eine im Wesentlichen konstante räumliche Beziehung zu dem Objekt aufweist.It is preferably provided that the augmented reality information from the observer position displayed on the display device has an essentially constant spatial relationship to the object.
Mit anderen Worten ist es bevorzugt, dass die Erweiterte-Realität-Information aus Sicht des Beobachters eine scheinbare räumliche Beziehung zu einem für den Beobachter durch die Anzeigevorrichtung sichtbaren Objekt aufweist. Dabei muss die Erweiterte-Realität-Information nicht zwingend aus Sicht des Beobachters scheinbar am Ort des Objektes dargestellt werden.In other words, it is preferred that, from the observer's point of view, the augmented reality information has an apparent spatial relationship to an object that is visible to the observer through the display device. The augmented reality information does not necessarily have to appear at the location of the object from the observer's point of view.
Jedoch ist es grundsätzlich bevorzugt, dass die Erweiterte-Realität-Information aus Sicht des Beobachters räumlich nah am Ort des durch die Anzeigevorrichtung gesehenen Objekts erscheint.However, it is fundamentally preferred that, from the observer's point of view, the augmented reality information appears spatially close to the location of the object seen by the display device.
Bei einem Transportmittel mit einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen können die Erweiterte-Realität-Informationen beispielsweise als Navigationssymbole ausgebildet sein und derart auf der Anzeigevorrichtung angezeigt werden, dass diese für den Fahrer über der Fahrbahn zu schweben scheinen. Beispielsweise können Richtungspfeile auf einer Abbiegespur angezeigt werden, wenn das Navigationssystem einen Abbiegevorgang empfiehlt. Darüber hinaus ist es möglich, dass die Erweiterte-Realität-Informationen Informationen zu Verkehrszeichen sind. Die Erweiterte-Realität-Informationen können dann aus Sicht des Fahrers in unmittelbarer Nähe neben dem durch die Anzeigevorrichtung sichtbaren Verkehrszeichen quasi am Ort des Verkehrszeichens dargestellt werden. Die Erweiterte-Realität-Informationen können jedoch auch bezüglich der durch die Windschutzscheibe sichtbaren Motorhaube eine konstante räumliche Beziehung aufweisen und somit vor dem Fahrzeug in einem konstanten Abstand zu schweben und nahtlos in die Umgebung eingefügt erscheinen.In the case of a means of transport with a device for displaying augmented reality information, the augmented reality information can be embodied as navigation symbols, for example, and displayed on the display device in such a way that they appear to float above the lane for the driver. For example, direction arrows can be displayed on a lane when the navigation system recommends a turning maneuver. In addition, it is possible that the augmented reality information is information about traffic signs. From the driver's point of view, the augmented reality information can then be displayed in the immediate vicinity next to the traffic sign visible by the display device, quasi at the location of the traffic sign. However, the augmented reality information can also have a constant spatial relationship with regard to the engine hood visible through the windshield and thus appear to float in front of the vehicle at a constant distance and appear to be seamlessly inserted into the surroundings.
Bei einem Informationssystem mit einer Vorrichtung zur Anzeige von Erweiterte-Realität-Informationen, können die Erweiterte-Realität-Informationen beispielsweise eine 3D-Darstellung eines beworbenen Produkts sein. Bei dem Objekt kann es sich beispielsweise um einen hinter der Anzeigevorrichtung angeordneten und durch die Anzeigevorrichtung sichtbaren Sockel handeln. Die 3D-Darstellung des Produktes, kann dann aus Sicht des Beobachters derart auf der Anzeigevorrichtung positioniert werden, dass die virtuelle Darstellung des Produkts auf dem Sockel zu stehen scheint.In the case of an information system with a device for displaying augmented reality information, the augmented reality information can be, for example, a 3D representation of an advertised product. The object can be, for example, a base arranged behind the display device and visible through the display device. The 3D representation of the product can then be positioned on the display device from the point of view of the observer in such a way that the virtual representation of the product appears to be on the base.
Mit weiterem Vorteil kann vorgesehen sein, dass die im Wesentlichen konstante räumliche Beziehung der angezeigten Erweiterte-Realität-Information zu dem Objekt einen im Wesentlichen konstanten Abstand der angezeigten Erweiterte-Realität-Informationen zu dem Objekt umfasst.With a further advantage it can be provided that the essentially constant spatial relationship of the displayed augmented reality information to the object comprises an essentially constant distance between the displayed augmented reality information and the object.
Der im Wesentlichen konstante Abstand ist dann ein im Wesentlichen scheinbarer konstanter Abstand.The essentially constant distance is then an essentially apparent constant distance.
Zudem kann vorgesehen sein, dass die im Wesentlichen konstante räumliche Beziehung der angezeigten Erweiterte-Realität-Information zu dem Objekt eine im Wesentlichen konstante räumliche Ausrichtung der angezeigten Erweiterte-Realität-Informationen zu dem Objekt umfasst.In addition, it can be provided that the essentially constant spatial relationship of the displayed augmented reality information to the object comprises an essentially constant spatial orientation of the displayed augmented reality information to the object.
Die im Wesentlichen konstante räumliche Ausrichtung ist dann eine im Wesentlichen scheinbare konstante räumliche Ausrichtung.The essentially constant spatial alignment is then an essentially apparent constant spatial alignment.
Mit anderen Worten kann vorgesehen sein, dass die auf der Anzeigevorrichtung angezeigte Erweiterte-Realität-Information aus Sicht des Beobachters derart in die durch die Anzeigevorrichtung sichtbare Szenerie eingefügt wird, als ob die Erweiterte-Realität-Information eine feste Ausrichtung bezüglich einem Objekt hinter der Anzeigevorrichtung hat. Weiterhin kann die angezeigte Erweiterte-Realität-Information perspektivisch an die Bewegung des Beobachters angepasst werden, sodass die Erweiterte-Realität-Information immer an einem scheinbar festen Ort zu sein scheint.In other words, it can be provided that the augmented reality information displayed on the display device is inserted into the scenery visible by the display device from the viewpoint of the observer, as if the augmented reality information had a fixed orientation with respect to an object behind the display device has. Furthermore, the displayed augmented reality information can be adjusted in perspective to the movement of the observer, so that the augmented reality information always appears to be in a seemingly fixed location.
Wird die Vorrichtung in einem Kraftfahrzeug eingesetzt, so können die Erweiterte-Realität-Informationen, aus Sicht des Beobachters perspektivisch gedreht oder bewegt werden, während sich das Kraftfahrzeug durch die Landschaft bewegt. Es kann so, insbesondere wenn die Erweiterte-Realität-Information ein 3D-Objekt ist, der Eindruck erzeugt werden, dass die Erweiterte-Realität-Information ein natürlicher Bestandteil der Umgebung ist.If the device is used in a motor vehicle, the augmented reality information can be rotated or moved in perspective from the perspective of the observer while the motor vehicle is moving through the landscape. In this way, especially if the augmented reality information is a 3D object, the impression can be created that that the augmented reality information is a natural part of the environment.
Im Falle der Verwendung der Vorrichtung in einem Informationssystem zur Anzeige von Werbung kann vorgesehen sein, dass die Erweiterte-Realität-Information eine 3D-Darstellung eines Produkts ist. Die dreidimensionale virtuelle Darstellung des Produkts kann beispielsweise für einen Beobachter scheinbar auf einem durch die Anzeigevorrichtung sichtbaren Sockel angeordnet sein. Wenn die dreidimensionale Darstellung des Produkts eine im Wesentlichen konstante räumliche Ausrichtung zu dem Sockel aufweist, kann der Beobachter das beworbene Produkt aus verschiedenen Winkeln betrachten in dem sich der Beobachter relativ zur Anzeigevorrichtung bewegt.If the device is used in an information system for displaying advertising, it can be provided that the augmented reality information is a 3D representation of a product. The three-dimensional virtual representation of the product can, for example, appear to be arranged for an observer on a base that is visible through the display device. If the three-dimensional representation of the product has a substantially constant spatial orientation to the base, the observer can view the advertised product from different angles by moving the observer relative to the display device.
Mit weiterem Vorteil kann vorgesehen sein, dass die Beobachterposition eine Kopfposition des Beobachters umfasst oder ist.With a further advantage it can be provided that the observer position comprises or is a head position of the observer.
Ist die Beobachterposition eine Kopfposition des Beobachters, so kann eine Bewegungsparallaxe bezüglich einer Kopfbewegung der auf der Anzeigevorrichtung angezeigten Erweiterte-Realität-Information ausgeglichen werden.If the observer's position is a head position of the observer, a movement parallax with respect to a head movement of the augmented reality information displayed on the display device can be compensated for.
Darüber hinaus kann vorgesehen sein, dass die Beobachterposition eine Augenposition und/oder eine Blickrichtung umfasst.In addition, it can be provided that the observer position includes an eye position and / or a viewing direction.
Bevorzugt ist vorgesehen, dass die Rechenvorrichtung ausgebildet ist, die Beobachterposition und/oder die Änderung der Beobachterposition und/oder die Objektposition und/oder die Änderung der Objektposition mittels Künstliche-Intelligenz-Verfahren und/oder Maschinelles-Lernen-Verfahren und/oder neuronalen Netzen und/oder mittels Haar-Kaskaden und/oder Kalman-Filtern und/oder Optical-Flow-Verfahren zu bestimmen.It is preferably provided that the computing device is designed to control the observer position and / or the change in the observer position and / or the object position and / or the change in the object position by means of artificial intelligence methods and / or machine learning methods and / or neural networks and / or to be determined by means of Haar cascades and / or Kalman filters and / or optical flow methods.
Insbesondere kann für die Bestimmung der Beobachterposition und/oder der Änderung der Beobachterposition und/oder der Objektposition und/oder der Änderung der Objektposition jedes geeignete, von einer Rechenvorrichtung durchführbare Verfahren vorgesehen sein.In particular, any suitable method that can be carried out by a computing device can be provided for determining the observer position and / or the change in the observer position and / or the object position and / or the change in the object position.
Ferner kann die Anzeigevorrichtung ein Bildschirm, insbesondere ein Display, weiter insbesondere ein Foliendisplay, sein.Furthermore, the display device can be a screen, in particular a display, further in particular a film display.
Besonders bevorzugt ist die Anzeigevorrichtung ein Foliendisplay mit einem Transparenzgrad von größer 0 %.The display device is particularly preferably a film display with a degree of transparency of greater than 0%.
Das Foliendisplay kann flexibel ausgebildet sein und unterschiedliche Formen aufweisen. Beispielsweise kann das Display kreisförmig, rechteckig, quadratisch, oval oder dreieckig ausgebildet sein.The film display can be designed to be flexible and can have different shapes. For example, the display can be circular, rectangular, square, oval or triangular.
Das Foliendisplay kann bei der Verwendung der Vorrichtung in einem Kraftfahrzeug an einer Front- bzw. Windschutzscheibe oder an einer Seitenscheibe des Kraftfahrzeuges angebracht sein.When the device is used in a motor vehicle, the film display can be attached to a front or windshield or to a side window of the motor vehicle.
Bei der Anwendung in einem Informationssystem zur Anzeige von Werbung kann das Foliendisplay an einer Fensterscheibe oder an einer Schaufensterscheibe eines Gebäudes, insbesondere eines Ladengeschäfts angeordnet sein.When used in an information system for displaying advertising, the film display can be arranged on a window pane or on a shop window pane of a building, in particular a shop.
Bevorzugt ist vorgesehen, dass die Anzeigevorrichtung eine LED-Anzeigevorrichtung, insbesondere eine OLED-Anzeigevorrichtung oder eine OLED-Anzeigevorrichtung, ist.It is preferably provided that the display device is an LED display device, in particular an OLED display device or an OLED display device.
Mit weiterem Vorteil kann vorgesehen sein, dass die Anzeigevorrichtung eine Dicke von weniger als 10 mm, bevorzugt von weniger als 5 mm, insbesondere bevorzugt von weniger als 2 mm, aufweist.With a further advantage it can be provided that the display device has a thickness of less than 10 mm, preferably less than 5 mm, particularly preferably less than 2 mm.
Derartige, insbesondere als Foliendisplay ausgebildete, Anzeigevorrichtungen können besonders vorteilhafterweise in Transportmitteln und/oder in Informationssystemen eingesetzt werden.Such display devices, in particular designed as a film display, can be used particularly advantageously in means of transport and / or in information systems.
Bevorzugt ist vorgesehen, dass die Anzeigevorrichtung einen Transparenzgrad von mehr als 10 %, bevorzugt von mehr als 20 %, insbesondere bevorzugt von mehr als 40 %, weiter insbesondere bevorzugt von mehr als 50 %, aufweist.It is preferably provided that the display device has a degree of transparency of more than 10%, preferably more than 20%, particularly preferably more than 40%, more particularly preferably more than 50%.
Darüber hinaus kann vorteilhafterweise vorgesehen sein, dass die Helligkeit der Anzeigevorrichtung, insbesondere in Abhängigkeit der herrschenden Lichtverhältnisse und Wetterverhältnisse, von der Rechenvorrichtung eingestellt werden kann.In addition, it can advantageously be provided that the brightness of the display device can be set by the computing device, in particular as a function of the prevailing light and weather conditions.
Somit kann der Beobachter zu jeder Zeit ein klares Bild auf der Anzeigevorrichtung wahrnehmen.Thus, the observer can see a clear image on the display device at all times.
Bevorzugt kann die Anzeigevorrichtung auf einer Glasscheibe oder einer Fensterscheibe angeordnet sein.The display device can preferably be arranged on a glass pane or a window pane.
Bei einer Anwendung einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem Transportmittel wie in einem Kraftfahrzeug kann eine als Foliendisplay ausgebildete Anzeigevorrichtung beispielsweise in das Verbundglas einer Windschutzscheibe oder einer Seitenscheibe integriert werden. Das Foliendisplay kann innerhalb des Fahrzeuges oder außerhalb des Fahrzeuges an der Windschutzscheibe angebracht sein. Das Foliendisplay kann entweder die gesamte Fläche oder nur eine Teilfläche der Windschutzscheibe oder einer Seitenscheibe bedecken. Das Foliendisplay kann bei der Installation durch den Windschutzscheibenhersteller während des Herstellungsprozesses der Scheibe in die Scheibe selbst eingebracht werden oder durch den Automobilhersteller innenseitig an der Scheibe oder durch den Kunden außenseitig an der Scheibe befestigt werden.When using a device for displaying augmented reality information in a means of transport such as in a motor vehicle, a display device configured as a film display can be integrated, for example, into the laminated glass of a windshield or a side window. The film display can be attached to the windshield inside the vehicle or outside the vehicle. The film display can either cover the entire area or only a partial area of the windshield or a side window. The membrane display can be used with the Installation by the windshield manufacturer during the manufacturing process of the windshield in the windshield itself or fixed by the automobile manufacturer on the inside of the windshield or on the outside of the windshield by the customer.
Das Foliendisplay kann zur Verbindung mit der Windschutzscheibe oder Seitenscheibe elektrostatisch befestigt, geklebt, gepresst, mit Wärme behandelt, chemisch behandelt, geschraubt oder mit Magneten verbunden werden.The foil display can be electrostatically attached, glued, pressed, treated with heat, chemically treated, screwed or connected with magnets for connection to the windshield or side window.
Bei einer stabilen mit einer speziellen Beschichtung versehenen Anzeigevorrichtung kann auf die Windschutzscheibe oder die Seitenscheibe verzichtet werden und die Anzeigevorrichtung kann als Ersatz für die Windschutzscheibe oder für die Seitenscheibe eingebaut werden.In the case of a stable display device provided with a special coating, the windshield or the side window can be dispensed with and the display device can be installed as a replacement for the windshield or for the side window.
Bei einer Verwendung der Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem Informationssystem wie beispielsweise einer Vorrichtung zur Anzeige von Werbung kann eine als Foliendisplay ausgebildete Anzeigevorrichtung durch den Scheibenhersteller in eine Schaufensterscheibe eingebracht oder durch einen Ladenbetreiber oder ein Centermanagement von innen oder von außen an der Schaufensterscheibe befestigt werden. Das Foliendisplay kann zur Verbindung mit der Schaufensterscheibe elektrostatisch befestigt, geklebt, gepresst, mit Wärme behandelt, chemisch behandelt, geschraubt oder mit Magneten verbunden werden. Bei einer stabilen mit einer speziellen Beschichtung versehenen Anzeigevorrichtung kann auf die Schaufensterscheibe verzichtet werden und die Anzeigevorrichtung kann als Ersatz für die Schaufensterscheibe eingebaut werden.When using the device for displaying augmented reality information in an information system such as a device for displaying advertising, a display device designed as a film display can be installed in a shop window by the window manufacturer or by a shop operator or center management from inside or outside attached to the shop window. The foil display can be electrostatically attached, glued, pressed, treated with heat, chemically treated, screwed or connected with magnets for connection to the shop window. In the case of a stable display device provided with a special coating, the shop window pane can be dispensed with and the display device can be installed as a replacement for the shop window pane.
Mit besonderem Vorteil ist es bevorzugt vorgesehen, dass die erste Erfassungsvorrichtung und/oder die zweite Erfassungsvorrichtung eine Kamera, insbesondere eine Infrarotkamera, eine stereoskopische Kamera, eine Monochromkamera, eine Farbkamera, eine Tiefenkamera, bevorzugt eine Timeof-Flight-Kamera oder eine Structured-Light-Kamera, ist, und/oder dass die erste Erfassungsvorrichtung und/oder die zweite Erfassungsvorrichtung Sensoren, insbesondere Ultraschallsensoren, Positionssensoren oder Lichtschranken umfasst.It is particularly advantageous that the first detection device and / or the second detection device have a camera, in particular an infrared camera, a stereoscopic camera, a monochrome camera, a color camera, a depth camera, preferably a time-of-flight camera or a structured light -Camera, and / or that the first detection device and / or the second detection device comprises sensors, in particular ultrasonic sensors, position sensors or light barriers.
Bei der Verwendung der Vorrichtung in einem Transportmittel, insbesondere in einem Kraftfahrzeug, ist die erste Erfassungsvorrichtung, insbesondere die erste Kamera, bevorzugt nach innen in den Fahrgastraum gerichtet. Mit der ersten Erfassungsvorrichtung, insbesondere der ersten Kamera, kann die Beobachterposition, insbesondere die Kopfposition, des Fahrers erfasst, insbesondere aufgenommen, werden. Aus den Daten kann die Beobachterposition und insbesondere die Kopfposition des Fahrers ermittelt werden. Die Position der ersten Erfassungsvorrichtung, insbesondere der ersten Kamera, kann relativ frei im Fahrgastraum gewählt werden. Der Fahrzeughersteller kann die erste Erfassungsvorrichtung je nach Kundenwunsch im Innenraum des Transportmittels, insbesondere des Kraftfahrzeuges, anbringen, solange gewährleistet wird, dass der Kopf und insbesondere das Gesicht des Fahrers erfasst werden kann.When using the device in a means of transport, in particular in a motor vehicle, the first detection device, in particular the first camera, is preferably directed inwards into the passenger compartment. With the first detection device, in particular the first camera, the observer position, in particular the head position, of the driver can be detected, in particular recorded. The observer position and in particular the head position of the driver can be determined from the data. The position of the first detection device, in particular the first camera, can be selected relatively freely in the passenger compartment. Depending on the customer's wishes, the vehicle manufacturer can install the first detection device in the interior of the means of transport, in particular the motor vehicle, as long as it is ensured that the head and in particular the face of the driver can be detected.
Mit der zweiten Erfassungsvorrichtung, insbesondere der zweiten Kamera, wird das aktuelle Straßengeschehen aufgenommen, und es können beispielsweise Straßenmarkierungen und Verkehrszeichen erfasst werden. Aus den Daten kann die Objektposition der erfassten Markierungen und Schilder ermittelt werden. Auch bei der zweiten Erfassungsvorrichtung, insbesondere bei der zweiten Kamera, ist die Positionierung bei der Verwendung in einem Transportmittel relativ beliebig, solange das, bevorzugt gesamte, Straßengeschehen erfasst werden kann.The current road situation is recorded with the second recording device, in particular the second camera, and road markings and traffic signs can be recorded, for example. The object position of the recorded markings and signs can be determined from the data. With the second detection device, in particular with the second camera, the positioning is relatively arbitrary when used in a means of transport, as long as the, preferably entire, street events can be detected.
Bei der Verwendung in einem Informationssystem, insbesondere in einer Vorrichtung zur Anzeige von Werbung, kann mit der ersten Erfassungsvorrichtung, insbesondere mit der ersten Kamera, kontinuierlich die aktuelle Beobachterposition, insbesondere die Kopfposition, eines Beobachters erfasst, insbesondere aufgenommen, werden. Mit Hilfe der von der ersten Erfassungsvorrichtung, insbesondere der ersten Kamera, gelieferten Daten, kann die Beobachterposition und insbesondere die Kopfposition des Beobachters ermittelt werden. Bei der Verwendung der Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem Informationssystem kann die Position der Richtung Beobachter gerichteten ersten Erfassungsvorrichtung, insbesondere der ersten Kamera, relativ frei gewählt werden. Ein Ladenbesitzer oder ein Centermanagement kann die Kamera oder die erste Erfassungsvorrichtung je nach Wunsch so anbringen, dass gewährleistet wird, dass das Gesicht des Beobachters aufgenommen werden kann. Bei der Verwendung in einem Informationssystem wird mit der zweiten Erfassungsvorrichtung, insbesondere der zweiten Kamera, das aktuelle Geschehen in der Umwelt erfasst, insbesondere aufgenommen, welches für einen Beobachter vor der Anzeigevorrichtung durch die Anzeigevorrichtung sichtbar ist. Auch die Position für die Anbringung der zweiten Erfassungsvorrichtung, insbesondere der zweiten Kamera, ist relativ frei, solange die, bevorzugt gesamte, Umgebung hinter der Anzeigevorrichtung erfasst werden kann.When used in an information system, in particular in a device for displaying advertising, the current observer position, in particular the head position, of an observer can be continuously recorded, in particular recorded, with the first recording device, in particular the first camera. With the aid of the data supplied by the first detection device, in particular the first camera, the observer's position and in particular the observer's head position can be determined. When using the device for displaying augmented reality information in an information system, the position of the first detection device directed towards the observer, in particular the first camera, can be selected relatively freely. A shopkeeper or a center management can mount the camera or the first detection device as desired in such a way that it is ensured that the face of the observer can be recorded. When used in an information system, the current events in the environment are recorded, in particular recorded, with the second recording device, in particular the second camera, which is visible to an observer in front of the display device through the display device. The position for attaching the second detection device, in particular the second camera, is also relatively free as long as the, preferably entire, surroundings behind the display device can be detected.
Die erste Erfassungsvorrichtung und/oder die zweite Erfassungsvorrichtung, insbesondere die erste Kamera und/oder die zweite Kamera, weist eine hohe Taktfrequenz und/oder eine Auflösung von mindestens HD, bevorzugt von mindestens 1920 x 1080 Bildpunkten, auf.The first detection device and / or the second detection device, in particular the first camera and / or the second camera, has a high clock frequency and / or a resolution of at least HD, preferably at least 1920 x 1080 pixels.
Bevorzugt ist die Rechenvorrichtung ausgebildet, mittels Künstliche-Intelligenz-Verfahren und/oder Maschinelles-Lernen-Verfahren aus den Daten der ersten Erfassungsvorrichtung Beobachterinformationen zu dem Beobachter zu ermitteln und/oder aus den Daten der zweiten Erfassungsvorrichtung Objektinformationen zu dem Objekt zu ermitteln, wobei die Rechenvorrichtung bevorzugt ausgebildet ist, auf Basis der Beobachterinformationen und/oder der Objektinformationen eine Erweiterte-Realität-Information auszuwählen.The computing device is preferably designed to use artificial intelligence methods and / or machine learning methods to determine observer information on the observer from the data of the first detection device and / or to determine object information on the object from the data of the second detection device, the Computing device is preferably designed to select an augmented reality information on the basis of the observer information and / or the object information.
Die Beobachterinformationen werden bevorzugt als personenbezogene, aber anonymisierte Daten ermittelt und/oder verwendet.The observer information is preferably determined and / or used as personal but anonymized data.
Wird die Vorrichtung beispielsweise in einem Transportmittel wie einem Kraftfahrzeug eingesetzt, so können aus den Daten der ersten Erfassungsvorrichtung, insbesondere der ersten Kamera, Informationen über den Fahrer eines Kraftfahrzeugs ermittelt werden. Beispielsweise kann eine Müdigkeitsüberwachung des Fahrers stattfinden. Mit der zweiten Erfassungsvorrichtung, insbesondere der zweiten Kamera, können Objektinformationen zu dem Straßenzustand, zu der vom Fahrzeug gehaltenen Spur, zu Straßenschildern und anderen Objekte im Bereich der Straße ermittelt werden. Dabei wird insbesondere die Bedeutung der Objekte für den Fahrer als Objektinformation ermittelt. Anhand der Objektinformationen zu den Objekten kann dann eine entsprechende Erweiterte-Realität-Information von der Rechenvorrichtung ausgewählt werden und auf der Anzeigevorrichtung angezeigt werden.If the device is used, for example, in a means of transport such as a motor vehicle, information about the driver of a motor vehicle can be determined from the data from the first detection device, in particular the first camera. For example, the driver can be monitored for drowsiness. With the second detection device, in particular the second camera, object information on the road condition, on the lane held by the vehicle, on road signs and other objects in the area of the road can be determined. In particular, the significance of the objects for the driver is determined as object information. Using the object information on the objects, corresponding augmented reality information can then be selected by the computing device and displayed on the display device.
Bei der Verwendung der Vorrichtung in einem Informationssystem können aus den mittels der ersten Erfassungsvorrichtung, insbesondere der ersten Kamera, ermittelten Daten Beobachterinformationen zu einem Beobachter, das heißt einem potenziellen Kunden, ermittelt werden. Beispielsweise kann als Beobachterinformationen ermittelt werden, ob es sich bei dem Beobachter um ein Tier oder um einen Menschen handelt. Ferner können das Geschlecht, das Alter, die Statur, die Hautfarbe, die Frisur, und/oder die Stimmung des Beobachters ermittelt werden. Es können zudem äußere Merkmale wie das Tragen einer Brille, einer Kopfbedeckung oder das Vorhandensein einer Gesichtsbehaarung oder die Art der Kleidung als Beobachterinformationen ermittelt werden. Mit der zweiten Erfassungsvorrichtung, insbesondere der zweiten Kamera, können Daten ermittelt werden, welche von der Rechenvorrichtung zur Ermittlung von Objektinformationen verwendet werden. Bei den Objektinformationen kann es sich beispielsweise um durch die Anzeigevorrichtung sichtbare Gegenstände wie beispielsweise Logos, Markennamen oder Gegenstände wie Tisch, Stühle, etc. handeln.When the device is used in an information system, observer information on an observer, that is to say a potential customer, can be determined from the data determined by means of the first detection device, in particular the first camera. For example, it can be determined as observer information whether the observer is an animal or a person. Furthermore, the sex, age, stature, skin color, hairstyle and / or the mood of the observer can be determined. In addition, external characteristics such as wearing glasses, headgear or the presence of facial hair or the type of clothing can be determined as observer information. With the second detection device, in particular the second camera, data can be determined which are used by the computing device to determine object information. The object information can be, for example, objects such as logos, brand names or objects such as table, chairs, etc., which are visible through the display device.
Unter Berücksichtigung der Objektinformationen und/oder der Beobachterinformationen können dann von der Rechenvorrichtung geeignete Erweiterte-Realität-Informationen ausgewählt werden, welche auf der Anzeigevorrichtung angezeigt werden.Taking into account the object information and / or the observer information, suitable augmented reality information can then be selected by the computing device, which is displayed on the display device.
Insbesondere bei der Verwendung in einem Informationssystem zur Anzeige von Werbeinformationen können unter Berücksichtigung der Beobachterinformationen betreffend Geschlecht, Alter, Stimmung des Beobachters oder äußere Merkmale geeignete Werbeinformationen als Erweiterte-Realität-Informationen ausgewählt werden.Particularly when used in an information system for displaying advertising information, suitable advertising information can be selected as augmented reality information, taking into account the observer information relating to gender, age, mood of the observer or external characteristics.
Eine weitere Lösung der der Erfindung zugrundeliegenden Aufgabe besteht in einem Transportmittel, insbesondere einem Kraftfahrzeug, Schienenfahrzeug, Wasserfahrzeug oder Luftfahrzeug, umfassend eine vorbeschriebene Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen.Another solution to the problem on which the invention is based consists in a means of transport, in particular a motor vehicle, rail vehicle, watercraft or aircraft, comprising a device as described above for displaying augmented reality information.
Sämtliche für die vorbeschriebene Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen erläuterten Merkmale, Ausgestaltungen und Funktionen können analog auch auf das erfindungsgemäße Transportmittel übertragen werden.All of the features, configurations and functions explained for the device described above for displaying augmented reality information can also be transferred analogously to the means of transport according to the invention.
Das Transportmittel ist dabei insbesondere bevorzugt als Kraftfahrzeug und weiter insbesondere als Personenkraftwagen, als Elektrofahrzeug, als batterieelektrisches Fahrzeug oder Hybridelektrokraftfahrzeug ausgebildet. The means of transport is particularly preferably designed as a motor vehicle and more particularly as a passenger vehicle, an electric vehicle, a battery-electric vehicle or a hybrid electric vehicle.
Insbesondere kann das Kraftfahrzeug als autonomes Kraftfahrzeug ausgebildet sein.In particular, the motor vehicle can be designed as an autonomous motor vehicle.
Es ist jedoch auch möglich, dass das Transportmittel als Schiff, Schienenfahrzeug, Flugzeug, Baumaschine, landwirtschaftliche Maschine, LKW, etc. ausgebildet ist.However, it is also possible for the means of transport to be designed as a ship, rail vehicle, aircraft, construction machine, agricultural machine, truck, etc.
Besonders bevorzugt ist jedoch das Transportmittel als ein Kraftfahrzeug ausgebildet. Dabei ist bevorzugt vorgesehen, dass die Anzeigevorrichtung der Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen an einer Scheibe, insbesondere an einer Windschutzscheibe und/oder einer Seitenscheibe, des Kraftfahrzeuges angeordnet ist.However, the means of transport is particularly preferably designed as a motor vehicle. It is preferably provided that the display device of the device for displaying augmented reality information is arranged on a window, in particular on a windshield and / or a side window, of the motor vehicle.
Besonders bevorzugt ist vorgesehen, dass das Transportmittel ein Navigationssystem umfasst, wobei die Rechenvorrichtung ausgebildet ist, auf Basis von Navigationsinformationen des Navigationssystems eine Erweiterte-Realität-Information auszuwählen.Provision is particularly preferably made for the means of transport to include a navigation system, the computing device being designed to select augmented reality information on the basis of navigation information from the navigation system.
Bevorzugt umfassen die Erweiterte-Realität-Informationen 3D-Objekte, beispielsweise Richtungspfeile, welche auf der an einer Windschutzscheibe angebrachten Anzeigevorrichtung derart angezeigt werden, dass sie aus Sicht des Fahrers stets am selben Ort bezüglich der Fahrbahn bleiben, sodass der Fahrer zum Wahrnehmen der Navigationsinformationen seinen Blick nicht von der Fahrbahn nehmen muss.The augmented reality information preferably includes 3D objects, for example direction arrows, which are displayed on the display device attached to a windshield in such a way that, from the driver's point of view, they always remain in the same place with respect to the lane so that the driver can perceive the navigation information You don't have to take your eyes off the road.
Ferner kann bevorzugt vorgesehen sein, dass die Erweiterte-Realität-Informationen Verkehrszeichen betreffen.Furthermore, it can preferably be provided that the augmented reality information relates to traffic signs.
So können beispielsweise Erweiterte-Realität-Informationen auf der Anzeigevorrichtung so dargestellt werden, dass sie aus Sicht des Fahrers beziehungsweise Beobachters scheinbar in unmittelbarer Nähe und in einer konstanten räumlichen Beziehung zu einem durch die Anzeigevorrichtung wahrgenommenen Verkehrszeichen in der Außenumgebung erscheinen. Die Erweiterte-Realität-Informationen können die Bedeutung der Verkehrszeichen betreffen, und beispielsweise Erläuterungen zu den Verkehrszeichen umfassen. Ferner können die Erweiterte-Realität-Informationen so ausgebildet sein, dass sie die Bedeutung bestimmter Verkehrszeichen für den Fahrer hervorheben oder herabsenken. Beispielsweise können die Erweiterte-Realität-Informationen Bilder von Verkehrszeichen sein. Die Bilder der Verkehrszeichen können dann vergrößert so dargestellt werden, dass sie an der Position der tatsächlichen Verkehrszeichen erscheinen. Durch die Vergrößerung kann die Bedeutung der Verkehrszeichen hervorgehoben werden. Zusätzlich kann die Bedeutung der erkannten Verkehrszeichen in Form von zwei- oder dreidimensionalen Symbolen oder Texten auf der Anzeigevorrichtung angezeigt werden.For example, augmented reality information can be displayed on the display device in such a way that, from the perspective of the driver or observer, it appears to appear in the immediate vicinity and in a constant spatial relationship to a traffic sign perceived by the display device in the outside environment. The augmented reality information can relate to the meaning of the traffic signs and include, for example, explanations of the traffic signs. Furthermore, the augmented reality information can be designed in such a way that it emphasizes or lowers the importance of certain traffic signs for the driver. For example, the augmented reality information can be images of traffic signs. The images of the traffic signs can then be enlarged so that they appear at the position of the actual traffic signs. The meaning of the traffic signs can be emphasized by the enlargement. In addition, the meaning of the recognized traffic signs can be displayed in the form of two- or three-dimensional symbols or texts on the display device.
Darüber hinaus können auf der Anzeigevorrichtung der in dem Kraftfahrzeug installierten Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen Informationen zur Fahrzeuggeschwindigkeit, zum Fahrzeugzustand oder Informationen eines Multimediasystems angezeigt werden.In addition, information on the vehicle speed, the vehicle status or information from a multimedia system can be displayed on the display device of the device installed in the motor vehicle for displaying augmented reality information.
Mit weiterem Vorteil ist vorgesehen, dass die Erweiterte-Realität-Information Informationen zur Bildung einer Rettungsgasse betreffen.It is provided with a further advantage that the augmented reality information relate to information for the formation of an emergency lane.
Wird beispielsweise von einem Fahrzeugsystem, beispielsweise durch Integration eines Navigationssystem mit einem TMC-System oder einem Echtzeitverkehrsinformationssystem und/oder durch die Analyse der aufgenommenen Daten der zweiten Erfassungseinrichtung, die Notwendigkeit zur Bildung einer Rettungsgasse festgestellt, so können dem Fahrer auf der Anzeigevorrichtung Hinweise in Form von Pfeilen, angezeigten Fahrlinien oder - spuren oder ähnlichem gegeben werden, wie er sich zur Bildung einer Rettungsgasse zu verhalten hat.If, for example, a vehicle system, for example by integrating a navigation system with a TMC system or a real-time traffic information system and / or by analyzing the recorded data of the second detection device, determines the need to create an emergency lane, the driver can receive information on the display device in the form of are given by arrows, indicated driving lines or lanes or the like, how he has to behave in order to form an emergency lane.
Mit besonderem Vorteil weist die Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen des Transportmittels eine Schnittstelle zu einer, bevorzugt tragbaren, Datenverarbeitungsvorrichtung, und/oder zu einem Multimediasystem auf.The device for displaying augmented reality information of the means of transport particularly advantageously has an interface to a, preferably portable, data processing device and / or to a multimedia system.
Bei der tragbaren Datenverarbeitungsvorrichtung kann es sich um ein Handy, ein Tablet, einen Laptop oder ähnliches handeln. Insbesondere kann auf einem Handy, Tablet, etc. eine Navigationssoftware ausgeführt werden, deren Navigationsinformationen über die Schnittstelle der Rechenvorrichtung übermittelt werden und anhand derer geeignete Erweiterte-Realität-Informationen ausgewählt und auf der Anzeigevorrichtung angezeigt werden.The portable data processing device can be a cell phone, a tablet, a laptop or the like. In particular, navigation software can be executed on a cell phone, tablet, etc., the navigation information of which is transmitted via the interface of the computing device and on the basis of which suitable augmented reality information is selected and displayed on the display device.
Bevorzugt ist die Rechenvorrichtung ausgebildet, eine externe tragbare Datenverarbeitungsvorrichtung zu finden und sich automatisch mit der externe tragbare Datenverarbeitungsvorrichtung zu verbinden.The computing device is preferably designed to find an external portable data processing device and to automatically connect to the external portable data processing device.
Handelt es sich bei dem Kraftfahrzeug zudem um ein autonom fahrendes Fahrzeug, so kann vorgesehen sein, dass auf der Anzeigevorrichtung, welche beispielsweise an einer Windschutzscheibe oder einer Seitenscheibe des Kraftfahrzeuges angeordnet ist, Informationen oder Daten oder Bilder von einer über die Schnittstelle mit der Vorrichtung verbundenen tragbaren Datenverarbeitungsvorrichtung angezeigt werden. Diese Daten können beispielsweise Filme, Bilder etc. enthalten. So kann beispielsweise eine Geschäftsfrau oder ein Geschäftsmann in dem autonom fahrenden Fahrzeug während der Fahrt auf der Anzeigevorrichtung eine Präsentation erstellen oder mit einer Textverarbeitungssoftware arbeiten. Der Vorteil besteht darin, dass die Person bei der Arbeit geradeaus auf den Horizont schauen kann, da die Anzeigevorrichtung einen Transparenzgrad von größer als 0% aufweist.If the motor vehicle is also an autonomously driving vehicle, it can be provided that on the display device, which is arranged, for example, on a windshield or a side window of the motor vehicle, information or data or images from a device connected to the device via the interface portable data processing device are displayed. This data can contain films, pictures, etc., for example. For example, a business woman or a businessman can create a presentation in the autonomous vehicle while driving on the display device or work with word processing software. The advantage is that the person can look straight ahead at the horizon while working, since the display device has a degree of transparency of greater than 0%.
Eine weitere Lösung der der Erfindung zugrundeliegenden Aufgabe besteht in der Bereitstellung eines Informationssystems umfassend eine Haltevorrichtung und eine vorbeschriebene Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen, wobei die Anzeigevorrichtung der Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen an der Haltevorrichtung angebracht ist, wobei ferner vorgesehen ist, dass die Haltevorrichtung ein Stadtmöbel oder ein Aufsteller oder eine Fensterscheibe eines Gebäudes ist.Another solution to the problem on which the invention is based is to provide an information system comprising a holding device and a device as described above for displaying augmented reality information, the display device of the device for displaying augmented reality information being attached to the holding device, with It is further provided that the holding device is a piece of street furniture or a stand or a window pane of a building.
So kann die Haltevorrichtung beispielsweise eine Bushaltestelle oder ein Aufsteller in einem Wartebereich eines öffentlichen Personennahverkehrs sein. Es ist zudem möglich, dass die Haltevorrichtung ein Aufsteller wie beispielsweise eine Litfaßsäule oder ähnliches ist. Ferner kann vorgesehen sein, dass die Haltevorrichtung eine Fensterscheibe eines Gebäudes, insbesondere eine Schaufensterscheibe eines Ladengeschäftes, ist. Darüber hinaus kann vorgesehen sein, dass die Haltevorrichtung ein Aufsteller in einem Museum, an einem Konzertveranstaltungsort, in einem Zoo etc. ist. Über die an der Haltevorrichtung angebrachte Anzeigevorrichtung können einem Museumsbesucher, einem Konzertbesucher, einem Zoobesucher etc. Erweiterte-Realität-Informationen zu den Ausstellungsstücken, der Vorführung, den Tieren etc. übermittelt werden.For example, the holding device can be a bus stop or a stand in a waiting area of a local public transport system. It is also possible that the Holding device is a stand such as an advertising column or the like. Furthermore, it can be provided that the holding device is a window pane in a building, in particular a shop window pane in a shop. In addition, it can be provided that the holding device is a display in a museum, at a concert venue, in a zoo, etc. Augmented reality information on the exhibits, the demonstration, the animals, etc. can be transmitted to a museum visitor, a concert visitor, a zoo visitor, etc. via the display device attached to the holding device.
Besonders bevorzugt ist jedoch vorgesehen, dass die Haltevorrichtung eine Schaufensterscheibe eines Ladengeschäftes ist.However, it is particularly preferably provided that the holding device is a shop window pane.
Sämtliche für die vorbeschriebene Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen erläuterten Merkmale, Ausgestaltungen und Funktionen können analog auch auf das erfindungsgemäße Informationssystem übertragen werden.All of the features, configurations and functions explained for the device described above for displaying augmented reality information can also be transferred analogously to the information system according to the invention.
Eine noch weitere Lösung der der Erfindung zugrundeliegenden Aufgabe besteht in der Bereitstellung eines Verfahrens zur Anzeige von Erweiterte-Realität-Informationen auf eine Anzeigevorrichtung, wobei die Anzeigevorrichtung einen Transparenzgrad größer 0 % aufweist, wobei ein Beobachter in einem ersten Halbraum vor der Anzeigevorrichtung angeordnet ist, wobei zur Erfassung von zur Bestimmung einer Beobachterposition des Beobachters im ersten Halbraum relativ zu der Anzeigevorrichtung geeignete Daten von einer in den ersten Halbraum gerichteten ersten Erfassungsvorrichtung erfasst werden, wobei ein Objekt in einem zweiten Halbraum hinter der Anzeigevorrichtung angeordnet ist, wobei zur Bestimmung einer Objektposition des Objektes im zweiten Halbraum relativ zu der Anzeigevorrichtung geeignete Daten von einer in den zweiten Halbraum gerichteten zweiten Erfassungsvorrichtung erfasst werden, wobei von einer Rechenvorrichtung aus den von der ersten Erfassungsvorrichtung erfassten Daten die Beobachterposition relativ zu der Anzeigevorrichtung bestimmt wird, und wobei von der Rechenvorrichtung aus den von der zweiten Erfassungsvorrichtung erfassten Daten die Objektposition relativ zu der Anzeigevorrichtung bestimmt wird, und wobei von der Rechenvorrichtung eine Erweiterte-Realität-Information ausgewählt und dem Objekt zugeordnet wird, wobei von der Rechenvorrichtung eine Anzeigeposition der Erweiterte-Realität-Informationen auf der Anzeigevorrichtung auf Basis der Beobachterposition und der Objektposition bestimmt wird, wobei die Anzeigevorrichtung von der Rechenvorrichtung angewiesen wird, die dem Objekt zugeordnete Erweiterte-Realität-Information an der Anzeigeposition anzuzeigen, wobei ferner vorgesehen ist, dass die Rechenvorrichtung eine sich bei einer Änderung der Beobachterposition und/oder der Objektposition für den Beobachter ergebende Bewegungsparallaxe der auf der Anzeigevorrichtung angezeigten Erweiterte-Realität-Informationen bestimmt und die Bewegungsparallaxe durch die Aktualisierung der Anzeigeposition ausgleicht.Yet another solution to the problem on which the invention is based is to provide a method for displaying augmented reality information on a display device, the display device having a degree of transparency greater than 0%, with an observer being arranged in a first half-space in front of the display device, wherein data suitable for determining an observer's position in the first half-space relative to the display device are captured by a first detection device directed into the first half-space, an object being arranged in a second half-space behind the display device Object in the second half-space relative to the display device suitable data can be detected by a second detection device directed into the second half-space, the data detected by the first detection device being used by a computing device Observer position is determined relative to the display device, and wherein the object position relative to the display device is determined by the computing device from the data captured by the second detection device, and augmented reality information is selected by the computing device and assigned to the object, from The computing device determines a display position of the augmented reality information on the display device on the basis of the observer position and the object position, the display device being instructed by the computing device to display the augmented reality information assigned to the object at the display position, with further provision being made that the computing device determines a movement parallax of the augmented reality information displayed on the display device resulting from a change in the observer position and / or the object position for the observer, and the movement parallax e compensates for by updating the display position.
Sämtliche im Zusammenhang mit der vorbeschriebenen Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen erläuterten Merkmale, Ausgestaltungen und Funktionen können in analoger Weise auch auf das Verfahren zur Darstellung von Erweiterte-Realität-Informationen übertragen werden.All of the features, configurations and functions explained in connection with the above-described device for displaying augmented reality information can also be transferred in an analogous manner to the method for displaying augmented reality information.
FigurenlisteFigure list
Die Erfindung wird nachstehend näher anhand der beigefügten Figuren erläutert. Es zeigen:
-
1 eine Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem als Kraftfahrzeug, -
2 einen erstes Anwendungsbeispiel einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem als Kraftfahrzeug, -
3 einen zweites Anwendungsbeispiel einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem als Kraftfahrzeug, -
4 einen drittes Anwendungsbeispiel einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen in einem als Kraftfahrzeug, -
5 eine erstes Informationssystem mit einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen, und -
6 eine zweites Informationssystem mit einer Vorrichtung zur Darstellung von Erweiterte-Realität-Informationen.
-
1 a device for displaying augmented reality information in a motor vehicle, -
2 a first application example of a device for displaying augmented reality information in a motor vehicle, -
3 a second application example of a device for displaying augmented reality information in a motor vehicle, -
4th a third application example of a device for displaying augmented reality information in a motor vehicle, -
5 a first information system with a device for displaying augmented reality information, and -
6th a second information system with a device for displaying augmented reality information.
Ausführliche Beschreibung der FigurenDetailed description of the figures
Die Vorrichtung
Die Vorrichtung
Die Rechenvorrichtung
Während das Kraftfahrzeug
In
Ein noch weiteres Anwendungsbeispiel der Vorrichtung
In der
Ein weiteres Anwendungsbeispiel ist in
BezugszeichenlisteList of reference symbols
- 100100
- Vorrichtung zur Darstellung von Erweiterte-Realität-InformationenDevice for displaying augmented reality information
- 200200
- TransportmittelMode of Transport
- 300300
- Informationssystem Information system
- 1010
- KraftfahrzeugMotor vehicle
- 1111th
- FoliendisplayFoil display
- 1212th
- AnzeigevorrichtungDisplay device
- 1313th
- WindschutzscheibeWindshield
- 1414th
- Erste KameraFirst camera
- 1515th
- Erste ErfassungsvorrichtungFirst detection device
- 1616
- FahrgastraumPassenger compartment
- 1717th
- Beobachterobserver
- 17a17a
- Fahrerdriver
- 17b17b
- BeobachterinObserver
- 1818th
- Zweite KameraSecond camera
- 1919th
- Zweite ErfassungsvorrichtungSecond detection device
- 2020th
- Objektobject
- 20a20a
- VerkehrszeichenTraffic signs
- 20b20b
- Sockelbase
- 2121
- RechenvorrichtungComputing device
- 21a21a
- Mini-PCMini pc
- 2222nd
- SpeichervorrichtungStorage device
- 2323
- Erweiterte-Realität-InformationAugmented Reality Information
- 23a23a
- Scheinbares BildApparent picture
- 2424
- AnzeigepositionDisplay position
- 2525th
- Schnittstelleinterface
- 2626th
- Externe DatenverarbeitungsvorrichtungExternal data processing device
- 26a26a
-
Smartphone 26a
Smartphone 26a - 2727
- StraßeStreet
- 27a27a
- Spurtrack
- 28a28a
- Fahrzeugvehicle
- 28b28b
- Fahrzeugvehicle
- 28c28c
- Fahrzeugvehicle
- 28d28d
- Fahrzeugvehicle
- 2929
- StraßenrandRoadside
- 30a30a
- Rahmenframework
- 30b30b
- Schriftlicher HinweisWritten notice
- 31a31a
- RichtungspfeilDirection arrow
- 31b31b
- Schriftlicher HinweiseWritten notes
- 3232
- FahrbahnmarkierungLane marking
- 33a33a
- LeitlinieGuideline
- 33b33b
- RichtungspfeilDirection arrow
- 33c33c
- Schriftlicher HinweisWritten notice
- 3434
- Rahmenframework
- 3535
- HaltevorrichtungHolding device
- 3636
- Vorderseitefront
- 3737
- Rückseiteback
- 3838
- 3D-Darstellung3d illustration
- 3939
- SchaufensterscheibeShop window
- 4040
- LadengeschäftRetail store
ZITATE ENTHALTEN IN DER BESCHREIBUNGQUOTES INCLUDED IN THE DESCRIPTION
Diese Liste der vom Anmelder aufgeführten Dokumente wurde automatisiert erzeugt und ist ausschließlich zur besseren Information des Lesers aufgenommen. Die Liste ist nicht Bestandteil der deutschen Patent- bzw. Gebrauchsmusteranmeldung. Das DPMA übernimmt keinerlei Haftung für etwaige Fehler oder Auslassungen.This list of the documents listed by the applicant was generated automatically and is included solely for the better information of the reader. The list is not part of the German patent or utility model application. The DPMA assumes no liability for any errors or omissions.
Zitierte PatentliteraturPatent literature cited
- US 2017/0294046 A1 [0004]US 2017/0294046 A1 [0004]
- WO 2013/170303 [0005]WO 2013/170303 [0005]
- WO 2015/077766 A1 [0006]WO 2015/077766 A1 [0006]
- DE 102017214225 B3 [0007]DE 102017214225 B3 [0007]
Claims (10)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102020115055.5A DE102020115055A1 (en) | 2020-06-05 | 2020-06-05 | Device and method for displaying augmented reality information |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102020115055.5A DE102020115055A1 (en) | 2020-06-05 | 2020-06-05 | Device and method for displaying augmented reality information |
Publications (1)
Publication Number | Publication Date |
---|---|
DE102020115055A1 true DE102020115055A1 (en) | 2021-12-09 |
Family
ID=78605186
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
DE102020115055.5A Withdrawn DE102020115055A1 (en) | 2020-06-05 | 2020-06-05 | Device and method for displaying augmented reality information |
Country Status (1)
Country | Link |
---|---|
DE (1) | DE102020115055A1 (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102022116904A1 (en) | 2022-07-06 | 2024-01-11 | Cariad Se | METHOD FOR OPERATING A RESCUE ASSISTANT FOR A MOTOR VEHICLE USING A MOBILE TERMINAL, COMPUTER PROGRAM PRODUCT AND MOBILE TERMINAL |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013170303A1 (en) | 2012-05-17 | 2013-11-21 | Coca-Cola Amatil (Aust) Pty Limited | Interactive display system |
WO2015077766A1 (en) | 2013-11-25 | 2015-05-28 | Pcms Holdings, Inc. | Systems and methods for providing augmenting reality information associated with signage |
US20170294046A1 (en) | 2016-04-11 | 2017-10-12 | Fujitsu Ten Limited | Augmented reality information displaying device and augmented reality information displaying method |
DE102017214225B3 (en) | 2017-08-15 | 2018-11-22 | Volkswagen Aktiengesellschaft | Method for operating a driver assistance system of a motor vehicle and motor vehicle |
-
2020
- 2020-06-05 DE DE102020115055.5A patent/DE102020115055A1/en not_active Withdrawn
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2013170303A1 (en) | 2012-05-17 | 2013-11-21 | Coca-Cola Amatil (Aust) Pty Limited | Interactive display system |
WO2015077766A1 (en) | 2013-11-25 | 2015-05-28 | Pcms Holdings, Inc. | Systems and methods for providing augmenting reality information associated with signage |
US20170294046A1 (en) | 2016-04-11 | 2017-10-12 | Fujitsu Ten Limited | Augmented reality information displaying device and augmented reality information displaying method |
DE102017214225B3 (en) | 2017-08-15 | 2018-11-22 | Volkswagen Aktiengesellschaft | Method for operating a driver assistance system of a motor vehicle and motor vehicle |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102022116904A1 (en) | 2022-07-06 | 2024-01-11 | Cariad Se | METHOD FOR OPERATING A RESCUE ASSISTANT FOR A MOTOR VEHICLE USING A MOBILE TERMINAL, COMPUTER PROGRAM PRODUCT AND MOBILE TERMINAL |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102015006612B4 (en) | Method for operating data glasses in a motor vehicle and system with data glasses | |
DE102017216100A1 (en) | A method, apparatus and computer readable storage medium having instructions for controlling a display of an augmented reality display device for a motor vehicle | |
DE102017216774B4 (en) | A method, apparatus, computer readable storage medium and motor vehicle having instructions for controlling a display of an augmented reality head-up display device for a motor vehicle | |
DE102014219575A1 (en) | Improved 3-dimensional (3-D) navigation | |
DE102013016244A1 (en) | Method and device for augmented presentation | |
DE102018203927A1 (en) | A method, apparatus and computer readable storage medium having instructions for controlling a display of an augmented reality display device for a motor vehicle | |
EP3695266B1 (en) | Method for operating a display device in a motor vehicle | |
DE112017001545T5 (en) | VIRTUAL OVERLAY SYSTEM AND PROCESS FOR COVERED OBJECTS | |
DE102015216127A1 (en) | Method for eye tracking in a vehicle with head-up display | |
DE102017116702A1 (en) | Method for providing an indication in a motor vehicle, and motor vehicle | |
DE102014208310A1 (en) | Driver assistance system for displaying an augmented reality | |
DE102021124168A1 (en) | INTEGRATED AUGMENTED REALITY SYSTEM FOR SHARING AUGMENTED REALITY CONTENT BETWEEN VEHICLE OCCUPANTS | |
DE102017216775A1 (en) | A method, apparatus and computer readable storage medium having instructions for controlling a display of an augmented reality head-up display device for a motor vehicle | |
DE102017215161A1 (en) | Method and device for selecting an environment object in the environment of a vehicle | |
DE112019000329T5 (en) | DISPLAY SYSTEM, MOVING OBJECT AND DESIGN PROCEDURE | |
DE102016014712A1 (en) | Vehicle and method for outputting information to a vehicle environment | |
DE102018204325A1 (en) | Method, device and means of transport for a kinetosevermeidende, virtual representation of multimedia content in a means of transport | |
EP3361355A1 (en) | Method, device and a computer readable storage medium with instructions for controlling a display of an augmented reality heads up display device | |
DE102012018556B4 (en) | Assistance system to enable an extended foresight for subsequent road users | |
DE102020115055A1 (en) | Device and method for displaying augmented reality information | |
DE102013016241A1 (en) | Method and device for augmented presentation | |
WO2019174862A1 (en) | Method and device for providing information using an augmented reality device, method and device for providing information for controlling a display of an augmented reality device, method and device for controlling a display of an augmented reality device, and computer-readable storage medium with instructions for carrying out the method | |
DE102014208048A1 (en) | System and method for personalizing an exhibition space | |
WO2019154673A1 (en) | Method, device and computer-readable storage medium with instructions for controlling a display of an augmented-reality head-up display device for a motor vehicle | |
EP3959647B1 (en) | Displaying additional information in the correct position on a display unit of a vehicle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
R012 | Request for examination validly filed | ||
R119 | Application deemed withdrawn, or ip right lapsed, due to non-payment of renewal fee |