WO2018127330A1 - Verfahren und vorrichtung zur durchführung des verfahrens in einem fahrzeug - Google Patents

Verfahren und vorrichtung zur durchführung des verfahrens in einem fahrzeug Download PDF

Info

Publication number
WO2018127330A1
WO2018127330A1 PCT/EP2017/080974 EP2017080974W WO2018127330A1 WO 2018127330 A1 WO2018127330 A1 WO 2018127330A1 EP 2017080974 W EP2017080974 W EP 2017080974W WO 2018127330 A1 WO2018127330 A1 WO 2018127330A1
Authority
WO
WIPO (PCT)
Prior art keywords
driver
vehicle
monitoring device
detected
examination
Prior art date
Application number
PCT/EP2017/080974
Other languages
English (en)
French (fr)
Inventor
Tilman Otto
Gerhard Zinser
Original Assignee
Heidelberg Engineering Gmbh
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Heidelberg Engineering Gmbh filed Critical Heidelberg Engineering Gmbh
Priority to US16/475,357 priority Critical patent/US11931103B2/en
Priority to EP17805217.1A priority patent/EP3566090A1/de
Priority to JP2019547786A priority patent/JP7045387B2/ja
Publication of WO2018127330A1 publication Critical patent/WO2018127330A1/de

Links

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/0093—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00 with means for monitoring data relating to the user, e.g. head-tracking, eye-tracking
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
    • A61B3/024—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for determining the visual field, e.g. perimeter types
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
    • A61B3/028—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for testing visual acuity; for determination of refraction, e.g. phoropters
    • A61B3/032—Devices for presenting test symbols or characters, e.g. test chart projectors
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/02—Subjective types, i.e. testing apparatus requiring the active assistance of the patient
    • A61B3/028—Subjective types, i.e. testing apparatus requiring the active assistance of the patient for testing visual acuity; for determination of refraction, e.g. phoropters
    • A61B3/032—Devices for presenting test symbols or characters, e.g. test chart projectors
    • A61B3/0325—Devices for presenting test symbols or characters, e.g. test chart projectors provided with red and green targets
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • A61B3/112—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring diameter of pupils
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/12—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for looking at the eye fundus, e.g. ophthalmoscopes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/14—Arrangements specially adapted for eye photography
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6893—Cars
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2503/00—Evaluating a particular growth phase or type of persons or animals
    • A61B2503/20—Workers
    • A61B2503/22—Motor vehicles operators, e.g. drivers, pilots, captains
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features

Definitions

  • the invention relates to a method according to claim 1 and a
  • DE 10 2013 003 047 A1 shows a device of a vehicle with which a blink pattern, in particular a double blink, can be checked.
  • a blink pattern in particular a double blink
  • a driver can select radio stations.
  • EP 2 564 766 A1 discloses a method in which movements of a driver and objects in his surroundings are detected in order to access one
  • DE 10 20 2 221 647 A1 shows a method for testing the vision of a driver of a vehicle, in which different sized numbers are displayed. It is also known to test color vision.
  • the human eye can adapt its refractive power to specific conditions. However, if this adaptability of the human eye is not sufficient to image an image sharply on the retina, the image is perceived blurred. In particular, small details can not be optimally resolved.
  • the refractive power of the eye is essentially given by the curvature of the outer cornea and the adaptive lens.
  • the geometric shape of these body parts is almost never optimal in optical terms.
  • the optical quality of these body parts is getting worse, especially from a central optical axis radially outward.
  • the image quality in a wide-open pupil for example, at dusk or at night, can be significantly impaired and thus lead to an impairment of visual acuity (vision).
  • the invention is therefore based on the object of monitoring, recognizing and displaying restrictions and / or changes in the visual perception possibilities of a driver, identifying the driver and simplifying the operation of the vehicle.
  • the present invention solves the aforementioned object by the features of claim 1. According to the invention it has been recognized that a monitoring device
  • At least a part of at least one eye and / or at least a part of the face of the driver must capture to provide suitable information about
  • Different areas of the human body are suitable to one
  • biometric identification of a person As a rule, fingerprints are used for this, but also the human iris and especially the retina with their unique structure are very good for
  • the retina offers here as the only biometric structure the possibility during the recognition of the retinal structure with the biometric
  • the information exchange could take place via a superimposition of patterns on the retina and conscious eye movements. For example, a moving target or a PIN Päd could be used to enter a code. This communication can be tap-proof between the eye and the biometric monitoring device. This communication is extremely reliable. against this background reference is made to US 8,184,867 B2. After identifying the driver, the vehicle could be started. A secure identification could include financial and other
  • a monitoring device of the vehicle If a monitoring device of the vehicle is able to To detect the driver's line of sight, the driver can activate certain functions or activate the display of additional information in these areas by sighting a portion of a screen or the head-up display and single or double blinking. This allows a faster and more efficient operation of multimedia and navigation components, because in addition to voice commands optically monitored
  • the monitoring device could comprise a camera which detects movements of the eyes and / or a part of the face while the vehicle is stationary and / or moving. With a camera, the eyes of the driver can be observed while driving. It could be detected whether the driver pinched his eyes together for a long time and / or looks unusually long on a traffic sign. These collected data would be interpreted as an indication that the driver appears to have difficulty reading the traffic sign. In particular, in an accumulation of such recorded data of the monitoring device, this or a device of the vehicle could offer a test of visual acuity within the vehicle.
  • Perceptibility can be performed by different sized characters, preferably numbers and / or letters are displayed in a head-up display or a screen of the vehicle.
  • an audio signal could be detected, wherein each character to be recognized by the driver is marked and wherein the marker moves to another character when an audio signal corresponding to the character is detected.
  • the driver's voice could be detected as an audio signal, marking each character to be recognized by the driver, and with the
  • an eye test image is displayed via a vehicle-mounted head-up display.
  • the examination of the optical perception ability could be performed by displaying a first character, preferably numbers and / or letters, in a head-up display or a screen of the vehicle in a red-green contrast image.
  • a first character preferably numbers and / or letters
  • an audio signal could be detected and another character and / or another contrast image could or could be displayed if one with the first character
  • the driver's voice could be detected as an audio signal, and another character and / or another contrast image could or could be displayed if the driver recognized the first character to be recognized and identified it with his voice. This makes it possible to quasi-casually test a color perception weakness of a driver, namely during use of the vehicle. There is no need for another person next to the driver to do the color vision check.
  • a contrast image is displayed via a vehicle-mounted head-up display.
  • a contrast image is displayed via a vehicle-mounted head-up display.
  • the examination of the visual perception ability could be performed by examining the visual field and / or the central visual field of the driver. Thus, diseases of the eye can be detected.
  • the examination of the optical perception ability could be performed by displaying a halftone screen with a dot in its center in a head-up display or screen of the vehicle. This allows a test of the central visual field.
  • a raster grid designed as a so-called Amsler grid allows a self-test to determine central visual field failures, for example due to age
  • Glaucoma is the second most common cause of blindness worldwide. In Germany, about one million people are affected and the number of unreported cases is estimated at the same scale. With this described method can be examined while driving, whether the driver is an endangered person.
  • the driver's directions of sight could be recorded while driving over a defined period of time. This allows a casual measurement of visual field defects.
  • the monitoring device or a device of the vehicle could detect the line of sight of the driver. This could be done via one or more cameras.
  • the head alignment and the position of the pupils and / or the iris relative to the head must be detected by means of an image processing device. In order to achieve a high precision of the measurement, a calibration process must be carried out for each driver, possibly once.
  • the monitoring device or the device preferably permanently observes the line of sight of the driver while driving. Once an interesting object away from the driver's current line of sight
  • the driver will direct his fixation and / or line of sight on this object in order to resolve this more accurately and to be able to view.
  • the resolution of the eye is significantly higher in the center of the visual field than further out in the periphery.
  • a visual field map By constantly observing the gaze behavior of the driver, a visual field map can be generated. Over hours, days or weeks, this creates a very dense map in which visual field defects (scotoma), ie localized visual limitations or blindness, can be detected. It could also be several visual field maps depending on the brightness of the stimulus, namely the vehicle environment, created. In this way, even the extent of the restriction can be quantified. If you suspect a visual field failure, the
  • the examination of the visual perception capability could be performed by presenting the driver with a changing pattern and the monitor detecting changes in a pupil diameter of the driver. As a result, a central visual field measurement via a pupillometry is possible.
  • the driver could look for a few minutes at a variable pattern displayed on a head-up display or screen of the vehicle.
  • the pupillary diameter of both eyes could be measured with a camera. From the magnitude of the temporal change of the pupil diameter in response to the pattern, which as
  • the examination of the optical perception capability could be performed by acquiring a retinal image from the monitoring device.
  • a retinal image namely a fundus image can be generated.
  • Many diseases of the retina are found in a fundus image, which could be recorded with a laser scanning system with infrared illumination.
  • the monitoring device could have a
  • Retina scanners in the area of the sun visor or behind the sun visor include.
  • the sun visor can be used as a spacer or holding device.
  • MEMS microelectromechanical scanning mirrors
  • 2D seaning systems are very compact. In order to be able to record a sufficiently large area of the fundus, one must, on the one hand, keep the head relatively stable and, on the other hand, use a lens of the scan head to approach it relatively close to the eye. The distance should be about 1-2 cm.
  • an obliquely folded down sun visor could be used as a forehead system.
  • a slight depression and / or broadening for the positioning of the forehead in the sun visor could be provided.
  • the driver could be approached via a motorized seat to the headrest.
  • the scan head could then be sequential
  • two scanners or retinal scanners can be used to capture the images of both eyes simultaneously.
  • the captured images could either be through the
  • Monitoring device or a device of the vehicle can be evaluated by means of an image analysis device or transmitted telemetrically to a server and there evaluated either automatically or by an expert.
  • Perceptibility of the driver made and / or a recommendation presented to visit a doctor. This allows a driver immediately after or while driving with the vehicle
  • An apparatus of a vehicle for carrying out a method of the type described herein could comprise a monitoring device.
  • the device could further include a head-up display and / or others Facilities include.
  • the device can also be used as an arrangement
  • Fig. 1 is a schematic representation of a motor vehicle, namely a
  • Monitoring device comprises, with which the method described here is feasible
  • Fig. 2 is a visual representation of numbers of different sizes, which are displayed by a head-up display in the motor vehicle to perform a test of visual acuity
  • Fig. 3 is a diagram showing the implementation of a test
  • Fig. 4 is a diagram showing an examination of the central
  • Fig. 5 is a schematic representation of a casual measurement of
  • FIG. 1 shows a device 1 of a vehicle 2, namely a
  • the device 1 comprises a monitoring device 3 and a head-up display 5.
  • the motor vehicle is a car or truck,
  • the method also serves to recognize and / or display the driver 4 of the vehicle 2.
  • the method also serves to recognize and / or indicate restrictions on the visual perception capability of the driver 4 of the vehicle 2.
  • the method is used to operate the vehicle 2 by the driver 4. The method comprises the following steps:
  • the monitoring device 3 comprises a camera, which detects movements of the eyes and / or a part of the face of the driver 4 while the vehicle 2 is stationary and moving.
  • FIGS. 2 to 6 schematically show methods for recognizing and / or displaying restrictions on the visual perception capability of the driver 4 of the vehicle 2.
  • Such a method comprises the following steps: detecting at least a part of at least one eye and / or at least part of it Face of the driver 4 by the monitoring device 3, evaluating the data detected by the monitoring device 3 and examining the visual perception ability and / or the eyes of the driver 4 on the basis of the detected data.
  • FIG. 2 shows that the examination of the visual perception ability is performed by displaying characters of different sizes, namely numbers, in a head-up display 5 of the vehicle 2.
  • each character to be recognized by the driver 4 is marked by a frame, and wherein the marker or frame moves to another character when an audio signal corresponding to the character is detected.
  • the driver 4's voice is detected as an audio signal, with each character to be recognized by the driver 4 being marked by the frame and with the marker moving to another character when the driver 4 has recognized the character to be recognized and identified it with his voice.
  • FIG. 3 shows that the examination of the visual perception ability is performed by displaying a number in a head-up display 5 of the vehicle 2 in a red-green contrast image 6. In this case, an audio signal is detected and another number and a further contrast image 7 are displayed, if one with the first number
  • FIG. 4 shows that the examination of the optical perception capability is performed by displaying a halftone screen 8 with a dot 9 in its center in a head-up display 5 of the vehicle 2. It is a so-called Amsler grid represented.
  • the point 9 in the middle of the large square grid 8 is fixed with one eye during the test.
  • the other eye is completely covered with the flat hand.
  • FIG. 5 shows that the examination of the visual perception ability is performed by examining the visual field of the driver 4.
  • Views of the driver 4 are detected while driving over a defined period.
  • the device 1 and / or the monitoring device 3 detects or
  • the driver's line of vision 4 detects the driver's line of vision 4. This can be done via one or more cameras.
  • Image processing determined. In order to achieve a high precision of the measurement, a calibration procedure is carried out once for the driver 4.
  • the monitoring device 3 permanently observes the viewing direction of the driver 4 while driving. If an interesting object is perceived away from the current viewing direction, then the driver 4 becomes his fixation and / or looking at this object in order to be able to resolve and view it more accurately.
  • the resolution of the eye is much higher in the center of the visual field than further out in the periphery.
  • FIG. 5 it is shown that a current viewing direction is directed to a first point 11, ie the visual field center is located there.
  • the device 1 or the monitoring device 3 detects that at this point in the peripheral visual field relative to the first point 1 an incentive for
  • the relative position of the second point 12 to the first point 11 is entered in a driver-specific visual field map 13. Over hours, days or weeks, this results in a very dense map, in which visual field defects 14 (scotoma), ie localized visual limitations or blindness, can be detected.
  • visual field defects 14 ie localized visual limitations or blindness
  • Vehicle 2 is the consultation of an ophthalmologist.
  • Perceptual ability is performed by the driver 4, a changing pattern is displayed and the monitoring device 3 detects changes in a pupil diameter of the driver 4.
  • the driver 4 looks for a few minutes at a changing pattern, which is displayed on the head-up display 5.
  • the pupil diameter of both eyes is measured with a camera. From the size of the The temporal change of the pupil diameter in response to the pattern, which acts as a stimulation pattern, conclusions on the
  • the method comprises the following steps:
  • an operation in particular a control of devices of the vehicle and / or a communication with these, takes place through a viewing direction or on the basis of the viewing direction.
  • the control of the devices is carried out by the device 1 after data, namely the line of sight or a blinking of the driver 4, has been detected.
  • the device 1 and / or the monitoring device 3 is able to recognize the viewing direction of the driver 4. So the driver 4 through
  • Target a screen area or head-up display area and / or single or double blink activate certain features or show additional information in these areas.
  • FIG. 6 shows that the examination of the visual perception ability is performed by detecting a retinal image by the monitor 3. Specifically, three retinal images are shown.
  • the monitoring device 3 comprises a retinal scanner in the region of the sun visor or behind the sun visor.
  • MEMS microelectromechanical scanning mirrors
  • an obliquely folded down sun visor is used as a forehead system.
  • a trough and a broadening for the positioning of the forehead are provided.
  • the driver 4 is connected to a headrest via a motorized seat
  • the scan head is then successively electromechanically motorized positioned in front of the two eyes and takes each a picture of the retina.
  • the recorded images are either evaluated by the device 1 itself via a device for image analysis or transmitted telemetrically to a server and evaluated there either automatically or by an expert.
  • the visual perception ability of the driver 4 is qualified and / or a recommendation to visit a doctor is presented.
  • the qualification and / or recommendation may be as an audio signal, in the form of an electronic voice or on a head-up display 5 or a
  • the method does not graphically illustrate a method for recognizing and / or displaying the driver 4 of a vehicle 2.
  • the method comprises the following steps: detecting at least one part of at least one eye and / or at least part of the face of the driver 4
  • Monitoring device 3 evaluating the data detected by the monitoring device 3 and identifying the driver 4 on the basis of the acquired data.
  • the method is used to recognize the driver 4 of the vehicle 2. It is a highly secure biometric identification of the driver possible.
  • the human iris and the retina with their unique structure are very well suited for this purpose.
  • the retina as a biometric structure, offers the possibility of detecting the retinal structure with the device 1 and / or the retina
  • Monitoring device 3 to communicate.
  • the information exchange takes place via a superimposition of patterns on the retina, namely a moving target, and conscious eye movements.
  • Communication is tap-proof between the eye and the device 1 and / or the monitoring device 3.
  • the identification of the driver 4 is used to start the vehicle 2.
  • the head-up display 5 is a display device that allows the driver 4 to maintain his head posture or line of sight when he is

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Surgery (AREA)
  • Public Health (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Animal Behavior & Ethology (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Ophthalmology & Optometry (AREA)
  • Pathology (AREA)
  • General Physics & Mathematics (AREA)
  • Optics & Photonics (AREA)
  • Human Computer Interaction (AREA)
  • Eye Examination Apparatus (AREA)
  • Traffic Control Systems (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

Ein Verfahren zum Erkennen und/ oder Anzeigen des Fahrers (4) eines Fahrzeugs (2) und/ oder zum Erkennen und/ oder Anzeigen von Einschränkungen der optischen Wahrnehmungsfähigkeit des Fahrers (4) eines Fahrzeugs (2) und/ oder zum Bedienen eines Fahrzeugs (2) durch den Fahrer (4), umfassend die nachfolgenden Schritte: - Erfassen zumindest eines Teils zumindest eines Auges und/ oder zumindest eines Teils des Gesichts des Fahrers (4) durch eine Überwachungseinrichtung (3), - Auswerten der von der Überwachungseinrichtung (3) erfassten Daten, - Identifizieren des Fahrers (4) und/ oder Untersuchen der optischen Wahrnehmungsfähigkeit und/ oder der Augen des Fahrers (4) und/ oder Bedienen von Geräten des Fahrzeugs (2) auf Basis der erfassten Daten, löst die Aufgabe, Einschränkungen und/ oder Veränderungen der optischen Wahrnehmungsmöglichkeiten eines Fahrers zu überwachen, zu erkennen und anzuzeigen, den Fahrer zu identifizieren und die Bedienung des Fahrzeugs zu vereinfachen.

Description

Verfahren und Vorrichtung zur Durchführung des Verfahrens in einem Fahrzeug
Die Erfindung betrifft ein Verfahren nach Patentanspruch 1 und eine
Vorrichtung in einem Fahrzeug zur Durchführung des Verfahrens.
Aus der DE 10 2004 035 896 A1 ist bekannt, mit einer Vorrichtung eines Fahrzeugs zu prüfen, ob die Augen dessen Fahrers geöffnet sind.
Die DE 10 2013 003 047 A1 zeigt eine Vorrichtung eines Fahrzeugs, mit der ein Blinzelmuster, insbesondere ein Doppelblinzeln, überprüft werden kann. Durch Doppelblinzeln kann ein Fahrer beispielsweise Radiosender auswählen.
Die EP 2 564 766 A1 offenbart ein Verfahren, bei dem Bewegungen eines Fahrers und Objekte in dessen Umgebung erfasst werden, um auf eine
Blickrichtung des Fahrers zu schließen. Die DE 10 20 2 221 647 A1 zeigt ein Verfahren zum Testen der Sehfähigkeit eines Fahrers eines Fahrzeugs, bei welchem unterschiedlich große Zahlen dargestellt werden. Es ist auch bekannt, das Farbsehen zu testen. Das menschliche Auge kann seine Brechkraft an bestimmte Gegebenheiten anpassen. Wenn diese Adaptionsfähigkeit des menschlichen Auges allerdings nicht ausreicht, um ein Bild scharf auf der Netzhaut abzubilden, wird das Bild unscharf wahrgenommen. Insbesondere kleine Details können nicht mehr optimal aufgelöst werden.
Die Brechkraft des Auges ist im Wesentlichen durch die Krümmung der Hornhautaußenseite und der adaptiven Linse gegeben. Die geometrische Form dieser Körperteile ist in optischer Hinsicht nahezu niemals optimal ausgebildet. Die optische Qualität dieser Körperteile wird insbesondere von einer optischen Zentralachse nach radial außen hin immer schlechter.
Die Abbildungsqualität bei einer weit geöffneten Pupille, beispielsweise in der Dämmerung oder in der Nacht, kann deutlich beeinträchtigt sein und somit zu einer Beeinträchtigung der Sehschärfe (Visus) führen.
Wenn eine optische Abbildung auf die Netzhaut nicht optimal erfolgt, kneift der Mensch instinktiv die Augen zusammen. Dies verringert die effektive Größe der Pupille und verbessert somit die Schärfe der optischen Abbildung. Hier wird das Prinzip der Lochkamera angewendet, insbesondere bei aufgrund von
Dunkelheit weit geöffneter Pupille.
Einschränkungen oder Veränderungen der optischen Wahrnehmung eines Menschen können jedoch zu Gefahrensituationen führen, wenn dieser ein Fahrzeug führt. Daher ist es auch notwendig, einen Fahrer zu erkennen, der geeignet ist, ein Fahrzeug zu führen und dieses zu bedienen. 7 080974
3
Der Erfindung liegt daher die Aufgabe zu Grunde, Einschränkungen und/ oder Veränderungen der optischen Wahrnehmungsmöglichkeiten eines Fahrers zu überwachen, zu erkennen und anzuzeigen, den Fahrer zu identifizieren und die Bedienung des Fahrzeugs zu vereinfachen.
Die vorliegende Erfindung löst die zuvor genannte Aufgabe durch die Merkmale des Patentanspruchs 1. Erfindungsgemäß ist erkannt worden, dass eine Überwachungseinrichtung
zumindest einen Teil zumindest eines Auges und/ oder zumindest einen Teils des Gesichts des Fahrers erfassen muss, um geeignete Informationen über
Bewegungscharakteristiken oder Augenstrukturen des Fahrers zu erhalten.
Dann ist erkannt worden, dass die von der Überwachungseinrichtung erfassten Daten ausgewertet werden müssen, um den Fahrer zu identifizieren und/ oder gegebenenfalls seine optische Wahrnehmungsfähigkeit und/ oder seine Augen zu untersuchen. Weiter ist erkannt worden, dass das Bedienen von Geräten des Fahrzeugs oder das Kommunizieren mit diesen Geräten auf Basis der
erfassten Daten möglich ist.
Nach der Identifizierung des Fahrers könnten bestimmte Vorgänge oder
Abläufe freigegeben werden, die das konkrete Fahrzeug betreffen. Es ist
beispielsweise eine hochsichere biometrische Identifizierung des Fahrers
denkbar.
Verschiedene Areale des menschlichen Körpers sind geeignet, um eine
biometrische Identifizierung einer Person durchzuführen. In der Regel kommen hierfür Fingerabdrücke zur Verwendung, aber auch die menschliche Iris und insbesondere die Netzhaut mit ihrer einzigartigen Struktur sind sehr gut zur
Identifizierung geeignet. Fingerabdrücke werden überall im täglichen Umfeld hinterlassen und geben somit sicherheitskritische Information in nachteiliger Weise preis. Darüber hinaus ist es einer bildgebenden biometrischen Überwachungseinrichtung, beispielweise einer Kamera, rein theoretisch nicht möglich, das Bild eines biometrischen Objekts von einem Bild eines Abbilds des biometrischen
Objektes zu unterscheiden.
Die Netzhaut bietet hier als einzige biometrische Struktur die Möglichkeit, während der Erkennung der Netzhautstruktur mit der biometrischen
Überwachungseinrichtung zu kommunizieren. Der Informationsaustausch könnte über eine Einblendung von Mustern auf die Netzhaut und bewusste Augenbewegungen erfolgen. Beispielsweise könnte ein sich bewegendes Target oder ein PIN Päd zur Eingabe eines Codes verwendet werden. Diese Kommunikation kann abhörsicher zwischen dem Auge und der biometrischen Überwachungseinrichtung erfolgen. Diese Kommunikation ist in höchstem Maße überwindungssicher. Vor diesem Hintergrund wird auf die US 8,184,867 B2 verwiesen. Nach der Identifizierung des Fahrers könnte ein Starten des Fahrzeugs erfolgen. Eine sichere Identifizierung könnte auch Finanz- und sonstige
Transaktionen oder Verträge ohne Unterschrift des Fahrers rechtssicher machen. Eingaben von PINs und TANs oder SMS-Authentifizierungen sind somit nicht mehr nötig. Die initiale Speicherung der Augen oder Augenstruktur des Fahrers in einem Datenspeicher könnte beim Vertragshändler des
Fahrzeugs mithilfe eines Personalausweises erfolgen.
Es könnte eine Steuerung von Geräten des Fahrzeugs oder eine
Kommunikation mit Geräten des Fahrzeugs durch die Blickrichtung des Fahrers erfolgen. Wenn eine Überwachungseinrichtung des Fahrzeugs in der Lage ist, die Blickrichtung des Fahrers zu erkennen, kann der Fahrer durch Anvisieren eines Bereichs eines Bildschirms oder des Head-Up Displays und einfaches oder doppeltes Blinzeln bestimmte Funktionen aktivieren oder das Einblenden von zusätzlichen Informationen in diesen Bereichen aktivieren. Dies erlaubt eine schnellere und effizientere Bedienung von Multimedia- und Navigations- Komponenten, weil zusätzlich zu Sprachbefehlen optisch überwachte
Bewegungen erfasst und genutzt werden.
Die Überwachungseinrichtung könnte eine Kamera umfassen, welche im Stand und/ oder während der Fahrt des Fahrzeugs Bewegungen der Augen und/ oder eines Teils des Gesichts erfasst. Mit einer Kamera können die Augen des Fahrers während der Fahrt beobachtet werden. Dabei könnte detektiert werden, ob der Fahrer über längere Zeit die Augen zusammen kneift und/ oder ungewöhnlich lange auf ein Verkehrshinweisschild blickt. Diese erfassten Daten würden als Anzeichen gewertet, dass der Fahrer anscheinend Schwierigkeiten beim Lesen des Verkehrshinweisschildes hat. Insbesondere bei einer Häufung solcher erfassten Daten der Überwachungseinrichtung könnte diese oder eine Vorrichtung des Fahrzeugs einen Test der Sehschärfe innerhalb des Fahrzeugs anbieten.
Vor diesem Hintergrund könnte das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt werden, indem unterschiedlich große Zeichen, bevorzugt Zahlen und/ oder Buchstaben, in einem Head-Up-Display oder einem Bildschirm des Fahrzeugs angezeigt werden. Dabei könnte ein Audiosignal erfasst werden, wobei jedes vom Fahrer zu erkennende Zeichen markiert wird und wobei die Markierung zu einem weiteren Zeichen wandert, wenn ein mit dem Zeichen korrespondierendes Audiosignal erfasst wird.
Konkret könnte die Stimme des Fahrers als Audiosignal erfasst werden, wobei jedes vom Fahrer zu erkennende Zeichen markiert wird und wobei die
Markierung zu einem weiteren Zeichen wandert, wenn der Fahrer das zu erkennende Zeichen erkannt und mit seiner Stimme identifiziert hat. Hierdurch ist es möglich, die Sehfähigkeit eines Fahrers quasi beiläufig, nämlich während der Nutzung des Fahrzeugs, zu testen. Es ist keine weitere Person neben dem Fahrer notwendig, um den Sehtest durchzuführen. Bevorzugt wird über ein im Fahrzeug eingebautes Head-Up-Display ein Sehtestbild angezeigt.
Das Untersuchen der optischen Wahrnehmungsfähigkeit könnte durchgeführt werden, indem ein erstes Zeichen, bevorzugt Zahlen und/ oder Buchstaben, in einem Head-Up-Display oder einem Bildschirm des Fahrzeugs in einem rot- grünen Kontrastbild dargestellt wird. Dabei könnte ein Audiosignal erfasst werden und ein weiteres Zeichen und/ oder ein weiteres Kontrastbild könnte bzw. könnten dargestellt werden, wenn ein mit dem ersten Zeichen
korrespondierendes Audiosignal erfasst wird. Dabei könnte konkret die Stimme des Fahrers als Audiosignal erfasst werden und ein weiteres Zeichen und/ oder ein weiteres Kontrastbild könnte bzw. könnten dargestellt werden, wenn der Fahrer das erste zu erkennende Zeichen erkannt und mit seiner Stimme identifiziert hat. Hierdurch ist es möglich, eine Farbesehschwäche eines Fahrers quasi beiläufig, nämlich während der Nutzung des Fahrzeugs, zu testen. Es ist keine weitere Person neben dem Fahrer notwendig, um den Test auf Farbsehschwäche durchzuführen.
Bevorzugt wird über ein im Fahrzeug eingebautes Head-Up-Display ein Kontrastbild angezeigt. Durch unterschiedlich hohen Farbkontrast einzelner Kontrastbilder kann auch der Schweregrad einer Rot/Grün-Farbsehschwäche ermittelt werden.
Das Untersuchen der optischen Wahrnehmungsfähigkeit könnte durchgeführt werden, indem das Gesichtsfeld und/ oder das zentrale Gesichtsfeld des Fahrers untersucht wird. So können Krankheiten des Auges erkannt werden. Das Untersuchen der optischen Wahrnehmungsfähigkeit könnte durchgeführt werden, indem ein Rastergitter mit einem Punkt in dessen Mitte in einem Head- Up-Display oder einem Bildschirm des Fahrzeugs dargestellt wird. Hierdurch ist ein Test des zentralen Gesichtsfeldes möglich. Ein als sogenanntes Amsler- Gitter ausgestaltetes Rastergitter erlaubt einen Selbsttest zur Ermittlung zentraler Gesichtsfeldausfälle, zum Beispiel bei altersbedingter
Makuladegeneration oder anderen exsudativen oder degenerativen Prozessen in der Netzhautmitte. Der Test nutzt bevorzugt ein großes quadratisches Rastergitter mit einem Punkt in der Mitte, der während der Untersuchung fixiert werden muss. Das jeweils andere Auge wird üblicherweise mit der flachen Hand vollständig abgedeckt. Bei entsprechenden Befunden wird die zu untersuchende Person scheinbare Löcher im Raster oder dunkle Stellen im Muster des Rastergitters bemerken können. Gegebenenfalls werden auch Wellen oder Verkrümmungen der
Rasterlinien durch die Person wahrgenommen. Solche Wahrnehmungen sollten stets zu einer sofortigen augenärztlichen Kontrolle führen.
Das Untersuchen der optischen Wahrnehmungsfähigkeit könnte durchgeführt werden, indem das Gesichtsfeld des Fahrers untersucht wird. Hierdurch kann eine Glaukomerkrankung erkannt werden. Insbesondere bei der sogenannten Glaukomerkrankung, auch grüner Star genannt, kann es zu Ausfällen im sogenannten Gesichtsfeld kommen. Sie gehören zu den typischen Anzeichen dieser Erkrankung.
Bleibt die Glaukomerkrankung unbemerkt oder wird diese medizinisch nicht ausreichend behandelt, kann der Betroffene sogar sein Sehvermögen ganz verlieren und erblinden. Glaukom ist weltweit die zweithäufigste Ursache für eine Erblindung. In Deutschland sind etwa eine Million Menschen betroffen, die Dunkelziffer wird auf die gleiche Größenordnung geschätzt. Mit dem hier beschriebenen Verfahren kann während der Fahrt untersucht werden, ob der Fahrer eine gefährdete Person ist.
Vor diesem Hintergrund könnten Blickrichtungen des Fahrers während der Fahrt über einen definierten Zeitraum erfasst werden. So ist eine beiläufige Messung von Gesichtsfeldausfällen ermöglicht. Die Überwachungseinrichtung oder eine Vorrichtung des Fahrzeugs könnte die Blickrichtung des Fahrers erfassen. Dies könnte über eine oder mehrere Kameras erfolgen. Hierbei müssen die Kopfausrichtung sowie die Position der Pupillen und/ oder der Iris relativ zum Kopf mithilfe einer Einrichtung zur Bildverarbeitung erfasst werden. Um eine hohe Präzision der Messung zu erreichen, muss, gegebenenfalls einmalig, für jeden Fahrer ein Kalibriervorgang erfolgen.
Die Überwachungseinrichtung oder die Vorrichtung beobachtet bevorzugt permanent die Blickrichtung des Fahrers während der Fahrt. Sobald ein interessantes Objekt abseits der aktuellen Blickrichtung des Fahrers
wahrgenommen wird, wird der Fahrer seine Fixation und/ oder Blickrichtung auf dieses Objekt richten, um dieses genauer auflösen und betrachten zu können. Die Auflösung des Auges ist nämlich im Zentrum des Gesichtsfeldes deutlich höher als weiter außen in der Peripherie.
Durch das ständige Beobachten des Blickverhaltens des Fahrers kann eine Gesichtsfeldkarte erzeugt werden. Über Stunden, Tage oder Wochen entsteht so eine sehr dichte Karte, in der Gesichtsfeldausfälle (Skotome), also lokal begrenzte visuelle Einschränkungen bzw. Blindheiten, erkannt werden können. Es könnten auch mehrere Gesichtsfeldkarten in Abhängigkeit von der Helligkeit des Anreizes, nämlich der Fahrzeugumgebung, erstellt werden. Auf diese Weise kann sogar das Ausmaß der Einschränkung quantifiziert werden. Bei einem Verdacht auf einen Gesichtsfeldausfall empfiehlt die
Überwachungseinrichtung oder eine Vorrichtung des Fahrzeugs die
Konsultation eines Augenarztes. Das Untersuchen der optischen Wahrnehmungsfähigkeit könnte durchgeführt werden, indem dem Fahrer ein sich veränderndes Muster dargestellt wird und die Überwachungseinrichtung Änderungen eines Pupillendurchmessers des Fahrers erfasst. Hierdurch ist eine zentrale Gesichtsfeldmessung über eine Pupillometrie möglich.
Der Fahrer könnte für einige Minuten auf ein veränderliches Muster blicken, das auf einem Head-Up Display oder einem Bildschirm des Fahrzeugs dargestellt wird. Gleichzeitig könnte mit einer Kamera der Pupillendurchmesser beider Augen vermessen werden. Aus der Größe der zeitlichen Veränderung des Pupillendurchmessers als Reaktion auf das Muster, welches als
Stimulationsmuster fungiert, können Rückschlüsse auf das Gesichtsfeld gemacht werden.
Um dieses Verfahren durchführen zu können, ist ein hinreichend dunkler und homogener Hintergrund erforderlich. Ein solcher Hintergrund könnte während der Nacht oder einer Nachtfahrt gegeben sein. Der Pupillendurchmesser muss mit hoher Genauigkeit gemessen werden.
Das Untersuchen der optischen Wahrnehmungsfähigkeit könnte durchgeführt werden, indem von der Überwachungseinrichtung ein Netzhautbild erfasst wird. So kann ein Netzhautbild, nämlich ein Fundusbild erzeugt werden. Viele Erkrankungen der Netzhaut zeigen sich in einem Fundusbild, welches mit einem Laser-Scanning System mit Infrarotbeleuchtung aufgenommen werden könnte.
Vor diesem Hintergrund könnte die Überwachungseinrichtung einen
Netzhautscanner im Bereich der Sonnenblende oder hinter der Sonnenblende umfassen. So kann die Sonnenblende als Abstands- oder Halteeinrichtung genutzt werden. Mit mikroelektromechanischen Scanspiegeln (MEMS) können 2D-Seanningsysteme sehr kompakt aufgebaut werden. Um ein genügend großes Areal des Augenhintergrundes aufnehmen zu können, muss man aber einerseits den Kopf relativ stabil halten und andererseits mit einem Objektiv des Scankopfes relativ nahe an das Auge heranfahren. Der Abstand sollte ca. 1-2 cm betragen.
Zum Halten des Kopfes könnte eine schräg heruntergeklappte Sonnenblende als Stirnanlage verwendet werden. Hierzu könnte eine leichte Mulde und/ oder Verbreiterung für die Positionierung der Stirn in der Sonnenblende vorgesehen sein. Der Fahrer könnte über einen motorisierten Sitz an die Kopfstütze herangefahren werden. Der Scankopf könnte dann nacheinander
elektromechanisch motorisiert vor den beiden Augen positioniert werden und jeweils ein Bild der Netzhaut aufnehmen. Alternativ können auch zwei Scanner oder Netzhautscanner eingesetzt werden, um die Bilder beider Augen gleichzeitig aufzunehmen.
Die aufgenommenen Bilder könnten entweder durch die
Überwachungseinrichtung oder eine Vorrichtung des Fahrzeugs mittels einer Einrichtung zur Bildanalyse bewertet werden oder telemetrisch auf einen Server übertragen werden und dort entweder automatisch oder durch einen Experten bewertet werden.
Am Ende einer Untersuchung könnte eine Qualifizierung der optischen
Wahrnehmungsfähigkeit des Fahrers erfolgen und/ oder eine Empfehlung dargestellt werden, einen Arzt aufzusuchen. Hierdurch kann ein Fahrer unmittelbar nach oder während einer Fahrt mit dem Fahrzeug auf
gesundheitliche Gefahrenpotentiale für sich und andere hingewiesen werden.
Eine Vorrichtung eines Fahrzeugs zur Durchführung eines Verfahrens der hier beschriebenen Art könnte eine Überwachungseinrichtung umfassen. Die Vorrichtung könnte des Weiteren ein Head-Up-Display und/ oder weitere Einrichtungen umfassen. Die Vorrichtung kann auch als Anordnung
verschiedener zusammenwirkender Einrichtungen ausgestaltet sein.
In der Zeichnung zeigen
Fig. 1 eine schematische Darstellung eines Kraftfahrzeugs, nämlich eines
PKWs oder LKWs, welches eine Vorrichtung mit einer
Überwachungseinrichtung umfasst, mit welcher das hier beschriebene Verfahren durchführbar ist,
Fig. 2 eine visuelle Darstellung von Zahlen unterschiedlicher Größe, die von einem Head-Up-Display im Kraftfahrzeug angezeigt werden, um einen Test der Sehschärfe durchzuführen, Fig. 3 eine Darstellung, welche die Durchführung eines Tests auf
Farbsehschwäche erlaubt, wobei mit der linken Darstellung eine Rot/Grün-Blindheit und mit der rechten Darstellung eine Rot/Grün- Sehschwäche diagnostizierbar ist, Fig. 4 eine Darstellung, welche eine Untersuchung des zentralen
Gesichtsfelds erlaubt, wobei links ein Testmuster und rechts ein Beispiel einer pathologischen Wahrnehmung dargestellt ist,
Fig. 5 eine schematische Darstellung einer beiläufigen Messung von
Gesichtsfeldausfällen nebst einer Gesichtsfeldkarte, und
Fig. 6 Netzhautbilder, wobei links ein normales Fundusbild und rechts
krankhafte Veränderungen dargestellt sind. Fig. 1 zeigt eine Vorrichtung 1 eines Fahrzeugs 2, nämlich eines
Kraftfahrzeugs, zur Durchführung eines Verfahrens der nachfolgend
beschriebenen Art, Die Vorrichtung 1 umfasst eine Überwachungseinrichtung 3 und ein Head-Up-Display 5. Das Kraftfahrzeug ist ein PKW oder LKW,
Das Verfahren dient zum Erkennen und/ oder Anzeigen des Fahrers 4 des Fahrzeugs 2. Das Verfahren dient auch zum Erkennen und/ oder Anzeigen von Einschränkungen der optischen Wahrnehmungsfähigkeit des Fahrers 4 des Fahrzeugs 2. Schließlich dient das Verfahren zum Bedienen des Fahrzeugs 2 durch den Fahrer 4. Das Verfahren umfasst die nachfolgenden Schritte:
- Erfassen zumindest eines Teils zumindest eines Auges und/ oder zumindest eines Teils des Gesichts des Fahrers 4 durch die Überwachungseinrichtung 3,
- Auswerten der von der Überwachungseinrichtung 3 erfassten Daten,
- Identifizieren des Fahrers 4 und/ oder Untersuchen der optischen Wahrnehmungsfähigkeit und/ oder der Augen des Fahrers 4 und/ oder Bedienen von Geräten des Fahrzeugs 2 auf Basis der erfassten Daten.
Die Überwachungseinrichtung 3 umfasst eine Kamera, welche im Stand und während der Fahrt des Fahrzeugs 2 Bewegungen der Augen und/ oder eines Teils des Gesichts des Fahrers 4 erfasst.
Die Fig. 2 bis 6 zeigen schematisch Verfahren zum Erkennen und/ oder Anzeigen von Einschränkungen der optischen Wahrnehmungsfähigkeit des Fahrers 4 des Fahrzeugs 2.
Ein solches Verfahren umfasst die nachfolgenden Schritte: Erfassen zumindest eines Teils zumindest eines Auges und/ oder zumindest eines Teils des Gesichts des Fahrers 4 durch die Überwachungseinrichtung 3, Auswerten der von der Überwachungseinrichtung 3 erfassten Daten und Untersuchen der optischen Wahrnehmungsfähigkeit und/ oder der Augen des Fahrers 4 auf Basis der erfassten Daten.
Fig. 2 zeigt, dass das Untersuchen der optischen Wahrnehmungsfähigkeit durchgeführt wird, indem unterschiedlich große Zeichen, nämlich Zahlen, in einem Head-Up-Display 5 des Fahrzeugs 2 angezeigt werden.
Es wird ein Audiosignal erfasst, wobei jedes vom Fahrer 4 zu erkennende Zeichen durch einen Rahmen markiert wird und wobei die Markierung bzw. der Rahmen zu einem weiteren Zeichen wandert, wenn ein mit dem Zeichen korrespondierendes Audiosignal erfasst wird.
Die Stimme des Fahrers 4 wird als Audiosignal erfasst, wobei jedes vom Fahrer 4 zu erkennende Zeichen durch den Rahmen markiert wird und wobei die Markierung zu einem weiteren Zeichen wandert, wenn der Fahrer 4 das zu erkennende Zeichen erkannt und mit seiner Stimme identifiziert hat.
Fig. 3 zeigt, dass das Untersuchen der optischen Wahrnehmungsfähigkeit durchgeführt wird, indem eine Zahl in einem Head-Up-Display 5 des Fahrzeugs 2 in einem rot-grünen Kontrastbild 6 dargestellt wird. Dabei wird ein Audiosignal erfasst und eine weitere Zahl und ein weiteres Kontrastbild 7 werden dargestellt, wenn ein mit der ersten Zahl
korrespondierendes Audiosignal erfasst wird.
Dabei wird die Stimme des Fahrers 4 als Audiosignal erfasst und ein weiteres Kontrastbild 7 wird dargestellt, wenn der Fahrer 4 die zu erkennende Zahl im ersten Kontrastbild 6 erkannt und mit seiner Stimme identifiziert hat. Fig. 4 zeigt, dass das Untersuchen der optischen Wahrnehmungsfähigkeit durchgeführt wird, indem ein Rastergitter 8 mit einem Punkt 9 in dessen Mitte in einem Head-Up-Display 5 des Fahrzeugs 2 dargestellt wird. Es ist ein sogenanntes Amsler-Gitter dargestellt.
Der Punkt 9 in der Mitte des großen quadratischen Rastergitters 8 wird während der Prüfung mit einem Auge fixiert. Das jeweils andere Auge wird mit der flachen Hand vollständig abgedeckt.
Bei entsprechenden Befunden wird der Proband scheinbare Löcher im Raster oder dunkle Stellen in dem Gittermuster bemerken können, ggf. auch Wellen oder Verkrümmungen der Rasterlinien. Dies ist in dem verzerrten Rastergitter 10 grafisch dargestellt.
Fig. 5 zeigt, dass das Untersuchen der optischen Wahrnehmungsfähigkeit durchgeführt wird, indem das Gesichtsfeld des Fahrers 4 untersucht wird.
Blickrichtungen des Fahrers 4 werden während der Fahrt über einen definierten Zeitraum erfasst.
Die Vorrichtung 1 und/ oder die Überwachungseinrichtung 3 erfasst bzw.
erfassen die Blickrichtung des Fahrers 4. Dies kann über eine oder mehrere Kameras erfolgen. Hierbei werden die Kopfausrichtung sowie die Position der Pupillen und/ oder der Iris relativ zum Kopf mithilf e einer Einrichtung zur
Bildverarbeitung bestimmt. Um eine hohe Präzision der Messung zu erreichen, erfolgt einmalig für den Fahrer 4 ein Kalibriervorgang.
Die Überwachungseinrichtung 3 beobachtet permanent die Blickrichtung des Fahrers 4 während der Fahrt. Wird ein interessantes Objekt abseits der aktuellen Blickrichtung wahrgenommen, dann wird der Fahrer 4 seine Fixation und/ oder Blickrichtung auf dieses Objekt richten, um dieses genauer auflösen und betrachten zu können. Die Auflösung des Auges ist im Zentrum des Gesichtsfeldes deutlich höher als weiter außen in der Peripherie. Im oberen Bild der Fig. 5 ist dargestellt, dass eine aktuelle Blickrichtung auf einen ersten Punkt 1 1 gerichtet ist, d.h. das Gesichtsfeldzentrum befindet sich dort. Wenn die Blickrichtung zu dem zweiten Punkt 12 wandert, erfasst die Vorrichtung 1 oder die Überwachungseinrichtung 3, dass an dieser Stelle im peripheren Gesichtsfeld relativ zum ersten Punkt 1 ein Anreiz zum
Blickwechsel erfolgt ist, d.h. die visuelle Funktion dort intakt ist.
Die relative Position des zweiten Punktes 12 zum ersten Punkt 11 wird in eine fahrerspezifische Gesichtsfeldkarte 13 eingetragen. Über Stunden, Tage oder Wochen entsteht so eine sehr dichte Karte, in der Gesichtsfeldausfälle 14 (Skotome), also lokal begrenzte visuelle Einschränkungen bzw. Blindheiten, erkannt werden können.
Es könnten auch mehrere Karten in Abhängigkeit von der Helligkeit des Anreizes, nämlich der Fahrzeugumgebung, erstellt werden. Auf diese Weise kann sogar das Ausmaß der Einschränkung quantifiziert werden. Bei einem Verdacht auf einen Gesichtsfeldausfall empfiehlt die Vorrichtung 1 des
Fahrzeugs 2 die Konsultation eines Augenarztes.
Grafisch nicht dargestellt ist, dass das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt wird, indem dem Fahrer 4 ein sich veränderndes Muster dargestellt wird und die Überwachungseinrichtung 3 Änderungen eines Pupillendurchmessers des Fahrers 4 erfasst.
Der Fahrer 4 schaut für einige Minuten auf ein sich veränderndes Muster, das auf dem Head-Up Display 5 dargestellt wird. Gleichzeitig wird mit einer Kamera der Pupillendurchmesser beider Augen vermessen. Aus der Größe der zeitlichen Veränderung des Pupillendurchmessers als Reaktion auf das Muster, welches als Stimulationsmuster fungiert, können Rückschlüsse auf das
Gesichtsfeld gemacht werden. Für die Funktion dieses Verfahrens ist ein hinreichend dunkler und homogener Hintergrund erforderlich. Der Pupillendurchmesser wird mit hoher Genauigkeit gemessen.
Nicht grafisch dargestellt ist ein Verfahren zum Bedienen eines Fahrzeugs 2 durch den Fahrer 4. Das Verfahren umfasst die nachfolgenden Schritte:
Erfassen zumindest eines Teils zumindest eines Auges und/ oder zumindest eines Teils des Gesichts des Fahrers 4 durch die Überwachungseinrichtung 3, Auswerten der von der Überwachungseinrichtung 3 erfassten Daten und Bedienen von Geräten des Fahrzeugs 2 auf Basis der erfassten Daten.
Es ist nicht grafisch dargestellt, dass eine Bedienung, nämlich insbesondere eine Steuerung von Geräten des Fahrzeugs und/ oder eine Kommunikation mit diesen, durch eine Blickrichtung bzw. auf Basis der Blickrichtung erfolgt. Das Steuern der Geräte erfolgt durch die Vorrichtung 1 , nachdem Daten, nämlich die Blickrichtung oder ein Blinzeln des Fahrers 4, erfasst wurden.
Die Vorrichtung 1 und/ oder die Überwachungseinrichtung 3 ist in der Lage, die Blickrichtung des Fahrers 4 zu erkennen. So kann der Fahrer 4 durch
Anvisieren eines Bildschirmbereichs oder Head-Up-Display-Bereichs und/ oder einfaches oder doppeltes Blinzeln bestimmte Funktionen aktivieren oder in diesen Bereichen zusätzliche Informationen einblenden.
Fig. 6 zeigt, dass das Untersuchen der optischen Wahrnehmungsfähigkeit durchgeführt wird , indem von der Überwachungseinrichtung 3 ein Netzhautbild erfasst wird . Konkret sind drei Netzhautbilder dargestellt. Die Überwachungseinrichtung 3 umfasst einen Netzhautscanner im Bereich der Sonnenblende oder hinter der Sonnenblende.
Hierbei werden mikroelektromechanische Scanspiegel (MEMS) verwendet. Um ein genügend großes Areal des Augenhintergrundes aufnehmen zu können, wird der Kopf stabil gehalten und mit dem Objektiv eines Scankopfs relativ nahe an das Auge herangefahren. Es wird ein Abstand von ca. 1-2 cm gewählt.
Für das Halten des Kopfs wird eine schräg heruntergeklappte Sonnenblende als Stirnanlage verwendet. In dieser sind eine Mulde und eine Verbreiterung für die Positionierung der Stirn vorgesehen.
Der Fahrer 4 wird über einen motorisierten Sitz an eine Kopfstütze
herangefahren. Der Scankopf wird dann nacheinander elektromechanisch motorisiert vor den beiden Augen positioniert und nimmt jeweils ein Bild der Netzhaut auf.
Die aufgenommenen Bilder werden entweder durch die Vorrichtung 1 selbst über eine Einrichtung zur Bildanalyse bewertet oder telemetrisch auf einen Server übertragen und dort entweder automatisch oder durch einen Experten bewertet.
Am Ende jeder hier beschriebenen Untersuchung erfolgt eine Qualifizierung der optischen Wahrnehmungsfähigkeit des Fahrers 4 und/ oder es wird eine Empfehlung, einen Arzt aufzusuchen, dargestellt.
Die Qualifizierung und/ oder Empfehlung kann als Audiosignal, in Form einer elektronischen Stimme oder auf einem Head-Up-Display 5 oder einem
Bildschirm dargestellt werden. Nicht grafisch dargestellt ist ein Verfahren zum Erkennen und/ oder Anzeigen des Fahrers 4 eines Fahrzeugs 2. Das Verfahren umfasst die nachfolgenden Schritte: Erfassen zumindest eines Teils zumindest eines Auges und/ oder zumindest eines Teils des Gesichts des Fahrers 4 durch eine
Überwachungseinrichtung 3, Auswerten der von der Überwachungseinrichtung 3 erfassten Daten und Identifizieren des Fahrers 4 auf Basis der erfassten Daten.
Das Verfahren dient zum Erkennen des Fahrers 4 des Fahrzeugs 2. Es ist eine hochsichere biometrische Identifizierung des Fahrers möglich. Die menschliche Iris und die Netzhaut mit ihrer einzigartigen Struktur sind hierfür sehr gut geeignet.
Die Netzhaut bietet als biometrische Struktur die Möglichkeit, während der Erkennung der Netzhautstruktur mit der Vorrichtung 1 und/ oder der
Überwachungseinrichtung 3 zu kommunizieren. Der Informationsaustausch findet über eine Einblendung von Mustern auf die Netzhaut, nämlich ein sich bewegendes Target, und bewussten Augenbewegungen statt. Diese
Kommunikation erfolgt abhörsicher zwischen dem Auge und der Vorrichtung 1 und/ oder der Überwachungseinrichtung 3. Die Identifizierung des Fahrers 4 wird zum Starten des Fahrzeugs 2 verwendet.
Das Head-Up-Display 5 ist eine Anzeigeeinrichtung, die es dem Fahrer 4 erlaubt, seine Kopfhaltung oder Blickrichtung beizubehalten, wenn ihm
Informationen optisch übermittelt werden, weil die Informationen in sein Sichtfeld projiziert werden. Bezugszeichenliste:
1 Vorrichtung
2 Fahrzeug
3 Überwachungseinrichtung
4 Fahrer
5 Head-Up-Display
6 Erstes Kontrastbild
7 Weiteres Kontrastbild
8 Rastergitter
9 Punkt in 8
10 Verzerrtes Rastergitter
11 Erster Punkt
12 Zweiter Punkt
13 Gesichtsfeld karte
14 Gesichtsfeldausfall

Claims

Patentansprüche
Verfahren zum Erkennen und/ oder Anzeigen des Fahrers (4) eines Fahrzeugs (2) und/ oder zum Erkennen und/ oder Anzeigen von
Einschränkungen der optischen Wahrnehmungsfähigkeit des Fahrers (4) eines Fahrzeugs (2) und/ oder zum Bedienen eines Fahrzeugs (2) durch den Fahrer (4), umfassend die nachfolgenden Schritte:
- Erfassen zumindest eines Teils zumindest eines Auges und/ oder zumindest eines Teils des Gesichts des Fahrers (4) durch eine Überwachungseinrichtung (3),
- Auswerten der von der Überwachungseinrichtung (3) erfassten
Daten,
- Identifizieren des Fahrers (4) und/ oder Untersuchen der optischen Wahrnehmungsfähigkeit und/ oder der Augen des Fahrers (4) und/ oder Bedienen von Geräten des Fahrzeugs
(2) auf Basis der erfassten Daten.
Verfahren nach Anspruch 1 , dadurch gekennzeichnet, dass die
Überwachungseinrichtung
(3) eine Kamera umfasst, welche im Stand und/ oder während der Fahrt des Fahrzeugs (2) Bewegungen der Augen und/ oder eines Teils des Gesichts des Fahrers (4) erfasst
Verfahren nach Anspruch 1 oder 2, dadurch gekennzeichnet, dass das Untersuchen der optischen Wahrnehmungsfähigkeit durchgeführt wird, indem unterschiedlich große Zeichen, bevorzugt Zahlen und/ oder Buchstaben, in einem Head-Up-Display (5) oder einem Bildschirm des Fahrzeugs (2) angezeigt werden, wobei ein Audiosignal erfasst wird, wobei jedes vom Fahrer
(4) zu erkennende Zeichen markiert wird und wobei die Markierung zu einem weiteren Zeichen wandert, wenn ein mit dem Zeichen korrespondierendes Audiosignal erfasst wird.
Verfahren nach einem der voranstehenden Ansprüche, dadurch gekennzeichnet, dass das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt wird, indem ein erstes Zeichen, bevorzugt Zahlen und/ oder Buchstaben, in einem Head-Up-Display
(5) oder einem Bildschirm des Fahrzeugs (2) in einem rot-grünen
Kontrastbild
(6) dargestellt wird, wobei ein Audiosignal erfasst wird und wobei ein weiteres Zeichen und/ oder ein weiteres Kontrastbild
(7) dargestellt wird, wenn ein mit dem ersten Zeichen korrespondierendes Audiosignal erfasst wird.
Verfahren nach einem der voranstehenden Ansprüche, dadurch gekennzeichnet, dass das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt wird, indem das Gesichtsfeld und/ oder das zentrale Gesichtsfeld des Fahrers (4) untersucht wird.
Verfahren nach einem der voranstehenden Ansprüche, dadurch gekennzeichnet, dass das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt wird, indem ein Rastergitter
(8) mit einem Punkt (9) in dessen Mitte in einem Head-Up-Display (5) oder einem Bildschirm des Fahrzeugs (2) dargestellt wird.
Verfahren nach einem der voranstehenden Ansprüche, dadurch gekennzeichnet, dass Blickrichtungen des Fahrers (4) während der Fahrt über einen definierten Zeitraum erfasst werden.
Verfahren nach einem der voranstehenden Ansprüche, dadurch gekennzeichnet, dass das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt wird, indem dem Fahrer (4) ein sich veränderndes Muster dargestellt wird und die
Überwachungseinrichtung (3) Änderungen eines Pupillendurchmessers des Fahrers (4) erfasst,
9. Verfahren nach einem der voranstehenden Ansprüche, dadurch
gekennzeichnet, dass das Untersuchen der optischen
Wahrnehmungsfähigkeit durchgeführt wird, indem von der
Überwachungseinrichtung (3) ein Netzhautbild erfasst wird.
10. Verfahren nach Anspruch 9, dadurch gekennzeichnet, dass die
Überwachungseinrichtung (3) einen oder zwei Netzhautscanner im Bereich der Sonnenblende oder hinter der Sonnenblende umfasst.
1 1. Verfahren nach einem der voranstehenden Ansprüche, dadurch
gekennzeichnet, dass am Ende der Untersuchung eine Qualifizierung der optischen Wahrnehmungsfähigkeit des Fahrers (4) erfolgt und/ oder dass eine Empfehlung, einen Arzt aufzusuchen, dargestellt wird.
12. Vorrichtung (1 ) eines Fahrzeugs (2) zur Durchführung eines Verfahrens nach einem der voranstehenden Ansprüche, umfassend eine
Überwachungseinrichtung (3).
PCT/EP2017/080974 2017-01-05 2017-11-30 Verfahren und vorrichtung zur durchführung des verfahrens in einem fahrzeug WO2018127330A1 (de)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US16/475,357 US11931103B2 (en) 2017-01-05 2017-11-30 Method and device for carrying out the method in a vehicle
EP17805217.1A EP3566090A1 (de) 2017-01-05 2017-11-30 Verfahren und vorrichtung zur durchführung des verfahrens in einem fahrzeug
JP2019547786A JP7045387B2 (ja) 2017-01-05 2017-11-30 車両の運転者の視覚認知能力の制限を認識するための方法、及び、装置

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102017100172 2017-01-05
DE102017100172.7 2017-01-05

Publications (1)

Publication Number Publication Date
WO2018127330A1 true WO2018127330A1 (de) 2018-07-12

Family

ID=60484395

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/EP2017/080974 WO2018127330A1 (de) 2017-01-05 2017-11-30 Verfahren und vorrichtung zur durchführung des verfahrens in einem fahrzeug

Country Status (5)

Country Link
US (1) US11931103B2 (de)
EP (1) EP3566090A1 (de)
JP (1) JP7045387B2 (de)
DE (1) DE102017129067A1 (de)
WO (1) WO2018127330A1 (de)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111724626A (zh) * 2019-03-19 2020-09-29 罗伯特·奥瑞斯坦 交通许可方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102019219944A1 (de) * 2019-12-18 2021-06-24 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zur Durchführung eines Astigmatismus-Sehtests in einem Fahrzeug
DE102021114028A1 (de) 2021-05-31 2022-12-01 Bayerische Motoren Werke Aktiengesellschaft Verfahren zum Messen individueller Seh- und Reaktionsfähigkeiten des Fahrers und zum entsprechenden Anpassen integrierter Fahrzeugeinrichtungen
US20230080085A1 (en) * 2021-09-10 2023-03-16 Aptiv Technologies Limited Driver vision assistance systems and methods
CN114005261B (zh) * 2021-10-16 2023-04-18 温州医科大学附属眼视光医院 一种基于智能感应的红绿灯提醒仪

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0933743A2 (de) * 1998-01-28 1999-08-04 DaimlerChrysler AG Vorrichtung zur Vigilanzzustandsbestimmung
DE102004035896A1 (de) 2004-07-23 2006-03-16 Robert Bosch Gmbh Vorrichtung zur Erfassung von Informationen über ein Messobjekt in einem Fahrzeug
EP1997667A1 (de) * 2007-05-31 2008-12-03 Volkswagen AG Informationsvermittlungsvorrichtung und Verfahren zur Vermittlung von Informationen
US8184867B2 (en) 2005-08-05 2012-05-22 Heidelberg Engineering Gmbh Method and system for biometric identification or verification
EP2564766A1 (de) 2011-09-02 2013-03-06 Volvo Car Corporation Visuelle Eingabe eines Fahrzeugbedieners
DE102012221647A1 (de) 2012-11-27 2014-05-28 Bayerische Motoren Werke Aktiengesellschaft Testen der Sehfähigkeit eines Fahrers eines Kraftfahrzeugs
DE102013003047A1 (de) 2013-02-22 2014-08-28 Audi Ag Verfahren und System zum blickrichtungsabhängigen Steuern einer Funktionseinheit

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS62109539A (ja) * 1985-11-08 1987-05-20 スタンレー電気株式会社 視力判別装置
US5422690A (en) * 1994-03-16 1995-06-06 Pulse Medical Instruments, Inc. Fitness impairment tester
CA2207318A1 (en) 1994-12-09 1996-06-13 Lloyd M. Aiello Electronic imaging system for retinal examination and treatment
US6386706B1 (en) 1996-07-31 2002-05-14 Virtual-Eye.Com Visual function testing with virtual retinal display
JP2005095572A (ja) 2003-08-21 2005-04-14 Nissan Motor Co Ltd 有効視野計測装置
JP2008212359A (ja) 2007-03-02 2008-09-18 Toyota Motor Corp 視線検出装置
JP2009169486A (ja) 2008-01-11 2009-07-30 Seiko Epson Corp 運転情報記録システム及び運転情報記録方法
US7993003B2 (en) * 2009-01-23 2011-08-09 Eye Care And Cure Pte. Ltd Computerized method for colorblindness testing
US8047652B1 (en) * 2009-05-19 2011-11-01 Ernesto Collazo Portable electronic amsler test
CN104080394B (zh) * 2011-09-16 2017-08-08 安尼迪斯公司 评估视网膜功能的***和方法
DE102012106522A1 (de) * 2012-07-18 2014-01-23 Huf Hülsbeck & Fürst Gmbh & Co. Kg Verfahren zur Authentifizierung eines Fahrers in einem Kraftfahrzeug
JP2016038843A (ja) 2014-08-11 2016-03-22 トヨタ自動車株式会社 視線状態判定装置

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0933743A2 (de) * 1998-01-28 1999-08-04 DaimlerChrysler AG Vorrichtung zur Vigilanzzustandsbestimmung
DE102004035896A1 (de) 2004-07-23 2006-03-16 Robert Bosch Gmbh Vorrichtung zur Erfassung von Informationen über ein Messobjekt in einem Fahrzeug
US8184867B2 (en) 2005-08-05 2012-05-22 Heidelberg Engineering Gmbh Method and system for biometric identification or verification
EP1997667A1 (de) * 2007-05-31 2008-12-03 Volkswagen AG Informationsvermittlungsvorrichtung und Verfahren zur Vermittlung von Informationen
EP2564766A1 (de) 2011-09-02 2013-03-06 Volvo Car Corporation Visuelle Eingabe eines Fahrzeugbedieners
DE102012221647A1 (de) 2012-11-27 2014-05-28 Bayerische Motoren Werke Aktiengesellschaft Testen der Sehfähigkeit eines Fahrers eines Kraftfahrzeugs
DE102013003047A1 (de) 2013-02-22 2014-08-28 Audi Ag Verfahren und System zum blickrichtungsabhängigen Steuern einer Funktionseinheit

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111724626A (zh) * 2019-03-19 2020-09-29 罗伯特·奥瑞斯坦 交通许可方法

Also Published As

Publication number Publication date
US20210282636A1 (en) 2021-09-16
JP2020515309A (ja) 2020-05-28
EP3566090A1 (de) 2019-11-13
US11931103B2 (en) 2024-03-19
DE102017129067A1 (de) 2018-07-05
JP7045387B2 (ja) 2022-04-01

Similar Documents

Publication Publication Date Title
EP3566090A1 (de) Verfahren und vorrichtung zur durchführung des verfahrens in einem fahrzeug
DE19958436B4 (de) Vorrichtung und Verfahren zur aktiven, physiologisch bewerteten, umfassenden Korrektur der Aberrationen des menschlichen Auges
EP3958726B1 (de) Bestimmung eines refraktionsfehlers eines auges
DE102010017837A1 (de) Anordnung zur Erzielung hochgenauer Messwerte am Auge
EP3955800B1 (de) Bestimmung eines refraktionsfehlers eines auges
DE4326760C2 (de) Vorrichtung zur Prüfung zentraler Sehfunktionen
EP3542703B1 (de) Vorrichtung und verfahren zum erfassen eines gesichtsfelds einer ein skotom aufweisenden person
DE19502337C2 (de) Vorrichtung und Verfahren zur Prüfung von Sehfunktionen
EP3972478B1 (de) Gemeinsame bestimmung von akkommodation und vergenz
EP3873322B1 (de) Ortsbezogene quantifizierung von halo- und streulicht-beeinträchtigung
DE19540802A1 (de) Vorrichtung und Verfahren zur Prüfung von Sehfunktionen
DE112016002541T5 (de) Sehprüfungsvorrichtung
DE102007001738B4 (de) Verfahren und Computerprogrammprodukt zur Blickerfassung
DE10313975A1 (de) Verfahren zur Untersuchung des Augenhintergrundes
DE102017115958A1 (de) System und Verfahren für das Erfassen von Kenngrößen eines Auges
DE102021116604A1 (de) Ophthalmologische Vorrichtung und Verfahren zur Durchführung ophthalmologischer Untersuchungen
EP2454988B1 (de) Vorrichtung und Verfahren zur Gesichtsfeldbestimmung
DE102010021346B4 (de) Ophthalmologisches Untersuchungsgerät
DE102015015136A1 (de) Adaptives Benutzeroberflächensystem
WO2023052473A1 (de) Messvorrichtung und messverfahren zur vorbereitung einer laserbehandlung, behandlungsvorrichtung zur laserbehandlung
DE102021202451A1 (de) Verfahren, System und Computerprogrammprodukt zur Bestimmung optometrischer Parameter
EP4076138A1 (de) Untersuchungsvorrichtung und verfahren zur augenuntersuchung
DE102014113679B3 (de) Vorrichtung zur Verbesserung des Sehvermögens
DE102022209490A1 (de) Verfahren, Verwenden von angepassten Sehzeichen und Vorrichtung zum Bestimmen von Sehschärfecharakteristika eines Probanden
Zavod The effects of stimulus motion on contrast sensitivity: dynamic sensitivity functions

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 17805217

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2019547786

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 2017805217

Country of ref document: EP

Effective date: 20190805