WO2014040930A1 - Verfahren und vorrichtung zur bedienung einer kraftfahrzeugkomponente mittels gesten - Google Patents
Verfahren und vorrichtung zur bedienung einer kraftfahrzeugkomponente mittels gesten Download PDFInfo
- Publication number
- WO2014040930A1 WO2014040930A1 PCT/EP2013/068550 EP2013068550W WO2014040930A1 WO 2014040930 A1 WO2014040930 A1 WO 2014040930A1 EP 2013068550 W EP2013068550 W EP 2013068550W WO 2014040930 A1 WO2014040930 A1 WO 2014040930A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- gesture
- feedback signal
- input means
- output
- hand
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 238000000605 extraction Methods 0.000 claims description 8
- 230000004913 activation Effects 0.000 claims description 4
- 230000003287 optical effect Effects 0.000 claims description 4
- 238000001514 detection method Methods 0.000 claims description 3
- 230000004044 response Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- VVNCNSJFMMFHPL-VKHMYHEASA-N D-penicillamine Chemical compound CC(C)(S)[C@@H](N)C(O)=O VVNCNSJFMMFHPL-VKHMYHEASA-N 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 229940075911 depen Drugs 0.000 description 1
- 125000002897 diene group Chemical group 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K37/00—Dashboards
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/146—Instrument input by gesture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/146—Instrument input by gesture
- B60K2360/1464—3D-gesture
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/20—Optical features of instruments
- B60K2360/21—Optical features of instruments using cameras
Definitions
- the invention relates to a method for operating a motor vehicle component by means of gestures, wherein one of a hand of an operator, is detected in a three-dimensional operating space which is part of an interior of a motor vehicle from ⁇ guided gesture by means of an input means, in particular a hand or parts and a operating function associated with the detected gesture is executed. Furthermore, the invention relates to an operating unit of a motor vehicle for operating a motor vehicle component by means of gestures having the features of the independent device claim.
- Motor vehicle components can be operated in different ways. There is a widespread operation with me ⁇ chanical and electromechanical controls such as switches, turntable or turn / push control. Also the operation of
- Touch pads used with which motor vehicle components can be operated comfortably In the case of the latter, the operation can then also take place, for example, by means of a handwritten input of letters or characters.
- gestures which may be, for example, finger or hand gestures
- the gestures are detected and converted into an operating function.
- the gestures can be executed in several stages, for example to select a specific entry within a list and then to activate a specific function with respect to this list entry.
- an acoustic feedback which refers to the gesture itself. For example, feedback on synthesized speech is provided with respect to a recognized gesture.
- the gesture must usually be executed in a predefined three-dimensional control room.
- This operating space is part of the motor vehicle interior, but the limits of this operating space for an operator, in particular the driver of the motor vehicle, are not recognizable. For the operator, therefore, the uncertainty remains whether he is in the execution of the gesture at all in the intended three-dimensional control room.
- Motor vehicle component by means of gestures is detected by means of an input means, in particular a hand or parts of a hand of an operator in a three-dimensional control room, which is part of an interior of a motor vehicle, executed gesture executed and associated with the detected gesture control function, wherein a feedback signal is output as soon as the input means enters or has entered the three-dimensional operating space from the outside.
- the feedback signal can be output in particular acoustically or optically.
- a haptic feedback signal is possible.
- the generation of the feedback signal is possible in different variants.
- the feedback signal can z. B. are generated when the input means has completely entered the three-dimensional operating space, so that immediately a gesture can be performed.
- the feedback signal can also be generated as soon as a first subarea, for example a fingertip of a hand, enters the three-dimensional operating space.
- the operator gets the feedback already before the input means is not at any dreidi ⁇ dimensional control room.
- the feedback signal may be different in the control room with only partial entry of the input means in relation to the case of the complete entry of the input means in the control room.
- an acoustic signal can be output from the entry of a fingertip into the control room, the frequency of which increases or decreases until the input means has completely entered the control room.
- a movement and / or a state of the input means can be detected and corresponding parameters extracted.
- the extracted parameters can be compared with stored gesture parameters and with sufficient agreement of the extracted parameters with stored gesture parameters of a gesture, a control function associated with this gesture can be selected.
- an optical feedback signal can be provided in particular a visual display in the primary field of vision of the driver of the motor vehicle, which illuminates, for example, upon entry of the input means in the control room or their color changes upon entry of the input means in the control room.
- a change in color can For example, be configured such that when entering a portion of the input means in the control room yellow-orange light is emitted, which changes with increasing entry of the input means in the control room via yellow to green, with green light, the input means has fully entered the control room and a gesture can be performed.
- the feedback signal can be output as long as the input means is in the three-dimensional control room and no gesture has yet been detected. This gives the operator the feedback that the execution of a gesture is possible. If the output of the feedback signal is terminated after a gesture has been detected, the operator also receives feedback about the recognition of the gesture. Alternatively, upon detection of a gesture, a changed feedback signal can also be output in order to give the operator an appropriate indication. In particular, the operating function associated with the detected gesture can be output in spoken form.
- the operator receives the same response as long as the input means is in the dreidi ⁇ dimensional control room.
- the feedback signal is output as a variable acoustic feedback ⁇ designal, then it will be signaled to the operator via the change of the acoustic feedback signal that he is approaching an edge region of the three-dimensional control room. In this case, the operator receives a further indication of the limits of the control room.
- the acoustic feedback signal can be outputted with variable frequency depending on a speed of movement of a ⁇ transfer means or a position of the input means in the three-dimensional ⁇ control room.
- the feedback signal can also be output with variable volume in these cases.
- the input means an operator's hand
- the acoustic feedback signal can be output with a THD factor in depen ⁇ dependence from an opening state of the hand. In other words, the harmonic distortion factor depends on whether the hand is open or closed.
- the acoustic feedback signal is only output if an activation step has already been carried out.
- an activation step either the acoustic feedback itself can be switched on or off or the system can be activated.
- a cancel gesture may be provided, broken the acoustic feedback signal from ⁇ when detected gesture abort and the gesture input is terminated.
- An operating unit according to the invention of a motor vehicle for operating a motor vehicle component by means of gestures has means
- an input means for detecting a movement of an input means, in particular a hand or parts of a hand of an operator in a three-dimensional control room, which is part of an interior of the motor vehicle,
- the Be ⁇ diene unit further comprises a feedback unit, which is adapted to generate a feedback signal as soon as the
- Input means from the outside in the three-dimensional control room occurs or has occurred.
- the invention exporting ⁇ approximately embodiment explained below with reference to the figure and a closer. 1 is a schematic diagram of the arrangement of the control room,
- FIG. 2 is a block diagram of a control unit.
- a motor vehicle interior 1 is shown schematically as a cuboid.
- a three-dimensional control room 2 monitored by a sensor, in particular a camera, is arranged, which has no visible boundary.
- gestures can be performed in a known manner by means of a hand 3, by means of which a motor vehicle component can be operated.
- Control room 2 is arranged for example in the vicinity of a center console of the motor vehicle to be easily accessible to the driver. If the operator's hand 3, in particular of the driver, enters the control room 2, a feedback signal is generated in order to give the operator corresponding feedback. This ensures that the operator can reliably recognize that his hand 3 is in the operating room 2.
- the feedback signal is generated when the hand 3 is completely in the control room 2, so that gestures can be executed directly.
- the feedback signal is already output when a fingertip of the hand 3 enters the control room 2. In this case, the operator receives an early feedback that a hand now enters the control room 2, but has not yet fully entered.
- the feedback signal from the entrance of the fingertip in the control room 2 can be issued varied until the complete entry of the hand 3 in the control room 2, so that the operator receives a corresponding feedback. If the feedback signal is output acoustically, for example, the frequency of the acoustic signal can be from entering the fingertip into the control room 2 until the complete hand 3 enters the control room 2 Feedback signal continuously increased or decreased. If the hand 3 completely entered the control room 2, then the frequency is kept constant. If a gesture is detected after entering the hand 3 in the control room 2, an altered feedback signal is output to signal to the operator that the gesture has been detected. An altered acknowledgment signal may in particular also consist of a reproduction of the selected operating function.
- the voice output "volume increase” or “the volume is increased” can be output as acoustic feedback
- the audible feedback signal can also be issued with variable frequency or variable volume depending on a speed of movement of the hand 3 or a position of the hand 3 in the three-dimensional control room 2. This allows the operator more information about the
- an optical feedback signal can also be provided as the feedback signal.
- a colored light ⁇ display may be provided. If the hand 3 is completely in the control room 2, this light display can imitate green light to signal the driver that he can start with the input of the gesture. With only partial entry of the hand 3 in the control room 2, a deviating light color can be output to signal this condition to the driver.
- the optical feedback can be output via a head-up display.
- a demolition gesture is provided with which the previously selected by gesture operating function can be canceled. This demolition gesture can also be used if the hand 3 consciously enters the operating room 2, but no operating gesture is to be performed. In this case, the return signal can be terminated by the cancel gesture.
- Fig. 2 is a block diagram of a control unit for
- a gesture sensor 4 which is arranged in the interior 1 of the motor vehicle and monitors the control room 2, a three-dimensional image of the operating area ⁇ 2 is received.
- the gesture sensor 4 is therefore in particular a camera or a camera system.
- the gesture sensor 4 is connected to a gesture recognizer 5.
- segmentation takes place in the gesture sensor 5, ie the image component of the hand 3 is separated from the background image.
- the gesture recognizer 5 generates a list of information, for example about the orientation of the hand or the individual fingers and the movement of the hand or the fingers.
- These parameters are supplied to the parameter extraction module 6, which extracts from the information provided by the gesture recognizer 5 or parameters, the parameters required for the gesture recognition.
- a position of the hand 3 extracted by the parameter extraction module 6 is supplied to a gesture space discriminator 7.
- the gesture room discriminator 7 it is checked whether the hand 3 is located inside the control room 2.
- the gesture sensor 4 By the gesture sensor 4, a room is monitored, which is larger than the control room 2, but this space is not sharply demarcated. For reliable detection of a gesture, therefore, the delimited control room 2 is defined.
- the parameter extraction module 6 is furthermore connected to a function selection module by an assignment of a function selection to extracted parameters or the detected gesture thereby occurs.
- about thenossaus ⁇ selection module 8 the corresponding operating function is thus selected from ⁇ and activated.
- the function selection in the function selection module 8 takes place only when the hand 3 is in the control room 2, that is, the gesture has also been performed in the control room 2. The corresponding information on this is obtained by the function selection module 8 from the gesture space discriminator 7.
- the parameter extraction module 6 is connected to an acoustic feedback module 9.
- an acoustic signal is generated and ⁇ given as soon as the hand 3 enters the control room 2.
- the release for the output of the feedback signal receives the acoustic feedback module 9 of the gesture space discriminator 7.
- the return ⁇ reporting module 9 also derive the type of acoustic feedback, z. As a signal with increasing frequency from the entrance of the hand 2 in the control room. 3
- At least some of the mentioned modules are wholly or partially formed as part of a computer program that runs on a microprocessor unit.
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Die Erfindung betrifft ein Verfahren zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten, bei dem eine mittels eines Eingabemittels, insbesondere einer Hand (3) oder Teilen einer Hand (3) eines Bedieners, in einem dreidimensionalen Bedienraum (2), der Bestandteil eines Innenraumes eines Kraftfahrzeuges ist, ausgeführte Geste detektiert wird, und eine mit der erkannten Geste verknüpfte Bedienfunktion ausgeführt wird, wobei ein Rückmeldesignal ausgegeben wird, sobald das Eingabemittel von außen in den dreidimensionalen Bedienraum eintritt oder eingetreten ist.
Description
Beschreibung
Verfahren und Vorrichtung zur Bedienung einer Kraftfahrzeug- komponente mittels Gesten
Die Erfindung betrifft ein Verfahren zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten, bei dem eine mittels eines Eingabemittels, insbesondere einer Hand oder Teilen einer Hand eines Bedieners, in einem dreidimensionalen Bedienraum, der Bestandteil eines Innenraums eines Kraftfahrzeugs ist, aus¬ geführte Geste detektiert wird und eine mit der erkannten Geste verknüpfte Bedienfunktion ausgeführt wird. Weiterhin betrifft die Erfindung eine Bedieneinheit eines Kraftfahrzeuges zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten mit den Merkmalen des unabhängigen Vorrichtungsanspruchs.
Kraftfahrzeugkomponenten können auf unterschiedliche Weise bedient werden. Weit verbreitet ist die Bedienung über me¬ chanische bzw. elektromechanische Bedienelemente wie Schalter, Drehsteller oder Dreh-/Drücksteller . Auch die Bedienung von
Kraftfahrzeugkomponenten mittels Sprache ist bereits im Einsatz . Zudem werden in Kraftfahrzeugen auch Touch-Screens und
Touch-Pads eingesetzt, mit denen Kraftfahrzeugkomponenten komfortabel bedient werden können. Bei letzteren kann die Bedienung dann beispielsweise auch mittels handschriftlicher Eingabe von Buchstaben oder Zeichen erfolgen.
Desweiteren ist die Bedienung von Kraftfahrzeugkomponenten mittels Gesten grundsätzlich bekannt. Ein derartiges Verfahren ist beispielsweise in der WO 2009/155465 AI beschrieben. Die Gesten, bei denen es sich beispielsweise um Finger- oder Handgesten handeln kann, werden detektiert und in eine Bedienfunktion umgesetzt. Die Gesten können mehrstufig ausgeführt sein, um beispielsweise innerhalb einer Liste einen bestimmten Eintrag auszuwählen und danach eine bestimmte Funktion bezüglich dieses Listeneintrages zu aktivieren. Für Grundfunktionen, wie beispielsweise die Einstellung einer Lautstärke, sind einfache
Gesten vorgesehen, so dass die Wahl der Bedienschritte in diesem Fall minimiert ist . In dem dort beschriebenen System ist auch eine akustische Rückmeldung vorgesehen, die sich auf die Geste selbst bezieht. So ist beispielsweise hinsichtlich einer erkannten Geste eine Rückmeldung mittels synthetisierter Sprache vorgesehen .
Die Ausführung der Geste muss in der Regel in einem vordefinierten dreidimensionalen Bedienraum erfolgen. Dieser Bedienraum ist Teil des Kraftfahrzeuginnenraumes, jedoch sind die Grenzen dieses Bedienraumes für einen Bediener, insbesondere den Fahrer des Kraftfahrzeuges, nicht erkennbar. Für den Bediener bleibt daher die Unsicherheit, ob er sich bei der Ausführung der Geste überhaupt in dem vorgesehenen dreidimensionalen Bedienraum befindet.
Hier setzt nun die Erfindung an, deren Aufgabe es ist, den Bediener bei der Erkennung des dreidimensionalen Bedienraumes zu unterstüt zen .
Diese Aufgabe wird erfindungsgemäß durch ein Verfahren mit den Merkmalen des Anspruches 1 bzw. eine Bedieneinheit mit den Merkmalen des Anspruches 12 gelöst. Bei dem erfindungsgemäßen Verfahren zur Bedienung einer
Kraftfahrzeugkomponente mittels Gesten wird eine mittels eines Eingabemittels, insbesondere einer Hand oder Teilen einer Hand eines Bedieners, in einem dreidimensionalen Bedienraum, der Bestandteil eines Innenraumes eines Kraftfahrzeuges ist, aus- geführte Geste detektiert und eine mit der erkannten Geste verknüpfte Bedienfunktion ausgeführt, wobei ein Rückmeldesignal ausgegeben wird, sobald das Eingabemittel von außen in den dreidimensionalen Bedienraum eintritt oder eingetreten ist. Das Rückmeldesignal kann insbesondere akustisch oder optisch ausgegeben werden. Weiterhin ist auch ein haptisches Rückmeldesignal möglich.
Die Erzeugung des Rückmeldesignals ist in unterschiedlichen Varianten möglich. Das Rückmeldesignal kann z. B. dann erzeugt werden, wenn das Eingabemittel vollständig in den dreidimen- sionalen Bedienraum eingetreten ist, so dass sofort eine Geste ausgeführt werden kann. Das Rückmeldesignal kann aber auch dann erzeugt werden, sobald ein erster Teilbereich, beispielsweise eine Fingerspitze einer Hand in den dreidimensionalen Bedienraum eintritt. In diesem Fall bekommt der Bediener die Rückmeldung bereits, bevor sich das Eingabemittel vollständig im dreidi¬ mensionalen Bedienraum befindet. Aufgrund der Bewegungsrichtung des Eingabemittels ist für den Bediener jedoch schon ersichtlich, in welche Richtung er das Eingabemittel weiter bewegen muss, damit dieses vollständig in den dreidimensionalen Bedienraum eintritt. Bei dieser zweiten Variante kann das Rückmeldesignal bei nur teilweisem Eintritt des Eingabemittels in den Bedienraum unterschiedlich sein gegenüber dem Fall des vollständigen Eintritts des Eingabemittels in dem Bedienraum. Beispielsweise kann ab dem Eintritt einer Fingerkuppe in den Bedienraum ein akustisches Signal ausgegeben werden, dessen Frequenz ansteigt oder abnimmt, bis das Eingabemittel vollständig in den Bedienraum eingetreten ist.
Zur Detektion der Geste können eine Bewegung und/oder ein Zustand des Eingabemittels detektiert und entsprechende Parameter extrahiert werden. Die extrahierten Parameter können mit abgespeicherten Gestenparametern verglichen werden und bei hinreichender Übereinstimmung der extrahierten Parameter mit abgespeicherten Gestenparametern einer Geste kann eine mit dieser Geste verknüpfte Bedienfunktion ausgewählt werden.
Ist ein optisches Rückmeldesignal vorgesehen, so kann hierzu insbesondere eine optische Anzeige im primären Sichtbereich des Fahrers des Kraftfahrzeuges vorgesehen sein, die beispielsweise bei Eintritt des Eingabemittels in den Bedienraum aufleuchtet oder deren Farbe sich bei Eintritt des Eingabemittels in den Bedienraum verändert. Eine Veränderung der Farbe kann bei-
spielsweise derart ausgestaltet sein, dass bei Eintritt eines Teilbereiches des Eingabemittels in den Bedienraum gelb-oranges Licht ausgesendet wird, das mit zunehmendem Eintritt des Eingabemittels in den Bedienraum über Gelb zu Grün hin wechselt, wobei bei grünem Licht das Eingabemittel vollständig in den Bedienraum eingetreten ist und eine Geste ausgeführt werden kann.
Das Rückmeldesignal kann ausgegeben werden, solange sich das Eingabemittel in dem dreidimensionalen Bedienraum befindet und noch keine Geste detektiert worden ist. Hierdurch erhält der Bediener die Rückmeldung, dass die Ausführung einer Geste möglich ist. Wird die Ausgabe des Rückmeldesignales nach Erkennung einer Geste beendet, so erhält der Bediener zudem die Rückmeldung über die Erkennung der Geste. Alternativ kann bei Erkennen einer Geste auch ein verändertes Rückmeldesignal ausgegeben werden, um den Bediener einen entsprechenden Hinweis zu geben. Insbesondere kann die mit der erkannten Geste verknüpfte Bedienfunktion in gesprochener Form ausgegeben werden.
Wird das Rückmeldesignal als kontinuierliches akustisches Rückmeldesignal ausgegeben, so erhält der Bediener dieselbe Rückmeldung, solange sich das Eingabemittel in dem dreidi¬ mensionalen Bedienraum befindet.
Wird das Rückmeldesignal als variables akustisches Rückmel¬ designal ausgegeben, so dann über die Veränderung des akustischen Rückmeldesignales dem Bediener signalisiert werden, dass er sich einem Randbereich des dreidimensionalen Bedienraumes nähert. In diesem Fall erhält der Bediener einen weiteren Hinweis auf die Grenzen des Bedienraumes.
Das akustische Rückmeldesignal kann mit variabler Frequenz in Abhängigkeit von einer Geschwindigkeit der Bewegung des Ein¬ gabemittels oder einer Position des Eingabemittels im drei¬ dimensionalen Bedienraum ausgegeben werden. Alternativ kann das Rückmeldesignal in diesen Fällen auch mit variabler Lautstärke ausgegeben werden.
Ist das Eingabemittel eine Hand des Bedieners, so kann das akustische Rückmeldesignal mit einem Klirr-Faktor im Abhän¬ gigkeit von einem Öffnungszustand der Hand ausgegeben werden. Mit anderen Worten hängt der Klirr-Faktor davon ab, ob die Hand offen oder geschlossen ist.
Weiterhin kann vorgesehen sein, dass das akustische Rückmeldesignal nur dann ausgegeben wird, wenn zuvor ein Aktivie- rungsschritt durchgeführt wurde. Durch diesen Aktivierungs¬ schritt kann entweder die akustische Rückmeldung selbst ein- bzw. ausgeschaltet werden oder auch das System aktiviert werden.
Weiterhin kann eine Abbruchgeste vorgesehen sein, wobei bei detektierter Abbruchgeste das akustische Rückmeldesignal ab¬ gebrochen und die Gesteneingabe beendet wird. Somit kann bei versehentlichem Eintreten des Eingabemittels in den dreidimensionalen Bedienraum der Vorgang frühzeitig abgebrochen werden .
Eine erfindungsgemäße Bedieneinheit eines Kraftfahrzeuges zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten weist Mittel auf
zur Detektion einer Bewegung eines Eingabemittels, insbe- sondere einer Hand oder Teilen einer Hand eines Bedieners in einem dreidimensionalen Bedienraum, der Bestandteil eines Innenraumes des Kraftfahrzeuges ist,
- zur Extraktion von Zustands- und/oder Bewegungsparametern des Eingabemittels ,
- zum Vergleich der extrahierten Parameter mit abgespeicherten Gestenparametern von Gesten,
- zur Auswahl einer mit einer erkannten Geste verknüpften Bedienfunktion der Kraftfahrzeugkomponente, wobei die Be¬ dieneinheit weiterhin eine Rückmeldeeinheit aufweist, die zur Erzeugung eines Rückmeldesignals ausgebildet ist, sobald das
Eingabemittel von außen in dem dreidimensionalen Bedienraum eintritt oder eingetreten ist.
Die Erfindung nachfolgend anhand der Figur und eines Ausfüh¬ rungsbeispieles näher erläutert. Es zeigen: Fig. 1 eine Prinzipdarstellung der Anordnung des Bedienraumes,
Fig. 2 ein Blockdiagramm einer Bedieneinheit.
In Fig. 1 ist schematisch ein Kraftfahrzeuginnenraum 1 als Quader dargestellt. Innerhalb des Kraftfahrzeuginnenraumes 1 ist ein von einem Sensor, insbesondere einer Kamera, überwachter dreidimensionaler Bedienraum 2 angeordnet, der keine sichtbare Begrenzung aufweist. Innerhalb des Bedienraumes 2 können mittels einer Hand 3 in bekannter Weise Gesten ausgeführt werden, mittels derer eine Kraftfahrzeugkomponente bedient werden kann. Der
Bedienraum 2 ist beispielsweise in der Nähe einer Mittelkonsole des Kraftfahrzeuges angeordnet, um für den Fahrer gut erreichbar zu sein. Tritt die Hand 3 des Bedieners, insbesondere des Fahrers, in den Bedienraum 2 ein, so wird ein Rückmeldesignal erzeugt, um dem Bediener eine entsprechende Rückmeldung zu geben. Hierdurch wird erreicht, dass der Bediener sicher erkennen kann, dass sich seine Hand 3 in dem Bedienraum 2 befindet. In einer ersten Variante wird das Rückmeldesignal dann erzeugt, wenn sich die Hand 3 vollständig in dem Bedienraum 2 befindet, so dass un- mittelbar Gesten ausgeführt werden können. In einer anderen Ausführungsform wird das Rückmeldesignal bereits ausgegeben, wenn eine Fingerkuppe der Hand 3 in den Bedienraum 2 eintritt. In diesem Fall erhält der Bediener eine frühzeitige Rückmeldung darüber, dass eine Hand nun in dem Bedienraum 2 eintritt, jedoch noch nicht vollständig eingetreten ist. Bei dieser Ausführungsform kann das Rückmeldesignal vom Eintritt der Fingerkuppe in den Bedienraum 2 bis zum vollständigen Eintritt der Hand 3 in den Bedienraum 2 variiert ausgegeben werden, so dass der Bediener eine entsprechende Rückmeldung erhält. Wird das Rückmeldesignal beispielsweise akustisch ausgegeben, so kann vom Eintreten der Fingerkuppe in den Bedienraum 2 bis zum Eintreten der kompletten Hand 3 in den Bedienraum 2 die Frequenz des akustischen
Rückmeldesignals kontinuierlich erhöht oder erniedrigt werden. Ist die Hand 3 vollständig in dem Bedienraum 2 eingetreten, so wird die Frequenz dann konstant gehalten. Wird nach Eintritt der Hand 3 in den Bedienraum 2 eine Geste detektiert, so wird ein verändertes Rückmeldesignal ausgegeben, um dem Bediener zu signalisieren, dass die Geste erkannt worden ist. Ein verändertes Rückmeldesignal kann insbesondere auch in einer Wiedergabe der ausgewählten Bedienfunktion bestehen. Wird durch die Geste beispielsweise eine Funktion zur Erhöhung der Lautstärke eines Autoradios aktiviert, so kann als akustische Rückmeldung die Sprachausgabe "Lautstärke erhöhen" oder „die Lautstärke wird erhöht" ausgegeben werden. Befindet sich die Hand 3 in den Bedienraum 2 und wurde noch keine Geste erkannt, so kann das akustische Rückmeldesignal auch mit variabler Frequenz oder variabler Lautstärke in Abhängigkeit von einer Geschwindigkeit der Bewegung der Hand 3 oder einer Position der Hand 3 im dreidimensionalen Bedienraum 2 ausgegeben werden. Hierdurch kann der Bediener weitere Informationen über den
Bedienvorgang erhalten, beispielsweise, dass sich die Hand 3 der äußeren Begrenzung des Bedienraums 2 nähert und somit die Gefahr besteht, dass die Hand 3 den Bedienraum 2 verlässt und die Geste nicht vollständig erfasst werden kann.
Als Rückmeldesignal kann insbesondere auch ein optisches Rückmeldesignal vorgesehen sein. In diesem Fall kann im primären Sichtbereich des Fahrers beispielsweise eine farbige Leucht¬ anzeige vorgesehen sein. Befindet sich die Hand 3 vollständig im Bedienraum 2, so kann diese Leuchtanzeige grünes Licht imitieren, um den Fahrer zu signalisieren, dass er mit der Eingabe der Geste beginnen kann. Bei nur teilweisem Eintritt der Hand 3 in dem Bedienraum 2 kann eine davon abweichende Lichtfarbe ausgegeben werden, um auch diesen Zustand dem Fahrer zu signalisieren. Alternativ kann die optische Rückmeldung über ein Head-Up- Display ausgegeben werden.
Um bei versehentlicher Ausführung einer Geste im Bedienraum 2 die Ausführung der entsprechenden Bedienfunktion stoppen zu können, ist insbesondere eine Abbruchgeste vorgesehen, mit der die zuvor per Geste ausgewählte Bedienfunktion annulliert werden kann. Diese Abbruchgeste kann auch dann genutzt werden, wenn die Hand 3 zwar bewusst in den Bedienraum 2 eintritt, jedoch keine Bediengeste ausgeführt werden soll . In diesem Fall kann durch die Abbruchgeste das Rückgabesignal beendet werden. In Fig. 2 ist ein Blockdiagramm einer Bedieneinheit zur
Durchführung des erfindungsgemäßen Verfahrens wiedergegeben. Über einen Gestensensor 4, der im Innenraum 1 des Kraftfahrzeuges angeordnet ist und den Bedienraum 2 überwacht, wird ein drei¬ dimensionales Bild des Bedienraumes 2 aufgenommen. Bei dem Gestensensor 4 handelt es sich daher insbesondere um eine Kamera bzw. ein Kamerasystem. Ausgangsseitig ist der Gestensensor 4 mit einem Gestenerkenner 5 verbunden. In dem Gestensensor 5 findet insbesondere eine Segmentierung statt, d. h. der Bildbestandteil der Hand 3 wird von dem Hintergrundbild getrennt. Der Gesten- erkenner 5 erzeugt eine Liste mit Informationen, beispielsweise über die Orientierung der Hand oder der einzelnen Finger sowie die Bewegung der Hand bzw. der Finger. Diese Parameter werden dem Parameterextraktionsmodul 6 zugeführt, das aus den von dem Gestenerkenner 5 zur Verfügung gestellten Informationen bzw. Parametern, die für die Gestenerkennung erforderlichen Parameter extrahiert. Eine von dem Parameterextraktionsmodul 6 extrahierte Position der Hand 3 wird einem Gestenraumdiskriminator 7 zugeführt. In dem Gestenraumdiskriminator 7 wird geprüft, ob sich die Hand 3 innerhalb des Bedienraumes 2 befindet. Durch den Gestensensor 4 wird ein Raum überwacht, der größer ist als der Bedienraum 2, jedoch ist dieser Raum nicht scharf abgegrenzt. Zur sicheren Erkennung einer Geste wird daher der abgegrenzte Bedienraum 2 definiert. Das Parameterextraktionsmodul 6 ist ausgangsseitig weiterhin mit einem Funktionsauswahlmodul verbunden, indem eine Zuordnung einer Funktionsauswahl zu extrahierten Parametern bzw. der
dadurch detektierten Geste erfolgt. Über das Funktionsaus¬ wahlmodul 8 wird somit die entsprechende Bedienfunktion aus¬ gewählt und aktiviert.
Die Funktionsauswahl im Funktionsauswahlmodul 8 erfolgt nur dann, wenn die Hand 3 sich im Bedienraum 2 befindet, das heißt die Geste auch im Bedienraum 2 ausgeführt worden ist. Die entsprechende Information hierzu erhält das Funktionsauswahl¬ modul 8 von dem Gestenraumdiskriminator 7.
Weiterhin ist das Parameterextraktionsmodul 6 mit einem akustischen Rückmeldemodul 9 verbunden. Über das akustische Rückmeldemodul 9 wird ein akustisches Signal erzeugt und aus¬ gegeben, sobald die Hand 3 in den Bedienraum 2 eintritt. Die Freigabe zur Ausgabe des Rückmeldesignals erhält das akustische Rückmeldemodul 9 von dem Gestenraumdiskriminator 7. Aus den vom Parameterextraktionsmodul 6 erhaltenen Parametern kann das Rück¬ meldemodul 9 zudem die Art der akustischen Rückmeldung ableiten, z. B. ein Signal mit ansteigender Frequenz ab dem Eintritt der Hand 2 in den Bedienraum 3.
Zumindest einige der genannten Module, wie beispielsweise der Gestenerkenner 5, das Parameterextraktionsmodul 6 und der Gestenraumdiskriminator 7, sind ganz oder teilweise als Bestandteil eines Computerprogramms ausgebildet, das auf einer Mikroprozessoreinheit abläuft.
Claims
Verfahren zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten, bei dem eine mittels eines Eingabemittels, insbesondere einer Hand (3) oder Teilen einer Hand eines Bedieners, in einem dreidimensionalen Bedienraum (2), der Bestandteil eines Innenraums (2) eines Kraftfahrzeugs ist, ausgeführte Geste detektiert wird und eine mit der er¬ kannten Geste verknüpfte Bedienfunktion ausgeführt wird, d a d u r c h g e k e n n z e i c h n e t , dass ein Rückmeldesignal ausgegeben wird, sobald das Eingabemittel von außen in den dreidimensionalen Bedienraum (2) eintritt oder eingetreten ist.
Verfahren nach Anspruch 1, d a d u r c h g e k e n n z e i c h n e t , dass zur Detektion der Geste
eine Bewegung und/oder ein Zustand des Eingabemittels detektiert und entsprechende Parameter extrahiert werden,
die extrahierten Parameter mit abgespeicherten Gestenparametern verglichen werden,
bei hinreichender Übereinstimmung der extrahierten Parameter mit abgespeicherten Gestenparametern einer Geste eine mit dieser Geste verknüpfte Bedienfunktion ausgewählt wird.
Verfahren nach einem der vorhergehenden Ansprüche, d a d u r c h g e k e n n z e i c h n e t , dass das Rück¬ meldesignal ausgegeben wird, solange sich das Eingabemittel in dem dreidimensionalen Bedienraum (2) befindet und noch keine Geste detektiert worden ist.
Verfahren nach Anspruch 3, d a d u r c h g e k e n n z e i c h n e t , dass die Ausgabe des Rückmeldesignals abgebrochen oder ein verändertes Rückmeldesignal ausge¬ geben wird sobald eine Geste detektiert worden ist.
Verfahren nach einem der vorhergehenden Ansprüche, d a d u r c h g e k e n n z e i c h n e t , dass das Rück¬ meldesignal als akustisches, optisches oder haptisches Rückmeldesignal ausgegeben wird.
Verfahren nach Anspruch 5, d a d u r c h g e k e n n z e i c h n e t , dass das Rückmeldesignal als kontinu¬ ierliches akustisches Rückmeldesignal ausgegeben wird
Verfahren nach Anspruch 5, d a d u r c h g e k e n n z e i c h n e t , dass das Rückmeldesignal als variables akustisches Rückmeldesignal ausgegeben wird.
Verfahren nach Anspruch 7, d a d u r c h g e k e n n z e i c h n e t , dass das akustische Rückmeldesignal mit variabler Frequenz in Abhängigkeit von einer Geschwindigkeit der Bewegung des Eingabemittels oder einer Position des Eingabemittels im dreidimensionalen Bedienraum (2) ausgegeben wird.
Verfahren nach Anspruch 7 oder 8, d a d u r c h g e k e n n z e i c h n e t , dass das akustische Rückmelde¬ signal mit variabler Lautstärke in Abhängigkeit von einer Geschwindigkeit der Bewegung des Eingabemittels oder von der Position des Eingabemittels im dreidimensionalen Bedienraum (2) ausgegeben wird.
Verfahren nach einem der Ansprüche 5 bis 9, d a d u r c h g e k e n n z e i c h n e t , dass das Eingabemittel eine Hand (3) ist und das akustische Rückmeldesignal mit einem Klirrfaktor in Abhängigkeit von einem Öffnungszustand der Hand (3) ausgegeben wird.
Verfahren nach einem der vorhergehenden Ansprüche, g e k e n n z e i c h n e t d u r c h einen Aktivie- rungsschritt , wobei das Rückmeldesignal nur dann aus-
gegeben wird, wenn der Aktivierungsschritt durchgeführt wurde .
Verfahren nach einem der vorhergehenden Ansprüche, d a d u r c h g e k e n n z e i c h n e t , dass die abge¬ speicherten Gesten eine Abbruchgeste beinhalten und bei detektierter Abbruchgeste das Rückmeldesignal abgebrochen und/oder die Gesteneingabe beendet wird.
Bedieneinheit eines Kraftfahrzeugs zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten mit Mitteln
zur Detektion einer Bewegung eines Eingabemittels, insbesondere einer Hand (3) oder Teilen einer Hand eines Bedieners, in einem dreidimensionalen Bedienraum (2), der Bestandteil eines Innenraums (1) des Kraftfahrzeuges ist ,
- zur Extraktion von Zustands- und/oder Bewegungsparametern des Eingabemittels,
zum Vergleich der extrahierten Parameter mit abgespeicherten Gestenparametern von Gesten,
- zur Auswahl einer mit einer erkannten Geste verknüpften Bedienfunktion der Kraftfahrzeugkomponente,
g e k e n n z e i c h n e t d u r c h ein Rückmeldeeinheit (9), die zur Erzeugung eines Rückmeldesignals ausgebildet ist, sobald das Eingabemittel von außen in den dreidi¬ mensionalen Bedienraum (2) eintritt oder eingetreten ist.
Bedieneinheit nach Anspruch 13, d a d u r c h g e ¬ k e n n z e i c h n e t , dass sie zur Ausführung eines Verfahrens nach einem der Ansprüche 1 bis 11 ausgelegt ist
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/427,602 US9524032B2 (en) | 2012-09-12 | 2013-09-09 | Method and device for operating a motor vehicle component by means of gestures |
CN201380045988.7A CN104603720B (zh) | 2012-09-12 | 2013-09-09 | 用于借助手势操作机动车组件的方法和装置 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
DE102012216193.7A DE102012216193B4 (de) | 2012-09-12 | 2012-09-12 | Verfahren und Vorrichtung zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten |
DE102012216193.7 | 2012-09-12 |
Publications (1)
Publication Number | Publication Date |
---|---|
WO2014040930A1 true WO2014040930A1 (de) | 2014-03-20 |
Family
ID=49223728
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
PCT/EP2013/068550 WO2014040930A1 (de) | 2012-09-12 | 2013-09-09 | Verfahren und vorrichtung zur bedienung einer kraftfahrzeugkomponente mittels gesten |
Country Status (5)
Country | Link |
---|---|
US (1) | US9524032B2 (de) |
CN (1) | CN104603720B (de) |
DE (1) | DE102012216193B4 (de) |
FR (1) | FR2995418B1 (de) |
WO (1) | WO2014040930A1 (de) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107835970A (zh) * | 2015-06-02 | 2018-03-23 | 大众汽车有限公司 | 行进器、用户接口和用于在与用户接口相互作用时辅助使用者的方法 |
US10599226B2 (en) * | 2015-05-21 | 2020-03-24 | Audi Ag | Operating system and method for operating an operating system for a motor vehicle |
Families Citing this family (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11137832B2 (en) * | 2012-12-13 | 2021-10-05 | Eyesight Mobile Technologies, LTD. | Systems and methods to predict a user action within a vehicle |
JP5968573B2 (ja) | 2014-02-18 | 2016-08-10 | 三菱電機株式会社 | 移動体用ジェスチャ誘導装置、移動体用ジェスチャ誘導システムおよび移動体用ジェスチャ誘導方法 |
FR3026502A1 (fr) * | 2014-09-30 | 2016-04-01 | Valeo Comfort & Driving Assistance | Systeme et procede de commande d'un equipement d'un vehicule automobile |
US9352687B1 (en) * | 2014-11-07 | 2016-05-31 | General Motors Llc | Methods and system for vehicle setting control |
US10109219B2 (en) * | 2015-04-16 | 2018-10-23 | Robert Bosch Gmbh | System and method for automated sign language recognition |
DE102015006614A1 (de) * | 2015-05-21 | 2016-11-24 | Audi Ag | Verfahren zum Betreiben einer Bedienvorrichtung sowie Bedienvorrichtung für ein Kraftfahrzeug |
DE102015213424A1 (de) * | 2015-07-16 | 2017-01-19 | Audi Ag | Verfahren und Bediensystem zum Bedienen von mindestens einer Funktion in einem Fahrzeug |
US9809231B2 (en) * | 2015-10-28 | 2017-11-07 | Honda Motor Co., Ltd. | System and method for executing gesture based control of a vehicle system |
DE102016214523A1 (de) * | 2016-08-05 | 2018-02-08 | Bayerische Motoren Werke Aktiengesellschaft | Vorrichtung zur gestenbasierten Steuerung eines Systems |
DE102016221564A1 (de) | 2016-10-13 | 2018-04-19 | Bayerische Motoren Werke Aktiengesellschaft | Multimodaler Dialog in einem Kraftfahrzeug |
CN108924703A (zh) * | 2018-08-27 | 2018-11-30 | 奇瑞汽车股份有限公司 | 汽车音响主机控制方法及*** |
FR3086420B1 (fr) * | 2018-09-21 | 2020-12-04 | Psa Automobiles Sa | Procede de commande d’un systeme embarque |
DE102019118787A1 (de) * | 2019-07-11 | 2021-01-14 | Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg | Verfahren zur Ansteuerung einer Kraftfahrzeugkomponente |
DE102019127183A1 (de) * | 2019-10-09 | 2021-04-15 | Audi Ag | Anzeigesystem zum Anzeigen eines Bedienhinweises für ein Bedienelement in einem Kraftfahrzeug |
DE102021103100A1 (de) | 2021-02-10 | 2022-08-11 | Audi Aktiengesellschaft | Anzeigevorrichtung und Verfahren zum Signalisieren einer Eingabegrenze eines Bedienbereichs |
DE102021129692A1 (de) | 2021-11-15 | 2023-05-17 | Bayerische Motoren Werke Aktiengesellschaft | Verfahren zur erzeugung eines akustischen hinweises in oder an einem fahrzeug |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10022321A1 (de) * | 2000-05-09 | 2001-11-15 | Bayerische Motoren Werke Ag | Vorrichtung in Fahrzeugen zum Erkennen einer Handstellung |
DE10349568A1 (de) * | 2002-10-25 | 2004-05-13 | Mitsubishi Fuso Truck And Bus Corp. | Handzeichen-Schaltvorrichtung |
EP2372512A1 (de) * | 2010-03-30 | 2011-10-05 | Harman Becker Automotive Systems GmbH | Fahrzeug-Benutzeroberflächeneinheit für eine elektronische Fahrzeugvorrichtung |
Family Cites Families (31)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6002808A (en) * | 1996-07-26 | 1999-12-14 | Mitsubishi Electric Information Technology Center America, Inc. | Hand gesture control system |
US7050606B2 (en) * | 1999-08-10 | 2006-05-23 | Cybernet Systems Corporation | Tracking and gesture recognition system particularly suited to vehicular control applications |
GB2355055A (en) * | 1999-10-09 | 2001-04-11 | Rover Group | A control system for a vehicle |
US6564144B1 (en) * | 2002-01-10 | 2003-05-13 | Navigation Technologies Corporation | Method and system using a hand-gesture responsive device for collecting data for a geographic database |
US20050270274A1 (en) * | 2002-10-09 | 2005-12-08 | Raphael Bachmann | Rapid input device |
JP2005242694A (ja) * | 2004-02-26 | 2005-09-08 | Mitsubishi Fuso Truck & Bus Corp | ハンドパターンスイッチ装置 |
KR20060070280A (ko) * | 2004-12-20 | 2006-06-23 | 한국전자통신연구원 | 손 제스처 인식을 이용한 사용자 인터페이스 장치 및 그방법 |
US9910497B2 (en) * | 2006-02-08 | 2018-03-06 | Oblong Industries, Inc. | Gestural control of autonomous and semi-autonomous systems |
JP2007302223A (ja) * | 2006-04-12 | 2007-11-22 | Hitachi Ltd | 車載装置の非接触入力操作装置 |
US7606411B2 (en) * | 2006-10-05 | 2009-10-20 | The United States Of America As Represented By The Secretary Of The Navy | Robotic gesture recognition system |
WO2008149482A1 (ja) * | 2007-06-05 | 2008-12-11 | Mitsubishi Electric Corporation | 車両用操作装置 |
JP5228439B2 (ja) * | 2007-10-22 | 2013-07-03 | 三菱電機株式会社 | 操作入力装置 |
US8214098B2 (en) * | 2008-02-28 | 2012-07-03 | The Boeing Company | System and method for controlling swarm of remote unmanned vehicles through human gestures |
JP2011525283A (ja) | 2008-06-18 | 2011-09-15 | オブロング・インダストリーズ・インコーポレーテッド | 車両インターフェース用ジェスチャ基準制御システム |
EP2300613A4 (de) | 2008-06-18 | 2011-11-09 | Life Technologies Corp | Mutierte und chemisch modifizierte thermisch stabile dna-polymerasen |
US20100052931A1 (en) * | 2008-08-26 | 2010-03-04 | Gm Global Technology Operations, Inc. | Gesture control key fob |
US20100185341A1 (en) * | 2009-01-16 | 2010-07-22 | Gm Global Technology Operations, Inc. | Vehicle mode activation by gesture recognition |
US9551590B2 (en) * | 2009-08-28 | 2017-01-24 | Robert Bosch Gmbh | Gesture-based information and command entry for motor vehicle |
EP2539759A1 (de) * | 2010-02-28 | 2013-01-02 | Osterhout Group, Inc. | Lokaler werbeinhalt auf einem interaktiven kopfmontierten okular |
US8396252B2 (en) * | 2010-05-20 | 2013-03-12 | Edge 3 Technologies | Systems and related methods for three dimensional gesture recognition in vehicles |
WO2012028884A1 (en) | 2010-09-02 | 2012-03-08 | Elliptic Laboratories As | Motion feedback |
US8760432B2 (en) * | 2010-09-21 | 2014-06-24 | Visteon Global Technologies, Inc. | Finger pointing, gesture based human-machine interface for vehicles |
US8817087B2 (en) * | 2010-11-01 | 2014-08-26 | Robert Bosch Gmbh | Robust video-based handwriting and gesture recognition for in-car applications |
US9292093B2 (en) * | 2010-11-18 | 2016-03-22 | Alpine Electronics, Inc. | Interface method and apparatus for inputting information with air finger gesture |
US8831794B2 (en) * | 2011-05-04 | 2014-09-09 | Qualcomm Incorporated | Gesture recognition via an ad-hoc proximity sensor mesh for remotely controlling objects |
CN102184342B (zh) * | 2011-06-15 | 2013-11-20 | 青岛科技大学 | 一种虚实融合的手功能康复训练***及方法 |
US8886407B2 (en) * | 2011-07-22 | 2014-11-11 | American Megatrends, Inc. | Steering wheel input device having gesture recognition and angle compensation capabilities |
CN103782255B (zh) * | 2011-09-09 | 2016-09-28 | 泰利斯航空电子学公司 | 交通工具娱乐***的眼动追踪控制 |
CN102508546B (zh) * | 2011-10-31 | 2014-04-09 | 冠捷显示科技(厦门)有限公司 | 一种3d虚拟投影及虚拟触摸的用户交互界面及实现方法 |
US20130204457A1 (en) * | 2012-02-06 | 2013-08-08 | Ford Global Technologies, Llc | Interacting with vehicle controls through gesture recognition |
US20140181759A1 (en) * | 2012-12-20 | 2014-06-26 | Hyundai Motor Company | Control system and method using hand gesture for vehicle |
-
2012
- 2012-09-12 DE DE102012216193.7A patent/DE102012216193B4/de active Active
-
2013
- 2013-09-09 US US14/427,602 patent/US9524032B2/en active Active
- 2013-09-09 CN CN201380045988.7A patent/CN104603720B/zh active Active
- 2013-09-09 WO PCT/EP2013/068550 patent/WO2014040930A1/de active Application Filing
- 2013-09-10 FR FR1358692A patent/FR2995418B1/fr active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE10022321A1 (de) * | 2000-05-09 | 2001-11-15 | Bayerische Motoren Werke Ag | Vorrichtung in Fahrzeugen zum Erkennen einer Handstellung |
DE10349568A1 (de) * | 2002-10-25 | 2004-05-13 | Mitsubishi Fuso Truck And Bus Corp. | Handzeichen-Schaltvorrichtung |
EP2372512A1 (de) * | 2010-03-30 | 2011-10-05 | Harman Becker Automotive Systems GmbH | Fahrzeug-Benutzeroberflächeneinheit für eine elektronische Fahrzeugvorrichtung |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10599226B2 (en) * | 2015-05-21 | 2020-03-24 | Audi Ag | Operating system and method for operating an operating system for a motor vehicle |
CN107835970A (zh) * | 2015-06-02 | 2018-03-23 | 大众汽车有限公司 | 行进器、用户接口和用于在与用户接口相互作用时辅助使用者的方法 |
Also Published As
Publication number | Publication date |
---|---|
CN104603720A (zh) | 2015-05-06 |
FR2995418A1 (fr) | 2014-03-14 |
DE102012216193B4 (de) | 2020-07-30 |
US20150234470A1 (en) | 2015-08-20 |
FR2995418B1 (fr) | 2015-07-24 |
US9524032B2 (en) | 2016-12-20 |
DE102012216193A1 (de) | 2014-05-28 |
CN104603720B (zh) | 2018-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
DE102012216193B4 (de) | Verfahren und Vorrichtung zur Bedienung einer Kraftfahrzeugkomponente mittels Gesten | |
EP2673156B1 (de) | Verfahren, vorrichtung und computerprogrammprodukt zum ansteuern einer funktionseinheit eines fahrzeugs | |
DE102006059032B4 (de) | Bedienvorrichtung eines Kraftfahrzeugs und Verfahren zum Erfassen von Nutzereingaben | |
DE102006009291A1 (de) | Verfahren und Vorrichtung zum Betreiben von zumindest zwei Funktionskomponenten eines Systems, insbesondere eines Fahrzeugs | |
WO2014040946A1 (de) | Eingabeeinrichtung | |
WO2009049975A1 (de) | Visuelles auslösen von vorgängen in einem kraftfahrzeug | |
WO2017097509A1 (de) | Verfahren zum betreiben eines fahrzeugs | |
DE102012212754A1 (de) | Verfahren zum Betreiben eines Sensorsystems sowie Sensorsystem | |
EP2972698A1 (de) | Verfahren zum betreiben eines berührungsempfindlichen bediensystems und vorrichtung mit einem solchen bediensystem | |
EP3254172B1 (de) | Bestimmung einer position eines fahrzeugfremden objekts in einem fahrzeug | |
WO2021023468A1 (de) | Vorrichtung und verfahren zur steuerung eines beifahrersitzes in einem fahrzeug | |
EP2653335A2 (de) | Verfahren und Vorrichtung zur Anzeige einer Hand eines Bedieners eines Bedienelements eines Fahrzeugs | |
DE102013003059A1 (de) | Verfahren und Bedienungssystem zur blickrichtungsabhängigen Sprachsteuerung einer Funktionseinheit eines Kraftwagens | |
DE102018205753A1 (de) | Verfahren, Vorrichtung und Fortbewegungsmittel für ein automatisiertes Anfahren eines Fortbewegungsmittels an einer Lichtsignalanlage | |
WO2015162058A1 (de) | Gesteninteraktion mit einem fahrerinformationssystem eines fahrzeuges | |
EP3230828A1 (de) | Erfassungsvorrichtung zum erkennen einer geste und/oder einer blickrichtung eines insassen eines kraftfahrzeugs durch synchrone ansteuerung von leuchteinheiten | |
DE102018220693A1 (de) | Steuerungssystem und Verfahren zum Steuern einer Funktion eines Fahrzeugs | |
EP3005564B1 (de) | Schalterbetätigungseinrichtung, mobiles gerät und verfahren zum betätigen eines schalters durch eine nicht-taktile translationsgeste | |
DE102017011498B4 (de) | Verfahren zum Betreiben eines Assistenzsystems und ein Assistenzsystem für einen Kraftwagen | |
EP3298477A1 (de) | Verfahren zum betreiben einer bedienvorrichtung sowie bedienvorrichtung für ein kraftfahrzeug | |
EP1588901B1 (de) | Verfahren zum Verändern wenigstens einer einstellbaren Funktion eines Kraftfahrzeugs | |
WO2019025064A1 (de) | Verfahren zur ausführung eines autonomen fahrvorgangs eines fahrzeugs | |
DE102013011531A1 (de) | Verfahren zum Betreiben eines Assistenzsystems eines Kraftwagens und Assistenzsystem für einen Kraftwagen | |
DE102012022362A1 (de) | Eingabevorrichtung für ein Kraftfahrzeug | |
WO2020224986A1 (de) | Verfahren zum durchführen eines rangiervorgangs eines kraftfahrzeugs mit kamerabasierter bestimmung eines abstands zum kraftfahrzeug, sowie rangierassistenzsystem |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 13765297 Country of ref document: EP Kind code of ref document: A1 |
|
WWE | Wipo information: entry into national phase |
Ref document number: 14427602 Country of ref document: US |
|
NENP | Non-entry into the national phase |
Ref country code: DE |
|
122 | Ep: pct application non-entry in european phase |
Ref document number: 13765297 Country of ref document: EP Kind code of ref document: A1 |