CN105584368A - 用于在机动车中传输信息的*** - Google Patents

用于在机动车中传输信息的*** Download PDF

Info

Publication number
CN105584368A
CN105584368A CN201510751601.0A CN201510751601A CN105584368A CN 105584368 A CN105584368 A CN 105584368A CN 201510751601 A CN201510751601 A CN 201510751601A CN 105584368 A CN105584368 A CN 105584368A
Authority
CN
China
Prior art keywords
gesture
steering wheel
display
instrument
identification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510751601.0A
Other languages
English (en)
Inventor
A·V·莱克
B·斯特兰德
S·普罗伊斯列尔
M·科赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Visteon Global Technologies Inc
Original Assignee
Visteon Global Technologies Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Visteon Global Technologies Inc filed Critical Visteon Global Technologies Inc
Publication of CN105584368A publication Critical patent/CN105584368A/zh
Pending legal-status Critical Current

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/23Head-up displays [HUD]
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60Instruments characterised by their location or relative disposition in or on vehicles
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304Detection arrangements using opto-electronic means
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146Instrument input by gesture
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18Information management
    • B60K2360/182Distributing information between displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20Optical features of instruments
    • B60K2360/33Illumination features
    • B60K2360/334Projection means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77Instrument locations other than the dashboard
    • B60K2360/782Instrument locations other than the dashboard on the steering wheel
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0181Adaptation to the pilot/driver
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • G02B2027/0187Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Optics & Photonics (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Health & Medical Sciences (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)

Abstract

本发明涉及一种用于在机动车中传输信息的***(1)。在机动车的乘客车厢中设置有方向盘(2)、带护盖(4)的仪表板(3)、带仪表显示器仪表显示区域(5)和布置在前挡风玻璃的区域中的显示装置(8)。所述***(1)基于手势识别来构造并且具有带至少一个手势识别传感器的手势识别单元(6)。在此,手势识别传感器配置为,检测在可感知手势的区域(7)中的运动。至少一个手势识别传感器布置为在车辆驾驶员的观察方向上在方向盘(2)的后方在护盖(4)的下方集成在所述仪表显示区域(5)中。仪表显示器和显示装置(8)构造用于显示交互菜单。此外,本发明涉及一种运行用于在机动车中传输信息的所述***的方法。所述方法用于在显示器上突出显示所选择的交互区域。此外,本发明涉及一种运行所述***以基于手势进行信息传输并且执行机动车中的功能的方法。

Description

用于在机动车中传输信息的***
技术领域
本发明涉及一种用于借助于车辆驾驶员与仪表显示器和布置在前挡风玻璃的区域中的显示装置进行的交互操作而在机动车中传输信息的***。所述***基于手势识别来构造并且具有带至少一个手势识别传感器的手势识别单元。手势识别传感器配置为,检测在可感知手势的区域中的运动。利用所述***控制机动车的功能、例如空气调节***、娱乐装置例如音频***、和类似的***。
此外,本发明涉及一种运行所述***以在显示器上突出显示所选择的交互区域的方法,以及一种运行所述***以基于手势进行信息传输并且执行功能的方法。
背景技术
为了控制机动车的功能,使用传统的不同的输入***和输出***、例如触摸显示单元或者具有触摸输入和/或输出装置的显示单元。此外,手势识别***用于将信息输入到机动车的处理***中。由现有技术公知的手势识别***在乘客车厢的中心位置中、特别是在仪表板下方的中心控制台中并且由此远离方向盘地布置。所述***远离方向盘的布置导致为了输入信息而放开方向盘以及从街道转移视线并且由此随之出现极大地分散车辆驾驶员的注意力。因此使机动车的车辆驾驶员和乘客的安全性受到不利的影响。
除了手势识别***以外,此外公知了下述输入***,在所述输入***中,接触式传感器布置在方向盘的内部和/或方向盘的表面上。基于对不同传感器的不同接触将信息传输到所述***上。然而在方向盘的表面上仅仅提供有极其有限的空间用于布置所述传感器。此外,所述传感器的构造导致在作为交互装置的方向盘上的重大改变。大量构造在方向盘的表面上的作为操作元件的开关和操作钮以及大量布置在内部的用于操作输入***的附加的电子元件连同附加的电缆的布设导致作为交互装置的方向盘的高复杂性。输入***具有显示装置,然而所述显示装置仅仅用于显示数值、例如机动车的速度或警告提示。没有设置车辆驾驶员和显示装置之间的直接的交互。所述交互仅仅通过布置在方向盘的表面上的传感器来实现。
由US2013/0076615A1得知一种用于将车辆驾驶员的信息输入到机动车的操作***中的装置以及一种用于操作所述装置的方法。当车辆驾驶员使双手保持在方向盘上时,信息在此能够通过使车辆驾驶员的手的手指运动来传输。所述装置具有用于检测手指和由此手势的运动的传感器、用于评估所述运动的处理器以及布置在车辆驾驶员的视野内的显示装置。由传感器检测的并且由处理器评估的、通过车辆驾驶员的手指运动传输的信息能够显示在显示装置中。显示装置构造为所谓的“head-up-display(平视显示器)”并且布置在机动车的前挡风玻璃的区域内。也简称为HUD的head-up-display理解为一种下述的显示***,在所述显示***中,用户为了观察显示的信息可以使头部的姿态或者观察方向保持在初始的取向上,因为所述信息被投影在视野内。HUD通常具有一个产生图像的图像输出单元、光学模块和投影面。光学模块将所述图像引导至投影面上,所述投影面构造为反射透光的挡风玻璃。车辆驾驶员看到图像输出单元的被反射的信息并且同时看到挡风玻璃之后的实际环境。为了借助于US2013/0076615A1中公开的装置开始和结束信息传输,可以操控开关元件、例如开关或操作钮。传感器布置在仪表板的表面上并且由此与射入的太阳光线的方向有关地遭受直接的太阳光辐射,这可以导致在通过传感器检测手指的手势时产生错误。所述装置配置为,记录仅仅一只手、特别是右手的手指运动,所述手指向被布置在前挡风玻璃的区域中的显示装置。信息的输入或记录和输出仅仅通过布置在前挡风玻璃的区域中的显示装置来实现。
WO2013/036289A2中同样公开了一种用于将车辆驾驶员的信息输入到机动车的操作***中的***以及一种用于操作所述***的方法。所述***具有嵌入到仪表板内部的显示装置和至少一个的传感器,所述传感器用于检测食指的运动以及用于检测显示装置的下述区域,车辆驾驶员的平放在方向盘上的手的食指指向所述区域。车辆驾驶员的手的食指所指向的位置借助于也称为光标的位置指针显示在显示装置内。作为对手指运动的反应,在***内部执行一个功能。
在由现有技术公知的***中,为了开始和结束信息传输可以操控开关元件、例如开关和/或操作钮。此外,所述***不是构造用于记录在方向盘的表面上或者沿着其的运动。此外,被记录的运动仅仅由一只手执行。
发明内容
本发明的目的在于提供并且进一步改进一种用于借助于车辆驾驶员与仪表显示器和布置在前挡风玻璃的区域中的显示装置进行的交互操作而在机动车中传输信息的***。在此,应该通过车辆驾驶员的手指和/或手在方向盘的区域内可能的运动来操作或者改变机动车的功能。车辆驾驶员和所述***之间的交互应该在没有构造在方向盘之中或之上的附加的传感器或其他电子元件的情况下实现。应该在很大程度上不受干扰地实现识别并且记录用于交互所发射的信号和信息,以便避免所述***的错误信息和由此的操作错误。在此,应该能够传输与手的数量或者手指的数量无关的信息。
该目的通过具有独立权利要求所述特征的内容和方法实现。进一步方案在从属权利要求中给出。
该目的通过根据本发明的用于在机动车中传输信息的***实现。在机动车的乘客车厢中设置有方向盘、带护盖的仪表板、带仪表显示器的仪表显示区域和布置在前挡风玻璃的区域中的显示装置。所述***基于手势识别来构造并且具有带至少一个手势识别传感器的手势识别单元。在此,手势识别传感器配置为,检测在可感知手势的区域中的运动。
根据本发明的设计方案,至少一个手势识别传感器布置为在车辆驾驶员的观察方向上在方向盘的后方在护盖的下方集成在仪表显示区域中。仪表显示器和显示装置构造用于显示交互菜单。手势识别传感器在护盖的下方在仪表显示区域中的布置导致有效地保护传感器免受直接的太阳光辐射的影响并且由此无干扰地通过传感器识别手势。也称为手势识别模块的手势识别单元利用手势识别传感器有利地构造用于记录例如处于方向盘上的双手的手势。通过车辆驾驶员与所述***的交互操作可以不仅利用仪表显示器而且利用布置在前挡风玻璃的区域中的显示装置实现单独地显示或者二者组合地显示。
根据本发明的优选的构型,手势识别单元配置为,产生图像并且识别在可感知手势的区域中执行的手势。在此,可感知手势的区域围绕方向盘以及在方向盘和仪表板之间延伸。根据一个可替换的构型,可感知手势的区域也包括在朝向车辆驾驶员的方向上在机动车的中心控制台之前的区域。
有利地,手势识别单元配置为,可感知手势的区域在方向盘的上部区域中、特别是在方向盘的上边缘上延伸。在此,该区域优选地在120°的角度范围上延伸,其中,所述角度范围的界限分别从竖直方向偏离60°地取向。在将方向盘比作模拟时钟的表盘的情况下,当12点钟标记从表盘的中心点沿着竖直方向向上延伸时,可感知手势的区域在表盘的10点钟和2点钟标记之间延伸。
根据本发明的一个进一步方案,手势识别单元配置为,将在方向盘的区域中、特别是在方向盘的上部区域中的手势与方向盘的运动进行区分。在此,将方向盘的位置的角度和方向盘的位置的角度的改变量包括在计算算法中。
本发明的一个另外的有利的构型在于,至少一个手势识别传感器布置为在与从方向盘展开的平面平行的平面中在车辆驾驶员的观察方向上处于仪表显示区域的高度上并且在水平方向上处于仪表显示区域的中心。手势识别传感器关于方向盘和车辆驾驶员的中心的布置优选地实现了记录车辆驾驶员的两只处于方向盘上的手的手势。
根据本发明的一个可替换的构型,所述***具有多个手势识别传感器,所述手势识别传感器布置为分布在仪表显示区域内部的护盖的下方。在此,多个理解为多于一个手势识别传感器。手势识别传感器优选地构造为具有作为手势识别传感器的飞行时间摄像机。
根据本发明的一个另外的有利的构型,手势识别单元配置为,其通过车辆驾驶员在朝向仪表显示器或显示装置的方向上的运动被激活或终止。在此,车辆驾驶员和手势识别单元之间的交互显示在仪表显示器的菜单中和/或在显示装置的菜单中。
手势识别单元具有运动识别硬件,所述运动识别硬件构造用于深度记录手势。此外,所述运动识别硬件产生实现该手势的具有一个方向和一个角度的矢量,以便确定该手势所指向的位置并且将所述位置显示在仪表显示器中和/或在显示装置中。因此,运动识别硬件例如用于在三维空间中在观察手指在空间中的角度的情况下确定手指的位置、特别是手指尖端的位置并且参照至少一个显示器转换所述位置。
此外,手势识别单元有利地配置为,检测至少一只手和/或至少一个手指的大小和/或形状,将检测到的大小和/或形状与存储在所述***中的数值进行比较并且对应于一个人的存储在所述***中的用户配置。所述用户配置对应于一个确定的人,从而在所述***中对于每个记录的人设立一个自己的用户配置。因此在接触方向盘时可以识别哪个人正在驾驶机动车。用户配置包括用于预调节不同的功能、例如空气调节装置或音频***的数值,从而所述功能的设置能够与预调节匹配。
该目的也通过一种根据本发明的运行用于在机动车中传输信息的***的方法来实现。用于在显示器上突出显示所选择的交互区域的方法具有下述的步骤:
-通过车辆驾驶员执行一个由所述***的手势识别单元待识别的手势,
-由手势识别传感器接收该手势,并且将一个信号传输至硬件,
-借助于所述硬件分析被传输的信号,并且确定该手势本身是否能够识别,
-如果该手势本身不能识别,则将关于所述手势识别的错误提示发送到仪表显示器和/或显示装置上,或者确定该手势所指向的仪表显示器和/或显示装置的区域,
-检验该手势所指向的仪表显示器和/或显示装置的区域是否相应于至少一个显示器的有效的交互区域,
-如果该手势指向有效的交互区域,则突出显示仪表显示器和/或显示装置的区域。
此外,该目的通过一种运行所述***以基于手势进行信息传输并且执行机动车中的功能的方法来实现。该方法具有下述的步骤:
-通过车辆驾驶员执行一个由所述***的手势识别单元待识别的手势,
-由手势识别传感器接收该手势,并且将一个信号传输到一硬件上,以及根据一个角度确定方向盘的位置,
-借助于所述硬件分析通过该手势产生的并且由所述***接收的信号以及方向盘的位置的信号,并且确定是否应该将该手势用于操作所述***以及该手势本身是否能够识别,
-如果不应该将该手势用于操作所述***或者该手势本身不能识别,则将关于所述手势识别的错误提示发送到仪表显示器和/或显示装置,或者
-根据运行模式和车辆数据确定机动车的待改变的和待切换的功能,
-在机动车的待设定的功能方面对已识别的手势进行上下文相关的校正(或比较),
-如果不能对已识别的手势进行上下文相关的校正,则将关于所述功能范围的错误提示发送到仪表显示器和/或显示装置上,或者执行和确认机动车的选定功能。
总而言之,根据本发明的用于在机动车中传输信息的***具有多个不同的优点:
-作为在机动车内部最主要接触的元件构造为交互界面或者可适应的输入装置或交互装置,而不是给方向盘过度装载开关和操作钮或者不用将多个附加的电子元件集成在方向盘上或其内部以操作仪表显示器的内容、在前挡风玻璃的区域中布置的显示装置的内容和其他在机动车中的待操作的功能的内容,
-在没有大的额外支出并且没有很大的附加成本情况下,将手势识别单元的手势识别传感器集成在仪表显示器的已高科技化的区域中;以及
-方向盘内部没有或仅仅有最少数量的附加的电子元件,这导致布设较少的电缆并且使再循环元件较少地使用在方向盘区域中,因此,提高***作为对于车辆驾驶员来说灵活和可适应的交互***的效率,以及降低操作元件的复杂性;
-车辆驾驶员通过仪表显示器和关于音频***和安全***的布置在前挡风玻璃区域中的显示装置与机动车的总体交互以不会出错和直接的方式通过嵌入仪表板中的电子装置来实现,其中,输入界面本身不是嵌入仪表板中的电子装置的部分;
-保护传感器免受太阳辐射影响的布置导致在很大程度上不受干扰地识别和记录用于交互而输出的信号和信息,因此避免错误信息和操作错误;
-在眼睛朝向道路并且手保持在方向盘上期间、即在手不脱离方向盘通过的情况下,通过在靠近方向盘的空中执行的手势进行机动车与车辆驾驶员之间的总体交互,其中,车辆驾驶员不需要将手引导至中心控制台,因此使车辆驾驶员极少直至不分散注意力并且促进高的注意力;
-在车辆驾驶员与所述***之间待传输的信息与手的数量和手指的数量无关。
附图说明
本发明的构型的其他细节、特征和优点由实施例的下述说明参考所属的附图得出。附图中:
图1示出了具有基于手势用于信息传输的***的机动车的乘客车厢的在车辆驾驶员的观察方向上在车辆驾驶员的前方形成的区域的侧视图,
图2示出了在乘客车厢内部的在车辆驾驶员的观察方向上在车辆驾驶员的前方构成的部件的布置,和
图3示出了在车辆驾驶员的观察方向上在车辆驾驶员的前方布置的出自图2的部件的透视图,
图4示出了在显示器上突出显示所选择的交互区域的方法的流程图,和
图5示出了所述***的基于手势的信息传输和执行功能的方法的流程图。
具体实施方式
图1中示出了具有基于手势用于信息传输的***1的机动车的乘客车厢的在车辆驾驶员的观察方向上在车辆驾驶员的前方形成的区域的侧视图。***1用于识别手势。
***1在驾驶方向上在机动车的方向盘之前的区域内并且在车辆驾驶员的观察方向上在机动车的方向盘2之后的区域内延伸。此外,在车辆驾驶员的观察方向上由前挡风玻璃限定边界的区域具有带护盖4的仪表板3和仪表显示区域5。仪表板3也称为仪表板。
在仪表板3的内部布置有手势识别单元6,其中,手势识别单元6特别是构造为具有至少一个手势识别传感器。因此,手势识别传感器在车辆驾驶员的观察方向上在方向盘2的后方集成在仪表显示区域5中,以便识别车辆驾驶员在可感知区域7内的手势和运动并且将所述手势和运动作为信息接收在手势识别单元6中,并且在手势识别单元6内处理该信息。在此,布置在护盖4下方的手势识别传感器构造为仪表显示器的部件并且不是单独的模块。手势识别传感器在护盖4下方的仪表显示器的内部、特别是保护免受直接的太阳辐射影响的布置实现了不受干扰地接收用于借助于手势进行交互而输出的信息。
手势识别单元6产生图像并且设置用于识别下述的手势,所述手势或者在方向盘2上、在方向盘2和仪表板3之间的区域中被执行,或者在机动车的中心控制台的区域中被执行。至少一个手势识别传感器有利地布置为在与由方向盘2展开的平面平行的平面中在车辆驾驶员的观察方向上处于仪表显示区域5的高度上并且在水平方向上处于仪表显示区域5的中心,并且因此实现了识别、接收和区分车辆驾驶员的双手的手势和运动。可替换地,也可以构造并且布置两个或更多个手势识别传感器,以便识别、接收和区分车辆驾驶员的双手的手势和运动。在两个或更多个手势识别传感器的构型中,所述传感器布置为分布在仪表显示区域5内,以便最佳地覆盖可感知手势的区域7。
在此,手势识别单元6的手势识别传感器这样定位,即接收车辆驾驶员的手10或双手的运动、特别是手指11、尤其是食指的运动以控制机动车的当前的功能。根据图1,手10和手指11在方向盘2上或在方向盘2的区域2a内、特别是在方向盘2的上边缘上运动并且指向车辆驾驶员的观察方向。
例如也称为手运动识别模块的手势识别单元6具有用于接收流畅的运动的然而也接收跳跃的运动的传感器。在此,传感器例如构造为超声波传感器、红外线传感器或者类似的传感器,或构造为飞行时间摄像机,或者构造为使用结构光,所述结构光产生图像、特别是3D图像。也称为TOF摄像机(英文:timeofflight)的飞行时间摄像机是利用飞行时间法测量距离的3D摄像机***。在此,以光脉冲照亮可感知手势的区域7。摄像机对于每个图像点来测量光直至对象并且再次返回所需的时间。所需的时间直接与距离成正比,从而摄像机对于每个图像点确定了在所述摄像机上成像的对象的距离。
在结构光的方法中,射出在可见范围内或者在不可见范围内、例如在红外线范围内的确定的图案,该图案在空间中的3D结构上弯曲。所述弯曲被接收并且与理想图像比较。由理想图像与借助于弯曲所确定的实际图像之间的差别确定对象在空间中的位置。
除了布置在仪表显示区域5中的仪表显示器以外,***1还具有布置在前挡风玻璃区域中的并且特别是构造为“head-up-display(平视显示器)”的显示装置8。不仅仪表显示器而且显示装置8用于显示交互菜单和元素。
当手10的表面平放在方向盘2上时,开始进行车辆驾驶员与仪表显示器和/或显示装置8之间的交互。在此,交互开始于例如车辆驾驶员的手指11朝向仪表板3的方向、即朝向仪表显示器和/或显示装置8的方向的运动。只要至少一个手指11指向这两个显示器中的一个,车辆驾驶员与仪表显示器和/或显示装置8之间的交互就会显示在仪表显示器和/或显示装置8的菜单中。因此,在不操控开关的情况下可以启动或停止手势识别单元6。可替换地,手势识别单元6或交互也可以通过操控附加部件或通过接触方向盘2来启动。
在交互开始之后,仪表显示器和/或显示装置8的用户界面借助于手10和/或手指11的手势来控制。通过由手势识别单元6产生的布置有手指11的图像或者通过借助于集成在手势识别单元6中的运动识别硬件对手势进行的深度记录,来识别手10的手指11,并且根据手指11的运动产生矢量9。矢量9的确定用于确定手指11所指向的方向和角度,以便确定手指11指向的正确位置。该手势的矢量空间函数9接着实现了手势识别单元6的进一步计算。由于手指11运动至另一个位置、即运动至仪表显示器上或显示装置8上的一个目标对象,所以手指11的矢量9发生改变。接着,计算手指11的新位置并且对应于仪表显示器上或显示装置8上的目标对象。
交互菜单显示在仪表显示器上和/或显示装置8上,只要手指11指向所述交互菜单,所述交互菜单就会进行匹配。仪表显示器和/或显示装置8上的用户界面通过手指11的一个单独的手势、一组手指11的手势或者一只手10或双手10的手势来控制,从而车辆驾驶员借助于运动与仪表显示器和/或显示装置8进行的交互用于菜单选择。通过手势并且由此通过关于仪表显示器和/或显示装置8以及相应的显示器的用户界面的指向运动,执行并且控制机动车的选定功能、例如空气调节***、娱乐***、驾驶员辅助***或类似的***。手指11和/或手10的运动和手势在自由空间中或在表面上、例如在方向盘2上来实现,并且实现了改变或调节机动车中的不同功能。
为了三维地识别手势,***1、特别是手势识别单元6配置为,识别手10和/或手指11的大小或形状,并且将所述大小或形状对应于被存储在***1中的用户配置、即确定的人。因此借助于***1存在下述可能性,即在接触方向盘2时已经识别出哪个人正在驾驶机动车,因为在***1中对于每个记录人设立了自己的用户配置。在此,另一方面用户配置包含机动车中的不同功能、例如空调***或音频***的预调节值。根据手10和/或手指11对人的识别被限于存储在***1中的人的范围内。通过识别正在驾驶机动车的人,可以调整对机动车中的确定功能的设置。
图2示出了在乘客车厢内部的在车辆驾驶员的观察方向上在车辆驾驶员的前方构成的部件的***1,而图3中示出了布置在车辆驾驶员的观察方向上在车辆驾驶员的前方的出自图2中的部件的透视图。
手势识别单元6的手势识别传感器布置并且配置为,检测的可感知手势的区域7基本上实现了在方向盘2的上部区域2a、特别是在方向盘2的上边缘上的交互。在将圆形方向盘2比作模拟时钟的表盘的情况下,手10或手指11的手势基本上在10点钟和2点钟之间的区域内被检测到。在此,不仅在方向盘2上而且在方向盘2附近、特别是在方向盘2与仪表显示区域5的护盖4之间进行表面交互的手势被检测到。
可检测的手势例如包括轻敲手势或轻敲运动、点击运动、划过运动、指向手势或类似的手势。在此,在方向盘2上的轻敲运动或点击运动以及手在方向盘2上的划过运动被识别、接收并且转换成指令或命令。此外,运动和手势可以由***1记录。以手10沿着方向盘2的上边缘的运动、特别是划过运动导致例如在经过菜单或在菜单之间的区域中滚动、浏览、切换或运动或者改变功能。当所述***例如识别出手10在方向盘2的上边缘上握成拳头或伸平以及在上部区域2a中运动时,该运动可以用于调节范围或大小、例如音频***的音量、空气调节***的气温或光强度。在此,选择哪个范围和改变哪个功能可以与手10、即右手或左手10无关。
为了将手10在方向盘2的上边缘的运动与方向盘2自身的运动进行区分,方向盘2的位置的角度和方向盘2的角度改变量包括在计算算法中。在方向盘2的位置不变或者方向盘2的角度位置的改变量大约为0°的情况下,手10的运动被识别为在方向盘2的上边缘上的划过,则这导致改变并且操控之前选择的功能的大小范围。当方向盘的角度位置的改变量明显偏离于0°时,手10的运动则被视为转向动作,在转向动作中,所选择的功能保持不变。
车辆驾驶员与仪表显示器和/或显示装置8之间的交互例如通过利用双手10在10点钟与2点钟之间的区域内接触方向盘2以及通过运动或抬起手指11、特别是食指而开始。当手10的表面平放在方向盘2上时,***1识别出所述标准手势并且手势识别单元6的输入界面被激活。当指向仪表显示器和/或显示装置8时,相应显示器的区域通过比该区域周围更强地照明来突出显示。该区域被选择。利用左手10的食指进行的点击运动关闭机动车的音频***,而左手10的划过运动实现调节音量。右手10的不同的划过运动由实现了改变显示单元8或仪表显示器内的显示。
手10的手指11指向显示装置8或仪表显示器的元素来选择该元素,当手指11在方向盘2的上边缘点击时,执行处于该元素之后的功能。
此外,能够以用于预调节并且调整机动车的不同功能的方法来驱动***1。在此,借助于手势识别单元6检测至少一只手和/或至少一个手指的大小和/或形状。接着,将检测到的大小和/或形状与存储在***1中的值比较并且对应于一个人的存储在所述***中的用户配置,其中,用于每个记录人自己的用户配置存储在***1中。因此在接触方向盘时识别出,哪个人正在驾驶机动车。因为用户配置包含用于预调节机动车中的不同功能、例如空气调节***或音频***的值,所以在识别个人或确定的用户配置之后使功能的设置与预调节匹配。
图4示出了在显示器上、即在仪表显示器和/或显示装置8上突出显示所选择的交互区域的方法的流程图。在第一方法步骤20中,车辆驾驶员执行一个由***1的手势识别单元6待检测的手势。该手势由手势识别传感器接收并且在下一个方法步骤21中传输到作为***1的电子装置的硬件。借助于所述硬件分析所接收的信号,并且在接着的方法步骤22中确定该手势本身是否能够识别。作为方法步骤23,如果该手势本身不可以识别,则将关于手势使用或手势识别的错误提示发送到仪表显示器和/或显示装置8上。否则,在方法步骤24中,确定该手势所指向的仪表显示器和/或显示装置8的区域。在方法步骤25中,检验该手势所指向的仪表显示器和/或显示装置8的区域是否相应于至少一个显示器的有效的交互区域。如果不是这种情况,则作为方法步骤26,不突出显示仪表显示器和/或显示装置8的区域。如果手势指向有效的交互区域,则在方法步骤27中例如通过比该区域周围更强地照明来突出显示所选择的交互区域。
图5示出了***1的基于手势的信息传输和执行功能的方法的流程图。在第一方法步骤30中,车辆驾驶员执行一个由***1的手势识别单元6待识别的手势。该手势由手势识别传感器接收,并且在下一个方法步骤31中,传输到***1的硬件上。同时,在方法步骤32中,根据方向盘2的角度位置确定方向盘位置。借助于所述硬件分析由该手势产生的并且由***1接收的信号以及方向盘2的位置的信号,并且在接着的方法步骤33中,确定是否应该将该手势用于操作***1以及该手势本身是否能够识别。作为方法步骤33,如果不应该将该手势用于操作***1或该手势本身不能识别,则将关于手势使用或手势识别的错误提示发送到仪表显示器和/或显示装置8上。反馈或执行的拒绝例如显示为故障提示或警告提示。如果用于操作***1的手势被识别,则在方法步骤36中,在机动车的待设定的功能方面对已识别的手势进行上下文相关的校正。在方法步骤35中,为了对该手势进行上下文相关的校正,也根据运行模式和车辆数据确定应该改变或切换的机动车的功能。如果不能对已识别的手势进行上下文相关的校正,则在方法步骤37中,将关于功能范围的错误提示发送到仪表显示器和/或显示装置8上。在能够执行已识别的手势的上下文相关的校正的情况下,在方法步骤38中,执行和操控机动车的选定功能。在此,所述执行也可以包含在仪表显示器和/或显示装置8的媒体内容之间的切换或翻阅。
附图标记列表
1***
2方向盘
2a方向盘2的上部区域
3仪表板
4仪表板3的护盖
5仪表显示区域
6手势识别单元
7可感知手势的区域
8显示装置
9矢量、手势的矢量空间函数
10手
11手指
20-27方法步骤
30-38方法步骤

Claims (10)

1.一种用于在机动车中传输信息的***(1),其具有方向盘(2)、带护盖(4)的仪表板(3)、带仪表显示器的仪表显示区域(5)和布置在前挡风玻璃的区域中的显示装置(8),其中,所述***(1)
基于手势识别来构造;并且
具有带至少一个手势识别传感器的手势识别单元(6),所述至少一个手势识别传感器配置为检测可感知手势的区域(7)中的运动,
其特征在于,
所述至少一个手势识别传感器在车辆驾驶员的观察方向上在所述方向盘(2)的后方在所述护盖(4)的下面集成地布置在所述仪表显示区域(5)中;以及,
所述仪表显示器和所述显示装置(8)构造用于显示交互菜单。
2.根据权利要求1所述的***(1),其特征在于,所述手势识别单元(6)配置为产生图像并且识别在可感知手势的所述区域(7)中执行的手势,其中,所述区域(7)在所述方向盘(2)周围以及在所述方向盘(2)和所述仪表板(3)之间延伸。
3.根据权利要求2所述的***(1),其特征在于,所述手势识别单元(6)配置为使得可感知手势的被检测区域(7)在所述方向盘(2)的上部区域(2a)中、特别是在所述方向盘(2)的上边缘上延伸,其中,所述区域(7)在120°的角度范围内延伸,并且所述角度范围的界限各自定向成偏离竖直方向60°。
4.根据权利要求2或3所述的***(1),其特征在于,所述手势识别单元(6)配置为将所述方向盘(2)的区域中、特别是所述方向盘(2)的上部区域(2a)中的手势与所述方向盘(2)的运动进行区分,其中,将所述方向盘(2)的位置的角度和所述方向盘(2)的位置的角度的改变纳入到计算算法中。
5.根据权利要求1至4中任一项所述的***(1),其特征在于,所述至少一个手势识别传感器布置为在一与由所述方向盘(2)展开的平面平行的平面中在车辆驾驶员的观察方向上处于所述仪表显示区域(5)的高度上并且在水平方向上处于所述仪表显示区域(5)的中心。
6.根据权利要求1至5中任一项所述的***(1),其特征在于,所述手势识别单元(6)配置为通过车辆驾驶员朝向所述仪表显示器或所述显示装置(8)的方向的运动激活或终止,其中,车辆驾驶员和手势识别单元(6)之间的交互显示在所述仪表显示器的菜单中和/或所述显示装置(8)的菜单中。
7.根据权利要求1至6中任一项所述的***(1),其特征在于,所述手势识别单元(6)具有运动识别硬件,所述运动识别硬件构造用于所述手势的深度记录并且生成具有所述手势发生的方向和角度的矢量(9),以便确定该手势所指向的位置并且将所述位置显示在所述仪表显示器中和/或所述显示装置(8)中。
8.根据权利要求1至7中任一项所述的***(1),其特征在于,所述手势识别单元(6)配置为,检测至少一只手(10)和/或至少一个手指(11)的大小和/或形状,将检测到的所述大小和/或形状与存储在所述***(1)中的值相比较并且与人的存储在所述***中的用户配置相对应,其中,所述用户配置包括不同功能的预调节,从而使得所述功能能够与所述预调节匹配。
9.一种运行根据权利要求1至8中任一项所述的***(1)以在一显示器上突出显示所选择的交互区域的方法,其具有下述的步骤:
-通过车辆驾驶员执行一个手势,所述手势将要被所述***(1)的手势识别单元(6)识别,
-由手势识别传感器接收该手势,并且将信号传输至硬件,
-借助于所述硬件分析传输的所述信号,并且确定该手势本身是否可识别,
-如果该手势是不能识别的手势,则将关于所述手势识别的错误提示发送给仪表显示器和/或显示装置(8);或者确定该手势所指向的所述仪表显示器和/或所述显示装置(8)的区域,
-检验该手势所指向的所述仪表显示器和/或所述显示装置(8)的区域是否相应于至少一个所述显示器的有效交互区域,
-如果该手势指向有效的交互区域,则突出显示所述仪表显示器和/或所述显示装置(8)的该区域。
10.一种运行根据权利要求1至8中任一项所述的***(1)以基于手势进行信息传输并且执行功能的方法,其具有下述的步骤:
-通过车辆驾驶员执行一个手势,所述手势将要被所述***(1)的手势识别单元(6)识别,
-由手势识别传感器接收该手势,并且将信号传输至硬件,以及根据一角度确定方向盘(2)的位置,
-借助于所述硬件分析通过该手势产生的并且由所述***(1)接收的信号以及所述方向盘(2)的位置的信号,并且确定是否应该将该手势用于操作所述***(1)以及该手势本身是否可识别,
-如果不应该将该手势用于操作所述***(1)或者该手势是不可识别的手势,则将关于所述手势识别的错误提示发送给所述仪表显示器和/或所述显示装置(8),或者
-根据运行模式和车辆数据确定机动车的待改变的和待切换的功能,
-在机动车的待设定的功能方面对已识别的手势进行上下文相关的校正,
-如果不能对已识别的手势进行上下文相关的校正,则将关于功能范围的错误提示发送给所述仪表显示器和/或所述显示装置(8);或者执行和确认机动车的选定功能。
CN201510751601.0A 2014-11-07 2015-11-06 用于在机动车中传输信息的*** Pending CN105584368A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
DE102014116292.7 2014-11-07
DE102014116292.7A DE102014116292A1 (de) 2014-11-07 2014-11-07 System zur Informationsübertragung in einem Kraftfahrzeug

Publications (1)

Publication Number Publication Date
CN105584368A true CN105584368A (zh) 2016-05-18

Family

ID=55803242

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510751601.0A Pending CN105584368A (zh) 2014-11-07 2015-11-06 用于在机动车中传输信息的***

Country Status (4)

Country Link
US (1) US20160132126A1 (zh)
JP (2) JP2016088513A (zh)
CN (1) CN105584368A (zh)
DE (1) DE102014116292A1 (zh)

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107584998A (zh) * 2016-07-06 2018-01-16 奥迪股份公司 用于运行交互式目视保护件的方法、窗设备以及机动车
CN108622176A (zh) * 2018-05-23 2018-10-09 常州星宇车灯股份有限公司 一种基于tof手势识别的多功能方向盘人车交互***
CN108874116A (zh) * 2017-05-12 2018-11-23 宝马股份公司 用于特定于用户的功能的***、方法、设备以及车辆
CN110895675A (zh) * 2018-09-12 2020-03-20 Aptiv技术有限公司 用于确定3d空间中的对象的特征点的坐标的方法
CN110997390A (zh) * 2017-06-21 2020-04-10 Smr专利有限公司 用于运行机动车的显示装置的方法以及机动车
CN111319624A (zh) * 2018-12-13 2020-06-23 通用汽车环球科技运作有限责任公司 用于启动和执行自动变道操纵的***和方法
CN111907585A (zh) * 2019-05-09 2020-11-10 丰田自动车株式会社 转向模块
CN112215198A (zh) * 2020-10-28 2021-01-12 郑小云 一种基于大数据的自适应人机交互***与方法
US10913426B2 (en) 2016-12-30 2021-02-09 Huawei Technologies Co., Ltd. Automobile, steering wheel, and driver identity recognition method
US11209908B2 (en) 2017-01-12 2021-12-28 Sony Corporation Information processing apparatus and information processing method

Families Citing this family (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6426025B2 (ja) * 2015-02-20 2018-11-21 クラリオン株式会社 情報処理装置
US9809231B2 (en) * 2015-10-28 2017-11-07 Honda Motor Co., Ltd. System and method for executing gesture based control of a vehicle system
US10832031B2 (en) * 2016-08-15 2020-11-10 Apple Inc. Command processing using multimodal signal analysis
JP6669017B2 (ja) * 2016-09-01 2020-03-18 株式会社デンソー 車両用操作システム及びコンピュータプログラム
DE102016120999B4 (de) * 2016-11-03 2018-06-14 Visteon Global Technologies, Inc. Benutzerschnittstelle und Verfahren zur Ein- und Ausgabe von Informationen in einem Fahrzeug
DE102017211462B4 (de) * 2017-07-05 2023-05-17 Bayerische Motoren Werke Aktiengesellschaft Verfahren zur Unterstützung eines Anwenders eines Fortbewegungsmittels, Fahrerassistenzsystem und Fortbewegungsmittel
FR3070635B1 (fr) * 2017-09-05 2019-08-23 Continental Automotive France Palette tactile a effet optique sur volant de conduite pour detection de doigt
JP6987341B2 (ja) 2017-10-24 2021-12-22 マクセル株式会社 情報表示装置およびその空間センシング装置
KR102463712B1 (ko) * 2017-11-24 2022-11-08 현대자동차주식회사 가상 터치 인식 장치 및 그의 인식 오류 보정 방법
US11458981B2 (en) * 2018-01-09 2022-10-04 Motherson Innovations Company Limited Autonomous vehicles and methods of using same
US10404909B1 (en) * 2018-04-18 2019-09-03 Ford Global Technologies, Llc Measurements via vehicle sensors
FR3080688A1 (fr) * 2018-04-26 2019-11-01 Stmicroelectronics Sa Dispositif de detection de mouvement
CN110163045B (zh) * 2018-06-07 2024-08-09 腾讯科技(深圳)有限公司 一种手势动作的识别方法、装置以及设备
JP2020117184A (ja) * 2019-01-28 2020-08-06 株式会社東海理化電機製作所 動作認識装置、コンピュータプログラム、および記憶媒体
JP7290972B2 (ja) * 2019-03-27 2023-06-14 株式会社Subaru 車両の同乗者コミュニケーション装置
CN111746273A (zh) * 2019-03-28 2020-10-09 上海擎感智能科技有限公司 一种用于车载的交互方法、装置、***及车辆
GB2586857B (en) * 2019-09-06 2023-10-11 Bae Systems Plc User-Vehicle Interface
US11907432B2 (en) 2019-09-06 2024-02-20 Bae Systems Plc User-vehicle interface including gesture control support
DE102019215290A1 (de) * 2019-10-04 2021-04-08 Brose Fahrzeugteile Se & Co. Kommanditgesellschaft, Bamberg Verfahren zum Betrieb einer Eingabevorrichtung eines Kraftfahrzeugs
DE102019131944A1 (de) * 2019-11-26 2021-05-27 Audi Ag Verfahren zur Steuerung zumindest einer Anzeigeeinheit, Kraftfahrzeug und Computerprogrammprodukt
CN111045521A (zh) * 2019-12-27 2020-04-21 上海昶枫科技有限公司 汽车电子装置控制***及控制方法
US11507194B2 (en) * 2020-12-02 2022-11-22 Huawei Technologies Co., Ltd. Methods and devices for hand-on-wheel gesture interaction for controls

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102159419A (zh) * 2008-09-22 2011-08-17 大众汽车有限公司 在用户可影响显示对象的呈现的车辆中的显示和操作***以及运行这种显示和操作***的方法
US20120146903A1 (en) * 2010-12-08 2012-06-14 Omron Corporation Gesture recognition apparatus, gesture recognition method, control program, and recording medium
US20120216151A1 (en) * 2011-02-22 2012-08-23 Cisco Technology, Inc. Using Gestures to Schedule and Manage Meetings
US20130076615A1 (en) * 2010-11-18 2013-03-28 Mike Iao Interface method and apparatus for inputting information with air finger gesture
US20130109369A1 (en) * 2011-10-27 2013-05-02 Qualcomm Incorporated Controlling access to a mobile device
CN103998316A (zh) * 2011-12-29 2014-08-20 英特尔公司 用于控制手势发起和终止的***、方法和设备

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE19952854C1 (de) * 1999-11-03 2001-08-09 Bosch Gmbh Robert Assistenzvorrichtung in einem Fahrzeug
JP3941786B2 (ja) * 2004-03-03 2007-07-04 日産自動車株式会社 車両用操作入力装置および方法
WO2006109476A1 (en) * 2005-04-05 2006-10-19 Nissan Motor Co., Ltd. Command input system
DE102005038678A1 (de) * 2005-08-16 2007-02-22 Ident Technology Ag Erfassungssystem, sowie diesem unterlegtes Erfassungsverfahren
DE102007001266A1 (de) * 2007-01-08 2008-07-10 Metaio Gmbh Optische Anordnung, insbesondere für ein Head-Up-Display
JP5029470B2 (ja) * 2008-04-09 2012-09-19 株式会社デンソー プロンプター式操作装置
US8775023B2 (en) * 2009-02-15 2014-07-08 Neanode Inc. Light-based touch controls on a steering wheel and dashboard
WO2012050573A1 (en) * 2010-10-13 2012-04-19 Hewlett-Packard Development Company, L.P. Dashboard display method and apparatus
DE102011112568B4 (de) * 2011-09-08 2015-11-19 Daimler Ag Bedienvorrichtung für ein Lenkrad eines Kraftfahrzeugs, Lenkrad für ein Kraftfahrzeug und Kraftfahrzeug
US20130063336A1 (en) * 2011-09-08 2013-03-14 Honda Motor Co., Ltd. Vehicle user interface system
JP5546029B2 (ja) * 2011-09-30 2014-07-09 日本電信電話株式会社 ジェスチャ認識装置及びそのプログラム
JP5958876B2 (ja) * 2011-10-21 2016-08-02 スズキ株式会社 車両の入力装置
CH705918A2 (de) * 2011-12-19 2013-06-28 Ralf Trachte Feld-Analysen für flexible Computer-Eingabe.
JP5500560B2 (ja) * 2012-01-18 2014-05-21 三井不動産レジデンシャル株式会社 転倒防止治具およびその取付け方法
US9632612B2 (en) * 2012-02-23 2017-04-25 Parade Technologies, Ltd. Circuits, systems, and methods for processing the proximity of large objects, including large objects on touch screens
DE102012205217B4 (de) * 2012-03-30 2015-08-20 Ifm Electronic Gmbh Informationsanzeigesystem mit einer virtuellen Eingabezone
JP2013218391A (ja) * 2012-04-05 2013-10-24 Pioneer Electronic Corp 操作入力装置、操作入力方法、及び、操作入力プログラム
DE102012018685B4 (de) * 2012-05-22 2017-08-03 Audi Ag System und Verfahren zur Steuerung von zumindest einem Fahrzeugsystem mittels von einem Fahrer durchgeführter Gesten
US20150367859A1 (en) * 2012-12-21 2015-12-24 Harman Becker Automotive Systems Gmbh Input device for a motor vehicle
WO2014119894A1 (en) * 2013-01-29 2014-08-07 Samsung Electronics Co., Ltd. Method of performing function of device and device for performing the method
JP6057755B2 (ja) * 2013-02-08 2017-01-11 株式会社東海理化電機製作所 ジェスチャ操作装置及びジェスチャ操作プログラム
US9122916B2 (en) * 2013-03-14 2015-09-01 Honda Motor Co., Ltd. Three dimensional fingertip tracking
EP3063048A1 (en) * 2013-10-29 2016-09-07 Telefonaktiebolaget LM Ericsson (publ) A method and apparatus for assigning profile data to one or more vehicle sub-systems of a vehicle, as well as an integrated circuit card and a computer program for performing the method and a vehicle with such an apparatus
JP6331567B2 (ja) * 2014-03-27 2018-05-30 株式会社デンソー 車両用表示入力装置
US9720591B2 (en) * 2014-08-20 2017-08-01 Harman International Industries, Incorporated Multitouch chording language

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102159419A (zh) * 2008-09-22 2011-08-17 大众汽车有限公司 在用户可影响显示对象的呈现的车辆中的显示和操作***以及运行这种显示和操作***的方法
US20130076615A1 (en) * 2010-11-18 2013-03-28 Mike Iao Interface method and apparatus for inputting information with air finger gesture
US20120146903A1 (en) * 2010-12-08 2012-06-14 Omron Corporation Gesture recognition apparatus, gesture recognition method, control program, and recording medium
US20120216151A1 (en) * 2011-02-22 2012-08-23 Cisco Technology, Inc. Using Gestures to Schedule and Manage Meetings
US20130109369A1 (en) * 2011-10-27 2013-05-02 Qualcomm Incorporated Controlling access to a mobile device
CN103998316A (zh) * 2011-12-29 2014-08-20 英特尔公司 用于控制手势发起和终止的***、方法和设备

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107584998A (zh) * 2016-07-06 2018-01-16 奥迪股份公司 用于运行交互式目视保护件的方法、窗设备以及机动车
US11227565B2 (en) 2016-07-06 2022-01-18 Audi Ag Method for operating an interactive visibility screen, a pane device and a motor vehicle
US10913426B2 (en) 2016-12-30 2021-02-09 Huawei Technologies Co., Ltd. Automobile, steering wheel, and driver identity recognition method
US11209908B2 (en) 2017-01-12 2021-12-28 Sony Corporation Information processing apparatus and information processing method
CN108874116A (zh) * 2017-05-12 2018-11-23 宝马股份公司 用于特定于用户的功能的***、方法、设备以及车辆
CN110997390A (zh) * 2017-06-21 2020-04-10 Smr专利有限公司 用于运行机动车的显示装置的方法以及机动车
CN108622176A (zh) * 2018-05-23 2018-10-09 常州星宇车灯股份有限公司 一种基于tof手势识别的多功能方向盘人车交互***
CN110895675A (zh) * 2018-09-12 2020-03-20 Aptiv技术有限公司 用于确定3d空间中的对象的特征点的坐标的方法
CN110895675B (zh) * 2018-09-12 2023-11-14 Aptiv技术有限公司 用于确定3d空间中的对象的特征点的坐标的方法
CN111319624A (zh) * 2018-12-13 2020-06-23 通用汽车环球科技运作有限责任公司 用于启动和执行自动变道操纵的***和方法
CN111319624B (zh) * 2018-12-13 2022-12-13 通用汽车环球科技运作有限责任公司 用于启动和执行自动变道操纵的***和方法
CN111907585A (zh) * 2019-05-09 2020-11-10 丰田自动车株式会社 转向模块
CN112215198A (zh) * 2020-10-28 2021-01-12 郑小云 一种基于大数据的自适应人机交互***与方法
CN112215198B (zh) * 2020-10-28 2024-07-12 武汉嫦娥投资合伙企业(有限合伙) 一种基于大数据的自适应人机交互***与方法

Also Published As

Publication number Publication date
JP2016088513A (ja) 2016-05-23
DE102014116292A1 (de) 2016-05-12
JP2018150043A (ja) 2018-09-27
US20160132126A1 (en) 2016-05-12

Similar Documents

Publication Publication Date Title
CN105584368A (zh) 用于在机动车中传输信息的***
US11124118B2 (en) Vehicular display system with user input display
CN106427571B (zh) 交互式操纵装置和用于运行所述交互式操纵装置的方法
CN104854553B (zh) 在方向盘和仪表板上的光基触摸控制件
US10732760B2 (en) Vehicle and method for controlling the vehicle
US8907778B2 (en) Multi-function display and operating system and method for controlling such a system having optimized graphical operating display
US20110260965A1 (en) Apparatus and method of user interface for manipulating multimedia contents in vehicle
CN106354259A (zh) 基于Soli和Tobii的汽车HUD眼动辅助手势交互***及其装置
CN105677009B (zh) 手势识别设备及具有该设备的交通工具
US20150367859A1 (en) Input device for a motor vehicle
US20160004321A1 (en) Information processing device, gesture detection method, and gesture detection program
KR102084032B1 (ko) 사용자 인터페이스, 운송 수단 및 사용자 구별을 위한 방법
CN101010661A (zh) 输入装置
JP5141878B2 (ja) タッチ式操作入力装置
EP2741171A1 (en) Method, human-machine interface and vehicle
CN101405177A (zh) 交互式操纵装置和用于运行所述交互式操纵装置的方法
CN109643219A (zh) 用于与在车辆中的显示设备上呈现的图像内容进行交互的方法
US11537240B2 (en) Virtual image display device
KR20200093091A (ko) 단말기, 그를 가지는 차량 및 그 제어 방법
US20150007082A1 (en) Cabin management system having a three-dimensional operating panel
US10482667B2 (en) Display unit and method of controlling the display unit
JP5136948B2 (ja) 車両用操作装置
EP2273353A1 (en) Improved human machine interface
RU2410259C2 (ru) Интерактивное устройство управления и способ эксплуатации интерактивного устройства управления
JP2007062668A (ja) 車両用入力装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160518

WD01 Invention patent application deemed withdrawn after publication