CN209044516U - 用于汽车的用户识别装置 - Google Patents
用于汽车的用户识别装置 Download PDFInfo
- Publication number
- CN209044516U CN209044516U CN201821405414.2U CN201821405414U CN209044516U CN 209044516 U CN209044516 U CN 209044516U CN 201821405414 U CN201821405414 U CN 201821405414U CN 209044516 U CN209044516 U CN 209044516U
- Authority
- CN
- China
- Prior art keywords
- user
- automobile
- display screen
- capture
- computer
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000007246 mechanism Effects 0.000 claims abstract description 8
- 210000003195 fascia Anatomy 0.000 claims description 22
- 230000009471 action Effects 0.000 claims description 5
- 239000004973 liquid crystal related substance Substances 0.000 claims description 4
- 239000002096 quantum dot Substances 0.000 claims description 3
- 238000007689 inspection Methods 0.000 claims 1
- 230000001815 facial effect Effects 0.000 description 32
- 238000012545 processing Methods 0.000 description 28
- 210000003128 head Anatomy 0.000 description 15
- 230000015654 memory Effects 0.000 description 13
- 230000036541 health Effects 0.000 description 10
- 230000007935 neutral effect Effects 0.000 description 9
- 238000006243 chemical reaction Methods 0.000 description 7
- 238000000034 method Methods 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 6
- 230000006870 function Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000035939 shock Effects 0.000 description 4
- 230000007958 sleep Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 230000008921 facial expression Effects 0.000 description 3
- 230000003862 health status Effects 0.000 description 3
- 230000000977 initiatory effect Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 206010037660 Pyrexia Diseases 0.000 description 2
- 238000005452 bending Methods 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000009194 climbing Effects 0.000 description 2
- 238000004590 computer program Methods 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 206010004950 Birth mark Diseases 0.000 description 1
- 230000003213 activating effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013475 authorization Methods 0.000 description 1
- 230000036772 blood pressure Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 230000000739 chaotic effect Effects 0.000 description 1
- 238000000151 deposition Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000887 face Anatomy 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R25/00—Fittings or systems for preventing or indicating unauthorised use or theft of vehicles
- B60R25/20—Means to switch the anti-theft system on or off
- B60R25/25—Means to switch the anti-theft system on or off using biometry
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
- B60Q1/00—Arrangement of optical signalling or lighting devices, the mounting or supporting thereof or circuits therefor
- B60Q1/0017—Devices integrating an element dedicated to another function
- B60Q1/0023—Devices integrating an element dedicated to another function the element being a sensor, e.g. distance sensor, camera
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
- G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/20—Individual registration on entry or exit involving the use of a pass
- G07C9/22—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder
- G07C9/25—Individual registration on entry or exit involving the use of a pass in combination with an identity check of the pass holder using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- G—PHYSICS
- G07—CHECKING-DEVICES
- G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
- G07C9/00—Individual registration on entry or exit
- G07C9/30—Individual registration on entry or exit not involving the use of a pass
- G07C9/32—Individual registration on entry or exit not involving the use of a pass in combination with an identity check
- G07C9/37—Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
- H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
- H04L63/102—Entity profiles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/2866—Architectures; Arrangements
- H04L67/30—Profiles
- H04L67/306—User profiles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L9/00—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
- H04L9/32—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials
- H04L9/3226—Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols including means for verifying the identity or authority of a user of the system or for message authentication, e.g. authorization, entity authentication, data integrity or data verification, non-repudiation, key authentication or verification of credentials using a predetermined code, e.g. password, passphrase or PIN
- H04L9/3231—Biological data, e.g. fingerprint, voice or retina
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/06—Authentication
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
- B60W40/08—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
- B60W2040/0809—Driver authorisation; Driver identity check
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
- B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
- B60W2420/403—Image sensing, e.g. optical camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L2209/00—Additional information or applications relating to cryptographic mechanisms or cryptographic arrangements for secret or secure communication H04L9/00
- H04L2209/84—Vehicles
Landscapes
- Engineering & Computer Science (AREA)
- Computer Security & Cryptography (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Health & Medical Sciences (AREA)
- Computer Hardware Design (AREA)
- General Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Computing Systems (AREA)
- Mechanical Engineering (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Automation & Control Theory (AREA)
- Software Systems (AREA)
- Biodiversity & Conservation Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Multimedia (AREA)
- Transportation (AREA)
- Computer Vision & Pattern Recognition (AREA)
- User Interface Of Digital Computer (AREA)
- Lock And Its Accessories (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- Collating Specific Patterns (AREA)
Abstract
本实用新型公开了一种用于汽车的用户识别装置,包括:数据库,数据库用于存储汽车的用户的至少一个图像;一个或多个用户捕获设备,用户捕获设备包括位于汽车的内部或外部的一个或多个摄像机,用于捕获接近汽车的用户的图像;以及计算机,计算机联接到数据库和用户捕获设备,并配置为对比捕获的图像与存储的图像,以验证接近所述汽车的用户是否为有效用户。其中,计算机还联接到汽车的锁定机构,以在验证接近汽车的用户为有效用户时,控制锁定机构解锁与有效用户相应的车门。
Description
技术领域
本实用新型的实施方案属于数据和图像处理以及用户辨识、识别和验证领域。更具体地,本实用新型的实施方案涉及用于汽车的用户识别装置。
背景技术
汽车已经变得更加复杂,具有先进的电子控件和集成的计算机,驾驶体验得以增强。此类控制器和计算机可提供一系列用户应用程序,通过这些应用程序可访问大量信息,包括私人信息。这些电子控件和计算机的安全性和访问权限限于钥匙、门锁***和计算机的登录名/密码。如果钥匙、门锁和登录名/密码受到损害,未经授权的用户或驾驶员即可获得汽车的访问和进入,包括电子控件和与私人信息关联的计算机的访问。汽车中需要有效的驾驶员或用户标识以仅允许经授权后访问汽车及其电子控件和计算机。
实用新型内容
本实用新型公开了一种用于汽车的用户识别装置,包括:
数据库,所述数据库用于存储所述汽车的用户的至少一个图像;
一个或多个用户捕获设备,所述用户捕获设备包括位于所述汽车的内部或外部的一个或多个摄像机,用于捕获接近所述汽车的用户的图像;以及
计算机,所述计算机联接到所述数据库和所述用户捕获设备,并配置为对比捕获的图像与存储的图像,以验证接近所述汽车的用户是否为有效用户;
其中,所述计算机还联接到所述汽车的锁定机构,以在验证接近所述汽车的用户为有效用户时,控制所述锁定机构解锁与所述有效用户相应的车门。
进一步地,所述用户捕获设备位于所述汽车的汽车仪表板的上方,用于捕获所述汽车的驾驶员或前排座椅乘客的图像和表情。
进一步地,所述用户捕获设备位于所述汽车的挡风玻璃上,用于捕获所述汽车的驾驶员或前排座椅乘客的图像和表情。
进一步地,所述用户捕获设备包括立体摄像机、RGB摄像机、红外摄像机或飞行时间摄像机,其中所述红外摄像机用于捕获所述用户的温差信息。
进一步地,还包括位于所述汽车的汽车仪表板的横贯显示屏,所述横贯显示屏包括一个或多个显示区域,用于显示所述用户捕获设备所捕获的图像。
进一步地,所述横贯显示屏包括发光二极管显示屏、液晶显示屏、有机发光二极管显示屏或量子点显示屏,所述横贯显示屏从所述汽车仪表板的一端延伸到另一端。
进一步地,所述横贯显示屏为弯曲显示屏。
进一步地,还包括一个或多个姿势控制设备,所述一个或多个姿势控制设备位于所述汽车的内部,用于检测所述用户的手势和移动。
进一步地,所述姿势控制设备包括动作摄像机或动作传感器,所述动作摄像机为飞行时间摄像机。
进一步地,所述姿势控制设备位于所述汽车的汽车仪表板的下方,所述姿势控制设备与所述汽车仪表板联接,以利用检测到的所述用户的手势和移动来访问和控制所述汽车仪表板的横贯显示屏。
附图说明
附图示出了示例,因此为示例性实施方案,不能被视为限制范围。
图1A示出了具有用户标识(identification,ID)设备的汽车的顶视图的一个示例。
图1B示出了具有用户捕获和姿势控制设备的汽车的内部视图的一个示例。
图2A-图2B示出了通过用户捕获设备捕获用户图像和特征的示例。
图3A-图3B示出了具有用户捕获设备的汽车的示例性驾驶员控制环境。
图4示出了可用于图1A-图3B的汽车的数据处理或计算***架构的一个示例框图。
图5示出了用于图4的数据处理***架构的计算***的一个示例框图。
图6示出了用于为汽车识别用户并捕获用户表情的计算***的框图。
图7A示出了登记汽车的用户生物扫描的示例操作的流程图。
图7B-图7C示出了验证汽车用户的示例操作的流程图。
图8示出了处理汽车用户的中性和非中性的面部表情的示例操作的流程图。
具体实施方式
本实用新型公开了用于汽车的用户识别和表情的实施方案和示例。作为一个示例,汽车的数据处理***包括数据库、用户捕获设备和计算机。数据库存储汽车的用户的至少一个图像。用户捕获设备捕获用户的至少一个图像。计算机联接到数据库和用户捕获设备。如果通过确定用户的存储图像是否与用户的捕获图像匹配将用户验证为有效用户,则计算机可允许用户访问汽车。作为一个示例,面部特征包括具有面部特征的二维(2D) 或三维(3D)图像。
作为一个示例,如果将用户验证为有效用户,则计算机允许用户访问汽车以及汽车的控件。如果未将用户验证为有效用户,则计算机也可拒绝用户访问汽车以及汽车的控件。作为一个示例,用户为汽车的驾驶员或乘客。如果驾驶员或乘客经验证为有效用户,计算机还可为其配置设置或偏好。
如本文所列出,将参考下面讨论的细节描述各种实施方案、示例和方面,并且附图将示出各种实施方案和示例。以下说明书和附图为例示性的,不应被理解为限制性的。描述了许多具体细节,以便彻底理解各种实施方案和示例。然而,在特定实例中,为了简洁地讨论实施方案和示例,并未描述熟知的或常规的细节。
尽管以下示例和实施方案针对汽车的用户识别和表情检测技术,但可将此类技术应用于需要进入和访问的任何类型环境。本实用新型所公开的技术可避免需要钥匙才能进入和访问,以及防止无效用户假冒和未经授权地使用电子控件和计算机。
具有用户识别和表情检测的示例性汽车
图1A-图1B示出了具有用户标识(ID)设备和姿势控制设备的汽车 110的顶视图和内部视图的示例。作为一个示例,一个或多个用户(例如驾驶员或乘客)可具有登记的生物扫描信息以访问和使用汽车。作为一个示例,生物扫描信息可存储在安全的数据库或安全的云存储设备中。生物扫描信息的示例可包括用户的二维(2D)或三维图像,包括用户的2D或3D 面部图像。
用户的生物扫描信息登记可由用于购买或订购汽车110的应用程序发起。例如,当购买和交付汽车110之后,在已通过个人标识和密码验证、指纹验证或两级验证对汽车110进行了验证的移动设备(例如移动电话、平板计算机、笔记本电脑等)上运行的应用程序可使用移动设备上的一个或多个摄像机捕获用户的图像,并且针对汽车110将图像作为有效用户在安全的环境下存储和登记。可将登记的有效用户登记为经授权可驾驶汽车 110或禁止驾驶汽车110。例如,丈夫和妻子都登记为可驾驶汽车110,但所有儿童则没有驾驶汽车110的授权。作为一个示例,汽车110可包括一个或多个摄像机来捕获用户的图像,并且针对汽车110将图像存储和登记为有效用户。
参考图1A,顶视图示出具有柱子A、B和C(101,102,103)的汽车 110,这些柱子形成在汽车110的右侧和左侧。作为一个示例,可将多个用户ID设备(107-A至107-D)安装在汽车的不同位置上,这些用户ID设备可用于辨识、识别和验证汽车110的用户(例如驾驶员或乘客),以允许进入和访问汽车110,包括访问汽车220内的控件和计算机。也可使用用户 ID设备107-A至107-D捕获已针对汽车110作为有效用户登记的一个或多个用户的图像。例如,用户可接近用户ID设备107-B并在已对汽车110进行验证的移动设备上运行的应用程序中发起生物扫描登记,其中用户ID设备107-B捕获用户的图像以针对汽车110存储和登记为有效用户。
每个用户ID设备107-A至107-D可包括一个或多个摄像机,例如立体摄像机、RGB(红、绿、蓝)摄像机或红外摄像机,以捕获用户生物扫描信息,该用户生物扫描信息包括2D或3D面部图像和特征以及热差信息。摄像机可为任何类型的可商购获得的摄像机,该摄像机包括的相应硬件和软件被构造成使用和实施图1A-图8中所描述的技术和操作。作为一个示例,可将捕获的用户图像与存储或登记的用户图像例如存储在数据库中的用户图像进行比较,以确定捕获图像是否匹配存储图像,并且在存在匹配时将用户验证为有效用户。如果验证为有效用户,汽车110可允许用户访问和进入。这样,通过具备用户ID设备107-A至107-D来捕获用于检测和识别有效用户例如汽车110的驾驶员或乘客的用户的图像,汽车110的钥匙已不是必要的。
在图1A的顶视图中,用户ID设备107-C和107-D可位于汽车110的两侧车门之间的柱子B(102)上,以辨识和识别接近汽车110的右侧或左侧的用户。作为一个示例,安装在并位于驾驶员侧的车门支撑件上的用户 ID设备107-B可检测接近的驾驶员,以确定人员是否为可访问并进入汽车的有效授权人员。例如,如果用户ID设备107-B、107-C或107-D将用户辨识并识别为有效用户,用户无需***或激活汽车110的钥匙,汽车110 即可自动为用户解锁车门。作为一个示例,连接到柱子A(101)的用户 ID设备107-A可检测从后端接近汽车的用户(驾驶员)。用户ID设备 107-A至107-D中的每一个可与包括汽车110的锁定***和机构的汽车110 计算机***联接和通信,并且如果通过例如将捕获的用户图像与数据库中存储的用户图像匹配检测到有效用户,汽车110的锁定***和机构可自动地解锁该有效用户的相应车门并且允许访问汽车110。作为一个示例,仅被辨识为有效驾驶员的有效用户可访问驾驶控件来驾驶汽车110。
参考图1B,从朝向仪表板137的后座视角示出了汽车110的内部视图。作为一个示例,汽车110包括多个用户捕获设备117-A至117-C以及姿势控制设备127-A至127-C。作为一个示例,用户捕获设备117-A位于前挡风玻璃顶端处的仪表板137的上方,用户捕获设备117-B和117-C位于驾驶员和乘客座椅头枕的背面。每个用户捕获设备117-A至117-C可包括一个或多个立体、RGB(红色、绿色、蓝色)或红外摄像机以捕获用户图像 (例如用户面部图像、表情和特征)或热差信息(例如用户头部和周边区域的温差信息)。
作为一个示例,用户捕获设备117-A可捕获驾驶员或乘客的用户图像以将用户辨识和识别为有效用户。作为一个示例,如果确定用户为有效用户,汽车110的计算***和控件可对作为驾驶员或乘客的用户配置设置和偏好。例如,驾驶员可能希望气候控制为凉爽,并且可根据识别的驾驶员对设置和偏好进行设定。乘客也可优选能够在汽车110的显示屏上为所识别的乘客设定的特定音乐和音乐控件。作为一个示例,仅被辨识为有效驾驶员的有效用户可访问汽车110的驾驶控件并且能够驾驶汽车110。
作为一个示例,用户捕获设备117-A可捕获用户的一个或多个图像或表情(例如驾驶员或乘客的表情),例如自拍、微笑、皱眉、睡觉、打盹、睁眼和闭眼、愤怒、快乐、疲倦、紧张或震惊。作为一个示例,汽车110 的计算***和控件可对捕获的用户表情进行反应,例如在快睡着时提供音频警告或在音乐声过大而识别到恼怒表情时降低收音机音量。可将计算***和控件编程为以任何所需的方式对汽车110的每个有效用户进行不同反应。
作为一个示例,用户捕获设备117-B和117-C以与驾驶员座椅和前排乘客座椅后面的乘客的用户捕获设备117-A相同的方式工作,并且显像计算机151-A和151-B的设置和偏好也可相应地设置为针对后座上已识别用户的设置和偏好。作为一个示例,用户捕获设备117-A至117-C可包括红外摄像机并在确定健康状况例如检测用户是否生病发烧时检测用户的温差信息。
作为一个示例,汽车110包括位于汽车110的仪表板和显像计算机 151-A和151-B下方的姿势控制设备127-A至127-C。在控制或访问汽车 110的仪表板的显示屏或显像计算机151-A和151-B上提供的功能、应用程序、信息、选项、图标或对象时,这些姿势控制设备127-A至127-C中的每一个可包括一个或多个摄像机(例如飞行时间TOF(time of flight,飞行时间)摄像机)或动作传感器来检测用户(例如汽车110的驾驶员或乘客) 的手势和移动。作为一个示例,姿势控制设备127-A至127-C可包括得自 Intel 的硬件和软件以实施仪表板137的显示屏或显像计算机151- A和151-B上的界面的姿势控制。
示例性用户特征和表情
图2A-2B示出了通过用户捕获设备207捕获用户图像和特征的示例。参考图2A,以三维方式描绘了用户头部201。作为一个示例,用户捕获设备207可捕获具有用户头部201的面部特征211的二维(2D)或三维(3D) 图像。用户头部201描绘为示出用户的头部,该用户可能为汽车110的驾驶员或乘客,由用户捕获设备207辨识或识别。用户捕获设备207可与图1A中示出的用户ID设备107-A至107-D以及图1B中示出的用户捕获设备 117-A至117-C相同的方式包括一个或多个摄像机。
作为一个示例,用户捕获设备207可包括任何类型的RGB摄像机来捕获用户头部201的2D用户特征(例如2D面部特征211)或包括立体摄像机来捕获用户头部201的3D用户特征(例如3D面部特征211)。用户图像中面部特征的示例可包括例如用户头部201的鼻子、嘴巴、耳朵、眼睛、眉毛、嘴唇、脸颊、胎记、脸宽、头部尺寸、发色等的形状、尺寸和维度。作为一个示例,可在为汽车110的用户登记生物扫描信息期间存储2D或 3D用户图像和面部特征信息,这些用户图像和面部特征信息可存储在汽车 110内的安全数据库中或远程存储在安全的云环境中。作为一个示例,可使用用户捕获设备207来辨识和识别用户头部201的面部特征,以在将用户验证为汽车110的有效用户时,确定此类特征是否与为用户存储在数据库中的那些匹配。可使用任何类型的面部特征识别算法,例如OpenCV软件提供的开源面部识别算法。作为一个示例,用户捕获设备207可捕获能够成为汽车110的有效乘客的儿童的面部图像,但汽车110的计算机可拒绝并阻止该儿童操作驾驶员控件和驾驶汽车110。
作为一个示例,用户捕获设备207可用于捕获用户图像以检测用户的表情。例如,用户捕获设备207可捕获用户的自拍、微笑、皱眉、睡觉、打盹、睁眼和闭眼、愤怒、快乐、忧伤、疲倦、紧张或震惊。作为一个示例,在确定是需要进行反应还是不需要进行反应时,可通过汽车110内的计算***处理和分析捕获的表情。例如,如果用户捕获设备207捕获到用户闭眼达到预定时间段,则表明驾驶员快睡着了,汽车110的计算机可通过提供音频响应例如“Tim,请醒一醒,您快睡着了”来进行反应。其它反应可包括显示屏上的消息、显示屏上的灯光闪烁、更改设置和偏好等。
参考图2B,作为一个示例,用户捕获设备207可包括能够捕获温度信息203的红外摄像机。此类信息可包括温差信息。例如,人将具有与无生命对象不一样的温差红外图像。此类温度信息203可进一步用于确定用户头部201是否匹配有效用户并且可检测假冒。用户捕获设备207可位于汽车110的内部和外部,并且对准以捕获用户头部201的用户图像。还可比较汽车110的不同用户之间的温度信息,以确定驾驶员座椅或乘客座椅上用户的健康状况。
具有用户捕获设备的示例性驾驶员控制环境
图3A-3B示出了具有用户捕获设备377的汽车(例如汽车110)的示例性驾驶员控制环境300和350。
参考图3A,以前座椅视角示出了驾驶员控制环境300。作为一个示例,驾驶员控制环境300包括具有方向盘312和横贯显示屏(coast-to-coast display)302的汽车仪表板337。横贯显示屏302包括三个显示区域:显示区域1(304)、2(306)和3(308)。尽管未示出,但在汽车仪表板 337内可包括一个或多个计算设备(计算机)来提供汽车控件和应用程序。作为一个示例,用户捕获设备377可安装在并位于仪表板337的上方并且包括一个或多个摄像机来捕获用户(例如前排座椅上的驾驶员或乘客)的图像或表情。姿势控制设备327可安装在汽车仪表板337上的横贯显示屏 302的下方。姿势控制设备327可包括一个或多个动作摄像机(例如飞行时间TOF摄像机)和传感器来捕获例如用户的手势,以访问和控制横贯显示屏302的显示区域1-3(304,306和308)上的应用程序和界面。
作为一个示例,用户捕获设备377可安装在汽车仪表板337的上方,例如安装在汽车的挡风玻璃上,并且可包括一个或多个摄像机并以与图 1A-图2B中所述的用户捕获设备相同的方式工作以捕获用户图像、特征和表情。如图2A-2B中所示,用户捕获设备377的位置可以定位为或安装为对准以捕获驾驶员或前排座椅乘客的用户图像和表情。用户捕获设备377 的其它位置可位于仪表板337、方向盘312左侧的柱子(汽车内部或外部)、乘客座椅右侧的柱子(汽车内部或外部)。尽管未示出,但可在汽车内部或外部安装其它摄像机以拍摄侧视和后视图像,这些图像可显示在横贯显示屏302上,例如显示在显示区域1(304)中的左侧以避免必须使用侧视镜和后视镜。
参考图3B,以前座椅视角示出了驾驶员控制环境350,其中在汽车仪表板337的横贯显示屏302上提供用户界面和应用程序。方向盘312和驾驶员平板计算机310安装在仪表板337上。驾驶员平板计算机310可提供驾驶员界面以访问控件,该控件包括汽车(例如汽车110)的设置和偏好。作为一个示例,用户捕获设备377可位于并定位在仪表板337的上方,用户捕获设备377具有一个或多个摄像机以检测和辨识驾驶员(例如,辨识出的驾驶员371“Tim”或辨识出的乘客381“Jenny”)。作为一个示例,使用用户捕获设备377验证Tim为有效用户或驾驶员(例如,将Tim的用户图像与存储的用户图像匹配,以将Tim检测为有效用户)。用户捕获设备 377也可捕获驾驶员或乘客的表情,例如Tim或Jenny的表情,并且在驾驶员快睡着时提供反应,例如音频警告。对于其它示例,如果儿童坐在驾驶员座椅上,用户捕获设备377可捕获儿童的图像,并且驾驶员平板计算机 310或汽车计算机可检测儿童并且拒绝其控制驾驶员平板计算机310或横贯显示屏302以及阻止儿童驾驶汽车或访问其任何控件。
作为一个示例,一旦验证为有效驾驶员,例如Tim,则驾驶员平板计算机310或汽车计算机(例如位于汽车仪表板337内)可为Tim配置设置和偏好,包括横贯显示屏302上控制界面的设置和偏好。例如,如显示区域3(308)中所示,可为Tim设置娱乐设置,其中有如显示区域3(308) 中所示的关于音乐、有声读物、电影、游戏的偏好,并且针对Tim的相应旋转多面体317。一旦通过验证,乘客,例如Jenny,也可以具有在横贯显示屏302上的为Jenny指定的设置和偏好。设置和偏好的示例可包括横贯显示屏302上的个性化用户界面、个性化座椅控件、个性化方向盘控件、脚踏板位置、个性化气候控件、个性化电话界面、个性化地图设置等。
作为一个示例,姿势控制设备327位于并定位在汽车仪表板337的下方,该姿势控制设备327具有一个或多个摄像机和动作传感器以检测用户手部301的手势和移动。例如,在控制或访问横贯显示屏302上提供的功能、应用程序、信息、选项、图标或对象时,用户手部301可表示驾驶员或乘客(例如,被正确识别为有效用户的人)的手,而姿势控制设备327可捕获用户姿势(例如,用户手部301的姿势)。作为一个示例,姿势控制设备327可包括得自Intel 的硬件和软件,并且用户捕获设备 377可包括一个或多个摄像机,例如飞行时间TOF摄像机。
作为一个示例,驾驶员平板计算机310是一种平板计算机,可提供具有触觉反馈和控件的触摸屏。驾驶员平板计算机310可为驾驶员或用户提供主要的车辆功能控件,例如气候控件和环境350的各种设置,这些都可在辨识并验证为有效用户例如辨识出的驾驶员371Tim或辨识出的乘客381 Jenny之后设置。驾驶员平板计算机310可联接到汽车仪表板337内的汽车计算机(未示出)、用户捕获设备377或姿势控制设备327。驾驶员平板计算机310、汽车计算机或二者可被配置成识别驾驶员(例如Tim)或乘客(例如Jenny)并且允许驾驶员或乘客使用姿势控制设备327和访问横贯显示屏302。作为一个示例,驾驶员平板计算机310可在其触摸屏上提供任何数目的表示、对象、图标或按钮,从而提供各种功能、导航用户界面、电话控制用户界面,以经由与移动电话333连接的蓝牙接听电话或从可穿戴设备例如智能手表313接收数据和信息,例如活动信息,例如心跳或攀登步数。
横贯显示屏302可包括发光二极管(light emitting diode,LED)显示屏、液晶显示屏(liquid crystal display,LCD)、有机发光二极管(organic light emitting diode,OLED)或量子点显示屏,该显示屏可从汽车仪表板337的一端延伸到另一端。作为一个示例,横贯显示屏302可为集成到汽车仪表板337并横跨汽车仪表板337的弯曲显示屏。可在多个显示区域例如横贯显示屏302的显示区域1(304)、显示区域2(306)和显示区域3(308) 提供一个或多个图形用户界面。此类图形用户界面可包括在例如显示区域1 (304)和显示区域3(308)中显示的状态菜单。
作为一个示例,显示区域1(304)可通过一个或多个摄像机显示车辆或汽车的后视或侧视图像,该一个或多个摄像机可位于汽车的外部或内部,用于捕获后视或侧视图像。作为一个示例,显示区域2(306)可提供和显示可旋转的三维对象,例如具有由点和线限定的多边形面的旋转多面体317。另选地,显示区域3(308)可显示旋转多面体317。旋转多面体317可以漂浮在空间中的形式出现在显示区域2(306),并且可以恒定或可变的速度旋转。
作为一个示例,旋转多面体317可使用一个或多个面、点和线提供一组信息,该组信息可为经验证为有效用户的每个用户(驾驶员或乘客)提供明确形式的各种参数以及各种类型的用户信息。即,汽车的每个通过验证或有效的用户可具有个性化的旋转多面体317,用于访问和控制显示在显示区域2(306)和显示区域3(308)上的用户信息和应用程序。例如,可通过在数据库中存储的生物扫描信息,例如面部特征或表情,登记任何数目的驾驶员或用户。用户捕获设备377可用于辨识、识别和验证用户是否有效,驾驶员平板计算机310可为每个有效用户提供个性化的旋转多面体317。
可为每个有效用户(例如有效驾驶员或乘客)关联和个性化的信息或应用程序的类型或组的示例可包括用户信息和应用程序,例如在显示区域2 (306)中所示的旋转多面体317上具有相应的面的“我的娱乐”、“我的娱乐”以及“我的健康”。限定旋转多面体317上的多边形面的点或线以及点数和线数也可表示与用户信息相关的各种参数,例如“我的娱乐”、“我的娱乐”和“我的健康”。例如,限定“我的健康”的多边形面的点数可指示有效用户的健康信息的类别数。
作为一个示例,驾驶员或用户手部301可使用姿势控制设备327捕获的手势沿着任何轴线旋转多面体317,以通过将多面体327的期望面移动至前台,例如显示区域2(306)的前台,来选择用户信息或应用程序。参考图3B,“我的娱乐”的面位于前台,表示其为所选择的用户信息或应用程序。作为一个示例,当通过用户手部301将所选择的用户信息或应用程序例如“我的娱乐”定位在前台时,用户信息或应用程序图标、类别、项目、控件等显示在显示区域3(308)。对于其它示例,控制对象或光标或头像可显示在横贯显示屏302中以选择多面体317的面。用于旋转多面体的用户姿势的示例包括将手部或手指从左到右或从右到左移动,以相应地旋转多面体317。可识别其它移动以沿着不同的轴线将多面体317旋转至前台,以将多面体317的期望面移动至前台,从而选择期望的用户信息或应用程序,例如“我的娱乐”。当多面体317的期望面位于前台之后,用户可通过用户手部301提供抓取和释放动作,以获取有关所选择的用户信息或应用程序的其它信息。
参考图3B,例如“我的娱乐”的多边形面包括四个点或边,当访问“我的娱乐”时,这些点和边可对应于用户的四个参数或类别,例如在显示区域 3(308)中显示的“音乐”、“有声读物”、“电影”和“游戏”。驾驶员或用户可通过用户手部301的动作来旋转多面体317,使得“我的娱乐”面位于前台,以选择“我的娱乐”并在显示区域3(308)中显示“我的娱乐”的特定项目。驾驶员或用户可随后通过由姿势控制设备327捕获的对于显示区域3(308) 的用户手部301的动作来访问例如“音乐”类别下的显示区域3(308)中的具体音乐项目来进行播放。类似地,“我的活动”和“我的健康”包括四个点和四条线,这些点和线表示用户信息的不同参数或类别,例如电话呼叫、心率、攀登步数等。对于其它示例,点可表示用户的体重、用户的心率等。点和线的数目可改动和修改旋转多面体317的形状。例如,如果有更多点与健康相关,“我的健康”的多边形面可具有包括更多数目的点和线以及更大的面的多边形表面。
参考“我的娱乐”示例,当用户观看电影时,可在旋转多面体317的“我的娱乐”面生成数据点。参考“我的活动”示例,可为未接的移动电话来电生成数据点。还可生成指示未读文本消息的数据点。对于“我的健康”示例,可预先配置旋转多面体317上的一些点,例如用于指示用户体重。在其它示例中,驾驶员或用户可通过驾驶员平板计算机310添加点,例如指示血压的点或出于健康目的持续跟踪步数的点。添加的点可改变旋转多面体317 上“我的健康”的多边形面。每个驾驶员或用户可具有用户帐户,当在横贯显示屏302上呈现旋转多面体317时,该用户帐户可生成最少数目的基线点。驾驶员或用户还可添加有关特定类型信息的点来跟踪例如未接来电。
与信息和参数相关的类别可由用户通过驾驶员平板计算机310生成或输入,或者使用例如移动电话333或智能手表313(或任何其它移动计算设备)下载或输入到对横贯显示屏302进行控制并提供信息的驾驶员平板计算机110。作为一个示例,在可为旋转多面体317生成或输入信息或参数之前,验证或辨识出用户或驾驶员,这些信息和参数可存储在一个或多个存储在或联接到驾驶员平板计算机310的存储器或数据库中。对于每个用户或驾驶员,可提供个性化的旋转多面体317并将其与相应的个人信息和参数例如心跳、心率等关联。例如,每个驾驶员用户可生成数据点或可自动生成数据点,这些数据点可改变旋转多面体317的形状。使用旋转多面体 317的示例和实施方案可用于任何显示界面环境,例如台式计算机、笔记本电脑、平板计算机、上网本、移动电话和减少显示器的混乱的设备的显示界面。
示例性数据处理和计算***架构
图4示出了图1A-1B及图3A-3B的示例性环境100,150,300和350的数据处理(或计算***)架构400的一个示例框图。作为一个示例,数据处理***架构400可表示图1B、3A-3B中仪表板137,337内的汽车110的计算***。对于其它示例,架构400可表示图1A-图1B和图2中驾驶员平板计算机310或显像计算机151-A、151-B的计算***。
参考图4,数据处理***架构400包括处理器412、实时操作***410 和进程间通信408,它们与HMI(Human Machine Interface,人机界面)中间件402、虚拟机404、虚拟设备环境406和安全/在线服务414连接。处理器412可包括任何类型的或微处理器或中央处理单元(central processing unit,CPU),这些微处理器或中央处理单元被配置成执行本文所公开的技术和操作。作为一个示例,处理器412可包括例如nVidia 的片上***(system-on-a-chip,SOC),这类片上***提供可用于汽车的图形处理单元(graphical processing unit,GPU)架构,从而提供如图3A-3B中的横贯显示屏302中所示的图形用户界面和控件。作为一个示例,处理器412还可包括nVidia Drive CX硬件和软件解决方案,这些解决方案为被配置成为实施本文所公开的技术和操作的横贯显示屏302提供高级图形和计算机视觉导航。处理器412还可包括Intel In-VehicleInfotainment或nVidia Drive 处理架构和软件,这些处理架构和软件为被配置成使用本文所公开的技术和操作的汽车提供信息和娱乐功能。
作为一个示例,实时操作***410可为基于的操作***,可经由安全/在线服务414提供云连接,并经由虚拟设备环境406提供虚拟设备通信。安全/在线服务414可包括智能天线并提供至要求使用高速无线通信例如长期演进(Long-Term Evolution,LTE)标准进行用户验证的外部云服务的安全网关。还可通过安全/在线服务414为数据处理***架构400提供通信。虚拟设备环境406可包括例如可与数据处理***架构400 通信的设备和虚拟机的环境。
人机界面(HMI)中间件402可包括软件来为环境100或驾驶员平板计算机310的驾驶员或用户提供图形用户界面和控件。作为一个示例, HMI中间件402可包括软件或软件,这些软件被配置成基于本文所公开的技术和操作为图3A-图3B的横贯显示屏302提供用户界面和控件。HMI中间件402还可包括软件来处理和分析所捕获的用户图像,包括由图1A-图3B中所描述的用户ID设备107-A至107-D、用户捕获设备 117-A至117-C、用户捕获设备207和用户捕获设备377接收的2D和3D面部特征、表情和温度信息。作为一个示例,虚拟机404可使用HMI中间件 402例如或软件以及进程间通信408,在汽车110中用作驾驶员平板电脑310或其它计算设备,或用作横贯显示屏302的用户界面应用程序。HMI中间件402还可包括软件来识别由姿势控制设备327捕获的用户姿势,例如使用被配置成识别手势以控制横贯显示屏302上的界面的Intel 软件和硬件。
图5示出了用于图4的数据处理***架构400的计算***500的一个示例框图。例如,计算机***500可表示用于计算机的各种部件,例如图 1B、图3A-图3B中仪表板137,337内的汽车110的汽车计算机,或驾驶员平板计算机310或显像计算机151-A,151B。尽管图5示出了数据处理或计算***的各种部件,但这些部件并非意在代表任何具体架构或部件互连方式,因为此类细节对于公开的示例或实施方案没有密切关系。还可将部件更少或部件可能更多的网络计算机和其它数据处理***或其它消费电子设备与本实用新型所公开的示例和实施方案一起使用。
参考图5,计算***500是数据处理或计算***的一种形式,包括联接到与高速缓存504联接的处理器502的总线501、与显示屏515联接的显示控制器514、网络接口517、非易失性存储设备506、联接到存储器510 的存储器控制器508、联接到I/O设备520的I/O控制器518以及数据库 512。处理器502可包括一个或多个中央处理单元(CPU)、图形处理单元(graphical processing unit,GPU)、专用处理器或它们的任何组合。处理器 502可通过包括非易失性存储设备506、存储器510或数据库512的任意存储器检索指令,并且执行指令以执行公开的示例和实施方案中所述的操作。
I/O设备520的示例包括鼠标、键盘、打印机以及由I/O控制器518控制的其它类似设备。网络接口517可包括调制解调器、有线和无线收发器,并且使用任何类型的联网协议进行通信,包括(包括LTE和标准的)有线或无线WAN(Wide Area Network,广域网)和LAN(Local Area Network,局域网)协议。存储器510可为任何类型的存储器,包括随机存取存储器(random access memory,RAM)、动态随机存取存储器 (dynamic random-access memory,DRAM),这些存储器需要持续供电方可在存储器中刷新或保留数据。非易失性存储设备506可为大容量存储设备,包括磁性硬盘驱动器或磁性光驱或光驱或数字视频光盘(digital video disc, DVD)RAM或闪速存储器或其它类型的存储器***,即使在***电力中断后这些存储设备也可保留数据(例如大量数据)。
作为一个示例,存储器设备510或数据库512可为汽车(例如汽车110) 的任何数目用户(例如驾驶员或乘客)存储生物扫描信息。生物扫描信息可包括用户图像,用户图像包括2D或3D面部图像以及特征和表情。对于其它示例,存储器设备510或数据库512可为横贯显示屏302上的应用程序存储与例如“我的健康”、“我的活动”或“我的娱乐”类型的用户信息相关的用户信息和参数。尽管示出的存储器设备510和数据库512联接到***总线501,但处理器502可在本地或远程通过网络接口517联接到任何数目的外部存储器设备或数据库,例如数据库512可安全地存储在云环境中。作为一个示例,处理器502可实施图1A-图8中所述的用于识别用户和表情的技术和操作。显示屏515可表示图1B和3A-3B中的横贯显示屏302或显像计算机151-A,151-B的显示屏。
本文所公开的示例和实施方案可在数据处理***架构、数据处理***或计算***或者计算机可读介质或计算机程序产品中体现。所公开的示例和实施方案的各个方面、特征和详细信息可采用硬件或软件或二者的组合,这些可称为一个***或引擎。所公开的示例和实施方案还可以包括一个或多个计算机可读介质的计算机程序产品的形式体现,其中计算机可读介质具有可由一个或多个处理器(例如处理器502)执行以实施图1A-图8中所公开技术和操作的计算机可读代码。
示例性用户标识***和操作
图6示出了计算***600验证汽车的驾驶员或用户的框图。计算*** 600包括联接到用户捕获和表情引擎622的存储器或数据库630。作为一个示例,数据库630存储多个生物扫描用户信息,例如包括用户1面部特征(603)、用户2面部特征(604)直至用户N面部特征(606)的用户图像。数据库630可存储其它类型的生物扫描信息,包括2D和3D图像和面部表情。存储的面部特征可包括用户1(603)至用户N(606)的面部特征的形状、尺寸和维度,这些面部特征包括例如鼻子、嘴巴、眼睛、嘴唇、脸颊等。作为一个示例,存储在数据库630中的信息可在为汽车例如汽车110 的一个或多个用户登记生物扫描信息期间存储。数据库630可为位于可由用户访问的汽车或计算机内或安全云环境中的安全存储设备。
作为一个示例,一旦用户(例如驾驶员或乘客)进入汽车、或者靠近汽车、或者身处汽车内(例如汽车110),用户捕获设备607即可捕获用户图像,例如面部特征图像。用户捕获和表情引擎622可将具有面部特征的捕获的用户图像与存储在数据库630中的具有用户1面部特征(603)至用户N面部特征(606)的用户图像进行对比,以确定是否存在已对汽车登记的匹配。引擎622可使用任何面部识别算法来识别用户图像和面部特征。如果引擎622检测到匹配,引擎622可验证用户为有效用户,并进一步确定用户是否有驾驶员凭据而允许使用汽车,包括访问驾驶控件。作为一个示例,引擎622可检测进入乘客车门的儿童并允许车门解锁,但拒绝儿童访问汽车的驾驶控件。用户捕获设备607还可使用例如红外摄像机来捕获用户温差信息,从而可由引擎622处理以确定例如驾驶员或乘客的健康状况。例如,如果温度信息指示驾驶员具有比乘客更高的温差读数,引擎622 可决定驾驶员可能健康状况不佳,例如发烧,并且可通过汽车进行反应。作为一个示例,引擎622可实施图1A-图8中所述的技术和操作。
图7A示出了登记汽车的用户的生物扫描的示例操作700的流程图。
在框702处,发起用户生物扫描登记。作为一个示例,用户的生物扫描信息的登记可由用于购买或订购汽车(例如汽车110)的应用程序发起。作为一个示例,在已通过个人标识和密码验证、指纹验证或两级验证对汽车进行验证的移动设备上运行的应用程序可发起登记流程。用户也可为其他用户例如配偶、儿童等发起生物扫描登记。
在发起之后,在框704捕获到用户的生物扫描,例如捕获到2D或3D 面部图像。作为一个示例,移动设备或汽车可具有一个或多个摄像机来捕获例如2D或3D面部图像的用户图像。在登记期间可捕获多个用户的图像。
在框706处,用户(或每个用户)的生物扫描存储在安全的数据库中。作为一个示例,捕获的生物扫描,例如包括面部图像的2D或3D用户图像,本地存储在汽车的安全数据库中,或远程存储在安全的云环境中。
在框708处,对汽车登记用户的已存储的生物扫描。可有限制地对汽车将每个捕获的图像登记为驾驶员或乘客或两者。例如,第一用户可为汽车的所有者,且可仅具有驾驶员访问权限,并且第二用户可为第一用户的小孩,且不能具有驾驶员访问权限并且仅限制为乘客身份。用户的登记可对汽车的访问和控制施加任何数目的控制和限制。例如,丈夫和妻子都登记为可驾驶汽车(例如汽车110),但所有儿童没有权限驾驶并且仅有乘客显像计算机115-A和115-B的访问权限。
图7B示出了验证汽车的用户的一个示例操作710的流程图。在框712 处,接收用户的二维(2D)或三维(3D)面部特征(例如,用户头部201 的2D或3D面部特征211)。
在框714处,根据所接收的2D或3D面部特征将用户验证为有效用户。例如,参考图6,引擎622可从用户捕获设备607接收2D或3D面部特征,然后将它们与数据库630中存储的具有面部特征的用户图像进行比较,以通过确定具有面部特征的用户图像是否匹配来验证用户。如果存在匹配,可确定用户为有效用户。如果不存在匹配,可确定用户为无效用户。
在框716处,如果将用户验证为有效用户,则允许用户访问汽车(例如,汽车110)和控件(例如,横贯显示屏302上的控制界面)。在框718 处,如果未将用户验证为有效用户,则拒绝用户访问汽车及其控件。
图7C示出了验证汽车的用户的一个示例操作720的流程图。
在框722处,接收用户的二维(2D)或三维(3D)面部特征。在框 724处,接收用户的温度信息。例如,参考图2B,用户捕获设备207可包括红外摄像机来捕获用户头部201的温差信息。
在框726处,根据所接收的2D或3D面部特征和温度信息将用户验证为有效用户。例如,参考图6,引擎622可从用户捕获设备607接收2D或 3D面部特征和温度信息。引擎622可将所接收的2D或3D图像与数据库 630中存储的具有面部特征的用户图像进行比较,以通过确定具有面部特征的用户图像是否匹配来验证用户。引擎622还可分析温度信息,以在检测真实用户和防止假冒时确定用户图像是否示出无生命对象。如果存在对于用户图像的匹配并且温度信息指示为真实用户,则可确定用户为有效用户。如果不存在匹配并且温度信息指示并非真实用户,则可将用户确定为无效用户。
在框728处,如果将用户验证为有效用户,则允许用户访问汽车(例如,汽车110)和控件(例如,横贯显示屏302上的控制界面)。在框730 处,如果未将用户验证为有效用户,则拒绝用户访问汽车及控件。
图8示出了处理汽车用户的中性和非中性面部表情的示例操作800的流程图。在框802处,接收用户的捕获图像。例如,图1B、图2A-图2B和图3A-图3B中的用户捕获设备117-A至117-C、用户捕获设备207和用户捕获设备377可捕获用户(例如,驾驶员和乘客)的图像。
在框804处,确定用户的捕获图像中是非中性还是中性表情。非中性表情的示例可包括自拍、微笑、皱眉、睡觉、打盹、睁眼和闭眼、愤怒、快乐、疲倦、紧张或震惊。中性表情是指未被识别出而无法提供反应的表情。
在框806处,如果在捕获图像中确定是非中性表情,汽车可提供反应。例如,如果捕获到非中性表情,例如用户闭眼达到一定时间段,引擎622 可通过提供音频警告唤醒用户来提供反应。可提供任何类型的反应,例如显示屏上的消息、显示屏上的灯光闪烁、更改设置和偏好、振动座椅等。
在框808处,如果在捕获图像中确定是中性表情,则汽车将不提供反应。中性表情可为没有任何确定性变化或特征的普通面部表情。
本实用新型还公开一种非暂态计算机可读介质。该非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机实现本文所公开的技术和操作。
在一实施例中,非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机:
接收汽车的用户的捕获图像;以及
如果用户的捕获图像与数据库中用户的存储图像匹配,则将用户验证为有效用户。
在某一实施方式中,非暂态计算机可读介质包括指令,在计算机执行该指令的情况下,如果用户被验证为有效用户,则使得计算机允许用户访问汽车。
在某一实施方式中,非暂态计算机可读介质包括指令,在计算机执行该指令的情况下,如果用户未被验证为有效用户,则使得计算机拒绝用户访问汽车。
在某一实施方式中,非暂态计算机可读介质包括指令,在计算机执行该指令的情况下,如果用户被验证为有效用户,则使得计算机利用用户的设置和偏好来配置汽车。
在某一实施方式中,非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机在数据数据库中存储包括面部特征的用户的图像。
在某一实施方式中,非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机接收用户的温度信息,以进一步将用户验证为有效用户。
在某一实施方式中,非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机接收用户的捕获表情,捕获表情包括自拍、微笑、皱眉、睡觉、打盹、睁眼和闭眼、愤怒、快乐、疲倦、紧张或震惊。
在某一实施方式中,非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机基于捕获表情提供响应。
在某一实施方式中,非暂态计算机可读介质包括指令,如果计算机执行该指令,则使得计算机接收用户的捕获二维(2D)或三维(3D)图像。
在上述说明书中,已经参考本实用新型的具体示例性实施方案描述了本实用新型。然而,显而易见的是,可在不脱离所公开示例和实施方案的更广泛实质和范围的前提下对其进行各种修改和改变。因此,说明书和附图应被视为是例示性的而非限制性的。
Claims (10)
1.一种用于汽车的用户识别装置,其特征在于,包括:
数据库,所述数据库用于存储所述汽车的用户的至少一个图像;
一个或多个用户捕获设备,所述用户捕获设备包括位于所述汽车的内部或外部的一个或多个摄像机,用于捕获接近所述汽车的用户的图像;以及
计算机,所述计算机联接到所述数据库和所述用户捕获设备,并配置为对比捕获的图像与存储的图像,以验证接近所述汽车的用户是否为有效用户;
其中,所述计算机还联接到所述汽车的锁定机构,以在验证接近所述汽车的用户为有效用户时,控制所述锁定机构解锁与所述有效用户相应的车门。
2.根据权利要求1所述的用于汽车的用户识别装置,其特征在于,所述用户捕获设备位于所述汽车的汽车仪表板的上方,用于捕获所述汽车的驾驶员或前排座椅乘客的图像和表情。
3.根据权利要求1所述的用于汽车的用户识别装置,其特征在于,所述用户捕获设备位于所述汽车的挡风玻璃上,用于捕获所述汽车的驾驶员或前排座椅乘客的图像和表情。
4.根据权利要求1所述的用于汽车的用户识别装置,其特征在于,所述用户捕获设备包括立体摄像机、RGB摄像机、红外摄像机或飞行时间摄像机,其中所述红外摄像机用于捕获所述用户的温差信息。
5.根据权利要求1所述的用于汽车的用户识别装置,其特征在于,还包括位于所述汽车的汽车仪表板的横贯显示屏,所述横贯显示屏包括一个或多个显示区域,用于显示所述用户捕获设备所捕获的图像。
6.根据权利要求5所述的用于汽车的用户识别装置,其特征在于,所述横贯显示屏包括发光二极管显示屏、液晶显示屏、有机发光二极管显示屏或量子点显示屏,所述横贯显示屏从所述汽车仪表板的一端延伸到另一端。
7.根据权利要求5所述的用于汽车的用户识别装置,其特征在于,所述横贯显示屏为弯曲显示屏。
8.根据权利要求1所述的用于汽车的用户识别装置,其特征在于,还包括一个或多个姿势控制设备,所述一个或多个姿势控制设备位于所述汽车的内部,用于检测所述用户的手势和移动。
9.根据权利要求8所述的用于汽车的用户识别装置,其特征在于,所述姿势控制设备包括动作摄像机或动作传感器,所述动作摄像机为飞行时间摄像机。
10.根据权利要求8所述的用于汽车的用户识别装置,其特征在于,所述姿势控制设备位于所述汽车的汽车仪表板的下方,所述姿势控制设备与所述汽车仪表板联接,以利用检测到的所述用户的手势和移动来访问和控制所述汽车仪表板的横贯显示屏。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US15/695,800 | 2017-09-05 | ||
US15/695,800 US11072311B2 (en) | 2017-09-05 | 2017-09-05 | Methods and systems for user recognition and expression for an automobile |
Publications (1)
Publication Number | Publication Date |
---|---|
CN209044516U true CN209044516U (zh) | 2019-06-28 |
Family
ID=63529001
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201821405414.2U Active CN209044516U (zh) | 2017-09-05 | 2018-08-29 | 用于汽车的用户识别装置 |
CN201810998300.1A Pending CN109343698A (zh) | 2017-09-05 | 2018-08-29 | 数据处理***、计算机实现方法及非暂态计算机可读介质 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810998300.1A Pending CN109343698A (zh) | 2017-09-05 | 2018-08-29 | 数据处理***、计算机实现方法及非暂态计算机可读介质 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11072311B2 (zh) |
EP (1) | EP3679702A1 (zh) |
JP (1) | JP2020536782A (zh) |
CN (2) | CN209044516U (zh) |
WO (1) | WO2019050746A1 (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113232665A (zh) * | 2020-01-22 | 2021-08-10 | 四川物软网联科技有限公司 | 一种车载智能装置及车辆 |
CN113450476A (zh) * | 2020-03-27 | 2021-09-28 | 本田技研工业株式会社 | 控制装置、设备、计算机可读存储介质以及控制方法 |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10401852B2 (en) | 2015-11-04 | 2019-09-03 | Zoox, Inc. | Teleoperation system and method for trajectory modification of autonomous vehicles |
WO2017079341A2 (en) | 2015-11-04 | 2017-05-11 | Zoox, Inc. | Automated extraction of semantic information to enhance incremental mapping modifications for robotic vehicles |
US11283877B2 (en) * | 2015-11-04 | 2022-03-22 | Zoox, Inc. | Software application and logic to modify configuration of an autonomous vehicle |
US9606539B1 (en) | 2015-11-04 | 2017-03-28 | Zoox, Inc. | Autonomous vehicle fleet service and system |
DE102017204078B4 (de) * | 2017-03-13 | 2020-04-02 | Continental Automotive Gmbh | Verfahren zum Steuern eines Verschlusselements eines Fahrzeugs |
US10583855B2 (en) * | 2017-09-05 | 2020-03-10 | Byton Gmbh | Steering device for a vehicle, in particular an electric vehicle |
US11068741B2 (en) * | 2017-12-28 | 2021-07-20 | Qualcomm Incorporated | Multi-resolution feature description for object recognition |
KR102540920B1 (ko) * | 2018-05-04 | 2023-06-07 | 현대자동차주식회사 | 차량 단말 및 그의 얼굴 인증 방법 |
US10745018B2 (en) | 2018-09-19 | 2020-08-18 | Byton Limited | Hybrid user recognition systems for vehicle access and control |
CN109976513B (zh) * | 2019-02-20 | 2020-03-03 | 方科峰 | 一种***界面设计方法 |
US11407436B2 (en) | 2019-03-04 | 2022-08-09 | Byton North America Corporation | Steering wheel with fixed center |
US20210229673A1 (en) * | 2019-06-17 | 2021-07-29 | Google Llc | Seamless driver authentication using an in-vehicle camera in conjunction with a trusted mobile computing device |
WO2021003172A1 (en) * | 2019-06-30 | 2021-01-07 | Moment Ai, Inc. | Facial recognition and monitoring device, system, and method |
JP6906023B2 (ja) * | 2019-08-13 | 2021-07-21 | 本田技研工業株式会社 | 車両用認証装置 |
WO2021053365A1 (ja) * | 2019-09-16 | 2021-03-25 | 日産自動車株式会社 | 車両用情報処理装置及び方法 |
KR20210050812A (ko) * | 2019-10-29 | 2021-05-10 | 현대자동차주식회사 | 차량 및 차량의 제어방법 |
US11548433B2 (en) | 2019-12-06 | 2023-01-10 | Karma Automotive Llc | Automotive directional dark area pathway illumination |
HUP2000226A1 (hu) * | 2020-07-09 | 2022-01-28 | Peter Pal Veres | Gépjármûbe épített berendezés tudatmódosító szer hatása alatt álló vezetõk kiszûrésére, és a gépjármû lopásvédelmére |
JPWO2022024316A1 (zh) * | 2020-07-30 | 2022-02-03 | ||
CN112319220A (zh) * | 2020-11-17 | 2021-02-05 | 珠海格力电器股份有限公司 | 车辆控制方法、装置、车辆及存储介质 |
JP2022103716A (ja) * | 2020-12-28 | 2022-07-08 | 株式会社Subaru | 個人認識システム |
US20220223954A1 (en) * | 2021-01-11 | 2022-07-14 | Dus Operating Inc. | Modular battery housing for mounting battery modules to one of a plurality of electric vehicles |
CN112776814A (zh) * | 2021-01-21 | 2021-05-11 | 上海禾骋科技有限公司 | 一种基于人脸识别调用个性化汽车自动控制***的方法 |
US11220182B1 (en) * | 2021-04-30 | 2022-01-11 | Fisker Inc. | Rotating vehicle center information display with stationary buttons and touch bar |
US20220375293A1 (en) * | 2021-05-20 | 2022-11-24 | Rockwell Automation Technologies, Inc. | Electronic safety function lock-unlock system |
US11973753B2 (en) * | 2021-06-16 | 2024-04-30 | Meta Platforms, Inc. | Systems and methods for client-side identity verification |
US11590930B1 (en) | 2021-08-27 | 2023-02-28 | Toyota Motor North America, Inc. | Vehicle systems for verifying passenger protective equipment and methods for using the same |
DE102021005277A1 (de) * | 2021-10-22 | 2021-12-16 | Daimler Ag | Verfahren zum Authentifizieren des Nutzers eines Kraftfahrzeugs |
WO2023171829A1 (ko) * | 2022-03-08 | 2023-09-14 | 엘지전자 주식회사 | 차량용 디스플레이 디바이스 |
CN116176432B (zh) * | 2023-05-04 | 2023-09-12 | 长城汽车股份有限公司 | 车载设备控制方法、装置、车辆和存储介质 |
Family Cites Families (55)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090046538A1 (en) | 1995-06-07 | 2009-02-19 | Automotive Technologies International, Inc. | Apparatus and method for Determining Presence of Objects in a Vehicle |
DE19845299B4 (de) | 1998-10-01 | 2004-01-29 | Siemens Ag | Verfahren zum Inbetriebsetzen eines Kraftfahrzeugs sowie Vorrichtung zum Inbetriebsetzen eines Verbrennungsmotors |
DE10026596C1 (de) | 2000-05-30 | 2001-12-13 | Daimler Chrysler Ag | Multi-Use Digitalkamera |
US20020112177A1 (en) | 2001-02-12 | 2002-08-15 | Voltmer William H. | Anonymous biometric authentication |
US6498970B2 (en) * | 2001-04-17 | 2002-12-24 | Koninklijke Phillips Electronics N.V. | Automatic access to an automobile via biometrics |
EP1571278A1 (en) | 2002-12-13 | 2005-09-07 | Matsushita Electric Industrial Co., Ltd. | Onboard device control system, onboard device controller, and onboard device control method |
US20040174253A1 (en) | 2003-03-05 | 2004-09-09 | Power Digital Communication Co., Ltd. | Automatic warning system for cars |
JP3730967B2 (ja) * | 2003-03-20 | 2006-01-05 | 株式会社エヌ・ティ・ティ・ドコモ | 車両配車システム及び管理サーバ |
JP2005001642A (ja) | 2003-04-14 | 2005-01-06 | Fujitsu Ten Ltd | 盗難防止装置、監視装置、及び盗難防止システム |
JP4419758B2 (ja) | 2004-08-31 | 2010-02-24 | 株式会社デンソー | 自動車用ユーザもてなしシステム |
JP2007145200A (ja) | 2005-11-28 | 2007-06-14 | Fujitsu Ten Ltd | 車両用認証装置及び車両用認証方法 |
EP1984868A4 (en) * | 2006-02-13 | 2010-08-25 | All Protect Llc | METHOD AND SYSTEM FOR CONTROLLING A VEHICLE GIVEN TO A THIRD PARTY |
US8549318B2 (en) * | 2006-02-13 | 2013-10-01 | Affirmed Technologies, Llc | Method and system for preventing unauthorized use of a vehicle by an operator of the vehicle |
US20080106390A1 (en) * | 2006-04-05 | 2008-05-08 | White Steven C | Vehicle power inhibiter |
US8811692B2 (en) * | 2007-04-17 | 2014-08-19 | Francine J. Prokoski | System and method for using three dimensional infrared imaging for libraries of standardized medical imagery |
US9493149B2 (en) * | 2008-07-02 | 2016-11-15 | Michael Phelan | Driver authentication system and method for monitoring and controlling vehicle usage |
JP4636171B2 (ja) * | 2008-12-17 | 2011-02-23 | トヨタ自動車株式会社 | 車両用生体認証システム |
KR20110038563A (ko) * | 2009-10-08 | 2011-04-14 | 최운호 | 운전자 인증을 통한 차량 제어 방법, 차량 단말기, 생체인식 카드 및 시스템과, 생체인식 카드와 단말기를 이용한 탑승자 보호 추적 기능을 제공하는 방법 |
US8863256B1 (en) * | 2011-01-14 | 2014-10-14 | Cisco Technology, Inc. | System and method for enabling secure transactions using flexible identity management in a vehicular environment |
US9348492B1 (en) * | 2011-04-22 | 2016-05-24 | Angel A. Penilla | Methods and systems for providing access to specific vehicle controls, functions, environment and applications to guests/passengers via personal mobile devices |
DE102012106522A1 (de) | 2012-07-18 | 2014-01-23 | Huf Hülsbeck & Fürst Gmbh & Co. Kg | Verfahren zur Authentifizierung eines Fahrers in einem Kraftfahrzeug |
US9461992B2 (en) * | 2013-01-09 | 2016-10-04 | Chris Outwater | Smartphone based identification, access control, testing, and evaluation |
DE102013002687B4 (de) | 2013-02-15 | 2018-03-29 | Audi Ag | Personenkraftwagen mit Rückbankbeobachtung |
US20160174253A1 (en) | 2013-07-12 | 2016-06-16 | Mediatek Singapore Pte. Ltd. | Method of channel access control in wireless local area networks |
US8994498B2 (en) * | 2013-07-25 | 2015-03-31 | Bionym Inc. | Preauthorized wearable biometric device, system and method for use thereof |
KR102180226B1 (ko) | 2013-10-30 | 2020-11-18 | 삼성전자주식회사 | 복합 생체 정보를 이용한 보안을 제공하는 전자 장치 및 방법 |
US20150166009A1 (en) * | 2013-11-11 | 2015-06-18 | Chris Outwater | System and Method for Wirelessly Rostering a Vehicle |
DE102013114394A1 (de) | 2013-12-18 | 2015-06-18 | Huf Hülsbeck & Fürst Gmbh & Co. Kg | Verfahren zur Authentifizierung eines Fahrers in einem Kraftfahrzeug |
WO2015151862A1 (ja) * | 2014-04-01 | 2015-10-08 | みこらった株式会社 | 自動車及び自動車用プログラム |
JP6827918B2 (ja) * | 2014-06-11 | 2021-02-10 | ヴェリディウム アイピー リミテッド | 生体情報に基づいて、ユーザの車両へのアクセスを容易にするためのシステムと方法 |
US9760702B1 (en) | 2014-07-14 | 2017-09-12 | Jpmorgan Chase Bank, N.A. | Systems and methods for driver authentication through embedded sensing |
KR101586228B1 (ko) * | 2014-08-27 | 2016-01-18 | 주식회사 켐트로닉스 | 얼굴인식과 동작인식을 이용한 자동차 제어 장치 및 방법 |
US9740841B2 (en) | 2014-09-08 | 2017-08-22 | Tessera Advanced Technologies, Inc. | Using biometric user-specific attributes |
CN105701445A (zh) * | 2014-12-15 | 2016-06-22 | 爱信精机株式会社 | 判定装置及判定方法 |
US9613515B2 (en) | 2015-02-27 | 2017-04-04 | Ford Global Technologies, Llc | Method and apparatus for occupant customized wellness monitoring |
JP5813893B1 (ja) | 2015-03-16 | 2015-11-17 | 株式会社城南製作所 | 車両用窓ガラス昇降装置、車両用ドア、および車両 |
US20160300410A1 (en) | 2015-04-10 | 2016-10-13 | Jaguar Land Rover Limited | Door Access System for a Vehicle |
KR101895485B1 (ko) * | 2015-08-26 | 2018-09-05 | 엘지전자 주식회사 | 운전 보조 장치 및 그 제어 방법 |
US10179568B2 (en) | 2015-10-13 | 2019-01-15 | Faraday & Future Inc. | Seamless vehicle access system |
JP6154876B2 (ja) | 2015-10-29 | 2017-06-28 | 京セラ株式会社 | 電子機器及び制御方法 |
CN105459958B (zh) | 2015-12-22 | 2017-09-12 | 大丰云润科技有限公司 | 一种车载多模态生物特征身份验证设备 |
US20170274825A1 (en) | 2016-03-23 | 2017-09-28 | Ford Global Technologies, Llc | Vehicle communication system |
US20180012197A1 (en) | 2016-07-07 | 2018-01-11 | NextEv USA, Inc. | Battery exchange licensing program based on state of charge of battery pack |
CN107665295A (zh) | 2016-07-29 | 2018-02-06 | 长城汽车股份有限公司 | 车辆的身份认证方法、***及车辆 |
US11024160B2 (en) | 2016-11-07 | 2021-06-01 | Nio Usa, Inc. | Feedback performance control and tracking |
US10074223B2 (en) * | 2017-01-13 | 2018-09-11 | Nio Usa, Inc. | Secured vehicle for user use only |
EP3349135A1 (en) * | 2017-01-16 | 2018-07-18 | DURA Automotive Holdings U.K., Ltd. | Method for authorizing a driver to activate at least one system of a vehicle, based on a biometric authentication process |
JP6852584B2 (ja) | 2017-06-15 | 2021-03-31 | トヨタ自動車株式会社 | 車両後方視認装置 |
US20180365400A1 (en) * | 2017-06-19 | 2018-12-20 | Brennan T. Lopez-Hinojosa | Biometric authentication for connected vehicles including autonomous vehicles |
US20190032374A1 (en) | 2017-07-31 | 2019-01-31 | Ford Global Technologies, Llc | Handle for vehicle door and method of using the same |
US10479289B2 (en) | 2017-08-22 | 2019-11-19 | Trw Automotive U.S. Llc | Active surround view system with self-cleaning mechanism |
US20190073111A1 (en) * | 2017-09-05 | 2019-03-07 | Future Mobility Corporation Limited | Methods and systems using a rotatable three-dimensional object providing visual user information on a display |
US10676067B2 (en) * | 2018-01-05 | 2020-06-09 | Byton Limited | User capture device configuration for a vehicle |
KR20190136720A (ko) * | 2018-05-31 | 2019-12-10 | 현대자동차주식회사 | 텔레매틱스 디바이스 및 텔레매틱스 시스템의 보험 가입 및 보험료 산출 방법 |
US10745018B2 (en) * | 2018-09-19 | 2020-08-18 | Byton Limited | Hybrid user recognition systems for vehicle access and control |
-
2017
- 2017-09-05 US US15/695,800 patent/US11072311B2/en active Active
-
2018
- 2018-08-29 EP EP18766537.7A patent/EP3679702A1/en not_active Withdrawn
- 2018-08-29 CN CN201821405414.2U patent/CN209044516U/zh active Active
- 2018-08-29 JP JP2020513566A patent/JP2020536782A/ja active Pending
- 2018-08-29 CN CN201810998300.1A patent/CN109343698A/zh active Pending
- 2018-08-29 WO PCT/US2018/048645 patent/WO2019050746A1/en unknown
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113232665A (zh) * | 2020-01-22 | 2021-08-10 | 四川物软网联科技有限公司 | 一种车载智能装置及车辆 |
CN113450476A (zh) * | 2020-03-27 | 2021-09-28 | 本田技研工业株式会社 | 控制装置、设备、计算机可读存储介质以及控制方法 |
Also Published As
Publication number | Publication date |
---|---|
JP2020536782A (ja) | 2020-12-17 |
US11072311B2 (en) | 2021-07-27 |
CN109343698A (zh) | 2019-02-15 |
US20190071055A1 (en) | 2019-03-07 |
WO2019050746A1 (en) | 2019-03-14 |
EP3679702A1 (en) | 2020-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN209044516U (zh) | 用于汽车的用户识别装置 | |
US10745018B2 (en) | Hybrid user recognition systems for vehicle access and control | |
US11330012B2 (en) | System, method, and device of authenticating a user based on selfie image or selfie video | |
US20200324784A1 (en) | Method and apparatus for intelligent adjustment of driving environment, method and apparatus for driver registration, vehicle, and device | |
US10242364B2 (en) | Image analysis for user authentication | |
US11100204B2 (en) | Methods and devices for granting increasing operational access with increasing authentication factors | |
US9280652B1 (en) | Secure device unlock with gaze calibration | |
US9607138B1 (en) | User authentication and verification through video analysis | |
JP6337199B2 (ja) | 対話式移動体制御システムのための一体化ウェアラブル用品 | |
KR102443186B1 (ko) | 생체 인식 정보에 기반된 차량들에 대한 유저 액세스를 가능하게 하기 위한 시스템 및 방법 | |
CN104691449B (zh) | 车辆控制设备及其方法 | |
CN209441161U (zh) | 门总成和车辆 | |
CN105740688B (zh) | 解锁的方法和装置 | |
CN113752983B (zh) | 一种基于人脸识别/人眼识别的车辆解锁控制***和方法 | |
KR102504746B1 (ko) | 신뢰 모바일 컴퓨팅 디바이스와 함께 차량 내 카메라를 사용한 무결절 운전자 인증 | |
WO2022048118A1 (zh) | 车载机器人的控制方法及装置、车辆、电子设备和介质 | |
US20190209100A1 (en) | In-vehicle user health platform systems and methods | |
CN112384916A (zh) | 用于执行用户认证的方法和装置 | |
Barbosa | Automotive Facial Driver Recognition |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
GR01 | Patent grant | ||
GR01 | Patent grant | ||
PP01 | Preservation of patent right | ||
PP01 | Preservation of patent right |
Effective date of registration: 20201222 Granted publication date: 20190628 |
|
PD01 | Discharge of preservation of patent | ||
PD01 | Discharge of preservation of patent |
Date of cancellation: 20231222 Granted publication date: 20190628 |
|
PP01 | Preservation of patent right | ||
PP01 | Preservation of patent right |
Effective date of registration: 20231222 Granted publication date: 20190628 |