CN110335389A - 车门解锁方法及装置、***、车、电子设备和存储介质 - Google Patents

车门解锁方法及装置、***、车、电子设备和存储介质 Download PDF

Info

Publication number
CN110335389A
CN110335389A CN201910586845.6A CN201910586845A CN110335389A CN 110335389 A CN110335389 A CN 110335389A CN 201910586845 A CN201910586845 A CN 201910586845A CN 110335389 A CN110335389 A CN 110335389A
Authority
CN
China
Prior art keywords
image
depth
face
vehicle
recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201910586845.6A
Other languages
English (en)
Other versions
CN110335389B (zh
Inventor
李轲
林琪钧
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Original Assignee
Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Sensetime Lingang Intelligent Technology Co Ltd filed Critical Shanghai Sensetime Lingang Intelligent Technology Co Ltd
Priority to CN201910586845.6A priority Critical patent/CN110335389B/zh
Publication of CN110335389A publication Critical patent/CN110335389A/zh
Priority to PCT/CN2020/076713 priority patent/WO2021000587A1/zh
Priority to JP2021572948A priority patent/JP2022537923A/ja
Priority to KR1020217043021A priority patent/KR20220016184A/ko
Priority to KR1020227017334A priority patent/KR20220070581A/ko
Application granted granted Critical
Publication of CN110335389B publication Critical patent/CN110335389B/zh
Priority to JP2022059357A priority patent/JP2022118730A/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40—Spoof detection, e.g. liveness detection
    • G06V40/45—Detection of the body part being alive
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00309—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated with bidirectional data transmission between data carrier and locks
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00563—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys using personal physical data of the operator, e.g. finger prints, retinal images, voicepatterns
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C9/00896—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys specially adapted for particular uses
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/00174—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys
    • G07C2009/00753—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by active electrical keys
    • G07C2009/00769—Electronically operated locks; Circuits therefor; Nonmechanical keys therefor, e.g. passive or active electrical keys or other data carriers without mechanical keys operated by active electrical keys with data transmission performed by wireless means
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C2209/00—Indexing scheme relating to groups G07C9/00 - G07C9/38
    • G07C2209/60—Indexing scheme relating to groups G07C9/00174 - G07C9/00944
    • G07C2209/63—Comprising locating means for detecting the position of the data carrier, i.e. within the vehicle or within a certain distance from the vehicle
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D30/00—Reducing energy consumption in communication networks
    • Y02D30/70—Reducing energy consumption in communication networks in wireless communication networks

Landscapes

  • Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Lock And Its Accessories (AREA)
  • Image Analysis (AREA)
  • Collating Specific Patterns (AREA)

Abstract

本公开涉及一种车门解锁方法及装置、***、车、电子设备和存储介质。所述方法包括：经设置于车的蓝牙模块搜索预设标识的蓝牙设备；响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接；响应于所述蓝牙配对连接成功，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；基于所述第一图像进行人脸识别；响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。本公开实施例能够满足低功耗运行、快速开车门和提高用户体验的要求。

Description

车门解锁方法及装置、***、车、电子设备和存储介质
技术领域
本公开涉及车辆技术领域，尤其涉及一种车门解锁方法及装置、***、车、电子设备和存储介质。
背景技术
刷脸开车门是智能车辆的一项新技术。目前，为了能够及时检测到人脸，需要保持摄像头处于打开状态；为了能够及时判断靠近车辆的人是否为车主，需要对摄像头采集的图像进行实时处理，以便快速识别车主以快速打开车门。然而，这种方式的运行功耗较高，长时间高功耗运行可能导致车辆因电量不足而无法启动，导致影响用户正常使用车辆、影响用户体验。
如何降低刷脸开车门方式的功耗，是亟待解决的问题。
发明内容
本公开提出了一种车门解锁技术方案。
根据本公开的第一方面，提供了一种车门解锁方法，包括：
经设置于车的蓝牙模块搜索预设标识的蓝牙设备；
响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接；
响应于所述蓝牙配对连接成功，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；
基于所述第一图像进行人脸识别；
响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述经设置于车的蓝牙模块搜索预设标识的蓝牙设备，包括：
在所述车处于熄火状态或处于熄火且车门锁闭状态时，经设置于所述车的蓝牙模块搜索预设标识的蓝牙设备。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为一个。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为多个；
所述响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接，包括：
响应于搜索到任意一个预设标识的蓝牙设备，建立所述蓝牙模块与该预设标识的蓝牙设备的蓝牙配对连接。
在一种可能的实现方式中，所述唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，包括：
唤醒设置于所述车的人脸识别模组；
经唤醒的所述人脸识别模组控制所述图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，在所述唤醒设置于所述车的人脸识别模组之后，所述方法还包括：
若在预设时间内未采集到人脸图像，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令，包括：
响应于人脸识别成功，确定所述目标对象具有开门权限的车门；
根据所述目标对象具有开门权限的车门，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，在所述唤醒设置于所述车的人脸识别模组之后，所述方法还包括：
若在预设时间内未通过人脸识别，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述人脸识别包括：活体检测和人脸认证；
所述基于所述第一图像进行人脸识别，包括：
经所述图像采集模组中的图像传感器采集所述第一图像，并基于所述第一图像和预注册的人脸特征进行人脸认证；
经所述图像采集模组中的深度传感器采集所述第一图像对应的第一深度图，并基于所述第一图像和所述第一深度图进行活体检测。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图进行活体检测，包括：
基于所述第一图像，更新所述第一深度图，得到第二深度图；
基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述图像传感器包括RGB图像传感器或者红外传感器；
所述深度传感器包括双目红外传感器或者飞行时间TOF传感器。
在一种可能的实现方式中，所述TOF传感器采用基于红外波段的TOF模组。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：
基于所述第一图像，对所述第一深度图中的深度失效像素的深度值进行更新，得到所述第二深度图。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：
基于所述第一图像，确定所述第一图像中多个像素的深度预测值和关联信息，其中，所述多个像素的关联信息指示所述多个像素之间的关联度；
基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图。
在一种可能的实现方式中，所述基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图，包括：
确定所述第一深度图中的深度失效像素；
从所述多个像素的深度预测值中获取所述深度失效像素的深度预测值以及所述深度失效像素的多个周围像素的深度预测值；
从所述多个像素的关联信息中获取所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度；
基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的周围像素之间的关联度，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的更新后的深度值，包括：
基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值；
基于所述深度失效像素的深度预测值以及所述深度关联值，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值，包括：
将所述深度失效像素与每个周围像素之间的关联度作为所述每个周围像素的权重，对所述深度失效像素的多个周围像素的深度预测值进行加权求和处理，得到所述深度失效像素的深度关联值。
在一种可能的实现方式中，所述基于所述第一图像，确定所述第一图像中多个像素的深度预测值，包括：
基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值，包括：
将所述第一图像和所述第一深度图输入到深度预测神经网络进行处理，得到所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值，包括：
对所述第一图像和所述第一深度图进行融合处理，得到融合结果；
基于所述融合结果，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像，确定所述第一图像中多个像素的关联信息，包括：
将所述第一图像输入到关联度检测神经网络进行处理，得到所述第一图像中多个像素的关联信息。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，包括：
从所述第一图像中获取所述目标对象的图像；
基于所述目标对象的图像，更新所述第一深度图。
在一种可能的实现方式中，所述从所述第一图像中获取所述目标对象的图像，包括：
获取所述第一图像中所述目标对象的关键点信息；
基于所述目标对象的关键点信息，从所述第一图像中获取所述目标对象的图像。
在一种可能的实现方式中，所述获取所述第一图像中所述目标对象的关键点信息，包括：
对所述第一图像进行目标检测，得到所述目标对象所在区域；
对所述目标对象所在区域的图像进行关键点检测，得到所述第一图像中所述目标对象的关键点信息。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：
从所述第一深度图中获取所述目标对象的深度图；
基于所述第一图像，更新所述目标对象的深度图，得到所述第二深度图。
在一种可能的实现方式中，所述基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果，包括：
将所述第一图像和所述第二深度图输入到活体检测神经网络进行处理，得到所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果，包括：
对所述第一图像进行特征提取处理，得到第一特征信息；
对所述第二深度图进行特征提取处理，得到第二特征信息；
基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果，包括：
对所述第一特征信息和所述第二特征信息进行融合处理，得到第三特征信息；
基于所述第三特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第三特征信息，确定所述目标对象的活体检测结果，包括：
基于所述第三特征信息，得到所述目标对象为活体的概率；
根据所述目标对象为活体的概率，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，在所述基于所述第一图像进行人脸识别之后，所述方法还包括：
响应于人脸识别失败，激活设置于所述车的密码解锁模块以启动密码解锁流程。
在一种可能的实现方式中，所述方法还包括以下一项或两项：
根据所述图像采集模组采集的车主的人脸图像进行车主注册；
根据所述车主的终端设备采集的所述车主的人脸图像进行远程注册，并将注册信息发送到所述车上，其中，所述注册信息包括所述车主的人脸图像。
根据本公开的第二方面，提供了一种车门解锁方法，包括：
经设置于车的蓝牙模块搜索预设标识的蓝牙设备；
响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；
基于所述第一图像进行人脸识别；
响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述经设置于车的蓝牙模块搜索预设标识的蓝牙设备，包括：
在所述车处于熄火状态或处于熄火且车门锁闭状态时，经设置于所述车的蓝牙模块搜索预设标识的蓝牙设备。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为一个。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为多个；
所述响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，包括：
响应于搜索到任意一个预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，包括：
唤醒设置于所述车的人脸识别模组；
经唤醒的所述人脸识别模组控制所述图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，在所述唤醒设置于所述车的人脸识别模组之后，所述方法还包括：
若在预设时间内未采集到人脸图像，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，在所述唤醒设置于所述车的人脸识别模组之后，所述方法还包括：
若在预设时间内未通过人脸识别，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令，包括：
响应于人脸识别成功，确定所述目标对象具有开门权限的车门；
根据所述目标对象具有开门权限的车门，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述人脸识别包括：活体检测和人脸认证；
所述基于所述第一图像进行人脸识别，包括：
经所述图像采集模组中的图像传感器采集所述第一图像，并基于所述第一图像和预注册的人脸特征进行人脸认证；
经所述图像采集模组中的深度传感器采集所述第一图像对应的第一深度图，并基于所述第一图像和所述第一深度图进行活体检测。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图进行活体检测，包括：
基于所述第一图像，更新所述第一深度图，得到第二深度图；
基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述图像传感器包括RGB图像传感器或者红外传感器；
所述深度传感器包括双目红外传感器或者飞行时间TOF传感器。
在一种可能的实现方式中，所述TOF传感器采用基于红外波段的TOF模组。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：
基于所述第一图像，对所述第一深度图中的深度失效像素的深度值进行更新，得到所述第二深度图。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：
基于所述第一图像，确定所述第一图像中多个像素的深度预测值和关联信息，其中，所述多个像素的关联信息指示所述多个像素之间的关联度；
基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图。
在一种可能的实现方式中，所述基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图，包括：
确定所述第一深度图中的深度失效像素；
从所述多个像素的深度预测值中获取所述深度失效像素的深度预测值以及所述深度失效像素的多个周围像素的深度预测值；
从所述多个像素的关联信息中获取所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度；
基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的周围像素之间的关联度，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的更新后的深度值，包括：
基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值；
基于所述深度失效像素的深度预测值以及所述深度关联值，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值，包括：
将所述深度失效像素与每个周围像素之间的关联度作为所述每个周围像素的权重，对所述深度失效像素的多个周围像素的深度预测值进行加权求和处理，得到所述深度失效像素的深度关联值。
在一种可能的实现方式中，所述基于所述第一图像，确定所述第一图像中多个像素的深度预测值，包括：
基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值，包括：
将所述第一图像和所述第一深度图输入到深度预测神经网络进行处理，得到所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值，包括：
对所述第一图像和所述第一深度图进行融合处理，得到融合结果；
基于所述融合结果，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像，确定所述第一图像中多个像素的关联信息，包括：
将所述第一图像输入到关联度检测神经网络进行处理，得到所述第一图像中多个像素的关联信息。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，包括：
从所述第一图像中获取所述目标对象的图像；
基于所述目标对象的图像，更新所述第一深度图。
在一种可能的实现方式中，所述从所述第一图像中获取所述目标对象的图像，包括：
获取所述第一图像中所述目标对象的关键点信息；
基于所述目标对象的关键点信息，从所述第一图像中获取所述目标对象的图像。
在一种可能的实现方式中，所述获取所述第一图像中所述目标对象的关键点信息，包括：
对所述第一图像进行目标检测，得到所述目标对象所在区域；
对所述目标对象所在区域的图像进行关键点检测，得到所述第一图像中所述目标对象的关键点信息。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：
从所述第一深度图中获取所述目标对象的深度图；
基于所述第一图像，更新所述目标对象的深度图，得到所述第二深度图。
在一种可能的实现方式中，所述基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果，包括：
将所述第一图像和所述第二深度图输入到活体检测神经网络进行处理，得到所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果，包括：
对所述第一图像进行特征提取处理，得到第一特征信息；
对所述第二深度图进行特征提取处理，得到第二特征信息；
基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果，包括：
对所述第一特征信息和所述第二特征信息进行融合处理，得到第三特征信息；
基于所述第三特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第三特征信息，确定所述目标对象的活体检测结果，包括：
基于所述第三特征信息，得到所述目标对象为活体的概率；
根据所述目标对象为活体的概率，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，在所述基于所述第一图像进行人脸识别之后，所述方法还包括：
响应于人脸识别失败，激活设置于所述车的密码解锁模块以启动密码解锁流程。
在一种可能的实现方式中，所述方法还包括以下一项或两项：
根据所述图像采集模组采集的车主的人脸图像进行车主注册；
根据所述车主的终端设备采集的所述车主的人脸图像进行远程注册，并将注册信息发送到所述车上，其中，所述注册信息包括所述车主的人脸图像。
根据公开的第三方面，提供了一种车门解锁装置，包括：
搜索模块，用于经设置于车的蓝牙模块搜索预设标识的蓝牙设备；
唤醒模块，用于响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接，并响应于所述蓝牙配对连接成功，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，或者，响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；
人脸识别模块，用于基于所述第一图像进行人脸识别；
解锁模块，用于响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述搜索模块用于：
在所述车处于熄火状态或处于熄火且车门锁闭状态时，经设置于所述车的蓝牙模块搜索预设标识的蓝牙设备。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为一个。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为多个；
所述唤醒模块用于：
响应于搜索到任意一个预设标识的蓝牙设备，建立所述蓝牙模块与该预设标识的蓝牙设备的蓝牙配对连接，或者，响应于搜索到任意一个预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述唤醒模块包括：
唤醒子模块，用于唤醒设置于所述车的人脸识别模组；
控制子模块，用于经唤醒的所述人脸识别模组控制所述图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述装置还包括：
第一控制模块，用于若在预设时间内未采集到人脸图像，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述装置还包括：
第二控制模块，用于若在预设时间内未通过人脸识别，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述解锁模块用于：
响应于人脸识别成功，确定所述目标对象具有开门权限的车门；
根据所述目标对象具有开门权限的车门，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述人脸识别包括：活体检测和人脸认证；
所述人脸识别模块包括：
人脸认证模块，用于经所述图像采集模组中的图像传感器采集所述第一图像，并基于所述第一图像和预注册的人脸特征进行人脸认证；
活体检测模块，用于经所述图像采集模组中的深度传感器采集所述第一图像对应的第一深度图，并基于所述第一图像和所述第一深度图进行活体检测。
在一种可能的实现方式中，所述活体检测模块包括：
更新子模块，用于基于所述第一图像，更新所述第一深度图，得到第二深度图；
确定子模块，用于基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述图像传感器包括RGB图像传感器或者红外传感器；
所述深度传感器包括双目红外传感器或者飞行时间TOF传感器。
在一种可能的实现方式中，所述TOF传感器采用基于红外波段的TOF模组。
在一种可能的实现方式中，所述更新子模块用于：
基于所述第一图像，对所述第一深度图中的深度失效像素的深度值进行更新，得到所述第二深度图。
在一种可能的实现方式中，所述更新子模块用于：
基于所述第一图像，确定所述第一图像中多个像素的深度预测值和关联信息，其中，所述多个像素的关联信息指示所述多个像素之间的关联度；
基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图。
在一种可能的实现方式中，所述更新子模块用于：
确定所述第一深度图中的深度失效像素；
从所述多个像素的深度预测值中获取所述深度失效像素的深度预测值以及所述深度失效像素的多个周围像素的深度预测值；
从所述多个像素的关联信息中获取所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度；
基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的周围像素之间的关联度，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述更新子模块用于：
基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值；
基于所述深度失效像素的深度预测值以及所述深度关联值，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述更新子模块用于：
将所述深度失效像素与每个周围像素之间的关联度作为所述每个周围像素的权重，对所述深度失效像素的多个周围像素的深度预测值进行加权求和处理，得到所述深度失效像素的深度关联值。
在一种可能的实现方式中，所述更新子模块用于：
基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述更新子模块用于：
将所述第一图像和所述第一深度图输入到深度预测神经网络进行处理，得到所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述更新子模块用于：
对所述第一图像和所述第一深度图进行融合处理，得到融合结果；
基于所述融合结果，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述更新子模块用于：
将所述第一图像输入到关联度检测神经网络进行处理，得到所述第一图像中多个像素的关联信息。
在一种可能的实现方式中，所述更新子模块用于：
从所述第一图像中获取所述目标对象的图像；
基于所述目标对象的图像，更新所述第一深度图。
在一种可能的实现方式中，所述更新子模块用于：
获取所述第一图像中所述目标对象的关键点信息；
基于所述目标对象的关键点信息，从所述第一图像中获取所述目标对象的图像。
在一种可能的实现方式中，所述更新子模块用于：
对所述第一图像进行目标检测，得到所述目标对象所在区域；
对所述目标对象所在区域的图像进行关键点检测，得到所述第一图像中所述目标对象的关键点信息。
在一种可能的实现方式中，所述更新子模块用于：
从所述第一深度图中获取所述目标对象的深度图；
基于所述第一图像，更新所述目标对象的深度图，得到所述第二深度图。
在一种可能的实现方式中，所述确定子模块用于：
将所述第一图像和所述第二深度图输入到活体检测神经网络进行处理，得到所述目标对象的活体检测结果。
在一种可能的实现方式中，所述确定子模块用于：
对所述第一图像进行特征提取处理，得到第一特征信息；
对所述第二深度图进行特征提取处理，得到第二特征信息；
基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述确定子模块用于：
对所述第一特征信息和所述第二特征信息进行融合处理，得到第三特征信息；
基于所述第三特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述确定子模块用于：
基于所述第三特征信息，得到所述目标对象为活体的概率；
根据所述目标对象为活体的概率，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述装置还包括：
激活与启动模块，用于响应于人脸识别失败，激活设置于所述车的密码解锁模块以启动密码解锁流程。
在一种可能的实现方式中，所述装置还包括注册模块，所述注册模块用于以下一项或两项：
根据所述图像采集模组采集的车主的人脸图像进行车主注册；
根据所述车主的终端设备采集的所述车主的人脸图像进行远程注册，并将注册信息发送到所述车上，其中，所述注册信息包括所述车主的人脸图像。
根据本公开的第四方面，提供了一种车载人脸解锁***，包括：存储器、人脸识别模组、图像采集模组和蓝牙模块；所述人脸识别模组分别与所述存储器、所述图像采集模组和所述蓝牙模块连接；所述蓝牙模块包括在与预设标识的蓝牙设备蓝牙配对连接成功或者搜索到所述预设标识的蓝牙设备时唤醒所述人脸识别模组的微处理器和与所述微处理器连接的蓝牙传感器；所述人脸识别模组还设置有用于与车门域控制器连接的通信接口，若人脸识别成功则基于所述通信接口向所述车门域控制器发送用于解锁车门的控制信息。
在一种可能的实现方式中，所述图像采集模组包括图像传感器和深度传感器。
在一种可能的实现方式中，所述深度传感器包括双目红外传感器，所述双目红外传感器的两个红外摄像头设置在所述图像传感器的摄像头的两侧。
在一种可能的实现方式中，所述图像采集模组还包括至少一个补光灯，所述至少一个补光灯设置在所述双目红外传感器的红外摄像头和所述图像传感器的摄像头之间，所述至少一个补光灯包括用于所述图像传感器的补光灯和用于所述深度传感器的补光灯中的至少一种。
在一种可能的实现方式中，所述图像采集模组还包括激光器，所述激光器设置在所述深度传感器的摄像头和所述图像传感器的摄像头之间。
在一种可能的实现方式中，所述车载人脸解锁***还包括：用于解锁车门的密码解锁模块，所述密码解锁模块与所述人脸识别模组连接。
在一种可能的实现方式中，所述密码解锁模块包括触控屏和键盘中的一项或两项。
在一种可能的实现方式中，所述车载人脸解锁***还包括：电池模组，所述电池模组分别与所述微处理器和所述人脸识别模组连接。
根据本公开的第五方面，提供了一种车，所述车包括权利要求91至98中任意一项所述的车载人脸解锁***，所述车载人脸解锁***与所述车的车门域控制器连接。
在一种可能的实现方式中，所述图像采集模组设置在所述车的室外部。
在一种可能的实现方式中，所述图像采集模组设置在以下至少一个位置上：所述车的B柱、至少一个车门、至少一个后视镜。
在一种可能的实现方式中，所述人脸识别模组设置在所述车内，所述人脸识别模组经CAN总线与所述车门域控制器连接。
根据本公开的第六方面，提供了一种电子设备，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：执行上述第一方面的方法。
根据本公开的第七方面，提供了一种电子设备，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：执行上述第二方面的方法。
根据本公开的第八方面，提供了一种计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现上述第一方面的方法。
根据本公开的第九方面，提供了一种计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现上述第二方面的方法。
在本公开实施例中，通过响应于搜索到预设标识的蓝牙设备，建立蓝牙模块与预设标识的蓝牙设备的蓝牙配对连接，并响应于蓝牙配对连接成功，唤醒人脸识别模组并控制图像采集模组采集目标对象的第一图像，由此基于蓝牙配对连接成功再唤醒人脸识别模组的方式，能够有效减少误唤醒人脸识别模组的概率，甚至能够避免误唤醒人脸识别模组，从而能够提高用户体验，有效降低人脸识别模组的功耗。此外，相对于超声波、红外等短距离传感器技术，基于蓝牙的配对连接方式具有安全性高和支持较大的距离的优点。实践表明，携带预设标识的蓝牙设备的用户通过这段距离(蓝牙配对连接成功时用户与车之间的距离)到达车的时间，与车唤醒人脸识别模组由休眠状态转换为工作状态的时间大致匹配，由此在用户到达车门时，能够立即通过唤醒的人脸识别模组进行人脸识别开车门，而无需在用户到达车门后让用户等待人脸识别模组被唤醒，进而能够提高人脸识别效率，改善用户体验。另外，在蓝牙配对连接的过程中，用户无感知，从而能够进一步提高用户体验。因此，本公开实施例通过基于蓝牙配对连接成功唤醒人脸识别模组的方式提供了一种能够较好地权衡人脸识别模组功耗节省、用户体验和安全性等各方面的解决方案。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本公开。
根据下面参考附图对示例性实施例的详细说明，本公开的其它特征及方面将变得清楚。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，这些附图示出了符合本公开的实施例，并与说明书一起用于说明本公开的技术方案。
图1示出根据本公开实施例的车门解锁方法的流程图。
图2示出车的B柱的示意图。
图3示出根据本公开实施例的车门解锁方法中车门解锁装置的安装高度与可识别的身高范围的示意图。
图4a示出根据本公开实施例的车门解锁方法中图像传感器和深度传感器的示意图。
图4b示出根据本公开实施例的车门解锁方法中图像传感器和深度传感器的另一示意图。
图5示出根据本公开实施例的活体检测方法的一个示例的示意图。
图6示出根据本公开实施例的活体检测方法中基于第一图像和第二深度图，确定第一图像中的目标对象的活体检测结果的一个示例的示意图。
图7示出根据本公开实施例的车门解锁方法中的深度预测神经网络的示意图。
图8示出根据本公开实施例的车门解锁方法中的关联度检测神经网络的示意图。
图9示出根据本公开实施例的车门解锁方法中深度图更新的一示例性的示意图。
图10示出根据本公开实施例的车门解锁方法中周围像素的示意图。
图11示出根据本公开实施例的车门解锁方法中周围像素的另一示意图。
图12示出根据本公开实施例的车门解锁方法的另一流程图。
图13示出根据本公开实施例的车门解锁装置的框图。
图14示出根据本公开实施例的车载人脸解锁***的框图。
图15示出根据本公开实施例的车载人脸解锁***的示意图。
图16示出根据本公开实施例的车的示意图。
图17是根据一示例性实施例示出的一种电子设备800的框图。
具体实施方式
以下将参考附图详细说明本公开的各种示例性实施例、特征和方面。附图中相同的附图标记表示功能相同或相似的元件。尽管在附图中示出了实施例的各种方面，但是除非特别指出，不必按比例绘制附图。
在这里专用的词“示例性”意为“用作例子、实施例或说明性”。这里作为“示例性”所说明的任何实施例不必解释为优于或好于其它实施例。
本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中术语“至少一种”表示多种中的任意一种或多种中的至少两种的任意组合，例如，包括A、B、C中的至少一种，可以表示包括从A、B和C构成的集合中选择的任意一个或多个元素。
另外，为了更好地说明本公开，在下文的具体实施方式中给出了众多的具体细节。本领域技术人员应当理解，没有某些具体细节，本公开同样可以实施。在一些实例中，对于本领域技术人员熟知的方法、手段、元件和电路未作详细描述，以便于凸显本公开的主旨。
图1示出根据本公开实施例的车门解锁方法的流程图。该车门解锁方法的执行主体可以是车门解锁装置。例如，该车门解锁装置可以安装在以下至少一个位置上：在车的B柱、至少一个车门、至少一个后视镜。图2示出车的B柱的示意图。例如，车门解锁装置可以安装在B柱上离地130cm至160cm处，车门解锁装置的水平识别距离可以为30cm至100cm，在此不作限定。图3示出根据本公开实施例的车门解锁方法中车门解锁装置的安装高度与可识别的身高范围的示意图。在图3所示的示例中，车门解锁装置的安装高度为160cm，可识别的身高范围为140cm至190cm。
在一种可能的实现方式中，该车门解锁方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。
如图1所示，该车门解锁方法包括步骤S11至步骤S15。
在步骤S11中，经设置于车的蓝牙模块搜索预设标识的蓝牙设备。
在一种可能的实现方式中，经设置于车的蓝牙模块搜索预设标识的蓝牙设备，包括：在车处于熄火状态或处于熄火且车门锁闭状态时，经设置于车的蓝牙模块搜索预设标识的蓝牙设备。在该实现方式中，在车熄火前无需通过蓝牙模块搜索预设标识的蓝牙设备，或者，在车熄火前以及在车处于熄火状态但车门不处于锁闭状态时无需通过蓝牙模块搜索预设标识的蓝牙设备，由此能够进一步降低功耗。
在一种可能的实现方式中，蓝牙模块可以为低功耗蓝牙(BLE，Bluetooth LowEnergy)模块。在该实现方式中，在车处于熄火状态或处于熄火且车门锁闭状态时，蓝牙模块可以处于广播模式，每隔一定的时间(例如100毫秒)向周围广播一个广播数据包。周围的蓝牙设备在执行扫描动作时，若接收到蓝牙模块广播出来的广播数据包，则向该蓝牙模块发送扫描请求，该蓝牙模块可以响应于扫描请求，向发送该扫描请求的蓝牙设备返回扫描响应数据包。在该实现方式中，若接收到预设标识的蓝牙设备发来的扫描请求，则确定搜索到该预设标识的蓝牙设备。
在另一种可能的实现方式中，在车处于熄火状态或处于熄火且车门锁闭状态时，蓝牙模块可以处于扫描状态，若扫描到预设标识的蓝牙设备，则确定搜索到预设标识的蓝牙设备。
在一种可能的实现方式中，蓝牙模块与人脸识别模组可以集成在人脸识别***中。
在另一种可能的实现方式中，蓝牙模块可以独立于人脸识别***。即，蓝牙模块可以设置在人脸识别***的外部。
本公开实施例不对蓝牙模块的最大搜索距离进行限定，在一个示例中，最大搜索距离可以为30m左右。
在本公开实施例中，蓝牙设备的标识可以指蓝牙设备的唯一标识符。例如，蓝牙设备的标识可以为蓝牙设备的ID、名称或者地址等。
在本公开实施例中，预设标识可以是基于蓝牙安全连接技术预先和车的蓝牙模块配对成功的设备的标识。
在本公开实施例中，预设标识的蓝牙设备的数量可以为一个或多个。例如，若蓝牙设备的标识为蓝牙设备的ID，则可以预设一个或多个有权限开车门的蓝牙ID。例如，在预设标识的蓝牙设备的数量为一个的情况下，该预设标识的蓝牙设备可以为车主的蓝牙设备；在预设标识的蓝牙设备的数量为多个的情况下，该多个预设标识的蓝牙设备可以包括车主的蓝牙设备以及车主的家人、朋友、预先注册的联系人的蓝牙设备。其中，预先注册的联系人可以为预先注册的快递员或者物业工作人员等。
在本公开实施例中，蓝牙设备可以是任何具有蓝牙功能的移动设备，例如，蓝牙设备可以是手机、可穿戴设备或者电子钥匙等。其中，可穿戴设备可以为智能手环或者智能眼镜等。
在步骤S12中，响应于搜索到预设标识的蓝牙设备，建立蓝牙模块与预设标识的蓝牙设备的蓝牙配对连接。
在一种可能的实现方式中，若预设标识的蓝牙设备的数量为多个，则响应于搜索到任意一个预设标识的蓝牙设备，建立蓝牙模块与该预设标识的蓝牙设备的蓝牙配对连接。
在一种可能的实现方式中，响应于搜索到预设标识的蓝牙设备，蓝牙模块对该预设标识的蓝牙设备进行身份认证，在身份认证通过后，再建立蓝牙模块与预设标识的蓝牙设备的蓝牙配对连接，由此能够提高蓝牙配对连接的安全性。
在步骤S13中，响应于蓝牙配对连接成功，唤醒并控制设置于车的图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，唤醒并控制设置于车的图像采集模组采集目标对象的第一图像，包括：唤醒设置于车的人脸识别模组；经唤醒的人脸识别模组控制图像采集模组采集目标对象的第一图像。
在本公开实施例中，若搜索到预设标识的蓝牙设备，则可以在很大程度上表明携带预设标识的蓝牙设备的用户(例如车主)进入蓝牙模块的搜索范围内。此时，通过响应于搜索到预设标识的蓝牙设备，建立蓝牙模块与预设标识的蓝牙设备的蓝牙配对连接，并响应于蓝牙配对连接成功，唤醒人脸识别模组并控制图像采集模组采集目标对象的第一图像，由此基于蓝牙配对连接成功再唤醒人脸识别模组的方式，能够有效减少误唤醒人脸识别模组的概率，甚至能够避免误唤醒人脸识别模组，从而能够提高用户体验，有效降低人脸识别模组的功耗。此外，相对于超声波、红外等短距离传感器技术，基于蓝牙的配对连接方式具有安全性高和支持较大的距离的优点。实践表明，携带预设标识的蓝牙设备的用户通过这段距离(蓝牙配对连接成功时用户与车之间的距离)到达车的时间，与车唤醒人脸识别模组由休眠状态转换为工作状态的时间大致匹配，由此在用户到达车门时，能够立即通过唤醒的人脸识别模组进行人脸识别开车门，而无需在用户到达车门后让用户等待人脸识别模组被唤醒，进而能够提高人脸识别效率，改善用户体验。另外，在蓝牙配对连接的过程中，用户无感知，从而能够进一步提高用户体验。因此，本公开实施例通过基于蓝牙配对连接成功唤醒人脸识别模组的方式提供了一种能够较好地权衡人脸识别模组功耗节省、用户体验和安全性等各方面的解决方案。
在一种可能的实现方式中，在唤醒设置于车的人脸识别模组之后，该方法还包括：若在预设时间内未采集到人脸图像，则控制人脸识别模组进入休眠状态。该实现方式通过在唤醒人脸识别模组后预设时间内未采集到人脸图像时，控制人脸识别模组进入休眠状态，由此能够降低功耗。
在一种可能的实现方式中，在唤醒设置于车的人脸识别模组之后，该方法还包括：若在预设时间内未通过人脸识别，则控制人脸识别模组进入休眠状态。该实现方式通过在唤醒人脸识别模组后预设时间内未通过人脸识别时，控制人脸识别模组进入休眠状态，由此能够降低功耗。
在步骤S14中，基于第一图像进行人脸识别。
在一种可能的实现方式中，人脸识别包括：活体检测和人脸认证；基于第一图像进行人脸识别，包括：经图像采集模组中的图像传感器采集第一图像，并基于第一图像和预注册的人脸特征进行人脸认证；经图像采集模组中的深度传感器采集第一图像对应的第一深度图，并基于第一图像和第一深度图进行活体检测。
在本公开实施例中，第一图像包含目标对象。其中，目标对象可以为人脸或者人体的至少一部分，本公开实施例对此不做限定。
其中，第一图像可以为静态图像或者为视频帧图像。例如，第一图像可以为从视频序列中选取的图像，其中，可以通过多种方式从视频序列中选取图像。在一个具体例子中，第一图像为从视频序列中选取的满足预设质量条件的图像，该预设质量条件可以包括下列中的一种或任意组合：是否包含目标对象、目标对象是否位于图像的中心区域、目标对象是否完整地包含在图像中、目标对象在图像中所占比例、目标对象的状态(例如人脸角度)、图像清晰度、图像曝光度，等等，本公开实施例对此不做限定。
在一个示例中，可以先进行活体检测再进行人脸认证。例如，若目标对象的活体检测结果为目标对象为活体，则触发人脸认证流程；若目标对象的活体检测结果为目标对象为假体，则不触发人脸认证流程。
在另一个示例中，可以先进行人脸认证再进行活体检测。例如，若人脸认证通过，则触发活体检测流程；若人脸认证不通过，则不触发活体检测流程。
在另一个示例中，可以同时进行活体检测和人脸认证。
在该实现方式中，活体检测用于验证目标对象是否是活体，例如可以用于验证目标对象是否是人体。人脸认证用于提取采集的图像中的人脸特征，将采集的图像中的人脸特征与预注册的人脸特征进行比对，判断是否属于同一个人的人脸特征，例如可以判断采集的图像中的人脸特征是否属于车主的人脸特征。
在本公开实施例中，深度传感器表示用于采集深度信息的传感器。本公开实施例不对深度传感器的工作原理和工作波段进行限定。
在本公开实施例中，图像采集模组的图像传感器和深度传感器可以分开设置，也可以一起设置。例如，图像采集模组的图像传感器和深度传感器分开设置可以为，图像传感器采用RGB(Red，红；Green，绿；Blue，蓝)传感器或红外传感器，深度传感器采用双目红外传感器或者TOF(Time of Flight，飞行时间)传感器；图像采集模组的图像传感器和深度传感器一起设置可以为，图像采集模组采用RGBD(Red，红；Green，绿；Blue，蓝；Deep，深度)传感器实现图像传感器和深度传感器的功能。
作为一个示例，图像传感器为RGB传感器。若图像传感器为RGB传感器，则图像传感器采集到的图像为RGB图像。
作为另一个示例，图像传感器为红外传感器。若图像传感器为红外传感器，则图像传感器采集到的图像为红外图像。其中，红外图像可以为带光斑的红外图像，也可以为不带光斑的红外图像。
在其他示例中，图像传感器可以为其他类型的传感器，本公开实施例对此不做限定。
可选地，车门解锁装置可以通过多种方式获取第一图像。例如，在一些实施例中，车门解锁装置上设置有摄像头，车门解锁装置通过摄像头进行静态图像或视频流采集，得到第一图像，本公开实施例对此不做限定。
作为一个示例，深度传感器为三维传感器。例如，深度传感器为双目红外传感器、飞行时间TOF传感器或者结构光传感器，其中，双目红外传感器包括两个红外摄像头。结构光传感器可以为编码结构光传感器或者散斑结构光传感器。通过深度传感器获取目标对象的深度图，可以获得高精度的深度图。本公开实施例利用包含目标对象的深度图进行活体检测，能够充分挖掘目标对象的深度信息，从而能够提高活体检测的准确性。例如，当目标对象为人脸时，本公开实施例利用包含人脸的深度图进行活体检测，能够充分挖掘人脸数据的深度信息，从而能够提高活体人脸检测的准确性。
在一个示例中，TOF传感器采用基于红外波段的TOF模组。在该示例中，通过采用基于红外波段的TOF模组，能够降低外界光线对深度图拍摄造成的影响。
在本公开实施例中，第一深度图和第一图像相对应。例如，第一深度图和第一图像分别为深度传感器和图像传感器针对同一场景采集到的，或者，第一深度图和第一图像为深度传感器和图像传感器在同一时刻针对同一目标区域采集到的，但本公开实施例对此不做限定。
图4a示出根据本公开实施例的车门解锁方法中图像传感器和深度传感器的示意图。在图4a所示的示例中，图像传感器为RGB传感器，图像传感器的摄像头为RGB摄像头，深度传感器为双目红外传感器，深度传感器包括两个红外(IR)摄像头，双目红外传感器的两个红外摄像头设置在图像传感器的RGB摄像头的两侧。其中，两个红外摄像头基于双目视差原理采集深度信息。
在一个示例中，图像采集模组还包括至少一个补光灯，该至少一个补光灯设置在双目红外传感器的红外摄像头和图像传感器的摄像头之间，该至少一个补光灯包括用于图像传感器的补光灯和用于深度传感器的补光灯中的至少一种。例如，若图像传感器为RGB传感器，则用于图像传感器的补光灯可以为白光灯；若图像传感器为红外传感器，则用于图像传感器的补光灯可以为红外灯；若深度传感器为双目红外传感器，则用于深度传感器的补光灯可以为红外灯。在图4a所示的示例中，在双目红外传感器的红外摄像头和图像传感器的摄像头之间设置红外灯。例如，红外灯可以采用940nm的红外线。
在一个示例中，补光灯可以处于常开模式。在该示例中，在图像采集模组的摄像头处于工作状态时，补光灯处于开启状态。
在另一个示例中，可以在光线不足时开启补光灯。例如，可以通过环境光传感器获取环境光强度，并在环境光强度低于光强阈值时判定光线不足，并开启补光灯。
图4b示出根据本公开实施例的车门解锁方法中图像传感器和深度传感器的另一示意图。在图4b所示的示例中，图像传感器为RGB传感器，图像传感器的摄像头为RGB摄像头，深度传感器为TOF传感器。
在一个示例中，图像采集模组还包括激光器，激光器设置在深度传感器的摄像头和图像传感器的摄像头之间。例如，激光器设置在TOF传感器的摄像头和RGB传感器的摄像头之间。例如，激光器可以为VCSEL(Vertical Cavity Surface Emitting Laser，垂直腔面发射激光器)，TOF传感器可以基于VCSEL发出的激光采集深度图。
在本公开实施例中，深度传感器用于采集深度图，图像传感器用于采集二维图像。需要说明的是，尽管以RGB传感器和红外传感器为例对图像传感器进行了说明，并以双目红外传感器、TOF传感器和结构光传感器为例对深度传感器进行了说明，但本领域技术人员能够理解，本公开实施例应不限于此。本领域技术人员可以根据实际应用需求选择图像传感器和深度传感器的类型，只要分别能够实现对二维图像和深度图的采集即可。
在步骤S15中，响应于人脸识别成功，向车的至少一车门锁发送车门解锁指令。
本公开实施例中的车门可以包括人进出的车门(例如左前门、右前门、左后门、右后门)，也可以包括车的后备箱门等。
在一种可能的实现方式中，响应于人脸识别成功，向车的至少一车门锁发送车门解锁指令，包括：响应于人脸识别成功，确定目标对象具有开门权限的车门；根据目标对象具有开门权限的车门，向车的至少一车门锁发送车门解锁指令。例如，目标对象具有开门权限的车门可以是所有车门，或者可以是后备箱门。
作为一个示例，若目标对象为快递员，则目标对象具有开门权限的车门可以为后备箱门。若目标对象具有开门权限的车门为后备箱门，则可以向后备箱门锁发送车门解锁指令。
在一个示例中，若目标对象具有开门权限的车门仅包括后备箱门，则可以向后备箱门锁发送车门解锁指令的预设时长后，向后备箱门锁发送车门关闭指令，例如，预设时长可以为3分钟。例如，快递员具有开门权限的车门仅包括后备箱门，则可以向后备箱门锁发送车门解锁指令的3分钟后，向后备箱门锁发送车门关闭指令，由此既能满足快递员往后备箱中放置快递的需求，又能够提高车的安全性。
在一个示例中，车门解锁装置的SoC可以向车门域控制器发送车门解锁指令，以控制车门进行解锁。
在一种可能的实现方式中，基于第一图像和第一深度图进行活体检测，包括：基于第一图像，更新第一深度图，得到第二深度图；基于第一图像和第二深度图，确定目标对象的活体检测结果。
具体地，基于第一图像，更新第一深度图中一个或多个像素的深度值，得到第二深度图。
在一些实施例中，基于第一图像，对第一深度图中的深度失效像素的深度值进行更新，得到第二深度图。
其中，深度图中的深度失效像素可以指深度图中包括的深度值无效的像素，即深度值不准确或与实际情况明显不符的像素。深度失效像素的个数可以为一个或多个。通过更新深度图中的至少一个深度失效像素的深度值，使得深度失效像素的深度值更为准确，有助于提高活体检测的准确率。
在一些实施例中，第一深度图为带缺失值的深度图，通过基于第一图像修复第一深度图，得到第二深度图，其中，可选地，对第一深度图的修复包括对缺失值的像素的深度值的确定或补充，但本公开实施例不限于此。
在本公开实施例中，可以通过多种方式更新或修复第一深度图。在一些实施例中，直接利用第一图像进行活体检测，例如直接利用第一图像更新第一深度图。在另一些实施例中，对第一图像进行预处理，并基于预处理后的第一图像进行活体检测。例如，从第一图像中获取目标对象的图像，并基于目标对象的图像，更新第一深度图。
可以通过多种方式从第一图像中截取目标对象的图像。作为一个示例，对第一图像进行目标检测，得到目标对象的位置信息，例如目标对象的限定框(bounding box)的位置信息，并基于目标对象的位置信息从第一图像中截取目标对象的图像。例如，从第一图像中截取目标对象的限定框所在区域的图像作为目标对象的图像，再例如，将目标对象的限定框放大一定倍数并从第一图像中截取放大后的限定框所在区域的图像作为目标对象的图像。作为另一个示例，获取第一图像中目标对象的关键点信息，并基于目标对象的关键点信息，从第一图像中获取目标对象的图像。
可选地，对第一图像进行目标检测，得到目标对象所在区域的位置信息；对目标对象所在区域的图像进行关键点检测，得到第一图像中目标对象的关键点信息。
可选地，目标对象的关键点信息可以包括目标对象的多个关键点的位置信息。若目标对象为人脸，则目标对象的关键点可以包括眼睛关键点、眉毛关键点、鼻子关键点、嘴巴关键点和人脸轮廓关键点等中的一项或多项。其中，眼睛关键点可以包括眼睛轮廓关键点、眼角关键点和瞳孔关键点等中的一项或多项。
在一个示例中，基于目标对象的关键点信息，确定目标对象的轮廓，并根据目标对象的轮廓，从第一图像中截取目标对象的图像。与通过目标检测得到的目标对象的位置信息相比，通过关键点信息得到的目标对象的位置更为准确，从而有利于提高后续活体检测的准确率。
可选地，可以基于第一图像中目标对象的关键点，确定第一图像中目标对象的轮廓，并将第一图像中目标对象的轮廓所在区域的图像或放大一定倍数后得到的区域的图像确定为目标对象的图像。例如，可以将第一图像中基于目标对象的关键点确定的椭圆形区域确定为目标对象的图像，或者可以将第一图像中基于目标对象的关键点确定的椭圆形区域的最小外接矩形区域确定为目标对象的图像，但本公开实施例对此不作限定。
这样，通过从第一图像中获取目标对象的图像，基于目标对象的图像进行活体检测，能够降低第一图像中的背景信息对活体检测产生的干扰。
在本公开实施例中，可以对获取到的原始深度图进行更新处理，或者，在一些实施例中，从第一深度图中获取目标对象的深度图，并基于第一图像，更新目标对象的深度图，得到第二深度图。
作为一个示例，获取第一图像中目标对象的位置信息，并基于目标对象的位置信息，从第一深度图中获取目标对象的深度图。其中，可选地，可以预先对第一深度图和第一图像进行配准或对齐处理，但本公开实施例对此不做限定。
这样，通过从第一深度图中获取目标对象的深度图，并基于第一图像，更新目标对象的深度图，得到第二深度图，由此能够降低第一深度图中的背景信息对活体检测产生的干扰。
在一些实施例中，在获取第一图像和第一图像对应的第一深度图之后，根据图像传感器的参数以及深度传感器的参数，对齐第一图像和第一深度图。
作为一个示例，可以对第一深度图进行转换处理，以使得转换处理后的第一深度图和第一图像对齐。例如，可以根据深度传感器的参数和图像传感器的参数，确定第一转换矩阵，并根据第一转换矩阵，对第一深度图进行转换处理。相应地，可以基于第一图像的至少一部分，对转换处理后的第一深度图的至少一部分进行更新，得到第二深度图。例如，基于第一图像，对转换处理后的第一深度图进行更新，得到第二深度图。再例如，基于从第一图像中截取的目标对象的图像，对从第一深度图中截取的目标对象的深度图进行更新，得到第二深度图，等等。
作为另一个示例，可以对第一图像进行转换处理，以使得转换处理后的第一图像与第一深度图对齐。例如，可以根据深度传感器的参数和图像传感器的参数，确定第二转换矩阵，并根据第二转换矩阵，对第一图像进行转换处理。相应地，可以基于转换处理后的第一图像的至少一部分，对第一深度图的至少一部分进行更新，得到第二深度图。
可选地，深度传感器的参数可以包括深度传感器的内参数和/或外参数，图像传感器的参数可以包括图像传感器的内参数和/或外参数。通过对齐第一深度图和第一图像，能够使第一深度图和第一图像中相应的部分在两个图像中的位置相同。
在上文的例子中，第一图像为原始图像(例如RGB或红外图像)，而在另一些实施例中，第一图像也可以指从原始图像中截取的目标对象的图像，类似地，第一深度图也可以指从原始深度图中截取的目标对象的深度图，本公开实施例对此不做限定。
图5示出根据本公开实施例的活体检测方法的一个示例的示意图。在图5示出的例子中，第一图像为RGB图像且目标对象为人脸，将RGB图像和第一深度图进行对齐校正处理，并将处理后的图像输入到人脸关键点模型中进行处理，得到RGB人脸图(目标对象的图像)和深度人脸图(目标对象的深度图)，并基于RGB人脸图对深度人脸图进行更新或修复。这样，能够降低后续的数据处理量，提高活体检测效率和准确率。
在本公开实施例中，目标对象的活体检测结果可以为目标对象为活体或者目标对象为假体。
在一些实施例中，将第一图像和第二深度图输入到活体检测神经网络进行处理，得到第一图像中的目标对象的活体检测结果。或者，通过其他活体检测算法对第一图像和第二深度图进行处理，得到活体检测结果。
在一些实施例中，对第一图像进行特征提取处理，得到第一特征信息；对第二深度图进行特征提取处理，得到第二特征信息；基于第一特征信息和第二特征信息，确定第一图像中的目标对象的活体检测结果。
其中，可选地，特征提取处理可以通过神经网络或其他机器学习算法实现，提取到的特征信息的类型可选地可以通过对样本的学习得到，本公开实施例对此不做限定。
在某些特定场景(如室外强光场景)下，获取到的深度图(例如深度传感器采集到的深度图)可能会出现部分面积失效的情况。此外，正常光照下，由于眼镜反光、黑色头发或者黑色眼镜边框等因素也会随机引起深度图局部失效。而某些特殊的纸质能够使得打印出的人脸照片产生类似的深度图大面积失效或者局部失效的效果。另外，通过遮挡深度传感器的主动光源也可以使得深度图部分失效，同时假体在图像传感器的成像正常。因此，在一些深度图的部分或全部失效的情况下，利用深度图区分活体和假体会造成误差。因此，在本公开实施例中，通过对第一深度图进行修复或更新，并利用修复或更新后的深度图进行活体检测，有利于提高活体检测的准确率。
图6示出根据本公开实施例的活体检测方法中基于第一图像和第二深度图，确定第一图像中的目标对象的活体检测结果的一个示例的示意图。
在该示例中，将第一图像和第二深度图输入到活体检测网络中进行活体检测处理，得到活体检测结果。
如图6所示，该活体检测网络包括两个分支，即第一子网络和第二子网络，其中，第一子网络用于对第一图像进行特征提取处理，得到第一特征信息，第二子网络用于对第二深度图进行特征提取处理，得到第二特征信息。
在一个可选示例中，第一子网络可以包括卷积层、下采样层和全连接层。
例如，第一子网络可以包括一级卷积层、一级下采样层和一级全连接层。其中，该级卷积层可以包括一个或多个卷积层，该级下采样层可以包括一个或多个下采样层，该级全连接层可以包括一个或多个全连接层。
又如，第一子网络可以包括多级卷积层、多级下采样层和一级全连接层。其中，每级卷积层可以包括一个或多个卷积层，每级下采样层可以包括一个或多个下采样层，该级全连接层可以包括一个或多个全连接层。其中，第i级卷积层后级联第i级下采样层，第i级下采样层后级联第i+1级卷积层，第n级下采样层后级联全连接层，其中，i和n均为正整数，1≤i≤n，n表示深度预测神经网络中卷积层和下采样层的级数。
或者，第一子网络可以包括卷积层、下采样层、归一化层和全连接层。
例如，第一子网络可以包括一级卷积层、一个归一化层、一级下采样层和一级全连接层。其中，该级卷积层可以包括一个或多个卷积层，该级下采样层可以包括一个或多个下采样层，该级全连接层可以包括一个或多个全连接层。
又如，第一子网络可以包括多级卷积层、多个归一化层和多级下采样层和一级全连接层。其中，每级卷积层可以包括一个或多个卷积层，每级下采样层可以包括一个或多个下采样层，该级全连接层可以包括一个或多个全连接层。其中，第i级卷积层后级联第i个归一化层，第i个归一化层后级联第i级下采样层，第i级下采样层后级联第i+1级卷积层，第n级下采样层后级联全连接层，其中，i和n均为正整数，1≤i≤n，n表示第一子网络中卷积层、下采样层的级数和归一化层的个数。
作为一个示例，对第一图像进行卷积处理，得到第一卷积结果；对第一卷积结果进行下采样处理，得到第一下采样结果；基于第一下采样结果，得到第一特征信息。
例如，可以通过一级卷积层和一级下采样层对第一图像进行卷积处理和下采样处理。其中，其中，该级卷积层可以包括一个或多个卷积层，该级下采样层可以包括一个或多个下采样层。
又如，可以通过多级卷积层和多级下采样层对第一图像进行卷积处理和下采样处理。其中，每级卷积层可以包括一个或多个卷积层，每级下采样层可以包括一个或多个下采样层。
例如，对第一卷积结果进行下采样处理，得到第一下采样结果，可以包括：对第一卷积结果进行归一化处理，得到第一归一化结果；对第一归一化结果进行下采样处理，得到第一下采样结果。
例如，可以将第一下采样结果输入全连接层，通过全连接层对第一下采样结果进行融合处理，得到第一特征信息。
可选地，第二子网络和第一子网络具有相同的网络结构，但具有不同的参数。或者，第二子网络具有与第一子网络不同的网络结构，本公开实施例对此不做限定。
如图6所示，活体检测网络还包括第三子网络，用于对第一子网络得到的第一特征信息和第二子网络得到的第二特征信息进行处理，得到第一图像中的目标对象的活体检测结果。可选地，第三子网络可以包括全连接层和输出层。例如，输出层采用softmax函数，若输出层的输出为1，则表示目标对象为活体，若输出层的输出为0，则表示目标对象为假体，但本公开实施例对第三子网络的具体实现不做限定。
作为一个示例，对第一特征信息和第二特征信息进行融合处理，得到第三特征信息；基于第三特征信息，确定第一图像中的目标对象的活体检测结果。
例如，通过全连接层对第一特征信息和第二特征信息进行融合处理，得到第三特征信息。
在一些实施例中，基于第三特征信息，得到第一图像中的目标对象为活体的概率，并根据目标对象为活体的概率，确定目标对象的活体检测结果。
例如，若目标对象为活体的概率大于第二阈值，则确定目标对象的活体检测结果为目标对象为活体。再例如，若目标对象为活体的概率小于或等于第二阈值，则确定目标对象的活体检测结果为假体。
在另一些实施例中，基于第三特征信息，得到目标对象为假体的概率，并根据目标对象为假体的概率，确定目标对象的活体检测结果。例如，若目标对象为假体的概率大于第三阈值，则确定目标对象的活体检测结果为目标对象为假体。再例如，若目标对象为假体的概率小于或等于第三阈值，则确定目标对象的活体检测结果为活体。
在一个例子中，可以将第三特征信息输入Softmax层中，通过Softmax层得到目标对象为活体或假体的概率。例如，Softmax层的输出包括两个神经元，其中，一个神经元代表目标对象为活体的概率，另一个神经元代表目标对象为假体的概率，但本公开实施例不限于此。
在本公开实施例中，通过获取第一图像和第一图像对应的第一深度图，基于第一图像，更新第一深度图，得到第二深度图，基于第一图像和第二深度图，确定第一图像中的目标对象的活体检测结果，由此能够完善深度图，从而提高活体检测的准确性。
在一种可能的实现方式中，基于第一图像，更新第一深度图，得到第二深度图，包括：基于第一图像，确定第一图像中多个像素的深度预测值和关联信息，其中，该多个像素的关联信息指示该多个像素之间的关联度；基于该多个像素的深度预测值和关联信息，更新第一深度图，得到第二深度图。
具体地，基于第一图像确定第一图像中多个像素的深度预测值，并基于多个像素的深度预测值对第一深度图进行修复完善。
具体地，通过对第一图像进行处理，得到第一图像中多个像素的深度预测值。例如，将第一图像输入到深度预测深度网络中进行处理，得到多个像素的深度预测结果，例如，得到第一图像对应的深度预测图，但本公开实施例对此不做限定。
在一些实施例中，基于第一图像和第一深度图，确定第一图像中多个像素的深度预测值。
作为一个示例，将第一图像和第一深度图输入到深度预测神经网络进行处理，得到第一图像中多个像素的深度预测值。或者，通过其他方式对第一图像和第一深度图进行处理，得到多个像素的深度预测值，本公开实施例对此不做限定。
图7示出根据本公开实施例的车门解锁方法中的深度预测神经网络的示意图。如图7所示，可以将第一图像和第一深度图输入到深度预测神经网络进行处理，得到初始深度估计图。基于初始深度估计图，可以确定第一图像中多个像素的深度预测值。例如，初始深度估计图的像素值为第一图像中的相应像素的深度预测值。
深度预测神经网络可以通过多种网络结构实现。在一个示例中，深度预测神经网络包括编码部分和解码部分。其中，可选地，编码部分可以包括卷积层和下采样层，解码部分包括反卷积层和/或上采样层。此外，编码部分和/或解码部分还可以包括归一化层，本公开实施例对编码部分和解码部分的具体实现不做限定。在编码部分，随着网络层数的增加，特征图的分辨率逐渐降低，特征图的数量逐渐增多，从而能够获取丰富的语义特征和图像空间特征；在解码部分，特征图的分辨率逐渐增大，解码部分最终输出的特征图的分辨率与第一深度图的分辨率相同。
在一些实施例中，对第一图像和第一深度图进行融合处理，得到融合结果，并基于融合结果，确定第一图像中多个像素的深度预测值。
在一个示例中，可以对第一图像和第一深度图进行连接(concat)，得到融合结果。
在一个示例中，对融合结果进行卷积处理，得到第二卷积结果；基于第二卷积结果进行下采样处理，得到第一编码结果；基于第一编码结果，确定第一图像中多个像素的深度预测值。
例如，可以通过卷积层对融合结果进行卷积处理，得到第二卷积结果。
例如，对第二卷积结果进行归一化处理，得到第二归一化结果；对第二归一化结果进行下采样处理，得到第一编码结果。在这里，可以通过归一化层对第二卷积结果进行归一化处理，得到第二归一化结果；通过下采样层对第二归一化结果进行下采样处理，得到第一编码结果。或者，可以通过下采样层对第二卷积结果进行下采样处理，得到第一编码结果。
例如，对第一编码结果进行反卷积处理，得到第一反卷积结果；对第一反卷积结果进行归一化处理，得到深度预测值。在这里，可以通过反卷积层对第一编码结果进行反卷积处理，得到第一反卷积结果；通过归一化层对第一反卷积结果进行归一化处理，得到深度预测值。或者，可以通过反卷积层对第一编码结果进行反卷积处理，得到深度预测值。
例如，对第一编码结果进行上采样处理，得到第一上采样结果；对第一上采样结果进行归一化处理，得到深度预测值。在这里，可以通过上采样层对第一编码结果进行上采样处理，得到第一上采样结果；通过归一化层对第一上采样结果进行归一化处理，得到深度预测值。或者，可以通过上采样层对第一编码结果进行上采样处理，得到深度预测值。
此外，通过对第一图像进行处理，得到第一图像中多个像素的关联信息。其中，第一图像中多个像素的关联信息可以包括第一图像的多个像素中每个像素与其周围像素之间的关联度。其中，像素的周围像素可以包括像素的至少一个相邻像素，或者包括与该像素间隔不超过一定数值的多个像素。例如，如图10所示，像素5的周围像素包括与其相邻的像素1、像素2、像素3、像素4、像素6、像素7、像素8和像素9，相应地，第一图像中多个像素的关联信息包括像素1、像素2、像素3、像素4、像素6、像素7、像素8和像素9与像素5之间的关联度。作为一个示例，第一像素与第二像素之间的关联度可以利用第一像素与第二像素的相关性来度量，其中，本公开实施例可以采用相关技术确定像素之间的相关性，在此不再赘述。
在本公开实施例中，可以通过多种方式确定多个像素的关联信息。在一些实施例中，将第一图像输入到关联度检测神经网络进行处理，得到第一图像中多个像素的关联信息。例如，得到第一图像对应的关联特征图。或者，也可以通过其他算法得到多个像素的关联信息，本公开实施例对此不做限定。
图8示出根据本公开实施例的车门解锁方法中的关联度检测神经网络的示意图。如图8所示，将第一图像输入到关联度检测神经网络进行处理，得到多张关联特征图。基于多张关联特征图，可以确定第一图像中多个像素的关联信息。例如，某一像素的周围像素指的是与该像素的距离等于0的像素，即，该像素的周围像素指的是与该像素相邻的像素，则关联度检测神经网络可以输出8张关联特征图。例如，在第一张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi-1,j-1与像素Pi,j之间的关联度，其中，Pi,j表示第i行第j列的像素；在第二张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi-1,j与像素Pi,j之间的关联度；在第三张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi-1,j+1与像素Pi,j之间的关联度；在第四张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi,j-1与像素Pi,j之间的关联度；在第五张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi,j+1与像素Pi,j之间的关联度；在第六张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi+1,j-1与像素Pi,j之间的关联度；在第七张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi+1,j与像素Pi,j之间的关联度；在第八张关联特征图中，像素Pi,j的像素值＝第一图像中像素Pi+1,j+1与像素Pi,j之间的关联度。
关联度检测神经网络可以通过多种网络结构实现。作为一个示例，关联度检测神经网络可以包括编码部分和解码部分。其中，编码部分可以包括卷积层和下采样层，解码部分可以包括反卷积层和/或上采样层。编码部分还可以包括归一化层，解码部分也可以包括归一化层。在编码部分，特征图的分辨率逐渐降低，特征图的数量逐渐增多，从而获取丰富的语义特征和图像空间特征；在解码部分，特征图的分辨率逐渐增大，解码部分最终输出的特征图的分辨率与第一图像的分辨率相同。在本公开实施例中，关联信息可以为图像，也可以为其他数据形式，例如矩阵等。
作为一个示例，将第一图像输入到关联度检测神经网络进行处理，得到第一图像中多个像素的关联信息，可以包括：对第一图像进行卷积处理，得到第三卷积结果；基于第三卷积结果进行下采样处理，得到第二编码结果；基于第二编码结果，得到第一图像中多个像素的关联信息。
在一个示例中，可以通过卷积层对第一图像进行卷积处理，得到第三卷积结果。
在一个示例中，基于第三卷积结果进行下采样处理，得到第二编码结果，可以包括：对第三卷积结果进行归一化处理，得到第三归一化结果；对第三归一化结果进行下采样处理，得到第二编码结果。在该示例中，可以通过归一化层对第三卷积结果进行归一化处理，得到第三归一化结果；通过下采样层对第三归一化结果进行下采样处理，得到第二编码结果。或者，可以通过下采样层对第三卷积结果进行下采样处理，得到第二编码结果。
在一个示例中，基于第二编码结果，确定关联信息，可以包括：对第二编码结果进行反卷积处理，得到第二反卷积结果；对第二反卷积结果进行归一化处理，得到关联信息。在该示例中，可以通过反卷积层对第二编码结果进行反卷积处理，得到第二反卷积结果；通过归一化层对第二反卷积结果进行归一化处理，得到关联信息。或者，可以通过反卷积层对第二编码结果进行反卷积处理，得到关联信息。
在一个示例中，基于第二编码结果，确定关联信息，可以包括：对第二编码结果进行上采样处理，得到第二上采样结果；对第二上采样结果进行归一化处理，得到关联信息。在示例中，可以通过上采样层对第二编码结果进行上采样处理，得到第二上采样结果；通过归一化层对第二上采样结果进行归一化处理，得到关联信息。或者，可以通过上采样层对第二编码结果进行上采样处理，得到关联信息。
当前的TOF、结构光等3D传感器，在室外容易受到阳光的影响，导致深度图有大面积的空洞缺失，从而影响3D活体检测算法的性能。本公开实施例提出的基于深度图自完善的3D活体检测算法，通过对3D传感器检测到的深度图的完善修复，提高了3D活体检测算法的性能。
在一些实施例中，在得到多个像素的深度预测值和关联信息之后，基于多个像素的深度预测值和关联信息，对第一深度图进行更新处理，得到第二深度图。图9示出根据本公开实施例的车门解锁方法中深度图更新的一示例性的示意图。在图9所示的例子中，第一深度图为带缺失值的深度图，得到的多个像素的深度预测值和关联信息分别为初始深度估计图和关联特征图，此时，将带缺失值的深度图、初始深度估计图和关联特征图输入到深度图更新模块(例如深度更新神经网络)中进行处理，得到最终深度图，即第二深度图。
在一些实施例中，从该多个像素的深度预测值中获取深度失效像素的深度预测值以及深度失效像素的多个周围像素的深度预测值；从该多个像素的关联信息中获取深度失效像素与深度失效像素的多个周围像素之间的关联度；基于深度失效像素的深度预测值、深度失效像素的多个周围像素的深度预测值、以及深度失效像素与深度失效像素的周围像素之间的关联度，确定深度失效像素的更新后的深度值。
在本公开实施例中，可以通过多种方式确定深度图中的深度失效像素。作为一个示例，将第一深度图中深度值等于0的像素确定为深度失效像素，或将第一深度图中不具有深度值的像素确定为深度失效像素。
在该示例中，对于带缺失值的第一深度图中有值的部分(即深度值不为0)，我们认为其深度值是正确可信的，对这部分不进行更新，保留原始的深度值。而对第一深度图中深度值为0的像素的深度值进行更新。
作为另一个示例，深度传感器可以将深度失效像素的深度值设置为一个或多个预设数值或预设范围。在示例中，可以将第一深度图中深度值等于预设数值或者属于预设范围的像素确定为深度失效像素。
本公开实施例也可以基于其他统计方式确定第一深度图中的深度失效像素，本公开实施例对此不做限定。
在该实现方式中，可以将第一图像中与深度失效像素位置相同的像素的深度值确定为深度失效像素的深度预测值，类似地，可以将第一图像中与深度失效像素的周围像素位置相同的像素的深度值确定为深度失效像素的周围像素的深度预测值。
作为一个示例，深度失效像素的周围像素与深度失效像素之间的距离小于或等于第一阈值。
图10示出根据本公开实施例的车门解锁方法中周围像素的示意图。例如，第一阈值为0，则只将邻居像素作为周围像素。例如，像素5的邻居像素包括像素1、像素2、像素3、像素4、像素6、像素7、像素8和像素9，则只将像素1、像素2、像素3、像素4、像素6、像素7、像素8和像素9作为像素5的周围像素。
图11示出根据本公开实施例的车门解锁方法中周围像素的另一示意图。例如，第一阈值为1，则除了将邻居像素作为周围像素，还将邻居像素的邻居像素作为周围像素。即，除了将像素1、像素2、像素3、像素4、像素6、像素7、像素8和像素9作为像素5的周围像素，还将像素10至像素25作为像素5的周围像素。
作为一个示例，基于深度失效像素的周围像素的深度预测值以及深度失效像素与深度失效像素的多个周围像素之间的关联度，确定深度失效像素的深度关联值；基于深度失效像素的深度预测值以及深度关联值，确定深度失效像素的更新后的深度值。
作为另一个示例，基于深度失效像素的周围像素的深度预测值以及深度失效像素与该周围像素之间的关联度，确定该周围像素对于深度失效像素的有效深度值；基于深度失效像素的各个周围像素对于深度失效像素的有效深度值，以及深度失效像素的深度预测值，确定深度失效像素的更新后的深度值。例如，可以将深度失效像素的某一周围像素的深度预测值与该周围像素对应的关联度的乘积，确定为该周围像素对于深度失效像素的有效深度值，其中，该周围像素对应的关联度指的是该周围像素与深度失效像素之间的关联度。例如，可以确定深度失效像素的各个周围像素对于深度失效像素的有效深度值之和与第一预设系数的乘积，得到第一乘积；确定深度失效像素的深度预测值与第二预设系数的乘积，得到第二乘积；将第一乘积与第二乘积之和确定为深度失效像素的更新后的深度值。在一些实施例中，第一预设系数与第二预设系数之和为1。
在一个示例中，将深度失效像素与每个周围像素之间的关联度作为每个周围像素的权重，对深度失效像素的多个周围像素的深度预测值进行加权求和处理，得到深度失效像素的深度关联值。例如，像素5为深度失效像素，则深度失效像素5的深度关联值为深度失效像素5的更新后的深度值其中，wi表示像素i与像素5之间的关联度，Fi表示像素i的深度预测值。
在另一个示例中，确定深度失效像素的多个周围像素中每个周围像素与深度失效像素之间的关联度和每个周围像素的深度预测值的乘积；将乘积的最大值确定为深度失效像素的深度关联值。
在一个示例中，将深度失效像素的深度预测值与深度关联值之和确定为深度失效像素的更新后的深度值。
在另一个示例中，确定深度失效像素的深度预测值与第三预设系数的乘积，得到第三乘积；确定深度关联值与第四预设系数的乘积，得到第四乘积；将第三乘积与第四乘积之和确定为深度失效像素的更新后的深度值。在一些实施例中，第三预设系数与第四预设系数之和为1。
在一些实施例中，非深度失效像素在第二深度图中的深度值等于该非深度失效像素在第一深度图中的深度值。
在另一些实施例中，也可以对非深度失效像素的深度值进行更新，以得到更准确的第二深度图，从而能够进一步提高活体检测的准确性。
在本公开实施例中，经设置于车的蓝牙模块搜索预设标识的蓝牙设备，响应于搜索到预设标识的蓝牙设备，建立蓝牙模块与预设标识的蓝牙设备的蓝牙配对连接，响应于蓝牙配对连接成功，唤醒并控制设置于车的图像采集模组采集目标对象的第一图像，基于第一图像进行人脸识别，并响应于人脸识别成功，向车的至少一车门锁发送车门解锁指令，由此在未与预设标识的蓝牙设备建立蓝牙配对连接时，人脸识别模组可以处于休眠状态以保持低功耗运行，从而能够降低刷脸开车门方式的运行功耗，并且能够在携带预设标识的蓝牙设备的用户到达车门前，使人脸识别模组处于可工作状态，在携带预设标识的蓝牙设备的用户到达车门时，图像采集模组采集到第一图像后能够通过唤醒的人脸识别模组快速进行人脸图像处理，进而能够提高人脸识别效率，改善用户体验。因此，本公开实施例既能满足低功耗运行的要求，也能满足快速开车门的要求。采用本公开实施例，在车主接近车辆时，无需刻意做动作(如触摸按钮或做手势)，就能够自动触发活体检测与人脸认证流程，并在车主活体检测和人脸认证通过后自动打开车门。
在一种可能的实现方式中，在基于第一图像进行人脸识别之后，该方法还包括：响应于人脸识别失败，激活设置于车的密码解锁模块以启动密码解锁流程。
在该实现方式中，密码解锁是人脸识别解锁的备选方案。人脸识别失败的原因可以包括活体检测结果为目标对象为假体、人脸认证失败、图像采集失败(例如摄像头故障)和识别次数超过预定次数等中的至少一项。当目标对象不通过人脸识别时，期待密码解锁流程。例如，可以通过B柱上的触摸屏获取用户输入的密码。在一个示例中，在连续输入M次错误的密码后，密码解锁将失效，例如，M等于5。
在一种可能的实现方式中，该方法还包括以下一项或两项：根据图像采集模组采集的车主的人脸图像进行车主注册；根据车主的终端设备采集的车主的人脸图像进行远程注册，并将注册信息发送到车上，其中，注册信息包括车主的人脸图像。
在一个示例中，根据图像采集模组采集的车主的人脸图像进行车主注册，包括：在检测到触摸屏上的注册按钮被点击时，请求用户输入密码，在密码验证通过后，启动图像采集模组中的RGB摄像头获取用户的人脸图像，并根据获取的人脸图像进行注册，提取该人脸图像中的人脸特征作为预注册的人脸特征，以在后续人脸认证时基于该预注册的人脸特征进行人脸比对。
在一个示例中，根据车主的终端设备采集的车主的人脸图像进行远程注册，并将注册信息发送到车上，其中，注册信息包括车主的人脸图像。在该示例中，车主可以通过手机App(Application，应用)向TSP(Telematics Service Provider，汽车远程服务提供商)云端发送注册请求，其中，注册请求可以携带车主的人脸图像；TSP云端将注册请求发送给车门解锁装置的车载T-Box(Telematics Box，远程信息处理器)，车载T-Box根据注册请求激活人脸识别功能，并将注册请求中携带的人脸图像中的人脸特征作为预注册的人脸特征，以在后续人脸认证时基于该预注册的人脸特征进行人脸比对。
图12示出根据本公开实施例的车门解锁方法的另一流程图。该车门解锁方法的执行主体可以是车门解锁装置。在一种可能的实现方式中，该车门解锁方法可以通过处理器调用存储器中存储的计算机可读指令的方式来实现。为了简洁，与上文类似的部分，下面将不再赘述。如图12所示，该车门解锁方法包括步骤S21至步骤S24。
在步骤S21中，经设置于车的蓝牙模块搜索预设标识的蓝牙设备。
在一种可能的实现方式中，所述经设置于车的蓝牙模块搜索预设标识的蓝牙设备，包括：在所述车处于熄火状态或处于熄火且车门锁闭状态时，经设置于所述车的蓝牙模块搜索预设标识的蓝牙设备。
在步骤S22中，响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为一个。
在另一种可能的实现方式中，所述预设标识的蓝牙设备的数量为多个；所述响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，包括：响应于搜索到任意一个预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，包括：唤醒设置于所述车的人脸识别模组；经唤醒的所述人脸识别模组控制所述图像采集模组采集目标对象的第一图像。
相对于超声波、红外等短距离传感器技术，本公开实施例通过采用蓝牙的方式能够支持较大的距离。实践表明，携带预设标识的蓝牙设备的用户通过这段距离(车的蓝牙模块搜索到用户的预设标识的蓝牙设备时用户与车之间的距离)到达车的时间，与车唤醒人脸识别模组由休眠状态转换为工作状态的时间大致匹配，由此在用户到达车门时，能够立即通过唤醒的人脸识别模组进行人脸识别开车门，而无需在用户到达车门后让用户等待人脸识别模组被唤醒，进而能够提高人脸识别效率，改善用户体验。另外，在蓝牙搜索的过程中，用户无感知，从而能够进一步提高用户体验。因此，本公开实施例通过响应于搜索到预设标识的蓝牙设备唤醒人脸识别模组的方式提供了一种能够较好地权衡人脸识别模组功耗节省、用户体验和安全性等各方面的解决方案。
在一种可能的实现方式中，在所述唤醒设置于所述车的人脸识别模组之后，所述方法还包括：若在预设时间内未采集到人脸图像，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，在所述唤醒设置于所述车的人脸识别模组之后，所述方法还包括：若在预设时间内未通过人脸识别，则控制所述人脸识别模组进入休眠状态。
在步骤S23中，基于所述第一图像进行人脸识别。
在步骤S24中，响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令，包括：响应于人脸识别成功，确定所述目标对象具有开门权限的车门；根据所述目标对象具有开门权限的车门，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述人脸识别包括：活体检测和人脸认证；所述基于所述第一图像进行人脸识别，包括：经所述图像采集模组中的图像传感器采集所述第一图像，并基于所述第一图像和预注册的人脸特征进行人脸认证；经所述图像采集模组中的深度传感器采集所述第一图像对应的第一深度图，并基于所述第一图像和所述第一深度图进行活体检测。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图进行活体检测，包括：基于所述第一图像，更新所述第一深度图，得到第二深度图；基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述图像传感器包括RGB图像传感器或者红外传感器；所述深度传感器包括双目红外传感器或者飞行时间TOF传感器。
在一种可能的实现方式中，所述TOF传感器采用基于红外波段的TOF模组。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：基于所述第一图像，对所述第一深度图中的深度失效像素的深度值进行更新，得到所述第二深度图。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：基于所述第一图像，确定所述第一图像中多个像素的深度预测值和关联信息，其中，所述多个像素的关联信息指示所述多个像素之间的关联度；基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图。
在一种可能的实现方式中，所述基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图，包括：确定所述第一深度图中的深度失效像素；从所述多个像素的深度预测值中获取所述深度失效像素的深度预测值以及所述深度失效像素的多个周围像素的深度预测值；从所述多个像素的关联信息中获取所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度；基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的周围像素之间的关联度，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的更新后的深度值，包括：基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值；基于所述深度失效像素的深度预测值以及所述深度关联值，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值，包括：将所述深度失效像素与每个周围像素之间的关联度作为所述每个周围像素的权重，对所述深度失效像素的多个周围像素的深度预测值进行加权求和处理，得到所述深度失效像素的深度关联值。
在一种可能的实现方式中，所述基于所述第一图像，确定所述第一图像中多个像素的深度预测值，包括：基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值，包括：将所述第一图像和所述第一深度图输入到深度预测神经网络进行处理，得到所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值，包括：对所述第一图像和所述第一深度图进行融合处理，得到融合结果；基于所述融合结果，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述基于所述第一图像，确定所述第一图像中多个像素的关联信息，包括：将所述第一图像输入到关联度检测神经网络进行处理，得到所述第一图像中多个像素的关联信息。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，包括：从所述第一图像中获取所述目标对象的图像；基于所述目标对象的图像，更新所述第一深度图。
在一种可能的实现方式中，所述从所述第一图像中获取所述目标对象的图像，包括：获取所述第一图像中所述目标对象的关键点信息；基于所述目标对象的关键点信息，从所述第一图像中获取所述目标对象的图像。
在一种可能的实现方式中，所述获取所述第一图像中所述目标对象的关键点信息，包括：对所述第一图像进行目标检测，得到所述目标对象所在区域；对所述目标对象所在区域的图像进行关键点检测，得到所述第一图像中所述目标对象的关键点信息。
在一种可能的实现方式中，所述基于所述第一图像，更新所述第一深度图，得到第二深度图，包括：从所述第一深度图中获取所述目标对象的深度图；基于所述第一图像，更新所述目标对象的深度图，得到所述第二深度图。
在一种可能的实现方式中，所述基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果，包括：将所述第一图像和所述第二深度图输入到活体检测神经网络进行处理，得到所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果，包括：对所述第一图像进行特征提取处理，得到第一特征信息；对所述第二深度图进行特征提取处理，得到第二特征信息；基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果，包括：对所述第一特征信息和所述第二特征信息进行融合处理，得到第三特征信息；基于所述第三特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述基于所述第三特征信息，确定所述目标对象的活体检测结果，包括：基于所述第三特征信息，得到所述目标对象为活体的概率；根据所述目标对象为活体的概率，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，在所述基于所述第一图像进行人脸识别之后，所述方法还包括：响应于人脸识别失败，激活设置于所述车的密码解锁模块以启动密码解锁流程。
在一种可能的实现方式中，所述方法还包括以下一项或两项：根据所述图像采集模组采集的车主的人脸图像进行车主注册；根据所述车主的终端设备采集的所述车主的人脸图像进行远程注册，并将注册信息发送到所述车上，其中，所述注册信息包括所述车主的人脸图像。
可以理解，本公开提及的上述各个方法实施例，在不违背原理逻辑的情况下，均可以彼此相互结合形成结合后的实施例，限于篇幅，本公开不再赘述。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
此外，本公开还提供了车门解锁装置、电子设备、计算机可读存储介质、程序，上述均可用来实现本公开提供的任一种车门解锁方法，相应技术方案和描述和参见方法部分的相应记载，不再赘述。
图13示出根据本公开实施例的车门解锁装置的框图。如图13所示，所述车门解锁装置包括：搜索模块31，用于经设置于车的蓝牙模块搜索预设标识的蓝牙设备；唤醒模块32，用于响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接，并响应于所述蓝牙配对连接成功，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，或者，响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；人脸识别模块33，用于基于所述第一图像进行人脸识别；解锁模块34，用于响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述搜索模块31用于：在所述车处于熄火状态或处于熄火且车门锁闭状态时，经设置于所述车的蓝牙模块搜索预设标识的蓝牙设备。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为一个。
在一种可能的实现方式中，所述预设标识的蓝牙设备的数量为多个；
所述唤醒模块32用于：响应于搜索到任意一个预设标识的蓝牙设备，建立所述蓝牙模块与该预设标识的蓝牙设备的蓝牙配对连接，或者，响应于搜索到任意一个预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述唤醒模块32包括：唤醒子模块，用于唤醒设置于所述车的人脸识别模组；控制子模块，用于经唤醒的所述人脸识别模组控制所述图像采集模组采集目标对象的第一图像。
在一种可能的实现方式中，所述装置还包括：第一控制模块，用于若在预设时间内未采集到人脸图像，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述装置还包括：第二控制模块，用于若在预设时间内未通过人脸识别，则控制所述人脸识别模组进入休眠状态。
在一种可能的实现方式中，所述解锁模块34用于：响应于人脸识别成功，确定所述目标对象具有开门权限的车门；根据所述目标对象具有开门权限的车门，向所述车的至少一车门锁发送车门解锁指令。
在一种可能的实现方式中，所述人脸识别包括：活体检测和人脸认证；所述人脸识别模块33包括：人脸认证模块，用于经所述图像采集模组中的图像传感器采集所述第一图像，并基于所述第一图像和预注册的人脸特征进行人脸认证；活体检测模块，用于经所述图像采集模组中的深度传感器采集所述第一图像对应的第一深度图，并基于所述第一图像和所述第一深度图进行活体检测。
在一种可能的实现方式中，所述活体检测模块包括：更新子模块，用于基于所述第一图像，更新所述第一深度图，得到第二深度图；确定子模块，用于基于所述第一图像和所述第二深度图，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述图像传感器包括RGB图像传感器或者红外传感器；
所述深度传感器包括双目红外传感器或者飞行时间TOF传感器。
在一种可能的实现方式中，所述TOF传感器采用基于红外波段的TOF模组。
在一种可能的实现方式中，所述更新子模块用于：基于所述第一图像，对所述第一深度图中的深度失效像素的深度值进行更新，得到所述第二深度图。
在一种可能的实现方式中，所述更新子模块用于：基于所述第一图像，确定所述第一图像中多个像素的深度预测值和关联信息，其中，所述多个像素的关联信息指示所述多个像素之间的关联度；基于所述多个像素的深度预测值和关联信息，更新所述第一深度图，得到第二深度图。
在一种可能的实现方式中，所述更新子模块用于：确定所述第一深度图中的深度失效像素；从所述多个像素的深度预测值中获取所述深度失效像素的深度预测值以及所述深度失效像素的多个周围像素的深度预测值；从所述多个像素的关联信息中获取所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度；基于所述深度失效像素的深度预测值、所述深度失效像素的多个周围像素的深度预测值、以及所述深度失效像素与所述深度失效像素的周围像素之间的关联度，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述更新子模块用于：基于所述深度失效像素的周围像素的深度预测值以及所述深度失效像素与所述深度失效像素的多个周围像素之间的关联度，确定所述深度失效像素的深度关联值；基于所述深度失效像素的深度预测值以及所述深度关联值，确定所述深度失效像素的更新后的深度值。
在一种可能的实现方式中，所述更新子模块用于：将所述深度失效像素与每个周围像素之间的关联度作为所述每个周围像素的权重，对所述深度失效像素的多个周围像素的深度预测值进行加权求和处理，得到所述深度失效像素的深度关联值。
在一种可能的实现方式中，所述更新子模块用于：基于所述第一图像和所述第一深度图，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述更新子模块用于：将所述第一图像和所述第一深度图输入到深度预测神经网络进行处理，得到所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述更新子模块用于：对所述第一图像和所述第一深度图进行融合处理，得到融合结果；基于所述融合结果，确定所述第一图像中多个像素的深度预测值。
在一种可能的实现方式中，所述更新子模块用于：将所述第一图像输入到关联度检测神经网络进行处理，得到所述第一图像中多个像素的关联信息。
在一种可能的实现方式中，所述更新子模块用于：从所述第一图像中获取所述目标对象的图像；基于所述目标对象的图像，更新所述第一深度图。
在一种可能的实现方式中，所述更新子模块用于：获取所述第一图像中所述目标对象的关键点信息；基于所述目标对象的关键点信息，从所述第一图像中获取所述目标对象的图像。
在一种可能的实现方式中，所述更新子模块用于：对所述第一图像进行目标检测，得到所述目标对象所在区域；对所述目标对象所在区域的图像进行关键点检测，得到所述第一图像中所述目标对象的关键点信息。
在一种可能的实现方式中，所述更新子模块用于：从所述第一深度图中获取所述目标对象的深度图；基于所述第一图像，更新所述目标对象的深度图，得到所述第二深度图。
在一种可能的实现方式中，所述确定子模块用于：将所述第一图像和所述第二深度图输入到活体检测神经网络进行处理，得到所述目标对象的活体检测结果。
在一种可能的实现方式中，所述确定子模块用于：对所述第一图像进行特征提取处理，得到第一特征信息；对所述第二深度图进行特征提取处理，得到第二特征信息；基于所述第一特征信息和所述第二特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述确定子模块用于：对所述第一特征信息和所述第二特征信息进行融合处理，得到第三特征信息；基于所述第三特征信息，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述确定子模块用于：基于所述第三特征信息，得到所述目标对象为活体的概率；根据所述目标对象为活体的概率，确定所述目标对象的活体检测结果。
在一种可能的实现方式中，所述装置还包括：激活与启动模块，用于响应于人脸识别失败，激活设置于所述车的密码解锁模块以启动密码解锁流程。
在一种可能的实现方式中，所述装置还包括注册模块，所述注册模块用于以下一项或两项：根据所述图像采集模组采集的车主的人脸图像进行车主注册；根据所述车主的终端设备采集的所述车主的人脸图像进行远程注册，并将注册信息发送到所述车上，其中，所述注册信息包括所述车主的人脸图像。
在一些实施例中，本公开实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法，其具体实现可以参照上文方法实施例的描述，为了简洁，这里不再赘述。
图14示出根据本公开实施例的车载人脸解锁***的框图。如图14所示，该车载人脸解锁***包括：存储器41、人脸识别模组42、图像采集模组43和蓝牙模块44；所述人脸识别模组42分别与所述存储器41、所述图像采集模组43和所述蓝牙模块44连接；所述蓝牙模块44包括在与预设标识的蓝牙设备蓝牙配对连接成功或者搜索到所述预设标识的蓝牙设备时唤醒所述人脸识别模组42的微处理器441和与所述微处理器441连接的蓝牙传感器442；所述人脸识别模组42还设置有用于与车门域控制器连接的通信接口，若人脸识别成功则基于所述通信接口向所述车门域控制器发送用于解锁车门的控制信息。
在一个示例中，存储器41可以包括闪存(Flash)和DDR3(Double Date Rate 3，第三代双倍数据率)内存中的至少一项。
在一个示例中，人脸识别模组42可以采用SoC(System on Chip，***级芯片)实现。
在一个示例中，人脸识别模组42通过CAN(Controller Area Network，控制器局域网络)总线与车门域控制器连接。
在一个示例中，所述图像采集模组43包括图像传感器和深度传感器。
在一个示例中，深度传感器包括双目红外传感器和飞行时间TOF传感器中的至少一项。
在一种可能的实现方式中，深度传感器包括双目红外传感器，双目红外传感器的两个红外摄像头设置在图像传感器的摄像头的两侧。例如，在图4a所示的示例中，图像传感器为RGB传感器，图像传感器的摄像头为RGB摄像头，深度传感器为双目红外传感器，深度传感器包括两个IR(红外)摄像头，双目红外传感器的两个红外摄像头设置在图像传感器的RGB摄像头的两侧。
在一个示例中，图像采集模组43还包括至少一个补光灯，该至少一个补光灯设置在双目红外传感器的红外摄像头和图像传感器的摄像头之间，该至少一个补光灯包括用于图像传感器的补光灯和用于深度传感器的补光灯中的至少一种。例如，若图像传感器为RGB传感器，则用于图像传感器的补光灯可以为白光灯；若图像传感器为红外传感器，则用于图像传感器的补光灯可以为红外灯；若深度传感器为双目红外传感器，则用于深度传感器的补光灯可以为红外灯。在图4a所示的示例中，在双目红外传感器的红外摄像头和图像传感器的摄像头之间设置红外灯。例如，红外灯可以采用940nm的红外线。
在一个示例中，补光灯可以处于常开模式。在该示例中，在图像采集模组的摄像头处于工作状态时，补光灯处于开启状态。
在另一个示例中，可以在光线不足时开启补光灯。例如，可以通过环境光传感器获取环境光强度，并在环境光强度低于光强阈值时判定光线不足，并开启补光灯。
在一种可能的实现方式中，所述图像采集模组43还包括激光器，所述激光器设置在所述深度传感器的摄像头和所述图像传感器的摄像头之间。例如，在图4b所示的示例中，图像传感器为RGB传感器，图像传感器的摄像头为RGB摄像头，深度传感器为TOF传感器，激光器设置在TOF传感器的摄像头和RGB传感器的摄像头之间。例如，激光器可以为VCSEL，TOF传感器可以基于VCSEL发出的激光采集深度图。
在一个示例中，深度传感器通过LVDS(Low-Voltage Differential Signaling，低电压差分信号)接口与人脸识别***42连接。
在一种可能的实现方式中，所述车载人脸解锁***还包括：用于解锁车门的密码解锁模块45，所述密码解锁模块45与所述人脸识别模组42连接。
在一种可能的实现方式中，所述密码解锁模块45包括触控屏和键盘中的一项或两项。
在一个示例中，触摸屏通过FPD-Link(Flat Panel Display Link，平板显示器链路)与人脸识别模组42连接。
在一种可能的实现方式中，所述车载人脸解锁***还包括：电池模组46，所述电池模组46分别与所述微处理器441和所述人脸识别模组42连接。
在一种可能的实现方式中，存储器41、人脸识别模组42、蓝牙模块44和电池模组46可以搭建在ECU(Electronic Control Unit，电子控制单元)上。
图15示出根据本公开实施例的车载人脸解锁***的示意图。在图15所示的示例中，人脸识别模组采用SoC101实现，存储器包括闪存(Flash)102和DDR3内存103，蓝牙模块包括蓝牙传感器(Bluetooth)104和微处理器(MCU，Microcontroller Unit)105，SoC101、闪存102、DDR3内存103、蓝牙传感器104、微处理器105和电池模组(Power Management)106搭建在ECU100上，图像采集模组包括深度传感器(3D Camera)200，深度传感器200通过LVDS接口与SoC101连接，密码解锁模块包括触控屏(Touch Screen)300，触摸屏300通过FPD-Link与SoC101连接，SoC101通过CAN总线与车门域控制器400连接。
图16示出根据本公开实施例的车的示意图。如图16所示，车包括车载人脸解锁***51，车载人脸解锁***51与车的车门域控制器52连接。
在一种可能的实现方式中，所述图像采集模组设置在所述车的室外部。
在一种可能的实现方式中，所述图像采集模组设置在以下至少一个位置上：所述车的B柱、至少一个车门、至少一个后视镜。
在一种可能的实现方式中，所述人脸识别模组设置在所述车内，所述人脸识别模组经CAN总线与所述车门域控制器连接。
本公开实施例还提出一种计算机可读存储介质，其上存储有计算机程序指令，所述计算机程序指令被处理器执行时实现上述方法。计算机可读存储介质可以是非易失性计算机可读存储介质。
本公开实施例还提出一种电子设备，包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为上述方法。
电子设备可以被提供为终端、服务器或其它形态的设备。
图17是根据一示例性实施例示出的一种电子设备800的框图。例如，电子设备800可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等终端。
参照图17，电子设备800可以包括以下一个或多个组件：处理组件802，存储器804，电源组件806，多媒体组件808，音频组件810，输入/输出(I/O)的接口812，传感器组件814，以及通信组件816。
处理组件802通常控制电子设备800的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件802可以包括一个或多个处理器820来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件802可以包括一个或多个模块，便于处理组件802和其他组件之间的交互。例如，处理组件802可以包括多媒体模块，以方便多媒体组件808和处理组件802之间的交互。
存储器804被配置为存储各种类型的数据以支持在电子设备800的操作。这些数据的示例包括用于在电子设备800上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器804可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。
电源组件806为电子设备800的各种组件提供电力。电源组件806可以包括电源管理***，一个或多个电源，及其他与为电子设备800生成、管理和分配电力相关联的组件。
多媒体组件808包括在所述电子设备800和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件808包括一个前置摄像头和/或后置摄像头。当电子设备800处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜***或具有焦距和光学变焦能力。
音频组件810被配置为输出和/或输入音频信号。例如，音频组件810包括一个麦克风(MIC)，当电子设备800处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器804或经由通信组件816发送。在一些实施例中，音频组件810还包括一个扬声器，用于输出音频信号。
I/O接口812为处理组件802和***接口模块之间提供接口，上述***接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。
传感器组件814包括一个或多个传感器，用于为电子设备800提供各个方面的状态评估。例如，传感器组件814可以检测到电子设备800的打开/关闭状态，组件的相对定位，例如所述组件为电子设备800的显示器和小键盘，传感器组件814还可以检测电子设备800或电子设备800一个组件的位置改变，用户与电子设备800接触的存在或不存在，电子设备800方位或加速/减速和电子设备800的温度变化。传感器组件814可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件814还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件814还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。
通信组件816被配置为便于电子设备800和其他设备之间有线或无线方式的通信。电子设备800可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件816经由广播信道接收来自外部广播管理***的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件816还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。
在示例性实施例中，电子设备800可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述方法。
在示例性实施例中，还提供了一种非易失性计算机可读存储介质，例如包括计算机程序指令的存储器804，上述计算机程序指令可由电子设备800的处理器820执行以完成上述方法。
本公开可以是***、方法和/或计算机程序产品。计算机程序产品可以包括计算机可读存储介质，其上载有用于使处理器实现本公开的各个方面的计算机可读程序指令。
计算机可读存储介质可以是可以保持和存储由指令执行设备使用的指令的有形设备。计算机可读存储介质例如可以是――但不限于――电存储设备、磁存储设备、光存储设备、电磁存储设备、半导体存储设备或者上述的任意合适的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、静态随机存取存储器(SRAM)、便携式压缩盘只读存储器(CD-ROM)、数字多功能盘(DVD)、记忆棒、软盘、机械编码设备、例如其上存储有指令的打孔卡或凹槽内凸起结构、以及上述的任意合适的组合。这里所使用的计算机可读存储介质不被解释为瞬时信号本身，诸如无线电波或者其他自由传播的电磁波、通过波导或其他传输媒介传播的电磁波(例如，通过光纤电缆的光脉冲)、或者通过电线传输的电信号。
这里所描述的计算机可读程序指令可以从计算机可读存储介质下载到各个计算/处理设备，或者通过网络、例如因特网、局域网、广域网和/或无线网下载到外部计算机或外部存储设备。网络可以包括铜传输电缆、光纤传输、无线传输、路由器、防火墙、交换机、网关计算机和/或边缘服务器。每个计算/处理设备中的网络适配卡或者网络接口从网络接收计算机可读程序指令，并转发该计算机可读程序指令，以供存储在各个计算/处理设备中的计算机可读存储介质中。
用于执行本公开操作的计算机程序指令可以是汇编指令、指令集架构(ISA)指令、机器指令、机器相关指令、微代码、固件指令、状态设置数据、或者以一种或多种编程语言的任意组合编写的源代码或目标代码，所述编程语言包括面向对象的编程语言—诸如Smalltalk、C++等，以及常规的过程式编程语言—诸如“C”语言或类似的编程语言。计算机可读程序指令可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络—包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。在一些实施例中，通过利用计算机可读程序指令的状态信息来个性化定制电子电路，例如可编程逻辑电路、现场可编程门阵列(FPGA)或可编程逻辑阵列(PLA)，该电子电路可以执行计算机可读程序指令，从而实现本公开的各个方面。
这里参照根据本公开实施例的方法、装置(***)和计算机程序产品的流程图和/或框图描述了本公开的各个方面。应当理解，流程图和/或框图的每个方框以及流程图和/或框图中各方框的组合，都可以由计算机可读程序指令实现。
这些计算机可读程序指令可以提供给通用计算机、专用计算机或其它可编程数据处理装置的处理器，从而生产出一种机器，使得这些指令在通过计算机或其它可编程数据处理装置的处理器执行时，产生了实现流程图和/或框图中的一个或多个方框中规定的功能/动作的装置。也可以把这些计算机可读程序指令存储在计算机可读存储介质中，这些指令使得计算机、可编程数据处理装置和/或其他设备以特定方式工作，从而，存储有指令的计算机可读介质则包括一个制造品，其包括实现流程图和/或框图中的一个或多个方框中规定的功能/动作的各个方面的指令。
也可以把计算机可读程序指令加载到计算机、其它可编程数据处理装置、或其它设备上，使得在计算机、其它可编程数据处理装置或其它设备上执行一系列操作步骤，以产生计算机实现的过程，从而使得在计算机、其它可编程数据处理装置、或其它设备上执行的指令实现流程图和/或框图中的一个或多个方框中规定的功能/动作。
附图中的流程图和框图显示了根据本公开的多个实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上，流程图或框图中的每个方框可以代表一个模块、程序段或指令的一部分，所述模块、程序段或指令的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。在有些作为替换的实现中，方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如，两个连续的方框实际上可以基本并行地执行，它们有时也可以按相反的顺序执行，这依所涉及的功能而定。也要注意的是，框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合，可以用执行规定的功能或动作的专用的基于硬件的***来实现，或者可以用专用硬件与计算机指令的组合来实现。
以上已经描述了本公开的各实施例，上述说明是示例性的，并非穷尽性的，并且也不限于所披露的各实施例。在不偏离所说明的各实施例的范围和精神的情况下，对于本技术领域的普通技术人员来说许多修改和变更都是显而易见的。本文中所用术语的选择，旨在最好地解释各实施例的原理、实际应用或对市场中的技术的技术改进，或者使本技术领域的其它普通技术人员能理解本文披露的各实施例。

Claims (10)

1.一种车门解锁方法，其特征在于，包括：
经设置于车的蓝牙模块搜索预设标识的蓝牙设备；
响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接；
响应于所述蓝牙配对连接成功，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；
基于所述第一图像进行人脸识别；
响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
2.根据权利要求1所述的方法，其特征在于，所述唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，包括：
唤醒设置于所述车的人脸识别模组；
经唤醒的所述人脸识别模组控制所述图像采集模组采集目标对象的第一图像。
3.一种车门解锁方法，其特征在于，包括：
经设置于车的蓝牙模块搜索预设标识的蓝牙设备；
响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；
基于所述第一图像进行人脸识别；
响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
4.一种车门解锁装置，其特征在于，包括：
搜索模块，用于经设置于车的蓝牙模块搜索预设标识的蓝牙设备；
唤醒模块，用于响应于搜索到所述预设标识的蓝牙设备，建立所述蓝牙模块与所述预设标识的蓝牙设备的蓝牙配对连接，并响应于所述蓝牙配对连接成功，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像，或者，响应于搜索到所述预设标识的蓝牙设备，唤醒并控制设置于所述车的图像采集模组采集目标对象的第一图像；
人脸识别模块，用于基于所述第一图像进行人脸识别；
解锁模块，用于响应于人脸识别成功，向所述车的至少一车门锁发送车门解锁指令。
5.一种车载人脸解锁***，其特征在于，包括：存储器、人脸识别模组、图像采集模组和蓝牙模块；所述人脸识别模组分别与所述存储器、所述图像采集模组和所述蓝牙模块连接；所述蓝牙模块包括在与预设标识的蓝牙设备蓝牙配对连接成功或者搜索到所述预设标识的蓝牙设备时唤醒所述人脸识别模组的微处理器和与所述微处理器连接的蓝牙传感器；所述人脸识别模组还设置有用于与车门域控制器连接的通信接口，若人脸识别成功则基于所述通信接口向所述车门域控制器发送用于解锁车门的控制信息。
6.一种车，其特征在于，所述车包括权利要求4所述的车载人脸解锁***，所述车载人脸解锁***与所述车的车门域控制器连接。
7.一种电子设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：执行权利要求1或2所述的方法。
8.一种电子设备，其特征在于，包括：
处理器；
用于存储处理器可执行指令的存储器；
其中，所述处理器被配置为：执行权利要求3所述的方法。
9.一种计算机可读存储介质，其上存储有计算机程序指令，其特征在于，所述计算机程序指令被处理器执行时实现权利要求1或2所述的方法。
10.一种计算机可读存储介质，其上存储有计算机程序指令，其特征在于，所述计算机程序指令被处理器执行时实现权利要求3所述的方法。
CN201910586845.6A 2019-07-01 2019-07-01 车门解锁方法及装置、***、车、电子设备和存储介质 Active CN110335389B (zh)

Priority Applications (6)

Application Number Priority Date Filing Date Title
CN201910586845.6A CN110335389B (zh) 2019-07-01 2019-07-01 车门解锁方法及装置、***、车、电子设备和存储介质
PCT/CN2020/076713 WO2021000587A1 (zh) 2019-07-01 2020-02-26 车门解锁方法及装置、***、车、电子设备和存储介质
JP2021572948A JP2022537923A (ja) 2019-07-01 2020-02-26 車両のドアロック解除方法及び装置、システム、車両、電子機器並びに記憶媒体
KR1020217043021A KR20220016184A (ko) 2019-07-01 2020-02-26 차량의 도어 잠금 해제 방법 및 장치, 시스템, 차량, 전자 기기 및 기억 매체
KR1020227017334A KR20220070581A (ko) 2019-07-01 2020-02-26 차량의 도어 잠금 해제 방법 및 장치, 시스템, 차량, 전자 기기 및 기억 매체
JP2022059357A JP2022118730A (ja) 2019-07-01 2022-03-31 車両のドアロック解除方法及び装置、システム、車両、電子機器並びに記憶媒体

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910586845.6A CN110335389B (zh) 2019-07-01 2019-07-01 车门解锁方法及装置、***、车、电子设备和存储介质

Publications (2)

Publication Number Publication Date
CN110335389A true CN110335389A (zh) 2019-10-15
CN110335389B CN110335389B (zh) 2021-10-12

Family

ID=68143972

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910586845.6A Active CN110335389B (zh) 2019-07-01 2019-07-01 车门解锁方法及装置、***、车、电子设备和存储介质

Country Status (4)

Country Link
JP (2) JP2022537923A (zh)
KR (2) KR20220016184A (zh)
CN (1) CN110335389B (zh)
WO (1) WO2021000587A1 (zh)

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110765936A (zh) * 2019-10-22 2020-02-07 上海商汤智能科技有限公司 车门控制方法及装置、***、车、电子设备和存储介质
CN111540090A (zh) * 2020-04-29 2020-08-14 北京市商汤科技开发有限公司 控制车门解锁的方法、装置、车辆、电子设备及存储介质
CN111932727A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的包装箱智能锁生物识别解锁方法
CN111932732A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的循环包装箱智能锁解锁方法
CN111932730A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的循环包装箱智能锁远程解锁方法
CN111932725A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯开锁设备的包装箱智能锁解锁方法
CN111932723A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的循环包装箱智能锁快捷解锁方法
CN111932724A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的感应式循环包装箱智能锁解锁方法
WO2021000587A1 (zh) * 2019-07-01 2021-01-07 上海商汤智能科技有限公司 车门解锁方法及装置、***、车、电子设备和存储介质
CN112572349A (zh) * 2020-12-22 2021-03-30 广州橙行智动汽车科技有限公司 一种车辆数字钥匙处理方法和***
CN112590706A (zh) * 2020-12-18 2021-04-02 上海傲硕信息科技有限公司 无感人脸识别车门解锁***
CN112684722A (zh) * 2020-12-18 2021-04-20 上海傲硕信息科技有限公司 低功耗电源控制电路
CN113135161A (zh) * 2021-03-18 2021-07-20 江西欧迈斯微电子有限公司 识别***和识别方法
CN113421358A (zh) * 2020-03-03 2021-09-21 比亚迪股份有限公司 车锁控制***、车锁控制方法及车辆
CN114268380A (zh) * 2021-10-27 2022-04-01 浙江零跑科技股份有限公司 一种基于声波通信的汽车蓝牙无感进入改进方法
CN115546939A (zh) * 2022-09-19 2022-12-30 国网青海省电力公司信息通信公司 解锁方式确定方法、装置及电子设备
WO2023127586A1 (ja) * 2021-12-29 2023-07-06 Ｉｈｉ運搬機械株式会社 機械式駐車装置の操作方法及び操作装置
WO2024014250A1 (ja) * 2022-07-15 2024-01-18 ソニーセミコンダクタソリューションズ株式会社 情報処理装置及び情報処理システム

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113160458B (zh) * 2021-03-31 2024-05-31 中国地质大学（武汉） 一种基于tof技术和rfid技术的物联网智能锁及其使用方法
CN113408344A (zh) * 2021-05-13 2021-09-17 深圳市捷顺科技实业股份有限公司 一种三维人脸识别的生成方法及相关装置
CN114463879A (zh) * 2022-01-25 2022-05-10 杭州涂鸦信息技术有限公司 解锁方法、智能终端及计算机可读存储介质
CN114872660A (zh) * 2022-04-18 2022-08-09 浙江极氪智能科技有限公司 一种人脸识别***控制方法、装置、车辆及存储介质
CN115240296A (zh) * 2022-05-10 2022-10-25 深圳绿米联创科技有限公司 设备唤醒方法、装置、设备及存储介质
CN115331334A (zh) * 2022-07-13 2022-11-11 神通科技集团股份有限公司 一种基于人脸识别和蓝牙解锁的智能立柱及解锁方法
CN116805430B (zh) * 2022-12-12 2024-01-02 安徽国防科技职业学院 一种基于大数据的数字图像安全处理***

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101715139A (zh) * 2009-11-16 2010-05-26 南京邮电大学 立体图像中基于互补掩盖方式的多模式误码掩盖方法
CN102595024A (zh) * 2011-12-16 2012-07-18 飞狐信息技术（天津）有限公司 一种数字视频图像修复方法与装置
CN103248906A (zh) * 2013-04-17 2013-08-14 清华大学深圳研究生院 一种双目立体视频序列的深度图获取方法与***
CN103729919A (zh) * 2013-12-10 2014-04-16 杨伟 电子门禁控制***
CN105096311A (zh) * 2014-07-01 2015-11-25 中国科学院科学传播研究中心 基于gpu的深度图修复和虚实场景结合技术
CN105894503A (zh) * 2016-03-30 2016-08-24 江苏大学 一种对Kinect植株彩色和深度检测图像的修复方法
CN107176060A (zh) * 2017-07-27 2017-09-19 杭州力谱科技有限公司 一种电动汽车充电桩
CN107393046A (zh) * 2017-08-03 2017-11-24 陕西尚品信息科技有限公司 一种蓝牙签到***和蓝牙签到方法
CN108846924A (zh) * 2018-05-31 2018-11-20 上海商汤智能科技有限公司 车辆及车门解锁控制方法、装置和车门解锁***
CN109121077A (zh) * 2018-08-06 2019-01-01 刘丽 一种车库的蓝牙工作***及其工作方法
CN109823306A (zh) * 2019-02-22 2019-05-31 广东远峰汽车电子有限公司 车门解锁方法、装置、***及可读存储介质

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040029211A (ko) * 2002-09-25 2004-04-06 현대자동차주식회사 차량 도난 방지 장치 및 그 제어 방법
CN107963057A (zh) * 2017-12-23 2018-04-27 埃泰克汽车电子(芜湖)有限公司 一种基于手机的无钥匙进入***
CN208207948U (zh) * 2018-05-31 2018-12-07 上海商汤智能科技有限公司 具有人脸解锁功能的车辆
CN208954163U (zh) * 2018-08-16 2019-06-07 深圳嗒程科技有限公司 一种基于共享汽车的开锁***
CN109243024A (zh) * 2018-08-29 2019-01-18 上海交通大学 一种基于人脸识别的汽车解锁***及方法
CN109895736A (zh) * 2019-02-19 2019-06-18 汉腾汽车有限公司 基于人脸识别技术的安全开启车门***及车门安全开启方法
CN110335389B (zh) * 2019-07-01 2021-10-12 上海商汤临港智能科技有限公司 车门解锁方法及装置、***、车、电子设备和存储介质

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101715139A (zh) * 2009-11-16 2010-05-26 南京邮电大学 立体图像中基于互补掩盖方式的多模式误码掩盖方法
CN102595024A (zh) * 2011-12-16 2012-07-18 飞狐信息技术（天津）有限公司 一种数字视频图像修复方法与装置
CN103248906A (zh) * 2013-04-17 2013-08-14 清华大学深圳研究生院 一种双目立体视频序列的深度图获取方法与***
CN103729919A (zh) * 2013-12-10 2014-04-16 杨伟 电子门禁控制***
CN105096311A (zh) * 2014-07-01 2015-11-25 中国科学院科学传播研究中心 基于gpu的深度图修复和虚实场景结合技术
CN105894503A (zh) * 2016-03-30 2016-08-24 江苏大学 一种对Kinect植株彩色和深度检测图像的修复方法
CN107176060A (zh) * 2017-07-27 2017-09-19 杭州力谱科技有限公司 一种电动汽车充电桩
CN107393046A (zh) * 2017-08-03 2017-11-24 陕西尚品信息科技有限公司 一种蓝牙签到***和蓝牙签到方法
CN108846924A (zh) * 2018-05-31 2018-11-20 上海商汤智能科技有限公司 车辆及车门解锁控制方法、装置和车门解锁***
CN109121077A (zh) * 2018-08-06 2019-01-01 刘丽 一种车库的蓝牙工作***及其工作方法
CN109823306A (zh) * 2019-02-22 2019-05-31 广东远峰汽车电子有限公司 车门解锁方法、装置、***及可读存储介质

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021000587A1 (zh) * 2019-07-01 2021-01-07 上海商汤智能科技有限公司 车门解锁方法及装置、***、车、电子设备和存储介质
CN110765936B (zh) * 2019-10-22 2022-05-06 上海商汤智能科技有限公司 车门控制方法及装置、***、车、电子设备和存储介质
CN110765936A (zh) * 2019-10-22 2020-02-07 上海商汤智能科技有限公司 车门控制方法及装置、***、车、电子设备和存储介质
WO2021077738A1 (zh) * 2019-10-22 2021-04-29 上海商汤智能科技有限公司 车门控制方法及装置、***、车、电子设备和存储介质
CN113421358A (zh) * 2020-03-03 2021-09-21 比亚迪股份有限公司 车锁控制***、车锁控制方法及车辆
CN111540090A (zh) * 2020-04-29 2020-08-14 北京市商汤科技开发有限公司 控制车门解锁的方法、装置、车辆、电子设备及存储介质
WO2021218180A1 (zh) * 2020-04-29 2021-11-04 北京市商汤科技开发有限公司 控制车门解锁的方法、装置、车辆、设备、介质及程序
CN111932725A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯开锁设备的包装箱智能锁解锁方法
CN111932727A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的包装箱智能锁生物识别解锁方法
CN111932724A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的感应式循环包装箱智能锁解锁方法
CN111932732A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的循环包装箱智能锁解锁方法
CN111932730A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的循环包装箱智能锁远程解锁方法
CN111932723A (zh) * 2020-08-13 2020-11-13 四川巧盒物联科技有限公司 一种基于蓝牙通讯的循环包装箱智能锁快捷解锁方法
CN112684722A (zh) * 2020-12-18 2021-04-20 上海傲硕信息科技有限公司 低功耗电源控制电路
CN112590706A (zh) * 2020-12-18 2021-04-02 上海傲硕信息科技有限公司 无感人脸识别车门解锁***
CN112572349A (zh) * 2020-12-22 2021-03-30 广州橙行智动汽车科技有限公司 一种车辆数字钥匙处理方法和***
CN113135161A (zh) * 2021-03-18 2021-07-20 江西欧迈斯微电子有限公司 识别***和识别方法
CN114268380A (zh) * 2021-10-27 2022-04-01 浙江零跑科技股份有限公司 一种基于声波通信的汽车蓝牙无感进入改进方法
CN114268380B (zh) * 2021-10-27 2024-03-08 浙江零跑科技股份有限公司 一种基于声波通信的汽车蓝牙无感进入改进方法
WO2023127586A1 (ja) * 2021-12-29 2023-07-06 Ｉｈｉ運搬機械株式会社 機械式駐車装置の操作方法及び操作装置
WO2024014250A1 (ja) * 2022-07-15 2024-01-18 ソニーセミコンダクタソリューションズ株式会社 情報処理装置及び情報処理システム
CN115546939A (zh) * 2022-09-19 2022-12-30 国网青海省电力公司信息通信公司 解锁方式确定方法、装置及电子设备

Also Published As

Publication number Publication date
WO2021000587A1 (zh) 2021-01-07
JP2022537923A (ja) 2022-08-31
KR20220070581A (ko) 2022-05-31
JP2022118730A (ja) 2022-08-15
KR20220016184A (ko) 2022-02-08
CN110335389B (zh) 2021-10-12

Similar Documents

Publication Publication Date Title
CN110335389A (zh) 车门解锁方法及装置、***、车、电子设备和存储介质
TWI785312B (zh) 車門解鎖方法及其裝置、車載人臉解鎖系統、車、電子設備和儲存媒體
CN110765936B (zh) 车门控制方法及装置、***、车、电子设备和存储介质
US20210001810A1 (en) System, method, and computer program for enabling operation based on user authorization
CN109377616B (zh) 一种基于二维人脸识别的门禁控制***
CN108470169A (zh) 人脸识别***及方法
CN103106401B (zh) 一种具有人机交互机制的移动终端虹膜识别装置
WO2019217008A1 (en) Electronic devices capable of communicating over multiple networks
CN104992141B (zh) 基于双虹膜、立体人脸和声纹识别的智能生物特征监控总成及监控方法
CN109840475A (zh) 人脸识别方法及电子设备
KR101730255B1 (ko) 얼굴 인식 디지털 도어록
KR101682311B1 (ko) 얼굴 인식 디지털 도어록
US10762769B1 (en) Sending signals for help during an emergency event
CN103514439A (zh) 面部识别
CN209170442U (zh) 具有高屏占比的电子设备
US20180151039A1 (en) Neighborhood Security Cameras
US10943442B1 (en) Customized notifications based on device characteristics
CN208351494U (zh) 人脸识别***
TW201327413A (zh) 臉部認證或辨識系統及方法
CN110532957A (zh) 人脸识别方法及装置、电子设备和存储介质
US10791607B1 (en) Configuring and controlling light emitters
CN109255282A (zh) 一种生物识别方法、装置和***
JP2007034872A (ja) 顔認証装置および顔認証システムならびに顔認証方法
CN113011234A (zh) 一种身份确认方法的方法和***
JP5033014B2 (ja) 顔認証装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant