CN108875338A - 解锁方法、装置和***及存储介质 - Google Patents

解锁方法、装置和***及存储介质 Download PDF

Info

Publication number
CN108875338A
CN108875338A CN201810418988.1A CN201810418988A CN108875338A CN 108875338 A CN108875338 A CN 108875338A CN 201810418988 A CN201810418988 A CN 201810418988A CN 108875338 A CN108875338 A CN 108875338A
Authority
CN
China
Prior art keywords
image
uncertified
rgb
infrared
authentication
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201810418988.1A
Other languages
English (en)
Inventor
孔沅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Megvii Technology Co Ltd
Original Assignee
Beijing Megvii Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Megvii Technology Co Ltd filed Critical Beijing Megvii Technology Co Ltd
Priority to CN201810418988.1A priority Critical patent/CN108875338A/zh
Priority to US16/147,102 priority patent/US10956553B2/en
Publication of CN108875338A publication Critical patent/CN108875338A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00—Pattern recognition
    • G06F18/20—Analysing
    • G06F18/24—Classification techniques
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/36—User authentication by graphic or iconic representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141—Control of illumination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143—Sensing or illuminating at different wavelengths
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/40—Spoof detection, e.g. liveness detection
    • G06V40/45—Detection of the body part being alive

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Evolutionary Biology (AREA)
  • Evolutionary Computation (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Artificial Intelligence (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Collating Specific Patterns (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例提供一种解锁方法、装置和***以及存储介质。该方法包括：获取至少一个待认证图像；对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，对该待认证图像进行RGB对象认证，以获得该待认证图像的认证结果；在该待认证图像是近红外图像的情况下，对该待认证图像进行近红外对象认证，以获得该待认证图像的认证结果；基于至少一个待认证图像的认证结果确定是否解锁。根据本发明实施例的解锁方法、装置和***以及存储介质，可利用待解锁设备采集到的RGB图像和近红外图像这两种图像对设备进行解锁。近红外图像解锁可以充分弥补RGB图像解锁的不足，二者结合使用，可以大大提高解锁的速度和准确度。

Description

解锁方法、装置和***及存储介质
技术领域
本发明涉及图像处理领域，更具体地涉及一种解锁方法、装置和***以及存储介质。
背景技术
现有用于移动终端的人脸解锁的主流方案，是利用移动终端的前置摄像头，拍摄获得RGB图像，并用该RGB图像作为人脸解锁***的输入。这种方法存在明显缺点，即在光线较暗的环境下，无法获得亮度足够的RGB图像，亦即无法达到与正常光线下一致的解锁效果。
发明内容
考虑到上述问题而提出了本发明。本发明提供了一种解锁方法、装置和***以及存储介质。
根据本发明一方面，提供了一种解锁方法。该方法包括：获取至少一个待认证图像；在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果；在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果；基于至少一个认证结果确定是否解锁。
示例性地，在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果包括：将待认证图像与第一底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果；和/或在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果包括：将待认证图像与第二底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果。
示例性地，在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果还包括：对待认证图像进行RGB活体检测，以获得待认证图像的活体检测结果；在待认证图像是RGB图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果还包括：对待认证图像进行近红外活体检测，以获得待认证图像的活体检测结果；在待认证图像是近红外图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，第一底库图像包括第一已知对象的RGB图像和/或近红外图像，第二底库图像包括第二已知对象的RGB图像和/或近红外图像。
示例性地，至少一个待认证图像包括RGB图像和近红外图像的两个待认证图像，基于至少一个认证结果确定是否解锁包括：如果两个待认证图像的认证结果均指示对象认证通过，并且两个待认证图像中的对象与同一已知对象匹配，则确定解锁，否则确定不解锁。
示例性地，获取至少一个待认证图像包括：获取至少一个初始图像；对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件，如果满足，则确定该初始图像是至少一个待认证图像之一，或者对该初始图像进行变换以获得至少一个待认证图像之一；其中，预设条件包括以下项中的一项或多项：初始图像是预设类型的图像，其中，预设类型的图像为RGB图像和/或近红外图像，并且预设类型的图像为默认的或者基于用户指令确定；初始图像的图像亮度处于第一亮度范围；在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围；在初始图像中检测到合格的对象。
示例性地，在初始图像中检测到合格的对象包括：在初始图像中检测到的对象的对象大小、对象清晰度、对象角度、对象闭眼程度、对象遮挡程度中的一项或多项满足对应要求的对象。
示例性地，方法还包括：对于至少一个初始图像中的每一个，以预设滑动窗在该初始图像上滑动，以获得该初始图像的第一数目的图像区域。
示例性地，在对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件之后，方法还包括：如果初始图像不满足预设条件，则输出解锁失败信息。
示例性地，在获取至少一个待认证图像之后，方法还包括：对于至少一个待认证图像中的每一个，基于该待认证图像的数据来源信息判断该待认证图像是RGB图像还是近红外图像，其中，数据来源信息用于指示对应的待认证图像来源于RGB成像模式或近红外成像模式。
根据本发明另一方面，提供了一种解锁装置，包括：获取模块，用于获取至少一个待认证图像；认证模块，用于在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果；在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果；解锁确定模块，用于基于至少一个认证结果确定是否解锁。
根据本发明另一方面，提供了一种解锁***，包括处理器和存储器，其中，所述存储器中存储有计算机程序指令，所述计算机程序指令被所述处理器运行时用于执行上述解锁方法。
根据本发明另一方面，提供了一种存储介质，在所述存储介质上存储了程序指令，所述程序指令在运行时用于执行上述解锁方法。
根据本发明实施例的解锁方法、装置和***以及存储介质，可利用待解锁设备采集到的RGB图像和近红外图像这两种图像对设备进行解锁。对于采用根据本发明实施例的解锁方法的设备(诸如移动终端)来说，在正常光场景下，可以选择用RGB图像解锁，在黑暗场景下，可以选择用近红外图像解锁。采用近红外图像，即使在黑暗环境下，也可以很好地识别出对象(例如人脸)。因此，近红外图像解锁可以充分弥补RGB图像解锁的不足，二者结合使用，可以大大提高解锁的速度和准确度。
附图说明
通过结合附图对本发明实施例进行更详细的描述，本发明的上述以及其它目的、特征和优势将变得更加明显。附图用来提供对本发明实施例的进一步理解，并且构成说明书的一部分，与本发明实施例一起用于解释本发明，并不构成对本发明的限制。在附图中，相同的参考标号通常代表相同部件或步骤。
图1示出用于实现根据本发明实施例的解锁方法和装置的示例电子设备的示意性框图；
图2示出根据本发明一个实施例的解锁方法的示意性流程图；
图3示出根据本发明一个实施例的解锁方法的流程示意图；
图4示出根据本发明一个实施例的解锁装置的示意性框图；以及
图5示出根据本发明一个实施例的解锁***的示意性框图。
具体实施方式
为了使得本发明的目的、技术方案和优点更为明显，下面将参照附图详细描述根据本发明的示例实施例。显然，所描述的实施例仅仅是本发明的一部分实施例，而不是本发明的全部实施例，应理解，本发明不受这里描述的示例实施例的限制。基于本发明中描述的本发明实施例，本领域技术人员在没有付出创造性劳动的情况下所得到的所有其它实施例都应落入本发明的保护范围之内。
下面描述本发明实施例提供的、能够同时利用RGB图像和近红外图像进行解锁的技术方案。
本发明实施例提供了一种解锁方法、装置和***以及存储介质。根据本发明实施例的解锁方法，可以同时支持以RGB和近红外两种图像进行解锁。这种方式的好处是，既可以利用现有RGB解锁的已经积累的优势，同时还可以利用近红外图像，弥补RGB图像在黑暗场景下无法用于解锁的不足。根据本发明实施例的解锁方法和装置可以应用于任何需要进行解锁的领域，包括但不限于针对移动终端屏幕的人脸解锁。
首先，参照图1来描述用于实现根据本发明实施例的解锁方法和装置的示例电子设备100。
如图1所示，电子设备100包括一个或多个处理器102、一个或多个存储装置104。可选地，电子设备100还可以包括输入装置106、输出装置108、以及图像采集装置110，这些组件通过总线***112和/或其它形式的连接机构(未示出)互连。应当注意，图1所示的电子设备100的组件和结构只是示例性的，而非限制性的，根据需要，所述电子设备也可以具有其他组件和结构。
所述处理器102可以采用数字信号处理器(DSP)、现场可编程门阵列
(FPGA)、可编程逻辑阵列(PLA)、微处理器中的至少一种硬件形式来实现，所述处理器102可以是中央处理单元(CPU)、图像处理器(GPU)、专用的集成电路(ASIC)或者具有数据处理能力和/或指令执行能力的其它形式的处理单元中的一种或几种的组合，并且可以控制所述电子设备100中的其它组件以执行期望的功能。
所述存储装置104可以包括一个或多个计算机程序产品，所述计算机程序产品可以包括各种形式的计算机可读存储介质，例如易失性存储器和/或非易失性存储器。所述易失性存储器例如可以包括随机存取存储器(RAM)和/或高速缓冲存储器(cache)等。所述非易失性存储器例如可以包括只读存储器(ROM)、硬盘、闪存等。在所述计算机可读存储介质上可以存储一个或多个计算机程序指令，处理器102可以运行所述程序指令，以实现下文所述的本发明实施例中(由处理器实现)的客户端功能以及/或者其它期望的功能。在所述计算机可读存储介质中还可以存储各种应用程序和各种数据，例如所述应用程序使用和/或产生的各种数据等。
所述输入装置106可以是用户用来输入指令的装置，并且可以包括键盘、鼠标、麦克风和触摸屏等中的一个或多个。
所述输出装置108可以向外部(例如用户)输出各种信息(例如图像和/或声音)，并且可以包括显示器、扬声器等中的一个或多个。可选地，所述输入装置106和所述输出装置108可以集成在一起，采用同一交互装置(例如触摸屏)实现。
所述图像采集装置110可以采集图像，并且将所采集的图像存储在所述存储装置104中以供其它组件使用。图像采集装置110可以是单独的相机或移动终端中的摄像头等。应当理解，图像采集装置110仅是示例，电子设备100可以不包括图像采集装置110。在这种情况下，可以利用其他具有图像采集能力的器件采集图像，并将采集的图像发送给电子设备100。
示例性地，用于实现根据本发明实施例的解锁方法和装置的示例电子设备可以在诸如个人计算机或远程服务器等的设备上实现。
下面，将参考图2描述根据本发明实施例的解锁方法。图2示出根据本发明一个实施例的解锁方法200的示意性流程图。如图2所示，解锁方法200包括以下步骤S210、S220和S230。
在步骤S210，获取至少一个待认证图像。
待认证图像可以是包含对象(例如人脸)的、用于设备解锁的图像。此处的设备可以是任何设备，例如移动终端。待认证图像可以是静态图像，也可以是视频中的视频帧。待认证图像可以是图像采集装置采集到的原始图像，也可以是对原始图像进行预处理(诸如数字化、归一化、平滑等)之后获得的图像。
对象可以是任何可用于进行解锁认证的物体，例如人脸或人体其他部位。在下文的描述中，主要以对象是人脸为例对本发明进行说明。
示例性地，待认证图像可以是基于预设条件从图像采集装置采集到的初始图像中选择出来的。例如，在进行人脸认证之前，可以首先对图像采集装置采集到的初始图像进行一些图像质量和/或图像类型(是RRG图像还是近红外图像)等方面的判断，对于满足预设条件的初始图像，可以将其作为待认证图像进行后续的人脸认证等步骤，对于不满足预设条件的初始图像可以无需执行后续步骤。
在步骤S220，在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果；在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果。
对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，对该待认证图像进行RGB对象认证，以获得该待认证图像的认证结果；在该待认证图像是近红外图像的情况下，对该待认证图像进行近红外对象认证，以获得该待认证图像的认证结果。
本文所述的RGB图像是指图像采集装置在RGB成像模式下采集的图像或基于在RGB成像模式下采集的图像变换(例如缩放和/或裁剪)获得的图像，近红外图像是指图像采集装置在近红外成像模式下采集的图像或基于在近红外成像模式下采集的图像变换获得的图像。在一个示例中，图像采集装置可以根据需要在RGB成像模式和近红外成像模式之间切换，分别采集获得RGB图像和近红外图像。在另一个示例中，图像采集装置可以同时采用RGB成像模式和近红外成像模式采集图像，在这种情况下，针对同一人脸，可以同时获得一个RGB图像和一个近红外图像。可选地，图像采集装置在何时采用哪种成像模式可以基于用户指令确定或者由解锁***默认设置。
图像采集装置采集到的图像可以包括RGB图像和近红外图像这两种图像中的一者或两者。相应地，至少一个待认证图像也可以包括RGB图像和近红外图像这两种图像中的一者或两者。
在待认证图像是RGB图像的情况下，可以执行针对RGB图像的人脸认证操作(即RGB人脸认证)，获得待认证图像的认证结果。在待认证图像是近红外图像的情况下，可以执行针对近红外图像的人脸认证操作(即近红外人脸认证)，获得待认证图像的认证结果。
人脸认证操作可以包括人脸对比，还可以示例性地包括活体检测等操作。人脸对比是将待认证图像中的待认证人脸与数据库(即底库)中存储的已知人脸进行对比，判断二者是否匹配，即是否属于同一人。在一个示例中，人脸对比结果可以是取值为0和1之一的结果，例如，可以用数值1表示待认证图像中的待认证人脸与已知人脸属于同一人脸，用数值0表示待认证图像中的待认证人脸与已知人脸属于不同人脸。在另一个示例中，人脸对比结果可以是待认证图像中的待认证人脸与已知人脸之间的相似度，其可以是处于[0,1]范围内的任意数值。
示例性地，认证结果可以包括用于指示待认证图像中的待认证人脸通过认证的第一结果和用于指示待认证图像中的待认证人脸未通过认证的第二结果这两种结果。在认证结果为第一结果的情况下，可以确定解锁。在认证结果为第二结果的情况下，可以确定不解锁。
在一个示例中，针对RGB图像的对象认证和针对近红外图像的对象认证可以采用各自独立的算法模块实现。在另一个示例中，针对RGB图像的对象认证和针对近红外图像的对象认证可以采用统一的算法模块实现。
在步骤S230，基于至少一个认证结果确定是否解锁。
如上所述，图像采集装置可以每次采集一个RGB图像或近红外图像。在这种情况下，至少一个待认证图像的数目可以是一个，即可以针对每个待认证图像分别执行步骤S210至S230的解锁流程。
此外，如上所述，图像采集装置也可以同时采集一个RGB图像和一个近红外图像。在这种情况下，可以选择至少两种实现方案。在一种实现方案中，至少一个待认证图像的数目可以是一个，可以针对每个待认证图像分别执行步骤S210至S230的解锁流程。在另一种实现方案中，至少一个待认证图像的数目可以是两个，包括分别是RGB图像和近红外图像的两个待认证图像，在步骤S230中，结合这两个待认证图像的认证结果确定是否解锁。
根据本发明实施例的解锁方法，可利用待解锁设备采集到的RGB图像和近红外图像这两种图像对设备进行解锁。对于采用根据本发明实施例的解锁方法的设备(诸如移动终端)来说，在正常光场景下，可以选择用RGB图像解锁，在黑暗场景下，可以选择用近红外图像解锁。采用近红外图像，即使在黑暗环境下，也可以很好地识别出对象(例如人脸)。因此，近红外图像解锁可以充分弥补RGB图像解锁的不足，二者结合使用，可以大大提高解锁的速度和准确度。
示例性地，根据本发明实施例的解锁方法可以在具有存储器和处理器的设备、装置或者***中实现。
根据本发明实施例的解锁方法可以部署在图像采集端处，例如，在安防应用领域，可以部署在门禁***的图像采集端；在金融应用领域，可以部署在个人终端处，诸如智能电话、平板电脑、个人计算机等。
替代地，根据本发明实施例的解锁方法还可以分布地部署在服务器端(或云端)和个人终端处。例如，可以在客户端获取待认证图像，客户端将获取的图像传送给服务器端(或云端)，由服务器端(或云端)进行解锁，并将是否解锁的结果反馈给客户端。
根据本发明实施例，在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果包括：将待认证图像与第一底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果；和/或在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果包括：将待认证图像与第二底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果。
根据本发明实施例，对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，对该待认证图像进行RGB对象认证，以获得该待认证图像的认证结果包括：对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，将该待认证图像与第一底库图像进行对象对比，以获得该待认证图像的对象对比结果；至少基于该待认证图像的对象对比结果确定该待认证图像的认证结果。
示例性地，第一底库图像可以包括第一已知对象的RGB图像和/或近红外图像。比较可取的是，第一底库图像包括第一已知对象的RGB图像。第一已知对象的RGB图像可以是在正常光场景下采集获得的，这样的RGB图像可以比较清楚准确地反映对象的特征，因此可以保证底库的质量，有利于获得较佳的对象对比效果。例如，第一已知对象为第一已知人脸，第一已知人脸可以是已在待解锁设备上注册的人脸，例如移动终端的拥有者的人脸。
需注意，本文采用的“第一”、“第二”这类术语仅用于区分目的，其并不表示顺序或其他特殊含义。
底库中可以存储若干第一底库图像，将每个待认证图像与底库中的第一底库图像逐一进行对比。对于每个待认证图像，如果底库中存在与该待认证图像相匹配的第一底库图像，即存在与待认证图像中的待认证人脸匹配的已知人脸，则可以确定该待认证图像的人脸对比通过。反之，如果底库中不存在与该待认证图像相匹配的第一底库图像，即不存在与待认证图像中的待认证人脸匹配的已知人脸，则可以确定该待认证图像的人脸对比未通过。与待认证图像相匹配的第一底库图像可以是该第一底库图像中的已知人脸与待认证图像中的待认证人脸之间的相似度超过第一相似度阈值。
根据本发明实施例，对于至少一个待认证图像中的每一个，在该待认证图像是近红外图像的情况下，对该待认证图像进行近红外对象认证，以获得该待认证图像的认证结果包括：对于至少一个待认证图像中的每一个，在该待认证图像是近红外图像的情况下，将该待认证图像与第二底库图像进行对象对比，以获得该待认证图像的对象对比结果；至少基于该待认证图像的对象对比结果确定该待认证图像的认证结果。
示例性地，第二底库图像可以包括第二已知对象的RGB图像和/或近红外图像。
与RGB图像类似地，在待认证图像是近红外图像的情况下，也可以进行人脸对比。底库中可以包括若干第二底库图像，将每个待认证图像与底库中的第二底库图像逐一进行对比。对于每个待认证图像，如果底库中存在与该待认证图像相匹配的第二底库图像，即存在与待认证图像中的待认证人脸匹配的已知人脸，则可以确定该待认证图像的人脸对比通过。反之，如果底库中不存在与该待认证图像相匹配的第二底库图像，即不存在与待认证图像中的待认证人脸匹配的已知人脸，则可以确定该待认证图像的人脸对比未通过。与待认证图像相匹配的第二底库图像可以是该第二底库图像中的已知人脸与待认证图像中的待认证人脸之间的相似度超过第二相似度阈值。第二相似度阈值与上述第一相似度阈值可以相同，也可以不同，其可以根据需要设定。
第一底库图像和第二底库图像可以是不同的图像，也可以是相同的图像。也就是说，待认证图像为RGB图像和近红外图像时，可以分别与不同的底库图像进行对比，也可以与相同的底库图像进行对比，这可以根据需要设定。
上述基于第一底库图像的RGB对象对比的实现方案与基于第二底库图像的近红外对象对比的实现方案可以在同一实施例中实现，也可以在不同实施例中实现。
根据本发明实施例，在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果还包括：对待认证图像进行近红外活体检测，以获得待认证图像的活体检测结果；在待认证图像是近红外图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，对该待认证图像进行RGB对象认证，以获得该待认证图像的认证结果还包括：对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，对该待认证图像进行RGB活体检测，以获得该待认证图像的活体检测结果；对于至少一个待认证图像中的每一个，在该待认证图像是RGB图像的情况下，至少基于该待认证图像的对象对比结果确定该待认证图像的认证结果包括：基于该待认证图像的对象对比结果和活体检测结果确定该待认证图像的认证结果。
除了进行对象对比之外，还可以选择结合活体检测来进行对象认证。实施活体检测可以防止非法攻击者采用面具、视频、照片等方式攻击解锁***，对合法用户的利益造成损失。
RGB活体检测是针对RGB图像进行的活体检测，其可以采用任何合适的活体检测方式实现，例如基于动作指令的活体检测等。
在一个示例中，如果待认证图像的对象对比和RGB活体检测都通过，即对象对比结果指示存在与待认证图像中的待认证对象匹配的已知对象，并且待认证图像中的待认证对象为活体，则可以确定待认证图像的认证通过。反之，则确定待认证图像的认证未通过。确定待认证图像的认证通过时，可以确定解锁，进而可以执行相应的解锁操作。解锁操作可以包括点亮屏幕、向用户授予特定应用程序的操作权等。
根据本发明实施例，在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果还包括：对待认证图像进行近红外活体检测，以获得待认证图像的活体检测结果；在待认证图像是近红外图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
对于至少一个待认证图像中的每一个，在该待认证图像是近红外图像的情况下，对该待认证图像进行近红外对象认证，以获得该待认证图像的认证结果还包括：对于至少一个待认证图像中的每一个，在该待认证图像是近红外图像的情况下，对该待认证图像进行近红外活体检测，以获得该待认证图像的活体检测结果；对于至少一个待认证图像中的每一个，在该待认证图像是近红外图像的情况下，至少基于该待认证图像的对象对比结果确定该待认证图像的认证结果包括：基于该待认证图像的对象对比结果和活体检测结果确定该待认证图像的认证结果。
与RGB图像类似地，在待认证图像是近红外图像的情况下，可以结合人脸对比和活体检测一起进行人脸认证。近红外活体检测是针对近红外图像进行的活体检测，其可以采用任何合适的活体检测方式实现，例如基于近红外光的反射特性的活体检测。
在一个示例中，可以采用统一的算法模块实现RGB活体检测和近红外活体检测。例如，可以构建合适的神经网络模型，无论输入的图像是RGB图像还是近红外图像，该神经网络模型都可以对输入的图像进行活体检测。该神经网络模型可以通过预先训练来使其实现这样的功能。
在一个示例中，如果待认证图像的对象对比和近红外活体检测都通过，即对象对比结果指示存在与待认证图像中的待认证对象匹配的已知对象，并且待认证图像中的待认证对象为活体，则可以确定待认证图像的认证通过。反之，则确定待认证图像的认证未通过。
根据本发明实施例，至少一个待认证图像包括RGB图像和近红外图像的两个待认证图像，步骤S230可以包括：如果两个待认证图像的认证结果均指示对象认证通过，并且两个待认证图像中的对象与同一已知对象匹配，则确定解锁，否则确定不解锁。
如上文所述，可以基于单个图像的认证结果确定是否解锁，也可以结合多个不同类型的图像的认证结果确定是否解锁。例如，假设图像采集装置可以针对同一人脸采集两个待认证图像，分别是RGB图像和近红外图像。在这样的示例中，可以分别针对RGB图像和近红外图像进行各自的人脸认证，分别获得RGB图像和近红外图像的认证结果。在一个示例中，如果RGB图像和近红外图像均指示人脸认证通过，且这两个图像中的人脸与同一已知人脸匹配，则可以确定解锁。同时结合RGB图像和近红外图像这两种图像的认证结果，可以提升人脸解锁***的安全性。
根据本发明实施例，步骤S210可以包括：获取至少一个初始图像；对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件，如果满足，则确定该初始图像是至少一个待认证图像之一，或者对该初始图像进行变换以获得至少一个待认证图像之一；其中，预设条件包括以下项中的一项或多项：初始图像是预设类型的图像，其中，预设类型的图像为RGB图像和/或近红外图像，并且预设类型的图像为默认的或者基于用户指令确定；初始图像的图像亮度处于第一亮度范围；在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围；在初始图像中检测到合格的对象。
例如，在进入人脸认证步骤之前，可以首先通过一些预设条件对图像采集装置采集到的初始图像进行筛选，满足预设条件的图像才进入后续的人脸认证步骤，对于不满足预设条件的图像，可以确定不解锁，并且可以输出一些反馈信息，例如解锁失败信息等。
对于满足预设条件的初始图像，可以直接将其作为待认证图像进入后续的人脸认证步骤，也可以对其进行一些变换，获得变换后的图像作为待认证图像进入后续的人脸认证步骤。示例性地，初始图像的变换可以包括对初始图像进行缩放和/或裁剪。例如，缩放可以是将初始图像归一化到预定大小。例如，裁剪可以是从初始图像中提取仅包含对象的图像块作为待认证图像。
预设条件可以根据需要任意设定。在一个示例中，预设条件可以包括：初始图像是预设类型的图像。例如，用户可以通过诸如键盘、鼠标、和/或触摸屏的输入装置向解锁***输入选择RGB图像和/或近红外图像作为预设类型的图像的用户指令。解锁***可以从图像采集装置采集到的初始图像中选择用户指令所指示类型的图像，将剩余初始图像丢弃。此外，还可以在解锁***中默认设置预设类型的图像，解锁***自动从初始图像中选择符合默认设置的图像，将剩余初始图像丢弃。
在一个示例中，预设条件可以包括：初始图像的图像亮度处于第一亮度范围。示例性地，所述图像亮度为初始图像的平均亮度。第一亮度范围可以是任何合适的亮度范围，其可以根据需要设定，本发明不对此进行限制。例如，第一亮度范围可以是大于第一亮度阈值，第一亮度阈值可以是能够满足正确识别人脸这一要求的最低图像亮度。
在一个示例中，预设条件可以包括：在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围。第二亮度范围可以是任何合适的亮度范围，其可以根据需要设定，本发明不对此进行限制。例如，从初始图像中获取若干图像区域之后，可以判断其中是否存在至少一个图像区域的区域亮度超过第二亮度阈值。可以理解，即使初始图像的整体平均亮度达到要求(如处于第一亮度范围)，但是仍然有可能无法检测到人脸。要想正确识别人脸，人脸区域也需要具有足够的亮度。可以首先确定初始图像中是否存在预定数目(例如一个)的图像区域的亮度是足够的，以保证初始图像中有可能识别出人脸，在这种情况下继续进行是否解锁的判断才更有意义。因此，这一预设条件的设置可以减少不必要的操作，提高解锁的效率。
示例性地，解锁方法200还可以包括：对于至少一个初始图像中的每一个，以预设滑动窗在该初始图像上滑动，以获得该初始图像的第一数目的图像区域。预设滑动窗的大小和长宽比例(统称规格)可以任意设定，并且可以包括一种或多种规格的滑动窗。滑动窗在初始图像上滑动，可以获得若干图像区域。本文将初始图像上获得的图像区域的数目称为第一数目，其可以是预定数目，也可以基于图像区域的实际获取情况(例如初始图像的大小、滑动窗的规格、滑动窗的滑动步长)而定。
在一个示例中，预设条件可以包括：在初始图像中检测到合格的对象。示例性地，在初始图像中检测到合格的对象可以包括：在初始图像中检测到的对象的对象大小、对象清晰度、对象角度、对象闭眼程度、对象遮挡程度中的一项或多项满足对应要求的对象。
示例性地，解锁方法200还可以包括：对于至少一个初始图像中的每一个，对该初始图像进行对象检测。随后，可以基于对象检测结果判断是否检测到合格的对象。下面以对象是人脸为例进行说明。例如，可以对每个初始图像进行人脸检测，如果在初始图像中未检测到人脸，则可以确定这一预设条件未满足。如果在初始图像中检测到人脸，但是人脸的大小未达到预设大小，则可以确定这一预设条件未满足。与人脸大小类似地，人脸的其他参数，例如人脸清晰度、人脸角度、人脸闭眼程度、人脸遮挡程度等，均可以具有各自对应的要求，例如预设清晰度、预设角度、预设闭眼程度、预设遮挡程度等。可以将人脸的每项参数与各自对应的要求对比，判断各参数是否满足要求，本文不再一一赘述。
上面描述了预设条件的几种示例，其并非对本发明的限制。考虑哪些条件作为预设条件可以根据需要设定。经过基于预设条件的筛选之后，可以获得若干符合要求的初始图像，随后可以基于这些初始图像获得待认证图像，并对待认证图像执行后续的对象认证操作。
根据本发明实施例，在对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件之后，解锁方法200还可以包括：如果初始图像不满足预设条件，则输出解锁失败信息。
对于至少一个初始图像中的每一个，可以进行预设条件的判断，如果该初始图像不满足预设条件，则输出解锁失败信息。图3示出根据本发明一个实施例的解锁方法的流程示意图。如图3所示，首先对采集的人脸图像进行亮度判断，如果亮度判断通过则进行人脸检测和闭眼检测，如果人脸检测和闭眼检测通过则可以进行后续人脸认证。针对RGB图像和近红外图像分别执行各自的人脸认证操作。在上述亮度判断、人脸检测、闭眼检测、人脸认证的过程中，如果某项未通过，均可以获得失败的解锁结果，在这种情况下，可以输出解锁失败信息。如果上述各项操作均通过，则可以获得成功的解锁结果，在这种情况下，可以执行上文描述的解锁操作。
解锁失败信息可以包括文字、语音、图像信息中的一项或多项，其可以通过诸如显示器和/或扬声器的输出装置输出，以供用户查看。这样方便用户及时获知解锁的状态，可以增强设备的交互性，提升用户体验。
根据本发明实施例，在步骤S210之后，解锁方法200还可以包括：对于至少一个待认证图像中的每一个，基于该待认证图像的数据来源信息判断该待认证图像是RGB图像还是近红外图像，其中，数据来源信息用于指示对应的待认证图像来源于RGB成像模式或近红外成像模式。
数据来源信息可以指示待认证图像来源于何种成像模式。例如，当待认证图像来源于近红外成像模式时，数据来源信息可以标记为true，当待认证图像来源于RGB成像模式时，数据来源信息可以标记为false。示例性地，数据来源信息可以随对应的待认证图像一起传输到解锁***，解锁***基于数据来源信息判断当前接收的待认证图像是RGB图像还是近红外图像。
在一个示例中，诸如移动终端的设备可以包括光照传感器，用于感应设备周围的光照情况。光照传感器可以输出反映当前光照情况的照度值。设备可以基于该照度值判断当前的环境是正常光环境还是黑暗环境，并相应选择合适的成像模式。在一个示例中，数据来源信息可以包括光照传感器输出的照度值。示例性地，在图像采集装置基于照度值切换成像模式的示例中，解锁***可以基于该照度值确定当前接收到的图像是RGB图像还是近红外图像。例如，当数据来源信息所包括的照度值指示采集待认证图像时的环境为正常光环境时，可以认为待认证图像为RGB图像，反之，当数据来源信息所包括的照度值指示采集待认证图像时的环境为黑暗环境时，可以认为待认证图像为近红外图像。
待认证图像的数据来源信息与该待认证图像对应的初始图像的数据来源信息一致。
根据本发明另一方面，提供一种解锁装置。图4示出了根据本发明一个实施例的解锁装置400的示意性框图。
如图4所示，根据本发明实施例的解锁装置400包括获取模块410、认证模块420和解锁确定模块430。所述各个模块可分别执行上文中结合图2-3描述的解锁方法的各个步骤/功能。以下仅对该解锁装置400的各部件的主要功能进行描述，而省略以上已经描述过的细节内容。
获取模块410用于获取至少一个待认证图像。获取模块410可以由图1所示的电子设备中的处理器102运行存储装置104中存储的程序指令来实现。
认证模块420用于在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果；在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果。认证模块420可以由图1所示的电子设备中的处理器102运行存储装置104中存储的程序指令来实现。
解锁确定模块430用于基于所述至少一个认证结果确定是否解锁。解锁确定模块430可以由图1所示的电子设备中的处理器102运行存储装置104中存储的程序指令来实现。
示例性地，认证模块420包括：第一对比子模块，用于在待认证图像是RGB图像的情况下，将待认证图像与第一底库图像进行对象对比，以获得待认证图像的对象对比结果；第一确定子模块，用于至少基于待认证图像的对象对比结果确定待认证图像的认证结果；和/或认证模块420包括：第二对比子模块，用于在待认证图像是近红外图像的情况下，将待认证图像与第二底库图像进行对象对比，以获得待认证图像的对象对比结果；第二确定子模块，用于至少基于待认证图像的对象对比结果确定待认证图像的认证结果。
示例性地，认证模块420还包括：第一活体检测子模块，用于在待认证图像是RGB图像的情况下，对待认证图像进行RGB活体检测，以获得待认证图像的活体检测结果；第一确定子模块具体用于：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，认证模块420还包括：第二活体检测子模块，用于在待认证图像是近红外图像的情况下，对待认证图像进行近红外活体检测，以获得待认证图像的活体检测结果；第二确定子模块具体用于：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，第一底库图像包括第一已知对象的RGB图像和/或近红外图像，第二底库图像包括第二已知对象的RGB图像和/或近红外图像。
示例性地，至少一个待认证图像包括RGB图像和近红外图像的两个待认证图像，解锁确定模块430具体用于：如果两个待认证图像的认证结果均指示对象认证通过，并且两个待认证图像中的对象与同一已知对象匹配，则确定解锁，否则确定不解锁。
示例性地，获取模块410包括：获取子模块，用于获取至少一个初始图像；判断子模块，用于对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件，如果满足，则确定该初始图像是至少一个待认证图像之一，或者对该初始图像进行变换以获得至少一个待认证图像之一；其中，预设条件包括以下项中的一项或多项：初始图像是预设类型的图像，其中，预设类型的图像为RGB图像和/或近红外图像，并且预设类型的图像为默认的或者基于用户指令确定；初始图像的图像亮度处于第一亮度范围；在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围；在初始图像中检测到合格的对象。
示例性地，在初始图像中检测到合格的对象包括：在初始图像中检测到的对象的对象大小、对象清晰度、对象角度、对象闭眼程度、对象遮挡程度中的一项或多项满足对应要求的对象。
示例性地，解锁装置400还包括：区域获得模块(未示出)，用于对于至少一个初始图像中的每一个，以预设滑动窗在该初始图像上滑动，以获得该初始图像的第一数目的图像区域。
示例性地，解锁装置400还包括：输出模块(未示出)，用于在判断子模块对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件之后，如果初始图像不满足预设条件，则输出解锁失败信息。
示例性地，解锁装置400还包括：判断模块(未示出)，用于在获取模块410获取至少一个待认证图像之后，对于至少一个待认证图像中的每一个，基于该待认证图像的数据来源信息判断该待认证图像是RGB图像还是近红外图像，其中，数据来源信息用于指示对应的待认证图像来源于RGB成像模式或近红外成像模式。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
图5示出了根据本发明一个实施例的解锁***500的示意性框图。解锁***500包括图像采集装置510、存储装置(即存储器)520、以及处理器530。
所述图像采集装置510用于采集图像(上述初始图像)。图像采集装置510是可选的，解锁***500可以不包括图像采集装置510。在这种情况下，可以利用其他图像采集装置采集图像，并将采集的图像发送给解锁***500。
所述存储装置520存储用于实现根据本发明实施例的解锁方法中的相应步骤的计算机程序指令。
所述处理器530用于运行所述存储装置520中存储的计算机程序指令，以执行根据本发明实施例的解锁方法的相应步骤。
在一个实施例中，所述计算机程序指令被所述处理器530运行时用于执行以下步骤：获取至少一个待认证图像；在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果；在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果；基于至少一个认证结果确定是否解锁。
示例性地，所述计算机程序指令被所述处理器530运行时所用于执行的在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果的步骤包括：将待认证图像与第一底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定该待认证图像的认证结果；和/或所述计算机程序指令被所述处理器530运行时所用于执行的在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果的步骤包括：将待认证图像与第二底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果。
示例性地，所述计算机程序指令被所述处理器530运行时所用于执行的在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得该待认证图像的认证结果的步骤还包括：对待认证图像进行RGB活体检测，以获得待认证图像的活体检测结果；所述计算机程序指令被所述处理器530运行时所用于执行的在待认证图像是RGB图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果的步骤包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，所述计算机程序指令被所述处理器530运行时所用于执行的在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果的步骤还包括：对待认证图像进行近红外活体检测，以获得待认证图像的活体检测结果；所述计算机程序指令被所述处理器530运行时所用于执行的在待认证图像是近红外图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果的步骤包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，第一底库图像包括第一已知对象的RGB图像和/或近红外图像，第二底库图像包括第二已知对象的RGB图像和/或近红外图像。
示例性地，至少一个待认证图像包括RGB图像和近红外图像的两个待认证图像，所述计算机程序指令被所述处理器530运行时所用于执行的基于至少一个认证结果确定是否解锁的步骤包括：如果两个待认证图像的认证结果均指示对象认证通过，并且两个待认证图像中的对象与同一已知对象匹配，则确定解锁，否则确定不解锁。
示例性地，所述计算机程序指令被所述处理器530运行时所用于执行的获取至少一个待认证图像的步骤包括：获取至少一个初始图像；对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件，如果满足，则确定该初始图像是至少一个待认证图像之一，或者对该初始图像进行变换以获得至少一个待认证图像之一；其中，预设条件包括以下项中的一项或多项：初始图像是预设类型的图像，其中，预设类型的图像为RGB图像和/或近红外图像，并且预设类型的图像为默认的或者基于用户指令确定；初始图像的图像亮度处于第一亮度范围；在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围；在初始图像中检测到合格的对象。
示例性地，在初始图像中检测到合格的对象包括：在初始图像中检测到的对象的对象大小、对象清晰度、对象角度、对象闭眼程度、对象遮挡程度中的一项或多项满足对应要求的对象。
示例性地，所述计算机程序指令被所述处理器530运行时还用于执行以下步骤：对于至少一个初始图像中的每一个，以预设滑动窗在该初始图像上滑动，以获得该初始图像的第一数目的图像区域。
示例性地，在所述计算机程序指令被所述处理器530运行时所用于执行的对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件的步骤之后，所述计算机程序指令被所述处理器530运行时还用于执行以下步骤：如果初始图像不满足预设条件，则输出解锁失败信息。
示例性地，在所述计算机程序指令被所述处理器530运行时所用于执行的获取至少一个待认证图像的步骤之后，所述计算机程序指令被所述处理器530运行时还用于执行以下步骤：对于至少一个待认证图像中的每一个，基于该待认证图像的数据来源信息判断该待认证图像是RGB图像还是近红外图像，其中，数据来源信息用于指示对应的待认证图像来源于RGB成像模式或近红外成像模式。
此外，根据本发明实施例，还提供了一种存储介质，在所述存储介质上存储了程序指令，在所述程序指令被计算机或处理器运行时用于执行本发明实施例的解锁方法的相应步骤，并且用于实现根据本发明实施例的解锁装置中的相应模块。所述存储介质例如可以包括智能电话的存储卡、平板电脑的存储部件、个人计算机的硬盘、只读存储器(ROM)、可擦除可编程只读存储器(EPROM)、便携式紧致盘只读存储器(CD-ROM)、USB存储器、或者上述存储介质的任意组合。
在一个实施例中，所述程序指令在被计算机或处理器运行时可以使得计算机或处理器实现根据本发明实施例的解锁装置的各个功能模块，并和/或者可以执行根据本发明实施例的解锁方法。
在一个实施例中，所述程序指令在运行时用于执行以下步骤：获取至少一个待认证图像；在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果；在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果；基于至少一个认证结果确定是否解锁。
示例性地，所述程序指令在运行时所用于执行的在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果的步骤包括：将待认证图像与第一底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果；和/或所述程序指令在运行时所用于执行的在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果的步骤包括：将待认证图像与第二底库图像进行对象对比，以获得待认证图像的对象对比结果；至少基于待认证图像的对象对比结果确定待认证图像的认证结果。
示例性地，所述程序指令在运行时所用于执行的在待认证图像是RGB图像的情况下，对待认证图像进行RGB对象认证，以获得待认证图像的认证结果的步骤还包括：对待认证图像进行RGB活体检测，以获得待认证图像的活体检测结果；所述程序指令在运行时所用于执行的在待认证图像是RGB图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果的步骤包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，所述程序指令在运行时所用于执行的在待认证图像是近红外图像的情况下，对待认证图像进行近红外对象认证，以获得待认证图像的认证结果的步骤还包括：对待认证图像进行近红外活体检测，以获得待认证图像的活体检测结果；所述程序指令在运行时所用于执行的在待认证图像是近红外图像的情况下，至少基于待认证图像的对象对比结果确定待认证图像的认证结果的步骤包括：基于待认证图像的对象对比结果和活体检测结果确定待认证图像的认证结果。
示例性地，第一底库图像包括第一已知对象的RGB图像和/或近红外图像，第二底库图像包括第二已知对象的RGB图像和/或近红外图像。
示例性地，至少一个待认证图像包括RGB图像和近红外图像的两个待认证图像，所述程序指令在运行时所用于执行的基于至少一个认证结果确定是否解锁的步骤包括：如果两个待认证图像的认证结果均指示对象认证通过，并且两个待认证图像中的对象与同一已知对象匹配，则确定解锁，否则确定不解锁。
示例性地，所述程序指令在运行时所用于执行的获取至少一个待认证图像的步骤包括：获取至少一个初始图像；对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件，如果满足，则确定该初始图像是至少一个待认证图像之一，或者对该初始图像进行变换以获得至少一个待认证图像之一；其中，预设条件包括以下项中的一项或多项：初始图像是预设类型的图像，其中，预设类型的图像为RGB图像和/或近红外图像，并且预设类型的图像为默认的或者基于用户指令确定；初始图像的图像亮度处于第一亮度范围；在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围；在初始图像中检测到合格的对象。
示例性地，在初始图像中检测到合格的对象包括：在初始图像中检测到的对象的对象大小、对象清晰度、对象角度、对象闭眼程度、对象遮挡程度中的一项或多项满足对应要求的对象。
示例性地，所述程序指令在运行时还用于执行以下步骤：对于至少一个初始图像中的每一个，以预设滑动窗在该初始图像上滑动，以获得该初始图像的第一数目的图像区域。
示例性地，在所述程序指令在运行时所用于执行的对于至少一个初始图像中的每一个，判断该初始图像是否满足预设条件的步骤之后，所述程序指令在运行时还用于执行以下步骤：如果初始图像不满足预设条件，则输出解锁失败信息。
示例性地，在所述程序指令在运行时所用于执行的获取至少一个待认证图像的步骤之后，所述程序指令在运行时还用于执行以下步骤：对于至少一个待认证图像中的每一个，基于该待认证图像的数据来源信息判断该待认证图像是RGB图像还是近红外图像，其中，数据来源信息用于指示对应的待认证图像来源于RGB成像模式或近红外成像模式。
根据本发明实施例的解锁***中的各模块可以通过根据本发明实施例的实施解锁的电子设备的处理器运行在存储器中存储的计算机程序指令来实现，或者可以在根据本发明实施例的计算机程序产品的计算机可读存储介质中存储的计算机指令被计算机运行时实现。
尽管这里已经参考附图描述了示例实施例，应理解上述示例实施例仅仅是示例性的，并且不意图将本发明的范围限制于此。本领域普通技术人员可以在其中进行各种改变和修改，而不偏离本发明的范围和精神。所有这些改变和修改意在被包括在所附权利要求所要求的本发明的范围之内。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。例如，以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个设备，或一些特征可以忽略，或不执行。
在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。
类似地，应当理解，为了精简本发明并帮助理解各个发明方面中的一个或多个，在对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该本发明的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如相应的权利要求书所反映的那样，其发明点在于可以用少于某个公开的单个实施例的所有特征的特征来解决相应的技术问题。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。
本领域的技术人员可以理解，除了特征之间相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。
此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。
本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的解锁装置中的一些模块的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。
应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
以上所述，仅为本发明的具体实施方式或对具体实施方式的说明，本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。本发明的保护范围应以权利要求的保护范围为准。

Claims (14)

1.一种解锁方法，包括：
获取至少一个待认证图像；
在所述待认证图像是RGB图像的情况下，对所述待认证图像进行RGB对象认证，以获得所述待认证图像的认证结果；
在所述待认证图像是近红外图像的情况下，对所述待认证图像进行近红外对象认证，以获得所述待认证图像的认证结果；
基于至少一个所述认证结果确定是否解锁。
2.如权利要求1所述的方法，其中，
所述在所述待认证图像是RGB图像的情况下，对所述待认证图像进行RGB对象认证，以获得所述待认证图像的认证结果包括：
将所述待认证图像与第一底库图像进行对象对比，以获得所述待认证图像的对象对比结果；
至少基于所述待认证图像的对象对比结果确定所述待认证图像的认证结果；和/或
所述在所述待认证图像是近红外图像的情况下，对所述待认证图像进行近红外对象认证，以获得所述待认证图像的认证结果包括：
将所述待认证图像与第二底库图像进行对象对比，以获得所述待认证图像的对象对比结果；
至少基于所述待认证图像的对象对比结果确定所述待认证图像的认证结果。
3.如权利要求2所述的方法，其中，
所述在所述待认证图像是RGB图像的情况下，对所述待认证图像进行RGB对象认证，以获得所述待认证图像的认证结果还包括：
对所述待认证图像进行RGB活体检测，以获得所述待认证图像的活体检测结果；
所述在所述待认证图像是RGB图像的情况下，至少基于所述待认证图像的对象对比结果确定所述待认证图像的认证结果包括：
基于所述待认证图像的对象对比结果和活体检测结果确定所述待认证图像的认证结果。
4.如权利要求2或3所述的方法，其中，所述在所述待认证图像是近红外图像的情况下，对所述待认证图像进行近红外对象认证，以获得所述待认证图像的认证结果还包括：
对所述待认证图像进行近红外活体检测，以获得所述待认证图像的活体检测结果；
所述在所述待认证图像是近红外图像的情况下，至少基于所述待认证图像的对象对比结果确定所述待认证图像的认证结果包括：
基于所述待认证图像的对象对比结果和活体检测结果确定所述待认证图像的认证结果。
5.如权利要求2或3所述的方法，其中，所述第一底库图像包括第一已知对象的RGB图像和/或近红外图像，所述第二底库图像包括第二已知对象的RGB图像和/或近红外图像。
6.如权利要求1至3任一项所述的方法，其中，所述至少一个待认证图像包括RGB图像和近红外图像的两个待认证图像，所述基于至少一个所述认证结果确定是否解锁包括：
如果所述两个待认证图像的所述认证结果均指示对象认证通过，并且所述两个待认证图像中的对象与同一已知对象匹配，则确定解锁，否则确定不解锁。
7.如权利要求1至3任一项所述的方法，其中，所述获取至少一个待认证图像包括：
获取至少一个初始图像；
对于所述至少一个初始图像中的每一个，判断该初始图像是否满足预设条件，如果满足，则确定该初始图像是所述至少一个待认证图像之一，或者对该初始图像进行变换以获得所述至少一个待认证图像之一；
其中，所述预设条件包括以下项中的一项或多项：
初始图像是预设类型的图像，其中，所述预设类型的图像为RGB图像和/或近红外图像，并且所述预设类型的图像为默认的或者基于用户指令确定；
初始图像的图像亮度处于第一亮度范围；
在初始图像的第一数目的图像区域中存在预定数目的图像区域的区域亮度处于第二亮度范围；
在初始图像中检测到合格的对象。
8.如权利要求7所述的方法，其中，所述在初始图像中检测到合格的对象包括：在初始图像中检测到的对象的对象大小、对象清晰度、对象角度、对象闭眼程度、对象遮挡程度中的一项或多项满足对应要求的对象。
9.如权利要求7所述的方法，其中，所述方法还包括：
对于所述至少一个初始图像中的每一个，以预设滑动窗在该初始图像上滑动，以获得该初始图像的第一数目的图像区域。
10.如权利要求7所述的方法，其中，在所述对于所述至少一个初始图像中的每一个，判断该初始图像是否满足预设条件之后，所述方法还包括：
如果所述初始图像不满足所述预设条件，则输出解锁失败信息。
11.如权利要求1至3任一项所述的方法，其中，在所述获取至少一个待认证图像之后，所述方法还包括：
对于所述至少一个待认证图像中的每一个，基于该待认证图像的数据来源信息判断该待认证图像是RGB图像还是近红外图像，其中，所述数据来源信息用于指示对应的待认证图像来源于RGB成像模式或近红外成像模式。
12.一种解锁装置，包括：
获取模块，用于获取至少一个待认证图像；
认证模块，用于在所述待认证图像是RGB图像的情况下，对所述待认证图像进行RGB对象认证，以获得所述待认证图像的认证结果；在所述待认证图像是近红外图像的情况下，对所述待认证图像进行近红外对象认证，以获得所述待认证图像的认证结果；
解锁确定模块，用于基于至少一个所述认证结果确定是否解锁。
13.一种解锁***，包括处理器和存储器，其中，所述存储器中存储有计算机程序指令，所述计算机程序指令被所述处理器运行时用于执行如权利要求1至11任一项所述的解锁方法。
14.一种存储介质，在所述存储介质上存储了程序指令，所述程序指令在运行时用于执行如权利要求1至11任一项所述的解锁方法。
CN201810418988.1A 2018-05-04 2018-05-04 解锁方法、装置和***及存储介质 Pending CN108875338A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201810418988.1A CN108875338A (zh) 2018-05-04 2018-05-04 解锁方法、装置和***及存储介质
US16/147,102 US10956553B2 (en) 2018-05-04 2018-09-28 Method of unlocking an electronic device, unlocking device and system and storage medium

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810418988.1A CN108875338A (zh) 2018-05-04 2018-05-04 解锁方法、装置和***及存储介质

Publications (1)

Publication Number Publication Date
CN108875338A true CN108875338A (zh) 2018-11-23

Family

ID=64327539

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810418988.1A Pending CN108875338A (zh) 2018-05-04 2018-05-04 解锁方法、装置和***及存储介质

Country Status (2)

Country Link
US (1) US10956553B2 (zh)
CN (1) CN108875338A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287672A (zh) * 2019-06-27 2019-09-27 深圳市商汤科技有限公司 验证方法及装置、电子设备和存储介质
CN110287671A (zh) * 2019-06-27 2019-09-27 深圳市商汤科技有限公司 验证方法及装置、电子设备和存储介质
CN110705352A (zh) * 2019-08-29 2020-01-17 杭州晟元数据安全技术股份有限公司 基于深度学习的指纹图像检测方法
CN110874588A (zh) * 2020-01-17 2020-03-10 南京甄视智能科技有限公司 动态优化人脸识别中光线影响的方法与装置

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110008783A (zh) * 2018-01-04 2019-07-12 杭州海康威视数字技术股份有限公司 基于神经网络模型的人脸活体检测方法、装置及电子设备
CN111046703B (zh) * 2018-10-12 2023-04-18 杭州海康威视数字技术股份有限公司 人脸防伪检测方法、装置及多目相机
FR3109688B1 (fr) * 2020-04-24 2022-04-29 Idemia Identity & Security France Procédé d’authentification ou d’identification d’un individu

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103400108A (zh) * 2013-07-10 2013-11-20 北京小米科技有限责任公司 人脸识别方法、装置和移动终端
CN106534206A (zh) * 2016-12-28 2017-03-22 汉王科技股份有限公司 一种基于云平台的身份认证方法、装置以及***
US9886640B1 (en) * 2016-08-08 2018-02-06 International Business Machines Corporation Method and apparatus to identify a live face image using a thermal radiation sensor and a visual radiation sensor

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8627939B1 (en) * 2002-09-25 2014-01-14 Cummins-Allison Corp. Apparatus and system for imaging currency bills and financial documents and method for using the same
US8079079B2 (en) * 2005-06-29 2011-12-13 Microsoft Corporation Multimodal authentication
US9082235B2 (en) * 2011-07-12 2015-07-14 Microsoft Technology Licensing, Llc Using facial data for device authentication or subject identification
US20170161557A9 (en) * 2011-07-13 2017-06-08 Sionyx, Inc. Biometric Imaging Devices and Associated Methods
US20150317464A1 (en) * 2014-04-30 2015-11-05 Motorola Mobility Llc Selective Infrared Filtering for Imaging-Based User Authentication and Visible Light Imaging
WO2016074247A1 (en) * 2014-11-15 2016-05-19 Beijing Kuangshi Technology Co., Ltd. Face detection using machine learning
US9613423B2 (en) * 2015-06-12 2017-04-04 Google Inc. Using a depth map of a monitored scene to identify floors, walls, and ceilings
KR102371211B1 (ko) * 2017-03-24 2022-03-07 삼성전자 주식회사 복수의 카메라를 이용하여 생체 정보를 인증하는 방법 및 장치
US20190156003A1 (en) * 2017-11-20 2019-05-23 Motorola Mobility Llc Methods and Systems for Launching Additional Authenticators in an Electronic Device
WO2019196683A1 (zh) * 2018-04-12 2019-10-17 Oppo广东移动通信有限公司 图像处理方法、装置、计算机可读存储介质和电子设备

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103400108A (zh) * 2013-07-10 2013-11-20 北京小米科技有限责任公司 人脸识别方法、装置和移动终端
US9886640B1 (en) * 2016-08-08 2018-02-06 International Business Machines Corporation Method and apparatus to identify a live face image using a thermal radiation sensor and a visual radiation sensor
CN106534206A (zh) * 2016-12-28 2017-03-22 汉王科技股份有限公司 一种基于云平台的身份认证方法、装置以及***

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110287672A (zh) * 2019-06-27 2019-09-27 深圳市商汤科技有限公司 验证方法及装置、电子设备和存储介质
CN110287671A (zh) * 2019-06-27 2019-09-27 深圳市商汤科技有限公司 验证方法及装置、电子设备和存储介质
CN110287671B (zh) * 2019-06-27 2021-07-30 深圳市商汤科技有限公司 验证方法及装置、电子设备和存储介质
CN110705352A (zh) * 2019-08-29 2020-01-17 杭州晟元数据安全技术股份有限公司 基于深度学习的指纹图像检测方法
CN110874588A (zh) * 2020-01-17 2020-03-10 南京甄视智能科技有限公司 动态优化人脸识别中光线影响的方法与装置

Also Published As

Publication number Publication date
US10956553B2 (en) 2021-03-23
US20190340349A1 (en) 2019-11-07

Similar Documents

Publication Publication Date Title
CN108875338A (zh) 解锁方法、装置和***及存储介质
AU2020201558B2 (en) System and method for authorizing access to access-controlled environments
US11210380B2 (en) System and method for authorizing access to access-controlled environments
US10691939B2 (en) Systems and methods for performing iris identification and verification using mobile devices
US10678898B2 (en) System and method for authorizing access to access-controlled environments
CN109117700A (zh) 脸部验证方法和设备
KR101415287B1 (ko) 라이브니스 검출을 위한 방법, 컴퓨터 판독가능한 저장 디바이스 및 컴퓨팅 디바이스
KR101393717B1 (ko) 얼굴 인식 기술
US10783388B2 (en) Spoof detection using multiple image acquisition devices
CN108664880A (zh) 活性测试方法和设备
CN110069970A (zh) 活性测试方法和设备
CN108573203A (zh) 身份认证方法和装置及存储介质
CN105956520B (zh) 一种基于多模式生物识别信息的个人识别装置和方法
CN108875546A (zh) 人脸身份验证方法、***及存储介质
CN106407914A (zh) 用于检测人脸的方法、装置和远程柜员机***
CN108804884A (zh) 身份认证的方法、装置及计算机存储介质
CN108573202A (zh) 身份认证方法、装置和***以及终端、服务器和存储介质
CN107438854A (zh) 使用移动设备捕获的图像执行基于指纹的用户认证的***和方法
CN103383723A (zh) 用于生物特征验证的电子欺骗检测的方法和***
CN107111704A (zh) 基于生物识别***在虹膜内欺骗检测的***和方法
CN109711357A (zh) 一种人脸识别方法及装置
US11741208B2 (en) Spoof detection using illumination sequence randomization
CN108875476A (zh) 自动近红外人脸注册与识别方法、装置和***及存储介质
Goicoechea-Telleria et al. Vulnerabilities of Biometric Systems integrated in Mobile Devices: an evaluation
US11842573B1 (en) Methods and systems for enhancing liveness detection of image data

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination