CN111862031A - 一种人脸合成图检测方法、装置、电子设备及存储介质 - Google Patents
一种人脸合成图检测方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN111862031A CN111862031A CN202010681943.0A CN202010681943A CN111862031A CN 111862031 A CN111862031 A CN 111862031A CN 202010681943 A CN202010681943 A CN 202010681943A CN 111862031 A CN111862031 A CN 111862031A
- Authority
- CN
- China
- Prior art keywords
- face
- face image
- detected
- image
- key point
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 226
- 238000013527 convolutional neural network Methods 0.000 claims abstract description 41
- 238000000034 method Methods 0.000 claims description 54
- 230000015572 biosynthetic process Effects 0.000 claims description 29
- 238000003786 synthesis reaction Methods 0.000 claims description 29
- 239000002131 composite material Substances 0.000 claims description 19
- 230000015654 memory Effects 0.000 claims description 19
- 238000012549 training Methods 0.000 claims description 16
- 238000010586 diagram Methods 0.000 claims description 9
- 238000000605 extraction Methods 0.000 claims description 8
- 238000013215 result calculation Methods 0.000 claims description 6
- 239000000126 substance Substances 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 13
- 238000013135 deep learning Methods 0.000 abstract description 9
- 238000013473 artificial intelligence Methods 0.000 abstract description 2
- 238000012545 processing Methods 0.000 description 12
- 238000004590 computer program Methods 0.000 description 6
- 238000010606 normalization Methods 0.000 description 6
- 238000013528 artificial neural network Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 5
- 230000007547 defect Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000005286 illumination Methods 0.000 description 5
- 230000001815 facial effect Effects 0.000 description 4
- 238000011176 pooling Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 239000000203 mixture Substances 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000001727 in vivo Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000002349 favourable effect Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 230000006403 short-term memory Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20081—Training; Learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20084—Artificial neural networks [ANN]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Health & Medical Sciences (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Multimedia (AREA)
- Quality & Reliability (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
Abstract
本申请公开了一种人脸合成图检测方法、装置、电子设备及存储介质,涉及人工智能、深度学习以及图像识别领域。具体方案为:将待检测人脸图像输入至预先训练的人脸关键点检测模型,得到待检测人脸图像的人脸关键点;基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图;将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,得到待检测人脸图像的检测结果。本申请实施例可以缓解人脸合成图检测的过拟合情况,提高在复杂环境下人脸合成图检测的泛化性和准确性,同时也能避免背景噪声的干扰,从而可以提升对于未知的合成样本的检测效果。
Description
技术领域
本申请涉及计算机技术领域,进一步涉及人工智能、深度学习以及图像识别领域,尤其是一种人脸合成图检测方法、装置、电子设备及存储介质。
背景技术
人脸合成图检测是区分一张图像中的人脸是否为合成的人脸,实现人脸合成图检测的模块是人脸识别***的基础组成模块,用于保证人脸识别***的安全性。基于深度学习技术的人脸合成图检测算法是当前该领域的主流方法。当前人脸合成图检测算法主要使用神经网络的深度学习方法。使用深度学习的人脸合成图检测主要方法有卷积神经网络的合成图判别、基于长短期记忆网络(Long Short-Term Memory,简称LSTM)的合成图判别等方法。
现有技术中,人脸合成图检测模型很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;另外,仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想。
发明内容
本申请提供了一种人脸合成图的方法、装置、电子设备及存储介质,可以缓解人脸合成图检测的过拟合情况,提高在复杂环境下人脸合成图检测的泛化性和准确性,同时也能避免背景噪声的干扰,从而可以提升对于未知的合成样本的检测效果。
第一方面,本申请提供了一种人脸合成图检测方法,所述方法包括:
将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过所述人脸关键点检测模型对所述待检测人脸图像进行关键点提取,得到所述待检测人脸图像的人脸关键点;
基于所述待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;
将全部的人脸关键点对应的区域块合并为所述待检测人脸图像对应的特征图;
将所述待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过所述卷积神经网络对所述待检测人脸图像对应的特征图进行计算,得到所述待检测人脸图像的检测结果;其中,所述检测结果包括:所述待检测人脸图像为合成人脸图像或者非合成人脸图像。
第二方面,本申请提供了一种人脸合成图检测装置,所述装置包括:关键点提取模块、区域块生成模块、区域块合并模块和结果计算模块;其中,
所述关键点提取模块,用于将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过所述人脸关键点检测模型对所述待检测人脸图像进行关键点提取,得到所述待检测人脸图像的人脸关键点;
所述区域块生成模块,用于基于所述待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;
所述区域块合并模块,用于将全部的人脸关键点对应的区域块合并为所述待检测人脸图像对应的特征图;
所述结果计算模块,用于将所述待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过所述卷积神经网络对所述待检测人脸图像对应的特征图进行计算,得到所述待检测人脸图像的检测结果;其中,所述检测结果包括:所述待检测人脸图像为合成人脸图像或者非合成人脸图像。
第三方面,本申请实施例提供了一种电子设备,包括:
一个或多个处理器;
存储器,用于存储一个或多个程序,
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本申请任意实施例所述的人脸合成图检测方法。
第四方面,本申请实施例提供了一种存储介质,其上存储有计算机程序,该程序被处理器执行时实现本申请任意实施例所述的人脸合成图检测方法。
根据本申请的技术解决了现有技术中人脸合成图检测模型很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;以及仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想的技术问题,本申请提供的技术方案,可以缓解人脸合成图检测的过拟合情况,提高人脸合成图检测的泛化性和准确性,提升对于未知的合成样本的检测效果。
应当理解,本部分所描述的内容并非旨在标识本公开的实施例的关键或重要特征,也不用于限制本公开的范围。本公开的其它特征将通过以下的说明书而变得容易理解。
附图说明
附图用于更好地理解本方案,不构成对本申请的限定。其中:
图1是本申请实施例一提供的人脸合成图检测方法的流程示意图;
图2是本申请实施例二提供的人脸合成图检测方法的流程示意图;
图3是本申请实施例三提供的人脸合成图检测方法的流程示意图;
图4是本申请实施例三提供的人脸合成图检测***的结构示意图
图5是本申请实施例四提供的人脸合成图检测装置的第一结构示意图;
图6是本申请实施例四提供的人脸合成图检测装置的第二结构示意图;
图7是用来实现本申请实施例的人脸合成图检测方法的电子设备的框图。
具体实施方式
以下结合附图对本申请的示范性实施例做出说明,其中包括本申请实施例的各种细节以助于理解,应当将它们认为仅仅是示范性的。因此,本领域普通技术人员应当认识到,可以对这里描述的实施例做出各种改变和修改,而不会背离本申请的范围和精神。同样,为了清楚和简明,以下的描述中省略了对公知功能和结构的描述。
实施例一
图1是本申请实施例一提供的人脸合成图检测方法的流程示意图,该方法可以由人脸合成图检测装置或者电子设备来执行,该装置或者电子设备可以由软件和/或硬件的方式实现,该装置或者电子设备可以集成在任何具有网络通信功能的智能设备中。如图1所示,人脸合成图检测方法可以包括以下步骤:
S101、将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型对待检测人脸图像进行关键点提取,得到待检测人脸图像的人脸关键点。
在本申请的具体实施例中,电子设备可以将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型对待检测人脸图像进行关键点提取,得到待检测人脸图像的人脸关键点。在一个实施例中,通过人脸关键点检测模型对待检测人脸图像进行关键点提取的方法,可以包括以下步骤:1)获取待检测人脸图像和用于指示待检测人脸图像中的人脸区域的人脸区域信息;2)基于人脸区域信息,从待检测人脸图像中提取人脸图像;3)将人脸图像输入预先训练的人脸关键点检测模型,得到人脸图像所包括的各个像素点归属于预设的类别标识集合中的每个类别标识所指示的类别的概率;4)将人脸图像输入预先训练的人脸关键点定位模型,得到人脸图像所包括的各个人脸关键点的坐标;其中,该人脸关键点定位模型可以用于表征包括人脸的图像和各个人脸关键点的坐标的对应关系。需要说明的是,人脸关键点可以是预先指定的、人脸中的具有较强语义信息的点(例如眼角、嘴角、鼻翼位置、轮廓中的点等)。在实践中,人脸关键点的数量可以是72个,也可以是其他预设的数值,本实施例不对此方面内容做任何限定。
S102、基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块。
在本申请的具体实施例中,电子设备可以基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块。在一个实施例中,电子设备可以通过人脸关键点检测模型提取出待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征;然后根据待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征,得到待检测人脸图像的每一个人脸关键点对应的区域块;其中,区域块的大小为36×36×3。具体地,人脸关键点为72个,分别为:(x1,y1)、(x2,y2)、…、(x72,y72)。
S103、将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图。
在本申请的具体实施例中,电子设备可以将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图。在一个实施例中,将每一个人脸关键点对应的区域块在红绿蓝(RGB)三个通道上进行合并,得到待检测人脸图像的特征图;其中,特征图的大小为36×36×216。
S104、将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络对待检测人脸图像对应的特征图进行计算,得到待检测人脸图像的检测结果;其中,检测结果包括:待检测人脸图像为合成人脸图像或者非合成人脸图像。
在本申请的具体实施例中,电子设备可以将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络对待检测人脸图像对应的特征图进行计算,得到待检测人脸图像的检测结果;其中,检测结果包括:待检测人脸图像为合成人脸图像或者非合成人脸图像。在一个实施例中,卷积神经网络可以包括:5个卷积层、3个最大池化层和1个全连接层;待检测人脸图像对应的特征图分别经过5个卷积层、3个最大池化层和1个全连接层进行处理之后,可以得到一个2维向量,通过该2维向量判断出待检测人脸图像为合成人脸图像或者非合成人脸图像。
本申请实施例提出的人脸合成图检测方法,先将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型得到待检测人脸图像的人脸关键点;再基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;接着将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图;再将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络得到待检测人脸图像的检测结果。也就是说,本申请可以基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图,从而可以通过卷积神经网络基于待检测人脸图像对应的特征图得到待检测人脸图像的检测结果。而在现有的人脸合成图检测方法中,主要使用神经网络的深度学习方法,该方法很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;并且仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想。因为本申请采用了基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,以及基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图的技术手段,克服了现有技术中人脸合成图检测模型很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;以及仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想的技术问题,本申请提供的技术方案,可以缓解人脸合成图检测的过拟合情况,提高在复杂环境下人脸合成图检测的泛化性和准确性,同时也能避免背景噪声的干扰,从而可以提升对于未知的合成样本的检测效果;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
实施例二
图2是本申请实施例二提供的人脸合成图检测方法的流程示意图。如图2所示,人脸合成图检测方法可以包括以下步骤:
S201、将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型对待检测人脸图像进行关键点提取,得到待检测人脸图像的人脸关键点。
S202、通过人脸关键点检测模型提取出待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征。
在本申请的具体实施例中,电子设备可以通过人脸关键点检测模型提取出待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征;其中,人脸关键点为72个,分别为:(x1,y1)、(x2,y2)、…、(x72,y72)。
S203、根据待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征,得到待检测人脸图像的每一个人脸关键点对应的区域块。
在本申请的具体实施例中,电子设备可以根据待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征,得到待检测人脸图像的每一个人脸关键点对应的区域块;其中,区域块的大小为36×36×3。在本实施例中,第一个“36”表示每一个像素点对应的区域块的长度,第二个“36”表示每一个像素点对应的区域块的宽度,第三个“3”表示每一个像素点对应的区域块的通道数。本申请可以针对每一个像素点构造一个区域块。
S204、将每一个人脸关键点对应的区域块在红绿蓝三个通道上进行合并,得到待检测人脸图像的特征图。
在本申请的具体实施例中,电子设备可以将每一个人脸关键点对应的区域块在红绿蓝三个通道上进行合并,得到待检测人脸图像的特征图;其中,特征图的大小为36×36×216。在一个实施例中,电子设备可以将每一个像素点对应的区域块叠加起来,得到一个36×36×216的区域块,作为待检测人脸图像的特征图。
S205、将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络对待检测人脸图像对应的特征图进行计算,得到待检测人脸图像的检测结果;其中,检测结果包括:待检测人脸图像为合成人脸图像或者非合成人脸图像。
本申请实施例提出的人脸合成图检测方法,先将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型得到待检测人脸图像的人脸关键点;再基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;接着将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图;再将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络得到待检测人脸图像的检测结果。也就是说,本申请可以基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图,从而可以通过卷积神经网络基于待检测人脸图像对应的特征图得到待检测人脸图像的检测结果。而在现有的人脸合成图检测方法中,主要使用神经网络的深度学习方法,该方法很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;并且仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想。因为本申请采用了基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,以及基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图的技术手段,克服了现有技术中人脸合成图检测模型很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;以及仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想的技术问题,本申请提供的技术方案,可以缓解人脸合成图检测的过拟合情况,提高在复杂环境下人脸合成图检测的泛化性和准确性,同时也能避免背景噪声的干扰,从而可以提升对于未知的合成样本的检测效果;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
实施例三
图3是本申请实施例三提供的人脸合成图检测方法的流程示意图。如图3所示,人脸合成图检测方法可以包括以下步骤:
S301、将待检测的人脸图像输入至预先训练的人脸检测模型,通过人脸检测模型对待检测人脸图像进行识别,得到待检测人脸图像的人脸检测框。
在本申请的具体实施例中,电子设备可以先将待检测的人脸图像输入至预先训练的人脸检测模型,通过人脸检测模型对待检测人脸图像进行识别,得到待检测人脸图像的人脸检测框。具体地,电子设备可以先得到一张包含人脸的RGB图像,将该RGB图像输入至预先训练的人脸检测模型,通过预先训练的人脸检测模型对该RGB图像进行识别,得到该RGB图像的人脸检测框。本实施例中的人脸检测模型可以是已有的人脸检测模型,该人脸检测模型可以检测到人脸位置。
S302、将待检测人脸图像的人脸检测框扩大预设倍数,得到扩大后的人脸检测框;在扩大后的人脸检测框中对待检测人脸图像中的人脸进行截取,得到截取后的人脸图像;将截取后的人脸图像调整为预定尺寸,得到调整后的人脸图像。
在本申请的具体实施例中,电子设备可以将待检测人脸图像的人脸检测框扩大预设倍数,得到扩大后的人脸检测框;在扩大后的人脸检测框中对待检测人脸图像中的人脸进行截取,得到截取后的人脸图像;将截取后的人脸图像调整为预定尺寸,得到调整后的人脸图像。具体地,电子设备可以将待检测人脸图像的人脸检测框扩大1.5倍;再对待检测人脸图像中的人脸进行截取,并将截取后的人脸图像调整到相同的尺寸224×224。
S303、基于调整后的人脸图像计算得出每一个像素点的像素值。
在本申请的具体实施例中,电子设备可以基于调整后的人脸图像计算得出每一个像素点的像素值。具体地,电子设备可以将调整后的人脸图像输入至像素计算模型,通过该像素计算模型可以计算得出每一个像素点的像素值。
S304、按照预定方式对每一个像素点的像素值进行归一化处理,得到归一化处理后的人脸图像;使得归一化处理后的人脸图像中的每一个像素点的像素值在预定范围内。
在本申请的具体实施例中,电子设备可以按照预定方式对每一个像素点的像素值进行归一化处理,得到归一化处理后的人脸图像;使得归一化处理后的人脸图像中的每一个像素点的像素值在预定范围内;将归一化处理后的人脸图像输入至预先训练的人脸关键点检测模型。具体地,电子设备可以将每一个像素点的像素值减128,再除以256,使得每一个像素点的像素值在[-0.5,0.5]之间。较佳地,电子设备可以还可以将归一化处理后的人脸图像进行随机数据增强处理。
S305、将归一化处理后的人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型对待检测人脸图像进行关键点提取,得到待检测人脸图像的人脸关键点。
S306、基于归一化处理后的人脸图像的每一个人脸关键点生成一个与其对应的区域块。
S307、将全部的人脸关键点对应的区域块合并为归一化处理后的人脸图像对应的特征图。
S308、将归一化处理后的人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络对归一化处理后的人脸图像对应的特征图进行计算,得到归一化处理后的人脸图像的检测结果;其中,检测结果包括:归一化处理后的人脸图像为合成人脸图像或者非合成人脸图像。
需要说明的是,本实施例中的步骤S305-S308针对于归一化后的人脸图像的处理过程与实施例一中的步骤S101-S104针对于待检测人脸图像的处理过程相同,在此不再赘述。
较佳地,在将待检测人脸图像输入至预先训练的人脸关键点检测模型之前,电子设备还可以先对人脸关键点检测模型进行训练。具体地,电子设备可以将预先获取的第一个人脸图像作为当前人脸图像;若人脸关键点检测模型不满足与其对应的收敛条件,电子设备可以将当前人脸图像输入至人脸关键点检测模型,使用当前人脸图像对人脸关键点检测模型进行训练;将当前人脸图像的下一个人脸图像作为当前人脸图像,重复执行上述操作,直到人脸关键点检测模型满足与其对应的收敛条件。
图4是本申请实施例三提供的人脸合成图检测***的结构示意图。如图4所示,人脸合成图检测***可以包括:人脸检测模块、人脸检测模型、人脸关键点检测模型、区域块生成模块、区域块合并模块和卷积神经网络;其中,人脸检测模块,用于对待检测人脸图像中的人脸进行检测,得到待检测人脸图像中的人脸检测框;其中,检测模型为已有人脸检测模型,可以检测到人脸位置。此外,人脸检测模块,还用于对待检测人脸图像中的人脸检测框进行预处理。具体地,将人脸检测框扩大1.5倍之后,在扩大后的人脸检测框中对待检测人脸图像中的人脸进行截取,得到截取后的人脸图像;将截取后的人脸图像调整为相同尺寸224×224,得到调整后的人脸图像。进一步的,电子设备可以还可以对调整后的人脸图像进行归一化处理。具体地,电子设备可以将调整后的人脸图像中的每一个像素值减128再除以256,使得每一个像素点的像素值在[-0.5,0.5]之间;较佳地,电子设备还可以通过人脸检测模块将归一化处理后的人脸图像进行随机数据增强处理。区域块生成模模块可以包括:第一区域块生成模块、第二区域块生成模块、…、第N区域块生成模块;其中,N为大于1的自然数。较佳地,N的取值可以为72。具体地,第一区域块生成模块,用于基于第一个像素点生成一个与其对应的区域块;第二区域块生成模块,用于基于第二个像素点生成一个与其对应的区域块;…;第N区域块生成模块,用于基于第N个像素点生成一个与其对应的区域块。区域块合并模块,用于将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图。具体地,该模块可以将72个36×36×3的区域块合并为一个36×36×216的区域块,作为待检测人脸图像对应的特征图。卷积神经网络,用于对待检测人脸图像对应的特征图进行计算,得到待检测人脸图像的检测结果。具体地,卷积神经网络可以包括:5个卷积层、3个最大池化层和1个全连接层;待检测人脸图像对应的特征图分别经过5个卷积层、3个最大池化层和1个全连接层进行处理之后,可以得到一个2维向量,通过该2维向量判断出待检测人脸图像为合成人脸图像或者非合成人脸图像。
人脸合成图检测是人脸相关领域的基础技术之一,应用于安防、考勤、金融、门禁通行等诸多场景。在当前的很多业务上都有广泛的应用,采用本申请提供的技术方案,利用人脸合成图大多基于关键点贴图的先验信息,将关键点和合成图检测联合训练,可以给合成图检测带来更多监督信息,可以缓解合成图检测的过拟合情况,同时让模型更多的注意到人脸合成图关键点区域的贴合痕迹,能提取出原图和合成图中更有判别性的特征进行分类,因此,本申请能够提升人脸活体检测技术性能、帮助以人脸活体检测技术为基础的诸多应用提升效果和用户体验,有利于业务项目的进一步推广。
本申请实施例提出的人脸合成图检测方法,先将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型得到待检测人脸图像的人脸关键点;再基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;接着将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图;再将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络得到待检测人脸图像的检测结果。也就是说,本申请可以基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图,从而可以通过卷积神经网络基于待检测人脸图像对应的特征图得到待检测人脸图像的检测结果。而在现有的人脸合成图检测方法中,主要使用神经网络的深度学习方法,该方法很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;并且仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想。因为本申请采用了基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,以及基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图的技术手段,克服了现有技术中人脸合成图检测模型很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;以及仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想的技术问题,本申请提供的技术方案,可以缓解人脸合成图检测的过拟合情况,提高在复杂环境下人脸合成图检测的泛化性和准确性,同时也能避免背景噪声的干扰,从而可以提升对于未知的合成样本的检测效果;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
实施例四
图5是本申请实施例四提供的人脸合成图检测装置的第一结构示意图。如图5所示,所述装置500包括:关键点提取模块501、区域块生成模块502、区域块合并模块503和结果计算模块504;其中,
所述关键点提取模块501,用于将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过所述人脸关键点检测模型对所述待检测人脸图像进行关键点提取,得到所述待检测人脸图像的人脸关键点;
所述区域块生成模块502,用于基于所述待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;
所述区域块合并模块503,用于将全部的人脸关键点对应的区域块合并为所述待检测人脸图像对应的特征图;
所述结果计算模块504,用于将所述待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过所述卷积神经网络对所述待检测人脸图像对应的特征图进行计算,得到所述待检测人脸图像的检测结果;其中,所述检测结果包括:所述待检测人脸图像为合成人脸图像或者非合成人脸图像。
进一步的,所述区域块生成模块502,具体用于通过所述人脸关键点检测模型提取出所述待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征;根据所述待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征,得到所述待检测人脸图像的每一个人脸关键点对应的区域块;其中,所述区域块的大小为36×36×3。
进一步的,所述区域块合并模块503,具体用于将每一个人脸关键点对应的区域块在红绿蓝三个通道上进行合并,得到所述待检测人脸图像的特征图;其中,所述特征图的大小为36×36×216。
图6是本申请实施例四提供的人脸合成图检测装置的第二结构示意图。如图6所示,所述装置500还包括:人脸检测模块505,用于将待检测的人脸图像输入至预先训练的人脸检测模型,通过所述人脸检测模型对所述待检测人脸图像进行识别,得到所述待检测人脸图像的人脸检测框;将所述待检测人脸图像的人脸检测框扩大预设倍数,得到扩大后的人脸检测框;在所述扩大后的人脸检测框中对所述待检测人脸图像中的人脸进行截取,得到截取后的人脸图像;将所述截取后的人脸图像调整为预定尺寸,得到调整后的人脸图像;执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作。
进一步的,所述人脸检测模块505,还用于基于所述调整后的人脸图像计算得出每一个像素点的像素值;按照预定方式对每一个像素点的像素值进行归一化处理,得到归一化处理后的人脸图像;使得所述归一化处理后的人脸图像中的每一个像素点的像素值在预定范围内;执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作。
进一步的,所述装置还包括:训练模块506(图中未示出),用于将预先获取的第一个人脸图像作为当前人脸图像;若所述人脸关键点检测模型不满足与其对应的收敛条件,将所述当前人脸图像输入至所述人脸关键点检测模型,使用所述当前人脸图像对所述人脸关键点检测模型进行训练;将所述当前人脸图像的下一个人脸图像作为所述当前人脸图像,重复执行上述操作,直到所述人脸关键点检测模型满足与其对应的收敛条件。
上述人脸合成图检测装置可执行本申请任意实施例所提供的方法,具备执行方法相应的功能模块和有益效果。未在本实施例中详尽描述的技术细节,可参见本申请任意实施例提供的人脸合成图检测方法。
实施例五
根据本申请的实施例,本申请还提供了一种电子设备和一种可读存储介质。
如图7所示,是根据本申请实施例的人脸合成图检测方法的电子设备的框图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本申请的实现。
如图7所示,该电子设备包括:一个或多个处理器701、存储器702,以及用于连接各部件的接口,包括高速接口和低速接口。各个部件利用不同的总线互相连接,并且可以被安装在公共主板上或者根据需要以其它方式安装。处理器可以对在电子设备内执行的指令进行处理,包括存储在存储器中或者存储器上以在外部输入/输出装置(诸如,耦合至接口的显示设备)上显示GUI的图形信息的指令。在其它实施方式中,若需要,可以将多个处理器和/或多条总线与多个存储器和多个存储器一起使用。同样,可以连接多个电子设备,各个设备提供部分必要的操作(例如,作为服务器阵列、一组刀片式服务器、或者多处理器***)。图7中以一个处理器701为例。
存储器702即为本申请所提供的非瞬时计算机可读存储介质。其中,所述存储器存储有可由至少一个处理器执行的指令,以使所述至少一个处理器执行本申请所提供的人脸合成图检测方法。本申请的非瞬时计算机可读存储介质存储计算机指令,该计算机指令用于使计算机执行本申请所提供的人脸合成图检测方法。
存储器702作为一种非瞬时计算机可读存储介质,可用于存储非瞬时软件程序、非瞬时计算机可执行程序以及模块,如本申请实施例中的人脸合成图检测方法对应的程序指令/模块(例如,附图5所示的关键点提取模块501、区域块生成模块502、区域块合并模块503和结果计算模块504)。处理器701通过运行存储在存储器702中的非瞬时软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例中的人脸合成图检测方法。
存储器702可以包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需要的应用程序;存储数据区可存储根据人脸合成图检测方法的电子设备的使用所创建的数据等。此外,存储器702可以包括高速随机存取存储器,还可以包括非瞬时存储器,例如至少一个磁盘存储器件、闪存器件、或其他非瞬时固态存储器件。在一些实施例中,存储器702可选包括相对于处理器701远程设置的存储器,这些远程存储器可以通过网络连接至人脸合成图检测方法的电子设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
人脸合成图检测方法的电子设备还可以包括:输入装置703和输出装置704。处理器701、存储器702、输入装置703和输出装置704可以通过总线或者其他方式连接,图7中以通过总线连接为例。
输入装置703可接收输入的数字或字符信息,以及产生与人脸合成图检测方法的电子设备的用户设置以及功能控制有关的键信号输入,例如触摸屏、小键盘、鼠标、轨迹板、触摸板、指示杆、一个或者多个鼠标按钮、轨迹球、操纵杆等输入装置。输出装置704可以包括显示设备、辅助照明装置(例如,LED)和触觉反馈装置(例如,振动电机)等。该显示设备可以包括但不限于,液晶显示器(LCD)、发光二极管(LED)显示器和等离子体显示器。在一些实施方式中,显示设备可以是触摸屏。
此处描述的***和技术的各种实施方式可以在数字电子电路***、集成电路***、专用ASIC(专用集成电路)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程***上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储***、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储***、该至少一个输入装置、和该至少一个输出装置。
这些计算程序(也称作程序、软件、软件应用、或者代码)包括可编程处理器的机器指令,并且可以利用高级过程和/或面向对象的编程语言、和/或汇编/机器语言来实施这些计算程序。如本文使用的,术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如,磁盘、光盘、存储器、可编程逻辑装置(PLD)),包括,接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
为了提供与用户的交互,可以在计算机上实施此处描述的***和技术,该计算机具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给计算机。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。
可以将此处描述的***和技术实施在包括后台部件的计算***(例如,作为数据服务器)、或者包括中间件部件的计算***(例如,应用服务器)、或者包括前端部件的计算***(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的***和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算***中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将***的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、互联网和区块链网络。
计算机***可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。
根据本申请实施例的技术方案,先将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过人脸关键点检测模型得到待检测人脸图像的人脸关键点;再基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;接着将全部的人脸关键点对应的区域块合并为待检测人脸图像对应的特征图;再将待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过卷积神经网络得到待检测人脸图像的检测结果。也就是说,本申请可以基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图,从而可以通过卷积神经网络基于待检测人脸图像对应的特征图得到待检测人脸图像的检测结果。而在现有的人脸合成图检测方法中,主要使用神经网络的深度学习方法,该方法很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;并且仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想。因为本申请采用了基于待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,以及基于每一个人脸关键点对应的区域块得到待检测人脸图像对应的特征图的技术手段,克服了现有技术中人脸合成图检测模型很难学习到合成图与原图具有判别性的特征,容易在小范围训练样本上过拟合,对于未知的合成样本的泛化性有限;以及仅使用单一卷积神经网络,对于真实场景中人脸姿态过大或光照差异较大时鲁棒性较差,导致识别效果并不理想的技术问题,本申请提供的技术方案,可以缓解人脸合成图检测的过拟合情况,提高在复杂环境下人脸合成图检测的泛化性和准确性,同时也能避免背景噪声的干扰,从而可以提升对于未知的合成样本的检测效果;并且,本申请实施例的技术方案实现简单方便、便于普及,适用范围更广。
应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本申请中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本申请公开的技术方案所期望的结果,本文在此不进行限制。
上述具体实施方式,并不构成对本申请保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本申请的精神和原则之内所作的修改、等同替换和改进等,均应包含在本申请保护范围之内。
Claims (14)
1.一种人脸合成图检测方法,其特征在于,所述方法包括:
将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过所述人脸关键点检测模型对所述待检测人脸图像进行关键点提取,得到所述待检测人脸图像的人脸关键点;
基于所述待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;
将全部的人脸关键点对应的区域块合并为所述待检测人脸图像对应的特征图;
将所述待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过所述卷积神经网络对所述待检测人脸图像对应的特征图进行计算,得到所述待检测人脸图像的检测结果;其中,所述检测结果包括:所述待检测人脸图像为合成人脸图像或者非合成人脸图像。
2.根据权利要求1所述的方法,其特征在于,所述基于所述待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块,包括:
通过所述人脸关键点检测模型提取出所述待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征;
根据所述待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征,得到所述待检测人脸图像的每一个人脸关键点对应的区域块;其中,所述区域块的大小为36×36×3。
3.根据权利要求1所述的方法,其特征在于,所述将全部的人脸关键点对应的区域块合并为所述待检测人脸图像对应的特征图,包括:
将每一个人脸关键点对应的区域块在红绿蓝三个通道上进行合并,得到所述待检测人脸图像的特征图;其中,所述特征图的大小为36×36×216。
4.根据权利要求1所述的方法,其特征在于,在所述将待检测人脸图像输入至预先训练的人脸关键点检测模型之前,所述方法还包括:
将待检测的人脸图像输入至预先训练的人脸检测模型,通过所述人脸检测模型对所述待检测人脸图像进行识别,得到所述待检测人脸图像的人脸检测框;
将所述待检测人脸图像的人脸检测框扩大预设倍数,得到扩大后的人脸检测框;在所述扩大后的人脸检测框中对所述待检测人脸图像中的人脸进行截取,得到截取后的人脸图像;将所述截取后的人脸图像调整为预定尺寸,得到调整后的人脸图像;执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作。
5.根据权利要求4所述的方法,其特征在于,在所述执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作之前,所述方法还包括:
基于所述调整后的人脸图像计算得出每一个像素点的像素值;
按照预定方式对每一个像素点的像素值进行归一化处理,得到归一化处理后的人脸图像;使得所述归一化处理后的人脸图像中的每一个像素点的像素值在预定范围内;执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作。
6.根据权利要求1所述的方法,其特征在于,在所述将待检测人脸图像输入至预先训练的人脸关键点检测模型之前,所述方法还包括:
将预先获取的第一个人脸图像作为当前人脸图像;
若所述人脸关键点检测模型不满足与其对应的收敛条件,将所述当前人脸图像输入至所述人脸关键点检测模型,使用所述当前人脸图像对所述人脸关键点检测模型进行训练;将所述当前人脸图像的下一个人脸图像作为所述当前人脸图像,重复执行上述操作,直到所述人脸关键点检测模型满足与其对应的收敛条件。
7.一种人脸合成图检测装置,其特征在于,所述装置包括:关键点提取模块、区域块生成模块、区域块合并模块和结果计算模块;其中,
所述关键点提取模块,用于将待检测人脸图像输入至预先训练的人脸关键点检测模型,通过所述人脸关键点检测模型对所述待检测人脸图像进行关键点提取,得到所述待检测人脸图像的人脸关键点;
所述区域块生成模块,用于基于所述待检测人脸图像的每一个人脸关键点生成一个与其对应的区域块;
所述区域块合并模块,用于将全部的人脸关键点对应的区域块合并为所述待检测人脸图像对应的特征图;
所述结果计算模块,用于将所述待检测人脸图像对应的特征图输入至预先训练的卷积神经网络,通过所述卷积神经网络对所述待检测人脸图像对应的特征图进行计算,得到所述待检测人脸图像的检测结果;其中,所述检测结果包括:所述待检测人脸图像为合成人脸图像或者非合成人脸图像。
8.根据权利要求7所述的装置,其特征在于:
所述区域块生成模块,具体用于通过所述人脸关键点检测模型提取出所述待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征;根据所述待检测人脸图像的人脸关键点以及各个人脸关键点的图像特征,得到所述待检测人脸图像的每一个人脸关键点对应的区域块;其中,所述区域块的大小为36×36×3。
9.根据权利要求7所述的装置,其特征在于:
所述区域块合并模块,具体用于将每一个人脸关键点对应的区域块在红绿蓝三个通道上进行合并,得到所述待检测人脸图像的特征图;其中,所述特征图的大小为36×36×216。
10.根据权利要求7所述的装置,其特征在于,所述装置还包括:人脸检测模块,用于将待检测的人脸图像输入至预先训练的人脸检测模型,通过所述人脸检测模型对所述待检测人脸图像进行识别,得到所述待检测人脸图像的人脸检测框;将所述待检测人脸图像的人脸检测框扩大预设倍数,得到扩大后的人脸检测框;在所述扩大后的人脸检测框中对所述待检测人脸图像中的人脸进行截取,得到截取后的人脸图像;将所述截取后的人脸图像调整为预定尺寸,得到调整后的人脸图像;执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作。
11.根据权利要求10所述的装置,其特征在于,所述人脸检测模块,还用于基于所述调整后的人脸图像计算得出每一个像素点的像素值;按照预定方式对每一个像素点的像素值进行归一化处理,得到归一化处理后的人脸图像;使得所述归一化处理后的人脸图像中的每一个像素点的像素值在预定范围内;执行所述将待检测人脸图像输入至预先训练的人脸关键点检测模型的操作。
12.根据权利要求7所述的装置,其特征在于,所述装置还包括:训练模块,用于将预先获取的第一个人脸图像作为当前人脸图像;若所述人脸关键点检测模型不满足与其对应的收敛条件,将所述当前人脸图像输入至所述人脸关键点检测模型,使用所述当前人脸图像对所述人脸关键点检测模型进行训练;将所述当前人脸图像的下一个人脸图像作为所述当前人脸图像,重复执行上述操作,直到所述人脸关键点检测模型满足与其对应的收敛条件。
13.一种电子设备,其特征在于,包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1-6中任一项所述的方法。
14.一种存储有计算机指令的非瞬时计算机可读存储介质,其特征在于,所述计算机指令用于使所述计算机执行权利要求1-6中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010681943.0A CN111862031A (zh) | 2020-07-15 | 2020-07-15 | 一种人脸合成图检测方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010681943.0A CN111862031A (zh) | 2020-07-15 | 2020-07-15 | 一种人脸合成图检测方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111862031A true CN111862031A (zh) | 2020-10-30 |
Family
ID=72984294
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010681943.0A Pending CN111862031A (zh) | 2020-07-15 | 2020-07-15 | 一种人脸合成图检测方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111862031A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113033465A (zh) * | 2021-04-13 | 2021-06-25 | 北京百度网讯科技有限公司 | 活体检测模型训练方法、装置、设备以及存储介质 |
CN113191189A (zh) * | 2021-03-22 | 2021-07-30 | 深圳市百富智能新技术有限公司 | 人脸活体检测方法、终端设备及计算机可读存储介质 |
CN114333038A (zh) * | 2022-03-03 | 2022-04-12 | 百度在线网络技术(北京)有限公司 | 对象识别模型的训练方法和对象识别方法、装置、设备 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109214343A (zh) * | 2018-09-14 | 2019-01-15 | 北京字节跳动网络技术有限公司 | 用于生成人脸关键点检测模型的方法和装置 |
CN109711258A (zh) * | 2018-11-27 | 2019-05-03 | 哈尔滨工业大学(深圳) | 基于卷积网络的轻量级人脸关键点检测方法、***及存储介质 |
CN109886341A (zh) * | 2019-02-25 | 2019-06-14 | 厦门美图之家科技有限公司 | 一种训练生成人脸检测模型的方法 |
CN109977781A (zh) * | 2019-02-26 | 2019-07-05 | 上海上湖信息技术有限公司 | 人脸检测方法及装置、可读存储介质 |
WO2020015752A1 (zh) * | 2018-07-20 | 2020-01-23 | 华为技术有限公司 | 一种对象属性识别方法、装置、计算设备及*** |
WO2020073601A1 (zh) * | 2018-10-09 | 2020-04-16 | 深兰科技(上海)有限公司 | 商品识别方法、商品识别装置及存储介质 |
CN111241961A (zh) * | 2020-01-03 | 2020-06-05 | 精硕科技(北京)股份有限公司 | 人脸检测方法、装置及电子设备 |
CN111339832A (zh) * | 2020-02-03 | 2020-06-26 | 中国人民解放军国防科技大学 | 人脸合成图像的检测方法及装置 |
-
2020
- 2020-07-15 CN CN202010681943.0A patent/CN111862031A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2020015752A1 (zh) * | 2018-07-20 | 2020-01-23 | 华为技术有限公司 | 一种对象属性识别方法、装置、计算设备及*** |
CN109214343A (zh) * | 2018-09-14 | 2019-01-15 | 北京字节跳动网络技术有限公司 | 用于生成人脸关键点检测模型的方法和装置 |
WO2020073601A1 (zh) * | 2018-10-09 | 2020-04-16 | 深兰科技(上海)有限公司 | 商品识别方法、商品识别装置及存储介质 |
CN109711258A (zh) * | 2018-11-27 | 2019-05-03 | 哈尔滨工业大学(深圳) | 基于卷积网络的轻量级人脸关键点检测方法、***及存储介质 |
CN109886341A (zh) * | 2019-02-25 | 2019-06-14 | 厦门美图之家科技有限公司 | 一种训练生成人脸检测模型的方法 |
CN109977781A (zh) * | 2019-02-26 | 2019-07-05 | 上海上湖信息技术有限公司 | 人脸检测方法及装置、可读存储介质 |
CN111241961A (zh) * | 2020-01-03 | 2020-06-05 | 精硕科技(北京)股份有限公司 | 人脸检测方法、装置及电子设备 |
CN111339832A (zh) * | 2020-02-03 | 2020-06-26 | 中国人民解放军国防科技大学 | 人脸合成图像的检测方法及装置 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113191189A (zh) * | 2021-03-22 | 2021-07-30 | 深圳市百富智能新技术有限公司 | 人脸活体检测方法、终端设备及计算机可读存储介质 |
CN113033465A (zh) * | 2021-04-13 | 2021-06-25 | 北京百度网讯科技有限公司 | 活体检测模型训练方法、装置、设备以及存储介质 |
CN113033465B (zh) * | 2021-04-13 | 2023-11-14 | 北京百度网讯科技有限公司 | 活体检测模型训练方法、装置、设备以及存储介质 |
CN114333038A (zh) * | 2022-03-03 | 2022-04-12 | 百度在线网络技术(北京)有限公司 | 对象识别模型的训练方法和对象识别方法、装置、设备 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20220270382A1 (en) | Method and apparatus of training image recognition model, method and apparatus of recognizing image, and electronic device | |
US11687779B2 (en) | Image recognition method and apparatus, device, and computer storage medium | |
CN112528976B (zh) | 文本检测模型的生成方法和文本检测方法 | |
CN111783620A (zh) | 表情识别方法、装置、设备及存储介质 | |
CN111862031A (zh) | 一种人脸合成图检测方法、装置、电子设备及存储介质 | |
CN112001180A (zh) | 多模态预训练模型获取方法、装置、电子设备及存储介质 | |
CN112528850A (zh) | 人体识别方法、装置、设备和存储介质 | |
CN113033537A (zh) | 用于训练模型的方法、装置、设备、介质和程序产品 | |
CN112241715A (zh) | 模型训练方法、表情识别方法、装置、设备及存储介质 | |
CN112507090B (zh) | 用于输出信息的方法、装置、设备和存储介质 | |
CN113177449B (zh) | 人脸识别的方法、装置、计算机设备及存储介质 | |
CN111539897A (zh) | 用于生成图像转换模型的方法和装置 | |
CN112270745B (zh) | 一种图像生成方法、装置、设备以及存储介质 | |
CN113378770A (zh) | 手势识别方法、装置、设备、存储介质以及程序产品 | |
CN113657395B (zh) | 文本识别方法、视觉特征提取模型的训练方法及装置 | |
CN112528858A (zh) | 人体姿态估计模型的训练方法、装置、设备、介质及产品 | |
CN111783619B (zh) | 人体属性的识别方法、装置、设备及存储介质 | |
CN111783601A (zh) | 人脸识别模型的训练方法、装置、电子设备及存储介质 | |
CN111862030B (zh) | 一种人脸合成图检测方法、装置、电子设备及存储介质 | |
CN110738261B (zh) | 图像分类和模型训练方法、装置、电子设备及存储介质 | |
CN115393488B (zh) | 虚拟人物表情的驱动方法、装置、电子设备和存储介质 | |
CN111768005A (zh) | 轻量级检测模型的训练方法、装置、电子设备及存储介质 | |
CN112200169B (zh) | 用于训练模型的方法、装置、设备以及存储介质 | |
US20230154077A1 (en) | Training method for character generation model, character generation method, apparatus and storage medium | |
CN115937993A (zh) | 活体检测模型训练方法、活体检测方法、装置和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |