CN113837925A - 人脸素材融合方法和装置、存储介质及电子设备 - Google Patents

Abstract

本发明公开了一种人脸素材融合方法和装置、存储介质及电子设备。其中，该方法包括：在确定出素材图像的情况下，获取目标对象的脸部图像，其中，脸部图像的图像角度与素材图像指示的图像融合角度一致；对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征；将素描特征叠加在候选图像上，得到目标脸部图像；将目标脸部图像按照图像融合角度与素材图像进行融合。本发明解决了简单叠加处理导致图像不协调的技术问题。

Description

人脸素材融合方法和装置、存储介质及电子设备

技术领域

本发明涉及图像处理领域，具体而言，涉及一种人脸素材融合方法和装置、存储介质及电子设备。

背景技术

目前在很多即时通信客户端和具备直播功能的客户端中，均有人脸和图像素材融合以生成包含有用户脸部特征的表情等图像的功能，用于增加提升用户在即时互动中的多样性。

但是当前对于人脸与图像素材进行融合时，通常是将人脸图像直接叠放在图像素材上。例如，在将人脸与漫画素材融合时，是直接将人脸图像进行灰度调整后进行叠加，使得融合得到的图像并不协调。

针对上述的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了一种人脸素材融合方法和装置、存储介质及电子设备，以至少解决简单叠加处理导致图像不协调的技术问题。

根据本发明实施例的一个方面，提供了一种人脸素材融合方法，包括：在确定出素材图像的情况下，获取目标对象的脸部图像，其中，上述脸部图像的图像角度与上述素材图像指示的图像融合角度一致；对上述脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；提取上述脸部图像在上述目标区域中的纹理特征，生成与上述纹理特征对应的素描特征；将上述素描特征叠加在上述候选图像上，得到目标脸部图像；将上述目标脸部图像按照上述图像融合角度与上述素材图像进行融合。

根据本发明实施例的另一方面，还提供了一种人脸素材融合装置，包括：获取单元，用于在确定出素材图像的情况下，获取目标对象的脸部图像，其中，上述脸部图像的图像角度与上述素材图像指示的图像融合角度一致；灰度单元，用于对上述脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；生成单元，用于提取上述脸部图像在上述目标区域中的纹理特征，生成与上述纹理特征对应的素描特征；叠加单元，用于将上述素描特征叠加在上述候选图像上，得到目标脸部图像；融合单元，用于将上述目标脸部图像按照上述图像融合角度与上述素材图像进行融合。

根据本发明实施例的又一方面，还提供了一种计算机可读的存储介质，该计算机可读的存储介质中存储有计算机程序，其中，该计算机程序被设置为运行时执行上述人脸素材融合方法。

根据本发明实施例的又一方面，还提供了一种电子设备，包括存储器和处理器，上述存储器中存储有计算机程序，上述处理器被设置为通过所述计算机程序执行上述的人脸素材融合方法。

在本发明实施例中，采用获取与素材图像的图像融合角度一致的脸部图像，并将脸部图像的目标区域中的纹理特征生成素描特征并叠加在脸部图像进行灰度色阶处理得到的候选图像上，得到目标脸部图像，从而经目标脸部图像与素材图像按照图像融合角度进行融合的方式，通过对脸部图像进行灰度色阶处理，并将目标区域中的纹理特征生成素描特征进行叠加，达到了对脸部图像进行灰度处理的同时，针对脸部图像上的纹理特征进行素描化，以使得目标脸部图像灰度化更加合理真实的目的，从而实现了将目标脸部图像与素材图像更加协调的融合的技术效果，进而解决了简单叠加处理导致图像不协调的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种可选的人脸素材融合方法的应用环境的示意图；

图2是根据本发明实施例的一种可选的人脸素材融合方法的流程示意图；

图3是根据本发明实施例的一种可选的人脸素材融合方法的流程示意图；

图4是根据本发明实施例的一种可选的人脸素材融合方法的三角剖分图示意图；

图5是根据本发明实施例的一种可选的人脸素材融合方法的流程示意图；

图6是根据本发明实施例的一种可选的人脸素材融合方法的候选图像示意图；

图7是根据本发明实施例的一种可选的人脸素材融合方法的图像融合示意图；

图8是根据本发明实施例的一种可选的人脸素材融合装置的结构示意图；

图9是根据本发明实施例的一种可选的电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本发明实施例的一个方面，提供了一种人脸素材融合方法，可选地，上述人脸素材融合方法可以但不限于应用于如图1所示的环境中。终端设备102中不限于运行有客户端，用户基于客户端发起图像融合请求，用于将脸部图像和素材图像进行融合，融合请求通过网络110发送给服务器112，服务器112中运行有数据库114和处理引擎116。数据库114用于存储脸部图像和素材图像，处理引擎116用于处理脸部图像和素材图像，以获取到融合图像。服务器112得到的融合图像通过网络110返回给终端设备102，在终端设备102的客户端中显示融合图像。

服务器112生成融合图像不限于是处理引擎116通过依次执行S102至S110实现。获取目标对象的脸部图像。在确定出素材图像的情况下，获取目标对象的脸部图像，脸部图像的图像角度与素材图像指示的图像融合角度一致。得到候选图像。对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像。生成素描特征。提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征。得到目标脸部图像。将素描特征叠加在候选图像上，得到目标脸部图像。融合目标脸部图像与素材图像。将目标脸部图像按照图像融合角度与素材图像进行融合，得到融合图像。

可选地，在本实施例中，上述终端设备可以是配置有目标客户端的终端设备，可以包括但不限于以下至少之一：手机(如Android手机、IOS手机等)、笔记本电脑、平板电脑、掌上电脑、MID(Mobile Internet Devices，移动互联网设备)、PAD、台式电脑、智能电视等。目标客户端可以是音频客户端，视频客户端、即时通信客户端、浏览器客户端、教育客户端等。上述网络可以包括但不限于：有线网络，无线网络，其中，该有线网络包括：局域网、城域网和广域网，该无线网络包括：蓝牙、WIFI及其他实现无线通信的网络。上述服务器可以是单一服务器，也可以是由多个服务器组成的服务器集群，或者是云服务器。上述仅是一种示例，本实施例中对此不作任何限定。

作为一种可选的实施方式，如图2所示，上述人脸素材融合方法包括：

S202，在确定出素材图像的情况下，获取目标对象的脸部图像，其中，脸部图像的图像角度与素材图像指示的图像融合角度一致；

S204，对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；

S206，提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征；

S208，将素描特征叠加在候选图像上，得到目标脸部图像；

S210，将目标脸部图像按照图像融合角度与素材图像进行融合。

可选地，素材图像不限于是从素材库所包含的多个候选素材中确定出的素材图像。素材图像是用于承载脸部图像的基础图像，每个素材图像上不限于设置有用于承载脸部图像的素材区域，将脸部图像融合在素材图像的素材区域，以实现脸部图像与素材图像的融合。素材图像可以但不限于是具备黑白简笔画的卡通素材图像。

可选地，根据素材图像中的素材内容确定素材图像的图像融合角度，图像融合角度不限于指示脸部图像的图像角度。脸部图像的图像角度是脸部图像所包含的脸部拍摄角度，例如，正脸，左侧脸，右侧脸。根据素材图像确定出图像融合角度一致的脸部图像，例如，在素材图像指示正脸的情况下，确定出目标对象的正脸的脸部图像，以使得融合得到的融合图像在图像内容上保持一致。

可选地，脸部图像的目标区域不限于是脸部图像中纹理特征集中的一个或多个区域，例如，眼睛区域，鼻子区域，下巴区域、额头区域。

在本申请实施例中，采用获取与素材图像的图像融合角度一致的脸部图像，并将脸部图像的目标区域中的纹理特征生成素描特征并叠加在脸部图像进行灰度色阶处理得到的候选图像上，得到目标脸部图像，从而经目标脸部图像与素材图像按照图像融合角度进行融合的方式，通过对脸部图像进行灰度色阶处理，并将目标区域中的纹理特征生成素描特征进行叠加，达到了对脸部图像进行灰度处理的同时，针对脸部图像上的纹理特征进行素描化，以使得目标脸部图像灰度化更加合理真实的目的，从而实现了将目标脸部图像与素材图像更加协调的融合的技术效果，进而解决了简单叠加处理导致图像不协调的技术问题。

作为一种可选的实施方式，如图3所示，上述在对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像之前，还包括：

S302，按照目标关键点，生成与脸部图像对应的脸部点位图；

S304，根据脸部点位图构建目标区域对应的三角剖分图，其中，目标区域包含多个目标关键点；

S306，按照三角剖分图从脸部图像中提取目标区域对应的区域图像。

可选地，脸部点位图不限于是脸部图像中多个目标关键点构成的脸部轮廓图，将脸部图像中各个脸部部位通过多个点位进行勾勒，从而生成与脸部图像对应的脸部点位图。

可选地，根据脸部点位图构建目标区域对应的三角剖分图，不限于是根据脸部点位图中五官区域构建三角剖分图，从整个脸部图像中提取五官所在目标区域，从而生成与五官所在目标区域匹配的三角剖分图。脸部点位图与三角剖分图不限于如图4所示。图4(1)为脸部点位图，图4(2)为三角剖分图。

可选地，按照三角剖分图从脸部图像中提取目标区域对应的区域图像不限于是将三角剖分图对应的目标区域从脸部图像中分割出来。在获取到区域图像的情况下，不限于利用预设颜色填充脸部图像未被提取区域，以使得区域图像与脸部图像在图像大小上保持一致。

在本申请实施例中，通过脸部点位图得到三角剖分图，从而实现从脸部图像中提取出目标区域的区域图像，使得目标区域的区域图像的提取相对于直接分割更加合理协调。

作为一种可选的实施方式，如图5所示，上述对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像包括：

S502，获取区域图像中包含的每个像素的初始像素值；

S504，确定区域图像中全部像素的对比度阈值、对比度参数和亮度阈值；

S506，按照对比度阈值对初始像素值进行对比度映射，得到对比像素值；

S508，根据对比度参数对对比像素值进行调整，得到中间像素值；

S510，按照亮度阈值对中间像素值进行亮度映射，得到候选像素值；

S512，将区域图像中的每个像素的初始像素值调整为候选像素值，得到候选图像。

可选地，确定区域图像中所包括的每个像素的初始像素值，区域图像的对比度阈值、对比度参数和亮度阈值不限于根据统计区域图像中每个像素的初始像素值确定。对比度阈值不限于包括对比黑场阈值和对比白场阈值，亮度阈值不限于包括亮度黑场阈值和亮度白场阈值。对比度参数不限于根据对比黑场阈值和对比白场阈值确定。

可选地，脸部图像至候选图像的处理主要包括三个过程，输入色阶映射，中间调调整和输出色阶映射。输入色阶映射不限于是根据公式(1)和公式(2)实现。

其中，Vin为初始像素值，inShadows为对比黑场阈值，inHighlights为对比白场阈值。

可选地，上述对比黑场阈值不限于是区域图像中初始像素值最低，也就是最暗的像素值，上述对比白场阈值不限于是图像中初始像素值最高，也就是最亮的像素值。

可选地，将公式(2)得到的Vout作为对比像素值输入到公式(3)中以得到中间像素值。

其中，Vin为公式(2)中的Vout，midtone为对比度参数。

可选地，将公式(3)得到的Vout作为中间像素值，输入到公式(4)中以得到候选像素值。

其中，Vin为公式(3)中的Vout，outShadows为亮度黑场阈值，ioutHighlights为亮度白场阈值。

可选地，outShadows和ioutHighlights不限于通过调整具体参数值得到。候选图像不限于如图6所示。其中，黑色边框内的灰度图像为候选图像。

在本申请实施例中，通过灰度色阶调整将区域图像调整为灰度的候选图像，从而实现了脸部图像中的区域图像调整为灰度的候选图像。

作为一种可选的实施方式，上述提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征包括：

S1，将脸部图像输入生成对抗网络，获取生成对抗网络生成的素描图像；

S2，提取素描图像中，与脸部图像在目标区域中的纹理特征对应的素描特征。

可选地，生成对抗网络用于根据脸部图像生成对应的素描图像。生成对象网络不限于是GAN网络，通过生成网络利用脸部图像生成素描图像，利用判别网络对生成的素描图像进行判别，直至素描图像通过判别网络的判别，然后输出素描图像。

可选地，在素描图像是与脸部图像对应的素描特征的图像的情况下，从素描图像中提取目标区域中的纹理特征对应的素描特征。纹理特征不限于是脸部图像中所包含的纹路，例如，皱纹纹路、鼻梁纹路等。

在本申请实施例中，通过提取素描图像中的与纹理特征对应的素描特征，实现了脸部图像中的纹理素描化，使得脸部图像处理更加合理和细节化。

作为一种可选的实施方式，上述将素描特征叠加在候选图像上，得到目标脸部图像包括：

S1，确定在脸部图像的目标区域中，包含纹理特征的目标关键区域；

S2，在素描图像中，截取目标关键区域对应的素描区域图像；

S3，将素描区域图像叠加在候选图像的目标关键区域上。

可选地，将从素描图像中提取的素描特征叠加在候选图像上是将素描特征所在的素描区域图像叠加在候选图像的目标关键区域上，通过关键区域的图像叠加，实现将素描特征叠加在灰度处理后的候选图像上，得到用于融合的目标脸部图像。

作为一种可选的实施方式，上述将目标脸部图像按照图像融合角度与素材图像进行融合包括：

S1，确定素材图像中的融合区域所指示的图像融合参数；

S2，根据图像融合参数对目标脸部图像进行图像调整；

S3，将经过图像调整后的目标脸部图像叠加在素材图像中的融合区域。

可选地，图像融合参数不限用于指示素材图像中素材区域的区域尺寸，以根据图像融合参数对目标脸部图像进行图像的尺寸调整，使得融合目标脸部图像和素材图像得到的融合图像更加协调。

将目标脸部图像与素材图像融合不限于如图7所示。图7(1)为确定出的素材图像，其中脸部圆形区域为素材区域。图7(2)为将目标脸部图像叠加在素材图像上形成的融合图像。

在本申请实施例中，将脸部图像处理得到的目标脸部图像融合在素材图像的素材区域中，得到与素材图像融合的融合图像，在目标脸部图像上包含指示纹理的素描特征，使得目标脸部图像灰度化更加合理真实，实现了将目标脸部图像与素材图像更加协调的融合的技术效果。

需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明并不受所描述的动作顺序的限制，因为依据本发明，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模块并不一定是本发明所必须的。

根据本发明实施例的另一个方面，还提供了一种用于实施上述人脸素材融合方法的人脸素材融合装置。如图8所示，该装置包括：

获取单元802，用于在确定出素材图像的情况下，获取目标对象的脸部图像，其中，脸部图像的图像角度与素材图像指示的图像融合角度一致；

灰度单元804，用于对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；

生成单元806，用于提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征；

叠加单元808，用于将素描特征叠加在候选图像上，得到目标脸部图像；

融合单元810，用于将目标脸部图像按照图像融合角度与素材图像进行融合。

可选地，上述人脸素材融合装置还包括提取单元，用于在对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像之前，按照目标关键点，生成与脸部图像对应的脸部点位图；根据脸部点位图构建目标区域对应的三角剖分图，其中，目标区域包含多个目标关键点；按照三角剖分图从脸部图像中提取目标区域对应的区域图像。

可选地，上述灰度单元804还用于获取区域图像中包含的每个像素的初始像素值；确定区域图像中全部像素的对比度阈值、对比度参数和亮度阈值；按照对比度阈值对初始像素值进行对比度映射，得到对比像素值；根据对比度参数对对比像素值进行调整，得到中间像素值；按照亮度阈值对中间像素值进行亮度映射，得到候选像素值；将区域图像中的每个像素的初始像素值调整为候选像素值，得到候选图像。

可选地，上述生成单元806还用于将脸部图像输入生成对抗网络，获取生成对抗网络生成的素描图像；提取素描图像中，与脸部图像在目标区域中的纹理特征对应的素描特征。

可选地，上述叠加单元808还用于确定在脸部图像的目标区域中，包含纹理特征的目标关键区域；在素描图像中，截取目标关键区域对应的素描区域图像；将素描区域图像叠加在候选图像的目标关键区域上。

可选地，上述融合单元810还用于确定素材图像中的融合区域所指示的图像融合参数；根据图像融合参数对目标脸部图像进行图像调整；将经过图像调整后的目标脸部图像叠加在素材图像中的融合区域。

在本申请实施例中，采用获取与素材图像的图像融合角度一致的脸部图像，并将脸部图像的目标区域中的纹理特征生成素描特征并叠加在脸部图像进行灰度色阶处理得到的候选图像上，得到目标脸部图像，从而经目标脸部图像与素材图像按照图像融合角度进行融合的方式，通过对脸部图像进行灰度色阶处理，并将目标区域中的纹理特征生成素描特征进行叠加，达到了对脸部图像进行灰度处理的同时，针对脸部图像上的纹理特征进行素描化，以使得目标脸部图像灰度化更加合理真实的目的，从而实现了将目标脸部图像与素材图像更加协调的融合的技术效果，进而解决了简单叠加处理导致图像不协调的技术问题。

根据本发明实施例的又一个方面，还提供了一种用于实施上述人脸素材融合方法的电子设备，该电子设备可以是图1所示的终端设备或服务器。本实施例以该电子设备为服务器为例来说明。如图9所示，该电子设备包括存储器902和处理器904，该存储器902中存储有计算机程序，该处理器904被设置为通过计算机程序执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述电子设备可以位于计算机网络的多个网络设备中的至少一个网络设备。

可选地，在本实施例中，上述处理器可以被设置为通过计算机程序执行以下步骤：

S1，在确定出素材图像的情况下，获取目标对象的脸部图像，其中，脸部图像的图像角度与素材图像指示的图像融合角度一致；

S2，对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；

S3，提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征；

S4，将素描特征叠加在候选图像上，得到目标脸部图像；

S5，将目标脸部图像按照图像融合角度与素材图像进行融合。

可选地，本领域普通技术人员可以理解，图9所示的结构仅为示意，电子设备也可以是智能手机(如Android手机、IOS手机等)、平板电脑、掌上电脑以及移动互联网设备(Mobile Internet Devices，MID)、PAD等终端设备。图9其并不对上述电子设备的结构造成限定。例如，电子设备还可包括比图9中所示更多或者更少的组件(如网络接口等)，或者具有与图9所示不同的配置。

其中，存储器902可用于存储软件程序以及模块，如本发明实施例中的人脸素材融合方法和装置对应的程序指令/模块，处理器904通过运行存储在存储器902内的软件程序以及模块，从而执行各种功能应用以及数据处理，即实现上述的人脸素材融合方法。存储器902可包括高速随机存储器，还可以包括非易失性存储器，如一个或者多个磁性存储装置、闪存、或者其他非易失性固态存储器。在一些实例中，存储器902可进一步包括相对于处理器904远程设置的存储器，这些远程存储器可以通过网络连接至终端。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。其中，存储器902具体可以但不限于用于存储素材图像、脸部图像、目标脸部图像等信息。作为一种示例，如图9所示，上述存储器902中可以但不限于包括上述人脸素材融合装置中的获取单元802，灰度单元804，生成单元806、叠加单元808和融合单元810。此外，还可以包括但不限于上述人脸素材融合装置中的其他模块单元，本示例中不再赘述。

可选地，上述的传输装置906用于经由一个网络接收或者发送数据。上述的网络具体实例可包括有线网络及无线网络。在一个实例中，传输装置906包括一个网络适配器(Network Interface Controller，NIC)，其可通过网线与其他网络设备与路由器相连从而可与互联网或局域网进行通讯。在一个实例中，传输装置906为射频(Radio Frequency，RF)模块，其用于通过无线方式与互联网进行通讯。

此外，上述电子设备还包括：显示器908，用于显示上述素材图像和脸部图像；和连接总线910，用于连接上述电子设备中的各个模块部件。

在其他实施例中，上述终端设备或者服务器可以是一个分布式***中的一个节点，其中，该分布式***可以为区块链***，该区块链***可以是由该多个节点通过网络通信的形式连接形成的分布式***。其中，节点之间可以组成点对点(P2P，Peer To Peer)网络，任意形式的计算设备，比如服务器、终端等电子设备都可以通过加入该点对点网络而成为该区块链***中的一个节点。

根据本申请的一个方面，提供了一种计算机程序产品或计算机程序，该计算机程序产品或计算机程序包括计算机指令，该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令，处理器执行该计算机指令，使得该计算机设备执行上述人脸素材融合方面的各种可选实现方式中提供的方法。其中，该计算机程序被设置为运行时执行上述任一项方法实施例中的步骤。

可选地，在本实施例中，上述计算机可读的存储介质可以被设置为存储用于执行以下步骤的计算机程序：

S1，在确定出素材图像的情况下，获取目标对象的脸部图像，其中，脸部图像的图像角度与素材图像指示的图像融合角度一致；

S2，对脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；

S3，提取脸部图像在目标区域中的纹理特征，生成与纹理特征对应的素描特征；

S4，将素描特征叠加在候选图像上，得到目标脸部图像；

S5，将目标脸部图像按照图像融合角度与素材图像进行融合。

可选地，在本实施例中，本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令终端设备相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：闪存盘、只读存储器(Read-Only Memory，ROM)、随机存取器(Random Access Memory，RAM)、磁盘或光盘等。

上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。

上述实施例中的集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在上述计算机可读取的存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在存储介质中，包括若干指令用以使得一台或多台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。

在本发明的上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。

在本申请所提供的几个实施例中，应该理解到，所揭露的客户端，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (9)

1.一种人脸素材融合方法，其特征在于，包括：

在确定出素材图像的情况下，获取目标对象的脸部图像，其中，所述脸部图像的图像角度与所述素材图像指示的图像融合角度一致；

对所述脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；

提取所述脸部图像在所述目标区域中的纹理特征，生成与所述纹理特征对应的素描特征；

将所述素描特征叠加在所述候选图像上，得到目标脸部图像；

将所述目标脸部图像按照所述图像融合角度与所述素材图像进行融合。

2.根据权利要求1所述的方法，其特征在于，在对所述脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像之前，所述方法还包括：

按照目标关键点，生成与所述脸部图像对应的脸部点位图；

根据所述脸部点位图构建所述目标区域对应的三角剖分图，其中，所述目标区域包含多个所述目标关键点；

按照所述三角剖分图从所述脸部图像中提取所述目标区域对应的所述区域图像。

3.根据权利要求1所述的方法，其特征在于，所述对所述脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像包括：

获取所述区域图像中包含的每个像素的初始像素值；

确定所述区域图像中全部像素的对比度阈值、对比度参数和亮度阈值；

按照所述对比度阈值对所述初始像素值进行对比度映射，得到对比像素值；

根据所述对比度参数对所述对比像素值进行调整，得到中间像素值；

按照所述亮度阈值对所述中间像素值进行亮度映射，得到候选像素值；

将所述区域图像中的每个像素的所述初始像素值调整为所述候选像素值，得到所述候选图像。

4.根据权利要求1所述的方法，其特征在于，所述提取所述脸部图像在所述目标区域中的纹理特征，生成与所述纹理特征对应的素描特征包括：

将所述脸部图像输入生成对抗网络，获取所述生成对抗网络生成的素描图像；

提取所述素描图像中，与所述脸部图像在所述目标区域中的纹理特征对应的素描特征。

5.根据权利要求4所述的方法，其特征在于，所述将所述素描特征叠加在所述候选图像上，得到目标脸部图像包括：

确定在所述脸部图像的所述目标区域中，包含所述纹理特征的目标关键区域；

在所述素描图像中，截取所述目标关键区域对应的素描区域图像；

将所述素描区域图像叠加在所述候选图像的所述目标关键区域上。

6.根据权利要求4所述的方法，其特征在于，所述将所述目标脸部图像按照所述图像融合角度与所述素材图像进行融合包括：

确定所述素材图像中的融合区域所指示的图像融合参数；

根据所述图像融合参数对所述目标脸部图像进行图像调整；

将经过图像调整后的目标脸部图像叠加在所述素材图像中的所述融合区域。

7.一种人脸素材融合装置，其特征在于，包括：

获取单元，用于在确定出素材图像的情况下，获取目标对象的脸部图像，其中，所述脸部图像的图像角度与所述素材图像指示的图像融合角度一致；

灰度单元，用于对所述脸部图像中目标区域对应的区域图像进行灰度色阶处理，得到候选图像；

生成单元，用于提取所述脸部图像在所述目标区域中的纹理特征，生成与所述纹理特征对应的素描特征；

叠加单元，用于将所述素描特征叠加在所述候选图像上，得到目标脸部图像；

融合单元，用于将所述目标脸部图像按照所述图像融合角度与所述素材图像进行融合。

8.一种计算机可读的存储介质，其特征在于，所述计算机可读的存储介质包括存储的程序，其中，所述程序运行时执行所述权利要求1至6任一项中所述的方法。

9.一种电子设备，包括存储器和处理器，其特征在于，所述存储器中存储有计算机程序，所述处理器被设置为通过所述计算机程序执行所述权利要求1至6任一项中所述的方法。

Images