CN109584180A - 人脸图像处理方法、装置、电子设备及计算机存储介质 - Google Patents
人脸图像处理方法、装置、电子设备及计算机存储介质 Download PDFInfo
- Publication number
- CN109584180A CN109584180A CN201811457973.2A CN201811457973A CN109584180A CN 109584180 A CN109584180 A CN 109584180A CN 201811457973 A CN201811457973 A CN 201811457973A CN 109584180 A CN109584180 A CN 109584180A
- Authority
- CN
- China
- Prior art keywords
- lip
- processed
- dressing
- parameter modification
- modification information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 79
- 238000000034 method Methods 0.000 title claims abstract description 36
- 230000008569 process Effects 0.000 title claims abstract description 10
- 230000004048 modification Effects 0.000 claims abstract description 215
- 238000012986 modification Methods 0.000 claims abstract description 215
- 230000001815 facial effect Effects 0.000 claims abstract description 134
- 239000000463 material Substances 0.000 claims description 33
- 238000004590 computer program Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 21
- 230000000694 effects Effects 0.000 description 19
- 230000006870 function Effects 0.000 description 13
- 238000004422 calculation algorithm Methods 0.000 description 10
- 230000009471 action Effects 0.000 description 7
- 239000003086 colorant Substances 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 241000220317 Rosa Species 0.000 description 3
- 238000004891 communication Methods 0.000 description 3
- 238000013507 mapping Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000003672 processing method Methods 0.000 description 3
- 230000006399 behavior Effects 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000010168 coupling process Methods 0.000 description 2
- 238000005859 coupling reaction Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 230000005611 electricity Effects 0.000 description 2
- 230000005291 magnetic effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000008187 granular material Substances 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 230000037452 priming Effects 0.000 description 1
- 230000000644 propagated effect Effects 0.000 description 1
- 238000009738 saturating Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000638 solvent extraction Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/77—Retouching; Inpainting; Scratch removal
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Image Processing (AREA)
Abstract
本公开的实施例提供了一种人脸图像处理方法、装置、电子设备及计算机存储介质,该方法包括:根据唇部妆容调整指令中包括的基于待处理人脸图像的唇部妆容参数修改信息,检测待处理人脸图像中的唇部特征点并对唇部特征点进行插值处理得到插值特征点,然后基于唇部特征点和插值特征点确定唇部区域,根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,得到调整后的待处理人脸图像。通过本实施例的方案,在接收唇部妆容调整指令时,即可根据唇部妆容调整指令对待处理人脸图像进行处理,即实现了一键调整图像中用户唇部妆容的功能,而不需要用户手动对人脸图像的唇部妆容进行编辑,减少了处理时间,提升了用户的使用体验。
Description
技术领域
本公开涉及图像处理技术领域,具体而言,本公开涉及一种人脸图像处理方法、装置、电子设备和计算机存储介质。
背景技术
在美颜类工具中,用户可对图像进行妆容特效处理,以提升图像的美感。但是,在现有的美颜类工具中,当用户对图像中唇部的妆容不满意想要进行调整时,用户需要对图像中唇部的妆容进行手动调整,才可得到所需图像。
比如,调整唇部的颜色,用户需要对唇部的颜色进行手动调整,才能得到调整后的图像。通常对于手动调整图像不熟练的用户,通过手动调整的方式进行图像的妆容处理,不但很难达到美颜的目的,并且美颜处理耗时时间长,降低用户的使用体验。
发明内容
本公开的目的旨在至少能解决上述的技术缺陷之一,提升用户的使用体验。本公开采用的技术方案如下:
第一方面,本公开提供了一种人脸图像处理方法,该方法包括:
获取待处理人脸图像;
接收对待处理人脸图像的唇部妆容调整指令,唇部妆容调整指令中包括基于待处理人脸图像的唇部妆容参数修改信息;
依据唇部妆容参数修改信息,检测待处理人脸图像中的唇部特征点,并对唇部特征点进行插值处理,得到插值特征点;
根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域;
根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,得到调整后的待处理人脸图像;
显示调整后的待处理人脸图像。
本公开的实施例中,根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,包括:
将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上;或者,
确定与唇部妆容参数修改信息对应的目标颜色基准图;
根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值;
将待处理唇部区域的每一个像素点的原始颜色值修改为目标颜色值。
本公开的实施例中,确定与唇部妆容参数修改信息对应的目标颜色基准图,包括:
依据预配置的参数修改信息和滤镜方式的对应关系,确定唇部妆容参数修改信息对应的滤镜方式;
依据确定出的滤镜方式对预配置的默认颜色基准图进行相应的滤镜处理,得到目标颜色基准图;
或者,
依据预配置的参数修改信息与颜色基准图的对应关系,确定与唇部妆容参数修改信息对应的目标颜色基准图。
本公开的实施例中,根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域,包括:
根据唇部特征点和插值特征点,确定唇部轮廓;
生成与唇部妆容参数修改信息对应的待处理人脸图像的掩膜图像,掩膜图像的感兴趣区域与唇部轮廓对应的区域相匹配;
根据待处理人脸图像和掩膜图像,生成感兴趣图像,感兴趣图像中的感兴趣区域为待处理唇部区域。
本公开的实施例中,唇部妆容调整指令中还包括针对唇部妆容参数修改信息的调整指标,调整指标用于标识唇部妆容参数修改信息对应的透明度;
将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上,包括:
依据调整指标,以及预配置的调整指标和参数修改信息的透明度的对应关系,确定调整指标对应的唇部妆容参数修改信息的透明度;
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的妆容素材的透明度进行处理,得到调整后的妆容素材;
将调整后的妆容素材叠加至待处理唇部区域之上;
根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值,包括:
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的目标颜色基准图的透明度进行调整,得到调整后的目标颜色基准图;
根据调整后的目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值。
本公开的实施例中,接用户对待处理人脸图像的唇部妆容调整指令,包括:
接收用户对待处理人脸图像的唇部妆容调整触发指令;
响应于唇部妆容调整触发指令,显示唇部妆容调整界面,唇部妆容调整界面中显示有唇部妆容参数修改信息选项和待处理人脸图像;
通过唇部妆容调整界面,接收唇部妆容调整指令。
本公开的实施例中,待处理人脸图像为实时捕获的当前图像,或从本地图像库中选取的人脸图像。
第二方面,本公开提供了一种人脸图像处理装置,该装置包括:
图像获取模块,用于获取待处理人脸图像;
指令接收模块,用于接收对待处理人脸图像的唇部妆容调整指令,唇部妆容调整指令中包括基于待处理人脸图像的唇部妆容参数修改信息;
图像处理模块,用于依据唇部妆容参数修改信息,检测待处理人脸图像中的唇部特征点,并对唇部特征点进行插值处理,得到插值特征点,根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域,以及根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,得到调整后的待处理人脸图像;
图像显示模块,用于显示调整后的待处理人脸图像。
本公开的实施例中,图像处理模块在根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理时,具体用于:
将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上;或者,
确定与唇部妆容参数修改信息对应的目标颜色基准图;
根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值;
将待处理唇部区域的每一个像素点的原始颜色值修改为目标颜色值。
本公开的实施例中,图像处理模块在根据唇部妆容特效,对待处理唇部
本公开的实施例中,图像处理模块在确定与唇部妆容参数修改信息对应的目标颜色基准图时,具体用于:
依据预配置的参数修改信息和滤镜方式的对应关系,确定唇部妆容参数修改信息对应的滤镜方式;
依据确定出的滤镜方式对预配置的默认颜色基准图进行相应的滤镜处理,得到目标颜色基准图;
或者,
依据预配置的参数修改信息与颜色基准图的对应关系,确定与唇部妆容参数修改信息对应的目标颜色基准图。
本公开的实施例中,图像处理模块在根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域时,具体用于:
根据唇部特征点和插值特征点,确定唇部轮廓;
生成与述唇部妆容参数修改信息对应的待处理人脸图像的掩膜图像,掩膜图像的感兴趣区域与唇部轮廓对应的区域相匹配;
根据待处理人脸图像和掩膜图像,生成感兴趣图像,感兴趣图像中的感兴趣区域为待处理唇部区域。
本公开的实施例中,唇部妆容调整指令中还包括针对唇部妆容参数修改信息的调整指标,调整指标用于标识唇部妆容参数修改信息对应的透明度;
图像处理模块在将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上时,具体用于:
依据调整指标,以及预配置的调整指标和参数修改信息的透明度的对应关系,确定调整指标对应的唇部妆容参数修改信息的透明度;
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的妆容素材的透明度进行处理,得到调整后的妆容素材;
将调整后的妆容素材叠加至待处理唇部区域之上;
图像处理模块在根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值时,具体用于:
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的目标颜色基准图的透明度进行调整,得到调整后的目标颜色基准图;
根据调整后的目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值。
本公开的实施例中,指令接收模块在接用户对待处理人脸图像的唇部妆容调整指令时,具体用于:
接收用户对待处理人脸图像的唇部妆容调整触发指令;
响应于唇部妆容调整触发指令,显示唇部妆容调整界面,唇部妆容调整界面中显示有唇部妆容参数修改信息选项和待处理人脸图像;
通过唇部妆容调整界面,接收唇部妆容调整指令。
本公开的实施例中,待处理人脸图像为实时捕获的当前图像,或从本地图像库中选取的人脸图像。
第三方面,本公开提供了一种电子设备,该电子设备包括处理器和存储器;
存储器,用于存储操作指令;
处理器,用于通过调用操作指令,执行如本公开的第一方面的任一实施例中所示的方法。
第四方面,本公开提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序指令,计算机程序指令用于使计算机执行以实现如本公开的第一方面的任一实施例中所示的方法。
本公开实施例提供的技术方案带来的有益效果是:
本公开的实施例中的方案,在接收到选择的唇部妆容调整指令时,即可根据唇部妆容调整指令中的唇部妆容对应待处理人脸图像进行处理,即实现了一键调整图像中用户唇部妆容的功能,而不需要用户手动对人脸图像的唇部妆容进行编辑,大大减少了唇部妆容的处理的时间,提升了用户的使用体验。
附图说明
为了更清楚地说明在本公开的实施例中的技术方案,下面将对本公开实施例描述中所需要使用的附图作简单地介绍。
图1为本公开实施例提供的一种图像处理方法的流程示意图;
图2a为本公开实施例中一种需要的特征点的示意图;
图2b为本公开实施例中另一种需要的特征点的示意图;
图3a为本公开实施例中一种唇部妆容调整触发界面的示意图;
图3b为本公开实施例中另一种唇部妆容调整界面的示意图;
图4a为本公开实施例中一种类型选择界面的示意图;
图4b为本公开实施例中一种唇部妆容参数修改信息选择界面的示意图;
图5a为本公开实施例中一种待处理人脸图像的示意图;
图5b为本公开实施例中一种掩膜图像的示意图;
图5c为本公开实施例中一种感兴趣图像的示意图;
图6为本公开实施例中一种调整指标调整界面的示意图;
图7为本公开实施例中一种图像处理装置的结构示意图;
图8为本公开实施例中一种图像处理的电子设备的结构示意图。
具体实施方式
下面详细描述本公开的实施例,该实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本公开的技术感,而不能解释为对本公开的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”和“该”也可包括复数形式。应该进一步理解的是,本公开的说明书中使用的措辞“包括”是指存在该特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
下面以具体地实施例对本公开的技术方案以及本公开的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本公开的实施例进行描述。
本公开的实施例提供了一种人脸图像处理方法,如图1所示,该方法可以包括:
步骤S110,获取待处理人脸图像。
其中,待处理人脸图像可以是实时获取用户的用户视频中的当前视频帧图像,也可以是用户从本地图像库中选取的人脸图像。
步骤S120,接收对待处理人脸图像的唇部妆容调整指令,唇部妆容调整指令中包括基于待处理人脸图像的唇部妆容参数修改信息。
其中,唇部妆容参数修改信息表示对处理人脸图像中的唇部区域进行唇部妆容特效处理的策略,即具体需要对唇部区域进行怎么处理,也就是需要对哪些参数或哪个参数进行修改,即不同的唇部妆容参数修改信息可以表示不同的唇部妆容特效,根据不同的唇部妆容参数修改信息对待处理人脸图像进行处理就可以得到不同的唇部妆容特效的效果图。
在本公开实施例中,唇部妆容调整指令表示通过显示界面发送唇部部妆容特效选择操作的指令,其中,唇部妆容特效选择操作,即用户选择想要添加至待处理人脸图像的唇部妆容特效的动作,该操作的具体实现形式根据需要配置,例如,该唇部妆容特效选择操作可以是用户在客户端的应用程序的显示界面上对唇部妆容特效对应的指定操作位置的点击动作。该方案中,在检测到该唇部妆容特效选择操作后,即可基于用户的该操作,得知用户所想要添加的唇部妆容特效。
在实际应用中,可通过客户端的相关触发标识接收用户的唇部妆容特效选择操作,其中,触发标识的具体形式可以根据实际需要配置,比如,可以是客户端界面上的指定触发按钮或输入框,还可以是用户的语音指令,具体的,例如可以是在客户端的显示界面上显示的各种口红颜色和/或各种口红形状所对应的唇部妆容特效的虚拟按钮,用户点击其中任一按钮的操作即为用户的唇部妆容特效选择操作,如用户点击正红唇色所对应的虚拟按钮的动作即为用户的唇部妆容特效选择操作,该操作中包含用户所选择的唇部妆容特效即口红颜色特效,口红颜色为正红色,该操作表示了用户想要将待处理人脸图像中的口红颜色为变为正红色。
步骤S130,依据唇部妆容参数修改信息,检测待处理人脸图像中的唇部特征点,并对唇部特征点进行插值处理,得到插值特征点。
其中,检测待人脸图像中唇部征点的具体方法以及具体需要检测哪些部位的特征点,本公开的实施例不做限定,例如,如图2a所示,检测的唇部征点可以包括左侧嘴角位置特征点a、右侧嘴角位置特征点b、上嘴唇上方位置特征点c、e和f、下嘴唇中部最下方位置特征点d。
在实际的应用中,由于各个唇部特征点之间通常是不连续的点,进而在图像处理的过程中,可能会导致图像的显示效果不平滑。因此在本公开实施例中会对唇部特征点进行插值处理,得到插值特征点。其中,对唇部特征点进行插值处理,得到插值特征点的具体实施方式可以参考现有技术,本公开实施例在此就不再赘述。例如,如图2b检测到的唇部征点可以包括左侧嘴角位置特征点a、右侧嘴角位置特征点b、上嘴唇上方位置特征点c、e和f、下嘴唇中部最下方位置特征点d,以及插值得出的插值特征点k1、k2。
在实际应用中,可以对不同的唇部妆容参数修改信息配置相同的插值算法,也可以配置不同的插值算法,当唇部妆容参数修改信息为口红颜色参数修改信息(口红颜色特效)时,与口红颜色对应的插值算法为算法A,当唇部妆容参数修改信息为口红形状参数修改信息(口红形状特效)时,与口红形状参数修改信息对应的插值算法为算法B,当然在实际的应用中,不同的唇部妆容参数修改信息对应的插值算法也可以配置相同的插值算法,如口红颜色参数修改信息和口红形状参数修改信息对应的插值算法均为算法A。
步骤S140,根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域。
步骤S150,根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,得到调整后的待处理人脸图像。
相应的,在得到唇部特征点和插值特征点后,即可直接根据唇部特征点和插值特征点确定待处理人脸图像中的唇部轮廓,可以将该唇部轮廓作为待处理唇部区域,然后就可以根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理。
步骤S160,显示调整后的待处理人脸图像。
本公开的实施例中的方案,在接收到选择的唇部妆容调整指令时,即可根据唇部妆容调整指令中的唇部妆容对应待处理人脸图像进行处理,即实现了一键调整图像中用户唇部妆容的功能,而不需要用户手动对人脸图像的唇部妆容进行编辑,大大减少了唇部妆容的处理的时间,提升了用户的使用体验。
本公开的实施例中,步骤S120中,
接用户对待处理人脸图像的唇部妆容调整指令,包括:
接收用户对待处理人脸图像的唇部妆容调整触发指令;
响应于唇部妆容调整触发指令,显示唇部妆容调整界面,唇部妆容调整中显示有唇部妆容参数修改信息选项和待处理人脸图像;
通过唇部妆容调整界面,接收唇部妆容调整指令。
在本公开实施例中,唇部妆容调整触发指令可以表示为通过显示界面发送唇部妆容特效触发操作的指令,其中,唇部妆容特效触发操作表示用户想要对待处理人脸图像添加唇部妆容特效,即用户用于触发开始进行唇部妆容特效添加的动作,该操作的具体形式可以根据需要配置,例如,可以是用户在客户端的显示界面上特定操作位置的触发动作,也可以是点击特定的虚拟按钮的操作等。该方案中,在检测到唇部妆容特效触发操作后,即可基于用户的该操作,将唇部妆容调整界面进行显示,以使用户能够在该界面进行唇部妆容特效选择操作。
在实际应用中,用户可通过客户端的相关触发标识触发该唇部妆容特效触发操作,比如,客户端显示界面上的指定触发按钮或输入框,还可以是用户的语音指令等。例如,在一可选方式中,可以是在客户端的显示界面上显示的“口红颜色”或“唇部妆容”的虚拟按钮,用户点击该按钮的操作即为用户的唇部妆容特效触发操作。
其中,唇部妆容调整界面用于电子设备与用户之间的交互,通过该界面用户可以发送针对待处理人脸图像的唇部妆容参数修改信息的相关指令。
作为一个示例,图3a中示出了一种电子设备中客户端的一种唇部妆容调整触发界面即用户交互界面的示意图,该界面中显示有待处理的人脸图像(图中所示的人脸图像),界面上显示的“唇部妆容”的虚拟按钮即为唇部妆容特效触发按钮,用户点击该显示界面上显示的“唇部妆容”的虚拟按钮,即为用户的唇部妆容特效触发操作,接收到该触发操作后,可以显示唇部妆容调整界面。
作为一个示例,图3b中示出了一种唇部妆容调整界面的示意图,图中所示的A、B、C、D、E分别为不同的唇部妆容参数修改信息所对应的虚拟按钮,用户可以通过点击其中一个虚拟按钮确定唇部妆容参数修改信息,比如点击虚拟按钮A,则确定的唇部妆容参数修改信息即为虚拟按钮A所对应的唇部妆容参数修改信息,在接收到该指令后,即可基于该指令中确定的唇部妆容参数修改信息,对待处理人脸图像进行相应的处理。
为了使用户能够更加明确的知晓各虚拟按钮所对应的唇部妆容参数修改信息的效果,在实际应用,虚拟按钮可以直接采用各唇部妆容参数修改信息所对应的效果图来显示,例如,可以将各种唇部颜色的效果图作为虚拟按钮的显示形式。
在实际应用中,由于唇部妆容参数修改信息的种类多,对应的虚拟按钮数量多,由于电子设备的显示屏幕有限,可能无法一次性全部显示所有虚拟按钮,此时,则可通过设置虚拟按钮的列表或其他方式,使用户能够查看全部的虚拟按钮,例如,用户可以在虚拟按钮对应的显示区域,通过滑动虚拟按钮的方式查看更多的唇部妆容参数修改信息选项。
本公开的实施例中,唇部妆容调整界面包括类型选择界面和唇部妆容参数修改信息选择界面,唇部妆容调整指令包括类型选择指令和唇部妆容参数修改信息选择指令;
通过唇部妆容调整界面,接收唇部妆容调整指令,包括:
通过类型选择界面,接收类型选择指令;
响应于类型选择指令,显示相应类型所对应的唇部妆容参数修改信息选择界面;
通过唇部妆容参数修改信息选择界面,接收唇部妆容参数修改信息选择指令。
其中,为了实现对唇部妆容进行不同模式的处理,可以将唇部妆容参数修改信息进行分类,得到唇部妆容参数修改信息类型,其中,唇部妆容参数修改信息的具体分类方式可以按照实际需求进行配置。基于对唇部妆容的不同模式的美颜需求,一个唇部妆容参数修改信息类型中可以包括一个或多个唇部妆容参数修改信息。
在实际应用中,可以通过类型选择界面将唇部妆容参数修改信息类型显示给用户,通过该界面接收用户的类型选择指令,从而得到用户所选择的唇部妆容参数修改信息类型,之后,可将用户选择的唇部妆容参数修改信息类型下的唇部妆容参数修改信息选项通过唇部妆容参数修改信息选择界面呈现给用户,使用户能够通过该界面中显示的唇部妆容参数修改信息选项,选择唇部妆容唇部妆容。
作为一个示例,图4a中示出了一种类型选择界面的示意图,该类型选择界面上显示有的不同的唇部妆容参数修改信息类型对应的虚拟按钮:如图中所示的“类型1”和“类型2”,用户可通过点击“类型1”或“类型2”选择唇部妆容参数修改信息类型,比如,点击“类型1”后,则将“类型1”所对应的选择界面进行显示,图4b中示出了一种参数修改信息选择界面的示意图,如图4b中所示,界面中显示了“类型”1中所对应的唇部妆容参数修改信息选项A1,B1和C1,用户可通过选择A1,B1和C1中的一个或多个来确定唇部妆容参数修改信息。
可以理解的是,在实际应用中,类型选择界面和参数修改信息选择界面可以为同一个用户界面,也可以为不同的用户界面,本公开实施例不做限定。
在本公开的实施例中,唇部妆容参数修改信息类型可以包括唇部颜色参数修改信息即口红颜色特效、唇部妆容形状参数修改信息即口红形状特效等。其中,口红颜色特效指的是在人脸图像中的唇部添加颜色效果,口红形状特效可以指的是在人脸图像中采用不同的形状添加口红颜色。在实际应用中,唇部妆容参数修改信息类型的划分依据可以根据需要设定,也就是说,将哪些具体的唇部妆容参数修改信息划分至哪种类型可以根据需要配置,本公开实施例不做具体的限定。
其中,在一种可选方案中,唇部妆容参数修改信息类型可以依据口红颜色进行划分,如正红颜色类型和玫红颜色类型,每种类型下可以进一步包括该颜色下的多个口红形状,如正红颜色类型下包括正红色的咬唇妆、正红的嘟嘟唇等,当然唇部妆容参数修改信息类型也可以依据口红形状进行划分,如咬唇妆类型和嘟嘟唇类型,每种类型下可以进一步包括口红形状下的多个颜色,如咬唇妆类型下包括正红色的咬唇妆、玫红色的咬唇妆等。
在实际应用中,为了保证确定待处理唇部区域更加的准确,并且在后续对待处理唇部区域进行相应的处理时,不对待处理人脸图像中的其它区域造成影响,因此在本公开实施例中,根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域,包括:
根据唇部特征点和插值特征点,确定唇部轮廓;
生成与唇部妆容参数修改信息对应的待处理人脸图像的掩膜图像,掩膜图像的感兴趣区域与唇部轮廓对应的区域相匹配;
根据待处理人脸图像和掩膜图像,生成感兴趣图像,感兴趣图像中的感兴趣区域为待处理唇部区域。
其中,可以理解的是,待处理人脸图像的掩膜图像的尺寸大小与待处理人脸图像相同,掩膜图像中的感兴趣区域对应于待处理图像中需要处理的唇部区域。
在实际应用中,在根据唇部特征点和插值特征点确定出唇部轮廓后,即可确定出待处理人脸图像的掩膜图像,具体的,该掩膜图像与待处理人脸图像大小相等,感兴趣区域在掩膜图像中的位置与唇部轮廓区域在待处理人脸图像中的位置对应,可选的,感兴趣区域在掩膜图像中的位置与唇部轮廓区域在待处理人脸图像中的位置可以相同,也就是说,将两个图像重叠放置时,感兴趣区域和唇部轮廓区域重叠,或者,感兴趣区域在掩膜图像中的位置与唇部轮廓区域在待处理人脸图像中的位置至少部分相同,例如,将两个图像重叠放置时,感兴趣区域可以包含唇部轮廓区域,或者,唇部轮廓区域可以包括感兴趣区域,感兴趣区域的轮廓形状一般与唇部轮廓区域的形状相似。
可以理解的是,在实际应用中,感兴趣区域的颜色可以为白色,即RGB(Red、Green、Blue,红色、绿色、蓝色)值为255、255、255,除感兴趣区域之外的区域可以为黑色,即RGB值为0、0、0。
进一步的,将掩膜图像与待处理人脸图像相乘得到感兴趣图像,其中生成的感兴趣图像包含两个区域,一个区域是白色,另一个区域是待处理人脸图像中除了唇部轮廓区域之外的其它区域。
在一示例中,待处理人脸图像如图5a中所示(图中A区域表示待处理人脸图像中用户的嘴部区域,B区域表示待处理人脸图像中的其它区域),根据唇部特征点和插值特征点确定唇部轮廓后,根据唇部妆容参数修改信息确定出的待处理人脸图像的掩膜图像(如图5b中所示),其中,掩膜图像的感兴趣区域(如图5b中A区域所示)与唇部轮廓对应的区域相匹配,然后将掩膜图像与待处理人脸图像相乘得到感兴趣图像,生成如图5c中所示感兴趣图像,其中,感兴趣图像中的感兴趣区域为白色区域(如图5c中A区域所示),感兴趣图像中感兴趣区域之外的区域显示待处理人脸图像中除了唇部轮廓区域之外的其它区域(如图5c中B区域所示)。
相应的,在确定出待处理唇部区域后,就可以根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理。
在公开实施例中,根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,包括:
将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上;或者,
确定与唇部妆容参数修改信息对应的目标颜色基准图;
根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值;
将待处理唇部区域的每一个像素点的原始颜色值修改为目标颜色值。
在一示例中,假如用户选择的唇部妆容参数修改信息为唇部颜色参数修改信息即口红颜色特效,并且确定出待处理唇部区域(如图5c中B区域所示),此时将口红颜色特效对应的妆容素材叠A叠加至待处理唇部区域即可得到添加口红颜色特效的效果图。
其中,确定不同的唇部妆容参数修改信息对应的妆容素材的具体方式,以及将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域上的具体叠加方式,可以根据需要配置,本公开的实施例不做具体限定,如在实际应用中可以预先在固定的图层中绘制不同的唇部妆容特效对应的妆容素材,并可以采用柔光、正常或正片叠底等方法进行叠加,本公开的实施例在此就不再赘述。
在实际应用中,颜色基准图即颜色查找表,颜色查找表将所有颜色进行一次转换,也就是将每一个原始的颜色进行转换之后成为一个新的颜色,例如,原始颜色是红色,进行转换后变为黄色,则待处理唇部区域中所有是红色的像素点都会被自动转换为黄色的像素点。
其中,像素点的原始颜色值是指处理前的待处理人脸图像中像素点的颜色值,像素点的目标颜色值指的是针对唇部妆容参数修改信息,需要将待处理图片中像素点的原始颜色值修改后的颜色。本公开实施例中,每个唇部妆容参数修改信息对应一个颜色基准图,在接收到确定的唇部妆容参数修改信息后,即可确定出该唇部妆容参数修改信息所对应的颜色基准图即目标颜色基准图,基于该目标颜色基准图,即可查找确定出待处理唇部区域中每个初始颜色值所对应的目标颜色值。
在公开实施例中,确定与唇部妆容参数修改信息对应的目标颜色基准图,包括:
依据预配置的参数修改信息和滤镜方式的对应关系,确定唇部妆容参数修改信息对应的滤镜方式;
依据确定出的滤镜方式对预配置的默认颜色基准图进行相应的滤镜处理,得到目标颜色基准图;
或者,
依据预配置的参数修改信息与颜色基准图的对应关系,确定与唇部妆容参数修改信息对应的目标颜色基准图。
在实际的应用中,确定与唇部妆容参数修改信息对应的目标颜色基准图的一种可选实施方案可以为预配置每一种参数修改信息对应的滤镜方式,并预配置一个颜色基准图(初始基准图)作为默认颜色基准图,即预先配置参数修改信息与滤镜方式的映射关系,在接收到用户选择的唇部妆容参数修改信息后,即可确定出当前确定的唇部妆容参数修改信息所对应的滤镜方式,在确定出唇部妆容参数修改信息对应的滤镜方式后,就可以根据确定出的滤镜方式对默认颜色基准图进行相应的滤镜处理,得到唇部妆容参数修改信息对应的目标颜色基准图。其中,对默认颜色基准图进行滤镜处理的具体实现方法,可以参考现有技术,本公开实施例在此就不再赘述。
另一种可选的实施方案,可以预先配置每一种参数修改信息对应的颜色基准图。也就是说,预配置参数修改信息与颜色基准图的映射关系,即特效与颜色基准图的映射关系,当接收到用户选择的唇部妆容参数修改信息后,就可以基于预配置的参数修改信息与颜色基准图的对应关系,从预配置的颜色基准图中确定出与唇部妆容参数修改信息对应的目标颜色基准图,然后即可根据确定出的目标颜色基准图对待处理唇部区域进行相应的处理。
在一示例中,预先配置了正红色咬唇妆特效对应的目标基准图A、正红色嘟嘟唇特效对应的目标基准图B、玫红色咬唇妆特效对应的目标基准图C、玫红色嘟嘟唇特效对应的目标基准图D等,若用户选择的唇部妆容特效为正红色咬唇妆特效,此时就可以从预先配置的目标基准图中确定出对应的目标基准图为基准图A。
在本公开实施例中,唇部妆容调整指令中还包括针对唇部妆容参数修改信息的调整指标,调整指标用于标识唇部妆容参数修改信息对应的透明度;
将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上,包括:
依据调整指标,以及预配置的调整指标和参数修改信息的透明度的对应关系,确定调整指标对应的唇部妆容参数修改信息的透明度;
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的妆容素材的透明度进行处理,得到调整后的妆容素材;
将调整后的妆容素材叠加至待处理唇部区域之上;
根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值,包括:
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的目标颜色基准图的透明度进行调整,得到调整后的目标颜色基准图;
根据调整后的目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值。
其中,调整指标可以为根据实际调整需求配置的数值或数值范围,也可以是其它的能够用于标识唇妆容参数修改信息的调整强度(即唇部妆容参数修改信息对应的透明度)的指标,本公开实施例中对调整指标的具体实现方式不做限定。不同的调整指标可以对应唇部妆容参数修改信息不同的透明度,也就是说,对于同一唇部妆容参数修改信息,当用户选择不同的调整指标时,可以基于该调整指标,对待处理人脸图像进行不同调整强度的处理。
在一可选方案中,可以将调整指标以数值范围列表的形式呈现给用户,数值范围列表中的不同数值可以代表不同的调整强度,用户可以通过客户端的显示界面上的滑动按钮来实现调整指标的选择,如图6所示的一种客户端显示界面,其中,图像预览区可以用于显示人脸图像(可以是待处理人脸图像,也可以是处理过程中的人脸图像,也可以是调处理后的人脸图像),妆容调整指标对应的数值范围列表可以为0至100,用户可通过滑动调整指标按钮来选择不同的调整指标。
由于调整指标中不同的数值可以对应不同的调整强度,为了使用户清楚自己选择的调整指标对应的调整强度效果,还可以提供预览功能,在用户选择了0至100中的任一个调整指标时,比如27时,基于调整指标27,对待处理人脸图像进行相应的处理,将该指标对应的调整后人脸图像的显示在图像预览区。
其中,调整指标和参数修改信息的透明度的对应关系可以根据需要配置,在配置时可以根据需要设置对应关系的细化粒度,例如,在一可选方式中,可以配置所有参数修改信息的调整指标与透明度的对应关系均相同,也就是说,参数修改信息的透明度只与用户所选择的调整指标有关,与具体的参数修改信息无关。
例如,在一示例中,假如用户选择的特效调整指标为15,依据预配置的调整指标和参数修改信息透明度的对应关系,确定调整指标15对应的透明度为25,此时,无论该调整指标是哪种唇部妆容参数修改信息的调整指标,此时对应的唇部妆容参数修改信息的透明度均为25。
在另一可选方式中,由于在实际应用中,唇部妆容参数修改信息通常都会有多种,不同的唇部妆容参数修改信息的调整指标与参数修改信息的透明度的对应关系也可以是不同的。也就是说,可以针对不同的唇部妆容参数修改信息分别配置不同的妆容参数修改信息调整指标与参数修改信息的透明度的对应关系。此时,需要首先依据用户所选择的具体的唇部妆容参数修改信息,确定该参数修改信息所对应的调整指标与参数修改信息的透明度的对应关系,再依据用户选择的调整指标和该对应关系,确定出用户所选择的唇部妆容参数修改信息所对应的透明度。
比如,当唇部妆容参数修改信息为口红颜色特效时,调整指标与参数修改信息的透明度对应关系为预先配置的对应关系集合中的对应关系2,当唇部妆容参数修改信息为口红形状特效时,调整指标与参数修改信息的透明度的对应关系为可以为预先配置的对应关系集合中的对应关系3。在用户选择的唇部妆容参数修改信息为口红颜色特效时,首先确定对应关系为上述对应关系2,再依据该对应关系2,确定出用户所选择的调整指标所对应的透明度。
相应的,在确定出用户所选择的调整指标所对应的透明度后,若对待处理唇部区域进行相应的处理,采用的是将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上的方式,此时需要根据确定的透明度对唇部妆容参数修改信息对应的妆容素材的透明度进行处理,得到调整后的妆容素材,然后将调整后的妆容素材叠加至待处理唇部区域之上。
若对待处理唇部区域进行相应的处理时,采用的是根据目标颜色基准图,将待处理唇部区域的每一个像素点的原始颜色值修改为目标颜色值的方式,此时可以根据确定的透明度,对唇部妆容参数修改信息对应的目标颜色基准图的透明度进行调整,得到调整后的目标颜色基准图,然后根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值,并将待处理唇部区域的每一个像素点的原始颜色值修改为目标颜色值。
在实际的应用中,为了使调整后的待处理人脸图像更加的真实自然,在本公开的实施中会对调整后的待处理人脸图像进行渲染,得到与唇部妆容参数修改信息对应的效果图。本公开实施例中对渲染的具体实现方式不做限定。
其中,一种可选的渲染实施方式为:预先设置每个唇部特征点与纹理坐标的对应关系,在得到唇部特征点后,可以根据唇部特征点对应的纹理坐标计算得出插值特征点的纹理坐标。根据唇部特征点和插值特征点确定出待处理唇部区域的目标顶点坐标,然后基于预先配置的每个唇部特征点与纹理坐标的对应关系,以及唇部特征点和插值特征点对应的纹理坐标,确定出目标顶点坐标所对应的纹理坐标,之后将得到的纹理坐标对应的纹理贴到待处理唇部区域上,得到与唇部妆容参数修改信息的效果图。
进一步的,在得到调整后的待处理人脸图像后,若接收到用户的图片保存指令,此时可以根据预先配置好的存储路径,将调整后的待处理人脸图像存储在相应的存储空间。比如,预先配置好的存储路径可以为本地图库的存储空间,也可以是云端服务器,本公开实施例对此不做限定。
基于与图1所示方法的相同原理,本公开的实施例中还提供了一种人脸图像处理装置20,如图7所示,该装置20可以包括:图像获取模块210、指令接收模块220、图像处理模块230以及图像显示模块240,其中,
图像获取模块210,用于获取待处理人脸图像;
指令接收模块220,用于接收对待处理人脸图像的唇部妆容调整指令,唇部妆容调整指令中包括基于待处理人脸图像的唇部妆容参数修改信息;
图像处理模块230,用于依据唇部妆容参数修改信息,检测待处理人脸图像中的唇部特征点,并对唇部特征点进行插值处理,得到插值特征点,根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域,以及根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理,得到调整后的待处理人脸图像;
图像显示模块240,用于显示调整后的待处理人脸图像。
本公开的实施例中,图像处理模块在根据唇部妆容参数修改信息,对待处理唇部区域进行相应的处理时,具体用于:
将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上;或者,
确定与唇部妆容参数修改信息对应的目标颜色基准图;
根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值;
将待处理唇部区域的每一个像素点的原始颜色值修改为目标颜色值。
本公开的实施例中,图像处理模块在根据唇部妆容特效,对待处理唇部
本公开的实施例中,图像处理模块在确定与唇部妆容参数修改信息对应的目标颜色基准图时,具体用于:
依据预配置的参数修改信息和滤镜方式的对应关系,确定唇部妆容参数修改信息对应的滤镜方式;
依据确定出的滤镜方式对预配置的默认颜色基准图进行相应的滤镜处理,得到目标颜色基准图;
或者,
依据预配置的参数修改信息与颜色基准图的对应关系,确定与唇部妆容参数修改信息对应的目标颜色基准图。
本公开的实施例中,图像处理模块在根据唇部特征点和插值特征点,确定待处理人脸图像中的待处理唇部区域时,具体用于:
根据唇部特征点和插值特征点,确定唇部轮廓;
生成与述唇部妆容参数修改信息对应的待处理人脸图像的掩膜图像,掩膜图像的感兴趣区域与唇部轮廓对应的区域相匹配;
根据待处理人脸图像和掩膜图像,生成感兴趣图像,感兴趣图像中的感兴趣区域为待处理唇部区域。
本公开的实施例中,唇部妆容调整指令中还包括针对唇部妆容参数修改信息的调整指标,调整指标用于标识唇部妆容参数修改信息对应的透明度;
图像处理模块在将唇部妆容参数修改信息对应的妆容素材叠加至待处理唇部区域之上时,具体用于:
依据调整指标,以及预配置的调整指标和参数修改信息的透明度的对应关系,确定调整指标对应的唇部妆容参数修改信息的透明度;
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的妆容素材的透明度进行处理,得到调整后的妆容素材;
将调整后的妆容素材叠加至待处理唇部区域之上;
图像处理模块在根据目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值时,具体用于:
根据唇部妆容参数修改信息的透明度,对唇部妆容参数修改信息对应的目标颜色基准图的透明度进行调整,得到调整后的目标颜色基准图;
根据调整后的目标颜色基准图,确定待处理唇部区域的每一个像素点的目标颜色值。
本公开的实施例中,指令接收模块在接用户对待处理人脸图像的唇部妆容调整指令时,具体用于:
接收用户对待处理人脸图像的唇部妆容调整触发指令;
响应于唇部妆容调整触发指令,显示唇部妆容调整界面,唇部妆容调整界面中显示有唇部妆容参数修改信息选项和待处理人脸图像;
通过唇部妆容调整界面,接收唇部妆容调整指令。
本公开的实施例中,待处理人脸图像为实时捕获的当前图像,或从本地图像库中选取的人脸图像。
本公开的实施例中的方案,在接收到选择的唇部妆容调整指令时,即可根据唇部妆容调整指令中的唇部妆容对应待处理人脸图像进行处理,即实现了一键调整图像中用户唇部妆容的功能,而不需要用户手动对人脸图像的唇部妆容进行编辑,大大减少了唇部妆容的处理的时间,提升了用户的使用体验。
基于与本公开的实施例中的图像处理方法相同的原理,本公开的实施例中还提供了一种电子设备,该电子设备可以包括但不限于:处理器和存储器;存储器,用于存储计算机操作指令;处理器,用于通过调用计算机操作指令执行实施例所示的方法。
基于与本公开的实施例中的图像处理方法相同的原理,本公开的实施例中还提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序指令,计算机程序指令用于使计算机执行以实现上述实施例所示的方法,在此不再赘述。
下面参考图8,其示出了适于用来实现本公开实施例的电子设备800的结构示意图,该电子设备800可以为终端设备或服务器。其中,终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图8示出的电子设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图8所示,电子设备800可以包括处理装置(例如中央处理器、图形处理器等)801,其可以根据存储在只读存储器(ROM)802中的程序或者从存储装置808加载到随机访问存储器(RAM)803中的程序而执行各种适当的动作和处理。在RAM 803中,还存储有电子设备800操作所需的各种程序和数据。处理装置801、ROM 802以及RAM 803通过总线804彼此相连。输入/输出(I/O)接口805也连接至总线804。
通常,以下装置可以连接至I/O接口805:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置806;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置807;包括例如磁带、硬盘等的存储装置808;以及通信装置809。通信装置809可以允许电子设备800与其他设备进行无线或有线通信以交换数据。虽然图8示出了具有各种装置的电子设备800,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置809从网络上被下载和安装,或者从存储装置808被安装,或者从ROM 802被安装。在该计算机程序被处理装置801执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该电子设备执行时,使得该电子设备执行上述实施例所示的方法。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定,例如,第一获取单元还可以被描述为“获取至少两个网际协议地址的单元”。
以上描述仅为本公开的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本公开中所涉及的公开范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述公开构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本公开中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (10)
1.一种人脸图像处理方法,其特征在于,包括:
获取待处理人脸图像;
接收对所述待处理人脸图像的唇部妆容调整指令,所述唇部妆容调整指令中包括基于所述待处理人脸图像的唇部妆容参数修改信息;
依据所述唇部妆容参数修改信息,检测所述待处理人脸图像中的唇部特征点,并对所述唇部特征点进行插值处理,得到插值特征点;
根据所述唇部特征点和所述插值特征点,确定所述待处理人脸图像中的待处理唇部区域;
根据所述唇部妆容参数修改信息,对所述待处理唇部区域进行相应的处理,得到调整后的所述待处理人脸图像;
显示所述调整后的所述待处理人脸图像。
2.根据权利要求1所述的方法,其特征在于,所述根据所述唇部妆容参数修改信息,对所述待处理唇部区域进行相应的处理,包括:
将所述唇部妆容参数修改信息对应的妆容素材叠加至所述待处理唇部区域之上;或者,
确定与所述唇部妆容参数修改信息对应的目标颜色基准图;
根据所述目标颜色基准图,确定所述待处理唇部区域的每一个像素点的目标颜色值;
将所述待处理唇部区域的每一个像素点的原始颜色值修改为所述目标颜色值。
3.根据权利要求2所述的方法,其特征在于,所述确定与所述唇部妆容参数修改信息对应的目标颜色基准图,包括:
依据预配置的参数修改信息和滤镜方式的对应关系,确定所述唇部妆容参数修改信息对应的滤镜方式;
依据确定出的滤镜方式对预配置的默认颜色基准图进行相应的滤镜处理,得到所述目标颜色基准图;
或者,
依据预配置的参数修改信息与颜色基准图的对应关系,确定与所述唇部妆容参数修改信息对应的目标颜色基准图。
4.根据权利要求1所述的方法,其特征在于,根据所述唇部特征点和所述插值特征点,确定所述待处理人脸图像中的待处理唇部区域,包括:
根据所述唇部特征点和所述插值特征点,确定唇部轮廓;
生成与所述唇部妆容参数修改信息对应的所述待处理人脸图像的掩膜图像,所述掩膜图像的感兴趣区域与所述唇部轮廓对应的区域相匹配;
根据所述待处理人脸图像和所述掩膜图像,生成感兴趣图像,所述感兴趣图像中的感兴趣区域为所述待处理唇部区域。
5.根据权利要求1至4中任一所述的方法,其特征在于,所述唇部妆容调整指令中还包括针对唇部妆容参数修改信息的调整指标,所述调整指标用于标识所述唇部妆容参数修改信息对应的透明度;
所述将所述唇部妆容参数修改信息对应的妆容素材叠加至所述待处理唇部区域之上,包括:
依据所述调整指标,以及预配置的调整指标和参数修改信息的透明度的对应关系,确定所述调整指标对应的所述唇部妆容参数修改信息的透明度;
根据所述唇部妆容参数修改信息的透明度,对所述唇部妆容参数修改信息对应的妆容素材的透明度进行处理,得到调整后的妆容素材;
将所述调整后的妆容素材叠加至所述待处理唇部区域之上;
所述根据所述目标颜色基准图,确定所述待处理唇部区域的每一个像素点的目标颜色值,包括:
根据所述唇部妆容参数修改信息的透明度,对所述唇部妆容参数修改信息对应的目标颜色基准图的透明度进行调整,得到调整后的目标颜色基准图;
根据所述调整后的目标颜色基准图,确定所述待处理唇部区域的每一个像素点的目标颜色值。
6.根据权利要求1所述的方法,其特征在于,所述接用户对所述待处理人脸图像的唇部妆容调整指令,包括:
接收所述用户对所述待处理人脸图像的唇部妆容调整触发指令;
响应于所述唇部妆容调整触发指令,显示唇部妆容调整界面,所述唇部妆容调整界面中显示有唇部妆容参数修改信息选项和所述待处理人脸图像;
通过所述唇部妆容调整界面,接收所述唇部妆容调整指令。
7.根据权利要求1至6中任一项所述的方法,其特征在于,所述待处理人脸图像为实时捕获的当前图像,或所述从本地图像库中选取的人脸图像。
8.一种人脸图像处理装置,其特征在于,包括:
图像获取模块,用于获取待处理人脸图像;
指令接收模块,用于接收对所述待处理人脸图像的唇部妆容调整指令,所述唇部妆容调整指令中包括基于所述待处理人脸图像的唇部妆容参数修改信息;
图像处理模块,用于依据所述唇部妆容参数修改信息,检测所述待处理人脸图像中的唇部特征点,并对所述唇部特征点进行插值处理,得到插值特征点,根据所述唇部特征点和所述插值特征点,确定所述待处理人脸图像中的待处理唇部区域,以及根据所述唇部妆容参数修改信息,对所述待处理唇部区域进行相应的处理,得到调整后的所述待处理人脸图像;
图像显示模块,用于显示所述调整后的所述待处理人脸图像。
9.一种电子设备,其特征在于,包括:
处理器和存储器;
所述存储器,用于存储计算机操作指令;
所述处理器,用于通过调用所述计算机操作指令,执行上述权利要求1至7中任一项所述的方法。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储有计算机程序指令,所述计算机程序指令用于使所述计算机执行上述权利要求1至7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811457973.2A CN109584180A (zh) | 2018-11-30 | 2018-11-30 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811457973.2A CN109584180A (zh) | 2018-11-30 | 2018-11-30 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN109584180A true CN109584180A (zh) | 2019-04-05 |
Family
ID=65926753
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811457973.2A Pending CN109584180A (zh) | 2018-11-30 | 2018-11-30 | 人脸图像处理方法、装置、电子设备及计算机存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109584180A (zh) |
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110008911A (zh) * | 2019-04-10 | 2019-07-12 | 北京旷视科技有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN110084219A (zh) * | 2019-05-07 | 2019-08-02 | 厦门美图之家科技有限公司 | 界面交互方法及装置 |
CN110390632A (zh) * | 2019-07-22 | 2019-10-29 | 北京七鑫易维信息技术有限公司 | 基于妆容模板的图像处理方法、装置、存储介质及终端 |
CN110400254A (zh) * | 2019-07-24 | 2019-11-01 | 深圳乐信软件技术有限公司 | 一种口红试妆方法及装置 |
CN111091490A (zh) * | 2019-11-29 | 2020-05-01 | 广州久邦世纪科技有限公司 | 一种图片处理方法及装置 |
CN111556303A (zh) * | 2020-05-14 | 2020-08-18 | 北京字节跳动网络技术有限公司 | 人脸图像处理方法、装置、电子设备及计算机可读介质 |
CN111553219A (zh) * | 2020-04-21 | 2020-08-18 | 海信集团有限公司 | 一种数据处理方法及智能设备 |
CN111784568A (zh) * | 2020-07-06 | 2020-10-16 | 北京字节跳动网络技术有限公司 | 人脸图像处理方法、装置、电子设备及计算机可读介质 |
CN113344837A (zh) * | 2021-06-28 | 2021-09-03 | 展讯通信(上海)有限公司 | 人脸图像处理方法及装置、计算机可读存储介质、终端 |
CN113450367A (zh) * | 2020-03-24 | 2021-09-28 | 北京字节跳动网络技术有限公司 | 图像处理方法及装置 |
CN113628132A (zh) * | 2021-07-26 | 2021-11-09 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN113837020A (zh) * | 2021-08-31 | 2021-12-24 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837018A (zh) * | 2021-08-31 | 2021-12-24 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837017A (zh) * | 2021-08-31 | 2021-12-24 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN114155569A (zh) * | 2021-08-31 | 2022-03-08 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
EP4207048A1 (en) * | 2021-02-23 | 2023-07-05 | Beijing Sensetime Technology Development Co., Ltd. | Image processing method and apparatus, electronic device, and storage medium |
WO2023142645A1 (zh) * | 2022-01-28 | 2023-08-03 | 上海商汤智能科技有限公司 | 图像处理方法、装置、电子设备、存储介质和计算机程序产品 |
WO2023169287A1 (zh) * | 2022-03-11 | 2023-09-14 | 北京字跳网络技术有限公司 | 美妆特效的生成方法、装置、设备、存储介质和程序产品 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104778712A (zh) * | 2015-04-27 | 2015-07-15 | 厦门美图之家科技有限公司 | 一种基于仿射变换的人脸贴图方法和*** |
CN104966267A (zh) * | 2015-07-02 | 2015-10-07 | 广东欧珀移动通信有限公司 | 一种美颜用户图像的方法及装置 |
CN105956522A (zh) * | 2016-04-21 | 2016-09-21 | 腾讯科技(深圳)有限公司 | 图片处理方法和装置 |
CN106846240A (zh) * | 2015-12-03 | 2017-06-13 | 阿里巴巴集团控股有限公司 | 一种调整融合素材的方法、装置和设备 |
CN107644396A (zh) * | 2017-10-18 | 2018-01-30 | 维沃移动通信有限公司 | 一种唇色调整方法和装置 |
CN107800966A (zh) * | 2017-10-31 | 2018-03-13 | 广东欧珀移动通信有限公司 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
CN108596992A (zh) * | 2017-12-31 | 2018-09-28 | 广州二元科技有限公司 | 一种快速实时的唇彩化妆方法 |
-
2018
- 2018-11-30 CN CN201811457973.2A patent/CN109584180A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104778712A (zh) * | 2015-04-27 | 2015-07-15 | 厦门美图之家科技有限公司 | 一种基于仿射变换的人脸贴图方法和*** |
CN104966267A (zh) * | 2015-07-02 | 2015-10-07 | 广东欧珀移动通信有限公司 | 一种美颜用户图像的方法及装置 |
CN106846240A (zh) * | 2015-12-03 | 2017-06-13 | 阿里巴巴集团控股有限公司 | 一种调整融合素材的方法、装置和设备 |
CN105956522A (zh) * | 2016-04-21 | 2016-09-21 | 腾讯科技(深圳)有限公司 | 图片处理方法和装置 |
CN107644396A (zh) * | 2017-10-18 | 2018-01-30 | 维沃移动通信有限公司 | 一种唇色调整方法和装置 |
CN107800966A (zh) * | 2017-10-31 | 2018-03-13 | 广东欧珀移动通信有限公司 | 图像处理的方法、装置、计算机可读存储介质和电子设备 |
CN108596992A (zh) * | 2017-12-31 | 2018-09-28 | 广州二元科技有限公司 | 一种快速实时的唇彩化妆方法 |
Non-Patent Citations (1)
Title |
---|
郭斯羽主编: "《面向检测的图像处理技术》", 31 August 2015, 湖南大学出版社 * |
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110008911A (zh) * | 2019-04-10 | 2019-07-12 | 北京旷视科技有限公司 | 图像处理方法、装置、电子设备及计算机可读存储介质 |
CN110084219A (zh) * | 2019-05-07 | 2019-08-02 | 厦门美图之家科技有限公司 | 界面交互方法及装置 |
CN110084219B (zh) * | 2019-05-07 | 2022-06-24 | 厦门美图之家科技有限公司 | 界面交互方法及装置 |
CN110390632A (zh) * | 2019-07-22 | 2019-10-29 | 北京七鑫易维信息技术有限公司 | 基于妆容模板的图像处理方法、装置、存储介质及终端 |
CN110390632B (zh) * | 2019-07-22 | 2023-06-09 | 北京七鑫易维信息技术有限公司 | 基于妆容模板的图像处理方法、装置、存储介质及终端 |
CN110400254A (zh) * | 2019-07-24 | 2019-11-01 | 深圳乐信软件技术有限公司 | 一种口红试妆方法及装置 |
CN111091490A (zh) * | 2019-11-29 | 2020-05-01 | 广州久邦世纪科技有限公司 | 一种图片处理方法及装置 |
CN111091490B (zh) * | 2019-11-29 | 2023-10-13 | 广州久邦世纪科技有限公司 | 一种图片处理方法及装置 |
CN113450367A (zh) * | 2020-03-24 | 2021-09-28 | 北京字节跳动网络技术有限公司 | 图像处理方法及装置 |
CN111553219A (zh) * | 2020-04-21 | 2020-08-18 | 海信集团有限公司 | 一种数据处理方法及智能设备 |
CN111556303A (zh) * | 2020-05-14 | 2020-08-18 | 北京字节跳动网络技术有限公司 | 人脸图像处理方法、装置、电子设备及计算机可读介质 |
CN111784568A (zh) * | 2020-07-06 | 2020-10-16 | 北京字节跳动网络技术有限公司 | 人脸图像处理方法、装置、电子设备及计算机可读介质 |
EP4207048A1 (en) * | 2021-02-23 | 2023-07-05 | Beijing Sensetime Technology Development Co., Ltd. | Image processing method and apparatus, electronic device, and storage medium |
EP4207048A4 (en) * | 2021-02-23 | 2024-05-15 | Beijing Sensetime Tech Development Co Ltd | IMAGE PROCESSING METHOD AND DEVICE, ELECTRONIC DEVICE AND STORAGE MEDIUM |
CN113344837A (zh) * | 2021-06-28 | 2021-09-03 | 展讯通信(上海)有限公司 | 人脸图像处理方法及装置、计算机可读存储介质、终端 |
CN113628132A (zh) * | 2021-07-26 | 2021-11-09 | 北京达佳互联信息技术有限公司 | 图像处理方法、装置、电子设备及存储介质 |
CN114155569B (zh) * | 2021-08-31 | 2022-11-04 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837018A (zh) * | 2021-08-31 | 2021-12-24 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN114155569A (zh) * | 2021-08-31 | 2022-03-08 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837017B (zh) * | 2021-08-31 | 2022-11-04 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837020A (zh) * | 2021-08-31 | 2021-12-24 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837020B (zh) * | 2021-08-31 | 2024-02-02 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837017A (zh) * | 2021-08-31 | 2021-12-24 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
CN113837018B (zh) * | 2021-08-31 | 2024-06-14 | 北京新氧科技有限公司 | 一种化妆进度检测方法、装置、设备及存储介质 |
WO2023142645A1 (zh) * | 2022-01-28 | 2023-08-03 | 上海商汤智能科技有限公司 | 图像处理方法、装置、电子设备、存储介质和计算机程序产品 |
WO2023169287A1 (zh) * | 2022-03-11 | 2023-09-14 | 北京字跳网络技术有限公司 | 美妆特效的生成方法、装置、设备、存储介质和程序产品 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109584180A (zh) | 人脸图像处理方法、装置、电子设备及计算机存储介质 | |
CN109583385A (zh) | 人脸图像处理方法、装置、电子设备及计算机存储介质 | |
CN109614902A (zh) | 人脸图像处理方法、装置、电子设备及计算机存储介质 | |
CN104461410B (zh) | 移动通信***、移动终端及其控制方法 | |
CN107622518B (zh) | 图片合成方法、装置、设备及存储介质 | |
CN109584152A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN109543646A (zh) | 人脸图像处理方法、装置、电子设备及计算机存储介质 | |
CN108595239A (zh) | 图片处理方法、装置、终端及计算机可读存储介质 | |
CN109522869A (zh) | 人脸图像处理方法、装置、终端设备及计算机存储介质 | |
WO2022042290A1 (zh) | 一种虚拟模型处理方法、装置、电子设备和存储介质 | |
CN110070496A (zh) | 图像特效的生成方法、装置和硬件装置 | |
CN110069974B (zh) | 高光图像处理方法、装置和电子设备 | |
CN109544444A (zh) | 图像处理方法、装置、电子设备及计算机存储介质 | |
US20230386001A1 (en) | Image display method and apparatus, and device and medium | |
WO2022142875A1 (zh) | 图像处理方法、装置、电子设备及存储介质 | |
CN109559288A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN110084204A (zh) | 基于目标对象姿态的图像处理方法、装置和电子设备 | |
CN110070515A (zh) | 图像合成方法、装置和计算机可读存储介质 | |
CN110211030A (zh) | 图像生成方法和装置 | |
CN110507061A (zh) | 美甲图案选择方法、装置、***、电子设备、及存储介质 | |
CN110533598A (zh) | 用于连续多帧图像去噪的装置及方法 | |
CN107369142A (zh) | 图像处理方法及装置 | |
CN111080806A (zh) | 贴图处理方法及装置、电子设备、存储介质 | |
CN109559274A (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN108683872A (zh) | 视频通话方法、装置、存储介质及移动终端 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |