CN110211033A - 人脸图像处理方法、装置、介质及电子设备 - Google Patents

人脸图像处理方法、装置、介质及电子设备 Download PDF

Info

Publication number
CN110211033A
CN110211033A CN201910582940.9A CN201910582940A CN110211033A CN 110211033 A CN110211033 A CN 110211033A CN 201910582940 A CN201910582940 A CN 201910582940A CN 110211033 A CN110211033 A CN 110211033A
Authority
CN
China
Prior art keywords
cheekbone
special efficacy
processed
facial image
adjustment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910582940.9A
Other languages
English (en)
Inventor
胡惠平
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201910582940.9A priority Critical patent/CN110211033A/zh
Publication of CN110211033A publication Critical patent/CN110211033A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/04Context-preserving transformations, e.g. by using an importance map
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168Feature extraction; Face representation
    • G06V40/171Local features and components; Facial parts ; Occluding parts, e.g. glasses; Geometrical relationships

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本公开的实施例提供了一种人脸图像处理方法、装置、介质及电子设备,该方法包括:获取待处理人脸图像;接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作;根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。在本公开实施例中,在接收到用户选择需要添加的颧骨调整特效的选择操作时,即可将颧骨调整特效对应的效果添加在待处理人脸图像中,即实现了一键调整图像中用户颧骨区域的功能,而不需要用户手动对人脸图像的颧骨区域进行编辑,大大减少了颧骨调整特效的处理的时间,提升了用户的交互体验。

Description

人脸图像处理方法、装置、介质及电子设备
技术领域
本公开涉及图像处理技术领域,具体而言,本公开涉及一种人脸图像处理方法、装置、介质及电子设备。
背景技术
随着智能设备应用的越来越广泛,获得人脸图像的手段越来越便捷,用户对于人脸图像的要求也越来越高,在现有的美颜类工具中,用户可对人脸图像进行美颜处理,以提升图像的美感,例如美白、曝光调整以及脸型的修整。但是,在现有的美颜类工具中,要么是设置好的自动美颜,这种美颜方式用户无法选择,智能设备根据预置算法自动给出美颜结果,有时候,自动给出的人脸修复差别比较明显,有过多的失真,同时用户也无法根据需要进行局部调整,带来诸多不便。要么,有些美颜工具,需要用户手动进行复杂的操作,不亚于进行一次PS,这样的美颜工具操作复杂,甚至需要长时间的学习才能顺利操作,比如,调整脸型,用户需要对脸部轮廓进行多角度的手动操作,才能得到理想的脸型图像。对于手动调整图像不熟练的用户,通过手动调整的方式进行图像的美颜处理,不但很难达到美颜的目的,并且美颜处理耗时时间长,用户的使用体验较差。
因此,现有的美颜类工具中,要么无法进行局部调整,自动调整效果差,要么用户操作过程复杂,用户体验较差,不能够满足用户的实际应用需求。
发明内容
本公开的目的在于提供一种人脸图像处理方法、装置、介质和电子设备,能够解决上述提到的至少一个技术问题。具体方案如下:
根据本公开的具体实施方式,第一方面,本公开提供一种人脸图像处理方法,包括:
获取待处理人脸图像;
接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作;
根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。
可选的,所述根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理,包括:
确定所述待处理人脸图像的坐标原点值;
确定所述待处理人脸图像中的颧骨的当前特征点,根据所述坐标原点值确定所述当前特征点的当前特征值;
根据所述当前特征值对所述颧骨进行特效调整处理。
可选的,所述根据所述当前特征值对所述颧骨进行特效调整处理,包括:
根据所述当前特征值以及局部特效操作确定当前特征点的移动矢量,所述当前移动矢量包括当前移动方向和当前移动距离;
接收开始调整指令,根据所述当前特征点的移动矢量,所述颧骨当前特征点移动至与所述调整指令匹配的移动后颧骨特征点。
可选的,所述根据所述当前特征值以及局部特效操作确定当前特征点的移动矢量,包括:
根据所述当前特征值确定所述局部特效操作的起点位置;
根据所述局部特效操作确定所述颧骨特征点的终点位置;
根据所述起点位置和所述终点位置确定当前特征点的移动矢量。
可选的,所述接收开始调整指令,根据所述当前特征点的移动矢量,所述颧骨当前特征点移动至与所述调整指令匹配的移动后颧骨特征点,之后包括:
根据所述移动后颧骨特征点和所述当前特征点,确定颧骨调整区域;
对所述颧骨调整区域进行渲染,得到调整后的人脸颧骨图像。
可选的,还包括:
判断所述待处理人脸图像是否包括同一人的多张待处理人脸图像;
若包括同一人的多张待处理人脸图像,则同步所述特效处理结果到所述同一人的待处理人脸图像。
可选的,所述接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作,包括:
接收用户对待处理人脸图像的人脸颧骨调整触发操作;
响应于所述触发操作,显示滑动标识界面,所述滑动标识界面显示有人脸颧骨调整参数,所述人脸颧骨调整参数用于标识颧骨调整强度。
根据本公开的具体实施方式,第二方面,本公开提供一种人脸图像处理装置,包括:
获取单元,用于获取待处理人脸图像;
接收单元,用于接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作;
处理单元,用于根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。
根据本公开的具体实施方式,第三方面,本公开提供一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现如上任一项所述的方法。
根据本公开的具体实施方式,第四方面,本公开提供一种电子设备,包括:一个或多个处理器;存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如上任一项所述的方法。
本公开实施例的上述方案与现有技术相比,至少具有以下有益效果:本公开实施例的人脸图像处理方法、装置、电子设备及计算机可读存储介质,其中,所述方法使得用户在需要处理人脸图像中的颧骨时,通过将实时拍摄获得的图像或存储于设备中的图像打开,触发显示界面的对人脸图像的颧骨部位的特效操作,即可实现对人脸图像用户的颧骨区域的特效处理,通过该方案,可以通过简易操作的方式,对一个人或多个人的人脸颧骨图像进行美观修复,并经过后台的渲染获得自然的修复效果,改变因颧骨突出而不美观的缺陷,整个修复可以一键完成而不需要用户手动对人脸图像的颧骨区域进行复杂的编辑,大大减少了颧骨调整特效的处理的时间,提升了用户的交互体验,具有较高的市场价值。
附图说明
为了更清楚地说明在本公开的实施例中的技术方案,下面将对本公开实施例描述中所需要使用的附图作简单地介绍。
图1为本公开的实施例提供的图像处理方法的流程示意图;
图2为本公开实施例中特效选择界面的示意图;
图3为本公开实施例中特效滑动界面的示意图;
图4为本公开实施例中颧骨特征点的移动方向的示意图;
图5为本公开的实施例提供的图像处理装置的结构示意图;
图6为本公开的实施例提供的处理单元的结构示意图;
图7为本公开的实施例提供的一种电子设备的结构示意图。
具体实施方式
为了使本公开的目的、技术方案和优点更加清楚,下面将结合附图对本公开作进一步地详细描述,显然,所描述的实施例仅仅是本公开一部分实施例,而不是全部的实施例。基于本公开中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其它实施例,都属于本公开保护的范围。
在本公开实施例中使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本公开。在本公开实施例和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义,“多种”一般包含至少两种。
应当理解,本文中使用的术语“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
应当理解,尽管在本公开实施例中可能采用术语第一、第二、第三等来描述……,但这些……不应限于这些术语。这些术语仅用来将……区分开。例如,在不脱离本公开实施例范围的情况下,第一……也可以被称为第二……,类似地,第二……也可以被称为第一……。
取决于语境,如在此所使用的词语“如果”、“若”可以被解释成为“在……时”或“当……时”或“响应于确定”或“响应于检测”。类似地,取决于语境,短语“如果确定”或“如果检测(陈述的条件或事件)”可以被解释成为“当确定时”或“响应于确定”或“当检测(陈述的条件或事件)时”或“响应于检测(陈述的条件或事件)”。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的商品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种商品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的商品或者装置中还存在另外的相同要素。
下面结合附图详细说明本公开的可选实施例。
实施例1
如图1所示,根据本公开的具体实施方式,本公开提供一种人脸图像处理方法,包括如下方法步骤:
步骤S102:获取待处理人脸图像。
其中,待处理人脸图像中包括对应的人脸部位,比如,颧骨、眼睛、鼻子、嘴、耳朵、下巴、脸蛋以及脸型等;待处理图像中可以包括一个人的人脸,也可以包括多个人的人脸,所述待处理人脸图像可以是彩色或黑白或其他任何附加了拍摄效果的人脸图像。待处理人脸图像可以是视频图像也可以是照片图像。待处理人脸图像可以是实时获取后处理,也可以是存储后再打开处理,例如从图片存储文件夹打开之前拍摄的待处理人脸图像。
其中,获取所述待处理人脸图像的手段不做任何限制,例如,可以通过具有拍摄功能的终端设备拍摄获得,终端设备指的是诸如美颜相机、智能手机和平板电脑之类的具有图像拍摄功能的电子产品。用户可以通过终端设备中的诸如触摸屏或物理按键之类的输入设备输入摄像头启动指令,控制终端设备的摄像头处于拍照模式,获取摄像头采集到的待处理人脸图像。摄像头可以是终端设备的内置摄像头,如前置摄像头和后置摄像头,也可以是终端设备的外置摄像头,如旋转摄像头,可选的是前置摄像头。
也可以是通过上述拍摄终端设备拍摄完人脸图像后,存储于设备本体或外部存储器后,上传到图像处理装置,例如不具有拍摄功能的台式机电脑、服务器等终端,但是可以预装相应的程序以实现对导入图像的处理,这时,获取待处理人脸图像的方式就是,通过本地设备打开存储的待处理人脸图像。
步骤S104:接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作。
其中,局部特效操作表示用户选择想要添加至待处理人脸图像的颧骨、眼睛、鼻子、嘴、耳朵、下巴以及脸型等的操作,例如,用户在终端设备的用户界面选择颧骨调整特效的按钮,当然也可以选择其他位置的特效按钮,如图2所示,用户可以在显示界面选择任何一种人脸的局部进行美颜特效操作按钮,终端可以检测到用户在客户端的应用3程序的界面上的触发动作,并响应该触发动作,例如在检测到该特效选择操作后,即可基于用户的该操作,得知用户所想要添加的颧骨调整特效。
在实际应用中,可通过客户端的相关触发标识触发该操作,比如客户端界面上的指定触发按钮或输入框,还可以是用户的语音指令,具体的,如图2所示,可以是在客户端的显示界面上显示的各种颧骨调整特效的虚拟按钮,用户点击其中任一按钮的操作即为用户的特效选择操作,比如,颧骨调整特效的虚拟按钮、眼睛调整特效的虚拟按钮、下巴调整特效的虚拟按钮等,用户点击颧骨调整特效的虚拟按钮的动作即为用户的特效选择操作。
可选的,所述步骤S104还包括:接收用户对待处理人脸图像的人脸颧骨调整触发操作;响应于所述触发操作,显示滑动标识界面,所述滑动标识界面显示有人脸颧骨调整参数,所述人脸颧骨调整参数用于标识颧骨调整强度。
-----------------
进入选择的特效处理界面后,例如进入对颧骨进行调整的显示界面后,如图3所示,会进一步显示特效滑动选择界面,可将特效调整指标以数值形式标识于图形滑动界面,滑动界面上的不同数值可以代表不同的调整强度,可以与调整特征点之间的移动距离相关联,例如,特征点之间的特征差值经过计算为100,可以对应显示于滑动界面,也可以根据后台映射表,进行同比例的放大或缩小,例如特征点之间的特征差值经过计算为100,可以显示数值10,以减小滑动界面上的显示刻度。或者,例如特征点之间的特征差值经过计算为10,可以在滑动界面以20的刻度进行标识,以增强调整灵敏度。特征值的大小与界面显示值的大小可以根据情况进行设置,以有利于实际操作为宜。
如图3所示的实际操作示例,用户可以通过客户端的显示界面上的滑动按钮来实现颧骨调整幅度的滑动选择,如图3所示的一种用于调整特效调整指标的用户界面示意图,其中,图像预览区可以用于实时显示人脸图像,用户可通过滑动特效调整滑动按钮来选择不同的调整幅度,同时在图像预览区可以实时的显示调整的效果,用户可以根据需要决定调整的终止。
步骤S106:根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。
用户在需要处理人脸图像中的颧骨时,通过触发对待处理人脸图像的特效选择操作,即可实现对待处理人脸图像用户的颧骨区域的特效处理,通过该方案,在接收到用户选择需要添加的颧骨调整特效的选择操作时,即可将颧骨调整特效对应的效果添加在待处理人脸图像中,即实现了一键调整图像中用户颧骨区域的功能,而不需要用户手动对人脸图像的颧骨区域进行编辑,大大减少了颧骨调整特效的处理的时间,提升了用户的交互体验。
可选的,所述步骤S106包括如下子步骤:
步骤S1061:确定所述待处理人脸图像的坐标原点值。
坐标系的选择可以包括但不限于直角坐标系、笛卡尔坐标系等,为了描述方便,本实施例采用直角坐标系进行描述。
坐标原点的选择可以根据图像处理便捷性进行选择,例如可以选择与图像处理区域的左上角、右上角、左下角、右下角等固定位置作为待处理图像的坐标原点。具体的,实施方式之一,例如选择图像的左下角作为图像的坐标原点(0,0),向右方向为X轴,向上方向为Y轴,当然,可以不限于该定义方式,通过上述的任意方式都可以进行定义坐标原点。此外,可以以像素值为单位确定待处理图像上每一点的坐标,例如与所述坐标原点间隔一个像素的坐标为(0,1)或(1,0)等。
步骤S1062:确定所述待处理人脸图像中的颧骨的当前特征点,根据所述坐标原点值确定所述当前特征点的当前特征值。
需要说明的是,本公开实施例中的颧骨特征点是用于标识待处理人脸图像中用户的颧骨轮廓的特征点。其中,确定待处理人脸图像中的颧骨区域的颧骨特征点的具体方法,以及具体需要检测哪些部位的特征点,可以根据实际需要预先配置,本公开的实施例不做具体限定,比如,可以直接检测待处理人脸图像中的颧骨区域的颧骨特征点,也可以通过检测待处理人脸图像中的其他人脸部位的特征点,根据其他人脸部位的特征点计算得到颧骨特征点。
确定颧骨的当前特征点,首先需要确定颧骨的位置大致位于图像的哪一个坐标范围内,然后通过图像自动识别的SDK获取颧骨的当前特征点,再结合原点坐标确定当前特征点的位置及坐标,即确定颧骨的当前特征值,例如确定颧骨的3个当前特征点b1、b2、b3,并确定当前特征值为b1(x’1,y’1)、b2(x’2,y’2)、b3(x’3,y’3)。
步骤S1064:根据所述当前特征值对所述颧骨进行特效调整处理。
可选的,步骤S1064包括:
第一、根据所述当前特征值以及所述局部特效操作确定当前特征点的移动矢量,所述当前移动矢量包括当前移动方向和当前移动距离。
例如,根据所述当前特征值确定所述局部特效操作的起点位置,例如坐标分别为b1(x’1,y’1)、b2(x’2,y’2)、b3(x’3,y’3);根据所述局部特效操作确定所述颧骨特征点的终点位置,例如坐标分别为a1(x1,y1)、a2(x2,y2)、a3(x3,y3),根据所述起点位置和所述终点位置确定当前特征点的移动矢量。
如上,确定当前特征点的当前特征值为b1(x’1,y’1)、b2(x’2,y’2)、b3(x’3,y’3),检测到对颧骨的所述局部特效操作为将当前特征点向内收敛,收敛方向为水平向内,收敛的终点特征值为a1(x1,y1)、a2(x2,y2)、a3(x3,y3)。通过上述当前特征值以及局部特效操作确定当前特征点的移动矢量。具体包括:
通过局部操作确定所述颧骨当前特征点的移动方向为向内收缩,所述颧骨当前特征点的移动距离为所述颧骨当前特征值与所述颧骨移动后特征值的差值。可以确定颧骨的移动矢量为其中,确定当前移动距离|b1a1|、|b2a2|、|b3a3|。
上述方向的调整也不是固定的,可以选择逆向进行调整。
第二、接收开始调整指令,根据所述当前特征点的移动矢量,所述颧骨当前特征点移动至与所述调整指令匹配的移动后颧骨特征点。
可选的,还包括步骤:
第三、根据所述移动后颧骨特征点和所述当前特征点,确定颧骨调整区域。
颧骨特征点进行移动后,就可以确定出移动前后的位置区域,该位置区域就是调整后的区域,如图4所示。特效调整指标与特征点移动距离的对应关系可以根据实际需要进行预先配置,基于不同的特效调整指标与特征点移动距离的对应关系可以对人脸图像中的颧骨进行对应的颧骨调整特效处理后,得到不同的处理效果,进一步提升用户的交互体验。
第四、对所述颧骨调整区域进行渲染,得到调整后的人脸颧骨图像。
其中,渲染包括肤色的渲染,平滑度的渲染,明暗度的渲染等。对于图像的渲染技术不做过多赘述,具体实施过程是在区域调整后自动进行渲染操作,并实时显示于图像预览区域。
一种可选的渲染实施方式为:预先设置每个颧骨特征点与纹理坐标的对应关系,当对颧骨特征点进行调整后,可以根据调整后的颧骨特征点确定出调整后的颧骨区域的目标顶点坐标,然后基于预先配置的每个颧骨特征点与纹理坐标的对应关系,以及颧骨特征点对应的纹理坐标,确定出目标顶点坐标所对应的纹理坐标,之后将得到的纹理坐标对应的纹理贴到调整后的颧骨区域相对应的位置上,得到与颧骨调整特效对应的效果图。
本公开的实施例中,特效选择操作中还包括用户针对滤镜特效的滤镜添加操作;此时,该方法还可以包括:
接收滤镜添加操作;
根据滤镜添加操作,将滤镜特效添加到待处理人脸图像中。
其中,为了满足用户对同一待处理人脸图像的更多美颜需求,还可以提供滤镜特效添加功能,即通过用户的滤镜添加操作,对当前进行处理的人脸图像增加所选择的滤镜特效。滤镜特效可以包括多种类型,比如清新滤镜、白皙滤镜及自然滤镜等。
在实际应用中,滤镜添加操作可通过用户对特效选择界面的具体操作动作实现,比如,左右滑动特效选择界面中的待处理人脸图像对应的区域,即可实现滤镜特效的添加及切换。
本公开的实施例中,该方法还可以包括:
接收特效撤销操作;
根据特效撤销操作,将添加到待处理人脸图像中的颧骨调整特效和/或滤镜特效清除。
在实际应用中,可以根据需要配置不同的特效撤销策略,例如,可按照颧骨调整特效在待处理人脸图像中添加的先后顺序进行特效的清除,也可以对添加的颧骨调整特效全部清除。
本公开的实施例中,接收用户对待处理人脸图像的特效选择操作,可以包括:
接收用户对待处理人脸图像的特效触发操作;
响应于特效触发操作,显示特效选择界面,特效选择界面中显示有颧骨调整特效选项和待处理人脸图像;
通过特效选择界面,接收特效选择操作。
其中,特效触发操作表示用户想要对待处理人脸图像颧骨添加特效,即用户用于触发开始进行颧骨调整特效添加的动作,该操作的具体形式可以根据需要配置,例如,可以是用户在客户端的显示界面上特定操作位置的触发动作,也可以是特定的虚拟按钮等。该方案中,在检测到该特效触发操作后,即可基于用户的该操作,将特效选择界面进行显示,以使用户能够在该界面进行颧骨调整特效的选择操作。
本公开的实施例中,待处理人脸图像为实时捕获的当前人脸图像,或用户从本地图像库中选取的人脸图像。
在实际应用中,待处理人脸图像可以为通过具有拍照功能的终端设备实时获取的视频帧的人脸图像,也可以是从图像库中的选择的图像,其中,图像库可以存储在本地或者服务器,若存储在服务器,则待处理人脸图像为向服务器发送图像获取请求获取到的图像。
本公开的实施例中,还可以包括:待处理人脸图像为多张时,判断所述多张待处理人脸图像是否包括同一人的待处理人脸图像。
根据图像识别技术,从人脸图像中的眼睛、鼻子、嘴巴、脸型等特征进行识别,可以识别多个部位的布局或单个部位的具体特征进行图像识别,识别技术的细节不做过多说明,现有能够进行图像识别的技术均包括在本公开方案之内。逐一判断被识别人脸图像是否与处理的人脸图像为同一人脸,并进行标记。
具体的,在操作界面,当单一图像被处理完成后,处理设备自动扫描在同一根目录下(例如同一文件夹或同一图片查看器等),是否包括多幅为同一人的人脸图像,若包括多于一幅的同一人的待处理人脸图像,则在显示界面给出提示界面,所述提示界面供用户选择是否进行同步处理,其中提示界面可以是弹出对话框的形式或自动勾选属于同一人的人脸图像,待进一步接收操作指令后进行同步或不进行同步特效处理结果。
本公开的实施例中,还可以包括:若包括同一人的待处理人脸图像,则同步所述特效处理结果到所述同一人的待处理人脸图像。
当用户选择同步特效处理结果后,设备接收到确认同步处理的指令,设备会同步所述特效处理结果到所述同一人的待处理人脸图像。这样,属于同一人的人脸就执行了同样的特效操作。进一步的,所述同步特效的范围可以任意选定,例如有100张同一人脸图像,用户可以选择任意数量或任意几幅人脸图像进行同步,以适应不同场合的需求。
本公开方法使得用户在需要处理人脸图像中的颧骨时,通过将实时拍摄获得的图像或存储于设备中的图像打开,触发显示界面的对人脸图像的颧骨部位的特效操作,即可实现对人脸图像用户的颧骨区域的特效处理,通过该方案,可以通过简易操作的方式,对一个人或多个人的人脸颧骨图像进行美观修复,并经过后台的渲染获得自然的修复效果,改变因颧骨突出而不美观的缺陷,整个修复可以一键完成而不需要用户手动对人脸图像的颧骨区域进行复杂的编辑,大大减少了颧骨调整特效的处理的时间,提升了用户的交互体验,具有较高的市场价值。
实施例2
本实施例承接实施例1,用于实现如实施例1所述的方法步骤,基于相同的名称含义的解释与实施例1相同,具有与实施例1相同的技术效果,此处不再赘述。
如图5所示,根据本公开的具体实施方式,本公开提供一种人脸图像处理装置,包括获取单元502、接收单元504、处理单元506,具体如下:
获取单元502:用于获取待处理人脸图像。
接收单元504:用于接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作。
可选的,所述接收单元504还包括:接收用户对待处理人脸图像的人脸颧骨调整触发操作;响应于所述触发操作,显示滑动标识界面,所述滑动标识界面显示有人脸颧骨调整参数,所述人脸颧骨调整参数用于标识颧骨调整强度。
处理单元506:用于根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。
如图6所示,可选的,所述处理单元506还包括:
第一确定单元601:用于确定所述待处理人脸图像的坐标原点值。
第二确定单元602:用于确定所述待处理人脸图像中的颧骨的当前特征点,根据所述坐标原点值确定所述当前特征点的当前特征值。
特效单元603:用于根据所述当前特征值对所述颧骨进行特效调整处理。
可选的,特效单元603包括:
第一、根据所述当前特征值以及所述局部特效操作确定当前特征点的移动矢量,所述当前移动矢量包括当前移动方向和当前移动距离。
例如,根据所述当前特征值确定所述局部特效操作的起点位置,例如坐标分别为b1(x’1,y’1)、b2(x’2,y’2)、b3(x’3,y’3);根据所述局部特效操作确定所述颧骨特征点的终点位置,例如坐标分别为a1(x1,y1)、a2(x2,y2)、a3(x3,y3),根据所述起点位置和所述终点位置确定当前特征点的移动矢量。
如上,确定当前特征点的当前特征值为b1(x’1,y’1)、b2(x’2,y’2)、b3(x’3,y’3),检测到对颧骨的所述局部特效操作为将当前特征点向内收敛,收敛方向为水平向内,收敛的终点特征值为a1(x1,y1)、a2(x2,y2)、a3(x3,y3)。通过上述当前特征值以及局部特效操作确定当前特征点的移动矢量。具体包括:
通过局部操作确定所述颧骨当前特征点的移动方向为向内收缩,所述颧骨当前特征点的移动距离为所述颧骨当前特征值与所述颧骨移动后特征值的差值。可以确定颧骨的移动矢量为其中,确定当前移动距离|b1a1|、|b2a2|、|b3a3|。
上述方向的调整也不是固定的,可以选择逆向进行调整。
第二、接收开始调整指令,根据所述当前特征点的移动矢量,所述颧骨当前特征点移动至与所述调整指令匹配的移动后颧骨特征点。
可选的,还包括:
第三、根据所述移动后颧骨特征点和所述当前特征点,确定颧骨调整区域。
颧骨特征点进行移动后,就可以确定出移动前后的位置区域,该位置区域就是调整后的区域,如图4所示。特效调整指标与特征点移动距离的对应关系可以根据实际需要进行预先配置,基于不同的特效调整指标与特征点移动距离的对应关系可以对人脸图像中的颧骨进行对应的颧骨调整特效处理后,得到不同的处理效果,进一步提升用户的交互体验。
第四、对所述颧骨调整区域进行渲染,得到调整后的人脸颧骨图像。
其中,渲染包括肤色的渲染,平滑度的渲染,明暗度的渲染等。对于图像的渲染技术不做过多赘述,具体实施过程是在区域调整后自动进行渲染操作,并实时显示于图像预览区域。
本公开的实施例中,还可以包括判断单元:用于待处理人脸图像为多张时,判断所述多张待处理人脸图像是否包括同一人的待处理人脸图像。
本公开的实施例中,还可以包括同步单元:用于若包括同一人的待处理人脸图像,则同步所述特效处理结果到所述同一人的待处理人脸图像。
本公开装置使得用户在需要处理人脸图像中的颧骨时,通过将实时拍摄获得的图像或存储于设备中的图像打开,触发显示界面的对人脸图像的颧骨部位的特效操作,即可实现对人脸图像用户的颧骨区域的特效处理,通过该方案,可以通过简易操作的方式,对一个人或多个人的人脸颧骨图像进行美观修复,并经过后台的渲染获得自然的修复效果,改变因颧骨突出而不美观的缺陷,整个修复可以一键完成而不需要用户手动对人脸图像的颧骨区域进行复杂的编辑,大大减少了颧骨调整特效的处理的时间,提升了用户的交互体验,具有较高的市场价值。
实施例3
如图7所示,本实施例提供一种电子设备,该设备用于图像处理,所述电子设备,包括:至少一个处理器;以及,与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行如上实施例所述的方法步骤。
实施例4
本公开实施例提供了一种非易失性计算机存储介质,所述计算机存储介质存储有计算机可执行指令,该计算机可执行指令可执行如上实施例所述的方法步骤。
实施例5
下面参考图7,其示出了适于用来实现本公开实施例的电子设备的结构示意图。本公开实施例中的终端设备可以包括但不限于诸如移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。图7示出的电子设备700仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图7所示,电子设备可以包括处理装置(例如中央处理器、图形处理器等)701,其可以根据存储在只读存储器(ROM)702中的程序或者从存储装置708加载到随机访问存储器(RAM)703中的程序而执行各种适当的动作和处理。在RAM 703中,还存储有电子设备操作所需的各种程序和数据。处理装置701、ROM 702以及RAM 703通过总线706彼此相连。输入/输出(I/O)接口706也连接至总线706。
通常,以下装置可以连接至I/O接口706:包括例如触摸屏、触摸板、键盘、鼠标、摄像头、麦克风、加速度计、陀螺仪等的输入装置706;包括例如液晶显示器(LCD)、扬声器、振动器等的输出装置706;包括例如磁带、硬盘等的存储装置708;以及通信装置706。通信装置706可以允许电子设备与其他设备进行无线或有线通信以交换数据。虽然图7示出了具有各种装置的电子设备,但是应理解的是,并不要求实施或具备所有示出的装置。可以替代地实施或具备更多或更少的装置。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信装置706从上被下载和安装,或者从存储装置708被安装,或者从ROM 702被安装。在该计算机程序被处理装置701执行时,执行本公开实施例的方法中限定的上述功能。
需要说明的是,本公开上述的计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读信号介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:电线、光缆、RF(射频)等等,或者上述的任意合适的组合。
上述计算机可读介质可以是上述电子设备中所包含的;也可以是单独存在,而未装配入该电子设备中。
可以以一种或多种程序设计语言或其组合来编写用于执行本公开的操作的计算机程序代码,上述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本公开各种实施例的***、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本公开实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。其中,单元的名称在某种情况下并不构成对该单元本身的限定。

Claims (10)

1.一种人脸图像处理方法,其特征在于,包括:
获取待处理人脸图像;
接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作;
根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。
2.根据权利要求1所述的方法,其特征在于,所述根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理,包括:
确定所述待处理人脸图像的坐标原点值;
确定所述待处理人脸图像中的颧骨的当前特征点,根据所述坐标原点值确定所述当前特征点的当前特征值;
根据所述当前特征值对所述颧骨进行特效调整处理。
3.根据权利要求2所述的方法,其特征在于,所述根据所述当前特征值对所述颧骨进行特效调整处理,包括:
根据所述当前特征值以及局部特效操作确定当前特征点的移动矢量,所述当前移动矢量包括当前移动方向和当前移动距离;
接收开始调整指令,根据所述当前特征点的移动矢量,所述颧骨当前特征点移动至与所述调整指令匹配的移动后颧骨特征点。
4.根据权利要求3所述的方法,其特征在于,所述根据所述当前特征值以及局部特效操作确定当前特征点的移动矢量,包括:
根据所述当前特征值确定所述局部特效操作的起点位置;
根据所述局部特效操作确定所述颧骨特征点的终点位置;
根据所述起点位置和所述终点位置确定当前特征点的移动矢量。
5.根据权利要求4所述的方法,其特征在于,所述接收开始调整指令,根据所述当前特征点的移动矢量,所述颧骨当前特征点移动至与所述调整指令匹配的移动后颧骨特征点,之后包括:
根据所述移动后颧骨特征点和所述当前特征点,确定颧骨调整区域;
对所述颧骨调整区域进行渲染,得到调整后的人脸颧骨图像。
6.根据权利要求1所述的方法,其特征在于,还包括:
判断所述待处理人脸图像是否包括同一人的多张待处理人脸图像;
若包括同一人的多张待处理人脸图像,则同步所述特效处理结果到所述同一人的待处理人脸图像。
7.根据权利要求1所述的方法,其特征在于,所述接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作,包括:
接收用户对待处理人脸图像的人脸颧骨调整触发操作;
响应于所述触发操作,显示滑动标识界面,所述滑动标识界面显示有人脸颧骨调整参数,所述人脸颧骨调整参数用于标识颧骨调整强度。
8.一种人脸图像处理装置,其特征在于,包括:
获取单元,用于获取待处理人脸图像;
接收单元,用于接收用户对所述待处理人脸图像的局部特效操作,所述局部特效操作中包括所述用户对人脸颧骨调整的特效操作;
处理单元,用于根据所述对人脸颧骨调整的特效操作,对所述待处理人脸图像进行颧骨调整特效处理。
9.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述程序被处理器执行时实现如权利要求1至7中任一项所述的方法。
10.一种电子设备,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行时,使得所述一个或多个处理器实现如权利要求1至7中任一项所述的方法。
CN201910582940.9A 2019-06-28 2019-06-28 人脸图像处理方法、装置、介质及电子设备 Pending CN110211033A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910582940.9A CN110211033A (zh) 2019-06-28 2019-06-28 人脸图像处理方法、装置、介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910582940.9A CN110211033A (zh) 2019-06-28 2019-06-28 人脸图像处理方法、装置、介质及电子设备

Publications (1)

Publication Number Publication Date
CN110211033A true CN110211033A (zh) 2019-09-06

Family

ID=67795626

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910582940.9A Pending CN110211033A (zh) 2019-06-28 2019-06-28 人脸图像处理方法、装置、介质及电子设备

Country Status (1)

Country Link
CN (1) CN110211033A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110598027A (zh) * 2019-09-10 2019-12-20 Oppo广东移动通信有限公司 图像处理效果的显示方法、装置、电子设备以及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106231434A (zh) * 2016-07-25 2016-12-14 武汉斗鱼网络科技有限公司 一种基于人脸检测的直播互动特效实现方法及***
CN109427038A (zh) * 2017-08-30 2019-03-05 涂世满 一种手机照片显示方法和***
CN109544444A (zh) * 2018-11-30 2019-03-29 深圳市脸萌科技有限公司 图像处理方法、装置、电子设备及计算机存储介质
CN109584152A (zh) * 2018-11-30 2019-04-05 深圳市脸萌科技有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN110378847A (zh) * 2019-06-28 2019-10-25 北京字节跳动网络技术有限公司 人脸图像处理方法、装置、介质及电子设备

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106231434A (zh) * 2016-07-25 2016-12-14 武汉斗鱼网络科技有限公司 一种基于人脸检测的直播互动特效实现方法及***
CN109427038A (zh) * 2017-08-30 2019-03-05 涂世满 一种手机照片显示方法和***
CN109544444A (zh) * 2018-11-30 2019-03-29 深圳市脸萌科技有限公司 图像处理方法、装置、电子设备及计算机存储介质
CN109584152A (zh) * 2018-11-30 2019-04-05 深圳市脸萌科技有限公司 图像处理方法、装置、电子设备及计算机可读存储介质
CN110378847A (zh) * 2019-06-28 2019-10-25 北京字节跳动网络技术有限公司 人脸图像处理方法、装置、介质及电子设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110598027A (zh) * 2019-09-10 2019-12-20 Oppo广东移动通信有限公司 图像处理效果的显示方法、装置、电子设备以及存储介质

Similar Documents

Publication Publication Date Title
CN110929651B (zh) 图像处理方法、装置、电子设备及存储介质
CN110378847A (zh) 人脸图像处理方法、装置、介质及电子设备
CN110378839A (zh) 人脸图像处理方法、装置、介质及电子设备
WO2021213067A1 (zh) 物品显示方法、装置、设备及存储介质
CN106682632B (zh) 用于处理人脸图像的方法和装置
EP2708981B1 (en) Gesture recognition apparatus, control method thereof, display instrument, and computer readable medium
CN109584152A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
WO2022179025A1 (zh) 图像处理方法及装置、电子设备和存储介质
CN109614902A (zh) 人脸图像处理方法、装置、电子设备及计算机存储介质
WO2019237745A1 (zh) 人脸图像处理方法、装置、电子设备及计算机可读存储介质
EP3917131A1 (en) Image deformation control method and device and hardware device
CN111062276A (zh) 基于人机交互的人体姿态推荐方法、装置、机器可读介质及设备
CN109903392A (zh) 增强现实方法和装置
CN109544444A (zh) 图像处理方法、装置、电子设备及计算机存储介质
CN108694719A (zh) 图像输出方法和装置
CN108170282A (zh) 用于控制三维场景的方法和装置
CN110570383B (zh) 一种图像处理方法、装置、电子设备及存储介质
CN109698914A (zh) 一种闪电特效渲染方法、装置、设备及存储介质
CN109559288A (zh) 图像处理方法、装置、电子设备及计算机可读存储介质
CN108595278A (zh) 防偷窥提示方法及相关产品
CN107690804A (zh) 一种图像处理方法及用户终端
CN110213486A (zh) 图像拍摄方法、终端及计算机可读存储介质
CN109271929A (zh) 检测方法和装置
CN113453027A (zh) 直播视频、虚拟上妆的图像处理方法、装置及电子设备
CN110211033A (zh) 人脸图像处理方法、装置、介质及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination