CN117197305A - 用于显示五官特效的方法、装置及计算机可读介质 - Google Patents
用于显示五官特效的方法、装置及计算机可读介质 Download PDFInfo
- Publication number
- CN117197305A CN117197305A CN202311294780.0A CN202311294780A CN117197305A CN 117197305 A CN117197305 A CN 117197305A CN 202311294780 A CN202311294780 A CN 202311294780A CN 117197305 A CN117197305 A CN 117197305A
- Authority
- CN
- China
- Prior art keywords
- organs
- user
- display
- face
- facial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 73
- 230000000694 effects Effects 0.000 title claims abstract description 65
- 210000000697 sensory organ Anatomy 0.000 title claims abstract description 58
- 210000000056 organ Anatomy 0.000 claims abstract description 119
- 230000001815 facial effect Effects 0.000 claims abstract description 69
- 238000012545 processing Methods 0.000 claims abstract description 35
- 239000000463 material Substances 0.000 claims description 24
- 238000004590 computer program Methods 0.000 claims description 10
- 230000008859 change Effects 0.000 abstract description 7
- 210000001508 eye Anatomy 0.000 description 30
- 238000010586 diagram Methods 0.000 description 10
- 238000000605 extraction Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 7
- 240000002853 Nelumbo nucifera Species 0.000 description 6
- 235000006508 Nelumbo nucifera Nutrition 0.000 description 6
- 235000006510 Nelumbo pentapetala Nutrition 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000001514 detection method Methods 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 239000000284 extract Substances 0.000 description 2
- 210000004709 eyebrow Anatomy 0.000 description 2
- 210000000887 face Anatomy 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 238000013507 mapping Methods 0.000 description 2
- 239000013307 optical fiber Substances 0.000 description 2
- 230000000644 propagated effect Effects 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Landscapes
- Image Processing (AREA)
Abstract
本申请提供了一种用于显示五官特效的方法、装置及计算机可读介质。根据本申请的方法包括:通过对视频数据进行人脸识别操作,获取相应的人脸特征信息;基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据;基于用户设置的五官配置信息,对目标图像进行特效显示处理,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。本申请通过将多种人脸器官的组合的动态图像数据添加至目标图像进行显示,使得显示的五官图像能够随用户表情的变化而发生对应的变化,提升了了五官特效的显示效果;基于用户设置的五官配置信息来显示五官特效,使得用户可基于喜好选择想要显示的人脸器官的类型和数量。
Description
技术领域
本申请涉及计算机技术领域,尤其涉及一种用于显示五官特效的方法、装置及计算机可读介质。
背景技术
基于现有技术的方案,在一些短视频应用中可制作一些具有趣味性的五官特效,将用户的眼睛或嘴巴等器官在图片中的物体,比如水果,上进行同步显示。然而,基于现有技术的方案,一般在预定的位置显示用户的眼睛或嘴巴,而用户无法对显示的人脸器官的种类数量等进行设置。
发明内容
本申请的多个方面提供一种用于对视频进行五官特效处理的方法、装置及计算机可读介质。
本申请的一方面,提供一种用于显示五官特效的方法,其中,所述方法包括:
通过对视频数据进行人脸识别操作,获取相应的人脸特征信息;
基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据;
基于用户设置的五官配置信息,对目标图像进行特效显示处理,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。
本申请的一方面,提供一种用于显示五官特效的装置,其中,所述装置包括:
用于通过对视频数据进行人脸识别操作,获取相应的人脸特征信息的装置;
用于基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据的装置;
用于基于用户设置的五官配置信息,对目标图像进行特效显示处理的装置,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。
本申请的另一方面,提供一种电子设备,所述电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行以实现申请实施例的方法。
本申请的另一方面,提供一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令可被处理器执行以实现申请实施例的方法。
本申请实施例提供的方案中,通过将多种人脸器官的组合的动态图像数据添加至目标图像进行显示,使得显示的五官图像能够随用户表情的变化而发生对应的变化,提升了五官特效的显示效果;基于用户设置的五官配置信息来显示五官特效,使得用户可基于喜好选择想要显示的人脸器官的类型和数量,并将想要显示的人脸器官对应的动态图像映射至图片的相应位置进行显示,进一步提升了五官特效的显示效果。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其它的附图。
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1示出了本申请实施例提供的一种用于进行五官特效处理的方法的流程示意图;
图2(a)示出了根据本申请实施例的示例性的人脸图像的示意图;
图2(b)示出了根据本申请实施例的示例性的五官特效的示意图;
图2(c)示出了根据本申请实施例的示例性的五官特效的示意图;
图3示出了本申请实施例提供的一种用于进行五官特效处理的装置的结构示意图;
图4示出了适用于实现本申请实施例中的方案的一种设备的结构示意图。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
在本申请一个典型的配置中,终端、服务网络的设备均包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器,随机存取存储器(RAM)和/或非易失性内存等形式,如只读存储器(ROM)或闪存(flash RAM)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体,可以由任何方法或技术来实现信息存储。信息可以是计算机程序指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带,磁带磁盘存储或其他磁性存储设备或任何其他非传输介质,可用于存储可以被计算设备访问的信息。
图1示出了本申请实施例提供的一种用于方法的流程示意图。所述方法至少包括步骤S101、步骤S102、步骤S103和步骤S104。
在实际场景中,该方法的执行主体可以是用户设备、或者用户设备与网络设备通过网络相集成所构成的设备,或者也可以是运行于上述设备的应用程序,所述用户设备包括但不限于计算机、手机、平板电脑、智能手表、手环等各类终端设备,所述网络设备包括但不限于如网络主机、单个网络服务器、多个网络服务器集或基于云计算的计算机集合等实现,可以用于实现设置闹钟时的部分处理功能。在此,云由基于云计算(Cloud Computing)的大量主机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟计算机。
参照图1,在步骤S101中,通过对目标视频数据进行人脸识别操作,获取相应的人脸特征信息。
其中,所述目标视频数据包括各种类型的包含人脸的视频数据,例如,用户已存储的或实时拍摄的照片或视频图像,直播视频等。
其中,所述人脸特征信息包括用于表征用户脸部五官特征的信息。
所述五官特征包括但不限于眼睛(左眼和右眼)、眉毛(左眉和右眉)、鼻子、嘴巴等。
具体地,所述方法在步骤S101中对目标视频数据中的每一帧画面进行人脸识别操作,来获取相应的人脸特征信息。
本领域技术人员应熟悉,可采用多种类型的人脸识别模型来进行人脸识别处理,此处不再赘述。
在步骤S102中,基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据。
其中,所述动态图像数据包括用于表征用户当前表情的图像数据。例如,眨眼、张嘴、抿嘴等表情。
根据一个实施例,所述步骤S102包括步骤S1021和步骤S1022。
在步骤S1021中,通过分别对多个人脸器官进行识别,确定识别出的各个人脸器官在视频数据中的显示区域。
在步骤S1022中,基于所述各个人脸器官在视频数据中的显示区域,获取一个或多个人脸器官对应的动态图像数据。
可选地,所述方法基于预定的五官提取规则或基于用户的选择操作,从人脸特征信息中提取一个或多个人脸器官的动态图像数据。
可选地,所述方法基于曲线插值法,获取对应的一个或多个人脸器官的动态图像数据。
其中,所述曲线插值法使用Catmull-Rom算法,能够在目标点之间插值生成一条平滑的曲线。相比直接将五官检测的点位直接折线相连的五官提取方式,曲线插值法经过所有的检测关键点,保证了五官提取的范围是正确的,并且,曲线的曲率相比于其他五官提取方式方法更加平滑,从而提升了平滑度。
在步骤S103中,基于用户设置的五官配置信息,对目标图像进行特效显示处理,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。
其中,所述目标图像可以是预存储的图片或视频数据。或者,所述目标图像可以是用户实时拍摄的照片或视频图像。
可选地,所述目标图像中包括一个或多个目标物体。
可选地,所述方法将待显示的一个或多个器官映射至目标图像的相应位置来同步显示所述一个或多个器官的动态变化。
其中,所述五官配置信息包括但不限于以下至少任一项:
1)人脸器官类型;例如,“眼睛”、“鼻子、“嘴巴”等类型;
2)人脸器官数量;
3)人脸器官显示位置;可选地,所述显示位置对应于目标图像中的一个或多个物体;
4)人脸器官图像的大小。
具体地,所述步骤S103包括步骤S1031和步骤S1032。
在步骤S1031中,基于用户设置的五官配置信息,确定待显示的一个或多个人脸器官分别在目标图像中的显示位置和显示大小。
根据一个实施例,所述方法还包括步骤S104。
在步骤S104中,向用户提供素材配置工具。其中,所述素材配置工具用于进行各种与在目标图像中显示五官特效相关的配置操作。
接着,本实施例的方法在步骤S1031中,基于用户使用素材配置工具配置的五官配置信息,确定目标图像的背景图片和待显示的一个或多个人脸器官的显示位置和显示到小。
其中,所述方法可基于用户的设置操作来更换所述目标图像的背景图片。
在步骤S1032中,在目标图像中用户设置的相应位置添加对应的人脸器官的动态图像数据进行显示。
可选地,所述方法在步骤S103中将待显示的一个或多个人脸器官对应的动态图像数据分别单独添加至目标图像中的用户设置的相应位置进行显示。通过设置所述五官配置信息,用户可选择多种不同数量的五官的组合来进行显示,例如,用户可选择在特定的位置显示四只眼睛和三个嘴巴。
其中,所述方法可分别对各个人脸器官进行单独映射,而不需要保持人脸器官默认的相对位置关系。例如,在目标图片的物体中显示的嘴巴可以位于眼睛的上方。
根据一个实施例,所述方法还包括步骤S105和步骤S106。
在步骤S105中,获取用户对目标图像中显示的一个或多个人脸器官的显示调整操作。
可选地,所述显示调整操可包括各种类型的触屏操作。例如,用户可对屏幕中显示的一个或多个人脸器官进行缩放、拖拽等触屏操作来相应地调整显示大小和显示位置。
可选地,所述显示调整操作包括以下至少任一项操作:
1)位置调整操作;例如,通过拖拽显示的人脸器官来将其调整到想要的位置;
2)旋转操作;该旋转操作用于调整显示的人脸器官的方向;
3)缩放操作;该缩放操作用于调整显示的人脸器官的大小。
在步骤S106中,基于所述显示调整操作,相应地调整一个或多个人脸器官的显示效果。
例如,所述方法可采用素材包的形式来获取用户设置的五官配置信息。该素材包由素材制作工具制作。并且,用户可在该素材包中设定底图图层的图片,并设置好五官提取后放置的位置。在相机实时预览时,按照该用户素材包的配置进行渲染计算。用户开始可以进行导入图片的操作,替换素材包里预设的背景图片。并且,用户还可以对已显示的人脸器官进行触屏操作来调整一个或多个人脸器官的位置、显示方向、显示大小,以适应新导入的背景图片。
根据一个实施例,所述方法还包括步骤S107。
在步骤S107中,基于用户的设置操作,对待显示的一个或多个人脸器官进行美化处理。
可选地,所述美化处理包括但不限于以下至少任一项:
1)五官形变;
2)五官上妆;
3)五官调色。
根据本申请实施例的方法,通过将多种人脸器官的组合的动态图像数据添加至目标图像进行显示,使得显示的五官图像能够随用户表情的变化而发生对应的变化,提升了五官特效的显示效果;基于用户设置的五官配置信息来显示五官特效,使得用户可基于喜好选择想要显示的人脸器官的类型和数量,并将想要显示的人脸器官对应的动态图像映射至图片的相应位置进行显示,进一步提升了五官特效的显示效果。
下面结合一个示例对本申请实施例的方法进行说明。
用户通过手机登录该短视频app,并在该app中通过摄像头自拍一段视频,该视频的视频帧如图2(a)所示。本示例的方法获取该视频数据并在步骤S101中通过对视频数据进行人脸识别操作,获取该用户的人脸特征信息。接着,在步骤S102中基于该人脸特征信息,按照预定的五官提取规则获取眼睛和嘴巴对应的动态图像数据。
接着,在步骤S103中基于用户设置的五官配置信息,对目标图像进行特效显示处理,将该用户的眼睛和嘴巴映射至目标图像中“荷花”的区域来同步显示用户的眼睛和嘴巴的动态变化,如图2(b)所示。
具体地,用户希望显示三只眼睛和一个嘴巴,并通过该app中提供的素材包对五官配置信息进行相应设置,得到用户设置的五官配置信息包括:显示三只眼睛和一个嘴巴;在图片的“荷花”的由上至下分别显示一只眼睛、两只眼睛和一个嘴巴;眼睛的显示大小size_1和嘴巴的显示大小size_2。接着,基于该用户设置的五官配置信息,将该用户的三只眼睛和一个嘴巴映射至目标图像中“荷花”的区域来同步显示用户的眼睛和嘴巴的动态变化,如图2(c)所示。
基于本示例的方法,用户可通过进行自拍,基于喜好选择想要显示的人脸器官的类型和数量,并将想要显示的人脸器官对应的动态图像映射至图片的相应位置进行显示,例如,可将用户选择的五官组合同步映射到一张桌子图片的桌面上,使得桌子的桌面上同步显示一个同步变化的该用户的五官图像,显示的五官图像能够随用户表情的变化,发生各种对应的变化。
此外,本申请实施例还提供了一种用于显示五官特效的装置,该装置的结构如图3所示。所述装置包括:用于通过对视频数据进行人脸识别操作,获取相应的人脸特征信息的装置(以下简称“第一获取装置101”),用于的装置用于基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据的装置(以下简称“第二获取装置102”),和用于基于用户设置的五官配置信息,对目标图像进行特效显示处理的装置(以下简称“特效处理装置103”)。
第一获取装置101通过对目标视频数据进行人脸识别操作,获取相应的人脸特征信息。
其中,所述目标视频数据包括各种类型的包含人脸的视频数据,例如,用户已存储的或实时拍摄的照片或视频图像,直播视频等。
其中,所述人脸特征信息包括用于表征用户脸部五官特征的信息。
所述五官特征包括但不限于眼睛(左眼和右眼)、眉毛(左眉和右眉)、鼻子、嘴巴等。
具体地,第一获取装置101对目标视频数据中的每一帧画面进行人脸识别操作,来获取相应的人脸特征信息。
本领域技术人员应熟悉,可采用多种类型的人脸识别模型来进行人脸识别处理,此处不再赘述。
第二获取装置102基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据。
其中,所述动态图像数据包括用于表征用户当前表情的图像数据。例如,眨眼、张嘴、抿嘴等表情。
根据一个实施例,所述第二获取装置102包括区域确定装置和数据获取装置。
区域确定装置通过分别对多个人脸器官进行识别,确定识别出的各个人脸器官在视频数据中的显示区域。
数据获取装置基于所述各个人脸器官在视频数据中的显示区域,获取一个或多个人脸器官对应的动态图像数据。
可选地,第二获取装置102基于预定的五官提取规则或基于用户的选择操作,从人脸特征信息中提取一个或多个人脸器官的动态图像数据。
可选地,所述方法基于曲线插值法,获取对应的一个或多个人脸器官的动态图像数据。
其中,所述曲线插值法使用样条(Catmull-Rom)算法,能够在目标点之间插值生成一条平滑的曲线。相比直接将五官检测的点位直接折线相连的五官提取方式,曲线插值法经过所有的检测关键点,保证了五官提取的范围是正确的,并且,曲线的曲率相比于其他五官提取方式方法更加平滑,从而提升了平滑度。
特效处理装置103基于用户设置的五官配置信息,对目标图像进行特效显示处理,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。
其中,所述目标图像可以是预存储的图片或视频数据。或者,所述目标图像可以是用户实时拍摄的照片或视频图像。
可选地,所述目标图像中包括一个或多个目标物体。
可选地,所述方法将待显示的一个或多个器官映射至目标图像的相应位置来同步显示所述一个或多个器官的动态变化。
其中,所述五官配置信息包括但不限于以下至少任一项:
1)人脸器官类型;例如,“眼睛”、“鼻子、“嘴巴”等类型;
2)人脸器官数量;
3)人脸器官显示位置;可选地,所述显示位置对应于目标图像中的一个或多个物体;
4)人脸器官图像的大小。
具体地,所述特效处理装置103包括显示确定装置和特效添加装置。
显示确定装置基于用户设置的五官配置信息,确定待显示的一个或多个人脸器官分别在目标图像中的显示位置和显示大小。
根据一个实施例,所述装置还包括素材配置装置。
素材配置装置向用户提供素材配置工具。其中,所述素材配置工具用于进行各种与在目标图像中显示五官特效相关的配置操作。
接着,显示确定装置基于用户使用素材配置工具配置的五官配置信息,确定目标图像的背景图片和待显示的一个或多个人脸器官的显示位置和显示到小。
其中,所述方法可基于用户的设置操作来更换所述目标图像的背景图片。
特效添加装置在目标图像中用户设置的相应位置添加对应的人脸器官的动态图像数据进行显示。
可选地,特效处理装置将待显示的一个或多个人脸器官对应的动态图像数据分别单独添加至目标图像中的用户设置的相应位置进行显示。通过设置所述五官配置信息,用户可选择多种不同数量的五官的组合来进行显示,例如,用户可选择在特定的位置显示四只眼睛和三个嘴巴。
其中,所述装置可分别对各个人脸器官进行单独映射,而不需要保持人脸器官默认的相对位置关系。例如,在目标图片的物体中显示的嘴巴可以位于眼睛的上方。
根据一个实施例,所述装置还包括调整获取装置和调整处理装置。
特效添加装置获取用户对目标图像中显示的一个或多个人脸器官的显示调整操作。
可选地,所述显示调整操可包括各种类型的触屏操作。例如,用户可对屏幕中显示的一个或多个人脸器官进行缩放、拖拽等触屏操作来相应地调整显示大小和显示位置。
可选地,所述显示调整操作包括以下至少任一项操作:
1)位置调整操作;例如,通过拖拽显示的人脸器官来将其调整到想要的位置;
2)旋转操作;该旋转操作用于调整显示的人脸器官的方向;
3)缩放操作;该缩放操作用于调整显示的人脸器官的大小。
调整处理装置基于所述显示调整操作,相应地调整一个或多个人脸器官的显示效果。
例如,所述装置可采用素材包的形式来获取用户设置的五官配置信息。该素材包由素材制作工具制作。并且,用户可在该素材包中设定底图图层的图片,并设置好五官提取后放置的位置。在相机实时预览时,按照该用户素材包的配置进行渲染计算。用户开始可以进行导入图片的操作,替换素材包里预设的背景图片。并且,用户还可以对已显示的人脸器官进行触屏操作来调整一个或多个人脸器官的位置、显示方向、显示大小,以适应新导入的背景图片。
根据一个实施例,所述在还包括美化处理装置。
美化处理装置基于用户的设置操作,对待显示的一个或多个人脸器官进行美化处理。
可选地,所述美化处理包括但不限于以下至少任一项:
1)五官形变;
2)五官上妆;
3)五官调色。
根据本申请实施例的装置,通过将多种人脸器官的组合的动态图像数据添加至目标图像进行显示,使得显示的五官图像能够随用户表情的变化而发生对应的变化,提升了五官特效的显示效果;基于用户设置的五官配置信息来显示五官特效,使得用户可基于喜好选择想要显示的人脸器官的类型和数量,并将想要显示的人脸器官对应的动态图像映射至图片的相应位置进行显示,进一步提升了五官特效的显示效果。
下面结合一个示例对本申请实施例的装置进行说明。
用户通过手机登录该短视频app,并在该app中通过摄像头自拍一段视频,该视频的视频帧如图2(a)所示。本示例的装置获取该视频数据并由第一获取装置101通过对视频数据进行人脸识别操作,获取该用户的人脸特征信息。接着,第二获取装置102基于该人脸特征信息,按照预定的五官提取规则获取眼睛和嘴巴对应的动态图像数据。
接着,特效处理装置103基于用户设置的五官配置信息,对目标图像进行特效显示处理,将该用户的眼睛和嘴巴映射至目标图像中“荷花”的区域来同步显示用户的眼睛和嘴巴的动态变化,如图2(b)所示。
具体地,用户希望显示三只眼睛和一个嘴巴,并通过该app中提供的素材包对五官配置信息进行相应设置,得到用户设置的五官配置信息包括:显示三只眼睛和一个嘴巴;在图片的“荷花”的由上至下分别显示一只眼睛、两只眼睛和一个嘴巴;眼睛的显示大小size_1和嘴巴的显示大小size_2。接着,基于该用户设置的五官配置信息,将该用户的三只眼睛和一个嘴巴映射至目标图像中“荷花”的区域来同步显示用户的眼睛和嘴巴的动态变化,如图2(c)所示。
基于本示例的装置,用户可通过进行自拍,基于喜好选择想要显示的人脸器官的类型和数量,并将想要显示的人脸器官对应的动态图像映射至图片的相应位置进行显示,例如,可将用户选择的五官组合同步映射到一张桌子图片的桌面上,使得桌子的桌面上同步显示一个同步变化的该用户的五官图像,显示的五官图像能够随用户表情的变化,发生各种对应的变化。
基于同一发明构思,本申请实施例中还提供了一种电子设备,所述电子设备对应的方法可以是前述实施例中的用于显示五官特效的方法,并且其解决问题的原理与该方法相似。本申请实施例提供的所述电子设备包括:至少一个处理器;以及与所述至少一个处理器通信连接的存储器;其中,所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行前述本申请的多个实施例的方法和/或技术方案。
所述电子设备可以是用户设备、或者用户设备与网络设备通过网络相集成所构成的设备,或者也可以是运行于上述设备的应用程序,所述用户设备包括但不限于计算机、手机、平板电脑、智能手表、手环等各类终端设备,所述网络设备包括但不限于如网络主机、单个网络服务器、多个网络服务器集或基于云计算的计算机集合等实现,可以用于实现设置闹钟时的部分处理功能。在此,云由基于云计算(Cloud Computing)的大量主机或网络服务器构成,其中,云计算是分布式计算的一种,由一群松散耦合的计算机集组成的一个虚拟计算机。
图4示出了适用于实现本申请实施例中的方法和/或技术方案的一种设备的结构,该设备1200包括中央处理单元(CPU,Central Processing Unit)1201,其可以根据存储在只读存储器(ROM,Read Only Memory)1202中的程序或者从存储部分1208加载到随机访问存储器(RAM,Random Access Memory)1203中的程序而执行各种适当的动作和处理。在RAM1203中,还存储有***操作所需的各种程序和数据。CPU 1201、ROM 1202以及RAM 1203通过总线1204彼此相连。输入/输出(I/O,Input/Output)接口1205也连接至总线1204。
以下部件连接至I/O接口1205:包括键盘、鼠标、触摸屏、麦克风、红外传感器等的输入部分1206;包括诸如阴极射线管(CRT,Cathode Ray Tube)、液晶显示器(LCD,LiquidCrystal Display)、LED显示器、OLED显示器等以及扬声器等的输出部分1207;包括硬盘、光盘、磁盘、半导体存储器等一个或多个计算机可读介质的存储部分1208;以及包括诸如LAN(局域网,Local Area Network)卡、调制解调器等的网络接口卡的通信部分1209。通信部分1209经由诸如因特网的网络执行通信处理。
特别地,本申请实施例中的方法和/或实施例可以被实现为计算机软件程序。例如,本申请公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在该计算机程序被中央处理单元(CPU)1201执行时,执行本申请的方法中限定的上述功能。
本申请另一实施例还提供了一种计算机可读存储介质,其上存储有计算机程序指令,所述计算机程序指令可被处理器执行以实现前述本申请的任意一个或多个实施例的方法和/或技术方案。
具体来说,本实施例可以采用一个或多个计算机可读介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。
计算机可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括——但不限于——电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括——但不限于——无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图或框图示出了按照本申请各种实施例的设备、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的针对硬件的***来实现,或者可以用专用硬件与计算机指令的组合来实现。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的***,装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或页面组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用硬件加软件功能单元的形式实现。
上述以软件功能单元的形式实现的集成的单元,可以存储在一个计算机可读取存储介质中。上述软件功能单元存储在一个存储介质中,包括若干指令用以使得一个计算机设备(可以是个人计算机,服务器,或者网络设备等)或处理器(processor)执行本申请各个实施例所述方法的部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(Read-Only Memory,ROM)、随机存取存储器(Random Access Memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围。
此外,显然“包括”一词不排除其他单元或步骤,单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一,第二等词语用来表示名称,而并不表示任何特定的顺序。
Claims (10)
1.一种用于显示五官特效的方法,其中,所述方法包括:
通过对视频数据进行人脸识别操作,获取相应的人脸特征信息;
基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据;
基于用户设置的五官配置信息,对目标图像进行特效显示处理,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。
2.根据权利要求1所述的方法,其中,所述基于五官配置信息,对目标图像进行特效显示处理包括:
基于用户设置的五官配置信息,确定待显示的一个或多个人脸器官分别在目标图像中的显示位置和显示大小;
在目标图像中用户设置的相应位置添加对应的人脸器官的动态图像数据进行显示。
3.根据权利要求2所述的方法,其中,所述方法还包括:
向用户提供素材配置工具;
其中,所述基于用户设置的五官配置信息,确定待显示的一个或多个人脸器官分别在目标图像中的显示位置和显示大小包括:
基于用户使用素材配置工具配置的五官配置信息,确定目标图像的背景图片和待显示的一个或多个人脸器官的显示位置和显示大小。
4.根据权利要求1或3中任一项所述的方法,其中,所述五官配置信息包括:
人脸器官类型;
人脸器官数量;
人脸器官的显示位置;
人脸器官图像的大小。
5.根据权利要求1或2所述的方法,其中,所述方法还包括:
获取用户对目标图像中显示的一个或多个人脸器官的显示调整操作,;
基于所述显示调整操作,相应地调整一个或多个人脸器官的显示效果。
6.根据权利要求5所述的方法,其中,所述显示调整操作包括以下至少任一项操作;
位置调整操作;
旋转操作;
缩放操作。
7.根据权利要求1或2所述的方法,其中,所述基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据包括:
基于曲线插值法,获取对应的一个或多个人脸器官的动态图像数据。
8.一种用于显示五官特效的装置,其中,所述装置包括:
用于通过对视频数据进行人脸识别操作,获取相应的人脸特征信息的装置;
用于基于所述人脸特征信息,获取一个或多个人脸器官对应的动态图像数据的装置;
用于基于用户设置的五官配置信息,对目标图像进行特效显示处理的装置,所述特效显示处理用于将一个或多个人脸器官对应的动态图像数据添加至目标图像进行显示。
9.一种电子设备,所述电子设备包括:
至少一个处理器;以及
与所述至少一个处理器通信连接的存储器;其中,
所述存储器存储有可被所述至少一个处理器执行的指令,所述指令被所述至少一个处理器执行,以使所述至少一个处理器能够执行权利要求1至7中任一项所述的方法。
10.一种计算机可读介质,其上存储有计算机程序指令,所述计算机程序指令可被处理器执行以实现如权利要求1至7中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311294780.0A CN117197305A (zh) | 2023-10-08 | 2023-10-08 | 用于显示五官特效的方法、装置及计算机可读介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202311294780.0A CN117197305A (zh) | 2023-10-08 | 2023-10-08 | 用于显示五官特效的方法、装置及计算机可读介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117197305A true CN117197305A (zh) | 2023-12-08 |
Family
ID=88983406
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311294780.0A Pending CN117197305A (zh) | 2023-10-08 | 2023-10-08 | 用于显示五官特效的方法、装置及计算机可读介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117197305A (zh) |
-
2023
- 2023-10-08 CN CN202311294780.0A patent/CN117197305A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110766777B (zh) | 虚拟形象的生成方法、装置、电子设备及存储介质 | |
CN110458918B (zh) | 用于输出信息的方法和装置 | |
US9811894B2 (en) | Image processing method and apparatus | |
CN110058685B (zh) | 虚拟对象的显示方法、装置、电子设备和计算机可读存储介质 | |
WO2021008166A1 (zh) | 用于虚拟试衣的方法和装置 | |
CN106846497B (zh) | 应用于终端的呈现三维地图的方法和装置 | |
US20220237812A1 (en) | Item display method, apparatus, and device, and storage medium | |
WO2020248900A1 (zh) | 全景视频的处理方法、装置及存储介质 | |
WO2023035531A1 (zh) | 文本图像超分辨率重建方法及其相关设备 | |
CN110288705B (zh) | 生成三维模型的方法和装置 | |
US11455765B2 (en) | Method and apparatus for generating virtual avatar | |
CN109754464B (zh) | 用于生成信息的方法和装置 | |
CN110069191B (zh) | 基于终端的图像拖拽变形实现方法和装置 | |
WO2020143728A1 (zh) | 画面渲染方法、装置、终端及对应的存储介质 | |
US20240046538A1 (en) | Method for generating face shape adjustment image, model training method, apparatus and device | |
CN112330527A (zh) | 图像处理方法、装置、电子设备和介质 | |
CN112766215A (zh) | 人脸融合方法、装置、电子设备及存储介质 | |
US20220139016A1 (en) | Sticker generating method and apparatus, and medium and electronic device | |
CN110189252B (zh) | 生成平均脸图像的方法和装置 | |
CN110288523B (zh) | 图像生成方法和装置 | |
CN109816791B (zh) | 用于生成信息的方法和装置 | |
US11910068B2 (en) | Panoramic render of 3D video | |
CN115965735A (zh) | 纹理贴图的生成方法和装置 | |
CN117197305A (zh) | 用于显示五官特效的方法、装置及计算机可读介质 | |
CN110619615A (zh) | 用于处理图像方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |