CN113763233B - 一种图像处理方法、服务器及拍照设备 - Google Patents
一种图像处理方法、服务器及拍照设备 Download PDFInfo
- Publication number
- CN113763233B CN113763233B CN202110890846.7A CN202110890846A CN113763233B CN 113763233 B CN113763233 B CN 113763233B CN 202110890846 A CN202110890846 A CN 202110890846A CN 113763233 B CN113763233 B CN 113763233B
- Authority
- CN
- China
- Prior art keywords
- image
- stylized
- target image
- target
- processed
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 32
- 238000012545 processing Methods 0.000 claims abstract description 73
- 238000000034 method Methods 0.000 claims abstract description 46
- 238000004590 computer program Methods 0.000 claims description 31
- 230000006870 function Effects 0.000 claims description 17
- 230000008569 process Effects 0.000 abstract description 15
- 238000010586 diagram Methods 0.000 description 15
- 238000003709 image segmentation Methods 0.000 description 8
- 230000004927 fusion Effects 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 230000011218 segmentation Effects 0.000 description 5
- 230000009466 transformation Effects 0.000 description 4
- 238000001514 detection method Methods 0.000 description 3
- 238000007781 pre-processing Methods 0.000 description 3
- 238000012549 training Methods 0.000 description 2
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000003042 antagnostic effect Effects 0.000 description 1
- 238000013528 artificial neural network Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000005336 cracking Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
- 230000002087 whitening effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
- G06T3/04—Context-preserving transformations, e.g. by using an importance map
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/70—Denoising; Smoothing
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/10—Segmentation; Edge detection
- G06T7/11—Region-based segmentation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
Abstract
本申请提供一种图像处理方法、服务器及拍照设备,涉及图像处理技术领域,能够有效地避免图像风格化过程中出现的原图与风格化图像割裂感明显,风格严重不搭的情况,提高了图像风格化的图像质量。该方法包括:服务器通过获取待处理图像和图像风格标识,在对待处理图像进行目标图像抠像处理后,可以得到第一目标图像,再通过使用图像风格化标识对应的特征模型对第一目标图像进行风格化处理后得到第二目标图像,然后,再将第二目标图像与图像风格化标识对应的风格化背景图像进行叠加融合,得到风格化后的最终目标图像。
Description
技术领域
本申请涉及图像处理技术领域,尤其涉及一种图像处理方法、服务器及拍照设备。
背景技术
图像的风格化处理越来越受到用户的喜爱,市场上存在许多图像处理软件,其中Photoshop的用户最多、专业性最强。用户通过Photoshop中自带的一些滤镜(如水彩、海报边缘、喷溅和纹理)可对图像进行相应的风格化处理。随着手机Android和ios***的出现,手机图像处理软件也广受大家喜爱。
然而,现有的手机拍照App,受限于手机运算能力和App封闭环境,对照片的处理主要集中在诸如美白等美化效果上,无法实现对照片进行整体的风格化处理,而且风格化的效果往往无法达到预期,可能会出现原图与风格化的原图与风格化图像割裂感明显,风格严重不搭感明显,风格严重不搭的情况,导致风格化后的图像质量无法满足人们的实际审美需求,用户体验较低。
发明内容
本申请实施例提供了一种图像处理方法、服务器及拍照设备,能够有效地避免图像风格化过程中出现的原图与风格化图像割裂感明显,风格严重不搭的情况,提高了图像风格化的图像质量。
第一方面,本申请提供一种图像处理方法,应用于服务器,包括:获取拍照设备发送的待处理图像和图像风格化标识;基于图像抠像方法,对待处理图像的目标和背景进行自适应分割,得到第一目标图像;将第一目标图像输入图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像;根据图像风格化标识,取图像风格化标识对应的风格化背景图像;将第二目标图像和风格化背景图像进行叠加融合,得到风格化后的最终目标图像。
本申请实施例中,服务器通过获取待处理图像和图像风格标识,在对待处理图像进行目标图像抠像处理后,可以得到第一目标图像,再通过使用图像风格化标识对应的特征模型对第一目标图像进行风格化处理后得到第二目标图像,然后,再将第二目标图像与图像风格化标识对应的风格化背景图像进行叠加融合,得到风格化后的最终目标图像,可以得到高质量的风格化图像,有效地避免图像风格化过程中出现的原图与风格化图像割裂感明显,风格严重不搭的情况,提高了图像风格化的图像质量。
示例性的,将第一目标图像输入图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像,包括:
获取第一目标图像的阿尔法通道;
通过特征模型,对第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,得到第二目标图像。
本申请实施例中,通过获取第一目标图像的阿尔法通道,并将其与预定值进行比较,可以确定第一目标图像中的透明区域和不透明区域,通过对第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,可以实现对待处理图像中的第一目标图像即不透明区域进行风格化,不对待处理图像中的背景区域即透明区域进行风格化,从而可以得到带透明通道的第二目标图像以更好地进行图像风格化处理。
示例性的,在基于图像抠像方法,对待处理图像的目标和背景进行自适应分割,得到第一目标图像时,还包括:分析并确定待处理图像中的图像噪声,并去除确定的图像噪声。
本申请实施例中,通过分析并确定待处理图像中的图像噪声,可以有效地降低图像噪声对风格化图像的干扰,进一步提高风格化图像的融合效果,得到高质量的风格化图像。
示例性的,在将第二目标图像和风格化背景图像进行叠加融合,得到风格化后的最终目标图像之后,包括:生成最终目标图像的图像链接并发送。
本申请实施例中,服务器在得到风格化后的最终目标图像后,生成该最终目标图像的图像链接,并发送给显示最终目标图像的终端设备,比如智能手机、拍照体验机等,使得用户能够在适合的设备上浏览风格化后的最终目标图像,提高用户体验。
示例性的,基于图像抠像方法,对待处理图像的目标和背景进行自适应分割,得到第一目标图像时,包括:按照预定像素扩充第一目标图像的图像边缘。
本申请实施例中,为了避免得到第一目标图像的图像边缘过于锐化导致出现的风格化后的图像背景与最终目标图像的割裂感明显的现象,可以按照预定像素扩充第一目标图像的图像边缘,使得风格化后的第一目标图像即第二目标图像能够与风格化背景图像更好地融合,得到图像质量较高的风格化图像。
第二方面,本申请提供另一种图像处理方法,应用于拍照设备,包括:
启动拍摄功能获取待处理图像;获取图像风格化标识;向服务器发送所述待处理图像和所述图像风格化标识,所述待处理图像和所述图像风格化标识用于指示所述服务器根据所述图像风格化标识对所述待处理图像进行风格化处理以得到最终的目标图像。
示例性的,该图像处理方法还包括:
接收服务器发送的图像链接;根据所述图像链接,在所述拍照设备的屏幕终端显示所述的最终的目标图像以及所述图像链接。
第三方面,本申请提供一种图像处理装置,包括:
图像及标识获取单元,用于获取拍照设备发送的待处理图像和图像风格化标识;
图像分割单元,用于基于图像抠像方法,对待处理图像的目标和背景进行自适应分割,得到第一目标图像;
风格化处理单元,用于将第一目标图像输入图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像;
风格化背景图像获取单元,用于根据图像风格化标识,获取图像风格化标识对应的风格化背景图像;
图像融合单元,用于将第二目标图像和风格化背景图像进行叠加融合,得到风格化后的最终目标图像。
具体地,风格化处理单元包括:
阿尔法通道获取子单元,用于获取第一目标图像的阿尔法通道;
风格化处理子单元,用于通过特征模型,对第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,得到第二目标图像。
具体的,图像分割单元还用于:
分析并确定待处理图像中的图像噪声,并去除确定的图像噪声。
具体的,图像处理装置还包括:
生成最终目标图像的图像链接并发送。
具体的,图像分割单元还用于:
按照预定像素扩充第一目标图像的图像边缘。
第四方面,本申请提供另一种图像处理装置,应用于拍照设备,包括:
图像及标识获取单元,用于启动拍摄功能获取待处理图像;获取图像风格化标识;
图像及标识发送单元,用于向服务器发送所述待处理图像和所述图像风格化标识,所述待处理图像和所述图像风格化标识用于指示所述服务器根据所述图像风格化标识对所述待处理图像进行风格化处理以得到最终的目标图像。
示例性的,该图像处理装置还包括:
图像链接接收单元,用于接收服务器发送的图像链接;
图像显示单元,用于根据所述图像链接,在所述拍照设备的屏幕终端显示所述的最终的目标图像以及所述图像链接。
第五方面,本申请提供一种服务器,包括处理器、存储器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现如第一方面或第一方面的任意可选方式的方法。
第六方面,本申请提供一种拍照设备,包括处理器、存储器以及存储在存储器中并可在处理器上运行的计算机程序,处理器执行计算机程序时实现如第二方面或第二方面的任意可选方式的方法。
第七方面,本申请提供一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时实现如第一方面或第一方面的任意可选方式的方法。
第八方面,本申请实施例提供了一种计算机程序产品,当计算机程序产品在图像处理设备上运行时,使得图像处理设备执行上述第一方面或第二方方面的图像处理方法的步骤。
可以理解的是,上述第二方面至第七方面的有益效果可以参见上述第一方面中的相关描述,在此不再赘述。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的一种图像处理方法的流程示意图;
图2是本申请实施例提供的一组图像示意图,其中,图2中的(1)是本申请实施例提供的一种待处理图像的图像示意图,图2中的(2)是对图2中的(1)进行自适应分割后得到的第一目标图像的图像示意图,图2中的(3)是对图2中的(2)进行风格化处理后得到的第二目标图像的图像示意图;
图3是本申请实施例提供的另一种图像处理方法的流程示意图;
图4是本申请实施例提供一种对如图2所示的图像进行风格化处理后得到的最终目标图像的图像示意图;
图5是本申请实施例提供的另一种图像处理方法的流程示意图;
图6是本申请实施例提供的一种图像处理装置的结构示意图;
图7是本申请实施例提供的另一种图像处理装置的结构示意图;
图8是本申请实施例提供的一种服务器的结构示意图;
图9是本申请实施例提供的一种拍照设备的结构示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定***结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的***、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
应当理解,在本申请说明书和所附权利要求书中使用的术语“和/或”是指相关联列出的项中的一个或多个的任何组合以及所有可能组合,并且包括这些组合。另外,在本申请说明书和所附权利要求书的描述中,术语“第一”、“第二”、“第三”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
还应当理解,在本申请说明书中描述的参考“一个实施例”或“一些实施例”等意味着在本申请的一个或多个实施例中包括结合该实施例描述的特定特征、结构或特点。由此,在本说明书中的不同之处出现的语句“在一个实施例中”、“在一些实施例中”、“在其他一些实施例中”、“在另外一些实施例中”等不是必然都参考相同的实施例,而是意味着“一个或多个但不是所有的实施例”,除非是以其他方式另外特别强调。术语“包括”、“包含”、“具有”及它们的变形都意味着“包括但不限于”,除非是以其他方式另外特别强调。
在本申请实施例中,拍照设备比如智能手机、拍照体验机等在拍摄图像之后,由于受限于拍照设备自身的限制,比如运算能力较低、应用环境封闭等,拍照设备无法对图像进行高质量的风格化处理,拍照设备可以将所拍摄的图像上传至服务器进行风格化处理,再由服务器将风格化后的图像返回给拍照设备,以方便用户查看风格化的图像。由于服务器具有运算能力高,开放环境,使得图像处理较快,而且能够得到质量较高的图像。
本申请实施例中,拍照设备将所拍摄的图像以及风格化标识发送给服务器。服务器接收在到待处理图像即拍照设备所拍摄的图像,以及图像风格化标识后,可以根据待处理图像和图像风格化标识选择合适的特征模型进行风格化处理,服务器将风格化处理得到图像发送到拍照设备的屏幕进行显示,方便用户预览风格化后的图像。需要说明的是,不同的图像风格化标识对应不同的特征模型。服务器中存储有训练好的不同风格的特征模型,根据图像风格化标识可以使用该特征模型对图像进行风格化处理,该图像风格化标识对应的风格的图像。
请参见图1,图1是本申请实施例提供的一种图像处理方法的流程示意图,详述如下:
步骤S101,服务器获取拍照设备发送的待处理图像和图像风格化标识。
在本申请实施例中,拍照设备在拍摄图像后,根据用户在拍照设备上显示的风格化背景图像中选中的一个,获取用户选中的风格化背景图像对应的图像风格标识,再将向服务器发送拍摄得到的图像即待处理图像和获取到的图像风格标识。服务器再根据接收到的待处理图像和图像风格标识完成图像的风格化处理。
具体的,在拍照设备的屏幕上显示有多个不同的风格背景图像以供用户选择,当用户选中某一个风格背景图像并进行拍摄时,拍照设备可以获取到被选择的风格背景图像对应的图像风格化标识。
在本申请的一些实施例中,拍照设备在向服务器发送待处理图像和图像风格化标识之前,需要对待处理图像进行预处理,比如按照预设尺寸对待处理图像进行边缘裁剪,预设尺寸具体取决于拍摄的图像的分辨率,比如可以将待处理图像裁剪为长宽比为4:3的图像;或者将待处理图像裁剪为长宽比为1:1的图像。这样可以有效地避免因待处理图像长宽比较高,位于边缘的人像可能存在尺寸过小,失焦模糊等问题。或者裁剪为与风格化背景图像一致的尺寸,进行风格化处理后的待处理图像能够与风格化背景图像叠加融合。
在本申请的另一些实施例中,服务器在接收到拍照设备发送的处理图像和图像风格化标识之后,对待处理图像进行预处理,比如按照预设尺寸对待处理图像进行边缘裁剪。
步骤S102,服务器基于图像抠像方法,对待处理图像的目标和背景进行自适应分割,得到第一目标图像。
在本申请实施例中,待处理图像的目标,具体是指待处理图像中需要进行风格化处理的目标图像比如人物图像、人脸图像等;待处理图像的背景,具体是指待处理图像中除目标图像之外的其他图像,比如一张图像中除人物图像之外的其他图像。
在本申请实施例中,为了避免出现待处理图像中的背景风格化后造成的视觉效果差,原图与风格化图像割裂感明显,风格严重不搭严重,风格化图像质量不高的情况,可以通过图像抠像方法,将待处理图像的目标和背景进行自适应分割,得到仅保留人物图像的第一目标图像,将风格化对象集中在第一目标图像上,可以确保人物图像与风格化背景图像的融合效果,提高风格化图像的图像质量。
需要说明的是,由于第一目标图像进行风格化处理后,会被风格化为与图像风格化标识对应的风格化背景图像的色彩、纹理等一致的风格化图像,因此实际应用中对图像抠像的精度要求不高,可以采用现有的图像抠像方法,对待处理图像的目标和背景进行自适应分割。
在本申请的一些实施例中,待处理图像中存在一些不可控的因素,比如待处理图像中出现路人、人体被其他物体遮挡等情况,导致在基于图像抠像方法,对待处理图像的目标和背景进行自适应分割时,所得到的第一目标图像存在较大的干扰因素,降低了风格化后的图像质量。
在使用图像抠像方法对待处理图像的目标和背景进行自适应分割时,需要分析并确定待处理图像中的图像噪声,并在去除确定的图像噪声之后,再对去除图像噪声之后的待处理图像进行自适应分割,得到高可信度、高可靠度的第一目标图像。
具体的,通过分析待处理图像中的人像数量、位置、可信度等信息,确定待处理图像中的不完整人像、在画面中占比过小以及位置过于边缘的人像等图像噪声。
在本申请的一些实施例中,通过检测待处理图像中的人像,并通过人像检测算法标记人像在待处理图像中的位置信息;根据标记的人像在待处理图像中的位置信息,对待处理图像进行图像分割,得到若干个人像图像区域;计算每个人像区域的长宽比和面积,去除面积小于预定面积的人像区域;通过图像分割算法,对去除面积小于预定面积的人像区域之后的若干个人像图像区域中的其他人像区域进行像素点分类以及轮廓检测,得到第一目标图像。
在对去除面积小于预定面积的人像区域之后的若干个人像图像区域中的其他人像区域进行像素点分类以及轮廓检测之后,调整各个人像区域中的位置,尺寸等,得到第一目标图像。
在本申请的另一些实施例中,为了避免得到第一目标图像的图像边缘过于锐化导致出现的风格化后的图像背景与最终目标图像的割裂感明显的现象,可以在得到第一目标图像后,对第一目标图像的图像边缘进行扩充,按照预定像素扩充第一目标图像比如人物图像的图像边缘,使得风格化后的第一目标图像即第二目标图像能够与风格化背景图像更好地融合,得到图像质量较高的风格化图像。
步骤S103,服务器将第一目标图像输入图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像。
在本申请实施例中,服务器中存储有训练好的各类风格化图像的特征模型,而不同风格类型图像的特征模型,根据风格化图像的不同,具有不同的图像风格化标识,在确认图像风格化标识后,可以根据图像风格化标识查找到对应的特征模型。
需要说明的是,本申请实施例提供的特征模型为采用不同风格的图像在对抗神经网络进行训练得到的特征模型,该模型学习的目标是数据域A和数据域B的风格之间的变换,而非具体的数据a和数据b之间的一一映射关系,即待处理图像和最终风格化得到的图像之间的转换不是像素点的一一对应转换,而是整体图像的转换,这样使得训练集图像的选择不受限与图像的尺寸、比例等,可以适配各种型号的拍照设备以及拍照设置。
还需要说明的是,第二目标图像为人物图像风格化后的图像。
如图2所示,图2为本申请实施例提供的一组图像示意图,其中,图2中的(1)为本申请实施例提供的一种待处理图像的图像示意图,图2中的(2)为对图2中的(1)进行自适应分割后得到的第一目标图像的图像示意图,图2中的(3)为对图2中的(2)进行风格化处理后得到的第二目标图像的图像示意图。
在本申请实施例中,在得到第一目标图像后,服务器根据图像风格化标识获取对应的特征模型,再将第一目标图像输入到图像风格标识对应的特征模型中进行风格化处理,以得到如图2中的(3)所示的第二目标图像。
请参见图3,图3是本申请实施例提供的另一种图像处理方法的流程示意图,详述如下:
步骤S301,获取第一目标图像的阿尔法通道。
在本申请实施例中,阿尔法通道(αChannel或Alpha Channel)是指一张图像的透明和半透明度。在使用特征模型对第一目标图像进行风格化处理的过程中,检测第一目标图像的阿尔法Alpha通道,是为了避免对图像中的透明区域进行风格化处理,从而导致不可控的图像噪声,降低了风格化图像的图像质量的问题。
步骤S302,通过特征模型,对第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,得到第二目标图像。
在本申请实施例中,在获取到第一目标图像的阿尔法通道后,通过对第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,对第一目标图像阿尔法通道小于或等于预定值的图像区域不进行风格化处理,得到与第一目标图像具有同样图像分辨率的带有透明通道如图2中的(3)所示的第二目标图像。
步骤S104,服务器根据图像风格化标识,获取图像风格化标识对应的风格化背景图像。
在本申请实施例中,服务器的风格化背景图库中存储有大量的风格化背景图,每个风格化背景图对应有一个唯一的图像风格化标识,根据该图像风格化标识,可以从风格化背景图库中获取到相应的风格化背景图。
在本申请的一些实施例中,当风格化背景图库中不存在某一图像风格化标识对应的风格化背景图像时,服务器向拍照设备或第三方服务器发送图像请求信息,图像请求信息包括图像风格化标识,在拍照设备或第三方服务器返回图像风格化标识对应的风格化背景图像后,将返回的风格化背景图像与其对应的图像风格化标识关联存储到风格化背景图库中,以便于后续风格化图像的处理。
步骤S105,服务器将第二目标图像和风格化背景图像进行叠加融合,得到风格化后的最终目标图像。
在本申请实施例中,服务器将得到的第二目标图像和风格化背景图像中各个位置对应的像素点相加,根据像素点相加后像素点确定风格化后的最终目标图像。
如图4所示,图4是本申请实施例提供一种对如图2所示的图像进行风格化处理后得到的最终目标图像的图像示意图。
在本申请实施例中,通过服务器快速得到风格化的最终目标图像后,服务器生成最终目标图像的图像链接和/或二维码,以便于拍照设备能够通过该图像链接和/或二维码在其屏幕上显示对应的最终目标图像。
在服务器生成最终目标图像的图像链接和/或二维码之后,服务器向拍照设备发送其生成的图像链接和/或二维码,以便于用户能够在拍照设备上预览最终的目标图像。
在本申请实施例中,服务器通过获取待处理图像和图像风格标识,在对待处理图像进行目标图像抠像处理后,可以得到第一目标图像,再通过使用图像风格化标识对应的特征模型对第一目标图像进行风格化处理后得到第二目标图像,然后,再将第二目标图像与图像风格化标识对应的风格化背景图像进行叠加融合,得到风格化后的最终目标图像,能够有效地避免图像风格化过程中出现的原图与风格化图像割裂感明显,风格严重不搭的情况,提高了图像风格化的图像质量。
请参见图5,图5是本申请实施例提供的另一种图像处理方法的流程示意图,详述如下:
步骤S501,拍照设备启动拍摄功能获取待处理图像。
在本申请实施例中,用户在使用拍照设备进行拍照时,拍照设备启动拍摄功能进行拍照以得到待处理图像。
步骤S502,拍照设备获取图像风格化标识。
在本申请实施例中,拍照设备在拍摄图像后,根据用户在拍照设备上显示的风格化背景图像中选中的一个,获取用户选中的风格化背景图像对应的图像风格标识。
步骤S503,拍照设备向服务器发送待处理图像和所述图像风格化标识,其中,待处理图像和图像风格化标识用于指示服务器根据所述图像风格化标识对所述待处理图像进行风格化处理以得到最终的目标图像。
在本申请实施例中,在拍照设备的屏幕上显示有多个不同的风格背景图像以供用户选择,当用户选中某一个风格背景图像并进行拍摄时,拍照设备可以获取到被选择的风格背景图像对应的图像风格化标识。
在本申请的一些实施例中,拍照设备在向服务器发送待处理图像和图像风格化标识之前,需要对待处理图像进行预处理,比如按照预设尺寸对待处理图像进行边缘裁剪,预设尺寸具体取决于拍摄的图像的分辨率,比如可以将待处理图像裁剪为长宽比为4:3的图像;或者将待处理图像裁剪为长宽比为1:1的图像。这样可以有效地避免因待处理图像长宽比较高,位于边缘的人像可能存在尺寸过小,失焦模糊等问题。或者裁剪为与风格化背景图像一致的尺寸,进行风格化处理后的待处理图像能够与风格化背景图像叠加融合。
在本申请的一些实施例中,拍照设备在接收服务器发送的图像链接后;根据所述图像链接,在拍照设备的屏幕终端显示所述的最终的目标图像以及所述图像链接。
需要说明的是,在拍照设备的性能支持下,服务器对图像进行风格化处理的步骤也可以在拍照设备这一侧进行。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
基于上述实施例所提供的图像处理方法,本申请实施例进一步给出实现上述方法实施例的装置实施例。
请参见图6,图6是本申请实施例提供的一种图像处理装置的示意图。包括的各单元用于执行图1对应的实施例中的各步骤。具体请参阅图1对应的实施例中的相关描述。为了便于说明,仅示出了与本实施例相关的部分。参见图6,图像处理装置6包括:
图像及标识获取单元61,用于获取拍照设备发送的待处理图像和图像风格化标识;
图像分割单元62,用于基于图像抠像方法,对待处理图像的目标和背景进行自适应分割,得到第一目标图像;
风格化处理单元63,用于将第一目标图像输入图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像;
风格化背景图像获取单元64,用于根据图像风格化标识,获取图像风格化标识对应的风格化背景图像;
图像融合单元65,用于将第二目标图像和风格化背景图像进行叠加融合,得到风格化后的最终目标图像。
具体地,风格化处理单元63包括:
阿尔法通道获取子单元,用于获取第一目标图像的阿尔法通道;
风格化处理子单元,用于通过特征模型,对第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,得到第二目标图像。
具体的,图像分割单元62还用于:
分析并确定待处理图像中的图像噪声,并去除确定的图像噪声。
具体的,图像处理装置还包括:
生成最终目标图像的图像链接并发送。
具体的,图像分割单元62还用于:
按照预定像素扩充第一目标图像的图像边缘。
请参见图7,图7是本申请实施例提供的另一种图像处理装置的示意图。包括的各单元用于执行图1对应的实施例中的各步骤。具体请参阅图5对应的实施例中的相关描述。为了便于说明,仅示出了与本实施例相关的部分。参见图7,图像处理装置7包括:
待处理图像获取单元71,用于启动拍摄功能获取待处理图像;
图像风格化标识获取单元72,用于获取图像风格化标识;
图像及标识发送单元73,用于向服务器发送待处理图像和图像风格化标识,待处理图像和图像风格化标识用于指示服务器根据图像风格化标识对待处理图像进行风格化处理以得到最终的目标图像。
示例性的,该图像处理装置还包括:
图像链接接收单元,用于接收服务器发送的图像链接;
图像显示单元,用于根据图像链接,在拍照设备的屏幕终端显示的最终的目标图像以及图像链接。
需要说明的是,上述模块之间的信息交互、执行过程等内容,由于与本申请方法实施例基于同一构思,其具体功能及带来的技术效果,具体可参见方法实施例部分,此处不再赘述。
图8是本申请实施例提供的服务器的示意图。如图8所示,该实施例的服务器8包括:处理器80、存储器81以及存储在存储器81中并可在处理器80上运行的计算机程序82,例如语音识别程序。处理器80执行计算机程序82时实现上述各个图像处理方法实施例中的步骤,例如图1所示的步骤101-105。或者,处理器80执行计算机程序82时实现上述各装置实施例中各模块/单元的功能,例如图6所示单元61-65的功能。
示例性的,计算机程序82可以被分割成一个或多个模块/单元,一个或者多个模块/单元被存储在存储器81中,并由处理器80执行,以完成本申请。一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述计算机程序82在服务器8中的执行过程。例如,计算机程序82可以被分割成图像及标识获取单元61、图像分割单元62、风格化处理单元63、风格化背景图像获取单元64、图像融合单元65,各单元具体功能请参阅图1对应的实施例中地相关描述,此处不赘述。
服务器可包括,但不仅限于,处理器80、存储器81。本领域技术人员可以理解,图8仅仅是服务器8的示例,并不构成对服务器8的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如服务器还可以包括输入输出设备、网络接入设备、总线等。
所称处理器80可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器81可以是服务器8的内部存储单元,例如服务器8的硬盘或内存。存储器81也可以是服务器8的外部存储设备,例如服务器8上配备的插接式硬盘,智能存储卡(SmartMedia Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器81还可以既包括服务器8的内部存储单元也包括外部存储设备。存储器81用于存储计算机程序以及服务器所需的其他程序和数据。存储器81还可以用于暂时地存储已经输出或者将要输出的数据。
图9是本申请实施例提供的拍照设备的示意图。如图9所示,该实施例的拍照设备9包括:处理器90、存储器91以及存储在存储器91中并可在处理器90上运行的计算机程序92,例如语音识别程序。处理器90执行计算机程序92时实现上述各个图像处理方法实施例中的步骤,例如图5所示的步骤501-503。或者,处理器90执行计算机程序92时实现上述各装置实施例中各模块/单元的功能,例如图7所示单元71-73的功能。
示例性的,计算机程序92可以被分割成一个或多个模块/单元,一个或者多个模块/单元被存储在存储器91中,并由处理器90执行,以完成本申请。一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述计算机程序92在拍照设备9中的执行过程。例如,计算机程序92可以被分割成待处理图像获取单元71、图像风格化标识获取单元72、图像及标识发送单元73,各单元具体功能请参阅图5对应的实施例中地相关描述,此处不赘述。
拍照设备可包括,但不仅限于,处理器90、存储器91。本领域技术人员可以理解,图9仅仅是拍照设备9的示例,并不构成对拍照设备9的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如拍照设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器90可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
存储器91可以是拍照设备9的内部存储单元,例如拍照设备9的硬盘或内存。存储器91也可以是拍照设备9的外部存储设备,例如拍照设备9上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,存储器91还可以既包括拍照设备9的内部存储单元也包括外部存储设备。存储器91用于存储计算机程序以及拍照设备所需的其他程序和数据。存储器91还可以用于暂时地存储已经输出或者将要输出的数据。
本申请实施例还提供了一种计算机可读存储介质,计算机可读存储介质存储有计算机程序,计算机程序被处理器执行时可实现上述图像处理方法。
本申请实施例提供了一种计算机程序产品,当计算机程序产品在拍照设备上运行时,使得拍照设备执行时实现可实现上述图像处理方法。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述***中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (9)
1.一种图像处理方法,应用于服务器,其特征在于,所述图像处理方法包括:
获取拍照设备发送的待处理图像和图像风格化标识;
基于图像抠像方法,对所述待处理图像的目标和背景进行自适应分割,得到第一目标图像;
将所述第一目标图像输入所述图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像;
根据所述图像风格化标识,获取所述图像风格化标识对应的风格化背景图像;
将所述第二目标图像和所述风格化背景图像进行叠加融合,得到风格化后的最终目标图像;
所述将所述第一目标图像输入所述图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像,包括:
获取所述第一目标图像的阿尔法通道;
对所述第一目标图像中阿尔法通道小于或等于预定值的图像区域不进行风格化处理;
通过所述特征模型,对所述第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,得到第二目标图像。
2.如权利要求1所述的图像处理方法,其特征在于,在所述基于图像抠像方法,对所述待处理图像的目标和背景进行自适应分割,得到第一目标图像时,还包括:
分析并确定所述待处理图像中的图像噪声,并去除确定的图像噪声。
3.如权利要求1所述的图像处理方法,其特征在于,在所述将所述第二目标图像和所述风格化背景图像进行叠加融合,得到风格化后的最终目标图像之后,包括:
生成所述最终目标图像的图像链接,并向所述拍照设备发送所述图像链接。
4.如权利要求1至3任一项所述的图像处理方法,其特征在于,所述基于图像抠像方法,对所述待处理图像的目标和背景进行自适应分割,得到第一目标图像时,包括:
按照预定像素扩充所述第一目标图像的图像边缘。
5.一种图像处理方法,应用于拍照设备,其特征在于,所述图像处理方法包括:
启动拍摄功能获取待处理图像;
获取图像风格化标识;
向服务器发送所述待处理图像和所述图像风格化标识,所述待处理图像和所述图像风格化标识用于指示所述服务器根据所述图像风格化标识对所述待处理图像进行风格化处理以得到最终的目标图像;
其中,指示所述服务器基于图像抠像方法,对所述待处理图像的目标和背景进行自适应分割,得到第一目标图像;
指示所述服务器将所述第一目标图像输入所述图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像;
所述将所述第一目标图像输入所述图像风格化标识对应的特征模型进行风格化处理,得到第二目标图像,包括:
获取所述第一目标图像的阿尔法通道;
对所述第一目标图像中阿尔法通道小于或等于预定值的图像区域不进行风格化处理;
通过所述特征模型,对所述第一目标图像中阿尔法通道大于预定值的图像区域进行风格化处理,得到第二目标图像。
6.如权利要求5所述的图像处理方法,其特征在于,所述图像处理方法还包括:
接收服务器发送的图像链接;
根据所述图像链接,在所述拍照设备的屏幕终端显示所述的最终的目标图像以及所述图像链接。
7.一种服务器,其特征在于,包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至4任一项所述的图像处理方法。
8.一种拍照设备,其特征在于,包括处理器、存储器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求5或6所述的图像处理方法。
9.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至4或5至6任一项所述的图像处理方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110890846.7A CN113763233B (zh) | 2021-08-04 | 2021-08-04 | 一种图像处理方法、服务器及拍照设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110890846.7A CN113763233B (zh) | 2021-08-04 | 2021-08-04 | 一种图像处理方法、服务器及拍照设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN113763233A CN113763233A (zh) | 2021-12-07 |
CN113763233B true CN113763233B (zh) | 2024-06-21 |
Family
ID=78788520
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110890846.7A Active CN113763233B (zh) | 2021-08-04 | 2021-08-04 | 一种图像处理方法、服务器及拍照设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113763233B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN115272146B (zh) * | 2022-07-27 | 2023-04-07 | 天翼爱音乐文化科技有限公司 | 一种风格化图像生成方法、***、设备及介质 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110956679A (zh) * | 2018-09-26 | 2020-04-03 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN111210487A (zh) * | 2020-02-28 | 2020-05-29 | 深圳壹账通智能科技有限公司 | 图案生成方法和*** |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8970583B1 (en) * | 2012-10-01 | 2015-03-03 | Google Inc. | Image space stylization of level of detail artifacts in a real-time rendering engine |
US9076258B2 (en) * | 2013-03-14 | 2015-07-07 | Pixar | Stylizing animation by example |
CN110830706A (zh) * | 2018-08-08 | 2020-02-21 | Oppo广东移动通信有限公司 | 图像处理方法和装置、存储介质、电子设备 |
CN109308679B (zh) * | 2018-08-13 | 2022-08-30 | 深圳市商汤科技有限公司 | 一种图像风格转换方法及装置、设备、存储介质 |
CN110222722A (zh) * | 2019-05-14 | 2019-09-10 | 华南理工大学 | 交互式图像风格化处理方法、***、计算设备及存储介质 |
CN112399196B (zh) * | 2019-08-16 | 2022-09-02 | 阿里巴巴集团控股有限公司 | 图像处理方法及装置 |
CN111340905B (zh) * | 2020-02-13 | 2023-08-04 | 北京百度网讯科技有限公司 | 图像风格化方法、装置、设备和介质 |
CN111986076A (zh) * | 2020-08-21 | 2020-11-24 | 深圳市慧鲤科技有限公司 | 图像处理方法及装置、互动式展示装置和电子设备 |
CN112215854B (zh) * | 2020-10-19 | 2024-07-12 | 珠海金山数字网络科技有限公司 | 一种图像处理的方法及装置 |
-
2021
- 2021-08-04 CN CN202110890846.7A patent/CN113763233B/zh active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110956679A (zh) * | 2018-09-26 | 2020-04-03 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN111210487A (zh) * | 2020-02-28 | 2020-05-29 | 深圳壹账通智能科技有限公司 | 图案生成方法和*** |
Also Published As
Publication number | Publication date |
---|---|
CN113763233A (zh) | 2021-12-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10872420B2 (en) | Electronic device and method for automatic human segmentation in image | |
CN107771336B (zh) | 基于颜色分布的图像中的特征检测和掩模 | |
US9560271B2 (en) | Removing unwanted objects from photographed image | |
JP6154075B2 (ja) | オブジェクト検出及び分割の方法,装置,コンピュータプログラム製品 | |
CN110300264B (zh) | 图像处理方法、装置、移动终端以及存储介质 | |
CN107507217B (zh) | 证件照的制作方法、装置及存储介质 | |
EP3048579B1 (en) | Structure analysis method for recovering missing structures in an image after object removal | |
CN106560840B (zh) | 一种图像信息识别处理方法及装置 | |
CN108833784B (zh) | 一种自适应构图方法、移动终端及计算机可读存储介质 | |
CN111008935B (zh) | 一种人脸图像增强方法、装置、***及存储介质 | |
CN105701762B (zh) | 一种图片处理方法和电子设备 | |
CN107609946B (zh) | 一种显示控制方法及计算设备 | |
CN107564085B (zh) | 图像扭曲处理方法、装置、计算设备及计算机存储介质 | |
CN111192190A (zh) | 消除图像水印的方法、装置及电子设备 | |
CN111881846B (zh) | 图像处理方法和相关装置、设备、存储介质 | |
CN109791703B (zh) | 基于二维媒体内容生成三维用户体验 | |
CN113763233B (zh) | 一种图像处理方法、服务器及拍照设备 | |
WO2017173578A1 (zh) | 一种图像增强方法及装置 | |
CN109495778B (zh) | 影片编辑方法、装置及*** | |
CN109361850B (zh) | 图像处理方法、装置、终端设备及存储介质 | |
JP6669390B2 (ja) | 情報処理装置、情報処理方法、及びプログラム | |
CN106997580B (zh) | 图片处理方法和装置 | |
CN111179287A (zh) | 人像实例分割方法、装置、设备及存储介质 | |
CN113256484B (zh) | 一种对图像进行风格化处理的方法及装置 | |
CN114998115A (zh) | 图像美化处理方法、装置及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant |