CN108629329A - 图像处理方法和装置、电子设备、计算机可读存储介质 - Google Patents
图像处理方法和装置、电子设备、计算机可读存储介质 Download PDFInfo
- Publication number
- CN108629329A CN108629329A CN201810472164.2A CN201810472164A CN108629329A CN 108629329 A CN108629329 A CN 108629329A CN 201810472164 A CN201810472164 A CN 201810472164A CN 108629329 A CN108629329 A CN 108629329A
- Authority
- CN
- China
- Prior art keywords
- portrait
- pending image
- image
- light efficiency
- skin color
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 24
- 238000000034 method Methods 0.000 claims abstract description 28
- 230000001815 facial effect Effects 0.000 claims description 41
- 238000012545 processing Methods 0.000 claims description 41
- 238000012937 correction Methods 0.000 claims description 22
- 238000004590 computer program Methods 0.000 claims description 15
- 238000000605 extraction Methods 0.000 claims description 12
- 239000000284 extract Substances 0.000 abstract description 9
- 230000002708 enhancing effect Effects 0.000 description 18
- 238000010586 diagram Methods 0.000 description 13
- 238000003384 imaging method Methods 0.000 description 13
- 230000008569 process Effects 0.000 description 6
- 238000012360 testing method Methods 0.000 description 6
- 230000000694 effects Effects 0.000 description 5
- 238000013473 artificial intelligence Methods 0.000 description 4
- 238000006073 displacement reaction Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 4
- 230000005611 electricity Effects 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 230000006641 stabilisation Effects 0.000 description 2
- 238000011105 stabilization Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 1
- 239000000872 buffer Substances 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 230000001795 light effect Effects 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001151 other effect Effects 0.000 description 1
- 230000009711 regulatory function Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000003313 weakening effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
- G06V40/169—Holistic features and representations, i.e. based on the facial image taken as a whole
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/56—Extraction of image or video features relating to colour
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Image Processing (AREA)
Abstract
本申请涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。所述方法包括:获取输入的待处理图像,当待处理图像中包含人像时,提取待处理图像中的人像肤色信息,根据人像肤色信息调整待处理图像的光效强度。电子设备可以对包含人像的待处理图像进行处理,电子设备先提取待处理图像中的人像肤色信息,再根据人像肤色信息对待处理图像的光效强度进行调整,可以提高图像处理的准确性。
Description
技术领域
本申请涉及计算机技术领域,特别是涉及一种图像处理方法和装置、电子设备、计算机可读存储介质。
背景技术
随着人工智能以及计算机技术的发展,图像的处理方式越来越丰富。越来越多的摄像头通过AI(Artificial Intelligence)人像模式来采集含有人像的图像,AI人像模式含有光效调节功能,可以通过调节不同的光效模式对图像进行处理。光效模式可以包括自然光、胶片光、影调光以及轮廓光等。通过采用不同的光效模式对人像图像进行处理,可以得到更具有风格的人像图像。
然而,传统的光效处理方法存在处理不准确的问题。
发明内容
本申请实施例提供一种图像处理方法、装置、电子设备、计算机可读存储介质,可以提高图像处理的准确性。
一种图像处理方法,包括:
获取输入的待处理图像;
当所述待处理图像中包含人像时,提取所述待处理图像中的人像肤色信息;
根据所述人像肤色信息调整所述待处理图像的光效强度。
一种图像处理装置,包括:
图像获取模块,用于获取输入的待处理图像;
信息提取模块,用于当所述待处理图像中包含人像时,提取所述待处理图像中的人像肤色信息;
光效强度调整模块,用于根据所述人像肤色信息调整所述待处理图像的光效强度。
一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如下步骤:
获取输入的待处理图像;
当所述待处理图像中包含人像时,提取所述待处理图像中的人像肤色信息;
根据所述人像肤色信息调整所述待处理图像的光效强度。
一种电子设备,包括存储器及处理器,所述存储器中储存有计算机可读指令,所述指令被所述处理器执行时,使得所述处理器执行如下步骤:
获取输入的待处理图像;
当所述待处理图像中包含人像时,提取所述待处理图像中的人像肤色信息;
根据所述人像肤色信息调整所述待处理图像的光效强度。
上述图像处理方法和装置、电子设备、计算机可读存储介质,通过获取输入的待处理图像,当待处理图像中包含人像时,提取待处理图像中的人像肤色信息,根据人像肤色信息调整待处理图像的光效强度。电子设备可以对包含人像的待处理图像进行处理,电子设备先提取待处理图像中的人像肤色信息,再根据人像肤色信息对待处理图像的光效强度进行调整,可以提高图像处理的准确性。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为一个实施例中电子设备的架构示意图;
图2为一个实施例中图像处理方法的流程图;
图3为一个实施例中调整光效强度的方法流程图;
图4为一个实施例中光效增强模型的示意图;
图5为一个实施例中判断人像光源环境的方法流程图;
图6为一个实施例中根据人像类别调整光效强度的方法流程图;
图7为一个实施例中根据矫正后人像肤色调整光效强度的方法流程图;
图8为一个实施例中图像处理装置的结构框图;
图9为一个实施例中图像处理电路的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本申请进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本申请,并不用于限定本申请。
在一个实施例中,如图1所示,提供了一种电子设备的内部结构示意图。该电子设备包括通过***总线连接的处理器、存储器和网络接口。其中,该处理器用于提供计算和控制能力,支撑整个电子设备的运行。存储器用于存储数据、程序、和/或指令代码等,存储器上存储至少一个计算机程序,该计算机程序可被处理器执行,以实现本申请实施例中提供的适用于电子设备的图像处理方法。存储器可包括磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)等非易失性存储介质,或随机存储记忆体(Random-Access-Memory,RAM)等。例如,在一个实施例中,存储器包括非易失性存储介质及内存储器。非易失性存储介质存储有操作***和计算机程序。该计算机程序可被处理器所执行,以用于实现本申请各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作***和计算机程序提供高速缓存的运行环境。网络接口可以是以太网卡或无线网卡等,用于与外部的电子设备进行通信,比如可用于同服务器进行通信。
本领域技术人员可以理解,图1中示出的结构,仅仅是与本申请方案相关的部分结构的框图,并不构成对本申请方案所应用于其上的电子设备的限定,具体的电子设备可以包括比图中所示更多或更少的部件,或者组合某些部件,或者具有不同的部件布置。
在一个实施例中,提供了一种图像处理方法,以应用于上述电子设备来举例说明,如图2所示,该方法包括如下步骤:
步骤202,获取输入的待处理图像。
待处理图像是指由多个像素点组成的需要进行处理的图像。待处理图像可以是电子设备通过摄像头实时采集的图像,还可以是存储在电子设备本地的图像。因此,待处理图像的输入方式可以是通过摄像头实时采集输入,还可以直接选择存储在本地的图像进行输入。电子设备可以获取输入的待处理图像,并将待处理图像进行显示。
步骤204,当待处理图像中包含人像时,提取待处理图像中的人像肤色信息。
其中,人像肤色信息可以包括人像肤色亮度、人像肤色颜色、人像肤色饱和度等。电子设备可以对待处理图像中是否包含有人像进行检测,得到检测结果。当检测结果为待处理图像中不包含人像时,电子设备可以不对待处理图像进行处理;当检测结果为待处理图像中包含有人像时,电子设备可以提取待处理图像中的人像肤色信息。
步骤206,根据人像肤色信息调整待处理图像的光效强度。
光效是一种模拟光源效果的图像增强处理。具体地,光源效果可以是自然光、舞台光、摄影棚光、胶片光、轮廓光等效果。光源发出光之后,光线会以光源为中心向四周进行扩散,并且光线的强度会随着与光源距离的增大而减弱。
光效强度的调整可以分为增强光效强度和减弱光效强度。其中,电子设备可以通过光效模型对光效强度进行调整,光效模型可以分为光效增强模型和光效减弱模型。光效增强模型可以对光效强度进行增强,即光效增强模型是指对待处理图像进行光效增强处理的模型。同样的,光效减弱模型可以对光效强度进行减弱,即光效减弱模型是指对待处理图像进行光效减弱处理的模型。该光效模型可以模拟光源发出的光线强弱变化的曲线。电子设备可以根据中心像素点获取光效模型,即将该中心像素点作为光源从而模拟各个像素点所在位置的光线强弱变化的模型。其中,中心像素点是指光源中心对应的像素点。电子设备中可以预先存储光效参考模型,该光效参考模型可以是以图像中任意一个参考像素点为光源的模型。在获取到中心像素点后,可以获取中心像素点相对参考像素点的位移,并将光效参考模型进行位移之后得到该中心像素点对应的光效模型。
例如,电子设备中可以预先存储一个光效参考模型为P(x,y),该光效参考模型以坐标为(0,0)的参考像素点为光源的模型。假设选取的中心像素点为(x0,y0)的话,那么该中心像素点相对于参考像素点的位移就为(-x0,-y0),则根据该位移得到的该中心像素点对应的光效模型就为P(x-x0,y-y0)。得到的光效模型P(x-x0,y-y0)中,就是以中心像素点(x0,y0)为光源的光效模型。
待处理图像可以是由RGB三通道构成的RGB图像,也可以是由一个通道构成的单色图像。若待处理图像为RGB图像时,则待处理图像中的每一个像素点都有对应的RGB三个通道值。若模拟的光源效果不同,光线产生的颜色可能会不同,则分别对RGB三通道的增强系数就会不同。例如,太阳光的颜色会偏黄、舞台光的颜色可以是五颜六色的。具体地,可以根据中心像素点分别获取RGB三通道对应的光效模型,并根据光效模型分别计算RGB三通道对应的光效系数。
通过获取输入的待处理图像,当待处理图像中包含人像时,提取待处理图像中的人像肤色信息,根据人像肤色信息调整待处理图像的光效强度。电子设备可以对包含人像的待处理图像进行处理,电子设备先提取待处理图像中的人像肤色信息,再根据人像肤色信息对待处理图像的光效强度进行调整,可以提高图像处理的准确性。
如图3所示,在一个实施例中,提供的一种图像处理方法还可以包括调整光效强度的过程,具体步骤包括:
步骤302,将人像肤色信息与预设的人像肤色信息进行比对。
预设的人像肤色信息可以是预先设置的人像肤色信息,预设的人像肤色信息可以存储在数据库中。电子设备在对待处理图像中的人像肤色信息进行提取后,可以将提取的人像肤色信息与预设的人像肤色信息进行比对。具体的,电子设备可以将提取的人像肤色信息中的人像肤色亮度、人像肤色颜色、人像肤色饱和度与预设的人像肤色信息中的人像肤色亮度、人像肤色颜色、人像肤色饱和度进行一一比对,电子设备可以得出比对结果。
步骤304,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,增强待处理图像的光效强度。
电子设备可以得到人像肤色信息与预设的人像肤色信息的比对结果。其中,比对结果可以包括人像肤色亮度的比对结果、人像肤色颜色的比对结果以及人像肤色饱和度的比对结果。当电子设备得到的人像肤色亮度的比对结果为人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,电子设备可以通过光效增强模型来对待处理图像的光效强度进行增强。
步骤306,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,减弱待处理图像的光效强度。
电子设备还可以得到人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮的比对结果,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,同样的,电子设备可以通过光效减弱模型来对待处理图像的光效强度进行减弱。
通过将人像肤色信息与预设的人像肤色信息进行比对,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,增强待处理图像的光效强度,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,减弱待处理图像的光效强度。电子设备可以根据待处理图像中人像肤色的亮度对待处理图像的光效进行调整,当待处理图像中人像肤色暗时,增强该待处理图像的光效强度,当待处理图像中人像肤色亮时,减弱该待处理图像的光效强度,这样根据人像肤色的亮度对待处理图像的光效进行调整可以提高图像处理的准确性。
在一个实施例中,图4为一个实施例中光效增强模型的示意图。如图4所示,光效增强模型为二维高斯分布函数。可以看出,该中心像素点410对应的光效增强系数最大,待处理图像中其他像素点对应的光效增强系数随着与中心像素点410的距离的增加而降低,离中心像素点410的距离越远的像素点,对应的光效增强系数越小,光效强度也就越弱;相反的,离中心像素点410的距离越近的像素点,对应的光效增强系数越大,光效强度也就越强。
光效减弱模型与光效增强模型原理相同,中心像素点对应的光效系数最大,待处理图像中其他像素点对应的光效系数随着与中心像素点的距离的增加而增加,离中心像素点的距离越近的像素点,对应的光效系数越小,光效强度也就越弱。
如图5所示,在一个实施例中,提供的一种图像处理方法还可以包括判断人像光源环境的过程,具体步骤包括:
步骤502,获取拍摄待处理图像的光源方向。
光源方向是指光源发出光照的方向。以电子设备中摄像头的入光面一方为标准,光源方向可以包括正前方、正后方等方向。当电子设备将通过摄像头采集的图像作为输入的待处理图像时,电子设备可以获取拍摄待处理图像的光源方向。
步骤504,根据光源方向判断待处理图像中人像的光源环境。
电子设备在获取光源方向后,可以对拍摄的待处理图像中是否含有人像进行检测,当电子设备通过摄像头拍摄的待处理图像中不含有人像时,电子设备可以不对该待处理图像进行处理;当电子设备通过摄像头拍摄的待处理图像中含有人像时,电子设备可以根据光源方向判断对处理图像中人像的光源环境。
其中,光源环境可以包括顺光环境和逆光环境。以电子设备中摄像头的入光面一方为标准,当光源方向在正前方时,待处理图像中人像的光源环境为逆光环境;当光源方向在正后方时,待处理图像中人像的光源环境为顺光环境。具体的,电子设备可以根据待处理图像中人脸平均亮度与背景平均亮度的比值来判断待处理图像的光源环境,当比值大于第一预设值时,表示待处理图像中人像的光源环境为顺光环境,当比值小于第二预设值时,表示待处理图像中人像的光源环境为逆光环境。例如,第一预设值为1.5,第二预设值为0.7,R表示待处理图像中人脸平均亮度与背景平均亮度的比值,当R大于1.5时,表明待处理图像中人像的光源环境为顺光环境,当R小于0.7时,表明待处理图像中人像的光源环境为逆光环境。
通过获取拍摄待处理图像的光源方向,根据光源方向判断待处理图像中人像的光源环境。电子设备通过获取的光源方向对待处理图像中人像的光源环境进行判断,可以提高人像光源环境判断的准确性,从而提高图像处理的准确性。
在一个实施例中,提供的一种图像处理方法还可以包括根据光源环境调整光效强度的过程,包括:当人像的光源环境为逆光环境时,增强待处理图像的光效强度,当人像的光源环境为顺光环境时,减弱待处理图像的光效强度。
电子设备根据光源方向可以判断出待处理图像中人像的光源环境,并得出判断结果。当电子设备得出的判断结果为人像的光源环境为逆光环境时,电子设备可以通过光效增强模型对待处理图像的光效强度进行增强处理;当电子设备得出的判断结果为人像的光源环境为顺光环境时,电子设备可以通过光效减弱模型对待处理图像的光效强度进行减弱处理。
根据人像的光源环境为逆光环境还是顺光环境,分别对待处理图像的光效强度进行不同的处理,可以提高图像处理的准确性。
在一个实施例中,如图6所示,提供的一种图像处理方法还可以包括根据人像类别调整光效强度的过程,具体步骤包括:
步骤602,提取包含人像的待处理图像中的面部特征。
面部特征可以包括五官、轮廓等特征。电子设备在判断出待处理图像中包含有人像后,还可以对待处理图像中人像的面部特征进行提取。
步骤604,根据面部特征对待处理图像中的人像进行分类,得到人像类别。
人像类别可以包括面部特征柔美类、面部特征性感类、面部特征阳刚类、面部特征活泼类以及面部特征艺术类等。电子设备在提取出人像的面部特征后,可以根据面部特征对该面部特征对应的人像进行分类,并得到不同的人像类别。
步骤606,根据人像类别调整待处理图像的光效强度。
电子设备可以根据人像类别对待处理图像的光效强度进行调整。例如,当人像类别为面部特征柔美类或者面部特征艺术类时,电子设备可以增强该面部特征柔美类或者面部特征艺术类对应的待处理图像的光效强度;当人像类别为面部特征性感类、面部特征阳刚类或者面部特征活泼类时,电子设备可以减弱该面部特征性感类、面部特征阳刚类或者面部特征活泼类对应的待处理图像的光效强度。
通过提取包含人像的待处理图像中的面部特征,根据面部特征对待处理图像中的人像进行分类,得到人像类别,根据人像类别调整待处理图像的光效强度。电子设备通过提取待处理图像中人像的面部特征,并根据面部特征得到人像类别,从而调整待处理图像的光效强度,提高了图像处理的准确性。
如图7所示,在一个实施例中,提供的一种图像处理方法还可以包括根据矫正后人像肤色调整光效强度的过程,具体步骤包括:
步骤702,计算出待处理图像中人像的肤色概率。
电子设备可以对待处理图像中的人像肤色进行肤色检测,并计算出待处理图像中人像的肤色概率。其中,人像的肤色概率是指待处理图像中肤色部分不同的亮度值的概率。
步骤704,根据肤色概率对待处理图像进行肤色偏色矫正,得到矫正后的图像。
电子设备计算出人像的肤色概率后,可以根据计算出的肤色概率对待处理图像进行肤色偏色矫正。肤色偏色矫正是指对图像中人像肤色的亮度进行调整。例如,电子设备可以对肤色概率亮度值高的肤色区域降低亮度。电子设备可以得到矫正后的图像。
步骤706,根据矫正后的图像中人像肤色信息调整待处理图像的光效强度。
电子设备可以根据矫正后的图像中人像肤色信息对待处理图像的光效强度进行调整。同样的,当矫正后图像中人像肤色信息的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,电子设备可以增强待处理图像的光效强度;当矫正后图像中人像肤色信息的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,电子设备可以减弱待处理图像的光效强度。
通过计算出待处理图像中人像的肤色概率,根据肤色概率对待处理图像进行肤色偏色矫正,得到矫正后的图像,根据矫正后的图像中人像肤色信息调整待处理图像的光效强度。由于矫正后的图像中人像肤色信息中的人像肤色亮度会比较接近预设的人像肤色信息中的人像肤色亮度,可以使电子设备调整光效强度时更加容易,从而提高图像处理的准确性。
在一个实施例中,提供的一种图像处理方法还可以包括减弱阴影区域光效强度的过程,包括:获取待处理图像中的阴影区域,减弱待处理图像中阴影区域的光效强度。
阴影区域是指当待处理图像中人像处于灯光照射时,人像的五官或者轮廓存在部分遮挡形成阴影的区域。电子设备在检测到待处理图像中人像处于灯光照射状态时,可以获取待处理图像中人像的阴影区域。电子设备可以减弱待处理图像中阴影区域的光效强度。
通过获取待处理图像中的阴影区域,减弱待处理图像中阴影区域的光效强度。电子设备可以待处理图像中人像的阴影区域的光效强度,呈现阴影效果,从而使待处理图像中人像的五官更加立体,提高图像处理的准确性。
在一个实施例中,提供了一种图像处理方法,实现该方法的具体步骤如下所述:
首先,电子设备可以获取输入的待处理图像。待处理图像是指由多个像素点组成的需要进行处理的图像。待处理图像可以是电子设备通过摄像头实时采集的图像,还可以是存储在电子设备本地的图像。因此,待处理图像的输入方式可以是通过摄像头实时采集输入,还可以直接选择存储在本地的图像进行输入。电子设备可以获取输入的待处理图像,并将待处理图像进行显示。
接着,电子设备可以获取拍摄待处理图像的光源方向,并根据光源方向判断待处理图像中人像的光源环境。电子设备在获取光源方向后,可以对拍摄的待处理图像中是否含有人像进行检测,当电子设备通过摄像头拍摄的待处理图像中不含有人像时,电子设备可以不对该待处理图像进行处理;当电子设备通过摄像头拍摄的待处理图像中含有人像时,电子设备可以根据光源方向判断对处理图像中人像的光源环境。当人像的光源环境为逆光环境时,电子设备可以增强待处理图像的光效强度,当人像的光源环境为顺光环境时,电子设备可以减弱待处理图像的光效强度。电子设备根据人像的光源环境为逆光环境还是顺光环境,分别对待处理图像的光效强度进行不同的处理,可以提高图像处理的准确性。
接着,当待处理图像中包含人像时,电子设备可以提取待处理图像中的人像肤色信息。电子设备可以对待处理图像中是否包含有人像进行检测,得到检测结果。当检测结果为待处理图像中不包含人像时,电子设备可以不对待处理图像进行处理;当检测结果为待处理图像中包含有人像时,电子设备可以提取待处理图像中的人像肤色信息。
其次,电子设备可以根据人像肤色信息调整待处理图像的光效强度。光效强度的调整可以分为增强光效强度和减弱光效强度。其中,电子设备可以通过光效增强模型来对光效强度进行增强,即光效增强模型是指对待处理图像进行光效增强处理的模型,该光效增强模型可以模拟光源发出的光线强弱变化的曲线。电子设备可以根据中心像素点获取光效增强模型,即将该中心像素点作为光源从而模拟各个像素点所在位置的光线强弱变化的模型。其中,中心像素点是指光源中心对应的像素点。
电子设备可以将人像肤色信息与预设的人像肤色信息进行比对。当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,电子设备可以增强待处理图像的光效强度。当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,电子设备可以减弱待处理图像的光效强度。
电子设备还可以提取包含人像的待处理图像中的面部特征,并根据面部特征对待处理图像中的人像进行分类,得到人像类别。电子设备可以根据人像类别调整待处理图像的光效强度。电子设备可以根据人像类别对待处理图像的光效强度进行调整。例如,当人像类别为面部特征柔美类或者面部特征艺术类时,电子设备可以增强该面部特征柔美类或者面部特征艺术类对应的待处理图像的光效强度;当人像类别为面部特征性感类、面部特征阳刚类或者面部特征活泼类时,电子设备可以减弱该面部特征性感类、面部特征阳刚类或者面部特征活泼类对应的待处理图像的光效强度。
电子设备还可以计算出待处理图像中人像的肤色概率,并根据肤色概率对待处理图像进行肤色偏色矫正,得到矫正后的图像。电子设备还可以根据矫正后的图像中人像肤色信息调整待处理图像的光效强度。电子设备可以根据矫正后的图像中人像肤色信息对待处理图像的光效强度进行调整。同样的,当矫正后图像中人像肤色信息的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,电子设备可以增强待处理图像的光效强度;当矫正后图像中人像肤色信息的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,电子设备可以减弱待处理图像的光效强度。
电子设备还可以获取待处理图像中的阴影区域,减弱待处理图像中阴影区域的光效强度。阴影区域是指当待处理图像中人像处于灯光照射时,人像的五官或者轮廓存在部分遮挡形成阴影的区域。电子设备在检测到待处理图像中人像处于灯光照射状态时,可以获取待处理图像中人像的阴影区域。电子设备可以减弱待处理图像中阴影区域的光效强度。
应该理解的是,虽然上述流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,这些步骤可以以其它的顺序执行。而且,上述流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,这些子步骤或者阶段的执行顺序也不必然是依次进行,而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
图8为一个实施例中图像处理装置的结构框图,如图8所示,该装置包括:图像获取模块810、信息提取模块820以及光效强度调整模块830,其中:
图像获取模块810,用于获取输入的待处理图像。
信息提取模块820,用于当待处理图像中包含人像时,提取待处理图像中的人像肤色信息。
光效强度调整模块830,用于根据人像肤色信息调整待处理图像的光效强度。
在一个实施例中,光效强度调整模块830还可以用于将人像肤色信息与预设的人像肤色信息进行比对,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度暗时,增强待处理图像的光效强度,当人像肤色信息中的人像肤色亮度比预设的人像肤色信息中的人像肤色亮度亮时,减弱待处理图像的光效强度。
在一个实施例中,光效强度调整模块830还可以用于获取拍摄待处理图像的光源方向,根据光源方向判断待处理图像中人像的光源环境。
在一个实施例中,光效强度调整模块830还可以用于当人像的光源环境为逆光环境时,增强待处理图像的光效强度,当人像的光源环境为顺光环境时,减弱待处理图像的光效强度。
在一个实施例中,信息提取模块820还可以用于提取包含人像的待处理图像中的面部特征,根据面部特征对待处理图像中的人像进行分类,得到人像类别,根据人像类别调整待处理图像的光效强度。
在一个实施例中,光效强度调整模块830还可以用于计算出待处理图像中人像的肤色概率,根据肤色概率对待处理图像进行肤色偏色矫正,得到矫正后的图像,根据矫正后的图像中人像肤色信息调整待处理图像的光效强度。
在一个实施例中,信息提取模块820还可以用于获取待处理图像中的阴影区域,减弱待处理图像中阴影区域的光效强度。
上述图像处理装置中各个模块的划分仅用于举例说明,在其他实施例中,可将图像处理装置按照需要划分为不同的模块,以完成上述图像处理装置的全部或部分功能。
关于图像处理装置的具体限定可以参见上文中对于图像处理方法的限定,在此不再赘述。上述图像处理装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中,也可以以软件形式存储于计算机设备中的存储器中,以便于处理器调用执行以上各个模块对应的操作。
本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时,实现本申请实施例中所描述方法的步骤。
本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质,当所述计算机可执行指令被一个或多个处理器执行时,使得所述处理器执行图像处理方法的步骤。
一种包含指令的计算机程序产品,当其在计算机上运行时,使得计算机执行图像处理方法。
本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路,图像处理电路可以利用硬件和/或软件组件实现,可包括定义ISP(Image SignalProcessing,图像信号处理)管线的各种处理单元。图9为一个实施例中图像处理电路的示意图。如图9所示,为便于说明,仅示出与本申请实施例相关的图像处理技术的各个方面。
如图9所示,图像处理电路包括ISP处理器940和控制逻辑器950。成像设备910捕捉的图像数据首先由ISP处理器940处理,ISP处理器940对图像数据进行分析以捕捉可用于确定和/或成像设备910的一个或多个控制参数的图像统计信息。成像设备910可包括具有一个或多个透镜912和图像传感器914的照相机。图像传感器914可包括色彩滤镜阵列(如Bayer滤镜),图像传感器914可获取用图像传感器914的每个成像像素捕捉的光强度和波长信息,并提供可由ISP处理器940处理的一组原始图像数据。传感器920(如陀螺仪)可基于传感器920接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器940。传感器920接口可以利用SMIA(Standard Mobile Imaging Architecture,标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。
此外,图像传感器914也可将原始图像数据发送给传感器920,传感器920可基于传感器920接口类型把原始图像数据提供给ISP处理器940,或者传感器920将原始图像数据存储到图像存储器930中。
ISP处理器940按多种格式逐个像素地处理原始图像数据。例如,每个图像像素可具有8、10、12或14比特的位深度,ISP处理器940可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中,图像处理操作可按相同或不同的位深度精度进行。
ISP处理器940还可从图像存储器930接收图像数据。例如,传感器920接口将原始图像数据发送给图像存储器930,图像存储器930中的原始图像数据再提供给ISP处理器940以供处理。图像存储器930可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器,并可包括DMA(Direct Memory Access,直接直接存储器存取)特征。
当接收到来自图像传感器914接口或来自传感器920接口或来自图像存储器930的原始图像数据时,ISP处理器940可进行一个或多个图像处理操作,如时域滤波。处理后的图像数据可发送给图像存储器930,以便在被显示之前进行另外的处理。ISP处理器940从图像存储器930接收处理数据,并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器940处理后的图像数据可输出给显示器970,以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit,图形处理器)进一步处理。此外,ISP处理器940的输出还可发送给图像存储器930,且显示器970可从图像存储器930读取图像数据。在一个实施例中,图像存储器930可被配置为实现一个或多个帧缓冲器。此外,ISP处理器940的输出可发送给编码器/解码器960,以便编码/解码图像数据。编码的图像数据可被保存,并在显示于显示器970设备上之前解压缩。编码器/解码器960可由CPU或GPU或协处理器实现。
ISP处理器940确定的统计数据可发送给控制逻辑器950单元。例如,统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜912阴影校正等图像传感器914统计信息。控制逻辑器950可包括执行一个或多个例程(如固件)的处理器和/或微控制器,一个或多个例程可根据接收的统计数据,确定成像设备910的控制参数及ISP处理器940的控制参数。例如,成像设备910的控制参数可包括传感器920控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜912控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如,在RGB处理期间)的增益水平和色彩校正矩阵,以及透镜912阴影校正参数。
本实施例中运用图9中图像处理技术可实现上述图像处理方法。
本申请所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM),它用作外部高速缓冲存储器。作为说明而非局限,RAM以多种形式可得,诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。
以上所述实施例仅表达了本申请的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对本申请专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本申请构思的前提下,还可以做出若干变形和改进,这些都属于本申请的保护范围。因此,本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种图像处理方法,其特征在于,包括:
获取输入的待处理图像;
当所述待处理图像中包含人像时,提取所述待处理图像中的人像肤色信息;
根据所述人像肤色信息调整所述待处理图像的光效强度。
2.根据权利要求1所述的方法,其特征在于,所述根据所述人像肤色信息调整所述待处理图像的光效强度,包括:
将所述人像肤色信息与预设的人像肤色信息进行比对;
当所述人像肤色信息中的人像肤色亮度比所述预设的人像肤色信息中的人像肤色亮度暗时,增强所述待处理图像的光效强度;
当所述人像肤色信息中的人像肤色亮度比所述预设的人像肤色信息中的人像肤色亮度亮时,减弱所述待处理图像的光效强度。
3.根据权利要求1所述的方法,其特征在于,在提取所述待处理图像中的人像肤色信息之前,所述方法还包括:
获取拍摄所述待处理图像的光源方向;
根据所述光源方向判断所述待处理图像中人像的光源环境。
4.根据权利要求3所述的方法,其特征在于,所述方法还包括:
当所述人像的光源环境为逆光环境时,增强所述待处理图像的光效强度;
当所述人像的光源环境为顺光环境时,减弱所述待处理图像的光效强度。
5.根据权利要求1所述的方法,其特征在于,所述方法还包括:
提取所述包含人像的待处理图像中的面部特征;
根据所述面部特征对所述待处理图像中的人像进行分类,得到人像类别;
根据所述人像类别调整所述待处理图像的光效强度。
6.根据权利要求1所述的方法,其特征在于,所述根据所述人像肤色信息调整所述待处理图像的光效强度,还包括:
计算出所述待处理图像中人像的肤色概率;
根据所述肤色概率对所述待处理图像进行肤色偏色矫正,得到矫正后的图像;
根据所述矫正后的图像中人像肤色信息调整所述待处理图像的光效强度。
7.根据权利要求1至6任一项所述的方法,其特征在于,所述方法还包括:
获取所述待处理图像中的阴影区域;
减弱所述待处理图像中阴影区域的光效强度。
8.一种图像处理装置,其特征在于,包括:
图像获取模块,用于获取输入的待处理图像;
信息提取模块,用于当所述待处理图像中包含人像时,提取所述待处理图像中的人像肤色信息;
光效强度调整模块,用于根据所述人像肤色信息调整所述待处理图像的光效强度。
9.一种电子设备,包括存储器及处理器,所述存储器中储存有计算机程序,所述计算机程序被所述处理器执行时,使得所述处理器执行如权利要求1至7中任一项所述的图像处理方法的步骤。
10.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述的方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810472164.2A CN108629329B (zh) | 2018-05-17 | 2018-05-17 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810472164.2A CN108629329B (zh) | 2018-05-17 | 2018-05-17 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108629329A true CN108629329A (zh) | 2018-10-09 |
CN108629329B CN108629329B (zh) | 2021-04-23 |
Family
ID=63693530
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810472164.2A Expired - Fee Related CN108629329B (zh) | 2018-05-17 | 2018-05-17 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108629329B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109360254A (zh) * | 2018-10-15 | 2019-02-19 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN111161157A (zh) * | 2019-12-02 | 2020-05-15 | Tcl华星光电技术有限公司 | 色彩增强的方法、图形处理器及显示设备 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103632351A (zh) * | 2013-12-16 | 2014-03-12 | 武汉大学 | 一种基于亮度基准漂移的全天候交通图像增强方法 |
CN104038704A (zh) * | 2014-06-12 | 2014-09-10 | 小米科技有限责任公司 | 逆光人像场景的拍摄处理方法及装置 |
US8908932B2 (en) * | 2003-06-26 | 2014-12-09 | DigitalOptics Corporation Europe Limited | Digital image processing using face detection and skin tone information |
CN104735362A (zh) * | 2015-03-11 | 2015-06-24 | 广东欧珀移动通信有限公司 | 拍照方法和装置 |
CN104881853A (zh) * | 2015-05-28 | 2015-09-02 | 厦门美图之家科技有限公司 | 一种基于色彩概念化的肤色矫正方法和*** |
CN105608677A (zh) * | 2015-12-28 | 2016-05-25 | 成都品果科技有限公司 | 一种任意光线环境下的图像肤色美化方法及*** |
US20170161550A1 (en) * | 2015-12-03 | 2017-06-08 | Nec Corporation Of America | System and method for capturing images used in facial recognition through effective use of exposure management |
CN107463052A (zh) * | 2017-08-30 | 2017-12-12 | 北京小米移动软件有限公司 | 拍摄曝光方法及装置 |
CN107798652A (zh) * | 2017-10-31 | 2018-03-13 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、可读存储介质和电子设备 |
CN107798314A (zh) * | 2017-11-22 | 2018-03-13 | 北京小米移动软件有限公司 | 肤色检测方法及装置 |
CN107911617A (zh) * | 2017-12-27 | 2018-04-13 | 上海传英信息技术有限公司 | 拍照方法和装置 |
-
2018
- 2018-05-17 CN CN201810472164.2A patent/CN108629329B/zh not_active Expired - Fee Related
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8908932B2 (en) * | 2003-06-26 | 2014-12-09 | DigitalOptics Corporation Europe Limited | Digital image processing using face detection and skin tone information |
US20170085785A1 (en) * | 2003-06-26 | 2017-03-23 | Fotonation Limited | Digital image processing using face detection and skin tone information |
CN103632351A (zh) * | 2013-12-16 | 2014-03-12 | 武汉大学 | 一种基于亮度基准漂移的全天候交通图像增强方法 |
CN104038704A (zh) * | 2014-06-12 | 2014-09-10 | 小米科技有限责任公司 | 逆光人像场景的拍摄处理方法及装置 |
CN104735362A (zh) * | 2015-03-11 | 2015-06-24 | 广东欧珀移动通信有限公司 | 拍照方法和装置 |
CN104881853A (zh) * | 2015-05-28 | 2015-09-02 | 厦门美图之家科技有限公司 | 一种基于色彩概念化的肤色矫正方法和*** |
US20170161550A1 (en) * | 2015-12-03 | 2017-06-08 | Nec Corporation Of America | System and method for capturing images used in facial recognition through effective use of exposure management |
CN105608677A (zh) * | 2015-12-28 | 2016-05-25 | 成都品果科技有限公司 | 一种任意光线环境下的图像肤色美化方法及*** |
CN107463052A (zh) * | 2017-08-30 | 2017-12-12 | 北京小米移动软件有限公司 | 拍摄曝光方法及装置 |
CN107798652A (zh) * | 2017-10-31 | 2018-03-13 | 广东欧珀移动通信有限公司 | 图像处理方法、装置、可读存储介质和电子设备 |
CN107798314A (zh) * | 2017-11-22 | 2018-03-13 | 北京小米移动软件有限公司 | 肤色检测方法及装置 |
CN107911617A (zh) * | 2017-12-27 | 2018-04-13 | 上海传英信息技术有限公司 | 拍照方法和装置 |
Non-Patent Citations (2)
Title |
---|
张轶: "《动画色彩造型》", 31 March 2016, 北京海洋出版社 * |
肖森舟: "《互联网+手机玩转手机自媒体营销108招》", 31 October 2016, 北京群言出版社 * |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109360254A (zh) * | 2018-10-15 | 2019-02-19 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN109360254B (zh) * | 2018-10-15 | 2023-04-18 | Oppo广东移动通信有限公司 | 图像处理方法和装置、电子设备、计算机可读存储介质 |
CN111161157A (zh) * | 2019-12-02 | 2020-05-15 | Tcl华星光电技术有限公司 | 色彩增强的方法、图形处理器及显示设备 |
CN111161157B (zh) * | 2019-12-02 | 2023-06-27 | Tcl华星光电技术有限公司 | 色彩增强的方法、图形处理器及显示设备 |
Also Published As
Publication number | Publication date |
---|---|
CN108629329B (zh) | 2021-04-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110149482A (zh) | 对焦方法、装置、电子设备和计算机可读存储介质 | |
CN108805103A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108734676A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
US20210192698A1 (en) | Image Processing Method, Electronic Device, and Non-Transitory Computer-Readable Storage Medium | |
CN109767467A (zh) | 图像处理方法、装置、电子设备和计算机可读存储介质 | |
CN110334635A (zh) | 主体追踪方法、装置、电子设备和计算机可读存储介质 | |
CN107945107A (zh) | 图像处理方法、装置、计算机可读存储介质和电子设备 | |
CN110276767A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN107862663A (zh) | 图像处理方法、装置、可读存储介质和计算机设备 | |
CN109191403A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN108616700B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN109360254B (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN107800966A (zh) | 图像处理的方法、装置、计算机可读存储介质和电子设备 | |
CN107945135A (zh) | 图像处理方法、装置、存储介质和电子设备 | |
CN108875619A (zh) | 视频处理方法和装置、电子设备、计算机可读存储介质 | |
CN107911625A (zh) | 测光方法、装置、可读存储介质和计算机设备 | |
CN108198152A (zh) | 图像处理方法和装置、电子设备、计算机可读存储介质 | |
CN110366048A (zh) | 视频传输方法、装置、电子设备和计算机可读存储介质 | |
CN108805265A (zh) | 神经网络模型处理方法和装置、图像处理方法、移动终端 | |
CN108846807A (zh) | 光效处理方法、装置、终端及计算机可读存储介质 | |
CN109242794B (zh) | 图像处理方法、装置、电子设备及计算机可读存储介质 | |
CN110191287A (zh) | 对焦方法和装置、电子设备、计算机可读存储介质 | |
CN107395991A (zh) | 图像合成方法、装置、计算机可读存储介质和计算机设备 | |
CN108063891A (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 | |
CN107948617A (zh) | 图像处理方法、装置、计算机可读存储介质和计算机设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210423 |