CN105681774A - 一种图像处理的方法及终端 - Google Patents

一种图像处理的方法及终端 Download PDF

Info

Publication number
CN105681774A
CN105681774A CN201610107557.4A CN201610107557A CN105681774A CN 105681774 A CN105681774 A CN 105681774A CN 201610107557 A CN201610107557 A CN 201610107557A CN 105681774 A CN105681774 A CN 105681774A
Authority
CN
China
Prior art keywords
specular reflection
unit
passage
areas
pending image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201610107557.4A
Other languages
English (en)
Other versions
CN105681774B (zh
Inventor
辛浩然
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Microphone Holdings Co Ltd
Original Assignee
Shenzhen Jinli Communication Equipment Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Jinli Communication Equipment Co Ltd filed Critical Shenzhen Jinli Communication Equipment Co Ltd
Priority to CN201610107557.4A priority Critical patent/CN105681774B/zh
Publication of CN105681774A publication Critical patent/CN105681774A/zh
Application granted granted Critical
Publication of CN105681774B publication Critical patent/CN105681774B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/64Circuits for processing colour signals
    • H04N9/73Colour balance circuits, e.g. white balance circuits or colour temperature control

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)

Abstract

本发明实施例提供了一种图像处理的方法,所述方法包括:对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;确定所述人脸区域中的目标镜面反射区域;将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;将所述投影数据进行拟合,以得到拟合直线;基于所述拟合直线计算所述目标镜面反射区域的多个色品值;根据所述多个色品值估算预设通道的目标色品值,其中,所述预设通道为r、g、b通道中的任一通道;通过所述目标色品值确定所述待处理图像的色温;根据所述色温对所述待处理图像进行处理。本发明实施例还提供了一种终端。通过本发明实施例可使得图像中的人物肤色更为自然。

Description

一种图像处理的方法及终端
技术领域
本发明涉及图像处理技术领域,具体涉及一种图像处理的方法及终端。
背景技术
目前,无论专用摄像机或者终端(如手机、平板电脑等等)的摄像头在拍照过程中,白平衡技术是一定要用到的技术。白平衡技术的使用目的与人眼的颜色恒常性有着直接的关系。所谓颜色恒常性是指当照射物体表面的颜色光发生变化时,人们对该物体表面颜色的知觉仍然保持不变的知觉特性。而白平衡技术的目的就是为了保证拍摄出来的图像和人眼看到的景象没有色差。目前的白平衡技术在特殊环境下,如:暗视觉环境下或者是场景光线效果较为复杂的环境下,在对图像进行处理的过程中会产生人物肤色偏色严重。
发明内容
本发明实施例提供了一种图像处理的方法及终端,可以使得图像中的人物肤色更自然。
本发明实施例第一方面提供了一种图像处理的方法,包括:
对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;
确定所述人脸区域中的目标镜面反射区域;
将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;
将所述投影数据进行拟合,以得到拟合直线;
基于所述拟合直线计算所述目标镜面反射区域的多个色品值;
根据所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道;
通过所述目标色品值确定所述待处理图像的色温;
根据所述色温对所述待处理图像进行处理。
本发明实施例第二方面提供了一种终端,包括:
检测单元,用于对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;
第一确定单元,用于确定所述检测单元检测到的所述人脸区域中的目标镜面反射区域;
投影单元,用于将所述第一确定单元确定的所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;
拟合单元,用于将所述投影单元投影得到的所述投影数据进行拟合,以得到拟合直线;
第一计算单元,用于基于所述拟合单元拟合得到的所述拟合直线计算所述目标镜面反射区域的多个色品值;
第一估算单元,用于根据所述第一计算单元计算出的所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道;
第二确定单元,用于通过所述第一估算单元估算出的所述目标色品值确定所述待处理图像的色温;
处理单元,用于根据所述第二确定单元确定出的所述色温对所述待处理图像进行处理。
实施本发明实施例,具有如下有益效果:
通过本发明实施例,对待处理图像进行人脸检测,以得到该待处理图像中的人脸区域,确定该人脸区域中的目标镜面反射区域,并将该目标镜面反射区域投影到IIC空间,以得到该目标镜面反射区域的投影数据,将该投影数据进行拟合,以得到拟合直线,基于该拟合直线计算该目标镜面反射区域的多个色品值,根据该多个色品值估算预设通道的目标色品值,其中该预设通道为r、g、b通道中的任一通道;通过该目标色品值确定该待处理图像的色温,根据该色温对所述待处理图像进行处理。从而,只对待处理图像进行人脸检测,将该待处理图像中的人脸区域确定整个待处理图像中的色温,因此,可使得图像中的人物肤色更为自然。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种图像处理的方法的第一实施例流程示意图;
图1a是本发明实施例提供的一种基于IIC模型进行投影的示例图;
图1b是本发明实施例提供的色温曲线示例图;
图2是本发明实施例提供的一种图像处理的方法的第二实施例流程示意图;
图3是本发明实施例提供的一种图像处理的方法的第三实施例流程示意图;
图4是本发明实施例提供的一种终端的第一实施例结构示意图;
图5是本发明实施例提供的一种终端的第二实施例结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例所描述的终端可以包括智能手机(如Android手机、iOS手机、WindowsPhone手机等)、平板电脑、掌上电脑、笔记本电脑、移动互联网设备(MID,MobileInternetDevices)或穿戴式设备等,上述终端仅是举例,而非穷举,包含但不限于上述终端。
请参阅图1,为本发明实施例提供的一种图像处理的方法的第一实施例流程示意图。本实施例中所描述的图像处理的方法,包括以下步骤:
101、对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域。
本发明实施例中,待处理图像可为利用终端的摄像头拍摄的图像,在终端的摄像头进行拍摄之后,可得到raw图像,可对该raw图像进行线性化处理,在该线性化之后,再进行Demosaic处理,便可以得到本发明中的待处理图像。
其中,利用终端的摄像头进行拍摄以得到待处理图像的步骤如下:对利用终端的摄像头拍摄得到的raw图像进行线性化处理。线性化处理可依据如下公式:
l i n e r _ d a t a = r a w _ d a t a 1023 - - - ( 1 )
其中,raw_data为raw图像数据,liner_data为线性化处理后的数据。
接着,对上述线性化处理后的数据进行demosaic处理,进行demosaic处理的主要原因在于:由于传感器只能感受光的“强度”而非“色彩”,因而,需要在传感器之前放置一些特定波长的滤光片,使得经过这些滤光片后作用在传感器上的光信号只是单一波长的乘积形式(比如550nm),而非整个可见光波段(380nm~780nm)的积分形式。实现这个功能最常见的滤光片就是拜耳滤镜。
灰色部分为CMOS,彩色部分为对应颜色的滤镜,每个滤镜下方对应的像素点只能接收到该滤镜对应波长的光信号,而不是整个可见光谱范围的光信号。根据左上角四个滤镜从左至右、从上至下的顺序一般有“RGGB”、“GBRG”、“GRBG”、“BGGR”几种。因此,只要得知传感器的拜耳滤镜的排列方式就可以计算Demosaic。一般都采用常见的插值算法,例如双线性插值,中值插值等插值算法,但从算法复杂度和算法实用性的角度考虑,优选地,采用了直接将每四个像素合成为一个像素进行处理,计算(Matlab中)程序如下:
b = l i n e r _ d a t a ( 1 : 2 : r o w , 1 : 2 : c o l ) ; g 1 = l i n e r _ d a t a ( 1 : 2 : r o w , 2 : 2 : c o l ) ; g 2 = l i n e r _ d a t a ( 2 : 2 : r o w , 1 : 2 : c o l ) ; r = l i n e r _ d a t a ( 2 : 2 : r o w , 2 : 2 : c o l ) ; g = g 1 + g 2 2 - - - ( 2 )
其中,r、g、b为图像的红、绿、蓝三通道的值,row为图像的宽,col为图像的高。从而,对raw图像进行线性化处理和Demosaic处理,便可以得到待处理图像。
其中,终端可对待处理图像进行人脸检测,从而,可确定待处理图像中的人脸区域。其中,在待处理图像中包含一个人脸的情况下,可确定该待处理图像中的1个人脸区域;在待处理图像中包含多个人脸的情况下,可确定该待处理图像中的多个人脸区域。
102、确定所述人脸区域中的目标镜面反射区域。
本发明实施例中,终端可将待处理图像中的人脸区域裁剪出来,并对该人脸区域进行镜面反射区域检测,从而,可确定该人脸区域中的目标镜面反射区域。可见,目标镜面反射区域是人脸区域中的部分区域。终端在对待处理图像中进行人脸检测,可确定该待处理图像中的人脸区域,可对该待处理图像进行图像分割,以得到该待处理图像中的目标镜面反射区域,更确切地说,目标镜面反射区域为人脸区域中的一部分。在实际应用中,目标镜面反射区域是由多个子区域构成。
步骤102可由暗通道理论实现,如下:由暗通道理论可知,亮度越高的暗通道区域,其为镜面反射区域的概率就越大,检测人脸反射区域可由公式(3)实现,如下:
I d a r k ( x ) = m i n y = Ω ( x ) ( m i n c ∈ { r , g , b } ( I c ( y ) ) ) - - - ( 3 )
其中,公式(3)中Ω(x)是中心在x的任一人脸图像,其中,x是子图像的中心坐标,y是子图像的中心坐标x对应的纵坐标,c表示任一通道,r、g、b分别为待处理图像的红色通道、绿色通道和蓝色通道,I为暗通道图像。
可选地,终端可先确定人脸区域中的镜面反射区域,然后,再对该镜面反射区域进行镜面反射区域检测,以得到该镜面反射区域中的目标镜面反射区域。即,对人脸区域进行两次镜面反射区域检测,这样,可提高镜面反射区域的精度。进一步地,终端还可对人脸区域进行多次镜面反射区域检测,以3次镜面反射区域检测为例进行说明,首先,对人脸区域进行镜面反射区域检测,以得到第一镜面反射区域,由于第一镜面反射区域往往会包含一些漫反射的区域,因此,可再次对该第一镜面反射区域进行镜面反射区域检测,以得到第二镜面反射区域,最后,为了提高白平衡精度,还可对该第二镜面反射区域进行镜面反射区域检测,将最终检测到的区域作为目标镜面反射区域。
103、将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据。
本发明实施例中,终端可将目标镜面反射区域投影到IIC空间,首先,可计算步骤102中输入的目标镜面反射区域对应的图像的r、g、b三通道的值以及对应的通道的chroma值,如公式(4):
chroma c = I c Σ c ∈ ( r , g , b ) I c - - - ( 4 )
其中,公式(4)中,c为r、g、b中任一通道,chromac为c通道chroma值,也称为色品值。I为目标镜面反射区域对应的图像。
在IIC空间中,由双色反射模型(DRM模型)理论可知,任一图像均可由漫反射和镜面反射两部分来表示,本实施中所涉及到的图像也不例如,如以下公式(5)所示:
Ic(x)=md(x)Λc(x)+ms(x)Γc(5)
其中,公式(5)中md(x)可表示形如公式(6):
m d ( x ) = ω d ( x ) Σ i B i ( x ) - - - ( 6 )
其中,公式(5)中ms(x)可表示形如公式(7):
m s ( x ) = ω s ( x ) Σ i G i - - - ( 7 )
由公式(5)和公式(4)可以推出,图像的色品值chromaticity可以表示为
chroma c = m d ( x ) Λ c ( x ) + m s ( x ) Γ c m d ( x ) Σ i Λ i ( x ) + m s ( x ) Σ i Γ i - - - ( 8 )
其中,公式(5)-公式(8)中Ic(x)代表光源,Γc代表镜面反射,Λc(x)代表漫反射,md(x)为漫反射评估参数,ms(x)为镜面反射评估参数。
接着,由公式(8)可推导出
m s = m d ( Λ c - chroma c ) chroma c - Γ c - - - ( 9 )
将上述公式(9)的结果带入公式(8)可得到:
chroma c ( x ) = p c ( x ) 1 Σ i I i ( x ) + Γ c - - - ( 10 )
其中,公式(9)中pc(x)可表示如下:
pc(x)=md(x)(Λc(x)-Γc)(11)
由上述公式(10)可知,在将目标镜面反射区域在IIC空间进行投影后,所得的截距即为本实施例中要计算的色温。如图1a所示,该目标镜面反射区域可以根据图1a所描述的模型进行检测。
由图1a可知,图1a中水平的直线为漫反射部分,而斜率较大部分并与Y轴交于一点的为镜面反射部分。可参见图1a,由图1a中的模型可有下列公式总结:
y=kx+b,x>Threshold
y=N,x≤Threshold(11)
在公式(11)的描述下,只需要求出对应的Threshold就可以有效的去除漫反射部分像素对算法结果的影响。而由图1a中所描述的模型可以看出,Threshold处属于梯度变化点,因此使用一阶导数求出梯度变化点即可,如公式(12):
point i i ∈ ( 1 , n ) = m e a n ( c h r o m a ) i i ∈ ( ( i - 1 ) * s t e p , i * s t p ) - - - ( 12 )
其中,公式(12)中所示的ii表示反增强(inverseintensity),具体如公式(13)所示:
i i = 1 Σ c ∈ { r , g , b } I c - - - ( 13 )
其中,step可根据具体实际情况设定,本专利将预设该step的范围为0.05-0.2,可选地,此处step可为0-1之间,优选地,0.05-0.2。
对公式(11)进行求解一阶导数,如公式(14)所示:
T = d i f f i ∈ ( n , 1 ) ( point i ) - - - ( 14 )
优选地,上述公式中,Threshold可为T中第一个大于0的元素。
104、将所述投影数据进行拟合,以得到拟合直线。
本发明实施例中,终端可利用最小二乘法将步骤103中的投影数据进行拟合,为一条直线并计算其斜率和截距。具体地,如公式(15)所示:
a = ( Σ x y - Σ x Σ y / N ) ( Σx 2 - ( Σ x ) 2 / N )
d=yave-a·xave(15)
其中,公式(15)在本专利中ave上标代表着将所有的数据点按照x轴等距进行平均处理的数据点。中a表示斜率,d表示截距。由于,目标镜面反射区域为多个,因而,对应着多个a和多个d。
105、基于所述拟合直线计算所述目标镜面反射区域的多个色品值。
本发明实施例中,终端可通过r、g、b中任一通道的多个色品值。针对任一目标镜面反射区域,都会由一个a和一个d。其中,d即为我们所需要求得的色品值。
106、根据所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道。
本发明实施例中,终端可对r、g、b中任一通道进行估算目标色品值,例如,以r通道为例进行说明,
具体地,可通过概率密度算法得到概率目标色品值。其理论和实施方式如下:
由概率论的知识可知,假设样本数据值在D维空间服从一个未知的概率密度函数,那么在区域R内的概率为:
P=∫Rp(x)dx(16)
本实施例中,D为2维空间,R为目标镜面反射区域,样本数据可为上述截距d,概率P的含义就为每个样本数据点落入区域R的概率为P。假设N个样本数据点有K个落入了区域R,那么就应该服从二项分布:
B i n ( K | N , P ) = N ! K ! ( N - K ) ! P K ( 1 - P ) 1 - K - - - ( 17 )
在N样本数据很大时,K约等于N*P。反之,假设区域R足够小的话,那么P约等于p(x)*V(V为区域R的空间)。
即:
p≈p(x)·V(18)
由公式(17)与(18),可得:
p ( x ) = K N V - - - ( 19 )
可选地,根据公式(18)求得概率密度最大的色品值作为目标色品值。进一步地,终端还可以将概念密度第二大的色品值作为目标色品值。
107、通过所述目标色品值确定所述待处理图像的色温。
本发明实施例中,色温可为r、g、b三个通道的色品值,由于待处理图像可由r、g、b三个通道构成,从而,在该三个通道中某一通道的色品值确定时,可求解另外两个通道的色品值。
具体地,由于双色反射模型(DichromaticReflectionModel,DRM)模型和反增强色调(InverseIntensityChroma,IIC)模型的理论基于一定的条件并且在计算物体镜面反射的区域时也可能发生误差,于是,可引入色温曲线进行验证。色温曲线的拟合可以在实验条件下使用固定的元器件使用灰卡进行采集,并根据采集的数据点进行拟合,本发明在具体实施过程中,发明人采用金立S5.1PRO手机的摄像机元器件进行采集对环境进行拍摄,从而,拟合的色温曲线如图1b所示,该色温曲线的横轴为r通道的色品值(由x表示),纵轴为g通道的色品值(由y表示),r通道的色品值与g通道的色品值的关系,可如公式(20):
y=3.1627x2+1.8346x=0.1826(20)
其中,若x一定,那么可直接求出y,即在r通道的色品值已知的情况下,可直接求解出y通道的色品值。
可选地,终端还可得到有关r通道与b通道的色温曲线,或者,g通道与b通道的色温曲线,因而,只需求求解出任一一个通道的色品值,便可以求得其他通道的色品值,所有通道的色品值可构成图像的色温。
108、根据所述色温对所述待处理图像进行处理。
本发明实施例中,可用步骤108得到的色温对待处理图像进行处理。
通过本发明实施例,对待处理图像进行人脸检测,以得到该待处理图像中的人脸区域,确定该人脸区域中的目标镜面反射区域,并将该目标镜面反射区域投影到IIC空间,以得到该目标镜面反射区域的投影数据,将该投影数据进行拟合,以得到拟合直线,基于该拟合直线计算该目标镜面反射区域的多个色品值,根据该多个色品值估算预设通道的目标色品值,其中该预设通道为r、g、b通道中的任一通道;通过该目标色品值确定该待处理图像的色温,根据该色温对所述待处理图像进行处理。从而,只对待处理图像进行人脸检测,将该待处理图像中的人脸区域确定整个待处理图像中的色温,因此,可使得图像中的人物肤色更为自然。
请参阅图2,为本发明实施例提供的一种图像处理的方法的第二实施例流程示意图。本实施例中所描述的图像处理的方法,包括以下步骤:
201、对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域。
202、将所述人脸区域划分为尺寸大小相同的多个独立方块区域。
本发明实施例中,终端可对人脸区域进行划分,划分为尺寸大小相同的多个独立方块区域,其中,每个独立方块区域的尺寸大小可为3×3、5×5、7×7、9×9、11×11等等。在人脸区域为多个时,可分别将每个人脸区域均划分为尺寸大小相同的多个独立方块区域。
203、分别计算所述多个独立方块区域的暗通道值,以得到多个暗通道值。
本发明实施例中,每个独立方块区域均对应一个暗通道值,从而,可得到多个暗通道值。
由暗通道理论可知,亮度越高的暗通道区域,其为镜面反射区域的概率就越大,检测人脸反射区域可由如下公式实现,如下:
I d a r k ( x ) = m i n y = Ω ( x ) ( m i n c ∈ { r , g , b } ( I c ( y ) ) )
其中,Ω(x)是中心为x的某一人脸图像,其中,x是该图像的中心坐标,y是该图像的中心坐标x对应的纵坐标,c表示任一通道,r、g、b分别为待处理图像的红色通道、绿色通道和蓝色通道,I为暗通道图像。
204、将所述多个暗通道值中的目标暗通道值对应的独立方块区域作为镜面反射区域,其中所述目标暗通道值均大于预设阈值。
本发明实施例中,终端可对多个暗通道值与预设阈值进行比较,若暗通道值i大于预设阈值,则将该暗通道值i作为目标暗通道值,其中,该暗通道值i为该多个暗通道值中的任一个。其中,预设阈值可由经验值决定,或者,由用户设置。
205、对所述镜面反射区域进行镜面反射区域检测,以得到所述镜面反射区域中的目标镜面反射区域。
206、将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据。
207、将所述投影数据进行拟合,以得到拟合直线。
208、基于所述拟合直线计算所述目标镜面反射区域的多个色品值。
209、根据所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道。
本发明实施例中,终端可构造概率密度函数,根据该概率密度函数估计出预设通道的目标色品值。
210、通过所述目标色品值确定所述待处理图像的色温。
211、根据所述色温对所述待处理图像进行处理。
通过本发明实施例,对待处理图像进行人脸检测,以得到该待处理图像中的人脸区域,确定该人脸区域中的镜面反射区域,并将该镜面反射区域划分为多个独立方块区域,计算每一独立方块区域的暗通道值,该暗通道值中大于预设阈值的目标暗通道值对应的独立方块区域作为目标镜面反射区域,并将该目标镜面反射区域投影到IIC空间,以得到该目标镜面反射区域的投影数据,将该投影数据进行拟合,以得到拟合直线,基于该拟合直线计算该目标镜面反射区域的多个色品值,根据该多个色品值估算预设通道的目标色品值,其中该预设通道为r、g、b通道中的任一通道;通过该目标色品值确定该待处理图像的色温,根据该色温对所述待处理图像进行处理。从而,只对待处理图像进行人脸检测,将该待处理图像中的人脸区域确定整个待处理图像中的色温,在根据人脸区域确定待处理图像的色温的过程中,将待处理图像划分为多个独立方块区域,将多个独立方块区域中暗通道值大于预设阈值的独立方块区域,从而,可提高白平衡的精度,因此,可使得图像中的人物肤色更为自然。
请参阅图3,为本发明实施例提供的一种图像处理的方法的第三实施例流程示意图。本实施例中所描述的图像处理的方法,包括以下步骤:
301、对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域。
302、确定所述人脸区域中的目标镜面反射区域。
303、将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据。
304、将所述投影数据进行拟合,以得到拟合直线。
305、基于所述拟合直线计算所述目标镜面反射区域的多个色品值。
306、根据所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道。
307、获取所述待处理图像所在环境中的色温曲线。
本发明实施例中,基于双色反射模型模型和反增强色调模型的理论基于一定的条件并且在计算物体镜面反射的区域时也可能发生误差,于是,可引入色温曲线进行验证。色温曲线的拟合可以在实验条件下使用固定的元器件使用灰卡进行采集,并根据采集的数据点进行拟合,本发明在具体实施过程中,发明人采用金立S5.1PRO手机的摄像机元器件进行采集对环境进行拍摄,从而,拟合的色温曲线如图1b所示,该色温曲线的横轴为r通道的色品值(由x表示),纵轴为g通道的色品值(由y表示),r通道的色品值与g通道的色品值的关系,可如下式:
y=3.1627x2+1.8346x=0.1826
其中,若x一定,那么可直接求出y,即在r通道的色品值已知的情况下,可直接求解出y通道的色品值。
可选地,终端还可得到有关r通道与b通道的色温曲线,或者,g通道与b通道的色温曲线,因而,只需求求解出任一一个通道的色品值,便可以求得其他通道的色品值,所有通道的色品值可构成图像的色温。
308、根据所述目标色品值和所述色温曲线确定所述预设通道之外的其他通道的色品值。
309、根据所述目标色品值和所述其他通道的色品值对所述待处理图像进行处理。
通过本发明实施例,对待处理图像进行人脸检测,以得到该待处理图像中的人脸区域,确定该人脸区域中的目标镜面反射区域,并将该目标镜面反射区域投影到IIC空间,以得到该目标镜面反射区域的投影数据,将该投影数据进行拟合,以得到拟合直线,基于该拟合直线计算该目标镜面反射区域的多个色品值,根据该多个色品值估算预设通道的目标色品值,其中该预设通道为r、g、b通道中的任一通道;通过该目标色品值确定该待处理图像的色温,根据该色温对所述待处理图像进行处理。从而,只对待处理图像进行人脸检测,将该待处理图像中的人脸区域确定整个待处理图像中的色温,因此,可使得图像中的人物肤色更为自然。
请参阅图4,为本发明实施例提供的一种终端的第一实施例结构示意图。本实施例中所描述的终端,包括:
检测单元401,用于对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;
第一确定单元402,用于确定所述检测单元401检测到的所述人脸区域中的目标镜面反射区域;
投影单元403,用于将所述第一确定单元402确定的所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;
拟合单元404,用于将所述投影单元403投影得到的所述投影数据进行拟合,以得到拟合直线;
第一计算单元405,用于基于所述拟合单元404拟合得到的所述拟合直线计算所述目标镜面反射区域的多个色品值;
第一估算单元406,用于根据所述计算单元405计算出的所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道;
第二确定单元407,用于通过所述第一估算单元406估算出的所述目标色品值确定所述待处理图像的色温;
处理单元408,用于根据所述第二确定单元407确定出的所述色温对所述待处理图像进行处理。
可选地,所述第一确定单元402包括:
第三确定单元4021,用于确定所述人脸区域中的镜面反射区域;
检测单元4022,用于对所述第三确定单元4021确定的所述镜面反射区域进行镜面反射区域检测,以得到所述镜面反射区域中的目标镜面反射区域。
可选地,所述第三确定单元4021包括:
划分单元409,用于将所述人脸区域划分为尺寸大小相同的多个独立方块区域;
第二计算单元410,用于分别计算所述划分单元409划分的所述多个独立方块区域的暗通道值,以得到多个暗通道值;
第四确定单元411,用于将所述第二计算单元410计算出的所述多个暗通道值中的目标暗通道值对应的独立方块区域作为镜面反射区域,其中所述目标暗通道值均大于预设阈值。
可选地,所述第一估算单元406包括:
构造单元4061,用于根据所述多个色品值构成关于预设区域的概率密度函数;
第二估算单元4062,用于根据所述构造单元构造的所述概率密度函数估算预设通道的目标色品值。
可选地,所述第二确定单元407包括:
获取单元4071,用于获取所述待处理图像所在环境中的色温曲线;
第五确定单元4072,用于根据所述目标色品值和所述获取单元4071获取的所述色温曲线确定所述预设通道之外的其他通道的色品值。
通过本发明实施例所描述的终端可对待处理图像进行人脸检测,以得到该待处理图像中的人脸区域,确定该人脸区域中的目标镜面反射区域,并将该目标镜面反射区域投影到IIC空间,以得到该目标镜面反射区域的投影数据,将该投影数据进行拟合,以得到拟合直线,基于该拟合直线计算该目标镜面反射区域的多个色品值,根据该多个色品值估算预设通道的目标色品值,其中该预设通道为r、g、b通道中的任一通道;通过该目标色品值确定该待处理图像的色温,根据该色温对所述待处理图像进行处理。从而,只对待处理图像进行人脸检测,将该待处理图像中的人脸区域确定整个待处理图像中的色温,因此,可使得图像中的人物肤色更为自然。
请参阅图5,为本发明实施例提供的一种终端的第二实施例结构示意图。本实施例中所描述的终端,包括:至少一个输入设备1000;至少一个输出设备2000;至少一个处理器3000,例如CPU;和存储器4000,上述输入设备1000、输出设备2000、处理器3000和存储器4000通过总线5000连接。
其中,上述输入设备1000具体可为触控面板、物理按键或者鼠标。
上述输出设备2000具体可为显示屏。
上述存储器4000可以是高速RAM存储器,也可为非不稳定的存储器(non-volatilememory),例如磁盘存储器。上述存储器4000用于存储一组程序代码,上述输入设备1000、输出设备2000和处理器3000用于调用存储器4000中存储的程序代码,执行如下操作:
上述处理器3000,用于:
对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;
确定所述人脸区域中的目标镜面反射区域;
将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;
将所述投影数据进行拟合,以得到拟合直线;
基于所述拟合直线计算所述目标镜面反射区域的多个色品值;
根据所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道;
通过所述目标色品值确定所述待处理图像的色温;
根据所述色温对所述待处理图像进行处理。
可选地,上述处理器3000确定所述人脸区域中的目标镜面反射区域,包括:
确定所述人脸区域中的镜面反射区域;
对所述镜面反射区域进行镜面反射区域检测,以得到所述镜面反射区域中的目标镜面反射区域。
可选地,上述处理器3000确定所述人脸区域中的镜面反射区域,包括:
将所述人脸区域划分为尺寸大小相同的多个独立方块区域;
分别计算所述多个独立方块区域的暗通道值,以得到多个暗通道值;
将所述多个暗通道值中的目标暗通道值对应的独立方块区域作为镜面反射区域,其中所述目标暗通道值均大于预设阈值。
可选地,上述处理器3000根据所述多个色品值估算预设通道的目标色品值,包括:
根据所述多个色品值构成关于预设区域的概率密度函数;
根据所述概率密度函数估算预设通道的目标色品值。
可选地,上述处理器3000通过所述目标色品值确定所述待处理图像的色温,包括:
获取所述待处理图像所在环境中的色温曲线;
根据所述目标色品值和所述色温曲线确定所述预设通道之外的其他通道的色品值。
具体实现中,本发明实施例中所描述的输入设备1000、输出设备2000和处理器3000可执行本发明实施例提供的一种图像处理的方法的第一实施例、第二实施例和第三实施例中所描述的实现方式,也可执行本发明实施例提供的一种终端的第一实施例中所描述的终端的实现方式,在此不再赘述。
本发明所有实施例中的单元,可以通过通用集成电路,例如CPU(CentralProcessingUnit,中央处理器),或通过ASIC(ApplicationSpecificIntegratedCircuit,专用集成电路)来实现。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本发明实施例终端中的单元可以根据实际需要进行合并、划分和删减。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,是可以通过计算机程序来指令相关的硬件来完成,所述的程序可存储于一计算机可读取存储介质中,该程序在执行时,可包括如上述各方法的实施例的流程。其中,所述的存储介质可为磁碟、光盘、只读存储记忆体(Read-OnlyMemory,ROM)或随机存取存储器(RandomAccessMemory,简称RAM)等。
以上对本发明实施例所提供的一种图像处理的方法及终端进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种图像处理的方法,其特征在于,包括:
对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;
确定所述人脸区域中的目标镜面反射区域;
将所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;
将所述投影数据进行拟合,以得到拟合直线;
基于所述拟合直线计算所述目标镜面反射区域的多个色品值;
根据所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道;
通过所述目标色品值确定所述待处理图像的色温;
根据所述色温对所述待处理图像进行处理。
2.根据权利要求1所述的方法,其特征在于,所述确定所述人脸区域中的目标镜面反射区域,包括:
确定所述人脸区域中的镜面反射区域;
对所述镜面反射区域进行镜面反射区域检测,以得到所述镜面反射区域中的目标镜面反射区域。
3.根据权利要求2所述的方法,其特征在于,所述确定所述人脸区域中的镜面反射区域,包括:
将所述人脸区域划分为尺寸大小相同的多个独立方块区域;
分别计算所述多个独立方块区域的暗通道值,以得到多个暗通道值;
将所述多个暗通道值中的目标暗通道值对应的独立方块区域作为镜面反射区域,其中所述目标暗通道值均大于预设阈值。
4.如权利要求1至3任一项所述的方法,其特征在于,所述根据所述多个色品值估算预设通道的目标色品值,包括:
根据所述多个色品值构成关于预设区域的概率密度函数;
根据所述概率密度函数估算预设通道的目标色品值。
5.根据权利要求1至3任一项所述的方法,其特征在于,所述通过所述目标色品值确定所述待处理图像的色温,包括:
获取所述待处理图像所在环境中的色温曲线;
根据所述目标色品值和所述色温曲线确定所述预设通道之外的其他通道的色品值。
6.一种终端,其特征在于,包括:
检测单元,用于对待处理图像进行人脸检测,以得到所述待处理图像中的人脸区域;
第一确定单元,用于确定所述检测单元检测到的所述人脸区域中的目标镜面反射区域;
投影单元,用于将所述第一确定单元确定的所述目标镜面反射区域投影到IIC空间,以得到所述目标镜面反射区域的投影数据;
拟合单元,用于将所述投影单元投影得到的所述投影数据进行拟合,以得到拟合直线;
第一计算单元,用于基于所述拟合单元拟合得到的所述拟合直线计算所述目标镜面反射区域的多个色品值;
第一估算单元,用于根据所述第一计算单元计算出的所述多个色品值估算预设通道的目标色品值,其中所述预设通道为r、g、b通道中的任一通道;
第二确定单元,用于通过所述第一估算单元估算出的所述目标色品值确定所述待处理图像的色温;
处理单元,用于根据所述第二确定单元确定出的所述色温对所述待处理图像进行处理。
7.根据权利要求所述的终端,其特征在于,所述第一确定单元包括:
第三确定单元,用于确定所述人脸区域中的镜面反射区域;
检测单元,用于对所述第三确定单元确定的所述镜面反射区域进行镜面反射区域检测,以得到所述镜面反射区域中的目标镜面反射区域。
8.根据权利要求7所述的终端,其特征在于,所述第三确定单元包括:
划分单元,用于将所述人脸区域划分为尺寸大小相同的多个独立方块区域;
第二计算单元,用于分别计算所述划分单元划分的所述多个独立方块区域的暗通道值,以得到多个暗通道值;
第四确定单元,用于将所述第二计算单元计算出的所述多个暗通道值中的目标暗通道值对应的独立方块区域作为镜面反射区域,其中所述目标暗通道值均大于预设阈值。
9.如权利要求6至8任一项所述的终端,其特征在于,所述第一估算单元包括:
构造单元,用于根据所述多个色品值构成关于预设区域的概率密度函数;
第二估算单元,用于根据所述构造单元构造的所述概率密度函数估算预设通道的目标色品值。
10.根据权利要求6至8任一项所述的终端,其特征在于,所述第二确定单元包括:
获取单元,用于获取所述待处理图像所在环境中的色温曲线;
第五确定单元,用于根据所述目标色品值和所述获取单元获取的所述色温曲线确定所述预设通道之外的其他通道的色品值。
CN201610107557.4A 2016-02-26 2016-02-26 一种图像处理的方法及终端 Active CN105681774B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610107557.4A CN105681774B (zh) 2016-02-26 2016-02-26 一种图像处理的方法及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610107557.4A CN105681774B (zh) 2016-02-26 2016-02-26 一种图像处理的方法及终端

Publications (2)

Publication Number Publication Date
CN105681774A true CN105681774A (zh) 2016-06-15
CN105681774B CN105681774B (zh) 2017-11-17

Family

ID=56305173

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610107557.4A Active CN105681774B (zh) 2016-02-26 2016-02-26 一种图像处理的方法及终端

Country Status (1)

Country Link
CN (1) CN105681774B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107547887A (zh) * 2016-06-28 2018-01-05 深圳富泰宏精密工业有限公司 电子装置及其色温调节方法
CN111986119A (zh) * 2020-09-01 2020-11-24 安徽萤瞳科技有限公司 暗通道图像亮度值干扰滤除方法及海雾图像海雾去除方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040145670A1 (en) * 2003-01-16 2004-07-29 Samsung Techwin Co., Ltd. Digital camera and method of controlling a digital camera to determine image sharpness
CN101242476A (zh) * 2008-03-13 2008-08-13 北京中星微电子有限公司 图像颜色自动校正方法及数字摄像***
CN101674490A (zh) * 2009-09-23 2010-03-17 电子科技大学 一种基于视网膜视觉机制的彩色图像颜色恒常方法
CN102301694A (zh) * 2009-11-18 2011-12-28 松下电器产业株式会社 图像处理方法及图像处理装置
JP2015005927A (ja) * 2013-06-21 2015-01-08 キヤノン株式会社 画像処理装置およびその制御方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040145670A1 (en) * 2003-01-16 2004-07-29 Samsung Techwin Co., Ltd. Digital camera and method of controlling a digital camera to determine image sharpness
CN101242476A (zh) * 2008-03-13 2008-08-13 北京中星微电子有限公司 图像颜色自动校正方法及数字摄像***
CN101674490A (zh) * 2009-09-23 2010-03-17 电子科技大学 一种基于视网膜视觉机制的彩色图像颜色恒常方法
CN102301694A (zh) * 2009-11-18 2011-12-28 松下电器产业株式会社 图像处理方法及图像处理装置
JP2015005927A (ja) * 2013-06-21 2015-01-08 キヤノン株式会社 画像処理装置およびその制御方法

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107547887A (zh) * 2016-06-28 2018-01-05 深圳富泰宏精密工业有限公司 电子装置及其色温调节方法
US10382734B2 (en) 2016-06-28 2019-08-13 Chiun Mai Communication Systems, Inc. Electronic device and color temperature adjusting method
CN111986119A (zh) * 2020-09-01 2020-11-24 安徽萤瞳科技有限公司 暗通道图像亮度值干扰滤除方法及海雾图像海雾去除方法
CN111986119B (zh) * 2020-09-01 2023-11-28 安徽萤瞳科技有限公司 暗通道图像亮度值干扰滤除方法及海雾图像海雾去除方法

Also Published As

Publication number Publication date
CN105681774B (zh) 2017-11-17

Similar Documents

Publication Publication Date Title
JP7027537B2 (ja) 画像処理方法および装置、電子機器、ならびにコンピュータ可読記憶媒体
US20190072697A1 (en) Lens device and image capturing device
US20150278996A1 (en) Image processing apparatus, method, and medium for generating color image data
EP1876809B1 (en) Image processing device
CN104052979B (zh) 用于图像处理的装置和技术
US20150358542A1 (en) Image processing apparatus, image capturing apparatus, image processing method, image capturing method, and non-transitory computer-readable medium for focus bracketing
US20100166305A1 (en) Method for detecting and correcting chromatic aberration, and apparatus and method for processing image using the same
TWI629675B (zh) 影像辨識系統及其資訊顯示方法
US7148924B2 (en) Image processing method, image processing program, image processing apparatus, and digital still camera using the image processing apparatus
CN111837155A (zh) 图像处理方法及设备
CN108431751B (zh) 背景去除
JP5246078B2 (ja) 被写***置特定用プログラム、およびカメラ
CN108230407B (zh) 一种图像的处理方法和装置
CN104519328A (zh) 图像处理设备、图像捕捉装置和图像处理方法
US9947258B2 (en) Image processing method and image processing apparatus
JP2573434B2 (ja) 特定色抽出方法
CN102638639A (zh) 图像处理装置、摄像装置以及图像处理方法
CN107018407B (zh) 信息处理装置、评价用图、评价***、以及性能评价方法
US20210365672A1 (en) Face Image Detection Method and Terminal Device
US9509902B1 (en) Methods and devices for correction of camera module sensitivity and flash color variation
CN105359024A (zh) 摄像装置和摄像方法
KR20140090778A (ko) 컬러 프린지 제거 방법
WO2017092341A1 (zh) 一种测试方法和装置
CN106067937A (zh) 镜头模块阵列、图像感测装置与数字缩放图像融合方法
CN105681774A (zh) 一种图像处理的方法及终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
PP01 Preservation of patent right
PP01 Preservation of patent right

Effective date of registration: 20180428

Granted publication date: 20171117

PD01 Discharge of preservation of patent
PD01 Discharge of preservation of patent

Date of cancellation: 20210428

Granted publication date: 20171117

TR01 Transfer of patent right
TR01 Transfer of patent right

Effective date of registration: 20210617

Address after: 518057 Desai Science and Technology Building, 9789 Shennan Avenue, Yuehai Street, Nanshan District, Shenzhen City, Guangdong Province, 17th Floor (15th Floor of Natural Floor) 1702-1703

Patentee after: Shenzhen Microphone Holdings Co.,Ltd.

Address before: 518040 21 floor, east block, Times Technology Building, 7028 Shennan Road, Futian District, Shenzhen, Guangdong.

Patentee before: DONGGUAN GOLDEX COMMUNICATION TECHNOLOGY Co.,Ltd.