CN101374191A - 校正图像的色差的方法和设备 - Google Patents
校正图像的色差的方法和设备 Download PDFInfo
- Publication number
- CN101374191A CN101374191A CNA2008102126085A CN200810212608A CN101374191A CN 101374191 A CN101374191 A CN 101374191A CN A2008102126085 A CNA2008102126085 A CN A2008102126085A CN 200810212608 A CN200810212608 A CN 200810212608A CN 101374191 A CN101374191 A CN 101374191A
- Authority
- CN
- China
- Prior art keywords
- pixel
- aberration
- colourity
- weight
- gradient
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000004075 alteration Effects 0.000 title claims abstract description 126
- 238000000034 method Methods 0.000 title claims abstract description 30
- 238000012937 correction Methods 0.000 claims abstract description 30
- 230000001915 proofreading effect Effects 0.000 claims description 11
- 238000004513 sizing Methods 0.000 claims description 8
- 230000003287 optical effect Effects 0.000 claims description 7
- 230000003247 decreasing effect Effects 0.000 claims description 4
- 238000012545 processing Methods 0.000 abstract description 7
- 230000006870 function Effects 0.000 description 12
- 230000002950 deficient Effects 0.000 description 5
- 241001326510 Phacelia sericea Species 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000000740 bleeding effect Effects 0.000 description 1
- 230000015556 catabolic process Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000007796 conventional method Methods 0.000 description 1
- 238000006731 degradation reaction Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000005315 distribution function Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
- H04N25/611—Correction of chromatic aberration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
- H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
- H04N25/61—Noise processing, e.g. detecting, correcting, reducing or removing noise the noise originating only from the lens unit, e.g. flare, shading, vignetting or "cos4"
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Facsimile Image Signal Circuits (AREA)
- Color Image Communication Systems (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
提供了一种校正图像的色差的方法和设备,在用于图像拾取装置的图像处理设备或显示图像处理设备中使用所述方法和设备。所述色差校正设备包括:色差区域感测单元,分析输入图像的亮度信号,并感测具有色差的区域;颜色梯度计算单元,基于输入图像的颜色分量的梯度之间的差来计算指示色差的程度的第一权重;亮度梯度计算单元,基于输入图像的亮度分量的梯度来计算指示色差的程度的第二权重;色度校正单元,基于通过将第一权重乘以第二权重获得的值来校正在感测的区域中包括的输入图像的像素的色度。
Description
本申请要求于2007年8月23日在韩国知识产权局提交的第10-2007-0084939号韩国专利申请的优先权,该申请完全公开于此以资参考。
技术领域
本发明涉及图像处理,更具体地讲,涉及一种校正图像的色差的方法和设备,所述方法和设备用在用于图像拾取装置的图像处理设备或显示图像处理设备中。
背景技术
通常,当使用相机拍摄图像时,由于透镜的色差导致出现各种问题。具体地讲,被称为色差的图像恶化是一种严重问题。色差是这样一种现象:由于透镜对不同波长的光具有不同的折射率,导致不同波长的光被聚焦在不同位置,所以产生了伪色。当使用高倍放大透镜或便宜的透镜来拍摄图像时,这种色差变得更明显。色差可能仅由透镜的缺陷引起。然而,色差还可能由图像传感器(例如,电荷耦合装置(CCD))和透镜的缺陷的组合引起。
在邻近图像边缘的区域中,突然在亮度上出现显著不同。在该边缘区域中,出现了被称为光晕的图像传感器的缺陷以及透镜的缺陷。通常,光晕引起具有由透镜偏转的非常高色度(例如,紫色条纹)的色差。还可由透镜和图像传感器的特性的组合引起各种色差。
在进行图像处理过程(被称为图像恢复,并在数字自动聚焦技术中使用)之后,边缘区域可具有更严重的色差或颜色伪像(color artifact)。这是因为,图像恢复的程度根据每个波长而变化。即,由于在图像恢复处理之后图像边缘不具有模糊度,所以已经发生的色差变得更明显。
为了减小这种色差,提出了各种方法,例如使用特定玻璃材料制成的透镜或使用专门处理的透镜。然而,当使用这些方法时,增加了制造或处理透镜的成本。因此,难以在除了高性能相机(例如数字单反(DSLR)相机)之外的相机中广泛使用以上方法。
在这方面,使用通过图像处理去除或校正在已经拍摄的图像中产生的色差的技术可能更有效。在第2006-115039号和第2000-299874号日本专利中公开了通过图像处理去除或校正色差的传统方法。
具体地讲,第2006-115039号日本专利公开这样的技术:计算伪色程度(被定义为指示以伪色表示输入图像的中心像素的可能性的参数),并基于邻近中心像素的区域中的像素的值来计算中心像素的插值。伪色程度确定用于处理色度值的每个像素的权重,并使用每个像素的权重和伪色程度来校正色差。然而,所述技术不能用于校正表示在几乎所有边缘中出现的各种颜色的色差。
在第2000-299874号日本专利中公开的校正色差的方法中,在输入图像中指定参考像素,并根据距参考像素的参考位置的距离检测色差的量。然后,创建表示检测的色差的量的三次方程的色差特性曲线,并基于该曲线来校正色差。然而,设计所述方法只校正各种色差中的横向色差。另外,必须对根据距参考位置的距离变化的色差的量创建单独的色差特性曲线。
发明内容
本发明提供了一种有效去除或校正通常在边缘区域中出现的透镜的色差和由光晕引起的色差的方法和设备,所述光晕导致在边缘区域中产生非常强的色度和显著的亮度差异。
然而,本发明的目的不限于这里阐述的一个目的。通过参照下面给出的本发明的详细的描述,本发明的以上和其他目的对本发明所属的领域的普通技术人员而言将变得更清楚。
根据本发明的一方面,提供了一种色差校正设备,所述色差校正设备包括:色差区域感测单元,分析输入图像的亮度信号,并感测具有色差的区域;颜色梯度计算单元,基于输入图像的颜色分量的梯度之间的差来计算指示色差的程度的第一权重;亮度梯度计算单元,基于输入图像的亮度分量的梯度来计算指示色差的程度的第二权重;色度校正单元,基于通过将第一权重乘以第二权重获得的值来校正在感测的区域中包括的输入图像的像素的色度。
根据本发明的另一方面,提供了一种色差校正方法,所述色差校正方法包括:分析输入图像的亮度信号,并感测具有色差的区域;基于输入图像的颜色分量的梯度之间的差来计算指示色差的程度的第一权重;基于输入图像的亮度分量的梯度来计算指示色差的程度的第二权重;基于通过将第一权重乘以第二权重获得的值来校正在感测的区域中包括的输入图像的像素的色度。
附图说明
通过参照附图对本发明的优选实施例的详细描述,本发明的以上和其他特征和优点将变得更清楚,其中:
图1是根据本发明的示例性实施例的色差校正设备的框图;
图2示出根据本发明的示例性实施例的Sobel滤波器;
图3示出根据本发明的示例性实施例的膨胀边缘的方法;
图4示出在颜色之间具有小的梯度的图像的颜色剖面的示例;
图5示出在颜色之间具有大的梯度的图像的颜色剖面的示例;
图6示出每种颜色通道的像素索引;
图7示出表示颜色梯度中的差与第一权重之间的关系的曲线的示例;
图8示出第一权重的分量;
图9示出预定大小的块中的亮度分量;
图10示出预定大小的块中的亮度梯度;
图11示出第二权重的分量;
图12示出表示亮度梯度和第二权重之间的关系的曲线的示例;
图13示出第三权重的分量;
图14将具有色差的图像和对该图像校正之后获得的图像进行比较;
图15示出根据色度分量的高斯分布的示例。
具体实施方式
现在参照附图更全面地描述本发明,本发明的示例性实施例在附图中示出。然而,本发明可以以许多不同的形式被实施,不应该将本发明解释为限于这里阐述的实施例;此外,提供这些实施例以使本公开将是彻底的和完整的,并将本发明的构思完全传达给本领域的普通技术人员。附图中相同的标号表示相同的部件,因此,将省略它们的描述。
以下,将参照附图详细描述本发明。
当使用相机拍摄照片时出现色差。这是一种由于透镜材料对不同波长的光具有不同的折射率导致在图像拾取平面上产生伪色的现象。大致存在三种色差。第一,纵向色差(LCA)表示由在光轴上根据波长变化的焦点位置所引起的渗色现象。第二,横向色差(TCA)表示由于入射光不平行于光轴所以光聚焦在光轴周围的不同位置的现象。即,透镜是LCA和TCA的直接原因。第三,通常由图像传感器的缺陷引起光晕。这是一种色差,所述色差在使用采用高倍放大透镜或便宜透镜的相机拍摄的图像的边缘附近普遍可见,并具有非常强的色度。可由于透镜和图像传感器的问题的组合导致发生光晕。
图1示出根据本发明的示例性实施例的用于有效减小由于各种原因引起的色差的色差校正设备100。参照图1,色差校正设备100包括:图像输入单元110、色差区域感测单元120、亮度梯度计算单元140、颜色梯度计算单元130、色度系数产生单元150、乘法器155、色度校正单元160和图像输出单元170。
图像输入单元110读取形成输入图像的像素的值,并将读取的像素的值划分成亮度信号(亮度分量)和色度信号(色度分量)。例如,如果输入图像包括红色、绿色和蓝色(RGB)信号,则图像输入单元110可将RGB信号转换为被被划分成亮度和色度信号的信号,例如,HSV信号、YUV信号、YCbCr信号或YIQ信号。使用YCbCr信号作为示例来描述本发明。
当输入图像包括RGB信号时,可通过等式(1)来定义YCbCr信号的Y、Cb和Cr分量。
Y=0.299×R+0.578×G+0.114×B
Cb=-0.169×R—0.331×G+0.5×B
Cr=0.5×R—0.418×G+0.082×B ...(1)
色差区域感测单元120通过使用亮度信号来感测色差区域。由于色差通常出现在边缘区域,所以可将感测色差区域理解为感测边缘区域。在本发明中,使用Sobel滤波器作为用于感测边缘区域的算法。参照图2,Sobel滤波器包括3×3的x方向滤波器和3×3的y方向滤波器。将3×3的x方向滤波器和3×3的y方向滤波器中的每一个应用于以特定亮度分量(以下,称为中心亮度分量)为中心的3×3的亮度分量。更具体地讲,将3×3的x方向滤波器和3×3的y方向滤波器中的每一个分量乘以与3×3的x方向滤波器和3×3的y方向滤波器中的每一个的分量相应的3×3亮度分量,并将相乘的结果相加。如果用Sx指示3×3的x方向滤波器的相乘结果的和,并用Sy指示3×3的y方向滤波器的相乘结果的和,则可通过等式(2)来给出将Sobel滤波器应用于中心亮度分量的最终结果S(Sobel滤波器值)。
如果Sobel滤波器值超过预定阈值,则色差区域感测单元120确定中心亮度分量位于输入图像的边缘。然而,色差不总发生在图像的边缘,可能发生在边缘附近。因此,边缘需要被膨胀。
色差区域感测单元120如图3所示膨胀边缘。即,如果特定亮度分量被确定为边缘,则具有预定大小(图3中的3×3)并在其中心具有特定亮度分量的区域中包括的所有亮度分量都被确定为边缘。这种区域被称为具有色差因此需要校正色差的色差区域。
颜色梯度计算单元130基于输入图像的颜色分量之间的梯度差(以下,称为颜色梯度)来计算色差的程度。例如,颜色分量是R、G和B分量。图4和图5是分别示出在颜色之间具有小梯度的图像的颜色剖面(color profile)和在颜色之间具有大梯度的图像的颜色剖面的曲线图。颜色剖面表示沿像素的水平方向像素的每种颜色分量(R、G或和B分量)的大小的变化。
在图4的曲线表示的图像中,在像素索引为0的点的附近(即,在边缘区域40)中的颜色之间的梯度差不显著。然而,在图5的曲线表示的图像中,边缘区域50中的颜色之间的梯度差非常显著。因此,可以理解,色差很可能发生在图5的边缘区域50中。
对于每种颜色,颜色梯度计算单元130读取如下像素的值,所述像素包括在具有预定大小(例如,3×3)并以被色差区域感测单元120确定为包括在色差区域中的特定像素(以下,称为中心像素)为中心的块中。在图6中,中心像素包括R5、G5和B5。例如,中心像素右边的像素包括R6、G6和B6。
对于每种颜色,颜色梯度计算单元130计算中心像素(用作原点)和邻近像素之间的梯度(颜色梯度)。例如,可通过等式(3)来定义如图6所示的使用3×3块大小的颜色梯度TR,n、TG,n和TB,n。
TR,n=|Rn-R5|,TG,n=|Gn-G5|,TB,n=|Bn-B5| ...(3)
其中,n指示1、2...9。根据等式(3),对每种颜色可计算9个颜色梯度。在这种情况下,由于中心像素的颜色梯度是0,所以实际上可只计算8个颜色梯度。
在对每种颜色计算颜色梯度之后,颜色梯度计算单元130计算两种颜色的颜色梯度之间的差。在YCbCr信号中,由于基于G分量计算作为色度信号的Cb和Cr,所以可基于G分量来计算颜色梯度之间的差。
因此,可通过等式(4)来定义基于G分量的颜色梯度之间的差DGB,n和DGR,n。
DGB,n=|TG,n-TB,n|,DGR,n=|TG,n-TR,n|...(4)
使用计算的颜色梯度之间的差DGB,n和DGR,n,颜色梯度计算单元130计算第一权重WGB和WGR。根据差DGB,n来获得Cb分量的第一权重WGB,并根据差DGR,n来获得Cr分量的第一权重WGR。可预见,色差将随第一权重WGB和WGR增加而变得更明显。
第一权重WGB和WGR可随颜色梯度之间的差DGB,n和DGR,n增加而增加。例如,可根据差DGB,n和DGR,n选择的第一权重WGB和WGR的曲线可如图7所示。色差校正设备100的总性能可根据该曲线而变化。因此,需要考虑用于拍摄输入图像的照片的透镜的特性来选择最佳曲线。曲线大致具有单调递增函数的形式。在该曲线中,如果颜色梯度之间的差DGB,n和DGR,n超过预定值,则第一权重WGB和WGR都被设置为1。这是因为,在没有色差的图像的边缘,颜色梯度之间的差DGB,n和DGR,n不明显。
关于中心像素,如图8所示,可通过3×3的块(即,9个值)来表示第一权重WGB和WGR中的每一个。由于WGB,5和WGR,5是0,所以不需要计算。
再参照图1,亮度梯度计算单元140使用输入图像的亮度分量的梯度(以下,称为亮度梯度)来计算色差的程度。
亮度梯度计算单元140读取如下像素的值,所述像素包括在具有预定大小(例如,3×3)并以被色差区域感测单元120确定为包括在色差区域中的中心像素为中心的块中。在图9的3×3的块中,Y5指示中心像素的亮度分量(中心亮度分量),Y6指示中心像素右边的像素的亮度分量。
可如图10表示图9的3×3的块中的每个亮度分量的亮度梯度Tn,其中,在所述3×3的块的中心的中心像素的亮度分量为Y5。亮度梯度Tn满足下面的等式(5)。
Tn=|Yn-Y5| ...(5)
其中,n指示1、2...9。在如上所述计算亮度梯度Tn之后,亮度梯度计算单元140计算与亮度梯度Tn相应的第二权重WY。因此,如图11所示,可通过3×3的块(即,9个值)来表示第二权重WY。由于WY,5是0,所以不需要计算。
为了有效地校正各种色差,重要的是适当地设置亮度梯度Tn和第二权重WY之间的关系。这是因为,较大的亮度梯度不是必然转化为较大程度的色差。
在本发明中,考虑到各种色差,使用如图12所示的曲线来设置亮度梯度Tn和第二权重WY之间的关系。可将该曲线大体划分成部分a至部分c。
应用于部分a(第一单调递增部分)的假设是,与中心像素类似的像素几乎不可能具有色差,与中心像素显著不同的像素很有可能具有色差。因此,在部分a,第二权重WY随亮度梯度Tn增加而增加。可以理解,部分a是通常发生LCA或TCA的部分。通常,LCA或TCA不会过度地将亮度梯度Tn增加到预定阈值之上。
因此,如果亮度梯度Tn超过预定阈值,则这可能由图像的像素之间的自然亮度差引起,而不是由色差引起。因此,在部分b(单调递减部分),第二权重WY随亮度梯度Tn增加而减小。
在诸如光晕或紫色条纹的色差情况下,在具有色差的区域和不具有色差的正常区域之间存在非常大的亮度梯度。在基于256灰阶的具有大于大约100的亮度梯度的区域中出现这种色差。考虑到这种具有非常大的亮度梯度的色差,需要图12的部分c(第二单调递增部分)中的曲线图案。在部分c中,第二权重WY通常随亮度梯度Tn增加而增加。如果亮度梯度Tn达到特定水平,则第二权重WY饱和,因此之后第二权重WY具有恒定值。
如上所述,用于设置亮度梯度Tn和第二权重WY之间的关系的曲线可包括第一单调递增函数、单调递减函数和第二单调递增函数。
尽管在根据图12的曲线图案(具体地讲,部分c)获得的第二权重WY和实际色差之间存在随机可能性,但还存在可将在图像中不具有色差的一些区域确定为具有色差的可能性。例如,尽管在具有高对比度的图像的边缘部分中实际上并不存在色差,但由于亮度梯度Tn大导致第二权重WY可能增加。
当将由颜色梯度计算单元130计算的第一权重WGB和WGR乘以第二权重WY时,可去除或减小发生这种错误的可能性。由于基于颜色梯度之间的差DGB,n和DGR,n来计算第一权重WGB和WGR,所以第一权重WGB和WGR表示色差的程度。因此,如果将第一权重WGB和WGR乘以第二权重WY,则可校正第二权重WY的误差。例如,在具有高对比度的正常图像中,第一权重WGB和WGR可具有接近0的值。因此,即使第二权重WY接近1,在将第一权重WGB和WGR乘以第二权重WY之后获得的值也接近0。
如等式(6)所示,乘法器155将第一权重WGB和WGR乘以第二权重WY,并产生第三权重WCb和WCr,所述第三权重WCb和WCr确定色差将被校正到的程度。在等式(6)中,WCb表示用于校正YCbCr信号的Cb信号的权重,WCr表示用于校正YCbCr信号的Cr信号的权重。
WCb=WGB×WY
WCr=WGR×WY ...(6)
由于第一权重WGB和WGR和第二权重WY具有相同的块大小(例如,3×3),所以如图13所示,第三权重WCb和WCr也具有该块大小。由于WCb,5和WCr,5为0,所以不需要计算。
使用从乘法器155获得的第三权重WCb和WCr,色度校正单元160校正被色差区域感测单元120确定为包括在色差区域中的像素的色度分量(Cb和Cr分量)。具体地讲,参照图13,色度校正单元160将3×3的第三权重WCb和WCr中的每一个应用于以将被校正的色度分量(中心色度分量Cb5或Cr5)为中心的3×3的色度分量。即,色度校正单元160通过如等式(7)所示使用第三权重WCb或WCr计算色度分量的加权后的均值来校正中心色度分量Cb5或Cr5。在等式(7)中,Cb5’和Cr5’分别指示校正后的中心色度分量。
如上所述,使用关于与特定像素邻近的像素(例如,8个像素)的信息来校正所述特定像素的色度分量。
然而,以上校正色度的方法不足以校正具有在图像的大面积中明显的强色度的特征的特殊色差。考虑到该事实,本发明提出了另外使用色度建模函数校正中心像素的色度和与中心像素邻近的像素的色度的方法,所述色度建模函数基于透镜或图像传感器的光学特性。所述方法使用邻近像素的色度来增加权重,从而具有强色度的色差区域可变为无色,或具有接近邻近像素的色度的色度。
图14将具有色差的图像61和在使用以上方法对图像61进行了校正之后获得的图像63进行比较。尽管在校正之前图像61的颜色剖面62中的B分量和R分量之间具有大的差,但在对图像61校正之后获得的图像63的颜色剖面64中减小了B分量和R分量之间的差。即,去除了大面积中明显的色差。
参照图2,色度系数产生单元150获得基于透镜或图像传感器的光学特性(参数)的色度建模函数,并把将被校正的像素和与该像素邻近的像素的色度应用于所述色度建模函数来产生色度系数。所述色度建模函数是指示透镜在哪些色度值下很可能引起色差的概率密度函数。
由于色度建模函数基于统计学,所以该色度建模函数可遵循例如高斯分布。在高斯分布中,由透镜的特性来确定均值和标准差。由于透镜可对Cb和Cr分量中的每一个具有不同的特性,所以还可对Cb和Cr分量中的每一个获得高斯分布。例如,参照图15,如果根据透镜的特性Cb分量遵循高斯分布71,则Cr分量可遵循另一高斯分布72或73。在图15中,Gauss_LUT指示高斯分布函数或高斯查找表。
如果将3×3的色度分量中的每一个带入Gauss_LUT,则可对Cb和Cr分量中的每一个获得共9个值。色度系数产生单元150可通过将这9个值乘以第一权重WGB和WGR中的每一个来产生色度系数。可通过等式(8)来定义用于获得色度系数αCb和αCr的更具体的关系式。在等式8中,β是用于控制色度系数的大小的常数。
αCb=β×WGB×Gauss_LUT(Cb)
αCr=β×WGR×Gauss_LUT(Cr)...(8)
在等式(8)中,由于WGB、WGR、Cb和Cr中的每一个都包括9个值,所以色度系数αCb和αCr中的每一个都具有9个值,即3×3的块大小。另外,将色度系数αCb和αCr中的每一个加到等式(7)的分母,从而提供了另外的色度校正(减小)效果。
色度校正单元160可另外将色度系数αCb和αCr应用于等式(7)并获得由等式(9)定义的校正后的色度分量。
如上所述,使用关于与特定像素(预定大小的块中的中心像素)邻近的像素(例如,8个像素)的信息来校正所述特定像素的色度分量。
图像输出单元170原样输出被色差区域感测单元120确定为没有包括在色差区域中的色度分量,并将被确定为包括在色差区域中的色度分量输出为由色度校正单元160校正的值。在这种情况下,图像输出单元170可将被划分成亮度信号和色度信号的信号转换为可在显示屏幕上显示的RGB信号。
以上参照图2至图6描述的每个组件可被实现为软件组件(例如,在存储器的预定区域中执行的任务、类、子程序、进程、对象、执行线程或程序)或硬件组件(例如,现场可编程门阵列(FPGA)或专用集成电路(ASIC))。另外,所述组件可包括软件组件和硬件组件的组合。所述组件可驻留在计算机可读存储介质上,或者可分布于多个计算机。
根据本发明的色差校正技术可有效去除各种色差(例如,LCA、TCA和光晕)。
尽管本发明已参照其示例性的实施例被具体描述和显示的,但是本领域的普通技术人员应该理解,在不脱离由权利要求限定的本发明的精神和范围的情况下,可以对其进行形式和细节的各种改变。所述示例性的实施例应该被认为是仅为描述意义上的,而不是为了限制的目的。
Claims (20)
1.一种色差校正设备,包括:
色差区域感测单元,分析输入图像的亮度信号,并感测具有色差的区域;
颜色梯度计算单元,基于输入图像的颜色分量的梯度之间的差来计算指示色差的程度的第一权重;
亮度梯度计算单元,基于输入图像的亮度分量的梯度来计算指示色差的程度的第二权重;
色度校正单元,基于通过将第一权重乘以第二权重获得的值来校正在感测的区域中包括的输入图像的像素的色度。
2.如权利要求1所述的设备,还包括:色度系数产生单元,获得基于透镜或图像传感器的光学特性的色度建模函数,并通过将色度分量应用于色度建模函数的结果乘以第一权重来产生色度系数,其中,色度校正单元使用色度系数来另外校正输入图像的像素的色度。
3.如权利要求2所述的设备,其中,色度建模函数对于每个色度分量具有不同的高斯分布。
4.如权利要求2所述的设备,其中,色度校正单元将输入图像的像素的色度校正为随色度系数的增加而变得非常低。
5.如权利要求1所述的设备,其中,如果将Sobel滤波器应用于输入图像的像素的结果超过预定阈值,则色差区域感测单元确定该像素具有色差。
6.如权利要求5所述的设备,其中,如果预定大小的块中包括的任何一个像素具有色差,则色差区域感测单元确定该块中的所有像素都具有色差。
7.如权利要求1所述的设备,其中,颜色梯度计算单元通过以下操作来计算第一权重:针对每个颜色分量计算中心像素和与该中心像素邻近的每个像素之间的颜色梯度,计算所计算的梯度之间的差,并将计算的差应用于单调递增函数。
8.如权利要求1所述的设备,其中,亮度梯度计算单元通过计算输入图像的像素的亮度分量和与该像素邻近的每个像素的亮度分量之间的梯度,并将计算的梯度应用于预定函数来计算第二权重。
9.如权利要求8所述的设备,其中,所述预定函数包括第一单调递增部分、单调递减部分和第二单调递增部分。
10.如权利要求1所述的设备,其中,色度校正单元通过使用相乘之后获得的值作为权重来计算感测的区域中包括的像素的色度和与该像素邻近的像素的色度的加权均值,并基于该加权均值来校正感测的区域中包括的像素的色度。
11.一种色差校正方法,包括:
分析输入图像的亮度信号,并感测具有色差的区域;
基于输入图像的颜色分量的梯度之间的差来计算指示色差的程度的第一权重;
基于输入图像的亮度分量的梯度来计算指示色差的程度的第二权重;
基于通过将第一权重乘以第二权重获得的值来校正在感测的区域中包括的输入图像的像素的色度。
12.如权利要求11所述的方法,还包括:
获得基于透镜或图像传感器的光学特性的色度建模函数;
通过将色度分量应用于色度建模函数的结果乘以第一权重来产生色度系数,
其中,校正色度的步骤包括:使用色度系数来另外校正输入图像的像素的色度。
13.如权利要求12所述的方法,其中,色度建模函数对于每个色度分量具有不同的高斯分布。
14.如权利要求12所述的方法,其中,校正色度的步骤还包括:将输入图像的像素的色度校正为随色度系数的增加而变得非常低。
15.如权利要求11所述的方法,其中,感测具有色差的区域的步骤包括:如果将Sobel滤波器应用于输入图像的像素的结果超过预定阈值,则确定该像素具有色差。
16.如权利要求15所述的方法,其中,感测具有色差的区域的步骤还包括:如果预定大小的块中包括的任何一个像素具有色差,则确定该块中的所有像素都具有色差。
17.如权利要求11所述的方法,其中,计算第一权重的步骤包括:
针对每个颜色分量计算中心像素和与该中心像素邻近的每个像素之间的梯度;
计算所计算的梯度之间的差;
将计算的差应用于单调递增函数。
18.如权利要求11所述的方法,其中,计算第二权重的步骤包括:
计算输入图像的像素的亮度分量和与该像素邻近的每个像素的亮度分量之间的梯度;
将计算的梯度应用于预定函数。
19.如权利要求18所述的方法,其中,所述预定函数包括第一单调递增部分、单调递减部分和第二单调递增部分。
20.如权利要求11所述的方法,其中,校正色度的步骤包括:
使用相乘之后获得的值作为权重来计算感测的区域中包括的像素的色度和与该像素邻近的像素的色度的加权均值;
基于该加权均值来校正感测的区域中包括的像素的色度。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070084939A KR101340518B1 (ko) | 2007-08-23 | 2007-08-23 | 영상의 색수차 보정 방법 및 장치 |
KR10-2007-0084939 | 2007-08-23 | ||
KR1020070084939 | 2007-08-23 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101374191A true CN101374191A (zh) | 2009-02-25 |
CN101374191B CN101374191B (zh) | 2012-07-18 |
Family
ID=40382214
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008102126085A Active CN101374191B (zh) | 2007-08-23 | 2008-08-21 | 校正图像的色差的方法和设备 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8150154B2 (zh) |
JP (1) | JP5314357B2 (zh) |
KR (1) | KR101340518B1 (zh) |
CN (1) | CN101374191B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102194218A (zh) * | 2010-03-10 | 2011-09-21 | 三星电子株式会社 | 降低图像色彩噪声的方法和装置 |
CN102215340A (zh) * | 2010-04-07 | 2011-10-12 | 索尼公司 | 成像设备和成像信号校正方法 |
CN102445278A (zh) * | 2011-09-24 | 2012-05-09 | 明基材料有限公司 | 三维微位相差膜的检测方法及*** |
CN103379289A (zh) * | 2012-04-18 | 2013-10-30 | 歌乐牌株式会社 | 摄像装置 |
CN104486607A (zh) * | 2014-12-31 | 2015-04-01 | 上海富瀚微电子股份有限公司 | 一种图像色度降噪的方法及装置 |
CN104601922A (zh) * | 2013-11-01 | 2015-05-06 | 佳能企业股份有限公司 | 影像处理方法、电子装置、电子装置可读取的储存媒体与应用于电子装置的程序 |
CN104767982A (zh) * | 2014-01-03 | 2015-07-08 | 佳能企业股份有限公司 | 一种影像补正参数的设定方法与电子装置 |
US9582898B2 (en) | 2013-12-31 | 2017-02-28 | Ability Enterprise Co., Ltd. | Electronic device for chromatic aberration compensation |
CN108537763A (zh) * | 2017-03-01 | 2018-09-14 | 深圳开阳电子股份有限公司 | 一种图像颜色校正装置 |
CN108615224A (zh) * | 2016-12-13 | 2018-10-02 | 三星电机株式会社 | 图像校正设备和方法以及非易失性计算机可读存储介质 |
CN109427281A (zh) * | 2017-09-05 | 2019-03-05 | 晶门科技(中国)有限公司 | 用于补偿显示面板中的边缘增强的感知偏差的方法和设备 |
CN113379629A (zh) * | 2021-06-08 | 2021-09-10 | 深圳思谋信息科技有限公司 | 卫星图像去噪方法、装置、计算机设备和存储介质 |
CN113905183A (zh) * | 2021-08-25 | 2022-01-07 | 珠海全志科技股份有限公司 | 宽动态范围图像的色差校正方法及装置 |
Families Citing this family (30)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4992698B2 (ja) * | 2007-12-17 | 2012-08-08 | ソニー株式会社 | 色収差補正装置、撮像装置、色収差算出方法および色収差算出プログラム |
KR101460610B1 (ko) * | 2008-07-30 | 2014-11-13 | 삼성전자주식회사 | 색수차 제거 방법 및 장치 |
US8237823B2 (en) | 2008-11-06 | 2012-08-07 | Samsung Electronics Co., Ltd. | Method and apparatus for canceling chromatic aberration |
JP5486273B2 (ja) * | 2008-12-26 | 2014-05-07 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP2010268426A (ja) * | 2009-04-15 | 2010-11-25 | Canon Inc | 画像処理装置、画像処理方法およびプログラム |
JP5230564B2 (ja) * | 2009-08-14 | 2013-07-10 | キヤノン株式会社 | レンズ装置および撮影システム |
TW201110057A (en) * | 2009-09-01 | 2011-03-16 | Novatek Microelectronics Corp | Image color processing device and method |
JP5589446B2 (ja) * | 2009-09-18 | 2014-09-17 | ソニー株式会社 | 画像処理装置、撮像装置、および画像処理方法、並びにプログラム |
JP2011215395A (ja) * | 2010-03-31 | 2011-10-27 | Canon Inc | 収差補正機能を有する撮像装置及び撮像装置における収差補正方法 |
JP5506528B2 (ja) * | 2010-05-12 | 2014-05-28 | キヤノン株式会社 | 画像処理装置及び画像処理方法及びプログラム |
DE112010005744B4 (de) | 2010-07-16 | 2021-09-09 | Robert Bosch Gmbh | Verfahren für die Detektion und Korrektur einer lateralen chromatischen Aberration |
DE112010005743B4 (de) | 2010-07-16 | 2021-09-02 | Robert Bosch Gmbh | Verfahren für die Detektion und Korrektur von lateraler chromatischer Aberration |
KR101329025B1 (ko) * | 2010-11-12 | 2013-11-14 | 주식회사 고영테크놀러지 | 색수차 보상방법, 이를 이용한 3차원 형상 측정방법 및 측정장치 |
US9979941B2 (en) * | 2011-01-14 | 2018-05-22 | Sony Corporation | Imaging system using a lens unit with longitudinal chromatic aberrations and method of operating |
KR101228333B1 (ko) * | 2011-03-31 | 2013-01-31 | 삼성테크윈 주식회사 | 퍼플 프린징 보정 장치 |
JP5907590B2 (ja) * | 2011-06-10 | 2016-04-26 | キヤノン株式会社 | 画像処理装置、画像処理方法およびプログラム |
JP5898428B2 (ja) | 2011-08-09 | 2016-04-06 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
JP5818568B2 (ja) * | 2011-08-09 | 2015-11-18 | キヤノン株式会社 | 画像処理装置及びその制御方法 |
TW201336319A (zh) * | 2012-02-23 | 2013-09-01 | Novatek Microelectronics Corp | 消除影像色彩偏差的方法與裝置 |
CN103312937B (zh) * | 2012-03-08 | 2015-12-02 | 联咏科技股份有限公司 | 消除图像色彩偏差的方法与装置 |
JP5274697B2 (ja) * | 2012-07-13 | 2013-08-28 | キヤノン株式会社 | 画像処理装置及び画像処理方法 |
JP5942755B2 (ja) * | 2012-09-28 | 2016-06-29 | 株式会社ソシオネクスト | 画像処理回路、画像処理方法及び撮像装置 |
KR102009185B1 (ko) | 2013-01-10 | 2019-08-09 | 삼성전자 주식회사 | 컬러 프린지 제거 방법 |
CN103514585B (zh) * | 2013-09-12 | 2016-03-02 | 深圳市华星光电技术有限公司 | 一种图像处理方法 |
JP6375138B2 (ja) * | 2014-04-25 | 2018-08-15 | 株式会社朋栄 | パープルフリンジ除去処理方法及びその処理を遂行するパープルフリンジ除去処理装置 |
US10123684B2 (en) * | 2014-12-18 | 2018-11-13 | Endochoice, Inc. | System and method for processing video images generated by a multiple viewing elements endoscope |
JP6155349B2 (ja) | 2015-02-26 | 2017-06-28 | ノキア テクノロジーズ オーユー | デコンボリューション画像において色収差を減じる方法、装置及びコンピュータプログラム製品 |
JP2016200629A (ja) | 2015-04-07 | 2016-12-01 | キヤノン株式会社 | 撮像装置、その制御方法及びプログラム |
CN112950484B (zh) * | 2019-12-11 | 2023-06-16 | 鸣医(上海)生物科技有限公司 | 一种对摄影影像进行颜色污染祛除的方法 |
CN112444212B (zh) * | 2020-12-17 | 2022-08-02 | 北京微链道爱科技有限公司 | 一种由色差引起的结构光三维测量误差的补偿方法 |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3358252B2 (ja) * | 1993-10-18 | 2002-12-16 | ソニー株式会社 | 色差信号処理装置 |
JP2769673B2 (ja) * | 1993-11-18 | 1998-06-25 | 大日本スクリーン製造株式会社 | ビネット画像変換装置 |
JP3503372B2 (ja) * | 1996-11-26 | 2004-03-02 | ミノルタ株式会社 | 画素補間装置及びその画素補間方法 |
JP2000299874A (ja) | 1999-04-12 | 2000-10-24 | Sony Corp | 信号処理装置及び方法並びに撮像装置及び方法 |
US6701009B1 (en) * | 2000-06-06 | 2004-03-02 | Sharp Laboratories Of America, Inc. | Method of separated color foreground and background pixel improvement |
US7477781B1 (en) * | 2002-10-10 | 2009-01-13 | Dalsa Corporation | Method and apparatus for adaptive pixel correction of multi-color matrix |
JP3747909B2 (ja) | 2002-12-24 | 2006-02-22 | ソニー株式会社 | 画素欠陥検出補正装置及び画素欠陥検出補正方法 |
US20070292022A1 (en) * | 2003-01-16 | 2007-12-20 | Andreas Nilsson | Weighted gradient based and color corrected interpolation |
EP1439715A1 (en) * | 2003-01-16 | 2004-07-21 | Dialog Semiconductor GmbH | Weighted gradient based colour interpolation for colour filter array |
EP1641283B1 (en) * | 2003-06-12 | 2019-01-09 | Nikon Corporation | Image processing method, image processing program, image processor |
JP4042736B2 (ja) | 2004-02-19 | 2008-02-06 | ソニー株式会社 | 画像処理装置及び画像処理方法 |
EP1746846B1 (en) | 2004-04-12 | 2019-03-20 | Nikon Corporation | Image processing device having color shift-correcting function, image processing program, and electronic camera |
JP4539278B2 (ja) | 2004-10-13 | 2010-09-08 | ソニー株式会社 | 画像処理装置、および画像処理方法、並びにコンピュータ・プログラム |
JP4679174B2 (ja) | 2005-02-25 | 2011-04-27 | パナソニック株式会社 | 画像処理装置およびこの画像処理装置を備えたデジタルカメラ |
JP4789140B2 (ja) * | 2005-05-19 | 2011-10-12 | 株式会社メガチップス | 画像処理装置 |
KR100818447B1 (ko) * | 2006-09-22 | 2008-04-01 | 삼성전기주식회사 | 컬러 필터를 사용하여 검출된 영상의 컬러 보간 방법 |
US8144984B2 (en) * | 2006-12-08 | 2012-03-27 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and program for color fringing estimation and compensation |
US7792357B2 (en) * | 2007-05-30 | 2010-09-07 | Microsoft Corporation | Chromatic aberration correction |
-
2007
- 2007-08-23 KR KR1020070084939A patent/KR101340518B1/ko active IP Right Grant
-
2008
- 2008-02-21 US US12/071,511 patent/US8150154B2/en active Active
- 2008-08-21 CN CN2008102126085A patent/CN101374191B/zh active Active
- 2008-08-22 JP JP2008214544A patent/JP5314357B2/ja active Active
Cited By (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102194218A (zh) * | 2010-03-10 | 2011-09-21 | 三星电子株式会社 | 降低图像色彩噪声的方法和装置 |
CN102194218B (zh) * | 2010-03-10 | 2016-06-22 | 三星电子株式会社 | 降低图像色彩噪声的方法和装置 |
CN102215340A (zh) * | 2010-04-07 | 2011-10-12 | 索尼公司 | 成像设备和成像信号校正方法 |
CN102445278B (zh) * | 2011-09-24 | 2013-10-30 | 明基材料有限公司 | 三维微位相差膜的检测方法及*** |
CN102445278A (zh) * | 2011-09-24 | 2012-05-09 | 明基材料有限公司 | 三维微位相差膜的检测方法及*** |
CN103379289A (zh) * | 2012-04-18 | 2013-10-30 | 歌乐牌株式会社 | 摄像装置 |
CN104601922B (zh) * | 2013-11-01 | 2018-04-17 | 佳能企业股份有限公司 | 影像处理方法、电子装置、电子装置可读取的储存媒体与应用于电子装置的程序 |
CN104601922A (zh) * | 2013-11-01 | 2015-05-06 | 佳能企业股份有限公司 | 影像处理方法、电子装置、电子装置可读取的储存媒体与应用于电子装置的程序 |
US9582898B2 (en) | 2013-12-31 | 2017-02-28 | Ability Enterprise Co., Ltd. | Electronic device for chromatic aberration compensation |
CN104767982A (zh) * | 2014-01-03 | 2015-07-08 | 佳能企业股份有限公司 | 一种影像补正参数的设定方法与电子装置 |
CN104486607A (zh) * | 2014-12-31 | 2015-04-01 | 上海富瀚微电子股份有限公司 | 一种图像色度降噪的方法及装置 |
CN108615224A (zh) * | 2016-12-13 | 2018-10-02 | 三星电机株式会社 | 图像校正设备和方法以及非易失性计算机可读存储介质 |
CN108537763A (zh) * | 2017-03-01 | 2018-09-14 | 深圳开阳电子股份有限公司 | 一种图像颜色校正装置 |
CN109427281A (zh) * | 2017-09-05 | 2019-03-05 | 晶门科技(中国)有限公司 | 用于补偿显示面板中的边缘增强的感知偏差的方法和设备 |
CN109427281B (zh) * | 2017-09-05 | 2022-05-17 | 晶门科技(中国)有限公司 | 用于补偿显示面板中的边缘增强的感知偏差的方法和设备 |
CN113379629A (zh) * | 2021-06-08 | 2021-09-10 | 深圳思谋信息科技有限公司 | 卫星图像去噪方法、装置、计算机设备和存储介质 |
CN113905183A (zh) * | 2021-08-25 | 2022-01-07 | 珠海全志科技股份有限公司 | 宽动态范围图像的色差校正方法及装置 |
CN113905183B (zh) * | 2021-08-25 | 2024-04-16 | 珠海全志科技股份有限公司 | 宽动态范围图像的色差校正方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
JP5314357B2 (ja) | 2013-10-16 |
KR20090020290A (ko) | 2009-02-26 |
US20090052769A1 (en) | 2009-02-26 |
JP2009055610A (ja) | 2009-03-12 |
KR101340518B1 (ko) | 2013-12-11 |
US8150154B2 (en) | 2012-04-03 |
CN101374191B (zh) | 2012-07-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101374191B (zh) | 校正图像的色差的方法和设备 | |
US8823843B2 (en) | Image processing device, image capturing device, image processing method, and program for compensating for a defective pixel in an imaging device | |
JP4395789B2 (ja) | 画像処理装置、撮像装置、画像処理方法およびプログラム | |
US8098294B2 (en) | Image processing apparatus, image pickup apparatus, control method for image processing apparatus, and storage medium storing control program therefor | |
US20150036927A1 (en) | Apparatus and method of compensating chromatic aberration of image | |
JP5918915B2 (ja) | カラーフィルタを有するセンサを用いて、改善されたカラー画像を作成するための方法およびデバイス | |
JP5840008B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6530751B2 (ja) | 画像処理装置、撮像装置、情報処理装置、画像処理方法およびプログラム | |
US7148924B2 (en) | Image processing method, image processing program, image processing apparatus, and digital still camera using the image processing apparatus | |
US7301573B2 (en) | Apparatus for and method of edge enhancement in image processing | |
CN111161188B (zh) | 降低图像色彩噪声的方法、计算机装置及可读存储介质 | |
JP2011205477A (ja) | 画像処理装置および方法,ならびに画像処理プログラム | |
JP5899894B2 (ja) | 撮像装置、画像処理装置、画像処理プログラムおよび画像処理方法 | |
KR101854432B1 (ko) | 역광 프레임을 검출하고, 보정하는 방법 및 장치 | |
CN104869370B (zh) | 图像处理设备和图像处理方法 | |
JP5378282B2 (ja) | パープルフリンジ補正装置およびその制御方法,ならびにパープルフリンジを補正するためのプログラム | |
JP5614256B2 (ja) | 撮像装置、画像処理装置および撮像方法 | |
JP5103580B2 (ja) | 画像処理装置およびデジタルカメラ | |
KR101233986B1 (ko) | 퍼플 프린징 보정 장치 및 방법 | |
Lluis-Gomez et al. | Chromatic aberration correction in RAW domain for image quality enhancement in image sensor processors | |
WO2020240912A1 (ja) | 画像処理方法、画像処理装置およびプログラム | |
CN115908172A (zh) | 一种色差校正方法以及相关装置 | |
Kang et al. | Chromatic aberration reduction through optical feature modeling | |
JP5267277B2 (ja) | レンジ補正プログラム、レンジ補正方法及びレンジ補正装置 | |
JP2002218484A (ja) | 画像補間装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |