CN101385359A - 摄像装置、图像处理装置、图像处理方法、图像处理方法的程序以及记录其的记录介质 - Google Patents

摄像装置、图像处理装置、图像处理方法、图像处理方法的程序以及记录其的记录介质 Download PDF

Info

Publication number
CN101385359A
CN101385359A CNA2007800054989A CN200780005498A CN101385359A CN 101385359 A CN101385359 A CN 101385359A CN A2007800054989 A CNA2007800054989 A CN A2007800054989A CN 200780005498 A CN200780005498 A CN 200780005498A CN 101385359 A CN101385359 A CN 101385359A
Authority
CN
China
Prior art keywords
pixel
pixel value
denoising
noise
processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007800054989A
Other languages
English (en)
Other versions
CN101385359B (zh
Inventor
松下伸行
中岛健
山田未希子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN101385359A publication Critical patent/CN101385359A/zh
Application granted granted Critical
Publication of CN101385359B publication Critical patent/CN101385359B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/12—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with one sensor only
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2209/00—Details of colour television systems
    • H04N2209/04—Picture signal generators
    • H04N2209/041—Picture signal generators using solid-state devices
    • H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
    • H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
    • H04N2209/046—Colour interpolation to calculate the missing colour values

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Color Television Image Signal Generators (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Color Image Communication Systems (AREA)

Abstract

本发明提供了可以有效地避免画质劣化且可除去包括在RAW数据中的颜色噪声的摄像装置、图像处理装置、图像处理方法、图像处理方法的程序以及记录图像处理方法的程序的记录介质。在本发明中，通过在基于RAW数据的马赛克图像上依次设定注目像素，并将其变换成以在各注目像素中具有相同颜色信号成分的处理基准的像素值为基准的去噪用像素值，从上述去噪用像素值中除去噪声，把除去噪声后的上述去噪用像素值变换为原来的像素值，从而可以只除去颜色噪声而不对亮度信号赋予影响。

Description

摄像装置、图像处理装置、图像处理方法、图像处理方法的程序以及记录其的记录介质
技术领域
本发明涉及摄像装置、图像处理装置、图像处理方法、图像处理方法的程序以及记录图像处理方法的程序的记录介质，可以适用于例如数码相机。在本发明中，将各注目像素的像素值变换为以在各注目像素中具有相同颜色信号成分的处理基准像素值为基准的去噪用像素值并除去噪声，然后通过反向变换成原来的像素值，从而可以有效地避免画质的劣化，并去除在RAW数据包括的颜色噪声。
背景技术
以往，在数码相机中，对以摄像元件的像素阵列依次得到的RAW数据进行去马赛克处理并生成全色图像，然后变换成亮度信号、色差信号的图像数据并记录于记录介质中。公知有以下技术:通过将这样的彩色图像的噪声被分类为作为亮度信号成分的噪声的亮度噪声、和作为除去亮度信号成分的颜色信号成分的噪声的颜色噪声，通过除去颜色噪声，从而可以进一步提高画质。
关于数码相机，在日本特开2005-311455公报中公开有以下方法:在降低噪声的处理中，选择适当的***像素，并使用该选择的***像素进行减低噪声的处理，从而可以在RAW数据阶段高效率地除去噪声。
此外，在日本特开2004-221838公报中公开有以下方法:采用沿边缘延长方向的规定范围的像素值，对注目像素的像素值进行内插运算处理，从而在去马赛克处理等中，高精度地再现边缘。
因此，当在RAW数据阶段去除颜色噪声时，存在以下问题:影响将直至亮度信号成分，各颜色信号的亮度值也发生变化。其结果是，存在以下情况:通过错误的颜色表示边缘部分等，且画质显著劣化。
作为解决该问题的一个方法，可以考虑在亮度信号、色差信号的阶段除去噪声。根据该方法，考虑可以在不对亮度信号赋予影响的情况下去除颜色噪声。
但是，在这种方法中，是在噪声直接混入的状态下进行去马赛克处理，在噪声混入多的情况下，存在对去马赛克处理赋予影响的问题。具体而言，存在以下情况:通过例如在日本特开2004-221838公报中公开的方法，在去马赛克处理等中再现边缘的情况下，通过噪声错误地再现边缘，并以错误的颜色表示边缘部分等，因此发生颜色噪声，画质显著劣化。并且，也存在以下问题:在亮度信号及色差信号阶段，由于从RAW数据开始的一系列的处理，噪声的特性发生复杂的变化，其结果是，无法将颜色噪声去除干净。另外，由于信号处理电路等结构上的限制，存在无法设置噪声去除电路的结构的情况，在这种情况下，存在无法适用的问题。
发明内容
本发明鉴于上述问题，目的在于提供可有效地避免画质劣化且可除去包含在RAW数据中的颜色噪声的摄像装置、图像处理装置、图像处理方法、图像处理方法的程序以及记录图像处理方法的程序的记录介质。
为了解决上述问题，本发明应用于摄像装置，其摄像部，用于输出RAW数据；变换部，在基于上述RAW数据的马赛克图像上依次设定注目像素，并将上述注目像素的像素值变换成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；噪声除去部，用于从上述去噪用像素值中除去噪声；反向变换部，通过与上述变换部相反的处理，把在上述噪声除去部中除去噪声后的上述去噪用像素值变换成原来的像素值；以及去马赛克部，对基于在上述反向变换部中处理后的像素值的马赛克图像进行去马赛克处理，并生成全色图像数据。
此外，本发明适用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声的图像处理装置，其包括:变换部，在基于上述RAW数据的马赛克图像上依次设定注目像素，并将上述注目像素的像素值变换成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；噪声除去部，用于从上述去噪用像素值中除去噪声；以及反向变换部，通过与上述变换部相反的处理，把在上述噪声除去部中除去噪声后的上述去噪用像素值变换成原来的像素值。
并且，本发明适用于用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声的图像处理方法，其包括:变换步骤，在基于上述RAW数据的马赛克图像上依次设定注目像素，并将上述注目像素的像素值变换成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；噪声除去步骤，用于从上述去噪用像素值中除去噪声；以及反向变换步骤，通过与上述变换步骤相反的处理，把在上述噪声除去步骤中除去噪声后的上述去噪用像素值变换成原来的像素值。
另外，本发明适用于图像处理方法的程序，其中，上述图像处理方法用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声，上述图像处理方法包括:变换步骤，在基于上述RAW数据的马赛克图像上依次设定注目像素，并将上述注目像素的像素值变换成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；噪声除去步骤，用于从上述去噪用像素值中除去噪声；以及反向变换步骤，通过与上述变换步骤相反的处理，把在上述噪声除去步骤中除去噪声后的上述去噪用像素值变换成原来的像素值。
并且，本发明适用于记录介质，记录用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声的图像处理方法的程序，其中，上述图像处理方法的程序包括:变换步骤，在基于上述RAW数据的马赛克图像上依次设定注目像素，并将上述注目像素的像素值变换成去噪用像素值，其中，上述去噪用像素值以在上述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；噪声除去步骤，用于从上述去噪用像素值中除去噪声；以及反向变换步骤，通过与上述变换步骤相反的处理，把在上述噪声除去步骤中除去噪声后的上述去噪用像素值变换成原来的像素值。
根据本发明的构成，由于在以在各注目像素中具有相同的颜色信号成分的处理基准的像素值作为基准的去噪用像素值中除去噪声，所以可以充分降低对亮度信号的影响并抑制颜色噪声。因此，可以有效地回避画质的劣化并可除去包含在RAW数据中的颜色噪声。
根据本发明，可以有效地回避画质的劣化并除去包含在RAW数据中的颜色噪声。
附图说明
图1是表示本发明实施例1的数码相机的框图；
图2是表示图1的数码相机中的光学校正部和图像处理部的结构的框图；
图3是表示图1的数码相机中的摄像元件的像素的配置的平面图；
图4是用于说明图2的光学校正部中的简易去马赛克部(simpledemosaicing section)15的处理的平面图；
图5是表示图4后续的平面图；
图6是用于说明图2的光学校正部中的简易去马赛克部15的蓝色像素的处理的平面图；
图7是表示图6后续的平面图；
图8是用于说明图2的光学校正部中的噪声除去部的平面图；
图9是用于说明图2的光学校正部中的简易去马赛克部18的红色像素的处理的平面图；
图10是用于说明图2的光学校正部中的简易去马赛克部18的蓝色像素的处理的平面图；
图11是表示图10后续的平面图；
图12是表示图11后续的平面图；
图13是表示图2的图像处理部中的边缘(edge)辨别去马赛克部的框图；
图14是用于说明图13的边缘辨别去马赛克部的加权计算部23的平面图；
图15是用于说明图14后续的平面图；以及
图16(A)及图16(B)是用于说明其它实施例中的简易去马赛克部15、18的处理的平面图。
具体实施方式
以下，参照相应的附图来详细说明本发明的实施例。
(1)实施例1的构成
图1是表示本发明实施例的数码相机的框图。在该数码相机1中，摄像元件3由CCD(Charge Coupled Device，电荷耦合装置)固体摄像元件、CMOS(Complementary Metal-Oxide Semiconductor，互补金属氧化物半导体)固体摄像元件等构成。摄像元件3对通过未图示的透镜元件形成在摄像面上的光学图像进行光电变换处理，并把红色、蓝色、绿色的像素值以对应于拜尔阵列(Bayer array)的顺序依次输出。
前处理部4对摄像元件3的输出信号进行相关双重采样处理、自动增益调整处理、模数变换处理，并输出RAW数据D1。
光学校正部5对从该前处理部4输出的RAW数据D1进行缺陷校正处理(defect correction process)、白平衡调整处理，并输出RAW数据D2。此外，在电荷积累时间短于规定时间进行摄影的情况等下，通过足够的SN比(信噪比)无法取得RAW数据D1，在这种情况下或者用户指示颜色噪声(color noise)去除处理的情况下，光学校正部5还执行颜色噪声去除处理，并输出RAW数据D2。
图像处理部6对该RAW数据D2进行去马赛克处理、分辨率变换处理、伽马校正处理、画质校正处理等，并将其变换为亮度信号及色差信号的图像数据D3加以输出。该数码相机1把由图像处理部6处理后的图像数据D3显示在未图示的显示装置上，并显示摄影结果的监视图像。
编码器(ENC)7依靠例如JPEG(Joint Photographic CodingExperts Group，联合图像专家组)等静止图像的编码方式，将从图像处理部6输出的图像数据D3进行数据压缩并输出。
接口(IF)8把该编码器7的输出数据或者从光学校正部5输出的RAW数据D2记录在记录介质9中。另外，记录介质9在本实施例中是存储卡，记录介质9用于记录从接口8输出的各种数据。此外，记录介质9并不仅限于存储卡，可以广泛地适用光碟、磁盘等各种记录介质。
图2是表示与光学校正部5及图像处理部6的颜色噪声去除的结构相关的框图。在该图2中，光学校正部5把RAW数据D1输入至缓冲器(B)11。在此，该RAW数据D1是按照摄像元件3的拜尔阵列的顺序依次排列的各像素的像素值连续图像数据，图3是表示该摄像元件3的拜尔阵列的平面图。摄像元件3在奇数行交替配置绿色和红色像素Gr、R，在后续的偶数行交替配置蓝色和绿色的像素B、Gb，并重复2像素×2像素的块(block)而形成。此外，下面，通过符号Gr、Gb来表示在该一个块中的2个绿色像素。因此，RAW数据D1对应于该拜尔阵列，在奇数行交替重复绿色、红色的像素值并存储到缓冲器11中，在偶数行重复蓝色、绿色的像素值并存储到缓冲器11中。此外，以下，适当地使用对应的像素的符号Gr、Gb、R、B来表示绿色、红色、蓝色的像素值及图像数据。
***像素参照部12由一定区域的缓冲器构成，从存储在缓冲器11中的RAW数据D1中依次以每个规定的大小读出图像数据Gr、Gb、R、B并加以输出。***像素参照部12通过该图像数据Gr、Gb、R、B的处理，依次在基于RAW数据D1的马赛克图像上设定注目像素，并且依次输出该注目像素的像素值和***像素的像素值。
四色分离部13将从该***像素参照部12依次输出的图像数据Gr、Gb、R、B分离为图3中上述的2像素×2像素的块配置中的四种图像数据并加以输出。
白平衡部(WB)30对从该四色分离部13输出的图像数据Gr、Gb、R、B进行白平衡调整后输出。噪声除去部14从由该白平衡部30输出的图像数据Gr、Gb、R、B中除去颜色噪声并加以输出。即，在噪声除去部14中，简易去马赛克部15与图像处理部6中的去马赛克处理相比，通过简单的运算处理，对从四色分离部13输出的图像数据Gr、Gb、R、B进行去马赛克处理。更具体地说，噪声除去部14相对于每个注目像素，从注目像素附近的像素中生成在各注目像素中具有相同颜色信号成分的处理基准的像素值。
在本实施例中，将绿色的像素值适用为该处理基准的像素值，简易去马赛克部15只对于红色、蓝色的像素R、B，生成处理基准的像素值。即，简易去马赛克部15通过使用邻接的绿色的像素Gr、Gb的像素值的内插运算处理，从而分别计算出在红色、蓝色的像素R、B的空间位置上的绿色的像素值，并对于这些红色、蓝色像素R、B，分别生成处理基准的像素值。
即，如图3及图4所示，噪声除去部14在注目像素为红色像素R2的情况下，对邻接该红色像素R2的绿色像素Gb0、Gr2、Gr3、Gb2取平均值，并求出注目像素R2的空间位置上的绿色的像素值Gx2。噪声除去部14把该计算出的绿色的像素值Gx2设定为该红色像素R2的处理基准的像素值。另外，对于蓝色像素B，也同样地对邻接的绿色像素值进行平均化处理，并计算出在蓝色像素B1的空间位置上的绿色像素的像素值，并将其设定为处理基准的像素值Gy。简易去马赛克部15把该计算出的红色、蓝色的像素R、B的空间位置上的绿色的像素值Gx、Gy与从四色分离部13输出的像素值Gr、Gb、R、B一起输出。
色差计算部16使用从简易去马赛克部15输出的像素值Gr、Gb、R、B、Gx、Gy，以处理基准的像素值为基准，生成表示红色像素、蓝色像素的像素值的去噪(噪声去除)用的像素值。更具体地说，在本实施例中，色差计算部16根据由简易去马赛克部15输出的像素值Gr、Gb、R、B、Gx、Gy计算色差，在本实施例中，该色差的像素值被适用于去噪用的像素值。而且，以该处理基准的像素值为基准的色差的像素值并不仅表示亮度信号及色差信号的色差的像素值，广义地讲，其是通过与包含在处理基准内的颜色信号成分的对比而表示注目像素的色调的像素值。
这里，在本实施例中，因为将绿色的像素值适用为处理基准的像素值，因此，色差计算部16仅对于红色、蓝色的像素R、B的像素值，计算与绿色像素值相对的色差。即，通过与图3及图4之间的对比，如图5所示，对于红色像素R2的色差Cr2，把在该红色像素R2的位置上计算出的处理基准的像素值Gx2从该红色像素R2的像素值R2中减去，并把结果所得的减法值(R2-Gx2)设定为红色像素R2的色差。并且，如图6所示，对于蓝色像素B1的色差Cb1，也同样地把在该蓝色像素B1的位置上计算出的处理基准的像素值Gy2从该蓝色像素B1的像素值中减去，并把减法值(B1-Gy1)设定为蓝色像素B1的色差Cb1。
色差计算部16在全部的红色以及蓝色的像素R及B中执行该色差的计算，其结果是，通过与图3的对比，如图7所示，将红色像素R和蓝色像素B的像素值分别变换成以绿色像素值为基准的色差像素值Cr、Cb。
噪声除去部17对于在色差计算部16中计算出的每个红色及蓝色的色差，分别执行去噪处理并输出。具体而言，在本实施例中，如图8所示，使用9像素×9像素的ε滤波器来去除噪声。这里，例如在对红色像素的色差Crc去除噪声的情况下，在以该红色像素为中心的9像素×9像素区域内，如阴影所示，包含25个红色像素的色差。因此，噪声除去部17通过ε滤波器对这25个像素的色差进行处理，并除去注目像素的噪声。并且，同样地对蓝色像素的色差进行处理并除去噪声。此外，在这种情况下，也可以对原来的绿色像素值Gr、Gb、或者对原来的绿色像素值Gr、Gb和在简易去马赛克部15中计算出的绿色的像素值Gx、Gy进行去噪处理。
简易去马赛克部18通过与简易去马赛克部15同样的内插运算处理，对红色像素、蓝色像素的空间位置上的绿色的像素值Gx、Gy进行计算。
即，如图9所示，简易去马赛克部18在注目像素为红色像素R2的情况下，对邻接于该红色像素的绿色像素Gb0、Gr2、Gr3、Gb2的像素值进行平均化处理，并将平均值设定成注目像素R2的空间位置上的绿色像素值Gx。此外，对于蓝色像素B，也同样地对邻接的绿色像素的像素值取平均值，并将其设定成蓝色像素B的空间位置上的绿色的像素值Gy。
RB计算部19使用在简易去马赛克部18中计算出的绿色像素值Gx、Gy来计算红色像素R、蓝色像素B的像素值。即，RB计算部19把在简易去马赛克部18中计算出的红色像素R的空间位置上的绿色像素值Gx加到该像素的色差Cr2上，从而计算红色像素R的像素值。因此，通过Cr2+Gx2来表示如图9所示的红色像素R2的像素值R2。
此外，如图10及图11所示，对于蓝色像素B1，也是将基于邻接的绿色像素Gr1、Gb0、Gb1、Gr3的平均值的绿色像素值Gy加到该蓝色像素B1的色差Cb1上，从而计算该蓝色像素B1的像素值。通过在全部红色及蓝色的像素中执行该色差的计算，从而通过与图9的对比，如图12所示，生成按照对应于摄像元件3的拜尔阵列的顺序重复红色、蓝色的颜色信号的RAW数据D2，光学校正部5将该RAW数据D2输出给图像处理部6、接口8。而且，例如在只对红色和蓝色的色差执行去噪处理的情况下，也可以把在简易去马赛克部15中生成的处理基准的像素值Gx、Gy在RB计算部19的处理中加以使用，并省略在简易去马赛克部18中的处理。
在图像处理部6中，边缘辨别去马赛克部20对从该光学校正部5输出的RAW数据D2作去马赛克处理，并生成在摄像元件3的各像素的空间位置上具有红色、绿色、蓝色的颜色数据R、G、B的全色图像数据。在此处理中，边缘辨别去马赛克部20通过使用边缘延长方向的像素值对注目像素的像素值进行内插运算处理，由此高精度地再现边缘。
即，图13是表示边缘辨别去马赛克部20的结构的框图。边缘辨别去马赛克部20把从光学校正部5输出的RAW数据D2输入给注目像素确定部21，在此，依次切换注目像素，同时，输出以各注目像素为中心的局部区域的像素值。这里，在本实施例中，该局部区域例如被设定为以注目像素为中心的7像素×7像素的区域。
边缘方向算出部22相对于每个局部区域，根据从该注目像素确定部21输出的像素值来计算图像梯度(image slope)，并计算表示边缘延长方向的边缘方向矢量V1。另外，根据与通过边缘方向矢量V1确定的方向正交的方向的图像梯度的大小来检测边缘的强度并加以输出。
权重算出部23通过在边缘方向算出部22中计算出的边缘方向矢量V1来选择用于内插运算处理的像素值，并进一步计算各像素值的权重系数。即，如图14所示，权重算出部23计算在通过边缘方向矢量V1确定的方向上各像素相对于通过注目像素的直线L的距离d1、d2、d3、d4、...。并且，通过规定的阈值Th1来判定该距离d1、d2、d3、d4、...，并选择该距离d1、d2、d3、d4、...小于等于阈值Th1的像素作为用于内插运算处理的像素。此外，生成分别对该选择的各像素进行加权处理的第一权重系数W1，以便随该距离d1、d2、d3、d4、...变短而值变大。另外，如图15所示，计算在通过边缘方向矢量V1确定的方向上的、选择的各像素距离注目像素的距离I1、I2、I3、I4、...，并生成分别对该选择的各像素进行加权处理的第二权重系数W2，以便随该距离I1、I2、I3、I4、...变短而值变大。
第一内插部24通过分别使用了第一和第二权重系数W1和W2的相应像素值的加权求和处理，从而通过内插运算处理来计算注目像素的像素值。此外，对使用了该第一和第二权重系数W1和W2的加权求和结果求平均值，并输出平均值。
第二内插部25通过规定的阈值对在边缘方向算出部22中求出的边缘强度进行判定，在边缘强度小于等于规定值的情况下，不考虑任何边缘方向，而从以注目像素为中心的规定范围的像素值中计算注目像素的像素值并加以输出。
选择器26把从第一内插部24输出的平均值作为注目像素的像素值进行输出。此外，通过规定的阈值来判定在边缘方向算出部22中求出的边缘强度，在边缘强度小于等于规定值的情况下，将从第一内插部24输出的平均值取而代之地选择第二内插部25的输出值加以输出。
YCC变换部28(图2)通过下式的运算处理，对从边缘辨别去马赛克部20输出的全色图像数据D4进行运算处理，并把该图像数据D4变换成亮度信号、色差信号的图像数据D5并输出。
Y＝0.29900×R+0.58700×G+0.11400×B        (1-1)
Cb＝-0.16874×R-0.33126×G+0.50000×B      (1-2)
Cr＝0.50000×R-0.41869×G-0.08131×B       (1-3)
此外，YCC变换部28合并校正该式(1-1)～(1-3)中的系数，并执行适用颜色变换阵列的颜色调整处理等。并且，设定生成的图像数据D5的伽马。
YCC合成部29从由YCC变换部28输出的图像数据D5中生成YCC的图像数据D3，并输出给编码器7、外部机器等。
(2)实施例1的动作
在以上的结构中，在该数码相机1中(图1)，在摄像元件3中，生成红色、蓝色、绿色的像素值以对应于摄像元件3的拜尔阵列的顺序依次连续的摄像信号，该摄像信号在前处理部4中被进行模数变换并生成RAW数据D1。在数码相机1中，在光学校正部5中，抑制该RAW数据D1的噪声。此外，在后续的图像处理部6中，对RAW数据D2进行去马赛克处理并生成全色图像数据，该全色图像数据D3被变换成基于亮度信号和色差信号的图像数据D3，由编码器7进行数据压缩后被记录在记录介质9中。此外，当用户指示基于RAW数据的记录的情况下，将从光学校正部5输出的RAW数据D2记录于记录介质9。
RAW数据D2在图像处理部6中进行去马赛克处理(图13)，在该处理中，选择边缘方向的像素，通过使用该选择的像素的像素值的内插运算处理，从而生成全色图像数据D4。即，在这种情况下，例如对于绿色的像素，分别从红色及蓝色的附近像素中检测出边缘方向，并通过使用该边缘方向的像素的内插运算处理来求出红色和蓝色的像素值。并且，对于红色的像素，则分别根据绿色及蓝色的附近像素来检测出边缘方向，并通过使用该边缘方向的像素的内插运算处理来求出绿色和蓝色的像素值。并且，对于蓝色的像素，则分别根据红色及绿色的附近像素来检测出边缘方向，并通过使用该边缘方向的像素的内插运算处理来求出红色和绿色的像素值。
因此，在该数码相机1中，对应于边缘方向，相对于每个注目像素切换内插运算对象的像素并进行去马赛克处理，其结果是，混入RAW数据D2的噪声的特性发生复杂的变化并混入到全色图像数据D4中。因此，如上述，在去马赛克处理之后，无法简单地除去颜色噪声。
另外，在去马赛克处理之后进行噪声除去的情况下，当原本把RAW数据D2直接记录于记录介质9时，无法去除噪声。
此外，在作为去马赛克处理的处理对象的RAW数据D2中混入有噪声的情况下，会错误检测边缘，并导致使得在去马赛克处理后的全色图像数据D4中不自然地强调了边缘。此外，恐怕会发生颜色噪声、画质显著劣化。
因此，虽然如本实施例所示，在构成图像处理部6的情况下，需要在图像处理部6中进行去马赛克处理之前的、RAW数据的阶段去除噪声，但是若只是单纯地相对于各种颜色的每个像素实行去噪处理的话，恐怕亮度信号会受到影响，边缘部分等被错误的颜色表示、画质显著劣化。
因此，在本实施例中，在光学校正部5(图2)中，通过***像素参照部12对RAW数据D1依次设定注目像素，并通过四色分离部13将该注目像素和***像素的像素值输入给简易去马赛克部15。在该简易去马赛克部15中，RAW数据D1相对于每个注目像素，被计算具有相同颜色信号成分的处理基准的像素值。并且，在后续的色差计算部16中，变换为以该处理基准的像素值为基准的去噪用的像素值，该去噪用的像素值在噪声除去部17中被去除噪声。并且，然后变换成原来的像素值。
因此，在数码相机1中，与直接分别对各像素的颜色信号去除噪声的情况下相比，可以只去除颜色噪声，而没有赋予亮度信号额外的影响，与现有技术相比，可以有效地避免画质的劣化，且可以除去包含在RAW数据中的颜色噪声。
此外，在除去噪声之后，通过变换为原来的RAW数据，易于与对其它RAW数据进行噪声除去处理相组合，从而可以进一步提高去噪的效果。
具体地说，在本实施例中，摄像元件3的拜尔阵列通过重复2像素×2像素的块而形成，其中，该2像素×2像素的块由两个绿色像素Gr、Gb、和红色、蓝色像素R、B组成，在光学校正部5中，这些像素中的绿色像素的像素值被设定为处理基准的像素值，求得各注目像素的色差作为去噪用的像素值。因此，对于RAW数据D2中像素数最多的绿色像素的像素值，即使不求得任何色差，也能实行去噪处理。因此，在数码相机1中，将处理基准的像素值设定为绿色像素值，则省略了对于绿色像素的处理基准的计算，从而使整体结构得以简化。
(3)实施例1的效果
根据以上的构成，从注目像素的附近像素中生成具有相同颜色信号成分的处理基准的像素值，并把各注目像素的像素值变换为以该处理基准的像素值为基准的去噪用像素值并除去噪声，然后变换为原来的像素值，从而可以有效地避免画质的劣化，并可以除去包含在RAW数据中的颜色噪声。
此外，把构成RAW数据的红色、绿色、蓝色的像素中的、绿色像素的像素值设定为处理基准的像素值，根据该处理基准的像素值和、红色或绿色的像素值之间的差分值来生成色差的像素值，并将其设定为去噪用像素值，从而可以省略对于绿色像素的处理，使构成得以简化。
并且，从构成RAW数据的绿色像素的像素值、或者该绿色像素的像素值和生成的处理基准的像素值中除去噪声，从而可以进一步降低噪声。
(4)实施例2
在本实施例中，把附近的绿色像素的中值适用于作为处理基准的绿色像素值Gx、Gy。本实施例的数码相机除了生成该处理基准的像素值的构成不同之外，其它均与上述实施例1的数码相机1的构成相同。
即，在本实施例中，如图3所示，简易去马赛克部15对于红色像素R2，将邻接于该红素像素的绿色像素Gb0、Gr2、Gr3、Gb2的像素值以从大到小的顺序加以分类，并计算分类结果的第2个像素值和第3个像素值之间的平均值。简易去马赛克部15将该平均值作为中值，并将其设定为该红色像素R2的位置上的绿色的像素值。此外，同样对于蓝色像素，也是把邻接像素的像素值进行分类后求中值，并将其设定为绿色的像素值。此外，在这样的处理中，也可以将邻接四像素的中值取而代之地适用更宽范围的像素的中值。
与该简易去马赛克部15的处理相对应，简易去马赛克部18通过同样的运算处理计算出红色像素和蓝色像素的位置上的绿色的像素值，并生成原来的RAW数据。
如本实施例所示，在生成作为处理基准的绿色的像素值时，即使使用附近绿色像素的中值，也能得到与实施例1同样的效果。
(5)实施例3
在本实施例中，以红色像素以及对应的蓝色像素的空间位置相同为例，计算与红色像素及蓝色像素的空间位置上的绿色的像素值。此外，在本实施例中，除了该计算方法不同这点之外，其它均与上述实施例构成相同。
即，摄像元件3的拜尔阵列由重复2像素×2像素的块形成，该2像素×2像素的块的像素配置构成如图16(A)所示。这里，以该图14中的红色像素R及蓝色像素B的空间位置是如点P所示的该2像素×2像素的块的中央位置为例。根据这样的例子，如图16(A)及图16(B)所示，简易去马赛克部15、18把该2像素×2像素的块的绿色像素Gr、Gb的平均值设定为红色像素R及蓝色像素B的空间位置上的绿色的像素值。
根据本实施例，以红色像素R及蓝色像素B的空间位置相同为例，计算绿色像素值，从而可以降低计算量并可得到与上述实施例同样的效果。
(6)实施例4
在本实施例中，取代把作为处理基准的绿色像素值Gx、Gy分别从红色以及蓝色的像素值R及B中减去并生成去噪用的像素值，而是根据与这些绿色像素值Gx、Gy相对应的红色及蓝色的像素的像素值R及B之比来生成去噪用的像素值。此外，本实施例的数码相机除了有关该色差的构成这点不同以外，其它均与上述实施例的数码相机1的构成一样。
即，在本实施例中，色差计算部16对于红色像素R的色差Cr，通过在该红色像素R的位置上计算出的处理基准的像素值Gx，对该红色像素R的像素值R进行除法运算，并将除法运算后的值R/Gx设定为该红色像素R的去噪用的像素值。此外，同样地对于蓝色像素B，通过在该蓝色像素R的位置上计算出的处理基准的像素值Gy，对该蓝色像素B的像素值B进行除法运算，并将除法运算后的值B/Gy设定为该蓝色像素B的去噪用像素值。
另外，与该色差的生成处理相对应，RB计算部19将去噪处理后的色差Cr、Cb分别乘以对应的绿色像素值Gx、Gy，从而变换成原来的像素值R、B。
如本实施例所示，即使根据处理基准的像素值、和红色或蓝色的像素值的比率来生成去噪用像素值，也能取得与实施例1同样的效果。
(7)实施例5
在本实施例中，代替绿色的像素值，而将亮度值适用为处理基准的像素值。本实施例的数码相机除了有关该处理基准的像素值的构成这点不同之外，其它均与上述实施例1的构成一样。
在本实施例中，简易去马赛克部15对于绿色像素，通过使用邻接的红色像素及蓝色像素的像素值的内插运算处理，由此计算各绿色像素的空间位置上的红色像素及蓝色像素的像素值。此外，同样地对于红色像素，通过使用邻接的绿色像素及蓝色像素的像素值的内插运算处理，由此计算各红色像素的空间位置上的绿色像素及蓝色像素的像素值。并且，同样地对于蓝色像素，通过使用邻接的红色像素及绿色像素的像素值的内插运算处理，由此计算各蓝色像素的空间位置上的红色像素及绿色像素的像素值。
简易去马赛克部15根据该计算结果相对于每个像素计算亮度值。此外，对于该亮度值的计算，也可以单纯地把红色、绿色、蓝色的像素值相加并简单地计算亮度值，还可以执行(1-1)式的运算处理来正确地计算各像素的亮度值。
色差计算部16使用该处理基准的像素值Y，相对于每个像素，计算色差的像素值(R-Y)以及(B-Y)。此外，在这种情况下，也可以使用(1-2)及(1-3)式来计算色差的像素值。
噪声除去部17对该色差的像素值进行去噪处理。简易去马赛克部18、RB计算部19将该去噪处理后的色差的像素值变换为原来的马赛克图像的像素值。此外，在这种情况下，在使用(1-2)以及(1-3)式计算色差的像素值的情况下，借助下式的运算处理来计算各像素值。
R＝Y+1.402×Cr               (2-1)
G＝Y-0.34414×Cb-0.71414×Cr (2-2)
B＝Y+1.772×Cb               (2-3)
此外，在这些处理中，也可以省略(1-1)式的运算，直接使用(1-2)及(1-3)式来计算色差的像素值。并且，也可以省略关于绿色像素的处理，而只进行关于红色像素、蓝色像素的一系列处理。
根据本实施例，即使将亮度值设定为处理基准的像素值并求得色差的像素值，也可以得到与上述实施例相同的效果。
(8)实施例6
本实施例的数码相机使用边缘辨别去马赛克部20中的第二内插部25来构成简易去马赛克部15、18。
如本实施例所示，若利用原来的去马赛克处理的结构并构成简易去马赛克部15、18，则可以简化整体的构成，并可得到与上述实施例同样的效果。
(9)其它实施例
此外，虽然在上述实施例中对通过ε滤波器除去颜色噪声的情况进行了说明，但是本发明并不仅限于此，在使用小波变换(waveletconversion process)等来除去噪声的情况下、在把高频成分和低频成分进行频带分离并除去噪声的情况下、采用双边滤光器或三边滤光器等去除噪声的情况下等等，可以广泛地适用各种去噪方法。
另外，虽然在上述实施例中仅对在噪声除去部17中去除RAW数据的噪声的情况进行了说明，但本发明并不仅限于此，还可以把其它各种噪声除去方法加以组合来去除噪声。
并且，虽然在上述实施例中已经对把本发明适用于数码相机的情况进行了说明，但本发明并不仅限于此，还可以广泛适用于诸如对运动图像进行摄影的摄像机、进一步处理各种RAW数据的图像处理装置、各种图像处理程序。此外，该图像处理程序可以事先安装在计算机、图像处理装置等中加以提供，也可以取而代之地记录在光盘、磁盘、存储卡等各种记录介质中加以提供，还可以通过互联网等的网络的下载而加以提供。
产业上的可利用性
本发明可以适用于例如数码相机。

Claims (11)

1.一种摄像装置，其特征在于，包括:
摄像部，用于输出RAW数据；
变换部，在基于所述RAW数据的马赛克图像上依次设定注目像素，并将所述注目像素的像素值变换成去噪用像素值，其中，所述去噪用像素值以在所述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；
噪声除去部，用于从所述去噪用像素值中除去噪声；
反向变换部，通过与所述变换部相反的处理，把在所述噪声除去部中除去噪声后的所述去噪用像素值变换成原来的像素值；以及
去马赛克部，对基于在所述反向变换部中处理后的像素值的马赛克图像进行去马赛克处理，并生成全色图像数据。
2.根据权利要求1所述的摄像装置，其特征在于，
基于所述RAW数据的马赛克图像的像素是红色、绿色、蓝色的像素，
所述处理基准的像素值是所述红色以及蓝色像素的空间位置上的绿色的像素值，
所述去噪用像素值是所述处理基准的像素值、和所述红色或蓝色像素的像素值之间的差分值。
3.根据权利要求2所述的摄像装置，其特征在于，
所述噪声除去部还从所述马赛克图像的绿色像素的像素值中、或从所述马赛克图像的绿色像素的像素值和所述红色及蓝色像素的空间位置上的绿色的像素值中除去噪声。
4.根据权利要求2所述的摄像装置，其特征在于，
所述处理基准的像素值是所述红色及蓝色像素附近的绿色像素的像素值的中值。
5.根据权利要求2所述的摄像装置，其特征在于，
基于所述RAW数据的马赛克图像通过基于相同的像素配置的块的重复而形成，
在一个所述块内的红色像素及蓝色像素的空间位置相同的情况下，生成所述处理基准的像素值。
6.根据权利要求1所述的摄像装置，其特征在于，
基于所述RAW数据的马赛克图像是红色、绿色、蓝色的像素，
所述处理基准的像素值是所述红色及蓝色像素的空间位置上的绿色的像素值，
所述去噪用像素值是通过所述处理基准的像素值、和所述红色或蓝色像素的像素值之比表示的像素值。
7.根据权利要求1所述的摄像装置，其特征在于，
基于所述RAW数据的马赛克图像的像素是红色、绿色、蓝色的像素，
所述处理基准的像素值是所述各像素的空间位置上的亮度值，
所述去噪用像素值是色差的像素值。
8.一种图像处理装置，用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声，其特征在于，包括:
变换部，在基于所述RAW数据的马赛克图像上依次设定注目像素，并将所述注目像素的像素值变换成去噪用像素值，其中，所述去噪用像素值以在所述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；
噪声除去部，用于从所述去噪用像素值中除去噪声；以及
反向变换部，通过与所述变换部相反的处理，把在所述噪声除去部中除去噪声后的所述去噪用像素值变换成原来的像素值。
9.一种图像处理方法，用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声，其特征在于，包括:
变换步骤，在基于所述RAW数据的马赛克图像上依次设定注目像素，并将所述注目像素的像素值变换成去噪用像素值，其中，所述去噪用像素值以在所述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；
噪声除去步骤，用于从所述去噪用像素值中除去噪声；以及
反向变换步骤，通过与所述变换步骤相反的处理，把在所述噪声除去步骤中除去噪声后的所述去噪用像素值变换成原来的像素值。
10.一种图像处理方法的程序，其中，所述图像处理方法用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声，所述图像处理方法的程序的特征在于，包括:
变换步骤，在基于所述RAW数据的马赛克图像上依次设定注目像素，并将所述注目像素的像素值变换成去噪用像素值，其中，所述去噪用像素值以在所述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；
噪声除去步骤，用于从所述去噪用像素值中除去噪声；以及
反向变换步骤，通过与所述变换步骤相反的处理，把在所述噪声除去步骤中除去噪声后的所述去噪用像素值变换成原来的像素值。
11.一种记录介质，记录用于抑制以摄像元件的像素排列依次得到的RAW数据的噪声的图像处理方法的程序，所述记录介质的特征在于，
所述图像处理方法的程序包括:
变换步骤，在基于所述RAW数据的马赛克图像上依次设定注目像素，并将所述注目像素的像素值变换成去噪用像素值，其中，所述去噪用像素值以在所述各注目像素中具有相同颜色信号成分的处理基准的像素值为基准；
噪声除去步骤，用于从所述去噪用像素值中除去噪声；以及
反向变换步骤，通过与所述变换步骤相反的处理，把在所述噪声除去步骤中除去噪声后的所述去噪用像素值变换成原来的像素值。
CN2007800054989A 2006-12-15 2007-09-20 摄像装置、图像处理装置、图像处理方法 Expired - Fee Related CN101385359B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP338233/2006 2006-12-15
JP2006338233A JP4284628B2 (ja) 2006-12-15 2006-12-15 撮像装置、画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体
PCT/JP2007/068898 WO2008072406A1 (ja) 2006-12-15 2007-09-20 撮像装置、画像処理装置、画像処理方法、画像処理方法のプログラム及び画像処理方法のプログラムを記録した記録媒体

Publications (2)

Publication Number Publication Date
CN101385359A true CN101385359A (zh) 2009-03-11
CN101385359B CN101385359B (zh) 2011-06-15

Family

ID=39511437

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007800054989A Expired - Fee Related CN101385359B (zh) 2006-12-15 2007-09-20 摄像装置、图像处理装置、图像处理方法

Country Status (8)

Country Link
US (1) US8295595B2 (zh)
EP (1) EP2094019A4 (zh)
JP (1) JP4284628B2 (zh)
KR (1) KR20090087811A (zh)
CN (1) CN101385359B (zh)
MY (1) MY150251A (zh)
TW (1) TW200826655A (zh)
WO (1) WO2008072406A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854462A (zh) * 2009-03-12 2010-10-06 索尼公司 图像处理设备、图像处理方法和计算机程序
CN102742279A (zh) * 2010-01-29 2012-10-17 伊斯曼柯达公司 滤色器阵列图像的迭代去噪
CN102103743B (zh) * 2009-12-22 2014-04-16 北大方正集团有限公司 图像降噪的方法和装置
CN104025583A (zh) * 2011-12-28 2014-09-03 富士胶片株式会社 图像处理装置、方法及摄像装置
CN104380726A (zh) * 2012-07-06 2015-02-25 富士胶片株式会社 图像处理装置及方法以及摄像装置
CN107408196A (zh) * 2014-12-19 2017-11-28 顶级公司 传感器噪声分布图
CN116055698A (zh) * 2022-12-30 2023-05-02 爱芯元智半导体(上海)有限公司 色彩调整方法、色彩调整装置及电子设备

Families Citing this family (39)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101503227B1 (ko) 2007-04-11 2015-03-16 레드.컴 인코포레이티드 비디오 카메라
US8237830B2 (en) 2007-04-11 2012-08-07 Red.Com, Inc. Video camera
CN101594457B (zh) * 2008-05-30 2012-11-21 深圳艾科创新微电子有限公司 一种分级降噪***及方法
JP5311916B2 (ja) * 2008-07-31 2013-10-09 株式会社エルモ社 撮像装置
JP5311987B2 (ja) * 2008-11-27 2013-10-09 キヤノン株式会社 撮像装置
TWI423666B (zh) * 2008-12-31 2014-01-11 Altek Corp Image elimination method for image sequence
US8593483B2 (en) * 2009-10-20 2013-11-26 Apple Inc. Temporal filtering techniques for image signal processing
US8638342B2 (en) * 2009-10-20 2014-01-28 Apple Inc. System and method for demosaicing image data using weighted gradients
US8345130B2 (en) 2010-01-29 2013-01-01 Eastman Kodak Company Denoising CFA images using weighted pixel differences
JP5672776B2 (ja) * 2010-06-02 2015-02-18 ソニー株式会社 画像処理装置、および画像処理方法、並びにプログラム
US8471932B2 (en) 2010-09-30 2013-06-25 Apple Inc. Spatial filtering for image signal processing
US8797391B2 (en) * 2011-01-14 2014-08-05 Himax Media Solutions, Inc. Stereo image displaying method
US8995765B2 (en) * 2011-12-13 2015-03-31 SK Hynix Inc. Digital image processing apparatus and method
US8817120B2 (en) 2012-05-31 2014-08-26 Apple Inc. Systems and methods for collecting fixed pattern noise statistics of image data
US9743057B2 (en) 2012-05-31 2017-08-22 Apple Inc. Systems and methods for lens shading correction
US9332239B2 (en) 2012-05-31 2016-05-03 Apple Inc. Systems and methods for RGB image processing
US9077943B2 (en) 2012-05-31 2015-07-07 Apple Inc. Local image statistics collection
US8953882B2 (en) 2012-05-31 2015-02-10 Apple Inc. Systems and methods for determining noise statistics of image data
US9025867B2 (en) 2012-05-31 2015-05-05 Apple Inc. Systems and methods for YCC image processing
US9105078B2 (en) 2012-05-31 2015-08-11 Apple Inc. Systems and methods for local tone mapping
US11089247B2 (en) 2012-05-31 2021-08-10 Apple Inc. Systems and method for reducing fixed pattern noise in image data
US8917336B2 (en) 2012-05-31 2014-12-23 Apple Inc. Image signal processing involving geometric distortion correction
US8872946B2 (en) 2012-05-31 2014-10-28 Apple Inc. Systems and methods for raw image processing
US9142012B2 (en) 2012-05-31 2015-09-22 Apple Inc. Systems and methods for chroma noise reduction
US9031319B2 (en) 2012-05-31 2015-05-12 Apple Inc. Systems and methods for luma sharpening
US9014504B2 (en) 2012-05-31 2015-04-21 Apple Inc. Systems and methods for highlight recovery in an image signal processor
KR101931332B1 (ko) * 2012-06-29 2018-12-20 삼성전자주식회사 영상의 노이즈 제거 장치 및 방법
US9300846B2 (en) * 2012-09-10 2016-03-29 Apple Inc. Signal shaping for improved mobile video communication
KR101990540B1 (ko) * 2012-10-31 2019-06-18 삼성전자주식회사 이미지 프로세싱 방법, 그 이미지 신호 프로세서 및 이를 포함하는 이미지 센싱 시스템
US9521384B2 (en) 2013-02-14 2016-12-13 Red.Com, Inc. Green average subtraction in image data
US9344690B2 (en) 2014-01-24 2016-05-17 Microsoft Technology Licensing, Llc Image demosaicing
JP6129119B2 (ja) 2014-06-04 2017-05-17 株式会社ソニー・インタラクティブエンタテインメント 画像処理装置、画像処理システム、撮像装置、および画像処理方法
US9479745B2 (en) 2014-09-19 2016-10-25 Omnivision Technologies, Inc. Color filter array with reference pixel to reduce spectral crosstalk
US9495731B2 (en) 2015-04-15 2016-11-15 Apple Inc. Debanding image data based on spatial activity
JP7313330B2 (ja) 2017-07-05 2023-07-24 レッド．コム，エルエルシー 電子機器でのビデオ画像データ処理
JP2020036162A (ja) * 2018-08-29 2020-03-05 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法、及びプログラム
CN109754443B (zh) * 2019-01-30 2021-04-20 京东方科技集团股份有限公司 图像数据转化方法、装置及存储介质
US11798136B2 (en) 2021-06-10 2023-10-24 Bank Of America Corporation Automated teller machine for detecting security vulnerabilities based on document noise removal
CN118176738A (zh) * 2021-10-28 2024-06-11 特里普拉里·辛格 捕获彩色图像的方法和***

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4642678A (en) * 1984-09-10 1987-02-10 Eastman Kodak Company Signal processing method and apparatus for producing interpolated chrominance values in a sampled color image signal
US4724395A (en) 1985-08-05 1988-02-09 Polaroid Corporation Median filter for reconstructing missing color samples
US6229578B1 (en) * 1997-12-08 2001-05-08 Intel Corporation Edge-detection based noise removal algorithm
US7369161B2 (en) * 1999-06-08 2008-05-06 Lightsurf Technologies, Inc. Digital camera device providing improved methodology for rapidly taking successive pictures
US6980326B2 (en) * 1999-12-15 2005-12-27 Canon Kabushiki Kaisha Image processing method and apparatus for color correction of an image
JP4190886B2 (ja) * 2001-02-06 2008-12-03 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ イメージセンサにおける緑色の不均一性の防止
US7053908B2 (en) 2001-04-12 2006-05-30 Polaroid Corporation Method and apparatus for sensing and interpolating color image data
JP2003061105A (ja) * 2001-06-07 2003-02-28 Seiko Epson Corp 画像処理方法、画像処理プログラム、画像処理装置およびそれを用いたディジタルスチルカメラ
US7082218B2 (en) * 2001-07-27 2006-07-25 Hewlett-Packard Development Company, L.P. Color correction of images
JP4154661B2 (ja) 2003-01-14 2008-09-24 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
JP2004363853A (ja) * 2003-06-04 2004-12-24 Casio Comput Co Ltd 画像信号のノイズ低減方法及びノイズ低減装置
JP2005110176A (ja) * 2003-10-02 2005-04-21 Nikon Corp ノイズ除去方法、ノイズ除去処理プログラム、およびノイズ除去装置
JP2005167974A (ja) * 2003-11-10 2005-06-23 Seiko Epson Corp 画像処理方法及び画像処理装置、画像処理プログラム並びに半導体装置
JP4339671B2 (ja) * 2003-11-27 2009-10-07 オリンパス株式会社 撮像装置
EP1729523B1 (en) * 2004-02-19 2014-04-09 Mitsubishi Denki Kabushiki Kaisha Image processing method
US7502505B2 (en) * 2004-03-15 2009-03-10 Microsoft Corporation High-quality gradient-corrected linear interpolation for demosaicing of color images
JP4380399B2 (ja) 2004-04-16 2009-12-09 ソニー株式会社 撮像装置、ノイズリダクション装置およびノイズリダクション方法並びにプログラム
US7319797B2 (en) * 2004-06-28 2008-01-15 Qualcomm Incorporated Adaptive filters and apparatus, methods, and systems for image processing
JP3965402B2 (ja) * 2004-08-23 2007-08-29 富士フイルム株式会社 ノイズ低減装置および方法ならびにノイズ低減プログラム
JP4501855B2 (ja) * 2005-12-22 2010-07-14 ソニー株式会社 画像信号処理装置、撮像装置、および画像信号処理方法、並びにコンピュータ・プログラム

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101854462A (zh) * 2009-03-12 2010-10-06 索尼公司 图像处理设备、图像处理方法和计算机程序
CN101854462B (zh) * 2009-03-12 2012-12-12 索尼公司 图像处理设备、图像处理方法和计算机程序
CN102103743B (zh) * 2009-12-22 2014-04-16 北大方正集团有限公司 图像降噪的方法和装置
CN102742279A (zh) * 2010-01-29 2012-10-17 伊斯曼柯达公司 滤色器阵列图像的迭代去噪
CN104025583A (zh) * 2011-12-28 2014-09-03 富士胶片株式会社 图像处理装置、方法及摄像装置
CN104025583B (zh) * 2011-12-28 2016-10-19 富士胶片株式会社 图像处理装置、方法及摄像装置
CN104380726A (zh) * 2012-07-06 2015-02-25 富士胶片株式会社 图像处理装置及方法以及摄像装置
CN104380726B (zh) * 2012-07-06 2016-04-13 富士胶片株式会社 图像处理装置及方法以及摄像装置
CN107408196A (zh) * 2014-12-19 2017-11-28 顶级公司 传感器噪声分布图
CN107408196B (zh) * 2014-12-19 2021-03-19 顶级公司 从图像中提取特征的方法
CN116055698A (zh) * 2022-12-30 2023-05-02 爱芯元智半导体(上海)有限公司 色彩调整方法、色彩调整装置及电子设备
CN116055698B (zh) * 2022-12-30 2024-04-12 爱芯元智半导体(宁波)有限公司 色彩调整方法、色彩调整装置及电子设备

Also Published As

Publication number Publication date
JP4284628B2 (ja) 2009-06-24
CN101385359B (zh) 2011-06-15
JP2008153836A (ja) 2008-07-03
EP2094019A4 (en) 2010-05-26
EP2094019A1 (en) 2009-08-26
US8295595B2 (en) 2012-10-23
MY150251A (en) 2013-12-31
KR20090087811A (ko) 2009-08-18
US20090052797A1 (en) 2009-02-26
WO2008072406A1 (ja) 2008-06-19
TW200826655A (en) 2008-06-16

Similar Documents

Publication Publication Date Title
CN101385359B (zh) 摄像装置、图像处理装置、图像处理方法
JP5045421B2 (ja) 撮像装置、色ノイズ低減方法および色ノイズ低減プログラム
JP4977395B2 (ja) 画像処理装置及び方法
JP5527448B2 (ja) 画像入力装置
JP5123756B2 (ja) 撮像システム、画像処理方法および画像処理プログラム
JP4983093B2 (ja) 撮像装置および方法
JP5352191B2 (ja) ノイズ低減装置、ノイズ低減方法及びプログラム
KR20080082902A (ko) 화상 처리 장치, 촬상 장치, 및 화상 처리 방법, 및 컴퓨터프로그램
JP2007259401A (ja) ノイズ低減装置ならびにその制御方法およびその制御プログラムならびに撮像装置およびディジタル・カメラ
WO2006004151A1 (ja) 信号処理システム及び信号処理プログラム
KR100986203B1 (ko) 촬상 장치 및 이에 이용하는 결함 화소 보정 방법
US8471933B2 (en) Image processing apparatus, image processing method and computer program
JP5291788B2 (ja) 撮像装置
JP5977565B2 (ja) 画像処理装置
JP4687454B2 (ja) 画像処理装置および撮像装置
JP5919086B2 (ja) 画像処理装置及びその制御方法、並びにプログラム
JP6525522B2 (ja) 画像処理装置および画像処理方法
US8154627B2 (en) Imaging device
JP2013055622A (ja) 画像処理装置、および画像処理方法、情報記録媒体、並びにプログラム
JP5290734B2 (ja) ノイズ低減装置及びノイズ低減方法
JP2012227869A (ja) 画像処理装置及び画像処理方法並びにデジタルカメラ
JP2009033304A (ja) 画像フィルタ、画像処理装置、撮像装置、画像処理方法およびプログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20110615