CN101188775A - 彩色摄像元件和彩色信号处理电路 - Google Patents

彩色摄像元件和彩色信号处理电路 Download PDF

Info

Publication number
CN101188775A
CN101188775A CNA2007101994974A CN200710199497A CN101188775A CN 101188775 A CN101188775 A CN 101188775A CN A2007101994974 A CNA2007101994974 A CN A2007101994974A CN 200710199497 A CN200710199497 A CN 200710199497A CN 101188775 A CN101188775 A CN 101188775A
Authority
CN
China
Prior art keywords
signal
color
infrared
photo
electric conversion
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2007101994974A
Other languages
English (en)
Inventor
东堤良仁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sanyo Electric Co Ltd
Original Assignee
Sanyo Electric Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sanyo Electric Co Ltd filed Critical Sanyo Electric Co Ltd
Publication of CN101188775A publication Critical patent/CN101188775A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/148—Charge coupled imagers
    • H01L27/14831—Area CCD imagers
    • H01L27/14837—Frame-interline transfer
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/14601—Structural or functional details thereof
    • H01L27/1462—Coatings
    • H01L27/14621—Colour filter arrangements
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/148—Charge coupled imagers
    • H01L27/14806—Structural or functional details thereof
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/148—Charge coupled imagers
    • H01L27/14831—Area CCD imagers
    • H01L27/14843—Interline transfer
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H01L27/148—Charge coupled imagers
    • H01L27/14831—Area CCD imagers
    • H01L27/1485—Frame transfer
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
    • G01J3/46—Measurement of colour; Colour measuring devices, e.g. colorimeters
    • G01J3/50—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors
    • G01J3/51—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters
    • G01J3/513—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters having fixed filter-detector pairs
    • G01J2003/516—Measurement of colour; Colour measuring devices, e.g. colorimeters using electric radiation detectors using colour filters having fixed filter-detector pairs with several stacked filters or stacked filter-detector pairs

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Power Engineering (AREA)
  • Electromagnetism (AREA)
  • Condensed Matter Physics & Semiconductors (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Microelectronics & Electronic Packaging (AREA)
  • Color Television Image Signal Generators (AREA)
  • Solid State Image Pick-Up Elements (AREA)
  • Processing Of Color Television Signals (AREA)

Abstract

提供一种彩色摄像元件(12)，包括：引导入射光的红色过滤器(38)设置在光接收面上的用于选择输出红色信号的第一光电变换元件(22)；引导入射光的绿色过滤器(34)设置在光接收面上的用于选择输出绿色信号的第二光电变换元件(22)；引导入射光的蓝色过滤器(36)设置在光接收面上的用于选择输出蓝色信号的第三光电变换元件(18)；引导入射光的通过红色过滤器(38)和所述蓝色过滤器(36)重叠构成的红外光透射过滤器设置在光接收面上的、用于选择输出用来校正在所述第一～第三光电变换信号中包含的红外光成分的红外光信号的红外光成分光电变换元件(24)。这样，可以在高灵敏度下进行良好的颜色再现。

Description

彩色摄像元件和彩色信号处理电路
本申请是申请日为2004年12月10日、申请号为200410100288.6、发明名称为“彩色摄像元件和彩色信号处理电路”的分案申请。
技术领域
本发明涉及彩色摄像元件和彩色摄像装置，特别涉及在红外区域具有灵敏度的彩色摄像元件和彩色摄像装置。
背景技术
摄像机安装的CCD(Charge Coupled Device：电荷耦合元件)和C-MOS(Complementary Metal Oxide Semiconductor：互补金属氧化物半导体)等摄像元件包括二维排列的用于将光变换成电信号的光电变换元件。由于光电变换元件自身没有颜色识别能力，为了进行彩色摄像，用颜色过滤器等将入射光色分离，并对分离的每种颜色光进行光电变换。入射光的色分离一般通过在光电变换元件上设置的基色(RGB)系或者补色(YMC)系的三基色颜色过滤器层进行。
相对于人眼所见光的波长是380nm～780nm大小，通常的光电变换元件在所检测的波长范围为380nm～1100nm大小，在比人可见区域更长波长一侧的红外区域上也具有高的灵敏度。按照使入射光进行颜色分离的各种颜色的强度来输出信号的光电变换元件，如果输出了人眼不可见的红外区域光成分时不能够进行正确的颜色再现。因此，在摄像机的透镜和光电变换元件之间设置了红外光截断过滤器，使得红外区域的光不入射到光电变换元件上。
为了正确颜色再现而设置的红外光截断过滤器在截断红外区域波长的光的同时也使可见区域的光被截断10％～20％。因此，存在入射到光电变换元件之光接收面上的可见光强度减少、据此，输出信号的S/N比降低以及产生画质恶化之类的问题。特别在欧洲等文化圈中，大多使用发光光谱中红外线成分多的白炽灯间接照明，室内照度比较低。即使在这种低照度下，为了进行S/N比高的摄像，也要求提高摄像元件的灵敏度。
因此，提出了黑白/彩色切换摄像机(例如参考专利文献1)，其监视CCD的输出，当CCD输出电平大(白天光亮大)时，通过在透镜和CCD之间***红外光截断过滤器来进行彩色摄影，而当CCD输出电平小(夜间光亮小)时，通过切换红外线截断过滤器而自动地***虚拟玻璃(dummyglass)。
彩色摄像装置为了在各种照明光源下进行摄像，一般要自动地调整R、G、B信号的增益，使得即使在任何光源下进行摄影也满足白平衡。
彩色摄像装置要求高的灵敏度使得即使在暗的环境中也能够进行鲜明的彩色摄像。为了获得高的灵敏度，尽管具有降低帧速率、增大透镜光圈、提高信号放大增益之类的方法，但会分别产生残余图像残留、被写体深度变浅以及噪音增加之类的问题。
因此，尽管考虑通过除去如上述使可见光损失的红外光截断过滤器而使入射光有效地引导到光电变换元件上，但仍然具有不能够进行正确的颜色再现之类的问题。而且在彩色摄像元件中，从小型化低成本观点看也要求除去红外光截断过滤器。
专利文献1：特开平11-239356号公报。
发明内容
本发明的目的在于提供一种彩色摄像元件和彩色摄像装置，其在没有红外光截断过滤器的情况下仍能够进行正确的颜色再现。
本发明的彩色摄像元件，包括：多件的颜色成分光电变换元件，在光接收面分别设置有分别透过不同颜色成分的颜色过滤器，接收入射光，分别选择输出与所述不同颜色成分强度对应的颜色信号；和红外光成分光电变换元件，在光接收面设置透过红外光成分的红外光成分透射过滤器，选择输出红外光信号，该红外光信号用来校正在所述多个颜色信号的至少一个中所包含的红外光成分。
根据该彩色摄像元件，由于即使红外光成分包含在颜色成分光电变换元件输出的颜色信号中也能够进行合适的颜色再现，因此在颜色成分光电变换元件的光接收面上不必要安装红外光截断过滤器。因此，由于能够排除在颜色成分光电元件的入射光中因红外光截断过滤器引起的可见光成分的损失，提高了彩色摄像元件的灵敏度。而且由于颜色成分光电变换元件的至少一个能够不仅从可见光成分还从红外光成分获得亮度信号，因此彩色摄像元件的灵敏度飞跃上升。
在本发明另一方式中，所述不同颜色成分，分别是红/绿/蓝、黄色/蓝绿色/深红色、黄色/蓝绿色/绿色以及黄色/蓝绿色/深红色/绿色之任何一个组合中所包含的3色或者4色。
在本发明另一方式中，所述颜色过滤器的至少2种是透过红外光的颜色过滤器；所述红外光成分透射过滤器，通过将所述颜色过滤器中透过红外光的颜色过滤器重叠而构成。
根据该彩色摄像元件，由于不必要另外安装红外光透射过滤器，因此能够低成本地实现高灵敏度的彩色摄像元件。
在本发明另一方式中，所述红外光成分透射过滤器通过将红色过滤器和蓝色过滤器重叠而构成。
在本发明另一方式中，所述红外光成分透射过滤器通过将黄色过滤器、蓝绿色过滤器和深红色过滤器重叠而构成。
在本发明另一方式中，所述颜色成分光电变换元件和红外光成分光电变换元件按马赛克方式二维排列。
在本发明另一方式中，所述红外光成分光电变换元件被设置在由所述颜色成分光电变换元件构成的颜色成分光接收面之摄像区域外缘的一部分上。
根据该彩色摄像元件，由于能够致密排列将用来摄像的可见光成分和红外光成分光电变换的颜色成分光电变换元件，因此能够进行高清晰度摄像，并且由于能够检测被摄体的红外光成分，选择输出用于校正红外光成分的红外光信号，因此能够进行贴切的颜色再现。
本发明的彩色信号处理电路，进行下述处理：从所述彩色摄像元件中取得所述颜色信号和红外光信号，基于所述红外光信号除去在所述颜色信号的至少一个中所包含的红外光成分。
根据该彩色信号处理电路，通过除去颜色信号中包含的红外光成分，能够进行正确的颜色再现。
再有，本发明的彩色信号处理电路，取得由所述彩色摄像元件所输出的所述颜色信号和红外光信号，基于所述红外光信号控制所述颜色信号内的至少2个信号的增益，进行颜色信号的白平衡调整。
根据该彩色信号处理电路，能够基于检测的红外光信号获得合适的白平衡。
根据本发明，由于能够有效地利用光电变换元件红外区域的灵敏度和从可见光成分和红外光成分两者获得亮度信号，因此可以提高彩色摄像装置的灵敏度。由此，当在暗环境中摄像时，输出信号S/N比提高并获得良好的画质。
根据本发明，由于不使用红外光截断过滤器而能够进行正确的颜色再现，因此能够使彩色摄像装置低成本化和小型化。
附图说明
图1是表示有关本发明施形式的彩色摄像装置10的图像信号关系的构成框图。
图2是表示有关本发明实施方式的彩色摄像元件12的构成模式图。
图3是表示一例红色过滤器36、绿色过滤器34及蓝色过滤器38的透过率与一例电荷耦合元件的光接收灵敏度的波长之依赖关系的图。
图4是表示当将红色过滤器36、绿色过滤器34、以及蓝色过滤器38与光电变换元件配置成如图2所示那样时的光电变换元件18、20、22、24之灵敏度的波长依赖关系的图。
图5是表示一例黄色Ye、深红色Mg和蓝绿色Cy过滤器的透过率与一例电荷耦合元件光接收灵敏度的波长依赖关系的图。
图6是表示当黄色Ye、深红色Mg、蓝绿色Cy的过滤器分别配置成光电变换元件时的光电变换元件灵敏度的波长依赖关系的图。
图7是表示有关本发明另一实施方式的彩色摄像元件的构成模式图。
图中：10、50-彩色摄像装置；12-彩色摄像元件；14-彩色信号处理电路；16-透镜；18、20、22、24、52-光电变换元件；26-垂直寄存器；28-水平寄存器；30-电荷电压变换电路；32-放大器；34-绿色过滤器；36-红色过滤器；38-蓝色过滤器。
具体实施方式
下面，基于附图说明用于实施本发明的最佳方式(以后称为实施方式)。
图1是表示有关本发明实施方式的彩色摄像装置10的图像信号关系的构成框图。彩色摄像装置10包括用于将入射光按颜色的强度变换成电信号并且输出的彩色摄像元件12。彩色信号处理电路14根据彩色摄像元件12输出的分色信号产生视频信号。透镜16是为了将图像成像到颜色摄像元件12的光接收面而设置的。
图2是表示有关本发明实施方式的彩色摄像元件12的结构模式图。在这里，作为彩色摄像元件12，以CCD(Charge Coupled Device：电荷耦合元件)为例进行说明。彩色摄像元件12形成了由将光变换成电信号的4个光电变换元件18、20、22、24所构成的光电变换元件块多个按二维排列，形成光接收面。光电变换元件例如由Si光电二极管构成。通过光电变换元件所变换的电荷被传输到垂直寄存器26，接着被传输到水平寄存器28。能够根据水平寄存器28传输的信号电荷通过电荷电压变换电路30被变换成电压信号。该电压信号在由源极跟随器电路等构成的放大器32中被电流放大并被输出到彩色信号处理电路14。
在由4个光电变换元件18、20、22、24构成的光电变换元件块中，为了颜色分离，在引导第一光电变换元件18之入射光的光接收面一侧设置了红色过滤器36，在引导第二光电变换元件20之入射光的光接收面一侧设置了绿色过滤器34，在引导第三光电变换元件22之入射光的光接收面一侧设置了蓝色过滤器38。将设置了不同颜色过滤器的光电变换元件二维配置成没有色偏离的阵列，称之为马赛克(mosaic)排列。
本发明的特征是在引导第四光电变换元件24之入射光的光接收面一侧设置了红外光透射过滤器，第4光电变换元件24选择输出红外光信号，其用于校正从上述第一到第三光电变换元件选择输出的色信号之至少一个所包含的红外光成分。
在本实施方式中，通过红色过滤器和蓝色过滤器之间的重叠构成了红外光透射过滤器。而且该红色过滤器是在引导第一光电变换元件18之入射光的光接收面一侧上设置的红色过滤器36延长到第四光电变换元件24的光接收面的过滤器，同样，该蓝色过滤器是在引导第三光电变换元件22之入射光的光接收面一侧上设置的蓝色过滤器38延长到第四光电变换元件24的光接收面的过滤器。根据该结构，能够通过红色过滤器和蓝色过滤器形成红外光透射过滤器而不附加新的制造工序。
图2中，尽管假设红色过滤器36和蓝色过滤器38为对由4个光电变换元件构成的光电变换元件块之每个所形成的形状，但如果红色过滤器36和蓝色过滤器38分别与引导第一光电变换元件18和第四光电变换元件24之入射光的光接收面相设置以及与引导第三光电变换元件22和第四光电变换元件24之入射光的光接收面相设置，则形状为哪种形状都是可以的。例如，红色过滤器36可以在二维排列的光电变换元件的一列上连续形成为一体，而蓝色过滤器38可以在二维排列的光电变换元件的一行上连续形成为一体。
图3表示红色过滤器36、绿色过滤器34及蓝色过滤器38的透过率之波长分布的一个例子，还表示了光电变换元件光接收灵敏度的波长依赖关系的一个例子。红色过滤器36不透过比550nm短的波长的光，但对于比550nm长的波长的光具有高透过率。绿色过滤器34从比450nm长的波长的光开始其透过性增加，在绿色即520nm处具有峰值，比650nm长的波长的光的透过性变成几乎没有，但对于红外800nm或者以上之波长的光，其再次具有高的透过率。蓝色过滤器38从比380nm长的波长的光开始其透过性增加，在蓝色即460nm处具有峰值，比550nm长的波长的光的透过性变成几乎没有，但对于红外750nm或者以上之波长的光，其再次具有高的透过率。另一方面，光电变换元件在500nm具有最大灵敏度，在超过可见光区的780nm、直到1100nm的红外区域仍具有灵敏度。
图4表示了当将具有上述透过波长分布的红色过滤器36、绿色过滤器34、以及蓝色过滤器38与光电变换元件配置成如图2所示那样时的光电变换元件18、20、22、24之灵敏度的波长依赖关系。
第一光电变换元件18由于将红色过滤器36设置在引导入射光的光接收面一侧而具有在红色600nm处为峰值的灵敏度分布，并且光电变换元件18直到红外区域仍然有灵敏度。第二光电变换元件20由于将绿色过滤器34设置在引导入射光的光接收面一侧而在可见光区具有在绿色520nm处为峰值的灵敏度分布，并且由于绿色过滤器34透过红外区域的光，其在红外区域也有灵敏度。第三光电变换元件22由于将蓝色过滤器38设置在引导入射光的光接收面一侧而在可见光区具有在蓝色460nm处为峰值的灵敏度分布，并且由于蓝色过滤器38透过红外区域的光，其在红外区域也有灵敏度。第四光电变换元件24由于将红色过滤器36和蓝色过滤器38重叠设置在引导入射光的光接收面一侧而在可见光区几乎没有灵敏度，但在波长780nm或者以上的红外区域具有最高的灵敏度。
因此，第一光电变换元件18光电变换红色和红外区域的光并输出信号R，第二光电变换元件20光电变换绿色和红外区域的光并输出信号G，第三光电变换元件22光电变换蓝色和红外区域的光并输出信号B，第四光电变换元件24光电变换红外区域的光并输出信号IR。
在有关本发明实施方式的彩色摄像元件12中，由于在将可见光区域的三基色光电变换的第一、第二和第三光电变换元件18、20、22的光接收面上没有介入使入射光在受到损失的红外光截断过滤器，因此能够有效地光电变换来自被摄体的光。而且，由于第一、第二和第三光电变换元件18、20、22光电变换可见光成分和红外光成分两者，能够从可见光成分和红外光成分两者中获得亮度信号，因此与只接收可见光成分的现有技术彩色摄像元件相比，提高了灵敏度。
由于第一、第二和第三光电变换元件18、20、22的输出信号R、G、B包含红外光成分，如果原样直接进行信号处理，将不能正确进行颜色再现。因此，彩色信号处理电路14基于来自第四光电变换元件24的红外光成分输出信号IR来进行信号处理，从来自第一、第二和第三光电变换元件18、20、22的包含红外光成分的输出信号R、G、B中除去红外光成分。作为除去了红外光成分的信号处理，例如，进行通过乘以第四光电变换元件24的灵敏度对第一光电变换元件18红外区域的灵敏度之比而从输出信号R中减去IR的运算。通过在包含红外光成分的信号上进行这种信号处理，能够进行通过获得三基色信号的合适的颜色再现。
彩色信号处理电路14例如在色信号的白平衡调整中，优选为基于红外信号IR，通过将绿色信号G的增益作为基准来控制红色信号R和蓝色信号B的增益而进行彩色信号处理。对于色信号的白平衡调整，例如在红外信号IR比规定信号量大时，进行使红外信号R的增益只比规定量小而使蓝色信号B的增益只比规定量大的控制。相反，在红外信号IR比规定信号量小时，进行使红外信号R的增益和蓝色信号B的增益变成相等的控制。
上面作为彩色摄像元件12，虽然以CCD为例进行了说明，但只要是CCD，电荷传输方法可以是任何方法，例如，可以是FT(Frame Transfer：帧传输)方式、IT(Interline Transfer：行间传输)方式、FIT(Frame InterlineTransfer：帧行间传输)方式。本发明的彩色摄像元件12不局限于CCD，即使为CMOS(Complementary Metal Oxide Semiconductor：互补金属氧化物半导体)也能够同样构成。
在根据本发明实施方式的彩色摄像元件12中，尽管将色分离做成光的三基色即红、绿、蓝，但也可以分离成补色之黄色Ye、深红色Mg、蓝绿色Cy之组合的颜色，黄色Ye、蓝绿色Cy、绿色G之组合的颜色，或者黄色Ye、蓝绿色Cy、深红色Mg、绿色G之组合的颜色。此时，代替红色过滤器、蓝色过滤器和绿色过滤器，将黄色过滤器、深红色过滤器、蓝绿色过滤器配置在光电变换元件的光接收面上。这种情况下，这些过滤器的排列做成补色方格花纹色差顺序排列或者补色方格花纹排列以代替基色贝叶(Bayer)排列。
图5表示补色系列过滤器组合的黄色Ye、深红色Mg、蓝绿色Cy过滤器的透过率的波长分布的一个例子，还表示一例电荷耦合元件光接收灵敏度的波长依赖关系。黄色Ye过滤器很好地透过比480nm长的波长的光，而深红色Mg过滤器虽然很好地透过450nm以下和620nm以上的波长的光，但几乎不透过从500nm到570nm波长的光，蓝绿色Cy过滤器虽然很好地透过550nm以下和850nm以上的波长的光，但几乎不透过从600nm到800nm波长的光。
图6表示了当具有上述透过波长分布的黄色Ye、深红色Mg、蓝绿色Cy的过滤器分别配置成光电变换元件时的光电变换元件灵敏度的波长依赖关系。设置了黄色Ye过滤器的光电变换元件具有在黄色520nm处具有峰值的灵敏度分布，并且直到红外区域仍有灵敏度。设置了深红色Mg过滤器的光电变换元件在420nm处具有第一灵敏度峰值，从500nm到570nm几乎没有灵敏度，在650nm具有第二灵敏度峰值之后直到红外区域仍有灵敏度。设置了蓝绿色Cy过滤器的光电变换元件在500nm处具有灵敏度峰值，从600nm到800nm几乎没有灵敏度，但从800nm开始灵敏度上升，在850nm有峰值，直到红外区域仍有灵敏度。
此时，在只光电变换红外区域光且选择输出信号IR的第四光电变换元件24的光接收面上通过重叠黄色Ye、深红色Mg和蓝绿色Cy过滤器来形成红外光透射过滤器。此时的第四光电变换元件24如图6所示在可见光区几乎没有灵敏度，在波长800nm或者以上的红外区域具有最高灵敏度。如上所述，在作为补色系列色分离的过滤器结构的情况下，也和有关红色、绿色、蓝色之色分离的过滤器结构实施方式的彩色摄像元件12同样，可以适用本发明。
图7是表示有关本发明另一实施方式的彩色摄像元件50的结构模式图。彩色摄像元件50是IT方式CCD，其在包括现有技术基色贝叶排列的片上颜色过滤器的光接收面外端即摄像面右端上，具有用于只光电变换红外光的光电变换元件52。在第一光电变换元件18的光接收面一侧上设置了引导入射光的红色过滤器36，在第2光电变换元件20和第四光电变换元件24的光接收面一侧上设置了引导入射光的绿色过滤器34，在第三光电变换元件22的光接收面一侧上设置了引导入射光的蓝色过滤器38。
在光电变换元件52的光接收面一侧上设置了引导入射光的红外透射过滤器，只有红外光入射到光电变换元件52。红外透射过滤器例如通过红色过滤器36和蓝色过滤器38的重叠构成。光电变换元件52选择输出用于校正在第一、第二、第三和第四光电变换元件18、20、22和24之输出信号R、G、B中包含的红外光成分的红外信号IR。
来自本实施方式彩色摄像元件50的输出信号在各个水平行信号的每个周期上包含红外光信号IR。输入了来自彩色摄像元件50之输出信号的彩色信号处理电路14例如在IR超过预定强度时，判断在摄像信号R、G、B上红外光成分多，并且从预定的色信号处理图形(pattern)中选择红外光成分强的适用于被摄体的色信号图形(pattern)，并进行该选择图形的色信号处理。
根据该彩色摄像元件50，由于能够致密排列检测可见光区域三基色的第一、第二、第三和第四光电变换元件18、20、22、24，因此能够进行高清晰度摄像，由于在第一、第二、第三和第四光电变换元件18、20、22、24的光接收面上没有接入使入射光受到损失的红外光截断过滤器，因此能够有效地光电变换来自被摄体的光。而且，由于第一、第二、第三和第四光电变换元件18、20、22、24光电变换可见光成分和红外光成分两者，能够从可见光成分和红外光成分两者中获得亮度信号，因此与只接收可见光成分的现有技术彩色摄像象素相比，提高了灵敏度。由于能够检测和选择输出红外光，通过在色信号的白平衡调整中，基于红外信号IR，将绿色信号的增益作为基准来控制红色信号和蓝色信号的增益使得能够从包含红外光成分的红色信号、绿色信号、蓝色信号中减少红外光成分影响而进行彩色信号处理，从而能够进行合适的颜色再现。

Claims (7)

1.一种彩色信号处理电路，其特征在于，
取得由彩色摄像元件所输出的颜色信号和红外光信号，基于所述红外光信号控制所述颜色信号内的至少2个信号的增益，进行颜色信号的白平衡调整，所述彩色摄像元件包括：
多个颜色成分光电变换元件，在光接收面分别设置有分别透过不同颜色成分的颜色过滤器，接收入射光，分别选择输出与所述不同颜色成分强度对应的颜色信号；和
红外光成分光电变换元件，在光接收面设置透过红外光成分的红外光成分透射过滤器，选择输出红外光信号，该红外光信号用来校正在所述多个颜色信号的至少一个中所包含的红外光成分。
2.根据权利要求1所述的彩色信号处理电路，其特征在于，
所述不同颜色成分分别是红/绿/蓝，
使绿色信号(G)的增益成为基准，控制红色信号(R)和蓝色信号(B)的增益。
3.根据权利要求2所述的彩色信号处理电路，其特征在于，在所述红外光信号比规定的信号量大的情况下，进行使所述红色信号的增益仅小第一规定量、使蓝色信号的增益仅大第二规定量的控制。
4.根据权利要求2所述的彩色信号处理电路，其特征在于，在所述红外光信号比规定的信号量小的情况下，进行使所述红色信号的增益和所述蓝色信号的增益变成相等的控制。
5.根据权利要求1所述的彩色信号处理电路，其特征在于，所述不同颜色成分分别是黄色/蓝绿色/深红色、黄色/蓝绿色/绿色以及黄色/蓝绿色/深红色/绿色之任何一个组合中所包含的3色或者4色。
6.一种彩色信号处理电路，其特征在于，
取得由彩色摄像元件所输出的颜色信号和红外光信号，其中，所述彩色摄像元件包括：
多个颜色成分光电变换元件，在光接收面分别设置有分别透过不同颜色成分的颜色过滤器，接收入射光，分别选择输出与所述不同颜色成分强度对应的颜色信号；和
红外光成分光电变换元件，在光接收面设置透过红外光成分的红外光成分透射过滤器，选择输出红外光信号，该红外光信号用来校正在所述多个颜色信号的至少一个中所包含的红外光成分，
通过从所述颜色信号的每一个中减去根据颜色过滤器的红外光成分的灵敏度和所述红外光成分透射过滤器的红外光成分的灵敏度之比而对所述红外光信号乘以系数所得的值，来补正红外光成分。
7.根据权利要求6所述的彩色信号处理电路，其特征在于，所述颜色成分光电变换元件和红外光成分光电变换元件按马赛克方式二维排列。
CNA2007101994974A 2003-12-22 2004-12-10 彩色摄像元件和彩色信号处理电路 Pending CN101188775A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2003425708 2003-12-22
JP2003425708A JP4286123B2 (ja) 2003-12-22 2003-12-22 カラー撮像素子およびカラー信号処理回路

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN200410100288.6A Division CN1638137A (zh) 2003-12-22 2004-12-10 彩色摄像元件和彩色信号处理电路

Publications (1)

Publication Number Publication Date
CN101188775A true CN101188775A (zh) 2008-05-28

Family

ID=34675435

Family Applications (2)

Application Number Title Priority Date Filing Date
CNA2007101994974A Pending CN101188775A (zh) 2003-12-22 2004-12-10 彩色摄像元件和彩色信号处理电路
CN200410100288.6A Pending CN1638137A (zh) 2003-12-22 2004-12-10 彩色摄像元件和彩色信号处理电路

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN200410100288.6A Pending CN1638137A (zh) 2003-12-22 2004-12-10 彩色摄像元件和彩色信号处理电路

Country Status (4)

Country Link
US (1) US7170046B2 (zh)
JP (1) JP4286123B2 (zh)
CN (2) CN101188775A (zh)
TW (1) TWI249950B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8666153B2 (en) 2008-11-04 2014-03-04 Konica Minolta Opto, Inc. Image input apparatus

Families Citing this family (53)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1788627A1 (en) 2004-06-30 2007-05-23 Toppan Printing Co., Ltd. Imaging element
JP2006217441A (ja) * 2005-02-07 2006-08-17 Sanyo Electric Co Ltd 色信号処理方法
JP2006237738A (ja) * 2005-02-22 2006-09-07 Sanyo Electric Co Ltd 色信号処理方法
JP2006237737A (ja) * 2005-02-22 2006-09-07 Sanyo Electric Co Ltd カラーフィルタアレイ及び固体撮像素子
US7435962B2 (en) * 2005-05-18 2008-10-14 Avago Technologies Ecbu Ip (Singapore) Pte. Ltd. Imaging device and method for producing an infrared filtered digital image
JP4984634B2 (ja) * 2005-07-21 2012-07-25 ソニー株式会社 物理情報取得方法および物理情報取得装置
CN1971927B (zh) * 2005-07-21 2012-07-18 索尼株式会社 物理信息获取方法、物理信息获取装置和半导体器件
JP4804062B2 (ja) * 2005-07-29 2011-10-26 オリンパス株式会社 内視鏡システム
JP4730082B2 (ja) * 2005-12-22 2011-07-20 ソニー株式会社 画像信号処理装置、撮像装置、および画像信号処理方法、並びにコンピュータ・プログラム
US7821552B2 (en) * 2005-12-27 2010-10-26 Sanyo Electric Co., Ltd. Imaging apparatus provided with imaging device having sensitivity in visible and infrared regions
JP4466569B2 (ja) * 2006-01-10 2010-05-26 株式会社豊田中央研究所 カラー画像再生装置
JP5028279B2 (ja) 2006-01-24 2012-09-19 パナソニック株式会社 固体撮像装置及びカメラ
US7419844B2 (en) * 2006-03-17 2008-09-02 Sharp Laboratories Of America, Inc. Real-time CMOS imager having stacked photodiodes fabricated on SOI wafer
JP4867448B2 (ja) * 2006-04-18 2012-02-01 ソニー株式会社 物理情報取得方法および物理情報取得装置
KR101276757B1 (ko) 2006-05-26 2013-06-20 삼성전자주식회사 이미지 촬상 장치, 및 그 동작 방법
KR20070115243A (ko) * 2006-06-01 2007-12-05 삼성전자주식회사 이미지 촬상 장치, 및 그 동작 방법
JP5261892B2 (ja) * 2006-07-11 2013-08-14 凸版印刷株式会社 赤外線領域の光センサ、フィルタおよびフィルタ製造方法
US7773136B2 (en) * 2006-08-28 2010-08-10 Sanyo Electric Co., Ltd. Image pickup apparatus and image pickup method for equalizing infrared components in each color component signal
US7737394B2 (en) 2006-08-31 2010-06-15 Micron Technology, Inc. Ambient infrared detection in solid state sensors
US8848047B2 (en) * 2006-09-28 2014-09-30 Fujifilm Corporation Imaging device and endoscopic apparatus
KR101365491B1 (ko) * 2006-11-17 2014-02-24 삼성디스플레이 주식회사 디스플레이장치
US7924272B2 (en) * 2006-11-27 2011-04-12 Microsoft Corporation Infrared sensor integrated in a touch panel
US7960807B2 (en) 2007-02-09 2011-06-14 Intersil Americas Inc. Ambient light detectors using conventional CMOS image sensor process
JP4999494B2 (ja) * 2007-02-28 2012-08-15 オンセミコンダクター・トレーディング・リミテッド 撮像装置
KR100877069B1 (ko) * 2007-04-23 2009-01-09 삼성전자주식회사 이미지 촬상 장치 및 방법
JP5184016B2 (ja) 2007-09-12 2013-04-17 オンセミコンダクター・トレーディング・リミテッド 撮像装置
US7675024B2 (en) * 2008-04-23 2010-03-09 Aptina Imaging Corporation Method and apparatus providing color filter array with non-uniform color filter sizes
KR101475464B1 (ko) * 2008-05-09 2014-12-22 삼성전자 주식회사 적층형 이미지 센서
JP5333964B2 (ja) * 2008-06-27 2013-11-06 株式会社ジャパンディスプレイ 光検出装置、電気光学装置及び電子機器
JP2010258636A (ja) * 2009-04-23 2010-11-11 Alps Electric Co Ltd 撮像素子ユニット
JP5874116B2 (ja) 2009-07-30 2016-03-02 国立研究開発法人産業技術総合研究所 画像撮影装置および画像撮影方法
US20110068426A1 (en) * 2009-09-22 2011-03-24 Intersil Americas Inc. Photodiodes and methods for fabricating photodiodes
JP2011166477A (ja) * 2010-02-10 2011-08-25 Konica Minolta Opto Inc 固体撮像素子及び画像入力装置
US9735303B2 (en) * 2010-03-25 2017-08-15 Nri R&D Patent Licensing, Llc Color imaging using color OLED or LED array as color light-field imaging sensor
JP5432075B2 (ja) * 2010-07-06 2014-03-05 パナソニック株式会社 撮像装置および色温度算出方法
US8598672B2 (en) * 2011-01-26 2013-12-03 Maxim Integrated Products, Inc Light sensor having IR cut interference filter with color filter integrated on-chip
US8780161B2 (en) * 2011-03-01 2014-07-15 Hewlett-Packard Development Company, L.P. System and method for modifying images
CN103597316A (zh) * 2011-07-22 2014-02-19 三洋电机株式会社 信息取得装置以及物体检测装置
WO2013069691A1 (ja) * 2011-11-11 2013-05-16 オリンパスメディカルシステムズ株式会社 色信号伝送装置、無線映像伝送システム及び送信装置
JP5408325B2 (ja) * 2012-10-19 2014-02-05 オムロン株式会社 光電センサ、光電センサの受光ユニットおよび光電センサの投光ユニット
US8779542B2 (en) 2012-11-21 2014-07-15 Intersil Americas LLC Photodetectors useful as ambient light sensors and methods for use in manufacturing the same
JP6029954B2 (ja) * 2012-11-30 2016-11-24 クラリオン株式会社 撮像装置
CN104937386B (zh) * 2013-03-29 2017-07-04 松下电器（美国）知识产权公司 推断装置、推断方法、集成电路以及程序
KR102071325B1 (ko) * 2013-09-27 2020-04-02 매그나칩 반도체 유한회사 조도와 물체의 거리를 측정하는 광 센서
US10348990B2 (en) 2014-04-14 2019-07-09 Sharp Kabushiki Kaisha Light detecting device, solid-state image capturing apparatus, and method for manufacturing the same
US9300937B2 (en) * 2014-06-26 2016-03-29 Pixart Imaging (Penang) Sdn, Bhd. Color image sensor and operating method thereof
US10113903B1 (en) * 2014-09-02 2018-10-30 Amazon Technologies, Inc. Ambient light sensor calibration
US9666620B2 (en) * 2014-10-06 2017-05-30 Visera Technologies Company Limited Stacked filter and image sensor containing the same
US9859318B2 (en) * 2014-10-22 2018-01-02 Omnivision Technologies, Inc. Color and infrared image sensor with depletion adjustment layer
WO2016188555A1 (en) 2015-05-22 2016-12-01 Irnova Ab Infrared imaging detector
US10416511B2 (en) * 2016-08-31 2019-09-17 Panasonic Liquid Crystal Display Co., Ltd. Liquid crystal display device
KR102610542B1 (ko) 2019-03-07 2023-12-07 삼성전자주식회사 적외선 센서를 이용하여 이미지 데이터의 색상을 조절하기 위한 전자 장치 및 방법
JP7286412B2 (ja) * 2019-05-22 2023-06-05 キヤノン株式会社 画像処理装置およびその制御方法、撮像装置、監視システム

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69329186T2 (de) * 1993-01-01 2001-04-05 Canon Kk Bildlesevorrichtung
JPH11239356A (ja) 1998-02-24 1999-08-31 Sanyo Electric Co Ltd 白黒／カラー切換カメラ
US6211521B1 (en) * 1998-03-13 2001-04-03 Intel Corporation Infrared pixel sensor and infrared signal correction
US6657663B2 (en) * 1998-05-06 2003-12-02 Intel Corporation Pre-subtracting architecture for enabling multiple spectrum image sensing
TW423252B (en) 1998-07-30 2001-02-21 Intel Corp Infrared correction system

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8666153B2 (en) 2008-11-04 2014-03-04 Konica Minolta Opto, Inc. Image input apparatus

Also Published As

Publication number Publication date
TWI249950B (en) 2006-02-21
CN1638137A (zh) 2005-07-13
US7170046B2 (en) 2007-01-30
JP2005184690A (ja) 2005-07-07
TW200526032A (en) 2005-08-01
US20050133690A1 (en) 2005-06-23
JP4286123B2 (ja) 2009-06-24

Similar Documents

Publication Publication Date Title
CN101188775A (zh) 彩色摄像元件和彩色信号处理电路
US11310471B2 (en) Digital cameras with direct luminance and chrominance detection
US20070272836A1 (en) Photoelectric conversion apparatus
US20180270462A1 (en) Imaging processing device and imaging processing method
JP4453189B2 (ja) 撮像装置
WO2017193738A1 (zh) 图像传感器、成像方法和成像装置
EP2664153B1 (en) Imaging system using a lens unit with longitudinal chromatic aberrations and method of operating
US7367537B2 (en) Color-image pickup device in which an R picture signal is relatively enhanced with distance from center of light-reception area
US8125543B2 (en) Solid-state imaging device and imaging apparatus with color correction based on light sensitivity detection
US8405748B2 (en) CMOS image sensor with improved photodiode area allocation
CN105451006B (zh) 彩色滤光器阵列、图像传感器以及用于减少光谱串扰的方法
US8294797B2 (en) Apparatus and method of generating a high dynamic range image
CN106612420B (zh) 彩色滤光器阵列及图像传感器
CN102484722B (zh) 图像捕获装置
US20080079828A1 (en) Solid-state image sensor
CN1441603A (zh) 四色图像感测装置
CN106878690A (zh) 图像传感器的成像方法、成像装置和电子设备
CN113711584B (zh) 一种摄像装置
CN102859995B (zh) 成像装置和驱动固态成像器件的方法
CN101742103A (zh) 固体摄像器件
CN106688098A (zh) 固态成像器件、成像装置以及电子设备
US20020140832A1 (en) Optimization of CCD microlens size for color balancing
JPS6351436B2 (zh)
Skorka et al. Color correction for RGB sensors with dual-band filters for in-cabin imaging applications
CN108024035B (zh) 成像装置和方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Open date: 20080528