KR101411548B1 - 이미지 센서, 컬러 필터 어레이, 및 촬상 장치 - Google Patents
이미지 센서, 컬러 필터 어레이, 및 촬상 장치 Download PDFInfo
- Publication number
- KR101411548B1 KR101411548B1 KR1020070112303A KR20070112303A KR101411548B1 KR 101411548 B1 KR101411548 B1 KR 101411548B1 KR 1020070112303 A KR1020070112303 A KR 1020070112303A KR 20070112303 A KR20070112303 A KR 20070112303A KR 101411548 B1 KR101411548 B1 KR 101411548B1
- Authority
- KR
- South Korea
- Prior art keywords
- output
- pixel
- filter
- green
- filter pixel
- Prior art date
Links
- 230000003595 spectral effect Effects 0.000 claims description 33
- 238000000034 method Methods 0.000 claims description 21
- 238000006243 chemical reaction Methods 0.000 claims description 5
- 239000000049 pigment Substances 0.000 claims description 4
- 230000003287 optical effect Effects 0.000 abstract description 49
- 238000010586 diagram Methods 0.000 description 22
- 239000013598 vector Substances 0.000 description 15
- 230000008859 change Effects 0.000 description 13
- 230000008569 process Effects 0.000 description 13
- 230000000694 effects Effects 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 5
- 206010034960 Photophobia Diseases 0.000 description 4
- 238000000862 absorption spectrum Methods 0.000 description 4
- 208000013469 light sensitivity Diseases 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 3
- 230000003321 amplification Effects 0.000 description 2
- 238000003491 array Methods 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000035945 sensitivity Effects 0.000 description 2
- 206010034972 Photosensitivity reaction Diseases 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000036211 photosensitivity Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000004148 unit process Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
- H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
- H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
- H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/80—Camera processing pipelines; Components thereof
- H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2209/00—Details of colour television systems
- H04N2209/04—Picture signal generators
- H04N2209/041—Picture signal generators using solid-state devices
- H04N2209/042—Picture signal generators using solid-state devices having a single pick-up sensor
- H04N2209/045—Picture signal generators using solid-state devices having a single pick-up sensor using mosaic colour filter
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Power Engineering (AREA)
- Electromagnetism (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
본 발명에 따른 이미지 센서는, 광원으로부터 입사된 광학 신호를 집광하는 마이크로렌즈, 상기 마이크로렌즈를 통과한 광학 신호를 입력받아, 일정 영역 주파수의 광학 신호만을 통과시키는 컬러 필터 어레이, 및 상기 컬러 필터 어레이로부터 광학 신호를 입력받아, 입사된 상기 광학 신호의 세기에 따라 전기적 신호를 발생시키는 광감지소자를 포함하고, 상기 컬러 필터 어레이는 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀을 포함하고, 상기 옐로우 필터 픽셀을 스트라이프(stripe) 장으로 배치하고, 상기 옐로우 필터 픽셀 간에 수평 라인마다 상기 그린 필터 픽셀 및 상기 시안 필터 픽셀을 상기 스트라이프 장 방향으로 교대로 배치한다. 바람직하게는, 상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀의 면적 비율은 2:1:1이다.
Description
본 발명은 촬상 장치에 관한 것으로, 특히 픽셀 간 크로스토크의 영향을 저감하는 이미지 센서, 컬러 필터 어레이, 및 촬상 장치에 관한 것이다.
촬상 장치는 광학 신호를 전기적인 신호로 변환시키는 장치이다. 촬상 장치는 이를 위해 광학 신호를 전기적인 신호로 변환시키는 광감지소자를 구비한다. 이는 광감지소자의 종류에 따라 CCD(Charge-coupled device)와 CIS(CMOS image sensor) 등으로 분류된다. CIS 형은 CCD 형에 비해 저전압 동작이 가능하고 소비전력이 작으며, CMOS(Complimentary metal oxide semiconductor) 공정을 사용하고, 집적화에 유리한 장점으로 인해 CCD 형을 대체하여 현재 많은 분야에서 사용되고 있다.
CIS형 고체 촬상 소자는 휴대폰 카메라(mobile camera), 디지털 스틸 카메라(digital still camera) 등에 장착되어, 시야에 전개되는 영상을 촬상하여 전기적 신호로 변환하여, 디지털 신호 처리부로 전송한다. 디지털 신호 처리부는 고체 촬상 소자에서 출력되는 컬러 이미지 데이터(R, G, B 데이터)를 신호 처리하여 LCD(liquid crystal display)와 같은 디스플레이 장치를 구동한다.
광감지소자는 일반적으로 광학 신호의 세기만을 측정할 뿐 분광 특성은 감지할 수 없기 때문에 컬러 필터를 통해 일정 영역 주파수의 광학 신호만을 통과시켜 소정의 개수의 주파수 영역에 대해 각각 컬러 필터 및 광감지소자를 구비하여, 각 주파수 영역에 대한 광학 신호의 세기를 구하고 이로부터 컬러 이미지 데이터(R, G, B 데이터)를 얻는다.
본 발명이 해결하고자 하는 과제는 휘도 성분이 많은 그린 계열의 주파수 영역을 포함하는 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀을 이용하여 광감도를 향상시킨 컬러 필터 어레이 및 이를 포함하는 이미지 센서 및 촬상 장치를 제공하는데 있다.
본 발명이 해결하고자 하는 또 다른 과제는 픽셀간의 크로스토크 영향을 감소시키기 위하여 크로스토크로 인한 색의 변화를 미리 보상하는 컬러 필터 어레이 및 이를 포함하는 이미지 센서 및 촬상 장치를 제공하는데 있다.
상기 기술적 과제를 해결하기 위한 본 발명에 따른 이미지 센서는, 광원으로부터 입사된 광학 신호를 집광하는 마이크로렌즈, 상기 마이크로렌즈를 통과한 광학 신호를 입력받아, 일정 영역 주파수의 광학 신호만을 통과시키는 컬러 필터 어레이, 및 상기 컬러 필터 어레이로부터 광학 신호를 입력받아, 입사된 상기 광학 신호의 세기에 따라 전기적 신호를 발생시키는 광감지소자를 포함하고, 상기 컬러 필터 어레이는 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀을 포함하고, 상기 옐로우 필터 픽셀을 스트라이프(stripe) 장으로 배치하고, 상기 옐로우 필터 픽셀 간에 수평 라인마다 상기 그린 필터 픽셀 및 상기 시안 필터 픽셀을 상기 스트라이프 장 방향으로 교대로 배치한다. 바람직하게는, 상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀의 면적 비율은 2:1:1이다.
또한, 상기 컬러 필터 어레이는 2행 2열 형태로 배치된 4개의 서브 픽셀을 포함하는 단위 픽셀들로 이루어지고, 상기 단위 픽셀은, 세로 방향으로 일렬 배치된 2개의 상기 옐로우 필터 픽셀, 및 나머지 2개의 상기 서브 픽셀에 각각 배치된 상기 그린 필터 픽셀 및 상기 시안 필터 픽셀을 포함한다.
상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀은 인접 서브 픽셀에 의한 크로스토크의 영향이 상쇄되도록 상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀의 안료 성분의 종류 및 비율을 조절하여 분광 특성이 미리 보상된다.
한편, 상기 이미지 센서는 CIS(CMOS Image Sensor)일 수 있다.
상기 기술적 과제를 해결하기 위한 본 발명에 따른 컬러 필터 어레이는, 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀을 포함하고, 상기 옐로우 필터 픽셀을 스트라이프(stripe) 장으로 배치하고, 상기 옐로우 필터 픽셀 간에 수평 라인마다 상기 그린 필터 픽셀 및 상기 시안 필터 픽셀을 상기 스트라이프 장 방향으로 교대로 배치한다. 바람직하게는, 상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀의 면적 비율이 2:1:1이다.
또한, 상기 컬러 필터 어레이는 2행 2열 형태로 배치된 4개의 서브 픽셀을 포함하는 단위 픽셀들로 이루어지고, 상기 단위 픽셀은, 세로 방향으로 일렬 배치된 2개의 상기 옐로우 필터 픽셀, 및 나머지 2개의 상기 서브 픽셀에 각각 배치된 상기 그린 필터 픽셀 및 상기 시안 필터 픽셀을 포함한다.
상기 기술적 과제를 해결하기 위한 본 발명에 따른 촬상 장치는, 각각의 상 기 단위 픽셀들로부터 출력된 신호를 레드 출력, 그린 출력, 및 블루 출력으로 변환하여 출력하는 신호 처리부를 포함한다. 상기 신호 처리부는, 단위 픽셀로부터 출력된 출력 신호를 입사광의 휘도로 출력하는 휘도 출력부, 및 상기 그린 필터 픽셀이 배치된 상기 서브 픽셀로부터 출력된 출력 신호를 임시 그린 출력으로 출력하고, 상기 옐로우 필터 픽셀이 배치된 상기 서브 픽셀로부터 출력된 출력 신호로부터 상기 임시 그린 출력을 감산한 신호를 임시 레드 출력으로 출력하고, 상기 시안 필터 픽셀이 배치된 상기 서브 픽셀로부터 출력된 출력 신호로부터 상기 임시 그린 출력을 감산한 신호를 임시 블루 출력으로 출력하는 색 변환부를 포함한다.
상기 휘도 출력부는 저역통과필터를 구비하고, 상기 단위 픽셀로부터 출력된 신호를 상기 저역통과필터에 통과시켜 휘도로 출력한다.
본 발명의 다른 실시예에 따른 촬상 장치는 상기 색 변환부로부터 출력된 상기 임시 그린 출력, 상기 임시 레드 출력, 및 상기 임시 블루 출력을 선형 결합하여 색의 순도를 높인 그린 출력, 레드 출력, 및 블루 출력을 출력하는 색 보정부를 더 포함할 수 있다.
또한, 상기 색 보정부의 출력의 화이트밸런스로 색 온도를 검출하고, 상기 색 온도로부터 색차 신호를 검출하여 상기 그린 출력, 상기 레드 출력, 및 상기 블루 출력의 색 온도를 보정하여 출력하는 색 온도 보정부를 더 포함할 수 있다.
본 발명은 휘도 성분이 많은 그린 계열의 주파수 영역을 포함하는 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀을 이용함으로써 광감도를 향상시키 고, SNR을 증가시킨 효과가 있다.
또한, 크로스토크의 영향을 미리 보정함으로써 디지털 신호 처리부에서의 증폭률을 낮춰 노이즈의 증폭을 방지하고, 색 재현성을 높이는 효과가 있다.
본 발명과 본 발명의 동작상의 이점 및 본 발명의 실시에 의하여 달성되는 목적을 충분히 이해하기 위해서는 본 발명의 바람직한 실시예를 예시하는 첨부 도면 및 도면에 기재된 내용을 참조하여야 한다.
이하, 첨부한 도면을 참조하여 본 발명의 바람직한 실시예를 설명함으로써, 본 발명을 상세히 설명한다. 각 도면에 제시된 동일한 참조부호는 동일한 부재를 나타낸다.
도 1은 이미지 센서의 단면도이다.
이미지 센서(100)는 광원으로부터 입사된 빛을 집광하는 마이크로렌즈(110), 마이크로 렌즈를 통과한 빛을 입력받아, 일정 영역 주파수의 광학 신호만을 통과시키는 컬러 필터 어레이(120, 122), 광감지소자(140) 이외의 영역으로 광학 신호가 입사되는 것을 방지하기 위한 광차폐층(130), 및 컬러 필터 어레이(120, 122)로부터 광학 신호를 입력받아, 입사된 광학 신호의 세기에 따라 전기적 신호를 발생시키는 광감지소자(140)를 포함한다.
광감지소자(140)는 광학 신호의 세기만을 감지할 뿐, 광학 신호의 주파수 특성을 감지할 수 없기 때문에, 컬러 필터 어레이(120, 122)에서 각각의 광감지소자(140)에 특정 영역 주파수의 광학 신호만을 통과시켜 전달하고, 광감지소자(140) 는 입사된 광학 신호의 주파수 영역에 대한 광학 신호의 세기에 따라 전기적 신호를 발생시킨다. 예를들면 일정 문턱값 이상에서 광학 신호의 세기가 커질수록 광감지소자(140)에서 발생하는 전류의 크기가 증가한다. 광감지소자(140)는 광학 신호를 전기적 신호로 변환할 수 있는 소자라면 어떠한 소자라도 가능하고, 예를들면 포토다이오드가 있다.
도 2a 내지 도 2b는 본 발명에 따른 컬러 필터 어레이의 구조를 나타내는 도면이다.
본 발명에 따른 컬러 필터 어레이(200)는 옐로우 필터 픽셀(210), 시안 필터 픽셀(220), 및 그린 필터 픽셀(230), 및 광감지소자 어레이(250)를 구비한다. 도 2a는 옐로우 필터 픽셀(210), 시안 필터 픽셀(220), 및 그린 필터 픽셀(230)을 서로 다른 평면상에 도시하였으나, 이는 단지 설명을 위한 것이고, 실제로는 도 2b에 도시된 바와 같이 옐로우 필터 픽셀(210), 시안 필터 픽셀(220), 및 그린 필터 픽셀(230) 모두 하나의 평면에 존재한다.
각각의 옐로우 필터 픽셀(210), 시안 필터 픽셀(220), 및 그린 필터 픽셀(230)은 광감지소자 어레이(250) 상의 각각의 광감지소자(252)에 대응된다.
본 발명에 따른 컬러 필터 어레이(200)는 4개의 서브 픽셀(242, 244, 246, 및 248)로 이루어진 단위 픽셀들(240_1, 240_2, 240_3, 및 240_4)이 반복된 형태로 이루어진다. 각각의 서브 픽셀(242, 244, 246, 및 248)은 일정 면적의 컬러 필터를 구비한다. 각각의 단위 픽셀(240_1, 240_2, 240_3, 및 240_4)에 구비된 4개의 서브 픽셀은 두 개의 옐로우 필터 픽셀(242 및 248), 한 개의 시안 필터 픽셀(244), 및 한 개의 그린 필터 픽셀(246)에 대응된다. 이 세 종류의 색 필터는 모두 그린 성분을 포함하기 때문에, 입사광의 휘도 성분이 많이 통과하여 감도를 향상시키는 효과가 있다. 특히 고화질 이미지를 얻기 위하여 이미지 센서의 픽셀을 고집적하면서, 이미지 센서 내의 셀 사이즈가 감소하여 하나의 픽셀 당 입력되는 광학 신호의 크기가 작아지고, 이를 위해 신호를 증폭하면서 SNR이 감소하는 문제가 발생하는데, 본 발명에 따른 컬러 필터 어레이는 휘도 성분을 보다 많이 통과시킴으로써, 고집적 이미지 센서의 성능을 향상시킬 수 있다.
각각의 단위 픽셀(240)에 포함된 4개의 서브 픽셀(242, 244, 246)은 2행 2열 형태로 배열된다. 이때 두 개의 옐로우 필터 픽셀(242)는 스프라이트 장으로 배치되고 나머지 두개의 영역에 시안 필터 픽셀(244)와 그린 필터 픽셀(246)이 각각 배치된다.
도 3a 내지 도 3c는 본 발명에 따른 그린 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 그린 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
고화질 이미지를 얻기 위해 이미지 센서의 픽셀을 고집적하면서, 이미지 센서내의 픽셀 사이즈가 감소함으로 인하여, 픽셀 간 크로스토크(crosstalk)가 증가하는 문제가 발생한다. 크로스토크는 임의의 픽셀에 대하여 인접 화소에서 발생한 신호가 영향을 주어, 임의의 픽셀에서 발생한 신호의 분광특성을 변화시켜, 색 재현성을 열하시키는 것을 의미한다. 이러한 현상을 극복하기 위하여, 종래의 이미지 센서에서는 컬러 보정 회로로 크로스토크로 인한 색 재현성 열하를 보정하였다. 그 러나 컬러 보정 회로에는 증폭기와 매트릭스(matrix) 회로를 이용하기 때문에, 노이즈가 증폭되어 SNR이 감소하고 색 재현의 한계가 있는 문제가 있다.
본 발명은 크로스토크 현상에 의하여 이미지 센서에서 입력된 광학 신호를 전기적인 신호로 변환함에 있어서, 전기적인 신호에서의 분광 특성이 입력된 광학 신호의 분광 특성과 달라지는 현상을 보정하여 색 재현을 향상시키기 위하여 컬러 필터 어레이에서 크로스토크에 의한 색 변화를 미리 보정한다. 컬러 필터 어레이에서 분광 특성은 각 서브 픽셀에 대응되는 컬러 필터의 흡수 스펙트럼에 의하여 결정되기 때문에, 본 발명은 크로스토크 현상을 미리 보상하기 위하여 컬러 필터의 흡수 스펙트럼을 조절한다. 컬러 필터의 흡수 스펙트럼은 컬러 필터를 이루는 안료의 성분 및 그들의 비율에 의하여 결정되므로, 안료의 성분 및 이들의 비율을 조절하여 컬러 필터의 흡수 스펙트럼을 조절할 수 있다.
도 3a 내지 도 3c에서는 그린 필터 픽셀의 분광 특성 조절에 대하여, 도 4a 내지 도 4e에서는 시안 필터 픽셀의 분광 특성 조절에 대하여, 도 5a 내지 도 5f에서는 제1 옐로우 필터 픽셀의 분광 특성 조절에 대하여, 도 6a 내지 도 6d에서는 제2 옐로우 필터 픽셀의 분광 특성 조절에 대하여 설명한다.
도 3a는 그린 필터 픽셀과 인접한 픽셀들을 나타낸 도면이다. 그린 필터 픽셀은 좌우 옐로우 필터 픽셀, 상하 시안 필터 픽셀, 및 대각의 옐로우 필터 픽셀로부터 크로스토크의 영향을 받는다. 좌우의 옐로우 필터 픽셀에서의 크로스토크 성분을 Ye'', 상하의 시안 필터 픽셀에서의 크로스토크 성분을 Cy'', 대각의 옐로우 필터 픽셀에서의 크로스토크 성분을 Ye2''라도 하고, 도 3a에 도시된 바와 같이 각 각의 픽셀로부터의 크로스토크 성분을 C1부터 C8로 나타낸다면 각각의 크로스토크 성분(Cy'', Ye'', Ye2'')은 수학식 1과같이 나타낼 수 있다.
Cy''= C2 + C6
Ye2''= C1 + C3 + C5 + C7
크로스토크 현상이 발생하지 않았을 때 그린 필터 픽셀을 투과하여 얻을 수 있는 광한 신호를 G로 나타내면, 크로스토크 현상을 고려한 그린 필터 픽셀을 투과한 광한 신호 G'는 수학식 2와 같이 나타낼 수 있다.
이때 대각 방향의 크로스토크 성분인 Ye2''는 Ye'' 및 Cy''에 비하여 미세하기 때문에 무시할 수 있다.
도 3b는 그린 필터 픽셀과 그린 필터 픽셀에 영향을 주는 크로스토크 성분(Ye'', Cy'')의 분광특성을 나타낸 그래프이다. 이때 가로축은 파장이고 세로축은 광 감도이다. 도 3b의 그래프에 도시된 바와 같이 크로스토크 성분 Ye''와 Cy''는 크로스토크의 영향을 받지 않은 상태에서의 G와 같이 그린 성분을 많이 포함하고 있어, G의 분광 특성을 크게 변화시키지 않는다.
도 3c는 G, G', Ye'', 및 Cy''를 색 공간(color space)에 벡터로 표시한 도면이다. 색 공간(color space)이란 색상을 좌표로 나타낼 수 있는 공간이다. 색 공 간은 좌표계에 따라 다양하며, 같은 색상을 여러 색 공간상에 나타낼 수 있다. 본 명세서는 도 3c와 같이 B-Y, R-Y 좌표계의 색 공간을 이용하여 광학 신호의 위상 및 크기를 표현한다.
크로스토크의 영향이 없는 상태에서 그린 필터 픽셀을 통과한 광학 신호를 나타내는 G는 인접한 그린 필터 픽셀에 의한 Ye'' 및 시안 필터 픽셀에 의한 Cy''에 의한 크로스토크로 인하여 G'로 이동된다. 이때 G는 위상은 거의 변하지 않고, G의 크기는 증가하는 방향인 G'로 이동한다. 결국 크로스토크 Ye'' 및 Cy''를 고려하더라도 G'는 크로스토크를 고려하지 않은 G에 비하여 위상은 거의 변화하지 않고, SNR은 향상됨을 나타낸다.
크로스토크 성분 Ye'' 및 Cy''를 고려하여 G'를 계산하면 다음과 같다. 크로스토크 Ye''와 Cy''를 각각 -16dB=0.15로 가정하고 G'를 구한다. Ye 및 Cy를 R, G, B로 나타내면 각각 수학식 3과 같다.
Cy = G + B
크로스토크 성분을 고려한 G'는 수학식 4와 같다.
= G + 0.15Ye + 0.15Cy
= G + 0.15(G +R) + 0.15(G+B)
= 1.3G + 0.15R + 0.15B
결국 G 이외의 R 및 B 성분은 매우 적고 G의 크기는 증가하므로, 위상 변화는 거의 없고 SNR은 향상됨을 알 수 있다.
도 4a 내지 도 4e는 본 발명에 따른 시안 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 시안 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
도 4a는 시안 필터 픽셀과 인접한 픽셀들을 나타낸 도면이다. 시안 필터 픽셀은 상하의 그린 필터 픽셀, 좌우의 옐로우 필터 픽셀, 및 대각의 옐로우 필터 픽셀로부터 크로스토크의 영향을 받는다. 상하의 그린 필터 픽셀에서의 크로스토크 성분을 G'', 좌우의 옐로우 필터 픽셀에서의 크로스토크 성분을 Ye'', 대각의 옐로우 필터 픽셀에서의 크로스토크 성분을 Ye2''라도 하고, 도 4a에 도시된 바와 같이 각각의 픽셀로부터의 크로스토크 성분을 C1부터 C8로 나타낸다면 각각의 크로스토크 성분(G'', Ye'', Ye2'')은 수학식 5과같이 나타낼 수 있다.
Ye'' = C4 + C8
Ye2'' = C1 + C3 + C5 + C7
크로스토크 현상이 발생하지 않았을 때 시안 필터 픽셀을 투과하여 얻을 수 있는 광한 신호를 Cy로 나타내면, 크로스토크 현상을 고려한 시안 필터 픽셀을 투과한 광한 신호 Cy'는 수학식 6와 같이 나타낼 수 있다.
이때 대각 방향의 크로스토크 성분인 Ye2''는 Ye'' 및 G''에 비하여 미세하기 때문에 무시할 수 있다.
도 4b는 시안 필터 픽셀과 시안 필터 픽셀에 영향을 주는 크로스토크 성분(Ye'', G'')의 분광특성을 나타낸 그래프이다. 이때 가로축은 파장이고 세로축은 광 감도이다. 옐로우 필터 픽셀과 그린 필터 픽셀로부터의 크로스토크 성분은 시안 필터 픽셀과 분광 특성이 상이하므로 옐로우 필터 픽셀 및 그린 필터 픽셀로부터의 크로스토크로 인하여 시안 필터 픽셀의 분광 특성이 변화할 것임을 예상할 수 있다.
도 4c는 Cy, Cy', Ye'', 및 G''를 색 공간(color space)에 벡터로 표시한 도면이다. 크로스토크의 영향이 없는 상태에서 시안 필터 픽셀을 통과한 광학 신호를 나타내는 Cy는 인접한 옐로우 필터 픽셀에 의한 Ye'' 및 그린 필터 픽셀에 의한 G''에 의한 크로스토크로 인하여 Cy'로 이동된다. 이때 크로스토크에 의하여 Cy의 위상은 변화하였으나, 벡터 크기의 변화는 거의 없으므로 광학 신호의 양은 감소되지 않음을 알 수 있다. 그러나 Cy의 위상은 Cy'로 변하였고, 이는 크로스토크로 인해 광학 신호의 분광 특상이 변화된 것을 나타낸다. 그러므로 본 발명은 크로스토크가 없는 상태에서의 Cy로 돌아가기 위하여 크로스토크의 영향을 미리 보상한다.
우선 도 4c의 색 공간에서 위상을 계산하는 과정을 예시적인 값을 이용하여 설명한다. 예를들어, 상하의 그린 필터 픽셀로부터의 G'' 크로스토크 성분 및 좌우 의 옐로우 필터 픽셀로부터의 Ye'' 크로스토크 성분을 각각 -16dB이고, G''와 Ye''의 각도를 90˚로 보면, G''와 Ye''의 합 벡터의 크기는 수학식 7와 같다.
이때 크로스토크 성분(Ye''+G'')과 Cy의 각도를 수직으로 보면, Cy와 Cy'의 각도는 
이다. 따라서 크로스토크의 영향을 시안 필터 픽셀에서 미리 보상하기 위해서는, 시안 필터 픽셀의 분광 특성을 색 공간상에서의 12˚만큼 미리 보상하여 크로스토크의 영향을 줄일 수 있다.
도 4d 및 도 4e를 이용하여 시안 필터 픽셀의 분광 특성에 대한 주파수 축 상에서의 쉬프트 양을 계산한다. 색 공간상에서의 위상을 주파수 축상에서의 값으로 변환하기 위하여 블루(B)를 나타내는 벡터 및 분광 특성을 이용하여 주파수 축상에서의 쉬프트 양을 구한다. 블루(B)는 도 4d에 도시된 바와 같이 Cy 벡터와 80˚의 각도를 이루며 색 공간상에 존재한다. 또한 도 4e에 도시된 바와 같이 450nm에서 최대값을 갖는 분광 특성을 갖는다. Cy는 Ye''와 G''에 의한 크로스트크로 인하여 블루(B)와 멀어지는 방향으로 쉬프트되므로, 이를 미리 보상하기 위하여 블루(B) 쪽으로 색 공간상에서 12˚에 해당하는 위상만큼 시안 필터 픽셀의 분광 특성을 쉬프트해야 한다. 색 공간상에서 12˚에 해당하는 주파수 간격을 계산하면 수학식 8과 같다.
따라서 시안 필터 픽셀의 분광 특성은 도 4e에 도시된 바와 같이 Cy에서 블루(B) 방향으로 15nm만큼 쉬프트 된 Cy(0)가 되어야 한다.
도 5a 내지 도 5f는 본 발명에 따른 제1 옐로우 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 제1 옐로우 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
본 발명은 옐로우 필터 픽셀이 스트라이프 장으로 배치되어 있지만, 스트라이프 장 사이에 시안 필터 픽셀과 그린 필터 픽셀이 교대로 배치되므로, 옐로우 필터 픽셀은 두 가지 종류가 존재한다. 이는 그린 필터 픽셀 사이에 존재하는 제1 옐로우 필터 픽셀과 시안 필터 픽셀 사이에 존재하는 제2 옐로우 필터 픽셀로 구분될 수 있다. 실질적으로 옐로우 필터 픽셀은 모두 같은 분광 특성을 나타내야하지만, 주변 픽셀로부터의 크로스토크 영향으로 제1 옐로우 필터 픽셀과 제2 옐로우 필터 픽셀을 통과한 광학 신호는 서로 다른 분광 특성을 나타낸다. 이는 신호 처리 과정에서 평균을 취하는 방법 등에 의하여 그 차이를 제거할 수 있지만, 크로스토크의 영향을 미리 보상하는 과정에서는 크로스토크의 영향이 다른 점을 고려해야 하므로 제1 옐로우 필터 픽셀과 제2 옐로우 필터 픽셀에 대하여 각각 설명한다.
도 5a는 제1 옐로우 필터 픽셀과 인접한 픽셀들을 나타낸 도면이다. 제1 옐로우 필터 픽셀은 상하의 제2 옐로우 필터 픽셀, 좌우의 그린 필터 픽셀, 및 대각 의 시안 필터 픽셀로부터 크로스토크의 영향을 받는다. 상하의 제2 옐로우 필터 픽셀로부터의 크로스토크 성분을 Ye'', 좌우의 그린 필터 픽셀로부터의 크로스토크 성분을 G'', 대각의 시안 필터 픽셀에서의 크로스토크 성분을 Cy''라고 하고, 도 5a에 도시된 바와 같이 각각의 픽셀로부터의 크로스토크 성분을 C1부터 C8로 나타낸다면 각각의 크로스토크 성분(Ye'', G'', Cy'')은 수학식 9과같이 나타낼 수 있다.
G'' = C4 + C8
Cy'' = C1 + C3 + C5 + C7
크로스토크 현상이 발생하지 않았을 때 제1 옐로우 필터 픽셀을 투과하여 얻을 수 있는 광한 신호를 Ye로 나타내면, 크로스토크 현상을 고려한 제1 옐로우 필터 픽셀을 투과한 광한 신호 Ye1'는 수학식 10와 같이 나타낼 수 있다.
이때 대각 방향의 크로스토크 성분인 Cy''는 Ye'' 및 G''에 비하여 미세하기 때문에 무시할 수 있다.
도 5b는 제1 옐로우 필터 픽셀과 제1 옐로우 필터 픽셀에 영향을 주는 크로스토크 성분(Ye'', G'')의 분광특성을 나타낸 그래프이다. 이때 가로축은 파장이고 세로축은 광 감도이다. 그린 필터 픽셀로부터의 크로스토크 성분은 제1 옐로우 필 터 픽셀과 분광 특성이 상이하므로 그린 필터 픽셀로부터의 크로스토크로 인하여 제1 옐로우 필터 픽셀의 분광 특성이 변화할 것임을 예상할 수 있다.
도 5c는 Ye, Ye1', Ye'', 및 G''를 색 공간에 벡터로 표시한 도면이다. 크로스토크의 영향이 없는 상태에서 제1 옐로우 필터 픽셀을 통과한 광학 신호를 나타내는 Ye는 인접한 옐로우 필터 픽셀에 의한 Ye'' 및 시안 필터 픽셀에 의한 Cy''에 의한 크로스토크로 인하여 Ye1'로 이동된다. 이때 크로스토크에 의하여 Ye의 위상은 변화하였으나, 벡터 크기의 변화는 거의 없으므로 광학 신호의 양은 감소되지 않음을 알 수 있다. 그러나 Ye의 위상은 Ye1'로 변하였고, 이는 크로스토크로 인해 광학 신호의 분광 특상이 변화된 것을 나타낸다. 그러므로 본 발명은 크로스토크가 없는 상태에서의 Ye로 돌아가기 위하여 크로스토크의 영향을 미리 보상한다.
우선 도 5c의 색 공간에서 위상을 계산하는 과정을 예시적인 값을 이용하여 설명한다. Ye''와 G''의 크기가 각각 -16dB = 0.15이라고 본다.
도 5e는 Ye, Ye1', Ye'', 및 G''를 나타낸다. 이때 G''와 (G'' + Ye'')로 이루어진 삼각형 X를 Ye의 끝점으로 평행이동 시켰다고 생각하면, 삼각형 X의 밑변은 Ye''와 크기가 같은 0.15이므로, 보조선 A의 길이는 1.15임을 알 수 있다. 결국 Ye 벡터와 G'' 벡터의 각도는 tan-1(1.15/0.15)=82.6˚이다. Ye1(0)와 G''의 각도는 약 90˚로 볼 수 있고, Ye와 Ye1(0)의 각도는 7.4˚이다. 따라서 Ye를 7.4˚만큼 레드(R) 방향으로 미리 쉬프트해야 함을 알 수 있다.
도 5d 및 도 5f를 이용하여 제1옐로우 필터 픽셀의 분광 특성에 대한 주파수 축 상에서의 쉬프트 양을 계산한다. 색 공간상에서의 위상을 주파수 축상에서의 값으로 변환하기 위하여 레드(R)를 나타내는 벡터 및 분광 특성을 이용하여 주파수 축상에서의 쉬프트 양을 구한다. 블루(R)는 도 5d에 도시된 바와 같이 Ye 벡터와 약 90˚의 각도를 이루며 색 공간상에 존재한다. 또한 도 5f에 도시된 바와 같이 600nm에서 최대값을 갖는 분광 특성을 갖는다. G는 Ye''와 Cy''에 의한 크로스트크로 인하여 레드(R)와 멀어지는 방향으로 쉬프트되므로, 이를 미리 보상하기 위하여 레드(R) 쪽으로 색 공간상에서 7.4˚에 해당하는 위상만큼 옐로우 필터 픽셀의 분광 특성을 쉬프트해야 한다. 색 공간상에서 7.4˚에 해당하는 주파수 간격을 계산하면 수학식 11과 같다.
따라서 제1 옐로우 필터 픽셀의 분광 특성은 도 5f에 도시된 바와 같이 Ye에서 레드(R) 방향으로 4.63nm만큼 쉬프트 된 Ye1(0)가 되어야 한다.
도 6a 내지 도 6d는 본 발명에 따른 제2 옐로우 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 그린 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
도 6a는 제2 옐로우 필터 픽셀과 인접한 픽셀들을 나타낸 도면이다. 제2 옐로우 필터 픽셀은 상하의 제1 옐로우 필터 픽셀, 좌우의 시안 필터 픽셀, 및 대각의 그린 필터 픽셀로부터 크로스토크의 영향을 받는다. 상하의 제1 옐로우 필터 픽 셀로부터의 크로스토크 성분을 Ye'', 좌우의 시안 필터 픽셀로부터의 크로스토크 성분을 Cy'', 대각의 그린 필터 픽셀에서의 크로스토크 성분을 G''라고 하고, 도 6a에 도시된 바와 같이 각각의 픽셀로부터의 크로스토크 성분을 C1부터 C8로 나타낸다면 각각의 크로스토크 성분(Ye'', G'', Cy'')은 수학식 12과같이 나타낼 수 있다.
Cy'' = C4 + C8
G'' = C1 + C3 + C5 + C7
크로스토크 현상이 발생하지 않았을 때 제2 옐로우 필터 픽셀을 투과하여 얻을 수 있는 광학 신호를 Ye로 나타내면, 크로스토크 현상을 고려한 제2 옐로우 필터 픽셀을 투과한 광학 신호 Ye2'는 수학식 13와 같이 나타낼 수 있다.
이때 대각 방향의 크로스토크 성분인 G''는 Ye'' 및 Cy''에 비하여 미세하기 때문에 무시할 수 있다.
도 6b는 제1 옐로우 필터 픽셀과 제1 옐로우 필터 픽셀에 영향을 주는 크로스토크 성분(Ye'', Cy'')의 분광특성을 나타낸 그래프이다. 이때 가로축은 파장이고 세로축은 광 감도이다. 시안 필터 픽셀로부터의 크로스토크 성분은 제2 옐로우 필터 픽셀과 분광 특성이 상이하므로 시안 필터 픽셀로부터의 크로스토크로 인하여 제2 옐로우 필터 픽셀의 분광 특성이 변화할 것임을 예상할 수 있다.
도 6c는 Ye, Ye2', Ye'', 및 Cy''를 색 공간에 벡터로 표시한 도면이다. 크로스토크의 영향이 없는 상태에서 제2 옐로우 필터 픽셀을 통과한 광학 신호를 나타내는 Ye는 인접한 옐로우 필터 픽셀에 의한 Ye'' 및 그린 필터 픽셀에 의한 G''에 의한 크로스토크로 인하여 Ye2'로 이동된다. 이때 크로스토크에 의하여 Ye의 위상은 변화하였으나, 벡터 크기의 변화는 거의 없으므로 광학 신호의 양은 감소되지 않음을 알 수 있다. 그러나 Ye의 위상은 Ye2'로 변하였고, 이는 크로스토크로 인해 광학 신호의 분광 특상이 변화된 것을 나타낸다. 그러므로 본 발명은 크로스토크가 없는 상태에서의 Ye로 돌아가기 위하여 크로스토크의 영향을 미리 보상한다.
우선 도 6c의 색 공간에서 위상을 계산하는 과정을 예시적인 값을 이용하여 설명한다. Ye''와 Cy''의 크기가 각각 -16dB = 0.15이라고 본다.
도 6d는 Ye, Ye2', Ye'', 및 Cy''를 나타낸다. 이때 Y2''와 Cy''의 각도를 120˚로 보고, Ye''와 Cy''의 합 벡터를 B보조선고 k수직이고 크기는 -16dB = 0.15로 근사하면 B 보조선과 Ye 벡터의 각은 tan-1(1.00/0.15)=81.5˚이다. 따라서 Ye2(0)와 Ye의 각은 약 8.5˚임을 알 수 있다. 그러므로 Ye를 미리 Ye2(0)로 약 8.5˚만큼 미리 쉬프트하면 된다.
이를 Ye1(0)와 비교하면 위상은 거의 같으므로 분광 특성이 동일하다고 할 수 있다. 즉, Ye2(0)도 Ye의 분광 특성을 레드 방향으로 4.63nm만큼 쉬프트시키면 된다. 그러나 Ye1(0)와 Ye2(0)는 그 크기가 다르므로 제1 옐로우 필터 픽셀과 제2 옐로우 필터 픽셀은 픽셀 특성이 서로 상이할 수 있다. 이러한 경우 제1 옐로우 필터 픽셀과 제2 옐로우 필터 픽셀 사이에 수평 라인마다 횡선이 발생될 것이다. 다른 실시예로, 제1 옐로우 필터 픽셀과 제2 옐로우 필터 픽셀을 통과한 광학 신호를 평균을 취하거나, 제1 옐로우 필터 픽셀과 제2 옐로우 필터 픽셀을 통과한 신호를 수직방향 저역통과필터를 통과시켜 횡선을 제거할 수 있다.
이와 같이 공통적으로 그린 성분을 많이 포함하고, 크로스토크의 영향이 미리 보상된 컬러 필터 어레이를 사용함으로써, 각 광학 신호의 양의 감소가 적을 뿐만 아니라 색 재현성을 높인 이미지 센서를 구현할 수 있다.
도 7은 본 발명에 따른 신호 처리부를 나타낸 도면이다.
이미지 센서는 입력된 광학 신호를 전기적인 신호로 변환하고, 이를 그린 출력, 레드 출력, 및 블루 출력으로 출력한다. 본 발명에 따른 신호 처리부(700)는 이미지 센서로부터 출력된 그린 출력, 옐로우 출력, 및 시안 출력을 포함하는 단위 픽셀에 대한 전기적인 신호를 그린 출력, 레드 출력, 및 블루 출력으로 변환하여 출력한다. 또한 광학 신호를 표현하기 위해서는 그린 출력, 레드 출력, 블루 출력 이외에 휘도가 필요하므로, 이미지 센서의 단위 픽셀에서 출력된 신호로부터 휘도 출력을 구한다. 이때 단위 픽셀에서 출력된 신호는 단위 픽셀에 포함된 그린 필터 픽셀, 옐로우 필터 픽셀, 및 시안 필터 픽셀로부터 출력된 신호의 합이다.
휘도 출력부(710)는 이미지 센서의 단위 픽셀에서 출력된 신호를 휘도 출력으로 출력한다. 바람직하게는 단위 픽셀에서 출력된 신호가 저역 통과 필터(712)를 통과한 신호가 휘도 출력이다.
휘도는 빛의 밝기를 나타낸다. 휘도는 레드 출력, 그린 출력, 및 블루 출력의 선형 결합의 형태로 나타낼 수 있는데, 휘도를 나타내기 위한 이상적인 선형 결합 형태는 수학식 14과 같다.
이때 G, R, 및 B는 각각 그린 출력, 레드 출력, 및 블루 출력의 세기를 나타내고, 각각의 계수는 가중치의 비율을 나타낼 뿐 절대값은 중요하지 않다.
본 발명은 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀의 면적 비율이 2:1:1이다. 그리고 옐로우 출력(Ye), 그린 출력(G), 및 시안 출력(Cy)을 그린 출력(G), 레드 출력(R), 및 블루 출력(B)으로 나타내면 수학식 15와 같다.
단위 픽셀에서 출력되는 출력 신호는 Ye + G + Cy이므로 이를 R, G, B로 나타내면 수학식 16과 같다.
그러므로 단위 픽셀에서 출력된 신호에 대한 어떠한 연산 없이도 저역통과필터(712)의 통과만으로 휘도 출력을 구할 수 있다.
색 변환부(720)는 단위 픽셀에서 출력된 신호로부터 그린 출력(G), 레드 출력(R), 및 블루 출력(B)을 얻는다.
색 변환부(720)는 옐로우 출력, 그린 출력, 및 시안 출력이 합산된 단위 픽셀의 출력으로부터 각 신호를 샘플링부(722)에서 분리한다. 샘플링부(722)는 임시 그린 출력(G0), 옐로우 출력(Ye), 및 시안 출력(Cy)을 출력한다. 옐로우 출력 및 시안 출력은 각각 임시 레드 출력(R0) 및 임시 블루 출력(B0)으로 변환되어야 한다. 옐로우 출력(Ye)은 옐로우 출력(Cy)에서 임시 그린 출력(G0)을 감산(726)하여 임시 레드 출력(R0)으로 변환된다. 시안 출력(Cy)은 시안 출력(Cy)에서 임시 그린 출력(G0)을 감산(728)하여 임시 블루 출력(B0)으로 변환된다.
색 보정부(724)는 임시 그린 출력(G0), 임시 레드 출력(R0), 및 임시 블루 출력(B0)으로부터 그린 출력(G), 레드 출력(R), 및 블루 출력(B)을 구한다. 이는 임시 그린 출력(G0), 임시 레드 출력(R0), 및 임시 블루 출력(B0)의 순도를 높이고 이미지 센서의 색 재현성을 높이기 위함이다. 색 보정부(724)는 수학식 17와 같은 행렬 연산을 수행한다.
이때 임시 레드 신호(R0), 임시 그린 신호(G0), 및 임시 블루 신호(B0)의 순도가 높을수록 행렬의 대각성분(K11, K22, K33)은 1에 가깝고 나머지 성분들(K12, K13, K21, K23, K31, K33)은 0에 가까워진다. 만일 임시 레드 신호(R0), 임시 그린 신호(G0), 및 임시 블루 신호(B0)의 순도가 낮아 행렬의 대각 성분(K11, K22, K33)이 커지고 나머지 성분들(K12, K13, K21, K23, K31, K33)이 0이 아닌 큰 절대값을 갖는다면 신호가 증폭되면서 노이즈의 레벨도 높아지기 때문에 SNR이 감소하고 색 재현성이 저하된다.
본 발명은 컬러 필터 어레이에서 미리 크로스토크의 영향을 보상하여 R0, G0, 및 B0의 순도를 높여 대각 성분(K11, K22, K33)은 1에 가깝고 나머지 성분들(K12, K13, K21, K23, K31, K33)은 0에 가까운 값을 얻을 수 있다.
도 8은 본 발명의 다른 실시예에 따른 신호 처리부를 나타낸 도면이다.
본 발명의 다른 실시예에 따른 신호 처리부(800)는 화이트 밸런스 및 색 온도를 보정하는 구성을 더 포함할 수 있다. 색온도란 완전한 열방사에 의한 빛의 온도를 나타내며, 그 단위는 켈빈(Kelvin, K)이다.
본 발명은 색보정부(724)에서 출력된 레드 출력(R), 그린 출력(G), 및 블루 출력(B)의 화이트 밸런스를 화이트 밸런스 검출부(730)에서 검출한다. 또한 레드 출력(R), 그린 출력(G), 및 블루 출력(B)은 감마 보정부(740)에서 화이트 밸런스 및 계조의 보정이 이루어진다. 색차 산출부(750)는 감마 보정부(740)의 출력으로부터 색차 신호(Cr, Cb)를 구한다. 색 온도 보정부(760)는 색차 산출부(750)로부터 출력된 색차 신호(Cr, Cb)에 대하여 화이트 밸런스 검출부(730)의 출력을 바탕으로 색 온도를 보정한다. 도 9를 참조하여 색 온도 보정에 대하여 설명한다.
도 9는 색 온도로 인한 색 재현 변화를 나타낸 도면이다.
저색 온도에서는 B-Y 축이 강한 색 재현이 되고, 고색 온도에서는 R-Y 축이 강한 색 재현이 된다. 따라서, 저 색온도에서는 B-Y 축의 이득(gain)을 향상시키고, R-Y축의 이득을 감소시키며, 고 색온도에서는 B-Y 축의 이득을 감소시키고, R-Y축의 이득을 향상시켜 색 온도보정을 할 수 있다. 색 온도 보정부는 수학식 18과 같은 행렬곱의 형태로 구현된다.
여기서 R-Y' 및 B-Y'는 각각 색차 산출부에서 출력된 색차 신호(Cr 및 Cb)을 나타내고, R-Y 및 B-Y는 색 보정된 색차 신호를 나타낸다. 색 온도 보정부(760)에서 출력된 색차 신호(Cr 및 Cb)는 저역통과필터(770)를 통과해 노이즈를 제거한 후 신호 처리부(800)의 출력으로 출력된다.
이상에서와 같이 도면과 명세서에서 최적 실시예가 개시되었다. 여기서 특정한 용어들이 사용되었으나, 이는 단지 본 발명을 설명하기 위한 목적에서 사용된 것이지 의미한정이나 특허청구범위에 기재된 본 발명의 범위를 제한하기 위하여 사 용된 것은 아니다. 그러므로 본 기술 분야의 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 것이다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해 정해져야 할 것이다.
도 1은 이미지 센서의 단면도이다.
도 2a 내지 도 2b는 본 발명에 따른 컬러 필터 어레이의 구조를 나타내는 도면이다.
도 3a 내지 도 3g는 본 발명에 따른 그린 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 그린 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
도 4a 내지 도 4e는 본 발명에 따른 시안 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 시안 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
도 5a 내지 도 5f는 본 발명에 따른 제1 옐로우 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 제1 옐로우 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
도 6a 내지 도 6d는 본 발명에 따른 제2 옐로우 필터 픽셀에 있어서 크로스토크 영향을 미리 보상하기 위한 그린 필터 픽셀의 주파수 특성을 구하는 과정을 도시한 도면이다.
도 7은 본 발명에 따른 신호 처리부를 나타낸 도면이다.
도 8은 본 발명의 다른 실시예에 따른 신호 처리부를 나타낸 도면이다.
도 9는 색 온도로 인한 색 재현 변화를 나타낸 도면이다.
Claims (14)
- 옐로우 필터 픽셀;그린 필터 픽셀; 및시안 필터 픽셀을 포함하고,상기 옐로우 필터 픽셀은 제1 방향의 제1 행들로 배치되고,상기 그린 필터 픽셀과 상기 시안 필터 픽셀은 상기 제1 방향의 제2 행들로 배치되고,상기 제1 행들과 상기 제2 행들은 상기 제1 방향에 수직인 제2 방향으로 교대로 배치되고,상기 제2 방향으로 상기 옐로우 필터 픽셀과 상기 그린 필터 픽셀 각각이 교대로 배치되고, 상기 옐로우 필터 픽셀과 상기 시안 필터 픽셀 각각이 교대로 배치되는 것을 특징으로 하는 이미지 센서에 구비되는 컬러 필터 어레이.
- 제1항에 있어서,상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀의 면적 비율이 2:1:1인 것을 특징으로 하는 컬러 필터 어레이.
- 제1항에 있어서,상기 컬러 필터 어레이는 2행 2열 형태로 배치된 4개의 서브 픽셀을 포함하는 단위 픽셀들로 이루어지고,상기 단위 픽셀은, 세로 방향으로 일렬 배치된 2개의 상기 옐로우 필터 픽셀, 및 나머지 2개의 상기 서브 픽셀에 각각 배치된 상기 그린 필터 픽셀 및 상기 시안 필터 픽셀을 포함하는 것을 특징으로 하는 컬러 필터 어레이.
- 제1항에 있어서,상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀은 인접 서브 픽셀에 의한 크로스토크의 영향이 상쇄되도록 상기 옐로우 필터 픽셀, 상기 그린 필터 픽셀, 및 상기 시안 필터 픽셀의 안료 성분의 종류 및 비율을 조절하여 분광 특성이 미리 보상된 것을 특징으로 하는 컬러 필터 어레이.
- 옐로우 필터 픽셀, 그린 필터 픽셀, 및 시안 필터 픽셀을 포함하고, 상기 옐로우 필터 픽셀은 제1 방향의 제1 행들로 배치되고, 상기 그린 필터 픽셀과 상기 시안 필터 픽셀은 상기 제1 방향의 제2 행들로 배치되고, 상기 제1 행들과 상기 제2 행들은 상기 제1 방향에 수직인 제2 방향으로 교대로 배치되고, 상기 제2 방향으로 상기 옐로우 필터 픽셀과 상기 그린 필터 픽셀 각각이 교대로 배치되고, 상기 옐로우 필터 픽셀과 상기 시안 필터 픽셀 각각이 교대로 배치되는 이미지 센서를 포함하는 촬상 장치에 있어서,상기 이미지 센서는 각 단위 픽셀에 대해 4개의 서브 픽셀에 대한 신호를 출력하고,상기 촬상 장치는,각각의 상기 단위 픽셀들로부터 출력된 신호를 레드 출력, 그린 출력, 및 블루 출력으로 변환하여 출력하는 신호 처리부를 포함하는 것을 특징으로 하는 촬상 장치.
- 제5항에 있어서,상기 신호 처리부는,단위 픽셀로부터 출력된 출력 신호를 입사광의 휘도로 출력하는 휘도 출력부; 및상기 그린 필터 픽셀이 배치된 상기 서브 픽셀로부터 출력된 출력 신호를 임시 그린 출력으로 출력하고, 상기 옐로우 필터 픽셀이 배치된 상기 서브 픽셀로부터 출력된 출력 신호로부터 상기 임시 그린 출력을 감산한 신호를 임시 레드 출력으로 출력하고, 상기 시안 필터 픽셀이 배치된 상기 서브 픽셀로부터 출력된 출력 신호로부터 상기 임시 그린 출력을 감산한 신호를 임시 블루 출력으로 출력하는 색 변환부를 포함하는 것을 특징으로 하는 촬상 장치.
- 제6항에 있어서,상기 휘도 출력부는 저역통과필터를 구비하고, 상기 단위 픽셀로부터 출력된 신호를 상기 저역통과필터에 통과시켜 휘도로 출력하는 것을 특징으로 하는 촬상 장치.
- 제6항에 있어서,상기 색 변환부로부터 출력된 상기 임시 그린 출력, 상기 임시 레드 출력, 및 상기 임시 블루 출력을 선형 결합하여 색의 순도를 높인 그린 출력, 레드 출력, 및 블루 출력을 출력하는 색 보정부를 더 포함하는 것을 특징으로 하는 촬상 장치.
- 제8항에 있어서,상기 색 보정부의 출력의 화이트밸런스로 색 온도를 검출하고, 상기 색 온도로부터 색차 신호를 검출하여 상기 그린 출력, 상기 레드 출력, 및 상기 블루 출력의 색 온도를 보정하여 출력하는 색 온도 보정부를 더 포함하는 것을 특징으로 하는 촬상 장치.
- 제5항에 있어서,상기 이미지 센서는 CIS(CMOS Image Sensor)인 것을 특징으로 하는 촬상 장치.
- 삭제
- 삭제
- 삭제
- 삭제
Priority Applications (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020070112303A KR101411548B1 (ko) | 2007-11-05 | 2007-11-05 | 이미지 센서, 컬러 필터 어레이, 및 촬상 장치 |
| US12/289,812 US8179456B2 (en) | 2007-11-05 | 2008-11-05 | Image sensors, color filter arrays included in the image sensors, and image pickup apparatuses including the image sensors |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| KR1020070112303A KR101411548B1 (ko) | 2007-11-05 | 2007-11-05 | 이미지 센서, 컬러 필터 어레이, 및 촬상 장치 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| KR20090046277A KR20090046277A (ko) | 2009-05-11 |
| KR101411548B1 true KR101411548B1 (ko) | 2014-07-07 |
Family
ID=40587707
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| KR1020070112303A KR101411548B1 (ko) | 2007-11-05 | 2007-11-05 | 이미지 센서, 컬러 필터 어레이, 및 촬상 장치 |
Country Status (2)
| Country | Link |
|---|---|
| US (1) | US8179456B2 (ko) |
| KR (1) | KR101411548B1 (ko) |
Families Citing this family (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US10222781B2 (en) * | 2010-12-17 | 2019-03-05 | Deckel Maho Pfronten Gmbh | Apparatus for monitoring and providing visual representations of the operating conditions of machine tool parameters |
| KR102002986B1 (ko) | 2013-01-11 | 2019-07-24 | 삼성디스플레이 주식회사 | 표시 장치 및 그 구동 방법 |
| JP2015060121A (ja) * | 2013-09-19 | 2015-03-30 | 株式会社東芝 | カラーフィルタアレイおよび固体撮像素子 |
| KR102328769B1 (ko) | 2014-06-20 | 2021-11-18 | 삼성전자주식회사 | 이미지 센서와 이를 포함하는 이미지 처리 시스템 |
| KR102412278B1 (ko) * | 2017-11-06 | 2022-06-24 | 삼성전자 주식회사 | 보색관계의 필터 어레이를 포함하는 카메라 모듈 및 그를 포함하는 전자 장치 |
| KR102666282B1 (ko) * | 2017-12-12 | 2024-05-14 | 르파운드리 에스.알.엘. | 가시광선 및 자외선 검출을 위한 반도체 광학 센서 및 그 제조 공정 |
| KR102507474B1 (ko) * | 2018-01-09 | 2023-03-10 | 삼성전자주식회사 | 이미지 센서 |
| WO2020237591A1 (zh) * | 2019-05-30 | 2020-12-03 | 深圳市大疆创新科技有限公司 | 一种色彩滤镜阵列、图像传感器和拍摄装置 |
| CN113037980A (zh) * | 2021-03-23 | 2021-06-25 | 北京灵汐科技有限公司 | 像素传感阵列和视觉传感器 |
| CN113676629B (zh) * | 2021-08-09 | 2024-01-09 | Oppo广东移动通信有限公司 | 图像传感器、图像采集装置、图像处理方法及图像处理器 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100187797B1 (ko) | 1989-03-16 | 1999-06-15 | 기타지마 요시도시 | 필터의 제작과 복제방법 및 필터부감광체의 제조방법 |
| KR20030004139A (ko) * | 2001-07-04 | 2003-01-14 | 세이코 엡슨 가부시키가이샤 | 컬러 필터의 제조 방법 및 제조 장치, 액정 표시 장치의제조 방법 및 제조 장치, 전계 발광 기판의 제조 방법 및제조 장치, 전계 발광 장치의 제조 방법 및 제조 장치,성막 방법 및 성막장치, 전기광학 장치 및 그 제조 방법과전자 기기 |
| US20060066922A1 (en) | 2004-09-24 | 2006-03-30 | Yoshiaki Nishi | Solid-state imaging device, manufacturing method thereof and camera |
| US20060284989A1 (en) | 2005-06-08 | 2006-12-21 | Samsung Electronics Co., Ltd. | Method and apparatus for interpolation of interlaced CMYG color format |
Family Cites Families (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS58100589A (ja) | 1981-12-10 | 1983-06-15 | Nippon Kogaku Kk <Nikon> | 単板式カラ−カメラ用固体撮像素子の色フイルタ |
| JPS60142690A (ja) | 1983-12-29 | 1985-07-27 | Matsushita Electronics Corp | カラ−固体撮像装置 |
| JP2758287B2 (ja) * | 1991-07-15 | 1998-05-28 | シャープ株式会社 | 液晶表示装置 |
| JP3450361B2 (ja) | 1992-10-09 | 2003-09-22 | キヤノン株式会社 | 撮像装置 |
| JP3475084B2 (ja) | 1998-07-09 | 2003-12-08 | 三洋電機株式会社 | 撮像装置 |
| EP1148735A1 (en) * | 2000-04-20 | 2001-10-24 | Koninklijke Philips Electronics N.V. | Camera with color filter |
| US6930804B2 (en) * | 2001-02-01 | 2005-08-16 | Xerox Corporation | System and method for automatically detecting edges of scanned documents |
-
2007
- 2007-11-05 KR KR1020070112303A patent/KR101411548B1/ko active IP Right Grant
-
2008
- 2008-11-05 US US12/289,812 patent/US8179456B2/en active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR100187797B1 (ko) | 1989-03-16 | 1999-06-15 | 기타지마 요시도시 | 필터의 제작과 복제방법 및 필터부감광체의 제조방법 |
| KR20030004139A (ko) * | 2001-07-04 | 2003-01-14 | 세이코 엡슨 가부시키가이샤 | 컬러 필터의 제조 방법 및 제조 장치, 액정 표시 장치의제조 방법 및 제조 장치, 전계 발광 기판의 제조 방법 및제조 장치, 전계 발광 장치의 제조 방법 및 제조 장치,성막 방법 및 성막장치, 전기광학 장치 및 그 제조 방법과전자 기기 |
| US20060066922A1 (en) | 2004-09-24 | 2006-03-30 | Yoshiaki Nishi | Solid-state imaging device, manufacturing method thereof and camera |
| US20060284989A1 (en) | 2005-06-08 | 2006-12-21 | Samsung Electronics Co., Ltd. | Method and apparatus for interpolation of interlaced CMYG color format |
Also Published As
| Publication number | Publication date |
|---|---|
| KR20090046277A (ko) | 2009-05-11 |
| US20090115874A1 (en) | 2009-05-07 |
| US8179456B2 (en) | 2012-05-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| KR101411548B1 (ko) | 이미지 센서, 컬러 필터 어레이, 및 촬상 장치 | |
| KR101356698B1 (ko) | 화소 간 크로스토크의 영향을 저감하는 이미지 센서, 컬러필터 어레이, 및 촬상 장치 | |
| US10257484B2 (en) | Imaging processing device and imaging processing method | |
| US8922683B2 (en) | Color imaging element and imaging apparatus | |
| US8723995B2 (en) | Extended dynamic range in color imagers | |
| JP5173493B2 (ja) | 撮像装置及び撮像システム | |
| US7400332B2 (en) | Hexagonal color pixel structure with white pixels | |
| US8736724B2 (en) | Imaging apparatus, method of processing captured image, and program for processing captured image | |
| US9793306B2 (en) | Imaging systems with stacked photodiodes and chroma-luma de-noising | |
| US8144221B2 (en) | Image sensor apparatus and methods employing unit pixel groups with overlapping green spectral content | |
| US9184196B2 (en) | Color imaging element and imaging device | |
| KR20070065840A (ko) | 화상 처리 회로 및 화상 처리 방법 | |
| EP1974549A2 (en) | Method and apparatus for producing bayer color mosaic interpolation for imagers | |
| US9219894B2 (en) | Color imaging element and imaging device | |
| US20090295950A1 (en) | Imaging device | |
| KR102219784B1 (ko) | 컬러 필터 어레이 및 이를 구비한 이미지 센서 | |
| US11647305B2 (en) | Solid-state imaging apparatus, signal processing method of solid-state imaging apparatus and electronic device | |
| KR20090086697A (ko) | 이미지 센서 | |
| JP2005303704A (ja) | 撮像装置、カメラ、及び信号処理方法 | |
| US20090297026A1 (en) | Imaging device | |
| CN114424517B (zh) | 图像传感器、控制方法、摄像头组件及移动终端 | |
| JP2008186830A (ja) | 固体撮像素子 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A201 | Request for examination | ||
| E902 | Notification of reason for refusal | ||
| E701 | Decision to grant or registration of patent right | ||
| GRNT | Written decision to grant |