KR102038680B1 - 이미지 센서 및 출력 방법, 위상 포커싱 방법, 이미징 장치와 단말기 - Google Patents
이미지 센서 및 출력 방법, 위상 포커싱 방법, 이미징 장치와 단말기 Download PDFInfo
- Publication number
- KR102038680B1 KR102038680B1 KR1020177026269A KR20177026269A KR102038680B1 KR 102038680 B1 KR102038680 B1 KR 102038680B1 KR 1020177026269 A KR1020177026269 A KR 1020177026269A KR 20177026269 A KR20177026269 A KR 20177026269A KR 102038680 B1 KR102038680 B1 KR 102038680B1
- Authority
- KR
- South Korea
- Prior art keywords
- photosensitive
- photosensitive unit
- array
- output
- unit
- Prior art date
Links
- 238000003384 imaging method Methods 0.000 title claims abstract description 95
- 238000000034 method Methods 0.000 title claims abstract description 40
- 238000001914 filtration Methods 0.000 claims abstract description 90
- 230000003287 optical effect Effects 0.000 claims description 19
- 238000003491 array Methods 0.000 claims description 4
- 230000005611 electricity Effects 0.000 claims description 3
- 238000010586 diagram Methods 0.000 description 11
- 230000035945 sensitivity Effects 0.000 description 10
- 238000001514 detection method Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000008569 process Effects 0.000 description 5
- 238000012545 processing Methods 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 235000000177 Indigofera tinctoria Nutrition 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000011982 device technology Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 229940097275 indigo Drugs 0.000 description 1
- COHYTHOBJLSHDF-UHFFFAOYSA-N indigo powder Natural products N1C2=CC=CC=C2C(=O)C1=C1C(=O)C2=CC=CC=C2N1 COHYTHOBJLSHDF-UHFFFAOYSA-N 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
- H01L27/14601—Structural or functional details thereof
- H01L27/1462—Coatings
- H01L27/14621—Colour filter arrangements
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/40—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled
- H04N25/46—Extracting pixel data from image sensors by controlling scanning circuits, e.g. by modifying the number of pixels sampled or to be sampled by combining or binning pixels
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
- H01L27/14601—Structural or functional details thereof
- H01L27/14625—Optical elements or arrangements associated with the device
- H01L27/14627—Microlenses
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
- H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
- H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
- H01L27/144—Devices controlled by radiation
- H01L27/146—Imager structures
- H01L27/14683—Processes or apparatus peculiar to the manufacture or treatment of these devices or parts thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/50—Constructional details
- H04N23/55—Optical parts specially adapted for electronic image sensors; Mounting thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/67—Focus control based on electronic image sensor signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
- H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
-
- H04N5/378—
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Power Engineering (AREA)
- Computer Hardware Design (AREA)
- Electromagnetism (AREA)
- Condensed Matter Physics & Semiconductors (AREA)
- General Physics & Mathematics (AREA)
- Microelectronics & Electronic Packaging (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Studio Devices (AREA)
- Automatic Focus Adjustment (AREA)
- Transforming Light Signals Into Electric Signals (AREA)
- Solid State Image Pick-Up Elements (AREA)
- Focusing (AREA)
- Color Television Image Signal Generators (AREA)
Abstract
본 발명은 이미지 센서의 화소 정보 출력 방법을 개시한다. 그중, 이미지 센서는 감광 유닛 어레이, 광 필터링 어레이 및 마이크로 렌즈 어레이를 포함하고, 광 필터링 어레이는 감광 유닛 어레이와 마이크로 렌즈 어레이 사이에 위치하며, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소를 포함한다. 당해 방법은 모드 선택 지령에 따라 출력 모드를 확정하는 단계; 감광 유닛 어레이가 노광되는 것을 제어하고, 감광 유닛 어레이의 출력을 판독하는 단계를 포함하되, 그중, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 감광 화소의 화소 정보가 병합되어 출력되는 것을 제어한다. 본 발명은 위상 포커싱 방법, 이미지 센서, 이미징 장치 및 단말기를 개시한다.
Description
본 출원은 출원번호가 201510963242.5이고, 출원일이 2015년 12월 18일인 중국특허출원을 기초로 제출하고 당해 중국특허출원의 우선권을 주장하며, 당해 중국특허출원의 전체 내용을 본 출원에 참고로 원용한다.
본 발명은 이미지 기기 기술 분야에 속하며, 특히 이미지 센서의 화소 정보 출력 방법 및 위상 포커싱 방법, 이미지 센서, 이미징 장치와 단말기에 관한 것이다.
현재, 핸드폰 카메라 센서의 화소 구조는 모두 하나의 마이크로 렌즈가 하나의 화소 유닛에 대응되며, 2가지 문제점이 있다. 첫째, 핸드폰 카메라 센서의 화소 유닛의 사이즈가 점점 작아져 센서의 이미징 민감도 및 SNR(Signal Noise Ratio, 신호대 노이즈비)가 향상되는 것이 기대되고 있으며 화면의 이미징 품질에 영향을 미친다. 둘째, 마이크로 렌즈가 모든 방향의 광선을 받아들여 동일한 하나의 화소 유닛의 이미징에 이용한다. 그런데 화소 유닛은 받아들이는 광선의 방향을 구분하지 않으므로 위상 검출 조건을 충족시킬수 없으며, 위상 포커싱을 진행하기 위한 기초를 제공할 수 없다.
본 발명은 적어도 일정한 정도에서 관련 기술에 존재하는 기술적 과제 중 하나를 해결하고자 한다.
상기 과제를 해결하기 위하여, 본 발명의 일 측면은 이미지 센서의 화소 정보 출력 방법을 제출한다. 그중, 상기 이미지 센서는 감광 유닛 어레이, 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하고, 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 상에 설치되며, 상기 마이크로 렌즈 어레이는 상기 광 필터링 유닛 어레이 상에 위치하며, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소를 포함한다. 상기 방법은, 모드 선택 지령에 따라 출력 모드를 확정하는 단계; 상기 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하는 단계를 포함하되, 그중, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 상기 감광 유닛의 다수의 감광 화소의 화소 정보가 병합되어 출력한다.
본 발명에 따른 이미지 센서의 화소 정보 출력 방법에 의하면, 각각의 렌즈가 하나의 광 필터링 유닛과 다수의 감광 화소에 대응되는 구조에 기반하여, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 병합하여 출력하는 바, 관련 기술 중의 개개별 감광 유닛의 출력에 비해 이미징 민감도와 SNR를 높이고 화면의 품질을 높일 수 있다.
본 발명의 일부 실시예에서, 제2 출력 모드를 선택한 경우에는, 동일한 하나의 상기 감광 유닛의 다수의 감광 화소의 화소 정보를 각각 단독으로 출력한다.
나아가, 상기 제2 출력 모드를 선택한 경우에는, 상기 감광 유닛의 다수의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 위상차 정보를 획득하며, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
상기 과제를 해결하기 위하여, 본 발명의 다른 측면에 따른 실시예는 위상 포커싱 방법을 더 제출한다. 당해 방법은 이미지 센서를 제공하는 단계를 포함하되, 상기 이미지 센서는 감광 유닛 어레이, 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하고, 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 상에 설치되며, 상기 마이크로 렌즈 어레이는 상기 광 필터링 유닛 어레이 상에 위치하며, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소를 포함하며; 상기 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하는 단계를 포함하되, 그중, 동일한 하나의 상기 감광 유닛의 다수의 감광 화소의 화소 정보가 각각 단독으로 출력하며; 및 상기 감광 유닛의 다수의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 위상차 정보를 획득하고, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행하는 단계를 더 포함한다.
본 발명의 위상 포커싱 방법에 의하면, 이미지 센서의 각 렌즈가 하나의 광 필터링 유닛과 다수의 감광 화소에 대응되는 구조에 기반하여, 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 각각 단독으로 출력하며, 디포커스 상태인 경우, 각각의 감광 유닛이 서로 다른 방향의 광선 신호를 획득할 수 있다. 이로써, 위상 포커싱에 조건을 제공하며, 나아가 위상차 정보를 획득하여 위상 포커싱을 구현할 수 있다.
상기 과제를 해결하기 위하여, 본 발명의 또 다른 측면은 이미지 센서를 제출한다. 당해 이미지 센서는 감광 유닛 어레이; 상기 감광 유닛 어레이 상에 설치된 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하며, 상기 마이크로 렌즈 어레이는 상기 광 필터링 유닛 어레이 상에 위치하고, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소를 포함한다.
본 발명에 따른 이미지 센서는 각 렌즈가 하나의 광 필터링 유닛과 다수의 감광 화소에 대응되는 구조에 기반하여, 화면의 품질을 높이고 위상 포커싱의 조건을 충족시키는데 하드웨어 기초를 제공한다.
본 발명의 일부 실시예에서 상기 감광 유닛은 2×2개의 상기 감광 화소를 포함한다.
본 발명의 일부 실시예에서 상기 광 필터링 유닛 어레이는 베이어 패턴을 포함한다.
본 발명의 또 다른 측면의 실시예는 이미징 장치를 제출한다. 당해 이미징 장치는 상술한 이미지 센서 및 제어 모듈을 포함하며, 상기 제어 모듈은 모드 선택 지령에 따라 출력 모드를 확정하며, 상기 이미지 센서의 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하며, 그중 제1 출력 모드를 선택한 경우에는, 상기 제어 모듈은 동일한 하나의 상기 감광 유닛의 감광 화소의 화소 정보가 병합되어 출력되는 것을 제어한다.
본 발명에 따른 이미징 장치는 이미지 센서의 각 렌즈가 하나의 광 필터링 유닛과 다수의 감광 화소에 대응되는 구조에 기반하여, 제1 출력 모드를 선택한 경우에는, 제어 모듈이 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 병합하여 출력하는 바, 관련 기술 중의 개개별 감광 유닛의 출력에 비해 이미징 민감도와 SNR를 높이고 화면의 품질을 높일 수 있다.
그중, 제2 출력 모드를 선택한 경우에는, 상기 제어 모듈은 동일한 하나의 상기 감광 유닛의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 제어한다.
본 발명의 일부 실시예에서 제2 출력 모드를 선택한 경우에는, 상기 제어 모듈은 상기 감광 유닛의 다수의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 위상차 정보를 획득하고, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
상술한 이미징 장치에 기반하여, 본 발명의 또 다른 측면은 단말기를 더 제공한다. 당해 단말기는 상술한 이미징 장치를 포함한다.
당해 단말기는 촬영이 가능하며, 이미징 품질을 높이고, 위상 검출 기능을 구비한다.
본 발명의 또 다른 측면은 이미징 장치를 더 제출한다. 당해 이미징 장치는 상술한 이미지 센서 및 제어 모듈을 포함하며, 상기 제어 모듈은 상기 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하며, 그중, 동일한 하나의 상기 감광 유닛의 다수의 감광 화소의 화소 정보를 각각 단독으로 출력하며, 상기 감광 유닛의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 위상차 정보를 획득하고, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명의 이미징 장치에 의하면, 이미지 센서의 각 렌즈가 하나의 광 필터링 유닛과 다수의 감광 화소에 대응되는 구조에 기반하여, 제어 모듈이 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 각각 단독으로 출력하며, 디포커스 상태인 경우, 각각의 감광 유닛은 서로 다른 방향의 광선 신호를 획득할 수 있다. 이로써, 위상 포커싱에 조건을 제공하며, 나아가 위상차 정보를 획득하여 위상 포커싱의 구현에 기초를 제공할 수 있다.
본 발명의 또 다른 측면은 단말기를 더 제출한다. 당해 단말기는 상술한 측면의 이미징 장치를 포함한다. 당해 단말기는 위상 포커싱 기능을 구비한다.
본 발명의 일부 실시예에서 상기 단말기는 핸드폰을 포함한다.
본 발명의 일부 실시예에서 상기 이미징 장치는 상기 핸드폰의 프론트 카메라를 포함한다.
본 발명의 또 다른 측면은 이미지 센서의 이미징 방법을 더 제출한다. 그중, 상기 이미지 센서는 감광 유닛 어레이, 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하고, 상기 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 상에 설치되며, 상기 마이크로 렌즈 어레이는 상기 광 필터링 유닛 어레이 상에 위치하며, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소를 포함한다. 상기 이미지 처리 방법은 상기 감광 유닛 어레이의 출력을 판독하는 단계; 및 동일한 하나의 상기 감광 유닛의 감광 화소의 출력을 덧셈하여 상기 감광 유닛의 화소 값을 획득함으로써 병합 이미지를 생성하는 단계를 포함한다.
감광 유닛의 노이즈가 병합 전의 각 감광 화소의 노이즈의 합보다 작으므로, 상기 이미징 방법을 이용하면 저조도에서 SNR, 휘도와 선명도가 높고, 노이즈가 적은 이미지를 획득할 수 있다.
적어도 하나의 실시예에서, 각각의 상기 감광 유닛은 2×2개의 상기 감광 화소를 포함하며, 상기 이미지 센서는 레지스터를 포함하며, 상기 판독하는 단계는 제k 행 및 제k+1 행의 상기 감광 화소의 출력을 수집하여 상기 레지스터에 저장하는 단계를 더 포함하되, 그중 k=2n-1이고, n은 자연수이며, k+1은 상기 감광 화소의 총 행 수와 같거나 그보다 작고; 및 상기 레지스터로부터 상기 제k 행 및 제k+1 행의 상기 감광 유닛의 출력을 추출하여, 동일한 하나의 상기 감광 유닛의 상기 감광 화소의 출력을 덧셈하여 상기 감광 유닛의 화소 값을 획득하는 단계를 더 포함한다.
적어도 하나의 실시예에서, 상기 판독하는 단계는 상기 감광 화소가 발생시킨 아날로그 신호 출력을 디지털 신호 출력으로 변환하는 단계를 더 포함한다.
본 발명의 또 다른 측면은 이동 단말기를 더 제출한다. 당해 이동 단말기는 하우징, 프로세서, 메모리, 회로기판 및 전원 회로를 포함하며, 그중 상기 회로기판은 상기 하우징에 의해 둘러싸인 공간 내부에 안착되고, 상기 프로세서와 상기 메모리는 상기 회로기판에 설치되며; 상기 전원 회로는 상기 이동 단말기의 각 회로 또는 디바이스에 전기를 공급하기 위한 것이며; 상기 메모리는 실행 가능한 프로그램 코드를 저장하기 위한 것이며; 상기 프로세서는 상기 메모리에 저장된 실행 가능한 프로그램 코드를 판독하여 상기 실행 가능한 프로그램 코드에 대응되는 프로그램을 작동시켜, 상술한 이미징 방법을 실행하기 위한 것이다.
본 발명의 실시예에 따른 이동 단말기는 상기 화소 유닛 어레이의 출력을 판독하여 동일한 하나의 감광 유닛의 감광 화소의 출력을 덧셈하여 당해 감광 유닛의 화소 값을 획득함으로써 병합 이미지를 생성한다. 병합 화소의 노이즈가 병합 전의 각 감광 화소의 노이즈의 합보다 작으므로, 저조도에서 SNR, 휘도와 선명도가 높고 노이즈가 적은 이미지를 획득할 수 있다.
본 발명의 또 다른 측면의 실시예는 컴퓨터 판독 가능한 저장 매체를 제출한다. 당해 컴퓨터 판독 가능한 저장 매체는 그에 저장된 명령을 구비하며, 이동 단말기의 프로세서가 상기 명령을 실행하면, 상기 이동 단말기는 상술한 측면의 실시예에 따른 이미징 방법을 실행한다.
본 발명의 부가적인 측면과 장점은 이하 설명에서 부분적으로 나타내며, 일부는 이하 설명으로부터 명료해지거나 또는 본 발명의 실천을 통해 파악할 수 있다.
도 1은 본 발명의 일 실시예에 따른 이미지 센서의 블록도이며,
도 2는 본 발명의 일 실시예에 따른 베이어 패턴을 이용한 광 필터링 유닛 어레이의 개략도이며,
도 3은 본 발명의 일 실시예에 따른 베이어 패턴을 이용한 광 필터링 유닛 어레이의 개략도이며,
도 4는 본 발명의 일 실시예에 따른 이미지 센서의 화소 정보 출력 방법의 흐름도이며,
도 5는 본 발명의 구체적인 일 실시예에 따른 이미징 개략도이며,
도 6은 관련 기술에서의 이미징 개략도이며,
도 7의 (1)과 (2)는 관련 기술에서의 이미징 광선의 입력 개략도이며,
도 8은 본 발명의 일 실시예에 따른 위상 포커싱 방법의 흐름도이며,
도 9는 본 발명의 일 실시예에 따른 이미징 장치의 블록도이며,
도 10은 본 발명의 일 실시예에 따른 단말기의 블록도이며,
도 11은 본 발명의 실시예에 따른 이미징 방법의 흐름도이며,
도 12는 본 발명의 일 실시예에 따른 이미징 방법의 흐름도이며,
도 13은 본 발명의 다른 실시예에 따른 이미징 방법의 흐름도이다.
도 2는 본 발명의 일 실시예에 따른 베이어 패턴을 이용한 광 필터링 유닛 어레이의 개략도이며,
도 3은 본 발명의 일 실시예에 따른 베이어 패턴을 이용한 광 필터링 유닛 어레이의 개략도이며,
도 4는 본 발명의 일 실시예에 따른 이미지 센서의 화소 정보 출력 방법의 흐름도이며,
도 5는 본 발명의 구체적인 일 실시예에 따른 이미징 개략도이며,
도 6은 관련 기술에서의 이미징 개략도이며,
도 7의 (1)과 (2)는 관련 기술에서의 이미징 광선의 입력 개략도이며,
도 8은 본 발명의 일 실시예에 따른 위상 포커싱 방법의 흐름도이며,
도 9는 본 발명의 일 실시예에 따른 이미징 장치의 블록도이며,
도 10은 본 발명의 일 실시예에 따른 단말기의 블록도이며,
도 11은 본 발명의 실시예에 따른 이미징 방법의 흐름도이며,
도 12는 본 발명의 일 실시예에 따른 이미징 방법의 흐름도이며,
도 13은 본 발명의 다른 실시예에 따른 이미징 방법의 흐름도이다.
이하, 본 발명의 실시예를 상세히 설명한다. 상기 실시예의 예시는 도면에 나타냈으며, 동일 또는 유사한 부호는 시종 일관하게 동일 또는 유사한 소자 또는 동일 또는 유사한 기능을 가진 소자를 나타냈다. 이하, 도면을 참고하여 설명한 실시예는 예시적인 것이며 본 발명을 해석하기 위한 것일 뿐, 본 발명을 한정하는 것으로 이해되어서는 안된다.
핸드폰의 카메라의 이미징 민감도와 SNR를 높이고, 위상차의 검출을 구현하기 위하여, 본 발명의 실시예에서는 다수의 감광 화소를 하나의 그룹으로 형성하여 하나의 마이크로 렌즈를 공동으로 사용하고, 하나의 그룹의 감광 화소 내부의 각 감광 화소의 화소 정보를 각각 판독함으로써, 이미징 광선을 구분한다. 다수의 감광 화소 병합 이미징에 의해 높은 이미징 민감도와 SNR를 이룰 수 있을 뿐만 아니라, 광선의 입사 방향을 달리하여 위상차 정보에 대한 검출 기능을 구현할 수 있다.
도 1은 본 발명의 일 실시예에 따른 이미지 센서의 블록도이다. 도 1과 같이, 당해 이미지 센서(100)는 감광 유닛 어레이(10), 광 필터링 유닛 어레이(20) 및 마이크로 렌즈 어레이(30)를 포함한다.
그중, 상기 광 필터링 유닛 어레이(20)는 상기 감광 유닛 어레이(10) 및 상기 마이크로 렌즈 어레이(30) 사이에 위치한다. 상기 감광 유닛 어레이(10)는 복수의 감광 유닛을 포함한다. 상기 광 필터링 유닛 어레이(20)는 복수의 광 필터링 유닛(21)을 포함한다. 상기 마이크로 렌즈 어레이(30)는 복수의 마이크로 렌즈(31)를 포함한다. 각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함하는 바, 예를 들면, 본 발명의 일 실시예에서 감광 유닛은 2×2개의 감광 화소(110)를 포함한다.
일부 실시 형태에서 광 필터링 유닛 어레이(20)는 베이어 패턴(Bayer pattern)을 포함한다. 베이어 패턴 구조를 사용하면 종래의 베이어 패턴 구조에 대한 알고리즘을 사용하여 이미지 신호를 처리할 수 있으므로, 하드웨어 구조를 크게 조절하는 것을 필요로 하지 않는다.
도 2와 도 3을 참고하면, 베이어 구조에서 2×2개의 광 필터링 유닛(21)은 광 필터링 구조(22)를 구성한다. 2×2개의 광 필터링 유닛(21)은 각각 녹색, 적색, 남색 및 녹색의 광 필터링 유닛(21)이다. 종래의 광 필터링 유닛 어레이(20) 구조에서 각각의 광 필터링 유닛(21)은 하나의 감광 화소(110) 및 이미지 화소에 대응된다. 본 발명의 실시 형태에서, 광 필터링 유닛 어레이(20)는 베이어 구조를 이용하며, 다른 점이라면 각각의 광 필터링 유닛(21)이 다수의 감광 화소(110), 예를 들면 4개의 감광 화소(110)에 대응되는 것이다. 즉, 다수의 감광 화소(110)는 동일한 색상의 광 필터링 유닛(21)에 대응되는 것이다.
개괄하면, 본 발명의 실시예에 따른 이미지 센서(100)에서 다수의 감광 화소(110)는 하나의 그룹을 구성하고 하나의 마이크로 렌즈(31)를 공동으로 사용한다. 다시 말해, 종래의 이미지 센서 내의 하나의 마이크로 렌즈가 하나의 감광 화소에 대응되는 구조를, 하나의 마이크로 렌즈(31)가 다수의 감광 화소(110)에 대응되도록 변경하였는 바, 당해 감광 화소(110)의 그룹, 즉 감광 유닛 내의 감광 화소(110)가 동일한 색상의 광 필터링 유닛(21)에 대응되도록 변경하였다.
도 1에서의 이미지 센서의 구조에 기반하여, 이하 본 발명의 실시예에 따른 이미지 센서의 화소 정보 출력 방법에 대해 설명하기로 한다. 도 4는 본 발명의 일 실시예에 따른 이미지 센서의 화소 정보 출력 방법의 흐름도이다. 도 4와 같이, 당해 방법은 아래 단계를 포함한다.
S1: 모드 선택 지령에 따라 출력 모드를 확정한다.
본 발명의 실시예에서, 출력 모드는 제1 출력 모드와 제2 출력 모드를 포함한다. 그중, 제1 출력 모드는 이미징 민감도와 SNR의 향상 측면에 대해 제출한 출력 모드로 이해할 수 있고, 제2 출력 모드는 위상 포커싱과 피사계 심도 정보 테스트 측면에 대해 제출한 출력 모드로 이해할 수 있다.
S2: 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(10)의 출력을 판독한다. 그중, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 다수의 감광 화소(110)의 화소 정보를 병합하여 출력한다.
구체적으로, 동일한 하나의 마이크로 렌즈(31)에 대응되는 감광 유닛 내의 다수의 감광 화소(110)의 화소 정보를 병합하여 출력하는 경우, 하나의 마이크로 렌즈가 하나의 감광 화소(110)의 출력 신호에 대응된 경우에 비해, 다수, 예를 들면 N개의 감광 화소의 병합 출력 신호는 N배 증가한 것에 해당한다. 노이즈와 신호의 제곱근이 정비례되므로, 다시 말해 nosie∝(Signal)1/2이므로, 신호는 기존의 N배가 되고, 노이즈는 기존의 N1/2배로만 된다. 따라서, 이미지의 이미징 민감도와 SNR는 모두 상응하게 향상된다.
도 5는 본 발명의 구체적인 일 실시예에 따른 이미징 광선의 개략도이며, 그중, 하나의 마이크로 렌즈(112)는 하나의 광 필터링 유닛(113)과 4개의 감광 화소(111)에 대응된다. 도 6은 관련 기술에서의 이미징 광선의 개략도이며, 그중, 하나의 마이크로 렌즈(112)는 하나의 광 필터링 유닛(113)과 하나의 감광 화소(111)에 대응된다. 도 1과 도 5와 같이, 만약 4개의 감광 화소(111)의 화소 정보를 병합하여 출력하면, 신호는 도 6과 같은 화소 구조의 출력 신호의 4배가 되고, 노이즈는 도 6의 화소 구조의 2배만 되므로, 이미지의 민감도와 SNR는 모두 상응하게 향상된다.
이로부터 볼 수 있듯이, 본 발명의 실시예에 따른 이미지 센서(100)의 화소 정보 출력 방법은, 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보를 병합하여 출력하며, 관련 기술 중 개개별 감광 화소(111)의 출력에 비해 이미징 민감도와 SNR를 높이고, 화면의 품질을 높일 수 있다.
위상 검출의 조건을 충족시키기 위하여 위상 포커싱을 진행하며, 제2 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 다수의 감광 화소(110)의 화소 정보가 각각 단독으로 출력되는 것을 제어한다. 나아가, 감광 유닛의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하고, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
관련 지식에 의하여 알수 있듯이, 도 6의 화소 구조, 즉 하나의 마이크로 렌즈(112)가 하나의 광 필터링 유닛(113)과 하나의 감광 화소(111)에 대응된 구조에 대해 말하면, 포커싱된 경우, 도 7의 (1)과 같이, 이미징 광선은 마이크로 렌즈를 거쳐 감광 화소에 집광되어 이미징되며, 디포커싱된 경우, 도 7의 (2)와 같이, 이미징 광선이 발산되고, 각각의 마이크로 렌즈는 다수의 방향의 광선을 받아들여 하측의 대응 감광 화소의 이미징에 이용한다. 동일한 하나의 감광 화소가 받아들인 광선의 방향을 구분할 수 없으므로 위상 검출 조건을 충족시킬 수 없다. 관련 기술에서, 일반적으로 PDAF( Phase Detection Auto Focus, 위상 검출 자동 포커싱)를 구현하기 위하여, 통상적으로 이미지 센서 내에서 서로 인접하고 쌍을 이루어 설치된 감광 화소 구조 설계(차폐 화소, masked pixels라고도 한다. 차폐 화소의 구조는 일반적인 감광 화소에 비해 구조가 더 복잡하며, 통상적으로 일반적인 감광 화소 자체의 구조를 변경하거나 또는 감광 화소 구조에 단독으로 하나의 광선 차단부를 추가한다. 이로써 차폐 화소로 입사하는 다수 방향의 광선 중에서 특정 방향의 광선은 차폐 화소의 감광 부분에 도달하지 못하고, 특정 방향 외의 광선은 차폐 화소의 감광 부분에 도달할 수 있도록 한다. 다시 말해, 차폐 화소는 통상적으로, 쌍을 이루고, 인접하며 대칭되게 설치된다. 쌍을 이루어 설치된 차폐 화소는 다수 방향의 광선을 분리한다)를 이용하여, 쌍을 이루어 설치된 차폐된 화소로 입사한 다수 방향의 이미징 광 빔을 예를 들어 좌측과 우측 두 부분으로 분리하며, 좌측과 우측 두 부분의 광선이 이미징된 후의 위상차(즉, 쌍을 이루어 설치된 차폐 화소의 출력을 수집하는 것)를 비교하여 카메라가 이동해야 할 거리를 계산한다.
본 발명의 실시예에서는, '각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛을 뒤덮고, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함한다. 즉 각각의 마이크로 렌즈(31)는 다수의 감광 화소(110)와 대응된다. 따라서 각각의 마이크로 렌즈(31)가 받아들인 다수의 광선은 다수의 감광 화소(110)의 이미징에 이용되는 것'에 기반하여 동일한 하나의 감광 유닛의 다수의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 제어함으로써, 다수 방향의 광선 신호를 획득할 수 있다. 이로부터 볼 수 있듯이, 상기 구조는 이미징 광 빔을 분리하는 작용을 하며, 나아가 각각의 감광 유닛의 다수의 감광 화소(110)의 화소 정보의 출력에 의하여, 이미징 광선을 인식할 수 있으며, 서로 다른 방향의 광선 신호의 비교를 통하여, 이미징된 이미지의 위상차 정보를 획득할 수 있으며, 더 나아가, 위상차 정보에 의하여 피사체의 거리 정보를 획득하며, 위상 포커싱과 피사계 심도 정보의 테스트에 데이터 기초를 제공한다. 분명한 바, 본 발명의 실시예에서는 마이크로 렌즈 어레이(30), 광 필터링 유닛(20)과 감광 어레이(10)의 배합 설계만을 이용하여, 위상 포커싱의 검출을 구현할 수 있으며, 일반적인 감광 화소 자체의 구조를 변환할 필요가 없거나, 또는 감광 화소 구조에 단독으로 하나의 차단부를 추가할 필요가 없으므로, 위상 포커싱의 검출 구현 방식도 더 간단해진다.
예를 들면, 도 5와 같이 각각의 감광 유닛의 4개의 감광 화소(111)의 화소 정보가 각각 판독되는 경우, 4개의 감광 화소(111)의 화소 정보의 출력을 토대로 서로 다른 방향의 광선 신호, 예를 들면, 상, 하, 좌, 우의 광선 신호를 획득할 수 있으며, 서로 다른 방향의 광선 신호를 비교함으로써, 이미지 전체의 위상차 정보를 획득할 수 있으며, 나아가 위상차 정보를 포커싱 거리 정보로 변환하고, 포커싱 거리 정보에 의하여 카메라의 위치를 조절함으로써 위상 포커싱을 구현할 수 있다.
개괄하면, 본 발명의 실시예에 따른 이미지 센서(100)의 화소 정보 출력 방법은 각각의 마이크로 렌즈(31)가 다수의 감광 화소(110)에 대응되게 설치되는 것에 기반하여 두 가지 작동 상태를 구현할 수 있다. 하나의 작동 상태는 각각의 감광 유닛의 다수의 감광 화소(110)의 화소 정보를 병합하여 출력함으로써 화면의 품질을 향상할 수 있다. 다른 하나의 작동 상태는 각각의 감광 유닛의 다수의 감광 화소(110)의 화소 정보를 단독으로 출력하고 감광 화소 간의 정보를 비교함으로써 위상차 정보를 획득하여, 위상 포커싱과 피사계 심도 정보의 테스트에 데이터 기초를 제공한다.
이하 본 발명의 다른 측면의 실시예에 따른 위상 포커싱 방법에 대해 설명한다.
도 8은 본 발명의 일 실시예에 따른 위상 포커싱 방법의 흐름도이다. 도 8과 같이 당해 위상 포커싱 방법은 아래 단계를 포함한다.
S10: 이미지 센서(100)를 제공한다.
이미지 센서(100)는 감광 유닛 어레이(10), 광 필터링 유닛 어레이(30) 및 마이크로 렌즈 어레이(30)를 포함하며, 광 필터링 어레이는 감광 유닛 어레이 상에 설치되고, 마이크로 렌즈 어레이는 광 필터링 어레이 상에 위치하며, 상기 광 필터링 유닛 어레이(20)는 상기 감광 유닛 어레이(10) 및 상기 마이크로 렌즈 어레이(30) 사이에 위치한다. 상기 감광 유닛 어레이(10)는 복수의 감광 유닛을 포함한다. 상기 광 필터링 유닛 어레이(20)는 복수의 광 필터링 유닛(21)을 포함한다. 상기 마이크로 렌즈 어레이(30)는 복수의 마이크로 렌즈(31)를 포함한다. 각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함하는 바, 다시 말해 각각의 마이크로 렌즈(31)는 다수의 감광 화소(110)에 대응된다.
S20: 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(10)의 출력을 판독한다. 그중, 동일한 하나의 감광 유닛의 다수의 감광 화소(110)의 화소 정보가 각각 단독으로 출력되는 것을 제어한다.
S30: 감광 유닛의 다수의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하며, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명에 따른 위상 포커싱 방법은 이미지 센서(100)의 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보를 각각 단독으로 출력하며, 디포커싱 상태인 경우, 각각의 감광 유닛은 서로 다른 방향의 광선 신호를 획득함으로써, 위상 포커싱에 조건을 제공할 수 있으며, 나아가 위상차 정보를 획득하여 위상 포커싱을 구현할 수 있다.
이하 본 발명의 또 다른 측면의 실시예에 따른 이미징 장치(1000)에 대해 설명하기로 한다.
도 9는 본 발명의 일 실시예에 따른 이미징 장치(1000)의 블록도이다. 도 9와 같이, 상기 이미징 장치(1000)는 상술한 측면에 따른 이미지 센서(100)와 제어 모듈(200)을 포함한다.
제어 모듈(200)은 모드 선택 지령에 따라 출력 모드를 확정하며, 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(10)의 출력을 판독한다. 그중, 제1 출력 모드를 선택한 경우에는, 제어 모듈(200)은 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보가 병합되어 출력되는 것을 제어한다.
본 발명에 따른 이미징 장치(1000)는 이미지 센서(100)의 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 제1 출력 모드를 선택한 경우에는, 제어 모듈이 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 병합하여 출력한다. 따라서 관련 기술 중 개개별 감광 화소(111)의 출력에 비해, 이미징 민감도와 SNR를 높이고 화면의 품질을 높일 수 있다.
본 발명의 실시예에서, 제2 출력 모드를 선택한 경우에는, 제어 모듈(200)은 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보가 각각 단독으로 출력되는 것을 제어한다. 제어 모듈(200)은 감광 유닛의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하며, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명의 또 다른 측면의 실시예는 단말기(2000)를 더 제공한다. 도 10과 같이, 당해 단말기(2000)는 상술한 측면의 실시예에 따른 이미징 장치(1000)를 포함한다. 당해 단말기(2000)는 촬영 가능하며, 이미징 품질을 높이고, 위상 검출 기능을 구비한다.
이하 도면을 참고하여, 본 발명의 또 다른 측면의 실시예에 따른 이미징 장치(1000)를 설명한다. 당해 이미징 장치(100)는 이미지 센서(100)와 제어 모듈(200)을 포함한다.
제어 모듈(200)은 이미지 센서(100)의 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(100의 출력을 판독한다. 그중, 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보를 각각 단독으로 출력하며, 감광 유닛의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하며, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명의 이미징 장치(1000)에 의하면, 이미지 센서(100)의 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 제어 모듈(200)이 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 각각 단독으로 출력하며, 디포커싱 상태인 경우, 각각의 감광 유닛은 서로 다른 방향의 광선 신호를 획득함으로써 위상 포커싱에 조건을 제공할 수 있으며, 나아가 위상차 정보를 획득하여 위상 포커싱을 구현하는 데 기초를 제공할 수 있다.
이하 도면을 참고하여, 본 발명의 또 다른 측면의 실시예에 따른 단말기(2000)를 설명한다. 당해 단말기(2000)는 상술한 또 다른 측면의 실시예에 따른 이미징 장치(1000)를 포함한다. 당해 단말기(2000)는 위상 포커싱의 기능을 구비한다.
구체적으로, 단말기(2000)는 핸드폰을 포함할 수 있으나 이에 한정되지 않는다.
이미징 장치(1000)는 핸드폰의 프론트 카메라를 포함할 수 있으며, 위상차 정보에 의하여 초점 조절 거리 정보를 획득하며, 나아가 초점 조절 거리 정보에 의하여 프론트 카메라의 거리를 조절하여 위상 포커싱을 구현할 수 있다.
상술한 측면의 실시예에 따른 이미지 센서(100)에 기반하고, 그중, 이미지 센서(100)는 감광 유닛 어레이(10), 상기 광 필터링 유닛 어레이(20)는 상기 감광 유닛 어레이(10) 및 상기 마이크로 렌즈 어레이(30) 사이에 위치한다. 상기 감광 유닛 어레이(10)는 복수의 감광 유닛을 포함한다. 상기 광 필터링 유닛 어레이(20)는 복수의 광 필터링 유닛(21)을 포함한다. 상기 마이크로 렌즈 어레이(30)는 복수의 마이크로 렌즈(31)를 포함한다. 각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛(31)을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함한다. 이하 도면을 참고하여 본 발명의 실시예에 따른 이미징 방법을 설명하기로 한다.
도 11은 본 발명의 일 실시예에 따른 이미징 방법의 흐름도이다. 도 11과 같이, 당해 이미징 방법은 아래 단계를 포함한다.
S1: 감광 유닛 어레이(10)의 출력을 판독한다.
S2: 동일한 하나의 감광 유닛의 감광 화소(110)의 출력을 덧셈하여 당해 감광 유닛의 화소 값을 획득하여 병합 이미지를 생성한다.
본 발명의 실시 형태에 따른 이미징 방법은 기존의 각각의 감광 유닛의 출력이 S이고, 노이즈가 N이며, 감광 유닛이 M개의 감광 유닛을 포함한다고 가정하면, 감광 유닛의 화소 값은 n×m×S이고, 감광 유닛의 노이즈는 이며, n=2, m=2의 경우에, 감광 유닛의 노이즈는 n×m×N/2 정도이다. 따라서, 저 휘도 환경에서 감광 유닛의 휘도가 향상되며, 신호대 잠음비가 향상된다.
도 12를 참고하면, 일부 실시 형태에서 각각의 감광 유닛은 2×2개의 감광 화소(110)를 포함하며 이미지 센서는 레지스터를 포함하며, 단계 S2는 아래 단계를 더 포함한다.
S201: 제k 행 및 제k+1 행의 감광 화소(110)의 출력을 수집하여 레지스터에 저장한다. 그중 k=2n-1이고, n은 자연수이며, k+1은 감광 화소(110)의 총 행 수와 같거나 그보다 작다.
S202: 레지스터로부터 제k 행 및 제k+1 행 감광 화소(110)의 출력을 추출하여, 동일한 하나의 감광 유닛의 감광 화소(110)의 출력을 덧셈하여 감광 유닛의 화소 값을 획득한다.
이와 같이, 레지스터를 충분히 이용하여 감광 화소(110)의 출력의 판독, 캐시 및 병합의 프로세스를 구현할 수 있다.
도 13을 참고하면, 일부 실시 형태에서 단계 S2는,
S301: 감광 화소(110)가 발생시킨 아날로그 신호 출력을 디지털 신호 출력으로 변환하는 단계; 및
S302: 동일한 하나의 감광 유닛의 감광 화소(110)의 출력을 덧셈하여 감광 유닛의 화소 값을 획득하는 단계를 더 포함한다.
이와 같이 하여, 첫째로는 일반적으로 디지털 신호 처리 칩인 이미지 처리 모듈이 이미지 센서의 출력을 바로 처리할 수 있으며, 둘째로는 회로를 통해 이미지 센서의 아날로그 신호 포맷의 출력을 바로 처리하는 일부 기술적 수단에 비해, 이미지의 정보를 바람직하게 보존한다. 예를 들어, 16M 화소의 이미지 센서에 대해 말하자면, 본 발명의 실시 형태에 따른 이미징 방법은 4M 화소(2×2개 화소를 병합)의 병합 이미지를 생성할 수 있을 뿐만 아니라, 16M 화소(즉 병합하지 않음)의 이미지를 생성할 수도 있다.
본 발명의 또 다른 측면의 실시예는 이동 단말기(2000)를 더 제출한다. 당해 이동 단말기(2000)는 하우징, 프로세서, 메모리, 회로기판 및 전원 회로를 포함하며, 그중, 상기 회로기판은 상기 하우징에 의해 둘러싸인 공간 내부에 안착되고, 상기 프로세서와 상기 메모리는 상기 회로기판 상에 설치되며; 상기 전원 회로는 상기 이동 단말기의 각 회로 또는 디바이스에 전기를 공급하기 위한 것이며; 상기 메모리는 실행 가능한 프로그램 코드를 저장하기 위한 것이며; 상기 프로세서는 상기 메모리에 저장된 실행 가능한 프로그램 코드를 판독하여 상기 실행 가능한 프로그램 코드에 대응되는 프로그램을 작동시켜, 상술한 측면의 이미징 방법을 실행하기 위한 것이다.
본 발명의 실시예는 컴퓨터 판독 가능한 저장 매체를 더 제출한다. 당해 컴퓨터 판독 가능한 저장 매체는 그에 저장된 명령을 구비하며, 이동 단말기의 프로세서가 상기 명령을 실행하면, 상기 이동 단말기는 도 11과 같은 본 발명의 실시예에 따른 이미징 방법을 실행한다.
설명해야 하는 바로는, 본 명세서에서 예를 들어 제1 및 제2 등과 같은 관계 용어는 하나의 실체 또는 조작을 다른 실체 또는 조작과 구분하기 위해서만 이용되며, 이들 실체 또는 조작 간에 어떤 이와 같은 실제적 관계 또는 순서가 존재함을 반드시 요구하거나 암시하는 것은 아니다. 또한, 용어 '포함', '포괄' 또는 그것의 모든 기타 변형체는 비배타성의 포함을 커버함으로써, 일련의 요소를 포함한 프로세스, 방법, 물품 또는 기기가 이들 요소를 포함할 뿐만 아니라 명확하게 열거되지 않은 기타 요소도 포함하거나 또는 이러한 프로세스, 방법, 물품 또는 기기에 고유한 요소도 포함하도록 한다. 더 많이 한정되지 않은 경우에, 문장 '하나의 .......를 포함한다'로 한정된 요소는 상기 요소를 포함한 프로세스, 방법, 물품 또는 기기에 그밖의 다른 동일한 요소가 더 존재하는 것을 배제하지 않는다.
흐름도에 나타냈거나 또는 여기서 기타 방식으로 설명된 로직 및/또는 단계는 예를 들어, 로직 기능을 구현하기 위한 실행 가능한 명령의 시퀀스 리스트로 볼 수 있으며, 명령 실행 시스템, 장치 또는 기기(예를 들어 컴퓨터 기반 시스템, 프로세서를 포함하는 시스템, 또는 명령 실행 시스템, 장치 또는 기기로부터 명령을 추출하여 명령을 실행시킬 수 있는 기타 시스템)가 사용하도록, 또는 이들 명령 실행 시스템, 장치 또는 기기와 결합되어 사용되도록, 모든 컴퓨터 판독가능 저장 매체에서 구체적으로 구현될 수 있다. 본 명세서에서 '컴퓨터 판독가능 저장 매체'는 프로그램을 포함, 저장, 통신, 전파 또는 전송하여 명령 실행 시스템, 장치 또는 기기, 또는 이들 명령 실행 시스템, 장치 또는 기기와 결합되어 사용될 수 있는 모든 장치일 수 있다. 컴퓨터 판독가능 저장 매체의 더 구체적인 예시(비전면적인 리스트, non exhaustive list)로는, 하나 또는 다수의 배선을 가진 전기적 연결부(전자 장치), 휴대용 컴퓨터 디스크 박스(자기 장치), 램(RAM), 롬(ROM), 소거가능 및 프로그램 가능한 판독전용 메모리(EPROM 또는 플래시 메모리), 광섬유 장치, 및 휴대용 씨디롬(CDROM)을 포함한다. 또한, 컴퓨터 판독가능 매체는 상기 프로그램이 인쇄될 수 있는 용지 또는 기타 적절한 매체일 수도 있다. 그 이유는, 예를 들어 용지 또는 기타 매체에 대해 광학적 스캔을 진행하고, 이어서 편집, 디코딩 또는 필요시 기타 적절한 방식으로 처리하여 전자 형태로 상기 프로그램을 얻은 후 이를 컴퓨터 메모리에 저장할 수 있기 때문이다.
본 발명의 각 파트는 하드웨어, 소프트웨어, 펌웨어 또는 이들의 조합으로 구현될 수 있는 것으로 이해되어야 한다. 상기 실시 형태에서, 다수의 단계 또는 방법은, 메모리에 저장되어 적절한 명령 실행 시스템에 의해 실행되는 소프트웨어 또는 펌웨어를 통해 구현될 수 있다. 예를 들어, 하드웨어를 통해 구현되는 경우, 다른 실시 형태에서와 마찬가지로, 본 기술 분야에서 널리 알려진 하기 기술 중의 임의의 하나 또는 이들의 조합을 통해 구현될 수 있다. 상기 '기술'은 데이터 신호에 대해 로직 기능을 구현하기 위한 로직 게이트 회로를 갖춘 이산 로직 회로, 적절한 조합 로직 게이트 회로를 갖춘 전용 집적 회로, 프로그램 가능 게이트 어레이(PGA), 필드-프로그램 가능 게이트 어레이(FPGA) 등이다.
본 명세서의 설명에서, 참고 용어 '일 실시예', '일부 실시예', '예시', '구체적인 예시', 또는 '일부 예시' 등 설명은 당해 실시예 또는 예시를 결부하여 설명한 구체적인 특징, 구조, 재료 또는 특점이 본 발명의 적어도 하나의 실시예 또는 예시에 포함됨을 의미한다. 본 명세서에서 상기 용어에 대한 예시적 표현은 동일한 실시예 또는 예시를 반드시 가리키는 것은 아니다. 또한, 설명된 구체적인 특징, 구조, 재료 또는 특점은 임의의 하나 또는 다수의 실시예 또는 예시에서 적절한 형태로 결합될 수 있다. 또한, 서로 모순되지 않는 상황에서 본 기술 분야의 통상의 지식을 가진 자는 본 명세서에서 설명된 서로 다른 실시예 또는 예시 및 서로 다른 실시예 또는 예시의 구성요소를 결합 및 조합할 수 있다.
비록 위에서 본 발명의 실시예를 나타내고 설명했으나, 상기 실시예는 예시적인 것임을 이해할 수 있으며, 본 발명을 한정하는 것으로 이해되어서는 안된다. 본 기술 분야의 통상의 지식을 가진 자는 본 발명의 범위 내에서 상기 실시예를 변경, 수정, 교체 및 변형할 수 있다.
핸드폰의 카메라의 이미징 민감도와 SNR를 높이고, 위상차의 검출을 구현하기 위하여, 본 발명의 실시예에서는 다수의 감광 화소를 하나의 그룹으로 형성하여 하나의 마이크로 렌즈를 공동으로 사용하고, 하나의 그룹의 감광 화소 내부의 각 감광 화소의 화소 정보를 각각 판독함으로써, 이미징 광선을 구분한다. 다수의 감광 화소 병합 이미징에 의해 높은 이미징 민감도와 SNR를 이룰 수 있을 뿐만 아니라, 광선의 입사 방향을 달리하여 위상차 정보에 대한 검출 기능을 구현할 수 있다.
도 1은 본 발명의 일 실시예에 따른 이미지 센서의 블록도이다. 도 1과 같이, 당해 이미지 센서(100)는 감광 유닛 어레이(10), 광 필터링 유닛 어레이(20) 및 마이크로 렌즈 어레이(30)를 포함한다.
그중, 상기 광 필터링 유닛 어레이(20)는 상기 감광 유닛 어레이(10) 및 상기 마이크로 렌즈 어레이(30) 사이에 위치한다. 상기 감광 유닛 어레이(10)는 복수의 감광 유닛을 포함한다. 상기 광 필터링 유닛 어레이(20)는 복수의 광 필터링 유닛(21)을 포함한다. 상기 마이크로 렌즈 어레이(30)는 복수의 마이크로 렌즈(31)를 포함한다. 각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함하는 바, 예를 들면, 본 발명의 일 실시예에서 감광 유닛은 2×2개의 감광 화소(110)를 포함한다.
일부 실시 형태에서 광 필터링 유닛 어레이(20)는 베이어 패턴(Bayer pattern)을 포함한다. 베이어 패턴 구조를 사용하면 종래의 베이어 패턴 구조에 대한 알고리즘을 사용하여 이미지 신호를 처리할 수 있으므로, 하드웨어 구조를 크게 조절하는 것을 필요로 하지 않는다.
도 2와 도 3을 참고하면, 베이어 구조에서 2×2개의 광 필터링 유닛(21)은 광 필터링 구조(22)를 구성한다. 2×2개의 광 필터링 유닛(21)은 각각 녹색, 적색, 남색 및 녹색의 광 필터링 유닛(21)이다. 종래의 광 필터링 유닛 어레이(20) 구조에서 각각의 광 필터링 유닛(21)은 하나의 감광 화소(110) 및 이미지 화소에 대응된다. 본 발명의 실시 형태에서, 광 필터링 유닛 어레이(20)는 베이어 구조를 이용하며, 다른 점이라면 각각의 광 필터링 유닛(21)이 다수의 감광 화소(110), 예를 들면 4개의 감광 화소(110)에 대응되는 것이다. 즉, 다수의 감광 화소(110)는 동일한 색상의 광 필터링 유닛(21)에 대응되는 것이다.
개괄하면, 본 발명의 실시예에 따른 이미지 센서(100)에서 다수의 감광 화소(110)는 하나의 그룹을 구성하고 하나의 마이크로 렌즈(31)를 공동으로 사용한다. 다시 말해, 종래의 이미지 센서 내의 하나의 마이크로 렌즈가 하나의 감광 화소에 대응되는 구조를, 하나의 마이크로 렌즈(31)가 다수의 감광 화소(110)에 대응되도록 변경하였는 바, 당해 감광 화소(110)의 그룹, 즉 감광 유닛 내의 감광 화소(110)가 동일한 색상의 광 필터링 유닛(21)에 대응되도록 변경하였다.
도 1에서의 이미지 센서의 구조에 기반하여, 이하 본 발명의 실시예에 따른 이미지 센서의 화소 정보 출력 방법에 대해 설명하기로 한다. 도 4는 본 발명의 일 실시예에 따른 이미지 센서의 화소 정보 출력 방법의 흐름도이다. 도 4와 같이, 당해 방법은 아래 단계를 포함한다.
S1: 모드 선택 지령에 따라 출력 모드를 확정한다.
본 발명의 실시예에서, 출력 모드는 제1 출력 모드와 제2 출력 모드를 포함한다. 그중, 제1 출력 모드는 이미징 민감도와 SNR의 향상 측면에 대해 제출한 출력 모드로 이해할 수 있고, 제2 출력 모드는 위상 포커싱과 피사계 심도 정보 테스트 측면에 대해 제출한 출력 모드로 이해할 수 있다.
S2: 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(10)의 출력을 판독한다. 그중, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 다수의 감광 화소(110)의 화소 정보를 병합하여 출력한다.
구체적으로, 동일한 하나의 마이크로 렌즈(31)에 대응되는 감광 유닛 내의 다수의 감광 화소(110)의 화소 정보를 병합하여 출력하는 경우, 하나의 마이크로 렌즈가 하나의 감광 화소(110)의 출력 신호에 대응된 경우에 비해, 다수, 예를 들면 N개의 감광 화소의 병합 출력 신호는 N배 증가한 것에 해당한다. 노이즈와 신호의 제곱근이 정비례되므로, 다시 말해 nosie∝(Signal)1/2이므로, 신호는 기존의 N배가 되고, 노이즈는 기존의 N1/2배로만 된다. 따라서, 이미지의 이미징 민감도와 SNR는 모두 상응하게 향상된다.
도 5는 본 발명의 구체적인 일 실시예에 따른 이미징 광선의 개략도이며, 그중, 하나의 마이크로 렌즈(112)는 하나의 광 필터링 유닛(113)과 4개의 감광 화소(111)에 대응된다. 도 6은 관련 기술에서의 이미징 광선의 개략도이며, 그중, 하나의 마이크로 렌즈(112)는 하나의 광 필터링 유닛(113)과 하나의 감광 화소(111)에 대응된다. 도 1과 도 5와 같이, 만약 4개의 감광 화소(111)의 화소 정보를 병합하여 출력하면, 신호는 도 6과 같은 화소 구조의 출력 신호의 4배가 되고, 노이즈는 도 6의 화소 구조의 2배만 되므로, 이미지의 민감도와 SNR는 모두 상응하게 향상된다.
이로부터 볼 수 있듯이, 본 발명의 실시예에 따른 이미지 센서(100)의 화소 정보 출력 방법은, 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 제1 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보를 병합하여 출력하며, 관련 기술 중 개개별 감광 화소(111)의 출력에 비해 이미징 민감도와 SNR를 높이고, 화면의 품질을 높일 수 있다.
위상 검출의 조건을 충족시키기 위하여 위상 포커싱을 진행하며, 제2 출력 모드를 선택한 경우에는, 동일한 하나의 감광 유닛의 다수의 감광 화소(110)의 화소 정보가 각각 단독으로 출력되는 것을 제어한다. 나아가, 감광 유닛의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하고, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
관련 지식에 의하여 알수 있듯이, 도 6의 화소 구조, 즉 하나의 마이크로 렌즈(112)가 하나의 광 필터링 유닛(113)과 하나의 감광 화소(111)에 대응된 구조에 대해 말하면, 포커싱된 경우, 도 7의 (1)과 같이, 이미징 광선은 마이크로 렌즈를 거쳐 감광 화소에 집광되어 이미징되며, 디포커싱된 경우, 도 7의 (2)와 같이, 이미징 광선이 발산되고, 각각의 마이크로 렌즈는 다수의 방향의 광선을 받아들여 하측의 대응 감광 화소의 이미징에 이용한다. 동일한 하나의 감광 화소가 받아들인 광선의 방향을 구분할 수 없으므로 위상 검출 조건을 충족시킬 수 없다. 관련 기술에서, 일반적으로 PDAF( Phase Detection Auto Focus, 위상 검출 자동 포커싱)를 구현하기 위하여, 통상적으로 이미지 센서 내에서 서로 인접하고 쌍을 이루어 설치된 감광 화소 구조 설계(차폐 화소, masked pixels라고도 한다. 차폐 화소의 구조는 일반적인 감광 화소에 비해 구조가 더 복잡하며, 통상적으로 일반적인 감광 화소 자체의 구조를 변경하거나 또는 감광 화소 구조에 단독으로 하나의 광선 차단부를 추가한다. 이로써 차폐 화소로 입사하는 다수 방향의 광선 중에서 특정 방향의 광선은 차폐 화소의 감광 부분에 도달하지 못하고, 특정 방향 외의 광선은 차폐 화소의 감광 부분에 도달할 수 있도록 한다. 다시 말해, 차폐 화소는 통상적으로, 쌍을 이루고, 인접하며 대칭되게 설치된다. 쌍을 이루어 설치된 차폐 화소는 다수 방향의 광선을 분리한다)를 이용하여, 쌍을 이루어 설치된 차폐된 화소로 입사한 다수 방향의 이미징 광 빔을 예를 들어 좌측과 우측 두 부분으로 분리하며, 좌측과 우측 두 부분의 광선이 이미징된 후의 위상차(즉, 쌍을 이루어 설치된 차폐 화소의 출력을 수집하는 것)를 비교하여 카메라가 이동해야 할 거리를 계산한다.
본 발명의 실시예에서는, '각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛을 뒤덮고, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함한다. 즉 각각의 마이크로 렌즈(31)는 다수의 감광 화소(110)와 대응된다. 따라서 각각의 마이크로 렌즈(31)가 받아들인 다수의 광선은 다수의 감광 화소(110)의 이미징에 이용되는 것'에 기반하여 동일한 하나의 감광 유닛의 다수의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 제어함으로써, 다수 방향의 광선 신호를 획득할 수 있다. 이로부터 볼 수 있듯이, 상기 구조는 이미징 광 빔을 분리하는 작용을 하며, 나아가 각각의 감광 유닛의 다수의 감광 화소(110)의 화소 정보의 출력에 의하여, 이미징 광선을 인식할 수 있으며, 서로 다른 방향의 광선 신호의 비교를 통하여, 이미징된 이미지의 위상차 정보를 획득할 수 있으며, 더 나아가, 위상차 정보에 의하여 피사체의 거리 정보를 획득하며, 위상 포커싱과 피사계 심도 정보의 테스트에 데이터 기초를 제공한다. 분명한 바, 본 발명의 실시예에서는 마이크로 렌즈 어레이(30), 광 필터링 유닛(20)과 감광 어레이(10)의 배합 설계만을 이용하여, 위상 포커싱의 검출을 구현할 수 있으며, 일반적인 감광 화소 자체의 구조를 변환할 필요가 없거나, 또는 감광 화소 구조에 단독으로 하나의 차단부를 추가할 필요가 없으므로, 위상 포커싱의 검출 구현 방식도 더 간단해진다.
예를 들면, 도 5와 같이 각각의 감광 유닛의 4개의 감광 화소(111)의 화소 정보가 각각 판독되는 경우, 4개의 감광 화소(111)의 화소 정보의 출력을 토대로 서로 다른 방향의 광선 신호, 예를 들면, 상, 하, 좌, 우의 광선 신호를 획득할 수 있으며, 서로 다른 방향의 광선 신호를 비교함으로써, 이미지 전체의 위상차 정보를 획득할 수 있으며, 나아가 위상차 정보를 포커싱 거리 정보로 변환하고, 포커싱 거리 정보에 의하여 카메라의 위치를 조절함으로써 위상 포커싱을 구현할 수 있다.
개괄하면, 본 발명의 실시예에 따른 이미지 센서(100)의 화소 정보 출력 방법은 각각의 마이크로 렌즈(31)가 다수의 감광 화소(110)에 대응되게 설치되는 것에 기반하여 두 가지 작동 상태를 구현할 수 있다. 하나의 작동 상태는 각각의 감광 유닛의 다수의 감광 화소(110)의 화소 정보를 병합하여 출력함으로써 화면의 품질을 향상할 수 있다. 다른 하나의 작동 상태는 각각의 감광 유닛의 다수의 감광 화소(110)의 화소 정보를 단독으로 출력하고 감광 화소 간의 정보를 비교함으로써 위상차 정보를 획득하여, 위상 포커싱과 피사계 심도 정보의 테스트에 데이터 기초를 제공한다.
이하 본 발명의 다른 측면의 실시예에 따른 위상 포커싱 방법에 대해 설명한다.
도 8은 본 발명의 일 실시예에 따른 위상 포커싱 방법의 흐름도이다. 도 8과 같이 당해 위상 포커싱 방법은 아래 단계를 포함한다.
S10: 이미지 센서(100)를 제공한다.
이미지 센서(100)는 감광 유닛 어레이(10), 광 필터링 유닛 어레이(30) 및 마이크로 렌즈 어레이(30)를 포함하며, 광 필터링 어레이는 감광 유닛 어레이 상에 설치되고, 마이크로 렌즈 어레이는 광 필터링 어레이 상에 위치하며, 상기 광 필터링 유닛 어레이(20)는 상기 감광 유닛 어레이(10) 및 상기 마이크로 렌즈 어레이(30) 사이에 위치한다. 상기 감광 유닛 어레이(10)는 복수의 감광 유닛을 포함한다. 상기 광 필터링 유닛 어레이(20)는 복수의 광 필터링 유닛(21)을 포함한다. 상기 마이크로 렌즈 어레이(30)는 복수의 마이크로 렌즈(31)를 포함한다. 각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함하는 바, 다시 말해 각각의 마이크로 렌즈(31)는 다수의 감광 화소(110)에 대응된다.
S20: 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(10)의 출력을 판독한다. 그중, 동일한 하나의 감광 유닛의 다수의 감광 화소(110)의 화소 정보가 각각 단독으로 출력되는 것을 제어한다.
S30: 감광 유닛의 다수의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하며, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명에 따른 위상 포커싱 방법은 이미지 센서(100)의 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보를 각각 단독으로 출력하며, 디포커싱 상태인 경우, 각각의 감광 유닛은 서로 다른 방향의 광선 신호를 획득함으로써, 위상 포커싱에 조건을 제공할 수 있으며, 나아가 위상차 정보를 획득하여 위상 포커싱을 구현할 수 있다.
이하 본 발명의 또 다른 측면의 실시예에 따른 이미징 장치(1000)에 대해 설명하기로 한다.
도 9는 본 발명의 일 실시예에 따른 이미징 장치(1000)의 블록도이다. 도 9와 같이, 상기 이미징 장치(1000)는 상술한 측면에 따른 이미지 센서(100)와 제어 모듈(200)을 포함한다.
제어 모듈(200)은 모드 선택 지령에 따라 출력 모드를 확정하며, 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(10)의 출력을 판독한다. 그중, 제1 출력 모드를 선택한 경우에는, 제어 모듈(200)은 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보가 병합되어 출력되는 것을 제어한다.
본 발명에 따른 이미징 장치(1000)는 이미지 센서(100)의 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 제1 출력 모드를 선택한 경우에는, 제어 모듈이 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 병합하여 출력한다. 따라서 관련 기술 중 개개별 감광 화소(111)의 출력에 비해, 이미징 민감도와 SNR를 높이고 화면의 품질을 높일 수 있다.
본 발명의 실시예에서, 제2 출력 모드를 선택한 경우에는, 제어 모듈(200)은 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보가 각각 단독으로 출력되는 것을 제어한다. 제어 모듈(200)은 감광 유닛의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하며, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명의 또 다른 측면의 실시예는 단말기(2000)를 더 제공한다. 도 10과 같이, 당해 단말기(2000)는 상술한 측면의 실시예에 따른 이미징 장치(1000)를 포함한다. 당해 단말기(2000)는 촬영 가능하며, 이미징 품질을 높이고, 위상 검출 기능을 구비한다.
이하 도면을 참고하여, 본 발명의 또 다른 측면의 실시예에 따른 이미징 장치(1000)를 설명한다. 당해 이미징 장치(100)는 이미지 센서(100)와 제어 모듈(200)을 포함한다.
제어 모듈(200)은 이미지 센서(100)의 감광 유닛 어레이(10)가 노광되는 것을 제어하고, 감광 유닛 어레이(100의 출력을 판독한다. 그중, 동일한 하나의 감광 유닛의 감광 화소(110)의 화소 정보를 각각 단독으로 출력하며, 감광 유닛의 감광 화소(110)의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하며, 위상차 정보에 의하여 위상 포커싱의 조절을 진행한다.
본 발명의 이미징 장치(1000)에 의하면, 이미지 센서(100)의 각 렌즈(31)가 하나의 광 필터링 유닛(21)과 다수의 감광 화소(110)에 대응되는 구조에 기반하여, 제어 모듈(200)이 동일한 하나의 감광 유닛의 감광 화소의 화소 정보를 각각 단독으로 출력하며, 디포커싱 상태인 경우, 각각의 감광 유닛은 서로 다른 방향의 광선 신호를 획득함으로써 위상 포커싱에 조건을 제공할 수 있으며, 나아가 위상차 정보를 획득하여 위상 포커싱을 구현하는 데 기초를 제공할 수 있다.
이하 도면을 참고하여, 본 발명의 또 다른 측면의 실시예에 따른 단말기(2000)를 설명한다. 당해 단말기(2000)는 상술한 또 다른 측면의 실시예에 따른 이미징 장치(1000)를 포함한다. 당해 단말기(2000)는 위상 포커싱의 기능을 구비한다.
구체적으로, 단말기(2000)는 핸드폰을 포함할 수 있으나 이에 한정되지 않는다.
이미징 장치(1000)는 핸드폰의 프론트 카메라를 포함할 수 있으며, 위상차 정보에 의하여 초점 조절 거리 정보를 획득하며, 나아가 초점 조절 거리 정보에 의하여 프론트 카메라의 거리를 조절하여 위상 포커싱을 구현할 수 있다.
상술한 측면의 실시예에 따른 이미지 센서(100)에 기반하고, 그중, 이미지 센서(100)는 감광 유닛 어레이(10), 상기 광 필터링 유닛 어레이(20)는 상기 감광 유닛 어레이(10) 및 상기 마이크로 렌즈 어레이(30) 사이에 위치한다. 상기 감광 유닛 어레이(10)는 복수의 감광 유닛을 포함한다. 상기 광 필터링 유닛 어레이(20)는 복수의 광 필터링 유닛(21)을 포함한다. 상기 마이크로 렌즈 어레이(30)는 복수의 마이크로 렌즈(31)를 포함한다. 각각의 마이크로 렌즈(31)는 하나의 광 필터링 유닛(21)과 감광 유닛(31)을 뒤덮으며, 각각의 감광 유닛은 다수의 감광 화소(110)를 포함한다. 이하 도면을 참고하여 본 발명의 실시예에 따른 이미징 방법을 설명하기로 한다.
도 11은 본 발명의 일 실시예에 따른 이미징 방법의 흐름도이다. 도 11과 같이, 당해 이미징 방법은 아래 단계를 포함한다.
S1: 감광 유닛 어레이(10)의 출력을 판독한다.
S2: 동일한 하나의 감광 유닛의 감광 화소(110)의 출력을 덧셈하여 당해 감광 유닛의 화소 값을 획득하여 병합 이미지를 생성한다.
본 발명의 실시 형태에 따른 이미징 방법은 기존의 각각의 감광 유닛의 출력이 S이고, 노이즈가 N이며, 감광 유닛이 M개의 감광 유닛을 포함한다고 가정하면, 감광 유닛의 화소 값은 n×m×S이고, 감광 유닛의 노이즈는 이며, n=2, m=2의 경우에, 감광 유닛의 노이즈는 n×m×N/2 정도이다. 따라서, 저 휘도 환경에서 감광 유닛의 휘도가 향상되며, 신호대 잠음비가 향상된다.
도 12를 참고하면, 일부 실시 형태에서 각각의 감광 유닛은 2×2개의 감광 화소(110)를 포함하며 이미지 센서는 레지스터를 포함하며, 단계 S2는 아래 단계를 더 포함한다.
S201: 제k 행 및 제k+1 행의 감광 화소(110)의 출력을 수집하여 레지스터에 저장한다. 그중 k=2n-1이고, n은 자연수이며, k+1은 감광 화소(110)의 총 행 수와 같거나 그보다 작다.
S202: 레지스터로부터 제k 행 및 제k+1 행 감광 화소(110)의 출력을 추출하여, 동일한 하나의 감광 유닛의 감광 화소(110)의 출력을 덧셈하여 감광 유닛의 화소 값을 획득한다.
이와 같이, 레지스터를 충분히 이용하여 감광 화소(110)의 출력의 판독, 캐시 및 병합의 프로세스를 구현할 수 있다.
도 13을 참고하면, 일부 실시 형태에서 단계 S2는,
S301: 감광 화소(110)가 발생시킨 아날로그 신호 출력을 디지털 신호 출력으로 변환하는 단계; 및
S302: 동일한 하나의 감광 유닛의 감광 화소(110)의 출력을 덧셈하여 감광 유닛의 화소 값을 획득하는 단계를 더 포함한다.
이와 같이 하여, 첫째로는 일반적으로 디지털 신호 처리 칩인 이미지 처리 모듈이 이미지 센서의 출력을 바로 처리할 수 있으며, 둘째로는 회로를 통해 이미지 센서의 아날로그 신호 포맷의 출력을 바로 처리하는 일부 기술적 수단에 비해, 이미지의 정보를 바람직하게 보존한다. 예를 들어, 16M 화소의 이미지 센서에 대해 말하자면, 본 발명의 실시 형태에 따른 이미징 방법은 4M 화소(2×2개 화소를 병합)의 병합 이미지를 생성할 수 있을 뿐만 아니라, 16M 화소(즉 병합하지 않음)의 이미지를 생성할 수도 있다.
본 발명의 또 다른 측면의 실시예는 이동 단말기(2000)를 더 제출한다. 당해 이동 단말기(2000)는 하우징, 프로세서, 메모리, 회로기판 및 전원 회로를 포함하며, 그중, 상기 회로기판은 상기 하우징에 의해 둘러싸인 공간 내부에 안착되고, 상기 프로세서와 상기 메모리는 상기 회로기판 상에 설치되며; 상기 전원 회로는 상기 이동 단말기의 각 회로 또는 디바이스에 전기를 공급하기 위한 것이며; 상기 메모리는 실행 가능한 프로그램 코드를 저장하기 위한 것이며; 상기 프로세서는 상기 메모리에 저장된 실행 가능한 프로그램 코드를 판독하여 상기 실행 가능한 프로그램 코드에 대응되는 프로그램을 작동시켜, 상술한 측면의 이미징 방법을 실행하기 위한 것이다.
본 발명의 실시예는 컴퓨터 판독 가능한 저장 매체를 더 제출한다. 당해 컴퓨터 판독 가능한 저장 매체는 그에 저장된 명령을 구비하며, 이동 단말기의 프로세서가 상기 명령을 실행하면, 상기 이동 단말기는 도 11과 같은 본 발명의 실시예에 따른 이미징 방법을 실행한다.
설명해야 하는 바로는, 본 명세서에서 예를 들어 제1 및 제2 등과 같은 관계 용어는 하나의 실체 또는 조작을 다른 실체 또는 조작과 구분하기 위해서만 이용되며, 이들 실체 또는 조작 간에 어떤 이와 같은 실제적 관계 또는 순서가 존재함을 반드시 요구하거나 암시하는 것은 아니다. 또한, 용어 '포함', '포괄' 또는 그것의 모든 기타 변형체는 비배타성의 포함을 커버함으로써, 일련의 요소를 포함한 프로세스, 방법, 물품 또는 기기가 이들 요소를 포함할 뿐만 아니라 명확하게 열거되지 않은 기타 요소도 포함하거나 또는 이러한 프로세스, 방법, 물품 또는 기기에 고유한 요소도 포함하도록 한다. 더 많이 한정되지 않은 경우에, 문장 '하나의 .......를 포함한다'로 한정된 요소는 상기 요소를 포함한 프로세스, 방법, 물품 또는 기기에 그밖의 다른 동일한 요소가 더 존재하는 것을 배제하지 않는다.
흐름도에 나타냈거나 또는 여기서 기타 방식으로 설명된 로직 및/또는 단계는 예를 들어, 로직 기능을 구현하기 위한 실행 가능한 명령의 시퀀스 리스트로 볼 수 있으며, 명령 실행 시스템, 장치 또는 기기(예를 들어 컴퓨터 기반 시스템, 프로세서를 포함하는 시스템, 또는 명령 실행 시스템, 장치 또는 기기로부터 명령을 추출하여 명령을 실행시킬 수 있는 기타 시스템)가 사용하도록, 또는 이들 명령 실행 시스템, 장치 또는 기기와 결합되어 사용되도록, 모든 컴퓨터 판독가능 저장 매체에서 구체적으로 구현될 수 있다. 본 명세서에서 '컴퓨터 판독가능 저장 매체'는 프로그램을 포함, 저장, 통신, 전파 또는 전송하여 명령 실행 시스템, 장치 또는 기기, 또는 이들 명령 실행 시스템, 장치 또는 기기와 결합되어 사용될 수 있는 모든 장치일 수 있다. 컴퓨터 판독가능 저장 매체의 더 구체적인 예시(비전면적인 리스트, non exhaustive list)로는, 하나 또는 다수의 배선을 가진 전기적 연결부(전자 장치), 휴대용 컴퓨터 디스크 박스(자기 장치), 램(RAM), 롬(ROM), 소거가능 및 프로그램 가능한 판독전용 메모리(EPROM 또는 플래시 메모리), 광섬유 장치, 및 휴대용 씨디롬(CDROM)을 포함한다. 또한, 컴퓨터 판독가능 매체는 상기 프로그램이 인쇄될 수 있는 용지 또는 기타 적절한 매체일 수도 있다. 그 이유는, 예를 들어 용지 또는 기타 매체에 대해 광학적 스캔을 진행하고, 이어서 편집, 디코딩 또는 필요시 기타 적절한 방식으로 처리하여 전자 형태로 상기 프로그램을 얻은 후 이를 컴퓨터 메모리에 저장할 수 있기 때문이다.
본 발명의 각 파트는 하드웨어, 소프트웨어, 펌웨어 또는 이들의 조합으로 구현될 수 있는 것으로 이해되어야 한다. 상기 실시 형태에서, 다수의 단계 또는 방법은, 메모리에 저장되어 적절한 명령 실행 시스템에 의해 실행되는 소프트웨어 또는 펌웨어를 통해 구현될 수 있다. 예를 들어, 하드웨어를 통해 구현되는 경우, 다른 실시 형태에서와 마찬가지로, 본 기술 분야에서 널리 알려진 하기 기술 중의 임의의 하나 또는 이들의 조합을 통해 구현될 수 있다. 상기 '기술'은 데이터 신호에 대해 로직 기능을 구현하기 위한 로직 게이트 회로를 갖춘 이산 로직 회로, 적절한 조합 로직 게이트 회로를 갖춘 전용 집적 회로, 프로그램 가능 게이트 어레이(PGA), 필드-프로그램 가능 게이트 어레이(FPGA) 등이다.
본 명세서의 설명에서, 참고 용어 '일 실시예', '일부 실시예', '예시', '구체적인 예시', 또는 '일부 예시' 등 설명은 당해 실시예 또는 예시를 결부하여 설명한 구체적인 특징, 구조, 재료 또는 특점이 본 발명의 적어도 하나의 실시예 또는 예시에 포함됨을 의미한다. 본 명세서에서 상기 용어에 대한 예시적 표현은 동일한 실시예 또는 예시를 반드시 가리키는 것은 아니다. 또한, 설명된 구체적인 특징, 구조, 재료 또는 특점은 임의의 하나 또는 다수의 실시예 또는 예시에서 적절한 형태로 결합될 수 있다. 또한, 서로 모순되지 않는 상황에서 본 기술 분야의 통상의 지식을 가진 자는 본 명세서에서 설명된 서로 다른 실시예 또는 예시 및 서로 다른 실시예 또는 예시의 구성요소를 결합 및 조합할 수 있다.
비록 위에서 본 발명의 실시예를 나타내고 설명했으나, 상기 실시예는 예시적인 것임을 이해할 수 있으며, 본 발명을 한정하는 것으로 이해되어서는 안된다. 본 기술 분야의 통상의 지식을 가진 자는 본 발명의 범위 내에서 상기 실시예를 변경, 수정, 교체 및 변형할 수 있다.
2000: 단말기 1000: 이미징 장치 100: 이미지 센서
10: 감광 유닛 어레이 20: 광 필터링 어레이 30: 마이크로 렌즈 어레이
110: 감광 화소 21: 광 필터링 유닛 31: 마이크로 렌즈
22: 광 필터링 구조
10: 감광 유닛 어레이 20: 광 필터링 어레이 30: 마이크로 렌즈 어레이
110: 감광 화소 21: 광 필터링 유닛 31: 마이크로 렌즈
22: 광 필터링 구조
Claims (20)
- 이미지 센서의 화소 정보 출력 방법에 있어서,
상기 이미지 센서는 감광 유닛 어레이, 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하고, 상기 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 및 상기 마이크로 렌즈 어레이 사이에 위치하며, 상기 감광 유닛 어레이는 복수의 감광 유닛을 포함하고, 상기 광 필터링 유닛 어레이는 복수의 광 필터링 유닛을 포함하며, 상기 마이크로 렌즈 어레이는 복수의 마이크로 렌즈를 포함하고, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 2×2개의 감광 화소를 포함하며, 상기 방법은,
모드 선택 지령에 따라 출력 모드를 확정하는 단계; 및
상기 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하는 단계를 포함하되, 그중, 상기 출력 모드가 제1 출력 모드인 경우에는, 동일한 하나의 상기 감광 유닛의 2×2개의 감광 화소의 화소 정보가 병합되어 출력되고, 상기 출력 모드가 제2 출력 모드인 경우에는, 동일한 하나의 상기 감광 유닛의 2×2개의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 특징으로 하는 이미지 센서의 화소 정보 출력 방법. - 삭제
- 제1 항에 있어서,
상기 제2 출력 모드를 선택한 경우에는,
상기 감광 유닛의 다수의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하는 단계; 및
상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행하는 단계를 더 포함하는 것을 특징으로 하는 이미지 센서의 화소 정보 출력 방법. - 위상 포커싱 방법에 있어서,
상기 방법은,
이미지 센서를 제공하는 단계를 포함하되, 상기 이미지 센서는 감광 유닛 어레이, 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하고, 상기 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 및 상기 마이크로 렌즈 어레이 사이에 위치하며, 상기 감광 유닛 어레이는 복수의 감광 유닛을 포함하고, 상기 광 필터링 유닛 어레이는 복수의 광 필터링 유닛을 포함하며, 상기 마이크로 렌즈 어레이는 복수의 마이크로 렌즈를 포함하고, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 2×2개의 감광 화소를 포함하며;
상기 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하는 단계를 포함하되, 그중, 동일한 하나의 상기 감광 유닛의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 제어하고; 및
상기 감광 유닛의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하고, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행하는 단계를 포함하는 것을 특징으로 하는 위상 포커싱 방법. - 삭제
- 이미징 장치에 있어서,
이미지 센서; 및
제어 모듈을 포함하며,
상기 이미지 센서는,
감광 유닛 어레이;
상기 감광 유닛 어레이 상에 설치된 광 필터링 유닛 어레이; 및
마이크로 렌즈 어레이를 포함하며,
상기 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 및 상기 마이크로 렌즈 어레이 사이에 위치하며, 상기 감광 유닛 어레이는 복수의 감광 유닛을 포함하고, 상기 광 필터링 유닛 어레이는 복수의 광 필터링 유닛을 포함하며, 상기 마이크로 렌즈 어레이는 복수의 마이크로 렌즈를 포함하고, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 2×2개의 감광 화소를 포함하고,
상기 제어 모듈은 모드 선택 지령에 따라 출력 모드를 확정하며, 상기 이미지 센서의 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하며, 그중, 상기 출력 모드가 제1 출력 모드인 경우에는, 상기 제어 모듈은 동일한 하나의 감광 유닛의 2×2개의 감광 화소의 화소 정보가 병합되어 출력되거나 또는 상기 출력 모드가 제2 출력 모드인 경우에는, 상기 제어 모듈은 동일한 하나의 상기 감광 유닛의 2×2개의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 제어하는 것을 특징으로 하는 이미징 장치. - 삭제
- 제6 항에 있어서,
제2 출력 모드를 선택한 경우에는, 상기 제어 모듈은 상기 감광 유닛의 다수의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하고, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행하는 것을 특징으로 하는 이미징 장치. - 단말기에 있어서,
제6 항 또는 제8 항에 따른 이미징 장치를 포함하는 것을 특징으로 하는 단말기. - 이미징 장치에 있어서,
이미지 센서; 및
제어 모듈을 포함하며,
상기 이미지 센서는,
감광 유닛 어레이;
상기 감광 유닛 어레이 상에 설치된 광 필터링 유닛 어레이; 및
마이크로 렌즈 어레이를 포함하며,
상기 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 및 상기 마이크로 렌즈 어레이 사이에 위치하며, 상기 감광 유닛 어레이는 복수의 감광 유닛을 포함하고, 상기 광 필터링 유닛 어레이는 복수의 광 필터링 유닛을 포함하며, 상기 마이크로 렌즈 어레이는 복수의 마이크로 렌즈를 포함하고, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 2×2개의 감광 화소를 포함하고,
상기 제어 모듈은 상기 이미지 센서의 감광 유닛 어레이가 노광되는 것을 제어하고, 상기 감광 유닛 어레이의 출력을 판독하며, 그중, 동일한 하나의 감광 유닛의 2×2개의 감광 화소의 화소 정보를 각각 단독으로 출력하며, 상기 감광 유닛의 2×2개의 감광 화소의 화소 정보에 의하여 이미징 광선 구분을 진행하여 이미징의 위상차 정보를 획득하고, 상기 위상차 정보에 의하여 위상 포커싱의 조절을 진행하는 것을 특징으로 하는 이미징 장치. - 이미지 센서의 이미징 방법에 있어서,
상기 이미지 센서는 감광 유닛 어레이, 광 필터링 유닛 어레이 및 마이크로 렌즈 어레이를 포함하고, 상기 광 필터링 유닛 어레이는 상기 감광 유닛 어레이 및 상기 마이크로 렌즈 어레이 사이에 위치하며, 상기 감광 유닛 어레이는 복수의 감광 유닛을 포함하고, 상기 광 필터링 유닛 어레이는 복수의 광 필터링 유닛을 포함하며, 상기 마이크로 렌즈 어레이는 복수의 마이크로 렌즈를 포함하고, 각각의 마이크로 렌즈는 하나의 광 필터링 유닛과 감광 유닛을 뒤덮으며, 각각의 감광 유닛은 2×2개의 감광 화소를 포함하며, 상기 이미징 방법은,
상기 감광 유닛 어레이의 출력을 판독하는 단계;
동일한 하나의 상기 감광 유닛의 감광 화소의 출력을 덧셈하여 상기 감광 유닛의 화소 값을 획득함으로써 병합 이미지를 생성하는 단계를 포함하고,
출력 모드가 제1 출력 모드인 경우에는, 동일한 하나의 상기 감광 유닛의 2×2개의 감광 화소의 화소 정보가 병합되어 출력되고, 상기 출력 모드가 제2 출력 모드인 경우에는, 동일한 하나의 상기 감광 유닛의 2×2개의 감광 화소의 화소 정보가 각각 단독으로 출력되는 것을 특징으로 하는 이미징 방법. - 삭제
- 제11 항에 있어서,
상기 판독하는 단계는,
상기 감광 화소가 발생시킨 아날로그 신호 출력을 디지털 신호 출력으로 변환하는 단계를 더 포함하는 것을 특징으로 하는 이미징 방법. - 이동 단말기에 있어서,
하우징, 프로세서, 메모리, 회로기판 및 전원 회로를 포함하며, 그중 상기 회로기판은 상기 하우징에 의해 둘러싸인 공간 내부에 안착되고, 상기 프로세서와 상기 메모리는 상기 회로기판 상에 설치되며; 상기 전원 회로는 상기 이동 단말기의 각 회로 또는 디바이스에 전기를 공급하기 위한 것이며; 상기 메모리는 실행 가능한 프로그램 코드를 저장하기 위한 것이며; 상기 프로세서는 상기 메모리에 저장된 실행 가능한 프로그램 코드를 판독하여 상기 실행 가능한 프로그램 코드에 대응되는 프로그램을 작동시켜, 제11 항 또는 제13 항에 따른 이미징 방법을 실행하기 위한 것임을 특징으로 하는 이동 단말기. - 컴퓨터 판독 가능한 저장 매체에 있어서,
당해 컴퓨터 판독 가능한 저장 매체는 그에 저장된 명령을 구비하며, 이동 단말기의 프로세서가 상기 명령을 실행하면, 상기 이동 단말기는 제11 항 또는 제13 항에 따른 이미징 방법을 실행하는 것을 특징으로 하는 컴퓨터 판독 가능한 저장 매체.
- 삭제
- 삭제
- 삭제
- 삭제
- 삭제
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510963242.5 | 2015-12-18 | ||
CN201510963242.5A CN105611122B (zh) | 2015-12-18 | 2015-12-18 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
PCT/CN2016/101704 WO2017101572A1 (zh) | 2015-12-18 | 2016-10-10 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20170120134A KR20170120134A (ko) | 2017-10-30 |
KR102038680B1 true KR102038680B1 (ko) | 2019-10-30 |
Family
ID=55990638
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020177026269A KR102038680B1 (ko) | 2015-12-18 | 2016-10-10 | 이미지 센서 및 출력 방법, 위상 포커싱 방법, 이미징 장치와 단말기 |
Country Status (11)
Country | Link |
---|---|
US (2) | US10880501B2 (ko) |
EP (1) | EP3236647A4 (ko) |
JP (1) | JP2018509061A (ko) |
KR (1) | KR102038680B1 (ko) |
CN (1) | CN105611122B (ko) |
AU (1) | AU2016370348B2 (ko) |
MY (1) | MY184812A (ko) |
SG (1) | SG11201706245YA (ko) |
TW (2) | TWI612811B (ko) |
WO (1) | WO2017101572A1 (ko) |
ZA (1) | ZA201706228B (ko) |
Families Citing this family (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105611122B (zh) * | 2015-12-18 | 2019-03-01 | Oppo广东移动通信有限公司 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
CN106504218B (zh) | 2016-11-29 | 2019-03-12 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106454288B (zh) | 2016-11-29 | 2018-01-19 | 广东欧珀移动通信有限公司 | 控制方法、控制装置、成像装置及电子装置 |
CN106454054B (zh) | 2016-11-29 | 2019-03-19 | Oppo广东移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN106341670B (zh) | 2016-11-29 | 2017-09-22 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
CN107040730B (zh) * | 2017-04-28 | 2020-05-08 | Oppo广东移动通信有限公司 | 图像传感器的成像控制方法、图像传感器,以及成像装置 |
CN107147845B (zh) * | 2017-04-28 | 2020-11-06 | Oppo广东移动通信有限公司 | 对焦方法、装置和终端设备 |
CN107105141B (zh) | 2017-04-28 | 2019-06-28 | Oppo广东移动通信有限公司 | 图像传感器、图像处理方法、成像装置和移动终端 |
CN107135340A (zh) * | 2017-04-28 | 2017-09-05 | 广东欧珀移动通信有限公司 | 图像传感器、对焦控制方法、成像装置和移动终端 |
CN107155072A (zh) * | 2017-04-28 | 2017-09-12 | 广东欧珀移动通信有限公司 | 全景拍摄方法、装置和终端设备 |
CN107040702B (zh) * | 2017-04-28 | 2020-06-05 | Oppo广东移动通信有限公司 | 图像传感器、对焦控制方法、成像装置和移动终端 |
CN106982329B (zh) * | 2017-04-28 | 2020-08-07 | Oppo广东移动通信有限公司 | 图像传感器、对焦控制方法、成像装置和移动终端 |
US10714520B1 (en) * | 2017-08-04 | 2020-07-14 | Facebook Technologies, Llc | Manufacturing an on-chip microlens array |
US10777609B1 (en) * | 2019-04-01 | 2020-09-15 | Visera Technologies Company Limited | Optical devices with light collection elements formed in pixels |
CN110381181A (zh) * | 2019-06-28 | 2019-10-25 | 信利光电股份有限公司 | 前置距离感应方法、电子装置、存储介质和移动终端 |
CN111131714A (zh) * | 2019-12-31 | 2020-05-08 | 联想(北京)有限公司 | 图像采集控制方法、装置及电子设备 |
US11663728B2 (en) | 2020-01-16 | 2023-05-30 | Samsung Electronics Co., Ltd. | Depth estimation method and apparatus |
CN111464733B (zh) * | 2020-05-22 | 2021-10-01 | Oppo广东移动通信有限公司 | 控制方法、摄像头组件和移动终端 |
CN112243096B (zh) * | 2020-09-30 | 2024-01-02 | 格科微电子(上海)有限公司 | 像素合成模式下的像素读取方法及装置、存储介质、图像采集设备 |
CN112616009B (zh) * | 2020-12-31 | 2022-08-02 | 维沃移动通信有限公司 | 电子设备及其摄像模组 |
US20240056657A1 (en) * | 2021-02-20 | 2024-02-15 | Boe Technology Group Co., Ltd. | Image acquisition device, image acquisition apparatus, image acquisition method and manufacturing method |
CN113654459B (zh) * | 2021-07-22 | 2024-05-24 | 北京小米移动软件有限公司 | 一种屏下感光传感器位置确定方法、装置及存储介质 |
CN114650369A (zh) * | 2022-03-01 | 2022-06-21 | 维沃移动通信有限公司 | 成像方法和装置 |
CN114827488B (zh) * | 2022-04-26 | 2023-02-17 | 北京大学 | 像素结构单元、像素结构阵列及其操作方法、图像传感器 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012507250A (ja) * | 2009-10-14 | 2012-03-22 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | 光学画像装置、光学画像処理装置および光学画像形成方法 |
JP2014135451A (ja) * | 2013-01-11 | 2014-07-24 | Fujifilm Corp | 固体撮像装置 |
Family Cites Families (24)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6999119B1 (en) | 1998-04-10 | 2006-02-14 | Nikon Corporation | Image-capturing element, image-capturing circuit for processing signal from image-capturing element, image-capturing device, driving method of image-capturing element |
JP2004191630A (ja) * | 2002-12-11 | 2004-07-08 | Canon Inc | 撮像装置 |
US7568628B2 (en) | 2005-03-11 | 2009-08-04 | Hand Held Products, Inc. | Bar code reading device with global electronic shutter control |
KR100976284B1 (ko) * | 2007-06-07 | 2010-08-16 | 가부시끼가이샤 도시바 | 촬상 장치 |
US7745779B2 (en) | 2008-02-08 | 2010-06-29 | Aptina Imaging Corporation | Color pixel arrays having common color filters for multiple adjacent pixels for use in CMOS imagers |
US8134115B2 (en) * | 2009-06-23 | 2012-03-13 | Nokia Corporation | Color filters for sub-diffraction limit-sized light sensors |
WO2011136031A1 (ja) | 2010-04-28 | 2011-11-03 | 富士フイルム株式会社 | 撮像装置 |
KR101777351B1 (ko) * | 2011-05-16 | 2017-09-11 | 삼성전자주식회사 | 촬상 소자, 이를 이용한 디지털 촬영 장치, 오토 포커싱 방법, 및 상기 방법을 수행하기 위한 컴퓨터 판독가능 저장매체 |
JP2013066140A (ja) * | 2011-08-31 | 2013-04-11 | Sony Corp | 撮像装置、および信号処理方法、並びにプログラム |
CN102510450A (zh) * | 2011-10-17 | 2012-06-20 | 北京瑞澜联合通信技术有限公司 | 图像传感器、摄像装置及图像数据生成方法 |
TWI504251B (zh) * | 2012-07-04 | 2015-10-11 | Vivotek Inc | 攝像裝置在對焦時的提示聲音之處理方法 |
JP6271842B2 (ja) * | 2013-02-18 | 2018-01-31 | キヤノン株式会社 | 測距装置、測距方法、および撮像装置 |
US10136090B2 (en) * | 2013-03-15 | 2018-11-20 | Rambus Inc. | Threshold-monitoring, conditional-reset image sensor |
JP6220148B2 (ja) | 2013-04-26 | 2017-10-25 | キヤノン株式会社 | 撮像装置およびその制御方法 |
EP3008756B1 (en) | 2013-06-11 | 2021-04-21 | Rambus Inc. | Split-gate conditional- reset image sensor |
CN103531603B (zh) * | 2013-10-30 | 2018-10-16 | 上海集成电路研发中心有限公司 | 一种cmos图像传感器 |
WO2015083683A1 (ja) * | 2013-12-05 | 2015-06-11 | オリンパス株式会社 | 撮像装置、撮像装置の作動方法 |
CN103686103B (zh) * | 2013-12-31 | 2018-01-26 | 上海集成电路研发中心有限公司 | 具有合并和***模式的图像传感器、像素单元 |
JP6338436B2 (ja) * | 2014-04-25 | 2018-06-06 | キヤノン株式会社 | 撮像装置及びその制御方法 |
CN104064577A (zh) * | 2014-07-16 | 2014-09-24 | 上海集成电路研发中心有限公司 | 自动对焦的图像传感器 |
JP6369233B2 (ja) * | 2014-09-01 | 2018-08-08 | ソニー株式会社 | 固体撮像素子及びその信号処理方法、並びに電子機器 |
CN104241310B (zh) * | 2014-09-23 | 2017-11-07 | 上海集成电路研发中心有限公司 | 一种具有双微透镜层的cmos图像像素阵列 |
KR102390836B1 (ko) * | 2015-10-05 | 2022-04-26 | 삼성전자주식회사 | 이미지 데이터를 생성하는 전자 장치 및 방법 |
CN105611122B (zh) | 2015-12-18 | 2019-03-01 | Oppo广东移动通信有限公司 | 图像传感器及输出方法、相位对焦方法、成像装置和终端 |
-
2015
- 2015-12-18 CN CN201510963242.5A patent/CN105611122B/zh active Active
-
2016
- 2016-10-10 SG SG11201706245YA patent/SG11201706245YA/en unknown
- 2016-10-10 MY MYPI2017702798A patent/MY184812A/en unknown
- 2016-10-10 AU AU2016370348A patent/AU2016370348B2/en active Active
- 2016-10-10 WO PCT/CN2016/101704 patent/WO2017101572A1/zh active Application Filing
- 2016-10-10 KR KR1020177026269A patent/KR102038680B1/ko active IP Right Grant
- 2016-10-10 EP EP16874631.1A patent/EP3236647A4/en not_active Ceased
- 2016-10-10 JP JP2017541007A patent/JP2018509061A/ja active Pending
- 2016-12-15 TW TW105141603A patent/TWI612811B/zh active
- 2016-12-15 TW TW106142226A patent/TWI662842B/zh active
-
2017
- 2017-06-26 US US15/632,697 patent/US10880501B2/en active Active
- 2017-09-13 ZA ZA2017/06228A patent/ZA201706228B/en unknown
-
2019
- 2019-06-09 US US16/435,555 patent/US10764522B2/en active Active
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012507250A (ja) * | 2009-10-14 | 2012-03-22 | フラウンホッファー−ゲゼルシャフト ツァ フェルダールング デァ アンゲヴァンテン フォアシュンク エー.ファオ | 光学画像装置、光学画像処理装置および光学画像形成方法 |
JP2014135451A (ja) * | 2013-01-11 | 2014-07-24 | Fujifilm Corp | 固体撮像装置 |
Also Published As
Publication number | Publication date |
---|---|
WO2017101572A1 (zh) | 2017-06-22 |
MY184812A (en) | 2021-04-23 |
CN105611122B (zh) | 2019-03-01 |
TWI612811B (zh) | 2018-01-21 |
ZA201706228B (en) | 2019-01-30 |
US10764522B2 (en) | 2020-09-01 |
TW201818716A (zh) | 2018-05-16 |
CN105611122A (zh) | 2016-05-25 |
AU2016370348A1 (en) | 2017-08-10 |
TWI662842B (zh) | 2019-06-11 |
EP3236647A4 (en) | 2018-01-10 |
AU2016370348B2 (en) | 2018-06-28 |
SG11201706245YA (en) | 2017-08-30 |
JP2018509061A (ja) | 2018-03-29 |
EP3236647A1 (en) | 2017-10-25 |
US20170295332A1 (en) | 2017-10-12 |
US20190297288A1 (en) | 2019-09-26 |
KR20170120134A (ko) | 2017-10-30 |
TW201724842A (zh) | 2017-07-01 |
US10880501B2 (en) | 2020-12-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102038680B1 (ko) | 이미지 센서 및 출력 방법, 위상 포커싱 방법, 이미징 장치와 단말기 | |
KR102161557B1 (ko) | 이미지 센서, 이미징 방법 및 전자 디바이스(image sensor, imaging method and electronic device) | |
CN105611124B (zh) | 图像传感器、成像方法、成像装置及终端 | |
KR102166941B1 (ko) | 듀얼-코어 포커싱 이미지 센서, 이의 포커싱 제어 방법, 및 전자 디바이스(dual-core focusing image sensor, focusing control method for the same, and electronic device) | |
US7683964B2 (en) | Image capturing apparatus and image capturing method | |
US9088729B2 (en) | Imaging apparatus and method of controlling same | |
KR20170118197A (ko) | 이미징 방법, 이미징 장치 및 전자 장치 | |
US11108943B2 (en) | Image sensor, focusing control method, and electronic device | |
JP2009115893A (ja) | 撮像装置 | |
US9813687B1 (en) | Image-capturing device, image-processing device, image-processing method, and image-processing program | |
CN107040702B (zh) | 图像传感器、对焦控制方法、成像装置和移动终端 | |
WO2024016288A1 (zh) | 拍摄装置以及控制方法 | |
CN209132793U (zh) | 光学采集装置和电子设备 | |
KR101712516B1 (ko) | 카메라 모듈 및 그의 렌즈 쉐이딩 보정 방법 | |
JP5353187B2 (ja) | 撮像モジュールの検査方法及び撮像モジュール検査装置 | |
JP2020022085A (ja) | 画像信号処理装置 | |
JPWO2018047495A1 (ja) | 画像処理装置および配光制御システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
AMND | Amendment | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant |