KR20070011429A - 디지털 이미징 시스템을 이용하여 오브젝트로부터 광의대안적 형태의 재생 - Google Patents

디지털 이미징 시스템을 이용하여 오브젝트로부터 광의대안적 형태의 재생 Download PDF

Info

Publication number
KR20070011429A
KR20070011429A KR1020067022860A KR20067022860A KR20070011429A KR 20070011429 A KR20070011429 A KR 20070011429A KR 1020067022860 A KR1020067022860 A KR 1020067022860A KR 20067022860 A KR20067022860 A KR 20067022860A KR 20070011429 A KR20070011429 A KR 20070011429A
Authority
KR
South Korea
Prior art keywords
wavelengths
imaging
filter
provides
digital
Prior art date
Application number
KR1020067022860A
Other languages
English (en)
Inventor
슈슈 콴
Original Assignee
소니 일렉트로닉스 인코포레이티드
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 일렉트로닉스 인코포레이티드 filed Critical 소니 일렉트로닉스 인코포레이티드
Publication of KR20070011429A publication Critical patent/KR20070011429A/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/024—Details of scanning heads ; Means for illuminating the original
    • H04N1/028—Details of scanning heads ; Means for illuminating the original for picture information pick-up
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/48—Picture signal generators
    • H04N1/486—Picture signal generators with separate detectors, each detector being used for one specific colour component
    • H04N1/488—Picture signal generators with separate detectors, each detector being used for one specific colour component using beam-splitters
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/13—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths with multiple sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2101/00—Still video cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
    • H04N2201/024—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof deleted
    • H04N2201/02497—Additional elements, e.g. sheet guide plates, light shields

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Color Television Image Signal Generators (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Blocking Light For Cameras (AREA)

Abstract

본 발명의 일 실시예에 따르면, 제1 및 제2 파장의 세트에서 가시광의 비색계 정보를 캡처하는 필터를 갖는 디지털 이미징 디바이스가 개시된다. 캡처된 비색계 정보는 씬내의 오브젝트의 표면 반사를 재생하기 위해 처리된다.
디지털 이미징 시스템, 표면 반사, CCD, 상보형 금속 산화물 반도체, 필터

Description

디지털 이미징 시스템을 이용하여 오브젝트로부터 광의 대안적 형태의 재생{THE REPRODUCTION OF ALTERNATIVE FORMS OF LIGHT FROM AN OBJECT USING A DIGITAL IMAGING SYSTEM}
본 발명은 일반적으로 디지털 이미징에 관한 것이며, 특히 디지털 이미징을 이용하여 오브젝트로부터 광의 대안적 형태를 재생하는 것에 관한 것이다.
저작권 주의/허가
본 특허 문헌의 명세서의 일부는 저작권 보호를 받는 자료를 포함한다. 저작권자는 특허 상표국 특허 파일 또는 레코드에 개시된 특허 문헌 또는 명세서의 누군가에 의한 팩시밀리 재생에 이의를 제기하지 않지만, 그렇지 않은 경우에는 어떠한 경우에도 모든 저작권을 유보한다. 다음의 주의는 이하 개시되는 소프트웨어 및 데이터와 도면에 적용된다.
Copyright ⓒ 2003, Sony Electronics, Inc.,All Rights Reserved.
디지털 카메라 또는 디지털 캠코더와 같은 종래의 디지털 컬러 이미징 시스템은 당업자에게 잘 알려진 하나 또는 3개의 이미지 센서(예컨대, CCD(charge coupled device) 또는 상보형 금속-산화물 반도체(CMOS))를 이용한다. 예컨대, 전형적인 소비자 디지털 카메라는 하나의 CCD를 포함하고, 전형적인 디지털 캠코더는 3개의 CCD를 포함한다. 하나의 CCD를 구비한 디지털 카메라는 단일의 3색 필터를 구비할 수 있다. 3색 필터는 당업자에게 잘 알려진 프로세스를 이용하여 씬(scene)내에서 색 스펙트럼을 재생하기 위한 적색, 녹색, 청색의 필터로 구성된다. 하나의 CCD를 갖는 디지털 카메라는 3개의 CCD를 갖는 디지털 캠코더만큼 높은 색 해상도를 갖지 않는다. 3개의 CCD를 갖는 디지털 캠코더는 전형적으로 각각의 CCD위에 필터를 포함한다. 제1 CCD위의 제1 필터는 적색 스펙트럼만을 필터링하고, 제2 CCD위의 제2 필터는 녹색 스펙트럼을 필터링하고, 제3 CCD위의 제3 필터는 청색 스펙트럼만을 필터링한다.
소비자들은 이러한 카메라들의 3색 재생 능력의 장점을 즐기지만, 광원의 무한한 선택으로 인한 광원 추정 및 색 보정과 같은, 몇몇 심각한 단점이 항상 이들에 수반된다. 또한, 종래의 디지털 이미징 시스템은, 오브젝트의 표면 반사와 같은 복수의 광원 조건하에서 광의 대안적 형태를 캡처하는 능력이 결여되어 있다. 반사율은 시각적 스펙트럼에서 재방사되는 표면상에서 입사 발광 플럭스의 비(ratio)이다. 오브젝트의 표면 반사를 캡처하고 재생하는 수많은 이미지 디바이스가 있지만, 이러한 이미징 디바이스는, 비용 및 이미지를 캡처하는 속도로 인해, 상업적인 소비자 디지털 카메라 또는 캠코더에 실현가능하게 포함되지 않는다. 예컨대, 종래의 스펙트로-레디오미터(spectro-radiometer)는 오브젝트의 표면 반사를 재생하지만, 씬의 완전한 스펙트럼 이미지를 캡처하는 것은 전형적으로 단지 몇분 이상의 훨씬 긴 시간을 요한다. 씬내의 오브젝트가 이동하는 경향이 있으므로 대부분의 디지털 상용 이미징 시스템에서는 구현가능하지 않다. 오브젝트의 어떠한 움직임은 화소의 미스-레지스트레이션(mis-registration) 및 최종 이미지의 흐려짐을 초래한다.
본 발명의 일 실시예에 따르면, 제1 및 제2 파장의 세트에서 가시광의 비색계 정보를 캡처하는 필터를 갖는 디지털 이미징 디바이스가 개시된다. 캡처된 비색계 정보는 씬내의 오브젝트의 표면 반사를 재생하기 위해 처리된다.
도 1은 본 발명의 실시예에 따른 디지털 이미징 디바이스를 도시한다.
도 2는 본 발명의 일 실시예에 따른 3색 필터를 도시한다.
도 3은 가시광의 파장 파장 차트의 실시예를 도시한다.
도 4는 오브젝트의 표면 반사의 재생에 대한 처리의 흐름을 도시한다.
본 발명의 다음의 상세한 설명에서, 동일한 참조 번호가 동일한 엘리먼트를 나타내는 첨부 도면이 참조되고, 이것은 본 발명이 실시될 수 있는 특정 실시예를 도시하는 것이다. 이러한 실시예는, 당업자가 본 발명을 실시할 수 있도록 충분히 상세히 기술되었고, 다른 실시예도 이용될 수 있고, 논리적, 기계적, 전기적, 기능적인 다른 변경이 본 발명의 범주로부터 벗어남이 없이 수행될 수 있다는 것을 알아야 한다. 따라서, 다음의 상세한 설명은 제한된 의미가 아닌, 부가된 특허청구범위에 의해서만 본 발명의 범주가 한정된다.
디지털 이미징 디바이스를 이용하여 오브젝트의 표면 반사를 재생하는 것이 개시된다. 일 실시예에 따르면, 디지털 이미징 디바이스는 6개의 이미징 채널을 제공하도록 2개의 이미징 센서 및 2개의 3색 필터를 포함하지만 이에 한정되는 것은 아니다. 2개의 3색 필터는 다양한 파장의 비색계 정보를 캡처하도록 설계되어, 씬내의 오브젝트의 표면 반사와 같은 광의 대안적인 형태를 재생한다. 다음의 설명이 3색 필터를 포함하는 디지털 이미징 디바이스의 실시예를 기술하지만, 이하 더 기술되는 바와 같이, 이미징 센서에 다양한 수의 이미징 채널을 제공하는데 필터들이 이용될 수 있다는 것을 당업자는 알 수 있다.
도 1은 본 발명의 실시예에 따른 디지털 이미징 디바이스(100)를 도시한다. 디지털 이미징 디바이스(100)는, 3색 필터(110), 3색 필터(120), 빔 스플리터(beam splitter)(115), CCD(charge coupled device)(130), CCD(140), 아나로그-디지털 컨버터(ADC)(150), 및 프로세서(160)를 포함한다. 디지털 이미징 디바이스(100)는 또한 당업자에게 잘 알려진 부가적인 콤포넌트와 회로를 포함하지만, 이들은 상세한 설명을 모호하게 하지 않게 하기 위해 도시되지는 않았다. 다음에 도 1에 도시된 디바이스(100)의 간략한 개관을 제공한다.
3색 필터(110) 및 3색 필터(120)는, 이하 기술되는 바와 같이, 씬의 디지털 표현을 재생하는데 이용되는 비색계 정보를 캡처하기 위해 CCD(130) 및 CCD(140) 각각으로의 가시광을 필터링한다. 도시된 바와 같이, 광은 빔 스플리터(115)에 의해 2개의 성분으로 분리된다.
CCD(130) 및 CCD(140)는, 광(광자)을 전자(전하)로 변환하는, 포토사이트(photosite)로 불리는 광 감지 다이오드의 집합을 포함한다. 포토사이트 각각의 주된 기능은 광을 흡수하고, 이것은 비추어지는 광의 세기에 직접 비례하는 전하로 나타난다. 이러한 방식에서, 포토사이트는, 3색 필터(110) 및 3색 필터(120)을 통과하여 그 표면에 부딪치는 광의 전체 세기를 추적한다.
ADC(150)는 CCD(130) 및 CCD(140)에서 구성된 전하를 디지털 신호로 변환한다.
프로세서(160)는 디지털 신호를 씬의 디지털 이미지 표현으로 처리한다. 프로세서(160)는, 예컨대, 공지된 디지털 신호 처리기(DSP)가 될 수 있다. 일 실시예에서, 프로세서(160)는 디지털 이미지내의 화소의 색을 판정하기 위해 각 포토사이트에 대한 각각의 디지털 신호를 처리한다. 프로세서(160)는 또한 화이트 밸런스, 콘트라스트, 컬러, 및 다른 공지의 시각 특성을 위해 디지털 이미지를 보정 및 개선시킬 수 있다. 프로세서(160)는 또한 디지털 이미지를 디지털 이미징 디바이스(100)에 결합된 로컬 디스플레이(예컨대, LCD 디스플레이)로 보내거나, 유선 또는 무선 네트워크 접속(도시되지 않음)을 통해 디지털 이미지를 원격 디스플레이로 보낸다. 또한, 프로세서(160)는 당업자에게 잘 알려진 바와 같이 디지털 이미지를 압축할 수 있다.
디지털 이미징 디바이스(100)의 간략한 개관을 제공하였으므로, 3색 필터(110) 및 3색 필터(120)의 실시예에 대해 이하 설명한다. 도 2는 본 발명의 일 실시예에 따른 3색 필터(110)를 도시한다. 3색 필터(110)는 적색(210)의 대안적 행(205)의 패턴 및 녹색(215)의 행(206)을 갖는 녹색(215) 필터 및 청색(220) 필터를 포함한다. 이러한 방식에서, 3색 필터(110)는 CCD(130)에 대한 광의 3개의 이 미징 채널(예컨대 RGB)의 세트를 제공한다. 3색 필터(110)의 일례는 당업자에게 잘 알려진 베이어 필터(Bayer filter)이지만, 본 발명은 베이어 필터에만 한정되는 것은 아니다.
가시광은 약 400(nm) 및 800(nm)의 파장 사이의 색 스펙트럼의 일부라는 것을 알 수 있다. 상이한 파장은 인가의 뇌에 의해 색으로 해석되고, 가장 긴 파장인 적색으로부터 가장 짧은 파장인 보라색까지의 범위이다. 도 3은 가시광의 파장 차트(300)의 실시예를 도시한다. 파장(310)은 적색의 범위 및 감도 곡선을 도시한다. 파장(320)은 녹색의 범위 및 감도 곡선을 도시한다. 파장(330)은 청색의 범위 및 감도 곡선을 도시한다. 광 감도 곡선은 각 파장에서의, 필터 투과율, 렌즈 투과율, 적외선 컷오프 투과율, 및 전자 센서 반응도의 곱이며, 이는 당업자에게 잘 알려져 있다.
일 실시예에서, 3색 필터(110)는, 도 3에 도시된 바와 같이, 적색 필터(210)는 약 570 내지 620nm사이의 파장에서 가장 잘 반응하고, 녹색 필터(215)는 도 3에 도시된 바와 같이 약 520 내지 560nm의 파장에서 잘 반응하고, 청색 필터(230)는 도 3에 도시된 바와 같이 약 420 내지 470nm사이의 파장에서 잘 반응하도록 설계된다.
일 실시예에서, 3색 필터(120)는 3색 필터(110)에 의해 캡처된 것 이외의 파장의 세트의 가시광을 캡처하도록 설계된다. 예컨대, 도 3의 파장(340)은 오프셋 컬러 W에 대한 대략적인 파장 범위 감도 곡선을 도시하고, 이것은 청색 필터 파장(330)보다 작고, 도 3의 파장(350)은 오프셋 컬러 X에 대한 대략적인 파장 범위 감도 곡선을 도시하고, 이것은 녹색 및 청색 필터 파장사이며, 도 3의 파장(360)은 오프셋 컬러 Y에 대한 대략적인 파장 범위 감도 곡선을 도시하고, 이것은 녹색 및 적색 필터 파장 사이이며, 도 3의 파장(370)은 오프셋 컬러 Z에 대한 대략적인 파장 범위 감도 곡선을 도시하고, 이것은 적색 필터 파장보다 크다.
종래의 디지털 카메라 및 캠코더는 이용되는 CCD의 수에 관계없이 3개의 이미징 채널(예컨대, RGB)만을 제공했다. 디지털 이미징 디바이스(100)의 3색 필터(120)는 CCD(140)에 3개의 부가적인 이미징 채널을 제공하며, 이들 각각은 CCD(130)에 대해 3색 필터(110)에 의해 캡처된 것과는 분리된 파장을 갖는다. 부가적인 3개의 채널은 제1의 3개의 채널과 함께 동작하여 이하 기술되는 광의 대안적인 형태의 스펙트럼 재생을 계산한다. 일 실시예에서, 디지털 이미징 디바이스(100)는 오브젝트의 스펙트럼 방사 또는 반사의 정보를 추출하는데 이용될 수 있다. 일단 반사 스펙트럼 정보가 획득되면, 임의의 관찰광하에서 비색계 정보의 변환이 얻어진다.
일반적으로, 자연적인 오브젝트의 반사 스펙트럼은 PCA(principal component analysis) 또는 ICA(independent component analysis)의 측면에서 기본 함수의 제하된 수로 표현된다. 광대역 기술을 이용하는 전형적인 스펙트럼 이미징은 자연적 오브젝트의 반사 스펙트럼을 재생하기 위해 3대9 기조 함수를 응용한다. 광대역 접근법은 캡처되는 오브젝트의 스펙트럼 분석에 기초한다. 3개의 기조 함수는 통상적으로 오브젝트의 반사 스펙트럼을 표현하는데 충분하지 않지만, 6개의 기조 함수는 대부분의 경우에 오브젝트의 반사 스펙트럼을 정확하게 표현한다.
예컨대, 도 4는 프로세서(160)와 같은, 프로세서에 의해 오브젝트의 표면 반사의 재생에 대한 프로세스도(400)의 일 실시예를 도시한다. 블록(430)에서, 프로세서(160)는 ADC(150)로부터 디지털 신호를 수신한다.
블록(435)에서, 프로세서(160)는 6개의 이미징 채널에 기초하여 오브젝트의 스펙트럼 정보를 계산한다. 이러한 방식에서, 2개의 CCD 및 2개의 필터를 이용하는 디지털 이미징 디바이스는 고속 및 스펙트럼 재생 능력을 제공한다. 스펙트럼 복구 방법은 PCA , ICA 또는 위너(Wiener) 추정이 될 수 있다. 스펙트럼 재생에서, 스트레잇포워드 메트릭(straightforward metric)은 오브젝트의 측정된 것과 복구된 것의 표면 반사 스펙트럼의 차이의 제곱 평균이다. 일 실시예에서, 메트릭은 스펙트럼 재생의 스펙트럼 감도의 최적 설계를 결정하도록 먼저 정의된다. 스펙트럼 차이를 정의하는 후보 메트릭은:
후보 1 : 반사 스펙트럼의 제곱 평균 에러
Figure 112006079738723-PCT00001
여기서, R은 측정된 기준 스펙트럼 반사이고,
Figure 112006079738723-PCT00002
은 복구된 스펙트럼 반사이며,
후보 2 : 반사 스펙트럼의 가중 제곱 평균
Figure 112006079738723-PCT00003
여기서,
Figure 112006079738723-PCT00004
는, 인간의 시각 시스템의 주된 파장을 강조하는 q-팩터 곡선과 같은, 인간의 시각 시스템에 관련된 가중 함수의 샘플링으로부터 대각선 엘리먼트를 갖는 대각선 매트릭스로서 나타나는 가중 함수이다.
전술한 바와 같이, 오브젝트의 표면 반사 스펙트럼 및 정규화 메트릭(metric)을 복구하는 다양한 접근법이 있다. 예컨대, 주 성분 분석으로, 대부분의 자연적으로 발생하는 반사는, 표현적인 반사 샘플의 주 성분 분석으로부터 얻어지는 한정된 수의 주요 고유 벡터로부터 표현될 수 있다는 것을 알 수 있다. 디지털 이미징 디바이스(100)의 출력은 다음과 같이 표현된다.
Figure 112006079738723-PCT00005
여기서, S는 카메라 스펙트럼 감도를 나타내고, LC는 광원을 취하는 대각선 형태를 나타내고, B는 스펙트럼 반사 샘플의 트레이닝 세트로부터 PCA 또는 ICA를 통해 얻어지는 주요 성분 벡터를 나타내고, α는 주요 성분에 대한 가중을 나타낸다
Figure 112006079738723-PCT00006
. α는 의사 역 오퍼레이션을 이용하여 얻어질 수 있다.
Figure 112006079738723-PCT00007
따라서, 복구된 스펙트럼 반사는 다음과 같이 표현된다.
Figure 112006079738723-PCT00008
스펙트럼 차이의 최소화된 제곱 평균 에러는 다음과 같이 표현된다.
Figure 112006079738723-PCT00009
오브젝트의 표면 반사 스펙트럼을 복구하고, 메트릭을 정규화하기 위해 위너 추정을 이용하는 경우, 디지털 이미징 디바이스(100)의 출력 신호는 다음과 같이 표현된다.
Figure 112006079738723-PCT00010
여기서,
Figure 112006079738723-PCT00011
는 이미징 노이즈를 나타낸다. R의 추정은 다음과 같다.
Figure 112006079738723-PCT00012
여기서, F는 알려지지 않은 선형 전송 매트릭스이다. 식(1)에서 MSE를 최소화하기 위해, F의 표현식은 다음과 같다.
Figure 112006079738723-PCT00013
여기서, KR 및
Figure 112006079738723-PCT00014
은 표면 반사 스펙트럼과 노이즈 각각의 앙상블(ensemble)에 대한 상호관계 매트릭스이다.
노이즈 상호관계 매트릭스
Figure 112006079738723-PCT00015
은 실제로 이용되는 CCD 카메라에 대한 노이즈의 상세한 측정으로부터 추정될 수 있고,
Figure 112006079738723-PCT00016
Figure 112006079738723-PCT00017
여기서, nsample은 스펙트럼 반사의 앙상블에 대한 샘플의 수이다.
따라서, 식(1)에서 최소 제곱 평균 에러는 다음과 같이 표현된다.
Figure 112006079738723-PCT00018
Figure 112006079738723-PCT00019
여기서,
Figure 112006079738723-PCT00020
Figure 112006079738723-PCT00021
α(ㆍ) 및 τ(ㆍ)의 의미는 오브젝트의 전체 스펙트럼 정보 및 오브젝트의 복구된 스펙트럼 정보로서 해석된다. 최소 MSE에 대응하는 정규화 매트릭,
Figure 112006079738723-PCT00022
은 스펙트럼 품질 팩터, 또는 스펙트럼 재생에 대한 품질 팩터로 참조된다.
주요 매트릭으로서 스펙트럼 반사의 제곱 평균 에러외에, 특정 광원하의 평균 색 차이는 스펙트럼 재생을 위한 필터의 최적 설계에 대해 제2의 메트릭으로 취급된다. 주요 메트릭으로 생성된 최적 후보의 작은 집합은 제2 메트릭으로 정련(refine)될 수 있다.
일 실시예에서, 가중 함수를 갖는 위너 추정이 식(2)에서 MSEW를 최소화하여 이용될 수 있고, 반사 스펙트럼은 다음과 같이 추정된다.
Figure 112006079738723-PCT00023
그리고, 스펙트럼의 최소 제곱 평균 에러는,
Figure 112006079738723-PCT00024
Figure 112006079738723-PCT00025
여기서,
Figure 112006079738723-PCT00026
Figure 112006079738723-PCT00027
따라서, 정규화 메트릭은 다음과 같이 정의된다.
Figure 112006079738723-PCT00028
일부 프로세스가 본 발명의 범위를 벗어남이 없이, 도 4에 도시된 방법에 통합될 수 있으며, 특정 순서가, 개시되고 도시된 블록의 배열에 암시되지 않음을 이해해야 한다. 더욱이, 도 4와 연관돼서 기술된 방법이 기계 판독가능한 명령, 예컨대 소프트웨어에서 실시될 수 있음을 이해해야 한다. 이 명령은 기술된 동작을 수행하는 명령으로 프로그래밍된 범용 또는 특정 목적의 프로세서를 유발하는데 사 용될 수 있다. 대안적으로, 동작은 동작을 수행하기 위한 하드와이어드 로직을 포함하는 특정 하드웨어 컴포넌트, 프로그래밍된 컴퓨터 컴포넌트 및 커스텀 하드웨어 컴포넌트의 소정 조합에 의해 수행될 수 있다. 이 방법은 방법을 수행하기 위해 컴퓨터(또는 다른 전자 디바이스)를 프로그래밍하는데 사용될 수 있는 명령을 저장한 기계 판독가능한 매체를 포함하는 컴퓨터 프로그램 프로덕트로서 제공될 수 있다. 본 명세서의 목적상, 용어 "기계 판독가능한 매체"는 기계에 의한 실행 명령의 시퀀스를 저장 또는 코딩할 수 있으며 본 발명의 방법론 중 어느 하나를 기계가 수행하도록 하는 소정의 매체를 포함하는 것을 정의한다. 용어 "기계 판독가능한 매체"는 제한적이지 않게, 고체상태 메모리, 광 및 자기 디스크, 및 캐리어파 신호를 포함하는 것을 정의될 것이다. 더욱이, 액션을 취하거나 결과를 유발하는 것으로서, 하나의 형태 또는 다른 형태(예컨대, 프로그램, 절차, 프로세스, 어플리케이션, 모듈, 로직 등)에서 소트트웨어는 일반적이다. 이런 표현은 컴퓨터에 의한 소프트웨어 실행이 컴퓨터의 프로세서로 하여금 액션을 수행하거나 결과를 산출하게 하는 속기 방식일 뿐이다.
따라서, 2개의 이미징 센서와, 다수의 이미징 채널을 제공하는 2개의 필터를 구비한 새로운 디지털 컬러 이미징 시스템이 기술되었다. 2개의 CCD로부터 이미지 등록은 3개의 CCD 시스템보다 빠르고 효율적이다. 디지털 이미징 디바이스(100)의 신 구성은 단지 필터 패턴만이 2개의 이미징 센서에 대해 다르기 때문에, 단일 칩 디지털 카메라의 크기를 실질적으로 증가시키지 않는다. 그러나, 본 발명이 디지털 카메라 및 캠코더에 제한되지 않고 당업자에게 잘 알려진 임의의 이미징 디바이 스에서 사용될 수 있음은 자명하다.
3색 필터(110) 및 3색 필터(120)가 단지 3색 필터에 제한되지 않음에 유의해야 한다. 오히려, 대안적인 실시예에서, 3색 필터(110)는 4개의 이미징 채널을 제공하기 위하여 녹색의 2 파장을 포함할 수도 있다. 더욱이, 3색 필터(120)는 3색 필터(110)와는 다른 파장을 각각이 갖는 3과는 다른(예컨대, 1, 2 또는 4)의 임의의 수의 컬러 이미징 채널을 제공할 수도 있다. 이런 방식으로, 디지털 이미징 시스템(100)은 각각의 파장에 대한 다수의 컬러 이미징 채널을 생성한다.
본 발명이 비록 여러 실시예의 관점에서 기술된다 할지라도, 당업자에게는 본 발명이 이런 실시예에 제한되지 않음을 인식할 수 있을 것이다. 본 발명의 방법 및 장치는 첨부된 특허청구범위의 범위 내에서 수정 및 변경하여 실시될 수 있다. 따라서, 본 명세서는 본 발명을 제한하는 것이 아니라 단지 예시적인 것으로 여겨야 한다.

Claims (34)

  1. 디지털 이미징 시스템에 있어서,
    제1 이미징 센서와,
    상기 제1 이미징 센서와 연결된 제2 이미징 센서와,
    상기 제1 이미징 센서와 연결되며, 제1 파장의 세트에서 광을 필터링하는 제1 필터와,
    상기 제2 이미징 센서와 연결되는 제2 필터를 포함하며,
    상기 제2 필터는 제2 파장의 세트에서 광을 필터링하고, 상기 제1 파장의 세트는 상기 제2 파장의 세트와는 다른 디지털 이미징 시스템.
  2. 제1항에 있어서, 상기 제1 파장의 세트 및 상기 제2 파장의 세트에 기초하여 오브젝트의 표면 반사를 계산하는 프로세서를 더 포함하는 디지털 이미징 시스템.
  3. 제1항에 있어서, 상기 제1 이미징 센서는 CCD(charge coupled device) 또는 상보형 금속 산화물 반도체인 디지털 이미징 시스템.
  4. 제1항에 있어서, 상기 제2 이미징 센서는 CCD 또는 상보형 금속 산화물 반도체인 디지털 이미징 시스템.
  5. 제1항에 있어서, 상기 제1 필터는 3색 필터인 디지털 이미징 시스템.
  6. 제1항에 있어서, 상기 제2 필터는 3색 필터인 디지털 이미징 시스템.
  7. 제1항에 있어서, 상기 제1 필터는 3개의 이미징 채널을 제공하는 디지털 이미징 시스템.
  8. 제1항에 있어서, 상기 제1 필터는 4개의 이미징 채널을 제공하는 디지털 이미징 시스템.
  9. 제1항에 있어서, 상기 제2 필터는 3개의 이미징 채널을 제공하는 디지털 이미징 시스템.
  10. 제1항에 있어서, 상기 제2 필터는 4개의 이미징 채널을 제공하는 디지털 이미징 시스템.
  11. 제1항에 있어서, 상기 제2 필터는 2개의 이미징 채널을 제공하는 디지털 이미징 시스템.
  12. 제1항에 있어서, 상기 제2 필터는 1개의 이미징 채널을 제공하는 디지털 이 미징 시스템.
  13. 디지털 이미징 장치에 있어서,
    비색계(colorimetric) 정보를 캡처하는 제1 수단과,
    비색계 정보를 캡처하는 제2 수단 - 상기 비색계 정보를 캡처하는 상기 제1 수단은 상기 비색계 정보를 캡처하는 상기 제2 수단과 연결됨 -과,
    상기 제1 이미징 센서 수단과 연결되어, 제1 파장의 세트에서 광을 필터링하는 제1 필터링 수단과,
    상기 제2 이미징 센서 수단에 연결되어, 제2 파장의 세트에서 광을 필터링하는 제2 필터링 수단을 포함하며,
    상기 제1 파장의 세트는 상기 제2 파장의 세트와 다른 디지털 이미징 장치.
  14. 제13항에 있어서,
    상기 제1 파장의 세트 및 상기 제2 파장의 세트에 기초하여 오브젝트의 표면 반사를 계산하도록 처리하는 수단을 더 포함하며, 상기 처리 수단은 비색계 정보를 캡처하는 상기 제1 수단 및 상기 비색계 정보를 캡처하는 제2 수단에 연결되는 디지털 이미징 장치.
  15. 광의 제1 파장의 세트를 수신하는 단계와,
    광의 제2 파장의 세트를 수신하는 단계와,
    상기 제1 파장의 세트 및 상기 제2 파장의 세트를 처리하여 오브젝트의 표면 반사를 계산하는 단계를, 기계가 수행하게 하는 명령을 구비한 기계 판독가능한 매체.
  16. 제15항에 있어서, 상기 제1 파장의 세트는 3개의 이미징 채널을 제공하는 기계 판독가능한 매체.
  17. 제15항에 있어서, 상기 제1 파장의 세트는 4개의 이미징 채널을 제공하는 기계 판독가능한 매체.
  18. 제15항에 있어서, 상기 제2 파장의 세트는 3개의 이미징 채널을 제공하는 기계 판독가능한 매체.
  19. 제15항에 있어서, 상기 제2 파장의 세트는 4개의 이미징 채널을 제공하는 기계 판독가능한 매체.
  20. 제15항에 있어서, 상기 제2 파장의 세트는 1개의 이미징 채널을 제공하는 기계 판독가능한 매체.
  21. 제15항에 있어서, 상기 제2 파장의 세트는 2개의 이미징 채널을 제공하는 기 계 판독가능한 매체.
  22. 제15항에 있어서, 상기 표면 반사의 계산 단계는 주요 컴포넌트 분석을 수행하는 단계를 포함하는 기계 판독가능한 매체.
  23. 제15항에 있어서, 상기 표면 반사의 계산 단계는 독립 컴포넌트 분석을 수행하는 단계를 포함하는 기계 판독가능한 매체.
  24. 제15항에 있어서, 상기 표면 반사의 계산 단계는 위너 추정(Wiener estimation)을 수행하는 단계를 포함하는 기계 판독가능한 매체.
  25. 광의 제1 파장의 세트를 수신하는 단계와,
    광의 제2 파장의 세트를 수신하는 단계와,
    상기 제1 파장의 세트 및 상기 제2 파장의 세트를 처리하여 오브젝트의 표면 반사를 계산하는 단계를 포함하는 방법.
  26. 제25항에 있어서, 상기 제1 파장의 세트는 3개의 이미징 채널을 제공하는 방법.
  27. 제25항에 있어서, 상기 제1 파장의 세트는 4개의 이미징 채널을 제공하는 방 법.
  28. 제25항에 있어서, 상기 제2 파장의 세트는 3개의 이미징 채널을 제공하는 방법.
  29. 제25항에 있어서, 상기 제2 파장의 세트는 4개의 이미징 채널을 제공하는 방법.
  30. 제25항에 있어서, 상기 제2 파장의 세트는 1개의 이미징 채널을 제공하는 방법.
  31. 제25항에 있어서, 상기 제2 파장의 세트는 2개의 이미징 채널을 제공하는 방법.
  32. 제25항에 있어서, 상기 표면 반사의 계산 단계는 주요 컴포넌트 분석을 수행하는 단계를 포함하는 방법.
  33. 제25항에 있어서, 상기 표면 반사의 계산 단계는 독립 컴포넌트 분석을 수행하는 단계를 포함하는 방법.
  34. 제25항에 있어서, 상기 표면 반사의 계산 단계는 위너 추정(Wiener estimation)을 수행하는 단계를 포함하는 방법.
KR1020067022860A 2004-03-31 2005-03-30 디지털 이미징 시스템을 이용하여 오브젝트로부터 광의대안적 형태의 재생 KR20070011429A (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/816,055 US20050219659A1 (en) 2004-03-31 2004-03-31 Reproduction of alternative forms of light from an object using digital imaging system
US10/816,055 2004-03-31

Publications (1)

Publication Number Publication Date
KR20070011429A true KR20070011429A (ko) 2007-01-24

Family

ID=35053963

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020067022860A KR20070011429A (ko) 2004-03-31 2005-03-30 디지털 이미징 시스템을 이용하여 오브젝트로부터 광의대안적 형태의 재생

Country Status (7)

Country Link
US (1) US20050219659A1 (ko)
EP (1) EP1730946A4 (ko)
JP (1) JP2008501256A (ko)
KR (1) KR20070011429A (ko)
CN (1) CN101300854A (ko)
TW (1) TW200539693A (ko)
WO (1) WO2005099247A2 (ko)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2009111642A1 (en) * 2008-03-05 2009-09-11 Contrast Optical Design & Engineering, Inc. Multiple image camera and lens system
US8320047B2 (en) * 2008-03-28 2012-11-27 Contrast Optical Design & Engineering, Inc. Whole beam image splitting system
WO2010116366A1 (en) * 2009-04-07 2010-10-14 Nextvision Stabilized Systems Ltd Video motion compensation and stabilization gimbaled imaging system
JP2013504940A (ja) * 2009-09-10 2013-02-07 コントラスト オプティカル デザイン アンド エンジニアリング，インク． 全ビーム画像スプリッタシステム
CN102466520B (zh) 2010-11-11 2014-12-17 香港纺织及成衣研发中心 多光谱成像颜色测量***及其成像信号处理方法
JP5686376B2 (ja) * 2011-10-25 2015-03-18 日本電信電話株式会社 画像処理装置、方法、及びプログラム
US10257393B2 (en) 2016-02-12 2019-04-09 Contrast, Inc. Devices and methods for high dynamic range video
US10264196B2 (en) 2016-02-12 2019-04-16 Contrast, Inc. Systems and methods for HDR video capture with a mobile device
US9979906B2 (en) * 2016-08-03 2018-05-22 Waymo Llc Beam split extended dynamic range image capture system
JP7081835B2 (ja) 2016-08-09 2022-06-07 コントラスト， インコーポレイテッド 車両制御のためのリアルタイムｈｄｒビデオ
US11265530B2 (en) 2017-07-10 2022-03-01 Contrast, Inc. Stereoscopic camera
US10951888B2 (en) 2018-06-04 2021-03-16 Contrast, Inc. Compressed high dynamic range video

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4385325A (en) * 1980-04-17 1983-05-24 Xerox Corporation Raster input scanner comprising two CCD arrays
US4449151A (en) * 1981-06-03 1984-05-15 Ricoh Company, Ltd. Solid-state scanning apparatus
US4671650A (en) * 1982-09-20 1987-06-09 Crane Co. (Hydro-Aire Division) Apparatus and method for determining aircraft position and velocity
JPS59223074A (ja) * 1983-06-01 1984-12-14 Canon Inc 像処理装置
GB8430980D0 (en) * 1984-12-07 1985-01-16 Robinson M Generation of apparently three-dimensional images
US4648072A (en) * 1985-05-06 1987-03-03 Tektronix, Inc. High speed data acquisition utilizing multiplex charge transfer devices
DE3626463A1 (de) * 1985-08-13 1987-02-26 Toshiba Kawasaki Kk Bilderzeugungsgeraet fuer mehrere farben
US4980771A (en) * 1988-02-18 1990-12-25 Victor Company Of Japan, Ltd. Imaging device and imaging apparatus including the imaging device
JPH0284880A (ja) * 1988-06-22 1990-03-26 Ricoh Co Ltd 画像読取り装置の制御方法
US5101269A (en) * 1990-09-18 1992-03-31 Eastman Kodak Company Stereoscopic electronic slide and print viewer
JPH05223638A (ja) * 1992-02-12 1993-08-31 Tokyu Constr Co Ltd 測定画像の補正方法
JP3392886B2 (ja) * 1992-06-18 2003-03-31 ペンタックス株式会社 スチルビデオカメラ
US5396331A (en) * 1993-08-10 1995-03-07 Sanyo Machine Works, Ltd. Method for executing three-dimensional measurement utilizing correctively computing the absolute positions of CCD cameras when image data vary
JP3417051B2 (ja) * 1994-05-20 2003-06-16 東洋インキ製造株式会社 光源に依存しない特徴パラメータ値を用いた色情報処理方法および装置
KR0169376B1 (ko) * 1995-10-10 1999-03-20 김광호 멀티미디어 대응 가능한 씨씨디 카메라 시스템
JP3713321B2 (ja) * 1995-12-19 2005-11-09 オリンパス株式会社 カラー画像記録再生システム及び画像カラー画像記録再生方法
JPH11205532A (ja) * 1998-01-14 1999-07-30 Toshiba Corp 固体撮像装置
JP3925681B2 (ja) * 1999-05-19 2007-06-06 富士フイルム株式会社 マルチバンド画像出力方法および装置
US7057654B2 (en) * 2002-02-26 2006-06-06 Eastman Kodak Company Four color image sensing apparatus

Also Published As

Publication number Publication date
TW200539693A (en) 2005-12-01
EP1730946A2 (en) 2006-12-13
CN101300854A (zh) 2008-11-05
JP2008501256A (ja) 2008-01-17
WO2005099247A3 (en) 2007-10-18
WO2005099247A2 (en) 2005-10-20
EP1730946A4 (en) 2010-06-16
US20050219659A1 (en) 2005-10-06

Similar Documents

Publication Publication Date Title
KR20070011429A (ko) 디지털 이미징 시스템을 이용하여 오브젝트로부터 광의대안적 형태의 재생
US11070773B2 (en) Systems and methods for creating full-color image in low light
JP5140766B2 (ja) 不完全色および全色性ｃｆａ画像の改善
US8619143B2 (en) Image sensor including color and infrared pixels
US9025871B2 (en) Image processing apparatus and method of providing high sensitive color images
US7839437B2 (en) Image pickup apparatus, image processing method, and computer program capable of obtaining high-quality image data by controlling imbalance among sensitivities of light-receiving devices
US8125543B2 (en) Solid-state imaging device and imaging apparatus with color correction based on light sensitivity detection
JP4730082B2 (ja) 画像信号処理装置、撮像装置、および画像信号処理方法、並びにコンピュータ・プログラム
US7362894B2 (en) Image processing apparatus and method, recording medium, and program
TWI444050B (zh) 從彩色馬賽克成像器達到全色反應的方法及裝置
JP6582987B2 (ja) 映像撮影装置、映像撮影方法、符号型赤外カットフィルタ、および符号型特定色カットフィルタ
US8614746B2 (en) Image processing apparatus and method of noise reduction
CN104756488B (zh) 信号处理设备以及信号处理方法
CN108370422A (zh) 利用单个矩阵传感器采集可见和近红外图像的***和方法
JP5943393B2 (ja) 撮像装置
CN209345244U (zh) 成像***和相机模块
JPWO2018116972A1 (ja) 画像処理方法、画像処理装置および記録媒体
JP2011109620A (ja) 撮像装置および画像処理方法
JP5108013B2 (ja) カラー撮像素子及びこれを用いた撮像装置及びフィルタ
WO2013111824A1 (ja) 画像処理装置、撮像装置及び画像処理方法
Dikbas et al. Impact of Photometric Space Linearity on Demosaicing Image Quality
DiBella et al. Improved sensitivity high-definition interline CCD using the KODAK TRUESENSE Color Filter Pattern
WO2022185345A2 (en) Optimal color filter array and a demosaicing method thereof

Legal Events

Date Code Title Description
WITN Application deemed withdrawn, e.g. because no request for examination was filed or no examination fee was paid