KR101376701B1 - 화상처리장치, 촬상장치, 화상출력장치, 이들 장치에있어서의 방법 및 프로그램 - Google Patents

화상처리장치, 촬상장치, 화상출력장치, 이들 장치에있어서의 방법 및 프로그램 Download PDF

Info

Publication number
KR101376701B1
KR101376701B1 KR1020070056800A KR20070056800A KR101376701B1 KR 101376701 B1 KR101376701 B1 KR 101376701B1 KR 1020070056800 A KR1020070056800 A KR 1020070056800A KR 20070056800 A KR20070056800 A KR 20070056800A KR 101376701 B1 KR101376701 B1 KR 101376701B1
Authority
KR
South Korea
Prior art keywords
luminance
brightness
contrast
value
dark
Prior art date
Application number
KR1020070056800A
Other languages
English (en)
Other versions
KR20070118547A (ko
Inventor
토모오 미츠나가
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20070118547A publication Critical patent/KR20070118547A/ko
Application granted granted Critical
Publication of KR101376701B1 publication Critical patent/KR101376701B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/57—Control of contrast or brightness
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/40—Picture signal circuits
    • H04N1/409—Edge or detail enhancement; Noise or error suppression
    • H04N1/4092—Edge or detail enhancement
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/50—Extraction of image or video features by performing operations within image blocks; by using histograms, e.g. histogram of oriented gradients [HoG]; by summing image-intensity values; Projection analysis
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/71—Circuitry for evaluating the brightness variation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Picture Signal Circuits (AREA)

Abstract

입력화상에 대하여, 측광틀을 일률적으로 이용하지 않고, 국소적인 명암차를 가지는 영역이 명료하게 되도록 밝기 보정을 행한다.
콘트라스트영역 검출부(151)는 입력화상에 있어서 명암차(콘트라스트)의 뚜렷한 영역(콘트라스트영역)을 검출한다. 휘도분배부(156)는 콘트라스트영역내의 화소에 있어서 휘도의 국소 2차 미분(微分)을 산출하고, 그 국소 2차 미분의 부호가 양(+)이면 그 국소 2차 미분을 명측(明側) 휘도군 메모리(191)에 보관 유지시키고, 그 국소 2차 미분의 부호가 음(-)이면 그 국소 2차 미분을 암측(暗側) 휘도군 메모리(192)에 보관 유지시킨다. 경계 휘도치 생성부(157)는 명측 휘도군 메모리(191) 및 암측 휘도군 메모리(192)에 보관 유지된 명측 휘도 및 암측 휘도의 분포에 의거하여 양자(兩者)를 가능한 한 잘 분리될 수 있도록 경계 휘도치를 측광 평가치로서 생성한다.

Description

화상처리장치, 촬상장치, 화상출력장치, 이들 장치에 있어서의 방법 및 프로그램{Image processing apparatus, image capture apparatus, image output apparatus, and method and program for these apparatus}
도 1은, 본 발명의 실시형태에 있어서의 디지털 카메라(100)의 일구성예를 나타내는 도면이다.
도 2는, 본 발명의 실시형태에 있어서의 측광부(140)의 일구성예를 나타내는 도면이다.
도 3은, 본 발명의 실시형태에 있어서의 블록 평균 화상의 생성예를 나타내는 도면이다.
도 4는, 본 발명의 실시형태에 있어서의 측광 평가부(150)의 일구성예를 나타내는 도면이다.
도 5는, 본 발명의 실시형태에 있어서의 경계 휘도치의 생성예를 나타내는 도면이다.
도 6은, 본 발명의 실시형태에 있어서의 명측(明側) 휘도군과 암측(暗側) 휘도군의 생성예를 나타내는 도면이다.
도 7은, 본 발명의 실시형태에 있어서의 디지털 카메라(100)의 제어순서의 일례를 나타내는 도면이다.
도 8은, 본 발명의 실시형태에 있어서의 측광 처리의 처리순서의 일례를 나타내는 도면이다.
도 9는, 본 발명의 실시형태에 있어서의 측광 평가 처리의 처리순서의 일례를 나타내는 도면이다.
도 10은, 본 발명의 실시형태에 있어서의 콘트라스트영역 검출처리의 처리순서의 일례를 나타내는 도면이다.
도 11은, 본 발명의 실시형태에 있어서의 측광 평가치 생성처리의 처리순서의 일례를 나타내는 도면이다.
도 12는, 본 발명의 실시형태에 있어서의 휘도분배처리의 처리순서의 일례를 나타내는 도면이다.
도 13은, 본 발명의 실시형태에 있어서의 경계 휘도치 생성처리의 처리순서의 일례를 나타내는 도면이다.
도 14는, 본 발명의 실시형태에 있어서의 컴퓨터 시스템(200)의 일구성예를 나타내는 도면이다.
도 15는, 본 발명의 실시형태에 있어서의 인쇄 시스템에 의한 표시예를 나타내는 도면이다.
도 16은, 본 발명의 실시형태에 있어서의 인쇄 시스템의 처리순서의 일례를 나타내는 도면이다.
도 17은, 본 발명의 실시형태에 있어서의 컴퓨터 시스템(200)의 밝기 보정 처리의 기능 구성예를 나타내는 도면이다.
도 18은, 본 발명의 실시형태에 의한 스프라인(spline) 발생부(362)에 의하여 생성되는 톤 커브(tone curve)의 일례를 나타내는 도면이다.
도 19는, 본 발명의 실시형태에 있어서의 인쇄 시스템의 밝기 보정 처리의 전반의 순서예를 나타내는 도면이다.
도 20은, 본 발명의 실시형태에 있어서의 인쇄 시스템의 밝기 보정 처리의 후반의 순서예를 나타내는 도면이다.
[도면의 주요부분에 대한 부호의 설명]
100. 디지털 카메라 111. 렌즈
112. 조리개 113. 센서
114. 앰프 122. 드라이버
123. 타이밍 생성부 130. 카메라 신호처리부
140, 340. 측광부 141. 휘도 산출부
142. 비선형 변환부 143. 블록 평균 생성부
144. 블록 평균 휘도 화상 메모리 150, 350. 측광 평가부
151. 콘트라스트영역 검출부 152. 국소 콘트라스트 산출부
153. 임계치 판정부
154. 콘트라스트영역 정보 메모리 155. 측광 평가치 생성부
156. 휘도 분배부 157. 경계 휘도치 생성부
160. 카메라 동작 파라미터 170. 기준치 설정부
180. 차분치 산출부 190. 제어부
191. 명측 휘도군 메모리 192. 암측 휘도군 메모리
200. 컴퓨터 시스템 210. 컴퓨터
211. 프로세서 212. 메모리
213. 디스플레이 제어기 214. 입출력 인터페이스
220. 디스플레이 230. 마우스
240. 키보드 250. 기록매체 액세스 장치
260. 프린터 310. 변환부
311~313. 비선형 변환부 320. 계조 보정 처리부
321~323. 계조 보정부 330. 역변환부
331~333. 비선형 역변환부 361. 휘도역 생성부
362. 스프라인 발생부 363. 톤 커브 메모리
364. γ_comp 파라미터 메모리 371. 휘도 생성부
372. 비선형 변환부 377. 보간부
380. 계조 압축부 381, 382. 매핑부
390. 콘트라스트 보정부
본 발명은, 화상처리장치에 관한 것이며, 특히 화상의 밝기 보정을 행하는 화상처리장치, 촬상장치, 화상출력장치 및 이들에 있어서의 처리방법 및 당해 방법 을 컴퓨터에 실행시키는 프로그램에 관한 것이다.
화상을 적절한 밝기로 촬상 혹은 출력하기 위해서, 원화상의 밝기를 계측에 의하여 평가하고, 그 평가치에 의거하여 밝기 보정량을 산출하도록 하는 처리는, 촬상장치나 화상출력장치에 있어서 종래부터 행해지고 있다.
예를 들면, 촬상장치에서는, 광학계나 화상 센서의 동작을 자동 제어하는 기구를 갖추고 있는 것이 많지만, 특히 노광량을 제어하여 촬상된 화상의 밝기를 적절하게 하기 위한 기구는 AE(Auto Exposure)라 불린다. 이 AE기구를 가지는 촬상장치에서는, 디모자이크, 감마 보정, 색보정 등에 의하여 적절한 색과 계조를 가지고 칼라 화상 데이터를 생성하여 출력하는 계 외에, 촬상 데이터의 밝기를 측광하고 거기에 의거한 노출 제어를 행하는 계를 가진다. 즉, 촬상 데이터의 각 부분의 밝기 계측치에 의거하여 촬상 데이터의 밝기를 평가한 측광 평가치를 출력하고, 표준적인 밝기를 나타내는 기준치와 비교한다. 그리고, 측광 평가치와 기준치와의 사이의 어긋난 량을 차분치로 하고, 그 차분치가 「0」에 가까워지는 방향으로, 광학계의 조리개의 개구량, 센서의 전하 축적 시간 및 앰프의 증폭량 등이 조정되고, 노광량이 제어된다.
이와 같은 AE기구로서 촬상된 화상 데이터를 분할한 소영역마다 휘도치의 적분치를 생성하고, 그 휘도 적분치의 중량 가산을 화상 전체의 밝기 평가치로 하는 것이 제안되고 있다. 예를 들면, 화상 데이터의 전화면의 화소를 복수 영역으로 분할하고, 화상의 중앙부를 주요 영역으로서 측광치를 구하는 화상처리장치가 제안되고 있다(예를 들면, 특허 문헌 1 참조.).
[특허 문헌 1] 특개 2004－259177호 공보(도 1)
상술의 종래 기술에서는, 화상의 중앙부를 주요 영역으로서 측광치를 구하고 있다. 그렇지만, 피사체는 인물이나 풍경 등과 다방면에 거치기 때문에, 중요한 피사체가 화면 중심에 위치한다고는 할 수 없다.
또, 측광틀의 크기를 고정했을 경우, 피사체의 크기와의 관계로, 측광틀에 다른 물체가 들어올 가능성이 있다. 한편, 피사체에 맞추어 측광틀의 크기나 형태를 바꾸는 것은, 실제로는 곤란하다.
원래, 반사광량을 지표로 하고 밝기 보정을 행하기 위해서는, 엄밀하게는 그 피사체의 반사율에 맞추어 제어할 필요가 있다. 즉, 반사율이 작은 피사체는 어두운 것으로, 반사율이 큰 피사체는 밝은 것으로 재현되어야 한다. 그렇지만, 임의의 조명하에서 입력화상으로부터 피사체의 반사율을 알기 위해서는 물체인식처리를 전제로 하게 되며, 처리 속도의 관점에서도 현실적이지 않다.
그래서, 본 발명은, 입력화상에 대하여, 국소적인 명암차(콘트라스트)를 가지는 영역에 주목하여 입력화상의 밝기를 평가하는 것을 목적으로 한다. 또한, 그 입력화상의 밝기 평가치에 의거하여 촬상장치의 노출제어나 화상출력장치의 밝기 보정 처리를 행하는 것을 목적으로 한다.
본 발명은, 상기 과제를 해결하기 위하여 이루어진 것이며, 그 제 1의 측면은, 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과, 상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과, 상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단을 구비하는 것을 특징으로 하는 화상처리장치이다. 이것에 의해, 휘도의 콘트라스트가 큰 콘트라스트영역에 있어서, 명측 휘도 및 암측 휘도를 분리하는 경계 휘도치를 생성시킨다고 하는 작용을 초래한다.
즉, 피사체의 면적이 바뀌었다고 해도 그 윤곽에 있는 콘트라스트영역에 있어서의 명암의 비율은 변화하지 않기 때문에, 콘트라스트영역에 주목하는 본 발명에 의하면 피사체의 면적에 의하여 평가치가 흩어진다고 하는 종래의 문제는 해소된다. 또, 주위에 비해 상대적으로 반사율이 낮은 피사체는 어두운 것으로 재현되며, 주위에 비해 상대적으로 반사율이 높은 피사체는 밝은 것으로 재현되도록 되기 때문에, 본 발명에 의하면, 반사율이 낮은 피사체가 부자연스럽게 밝게 재현되며, 반사율이 높은 피사체가 부자연스럽게 어둡게 재현된다고 하는 종래의 문제는 해소된다.
또, 이 제 1의 측면에서, 상기 콘트라스트영역 검출수단은, 상기 부분영역 마다의 상기 입력휘도의 콘트라스트를 국소 콘트라스트로서 산출하는 국소 콘트라스트 산출수단과, 상기 국소 콘트라스트의 크기가 소정의 임계치보다 크면 상기 콘트라스트영역에 해당하는 것으로 판정하는 임계치 판정수단을 구비하도록 해도 좋다. 이것에 의해, 국소 콘트라스트의 크기와 임계치의 관계에 따라 콘트라스트영역을 검출시킨다고 하는 작용을 초래한다. 또, 이 경우에 있어서, 상기 국소 콘트라스트 산출수단은, 상기 부분영역 마다의 상기 입력휘도의 국소 1차 미분(微分)의 절대치를 콘트라스트로서 산출해도 좋고, 또, 상기 부분영역 마다의 상기 입력휘도의 국소 2차 미분의 절대치를 콘트라스트로서 산출해도 좋다. 혹은, 미분 연산을 이용하지 않고, 상기 부분영역 마다의 상기 입력휘도의 최대치와 최소치의 차의 절대치를 콘트라스트로서 산출해도 좋다.
또, 이 제 1의 측면에서, 상기 휘도분배수단은, 상기 콘트라스트영역에 해당하는 국소 영역마다 상기 입력휘도의 최대치를 상기 명측 휘도로 하고, 상기 입력휘도의 최소치를 상기 암측 휘도로 해도 좋고, 또, 상기 콘트라스트영역에 해당하는 화소위치마다 상기 입력휘도의 국소 2차 미분의 음(-)양(+)에 의하여 당해 화소위치의 상기 입력휘도를 상기 명측 휘도든지 상기 암측 휘도든지 어느 쪽에 분배해도 좋다.
또, 이 제 1의 측면에서, 상기 경계 휘도치 생성수단은, 상기 명측 휘도의 평균치(EG =1)와, 상기 명측 휘도의 분산치(VG =1)와, 상기 암측 휘도의 평균치(EG =0)와, 상기 암측 휘도의 분산치(VG =0)에 의거하여 방정식
Figure 112007042199691-pat00001
의 답인 경계 휘도치(Im)(단, EG =0＜Im＜EG =1)를 상기 경계 휘도치로서 생성해도 좋다. 이것은, 판별 분석 수법에 의해 경계 휘도치를 생성시키는 것이다. 또, 상기 2차 방정식을 간략화하고 이하의 방정식
Figure 112007042199691-pat00002
에 의하여 경계 휘도치(Im)(단, EG=0＜Im＜EG=1)를 생성해도 좋다. 이 경우, 경계 휘도치(Im)에 대한 1차 방정식으로서 풀 수 있다.
또, 본 발명의 제 2의 측면은, 복수의 화소로 이루어지는 입력화상 신호의 각 화소의 휘도에 대하여 비선형 변환을 행하는 비선형 변환수단과, 상기 입력화상 신호에 있어서의 부분영역에 대하여 상기 비선형 변환된 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과, 상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과, 상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단을 구비하는 것을 특징으로 하는 화상처리장치이다. 이것에 의해, 비선형 변환된 휘도의 콘트라스트가 큰 콘트라스트영역에 있어서, 명측 휘도 및 암측 휘도를 분리하는 경계 휘도치를 생성시킨다고 하는 작용을 초래한다.
또, 이 제 2의 측면에서, 상기 비선형 변환수단은 위에 볼록의 단조 증가함 수에 따라서 상기 비선형 변환을 행하도록 해도 좋다. 이 경우에 있어서, 상기 비선형 변환수단은 상기 비선형 변환으로서 대수(對數)변환을 행해도 좋고, 또, 감마 보정을 행해도 좋다.
또, 본 발명의 제 3의 측면은, 피사체를 촬상하여 복수의 화소로 이루어지는 입력화상 신호를 생성하는 촬상 수단과, 상기 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과, 상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과, 상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단과 상기 경계 휘도치에 의거하여 상기 촬상에 있어서의 노광량을 제어하는 제어 수단을 구비하는 것을 특징으로 하는 촬상장치이다. 이것에 의해, 휘도의 콘트라스트가 큰 콘트라스트영역에 있어서, 명측 휘도 및 암측 휘도를 분리하는 경계 휘도치에 의거하여 노광량을 제어시킨다고 하는 작용을 초래한다.
또, 본 발명의 제 4의 측면은, 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과, 상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과, 상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단과, 상기 경계 휘도치에 상당하는 상기 입력휘도치가 중용인 휘도치로서 출력되도록 밝기 보정을 행하는 밝기 보정 수단을 구비하는 것을 특징으로 하는 화상출력장치이다. 이것에 의해, 휘도의 콘트라스트가 큰 콘트라스트영역에 있어서, 명측 휘도 및 암측 휘도를 분리하는 경계 휘도치에 의거하여 입력화상을 보정시킨다고 하는 작용을 초래한다.
또, 이 제 4의 측면에서, 상기 밝기 보정 수단은, 상기 경계 휘도치 및 상기 입력휘도의 분포에 의거하여 휘도 계조의 압축에 이용하는 변환곡선을 산출하는 변환곡선 산출수단과, 상기 입력화상의 저주파 성분으로 이루어지는 대국 휘도 화상의 휘도인 대국 휘도를 산출하는 대국 휘도 산출수단과, 상기 변환곡선에 의거하여 상기 입력휘도의 계조 및 상기 대국 휘도의 계조를 압축하는 계조 압축 수단과, 상기 변환곡선의 기울기 및 계조가 압축된 상기 대국 휘도에 의거하여 계조가 압축된 상기 입력휘도로 이루어지는 계조 압축 입력화상의 콘트라스트를 보정하는 콘트라스트 보정 수단을 구비하도록 해도 좋다.
다음에 본 발명의 실시형태에 대하여 도면을 참조하여 상세하게 설명한다.
도 1은, 본 발명의 실시형태에 있어서의 디지털 카메라(100)의 일구성예를 나타내는 도면이다. 이 디지털 카메라(100)는, 렌즈(111)와 조리개(112)와, 센서(113)와, 앰프(114)와 드라이버(122)와 타이밍 생성부(123)와 카메라 신호처리부(130)와 측광부(140)와 측광 평가부(150)와 카메라 동작 파라미터(160)와 기준치 설정부(170)와 차분치 산출부(180)와 제어부(190)를 갖추고 있다.
렌즈(111)는, 피사체의 광화상(입사광)을 집광하는 것이다. 조리개(112)는, 렌즈(111)에 의하여 집광 된 광화상의 광량을 조정하는 것이다. 입사광은, 렌즈(111) 및 조리개(112) 등의 광학계를 통과하여 센서(113)에 도달한다.
센서(113)는, 집광 된 광화상을 광전 변환하고 전기신호로 변환하는 것이며, 예를 들면, CCD(Charge Coupled Devices) 이미지 센서 등에 의해 실현된다. 앰프(114)는, 센서(113)에 의하여 광전 변환된 화상 신호를 증폭(게인 업)하는 것이다. 이 앰프(114)에 의하여 증폭된 화상 신호는, 신호선(119)을 통과하여 카메라 신호처리부(130) 및 측광부(140)에 공급된다. 드라이버(122)는, 조리개(112)를 구동하여 조리개의 개구량을 조정하는 것이다. 타이밍 생성부(123)는, 센서(113)를 구동하여 전하 축적 시간을 조정하는 것이다.
카메라 신호처리부(130)는, 신호선(119)을 통과하여 앰프(114)로부터 공급된 화상 신호에 대하여, 디모자이크 처리, 감마 보정 처리, 색보정처리 등의 신호처리를 행하는 것이다. 이 카메라 신호처리부(130)에 의하여 신호 처리가 이루어진 화상 신호는, 신호선(139)으로부터 출력되며, 기록매체로의 기록이나 표시부에 있어서의 표시에 이용된다.
측광부(140)는, 신호선(119)을 통과하여 앰프(114)로부터 공급된 화상 신호에 대하여, 각 부분의 밝기의 계측 결과를 출력하는 것이다. 이 측광부(140)에 의한 계측 결과는, 신호선(149)을 통과하여 측광 평가부(150)에 공급된다.
측광 평가부(150)는, 신호선(149)을 통과하여 측광부(140)로부터 공급된 계측 결과에 근거하여, 그 화상 신호의 밝기를 평가한 측광 평가치를 생성하는 것이다. 이 측광 평가부(150)에 의하여 생성된 측광 평가치는, 신호선(159)을 통과하 여 차분치 산출부(180)에 공급된다.
카메라 동작 파라미터(160)는, 디지털 카메라(100)의 현재의 동작 상황을 나타내는 파라미터이다. 기준치 설정부(170)는, 카메라 동작 파라미터(160)를 참조하고, 표준적인 밝기를 나타내는 기준치를 설정하는 것이다. 또한, 이 기준치로서는, 예를 들면, 감마 곡선에 의하여 0.4 내지 0.5로 변환되는 18 내지 20％정도를 선택할 수 있다.
차분치 산출부(180)는, 측광 평가부(150)에 의하여 생성된 측광 평가치를, 기준치 설정부(170)에 의하여 설정된 기준치와 비교하여, 그 어긋난 량으로서의 차분치를 산출하는 것이다.
제어부(190)는, 차분치 산출부(180)에 의하여 산출된 차분치가 0에 가까워지는 방향으로, 광학계 조리개(112)의 개구량, 센서(113)의 전하 축적시간, 앰프(114)의 증폭량 등을 조정하는 제어신호를 생성하는 것이다. 제어부(190)에 의하여 생성된 제어신호는, 이들 조리개(112), 센서(113) 및 앰프(114) 등에 공급되며 각부는 이 제어신호에 의거하여 적절한 노광량을 얻을 수 있도록 동작한다.
도 2는, 본 발명의 실시형태에 있어서의 측광부(140)의 일구성예를 나타내는 도면이다. 이 측광부(140)는, 휘도 산출부(141)와 비선형 변환부(142)와 블록 평균 생성부(143)와 블록 평균 휘도 화상 메모리(144)를 갖추고 있다.
휘도 산출부(141)는, 신호선(119)을 통과하여 앰프(114)로부터 공급된 입력화상 신호에 대하여, 각 화소의 휘도를 산출하는 것이다. 통상의 칼라 센서에서는 화소마다는 어느 쪽이나 1개의 색 밖에 계측할 수 없기 때문에, 화상의 밝기를 계 측하기 위해서는, 일단 그러한 센서 출력으로부터 휘도를 산출하는 처리가 필요하다.
비선형 변환부(142)는, 휘도 산출부(141)에 의하여 산출된 각 화소의 휘도를 비선형 변환하는 것이다. 이 비선형 변환으로서는, 예를 들면, 대수변환이나 감마 보정 등의 위에 볼록의 단조 증가함수를 이용할 수 있다. 이 비선형 변환은, 밝기 보정을 위한 스케일링 조작에 대하여, 히스토그램 형상을 보존하기 위해 행해지는 것이다.
블록 평균 생성부(143)는, 비선형 변환부(142)에 의하여 비선형 변환된 화상 신호의 화상을 격자모양으로 분할한 블록마다, 비선형 변환된 휘도의 평균을 블록 평균 휘도로서 생성하는 것이다. 즉, 각 화소위치가 어느 쪽의 블록에 속하는지를 판별하고, 비선형 변환된 휘도를 가산해 감으로써 해당하는 블록의 적분치를 구하고, 그 적분치를 그 블록에 속하는 화소수로 제산함으로써 그 블록내의 비선형 변환된 휘도의 평균을 산출한다. 이 블록 평균 생성부(143)에 있어서 분할된 블록을 구성 화소로 하는 화상을 블록 평균 화상이라고 호칭하고, 그 구성 화소를 블록 화소라고 호칭한다. 즉, 블록 화소의 휘도는, 그 블록의 블록 평균 휘도로 된다. 또한, 하나의 블록은, 예를 들면 40×30 화소 또는 32×32 화소 정도의 크기를 채용할 수 있다.
블록 평균 휘도 화상 메모리(144)는, 블록 평균 생성부(143)에 의하여 생성된 블록 평균 화상을 보관 유지하는 것이다. 이 블록 평균 휘도 화상 메모리(144)에 보관 유지된 블록 평균화상은, 측광부(140)에 의한 계측 결과로서, 신호선(149) 을 통과하여 측광 평가부(150)에 공급된다.
도 3은, 본 발명의 실시형태에 있어서의 블록 평균 화상의 생성예를 나타내는 도면이다. 도 3a는, 블록으로 분할되기 전의 각 화소를 나타내고 있다. 휘도 산출부(141)에 의하여 산출된 휘도는, 비선형 변환부(142)에 의하여 비선형 변환되고, 도 3b의 굵은 선과 같이 블록으로 분할된다.
그리고, 블록 평균 생성부(143)에 의하여, 각 블록에 속하는 휘도(비선형 변환된 휘도)의 평균이 블록 평균 휘도로서 산출된다. 이 모습을 나타낸 것이 도 3c이다. 이것에 의해, 블록 평균 화상이 생성된다.
도 4는, 본 발명의 실시형태에 있어서의 측광 평가부(150)의 일구성예를 나타내는 도면이다. 이 측광 평가부(150)는, 콘트라스트영역 검출부(151) 및 측광 평가치 생성부(155)를 갖추고 있다. 콘트라스트영역 검출부(151)는, 블록 평균 화상에 있어서의 부분영역에 대하여, 휘도의 콘트라스트(휘도차)가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 것이다. 측광 평가치 생성부(155)는, 콘트라스트영역 검출부(151)에 의하여 검출된 콘트라스트영역에 있어서, 블록 평균 화상의 측광 평가치를 생성하는 것이다.
콘트라스트영역 검출부(151)는, 국소 콘트라스트 산출부(152)와 임계치 판정부(153)와 콘트라스트영역 정보 메모리(154)를 갖추고 있다.
국소 콘트라스트 산출부(152)는, 부분영역 마다의 휘도의 콘트라스트(휘도차이)를 국소 콘트라스트로서 산출하는 것이다. 이 국소 콘트라스트를 산출하기 위해서는, 예를 들면, 블록 평균 화상에 있어서의 휘도의 국소 1차 미분의 절대치 또는 국소 2차 미분의 절대치를 이용할 수 있다. 또, 미분 연산자가 아니어도, 국소 최대치와 국소 최소치의 차의 절대치를 이용해도 좋다.
임계치 판정부(153)는, 국소 콘트라스트 산출부(152)에 의하여 산출된 국소 콘트라스트의 크기가 소정의 임계치보다 큰지 아닌지를 비교하여, 국소 콘트라스트가 임계치보다 크면 콘트라스트영역에 해당하는 것이라고 판정하는 것이다.
콘트라스트영역 정보 메모리(154)는, 블록 평균 화상의 블록 화소에 대하여 콘트라스트영역에 해당하는지 아닌지의 정보를 콘트라스트영역 정보로서 보관 유지하는 메모리이다. 예를 들면, 블록 평균 화상의 각 블록 화소에 대응하고, 그 블록 화소가 콘트라스트영역에 해당하는지 아닌지를 나타내는 2치 데이터를, 1비트씩 보관 유지한다. 이 콘트라스트영역 정보는, 신호선(158)을 통과하여 측광 평가치 생성부(155)에 공급된다.
측광 평가치 생성부(155)는, 휘도분배부(156)와 명측 휘도군 메모리(191)와 암측 휘도군 메모리(192)와 경계 휘도치 생성부(157)를 갖추고 있다.
휘도분배부(156)는, 신호선(158)을 통과하여 공급된 콘트라스트영역 정보가 나타내는 콘트라스트영역에 있어서, 각 화소의 휘도를 밝은 휘도(이하, 명측 휘도라고 한다.)와 어두운 휘도(이하, 암측 휘도라고 한다.)로 분배하는 것이다. 예를 들면, 콘트라스트영역에 해당하는 국소 영역마다 휘도의 최대치를 명측 휘도로 하고, 휘도의 최소치를 암측 휘도로 할 수 있다. 또, 콘트라스트영역에 해당하는 화소위치마다 휘도의 국소 2차 미분의 음(-)양(-)에 의거하여 해당 화소위치의 휘도를 명측 휘도나 암측 휘도로 분류해도 좋다. 예를 들면, 화상에 적용하는 2차 미 분 연산자로서 1차원 2차 미분 연산자［1,－2, 1］를 2차원으로 합성한 것을 이용하는 경우는, 그 2차 미분 연산자의 출력이 음이면 당해 화소위치의 휘도를 명측 휘도로 하고, 양이면 암측 휘도로 한다. 덧붙여서 화상 처리 분야에서는, 상기의 2차 미분 연산자의 예의 음양을 반전시킨 것도 관용적으로 2차 미분 연산자로서 이용하기도 하지만, 그 경우는 명측 또는 암측 휘도의 판정을 상기와 반대로 할 필요가 있다.
또한, 콘트라스트영역 검출부(151)에 있어서 휘도의 국소 1차 미분의 절대치로부터 국소 콘트라스트를 구했을 경우, 혹은, 국소 최대치와 최소치의 차이의 절대치로부터 국소 콘트라스트를 구했을 경우에는, 휘도분배부(156)에 있어서의 휘도의 최대치 및 최소치로부터 휘도를 분배하는 것이 적합하다. 한편, 콘트라스트영역 검출부(151)에 있어서 휘도의 국소 2차 미분의 절대치로부터 국소 콘트라스트를 구했을 경우에는, 그 결과를 이용하여, 휘도분배부(156)에 있어서 휘도의 국소 2차 미분의 부호에 의해 휘도를 분배하는 것이 효율적이다. 단, 이들의 조합은, 특히 제약되는 것은 아니다.
명측 휘도군 메모리(191)는, 휘도분배부(156)에 의하여 명측 휘도로 분배된 휘도(비선형 변환된 휘도)를 보관 유지하는 것이다. 암측 휘도군 메모리(192)는, 휘도 분배부(156)에 의하여 암측 휘도로 분배된 휘도(비선형 변환된 휘도)를 보관 유지하는 것이다.
경계 휘도치 생성부(157)는, 명측 휘도군 메모리(191)에 보관 유지된 명측 휘도 및 암측 휘도군 메모리(192)에 보관 유지된 암측 휘도의 각각의 분포에 의거 하여 명측 휘도 및 암측 휘도의 경계 휘도치를 측광 평가치로서 생성하는 것이다. 즉, 명측 휘도와 암측 휘도를 가능한 한 잘 분리할 수 있도록 경계 화소치를 생성한다. 이 경계 휘도치 생성부(157)에 의하여 생성된 경계 화소치는, 측광 평가치로서 신호선(159)을 통과하여 출력된다.
본 발명의 실시형태에서는, 경계 화소치를 생성하기 위해서, 이하와 같이 판별 분석 수법을 이용한다. 즉, 어떤 휘도치(I)가 주어졌을 때에, 그것이 암측 휘도군이나 명측 휘도군의 어느 쪽에 속하는지의 사후 확률(posterior)이 큰 쪽 군에 그 휘도치(I)를 배분한다. 어느 쪽의 군에 속하는지의 확률 변수를 G로 하여, 암측 휘도군일 때 G=0, 명측 휘도군일 때 G=1로 한다. 여기서, 각각의 군에 속하는 사후 확률의 비율(Λ)은, 다음 식에 의해 주어진다.
Figure 112007042199691-pat00003
이 비율(Λ)의 대수를 취하면, logΛ＜0이면 휘도치(I)는 암측 휘도군에, logΛ＞0이면 휘도치(I)는 명측 휘도군에 속한다고 판단할 수 있다. logΛ=0이면 휘도치(I)는 양군(兩群)을 분리하는 경계 휘도상이다. 또한, 이 경우의 대수의 밑은 어느 것이나 좋고, 상용대수나 자연대수 등 적당히 선택할 수 있다.
p(I｜G)는, 암측 휘도군(G=0의 경우)과 명측 휘도군(G=1의 경우)의 휘도분포를 나타낸다. 여기서, 판별 분석을 적용하기 위해, 블록 평균 화상에 있어서의 콘 트라스트영역으로부터 얻어진 암측 휘도군과 명측 휘도군의 휘도축상의 분포는 정규 분포에 따르는 것으로 가정한다.
p(G)는, 휘도치에 관계없이 어느 쪽의 군에 속하는지 확률을 나타낸다. 본 발명의 실시형태에 있어서는, 콘트라스트영역의 암측 휘도와 명측 휘도에 주목하고 있기 때문에, 양군에 속하는 데이터의 수는 거의 동수이며, p(G=0)=p(G=1)라고 생각해도 지장 없다. 따라서, 양군을 분리하는 경계 휘도치(Im)에 대하여 이하의 방정식이 얻어진다.
Figure 112007042199691-pat00004
단, 명측 휘도의 평균치를 EG =1, 명측 휘도의 분산치를 VG =1, 암측 휘도의 평균치를 EG =0, 암측 휘도의 분산치를 VG =0으로 하고 있다. 이 식은, 경계 휘도치(Im)에 대하여 2차 방정식이기 때문에, 답이 2개 존재한다. 이들 양답 가운데, EG =0＜Im＜EG=1의 범위에 있는 쪽을 선택함으로써 경계 휘도치(Im)가 얻어진다.
또한, 여기에서는, 판별 분석의 예로서 2차 판별 분석을 예로 들어 설명했지만, 이외에도, 예를 들면 선형 판별이나 서포트 벡터 머신 등을 이용해도 좋다. 예를 들면, 선형판별의 경우는 상기 방정식이 이하와 같이 간략화된다. 또한, 이 식은 경계 휘도치(Im)(단, EG =0＜Im＜EG =1)에 대한 1차 방정식으로 된다.
Figure 112007042199691-pat00005
도 5는, 본 발명의 실시형태에 있어서의 경계 휘도치의 생성예를 나타내는 도면이다. 여기에서는, 콘트라스트영역에 있어서의 명측 휘도 및 암측 휘도의 그룹이 5그룹 만큼 표시되어 있다. 즉, 제 1그룹째의 명측 휘도(511) 및 암측 휘도(521)의 그룹, 제 2그룹째의 명측 휘도(512) 및 암측 휘도(522)의 그룹, 제 3그룹째의 명측 휘도(513) 및 암측 휘도(523)의 그룹, 제 4그룹째의 명측 휘도(514) 및 암측 휘도(524)의 그룹 및 제 5그룹째의 명측 휘도(515) 및 암측 휘도(525)의 그룹이다. 이들 그룹은, 휘도분배부(156)에 있어서, 휘도의 최대치 및 최소치를 나타내고, 또는, 휘도의 국소 2차 미분의 부호에 의하여 분배된 그룹이다.
이들 그룹의 분포를 나타낸 것이 그 위의 분포 그래프이며, 명측 휘도군(510)과 암측 휘도군(520)이다. 이 분포 그래프는 가로방향이 비선형 변환된 휘도(이 도면의 예에서는 휘도(L)의 대수)를 나타내고 있고, 우측만큼 휘도가 밝아지고 있다. 또, 상방향에는 각 휘도의 존재 확률이 나타나고 있고, 상측만큼 존재 확률이 높아지고 있다.
위에서 설명한 바와 같이, 방정식(수 2)의 답을 구함으로써 경계 휘도치가 얻어진다. 이 경계 휘도치가, 명측 휘도군(510)과 암측 휘도군(520)을 분리한다.
도 6은, 본 발명의 실시형태에 있어서의 명측 휘도군과 암측 휘도군의 생성예를 나타내는 도면이다. 도 6a는, 비선형 변환된 휘도의 명측 휘도 및 암측 휘도를 구별하기 전의 히스토그램 예이다. 이와 같은 분포를 나타내는 화상에 대하여 경계 휘도치를 구함으로써, 도 6b 및 도 6c와 같은 분포가 얻어진다. 즉, 도 6b는 비선형 변환된 휘도의 명측 휘도군의 히스토그램 예이며, 도 6c는 비선형 변환된 휘도의 암측 휘도군의 히스토그램 예이다.
또한, 이들 히스토그램 예에서는, 각각의 존재 확률이 최대치에 의하여 정규화가 행해지고 있다.
도 7은, 본 발명의 실시형태에 있어서의 디지털 카메라(100)의 제어순서의 일례를 나타내는 도면이다. 우선, 피사체로부터의 입사광이 렌즈(111) 및 조리개(112) 등의 광학계를 통과하여 센서(113)에 있어서 촬상되면(스텝 S901), 앰프(114)에 의하여 증폭된 입력화상에 대하여, 측광부(140)에 있어서 측광 처리가 행해진다(스텝 S910). 그리고, 측광 처리에 의한 계측 결과에 근거하여, 측광 평가부(150)에 있어서 측광 평가 처리가 행해진다(스텝 S920).
측광 평가 처리에 의한 측광 평가치가 출력되면(스텝 S902), 차분치 산출부(180)는 기준치 설정부(170)에 의하여 설정된 기준치와의 차분치를 생성한다(스텝 S903). 제어부(190)는, 생성된 차분치에 근거하여, 드라이버(122), 타이밍 생성부(123) 및 앰프(114) 등에 있어서의 제어신호를 생성하여 동작 제어를 행한다(스텝 S904).
도 8은, 본 발명의 실시형태에 있어서의 측광 처리(스텝 S910)의 처리순서의 일례를 나타내는 도면이다. 신호선(119)을 통과하여 입력화상이 입력되면(스텝 S911), 입력화상의 각 화소에 대하여 이하의 처리가 행해진다(루프L991). 여기서, 입력화상의 각 화소를 2차원 좌표(p, q)에 의해 나타낸다. 단, p 및 q는 함께 0 이상의 정수이다.
우선, 입력 화소(p, q)의 휘도가 휘도 산출부(141)에 의하여 산출된다(스텝 S912). 그 산출된 휘도는 비선형 변환부(142)에 의하여 비선형 변환된다(스텝 S913).
그리고, 블록 평균 생성부(143)에 있어서, 입력 화소(p, q)가 속하는 블록이 판별되고(스텝 S914), 그 판별된 블록의 적분치를 보관 유지하는 변수에, 입력 화소(p, q)의 비선형 변환된 휘도가 가산된다(스텝 S915).
루프(L991)에 있어서, 모든 입력 화소(p, q)에 대하여 상술의 처리를 하면, 다음으로 각 블록에 대하여 이하의 처리를 한다(루프 L992). 즉, 각 블록의 적분치를 그 블록의 화소수로 제산하는 처리가 행해진다(스텝 S916). 이것에 의해, 그 제산 결과는 각 블록의 블록 평균 휘도로서 블록 평균 휘도 화상 메모리(144)에 보관 유지된다(스텝 S917).
도 9는, 본 발명의 실시형태에 있어서의 측광 평가 처리(스텝 S920)의 처리순서의 일례를 나타내는 도면이다. 신호선(149)을 통과하여 블록 평균 화상이 입력되면(스텝 S921), 콘트라스트영역 검출부(151)에 있어서의 블록 평균 화상에 대하여 콘트라스트영역의 검출처리를 한다(스텝 S930). 또, 콘트라스트영역 검출부(151)에서 검출된 콘트라스트영역에 대하여, 측광 평가치 생성부(155)에 있어서 측광 평가치의 생성처리를 한다(스텝 S940). 생성된 측광 평가치는 신호선(159)을 통과하여 출력된다(스텝 S925).
도 10은, 본 발명의 실시형태에 있어서의 콘트라스트영역 검출처리(스텝 S930)의 처리순서의 일례를 나타내는 도면이다. 신호선(149)을 통과하여 블록 평균 화상이 입력되면(스텝 S931), 블록 평균 화상의 각 화소에 대하여 이하의 처리가 행해진다(루프 L993). 여기서, 블록 평균 화상의 각 화소를 2 차원 좌표(r, s)에 의해 나타낸다. 단, r 및 s는 함께 0 이상의 정수이다.
우선, 블록 평균 화상의 화소(r, s)에 있어서의 휘도의 국소 콘트라스트가 국소 콘트라스트 산출부(152)에 의하여 산출된다(스텝 S932). 상술한 바와 같이, 이 국소 콘트라스트를 산출하기 위해서는, 예를 들면, 블록 평균 화상에 있어서의 휘도의 국소 1차 미분의 절대치 또는 국소 2차 미분의 절대치를 이용할 수 있다.
그리고, 이 생성된 국소 콘트라스트가 임계치보다 크면(스텝 S933), 그 화소(r, s)가 콘트라스트영역에 해당하는 취지를 나타내는 콘트라스트영역 정보가 임계치 판정부(153)에 의하여 콘트라스트영역 정보 메모리(154)에 보관 유지된다(스텝 S934). 이 콘트라스트영역 정보는, 신호선(158)을 통과하여 측광 평가치 생성부(155)의 휘도분배부(156)에 공급된다.
도 11은, 본 발명의 실시형태에 있어서의 측광 평가치 생성처리(스텝 S940)의 처리순서의 일례를 나타내는 도면이다. 신호선(149)을 통과하여 블록 평균 화상이 입력되며(스텝 S941), 신호선(158)을 통과하여 콘트라스트영역 정보가 입력되면(스텝 S942), 휘도분배부(156)에 의하여 명측 휘도 또는 암측 휘도로의 휘도분배 처리가 행해진다(스텝 S950). 그리고, 이들 명측 휘도 및 암측 휘도의 분포에 의거하여 경계 휘도치 생성부(157)에 의하여 경계 휘도치 생성처리가 행해진다(스텝 S960). 이 경계 휘도치 생성처리에 의하여 생성된 경계 화소치는, 측광 평가치로서 신호선(159)을 통과하여 출력된다(스텝 S945).
도 12는, 본 발명의 실시형태에 있어서의 휘도분배처리(스텝 S950)의 처리순서의 일례를 나타내는 도면이다. 신호선(149)을 통과하여 블록 평균 화상이 입력되며(스텝 S951), 신호선(158)을 통과하여 콘트라스트영역 정보가 입력되면(스텝 S952), 블록 평균 화상의 각 화소에 대하여 이하의 처리가 행해진다(루프 L995). 여기서, 블록 평균 화상의 각 화소를 2차원 좌표(r, s)에 의해 나타낸다. 단, r 및 s는 함께 0 이상의 정수이다.
우선, 블록 평균 화상의 화소(r, s)가 콘트라스트영역내인 취지를 콘트라스트영역 정보를 나타내고 있으면(스텝 S953), 휘도분배부(156)에 의하여 화소(r, s)의 휘도가 명측 휘도 또는 암측 휘도로 분배된다. 동 도면의 예에서는, 분배의 기준으로서 휘도의 국소 2차 미분의 부호가 이용되고 있다. 즉, 화소(r, s)에 있어서의 휘도의 국소 2차 미분이 산출되며(스텝 S954), 그 산출된 국소 2차 미분이 「0」보다 작으면(스텝 S955), 그 국소 2차 미분의 값이 명측 휘도로서 명측 휘도군 메모리(191)에 보관 유지된다(스텝 S956). 한편, 산출된 국소 2차 미분이 「0 」보다 작지 않으면(스텝 S955), 그 국소 2차 미분의 값이 암측 휘도로서 암측 휘도군 메모리(192)에 보관 유지된다(스텝 S957).
도 13은, 본 발명의 실시형태에 있어서의 경계 휘도치 생성처리(스텝 S960)의 처리순서의 일례를 나타내는 도면이다. 명측 휘도군 메모리(191) 및 암측 휘도군 메모리(192)로부터 명측 휘도 및 암측 휘도가 입력되면(스텝 S961), 명측 휘도의 평균치(EG=1)가 산출되며(스텝 S962), 명측 휘도의 분산치(VG=1)가 산출된다(스텝 S963). 또, 마찬가지로, 암측 휘도의 평균치(EG=0)가 산출되며(스텝 S964), 암측 휘도의 분산치(VG=0)가 산출된다(스텝 S965).
그리고, 이하의 경계 휘도치(Im)에 관한 2차 방정식의 답이 산출된다(스텝 S966).
Figure 112007042199691-pat00006
여기서, 2차 방정식이기 때문에 답은 2개 존재하지만, 양답 가운데, EG=0＜Im＜EG=1의 범위에 있는 쪽이 답으로서 선택된다(스텝 S967). 이 선택된 답이, 경계 휘도치(즉, 측광 평가치)로서 신호선(159)을 통과하여 출력된다(스텝 S968).
이와 같이, 본 발명의 실시형태에 의하면, 콘트라스트영역 검출부(151)에 의하여 검출된 콘트라스트영역에 있어서, 측광 평가치 생성부(155)에 의하여 각 화소의 휘도가 명측 휘도 또는 암측 휘도로 분배되고, 이들 명측 휘도 및 암측 휘도의 분포에 의거하여 경계 휘도치가 측광 평가치로서 생성된다. 이 측광 평가치는, 차분치 산출부(180)에 있어서 기준치와 비교되며, 제어부(190)에 있어서의 밝기 보정 의 동작 제어에 이용할 수 있다.
또한, 상술의 실시형태에서는, 디지털 스틸 카메라에 있어서의 밝기 보정에 적용하는 예를 나타냈지만, 본 발명은 이것에 한정되는 것은 아니다. 예를 들면, 이하와 같이 컴퓨터 시스템에 있어서의 출력화상의 밝기 보정에도 적용할 수 있다.
도 14는, 본 발명의 실시형태에 있어서의 컴퓨터 시스템(200)의 일구성 예를 나타내는 도면이다. 이 컴퓨터 시스템(200)은, 프로세서(211)와 메모리(212)와 디스플레이 제어기(213)와, 입출력 인터페이스(214)를 포함하는 컴퓨터를 갖춘다.
프로세서(211)는, 프로그램의 실행이나 각 장치의 제어를 행하는 연산 장치이다. 메모리(212)는, 그와 같은 프로그램의 실행이나 각 장치의 제어에 필요한 일시적 데이터의 격납 장소이다.
디스플레이 제어기(213)는, 디스플레이를 접속하기 위한 인터페이스이며, 그래픽스 제어기를 내장한다. 이 디스플레이 제어기(213)에는, 디스플레이(220)가 접속되어 있다. 디스플레이(220)는, 컴퓨터(210)에 의한 출력화상을 표시하는 표시장치이며, 예를 들면, LCD(Liquid Crystal Display) 등에 의해 실현된다.
입출력 인터페이스(214)는, 주변장치를 접속하기 위한 인터페이스이며, USB(Universal Serial Bus) 제어기 등을 내장한다. 이 입출력 인터페이스(214)에는, 예를 들면, 마우스(230), 키보드(240), 기록매체 액세스장치(250), 프린터(260) 등이 접속된다. 마우스(230)는, 클릭이나 드래그(drag) 등의 조작에 의한 사용자의 지시를 받아들이는 것이다. 키보드(240)는, 문자 키나 숫자 키 등에 의한 사용자의 지시를 받아들이는 것이다. 기록매체 액세스장치(250)는, 삽입된 기 록매체에 대한 기입이나 독출을 행하는 장치이다. 프린터(260)는, 컴퓨터(210)에 의한 출력화상을 인쇄하는 인쇄장치이다.
이와 같은 컴퓨터 시스템(200)에 있어서, 기록매체 액세스장치(250)에 삽입된 기록매체에 기록되어 있는 화상 데이터를 자동적으로 읽어 들이고, 적절한 보정이 이루어진 화상을 프린터(260)에 있어서 인쇄하는 인쇄 시스템을 상정한다. 이 인쇄 시스템은, 프로세서(211)상에서 동작하는 프로그램에 의해 실현되어도 좋고, 또, 하드웨어에 의해 제어해도 좋다.
도 15는, 본 발명의 실시형태에 있어서의 인쇄 시스템에 의한 표시예를 나타내는 도면이다. 이 표시예에서는, 제일 외측의 틀(500)은 인쇄 시스템에 의한 GUI(Graphical User Interface) 표시의 범위를 나타내고 있고, 통상 이것이 디스플레이(220)의 화면 전체에 표시된다.
틀(500)의 대부분을 차지하는 영역은, 4×4의 클릭 가능한 소창(小窓)(510)으로 구분되어 있다. 이 소창(510)은, 기록매체 액세스장치(250)에 의하여 기록매체로부터 읽어내진 화상의 섬네일을 표시하는 영역이다. 기록매체에 기록되어 있는 화상 수가 16 이하라고는 한정되지 않기 때문에, 섬네일 표시 영역은 스크롤 바(531)와 2개의 스크롤 버튼(532 및 533)에 의하여 스크롤 표시가 가능하게 되어 있다.
섬네일 주위에 표시되어 있는 굵은 틀(521 및 522)은, 그 화상이 선택 상태에 있는 것을 나타내는 인디케이터(indicator)이다. 각 섬네일이 클릭되면, 그 화상의 선택 또는 비선택 상태가 전환되도록(토글 된다) 되어 있다. 화면 우상(右 上)구석의 프린트 버튼(550)은, 클릭됨으로써, 현재 선택 상태에 있는 화상의 자동 보정 및 인쇄가 개시되도록 되어 있다.
도 16은, 본 발명의 실시형태에 있어서의 인쇄 시스템의 처리순서의 일례를 나타내는 도면이다. 기록매체 액세스장치(250)에 기록매체가 삽입되면, 기록매체로부터 표시용의 화상 데이터가 읽어 내지며(스텝 S801), 상술의 GUI표시 화면에 섬네일 화상이 늘어놓아 표시된다(스텝 S802). 그 후, 기록매체 액세스장치(250)에 기록매체가 삽입되어 있는 동안, 이하의 처리가 반복된다(루프 L896).
사용자에 의한 조작 입력이 접수되면(스텝 S803), 그 조작 입력의 종류가 판별된다. 만약, 조작 입력이 섬네일의 클릭 조작이면(스텝 S804), 해당하는 화상의 현재 상태에 따라 그 화상의 선택 또는 비선택 상태가 전환된다(스텝 S805). 즉, 현재 상태가 선택 상태이면 선택 상태가 해제되며(스텝 S806), 또는, 현재 상태가 선택 상태가 아니면 선택 상태로 설정되며(스텝 S807), 이번 조작 입력에 대한 동작을 완료한다.
만약, 조작 입력이 스크롤 바(531) 또는 스크롤 버튼(532 및 533)의 조작이었을 경우에는, 섬네일 표시 영역의 스크롤 동작을 행하고, 이번 조작 입력에 대한 동작을 완료한다.
만약, 조작 입력이 프린트 버튼(550)의 클릭 조작이었을 경우에는, 그 시점에서 선택 상태로 되어 있는 모든 화상을 대상 화상으로서 밝기 보정 처리가 실시되며(스텝 S872), 그 밝기 보정이 실시된 화상이 프린터(260)에 의하여 인쇄된다(스텝 S873). 선택 상태로 되어 있는 모든 대상 화상에 대하여 인쇄가 완료하면 (루프 L897), 이번 조작 입력에 대한 동작을 완료한다.
1회의 조작 입력에 대한 동작이 완료한 시점에서, 기록매체 액세스장치(250)에 기록매체가 삽입되어 있는지 아닌지가 판정되며, 삽입되어 있으면 상기 처리가 반복된다. 한편, 1회의 조작 입력에 대한 동작이 완료한 시점에서 기록매체가 삽입되어 있지 않은 것이 판명되면, 일련의 처리를 종료한다.
도 17은, 본 발명의 실시형태에 있어서의 컴퓨터 시스템(200)의 밝기 보정 처리의 기능 구성예를 나타내는 도면이다. 이 밝기 보정 처리는, 신호선(307 내지 309)에 의해 입력된 RGB화상의 화소의 적색 성분(R), 녹색 성분(G) 및 청색 성분(B)에 밝기 보정을 실시하고 신호선(337 내지 339)에 출력하는 것이다. 이 밝기 보정처리는, 변환부(310)와, 계조보정처리부(320)와, 역변환부(330)와, 측광부(340)와, 측광 평가부(350)와, 휘도역생성부(361)와, 스프라인 발생부(362)와, 톤 커브메모리(363)와, γ_comp 파라미터 메모리(364)와, 휘도 생성부(371)와, 비선형 변환부(372)와, 보간부(377)와, 계조 압축부(380)와, 콘트라스트 보정부(390)의 기능을 갖추고 있다.
또한, 본 발명의 실시형태에 있어서 설명하는 도 17의 밝기보정처리의 구성은, 본 발명에 있어서의 필수의 구성 요소는 아니다. 즉, 먼저 설명한 본 발명의 실시형태에 있어서의 측광 평가치 산출 방법에 의거하여 얻어진 측광 평가치에 상당하는 입력휘도치가 중용인 출력휘도로 변환되도록 밝기 보정을 행하는 밝기 보정 처리의 기능이 있으면, 본 발명을 이용한 밝기 보정을 수반하는 화상 표시가 가능해진다. 도 17의 구성예 이외의 구성으로 해당하는 밝기 보정 처리로서는, 휘도 스케일링 계수를 제어하는 방법, 휘도 바이어스 값을 제어하는 방법, 감마 커브의 누승 지수를 측광 평가치로 제어하는 방법, 또는, 그들 조합이 고려된다. 이들 처리의 상세한 내용에 대해서는 설명을 생략한다.
변환부(310)는, 신호선(307 내지 309)에 의해 입력된 RGB 화상의 각 성분의 화소치를 비선형 변환하는 것이다. 이 변환부(310)는, 비선형 변환부(311 내지 313)를 갖추고 있고, 각각 적색 성분(R), 녹색 성분(G) 및 청색 성분(B)의 화소치를 비선형 변환하고, 신호선(317 내지 319)에 출력한다. 또한, 여기서 비선형 변환으로서, 예를 들면, 대수변환이나 감마 보정 등을 적용할 수 있다.
계조 보정 처리부(320)는, 신호선(317 내지 319)에 의해 입력된 화소치(비선형 변환된 RGB화상의 화소치)의 계조를 보정(변환)하는 것이다. 이 계조 보정 처리부(320)는, 계조 보정부(321 내지 323)를 갖추고 있고, 각각 적색 성분(R), 녹색 성분(G) 및 청색 성분(B)의 화소치의 계조를 보정하고, 신호선(327 내지 329)에 출력한다. 또한, 이 계조 보정 처리부(320)에 있어서 이용되는, 비선형 변환된 휘도치(신호선(375)) 및 콘트라스트 보정된 휘도치(신호선(399))에 대해서는 후술한다.
역변환부(330)는, 신호선(317 내지 319)에 의해 입력된 화소치(계조 보정된 RGB화상의 화소치)를 비선형 역변환하는 것이다. 이 역변환부(330)는, 비선형 역변환부(331 내지 333)를 갖추고 있고 각각 적색 성분(R), 녹색 성분(G) 및 청색 성분(B)의 화소치를 비선형 역변환하고, 신호선(337 내지 339)에 출력한다.
측광부(340)는, 도 2에 의해 설명한 측광부(140)와 동일한 것이며, 신호선(307 내지 309)에 의해 입력된 RGB화상의 각 성분의 화소치에 대하여 밝기의 계 측 결과(즉, 블록 평균 휘도 화상)를 신호선(349)에 출력하는 것이다.
측광 평가부(350)는, 도 4에 의해 설명한 측광 평가부(150)와 동일한 것이며, 신호선(349)을 통과하여 측광부(340)로부터 공급된 계측 결과에 근거하여, 그 화상신호의 밝기를 평가한 측광 평가치를 생성하여 신호선(359)에 출력하는 것이다.
휘도역 생성부(361)는, 신호선(349)을 통과하여 측광부(340)로부터 공급된 블록 평균 휘도 화상의 휘도분포에 있어서, 전체의 화소수에 차지하는 소정의 경계치 이하의 휘도의 화소수의 비율이 거의 소정의 값(예를 들면, 0.5)으로 되는 경계치인 암측 테일(tail)값(Ldark (nl)) 및 전체의 화소수에 차지하는 소정의 경계치 이상의 휘도의 화소수의 비율이 거의 소정의 값(예를 들면, 0.5)으로 되는 경계치인 명측 테일값(tail value)(Lbright (nl))을 산출한다. 또한, 각 값의 우상(右上)에 붙여진 「(nl)」은, 비선형 변환된 값인 것을 나타내는 것이다.
또한, 측광 평가부(350) 및 휘도역 생성부(361)에 있어서는, 휘도치의 잡음 레벨 및 포화 레벨을(도시하지 않음) 내부의 메모리로부터 읽어내고, 잡음 레벨 이하의 휘도치 및 포화 레벨 이상의 휘도치를 제거하도록 해도 좋다.
스프라인 발생부(362)는, 측광 평가부(350)로부터 신호선(359)에 의하여 공급된 측광 평가치를 평균 휘도치(Laverage (nl))로서 취급하고, 또한, 휘도역 생성 부(361)로부터 공급된 암측 테일값(Ldark ( nl )) 및 명측 테일값(Lbright (nl))을 이용하여, 스플라인 곡선을 발생하는 것이다. 이 스플라인 곡선은 계조 압축을 위한 톤 커브(변환곡선)를 나타내고 있다. 톤 커브는, 입력된 화상이 적절한 밝기로 재현되도록 화상의 휘도분포에 의거하여 산출되는 것이다. 이 톤 커브를 나타내는 룩업테이블은 톤 커브메모리(363)에 보관 유지된다. 또, 톤 커브의 형상(기울기)을 나타내는 γ_comp 파라미터가 γ_comp 파라미터 메모리(364)에 보관 유지된다.
휘도 생성부(371)는, 신호선(307 내지 309)에 의해 입력된 RGB화상의 각 성분의 화소치로부터, 그 화소위치에 대응하는 휘도치(L)를 산출하는 것이다. 비선형 변환부(372)는, 휘도 생성부(371)에 의해 생성된 휘도치를 비선형 변환하는 것이다. 이 비선형 변환부(372)에 의하여 비선형 변환된 휘도치(L(nl))로 이루어지는 화상은 신호선(375)을 통과하여 보간부(377), 계조 압축부(380) 및 계조 보정 처리부(320)에 공급된다.
보간부(377)는, 측광부(340)로부터 공급된 블록 평균 휘도 화상을 보간하고, 신호선(375)을 통과하여 비선형 변환부(372)로부터 공급된 화상과 같은 화소치가 되도록 확대하는 것이다. 이 확대된 화상을 구성하는 화소의 휘도치는, 신호선(379)을 통과하여 대국 휘도치(Ll (nl))로서 계조 압축부(380)에 공급된다. 즉, 이 대국 휘도치는, 비선형 변환부(372)로부터 공급된 화상의 저주파 성분을 가지게 된다.
계조 압축부(380)는, 휘도치(L( nl )) 및 대국 휘도치(Ll (nl))의 계조를 압축하는 것이다. 이 계조 압축부(380)는, 2개의 매핑부(381 및 382)를 갖추고 있다. 매핑부(381)는, 톤 커브메모리(363)로부터 읽어내진 톤 커브에 근거하여, 신호선(375)을 통과하여 공급된 휘도치(L(nl))의 계조를 압축하고, 압축 휘도치(Lc (nl))를 생성하는 것이다. 매핑부(382)는, 톤 커브메모리(363)로부터 읽어 내진 톤 커브에 근거하여, 신호선(379)을 통과하여 공급된 대국 휘도치(Ll (nl))의 계조를 압축하고, 압축 대국 휘도치(Lcl (nl))를 생성하는 것이다. 이와 같은 톤 커브에 근거한 계조 압축은 톤 커브 보정이라 불린다.
콘트라스트 보정부(390)는, γ_comp 파라미터 메모리(364)에 보관 유지된 γ_comp 파라미터 및 매핑부(382)로부터 공급된 압축 대국 휘도치(Lcl (nl))에 근거하여, 매핑부(381)로부터 공급된 압축 휘도치(Lc (nl))로 이루어지는 화상의 콘트라스트를 보정하고, 신호선(399)을 통과하여 휘도치(Lu (nl))로서 출력하는 것이다.
구체적으로는, 콘트라스트 보정부(390)에서는, 계조가 압축된 압축 휘도치(Lc ( nl )) 및 압축 대국 휘도치(Lcl ( nl )) 및 게인치(g)에 근거하여, 이하의 식에 의 해, 콘트라스트 보정된 휘도치(Lu (nl))가 산출된다.
Lu ( nl )=g·(Lc ( nl )－Lcl ( nl ))＋Lc ( nl )
단, 게인치(g)는, γ_comp 파라미터에 의존하는 값이다.
또한, 휘도치(Lc (nl)－Lcl (nl))로 이루어지는 화상은, 휘도치(Lc (nl))로 이루어지는 화상으로부터, 휘도치(Lc (nl))로 이루어지는 화상의 극히 저주파역의 성분으로 이루어지는 대국 휘도 화상을 공제한 것이다. 따라서, 휘도치(Lu (nl))로 이루어지는 화상은, 휘도치(Lc (nl))로 이루어지는 화상의 극히 저주파역을 제외한 주파수 성분이 게인치(g)에 의해 강조된 화상이 된다.
이 콘트라스트 보정부(390)에 의하여 콘트라스트 보정을 한 휘도치(Lu (nl))는, 신호선(399)을 통과하여 계조 보정부(321 내지 323)에 공급된다. 이것에 의해, 계조 보정 처리부(320)는, 이하의 식에 의하여, 신호선(317 내지 319)으로부터 공급된 화소치 R( nl ), G( nl ), 또는, B( nl )의 계조를 보정하고, 화소치 Ru ( nl ), Gu ( nl ), 또는, Bu (nl)를 산출한다.
Ru ( nl )=chromagain·(R( nl )－L( nl ))＋Lu ( nl )
Gu ( nl )=chromagain·(G( nl )－L( nl ))＋Lu ( nl )
Bu ( nl )=chromagain·(B( nl )－L( nl ))＋Lu ( nl )
단, chromagain는, R, G 및 B의 각 성분의 채도를 조절하기 위한 소정의 값의 계수이다.
즉, 화소치 Ru ( nl ), Gu ( nl ), 또는, Bu ( nl )는, 각각 화소치 R( nl ), G( nl ), 또는, B( nl )로 이루어지는 화상과 계조 변환전의 휘도치(L(nl))로 이루어지는 화상과의 차분인 차분 화상의 각 화소치에 chromagain을 곱하고, 게다가 콘트라스트 보정 후의 휘도치(Lu ( nl ))로 이루어지는 화상을 더한 화상의 화소치이다. 이것에 의해, 비선형 변환된 RGB값에 계조 변환 후의 휘도치가 반영된다.
이와 같이 하여 생성된 화소치 Ru ( nl ), Gu ( nl ) 및 Bu ( nl )는, 각각 비선형 역변환부(331 내지 333)에서 비선형 역변환되며, 신호선(337 내지 339)에 화소치 Ru, Gu, 또는, Bu가 출력된다.
즉, 도 17의 예에 의한 밝기 보정 처리는, 입력화상의 휘도를 조사하여 산출한 톤 커브에 의한 톤 커브 보정 처리와 그것에 의해 생긴 콘트라스트의 열화를 회 복시키는 콘트라스트 보정처리를 조합한 것으로 된다.
도 18은, 본 발명의 실시형태에 의한 스프라인 발생부(362)에 의하여 생성되는 톤 커브의 일례를 나타내는 도면이다. 이 그래프의 가로축방향은 계조 보정하기 전의 입력휘도의 비선형 변환된 값(예를 들면, 대수값)을 나타내고, 세로축 방향은 톤 커브(CL)에 의한 계조 보정 후의 출력휘도의 비선형 변환된 값(예를 들면, 대수값)을 나타내고 있다.
스프라인 발생부(362)에 있어서, 9개의 제어포인트(P1 내지 P9)가 설정된다. 그리고, 이 스프라인 발생부(362)에서는, 제어포인트(P1 내지 P9)의 각 포인트간을 보간하는 3차 스플라인 곡선상의 좌표가 산출되고, 톤 커브(CL)의 룩업테이블이 생성된다.
제어포인트(P1)는, 입력휘도가 소정의 최소 레벨로 되며, 출력휘도가 소정의 최소 레벨(Lbase ( nl ))로 되는 포인트로 설정된다. 제어포인트(P2)는, 입력휘도가 노이즈 레벨이라고 간주할 수 있는 휘도인 소정의 노이즈 레벨(Lnoise ( nl ))로 되며, 출력휘도가 최소 레벨(Lbase ( nl ))로 되는 포인트로 설정된다. 제어포인트(P3)는, 입력휘도가 노이즈 레벨(Lnoise ( nl ))의 2배의 휘도치로 되며, 출력휘도가 최소 레벨(Lbase ( nl ))로 되는 포인트로 설정된다.
제어포인트(P4)는, 입력휘도가 암측 테일값(Ldark (nl))으로 되며, 출력휘도가 거의 흑레벨의 휘도치인 휘도치(Lankle (nl))로 되는 포인트로 설정된다. 제어포인트(P5)는, 입력휘도가 암측 테일값(Ldark (nl))의 2배의 휘도치로 되며, 출력휘도가 휘도치(Lankle ( nl ))의 2배의 휘도치로 되는 포인트로 설정된다. 제어포인트(P6)는, 입력휘도가 입력휘도의 평균 레벨(평균 휘도치)(Laverage ( nl ))로 되며, 출력휘도가 출력휘도의 휘도 범위에 있어서의 소정의 거의 중간의 중간 휘도 레벨(Lmid ( nl ))로 되는 포인트로 설정된다. 제어포인트(P7)는, 입력휘도가 명측 테일값(Lbright (nl))의 2분의 1의 휘도치로 되며, 출력휘도가 거의 흰색 레벨의 휘도치인 휘도치(Lshoulder (nl))의 2분의 1의 휘도치로 되는 포인트로 설정된다. 제어포인트(P8)는, 입력휘도가 명측 테일값(Lbright (nl))으로 되며, 출력휘도가 휘도치(Lshoulder (nl))로 되는 포인트로 설정된다. 제어포인트(P9)는, 입력휘도가 소정의 입력휘도의 최대치로 되며, 출력휘도가 소정의 출력휘도의 최대치로 되는 포인트로 설정된다.
즉, 제어포인트(P1, P2, P3 및 P9)에 대해서는, 입력화상으로 상정하는 출력 디바이스의 노이즈 레벨, 포화 레벨, 계조 특성 등에 의해 미리 고정치를 부여하고 있고, 입력화상의 휘도분포에 의하여 변화하는 것은 없다. 제어포인트(P4, P6, P8)의 세로축 방향의 좌표에 관해서는 동일하게 고정하지만, 가로축방향의 좌표는 입력화상의 휘도분포에 의하여 산출된다. 또, 제어포인트(P5 및 P7)의 위치는, 제어포인트(P4, P6, P8)의 위치가 입력화상에 의해 결정되면, 종속적으로 결정되는 것이다. 또한, 이 제어포인트(P5 및 P7)를 접속하는 선만큼의 기울기가, γ_comp 파라미터 메모리(364)에 보관 유지되는 γ_comp파라미터이다.
제어포인트(P6)는 출력화상의 중용인 밝기에 매핑되기 때문에, 재현되는 화상의 밝기를 결정하는데 있어서 제일 중요한 제어포인트이다. 그래서, 본 발명의 실시형태에서는, 측광 평가부(350)에 의하여 생성된 측광 평가치를 이 제어포인트(P6)의 가로축방향의 좌표(평균 휘도치)로서 이용함으로써, 보다 적절한 밝기로 화상이 재현되도록 한다.
도 19 및 도 20은, 본 발명의 실시형태에 있어서의 인쇄 시스템의 밝기 보정 처리의 순서 예를 나타내는 도면이다. 이 밝기 보정 처리에서는, 입력화상의 전화상을 2회 스캔하는 2패스 구성으로 처리하고 있다. 제 1번째의 패스는, 측광 평가를 이용한 블록 평균 화상의 생성 및 톤 커브의 산출을 행하는 것이며, 도 19에 나타낸다. 제 2번째의 패스는, 블록 평균 화상 및 톤 커브에 의거하여 전화소(全畵素)의 계조 보정 처리를 행하는 것이며, 도 20에 나타낸다.
이 밝기 보정 처리에서는, 우선 측광부(340)에 의하여 측광 처리로서 대상 화상의 밝기 계측이 행해지며, 블록 평균 휘도 화상이 생성된다(스텝 S810). 이 측광 처리에 있어서의 순서는 도 8에 있어서 설명한 측광 처리(스텝 S910)와 동일 하다.
생성된 블록 평균 휘도 화상에 의거하여, 측광 평가부(350)에 의하여 측광 평가 처리로서 측광 평가치가 생성된다(스텝 S820). 이 측광 평가처리에 있어서의 순서는 도 9에서 설명한 측광 평가처리(스텝 S920)와 마찬가지이다.
또, 휘도역 생성부(361)에서는, 블록 평균 휘도 화상의 휘도분포로부터 휘도 히스토그램의 명측과 암측의 테일값(tail value)이 생성된다(스텝 S874).
그리고, 스프라인 발생부(362)에 있어서, 측광 평가부(350)로부터 공급된 측광 평가치를 평균 휘도치(Laverage (nl))로 하고, 휘도역 생성부(361)로부터 공급된 명측과 암측의 테일값(tail value)을 각각 명측 테일값(Lbright ( nl )) 및 암측 테일값(Ldark ( nl ))으로서, 톤 커브가 생성된다(스텝 S875). 생성된 톤 커브를 나타내는 룩업테이블은, 톤 커브메모리(363)에 보관 유지된다. 또, 톤 커브의 제어포인트(P5 및 P7)를 접속하는 선만큼의 기울기가 γ_comp 파라미터로서 생성된다(스텝 S876). 이 γ_comp 파라미터는, γ_comp 파라미터 메모리(364)에 보관 유지된다.
다음으로, 입력된 대상 화상의 각 화소에 대하여 이하의 처리가 행해진다(루프 L898). 여기서, 대상 화상의 각 화소를 2차원 좌표(p, q)에 의해 나타낸다. 단, p 및 q는 모두 0 이상의 정수이다.
우선, 대상 화상의 해당하는 화소(p, q)의 RGB값이 입력되면 (스텝 S880), 휘도 생성부(371)에 있어서 화소(p, q)의 휘도치(L)가 생성된다(스텝 S881). 이 휘도치(L)는, 비선형 변환부(372)에서 비선형 변환되어 휘도치(L(nl))로서 출력된다(스텝 S882).
그리고, 제 1의 패스에서 생성된 블록 평균 휘도 화상의 보간처리가, 비선형 변환된 휘도치(L(nl))에 의거하여 보간부(377)에 의하여 행해지며, 화소(p, q)에 대응하는 대국 휘도치(Ll (nl))로서 생성된다(스텝 S883).
이와 같이 하여 생성된 화소(p, q)의 휘도치(L( nl )) 및 대국 휘도치(Ll (nl))는, 각각 매핑부(381 또는 382)에 의하여, 톤 커브에 근거한 톤 커브 보정(계조 압축)이 행해진다(스텝 S884). 그 결과, 압축 휘도치(Lc ( nl )) 및 압축 대국 휘도치(Lcl ( nl ))가 생성된다. 콘트라스트 보정부(390)에서는, 압축 대국 휘도치(Lcl ( nl )) 및 γ_comp 파라미터에 근거하여, 압축 휘도치(Lc (nl))가 콘트라스트 보정된다(스텝 S885). 이 콘트라스트 보정 후의 휘도치(Lu (nl))는, 계조 보정 처리에 이용된다.
한편, 대상 화상의 해당하는 화소(p, q)의 RGB값은, 비선형 변환부(311 내지 313)에 의하여 비선형 변환된다(스텝 S886). 비선형 변환된 RGB값(R( nl ), G( nl ) 및 B(nl))은, 비선형 변환된 휘도치(L( nl )) 및 콘트라스트 보정 후의 휘도치(Lu (nl))에 근 거하여, 계조 보정부(321 내지 323)에 의하여 계조 보정된다(스텝 S886). 계조 보정된 RGB값(Ru ( nl ), Gu ( nl ) 및 Bu ( nl ))은, 비선형 역변환부(331 내지 333)에 의하여 비선형 역변환된다(스텝 S888). 이것에 의해, 비선형 역변환된 RGB값(Ru, Gu 및 Bu)이 출력된다(스텝 S889).
이들 처리가 모든 화소에 대하여 행해지면, 대상 화상에 관한 밝기 보정 처리는 종료한다.
이와 같이, 본 발명은, 디지털 카메라 등의 촬상장치에 있어서의 밝기 보정 뿐만 아니라, 컴퓨터 시스템에 있어서의 인쇄할 때의 밝기 보정 등에도 널리 적용할 수 있다.
또한, 본 발명의 실시형태는 본 발명을 구현화 하기 위한 일례를 나타낸 것이며, 이하에 나타내는 바와 같이 특허 청구의 범위에 있어서의 발명 특정 사항과 각각 대응 관계를 가지지만, 이것으로 한정되는 것은 아니고 본 발명의 요지를 일탈하지 않는 범위에서 여러 가지의 변형을 실시할 수 있다.
즉, 청구항 1에 있어서, 콘트라스트영역 검출수단은 예를 들면 콘트라스트영역 검출부(151)에 대응한다. 또, 휘도분배수단은 예를 들면 휘도분배부(156)에 대응한다. 또, 경계 휘도치 생성수단은 예를 들면 경계 휘도치 생성부(157)에 대응한다.
또, 청구항 2에 있어서, 국소 콘트라스트 산출수단은 예를 들면 국소 콘트라스트 산출부(152)에 대응한다. 또, 임계치 판정수단은 예를 들면 임계치 판정 부(153)에 대응한다.
또, 청구항 10에 있어서, 비선형 변환수단은 예를 들면 비선형 변환부(142)에 대응한다. 콘트라스트영역 검출수단은 예를 들면 콘트라스트영역 검출부(151)에 대응한다. 또, 휘도분배수단은 예를 들면 휘도분배부(156)에 대응한다. 또, 경계 휘도치 생성수단은 예를 들면 경계 휘도치 생성부(157)에 대응한다.
또, 청구항 14에 있어서, 촬상수단은 예를 들면 센서(113)에 대응한다. 콘트라스트영역 검출수단은 예를 들면 콘트라스트영역 검출부(151)에 대응한다. 또, 휘도분배수단은 예를 들면 휘도분배부(156)에 대응한다. 또, 경계 휘도치 생성수단은 예를 들면 경계 휘도치 생성부(157)에 대응한다. 또, 제어수단은 예를 들면 차분치 산출부(180) 및 제어부(190)에 대응한다.
또, 청구항 15에 있어서, 콘트라스트영역 검출수단은 예를 들면 콘트라스트영역 검출부(151)에 대응한다. 또, 휘도분배수단은 예를 들면 휘도분배부(156)에 대응한다. 또, 경계 휘도치 생성수단은 예를 들면 경계 휘도치 생성부(157)에 대응한다. 또, 밝기 보정 수단은, 예를 들면 스프라인 발생부(362), 보간부(377) 및 콘트라스트 보정부(390) 등을 포함할 수 있다.
또, 청구항 16에 있어서, 변환곡선 산출수단은 예를 들면 스프라인 발생부(362)에 대응한다. 또, 대국 휘도 산출수단은 예를 들면 보간부(377)에 대응한다. 또, 계조 압축 수단은 예를 들면 계조 압축부(380)에 대응한다. 또, 콘트라스트 보정수단은 예를 들면 콘트라스트 보정부(390)에 대응한다.
또, 청구항 17 및 청구항 21에 있어서, 콘트라스트영역 검출순서는 예를 들 면 스텝(S930)에 대응한다. 또, 휘도분배순서는 예를 들면 스텝(S950)에 대응한다. 또, 경계 휘도치 생성순서는 예를 들면 스텝(S960)에 대응한다.
또, 청구항 18 및 청구항 22에 있어서, 촬상순서는 예를 들면 스텝(S901)에 대응한다. 또, 콘트라스트영역 검출순서는 예를 들면 스텝(S930)에 대응한다. 또, 휘도분배순서는 예를 들면 스텝(S950)에 대응한다. 또, 경계 휘도치 생성순서는 예를 들면 스텝(S960)에 대응한다. 또, 제어순서는 예를 들면 스텝(S904)에 대응한다.
또, 청구항 19 및 청구항 23에 있어서, 콘트라스트영역 검출순서는 예를 들면 스텝(S930)에 대응한다. 또, 휘도분배순서는 예를 들면 스텝(S950)에 대응한다. 또, 경계 휘도치 생성순서는 예를 들면 스텝(S960)에 대응한다. 또, 밝기 보정순서는, 예를 들면 스텝(S875 및 S883 내지 S885)을 포함할 수 있다.
또, 청구항 20 및 청구항 24에 있어서, 변환곡선 산출순서는 예를 들면 스텝(S875)에 대응한다. 또, 대국 휘도 산출순서는 예를 들면 스텝(S883)에 대응한다. 또, 계조 압축 순서는 예를 들면 스텝(S884)에 대응한다. 또, 콘트라스트 보정 순서는 예를 들면 스텝(S885)에 대응한다.
또한, 본 발명의 실시형태에 있어서 설명한 처리순서는, 이들 일련의 순서를 가지는 방법으로서 파악해도 좋고, 또, 이들 일련의 순서를 컴퓨터에 실행시키기 위한 프로그램 내지 그 프로그램을 기억하는 기록매체로서 파악해도 좋다.
본 발명에 의하면, 입력화상에 대하여, 국소적인 명암차를 가지는 영역이 명 료하게 되도록 밝기를 평가하고, 그 평가치에 의거하여 촬상장치의 노출 제어나 화상출력장치의 밝기 보정을 행할 수 있다고 하는 뛰어난 효과를 얻을 수 있다.

Claims (24)

  1. 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측(明側) 휘도 및 암측(暗側) 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단을 구비하는 것을 특징으로 하는 화상처리장치.
  2. 제 1항에 있어서,
    상기 콘트라스트영역 검출수단은,
    상기 부분영역 마다의 상기 입력휘도의 콘트라스트를 국소 콘트라스트로서 산출하는 국소 콘트라스트 산출수단과,
    상기 국소 콘트라스트의 크기가 소정의 임계치보다 크면 상기 콘트라스트영역에 해당하는 것이라고 판정하는 임계치 판정수단을 구비하는 것을 특징으로 하는 화상처리장치.
  3. 제 2항에 있어서,
    상기 국소 콘트라스트 산출수단은, 상기 부분영역 마다의 상기 입력휘도의 국소 1차 미분(微分)의 절대치를 콘트라스트로서 산출하는 것을 특징으로 하는 화상처리장치.
  4. 제 2항에 있어서,
    상기 국소 콘트라스트 산출수단은, 상기 부분영역 마다의 상기 입력휘도의 국소 2차 미분의 절대치를 콘트라스트로서 산출하는 것을 특징으로 하는 화상처리장치.
  5. 제 2항에 있어서,
    상기 국소 콘트라스트 산출수단은, 상기 부분영역 마다의 상기 입력휘도의 최대치와 최소치의 차의 절대치를 콘트라스트로서 산출하는 것을 특징으로 하는 화상처리장치.
  6. 제 1항에 있어서,
    상기 휘도분배수단은, 상기 콘트라스트영역에 해당하는 국소 영역마다 상기 입력휘도의 최대치를 상기 명측 휘도로 하고, 상기 입력휘도의 최소치를 상기 암측 휘도로 하는 것을 특징으로 하는 화상처리장치.
  7. 제 1항에 있어서,
    상기 휘도분배수단은, 상기 콘트라스트영역에 해당하는 화소위치마다 상기 입력휘도의 국소 2차 미분의 음(-)양(+)에 의하여 당해 화소위치의 상기 입력휘도를 상기 명측 휘도든지 상기 암측 휘도든지 어느 쪽이든지 분배하는 것을 특징으로 하는 화상처리장치.
  8. 제 1항에 있어서,
    상기 경계 휘도치 생성수단은, 상기 명측 휘도의 평균치(EG =1)와, 상기 명측 휘도의 분산치(VG =1)와, 상기 암측 휘도의 평균치(EG =0)와, 상기 암측 휘도의 분산치(VG =0)에 의거하여 방정식
    Figure 112007042199691-pat00007
    의 답인 경계 휘도치(Im)(단, EG =0＜Im＜EG =1)를 상기 경계 휘도치로서 생성하는 것을 특징으로 하는 화상처리장치.
  9. 제 1항에 있어서,
    상기 경계 휘도치 생성수단은, 상기 명측 휘도의 평균치(EG =1)와, 상기 명측 휘도의 분산치(VG =1)와, 상기 암측 휘도의 평균치(EG =0)와, 상기 암측 휘도의 분산 치(VG =0)에 의거하여 방정식
    Figure 112007042199691-pat00008
    의 답인 경계 휘도치(Im)(단, EG =0＜Im＜EG =1)를 상기 경계 휘도치로서 생성하는 것을 특징으로 하는 화상처리장치.
  10. 복수의 화소로 이루어지는 입력화상 신호의 각 화소의 휘도에 대하여 비선형 변환을 행하는 비선형 변환수단과,
    상기 입력화상 신호에 있어서의 부분영역에 대하여 상기 비선형 변환된 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단을 구비하는 것을 특징으로 하는 화상처리장치.
  11. 제 10항에 있어서,
    상기 비선형 변환수단은 위에 볼록 단조(單調) 증가 함수에 따라 상기 비선형 변환을 행하는 것을 특징으로 하는 화상처리장치.
  12. 제 11항에 있어서,
    상기 비선형 변환수단은 상기 비선형 변환으로서 대수(對數)변환을 행하는 것을 특징으로 하는 화상처리장치.
  13. 제 11항에 있어서,
    상기 비선형 변환수단은 상기 비선형 변환으로서 감마 보정을 행하는 것을 특징으로 하는 화상처리장치.
  14. 피사체를 촬상하여 복수의 화소로 이루어지는 입력화상 신호를 생성하는 촬상수단과,
    상기 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단과
    상기 경계 휘도치에 의거하여 상기 촬상에 있어서의 노광량을 제어하는 제어 수단을 구비하는 것을 특징으로 하는 촬상장치.
  15. 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출수단과,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도분배수단과,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성수단과,
    상기 경계 휘도치에 상당하는 상기 입력휘도치가 중용인 휘도치로서 출력되도록 밝기 보정을 행하는 밝기 보정 수단을 구비하는 것을 특징으로 하는 화상출력장치.
  16. 제 15항에 있어서,
    상기 밝기 보정 수단은,
    상기 경계 휘도치 및 상기 입력휘도의 분포에 의거하여 휘도의 계조의 압축에 이용하는 변환곡선을 산출하는 변환곡선 산출수단과,
    상기 입력화상의 저주파 성분으로 이루어지는 대국 휘도 화상의 휘도인 대국 휘도를 산출하는 대국 휘도 산출수단과,
    상기 변환곡선에 의거하여 상기 입력휘도의 계조 및 상기 대국 휘도의 계조를 압축하는 계조 압축수단과,
    상기 변환곡선의 기울기 및 계조가 압축된 상기 대국 휘도에 의거하여 계조가 압축된 상기 입력휘도로 이루어지는 계조 압축 입력화상의 콘트라스트를 보정하는 콘트라스트 보정 수단을 구비하는 것을 특징으로 하는 화상출력장치.
  17. 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출 순서와,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도 분배 순서와,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성 순서를 구비하는 것을 특징으로 하는 화상처리방법.
  18. 피사체를 촬상하여 복수의 화소로 이루어지는 입력화상 신호를 생성하는 촬상 순서와,
    상기 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출 순서와,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도 분배 순서와,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성 순서와,
    상기 경계 휘도치에 의거하여 상기 촬상에 있어서의 노광량을 제어하는 제어순서를 구비하는 것을 특징으로 하는 촬상방법.
  19. 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출 순서와,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도 분배 순서와,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성 순서와,
    상기 경계 휘도치에 상당하는 상기 입력휘도치가 중용인 휘도치로서 출력되도록 밝기 보정을 행하는 밝기 보정 순서를 구비하는 것을 특징으로 하는 화상출력방법.
  20. 제 19항에 있어서,
    상기 밝기 보정 순서는,
    상기 경계 휘도치 및 상기 입력휘도의 분포에 의거하여 휘도 계조의 압축에 이용하는 변환곡선을 산출하는 변환곡선 산출순서와,
    상기 입력화상의 저주파 성분으로 이루어지는 대국(大局) 휘도 화상의 휘도인 대국 휘도를 산출하는 대국 휘도 산출순서와,
    상기 변환곡선에 의거하여 상기 입력휘도의 계조 및 상기 대국 휘도의 계조를 압축하는 계조 압축 순서와,
    상기 변환곡선의 기울기 및 계조가 압축된 상기 대국 휘도에 의거하여 계조가 압축된 상기 입력휘도로 이루어지는 계조 압축 입력화상의 콘트라스트를 보정하는 콘트라스트 보정 순서를 구비하는 것을 특징으로 하는 화상출력방법.
  21. 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출 순서와,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도 분배 순서와,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성 순서를 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램을 기록한 기록매체.
  22. 피사체를 촬상하여 복수의 화소로 이루어지는 입력화상 신호를 생성하는 촬상 순서와,
    상기 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출 순서와,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도 분배 순서와,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성 순서와,
    상기 경계 휘도치에 의거하여 상기 촬상에 있어서의 노광량을 제어하는 제어순서를 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램을 기록한 기록매체.
  23. 복수의 화소로 이루어지는 입력화상 신호에 있어서의 부분영역에 대하여 상기 입력화상 신호의 휘도인 입력휘도의 콘트라스트가 소정치보다 큰 부분영역을 콘트라스트영역으로서 검출하는 콘트라스트영역 검출 순서와,
    상기 콘트라스트영역에 있어서 상기 입력휘도가 밝은 명측 휘도와 상기 입력휘도가 어두운 암측 휘도로 분배하는 휘도 분배 순서와,
    상기 명측 휘도 및 암측 휘도의 분포에 의거하여 상기 명측 휘도 및 암측 휘도의 경계 휘도치를 생성하는 경계 휘도치 생성 순서와,
    상기 경계 휘도치에 상당하는 상기 입력휘도치가 중용인 휘도치로서 출력되도록 밝기 보정을 행하는 밝기 보정 순서를 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램을 기록한 기록매체.
  24. 제 23항에 있어서,
    상기 밝기 보정 순서에 있어서는,
    상기 경계 휘도치 및 상기 입력휘도의 분포에 의거하여 휘도의 계조의 압축에 이용하는 변환곡선을 산출하는 변환곡선 산출순서와,
    상기 입력화상의 저주파 성분으로 이루어지는 대국 휘도 화상의 휘도인 대국 휘도를 산출하는 대국 휘도 산출순서와,
    상기 변환곡선에 의거하여 상기 입력휘도의 계조 및 상기 대국 휘도의 계조를 압축하는 계조 압축 순서와,
    상기 변환곡선의 기울기 및 계조가 압축된 상기 대국 휘도에 의거하여 계조가 압축된 상기 입력휘도로 이루어지는 계조 압축 입력화상의 콘트라스트를 보정하는 콘트라스트 보정 순서를 컴퓨터에 실행시키는 것을 특징으로 하는 프로그램을 기록한 기록매체.
KR1020070056800A 2006-06-12 2007-06-11 화상처리장치, 촬상장치, 화상출력장치, 이들 장치에있어서의 방법 및 프로그램 KR101376701B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPJP-P-2006-00162927 2006-06-12
JP2006162927A JP4264553B2 (ja) 2006-06-12 2006-06-12 画像処理装置、撮像装置、画像出力装置、これらの装置における方法およびプログラム

Publications (2)

Publication Number Publication Date
KR20070118547A KR20070118547A (ko) 2007-12-17
KR101376701B1 true KR101376701B1 (ko) 2014-03-20

Family

ID=38512556

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070056800A KR101376701B1 (ko) 2006-06-12 2007-06-11 화상처리장치, 촬상장치, 화상출력장치, 이들 장치에있어서의 방법 및 프로그램

Country Status (5)

Country Link
US (1) US7791652B2 (ko)
EP (1) EP1868374A3 (ko)
JP (1) JP4264553B2 (ko)
KR (1) KR101376701B1 (ko)
CN (2) CN101090458B (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11244626B2 (en) 2019-03-14 2022-02-08 Samsung Display Co., Ltd. Display device

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4687320B2 (ja) * 2005-08-11 2011-05-25 ソニー株式会社 画像処理装置および方法、記録媒体、並びに、プログラム
US7755670B2 (en) * 2005-10-24 2010-07-13 Nikon Corporation Tone-conversion device for image, program, electronic camera, and tone-conversion method
JP4986747B2 (ja) * 2007-07-09 2012-07-25 キヤノン株式会社 撮像装置及び撮像方法
JP4922091B2 (ja) * 2007-07-23 2012-04-25 ルネサスエレクトロニクス株式会社 映像信号処理装置、映像信号処理方法及び表示装置
JP5132470B2 (ja) * 2008-08-01 2013-01-30 三洋電機株式会社 画像処理装置
JP5271631B2 (ja) * 2008-08-07 2013-08-21 Ｈｏｙａ株式会社 画像処理ユニット、撮像装置、合成画像作成プログラム
JP5157753B2 (ja) * 2008-08-27 2013-03-06 カシオ計算機株式会社 画像処理装置、画像処理方法、画像処理プログラム
KR101441307B1 (ko) 2008-10-10 2014-09-17 삼성전자주식회사 전력 소모 절감을 위한 영상 처리 방법 및 그 장치
KR101517360B1 (ko) * 2008-12-05 2015-05-04 삼성전자주식회사 픽셀의 휘도 정보에 기초한 영상 향상 장치 및 방법
KR101539379B1 (ko) * 2008-12-31 2015-07-29 주식회사 동부하이텍 실시간 영상 발생기
TWI416501B (zh) * 2009-02-06 2013-11-21 Primax Electronics Ltd 決定影像區域之亮度臨界值的方法及相關裝置
JP5026456B2 (ja) * 2009-03-30 2012-09-12 株式会社日立ソリューションズ 生体認証装置
JP5355190B2 (ja) * 2009-04-08 2013-11-27 キヤノン株式会社 画像表示装置及び方法並びにプログラム
KR101097484B1 (ko) * 2009-09-29 2011-12-22 삼성전기주식회사 미디안 필터, 이를 사용하는 자동 밝기 제어 장치 및 방법
JP5371717B2 (ja) * 2009-12-01 2013-12-18 キヤノン株式会社 画像処理装置及び画像処理方法
JP2011188391A (ja) * 2010-03-10 2011-09-22 Sony Corp 画像処理装置および方法、並びにプログラム
US8907953B2 (en) * 2010-06-09 2014-12-09 Krassimir Fotev Unfolding dataset with on-demand resolution on a non-linear fixed length graph axis
JP5624809B2 (ja) 2010-06-24 2014-11-12 株式会社 日立産業制御ソリューションズ 画像信号処理装置
WO2012017440A1 (en) 2010-08-05 2012-02-09 Ramot At Tel-Aviv University Ltd. Method and system for processing an image featuring multiple scales
CN102376082B (zh) * 2010-08-06 2014-11-05 株式会社理光 基于伽马校正的图像处理方法和装置
JP5806461B2 (ja) * 2010-10-04 2015-11-10 キヤノン株式会社 撮像システム及び発光装置
JP5968068B2 (ja) * 2011-05-24 2016-08-10 キヤノン株式会社 露出制御を行う撮像装置、撮像装置の制御方法、プログラム及び記録媒体
JP2013183353A (ja) * 2012-03-02 2013-09-12 Toshiba Corp 画像処理装置
JP5730362B2 (ja) * 2013-08-30 2015-06-10 合志　清一 画像処理装置及び画像処理方法
JP6260153B2 (ja) * 2013-09-04 2018-01-17 株式会社ニコン 撮像装置
JP2015139082A (ja) * 2014-01-22 2015-07-30 ソニー株式会社 画像処理装置、画像処理方法、プログラム、および電子機器
JP6579868B2 (ja) * 2015-09-01 2019-09-25 キヤノン株式会社 画像処理装置、撮像装置、画像処理方法およびプログラム
JP6144371B1 (ja) * 2016-01-14 2017-06-07 株式会社フジクラ 間欠連結型光ファイバテープの検査方法、検査装置及び製造方法
CN107024337B (zh) * 2016-02-01 2019-09-24 京东方科技集团股份有限公司 测量方法及其测量***
JPWO2018003939A1 (ja) * 2016-06-30 2019-06-27 アイキューブド研究所株式会社 画像出力装置、画像出力方法、およびプログラム
JP2018180266A (ja) * 2017-04-13 2018-11-15 キヤノン株式会社 表示装置およびその制御方法
US11373621B2 (en) * 2020-05-22 2022-06-28 Sharp Kabushiki Kaisha Display device, display control method, and storage medium
CN111565261B (zh) * 2020-06-02 2022-05-31 厦门美图之家科技有限公司 图像处理方法、装置及电子设备

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0996002A2 (en) 1998-10-19 2000-04-26 General Electric Company Method and apparatus for edge enhancement in ultrasound imaging
EP1022679A2 (en) 1995-10-30 2000-07-26 Hewlett-Packard Company Image processing system

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3125124B2 (ja) * 1994-06-06 2001-01-15 松下電器産業株式会社 欠陥画素傷補正回路
JPH08168004A (ja) 1994-12-15 1996-06-25 Canon Inc 画像処理装置及びその方法
JP3003561B2 (ja) * 1995-09-25 2000-01-31 松下電器産業株式会社 階調変換方法及びその回路と画像表示方法及びその装置と画像信号変換装置
US6151410A (en) * 1996-11-19 2000-11-21 Seiko Epson Corporation Image processing apparatus, image processing method and medium for storing image-processing control program
US6806903B1 (en) * 1997-01-27 2004-10-19 Minolta Co., Ltd. Image capturing apparatus having a γ-characteristic corrector and/or image geometric distortion correction
JP3881439B2 (ja) * 1998-01-23 2007-02-14 シャープ株式会社 画像処理装置
JP4057147B2 (ja) * 1998-06-16 2008-03-05 コニカミノルタビジネステクノロジーズ株式会社 逆光シーン判定方法、逆光シーン判定方法プログラムを記憶したコンピュータにより読み取り可能な記憶媒体及び逆光シーン判定機能を有する画像処理装置
US7342609B2 (en) * 2000-05-09 2008-03-11 Eastman Kodak Company Exposure adjustment in an imaging apparatus
JP2002006474A (ja) 2000-06-21 2002-01-09 Toppan Printing Co Ltd マスクパターン画像処理方法
JP2002369074A (ja) * 2001-06-11 2002-12-20 Ricoh Co Ltd 光学機器の露出制御装置およびプログラム、並びに方法
CN1303570C (zh) * 2002-02-12 2007-03-07 松下电器产业株式会社 图象处理装置和图象处理方法
EP1345172A1 (en) * 2002-02-26 2003-09-17 Sony International (Europe) GmbH Contrast enhancement for digital images
US7271838B2 (en) * 2002-05-08 2007-09-18 Olympus Corporation Image pickup apparatus with brightness distribution chart display capability
JP2004259177A (ja) 2003-02-27 2004-09-16 Fuji Photo Film Co Ltd 画像処理装置及びプログラム
JP4595330B2 (ja) * 2004-01-19 2010-12-08 ソニー株式会社 画像処理装置および方法、記録媒体、並びにプログラム
US7760961B2 (en) * 2004-10-15 2010-07-20 Caba Moldvai Adaptive contrast enhancement
US8164594B2 (en) * 2006-05-23 2012-04-24 Panasonic Corporation Image processing device, image processing method, program, storage medium and integrated circuit

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1022679A2 (en) 1995-10-30 2000-07-26 Hewlett-Packard Company Image processing system
EP0996002A2 (en) 1998-10-19 2000-04-26 General Electric Company Method and apparatus for edge enhancement in ultrasound imaging

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11244626B2 (en) 2019-03-14 2022-02-08 Samsung Display Co., Ltd. Display device

Also Published As

Publication number Publication date
EP1868374A2 (en) 2007-12-19
JP4264553B2 (ja) 2009-05-20
US20080043120A1 (en) 2008-02-21
CN101771823A (zh) 2010-07-07
CN101090458B (zh) 2011-06-15
CN101771823B (zh) 2013-01-02
EP1868374A3 (en) 2011-08-17
CN101090458A (zh) 2007-12-19
KR20070118547A (ko) 2007-12-17
JP2007336019A (ja) 2007-12-27
US7791652B2 (en) 2010-09-07

Similar Documents

Publication Publication Date Title
KR101376701B1 (ko) 화상처리장치, 촬상장치, 화상출력장치, 이들 장치에있어서의 방법 및 프로그램
KR101060488B1 (ko) 최적 영상 선택 방법 및 장치
JP6415062B2 (ja) 画像処理装置、画像処理方法、制御プログラム、および記録媒体
KR20130033445A (ko) 고 다이나믹 레인지 이미지의 캡처 및 렌더링
JP5779089B2 (ja) エッジ検出装置、エッジ検出プログラム、およびエッジ検出方法
KR20070108817A (ko) 화상 처리장치, 화상 처리방법 및 프로그램
US8830359B2 (en) Image processing apparatus, imaging apparatus, and computer readable medium
JP4900373B2 (ja) 画像出力装置、画像出力方法およびプログラム
JP2013065005A (ja) 合焦評価装置、撮像装置およびプログラム
US20140184853A1 (en) Image processing apparatus, image processing method, and image processing program
CN114979500B (zh) 图像处理方法、图像处理装置、电子设备及可读存储介质
US8582813B2 (en) Object detection device which detects object based on similarities in different frame images, and object detection method and computer-readable medium recording program
JP3992720B2 (ja) 画像補正装置、画像補正方法、プログラム、及び記録媒体
JP7277158B2 (ja) 設定装置及び方法、プログラム、記憶媒体
US8599288B2 (en) Noise reduction apparatus, method and computer-readable recording medium
US10867392B2 (en) Spatially multiplexed exposure
JP5202190B2 (ja) 画像処理方法及び画像処理装置
JP2000333003A (ja) 画像形成装置並びに画像形成装置の制御方法およびコンピュータが読み出し可能なプログラムを格納した記憶媒体
JP4043499B2 (ja) 画像補正装置及び画像補正方法
KR100968375B1 (ko) 최적 영상 선택 방법 및 장치
JP5159647B2 (ja) 画像処理装置及び画像処理方法
US11245810B2 (en) Image processing apparatus, method, and program product for embedding corresponding information in an area overlapping a recognized object
US20240161249A1 (en) Image processing device, non-transitory computer-readable medium, and image processing method
JP3907654B2 (ja) 撮像装置および信号処理装置
JP3460927B2 (ja) 画像変換方法及び記録媒体

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee