KR101294735B1 - 이미지 처리 방법 및 이를 이용한 촬영 장치 - Google Patents

이미지 처리 방법 및 이를 이용한 촬영 장치 Download PDF

Info

Publication number
KR101294735B1
KR101294735B1 KR1020100029362A KR20100029362A KR101294735B1 KR 101294735 B1 KR101294735 B1 KR 101294735B1 KR 1020100029362 A KR1020100029362 A KR 1020100029362A KR 20100029362 A KR20100029362 A KR 20100029362A KR 101294735 B1 KR101294735 B1 KR 101294735B1
Authority
KR
South Korea
Prior art keywords
image
luminance value
image processing
blurring
preset
Prior art date
Application number
KR1020100029362A
Other languages
English (en)
Other versions
KR20110109574A (ko
Inventor
이진경
김태경
정택성
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020100029362A priority Critical patent/KR101294735B1/ko
Priority to US13/049,558 priority patent/US8681244B2/en
Publication of KR20110109574A publication Critical patent/KR20110109574A/ko
Application granted granted Critical
Publication of KR101294735B1 publication Critical patent/KR101294735B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2621—Cameras specially adapted for the electronic generation of special effects during image pickup, e.g. digital cameras, camcorders, video cameras having integrated special effects capability
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/70—Denoising; Smoothing

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Studio Devices (AREA)

Abstract

이미지 처리 방법 및 이를 이용한 촬영 장치가 개시된다. 본 발명에 따른 이미지 처리 방법은, 적어도 하나의 이미지를 입력받는 단계; 입력된 적어도 하나의 이미지 중 특정 영역을 선택하는 단계; 선택된 특정 영역의 휘도값을 추출하는 단계; 및 추출된 휘도값을 기초로 블러링 정도를 결정하여 상기 선택된 영역을 블러링하여 이미지 처리하는 단계;를 포함한다. 본 발명에 의하여 보다 자연스러운 아웃 포커스 효과가 구현된 이미지를 얻을 수 있게 된다.

Description

이미지 처리 방법 및 이를 이용한 촬영 장치{IMAGE PROCESSING METHOD AND PHOTOGRAPHING APPARATUS USING THE SAME}
본 발명은 이미지 처리 방법 및 이를 이용한 촬영 장치에 관한 것으로, 더욱 상세하게는 아웃 포커스 효과를 구현하기 위한 이미지 처리 방법 및 이를 이용한 촬영 장치에 관한 것이다.
이미지 촬영을 위한 촬영 장치가 과거에는 카메라나 캠코더 등에 한정되었던 것에 반해, 근래에는 핸드폰, 노트북에 이르기까지 다양한 장치에 응용되어 탑재되어 있다. 또한, 탑재된 촬영 장치의 기능도 더욱 향상되고 다양해져, 실제에 가까운 이미지의 촬영이 가능해졌고, 촬영된 이미지를 이미지 처리함으로써 다양한 효과를 줄 수도 있게 가능해졌다. 예를 들어 촬영된 이미지의 처리를 통하여 다양한 필터 효과뿐만 아니라, 팬포커스 혹은 아웃포커스 효과까지 구현할 수 있게 되었다.
여기서, 아웃 포커스 효과란 초점 심도(Depth of field)에서 벗어난 배경 화상이 흐려지는 것을 말하는데, 이와 같은 아웃 포커스 효과를 이용하여 주 피사체를 초점 심도 내에 위치시키고 배경을 초점 심도 밖에 위치시켜 흐려지게 함으로써 주 피사체를 부각시키는 촬영기법으로 주로 이용된다.
아웃 포커스 효과는 초점거리와 조리개의 조절을 통한 광학적 방법에 의하여 구현될 수도 있고, 이미지 처리에 의하여 배경을 흐리게 함으로써 구현될 수도 있다. 광학적 방법은 실제적인 물리적 현상에 기초한 것으로, 획득되는 아웃 포커스 이미지가 매우 자연스럽다. 그러나, 이미지 처리에 의하여 배경을 흐리게 하는 것은 피사체와 배경을 분리하여 배경만을 이미지 처리하는 것으로, 이미지 처리에 이용되었던 종래 기술들로 구현된 이미지는 매우 부자연스럽게 보인다.
다시 말해, 광학적인 방법, 즉, 실제적인 물리적 현상에 기초하여 촬영된 블러링 효과와는 달리 이미지 처리에 의하여 블러링된 이미지는 사용자가 느끼기에 매우 부자연스럽다는 인상을 준다.
이렇게 종래 기술로는 이미지 처리를 통하여 실제에 가까운 아웃 포커스 효과를 얻기 어렵다는 문제점이 있다.
본 발명은 상술한 문제점을 감안하여 안출된 것으로, 본 발명의 목적은 더욱 자연스러운 아웃 포커스를 구현할 수 있는 이미지 처리 방법 및 그 촬영 장치를 제공함에 있다.
상술한 목적을 달성하기 위한 본 발명의 일 실시예에 따른 이미지 처리 방법은, 적어도 하나의 이미지를 입력받는 단계; 상기 입력된 적어도 하나의 이미지 중 특정 영역을 선택하는 단계; 상기 선택된 특정 영역의 휘도값을 추출하는 단계; 및 상기 추출된 휘도값을 기초로 블러링 정도를 결정하고, 결정된 블러링 정도로 상기 선택된 영역을 블러링하여 이미지 처리하는 단계;를 포함한다.
그리고, 상기 이미지 처리하는 단계는, 상기 추출된 휘도값에 따라 가중치를 주어 상기 선택된 영역을 블러링하는 것이 바람직하다.
또한, 상기 이미지 처리하는 단계는, 상기 추출된 휘도값이 큰 경우에는 블러링 정도를 크게 하여 상기 선택된 영역을 블러링하는 것이 바람직하다.
그리고, 상기 이미지 처리하는 단계는, 상기 추출된 휘도값이 작은 경우에는 블러링 정도를 작게 하여, 상기 선택된 영역을 블러링하는 것이 바람직하다.
또한, 상기 이미지 처리하는 단계는, 상기 이미지 처리된 이미지가 하기의 식,
Figure 112010020624582-pat00001
(여기서, Wwhite는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 밝은 부분의 폭, Wblack는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 어두운 부분의 폭, Wwhite-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 밝은 부분의 폭, 그리고, Wblack-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 어두운 부분의 폭을 나타낸다. 한편, 명암 패턴 그래프는 명암 패턴의 세기를 도시한 그래프이다.)을 만족하도록 이미지 처리하는 것이 바람직하다.
그리고, 상기 특정 영역을 선택하는 단계는, 사용자로부터의 입력을 통하여 상기 이미지의 특정영역을 선택하는 것이 바람직하다.
또한, 상기 특정 영역을 선택하는 단계는, 상기 이미지 안의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 선택하는 것이 바람직하다.
그리고, 본 발명의 일 실시예에 따른 이미지 처리 방법은 상기 이미지 처리된 이미지를 디스플레이하는 단계;를 더 포함하는 것이 바람직하다.
또한, 상기 휘도값은 하기의 식인, 휘도값 = a*R + b*G + c*B (여기서, a,b,c는 실수값)로 정의되는 것이 바람직하다.
그리고, 상기 이미지는 2D 이미지 및 3D 이미지를 포함하는 것이 바람직하다.
또한, 상기 이미지를 입력받는 단계는, 적어도 하나 이상의 카메라 모듈로부터 생성된 이미지를 입력받는 것이 바람직하다.
한편, 상술한 목적을 달성하기 위한 본 발명의 일 실시예에 따른 촬영 장치는, 적어도 하나의 이미지를 입력받는 이미지 입력부; 및 상기 입력된 적어도 하나의 이미지 중 특정 영역을 선택하고, 상기 특정 영역의 휘도값을 기초로 블러링 정도를 결정하고, 결정된 블러링 정도로 상기 선택된 영역을 블러링하여 이미지 처리하는 이미지 처리부;를 포함한다.
그리고, 상기 이미지 처리부는, 상기 추출된 휘도값에 따라 가중치를 주어 상기 선택된 영역을 블러링하는 것이 바람직하다.
또한, 상기 이미지 처리부는, 상기 추출된 휘도값이 큰 경우에는 블러링 정도를 크게 하여 상기 선택된 영역을 블러링하는 것이 바람직하다.
그리고, 상기 이미지 처리부는, 상기 추출된 휘도값이 작은 경우에는 블러링 정도를 작게 하여, 상기 선택된 영역을 블러링하는 것이 바람직하다.
또한, 상기 이미지 처리부는, 상기 이미지 처리된 이미지가 하기의 식,
Figure 112010020624582-pat00002
(여기서, Wwhite는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 밝은 부분의 폭, Wblack는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 어두운 부분의 폭, Wwhite-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 밝은 부분의 폭, 그리고, Wblack-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 어두운 부분의 폭을 나타낸다. 한편, 명암 패턴 그래프는 명암 패턴의 세기를 도시한 그래프이다.)을 만족하도록 이미지 처리하는 것이 바람직하다.
또한, 상기 이미지 처리부는, 사용자로부터의 입력을 통하여 상기 이미지의 특정영역을 선택하여 이미지 처리하는 것이 바람직하다.
그리고, 상기 이미지 처리부는, 상기 이미지 안의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 상기 이미지의 특정영역을 선택하는 것이 바람직하다.
또한, 본 실시예에 따른 촬영 장치는 상기 이미지 처리된 이미지를 디스플레이하는 표시부;를 더 포함하는 것이 바람직하다.
그리고, 상기 휘도값은 하기의 식인, 휘도값 = a*R + b*G + c*B (여기서, a,b,c는 실수값)로 정의되는 것이 바람직하다.
또한, 상기 이미지는 2D 이미지 및 3D 이미지를 포함하는 것이 바람직하다.
그리고, 상기 이미지 입력부는, 적어도 하나 이상의 카메라 모듈로부터 생성된 이미지를 입력받는 것이 바람직하다.
상술한 본 발명의 실시예에 따른 이미지 처리 방법 및 그 촬영 장치에 의하면, 더욱 자연스러운 아웃 포커스를 구현하는 것이 가능해진다.
도 1은 본 발명이 적용 가능한 카메라의 구성을 나타내는 블록도,
도 2는 본 발명이 적용 가능한 이미지 처리 장치의 구성을 나타내는 블록도,
도 3a 내지 도 3c는 본 발명의 일 실시예에 따른 이미지 처리 방법을 설명하기 위한 도,
도 4는 본 발명의 일 실시예에 따른 이미지 처리 방법을 설명하기 위한 도,
도 5는 DSLR에서 조리개 수치에 따른 명암 패턴의 촬영 결과를 나타낸 도,
도 6은 DSLR에서 조리개 수치에 따른 명암 패턴의 세기를 나타내는 그래프,
도 7은 본 발명의 일 실시예에 따른 이미지 처리 방법을 설명하기 위한 그래프,
도 8은 본 발명의 일 실시예에 따른 이미지 처리 방법을 설명하기 위한 그래프, 그리고,
도 9는 본 발명의 일 실시예에 따른 이미지 처리 방법을 나타내는 흐름도이다.
이하에서는 첨부된 도면을 참조하면서 본 발명에 대하여 보다 상세하게 설명하기로 한다.
도 1은 본 발명이 적용 가능한 카메라의 구성을 나타내는 블록도이다. 본 발명의 일 실시예에 따른 카메라는 렌즈(100), 셔터(105), 이미지 센서(110), AGC(Automatic Gain Control)(120), ADC(Anolog to Digital Converter)(130), ISP(Image Signal Processor)(140), 표시부(150), 제어부(160), 사용자 입력부(170) 및 저장부(180)를 구비한다.
렌즈(100)는 피사체의 상을 받아들이고, 셔터(105)는 이미지 센서(110)로의 노광량을 조절한다. 한편, 이미지 센서(110)는 입력되는 광신호를 전기적인 신호로 변환하거나, 전자 선막 기능을 통하여 노출량을 조절하는 기능을 갖는다.
입력된 광신호가 이미지 센서(110)에 의하여 전기적 신호로 변환된 후에는 AGC(120) 회로에 의하여 다시 한번 적절한 크기의 신호로 증폭된다. 증폭된 신호는 ADC(130) 회로를 거치면서 아날로그 신호에서 디지털 신호로 변환된다.
이후, ISP(140)에서 디지털 신호 처리과정이 이루어진다. ISP(140)는 받아들인 이미지 신호를 디스플레이할 수 있도록 신호처리를 수행한다.
또한, ISP(140)은 사용자의 입력에 따라 입력된 이미지를 다양하게 처리한다. 특히, 아웃 포커스 처리함에 있어서는, 입력된 이미지의 특정 영역을 선택하고, 선택된 영역을 블러링 처리 함으로써 아웃 포커스 효과를 구현한다. 한편, 블러링 처리함에 있어서는, 특정 영역의 픽셀들의 휘도값을 추출하고, 휘도값에 따라 가중치를 부여하여 블러링 함으로써 보다 자연스러운 아웃 포커스 효과를 구현하는 것이 가능해 진다.
표시부(150)는 ISP(140)에서 처리된 이미지 신호를 바로 사용자가 확인할 수 있도록 디스플레이할 수 있다 또한, OSD를 생성하여 사용자의 편리한 사용을 도모하는 등의 기능도 가질 수 있다.
제어부(160)는 신호의 증폭, 변환, 처리 등의 전반적인 과정을 제어하는 기능을 가지며, 사용자 입력부(170)에서 입력된 사용자의 명령을 수신하고, 수신된 명령에 기초하여 카메라 모듈을 제어한다.
한편, 저장부(180)는 현재의 이미지 또는 ISP에서 이미지 처리된 이미지를 저장하는 공간으로 활용된다. 뿐만 아니라, 촬영 장치의 제어를 위해 필요한 정보등이 저장되는 공간이기도 하다.
도 1에서는 촬영 장치로 디지털 카메라를 예로 들었다. 한편, 셔터(105)가 이미지 센서(110)의 앞에 있는 포컬 플레인 셔터를 상정하였으나, 피사체를 촬영할 수 있는 렌즈 구조라면 렌즈 셔터이어도 무방하다. 또한, 저장부(180)가 카메라 내부에 구비된 것으로 상정하였으나, 카메라와 연동하는 외부 저장매체이어도 무방할 것이다.
도 2는 본 발명이 적용 가능한 이미지 처리 장치의 구성을 나타내는 블록도이다. 본 발명의 일 실시예에 따른 이미지 처리 장치는 이미지 입력부(200), 이미지 처리부(210), 표시부(220) 및 저장부(230)를 구비한다.
이미지 입력부(200)는 적어도 하나의 이미지를 입력받는다. 2D 이미지의 경우에는 이미지 처리하는데 있어서 하나의 이미지로 족하지만, 좌안 이미지과 우안 이미지으로 이루어진 3D 이미지의 경우에는 이미지 처리하는데 있어서 양자 모두 이미지처리를 해주어야 하기 때문에, 적어도 두 개의 이미지가 필요할 것이다.
이미지 처리부(210)는 이미지 입력부(200)로부터 이미지를 수신하여, 이를 처리한다. 팬 포커스 효과나 다양한 필터 효과를 구현할 수도 있고, 동적 영역을 확장하여 양질의 이미지를 얻는 것도 가능할 것이다.
특히, 아웃 포커스 효과를 구현하기 위해서는 이미지 입력부(200)로부터 수신한 이미지를 블러링 처리하는 것이 필요한데, 이때 실제와 가까운 블러링 효과를 구현하기 위해서 수신한 이미지의 휘도값을 참조하여 이를 기초로 블러링 효과를 적용한다.
구체적으로, 2D 이미지를 예로 들어 설명하면 수신한 이미지에서 이미지 처리, 즉, 블러링 효과를 주고자 하는 영역을 선택한다. 이와 같은 선택은 사용자에 의하여 이루어질 수도 있고, 이미지내의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 선택될 수도 있을 것이다. 이후, 수신한 이미지의 각 픽셀의 휘도값을 추출한다. 여기서는, 휘도값을 하기의 식과 같이 정의하지만, 이와 다른 방식으로 휘도값을 정의할 수 있을 것이다.
휘도값 = a*R + b*G + c*B (여기서, a,b,c는 실수)
이어서, 추출된 휘도값이 큰 경우에는 블러링 정도를 크게 하여 블러링 효과를 주고, 추출된 휘도값이 낮은 경우에는 블러링 정도를 작게 하여 블러링 효과를 주게 된다. 즉, 휘도값에 따라 가중치를 주어서 블러링 효과를 줌으로써 더욱 실제에 가까운 블러링 효과를 줄 수 있게 된다. 여기서, 실제에 가까운 블러링 효과란 광학적 방법에 의하여 자연스럽게 이루어지는 아웃 포커스 효과를 구현할 수 있도록 처리된 것으로 말할 수 있을 것이다.
마찬가지로 3D 이미지인 경우에는 이미지 입력부(200)는 적어도 두 장의 이미지를 입력받게 될 것이다. 이 때, 블러링 효과를 주고자 하는 영역이 선택되며, 좌안 이미지와 우안 이미지에 상술한 바와 같은 방식으로 블러링 효과를 주게 되면, 3D 입체 이미지에서도 보다 실제에 가까운 아웃 포커스 효과를 가질 수 있게 된다.
이미지 처리부(210)에서 처리된 이미지는 표시부(220)로 전달되며, 표시부(220)는 수신한 이미지를 디스플레이한다. 이때 표시부에서는 처리되기 전의 이미지를 표시하여, 사용자로부터 블러링 효과를 주고자 하는 영역을 선택할 수 있게 한다.
또한, 선택된 영역에 블러링 효과를 준 이후의 처리된 이미지를 표시하는 기능도 갖는다.
저장부(230)는 수신한 이미지를 일시 저장하거나, 이미지 처리된 이미지를 일시 저장할 수 있다. 또한, 이미지 처리 장치의 동작에 관여되는 여러가지 정보를 저장하여, 이미지 처리에 필요한 소스를 제공하기도 한다.
도 3a 내지 도 3c는 본 발명의 일 실시예에 따른 이미지 처리 방법을 설명하기 위한 사진이다. 도 3c는 아웃 포커스 처리되지 않은 상태의 일반적인 사진을 보여준다. 한편, 도 3a는 DSLR(digital single-lens reflex camera)에서 아웃 포커싱 된 이미지이고, 도 3b는 종래의 블러링 처리 기법을 이용하여 아웃 포커스 효과를 준 이미지이다.
도 3c의 일반적인 이미지를 전체적으로 아웃 포커스 하는 경우, 광학적인 방법에 의하면 도 3a에서와 같이 자연스럽게 전체적으로 흐려지게 된다. 도 3a에서는 사진에서 보는 바와 같이 피사체인 나무 기둥의 두께가 얇아지면서 흐릿해지는 반면, 종래의 블러링 처리 기법을 이용한 도 3b에서는 나무 기둥의 두께가 오히려 두꺼워지면서 흐려져서 전체적으로 둔탁하고 흐릿한 이미지만이 남게 된다.
또한, 사진들에서의 나뭇잎을 비교하면, 도 3a에서는 빛망울이 잘 보이는 반면에 도 3b에서는 빛망울이 보이지 않고 단조롭고 평면적인 느낌을 주게 된다.
본 발명의 일실시예에 따른 이미지 처리 방법에 따르면 도 3b에서 보는 바와 같은 종래의 블러링 처리 기법을 개선하여, 도 3a와 같이 DSLR에서의 아웃 포커스 효과와 같은, 보다 자연스러운 이미지를 구현할 수 있게 된다. 이하에서는 그 목적을 달성하기 위한 이미지 처리 방법을 더욱 구체적으로 설명한다.
도 4는 본 발명의 이미지 처리 방법을 설명하기 위한 도면이다. 적어도 하나의 이미지를 얻는 카메라 모듈(310, 320)이 존재한다. 이는 3D 이미지의 이미지 처리를 고려하여 좌안 이미지와 우안 이미지의 입력을 고려한 것으로, 이미지 생성부는 꼭 두개일 필요는 없고, 하나이어도 무방하다. 또한, 카메라 모듈은 카메라의 전체 구성일 수도 있고, 카메라의 렌즈부만을 의미할 수도 있다.
이미지 처리를 위하여 적어도 하나의 이미지를 입력한다(330). 입력된 이미지는 이미지 처리를 위하여 특정 영역이 선택된다(340). 특정 영역이란, 아웃 포커스 효과가 구현될 영역, 즉, 블러링 되어야 할 영역을 말하는 것으로 사용자에 의하여 선택될 수도 있고, 이미지내의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 선택될 수도 있을 것이다.
특정 영역이 선택되면, 이미지 처리과정이 이루어진다(350). 이때, 선택된 영역을 블러링 함에 있어서, 해당 픽셀의 휘도값을 추출한 후, 휘도값에 따라 가중치를 주어서 해당 픽셀을 블러링하게 된다. 즉, 해당 픽셀의 휘도값이 큰 경우에는 블러링 정도를 크게 하고, 휘도값이 작은 경우에는 블러링 정도를 작게 하여 전체적으로 자연스러운 블러링 효과를 주게 된다.
이러한 방식으로 휘도값에 따른 가중치를 반영하여 블러링하는 경우에는 도 3a와 같이 자연스러운 이미지를 얻을 수 있게 된다. 그 원리와 관련해서는 도 5 이하의 도면을 참조하면서 설명하기로 한다.
이미지 처리된 이미지는 메모리에 저장되거나(360), 표시부에 디스플레이된다(370).
도 5는 DSLR에서 조리개 수치에 따른 명암 패턴의 촬영 결과를 나타낸 것이고, 도 6은 DSLR에서 조리개 수치에 따른 명암 패턴의 세기를 그래프로 도시한 것이다.
도 5의 조리개 수치가 22인 경우(400)의 명암 패턴은 많이 흐려지지 않은 모습을 보여준다. 하지만, 조리개 수치가 11인 경우(410)이 명암 패턴은 어느 정도 흐려져, 어두운 부분의 폭이 가늘어지고, 조리개 수치가 4인 경우(420)에는 명암 패턴이 많이 흐려져 어두운 부분의 폭이 거의 보이지 않는다. 즉, 도 3a와 같은 바람직한 아웃 포커스 이미지를 얻기 위해서는 밝은 부분을 더욱 흐리게 하여 어두운 부분의 폭을 감소시키는 형태로 되어야 한다. 다시 말하면, 밝은 부분은 블러링 정도를 크게 하고, 어두운 부분은 블러링 정도을 상대적으로 작게 하여, 밝은 부분이 어두운 부분의 영역을 많이 차지할 수 있도록 효과를 주어야 한다.
도 6은 도 5의 명암 패턴 촬영 결과를 픽셀에 대한 밝기의 정도로 나타내는 것으로, 조리개의 수치에 따라 구분한 그래프이다.
도 6에 도시된 바와 같이 조리개 수치가 22인 경우(500)에는 밝은 부분과 어두운 부분이 차지하는 영역이 대체로 비슷하다. 그러나, 조리개 수치가 11인 경우(510)에는 어두운 부분이 차지하는 영역이 더욱 감소하였고, 조리개 수치가 4인 경우(520)에는 어두운 부분이 차지하는 영역이 거의 없다. 조리개 수치가 작아진다는 것은 아웃 포커스의 정도를 크게 한다는 것을 의미한다. 따라서, 아웃 포커스의 정도가 클수록, 즉, 흐려지는 정도가 커질수록 어두운 영역은 상대적으로 감소하고, 밝은 영역은 상대적으로 증가하게 되는 것이다.
도 7은 상술한 상기 DSLR에서의 아웃 포커스 특징을 일반화하여 설명하기 위한 그래프이다.
어두운 영역과 밝은 영역이 뚜렷하게 구분되고, 영역의 크기가 같은 명암 패턴을 상정한다면, 도 7에서와 같이 일정한 간격과 진폭을 가지는 곡선이 될 것이다. Imax는 밝기가 가장 클 때의 값을 나타내며, Imin은 밝기가 가장 작을 때, 즉, 가장 어두울 때의 값을 나타낸다. 또한, Wwhite는 밝은 부분의 영역(폭), Wblack은 어두운 영역의 영역(폭)을 나타낸다. Imean은 평균 밝기, 즉, Imax와 Imin의 평균값을 나타낸다.
도 6에서 설명한 바와 같이 DSLR에서의 아웃 포커스의 특징은 이미지 처리 하기 전의 명암폭비 Wwhite/Wblack를 기준으로 이미지 처리 후의 명암폭비 Wwhite - ip/Wblack - ip가 증가하는 것으로 설명할 수 있다.
즉, 블러링 정도는 아래 식으로 설명할 수 있다.
Figure 112010020624582-pat00003
도 6에서의 그래프를 참조하여 설명하면, 조리개 수치 22인 경우(500)를 이미지 처리 이전의 이미지로 간주하고, 조리개 수치 11인 경우(510)를 이미지 처리 이후의 이미지로 간주하여 계산하면, blur=약 1.9의 값을 얻게 된다.
한편, 휘도값을 고려하지 않고 블러링을 적용한다면, blur=약 0.87 정도가 된다. 따라서, DSLR에서의 아웃 포커스 효과를 구현하기 위해서는 blur>1일 것이 요구된다.
도 8은 DSLR에서의 조리개 수치에 따른 명암폭비, 종래 블러링 효과에 따른 명암폭비 및 본 발명에서 제시된 블러링 효과에 따른 명암폭비를 비교하기 위한 도이다.
본 발명에서는 종래 기술과는 달리 블러링 효과를 적용함에 있어서, 조리개의 모양, 거리에 따른 블러링의 정도 뿐만이 아니라 픽셀의 휘도, 즉, 픽셀의 밝기를 고려하게 된다. 여기서 휘도값은 추출하는 방법은 앞서 설명한 바와 같이 RGB값에 특정한 실수를 곱하여 산출하는 방법을 이용할 수 있을 것이다.
즉, 휘도값 = a*R + b*G + c*B으로 나타낼 수 있게 된다.
상술한 식에 의하여 산출된 휘도값을 반영하여, 휘도값이 큰 경우에는 블러링의 정도를 크게, 휘도값이 작은 경우에는 블러링의 정도를 작게 하여 구현하는 경우 좀 더 DSLR에서 구현된 자연스러운 아웃 포커스 효과를 구현할 수 있다.
도 8에서와 같이 DSLR에서 조리개 수치가 22인 경우(600)에 비하여 조리개 수치가 11인 경우(610)에 명암폭비가 더 큰 것을 알 수 있다. 또한, DSLR에서 조리개 수치가 22인 경우(600)를 기준으로 하면, 종래 기술에 따른 블러링(630)보다는, 본 발명에 따른 블러링(620)이 더 명암폭비가 크고, DSLR에서 조리개 수치가 11인 경우와 흡사하기 때문에 결과적으로도 DSLR에서 촬영한 것과 유사한 수준의 이미지를 얻을 수 있게 된다.
마지막으로, 도 9는 본 발명의 일 실시예에 따른 이미지 처리 방법을 나타내는 흐름도이다.
적어도 하나의 이미지를 입력받고(S700), 입력된 이미지에서 특정 영역, 즉, 이미지 처리하고자 하는 영역을 선택한다(S710). 이미지 처리하고자 하는 영역의 선택은 사용자에 의하여 이루어질 수도 있고, 이미지안의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 선택될 수도 있을 것이다.
이후, 휘도값을 반영시키기 위하여 상기 선택된 영역의 휘도값을 추출한다(S720). 여기서, 선택된 영역만이 아닌 전체 영역의 휘도값을 선택하여도 무방하다. 다음으로 상기 추출된 휘도값에 기초하여, 블러링 정도를 결정한다(S730). 여기서, 추출된 휘도값이 큰 경우에는 블러링 정도를 크게 하고, 휘도값이 작은 경우에는 블러링 정도를 작게 함으로써, 휘도값에 따른 가중치가 블러링 정도를 결정하는 변수가 된다.
마지막으로, 결정된 블러링 정도에 따라 이미지의 각 픽셀을 블러링 처리한다(S740).
이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어서는 안 될 것이다.
100.................렌즈
105.................셔터
110.................이미지 센서
120.................AGC(Automatic Gain Control)
130.................ADC(Anolog to Digital Converter)
140.................ISP(Image Signal Processor)
150.................표시부
160.................제어부
170.................사용자 입력부
180.................저장부

Claims (22)

  1. 적어도 하나의 이미지를 입력받는 단계;
    상기 입력된 적어도 하나의 이미지 중 특정 영역을 선택하는 단계;
    상기 선택된 특정 영역의 휘도값을 추출하는 단계; 및
    상기 추출된 휘도값이 기설정된 휘도값 이상인 경우 블러링 정도를 기설정된 블러링 기준값보다 크게 하고, 상기 추출된 휘도값이 기설정된 휘도값 미만인 경우 블러링 정도를 기설정된 블러링 기준값보다 작게 하여 상기 선택된 영역을 블러링하여 이미지를 처리하는 단계; 를 포함하는 이미지 처리 방법.
  2. 제 1항에 있어서,
    상기 이미지 처리하는 단계는,
    상기 추출된 휘도값에 따라 가중치를 주어 상기 선택된 영역을 블러링하는 것을 특징으로 하는 이미지 처리 방법.
  3. 삭제
  4. 삭제
  5. 제 1항에 있어서,
    상기 이미지 처리하는 단계는,
    상기 이미지 처리된 이미지가 하기의 식,
    Figure 112012025914660-pat00004

    (여기서, Wwhite는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 휘도값이 기설정된 휘도값 이상인 부분의 폭,
    Wblack는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 휘도값이 기설정된 휘도값 미만인 부분의 폭,
    Wwhite-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 휘도값이 기설정된 휘도값 이상인 부분의 폭, 그리고,
    Wblack-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 휘도값이 기설정된 휘도값 미만인 부분의 폭을 나타낸다. 한편, 명암 패턴 그래프는 명암 패턴의 세기를 도시한 그래프이다.)
    을 만족하도록 이미지 처리하는 것을 특징으로 하는 이미지 처리 방법.
  6. 제 1항에 있어서,
    상기 특정 영역을 선택하는 단계는,
    사용자로부터의 입력을 통하여 상기 이미지의 특정 영역을 선택하는 것을 특징으로 하는 이미지 처리 방법.
  7. 제 1항에 있어서,
    상기 특정 영역을 선택하는 단계는,
    상기 입력된 이미지를 상기 이미지 안의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 선택하는 것을 특징으로 하는 이미지 처리 방법.
  8. 제 1항에 있어서,
    상기 이미지 처리된 이미지를 디스플레이하는 단계;를 더 포함하는 것을 특징으로 하는 이미지 처리 방법.
  9. 제 1항에 있어서,
    상기 휘도값은 하기의 식
    휘도값 = a*R + b*G + c*B (여기서, a,b,c는 실수값)
    로 정의되는 것을 특징으로 하는 이미지 처리 방법.
  10. 제 1항에 있어서,
    상기 이미지는 2D 이미지 및 3D 이미지를 포함하는 것을 특징으로 하는 이미지 처리 방법.
  11. 제 1항에 있어서,
    상기 이미지를 입력받는 단계는,
    적어도 하나 이상의 카메라 모듈로부터 생성된 이미지를 입력받는 것을 특징으로 하는 이미지 처리 방법.
  12. 적어도 하나의 이미지를 입력받는 이미지 입력부; 및
    상기 입력된 적어도 하나의 이미지 중 특정 영역을 선택하고,
    상기 선택된 영역의 휘도값을 추출하며,
    상기 추출된 휘도값이 기설정된 휘도값 이상인 경우 블러링 정도를 기설정된 블러링 기준값보다 크게 하고, 상기 추출된 휘도값이 기설정된 휘도값 미만인 경우 블러링 정도를 기설정된 블러링 기준값보다 작게 하여 상기 선택된 영역을 블러링하여 이미지를 처리하는 이미지 처리부;를 포함하는 촬영 장치.
  13. 제 12항에 있어서,
    상기 이미지 처리부는,
    상기 추출된 휘도값에 따라 가중치를 주어 상기 선택된 영역을 블러링하는 것을 특징으로 하는 촬영 장치.
  14. 삭제
  15. 삭제
  16. 제 12항에 있어서,
    상기 이미지 처리부는,
    상기 이미지 처리된 이미지가 하기의 식,
    Figure 112012025914660-pat00005

    (여기서, Wwhite는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 휘도값이 기설정된 휘도값 이상인 부분의 폭,
    Wblack는 명암 패턴 그래프에서 이미지 처리 이전 이미지의 휘도값이 기설정된 휘도값 미만인 부분의 폭,
    Wwhite-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 휘도값이 기설정된 휘도값 이상인 부분의 폭, 그리고,
    Wblack-ip는 명암 패턴 그래프에서 이미지 처리 이후 이미지의 휘도값이 기설정된 휘도값 미만인 부분의 폭을 나타낸다. 한편, 명암 패턴 그래프는 명암 패턴의 세기를 도시한 그래프이다.)
    을 만족하도록 이미지 처리하는 것을 특징으로 하는 촬영 장치.
  17. 제 12항에 있어서,
    상기 이미지 처리부는,
    사용자로부터의 입력을 통하여 상기 이미지의 특정 영역을 선택하는 것을 특징으로 하는 촬영 장치.
  18. 제 12항에 있어서,
    상기 이미지 처리부는,
    상기 이미지 안의 피사체의 위치 정보 또는 배경의 거리 정보를 이용하여 상기 이미지의 특정 영역을 선택하는 것을 특징으로 하는 촬영 장치.
  19. 제 12항에 있어서,
    상기 이미지 처리된 이미지를 디스플레이하는 표시부;를 더 포함하는 것을 특징으로 하는 촬영 장치.
  20. 제 12항에 있어서,
    상기 휘도값은 하기의 식
    휘도값 = a*R + b*G + c*B (여기서, a,b,c는 실수값)
    로 정의되는 것을 특징으로 하는 촬영 장치.
  21. 제 12항에 있어서,
    상기 이미지는 2D 이미지 및 3D 이미지를 포함하는 것을 특징으로 하는 촬영 장치.
  22. 제 12항에 있어서,
    상기 이미지 입력부는,
    적어도 하나 이상의 카메라 모듈로부터 생성된 이미지를 입력받는 것을 특징으로 하는 촬영 장치.
KR1020100029362A 2010-03-31 2010-03-31 이미지 처리 방법 및 이를 이용한 촬영 장치 KR101294735B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020100029362A KR101294735B1 (ko) 2010-03-31 2010-03-31 이미지 처리 방법 및 이를 이용한 촬영 장치
US13/049,558 US8681244B2 (en) 2010-03-31 2011-03-16 Image processing method using blurring and photographing apparatus using the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020100029362A KR101294735B1 (ko) 2010-03-31 2010-03-31 이미지 처리 방법 및 이를 이용한 촬영 장치

Publications (2)

Publication Number Publication Date
KR20110109574A KR20110109574A (ko) 2011-10-06
KR101294735B1 true KR101294735B1 (ko) 2013-08-08

Family

ID=44709245

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020100029362A KR101294735B1 (ko) 2010-03-31 2010-03-31 이미지 처리 방법 및 이를 이용한 촬영 장치

Country Status (2)

Country Link
US (1) US8681244B2 (ko)
KR (1) KR101294735B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101951630B1 (ko) 2018-10-11 2019-02-25 새한항업(주) 벡터기반의 보안처리 방법
KR102105028B1 (ko) 2018-11-15 2020-04-27 주식회사 아이에스피디 심도 예측을 이용한 아웃포커스 장치 및 방법

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102049080B1 (ko) 2013-03-28 2020-01-08 삼성전자주식회사 영상 처리 장치 및 방법
US9396409B2 (en) * 2014-09-29 2016-07-19 At&T Intellectual Property I, L.P. Object based image processing
CN106973280B (zh) * 2016-01-13 2019-04-16 深圳超多维科技有限公司 一种3d图像的处理方法和装置
CA3028710A1 (en) 2016-06-23 2017-12-28 Capital One Services, Llc Systems and methods for automated object recognition
KR102260193B1 (ko) * 2019-12-30 2021-06-03 주식회사 버넥트 3차원 공간에 대한 보안기능을 제공하는 증강현실 원격 통신방법 및 시스템
US11893668B2 (en) 2021-03-31 2024-02-06 Leica Camera Ag Imaging system and method for generating a final digital image via applying a profile to image information

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090014864A (ko) * 2007-08-07 2009-02-11 삼성테크윈 주식회사 디지털 영상 처리장치의 제어방법 및 그 장치
KR20090120314A (ko) * 2008-05-19 2009-11-24 삼성디지털이미징 주식회사 디지털 영상 처리 장치에서 영상의 배경흐림 효과 처리장치 및 방법

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020176113A1 (en) * 2000-09-21 2002-11-28 Edgar Albert D. Dynamic image correction and imaging systems
JP2002300386A (ja) * 2001-03-30 2002-10-11 Fuji Photo Film Co Ltd 画像処理方法
CN101297545B (zh) * 2005-10-28 2012-05-02 株式会社尼康 摄影装置、图像处理装置
US7990427B2 (en) * 2006-08-21 2011-08-02 Micron Technology, Inc. Method and apparatus for applying tonal correction to images
US8160381B2 (en) * 2006-08-30 2012-04-17 Micron Technology, Inc. Method and apparatus for image noise reduction using noise models
TR201810171T4 (tr) * 2006-10-03 2018-08-27 Vestel Elektronik Sanayi Ve Ticaret Anonim Sirketi Bir girdi görüntüsündeki halka şeklinde artefaktları en aza indirmek için yöntem ve aparat.
JP5349790B2 (ja) * 2007-11-16 2013-11-20 キヤノン株式会社 画像処理装置、画像処理方法、及びプログラム
TWI464706B (zh) * 2009-03-13 2014-12-11 Micro Star Int Co Ltd 以單張影像模擬高動態範圍之暗部曝光補償方法及其應用該方法的影像處理裝置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090014864A (ko) * 2007-08-07 2009-02-11 삼성테크윈 주식회사 디지털 영상 처리장치의 제어방법 및 그 장치
KR20090120314A (ko) * 2008-05-19 2009-11-24 삼성디지털이미징 주식회사 디지털 영상 처리 장치에서 영상의 배경흐림 효과 처리장치 및 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101951630B1 (ko) 2018-10-11 2019-02-25 새한항업(주) 벡터기반의 보안처리 방법
KR102105028B1 (ko) 2018-11-15 2020-04-27 주식회사 아이에스피디 심도 예측을 이용한 아웃포커스 장치 및 방법

Also Published As

Publication number Publication date
US8681244B2 (en) 2014-03-25
US20110242367A1 (en) 2011-10-06
KR20110109574A (ko) 2011-10-06

Similar Documents

Publication Publication Date Title
KR101294735B1 (ko) 이미지 처리 방법 및 이를 이용한 촬영 장치
JP5460173B2 (ja) 画像処理方法、画像処理装置、画像処理プログラム、撮像装置
US10194091B2 (en) Image capturing apparatus, control method therefor, program, and recording medium
KR101864059B1 (ko) 이동 단말 및 그 촬영 방법
EP2216987B1 (en) Image capturing apparatus and control method thereof
KR101427660B1 (ko) 디지털 영상 처리 장치에서 영상의 배경흐림 효과 처리장치 및 방법
US9148561B2 (en) Image capturing apparatus, executable autoexposure bracketing and control method thereof
KR101817657B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
KR102266649B1 (ko) 이미지 처리 방법 및 장치
JP5022105B2 (ja) カメラの表示制御装置及び方法
US8937677B2 (en) Digital photographing apparatus, method of controlling the same, and computer-readable medium
JP5412553B2 (ja) 視覚処理装置、視覚処理方法
WO2017045558A1 (zh) 景深调节方法、装置及终端
US20100103268A1 (en) Digital camera
CN110266954B (zh) 图像处理方法、装置、存储介质及电子设备
CN108156369B (zh) 图像处理方法和装置
WO2014146605A1 (en) Video frame processing method
JP4999871B2 (ja) 撮像装置およびその制御方法
JP2014155001A (ja) 画像処理装置及び画像処理方法
CN106878606B (zh) 一种基于电子设备的图像生成方法和电子设备
JP2011239267A (ja) 撮像装置及び画像処理装置
JP5335964B2 (ja) 撮像装置およびその制御方法
CN116266877A (zh) 图像处理设备和方法、摄像设备和计算机可读介质
JP2013179464A (ja) 電子カメラ
JP2020046475A (ja) 画像処理装置およびその制御方法

Legal Events

Date Code Title Description
A201 Request for examination
AMND Amendment
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20160728

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20180727

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20190730

Year of fee payment: 7