KR101411309B1 - 이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치 - Google Patents

이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치 Download PDF

Info

Publication number
KR101411309B1
KR101411309B1 KR1020070125765A KR20070125765A KR101411309B1 KR 101411309 B1 KR101411309 B1 KR 101411309B1 KR 1020070125765 A KR1020070125765 A KR 1020070125765A KR 20070125765 A KR20070125765 A KR 20070125765A KR 101411309 B1 KR101411309 B1 KR 101411309B1
Authority
KR
South Korea
Prior art keywords
image
pupil
area
color
eye
Prior art date
Application number
KR1020070125765A
Other languages
English (en)
Other versions
KR20090058950A (ko
Inventor
임근배
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020070125765A priority Critical patent/KR101411309B1/ko
Publication of KR20090058950A publication Critical patent/KR20090058950A/ko
Application granted granted Critical
Publication of KR101411309B1 publication Critical patent/KR101411309B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/193—Preprocessing; Feature extraction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G06V40/165—Detection; Localisation; Normalisation using facial parts and geometric relationships
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • G06V40/197—Matching; Classification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ophthalmology & Optometry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Signal Processing (AREA)
  • Geometry (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

본 발명은 촬영된 이미지에 포함된 눈(目)의 개폐 정도를 판단하여 이미지를 효율적으로 관리할 수 있는 디지털 이미지 처리 장치에 관한 것으로서, 얼굴인식 기술을 이용하여 이미지에 포함된 눈을 검출하는 눈 검출부; 상기 검출된 눈의 전체 면적에서 눈동자가 차지하는 면적의 비율을 계산하는 면적비율 계산부; 및 상기 면적 비율이 소정 값 이하인 이미지를 검출하는 눈깜박 이미지 검출부;를 포함하는 디지털 이미지 처리 장치를 제공한다.

Description

이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털 이미지 처리 장치{Digital image processing apparatus which can determine the eye's open-close rate comprised in image}
본 발명은 이미지에 포함된 눈의 개폐 정도를 판단하여 이미지를 효율적으로 관리할 수 있는 디지털 이미지 처리 장치에 관한 것이다.
최근에는 디지털 카메라를 포함하여, 카메라 모듈이 장착된 핸드폰, PDA(personal digital assistant)등과 같은 디지털 촬영 장치가 널리 보급되고 있다. 이러한 디지털 촬영 장치의 보급에 따라 그에 대한 활용도 단순히 사진을 촬영하는 기능에만 그치지 않고, PMP(potable multimedia player), MP3 플레이어, DMB(digital multimedia broadcasting)등 다양한 멀티미디어의 기능을 함께 수행하게 되었다.
촬영된 이미지를 저장하는 내장형 또는 내장형의 메모리 카드는 이미지를 저장하는, 위와 같은 기능의 다양화에 따라 이미지의 저장 공간뿐만 아니라 멀티 미디어로서의 기능을 수행하기 위한 기능에도 저장공간이 할당되어야 하기 때문에 점점 고용량화, 고집적화된 메모리 카드가 필요하게 된다.
그러나 촬영하는 이미지가 많아지면 촬영된 이미지를 저장할 수 있는 공간이 부족하므로, 아무리 메모리 카드의 용량이 커지고 고집적화 된다 하더라도 보다 효율적인 이미지 관리를 위한 방법이 항상 모색되어야 할 필요가 있다.
본 발명은 상기와 같은 문제점을 포함하여 여러 문제점들을 해결하기 위한 것으로서, 이미지에 포함된 눈의 개폐 정도를 판단함으로써 이미지를 효율적으로 관리할 수 있는 디지털 이미지 처리 장치를 제공하는 것을 목적으로 한다.
본 발명은 촬영된 이미지에 포함된 눈(目)의 개폐 정도를 판단할 수 있는 디지털 이미지 처리 장치를 제공한다.
또한 본 발명의 다른 특징에 의하면, 상기 눈의 개폐 정도는, 상기 눈의 윤곽에 따른 전체 눈의 면적에서 홍채와 동공을 포함하는 눈동자가 차지하는 면적의 비율로 결정될 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 면적의 비율은, 상기 눈의 윤곽에 따른 전체 눈의 면적에서 상기 눈동자의 색이 차지하는 색 면적의 비율로 결정될 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 디지털 이미지 처리 장치는, 상기 색 면적 비율이 소정 값 이하인 눈을 포함하는 이미지를 자동 삭제할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 디지털 이미지 처리 장치는, 상기 색 면적 비율이 소정 값 이하인 눈을 포함하는 이미지를 분류하여 표시하는 표시수단을 더 포함할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 디지털 이미지 처리 장치는, 상기 표시수단에 표시된 이미지들 가운데 사용자가 선택적으로 이미지를 삭제할 수 있다.
또한 본 발명은, 얼굴인식 기술을 이용하여 이미지에 포함된 눈을 검출하는 눈 검출부; 상기 검출된 눈의 전체 면적에서 눈동자가 차지하는 면적의 비율을 계산하는 면적비율 계산부; 및 상기 면적 비율이 소정 값 이하인 이미지를 검출하는 눈깜박 이미지 검출부;를 포함하는 디지털 이미지 처리 장치를 제공한다.
또한 본 발명의 다른 특징에 의하면, 상기 면적 비율 계산부는, 상기 검출된 눈의 전체 면적에서 상기 눈동자가 차지하는 색의 면적 비율을 계산할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 디지털 이미지 처리 장치는, 상기 면적 비율이 소정 값 이하인 이미지를 삭제하는 눈깜박 이미지 삭제부를 더 포함할 수 있다.
본 발명의 또 다른 특징에 의하면, 상기 눈깜박 이미지 삭제부는, 소정의 촬영 경과 시간이 초과 된 이미지를 삭제할 수 있다.
상기한 바와 같이 이루어진 본 발명의 디지털 이미지 처리 장치에 의하면, 촬영된 이미지에 포함된 눈의 전체 면적에서 눈동자가 차지하는 면적 비율을 계산하여, 눈을 감고 있거나 감으려는 불필요한 이미지들을 효율적으로 검출할 수 있고, 이러한 검출된 이미지들을 저장장치로부터 삭제할 수 있어 저장 공간을 효율적으로 사용할 수 있다.
이하, 첨부된 도면을 참조하여 본 발명에 따른 바람직한 실시예들을 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 디지털 이미지 처리 장치의 구성을 개략적으로 도시한 도면이다. 본 실시예에 따른 디지털 영상 처리 장치는 디지털 카메라를 포함하여, 카메라 모듈이 장착된 핸드폰, PDA 등과 같은 다양한 영상 처리 장치들에 적용될 수 있으나, 본 실시예에서는 디지털 카메라를 예로써 설명할 것이다. 또한 디지털 카메라의 경우에도 도면에 도시된 콤펙트 디지털 카메라뿐만 아니라 일안반사식(Single Lense Reflex: SLR) 카메라에도 본 발명이 적용될 수 있음은 물론이다.
영상을 촬영하고 영상 파일을 생성하고 저장하는 디지털 카메라(100)는 셔터-릴리즈 버튼(11), 전원 버튼(13), 광각(Wide angle)-줌(zoon) 버튼(15w), 망원(Telephoto)-줌(zoom)(15t), 기능버튼(17), 및 디스플레이부(19) 등을 포함한다.
셔터-릴리즈 버튼(11)은 정해진 시간 동안 CCD(charge-coupled device)나 CMOS(complementary metal-oxide semiconductor)를 빛에 노출시키기 위해 열리고 닫히며, 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 CCD에 영상을 기록한다.
전원버튼(13)은 이미지 처리장치에 전원을 공급하여 동작시키기 위해 입력된다.
광각-줌 버튼(15w) 또는 망원-줌(15t)은 입력에 따라 화각이 넓어지거나, 화각이 좁아지는데, 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 입력한다. 광각-줌 버튼(15w)이 입력되면, 선택된 노출영역의 크기가 작아지고, 망원-줌 버튼(15t)이 입력되면, 선택된 노출영역의 크기가 커진다.
기능버튼(17)은 상향버튼, 하향 버튼, 좌향버튼, 우향버튼 및 메뉴/OK버튼을 포함하여 총 5개의 버튼을 포함한다. 기능버튼(17)은 디지털 영상 처리 장치(100)의 동작에 관한 각종 메뉴를 실행시키기 위해 입력되며, 상기 각 키들은 단축키로써도 이용될 수 있다.
도 2는 본 실시예에 따른 디지털 이미지 처리 장치의 구성을 나타내는 블록도로서, 전원부(110), 사용자 입력부(120), 촬영부(130), 이미지 처리부(140), 저장부(150), 표시부(160) 및 제어부(170)를 포함한다.
전원부(110)는 디지털 이미지 처리 장치(100)에 전원을 공급하여 이를 동작시키거나, 디지털 영상 처리 장치(100)로부터 전원을 차단하여 이를 정지시킨다.
사용자 입력부(120)는 사용자의 조작에 의해 디지털 카메라의 각종 동작을 제어하는 신호를 입력하는 것으로서, 셔터-릴리즈 버튼(11, 이하 도 1 참조), 전원버튼(13), 광각-줌 버튼(15w) 또는 망원-줌 버튼(15t) 및 기능 버튼(17) 등을 포함한다.
촬영부(130)는 피사체의 이미지에 대한 광 신호를 전기 신호로 변환하는 것으로, 렌즈부(미도시) 및 필터부(미도시)로 이루어진 광학계와 이미지 센서(미도시)를 포함한다. 렌즈부는 줌 렌즈, 포커스 렌즈 및 보상 렌즈를 포함할 수 있다. CCD 또는 CMOS와 같은 이미지 센서(미도시)는 렌즈부를 통하여 입력되는 광량을 축적하고 그 축적된 광량에 따라 렌즈부에서 촬영된 이미지를 수직 동기신호에 맞추 어 출력한다. 디지털 영상 처리 장치의 영상 획득은 피사체로부터 반사되어 나오는 빛을 전기적인 신호로 변환시켜 주는 CCD와 같은 이미지 센서에 의해 이루어진다. 이미지 센서를 이용하여 컬러 이미지를 얻기 위해서는 컬러 필터를 필요로 하며, 대부분 CFA(Color filter array)라는 필터(미도시)를 채용하고 있다. CFA는 한 픽셀마다 한 가지 컬러를 나타내는 빛만을 통과시키며 규칙적으로 배열된 구조를 가지며, 배열 구조에 따라 여러 가지 형태를 가진다.
이미지 센서(미도시)로부터 출력되는 아날로그 이미지 신호는 A/D 변환부(Anolog-to-Digtal Converter, 미도시)에 의해 디지털 신호로 변환하고, 이 디지털 이미지 신호는 촬영된 이미지 파일의 원본(RAW) 데이터가 된다.
이미지 처리부(140)는 디지털 변환된 RAW 데이터를 디스플레이 가능하도록 신호 처리하는 곳으로, 온도변화에 민감한 CCD 및 CFA 필터에서 발생하는 암 전류에 의한 블랙 레벨(Black level)을 제거한다. 또한, 인간 시각의 비선형성에 맞추어 정보를 부호화하는 감마 보정을 행하고, 감마 보정된 소정 데이터의 RGRG라인 및 GBGB 라인으로 구현된 베이어 패턴을 RGB 라인으로 보간 하는 CFA 보간을 행한다. 또한 보간 된 RGB 신호를 YUV 신호로 변환하고 고 대역 필터에 의해 Y 신호를 필터링 하여 영상을 뚜렷하게 처리하는 에지 보상, 및 표준 컬러 좌표계를 이용하여 U, V 신호의 컬러 값을 정정하고 노이즈를 제거하고, 노이즈가 제거된 Y, U, V 신호를 압축 및 신호 처리하여 JPEG 파일 등과 같은 영상 파일을 생성한다.
생성된 영상 파일은 사용자 설정에 따른 등급 분류에 따라 메모리 카드와 같은 저장부(150)에 저장되거나 표시부(160)에 디스플레이된다.
저장부는(150)는 이미지 파일을 최종적으로 저장하는 공간으로서, 스마트 카드, 컴팩트 플래쉬(Compact flash, CF) 메모리, 메모리 스틱, SD(secure digital) 메모리 카드 등 다양한 규격의 메모리 카드를 구비할 수 있다.
또한, 본 발명에 사용되는 디지털 이미지 처리 장치는 전술한 이미지 파일을 저장하는 메모리 카드(150)뿐만 아니라, 디지털 카메라 프로세서의 동작에 필요한 알고리즘이 저장되는 EEPROM(Electrically Erasable and Programmable Read Only Memory) 및 디지털 카메라 프로세서의 동작에 필요한 설정 데이터가 저장되는 플래시 메모리(flash memory) 등을 더 포함할 수 있음은 물론이다.
이와 같은 영상 처리부(140)의 모든 동작은 제어부(170)의 제어하에 동작한다. 제어부(170)는 촬영된 이미지에서 얼굴인식 기술을 이용하여 눈(目)을 검출하고, 이미지에 포함된 눈의 전체 면적에서 눈동자가 차지하는 면적 비율을 계산하여, 소정 면적 비율을 갖는 이미지들을 검출하고 저장부로부터 삭제한다. 이를 위해, 제어부(170)는 눈 검출부(171), 면적비율 계산부(172), 눈깜박 이미지 검출부(173) 및 눈깜박 이미지 삭제부(174) 등을 포함한다.
눈(目) 검출부(171)는 얼굴인식 기술을 이용하여 촬영된 이미지에 눈이 포함되어 있는지 여부를 검출한다.
이와 같이 얼굴인식 기술을 이용하여 촬영된 이미지로부터 눈을 검출하기 위하여, 선형변환물을 통해 공분산 행렬의 행렬식이 최대가 되도록 하는 PCA(principal component analysis)기반의 Eigenface 방법, 동일 클래스에 속하는 데이터는 모여있고 다른 클래스에 속하는 데이터는 서로 멀리 떨어져 있는 공간으 로의 변환을 구하는 FLD(fisher's linear discriminant) 기반의 Fisher face 방법 등 다양한 얼굴 인식 방법이 사용될 수 있다.
면적비율 계산부(172)는 이미지에 포함된 눈의 개폐 정도를 판단하기 위하여, 검출된 눈의 윤곽에 따른 전체 눈의 면적에서 눈동자가 차지하는 면적의 비율을 계산한다. 여기서 눈동자는 홍채와 동공을 포함하는 개념이다.
인물이 포함된 사진의 경우 일반적으로 피사체는 정면을 향하여 눈을 크게 뜬 상태에서 사진을 찍으나, 가끔은 눈을 감고 있거나 감으려는 순간에 사진이 찍히는 경우가 있다. 눈을 제대로 크게 뜨고 있는 경우의 사진에 비해, 눈을 감고 있거나 감으려는 순간에 찍힌 사진의 경우, 전체 눈의 면적에 대한 눈동자의 면적이 적다.
이때, 눈의 흰자위와 눈동자가 서로 다른 색을 가지는 특성을 이용하여 전체 눈에 대한 눈동자의 면적비율을 계산할 수 있다. 예컨대 홍채와 동공을 제외한 눈의 여백부분(흰자위 부분)은 보통 흰색 계통임에 비하여, 홍채와 동공을 포함한 눈동자는 유색을 띠고 있다. 이러한 눈동자의 색은 인종에 따라 검정색, 갈색, 파란색, 초록색 등 다양한 색을 가질 수 있다. 따라서 면적비율 계산부(172)는 이러한 눈동자 부분이 갖는 색의 면적의 눈의 흰자위 부분이 갖는 흰색의 면적에 대한 비율을 판단하여 눈의 개폐 여부를 결정한다.
눈깜박 이미지 검출부(173)는 면적비율 계산부(172)가 계산한 값에 기초하여 촬영된 이미지들 가운데 눈을 감고 있거나 감으려는 이미지를 검출한다. 여기서 "눈깜박 이미지"라는 용어는 눈을 감고 있거나 감으려는 이미지를 나타내는 것이며, 더욱 정밀하게는 전체 눈의 면적에서 눈동자의 면적이 차지하는 면적비율이 소정 값 이하인 이미지를 나타낸다. 또한 이하에서 "눈을 깜박인다"는 용어는 눈을 감고 있는 상태 및/또는 눈을 감으려는 상태를 나타내기 위하여 사용된다.
면적비율 계산부(172)에 의해 도출된 전체 눈의 면적 대비 눈동자의 면적의 비율이, 사용자가 설정하거나 또는 미리 프로그램으로 정해진 소정 값 이하의 값일 경우에는, 눈깜박 이미지 검출부(173)는 이러한 이미지를 눈을 깜박이는 이미지로 판단하여 검출한다. 여기서 눈을 깜박이는 이미지로 판단하기 위한 기준인 소정 값으로는, 예를 들어 눈을 감지않고 제대로 촬영한 사진의 경우 일반적으로 눈 전체 면적에 대한 눈동자의 면적 비율이 50 이상인 경우를 감안하여, 상기 소정 값이 50 이하인 이미지들을 검출할 수 있다. 물론 상기 소정 값은 하나의 예시에 불과하며 사용자의 설정에 의해 또는 프로그램에 의해 원하는 값으로 변경 가능함은 물론이다.
도 3 및 도 4를 참조하여 상술한 내용을 보다 구체적으로 설명한다. 도 3은 촬영된 이미지로부터 눈이 검출되는 단계를 개략적으로 도시한 개념도이고, 도 4는 전체 눈의 면적에 대한 눈동자의 면적 비율을 계산하는 단계를 개략적으로 도시한 개념도이다.
도 3을 참조하면, 먼저 눈 검출부(171)는 촬영된 이미지로부터 전술한 다양한 방법을 사용하여 눈 부분(Ⅳ)을 검출한다.
도 4는 도 3의 눈 부분(Ⅳ)을 확대한 도면으로, 눈의 윤곽을 따라 전체 눈은 홍채(a1)와 동공(a2)를 포함한 눈동자(A)와, 눈동자(A)를 제외한 눈의 흰자위(B) 부분으로 구성되어 있다.
면적비율 계산부(172)는 눈의 흰자위 부분(B)의 면적과 눈동자 부분(A)의 면적을 이용하여 전체 눈의 면적(A+B)에 대한 눈동자 부분(A)의 면적의 비를 계산한다. 이때 눈의 흰자위 부분(B)과 눈동자 부분(A)이 갖는 색을 분석하여 각 부분의 색의 면적을 이용하여 상술한 면적비율을 계산할 수 있다. 여기서 눈의 흰자위 부분(B)은 반드시 색좌표의 중앙에 오는 R G B 값을 가져야만 하는 것은 아니며, 관측자에게 흰색 계통이라는 인식을 줄 수 있을 정도로 색좌표의 소정 범위 내에 포함되는 R G B 값을 가지는 것이라면 무방하다. 또한, 눈동자 부분(A)이 갖는 색은 상술한 바와 같이 인종에 따라 검정색, 갈색, 파란색, 초록색 등 다양한 색을 가질 수 있기 때문에, 관측자에게 눈동자 부분의 색이 눈의 흰자위 부분(B)이 갖는 흰색 계통과 구별되는 유색을 갖는 것임을 인식할 수 있는 정도로 색좌표의 소정 범위 내에 포함되는 R G B 값을 가지는 것이라면 무방하다.
위와 같이 면적비율 계산부(172)에 의해 계산된 면적 비율의 결과치가 사전 설정된 소정 값 이하, 예를 들어 50 이하가 될 경우, 눈깜박 이미지 검출부(173)는 눈을 감고 있거나 감으려는 이미지로 판단한다. 한편, 눈을 깜박이는 이미지로 판단된 이미지는 눈깜박 이미지 삭제부(174)에 의해 자동으로 표시되거나, 표시부(160)에 표시된 후 사용자가 선택적으로 이미지를 삭제할 수 있다.
도 5는 눈깜박 이미지 검출부에 의해 면적 비율이 소정 값 이하인 이미지들이 표시부에 표시된 것이다.
예를 들어, 면적비율 검출부(172)에 의해 면적 비율이 50 이하인 이미지가 4 장 검출되었다고 가정한다. 이 이미지들 가운데는 실수로 눈을 감고 있는 상태에서 촬영된 이미지(P1)나 눈을 감으려는 순간에 촬영된 이미지(P3)도 있지만, 웃고 있는 이미지(P2)이나 윙크하는 이미지(P4) 등도 포함될 수 있다. 웃고 있는 이미지나 윙크하는 이미지는 사용자가 삭제를 원하지 않을 수 있다. 따라서 눈깜박 이미지 삭제부(174)가 면적비율이 소정 값 이하인 이미지들을 자동 삭제하는 경우에는 이미지들을 신속하게 삭제함으로써 저장공간이 부족할 경우 불필요한 이미지들을 신속하게 저장할 수 있지만, 상술한 바와 같이 이미지를 선택적으로 삭제함으로써 웃는 얼굴이나 윙크하는 얼굴 등을 포함한 사용자가 삭제를 원하지 않는 이미지들이 삭제되는 것을 방지할 수 있다.
상기 도면에 예시된 사진들(P1, P2, P3, P4)에는 한 사람의 얼굴만 포함되어 있는 것이지만, 이는 일 예시이며 복수의 인물이 포함된 경우에도 본 발명이 적용될 수 있음은 물론이다.
도 6은 본 실시예를 포함하여 촬영된 이미지들 가운데 사용자가 삭제하기를 원하는 이미지들의 종류를 선택하는 방법이 도시되어 있다. 상기 도면을 참조하며, 사용자는 눈 깜박임 이미지 검색 메뉴(6A), 촬영 시간이 소정 시간 경과된 이미지 검색 메뉴(6B), 및 초점이 맞지 않는 이미지 검색 메뉴(6C)가 표시부에 표시되어 있다. 즉, 사용자는 본 실시예에 따른 눈 깜박임 이미지뿐만 아니라, 저장공간을 불필요하게 차지하고 있는 촬영 시간이 오래된 이미지들이나 초점이 맞지 않는 이미지 등도 함께 검색하여 저장부로부터 삭제할 수 있다.
상술한 본 발명에 따른 디지털 이미지 처리 장치에 의하면, 촬영된 이미지 에 포함된 눈의 전체 면적에서 눈동자가 차지하는 면적 비율을 계산하여, 눈을 감고 있거나 감으려는 불필요한 이미지들을 효율적으로 검출할 수 있고, 이러한 검출된 이미지들을 저장장치로부터 삭제할 수 있어 저장 공간을 효율적으로 사용할 수 있다.
또한, 본 발명에 따른 디지털 이미지 처리 장치는 전술한 이미지 촬영 장치에 한정되지 않으며, 개인용 컴퓨터, 전자 앨범, 디지털 액자, 및 키오스크 등과 같이 이미지를 저장하고 재생할 수 있는 장치라면 명칭에 한정되지 않고 다양하게 적용가능하다.
본 발명은 상술한 실시예를 참고로 설명되었으나 이는 예시적인 것에 불과하며, 당해 기술 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 다른 실시예가 가능하다는 점을 이해할 것이다. 따라서 본 발명의 진정한 기술적 보호 범위는 첨부된 특허청구범위에 의해 정해져야 할 것이다
도 1은 본 발명의 일 실시예에 따른 디지털 이미지 처리 장치의 구성을 개략적으로 도시한 도면이다.
도 2는 본 실시예에 따른 디지털 이미지 처리 장치의 구성을 나타내는 블록도이다.
도 3은 촬영된 이미지로부터 눈이 검출되는 단계를 나타내는 개략적인 개념도이다.
도 4는 전체 눈의 면적에 대한 눈동자의 면적 비율을 계산하는 단계를 나타내는 개략적인 개념도이다.
도 5는 눈깜박 이미지 검출부에 의해 검출된, 면적 비율이 소정 값 이하인 이미지들이 표시부에 표시된 것이다.
도 6은 본 실시예가 적용되는 다양한 이미지 검색 방법이 도시되어 있다.

Claims (10)

  1. 촬영된 이미지에 포함된 눈(目)의 개폐 정도를 판단할 수 있고,
    상기 눈의 개폐 정도는, 상기 눈의 윤곽에 따른 전체 눈의 면적에서 홍채와 동공을 포함하는 눈동자가 차지하는 면적의 비율로 결정되며,
    상기 면적의 비율은, 상기 눈의 윤곽에 따른 전체 눈의 면적에서 상기 눈동자의 색이 차지하는 상기 눈동자의 색의 면적의 비율로 결정되고,
    상기 눈동자의 색은 인종의 눈동자가 갖는 색상에 따라 미리 정해진 검정색, 갈색, 파란색, 초록색을 포함하는 유색이며,
    상기 눈동자의 색의 면적의 비율이 50이하인 이미지를 눈을 감고 있거나 눈을 감으려는 이미지로 판단하는 디지털 이미지 처리 장치.
  2. 삭제
  3. 삭제
  4. 제1항에 있어서,
    상기 디지털 이미지 처리 장치는, 상기 눈동자의 색의 면적 비율이 50 이하인 눈을 포함하는 이미지를 자동 삭제하는 것을 특징으로 하는 디지털 이미지 처리 장치.
  5. 제1항에 있어서,
    상기 디지털 이미지 처리 장치는, 상기 눈동자의 색의 면적 비율이 50 이하인 눈을 포함하는 이미지를 분류하여 표시하는 표시수단을 더 포함하는 것을 특징으로 하는 디지털 이미지 처리 장치.
  6. 제5항에 있어서,
    상기 디지털 이미지 처리 장치는, 상기 표시수단에 표시된 이미지들 가운데 사용자가 선택적으로 이미지를 삭제할 수 있는 것을 특징으로 하는 디지털 이미지 처리 장치.
  7. 얼굴인식 기술을 이용하여 이미지에 포함된 눈을 검출하는 눈 검출부;
    상기 검출된 눈의 전체 면적에서 눈동자가 차지하는 눈동자의 색의 면적의 비율을 계산하는 면적비율 계산부; 및
    상기 눈동자의 색의 면적의 비율이 50 이하인 이미지를 눈을 감고 있거나 눈을 감으려는 이미지로 판단하여 눈깜박 이미지를 검출하는 눈깜박 이미지 검출부;를 포함하고,
    상기 면적비율 계산부가 상기 눈동자의 색의 면적 비율을 계산할 때의 상기 눈동자의 색은 인종의 눈동자가 갖는 색상에 따라 미리 정해진 검정색, 갈색, 파란색, 초록색을 포함하는 유색인, 디지털 이미지 처리 장치.
  8. 삭제
  9. 제7항에 있어서,
    상기 디지털 이미지 처리 장치는, 상기 눈동자의 색의 면적 비율이 50 이하인 이미지를 삭제하는 눈깜박 이미지 삭제부를 더 포함하는 것을 특징으로 하는 디지털 이미지 처리 장치.
  10. 제9항에 있어서,
    상기 눈깜박 이미지 삭제부는, 소정의 촬영 경과 시간이 초과 된 이미지를 삭제하는 것을 특징으로 하는 디지털 이미지 처리 장치.
KR1020070125765A 2007-12-05 2007-12-05 이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치 KR101411309B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020070125765A KR101411309B1 (ko) 2007-12-05 2007-12-05 이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020070125765A KR101411309B1 (ko) 2007-12-05 2007-12-05 이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치

Publications (2)

Publication Number Publication Date
KR20090058950A KR20090058950A (ko) 2009-06-10
KR101411309B1 true KR101411309B1 (ko) 2014-06-25

Family

ID=40989243

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020070125765A KR101411309B1 (ko) 2007-12-05 2007-12-05 이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치

Country Status (1)

Country Link
KR (1) KR101411309B1 (ko)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001211377A (ja) 2000-01-26 2001-08-03 Fuji Photo Film Co Ltd デジタルカメラ
JP2006163496A (ja) 2004-12-02 2006-06-22 Fuji Photo Film Co Ltd 画像記録装置、画像記録方法及び画像記録プログラム
JP2006254229A (ja) 2005-03-11 2006-09-21 Fuji Photo Film Co Ltd 撮像装置、撮像方法及び撮像プログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001211377A (ja) 2000-01-26 2001-08-03 Fuji Photo Film Co Ltd デジタルカメラ
JP2006163496A (ja) 2004-12-02 2006-06-22 Fuji Photo Film Co Ltd 画像記録装置、画像記録方法及び画像記録プログラム
JP2006254229A (ja) 2005-03-11 2006-09-21 Fuji Photo Film Co Ltd 撮像装置、撮像方法及び撮像プログラム

Also Published As

Publication number Publication date
KR20090058950A (ko) 2009-06-10

Similar Documents

Publication Publication Date Title
US8786760B2 (en) Digital photographing apparatus and method using face recognition function
CN101860644B (zh) 图像处理设备
US8395694B2 (en) Apparatus and method for blurring image background in digital image processing device
JP4126721B2 (ja) 顔領域抽出方法及び装置
JP2015122670A (ja) 撮像装置及び制御方法、プログラム、並びに記憶媒体
US8902344B2 (en) Display control apparatus, image capture apparatus, display control method, and image capture apparatus control method
KR20100013701A (ko) 사람 수 체크를 이용한 셀프타이머 촬영 장치 및 방법
KR101822458B1 (ko) 썸네일 이미지 제공 방법 및 이를 적용한 영상 촬영 장치
KR20100042916A (ko) 디지털 영상 처리기에서 얼굴 영상 개선 장치 및 방법
KR20090067915A (ko) 구도 추천에 의한 영상 촬영 장치 및 방법
KR20100003918A (ko) 사용자 식별이 가능한 디지털 영상 촬영 장치 및 방법
KR101411309B1 (ko) 이미지에 포함된 눈의 개폐 정도를 판단할 수 있는 디지털이미지 처리 장치
JP2005323014A (ja) デジタルカメラ
JP2009252069A (ja) 画像処理装置、撮像装置、画像処理方法及びプログラム
KR101421939B1 (ko) 얼굴인식 기능을 이용한 디지털 영상 처리 장치 및 방법
JP2015095082A (ja) 画像表示装置、その制御方法、および制御プログラム
KR20090089070A (ko) 포토 프레임을 이용하는 디지털 카메라 및 그 제어 방법
KR20090105374A (ko) 디지털 영상 처리기에서 썸네일 영상 생성 장치 및 방법
KR101336239B1 (ko) 촬영한 영상에서 오토 포커스 영역의 변경이 가능한 디지털영상 처리 장치 및 그의 동작 방법
KR101417807B1 (ko) 디지털 영상 처리 장치에서 얼굴인식에 따른 포커스조정장치 및 방법
KR101445610B1 (ko) 디지털 영상 촬영 장치, 그 제어 방법 및 이를 실행시키기위한 프로그램을 저장한 기록매체
KR20100013702A (ko) 후보정 ａｗｂ를 수행하는 디지털 영상 처리 장치 및 그동작 방법
KR101417818B1 (ko) 디지털 영상 처리기에서 장면 인식 장치 및 방법
KR20100013867A (ko) 디지털 영상 처리기에서 영상 분류/검색 장치 및 방법
KR101446941B1 (ko) 고속 촬영 시에 영상을 저장하는 장치 및 방법

Legal Events

Date Code Title Description
N231 Notification of change of applicant
N231 Notification of change of applicant
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee