KR101396335B1 - Apparatus and method for detecting face - Google Patents
Apparatus and method for detecting face Download PDFInfo
- Publication number
- KR101396335B1 KR101396335B1 KR1020070097382A KR20070097382A KR101396335B1 KR 101396335 B1 KR101396335 B1 KR 101396335B1 KR 1020070097382 A KR1020070097382 A KR 1020070097382A KR 20070097382 A KR20070097382 A KR 20070097382A KR 101396335 B1 KR101396335 B1 KR 101396335B1
- Authority
- KR
- South Korea
- Prior art keywords
- digital
- zoom
- image
- face recognition
- processing apparatus
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
- H04N25/70—SSIS architectures; Circuits associated therewith
- H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Image Processing (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
본 발명은 디지털 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 디지털 줌 시에 얼굴 인식 기능을 제공하여 원거리에서 피사체의 얼굴을 인식할 수 있도록 하는 얼굴 인식 장치 및 방법에 관한 것이다. 얼굴 인식 장치는 렌즈 조합에 의한 움직임으로 초점 거리를 조정하여 영상을 확대하는 광학 줌 기능 및 CCD에서 영상을 확대하는 디지털 줌 기능을 제공하는 디지털 영상 처리장치로서, 디지털 줌 모드 진입 시에, 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 통하여 줌 영역을 얼굴 인식영역으로 이동시키고, 이동된 줌 영역을 중심으로 디지털 줌을 수행하는 디지털 신호 처리수단을 포함한다.
얼굴인식, 디지털줌
BACKGROUND OF THE INVENTION 1. Field of the Invention [0002] The present invention relates to a digital image processing apparatus and method, and more particularly, to a face recognition apparatus and method for providing a face recognition function during a digital zoom so that a face of a subject can be recognized from a long distance. The face recognition apparatus is a digital image processing apparatus that provides an optical zoom function for enlarging an image by adjusting a focal distance by a movement of a lens combination, and a digital zoom function for enlarging an image from a CCD. When entering the digital zoom mode, And a digital signal processing means for moving the zoom region to the face recognition region through face recognition of the enlarged image and performing digital zoom around the moved zoom region.
Face Recognition, Digital Zoom
Description
본 발명은 디지털 영상 처리 장치 및 방법에 관한 것으로, 보다 상세하게는 디지털 줌 시에 얼굴 인식 기능을 제공하여 원거리에서 피사체의 얼굴을 인식할 수 있도록 하는 얼굴 인식 장치 및 방법에 관한 것이다.BACKGROUND OF THE
일반적인 디지털 영상 처리 장치에는 줌 기능이 구비되어 있어, 멀리 있는 피사체를 마치 가까이에서 찍는 것과 같이 확대시켜 촬영할 때 사용하고 있다.A typical digital image processing apparatus is equipped with a zoom function, and is used when a distant subject is enlarged and photographed close to the subject.
이와 같은 줌 기능은 일반적으로 광학 줌(optical zoon)과 디지털 줌(digital zoon)으로 구분된다. Such a zoom function is generally divided into an optical zoom and a digital zoom.
광학 줌은 줌 렌즈를 조작하여 초점 거리를 줄여서 피사체를 확대하여 디스플레이 한다. 광학적 줌렌즈는 모터의 구동에 의해 렌즈를 이동시키므로, 빠른 속도로 렌즈를 이동시킬 수 없고, 고배율의 렌즈제작에 한계가 있으며, 렌즈의 고배율에 따라 채용세트의 부피와 중량이 늘어나게 되어 디지털 영상 처리 장치의 제작비용이 상승하게 되므로 일정배율이상으로 피사체를 확대시켜 촬영할 수 없다.The optical zoom operates the zoom lens to reduce the focal distance, thereby enlarging and displaying the subject. Since the optical zoom lens moves the lens by driving the motor, the lens can not be moved at a high speed, there is a limit to the production of a lens having a high magnification, and the volume and weight of the employed set increases according to the high magnification of the lens. So that the subject can not be enlarged beyond a certain magnification.
이와 같은 광학적인 줌렌즈의 한계를 극복하기 위해, 탄생된 것이 디지털 줌으로서, 디지털 줌은 모터에 의해 렌즈를 이동시키지 않고, CCD가 감지한 한 화면 에서 일정 윈도우를 확대시키는 기술로서, 초점거리를 바꿀 수 없는 단 초점 렌즈에서도 디지탈 줌의 사용이 가능하다. 디지탈 줌은 멀리 있는 피사체를 가까이 보거나 확대할 수 있는 장점이 있지만 디지탈 줌의 특성상 본래의 이미지에 비해 해상도가 많이 떨어지는 단점이 있다. In order to overcome the limitations of optical zoom lens, digital zoom is born. Digital zoom is a technology to enlarge a certain window on a screen detected by CCD without moving lens by motor. It is possible to use digital zoom even in short focus lens which can not be used. Digital zoom has the advantage of being able to zoom in or zoom out of a distant subject, but it has the disadvantage that the resolution is much lower than the original image due to the nature of the digital zoom.
얼굴 인식 기능이 구비된 디지털 영상 처리 장치에서는 디지털 줌 진입을 막아서 디지털 줌 시에 얼굴 인식 기능을 제공하지 않는다. 하지만, 원거리에 있는 피사체의 얼굴을 인식하고자 할 경우 사용자로 하여금 불편함을 느끼게 한다.A digital image processing apparatus equipped with a face recognition function prevents a digital zoom entry and does not provide a face recognition function in digital zooming. However, when the user wants to recognize a face of a subject at a distance, the user feels uncomfortable.
본 발명이 이루고자 하는 기술적인 과제는 디지털 줌 시에 얼굴 인식 기능을 제공하여 원거리에서 피사체의 얼굴을 인식할 수 있도록 하는 얼굴 인식 장치 및 방법을 제공하는데 있다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a face recognition device and a method for recognizing a face of a subject at a long distance by providing a face recognition function during digital zooming.
본 발명이 이루고자 하는 기술적인 과제를 해결하기 위한 얼굴 인식 장치는 렌즈 조합에 의한 움직임으로 초점 거리를 조정하여 영상을 확대하는 광학 줌 기능 및 CCD에서 영상을 확대하는 디지털 줌 기능을 제공하는 디지털 영상 처리장치로서, 상기 디지털 줌 모드 진입 시에, 상기 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 통하여 줌 영역을 얼굴 인식영역으로 이동시키고, 상기 이동된 줌 영역을 중심으로 디지털 줌을 수행하는 디지털 신호 처리수단을 포함하는 것이 바람직하다.According to an aspect of the present invention, there is provided a face recognition apparatus comprising: an optical zooming function for enlarging an image by adjusting a focal distance by movement of a lens combination; and a digital image processing And a digital zooming unit for moving the zooming region to the face recognition region through the face recognition of the enlarged image at the last stage of the optical zooming and moving the zooming region around the moved zooming region, And a signal processing means.
본 발명에 있어서, 상기 디지털 신호 처리수단은 상기 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 수행하여 얼굴위치 정보를 생성하는 얼굴 인식부; 상기 생성된 얼굴위치를 중심으로 줌 영역을 이동시키는 줌 영역 이동부; 및 상기 이동된 줌 영역을 중심으로 상기 영상의 크기를 확대하는 영상 크기 조정부를 포함하는 것을 특징으로 한다.In the present invention, the digital signal processing means may include a face recognition unit for performing face recognition of an enlarged image at a final stage of the optical zoom to generate face position information; A zoom area moving unit moving a zoom area around the generated face position; And an image size adjusting unit for enlarging the size of the image around the moved zoom area.
본 발명에 있어서, 상기 영상 크기 조정부는 상기 디지털 줌 수행시에, 상기 얼굴 인식부에서 생성한 얼굴위치와 디지털 줌 배율을 곱하여 상기 영상의 크기를 조정하는 것을 특징으로 한다.In the present invention, the image size adjusting unit adjusts the size of the image by multiplying the face position generated by the face recognizing unit by a digital zoom magnification at the digital zooming.
본 발명에 있어서, 상기 디지털 신호 처리 수단은 상기 이동한 줌 영역의 위치가 기 저장된 줌 영역의 위치와 일치하도록 상기 디지털 영상 처리 장치의 이동을 유도하는 식별정보를 디스플레이 하는 것을 특징으로 한다.In the present invention, the digital signal processing means displays identification information for guiding movement of the digital image processing apparatus so that the position of the moved zoom region coincides with the position of the previously stored zoom region.
본 발명이 이루고자 하는 기술적인 과제를 해결하기 위한 얼굴 인식 방법은 렌즈 조합에 의한 움직임으로 초점 거리를 조정하여 영상을 확대하는 광학 줌 기능 및 CCD에서 영상을 확대하는 디지털 줌 기능을 제공하는 디지털 영상 처리장치의 동작 방법으로서, (a) 상기 광학 줌 수행 후, 상기 디지털 줌 모드 진입 시에, 상기 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 수행하여 얼굴위치 정보를 생성하는 단계; (b) 상기 생성된 얼굴위치를 중심으로 줌 영역을 이동시키는 단계; 및 (c) 상기 이동된 줌 영역을 중심으로 상기 영상의 크기를 확대하는 단계를 포함하는 것이 바람직하다.A face recognition method for solving the technical problem to be accomplished by the present invention includes an optical zoom function for enlarging an image by adjusting a focal distance by movement by lens combination and a digital image processing for providing a digital zoom function for enlarging an image in a CCD A method of operating an apparatus, the method comprising: (a) generating face position information by performing face recognition of an image magnified at a final stage of the optical zoom at the time of entering the digital zoom mode after performing the optical zoom; (b) moving a zoom area around the generated face position; And (c) enlarging the size of the image around the moved zoom area.
본 발명에 있어서, 상기 (c)단계에서, 상기 디지털 줌 수행시에, 상기 얼굴 인식부에서 생성한 얼굴위치와 디지털 줌 배율을 곱하여 상기 영상의 크기를 조정하는 것을 특징으로 한다.In the step (c), the size of the image may be adjusted by multiplying the face position generated by the face recognition unit and the digital zoom magnification at the time of performing the digital zoom.
본 발명에 있어서, 상기 이동한 줌 영역의 위치가 기 저장된 줌 영역의 위치와 다른 경우, 이들이 일치하도록 상기 디지털 영상 처리 장치의 이동을 유도하는 식별정보를 디스플레이 하는 단계를 더 포함하는 것을 특징으로 한다.The method may further include displaying identification information for guiding movement of the digital image processing apparatus so that the position of the moved zoom region is different from the position of the previously stored zoom region .
본 발명에 따르면, 디지털 줌 시에 얼굴 인식 기능을 제공하여 얼굴 인식을 효율적으로 할 수 있으며, 원거리에서 피사체의 얼굴을 인식함으로써 사용자에게 편리한 효과를 제공할 수 있다.According to the present invention, a face recognition function can be provided at the time of digital zooming to efficiently perform facial recognition, and a user-friendly effect can be provided by recognizing a face of a subject at a long distance.
이하, 첨부된 도면을 참조하여 본 발명을 상세히 설명한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings.
도 1은 디지털 영상 처리 장치의 앞쪽 및 위쪽 외형을 보여주는 사시도 이다.BRIEF DESCRIPTION OF THE DRAWINGS Fig. 1 is a perspective view showing the front and top contours of a digital image processing apparatus. Fig.
셔터-릴리즈 버튼(11)은 정해진 시간 동안 CCD나 필름을 빛에 노출시키기 위해 열리고 닫히며, 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 CCD에 영상을 기록한다. The shutter-
셔터-릴리즈 버튼(11)은 촬영자 입력에 의해 제1 및 제2 영상 촬영 신호를 생성한다. 반셔터 신호로써의 제1 셔터-릴리즈 버튼(11)이 입력되면, 디지털 영상 처리 장치는 초점을 잡고 빛의 양을 조절하며, 이때 초점이 맞은 경우 디스플레이부(25)에 녹색 불이 켜지게 된다. 제1 셔터-릴리즈 버튼(11)의 입력으로 초점이 잡히고 빛의 양이 조절되면, 비로소 완전셔터 신호로써의 제2 셔터-릴리즈 버튼(11)을 입력하여 영상을 촬영한다.The shutter-
전원 버튼(13)은 디지털 영상 처리 장치에 전원을 공급하여 동작시키기 위해 입력된다.The
플래시(15)는 어두운 곳에서 촬영할 경우 밝은 빛을 순간적으로 비추어 밝게 해주는 것으로 플래시 모드에는 자동플래시, 강제발광, 발광금지, 적목감소, 슬로우 싱크로 등이 있다. The
보조광(17)은 광량이 부족하거나 야간 촬영 시에 디지털 영상 처리 장치가 자동으로 초점을 빠르고 정확하게 잡을 수 있도록 피사체에 광을 공급한다.The
렌즈부(19)는 외부 광원으로부터 빛을 받아 영상을 처리한다. The
도 2는 도 1에 도시된 디지털 영상 처리 장치의 뒤쪽 외형을 보여주는 배면도로서, 광각-줌 버튼(21w), 망원-줌 버튼(21t), 디스플레이부(23) 및 터치센서 또는 접점식 스위치가 구비된 입력 버튼들(B1~B14)(이하 버튼들(B1~B14)이라 표기함)을 구비한다.FIG. 2 is a rear view showing the rear external appearance of the digital image processing apparatus shown in FIG. 1. The wide-
광각-줌 버튼(21w) 또는 망원-줌 버튼(21t)은 촬영 화각을 변경하는 버튼으로, 각-줌 버튼(21t)이 눌려지면 줌 렌즈의 초점 길이(Focal length)가 짧아져서 화각이 넓어지고, 망원-줌 버튼(21t)이 눌려지면 줌 렌즈의 초점 길이가 길어져서 화각이 좁아진다. The wide angle-
버튼들(B1~B14)은 디스플레이부(23)의 가로 열 및 세로 열에 구비된다. 디스플레이부(23)의 가로 열 및 세로 열에 구비된 버튼들(B1~B14)은 터치 센서(도시되지 않음) 또는 접점식 스위치(도시되지 않음)가 구비되어 있다.The buttons B1 to B14 are provided in the rows and columns of the
즉, 버튼들(B1~B14)에는 터치 센서가 구비되어 가로 열의 버튼들(B1~B7) 또는 세로 열의 버튼들(B8~B14)을 터치한 상태에서 상/하/좌/우로 이동하여 주 메뉴 항목 중 임의의 값(예를 들어, 컬러 또는 밝기)을 선택하거나, 주 메뉴 아이콘에 포함된 하위메뉴 아이콘을 활성화 시킬 수 있다.That is, the touch sensors are provided on the buttons B1 to B14 to move up / down / left / right while touching the buttons B1 to B7 of the horizontal row or the buttons B8 to B14 of the vertical row, It is possible to select any value (e.g., color or brightness) of the items, or activate a submenu icon included in the main menu icon.
또한 버튼틀(B1~B14)에는 접점식 스위치가 구비되어 있어, 주 메뉴 아이콘 및 하위메뉴 아이콘을 직접 선택하여 해당 기능을 실행시킬 수 있다. 터치 센서는 접점식 스위치 입력에 비해 상대적으로 약한 터치만을 요구하지만, 접점식 스위치 입력은 터치 센서 입력에 비해 상대적으로 강한 터치를 요구한다.In addition, the button frames (B1 to B14) are provided with contact switches so that the main menu icon and the sub menu icon can be directly selected to execute the corresponding function. The touch sensor requires a relatively weak touch compared to the contact switch input, but the contact switch input requires a relatively strong touch compared to the touch sensor input.
도 3은 본 발명에 따른 얼굴 인식 장치의 구성을 보이는 블록도로서, 디스플레이부(23), 사용자 입력부(31), 촬상부(33), 영상 처리부(35), 저장부(37) 및 디지털 신호 처리부(39)를 포함한다.3 is a block diagram showing a configuration of a face recognition apparatus according to the present invention and includes a
사용자 입력부(31)는 정해진 시간 동안 CCD나 필름을 빛에 노출시키기 위해 열리고 닫히는 셔터 릴리즈 버튼(11), 전원을 공급하기 위해 입력하는 전원 버튼(13), 입력에 따라 화각을 넓어지게 하거나, 화각을 좁아지게 하는 광각-줌 버튼(21w) 및 망원-줌 버튼(21t)과, 문자 입력 또는 메뉴 선택 및 실행을 위해 위해 디스플레이부(23) 주변의 가로 및 세로열에 구비된 터치센서 또는 접점식 스위치가 구비된 버튼들 버튼틀(B1~B14)이 있다.The
촬상부(33)는 도면에 도시되지 않은 셔터, 렌즈부, 조리개 및 CCD(Charge Coupled Device) 및 ADC를 포함한다. 셔터는 조리개와 함께 노광하는 빛의 양을 조절하는 기구이다. 렌즈부는 외부 광원으로부터 빛을 받아 영상을 처리한다. 이 때, 조리개는 개폐 정도에 따라 입사되는 빛의 양(광량)을 조절한다. 조리개의 개폐 정도는 디지털 신호 처리부(39)에 의해 제어된다.The
CCD는 렌즈부를 통하여 입력되는 광량을 축적하고 그 축적된 광량에 따라 렌즈부에서 촬상된 영상을 수직 동기신호에 맞추어 출력한다. 디지털 영상 처리 장치의 영상 획득은 피사체로부터 반사되어 나오는 빛을 전기적인 신호로 변환시켜 주는 CCD에 의해 이루어진다. CCD를 이용하여 컬러 영상을 얻기 위해서는 컬러 필 터를 필요로 하며, 대부분 CFA(Color filter array) 라는 필터(미도시)를 채용하고 있다. CFA는 한 픽셀마다 한 가지 컬러를 나타내는 빛만을 통과시키며 규칙적으로 배열된 구조를 가지고 있으며, 배열 구조에 따라 여러 가지 형태를 가지고 있다. ADC는 CCD로부터 출력되는 아날로그 영상신호를 디지털 신호로 변환한다.The CCD accumulates the amount of light input through the lens unit and outputs the image captured by the lens unit according to the accumulated light amount in accordance with the vertical synchronization signal. Image acquisition of a digital image processing apparatus is performed by a CCD which converts light reflected from a subject into an electrical signal. In order to obtain a color image using a CCD, a color filter is required. Mostly, a filter (not shown) called CFA (Color Filter Array) is employed. CFA has a regularly arranged structure that passes only light that represents one color per pixel, and it has various forms according to the arrangement structure. The ADC converts the analog video signal output from the CCD into a digital signal.
영상 처리부(35)는 디지털 변환된 RAW 데이터를 디스플레이 가능하도록 신호처리 한다. 영상 처리부(35)는 온도변화에 만감한 CCD 및 CFA 필터에서 발생하는 암 전류에 의한 블랙레벨(Black level)을 제거한다. 영상 처리부(35)는 인간 시각의 비선형성에 맞추어 정보를 부호화 하는 감마 보정을 수행한다. 영상 처리부(35)는 감마 보정된 소정 데이터의 RGRG라인 및 GBGB 라인으로 구현된 베이어 패턴을 RGB 라인으로 보간하는 CFA 보간을 수행한다. 영상 처리부(35)는 보간된 RGB 신호를 YUV 신호로 변환하고, 고 대역 필터에 의해 Y 신호를 필터링 하여 영상을 뚜렷하게 처리하는 에지 보상과, 표준 컬러 좌표계를 이용하여 U, V 신호의 컬러 값을 정정하는 컬러 정정을 수행하며, 이들의 노이즈를 제거한다. 영상 처리부(35)는 노이즈가 제거된 Y, U, V 신호를 압축 및 신호 처리하여 JPEG 파일을 생성하고, 생성된 JPEG 파일은 디스플레이부(23)에 디스플레이 되고, 저장부(37)에 저장된다. 이와 같은 영상 처리부(35)의 모든 동작은 디지털 신호 처리부(39)의 제어 하에 동작한다.The
디지털 신호 처리부(39)는 렌즈 조합에 의한 움직임으로 초점 거리를 조정하여 영상을 확대하는 광학 줌 기능 및 CCD에서 영상을 확대하는 디지털 줌 기능을 제공하는 디지털 영상 처리장치에서, 디지털 줌 모드 진입 시에, 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 통하여 줌 영역을 얼굴 인식영역으로 이동시키고, 이동된 줌 영역을 중심으로 디지털 줌을 수행한다.The digital
이를 위해 디지털 신호 처리부(39)는 얼굴 인식부(39-1), 줌 영역 변환부(39-2), 영상크기 조정부(39-3) 및 상기 각 블록들을 제어하는 제어부(39-4)를 포함한다.The digital
도 4a에는 라이브뷰 영상에 대한 일반적인 줌 영역(ZA:zoom area)을 보여준다. 일반적인 줌 영역은 시작 좌표와 가로, 세로의 크기가 고정되어 있으며, 미리 테이블로 정의되어 있다. 따라서, 줌 수행 시에 고정된 좌표와 크기 정보를 테이블로부터 검색하여 줌 동작을 수행한다.4A shows a general zoom area (ZA) for a live view image. The general zoom area has fixed start coordinates, horizontal and vertical sizes, and is defined in advance in the table. Accordingly, the zooming operation is performed by retrieving the fixed coordinates and size information from the table at the time of zooming.
디스플레이부(23)에 표시된 라이브뷰 영상의 확대를 위해, 망원-줌 버튼(21t)을 입력하면, 광학 줌이 수행되고, 광학 줌의 마지막 단계에서 망원-줌 버튼(21t)이 다시 입력되면, 디지털 줌 모드로 이동된다. 디지털 줌 모드에서는 광학 줌의 마지막 단계의 영상을 CCD가 감지하여 확대한다.When the telephoto-
도 4b에는 도 4a의 라이브 영상에서 망원-줌 버튼(21t)을 입력하여 광학 줌이 수행된 화면을 보여준다. 디지털 영상 처리 장치가 지원하는 광학 줌 배율까지 망원-줌 버튼(21t)을 재차 입력하여 라이브뷰 영상을 확대할 수 있다. 광학 줌 단계에서는 일반적인 줌 영역(ZA)을 중심으로 줌 동작이 수행된다. 본 발명에서는 도 4b를 광학 줌의 마지막 단계라고 가정한다. 광학 줌의 마지막 단계에서 재차 망원-줌 버튼(21t)을 입력하면, 디지털 영상 처리 장치가 디지털 줌 모드로 변환되면서, 디지털 줌이 수행된다.FIG. 4B shows a screen in which optical zooming is performed by inputting the telephoto-
얼굴 인식부(39-1)는 광학 줌의 마지막 단계에서 재차 망원-줌 버튼(21t)이 입력되면, 제어부(39-4)의 제어 하에, 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 수행하여 얼굴위치 정보를 생성한다. 도 4c에는 광학 줌 마지막 단계의 라이브 영상에서 얼굴 인식된 얼굴 인식 영역(FDA:face detection area)을 보여준다.When the telephoto-
얼굴 인식부(39-1)는 광학 줌 마지막 단계의 확대된 라이브뷰 영상으로부터 얼굴정보 즉, 얼굴의 크기, 위치 및 방향을 검출한다. 열굴 인식부(39-1)가 얼굴의 크기 검출 시에, 컬러를 기반으로 얼굴 영역을 검출하거나, 에지를 기반으로 얼굴 영역을 검출할 수 있고, 얼굴의 위치 검출 시에, 추출된 얼굴의 중심부와 미리 설정되어 있는 디스플레이부(23) 중심부 사이의 거리로 얼굴 위치를 계산할 수 있으며, 얼굴의 방향 검출 시에, 추출된 얼굴로부터 눈과 입으로 구성된 삼각형 형태로 얼굴 방향을 검출할 수 있다. 이와 같은 얼굴 인식부(39-1)의 얼굴정보 검출에 대한 내용은 이미 공지된 내용이 많으므로 상세한 설명은 생략한다.The face recognition unit 39-1 detects face information, that is, the size, position, and direction of the face from the enlarged live view image of the last optical zoom step. The facial recognition unit 39-1 can detect the face area based on the color or detect the face area based on the edge at the time of detecting the size of the face, and at the time of detecting the face position, And the center of the
줌 영역 변환부(39-2)는 제어부(39-4)의 제어 하에, 얼굴 인식부(39-1)에서 생성된 얼굴 위치 정보를 중심으로 줌 영역을 이동시킨다. 상기에 개시된 바와 같이 일반 줌 영역(ZA)은 도 4a 및 도 4b에 도시된 바와 같이 시작 좌표와 가로, 세로의 크기가 고정되어 있다. 그러나, 본 발명에서 줌 영역 변환부(39-2)는 얼굴 위치 정보 즉, 얼굴 인식 영역(FDA)을 중심으로 줌 영역을 이동시키킨다. 얼굴 인식 영역(FDA)을 줌 영역의 위치시키기 위한 시작 좌표와 가로, 세로 크기를 계산하여, 이동된 줌 영역의 중심에 얼굴 인식 영역(FDA)이 위치하도록 한다. 본 발명 에서 이동된 줌 영역은 디지털 줌 시에 이용되므로, 디지털 줌 영역(DZA:digital zoon area)라고 표기한다.The zoom area converter 39-2 moves the zoom area around the face position information generated by the face recognition unit 39-1 under the control of the control unit 39-4. As described above, the normal zoom area ZA has fixed start coordinates, horizontal and vertical sizes as shown in Figs. 4A and 4B. However, in the present invention, the zoom area converter 39-2 moves the zoom area around the face position information, that is, the face recognition area FDA. The start coordinates and the horizontal and vertical sizes for positioning the zoom area in the face recognition area FDA are calculated so that the face recognition area FDA is located at the center of the moved zoom area. The zoom area moved in the present invention is used in digital zooming and is therefore referred to as a digital zoom area (DZA).
영상크기 조정부(39-3)는 망원-줌 버튼(21t)의 입력에 따라, 제어부(39-4)의 제어 하에, 디지털 줌 영역(DZA)을 중심으로 라이브뷰 영상의 크기를 확대한다. 영상크기 조정부(39-3)는 디지털 줌 수행 시에, 광학 줌 마지막 단계에서 인식한 얼굴 인식 영역(FDA)의 크기와 입력된 디지털 줌 배율을 곱하여 라이브뷰 영상의 크기를 확대한다. The image size adjustment unit 39-3 enlarges the size of the live view image around the digital zoom area DZA under the control of the control unit 39-4 according to the input of the telephoto-
도 4d에는 얼굴 인식 영역(FDA)으로 줌 영역이 이동(디지털 줌 영역(DZA))된 후, 망원-줌 버튼(21t)이 입력되어 얼굴 인식 영역(FDA)을 중심으로 라이브뷰 영상이 디지털 줌 된 것을 보여준다.4D shows a state in which the zoom area is moved (digital zoom area DZA) to the face recognition area FDA and then the telephoto-
상기에 도시된 바와같이 디지털 줌 시에 얼굴 인식 기능을 제공하여 얼굴 인식을 효율적으로 할 수 있어, 원거리에서도 피사체의 얼굴을 인식할 수 있게 된다.As described above, the face recognition function is provided at the time of digital zooming, so that the face recognition can be efficiently performed, and the face of the subject can be recognized even at a long distance.
다른 실시 예로, 도 5는 디지털 줌 영역 밖에서 얼굴 인식이 된 경우 디지털 영상 처리 장치의 이동 방향을 제시해 주는 예를 보이는 도면이다. 디지털 줌 수행 시에, 디지털 영상 처리 장치가 조금만 움직여도 피사체가 디스플레이부(23)를 벗어나는 경우가 많다. 도 5와 같이 디지털 줌된 라이브 영상에서 얼굴 인식 영역(FDA)이 디스플레이부(23)의 중심에서 벗어나는 경우 디지털 줌 영역(DZA)이 디스플레이부(23) 중심에서 벗어나게 되어 디지털 줌을 효율적으로 수행할 수 없게 된다. 이와 같은 경우, 제어부(39-4)는 디지털 영상 처리 장치를 아래로 이동하라는 식별정보(화살표와 같은 가이드 정보 등)를 디스플레이 하여 사용자로 하여금 디지털 영상 처리 장치를 이동하도록 유도할 수 있다.5 illustrates an example of a moving direction of the digital image processing apparatus when face recognition is performed outside the digital zoom region. In performing digital zoom, the subject often moves off the
이하, 도 6을 참조하여 본 발명에 따른 얼굴 인식 방법을 상세히 설명한다. 본 발명에 따른 디지털 영상 처리 장치의 얼굴 인식 방법은 도 3에 도시된 바와 같은 영상 처리장치의 내부에서 수행될 수 있는데, 실시 예에 따라 동작 방법의 주 알고리즘은 장치 내의 주변 구성 요소들의 도움을 받아 디지털 신호 처리부(39) 내부에서 수행될 수 있다.Hereinafter, a face recognition method according to the present invention will be described in detail with reference to FIG. The method of recognizing a face of a digital image processing apparatus according to the present invention can be performed in an image processing apparatus as shown in FIG. 3. According to an embodiment, And may be performed in the digital
디스플레이부(23)에 라이브뷰 영상이 디스플레이 되면(601단계), 영상 확대를 위해 사용자는 망원-줌 버튼(21t)을 입력하고, 디지털 신호 처리부(39)는 이를 수신한다(603단계).When the live view image is displayed on the
디지털 신호 처리부(39)는 망원-줌 버튼(21t)이 수신되면, 광학 줌이 수행되도록 촬상부(33) 및 영상 처리부(23)를 제어하여, 확대된 라이브뷰 영상을 확대하여 디스플레이 한다(605단계). 광학 줌 수행 시에 도 4a에 도시된 바와 같이 고정된 크기(시작 좌표, 가로, 세로의 크기 고정)의 줌 영역(ZA)을 중심으로 광학 줌을 수행한다.When the telephoto-
영상의 재 확대를 위해, 디지털 신호 처리부(39)는 망원-줌 버튼(21t)의 재 입력을 수신하고, 촬상부(33) 및 영상 처리부(23)를 제어하여 더 확대된 라이브 영상을 디스플레이한다(607단계). 도 4b에는 도 4a의 라이브 영상에서 망원-줌 버튼(21t)을 입력하여 광학 줌이 수행된 화면을 보여준다. 디지털 영상 처리 장치가 지원하는 광학 줌 배율까지 망원-줌 버튼(21t)을 재차 입력하여 라이브뷰 영상을 확대할 수 있다. To re-expand the image, the digital
이후, 디지털 신호 처리부(39)는 망원-줌 버튼(21t)의 재 입력에 의해 마지막 광학 줌 단계인지 판단하여(609단계), 마지막 광학 줌 단계가 아닌 경우 광학 줌에 의한 영상 확대를 실시하고, 마지막 광학 줌 단계인 경우, 디지털 줌 모드로 진입한다(611단계).Thereafter, the digital
디지털 줌 모드로 진입하면, 디지털 영상 처리부(39)는 마지막 광학줌 단계의 확대된 라이브 영상에 대한 얼굴 인식을 수행한다(613단계). 얼굴 인식부(39-1)는 광학 줌의 마지막 단계에서 재차 망원-줌 버튼(21t)이 입력되면, 제어부(39-4)의 제어 하에, 광학 줌의 마지막 단계에서 확대된 영상의 얼굴 인식을 수행하여 얼굴위치 정보를 생성한다. 도 4c에는 광학 줌 마지막 단계의 라이브 영상에서 얼굴 인식된 얼굴 인식 영역(FDA:face detection area)을 보여준다.Upon entering the digital zoom mode, the digital
이어서 디지털 신호 처리부(39)는 얼굴 인식 영역(FDA)을 중심으로 줌 영역을 이동시킨다(615단계). 일반 줌 영역(ZA)은 도 4a 및 도 4b에 도시된 바와 같이 시작 좌표와 가로, 세로의 크기가 고정되어 있다. 그러나, 본 발명에서 줌 영역 변환부(39-2)는 얼굴 위치 정보 즉, 얼굴 인식 영역(FDA)을 중심으로 줌 영역을 이동시키킨다. 얼굴 인식 영역(FDA)을 줌 영역의 중심에 위치시키기 위한 시작 좌표와 가로, 세로 크기를 계산하여 이동된 줌 영역의 중심에 얼굴 인식 영역(FDA)이 위치하도록 한다. 본 발명에서 이동된 줌 영역은 디지털 줌 시에 이용되므로, 디지털 줌 영역(DZA:digital zoon area)라고 표기한다.Then, the digital
디지털 줌 영역(DZA)이 생성된 후, 망원-줌 버튼(21t)의 입력이 수신되면(617단계), 디지털 신호 처리부(39)는 디지털 줌 영역(DZA)을 중심으로 영 상을 확대한 후 디스플레이 한다(619단계). 영상크기 조정부(39-3)는 디지털 줌 수행 시에, 광학 줌 마지막 단계에서 인식한 얼굴 인식 영역(FDA)의 크기와 입력된 디지털 줌 배율을 곱하여 라이브뷰 영상의 크기를 확대한다. 도 4d에는 얼굴 인식 영역(FDA)으로 줌 영역이 이동(디지털 줌 영역(DZA))된 후, 망원-줌 버튼(21t)이 입력되어 얼굴 인식 영역(FDA)을 중심으로 라이브뷰 영상이 디지털 줌 된 것을 보여준다.After the digital zoom area DZA is generated and the input of the telephoto-
도 1은 디지털 영상 처리 장치의 앞쪽 및 위쪽 외형을 보여주는 사시도 이다.BRIEF DESCRIPTION OF THE DRAWINGS Fig. 1 is a perspective view showing the front and top contours of a digital image processing apparatus. Fig.
도 2는 도 1에 도시된 디지털 영상 처리 장치의 뒤쪽 외형을 보여주는 배면도 이다.FIG. 2 is a rear view showing the rear external appearance of the digital image processing apparatus shown in FIG. 1. FIG.
도 3은 본 발명에 따른 얼굴 인식 장치의 구성을 보이는 블록도 이다.3 is a block diagram showing a configuration of a face recognition apparatus according to the present invention.
도 4는 도 3의 장치에서 디지털 줌 시 얼굴 인식을 설명하기 위한 실시 예를 보이는 도면이다.4 is a view illustrating an embodiment for explaining face recognition in digital zooming in the apparatus of FIG.
도 5는 도 3의 장치에서 디지털 줌 영역 밖에서 얼굴 인식이 된 경우 디지털 영상 처리 장치의 이동 방향을 제시해 주는 실시 예를 보이는 도면이다.FIG. 5 is a view showing an embodiment of presenting a moving direction of a digital image processing apparatus when facial recognition is performed outside the digital zoom region in the apparatus of FIG. 3. FIG.
도 6은 본 발명에 따른 얼굴 인식 방법의 동작을 보이는 흐름도 이다.6 is a flowchart illustrating an operation of the face recognition method according to the present invention.
Claims (7)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070097382A KR101396335B1 (en) | 2007-09-27 | 2007-09-27 | Apparatus and method for detecting face |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070097382A KR101396335B1 (en) | 2007-09-27 | 2007-09-27 | Apparatus and method for detecting face |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20090032295A KR20090032295A (en) | 2009-04-01 |
KR101396335B1 true KR101396335B1 (en) | 2014-05-16 |
Family
ID=40759138
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070097382A KR101396335B1 (en) | 2007-09-27 | 2007-09-27 | Apparatus and method for detecting face |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR101396335B1 (en) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101417811B1 (en) * | 2007-12-21 | 2014-07-09 | 삼성전자주식회사 | Apparatus and method for zoom-in detected face through face detection in digital image processing device |
CN117877098B (en) * | 2024-03-07 | 2024-05-28 | 深圳百沃彰世科技有限公司 | Abnormal communication behavior identification method and system based on big data and multidimensional features |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06217187A (en) * | 1992-10-14 | 1994-08-05 | Mitsubishi Electric Corp | Image pickup device, moving vector detector, and picture shake correcting device |
KR20040065786A (en) * | 2003-01-16 | 2004-07-23 | 삼성테크윈 주식회사 | Digital camera and control method thereof |
JP2007027971A (en) | 2005-07-13 | 2007-02-01 | Canon Inc | Photographing apparatus, control method thereof, program, and recording medium |
-
2007
- 2007-09-27 KR KR1020070097382A patent/KR101396335B1/en not_active IP Right Cessation
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH06217187A (en) * | 1992-10-14 | 1994-08-05 | Mitsubishi Electric Corp | Image pickup device, moving vector detector, and picture shake correcting device |
KR20040065786A (en) * | 2003-01-16 | 2004-07-23 | 삼성테크윈 주식회사 | Digital camera and control method thereof |
JP2007027971A (en) | 2005-07-13 | 2007-02-01 | Canon Inc | Photographing apparatus, control method thereof, program, and recording medium |
Also Published As
Publication number | Publication date |
---|---|
KR20090032295A (en) | 2009-04-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR101510098B1 (en) | Apparatus and method for blurring an image background in digital image processing device | |
KR20090022392A (en) | Apparatus and method for picturing image using function of face drecognition | |
KR20090086754A (en) | Apparatus and method for digital picturing image | |
KR20090113076A (en) | Apparatus and method for braketing capture in digital image processing device | |
KR20100001272A (en) | Apparatus for processing digital image having self capture navigator function and thereof method | |
KR20090052677A (en) | Appratus and method for adjusting focus | |
KR20100042916A (en) | Apparatus and method for improving face image in digital image processing device | |
KR101613617B1 (en) | Apparatus and method for digital picturing image | |
KR20100003918A (en) | Apparatus and method for photographing digital image capable of recognizing user | |
KR101396335B1 (en) | Apparatus and method for detecting face | |
KR101417811B1 (en) | Apparatus and method for zoom-in detected face through face detection in digital image processing device | |
KR101421939B1 (en) | Apparatus and method for processing digital image using face detection function | |
KR101417807B1 (en) | Apparatus and method for adjusting focus by face detection in digital image processing device | |
KR101427651B1 (en) | Apparatus and method for adjusting face detection processing speed in digital image processing device | |
KR101406802B1 (en) | Apparatus and method for digital picturing image | |
KR101427656B1 (en) | Apparatus and method for capturing human in digital image processing device | |
KR101417812B1 (en) | Apparatus and method for digital picturing image | |
KR101373018B1 (en) | Apparatus and method for preventing hand-shaking during low light amount in digital image processing device | |
KR20090105374A (en) | Apparatus and method for generating thumbnail image in digital image processing device | |
KR20090004190A (en) | Digital image processing apparatus and method for controlling the same | |
KR101436833B1 (en) | Apparatus and method for digital picturing image | |
KR20090104429A (en) | Apparatus and method for providing image capture compostion using face detection in digital image processing device | |
KR101396338B1 (en) | Apparatus for processing digital image capable of generating map and thereof method | |
KR101417818B1 (en) | Apparatus and method for recognizing scene mode in digital image processing device | |
KR101411317B1 (en) | Apparatus and method for enlargementing photographing range in digital image processing device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
N231 | Notification of change of applicant | ||
N231 | Notification of change of applicant | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20170427 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20180427 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |