KR20090120318A

KR20090120318A - Apparatus for processing digital image and method for controlling thereof

Info

Publication number: KR20090120318A
Application number: KR1020080046290A
Authority: KR
Inventors: 고성식
Original assignee: 삼성디지털이미징 주식회사
Priority date: 2008-05-19
Filing date: 2008-05-19
Publication date: 2009-11-24

Abstract

PURPOSE: A digital image processing apparatus and a control method are provided to proceed the photography with moving picture by sensing the various fire work scene in real time without losing the fire work scene. CONSTITUTION: The input image is input(S310). The measurement luminance corresponding to the luminance of the photographing environment, in which the input image is inputted, is measured(S320). It is determined whether the input image is the image of the fire work scene or not from the measurement luminance. The input image is photographed with the moving picture(S340). The measurement of the measurement luminance is processed in the regular time interval or frame interval.

Description

디지털 영상 처리장치 및 그 제어방법{Apparatus for processing digital image and method for controlling thereof}Apparatus for processing digital image and method for controlling Technical Field

본 발명은 디지털 영상 처리장치 및 그 제어방법에 관한 것으로서, 보다 상세하게는 입력받은 영상이 불꽃 장면인 경우에 불꽃 장면의 촬영에 적당한 촬영 조건에 의하여 촬영을 수행할 수 있는 디지털 영상 처리장치 및 그 제어방법에 관한 것이다. The present invention relates to a digital image processing apparatus and a control method thereof, and more particularly, to a digital image processing apparatus capable of performing shooting under a shooting condition suitable for shooting a fireworks scene when the input image is a fireworks scene and the same. It relates to a control method.

통상적으로, 디지털 영상 처리장치는 디지털 카메라, PDA(personal digital assistant), 폰 카메라, PC 카메라 등의 영상을 처리하거나 영상 인식 센서를 사용하는 모든 장치를 포함한다. Typically, the digital image processing apparatus includes all devices that process images such as a digital camera, a personal digital assistant (PDA), a phone camera, a PC camera, or use an image recognition sensor.

디지털 영상 처리장치는 촬상 소자를 통하여 입력받은 영상을 디지털 신호 처리기에서 이미지 프로세싱하고 이를 압축하여 이미지 파일을 생성하고, 그 이미지 파일을 메모리에 저장할 수 있다. The digital image processing apparatus may image an image received through an image pickup device by a digital signal processor, compress the image, generate an image file, and store the image file in a memory.

또한, 디지털 영상 처리장치는 촬상 소자를 통하여 입력받거나 저장매체에 저장된 이미지 파일의 이미지를 LCD(Liquid Crystal Display)와 같은 표시장치에 표시하여 보여줄 수 있다. In addition, the digital image processing apparatus may display and display an image of an image file received through an imaging device or stored in a storage medium on a display device such as a liquid crystal display (LCD).

디지털 영상 처리장치는 촬영되는 영상의 종류에 따라 장면 모드를 설정하고, 각각의 장면 모드에 대하여 최적의 사진을 얻을 수 있는 촬영 조건을 설정하여 촬영할 수 있다. 이들 장면 모드 중에는 불꽃 장면에 대한 촬영 모드가 있을 수 있다. The digital image processing apparatus may set a scene mode according to the type of image to be photographed, and set a shooting condition for obtaining an optimal picture for each scene mode. Among these scene modes may be a shooting mode for the flame scene.

불꽃 장면은 불꽃놀이 하는 장면을 촬영하기 위한 장면 모드로서, 다양하게 연출되는 불꽃놀이 장면을 촬영하기 위해서는 장시간의 노광이 필요하다. 또한, 최고의 연출 장면을 시간의 흐름에 따라 지나칠 수 있다. The fireworks scene is a scene mode for photographing a scene of fireworks display, and a long exposure is required to photograph various fireworks scenes. In addition, you can pass the best scene over time.

본 발명은, 다양하게 변화되도록 연출되는 불꽃놀이 장면을 실시간으로 감지하면서, 최적의 불꽃놀이 장면을 동영상으로 촬영할 수 있는 디지털 영상 처리장치 및 그 제어방법을 제공하는 것을 목적으로 한다. It is an object of the present invention to provide a digital image processing apparatus and a control method thereof capable of capturing an optimal fireworks scene as a video while sensing a fireworks scene to be variously changed in real time.

본 발명은, (a) 입력 영상을 입력받는 단계; (b) 상기 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정하는 단계; (c) 상기 측정 휘도로부터 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단하는 단계; 및 (d) 상기 입력 영상을 동영상으로 촬영하는 단계를 구비하는 디지털 영상 처리장치의 제어방법을 제공한다. The present invention, (a) receiving an input image; (b) measuring a measurement luminance corresponding to the luminance of a photographing environment to which the input image is input; (c) determining whether the input image is an image of a fireworks scene from the measured luminance; And (d) capturing the input image as a moving image.

상기 (c) 단계에서, 상기 측정 휘도를 설정된 기준 휘도와 비교하여 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단할 수 있다. In step (c), it may be determined whether the input image is an image of a fireworks scene by comparing the measured luminance with a set reference luminance.

(e) 상기 입력 영상에 대한 동영상 촬영을 멈추는 단계, 및 (f) 촬영된 상기 동영상을 저장하는 단계를 더 구비할 수 있다. (e) stopping capturing the moving image of the input image, and (f) storing the captured moving image.

상기 동영상 촬영이 지속되는 촬영 지속 시간을 설정된 최대 허용 촬영 시간과 비교하는 단계를 더 구비하고, 상기 촬영 지속 시간이 상기 최대 허용 촬영 시간 이상인 경우에 상기 (e) 단계 및 상기 (f) 단계를 수행할 수 있다. And comparing the shooting duration for which the moving picture shooting continues with the set maximum allowed shooting time, and performing the steps (e) and (f) when the shooting duration is equal to or greater than the maximum allowed shooting time. can do.

상기 휴지 시간이 설정된 설정 시간보다 긴 경우에는 상기 (f) 단계에서 새로운 동영상 파일을 생성하여 저장하고, 상기 휴지 시간이 상기 설정 시간보다 짧 은 경우에는 상기 (f) 단계에서 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙일 수 있다. If the pause time is longer than the set time, a new video file is generated and stored in the step (f). If the pause time is shorter than the set time, the newly generated video is immediately preceding the step (f). Can be attached to the video file stored in.

본 발명의 다른 측면은, 입력 영상을 입력받는 영상 입력부; 상기 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도로부터 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단하고, 상기 입력 영상이 불꽃놀이 장면으로 판단되는 경우에 상기 입력 영상을 동영상으로 촬영하는 제어부; 및 촬영된 상기 동영상이 저장되는 저장부를 구비하는 디지털 영상 처리장치를 제공한다. Another aspect of the invention, the image input unit for receiving an input image; It is determined whether the input image is an image of a fireworks scene from the measured luminance corresponding to the luminance of a shooting environment to which the input image is input, and when the input image is determined to be a fireworks scene, photographing the input image as a video. Control unit; And a storage unit for storing the captured video.

상기 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정하는 휘도 측정부를 더 구비할 수 있다. The display apparatus may further include a luminance measuring unit configured to measure a measurement luminance corresponding to the luminance of the photographing environment to which the input image is input.

본 발명에 따른 디지털 영상 처리장치 및 그 제어방법에 의하면, 다양하게 변화되도록 연출되는 불꽃놀이 장면을 실시간으로 감지하면서 동영상으로 촬영을 수행함으로써, 최적의 불꽃놀이 장면을 놓치지 아니하고 촬영할 수 있다. According to the digital image processing apparatus and the control method thereof according to the present invention, by shooting in a video while detecting the fireworks scene to be produced in various changes in real time, it is possible to shoot without missing the optimal fireworks scene.

이하, 첨부된 도면을 참조하여 바람직한 실시예에 따른 본 발명을 상세히 설명하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1에는 본 발명에 따른 디지털 영상 처리장치의 제어장치 및 그 방법이 적용되는 디지털 영상 처리장치의 일 실시예인 디지털 카메라(100)의 뒷면 외형이 도시되어 있다. FIG. 1 is a rear view of a digital camera 100, which is an embodiment of a control device of a digital image processing apparatus and a digital image processing apparatus to which the method is applied, according to the present invention.

도면을 참조하면, 디지털 카메라(100)의 뒷면에는 방향 버튼(21), 메뉴-OK 버튼(22), 광각(Wide angle)-줌(Zoom) 버튼(W), 망원(Telephoto)-줌(Zoom) 버튼(T), 및 디스플레이 패널(25) 등이 구비될 수 있다. Referring to the drawings, on the back of the digital camera 100, the direction button 21, the menu-OK button 22, the wide angle (Zoom) button (W), the telephoto (Zoom) ) Button T, the display panel 25 and the like.

방향 버튼(21)에는 상향 버튼(21a), 하향 버튼(21b), 좌향 버튼(21c), 우향 버튼(21d)의 총4개의 버튼이 포함될 수 있다. 방향 버튼(21)과 메뉴-OK 버튼(22)은 디지털 카메라와 같은 디지털 영상 처리장치의 동작에 관한 각종 메뉴를 실행시키기 위해 입력하는 키이다. The direction button 21 may include four buttons, an up button 21a, a down button 21b, a left button 21c, and a right button 21d. The direction button 21 and the menu-OK button 22 are keys for executing various menus relating to the operation of the digital image processing apparatus such as a digital camera.

광각-줌 버튼(W) 또는 망원-줌 버튼(T)은 그 입력에 따라 화각이 넓어지거나, 화각이 좁아진다. 특히, 선택된 노출영역의 크기를 변경시키고자 할 때 사용될 수 있다. 디스플레이 패널(25)로는 LCD(liquid crystal display)등의 영상 표시소자가 사용될 수 있다. The wide-angle zoom button W or the tele-zoom button T has a wider angle of view or a narrower angle of view depending on its input. In particular, it may be used to change the size of the selected exposure area. As the display panel 25, an image display device such as a liquid crystal display (LCD) may be used.

디스플레이 패널(25)이 본 발명에 따라 촬영된 동영상이 표시되어 재생될 수 있는 표시부(도 4의 470)에 포함될 수 있다. The display panel 25 may be included in the display unit 470 of FIG. 4, in which a captured video according to the present invention may be displayed and reproduced.

한편, 디지털 카메라(100)의 앞면 또는 윗면에는 셔터 릴리즈 버튼(26), 플래시(미도시), 전원 스위치(28), 렌즈부(미도시)가 구비될 수 있다. 또한, 디지털 카메라(100)의 앞면과 뒷면에는 뷰 파인더(27)의 대물 렌즈와 접안 렌즈가 구비될 수 있다. Meanwhile, a shutter release button 26, a flash (not shown), a power switch 28, and a lens unit (not shown) may be provided on the front or top surface of the digital camera 100. In addition, the front and rear of the digital camera 100 may be provided with an objective lens and an eyepiece of the viewfinder 27.

방향 버튼(21), 메뉴-OK 버튼(22), 셔터 릴리즈 버튼(26), 및 전원 스위치(28) 등은 사용자가 외부로부터 조작하고자 하는 사항을 입력하는 사용자 조작부(도 4의 460)에 포함될 수 있다. The direction button 21, the menu-OK button 22, the shutter release button 26, the power switch 28, and the like are included in the user control unit 460 of FIG. Can be.

셔터 릴리즈 버튼(26)은 정해진 시간 동안 CCD(Charge Coupled Device)와 같 은 촬상 소자나 필름을 빛에 노출시키기 위해 열리고 닫힌다. 또한, 셔터 릴리즈 버튼은 조리개(미도시)와 연동하여 피사체를 적정하게 노출시켜 촬상 소자에 영상을 기록한다. The shutter release button 26 is opened and closed to expose an image pickup device or film such as a CCD (Charge Coupled Device) to light for a predetermined time. In addition, the shutter release button records an image on the image pickup device by properly exposing a subject in association with an aperture (not shown).

한편, 셔터 릴리즈 버튼(26)은 2단으로 눌려질 수 있다. 셔터 릴리즈 버튼(26)이 일단으로 눌려지면 제1신호(S1)가 생성되고, 이단으로 눌려지면 제2신호(S2)가 생성될 수 있다. 제1신호(S1)에 의하여 촬영 준비 작동이 수행되고, 제2신호(S2)에 의하여 촬영이 수행될 수 있다. On the other hand, the shutter release button 26 can be pressed in two stages. When the shutter release button 26 is pressed in one end, the first signal S1 may be generated, and when the shutter release button 26 is pressed in one step, the second signal S2 may be generated. A photographing preparation operation may be performed by the first signal S1, and photographing may be performed by the second signal S2.

본 발명이 적용될 수 있는 디지털 영상 처리장치의 일 실시예로서 디지털 카메라와 그 제어장치, 및 그 제어방법이 본 출원인의 미국 특허출원 공개번호 제2004/0130650호(명칭: 카메라의 이차함수를 이용한 자동 포커싱 방법, Method of automatically focusing using a quadratic function in camera)에 개시되어 있다. As an embodiment of a digital image processing apparatus to which the present invention can be applied, a digital camera, a control apparatus, and a control method thereof are disclosed in US Patent Application Publication No. 2004/0130650 (name: automatic using a secondary function of the camera). Method of automatically focusing using a quadratic function in camera.

상기 미국출원에 개시된 디지털 카메라와 그 제어장치, 및 그 제어방법에 관한 사항은 본 명세서에 포함되는 것으로 하고, 그 자세한 설명은 생략한다. Matters relating to the digital camera, the control apparatus, and the control method disclosed in the above-mentioned US application will be included in the present specification, the detailed description thereof will be omitted.

도 2에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치의 제어장치(200)의 블록도가 도시되어 있다. 디지털 영상 처리장치의 제어장치(200)는 도 1의 디지털 카메라(100)의 내부에 장착될 수 있다. 2 is a block diagram of a control device 200 of a digital image processing apparatus, which is a preferred embodiment of the present invention. The control device 200 of the digital image processing apparatus may be mounted in the digital camera 100 of FIG. 1.

도면을 참조하면, 렌즈부와 필터부를 포함한 광학계(OPS)는 피사체로부터의 빛을 광학적으로 처리한다. 광학계(OPS)의 렌즈부는 줌 렌즈, 포커스 렌즈 및 보상 렌즈를 포함한다. 사용자가 사용자 입력부(INP)에 포함된 광각-줌 버튼(W) 또는 망원-줌 버튼(T)을 누르면, 이에 상응하는 신호가 마이크로제어기(212)에 입력된 다. Referring to the drawing, an optical system OPS including a lens unit and a filter unit optically processes light from a subject. The lens unit of the optical system OPS includes a zoom lens, a focus lens, and a compensation lens. When the user presses the wide-angle zoom button W or the tele-zoom button T included in the user input unit INP, a corresponding signal is input to the microcontroller 212.

이에 따라, 마이크로제어기(212)가 렌즈 구동부(210)를 제어함에 따라, 줌 모터(M_Z)가 구동되어 줌 렌즈가 이동된다. 즉, 광각-줌 버튼(W)이 눌려지면 줌 렌즈의 초점 길이가 짧아져서 화각이 넓어지고, 망원-줌 버튼(T)이 눌려지면 줌 렌즈의 초점 길이가 길어져서 화각이 좁아진다. Accordingly, as the microcontroller 212 controls the lens driver 210, the zoom motor M _Z is driven to move the zoom lens. That is, when the wide-zoom button W is pressed, the focal length of the zoom lens is shortened to widen the angle of view, and when the tele-zoom button T is pressed, the focal length of the zoom lens becomes long and the angle of view is narrowed.

한편, 자동 초점 모드(auto focusing mode)에는, 디지털 신호 처리기(207) 안에 내장된 주 제어기가 마이크로제어기(212)를 통하여 렌즈 구동부(210)를 제어하고, 그에 따라 포커스 모터(M_F)가 구동된다. 즉, 포커스 모터(M_F)를 구동하여 가장 선명한 사진을 얻을 수 있는 위치로 포커스 렌즈를 이동시킨다. 자동 초점 모드는 사용자 입력부(INP)를 통하여 입력되는 셔터 릴리즈 버튼이 일단으로 눌려져 생성되는 제1신호(S1)에 따라 수행될 수 있다. On the other hand, in the auto focusing mode, the main controller embedded in the digital signal processor 207 controls the lens driver 210 through the microcontroller 212, whereby the focus motor M _F is driven. do. That is, the focus lens is moved to a position where the sharpest picture is obtained by driving the focus motor M _F. The auto focus mode may be performed according to the first signal S1 generated by pressing the shutter release button input through the user input unit INP to one end.

보상 렌즈는 전체적인 굴절률을 보상하는 역할을 하므로 별도로 구동되지 않는다. 참조 부호 M_A는 조리개(aperture, 도시되지 않음)를 구동하기 위한 모터를 가리킨다. The compensation lens compensates for the overall refractive index and is not driven separately. Reference numeral M _A denotes a motor for driving an aperture (not shown).

광학계(OPS)의 필터부에 있어서, 광학적 저역통과필터(Optical Low Pass Filter)는 고주파 성분의 광학적 노이즈를 제거한다. 적외선 차단 필터(Infra-Red cut Filter)는 입사되는 빛의 적외선 성분을 차단한다. In the filter section of the optical system OPS, an optical low pass filter removes optical noise of high frequency components. Infra-Red cut filter cuts the infrared component of the incident light.

광전 변환부(OEC)는 CCD(Charge Coupled Device) 또는 CMOS(Complementary Metal-Oxide- Semiconductor) 등의 촬상 소자를 포함하여 이루어질 수 있다. 광전 변환부(OEC)는 광학계(OPS)로부터의 빛을 전기적 아날로그 신호로 변환시킨다. The photoelectric conversion unit OEC may include an imaging device such as a charge coupled device (CCD) or a complementary metal-oxide-semiconductor (CMOS). The photoelectric conversion unit OEC converts light from the optical system OPS into an electrical analog signal.

아날로그-디지털 변환부는 CDS-ADC(Correlation Double Sampler and Analog-to-Digital Converter) 소자(201)를 포함하여 이루어질 수 있다. 아날로그-디지털 변환부는 광전 변환부(OEC)로부터의 아날로그 신호를 처리하여, 그 고주파 노이즈를 제거하고 진폭을 조정한 후, 디지털 신호로 변환시킨다. 여기서, 디지털 신호 처리기(207)는 타이밍 회로(202)를 제어하여 광전 변환부(OEC)와 아날로그-디지털 변환부(201)의 동작을 제어한다. The analog-to-digital converter may include a CDS-ADC (Correlation Double Sampler and Analog-to-Digital Converter) device 201. The analog-to-digital converter processes the analog signal from the photoelectric converter (OEC), removes the high frequency noise, adjusts the amplitude, and converts the analog signal into a digital signal. Here, the digital signal processor 207 controls the timing circuit 202 to control the operation of the photoelectric converter OEC and the analog-to-digital converter 201.

광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등은 본 발명에 따라 영상이 입력되는 영상 입력부(도 4의 410)에 포함될 수 있다. The optical system OPS, the photoelectric conversion unit OEC, the CDS-ADC element 201, and the like may be included in the image input unit 410 of FIG. 4 to which an image is input according to the present invention.

실시간 클럭(203)은 디지털 신호 처리기(207)에 시간 정보를 제공한다. 디지털 신호 처리기(207)는 CDS-ADC 소자(201)로부터의 디지털 신호를 처리하여 휘도(Y 값) 및 색도(R, G, B) 신호로 분류된 디지털 화상 신호를 발생시킨다. The real time clock 203 provides time information to the digital signal processor 207. The digital signal processor 207 processes digital signals from the CDS-ADC element 201 to generate digital image signals classified into luminance (Y value) and chromaticity (R, G, B) signals.

디지털 신호 처리기(207)에 내장된 주 제어기의 제어에 따라 마이크로 제어기(212)에 의하여 구동되는 발광부(LAMP)에는, 셀프-타이머 램프, 자동-초점 램프, 모드 지시 램프 및 플래시 대기 램프 등이 포함될 수 있다. The light emitting unit LAMP driven by the microcontroller 212 under the control of the main controller built in the digital signal processor 207 includes a self-timer lamp, an auto-focus lamp, a mode indicating lamp, a flash standby lamp, and the like. May be included.

디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)는 본 발명에 따른 제어부(도 4의 430)에 포함될 수 있다. 또한, 본 발명에 따른 사용자 조작부(도 4의 460)의 조작에 의하여 입력된 사용자 입력은 사용자 입력부(INP)를 통하여 디지털 신호 처리기(207) 및/또는 마이크로 제어기(212)로 입력되어 처리되고, 그에 따른 작업이 수행될 수 있다. The digital signal processor 207 and / or the microcontroller 212 may be included in the controller 430 of FIG. 4 in accordance with the present invention. In addition, the user input input by the operation of the user manipulation unit 460 of FIG. 4 is input to the digital signal processor 207 and / or the microcontroller 212 through the user input unit INP, and processed. The work accordingly can be performed.

DRAM(Dynamic Random Access Memory, 204)에는 디지털 신호 처리기(207)로부터의 디지털 화상 신호가 일시 저장된다. EEPROM(Electrically Erasable and Programmable Read Only Memory, 205)에는 디지털 신호 처리기(207)의 동작에 필요한 부팅 프로그램 및 키 입력 프로그램 등과 같은 알고리즘 및 설정 데이터가 저장된다. 메모리 카드 인터페이스(206)에서는 사용자의 메모리 카드가 착탈될 수 있다. The digital image signal from the digital signal processor 207 is temporarily stored in the DRAM (Dynamic Random Access Memory) 204. The EEPROM (Electrically Erasable and Programmable Read Only Memory) 205 stores algorithms and setting data such as a boot program and a key input program required for the operation of the digital signal processor 207. In the memory card interface 206, a user's memory card may be attached or detached.

DRAM(204) 또는 메모리 카드 인터페이스(206)를 통하여 인식되는 메모리 카드는 촬영된 정지 영상 또는 동영상이 일시적으로 또는 비휘발성으로 저장되는 것으로 도 4의 제1 저장부(440) 및/또는 제2 저장부(450)에 포함될 수 있다. The memory card recognized through the DRAM 204 or the memory card interface 206 may store a captured still image or a moving image temporarily or nonvolatile, so that the first storage unit 440 and / or the second storage of FIG. It may be included in the unit 450.

또한, 제1 저장부(440) 및/또는 제2 저장부(450)에는 휘도 측정부(220)를 통하여 입력되거나 입력 영상에서 측정된 측정 휘도, 및/또는 기준 휘도, 및/또는 기준 시간, 및/또는 설정 시간, 및/또는 최대 허용 촬영 시간 등이 일시적으로 또는 비휘발성으로 저장될 수 있다. In addition, the first storage unit 440 and / or the second storage unit 450 may include measurement luminance, and / or reference luminance, and / or reference time, which are input through the luminance measuring unit 220 or measured in the input image. And / or the setting time, and / or the maximum allowable shooting time and the like may be stored temporarily or nonvolatile.

디지털 신호 처리기(207)로부터의 디지털 화상 신호는 디스플레이 패널 구동부(214)에 입력되고, 이로 인하여 디스플레이 패널(215)에 화상이 디스플레이 된다. 이때, 디스플레이 패널(215)은 디스플레이 패널 구동부(214)에 의하여 구동될 수 있다. The digital image signal from the digital signal processor 207 is input to the display panel driver 214, whereby the image is displayed on the display panel 215. In this case, the display panel 215 may be driven by the display panel driver 214.

디스플레이 패널(215) 및 디스플레이 패널 구동부(214)는 본 발명에 따라 입력 영상 및 촬영된 동영상이 표시될 수 있으며, 촬영된 동영상이 재생될 수 있는 표시부(도 4의 470)에 포함될 수 있다. According to the present invention, the display panel 215 and the display panel driver 214 may display an input image and a captured video, and may be included in the display unit 470 of FIG.

한편, 디지털 신호 처리기(207)로부터의 디지털 화상 신호는, USB(Universal Serial Bus) 접속부(31a) 또는 RS232C 인터페이스(208)와 그 접속부(31b)를 통하여 직렬 통신으로써 전송될 수 있고, 비디오 필터(209) 및 비디오 출력부(31c)를 통하여 비디오 신호로서 전송될 수 있다. 여기서, 디지털 신호 처리기(207)는 그 내부에 마이크로제어기를 내장할 수 있다. On the other hand, the digital image signal from the digital signal processor 207 can be transmitted by serial communication via a universal serial bus (USB) connection portion 31a or an RS232C interface 208 and the connection portion 31b thereof, and a video filter ( 209 and through the video output unit 31c. Here, the digital signal processor 207 may incorporate a microcontroller therein.

오디오 처리기(213)는, 마이크로폰(MIC)으로부터의 음성 신호를 디지털 신호 처리기(207) 또는 스피커(SP)로 출력하고, 디지털 신호 처리기(207)로부터의 오디오 신호를 스피커(SP)로 출력한다. The audio processor 213 outputs the audio signal from the microphone MIC to the digital signal processor 207 or the speaker SP, and outputs the audio signal from the digital signal processor 207 to the speaker SP.

한편, 디지털 영상 처리장치의 제어장치(200)는 현재 입력되는 영상이 불꽃놀이 장면에 대한 촬영인지 판단하기 위한 측정 휘도를 측정할 수 있는 별도의 휘도 측정부(220)를 구비할 수 있다. On the other hand, the control device 200 of the digital image processing apparatus may include a separate luminance measuring unit 220 that can measure the measured luminance for determining whether the current input image is photographing the fireworks scene.

다른 실시예로서, 입력된 영상에서 적어도 일부 영역의 휘도를 검출하여 입력 영상의 측정 휘도를 측정할 수 있다. 이때, 측정 휘도는 입력 영상에서 자동 초점 조절을 위하여 포커스 값을 측정하는 적어도 하나 이상의 포커스 영역에서 측정될 수 있다. In another embodiment, the luminance of at least a portion of the input image may be detected to measure the measured luminance of the input image. In this case, the measured luminance may be measured in at least one focus area measuring a focus value for auto focus adjustment in the input image.

도 3에는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법(S300)의 흐름도가 도시되어 있다. 디지털 영상 처리장치의 제어방법(S300)은 도 2의 디지털 영상 처리장치의 제어장치(200) 및/또는 도 4의 디지털 영상 처리장치(400)에서 구현될 수 있다. 3 is a flowchart of a control method (S300) of a digital image processing apparatus as a preferred embodiment according to the present invention. The control method S300 of the digital image processing apparatus may be implemented in the control apparatus 200 of the digital image processing apparatus of FIG. 2 and / or the digital image processing apparatus 400 of FIG. 4.

이를 위하여, 본 발명에 따른 디지털 영상 처리장치의 제어방법(S300)이 도 2 또는 도 4의 저장 수단에 저장되거나 펌웨어(Firmware) 등의 반도체 칩의 형태로 구현된 프로그램 또는 알고리즘이 될 수 있다. To this end, the control method S300 of the digital image processing apparatus according to the present invention may be a program or algorithm stored in the storage means of FIG. 2 or 4 or implemented in the form of a semiconductor chip such as firmware.

본 발명에 따른 디지털 영상 처리장치의 제어방법(S300)은 야간의 불꽃놀이 장면의 다양한 연출과 연속적인 변화를 자동으로 인지하여 가장 효과적으로 예쁜 불꽃놀이 장면을 지능적으로 동영상 촬영을 수행할 수 있다. 이때, 동영상 촬영이 수행되는 동영상 촬영 시간을 조절하여 촬영할 수 있다. The control method (S300) of the digital image processing apparatus according to the present invention may automatically recognize a variety of direction and continuous change of a nighttime fireworks scene and perform intelligent video shooting of a pretty fireworks scene most effectively. In this case, the video may be captured by adjusting the video recording time during which the video recording is performed.

한편, 다양하게 연출되는 불꽃놀이 장면을 촬영하기 위해서는 장시간의 노광이 필요하고, 최고의 연출 장면의 순간을 지나칠 수 있다. 또한, 고정 또는 가변 노광 시간은 다양한 불꽃놀이 장면을 촬영하는데, 제약이 될 수 있다. 실제 불꽃놀이 장면은 연속적이고 다양하게 변화 또는 연출되며, 그 예측이 어렵기 때문이다. On the other hand, in order to shoot a variety of fireworks scenes, a long exposure is required, and the moment of the best scene can be passed. In addition, the fixed or variable exposure time may be a limitation in capturing various fireworks scenes. The actual fireworks scene is continuous and varied or varied, and the prediction is difficult.

따라서, 본 발명에서는 다양하게 연출되는 불꽃놀이 장면이 지속되고 있는지 여부를 자동으로 판단하고, 판단된 불꽃놀이 장면의 지속 여부에 따라 가변적으로 동영상 촬영 시간을 조정할 수 있다. 그에 따라, 상황에 맞는 최적의 불꽃놀이 장면을 동영상 촬영할 수 있다. Therefore, in the present invention, it is possible to automatically determine whether various fireworks scenes are continuously produced, and adjust the video shooting time variably according to whether the fireworks scene is determined. Accordingly, it is possible to shoot a video of the best fireworks scene according to the situation.

디지털 영상 처리장치의 제어방법(S300)은 영상 입력단계(S310); 휘도 측정단계(S320); 장면 판단단계(S330); 및 동영상 촬영단계(S340)를 구비할 수 있다. The control method (S300) of the digital image processing apparatus includes an image input step (S310); Luminance measurement step (S320); Scene determination step (S330); And it may have a video shooting step (S340).

영상 입력단계(S310)에는 입력 영상을 입력받는다. 휘도 측정단계(S320)에는 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정한다. 장면 판단단계(S330)에는 측정 휘도로부터 입력 영상이 불꽃놀이 장면의 영상인지를 판단한다. 동영상 촬영단계(S340)에는 입력 영상을 동영상으로 촬영한다. In the image input step S310, an input image is received. In the luminance measuring step S320, measurement luminance corresponding to the luminance of the photographing environment to which the input image is input is measured. In the scene determination step (S330), it is determined whether the input image is an image of a fireworks scene from the measured luminance. In the video shooting step (S340), the input image is captured as a video.

본 발명에 따른 디지털 영상 처리장치의 제어방법(S300)은 미리 설정된 지능형 불꽃놀이 동영상 촬영 모드의 실행에 의하여 수행될 수 있다. 지능형 불꽃놀이 동영상 촬영 모드는 촬영 모드가 지능형 불꽃놀이 동영상 촬영 모드로 설정되고, 사용자의 셔터 릴리즈 버튼의 입력에 의한 제1 신호(S1) 및/또는 제2 신호(S2)의 입력에 의하여 수행될 수 있다. The control method (S300) of the digital image processing apparatus according to the present invention may be performed by executing a preset intelligent fireworks video shooting mode. In the intelligent fireworks video shooting mode, the shooting mode is set to the intelligent fireworks video shooting mode and is performed by input of the first signal S1 and / or the second signal S2 by the user's input of the shutter release button. Can be.

영상 입력단계(S310)에는 입력 영상을 입력받는다. 입력 영상은 설정된 시간 간격으로 입력되는 프레임 영상이 될 수 있다. 이러한 프레임 영상들이 동영상 촬영단계(S340)에서 동영상으로 촬영될 수 있다. In the image input step S310, an input image is received. The input image may be a frame image input at set time intervals. These frame images may be captured as a video in the video photographing step (S340).

이때, 지능형 불꽃놀이 동영상 촬영 모드에서 촬영되는 경우에 영상 입력단계(S310)에 촬영 수행에 필요한 촬영 조건들이 야간의 불꽃놀이 촬영에 적합한 설정으로 설정될 수 있다. 이때, 촬영 조건들은 노출 조정, 초점 조정, 화이트 밸런스 조정 등에 관한 조건을 포함할 수 있다. In this case, when shooting in the intelligent fireworks video shooting mode, the shooting conditions necessary for performing the shooting in the image input step (S310) may be set to a setting suitable for shooting fireworks at night. In this case, the photographing conditions may include conditions related to exposure adjustment, focus adjustment, white balance adjustment, and the like.

휘도 측정단계(S320)에는 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정한다. 휘도 측정은 입력 영상이 입력되는 주기에 따라 각각의 입력 영상에서 측정될 수 있다. 이를 위하여, 입력 영상이 영상 처리되고, 입력 영상에서 휘도 성분이 추출되어, 그 휘도 성분으로부터 측정 휘도가 측정될 수 있다. In the luminance measuring step S320, measurement luminance corresponding to the luminance of the photographing environment to which the input image is input is measured. The luminance measurement may be measured on each input image according to a period in which the input image is input. To this end, the input image may be image processed, a luminance component may be extracted from the input image, and the measured luminance may be measured from the luminance component.

이때, 입력된 영상에서 일부 영역 또는 전체 영역의 휘도를 검출하여 입력 영상의 측정 휘도를 측정할 수 있다. 이때, 측정 휘도는 입력 영상에서 자동 초점 조절을 위하여 포커스 값을 측정하는 적어도 하나 이상의 포커스 영역에서 측정될 수 있다. In this case, the luminance of the partial region or the entire region may be detected from the input image to measure the measured luminance of the input image. In this case, the measured luminance may be measured in at least one focus area measuring a focus value for auto focus adjustment in the input image.

이 경우, 휘도를 측정하는데 소요되는 시간을 줄여 휘도 측정 시간이 시스템에 부하가 되지 아니하도록 하여, 실시간 측정이 용이하도록 하기 위하여, 입력 영상 전체 영역이 아닌 일부 영역에서 휘도를 측정할 수 있다. In this case, in order to reduce the time required to measure the luminance so that the luminance measurement time does not become a load on the system, and to facilitate the real-time measurement, the luminance may be measured in a part of the input image rather than the entire region.

입력 영상이 입력되는 주기에 따라 각각의 입력 영상에서 휘도가 측정될 수 있으나, 실시간 측정이 용이하도록, 다른 실시예로서, 측정 휘도의 측정이 일정한 시간 간격 또는 일정한 프레임 간격으로 이루어질 수 있다. Luminance may be measured in each input image according to a period in which the input image is input. However, in another embodiment, measurement of the measurement luminance may be performed at a predetermined time interval or at a predetermined frame interval to facilitate real-time measurement.

휘도 측정을 위한 다른 실시예로서, 측정 휘도를 촬영 환경의 휘도를 직접 측정하여 측정할 수 있다. 이를 위하여 도 2 및/또는 도 4에서와 같이 별도의 휘도 측정부(200, 420)가 구비되고, 하드웨어적으로 휘도를 측정할 수도 있다. As another embodiment for measuring the luminance, the measured luminance may be measured by directly measuring the luminance of the photographing environment. To this end, separate luminance measuring units 200 and 420 are provided as shown in FIGS. 2 and / or 4, and luminance may be measured by hardware.

이처럼 휘도 변화를 측정함으로써, 불꽃놀이 장면의 변화를 실시간으로 모니터링 할 수 있다. 또한, 불꽃놀이 장면이 연속적으로 진행되고 있는지 여부에 따른 지속성 여부를 판단할 수 있다. By measuring this change in brightness, changes in the fireworks scene can be monitored in real time. In addition, it is possible to determine whether the persistence according to whether the fireworks scene is continuously progressing.

장면 판단단계(S330)에는 측정 휘도로부터 입력 영상이 불꽃놀이 장면의 영상인지를 판단한다. 이를 위하여, 휘도 측정단계(S320)에서 측정된 측정 휘도를 설정된 기준 휘도와 비교함으로써, 입력 영상이 불꽃놀이 장면의 영상인지를 판단할 수 있다. In the scene determination step (S330), it is determined whether the input image is an image of a fireworks scene from the measured luminance. To this end, by comparing the measured luminance measured in the luminance measurement step (S320) with the set reference luminance, it can be determined whether the input image is an image of the fireworks scene.

이때, 측정 휘도가 기준 휘도 이상이면 불꽃놀이 장면이 연출되고 있는 것으로 인식하고, 측정 휘도가 기준 휘도보다 낮으면 불꽃놀이 장면이 연출되지 아니하는 것으로 인식할 수 있다. 따라서, 측정 휘도가 기준 휘도 이상이어서 불꽃놀이 장면이 연출되고 있는 것으로 판단되면 동영상 촬영단계(S340)에서 입력 영상을 동 영상으로 촬영할 수 있다. In this case, if the measured luminance is greater than or equal to the reference luminance, the fireworks scene may be recognized. If the measured luminance is lower than the reference luminance, the fireworks scene may not be produced. Therefore, when it is determined that the fireworks scene is produced because the measured luminance is greater than or equal to the reference luminance, the input image may be captured as a moving image in the moving image photographing step (S340).

한편, 측정 휘도가 기준 휘도보다 낮은 경우에는 무조건 동영상 촬영을 멈출 수 있다. 이때, 다른 실시예로서, 측정 휘도가 기준 휘도보다 낮아 불꽃놀이 장면이 연출되지 아니하는 것으로 판단되는 경우에도, 불꽃놀이 장면이 연출되지 아니하는 것으로 판단되는 시간이 설정된 시간 이상 지속되기 전까지는 동영상 촬영을 계속할 수 있다. 이는, 불꽃놀이 장면의 영상을 그 변화가 다양할 수 있기 때문에 불꽃놀이 장면을 놓치지 않기 위함이다. On the other hand, when the measured luminance is lower than the reference luminance, video shooting can be stopped unconditionally. At this time, as another embodiment, even if it is determined that the fireworks scene is not produced because the measured luminance is lower than the reference luminance, the video recording is performed until the time determined that the fireworks scene is not produced is longer than the set time. You can continue. This is because the change of the image of the fireworks scene may vary, so as not to miss the fireworks scene.

이를 위하여, 측정 휘도가 기준 휘도보다 낮은 상태로 유지되는 시간에 해당하는 휴지 시간을 계산하고(S380), 휴지 시간을 기준 시간과 비교할 수 있다(S390). 이때, 휴지 시간이 기준 시간보다 길지 아니하면 동영상 촬영단계(S340)에 의한 동영상 촬영을 계속 수행할 수 있다. To this end, an idle time corresponding to a time in which the measured luminance is kept lower than the reference luminance may be calculated (S380), and the idle time may be compared with the reference time (S390). At this time, if the idle time is not longer than the reference time, the video shooting by the video shooting step S340 may be continued.

도 5 및 도 6에는 불꽃놀이 장면의 시간에 따른 변화에 대한 측정 휘도의 변화의 예를 보여주는 그래프들(50, 60)이 도시되어 있다. 이때, 측정 휘도가 기준 휘도보다 높은 구간을 불꽃놀이 장면으로 판단할 수 있다. 5 and 6 show graphs 50 and 60 that show examples of changes in measured luminance versus changes over time in the fireworks scene. In this case, a section in which the measured luminance is higher than the reference luminance may be determined as the fireworks scene.

도 5 및 도 6에 도시된 실시예의 그래프들(50, 60)에서 측정 휘도가 기준 휘도보다 높아지기 시작하는 시점이 불꽃놀이 장면의 촬영 시작점(51, 61)이 되고, 측정 휘도가 기준 휘도보다 낮아지기 시작하는 종점이 불꽃놀이 장면의 촬영 종료점(52, 62)이 될 수 있다. In the graphs 50 and 60 of the embodiment shown in Figs. 5 and 6, the starting point of the measurement luminance becomes higher than the reference luminance becomes the shooting start points 51 and 61 of the fireworks scene, and the measurement luminance becomes lower than the reference luminance. The starting end point may be the shooting end points 52 and 62 of the fireworks scene.

동영상 촬영단계(S340)에는 입력 영상을 동영상으로 촬영한다. 즉, 측정 휘도가 기준 휘도 이상이어서 불꽃놀이 장면이 현재 연출되고 있는 것으로 판단되거 나, 휴지 시간이 기준 시간을 경과하지 아니한 경우에는 계속하여 동영상 촬영을 수행할 수 있다. In the video shooting step (S340), the input image is captured as a video. That is, when it is determined that the fireworks scene is currently being produced because the measured luminance is greater than or equal to the reference luminance, or when the pause time does not pass the reference time, video recording may be continuously performed.

한편, 디지털 영상 처리장치의 제어방법(S300)은 촬영시간 판단단계(S350), 촬영 멈춤 단계(S360), 및 동영상 저장단계(S370)를 더 구비할 수 있다. Meanwhile, the control method (S300) of the digital image processing apparatus may further include a photographing time determining step (S350), a photographing stop step (S360), and a video storing step (S370).

촬영시간 판단단계(S350)에는 촬영 지속 시간이 설정된 최대 허용 촬영시간과 비교하여, 계속적인 동영상 촬영이 가능한지 여부를 판단한다. 촬영 멈춤 단계(S360)에는 입력 영상에 대한 동영상 촬영을 멈춘다. 동영상 저장단계(S370)에는 촬영된 동영상을 저장한다. In the shooting time determining step (S350), it is determined whether continuous video shooting is possible by comparing the shooting duration with the maximum allowable shooting time. In the shooting stop step (S360), video recording of the input image is stopped. The video storage step (S370) stores the captured video.

촬영시간 판단단계(S350)에서 촬영 시간을 판단한 결과, 촬영 지속 시간이 최대 허용 촬영시간을 경과하지 아니하여 계속적인 촬영이 가능하다고 판단되는 경우에는, 영상 입력단계(S310), 휘도 측정단계(S320), 장면 판단단계(S330)를 다시 수행할 수 있다. As a result of determining the shooting time in the shooting time determining step (S350), if it is determined that the shooting duration is possible without continuing the maximum allowable shooting time, the image input step (S310) and the luminance measuring step (S320). ), The scene determination step S330 may be performed again.

촬영시간 판단단계(S350)에서 촬영 지속 시간이 최대 허용 촬영시간을 경과하여 계속적인 촬영이 불가능하다고 판단되는 경우에는 촬영 멈춤 단계(S360)에서 동영상 촬영을 멈추고, 동영상 저장단계(S370)에서 입력 영상을 동영상 이미지 파일로 변환하여 저장할 수 있다. If it is determined in the shooting time determination step (S350) that the shooting duration has passed the maximum allowable shooting time and continuous shooting is not possible, the video recording stops at the recording stop step (S360), and the input image is stored in the video saving step (S370). Can be converted to a video image file and saved.

또한, S380 단계에서 계산된 휴지 시간이 S390 단계에서 판단한 결과, 휴지 시간이 기준 시간을 경과한 것으로 판단되면, 촬영 멈춤 단계(S360)에서 동영상 촬영을 멈추고, 동영상 저장단계(S370)에서 입력 영상을 동영상 이미지 파일로 변환하여 저장할 수 있다. In addition, if the idle time calculated in step S380 is determined in step S390, and it is determined that the idle time has passed the reference time, the video recording stops in the recording stop step (S360), and the input image in the video storage step (S370) It can be converted to a video image file and saved.

동영상 저장단계(S370)에서 동영상 파일을 생성하여 저장하는 경우에, 휴지 시간이 기준 시간보다 긴 구간이 존재하여, 동영상 촬영을 멈추는 구간이 있는 경우에는, 이어지는 동영상 파일이 연속하여 하나의 동영상 파일로 저장될 수 있다. In the case of generating and storing the video file in the video storing step (S370), when there is a section in which the pause time is longer than the reference time, and there is a section in which video recording is stopped, the subsequent video file is continuously stored as one video file. Can be stored.

즉, 1회의 셔터 릴리즈 버튼 선택에 의하여 동영상 파일이 촬영되는 경우에, 휴지 시간으로 인하여 떨어져 있는 촬영 구간을 이어 붙이기 등을 통하여 연속하여 하나의 동영상 파일로 저장할 수 있다. That is, when a moving image file is captured by one shutter release button selection, the moving image file may be continuously stored as one moving image file by gluing apart the shooting sections separated by the pause time.

다른 실시예로서, 동영상 저장단계(S370)에서 동영상 파일을 생성하여 저장하는 경우에, 새로운 동영상 파일을 생성하여 저장하거나, 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙이기에 의하여 연속하여 동영상을 촬영하여 저장할 수 있다. As another embodiment, in the case of generating and storing a video file in the video storing step (S370), by creating a new video file and storing it, or by continuously attaching the newly generated video to the previously stored video file, You can shoot and save.

이때, 휴지 시간이 설정된 설정 시간보다 긴 경우에는 동영상 저장단계(S370)에서 새로운 동영상 파일을 생성하여 저장하고, 휴지 시간이 설정 시간보다 짧은 경우에는 동영상 저장단계(S370)에서 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙여 하나의 동영상 파일로 저장할 수 있다. In this case, when the pause time is longer than the set time, a new video file is generated and stored in the video saving step (S370), and when the pause time is shorter than the set time, the newly generated video is immediately before the video save step (S370). It can be saved as a video file by appending it to the video file saved in.

도 7 및 도 8에 각각 휴지 시간(70b, 80b)이 존재하는 경우의 불꽃놀이 장면에 대한 측정 휘도의 변화를 보여주는 그래프들(70, 80)이 도시되어 있다. 7 and 8 show graphs 70 and 80 showing the change in the measured luminance for the fireworks scene when the idle times 70b and 80b are present, respectively.

도 7에 도시된 실시예의 그래프(70)에서는 휴지 시간이 기준 시간보다 길어서 휴지 시간(70b)이 동영상 촬영이 정지되는 구간이 될 수 있다. 도 8에 도시된 실시예의 그래프(80)에서는 휴지 시간이 기준 시간보다 짧아서 휴지 시간(80b)이 동영상 촬영이 정지되지 아니하는 구간이 될 수 있다. In the graph 70 of the embodiment illustrated in FIG. 7, the pause time is longer than the reference time, and thus the pause time 70b may be a section in which video recording is stopped. In the graph 80 of the embodiment illustrated in FIG. 8, the pause time is shorter than the reference time, so that the pause time 80b may be a section in which video recording is not stopped.

도 7 및 도 8에 도시된 그래프들(70, 80)에서 촬영 시작 시점(71, 81)부터 촬영 종료 시점(74, 84)까지 동영상 촬영이 수행될 수 있다. 이때, 각각의 경우 측정 휘도가 기준 휘도보다 높은 구간이 불꽃놀이 장면 모드로 판단될 수 있다. In the graphs 70 and 80 illustrated in FIGS. 7 and 8, video recording may be performed from the recording start time points 71 and 81 to the recording end time points 74 and 84. In this case, a section in which the measured luminance is higher than the reference luminance may be determined as the fireworks scene mode.

도 7에 도시된 실시예의 그래프(70)에서는 촬영이 중지되는 휴지 시간(70b)이 존재하고, 촬영 시작 시점(71)부터 촬영 종료 시점(74) 사이에 촬영 멈춤 시점(72)과 촬영 재시작 시점(73)이 존재할 수 있다. 이때, 제1 구간(70a)과 제2 구간(70c)이 동영상 촬영 구간이 될 수 있다. In the graph 70 of the embodiment shown in FIG. 7, there is a pause time 70b at which shooting is stopped, and a shooting stop time 72 and a shooting restart time between the shooting start time 71 and the shooting end time 74 are present. 73 may be present. In this case, the first section 70a and the second section 70c may be a video photographing section.

이때, 휴지 시간이 7초인 경우, 기준 시간이 5초라면, 휴지 시간이 기준 시간을 경과하였으므로 휴지 시간(70b) 동안에는 동영상 촬영이 중지될 수 있다. 또한, 설정 시간이 30초라면, 휴지 시간(70b)이 설정 시간 보다 짧으므로, 제1 구간(70a)과 제2 구간(70c)이 이어 붙이기를 통하여 하나의 동영상 파일로 저장될 수 있다. In this case, when the rest time is 7 seconds, if the reference time is 5 seconds, since the rest time passes the reference time, video recording may be stopped during the rest time 70b. In addition, if the set time is 30 seconds, since the rest time 70b is shorter than the set time, the first section 70a and the second section 70c may be stored as one video file through pasting.

도 8에 도시된 실시예의 그래프(80)에서는 휴지 시간(80b)이 3초인 경우에 휴지 시간이 기준 시간보다 짧아 촬영이 중지되지 아니할 수 있다. 이때, 촬영 시작 시점(81)부터 촬영 종료 시점(84) 사이에 측정 휘도가 기준 휘도보다 낮아지기 시작하는 시점(82)과 다시 측정 휘도가 기준 휘도보다 높아지는 시점(83)이 존재할 수 있다. 이 경우, 휴지 시간(80b)이 촬영이 중지되는 구간이 아니므로, 제1 구간(80a)과 휴지 시간(80b), 및 제2 구간(80c)이 동영상 촬영 구간이 될 수 있다. In the graph 80 of the embodiment illustrated in FIG. 8, when the pause time 80b is 3 seconds, the pause time may be shorter than the reference time, and thus photographing may not be stopped. In this case, between the photographing start time point 81 and the photographing end point 84, there may be a time point 82 at which the measurement luminance starts to be lower than the reference luminance and a time point 83 at which the measurement luminance becomes higher than the reference luminance. In this case, since the idle time 80b is not a section in which photographing is stopped, the first section 80a, the pause time 80b, and the second section 80c may be a video photographing section.

한편, 디지털 영상 처리장치의 제어방법(S300)은 촬영 종료 신호의 입력 여부를 판단하는 단계(S395)를 더 구비할 수 있다. 이때, 촬영 종료 신호가 입력되는 것으로 판단되면 동영상 촬영을 종료하고, 촬영 종료 신호가 입력되지 아니한 것으로 판단되면 다시 영상 입력단계(S310), 휘도 측정단계(S320), 장면 판단단계(S330)를 수행할 수 있다. On the other hand, the control method (S300) of the digital image processing apparatus may further comprise the step (S395) of determining whether or not to input the shooting end signal. At this time, when it is determined that the shooting end signal is inputted, video recording is terminated, and when it is determined that the shooting end signal is not input, the image input step S310, the luminance measurement step S320, and the scene determination step S330 are performed again. can do.

본 발명에 따르면, 다양하게 변화되도록 연출되는 불꽃놀이 장면을 실시간으로 감지하면서 동영상으로 촬영을 수행함으로써, 최적의 불꽃놀이 장면을 놓치지 아니하고 촬영할 수 있다. According to the present invention, by performing a video recording while detecting the fireworks scene to be produced in various changes in real time, it is possible to shoot without missing the optimal fireworks scene.

도 4에는 본 발명에 따른 바람직한 실시예인 디지털 영상 처리장치(400)의 블록도가 도시되어 있다. 디지털 영상 처리장치(400)는 도 3에 도시된 디지털 영상 처리장치의 제어방법(S300)에 의하여 제어될 수 있다. 4 is a block diagram of a digital image processing apparatus 400 according to a preferred embodiment of the present invention. The digital image processing apparatus 400 may be controlled by the control method S300 of the digital image processing apparatus illustrated in FIG. 3.

도면을 참조하면, 디지털 영상 처리장치(400)는 영상 입력부(410); 휘도 측정부(420); 제어부(430); 저장부(440, 450); 표시부(460); 및 사용자 조작부(470)를 구비할 수 있다. 디지털 영상 처리장치(400)는 도 3에 도시된 디지털 영상 처리장치의 제어방법(S300)에 의하여 제어되는 것으로 도 3에 관한 설명에서와 동일한 사항에 대해서는 이를 참조한다. Referring to the drawings, the digital image processing apparatus 400 includes an image input unit 410; A luminance measuring unit 420; Control unit 430; Storage units 440 and 450; Display unit 460; And a user manipulation unit 470. The digital image processing apparatus 400 is controlled by the control method S300 of the digital image processing apparatus illustrated in FIG. 3, and the same as in the description of FIG. 3 will be referred to.

영상 입력부(410)는 입력 영상을 입력받는다. 휘도 측정부(420)는 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정한다. 제어부(430)는 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도로부터 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단하고, 상기 입력 영상이 불꽃놀이 장면으로 판단되는 경우에 상기 입력 영상을 동영상으로 촬영한다. The image input unit 410 receives an input image. The luminance measuring unit 420 measures the measured luminance corresponding to the luminance of the photographing environment to which the input image is input. The controller 430 determines whether the input image is an image of a fireworks scene from the measured luminance corresponding to the luminance of a shooting environment in which the input image is input, and when the input image is determined to be a fireworks scene, selects the input image. Shoot with video.

저장부(440, 450)에는 촬영된 동영상이 저장된다. 사용자 조작부(460)는 외 부로부터 원하는 지령을 입력할 수 있도록 사용자가 조작한다. 표시부(470)에는 입력 영상 및 촬영된 동영상이 재생되어 표시될 수 있다. The storage units 440 and 450 store the captured video. The user operation unit 460 manipulates the user to input a desired command from the outside. The display unit 470 may reproduce and display the input image and the captured video.

휘도 측정부(420)는 현재 입력되는 영상이 불꽃놀이 장면에 대한 촬영인지 판단하기 위한 측정 휘도를 측정할 수 있다. 제어부(430)에서 측정 휘도로부터 현재 입력되는 영상이 불꽃놀이 장면에 대한 촬영인지 판단할 수 있다. The luminance measuring unit 420 may measure the measured luminance to determine whether the currently input image is photographing a fireworks scene. The controller 430 may determine whether an image currently input from the measured luminance is photographing of a fireworks scene.

다른 실시예로서, 제어부(430)에서 입력 영상으로부터 측정 휘도를 측정할 수 있다. 이를 위하여, 입력 영상이 영상 처리되고, 입력 영상에서 휘도 성분이 추출되어, 그 휘도 성분으로부터 측정 휘도가 측정될 수 있다. In another embodiment, the controller 430 may measure the measured luminance from the input image. To this end, the input image may be image processed, a luminance component may be extracted from the input image, and the measured luminance may be measured from the luminance component.

이때, 측정 휘도는 입력된 영상에서 일부 영역 또는 전체 영역의 휘도를 검출하여 입력 영상의 측정 휘도를 측정할 수 있다. 이때, 측정 휘도는 입력 영상에서 자동 초점 조절을 위하여 포커스 값을 측정하는 적어도 하나 이상의 포커스 영역에서 측정될 수 있다. In this case, the measurement luminance may measure the luminance of the partial region or the entire region of the input image to measure the measurement luminance of the input image. In this case, the measured luminance may be measured in at least one focus area measuring a focus value for auto focus adjustment in the input image.

제어부(430)는 측정 휘도를 설정된 기준 휘도와 비교하여 측정 휘도가 설정 휘도 이상인 경우에 입력 영상이 불꽃놀이 장면의 영상으로 판단할 수 있다. The controller 430 may determine that the input image is an image of a fireworks scene when the measured luminance is greater than or equal to the set luminance by comparing the measured luminance with the set reference luminance.

또한, 동영상 촬영이 지속되는 촬영 지속 시간이 설정된 최대 허용 촬영 시간 보다 짧은 경우에 동영상 촬영을 수행하고, 촬영 지속 시간이 최대 허용 촬영 시간 이상인 경우에 동영상 촬영을 멈추고, 촬영된 동영상을 저장할 수 있다. In addition, video recording may be performed when the shooting duration for which the video shooting is continued is shorter than the set maximum allowed shooting time, and when the shooting duration is more than the maximum allowed shooting time, the video shooting may be stopped and the captured video may be stored.

또한, 측정 휘도가 기준 휘도보다 낮은 상태로 유지되는 시간에 해당하는 휴지 시간이 설정된 기준 시간보다 작으면 동영상 촬영을 수행하고, 휴지 시간이 기준 시간 이상이면 동영상 촬영을 멈추고, 촬영된 동영상을 저장할 수 있다. Also, if the pause time corresponding to the time when the measured luminance is lower than the reference luminance is smaller than the set reference time, the video recording is performed. If the pause time is longer than the reference time, the video recording is stopped and the captured video can be saved. have.

이때, 동영상의 저장 시에, 새로운 동영상 파일을 생성하여 저장하거나, 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙이기를 할 수 있다. At this time, when the video is stored, a new video file may be generated and stored, or the newly generated video may be pasted to the previously stored video file.

동영상 파일을 생성하여 저장하는 경우에, 휴지 시간이 기준 시간보다 긴 구간이 존재하여, 동영상 촬영을 멈추는 구간이 있는 경우에는, 이어지는 동영상 파일이 연속하여 하나의 동영상 파일로 저장될 수 있다. When a video file is generated and stored, when there is a section in which a pause time is longer than a reference time and there is a section in which video recording is stopped, the subsequent video file may be continuously stored as one video file.

다른 실시예로서, 동영상 파일을 생성하여 저장하는 경우에, 새로운 동영상 파일을 생성하여 저장하거나, 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙이기에 의하여 연속하여 동영상을 촬영하여 저장할 수 있다. In another embodiment, when a video file is generated and stored, a new video file may be generated and stored, or the newly generated video may be continuously captured by storing the new video file and pasted to the previously stored video file.

이때, 휴지 시간이 설정된 설정 시간보다 긴 경우에는 새로운 동영상 파일을 생성하여 저장하고, 휴지 시간이 설정 시간보다 짧은 경우에는 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙여 하나의 동영상 파일로 저장할 수 있 다. At this time, if the pause time is longer than the set time, a new video file is created and saved. If the pause time is shorter than the set time, the newly created video can be saved as a single video file after the previously saved video file. have.

입력 영상을 입력받는 영상 입력부(410)는 도 2의 광학계(OPS), 광전 변환부(OEC), CDS-ADC 소자(201) 등을 포함할 수 있다. 표시부(470)에는 입력 영상 및 촬영된 동영상이 재생될 수 있다. The image input unit 410 that receives the input image may include the optical system OPS, the photoelectric converter OEC, the CDS-ADC device 201, and the like of FIG. 2. The display unit 470 may reproduce an input image and a captured video.

저장부(440, 450)에는 휘도 측정부(220)를 통하여 입력되거나 입력 영상에서 측정된 측정 휘도, 및/또는 기준 휘도, 및/또는 기준 시간, 및/또는 설정 시간, 및/또는 최대 허용 촬영 시간 등이 일시적으로 또는 비휘발성으로 저장될 수 있다. In the storage units 440 and 450, measurement luminance, and / or reference luminance, and / or reference time, and / or setting time, and / or maximum allowable photographing, which are input through the luminance measuring unit 220 or measured in the input image. The time and the like can be stored temporarily or nonvolatile.

저장부(440, 450)는 제1 저장부(440) 및 제2 저장부(450)를 구비할 수 있다. 제1 저장부(440)는 데이터를 일시적으로 저장하는 DRAM(도 2의 204) 또는 캐시 메모리 등이 될 수 있다. 제2 저장부(450)는 데이터가 비휘발성으로 저장되는 것으로, 플래시 메모리 또는 메모리 카드 인터페이스(도 2의 206)를 통하여 인식되는 메모리 카드 등이 될 수 있다. The storage units 440 and 450 may include a first storage unit 440 and a second storage unit 450. The first storage unit 440 may be a DRAM (204 of FIG. 2) or a cache memory that temporarily stores data. The second storage unit 450 stores data non-volatilely and may be a flash memory or a memory card recognized through the memory card interface 206 of FIG. 2.

이때, 제1 저장부(440)에는 측정 휘도, 계산된 휴지 시간 및 촬영 지속 시간 등이 일시적으로 저장될 수 있다. 제2 저장부(740)에는 기준 휘도, 및/또는 기준 시간, 및/또는 설정 시간, 및/또는 최대 허용 촬영 시간 등의 미리 설정되어 저장되는 설정값들과, 촬영된 동영상 파일로 비휘발성으로 저장될 수 있다. In this case, the first storage unit 440 may temporarily store the measured luminance, the calculated idle time, and the shooting duration. The second storage unit 740 may be configured to store preset values such as reference luminance, and / or reference time, and / or setting time, and / or maximum allowable shooting time, and non-volatile image data. Can be stored.

사용자 조작부(460)는 외부로부터 원하는 지령을 입력할 수 있도록 사용자가 조작한다. 방향 버튼(도 1의 21), 메뉴-OK 버튼(도 1의 22), 셔터 릴리즈 버튼(도 1의 26), 및 전원 스위치(도 1의 28) 등은 하는 사용자 조작부(460)에 포함될 수 있다. The user operation unit 460 manipulates the user to input a desired command from the outside. The direction button (21 in FIG. 1), the menu-OK button (22 in FIG. 1), the shutter release button (26 in FIG. 1), and the power switch (28 in FIG. 1) may be included in the user control unit 460. have.

본 발명은 첨부된 도면에 도시된 일 실시예를 참고로 설명되었으나, 이는 예시적인 것에 불과하며, 당해 기술분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 균등한 타 실시예가 가능하다는 점을 이해할 수 있을 것이다. 따라서, 본 발명의 진정한 보호 범위는 첨부된 청구 범위에 의해서만 정해져야 할 것이다. Although the present invention has been described with reference to one embodiment shown in the accompanying drawings, it is merely an example, and those skilled in the art may realize various modifications and equivalent other embodiments therefrom. I can understand. Accordingly, the true scope of protection of the invention should be defined only by the appended claims.

도 1은 본 발명에 따른 디지털 영상 처리장치의 실시예로서, 디지털 카메라의 뒷면 외형을 보여주는 도면이다. 1 is a diagram illustrating a rear surface of a digital camera as an embodiment of a digital image processing apparatus according to the present invention.

도 2는 도 1의 디지털 카메라 내부에 포함될 수 있는 제어장치를 개략적으로 도시한 블록도이다. FIG. 2 is a block diagram schematically illustrating a control apparatus that may be included in the digital camera of FIG. 1.

도 3은 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치의 제어방법을 개략적으로 도시한 흐름도이다. 3 is a flowchart schematically illustrating a control method of a digital image processing apparatus as a preferred embodiment according to the present invention.

도 4는 본 발명에 따른 바람직한 실시예로서, 디지털 영상 처리장치를 개략적으로 도시한 블록도이다. 4 is a block diagram schematically showing a digital image processing apparatus according to a preferred embodiment of the present invention.

도 5 및 도 6은 불꽃놀이 장면의 시간에 따른 변화에 대한 측정 휘도의 변화의 예를 보여주는 도면들이다. 5 and 6 are diagrams showing an example of the change in the measured luminance with respect to the change over time of the fireworks scene.

도 7은 휴지 시간이 기준 시간보다 긴 경우의 불꽃놀이 장면에 대한 측정 휘도의 변화를 보여주는 도면이다. FIG. 7 is a view showing a change in measured luminance of a fireworks scene when the pause time is longer than the reference time.

도 8은 휴지 시간이 기준 시간보다 짧은 경우의 불꽃놀이 장면에 대한 측정 휘도의 변화를 보여주는 도면이다. FIG. 8 is a view showing a change in measured luminance of a fireworks scene when the pause time is shorter than the reference time.

Claims

(a) 입력 영상을 입력받는 단계; (a) receiving an input image;

(b) 상기 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정하는 단계; (b) measuring a measurement luminance corresponding to the luminance of a photographing environment to which the input image is input;

(c) 상기 측정 휘도로부터 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단하는 단계; 및 (c) determining whether the input image is an image of a fireworks scene from the measured luminance; And

(d) 상기 입력 영상을 동영상으로 촬영하는 단계를 구비하는 디지털 영상 처리장치의 제어방법.and (d) photographing the input image as a moving image.

제1항에 있어서, The method of claim 1,

상기 측정 휘도의 측정이 일정한 시간 간격 또는 일정한 프레임 간격으로 이루어지는 디지털 영상 처리장치의 제어방법.The control method of the digital image processing apparatus, wherein the measurement of the measured luminance is performed at a constant time interval or at a constant frame interval.

제1항에 있어서, The method of claim 1,

상기 (c) 단계에서, 상기 측정 휘도를 설정된 기준 휘도와 비교하여 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단하는 디지털 영상 처리장치의 제어방법.In step (c), it is determined whether the input image is a video of a fireworks scene by comparing the measured luminance with a set reference luminance.

제3항에 있어서, The method of claim 3,

상기 측정 휘도가 상기 기준 휘도보다 낮은 상태로 유지되는 시간에 해당하는 휴지 시간이 설정된 기준 시간보다 작으면 상기 (d) 단계가 수행되는 디지털 영상 처리장치의 제어방법.And (d) if the idle time corresponding to the time at which the measured luminance is kept lower than the reference luminance is smaller than a preset reference time.

제3항에 있어서, The method of claim 3,

(e) 상기 입력 영상에 대한 동영상 촬영을 멈추는 단계, 및 (e) stopping video recording on the input image; and

(f) 촬영된 상기 동영상을 저장하는 단계를 더 구비하는 디지털 영상 처리장치의 제어방법.and (f) storing the captured video.

제5항에 있어서, The method of claim 5,

상기 (f) 단계에 새로운 동영상 파일을 생성하여 저장하거나, 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙이는 디지털 영상 처리장치의 제어방법.And generating a new video file and storing the new video file in step (f) or attaching the newly generated video to the previously stored video file.

제5항에 있어서, The method of claim 5,

상기 동영상 촬영이 지속되는 촬영 지속 시간을 설정된 최대 허용 촬영 시간과 비교하는 단계를 더 구비하고, And comparing the shooting duration for which the video shooting is continued with a set maximum allowable shooting time.

상기 촬영 지속 시간이 상기 최대 허용 촬영 시간 이상인 경우에 상기 (e) 단계 및 상기 (f) 단계가 수행되는 디지털 영상 처리장치의 제어방법.And (e) and (f) are performed when the shooting duration is equal to or greater than the maximum allowable shooting time.

제7항에 있어서, The method of claim 7, wherein

상기 측정 휘도가 상기 기준 휘도보다 낮은 상태로 유지되는 시간에 해당하는 휴지 시간이 설정된 기준 시간 이상인 경우에 상기 (e) 단계 및 상기 (f) 단계가 수행되는 디지털 영상 처리장치의 제어방법.And (e) and (f) are performed when an idle time corresponding to a time at which the measured luminance is kept lower than the reference luminance is equal to or greater than a set reference time.

제7항에 있어서, The method of claim 7, wherein

상기 촬영 지속 시간이 상기 최대 허용 촬영 시간보다 짧은 경우에 상기 (a) 단계 내지 상기 (c) 단계가 수행되는 디지털 영상 처리장치의 제어방법.And (c) to (c) when the photographing duration is shorter than the maximum allowable photographing time.

제8항에 있어서, The method of claim 8,

상기 휴지 시간이 설정된 설정 시간보다 긴 경우에는 상기 (f) 단계에서 새로운 동영상 파일을 생성하여 저장하고, If the pause time is longer than the set time, create and store a new video file in step (f).

상기 휴지 시간이 상기 설정 시간보다 짧은 경우에는 상기 (f) 단계에서 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙이는 디지털 영상 처리장치의 제어방법.And if the idle time is shorter than the preset time, attaching the newly generated video to the immediately preceding video file stored in the step (f).

제1항에 있어서, The method of claim 1,

상기 측정 휘도를 상기 입력 영상의 적어도 일부 영역의 휘도를 측정하여 측정하는 디지털 영상 처리장치의 제어방법.And controlling the measured luminance by measuring luminance of at least a portion of the input image.

입력 영상을 입력받는 영상 입력부; An image input unit which receives an input image;

상기 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도로부터 상기 입력 영상이 불꽃놀이 장면의 영상인지를 판단하고, 상기 입력 영상이 불꽃놀이 장면으로 판단되는 경우에 상기 입력 영상을 동영상으로 촬영하는 제어부; 및 It is determined whether the input image is an image of a fireworks scene from the measured luminance corresponding to the luminance of a shooting environment to which the input image is input, and when the input image is determined to be a fireworks scene, photographing the input image as a video. Control unit; And

촬영된 상기 동영상이 저장되는 저장부를 구비하는 디지털 영상 처리장치.And a storage unit for storing the captured video.

제12항에 있어서, The method of claim 12,

상기 측정 휘도를 상기 입력 영상의 적어도 일부 영역의 휘도를 측정하여 측정하는 디지털 영상 처리장치.And measuring the measured luminance by measuring luminance of at least a portion of the input image.

제12항에 있어서, The method of claim 12,

상기 입력 영상이 입력되는 촬영 환경의 휘도에 해당하는 측정 휘도를 측정하는 휘도 측정부를 더 구비하는 디지털 영상 처리장치.And a luminance measuring unit which measures a measurement luminance corresponding to the luminance of a photographing environment to which the input image is input.

제12항에 있어서, The method of claim 12,

상기 측정 휘도의 측정이 일정한 시간 간격 또는 일정한 프레임 간격으로 이루어지는 디지털 영상 처리장치.And the measurement luminance is measured at regular time intervals or at constant frame intervals.

제12항에 있어서, The method of claim 12,

상기 측정 휘도를 설정된 기준 휘도와 비교하여 상기 측정 휘도가 상기 설정 휘도 이상인 경우에 상기 입력 영상이 불꽃놀이 장면의 영상으로 판단하는 디지털 영상 처리장치.And comparing the measured luminance with a set reference luminance and determining that the input image is an image of a fireworks scene when the measured luminance is greater than or equal to the set luminance.

제16항에 있어서, The method of claim 16,

상기 동영상 촬영이 지속되는 촬영 지속 시간이 설정된 최대 허용 촬영 시간 보다 짧은 경우에 상기 동영상 촬영을 수행하고, 상기 촬영 지속 시간이 상기 최대 허용 촬영 시간 이상인 경우에 상기 동영상 촬영을 멈추고, 촬영된 동영상을 저장하는 디지털 영상 처리장치.When the shooting duration for which the moving picture is taken continues is shorter than the set maximum allowed shooting time, the moving picture is taken, and when the shooting duration is greater than or equal to the maximum allowed shooting time, the shooting of the moving picture is stopped and the captured video is stored. Digital image processing apparatus.

제16항에 있어서, The method of claim 16,

상기 측정 휘도가 상기 기준 휘도보다 낮은 상태로 유지되는 시간에 해당하는 휴지 시간이 설정된 기준 시간보다 작으면 상기 동영상 촬영이 수행되고, 상기 휴지 시간이 상기 기준 시간 이상이면 상기 동영상 촬영을 멈추고, 촬영된 동영상을 저장하는 디지털 영상 처리장치.When the pause time corresponding to the time at which the measured luminance is lower than the reference luminance is smaller than the set reference time, the video recording is performed. Digital image processing device for storing video.

제12항에 있어서, The method of claim 12,

상기 동영상의 저장 시에, 새로운 동영상 파일을 생성하여 저장하거나, 새로이 생성된 동영상을 직전에 저장된 동영상 파일에 이어 붙이는 디지털 영상 처리장치.The digital image processing apparatus for generating and storing a new video file or attaching the newly generated video to the immediately stored video file when the video is stored.