KR100858932B1 - Apparatus and method for controlling power of display device using camera - Google Patents
Apparatus and method for controlling power of display device using camera Download PDFInfo
- Publication number
- KR100858932B1 KR100858932B1 KR1020070065062A KR20070065062A KR100858932B1 KR 100858932 B1 KR100858932 B1 KR 100858932B1 KR 1020070065062 A KR1020070065062 A KR 1020070065062A KR 20070065062 A KR20070065062 A KR 20070065062A KR 100858932 B1 KR100858932 B1 KR 100858932B1
- Authority
- KR
- South Korea
- Prior art keywords
- image
- face
- display device
- face shape
- power
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/63—Generation or supply of power specially adapted for television receivers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Signal Processing (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
Description
도 1은 텔레비전에 작은 카메라를 통해 시야각에 존재하는 사람을 인식하는 것을 도시한 것이다.1 illustrates the recognition of a person present at a viewing angle through a small camera on a television.
도 2는 카메라를 통해 정면 및 광학 디스플레이 장치의 시야각에 인식된 사람 얼굴을 도시한 것이다.2 shows a human face recognized by the camera at the front and the viewing angle of the optical display device.
도 3은 본 발명에 의한 카메라를 이용한 디스플레이 장치에 대한 구성을 블록도로 도시한 것이다.3 is a block diagram illustrating a configuration of a display apparatus using a camera according to the present invention.
도 4는 본 발명에 의한 카메라를 이용한 디스플레이 장치의 구체적인 실시예에 대한 구성을 블록도로 도시한 것이다.4 is a block diagram illustrating a configuration of a specific embodiment of a display apparatus using a camera according to the present invention.
도 5는 본 발명에 의한 카메라를 이용한 디스플레이 장치의 전원 관리 방법의 실시예를 흐름도로 도시한 것이다.5 is a flowchart illustrating an embodiment of a power management method of a display apparatus using a camera according to the present invention.
도 6은 사람의 피부색 데이터를 도시한 것이다.6 shows skin color data of a person.
도 7은 사람의 얼굴 형태를 나타내는 모델을 도시한 것이다. 7 shows a model representing the shape of a human face.
도 8은 사람의 얼굴 피부색에 따른 사람 얼굴 검출을 도시한 것이다. 8 illustrates detection of a human face according to a human skin color.
도 9는 시청자나 사용자의 얼굴 검출의 일예에 대한 흐름도를 도시한 것이다.9 is a flowchart illustrating an example of face detection of a viewer or a user.
도 10은 영상에서 얼굴 검출은 위한 3개의 검출기를 도시한 것이다.10 shows three detectors for face detection in an image.
본 발명은 전원 관리 장치에 관한 것으로서, 카메라를 이용한 디스플레이 장치의 전원 관리 장치 및 그 방법에 관한 것이다.The present invention relates to a power management apparatus, and to a power management apparatus and a method of a display apparatus using a camera.
현재 에너지 절약차원에서 절전의 필요성이 강조되고 있고, 또한 소비자가 상품을 선택할 때 역시 절전효과가 커다란 영향을 미치고 있다. 특히 전지 또는 밧데리에 의존하는 모바일 제품의 경우에는 전지 또는 밧데리의 사용시간을 연장시키는 것이 소비자의 선택에 매우 중요한 인자로 작용하고 있는 실정이다.Currently, the necessity of power saving is emphasized in terms of energy saving, and the power saving effect also has a great effect when a consumer selects a product. In particular, in the case of mobile products that rely on batteries or batteries, extending the use time of the batteries or batteries is a very important factor in the consumer's choice.
종래에는 제품에 전원을 공급할때 전원 공급 스위치를 조작하거나, 제품에 전원이 공급된 상태에서 제품에 내장된 프로그램의 조작을 통하여 전원을 오프하고 일정시간이 경과하면 다시 제품에 전원이 공급되도록 하는 방법이 이용되어 왔다.Conventionally, when the power is supplied to the product, the power supply switch is operated, or the power is turned off by operating a program built in the product while the power is supplied to the product. Has been used.
그러나 전원 공급 스위치는 제품외부로 도출되게끔 구성되어야 하므로, 분진이 많이 발생하는 장소에서 사용하거나, 방수가 필요한 경우 등에는 문제점이 있었다.However, since the power supply switch should be configured to be drawn out of the product, there is a problem when used in a place where a lot of dust is generated or when waterproofing is required.
제품에 전원이 공급된 상태에서 사용전원을 최소화하기 위한 방법으로는 조작이 이루어지지 않은 상태로 일정시간이 경과하면 절전모드로 전환하는 방법, 조작이 이루어지지 않은 상태로 일정시간이 경과하면 자동적으로 전원을 차단하는 방법 등이 사용되어져 왔다. 또한 전지 또는 밧데리를 사용하는 모바일 제품의 경우 에는 상기의 방법외에도 잔류전원이 일정치 이하로 될때 음성이나 화면을 통하여 전원이 부족하다는 경고 메세지나 전원을 즉시 오프하라는 경고 메세지를 통하여 사용자의 주의를 환기시키는 방법이 사용되어져 왔다. 그러나 상기의 절전모드로 전환하는 방법이나 일정시간이 경과하면 자동적으로 전원을 차단하는 방법의 경우, 제품에 고유의 시간값이 설정되어 사용자가 임의로 절전모드로 전환하기까지의 시간이나, 전원이 차단되기까지의 시간을 설정하지 못함으로써 사용자의 환경에 맞추어 사용할 수 없게 되어, 불필요한 전원이 소비되게 된다.As a way to minimize the power used when the product is powered on, the device enters the power saving mode after a certain period of time without operation, and automatically after a certain period of time with no operation. A method of shutting off the power has been used. In addition, in case of mobile products using batteries or batteries, in addition to the above methods, when the remaining power goes below a certain level, a warning message notifying the user of power shortage through voice or screen or warning message to turn off the power immediately. A method has been used. However, in the above method of switching to the power saving mode or the method of automatically shutting off the power after a certain period of time, a unique time value is set in the product and the time until the user arbitrarily enters the power saving mode or the power is cut off. By failing to set the time until the terminal is not available, it cannot be used according to the user's environment, and unnecessary power is consumed.
아울러, 종래의 디스플레이 전원 관리 장치들은 대부분 텔레비전 혹은 광학 디스플레이 장치에 입력되는 영상신호의 유무에 따라 전원을 관리하였다. 이는 텔레비전이나 광학 디스플레이 장치를 사용하는 사용자 중심의 효율적인 전원 관리라고 볼 수 없었다. In addition, most conventional display power management devices manage power according to the presence or absence of an image signal input to a television or an optical display device. This could not be seen as efficient user-centered power management using televisions or optical display devices.
그리고 적외선 센서나 동작 감지 센서를 이용하여 전원을 관리하는 시스템이 제안되었으나 상기 적외선 센서는 실내 온도와 작업 환경의 영향을 크게 받고, 애완동물이나 다른 실내 열원까지 감지하는 문제점이 있다. 또한 동작 감지 센서는 사람이 움직이지 않는 경우에는 사람을 감지하지 못하는 문제점이 있다.In addition, a system for managing power using an infrared sensor or a motion detection sensor has been proposed, but the infrared sensor is greatly affected by the indoor temperature and the working environment, and has a problem of detecting a pet or another indoor heat source. In addition, the motion detection sensor may not detect a person when the person does not move.
본 발명이 이루고자 하는 첫 번째 기술적 과제는 카메라를 통해 영상 내에 존재하는 다수의 사람의 얼굴 형태를 정확히 인식하여 텔레비전이나 일반 광학 디스플레이 장치의 전원을 절약할 수 있도록 하는 카메라를 이용한 자동 전원 관리 장치를 제공하는 것이다.The first technical problem to be achieved by the present invention is to provide an automatic power management device using a camera that can accurately recognize the shape of the plurality of people in the image through the camera to save power of the television or general optical display device. It is.
그리고, 본 발명이 이루고자 하는 두 번째 기술적 과제는 상기 카메라를 이용한 자동 전원 관리 장치를 이용한 카메라를 이용한 자동 전원 관리 방법을 제공하는 것이다.Another object of the present invention is to provide an automatic power management method using a camera using an automatic power management apparatus using the camera.
상기 첫 번째 기술적 과제를 이루기 위하여 본 발명은,
디스플레이 장치의 시야각 내에서 촬영된 영상이 사람 얼굴인지 인식하고 상기 인식된 사람 얼굴이 사라지면 상기 사람 얼굴이 사라지는 것을 인식하는 얼굴인식 처리부; 및 상기 얼굴인식 처리부에서 얼굴이 사라지는 것이 검출되면 디스플레이 장치의 전원을 오프하는 전원 제어부를 포함하고, 상기 얼굴인식 처리부에 의해 상기 사람 얼굴이 사라지는 것이 검출되면, 텔레비전의 경우에는 화면만 오프하되 소리는 계속 출력되게 하고, 광학 영상 장치는 화면을 오프하게 하는 상태조건을 생성하여 상기 전원 제어부로 전달하는 조건 처리부를 더 포함하는 카메라를 이용한 디스플레이 장치의 전원 관리 장치를 제공한다.The present invention to achieve the first technical problem,
A face recognition processor recognizing whether the image photographed within the viewing angle of the display device is a human face and recognizing that the human face disappears when the recognized human face disappears; And a power control unit to turn off the power of the display apparatus when the face recognition processor detects the disappearance of the face. When the face recognition processor detects that the human face disappears, only the screen is turned off in the case of the television. The optical imaging apparatus continues to be output, and the optical imaging apparatus provides a power management apparatus of a display apparatus using a camera, which further includes a condition processor configured to generate a state condition for turning off a screen and transmit it to the power controller.
삭제delete
상기 카메라를 이용한 자동 전원 관리 장치는 디스플레이 장치의 시야각 내의 물체를 촬영하는 카메라를 더 포함함이 바람직하다.Preferably, the automatic power management apparatus using the camera further includes a camera that photographs an object within a viewing angle of the display device.
또한, 상기 첫 번째 기술적 과제를 이루기 위하여 본 발명은,In addition, the present invention to achieve the first technical problem,
디스플레이 장치의 시야각 내에서 촬영된 영상데이터를 이용하여 현재 영상과 이전 영상의 차에 해당하는 차영상을 생성하는 차영상 생성부; 상기 차영상에 얼굴 형상이 있는지 검사하는 차영상 검색부; 상기 차영상 검색부에서 얼굴 형상을 검색하지 못하거나 상기 차영상 생성부에서 소정 시간 동안 차영상을 생성하지 못 한 경우, 이전 영상에서 얼굴 형상을 검출하는 이전영상 검색부; 및 상기 이전 영상에서 얼굴 형상이 검출되지 않으면 시청자가 없는 것으로 판단하여 디스플레이 장치의 전원을 끄는 전원 제어부를 포함하는 카메라를 이용한 디스플레이 장치의 전원 관리 장치를 제공한다.A difference image generation unit generating a difference image corresponding to a difference between the current image and the previous image by using image data photographed within the viewing angle of the display device; A difference image search unit for inspecting whether the difference image has a face shape; A previous image retrieval unit detecting a face shape from a previous image when the difference image retrieval unit fails to retrieve a face shape or the difference image generation unit fails to generate a difference image for a predetermined time; And a power controller configured to turn off the power of the display device by determining that there is no viewer when the face shape is not detected from the previous image.
상기 차영상 검색부는 얼굴피부색과 얼굴 형태를 이용하여 얼굴 형상을 검색함이 바람직하다. 상기 이전 영상 검색부는 얼굴피부색과 얼굴 형태를 이용하여 이전 영상에서 얼굴 형상을 검색함이 바람직하다. 상기 전원 제어부는 상기 이전 영상 검색부에서 얼굴 형상이 검출되지 않아 시청자가 사라진 것으로 판단되면, 텔레비전의 경우에는 화면만 오프하고 소리는 계속 나게 하고, 광학 영상 장치는 화면을 오프하는 것이 바람직하다. 상기 본 발명은 전원이 켜질 때의 초기 영상에 얼굴 형상이 있는 지 검출하는 초기영상 검사부를 더 구비하고, 상기 전원 제어부는 초기영상에 얼굴 형상이 없는 경우, 소정 시간 후의 영상에서 얼굴 형상을 검색하여 얼굴 형상이 없는 경우, 디스플레이 장치의 전원을 끄는 것을 더 포함함이 바람직하다.The difference image retrieval unit preferably searches for a face shape using a face skin color and a face shape. The previous image search unit may search for a face shape in a previous image by using a face skin color and a face shape. If it is determined that the viewer disappears because the face shape is not detected by the previous image retrieval unit, the power control unit may turn off the screen and keep the sound, and the optical imaging apparatus may turn off the screen. The present invention further includes an initial image inspection unit for detecting whether the initial image has a face shape when the power is turned on, and the power control unit searches for the face shape in the image after a predetermined time when the initial image has no face shape. If there is no face shape, it is preferable to further include turning off the display device.
상기 두 번째 기술적 과제를 이루기 위하여 본 발명은 디스플레이 장치의 시야각 내에서 촬영된 영상데이터를 이용하여 현재 영상과 이전 영상의 차에 해당하는 차영상을 검출하는 단계; 상기 차영상에 얼굴 형상이 있는지 검사하는 단계; 상기 차영상에 얼굴 형상이 없거나 소정 시간 동안 차영상이 검출되지 않을 경우, 이전 영상에서 얼굴 형상을 검출하는 단계; 및 상기 이전 영상에서 얼굴 형상이 검출되지 않으면 시청자가 없는 것으로 판단하여 디스플레이 장치의 전원을 끄는 단계 를 포함하는 카메라를 이용한 디스플레이 장치의 전원 관리 방법을 제공한다. According to an aspect of the present invention, there is provided a method for detecting a difference between a current image and a previous image using image data photographed within a viewing angle of a display device; Checking whether there is a face shape in the difference image; Detecting a face shape from a previous image when the difference image does not have a face shape or the difference image is not detected for a predetermined time; And determining that there is no viewer when the face shape is not detected in the previous image, and turning off the power of the display device.
상기 본 발명에 의한 카메라를 이용한 자동 전원 관리 방법은 전원이 켜질 때 초기 영상에 얼굴 형상이 있는 지 검출하는 단계; 초기영상에 얼굴 형상이 없는 경우, 소정 시간 후의 영상에서 얼굴 형상을 검출하는 단계; 및 상기 소정 시간 후에도 얼굴 형상이 없는 경우, 디스플레이 장치의 전원을 끄는 단계를 더 포함함이 바람직하다.The automatic power management method using the camera according to the present invention comprises the steps of: detecting whether the initial image has a face shape when the power is turned on; Detecting a face shape in the image after a predetermined time when there is no face shape in the initial image; And if there is no face shape even after the predetermined time, turning off the display device.
그리고 상기 기재된 발명을 컴퓨터에서 실행시키기 위한 프로그램을 기록한 컴퓨터로 읽을 수 있는 기록매체를 제공한다.A computer readable recording medium having recorded thereon a program for executing the invention described above is provided.
이하에서는 첨부 도면 및 바람직한 실시예를 참조하여 본 발명을 상세히 설명한다. 참고로, 하기 설명에서 본 발명의 요지를 불필요하게 흐릴 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략한다.Hereinafter, the present invention will be described in detail with reference to the accompanying drawings and preferred embodiments. For reference, detailed descriptions of well-known functions and configurations that may unnecessarily obscure the subject matter of the present invention will be omitted in the following description.
본 발명에 의한 카메라를 이용한 디스플레이 장치의 전원 관리 장치는 도 1에 도시된 바와 같이 텔레비전 혹은 광학 디스플레이 장치에 설치된 소형 CCD 혹은 CMOS 타입의 작은 카메라를 통해 정면 및 광학 디스플레이 장치의 시야각에 존재하는 사람을 인식하여, 사람이 없을 경우에는 전력 소모량을 줄이기 위해 전원을 끄거나 대기 상태로 전환하고 사람이 다시 돌아와 TV나 광학 디스플레이 장치의 시야각에 존재하는 경우에는 전원을 켜서 사용자가 화면을 계속 볼 수 있도록 한다. 도 2는 카메라를 통해 정면 및 광학 디스플레이 장치의 시야각에 인식된 사람 얼굴을 도시한 것이다.As shown in FIG. 1, a power management apparatus of a display apparatus using a camera according to the present invention uses a small CCD or CMOS type small camera installed in a television or an optical display apparatus to detect a person present at the front and the viewing angle of the optical display apparatus. Recognize and turn off the power or go to standby to reduce power consumption when nobody is present, and turn on the power when the person comes back and is in the viewing angle of the TV or optical display device so that the user can continue to see the screen . 2 shows a human face recognized by the camera at the front and the viewing angle of the optical display device.
구체적으로는 사용자가 화면을 보지 않는 경우에는 텔레비전의 경우에는 화 면은 오프(off)되고 소리는 그대로 나도록 하고, 일반 광학 디스플레이 장치의 경우에는 화면이 자동으로 꺼지도록 하여 전원을 절약할 수 있도록 한다.Specifically, when the user does not see the screen, the screen is turned off and the sound is output in the case of a television, and in the case of a general optical display device, the screen is automatically turned off to save power. .
도 3은 본 발명에 의한 카메라를 이용한 디스플레이 장치에 대한 구성을 블록도로 도시한 것으로서, 카메라(300), 얼굴인식처리부(320), 조건처리부(330) 및 전원 제어부(340)를 포함하여 이루어진다. 3 is a block diagram illustrating a configuration of a display apparatus using a camera according to the present invention, and includes a
상기 카메라(300)는 디스플레이 장치의 시야각 내의 물체를 촬영한다. 상기 디스플레이 장치의 예로는 텔레비전이나 광학 영상 정치가 될 수 있다. 상기 카메라는 상기 텔레비전이나 광학 영상 장치에 부착될 수 있다. 사용자가 텔레비전이나 광학 영상 장치의 전원을 켜면 상기 장치에 부착되어 있는 카메라에 입력되는 영상을 얼굴 인식 처리부(320)로 전달한다, The
상기 얼굴인식 처리부(320)는 디스플레이 장치의 시야각 내에서 촬영된 영상을 이용하여 사람 얼굴을 인식하며, 사람 얼굴이 사라지면 이를 검출한다. 또한 상기 얼굴인식 처리부(320)는 시야각 내에 존재하는 사람 얼굴을 인식하여 상태조건을 전달할 수 있다. The
상기 조건 처리부(330)는 상기 얼굴인식 처리부(320)으로부터 상태조건을 받아 얼굴인식이 되지 않는 사용자 설정시간에 대한 조건을 비교한 후 전원 제어부(140)에 온/오프 정보를 전달한다.The
상기 전원 제어부(340)는 상기 얼굴인식 처리부(320)에서 얼굴이 사라지는 것이 검출되면 디스플레이 장치의 전원을 오프(off)하며, 상기 조건처리부(330)로부터 온/오프 정보가 입력되면 이에 따라 상기 디스플레이 장치를 온/오프 할 수 있다. 예를 들어 상기 전원 제어부(340)는 상기 얼굴인식처리부(320)에서 얼굴이 사라지는 것이 검출되면, 상기 조건 처리부(330)로부터 받은 정보에 따라 텔레비전의 경우에는 화면만 오프하고 소리는 계속 나게 하고, 광학 영상 장치일 경우에는 화면을 오프할 수 있다. The power controller 340 turns off the power of the display apparatus when the
도 4는 본 발명에 의한 카메라를 이용한 디스플레이 장치의 구체적인 실시예에 대한 구성을 블록도로 도시한 것으로서, 카메라(400), 초기영상 검사부(410), 차영상 생성부(420), 차영상 검색부(430), 이전영상 검색부(440) 및 전원 제어부(450)를 포함하여 이루어진다. 4 is a block diagram showing a configuration of a specific embodiment of a display apparatus using a camera according to the present invention, and includes a
상기 카메라(400)는 디스플레이 장치의 시야각 내의 물체를 촬영한다. 상기 디스플레이 장치는 텔레비전이나 광학 영상 장치가 될 수 있다. 상기 초기영상 검사부(410)는 전원이 켜질 때의 초기 영상에 얼굴 형상이 있는 지 검출한다. 상기 차영상 생성부(420)는 디스플레이 장치의 시야각 내에서 촬영된 영상데이터를 이용하여 현재 영상과 이전 영상의 차를 생성한다. 상기 차영상 검색부(430)는 상기 차영상에 얼굴 형상이 있는지 검사하며, 얼굴피부색과 얼굴 형태를 이용하여 얼굴 형상을 검색할 수 있다.The
상기 이전영상 검색부(440)는 상기 차영상 검색부(430)에서 얼굴 형상을 검출하지 못했거나 상기 차영상 생성부(420)에서 소정 시간 동안 차영상이 생성되지 않으면, 이전 영상에서 얼굴 형상을 검색한다. 상기 얼굴 형상 검색은 얼굴피부색과 얼굴 형태를 이용하여 수행한다. 상기 전원 제어부(450)는 상기 이전 영상에서 얼굴 형상이 검출되지 않으면 시청자가 없는 것으로 판단하여 디스플레이 장치의 전원을 끈다. 상기 전원 제어부(450)는 상기 이전 영상 검색부에서 얼굴 형상이 검출되지 않아 시청자가 사라진 것으로 판단되면, 텔레비전의 경우에는 화면만 오프하고 소리는 계속 나게 하고, 광학 영상 장치는 화면을 오프하게 할 수 있다. 또한 상기 전원 제어부(450)는 초기영상에 얼굴 형상이 없는 경우, 소정 시간 후의 영상에서 얼굴 형상을 검색하여 얼굴 형상이 없는 경우, 디스플레이 장치의 전원을 끈다.If the difference
도 5는 본 발명에 의한 카메라를 이용한 디스플레이 장치의 전원 관리 방법의 실시예를 흐름도로 도시한 것이다. 먼저, 전원이 켜질 때 초기 영상에 얼굴 형상이 있는 지 검출한다.(S500 단계) 초기영상에 얼굴 형상이 없는 경우, 소정 시간 후의 영상에서 얼굴 형상을 검출한다.(S510 단계) 상기 소정 시간 후에도 얼굴 형상이 없는 경우, 디스플레이 장치의 전원을 오프한다.(S570 단계)5 is a flowchart illustrating an embodiment of a power management method of a display apparatus using a camera according to the present invention. First, when the power is turned on, it is detected whether there is a face shape in the initial image. (Step S500) If there is no face shape in the initial image, the face shape is detected in the image after a predetermined time (step S510). If there is no shape, the power of the display apparatus is turned off (step S570).
한편, 전원이 켜질 때 초기 영상에 얼굴 형상이 존재하면, 디스플레이 장치의 시야각 내에서 촬영된 영상데이터를 이용하여 현재 영상과 이전 영상의 차에 해당하는 차영상이 생성되었는 지 체크한다.(S530 단계) 텔레비전이나 광학 영상 장치는 일반적으로 고정된 상태에서 사용되기 때문에 배경에 대한 정보는 항상 일정하다 그러므로 이동하는 물체의 영역에서만 차영상이 나온다. 차영상을 구하는 것은 검색해야 하는 범위를 줄여주는 장점이 있다. 전원이 켜질 때의 초기에는 현재 영상만 있고 이전 영상은 없지만 소정의 시간이 지난 후에는 이전영상과 현재 영상이 존재하게 된다. 차영상은 전원이 켜지고 소정의 시간이 지난 후 부터 구해진다. On the other hand, if the face shape is present in the initial image when the power is turned on, it is checked whether the difference image corresponding to the difference between the current image and the previous image is generated by using the image data photographed within the viewing angle of the display device. Since televisions or optical imaging devices are generally used in a fixed state, the information on the background is always constant. Therefore, the difference image only comes out in the area of a moving object. Obtaining the difference image has the advantage of reducing the search range. Initially when the power is turned on, there is only the current image and no previous image, but after a predetermined time, the previous image and the current image exist. The difference image is obtained after a predetermined time after the power is turned on.
상기 차영상이 생성되면, 상기 차영상이 얼굴 형상을 포함하고 있는지 검사 한다.(S340 단계) 상기 차영상에 얼굴 형상이 검출되면 현재 영상은 이전 영상이 되고 새로 입력되는 영상을 현재 영상으로 하여 상기 S530 단계를 수행한다.When the difference image is generated, it is checked whether the difference image includes a face shape. In operation S340, when the face shape is detected in the difference image, the current image becomes a previous image and the newly input image becomes the current image. Step S530 is performed.
만일 상기 차영상에 얼굴 형상이 존재하지 않으면, 이전 영상에 얼굴 형상이 존재하는 지 검색한다.(S550 단계) 상기 차영상 및 이전영상에서의 얼굴 검출은 얼굴 피부색 범위에 들어가는 색을 이용하여 일정한 형태의 모델에 적합한가를 비교하여 수행한다. 일정한 피부색과 모델에 적합한 경우에는 시청자가 검출된 것으로 보고 전원을 계속 유지한다. 이후에는 차영상이 발생할 때까지 모델에 대한 검출은 다시 시행하지 않고 차영상에 대해서만 검출을 수행한다. 차영상이 발생하면 시청자가 사라지거나 이동하는 경우 발생함으로 시청자가 존재하는 가를 계속적으로 검출할 수 있다. 도 6은 사람의 피부색 데이터를 도시한 것이고, 도 7은 사람의 얼굴 형태를 나타내는 모델을 도시한 것이다. 도 8은 사람의 얼굴 피부색에 따른 사람 얼굴 검출을 도시한 것이다. If the face shape does not exist in the difference image, it is searched whether a face shape exists in the previous image. (S550) The face detection in the difference image and the previous image is performed by using a color that falls within the facial skin color range. Perform a comparison by comparing the model with the model. If it is suitable for a certain skin color and model, the viewer sees it as detected and maintains power. After that, the detection of the model is not performed again until the difference image is generated, and only the difference image is detected. When the difference image occurs, it occurs when the viewer disappears or moves, and thus it is possible to continuously detect whether the viewer exists. FIG. 6 illustrates human skin color data, and FIG. 7 illustrates a model representing a human face shape. 8 illustrates detection of a human face according to a human skin color.
이전 영상에서 얼굴 형상이 검출되지 않으면 시청자가 사라진 것으로 판단하여 디스플레이 장치의 전원을 끈다.(560단계) 시청자가 움직이지 않는 경우, 예를 들어 원격 리모컨을 이용하여 시청자가 고정된 자세로 TV나 광학 영상 장치를 켠 경우에는 영상 센서에서는 차영상 영역이 발견되지 않을 수 있다. 몇 초 동안 차영상 영역이 발생하지 않으면, 광학영상장치 앞에 시청자가 존재한다고 가정한다. 그리고 사람의 피부색 범위의 색들을 기준으로 화면의 전체 영역에서 비교 검출한다. 사람 얼굴이 발견되지 않는 경우 광학영상장치의 전원을 끈다.If the face image is not detected in the previous image, the viewer determines that the viewer disappeared and turns off the display device (step 560). If the viewer does not move, for example, the viewer uses a remote remote control to fix the TV or optical device. When the imaging device is turned on, the difference image area may not be found by the image sensor. If no difference image region occurs for a few seconds, it is assumed that the viewer exists in front of the optical imaging apparatus. Then, a comparison is detected in the entire area of the screen based on the colors of human skin color range. If no human face is found, turn off the optical imaging device.
본 발명에서 시청자나 사용자의 얼굴 검출의 일예를 들면 다음과 같다. 도 9는 시청자나 사용자의 얼굴 검출의 일예에 대한 흐름도를 도시한 것이다. 도 9을 참조하면, 최초 텔레비전의 전원이 켜지면(S900 단계) 우선 시스템 내에 배경 영상이 존재하는 지 검사한다.(S910 단계) 상기 배경 영상은 텔레비전에 설치된 카메라로부터 입력된 시청자가 없는 상태의 영상을 의미한다. 상기 배경 영상이 존재할 경우 매 순간 입력되는 영상과의 차영상을 구하여(S920 단계), 텔레비전이나 광학영상 장치 앞에 존재하는 객체(object)들을 검출하고 이 객체들에 대하여 얼굴 검출 알고리즘을 적용하여(S930 단계), 객체가 시청자인지 아닌지를 판단한다.(S950 단계) 배경 영상이 없을 경우에는 입력 영상 전체에 얼굴 검출 알고리즘을 적용하여 시청자의 존재 여부를 알아낸다.(S940 단계) 이 과정을 통하여 시청자가 있을 경우에는 같은 과정을 반복하고(S950 단계), 그렇지 않을 경우에는 텔레비전의 전원을 끈다.(S960 단계)In the present invention, an example of face detection of a viewer or a user is as follows. 9 is a flowchart illustrating an example of face detection of a viewer or a user. Referring to FIG. 9, when the power of the first television is turned on (step S900), it is first checked whether a background image exists in the system. (Step S910) The background image is an image in a state where no viewer is input from a camera installed in the television. Means. When the background image is present, a difference image with an image input at every moment is obtained (step S920), objects existing in front of a television or an optical imaging apparatus are detected, and a face detection algorithm is applied to the objects (S930). In step S950, if there is no background image, a face detection algorithm is applied to the entire input image to determine whether or not the viewer is present. If so, repeat the same process (step S950), otherwise turn off the television (step S960).
상기 배경 영상은 텔레비전의 전원이 꺼져 있는 동안 일정 주기로 영상을 입력받아 평균을 내는 방식으로 구할 수 있다. 또한 상기 얼굴 검출 알고리즘은 간단한 형태의 검출기를 여러 개를 사용하여 빠르고 정확하게 객체를 검출할 수 있는 알고리즘이다. 상기 얼굴검출은 도 10과 같이 3개의 검출기를 이용하여 영상에서 얼굴을 검출한다.The background image may be obtained by receiving an image at a predetermined period and averaging it while the television is turned off. In addition, the face detection algorithm is an algorithm that can quickly and accurately detect the object using a plurality of simple detectors. The face detection detects a face in an image using three detectors as shown in FIG. 10.
바람직하게는, 본 발명의 카메라를 이용한 디스플레이 장치의 전원 관리 방법을 컴퓨터에서 실행시키기 위한 프로그램을 컴퓨터로 읽을 수 있는 기록매체에 기록하여 제공할 수 있다.Preferably, a program for executing the power management method of the display apparatus using the camera of the present invention may be provided by recording a program for executing in a computer on a computer-readable recording medium.
본 발명은 소프트웨어를 통해 실행될 수 있다. 소프트웨어로 실행될 때, 본 발명의 구성 수단들은 필요한 작업을 실행하는 코드 세그먼트들이다. 프로그램 또는 코드 세그먼트들은 프로세서 판독 가능 매체에 저장되거나 전송 매체 또는 통신망에서 반송파와 결합된 컴퓨터 데이터 신호에 의하여 전송될 수 있다.The invention can be implemented via software. When implemented in software, the constituent means of the present invention are code segments that perform the necessary work. The program or code segments may be stored on a processor readable medium or transmitted by a computer data signal coupled with a carrier on a transmission medium or network.
컴퓨터가 읽을 수 있는 기록매체는 컴퓨터 시스템에 의하여 읽혀질 수 있는 테이터가 저장되는 모든 종류의 기록 장치를 포함한다. 컴퓨터가 읽을 수 있는 기록 장치의 예로는 ROM, RAM, CD-ROM, DVD-ROM, DVD-RAM, 자기 테이프, 플로피 디스크, 하드 디스크(hard disk), 광데이터 저장장치 등이 있다. 또한, 컴퓨터가 읽을 수 있는 기록매체는 네트워크로 연결된 컴퓨터 장치에 분산되어 분산방식으로 컴퓨터가 읽을 수 있는 코드가 저장되고 실행될 수 있다.The computer-readable recording medium includes all kinds of recording devices in which data is stored which can be read by a computer system. Examples of computer-readable recording devices include ROM, RAM, CD-ROM, DVD-ROM, DVD-RAM, magnetic tape, floppy disks, hard disks, optical data storage devices, and the like. The computer readable recording medium can also be distributed over network coupled computer devices so that the computer readable code is stored and executed in a distributed fashion.
본 발명은 도면에 도시된 일 실시예를 참고로 하여 설명하였으나 이는 예시적인 것에 불과하며 당해 분야에서 통상의 지식을 가진 자라면 이로부터 다양한 변형 및 실시예의 변형이 가능하다는 점을 이해할 것이다. 그러나, 이와 같은 변형은 본 발명의 기술적 보호범위내에 있다고 보아야 한다. 따라서, 본 발명의 진정한 기술적 보호범위는 첨부된 특허청구범위의 기술적 사상에 의해서 정해져야 할 것이다.Although the present invention has been described with reference to one embodiment shown in the drawings, this is merely exemplary and will be understood by those of ordinary skill in the art that various modifications and variations can be made therefrom. However, such modifications should be considered to be within the technical protection scope of the present invention. Therefore, the true technical protection scope of the present invention will be defined by the technical spirit of the appended claims.
상술한 바와 같이 본 발명에 의하면, 텔레비전 또는 광학 영상 장치의 수명을 연장할 수 있고 실내 온도와 작업 환경의 영향을 받지 않으면서도 사람이 움직이지 않는 경우에도 사람을 감지하여 이에 따라 광범위하게 사용되고 있는 텔레비전 또는 광학 영상 장치들의 전원을 자동으로 관리할 수 있으며 에너지를 절약할 수 있는 효과가 있다.As described above, according to the present invention, a television that can extend the lifespan of a television or an optical imaging device and detect a person even when the person does not move without being affected by the room temperature and the working environment and thus is widely used according to the present invention. Alternatively, the power of the optical imaging devices can be managed automatically and energy can be saved.
Claims (12)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070065062A KR100858932B1 (en) | 2007-06-29 | 2007-06-29 | Apparatus and method for controlling power of display device using camera |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020070065062A KR100858932B1 (en) | 2007-06-29 | 2007-06-29 | Apparatus and method for controlling power of display device using camera |
Publications (1)
Publication Number | Publication Date |
---|---|
KR100858932B1 true KR100858932B1 (en) | 2008-09-17 |
Family
ID=40023238
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020070065062A KR100858932B1 (en) | 2007-06-29 | 2007-06-29 | Apparatus and method for controlling power of display device using camera |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100858932B1 (en) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101395233B1 (en) * | 2012-05-17 | 2014-05-16 | (주)실리콘화일 | Image recognition system with power-saving function |
CN113657263A (en) * | 2021-08-16 | 2021-11-16 | 深圳多模智能科技有限公司 | Method, device, terminal and medium for awakening terminal to identify biological characteristic information |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11242733A (en) * | 1998-02-24 | 1999-09-07 | Sanyo Electric Co Ltd | Power saving controller |
US20040175020A1 (en) | 2003-03-05 | 2004-09-09 | Bradski Gary R. | Method and apparatus for monitoring human attention in dynamic power management |
KR20050057386A (en) * | 2002-09-17 | 2005-06-16 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | Television power saving system |
KR20070116714A (en) * | 2006-06-06 | 2007-12-11 | 삼성전자주식회사 | Personal settings, parental control, and energy saving control of television with digital video camera |
-
2007
- 2007-06-29 KR KR1020070065062A patent/KR100858932B1/en not_active IP Right Cessation
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH11242733A (en) * | 1998-02-24 | 1999-09-07 | Sanyo Electric Co Ltd | Power saving controller |
KR20050057386A (en) * | 2002-09-17 | 2005-06-16 | 코닌클리케 필립스 일렉트로닉스 엔.브이. | Television power saving system |
US20040175020A1 (en) | 2003-03-05 | 2004-09-09 | Bradski Gary R. | Method and apparatus for monitoring human attention in dynamic power management |
KR20070116714A (en) * | 2006-06-06 | 2007-12-11 | 삼성전자주식회사 | Personal settings, parental control, and energy saving control of television with digital video camera |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101395233B1 (en) * | 2012-05-17 | 2014-05-16 | (주)실리콘화일 | Image recognition system with power-saving function |
CN113657263A (en) * | 2021-08-16 | 2021-11-16 | 深圳多模智能科技有限公司 | Method, device, terminal and medium for awakening terminal to identify biological characteristic information |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20110103643A1 (en) | Imaging system with integrated image preprocessing capabilities | |
RU2534073C2 (en) | System, method and apparatus for causing device to enter active mode | |
US8581974B2 (en) | Systems and methods for presence detection | |
KR101437448B1 (en) | Display apparatus and method of controlling thereof | |
CN110460905A (en) | The automatic continuous playing method of video, device and storage medium based on more equipment | |
CN110087131B (en) | Television control method and main control terminal in television system | |
CN101632053A (en) | Carry out the system and method for system power dissipation mode switch according to motion detection | |
JP6686565B2 (en) | Control device, processing device and program | |
US9280122B2 (en) | Printing apparatus, method for controlling printing apparatus, and recording medium | |
US20090079822A1 (en) | Apparatus and method for automatically controlling power of video appliance | |
US9485431B2 (en) | Image capturing apparatus and method for controlling the same | |
CN112261454A (en) | Intelligent television control method, device and system, television and readable storage medium | |
KR100858932B1 (en) | Apparatus and method for controlling power of display device using camera | |
JP2011239029A (en) | Image display unit, power saving control unit and power saving method | |
KR102015953B1 (en) | Low-powered imaging processing device and method thereof | |
JP2014020790A (en) | Information terminal | |
US8013926B2 (en) | Digital photo frame and method for controlling same | |
WO2024041223A1 (en) | Display control method and apparatus for 3d holographic display screen, and storage medium | |
JP3894122B2 (en) | Object detection apparatus and method | |
JP4946598B2 (en) | Recording / playback device for monitoring | |
KR100923747B1 (en) | Apparatus and method for controllign low power security system | |
JP2005033682A (en) | Video display system | |
CN110445926B (en) | Processing method and electronic equipment | |
US20110176006A1 (en) | Video monitoring system and method | |
KR100997231B1 (en) | Apparatus for output-control of television capable of motion detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20110615 Year of fee payment: 4 |
|
FPAY | Annual fee payment |
Payment date: 20120615 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |