KR20140023488A - Apparatus and method thereof for controlling mirror of vehicle - Google Patents

Apparatus and method thereof for controlling mirror of vehicle Download PDF

Info

Publication number
KR20140023488A
KR20140023488A KR1020120089329A KR20120089329A KR20140023488A KR 20140023488 A KR20140023488 A KR 20140023488A KR 1020120089329 A KR1020120089329 A KR 1020120089329A KR 20120089329 A KR20120089329 A KR 20120089329A KR 20140023488 A KR20140023488 A KR 20140023488A
Authority
KR
South Korea
Prior art keywords
mirror
information
driver
vehicle
face
Prior art date
Application number
KR1020120089329A
Other languages
Korean (ko)
Inventor
박동찬
Original Assignee
엘지이노텍 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지이노텍 주식회사 filed Critical 엘지이노텍 주식회사
Priority to KR1020120089329A priority Critical patent/KR20140023488A/en
Publication of KR20140023488A publication Critical patent/KR20140023488A/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/02—Rear-view mirror arrangements
    • B60R1/06—Rear-view mirror arrangements mounted on vehicle exterior
    • B60R1/062—Rear-view mirror arrangements mounted on vehicle exterior with remote control for adjusting position
    • B60R1/07—Rear-view mirror arrangements mounted on vehicle exterior with remote control for adjusting position by electrically powered actuators
    • B60R1/072—Rear-view mirror arrangements mounted on vehicle exterior with remote control for adjusting position by electrically powered actuators for adjusting the mirror relative to its housing
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00—Input parameters relating to occupants
    • B60W2540/225—Direction of gaze
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Y—INDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2400/00—Special features of vehicle units
    • B60Y2400/30—Sensors
    • B60Y2400/301—Sensors for position or displacement
    • B60Y2400/3015—Optical cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Rear-View Mirror Devices That Are Mounted On The Exterior Of The Vehicle (AREA)

Abstract

The present invention relates to automatic adjustment for a mirror of a vehicle according to the position, the direction, and the gaze of a driver's face by recognizing the face or/and the eyeball of the driver. According to an embodiment of the present invention, a device and a method for controlling a mirror of a vehicle automatically control a mirror of a vehicle based on information on the gaze of a driver according to the movement of the driver's eyeball recognized by an IR camera using pre-stored information required for the control. Therefore, the angle of the mirror can be adjusted based on driver's conditions/vehicle's conditions. [Reference numerals] (AA) Start; (BB) End; (S901) Sensing a face by using an RGB camera or/and sensing eyeballs and view by using an IR camera; (S903) Processing the recognized information; (S905) Controlling a driving unit by using the information processed by at least one camera among the cameras; (S907) Controlling one mirror among a room mirror and a side mirror

Description

차량의 미러 제어 장치 및 방법 {APPARATUS AND METHOD THEREOF FOR CONTROLLING MIRROR OF VEHICLE}Mirror control device and method of vehicle {APPARATUS AND METHOD THEREOF FOR CONTROLLING MIRROR OF VEHICLE}

실시 예는 운전자의 안면/안구 정보를 이용하여 차량의 미러를 조정하는 것에 관한 것이다.Embodiments relate to adjusting a mirror of a vehicle using facial / eyeball information of a driver.

자동차가 생활의 일부가 되어 있는 상황에서, 자동차를 서로 공유하여 운전하는 경우, 운전자의 신체 또는 취향에 따라 미러(룸미러, 사이드미러등)의 위치와 각도를 서로 다양하게 하여 운전을 하게 된다.In a situation where a car is a part of life, when a car is shared with each other, the driver may drive by varying the position and angle of the mirror (room mirror, side mirror, etc.) according to the driver's body or taste.

한편, 운전자만이 사용하는 차량의 경우라도, 운전을 하는 중에 운전자의 자세, 방향등에 따라 미러를 제대로 볼 수 없는 상황이 발생하는 경우도 있다.On the other hand, even in a vehicle used only by the driver, there may be a situation in which the mirror cannot be properly viewed depending on the driver's posture and direction while driving.

그러나 지금의 대부분의 차는 운전자가 직접 수동으로 각도를 조정하거나, 설치된 전동시스템으로 조정을 하고는 있으나, 운전 중에 사용자의 위치나 방향이 달라지는 경우에 적절히 대응할 수가 없었다.However, most of the cars are manually adjusted by the driver or adjusted by the installed electric system, but they cannot cope properly when the user's position or direction changes while driving.

실시 예는 운전자의 안면(얼굴) 또는/및 안구를 센싱하여 얼굴 위치, 방향, 시선에 따라 차량의 미러 (Mirror)를 자동으로 조정하는 것을 제안한다.The embodiment proposes to automatically adjust the mirror of the vehicle according to the face position, direction, and line of sight by sensing the face (face) and / or eye of the driver.

실시 예는 RGB 카메라를 이용하여 운전자의 안면을 인식하여 그에 의거 미러를 조정하는 것을 제안한다.The embodiment proposes to recognize a driver's face using an RGB camera and adjust the mirror accordingly.

실시 예는 IR 카메라를 이용하여 운전자의 안구 인식 및 안구의 이동에 따라 운전자의 시선을 인식한 정보에 의거, 차량의 미러를 자동으로 제어하는 것을 제안한다.The embodiment proposes to automatically control the mirror of the vehicle based on the information of the driver's eye recognition according to the driver's eye recognition and eye movement using the IR camera.

실시 예에 따른 차량의 미러 제어 장치는, 운전자의 안면 및 안구 정보 중에서 적어도 하나의 정보를 센싱하는 센싱부; 상기 센싱된 정보를 처리하는 처리부; 및 상기 구성들을 제어하며, 상기 처리된 정보에 의거 미러 위치를 조정하는 구동부를 제어하는 제어부;를 포함하여 동작된다.In accordance with another aspect of the present disclosure, an apparatus for controlling a mirror of a vehicle includes: a sensing unit configured to sense at least one piece of information of a driver's face and eyeball information; A processing unit for processing the sensed information; And a controller for controlling the components and controlling a driving unit for adjusting a mirror position based on the processed information.

실시 예에 따른 차량의 미러 제어 방법은, IR 카메라에 의거 안구 및 시선이 센싱되는 단계; 상기 센싱된 정보가 처리되는 단계; 및 상기 처리된 정보에 의거 차량에 구성된 적어도 하나 이상의 미러가 조정되는 단계;를 포함하여 동작된다.In accordance with another aspect of the present disclosure, a method of controlling a mirror of a vehicle includes: sensing eyes and eyes based on an IR camera; Processing the sensed information; And adjusting at least one mirror configured in the vehicle based on the processed information.

실시 예는 IR 카메라를 이용하여 안구 인식 및 안구의 이동에 따라 운전자의 시선을 인식한 정보에 의거, 운전자의 차량의 미러를 자동으로 제어할 수 있다.The embodiment may automatically control the mirror of the driver's vehicle based on the information of the driver's gaze in response to eye recognition and eye movement using the IR camera.

특히 하나의 차를 여러 사람이 공용으로 사용할 때, 각 운전자의 신체 크기 가 서로 다른 경우에도, 운전자가 일일이 미러를 조정할 필요없이 각자 운전자의 신체 및 안구 정보등에 의거 자동적으로 차량의 미러가 조정되어 편리하다.In particular, when a car is shared by several people, even if each driver's body size is different, the vehicle's mirror is automatically adjusted based on the driver's body and eye information without the driver having to adjust the mirror. Do.

또한 운전 환경 (커브길등)에 의거 미러에 대한 운전자가 시야 각도가 바뀌는 경우에도 상기 운전자의 안면/안구 정보에 의거 자동적으로 차량의 미러가 조정되어 편리하다.In addition, even when the driver's viewing angle is changed based on the driving environment (curve road, etc.), the vehicle's mirror is automatically adjusted based on the driver's face / eye information.

도 1은 실시 예에 따라 RGB 카메라와 IR 카메라, MCU로 구성되어 얼굴 및 안구를 인식하고 얼굴 위치, 방향, 시선에 따라 Mirror를 자동으로 조정하는 실시 예의 개념을 나타난 도면
도 2는 카메라 정보에 의거 차량의 미러가 조정되는 것을 나타내는 블럭도
도 3 ~ 도 9는 각 센서, 각 구동부 및 미러의 구성과 함께 미러가 상/하/좌/우 제어되는 것을 나타내는 기구적인 실시예의 구성도
도 9는 실시 예에 의한 차량의 미러를 제어하는 것을 나타내는 흐름도는 것을 나타내는 기구적인 실시예의 구성도FIG. 1 is a view illustrating a concept of an embodiment in which an RGB camera, an IR camera, and an MCU are configured to recognize a face and an eye, and automatically adjust a mirror according to a face position, a direction, and a gaze according to an embodiment.
2 is a block diagram showing that a mirror of a vehicle is adjusted based on camera information;
3 to 9 are structural diagrams of a mechanical embodiment showing that the mirror is controlled up / down / left / right with the configuration of each sensor, each driving unit and the mirror.
9 is a configuration diagram illustrating a mechanical embodiment showing that a flowchart illustrating controlling a mirror of a vehicle according to an embodiment is shown.

이하, 첨부된 도면을 참조하여 본 발명의 실시 예에 따른 차량의 미러 제어 장치 및 방법을 설명한다.Hereinafter, an apparatus and method for controlling a mirror of a vehicle according to an exemplary embodiment of the present disclosure will be described with reference to the accompanying drawings.

먼저, 본 발명의 실시 예에서 사용되는 용어는 가능한 한 현재 널리 사용되는 일반적인 용어를 선택하였으나, 특정한 경우는 출원 인이 임의로 선정한 용어도 있으며 이는 해당되는 실시 예 설명부분에서 상세히 그 동작 및 의미를 기재하였으므로, 단순한 용어의 명칭이 아닌 용어가 가지는 동작/의미로서 본 실시 예를 파악하여야 됨을 밝혀두고자 한다.First, the terms used in the embodiments of the present invention are selected as general terms that are widely used as far as possible. However, in some cases, terms selected arbitrarily by the applicant may be used. It is to be understood that the present embodiment should be grasped as an action / meaning of a term that is not a name of a simple term.

실시 예의 설명에 있어서, 룸미러(room mirror)는 차량내에 설치된 모든 미러를 나타내는 것으로 일반적인 back mirror를 포함한다.In the description of the embodiment, a room mirror represents all the mirrors installed in the vehicle and includes a general back mirror.

또한 실시 예의 설명에 있어서, 각 구성간에 연결, 접속 또는 접촉되었다 함은 이는 직접적으로 연결 되어 있는 경우뿐만 아니라, 그 중간에 다른 구성, 다른 매체 또는 다른 소자 등을 통한 기구적 연결, 전기적 연결 또는 유/무선 연결된 경우도 포함된다.In addition, in the description of the embodiment, the connection, connection or contact between each component is not only connected directly, but also mechanical connection, electrical connection or connection through other components, other media or other elements in the middle. Includes / wireless connection.

이하 도 1은 실시 예에 따라 RGB 카메라(11b)와 IR 카메라 (11a), MCU (12)로 구성되어 얼굴 및 안구를 인식하고 얼굴 위치, 방향, 시선에 따라 Mirror를 자동으로 조정하는 실시 예의 개념을 나타난 도면이다.1 is a concept of an embodiment consisting of an RGB camera (11b), IR camera (11a), MCU (12) to recognize the face and eyes and automatically adjusts the mirror according to the face position, direction, and line of sight according to the embodiment Figure shown.

도 1에서 IR카메라는 시선/동공만을 인식하고, RGB 카메라는 도 1의 운전자 얼굴에 나타나고 있는 네모와 같은 형상을 인지하여 얼굴 방향/각도등을 인식할 수 있다.In FIG. 1, the IR camera recognizes only the gaze / pupil, and the RGB camera recognizes a shape such as a square appearing on the driver's face of FIG. 1 to recognize the face direction / angle and the like.

IR 카메라를 이용하여 안구 인식을 어떻게 할 것인지에 대해 부연 설명한다.Explain how to recognize the eye using an IR camera.

IR카메라는 적외선 카메라로서 인체에서 나오는 열을 감지하는 카메라로서, 안구에서 나오는 적외선을 감지해서 안구를 인식하게 된다. 사진을 찍을 때 가끔씩 눈에 동공이 빨갛게 나올 때가 있는데, 이것은 동공에서 나오는 적외선 때문에 그렇다. IR 카메라는 이런 적외선을 감지하여 안구 인식을 하고 시선 인식도 할 수 있으므로 빨간 적외선 나오는 부분을 시선으로 인식하여 그에 의거 미러의 방향을 조정하도록 제어한다.An IR camera is an infrared camera that detects heat from the human body, and detects infrared rays from the eye. When taking pictures, the pupils sometimes appear red in the eyes, because of the infrared rays from the pupils. The IR camera detects these infrared rays and recognizes the eyes and recognizes the eyes. Therefore, the IR camera recognizes the part of the red infrared rays as the line of sight and controls the direction of the mirror accordingly.

　RGB 카메라로 얼굴이 움직이는 것을 감지하면 얼굴에 방향에 따라 얼굴이 왼쪽으로 움직이면 Mirror위치를 　case1(left mirror 70도에서 60도로)로 setting하고, 얼굴이 오른쪽으로 움직이면 Mirror를 case2(right mirror 70도를 60도로)로 setting한다.When the face is detected by the RGB camera, if the face is moved to the left according to the direction of the face, set the mirror position to case1 (left mirror 70 degrees to 60 degrees), and if the face moves to the right, set the mirror to case2 (right mirror 70 degrees). 60 degrees).

얼굴이 위나 아래로 향하면 후진이나 주차이므로 Mirror위치를 case3(Left right mirror 수직 0도에서 20도로 아래쪽에 있는 도로를 보이게함) 으로 setting 한다.If your face is facing up or down, it is backward or parked, so set the Mirror position to case3 (showing roads that are 20 degrees below the left right mirror vertically).

한편 다른 실시 예로써, 도 1에 나타난 운전자의 안면정보는 RGB카메라(11b)에 의거한 RGB 영상을 YCbCr 색공간으로 변환하고, 피부색 참조맵의 Cb, Cr 값의 범위에 따라 얼굴영역을 검출한 각 얼굴 영역의 값이 미리 정한 각 얼굴영역 값과의 비교에 의거, 미러의 각도를 조정할 수 있다.Meanwhile, as another embodiment, the facial information of the driver shown in FIG. 1 converts an RGB image based on the RGB camera 11b into a YCbCr color space and detects a face region according to a range of Cb and Cr values of a skin color reference map. The angle of the mirror can be adjusted based on a comparison of the value of each face area with each predetermined face area value.

예를 들어, 입술 부위, 좌/우 눈 부위등에 대한 저장된 정보와, 실제 측정된 정보와의 차이에 의거 운전자가 어떤 상태인지를 확인할 수 있으며, 그에 의거 미러의 각도를 조정할 수 있다.For example, it is possible to determine the driver's condition based on the difference between the stored information about the lip region, the left / right eye region, and the measured information, and adjust the angle of the mirror based on the difference.

또한 IR에 의한 안구 인식 및 안구의 이동에 따른 운전자의 시선을 인식한 정보에 의거 운전자의 상태/차량의 상태를 알 수 있으며, 상기한 바와 같이 IR 정보에 의한 미러의 조정이 가능하다.In addition, it is possible to know the driver's state / vehicle state based on the information of the eye recognition by the IR and the driver's eye gaze according to the movement of the eye. As described above, the mirror may be adjusted by the IR information.

도 2는 카메라 정보에 의거 차량의 미러가 조정되는 것을 나타내는 블럭도이다.2 is a block diagram showing that a mirror of a vehicle is adjusted based on camera information.

도 2에 나타난 바와 같이, 운전자의 안면 및 안구 정보 중에서 적어도 하나의 정보를 센싱하는 센싱부 (11, 11a, 11b)와; 상기 센싱된 정보를 처리하는 영상 처리부 (13); 및 상기 구성들을 제어하며, 상기 처리된 정보에 의거 적어도 하나이상의 미러 위치 (15,17,19)를 조정하는 구동부 (14,16,18)를 제어하는 제어부 (12);를 포함하여 동작된다.As shown in FIG. 2, the sensing units 11, 11a and 11b sensing at least one piece of information of the driver's face and eyeballs; An image processor (13) for processing the sensed information; And a control unit 12 for controlling the components and controlling the driving units 14, 16, 18 for adjusting at least one or more mirror positions 15, 17, 19 based on the processed information.

상기와 같은 구성에서, IR 카메라를 이용한 안구 인식 및 안구의 이동에 따른 운전자의 시선을 인식하여, 이를 바탕으로 차량의 mirror를 제어할 수도 있다.In the configuration as described above, by recognizing the eyeball using the IR camera and the driver's eyes according to the movement of the eyeball, it is possible to control the mirror of the vehicle based on this.

도 3 ~ 도 9는 각 센서, 각 구동부 및 미러의 구성과 함께 미러가 상/하/좌/우 제어되는 것을 나타내는 기구적인 실시예의 구성도이다.3 to 9 are structural diagrams of a mechanical embodiment showing that the mirror is controlled up / down / left / right with the configuration of each sensor, each driving unit and the mirror.

도 3에는 본 발명의 하나의 실시예의 구성도가 도시되어 있고, 도 4에서 도 5까지는 실시예의 룸미러의 정면도, 측면도가 도시되어 있으며, 도 6에서 도 7까지는 실시예의 아웃사이드미러의 정면도, 측면도가 도시 되어 있으며, 도 8은 구동부(14,16,18) 구성도가 도시되어 있다.FIG. 3 is a block diagram of one embodiment of the present invention, and FIGS. 4 to 5 show a front view and a side view of the room mirror of the embodiment, and FIGS. 6 to 7 show the front view of the outside mirror of the embodiment. FIG. 8 is a side view, and FIG. 8 is a configuration diagram of the driving units 14, 16, and 18.

본 발명은 각종 센서 (11a,11b) 및 처리부(13)에 의한 안구정보 또는/및 안면(얼굴)정보에 대한 입력신호를 통해 제어부 (12)에서 운전자의 상태 또는/및 차량의 평형상태와 선회상태를 판단하고, 이 판단결과를 토대로 룸미러(15) 및 아웃사이드미러(17)의 각도를 자동 조정하는 것이다.The present invention relates to the driver's state and / or the equilibrium state of the vehicle and / or the vehicle in the control unit 12 through input signals for eye information and / or face (face) information by the various sensors 11a and 11b and the processing unit 13. A state is judged and the angle of the room mirror 15 and the outside mirror 17 is automatically adjusted based on this determination result.

도시된 실시예는 룸미러(15) 및 아웃사이드미러(17)에 제어부(12)의 출력신호를 통해 작동되는 상하방향 제어모터(51)와 좌우방향 제어모터(52)를 설치하고, 또한 좌우방향 제어모터(52)의 회전축(52a)에 초기위치 및 변경량 등을 확인할 수 있도록 하는 엔코더(53)를 설치한 형태를 갖는다.In the illustrated embodiment, the up and down direction control motor 51 and the left and right direction control motor 52 operated by the output signal of the control unit 12 are installed in the room mirror 15 and the outside mirror 17, and also the left and right side mirrors are provided. The encoder 53 is provided on the rotation shaft 52a of the direction control motor 52 so as to confirm the initial position, the amount of change, and the like.

도시된 실시 예는 운전자의 안면정보를 센싱하기 위해 RGB 카메라 (11b)와 운전자의 안구정보를 센싱하기 위해 IR 카메라 (11a)를 구성하였으나 이들 센서들의 정보에만 국한되지 않고 다른 센서의 정보를 활용할 수도 있음은 물론이다.In the illustrated embodiment, the RGB camera 11b is configured to sense the driver's face information and the IR camera 11a is configured to sense the driver's eye information, but the information of the other sensors is not limited to the information of these sensors. Of course.

한편 운전자에 따라 룸미러(15) 및 아웃사이드미러(17)의 위치가 다르므로 본 발명에 있어서는 메모리(미도시)를 가진 제어부 (12)에 해당 운전자에 따른 룸미러(15) 및 아웃사이더미러(17) 위치 정보를 사전 저장하도록 하는 것이 바람직하다.On the other hand, since the position of the room mirror 15 and the outside mirror 17 differs depending on the driver, in the present invention, the control unit 12 having a memory (not shown) corresponds to the room mirror 15 and the outside mirror according to the driver. (17) It is preferable to store the position information in advance.

예를 들어, 센싱되어 입력되는 안면정보 또는/및 안구정보에 대해 각 미러부가 제어될 각도를 미리 테이블화 하여 저장하여 그에 의거 각 미러부 조정이 이루어 지도록 한다.For example, the angle to be controlled by each mirror unit is stored in a table in advance for the face information and / or eye information that is sensed and input so that each mirror unit is adjusted accordingly.

도면부호 중 미설명부호 54는 러버, 60은 스티어링 휠이다.Reference numeral 54 in the drawings denotes rubber, and 60 is a steering wheel.

상기와 같이 구성된 본 발명의 실시 예에 있어서는 차량 운행중에 카메라에 의거 센싱된 안면정보 또는/및 안구정보등에 의거 제어부(12)에서 상하방향 제어모터(51) 및 좌우방향 제어모터(52)의 동작을 제어하여 룸미러(15)와 아웃사이드미러(17)의 위치를 자동 조절하게 되는 것으로, 예를 들어 오르막길이나 내리막길의 경우 룸미러(15) 및 아웃사이더미러(17)의 각도를 아래로 낮추거나 위로 올림으로써 운전자가 보다 원활한 후방 시계 및 측방 시계를 확보할 수 있도록 하고, 선회시에는 룸미러(15) 및 아웃사이드미러(17)의 각도를 좌측 또는 우측으로 변경함으로써 운전자의 시야 확보에 기여할 수 있도록 하게 된다.In the embodiment of the present invention configured as described above, the operation of the up and down control motor 51 and the left and right control motor 52 in the control unit 12 based on the face information or / and eye information sensed by the camera while driving the vehicle. By controlling the position of the room mirror 15 and the outside mirror 17 is automatically adjusted, for example, in the case of an uphill or a downhill road, the angle of the room mirror 15 and the outside mirror 17 is down. Lowering or raising upwards allows the driver to have a smoother rear and side view, and when turning, changes the angle of the room mirror 15 and the outside mirror 17 to the left or right to secure the driver's view. To contribute.

도 9는 실시 예에 의한 차량의 미러를 제어하는 것을 나타내는 흐름도이다.9 is a flowchart illustrating controlling a mirror of a vehicle according to an embodiment.

도 9에 나타난 바와 같이, RGB 카메라를 이용한 안면센싱 또는/및 IR 카메라를 이용한 안구센싱 및 시선을 센싱한다. (S 901).As shown in FIG. 9, facial sensing using an RGB camera and / or eye sensing using a IR camera and a gaze are sensed. (S901).

상기 센싱된 정보가 처리부 (13)에 의거 처리된다. (S 903).The sensed information is processed by the processor 13. (S903).

상기 처리된 정보에 의거 차량에 구성된 적어도 하나 이상의 미러가 조정된다. (S 905, S 907).At least one mirror configured in the vehicle is adjusted based on the processed information. (S 905, S 907).

상기에서 상기 IR 카메라에 의거 안구의 이동에 따른 운전자의 시선이 센싱되고, 그와 관련된 정보가 미리 저장된 테이블에 의거 차량의 미러가 제어된다.The eye of the driver is sensed according to the movement of the eye based on the IR camera, and the mirror of the vehicle is controlled based on a table in which information related thereto is stored in advance.

부연하면, 상기 제어부에 구성된 메모리에는 센싱되어 입력되는 정보에 대해 각 미러부가 제어될 각도가 미리 테이블화 되어 저장되어 있으며, 상기 저장된 정보에 의거 미러부의 조정이 이루어진다.In other words, in the memory configured in the controller, angles to be controlled for each mirror unit are stored in advance in a table, and the mirror unit is adjusted based on the stored information.

상기 실시 예에 의한 차량의 미러 제어 장치 및 방법은, 일반 차량 뿐만 아아니라 미러 조정이 필요한 모든 장치에 적용 가능하다.The apparatus and method for controlling a mirror of a vehicle according to the above embodiment is applicable to not only a general vehicle but also all devices requiring mirror adjustment.

또한 본 실시 예의 기술적은 사상은 상술한 실시 예 및 첨부된 도면에 의해 한정되는 것이 아니며, 첨부된 청구범위에 의해 해석된다. Further, the technical idea of the present embodiment is not limited to the above-described embodiment and the attached drawings, but is construed according to the appended claims.

따라서, 청구범위에 기재된 본 발명의 기술적 사상을 벗어나지 않는 범위 내에서 다양한 형태의 치환, 변형 및 변경이 가능하다는 것은 당 기술분야의 통상의 지식을 가진 자에게는 자명할 것이며, 이 또한 첨부된 청구범위에 기재된 기술적 사상에 속한다 할 것이다.It will be apparent to those skilled in the art that various changes in form and details may be made therein without departing from the spirit and scope of the invention as defined in the appended claims, As will be described below.

15 : 룸미러, 17,19 : 아웃사이드미러, : 12 : 제어부, 14,16,18 : 구동부,
11a : IR 카메라, 11b: RGB 카메라, 51 : 상하방향 제어모터, 52 : 좌우방향 제어모터, 52a : 회전축, 53 : 엔코더15: room mirror, 17, 19: outside mirror, 12: control unit, 14, 16, 18: drive unit,
11a: IR camera, 11b: RGB camera, 51: up and down control motor, 52: left and right control motor, 52a: rotation axis, 53: encoder

Claims (10)

운전자의 안면 및 안구 정보 중에서 적어도 하나의 정보를 센싱하는 센싱부;
상기 센싱된 정보를 처리하는 처리부; 및
상기 구성들을 제어하며, 상기 처리된 정보에 의거 미러 위치를 조정하는 구동부를 제어하는 제어부;를 포함하는 것을 특징으로 하는 차량의 미러 제어 장치.A sensing unit configured to sense at least one of facial and eye information of the driver;
A processing unit for processing the sensed information; And
And a control unit which controls the components and controls a driving unit to adjust a mirror position based on the processed information. 제 1항에 있어서, 상기 운전자의 안구정보는 IR(Infrared Ray) 카메라를 이용한 안구 인식 및 안구의 이동에 따른 운전자의 시선을 인식하여, 이를 바탕으로 차량의 미러 (mirror)를 제어하는 것을 특징으로 하는 차량의 미러 제어 장치.The method of claim 1, wherein the driver's eye information is characterized by eye recognition using an infrared ray (IR) camera and the driver's gaze according to the movement of the eye, and controls the mirror of the vehicle based on this. Mirror control device of the vehicle. 제 1항에 있어서, 상기 운전자의 안면정보는 RGB카메라에 의거한 RGB 영상을 YCbCr 색공간으로 변환하고, 피부색 참조맵의 Cb, Cr 값의 범위에 따라 얼굴영역을 검출한 값을 이용하여 미러의 각도를 조정하는 것을 특징으로 하는 차량의 미러 제어 장치.The method of claim 1, wherein the facial information of the driver converts an RGB image based on an RGB camera into a YCbCr color space, and uses a value obtained by detecting a face region according to a range of Cb and Cr values of a skin color reference map. Mirror control device of a vehicle, characterized in that for adjusting the angle. 제 1항, 2항 또는 3항에 있어서, 메모리를 가진 상기 제어부에는 센싱되어 입력되는 정보에 대해 각 미러부가 제어될 각도가 미리 테이블화 되어 저장되어 있으며, 상기 저장된 정보에 의거 미러부의 조정이 이루어지는 것을 특징으로 하는 차량의 미러 제어 장치.According to claim 1, 2 or 3, wherein the control unit having a memory is stored in advance in the table to store the angle to be controlled each mirror unit for the information to be sensed and input, the adjustment of the mirror unit is made based on the stored information Mirror control device of a vehicle, characterized in that. 제 1항에 있어서, 상기 운전자의 안면정보는 RGB 카메라에 의한 센싱정보에 의거하며, RGB 카메라로 얼굴이 왼쪽으로 움직이는 것이 감지되면 Left Mirror위치가 조정되는 것을 특징으로 하는 차량의 미러 제어 장치.The apparatus of claim 1, wherein the face information of the driver is based on sensing information of an RGB camera, and the left mirror position is adjusted when the face of the driver moves to the left by the RGB camera. 제 1항에 있어서, 상기 운전자의 안면정보는 RGB 카메라에 의한 센싱정보에 의거하며, RGB 카메라로 얼굴이 오른쪽으로 움직이는 것이 감지되면 Right Mirror가 조정되는 것을 특징으로 하는 차량의 미러 제어 장치.The mirror control apparatus of claim 1, wherein the driver's face information is based on sensing information by an RGB camera, and the right mirror is adjusted when the face of the driver is detected to the right by the RGB camera. 제 1항에 있어서, 상기 운전자의 안면정보는 RGB 카메라에 의한 센싱정보에 의거하며, 얼굴이 위 및 아래로 향하는 어느 하나의 경우에는 left 및 right Mirror가 동시에 조정되는 것을 특징으로 하는 차량의 미러 제어 장치.According to claim 1, wherein the driver's face information is based on the sensing information by the RGB camera, the mirror control of the vehicle, characterized in that the left and right Mirror is adjusted at the same time in any case of face up and down Device. IR 카메라에 의거 안구 및 시선이 센싱되는 단계;
상기 센싱된 정보가 처리되는 단계; 및
상기 처리된 정보에 의거 차량에 구성된 적어도 하나 이상의 미러가 조정되는 단계;를 포함하는 것을 특징으로 하는 차량의 미러 제어 방법.Sensing eyes and eyes based on the IR camera;
Processing the sensed information; And
And adjusting at least one mirror configured on the vehicle based on the processed information. 제 8항에 있어서, 안구의 이동에 따른 운전자의 시선을 센싱하여 차량의 미러가 제어되는 것을 특징으로 하는 차량의 미러 제어 방법.      The method of claim 8, wherein the mirror of the vehicle is controlled by sensing the driver's eye according to the movement of the eyeball. 제 8항 또는 9항에 있어서, 상기 제어부에 구성된 메모리에는 센싱되어 입력되는 정보에 대해 각 미러부가 제어될 각도가 미리 테이블화 되어 저장되어 있으며, 상기 저장된 정보에 의거 미러부의 조정이 이루어 지는 것을 특징으로 하는 차량의 미러 제어 장치.10. The method of claim 8 or 9, wherein the memory configured in the control unit is stored in advance the table to store the angle to be controlled for each mirror for the information input, the mirror is adjusted based on the stored information is characterized in that Mirror control device of a vehicle.
KR1020120089329A 2012-08-16 2012-08-16 Apparatus and method thereof for controlling mirror of vehicle KR20140023488A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020120089329A KR20140023488A (en) 2012-08-16 2012-08-16 Apparatus and method thereof for controlling mirror of vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120089329A KR20140023488A (en) 2012-08-16 2012-08-16 Apparatus and method thereof for controlling mirror of vehicle

Publications (1)

Publication Number Publication Date
KR20140023488A true KR20140023488A (en) 2014-02-27

Family

ID=50268858

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120089329A KR20140023488A (en) 2012-08-16 2012-08-16 Apparatus and method thereof for controlling mirror of vehicle

Country Status (1)

Country Link
KR (1) KR20140023488A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016104909A1 (en) * 2014-12-22 2016-06-30 Lg Electronics Inc. Controlling a vehicle
CN110166714A (en) * 2019-04-11 2019-08-23 深圳市朗驰欣创科技股份有限公司 Double light fusion methods of adjustment, double light fusion adjustment device and double light fusion devices

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016104909A1 (en) * 2014-12-22 2016-06-30 Lg Electronics Inc. Controlling a vehicle
US9720498B2 (en) 2014-12-22 2017-08-01 Lg Electronics Inc. Controlling a vehicle
CN110166714A (en) * 2019-04-11 2019-08-23 深圳市朗驰欣创科技股份有限公司 Double light fusion methods of adjustment, double light fusion adjustment device and double light fusion devices

Similar Documents

Publication Publication Date Title
US10868976B2 (en) Method for operating smartglasses in a motor vehicle, and system comprising smartglasses
JP5905691B2 (en) Vehicle operation input device
CN104619558B (en) Method and device for adjusting a mirror for a motor vehicle
KR20160108362A (en) Vehicle mirror adjustment
JP7138175B2 (en) Method of operating head-mounted electronic display device for displaying virtual content and display system for displaying virtual content
JPH0976815A (en) Auxiliary device for driving operation
CN109334573B (en) Automobile exterior rearview mirror adjusting method and device and automobile
TWI522257B (en) Vehicle safety system and operating method thereof
US9369665B2 (en) Video recording apparatus for vehicle and video recording method for vehicle
KR102444666B1 (en) Method and apparatus for controlling 3d steroscopic image in vehicle
CN109791294B (en) Method and device for operating a display system with data glasses
KR20110034155A (en) Apparatus and method for setting mirrors of motor vehicle
KR20140023488A (en) Apparatus and method thereof for controlling mirror of vehicle
CN105323539A (en) Automotive safety system and operating method thereof
KR20130013711A (en) Auto mirror control device and method thereof
CN110733423A (en) Apparatus and method for displaying rear image of vehicle
JP2019200544A (en) Safety driving assist device
KR101786581B1 (en) Displaying control apparatus of head up display
US10895980B2 (en) Electronic system with palm recognition, vehicle and method for operating the same
US20180065452A1 (en) Using vision devices and techniques to control sunlight blocking devices for vehicles
US11423675B2 (en) System and method for detecting activeness of driver
US12026958B2 (en) Vehicle camera mirror system with adjustable video feed
KR20170055625A (en) Displaying control apparatus of head up display and method thereof
US20220292841A1 (en) Vehicle camera mirror system with adjustable video feed
KR100523578B1 (en) System auto controlling the rear-mirror in a car

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E601 Decision to refuse application