KR102499116B1 - Apparatus and method for adjusting the angle of a mirror camera of a vehicle - Google Patents

Apparatus and method for adjusting the angle of a mirror camera of a vehicle Download PDF

Info

Publication number
KR102499116B1
KR102499116B1 KR1020210083723A KR20210083723A KR102499116B1 KR 102499116 B1 KR102499116 B1 KR 102499116B1 KR 1020210083723 A KR1020210083723 A KR 1020210083723A KR 20210083723 A KR20210083723 A KR 20210083723A KR 102499116 B1 KR102499116 B1 KR 102499116B1
Authority
KR
South Korea
Prior art keywords
camera
screen
face
user
specific
Prior art date
Application number
KR1020210083723A
Other languages
Korean (ko)
Other versions
KR20230001157A (en
Inventor
홍상훈
Original Assignee
경희대학교 산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 경희대학교 산학협력단 filed Critical 경희대학교 산학협력단
Priority to KR1020210083723A priority Critical patent/KR102499116B1/en
Publication of KR20230001157A publication Critical patent/KR20230001157A/en
Application granted granted Critical
Publication of KR102499116B1 publication Critical patent/KR102499116B1/en

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/50—Instruments characterised by their means of attachment to or integration in the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B60K2370/152—
    • B60K2370/21—
    • B60K2370/81—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R2011/0001—Arrangements for holding or mounting articles, not otherwise provided for characterised by position
    • B60R2011/0003—Arrangements for holding or mounting articles, not otherwise provided for characterised by position inside the vehicle
    • B60R2011/0005—Dashboard
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Multimedia (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명의 조정 장치는 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부; 상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부;를 포함할 수 있다.The control device of the present invention includes: a grasping unit for grasping user's location information based on a screen on which an image captured around a vehicle is displayed; It may include; an adjustment unit for displaying images captured by different cameras according to the location information on the screen.

Description

차량 미러용 카메라 각도 조정 장치 및 방법{Apparatus and method for adjusting the angle of a mirror camera of a vehicle}Apparatus and method for adjusting the angle of a mirror camera of a vehicle {Apparatus and method for adjusting the angle of a mirror camera of a vehicle}

본 발명은 차량의 미러 카메라의 각도를 조정하는 장치 및 방법에 관한 것이다.The present invention relates to an apparatus and method for adjusting the angle of a mirror camera of a vehicle.

차량을 이용하는 사용자의 편의를 위해, 각종 센서와 전자 장치 등이 차량에 구비되고 있는 추세이다. 특히, 사용자의 운전 편의를 위한 다양한 장치 등이 개발되고 있다.For the convenience of users using vehicles, various sensors and electronic devices are being installed in vehicles. In particular, various devices and the like for user's driving convenience are being developed.

예를 들어, 좌우측 후방 상황을 확인하기 위한 사이드미러가 벽이나 옆 차와 부딪혀 망가지기 쉽고, 무게와 공기저항으로 인해 주행을 방해해 연료의 효율성을 떨어뜨린다는 지적이 있다.For example, it is pointed out that side mirrors for checking left and right rear situations are easily damaged by bumping into a wall or a car next to it, and reduce fuel efficiency by interfering with driving due to weight and air resistance.

이러한 지적을 해결하기 위하여, 자동차 제조업체들은 사이드미러 대신 사이트스트림(sightstream)이라 불리는 카메라 모니터링 시스템을 장착한 자동차 개발에 박차를 가하고 있다.To address these points, automakers are accelerating the development of vehicles equipped with camera monitoring systems called sightstreams instead of side mirrors.

사이드 미러를 제거하고, 이를 대신한 카메라 모니터링 시스템은 기존 사이드미러 사각지대를 해소하여 주행 안정성을 향상시킬 수 있다. 이뿐만 아니라, 사이드 미러 자체의 무게를 감소시킬 수 있고, 사이드 미러가 받는 공기 저항을 제거하여, 연료효율을 개선할 수 있는 장점이 있다.A camera monitoring system that removes side mirrors and replaces them can improve driving stability by eliminating blind spots in existing side mirrors. In addition to this, there are advantages in that the weight of the side mirror itself can be reduced and fuel efficiency can be improved by removing the air resistance received by the side mirror.

그런데, 이러한 카메라 모니터링 시스템은 기존 사이드 미러를 사용하던 운전자에게 이질감을 주는 문제점이 있다.However, such a camera monitoring system has a problem of giving a sense of difference to a driver who uses an existing side mirror.

한국공개특허공보 제2016-0141597호에는 운전자의 상태에 따라 디스플레이되는 영상을 제어하고, 이를 통해 기존 사이드 미러와 같은 사용자 환경을 제공하는 기술이 나타나 있다.Korean Patent Laid-open Publication No. 2016-0141597 discloses a technology for controlling a displayed image according to a driver's condition and providing a user environment like a conventional side mirror through this.

한국공개특허공보 제2016-0141597호Korean Patent Publication No. 2016-0141597

본 발명은 카메라를 사용하는 환경에서 기존 차량용 미러와 유사한 사용자 경험을 부여할 수 있는 조정 장치 및 방법을 제공하기 위한 것이다.An object of the present invention is to provide an adjustment device and method capable of imparting a user experience similar to that of an existing vehicle mirror in an environment using a camera.

본 발명의 조정 장치는 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부; 상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부;를 포함할 수 있다.The control device of the present invention includes: a grasping unit for grasping user's location information based on a screen on which an image captured around a vehicle is displayed; It may include; an adjustment unit for displaying images captured by different cameras according to the location information on the screen.

차량에 설치된 상기 차량 주변의 서로 다른 영역을 촬영하는 복수의 촬영 모듈이 마련되고, 차량 내부에 설치되며 특정 촬영 모듈에서 촬영된 영상이 표시되는 스크린이 마련되며, 특정 촬영 모듈의 촬영 영역의 상하좌우 세부 영역을 각각 촬영하는 복수의 카메라가 상기 특정 촬영 모듈에 마련될 수 있다.A plurality of photographing modules installed in a vehicle for photographing different areas around the vehicle are provided, and a screen installed inside the vehicle and displaying an image captured by a specific photographing module is provided, and the upper, lower, left, and right sides of the photographing area of the specific photographing module are provided. A plurality of cameras each photographing a detailed region may be provided in the specific photographing module.

이때, 본 발명의 조정 장치는 상기 스크린을 대상으로 미러(mirror)에 대한 활용 동작을 수행하는 사용자의 얼굴 위치를 파악하고, 상기 얼굴 위치에 맞춰 상기 상하좌우 세부 영역 중 어느 하나의 세부 영역을 선정해서 상기 스크린에 표시할 수 있다.At this time, the adjusting device of the present invention identifies the face position of the user performing the utilization operation for the mirror with respect to the screen, and selects one of the upper, lower, left, and right detailed areas according to the face position. so that it can be displayed on the screen.

본 발명의 조정 방법은 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악 단계; 상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정 단계;를 포함할 수 있다.The adjustment method of the present invention includes a step of identifying location information of a user based on a screen on which an image captured around a vehicle is displayed; It may include an adjustment step of displaying images captured by different cameras on the screen according to the location information.

상기 조정 단계는, 상기 위치 정보를 이용하여 상기 사용자의 이전 위치에서 상기 사용자의 얼굴의 특징점으로부터 상기 스크린으로 입사되는 가상 광선의 제1 입사각과 상기 사용자의 현재 위치에서 상기 특징점으로부터 상기 스크린으로 입사되는 가상 광선의 제2 입사각을 산출할 수 있다.The adjusting step may include a first incident angle of a virtual ray incident on the screen from a feature point of the user's face at the user's previous location and a first angle of incidence incident on the screen from the feature point at the user's current location using the location information. A second incident angle of the virtual ray may be calculated.

조정 단계는 상기 제1 입사각과 상기 제2 입사각의 차이값을 산출할 수 있다.In the adjusting step, a difference value between the first incident angle and the second incident angle may be calculated.

조정 단계는 상기 이전 위치에서 상기 스크린에 표시되는 지점으로부터 상기 차이값만큼 각도 차이를 갖는 특정 지점을 추출할 수 있다.In the adjustment step, a specific point having an angular difference as much as the difference value from the point displayed on the screen from the previous location may be extracted.

조정 단계는 복수의 카메라 중에서, 상기 특정 지점을 촬영하거나 상기 특정 지점에 가장 가까운 지점을 촬영하는 특정 카메라의 촬영 영상을 상기 스크린에 표시할 수 있다.In the adjusting step, an image captured by a specific camera that captures the specific point or a point closest to the specific point among a plurality of cameras may be displayed on the screen.

본 발명의 조정 장치 및 조정 방법은 차량을 운전하는 사용자의 자연스러운 미러에 대한 활용 동작에 맞춰, 스크린에 표시되는 디스플레이 시점을 자동으로 조정할 수 있다.The control apparatus and method of the present invention can automatically adjust the display viewpoint displayed on the screen according to the user driving the vehicle's natural motion of using the mirror.

본 발명의 조정 장치 및 조정 방법은 디스플레이 시점의 신속한 전환을 위해 서로 다른 방향으로 광축이 형성된 복수의 카메라가 설비된 촬영 모듈이 마련된 환경에서 스크린에 촬영 영상을 제공하는 특정 카메라를 실시간으로 선정할 수 있다.The adjusting device and method of the present invention can select a specific camera that provides a captured image on the screen in real time in an environment where a photographing module equipped with a plurality of cameras having optical axes formed in different directions is provided for rapid switching of display viewpoints. there is.

본 발명에 따르면, 서로 다른 디스플레이 시점을 갖는 촬영 모듈에 마련된 복수의 카메라 중 하나를 선택하기 위하여 자동차 실내에 사용자의 얼굴을 촬영하는 센싱 카메라가 마련될 수 있다.According to the present invention, in order to select one of a plurality of cameras provided in a photographing module having different display viewpoints, a sensing camera for photographing a user's face may be provided inside the vehicle.

본 발명의 조정 장치는 센싱 카메라에 의해 촬영된 사용자 얼굴의 면적, 특징점의 위치를 이용해 사용자의 얼굴 위치를 파악하고, 얼굴 위치에 맞춰 복수의 카메라 중 스크린에 촬영 영상을 제공하는 특정 카메라를 선정할 수 있다.The adjustment device of the present invention determines the position of the user's face using the area of the user's face and the position of feature points captured by the sensing camera, and selects a specific camera that provides a captured image to the screen from among a plurality of cameras according to the position of the face. can

본 발명의 조정 장치에 따르면, 특정 카메라가 스크린에 촬영 영상을 제공되는 도중에도, 다른 카메라 역시 자신이 담당하는 영역에 대한 촬영을 중지하지 않고 실시간으로 수행할 수 있다. 그 결과, 사용자의 얼굴 위치 변화에 따라 스크린에 표시되는 화면이 다른 카메라의 촬영 영상으로 대체되는 과정이 즉각적으로 이루어질 수 있다.According to the control device of the present invention, while a specific camera is providing a photographed image on the screen, other cameras can also perform real-time photographing of the area they are responsible for without stopping. As a result, a process in which a screen displayed on the screen is replaced with an image captured by another camera according to a change in the position of the user's face can be performed immediately.

도 1은 본 발명의 조정 장치를 나타낸 개략도이다.
도 2는 차량에 설치된 촬영 모듈을 나타낸 개략도이다.
도 3은 촬영 모듈을 나타낸 개략도이다.
도 4는 센싱 카메라의 설치 위치를 나타낸 개략도이다.
도 5는 센싱 카메라 및 스크린의 설치 위치를 나타낸 개략도이다.
도 6은 센싱 카메라와 파악부의 동작을 나타낸 개략도이다.
도 7은 본 발명의 조정 방법을 나타낸 흐름도이다.1 is a schematic diagram showing the adjustment device of the present invention.
2 is a schematic diagram showing a photographing module installed in a vehicle.
3 is a schematic diagram showing a photographing module.
Figure 4 is a schematic diagram showing the installation position of the sensing camera.
5 is a schematic diagram showing installation positions of a sensing camera and a screen.
6 is a schematic diagram illustrating operations of a sensing camera and a grasping unit.
7 is a flow chart showing the adjustment method of the present invention.

아래에서는 첨부한 도면을 참고로 하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다. Hereinafter, with reference to the accompanying drawings, embodiments of the present invention will be described in detail so that those skilled in the art can easily carry out the present invention. However, the present invention may be embodied in many different forms and is not limited to the embodiments described herein. And in order to clearly explain the present invention in the drawings, parts irrelevant to the description are omitted, and similar reference numerals are attached to similar parts throughout the specification.

본 명세서에서, 동일한 구성요소에 대해서 중복된 설명은 생략한다.In this specification, redundant descriptions of the same components are omitted.

또한 본 명세서에서, 어떤 구성요소가 다른 구성요소에 '연결되어' 있다거나 '접속되어' 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에 본 명세서에서, 어떤 구성요소가 다른 구성요소에 '직접 연결되어' 있다거나 '직접 접속되어' 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.In addition, in this specification, when a component is referred to as being 'connected' or 'connected' to another component, it may be directly connected or connected to the other component, but another component in the middle It should be understood that may exist. On the other hand, in this specification, when a component is referred to as 'directly connected' or 'directly connected' to another component, it should be understood that no other component exists in the middle.

또한, 본 명세서에서 사용되는 용어는 단지 특정한 실시예를 설명하기 위해 사용되는 것으로써, 본 발명을 한정하려는 의도로 사용되는 것이 아니다.In addition, terms used in this specification are only used to describe specific embodiments and are not intended to limit the present invention.

또한 본 명세서에서, 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함할 수 있다. Also, in this specification, a singular expression may include a plurality of expressions unless the context clearly indicates otherwise.

또한 본 명세서에서, '포함하다' 또는 '가지다' 등의 용어는 명세서에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품, 또는 이들을 조합한 것이 존재함을 지정하려는 것일 뿐, 하나 또는 그 이상의 다른 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 할 것이다.In addition, in this specification, terms such as 'include' or 'having' are only intended to designate that there is a feature, number, step, operation, component, part, or combination thereof described in the specification, and one or more It should be understood that the presence or addition of other features, numbers, steps, operations, components, parts, or combinations thereof is not precluded.

또한 본 명세서에서, '및/또는' 이라는 용어는 복수의 기재된 항목들의 조합 또는 복수의 기재된 항목들 중의 어느 항목을 포함한다. 본 명세서에서, 'A 또는 B'는, 'A', 'B', 또는 'A와 B 모두'를 포함할 수 있다.Also in this specification, the term 'and/or' includes a combination of a plurality of listed items or any item among a plurality of listed items. In this specification, 'A or B' may include 'A', 'B', or 'both A and B'.

또한 본 명세서에서, 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략될 것이다.Also, in this specification, detailed descriptions of well-known functions and configurations that may obscure the subject matter of the present invention will be omitted.

도 1은 본 발명의 조정 장치(100)를 나타낸 개략도이다. 도 2는 차량에 설치된 촬영 모듈(10)을 나타낸 개략도이다. 도 3은 촬영 모듈(10)을 나타낸 개략도이다. 도 4는 센싱 카메라(20)의 설치 위치를 나타낸 개략도이다. 도 5는 센싱 카메라(20) 및 스크린(80)의 설치 위치를 나타낸 개략도이다. 도 6은 센싱 카메라(20)와 파악부(110)의 동작을 나타낸 개략도이다. 도 5는 운전석에서 바라본 차량 내부로, 스티어링 휠(91) 위는 전면 유리창(99)에 마련될 수 있다.1 is a schematic diagram showing an adjustment device 100 of the present invention. 2 is a schematic diagram showing a photographing module 10 installed in a vehicle. 3 is a schematic diagram showing the photographing module 10 . 4 is a schematic diagram showing the installation position of the sensing camera 20. 5 is a schematic diagram showing installation positions of the sensing camera 20 and the screen 80 . 6 is a schematic diagram showing the operation of the sensing camera 20 and the grasping unit 110 . 5 shows the interior of a vehicle viewed from the driver's seat, and the top of the steering wheel 91 may be provided on the windshield 99.

도면에 도시된 조정 장치(100)는 파악부(110), 조정부(130)를 포함할 수 있다.The adjusting device 100 shown in the drawing may include a grasping unit 110 and an adjusting unit 130 .

차량 내부의 디스플레이를 활용하여 외부 영상을 보여주는 것이 안전을 위한 추세이다. 하지만, 해당 디스플레이는 미러와 다른 이질성 때문에 차량을 운전하는 사용자의 혼란을 초래할 수 있다.It is a trend for safety to show external images using a display inside a vehicle. However, the corresponding display may cause confusion of a user driving a vehicle due to heterogeneity different from that of a mirror.

예를 들어, 사이드 미러를 통해 측면 후방을 주시하는 사용자는 사이드 미러에 반사되어 보이는 장면을 변화시키기 위해, 빛을 반사하는 사이드 미러의 광학 특성에 맞춰 얼굴 또는 눈을 움직일 수 있다(미러에 대한 활용 동작에 해당됨).For example, a user looking at the side rear through a side mirror can move his or her face or eyes in accordance with the optical properties of the side mirror to reflect light in order to change the scene reflected in the side mirror. corresponding to the action).

하지만, 디스플레이에서 영상이 표시되는 화면에 해당하는 스크린(80)은 미러에 대한 활용 동작에 상관없이 카메라(30)에서 촬영된 영상 데이터를 표시할 수 있다.However, the screen 80 corresponding to the screen on which the image is displayed on the display may display image data photographed by the camera 30 regardless of the operation of using the mirror.

미러에 대한 활용 동작에 대응하여 스크린(80)에 표시는 영상의 디스플레이 시점이 변화되도록 카메라(30)를 회전시키는 비교 실시예가 고려될 수 있다.A comparative embodiment may be considered in which the camera 30 is rotated so that the display time of the image displayed on the screen 80 is changed in response to the operation of using the mirror.

하지만, 스크린(80)을 바라보는 사용자의 시점 변화에 대응하여 모터를 이용해 카메라(30)를 회전시키는 비교 실시예는 백래시(backlash) 등의 기구적 특성 한계로 인해 사용자의 미러에 대한 활용 동작에 실시간으로 반응하지 못하는 문제가 있다. 특히, 비교 실시예에 따르면, 긴급한 상황에서 수행되는 신속한 미러 활용 동작에 대한 대처가 매우 미흡할 수 있다.However, in the comparative embodiment in which the camera 30 is rotated using a motor in response to a change in the user's point of view looking at the screen 80, due to limitations in mechanical characteristics such as backlash, the user's operation of using the mirror is difficult. There is a problem with not being able to react in real time. In particular, according to the comparative example, coping with a quick mirror utilization operation performed in an emergency situation may be very insufficient.

사용자의 미러 활용 동작에 실시간으로 신속하게 대응하기 위해 파악부(110) 및 조정부(130)가 이용될 수 있다.The grasping unit 110 and the adjusting unit 130 may be used to rapidly respond to a user's mirror utilization operation in real time.

파악부(110)는 차량 주변을 촬영한 영상이 표시되는 스크린(80)을 기준으로 사용자의 위치 정보를 파악할 수 있다.The grasping unit 110 may determine the location information of the user based on the screen 80 on which an image captured around the vehicle is displayed.

조정부(130)는 위치 정보에 따라 서로 다른 카메라(30)에서 촬영된 영상을 스크린(80)에 표시할 수 있다. 예를 들어, 서로 다른 지점을 촬영하는 제1 카메라(31)와 제2 카메라(32)가 마련될 수 있다. 만약, 사용자가 스크린(80) 또는 차량을 기준으로 제1 위치에 위치하면, 제1 카메라(31)의 촬영 영상이 스크린(80)에 표시될 수 있다. 만약, 사용자가 스크린(80) 또는 차량을 기준으로 제2 위치에 위치하면, 제2 카메라(32)의 촬영 영상이 스크린(80)에 표시될 수 있다.The controller 130 may display images captured by different cameras 30 on the screen 80 according to location information. For example, a first camera 31 and a second camera 32 capturing different points may be provided. If the user is located in the first position relative to the screen 80 or the vehicle, an image captured by the first camera 31 may be displayed on the screen 80 . If the user is located in the second position relative to the screen 80 or the vehicle, an image captured by the second camera 32 may be displayed on the screen 80 .

스크린(80)에 표시되는 여부에 상관없이 제1 카메라(31)와 제2 카메라(32)는 스크린(80)에 다른 영상이 표시되고 있는 도중에도 각자 담당 영역을 타겟으로 촬영을 지속할 수 있다. 조정부(130)는 제1 카메라(31)의 촬영 영상, 제2 카메라(32)의 촬영 영상을 모두 입수할 수 있다. 조정부(130)는 사용자의 위치 정보, 예를 들어 얼굴의 특징점의 위치에 따라, 제1 카메라(31)의 출력단을 스크린(80)에 전기적으로 연결시키거나 제2 카메라(32)의 출력단을 스크린(80)에 전기적으로 연결시키는 스위칭 동작을 수행할 수 있다.Regardless of whether or not it is displayed on the screen 80, the first camera 31 and the second camera 32 can continue to shoot their respective areas as targets even while other images are being displayed on the screen 80. . The adjustment unit 130 may acquire both the captured image of the first camera 31 and the captured image of the second camera 32 . The adjustment unit 130 electrically connects the output terminal of the first camera 31 to the screen 80 or connects the output terminal of the second camera 32 to the screen according to the location information of the user, for example, the location of facial feature points. A switching operation to electrically connect to (80) can be performed.

본 실시예에 따르면, 복수의 카메라(30)에서 촬영된 복수의 촬영 영상이 모두 조정부(130)에 입력될 수 있다. 조정부(130)는 복수의 촬영 영상 중에서 오직 하나만을 선정해서 스크린(80)에 제공할 수 있다. 선정의 기준은 파악부(110)에 의해 파악된 사용자의 위치일 수 있다. 사용자의 위치는 스크린(80)을 기준으로 할 수 있다. 또는 사용자의 위치는 스크린(80)이 고정된 차량을 기준으로 할 수 있다. 일 예로, 사용자의 위치는 차량의 대시 보드(93)(dashboard)를 기준으로 할 수 있다.According to the present embodiment, all of the plurality of captured images captured by the plurality of cameras 30 may be input to the adjustment unit 130 . The adjustment unit 130 may select only one of a plurality of captured images and provide the selected image to the screen 80 . The criterion for selection may be the location of the user ascertained by the identification unit 110 . The location of the user may be based on the screen 80 . Alternatively, the location of the user may be based on the vehicle in which the screen 80 is fixed. For example, the user's location may be based on the dashboard 93 of the vehicle.

차량의 정후방 영역, 좌측 후방 영역, 우측 후방 영역 중 어느 하나의 특정 영역을 촬영하는 촬영 모듈(10)이 마련될 수 있다. 촬영 모듈(10)은 차량의 후면 중앙, 차량의 좌측면, 차량의 우측면 중 적어도 하나에 설치될 수 있다.A photographing module 10 may be provided to photograph a specific area of any one of a front rear area, a left rear area, and a right rear area of the vehicle. The photographing module 10 may be installed on at least one of a rear center of the vehicle, a left side of the vehicle, and a right side of the vehicle.

차량의 정후방 영역을 촬영하는 촬영 모듈(10)은 룸 미러를 대신할 수 있다. 해당 촬영 모듈(10)에서 촬영된 영상이 표시되는 중앙 스크린 c가 마련될 수 있다. 중앙 스크린 c는 기존의 룸 미러 자리에 배치될 수 있다.The photographing module 10 for photographing the front-rear region of the vehicle may replace the room mirror. A central screen c displaying an image captured by the corresponding photographing module 10 may be provided. A central screen c can be placed in place of the existing room mirror.

차량의 좌측 후방 영역을 촬영하는 촬영 모듈(10), 차량의 우측 후방 영역을 촬영하는 촬영 모듈(10)은 사이드 미러를 대신할 수 있다. 해당 촬영 모듈(10)에서 촬영된 영상이 표시되는 좌측 스크린 l과 우측 스크린 r이 마련될 수 있다. 좌측 스크린 l은 기존의 좌측 사이드 미러를 대신할 수 있다. 좌측 스크린 l은 운전석 도어와 스티어링 휠(91) 사이에 배치될 수 있다. 우측 스크린 r은 기존의 우측 사이드 미러를 대신할 수 있다. 우측 스크린 r은 스티어링 휠(91) 우측에 배치될 수 있다.The photographing module 10 for photographing the left rear region of the vehicle and the photographing module 10 for photographing the right rear region of the vehicle may replace side mirrors. A left screen l and a right screen r may be provided to display an image captured by the corresponding photographing module 10 . The left screen l can replace the existing left side mirror. The left screen l may be disposed between the driver's door and the steering wheel 91. The right screen r can replace the existing right side mirror. The right screen r may be arranged to the right of the steering wheel 91 .

각 촬영 모듈(10)에는 복수의 카메라(30)가 마련될 수 있다.A plurality of cameras 30 may be provided in each photographing module 10 .

각 카메라(30)는 특정 영역이 복수의 세부 영역으로 분할될 때, 각 세부 영역을 촬영할 수 있다. 조정부(130)는 사용자의 위치 정보에 따라 복수의 카메라(30) 중 어느 하나의 카메라(30)를 선택하며, 선택된 카메라(30)에서 촬영된 영상을 스크린(80)에 표시할 수 있다.Each camera 30 may capture each detailed area when a specific area is divided into a plurality of detailed areas. The controller 130 may select one camera 30 from among the plurality of cameras 30 according to the location information of the user and display an image captured by the selected camera 30 on the screen 80 .

촬영 모듈(10)은 차량에 설치되는 케이스(19), 케이스(19)에 배열되는 복수의 카메라(30)를 포함할 수 있다. 각 카메라(30)는 특정 영역의 범위 내에서 서로 다른 세부 영역을 촬영하는 광축을 갖도록 형성될 수 있다. 다시 말해, 특정 촬영 모듈(10)에 마련된 복수의 카메라(30)는 특정 영역 내의 서로 다른 지점 p1, p2 등을 촬영할 수 있다. 각 카메라(30)의 화각 θ1, θ2 등은 서로 동일하거나 다를 수 있다.The photographing module 10 may include a case 19 installed in a vehicle and a plurality of cameras 30 arranged in the case 19 . Each camera 30 may be formed to have an optical axis for capturing different detailed areas within a range of a specific area. In other words, the plurality of cameras 30 provided in the specific photographing module 10 may photograph different points p1 and p2 in a specific area. View angles θ1 and θ2 of each camera 30 may be the same as or different from each other.

각 카메라(30)는 조정부(130)에 의한 선택 여부에 상관없이 실시간으로 담당 세부 영역을 촬영할 수 있다. 각 카메라(30)는 조정부(130)에 의해 선택되면 촬영 중이던 담당 세부 영역을 즉시 스크린(80)에 제공할 수 있다.Each camera 30 may capture a detailed region in charge in real time regardless of whether the adjustment unit 130 selects it or not. When each camera 30 is selected by the control unit 130, it may immediately provide the detailed area in charge being photographed to the screen 80.

조정부(130)는 사용자의 위치 정보를 이용하여 사용자의 이전 위치에서 사용자의 시선이 스크린(80)에 입사되는 제1 입사각과 사용자의 현재 위치에서 사용자의 시선이 스크린(80)에 입사되는 제2 입사각의 차이값을 산출할 수 있다.The adjustment unit 130 uses the user's location information to determine a first incident angle at which the user's gaze is incident on the screen 80 at the user's previous position and a second angle at which the user's gaze is incident on the screen 80 at the user's current position. The difference value of the angle of incidence can be calculated.

조정부(130)는 이전 위치에서 스크린(80)에 표시되는 지점으로부터 기산출된 차이값만큼 각도 차이를 갖는 특정 지점을 추출할 수 있다. 조정부(130)는 촬영 모듈(10)에 포함된 복수의 카메라(30) 중에서 특정 지점을 촬영하는 특정 카메라(30)를 선택할 수 있다. 조정부(130)는 선택된 특정 카메라(30)에 의해 촬영된 영상을 스크린(80)에 표시할 수 있다.The adjustment unit 130 may extract a specific point having an angular difference equal to the pre-calculated difference value from the point displayed on the screen 80 in the previous location. The adjustment unit 130 may select a specific camera 30 that captures a specific point from among a plurality of cameras 30 included in the photographing module 10 . The adjustment unit 130 may display an image captured by the selected specific camera 30 on the screen 80 .

조정부(130)는 특정 지점을 촬영하는 특정 카메라(30)가 미존재하면, 복수의 카메라(30) 중에서 해당 특정 지점에 가장 가까운 지점을 촬영하는 카메라(30)의 촬영 영상을 스크린(80)에 표시할 수 있다.If there is no specific camera 30 photographing a specific point, the adjustment unit 130 displays a photographed image of a camera 30 photographing a point closest to the specific point among a plurality of cameras 30 on the screen 80. can be displayed

한편, 사용자의 시선 대신 얼굴의 특징점을 이용해서 제1 입사각과 제2 입사각이 산출될 수도 있다.Meanwhile, the first incident angle and the second incident angle may be calculated using facial feature points instead of the user's line of sight.

일 예로, 차량의 주변을 촬영하는 복수의 카메라(30)가 마련될 때, 조정부(130)는 위치 정보를 이용하여 제1 입사각과 제2 입사각을 산출할 수 있다. 제1 입사각은 사용자의 이전 위치에서 사용자의 얼굴의 특징점으로부터 스크린(80)으로 입사되는 가상 광선의 입사각을 포함할 수 있다. 제2 입사각은 사용자의 현재 위치에서 사용자 얼굴의 특징점으로부터 스크린(80)으로 입사되는 가상 광선의 입사각을 포함할 수 있다. 특징점은 눈, 미간의 중심 등이 될 수 있다.For example, when a plurality of cameras 30 photographing the surroundings of the vehicle are provided, the adjustment unit 130 may calculate the first incident angle and the second incident angle using location information. The first incident angle may include an incident angle of a virtual ray incident on the screen 80 from a feature point of the user's face at the user's previous position. The second incident angle may include an incident angle of a virtual ray incident from a feature point of the user's face to the screen 80 at the user's current location. The feature point may be the center of the eye or the forehead.

조정부(130)는 제1 입사각과 제2 입사각의 차이값을 산출하고, 이전 위치에서 스크린(80)에 표시되는 지점으로부터 해당 차이값만큼 각도 차이를 갖는 특정 지점을 추출할 수 있다. 조정부(130)는 복수의 카메라(30) 중에서, 해당 특정 지점을 촬영하거나 해당 특정 지점에 가장 가까운 지점을 촬영하는 특정 카메라(30)의 촬영 영상을 스크린(80)에 표시할 수 있다.The adjustment unit 130 may calculate a difference value between the first incident angle and the second incident angle, and extract a specific point having an angle difference by the corresponding difference value from a point displayed on the screen 80 in a previous position. The adjustment unit 130 may display on the screen 80 an image captured by a specific camera 30 photographing a specific point or a point closest to the specific point among the plurality of cameras 30 .

조정 장치(100)에는 차량의 운전석에 착석한 사용자의 얼굴을 촬영하는 센싱 카메라(20)가 마련될 수 있다.The adjusting device 100 may include a sensing camera 20 that captures a face of a user seated in a driver's seat of a vehicle.

파악부(110)는 센싱 카메라(20)에 의해 촬영된 센싱 이미지 i에 포함된 얼굴의 면적을 이용하여 얼굴의 상하 위치를 파악할 수 있다.The detecting unit 110 may determine the vertical position of the face by using the area of the face included in the sensing image i captured by the sensing camera 20 .

구체적으로, 파악부(110)는 센싱 카메라(20)에 의해 촬영된 센싱 이미지 i에 포함된 얼굴의 면적과 기준 면적을 비교하고, 비교 결과에 따라 사용자의 얼굴이 아래로 내려가거나 위로 올라간 것으로 파악할 수 있다. 기준 면적은 사용자가 앞을 보고 차량을 정속 직진 운행할 때 센싱 카메라(20)에 의해 촬영된 얼굴의 면적을 포함할 수 있다. 또는, 기준 면적은 제조사 또는 사용자에 의해 설정된 면적을 포함할 수 있다.Specifically, the grasping unit 110 compares the area of the face included in the sensing image i captured by the sensing camera 20 with the reference area, and determines that the user's face has gone down or gone up according to the comparison result. can The reference area may include the area of the face captured by the sensing camera 20 when the user drives the vehicle straight ahead at a constant speed. Alternatively, the reference area may include an area set by a manufacturer or a user.

파악부(110)는 센싱 이미지 i에 포함된 얼굴 f의 상하좌우 경계선에 내접하는 사각형 m을 생성하고, 해당 사각형 m의 면적을 얼굴 f의 면적으로 사용할 수 있다.The grasping unit 110 may generate a rectangle m inscribed in the top, bottom, left, and right boundaries of the face f included in the sensing image i, and use the area of the rectangle m as the area of the face f.

촬영 모듈(10)에는 차량의 정후방 영역, 좌측 후방 영역, 우측 후방 영역 중 어느 하나의 특정 영역 내에서 상측 영역을 촬영하는 제1 카메라(31), 특정 영역의 하측 영역을 촬영하는 제2 카메라(32)가 마련될 수 있다.The photographing module 10 includes a first camera 31 for photographing an upper region in any one specific region among a front rear region, a left rear region, and a right rear region of the vehicle, and a second camera 31 for photographing a lower region of the specific region. (32) can be provided.

조정부(130)는 파악부(110)에 의해 사용자의 얼굴이 위로 올라간 것으로 파악되면, 제2 카메라(32)에 의해 촬영된 특정 영역의 하측 영역을 스크린(80)에 표시할 수 있다. 이에 따르면, 사용자는 머리를 위로 올리면 차량 주변의 아래가 보이는 미러 활용 동작을 그대로 사용할 수 있다.When the controller 130 detects that the user's face is raised by the detector 110, the controller 130 may display a lower region of the specific region captured by the second camera 32 on the screen 80. According to this, when the user raises his/her head upward, the user can use the mirror utilization operation in which the vehicle's surroundings can be viewed below.

조정부(130)는 파악부(110)에 의해 사용자의 얼굴이 아래로 내려간 것으로 파악되면, 제1 카메라(31)에 의해 촬영된 특정 영역의 상측 영역을 스크린(80)에 표시할 수 있다. 이에 따르면, 사용자는 머리를 아래로 내리면 차량 주변의 위가 보이는 미러 활용 동작을 그대로 사용할 수 있다.When determining that the user's face is downward, the adjuster 130 may display an area above the specific area photographed by the first camera 31 on the screen 80 . According to this, when the user puts his or her head down, the user can use the mirror utilization operation to see the top around the vehicle as it is.

센싱 카메라(20)는 사용자의 얼굴보다 낮은 위치에 배치된 대시 보드(93)(dashboard)에 설치될 수 있다. 이 경우, 파악부(110)는 센싱 이미지 i에 포함된 상기 얼굴 f의 면적이 기준 면적보다 크면, 사용자의 얼굴이 아래로 내려간 것으로 파악할 수 있다. 센싱 이미지 i에 포함된 얼굴의 면적이 커진다는 것은 얼굴이 카메라(30)에 다가온다는 것을 의미할 수 있다. 사용자의 얼굴보다 낮은 위치에 배치된 센싱 카메라(20)를 향해 다가오는 것은 사용자가 얼굴을 아래로 움직이는 것을 나타낼 수 있다. 반대로, 센싱 이미지 i에 포함된 얼굴의 면적이 작아진다는 것은 얼굴이 카메라(30)로부터 멀어진다는 것을 의미할 수 있다. 사용자의 얼굴보다 낮은 위치에 배치된 센싱 카메라(20)로부터 멀어진다는 것은 사용자가 얼굴을 위로 움직이는 것을 나타낼 수 있다.The sensing camera 20 may be installed on a dashboard 93 disposed lower than the user's face. In this case, if the area of the face f included in the sensed image i is greater than the reference area, the grasping unit 110 may determine that the face of the user has gone down. An increase in the area of the face included in the sensing image i may mean that the face approaches the camera 30 . Approaching toward the sensing camera 20 disposed at a position lower than the user's face may indicate that the user's face moves downward. Conversely, a decrease in the area of the face included in the sensing image i may mean that the face moves away from the camera 30 . Moving away from the sensing camera 20 disposed at a position lower than the user's face may indicate that the user's face is moving upward.

파악부(110)는 센싱 카메라(20)에 의해 촬영된 센싱 이미지 i에 포함된 미간 중심(위치) p와 기준 위치 o를 비교할 수 있다. 기준 위치 o는 사용자가 앞을 보고 차량을 정속 직진 운행할 때 센싱 카메라(20)에 의해 촬영된 미간 중심의 위치를 포함할 수 있다. 또는, 기준 위치 o는 사전에 제조사 또는 사용자에 의해 설정될 수 있다.The grasping unit 110 may compare the center (position) p of the forehead included in the sensing image i captured by the sensing camera 20 and the reference position o. The reference position o may include the position of the center of the forehead captured by the sensing camera 20 when the user looks forward and drives the vehicle straight ahead. Alternatively, the reference position o may be set in advance by a manufacturer or a user.

촬영 모듈(10)에는 차량의 정면에서 차량을 바라볼 때 특정 영역의 좌측 영역을 촬영하는 제3 카메라(33), 특정 영역의 우측 영역을 촬영하는 제4 카메라(34)가 마련될 수 있다.The photographing module 10 may be provided with a third camera 33 for photographing a left region of a specific region and a fourth camera 34 for photographing a right region of the specific region when viewing the vehicle from the front of the vehicle.

조정부(130)는 미간 중심 p가 사용자의 관점에서 기준 위치보다 좌측에 배치된 것으로 파악부(110)에 의해 파악되면, 제3 카메라(33)에 의해 촬영된 특정 영역의 좌측 영역을 스크린(80)에 표시할 수 있다. 도 2를 예로 들면, 사용자가 얼굴을 좌측으로 움직이면 제2 지점 p2의 촬영 영상이 스크린(80)에 표시될 수 있다.If the adjusting unit 130 recognizes that the center p between the eyebrows is disposed to the left of the reference position from the user's point of view by the determining unit 110, the left area of the specific area photographed by the third camera 33 is displayed on the screen 80. ) can be displayed. Referring to FIG. 2 as an example, when the user moves the face to the left, a captured image of the second point p2 may be displayed on the screen 80 .

조정부(130)는 미간 중심 p가 사용자의 관점에서 기준 위치 o보다 우측에 배치된 것으로 파악부(110)에 의해 파악되면, 제4 카메라(34)에 의해 촬영된 특정 영역의 우측 영역을 스크린(80)에 표시할 수 있다. 도 2의 경우, 사용자가 얼굴을 우측으로 움직이면 제1 지점 p1의 촬영 영상이 스크린(80)에 표시될 수 있다.When the adjusting unit 130 recognizes that the center of the glabella p is disposed to the right of the reference position o from the user's point of view by the determining unit 110, the right area of the specific area photographed by the fourth camera 34 is displayed on the screen ( 80) can be displayed. In the case of FIG. 2 , when the user moves the face to the right, a captured image of the first point p1 may be displayed on the screen 80 .

도 3을 참조하면, 촬영 모듈(10)에는 기본 카메라(35), 제1 카메라(31), 제2 카메라(32), 제3 카메라(33), 제4 카메라(34)가 마련될 수 있다. 도 3은 차량의 후방에서 차량을 바라봤을 때의 각 카메라(30)의 배열을 나타낼 수 있다.Referring to FIG. 3 , a basic camera 35, a first camera 31, a second camera 32, a third camera 33, and a fourth camera 34 may be provided in the photographing module 10. . 3 may show the arrangement of each camera 30 when looking at the vehicle from the rear of the vehicle.

차량의 정면에서 차량을 바라볼 때, 기본 카메라(35)는 특정 영역의 가운데 영역을 촬영할 수 있다.When looking at the vehicle from the front of the vehicle, the basic camera 35 may capture a central area of a specific area.

제1 카메라(31)는 특정 영역의 상측 영역을 촬영할 수 있다.The first camera 31 may capture an upper area of a specific area.

제2 카메라(32)는 특정 영역의 하측 영역을 촬영할 수 있다.The second camera 32 may capture a lower area of a specific area.

제3 카메라(33)는 특정 영역의 좌측 영역을 촬영할 수 있다.The third camera 33 may capture a left area of the specific area.

제4 카메라(34)는 특정 영역의 우측 영역을 촬영할 수 있다.The fourth camera 34 may capture a right area of a specific area.

파악부(110)는 센싱 카메라(20)에 의해 촬영된 센싱 이미지 i에 포함된 얼굴의 면적을 이용하여 얼굴의 상하 위치를 파악할 수 있다.The detecting unit 110 may determine the vertical position of the face by using the area of the face included in the sensing image i captured by the sensing camera 20 .

파악부(110)는 센싱 이미지 i에 포함된 미간 중심 p를 이용하여 얼굴의 좌우 위치를 파악할 수 있다.The grasping unit 110 may determine the left and right positions of the face using the glabellar center p included in the sensing image i.

조정부(130)는 얼굴의 상하 위치와 얼굴의 좌우 위치의 비교를 통해, 상하좌우 중 얼굴의 치우침이 가장 큰 한 방향만을 선정하거나 얼굴의 치우침이 없는 기준 위치 o를 선정할 수 있다.The adjustment unit 130 may select only one direction having the greatest bias among the vertical and horizontal positions or select a reference position o having no facial bias, by comparing the vertical position of the face with the left-right position of the face.

기준 위치가 선정되면, 조정부(130)는 기본 카메라(35)에서 촬영된 영상을 스크린(80)에 표시할 수 있다.When the reference position is selected, the adjustment unit 130 may display an image captured by the basic camera 35 on the screen 80 .

상측 방향이 선정되면, 조정부(130)는 제2 카메라(32)에서 촬영된 영상을 스크린(80)에 표시할 수 있다.When the upward direction is selected, the controller 130 may display an image captured by the second camera 32 on the screen 80 .

하측 방향이 선정되면, 조정부(130)는 제1 카메라(31)에서 촬영된 영상을 스크린(80)에 표시할 수 있다.When the downward direction is selected, the adjustment unit 130 may display an image captured by the first camera 31 on the screen 80 .

좌측 방향이 선정되면, 조정부(130)는 제3 카메라(33)에서 촬영된 영상을 스크린(80)에 표시할 수 있다.When the left direction is selected, the controller 130 may display an image captured by the third camera 33 on the screen 80 .

우측 방향이 선정되면, 조정부(130)는 제4 카메라(34)에서 촬영된 영상을 스크린(80)에 표시할 수 있다.When the right direction is selected, the adjustment unit 130 may display an image captured by the fourth camera 34 on the screen 80 .

얼굴 면적과 기준 면적의 차이값에 제1 가중치를 적용한 제1 값이 정의될 수 있다.A first value obtained by applying a first weight to the difference between the face area and the reference area may be defined.

미간 중심 p와 기준 위치 o의 차이값에 제2 가중치를 적용한 제2 값이 정의될 수 있다.A second value obtained by applying a second weight to a difference value between the center of the glabella p and the reference position o may be defined.

조정부(130)는 제1 값과 제2 값을 산출할 수 있다.The adjuster 130 may calculate the first value and the second value.

조정부(130)는 제1 값이 제2 값 이상이면, 얼굴의 좌우 위치를 배제하고 얼굴의 상하 위치만을 사용하여 얼굴이 상하로 치우친 방향만을 선정할 수 있다.If the first value is greater than or equal to the second value, the adjuster 130 may exclude the left and right positions of the face and select only the direction in which the face is tilted vertically by using only the vertical position of the face.

예를 들어, 제1 값은 얼굴 면적과 기준 면적의 차이값의 절대치에 제1 가중치를 곱한 것일 수 있다. 제2 값은 미간 중심과 기준 위치 o의 차이값의 절대치에 제2 가중치를 곱한 것일 수 있다.For example, the first value may be obtained by multiplying an absolute value of a difference between the facial area and the reference area by a first weight. The second value may be obtained by multiplying an absolute value of a difference between the center of the glabella and the reference position o by a second weight.

제1 값은 면적이고 제2 값은 거리일 수 있다. 제1 가중치 또는 제2 가중치는 차원이 서로 다른 제1 값과 제2 값을 어느 하나로 통일시키는 환산 단위를 포함할 수 있다.The first value may be an area and the second value may be a distance. The first weight or the second weight may include a conversion unit that unifies the first value and the second value having different dimensions into one.

조정부(130)는 제1 값이 제2 값 이상이면, 얼굴 면적과 기준 면적의 상하 차이값을 제1 문턱값과 다시 비교할 수 있다.When the first value is greater than or equal to the second value, the adjuster 130 may compare the upper and lower difference values of the face area and the reference area again with the first threshold value.

조정부(130)는 상하 차이값이 양의 제1 문턱값보다 크면 얼굴이 아래에 배치된 것으로 판단할 수 있다. 이 경우, 제1 카메라(31)의 영상이 스크린(80)에 표시될 수 있다.The adjustment unit 130 may determine that the face is disposed below when the upper and lower difference value is greater than the positive first threshold value. In this case, the image of the first camera 31 may be displayed on the screen 80 .

조정부(130)는 상하 차이값이 음의 제1 문턱값보다 작으면 얼굴이 위에 배치된 것으로 판단할 수 있다. 이 경우, 제2 카메라(32)의 영상이 스크린(80)에 표시될 수 있다.The adjuster 130 may determine that the face is disposed above when the upper and lower difference value is smaller than the negative first threshold value. In this case, an image of the second camera 32 may be displayed on the screen 80 .

조정부(130)는 상하 차이값이 음의 제1 문턱값과 양의 제1 문턱값의 사이에 있으면, 얼굴이 기준 위치에 해당하는 기본 면적 위치에 있는 것으로 판단할 수 있다. 이 경우, 기본 카메라(35)의 영상이 스크린(80)에 표시될 수 있다.The adjustment unit 130 may determine that the face is at the basic area position corresponding to the reference position when the upper and lower difference values are between the first negative threshold value and the first positive threshold value. In this case, an image of the basic camera 35 may be displayed on the screen 80 .

조정부(130)는 제1 값이 제2 값 미만이면, 미간 중심과 기준 위치의 좌우 차이값을 제2 문턱값과 다시 비교할 수 있다.If the first value is less than the second value, the adjuster 130 may again compare the left and right difference between the center of the glabella and the reference position with the second threshold value.

조정부(130)는 좌우 차이값이 양의 제2 문턱값보다 크면 얼굴이 우측에 배치된 것으로 판단할 수 있다. 이 경우, 제4 카메라(34)의 영상이 스크린(80)에 표시될 수 있다.The adjuster 130 may determine that the face is disposed on the right side when the left and right difference value is greater than the positive second threshold value. In this case, an image of the fourth camera 34 may be displayed on the screen 80 .

조정부(130)는 좌우 차이값이 음의 제2 문턱값보다 작으면 얼굴이 좌측에 배치된 것으로 판단할 수 있다. 이 경우, 제3 카메라(33)의 영상이 스크린(80)에 표시될 수 있다.The adjuster 130 may determine that the face is disposed on the left side when the left-right difference value is smaller than the negative second threshold value. In this case, the image of the third camera 33 may be displayed on the screen 80 .

조정부(130)는 좌우 차이값이 음의 제2 문턱값과 양의 제2 문턱값의 사이에 있으며, 얼굴이 기준 위치에 있는 것으로 판단할 수 있다. 이 경우, 기본 카메라(35)의 영상이 스크린(80)에 표시될 수 있다.The adjuster 130 may determine that the left and right difference value is between the negative second threshold value and the positive second threshold value, and that the face is at the reference position. In this case, an image of the basic camera 35 may be displayed on the screen 80 .

이상에서 살펴본 조정 장치(100)는 스크린(80)을 대상으로 미러(mirror)에 대한 활용 동작을 수행하는 사용자의 얼굴 위치를 파악할 수 있다. 그리고, 조정 장치(100)는 얼굴 위치에 맞춰 복수의 카메라(30)에 의해 각각 촬영되는 상하좌우 세부 영역 중 어느 하나의 세부 영역을 선정해서 스크린(80)에 표시할 수 있다.The adjustment device 100 as described above may determine the position of the face of the user performing the utilization operation for the mirror with respect to the screen 80 . In addition, the adjusting device 100 may select one of the upper, lower, left, and right detailed regions respectively photographed by the plurality of cameras 30 according to the position of the face and display the selected region on the screen 80 .

도 7은 본 발명의 조정 방법을 나타낸 흐름도이다.7 is a flow chart showing the adjustment method of the present invention.

도 7에 도시된 조정 방법은 도 1에 도시된 조정 장치(100)에 의해 수행될 수 있다.The adjustment method shown in FIG. 7 may be performed by the adjustment device 100 shown in FIG. 1 .

조정 방법은 파악 단계(S 510) 및 조정 단계(S 520)를 포함할 수 있다.The adjustment method may include an identification step (S 510) and an adjustment step (S 520).

파악 단계(S 510)는 차량 주변을 촬영한 영상이 표시되는 스크린(80)을 기준으로 사용자의 위치 정보를 파악할 수 있다. 파악 단계(S 510)는 파악부(110)에 의해 수행될 수 있다.In the grasping step (S510), the location information of the user may be grasped based on the screen 80 on which an image captured around the vehicle is displayed. The identification step (S510) may be performed by the identification unit 110.

조정 단계(S 520)는 사용자의 위치 정보에 따라 서로 다른 카메라(30)에서 촬영된 영상을 스크린(80)에 표시할 수 있다. 조정 단계(S 520)는 조정부(130)에 의해 수행될 수 있다.In the adjusting step (S520), images captured by different cameras 30 according to the location information of the user may be displayed on the screen 80. The adjustment step (S520) may be performed by the adjustment unit 130.

구체적으로 조정 단계(S 520)는 위치 정보를 이용하여 사용자의 이전 위치에서 사용자의 얼굴의 특징점으로부터 스크린(80)으로 입사되는 가상 광선의 제1 입사각과 사용자의 현재 위치에서 특징점으로부터 스크린(80)으로 입사되는 가상 광선의 제2 입사각을 산출할 수 있다. 사용자의 이전 위치와 현재 위치는 1샘플링 간격에 해당될 수 있다. 사용자의 이전 위치는 현재 위치에 대해 기준 위치로 사용될 수 있다.In detail, the adjusting step (S520) is the first angle of incidence of a virtual ray incident on the screen 80 from the feature point of the user's face at the user's previous location and the screen 80 from the feature point at the user's current location by using the location information. It is possible to calculate the second incident angle of the virtual light beam incident to . The user's previous location and current location may correspond to one sampling interval. The user's previous location may be used as a reference location for the current location.

조정 단계(S 520)는 제1 입사각과 제2 입사각의 차이값을 산출할 수 있다.In the adjusting step (S520), a difference value between the first incident angle and the second incident angle may be calculated.

조정 단계(S 520)는 이전 위치에서 스크린(80)에 표시되는 지점으로부터 입사각의 차이값만큼 각도 차이를 갖는 특정 지점을 추출할 수 있다.In the adjustment step (S520), a specific point having an angular difference from the point displayed on the screen 80 at the previous location by the difference value of the incident angle may be extracted.

조정 단계(S 520)는 복수의 카메라(30) 중에서, 특정 지점을 촬영하거나 특정 지점에 가장 가까운 지점을 촬영하는 특정 카메라(30)의 촬영 영상을 스크린(80)에 표시할 수 있다.In the adjusting step ( S520 ), an image captured by a specific camera 30 photographing a specific point or a point closest to the specific point among the plurality of cameras 30 may be displayed on the screen 80 .

본 발명의 조정 방법은 기본 카메라(35)의 영상을 스크린(80)에 표시하는 초기화 과정, 얼굴 모션 관측해서 얼굴의 위치를 파악하는 과정, 얼굴 위치를 기준으로 스크린(80)에 광선 반사적으로 대응되는 각도 변화만큼 현재 표시되는 영상과 각도차를 갖는 영상을 촬영하는 특정 카메라(30)를 스크린(80)에 신호적으로 연결시키는 과정을 포함할 수 있다.The adjustment method of the present invention includes an initialization process of displaying the image of the main camera 35 on the screen 80, a process of detecting the position of the face by observing the motion of the face, and responding to the screen 80 by reflecting light rays based on the position of the face. It may include a process of signally connecting a specific camera 30 to the screen 80 that captures an image having an angle difference from the currently displayed image by an angle change corresponding to the desired angle.

한편, 본 발명의 실시예는 지금까지 설명한 장치 및/또는 방법을 통해서만 구현되는 것은 아니며, 본 발명의 실시예의 구성에 대응하는 기능을 실현하는 프로그램 또는 그 프로그램이 기록된 기록 매체를 통해 구현될 수도 있으며, 이러한 구현은 상술한 실시예의 기재로부터 본 발명이 속하는 기술 분야의 통상의 기술자라면 쉽게 구현할 수 있는 것이다. Meanwhile, the embodiments of the present invention are not implemented only through the devices and/or methods described so far, and may be implemented through a program that realizes functions corresponding to the configuration of the embodiments of the present invention or a recording medium in which the program is recorded. And, such implementation can be easily implemented by those skilled in the art from the description of the above-described embodiment.

이상에서 본 발명의 실시예에 대하여 상세하게 설명하였지만 본 발명의 권리범위는 이에 한정되는 것은 아니고 다음의 청구범위에서 정의하고 있는 본 발명의 기본 개념을 이용한 통상의 기술자의 여러 변형 및 개량 형태 또한 본 발명의 권리범위에 속하는 것이다.Although the embodiments of the present invention have been described in detail above, the scope of the present invention is not limited thereto, and various modifications and improvements of those skilled in the art using the basic concept of the present invention defined in the following claims are also provided. fall within the scope of the invention.

10...촬영 모듈 19...케이스
20...센싱 카메라 30...카메라
31...제1 카메라 32...제2 카메라
33...제3 카메라 34...제4 카메라
35...기본 카메라 80...스크린
91...스티어링 휠 93...대시 보드
99...전면 유리창 100...조정 장치
110...파악부 130...조정부10 ... Shooting module 19 ... Case
20 ... sensing camera 30 ... camera
31 ... first camera 32 ... second camera
33... 3rd camera 34... 4th camera
35 ... primary camera 80 ... screen
91 ... steering wheel 93 ... dashboard
99 ... Front windshield 100 ... Adjustment device
110 ... grip unit 130 ... adjustment unit

Claims (14)

차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부;
상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부; 및
상기 차량의 정후방 영역, 좌측 후방 영역, 우측 후방 영역 중 어느 하나의 특정 영역을 촬영하는 촬영 모듈을 포함하고,
상기 촬영 모듈에는 상기 특정 영역 내의 서로 다른 지점을 촬영하는 복수의 카메라가 마련되며,
상기 조정부는 상기 위치 정보를 이용하여 상기 사용자의 이전 위치에서 상기 사용자의 시선이 상기 스크린에 입사되는 제1 입사각과 상기 사용자의 현재 위치에서 상기 사용자의 시선이 상기 스크린에 입사되는 제2 입사각의 차이값을 산출하고,
상기 조정부는 상기 이전 위치에서 상기 스크린에 표시되는 지점으로부터 상기 차이값만큼 각도 차이를 갖는 특정 지점을 추출하며,
상기 조정부는 상기 촬영 모듈에 포함된 복수의 카메라 중에서 상기 특정 지점을 촬영하는 특정 카메라를 선택하고,
상기 조정부는 상기 특정 카메라에 의해 촬영된 영상을 상기 스크린에 표시하는 조정 장치.
a grasping unit for grasping location information of a user based on a screen on which an image captured around a vehicle is displayed;
an adjustment unit displaying images captured by different cameras on the screen according to the location information; and
A photographic module for capturing a specific area of any one of a front rear area, a left rear area, and a right rear area of the vehicle,
The photographing module is provided with a plurality of cameras for photographing different points in the specific area,
The adjustment unit uses the location information to determine a difference between a first incident angle at which the user's gaze is incident on the screen at the previous location and a second incident angle at which the user's gaze at the current location is incident on the screen by using the location information. calculate the value,
The adjustment unit extracts a specific point having an angular difference as much as the difference value from the point displayed on the screen from the previous position,
The adjustment unit selects a specific camera for capturing the specific point from among a plurality of cameras included in the photographing module;
The adjustment unit displays an image captured by the specific camera on the screen.
 제1항에 있어서,
각 카메라는 상기 특정 영역이 복수의 세부 영역으로 분할될 때, 각 세부 영역을 촬영하고,
상기 조정부는 상기 위치 정보에 따라 복수의 카메라 중 어느 하나의 카메라를 선택하며, 선택된 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정 장치.
According to claim 1,
Each camera photographs each detailed region when the specific region is divided into a plurality of detailed regions;
wherein the control unit selects one of a plurality of cameras according to the location information, and displays an image captured by the selected camera on the screen.
 제2항에 있어서,
상기 촬영 모듈은 상기 차량에 설치되는 케이스, 상기 케이스에 배열되는 복수의 카메라를 포함하고,
각 카메라는 서로 다른 세부 영역을 촬영하는 광축을 갖도록 형성되며,
각 카메라는 상기 조정부에 의한 선택 여부에 상관없이 실시간으로 담당 세부 영역을 촬영하고, 상기 조정부에 의해 선택되면 촬영 중이던 담당 세부 영역을 즉시 상기 스크린에 제공하는 조정 장치.
According to claim 2,
The photographing module includes a case installed in the vehicle and a plurality of cameras arranged in the case,
Each camera is formed to have an optical axis that captures different detailed areas,
Each camera captures a detailed region in charge in real time regardless of whether the camera is selected by the adjustment unit, and immediately provides the detailed region in charge on the screen when selected by the adjustment unit.
 삭제delete 제1항에 있어서,
상기 조정부는 상기 특정 지점을 촬영하는 특정 카메라가 미존재하면, 복수의 상기 카메라 중에서 상기 특정 지점에 가장 가까운 지점을 촬영하는 카메라의 촬영 영상을 상기 스크린에 표시하는 조정 장치.
According to claim 1,
Wherein the adjustment unit displays an image captured by a camera photographing a point closest to the specific point among a plurality of cameras on the screen if a specific camera capturing the specific point does not exist.
 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부;
상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부; 및
상기 차량의 주변을 촬영하는 복수의 카메라를 포함하고,
상기 조정부는 상기 위치 정보를 이용하여 상기 사용자의 이전 위치에서 상기 사용자의 얼굴의 특징점으로부터 상기 스크린으로 입사되는 가상 광선의 제1 입사각과 상기 사용자의 현재 위치에서 상기 특징점으로부터 상기 스크린으로 입사되는 가상 광선의 제2 입사각을 산출하며,
상기 조정부는 상기 제1 입사각과 상기 제2 입사각의 차이값을 산출하고,
상기 조정부는 상기 이전 위치에서 상기 스크린에 표시되는 지점으로부터 상기 차이값만큼 각도 차이를 갖는 특정 지점을 추출하며,
상기 조정부는 복수의 카메라 중에서, 상기 특정 지점을 촬영하거나 상기 특정 지점에 가장 가까운 지점을 촬영하는 특정 카메라의 촬영 영상을 상기 스크린에 표시하는 조정 장치.
a grasping unit for grasping location information of a user based on a screen on which an image captured around a vehicle is displayed;
an adjustment unit displaying images captured by different cameras on the screen according to the location information; and
Including a plurality of cameras to photograph the surroundings of the vehicle,
The adjusting unit uses the location information to determine a first incident angle of a virtual ray incident on the screen from a feature point of the user's face at the user's previous location and a virtual ray incident on the screen from the feature point at the current location of the user. Calculate the second angle of incidence of
The adjustment unit calculates a difference value between the first incident angle and the second incident angle,
The adjustment unit extracts a specific point having an angular difference as much as the difference value from the point displayed on the screen from the previous position,
The adjustment unit displays on the screen an image taken by a specific camera that captures the specific point or a point closest to the specific point among the plurality of cameras.
 제1항에 있어서,
상기 차량의 운전석에 착석한 상기 사용자의 얼굴을 촬영하는 센싱 카메라가 마련되고,
상기 파악부는 상기 센싱 카메라에 의해 촬영된 센싱 이미지에 포함된 상기 얼굴의 면적을 이용하여 상기 얼굴의 상하 위치를 파악하는 조정 장치.
According to claim 1,
A sensing camera for photographing the face of the user sitting in the driver's seat of the vehicle is provided;
The adjusting device of claim 1 , wherein the grasping unit detects a vertical position of the face by using an area of the face included in a sensing image captured by the sensing camera.
 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부;
상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부;
상기 차량의 정후방 영역, 좌측 후방 영역, 우측 후방 영역 중 어느 하나의 특정 영역을 촬영하는 촬영 모듈; 및
상기 차량의 운전석에 착석한 상기 사용자의 얼굴을 촬영하는 센싱 카메라를 포함하고,
상기 파악부는 상기 센싱 카메라에 의해 촬영된 센싱 이미지에 포함된 상기 얼굴의 면적과 기준 면적을 비교하고, 비교 결과에 따라 상기 사용자의 얼굴이 아래로 내려가거나 위로 올라간 것으로 파악하며,
상기 촬영 모듈에는 상기 특정 영역의 상측 영역을 촬영하는 제1 카메라, 상기 특정 영역의 하측 영역을 촬영하는 제2 카메라가 마련되며,
상기 조정부는 상기 파악부에 의해 상기 사용자의 얼굴이 위로 올라간 것으로 파악되면, 상기 제2 카메라에 의해 촬영된 상기 특정 영역의 하측 영역을 상기 스크린에 표시하고,
상기 조정부는 상기 파악부에 의해 상기 사용자의 얼굴이 아래로 내려간 것으로 파악되면, 상기 제1 카메라에 의해 촬영된 상기 특정 영역의 상측 영역을 상기 스크린에 표시하는 조정 장치.
a grasping unit for grasping location information of a user based on a screen on which an image captured around a vehicle is displayed;
an adjustment unit displaying images captured by different cameras on the screen according to the location information;
a photographing module for capturing any one specific area among a front rear area, a left rear area, and a right rear area of the vehicle; and
A sensing camera for capturing a face of the user seated in a driver's seat of the vehicle;
The detecting unit compares the area of the face included in the sensing image captured by the sensing camera with a reference area, and determines that the user's face has gone down or gone up according to the comparison result;
The photographing module is provided with a first camera for photographing an upper region of the specific region and a second camera for photographing a lower region of the specific region;
When the adjustment unit recognizes that the user's face is raised by the grasping unit, the lower area of the specific area photographed by the second camera is displayed on the screen;
wherein the adjusting unit displays an area above the specific area captured by the first camera on the screen when it is recognized by the grasping unit that the user's face has gone down.
 제8항에 있어서,
상기 센싱 카메라는 상기 사용자의 얼굴보다 낮은 위치에 배치된 대시 보드(dashboard)에 설치되고,
상기 파악부는 상기 센싱 이미지에 포함된 상기 얼굴의 면적이 상기 기준 면적보다 크면, 상기 사용자의 얼굴이 아래로 내려간 것으로 파악하는 조정 장치.
According to claim 8,
The sensing camera is installed on a dashboard disposed lower than the user's face,
wherein the determining unit determines that the face of the user is lowered when the area of the face included in the sensing image is greater than the reference area.
 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부;
상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부;
상기 차량의 정후방 영역, 좌측 후방 영역, 우측 후방 영역 중 어느 하나의 특정 영역을 촬영하는 촬영 모듈; 및
상기 차량의 운전석에 착석한 상기 사용자의 얼굴을 촬영하는 센싱 카메라를 포함하고,
상기 파악부는 상기 센싱 카메라에 의해 촬영된 센싱 이미지에 포함된 미간 중심과 기준 위치를 비교하며,
상기 촬영 모듈에는 상기 차량의 정면에서 상기 차량을 바라볼 때 상기 특정 영역의 좌측 영역을 촬영하는 제3 카메라, 상기 특정 영역의 우측 영역을 촬영하는 제4 카메라가 마련되며,
상기 조정부는 상기 미간 중심이 상기 사용자의 관점에서 상기 기준 위치보다 좌측에 배치된 것으로 상기 파악부에 의해 파악되면, 상기 제3 카메라에 의해 촬영된 상기 특정 영역의 좌측 영역을 상기 스크린에 표시하고,
상기 조정부는 상기 미간 중심이 상기 사용자의 관점에서 상기 기준 위치보다 우측에 배치된 것으로 상기 파악부에 의해 파악되면, 상기 제4 카메라에 의해 촬영된 상기 특정 영역의 우측 영역을 상기 스크린에 표시하는 조정 장치.
a grasping unit for grasping location information of a user based on a screen on which an image captured around a vehicle is displayed;
an adjustment unit displaying images captured by different cameras on the screen according to the location information;
a photographing module for capturing any one specific area among a front rear area, a left rear area, and a right rear area of the vehicle; and
A sensing camera for capturing a face of the user seated in a driver's seat of the vehicle;
The grasping unit compares the center of the forehead included in the sensing image captured by the sensing camera with a reference position;
The photographing module is provided with a third camera for photographing a left region of the specific region and a fourth camera for photographing a right region of the specific region when viewing the vehicle from the front of the vehicle;
The adjustment unit displays an area to the left of the specific area captured by the third camera on the screen when the grasping unit recognizes that the center of the forehead is disposed to the left of the reference position from the user's point of view;
The adjustment unit displays an area to the right of the specific area captured by the fourth camera on the screen when the determination unit recognizes that the center of the forehead is disposed to the right of the reference position from the user's point of view. Device.
 차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악부;
상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정부; 및
상기 차량의 정후방 영역, 좌측 후방 영역, 우측 후방 영역 중 어느 하나의 특정 영역을 촬영하는 촬영 모듈을 포함하고,
상기 촬영 모듈에는 상기 차량의 정면에서 상기 차량을 바라볼 때, 상기 특정 영역의 가운데 영역을 촬영하는 기본 카메라, 상기 특정 영역의 상측 영역을 촬영하는 제1 카메라, 상기 특정 영역의 하측 영역을 촬영하는 제2 카메라, 상기 특정 영역의 좌측 영역을 촬영하는 제3 카메라, 상기 특정 영역의 우측 영역을 촬영하는 제4 카메라가 마련되며,
상기 차량의 운전석에 착석한 상기 사용자의 얼굴을 촬영하는 센싱 카메라가 마련되고,
상기 파악부는 상기 센싱 카메라에 의해 촬영된 센싱 이미지에 포함된 상기 얼굴의 면적을 이용하여 상기 얼굴의 상하 위치를 파악하며,
상기 파악부는 상기 센싱 이미지에 포함된 미간 중심을 이용하여 상기 얼굴의 좌우 위치를 파악하고,
상기 조정부는 상기 상하 위치와 상기 좌우 위치의 비교를 통해, 상하좌우 중 상기 얼굴의 치우침이 가장 큰 한 방향만을 선정하거나 상기 얼굴의 치우침이 없는 기준 위치를 선정하며,
상기 기준 위치가 선정되면, 상기 조정부는 상기 기본 카메라에서 촬영된 영상을 상기 스크린에 표시하고,
상측 방향이 선정되면, 상기 조정부는 상기 제2 카메라에서 촬영된 영상을 상기 스크린에 표시하며,
하측 방향이 선정되면, 상기 조정부는 상기 제1 카메라에서 촬영된 영상을 상기 스크린에 표시하고,
좌측 방향이 선정되면, 상기 조정부는 상기 제3 카메라에서 촬영된 영상을 상기 스크린에 표시하며,
우측 방향이 선정되면, 상기 조정부는 상기 제4 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정 장치.
a grasping unit for grasping location information of a user based on a screen on which an image captured around a vehicle is displayed;
an adjustment unit displaying images captured by different cameras on the screen according to the location information; and
A photographic module for capturing a specific area of any one of a front rear area, a left rear area, and a right rear area of the vehicle,
When the vehicle is viewed from the front of the vehicle, the photographing module includes a basic camera for photographing a central region of the specific region, a first camera for photographing an upper region of the specific region, and a photographing of a lower region of the specific region. A second camera, a third camera for capturing a left region of the specific region, and a fourth camera for capturing a right region of the specific region are provided;
A sensing camera for photographing the face of the user sitting in the driver's seat of the vehicle is provided;
The grasping unit grasps the vertical position of the face using the area of the face included in the sensing image captured by the sensing camera;
The grasping unit grasps the left and right positions of the face using the center of the forehead included in the sensing image;
The adjustment unit selects only one direction in which the bias of the face is greatest among the vertical and horizontal positions or selects a reference position without the bias of the face, through comparison of the vertical position and the horizontal position,
When the reference position is selected, the adjustment unit displays an image captured by the basic camera on the screen,
When the upward direction is selected, the control unit displays an image captured by the second camera on the screen,
When the downward direction is selected, the adjustment unit displays an image captured by the first camera on the screen,
When the left direction is selected, the control unit displays an image captured by the third camera on the screen,
If the right direction is selected, the adjustment unit displays the image captured by the fourth camera on the screen.
 제11항에 있어서,
상기 얼굴 면적과 기준 면적의 차이값에 제1 가중치를 적용한 제1 값이 정의되고, 상기 미간 중심과 상기 기준 위치의 차이값에 제2 가중치를 적용한 제2 값이 정의될 때,
상기 조정부는 상기 제1 값과 상기 제2 값을 산출하고,
상기 조정부는 상기 제1 값이 상기 제2 값 이상이면, 상기 얼굴의 좌우 위치를 배제하고 상기 얼굴의 상하 위치만을 사용하여 상기 얼굴이 상하로 치우친 방향만을 선정하며,
상기 조정부는 상기 제1 값이 상기 제2 값 미만이면, 상기 얼굴의 상하 위치를 배제하고 상기 얼굴의 좌우 위치만을 사용하여 상기 얼굴이 좌우로 치우친 방향만을 선정하는 조정 장치.
According to claim 11,
When a first value obtained by applying a first weight to the difference between the face area and the reference area is defined, and a second value obtained by applying a second weight to the difference between the center of the glabella and the reference position is defined,
The adjustment unit calculates the first value and the second value,
When the first value is greater than or equal to the second value, the adjustment unit excludes the left and right positions of the face and selects only the direction in which the face is tilted vertically by using only the vertical position of the face;
wherein the adjustment unit selects only a direction in which the face is biased left and right using only the left and right positions of the face by excluding the vertical position of the face when the first value is less than the second value.
 삭제delete 조정 장치에 의해 수행되는 조정 방법에 있어서,
차량 주변을 촬영한 영상이 표시되는 스크린을 기준으로 사용자의 위치 정보를 파악하는 파악 단계;
상기 위치 정보에 따라 서로 다른 카메라에서 촬영된 영상을 상기 스크린에 표시하는 조정 단계;를 포함하고,
상기 조정 단계는,
상기 위치 정보를 이용하여 상기 사용자의 이전 위치에서 상기 사용자의 얼굴의 특징점으로부터 상기 스크린으로 입사되는 가상 광선의 제1 입사각과 상기 사용자의 현재 위치에서 상기 특징점으로부터 상기 스크린으로 입사되는 가상 광선의 제2 입사각을 산출하며,
상기 제1 입사각과 상기 제2 입사각의 차이값을 산출하고,
상기 이전 위치에서 상기 스크린에 표시되는 지점으로부터 상기 차이값만큼 각도 차이를 갖는 특정 지점을 추출하며,
복수의 카메라 중에서, 상기 특정 지점을 촬영하거나 상기 특정 지점에 가장 가까운 지점을 촬영하는 특정 카메라의 촬영 영상을 상기 스크린에 표시하는 조정 방법.In the adjustment method performed by the adjustment device,
A determination step of determining location information of a user based on a screen on which an image captured around a vehicle is displayed;
An adjustment step of displaying images captured by different cameras on the screen according to the location information;
The adjustment step is
A first angle of incidence of a virtual ray incident on the screen from a feature point of the user's face at the user's previous location and a second angle of incidence of a virtual ray incident on the screen from the feature point at the current location of the user using the location information. Calculate the angle of incidence,
Calculate a difference between the first angle of incidence and the second angle of incidence;
Extracting a specific point having an angular difference as much as the difference value from the point displayed on the screen from the previous position;
An adjustment method of displaying, on the screen, an image taken by a specific camera that captures the specific point or a point closest to the specific point among a plurality of cameras.
KR1020210083723A 2021-06-28 2021-06-28 Apparatus and method for adjusting the angle of a mirror camera of a vehicle KR102499116B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020210083723A KR102499116B1 (en) 2021-06-28 2021-06-28 Apparatus and method for adjusting the angle of a mirror camera of a vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210083723A KR102499116B1 (en) 2021-06-28 2021-06-28 Apparatus and method for adjusting the angle of a mirror camera of a vehicle

Publications (2)

Publication Number Publication Date
KR20230001157A KR20230001157A (en) 2023-01-04
KR102499116B1 true KR102499116B1 (en) 2023-02-16

Family

ID=84925341

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210083723A KR102499116B1 (en) 2021-06-28 2021-06-28 Apparatus and method for adjusting the angle of a mirror camera of a vehicle

Country Status (1)

Country Link
KR (1) KR102499116B1 (en)

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004098917A (en) * 2002-09-11 2004-04-02 Auto Network Gijutsu Kenkyusho:Kk On-vehicle camera device and device for monitoring around vehicle
JP2004268860A (en) 2003-03-12 2004-09-30 Sanyo Electric Co Ltd Rearward confirmation device for movable body
JP2020052018A (en) 2018-09-28 2020-04-02 株式会社Ｓｕｂａｒｕ Stereo camera device for vehicles
KR102106572B1 (en) * 2018-12-11 2020-05-07 (주)미경테크 Around view monitoring system and method by adjusting view angle of camera for vehicle

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101714876B1 (en) 2015-06-01 2017-03-09 엘지전자 주식회사 Driver Assistance Apparatus and Vehicle

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004098917A (en) * 2002-09-11 2004-04-02 Auto Network Gijutsu Kenkyusho:Kk On-vehicle camera device and device for monitoring around vehicle
JP2004268860A (en) 2003-03-12 2004-09-30 Sanyo Electric Co Ltd Rearward confirmation device for movable body
JP2020052018A (en) 2018-09-28 2020-04-02 株式会社Ｓｕｂａｒｕ Stereo camera device for vehicles
KR102106572B1 (en) * 2018-12-11 2020-05-07 (주)미경테크 Around view monitoring system and method by adjusting view angle of camera for vehicle

Also Published As

Publication number Publication date
KR20230001157A (en) 2023-01-04

Similar Documents

Publication Publication Date Title
CN110239441B (en) Automatic field-of-view adjusting method and device for rearview mirror
KR101544524B1 (en) Display system for augmented reality in vehicle, and method for the same
CN107223223B (en) Control method and system for first-view-angle flight of unmanned aerial vehicle and intelligent glasses
JP5093611B2 (en) Vehicle periphery confirmation device
CN111873911B (en) Method, device, medium, and electronic apparatus for adjusting rearview mirror
JP4323377B2 (en) Image display device
EP2303639B1 (en) Vehicle mirror adjustment method and system
WO2005088970A1 (en) Image generation device, image generation method, and image generation program
CN106030465B (en) The system and method for the viewing window position of head-up display device and vehicle are adjusted for turn on automatically and/or switching adjusting means
US11582425B2 (en) Driver monitoring system using camera with adjustable mirror
CN108621947A (en) A kind of vehicle-mounted head-up-display system of automatic adjusument
JP7138175B2 (en) Method of operating head-mounted electronic display device for displaying virtual content and display system for displaying virtual content
US20190339535A1 (en) Automatic eye box adjustment
US9369665B2 (en) Video recording apparatus for vehicle and video recording method for vehicle
JP2005269010A (en) Image creating device, program and method
KR102304391B1 (en) vehicle and control method thereof
KR102499116B1 (en) Apparatus and method for adjusting the angle of a mirror camera of a vehicle
JP4840638B2 (en) Vehicle occupant monitoring device
CN115223231A (en) Sight direction detection method and device
US11810372B2 (en) Multiple in-cabin cameras and lighting sources for driver monitoring
CN115018942A (en) Method and apparatus for image display of vehicle
US11491872B2 (en) Vehicle and method for displaying an image onto a windshield
CN110228418A (en) For the control method of rear-viewing mirror in vehicle, device, system and vehicle
KR102673466B1 (en) Digital Side Mirror Control System and Method for Vehicle
US12026958B2 (en) Vehicle camera mirror system with adjustable video feed

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right