KR20230015201A - 차량 영상 제어 장치 및 그 방법 - Google Patents

차량 영상 제어 장치 및 그 방법 Download PDF

Info

Publication number
KR20230015201A
KR20230015201A KR1020210096660A KR20210096660A KR20230015201A KR 20230015201 A KR20230015201 A KR 20230015201A KR 1020210096660 A KR1020210096660 A KR 1020210096660A KR 20210096660 A KR20210096660 A KR 20210096660A KR 20230015201 A KR20230015201 A KR 20230015201A
Authority
KR
South Korea
Prior art keywords
image
vehicle
controller
image controller
camera unit
Prior art date
Application number
KR1020210096660A
Other languages
English (en)
Inventor
정동혁
서문현
김균하
이우성
강태룡
Original Assignee
현대자동차주식회사
기아 주식회사
주식회사 유라코퍼레이션
현대모비스 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 현대자동차주식회사, 기아 주식회사, 주식회사 유라코퍼레이션, 현대모비스 주식회사 filed Critical 현대자동차주식회사
Priority to KR1020210096660A priority Critical patent/KR20230015201A/ko
Priority to US17/742,259 priority patent/US11758267B2/en
Priority to DE102022113077.0A priority patent/DE102022113077A1/de
Priority to CN202210569062.9A priority patent/CN115696032A/zh
Publication of KR20230015201A publication Critical patent/KR20230015201A/ko

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00—Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04—Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W10/00—Conjoint control of vehicle sub-units of different type or different function
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18—Propelling the vehicle
    • B60W30/182—Selecting between different operative modes, e.g. comfort and performance modes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001—Details of the control system
    • B60W2050/0043—Signal treatments, identification of variables or parameters, parameter estimation or state estimation
    • B60W2050/0057—Frequency analysis, spectral techniques or transforms
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B60W2420/42—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2556/00—Input parameters relating to data
    • B60W2556/45—External transmission of data to or from the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transportation (AREA)
  • Automation & Control Theory (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Mathematical Physics (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

본 발명은 ISP(Image Signal Processor)가 내장되지 않은 차량 카메라의 영상에 대한 차량 영상 제어 장치 및 그 방법에 관한 것으로, 본 발명에 의하면, 통신부가, 차량 시스템으로부터 차량의 작동 모드에 대한 정보를 수신하고, ISP가 내장되지 않은 카메라부가, 차량의 주변 영상을 획득하여, 제 1 영상 제어부에 전송하고, 영상 처리를 수행하는 제 1 ISP가 구비된 제 1 영상 제어부가, 주변 영상을 영상 처리를 수행하는 제 2 ISP가 구비된 제 2 영상 제어부에 공유하고, 제 1 영상 제어부 또는 제 2 영상 제어부가, 차량의 작동 모드에 따라서, 택일적으로 카메라부에 대한 제어권을 가질 수 있다. 본 발명을 통해, 카메라에 내장되었던 ISP를 제어기로 이관하는 기술이 각각의 차량 작동 모드에 따라 적절하게 동작 가능하도록 하는 효과를 제공할 수 있다.

Description

차량 영상 제어 장치 및 그 방법{APPARATUS FOR CONTROLLING IMAGE OF VEHICLE AND METHOD THEREOF}
본 발명은 차량 영상 제어 장치 및 그 방법에 관한 것으로, 보다 상세하게는 ISP(Image Signal Processor)가 내장되지 않은 차량 카메라의 영상에 대한 차량 영상 제어 장치 및 그 방법에 관한 것이다.
차량의 카메라를 통해 주변 영상을 획득하여, 빌트인 캠 시스템은 조건에 따라 전방, 후방 영상을 획득하고, 차량의 AVN(Audio, Video, Navigation)과 연동하여, 기능 설정 및 저장 영상을 확인할 수 있다. 차량의 타 제어기가 오프 되어있거나, 빌트인 캠 시스템의 제어기는 슬립 중인 주차 중에도 영상을 녹화하기 위해 공용으로 사용되는 후방 카메라와 직접 연결되어 있을 수 있다. 특히, 후방 카메라를 통해 촬영된 영상이 빌트인 캠, SVM(Surround View Monitor) 또는 ADAS-PRK(Advanced Driver Assistance System-Parking) 중 적어도 하나 이상의 제어기에 공유되어, 빌트인 캠, SVM, ADAS-PRK의 제어기가 동축 케이블을 통해 후방 카메라와 연결되어 있을 수 있다.
이러한 SVM 제어기 및 빌트인 캠 제어기가 독립된 옵션으로 차량에 적용하는 과정에 문제가 발생하지 않도록 하며, 빌트인 캠 및 SVM이 동시에 적용 되어 있을 경우, 빌트인 캠과 SVM의 각 ISP들과 카메라의 이미지 센서 간 매칭 문제점에 대하여 해결하는 제어 기술의 개발이 필요하다.
본 발명의 실시 예는, ISP(Image Signal Processor)가 내장되지 않은 차량 카메라의 영상에 대한 차량 영상 제어 장치 및 그 방법을 제공하고자 한다.
본 발명의 다른 실시 예는, 카메라에 내장되었던 ISP를 제어기로 이관하는 기술이 각각의 차량 작동 모드에 따라 적절하게 동작 가능하도록 하는 차량 영상 제어 장치 및 그 방법을 제공하고자 한다.
본 발명의 또 다른 실시 예는, ISP가 내장되지 않은 카메라를 제어하기 위한 작동 우선 순위를 정하여 작동 불가나 영상 화질 저하가 없도록 하는 차량 영상 제어 장치 및 그 방법을 제공하고자 한다.
본 발명의 또 다른 실시 예는, ISP가 내장되지 않은 카메라의 영상을 제어하는 복수의 제어기에 대해, 전류의 소모를 최소화하는 차량 영상 제어 장치 및 그 방법을 제공하고자 한다.
본 발명의 또 다른 실시 예는, ISP가 내장되지 않은 카메라의 이상 작동 시 페일-세이프(Fail-Safe) 기능을 지원하는 차량 영상 제어 장치 및 그 방법을 제공하고자 한다.
본 발명의 기술적 과제들은 이상에서 언급한 기술적 과제들로 제한되지 않으며, 언급되지 않은 또 다른 기술적 과제들은 아래의 기재들로부터 당업자에게 명확하게 이해될 수 있을 것이다.
본 발명의 일 실시 예에 따른 차량 영상 제어 장치는 차량에 구비되어, 차량 시스템으로부터 상기 차량의 작동 모드에 대한 정보를 수신하는 통신부, 상기 차량에 구비되어, ISP(Image Signal Processor)가 내장되지 않으며, 상기 차량의 주변 영상을 획득하고, 상기 주변 영상을 제 1 영상 제어부에 전송하는 카메라부, 영상 처리를 수행하는 제 1 ISP가 구비되고, 상기 주변 영상을 제 2 영상 제어부에 공유하는 상기 제 1 영상 제어부, 및 영상 처리를 수행하는 제 2 ISP가 구비된 상기 제 2 영상 제어부를 포함하고, 상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부는, 상기 차량의 작동 모드에 따라서, 택일적으로 상기 카메라부에 대한 제어권을 가질 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부는, 상기 제 1 ISP를 통해, 상기 주변 영상에 대한 영상 처리를 수행하고, 영상 처리된 상기 주변 영상을 비휘발성 메모리에 저장할 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부는, 상기 제 2 ISP를 통해, 상기 주변 영상에 대한 영상 처리를 수행하고, 영상 처리된 상기 주변 영상을 실시간으로 출력할 수 있다.
일 실시 예에 있어서, 상기 카메라부는, 상기 차량의 후방에 대한 영상을 획득하는 카메라를 포함할 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부 및 상기 제 2 영상 제어부는, 상기 카메라부의 이미지 센서 파라미터를 서로 공유할 수 있다.
일 실시 예에 있어서, 상기 차량의 작동 모드는, 주행 중인 모드, 주차 중 상기 차량의 주변 영상을 실시간으로 출력하는 모드 및 주차 중 상기 차량의 주변 영상을 실시간으로 출력하지 않는 모드를 포함할 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부는, 상기 카메라부로부터 전송된 상기 주변 영상을 내부 신호로 변환하는 DES(Deserializer), 및 상기 내부 신호를 외부에 전송하기 위한 영상 신호로 변환하는 SER(Serializer)을 포함하고, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 DES 및 상기 SER의 초기화를 수행할 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부는, 상기 DES 및 상기 SER의 초기화가 완료되기 전까지, 상기 카메라부에 대한 제어권을 가질 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부는, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 대한 제어권을 가질 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부는, 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 오프될 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부는, 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 상기 카메라부에 대한 제어권을 가질 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부는, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 이상이 발생한 것으로 판단되면, 제 1 영상 제어부에 상기 카메라부의 리셋을 요청할 수 있다.
일 실시 예에 있어서, 제 1 항에 있어서, 상기 제 1 영상 제어부는, 하드 와이어(Hard Wire) 또는 CAN(Controller Area Network) 통신 중 적어도 하나 이상을 통해, 하이 신호 또는 로우 신호를 상기 제 2 영상 제어부에 전달하여, 상기 카메라부에 대한 제어권에 대한 정보를 전달할 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부는, 하드 와이어를 통해, 하이 신호 및 로우 신호를 상기 제 1 영상 제어부에 전달하거나, 또는 CAN 통신을 통해 리셋 요청 신호를 상기 제 1 영상 제어부에 전달하여, 상기 카메라부의 리셋을 요청할 수 있다.
본 발명의 다른 일 실시 예에 따른 차량 영상 제어 방법은 차량에 구비된 통신부가, 차량 시스템으로부터 상기 차량의 작동 모드에 대한 정보를 수신하는 단계, 상기 차량에 구비되며, ISP가 내장되지 않은 카메라부가, 상기 차량의 주변 영상을 획득하는 단계, 상기 카메라부가, 상기 주변 영상을 제 1 영상 제어부에 전송하는 단계, 영상 처리를 수행하는 제 1 ISP가 구비된 상기 제 1 영상 제어부가, 상기 주변 영상을 영상 처리를 수행하는 제 2 ISP가 구비된 제 2 영상 제어부에 공유하는 단계, 및 상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 상기 차량의 작동 모드에 따라서, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계를 포함할 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부 및 상기 제 2 영상 제어부가, 상기 카메라부의 이미지 센서 파라미터를 서로 공유하는 단계를 더 포함할 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부가, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 주변 영상을 내부 신호로 변환하는 DES(Deserializer) 및 상기 내부 신호를 외부에 전송하기 위한 영상 신호로 변환하는 SER(Serializer)의 초기화를 수행하는 단계를 더 포함하고, 상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계는, 상기 제 1 영상 제어부가, 상기 DES 및 상기 SER의 초기화가 완료되기 전까지, 상기 카메라부에 대한 제어권을 가지는 단계를 포함할 수 있다.
일 실시 예에 있어서, 상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계는, 상기 제 2 영상 제어부가, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 대한 제어권을 가지는 단계를 포함할 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부가, 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 오프되는 단계를 더 포함하고, 상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계는, 상기 제 1 영상 제어부가, 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 상기 카메라부에 대한 제어권을 가지는 단계를 포함할 수 있다.
일 실시 예에 있어서, 상기 제 2 영상 제어부가, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 이상이 발생한 것으로 판단되면, 제 1 영상 제어부에 상기 카메라부의 리셋을 요청하는 단계를 더 포함할 수 있다.
본 발명에 따른 차량 영상 제어 장치 및 그 방법의 효과에 대해 설명하면 다음과 같다.
본 발명의 실시 예들 중 적어도 하나에 의하면, ISP(Image Signal Processor)가 내장되지 않은 차량 카메라의 영상에 대한 차량 영상 제어 장치 및 그 방법을 제공할 수 있다.
또한, 본 발명의 실시 예들 중 적어도 하나에 의하면, 카메라에 내장되었던 ISP를 제어기로 이관하는 기술이 각각의 차량 작동 모드에 따라 적절하게 동작 가능하도록 하는 차량 영상 제어 장치 및 그 방법을 제공할 수 있다.
또한, 본 발명의 실시 예들 중 적어도 하나에 의하면, ISP가 내장되지 않은 카메라를 제어하기 위한 작동 우선 순위를 정하여 작동 불가나 영상 화질 저하가 없도록 하는 차량 영상 제어 장치 및 그 방법을 제공할 수 있다.
또한, 본 발명의 실시 예들 중 적어도 하나에 의하면, ISP가 내장되지 않은 카메라의 영상을 제어하는 복수의 제어기에 대해, 전류의 소모를 최소화하는 차량 영상 제어 장치 및 그 방법을 제공할 수 있다.
또한, 본 발명의 실시 예들 중 적어도 하나에 의하면, ISP가 내장되지 않은 카메라의 이상 작동 시 페일-세이프(Fail-Safe) 기능을 지원하는 차량 영상 제어 장치 및 그 방법을 제공할 수 있다.
이 외에, 본 문서를 통해 직접적 또는 간접적으로 파악되는 다양한 효과들이 제공될 수 있다.
도 1은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치를 나타내는 블록도이다.
도 2는 본 발명의 일 실시 예에 따른 차량 영상 제어 장치의 구체적인 구성을 나타내는 도면이다.
도 3은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 DES 및 SEC를 초기화시키는 것을 나타내는 도면이다.
도 4는 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 DES 및 SEC를 초기화시킨 후 차량 주행 중인 경우를 나타내는 도면이다.
도 5는 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 주차 중 차량의 주변 영상을 실시간으로 출력하지 않는 경우를 나타내는 도면이다.
도 6은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 주차 중 주차 중 차량의 주변 영상을 실시간으로 출력하지 않는 경우 동작을 나타내는 흐름도이다.
도 7은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 주차 중 주차 중 차량의 주변 영상을 실시간으로 출력하는 경우 동작을 나타내는 흐름도이다.
도 8은 본 발명의 일 실시 예에 따른 카메라에 이상이 발생한 경우를 나타내는 도면이다.
도 9는 본 발명의 일 실시 예에 따른 차량 영상 제어 방법을 나타내는 흐름도이다.
이하, 본 발명의 일부 실시 예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조 부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면 상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 본 발명의 실시 예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 본 발명의 실시 예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다.
본 발명의 실시 예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 또한, 다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가진다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥상 가지는 의미와 일치하는 의미를 가진 것으로 해석되어야 하며, 본 출원에서 명백하게 정의하지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
이하, 도 1 내지 도 9를 참조하여, 본 발명의 실시 예들을 구체적으로 설명하기로 한다.
도 1은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치를 나타내는 블록도이다.
본 발명에 따른 차량 영상 제어 장치(100)는 차량의 내부 또는 외부에 구현될 수 있다. 이때, 차량 영상 제어 장치(100)는 차량의 내부 제어 유닛들과 일체로 형성될 수 있으며, 별도의 하드웨어 장치로 구현되어 연결 수단에 의해 차량의 제어 유닛들과 연결될 수도 있다.
일 예로, 차량 영상 제어 장치(100)는 차량과 일체로 구현될 수도 있고, 차량과 별개의 구성으로 차량에 설치/부착되는 형태로 구현될 수도 있고, 또는 일부는 차량과 일체로 구현되고, 다른 일부는 차량과 별개의 구성으로 차량에 설치/부착되는 형태로 구현될 수도 있다.
도 1을 참조하면, 차량 영상 제어 장치(100)는 통신부(110), 카메라부(120), 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)를 포함할 수 있다.
통신부(110)는 차량에 구비되어, 차량 시스템으로부터 차량의 작동 모드에 대한 정보를 수신할 수 있다.
일 예로, 통신부(110)는 CAN(Controller Area Network) 통신, LIN(Local Interconnect Network) 통신, Flex-Ray, MOST(Media Oriented System Transport), 이더넷(Ethernet) 또는 CAN-FD(CAN with Flexible Data rate) 등의 차량 내 통신을 통해, 차량 시스템으로부터 차량의 작동 모드에 대한 정보를 수신할 수 있다.
일 예로, 차량의 작동 모드는 주행 중인 모드, 주차 중 차량의 주변 영상을 실시간으로 출력하는 모드 및 주차 중 차량의 주변 영상을 실시간으로 출력하지 않는 모드를 포함할 수 있다.
일 예로, 주차 중 차량의 주변 영상을 실시간으로 출력하는 모드는 주차 중 차량의 주변 영상을 차량의 AVN(Audio, Video, Navigation) 또는 차량과 연결된 사용자의 통신 단말을 통해 실시간으로 출력하는 모드를 의미할 수 있다.
일 예로, 통신부(110)는 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)와 무선 또는 유선 통신을 통해 연결되어, 차량의 작동 모드에 대한 정보를 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)에 전송할 수 있다.
카메라부(120)는 차량에 구비되어, ISP(Image Signal Processor)가 내장되지 않으며, 차량의 주변 영상을 획득할 수 있다.
일 예로, 카메라부(120)는 차량의 다른 제어 시스템이 오프 되어 있거나 슬립(Sleep) 중인 상황에도 영상을 획득할 수 있다.
카메라부(120)는 주변 영상을 제 1 영상 제어부(130)에 전송할 수 있다.
일 예로, 카메라부(120)는 차량의 후방에 대한 영상을 획득하는 카메라를 포함할 수 있다.
카메라부(120)를 통해 획득된 영상은 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)에서 공통으로 사용되는 영상을 포함할 수 있다.
제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)는 차량의 작동 모드에 따라서, 택일적으로 카메라부(120)에 대한 제어권을 가질 수 있다.
일 예로, 카메라부(120)에 대한 제어권은 카메라부(120)에 대한 내부 통신의 제어 권한을 포함할 수 있다.
일 예로, 제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)는 택일적으로 카메라부(120)의 영상 촬영 및 영상 전송을 제어할 수 있다.
일 예로, 제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)는 택일적으로 카메라부(120)의 이미지 센서 파라미터를 제어할 수 있다.
일 예로, 일 예로, 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)는 동축 케이블을 통해 연결되어 있을 수 있다.
일 예로, 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)는 카메라부(120)의 이미지 센서 파라미터를 서로 공유할 수 있다.
일 예로, 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)는 카메라부(120)의 영상 처리 관련 파라미터를 서로 공유할 수 있다.
제 1 영상 제어부(130)는 영상 처리를 수행하는 제 1 ISP가 구비되고, 주변 영상을 제 2 영상 제어부(140)에 공유할 수 있다.
일 예로, 제 1 ISP 및 후술되는 제 2 ISP는 AWB(Auto White Balance), AE(Auto Exposure), 노이즈 제거 등의 영상 처리 기능을 수행할 수 있다.
일 예로, 제 1 영상 제어부(130)는 카메라부(120)에 전원을 공급할 수 있다.
제 1 영상 제어부(130)가 카메라부(120)에 공급되는 전원을 제어하여, 후술되는 카메라부(120)의 리셋을 수행할 수 있다.
일 예로, 제 1 영상 제어부(130)는 제 1 ISP를 통해, 주변 영상에 대한 영상 처리를 수행하고, 영상 처리된 주변 영상을 비휘발성 메모리에 저장할 수 있다.
일 예로, 제 1 영상 제어부(130)는 주변 영상을 비휘발성 메모리에 저장하는 차량에 내장된 차량 영상 기록 장치의 제어기를 포함할 수 있다.
일 예로, 제 1 영상 제어부(130)는 차량의 빌트인 캠(Built-in Cam)의 제어기를 포함할 수 있다.
일 예로, 제 1 영상 제어부(130)는 카메라부로부터 전송된 주변 영상을 내부 신호로 변환하는 DES(Deserializer) 및 내부 신호를 외부에 전송하기 위한 영상 신호로 변환하는 SER(Serializer)을 포함할 수 있다.
일 예로, DES는 제 1 영상 제어부(130)의 외부의 LVDS(Low Voltage Differential Signaling) 카메라 영상 신호를 제 1 영상 제어부(130) 내부에 입력 가능한 신호로 변환하는 소자를 포함할 수 있다.
일 예로, SER은 제 1 영상 제어부(130)의 외부에 LVDS(Low Voltage Differential Signaling)를 통한 카메라 영상 신호를 전송하기 위해 신호를 변환하는 소자를 포함할 수 있다.
일 예로, 제 1 영상 제어부(130)는 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, DES 및 SER의 초기화를 수행할 수 있다.
제 1 영상 제어부(130)가 아닌 제 2 영상 제어부(140)가 카메라부(120)와 통신하여, 카메라부(120)를 제어하기 위해서는 카메라부(120)에 송수신되는 LVDS 영상 신호 및/또는 제어 신호가 경유되는 경로인 DES 및 SER의 초기화가 필요하다.
일 예로, 제 1 영상 제어부(130)는 DES 및 SER의 초기화가 완료되기 전까지, 카메라부(120)에 대한 제어권을 가질 수 있다.
DES 및 SER의 초기화가 완료되기 전까지는 제 2 영상 제어부(140)가 카메라부(120)의 제어를 수행할 수 없으므로, 제 1 영상 제어부(130)가 카메라부(120)의 제어권을 가질 수 있다.
일 예로, 제 1 영상 제어부(130)는 차량이 주차 중 주변 영상을 실시간으로 출력하지 않는 경우, 카메라부(120)에 대한 제어권을 가질 수 있다.
차량이 주차 중 주변 영상을 실시간으로 출력하지 않는 경우에는 제 2 영상 제어부(140)가 주변 영상을 실시간으로 출력하는 것이 요구되지 않으므로, 제 1 영상 제어부(130)가 카메라부(120)에 대한 제어권을 가질 수 있다.
일 예로, 제 1 영상 제어부(130)는 카메라부(120)에 대한 내부 통신에 대한 제어의 충돌을 방지하기 위해, 카메라부(120)에 대한 내부 통신의 제어권을 제 1 영상 제어부(130)가 가지는지 여부 또는 카메라부(120)에 대한 내부 통신의 제어권을 제 2 영상 제어부(140)가 가지는지 여부에 대한 정보를 제 2 영상 제어부(140)에 공유할 수 있다.
일 예로, 제 1 영상 제어부(130)는 하드 와이어(Hard Wire) 또는 CAN(Controller Area Network) 통신 중 적어도 하나 이상을 통해, 하이 신호 또는 로우 신호를 제 2 영상 제어부(140)에 전달하여, 카메라부(120)에 대한 제어권에 대한 정보를 전달할 수 있다.
예시적으로, 제 1 영상 제어부(130)가 제 2 영상 제어부(140)에 로우 신호를 전달하는 경우, 제 1 영상 제어부(130)가 카메라부(120)에 대한 제어권을 가지는 것을 의미할 수 있으며, 제 1 영상 제어부(130)가 제 2 영상 제어부(140)에 하이 신호를 전달하는 경우, 제 2 영상 제어부(140)가 카메라부(120)에 대한 제어권을 가지는 것을 의미할 수 있다.
실시 예에 따라서, 로우 신호가 제 2 영상 제어부(140)가 카메라부(120)에 대한 제어권을 가지는 것을 의미하며, 하이 신호가 제 1 영상 제어부(130)가 카메라부(120)에 대한 제어권을 가지는 것을 의미할 수도 있다.
제 2 영상 제어부(140)는 영상 처리를 수행하는 제 2 ISP를 구비할 수 있다.
일 예로, 제 2 영상 제어부(140)는 제 2 ISP를 통해, 주변 영상에 대한 영상 처리를 수행하고, 영상 처리된 주변 영상을 실시간으로 출력할 수 있다.
일 예로, 제 2 영상 제어부(140)는 주변(전방, 후방, 좌측 및 우측) 영상을 차량의 AVN(Audio, Video, Navigation) 등의 출력 장치를 통해 출력하여, 차량의 주변 상황을 실시간으로 보여주는 장치의 제어기를 포함할 수 있다.
일 예로, 제 2 영상 제어부(140)는 차량의 SVM(Surround View Monitor)의 제어기 또는 ADAS-PRK(Advanced Driver Assistance System-Parking)의 제어기를 포함할 수 있다.
일 예로, 제 2 영상 제어부(140)는 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, 카메라부(120)에 대한 제어권을 가질 수 있다.
제 2 영상 제어부(140)가 카메라부(120)에 대한 제어권을 가지면, 후방 카메라와 전방, 좌측 및 우측 카메라에서 획득된 영상이 동일한 ISP 및 로직을 통해 합성될 수 있고, 영상 인식 기능에서 화질 또는 색감에 대한 인식률 문제를 방지할 수 있다.
일 예로, 제 2 영상 제어부(140)는 차량이 주차 중 주변 영상을 실시간으로 출력하지 않는 경우, 오프될 수 있다.
제 2 영상 제어부(140)가 차량이 주차 중 주변 영상을 실시간으로 출력하지 않는 경우, 오프되면 영상을 처리하는데 소모되는 전력이 최소화될 수 있다.
일 예로, 제 2 영상 제어부(140)는 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, 카메라부(120)에 이상이 발생한 것으로 판단되면, 제 1 영상 제어부(130)에 카메라부(120)의 리셋을 요청할 수 있다.
일 예로, 제 2 영상 제어부(140)는 제 2 ISP를 통해, 영상 처리를 수행하거나, 영상 정보에 대한 통신을 수행하는 과정에서 카메라부(120)에 이상이 생겼는지 여부를 판단할 수 있다.
일 예로, 제 2 영상 제어부(140)는 카메라부(120)에 이상이 생긴 것으로 판단되면, 카메라부(120)에 공급되는 전원의 리셋을 제 1 영상 제어부(130)에 요청하고, 전원의 리셋을 요청받은 제 1 영상 제어부(130)는 카메라부(120)에 공급하던 전원의 리셋을 수행할 수 있다.
일 예로, 제 2 영상 제어부(140)는 하드 와이어를 통해, 하이 신호 및 로우 신호를 제 1 영상 제어부(130)에 전달하거나, 또는 CAN 통신을 통해 리셋 요청 신호를 제 1 영상 제어부(130)에 전달하여, 카메라부의 리셋을 요청할 수 있다.
예시적으로, 제 2 영상 제어부(140)가 로우 신호, 하이 신호, 로우 신호를 순서대로 제 1 영상 제어부(130)에 전달하여, 제 1 영상 제어부(130)에 카메라부(120)에 대한 리셋을 요청할 수 있다.
제 1 영상 제어부(130)는 리셋 요청을 수신하면, 카메라부(120)의 전원을 리셋할 수 있다.
도 2는 본 발명의 일 실시 예에 따른 차량 영상 제어 장치의 구체적인 구성을 나타내는 도면이다.
도 2를 참조하면, 빌트인 캠 전용 전방 카메라(201)는 차량의 전방에 대한 영상을 획득하고, 획득한 영상을 제 1 영상 제어부(220)의 DES(221)에 전송할 수 있다.
카메라부(210)는 ISP가 내장되지 않으며, 차량의 주변 영상을 획득하고, 획득한 영상을 제 1 영상 제어부(220)의 DES(222)에 전송할 수 있다.
일 예로, 카메라부(210)는 차량의 후방에 대한 영상을 획득하고, 획득한 후방 영상을 제 1 영상 제어부(220)의 DES(222)에 전송할 수 있다.
제 1 영상 제어부(220)는 빌트인 캠 전용 전방 카메라(201)와 연결된 DES(221), 카메라부(210)와 연결된 DES(222), CPU(223, Central Processing Unit), ISP(224) 및 SER(225)을 포함할 수 있다.
일 예로, 제 1 영상 제어부(220)는 사용자의 설정에 따라, 차량의 전/후방 카메라의 영상을 주행 중 또는 주차 중에 녹화하여 비휘발성 메모리에 동영상 파일 형태로 저장할 수 있다.
일 예로, 제 1 영상 제어부(220)는 카메라부(210)에 전원을 공금하고, 카메라부(210)을 통해 획득된 차량의 주변 영상을 제 2 영상 제어부(230)에 공유할 수 있다.
일 예로, 제 1 영상 제어부(220)는 빌트인 캠 전용 전방 카메라(201)를 통해 획득된 차량의 전방 영상은 제 2 영상 제어부(230)에 공유하지 않고 전용으로 사용할 수 있다.
DES(221, 222)는 제어기 외부에서 입력된 카메라 영상 신호를 제어기 내부에 입력 가능한 신호로 변환할 수 있다.
일 예로, DES(221, 222)는 각각 빌트인 캠 전용 전방 카메라(201) 및 카메라부(210)를 통해 획득된 영상에 대한 신호를 수신하여, 제어기 내부에 입력 가능한 신호로 변환할 수 있다.
CPU(223)는 제 1 영상 제어부(220)의 전반적인 제어를 수행할 수 있다.
일 예로, CPU(223)는 차량의 MCU(Microcontroller Unit)와 통합되거나, SoC(System on Chip)의 형태로 구현되어, 제 1 영상 제어부(220)의 전반적인 제어를 수행할 수 있다.
일 예로, CPU(223)는 I2C(Inter-Integrated Circuit) 통신(226)을 통해, ISP(224)를 제어하고, ISP 파라미터를 설정할 수 있다.
ISP(224)는 빌트인 캠 전용 전방 카메라(201) 및 카메라부(210)를 통해 획득된 영상에 대한 영상 처리를 수행할 수 있다.
일 예로, CPU(223)는 빌트인 캠 전용 전방 카메라(201) 및 카메라부(210)를 통해 획득된 영상에 대한 영상 처리를 수행하여, 차량의 AVN(206)에 전송할 수 있다.
일 예로, CPU(223)는 DES(222) 및 SER(225)을 초기화 설정하기 위해 DES(222)와 통신(227)을 수행할 수 있다.
CPU(223)와 DES(222)를 연결하는 통신(227)에 대한 통신 회로는 DES(222)와 SER(225)를 연결하는 통신(228)에 대한 통신 회로와 연결되어 있어, CPU(223)는 통신(227, 228)을 통해 DES(222) 및 SER(225)을 초기화 설정할 수 있다.
일 예로, 제 1 영상 제어부(220) 내의 DES(222)와 SER(225)은 통신(228)을 통해 연결되어 있어, 카메라부(210)에서 획득되어 DES(222)로 전달된 영상에 대한 정보가 SER(225)에 통신(228)을 통해 전송될 수 있다.
SER(225)은 카메라 영상 신호를 제어기 외부에 전송하기 위한 신호로 변환할 수 있다.
일 예로, SER(225)은 DES(222)를 통해 전달받은 차량의 주변 영상에 대한 신호를 변환하여, 제 2 영상 제어부(230)의 DES(233)에 전송할 수 있다.
일 예로, 본 발명에 개시된 내부 통신(226, 227, 228, 234)은 I2C 통신 이외에도, UART(Universal Asynchronous Receiver/Transmitter) 또는 SPI(Serial Peripheral Interface) 통신 등을 통해 구현될 수 있다.
제 2 영상 제어부(230)는 SoC/MCU(231), ISP(232), ISPLess 카메라(202)와 연결된 DES(233)를 포함할 수 있다.
SoC/MCU(231)는 제 2 영상 제어부(230)의 전반적인 제어를 수행할 수 있다.
ISP(232)는 SoC/MCU(231)에 내장되어 있을 수도 있고, 별도로 존재하여, SoC/MCU(231)와 연결되어, SoC/MCU(231)에 의해 제어될 수도 있다.
ISP(232)는 카메라부(210) 및 ISPLess 카메라(202)를 통해 획득된 영상에 대한 영상 처리를 수행할 수 있다.
DES(233)는 전방 카메라(203), 좌측 카메라(204) 및 우측 카메라(205)를 포함하는 ISPLess 카메라(202)를 통해 획득된 차량의 전방에 대한 영상, 차량의 좌측에 대한 영상 및 차량의 우측에 대한 영상을 수신할 수 있다.
ISPLess 카메라(202)에 포함된 전방 카메라(203), 좌측 카메라(204) 및 우측 카메라(205)는 ISP가 내장되지 않을 수 있다.
DES(233)는 제 1 영상 제어부(220)의 SER(225)로부터 카메라부(210)를 통해 획득된 차량의 후방에 대한 영상을 수신할 수 있다.
일 예로, DES(233)는 각각의 카메라에 대응하는 하나 이상의 DES를 포함할 수 있다.
DES(233)는 수신한 영상에 대한 신호를 제어기 내부에 입력 가능한 신호로 변환할 수 있다.
DES(233)는 수신한 영상에 대한 신호를 제어기 내부에 입력 가능한 신호로 변환하여 통신(234)을 통해 SoC/MCU(231)에 전달할 수 있다.
SoC/MCU(231)는 ISP(232)를 통해 영상 처리된 카메라부(210), 전방 카메라(203), 좌측 카메라(204) 및 우측 카메라(205)를 통해 획득된 차량의 주변 영상에 대한 영상 처리를 수행하여, 차량의 AVN(206)에 전송할 수 있다.
게이트웨이(241, Gateway)는 제 1 영상 제어부(220) 및 제 2 영상 제어부(230)가 이종 차량 통신을 통해 연결되는 경우, 게이트웨이 역할을 수행할 수 있다.
제 1 영상 제어부(220)는 게이트웨이(241)를 통한 통신(242)을 통해, 제 2 영상 제어부(230)와 데이터 또는 명령을 송수신할 수 있다.
일 예로, 제 1 영상 제어부(220)는 게이트웨이(241)를 통한 통신(242)을 통해, 제 2 영상 제어부(230)로부터 ISP 관련 파라미터를 수신할 수 있다.
일 예로, 제어부(220)는 게이트웨이(241)를 통한 통신(242)을 통해, 제 2 영상 제어부(230)와 카메라부(210)에 대한 제어권 및 리셋 요청을 송수신할 수 있다.
일 예로, 제 1 영상 제어부(220)는 하드 와이어(243, 244, Hard Wire)를 통해, 제 2 영상 제어부(230)와 통신을 수행할 수 있다.
하드 와이어(243, 244)는 본 발명을 구현하는데 필수적인 구성은 아니며, 하드 와이어를 포함하지 않는 차량 통신을 통해 본 발명을 구현하는 과정에서 필요한 통신이 수행되어 시스템 부팅 시간 또는 성능에 저하가 있는 경우, 부가적으로 사용될 수 있다.
일 예로, 제 1 영상 제어부(220)는 하드 와이어(243)를 통해, 제 2 영상 제어부(230)에 카메라부(210)에 대한 내부 통신의 마스터 권한에 관한 정보를 전송하여, 제 1 영상 제어부(220)와 제 2 영상 제어부(230) 간 통신의 충돌을 방지할 수 있다.
일 예로, 제 1 영상 제어부(220)가 하드 와이어(243)를 통해, 제 2 영상 제어부(230)에 로우(Low) 신호(ex. 0V)를 전달하는 경우, 제 1 영상 제어부(220)가 카메라부(210)에 대한 내부 통신의 마스터 권한을 가지고 있음을 의미할 수 있고, 제 1 영상 제어부(220)가 하드 와이어(243)를 통해, 제 2 영상 제어부(230)에 하이(High) 신호(ex. 12V)를 전달하는 경우, 제 2 영상 제어부(220)가 카메라부(210)에 대한 내부 통신의 마스터 권한을 가지고 있음을 의미할 수 있다.
일 예로, 제 2 영상 제어부(230)는 카메라부(210)에 대한 이상이 생긴 것으로 판단되는 경우, 하드 와이어(244)를 통해, 제 1 영상 제어부(220)에 리셋 요청을 전송할 수 있다.
일 예로, 제 2 영상 제어부(230)는 카메라부(210)에 대한 이상이 생긴 것으로 판단되는 경우, 하드 와이어(244)를 통해, 로우 신호, 하이 신호, 로우 신호 순서의 신호를 통해 리셋 요청을 전송할 수 있다.
도 3은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 DES 및 SEC를 초기화시키는 것을 나타내는 도면이다.
도 3을 참조하면, 제 1 영상 제어부(320)는 차량이 주행 중인 경우, 카메라부(310)의 제어권을 제 2 영상 제어부(330)에 이관하기에 앞서, DES(321) 및 SER(322)를 초기화시킬 수 있다(301, 302).
제 1 영상 제어부(320)가 DES(321) 및 SER(322)를 초기화시키는 중에는 제 2 영상 제어부(330)가 카메라부(310)에 대한 제어를 수행할 수 없으므로, 제 1 영상 제어부(320)가 카메라부(310)를 제어할 수 있다.
제 1 영상 제어부(320)가 DES(321) 및 SER(322)를 초기화시키는 동안, 제 1 영상 제어부(320)의 CPU(323)가 I2C 통신에 대한 마스터 권한을 가질 수 있다(303).
제 1 영상 제어부(320)는 DES(321) 및 SER(322)를 초기화시키는 동안, 하드 와이어(341)를 통해 제 2 영상 제어부(330)에 로우 신호를 전달할 수 있다(304).
여기서, 로우 신호를 전달하는 것은 제 1 영상 제어부(320)가 I2C 통신의 마스터 권한 및 카메라부(310)에 대한 제어권을 가짐을 의미할 수 있다.
제 1 영상 제어부(320)는 DES(321) 및 SER(322)를 초기화시키는 동안, 하드 와이어(341)를 통해 로우 신호를 전달하거나 또는 게이트웨이(342)를 통한 통신을 통해, 제 1 영상 제어부(320)가 I2C 통신의 마스터 권한 및 카메라부(310)에 대한 제어권을 가지는 사실을 제 2 영상 제어부(330)에 알릴 수 있다(305).
제 2 영상 제어부(330)의 SoC(331)는 DES(321) 및 SER(322)의 초기화가 완료되기 전까지 I2C 통신 및 카메라부(310)를 제어하지 않을 수 있다(306).
도 4는 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 DES 및 SEC를 초기화시킨 후 차량 주행 중인 경우를 나타내는 도면이다.
도 4를 참조하면, 제 1 영상 제어부(420)의 CPU(423)는 차량이 주행 중인 경우, DES(421) 및 SER(422)의 초기화가 완료되면, I2C 통신 및 카메라부(410)를 제어하지 않을 수 있다(401).
제 1 영상 제어부(420)는 DES(421) 및 SER(422)의 초기화가 완료되면, 하드 와이어(441)를 통해 제 2 영상 제어부(430)에 하이 신호를 전달할 수 있다(402).
여기서, 하이 신호를 전달하는 것은 제 2 영상 제어부(420)가 I2C 통신의 마스터 권한 및 카메라부(410)에 대한 제어권을 가짐을 의미할 수 있다.
제 1 영상 제어부(420)는 DES(421) 및 SER(422)의 초기화가 완료되면, 하드 와이어(441)를 통해 하이 신호를 전달하거나 또는 게이트웨이(442)를 통한 통신을 통해, 제 1 영상 제어부(420)가 I2C 통신의 마스터 권한 및 카메라부(410)에 대한 제어권을 가지지 않는 사실을 제 2 영상 제어부(430)에 알릴 수 있다(403).
제 2 영상 제어부(430)는 DES(421) 및 SER(422)의 초기화가 완료되면, 이미지 센서 파라미터를 제 1 영상 제어부(420)에 게이트웨이(442)를 통한 통신 또는 차량 통신을 통해 전송할 수 있다(404).
일 예로, SoC(431)는 카메라부(410)로부터 이미지 센서 파라미터를 수신하고, CPU(423)에 이미지 센서 파라미터를 송신할 수 있다.
일 예로, CPU(423)는 수신된 이미지 센서 파라미터를 기반으로 ISP(424)를 통해 영상 처리를 수행할 수 있다.
제 2 영상 제어부(430)의 SoC(431)는 DES(421) 및 SER(422)의 초기화가 완료되면, I2C 통신에 대한 마스터 권한 및 카메라부(410)에 대한 제어권을 가질 수 있다(405).
도 5는 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 주차 중 차량의 주변 영상을 실시간으로 출력하지 않는 경우를 나타내는 도면이다.
도 5를 참조하면, 제 1 영상 제어부(520)의 CPU(521)는 차량의 주차 중에 차량의 주변 영상이 실시간으로 출력되지 않는 경우, I2C 통신에 대한 마스터 권한 및 카메라부(510)에 대한 제어권을 가질 수 있다(501).
제 1 영상 제어부(520)는 차량의 주차 중에 차량의 주변 영상이 실시간으로 출력되지 않는 경우, 하드 와이어(541)를 통해 제 2 영상 제어부(530)에 로우 신호를 전달할 수 있다(502).
여기서, 로우 신호를 전달하는 것은 제 1 영상 제어부(520)가 I2C 통신의 마스터 권한 및 카메라부(510)에 대한 제어권을 가짐을 의미할 수 있다.
제 2 영상 제어부(530)는 차량의 주차 중에 차량의 주변 영상이 실시간으로 출력되지 않는 경우, 전원 오프될 수 있다(503).
제 2 영상 제어부(530)가 차량의 주차 중에 차량의 주변 영상이 실시간으로 출력되지 않는 경우, 전원이 오프됨으로써, 차량에서 소모되는 전력을 감소시킬 수 있다.
ISP(522)는 차량의 주차 중에 차량의 주변 영상이 실시간으로 출력되지 않는 경우, 카메라부(510)로부터 이미지 센서 파라미터를 수신하고, 수신된 이미지 센서 파라미터를 기반으로 영상 처리를 수행할 수 있다.
도 6은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 주차 중 주차 중 차량의 주변 영상을 실시간으로 출력하지 않는 경우 동작을 나타내는 흐름도이다.
도 6을 참조하면, 차량 영상 제어 장치(100)는 주차 모드에 진입했다는 정보를 수신할 수 있다(S601)
일 예로, 차량 영상 제어 장치(100)는 통신부(110)를 통해, 차량 시스템으로부터, 주차 모드에 진입했다는 정보를 수신할 수 있다.
차량 영상 제어 장치(100)는 주차 모드에 진입했다는 정보를 수신한 후(S601), 주차 중 영상 녹화가 필요한지 여부를 확인할 수 있다(S602).
일 예로, 차량 영상 제어 장치(100)는 사용자의 설정에 따라, 주차 중 영상 녹화가 필요한지 여부를 확인할 수 있다.
차량 영상 제어 장치(100)가 주차 중 영상 녹화가 필요한지 여부를 확인한 후(S602), 주차 중 영상 녹화가 필요한 것으로 확인된 경우, 빌트인 캠의 제어기는 후방 카메라에 대한 제어권을 가지고, 후방 영상의 녹화를 수행할 수 있다(S603).
일 예로, 주차 중 영상 녹화가 필요한 것으로 확인된 경우, 제 1 영상 제어부(130)에 포함되는 빌트인 캠의 제어기는 카메라부(120)에 포함되는 후방 카메라에 대한 제어권을 가지고, 후방 카메라를 통해, 차량의 후방 영상을 녹화할 수 있다.
이 경우, 제 1 영상 제어부(130)에 포함되는 빌트인 캠의 제어기는 제 2 영상 제어부(140)에 포함되는 SVM의 제어기에 하드 와이어를 통해 로우 신호를 전달하여, 빌트인 캠의 제어기가 I2C 통신의 마스터 권한 및 후방 카메라의 제어권을 가짐을 알릴 수 있다.
차량 영상 제어 장치(100)가 주차 중 영상 녹화가 필요한지 여부를 확인한 후(S602), 주차 중 영상 녹화가 필요하지 않은 것으로 확인된 경우, 빌트인 캠의 제어기는 종료될 수 있다(S604).
도 7은 본 발명의 일 실시 예에 따른 차량 영상 제어 장치가 주차 중 주차 중 차량의 주변 영상을 실시간으로 출력하는 경우 동작을 나타내는 흐름도이다.
도 7을 참조하면, 차량 통신은 커넥티비티(Cunnectivity) 서비스에 의하여 웨이크 업(Wake-Up)될 수 있다(S701).
커넥티비티 서비스란, 서로 다른 기종을 연결하여 제공되는 서비스를 의미할 수 있다.
일 예로, 커넥티비티 서비스는 사용자의 통신 단말과 차량을 연결하여 통신 기능을 제공하는 서비스를 포함할 수 있다.
차량 통신이 커넥티비티 서비스에 의하여 웨이크 업된 후(S701), SVM의 제어기는 빌트인 캠의 제어기에 차량 통신을 통해 후방 카메라의 제어권을 요청할 수 있다(S702).
일 예로, SVM의 제어기는 빌트인 캠의 제어기에 하드 와이어, 게이트웨이 또는 다른 차량 내 통신을 통해, 후방 카메라의 제어권을 요청할 수 있다.
SVM의 제어기가 빌트인 캠의 제어기에 차량 통신을 통해 후방 카메라의 제어권을 요청한 후(S702), 빌트인 캠의 CPU 또는 MCU가 빌트인 캠 내부의 SER 및 DES를 초기화할 수 있다(S703).
빌트인 캠의 CPU 또는 MCU가 빌트인 캠 내부의 SER 및 DES를 초기화한 후(S703), 빌트인 캠의 제어기는 I2C 제어권을 SVM에 이관하고, SVM의 제어기는 카메라 영상을 제어하여 AVN에 주변 영상을 제공할 수 있다(S704).
빌트인 캠의 제어기가 I2C 제어권을 SVM에 이관하고, SVM의 제어기가 카메라 영상을 제어하여 AVN에 주변 영상을 제공한 후(S704), 주변 영상의 실시간 출력이 끝나면 SVM의 제어기는 SVM이 오프된 것을 통신을 통해 알릴 수 있다(S705).
일 예로, SVM의 제어기는 SVM이 오프된 것을 하드 와이어, 게이트웨이 또는 다른 차량 내 통신을 통해, 빌트인 캠의 제어기에 알릴 수 있다.
SVM의 제어기가 SVM이 오프된 것을 통신을 통해 알린 후(S705), 차량 영상 제어 장치(100)는 주차 중 영상 녹화가 필요한지 여부를 확인할 수 있다(S706).
차량 영상 제어 장치(100)가 주차 중 영상 녹화가 필요한지 여부를 확인한 후(S706), 주차 중 영상 녹화가 필요한 것으로 확인된 경우, 빌트인 캠의 제어기는 후방 카메라에 대한 제어권을 가지고, 후방 영상의 녹화를 수행할 수 있다 (S707).
차량 영상 제어 장치(100)가 주차 중 영상 녹화가 필요한지 여부를 확인한 후(S706), 주차 중 영상 녹화가 필요하지 않은 것으로 확인된 경우, 빌트인 캠의 제어기는 종료될 수 있다(S708).
S706 내지 S708의 과정은 도 6의 S602 내지 S604의 과정과 동일하여 구체적인 설명은 생략하기로 한다.
도 8은 본 발명의 일 실시 예에 따른 카메라에 이상이 발생한 경우를 나타내는 도면이다.
도 8을 참조하면, 카메라부(810)의 후방 카메라에 이상이 발생한 상황이 가정될 수 있다.
이 경우, 카메라부(810)를 통해 획득된 차량 주변 영상은 제 2 영상 제어부(830)의 ISP(831)에 전달될 수 있다.
ISP(831)는 전달된 차량 주변 영상을 통해, 후방 카메라에 이상이 발생했는지 여부를 확인할 수 있다.
ISP(831)가 전달된 차량 주변 영상을 통해, 후방 카메라에 이상이 발생한 사실을 확인한 경우, 제 2 영상 제어부(830)는 제 1 영상 제어부(820)에 게이트웨이(841) 통신을 통해, 후방 카메라의 리셋 요청을 전송할 수 있다(802).
또한, ISP(831)가 전달된 차량 주변 영상을 통해, 후방 카메라에 이상이 발생한 사실을 확인한 경우, 제 2 영상 제어부(830)는 하드 와이어(842)를 통해, 로우 신호, 하이 신호, 로우 신호를 순서대로 제 1 영상 제어부(820)에 전달하여, 제 1 영상 제어부(820)에 후방 카메라에 대한 리셋을 요청할 수 있다(830).
제 1 영상 제어부(820)는 제 2 영상 제어부(830)로부터 리셋 요청을 수신한 경우, 후방 카메라의 전원을 리셋할 수 있다.
도 9는 본 발명의 일 실시 예에 따른 차량 영상 제어 방법을 나타내는 흐름도이다.
도 9를 참조하면, 차량 영상 제어 방법은 통신부(110)가, 차량 시스템으로부터 차량의 작동 모드에 대한 정보를 수신하는 단계(S910), 카메라부(120)가, 차량의 주변 영상을 획득하는 단계(S920), 카메라부(120)가, 차량의 주변 영상을 제 1 영상 제어부(130)에 전송하는 단계(S930), 제 1 영상 제어부(130)가, 제 2 영상 제어부(140)에 주변 영상을 공유하는 단계(S940) 및 제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)가, 차량의 작동 모드에 따라서, 택일적으로 카메라부(120)에 대한 제어권을 가지는 단계(S950)를 포함할 수 있다.
통신부(110)가, 차량 시스템으로부터 차량의 작동 모드에 대한 정보를 수신하는 단계(S910)는 CAN 통신, LIN 통신, Flex-Ray, MOST, 이더넷 또는 CAN-FD 등의 차량 내 통신을 통해, 수행될 수 있다.
차량의 작동 모드에 대한 정보는 주행 중인지 여부, 주차 중 차량의 주변 영상을 실시간으로 출력하는지 여부 및 주차 중 차량의 주변 영상을 실시간으로 출력하지 않는지 여부에 대한 정보를 포함할 수 있다.
카메라부(120)가, 차량의 주변 영상을 획득하는 단계(S920)는 ISP가 내장되지 않은 카메라를 통해 수행될 수 있다.
카메라부(120)가, 차량의 주변 영상을 제 1 영상 제어부(130)에 전송하는 단계(S930)는 I2C 등의 차량 통신을 통해 수행될 수 있다.
제 1 영상 제어부(130)가, 제 2 영상 제어부(140)에 주변 영상을 공유하는 단계(S940)는 I2C 등의 차량 통신을 통해 수행될 수 있다.
특히, S950의 단계는 순서에 구애받지 않고, 도시된 흐름도와 다르더라도, 실시 예에 따라 다른 순서로 수행될 수 있고, 다른 단계들과 동시에 수행될 수도 있다.
일 예로, 제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)가, 차량의 작동 모드에 따라서, 택일적으로 카메라부(120)에 대한 제어권을 가지는 단계(S950)는 제 2 영상 제어부(140)가, 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, 카메라부(120)에 대한 제어권을 가지는 단계를 포함할 수 있다.
일 예로, 제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)가, 차량의 작동 모드에 따라서, 택일적으로 카메라부(120)에 대한 제어권을 가지는 단계(S950)는 제 1 영상 제어부(130)가, 차량이 주차 중 주변 영상을 실시간으로 출력하지 않는 경우, 카메라부(120)에 대한 제어권을 가지는 단계를 포함할 수 있다.
일 예로, 제 1 영상 제어부(130) 또는 제 2 영상 제어부(140)가, 차량의 작동 모드에 따라서, 택일적으로 카메라부(120)에 대한 제어권을 가지는 단계(S950)는 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, DES 및 SER의 초기화가 완료되기 전까지, 카메라부(120)에 대한 제어권을 가지는 단계를 포함할 수 있다.
도시되지는 않았지만, 차량 영상 제어 방법은 제 1 영상 제어부(130) 및 제 2 영상 제어부(140)가, 카메라부(120)의 이미지 센서 파라미터를 서로 공유하는 단계를 더 포함할 수 있다.
일 예로, 차량 영상 제어 방법은 제 1 영상 제어부(130)가, 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, 주변 영상을 내부 신호로 변환하는 DES 및 내부 신호를 외부에 전송하기 위한 영상 신호로 변환하는 SER의 초기화를 수행하는 단계를 더 포함할 수 있다.
일 예로, 차량 영상 제어 방법은 제 2 영상 제어부(140)가, 차량이 주차 중 주변 영상을 실시간으로 출력하지 않는 경우, 오프되는 단계를 더 포함할 수 있다.
일 예로, 차량 영상 제어 방법은 제 2 영상 제어부(140)가, 차량이 주행 중인 경우 또는 차량이 주차 중 주변 영상을 실시간으로 출력하는 경우, 카메라부(120)에 이상이 발생한 것으로 판단되면, 제 1 영상 제어부(130)에 카메라부(120)의 리셋을 요청하는 단계를 더 포함할 수 있다.
본 발명을 통해, 복수의 제어기를 통해, ISP가 내장되지 않은 하나 또는 둘 이상의 카메라를 통해 획득된 영상을 공유할 수 있는 시스템을 구현할 수 있다. 이에 따라, 카메라를 통해 획득된 영상을 다수의 제어기가 사용하여, 차량 내부 통신의 효율성을 도모할 수 있다.
특히, 본 발명을 통해, 다수의 제어기가 서로, ISP가 내장되지 않은 하나 또는 둘 이상의 카메라의 영상 제어를 스위칭함으로써, 전력 소모를 최소화하는 효과가 제공될 수 있다.
본 명세서에 개시된 실시 예들과 관련하여 설명된 방법 또는 알고리즘의 단계는 프로세서에 의해 실행되는 하드웨어, 소프트웨어 모듈, 또는 그 2 개의 결합으로 직접 구현될 수 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드 디스크, 착탈형 디스크, CD-ROM과 같은 저장 매체(즉, 메모리 및/또는 스토리지)에 상주할 수도 있다.
예시적인 저장 매체는 프로세서에 커플링되며, 그 프로세서는 저장 매체로부터 정보를 판독할 수 있고 저장 매체에 정보를 기입할 수 있다. 다른 방법으로, 저장 매체는 프로세서와 일체형일 수도 있다. 프로세서 및 저장 매체는 주문형 집적회로(ASIC) 내에 상주할 수도 있다. ASIC는 사용자 단말기 내에 상주할 수도 있다. 다른 방법으로, 프로세서 및 저장 매체는 사용자 단말기 내에 개별 컴포넌트로서 상주할 수도 있다.
이상의 설명은 본 발명의 기술 사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위에서 다양한 수정 및 변형이 가능할 것이다.
따라서, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것이고, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다. 본 발명의 보호 범위는 아래의 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술 사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.

Claims (20)

  1. 차량에 구비되어, 차량 시스템으로부터 상기 차량의 작동 모드에 대한 정보를 수신하는 통신부;
    상기 차량에 구비되어, ISP(Image Signal Processor)가 내장되지 않으며, 상기 차량의 주변 영상을 획득하고,
    상기 주변 영상을 제 1 영상 제어부에 전송하는 카메라부;
    영상 처리를 수행하는 제 1 ISP가 구비되고,
    상기 주변 영상을 제 2 영상 제어부에 공유하는 상기 제 1 영상 제어부; 및
    영상 처리를 수행하는 제 2 ISP가 구비된 상기 제 2 영상 제어부를 포함하고,
    상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부는,
    상기 차량의 작동 모드에 따라서, 택일적으로 상기 카메라부에 대한 제어권을 가지는 차량 영상 제어 장치.
  2. 제 1 항에 있어서,
    상기 제 1 영상 제어부는,
    상기 제 1 ISP를 통해, 상기 주변 영상에 대한 영상 처리를 수행하고,
    영상 처리된 상기 주변 영상을 비휘발성 메모리에 저장하는 차량 영상 제어 장치.
  3. 제 1 항에 있어서,
    상기 제 2 영상 제어부는,
    상기 제 2 ISP를 통해, 상기 주변 영상에 대한 영상 처리를 수행하고,
    영상 처리된 상기 주변 영상을 실시간으로 출력하는 차량 영상 제어 장치.
  4. 제 1 항에 있어서,
    상기 카메라부는,
    상기 차량의 후방에 대한 영상을 획득하는 카메라를 포함하는 차량 영상 제어 장치.
  5. 제 1 항에 있어서,
    상기 제 1 영상 제어부 및 상기 제 2 영상 제어부는,
    상기 카메라부의 이미지 센서 파라미터를 서로 공유하는 차량 영상 제어 장치.
  6. 제 1 항에 있어서,
    상기 차량의 작동 모드는,
    주행 중인 모드, 주차 중 상기 차량의 주변 영상을 실시간으로 출력하는 모드 및 주차 중 상기 차량의 주변 영상을 실시간으로 출력하지 않는 모드를 포함하는 차량 영상 제어 장치.
  7. 제 1 항에 있어서,
    상기 제 1 영상 제어부는,
    상기 카메라부로부터 전송된 상기 주변 영상을 내부 신호로 변환하는 DES(Deserializer); 및
    상기 내부 신호를 외부에 전송하기 위한 영상 신호로 변환하는 SER(Serializer)을 포함하고,
    상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 DES 및 상기 SER의 초기화를 수행하는 차량 영상 제어 장치.
  8. 제 7 항에 있어서,
    상기 제 1 영상 제어부는,
    상기 DES 및 상기 SER의 초기화가 완료되기 전까지, 상기 카메라부에 대한 제어권을 가지는 차량 영상 제어 장치.
  9. 제 1 항에 있어서,
    상기 제 2 영상 제어부는,
    상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 대한 제어권을 가지는 차량 영상 제어 장치.
  10. 제 1 항에 있어서,
    상기 제 2 영상 제어부는,
    상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 오프되는 차량 영상 제어 장치.
  11. 제 1 항에 있어서,
    상기 제 1 영상 제어부는,
    상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 상기 카메라부에 대한 제어권을 가지는 차량 영상 제어 장치.
  12. 제 1 항에 있어서,
    상기 제 2 영상 제어부는,
    상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 이상이 발생한 것으로 판단되면, 제 1 영상 제어부에 상기 카메라부의 리셋을 요청하는 차량 영상 제어 장치.
  13. 제 1 항에 있어서,
    상기 제 1 영상 제어부는,
    하드 와이어(Hard Wire) 또는 CAN(Controller Area Network) 통신 중 적어도 하나 이상을 통해, 하이 신호 또는 로우 신호를 상기 제 2 영상 제어부에 전달하여, 상기 카메라부에 대한 제어권에 대한 정보를 전달하는 차량 영상 제어 장치.
  14. 제 12 항에 있어서,
    상기 제 2 영상 제어부는,
    하드 와이어를 통해, 하이 신호 및 로우 신호를 상기 제 1 영상 제어부에 전달하거나, 또는 CAN 통신을 통해 리셋 요청 신호를 상기 제 1 영상 제어부에 전달하여, 상기 카메라부의 리셋을 요청하는 차량 영상 제어 장치.
  15. 차량에 구비된 통신부가, 차량 시스템으로부터 상기 차량의 작동 모드에 대한 정보를 수신하는 단계;
    상기 차량에 구비되며, ISP가 내장되지 않은 카메라부가, 상기 차량의 주변 영상을 획득하는 단계;
    상기 카메라부가, 상기 주변 영상을 제 1 영상 제어부에 전송하는 단계;
    영상 처리를 수행하는 제 1 ISP가 구비된 상기 제 1 영상 제어부가, 상기 주변 영상을 영상 처리를 수행하는 제 2 ISP가 구비된 제 2 영상 제어부에 공유하는 단계; 및
    상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 상기 차량의 작동 모드에 따라서, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계를 포함하는 차량 영상 제어 방법.
  16. 제 15 항에 있어서,
    상기 제 1 영상 제어부 및 상기 제 2 영상 제어부가, 상기 카메라부의 이미지 센서 파라미터를 서로 공유하는 단계를 더 포함하는 차량 영상 제어 방법.
  17. 제 15 항에 있어서,
    상기 제 1 영상 제어부가, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 주변 영상을 내부 신호로 변환하는 DES(Deserializer) 및 상기 내부 신호를 외부에 전송하기 위한 영상 신호로 변환하는 SER(Serializer)의 초기화를 수행하는 단계를 더 포함하고,
    상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계는,
    상기 제 1 영상 제어부가, 상기 DES 및 상기 SER의 초기화가 완료되기 전까지, 상기 카메라부에 대한 제어권을 가지는 단계를 포함하는 차량 영상 제어 방법.
  18. 제 15 항에 있어서,
    상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계는,
    상기 제 2 영상 제어부가, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 대한 제어권을 가지는 단계를 포함하는 차량 영상 제어 방법.
  19. 제 15 항에 있어서,
    상기 제 2 영상 제어부가, 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 오프되는 단계를 더 포함하고,
    상기 제 1 영상 제어부 또는 상기 제 2 영상 제어부가, 택일적으로 상기 카메라부에 대한 제어권을 가지는 단계는,
    상기 제 1 영상 제어부가, 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하지 않는 경우, 상기 카메라부에 대한 제어권을 가지는 단계를 포함하는 차량 영상 제어 방법.
  20. 제 15 항에 있어서,
    상기 제 2 영상 제어부가, 상기 차량이 주행 중인 경우 또는 상기 차량이 주차 중 상기 주변 영상을 실시간으로 출력하는 경우, 상기 카메라부에 이상이 발생한 것으로 판단되면, 제 1 영상 제어부에 상기 카메라부의 리셋을 요청하는 단계를 더 포함하는 차량 영상 제어 방법.
KR1020210096660A 2021-07-22 2021-07-22 차량 영상 제어 장치 및 그 방법 KR20230015201A (ko)

Priority Applications (4)

Application Number Priority Date Filing Date Title
KR1020210096660A KR20230015201A (ko) 2021-07-22 2021-07-22 차량 영상 제어 장치 및 그 방법
US17/742,259 US11758267B2 (en) 2021-07-22 2022-05-11 Device and method for controlling image of vehicle
DE102022113077.0A DE102022113077A1 (de) 2021-07-22 2022-05-24 Vorrichtung und verfahren zum bildsteuern eines fahrzeugs
CN202210569062.9A CN115696032A (zh) 2021-07-22 2022-05-24 用于控制车辆的图像的装置和方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020210096660A KR20230015201A (ko) 2021-07-22 2021-07-22 차량 영상 제어 장치 및 그 방법

Publications (1)

Publication Number Publication Date
KR20230015201A true KR20230015201A (ko) 2023-01-31

Family

ID=84784622

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020210096660A KR20230015201A (ko) 2021-07-22 2021-07-22 차량 영상 제어 장치 및 그 방법

Country Status (4)

Country Link
US (1) US11758267B2 (ko)
KR (1) KR20230015201A (ko)
CN (1) CN115696032A (ko)
DE (1) DE102022113077A1 (ko)

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10234020A (ja) * 1997-02-21 1998-09-02 Canon Inc 画像伝送方法および装置並びに画像伝送システム
JP6056453B2 (ja) * 2012-12-20 2017-01-11 富士通株式会社 プログラム、データ管理方法および情報処理装置
KR102055457B1 (ko) 2013-07-04 2019-12-12 현대모비스 주식회사 차량 제어 방법 및 이를 위한 장치
JP6319340B2 (ja) * 2016-02-16 2018-05-09 Smk株式会社 動画撮像装置
KR102499421B1 (ko) 2016-05-05 2023-02-14 하만인터내셔날인더스트리스인코포레이티드 운전자 지원을 위한 시스템 및 방법
KR20180002251A (ko) 2016-06-29 2018-01-08 쌍용자동차 주식회사 근거리 무선통신을 이용한 차량용 카메라 영상 통합처리장치 및 그 방법
KR20190066396A (ko) 2017-12-05 2019-06-13 (주)캠시스 이종 카메라를 이용한 충돌 경고 방법 및 장치
EP4094996A1 (en) 2018-06-29 2022-11-30 Aptiv Technologies Limited A method comprising distributing through a power interface of a power and data center power and data for automotive applications
JP7423491B2 (ja) 2018-07-31 2024-01-29 ソニーセミコンダクタソリューションズ株式会社 固体撮像装置及び車両制御システム
KR102270316B1 (ko) 2018-10-29 2021-06-29 (주)서울소프트 스마트단말기로 구성된 멀티비젼을 구비한 다채널 avm 시스템
JP2020205664A (ja) * 2019-06-14 2020-12-24 マツダ株式会社 移動体の電源制御装置
CN114503071A (zh) * 2020-02-04 2022-05-13 谷歌有限责任公司 用于引导和管理来自可穿戴设备中的相机的图像数据的***、设备和方法
KR20220170301A (ko) * 2021-06-22 2022-12-29 현대자동차주식회사 차량 영상 제어 장치 및 그 방법

Also Published As

Publication number Publication date
US11758267B2 (en) 2023-09-12
DE102022113077A1 (de) 2023-01-26
CN115696032A (zh) 2023-02-03
US20230026986A1 (en) 2023-01-26

Similar Documents

Publication Publication Date Title
US12010455B2 (en) Vehicular vision system with incident recording function
CN104853142B (zh) 用于车载以太网的控制器及其控制方法
US20070147815A1 (en) Camera system, lens unit, camera body, and wireless communication adapter
US11146728B2 (en) Vehicle and method of controlling the same
US12028652B2 (en) Vehicle image control apparatus and method thereof
KR101987992B1 (ko) 충격 감지 기능을 이용한 차량용 영상 녹화 장치 및 그 방법
KR20230015201A (ko) 차량 영상 제어 장치 및 그 방법
WO2024061137A1 (zh) 车载座舱感知设备及其控制方法
US11818494B2 (en) Automobile camera comprising raw image signal interface
KR102618802B1 (ko) 차량 제어 시스템, 차량 제어 방법, 제어 장치, 및 비일시적인 기억 매체
US20230138849A1 (en) In-vehicle infotainment system connected to different types of usb devices and charging method performed by infotainment system using usb device as intermediate medium
US20210195104A1 (en) Electronic apparatus and accessory system
JP2005229561A (ja) 通信ネットワークシステム及び通信ネットワークシステムのｉｄ割付け方法，通信ネットワークシステムのｉｄ設定方法
CN215590611U (zh) 基于type-c接口的流媒体后视镜及其***
US12010461B2 (en) Multimedia system for a scalable infotainment system of a motor vehicle
JP7525973B2 (ja) 映像処理装置
CN110554633A (zh) 一种控制***及汽车
US20240056310A1 (en) Imaging device and imaging method
TWI555655B (zh) 攝影機、遠端控制系統及遠端控制方法
JP2021164058A (ja) 画像処理装置及び故障判定方法
US10235311B2 (en) Data acquisition system, electronic device, and data acquisition terminal
CN110554639A (zh) 控制***及汽车
KR20090058194A (ko) 휴대용 단말기에서 주차 보조 카메라 서비스 방법 및 장치
CN110554624A (zh) 一种控制***及汽车
JP2004266564A (ja) 通信システム