CN112672004A - 车辆及控制车辆的方法 - Google Patents

车辆及控制车辆的方法 Download PDF

Info

Publication number
CN112672004A
CN112672004A CN202010128061.1A CN202010128061A CN112672004A CN 112672004 A CN112672004 A CN 112672004A CN 202010128061 A CN202010128061 A CN 202010128061A CN 112672004 A CN112672004 A CN 112672004A
Authority
CN
China
Prior art keywords
image
image controller
controller
image data
tuning parameters
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202010128061.1A
Other languages
English (en)
Other versions
CN112672004B (zh
Inventor
朴世煐
车政珉
康台龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hyundai Motor Co
Yura Corp
Kia Corp
Original Assignee
Hyundai Motor Co
Kia Motors Corp
Yura Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hyundai Motor Co, Kia Motors Corp, Yura Corp filed Critical Hyundai Motor Co
Publication of CN112672004A publication Critical patent/CN112672004A/zh
Application granted granted Critical
Publication of CN112672004B publication Critical patent/CN112672004B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/20—Processor architectures; Processor configuration, e.g. pipelining
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/665—Control of cameras or camera modules involving internal camera communication with the image sensor, e.g. synchronising or multiplexing SSIS control signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/667—Camera operation mode switching, e.g. between still and video, sport and normal or high- and low-resolution modes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
    • B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Mathematical Physics (AREA)
  • Transportation (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Studio Devices (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明涉及车辆及控制车辆的方法。具体地，车辆可以包括摄像机、第一图像控制器以及第二图像控制器，所述摄像机配置为基于调优参数生成第一图像数据；所述第一图像控制器包括配置为执行第一图像数据的图像处理的图像信号处理器(ISP)；所述第二图像控制器包括配置为执行第一图像数据的图像处理的ISP。当基于操作模式第二图像控制器确定调优参数时，所述第二图像控制器可以配置为将确定的调优参数传输至摄像机，并且所述第一图像控制器的ISP可以配置为接收第一图像数据。

Description

车辆及控制车辆的方法
技术领域
本发明涉及一种车辆，在该车辆中包含在摄像机内的图像信号处理器(ISP)被转移到控制器内，并且本发明还涉及控制车辆的方法。
背景技术
设置在常规车辆中的摄像机包括电荷耦合器件(CCD)传感器或者互补金属氧化物半导体(CMOS)传感器，用于将经由镜头吸收的光转换为电信号。摄像机进一步包括图像信号处理器(image signal processor,ISP)，其对CCD传感器或者CMOS传感器的输出的数据进行图像处理。ISP在逐个像素的基础上执行图像处理，比如镜头的光学***校正过程以及由CCD传感器或者CMOS传感器的偏差引起的缺陷的校正。
车辆包括图像控制器，其附加执行各种功能，比如输出通过摄像机的ISP处理的图像、在输出之前记录图像，或者对通过多个摄像机传输的图像进行整合。
近来，随着设置在车辆中的多个控制器被集成为一个，分设在多个摄像机中的ISP被设置在集成的图像控制器的内部，并且已经对图像处理的集成控制的方式进行了研究。
然而，包含在图像控制器中的ISP经常将图像处理所需的不同的调优参数传输到一个摄像机。这造成了ISP和包含在摄像机中的传感器(CCD传感器或者CMOS传感器)之间的匹配的问题。
公开于本发明背景技术部分的信息仅仅旨在加强对本发明的一般背景的理解，而不应当被视为承认或以任何形式暗示该信息构成已为本领域技术人员所公知的现有技术。
发明内容
本发明的各个方面旨在提供一种车辆，该车辆可以防止由于信号冲突通过摄像机传输的错误图像数据的传输，并且通过提供包含在每个图像控制器中的ISP之间的排列顺序的方式，进一步防止图像质量和图像控制器的功能的下降，并且本发明的各个方面还旨在提供一种控制车辆的方法。
本发明的其他方面的将会部分地在随后的描述中阐述，并且将会部分地通过描述而明显，或者可以通过本发明的实践学习到。
根据本发明的一个方面，车辆包括摄像机、第一图像控制器以及第二图像控制器，所述摄像机配置为基于调优参数生成第一图像数据；所述第一图像控制器包括配置为执行第一图像数据的图像处理的图像信号处理器(ISP)；所述第二图像控制器包括配置为执行第一图像数据的图像处理的ISP。当基于操作模式第二图像控制器配置为确定调优参数时，所述第二图像控制器可以配置为将确定的调优参数传输至摄像机，并且所述第一图像控制器的ISP可以配置为接收第一图像数据。
车辆可以进一步包括音频视频导航装置(audio video navigation,AVN)，其配置为输出通过第一图像控制器传输的图像。第一图像控制器可以配置为：将第一图像数据传输至AVN，并且将通过第二图像控制器的ISP对第一图像数据进行图像处理所获得的第二图像数据传输至AVN。
第二图像控制器可以配置为经由内部集成电路(Inter Integrated Circuit,I2C)通信或者低压差分信号(Low-Voltage Differential Signaling,LVDS)通道将确定的调优参数传输至第一图像控制器。
摄像机可以配置为将确定的调优参数***到第一图像数据的数据头。
第二图像控制器可以配置为：在接收第一图像数据之后，确定附加参数，并且基于确定的附加参数对第一图像数据进行图像处理。
第二图像控制器可以配置为经由ISP通信或者串行方式的至少一种将附加参数传输至第一图像控制器。
第一图像控制器可以配置为根据附加参数执行第一图像数据的图像处理。
当基于操作模式第一图像控制器配置为确定调优参数时，所述第一图像控制器可以配置为将确定的调优参数传输至摄像机，并且第二图像控制器可以配置为将ISP切换为睡眠模式。
第二图像控制器可以配置为：基于从多个摄像机传输的多个第一图像数据生成环绕视图，并且将生成的环绕视图传输至第一图像控制器。
车辆可以进一步包括：第三图像控制器，其包括配置为接收第一图像数据并且执行第一图像数据的图像处理的ISP。当基于操作模式第三图像控制器配置为确定调优参数时，所述第三图像控制器可以配置为将确定的调优参数传输至摄像机，并且所述第一图像控制器和第二图像控制器可以配置为接收第一图像数据。
根据本发明的另一方面，在控制车辆的方法中，车辆包括含有图像信号处理器(ISP)的第一图像控制器和含有ISP的第二图像控制器。该方法包括：基于操作模式，利用第二图像控制器确定调优参数；利用第二图像控制器，将确定的调优参数传输至摄像机；利用摄像机，基于确定的调优参数生成第一图像数据；利用第一图像控制器和第二图像控制器，接收第一图像数据；以及利用第二图像控制器，对第一图像数据进行图像处理。
该方法可以进一步包括：将通过第二图像控制器处理的第二图像数据传输至第一图像控制器；以及利用第一图像控制器，经由音频视频导航装置(AVN)输出第二图像数据。
该方法可以进一步包括：利用第二图像控制器，经由内部集成电路(I2C)通信或者低压差分信号(LVDS)通道将确定的调优参数传输至第一图像控制器。
对第一图像控制器的传输可以包括：利用摄像机，将确定的调优参数***到第一图像数据的数据头。
该方法可以进一步包括：在接收第一图像数据之后，利用第二图像控制器确定附加参数；以及利用第二图像控制器，基于确定的附加参数对第一图像数据进行图像处理。
该方法可以进一步包括：利用第二图像控制器，经由ISP通信或者串行方式的至少一种将附加参数传输至第一图像控制器。
该方法可以进一步包括：利用第一图像控制器，根据附加参数执行第一图像数据的图像处理。
该方法可以进一步包括：当基于操作模式第一图像控制器配置为确定调优参数时，利用第一图像控制器，将确定的调优参数传输至摄像机；以及利用第二图像控制器，将ISP切换为睡眠模式。
该方法可以进一步包括：利用第二图像控制器，基于从多个摄像机传输的第一图像数据生成环绕视图；以及利用第二图像控制器，将生成的环绕视图传输至第一图像控制器。
该方法可以进一步包括：当基于操作模式第三图像控制器配置为确定调优参数时，利用第三控制器，将确定的调优参数传输至摄像机；利用第三控制器，对第一图像数据进行图像处理；以及利用第一图像控制器和第二图像控制器，接收根据确定的调优参数的第一图像数据。
本发明的方法和装置具有其它的特性和优点，这些特性和优点从并入本文中的附图和随后的具体实施方式中将是显而易见的，或者将在并入本文中的附图和随后的具体实施方式中进行详细陈述，这些附图和具体实施方式共同用于解释本发明的特定原理。
附图说明
图1是显示了根据本发明的示例性实施方式的包含在车辆中的摄像机和多个控制器的控制方框图。
图2和图3是用于描述根据本发明的示例性实施方式的车辆的操作的图。
图4是用于描述根据本发明的另一示例性实施方式的在操作模式下的车辆的操作的图。
图5是显示了根据本发明的示例性实施方式的控制车辆的方法的流程图。
应当理解，附图不一定是按照比例绘制，而是呈现说明本发明的基本原理的各个特征的简化表示。本文所包含的本发明的具体设计特征(包括例如具体尺寸、方向、位置和形状)将部分地由具体所要应用和使用的环境来确定。
在这些图中，贯穿附图的多幅图，相同的附图标记表示本发明的相同或等同的部分。
具体实施方式
现在将详细参照本发明的各个实施方式，各个实施方式的示例在附图中进行说明并如下进行描述。尽管本发明将结合本发明的示例性实施方式进行描述，应当理解本说明书并非旨在将本发明限制为那些示例性实施方式。另一方面，本发明旨在不仅覆盖本发明的示例性实施方式，还包括各个替代的实施方式、修改的实施方式、等价的实施方式或其它实施方式，所述实施方式包含在由所附权利要求所限定的本发明的精神和范围内。
在整个说明书中，相同的附图标记指代相同的元件。并非将要描述本发明的示例性实施方式的所有元件，并且将会省略本领域中已经普遍知道的描述或在示例性实施方式中互相重复的描述。整个说明书中使用的术语，例如“～部分”、“～模块”、“～构件”、“～块”等，可以在软件和/或硬件中实现，并且多个“～部分”、“～模块”、“～构件”或“～块”可以在单个元件中实现，或者单个“～部分”、“～模块”、“～构件”或“～块”可以包括多个元件。
应当理解，当一个元件被称为“连接”至另一个元件时，它可以直接地或者间接地连接至另一个元件，其中，间接连接包括经由无线通信网络的“连接”。
此外，当部件“包括”或“包含”元件时，除非存在与其相反的具体描述，否则该部件可以进一步包括其它元件，而不排除其它元件。
此外，当陈述为层在另一层或基底“上”时，该层可以直接在另一层或基底上，或者第三层可以布置在这两者之间。
应当理解，虽然在本文中可以使用术语第一、第二、第三等以描述各个元件，但是其可以不受这些术语限制。这些术语仅用于将一个元件与另一个元件进行区分。
正如本文中所使用的，单数形式“一”、“一个”和“该”旨在也包括复数形式，除非上下文另有明确说明。
对于步骤的附图标记用于方便描述，但并不旨在说明每个步骤的顺序。除非上下文另外明确说明，否则每个步骤可以以与所示顺序不同的顺序实行。
现在将参考所附附图对本发明的原理和示例性实施方式进行描述。
图1是显示了根据本发明的示例性实施方式的包含在车辆中的摄像机和多个控制器的控制方框图。
参考图1，车辆1可以包括：摄像机10、包含图像信号处理器(ISP)110的第一图像控制器100以及包含ISP 210的第二图像控制器200。
至少一个摄像机10可以设置在车辆1中，并且可以包括镜头11和传感器12。摄像机10不包括ISP 13，并且经由车辆1中的网络可以将从传感器12输出的图像数据传输至第一图像控制器100和/或第二图像控制器200。摄像机10可以根据通过第一图像控制器100或者第二图像控制器200确定的调优参数调节镜头11和传感器12。
通过焦距、有效孔径(镜头的直径与焦距的比率)、视场角(拍摄图像的宽度)等可以指定镜头11。镜头11可以根据从第一图像控制器100或者第二图像控制器200中指定为主机的图像控制器传输的调优参数来调节焦距、有效孔径、视场角等。
传感器12可以包括电荷耦合器件(CCD)传感器或者互补金属氧化物半导体(CMOS)传感器，并且可以将通过镜头11传输的光转换为电信号。传感器12可以执行噪声处理或者后像处理。镜头12可以根据从第一图像控制器100或者第二图像控制器200中指定为主机的图像控制器传输的调优参数来执行噪声处理或者后像处理。
在下文中，根据调优参数由摄像机10生成的数据可以被称为第一图像数据。
由摄像机10生成的第一图像数据可以传输至设置在车辆1中的第一图像控制器100和/或第二图像控制器200。
第一图像控制器100可以包括ISP 110。ISP 110可以是这样的处理器，其临时地存储通过摄像机10传输的第一图像数据并且执行诸如自动白平衡(Auto White Balance,AWB)和自动曝光(Auto Exposure,AE)或者噪声消除的图像处理。
第一图像控制器100可以是数字视频录像机***(digital video recordersystem,DVRS)，其存储通过摄像机10拍摄的图像并且在存储图像时添加拍摄时间和日期。DVRS可以直接连接至摄像机10并且即使在车辆1的驻车模式下也可以操作以记录图像。DVRS可以通过同轴电缆连接以与设置在车辆1中的第二图像控制器200共享图像。
第一图像控制器100可以经由音频视频导航装置(AVN)50输出图像数据。
AVN 50可以设置在车辆1的中央仪表板区域中并且可以是输出图像或者声音的控制模块。在本发明的示例性实施方式中，用于输出图像的模块被称为AVN 50，但是不必限制于此。例如，车辆1经由通信模块可以将通过第一图像控制器100或者第二图像控制器200处理的图像提供给驾驶员的用户终端。
第二图像控制器200也可以包括ISP 210。第二图像控制器200可以将操作所需的调优参数传输至摄像机10。摄像机10经由通过第二图像控制器200传输的调优参数可以生成电信号(也就是第一图像数据)，并且可以将第一图像数据传输至第二图像控制器200。
第二图像控制器200可以经由ISP 210处理第一图像数据。第一图像控制器100的ISP 110可以不将调优参数传输至摄像机，而且可以不对第一图像数据进行处理或执行图像处理(比如噪声处理)，以基于通过第二图像控制器200传输的调优参数记录图像质量。第一图像控制器100可以经由AVN 50输出通过第二图像控制器200传输的图像。
根据本发明的示例性实施方式，第二图像控制器200可以是控制模块，在该控制模块中集成环视监控(Surround View Monitoring,SVM)和高级驾驶员辅助***(AdvancedDriver Assistance System,ADAS)。SVM可以合成通过设置在车辆1的前面、后面和侧面的多个摄像机10拍摄的多个第一图像数据，并且然后可以经由AVN 50输出生成的环绕视图。ADAS可以通过摄像机10的图像输出驻车所需的经图像处理的图像或者盲点图像，以辅助驾驶员。
另一方面，第一图像控制器100和第二图像控制器200可以用存储有算法或数据的存储器以及处理器来实现，所述算法分别控制包含ISP110和ISP210的各种组件的操作，所述数据是关于实现算法的程序，所述处理器使用存储在存储器中的数据实施前述操作。存储器和处理器可以在分开的芯片中实现。选择性地，存储器和处理器可以在单个芯片中实现。此外，第一图像控制器100和第二图像控制器200可以经由设置在车辆1中的同轴电缆连接。
此外，包含在车辆1中的第一图像控制器100和第二图像控制器200不必限制于上述控制模块，而且可以进行各种改变。
图2和图3是用于描述根据本发明的示例性实施方式的车辆的操作的图。为了避免重复描述，下面一起进行陈述。
车辆1可以基于操作模式确定要操作的图像控制器。操作模式可以包括含有驾驶模式或者驻车模式的各种操作模式。在每个操作模式中，可以对要操作的图像控制器进行设置。
车辆1的操作模式可以通过用户输入改变。用户输入可以使用诸如控制器局域网(controller area network,CAN)的通信网络信号来进行传输，并且可以确定在操作模式下作为主机操作的图像控制器。
图2显示了操作模式是驾驶模式的情况。在驾驶模式中，第二图像控制器200配置为主机的角色。当第二图像控制器200执行主机的角色时，第二图像控制器200的ISP 210可以确定操作所需的调优参数。
第二图像控制器200可以经由车辆1中的通信网络将确定的调优参数传输至摄像机10(220)。通信网络可以是内部集成电路(I2C)通信或者是低压差分信号(LVDS)通道。
摄像机10可以基于确定的调优参数操作传感器12，并且生成第一图像数据。生成的第一图像数据经由车辆1中的通信网络可以传输至第一图像控制器100和第二图像控制器200(230)。也就是说，第一图像控制器100的ISP 110可以接收基于通过第二图像控制器200传输的调优参数由摄像机10生成的第一图像数据。
第二图像控制器200的ISP 210可以基于接收到的第一图像数据处理图像。如以上参考图1所述，当第一图像控制器100直接连接至AVN50时，第二图像控制器200可以将经过图像处理的第二图像数据经由第一图像控制器100传输至AVN 50(231)。第一图像控制器100可以包括中央处理单元(CPU)111，并且接收通过第二图像控制器200的ISP 210进行图像处理的第二图像数据。
第一图像控制器100的CPU 111可以将接收到的第二图像数据传输至AVN 50，并且AVN 50可以输出第二图像数据。
第二图像控制器200也可以包括处理器或者存储器，比如第一图像控制器100的CPU 111。
图3显示了操作模式是停车模式的情况。在停车模式中，第一图像控制器100配置为主机的角色。当第一图像控制器100执行主机的角色时，第一图像控制器100的ISP 110可以确定操作所需的调优参数。
第一图像控制器100可以经由车辆1中的通信网络将确定的调优参数传输至摄像机10(240)。通信网络可以是I2C通信或者LVDS通道。
摄像机10可以基于确定的调优参数操作传感器12，并且生成第一图像数据。生成的第一图像数据可以经由车辆1中的通信网络传输至第一图像控制器100(250)。
第一图像控制器100的ISP 110可以基于接收到的第一图像数据处理图像。由于第一图像控制器100连接至AVN 50，第一图像控制器100可以将经过图像处理的第二图像数据传输至AVN 50(251)。AVN 50可以将第二图像数据进行显示。
当第一图像控制器200在驻车模式下作为主机操作时，第二图像控制器200的ISP210可以操作为睡眠模式。也就是说，第二图像控制器200的ISP 210不对第一图像数据成像。
同时，设置为主机角色的图像控制器可以将确定的调优参数传输至设置为从机角色的图像控制器。也就是说，在图2的示例性实施方式中当第二图像控制器200将确定的调优参数传输至摄像机10时，调优参数也可以传输至第一图像控制器100。
例如，经由通信或者串行方式(其配置为用于在ISP之间发射和接收)的至少一种，调优参数可以传输至第一图像控制器100。在另一示例中，通过将确定的调优参数***到生成的第一图像数据的数据头，摄像机10可以使第一图像控制器100接收确定的调优参数。
图4是用于描述根据本发明的另一示例性实施方式的在操作模式下的车辆的操作的图。
参考图4，根据车辆1的示例的操作模式可以是这样的操作，在所述操作中第一图像控制器100和第二图像控制器200可以一起执行图像处理。在当前情况下，车辆1也可以将第一图像控制器100和第二图像控制器200的至少一个图像控制器作为主机操作。
例如，当第二图像控制器200作为主机操作时，第二图像控制器200可以将确定的调优参数传输至摄像机10。摄像机10根据确定的调优参数可以将第一图像数据(也就是图像A)传输至第一图像控制器100和第二图像控制器200(260)。
作为主机的第二图像控制器200可以经由ISP 210处理接收到的第一图像数据。其后，第二图像控制器200可以根据第一图像控制器100的功能确定附加的图像处理。第二图像控制器200可以确定附加的图像处理所需的附加参数，并且可以将确定的附加参数实时地传输至第一图像控制器100(261)。第一图像控制器100和第二图像控制器200可以基于确定的附加参数经由ISP 110和210执行第一图像数据的图像处理，并且可以生成经过图像处理的第二图像数据，也就是校正的图像A’。
校正的图像A’可以通过第一图像控制器100被收集，然后经由AVN 50输出。
同时，除了第一图像控制器100和第二图像控制器200之外，车辆1可以包括含有ISP的第三图像控制器。根据另一操作模式，第三图像控制器可以作为主机操作，并且第一图像控制器100和第二图像控制器200可以作为从机操作。当第三图像控制器配置为确定调优参数时，第三图像控制器可以将确定的调优参数传输至摄像机10，并且第一图像控制器100和第二图像控制器200可以接收根据确定的调优参数的第一图像数据。
图5是显示了根据本发明的示例性实施方式的控制车辆的方法的流程图。
参考图5，图像控制器可以配置为基于操作模式确定调优参数(300)。
在操作模式下，设置作为主机操作的图像控制器。因此，作为主机操作的图像控制器可以根据操作模式和图像控制器的功能确定调优参数。
调优参数对于摄像机10的操作来说是必要的并且可以根据作为主机操作的图像控制器的功能而变化。
图像控制器可以将确定的调优参数传输至摄像机10(310)。
图像控制器可以经由内部集成电路(I2C)通信将确定的调优参数传输至摄像机10。
摄像机10可以根据接收到的调优参数生成第一图像数据(320)。
第一图像数据是通过ISP执行图像处理之前的图像。
摄像机10可以将第一图像数据传输至第一图像控制器100和第二图像控制器200(330)。
摄像机10可以将确定的调优参数***到第一图像数据的数据头，并且作为从机操作的图像控制器可以接收第一图像数据。
基于接收到的第一图像数据可以执行图像处理(340)。
第一图像控制器100和第二图像控制器200可以包括ISP，并且可以在作为从机操作的图像控制器中执行第一图像数据的图像处理。
图像控制器可以传输处理经过处理的第二图像数据(350)。
作为主机操作的图像控制器可以经由同轴电缆将经过处理的图像传输至AVN 50或者作为从机的图像控制器。在图2所示的示例性实施方式中，当作为主机操作的图像控制器没有直接连接至AVN 50时，作为从机操作的图像控制器可以接收经过处理的图像并且将经过处理的图像传输至AVN 50。在图3所示的示例性实施方式中，当作为主机操作的图像控制器直接连接至AVN 50时，作为从机操作的图像控制器可以操作为睡眠模式，并且作为主机操作的图像控制器可以将经过处理的图像传输至AVN 50。
AVN 50可以显示图像(360)。
经过处理的图像不必只在AVN 50上显示，而可以显示在设置于车辆1中的各种显示装置上。
通过这样，车辆1能够将内置在摄像机10中的ISP转移至图像控制器，从而降低成本并且确保传感器12中的像素面积达到最大。此外，当组合包含各种ISP的不同的控制模块时，可以执行稳定的操作。
根据本发明的示例性实施方式的车辆和控制该车辆的方法，通过提供包含在各个图像控制器中的ISP之间的排列顺序的方式，能够阻止由于信号冲突通过摄像机传输的错误图像数据的传输，并且进一步防止图像质量和图像控制器的功能的下降。
同时，公开的示例性实施方式可以以记录介质的形式来实施，该记录介质存储有由计算机执行的指令。所述指令可以以程序代码的形式存储，并且当通过处理器执行时，所述指令可以生成程序模块以执行所包括的示例性实施方式的操作。记录介质可以实现为非瞬态的计算机可读记录介质。
非瞬态的计算机可读记录介质可以包括所有种类的存储有可以由计算机解读的指令的记录介质。例如，非瞬态的计算机可读记录介质可以是诸如ROM、RAM、磁带、磁盘、闪速存储器、光学数据存储设备等。
为了方便解释和精确限定所附权利要求，术语“上”、“下”、“内”、“外”、“上面”、“下面”、“向上”、“向下”、“前”、“后”、“背”、“里面的”、“外面的”、“向内”、“向外”、“内部的”、“外部的”、“内侧”、“外侧”、“向前”、“向后”被用于参考附图中所显示的这些特征的位置来描述示例性实施方式的特征。将进一步理解，术语“连接”或其衍生词指的是直接和间接连接。
前述对本发明的具体示例性实施方式的描述是为了说明和描述的目的。它们并不旨在详尽或将本发明限制在所公开的精确的实施方式中，并且显然，根据上述教示可以进行各种修改和变化。选择和描述的示例性实施方式是为了解释本发明的某些原理和其实际应用，以使其他本领域技术人员制造和使用本发明的各个示例性实施方式，及其替代方式和修改方式。本发明的范围由所附权利要求及其等价形式所限定。

Claims (20)

1.一种车辆，包括：
摄像机，其配置为基于调优参数生成第一图像数据；
第一图像控制器，其连接至所述摄像机并且包括配置为执行第一图像数据的图像处理的图像信号处理器；以及
第二图像控制器，其连接至所述摄像机并且包括配置为执行第一图像数据的图像处理的图像信号处理器；
其中，当基于操作模式第二图像控制器确定调优参数时，所述第二图像控制器配置为将确定的调优参数传输至摄像机，并且所述第一图像控制器的图像信号处理器配置为接收第一图像数据。
2.根据权利要求1所述的车辆，进一步包括：
音频视频导航装置，其配置为输出通过第一图像控制器传输的图像；
其中，所述第一图像控制器配置为：
将第一图像数据传输至音频视频导航装置；
将通过第二图像控制器的图像信号处理器对第一图像数据进行图像处理所获得的第二图像数据传输至音频视频导航装置。
3.根据权利要求2所述的车辆，其中，所述第二图像控制器配置为经由内部集成电路通信或者低压差分信号通道将确定的调优参数传输至第一图像控制器。
4.根据权利要求1所述的车辆，其中，所述摄像机配置为将确定的调优参数***到第一图像数据的数据头。
5.根据权利要求1所述的车辆，其中，所述第二图像控制器配置为：
在接收第一图像数据之后，确定附加参数；
基于确定的附加参数执行第一图像数据的图像处理。
6.根据权利要求5所述的车辆，其中，所述第二图像控制器配置为经由图像信号处理器通信或者串行方式的至少一种将附加参数传输至第一图像控制器。
7.根据权利要求6所述的车辆，其中，所述第一图像控制器配置为根据附加参数执行第一图像数据的图像处理。
8.根据权利要求1所述的车辆，其中，当基于操作模式第一图像控制器确定调优参数时，所述第一图像控制器配置为将确定的调优参数传输至摄像机，并且所述第二图像控制器配置为将图像信号处理器切换为睡眠模式。
9.根据权利要求1所述的车辆，其中，所述第二图像控制器配置为：
基于从多个摄像机传输的多个第一图像数据生成环绕视图；
将生成的环绕视图传输至第一图像控制器。
10.根据权利要求1所述的车辆，进一步包括：
第三图像控制器，其包括配置为接收第一图像数据并且执行第一图像数据的图像处理的图像信号处理器；
其中，当基于操作模式第三图像控制器确定调优参数时，所述第三图像控制器配置为将确定的调优参数传输至摄像机，并且所述第一图像控制器和第二图像控制器配置为接收第一图像数据。
11.一种控制车辆的方法，所述车辆包括含有图像信号处理器的第一图像控制器和含有图像信号处理器的第二图像控制器，该方法包括：
基于操作模式，利用第二图像控制器确定调优参数；
利用第二图像控制器，将确定的调优参数传输至连接到第二图像控制器的摄像机；
利用摄像机，基于确定的调优参数生成第一图像数据；
利用第一图像控制器和第二图像控制器，接收第一图像数据；
利用第二图像控制器，对第一图像数据进行图像处理。
12.根据权利要求11所述的方法，进一步包括：
将通过第二图像控制器处理的第二图像数据传输至第一图像控制器；
利用第一图像控制器，经由音频视频导航装置输出第二图像数据。
13.根据权利要求12所述的方法，进一步包括：
利用第二图像控制器，经由内部集成电路通信或者低压差分信号通道将确定的调优参数传输至第一图像控制器。
14.根据权利要求12所述的方法，其中，对第一图像控制器的传输包括：
利用摄像机，将确定的调优参数***到第一图像数据的数据头。
15.根据权利要求11所述的方法，进一步包括：
在接收第一图像数据之后，利用第二图像控制器确定附加参数；
利用第二图像控制器，基于确定的附加参数对第一图像数据进行图像处理。
16.根据权利要求15所述的方法，进一步包括：
利用第二图像控制器，经由图像信号处理器通信或者串行方式的至少一种将附加参数传输至第一图像控制器。
17.根据权利要求16所述的方法，进一步包括：
利用第一图像控制器，根据附加参数执行第一图像数据的图像处理。
18.根据权利要求11所述的方法，进一步包括：
当基于操作模式第一图像控制器确定调优参数时，利用第一图像控制器，将确定的调优参数传输至摄像机；
利用第二图像控制器，将图像信号处理器切换为睡眠模式。
19.根据权利要求11所述的方法，进一步包括：
利用第二图像控制器，基于从多个摄像机传输的第一图像数据生成环绕视图；
利用第二图像控制器，将生成的环绕视图传输至第一图像控制器。
20.根据权利要求11所述的方法，进一步包括：
当基于操作模式第三图像控制器确定调优参数时，利用第三图像控制器，将确定的调优参数传输至摄像机；
利用第三图像控制器，对第一图像数据进行图像处理；
利用第一图像控制器和第二图像控制器，接收根据确定的调优参数的第一图像数据。
CN202010128061.1A 2019-10-16 2020-02-28 车辆及控制车辆的方法 Active CN112672004B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020190128451A KR20210045106A (ko) 2019-10-16 2019-10-16 차량 및 차량의 제어방법
KR10-2019-0128451 2019-10-16

Publications (2)

Publication Number Publication Date
CN112672004A true CN112672004A (zh) 2021-04-16
CN112672004B CN112672004B (zh) 2024-04-23

Family

ID=75402724

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010128061.1A Active CN112672004B (zh) 2019-10-16 2020-02-28 车辆及控制车辆的方法

Country Status (3)

Country Link
US (1) US11146728B2 (zh)
KR (1) KR20210045106A (zh)
CN (1) CN112672004B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114500772A (zh) * 2022-03-02 2022-05-13 深圳市深视智能科技有限公司 一种成像装置及成像***

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20210390671A1 (en) * 2020-06-16 2021-12-16 Samsung Electronics Co., Ltd. Image processing system for performing image quality tuning and method of performing image quality tuning
KR20210155695A (ko) * 2020-06-16 2021-12-23 삼성전자주식회사 화질 튜닝을 수행하는 이미지 처리 시스템 및 화질 튜닝 방법
KR20220170301A (ko) * 2021-06-22 2022-12-29 현대자동차주식회사 차량 영상 제어 장치 및 그 방법
KR102457633B1 (ko) * 2022-01-26 2022-10-21 이상배 차량 외부 측전방 상태 확인 장치

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003162796A (ja) * 2001-11-28 2003-06-06 Mitsubishi Heavy Ind Ltd 車両監視方法及びシステム
US20090237714A1 (en) * 2008-03-18 2009-09-24 Ricoh Company, Limited Image processing apparatus and image processing method
JP2013211715A (ja) * 2012-03-30 2013-10-10 Nikon Corp 撮像装置
US20140375759A1 (en) * 2013-06-25 2014-12-25 Omnivision Technologies, Inc. Method And Apparatus For Distributed Image Processing In Cameras For Minimizing Artifacts In Stitched Images
CN106233717A (zh) * 2014-03-12 2016-12-14 罗伯特·博世有限公司 用于在无专用反向信道的情况下传输基于摄像机的参数的***和方法
CN108012064A (zh) * 2017-12-29 2018-05-08 长春众鼎科技有限公司 一种智能摄像头
US20180361972A1 (en) * 2017-06-14 2018-12-20 GM Global Technology Operations LLC Systems and methods for implementing driving modes in autonomous vehicles

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6681195B1 (en) * 2000-03-22 2004-01-20 Laser Technology, Inc. Compact speed measurement system with onsite digital image capture, processing, and portable display
JP5147874B2 (ja) * 2010-02-10 2013-02-20 日立オートモティブシステムズ株式会社 車載画像処理装置
WO2012059618A1 (en) * 2010-11-01 2012-05-10 Nokia Corporation Tuning of digital image quality
KR101816572B1 (ko) * 2016-12-28 2018-02-21 엘지전자 주식회사 차량용 카메라 장치 및 차량
US11283991B2 (en) * 2019-06-04 2022-03-22 Algolux Inc. Method and system for tuning a camera image signal processor for computer vision tasks
US11050932B2 (en) * 2019-03-01 2021-06-29 Texas Instruments Incorporated Using real time ray tracing for lens remapping

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003162796A (ja) * 2001-11-28 2003-06-06 Mitsubishi Heavy Ind Ltd 車両監視方法及びシステム
US20090237714A1 (en) * 2008-03-18 2009-09-24 Ricoh Company, Limited Image processing apparatus and image processing method
JP2013211715A (ja) * 2012-03-30 2013-10-10 Nikon Corp 撮像装置
US20140375759A1 (en) * 2013-06-25 2014-12-25 Omnivision Technologies, Inc. Method And Apparatus For Distributed Image Processing In Cameras For Minimizing Artifacts In Stitched Images
CN106233717A (zh) * 2014-03-12 2016-12-14 罗伯特·博世有限公司 用于在无专用反向信道的情况下传输基于摄像机的参数的***和方法
US20170078588A1 (en) * 2014-03-12 2017-03-16 Robert Bosch Gmbh System and method for transmitting camera-based parameters without a dedicated back channel
US20180361972A1 (en) * 2017-06-14 2018-12-20 GM Global Technology Operations LLC Systems and methods for implementing driving modes in autonomous vehicles
CN108012064A (zh) * 2017-12-29 2018-05-08 长春众鼎科技有限公司 一种智能摄像头

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114500772A (zh) * 2022-03-02 2022-05-13 深圳市深视智能科技有限公司 一种成像装置及成像***

Also Published As

Publication number Publication date
US20210120175A1 (en) 2021-04-22
KR20210045106A (ko) 2021-04-26
US11146728B2 (en) 2021-10-12
CN112672004B (zh) 2024-04-23

Similar Documents

Publication Publication Date Title
CN112672004B (zh) 车辆及控制车辆的方法
CN113271400B (zh) 成像装置和电子设备
CN109309796B (zh) 使用多个相机获取图像的电子装置和用其处理图像的方法
US9554028B2 (en) Imaging device, imaging system, imaging method, and computer-readable recording medium associating image data with responsibility acceptance or abandonment information
CN108924477A (zh) 一种远距离视频处理方法和***、视频处理设备
KR102176377B1 (ko) 차량용 카메라 모듈 및 그 제어 방법
JP2008207627A (ja) 車載撮像システム、撮像装置及び表示制御装置
JP7357620B2 (ja) 画像処理装置、および画像処理システム
CN105025221A (zh) 成像设备执行的改进的变焦跟踪方法
CN105100766A (zh) 影像显示装置、影像切换装置以及影像显示方法
EP3276939A1 (en) Image capturing device, image capturing system, and vehicle
JP4451353B2 (ja) 複眼撮像装置及び複眼撮像システム及び複眼撮像装置の制御プログラム
US12028652B2 (en) Vehicle image control apparatus and method thereof
KR101887496B1 (ko) 차량의 카메라 영상 전송 장치와 방법, 및 처리 시스템
JP2021516897A (ja) ロー画像シグナルインターフェースを備えた自動車用カメラ
WO2015141860A1 (en) Image processing apparatus, imaging apparatus, image processing program, and image processing method
JP2006325094A (ja) 車両用画像処理装置
US9659222B2 (en) Vehicle event data recorder and operation method thereof
JP2017183880A (ja) 電子ミラーの電気回路
CN113170029B (zh) 图像处理装置和图像处理方法
KR20190140237A (ko) 스테레오 영상 생성 방법 및 장치
CN108683866B (zh) 图像处理及传输方法、图像处理器及相关存储介质和***
KR101421693B1 (ko) 차량용 비디오 카메라
WO2022158278A1 (ja) 撮像素子、撮像装置
JP2021164058A (ja) 画像処理装置及び故障判定方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant