CN111741228B - 一种全景图像的曝光调整方法及装置 - Google Patents

一种全景图像的曝光调整方法及装置 Download PDF

Info

Publication number
CN111741228B
CN111741228B CN202010622197.8A CN202010622197A CN111741228B CN 111741228 B CN111741228 B CN 111741228B CN 202010622197 A CN202010622197 A CN 202010622197A CN 111741228 B CN111741228 B CN 111741228B
Authority
CN
China
Prior art keywords
image
brightness
spliced
panoramic image
exposure adjustment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010622197.8A
Other languages
English (en)
Other versions
CN111741228A (zh
Inventor
姜芳芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Dahua Technology Co Ltd
Original Assignee
Zhejiang Dahua Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Dahua Technology Co Ltd filed Critical Zhejiang Dahua Technology Co Ltd
Priority to CN202010622197.8A priority Critical patent/CN111741228B/zh
Publication of CN111741228A publication Critical patent/CN111741228A/zh
Application granted granted Critical
Publication of CN111741228B publication Critical patent/CN111741228B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70—Circuitry for compensating brightness variation in the scene
    • H04N23/741—Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本发明涉及摄像机技术领域，提供一种全景图像的曝光调整方法及装置，用以解决曝光调整后的全景图像的画面亮度不均匀，曝光动态范围低及图像清晰度差的问题，其中，方法包括：获取不同拍摄角度的摄像头拍摄的待拼接图像，按照预设的初始参考亮度，对各个待拼接图像进行曝光调整；基于曝光调整后的各个待拼接图像的亮度确定当前参考亮度，并按照当前参考亮度，对部分或全部待拼接图像进行二次曝光；最后，将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像。分别将各个待拼接图像的亮度调整到可接受范围内，再拼接各个曝光好的待拼接图像得到全景图像，避免全景图像出现暗区过暗、亮区过曝的情况，提高了曝光动态范围和图像清晰度。

Description

一种全景图像的曝光调整方法及装置
技术领域
本发明涉及摄像机技术领域，提供了一种全景图像的曝光调整方法及装置。
背景技术
随着摄像机技术的发展，人们对于车载摄像机的视场角提出了更高的要求，但光学镜头摄像机的最大视场角小于180°，非广角镜头摄像机的最大视场角也不超过100°，为了满足人们的更广拍摄视场角的需求，可采用全景车载摄像机进行拍摄。其中，全景车载摄像机是安装有多个摄像头的摄像机，每个摄像头的拍摄角度均不同，通过将各个摄像头拍摄的拼接图像拼接在一起，得到对应的全景图像。
由于全景车载摄像机上各个摄像头的拍摄角度不同，各个摄像头分别拍摄同一场景下的不同的画面，得到多个待拼接图像，而光线进入各个摄像头的入射率不同，导致各个摄像头得到的待拼接图像的亮度也有所不同。在这种情况下，将拼接得到的全景图像按照预设的目标亮度进行曝光时，分属于全景图像中不同区域的待拼接图像，无法获得理想的曝光亮度，使得全景图像出现画面亮度不均匀的问题，降低了全景图像的曝光动态范围和图像清晰度。
有鉴于此，本发明实施例提供了一种新的全景图像的曝光调整方法。
发明内容
本发明实施例提供一种全景图像的曝光调整方法及装置，用以解决曝光调整后的全景图像的画面亮度不均匀，曝光动态范围低和图像清晰度低的问题。
本发明实施例提供的一种全景图像的曝光调整方法，包括：
获取不同拍摄角度的摄像头拍摄的待拼接图像；
按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整；
基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，并按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整；
将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像。
可选的，所述按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整，包括：
按照所述初始参考亮度，确定亮度范围；
将所述各个待拼接图像的亮度调整到所述亮度范围内。
可选的，所述基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，包括：
将曝光调整参数最小的待拼接图像的亮度，作为所述当前参考亮度，其中，所述曝光调整参数包括快门参数和增益参数；或者，将亮度调整最小的待拼接图像的亮度，作为所述当前参考亮度；或者，
从多个亮度调整符合预设曝光调整要求的待拼接图像中，选取一个待拼接图像，并将所述一个待拼接图像的亮度，作为所述当前参考亮度；或者，
基于曝光调整后的各个待拼接图像的亮度，确定对应的平均亮度，并将所述平均亮度作为所述当前参考亮度。
可选的，所述按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整，包括：
按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整；
其中，所述目标图像为亮度与当前参考亮度的差值大于预设的亮度差值阈值的待拼接图像。
可选的，所述按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整，包括：
获取所述待拼接图像中的目标图像的亮度与所述当前参考亮度之间的差值；
根据与所述差值对应的曝光调整步长，对所述目标图像进行二次曝光调整。
可选的，在得到全景图像之后，进一步包括：
确定所述全景图像的参考增益参数；
基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理参数；
采用所述全景图像的图像信号处理参数，对所述全景图像进行图像信号处理操作。
可选的，所述确定所述全景图像的参考增益参数，包括：
将除最大增益参数之外的其他增益参数，分别与最大增益参数进行比较，在确定各个比较结果均符合预设的增益参数差值阈值时，将所述最大增益参数作为所述全景图像的参考增益参数；
在确定至少一个比较结果不符合所述增益参数差值阈值时，根据所述各个待拼接图像的灰度纹理复杂度和对应的各个增益参数，确定所述全景图像的参考增益参数。
可选的，确定所述各个待拼接图像的灰度纹理复杂度，进一步包括：
分别根据所述各个待拼接图像中各个像素点的灰度值，生成对应的灰度统计直方图；
分别将各个灰度统计直方图的方差，确定为所述各个待拼接图像的灰度纹理复杂度。
可选的，所述基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理ISP参数，包括：
若所述全景图像的参考增益参数，与上一帧全景图像的参考增益参数之间的差值在预设范围内，则采用所述上一帧全景图像的ISP参数，作为所述全景图像的ISP参数；
否则，基于所述全景图像的参考增益参数，确定所述全景图像的ISP参数。
本发明实施例提供的一种全景图像的曝光调整装置，包括：
获取单元，用于获取不同拍摄角度的摄像头拍摄的待拼接图像；
曝光单元，用于按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整；
基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，并按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整；
拼接单元，用于将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像。
可选的，所述按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整，所述曝光单元用于：
按照所述初始参考亮度，确定亮度范围；
将所述各个待拼接图像的亮度调整到所述亮度范围内。
可选的，所述基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，所述曝光单元用于：
将曝光调整参数最小的待拼接图像的亮度，作为所述当前参考亮度，其中，所述曝光参数包括快门参数和增益参数；或者，
将亮度调整最小的待拼接图像的亮度，作为所述当前参考亮度；或者，
从多个亮度调整符合预设曝光调整要求的待拼接图像中，选取一个待拼接图像，并将所述一个待拼接图像的亮度，作为所述当前参考亮度；或者，
基于曝光调整后的各个待拼接图像的亮度，确定对应的平均亮度，并将所述平均亮度作为所述当前参考亮度。
可选的，所述按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整，所述曝光单元用于：
按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整；
其中，所述目标图像为亮度与当前参考亮度的差值大于预设的亮度差值阈值的待拼接图像。
可选的，所述按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整，所述曝光单元用于：
获取所述待拼接图像中的目标图像的亮度与所述当前参考亮度之间的差值；
根据与所述差值对应的曝光调整步长，对所述目标图像进行二次曝光调整。
可选的，在得到全景图像之后，所述拼接单元进一步用于：
确定所述全景图像的参考增益参数；
基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理参数；
采用所述全景图像的图像信号处理参数，对所述全景图像进行图像信号处理操作。
可选的，所述确定所述全景图像的参考增益参数，所述拼接单元进一步用于：
将除最大增益参数之外的其他增益参数，分别与最大增益参数进行比较，在确定各个比较结果均符合预设的增益参数差值阈值时，将所述最大增益参数作为所述全景图像的参考增益参数；
在确定至少一个比较结果不符合所述增益参数差值阈值时，根据所述各个待拼接图像的灰度纹理复杂度和对应的各个增益参数，确定所述全景图像的参考增益参数。
可选的，确定所述各个待拼接图像的灰度纹理复杂度，所述拼接单元进一步用于：
分别根据所述各个待拼接图像中各个像素点的灰度值，生成对应的灰度统计直方图；
将各个灰度统计直方图的方差，确定为所述各个待拼接图像的灰度纹理复杂度。
可选的，所述基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理ISP参数，所述拼接单元进一步用于：
若所述全景图像的参考增益参数，与上一帧全景图像的参考增益参数之间的差值在预设范围内，则采用所述上一帧全景图像的ISP参数，作为所述全景图像的ISP参数；
否则，基于所述全景图像的参考增益参数，确定所述全景图像的ISP参数。
本发明实施例提供的一种电子设备，包括处理器和存储器，其中，所述存储器存储有程序代码，当所述程序代码被所述处理器执行时，使得所述处理器执行上述任意一种全景图像的曝光调整方法的步骤。
本发明实施例提供一种计算机可读存储介质，其包括程序代码，当所述程序产品在电子设备上运行时，所述程序代码用于使所述电子设备执行上述任意一种全景图像的曝光调整方法的步骤。
本发明有益效果如下：
本发明实施例提供的一种全景图像的曝光调整方法及装置，获取不同拍摄角度的摄像头拍摄的待拼接图像，按照预设的初始参考亮度，对各个待拼接图像进行曝光调整；基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，并按照当前参考亮度，对部分或全部待拼接图像进行二次曝光；最后，将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像。分别对各个待拼接图像进行曝光调整，使得各个待拼接图像的亮度被调整到可接受范围内，再拼接各个曝光好的待拼接图像得到全景图像，避免全景图像中出现画面亮度不均匀的情况，提高全景图像的曝光动态范围和图像清晰度。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
此处所说明的附图用来提供对本发明的进一步理解，构成本发明的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：
图1为本发明实施例中的一种全景图像的曝光调整的流程示意图；
图2为本发明实施例中的灰度统计直方图的示意图；
图3为本发明实施例中的一种全景图像的曝光调整装置的组成结构示意图；
图4为本发明实施例中的一种电子设备的组成结构示意图；
图5为应用本发明实施例的一种计算装置的一个硬件组成结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明技术方案的一部分实施例，而不是全部的实施例。基于本发明文件中记载的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明技术方案保护的范围。
为了解决曝光调整后的全景图像的画面亮度不均匀，全景图像的曝光动态范围低和图像清晰度低的问题，本发明实施例提出了一种全景图像的曝光调整方法。该方法具体包括：获取不同拍摄角度的摄像头拍摄的待拼接图像，按照预设的初始参考亮度，对各个待拼接图像进行曝光调整；基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，并按照当前参考亮度，对部分或全部待拼接图像进行二次曝光；最后，将各个待拼接图像进行拼接，得到全景图像。
参阅图1所示，本发明实施例中全景图像的曝光调整的过程如下：
S101：获取不同拍摄角度的摄像头拍摄的待拼接图像。
在车载全景摄像机上安装有多个摄像头，每个摄像头的拍摄角度均不同，例如，在车载全景摄像机上装有4个摄像头，分别拍摄车辆左边、右边、前方和后方的周边环境。
S102：按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整。
可选的，对各个待拼接图像进行第一次曝光调整的过程如下：
先按照初始参考亮度，确定亮度范围；然后，将各个待拼接图像的亮度调整到亮度范围内。
由于曝光控制的特性，导致曝光调整后的各个待拼接图像的亮度不一定可以达到初始参考亮度，因此，按照初始参考亮度确定亮度范围，让各个待拼接图像的亮度调整到亮度范围内即可。
具体地，让快门参数和增益参数沿着设定曝光线段调整，使得各个待拼接图像的亮度调整到亮度范围内。其中，快门参数表征曝光时长，增益参数表征曝光的亮度放大器的倍数，当摄像头拍摄环境的环境亮度越高，生成的待拼接图像的亮度与初始参考亮度之间的差值越小，这样，在对待拼接图像进行曝光调整时，使用的快门参数和增益参数越小；反之，快门参数和增益参数越大。
S103：基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度。
可选的，可采用以下四种方式，确定当前参考亮度：
方式一：将曝光调整参数最小的待拼接图像的亮度，作为当前参考亮度，其中，曝光调整参数包括快门参数和增益参数。
通过上述描述可知，当摄像头拍摄环境的环境亮度越高，生成的待拼接图像的亮度越高，在对待拼接图像进行曝光调整时，使用的曝光调整参数越小；反之，曝光调整参数越大。而车载全景摄像机通常被应用在道路交通场景下，在该场景中道路中央的环境亮度是最亮的，而道路两侧绿化带区域的环境亮度是比较暗的，而且道路中央是车载全景摄像机拍摄的感兴趣区域，也就是说，对包含道路中央画面的待拼接图像进行曝光调整时，其使用的快门参数和增益参数最小。选取曝光调整参数最小的待拼接图像的亮度作为当前参考亮度，对部分或全部的待拼接图像进行二次曝光时，不仅可以提高包含道路两侧绿化带画面的待拼接图像的亮度，还可以防止包含道路中央画面的待拼接图像过曝，因此，方式一是本发明实施例的最优实现方式。
例如，初始参考亮度为50，对应的亮度范围是45-55，而待拼接图像1的原始亮度是40，待拼接图像2的原始亮度是31，待拼接图像的原始亮度是20，经过曝光调整后使得三个待拼接图像的亮度处于亮度范围内，其中，待拼接图像1对应的快门参数是5、增益参数是3，待拼接图像2对应的快门参数是13、增益参数是9，待拼接图像3对应的快门参数是17、增益参数是12，因此，曝光调整参数最小的是待拼接图像1，应当将曝光调整后的待拼接图像1的亮度作为当前参考亮度，对部分或全部待拼接图像进行二次曝光调整。
方式二：将亮度调整最小的待拼接图像的亮度，作为当前参考亮度。
亮度调整指的是曝光调整后的待拼接图像的亮度。通过上述描述可知，在执行曝光调整操作之前，当待拼接图像本身的亮度与基于初始参考亮度确定的亮度范围越接近时，其对应的曝光调整参数越小，但曝光调整后的待拼接图像的亮度只要处于亮度范围内，即可判定该待拼接图像的亮度已处于可接受范围内，也就是说，曝光调整参数最小的待拼接图像，不一定是亮度调整最小的待拼接图像。因此，还可以选取亮度调整最小的待拼接图像的亮度作为当前参考亮度，对部分或全部的待拼接图像进行二次曝光，提高包含道路两侧绿化带画面的待拼接图像的亮度，防止包含道路中央画面的待拼接图像过曝。例如，初始参考亮度为50，对应的亮度范围是45-55，而待拼接图像1的原始亮度是40，待拼接图像2的原始亮度是31，待拼接图像的原始亮度是20，经过曝光调整后使得三个待拼接图像的亮度处于亮度范围内，其中，待拼接图像1的亮度是47，待拼接图像2的亮度是45，待拼接图像3的亮度是48，因此，亮度调整最小的是待拼接图像2，应当将曝光调整后的待拼接图像2的亮度作为当前参考亮度，对部分或全部待拼接图像进行二次曝光调整。
方式三：从多个亮度调整符合预设曝光调整要求的待拼接图像中，选取一个待拼接图像，并将该待拼接图像的亮度，作为当前参考亮度。
本发明实施例中的曝光调整要求是待拼接图像的亮度调整在设定的亮度调整阈值内，当亮度调整阈值设定较小时，可以筛选出多个亮度调整较小的待拼接图像，从这些拼接图像中选取一个待拼接图像，按照该待拼接图像的亮度作为当前参考亮度，对部分或全部的待拼接图像进行二次曝光时，提高包含道路两侧绿化带画面的待拼接图像的亮度，降低包含道路中央画面的待拼接图像的亮度，使得各个待拼接图像的亮度均被调整到可接受范围内。
方式四：基于曝光调整后的各个待拼接图像的亮度，确定对应的平均亮度，并将平均亮度作为当前参考亮度。
平均亮度反应了各个待拼接图像的亮度平均水平，按照平均亮度作为当前参考亮度，对部分或全部的待拼接图像进行二次曝光时，可以更好地平衡过暗的待拼接图像与较亮的待拼接图像之间的关系，使得拼接后的全景图像的亮度一致，提高图像清晰度和曝光动态范围。
S104：按照当前参考亮度，对部分或全部待拼接图像进行二次曝光调整。
可选的，按照当前参考亮度，对待拼接图像中的目标图像进行二次曝光调整；其中，目标图像为亮度与当前参考亮度的差值大于预设的亮度差值阈值的待拼接图像。
待拼接图像的亮度与当前参考亮度的差值在亮度差值阈值内时，表征第一次曝光调整后的待拼接图像的亮度在可接受范围内，无需二次曝光调整；若待拼接图像的亮度与当前参考亮度的差值大于亮度差值阈值时，表征第一次曝光调整后的待拼接图像的亮度未调整到可接受范围内，需要二次曝光调整，进一步提高待拼接图像的亮度。
在对目标图像进行二次曝光调整的过程中，先获取待拼接图像中的目标图像的亮度与当前参考亮度之间的差值，再根据与差值对应的曝光调整步长，对目标图像进行二次曝光调整。具体地，在根据差值确定对应的曝光调整步长时，若差值较大，可适当增大曝光调整步长，以便快速将目标图像的亮度调整到亮度范围内，但第二次的曝光调整步长不大于第一次的曝光调整步长；若差值较小，则曝光调整步长也比较小，以免二次曝光调整后的目标图像的亮度超过当前参考亮度的亮度范围。
可以采用下述两种方式，对部分或全部待拼接图像进行二次曝光：
方式一：先按照当前参考亮度，确定出亮度范围；每确定出一个目标图像，便通过调整快门参数和增益参数，使得该目标图像的亮度在当前亮度范围内，直至所有目标图像均处理完毕为止。
方式二：先按照当前参考亮度，确定出亮度范围；再确定出所有目标图像；最后，依次对各个目标图像进行二次曝光。
S105：将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像。
进一步地，为了使生成的全景图像的清晰度更高，还需对全景图像进行图像信号处理(Image Signal Processing，ISP)操作。具体过程如下：
首先，确定全景图像的参考增益参数。
可选的，先将除最大增益参数之外的其它增益参数，分别与最大增益参数进行比较，在确定各个比较结果均符合预设的增益参数差值阈值时，将最大增益参数作为全景图像的参考增益参数；
在确定至少一个比较结果不符合增益参数差值阈值时，根据各个待拼接图像的灰度纹理复杂度和对应的各个增益参数，确定全景图像的参考增益参数。
灰度纹理复杂度表征待拼接图像中画面的纹理细节的丰富程度，其纹理细节丰富程度越高，对应的灰度纹理复杂度越高，说明该待拼接图像中的画面越重要。可选的，确定各个待拼接图像的灰度纹理复杂度的过程如下：
先分别根据各个待拼接图像中各个像素点的灰度值，生成灰度统计直方图，其中，一个待拼接图像的灰度统计直方图如图2所示；再分别将各个灰度统计直方图的方差，确定为各个待拼接图像的灰度纹理复杂度。
采用公式(1)确定全景图像的参考增益参数，可以避免以其中一个待拼接图像的增益参数作为参考增益参数，确定全景图像的ISP参数，并基于该ISP参数对全景图像进行ISP操作后，导致全景图像出现噪点过大或者拖影过大的问题。其中，k1～kn分别表征第1～n个待拼接图像的灰度纹理复杂度，Gain1～Gainn分别表征第1～n个待拼接图像的增益参数。
k1Gain1+k2Gain2+k3Gain3+knGainn 公式(1)；
其次，基于全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定全景图像的ISP参数。
可选的，若全景图像的参考增益参数，与上一帧全景图像的参考增益参数之间的差值在预设范围内，则采用上一帧全景图像的ISP参数，作为全景图像的ISP参数；
否则，基于全景图像的参考增益参数，确定全景图像的ISP参数。
预先确定了参考增益参数对应的ISP参数，因此，可以基于全景图像的参考增益参数，直接调取对应的ISP参数作为全景图像的ISP参数。
最后，采用全景图像的ISP参数，对全景图像进行ISP操作。
如图3所示，其为全景图像的曝光调整装置的结构示意图，可以包括：
获取单元301，用于获取不同拍摄角度的摄像头拍摄的待拼接图像；
曝光单元302，用于按照预设的初始参考亮度，对各个待拼接图像进行曝光调整；
基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，并按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整；
拼接单元303，用于将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像。
可选的，所述按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整，所述曝光单元302用于：
按照所述初始参考亮度，确定亮度范围；
将所述各个待拼接图像的亮度调整到所述亮度范围内。
可选的，所述基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度，所述曝光单元302用于：
将曝光调整参数最小的待拼接图像的亮度，作为所述当前参考亮度，其中，所述曝光调整参数包括快门参数和增益参数；或者，
将亮度调整最小的待拼接图像的亮度，作为所述当前参考亮度；或者，
从多个亮度调整符合预设曝光调整要求的待拼接图像中，选取一个待拼接图像，并将所述一个待拼接图像的亮度，作为所述当前参考亮度；或者，
基于曝光调整后的各个待拼接图像的亮度，确定对应的平均亮度，并将所述平均亮度作为所述当前参考亮度。
可选的，所述按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整，所述曝光单元302用于：
按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整；
其中，所述目标图像为亮度与当前参考亮度的差值大于预设的亮度差值阈值的待拼接图像。
可选的，所述按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整，所述曝光单元302用于：
获取所述待拼接图像中的目标图像的亮度与所述当前参考亮度之间的差值；
根据与所述差值对应的曝光调整步长，对所述目标图像进行二次曝光调整。
可选的，在得到全景图像之后，所述拼接单元303进一步用于：
确定所述全景图像的参考增益参数；
基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理ISP参数；
采用所述全景图像的图像信号处理参数，对所述全景图像进行图像信号处理操作。
可选的，所述确定所述全景图像的参考增益参数，所述拼接单元303进一步用于：
确定所述全景图像中各个待拼接图像的曝光调整参数，其中，所述曝光调整参数包括快门参数和增益参数；
将除最大增益参数之外的其他增益参数分别与最大增益参数进行比较，在确定各个比较结果均符合预设的增益参数差值阈值时，将所述最大增益参数作为所述全景图像的参考增益参数；
在确定至少一个比较结果不符合所述增益参数差值阈值时，根据所述各个待拼接图像的灰度纹理复杂度和对应的各个增益参数，确定所述全景图像的参考增益参数。
可选的，确定所述各个待拼接图像的灰度纹理复杂度，所述拼接单元303进一步用于：
分别根据所述各个待拼接图像中各个像素点的灰度值，生成对应的灰度统计直方图；
将各个灰度统计直方图的方差，确定为所述各个待拼接图像的灰度纹理复杂度。
可选的，所述基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理ISP参数，所述拼接单元303进一步用于：
若所述全景图像的参考增益参数，与上一帧全景图像的参考增益参数之间的差值在预设范围内，则采用所述上一帧全景图像的ISP参数，作为所述全景图像的ISP参数；
否则，基于所述全景图像的参考增益参数，确定所述全景图像的ISP参数。
所属技术领域的技术人员能够理解，本发明的各个方面可以实现为***、方法或程序产品。因此，本发明的各个方面可以具体实现为以下形式，即：完全的硬件实施方式、完全的软件实施方式(包括固件、微代码等)，或硬件和软件方面结合的实施方式，这里可以统称为“电路”、“模块”或“***”。
在一些可能的实施方式中，本发明实施例还提供一种电子设备，参阅图4所示，电子设备可以至少包括至少一个处理器401、以及至少一个存储器402。其中，存储器402存储有程序代码，当程序代码被处理器401执行时，使得处理器401执行本说明书上述描述的根据本发明各种示例性实施方式的全景图像的曝光调整方法中的步骤。例如，处理器401可以执行如图1中所示的步骤。
在一些可能的实施方式中，根据本发明的计算装置可以至少包括至少一个处理单元、以及至少一个存储单元。其中，存储单元存储有程序代码，当程序代码被处理单元执行时，使得处理单元执行本说明书上述描述的根据本发明各种示例性实施方式的服务调用方法中的步骤。例如，处理单元可以执行如图1中所示的步骤。
下面参照图5来描述根据本发明的这种实施方式的计算装置。图5的计算装置仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图5，计算装置以通用计算装置的形式表现。计算装置的组件可以包括但不限于：上述至少一个处理单元501、上述至少一个存储单元502、连接不同***组件(包括存储单元502和处理单元501)的总线503。
总线503表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器、***总线、处理器或者使用多种总线结构中的任意总线结构的局域总线。
存储单元502可以包括易失性存储器形式的可读介质，例如随机存取存储器(RAM)5021和/或高速缓存存储单元5022，还可以进一步包括只读存储器(ROM)5023。
存储单元502还可以包括具有一组(至少一个)程序模块5024的程序/实用工具5025，这样的程序模块5024包括但不限于：操作***、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。
计算装置也可以与一个或多个外部设备504(例如键盘、指向设备等)通信，还可与一个或者多个使得用户能与计算装置交互的设备通信，和/或与使得该计算装置能与一个或多个其它计算装置进行通信的任何设备(例如路由器、调制解调器等)通信。这种通信可以通过输入/输出(I/O)接口505进行。并且，计算装置还可以通过网络适配器506与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器506通过总线503与用于计算装置500的其它模块通信。应当理解，尽管图中未示出，可以结合计算装置500使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理器、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。
在一些可能的实施方式中，本发明提供的业务控制方法的各个方面还可以实现为一种程序产品的形式，其包括程序代码，当程序产品在计算机设备上运行时，程序代码用于使计算机设备执行本说明书上述描述的根据本发明各种示例性实施方式的业务控制方法中的步骤，例如，计算机设备可以执行如图3中所示的步骤。
程序产品可以采用一个或多个可读介质的任意组合。可读介质可以是可读信号介质或者可读存储介质。可读存储介质例如可以是但不限于电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。
本发明的实施方式的用于业务控制的程序产品可以采用便携式紧凑盘只读存储器(CD-ROM)并包括程序代码，并可以在计算装置上运行。然而，本发明的程序产品不限于此，在本文件中，可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被命令执行***、装置或者器件使用或者与其结合使用。
可读信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了可读程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。可读信号介质还可以是可读存储介质以外的任何可读介质，该可读介质可以发送、传播或者传输用于由命令执行***、装置或者器件使用或者与其结合使用的程序。
可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于无线、有线、光缆、RF等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言的任意组合来编写用于执行本发明操作的程序代码，程序设计语言包括面向对象的程序设计语言—诸如Java、C++等，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算装置上执行、部分地在用户设备上执行、作为一个独立的软件包执行、部分在用户计算装置上部分在远程计算装置上执行、或者完全在远程计算装置或服务器上执行。在涉及远程计算装置的情形中，远程计算装置可以通过任意种类的网络包括局域网(LAN)或广域网(WAN)连接到用户计算装置，或者，可以连接到外部计算装置(例如利用因特网服务提供商来通过因特网连接)。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例做出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (10)

1.一种全景图像的曝光调整方法，其特征在于，包括：
获取不同拍摄角度的摄像头拍摄的待拼接图像；
按照预设的初始参考亮度，对各个待拼接图像进行曝光调整；
基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度；
按照所述当前参考亮度，对部分或全部待拼接图像分别进行二次曝光调整；
将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像；
将除最大增益参数之外的其他增益参数，分别与最大增益参数进行比较，在确定各个比较结果均符合预设的增益参数差值阈值时，将所述最大增益参数作为所述全景图像的参考增益参数；
在确定至少一个比较结果不符合所述增益参数差值阈值时，根据所述各个待拼接图像的灰度纹理复杂度和对应的各个增益参数，确定所述全景图像的参考增益参数；
基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理参数；
采用所述全景图像的图像信号处理参数，对所述全景图像进行图像信号处理操作。
2.如权利要求1所述的方法，其特征在于，所述按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整，包括：
按照所述初始参考亮度，确定亮度范围；
将所述各个待拼接图像的亮度调整到所述亮度范围内。
3.如权利要求1所述的方法，其特征在于，还通过以下方式确定所述当前参考亮度：从多个亮度调整符合预设曝光调整要求的待拼接图像中，选取一个待拼接图像，并将所述一个待拼接图像的亮度，作为所述当前参考亮度；或者，
基于曝光调整后的各个待拼接图像的亮度，确定对应的平均亮度，并将所述平均亮度作为所述当前参考亮度。
4.如权利要求1所述的方法，其特征在于，所述按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整，包括：
按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整；
其中，所述目标图像为亮度与当前参考亮度的差值大于预设的亮度差值阈值的待拼接图像。
5.如权利要求4所述的方法，其特征在于，所述按照所述当前参考亮度，对所述待拼接图像中的目标图像进行二次曝光调整，包括：
获取所述待拼接图像中的目标图像的亮度与所述当前参考亮度之间的差值；
根据与所述差值对应的曝光调整步长，对所述目标图像进行二次曝光调整。
6.如权利要求1所述的方法，其特征在于，确定所述各个待拼接图像的灰度纹理复杂度，进一步包括：
分别根据所述各个待拼接图像中各个像素点的灰度值，生成对应的灰度统计直方图；
分别将各个灰度统计直方图的方差，确定为所述各个待拼接图像的灰度纹理复杂度。
7.如权利要求1所述的方法，其特征在于，所述基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理ISP参数，包括：
若所述全景图像的参考增益参数，与上一帧全景图像的参考增益参数之间的差值在预设范围内，则采用所述上一帧全景图像的ISP参数，作为所述全景图像的ISP参数；
否则，基于所述全景图像的参考增益参数，确定所述全景图像的ISP参数。
8.一种全景图像的曝光调整装置，其特征在于，包括：
获取单元，用于获取不同拍摄角度的摄像头拍摄的待拼接图像；
曝光单元，用于按照预设的初始参考亮度，对各个待拼接图像分别进行曝光调整；
基于曝光调整后的各个待拼接图像的亮度，确定当前参考亮度；
按照所述当前参考亮度，对部分或全部待拼接图像进行二次曝光调整；
拼接单元，用于将二次曝光调整后的各个待拼接图像进行拼接，得到全景图像；
将除最大增益参数之外的其他增益参数，分别与最大增益参数进行比较，在确定各个比较结果均符合预设的增益参数差值阈值时，将所述最大增益参数作为所述全景图像的参考增益参数；
在确定至少一个比较结果不符合所述增益参数差值阈值时，根据所述各个待拼接图像的灰度纹理复杂度和对应的各个增益参数，确定所述全景图像的参考增益参数；
基于所述全景图像的参考增益参数与上一帧全景图像的参考增益参数，确定所述全景图像的图像信号处理参数；
采用所述全景图像的图像信号处理参数，对所述全景图像进行图像信号处理操作。
9.一种电子设备，其特征在于，其包括处理器和存储器，其中，所述存储器存储有程序代码，当所述程序代码被所述处理器执行时，使得所述处理器执行权利要求1～7中任一项所述方法的步骤。
10.一种计算机可读存储介质，其特征在于，其包括程序代码，当所述程序产品在电子设备上运行时，所述程序代码用于使所述电子设备执行权利要求1～7中任一项所述方法的步骤。
CN202010622197.8A 2020-06-30 2020-06-30 一种全景图像的曝光调整方法及装置 Active CN111741228B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010622197.8A CN111741228B (zh) 2020-06-30 2020-06-30 一种全景图像的曝光调整方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010622197.8A CN111741228B (zh) 2020-06-30 2020-06-30 一种全景图像的曝光调整方法及装置

Publications (2)

Publication Number Publication Date
CN111741228A CN111741228A (zh) 2020-10-02
CN111741228B true CN111741228B (zh) 2022-07-08

Family

ID=72652269

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010622197.8A Active CN111741228B (zh) 2020-06-30 2020-06-30 一种全景图像的曝光调整方法及装置

Country Status (1)

Country Link
CN (1) CN111741228B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112073608B (zh) * 2020-08-28 2021-08-27 中航测控(深圳)有限公司 一种基于机器视觉技术的智能相机
CN114785960B (zh) * 2022-06-16 2022-09-02 鹰驾科技（深圳）有限公司 一种基于无线传输技术的360度全景行车记录仪***
CN115861079B (zh) * 2023-02-24 2023-05-12 和普威视光电股份有限公司 一种无重叠区域的全景图像拼接方法、***及拼接终端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011191996A (ja) * 2010-03-15 2011-09-29 Nikon Corp 画像処理装置、および画像処理プログラム
CN102480629A (zh) * 2010-11-29 2012-05-30 索尼公司 图像处理装置、显示装置、图像处理方法和图像处理程序
CN104346788A (zh) * 2013-07-29 2015-02-11 展讯通信（上海）有限公司 一种拼接图像的方法和装置
CN107592516A (zh) * 2017-09-14 2018-01-16 长沙全度影像科技有限公司 一种用于全景相机的颜色阴影校正方法及***

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104125410B (zh) * 2014-07-02 2017-04-12 深圳英飞拓科技股份有限公司 一种全景视频多镜头曝光补偿方法及其装置
CN105516614B (zh) * 2015-11-27 2019-02-05 联想(北京)有限公司 信息处理方法及电子设备
CN106454096A (zh) * 2016-10-29 2017-02-22 深圳市金立通信设备有限公司 一种图像处理方法及终端
CN107071296B (zh) * 2017-05-15 2020-09-04 信利光电股份有限公司 一种全景双摄像头的亮度调试方法
CN107257443A (zh) * 2017-07-24 2017-10-17 中科创达软件科技（深圳）有限公司 一种拼接图像抗渐晕的方法及其装置、终端设备
CN108377345B (zh) * 2018-04-11 2020-04-03 浙江大华技术股份有限公司 一种曝光参数值确定方法、装置、多目摄像机及存储介质
CN108737738B (zh) * 2018-04-20 2021-03-12 影石创新科技股份有限公司 一种全景相机及其曝光方法和装置
JP7051586B2 (ja) * 2018-05-24 2022-04-11 キヤノン株式会社 撮像装置、撮像方法およびプログラム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011191996A (ja) * 2010-03-15 2011-09-29 Nikon Corp 画像処理装置、および画像処理プログラム
CN102480629A (zh) * 2010-11-29 2012-05-30 索尼公司 图像处理装置、显示装置、图像处理方法和图像处理程序
CN104346788A (zh) * 2013-07-29 2015-02-11 展讯通信（上海）有限公司 一种拼接图像的方法和装置
CN107592516A (zh) * 2017-09-14 2018-01-16 长沙全度影像科技有限公司 一种用于全景相机的颜色阴影校正方法及***

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
全景视频图像融合与拼接算法研究;彭凤嬅;《中国优秀硕士学位论文全文数据库 (信息科技辑)》;20180215;全文 *

Also Published As

Publication number Publication date
CN111741228A (zh) 2020-10-02

Similar Documents

Publication Publication Date Title
CN111741228B (zh) 一种全景图像的曝光调整方法及装置
EP3624439B1 (en) Imaging processing method for camera module in night scene, electronic device and storage medium
CN108174118B (zh) 图像处理方法、装置和电子设备
CN108322646B (zh) 图像处理方法、装置、存储介质及电子设备
US9275445B2 (en) High dynamic range and tone mapping imaging techniques
CN108737738B (zh) 一种全景相机及其曝光方法和装置
WO2018228310A1 (zh) 图像处理方法、装置及终端
CN108289173B (zh) 一种摄像控制方法、装置、终端设备及存储介质
CN109618102B (zh) 对焦处理方法、装置、电子设备及存储介质
CN112217999B (zh) 一种宽动态模式的调整方法、装置、电子设备和存储介质
CN109981991A (zh) 模型训练方法、图像处理方法、装置、介质和电子设备
CN110855957A (zh) 图像处理方法及装置、存储介质和电子设备
CN113379615A (zh) 图像处理方法及装置、存储介质和电子设备
CN110933304A (zh) 待虚化区域的确定方法、装置、存储介质与终端设备
CN115334250B (zh) 一种图像处理方法、装置及电子设备
CN116320741A (zh) 一种全局卷帘快门曝光控制方法、装置及电子设备
CN113422893B (zh) 图像采集方法、装置、存储介质及移动终端
CN114255177A (zh) 成像中的曝光控制方法、装置、设备及存储介质
CN115379128A (zh) 曝光控制方法及装置、计算机可读介质和电子设备
CN113099101B (zh) 摄像参数调节方法、装置及电子设备
CN113489911A (zh) 电子式调光减光镜的虹膜摄像头和虹膜摄像头控制方法
CN112243118A (zh) 白平衡校正方法、装置、设备及存储介质
CN113822940B (zh) 平场矫正标定方法、装置及***、计算机设备及介质
CN117319816A (zh) 图像处理方法、***、设备及存储介质
CN116456184B (zh) 一种调整摄像头安装点位的方法、装置、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant