CN109685853B - 图像处理方法、装置、电子设备和计算机可读存储介质 - Google Patents

Abstract

本申请涉及一种图像处理方法、装置、电子设备和计算机可读存储介质。所述方法包括：在通过摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值，从标定信息中获取与采集光圈值对应的第一目标标定信息，其中，标定信息是在不同的光圈值下对摄像头模组进行标定处理得到的，根据第一目标标定信息对初始图像进行校正处理，得到目标图像。由于可以根据采集光圈值获取对应的标定信息对初始图像进行处理，可以提高图像处理的准确性。

Description

图像处理方法、装置、电子设备和计算机可读存储介质

技术领域

本申请涉及影像技术领域，特别是涉及一种图像处理方法、装置、电子设备和计算机可读存储介质。

背景技术

随着影像技术的发展，使用电子设备拍摄图像的现象越来越普遍。电子设备通过摄像头模组采集图像，可以使三维空间中的物体在图像中成像。在图像的拍摄过程中，可以采用不同光圈、快门速度、感光度等来拍摄图像，然而，不同的拍摄条件会对拍摄的图像效果造成影响，存在图像处理准确性低的问题。

发明内容

本申请实施例提供一种图像处理方法、装置、电子设备、计算机可读存储介质，可以提高图像处理的准确性。

一种图像处理方法，包括：

在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值；

从标定信息中获取与所述采集光圈值对应的第一目标标定信息，其中，所述标定信息是在不同的光圈值下对所述摄像头模组进行标定处理得到的；

根据所述第一目标标定信息对所述初始图像进行校正处理，得到目标图像。

一种图像处理装置，包括：

光圈值获取模块，用于在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值；

标定信息获取模块，用于从标定信息中获取与所述采集光圈值对应的第一目标标定信息，其中，所述标定信息是在不同的光圈值下对所述摄像头模组进行标定处理得到的；

处理模块，用于根据所述第一目标标定信息对所述初始图像进行校正处理，得到目标图像。

一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如下步骤：

在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值；

从标定信息中获取与所述采集光圈值对应的第一目标标定信息，其中，所述标定信息是在不同的光圈值下对所述摄像头模组进行标定处理得到的；

根据所述第一目标标定信息对所述初始图像进行校正处理，得到目标图像。

一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现如下步骤：

在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值；

从标定信息中获取与所述采集光圈值对应的第一目标标定信息，其中，所述标定信息是在不同的光圈值下对所述摄像头模组进行标定处理得到的；

根据所述第一目标标定信息对所述初始图像进行校正处理，得到目标图像。

上述图像处理方法、装置、电子设备和计算机可读存储介质，通过在摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值，从标定信息中获取与采集光圈值对应的第一目标标定信息，根据第一目标标定信息对初始图像进行校正处理，得到目标图像。由于可以根据采集光圈值获取对应的标定信息对初始图像进行处理，可以提高图像处理的准确性。

附图说明

为了更清楚地说明本申请实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本申请的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1为一个实施例中图像处理方法的应用环境图；

图2为一个实施例中图像处理方法的流程图；

图3为一个实施例中对摄像头模组进行标定的流程图；

图4为一个实施例中对摄像头模组进行标定的示意图；

图5为一个实施例中初始图像进行校正处理的流程图

图6为一个实施例中图像处理方法的流程图；

图7为另一个实施例中图像处理方法的流程图；

图8为一个实施例中图像处理装置的结构框图；

图9为一个实施例中电子设备的内部结构框图；

图10为一个实施例中图像处理电路的示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。

可以理解，本申请所使用的术语“第一”、“第二”等可在本文中用于描述各种元件，但这些元件不受这些术语限制。这些术语仅用于将第一个元件与另一个元件区分。举例来说，在不脱离本申请的范围的情况下，可以将第一摄像头称为第二摄像头，且类似地，可将第二摄像头称为第一摄像头。第一摄像头和第二摄像头两者都是摄像头，但其不是同一摄像头。

图1为一个实施例中图像处理方法的应用环境示意图。如图1所示，该应用环境包括电子设备110。电子设备110上安装有摄像头模组。具体地，电子设备110在通过摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值，从标定信息中获取与采集光圈值对应的第一目标标定信息，根据第一目标标定信息对初始图像进行校正处理，得到目标图像，其中，标定信息是在不同的光圈值下对摄像头模组进行标定处理得到的。可以理解的是，上述电子设备110可以是手机、电脑、可穿戴设备等，在此不做限定。

图2为一个实施例中图像处理方法的流程图。本实施例中的图像处理方法，以运行于图1中的电子设备110上为例进行描述。如图2所示，图像处理方法包括步骤202至步骤206。其中：

步骤202，在通过摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值。

摄像头模组是指包含至少一个摄像头的组件。摄像头模组可内置或外置于电子设备，从而电子设备可以通过摄像头模组来采集图像。具体地，摄像头模组包含至少一个可调节不同的光圈值进行拍摄的多光圈摄像头，其中，该多光圈摄像头可以是彩色摄像头；摄像头模组还可以包含该多光圈摄像头与其他彩色摄像头、黑白摄像头、长焦摄像头、广角摄像头或深度摄像头中一个或多个。例如，摄像头模组可以只包含多光圈摄像头，也可以包含一个彩色摄像头和一个深度摄像头、还可以包含彩色摄像头、黑白摄像头、深度摄像头等不限于此。光圈值是摄像头的焦距与通光直径的相对值。摄像头的光圈是用于控制光线进入摄像头内感光面的光量的装置，可以通过光圈值来表达光圈的大小。光圈值越大，则通光直径即光圈越小、单位时间的进光量越小；相反的，光圈值越小，则通光直径即光圈越大、单位时间的进光量越大。

初始图像是指摄像头模组采集的，未进行校正处理的图像。具体地，初始图像可以是摄像头模组中的一个或多个摄像头采集的图像。采集光圈值为采集初始图像时多光圈摄像头对应的光圈值。电子设备在通过摄像头模组采集初始图像时，获取多光圈摄像头的采集光圈值；当初始图像为多光圈摄像头采集的图像时，电子设备也可以直接获取初始图像对应的采集光圈值。

步骤204，从标定信息中获取与采集光圈值对应的第一目标标定信息，其中，标定信息是在不同的光圈值下对摄像头模组进行标定处理得到的。

标定信息是指对摄像头模组进行标定处理后得到的摄像头参数。标定信息可以用于对摄像头模组采集的图像进行校正，从而使校正后的图像可以还原三维空间中的物体。具体地，当摄像头模组只包含一个摄像头时，则标定信息中包含了该摄像头对应的单目标定信息；当摄像头模组中包含两个或两个以上设摄像头时，则标定信息中包含了各个摄像头的单目标定信息及多光圈摄像头与其他摄像头之间的双目标定信息。标定处理是指对摄像头成像的几何模型中的参数进行求解的操作，通过摄像头成像的几何模型可以使拍摄的图像还原三维空间中的物体。电子设备可以在不同的光圈值下对摄像头模组进行标定处理，得到不同的光圈值分别对应的标定信息，则电子设备可以从每一个光圈值对应的标定信息获取与采集光圈值对应的第一目标标定信息。在一个实施例中，当没有与采集光圈值对应的标定信息时，电子设备可以获取与采集光圈值最接近的光圈值对应的标定信息作为第一目标标定信息。

步骤206，根据第一目标标定信息对初始图像进行校正处理，得到目标图像。

电子设备根据第一目标标定信息对初始图像进行校正处理，具体地，当摄像头模组中只包含一个摄像头时，电子设备可以直接根据第一目标标定信息中包含的单目标定信息对该摄像头采集的初始图像进行单目校正处理，得到目标图像；当摄像头模组中包含两个或两个以上摄像头时，电子设备可以目标标定信息中包含的单目标定信息及多光圈摄像头与其他摄像头之间的双目标定信息对各个摄像头采集的初始图像进行校正处理，得到各个初始图像对应的目标图像。例如，当电子设备通过摄像头模组中的多光圈摄像头采集到初始图像A1时，电子设备可以根据第一目标标定信息中多光圈摄像头的单目标定信息对初始图像A1进行校正处理，得到处理后的目标图像A2；当电子设备通过摄像头模组中的多光圈摄像头和深度摄像头分别采集到初始图像B1和C1时，电子设备可以根据第一目标标定信息中多光圈摄像头和深度摄像头分别对应的单目标定信息及多光圈摄像头与深度摄像头之间的双目标定信息对初始图像B1和C1进行校正处理，得到处理后的目标图像B2和目标图像C2。

本申请实施例提供的图像处理方法，通过在摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值，从标定信息中获取与采集光圈值对应的第一目标标定信息，根据第一标定信息对初始图像进行校正处理，得到目标图像。由于可以根据采集光圈值获取对应的标定信息对初始图像进行处理，避免因采用相同的标定信息对图像进行处理而引起图像中心不准确、图像不清晰等问题，可以提高图像处理的准确性。

如图3所示，在一个实施例中，提供的图像处理方法还包括对摄像头模组进行标定处理的过程，具体包括：

步骤302，依次获取摄像头模组的不同的光圈值，通过所述摄像头模组以不同的光圈值对标定板进行拍摄，得到与每一个光圈值对应的一组标定图像，其中，所述一组标定图像包含了所述摄像头模组中各个摄像头拍摄的标定图像。

电子设备依次获取摄像头模组的不同的光圈值，具体地，电子设备可以获取摄像头模组中具有不同的光圈值的摄像头的光圈值，通过摄像头模组以不同的光圈值对标定板进行拍摄，得到与每一个光圈值对应的一组标定图像，一组标定图像中包含了摄像头模组中各个摄像头拍摄的标定图像。标定板是指带有固定间距图像阵列的图形。具体地，标定板可以是带有至少三个标定面的三维标定板，也可以是只具有一个标定面的平板。电子设备对摄像头进行标定处理时，需要用至少三张以上的标定图片，因此，当标定板为三维标定板时，电子设备通过摄像头模组以不同的光圈值下对标定板进行拍摄，得到的每一组标定图像中可以包含摄像头模组中各个摄像头分别采集的一张图像，该标定图像中包含了三个不同标定图形；当标定板为只具有一个标定面的平板时，电子设备通过摄像头模组以不同的光圈值对至少三个角度的标定板进行拍摄，从而得到的每一组标定图像中可以包含摄像头模组中各个摄像头分别采集的至少三张图像。

步骤304，根据每一个光圈值对应的一组标定图像对摄像头模组进行标定处理，得到摄像头模组在每一个光圈值下对应的标定信息。

标定信息是指对摄像头进行标定处理后得到的摄像头参数。标定信息可以用于对摄像头采集的图像进行校正，从而使校正后的图像可以还原三维空间中的物体。具体地，标定信息中可以包括单个摄像头的单目标定信息或两个摄像头之间的双目标定信息，其中，单目标定信息包含摄像头的内参、外参、畸变系数等、双目标定信息包含两个摄像头之间的外参。标定处理是指对摄像头成像的几何模型中的参数进行求解的操作，通过摄像头成像的几何模型可以使拍摄的图像还原三维空间中的物体。具体地，标定处理可以包括单目标定处理和双目标定处理，单目标定处理用于求取单个摄像头的内参、外参和畸变系数等，双目标定处理用于求取两个摄像头之间的外参。

电子设备根据每一个光圈值对应的一组标定图像对摄像头模组进行标定处理，具体地，电子设备可以采用传统摄像头标定法、摄像头自标定方法、介于传统标定方法和自标定方法之间的张正友标定方法等对摄像头模组进行标定处理，得到摄像头模组对应的标定信息。例如，当第一光圈值对应的一组标定图像中包含多光圈摄像头采集的标定图像E、黑白摄像头采集的标定图像F和深度摄像头采集的标定图像G时，电子设备根据标定图像E、标定图像F、标定图像G进行标定处理，则得到的摄像头模组对应的标定信息中包含了彩色摄像头、黑白摄像头、深度摄像头分别对应的内参、外参和畸变系数等，及彩色摄像头和黑白摄像头之间的外参、彩色摄像头和深度摄像头之间的外参。

通过依次获取摄像头模组的不同的光圈值，通过摄像头模组以不同的光圈值对标定板进行拍摄，得到与每一个光圈值对应的一组标定图像，根据每一个光圈值对应的一组标定图像对摄像头模组进行标定处理，得到摄像头模组在每一个光圈值下对应的标定信息，避免具有多个光圈值的摄像头只做一次标定处理，提高了摄像头标定的准确性。进而，在摄像头模组的使用过程中，可以根据所采用的光圈值获取对应的标定信息对图像进行处理，可以提高图像处理的准确性。

如图4所示为一个实施例中，电子设备对摄像头模组进行标定处理的示意图。如图4包含了电子设备110和标定板120。标定板(chart板)120可以是带有至少三个标定面的三维标定板，每一个标定面上都带有chart图案。电子设备110可以获取摄像头模组的不同的光圈值，通过摄像头模组以不同的光圈值对标定板120进行拍摄，得到摄像头模组在每一个光圈值下采集的一组标定图像，根据每一个光圈值对应的一组标定图像对摄像头模组进行标定处理，得到摄像头模组的标定信息。

如图5所示，在一个实施例中，提供的图像处理方法中根据第一目标标定信息对初始图像进行校正处理的过程包括步骤502至步骤504。其中：

步骤502，根据第一目标标定信息中包含的单目标定信息对摄像头模组中各个摄像头采集的初始图像进行单目校正处理，得到中间图像。

单目标定信息为单个摄像头对应的标定信息，具体地，单目标定信息包含了摄像头对应的内参、外参、畸变系数等。单目校正处理即为根据单目标息对图像进行处理，使得处理后的图像可以准确还原三维空间中的物体的操作。摄像头模组可以是包含了多个摄像头的模组。当摄像头模组中只包含一个摄像头时，电子设备可以直接根据目标标定信息中包含的单目标定信息对该摄像头采集的初始图像进行单目校正处理，得到目标图像。当摄像头模组中包含两个或两个以上摄像头时，电子设备可以目标标定信息中包含的单目标定信息对摄像头模组中各个摄像头采集的初始图像进行单目校正处理，得到中间图像。例如，在前述例子中，当电子设备通过摄像头模组中的多光圈摄像头和深度摄像头分别采集到初始图像B1和C1时，电子设备可以分别根据多光圈摄像头和深度摄像头对应的单目标定信息对初始图像B1和C1进行单目校正处理，得到中间图像B11和C21。

步骤504，根据第一目标标定信息包含的双目标定信息对中间图像进行双目校正处理，得到各个摄像头分别对应的目标图像。

双目标定信息即为任意两个摄像头之间的外参，用于表示两个摄像头之间相对距离。具体地，双目标定信息可以包括两个摄像头之间的旋转矩阵和平移矩阵。在一个实施例中，摄像头模组对应的双目标定信息包含了各个摄像头与多光圈摄像头之间的外参。双目校正处理为将单目校正处理后的两张图像进行对齐，使得两张图像的对极线在同一水平线上的操作。电子设备可以根据第一目标标定信息包含的双目标定信息对中间图像进行双目校正处理，得到各个摄像头采集的初始图像分别对应的目标图像。例如，在上述例子中，电子设备得到中间图像B11和C21后，根据多光圈摄像头与深度摄像头之间的双目标定信息对中间图像B11和C21进行双目校正处理，得到目标图像B2和目标图像C2。

通过根据第一目标标定信息中包含的单目标定信息对摄像头模组中各个摄像头采集的初始图像进行校正处理，得到中间图像，再根据第一目标标定信息包含的双目标定信息对中间图像进行双目校正处理，得到各个摄像头分别对应的目标图像，可以提高图像处理的准确性。

在一个实施例中，提供的图像处理方法中摄像头模组包含第一摄像头和第二摄像头，则校正处理后的目标图像中包含通过第一摄像头采集的第一目标图像和通过第二摄像头采集的第二目标图像，该图像处理方法还可以包括：根据第一目标图像和第二目标图像得到第一深度图像；根据第一深度图像对第一目标图像进行处理。

第一目标图像与第二目标图像具有相同的拍摄场景。第一深度图像包含了第一目标图像中被拍摄物体在拍摄场景中的分布情况即深度信息。深度信息是指摄像头与拍摄场景中被拍摄物体之间的距离信息。电子设备根据第一目标图像和第二目标图像得到第一深度图像，具体地，电子设备可以根据第一目标图像和第二目标图像计算第一摄像头和第二摄像头之间的视差，将第一摄像头和第二摄像头之间的视差转化为被拍摄物体的深度信息，得到由被拍摄物体的深度信息形成的第一深度图像。日常生活中，人们在进行图像拍摄时，会将摄像头靠近拍摄主体进行拍摄，则电子设备根据第一深度图像对第一目标图像进行处理，可以对第一目标图像中深度信息较小的区域进行色彩增强、AR(AugmentedReality，现实增强)处理等；电子设备可以将第一目标图像中深度信息较大的区域归为背景区域，对背景区域进行虚化、置换背景等处理，从而突出图像中的拍摄主体。

通过根据第一目标图像和第二目标图像得到第一深度图像，根据第一深度图像对第一目标图像进行处理，即根据第一深度图像包含的深度信息对第一目标图像进行处理，可以提高图像处理的准确性，优化图像处理效果。

如图6所示，在一个实施例中，摄像头模组还包括第三摄像头，目标图像包含通过第三摄像头采集第三目标图像，该图像处理方法还可以包括步骤602至步骤606，其中：

步骤602，根据第一目标图像建立对应的颜色直方图。

颜色直方图是指根据图像的颜色分布情况构建的图形。电子设备根据第一目标图像建立对应的颜色直方图，具体地，电子设备可以将根据预存不同颜色对应的色彩参数范围，进而提取第一目标图像中各个像素点的色彩参数，根据色彩参数确定像素点的颜色，统计目标图像中各种颜色的像素点个数，根据颜色及对应的像素点个数建立颜色直方图；也可以根据颜色对应的像素点个数与第一目标图像中所有像素点个数的比值得到该颜色的出现频率，根据第一目标图像中的颜色及对应的出现频率建立颜色直方图。色彩参数可以采用RGB(Red、Green、Blue，红、绿、蓝)色彩空间来确定，也可以采用HSB(hue、saturation、brightness，色相、饱和度、明度)色彩空间来等确定等，不限于此。

步骤604，检测颜色直方图的离散程度。

颜色直方图的离散程度是指颜色直方图中，颜色出现频率之间的差异程度。离散程度越小，则第一目标图像中各个颜色出现频率的差别越小，则第一目标图像中各个颜色分布面积越均匀；离散程度越大，则第一目标图像中各个颜色出现频率的差别越大，则第一目标图像中各个颜色分布面积差别较大，第一目标图像中出现大面积颜色相同的区域。电子设备可以通过计算极差、平均差、标准差或方差等多种方式对颜色直方图的离散程度进行检测。

步骤606，当颜色直方图的离散程度超过离散阈值时，根据第二深度图像对第一目标图像进行处理，其中，第二深度图像是根据第三目标图像得到的。

离散阈值可以根据实际应用需求进行设定。离散阈值即为需要根据第二深度图像对第一目标图像进行处理时，第一目标图像对应的颜色直方图的离散程度。第二深度图像为第三摄像头采集的初始图像标定处理后得到的第三目标图像，具体地，第三摄像头可以为深度摄像头，例如，第三摄像头可以是TOF(Time of flight，飞行时间)摄像头或结构光摄像头等不限于此。第三摄像头与第一摄像头、第二摄像头形成具有三个摄像头的摄像头模组。电子设备通过摄像头模组采集初始图像时，通过摄像头模组中的第三摄像头获得第三初始图像(深度图像)，对第三初始图像进行单目校正处理即得到第三中间图像，再根据第一摄像头与第三摄像头之间的双目标定信息对第三中间图像与第一中间图像进行双目校正处理，得到的第三目标图像包含了第一目标图像中各个像素点对应的深度信息。电子设备可以将第三目标图像作为第二深度图像，也可以对第三目标图像进行处理后得到第二深度图像，根据第二深度图像对第一目标图像进行处理，其中，对第三目标图像的处理可以包括对第三目标图像中包含的深度信息进行调整、或者将第三目标图像与其他图像进行对齐处理等不限于此。

通过根据第一目标图像建立对应的颜色直方图，检测颜色直方图的离散程度，当颜色直方图的离散程度超过离散阈值时，根据第三摄像头采集的初始图像标定处理后得到的第二深度图像对第一目标图像进行处理，可以避免在图像纹理不清晰，或存在大面积颜色相同的区域时，电子设备根据第一目标图像和第二目标图像进行双目测距时无法获得准确深度信息的情况，可以保证深度信息的准确性，提高图像处理的准确性。

如图7所示，在一个实施例中，提供的图像处理方法还包括步骤702至步骤706，其中：

步骤702，当第二深度图像中存在无效深度值时，获取无效深度值对应的像素点在第一深度图像中对应的第一深度值。

第二深度图像中存在无效深度值是指第二深度图像中深度信息不存在或者深度信息为0的像素点。当电子设备采集当前场景对应的图像时，会因为当前场景的色彩等对第三摄像头采集的深度图像造成影响，使得得到的第二深度图像中存在无效深度值。例如，若当前场景中存在与摄像头的距离超过第三摄像头的可测距离的区域，则根据第三摄像头得到第二深度图像中该区域的像素点即为无效深度值。电子设备可以在当第二深度图像中存在无效深度值时，获取无效深度值对应的像素点在第一深度图像中对应的第一深度值。

步骤704，将第二深度图像中无效深度值替换为第一深度值，得到目标深度图像。

目标深度图像为根据第二深度图像和第一深度图像的深度信息结合得到的图像。电子设备将第二深度图像中无效深度值替换为第一深度值，具体地，电子设备根据无效深度值对应的像素点在第一深度图像中对应的第一深度值，将第二深度图像中该像素点的深度值替换为第一深度值，得到目标深度图像。

步骤706，根据目标深度图像对第一目标图像进行处理。

电子设备根据目标深度图像对第一目标图像进行处理，具体地，电子设备根据目标深度图像中包含的深度信息对第一目标图像进行处理。目标深度图像中包含了第一深度图像和第二深度图像的深度信息，相比于第一深度图像和第二深度图像，目标深度图像中的深度信息更加准确，则电子设备根据目标深度图像对第一目标图像进行处理，可以提高图像处理的准确性。

在一个实施例中，电子设备还可以在通过摄像头模组采集初始图像时，获取发起采集初始图像的采集指令的目标应用程序，当判断目标应用程序属于第一类应用程序时，获取摄像头模组的采集光圈值。

应用程序是指可以完成特定工作的计算机程序。具体地，应用程序具备调用摄像头来采集图像的功能。例如，Instagram可以通过摄像头采集图像、微信可以通过摄像头采集图像或扫描二维码图像、支付类应用或锁屏应用可以通过摄像头采集人脸图像进行识别等不限于此。采集指令可以是用户通过点击显示屏上的按钮生成的，也可以是用户通过按压触摸屏上的控件生成的等，电子设备在通过摄像头模组采集初始图像时，获取发起采集初始图像的采集指令的目标应用程序。电子设备可以对应用程序进行分类，具体地，电子设备可以根据对图像准确度的要求、图像处理速度的要求等对应用程序进行分类。第一类应用程序可以是对图像准确度要求较高或图像处理速度要求较低的应用程序。电子设备可以在获取到采集指令对应的目标应用程序时，判断该目标应用程序是否属于第一类应用程序，当该目标应用程序属于第一类应用程序时，获取摄像头模组的采集光圈值，获取与采集光圈值对应的第一目标标定信息，对初始图像进行校正处理得到目标图像，可以提高目标图像的准确性，避免采用统一的标定信息对初始图像进行处理时，对图像的清晰度等造成影响，优化了图像的处理效果。

在一个实施例中，提供的图像处理方法还可以包括：当判断目标应用程序属于第二类应用程序时，获取预设的第二目标标定信息，并根据第二目标标定信息对初始图像进行校正处理，得到目标图像。

摄像头在实际应用时通常有一个默认光圈值，当刚开启摄像头时，摄像头通过该默认光圈值来采集图像。预设的第二目标标定信息是与默认光圈值对应的标定信息。电子设备可以将根据默认光圈值来采集图像的应用程序归为第二类应用程序。电子设备也可以将对图像处理准确性要求较低或对图像处理速度要求较高的应用程序归为第二类应用程序。当判断目标应用程序属于第一类应用程序时，电子设备获取与采集光圈值对应的第一目标标定信息，根据第一目标标定信息对初始图像进行校正处理；当判断目标应用程序属于第二类应用程序时，电子设备根据预设的第二目标标定信息对初始图像进行校正处理，得到目标图像。

电子设备根据发起采集指令的目标应用程序判断目标应用程序的分类，从而获取对应的标定信息对初始图像进行校正处理，当目标应用程序属于第二类应用程序时，直接采用预设的第二目标标定信息对初始图像进行处理，可以提高图像处理效率。

应该理解的是，虽然图2、3、5-7的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图2、3、5-7中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。

图8为一个实施例的图像处理装置的结构框图。如图8所示，该图像处理装置包括光圈值获取模块802、标定信息获取模块804和校正处理模块806。其中：

光圈值获取模块802，用于在通过摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值。

标定信息获取模块804，用于从标定信息中获取与采集光圈值对应的第一目标标定信息，其中，标定信息是在不同的光圈值下对摄像头模组进行标定处理得到的。

校正处理模块806，用于根据第一目标标定信息对初始图像进行校正处理，得到目标图像。

本申请实施例提供的图像处理装置，用于在通过摄像头模组采集初始图像时，获取摄像头模组对应的采集光圈值，从标定信息中获取与采集光圈值对应的第一目标标定信息，根据第一目标标定信息对初始图像进行校正处理，得到目标图像。由于可以根据采集光圈值获取对应的标定信息对初始图像进行处理，可以提高图像处理的准确性。

在一个实施例中，提供的图像处理装置还包括标定处理模块808，标定处理模块808用于依次获取摄像头模组的不同的光圈值，通过摄像头模组以不同的光圈值对标定板进行拍摄，得到与每一个光圈值对应的一组标定图像，其中，一组标定图像包含了摄像头模组中各个摄像头拍摄的标定图像；根据每一个光圈值对应的一组标定图像对摄像头模组进行标定处理，得到摄像头模组在每一个光圈值下对应的标定信息。

在一个实施例中，校正处理模块806还可以用于根据第一目标标定信息中包含的单目标定信息对摄像头模组中各个摄像头采集的初始图像进行单目校正处理，得到中间图像；根据第一目标标定信息包含的双目标定信息对中间图像进行双目校正处理，得到各个摄像头分别对应的目标图像。

在一个实施例中，摄像头模组包含第一摄像头和第二摄像头，目标图像包含通过第一摄像头采集的第一目标图像和通过第二摄像头采集的第二目标图像，图像处理装置还包括图像处理模块810，图像处理模块810用于根据第一目标图像和第二目标图像得到第一深度图像；根据第一深度图像对第一目标图像进行处理。

在一个实施例中，摄像头模组还包括第三摄像头，目标图像包含通过第三摄像头采集的第三目标图像，图像处理模块810还可以用于根据第一目标图像建立对应的颜色直方图；检测颜色直方图的离散程度；当颜色直方图的离散程度超过离散阈值时，根据第二深度图像对第一目标图像进行处理，其中，第二深度图像是根据第三目标图像得到的。

在一个实施例中，图像处理模块810还可以用于当第二深度图像中存在无效深度值时，获取无效深度值对应的像素点在第一深度图像中对应的第一深度值；将第二深度图像中无效深度值替换为第一深度值，得到目标深度图像；根据目标深度图像对第一目标图像进行处理。

在一个实施例中，校正处理模块806还可以用于在通过摄像头模组采集初始图像时，获取发起采集初始图像的采集指令的目标应用程序；当判断目标应用程序属于第一类应用程序时，获取摄像头模组的采集光圈值；从标定信息中获取与采集光圈值对应的第一目标标定信息，根据第一目标标定信息对初始图像进行校正处理，得到目标图像。

在一个实施例中，校正处理模块806还可以用于当判断目标应用程序属于第二类应用程序时，获取预设的第二目标标定信息，并根据第二目标标定信息对初始图像进行校正处理，得到目标图像。

上述图像处理装置中各个模块的划分仅用于举例说明，在其他实施例中，可将图像处理装置按照需要划分为不同的模块，以完成上述图像处理装置的全部或部分功能。

图9为一个实施例中电子设备的内部结构示意图。如图9所示，该电子设备包括通过***总线连接的处理器和存储器。其中，该处理器用于提供计算和控制能力，支撑整个电子设备的运行。存储器可包括非易失性存储介质及内存储器。非易失性存储介质存储有操作***和计算机程序。该计算机程序可被处理器所执行，以用于实现以下各个实施例所提供的一种图像处理方法。内存储器为非易失性存储介质中的操作***计算机程序提供高速缓存的运行环境。该电子设备可以是手机、平板电脑或者个人数字助理或穿戴式设备等。

本申请实施例中提供的图像处理装置中的各个模块的实现可为计算机程序的形式。该计算机程序可在终端或服务器上运行。该计算机程序构成的程序模块可存储在终端或服务器的存储器上。该计算机程序被处理器执行时，实现本申请实施例中所描述方法的步骤。

本申请实施例还提供一种电子设备。上述电子设备中包括图像处理电路，图像处理电路可以利用硬件和/或软件组件实现，可包括定义ISP(Image Signal Processing，图像信号处理)管线的各种处理单元。图10为一个实施例中图像处理电路的示意图。如图10所示，为便于说明，仅示出与本申请实施例相关的图像处理技术的各个方面。

如图10所示，图像处理电路包括ISP处理器1040和控制逻辑器1050。成像设备1010捕捉的图像数据首先由ISP处理器1040处理，ISP处理器1040对图像数据进行分析以捕捉可用于确定和/或成像设备1010的一个或多个控制参数的图像统计信息。成像设备1010可包括具有一个或多个透镜1012和图像传感器1014的照相机。图像传感器1014可包括色彩滤镜阵列(如Bayer滤镜)，图像传感器1014可获取用图像传感器1014的每个成像像素捕捉的光强度和波长信息，并提供可由ISP处理器1040处理的一组原始图像数据。传感器1020(如陀螺仪)可基于传感器1020接口类型把采集的图像处理的参数(如防抖参数)提供给ISP处理器1040。传感器1020接口可以利用SMIA(Standard Mobile Imaging Architecture，标准移动成像架构)接口、其它串行或并行照相机接口或上述接口的组合。

此外，图像传感器1014也可将原始图像数据发送给传感器1020，传感器1020可基于传感器1020接口类型把原始图像数据提供给ISP处理器1040，或者传感器1020将原始图像数据存储到图像存储器1030中。

ISP处理器1040按多种格式逐个像素地处理原始图像数据。例如，每个图像像素可具有8、10、12或14比特的位深度，ISP处理器1040可对原始图像数据进行一个或多个图像处理操作、收集关于图像数据的统计信息。其中，图像处理操作可按相同或不同的位深度精度进行。

ISP处理器1040还可从图像存储器1030接收图像数据。例如，传感器1020接口将原始图像数据发送给图像存储器1030，图像存储器1030中的原始图像数据再提供给ISP处理器1040以供处理。图像存储器1030可为存储器装置的一部分、存储设备、或电子设备内的独立的专用存储器，并可包括DMA(Direct Memory Access，直接直接存储器存取)特征。

当接收到来自图像传感器1014接口或来自传感器1020接口或来自图像存储器1030的原始图像数据时，ISP处理器1040可进行一个或多个图像处理操作，如时域滤波。处理后的图像数据可发送给图像存储器1030，以便在被显示之前进行另外的处理。ISP处理器1040从图像存储器1030接收处理数据，并对所述处理数据进行原始域中以及RGB和YCbCr颜色空间中的图像数据处理。ISP处理器1040处理后的图像数据可输出给显示器1070，以供用户观看和/或由图形引擎或GPU(Graphics Processing Unit，图形处理器)进一步处理。此外，ISP处理器1040的输出还可发送给图像存储器1030，且显示器1070可从图像存储器1030读取图像数据。在一个实施例中，图像存储器1030可被配置为实现一个或多个帧缓冲器。此外，ISP处理器1040的输出可发送给编码器/解码器1060，以便编码/解码图像数据。编码的图像数据可被保存，并在显示于显示器1070设备上之前解压缩。编码器/解码器1060可由CPU或GPU或协处理器实现。

ISP处理器1040确定的统计数据可发送给控制逻辑器1050单元。例如，统计数据可包括自动曝光、自动白平衡、自动聚焦、闪烁检测、黑电平补偿、透镜1012阴影校正等图像传感器1014统计信息。控制逻辑器1050可包括执行一个或多个例程(如固件)的处理器和/或微控制器，一个或多个例程可根据接收的统计数据，确定成像设备1010的控制参数及ISP处理器1040的控制参数。例如，成像设备1010的控制参数可包括传感器1020控制参数(例如增益、曝光控制的积分时间、防抖参数等)、照相机闪光控制参数、透镜1012控制参数(例如聚焦或变焦用焦距)、或这些参数的组合。ISP控制参数可包括用于自动白平衡和颜色调整(例如，在RGB处理期间)的增益水平和色彩校正矩阵，以及透镜1012阴影校正参数。

运用图10中图像处理技术可实现上述图像处理方法。在本申请实施例中，该图像处理电路可以包含一个或多个成像设备。

本申请实施例还提供了一种计算机可读存储介质。一个或多个包含计算机可执行指令的非易失性计算机可读存储介质，当所述计算机可执行指令被一个或多个处理器执行时，使得所述处理器执行图像处理方法的步骤。

一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行图像处理方法。

本申请实施例所使用的对存储器、存储、数据库或其它介质的任何引用可包括非易失性和/或易失性存储器。合适的非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)，它用作外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDR SDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)。

以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对本申请专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。

Claims (10)

1.一种图像处理方法，其特征在于，包括：

依次获取摄像头模组的不同的光圈值，通过所述摄像头模组以不同的光圈值对标定板进行拍摄，得到与每一个光圈值对应的一组标定图像，其中，所述一组标定图像包含了所述摄像头模组中各个摄像头拍摄的标定图像；

根据每一个光圈值对应的一组标定图像对所述摄像头模组进行标定处理，得到所述摄像头模组在每一个光圈值下对应的标定信息；

在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值；

从标定信息中获取与所述采集光圈值对应的第一目标标定信息，当没有与所述采集光圈值对应的标定信息时，获取与所述采集光圈值最接近的光圈值对应的标定信息作为所述第一目标标定信息，其中，所述标定信息是在不同的光圈值下对所述摄像头模组进行标定处理得到的；

根据所述第一目标标定信息对所述初始图像进行校正处理，得到目标图像。

2.根据权利要求1所述的方法，其特征在于，所述根据所述第一目标标定信息对所述初始图像进行校正处理，包括：

根据所述第一目标标定信息中包含的单目标定信息对所述摄像头模组中各个摄像头采集的初始图像进行单目校正处理，得到中间图像；

根据所述第一目标标定信息包含的双目标定信息对所述中间图像进行双目校正处理，得到各个所述摄像头分别对应的目标图像。

3.根据权利要求1所述的方法，其特征在于，所述摄像头模组包含第一摄像头和第二摄像头，所述目标图像包含通过所述第一摄像头采集的第一目标图像和通过所述第二摄像头采集的第二目标图像；所述方法还包括：

根据所述第一目标图像和第二目标图像得到第一深度图像；

根据所述第一深度图像对所述第一目标图像进行处理。

4.根据权利要求1所述的方法，其特征在于，所述摄像头模组包含第一摄像头和第三摄像头，所述目标图像包含通过所述第一摄像头采集的第一目标图像和通过所述第三摄像头采集的第三目标图像；所述方法还包括：

根据所述第一目标图像建立对应的颜色直方图；

检测所述颜色直方图的离散程度；

当所述颜色直方图的离散程度超过离散阈值时，根据第二深度图像对所述第一目标图像进行处理，其中，所述第二深度图像是根据所述第三目标图像得到的。

5.根据权利要求4所述的方法，其特征在于，所述摄像头模组还包含第二摄像头，所述目标图像还包含通过所述第二摄像头采集的第二目标图像，所述根据第二深度图像对所述第一目标图像进行处理，包括：

当所述第二深度图像中存在无效深度值时，获取所述无效深度值对应的像素点在第一深度图像中对应的第一深度值，其中，所述第一深度图像是根据所述第一目标图像和第二目标图像得到的；

将所述第二深度图像中所述无效深度值替换为所述第一深度值，得到目标深度图像；

根据所述目标深度图像对所述第一目标图像进行处理。

6.根据权利要求1所述的方法，其特征在于，所述在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值，包括：

在通过所述摄像头模组采集初始图像时，获取发起采集所述初始图像的采集指令的目标应用程序；

当判断所述目标应用程序属于第一类应用程序时，获取所述摄像头模组的所述采集光圈值；

所述方法还包括：

当判断所述目标应用程序属于第二类应用程序时，获取预设的第二目标标定信息，并根据所述第二目标标定信息对所述初始图像进行校正处理，得到目标图像。

7.一种图像处理装置，其特征在于，包括：

标定处理模块，用于依次获取摄像头模组的不同的光圈值，通过所述摄像头模组以不同的光圈值对标定板进行拍摄，得到与每一个光圈值对应的一组标定图像，其中，所述一组标定图像包含了所述摄像头模组中各个摄像头拍摄的标定图像；根据每一个光圈值对应的一组标定图像对所述摄像头模组进行标定处理，得到所述摄像头模组在每一个光圈值下对应的标定信息；

光圈值获取模块，用于在通过摄像头模组采集初始图像时，获取所述摄像头模组对应的采集光圈值；

标定信息获取模块，用于从标定信息中获取与所述采集光圈值对应的第一目标标定信息，当没有与所述采集光圈值对应的标定信息时，获取与所述采集光圈值最接近的光圈值对应的标定信息作为所述第一目标标定信息，其中，所述标定信息是在不同的光圈值下对所述摄像头模组进行标定处理得到的；

校正处理模块，用于根据所述第一目标标定信息对所述初始图像进行校正处理，得到目标图像。

8.根据权利要求7所述的装置，其特征在于，所述校正处理模块还用于根据所述第一目标标定信息中包含的单目标定信息对所述摄像头模组中各个摄像头采集的初始图像进行单目校正处理，得到中间图像；根据所述第一目标标定信息包含的双目标定信息对所述中间图像进行双目校正处理，得到各个所述摄像头分别对应的目标图像。

9.一种电子设备，包括存储器及处理器，所述存储器中储存有计算机程序，所述计算机程序被所述处理器执行时，使得所述处理器执行如权利要求1至6中任一项所述的图像处理方法的步骤。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至6中任一项所述的方法的步骤。

Images