CN107222680A - 一种全景图像的拍摄方法和移动终端 - Google Patents

Abstract

本发明实施例提供了一种全景图像的拍摄方法和移动终端，所述方法包括：当进行全景拍摄时，接收到抓帧请求；分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；采用所述初始图像生成目标图像；采用所述目标图像拼接，形成全景图像。由于在本发明实施例中基于至少两个摄像头同时采集的初始图像来合成目标图像，因此用于拼接全景图像的目标图像是清晰度高的高质量图像，提升了用户视觉体验。

Description

一种全景图像的拍摄方法和移动终端

技术领域

本发明涉及通信技术领域，特别是涉及一种全景图像的拍摄方法和一种移动终端。

背景技术

随着手机等智能移动终端应用越来越广泛，相机感光芯片性能不断提升，加上移动终端的便携性，移动终端上的摄像头常常取代了传统相机、甚至是单反相机的角色，使得移动终端的拍照应用越来越广。有时候遇到一些精彩的瞬间，非常希望可以快速抓拍下来，假如可以快速打开相机应用并立即抓拍，可以极大满足用户需求。

现在很多用户喜欢使用相机进行全景拍摄，全景拍摄在预览或者拍照的时候，采集图像，然后将采集的图像合成一张全景图像。遇到高动态范围的场景或者夜景、抖动的场景的时候，生成的全景图像质量很差。

发明内容

本发明实施例提供一种全景图像的拍摄方法和一种移动终端，以解决在遇到不同拍摄场景的时候，如何生成高质量的全景图像的问题。

第一方面，提供了一种全景图像的拍摄方法，应用于具有至少两个摄像头的移动终端，所述方法包括：

当进行全景拍摄时，接收到抓帧请求；

分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

采用所述初始图像生成目标图像；

采用所述目标图像拼接，形成全景图像。

第二方面，提供了一种移动终端，所述移动终端具有至少两个摄像头，所述移动终端包括：

抓帧请求接收模块，用于当进行全景拍摄时，接收到抓帧请求；

初始图像获取模块，用于分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

目标图像生成模块，用于采用所述初始图像生成目标图像；

全景图像拼接模块，用于采用所述目标图像拼接，形成全景图像。

这样，本发明实施例中，在进行全景拍摄时，基于接收到的抓帧请求去获取至少两个摄像头同时采集的初始图像，并采用初始图像合成高质量的目标图像，最后采用多张目标图像拼接全景图像，由于在本发明实施例中基于至少两个摄像头同时采集的初始图像来合成目标图像，因此用于拼接全景图像的目标图像是清晰度高的高质量图像，提升了用户视觉体验。

附图说明

为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例一的一种全景图像的拍摄方法实施例的步骤流程图；

图2是本发明实施例二的一种全景图像的拍摄方法实施例的步骤流程图；

图3是本发明实施例三的一种移动终端实施例的结构框图；

图4是本发明另一个实施例的移动终端的框图；

图5是本发明又一个实施例的移动终端的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

实施例一

参照图1，示出了本发明的一种全景图像的拍摄方法实施例的步骤流程图，应用于具有至少两个摄像头的移动终端，所述方法具体可以包括如下步骤：

步骤101，当进行全景拍摄时，接收到抓帧请求；

在具体实现中，全景拍摄是指将所有拍摄的多张图像拼成一张全景图像。一般全景拍摄的基本拍摄原理是，搜索两张图像的边缘部分，并将成像效果最为接近的区域加以重合，以完成图像的自动拼接。

在进行全景拍摄时，移动终端会自动生成抓帧请求，该抓帧请求包括告知摄像头何时需要采集图像以及采集的目标图像，以用于后续的全景图像的拼接。

步骤102，分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

在本发明实施例中，移动终端设置的摄像头可以为两个或者两个以上，并且，不同的摄像头会采集不同性质的图像。例如，假设一个摄像头用于采集彩色图像，一个摄像头可以用于采集黑白图像，这两个摄像头的拍摄工作可以同时进行。

当然，在实施本发明实施例时根据具体情况来设置摄像头需要采集的图像即可，本发明实施例对此不加以限制。

本发明实施例在接收到抓帧请求时，就会基于抓帧请求去获取摄像头同时拍摄到的初始图像。

步骤103，采用所述至少两个摄像头同时拍摄的初始图像，生成目标图像；

当获取到至少两个摄像头的同时拍摄的初始图像时，可以基于初始图像合成具有较高质量的目标图像。

摄像头在拍摄环境光线不足等情况下，摄像头所采集到的影像的噪点多、成像模糊。为了得到质量更好的图像，可以采取多张图像来合成。可能每次拍摄所得的图像质量相对较差，但是通过多张图像，然后博采众长进行合成，就可以获得一张高质量的图像，作为用于后续拼接全景图像的目标图像之一。

步骤104，采用所述目标图像拼接，形成全景图像。

当得到所需的目标图像之后，就可以用来拼接得到全景图像。

这样，本发明实施例中，在进行全景拍摄时，基于接收到的抓帧请求去获取至少两个摄像头同时采集的初始图像，并采用初始图像合成高质量的目标图像，最后采用多张目标图像拼接全景图像，由于在本发明实施例中基于至少两个摄像头同时采集的初始图像来合成目标图像，因此用于拼接全景图像的目标图像是清晰度高的高质量图像，提升了用户视觉体验。

实施例二

参照图2，示出了本发明的一种全景图像的拍摄方法实施例的步骤流程图，应用于具有至少两个摄像头的移动终端，所述方法具体可以包括如下步骤：

步骤201，当进行全景拍摄时，获取当前用户的拍摄角度；

在全景拍摄时，一般都需要拍摄好几张图像来用于拼接全景图像。在实际中可以根据用户拍摄的角度来确定是否需要去抓取帧，即抓取图像。

步骤202，基于所述拍摄角度生成用于合成全景图像的抓帧请求。

一种具体实施方式是，可以通过算法去检测用户拍摄时旋转的角度。当根据该旋转角度确定需要拍摄一张图像时，发送一条抓帧指令去抓取一帧图像，直到需要的几帧图像都抓取完毕，就可以进行全景图像拼接。

步骤203，接收到抓帧请求；

在本发明实施例中，当接收到抓帧请求时，就会基于抓帧请求去获取摄像头同时拍摄到的初始图像，随后还基于初始图像来合成用于拼接全景图像的目标图像。

步骤204，分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

在一种优选实施例中，可以根据当前的拍摄场景来确定所获取的摄像头的初始图像。例如，在遇到高动态范围的场景或者夜景、抖动的场景的时候，如果只通过一个摄像头所采集的图像来拼接全景图像，那么全景图像质量很差。

故在本发明实施例中，可以在接收到抓帧请求时，根据需求去获取摄像头采集的不同性质的图像作为初始图像，以提高后续全景图像的拼接质量。

在本发明的一种优选实施例中，所述移动终端具有与摄像头和图像处理器ISP相连的数字信号处理器DSP，所述图像处理器ISP与应用处理器AP连接，所述步骤205可以包括如下子步骤：

在所述DSP采用所述至少两个摄像头同时拍摄的初始图像合成目标图像。

在具体实现中，在移动终端设置有与摄像头的传感器sensor和图像处理器ISP相连的数字信号处理器DSP。通常，ISP在移动终端中作为摄像头的sensor输出信号处理的单元，以匹配不同厂商的sensor。

在实际中，DSP芯片的内部采用程序和数据分开的哈佛结构，具有专门的硬件乘法器，广泛采用流水线操作，提供特殊的DSP指令，可以用来快速的实现各种数字信号处理算法。其中，DSP可以以内置或外置的方式设置于移动终端，根据实际需求设置即可，本发明实施例对此不加以限制。

步骤205，采用所述初始图像生成目标图像；

当获取到至少两个摄像头的同时拍摄的初始图像时，可以基于初始图像合成具有较高质量的目标图像。

需要说明的是，在不同的拍摄场景或拍摄模式下，所需摄像头的数量，以及，所需拍摄的初始图像的数量也有所不同。

在所述当前拍摄模式为拍摄高动态范围图像模式时，需要三个摄像头，其中所述摄像头包括第一摄像头，第二摄像头和第三摄像头，则所述步骤204可以包括如下子步骤：

获取所述第一摄像头采集的过曝图像，获取所述第二摄像头采集的欠曝图像，以及，获取所述第三摄像头采集的正常图像。

在需要拍摄高动态范围图像时，在抓帧时可以考虑使用三个摄像头去同时采集三张初始图像。

在所述当前拍摄模式为拍摄夜景图像模式时，需要两个摄像头，所述摄像头包括第一摄像头和第二摄像头，即所述步骤204可以包括如下子步骤：

获取所述第一摄像头采集的彩色图像，以及，获取所述第二摄像头采集的黑白图像。

在需要在夜景的拍摄场景下，由于夜景时光线不足，故在抓帧时可以考虑使用两个摄像头去同时采集两张初始图像。其中，初始图像包括具有色彩信息的色彩图像，以及，线条清晰的黑白图像。

在所述当前拍摄模式为拍摄防抖图像模式，需要两个摄像头，所述摄像头包括第一摄像头和第二摄像头时，则所述步骤204可以包括如下子步骤：

获取所述第一摄像头按照第一预设曝光时间和第一曝光亮度参数采集的一张彩色图像，以及，获取所述第二摄像头按照第二预设曝光时间和第二曝光亮度参数采集的三张黑白图像；

其中，所述第一预设曝光时间为所述第二预设曝光时间的四倍，所述第二曝光亮度参数为所述第一曝光亮度参数的两倍。

在进入防抖模式时，为了避免由于抖动造成图像模糊的问题，故在抓帧时可以考虑使用两个摄像头去同时采集多张初始图像。其中，初始图像包括一张具有色彩信息的色彩图像，以及，多张线条清晰的黑白图像。

步骤206，采用所述目标图像拼接，形成全景图像。

在本发明的一种优选实施例中，所述步骤206可以包括如下子步骤：

在所述ISP采用所述目标图像生成待合成图像；

所述ISP将所述待合成图像发送至AP；

在所述DSP接收所述AP反馈的待合成图像，并采用所述AP反馈的待合成图像拼接全景图像。

当在DSP基于摄像头采集的图像合成高质量的目标图像后，就可以基于目标图像拼接全景图像。

例如，假设需要拍摄高动态范围全景图像，移动终端的两个摄像头分别输出几张过曝和欠曝的初始图像(RAW图像)到DSP，DSP直接在raw domain进行HDR(High-DynamicRange，高动态光照渲染)算法合成，输出几张高动态范围的RAW图像。然后将RAW图像经过ISP处理，得到几张YUV图像到AP，然后DSP芯片在进行最终一次全景图像拼接合成，或者直接使用CPU或者另外一个DSP芯片进行实时的全景图像拼接合成。

由于得到的YUV图像都是高动态范围的图像，所以最终合成的全景图像就是高动态范围全景图像。在其他拍摄场景，例如抖动的场景和夜景也是类似的原理。

为了使本领域技术人员更好地理解本发明实施例，下面采用具体的示例说明本发明实施例在不同的拍摄场景下的全景图像拍摄过程。

第一示例：拍摄高动态范围的全景图像。

移动终端搭载至少两个摄像头，搭载DSP专用图像处理芯片。在高动态范围场景下拍摄全景图像时，可以使用双摄像头配合HDR的算法，也可以使用三个摄像头配合HDR的算法，为了便于理解，这里以使用三个摄像头配合对应的HDR算法来进行说明。三个摄像头分别输出过曝、欠曝和正常曝光的图像，DSP在一帧的时间里就可以获取到三张不同曝光的图像，由于全景图像合成的几张YUV图像都可以先经过DSP的HDR算法合成，所以最终合成的全景图像是高动态范围的。

具体实施步骤如下：

步骤A1：同时打开三个摄像头；

三个摄像头都连接到DSP上，分别输出过曝、欠曝和正常曝光的图像，使得DSP在每一帧的时间里都同时得到三个摄像头输出的图像。

步骤A2：开始拍摄全景图像；

一般需要拍摄几张图像用于拼接全景图像。移动终端检测用户旋转的角度，当需要拍摄一张图像时，发送一条抓帧指令抓取一帧图像，直到需要的几帧图像都抓取完毕，再进行全景图像拼接合成。

步骤A3：DSP检测是否收到抓帧请求；如果收到抓帧请求，进入步骤A4，否则，进入步骤A5

步骤A4：将合成后的高动态范围图像输出给AP；

步骤A5：将正常曝光图像输出给AP；

步骤A6：在DSP进行全景图像拼接合成。

应用本示例，使得拍摄的全景图像具有高动态范围，提升了全景拍照的用户体验。

第二示例：拍摄夜景模式下的全景图像。

移动终端搭载彩色加黑白双摄像头，搭载DSP专用图像处理芯片。在夜间全景拍摄时，彩色摄像头和黑白摄像头分别输出图像，DSP在一帧的时间里可以同时获取到彩色的raw图像和黑白的raw图像，由于黑白图像有更多的细节，噪点少，彩色摄像头有色彩信息，合成之后的图像具有降噪的效果。全景拍摄需要的几张图像，都是已经先经过DSP进行彩色加黑白降噪算法合成，然后经过ISP图像处理成的YUV图像，再进行全景合成时，得到的全景图像就是一张噪点比较小的全景图像。

具体实施步骤如下：

步骤B1：同时打开彩色加黑白两个摄像头；

两个摄像头都连接到DSP上，DSP在每一帧的时间里都同时得到两个摄像头输出的图像。

步骤B2：开始拍摄全景图像；

一般需要拍摄几张图像用于合成全景图像。移动终端会检测用户旋转的角度，当需要拍摄一张图像时，发送一条抓帧指令抓取一帧图像，直到需要的几帧图像都抓取完毕，再进行全景图像拼接合成。

步骤B3：DSP检测是否收到抓帧请求；如果收到抓帧请求，进入步骤B4，否则进入步骤B5；

步骤B4：将合成后的去噪图像输出给AP；

步骤B5：将彩色图像输出给AP；

步骤B6：在DSP进行全景图像拼接合成。

应用本示例，可以在夜景等光线不足的场景下，获得噪点较小的全景图像，提升了夜间全景拍照的效果，提升了用户体验。

第三示例：拍摄防抖的全景图像。

移动终端搭载双摄像头，搭载DSP专用图像处理芯片。在易抖动场景下全景拍摄时，一个摄像头以正常曝光参数输出图像，另外一颗摄像头以第一颗摄像头的1/4曝光时间，2倍gain(增益，一般是指亮度增益)的曝光参数输出图像，DSP在一帧的时间里可以同时获取到一张正常曝光的图像，4张欠曝的图像，由于黑白图像有更多的细节，噪点少，彩色摄像头有色彩信息，合成之后的图像具有降噪的效果。全景拍摄需要的几张图像，都是已经先经过DSP进行彩色加黑白降噪算法合成，然后经过ISP图像处理成的YUV图像，再进行全景合成时，得到的全景图像就是一张噪点比较小的全景图像。

具体实施步骤如下：

步骤C1：同时打开双摄像头；

两个摄像头都连接到DSP上，DSP在每一帧的时间里都同时得到两个摄像头输出的图像。

步骤C2：开始拍摄全景图像；

一般需要拍摄几张图像用于合成全景图像。移动终端会检测用户旋转的角度，当需要拍摄一张图像时，发送一条抓帧指令抓取一帧图像，直到需要的几帧图像都抓取完毕，再进行全景图像合成。

步骤C3：DSP检测是否收到抓帧请求；如果收到抓帧请求，进入步骤C4，否则，进入步骤C5；

步骤C4：将合成后的防抖图像输出给AP；

步骤C5：将正常曝光图像输出给AP；

步骤C6：在DSP进行全景图像拼接合成。

应用本示例，即使在拍摄时有抖动，但是拍摄的全景图像是完全清晰的，而不是模糊的，提升了用户体验。

需要说明的是，本发明实施例在原有的移动终端的硬件框架基础上，添加DSP(Digital Signal Processing，数字信号处理器)，使得图像数据在进入ISP(Image SignalProcessing，图像信号处理)之前，能够实现更多的图像处理功能，提升图像数据的图像质量。具体地，摄像头的摄像模组中具有sensor(传感器)，在移动终端设置有与摄像头的sensor和ISP相连的DSP。通常，ISP在移动终端中作为摄像头的sensor输出信号处理的单元，以匹配不同厂商的sensor。

其中，DSP，sensor和ISP之间，可以通过MIPI(Mobile Industry ProcessorInterface，移动产业处理器接口)连接，MIPI将手机内部的接口如摄像头、显示屏接口、射频/基带接口等标准化，可以减少手机设计的复杂程度和增加设计灵活性。当然，DSP，sensor和ISP之间还可以通过其他接口进行连接，本发明实施例对此无需加以限制。

本发明实施例的DSP硬件模块，是在RAW区间(例如对为Bayer格式等格式的RAW图像进行处理，RAW图像由于未在ISP进行转换成为YUV等格式，因此数据量更多，细节信息丰富)的图像数据进行去噪等操作，让图像数据在进入ISP之前，就有比较好的噪声表现，并且通过DSP来处理图像数据，相对于在ISP处理而言速度快，且在DSP还能使用多种算法实现多种功能。通过在DSP对于图像数据进行预处理，减少在ISP处理过程中，降低后端处理难度，最终得到更好的图像品质。

ISP是可以集成于AP(Application Processor，应用处理器)中，也可以是独立的芯片，本发明实施例对此无需加以限制，在DSP得到结果的RAW图像之后再发送进行ISP处理，使得图像数据更加清晰、自然和美观。

需要说明的是，对于方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本发明实施例并不受所描述的动作顺序的限制，因为依据本发明实施例，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作并不一定是本发明实施例所必须的。

实施例三

参照图3，示出了本发明的一种移动终端实施例的结构框图，所述移动终端具有至少两个摄像头，所述移动终端具体可以包括如下模块：

抓帧请求接收模块301，用于当进行全景拍摄时，接收到抓帧请求；

初始图像获取模块302，用于分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

目标图像生成模块303，用于采用所述初始图像生成目标图像；

全景图像拼接模块304，用于采用所述目标图像拼接，形成全景图像。

在本发明的一种优选实施例中，所述移动终端还包括：

拍摄角度获取模块，用于获取当前用户的拍摄角度；

抓帧请求生成模块，用于基于所述拍摄角度生成用于合成全景图像的抓帧请求。

在本发明的一种优选实施例中，所述至少两个摄像头包括第一摄像头，第二摄像头和第三摄像头，在所述当前拍摄模式为拍摄高动态范围图像模式时，所述初始图像获取模块302包括：

第一初始图像获取子模块，用于基于所述抓帧请求，获取所述第一摄像头采集的过曝图像，获取所述第二摄像头采集的欠曝图像，以及，获取所述第三摄像头采集的正常图像。

在本发明的一种优选实施例中，所述至少两个摄像头包括第一摄像头和第二摄像头，在所述当前拍摄模式为拍摄夜景图像模式时，所述初始图像获取模块302包括：

第二初始图像获取子模块，用于基于所述抓帧请求，获取所述第一摄像头采集的彩色图像，以及，获取所述第二摄像头采集的黑白图像。

在本发明的一种优选实施例中，所述至少两个摄像头包括第一摄像头和第二摄像头时，在所述当前拍摄模式为拍摄防抖图像模式，所述初始图像获取模块302包括：

第三初始图像获取子模块，用于基于所述抓帧请求，获取所述第一摄像头按照第一预设曝光时间和第一曝光亮度参数采集的一张彩色图像，以及，获取所述第二摄像头按照第二预设曝光时间和第二曝光亮度参数采集的三张黑白图像；

其中，所述第一预设曝光时间为所述第二预设曝光时间的四倍，所述第二曝光亮度参数为所述第一曝光亮度参数的两倍。

在本发明的一种优选实施例中，所述移动终端具有与摄像头和图像处理器ISP相连的数字信号处理器DSP，所述图像处理器ISP与应用处理器AP连接，所述目标图像生成模块303包括：

目标图像合成子模块，用于在所述DSP采用所述至少两个摄像头同时拍摄的初始图像合成目标图像。

在本发明的一种优选实施例中，所述全景图像拼接模块304包括：

待合成图像生成子模块，用于在所述ISP采用所述目标图像生成待合成图像；

待合成图像发送子模块，用于在所述ISP将所述待合成图像发送至AP；

待合成图像拼接子模块，用于所述DSP接收所述AP反馈的待合成图像，并采用所述AP反馈的待合成图像拼接全景图像。

对于移动终端实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

这样，本发明实施例中，在进行全景拍摄时，基于接收到的抓帧请求去获取至少两个摄像头同时采集的初始图像，并采用初始图像合成高质量的目标图像，最后采用多张目标图像拼接全景图像，由于在本发明实施例中基于至少两个摄像头同时采集的初始图像来合成目标图像，因此用于拼接全景图像的目标图像是清晰度高的高质量图像，提升了用户视觉体验。

实施例四

图4是本发明另一个实施例的移动终端的框图。图4所示的移动终端700包括：至少一个处理器701、存储器702、至少一个网络接口704和其他用户接口703。移动终端700中的各个组件通过总线***705耦合在一起。可理解，总线***705用于实现这些组件之间的连接通信。总线***705除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图4中将各种总线都标为总线***705。

其中，用户接口703可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者触摸屏等。

可以理解，本发明实施例中的存储器702可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-OnlyMemory，ROM)、可编程只读存储器(ProgrammableROM，PROM)、可擦除可编程只读存储器(ErasablePROM，EPROM)、电可擦除可编程只读存储器(ElectricallyEPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(RandomAccessMemory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(StaticRAM，SRAM)、动态随机存取存储器(DynamicRAM，DRAM)、同步动态随机存取存储器(SynchronousDRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(DoubleDataRateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(SynchlinkDRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambusRAM，DRRAM)。本发明实施例描述的***和方法的存储器702旨在包括但不限于这些和任意其它适合类型的存储器。

在一些实施方式中，存储器702存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集：操作***7021和应用程序7022。

其中，操作***7021，包含各种***程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序7022，包含各种应用程序，例如媒体播放器(MediaPlayer)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序7022中。

在本发明实施例中，通过调用存储器702存储的程序或指令，具体的，可以是应用程序7022中存储的程序或指令，处理器701用于当进行全景拍摄时，接收到抓帧请求；分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；采用所述初始图像生成目标图像；采用所述目标图像拼接，形成全景图像。

上述本发明实施例揭示的方法可以应用于处理器701中，或者由处理器701实现。处理器701可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器701中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器701可以是通用处理器、数字信号处理器(DigitalSignalProcessor，DSP)、专用集成电路(ApplicationSpecific IntegratedCircuit，ASIC)、现成可编程门阵列(FieldProgrammableGateArray，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器702，处理器701读取存储器702中的信息，结合其硬件完成上述方法的步骤。

可以理解的是，本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecificIntegratedCircuits，ASIC)、数字信号处理器(DigitalSignalProcessing，DSP)、数字信号处理设备(DSPDevice，DSPD)、可编程逻辑设备(ProgrammableLogicDevice，PLD)、现场可编程门阵列(Field-ProgrammableGateArray，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。

对于软件实现，可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。

可选地，所述处理器701还用于：获取当前用户的拍摄角度；基于所述拍摄角度生成用于合成全景图像的抓帧请求。

可选地，所述处理器701还用于：基于所述抓帧请求，获取所述第一摄像头采集的过曝图像，获取所述第二摄像头采集的欠曝图像，以及，获取所述第三摄像头采集的正常图像。

可选地，所述处理器701还用于：基于所述抓帧请求，获取所述第一摄像头采集的彩色图像，以及，获取所述第二摄像头采集的黑白图像。

可选地，所述处理器701还用于：基于所述抓帧请求，获取所述第一摄像头按照第一预设曝光时间和第一曝光亮度参数采集的一张彩色图像，以及，获取所述第二摄像头按照第二预设曝光时间和第二曝光亮度参数采集的三张黑白图像；其中，所述第一预设曝光时间为所述第二预设曝光时间的四倍，所述第二曝光亮度参数为所述第一曝光亮度参数的两倍。

可选地，所述处理器701还用于：在所述DSP采用所述至少两个摄像头同时拍摄的初始图像合成目标图像。

可选地，所述处理器701还用于：在所述ISP采用所述目标图像生成待合成图像；在所述ISP将所述待合成图像发送至AP；所述DSP接收所述AP反馈的待合成图像，并采用所述AP反馈的待合成图像拼接全景图像。

移动终端700能够实现前述实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。

这样，本发明实施例中，在进行全景拍摄时，基于接收到的抓帧请求去获取至少两个摄像头同时采集的初始图像，并采用初始图像合成高质量的目标图像，最后采用多张目标图像拼接全景图像，由于在本发明实施例中基于至少两个摄像头同时采集的初始图像来合成目标图像，因此用于拼接全景图像的目标图像是清晰度高的高质量图像，提升了用户视觉体验。

实施例五

图5是本发明另一个实施例的移动终端的结构示意图。具体地，图5中的移动终端800可以为手机、平板电脑、个人数字助理(PersonalDigital Assistant，PDA)、或车载电脑等。

图5中的移动终端800包括射频(RadioFrequency，RF)电路810、存储器820、输入单元830、显示单元840、处理器860、音频电路870、WiFi(WirelessFidelity)模块880和电源890。

其中，输入单元830可用于接收用户输入的数字或字符信息，以及产生与移动终端800的用户设置以及功能控制有关的信号输入。具体地，本发明实施例中，该输入单元830可以包括触控面板831。触控面板831，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板831上的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板831可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给该处理器860，并能接收处理器860发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板831。除了触控面板831，输入单元830还可以包括其他输入设备832，其他输入设备832可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。

其中，显示单元840可用于显示由用户输入的信息或提供给用户的信息以及移动终端800的各种菜单界面。显示单元840可包括显示面板841，可选的，可以采用LCD或有机发光二极管(OrganicLight-EmittingDiode，OLED)等形式来配置显示面板841。

应注意，触控面板831可以覆盖显示面板841，形成触摸显示屏，当该触摸显示屏检测到在其上或附近的触摸操作后，传送给处理器860以确定触摸事件的类型，随后处理器860根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。

触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定，可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件，例如，设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。

其中处理器860是移动终端800的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在第一存储器821内的软件程序和/或模块，以及调用存储在第二存储器822内的数据，执行移动终端800的各种功能和处理数据，从而对移动终端800进行整体监控。可选的，处理器860可包括一个或多个处理单元。

在本发明实施例中，通过调用存储该第一存储器821内的软件程序和/或模块和/或该第二存储器822内的数据，处理器860用于当进行全景拍摄时，接收到抓帧请求；分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；采用所述初始图像生成目标图像；采用所述目标图像拼接，形成全景图像。

可选地，所述处理器860还用于，获取当前用户的拍摄角度；基于所述拍摄角度生成用于合成全景图像的抓帧请求。

可选地，所述处理器860还用于，基于所述抓帧请求，获取所述第一摄像头采集的过曝图像，获取所述第二摄像头采集的欠曝图像，以及，获取所述第三摄像头采集的正常图像。

可选地，所述处理器860还用于，基于所述抓帧请求，获取所述第一摄像头采集的彩色图像，以及，获取所述第二摄像头采集的黑白图像。

可选地，所述处理器860还用于，基于所述抓帧请求，获取所述第一摄像头按照第一预设曝光时间和第一曝光亮度参数采集的一张彩色图像，以及，获取所述第二摄像头按照第二预设曝光时间和第二曝光亮度参数采集的三张黑白图像；其中，所述第一预设曝光时间为所述第二预设曝光时间的四倍，所述第二曝光亮度参数为所述第一曝光亮度参数的两倍。

可选地，所述处理器860还用于，在所述DSP采用所述至少两个摄像头同时拍摄的初始图像合成目标图像。

可选地，所述处理器860还用于，在所述ISP采用所述目标图像生成待合成图像；在所述ISP将所述待合成图像发送至AP；所述DSP接收所述AP反馈的待合成图像，并采用所述AP反馈的待合成图像拼接全景图像。

对于移动终端800实施例而言，由于其与方法实施例基本相似，所以描述的比较简单，相关之处参见方法实施例的部分说明即可。

这样，本发明实施例中，在进行全景拍摄时，基于接收到的抓帧请求去获取至少两个摄像头同时采集的初始图像，并采用初始图像合成高质量的目标图像，最后采用多张目标图像拼接全景图像，由于在本发明实施例中基于至少两个摄像头同时采集的初始图像来合成目标图像，因此用于拼接全景图像的目标图像是清晰度高的高质量图像，提升了用户视觉体验。

本领域普通技术人员可以意识到，结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。

所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。

在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。

所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (14)

1.一种全景图像的拍摄方法，应用于具有至少两个摄像头的移动终端，其特征在于，所述方法包括：

当进行全景拍摄时，接收到抓帧请求；

分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

采用所述初始图像生成目标图像；

采用所述目标图像拼接，形成全景图像。

2.根据权利要求1所述的方法，其特征在于，在接收到抓帧请求的步骤之前，还包括：

获取当前用户的拍摄角度；

基于所述拍摄角度生成用于合成全景图像的抓帧请求。

3.根据权利要求2所述的方法，其特征在于，所述至少两个摄像头包括第一摄像头，第二摄像头和第三摄像头，在当前拍摄模式为拍摄高动态范围图像模式时，所述获取所述至少两个摄像头同时拍摄的初始图像的步骤包括：

获取所述第一摄像头采集的过曝图像，获取所述第二摄像头采集的欠曝图像，以及，获取所述第三摄像头采集的正常图像。

4.根据权利要求2所述的方法，其特征在于，所述至少两个摄像头包括第一摄像头和第二摄像头，在当前拍摄模式为拍摄夜景图像模式时，所述获取所述至少两个摄像头同时拍摄的初始图像的步骤包括：

获取所述第一摄像头采集的彩色图像，以及，获取所述第二摄像头采集的黑白图像。

5.根据权利要求2所述的方法，其特征在于，所述至少两个摄像头包括第一摄像头和第二摄像头时，在当前拍摄模式为拍摄防抖图像模式，所述获取所述至少两个摄像头同时拍摄的初始图像的步骤包括：

获取所述第一摄像头按照第一预设曝光时间和第一曝光亮度参数采集的一张彩色图像，以及，获取所述第二摄像头按照第二预设曝光时间和第二曝光亮度参数采集的三张黑白图像；

其中，所述第一预设曝光时间为所述第二预设曝光时间的四倍，所述第二曝光亮度参数为所述第一曝光亮度参数的两倍。

6.根据权利要求3或4或5所述的方法，其特征在于，所述移动终端具有与摄像头和图像处理器ISP相连的数字信号处理器DSP，所述图像处理器ISP与应用处理器AP连接，所述采用所述初始图像生成目标图像的步骤包括：

在所述DSP采用所述初始图像合成目标图像。

7.根据权利要求2所述的方法，其特征在于，所述采用所述目标图像拼接，形成全景图像的步骤包括：

在所述ISP采用所述目标图像生成待合成图像；

所述ISP将所述待合成图像发送至AP；

在所述DSP接收所述AP反馈的待合成图像，并采用所述AP反馈的待合成图像拼接全景图像。

8.一种移动终端，所述移动终端具有至少两个摄像头，其特征在于，所述移动终端包括：

抓帧请求接收模块，用于当进行全景拍摄时，接收到抓帧请求；

初始图像获取模块，用于分别基于所述抓帧请求，获取所述至少两个摄像头同时拍摄的初始图像；

目标图像生成模块，用于采用所述初始图像生成目标图像；

全景图像拼接模块，用于采用所述目标图像拼接，形成全景图像。

9.根据权利要求8所述的移动终端，其特征在于，还包括：

拍摄角度获取模块，用于获取当前用户的拍摄角度；

抓帧请求生成模块，用于基于所述拍摄角度生成用于合成全景图像的抓帧请求。

10.根据权利要求9所述的移动终端，其特征在于，所述至少两个摄像头包括第一摄像头，第二摄像头和第三摄像头，在所述当前拍摄模式为拍摄高动态范围图像模式时，所述初始图像获取模块包括：

第一初始图像获取子模块，用于获取所述第一摄像头采集的过曝图像，获取所述第二摄像头采集的欠曝图像，以及，获取所述第三摄像头采集的正常图像。

11.根据权利要求9所述的移动终端，其特征在于，所述至少两个摄像头包括第一摄像头和第二摄像头，在当前拍摄模式为拍摄夜景图像模式时，所述初始图像获取模块包括：

第二初始图像获取子模块，用于获取所述第一摄像头采集的彩色图像，以及，获取所述第二摄像头采集的黑白图像。

12.根据权利要求9所述的移动终端，其特征在于，所述至少两个摄像头包括第一摄像头和第二摄像头时，在所述当前拍摄模式为拍摄防抖图像模式，所述初始图像获取模块包括：

第三初始图像获取子模块，用于获取所述第一摄像头按照第一预设曝光时间和第一曝光亮度参数采集的一张彩色图像，以及，获取所述第二摄像头按照第二预设曝光时间和第二曝光亮度参数采集的三张黑白图像；

其中，所述第一预设曝光时间为所述第二预设曝光时间的四倍，所述第二曝光亮度参数为所述第一曝光亮度参数的两倍。

13.根据权利要求10或11或12所述的移动终端，其特征在于，所述移动终端具有与摄像头和图像处理器ISP相连的数字信号处理器DSP，所述图像处理器ISP与应用处理器AP连接，所述目标图像生成模块包括：

目标图像合成子模块，用于在所述DSP采用所述至少两个摄像头同时拍摄的初始图像合成目标图像。

14.根据权利要求9所述的移动终端，其特征在于，所述全景图像拼接模块包括：

待合成图像生成子模块，用于在所述ISP采用所述目标图像生成待合成图像；

待合成图像发送子模块，用于所述ISP将所述待合成图像发送至AP。