CN107527360B - 一种图像对齐方法及移动终端 - Google Patents
一种图像对齐方法及移动终端 Download PDFInfo
- Publication number
- CN107527360B CN107527360B CN201710729833.5A CN201710729833A CN107527360B CN 107527360 B CN107527360 B CN 107527360B CN 201710729833 A CN201710729833 A CN 201710729833A CN 107527360 B CN107527360 B CN 107527360B
- Authority
- CN
- China
- Prior art keywords
- reference picture
- pixel
- image
- global
- global adaptation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 230000006978 adaptation Effects 0.000 claims abstract description 141
- 239000013598 vector Substances 0.000 claims description 57
- 238000001914 filtration Methods 0.000 claims description 32
- 230000015654 memory Effects 0.000 claims description 28
- 238000012986 modification Methods 0.000 claims description 20
- 230000004048 modification Effects 0.000 claims description 20
- 238000001514 detection method Methods 0.000 claims description 17
- 239000011159 matrix material Substances 0.000 claims description 12
- 241000208340 Araliaceae Species 0.000 claims description 11
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 claims description 11
- 235000003140 Panax quinquefolius Nutrition 0.000 claims description 11
- 238000006073 displacement reaction Methods 0.000 claims description 11
- 235000008434 ginseng Nutrition 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 10
- 238000010276 construction Methods 0.000 claims description 2
- 230000008569 process Effects 0.000 abstract description 17
- 230000000694 effects Effects 0.000 abstract description 8
- 230000006870 function Effects 0.000 description 8
- 238000012545 processing Methods 0.000 description 8
- 230000001360 synchronised effect Effects 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000009466 transformation Effects 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000000877 morphologic effect Effects 0.000 description 2
- 230000003068 static effect Effects 0.000 description 2
- KLDZYURQCUYZBL-UHFFFAOYSA-N 2-[3-[(2-hydroxyphenyl)methylideneamino]propyliminomethyl]phenol Chemical compound OC1=CC=CC=C1C=NCCCN=CC1=CC=CC=C1O KLDZYURQCUYZBL-UHFFFAOYSA-N 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 201000001098 delayed sleep phase syndrome Diseases 0.000 description 1
- 208000033921 delayed sleep phase type circadian rhythm sleep disease Diseases 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 235000013399 edible fruits Nutrition 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000035800 maturation Effects 0.000 description 1
- 238000011017 operating method Methods 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
- G06T7/337—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods involving reference images or patches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T5/00—Image enhancement or restoration
- G06T5/80—Geometric correction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/38—Registration of image sequences
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
Abstract
本发明提供一种图像对齐方法和移动终端，该方法包括：从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；检测所述全局调整后的非参考图像相对所述参考图像的运动区域；获取所述运动区域的像素点与所述参考图像的像素点的对应关系；根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。本发明提供的图像对齐方法，能够对图像中的局部运动区域进行对齐处理，提高图像对齐效果。
Description
技术领域
本发明涉及通信领域，尤其涉及一种图像对齐方法及移动终端。
背景技术
目前，当摄像机传感器动态范围不足时，会造成拍摄的图像存在最亮处曝光过度和最暗处曝光过少的问题。解决上述问题的一个有效方式是使用高动态范围(HighDynamic Range，HDR)成像技术，在智能手机、数码相机等具有拍照功能的电子设备中通过大量使用HDR成像技术，可以获得质量较好的图像。当前HDR图像普遍是通过一个摄像头先后拍摄多张不同曝光程度的图像，再将多张不同曝光程度的图像合成为一个图像的方式实现的。如果拍摄时摄像头存在运动或者拍摄场景中存在运动物体，那么合成的图像会出现重影或者鬼影，因此对多张不同曝光程度的图像合成之前需要对多张图像和图像中的物体进行对齐处理。现有的大多数对齐算法不对图像中的局部运动区域进行对齐处理，导致图像对齐效果比较差。
发明内容
本发明实施例提供一种图像对齐方法及移动终端，以解决现有图像对齐效果比较差的问题。
第一方面，本发明实施例提供了一种图像对齐方法，所述图像对齐方法包括：
从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。
第二方面，本发明实施例还提供一种移动终端，所述移动终端包括：
确定模块，用于从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
第一获取模块，用于获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测模块，用于检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
第二获取模块，用于获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
调整模块，用于根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。
第三方面，本发明实施例还提供一种移动终端，所述移动终端包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现前述图像对齐方法中的步骤。
第四方面，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现前述图像对齐方法中的步骤。
这样，本发明实施例中，从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；检测所述全局调整后的非参考图像相对所述参考图像的运动区域；获取所述运动区域的像素点与所述参考图像的像素点的对应关系；根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。这样能够对图像中的局部运动区域进行对齐处理，提高图像对齐效果。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种图像对齐方法的流程图；
图2是本发明实施例提供的另一种图像对齐方法的流程图；
图3是本发明实施例提供的一种移动终端结构图；
图4是本发明实施例提供的另一种移动终端结构图；
图5是本发明实施例提供的另一种移动终端结构图；
图6是本发明实施例提供的另一种移动终端结构图；
图7是本发明实施例提供的另一种移动终端结构图；
图8是本发明实施例提供的另一种移动终端结构图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
参见图1，图1是本发明实施例提供的一种图像对齐方法的流程图，所述图像对齐方法可以应用于移动终端，如图1所示，包括以下步骤：
步骤101、从图像序列中确定参考图像。
在本实施例中，所述图像序列包括至少两张不同曝光程度的图像，不同曝光程度的图像对应的亮度不同，可以将图像序列中的图像按照亮度进行排序，选择亮度值处于中间位置的图像作为参考图像。
举例来说，若图像序列中包括第一图像、第二图像、第三图像共3张图像，按照亮度值由大到小的顺序进行排序后，得到排序为第一图像的亮度值大于第二图像的亮度值，第二图像的亮度值大于第三图像的亮度值，则将第二图像确定为参考图像。
步骤102、获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐。
本发明实施例中，所述非参考图像为所述图像序列中除所述参考图像以外的图像。
可选的，所述获取非参考图像相对所述参考图像的全局偏移量的步骤，可以包括以下步骤：获取所述参考图像的纹理特征图及所述非参考图像的纹理特征图；统计所述参考图像的纹理特征图的每一行像素点及每一列像素点的直方图，得到参考直方图合集；根据预先获取的至少两组设置参数，对所述非参考图像的纹理特征图做几何变换，所述几何变换包括平移或旋转中的至少一种，统计每次几何变换后的图像的每一行像素点及每一列像素点的直方图，得到至少两个非参考直方图合集；分别计算每一非参考直方图合集中各个直方图与所述参考直方图合集中对应的直方图之间的误差，并对每一非参考直方图合集中各个直方图与所述参考直方图合集中对应的直方图之间的误差求和，得到每一非参考直方图合集与参考直方图合集之间的总体误差；确定至少两个非参考直方图合集中总体误差最小的非参考直方图合集；将总体误差最小的非参考直方图合集对应的图像进行几何变换时，所依据的设置参数作为所述全局偏移量。
步骤103、检测所述全局调整后的非参考图像相对所述参考图像的运动区域。
在本实施例中，所述全局调整后的非参考图像为所述图像序列中除所述参考图像之外进行全局调整的图像。举例来说，若图像序列中包括第一图像、第二图像、第三图像共3张图像，以第二图像为参考图像，将第一图像和第三图像进行全局对齐调整后，全局调整后的第一图像和全局调整后的第二图像即为全局对齐后的非参考图像。可以分别检测全局对齐后的第一图像相对第二图像的运动区域，也可以检测全局对齐后的第三图像相对第二图像的运动区域。所述运动区域可以为图像中局部微小的运动区域。举例来说，若图像中包括道路及道路上的汽车，则所述运动区域可为图像中的汽车。
步骤104、获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
在本实施例中，步骤104可以包括以下步骤：判断非参考图像与参考图像之间的重合区域，在非参考图像中保留与参考图像重合的图像区域，并删除与参考图像相比多出的非重合图像区域，得到处理后的非参考图像；调整所述处理后的非参考图像的像素值，使得调整像素值后的非参考图像的直方图与参考图像的直方图之间的相似度大于预设阈值，在参考图像中设置特征点，在所述调整像素值后的非参考图像的运动区域搜索与所述特征点相匹配的特征点，根据所述特征点和所述匹配点之间的坐标关系，获取运动区域的像素点与参考图像的像素点的对应关系。
步骤105、根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。
在本实施例中，所述对应关系可以为参考图像的像素点与运动区域中相对应的像素点之间的坐标关系。例如，假设参考图像中的第一像素点所处的坐标位置(12，12)，坐标(12，12)表示参考图像中第12行和第12列的像素点位置，在全局调整后的非参考图像的运动区域中与所述第一像素点相对应的第二像素点的坐标位置为(14，14)，坐标(14，14)表示参考图像中第14行和第14列的像素点位置，则在全局调整后的非参考图像中，将坐标位置(12，12)的像素点的像素值调整为第二像素点的像素值。
通过将运动区域的像素点与参考图像中的像素点进行对齐，可以避免合成图像时出现的伪影或鬼影，提高合成照片质量。
本发明实施例中，上述移动终端可为：手机、平板电脑(Tablet PersonalComputer)、膝上型电脑(Laptop Computer)、个人数字助理(personal digitalassistant，简称PDA)、移动上网装置(Mobile Internet Device，MID)或可穿戴式设备(Wearable Device)等。
本发明实施例的图像对齐方法，从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；检测所述全局调整后的非参考图像相对所述参考图像的运动区域；获取所述运动区域的像素点与所述参考图像的像素点的对应关系；根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。这样可以对图像中的局部运动区域进行对齐处理，提高图像对齐效果。
参见图2，图2是本发明实施例提供的一种图像对齐方法的流程图，所述图像对齐方法可以应用于移动终端。如图2所示，包括以下步骤：
步骤201、从图像序列中确定参考图像。
该步骤201与本发明实施例中的步骤101相同，为避免重复，在此不再赘述。
步骤202、获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐。
该步骤202与本发明实施例中的步骤102相同，为避免重复，在此不再赘述。
步骤203、判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值。
在本实施例中，所述全局调整后的非参考图像为所述图像序列中除所述参考图像之外进行全局调整的图像。举例来说，若全局对齐后的图像序列包括第一图像、第二图像、第三图像共3张图像，以第二图像为参考图像对第一图像和第二图像进行全局对齐调整，则全局调整后的第一图像和全局调整后的第三图像为全局调整后的非参考图像。
在本实施例中，若全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，则执行步骤203。若全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，则流程结束。
步骤204、判断所述全局调整后的非参考图像的像素点的亮度是否小于所述全局调整后的非参考图像相同位置的像素点的亮度。
可以理解的是，若所述全局调整后的非参考图像的曝光值大于参考图像的曝光值，在正常情况下，所述全局调整后的非参考图像的像素点的像素值应该大于参考图像相同位置的像素点的像素值，在出现运动的情况下，才可能出现所述全局调整后的非参考图像的像素点的像素值小于参考图像相同位置的像素点的像素值。若所述全局调整后的非参考图像的曝光值小于参考图像的曝光值，在正常情况下，所述全局调整后的非参考图像的像素点的像素值应该小于参考图像相同位置的像素点的像素值，在出现运动的情况下，才可能出现所述全局调整后的非参考图像的像素点的像素值大于参考图像相同位置的像素点的像素值。
在本实施例中，若所述全局调整后的非参考图像的像素点的亮度小于所述参考图像相同位置的像素点的亮度，则执行步骤204。若所述全局调整后的非参考图像的像素点的亮度小于所述参考图像相同位置的像素点的亮度，则可以流程结束，也可以判断非参考图像中的其余像素点的亮度是否大于所述参考图像相同位置的像素点的亮度，直到判断出非参考图像的像素点的亮度小于所述参考图像相同位置的像素点的亮度，执行步骤204。
步骤205、确定所述全局调整后的非参考图像的所述像素点为运动像素点。
在本实施例中，根据步骤203和步骤204可以初步判断一个像素点是否为运动像素点。在全局调整后的非参考图像中初步判断出多个运动像素点后，可以进一步对运动像素点进行确认，提高运动像素点的准确性。
可选的，在步骤203之后，还可以执行以下步骤：
若所述全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否大于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度大于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点。
步骤206、判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角。
可以理解的是，不同曝光值图片相同位置上像素点的颜色不会发生变化，正常情况下，不同曝光值的非参考图像和参考图像的相同位置像素点的颜色应该一样，在出现运动的情况下，才可能出现非参考图像的像素点的颜色向量(R1，G1、B1)和参考图像的相同位置像素点的颜色向量(R0，G0、B0)构成的向量夹角大于预设角度。因而，可以运动像素点的颜色向量与非参考图像中相同位置像素点的颜色向量之间的向量夹角，进一步判断步骤205中确定的运动像素点是否为真实情况中的运动像素点，可以提高判断运动像素点的准确率。
在本实施例中，若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则执行步骤206。若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角小于预设夹角，可以流程结束，也可以判断其他的运动像素点的颜色向量与参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角，直到判断出运动像素点的颜色向量与参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，执行步骤206。本实施例以流程结束为例，但并不以此为限。
步骤207、确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域。
在本实施例中，确定的至少两个目标运动像素点之间可能会有间隙，出现不完整和不连续的情况，通过形态学开闭操作对目标运动像素点进行形态学操作，可以获取连续的运动区域。
在本实施例中，通过对目标运动像素点进行形态学操作，可以快速确定运动区域，提高获取运动区域的效率。
步骤207、获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
可选的，该步骤207可以包括以下步骤：
根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系，根据所述映射关系修改所述全局调整后的非参考图像的像素值，使得所述修改像素值后的非参考图像的直方图与所述参考图像的直方图的相似度大于预设阈值；
根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域，在所述子图区域设置特征点，以所述特征点为中心设置特征区域；
在目标区域搜索与所述特征区域匹配的匹配区域，将所述匹配区域的中心点作为所述特征点的匹配点，所述目标区域为所述修改像素值后的非参考图像中的预设搜索范围与所述运动区域的交集区域；
根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
在本实施例中，在根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系之前还可以包括以下步骤：判断所述全局调整后的非参考图像与参考图像之间的重合区域，在非参考图像中删除与参考图像相比多出的非重合图像区域。
在本实施例中，所述根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域的步骤，可以包括以下步骤：在所述全局调整后的非参考图像中确定所述运动区域的最大坐标位置和最小坐标位置，根据所述最大坐标位置和最小坐标位置在参考图像中确定对应的子图区域，也可以进一步将子图区域分割为至少两个子矩形区域。
在本实施例中，所述在所述子图区域设置特征点的步骤可以包括以下步骤：在所述子图中检测出与所述运动区域的相似度超过预设数值的连通区域；判断所述子图区域是否小于第一预设阈值，若所述子图区域小于第一预设阈值，则将所述子图区域中的像素点均设置为特征点；若所述子图区域大于第一预设阈值，在所述子图区域间隔第一预设距离选取像素点，判断所述选取的像素点是否在所述连通区域中；若所述选取的像素点在所述连通区域中，将所述选取的像素点及距离所述选取的像素点第二预设距离的像素点作为所述特征点，所述第二预设距离小于所述第一预设距离。
补充说明的是，可以对设置的特征点进行微调。具体来说，可以删除与周围像素点的像素值的差异不大的特征点。举例来说，可以计算特征点的像素值与周围8个像素点的像素值之间的误差的平方和，若计算的所述平方和小于预设值时，删除对应的特征点。
本实施例中，所述以所述特征点为中心设置特征区域的步骤可以包括以下步骤：以每个特征点为中心设置预设长度和预设宽度的备选区域；判断所述备选区域处于所述连通区域的面积是否大于预设面积；若所述备选区域处于所述连通区域的面积大于预设面积，则调整所述预设长度和预设宽度，使得全部面积处于所述连通区域的备选区域作为所述特征区域；若所述备选区域处于所述连通区域的面积小于预设面积，则调整所述预设长度和预设宽度，使得全部面积不处于所述连通区域的备选区域作为所述特征区域。
本实施例中，所述预设搜索范围为在所述修改像素值后的非参考图像中与所述特征点处于相同位置的像素点为中心、向外扩展预设长度和预设宽度的矩形搜索范围。举例来说，若在参考图像中设置的特征点的坐标为(100，100)，(100，100)表示在参考图像中第100行和第100列的交点所在的像素点位置，预设长度和预设宽度均为50个像素点，则预设搜索范围为在在所述修改像素值后的非参考图像中以坐标为(100，100)的像素点为中心，向上、下、左、右四个方向扩展50个像素点得到的矩形范围，即以坐标(50，50)、坐标(50，150)、坐标(150，50)、坐标(150，150)为四个顶点的矩形范围。
本实施例中，所述根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系的步骤，包括以下步骤：
根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵；
对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵；
根据滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵确定所述运动区域中的像素点与所述参考图像的像素点的对应关系。
具体来说，所述根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵的步骤包括：确定所述特征点相对所述匹配点的横向偏移量和纵向偏移量，根据所述横向偏移量、纵向偏移量及所述特征点的位置分别构建第一图像矩阵、第二图像矩阵及第三图像矩阵，所述第一图像矩阵、第二图像矩阵及第三图像矩阵的行数和列数分别和所述目标子图区域的像素点行数和列相同，在第一图像矩阵中，在特征点位置设为横向偏移量，其余位置设为0，在第二图像矩阵中，在特征点位置设为纵向偏移量，其余位置设为0，在第三图像矩阵中，有特征点的位置设为1，其余位置设为0；以所述子图区域作为引导图像，通过平滑滤波器对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、调整后第二图像矩阵及调整后第三图像矩阵；将滤波后的第一图像矩阵除以滤波后的第三图像矩阵得到的第四矩阵，所述第四矩阵中的每个元素即为子图区域对应位置的像素点在非参考图像中运动区域的横向偏移量；将滤波后的第二图像矩阵除以滤波后的第三图像矩阵得到的第五矩阵，所述第五矩阵中的每个元素即为子图区域对应位置的像素点在非参考图像中运动区域的纵向偏移量。
本发明实施例的移动终端的操作方法，从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值，若所述全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否小于所述参考图像相同位置的像素点的亮度；若所述全局调整后的非参考图像的所述像素点的亮度小于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点；判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角；若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域；获取所述运动区域的像素点与所述参考图像的像素点的对应关系；根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。这样可以对图像中的局部运动区域进行对齐处理，提高图像对齐效果。
参见图3，图3是本发明实施提供的一种移动终端的结构图，如图3所示，移动终端300包括确定模块301、第一获取模块302、检测模块303、第二获取模块304和调整模块305，其中：
确定模块301，用于从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
第一获取模块302，用于获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测模块303，用于检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
第二获取模块304，用于获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
调整模块305，用于根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。
可选的，参见图4，图4是本发明实施例提供的另一种移动终端结构图。所述检测模块303包括：
第一判断子模块3031，用于判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值，若所述全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否小于所述参考图像相同位置的像素点的亮度；
第一确定子模块3032，用于若所述全局调整后的非参考图像的所述像素点的亮度小于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点；
第二判断子模块3033，用于判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角；
第一获取子模块3034，用于若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域。
可选的，参见图5，图5是本发明实施例提供的另一种移动终端结构图。所述检测模块303还包括：
第三判断子模块3035，用于若所述全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否大于所述参考图像相同位置的像素点的亮度；
第二确定子模块3036，用于若所述全局调整后的非参考图像的所述像素点的亮度大于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点。
可选的，参见图6，图6是本发明实施例提供的另一种移动终端结构图。所述第二获取模块304包括：
修改子模块3041，用于根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系，根据所述映射关系修改所述全局调整后的非参考图像的像素值，使得所述修改像素值后的非参考图像的直方图与所述参考图像的直方图的相似度大于预设阈值；
设置子模块3042，用于根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域，在所述子图区域设置特征点，以所述特征点为中心设置特征区域；
搜索子模块3043，用于在目标区域搜索与所述特征区域匹配的匹配区域，将所述匹配区域的中心点作为所述特征点的匹配点，所述目标区域为所述修改像素值后的非参考图像中的预设搜索范围与所述运动区域的交集区域；
第二获取子模块3044，用于根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
可选的，参见图7，图7是本发明实施例提供的另一种移动终端结构图。所述第二获取子模块3044包括：
构建单元30441，用于根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵；
滤波单元30442，用于对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵；
确定单元30443，用于根据滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵确定所述运动区域中的像素点与所述参考图像的像素点的对应关系。
移动终端300能够实现图1至图2的方法实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。
本发明实施例的移动终端300，从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；检测所述全局调整后的非参考图像相对所述参考图像的运动区域；获取所述运动区域的像素点与所述参考图像的像素点的对应关系；根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。这样可以对图像中的局部运动区域进行对齐处理，提高图像对齐效果。
参见图8，图8是本发明实施提供的移动终端的结构图，如图8所示，移动终端800包括：至少一个处理器801、存储器802、至少一个用户接口803和网络接口804。移动终端800中的各个组件通过总线***805耦合在一起。可理解，总线***805用于实现这些组件之间的连接通信。总线***805除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图8中将各种总线都标为总线***805，移动终端800还包括摄像头806，摄像头806可以通过总线***805与移动终端的各个组件连接。
其中，用户接口803可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者触摸屏等。
可以理解，本发明实施例中的存储器802可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，DRRAM)。本文描述的***和方法的存储器802旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中，存储器802存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集：操作***8021和应用程序8022。
其中，操作***8021，包含各种***程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序8022，包含各种应用程序，例如媒体播放器(Media Player)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序8022中。
在本发明实施例中，移动终端800还包括：存储在存储器802上并可以在处理器801上运行的计算机程序，计算机程序被处理器801执行时实现如下步骤：
从全局对齐后的图像序列中确定参考图像；
从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。
上述本发明实施例揭示的方法可以应用于处理器801中，或者由处理器801实现。处理器801可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器801中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器801可以是通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器802，处理器801读取存储器802中的信息，结合其硬件完成上述方法的步骤。
可以理解的是，本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits，ASIC)、数字信号处理器(Digital Signal Processing，DSP)、数字信号处理设备(DSP Device，DSPD)、可编程逻辑设备(Programmable LogicDevice，PLD)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本文所述功能的模块(例如过程、函数等)来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
可选的，所述处理器801执行所述检测所述全局调整后的非参考图像相对所述参考图像的运动区域，包括：
判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值，若所述全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否小于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度小于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点；
判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角；
若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域。
可选的，计算机程序被处理器801执行时还可以实现如下步骤：
若所述全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否大于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度大于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点。
可选的，所述处理器801执行所述获取所述运动区域的像素点与所述参考图像的像素点的对应关系，包括：
根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系，根据所述映射关系修改所述全局调整后的非参考图像的像素值，使得所述修改像素值后的非参考图像的直方图与所述参考图像的直方图的相似度大于预设阈值；
根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域，在所述子图区域设置特征点，以所述特征点为中心设置特征区域；
在目标区域搜索与所述特征区域匹配的匹配区域，将所述匹配区域的中心点作为所述特征点的匹配点，所述目标区域为所述修改像素值后的非参考图像中的预设搜索范围与所述运动区域的交集区域；
根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
可选的，所述处理器801执行所述根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系，包括：
根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵；
对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵；
根据滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵确定所述运动区域中的像素点与所述参考图像的像素点的对应关系。
移动终端800能够实现前述实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。
本发明实施例的移动终端800，从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；检测所述全局调整后的非参考图像相对所述参考图像的运动区域；获取所述运动区域的像素点与所述参考图像的像素点的对应关系；根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。这样可以对图像中的局部运动区域进行对齐处理，提高图像对齐效果。
本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如下步骤：
从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐。
可选的，所述检测所述全局调整后的非参考图像相对所述参考图像的运动区域的步骤，包括：
判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值，若所述全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否小于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度小于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点；
判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角；
若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域。
可选的，所述判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值的步骤之后，所述检测所述全局调整后的非参考图像相对所述参考图像的运动区域的步骤，进一步包括：
若所述全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否大于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度大于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点。
可选的，所述获取所述运动区域的像素点与所述参考图像的像素点的对应关系的步骤，包括：
根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系，根据所述映射关系修改所述全局调整后的非参考图像的像素值，使得所述修改像素值后的非参考图像的直方图与所述参考图像的直方图的相似度大于预设阈值；
根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域，在所述子图区域设置特征点，以所述特征点为中心设置特征区域；
在目标区域搜索与所述特征区域匹配的匹配区域，将所述匹配区域的中心点作为所述特征点的匹配点，所述目标区域为所述修改像素值后的非参考图像中的预设搜索范围与所述运动区域的交集区域；
根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
可选的，所述根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系的步骤，包括：
根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵；
对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵；
根据滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵确定所述运动区域中的像素点与所述参考图像的像素点的对应关系。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本发明实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。
Claims (10)
1.一种图像对齐方法，其特征在于，包括：
从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐；
所述检测所述全局调整后的非参考图像相对所述参考图像的运动区域的步骤，包括：
判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值，若所述全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否小于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度小于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点；
判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角；
若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域。
2.如权利要求1所述的图像对齐方法，其特征在于，所述判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值的步骤之后，所述检测所述全局调整后的非参考图像相对所述参考图像的运动区域的步骤，进一步包括：
若所述全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否大于所述参考图像相同位置的像素点的亮度；
若所述全局调整后的非参考图像的所述像素点的亮度大于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点。
3.如权利要求1-2任一项所述的图像对齐方法，其特征在于，所述获取所述运动区域的像素点与所述参考图像的像素点的对应关系的步骤，包括：
根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系，根据所述映射关系修改所述全局调整后的非参考图像的像素值，使得修改像素值后的非参考图像的直方图与所述参考图像的直方图的相似度大于预设阈值；
根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域，在所述子图区域设置特征点，以所述特征点为中心设置特征区域；
在目标区域搜索与所述特征区域匹配的匹配区域，将所述匹配区域的中心点作为所述特征点的匹配点，所述目标区域为所述修改像素值后的非参考图像中的预设搜索范围与所述运动区域的交集区域；
根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
4.如权利要求3所述的图像对齐方法，其特征在于，所述根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系的步骤，包括：
根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵；
对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵；
根据滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵确定所述运动区域中的像素点与所述参考图像的像素点的对应关系。
5.一种移动终端，其特征在于，包括：
确定模块，用于从图像序列中确定参考图像，所述图像序列包括至少两张不同曝光程度的图像；
第一获取模块，用于获取非参考图像相对所述参考图像的全局偏移量，根据所述全局偏移量对所述非参考图像进行全局调整，使得所述全局调整后的非参考图像与所述参考图像全局对齐，所述非参考图像为所述图像序列中除所述参考图像以外的图像；
检测模块，用于检测所述全局调整后的非参考图像相对所述参考图像的运动区域；
第二获取模块，用于获取所述运动区域的像素点与所述参考图像的像素点的对应关系；
调整模块，用于根据所述对应关系调整所述运动区域的像素点，使得所述调整后的运动区域的像素点与所述参考图像的像素点对齐；
所述检测模块包括：
第一判断子模块，用于判断所述全局调整后的非参考图像的曝光值是否大于所述参考图像的曝光值，若所述全局调整后的非参考图像的曝光值大于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否小于所述参考图像相同位置的像素点的亮度；
第一确定子模块，用于若所述全局调整后的非参考图像的所述像素点的亮度小于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点；
第二判断子模块，用于判断所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角是否大于预设夹角；
第一获取子模块，用于若所述运动像素点的颜色向量与所述参考图像相同位置的像素点的颜色向量之间的向量夹角大于预设夹角，则确定所述运动像素点为目标运动像素点，根据所述目标运动像素点获取所述运动区域。
6.如权利要求5所述的移动终端，其特征在于，所述检测模块还包括：
第三判断子模块，用于若所述全局调整后的非参考图像的曝光值小于所述参考图像的曝光值，判断所述全局调整后的非参考图像的像素点的亮度是否大于所述参考图像相同位置的像素点的亮度；
第二确定子模块，用于若所述全局调整后的非参考图像的所述像素点的亮度大于所述参考图像相同位置的像素点的亮度，则确定所述全局调整后的非参考图像的所述像素点为运动像素点。
7.如权利要求5-6任一项所述的移动终端，其特征在于，所述第二获取模块包括：
修改子模块，用于根据所述参考图像的直方图和所述全局调整后的非参考图像的直方图获取映射关系，根据所述映射关系修改所述全局调整后的非参考图像的像素值，使得修改像素值后的非参考图像的直方图与所述参考图像的直方图的相似度大于预设阈值；
设置子模块，用于根据所述运动区域在所述修改像素值后的非参考图像中的位置，在所述参考图像中选择子图区域，在所述子图区域设置特征点，以所述特征点为中心设置特征区域；
搜索子模块，用于在目标区域搜索与所述特征区域匹配的匹配区域，将所述匹配区域的中心点作为所述特征点的匹配点，所述目标区域为所述修改像素值后的非参考图像中的预设搜索范围与所述运动区域的交集区域；
第二获取子模块，用于根据所述特征点与所述匹配点，获取所述运动区域的像素点与所述参考图像的像素点的对应关系。
8.如权利要求7所述的移动终端，其特征在于，所述第二获取子模块包括：
构建单元，用于根据所述特征点相对所述匹配点的横向偏移量、纵向偏移量和所述特征点的坐标位置构建第一图像矩阵、第二图像矩阵及第三图像矩阵；
滤波单元，用于对所述第一图像矩阵、所述第二图像矩阵及所述第三图像矩阵进行平滑滤波，得到滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵；
确定单元，用于根据滤波后的第一图像矩阵、滤波后第二图像矩阵及滤波后第三图像矩阵确定所述运动区域中的像素点与所述参考图像的像素点的对应关系。
9.一种移动终端，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序；其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至4任意一项所述的图像对齐方法中的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储计算机程序，所述计算机程序被处理器执行时实现如权利要求1至4任一项所述的图像对齐方法中的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710729833.5A CN107527360B (zh) | 2017-08-23 | 2017-08-23 | 一种图像对齐方法及移动终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201710729833.5A CN107527360B (zh) | 2017-08-23 | 2017-08-23 | 一种图像对齐方法及移动终端 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN107527360A CN107527360A (zh) | 2017-12-29 |
| CN107527360B true CN107527360B (zh) | 2019-05-17 |
Family
ID=60682171
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201710729833.5A Active CN107527360B (zh) | 2017-08-23 | 2017-08-23 | 一种图像对齐方法及移动终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN107527360B (zh) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109492637A (zh) * | 2018-11-06 | 2019-03-19 | 西安艾润物联网技术服务有限责任公司 | 识别区的调整方法、识别仪终端及可读存储介质 |
| CN109685839B (zh) * | 2018-12-20 | 2023-04-18 | 广州华多网络科技有限公司 | 图像对齐方法、移动终端以及计算机存储介质 |
| CN109819163A (zh) * | 2019-01-23 | 2019-05-28 | 努比亚技术有限公司 | 一种图像处理控制方法、终端及计算机可读存储介质 |
| CN110060213B (zh) * | 2019-04-09 | 2021-06-15 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN110930440B (zh) * | 2019-12-09 | 2023-06-27 | Oppo广东移动通信有限公司 | 图像对齐方法、装置、存储介质及电子设备 |
| CN110992412B (zh) * | 2019-12-09 | 2023-02-28 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN110913143B (zh) * | 2019-12-09 | 2021-04-02 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
| CN113808227B (zh) * | 2020-06-12 | 2023-08-25 | 杭州普健医疗科技有限公司 | 一种医学影像对齐方法、介质及电子设备 |
| CN115393405A (zh) * | 2021-05-21 | 2022-11-25 | 北京字跳网络技术有限公司 | 一种图像对齐方法及装置 |
| CN114155285B (zh) * | 2021-10-29 | 2023-08-18 | 上海海栎创科技股份有限公司 | 基于灰度直方图的图像配准方法 |
| CN114821030B (zh) * | 2022-04-11 | 2023-04-04 | 苏州振旺光电有限公司 | 行星图像处理方法、***以及装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012170006A (ja) * | 2011-02-16 | 2012-09-06 | Olympus Corp | 画像処理装置、画像処理方法、画像処理プログラム、及び、撮像装置 |
| CN102693538A (zh) * | 2011-02-25 | 2012-09-26 | 微软公司 | 生成高动态范围图像的全局对准 |
| CN105551061A (zh) * | 2015-12-09 | 2016-05-04 | 天津大学 | 高动态范围图像融合中保留无鬼影运动物体处理方法 |
| CN106447701A (zh) * | 2015-08-05 | 2017-02-22 | 佳能株式会社 | 用于图像相似性确定、对象检测和跟踪的方法和装置 |
Family Cites Families (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104023228A (zh) * | 2014-06-12 | 2014-09-03 | 北京工业大学 | 一种基于全局运动估计的自适应室内视觉定位方法 |
| US9355439B1 (en) * | 2014-07-02 | 2016-05-31 | The United States Of America As Represented By The Secretary Of The Navy | Joint contrast enhancement and turbulence mitigation method |
| US9665927B2 (en) * | 2015-06-03 | 2017-05-30 | Samsung Electronics Co., Ltd. | Method and apparatus of multi-frame super resolution robust to local and global motion |
-
2017
- 2017-08-23 CN CN201710729833.5A patent/CN107527360B/zh active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012170006A (ja) * | 2011-02-16 | 2012-09-06 | Olympus Corp | 画像処理装置、画像処理方法、画像処理プログラム、及び、撮像装置 |
| CN102693538A (zh) * | 2011-02-25 | 2012-09-26 | 微软公司 | 生成高动态范围图像的全局对准 |
| CN106447701A (zh) * | 2015-08-05 | 2017-02-22 | 佳能株式会社 | 用于图像相似性确定、对象检测和跟踪的方法和装置 |
| CN105551061A (zh) * | 2015-12-09 | 2016-05-04 | 天津大学 | 高动态范围图像融合中保留无鬼影运动物体处理方法 |
Non-Patent Citations (5)
| Title |
|---|
| A.Vavilin etal..Recursive HDR image generation from differently exposed images based on local image properties.《Intemational Conference on Control,Automation and Systems》.2008, |
| 像素级多源图像融合方法研究;刘羽;《中国博士学位论文全文数据库 信息科技辑》;20160815;第73-80页 |
| 基于点特征的图像配准算法研究;赵辉;《中国优秀博硕士学位论文全文数据库 (硕士) 信息科技辑》;20061215;第22-41、53-63页 |
| 基于特征点的图像配准与拼接技术研究;杨占龙;《中国博士学位论文全文数据库 信息科技辑》;20090715;第75-89页 |
| 运动属性分类及非冗余信息;刘薇 等;《机械科学与技术》;20111231;第30卷(第12期);第2082-2085页 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN107527360A (zh) | 2017-12-29 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107527360B (zh) | 一种图像对齐方法及移动终端 | |
| CN111557016B (zh) | 用于生成包括模拟的运动模糊的图像的方法和设备 | |
| US10872420B2 (en) | Electronic device and method for automatic human segmentation in image | |
| Engel et al. | Direct sparse odometry | |
| CN106548455B (zh) | 用于调整图像的亮度的设备和方法 | |
| CN105898143B (zh) | 一种运动物体的抓拍方法及移动终端 | |
| JP7146091B2 (ja) | ビデオへの情報埋め込み方法、コンピュータ機器及びコンピュータプログラム | |
| CN105847674B (zh) | 一种基于移动终端的预览图像处理方法及移动终端 | |
| US20170365100A1 (en) | Augmented Reality Occlusion | |
| CN107659769B (zh) | 一种拍摄方法、第一终端及第二终端 | |
| CN107592453B (zh) | 一种拍摄方法及移动终端 | |
| CN106027900A (zh) | 一种拍照方法及移动终端 | |
| EP3125544A1 (en) | Image display device and image display system | |
| CN106060422B (zh) | 一种图像曝光方法及移动终端 | |
| CN106027851A (zh) | 基于图像梯度的图像滤波 | |
| CN109472828A (zh) | 一种定位方法、装置、电子设备及计算机可读存储介质 | |
| CN107222737B (zh) | 一种深度图像数据的处理方法及移动终端 | |
| CN106683100A (zh) | 一种图像分割去雾方法及终端 | |
| CN105827963B (zh) | 一种拍照过程中场景变化检测方法及移动终端 | |
| CN109691080A (zh) | 拍摄图像方法、装置和终端 | |
| CN106791433B (zh) | 一种图像处理方法及电子设备 | |
| CN108876806A (zh) | 基于大数据分析的目标跟踪方法和***、存储介质及设备 | |
| CN109819176A (zh) | 一种拍摄方法、***、装置、电子设备及存储介质 | |
| CN111524086A (zh) | 运动物体检测装置、运动物体检测方法、存储介质 | |
| Garg et al. | Analysis of seam carving technique: limitations, improvements and possible solutions |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |