CN113191213A - 一种高分辨率遥感影像新增建筑物检测方法 - Google Patents

一种高分辨率遥感影像新增建筑物检测方法 Download PDF

Info

Publication number
CN113191213A
CN113191213A CN202110389794.5A CN202110389794A CN113191213A CN 113191213 A CN113191213 A CN 113191213A CN 202110389794 A CN202110389794 A CN 202110389794A CN 113191213 A CN113191213 A CN 113191213A
Authority
CN
China
Prior art keywords
building
image
resolution
phase
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202110389794.5A
Other languages
English (en)
Other versions
CN113191213B (zh
Inventor
孙希延
肖钰
纪元法
黄建华
付文涛
白杨
郭宁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guilin University of Electronic Technology
Original Assignee
Guilin University of Electronic Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guilin University of Electronic Technology filed Critical Guilin University of Electronic Technology
Priority to CN202110389794.5A priority Critical patent/CN113191213B/zh
Publication of CN113191213A publication Critical patent/CN113191213A/zh
Application granted granted Critical
Publication of CN113191213B publication Critical patent/CN113191213B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • G06V20/176Urban or other man-made structures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F18/00Pattern recognition
    • G06F18/20Analysing
    • G06F18/24Classification techniques
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/048Activation functions
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods
    • G06N3/084Backpropagation, e.g. using gradient descent
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/26Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
    • G06V10/267Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion by performing operations on regions, e.g. growing, shrinking or watersheds
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/46Descriptors for shape, contour or point-related descriptors, e.g. scale invariant feature transform [SIFT] or bags of words [BoW]; Salient regional features
    • G06V10/462Salient features, e.g. scale invariant feature transforms [SIFT]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Multimedia (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Molecular Biology (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Bioinformatics & Computational Biology (AREA)
  • Evolutionary Biology (AREA)
  • Bioinformatics & Cheminformatics (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明公开了一种高分辨率遥感影像新增建筑物检测方法,通过对获得的第二时相GF2影像其进行超像素分割,得到超像素对象;接着用该时相GF2影像构建建筑物数据集;将所述建筑物提取数据集输入多尺度约束编解码网络训练,获取第二时相建筑物二值图,所述多尺度约束编解码网络,采用双路径体系结构分别获取全局信息和局部信息,结合全局和局部信息可以更好的从复杂背景中区分建筑物以及细化建筑物的细节,同时以兼顾不同大小的建筑物,将获得的超像素对象与所述建筑物二值图结合获取第二时相建筑物目标对象;然后使用IRMAD算法获得像素级变化检测结果,基于建筑物目标对象和像素级变化检测结果进行空间位置叠加分析,实现新增建筑物检测。

Description

一种高分辨率遥感影像新增建筑物检测方法
技术领域
本发明涉及遥感影像处理技术领域,尤其涉及一种高分辨率遥感影像新增建筑物检测方法。
背景技术
建筑物作为基础地理数据库中重要的人工地物目标,对其实现自动变化检 测一直是人工智能、摄影测量与遥感等领域的研究热点与难点。快速,精准的 建筑物变化检测在城市规划、震后救灾等方面具有重要意义。
建筑物变化检测主要有三种策略:先对不同时期的遥感影像进行建筑物提 取,然后利用提取结果进行变化检测;利用建筑物特征直接进行建筑物变化检 测;先进行变化检测,再判断变化区域中属于建筑物的部分。在建筑物提取的 基础上直接进行变化检测,其结果往往过于依赖建筑物提取精度。采用建筑物 特征直接进行建筑物变化检测的关键点在于建筑物特征的有效性,其特征的稳 定性和适用性还有待提高。故采用建筑物提取和变化检测同步进行的策略,分 别独立完成建筑物提取和所有地物的变化检测,然后结合两种结果获得建筑物 变化检测结果。
传统的遥感影像建筑物提取方法主要通过经验地设计一个恰当的特征来表 达“什么是建筑物”,并创建相应的特征集用于建筑物的自动识别和提取。常用 的特征指标包括光谱、长度、边缘、形状、纹理、阴影等,但这些特征会随着 季节、光照、大气条件、传感器质量、尺度、建筑物风格和环境发生较明显的 变化。这种凭经验设计特征的方法常常只能处理特定的数据,而无法真正做到 自动化,因此,目前开始研究将深度学习应用在遥感影像建筑物提取上,利用深 度学习自动学习多层次特征表示的能力来替代传统的人工经验设计特征的方 法,然而,由于高分辨率遥感影像细节特征过于丰富以及真实场景中建筑物结 构复杂、形状多样、尺度不一等因素的影响,使得建筑物提取不完整、边缘效 果差。另一方面,基于深度学习的方法强烈依赖于大容量、高精度的样本数据 库,使用开源数据集,只能对理论和方法进行定量比较,无法用于实际应用。
发明内容
本发明的目的在于提供一种高分辨率遥感影像新增建筑物检测方法,旨在解 决现有技术中的高分辨率遥感影像新增建筑物检测在使用深度学习提取建筑物 时对建筑物特征提取准确度低且无专有数据集的技术问题。
为实现上述目的,本发明采用的一种高分辨率遥感影像新增建筑物检测方 法,包括下列步骤:
选取两期时相可用的高分辨率GF2影像,对将其中的第一时相高分辨率 GF2影像留存比对,并对第二时相高分辨率GF2影像进行超像素分割,获得超 像素对象;
使用所述第二时相高分辨率GF2影像构建建筑物提取数据集;
将所述建筑物提取数据集输入多尺度约束编解码网络训练,获取第二时相 建筑物二值图;
所述超像素对象与所述第二时相建筑物二值图结合获取第二时相建筑物目 标对象;
对所述第一时相高分辨率GF2影像和所述第二时相高分辨率GF2影像差异 化处理,获得像素级变化检测结果;
将所述像素级变化检测结果和所述第二时相建筑物目标对象进行空间位置 分析,实现新增建筑物检测。
其中,使用所述第二时相高分辨率GF2影像构建建筑物提取数据集,包括 下列步骤:
对所述第二时相高分辨率GF2影像处理获得形态学建筑物指数灰度图;
计算所述超像素对象内的建筑物指数均值,设定阈值进行分割后获得建筑 物疑似图斑;
所述建筑物疑似图斑通过人工修改转化为最终建筑物标签;
随机裁剪并扩充所述高分辨率GF2影像和所述最终建筑物标签,获得建筑 物提取数据集;
所述建筑物提取数据集划分为训练集、验证集和测试集。
其中,在随机裁剪并扩充所述高分辨率GF2影像和所述最终建筑物标签, 获得建筑物提取数据集过程中,将大尺寸的影像分割为512*512指定大小的数 据集,通过水平翻转、竖直翻转以及对角翻转进行数据扩充。
其中,所述建筑物提取数据集中训练集、验证集和测试集的比例为6:2:2。
其中,所述多尺度约束编解码网络包括编码器和解码器,所述编码器由双 路径体系结构和多尺度分支构成,所述双路径体系结构包括局部信息路径和全 局信息路径,所述局部信息路径使用膨胀卷积提取特征,所述全局信息路径采 用VGG16提取特征,所述多尺度分支通过不同下采样倍数获取多尺度信息。
其中,所述解码器采用多路径特征融合模块,所述多路径特征融合模块为 不同感受视野的特征图分配不同权重。
其中,在对所述第一时相高分辨率GF2影像和所述第二时相高分辨率GF2 影像差异化处理,获得像素级变化检测结果过程中,使用IRMAD算法进行差异 化处理。
其中,在将所述像素级变化检测结果和所述第二时相建筑物目标对象进行 空间位置分析,实现新增建筑物检测的过程中,使用所述像素级变化检测结果 和所述第二时相建筑物目标对象空间位置叠加后的交集进行具体判别。
本发明的一种高分辨率遥感影像新增建筑物检测方法,通过对获得的第二 时相GF2影像其进行超像素分割,得到超像素对象;接着用该时相GF2影像构 建建筑物数据集;将所述建筑物提取数据集输入多尺度约束编解码网络训练, 获取第二时相建筑物二值图,所述多尺度约束编解码网络,采用双路径体系结 构分别获取全局信息和局部信息,结合全局和局部信息可以更好的从复杂背景 中区分建筑物以及细化建筑物的细节,同时以兼顾不同大小的建筑物,将获得 的超像素对象与所述建筑物二值图结合获取第二时相建筑物目标对象;然后使 用IRMAD算法获得像素级变化检测结果,基于建筑物目标对象和像素级变化检 测结果进行空间位置叠加分析,实现新建建筑物检测,解决了现有技术中的高 分辨率遥感影像新增建筑物检测在使用深度学习提取建筑物时对建筑物特征提 取准确度低且无专有数据集的技术问题。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例 或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中 的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出 创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明的一种高分辨率遥感影像新增建筑物检测方法的流程示意图。
图2是本发明的具体实施例的第二时相影像分割结果图。
图3是本发明的具体实施例的形态学建筑物指数特征图。
图4是本发明的具体实施例的建筑物疑似图斑图。
图5是本发明的具体实施例的最终建筑物标签图。
图6是本发明的多尺度约束编解码网络的网络结构图。
图7是本发明的多尺度约束编解码网络的膨胀卷积示意图。
图8是本发明的多尺度约束编解码网络的语义信息路径结构图。
图9是本发明的多尺度约束编解码网络的特征融合模块示意图。
图10是本发明的具体实施例的第二时相建筑物目标对象图。
图11是本发明的具体实施例的像素级变化检测结果图。
图12是本发明的具体实施例的新增建筑物检测结果图。
具体实施方式
下面详细描述本发明的实施例,所述实施例的示例在附图中示出,其中自 始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元 件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本发明,而不 能理解为对本发明的限制。
在本发明的描述中,需要理解的是,术语“长度”、“宽度”、“上”、“下”、 “前”、“后”、“左”、“右”、“竖直”、“水平”、“顶”、“底”“内”、“外”等指示 的方位或位置关系为基于附图所示的方位或位置关系,仅是为了便于描述本发 明和简化描述,而不是指示或暗示所指的装置或元件必须具有特定的方位、以 特定的方位构造和操作,因此不能理解为对本发明的限制。此外,在本发明的 描述中,“多个”的含义是两个或两个以上,除非另有明确具体的限定。
请参阅图1,本发明提出了一种高分辨率遥感影像新增建筑物检测方法,包 括下列步骤:
S1:选取两期时相可用的高分辨率GF2影像,将其中的第一时相高分辨率 GF2影像留存比对,并对第二时相高分辨率GF2影像进行超像素分割,获得超 像素对象;
S2:使用所述第二时相高分辨率GF2影像构建建筑物提取数据集;
S3:将所述建筑物提取数据集输入多尺度约束编解码网络训练,获取第二 时相建筑物二值图;
S4:所述超像素对象与所述第二时相建筑物二值图结合获取第二时相建筑 物目标对象;
S5:对所述第一时相高分辨率GF2影像和所述第二时相高分辨率GF2影像 差异化处理,获得像素级变化检测结果;
S6:将所述像素级变化检测结果和所述第二时相建筑物目标对象进行空间 位置分析,实现新增建筑物检测。
使用所述第二时相高分辨率GF2影像构建建筑物提取数据集,包括下列步 骤:
S21:对所述第二时相高分辨率GF2影像处理获得形态学建筑物指数灰度图;
S22:计算所述超像素对象内的建筑物指数均值,设定阈值进行分割后获得建 筑物疑似图斑;
S23:所述建筑物疑似图斑通过人工修改转化为最终建筑物标签;
S24:随机裁剪并扩充所述高分辨率GF2影像和所述最终建筑物标签,获得 建筑物提取数据集;
S25:所述建筑物提取数据集划分为训练集、验证集和测试集。
在随机裁剪并扩充所述高分辨率GF2影像和所述最终建筑物标签,获得建 筑物提取数据集过程中,将大尺寸的影像分割为512*512指定大小的数据集, 通过水平翻转、竖直翻转以及对角翻转进行数据扩充。
所述建筑物提取数据集中训练集、验证集和测试集的比例为6:2:2。
所述多尺度约束编解码网络包括编码器和解码器,所述编码器由双路径体 系结构和多尺度分支构成,所述双路径体系结构包括局部信息路径和全局信息 路径,所述局部信息路径使用膨胀卷积提取特征,所述全局信息路径采用VGG16 提取特征,所述多尺度分支通过不同下采样倍数获取多尺度信息。
所述解码器采用多路径特征融合模块,所述多路径特征融合模块为不同感 受视野的特征图分配不同权重。
在对所述第一时相高分辨率GF2影像和所述第二时相高分辨率GF2影像差 异化处理,获得像素级变化检测结果过程中,使用IRMAD算法进行差异化处理。
在将所述像素级变化检测结果和所述第二时相建筑物目标对象进行空间位 置分析,实现新增建筑物检测的过程中,使用所述像素级变化检测结果和所述 第二时相建筑物目标对象空间位置叠加后的交集进行具体判别。
请参阅图2至图12,本发明提出了一种高分辨率遥感影像新增建筑物检测 方法的具体实施例:
研究区为广西壮族自治区桂林市叠彩区,选取该区的一个典型子区进行分 析,数据来自2016和2018两期GF2影像,将对所述第二时相影像,即2018年 GF2影像进行超像素分割、构建数据集、多尺度约束编解码网络(MSCNet)提 取第二时相建筑物目标对象,对所述两期影像影像,即2016和2018年GF2影 像进行变化检测得到像素级变化检测结果以及对所述像素级变化检测结果和所 述建筑物目标对象进行空间位置分析实现新增建筑物检测。
(A)超像素分割
均值漂移Mean Shift算法包括两个步骤,超像素初分割和分割区域的合并。
超像素初分割相当于借助模点搜索技术实现初分割,具体过程为:(1)设 定坐标空间和光谱空间的核函数带宽;(2)利用高斯核函数计算Mean-Shift向 量;(3)判断向量的模是否大于指定阈值,从而进行迭代运算并确定模点位置。
分割区域的合并则是在超像素初分割完成后将空间相邻且光谱相近的区域 合并为同一对象,实现影像分割,分割结果如图2所示。
(B)构建数据集
(1)计算形态学建筑物指数特征图:
形态学建筑物指数(MBI)建立在建筑物边缘光谱变化较大,而其内部光谱变 化较小的基础上。该指数的构建考虑到了建筑物的形状、方向、亮度和对比度 等特征。MBI建立的步骤如下:
1)计算亮度值
Figure BDA0003016149890000071
式中:K为可见光光谱波段数目,bandk(x)为第k波段在像素x处的亮度值, 因为可见光波段对建筑物的光谱信息影响较大,所以这里选择可见光波段每个 像素的最大值作为该像素的亮度值。
2)形态学白帽重构
Figure BDA0003016149890000072
式中:
Figure BDA0003016149890000073
为对亮度图像b进行形态学开运算,d和s分别代表线性结构元 素的方向和尺度。由于建筑物和道路的光谱信息比较相近,而道路的方向较少, 一般是沿一个或者两个方向延伸,建筑物的方向则较多,为将道路与建筑物很 好地区分开来,故选择多个方向和尺度的线性结构元素。
3)计算形态学剖面MP
Figure BDA0003016149890000074
4)计算微分形态学剖面DMP
DMPW-TH(d,s)=|WPW-TH(d,s+Δs)-MPW-TH(d,s) (4)
式中:Smin≤Δs≤Smax
5)计算形态学建筑物指数MBI
Figure BDA0003016149890000075
式中:S=((Smax-Smin)/Δs)+1,D为计算建筑物剖面时的方向数。
MBI建立的依据是微分形态学剖面具有较高的局部对比度,所以MBI特征 值较大的即为建筑物,如图3。
(2)计算每个超像素内的MBI均值,当均值大于某一指定阈值时,可认 为该超像素为建筑物疑似图斑,生成图4,手动修改后生成最终建筑物标签,如 图5。
(3)随机裁剪和扩充:本发明采用随机裁剪的方式对预处理后的影像和标 签样本进行裁剪,将大尺寸的影像分割为512*512指定大小的数据集,通过水 平翻转、竖直翻转以及对角翻转进行数据扩充,最后按照6:2:2的比例划分 为训练集、验证集和测试集用于之后的训练和测试评估。
(C)多尺度约束编解码网络(MSCNet)提取建筑物
网络包括一个编码器和解码器,编码器由双路径体系结构和多尺度分支构 成。双路径体系结构分别处理局部信息和全局信息,这两条路径在这里分别定 义为局部信息路径和全局信息路径。具体来说,局部信息路径采用膨胀卷积减 少下采样过程中分辨率降低的问题,保留较多的局部信息。全局信息路径采用 VGG16提取特征,增大感受野获得全局信息,同时在该路径设计多尺度分支, 通过不同下采样倍数获取多尺度信息。
在解码部分引入专门的特征融合模块将获得的多种特征进行融合。之后采 取两种策略约束各路径上参数的更新。一是在上采样步骤中每条路径后边增加 约束(这里的约束是指某一路径的预测和相应的地面真实之间的优化目标)。通 过多路径约束来更新参数,因此可以在反向传播和权重更新中利用多分辨率标 签,防止参数偏向单个约束,进一步加强各个路径的特征表示。具体来说,在 Sigmoid层之后的1×1卷积层被用于从具有一定分辨率的特征图中获得密集预 测,相应的标签通过双线性插值从地面真实下采样。最后,使用整体损失来让 网络学会将多分辨率段标签图集成到最终预测中;二是将各个路径上的最终特 征图进行融合,形成含有4通道的特征图,最后通过1×1的卷积和sigmoid函数得到最终的预测图,通过这种策略,最终的预测图汇聚了多路径特征,约束了 多路径更新参数,各个路径在反向传播和模型训练中都起到了积极的作用,网 络结构示意图如图6所示。
(1)编码器:
为了在保持一定感受视野的同时保持原始输入图像大小并编码丰富的局部 信息,本发明算法在局部信息路径使用了膨胀卷积。该路径共包含三层,前两 层包括一个步幅为1的卷积,然后是批量归一化和ReLU,第三层是膨胀卷积。 因此,此路径提取的输出特征图保持了原始图像的大小。由于特征图的空间大 小很大,它编码了丰富的局部信息。普通卷积的表达式为
Figure BDA0003016149890000091
式中,O(x,y)是原始图像在点(x,y)处的像素值,H(x,y)是与其相乘的卷积核, 大小为w×h。
膨胀卷积计算为
Figure BDA0003016149890000092
式中,l为膨胀因子,H′(x,y)为膨胀卷积核。
从式(6)和式(7)可以看出,膨胀卷积实质上就是对卷积核进行了0填充,这 样做可以在增加卷积核感受视野的同时保留原始的像素信息,增大了分辨率。 若卷积核的尺寸为k,膨胀率为l,则膨胀卷积的实际有效尺寸为k+(k-1)×(l-1)。 与相同大小的普通卷积相比,膨胀卷积不仅扩大了感受视野,还保持了与普通 卷积相同的分辨率,示意图如图7所示。
全局信息路径采用VGG16提取特征,增大感受野获得全局信息,同时在该 路径设计多尺度分支,通过不同下采样倍数获取多尺度信息。具体来说,在区 块1后分成三条并行独立的分支,快速下采样特征图以获得大的感受野。每条 分支旨在将特征编码为特定的分辨率,充分利用不同尺度下的语义信息。请参 阅图8,用来简单表示全局信息路径和多尺度分支结构,用Nsr代表该阶段特征 层,其中s代表所处的分支,r代表下采样次数,第s分支子网特征图分辨率为 原图尺寸除以2r。原图最高分辨率作为区块1的输入,然后经过并行分支,最终 各分支输出的特征图N12、N23、N34的尺寸大小分别为原图的1/4、1/8、1/16。
(2)解码器:
不同尺度的建筑物,感受视野大小的重要性不同。对较大的物体,大感受 视野获取的特征比较重要,而对较小的物体,较大感受视野的特征会采集过多 的周边信息,引来误差。传统的特征融合方法一般是级联或相加,这样的简单 做法没有考虑不同特征图的感受视野不同,忽略了特征之间的特异性。对此, 本发明采用的多路径特征融合模块为不同感受视野的特征图分配不同权重,实 现了更好的特征融合,如图9所示。
首先,将输入的两幅或者多福特征图在通道维度上级联起来。其次,将级 联后的特征图通过大小为3×3的卷积核,实现特征图信息的初步融合,并将得 到的特征图进行全局池化操作,提取每幅特征图的信息。然后,将得到的特征 图通过大小为1×1的卷积核,让网络根据每幅特征图的整体信息学习权重。 最后通过sigmoid函数得到最后的权重,并与原始特征图相乘。通过特征融合模 块,为不同感受视野下的特征图分配了权重,使得不同感受视野下的特征特异 性得到了体现,让特征更好地进行融合。
由于输出的目标是建筑物和非建筑物的二元分类,因此选择sigmoid函数来 生成每一层的预测:
Figure BDA0003016149890000101
Figure BDA0003016149890000102
w∈Rc和b∈R1分别表示权重和偏差。预测yi,j的范围限于[0,1]。
为了在训练迭代期间更好地收敛,选择二进制交叉熵来计算每个预测和相 对地面真实之间的第k个约束(Ck),而不是简单的均方误差(MSE)。公式是:
Figure BDA0003016149890000111
其中hk和wk是第k个预测yk和地面真实值gk的高度和宽度。如果观测的是 类别1,
Figure BDA0003016149890000112
的值为1;否则,该值为0。
Figure BDA0003016149890000113
是像素属于类别1的预测概率。
通过顺序卷积和上采样块和跳过连接,MSCNet模型生成金字塔状要素图 层。
在策略一中,对于特征金字塔中的每个特征层,在sigmoid激活之后,应用 1×1卷积运算的单个核来生成该层的预测。然后,每个层的约束可以通过每个 预测和相关地面真实之间的二进制交叉熵来计算。根据距最终卷积层的距离, 这些约束被表示为Cmain、C′main、Csub1、Csub2和Csub3。因此,MSCNet策略一的最 终损失可表述为:
Loss=α×Cmain+γCsub1+λCsub2+σCsub3 (11)
其中α、γ、λ和σ之和设为1.0。
对于策略二,将特征金字塔中的每个特征层进行融合,形成含有4通道的 特征图,最后通过1×1的卷积和sigmoid函数得到最终的预测图。因此,MSCNet 策略二的最终损失可表述为:
Loss′=Cmain′ (12)
通过小批量随机梯度下降(SGD)和反向传播(BP)算法训练上述所有层以最 小化最终损失,MSCNet模型学习如何从输入多通道遥感图像映射到等尺寸二进 制分割图。最后将预测的二值图结合超像素对象得到建筑物目标对象,如图10 所示。
(D)基于IRMAD的像素级变化检测
使用IRMAD算法得到2个时相遥感影像的差异图,然后选取合适的阈值, 将差异图上的像素划分为变化像素或非变化像素。基于IRMAD的像素级变化检 测基本原理为:引入与MAD分量相关的随机变量T并通过卡方分布概率函数 对像素进行迭代加权,使得在迭代过程中未变化的像素可以得到较大权重,再 利用新的权重进行下一次迭代直至收敛,生成差异图,图中越亮的区域发生变 化的可能性越大,最后指定一阈值来判断每个像素是否发生变化,生成像素级 变化检测结果,请参阅图11。
(E)空间位置叠加法的具体判别过程如下:
(1)判断后时相影像建筑物提取结果与变化像素的交集情况,如式(12)所 示。
Figure BDA0003016149890000121
式中,
Figure BDA0003016149890000122
表示后时相影像第i个建筑物对象,C是像素级变化检测结果,
Figure BDA0003016149890000123
则代表该对象与后时相建筑物提取结果的交集包含的像素数目。
(2)根据
Figure BDA0003016149890000124
大小,设定规则判定新增建筑物:
Figure BDA0003016149890000125
超过
Figure BDA0003016149890000126
建筑物对 象面积一半,该对象为新建建筑物,否则该建筑物对象未发生变化。图12为新 增建筑物检测结果。
以上所揭露的仅为本发明一种较佳实施例而已,当然不能以此来限定本发 明之权利范围,本领域普通技术人员可以理解实现上述实施例的全部或部分流 程,并依本发明权利要求所作的等同变化,仍属于发明所涵盖的范围。

Claims (8)

1.一种高分辨率遥感影像新增建筑物检测方法,其特征在于,包括下列步骤:
选取两期时相可用的高分辨率GF2影像,将其中的第一时相高分辨率GF2影像留存比对,并对第二时相高分辨率GF2影像进行超像素分割,获得超像素对象;
使用所述第二时相高分辨率GF2影像构建建筑物提取数据集;
将所述建筑物提取数据集输入多尺度约束编解码网络训练,获取第二时相建筑物二值图;
所述超像素对象与所述第二时相建筑物二值图结合获取第二时相建筑物目标对象;
对所述第一时相高分辨率GF2影像和所述第二时相高分辨率GF2影像差异化处理,获得像素级变化检测结果;
将所述像素级变化检测结果和所述第二时相建筑物目标对象进行空间位置分析,实现新增建筑物检测。
2.如权利要求1所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,使用所述第二时相高分辨率GF2影像构建建筑物提取数据集,包括下列步骤:
对所述第二时相高分辨率GF2影像处理获得形态学建筑物指数灰度图;
计算所述超像素对象内的建筑物指数均值,设定阈值进行分割后获得建筑物疑似图斑;
所述建筑物疑似图斑通过人工修改转化为最终建筑物标签;
随机裁剪并扩充所述高分辨率GF2影像和所述最终建筑物标签,获得建筑物提取数据集;
所述建筑物提取数据集划分为训练集、验证集和测试集。
3.如权利要求2所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,在随机裁剪并扩充所述高分辨率GF2影像和所述最终建筑物标签,获得建筑物提取数据集过程中,将大尺寸的影像分割为512*512指定大小的数据集,通过水平翻转、竖直翻转以及对角翻转进行数据扩充。
4.如权利要求3所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,所述建筑物提取数据集中训练集、验证集和测试集的比例为6:2:2。
5.如权利要求4所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,所述多尺度约束编解码网络包括编码器和解码器,所述编码器由双路径体系结构和多尺度分支构成,所述双路径体系结构包括局部信息路径和全局信息路径,所述局部信息路径使用膨胀卷积提取特征,所述全局信息路径采用VGG16提取特征,所述多尺度分支通过不同下采样倍数获取多尺度信息。
6.如权利要求5所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,所述解码器采用多路径特征融合模块,所述多路径特征融合模块为不同感受视野的特征图分配不同权重。
7.如权利要求6所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,在对所述第一时相高分辨率GF2影像和所述第二时相高分辨率GF2影像差异化处理,获得像素级变化检测结果过程中,使用IRMAD算法进行差异化处理。
8.如权利要求7所述的高分辨率遥感影像新增建筑物检测方法,其特征在于,在将所述像素级变化检测结果和所述第二时相建筑物目标对象进行空间位置分析,实现新增建筑物检测的过程中,使用所述像素级变化检测结果和所述第二时相建筑物目标对象空间位置叠加后的交集进行具体判别。
CN202110389794.5A 2021-04-12 2021-04-12 一种高分辨率遥感影像新增建筑物检测方法 Active CN113191213B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110389794.5A CN113191213B (zh) 2021-04-12 2021-04-12 一种高分辨率遥感影像新增建筑物检测方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110389794.5A CN113191213B (zh) 2021-04-12 2021-04-12 一种高分辨率遥感影像新增建筑物检测方法

Publications (2)

Publication Number Publication Date
CN113191213A true CN113191213A (zh) 2021-07-30
CN113191213B CN113191213B (zh) 2023-01-03

Family

ID=76975505

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110389794.5A Active CN113191213B (zh) 2021-04-12 2021-04-12 一种高分辨率遥感影像新增建筑物检测方法

Country Status (1)

Country Link
CN (1) CN113191213B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113807301A (zh) * 2021-09-26 2021-12-17 武汉汉达瑞科技有限公司 一种新增建设用地自动提取方法及自动提取***
CN113901877A (zh) * 2021-09-13 2022-01-07 广州市城市规划勘测设计研究院 遥感影像建筑物变化检测方法、装置、设备及存储介质
CN115880575A (zh) * 2022-10-26 2023-03-31 中国电子科技集团公司第五十四研究所 结合变化信息和建筑特征的遥感影像新增建筑提取方法

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110136170A (zh) * 2019-05-13 2019-08-16 武汉大学 一种基于卷积神经网络的遥感影像建筑物变化检测方法
CN110781775A (zh) * 2019-10-10 2020-02-11 武汉大学 一种多尺度特征支持的遥感影像水体信息精确分割方法
CN110889449A (zh) * 2019-11-27 2020-03-17 中国人民解放军国防科技大学 一种增强边缘的、多尺度的遥感影像建筑物语义特征提取方法
CN111145131A (zh) * 2019-11-28 2020-05-12 中国矿业大学 一种基于多尺度生成式对抗网络的红外和可见光图像融合方法
CN111259797A (zh) * 2020-01-16 2020-06-09 南开大学 一种基于点的迭代式遥感图像道路提取方法
CN111860233A (zh) * 2020-07-06 2020-10-30 中国科学院空天信息创新研究院 基于选择注意力网络的sar图像复杂建筑物提取方法及***
CN112001293A (zh) * 2020-08-19 2020-11-27 四创科技有限公司 结合多尺度信息和编解码网络的遥感影像地物分类方法
CN112287832A (zh) * 2020-10-29 2021-01-29 江苏科博空间信息科技有限公司 一种基于高分辨率遥感影像的城镇违法建筑物检测方法
CN112598675A (zh) * 2020-12-25 2021-04-02 浙江科技学院 基于改进全卷积神经网络的室内场景语义分割方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110136170A (zh) * 2019-05-13 2019-08-16 武汉大学 一种基于卷积神经网络的遥感影像建筑物变化检测方法
CN110781775A (zh) * 2019-10-10 2020-02-11 武汉大学 一种多尺度特征支持的遥感影像水体信息精确分割方法
CN110889449A (zh) * 2019-11-27 2020-03-17 中国人民解放军国防科技大学 一种增强边缘的、多尺度的遥感影像建筑物语义特征提取方法
CN111145131A (zh) * 2019-11-28 2020-05-12 中国矿业大学 一种基于多尺度生成式对抗网络的红外和可见光图像融合方法
CN111259797A (zh) * 2020-01-16 2020-06-09 南开大学 一种基于点的迭代式遥感图像道路提取方法
CN111860233A (zh) * 2020-07-06 2020-10-30 中国科学院空天信息创新研究院 基于选择注意力网络的sar图像复杂建筑物提取方法及***
CN112001293A (zh) * 2020-08-19 2020-11-27 四创科技有限公司 结合多尺度信息和编解码网络的遥感影像地物分类方法
CN112287832A (zh) * 2020-10-29 2021-01-29 江苏科博空间信息科技有限公司 一种基于高分辨率遥感影像的城镇违法建筑物检测方法
CN112598675A (zh) * 2020-12-25 2021-04-02 浙江科技学院 基于改进全卷积神经网络的室内场景语义分割方法

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
张田: "基于深度学习空谱特征提取的高光谱图像分类", 《中国优秀硕士学位论文全文数据库 工程科技Ⅱ辑》 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113901877A (zh) * 2021-09-13 2022-01-07 广州市城市规划勘测设计研究院 遥感影像建筑物变化检测方法、装置、设备及存储介质
CN113807301A (zh) * 2021-09-26 2021-12-17 武汉汉达瑞科技有限公司 一种新增建设用地自动提取方法及自动提取***
CN113807301B (zh) * 2021-09-26 2024-06-07 武汉汉达瑞科技有限公司 一种新增建设用地自动提取方法及自动提取***
CN115880575A (zh) * 2022-10-26 2023-03-31 中国电子科技集团公司第五十四研究所 结合变化信息和建筑特征的遥感影像新增建筑提取方法
CN115880575B (zh) * 2022-10-26 2023-05-16 中国电子科技集团公司第五十四研究所 结合变化信息和建筑特征的遥感影像新增建筑提取方法

Also Published As

Publication number Publication date
CN113191213B (zh) 2023-01-03

Similar Documents

Publication Publication Date Title
CN113191213B (zh) 一种高分辨率遥感影像新增建筑物检测方法
CN109241913B (zh) 结合显著性检测和深度学习的船只检测方法及***
CN111191736B (zh) 基于深度特征交叉融合的高光谱图像分类方法
CN110136170B (zh) 一种基于卷积神经网络的遥感影像建筑物变化检测方法
CN111259906B (zh) 含多级通道注意力的条件生成对抗遥感图像目标分割方法
CN111625608B (zh) 一种基于gan模型根据遥感影像生成电子地图的方法、***
CN110705457A (zh) 一种遥感影像建筑物变化检测方法
CN111368769B (zh) 基于改进锚点框生成模型的船舶多目标检测方法
CN112084869B (zh) 一种基于紧致四边形表示的建筑物目标检测方法
CN111738111A (zh) 基于多分支级联空洞空间金字塔的高分辨遥感图像的道路提取方法
CN111382686B (zh) 一种基于半监督生成对抗网络的车道线检测方法
CN111291826B (zh) 基于相关性融合网络的多源遥感图像的逐像素分类方法
CN111401455B (zh) 一种基于Capsules-Unet模型的遥感图像深度学习分类方法和***
CN113887515A (zh) 一种基于卷积神经网络的遥感滑坡识别方法及***
CN115359366A (zh) 基于参数优化的遥感图像目标检测方法
CN114494821A (zh) 基于特征多尺度感知与自适应聚合的遥感影像云检测方法
CN115359372A (zh) 一种基于光流网络的无人机视频运动目标检测方法
CN112215847A (zh) 基于对抗学习多尺度特征的重叠染色体自动分割方法
CN113569724A (zh) 基于注意力机制和扩张卷积的道路提取方法及***
CN114550161A (zh) 一种端到端的三维目标稀疏检测方法
CN115187786A (zh) 一种基于旋转的CenterNet2目标检测方法
CN114092824A (zh) 结合密集注意力和并行上采样的遥感图像道路分割方法
Meyer et al. Revealing the potential of spectral and textural predictor variables in a neural network-based rainfall retrieval technique
CN116912661A (zh) 一种具备域泛化能力的目标轨迹预测方法及***
CN116343058A (zh) 基于全局协同融合的多光谱和全色卫星影像地表分类方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant