CN109671031A - 一种基于残差学习卷积神经网络的多光谱图像反演方法 - Google Patents

一种基于残差学习卷积神经网络的多光谱图像反演方法 Download PDF

Info

Publication number
CN109671031A
CN109671031A CN201811531615.1A CN201811531615A CN109671031A CN 109671031 A CN109671031 A CN 109671031A CN 201811531615 A CN201811531615 A CN 201811531615A CN 109671031 A CN109671031 A CN 109671031A
Authority
CN
China
Prior art keywords
channel
image
neural networks
convolutional neural
residual error
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811531615.1A
Other languages
English (en)
Other versions
CN109671031B (zh
Inventor
陈媛媛
李墅娜
常晓丽
景宁
王志斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
North University of China
Original Assignee
North University of China
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by North University of China filed Critical North University of China
Priority to CN201811531615.1A priority Critical patent/CN109671031B/zh
Publication of CN109671031A publication Critical patent/CN109671031A/zh
Application granted granted Critical
Publication of CN109671031B publication Critical patent/CN109671031B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00Image enhancement or restoration
    • G06T5/50Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10032Satellite or aerial image; Remote sensing
    • G06T2207/10036Multispectral image; Hyperspectral image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Biomedical Technology (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Mathematical Physics (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)

Abstract

本发明涉及多光谱成像领域的图像反演问题领域,更具体而言,涉及一种基于残差学习卷积神经网络的多光谱图像反演方法。该方法首先任选一个通道作为主通道(其它通道作为从通道),利用传统的方法(调焦或图像去模糊算法)获取主通道的清晰图像,然后将该清晰图像输入到各个从通道残差神经网络模型,即可计算出各个从通道残差神经网络模型的输出(即从通道图像与主通道图像间的残差),最后将该残差与主通道图像相加,即可反演出各个从通道的清晰图像。

Description

一种基于残差学习卷积神经网络的多光谱图像反演方法
技术领域
本发明涉及多光谱成像领域的图像反演问题领域,更具体而言,涉及一种基于残差学习卷积神经网络的多光谱图像反演方法。
背景技术
已有的研究发现,多光谱成像***的成像质量通常较差,难以获取各个通道的清晰图像。主要原因是由离焦(out-of-focus)、衍射方向波长展宽等因素引起。针对该问题,国内外许多研究者展开了深入的研究。针对离焦模糊问题,早期的研究通过调焦方式消除色差导致的成像模糊,该方法主要通过一定算法计算图像清晰度并采用步进电机对前置光学镜头调焦,但在宽光谱范围的成像测量中,完成一次光谱成像测量耗时较长,对运动物体进行测量效果较差;近年来,较为流行的处理思路是通过图像处理的方式将图像去模糊问题转化为一个带先验知识约束的优化问题。沈会良等人针对光谱成像***失焦模糊问题,利用通道间的图像相关性提取模糊图像的参考图像先验知识,并作为约束添加到优化问题的正则项中。但是该方法需要选取所有通道中最清晰通道作为参考通道;另外,该方法采用高斯型模糊核函数近似描述失焦模糊的退化过程,虽然可以简化问题,但由于模型不能准确逼近实际的失焦点扩散函数,导致离焦模糊图像复原无法取得预期效果。针对衍射方向波长展宽引起的模糊问题,赵慧洁等人提出了期望值最大化迭代去模糊方法,该方法对于同一个换能器取得较好结果,但不同换能器、不同超声驱动频率需采用不同点扩散函数来解决宽光谱范围内衍射方向成像模糊问题。
发明内容
为了克服现有技术中所存在的不足,本发明提供一种基于残差学习卷积神经网络的多光谱图像反演方法,解决现有多光谱成像***中普遍存在的清晰图像获取困难问题。
为了解决上述技术问题,本发明所采用的技术方案为:
一种基于残差学习卷积神经网络的多光谱图像反演方法,包括以下步骤:
S1、利用多光谱成像***分别采集K个目标物体的主通道图像与从通道清晰图像,其中,多光谱成像***包括N个通道,任意选择第i∈{1,2,...,N}个通道作为主通道,剩余通道j∈{1,2,...,i-1,i+1,...,N}作为从通道;建立主通道与从通道图像库其中,分别表示第k个目标物体的主通道和从通道清晰图像;
S2、将图像库S中的主通道和从通道清晰图像提供给卷积神经网络模型学习,对图像库S执行旋转和添加噪声两种操作算子的处理;
S3、构造与每个从通道对应的卷积神经网络模型Mj,j∈{1,2,...,i-1,i+1,...N}训练所需的样本对;
S4、设计基于残差学习的卷积神经网络模型结构;
S5、卷积神经网络模型训练学习,针对从通道集合中的每个通道j∈{1,2,...i-1,i+1,...,N},利用随机梯度下降算法,建立每个从通道的卷积神经网络模型Mj,j∈{1,2,...,i-1,i+1,...,N};
S6、对新目标物体第j个从通道图像的反演:若要反演新目标物体L的第j个个从通道的清晰图像,则首先获取主通道第i个通道的清晰图像接着,将主通道第i个通道的清晰图像输入到第j个建立好的卷积神经网络模型Mj,计算该模型的输出残差图像最后,反演从通道集合中的第j个通道的清晰图像
S7、针对从通道集合中的每个通道j∈{1,2,...,i-1,i+1,...,N},重复S6,直至反演出所有从通道的清晰图像。
进一步地,所述S1中采集图像通过硬件手段或者软件手段使得采集的图像清晰。
进一步地,所述通过硬件手段捕获清晰图像,包括但不限于采用步进电机等对前置光学镜头调焦;所述通过软件手段捕获清晰图像,包括但不限于利用图像去模糊等方法进行清晰图像的恢复。
进一步地,所述S2中图像库S执行旋转和添加噪声两种操作算子的处理的具体操作方式为:将图库S中的每一对主/从通道图像都进行相同角度的旋转或添加相同噪声。
进一步地,所述旋转的角度包括但不限于0°、45°、90°、135°、180°、225°、270°、315°。
进一步地,所述噪声的添加方式为加性或乘性噪声;噪声类型为线性或非线性;噪声的参数为不同的参数组合。
进一步地,所述S3中每个样本对包括输入和输出两部分,其中每个样本对的输入为第i个主通道清晰图像Imaster,每个样本对的输出为第j个从通道与主通道之间的残差图像
进一步地,所述S4中卷积神经网络模型的结构包含一个输入层、若干个卷积层、池化层、激活函数层、全连接层和输出层。
进一步地,所述S4中卷积神经网络模型的拓扑结构,包括但不限于LeNet、AlexNet、Vgg16/Vgg19、GoogLeNet、ResNet等已有的结构类型,也包含自定义的拓扑结构类型。
与现有技术相比,本发明所具有的有益效果为:
本发明提供了一种基于残差学习卷积神经网络的多光谱图像反演方法。将多光谱成像***中各个通道间图像的相关性问题转化为基于残差学习的卷积神经网络建模问题,通过模型的训练,利用任一通道的清晰图像,可以反演出所有通道的图像。该方法无需对各个通道进行调焦或利用图像去模糊方法进行处理,只需获得一个通道的清晰图像并将其作为主通道图像,利用该方法即可快速地反演出其它各个通道(从通道)的清晰图像,从而可以大大提升多光谱成像***的速度。利用该方法,可以从任意一个通道的清晰图像出发,即可反演出其它各个通道的清晰图像。
附图说明
图1为基于残差学习卷积神经网络多光谱图像反演方法示意图;
图2为基于残差学习的卷积神经网络拓扑结构示意图;
图3为20个目标物体多光谱图像库;
图4为新目标物体多光谱真实图像;
图5为残差图像;
图6为卷积神经网络结构参数;
图7为新目标物体多光谱图像反演结果;
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1-2所示,一种基于残差学习卷积神经网络的多光谱图像反演方法,包括以下步骤:
S1、建立主通道与从通道图像库。利用多光谱成像***分别采集K个目标物体的主通道图像与从通道清晰图像,其中,多光谱成像***包括N个通道,任意选择第i∈{1,2,...,N}个通道作为主通道,剩余通道j∈{1,2,...,i-1,i+1,...,N}作为从通道;建立主通道与从通道图像库其中,分别表示第k个目标物体的主通道和从清晰图像;在捕获图像时,可通过硬件手段或者软件手段使得采集的图像清晰,避免出现图像模糊问题。所述通过硬件手段捕获清晰图像,包括但不限于采用步进电机等对前置光学镜头调焦;所述通过软件手段捕获清晰图像,包括但不限于利用图像去模糊等方法进行清晰图像的恢复。
S2、数据增强。将图像库S中的主通道和从通道清晰图像提供给卷积神经网络模型学习,对图像库S执行旋转和添加噪声两种操作算子的处理:将图库S中的每一对主/从通道图像都进行相同角度的旋转或添加相同噪声;所述旋转的角度包括但不限于0°、45°、90°、135°、180°、225°、270°、315°;所述噪声的添加方式为加性或乘性噪声;噪声类型为线性或非线性;噪声的参数为不同的参数组合;
S3、构造与每个从通道对应的卷积神经网络模型Mj,j∈{1,2,...,i-1,i+1,...N}训练所需的样本对,每个样本对包括输入和输出两部分,其中每个样本对的输入为第i个主通道清晰图像Imaster,每个样本对的输出为第j个从通道与主通道之间的残差图像
S4、设计基于残差学习的卷积神经网络模型结构。卷积神经网络模型的拓扑结构,包括但不限于LeNet、AlexNet、Vgg16/Vgg19、GoogLeNet、ResNet等已有的结构类型,也包含自定义的拓扑结构类型;卷积神经网络模型的结构包含一个输入层、若干个卷积层、池化层、激活函数层、全连接层和输出层;
S5、卷积神经网络模型训练学习。针对从通道集合中的每个通道j∈{1,2,...i-1,i+1,...,N},利用随机梯度下降算法,建立每个从通道的卷积神经网络模型Mj,j∈{1,2,...,i-1,i+1,...,N};
S6、对新目标物体第j个从通道图像的反演。若要反演新目标物体L的第j个个从通道的清晰图像,则首先获取主通道第i个通道的清晰图像接着,将主通道第i个通道的清晰图像输入到第j个建立好的卷积神经网络模型Mj,计算该模型的输出残差图像最后,反演从通道集合中的第j个通道的清晰图像
S7、针对从通道集合中的每个通道j∈{1,2,...,i-1,i+1,...,N},重复S6,直至反演出所有从通道的清晰图像。
在本实施例中,图像库S中共包含20个目标物体,每个目标物体采集了31张不同通道(波长)的灰度图像,波长范围为400nm-700nm,每间隔10nm采集一个通道的图像。
图3为已建立好的包含20个目标物体的多光谱图像库,用于训练基于残差的卷积神经网络模型;图4为新目标物体的多光谱真实图像,该图像为测试集样本,不参与卷积神经网络模型的学习过程,仅用于测试多光谱图像反演结果的好坏。
在本实施例中,不失一般性,将第一个通道(即波长为400nm)作为主通道,剩余30个通道作为从通道。图5列出了多光谱图像库中某一个目标物体各个从通道图像与主通道图像之间的残差图像。
在本实施例中,卷积神经网络的结构及参数如图6所列。从中可以直观地看出,该卷积神经网络模型共包含41层,其中第1一层为输入层,第2层至第40层为交替的卷积层和激活函数层,第41层为输出层。训练算法采用随机梯度下降法,损失函数为均方根误差。
新目标物体所有从通道(即从第2~31个通道,对应波长为410~700nm)的图像反演结果如图7所列。其中,为了评价反演图像与真实图像之间的相似度,这里利用结构相似度SSIM(structural similarity index)作为评价指标。SSIM的定义如下:
其中,μX为图像X的平均值;μY为图像Y的平均值;为图像X的方差;为图像Y的方差;σXY为图像X和图像Y的协方差;c1=(k1L)2,c2=(k2L)2为用来维持稳定的常数;L为像素值的动态范围;k1=0.01,k2=0.03。
从图7中可以看出,反演图像与真实图像之间的SSIM均高于0.70,最高可达0.90左右,表明利用本发明提出的方法,可以准确地反演出各个从通道的图像。
上面仅对本发明的较佳实施例作了详细说明,但是本发明并不限于上述实施例,在本领域普通技术人员所具备的知识范围内,还可以在不脱离本发明宗旨的前提下作出各种变化,各种变化均应包含在本发明的保护范围之内。

Claims (9)

1.一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于,包括以下步骤:
S1、利用多光谱成像***分别采集K个目标物体的主通道图像与从通道清晰图像,其中,多光谱成像***包括N个通道,任意选择第i∈{1,2,...,N}个通道作为主通道,剩余通道j∈{1,2,...,i-1,i+1,...,N}作为从通道;建立主通道与从通道图像库其中,分别表示第k个目标物体的主通道和从通道清晰图像;
S2、将图像库S中的主通道和从通道清晰图像提供给卷积神经网络模型学习,对图像库S执行旋转和添加噪声两种操作算子的处理;
S3、构造与每个从通道对应的卷积神经网络模型Mj,j∈{1,2,...,i-1,i+1,...N}训练所需的样本对;
S4、设计基于残差学习的卷积神经网络模型结构;
S5、卷积神经网络模型训练学习,针对从通道集合中的每个通道j∈{1,2,...i-1,i+1,...,N},利用随机梯度下降算法,建立每个从通道的卷积神经网络模型Mj,j∈{1,2,...,i-1,i+1,...,N};
S6、对新目标物体第j个从通道图像的反演:若要反演新目标物体L的第j个个从通道的清晰图像,则首先获取主通道第i个通道的清晰图像接着,将主通道第i个通道的清晰图像输入到第j个建立好的卷积神经网络模型Mj,计算该模型的输出残差图像最后,反演从通道集合中的第j个通道的清晰图像
S7、针对从通道集合中的每个通道j∈{1,2,...,i-1,i+1,...,N},重复S6,直至反演出所有从通道的清晰图像。
2.根据权利要求1所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述S1中采集图像通过硬件手段或者软件手段使得采集的图像清晰。
3.根据权利要求2所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述通过硬件手段捕获清晰图像,包括但不限于采用步进电机对前置光学镜头调焦;所述通过软件手段捕获清晰图像,包括但不限于利用图像去模糊方法进行清晰图像的恢复。
4.根据权利要求1所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述S2中图像库S执行旋转和添加噪声两种操作算子的处理的具体操作方式为:将图库S中的每一对主/从通道图像都进行相同角度的旋转或添加相同噪声。
5.根据权利要求1或4所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述旋转的角度包括但不限于0°、45°、90°、135°、180°、225°、270°、315°。
6.根据权利要求1或4所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述噪声的添加方式为加性或乘性噪声;噪声类型为线性或非线性;噪声的参数为不同的参数组合。
7.根据权利要求1所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述S3中每个样本对包括输入和输出两部分,其中每个样本对的输入为第i个主通道清晰图像Imaster,每个样本对的输出为第j个从通道与主通道之间的残差图像
8.根据权利要求1所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述S4中卷积神经网络模型的结构包含一个输入层、若干个卷积层、池化层、激活函数层、全连接层和输出层。
9.根据权利要求1所述的一种基于残差学习卷积神经网络的多光谱图像反演方法,其特征在于:所述S4中卷积神经网络模型的拓扑结构,包括但不限于LeNet、AlexNet、Vgg16/Vgg19、GoogLeNet、ResNet等已有的结构类型,也包含自定义的拓扑结构类型。
CN201811531615.1A 2018-12-14 2018-12-14 一种基于残差学习卷积神经网络的多光谱图像反演方法 Active CN109671031B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811531615.1A CN109671031B (zh) 2018-12-14 2018-12-14 一种基于残差学习卷积神经网络的多光谱图像反演方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811531615.1A CN109671031B (zh) 2018-12-14 2018-12-14 一种基于残差学习卷积神经网络的多光谱图像反演方法

Publications (2)

Publication Number Publication Date
CN109671031A true CN109671031A (zh) 2019-04-23
CN109671031B CN109671031B (zh) 2022-03-18

Family

ID=66144804

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811531615.1A Active CN109671031B (zh) 2018-12-14 2018-12-14 一种基于残差学习卷积神经网络的多光谱图像反演方法

Country Status (1)

Country Link
CN (1) CN109671031B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111192211A (zh) * 2019-12-24 2020-05-22 浙江大学 一种基于单个深度神经网络的多噪声类型盲去噪方法
CN111885297A (zh) * 2020-06-16 2020-11-03 北京迈格威科技有限公司 图像清晰度的确定方法、图像对焦方法及装置
CN112200752A (zh) * 2020-10-28 2021-01-08 西华大学 一种基于er网络多帧图像去模糊***及其方法
CN112699917A (zh) * 2020-12-11 2021-04-23 北京信息科技大学 一种非线性光学卷积神经网络的图像识别方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020119513A1 (en) * 2000-06-12 2002-08-29 Board Of Trustees Operating Michigan State University Method and apparatus for the detection of volatile products in a sample
AU2015224495A1 (en) * 2010-06-25 2015-10-01 Cireca Theranostics, Llc Method for analyzing biological specimens by spectral imaging
CN105279557A (zh) * 2015-11-13 2016-01-27 徐志强 基于人脑工作机制的记忆和思维模拟装置
CN106789345A (zh) * 2017-01-20 2017-05-31 厦门集微科技有限公司 通道切换方法及装置
WO2017106645A1 (en) * 2015-12-18 2017-06-22 The Regents Of The University Of California Interpretation and quantification of emergency features on head computed tomography
CN108960193A (zh) * 2018-07-24 2018-12-07 中北大学 一种基于迁移学习的跨组分红外光谱模型移植方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020119513A1 (en) * 2000-06-12 2002-08-29 Board Of Trustees Operating Michigan State University Method and apparatus for the detection of volatile products in a sample
AU2015224495A1 (en) * 2010-06-25 2015-10-01 Cireca Theranostics, Llc Method for analyzing biological specimens by spectral imaging
CN105279557A (zh) * 2015-11-13 2016-01-27 徐志强 基于人脑工作机制的记忆和思维模拟装置
WO2017106645A1 (en) * 2015-12-18 2017-06-22 The Regents Of The University Of California Interpretation and quantification of emergency features on head computed tomography
CN106789345A (zh) * 2017-01-20 2017-05-31 厦门集微科技有限公司 通道切换方法及装置
CN108960193A (zh) * 2018-07-24 2018-12-07 中北大学 一种基于迁移学习的跨组分红外光谱模型移植方法

Non-Patent Citations (4)

* Cited by examiner, † Cited by third party
Title
YANCONG WEI 等: "Boosting the Accuracy of Multispectral Image Pansharpening by Learning a Deep Residual Network", 《IEEE GEOSCIENCE AND REMOTE SENSING LETTERS》 *
YANCONG WEI 等: "Deep Residual Learning for Remote Sensed Imagery Pansharpening", 《2017 INTERNATIONAL WORKSHOP ON REMOTE SENSING WITH INTELLIGENT PROCESSING (RSIP)》 *
葛志荣 等: "一种基于残差的遥感图像融合新方法", 《中国图象图形学报》 *
邢前国: "珠江口水质高光谱反演", 《中国优秀博硕士学位论文全文数据库(博士) 基础科学辑》 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111192211A (zh) * 2019-12-24 2020-05-22 浙江大学 一种基于单个深度神经网络的多噪声类型盲去噪方法
CN111192211B (zh) * 2019-12-24 2022-07-01 浙江大学 一种基于单个深度神经网络的多噪声类型盲去噪方法
CN111885297A (zh) * 2020-06-16 2020-11-03 北京迈格威科技有限公司 图像清晰度的确定方法、图像对焦方法及装置
CN111885297B (zh) * 2020-06-16 2022-09-06 北京迈格威科技有限公司 图像清晰度的确定方法、图像对焦方法及装置
CN112200752A (zh) * 2020-10-28 2021-01-08 西华大学 一种基于er网络多帧图像去模糊***及其方法
CN112200752B (zh) * 2020-10-28 2022-06-03 西华大学 一种基于er网络多帧图像去模糊***及其方法
CN112699917A (zh) * 2020-12-11 2021-04-23 北京信息科技大学 一种非线性光学卷积神经网络的图像识别方法

Also Published As

Publication number Publication date
CN109671031B (zh) 2022-03-18

Similar Documents

Publication Publication Date Title
CN109671031A (zh) 一种基于残差学习卷积神经网络的多光谱图像反演方法
Fan et al. Dual refinement underwater object detection network
CN106846463B (zh) 基于深度学习神经网络的显微图像三维重建方法及***
CN112733950A (zh) 一种基于图像融合与目标检测结合的电力设备故障诊断方法
CN103503433B (zh) 图像的聚焦误差估计
CN101394573B (zh) 一种基于特征匹配的全景图生成方法及***
CN106780543A (zh) 一种基于卷积神经网络的双框架估计深度和运动方法
CN103903237B (zh) 一种前扫声纳图像序列拼接方法
CN110070517B (zh) 基于退化成像机理和生成对抗机制的模糊图像合成方法
CN107329233B (zh) 一种基于神经网络的微滴式pcr仪自动对焦方法
CN109118544A (zh) 基于透视变换的合成孔径成像方法
CN115330653A (zh) 基于边窗滤波的多源图像融合方法
CN106888344A (zh) 摄像模组及其像面倾斜的获取方法和调整方法
Fan et al. RS-DPSNet: Deep plane sweep network for rolling shutter stereo images
CN116757986A (zh) 一种红外与可见光图像融合方法及装置
CN116563916A (zh) 基于注意力融合的循环人脸超分辨率方法及***
CN106709894A (zh) 一种图像实时拼接方法及***
CN111259923A (zh) 一种基于改进三维r-cnn算法的多目标检测方法
CN103873773B (zh) 基于主辅协同双光路设计的全向成像方法
CN117079106A (zh) 基于光场重聚焦特征学习的多聚焦图像融合方法
CN113096039A (zh) 一种基于红外图和深度图的深度信息补全方法
Tang et al. MPCFusion: Multi-scale parallel cross fusion for infrared and visible images via convolution and vision Transformer
TWI805282B (zh) 使用焦點資訊深度估計的方法和裝置
CN116778091A (zh) 基于路径聚合的深度学习多视角立体三维重建算法
CN106355595A (zh) 一种目标图像立体视觉匹配方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant