CN110207835A - 一种基于离焦图像训练的波前校正方法 - Google Patents

一种基于离焦图像训练的波前校正方法 Download PDF

Info

Publication number
CN110207835A
CN110207835A CN201910431726.3A CN201910431726A CN110207835A CN 110207835 A CN110207835 A CN 110207835A CN 201910431726 A CN201910431726 A CN 201910431726A CN 110207835 A CN110207835 A CN 110207835A
Authority
CN
China
Prior art keywords
image
spot
training
zernike coefficient
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910431726.3A
Other languages
English (en)
Inventor
徐杨杰
郭弘扬
黄永梅
王强
贺东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Institute of Optics and Electronics of CAS
Original Assignee
Institute of Optics and Electronics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Institute of Optics and Electronics of CAS filed Critical Institute of Optics and Electronics of CAS
Priority to CN201910431726.3A priority Critical patent/CN110207835A/zh
Publication of CN110207835A publication Critical patent/CN110207835A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J9/00Measuring optical phase difference; Determining degree of coherence; Measuring optical wavelength
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01JMEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J9/00Measuring optical phase difference; Determining degree of coherence; Measuring optical wavelength
    • G01J2009/002Wavefront phase distribution
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/04Architecture, e.g. interconnection topology
    • G06N3/045Combinations of networks
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • G06N3/02Neural networks
    • G06N3/08Learning methods

Landscapes

  • Physics & Mathematics (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • General Physics & Mathematics (AREA)
  • Eye Examination Apparatus (AREA)

Abstract

本发明公开了一种基于离焦图像训练的波前校正方法,该方法利用的装置包括:图像采集模块,神经网络模块,电压转换模块和执行机构。具体方法为:入射光通过光学棱镜汇聚为离焦光斑;图像采集模块负责对离焦光斑进行采集;经过大量离焦光斑图像训练后,神经网络模块根据图像采集模块传递的图像特征拟合出对应的Zernike系数;电压转换模块建立Zernike系数与驱动电压关系;最后执行机构根据拟合的Zernike系数实现对大气湍流产生的波前畸变的校正。本发明不需要使用哈特曼等波前探测器,提高了光束能量的利用率。不需要循环迭代的过程,带宽高,满足实时性的需求。只需采集单幅离焦图进行神经网络训练,既减少了图像采集的工作量又增加了样本光斑的信息量。

Description

一种基于离焦图像训练的波前校正方法
技术领域
本发明涉及波前校正领域,具体的涉及一种基于离焦图像训练的波前校正方法,主要用于对大气湍流产生的波前畸变进行校正。
背景技术
波前矫正技术是一种用于校正光场的波前像差的技术,已被广泛用于空间光通信和天文成像中的自适应光学领域。有波前探测的波前校正技术利用哈特曼探测器测量出接收光束的波前,然后驱动变形镜对波前畸变进行校正,其优点是精度高,带宽高,但是哈特曼探测器对能量的要求较高,导致接收光束大部分被分光进入哈特曼探测器,适用范围有限。
无波前探测的波前校正技术根据目标函数,通过SPGD等寻优算法迭代直接控制校正器,但是存在带宽低、实时性较差等问题。如今,机器学习,包括深度学习,已经成为光学领域的热门话题。但是目前常用的像差校正神经网络训练过程中,常采用单幅焦点光斑图像进行训练,或者一幅焦点图与一幅离焦图像同时训练。单幅焦点图训练神经网络虽然有样本采集方便的优势,但是样本信息重叠在中心部分,不利于目标特征的识别和提取,导致预测精度低。两幅图(一幅焦点图与一幅离焦图像)的训练方法虽然能够提高神经网络预测精度,但是又会存在探测光路复杂,样本采集繁琐的问题。
发明内容
针对以上问题,本发明提出一种基于离焦图像训练的波前校正方法,该方法采用单幅离焦图对神经网络进行训练,并对Zernike系数进行预测,减少了训练工作量并提高样本的信息量。满足实时性要求的同时,提高了***的执行效率。
本发明采用的技术方案为:一种基于离焦图像训练的波前校正方法,该方法包括如下步骤:
步骤一、入射光通过汇聚镜后汇聚为离焦光斑,图像采集模块负责对离焦光斑进行采集;
步骤二、神经网络模块经过大量离焦光斑图像训练后,神经网络模块根据图像采集模块传递的图像特征拟合出对应的Zernike系数;
步骤三、电压转换模块建立Zernike系数与驱动电压关系,执行机构根据拟合的Zernike系数对大气湍流产生的波前畸变进行校正。
进一步地,图像采集模块对光斑的提取:
1)分光镜,对入射光分光,其中一条汇聚成离焦光斑进入到图像采集模块进行图像记录,另一束耦合进入光纤进行信息传输;
2)图像采集器(如CCD),对光斑进行采集并传输给神经网络模块。
进一步地,神经网络模块建立初始卷积神经网络结构,三层以上卷积层、三层以上池化层及两层以上全连接层:
1)输入层:输入离焦光斑的图像;
2)隐藏层:隐藏层负责计算和输出结果给输出层;
3)输出层:输出层输出聚焦光斑和离焦光斑的图像矩特征对应的Zernike系数。
进一步地,卷积神经网络训练:
1)样本数据采集:获取足够的训练光斑图像及各个样本光斑图像对应的Zernike系数;
2)训练卷积神经网络:将采集到的样本光斑图像和其对应的Zernike系数输入到卷积神经网络,对初始的卷积神经网络进行训练,最终得到用于波前校正的卷积神经网络。
进一步地,波前校正模块,其包括:
1)电压转换模块建立Zernike系数与驱动电压关系;
2)控制器将驱动信号加载到执行机构并对大气湍流产生的波前畸变进行校正。
本发明与现有方法相比具有如下优点:
(1)和有波前探测的波前校正***相比,本发明不需要使用哈特曼等波前探测器,提高了光束能量的利用率。
(2)和无波前探测的波前校正***相比,本发明不需要循环迭代的过程,带宽高,满足实时性的需求。
(3)和基于图像强度的神经网络相比,本发明只需采集离焦图进行神经网络训练,既减少了图像采集的工作量又增加了样本光斑的信息量。
(4)本发明机构简单,易于实现。
附图说明
图1是本发明的基于离焦图像训练的波前校正方法的原理图。
图2是本发明的基于离焦图像训练的波前校正方法的流程图。
图3是本发明的神经网络的训练流程图。
具体实施方式
以下结合附图对本发明的具体实施方式做详细说明。
如图1所示,本发明一种基于离焦图像训练的波前校正方法,该方法利用的装置包括:图像采集模块,神经网络模块,电压转换模块和执行机构。具体方法为:入射光通过光学棱镜汇聚为离焦光斑;图像采集模块负责对离焦光斑进行采集;经过大量离焦光斑图像训练后,神经网络模块根据图像采集模块传递的图像特征拟合出对应的Zernike系数;电压转换模块建立Zernike系数与驱动电压关系;最后执行机构根据拟合的Zernike系数实现对大气湍流产生的波前畸变的校正。
其中,是波前,aj是Zernike多项式的系数,j是阶数。Zj是Zernike多项式,Z1项代表整体相移,Z2,Z3项代表倾斜,Z4项代表离焦。
如图2所示,基于离焦图像训练的波前校正方法的具体流程为:通过光学***接收入射光,入射光被分光镜分束,一部分耦合进入光纤,一部分离焦处汇聚成离焦光斑,通过质心算法对低阶像差进行校正,图像采集模块采集离焦光斑图像,将离焦图像输入神经网络,神经网络生成预测的Zernike系数,执行机构根据生成的Zernike系数对光斑进行校正。
如图3所示,基于神经网络生成Zernike系数的流程为:训练阶段,采集大量的离焦光斑图像和其对应的zernike系数作为样本,将大部分样本作为训练集,少部分样本作为测试集,进行训练,损失函数是生成的Zernike系数和实际Zernike系数的均方差,当测试集的损失函数不再收敛时训练完成,应用阶段,将离焦光斑图像输入训练好的神经网络中,输出即为预测的Zernike系数。
具体的,损失函数为:
其中,ypredict是神经网络输出的Zernike系数预测值,ytrue是真实的Zernike系数。
在实验室条件下,使用大气相干长度为5cm情况下仿真生成的Zernike系数模拟大气湍流,使用20000张图片作为训练集,2000张图片作为测试集,训练好的网络在测试集中的RMS波像差为0.0491λ。

Claims (5)

1.一种基于离焦图像训练的波前校正方法,其特征在于:该方法包括如下步骤:
步骤一、入射光通过汇聚镜后汇聚为离焦光斑,图像采集模块负责对离焦光斑进行采集;
步骤二、神经网络模块经过大量离焦光斑图像训练后,神经网络模块根据图像采集模块传递的图像特征拟合出对应的Zernike系数;
步骤三、电压转换模块建立Zernike系数与驱动电压关系,执行机构根据拟合的Zernike系数对大气湍流产生的波前畸变进行校正。
2.根据权利要求1所述的一种基于离焦图像训练的波前校正方法,其特征在于:图像采集模块对光斑的提取,其包括:
1)分光镜,对入射光分光,其中一条汇聚成离焦光斑进入到图像采集模块进行图像记录,另一束耦合进入光纤进行信息传输;
2)图像采集器,对光斑进行采集并传输给神经网络模块。
3.根据权利要求1所述的一种基于离焦图像训练的波前校正方法,其特征在于:神经网络模块中建立初始卷积神经网络结构,其包括:三层以上卷积层、三层以上池化层及两层以上全连接层:
1)输入层:输入离焦光斑的图像;
2)隐藏层:隐藏层负责计算和输出结果给输出层;
3)输出层:输出层输出聚焦光斑和离焦光斑的图像矩特征对应的Zernike系数。
4.根据权利要求3所述的一种基于离焦图像训练的波前校正方法,其特征在于:卷积神经网络训练,其包括:
1)样本数据采集:获取足够的训练光斑图像及各个样本光斑图像对应的Zernike系数;
2)训练卷积神经网络:将采集到的样本光斑图像和其对应的Zernike系数输入到卷积神经网络,对初始的卷积神经网络进行训练,最终得到用于波前校正的卷积神经网络。
5.根据权利要求1所述的一种基于离焦图像训练的波前校正方法,其特征在于:波前校正模块,其包括:
1)电压转换模块建立Zernike系数与驱动电压关系;
2)控制器将驱动信号加载到执行机构并对大气湍流产生的波前畸变进行校正。
CN201910431726.3A 2019-05-23 2019-05-23 一种基于离焦图像训练的波前校正方法 Pending CN110207835A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910431726.3A CN110207835A (zh) 2019-05-23 2019-05-23 一种基于离焦图像训练的波前校正方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910431726.3A CN110207835A (zh) 2019-05-23 2019-05-23 一种基于离焦图像训练的波前校正方法

Publications (1)

Publication Number Publication Date
CN110207835A true CN110207835A (zh) 2019-09-06

Family

ID=67788263

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910431726.3A Pending CN110207835A (zh) 2019-05-23 2019-05-23 一种基于离焦图像训练的波前校正方法

Country Status (1)

Country Link
CN (1) CN110207835A (zh)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110260788A (zh) * 2019-07-03 2019-09-20 北京航空航天大学 光学微纳测量装置、提取待测结构微纳尺寸信息的方法
CN110648298A (zh) * 2019-11-01 2020-01-03 中国工程物理研究院流体物理研究所 一种基于深度学习的光学像差畸变校正方法及***
CN110795892A (zh) * 2019-10-23 2020-02-14 北京邮电大学 一种基于生成对抗网络的信道模拟方法及装置
CN111272299A (zh) * 2020-01-22 2020-06-12 浙江大学 一种基于深度学习的Shack-Hartmann波前探测器
CN111325317A (zh) * 2020-01-21 2020-06-23 北京空间机电研究所 一种基于生成对抗网络的波前像差确定方法及装置
CN111638040A (zh) * 2020-05-14 2020-09-08 中国科学院光电技术研究所 适用于光学合成孔径成像***的离焦解耦指向校正方法
CN111862035A (zh) * 2020-07-17 2020-10-30 平安科技(深圳)有限公司 光斑检测模型的训练方法、光斑检测方法、设备及介质
CN112561898A (zh) * 2020-12-22 2021-03-26 电子科技大学中山学院 一种基于卷积神经网络的光纤传感器光斑分析方法
US20210186323A1 (en) * 2019-12-19 2021-06-24 Alcon Inc. Vision quality assessment based on machine learning model and wavefront analysis
CN113141446A (zh) * 2020-01-20 2021-07-20 深圳华大智造科技有限公司 像差处理方法、计算机装置及可读存储介质
CN113188671A (zh) * 2021-04-27 2021-07-30 浙江大学 一种基于交叉迭代自动位置矫正的波前检测方法
CN113359871A (zh) * 2021-06-29 2021-09-07 中国科学院光电技术研究所 一种基于双棱镜旋转装置的定点闭环方法
CN113654670A (zh) * 2021-08-12 2021-11-16 中国科学院光电技术研究所 一种基于神经网络的缺光子孔径质心位移估计方法
CN114022730A (zh) * 2021-10-28 2022-02-08 中国科学院光电技术研究所 一种基于自监督学习神经网络的点目标相位检索方法
CN114488518A (zh) * 2020-10-23 2022-05-13 中国人民解放军国防科技大学 基于机器学习的自适应光学波前校正方法
CN114859552A (zh) * 2022-06-07 2022-08-05 中国科学院光电技术研究所 一种基于深度学习的离轴望远镜低阶像差校正方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101738721A (zh) * 2009-12-25 2010-06-16 中国科学院光电技术研究所 一种哈特曼波前传感器无***误差的自适应光学成像***
US20110085173A1 (en) * 2009-10-08 2011-04-14 Massachusetts Institute Of Technology Phase From Defocused Color Images
CN102721477A (zh) * 2012-06-04 2012-10-10 中国科学院光电技术研究所 一种用于相位差波前传感器的离焦量测量方法
CN107843982A (zh) * 2017-12-01 2018-03-27 长春理工大学 基于实时相位差异技术的无波前探测自适应光学***
CN108983412A (zh) * 2018-07-09 2018-12-11 北京邮电大学 一种无波前检测自适应光学***及光束相位调整方法
CN109031654A (zh) * 2018-09-11 2018-12-18 安徽农业大学 一种基于卷积神经网络的自适应光学校正方法及***

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110085173A1 (en) * 2009-10-08 2011-04-14 Massachusetts Institute Of Technology Phase From Defocused Color Images
CN101738721A (zh) * 2009-12-25 2010-06-16 中国科学院光电技术研究所 一种哈特曼波前传感器无***误差的自适应光学成像***
CN102721477A (zh) * 2012-06-04 2012-10-10 中国科学院光电技术研究所 一种用于相位差波前传感器的离焦量测量方法
CN107843982A (zh) * 2017-12-01 2018-03-27 长春理工大学 基于实时相位差异技术的无波前探测自适应光学***
CN108983412A (zh) * 2018-07-09 2018-12-11 北京邮电大学 一种无波前检测自适应光学***及光束相位调整方法
CN109031654A (zh) * 2018-09-11 2018-12-18 安徽农业大学 一种基于卷积神经网络的自适应光学校正方法及***

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
SERGIO LUIS SUÁREZ GÓMEZ: "Compensating Atmospheric Turbulence with Convolutional Neural Networks for Defocused Pupil Image Wave-Front Sensors", 《HYBRID ARTIFICIAL INTELLIGENT SYSTEMS》 *
吴之旭: "基于单幅离焦图像的波前恢复算法", 《天文学进展》 *

Cited By (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110260788A (zh) * 2019-07-03 2019-09-20 北京航空航天大学 光学微纳测量装置、提取待测结构微纳尺寸信息的方法
CN110795892A (zh) * 2019-10-23 2020-02-14 北京邮电大学 一种基于生成对抗网络的信道模拟方法及装置
CN110795892B (zh) * 2019-10-23 2021-10-01 北京邮电大学 一种基于生成对抗网络的信道模拟方法及装置
CN110648298A (zh) * 2019-11-01 2020-01-03 中国工程物理研究院流体物理研究所 一种基于深度学习的光学像差畸变校正方法及***
US20210186323A1 (en) * 2019-12-19 2021-06-24 Alcon Inc. Vision quality assessment based on machine learning model and wavefront analysis
US11931104B2 (en) * 2019-12-19 2024-03-19 Alcon Inc. Vision quality assessment based on machine learning model and wavefront analysis
CN113141446B (zh) * 2020-01-20 2023-06-20 深圳华大智造科技股份有限公司 像差处理方法、计算机装置及可读存储介质
CN113141446A (zh) * 2020-01-20 2021-07-20 深圳华大智造科技有限公司 像差处理方法、计算机装置及可读存储介质
CN111325317A (zh) * 2020-01-21 2020-06-23 北京空间机电研究所 一种基于生成对抗网络的波前像差确定方法及装置
CN111325317B (zh) * 2020-01-21 2023-12-12 北京空间机电研究所 一种基于生成对抗网络的波前像差确定方法及装置
CN111272299B (zh) * 2020-01-22 2021-01-26 浙江大学 一种基于深度学习的Shack-Hartmann波前探测器
CN111272299A (zh) * 2020-01-22 2020-06-12 浙江大学 一种基于深度学习的Shack-Hartmann波前探测器
CN111638040A (zh) * 2020-05-14 2020-09-08 中国科学院光电技术研究所 适用于光学合成孔径成像***的离焦解耦指向校正方法
CN111862035A (zh) * 2020-07-17 2020-10-30 平安科技(深圳)有限公司 光斑检测模型的训练方法、光斑检测方法、设备及介质
CN111862035B (zh) * 2020-07-17 2023-07-28 平安科技(深圳)有限公司 光斑检测模型的训练方法、光斑检测方法、设备及介质
CN114488518B (zh) * 2020-10-23 2024-01-05 中国人民解放军国防科技大学 基于机器学习的自适应光学波前校正方法
CN114488518A (zh) * 2020-10-23 2022-05-13 中国人民解放军国防科技大学 基于机器学习的自适应光学波前校正方法
CN112561898A (zh) * 2020-12-22 2021-03-26 电子科技大学中山学院 一种基于卷积神经网络的光纤传感器光斑分析方法
CN113188671A (zh) * 2021-04-27 2021-07-30 浙江大学 一种基于交叉迭代自动位置矫正的波前检测方法
CN113359871A (zh) * 2021-06-29 2021-09-07 中国科学院光电技术研究所 一种基于双棱镜旋转装置的定点闭环方法
CN113359871B (zh) * 2021-06-29 2022-08-23 中国科学院光电技术研究所 一种基于双棱镜旋转装置的定点闭环方法
CN113654670B (zh) * 2021-08-12 2022-07-29 中国科学院光电技术研究所 一种基于神经网络的缺光子孔径质心位移估计方法
CN113654670A (zh) * 2021-08-12 2021-11-16 中国科学院光电技术研究所 一种基于神经网络的缺光子孔径质心位移估计方法
CN114022730B (zh) * 2021-10-28 2023-08-15 中国科学院光电技术研究所 一种基于自监督学习神经网络的点目标相位检索方法
CN114022730A (zh) * 2021-10-28 2022-02-08 中国科学院光电技术研究所 一种基于自监督学习神经网络的点目标相位检索方法
CN114859552A (zh) * 2022-06-07 2022-08-05 中国科学院光电技术研究所 一种基于深度学习的离轴望远镜低阶像差校正方法
CN114859552B (zh) * 2022-06-07 2023-09-19 中国科学院光电技术研究所 一种基于深度学习的离轴望远镜低阶像差校正方法

Similar Documents

Publication Publication Date Title
CN110207835A (zh) 一种基于离焦图像训练的波前校正方法
CN109031654B (zh) 一种基于卷积神经网络的自适应光学校正方法及***
CN107843982B (zh) 基于实时相位差异技术的无波前探测自适应光学***
CN103503433A (zh) 图像的聚焦误差估计
CN106338343B (zh) 一种基于菲涅耳波带片的波前探测方法
US20060256321A1 (en) Closed-loop wavefront sensor using field programmable gate array
CN103487926B (zh) 显微视觉检测***景深扩展装置及方法
CN111182238B (zh) 基于扫描光场的高分辨率移动电子设备的成像装置及方法
CN106896622A (zh) 基于多距离自动对焦的校正方法
CN103162843B (zh) 一种基于VOx探测器的无快门红外热像仪及其使用方法
CN108983412A (zh) 一种无波前检测自适应光学***及光束相位调整方法
RU2449328C1 (ru) Оптическая система для тепловизионных приборов
CN109739033A (zh) 一种无波前探测的液晶像差校正方法
CN110441905A (zh) 基于波前编码的无热化中波红外成像方法和***
US20220171204A1 (en) Light field-based beam correction systems and methods
CN101001309A (zh) 一种成像***及方法
CN109459214A (zh) 一种凸透镜焦距测量方法及装置
CN114022730B (zh) 一种基于自监督学习神经网络的点目标相位检索方法
CN105973469A (zh) 带同步辐射矫正的无人机载高光谱图像探测仪及方法
CN108646406B (zh) 一种基于棱锥波前传感器本征模式控制的自适应光学装置
CN110455418A (zh) 用于红外探测器非均匀性校正的超构透镜阵列及方法
CN112229528B (zh) 基于费马螺旋自干涉多焦点透镜阵列的哈特曼波前传感仪
CN112099229A (zh) 基于远场的高速自适应光学闭环控制方法
CN207882564U (zh) 基于实时相位差异技术的无波前探测自适应光学***
Rukosuev et al. 1.5 kHz adaptive optical system for free-space communication tasks

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20190906