CN109660743A - 一种制冷型红外热像仪高动态范围成像的实现方法 - Google Patents

一种制冷型红外热像仪高动态范围成像的实现方法 Download PDF

Info

Publication number
CN109660743A
CN109660743A CN201811572152.3A CN201811572152A CN109660743A CN 109660743 A CN109660743 A CN 109660743A CN 201811572152 A CN201811572152 A CN 201811572152A CN 109660743 A CN109660743 A CN 109660743A
Authority
CN
China
Prior art keywords
image
lpddr2
frame
data
thermal infrared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811572152.3A
Other languages
English (en)
Other versions
CN109660743B (zh
Inventor
隋修宝
刘博文
王利平
陈钱
顾国华
朱亮亮
于雪莲
刘郭新
匡小冬
蒋桐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nanjing University of Science and Technology
Original Assignee
Nanjing University of Science and Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nanjing University of Science and Technology filed Critical Nanjing University of Science and Technology
Priority to CN201811572152.3A priority Critical patent/CN109660743B/zh
Publication of CN109660743A publication Critical patent/CN109660743A/zh
Application granted granted Critical
Publication of CN109660743B publication Critical patent/CN109660743B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/741Circuitry for compensating brightness variation in the scene by increasing the dynamic range of the image compared to the dynamic range of the electronic image sensors
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N25/63Noise processing, e.g. detecting, correcting, reducing or removing noise applied to dark current

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Transforming Light Signals Into Electric Signals (AREA)
  • Radiation Pyrometers (AREA)

Abstract

本发明公开了一种制冷型红外热像仪高动态范围成像的实现方法,首先将制冷型红外热像仪输出的图像以8帧图像为一个循环,其次将得到的每一帧图像都经过非均匀性校正模块,得到校正后的图像;接着校正后的图像经过一个除数为8的除法器,图像的数值变为原先的八分之一;再经过除法器的每个循环中的所有图像求和并存入LPDDR2中,当完成同一个循环中的8帧图像的累加后,再开始下一个循环的重新累加;最后当同一个循环的第一帧图像和第五帧图像到来时,分别进行LPDDR2中的图像读取并传送给后续图像处理模块,最终输出视频图像。本发明有效扩展了红外热像仪对于温度变化范围大的场景的适应能力,能获取更多的场景信息,拓展了红外热像仪的应用领域。

Description

一种制冷型红外热像仪高动态范围成像的实现方法
技术领域
本发明属于红外图像处理领域,具体是一种制冷型红外热像仪高动态范围成像的实现方法。
背景技术
红外热像仪生成的原始图像动态范围较窄,灰度比较集中。由于焦平面探测器组件中读出电路积分电容的电荷存储量有限,造成探测器积分时间受限,当看清场景中的高温物体时,低温物体可能已经被噪声淹没,而当看清低温物体时,高温物体早已饱和。
Austin等人最早提出了红外图像超帧技术的概念。红外图像超帧技术就是指在红外成像***规定的单帧成像时间内获取多帧图像,然后对长积分时间的子帧的各个像素的饱和像元用短积分时间的像元进行替换,得到一幅新的图像并在单帧图像时间内输出,从而达到拓宽红外热像仪成像范围的目的。但是该方法对于算法的要求复杂,而且无法提高图像信噪比等参数。
在此基础上,国内外学者进行了相关的研究,取得一些成果,提出基于光机装置的超帧原理样机、基于高速数值传输电路的红外图像超帧处理等方法,但是这些方法需要用到复杂的光学器件,不利于技术的推广。
发明内容
本发明的目的在于提供一种制冷型红外热像仪高动态范围成像的实现方法,克服了红外热像仪动态范围较低、不能将温度变化范围大的场景完整清晰成像的不足,同时提高红了外成像***输出信号的信噪比,
实现本发明目的的技术解决方案为:一种制冷型红外热像仪高动态范围成像的实现方法,包括以下步骤:
步骤1)将制冷型红外热像仪输出的图像以8帧图像为一个循环,同一个循环内的每帧图像积分时间互不相同;
步骤2)将得到的每一帧图像都经过非均匀性校正模块,去除图像的非均匀性,得到校正后的图像;
步骤3)校正后的图像经过一个除数为8的除法器,图像的数值变为原先的八分之一;
步骤4)对步骤3)中经过除法器的每个循环中的所有图像求和并存入LPDDR2中,当完成同一个循环中的8帧图像的累加后,再开始下一个循环的重新累加;
步骤5)当同一个循环的第一帧图像和第五帧图像到来时,分别进行LPDDR2中的图像读取并传送给后续图像处理模块,最终输出视频图像。
本发明与现有技术相比,其显著优点:
(1)提高了红外成像***的成像动态范围,能对温度变化范围更大的场景捕获更多信息,有一个更好的成像效果。
(2)提高了红外成像***的信噪比和灵敏度。
附图说明
图1是本发明一种制冷型红外热像仪高动态范围成像的实现方法流程图。
图2是各积分时间下的图像和高动态成像的图像,其中(a)是低积分时间下的图像,(b)是高积分时间下的图像,(c)是高动态范围成像方法得到的图像。
具体实施方式
下面结合附图对本发明作进一步详细描述。
制冷型红外热像仪高动态范围成像是让红外探测器以不同积分时间进行超帧频图像输出,再将各个子帧相加并在规定的一帧图像时间内完成图像数据的输出。以此方法获取更宽的温度范围和更多的场景信息,同时增加***的信噪比和灵敏度。
结合图1,一种制冷型红外热像仪高动态范围成像的实现方法,实现步骤包括:
步骤1)将制冷型红外热像仪输出的图像以8帧图像为一个循环,同一个循环内的每帧图像积分时间互不相同。
每八帧图像积分时间互不相同,具体步骤为:
1-1)设置一个计数器,计数器位于驱动模块内,计数器从0到7循环计数,每当一帧新的图像输入时计数器+1;
1-2)提前设置好8个不同的积分时间,每当计数器+1就取下一个积分时间,以此类推直到一个循环结束;
1-3)下一个循环开始时再依次将这个8积分时间送给制冷型红外热像仪。
对探测器输入时钟和输出图像的帧数要求为:给探测器的时钟频率为6MHz,探测器每秒输出200帧图像,采用四路输出的方式。
步骤2)将得到的每一帧图像都经过非均匀性校正模块,去除图像的非均匀性,得到校正后的图像。
非均匀性校正参数的获取,具体步骤为:
2-1)将积分时间全部设置为8个积分时间中的第一个,在该积分时间下进行参数标定,获得非均匀性校正参数,转入步骤2-2);
2-2)将这个积分时间下的非均匀性参数存到LPDDR2中,转入步骤2-3);
2-3)返回2-1),直至获取并存储剩余的7个积分时间下的所有非均匀性校正参数;
非均匀性校正的参数调用根据驱动模块计数器的计数来进行选取,图像到来时,根据计数的数值调用对应积分时间下的非均匀性校正参数。
步骤3)校正后的图像经过一个除数为8的除法器,图像的数值变为原先的八分之一。校正后的图像经过除法器后,如果余数为0、1、2或3时,则结果取除法器的商,如果余数为4、5、6或7时,则结果取除法器的商的基础上+1。
步骤4)对步骤3)中经过除法器的每个循环中的所有图像求和并存入LPDDR2中,当完成同一个循环中的8帧图像的累加后,再开始下一个循环的重新累加。每个循环内的8帧图像数据的累加和存储方式,具体步骤为:
4-1)将第一帧数据存入LPDDR2的第一个地址空间中;
4-2)当第二帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第二帧的数据依次相加,得到的数据之和存入LPDDR2的第二个地址空间中;
4-3)当第三帧数据到来时,从LPDDR2中的第二个地址空间中读出数据,将其和第三帧的数据依次相加,得到的数据之和存入LPDDR2的第一个地址空间中;
4-4)当第四帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第四帧的数据依次相加,得到的数据之和存入LPDDR2的第二个地址空间中;
4-5)当第五帧数据到来时,从LPDDR2中的第二个地址空间中读出数据,将其和第五帧的数据依次相加,得到的数据之和存入LPDDR2的第一个地址空间中;
4-6)当第六帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第六帧的数据依次相加,得到的数据之和存入LPDDR2的第二个地址空间中;
4-7)当第七帧数据到来时,从LPDDR2中的第二个地址空间中读出数据,将其和第七帧的数据依次相加,得到的数据之和存入LPDDR2的第一个地址空间中;
4-8)当第八帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第八帧的数据依次相加,得到的数据之和存入LPDDR2的第三个地址空间中。
步骤5)当同一个循环的第一帧图像和第五帧图像到来时,分别进行LPDDR2中的图像读取并传送给后续图像处理模块,最终输出视频图像。每当计数器计到0和4时,分别从LPDDR2的第三个地址读出数据送给后续图像处理模块,后续图像处理模块对数据进行细节增强、直方图均衡化、裁剪和PAL制显示等,最终图像数据传送给显示设备,输出图像视频。
实施例1
采用分辨率为320×256,位宽为14位的输入图像,采用的FPGA的型号为5CEFA5C19I7,采用的制冷型红外热像仪为SOFRADIR公司的MARS-LW-RM3,给探测器的时钟频率为6MHz,每30000个时钟输出一帧图像,探测器采用四路输出的方式。
分别用积分时间参数为10μs、200μs和八个不同积分时间参数的组合分三次成像,并对不同积分时间条件下得到的最终图像进行采集,得到的结果如图2中的(a)(b)(c)所示,由图像可以看出,观察的场景中有高温物体烙铁。在积分时间较短时,烙铁头没有饱和,可以看到相关细节,但是旁边的文字已经模糊,对比度较低,不能清晰分辨;当积分时间较高时,文字可以清晰分辨,但烙铁早已饱和,不能获得有效的信息;当采用多积分时间下的高动态范围成像方法成像后,图像中的烙铁没有饱和,细节可以分辨,并且一旁的文字也可以清晰地分辨,从而达到了提高红外热像仪动态范围,获取更多有效信息的目的。

Claims (7)

1.一种制冷型红外热像仪高动态范围成像的实现方法,其特征在于,包括以下步骤:
步骤1)将制冷型红外热像仪输出的图像以8帧图像为一个循环,同一个循环内的每帧图像积分时间互不相同;
步骤2)将得到的每一帧图像都经过非均匀性校正模块,去除图像的非均匀性,得到校正后的图像;
步骤3)校正后的图像经过一个除数为8的除法器,图像的数值变为原先的八分之一;
步骤4)对步骤3)中经过除法器的每个循环中的所有图像求和并存入LPDDR2中,当完成同一个循环中的8帧图像的累加后,再开始下一个循环的重新累加;
步骤5)当同一个循环的第一帧图像和第五帧图像到来时,分别进行LPDDR2中的图像读取并传送给后续图像处理模块,最终输出视频图像。
2.根据权利要求1所述的制冷型红外热像仪高动态范围成像的实现方法,其特征在于:上述步骤1)中,同一个循环内的八帧图像积分时间互不相同,具体步骤为:
1-1)设置一个计数器,计数器位于驱动模块内,计数器从0到7循环计数,每当一帧新的图像输入时计数器+1;
1-2)提前设置好8个不同的积分时间,每当计数器+1就取下一个积分时间,以此类推直到一个循环结束;
1-3)下一个循环开始时再依次将这个8积分时间送给制冷型红外热像仪。
3.根据权利要求2所述的制冷型红外热像仪高动态范围成像的实现方法,其特征在于,上述步骤1)中,对制冷型红外热像仪输入时钟和输出图像的帧数要求为:
给制冷型红外热像仪的时钟频率为6MHz,制冷型红外热像仪每秒输出200帧图像,采用四路输出的方式。
4.根据权利要求1所述的制冷型红外热像仪高动态范围成像的实现方法,其特征在于,上述步骤2)中,将得到的每一帧图像都经过非均匀性校正模块,去除图像的非均匀性,具体步骤如下:
2-1)将积分时间全部设置为8个积分时间中的第一个,在该积分时间下进行参数标定,获得非均匀性校正参数,转入步骤2-2);
2-2)将这个积分时间下的非均匀性参数存到LPDDR2中,转入步骤2-3);
2-3)返回2-1),直至获取并存储剩余的7个积分时间下的所有非均匀性校正参数;
2-4)、当图像到来时,根据计数器的数值调用对应积分时间下的非均匀性校正参数,对当前图像进行非均匀性校正。
5.根据权利要求1所述的制冷型红外热像仪高动态范围成像的实现方法,其特征在于,上述步骤3)中,校正后的图像经过除法器后,如果余数为0、1、2或3时,则结果取除法器的商,如果余数为4、5、6或7时,则结果取除法器的商的基础上+1。
6.根据权利要求1所述的制冷型红外热像仪高动态范围成像的实现方法,其特征在于,上述步骤4)中,每个循环内的8帧图像数据的累加和存储方式,具体步骤为:
4-1)将第一帧数据存入LPDDR2的第一个地址空间中;
4-2)当第二帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第二帧的数据依次相加,得到的数据之和存入LPDDR2的第二个地址空间中;
4-3)当第三帧数据到来时,从LPDDR2中的第二个地址空间中读出数据,将其和第三帧的数据依次相加,得到的数据之和存入LPDDR2的第一个地址空间中;
4-4)当第四帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第四帧的数据依次相加,得到的数据之和存入LPDDR2的第二个地址空间中;
4-5)当第五帧数据到来时,从LPDDR2中的第二个地址空间中读出数据,将其和第五帧的数据依次相加,得到的数据之和存入LPDDR2的第一个地址空间中;
4-6)当第六帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第六帧的数据依次相加,得到的数据之和存入LPDDR2的第二个地址空间中;
4-7)当第七帧数据到来时,从LPDDR2中的第二个地址空间中读出数据,将其和第七帧的数据依次相加,得到的数据之和存入LPDDR2的第一个地址空间中;
4-8)当第八帧数据到来时,从LPDDR2中的第一个地址空间中读出数据,将其和第八帧的数据依次相加,得到的数据之和存入LPDDR2的第三个地址空间中。
7.根据权利要求1所述的制冷型红外热像仪高动态范围成像的实现方法,其特征在于:上述步骤5)中,每当计数器计到0和4时,分别从LPDDR2的第三个地址读出数据送给后续图像处理模块,后续图像处理模块对数据进行细节增强、直方图均衡化、裁剪和PAL制显示,最终图像数据传送给显示设备,输出图像视频。
CN201811572152.3A 2018-12-21 2018-12-21 一种制冷型红外热像仪高动态范围成像的实现方法 Active CN109660743B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811572152.3A CN109660743B (zh) 2018-12-21 2018-12-21 一种制冷型红外热像仪高动态范围成像的实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811572152.3A CN109660743B (zh) 2018-12-21 2018-12-21 一种制冷型红外热像仪高动态范围成像的实现方法

Publications (2)

Publication Number Publication Date
CN109660743A true CN109660743A (zh) 2019-04-19
CN109660743B CN109660743B (zh) 2021-06-08

Family

ID=66116190

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811572152.3A Active CN109660743B (zh) 2018-12-21 2018-12-21 一种制冷型红外热像仪高动态范围成像的实现方法

Country Status (1)

Country Link
CN (1) CN109660743B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110579283A (zh) * 2019-09-18 2019-12-17 北京理工大学 Hdr动态红外辐射源阵列靶标

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104486562A (zh) * 2014-12-26 2015-04-01 昆明物理研究所 基于固定积分时间的嵌入式红外图像超帧处理方法
CN104618664A (zh) * 2014-12-26 2015-05-13 昆明物理研究所 一种基于自适应积分时间的嵌入式红外图像超帧处理方法
CN105450939A (zh) * 2015-11-19 2016-03-30 上海斐讯数据通信技术有限公司 一种高动态范围图像的显示方法及移动终端
US20170067782A1 (en) * 2015-09-04 2017-03-09 Bwt Property, Inc. Laser Induced Breakdown Spectroscopy (LIBS) Apparatus Based on High Repetition Rate Pulsed Laser
WO2017087601A1 (en) * 2015-11-19 2017-05-26 Google Inc. Generating high-dynamic range images using multiple filters
CN108833804A (zh) * 2018-09-20 2018-11-16 Oppo广东移动通信有限公司 成像方法、装置和电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104486562A (zh) * 2014-12-26 2015-04-01 昆明物理研究所 基于固定积分时间的嵌入式红外图像超帧处理方法
CN104618664A (zh) * 2014-12-26 2015-05-13 昆明物理研究所 一种基于自适应积分时间的嵌入式红外图像超帧处理方法
US20170067782A1 (en) * 2015-09-04 2017-03-09 Bwt Property, Inc. Laser Induced Breakdown Spectroscopy (LIBS) Apparatus Based on High Repetition Rate Pulsed Laser
CN105450939A (zh) * 2015-11-19 2016-03-30 上海斐讯数据通信技术有限公司 一种高动态范围图像的显示方法及移动终端
WO2017087601A1 (en) * 2015-11-19 2017-05-26 Google Inc. Generating high-dynamic range images using multiple filters
CN108833804A (zh) * 2018-09-20 2018-11-16 Oppo广东移动通信有限公司 成像方法、装置和电子设备

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110579283A (zh) * 2019-09-18 2019-12-17 北京理工大学 Hdr动态红外辐射源阵列靶标

Also Published As

Publication number Publication date
CN109660743B (zh) 2021-06-08

Similar Documents

Publication Publication Date Title
US8749699B2 (en) Method and device for video processing using a neighboring frame to calculate motion information
CN104869381B (zh) 一种图像处理***、方法及装置
CN105578067B (zh) 图像生成方法、装置及终端设备
CN107888839B (zh) 高动态范围图像获取方法、装置及设备
CN108322650A (zh) 视频拍摄方法和装置、电子设备、计算机可读存储介质
CN103312996B (zh) 图像处理设备、图像处理方法和放射线***
CN104601905A (zh) 产生高动态范围影像的方法与装置以及计算机程序产品
CN102025979A (zh) 一种基于双dsp的红外视频实时增强显示装置
CN108769523A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN110290325A (zh) 图像处理方法、装置、存储介质及电子设备
CN109660743A (zh) 一种制冷型红外热像仪高动态范围成像的实现方法
CN106937063A (zh) 用于减少暗信号的模/数转换时间的方法及***
Tang et al. A high-dynamic range CMOS camera based on dual-gain channels
CN208424534U (zh) 成像仪的机芯组件及成像仪
Lapray et al. Hdr-artist: High dynamic range advanced real-time imaging system
CN110278375A (zh) 图像处理方法、装置、存储介质及电子设备
CN112598567B (zh) 一种fpga实现红外实时拼图中图像增强的方法
US11159725B2 (en) Image processing apparatus, image processing method, and recording medium
CN109523456A (zh) 图像处理方法和装置、电子设备、计算机可读存储介质
CN105959512B (zh) 3d降噪实现方法及装置
Lapray et al. Smart camera design for realtime high dynamic range imaging
CN106954029A (zh) 一种全景视频拼接方法及***
CN110213503A (zh) 图像处理方法、装置、存储介质及电子设备
CN109672869A (zh) 一种分时复用图像处理装置、方法以及电子设备
CN108632502B (zh) 一种图像锐化的方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant