CN110298870A - 图像的处理方法、处理装置及终端 - Google Patents
图像的处理方法、处理装置及终端 Download PDFInfo
- Publication number
- CN110298870A CN110298870A CN201910589893.0A CN201910589893A CN110298870A CN 110298870 A CN110298870 A CN 110298870A CN 201910589893 A CN201910589893 A CN 201910589893A CN 110298870 A CN110298870 A CN 110298870A
- Authority
- CN
- China
- Prior art keywords
- image
- multiframe
- registration
- initial pictures
- correlation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 35
- 238000003672 processing method Methods 0.000 title claims abstract description 21
- 238000005259 measurement Methods 0.000 claims abstract description 26
- 238000000034 method Methods 0.000 claims abstract description 24
- 238000003860 storage Methods 0.000 claims abstract description 16
- 238000004590 computer program Methods 0.000 claims description 21
- 238000012935 Averaging Methods 0.000 claims description 11
- 238000013519 translation Methods 0.000 claims description 8
- 238000001931 thermography Methods 0.000 abstract description 25
- 238000009529 body temperature measurement Methods 0.000 abstract description 8
- 238000012937 correction Methods 0.000 abstract description 3
- 230000006870 function Effects 0.000 description 14
- 230000008569 process Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000001914 filtration Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000002310 reflectometry Methods 0.000 description 3
- 230000008439 repair process Effects 0.000 description 3
- 238000012360 testing method Methods 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 238000004891 communication Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000000399 optical microscopy Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 230000004304 visual acuity Effects 0.000 description 2
- 241000208340 Araliaceae Species 0.000 description 1
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 1
- 235000003140 Panax quinquefolius Nutrition 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 230000006866 deterioration Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 235000008434 ginseng Nutrition 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000014759 maintenance of location Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
- G06T7/32—Determination of transform parameters for the alignment of images, i.e. image registration using correlation-based methods
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
- G01J2005/0077—Imaging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10056—Microscopic image
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Theoretical Computer Science (AREA)
- Spectroscopy & Molecular Physics (AREA)
- Image Analysis (AREA)
Abstract
本发明适用于显微热成像技术领域，提供了一种图像的处理方法、处理装置、终端及计算机可读存储介质。其中，所述处理方法包括：获取被测目标的多帧初始图像；确定所述多帧初始图像的参考图像；基于所述参考图像对所述多帧初始图像进行图像配准，得到多帧配准图像；从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。本发明可用于对显微热成像得到的显微热图像进行偏移修正，有利于提高利用显微热成像进行非接触式温度测量的测量准确性。
Description
技术领域
本发明属于显微热成像技术领域，尤其涉及一种图像的处理方法、处理装置、终端及计算机可读存储介质。
背景技术
光反射热成像是一种非接触式测温技术，其基础是光热反射现象，其基本特征是物体的反射率会随物体的温度变化而变化。由于反射率随温度的变化可以认为是线性的，可以用光热反射系数(Thermo reflectance coefficience)来表征反射率随温度的变化。
为了实现高空间分辨力的显微热成像，通常采用基于高性能的光学显微镜来组建显微光反射热成像装置。利用光学显微镜的照明***提供探测光，使用高性能相机记录显微成像，并根据显微成像获得的显微热图像计算光热反射系数，进而实现温度的非接触式测量。
为了保证测量精度，通常需要对被测目标进行多次测量得到多帧显微热图像，并根据得到的多帧显微热图像确定最终的测量结果。然而，在多次测量的过程中，由于显微光反射热成像装置的振动、位置漂移或热对流等影响因素的存在，各次测量所得图像之间往往存在偏移；另外，受被测目标的封装方式或者夹具、热台等测量部件的热膨胀影响，温度变化前后的图像也会存在偏移。
受上述偏移的影响，直接拍摄记录的显微热图像的成像效果往往达不到要求，例如，在被测目标(例如电路板芯片)的材料交界和结构边沿等位置，由于图像灰度存在陡峭变化，使得微小的像素偏移也可能导致显著的测量误差，特别是在高分辨力下可能导致大片图像区域数据无效，严重影响测量的准确性。
发明内容
有鉴于此，本发明提供了一种图像的处理方法、处理装置、终端及计算机可读存储介质，旨在解决现有技术中直接拍摄获得的多帧图像之间存在的偏移问题。
本发明实施例的第一方面提供了一种图像的处理方法，该处理方法包括：
获取被测目标的多帧初始图像；
确定所述多帧初始图像的参考图像；
基于所述参考图像对所述多帧初始图像进行图像配准，得到多帧配准图像；
从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
本发明实施例的第二方面提供了一种图像的处理装置，该处理装置包括：
获取单元，用于获取被测目标的多帧初始图像；
确定单元，用于确定所述获取单元获取的所述多帧初始图像的参考图像；
配准单元，用于基于所述确定单元确定的所述参考图像对所述获取单元获取的所述多帧初始图像进行图像配准，得到多帧配准图像；
第一选取单元，用于从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
本发明实施例的第三方面提供了一种终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如任一项所述图像的处理方法的步骤。
本发明实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如任一项所述图像的处理方法的步骤。
本发明与现有技术相比存在的有益效果是：
本发明一方面通过获取被测目标的多帧初始图像和确定所述多帧初始图像的参考图像，并将获取的被测目标的多帧初始图像与参考图像进行图像配准，从而对多帧初始图像之间的偏移进行了修正；另一方面通过从修正后得到的多帧配准图像总选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像，可以将不符合相关度要求的配准图像去除掉。本发明可用于对显微热成像得到的显微热图像进行偏移修正，有利于提高利用显微热成像进行非接触式温度测量的测量准确性。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的图像的处理方法的实现流程图；
图2是本发明另一实施例提供的图像的处理方法的实现流程图；
图3是本发明实施例提供的图像的处理装置的结构示意图；
图4是本发明实施例提供的终端的示意图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定***结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的***、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。
本发明实施例可以应用于显微热成像***，用于对显微热成像***获得的显微热图像进行处理，以修正显微热成像***获得的显微热图像之间的偏移问题，从而提高利用显微热成像进行非接触式温度测量的测量准确性。
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图通过具体实施例来进行说明。
参见图1，其示出了本发明实施例提供的图像的处理方法的实现流程图，详述如下：
在步骤101中、获取被测目标的多帧初始图像。
在本发明实施例中，所述多帧初始图像可以是显微热成像***拍摄的被测目标的多帧初始显微热图像。
在一些实施例中，显微热成像***拍摄的被测目标的多帧初始显微热图像可以是经过预处理的多帧初始显微热图像。
示例性的，预处理过程可以包括：从显微热成像***拍摄的被测目标的原始图像上进行感兴趣区域的截取，将截取的图像作为初始显微热图像。例如，当对被测目标上的一个目标点进行热信息测量时，可以截取被测目标的原始图像上的该目标点所在区域对应的区域图像，从而可以有效减少后续的计算量。当然，对于获取的多帧原始图像，各帧原始图像截取的图像区域需要一致。
又一示例性的，预处理过程可以包括：利用均值滤波、中值滤波或自适应滤波等方法对多帧原始图像进行滤波，得到多帧初始显微热图像。这样可以实现图像的空间滤波降噪。
在步骤102中、确定所述多帧初始图像的参考图像。
在本发明实施例中，参考图像可以是显微热成像***拍摄的被测目标的多帧初始显微热图像中的一帧初始显微热图像，通过确定参考图像，可以以参考图像为配准参考对获取的多帧初始图像进行图像配准。
可选的，上述步骤102可以包括：对所述多帧初始图像进行多图像平均处理，得到所述多帧初始图像的参考图像；
在本发明实施例中，通过对所述多帧初始图像进行多图像平均处理，将得到的图像作为所述多帧初始图像的参考图像。示例性的，假设当前获取到三帧初始图像，可以分别计算这三帧初始图像上的相应像素点的像素均值(即三个像素的和除以三)，以各相应像素点的像素均值作为新图像上相应像素点的像素值，得到的新图像即可作为参考图像。其中，相应像素点是指多帧初始图像的图像上像素位置一致的像素点。
可选的，上述步骤102可以包括：
根据预设的选取规则从所述多帧初始图像中选取一帧初始图像作为所述多帧初始图像的参考图像。示例性的，所述选取规则可以为随机选取。
在步骤103中、基于所述参考图像对所述多帧初始图像进行图像配准，得到多帧配准图像；
在本发明实施例中，所述多帧配准图像可以为进行了图像配准后的显微热图像，通过图像配准操作，可以对多帧图像之间的偏移进行初步修正。
可选的，上述步骤103可以包括：计算所述多帧初始图像中的每帧初始图像相对于所述参考图像的平移量；根据所述平移量对每帧初始图像进行平移配准，得到多帧配准图像。
在本发明实施例中，可以采用相关相位法或者互相关法计算每帧初始图像相对于参考图像的平移量，并根据计算得到的平移量对该帧初始图像进行平移配准，得到该帧初始图像对应的配准图像。从而通过对每帧初始图像进行平移配准，可以得到多帧配准图像。
在本发明实施例中，根据所述平移量对每帧初始图像进行平移配准具体可以基于空域差值法或频域相移法来实现。
需要说明的是，本发明实施例中所进行的平移量计算以及所进行的平移配准均可达到亚像素级的分辨率。在进行平移量计算时，可以基于互相关、通过双线性插值法达到亚像素级分辨力，根据平移量计算的结果在进行平移操作时，也可通过双线性插值法进行处理以达到亚像素级分辨力。
可见，本发明实施例提供的图像的处理方法，能够对由于振动、位置漂移、热对流、热膨胀等引起的显微热图像的图像质量劣化问题进行有效的修正和改善，其处理精度可以达到亚像素级别，能够有效提高热测量的准确性。
在步骤104中、从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
在本发明实施例中，为了进一步图像的精度，可以从得到的多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。其中，可用图像表示可以较为准确的反映被测目标的热测量信息的图像，当用于显微热图像处理时，得到的可用显微热图像由于进行了偏移修正，能够更为准确的反映被测目标的热测量信息。
由于两帧图像之间的偏移越大时，这两帧图像的相关度就会越小，在本发明实施例中，通过基于相关度对多帧配准图像进行筛选的方式，选取出相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。该方式应用于对显微热图像进行处理时，得到的可用显微热图像可以更为准确的反映被测目标的热测量信息，有利于提高热测量结果的准确性。
在本发明实施例中，上述热测量信息指基于显微热成像方式获取被测目标的显微热图像，并根据显微热图像得到的被测目标的光热反射系数、被测温度等信息。
可选的，上述步骤104可以包括：
将所述多帧配准图像中的一帧配准图像作为选中图像；
计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度；
将与所述选中图像的相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
在本发明实施例中，以多帧配准图像中的一帧配准图像作为选中图像，从所述多帧配准图像中选取与该选中图像的相关度符合预设要求的两帧以上的配准图像作为被测目标的可用图像，对于与该选中图像的相关度不符合预设要求的图像可以不予进行后续处理。所述预设要求可以根据时间情况进行选用，例如，可以选取与该选中图像相关度最大的前1000帧图像作为所述被测目标的可用图像。
可选的，所述计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度可以包括：
计算每帧配准图像与所述选中图像的对应像素的差值的平方和；
将与所述选中图像的对应像素的差值的平方和小于预设的第一阈值的配准图像确定为相关度符合所述预设要求的配准图像。
在本发明实施例中，所述对应像素是指多帧配准图像中位置关系一致的像素点，例如，选中图像上的中心坐标处的像素，其对应像素为配准图像上的中心坐标处的像素。两帧图像的对应像素的差值的平方和越小，表示该两帧图像的偏移越小，该两帧图像的相关度越大。
可选的，所述计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度可以包括：
计算每帧配准图像与所述选中图像在指定图像区域的像素误差；
将与所述选中图像在指定图像区域的像素误差小于预设的第二阈值的配准图像确定为相关度符合所述预设要求的配准图像。
在本发明实施例中，各帧配准图像与选中图像在指定图像区域的像素误差越小，表示该帧配准图像与选中图像的偏移越小，该帧配准图像与选中图像的相关度越大。
具体的，上述像素误差可以基于预定义的误差函数en来计算，该误差函数en可表示为：
其中，L表示指定图像区域内的像素集合，p表示L中的像素，c1(p)表示配准图像在像素p的值，c2(p)表示选中图像在像素p的值。
在本发明实施例中，通过给定第二阈值tn，若某帧配准图像与所述选中图像在指定图像区域的像素误差en小于第二阈值tn，则可将该帧配准图像确定为相关度符合所述预设要求的配准图像。
在本发明实施例中，可以将与所述选中图像在指定图像区域的像素误差不小于预设的第二阈值的配准图像确定为相关度不符合所述预设要求的图像，不参与后续处理过程。
由上可知，本发明一方面通过获取被测目标的多帧初始图像和确定所述多帧初始图像的参考图像，并将获取的被测目标的多帧初始图像与参考图像进行图像配准，从而对多帧初始图像之间的偏移进行了修正；另一方面通过从修正后得到的多帧配准图像总选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像，可以将不符合相关度要求的配准图像去除掉。本发明可用于对显微热成像得到的显微热图像进行偏移修正，有利于提高利用显微热成像进行非接触式温度测量的测量准确性。
图2示出了本发明另一实施例提供的图像的处理方法的实现流程图，详述如下：
在步骤201中、获取被测目标的多帧初始图像；
在步骤202中、确定所述多帧初始图像的参考图像；
在步骤203中、基于所述参考图像对所述多帧初始图像进行图像配准，得到多帧配准图像；
在步骤204中、从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
上述步骤201至步骤204具体可参见图1所示实施例中的步骤101至步骤104，以及其对应的可选实施例，在此不再赘述。
在步骤205中、对所述可用图像进行多图像平均处理，并根据所述多图像平均处理的结果获得所述被测目标的热测量信息。
在本发明实施例中，通过对可用图像进行多图像平均处理，可以降低噪声的影响，从而提高信噪比，获得更好的测量精度。
示例性的，对于被测目标上的每个像素p，可以对所有可用图像的对应像素p的值取平均，得到平均值该平均值其中，i表示可用图像的数量。
在根据显微热图像进行温度测量的应用中，被测目标的待测温度可以基于公式计算得到，其中，Tx表示待测温度，T0表示参考温度，CTR表示被测目标的光热反射系数。上述平均值可以作为参考温度下的均值测量读数(在参考温度下获取显微热图像并进行本发明上述实施例所述的处理)，也可以作为待测温度下的均值测量读数(在待测温度下获取显微热图像并进行本发明上述实施例所述的处理)，将和共同用于上述公式即可计算得到被测目标的待测温度。
由上可知，本发明一方面通过获取被测目标的多帧初始图像和确定所述多帧初始图像的参考图像，并将获取的被测目标的多帧初始图像与参考图像进行图像配准，从而对多帧初始图像之间的偏移进行了修正；另一方面通过从修正后得到的多帧配准图像总选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像，可以将不符合相关度要求的配准图像去除掉。本发明可用于对显微热成像得到的显微热图像进行偏移修正，有利于提高利用显微热成像进行非接触式温度测量的测量准确性。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
以下为本发明的装置实施例，对于其中未详尽描述的细节，可以参考上述对应的方法实施例。
图3示出了本发明实施例提供的图像的处理装置的结构示意图，为了便于说明，仅示出了与本发明实施例相关的部分，详述如下：
如图3所示，图像的处理装置3包括：获取单元31，确定单元32，配准单元33和选取单元34。
获取单元31，用于获取被测目标的多帧初始图像；
确定单元32，用于确定获取单元31获取的所述多帧初始图像的参考图像；
配准单元33，用于基于确定单元32确定的所述参考图像对所述获取单元获取的所述多帧初始图像进行图像配准，得到多帧配准图像；
选取单元34，用于从配准单元33得到的所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
可选的，图像的处理装置3还包括：
热测量单元，用于对所述可用图像进行多图像平均处理，并根据所述多图像平均处理的结果获得所述被测目标的热测量信息。
可选的，确定单元32具体用于，对所述多帧初始图像进行多图像平均处理，得到所述多帧初始图像的参考图像；或者，根据预设的选取规则从所述多帧初始图像中选取一帧初始图像作为所述多帧初始图像的参考图像。
可选的，图像的处理装置3还包括：
平移量计算单元，用于计算所述多帧初始图像中的每帧初始图像相对于所述参考图像的平移量；
相应的，配准单元33具体用于，根据所述平移量对每帧初始图像进行平移配准，得到多帧配准图像。
可选的，图像的处理装置3还包括：
选中单元，用于将所述多帧配准图像中的一帧配准图像作为选中图像；
相关度计算单元，用于计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度；
相应的，选取单元34具体用于，将与所述选中图像的相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
可选的，相关度计算单元具体用于，计算每帧配准图像与所述选中图像的对应像素的差值的平方和，并将与所述选中图像的对应像素的差值的平方和小于预设的第一阈值的配准图像确定为相关度符合所述预设要求的配准图像。
可选的，相关度计算单元具体用于，计算每帧配准图像与所述选中图像在指定图像区域的像素误差，并将与所述选中图像在指定图像区域的像素误差小于预设的第二阈值的配准图像确定为相关度符合所述预设要求的配准图像。
由上可知，本发明一方面通过获取被测目标的多帧初始图像和确定所述多帧初始图像的参考图像，并将获取的被测目标的多帧初始图像与参考图像进行图像配准，从而对多帧初始图像之间的偏移进行了修正；另一方面通过从修正后得到的多帧配准图像总选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像，可以将不符合相关度要求的配准图像去除掉。本发明可用于对显微热成像得到的显微热图像进行偏移修正，有利于提高利用显微热成像进行非接触式温度测量的测量准确性。
图4是本发明一实施例提供的终端的示意图。如图4所示，该实施例的终端4包括：处理器40、存储器41以及存储在所述存储器41中并可在所述处理器40上运行的计算机程序42。所述处理器40执行所述计算机程序42时实现上述各个图像的处理方法实施例中的步骤，例如图1所示的步骤101至步骤104。或者，所述处理器40执行所述计算机程序42时实现上述各装置实施例中各模块/单元的功能，例如图3所示单元31至34的功能。
示例性的，所述计算机程序42可以被分割成一个或多个模块/单元，所述一个或者多个模块/单元被存储在所述存储器41中，并由所述处理器40执行，以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段，该指令段用于描述所述计算机程序42在所述终端4中的执行过程。例如，所述计算机程序42可以被分割成获取单元，确定单元，配准单元和第一选取单元，各单元具体功能如下：
获取单元，用于获取被测目标的多帧初始图像；
确定单元，用于确定所述获取单元获取的所述多帧初始图像的参考图像；
配准单元，用于基于所述确定单元确定的所述参考图像对所述获取单元获取的所述多帧初始图像进行图像配准，得到多帧配准图像；
选取单元，用于从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
所述终端4可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端可包括，但不仅限于，处理器40、存储器41。本领域技术人员可以理解，图4仅仅是终端4的示例，并不构成对终端4的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件，例如所述终端还可以包括输入输出设备、网络接入设备、总线等。
所称处理器40可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器41可以是所述终端4的内部存储单元，例如终端4的硬盘或内存。所述存储器41也可以是所述终端4的外部存储设备，例如所述终端4上配备的插接式硬盘，智能存储卡(Smart Media Card，SMC)，安全数字(Secure Digital，SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器41还可以既包括所述终端4的内部存储单元也包括外部存储设备。所述存储器41用于存储所述计算机程序以及所述终端所需的其他程序和数据。所述存储器41还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到，为了描述的方便和简洁，仅以上述各功能单元、模块的划分进行举例说明，实际应用中，可以根据需要而将上述功能分配由不同的功能单元、模块完成，即将所述装置的内部结构划分成不同的功能单元或模块，以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中，上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。另外，各功能单元、模块的具体名称也只是为了便于相互区分，并不用于限制本申请的保护范围。上述***中单元、模块的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述或记载的部分，可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中，应该理解到，所揭露的装置/终端和方法，可以通过其它的方式实现。例如，以上所描述的装置/终端实施例仅仅是示意性的，例如，所述模块或单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口，装置或单元的间接耦合或通讯连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明实现上述实施例方法中的全部或部分流程，也可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一计算机可读存储介质中，该计算机程序在被处理器执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围，均应包含在本发明的保护范围之内。
Claims (10)
1.一种图像的处理方法，其特征在于，所述处理方法包括：
获取被测目标的多帧初始图像；
确定所述多帧初始图像的参考图像；
基于所述参考图像对所述多帧初始图像进行图像配准，得到多帧配准图像；
从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
2.根据权利要求1所述的图像的处理方法，其特征在于，在从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像之后还包括：
对所述可用图像进行多图像平均处理，并根据所述多图像平均处理的结果获得所述被测目标的热测量信息。
3.根据权利要求1或2所述的图像的处理方法，其特征在于，所述确定所述多帧初始图像的参考图像包括：
对所述多帧初始图像进行多图像平均处理，得到所述多帧初始图像的参考图像；或者，
根据预设的选取规则从所述多帧初始图像中选取一帧初始图像作为所述多帧初始图像的参考图像。
4.根据权利要求1或2所述的图像的处理方法，其特征在于，所述基于所述参考图像对所述多帧初始图像进行图像配准，得到多帧配准图像包括：
计算所述多帧初始图像中的每帧初始图像相对于所述参考图像的平移量；
根据所述平移量对每帧初始图像进行平移配准，得到多帧配准图像。
5.根据权利要求1或2所述的图像的处理方法，其特征在于，所述从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像包括：
将所述多帧配准图像中的一帧配准图像作为选中图像；
计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度；
将与所述选中图像的相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
6.根据权利要求5所述的图像的处理方法，其特征在于，所述计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度包括：
计算每帧配准图像与所述选中图像的对应像素的差值的平方和；
将与所述选中图像的对应像素的差值的平方和小于预设的第一阈值的配准图像确定为相关度符合所述预设要求的配准图像。
7.根据权利要求5所述的图像的处理方法，其特征在于，所述计算所述多帧配准图像中的每帧配准图像与所述选中图像的相关度包括：
计算每帧配准图像与所述选中图像在指定图像区域的像素误差；
将与所述选中图像在指定图像区域的像素误差小于预设的第二阈值的配准图像确定为相关度符合所述预设要求的配准图像。
8.一种图像的处理装置，其特征在于，所述处理装置包括：
获取单元，用于获取被测目标的多帧初始图像；
确定单元，用于确定所述获取单元获取的所述多帧初始图像的参考图像；
配准单元，用于基于所述确定单元确定的所述参考图像对所述获取单元获取的所述多帧初始图像进行图像配准，得到多帧配准图像；
第一选取单元，用于从所述多帧配准图像中选取相关度符合预设要求的两帧以上的配准图像作为所述被测目标的可用图像。
9.一种终端，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如上的权利要求1至7中任一项所述图像的处理方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如上的权利要求1至7中任一项所述图像的处理方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910589893.0A CN110298870A (zh) | 2019-07-02 | 2019-07-02 | 图像的处理方法、处理装置及终端 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910589893.0A CN110298870A (zh) | 2019-07-02 | 2019-07-02 | 图像的处理方法、处理装置及终端 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN110298870A true CN110298870A (zh) | 2019-10-01 |
Family
ID=68029983
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910589893.0A Pending CN110298870A (zh) | 2019-07-02 | 2019-07-02 | 图像的处理方法、处理装置及终端 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN110298870A (zh) |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112067136A (zh) * | 2020-08-26 | 2020-12-11 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的漂移修正方法及装置 |
| CN113624358A (zh) * | 2021-07-14 | 2021-11-09 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的三维位移补偿方法及控制装置 |
| US20220284604A1 (en) * | 2021-03-05 | 2022-09-08 | Leica Microsystems Cms Gmbh | Multispectral microscope system and method for registering first and second images by means thereof |
| US12025501B2 (en) | 2021-07-14 | 2024-07-02 | The 13Th Research Institute Of China Electronics Technology Group Corporation | Three-dimensional displacement compensation method for microscopic thermoreflectance thermography and control device |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5251271A (en) * | 1991-10-21 | 1993-10-05 | R. R. Donnelley & Sons Co. | Method for automatic registration of digitized multi-plane images |
| CN102100565A (zh) * | 2009-12-17 | 2011-06-22 | 通用电气公司 | 使用非刚性配准校正门控pet图像中运动的***和方法 |
| CN102651132A (zh) * | 2012-04-06 | 2012-08-29 | 华中科技大学 | 一种基于交叉视觉皮质模型的医学图像配准方法 |
| CN104573742A (zh) * | 2014-12-30 | 2015-04-29 | 中国科学院深圳先进技术研究院 | 医学图像分类方法和*** |
| CN105959559A (zh) * | 2016-06-08 | 2016-09-21 | 维沃移动通信有限公司 | 一种夜景拍摄方法及移动终端 |
| CN107133461A (zh) * | 2017-04-26 | 2017-09-05 | 中国人民解放军总医院 | 一种基于自编码器的医学图像处理装置与方法 |
-
2019
- 2019-07-02 CN CN201910589893.0A patent/CN110298870A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5251271A (en) * | 1991-10-21 | 1993-10-05 | R. R. Donnelley & Sons Co. | Method for automatic registration of digitized multi-plane images |
| CN102100565A (zh) * | 2009-12-17 | 2011-06-22 | 通用电气公司 | 使用非刚性配准校正门控pet图像中运动的***和方法 |
| CN102651132A (zh) * | 2012-04-06 | 2012-08-29 | 华中科技大学 | 一种基于交叉视觉皮质模型的医学图像配准方法 |
| CN104573742A (zh) * | 2014-12-30 | 2015-04-29 | 中国科学院深圳先进技术研究院 | 医学图像分类方法和*** |
| CN105959559A (zh) * | 2016-06-08 | 2016-09-21 | 维沃移动通信有限公司 | 一种夜景拍摄方法及移动终端 |
| CN107133461A (zh) * | 2017-04-26 | 2017-09-05 | 中国人民解放军总医院 | 一种基于自编码器的医学图像处理装置与方法 |
Non-Patent Citations (3)
| Title |
|---|
| EUN SIL LEE ET AL.: "Regularized adaptive high-resolution image reconstruction considering inaccurate subpixel registration", 《IEEE TRANSACTIONS ON IMAGE PROCESSING》 * |
| 朱彦: "基于序列图像的地面目标图像复原", 《中国优秀博硕士学位论文全文和数据库（硕士） 信息科技辑》 * |
| 陈景杨: "红外显微图像超分辨重建算法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑》 * |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112067136A (zh) * | 2020-08-26 | 2020-12-11 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的漂移修正方法及装置 |
| CN112067136B (zh) * | 2020-08-26 | 2021-09-28 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的漂移修正方法及装置 |
| US20220284604A1 (en) * | 2021-03-05 | 2022-09-08 | Leica Microsystems Cms Gmbh | Multispectral microscope system and method for registering first and second images by means thereof |
| CN113624358A (zh) * | 2021-07-14 | 2021-11-09 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的三维位移补偿方法及控制装置 |
| WO2023284320A1 (zh) * | 2021-07-14 | 2023-01-19 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的三维位移补偿方法及控制装置 |
| CN113624358B (zh) * | 2021-07-14 | 2023-09-26 | 中国电子科技集团公司第十三研究所 | 用于光热反射显微热成像的三维位移补偿方法及控制装置 |
| US12025501B2 (en) | 2021-07-14 | 2024-07-02 | The 13Th Research Institute Of China Electronics Technology Group Corporation | Three-dimensional displacement compensation method for microscopic thermoreflectance thermography and control device |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Honauer et al. | A dataset and evaluation methodology for depth estimation on 4D light fields | |
| Lefloch et al. | Technical foundation and calibration methods for time-of-flight cameras | |
| Haldar et al. | Improved diffusion imaging through SNR‐enhancing joint reconstruction | |
| Bhattacharya et al. | Stereo-particle image velocimetry uncertainty quantification | |
| CN110298870A (zh) | 图像的处理方法、处理装置及终端 | |
| Cunnington et al. | 21-cm foregrounds and polarization leakage: cleaning and mitigation strategies | |
| Tozza et al. | Direct differential photometric stereo shape recovery of diffuse and specular surfaces | |
| JP2024507089A (ja) | 画像のコレスポンデンス分析装置およびその分析方法 | |
| Werling et al. | Inspection of specular and partially specular surfaces | |
| CN108955901A (zh) | 一种红外测温方法、***及终端设备 | |
| US20240081615A1 (en) | Multicore fiber imaging | |
| CN116385520A (zh) | 融合全光源图像的磨损表面形貌光度立体重建方法及*** | |
| Chen et al. | Perspective phase angle model for polarimetric 3d reconstruction | |
| CN110310309A (zh) | 一种图像配准方法、图像配准装置及终端 | |
| CN110310245A (zh) | 图像照明分布的修正方法、修正装置及终端 | |
| CA3185292A1 (en) | Neural network analysis of lfa test strips | |
| CN110335219A (zh) | 一种像素畸变的校正方法、校正装置及终端 | |
| Elnashef et al. | Theory and closed-form solutions for three-and n-layer flat refractive geometry | |
| Kadambi et al. | Frequency domain TOF: encoding object depth in modulation frequency | |
| CN110207842A (zh) | 亚像素级边缘效应的修正方法及终端设备 | |
| Duché et al. | Partial volume model for brain MRI scan using MP2RAGE | |
| Shim et al. | Noise reduction using mean shift algorithm for estimating 3D shape | |
| Molnár et al. | ToFNest: Efficient normal estimation for time-of-flight depth cameras | |
| US20230019751A1 (en) | Method and apparatus for light estimation | |
| Bergsma et al. | Velocity estimation of spots in three‐dimensional confocal image sequences of living cells |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191001 |
|
| RJ01 | Rejection of invention patent application after publication |