CN110987183A - 多光谱成像***及方法 - Google Patents
多光谱成像***及方法 Download PDFInfo
- Publication number
- CN110987183A CN110987183A CN201911381603.XA CN201911381603A CN110987183A CN 110987183 A CN110987183 A CN 110987183A CN 201911381603 A CN201911381603 A CN 201911381603A CN 110987183 A CN110987183 A CN 110987183A
- Authority
- CN
- China
- Prior art keywords
- image
- vegetation index
- reflectivity
- multispectral imaging
- band
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000701 chemical imaging Methods 0.000 title claims abstract description 101
- 238000000034 method Methods 0.000 title claims abstract description 77
- 238000002310 reflectometry Methods 0.000 claims abstract description 155
- 230000003595 spectral effect Effects 0.000 claims abstract description 99
- 238000005286 illumination Methods 0.000 claims abstract description 65
- 238000004364 calculation method Methods 0.000 claims abstract description 41
- 238000012937 correction Methods 0.000 claims abstract description 40
- 230000005855 radiation Effects 0.000 claims abstract description 25
- 238000001228 spectrum Methods 0.000 claims description 45
- 239000002689 soil Substances 0.000 claims description 37
- 238000004891 communication Methods 0.000 claims description 23
- 230000000694 effects Effects 0.000 claims description 16
- 238000001514 detection method Methods 0.000 abstract description 11
- 230000008569 process Effects 0.000 description 14
- 238000006243 chemical reaction Methods 0.000 description 8
- 238000001914 filtration Methods 0.000 description 7
- 238000012545 processing Methods 0.000 description 7
- 208000027066 STING-associated vasculopathy with onset in infancy Diseases 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 230000009466 transformation Effects 0.000 description 6
- 238000010586 diagram Methods 0.000 description 5
- 230000012010 growth Effects 0.000 description 5
- 238000010521 absorption reaction Methods 0.000 description 3
- 230000033228 biological regulation Effects 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 239000003814 drug Substances 0.000 description 3
- 230000036541 health Effects 0.000 description 3
- 238000011835 investigation Methods 0.000 description 3
- 238000012544 monitoring process Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 238000005507 spraying Methods 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 229930002875 chlorophyll Natural products 0.000 description 2
- 235000019804 chlorophyll Nutrition 0.000 description 2
- ATNHDLDRLWWWCB-AENOIHSZSA-M chlorophyll a Chemical compound C1([C@@H](C(=O)OC)C(=O)C2=C3C)=C2N2C3=CC(C(CC)=C3C)=[N+]4C3=CC3=C(C=C)C(C)=C5N3[Mg-2]42[N+]2=C1[C@@H](CCC(=O)OC\C=C(/C)CCC[C@H](C)CCC[C@H](C)CCCC(C)C)[C@H](C)C2=C5 ATNHDLDRLWWWCB-AENOIHSZSA-M 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 241000238631 Hexapoda Species 0.000 description 1
- 241000607479 Yersinia pestis Species 0.000 description 1
- 230000003044 adaptive effect Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000002146 bilateral effect Effects 0.000 description 1
- 230000009194 climbing Effects 0.000 description 1
- 201000010099 disease Diseases 0.000 description 1
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 description 1
- 239000003337 fertilizer Substances 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 238000009432 framing Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000035764 nutrition Effects 0.000 description 1
- 235000016709 nutrition Nutrition 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008635 plant growth Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 235000013619 trace mineral Nutrition 0.000 description 1
- 239000011573 trace mineral Substances 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J3/2823—Imaging spectrometer
- G01J2003/2826—Multispectral imaging, e.g. filter imaging
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
- G01J3/00—Spectrometry; Spectrophotometry; Monochromators; Measuring colours
- G01J3/28—Investigating the spectrum
- G01J2003/2866—Markers; Calibrating of scan
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N21/00—Investigating or analysing materials by the use of optical means, i.e. using sub-millimetre waves, infrared, visible or ultraviolet light
- G01N21/17—Systems in which incident light is modified in accordance with the properties of the material investigated
- G01N2021/1793—Remote sensing
- G01N2021/1797—Remote sensing in landscape, e.g. crops
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01N—INVESTIGATING OR ANALYSING MATERIALS BY DETERMINING THEIR CHEMICAL OR PHYSICAL PROPERTIES
- G01N2201/00—Features of devices classified in G01N21/00
- G01N2201/02—Mechanical
- G01N2201/021—Special mounting in general
- G01N2201/0214—Airborne
Landscapes
- Physics & Mathematics (AREA)
- Spectroscopy & Molecular Physics (AREA)
- General Physics & Mathematics (AREA)
- Investigating Or Analysing Materials By Optical Means (AREA)
- Image Processing (AREA)
Abstract
本申请涉及无人机技术领域,提供一种多光谱成像***及方法,多光谱成像***包括控制器及与控制器电连接的多目摄像头、光照传感器和数字处理器;控制器用于当无人机飞行到设定拍照点时,控制多目摄像头对目标地块进行拍摄,得到多个光谱图像;光照传感器用于测量每个预设波段的光照强度值;数字处理器用于根据每个预设波段的光照强度值对每个光谱图像均进行辐射校正得到多个反射率图像,以及按照植被指数从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算得到植被指数图。本申请无需人工参与即可自动生成反映目标地块中植物信息的植被指数图,节约了人力资源,提高了检测效率。
Description
技术领域
本申请涉及无人机技术领域,具体而言,涉及一种多光谱成像***及方法。
背景技术
随着无人机行业的快速发展,无人机在农业方面的应用也越来越广。无人机遥感***凭借其运载便利、灵活性高、作业周期短等优势,已被广泛应用于农田药物喷洒、农田信息监测、农业保险勘察等专业领域。
现有的光谱遥感技术通常采用无人机搭载多光谱传感器对农作物的光谱信息进行检测得到多光谱数据,再由专业人员对数据进行后续分析和处理得到植物信息,整个过程需要耗费大量人力。
发明内容
本申请的目的在于提供一种多光谱成像***及方法,用以解决现有的光谱遥感技术检测植物信息需要耗费大量人力的问题。
为了实现上述目的,本申请实施例采用的技术方案如下:
第一方面,本申请提供了一种多光谱成像***,所述多光谱成像***包括控制器及与所述控制器电连接的多目摄像头、光照传感器和数字处理器;所述控制器用于当无人机飞行到设定拍照点时,控制所述多目摄像头对目标地块进行拍摄,得到多个光谱图像,其中,每个所述光谱图像分别对应一个不同的预设波段;所述光照传感器用于测量每个所述预设波段的光照强度值;所述数字处理器用于根据每个所述预设波段的光照强度值对每个所述光谱图像均进行辐射校正,得到多个反射率图像;所述数字处理器还用于按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。
可选地,所述多光谱成像***还包括彩色摄像头,所述彩色摄像头与所述控制器电连接;所述控制器还用于在控制所述多目摄像头进行拍摄的同一时刻,控制所述彩色摄像头对所述目标地块进行拍摄,得到彩色图像;所述数字处理器还用于利用所述彩色图像,对每个所述反射率图像均进行图像增强。
可选地,多个所述预设波段包括绿光波段、红光波段、红边光波段和近红外波段;所述多目摄像头还用于对所述目标地块进行拍摄,得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像。
可选地,所述多个反射率图像包括绿光波段的反射率图像、红光波段的反射率图像、红边光波段的反射率图像和近红外波段的反射率图像;所述植被指数包括归一化植被指数,所述归一化植被指数对应红光波段和近红外波段,所述植被指数图包括归一化植被指数图;所述数字处理器还用于按照所述归一化植被指数,从所述多个反射率图像中获取红光波段的反射率图像和近红外波段的反射率图像,并对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到所述归一化植被指数图。
可选地,所述植被指数包括归一化红边差异指数,所述归一化红边差异指数对应红光波段和红边光波段,所述植被指数图包括归一化红边差异指数图;所述数字处理器还用于按照所述归一化红边差异指数,从所述多个反射率图像中获取红光波段的反射率图像和红边光波段的反射率图像,并对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到所述归一化红边差异指数图。
可选地,所述植被指数包括土壤植被指数,所述土壤植被指数对应红光波段和红外光波段,所述植被指数图包括土壤植被指数图;所述数字处理器还用于按照所述土壤植被指数,从所述多个反射率图像中获取红光波段的反射率图像和红外光波段的反射率图像,并对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到所述土壤植被指数图。
可选地,所述数字处理器还用于获取所述多目摄像头中每个镜头的相对位置关系,并根据每个镜头的相对位置关系对每个所述光谱图像均进行图像对齐。
可选地,所述数字处理器还用于对每个所述光谱图像均进行背景噪声校正,以去除每个所述光谱图像的背景噪声。
可选地,所述数字处理器还用于获取所述多目摄像头的镜头畸变模型参数,并根据所述镜头畸变模型参数,对每个所述光谱图像均进行畸变校正,以去除每个所述光谱图像的畸变。
可选地,所述数字处理器还用于对每个所述光谱图像均进行渐晕效应校正,以去除每个所述光谱图像的渐晕效应。
可选地,所述多光谱成像***还包括通信单元,所述通信单元与所述控制器电连接,且与终端通信连接;所述通信单元用于在所述控制器的控制下,将所述植被指数图发送至所述终端。
可选地,所述多光谱成像***还包括存储单元,所述存储单元与所述控制器电连接;所述存储单元用于在所述控制器的控制下,对所述植被指数图进行存储。
可选地,所述多光谱成像***还包括显示单元,所述显示单元与所述控制器电连接;所述显示单元用于在所述控制器的控制下,对所述植被指数图进行显示。
第二方面,本申请还提供了一种多光谱成像方法,应用于多光谱成像***,所述多光谱成像***包括控制器及与所述控制器电连接的多目摄像头、光照传感器和数字处理器;所述多光谱成像方法包括:当无人机飞行到设定拍照点时,所述控制器控制所述多目摄像头对目标地块进行拍摄得到多个光谱图像,其中,每个所述光谱图像分别对应一个不同的预设波段;所述光照传感器测量每个所述预设波段的光照强度值;所述数字处理器根据每个所述预设波段的光照强度值对每个所述光谱图像均进行辐射校正,得到多个反射率图像;所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。
可选地,所述多光谱成像***还包括彩色摄像头,所述彩色摄像头与所述控制器电连接;所述多光谱成像方法还包括:所述控制器在控制所述多目摄像头进行拍摄的同一时刻,控制所述彩色摄像头对所述目标地块进行拍摄,得到彩色图像;所述数字处理器利用所述彩色图像,对每个所述反射率图像均进行图像增强。
可选地,多个所述预设波段包括绿光波段、红光波段、红边光波段和近红外波段;所述控制器控制多目摄像头对目标地块进行拍摄得到多个光谱图像的步骤,包括:所述控制器控制多目摄像头对所述目标地块进行拍摄,得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像。
可选地,所述多个反射率图像包括绿光波段的反射率图像、红光波段的反射率图像、红边光波段的反射率图像和近红外波段的反射率图像;
所述植被指数包括归一化植被指数,所述归一化植被指数对应红光波段和近红外波段,所述植被指数图包括归一化植被指数图;所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的步骤,包括:所述数字处理器按照所述归一化植被指数,从所述多个反射率图像中获取红光波段的反射率图像和近红外波段的反射率图像,并对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到所述归一化植被指数图。
可选地,所述植被指数包括归一化红边差异指数,所述归一化红边差异指数对应红光波段和红边光波段,所述植被指数图包括归一化红边差异指数图;所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的步骤,包括:所述数字处理器按照所述归一化红边差异指数,从所述多个反射率图像中获取红光波段的反射率图像和红边光波段的反射率图像,并对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到所述归一化红边差异指数图。
可选地,所述植被指数包括土壤植被指数,所述土壤植被指数对应红光波段和红外光波段,所述植被指数图包括土壤植被指数图;所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的步骤,包括:所述数字处理器按照所述土壤植被指数,从所述多个反射率图像中获取红光波段的反射率图像和红外光波段的反射率图像,并对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到所述土壤植被指数图。
可选地,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:所述数字处理器获取所述多目摄像头中每个镜头的相对位置关系,并根据每个镜头的相对位置关系对每个所述光谱图像均进行图像对齐。
可选地,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:所述数字处理器对每个所述光谱图像均进行背景噪声校正,以去除每个所述光谱图像的背景噪声。
可选地,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:所述数字处理器获取所述多目摄像头的镜头畸变模型参数,并根据所述镜头畸变模型参数,对每个所述光谱图像均进行畸变校正,以去除每个所述光谱图像的畸变。
可选地,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:所述数字处理器对每个所述光谱图像均进行渐晕效应校正,以去除每个所述光谱图像的渐晕效应。
可选地,所述多光谱成像***还包括通信单元,所述通信单元与所述控制器电连接,且与终端通信连接;所述多光谱成像方法还包括:所述通信单元在所述控制器的控制下,将所述植被指数图发送至所述终端。
可选地,所述多光谱成像***还包括存储单元,所述存储单元与所述控制器电连接;所述多光谱成像方法还包括:所述存储单元在所述控制器的控制下,对所述植被指数图进行存储。
可选地,所述多光谱成像***还包括显示单元,所述显示单元与所述控制器电连接;所述多光谱成像方法还包括:所述显示单元在所述控制器的控制下,对所述植被指数图进行显示。
相对现有技术,本申请提供的一种多光谱成像***及方法,多光谱成像***包括控制器及与控制器电连接的多目摄像头、光照传感器和数字处理器,当无人机飞行到设定拍照点时,通过多目摄像头对目标地块进行拍摄得到每个预设波段的光谱图像,同时利用光照传感器测量每个预设波段的光照强度值;然后,数字处理器按照每个预设波段的光照强度值对每个光谱图像均进行辐射校正,得到多个反射率图像;再按照植被指数从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。本申请无需人工参与即可自动生成反映目标地块中植物信息的植被指数图,节约了人力资源,提高了检测效率。
为使本申请的上述目的、特征和优点能更明显易懂,下文特举较佳实施例,并配合所附附图,作详细说明如下。
附图说明
为了更清楚地说明本申请实施例的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,应当理解,以下附图仅示出了本申请的某些实施例,因此不应被看作是对范围的限定,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他相关的附图。
图1示出了本申请实施例提供的多光谱成像***的一种方框示意图。
图2示出了本申请实施例提供的拍照点的示例图。
图3示出了本申请实施例提供的多光谱成像***的另一种方框示意图。
图4示出了本申请实施例提供的多光谱成像***的另一种方框示意图。
图5示出了本申请实施例提供的多光谱成像方法的一种流程示意图。
图6示出了本申请实施例提供的多光谱成像方法的另一种流程示意图。
图7示出了本申请实施例提供的多光谱成像方法的另一种流程示意图。
图8示出了本申请实施例提供的多光谱成像方法的另一种流程示意图。
图标:100-多光谱成像***;110-控制器;120-多目摄像头;130-光照传感器;140-数字处理器;150-彩色摄像头;160-通信单元;170-存储单元;180-显示单元。
具体实施方式
下面将结合本申请实施例中附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。通常在此处附图中描述和示出的本申请实施例的组件可以以各种不同的配置来布置和设计。因此,以下对在附图中提供的本申请的实施例的详细描述并非旨在限制要求保护的本申请的范围,而是仅仅表示本申请的选定实施例。基于本申请的实施例,本领域技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例,都属于本申请保护的范围。
应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。同时,在本申请的描述中,术语“第一”、“第二”等仅用于区分描述,而不能理解为指示或暗示相对重要性。
随着无人机行业的快速发展,无人机在农业方面的应用也越来越广。无人机遥感***凭借其运载便利、灵活性高、作业周期短等优势,已被广泛应用于农田药物喷洒、农田信息监测、农业保险勘察等专业领域。
光谱遥感技术具有分辨率高、光谱连续性强、数据信息丰富等特点,能够动态、快速、准确、及时地提供地物数据信息,是农业中获取信息的有效手段。光谱遥感技术可以探测到作物叶片生长过程中的生理化学变化,能将得到的光谱数据绘制成光谱响应曲线,光谱响应曲线可以反映作物中叶绿素、叶片水分、微量元素的含量及其变化。因此,依据光谱遥感技术的特性,可以及时了解作物生长信息,为农田药物喷洒、农田信息监测、农业保险勘察等提供重要参考。
现有的光谱遥感技术通常采用无人机搭载多光谱传感器对农作物的光谱信息进行检测得到多光谱数据,再由专业人员对数据进行后续分析和处理得到植物信息,整个过程需要耗费大量人力,检测效率低。
为了解决上述问题,本申请提供一种多光谱成像***及方法,无需人工参与即可自动生成反映目标地块中植物信息的植被指数图,节约了人力资源,提高了检测效率,下面进行详细描述。
请参照图1,图1示出了本申请实施例提供的多光谱成像***100的一种方框示意图。该多光谱成像***100应用于无人机,包括控制器110、多目摄像头120、光照传感器130及数字处理器140,控制器110与多目摄像头120、光照传感器130及数字处理器140均电连接。
控制器110,用于当无人机飞行到设定拍照点时,控制多目摄像头对目标地块进行拍摄,得到多个光谱图像,其中,每个光谱图像分别对应一个不同的预设波段。
在本实施例中,目标地块是指需要利用无人机检测植物信息的地块,目标地块可以是植保作业人员通过点选或框选电子地图中的相应区域得到的。
无人机检测过程中,会按照预先规划好的作业航线进行飞行,通常作业航线会覆盖整个目标地块,而为了确保无人机能够检测到目标地块中各个角落的植物信息,需要根据无人机的飞行速度和飞行高度,结合航线重叠率,在预先规划好的作业航线上确定出各个拍照点,例如,请参照图2,图2中的黑色原点即为设定的拍照点,这样无人机在飞行过程中,就能通过机载定位装置(例如,RTK(Real-time kinematic,实时动态差分技术)定位装置)实时定位飞行过程中的各个拍照点,并在到达一个拍照点时,通知控制器110触发多目摄像头120进行拍摄。
通常,植被在可见光波段(400-760nm),对绿光(520-600nm)反射性强,对红光(630-690nm)和蓝光(400-520nm)反射性弱,并且相对于可见光波段,植被在近红外波段具有更强的反射特性,多数植被在可见光波段的光谱差异小,在近红外波段(760-900nm)的光谱差异大。同时,由于植物体内叶绿素吸收作用的影响,植被反射光谱在红到近红外区(660~770nm)会出现一个陡峭的爬山脊,称为红边。
因此,可以设置多目摄像头120拍摄绿光波段(520-600nm)、红光波段(630-690nm)、红边光波段(660~770nm)和近红外波段(760-900nm)的光谱图像,也就是,多个预设波段包括绿光波段、红光波段、红边光波段和近红外波段。
可选地,控制器110还用于对多光谱成像***100中的其它硬件,例如,多目摄像头120、光照传感器130及数字处理器140等进行控制和管理。控制器110可以是嵌入式ARM、单片机、微控制单元(Microcontroller Unit,MCU)、复杂可编程逻辑器件(ComplexProgrammable Logic Device,CPLD)、现场可编程门阵列(Field-Programmable GateArray,FPGA)等芯片。
多目摄像头120用于对目标地块进行拍摄,得到多个光谱图像。
在本实施例中,多个光谱图像可以包括绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像,因此,多目摄像头120还用于对目标地块进行拍摄,得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像,并将多个光谱图像发送至控制器110。
可选地,多目摄像头120设置在无人机朝向植物的一侧,通过4个独立镜头来捕捉植物反射的不同波段:绿光波段、红光波段、近红外波段和红边光波段。也就是,多目摄像头120可以包括4个具有全局曝光功能的镜头,例如,AR0144镜头等,同时,每个镜头分别携带一个不同预设波段的滤光片,也就是,4个镜头分别携带绿光波段(520-600nm)、红光波段(630-690nm)、红边光波段(660~770nm)和近红外波段(760-900nm)的滤光片,使得多目摄像头120对目标地块进行拍摄时,4个镜头在对应滤波片的作用下,可以分别得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像。
可选地,每个镜头携带的滤光片的波长只要在对应的波段内即可,例如,4个镜头分别携带波长为550nm、660nm、735nm、790nm的滤波片,在此不做限定。
光照传感器130用于测量每个所述预设波段的光照强度值。
在本实施例中,光照传感器130设置在无人机朝向天空的一侧,用来检测每个预设波段,即,绿光波段、红光波段、红边光波段和近红外波段的光照强度值,并将测得的每个预设波段的光照强度值发送至控制器110。
可选地,光照传感器130可以携带4个不同波段的滤光片,即,绿光波段的滤光片、红光波段的滤光片、红边光波段的滤光片和近红外波段(760-900nm)的滤光片,通过这4个滤波片,分别测量每个对应波段的光照强度值。光照传感器130携带的4个滤波片的波长与多目摄像头120的4个镜头携带的滤波片的波长是一一对应的,例如,550nm、660nm、735nm、790nm。
可选地,光照传感器130在出厂前,会进行辐射标定,也就是利用光谱仪建立辐射转换关系,辐射转换关系包括多个波长和多个转换效率,多个波长和多个转换效率一一对应。在实际应用中,当特定波长的光到达光照传感器130时,光照传感器130会将光照强度值转为电压值,即,U=I*A,其中,U表示电压值,I表示光照强度值,A表示转换效率;然后结合预先建立的辐射转换关系,确定出该特定波长对应的转换效率;再根据电压值和该转换效率,即可得到该特定波长的光照强度值。
数字处理器140用于,根据每个预设波段的光照强度值对每个光谱图像均进行辐射校正,得到多个反射率图像。
在本实施例中,多目摄像头120将拍摄的多个光谱图像发送给控制器110、光照传感器130将测得的每个预设波段的光照强度值发送给控制器110之后,控制器110将多个光谱图像和每个预设波段的光照强度值均发送至数字处理器140进行辐射校正。多个反射率图像可以包括绿光波段的反射率图像、红光波段的反射率图像、红边光波段的反射率图像和近红外波段的反射率图像。
在本实施例中,由于多目摄像头120的响应特性和大气的吸收、散射以及其它随机因素的影响,可能会导致光谱图像模糊失真,造成图像的分辨率和对比度相对下降,因此,需要通过辐射校正进行复原,也就是消除光谱图像中依附在辐射亮度中的各种失真,尽可能复原光谱图像本来的面目,保证植物信息检测的准确性。
可选地,可以根据每个预设波段的光照强度值,对每个预设波段对应的光谱图像进行辐射校正,以一个预设波段的光照强度值和对应的光谱图像为例,根据该光照强度值对该光谱图像进行辐射校正的过程,可以包括:
首先,计算该光谱图像的辐射亮度值,也就是,将光谱图像对应波段的像素灰度值转换为具有辐射意义的亮度值,可以利用式(1)进行计算:
L=GAIN*DN+BIAS (1)
其中,L表示辐射亮度值,GAIN表示定标斜率,BIAS表示定标截距,DN表示像素灰度值,GAIN和BIAS可以通过光谱图像中对应波段的最大辐射值Lmax和最小辐射值Lmin计算得到,且GAIN=(Lmax-Lmin)/255,BIAS=Lmin。
然后,利用电磁波在大气中的辐射传输原理建立起来的辐射传输模型对光谱图像进行大气校正,计算出地物光谱反射率,辐射传输模型可以是6S模型,如式(2)所示:
其中,L表示辐射亮度值,ES表示太阳辐射值,θs表示太阳天顶角,θv表示太阳方位角,T()表示大气透射率,φs表示镜头天顶角,φv表示镜头观测角,ρα表示光谱图像的像素点反射率,ρ表示路径反射率,S表示球面反射率;
最后,根据计算出的地物光谱反射率,对光谱图像中每个像素点的灰度值进行校正,即可得到对应的反射图像。
可选地,数字处理器140是一种集成电路芯片,具有信号的处理能力,数字处理器140可以是双核数字信号处理(Digital Signal Processing,DSP)、FPGA、图形处理器(Graphics Processing Unit,GPU)等芯片。
在本实施例中,数字处理器140可以采用双核DSP芯片,该双核DSP芯片采用共享内存的方式,每个内核的处理结果都会存放到共享内存中,每个内核的处理任务均由控制器110下达,其中,指数计算由浮点计算能力强的内核进行处理。
数字处理器140还用于,按照植被指数,从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。
在本实施例中,植被指数图是指利用不同波段的光谱数据组合而成,能反映植物生长状况的指数。例如,植物叶面在红光波段有很强的吸收特性,不能真实客观的反映植物生长状态,但在近红外波段却有很强的反射特性,因此,可以将红光波段的光谱数据和近红外波段的光谱数据进行组合。
植被指数可以包括归一化植被指数(NDVI)、归一化红边差异指数(NDRE)、土壤植被指数(SAVI)等,相应的,植被指数图可以包括归一化植被指数图、归一化红边差异指数图、土壤植被指数图等。可以根据想要检测的植被信息,灵活选择植被指数,例如,采用NDVI检测植物覆盖度,采用SAVI检测土壤调节度,采用NDRE检测植物健康度等;开发人员可以根据实际需求选择具体的植被指数,例如,用于检测病虫害、营养度、肥料、水质等,在此不做限定。
作为一种实施方式,当植被指数为归一化植被指数时,归一化植被指数对应红光波段和近红外波段,植被指数图包括归一化植被指数图。数字处理器还用于按照归一化植被指数,从多个反射率图像中获取红光波段的反射率图像和近红外波段的反射率图像,并对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到归一化植被指数图。
在本实施例中,NDVI是由植被反射的可见光和近红外光计算出来的,即,近红外波段的反射值与红光波段的反射值之差比上两者之和,由于健康的植被吸收大部分可见光并反射大部分近红外光,不健康或稀疏的植被反射更多的可见光和更少的近红外光,因此,NDVI可以用于检测植被生长状态和植被覆盖度、消除部分辐射误差等。
对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到归一化植被指数图的过程,可以包括:
按照公式NDVI(x,y)=(NIR(x,y)-RED(x,y))/(NIR(x,y)+RED(x,y))计算出每个像素点的归一化植被指数,得到归一化植被指数图,其中,(x,y)表示像素点坐标,NDVI(x,y)表示归一化植被指数,NIR(x,y)表示近红外波段的反射率图像,RED(x,y)表示红光波段的反射率图像。
作为另一种实施方式,当植被指数为归一化红边差异指数时,归一化红边差异指数对应红光波段和红边光波段,植被指数图包括归一化红边差异指数图。数字处理器还用于按照归一化红边差异指数,从多个反射率图像中获取红光波段的反射率图像和红边光波段的反射率图像,并对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到归一化红边差异指数图。
在本实施例中,NDRE可用于分析图像中的植被健康与否,它类似于归一化差异植被指数,但是利用红光波段的反射率图像和红边光波段的反射率图像进行计算。
对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到归一化红边差异指数图的过程,可以包括:按照公式NDRE(x,y)=(REDEDGE(x,y)-RED(x,y))/(REDEDGE(x,y)+RED(x,y))计算出每个像素点的归一化红边差异指数,得到归一化红边差异指数图,其中,NDRE(x,y)表示归一化红边差异指数,REDEDGE(x,y)表示红边光波段的反射率图像。
作为另一种实施方式,当植被指数包括土壤植被指数时,土壤植被指数对应红光波段和红外光波段,植被指数图包括土壤植被指数图。数字处理器还用于按照土壤植被指数,从多个反射率图像中获取红光波段的反射率图像和红外光波段的反射率图像,并对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到土壤植被指数图。
在本实施例中,对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到土壤植被指数图的过程,可以包括:
按照公式SAVI(x,y)=(NIR(x,y)-RED(x,y))/(NIR(x,y)+RED(x,y)*(1+L))计算出每个像素点的归一化红边差异指数,得到归一化红边差异指数图,其中,SAVI(x,y)表示归一化红边差异指数,L表示土壤调节系数。
与NDVI相比,SAVI增加了根据实际情况确定的土壤调节系数L,取值范围0~1;L=0时,表示植被覆盖度为零;L=1时,表示土壤背景的影响为零,即植被覆盖度非常高;土壤背景的影响为零,这种情况只有在被树冠浓密的高大树木覆盖的地方才会出现。
可选地,为了提高植物信息的检测准确度,可以采用彩色图像增强每个反射率图像的光谱细节,因此,在图1的基础上,请参照图3,该多光谱成像***100还包括彩色摄像头150,彩色摄像头150与控制器110电连接。
控制器110还用于,在控制多目摄像头120进行拍摄的同一时刻,控制彩色摄像头150对目标地块进行拍摄,得到彩色图像。
在本实施例中,当无人机飞行到设定拍照点时,控制器110可以在同一时刻触发控制多目摄像头120和彩色摄像头150同时拍摄,也就是说,多个光谱图像和彩色图像是同一时刻拍摄得到的。
彩色摄像头150用于对目标地块进行拍摄,得到彩色图像。
在本实施例中,彩色摄像头150设置在无人机朝向植物的一侧,用于对目标地块进行拍摄,得到彩色图像后发送至控制器110。
数字处理器140还用于,利用彩色图像,对每个反射率图像均进行图像增强。
在本实施例中,彩色摄像头150将拍摄的彩色图像发送给控制器110之后,控制器110将彩色图像发送至数字处理器140,以使数字处理器140利用彩色图像,对每个反射率图像均进行图像增强。数字处理器140可以将彩色图像分别与每个反射率图像进行融合,以增强每个反射率图像中的光谱细节。
可选地,以彩色图像和一个反射率图像为例,利用彩色图像对该反射率图像均进行图像增强的过程,可以包括:
首先,对反射率图像的各个波段进行主分量变换,变换后第一主分量含有变换前各波段的相同信息,而各波段中唯一对应各波段的部分,被分配到变换后的其它波段;
然后,将彩色图像和第一主分量进行直方图匹配,使彩色图像与第一主分量具有相近的均值和方差;
最后,用直方图匹配后的彩色图像代替第一主分量进行逆变换,即可得到增强光谱细节后的反射率图像。
可选地,以彩色图像和一个反射率图像为例,利用彩色图像对该反射率图像均进行图像增强的过程,还可以包括:将彩色图像作为一个波段和反射率图像组合在一起进行KL变换,变换后图像信息再进行分配,以实现彩色图像和反射率图像的融合。
进一步地,多目摄像头120拍摄的光谱图像,可能会因为外部因素和镜头本身的影响,出现模糊、畸变等,因此,为了提高检测的准确性,数字处理器140在根据每个预设波段的光照强度值对每个光谱图像均进行辐射校正得到多个反射率图像之前,数字处理器140还需要对每个光谱图像进行预处理,包括图像对齐、背景噪声校正、畸变校正、渐晕效应校正等,具体的校正顺序可以由开发人员灵活设置,在此不做限定,下面进行详细介绍。
数字处理器140,还用于获取多目摄像头中每个镜头的相对位置关系,并根据每个镜头的相对位置关系对每个光谱图像均进行图像对齐。
数字处理器140,还用于对每个光谱图像均进行背景噪声校正,以去除每个光谱图像的背景噪声。
在本实施例中,可以采用均值滤波、中值滤波、高斯滤波、双边滤波、自适应维纳滤波等对光谱图像进行背景噪声校正,以去除每个光谱图像的背景噪声。可选地,以中值滤波为例,可以用中值代替光谱图像中各个像素点的原像素点,即,对于当前像素点,首先选择一个模板,该模板由当前像素点邻域窗口内的所有像素点组成;然后求模板中所有像素点的中值,再用中值代替当前像素点的原像素值;遍历光谱图像中的每个像素点,即可完成光谱图像的中值滤波。
数字处理器140,还用于获取多目摄像头的镜头畸变模型参数,并根据镜头畸变模型参数,对每个光谱图像均进行畸变校正,以去除每个光谱图像的畸变。
在本实施例中,多目摄像头120包括4个镜头,每个镜头均有对应的镜头畸变模型参数,每个镜头畸变模型参数均与对应镜头的实际畸变模型有关,实际畸变模型可以是布朗-康拉迪(Brown-Conrady)畸变模型、多项式模型、除法模型等。同时,每个镜头畸变模型参数可以相同也可以不同。当多目摄像头120的4个镜头为同一批次生产或者工艺参数相同时,可以认为每个镜头的实际畸变模型相同,从而可以认为每个镜头的镜头畸变模型参数相同。
数字处理器140,还用于对每个光谱图像均进行渐晕效应校正,以去除每个光谱图像的渐晕效应。
在本实施例中,多目摄像头120在远距离成像时,容易产生渐晕效应导致光谱图像的灰度分布不均匀,也就是,随着视场角的增大,能通过物镜的斜光束的截面面积将逐渐减小,从而导致生成的光谱图像中间亮、边缘亮,影响成像质量,因此,需要对每个光谱图像均进行渐晕效应校正,以去除光谱图像的渐晕效应。
在图1的基础上,请参照图4,该多光谱成像***100还包括通信单元160、存储单元170及显示单元180,通信单元160、存储单元170及显示单元180均与控制器110电连接。
通信单元160用于在控制器110的控制下,将植被指数图发送至终端。
在本实施例中,通信单元160通过网络与终端通信连接,终端可以是服务器、地面工作站、智能手机、平板电脑、便携式笔记本电脑、台式电脑等。数字处理器140生成植被指数图之后,可以将植被指数图发送至控制器110,控制器110再控制通信单元160将植被指数图发送至终端。
可选地,通信单元可以是WIFI装置、4G装置等,或者其它任何能够实现与终端之间进行通信的芯片。
存储单元170用于在控制器110的控制下,对植被指数图进行存储。
在本实施例中,数字处理器140生成植被指数图之后,可以将植被指数图发送至控制器110,控制器110再将植被指数图发送至存储单元170进行存储。
可选地,存储单元170可以是高速随机存取存储器(Random Access Memory,RAM)、包括非易失存储器(non-volatile memory,NVM)等。
显示单元180用于在控制器110的控制下,对植被指数图进行显示。
在本实施例中,数字处理器140生成植被指数图之后,可以将植被指数图发送至控制器110,控制器110再控制显示单元180对植被指数图进行显示。
与现有技术相比,本申请具有以下有益效果:
首先,无需人工参与即可自动生成反映目标地块中植物信息的植被指数图,节约了人力资源,提高了检测效率;
其次,能够实时按照归一化植被指数(NDVI)、归一化红边差异指数(NDRE)、土壤植被指数(SAVI)等与植物生长状态相关的植被指数计算出对应的植被指数图,便于后续应用;
第三,根据光照传感器130测量的光照强度值对相应波段的光谱图像进行辐射校正,可以提高多目摄像头120的反射率稳定性,从而在晴天和多云天气下,都能保证多目摄像头120的反射率波动较小;
第四,采用彩色摄像机拍摄的彩色图像增强每个反射率图像的光谱细节,可以提高植物信息的检测准确度;
第五,采用嵌入式的控制器110和数字处理器140,重量小,同时可以实现多个波段的光谱成像。
下面给出一种应用于多光谱成像***100的多光谱成像方法,请参照图5,该多光谱成像方法可以包括以下步骤:
步骤S101,当无人机飞行到设定拍照点时,控制器控制多目摄像头对目标物进行拍摄得到多个光谱图像,其中,每个光谱图像分别对应一个不同的预设波段。
可选地,多个预设波段包括绿光波段、红光波段、红边光波段和近红外波段;控制器控制多目摄像头对目标地块进行拍摄得到多个光谱图像的方式,包括:控制器控制多目摄像头对目标地块进行拍摄,得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像。
步骤S102,光照传感器测量每个预设波段的光照强度值。
步骤S103,数字处理器根据每个预设波段的光照强度值对每个光谱图像均进行辐射校正,得到多个反射率图像。
步骤S104,数字处理器按照植被指数,从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。
可选地,多个反射率图像包括绿光波段的反射率图像、红光波段的反射率图像、红边光波段的反射率图像和近红外波段的反射率图像。
植被指数包括归一化植被指数,归一化植被指数对应红光波段和近红外波段,植被指数图包括归一化植被指数图;数字处理器按照植被指数,从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的方式,包括:数字处理器按照归一化植被指数,从多个反射率图像中获取红光波段的反射率图像和近红外波段的反射率图像,并对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到归一化植被指数图。
可选地,植被指数包括归一化红边差异指数,归一化红边差异指数对应红光波段和红边光波段,植被指数图包括归一化红边差异指数图;数字处理器按照植被指数,从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的方式,包括:数字处理器按照归一化红边差异指数,从多个反射率图像中获取红光波段的反射率图像和红边光波段的反射率图像,并对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到归一化红边差异指数图。
可选地,植被指数包括土壤植被指数,土壤植被指数对应红光波段和红外光波段,植被指数图包括土壤植被指数图;数字处理器按照植被指数,从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的方式,包括:数字处理器按照土壤植被指数,从多个反射率图像中获取红光波段的反射率图像和红外光波段的反射率图像,并对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到土壤植被指数图。
在图5的基础上,请参照图6,在步骤S102之前,该多光谱成像方法还可以包括步骤S111;在步骤S103之后,该多光谱成像方法还可以包括步骤S112。
步骤S111,控制器在控制多目摄像头进行拍摄的同一时刻,控制彩色摄像头对目标物进行拍摄,得到彩色图像。
步骤S112,数字处理器利用彩色图像,对每个反射率图像均进行图像增强。
在图5的基础上,请参照图7,在步骤S102之前,该多光谱成像方法还可以包括步骤S121~S124。
步骤S121,数字处理器获取多目摄像头中每个镜头的相对位置关系,并根据每个镜头的相对位置关系对每个光谱图像均进行图像对齐。
步骤S122,数字处理器对每个光谱图像均进行背景噪声校正,以去除每个光谱图像的背景噪声。
步骤S123,数字处理器获取多目摄像头的镜头畸变模型参数,并根据镜头畸变模型参数,对每个光谱图像均进行畸变校正,以去除每个光谱图像的畸变。
步骤S124,数字处理器对每个光谱图像均进行渐晕效应校正,以去除每个光谱图像的渐晕效应。
需要指出的是,步骤S121~S124还可以在图6的步骤S102之前执行。
在图5的基础上,请参照图8,在步骤S104之后,该多光谱成像方法还可以包括步骤S105~S107。
步骤S105,通信单元在控制器的控制下,将植被指数图发送至终端。
步骤S106,存储单元在控制器的控制下,对植被指数图进行存储。
步骤S107,显示单元在控制器的控制下,对植被指数图进行显示。
需要指出的是,步骤S121~S124还可以在图6的步骤S104之后执行、或者在图7的步骤S104之后执行。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的多光谱成像方法的具体流程,可以参考前述***实施例中对应的硬件功能描述,在此不再赘述。
综上所述,本申请提供的一种多光谱成像***及方法,多光谱成像***包括控制器及与控制器电连接的多目摄像头、光照传感器和数字处理器;控制器用于当无人机飞行到设定拍照点时,控制多目摄像头对目标地块进行拍摄,得到多个光谱图像,其中,每个光谱图像分别对应一个不同的预设波段;光照传感器用于测量每个预设波段的光照强度值;数字处理器用于根据每个预设波段的光照强度值对每个光谱图像均进行辐射校正,得到多个反射率图像;数字处理器还用于按照植被指数,从多个反射率图像中获取植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。本申请无需人工参与即可自动生成反映目标地块中植物信息的植被指数图,节约了人力资源,提高了检测效率。
以上所述仅为本申请的优选实施例而已,并不用于限制本申请,对于本领域的技术人员来说,本申请可以有各种更改和变化。凡在本申请的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本申请的保护范围之内。应注意到:相似的标号和字母在下面的附图中表示类似项,因此,一旦某一项在一个附图中被定义,则在随后的附图中不需要对其进行进一步定义和解释。
Claims (26)
1.一种多光谱成像***,其特征在于,所述多光谱成像***包括控制器及与所述控制器电连接的多目摄像头、光照传感器和数字处理器;
所述控制器用于当无人机飞行到设定拍照点时,控制所述多目摄像头对目标地块进行拍摄,得到多个光谱图像,其中,每个所述光谱图像分别对应一个不同的预设波段;
所述光照传感器用于测量每个所述预设波段的光照强度值;
所述数字处理器用于根据每个所述预设波段的光照强度值对每个所述光谱图像均进行辐射校正,得到多个反射率图像;
所述数字处理器还用于按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。
2.如权利要求1所述的多光谱成像***,其特征在于,所述多光谱成像***还包括彩色摄像头,所述彩色摄像头与所述控制器电连接;
所述控制器还用于在控制所述多目摄像头进行拍摄的同一时刻,控制所述彩色摄像头对所述目标地块进行拍摄,得到彩色图像;
所述数字处理器还用于利用所述彩色图像,对每个所述反射率图像均进行图像增强。
3.如权利要求1所述的多光谱成像***,其特征在于,多个所述预设波段包括绿光波段、红光波段、红边光波段和近红外波段;
所述多目摄像头还用于对所述目标地块进行拍摄,得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像。
4.如权利要求1所述的多光谱成像***,其特征在于,所述多个反射率图像包括绿光波段的反射率图像、红光波段的反射率图像、红边光波段的反射率图像和近红外波段的反射率图像;
所述植被指数包括归一化植被指数,所述归一化植被指数对应红光波段和近红外波段,所述植被指数图包括归一化植被指数图;
所述数字处理器还用于按照所述归一化植被指数,从所述多个反射率图像中获取红光波段的反射率图像和近红外波段的反射率图像,并对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到所述归一化植被指数图。
5.如权利要求4所述的多光谱成像***,其特征在于,所述植被指数包括归一化红边差异指数,所述归一化红边差异指数对应红光波段和红边光波段,所述植被指数图包括归一化红边差异指数图;
所述数字处理器还用于按照所述归一化红边差异指数,从所述多个反射率图像中获取红光波段的反射率图像和红边光波段的反射率图像,并对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到所述归一化红边差异指数图。
6.如权利要求4所述的多光谱成像***,其特征在于,所述植被指数包括土壤植被指数,所述土壤植被指数对应红光波段和红外光波段,所述植被指数图包括土壤植被指数图;
所述数字处理器还用于按照所述土壤植被指数,从所述多个反射率图像中获取红光波段的反射率图像和红外光波段的反射率图像,并对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到所述土壤植被指数图。
7.如权利要求1所述的多光谱成像***,其特征在于,所述数字处理器还用于获取所述多目摄像头中每个镜头的相对位置关系,并根据每个镜头的相对位置关系对每个所述光谱图像均进行图像对齐。
8.如权利要求1所述的多光谱成像***,其特征在于,所述数字处理器还用于对每个所述光谱图像均进行背景噪声校正,以去除每个所述光谱图像的背景噪声。
9.如权利要求1所述的多光谱成像***,其特征在于,所述数字处理器还用于获取所述多目摄像头的镜头畸变模型参数,并根据所述镜头畸变模型参数,对每个所述光谱图像均进行畸变校正,以去除每个所述光谱图像的畸变。
10.如权利要求1所述的多光谱成像***,其特征在于,所述数字处理器还用于对每个所述光谱图像均进行渐晕效应校正,以去除每个所述光谱图像的渐晕效应。
11.如权利要求1所述的多光谱成像***,其特征在于,所述多光谱成像***还包括通信单元,所述通信单元与所述控制器电连接,且与终端通信连接;
所述通信单元用于在所述控制器的控制下,将所述植被指数图发送至所述终端。
12.如权利要求1所述的多光谱成像***,其特征在于,所述多光谱成像***还包括存储单元,所述存储单元与所述控制器电连接;
所述存储单元用于在所述控制器的控制下,对所述植被指数图进行存储。
13.如权利要求1所述的多光谱成像***,其特征在于,所述多光谱成像***还包括显示单元,所述显示单元与所述控制器电连接;
所述显示单元用于在所述控制器的控制下,对所述植被指数图进行显示。
14.一种多光谱成像方法,其特征在于,应用于多光谱成像***,所述多光谱成像***包括控制器及与所述控制器电连接的多目摄像头、光照传感器和数字处理器;
所述多光谱成像方法包括:
当无人机飞行到设定拍照点时,所述控制器控制所述多目摄像头对目标地块进行拍摄得到多个光谱图像,其中,每个所述光谱图像分别对应一个不同的预设波段;
所述光照传感器测量每个所述预设波段的光照强度值;
所述数字处理器根据每个所述预设波段的光照强度值对每个所述光谱图像均进行辐射校正,得到多个反射率图像;
所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图。
15.如权利要求14所述的多光谱成像方法,其特征在于,所述多光谱成像***还包括彩色摄像头,所述彩色摄像头与所述控制器电连接;
所述多光谱成像方法还包括:
所述控制器在控制所述多目摄像头进行拍摄的同一时刻,控制所述彩色摄像头对所述目标地块进行拍摄,得到彩色图像;
所述数字处理器利用所述彩色图像,对每个所述反射率图像均进行图像增强。
16.如权利要求14所述的多光谱成像方法,其特征在于,多个所述预设波段包括绿光波段、红光波段、红边光波段和近红外波段;
所述控制器控制多目摄像头对目标地块进行拍摄得到多个光谱图像的步骤,包括:
所述控制器控制多目摄像头对所述目标地块进行拍摄,得到绿光波段的光谱图像、红光波段的光谱图像、红边光波段的光谱图像和近红外波段的光谱图像。
17.如权利要求14所述的多光谱成像方法,其特征在于,所述多个反射率图像包括绿光波段的反射率图像、红光波段的反射率图像、红边光波段的反射率图像和近红外波段的反射率图像;
所述植被指数包括归一化植被指数,所述归一化植被指数对应红光波段和近红外波段,所述植被指数图包括归一化植被指数图;
所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的步骤,包括:
所述数字处理器按照所述归一化植被指数,从所述多个反射率图像中获取红光波段的反射率图像和近红外波段的反射率图像,并对红光波段的反射率图像和近红外波段的反射率图像进行指数计算,得到所述归一化植被指数图。
18.如权利要求17所述的多光谱成像方法,其特征在于,所述植被指数包括归一化红边差异指数,所述归一化红边差异指数对应红光波段和红边光波段,所述植被指数图包括归一化红边差异指数图;
所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的步骤,包括:
所述数字处理器按照所述归一化红边差异指数,从所述多个反射率图像中获取红光波段的反射率图像和红边光波段的反射率图像,并对红光波段的反射率图像和红边光波段的反射率图像进行指数计算,得到所述归一化红边差异指数图。
19.如权利要求17所述的多光谱成像方法,其特征在于,所述植被指数包括土壤植被指数,所述土壤植被指数对应红光波段和红外光波段,所述植被指数图包括土壤植被指数图;
所述数字处理器按照植被指数,从多个反射率图像中获取所述植被指数对应的目标反射率图像并进行指数计算,得到植被指数图的步骤,包括:
所述数字处理器按照所述土壤植被指数,从所述多个反射率图像中获取红光波段的反射率图像和红外光波段的反射率图像,并对红光波段的反射率图像和红外光波段的反射率图像进行指数计算,得到所述土壤植被指数图。
20.如权利要求14所述的多光谱成像方法,其特征在于,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:
所述数字处理器获取所述多目摄像头中每个镜头的相对位置关系,并根据每个镜头的相对位置关系对每个所述光谱图像均进行图像对齐。
21.如权利要求14所述的多光谱成像方法,其特征在于,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:
所述数字处理器对每个所述光谱图像均进行背景噪声校正,以去除每个所述光谱图像的背景噪声。
22.如权利要求14所述的多光谱成像方法,其特征在于,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:
所述数字处理器获取所述多目摄像头的镜头畸变模型参数,并根据所述镜头畸变模型参数,对每个所述光谱图像均进行畸变校正,以去除每个所述光谱图像的畸变。
23.如权利要求14所述的多光谱成像方法,其特征在于,在所述光照传感器测量每个所述预设波段的光照强度值的步骤之前,所述多光谱成像方法还包括:
所述数字处理器对每个所述光谱图像均进行渐晕效应校正,以去除每个所述光谱图像的渐晕效应。
24.如权利要求14所述的多光谱成像方法,其特征在于,所述多光谱成像***还包括通信单元,所述通信单元与所述控制器电连接,且与终端通信连接;
所述多光谱成像方法还包括:
所述通信单元在所述控制器的控制下,将所述植被指数图发送至所述终端。
25.如权利要求14所述的多光谱成像方法,其特征在于,所述多光谱成像***还包括存储单元,所述存储单元与所述控制器电连接;所述多光谱成像方法还包括:
所述存储单元在所述控制器的控制下,对所述植被指数图进行存储。
26.如权利要求14所述的多光谱成像方法,其特征在于,所述多光谱成像***还包括显示单元,所述显示单元与所述控制器电连接;所述多光谱成像方法还包括:
所述显示单元在所述控制器的控制下,对所述植被指数图进行显示。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911381603.XA CN110987183A (zh) | 2019-12-27 | 2019-12-27 | 多光谱成像***及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201911381603.XA CN110987183A (zh) | 2019-12-27 | 2019-12-27 | 多光谱成像***及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110987183A true CN110987183A (zh) | 2020-04-10 |
Family
ID=70078368
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201911381603.XA Pending CN110987183A (zh) | 2019-12-27 | 2019-12-27 | 多光谱成像***及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110987183A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111609931A (zh) * | 2020-05-17 | 2020-09-01 | 北京安洲科技有限公司 | 一种参数可编程的实时高光谱采集***和方法 |
CN112333359A (zh) * | 2020-10-28 | 2021-02-05 | 维沃移动通信(杭州)有限公司 | 图像处理方法、装置及电子设备 |
CN113358581A (zh) * | 2021-06-04 | 2021-09-07 | 长光禹辰信息技术与装备(青岛)有限公司 | 一种无人机多光谱遥感数据采集和处理一体化***及方法 |
CN113588560A (zh) * | 2021-08-23 | 2021-11-02 | 广州思林杰科技股份有限公司 | 用于柑橘黄龙病监测的多光谱采集终端、***及方法 |
CN113808053A (zh) * | 2021-09-29 | 2021-12-17 | 华北电力大学(保定) | 一种红外成像仪及其信号校正方法 |
CN113874716A (zh) * | 2020-04-15 | 2021-12-31 | 深圳市大疆创新科技有限公司 | 可移动平台的作业方法、可移动平台以及电子设备 |
CN114500768A (zh) * | 2022-02-18 | 2022-05-13 | 广州极飞科技股份有限公司 | 相机同步拍摄方法、装置、无人设备及存储介质 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110134138A1 (en) * | 2008-06-06 | 2011-06-09 | Monsanto Technology Llc | Generating Agricultural Information Products Using Remote Sensing |
CN203350719U (zh) * | 2013-07-03 | 2013-12-18 | 广州地理研究所 | 一种单旋翼微型无人机多光谱遥感*** |
CN204154389U (zh) * | 2014-09-30 | 2015-02-11 | 青岛市光电工程技术研究院 | 一种低空微型无人机载多光谱成像*** |
CN104730005A (zh) * | 2015-03-27 | 2015-06-24 | 中国农业科学院农业信息研究所 | 地空一体化农业监测***及方法 |
CN205861560U (zh) * | 2016-05-27 | 2017-01-04 | 中国农业科学院农业信息研究所 | 农田监测*** |
US20180065748A1 (en) * | 2016-07-27 | 2018-03-08 | International Business Machines Corporation | Drone-based mosquito amelioration based on risk analysis and pattern classifiers |
CN107807125A (zh) * | 2017-10-12 | 2018-03-16 | 中国农业大学 | 基于无人机载多光谱传感器的植物信息计算***及方法 |
CN108322670A (zh) * | 2018-04-27 | 2018-07-24 | Oppo广东移动通信有限公司 | 一种多摄像头***的控制方法、移动终端及存储介质 |
CN110096995A (zh) * | 2019-04-28 | 2019-08-06 | 中控智慧科技股份有限公司 | 一种多光谱多目摄像头防伪识别方法及装置 |
CN110222475A (zh) * | 2019-07-03 | 2019-09-10 | 中国水利水电科学研究院 | 一种基于无人机多光谱遥感反演冬小麦植株含水率的方法 |
CN110567891A (zh) * | 2019-09-16 | 2019-12-13 | 中国水利水电科学研究院 | 一种冬小麦冠层叶绿素估测***及方法 |
CN110580684A (zh) * | 2018-06-10 | 2019-12-17 | 长沙市军英电子科技有限公司 | 一种基于黑白-彩色双目相机的图像增强方法 |
-
2019
- 2019-12-27 CN CN201911381603.XA patent/CN110987183A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20110134138A1 (en) * | 2008-06-06 | 2011-06-09 | Monsanto Technology Llc | Generating Agricultural Information Products Using Remote Sensing |
CN203350719U (zh) * | 2013-07-03 | 2013-12-18 | 广州地理研究所 | 一种单旋翼微型无人机多光谱遥感*** |
CN204154389U (zh) * | 2014-09-30 | 2015-02-11 | 青岛市光电工程技术研究院 | 一种低空微型无人机载多光谱成像*** |
CN104730005A (zh) * | 2015-03-27 | 2015-06-24 | 中国农业科学院农业信息研究所 | 地空一体化农业监测***及方法 |
CN205861560U (zh) * | 2016-05-27 | 2017-01-04 | 中国农业科学院农业信息研究所 | 农田监测*** |
US20180065748A1 (en) * | 2016-07-27 | 2018-03-08 | International Business Machines Corporation | Drone-based mosquito amelioration based on risk analysis and pattern classifiers |
CN107807125A (zh) * | 2017-10-12 | 2018-03-16 | 中国农业大学 | 基于无人机载多光谱传感器的植物信息计算***及方法 |
CN108322670A (zh) * | 2018-04-27 | 2018-07-24 | Oppo广东移动通信有限公司 | 一种多摄像头***的控制方法、移动终端及存储介质 |
CN110580684A (zh) * | 2018-06-10 | 2019-12-17 | 长沙市军英电子科技有限公司 | 一种基于黑白-彩色双目相机的图像增强方法 |
CN110096995A (zh) * | 2019-04-28 | 2019-08-06 | 中控智慧科技股份有限公司 | 一种多光谱多目摄像头防伪识别方法及装置 |
CN110222475A (zh) * | 2019-07-03 | 2019-09-10 | 中国水利水电科学研究院 | 一种基于无人机多光谱遥感反演冬小麦植株含水率的方法 |
CN110567891A (zh) * | 2019-09-16 | 2019-12-13 | 中国水利水电科学研究院 | 一种冬小麦冠层叶绿素估测***及方法 |
Non-Patent Citations (1)
Title |
---|
孙刚 等: "轻小型无人机多光谱遥感技术应用进展", 《农业机械学报》 * |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113874716A (zh) * | 2020-04-15 | 2021-12-31 | 深圳市大疆创新科技有限公司 | 可移动平台的作业方法、可移动平台以及电子设备 |
CN111609931A (zh) * | 2020-05-17 | 2020-09-01 | 北京安洲科技有限公司 | 一种参数可编程的实时高光谱采集***和方法 |
CN112333359A (zh) * | 2020-10-28 | 2021-02-05 | 维沃移动通信(杭州)有限公司 | 图像处理方法、装置及电子设备 |
CN113358581A (zh) * | 2021-06-04 | 2021-09-07 | 长光禹辰信息技术与装备(青岛)有限公司 | 一种无人机多光谱遥感数据采集和处理一体化***及方法 |
CN113588560A (zh) * | 2021-08-23 | 2021-11-02 | 广州思林杰科技股份有限公司 | 用于柑橘黄龙病监测的多光谱采集终端、***及方法 |
CN113808053A (zh) * | 2021-09-29 | 2021-12-17 | 华北电力大学(保定) | 一种红外成像仪及其信号校正方法 |
CN114500768A (zh) * | 2022-02-18 | 2022-05-13 | 广州极飞科技股份有限公司 | 相机同步拍摄方法、装置、无人设备及存储介质 |
CN114500768B (zh) * | 2022-02-18 | 2023-06-16 | 广州极飞科技股份有限公司 | 相机同步拍摄方法、装置、无人设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110987183A (zh) | 多光谱成像***及方法 | |
JP5020444B2 (ja) | 作物生育量測定装置、作物生育量測定方法、作物生育量測定プログラム及びその作物生育量測定プログラムを記録したコンピュータ読取可能な記録媒体 | |
Stroppiana et al. | Rice yield estimation using multispectral data from UAV: A preliminary experiment in northern Italy | |
CN111289441B (zh) | 多光谱下的大田作物含水量确定方法、***及设备 | |
JP5162890B2 (ja) | リモートセンシングにおける補正方法 | |
CN112345458A (zh) | 一种基于无人机多光谱影像的小麦产量估测方法 | |
US11721008B2 (en) | Multispectral filters | |
Negash et al. | Emerging UAV applications in agriculture | |
CN111798509B (zh) | 一种基于半球图像法测量叶面积指数的方法 | |
CN111413279B (zh) | 多光谱探测的视频处理方法、装置及多光谱探测终端 | |
JPH05223638A (ja) | 測定画像の補正方法 | |
Salvado et al. | Semantic navigation mapping from aerial multispectral imagery | |
Tavakoli et al. | Evaluation of different sensing approaches concerning to nondestructive estimation of leaf area index (LAI) for winter wheat | |
Tsoulias et al. | An approach for monitoring temperature on fruit surface by means of thermal point cloud | |
Pauly | Applying conventional vegetation vigor indices to UAS-derived orthomosaics: issues and considerations | |
CN112106346A (zh) | 图像处理方法、设备、无人机、***和存储介质 | |
CN115598071A (zh) | 植物生长分布状态检测方法及装置 | |
Pauly | Towards calibrated vegetation indices from UAS-derived orthomosaics | |
Vermote et al. | Validation of high spatial resolution surface reflectance using a camera system (CAMSIS) | |
WO2022180616A1 (en) | Estimation of a crop coefficient vector based on multispectral remote sensing | |
US12026915B2 (en) | Enhanced measurement of photosynthetically active radiation (PAR) and image conversion therefor | |
Tu et al. | Assessing Radiometric Corrections for UAS Multi-Spectral Imagery in Horticultural Environments | |
Mihajlow et al. | Drone video capture–a new method in precision agriculture | |
US20190096048A1 (en) | Information processing device, information processing method and program storage medium | |
Raeva et al. | GEOSPATIAL AND TEMPORAL ANALYSES OF RURAL AREA FOR VEGETATION ANALYSIS |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information | ||
CB02 | Change of applicant information |
Address after: 510000 Block C, 115 Gaopu Road, Tianhe District, Guangzhou City, Guangdong Province Applicant after: XAG Co., Ltd. Address before: 510000 Block C, 115 Gaopu Road, Tianhe District, Guangzhou City, Guangdong Province Applicant before: Guangzhou Xaircraft Technology Co.,Ltd. |
|
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200410 |