CN104615146B - 一种无需外部导航信号的无人机喷药作业自动导航方法 - Google Patents

一种无需外部导航信号的无人机喷药作业自动导航方法 Download PDF

Info

Publication number
CN104615146B
CN104615146B CN201510060377.0A CN201510060377A CN104615146B CN 104615146 B CN104615146 B CN 104615146B CN 201510060377 A CN201510060377 A CN 201510060377A CN 104615146 B CN104615146 B CN 104615146B
Authority
CN
China
Prior art keywords
aerial vehicle
unmanned aerial
area
spraying operation
air route
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510060377.0A
Other languages
English (en)
Other versions
CN104615146A (zh
Inventor
刘鹏
陈有生
吴斌
彭斌
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GUANGZHOU KUAIFEI COMPUTER TECHNOLOGY Co Ltd
Original Assignee
GUANGZHOU KUAIFEI COMPUTER TECHNOLOGY Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GUANGZHOU KUAIFEI COMPUTER TECHNOLOGY Co Ltd filed Critical GUANGZHOU KUAIFEI COMPUTER TECHNOLOGY Co Ltd
Priority to CN201510060377.0A priority Critical patent/CN104615146B/zh
Publication of CN104615146A publication Critical patent/CN104615146A/zh
Application granted granted Critical
Publication of CN104615146B publication Critical patent/CN104615146B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Image Analysis (AREA)

Abstract

本发明提供一种无需外部导航信号的无人机喷药作业自动导航方法,该方法通过一次性拍摄或者把分块拍摄的图像拼接起来获得目标作业区域的整体图像,将整体图像进行分割得到待作业区域,之后对得到的整体图像进行特征描述子提取,将整体图像进行网格化到一幅包含待作业区域与特征描述子的具体像素位置的导航地图,以导航地图为参考坐标系规划喷药作业无人机的航线,喷药作业无人机通过拍摄规划航线中的图像并提取其特征描述子与目标作业区域的特征描述子进行匹配实现定位功能,从而实现了在无外部导航信号环境下喷药无人机的自动导航问题。

Description

一种无需外部导航信号的无人机喷药作业自动导航方法
技术领域
本发明涉及农业浇灌领域,更具体地,涉及一种无需外部导航信号的无人机喷药作业自动导航方法。
背景技术
较传统的田间人工或者车辆施药,无人飞机施药具有作业效率高、人工劳动强度低、农药使用量小、病虫防治效果好等优点。国内外现有的农用无人机喷药导航技术主要是基于GPS信号来进行导航。2012年06月27日,公告号为CN 101963806 B的中国发明专利,公开了一种基于GPS导航的无人机施药作业自动控制***及方法。包括该方法在内的所有类似方案均是基于GPS来进行导航。然而,当GPS信号失效的情况下,例如:在温室内、有遮挡物的情况下,依赖于GPS导航的方法就失去了作用。故急切需要一种能够替代GPS给无人机提供导航的方法。
发明内容
本发明提供一种无需外部导航信号的无人机喷药作业自动导航方法,来实现不依赖于GPS等类似的导航信号,能够在无外部导航环境下完成喷药作业。
为了达到上述技术效果,本发明的技术方案如下:
一种无需外部导航信号的无人机喷药作业自动导航方法,包括以下步骤:
S1:对目标作业区域进行图像拍摄获取该区域的完整图像,若无法一次性对该区域进行完整拍摄,就分块多次拍摄目标作业区域的图像并将分块拍摄的图像进行拼接得到目标作业区域的完整图像;
S2:将得到的目标作业区域的完整图像进行特征描述子提取,并对提取出的特征描述子进行随机一致性检验来提高特征描述子的置信度;
S3:将S1中得到的目标作业区域的完整图像进行分割,形成一个闭合的待作业区域;
S4:将S1中得到的目标作业区域的完整图像网格化,得到一幅包含待作业区域以及特征描述子和目标作业区域中航线控制区的具体像素位置的导航地图;
S5:以S4中的导航地图为参考坐标系并以S4中网格的边线作为依据来规划喷药作业无人机的航线,保证该规划航线以S形完全覆盖待作业区域;
S6:喷药作业无人机从规划的航线原点起飞并拍摄途经规划航线的作业区域图像,对途经航线的作业区域的图像进行特征描述子提取,将提取的特征描述子与步骤S2中提取的特征描述子进行匹配从而确定喷药无人机当前所在位置。
进一步地,所述步骤S4中对目标作业区域的完整图像网格化的过程如下:
以喷药作业无人机的作业半径在目标作业区域的完整图像中的像素半径为网格的边长来进行网格化,所述作业半径在目标作业区域的完整图像中的像素的半径为的计算过程如下:
其中,是像素半径即网格的边长,R是喷药作业无人机的作业半径,H是喷药作业无人机的作业高度,f是喷药作业无人机拍摄设备的焦距,C为喷药作业无人机拍摄设备的感光器单位物理尺寸所含的像素点的个数,R、H、f、C为已知量,r是感光芯片物理距离,为待求量。
进一步地,所述步骤S6的具体过程如下:
S61:喷药作业无人机即将到达规划航线中的任一航线控制区时,拍摄作业区域的图像并提取该图像的特征描述子;
S62:将S61中的特征描述子与S6中的对应的航线控制区内的特征描述子进行匹配,若匹配成功率低于阀值θ,喷药作业无人机未到达该航线控制区,喷药作业无人机继续飞行重复步骤S61;若匹配成功率在阀值θ以上,喷药作业无人机到达该航线控制区;
S63:当喷药作业无人机成功通过该航线控制区后就将飞向下一个航线控制区,依次重复步骤S61-S63控制喷药无人机按照规划的航线进行喷药作业。
进一步地,所述步骤S6还包括:
若喷药作业无人机已经通过一个航线控制区,但未与该航线控制区匹配成功,舍去该航线控制区,对下一个航线控制区进行匹配,若连续多个航线控制区均匹配失败,或者观测到喷药作业无人机已偏离航线,通过人工干预纠正喷药作业无人机航线或者停止喷药作业无人机的作业,之后重复步骤S61-S63。
优选地,所述步骤S3中,采用基于边缘提取或者基于聚类的图像分割技术实现目标作业区域的完整图像的分割并辅以人工干预来保证分割效果。
与现有技术相比,本发明技术方案的有益效果是:
本发明通过一次性拍摄或者把分块拍摄的图像拼接起来获得目标作业区域的整体图像,将整体图像进行分割得到待作业区域,之后对得到的整体图像进行特征描述子提取,将整体图像进行网格化到一幅包含待作业区域与特征描述子的具体像素位置的导航地图,以导航地图为参考坐标系规划喷药作业无人机的航线,喷药作业无人机通过拍摄规划航线中的图像并提取其特征描述子与目标作业区域的特征描述子进行匹配实现定位功能,从而实现了在无外部导航信号环境下喷药无人机的自动导航问题。
附图说明
图1为本发明方法的流程图;
图2为本发明实施例1中网格化目标作业区域图像的示意图,其中画圈区域表示航线控制区,带箭头粗线表示规划的航线。
具体实施方式
附图仅用于示例性说明,不能理解为对本专利的限制;
为了更好说明本实施例,附图某些部件会有省略、放大或缩小,并不代表实际产品的尺寸;
对于本领域技术人员来说,附图中某些公知结构及其说明可能省略是可以理解的。
下面结合附图和实施例对本发明的技术方案做进一步的说明。
实施例1
如图1所示,一种无需外部导航信号的无人机喷药作业自动导航方法,包括以下步骤:
S1:对目标作业区域进行图像拍摄获取该区域的完整图像,若无法一次性对该区域进行完整拍摄,就分块多次拍摄目标作业区域的图像并将分块拍摄的图像进行拼接得到目标作业区域的完整图像;
S2:将得到的目标作业区域的完整图像进行特征描述子提取,并对提取出的特征描述子进行随机一致性检验来提高特征描述子的置信度;
S3:将S1中得到的目标作业区域的完整图像进行分割,形成一个闭合的待作业区域;
S4:将S1中得到的目标作业区域的完整图像网格化,得到一幅包含待作业区域以及特征描述子和目标作业区域中航线控制区的具体像素位置的导航地图;
S5:以S4中的导航地图为参考坐标系并以S4中网格的边线作为依据来规划喷药作业无人机的航线,保证该规划航线以S形完全覆盖待作业区域;
S6:喷药作业无人机从规划的航线原点起飞并拍摄途经规划航线的作业区域图像,对途经航线的作业区域的图像进行特征描述子提取,将提取的特征描述子与步骤S2中提取的特征描述子进行匹配从而确定喷药无人机当前所在位置。
本实施例中,利用SURF(加速健壮特征)对目标作业区域的完整图像进行特征描述子的提取。
本实施例中,对完整的目标作业区域图像进行图像分割以获得待作业区域的边缘,由于单次作业区域的农作物在通常情况下属于同一类别,也就是说待作业区域的农作物在像素上具有相似性,而非农作物与农作物在像素上会具有很大的区别。如果待分割区域满足上述特点则可以用基于边缘提取或者基于聚类的图像分割技术以实现目标作业区域的分割。
另外,当自动图像分割算法所获得的结果无法满足实际作业需求,可采用人工分割的方式对待作业区域进行分割。
本实施例中,对目标作业区域的完整图像网格化的过程如下:
以喷药作业无人机的作业半径在目标作业区域的完整图像中的像素个数为网格的边长来进行网格化,所述作业半径在目标作业区域的完整图像中的像素的半径为的计算过程如下:
其中,R是喷药作业无人机的作业半径,H是喷药作业无人机的作业高度,f是喷药作业无人机拍摄设备的焦距,C为喷药作业无人机拍摄设备的感光器单位物理尺寸所含的像素点的个数,R、H、f、C为已知量,r是感光芯片物理距离,为待求量。
本实施例中,如图2所示,为了保证划定区域的特征描述子足以准确的完成匹配和满足匹配时间实时性的要求,以网格的交叉为中心,选择大于网格边长一半且小于网格边长的距离为半径划定航线控制区,即每一个交叉都作为节点并划定相应的航线控制区;依次对航线控制区进行编号,并且将每个航线控制区内包含的特征描述子编入相应的航线控制区内,得到一幅包含待作业区域、特征描述子和航线控制区的具体像素位置的导航地图。
本实施例中,步骤S6的具体过程如下:
S61:喷药作业无人机即将到达规划航线中的任一航线控制区时,拍摄作业区域的图像并提取该图像的特征描述子;
S62:将S61中的特征描述子与S6中的对应的航线控制区内的特征描述子进行匹配,若匹配成功率低于阀值θ,喷药作业无人机未到达该航线控制区,喷药作业无人机继续飞行重复步骤S61;若匹配成功率在阀值θ以上,喷药作业无人机到达该航线控制区;
S63:当喷药作业无人机成功通过该航线控制区后就将飞向下一个航线控制区,依次重复步骤S61-S63控制喷药无人机按照规划的航线进行喷药作业。本实施例中,阀值θ设定为80%。
本实施例中,若喷药作业无人机已经通过一个航线控制区,但未与该航线控制区匹配成功,舍去该航线控制区,对下一个航线控制区进行匹配,若连续多个航线控制区均匹配失败,或者喷药作业无人机已偏离航线,通过人工干预纠正喷药作业无人机航线或者停止喷药作业无人机的作业,之后重复步骤S61-S63。
相同或相似的标号对应相同或相似的部件;
附图中描述位置关系的用于仅用于示例性说明,不能理解为对本专利的限制;
显然,本发明的上述实施例仅仅是为清楚地说明本发明所作的举例,而并非是对本发明的实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式的变化或变动。这里无需也无法对所有的实施方式予以穷举。凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等,均应包含在本发明权利要求的保护范围之内。

Claims (4)

1.一种无需外部导航信号的无人机喷药作业自动导航方法,其特征在于,包括以下步骤:
S1:对目标作业区域进行图像拍摄获取该区域的完整图像,若无法一次性对该区域进行完整拍摄,就分块多次拍摄目标作业区域的图像并将分块拍摄的图像进行拼接得到目标作业区域的完整图像;
S2:将得到的目标作业区域的完整图像进行特征描述子提取,并对提取出的特征描述子进行随机一致性检验来提高特征描述子的置信度;
S3:将S1中得到的目标作业区域的完整图像进行分割,形成一个闭合的待作业区域;
S4:将S1中得到的目标作业区域的完整图像网格化,得到一幅包含待作业区域以及特征描述子和目标作业区域中航线控制区的具体像素位置的导航地图;
S5:以S4中的导航地图为参考坐标系并以S4中网格的边线作为依据来规划喷药作业无人机的航线,保证该规划航线以S形完全覆盖待作业区域;
S6:喷药作业无人机从规划的航线原点起飞并拍摄途经规划航线的作业区域图像,对途经航线的作业区域的图像进行特征描述子提取,将提取的特征描述子与步骤S2中提取的特征描述子进行匹配从而确定喷药无人机当前所在位置;
所述步骤S4中对目标作业区域的完整图像网格化的过程如下:
以喷药作业无人机的作业半径在目标作业区域的完整图像中的像素半径为网格的边长来进行网格化,所述作业半径在目标作业区域的完整图像中的像素的半径的计算过程如下:
rpixel=C·r
其中,rpixel是像素半径即网格的边长,R是喷药作业无人机的作业半径,H是喷药作业无人机的作业高度,f是喷药作业无人机拍摄设备的焦距,C为喷药作业无人机拍摄设备的感光器单位物理尺寸所含的像素点的个数,R、H、f、 C为已知量,r是感光芯片物理距离,为待求量。
2.根据权利要求1所述的无需外部导航信号的无人机喷药作业自动导航方法,其特征在于,所述步骤S6的具体过程如下:
S61:喷药作业无人机即将到达规划航线中的任一航线控制区时,拍摄作业区域的图像并提取该图像的特征描述子;
S62:将S61中的特征描述子与S6中的对应的航线控制区内的特征描述子进行匹配,若匹配成功率低于阀值θ,喷药作业无人机未到达该航线控制区,喷药作业无人机继续飞行重复步骤S61;若匹配成功率在阀值θ以上,喷药作业无人机到达该航线控制区;
S63:当喷药作业无人机成功通过该航线控制区后就将飞向下一个航线控制区,依次重复步骤S61-S63控制喷药无人机按照规划的航线进行喷药作业。
3.根据权利要求2所述的无需外部导航信号的无人机喷药作业自动导航方法,其特征在于,所述步骤S6还包括:
若喷药作业无人机已经通过一个航线控制区,但未与该航线控制区匹配成功,舍去该航线控制区,对下一个航线控制区进行匹配,若连续多个航线控制区均匹配失败,或者观测到喷药作业无人机已偏离航线,通过人工干预纠正喷药作业无人机航线或者停止喷药作业无人机的作业,之后重复步骤S61-S63。
4.根据权利要求1所述的无需外部导航信号的无人机喷药作业自动导航方法,其特征在于,所述步骤S3中,采用基于边缘提取或者基于聚类的图像分割技术实现目标作业区域的完整图像的分割并辅以人工干预来保证分割效果。
CN201510060377.0A 2015-02-05 2015-02-05 一种无需外部导航信号的无人机喷药作业自动导航方法 Active CN104615146B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510060377.0A CN104615146B (zh) 2015-02-05 2015-02-05 一种无需外部导航信号的无人机喷药作业自动导航方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510060377.0A CN104615146B (zh) 2015-02-05 2015-02-05 一种无需外部导航信号的无人机喷药作业自动导航方法

Publications (2)

Publication Number Publication Date
CN104615146A CN104615146A (zh) 2015-05-13
CN104615146B true CN104615146B (zh) 2017-04-19

Family

ID=53149644

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510060377.0A Active CN104615146B (zh) 2015-02-05 2015-02-05 一种无需外部导航信号的无人机喷药作业自动导航方法

Country Status (1)

Country Link
CN (1) CN104615146B (zh)

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016192024A1 (en) * 2015-06-01 2016-12-08 SZ DJI Technology Co., Ltd. Spraying system having a liquid flow and rotating speed feedback
CN105159319B (zh) * 2015-09-29 2017-10-31 广州极飞科技有限公司 一种无人机的喷药方法及无人机
TWI634402B (zh) * 2015-10-06 2018-09-01 經緯航太科技股份有限公司 無人飛行載具航線規劃系統及其方法
CN106020233B (zh) * 2016-07-08 2023-11-28 聂浩然 无人机植保作业***、用于植保作业的无人机及控制方法
CN106200678A (zh) * 2016-09-18 2016-12-07 中国空气动力研究与发展中心高速空气动力研究所 一种无人机作业自动编队***及方法
CN106227237B (zh) * 2016-09-29 2019-03-29 广州极飞科技有限公司 无人机的飞行任务的分配方法和装置
CN106382933B (zh) * 2016-11-04 2019-09-10 北京农业智能装备技术研究中心 一种用于航空植保飞行器的作业航线获取方法及***
CN106355866A (zh) * 2016-11-14 2017-01-25 徐志勇 无人机检测影像储存分析***
CN108089591A (zh) * 2016-11-22 2018-05-29 菜鸟智能物流控股有限公司 区域安全系数的标定及其航线规划、飞行方法和相关设备
CN106529538A (zh) * 2016-11-24 2017-03-22 腾讯科技(深圳)有限公司 一种飞行器的定位方法和装置
CN106585992A (zh) * 2016-12-15 2017-04-26 上海土是宝农业科技有限公司 一种无人机智能识别、精确喷洒农药的方法及***
CN107146200B (zh) * 2017-04-25 2020-06-30 广西大学 一种基于图像拼接质量评价的无人机遥感图像拼接方法
CN109035869A (zh) * 2017-07-26 2018-12-18 广州极飞科技有限公司 无人机航线的生成方法和装置
CN109307510A (zh) * 2017-07-28 2019-02-05 广州极飞科技有限公司 飞行导航方法、装置和无人飞行器
CN109324337B (zh) * 2017-07-31 2022-01-14 广州极飞科技股份有限公司 无人飞行器的航线生成及定位方法、装置及无人飞行器
CN107933921B (zh) * 2017-10-30 2020-11-17 广州极飞科技有限公司 飞行器及其喷洒路线生成和执行方法、装置、控制终端
CN110570691B (zh) * 2018-06-06 2021-12-17 杭州海康机器人技术有限公司 一种无人机航线确定方法及装置
CN109197278B (zh) * 2018-10-18 2021-01-19 广州极飞科技有限公司 作业策略的确定方法及装置、药物喷洒策略的确定方法
CN109358643B (zh) * 2018-10-31 2022-09-02 阮镇荣 一种基于图像处理的多模式无人机农药喷洒***及方法
CN109709979A (zh) * 2018-12-10 2019-05-03 北京云无忧大数据科技有限公司 植保作业方法、装置、存储介质及电子设备
CN111326023B (zh) * 2018-12-13 2022-03-29 丰翼科技(深圳)有限公司 一种无人机航线预警方法、装置、设备及存储介质
CN109767387A (zh) * 2018-12-26 2019-05-17 北京木业邦科技有限公司 一种基于无人机的森林图像获取方法及装置
CN110163210B (zh) * 2019-05-24 2022-04-19 北京百度网讯科技有限公司 一种兴趣点poi信息采集方法、装置、设备和存储介质
CN113741413B (zh) * 2020-05-29 2022-11-08 广州极飞科技股份有限公司 一种无人设备的作业方法、无人设备及存储介质
WO2022141043A1 (zh) * 2020-12-29 2022-07-07 深圳市大疆创新科技有限公司 无人机的喷洒规划方法、设备、无人机和存储介质
CN113026828B (zh) * 2021-03-04 2023-01-24 北京百度网讯科技有限公司 水下桩基探伤方法、装置、设备、存储介质及程序产品
CN115237113B (zh) * 2021-08-02 2023-05-12 达闼机器人股份有限公司 机器人导航的方法、机器人、机器人***及存储介质
CN113741516A (zh) * 2021-08-30 2021-12-03 中国科学院地理科学与资源研究所 一种多无人机码垛作业方法、***、存储介质和电子设备
CN114967763B (zh) * 2022-08-01 2022-11-08 电子科技大学 一种基于图像定位的植保无人机的播撒控制方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2538298A1 (en) * 2011-06-22 2012-12-26 Sensefly Sàrl Method for acquiring images from arbitrary perspectives with UAVs equipped with fixed imagers
CN102768042B (zh) * 2012-07-11 2015-06-24 清华大学 一种视觉-惯性组合导航方法
CN103699135B (zh) * 2014-01-03 2016-04-06 中南大学 无人直升机农药喷洒农田作业区域的航迹自动规划方法
CN103822635B (zh) * 2014-03-05 2016-12-07 北京航空航天大学 基于视觉信息的无人机飞行中空间位置实时计算方法
DE202014002338U1 (de) * 2014-03-15 2014-05-14 Volker Jung Weitgehend autonom fliegende UAV-Hubschrauber-Drohne zur Ausbringung von Pflanzenschutzmitteln in der Landwirtschaft, Forstwirtschaft und im Weinanbau (bis zu einem max. Abfluggewicht von 150kg)
CN104155993B (zh) * 2014-08-11 2017-07-25 江苏恒创软件有限公司 一种基于无人直升机的坡地区域农作物作业方法

Also Published As

Publication number Publication date
CN104615146A (zh) 2015-05-13

Similar Documents

Publication Publication Date Title
CN104615146B (zh) 一种无需外部导航信号的无人机喷药作业自动导航方法
CN105159319B (zh) 一种无人机的喷药方法及无人机
US20190156507A1 (en) Method and apparatus for processing point cloud data and storage medium
US11479359B2 (en) UAV operation route planning method, UAV pesticide spreading method and device
CN109324337B (zh) 无人飞行器的航线生成及定位方法、装置及无人飞行器
AU2015404580B2 (en) Condition detection using image processing
WO2021051278A1 (zh) 地表特征识别方法、设备、无人机及计算机可读存储介质
CN108734105B (zh) 车道线检测方法、装置、存储介质和电子设备
CN106909886B (zh) 一种基于深度学习的高精度交通标志检测方法及***
CN111427375A (zh) 无人机巡采巡查的微区域智能划分方法及***
CN106647805B (zh) 无人机自主飞行的方法、装置以及无人机
BR112018009108B1 (pt) Método para a aquisição e análise de imagens aéreas
CN109145171A (zh) 一种多尺度地图数据更新方法
WO2018015959A1 (en) Systems and methods for automated landing of a drone
CN103632044B (zh) 基于地理信息***的摄像头拓扑构建方法及装置
CN109197278A (zh) 作业策略的确定方法及装置、药物喷洒策略的确定方法
EP3690744A1 (en) Method for integrating driving images acquired from vehicles performing cooperative driving and driving image integrating device using same
CN107633202A (zh) 一种基于农田图像特征识别的植保无人机飞控方法和***
CN111860514A (zh) 一种基于改进DeepLab的果园场景多类别实时分割方法
JP7450838B1 (ja) 背景フィルタリングに基づく少量データ学習の作物樹冠被覆率の計算方法および装置
CN104406574A (zh) 无人机摄影测量的野外平高像控点布设靶标及其布设方法
CN111831010A (zh) 一种基于数字空间切片的无人机避障飞行方法
CN107356255B (zh) 一种无人机导航方法及装置
CN109657540B (zh) 枯死树定位方法及***
Medeiros et al. Computational modeling for automatic path planning based on evaluations of the effects of impacts of UAVs on the ground

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant