CN115357052B - 一种无人机自动探索视频画面中兴趣点的方法及*** - Google Patents
一种无人机自动探索视频画面中兴趣点的方法及*** Download PDFInfo
- Publication number
- CN115357052B CN115357052B CN202211276179.4A CN202211276179A CN115357052B CN 115357052 B CN115357052 B CN 115357052B CN 202211276179 A CN202211276179 A CN 202211276179A CN 115357052 B CN115357052 B CN 115357052B
- Authority
- CN
- China
- Prior art keywords
- preset
- aerial vehicle
- unmanned aerial
- explored
- calculating
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 54
- 230000003287 optical effect Effects 0.000 claims abstract description 21
- 238000006243 chemical reaction Methods 0.000 claims description 12
- 239000011159 matrix material Substances 0.000 claims description 12
- 238000004364 calculation method Methods 0.000 claims description 7
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 12
- 238000004590 computer program Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 4
- 238000012545 processing Methods 0.000 description 4
- 238000013459 approach Methods 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000007547 defect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000002360 explosive Substances 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
Landscapes
- Engineering & Computer Science (AREA)
- Aviation & Aerospace Engineering (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Image Processing (AREA)
Abstract
本发明公开了一种无人机自动探索视频画面中兴趣点的方法及***,包括:根据预设兴趣点生成预设信息,且传输给待探索无人机;根据预设视场角度、预设值生成预设数据;计算待探索无人机相对坐标系中的位置坐标,进而形成真实坐标,计算预设兴趣点与预设光心之间的俯仰角和偏航角;调整待探索无人机,且记录预设范围的影像数据,计算第一经纬坐标,根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;使待探索无人机飞向第二经纬坐标位置,特征点匹配,判断误差范围;若误差处于预设范围,则探索完成,若误差不处于预设范围,则重新探索。本发明无人机自动探索视频画面中兴趣点的方法,能够让无人机前往指定兴趣点自动化探索。
Description
技术领域
本发明属于无人机探索领域,特别涉及一种无人机自动探索视频画面中兴趣点的方法及***。
背景技术
随着技术的发展,无人机逐渐跳脱了单单被用作玩具的用途,开始出现在人类社会生产生活的各方面,在巡检、安防、救灾、航拍等领域也大有作为;但是早期各场景中,无人机的实际作业基本离不开人为遥控或规划干预,而当今爆发增长的需求下,无人机自动化的程度和速度很大程度上决定了其在各行各业的发展潜力。
在无人机探索兴趣点的任务中,多数情况是依靠人工预先记录目标点坐标位置以及方位,输入给无人机使其前往完成的;使用这种方法,不仅人工成本高,而且依赖飞手自身能力及经验来规划航线,而且一旦航线既定,灵活性就很低,一旦目标物变化,就需要重新进行记录,耗时耗力,没有可变性;
其他,还有利用双目相机或激光雷达等进行实时或离线建图,结合路径规划的方法,让无人机自主锁定兴趣点并接近的方法;这类方法虽然提升了无人机作业的自主性,但是对设备要求较高,一般都需要配置价格高昂的外部挂载,增加了无人机负载压力,而且对机载算力要求较高,而且对于一般场景,进行高精度建图也往往有些大材小用。
因此,目前亟需一种通过实时计算和调整让无人机自动接近和观察指定兴趣点位置的无人机自动探索方法。
发明内容
发明目的:为了克服以上不足,本发明的目的是提供一种无人机自动探索视频画面中兴趣点的方法及***,其通过实时计算和调整,能够让无人机自动接近并观察兴趣点位置,其准确度高,灵活性和实时性强,能够降低人工成本,且能够降低对作业人员的依赖。
为解决上述技术问题,本发明提供了一种无人机自动探索视频画面中兴趣点的方法,包括:
步骤S1:根据实时预设影像中标记的预设兴趣点,生成预设信息,且将预设信息传输给待探索无人机;
步骤S2:根据预设参数计算预设视场角度,且记录待探索无人机的预设值,进而根据预设视场角度、预设值生成预设数据;
步骤S3:根据预设数据计算待探索无人机相对坐标系中的位置坐标,根据位置坐标进行预设兴趣点的坐标转换,形成预设兴趣点相对待探索无人机的真实坐标,同时计算预设兴趣点与预设光心之间的俯仰角和偏航角;
步骤S4:根据俯仰角和偏航角调整待探索无人机的航向、待探索无人机云台的俯仰角,进而记录以预设兴趣点为中心向四周扩散预设范围的影像数据,进而计算预设兴趣点的第一经纬坐标;
步骤S5:根据预设信息计算待探索无人机与预设兴趣点的水平距离,进而根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;
步骤S6:使待探索无人机飞向第二经纬坐标位置,进而将影像数据与移动后的无人机云台的实时影像进行特征点匹配,判断误差是否处于预设范围;
步骤S7:若是,则探索完成,返回预设位置,若否,则返回步骤S2,重新进行预设兴趣点探索。
优选地,根据预设参数计算预设视场角度的方法为:
步骤S20:根据待探索无人机云台的相机参数和相机变焦放大倍数计算水平视场角度:
步骤S21:根据待探索无人机云台的相机参数和相机变焦放大倍数计算垂直视场角度:
优选地,根据预设数据计算待探索无人机相对坐标系中的位置坐标的方法为:
步骤S30:根据水平视场角度、垂直视场角度、待探索无人机云台的俯仰角、无人机高度,计算预设影像中地面投影范围的四个顶点在图像坐标系中的坐标:
步骤S31:根据四个顶点在图像坐标系中的坐标,计算在以待探索无人机为原点的相对坐标系中的坐标。
优选地,计算预设影像中地面投影范围的四个顶点在图像坐标系中的坐标的方法为:
优选地,计算形成预设兴趣点相对待探索无人机的真实坐标的方法为:
步骤S306:计算图像坐标系中的坐标到无人机相对坐标系中的坐标的单应性矩阵H:
将上面的矩阵展开成方程的形式:
优选地,计算预设兴趣点与预设光心之间的俯仰角和偏航角的方法为:
步骤S30:计算预设兴趣点与预设光心之间的俯仰角:
步骤S31:计算预设兴趣点与预设光心之间的偏航角:
优选地,计算预设兴趣点的第一经纬坐标的方法为:
优选地,计算最终探索位置的第二经纬坐标的方法为:
步骤S50:计算待探索无人机与预设兴趣点的水平距离:
步骤S51:计算预设兴趣点与待探索无人机的距离:
步骤S52:计算最终探索位置与待探索无人机的距离:
步骤S53:计算最终探索位置相对待探索无人机的位置:
本发明还提供一种无人机自动探索视频画面中兴趣点的***,包括:
兴趣标识模块,用于根据实时预设影像中标记的预设兴趣点,生成预设信息,且将预设信息传输给待探索无人机;
数据计算模块,用于根据预设参数计算预设视场角度,且记录待探索无人机的预设值,进而根据预设视场角度、预设值生成预设数据;根据预设数据计算待探索无人机相对坐标系中的位置坐标,根据位置坐标进行预设兴趣点的坐标转换,形成预设兴趣点相对待探索无人机的真实坐标,同时计算预设兴趣点与预设光心之间的俯仰角和偏航角;根据俯仰角和偏航角调整待探索无人机的航向、待探索无人机云台的俯仰角,进而记录以预设兴趣点为中心向四周扩散预设范围的影像数据,进而计算预设兴趣点的第一经纬坐标;根据预设信息计算待探索无人机与预设兴趣点的水平距离,进而根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;
飞行控制模块,用于使待探索无人机飞向第二经纬坐标位置;
误差判断模块,将影像数据与移动后的无人机云台的实时影像进行特征点匹配,判断误差范围;若误差处于预设范围,则探索完成,返回预设位置,若误差不处于预设范围,则重新进行预设兴趣点探索。
优选地,还包括:
无人机,其包括激光测距模块,通过激光测距模块获取无人机距离地面的高度值;
无人机云台,其包括摄像模块,通过摄像模块摄取影像。
本发明的上述技术方案相比现有技术具有以下优点:
1、本发明所述的一种无人机自动探索视频画面中兴趣点的方法,通过预设兴趣点在图像中的坐标,然后利用已知的相机参数,结合无人机的经纬高位置坐标,或者激光测距的数值,计算得出目标在真实世界的经纬度,然后根据设定的最终观察角度和无人机高度来确定无人机最终观察位置,通过三维直线飞行的方式令无人机自动前往进行探索;
2、能够将无人机的自动探索流程进行闭环的多次识别,进而通过微调使得结果处于设定的误差范围内,提高探索结果的精确度、可复用性、鲁棒性,且提高无人机的灵活性、实时性、可变性;
3、能够让无人机自主计算预设兴趣点的位置,进而自动前往探索,进一步降低了人工成本以及对作业人员的依赖。
附图说明
为了使本发明的内容更容易被清楚的理解,下面根据本发明的具体实施例并结合附图,对本发明作进一步详细的说明。
图1是本发明的自动探索视频画面中兴趣点方法的流程图。
图2是本发明的计算预设视场角度方法的流程图。
图3是本发明的计算预设兴趣点与预设光心俯仰角、偏航角方法的流程图。
图4是本发明的计算第一经纬坐标方法的流程图。
图5是本发明的计算第二经纬坐标方法的流程图。
图6是本发明的计算四个顶点坐标方法的流程图。
图7是本发明的计算待探索无人机真实坐标方法的流程图。
图8是本发明的自动探索视频画面中兴趣点***的连接示意图。
图9是本发明的待探索无人机云台摄取的区域影像的示意图。
图10是本发明的区域影像标记预设兴趣点的示意图。
图11是本发明的待探索无人机前往预设兴趣点的示意图。
说明书附图标记说明:10、兴趣标识模块,11、数据计算模块,12、飞行控制模块,13、误差判断模块,14、无人机,15、无人机云台,140、激光测距模块,150、摄像模块。
具体实施方式
下面结合附图和具体实施例对本发明作进一步说明,以使本领域的技术人员可以更好地理解本发明并能予以实施,但所举实施例不作为对本发明的限定。
在本发明的描述中,需要理解的是,术语“包括”意图在于覆盖不排他的包含,例如包含了一系列步骤或单元的过程、方法、***、产品或设备,没有限定于已列出的步骤或单元而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
实施例一
参照图1-图5、图9-图11所示,本发明提供一种无人机自动探索视频画面中兴趣点的方法的实施例,包括以下步骤:
步骤S1:根据实时预设影像中标记的预设兴趣点,生成预设信息,且将预设信息传输给待探索无人机14;
在步骤S1中,具体的,所述预设影像在本实施例中参考,待探索无人机14在空中悬停时,待探索无人机云台15实时回传的视频画面;所述预设兴趣点在本实施例中参考,作业人员从视频画面中选取需要探索的画面坐标系的坐标位置,所述预设兴趣点在本实施例中,由作业人员通过终端设备点击选取或画圈选取;所述预设信息包括预设兴趣点所在的画面坐标系的坐标位置、待探索无人机14的期望高度、待探索无人机云台15俯仰角度。
步骤S2:根据预设参数计算预设视场角度,且记录待探索无人机14的预设值,进而根据预设视场角度、预设值生成预设数据;
在步骤S2中,具体的,所述预设参数在本实施例中参考,待探索无人机云台15的相机参数、相机变焦放大倍数;所述预设视场角度在本实施例中参考:水平视场角度、垂直视场角度;
在本实施例中,参考图2所示,计算预设视场角度的方法为:
步骤S20:根据待探索无人机云台15的相机参数和相机变焦放大倍数计算水平视场角度:
步骤S21:根据待探索无人机云台15的相机参数和相机变焦放大倍数计算垂直视场角度:
其中,所述预设值包括当前待探索无人机14的GPS(Global Positioning System,全球定位***)/RTK(Real-time kinematic,实时动态)的相对高度、待探索无人机云台15的俯仰角度、待探索无人机14在大地坐标系的航向角以及经纬度,其中,所述待探索无人机14的GPS/RTK的相对高度,能够更换为:
利用激光测距数值、待探索无人机云台15的俯仰角度,计算待探索无人机14距离地面的高度:
步骤S3:根据预设数据计算待探索无人机14相对坐标系中的位置坐标,根据位置坐标进行预设兴趣点的坐标转换,形成预设兴趣点相对待探索无人机14的真实坐标,同时计算预设兴趣点与预设光心之间的俯仰角和偏航角;
在步骤S3中,具体的,所述预设数据包括水平视场角度、垂直视场角度、待探索无人机云台15的俯仰角度、待探索无人机14距离地面的高度计算待探索无人机14相对坐标系中的位置坐标,计算预设影像中地面投影范围的四个顶点在图像中的坐标;所述预设光心在本实施例中参考待探索无人机云台的光心;
进而根据四个顶点在图像坐标系中的坐标,计算在以待探索无人机14为原点的相对坐标系中的坐标;
进而计算图像坐标系坐标到无人机14相对坐标系坐标的单应性H矩阵,通过H矩阵,将预设兴趣点在图像坐标系的坐标转换到待探索无人机14的相对坐标系中,获得预设兴趣点在真实世界相对待探索无人机14的真实坐标;
同时,参考图3所示,计算预设兴趣点与预设光心之间的俯仰角和偏航角,具体计算步骤为:
步骤S30:计算预设兴趣点与预设光心之间的俯仰角:
步骤S31:计算预设兴趣点与预设光心之间的偏航角:
步骤S4:根据俯仰角和偏航角调整待探索无人机14的航向、待探索无人机云台15的俯仰角,进而记录以预设兴趣点为中心向四周扩散预设范围的影像数据,进而计算预设兴趣点的第一经纬坐标;
在步骤S4中,具体在调整待探索无人机14的航向、待探索无人机云台15的俯仰角时,实时将预设兴趣点保持在摄取画面的中央;所述预设范围在本实施例参考360*360像素,具体所述预设范围由作业人员根据实际作业需求进行设定;
其中,参考图4所示,所述第一经纬坐标的计算方法为:
步骤S5:根据预设信息计算待探索无人机14与预设兴趣点的水平距离,进而根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;
在步骤S5中,具体的,参考图5所示,计算最终探索位置的第二经纬坐标的步骤为:
步骤S50:计算待探索无人机14与预设兴趣点的水平距离:
步骤S51:计算预设兴趣点与待探索无人机14的距离:
步骤S52:计算最终探索位置与待探索无人机14的距离:
步骤S53:计算最终探索位置相对待探索无人机14的位置:
步骤S6:使待探索无人机14飞向第二经纬坐标位置,进而将影像数据与移动后的无人机云台15的实时影像进行特征点匹配,判断误差是否处于预设范围;
在步骤S6中,以同时调整水平和高度的三维飞行的方式使待探索无人机14飞向第二经纬坐标位置、待探索无人机14的期望高度,同时,实时调整无人机云台15使得预设兴趣点一直在画面中央;
在抵达第二经纬坐标位置、待探索无人机14的期望高度后,根据步骤S4中的影像数据、移动后的无人机云台15实时画面,进行特征点匹配;所述预设范围在本实施例中参考预设兴趣点中心与光心的两个角度差异小于±2度,具体所述预设范围由作业人员根据实际作业需求设定。
步骤S7:若是,则探索完成,返回预设位置,若否,则返回步骤S2,重新进行预设兴趣点探索。
在步骤S7中,所述预设位置即指无人机14初始空中悬停的位置。
其中,本实施例的一种无人机自动探索视频画面中兴趣点的方法,适用于具备摄像模块150和无人机14位置信息的无人机14来执行和使用。
实施例二
参照图6-图7所示,实施例二与实施例一基本相同,其中不同之处在于:
优选地,计算预设影像中地面投影范围的四个顶点在图像坐标系中的坐标的方法为:
其中,具体所述第一角度、第二角度、第三角度、第四角度、第五角度、第六角度由作业人员根据实际作业需求设定;作业人员根据实际作业需求,自定义待探索无人机14的最远飞行距离,对待探索无人机14进行约束。
优选地,计算形成预设兴趣点相对待探索无人机14的真实坐标的方法为:
步骤S306:计算图像坐标系中的坐标到无人机14相对坐标系中的坐标的单应性矩阵H:
首先,利用单应性矩阵表示点之间的映射关系,即:
将上面的矩阵展开成方程的形式:
实施例三
参照图1-图11所示,本发明还提供一种无人机自动探索视频画面中兴趣点的***的实施例,使用所述的一种无人机自动探索视频画面中兴趣点的方法对预设影像的预设兴趣点进行自动探索,包括:
兴趣标识模块10,用于根据实时预设影像中标记的预设兴趣点,生成预设信息,且将预设信息传输给待探索无人机14;
数据计算模块11,用于根据预设参数计算预设视场角度,且记录待探索无人机14的预设值,进而根据预设视场角度、预设值生成预设数据;根据预设数据计算待探索无人机14相对坐标系中的位置坐标,根据位置坐标进行预设兴趣点的坐标转换,形成预设兴趣点相对待探索无人机14的真实坐标,同时计算预设兴趣点与预设光心之间的俯仰角和偏航角;根据俯仰角和偏航角调整待探索无人机14的航向、待探索无人机云台15的俯仰角,进而记录以预设兴趣点为中心向四周扩散预设范围的影像数据,进而计算预设兴趣点的第一经纬坐标;根据预设信息计算待探索无人机14与预设兴趣点的水平距离,进而根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;
飞行控制模块12,用于使待探索无人机14飞向第二经纬坐标位置;
误差判断模块13,将影像数据与移动后的无人机14记录的实时影像进行特征点匹配,判断误差范围;若误差处于预设范围,则探索完成,返回预设位置,若误差不处于预设范围,则重新进行预设兴趣点探索;
无人机14,其包括激光测距模块140,通过激光测距模块140获取无人机14距离地面的高度值;
无人机云台15,其包括摄像模块150,通过摄像模块150摄取影像。
其中,所述摄像模块150包括但不仅限于单目相机、多目相机,具体由作业人员根据实际作业需求设定;所述激光测距模块140包括但不仅限于单线激光测距仪、多线激光测距仪,具体由作业人员根据实际作业需求设定。
实施例四
本发明还提供一种计算机介质,所述计算机介质上存储有计算机程序,所述计算机程序被处理器执行实现所述的一种无人机自动探索视频画面中兴趣点的方法。
本发明还提供一种计算机,包括所述的一种计算机介质。
本领域内的技术人员应明白,本申请的实施例可提供为方法、***、或计算机程序产品。因此,本申请可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本申请可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质包括但不限于磁盘存储器、CD-ROM、光学存储器等上实施的计算机程序产品的形式。
本申请是参照根据本申请实施例的方法、设备***、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
显然,上述实施例仅仅是为清楚地说明所作的举例,并非对实施方式的限定。对于所属领域的普通技术人员来说,在上述说明的基础上还可以做出其它不同形式变化或变动。这里无需也无法对所有的实施方式予以穷举。而由此所引申出的显而易见的变化或变动仍处于本发明创造的保护范围之中。
Claims (3)
1.一种无人机自动探索视频画面中兴趣点的方法,其特征在于,包括以下步骤:
步骤S1:根据实时预设影像中标记的预设兴趣点,生成包含有预设兴趣点所在的画面坐标系的坐标位置、待探索无人机(14)的期望高度、待探索无人机云台(15)俯仰角度的预设信息,且将预设信息传输给待探索无人机(14);
步骤S2:根据包含有待探索无人机云台(15)的相机参数、相机变焦放大倍数的预设参数,计算预设视场角度,且记录包含有待探索无人机(14)GPS/RTK的相对高度、待探索无人机云台(15)的俯仰角度、待探索无人机(14)在大地坐标系的航向角以及经纬度的预设值,进而根据预设视场角度、预设值生成预设数据;
步骤S3:根据预设数据计算待探索无人机(14)相对坐标系中的位置坐标,根据位置坐标进行预设兴趣点的坐标转换,形成预设兴趣点相对待探索无人机(14)的真实坐标,同时计算预设兴趣点与预设光心之间的俯仰角和偏航角;
步骤S4:根据俯仰角和偏航角调整待探索无人机(14)的航向、待探索无人机云台(15)的俯仰角,进而记录以预设兴趣点为中心向四周扩散预设范围的影像数据,进而计算预设兴趣点的第一经纬坐标;
步骤S5:根据预设信息计算待探索无人机(14)与预设兴趣点的水平距离,进而根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;
步骤S6:使待探索无人机(14)飞向第二经纬坐标位置,进而将影像数据与移动后的无人机云台(15)的实时影像进行特征点匹配,判断误差是否处于预设范围;
步骤S7:若是,则探索完成,返回预设位置,若否,则返回步骤S2,重新进行预设兴趣点探索;
其中,计算预设视场角度的方法为:
步骤S20:根据待探索无人机云台15的相机参数和相机变焦放大倍数计算水平视场角度:
步骤S21:根据待探索无人机云台(15)的相机参数和相机变焦放大倍数计算垂直视场角度:
其中,根据预设数据计算待探索无人机(14)相对坐标系中的位置坐标的方法为:
步骤S3000:根据水平视场角度、垂直视场角度、待探索无人机云台(15)的俯仰角、无人机(14)高度,计算预设影像中地面投影范围的四个顶点在图像坐标系中的坐标;
步骤S3001:根据四个顶点在图像坐标系中的坐标,计算在以待探索无人机(14)为原点的相对坐标系中的坐标;
其中,计算预设影像中地面投影范围的四个顶点在图像坐标系中的坐标的方法为:
其中,计算形成预设兴趣点相对待探索无人机(14)的真实坐标的方法为:
步骤S306:计算图像坐标系中的坐标到无人机(14)相对坐标系中的坐标的单应性矩阵H:
将上面的矩阵展开成方程的形式:
其中,计算预设兴趣点与预设光心之间的俯仰角和偏航角的方法为:
步骤S30:计算预设兴趣点与预设光心之间的俯仰角:
步骤S31:计算预设兴趣点与预设光心之间的偏航角:
其中,计算预设兴趣点的第一经纬坐标的方法为:
其中,计算最终探索位置的第二经纬坐标的方法为:
步骤S50:计算待探索无人机(14)与预设兴趣点的水平距离:
步骤S51:计算预设兴趣点与待探索无人机(14)的距离:
步骤S52:计算最终探索位置与待探索无人机(14)的距离:
步骤S53:计算最终探索位置相对待探索无人机(14)的位置:
2.一种无人机自动探索视频画面中兴趣点的***,使用权利要求1所述的一种无人机自动探索视频画面中兴趣点的方法,其特征在于,包括:
兴趣标识模块(10),用于根据实时预设影像中标记的预设兴趣点,生成包含有预设兴趣点所在的画面坐标系的坐标位置、待探索无人机(14)的期望高度、待探索无人机云台(15)俯仰角度的预设信息,且将预设信息传输给待探索无人机(14);
数据计算模块(11),用于根据包含有待探索无人机云台(15)的相机参数、相机变焦放大倍数的预设参数,计算预设视场角度,且记录包含有待探索无人机(14)GPS/RTK的相对高度、待探索无人机云台(15)的俯仰角度、待探索无人机(14)在大地坐标系的航向角以及经纬度的预设值,进而根据预设视场角度、预设值生成预设数据;根据预设数据计算待探索无人机(14)相对坐标系中的位置坐标,根据位置坐标进行预设兴趣点的坐标转换,形成预设兴趣点相对待探索无人机(14)的真实坐标,同时计算预设兴趣点与预设光心之间的俯仰角和偏航角;根据俯仰角和偏航角调整待探索无人机(14)的航向、待探索无人机云台(15)的俯仰角,进而记录以预设兴趣点为中心向四周扩散预设范围的影像数据,进而计算预设兴趣点的第一经纬坐标;根据预设信息计算待探索无人机(14)与预设兴趣点的水平距离,进而根据第一经纬坐标、水平距离计算最终探索位置的第二经纬坐标;
飞行控制模块(12),用于使待探索无人机(14)飞向第二经纬坐标位置;
误差判断模块(13),将影像数据与移动后的无人机云台(15)的实时影像进行特征点匹配,判断误差范围;若误差处于预设范围,则探索完成,返回预设位置,若误差不处于预设范围,则重新进行预设兴趣点探索。
3.根据权利要求2所述的一种无人机自动探索视频画面中兴趣点的***,其特征在于,还包括:
无人机(14),其包括激光测距模块(140),通过激光测距模块(140)获取无人机(14)距离地面的高度值;
无人机云台(15),其包括摄像模块(150),通过摄像模块(150)摄取影像。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211276179.4A CN115357052B (zh) | 2022-10-19 | 2022-10-19 | 一种无人机自动探索视频画面中兴趣点的方法及*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211276179.4A CN115357052B (zh) | 2022-10-19 | 2022-10-19 | 一种无人机自动探索视频画面中兴趣点的方法及*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN115357052A CN115357052A (zh) | 2022-11-18 |
CN115357052B true CN115357052B (zh) | 2022-12-27 |
Family
ID=84007855
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211276179.4A Active CN115357052B (zh) | 2022-10-19 | 2022-10-19 | 一种无人机自动探索视频画面中兴趣点的方法及*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115357052B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116543141A (zh) * | 2022-12-16 | 2023-08-04 | 无锡恺韵来机器人有限公司 | 一种基于声信号与图像融合的无人机识别与定位方法 |
Family Cites Families (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104501779A (zh) * | 2015-01-09 | 2015-04-08 | 中国人民解放军63961部队 | 基于多站测量的无人机高精度目标定位方法 |
CN111968128B (zh) * | 2020-07-10 | 2022-12-20 | 北京航空航天大学 | 一种基于图像标记的无人机视觉姿态和位置解算方法 |
CN112799422B (zh) * | 2021-04-06 | 2021-07-13 | 国网江苏省电力有限公司泰州供电分公司 | 一种用于电力巡检的无人机飞行控制方法及装置 |
CN113850126A (zh) * | 2021-08-20 | 2021-12-28 | 武汉卓目科技有限公司 | 一种基于无人机的目标检测和三维定位方法和*** |
CN114900609B (zh) * | 2022-04-29 | 2023-03-24 | 北京数字绿土科技股份有限公司 | 一种无人机的自动化拍摄控制方法和*** |
-
2022
- 2022-10-19 CN CN202211276179.4A patent/CN115357052B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
CN115357052A (zh) | 2022-11-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106767706B (zh) | 一种无人机勘查交通事故现场的航拍图像采集方法及*** | |
US11032527B2 (en) | Unmanned aerial vehicle surface projection | |
CN107514993A (zh) | 基于无人机的面向单体建筑建模的数据采集方法及*** | |
CN109387186B (zh) | 测绘信息获取方法、装置、电子设备及存储介质 | |
US11644839B2 (en) | Systems and methods for generating a real-time map using a movable object | |
CN107492069B (zh) | 基于多镜头传感器的图像融合方法 | |
CN110799921A (zh) | 拍摄方法、装置和无人机 | |
KR20190051704A (ko) | 스테레오 카메라 드론을 활용한 무기준점 3차원 위치좌표 취득 방법 및 시스템 | |
JP2008186145A (ja) | 空撮画像処理装置および空撮画像処理方法 | |
CN115014361B (zh) | 航线规划方法、装置及计算机存储介质 | |
CN115357052B (zh) | 一种无人机自动探索视频画面中兴趣点的方法及*** | |
US20210264666A1 (en) | Method for obtaining photogrammetric data using a layered approach | |
WO2019230604A1 (ja) | 検査システム | |
CN110853142A (zh) | 基于无人机拍摄的机场净空三维模型构建方法及装置 | |
CN114900609B (zh) | 一种无人机的自动化拍摄控制方法和*** | |
CN116129064A (zh) | 电子地图生成方法、装置、设备及存储介质 | |
AU2022271430A1 (en) | Method and System for Collection of Photographic Data | |
CN116883604A (zh) | 一种基于天、空、地影像的三维建模技术方法 | |
JP2011169658A (ja) | 撮影位置特定装置および撮影位置特定方法 | |
JP5669438B2 (ja) | 対象管理画像生成装置及び対象管理画像生成プログラム | |
WO2019189381A1 (ja) | 移動体、制御装置、および制御プログラム | |
WO2020225979A1 (ja) | 情報処理装置、情報処理方法、プログラム、及び情報処理システム | |
CN112334853A (zh) | 航线调整方法、地面端设备、无人机、***和存储介质 | |
WO2019100214A1 (zh) | 输出影像生成方法、设备及无人机 | |
CN115755981A (zh) | 一种交互式的无人机自主航拍方法及装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |