CN104880187A - 一种基于双摄像机的飞行器光流检测装置的运动估计方法 - Google Patents
一种基于双摄像机的飞行器光流检测装置的运动估计方法 Download PDFInfo
- Publication number
- CN104880187A CN104880187A CN201510313483.5A CN201510313483A CN104880187A CN 104880187 A CN104880187 A CN 104880187A CN 201510313483 A CN201510313483 A CN 201510313483A CN 104880187 A CN104880187 A CN 104880187A
- Authority
- CN
- China
- Prior art keywords
- light stream
- aircraft
- camera
- unique point
- centerdot
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/20—Instruments for performing navigational calculations
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Image Analysis (AREA)
- Navigation (AREA)
Abstract
本发明涉及一种基于双摄像机的飞行器光流检测装置的运动估计方法,首先,前视与下视摄像机组成飞行器光流检测装置,实时采集前视和下视图像,分别计算前视和下视图像当前帧和前一帧之间对应多个特征点的光流值和其次,利用前视图像平移光流的分布特点及光流的解耦思想,计算飞行器的角速度,更新姿态角。再次,利用获得的角速度与获得下视图像平移光流。利用获得的姿态角,将各个特征点深度表征为飞行器离地高度的函数,建立新型平移运动估计方程,用UKF求解飞行器速度v。最终得到飞行器的六自由度运动估计。本发明适用于室内、低空或深空如火星探测飞行器的导航;涉及到的前视摄像机还可完成攻角、侧滑角的计算,障碍物规避等其他导航任务。
Description
技术领域
本发明涉及一种基于双摄像机的飞行器光流检测装置的运动估计方法,仅依靠视觉传感器,实现了飞行器的六自由度实时运动估计,适用于室内、低空或深空如火星探测飞行器的导航。
背景技术
由于对传感器的成本、体积、重量的限制,视觉导航成为无人机导航的重要发展方向。“光流”指的是由于观察者与外界环境的相对运动,在人眼或昆虫复眼的视网膜上形成的一系列流动着的图像光强信息。运动场反映真实场景中的三维运动,光流场是运动场在二维图像上的投影,光流蕴含着丰富的导航信息,可以由飞行过程中实时获取的图像序列计算出光流值,从而分析与估计相机和环境的相对运动。
光流导航经过多年的发展,已经成功应用于固定翼或旋翼无人机,成为重要的辅助导航或独立导航手段,可以实现无人机的自主避障、高度保持、自动着陆、目标检测和空中悬停等导航任务。利用前视摄像机的光流避障成为常用的低空无人机避障手段,而下视摄像机常作为运动估计或导航定位的手段。某些光流运动估计方法仅采用下视摄像机,再利用惯性器件得到的角速度计算下视摄像机的平移光流,进行飞行器速度估计,但是陀螺仪有漂移特性,导航时间长时精度会下降,并且没能充分利用周围环境的视觉信息。某些光流运动估计方法仅利用下视摄像机完成六自由度运动参数的估计,准确度较低,特别是速度估计易受到旋转运动的影响,当飞行器具有大幅度三维运动时,速度估计误差较大。还有些基于光流的速度估计与导航定位方法,在二维情形下进行速度估计与定位,局限性较大,并不能很好地应用于实际导航。前视摄像机比下视摄像机含有更丰富的信息,比下视摄像机能更好地估计旋转运动,不仅可以完成避障的任务,更可以和下视摄像机结合完成飞行器的姿态估计,或导航定位任务。
此外,现有的运动估计方程将每个特征点的深度作为状态量,每增加一个特征点的光流值作为量测量,***就会增加一维,计算量大。总之,现有的基于单独下视摄像机的运动估计方法精确度较低,基于平飞假设的运动估计方法局限性较大,运动估计方程计算量有待降低。
发明内容
本发明的技术解决问题是:克服现有技术的不足,提供一种基于双摄像机的飞行器光流检测装置的运动估计方法,利用基于前视和下视摄像机的光流检测装置,可以实现飞行器的六自由度实时运动估计,能够最大限度的避免飞行器的三维旋转对速度估计的影响,并利用一种维数较低的运动估计方程作为量测方程求取三维速度,减少计算量。
本发明的技术解决方案为:一种基于双摄像机的飞行器光流检测装置的运动估计方法,通过下列步骤实现:
(1)采用前视与下视摄像机组成飞行器光流检测装置,飞行过程中实时采集前视和下视图像,分别计算前视和下视图像当前帧和前一帧之间对应多个特征点的光流值和
(2)利用前视图像平移光流分布特点和光流的解耦思想,建立非线性方程组求解飞行器的角速度,进而更新姿态角;
(3)利用获得的角速度计算下视图像旋转光流,再由计算下视图像平移光流。利用获得的姿态角,将下视图像的各个特征点的深度表征为飞行器离地高度的函数,建立新型平移运动估计方程,用UKF求解飞行器速度v;
(4)在飞行器飞行过程中,不断重复(1)到(3),直至导航结束。
本发明的原理是:光流场是运动场在二维图像上的投影,光流蕴含着丰富的导航信息,可以由飞行过程中实时获取的图像序列计算出光流值,从而分析与估计相机和环境的相对运动。前视图像的平移光流交于一点,利用光流的解耦思想可以用旋转光流代替平移光流,进而求得飞行器的角速度和姿态角。将角速度传入下视摄像机的运动估计,得到下视摄像机图像的平移光流作为量测量;将姿态角传入下视摄像机的运动估计,写出一种维数较低的运动估计方程作为量测方程求取飞行器的三维速度。
本发明与现有技术相比的优点在于:
(1)本发明通过前视与下视摄像机的结合,可以完成飞行器六自由度运动估计。将基于前视光流信息的运动估计结果传入下视运动估计,避免了三维旋转对速度估计的影响,提高了运动估计的精度,并且估计结果无漂移。将三维姿态用于深度的计算,适用于飞行器的三维导航,具有很强的实用性。此外,本发明用到的前视摄像机可以同时进行避障和运动估计,不需增加额外的设备,减少无人机的载荷。
(2)本发明涉及到的新型运动估计方程不以特征点的深度作为状态量,降低了***维数。***最少只有四个状态量,增加特征点只会增加量测信息,并不会增加***维数,降低了计算量,提高了运算速率。
附图说明
图1为本发明的设计流程图;
图2为本发明涉及的摄像机安装方向及摄像机坐标系示意图;
图3为本发明涉及的摄像机成像及图像坐标系示意图;
图4为本发明涉及的前视图像平移光流交点示意图。
具体实施方式
如图1所示,本发明的具体实现步骤如下:
(1)飞行器机体安装了基于前视与下视摄像机的光流检测装置。前视摄像机的光轴与飞行器纵轴平行,并使图像横坐标与飞行器横轴平行,采集正前方图像。下视摄像机的光轴与前视摄像机光轴垂直,并使图像横坐标与飞行器横轴平行,采集正下方图像。摄像机安装方向如图2所示。
在飞行器飞行过程中实时采集前视和下视图像,用基于特征点的金字塔LK算法计算光流值。分别对前视和下视摄像机采集到的前一帧图像进行Harris角点检测,并计算亚像素级角点位置。在特征点处对图像分块处理,并用金字塔LK算法计算前一帧图像和当前帧之间特征点处的光流值和
(2)惯性坐标系Fe定义:惯性坐标系是与地球表面固连的坐标系,忽略地球的曲率和转动,将当地东北天坐标系认为是惯性坐标系,且惯性坐标系是固定坐标系。
机体坐标系Fb定义:原点取在飞行器的质心,OXb轴与飞行器横轴重合,指向右侧为正;OYb轴与飞行器纵轴重合,指向头部为正;OZb轴垂直于OXbYb平面,方向按右手坐标系确定。
前视摄像机坐标系Fc1定义:摄像机与飞行器固连,其坐标系的原点O与飞行器质心重合,OXc1轴与OXb轴重合,指向右侧为正;OZc1轴与摄像机的光轴重合指向飞行器头部为正;OYc1轴垂直于OXc1Zc1平面,方向按右手直角坐标系确定。前视摄像机坐标系如图2所示。
图像坐标系及摄像机成像方式如图3所示。对应以上坐标系定义可以推导出对应前视摄像机的光流运动估计方程。
式中f为焦距,为特征点i对应的光流,为特征点i的平移光流,为特征点i的旋转光流,(ui,vi)为特征点i的像素坐标。(vx,vy,vz)和(ωx,ωy,ωz)为飞行器的速度与角速度在机体系下的表示,为特征点i对应三维点在前视相机系下的Z轴坐标,即深度。
由式(1)可知,图像特征点i对应的光流分为平移光流、旋转光流两部分,分别与速度、角速度有关,称为光流的解耦。其中,平移光流与特征点i对应的三维点的深度有关;旋转光流与特征点i的深度无关。
前视摄像机各个特征点的平移光流交于一点,满足式(2)。式中(ui,vi)为特征点i对应像素坐标,(px,py)为平移光流交点坐标。
由于光流可以分解为平移光流和旋转光流两部分,如式(1)。并且旋转光流与特征点深度无关,所以将式(3)代入式(2)得到旋转光流、(ui,vi)和(px,py)的关系式(4)。
将旋转光流运动估计式代入式(4),可得到ω、(ui,vi)和(px,py)的关系式。采集M个特征点联立非线性方程组,用广义逆法求解方程组的最小二乘解,得到角速度ω。对三轴角速度分别积分得到俯仰角、偏航角和滚转角。
(3)下视摄像机坐标系Fc2定义:摄像机与飞行器固连,其坐标系的原点O与飞行器质心重合,OXc2轴与OXb轴重合,指向右侧为正;OZc2轴与摄像机的光轴重合指向飞行器下方为正;OYc2轴垂直于OXc2Zc2平面,方向按右手直角坐标系确定。下视摄像机坐标系如图2所示。
图像坐标系及摄像机成像方式如图3所示。对应以上坐标系定义推导出下视摄像机的运动估计方程。
式中f为焦距,为特征点j对应的光流,为特征点j的平移光流,为特征点j的旋转光流,(uj,vj)为特征点j的像素坐标。(vx,vy,vz)和(ωx,ωy,ωz)为飞行器的速度与角速度在机体系下的表示,为特征点j对应三维点在前视相机系下的Z轴坐标,即深度。
利用前视摄像机得到的(ωx,ωy,ωz)计算下视摄像机图像特征点j的旋转光流利用和计算下视摄像机图像对应特征点的平移光流如下式所示:
平移光流与特征点的深度有关,如下式所示。三维运动下各点无法视为相同,需要利用飞行器的姿态角、距地面垂直高度和像素坐标分别计算各特征点的深度。
相机的投影中心与特征点j形成一条直线lj,根据成像模型得到相应的直线方程。
假设飞行器下方的地面为水平,地面在惯性系下的坐标为当前飞行器质心在惯性系下的位置为则飞行器距地面垂直距离为惯性坐标系与下视摄像机坐标系的平移矩阵可以表示为:
惯性坐标系与下视摄像机坐标系的旋转矩阵,可由前视摄像机得到的姿态角代入下式得到。式中的θ、ψ、γ分别为飞行器的俯仰角、偏航角和滚转角。
坐标表示采用齐次坐标形式,所以旋转矩阵应增加一维,写成下式的形式。
取地面上一点,在惯性坐标系下用齐次坐标的形式表示为该点在下视摄像机系下的坐标可用该坐标先平移后旋转得到,如下式所示:
取摄像机质心在地面的投影点求得该点在下视摄像机系下的坐标为(-R13h,-R23h,-R33h,1)T。同样的,地面法向量转换成下视摄像机坐标系下表示为将齐次坐标改写为普通坐标,写出点法式地面方程R13(X+R13h)+R23(Y+R23h)+R33(Z+R33h)=0,即与直线方程联立,得到特征点j与摄像机的深度值:
由式(6)代入式(5)得到三维运动下的新的平移光流运动估计式。
运用UKF滤波作为光流信息处理方法,实现飞行器速度的估计。滤波器设计过程如下:
状态方程:Xk+1=AXk+Buk+ωk
观测方程:Yk=g(Xk)+γk
式中Xk=(vx,k,vy,k,vz,k,hk)T为视觉导航***在k时刻的状态变量,其中vk=(vx,k,vy,k,vz,k)T为飞行器相对于机体轴的速度,hk为飞行器相对地面的垂直高度;同样的,Xk+1=(vx,k+1,vy,k+1,vz,k+1,hk+1)T为视觉导航***在k+1时刻的状态变量;ωk为过程噪声,ωk~N(0,Q)。为选取N个特征点计算出的平移光流,作为***的观测向量;式(7)作为***的量测方程中的g(Xk);νk为量测噪声,νk~N(0,R)。状态方程如下式。
由给出的状态方程与观测方程,以迭代形式写出UKF滤波算法,进而得到飞行器速度。
(4)在飞行器飞行过程中,不断重复(1)到(3),直至导航结束。
本发明说明书中未作详细描述的内容属于本领域专业技术人员公知的现有技术。
Claims (6)
1.一种基于双摄像机的飞行器光流检测装置的运动估计方法,其特征在于包括以下步骤:
(1)采用前视与下视摄像机组成的飞行器光流检测装置,在飞行过程中飞行器光流检测装置实时采集前视和下视图像,并分别计算前视和下视图像当前帧和前一帧之间对应多个特征点的光流值和
(2)利用前视图像平移光流分布特点和光流的解耦思想,建立非线性方程组求解飞行器的角速度,进而更新姿态角;
(3)利用获得的角速度计算下视图像旋转光流,再由计算下视图像平移光流,利用获得的姿态角,将下视图像的各个特征点的深度表征为飞行器离地高度的函数,建立新型平移运动估计方程,用UKF求解飞行器速度v;
(4)在飞行器飞行过程中,不断重复(1)到(3),直至导航结束。
2.根据权利要求1所述的一种基于双摄像机的飞行器光流检测装置的运动估计方法,其特征在于:所述步骤(1)光流检测装置的组成及安装结构为:光流检测装置由一个前视摄像机与一个下视摄像机组成,前视摄像机的光轴与飞行器纵轴平行,并使图像横轴与飞行器横轴平行,采集前方图像;下视摄像机的光轴与前视摄像机光轴垂直,并使图像横轴与飞行器横轴平行,采集飞行器下方的地面图像。
3.根据权利要求1所述的一种基于双摄像机的飞行器光流检测装置的运动估计方法,其特征在于:所述步骤(1)中涉及到的光流值计算方法为:采用基于特征点的金字塔LK光流算法,首先分别对前视和下视摄像机采集到的前一帧图像进行Harris角点检测,并计算亚像素级角点位置;然后在特征点处对图像分块处理,并用金字塔LK算法计算前一帧图像和当前帧之间特征点处的光流值和
4.根据权利要求1所述的一种基于双摄像机的飞行器光流检测装置及运动估计方法,其特征在于:所述步骤(2)中利用前视图像平移光流分布特点和光流的解耦思想,建立非线性方程组求解飞行器的角速度,进而更新姿态角的具体实现方法如下:
图像特征点i对应的光流分为平移光流、旋转光流两部分,分别与速度、角速度有关,称为光流的解耦,其中,平移光流与特征点i对应的三维点的深度有关;旋转光流与特征点i的深度无关;
前视摄像机各个特征点的平移光流交于一点,满足式(1),式中(ui,vi)为特征点i对应像素坐标,(px,py)为平移光流交点坐标,为特征点i对应平移光流;
光流分解为平移光流和旋转光流两部分,如下式所示,式中为特征点i对应的总光流:
旋转光流与特征点深度无关,由以上两式得到旋转光流像素坐标(ui,vi)和交点坐标(px,py)的关系式:
将旋转光流运动估计式代入上式,得到飞行器角速度ω、(ui,vi)和(px,py)的关系式;采集M个特征点联立非线性方程组,用基于奇异值分解的广义逆法求解方程组的最小二乘解,得到角速度ω;对三轴角速度分别积分得到俯仰角、偏航角和滚转角。
5.根据权利要求1所述的一种基于双摄像机的飞行器光流检测装置及运动估计方法,其特征在于:所述步骤(3)中利用获得的角速度和姿态角计算速度的具体实现方法如下:
利用前视摄像机得到的(ωx,ωy,ωz)计算下视摄像机图像特征点j的旋转光流利用和相减得到下视摄像机图像对应特征点的平移光流平移光流与特征点的深度有关,令f为摄像机的焦距,平移光流的运动估计如下式所示:
三维运动下各点无法视为相同,需要利用飞行器的姿态角、距地面垂直高度和像素坐标分别计算各特征点的深度;相机的投影中心与特征点j形成一条直线lj,根据成像模型得到相应的直线方程:
假设飞行器下方的地面为水平,地面在惯性系下的坐标为当前飞行器质心在惯性系下的位置为则飞行器距地面垂直距离为惯性坐标系与下视摄像机坐标系的平移矩阵可以表示为:
惯性坐标系与下视摄像机坐标系的旋转矩阵,写成下式的形式:
取地面上一点,在惯性坐标系下用齐次坐标的形式表示为该点在下视摄像机系下的坐标可用该坐标先平移后旋转得到,如下式所示:
取摄像机质心在地面的投影点求得该点在下视摄像机系下的坐标为(-R13h,-R23h,-R33h,1)T;同样的,地面法向量转换成下视摄像机坐标系下表示为将齐次坐标改写为普通坐标,写出点法式地面方程R13(X+R13h)+R23(Y+R23h)+R33(Z+R33h)=0,即与直线方程联立,得到特征点j与摄像机的深度值:
将上式代入平移光流的运动估计式得到三维运动下的新的平移光流运动估计式:
运用UKF滤波作为光流信息处理方法,实现飞行器速度的估计,滤波器设计过程如下:
状态方程:Xk+1=AXk+Buk+ωk
观测方程:Yk=g(Xk)+γk
式中Xk=(vx,k,vy,k,vz,k,hk)T为视觉导航***在k时刻的状态变量,其中vk=(vx,k,vy,k,vz,k)T为飞行器相对于机体轴的速度,hk为飞行器相对地面的垂直高度;同样的,Xk+1=(vx,k+1,vy,k+1,vz,k+1,hk+1)T为视觉导航***在k+1时刻的状态变量;ωk为过程噪声,ωk~N(0,Q);为选取N个特征点计算出的平移光流,作为***的观测向量;三维运动下的新的平移光流运动估计式作为***的量测方程中的g(Xk);νk为量测噪声,νk~N(0,R);状态方程如下式:
由给出的状态方程与观测方程,以迭代形式写出UKF滤波算法,进而得到飞行器速度。
6.根据权利要求1所述的一种基于双摄像机的飞行器光流检测装置及运动估计方法,其特征在于:所述步骤(3)中涉及到的新型运动估计方程不以特征点的深度作为状态量,将各个特征点的深度写成飞行器距地面垂直高度的函数,由此写出平移运动估计方程,降低了***维数;***最少只有四个状态量,增加特征点只会增加量测信息,并不会增加***维数,降低了计算量,提高了运算速率。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510313483.5A CN104880187B (zh) | 2015-06-09 | 2015-06-09 | 一种基于双摄像机的飞行器光流检测装置的运动估计方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201510313483.5A CN104880187B (zh) | 2015-06-09 | 2015-06-09 | 一种基于双摄像机的飞行器光流检测装置的运动估计方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104880187A true CN104880187A (zh) | 2015-09-02 |
CN104880187B CN104880187B (zh) | 2016-03-02 |
Family
ID=53947774
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201510313483.5A Active CN104880187B (zh) | 2015-06-09 | 2015-06-09 | 一种基于双摄像机的飞行器光流检测装置的运动估计方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN104880187B (zh) |
Cited By (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105606092A (zh) * | 2016-02-04 | 2016-05-25 | 中国科学院电子学研究所 | 一种室内机器人定位方法及*** |
CN106155082A (zh) * | 2016-07-05 | 2016-11-23 | 北京航空航天大学 | 一种基于光流的无人机仿生智能避障方法 |
CN106200672A (zh) * | 2016-07-19 | 2016-12-07 | 深圳北航新兴产业技术研究院 | 一种基于光流的无人机避障方法 |
CN106708081A (zh) * | 2017-03-17 | 2017-05-24 | 北京思比科微电子技术股份有限公司 | 多旋翼无人飞行器控制*** |
CN106909141A (zh) * | 2015-12-23 | 2017-06-30 | 北京机电工程研究所 | 障碍物探测定位装置及避障*** |
CN107044855A (zh) * | 2017-05-05 | 2017-08-15 | 南京信息工程大学 | 一种基于摄像头阵列的惯性测量装置及方法 |
CN107798705A (zh) * | 2017-09-28 | 2018-03-13 | 杭州师范大学 | 一种基于特征点集分组的姿态角估计方法 |
CN108830257A (zh) * | 2018-06-29 | 2018-11-16 | 电子科技大学 | 一种基于单目光流的潜在障碍物检测方法 |
CN109062235A (zh) * | 2018-08-24 | 2018-12-21 | 天津远度科技有限公司 | 飞行控制方法、装置及无人机 |
CN109324634A (zh) * | 2016-09-30 | 2019-02-12 | 广州亿航智能技术有限公司 | 一种飞行器及其定位方法、控制方法及光流模块 |
CN109816709A (zh) * | 2017-11-21 | 2019-05-28 | 深圳市优必选科技有限公司 | 基于单目摄像头的深度估计方法、装置及设备 |
CN109903309A (zh) * | 2019-01-07 | 2019-06-18 | 山东笛卡尔智能科技有限公司 | 一种基于角度光流法的机器人运动信息估计方法 |
CN110007107A (zh) * | 2019-04-02 | 2019-07-12 | 上海交通大学 | 一种集成不同焦距摄像头的光流传感器 |
CN111220155A (zh) * | 2020-03-04 | 2020-06-02 | 广东博智林机器人有限公司 | 基于双目视觉惯性里程计估计位姿的方法、装置与处理器 |
CN112634317A (zh) * | 2020-12-15 | 2021-04-09 | 深圳慧源创新科技有限公司 | 基于机械云台和光流算法的双目全向避障方法 |
CN115937261A (zh) * | 2023-01-09 | 2023-04-07 | 中国人民解放军国防科技大学 | 基于事件相机的空间目标运动参数测量方法 |
WO2024067473A1 (zh) * | 2022-09-29 | 2024-04-04 | 影石创新科技股份有限公司 | 飞行器的速度监测方法、装置、存储介质及飞行器 |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2018086050A1 (zh) * | 2016-11-11 | 2018-05-17 | 深圳市大疆创新科技有限公司 | 深度图生成方法和基于该方法的无人机 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102042835A (zh) * | 2010-11-05 | 2011-05-04 | 中国海洋大学 | 自主式水下机器人组合导航*** |
CN103144770A (zh) * | 2013-03-19 | 2013-06-12 | 南京航空航天大学 | 一种全自主控制入室环境避障导航微型飞行器 |
CN104035091A (zh) * | 2014-06-11 | 2014-09-10 | 江苏数字鹰科技发展有限公司 | 室内无人机定位*** |
-
2015
- 2015-06-09 CN CN201510313483.5A patent/CN104880187B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102042835A (zh) * | 2010-11-05 | 2011-05-04 | 中国海洋大学 | 自主式水下机器人组合导航*** |
CN103144770A (zh) * | 2013-03-19 | 2013-06-12 | 南京航空航天大学 | 一种全自主控制入室环境避障导航微型飞行器 |
CN104035091A (zh) * | 2014-06-11 | 2014-09-10 | 江苏数字鹰科技发展有限公司 | 室内无人机定位*** |
Non-Patent Citations (3)
Title |
---|
FARID KENDOUL等: "Optic flow-based vision system for autonomous 3D localization and control of small aerial vehicles", 《ROBOTICS AND AUTONOMOUS SYSTEMS, ELSEVIER》, vol. 57, no. 67, 31 December 2009 (2009-12-31), pages 591 - 602 * |
STEFAN HRABAR等: "A Comparison of Two Camera Configurations For Optic-Flow Based Navigation of a UAV Through Urban Canyons", 《PROCEEDINGS OF THE IEEE INTERNATIONAL CONFERENCE ON INTELLIGENT ROBOTS AND SYSTEMS,2004》, 30 September 2004 (2004-09-30), pages 1 - 8 * |
刘小明 等: "光流控制地形跟随与自动着陆", 《北京航空航天大学学报》, vol. 38, no. 1, 31 January 2012 (2012-01-31), pages 98 - 104 * |
Cited By (25)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106909141A (zh) * | 2015-12-23 | 2017-06-30 | 北京机电工程研究所 | 障碍物探测定位装置及避障*** |
CN105606092A (zh) * | 2016-02-04 | 2016-05-25 | 中国科学院电子学研究所 | 一种室内机器人定位方法及*** |
CN105606092B (zh) * | 2016-02-04 | 2019-02-15 | 中国科学院电子学研究所 | 一种室内机器人定位方法及*** |
CN106155082A (zh) * | 2016-07-05 | 2016-11-23 | 北京航空航天大学 | 一种基于光流的无人机仿生智能避障方法 |
CN106155082B (zh) * | 2016-07-05 | 2019-02-15 | 北京航空航天大学 | 一种基于光流的无人机仿生智能避障方法 |
CN106200672A (zh) * | 2016-07-19 | 2016-12-07 | 深圳北航新兴产业技术研究院 | 一种基于光流的无人机避障方法 |
CN106200672B (zh) * | 2016-07-19 | 2019-08-27 | 深圳北航新兴产业技术研究院 | 一种基于光流的无人机避障方法 |
CN109324634B (zh) * | 2016-09-30 | 2021-08-03 | 广州亿航智能技术有限公司 | 一种飞行器及其定位方法、控制方法及光流模块 |
CN109324634A (zh) * | 2016-09-30 | 2019-02-12 | 广州亿航智能技术有限公司 | 一种飞行器及其定位方法、控制方法及光流模块 |
CN106708081B (zh) * | 2017-03-17 | 2019-06-04 | 北京思比科微电子技术股份有限公司 | 多旋翼无人飞行器控制*** |
CN106708081A (zh) * | 2017-03-17 | 2017-05-24 | 北京思比科微电子技术股份有限公司 | 多旋翼无人飞行器控制*** |
CN107044855A (zh) * | 2017-05-05 | 2017-08-15 | 南京信息工程大学 | 一种基于摄像头阵列的惯性测量装置及方法 |
CN107798705B (zh) * | 2017-09-28 | 2020-06-16 | 杭州师范大学 | 一种基于特征点集分组的姿态角估计方法 |
CN107798705A (zh) * | 2017-09-28 | 2018-03-13 | 杭州师范大学 | 一种基于特征点集分组的姿态角估计方法 |
CN109816709A (zh) * | 2017-11-21 | 2019-05-28 | 深圳市优必选科技有限公司 | 基于单目摄像头的深度估计方法、装置及设备 |
CN109816709B (zh) * | 2017-11-21 | 2020-09-11 | 深圳市优必选科技有限公司 | 基于单目摄像头的深度估计方法、装置及设备 |
CN108830257A (zh) * | 2018-06-29 | 2018-11-16 | 电子科技大学 | 一种基于单目光流的潜在障碍物检测方法 |
CN109062235A (zh) * | 2018-08-24 | 2018-12-21 | 天津远度科技有限公司 | 飞行控制方法、装置及无人机 |
CN109903309A (zh) * | 2019-01-07 | 2019-06-18 | 山东笛卡尔智能科技有限公司 | 一种基于角度光流法的机器人运动信息估计方法 |
CN109903309B (zh) * | 2019-01-07 | 2023-05-12 | 南京华科广发通信科技有限公司 | 一种基于角度光流法的机器人运动信息估计方法 |
CN110007107A (zh) * | 2019-04-02 | 2019-07-12 | 上海交通大学 | 一种集成不同焦距摄像头的光流传感器 |
CN111220155A (zh) * | 2020-03-04 | 2020-06-02 | 广东博智林机器人有限公司 | 基于双目视觉惯性里程计估计位姿的方法、装置与处理器 |
CN112634317A (zh) * | 2020-12-15 | 2021-04-09 | 深圳慧源创新科技有限公司 | 基于机械云台和光流算法的双目全向避障方法 |
WO2024067473A1 (zh) * | 2022-09-29 | 2024-04-04 | 影石创新科技股份有限公司 | 飞行器的速度监测方法、装置、存储介质及飞行器 |
CN115937261A (zh) * | 2023-01-09 | 2023-04-07 | 中国人民解放军国防科技大学 | 基于事件相机的空间目标运动参数测量方法 |
Also Published As
Publication number | Publication date |
---|---|
CN104880187B (zh) | 2016-03-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104880187B (zh) | 一种基于双摄像机的飞行器光流检测装置的运动估计方法 | |
CN105644785B (zh) | 一种基于光流法和地平线检测的无人机着陆方法 | |
Strydom et al. | Visual odometry: autonomous uav navigation using optic flow and stereo | |
US8233660B2 (en) | System and method for object motion detection based on multiple 3D warping and vehicle equipped with such system | |
CN106802668B (zh) | 基于双目与超声波融合的无人机三维避撞方法及*** | |
CN109911188B (zh) | 非卫星导航定位环境的桥梁检测无人机*** | |
CN104062977B (zh) | 基于视觉slam的四旋翼无人机全自主飞行控制方法 | |
CN103925920B (zh) | 一种基于图像透视的微型无人机室内自主导航方法 | |
CN103954283A (zh) | 基于景象匹配/视觉里程的惯性组合导航方法 | |
CN106989744A (zh) | 一种融合机载多传感器的旋翼无人机自主定位方法 | |
Quist et al. | Radar odometry on fixed-wing small unmanned aircraft | |
CN106681353A (zh) | 基于双目视觉与光流融合的无人机避障方法及*** | |
CN106017463A (zh) | 一种基于定位传感装置的飞行器定位方法 | |
CN107504969A (zh) | 基于视觉和惯性组合的四旋翼室内导航方法 | |
CN105865454A (zh) | 一种基于实时在线地图生成的无人机导航方法 | |
Steiner et al. | A vision-aided inertial navigation system for agile high-speed flight in unmapped environments: Distribution statement a: Approved for public release, distribution unlimited | |
CN105333869A (zh) | 一种基于自适应ekf的无人侦察机同步定位与构图方法 | |
Williams et al. | Feature and pose constrained visual aided inertial navigation for computationally constrained aerial vehicles | |
CN107167140A (zh) | 一种无人机视觉定位累积误差抑制方法 | |
CN106672265A (zh) | 一种基于光流信息的小天体定点着陆制导控制方法 | |
Kehoe et al. | State estimation using optical flow from parallax-weighted feature tracking | |
CN112945233B (zh) | 一种全局无漂移的自主机器人同时定位与地图构建方法 | |
Mostafa et al. | Optical flow based approach for vision aided inertial navigation using regression trees | |
Miller et al. | UAV navigation based on videosequences captured by the onboard video camera | |
CN103453875A (zh) | 一种用于无人机俯仰角与滚转角实时计算方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
EXSB | Decision made by sipo to initiate substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |