CN108469817A - 基于fpga和信息融合的无人船避障控制*** - Google Patents
基于fpga和信息融合的无人船避障控制*** Download PDFInfo
- Publication number
- CN108469817A CN108469817A CN201810196203.0A CN201810196203A CN108469817A CN 108469817 A CN108469817 A CN 108469817A CN 201810196203 A CN201810196203 A CN 201810196203A CN 108469817 A CN108469817 A CN 108469817A
- Authority
- CN
- China
- Prior art keywords
- information
- module
- processing modules
- dsp processing
- unmanned boat
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000012545 processing Methods 0.000 claims abstract description 53
- 230000004888 barrier function Effects 0.000 claims abstract description 27
- 238000004891 communication Methods 0.000 claims abstract description 26
- 230000008447 perception Effects 0.000 claims abstract description 13
- 238000000605 extraction Methods 0.000 claims description 20
- 230000004927 fusion Effects 0.000 claims description 18
- 238000007726 management method Methods 0.000 claims description 8
- 230000006870 function Effects 0.000 abstract description 5
- 230000000694 effects Effects 0.000 description 23
- 238000000034 method Methods 0.000 description 16
- 238000005516 engineering process Methods 0.000 description 7
- 238000001514 detection method Methods 0.000 description 6
- 238000003384 imaging method Methods 0.000 description 5
- 239000000203 mixture Substances 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 239000000779 smoke Substances 0.000 description 2
- 239000004575 stone Substances 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004422 calculation algorithm Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 238000001816 cooling Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- VIKNJXKGJWUCNN-XGXHKTLJSA-N norethisterone Chemical compound O=C1CC[C@@H]2[C@H]3CC[C@](C)([C@](CC4)(O)C#C)[C@@H]4[C@@H]3CCC2=C1 VIKNJXKGJWUCNN-XGXHKTLJSA-N 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000035515 penetration Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 230000007704 transition Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
- G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/02—Control of position or course in two dimensions
- G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
- G05D1/0257—Control of position or course in two dimensions specially adapted to land vehicles using a radar
Landscapes
- Engineering & Computer Science (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Multimedia (AREA)
- Electromagnetism (AREA)
- Traffic Control Systems (AREA)
- Radar Systems Or Details Thereof (AREA)
Abstract
本发明公开了一种基于FPGA和信息融合的无人船避障控制***,包括PC岸基平台和船载***,船载***包括雷达模块、CMOS图像传感器、第一DSP处理模块、第二DSP处理模块、FPGA处理器、GPS模块、驱动模块、姿态感知模块、电源管理模块、通信模块;雷达模块将雷达信息传给第一DSP处理模块,CMOS图像传感器将图像信息传递给第二DSP处理模块,第一DSP处理模块、第二DSP处理模块、GPS模块、驱动模块、姿态感知模块、电源管理模块、通信模块分别与FPGA处理器连接。本发明能准确、快速地获取障碍物的形状、大小、距离等信息,为无人船控制和自主避障等一系列智能功能提供非常可靠的外部信息数据。
Description
技术领域
本发明涉及无人船避障控制领域,具体涉及一种基于FPGA和信息融合的无人船避障控制***。
背景技术
近年来,随着物联网、大数据、云计算、人工智能等新理念、新技术的突飞猛进,船舶自动化水平不断提高,智能化船舶成为船舶的主要发展趋势。在无人驾驶领域,相比于无人机、无人汽车等,无人船艇的发展处于相对落后的状态。无人船艇包括具有自主规划、自主航行、自主环境感知能力的全自主型无人船艇,以及非自主航行的遥控型无人船艇和按照内置程序航行并执行任务的半自主型无人船艇。它集船舶设计、人工智能、信息处理、运动控制等专业技术为一体,研究内容涉及自动驾驶、自主避障、规划与导航、模式识别等多方面。目前,无人船避障的主要方法有:运用雷达探测技术的雷达避障、用于机器视觉技术的机器视觉避障等。
雷达探测技术属于一种主动探测技术,可以直接测量与目标物体的距离、速度、方位等信息,其优点是信号穿透能力强,能够在阴雨、大雾、浓烟等恶劣天气条件下进行探测。雷达技术检测范围大,技术发展时间长,目前各种目标检测算法已比较成熟。激光雷达较毫米波雷达能够提供更高的精度,但由于成本也很高,其推广受到了一定的阻碍。目前,雷达技术还存在一些缺陷,如雷达***光学分辨率和***扫描速度都很低,并且多个雷达***同时在近距离进行检测的情况下会产生干涉反应使检测效果变差。
机器视觉技术具有探测范围大,信息量大,遥测功能强等特点。机器视觉的不足之处在于对数据处理***的实时性能要求较高,易受外界环境的影响。
现有的无人船艇仅仅依靠单一的传感器进行避障,无法保证信息的准确性和可靠性,比如利用雷达传感器作为船舶避障传感器时,存在盲区,而且只能感知障碍物的距离和速度,不能感知障碍物的大小、形状等信息。在采用机器视觉避障时,容易收到外界环境的影响,比如大雾,浓烟,阴雨等情况,无法准确避障。而且现有的无人船避障控制***的处理器通常采用嵌入式ARM等嵌入式处理器,存在运行速度较慢,灵活度不够等问题。
发明内容
本发明的目的在于提供一种能准确、快速地获取障碍物的形状、大小、距离等信息的基于FPGA和信息融合的无人船避障控制***。
本发明所采用的技术方案是:
一种基于FPGA和信息融合的无人船避障控制***,包括PC岸基平台和船载***,所述PC岸基平台、船载***通过通信模块进行无线通信;所述船载***包括雷达模块、CMOS图像传感器、第一DSP处理模块、第二DSP处理模块、FPGA处理器、GPS模块、驱动模块、姿态感知模块、电源管理模块、通信模块;所述雷达模块将搜集的无人船周边障碍物的距离及速度信息传递给第一DSP处理模块进行预处理,所述CMOS图像传感器将搜集的无人船前方区域的障碍物形状、大小尺寸图像信息传递给第二DSP处理模块进行预处理,所述第一DSP处理模块、第二DSP处理模块、GPS模块、驱动模块、姿态感知模块、电源管理模块、通信模块分别与FPGA处理器连接;第一DSP处理模块将雷达信息传递给FPGA处理器,第二DSP处理模块将图像信息传递给FPGA处理器,FPGA处理器经过通信模块将信息传送给PC岸基平台,PC岸基平台对信息进行融合后再传递给FPGA处理器;FPGA处理器接收PC岸基平台融合后的信号,并根据PC岸基平台发来的位置信息,目的地信息控制驱动模块进行自主控制和避障。
其中:所述雷达模块(雷达传感器)的作用是搜集无人船周边障碍物的距离及速度等信息,并传送给第一DSP处理模块进行数据的预处理。
所述CMOS图像传感器的作用是搜集无人船前方区域的障碍物形状、大小尺寸等图像信息,并传送给第二DSP处理模块进行预处理。
所述第一DSP处理模块、第二DSP处理模块由A/D转换器(MB88111P-SH)、SCI串行通信接口、IT公司生产的TMS320F2812型DSP处理器组成,其作用是对接收到的雷达、图像等信息经FFT转换成可识别的信号,并传给FPGA处理器。
所述FPGA处理器采用Xilinx公司的XC3S500E型号的芯片,它内嵌了73k位的分布式RAM和360k位的BRAM资源,拥有10476个逻辑单元、1164个CLB,内嵌乘法器硬核高达20个,可以很好的满足FFT并行运算的要求;作用是将来自第一DSP处理模块、第二DSP处理模块的信息经过通信模块传送给PC岸基平台,并接收来PC岸基平台融合后的信号,并根据PC岸基平台发来的位置信息,目的地信息等数据控制驱动模块进行自主控制和避障等动作。
所述通信模块由无线数传电台组成,其作用是实现岸基平台与船载***之间的通信。
所述GPS模块的作用是定位船舶位置和目的地位置,并显示在PC岸基平台上。
所述电源管理模块由电源和稳压装置、变压装置等组成,电源、变压装置、稳压装置依次连接,用于给船载***各个设备供电。
所述姿态感知模块由电子罗盘、陀螺仪组成,其作用是感知无人船是否倾斜,并辅助导航。
按上述方案,所述驱动模块由电机驱动模块、舵机驱动模块、冷却装置等组成,其作用是控制无人船的速度和方向。
按上述方案,所述PC岸基平台由以计算机为载体的人机界面、信息融合模块和路径规划模块组成,用于给船载***发送目的地信息、信息融合后的障碍物信息,并监控显示船舶的状态。
按上述方案,所述信息融合模块包括信息输入信号、特征提取单元、识别单元、关联单元、融合单元、传感器信息协调管理器、传感器数据库模型和信息输出单元;所述信息输入信号用于输入预处理后的雷达信号和图像信号;所述信息输入信号、特征提取单元、识别单元、关联单元、融合单元依次连接,特征提取单元、识别单元、关联单元、融合单元、传感器数据库模型和信息输出单元分别与传感器信息协调管理器连接;
预处理后的雷达信号和图像信号经过通信模块传给PC岸基平台后,特征提取单元进行特征提取,识别单元对所提取的信息进行分析与识别,关联单元将识别的距离信息与尺寸、外形信息进行关联,融合单元将关联后的信息融合成想要的障碍物信息;同时,特征提取单元、识别单元、关联单元、融合单元将信息传递给传感器信息协调管理器,传感器信息协调管理器将不同传感器的信息统一到同一时空坐标下,实现数据配准,且传感器信息协调管理器与数据库模型进行分析,得出融合后的障碍物信息,该障碍物信息包括障碍物的形状、大小和障碍物的距离、速度信息。
本发明的有益效果在于:
采用FPGA与DSP等多处理器结合的方式
对于传统的无人船控制方案,多采用ARM或者DSP等单处理器控制的方式进行控制,数据处理速度较慢,采样数据的精度较低。本发明采用FPGA与DSP双处理器相结合的方式,利用DSP芯片对接收到的雷达信号、图像信号进行预处理后送给FPGA,DSP主要负责对信号进行快速的数字处理变换,FPGA芯片作为主处理器用于控制整个船舶的运行。该方式采样速度快,数据处理能力强,数据精度很高,能在船舶高速运行等复杂海况状态下进行及时的避障控制。
2.采用多传感器信息融合的方式
目前,无人船避障主要依靠单一传感器感知外部信息,实现避障,但此方式存在信息量少,可靠性不高等问题。本发明采用信息融合技术,能大大提高船舶的感知能力,相对于单一传感器所提供的信息,经过信息融合技术后,将更具准确性和可靠性,由此准确、快速地获取所需信息的特征值,为无人船控制和自主避障等一系列智能功能提供非常可靠的外部信息数据。
3.地面站实时观测与遥控
本发明可以通过PC岸基平台对无人船的航线进行规划,控制无人船的运行,并能实时观察和检测无人船的姿态、位置、障碍物等信息并能对无人船进行遥控操作。
附图说明
下面将结合附图及实施例对本发明作进一步说明,附图中:
图1是本发明基于FPGA和信息融合的无人船避障控制***的结构框图;
图2是信息融合模块的信号处理流程图;
图3是第一DSP处理模块的结构框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅用以解释本发明,并不用于限定本发明。
参见图1,一种基于FPGA和信息融合的无人船避障控制***,能精确地、实时地检测无人船周边的障碍物的形状尺寸与距离信息,并做出判断,实施自主避障,其包括PC岸基平台和船载***,PC岸基平台、船载***通过通信模块进行无线通信。船载***包括雷达模块、CMOS图像传感器、第一DSP处理模块、第二DSP处理模块、FPGA处理器、GPS模块、电机驱动模块、舵机驱动模块、姿态感知模块、电源管理模块、通信模块;雷达模块将搜集的无人船周边障碍物的距离及速度信息传递给第一DSP处理模块进行预处理,CMOS图像传感器将搜集的无人船前方区域的障碍物形状、大小尺寸图像信息传递给第二DSP处理模块进行预处理,第一DSP处理模块、第二DSP处理模块、GPS模块、电机驱动模块、舵机驱动模块、姿态感知模块、电源管理模块、通信模块分别与FPGA处理器连接。
雷达模块(雷达传感器)与CMOS图像传感器分别将采集到的雷达信号与图像信号经过DSP处理模块进行预处理(数字运算),然后传送给FPGA处理器,FPGA处理器通过通信模块与PC岸基平台实现实时通信,并将处理后的雷达信号与图像信号传送给岸基平台,PC岸基平台的工控计算机通过信息融合之后将控制信号传送给FPGA处理器,FPGA处理器根据所接收的信号控制无人船的运行(FPGA处理器接收PC岸基平台融合后的信号,并根据PC岸基平台发来的位置信息,目的地信息控制驱动模块进行自主控制和避障。)。
雷达模块(雷达传感器)的作用是搜集无人船周边障碍物的距离及速度等信息,并传送给第一DSP处理模块进行数据的预处理。
CMOS图像传感器的作用是搜集无人船前方区域的障碍物形状、大小尺寸等图像信息,并传送给第二DSP处理模块进行预处理。
第一DSP处理模块、第二DSP处理模块由A/D转换器(MB88111P-SH)、SCI串行通信接口、IT公司生产的TMS320F2812型DSP处理器组成,其作用是对接收到的雷达、图像等信息经FFT转换成可识别的信号,并传给FPGA处理器。
FPGA处理器采用Xilinx公司的XC3S500E型号的芯片,它内嵌了73k位的分布式RAM和360k位的BRAM资源,拥有10476个逻辑单元、1164个CLB,内嵌乘法器硬核高达20个,可以很好的满足FFT并行运算的要求;作用是将来自第一DSP处理模块、第二DSP处理模块的信息经过通信模块传送给PC岸基平台,并接收来PC岸基平台融合后的信号,并根据PC岸基平台发来的位置信息,目的地信息等数据控制驱动模块进行自主控制和避障等动作。
通信模块由无线数传电台组成,其作用是实现岸基平台与船载***之间的通信。
GPS模块的作用是定位船舶位置和目的地位置,并显示在PC岸基平台上。
电源管理模块由电源和稳压装置、变压装置等组成,电源、变压装置、稳压装置依次连接,用于给船载***各个设备供电。
姿态感知模块由电子罗盘、陀螺仪组成,其作用是感知无人船是否倾斜,并辅助导航。
驱动模块用于控制无人船的速度和方向。
PC岸基平台由以计算机为载体的人机界面、信息融合模块和路径规划模块组成,用于给船载***发送目的地信息、信息融合后的障碍物信息,并监控显示船舶的状态。
局部避障方法基于传感器实时获取无人船周围障碍物信息进行避障,本发明根据栅格法原理采用基于人工势场法的局部避障方法进行避障。具体避障方法为:雷达模块和图像传感器采集前方障碍物的模拟量信息(距离、形状、位置、尺寸)经DSP进行FFT处理后传给PC岸基平台,PC岸基平台根据设定的人工势场法将障碍物信息(形状、位置、尺寸)的范围分成若干个视窗单元格,并根据采集到的障碍物的位置与形状,在无人船的运动空间中创建一个虚拟势场:Fa(X)表示目标(即目的地,由PC岸基平台给出并通过通信模块传给FPGA处理器)对无人船的引力,随着与目标距离增加而单调递增,Fa(X)=-grad(Ua(X))=k(Xg-X),k为大于0的引力场常量;Xg为目标点位置;Ua(X)为目标点对无人船的引力场;X为无人船位置。Fr(X)表示障碍物对无人船的斥力,随着无人船与单元格中障碍物的距离(由雷达模块和图像传感器测得)增加而单调递减,Fr(X)=-grad(Ur(X))=1/2m(1/(X-X0)-1/ρ)*(X-Xg)n,其中Ur(X)为斥力势场;m为大于0的斥力场常量;X为无人船位置;X0为障碍物位置;ρ为障碍物的影响范围;Xg为目标点位置;n为大于等于0的常量。F(X)表示引力和斥力的合力(无人船受到的合力),无人船受到的合力为F(X)=Fa(X)+Fr(X)。总势场函数为U(X)=Ua(X)+Ur(X)。FPGA处理器根据PC岸基平台传送回的合力方向,通过驱动程序控制驱动模块沿着合力的方向运动,实现避障。
参见图2,信息融合模块包括信息输入信号、特征提取单元、识别单元、关联单元、融合单元、传感器信息协调管理器、传感器数据库模型和信息输出单元;信息输入信号用于输入预处理后的雷达信号和图像信号;信息输入信号、特征提取单元、识别单元、关联单元、融合单元依次连接,特征提取单元、识别单元、关联单元、融合单元、传感器数据库模型和信息输出单元分别与传感器信息协调管理器连接。预处理后的雷达信号和图像信号经过通信模块传给PC岸基平台后,特征提取单元对雷达信号和图像信号进行特征提取,识别单元对所提取的信息进行分析与识别,关联单元将识别的距离信息与尺寸、外形信息进行关联,融合单元将关联后的信息融合成想要的障碍物信息;同时,特征提取单元、识别单元、关联单元、融合单元将信息传递给传感器信息协调管理器,传感器信息协调管理器将不同传感器的信息统一到同一时空坐标下,实现数据配准,且传感器信息协调管理器与数据库模型进行分析,得出融合后的障碍物信息,该障碍物信息包括障碍物的形状、大小和障碍物的距离、速度信息。
比如:无人船在前进中前方遇见桥墩,雷达模块和DSP先完成初步桥墩的检测后将信息传给PC岸基平台,PC岸基平台将得到的障碍物区域作为感兴趣区域并提取桥墩与无人船之间的距离信息,再通过由标定得到的转换矩阵,将雷达坐标映射到图像传感器提取的桥墩图像坐标中,然后将雷达与图像传感器的数据在时间和空间上进行关联对齐,原始的雷达数据扫描点可以用P(x,y,z)表示,根据映射关系,将扫面点投射到图像上,彩色图像像素点的RGB(红绿蓝)值融入了距离信息y分量,用来表示与障碍物的距离,所以数据点就增加了一个维度,变成了P(R,G,B,y),即图像数据不但有了大小尺度信息,还拥有了深度信息(与无人船之间的距离)。这时可根据距离信息来判断障碍物的远近来进行避障。
本实施例中,特征提取单元的作用是提取图像信号与雷达信号中的尺寸,形状与距离信息;识别单元的作用是对所提取的信息进行分析与识别;关联单元的作用是将识别的距离信息与尺寸、外形等信息进行关联;融合单元的作用是将关联后的信息融合成想要的障碍物信息;传感器信息协调管理器的作用是将不同传感器的信息统一到同一时空坐标下,实现数据配准。
参见图3,第一DSP处理模块由输入部分,处理部分和输出部分组成。输入部分将信号(反射回的雷达信号)经过滤波、放大处理,传给信号处理单元进行模数转换和快速FFT运算处理;然后将处理后的信号经过输出部分传给FPGA处理器做下一步处理。输入部分由雷达发射与接收单元、滤波电路、放大电路等组成,其作用是向外界发射并接收反射回的电磁波信号,然后对信号进行滤波放大处理。处理部分主要由ADC单元、FFT单元和调节单元组成,其作用是对接收的电磁波信号进行模数转换,并对信号进行预处理,调节单元可对雷达探测的方向,雷达的灵敏度等进行调节。输出部分主要由串口接口,调试接口和数字量输出接口等组成,其作用是用于对数字信号进行输出与调试。
本发明通过同时设置雷达模块(雷达传感器)、CMOS图像传感器克服无人船单一传感器信息不够准确可靠的问题,使无人船能准确、快速地获取所障碍物的形状,大小,距离等信息,为无人船控制平台实现自主航行、自主避障等一系列智能功能提供最可靠的信息源。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (4)
1.一种基于FPGA和信息融合的无人船避障控制***,包括PC岸基平台和船载***,所述PC岸基平台、船载***通过通信模块进行无线通信;其特征在于:
所述船载***包括雷达模块、CMOS图像传感器、第一DSP处理模块、第二DSP处理模块、FPGA处理器、GPS模块、驱动模块、姿态感知模块、电源管理模块、通信模块;所述雷达模块将搜集的无人船周边障碍物的距离及速度信息传递给第一DSP处理模块进行预处理,所述CMOS图像传感器将搜集的无人船前方区域的障碍物形状、大小尺寸图像信息传递给第二DSP处理模块进行预处理,所述第一DSP处理模块、第二DSP处理模块、GPS模块、驱动模块、姿态感知模块、电源管理模块、通信模块分别与FPGA处理器连接;第一DSP处理模块将雷达信息传递给FPGA处理器,第二DSP处理模块将图像信息传递给FPGA处理器,FPGA处理器经过通信模块将信息传送给PC岸基平台,PC岸基平台对信息进行融合后再传递给FPGA处理器;FPGA处理器接收PC岸基平台融合后的信号,并根据PC岸基平台发来的位置信息,目的地信息控制驱动模块进行自主控制和避障。
2.根据权利要求1所述的基于FPGA和信息融合的无人船避障控制***,其特征在于:所述驱动模块包括电机驱动模块、舵机驱动模块。
3.根据权利要求1所述的基于FPGA和信息融合的无人船避障控制***,其特征在于:所述PC岸基平台由以计算机为载体的人机界面、信息融合模块和路径规划模块组成,用于给船载***发送目的地信息、信息融合后的障碍物信息,并监控显示船舶的状态。
4.根据权利要求2所述的基于FPGA和信息融合的无人船避障控制***,其特征在于:所述信息融合模块包括信息输入信号、特征提取单元、识别单元、关联单元、融合单元、传感器信息协调管理器、传感器数据库模型和信息输出单元;所述信息输入信号用于输入预处理后的雷达信号和图像信号;所述信息输入信号、特征提取单元、识别单元、关联单元、融合单元依次连接,特征提取单元、识别单元、关联单元、融合单元、传感器数据库模型和信息输出单元分别与传感器信息协调管理器连接;
预处理后的雷达信号和图像信号经过通信模块传给PC岸基平台后,特征提取单元进行特征提取,识别单元对所提取的信息进行分析与识别,关联单元将识别的距离信息与尺寸、外形信息进行关联,融合单元将关联后的信息融合成想要的障碍物信息;同时,特征提取单元、识别单元、关联单元、融合单元将信息传递给传感器信息协调管理器,传感器信息协调管理器将不同传感器的信息统一到同一时空坐标下,实现数据配准,且传感器信息协调管理器与数据库模型进行分析,得出融合后的障碍物信息,该障碍物信息包括障碍物的形状、大小和障碍物的距离、速度信息。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810196203.0A CN108469817B (zh) | 2018-03-09 | 2018-03-09 | 基于fpga和信息融合的无人船避障控制*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810196203.0A CN108469817B (zh) | 2018-03-09 | 2018-03-09 | 基于fpga和信息融合的无人船避障控制*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN108469817A true CN108469817A (zh) | 2018-08-31 |
CN108469817B CN108469817B (zh) | 2021-04-27 |
Family
ID=63264308
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201810196203.0A Expired - Fee Related CN108469817B (zh) | 2018-03-09 | 2018-03-09 | 基于fpga和信息融合的无人船避障控制*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN108469817B (zh) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109213164A (zh) * | 2018-09-07 | 2019-01-15 | 上海大学 | 基于水面无人艇船体模型的模型预测控制的高速紧急避障方法 |
CN109521779A (zh) * | 2019-01-25 | 2019-03-26 | 石家庄鑫农机械有限公司 | 一种基于NB-IoT的无人船控制*** |
CN109850092A (zh) * | 2019-01-10 | 2019-06-07 | 安徽天帆智能科技有限责任公司 | 一种无人救生艇自动返航*** |
CN110580044A (zh) * | 2019-08-30 | 2019-12-17 | 天津大学 | 基于智能感知的无人船全自动航行异构*** |
CN112009490A (zh) * | 2019-05-30 | 2020-12-01 | 博世汽车部件(苏州)有限公司 | 用于确定物体或车辆形状的方法和***、以及辅助驾驶*** |
WO2020237693A1 (zh) * | 2019-05-31 | 2020-12-03 | 华南理工大学 | 一种水面无人装备多源感知方法及*** |
CN112130575A (zh) * | 2020-10-13 | 2020-12-25 | 江苏科技大学 | 基于OneNET平台的无人船控制***及其自主避障方法 |
CN116795028A (zh) * | 2023-07-20 | 2023-09-22 | 中国船舶集团有限公司第七一九研究所 | 一种基于arm和dsp的舰船防撞在线监测数据处理装置 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3588814B2 (ja) * | 1993-03-08 | 2004-11-17 | マツダ株式会社 | 自動車の障害物検知装置 |
CN103287372A (zh) * | 2013-06-19 | 2013-09-11 | 贺亮才 | 一种基于图像处理的汽车防撞安全保护方法 |
CN105159297A (zh) * | 2015-09-11 | 2015-12-16 | 南方电网科学研究院有限责任公司 | 输电线路无人机巡检避障***与方法 |
CN105313782A (zh) * | 2014-07-28 | 2016-02-10 | 现代摩比斯株式会社 | 车辆行驶辅助***及其方法 |
CN105320133A (zh) * | 2015-10-26 | 2016-02-10 | 广东雷洋智能科技股份有限公司 | 一种应用于扫地机器人的改进势场栅格法 |
CN105511457A (zh) * | 2014-09-25 | 2016-04-20 | 科沃斯机器人有限公司 | 机器人静态路径规划方法 |
CN105741234A (zh) * | 2016-01-27 | 2016-07-06 | 江苏科技大学 | 基于三维全景环视的无人艇自动锚泊视觉辅助*** |
CN105866779A (zh) * | 2016-04-06 | 2016-08-17 | 浙江大学 | 基于双目相机与毫米波雷达的可穿戴避障装置及避障方法 |
CN106909145A (zh) * | 2017-02-22 | 2017-06-30 | 武汉理工大学 | 无人航道测量船障碍物实时感知避障***与方法 |
CN106933232A (zh) * | 2017-04-27 | 2017-07-07 | 上海大学 | 一种基于协同无人艇群的环境感知***和方法 |
CN107161141A (zh) * | 2017-03-08 | 2017-09-15 | 深圳市速腾聚创科技有限公司 | 无人驾驶汽车***及汽车 |
CN107229276A (zh) * | 2017-05-27 | 2017-10-03 | 浙江大学 | 基于ARM Cortex‑M7处理器的智能无人船平台及其控制方法 |
US20170285645A1 (en) * | 2016-03-31 | 2017-10-05 | Kanzaki Kokyukoki Mfg. Co., Ltd. | Watercraft steering system and watercraft |
CN107728618A (zh) * | 2017-09-28 | 2018-02-23 | 南通大学 | 一种无人船的避障方法 |
-
2018
- 2018-03-09 CN CN201810196203.0A patent/CN108469817B/zh not_active Expired - Fee Related
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3588814B2 (ja) * | 1993-03-08 | 2004-11-17 | マツダ株式会社 | 自動車の障害物検知装置 |
CN103287372A (zh) * | 2013-06-19 | 2013-09-11 | 贺亮才 | 一种基于图像处理的汽车防撞安全保护方法 |
CN105313782A (zh) * | 2014-07-28 | 2016-02-10 | 现代摩比斯株式会社 | 车辆行驶辅助***及其方法 |
CN105511457A (zh) * | 2014-09-25 | 2016-04-20 | 科沃斯机器人有限公司 | 机器人静态路径规划方法 |
CN105159297A (zh) * | 2015-09-11 | 2015-12-16 | 南方电网科学研究院有限责任公司 | 输电线路无人机巡检避障***与方法 |
CN105320133A (zh) * | 2015-10-26 | 2016-02-10 | 广东雷洋智能科技股份有限公司 | 一种应用于扫地机器人的改进势场栅格法 |
CN105741234A (zh) * | 2016-01-27 | 2016-07-06 | 江苏科技大学 | 基于三维全景环视的无人艇自动锚泊视觉辅助*** |
US20170285645A1 (en) * | 2016-03-31 | 2017-10-05 | Kanzaki Kokyukoki Mfg. Co., Ltd. | Watercraft steering system and watercraft |
CN105866779A (zh) * | 2016-04-06 | 2016-08-17 | 浙江大学 | 基于双目相机与毫米波雷达的可穿戴避障装置及避障方法 |
CN106909145A (zh) * | 2017-02-22 | 2017-06-30 | 武汉理工大学 | 无人航道测量船障碍物实时感知避障***与方法 |
CN107161141A (zh) * | 2017-03-08 | 2017-09-15 | 深圳市速腾聚创科技有限公司 | 无人驾驶汽车***及汽车 |
CN106933232A (zh) * | 2017-04-27 | 2017-07-07 | 上海大学 | 一种基于协同无人艇群的环境感知***和方法 |
CN107229276A (zh) * | 2017-05-27 | 2017-10-03 | 浙江大学 | 基于ARM Cortex‑M7处理器的智能无人船平台及其控制方法 |
CN107728618A (zh) * | 2017-09-28 | 2018-02-23 | 南通大学 | 一种无人船的避障方法 |
Non-Patent Citations (3)
Title |
---|
朱爱斌 等: "解决路径规划局部极小问题的势场栅格法", 《机械设计与研究》 * |
王栋: "基于数据融合的机载多传感器目标识别", 《万方学位论文数据库》 * |
陆怡悦: "基于雷达与图像信息融合的路面目标识别与应用", 《CNKI中国优秀硕士学位论文全文数据库(电子期刊)工程科技II辑》 * |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109213164A (zh) * | 2018-09-07 | 2019-01-15 | 上海大学 | 基于水面无人艇船体模型的模型预测控制的高速紧急避障方法 |
CN109850092A (zh) * | 2019-01-10 | 2019-06-07 | 安徽天帆智能科技有限责任公司 | 一种无人救生艇自动返航*** |
CN109521779A (zh) * | 2019-01-25 | 2019-03-26 | 石家庄鑫农机械有限公司 | 一种基于NB-IoT的无人船控制*** |
CN112009490A (zh) * | 2019-05-30 | 2020-12-01 | 博世汽车部件(苏州)有限公司 | 用于确定物体或车辆形状的方法和***、以及辅助驾驶*** |
WO2020237693A1 (zh) * | 2019-05-31 | 2020-12-03 | 华南理工大学 | 一种水面无人装备多源感知方法及*** |
CN110580044A (zh) * | 2019-08-30 | 2019-12-17 | 天津大学 | 基于智能感知的无人船全自动航行异构*** |
CN112130575A (zh) * | 2020-10-13 | 2020-12-25 | 江苏科技大学 | 基于OneNET平台的无人船控制***及其自主避障方法 |
CN116795028A (zh) * | 2023-07-20 | 2023-09-22 | 中国船舶集团有限公司第七一九研究所 | 一种基于arm和dsp的舰船防撞在线监测数据处理装置 |
CN116795028B (zh) * | 2023-07-20 | 2024-06-25 | 中国船舶集团有限公司第七一九研究所 | 一种基于arm和dsp的舰船防撞在线监测数据处理装置 |
Also Published As
Publication number | Publication date |
---|---|
CN108469817B (zh) | 2021-04-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN108469817A (zh) | 基于fpga和信息融合的无人船避障控制*** | |
Wu et al. | Survey of underwater robot positioning navigation | |
CN110414396B (zh) | 一种基于深度学习的无人艇感知融合算法 | |
Luo et al. | A survey of intelligent transmission line inspection based on unmanned aerial vehicle | |
CN112734765B (zh) | 基于实例分割与多传感器融合的移动机器人定位方法、***及介质 | |
CN113189977B (zh) | 一种用于机器人的智能导航路径规划***及方法 | |
CN109444912B (zh) | 一种基于协同控制与深度学习的驾驶环境感知***及方法 | |
CN108062111A (zh) | 一种多旋翼无人机自主避障装置和避障方法 | |
CN111090283B (zh) | 一种无人艇组合定位定向方法和*** | |
CN109213204A (zh) | 基于数据驱动的auv海底目标搜寻航行***及方法 | |
KR102466804B1 (ko) | 이미지 세그멘테이션을 이용한 자율 운항 방법 | |
Li et al. | Intelligent mobile drone system based on real-time object detection | |
Cui et al. | 3D detection and tracking for on-road vehicles with a monovision camera and dual low-cost 4D mmWave radars | |
CN108106617A (zh) | 一种无人机自动避障方法 | |
EP3989034B1 (en) | Automatic safe-landing-site selection for unmanned aerial systems | |
CN116310689B (zh) | 一种无人智能多模态信息融合与目标感知***及作业方法 | |
CN108871409A (zh) | 一种故障检测方法和*** | |
Cheng et al. | Relocalization based on millimeter wave radar point cloud for visually degraded environments | |
CN213750765U (zh) | 一种用于协同搜索视觉无人机及协同搜索平台 | |
Wu et al. | Environment perception technology for intelligent robots in complex environments: A Review | |
Ding et al. | Electric power line patrol operation based on vision and laser SLAM fusion perception | |
He et al. | Visual positioning system for small-scaled spherical robot in underwater environment | |
CN113989350B (zh) | 无人船自主探索和未知环境三维重构的监控*** | |
CN106843208A (zh) | 一种无人驾驶测深船 | |
Zou | Image-based unmanned vehicle for farm fruit detection |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20210427 |