CN109725310A - 一种基于yolo算法以及岸基雷达***的船舶定位监管*** - Google Patents

一种基于yolo算法以及岸基雷达***的船舶定位监管*** Download PDF

Info

Publication number
CN109725310A
CN109725310A CN201811449413.2A CN201811449413A CN109725310A CN 109725310 A CN109725310 A CN 109725310A CN 201811449413 A CN201811449413 A CN 201811449413A CN 109725310 A CN109725310 A CN 109725310A
Authority
CN
China
Prior art keywords
ship
identification
land
target
carry out
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201811449413.2A
Other languages
English (en)
Other versions
CN109725310B (zh
Inventor
雷富强
王文亮
张巍
张世豪
韩鹏
孟凡菊
马吉顺
王庆
陈明栋
宋雯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Shipping (zhejiang) Ocean Technology Co Ltd
Original Assignee
China Shipping (zhejiang) Ocean Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Shipping (zhejiang) Ocean Technology Co Ltd filed Critical China Shipping (zhejiang) Ocean Technology Co Ltd
Priority to CN201811449413.2A priority Critical patent/CN109725310B/zh
Publication of CN109725310A publication Critical patent/CN109725310A/zh
Application granted granted Critical
Publication of CN109725310B publication Critical patent/CN109725310B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Radar Systems Or Details Thereof (AREA)
  • Traffic Control Systems (AREA)

Abstract

一种基于YOLO算法以及岸基雷达***的船舶定位监管***,包括三个部分基于YOLO算法图像识别技术的船舶识别***、基于岸基雷达的船舶定位***和基于数据融合的船舶监管***:所述基于YOLO算法图像识别技术的船舶识别***:是由港口设立的摄像头捕捉港口海域的实时视频信息,通过滑动窗口的选择,输入到一个大型的卷积神经网络进行目标识别,最后对识别出的目标窗口进行极大值抑制算法;本发明的优点是:该***可以对船舶进行实时定位与监控,船舶在获得进/出港审批之后,可以利用该***实现全自动运行。

Description

一种基于YOLO算法以及岸基雷达***的船舶定位监管***
技术领域
本发明涉及一种基于YOLO算法以及岸基雷达***的船舶定位监管***,属于船配技术领域。
背景技术
随着世界经济发展,各个国家之间的经济紧密相连,海洋运输业作为国家经济之间的连接纽带受到越来越多的重视。随着科技的进步,世界上的一些大型港口开始使用自动化设施辅助船舶卸货运货。但是由于缺少先进的技术,指挥船舶靠港还需要较多人力物力,使得港口的全面自动化无法实现。
本发明针对这一技术难题,利用了图像识别算法(由港口摄像头采集)、岸基雷达定位以及数据融合技术,实现了进/出港船舶的实时定位监管***。该***可以对船舶进行实时定位与监控,船舶在获得进/出港审批之后,可以利用该***实现全自动运行,***也可以自动记录船舶的移动轨迹以及注意事项,极大的减少人力物力的使用,也避免了人为因素所造成的损失。
发明内容
本发明的目的是提供一种基于YOLO算法以及岸基雷达***的船舶定位监管***。
本发明要解决的问题是目前缺少先进的技术,指挥船舶靠港还需要较多人力物力,使得港口的全面自动化无法实现的问题。
为实现本发明的目的,本发明采用的技术方案是:
一种基于YOLO算法以及岸基雷达***的船舶定位监管***,包括三个部分基于YOLO算法图像识别技术的船舶识别***、基于岸基雷达的船舶定位***和基于数据融合的船舶监管***:
所述基于YOLO算法图像识别技术的船舶识别***:
是由港口设立的摄像头捕捉港口海域的实时视频信息,通过滑动窗口的选择,输入到一个大型的卷积神经网络进行目标识别,最后对识别出的目标窗口进行极大值抑制算法,从而精确的识别目标船只在图像中的位置并框选出来,通过收集大量经过仔细分类的目标船只图片,并利用该数据集对该大型卷积神经网络进行训练,该神经网络的输出值包括以下几个方面:图片中是否包含船只、船只的类别以及船只的位置,该船舶通过对比数据库中的船舶图像,可以得到该船舶的船名、呼号、MMSI、IMO静态AIS信息;
该船舶的位置图像通过透视变换算法可以转换为俯视图,根据预先测定的港口位置经纬度,可以得到船舶的精确经纬度坐标以及船舶的轮廓位置;
所述基于岸基雷达的船舶定位***,利用岸基雷达的工作原理,可以精确测量船舶的经纬度坐标位置,并实时的返回数据,该***和船舶AIS***配合使用,当船舶AIS***没有开启时可以利用该***对船舶实时定位;
所述基于数据融合的船舶监管***,该***对基于YOLO算法图像识别技术的船舶识别***和基于岸基雷达的船舶定位***进行数据融合,可以对监测目标进行身份识别、位置识别以及船舶外轮廓识别,可以对目标的位置进行识别,根据数据的精度分析,在船舶距离港口位置较远处可以使用船舶定位***进行船舶定位,并利用船舶识别***进行身份识别,在船舶距离港口位置较近处可以直接依赖船舶识别***进行身份以及位置的精准识别,并利用船舶定位***辅助进行位置识别。
本发明的优点是:通过实际测量港口的靠泊位、停泊位以及进/离港航道的精密坐标,在定位***内生成港口范围的精准二维模型图,***根据目标船舶实时位置可以在港口电子海图上面实时生成船舶影像,***可以通过港口网络实时把目标船舶的进/出港电子海图发送给船舶,给目标船舶提供引航服务,***还可以自动跟踪船舶目标,把目标信息以及航行轨迹记录在数据库中,并且可以对船舶的一些危险行为进行预警和报警。
附图说明
图1为本发明实施例基于YOLO算法图像识别技术的船舶识别***的设计流程图。
图2为本发明实施例卷积神经网络参数图,其中layer代表层数,conv代表卷积层,max代表最大池化层,filters代表卷积核的数目,size代表卷积核的大小(单位:像素),input代表输入该层的图片大小,output代表该层输出的图片大小。值得说明的是最后一层detection层利用softmax函数,输出测试目标的结果。
图3为本发明实施例的船舶识别图片。
图4为本发明实施例的船舶监管***结构图。
图5为本发明的港口航道、泊位范围示意图。
具体实施方式
下面结合附图及实施例对本发明作进一步的说明。
本发明一种基于YOLO算法以及岸基雷达***的船舶定位监管***,包括三个部分基于YOLO算法图像识别技术的船舶识别***、基于岸基雷达的船舶定位***和基于数据融合的船舶监管***:
所述基于YOLO算法图像识别技术的船舶识别***:
是由港口设立的摄像头捕捉港口海域的实时视频信息,通过滑动窗口的选择,输入到一个大型的卷积神经网络进行目标识别,最后对识别出的目标窗口进行极大值抑制算法,从而精确的识别目标船只在图像中的位置并框选出来,通过收集大量经过仔细分类的目标船只图片,并利用该数据集对该大型卷积神经网络进行训练,该神经网络的输出值包括以下几个方面:图片中是否包含船只、船只的类别以及船只的位置,该船舶通过对比数据库中的船舶图像,可以得到该船舶的船名、呼号、MMSI、IMO静态AIS信息;
该船舶的位置图像通过透视变换算法可以转换为俯视图,根据预先测定的港口位置经纬度,可以得到船舶的精确经纬度坐标以及船舶的轮廓位置;
船舶识别***通过设置在港口高处的摄像头捕捉港口的实时图片,通过实时通讯传递给***进行下一步处理。***接收到摄像头的视频信息,可以转换成图片流输入到预先训练好的YOLO算法模型中。实施例中设定长宽为416像素、步长为100像素的滑动窗口来对图片进行处理,处理后的窗口图片输入到预先训练好的30层卷积神经网络中进行处理,神经网络的参数如图2所示。神经网络最后一层采用softmax函数进行处理,输出的格式为:。其中P代表目标图片中是否有目标船只,lx、 ly代表目标船只识别框左上角位于图片中的位置,rx、ry代表目标船只识别框右下角位于图片中的位置,通过lx、ly、rx、ry四个参数可以在图片中画出目标船只的框图,如图3所示。Pn代表船舶的类别代号。YOLO算法的预测结果(包括船舶类型、名称等静态AIS信息)直接输入到数据库里储存,该预测结果与图片流中的图片结合,可以生成船舶目标识别的视频(如图3所示)并存入数据库中。
对处理后的视频进行透视转换,可以把图片转成港口俯视图。通过俯视图可以清楚的界定船舶的轮廓以及船舶的精准位置。
所述基于岸基雷达的船舶定位***,利用岸基雷达的工作原理,可以精确测量船舶的经纬度坐标位置,并实时的返回数据,该***和船舶AIS***配合使用,当船舶AIS***没有开启时可以利用该***对船舶实时定位。
所述基于数据融合的船舶监管***,该***是对基于YOLO算法图像识别技术的船舶识别***和基于岸基雷达的船舶定位***的进行数据融合,可以对监测目标进行身份识别、位置识别以及船舶外轮廓识别,可以对目标的位置进行识别,根据数据的精度分析,在船舶距离港口位置较远处可以使用船舶定位***进行船舶定位,并利用船舶识别***进行身份识别,在船舶距离港口位置较近处可以直接依赖船舶识别***进行身份以及位置的精准识别,并利用船舶定位***辅助进行位置识别;
并提供船舶行为的自动分析以及引航服务、报警/预警服务。
其中船舶识别***会把船舶名称、类型以及位置坐标传入船舶监管***,船舶定位***会把船舶的位置坐标传入船舶监管***。根据船舶的位置坐标,可以把目标船舶的名称、型号跟船舶的精准位置利用聚类算法进行匹配。对匹配置信率高的船舶信息进行关联,并且把关联后的结果存储在数据库中。
根据数据的精度分析,在船舶距离港口位置较远处可以使用船舶定位***进行船舶定位,并利用船舶识别***进行身份识别,在船舶距离港口位置较近处可以直接依赖船舶识别***进行身份以及位置的精准识别,并利用船舶定位***辅助进行位置识别。
本发明通过实际测量港口的靠泊位、停泊位以及进/离港航道的精密范围坐标,在定位***内生成港口范围的精准2维模型图,如图5所示,***根据目标船舶的身份以及实时位置可以在港口电子海图上面实时生成船舶影像,并且通过监控中心展示港口的实时状态。***通过港口网络实时把目标船舶的进/出港电子海图发送给船舶,给目标船舶提供引航服务。***还可以自动跟踪船舶目标,把目标信息以及航行轨迹记录在数据库中,并且可以对船舶的一些危险行为进行预警和报警,该预警/报警信息会实时的传送给中央控制台以及目标船舶,进行双向预警、报警。

Claims (1)

1.一种基于YOLO算法以及岸基雷达***的船舶定位监管***,包括三个部分基于YOLO算法图像识别技术的船舶识别***、基于岸基雷达的船舶定位***和基于数据融合的船舶监管***,其特征是:
所述基于YOLO算法图像识别技术的船舶识别***:
是由港口设立的摄像头捕捉港口海域的实时视频信息,通过滑动窗口的选择,输入到一个大型的卷积神经网络进行目标识别,最后对识别出的目标窗口进行极大值抑制算法,从而精确的识别目标船只在图像中的位置并框选出来,通过收集大量经过仔细分类的目标船只图片,并利用该数据集对该大型卷积神经网络进行训练,该神经网络的输出值包括以下几个方面:图片中是否包含船只、船只的类别以及船只的位置,该船舶通过对比数据库中的船舶图像,可以得到该船舶的船名、呼号、MMSI、IMO静态AIS信息;
该船舶的位置图像通过透视变换算法可以转换为俯视图,根据预先测定的港口位置经纬度,可以得到船舶的精确经纬度坐标以及船舶的轮廓位置;
所述基于岸基雷达的船舶定位***,利用岸基雷达的工作原理,可以精确测量船舶的经纬度坐标位置,并实时的返回数据,该***和船舶AIS***配合使用,当船舶AIS***没有开启时可以利用该***对船舶实时定位;
所述基于数据融合的船舶监管***,该***对基于YOLO算法图像识别技术的船舶识别***和基于岸基雷达的船舶定位***进行数据融合,可以对监测目标进行身份识别、位置识别以及船舶外轮廓识别,可以对目标的位置进行识别,根据数据的精度分析,在船舶距离港口位置较远处可以使用船舶定位***进行船舶定位,并利用船舶识别***进行身份识别,在船舶距离港口位置较近处可以直接依赖船舶识别***进行身份以及位置的精准识别,并利用船舶定位***辅助进行位置识别。
CN201811449413.2A 2018-11-30 2018-11-30 一种基于yolo算法以及岸基雷达***的船舶定位监管*** Active CN109725310B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811449413.2A CN109725310B (zh) 2018-11-30 2018-11-30 一种基于yolo算法以及岸基雷达***的船舶定位监管***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811449413.2A CN109725310B (zh) 2018-11-30 2018-11-30 一种基于yolo算法以及岸基雷达***的船舶定位监管***

Publications (2)

Publication Number Publication Date
CN109725310A true CN109725310A (zh) 2019-05-07
CN109725310B CN109725310B (zh) 2022-11-15

Family

ID=66295802

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811449413.2A Active CN109725310B (zh) 2018-11-30 2018-11-30 一种基于yolo算法以及岸基雷达***的船舶定位监管***

Country Status (1)

Country Link
CN (1) CN109725310B (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111223129A (zh) * 2020-01-10 2020-06-02 深圳中兴网信科技有限公司 检测方法、检测装置、监控设备和计算机可读存储介质
CN111582013A (zh) * 2019-12-27 2020-08-25 珠海大横琴科技发展有限公司 一种基于灰度共生矩阵特征船只检索方法及装置
CN111862389A (zh) * 2020-07-21 2020-10-30 武汉理工大学 一种智能航行感知及增强现实可视化***
CN111899450A (zh) * 2020-07-24 2020-11-06 宁波盛洋电子科技有限公司 一种监控进出港口船舶并发现危险船舶的方法及***
CN112085642A (zh) * 2020-09-27 2020-12-15 广州海事科技有限公司 船港管理方法、***、计算机设备、及存储介质
CN112101158A (zh) * 2020-09-04 2020-12-18 四川智海联科技有限公司 一种基于深度学习和视觉slam的船舶航行辅助***与方法
CN112750163A (zh) * 2021-01-19 2021-05-04 武汉理工大学 一种港口船舶岸电对接方法、***及计算机可读存储介质
CN112857360A (zh) * 2021-03-22 2021-05-28 哈尔滨工程大学 一种船舶航行多信息融合方法
CN113781842A (zh) * 2021-09-30 2021-12-10 海南超船电子商务有限公司 一种船舶识别控制方法
CN113990108A (zh) * 2021-10-22 2022-01-28 苏交科集团股份有限公司 一种船舶优化识别和实时跟踪方法及防撞预警***
CN114332784A (zh) * 2021-12-30 2022-04-12 江苏集萃深度感知技术研究所有限公司 基于机器视觉以及雷达的港口船体识别方法
CN114924477A (zh) * 2022-05-26 2022-08-19 西南大学 基于图像识别及pid智能控制的电拦鱼过船装置
CN115308726A (zh) * 2022-10-10 2022-11-08 中船(浙江)海洋科技有限公司 一种面向渔船导航雷达信号的分布式直接定位方法
CN116630764A (zh) * 2023-07-21 2023-08-22 武汉理工大学三亚科教创新园 水面目标融合辨识方法、***、存储介质、计算机设备及终端
GB2625429A (en) * 2022-11-26 2024-06-19 Ship And Ocean Ind R & D Center Port district sea line multiple vessel monitoring system and operating method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012017470A1 (en) * 2010-08-03 2012-02-09 Selex Sistemi Integrati S.P.A. Anti-piracy system for the maritime navigation in critical areas, and device for data extraction from on board sensors
KR20130093245A (ko) * 2012-02-14 2013-08-22 (주)지엠티 멀티센서와 선박의 운항패턴분석을 통한 밀수의심선박 자동분석시스템 및 그것을 이용한 분석방법
CN206400639U (zh) * 2016-12-26 2017-08-11 中国船舶重工集团南京鹏力科技集团有限公司 基于雷达的智能航道卡口船舶监管***
CN108828550A (zh) * 2018-08-03 2018-11-16 国网福建省电力有限公司 一种海缆区界船舶目标位置检测方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2012017470A1 (en) * 2010-08-03 2012-02-09 Selex Sistemi Integrati S.P.A. Anti-piracy system for the maritime navigation in critical areas, and device for data extraction from on board sensors
KR20130093245A (ko) * 2012-02-14 2013-08-22 (주)지엠티 멀티센서와 선박의 운항패턴분석을 통한 밀수의심선박 자동분석시스템 및 그것을 이용한 분석방법
CN206400639U (zh) * 2016-12-26 2017-08-11 中国船舶重工集团南京鹏力科技集团有限公司 基于雷达的智能航道卡口船舶监管***
CN108828550A (zh) * 2018-08-03 2018-11-16 国网福建省电力有限公司 一种海缆区界船舶目标位置检测方法

Cited By (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111582013A (zh) * 2019-12-27 2020-08-25 珠海大横琴科技发展有限公司 一种基于灰度共生矩阵特征船只检索方法及装置
CN111223129A (zh) * 2020-01-10 2020-06-02 深圳中兴网信科技有限公司 检测方法、检测装置、监控设备和计算机可读存储介质
CN111862389A (zh) * 2020-07-21 2020-10-30 武汉理工大学 一种智能航行感知及增强现实可视化***
CN111862389B (zh) * 2020-07-21 2022-10-21 武汉理工大学 一种智能航行感知及增强现实可视化***
CN111899450A (zh) * 2020-07-24 2020-11-06 宁波盛洋电子科技有限公司 一种监控进出港口船舶并发现危险船舶的方法及***
CN111899450B (zh) * 2020-07-24 2022-04-29 宁波盛洋电子科技有限公司 一种监控进出港口船舶并发现危险船舶的方法及***
CN112101158A (zh) * 2020-09-04 2020-12-18 四川智海联科技有限公司 一种基于深度学习和视觉slam的船舶航行辅助***与方法
CN112085642A (zh) * 2020-09-27 2020-12-15 广州海事科技有限公司 船港管理方法、***、计算机设备、及存储介质
CN112750163A (zh) * 2021-01-19 2021-05-04 武汉理工大学 一种港口船舶岸电对接方法、***及计算机可读存储介质
CN112857360A (zh) * 2021-03-22 2021-05-28 哈尔滨工程大学 一种船舶航行多信息融合方法
CN112857360B (zh) * 2021-03-22 2022-06-17 哈尔滨工程大学 一种船舶航行多信息融合方法
CN113781842A (zh) * 2021-09-30 2021-12-10 海南超船电子商务有限公司 一种船舶识别控制方法
CN113990108A (zh) * 2021-10-22 2022-01-28 苏交科集团股份有限公司 一种船舶优化识别和实时跟踪方法及防撞预警***
CN114332784A (zh) * 2021-12-30 2022-04-12 江苏集萃深度感知技术研究所有限公司 基于机器视觉以及雷达的港口船体识别方法
CN114924477A (zh) * 2022-05-26 2022-08-19 西南大学 基于图像识别及pid智能控制的电拦鱼过船装置
CN115308726A (zh) * 2022-10-10 2022-11-08 中船(浙江)海洋科技有限公司 一种面向渔船导航雷达信号的分布式直接定位方法
CN115308726B (zh) * 2022-10-10 2023-02-10 中船(浙江)海洋科技有限公司 一种面向渔船导航雷达信号的分布式直接定位方法
GB2625429A (en) * 2022-11-26 2024-06-19 Ship And Ocean Ind R & D Center Port district sea line multiple vessel monitoring system and operating method thereof
CN116630764A (zh) * 2023-07-21 2023-08-22 武汉理工大学三亚科教创新园 水面目标融合辨识方法、***、存储介质、计算机设备及终端
CN116630764B (zh) * 2023-07-21 2023-09-26 武汉理工大学三亚科教创新园 水面目标融合辨识方法、***、存储介质、计算机设备及终端

Also Published As

Publication number Publication date
CN109725310B (zh) 2022-11-15

Similar Documents

Publication Publication Date Title
CN109725310A (zh) 一种基于yolo算法以及岸基雷达***的船舶定位监管***
WO2021142902A1 (zh) 基于DANet的无人机海岸线漂浮垃圾巡检***
Shao et al. Saliency-aware convolution neural network for ship detection in surveillance video
CN100538723C (zh) 多视觉传感器信息融合的内河船舶自动识别***
KR102206662B1 (ko) 항만 컨테이너 터미널에서 차량 출입 관리와 객체를 인식하는 비전 카메라 시스템 및 방법
CN108806334A (zh) 一种基于图像的智能船舶身份识别方法
CN103971543B (zh) 一种融合多种数据源的船舶自动识别监控方法及监管***
CN110348304A (zh) 一种可搭载于无人机的海事遇险人员搜索***以及目标识别方法
CN110175186A (zh) 一种智能船舶环境威胁目标感知***及方法
CN105184816A (zh) 基于usv的视觉检测和水面目标追踪***及其检测追踪方法
CN111339893B (zh) 基于深度学习和无人机的管道检测***及方法
CN110515378A (zh) 一种应用于无人艇的智能目标搜索方法
CN110348303A (zh) 一种可搭载于无人艇的辅助水面巡逻***以及水面监测方法
CN109991386A (zh) 无人船与无人机协同控制监控方法、装置及***
CN114049624B (zh) 一种基于机器视觉的船舶舱室智能检测方法及***
WO2021030477A1 (en) Support structure mounting sensing devices for sensing port operations
CN108871409A (zh) 一种故障检测方法和***
CN110807424A (zh) 一种基于航拍图像的港口船舶比对方法
Wu et al. A new multi-sensor fusion approach for integrated ship motion perception in inland waterways
CN110427030B (zh) 一种基于Tiny-YOLOship目标检测算法的无人艇自主对接回收方法
Wu et al. Cooperative unmanned surface vehicles and unmanned aerial vehicles platform as a tool for coastal monitoring activities
CN114596536A (zh) 无人船沿岸巡检方法、装置、计算机设备及存储介质
CN115355952B (zh) 一种原油储罐智能巡检***
CN105894642A (zh) 一种渔港外沿海停泊渔船远程无人值守自动签证管理***
Kujawski et al. Concept of using unmanned aerial vehicle (UAV) in the analysis of traffic parameters on Oder Waterway

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant