CN114997359A - 一种基于仿生机器狗的堤防险情巡查成套技术装备 - Google Patents

一种基于仿生机器狗的堤防险情巡查成套技术装备 Download PDF

Info

Publication number
CN114997359A
CN114997359A CN202210540575.7A CN202210540575A CN114997359A CN 114997359 A CN114997359 A CN 114997359A CN 202210540575 A CN202210540575 A CN 202210540575A CN 114997359 A CN114997359 A CN 114997359A
Authority
CN
China
Prior art keywords
data
embankment
dog
layer
point cloud
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210540575.7A
Other languages
English (en)
Other versions
CN114997359B (zh
Inventor
唐亮
田爽
毛小刚
凌贤长
荣仲迪
姚昌瑞
丛晟亦
张熙阳
胡心雨
王名远
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Harbin Institute of Technology
Chongqing Research Institute of Harbin Institute of Technology
Original Assignee
Harbin Institute of Technology
Chongqing Research Institute of Harbin Institute of Technology
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Harbin Institute of Technology, Chongqing Research Institute of Harbin Institute of Technology filed Critical Harbin Institute of Technology
Priority to CN202210540575.7A priority Critical patent/CN114997359B/zh
Publication of CN114997359A publication Critical patent/CN114997359A/zh
Application granted granted Critical
Publication of CN114997359B publication Critical patent/CN114997359B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/004—Artificial life, i.e. computing arrangements simulating life
    • G06N3/008—Artificial life, i.e. computing arrangements simulating life based on physical entities controlled by simulated intelligence so as to replicate intelligent life forms, e.g. based on robots replicating pets or humans in their appearance or behaviour
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B62—LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62D—MOTOR VEHICLES; TRAILERS
    • B62D57/00—Vehicles characterised by having other propulsion or other ground- engaging means than wheels or endless track, alone or in addition to wheels or endless track
    • B62D57/02—Vehicles characterised by having other propulsion or other ground- engaging means than wheels or endless track, alone or in addition to wheels or endless track with ground-engaging propulsion means, e.g. walking members
    • B62D57/032—Vehicles characterised by having other propulsion or other ground- engaging means than wheels or endless track, alone or in addition to wheels or endless track with ground-engaging propulsion means, e.g. walking members with alternately or sequentially lifted supporting base and legs; with alternately or sequentially lifted feet or skid
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J5/00—Radiation pyrometry, e.g. infrared or optical thermometry
    • G01J5/48—Thermography; Techniques using wholly visual means
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88—Lidar systems specially adapted for specific applications
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01V—GEOPHYSICS; GRAVITATIONAL MEASUREMENTS; DETECTING MASSES OR OBJECTS; TAGS
    • G01V3/00—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation
    • G01V3/12—Electric or magnetic prospecting or detecting; Measuring magnetic field characteristics of the earth, e.g. declination, deviation operating with electromagnetic waves
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257—Control of position or course in two dimensions specially adapted to land vehicles using a radar
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0287—Control of position or course in two dimensions specially adapted to land vehicles involving a plurality of land vehicles, e.g. fleet or convoy travelling
    • G05D1/0291—Fleet control
    • G05D1/0295—Fleet control by at least one leading vehicle of the fleet
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/004—Artificial life, i.e. computing arrangements simulating life
    • G06N3/006—Artificial life, i.e. computing arrangements simulating life based on simulated virtual individual or collective life forms, e.g. social simulations or particle swarm optimisation [PSO]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00—Computing arrangements based on biological models
    • G06N3/02—Neural networks
    • G06N3/08—Learning methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N7/00—Computing arrangements based on specific mathematical models
    • G06N7/02—Computing arrangements based on specific mathematical models using fuzzy logic
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/0002—Inspection of images, e.g. flaw detection
    • G06T7/0004—Industrial image inspection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y20/00—Information sensed or collected by the things
    • G16Y20/10—Information sensed or collected by the things relating to the environment, e.g. temperature; relating to location
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00—IoT characterised by the purpose of the information processing
    • G16Y40/10—Detection; Monitoring
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00—IoT characterised by the purpose of the information processing
    • G16Y40/20—Analytics; Diagnosis
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00—IoT characterised by the purpose of the information processing
    • G16Y40/30—Control
    • G16Y40/35—Management of things, i.e. controlling in accordance with a policy or in order to achieve specified objectives
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00—IoT characterised by the purpose of the information processing
    • G16Y40/50—Safety; Security of things, users, data or systems
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16Y—INFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00—IoT characterised by the purpose of the information processing
    • G16Y40/60—Positioning; Navigation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10048—Infrared image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20081—Training; Learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20084—Artificial neural networks [ANN]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30108—Industrial image inspection
    • G06T2207/30132—Masonry; Concrete
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30232—Surveillance

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Remote Sensing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Biomedical Technology (AREA)
  • Software Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • Mathematical Physics (AREA)
  • Molecular Biology (AREA)
  • Automation & Control Theory (AREA)
  • Biophysics (AREA)
  • Computational Linguistics (AREA)
  • Electromagnetism (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Environmental & Geological Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Quality & Reliability (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Spectroscopy & Molecular Physics (AREA)
  • Fuzzy Systems (AREA)
  • Geophysics (AREA)
  • General Life Sciences & Earth Sciences (AREA)
  • Algebra (AREA)
  • Geology (AREA)
  • Computational Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Multimedia (AREA)
  • Mathematical Analysis (AREA)
  • Mathematical Optimization (AREA)

Abstract

一种基于仿生机器狗的堤防险情巡查成套技术装备，属于堤防险情巡查技术领域。它结合智能机器人技术，能够加强堤防险情巡查力度，具有多种探查手段排查地底隐患，利用网络云技术实现终端数据处理和实时检测的功能。四足仿生机器狗上集成多种探测***，用于获取堤防数据，将数据传入数据层，数据层通过网络层将数据输入深度学习卷积神经网络，深度学习卷积神经网络进行病害特征分析，识别应用层中的堤防隐患病害，由决策层进行堤防边坡安全的预警决策。本发明集成双目立体视觉、点云激光雷达和红外热成像三种技术实现机器狗昼夜工作不间断，在一定范围内设置充电仓为机器狗提供昼夜不间歇工作的动力，具有实时监测、反馈、预警的技术优势。

Description

一种基于仿生机器狗的堤防险情巡查成套技术装备
技术领域
本发明属于堤防险情巡查技术领域，具体涉及一种基于仿生机器狗的堤防险情巡查成套技术装备。
背景技术
现今，堤防隐患巡查消耗了大量的人力物力财力，但仍存在漏查或无法查明的堤防内部隐患病害。通过人工拉网式巡查仅仅只能实现堤防表面信息反馈，结合抽样式机械钻探也只是进行部分边坡地底渗漏排查，且对地破坏性高、效率低；少数堤防采用了人工进行物理无损探测，但探测范围小无法实现堤防深处的隐患排查。目前，先进的堤防巡检采用了基于红外热成像的无人机技术，但仍存在距离太远数据处理有误差、工作时间受限、任务单一只能进行监测等问题。
发明内容
本发明为了解决上述堤防巡检存在的问题，进而提供一种基于仿生机器狗的堤防险情巡查成套技术装备，它结合智能机器人技术，能够加强堤防险情巡查力度，具有多种探查手段排查地底隐患，利用网络云技术实现终端数据处理和实时检测的功能。
本发明所采取的技术方案是：一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：包括四足仿生机器狗以及管理***；所述管理***包括数据层、网络层、应用层和决策层；所述四足仿生机器狗上集成多种探测***，用于获取堤防处的数据，并将数据传入数据层，数据层通过网络层将数据输入深度学习卷积神经网络，深度学习卷积神经网络进行病害特征分析，识别应用层中的堤防隐患病害，并由决策层进行堤防边坡安全的预警决策。
本发明与现有技术相比具有以下有益效果：
1、本发明基于四足仿生机器狗集成多种对地探查传感器，利用机器狗灵活、越野性能强的结构优势应用于复杂环境下堤防巡检，将极大程度上扩大堤防巡查范围、减少人为巡检可能面临的危险。
2.本发明基于四足仿生机器狗形成的堤防险情巡查成套技术装备具有较强的野外适应能力，通过编队协作扩大了巡检范围、减小了人为疏忽漏查的可能性。
3.本发明建立了后台终端对多源多尺度多维度异构宏数据进行管理，利用点云激光雷达、红外热成像和电磁回波成像三种技术，实现了地质表征现象可视化和地下潜在病害预警相结合的独特功能。
4.本发明集成双目立体视觉、点云激光雷达和红外热成像三种技术实现机器狗昼夜工作不间断，在一定范围内设置充电仓为机器狗提供昼夜不间歇工作的动力，具有实时监测、反馈、预警的技术优势。
附图说明
图1是本发明结构框图；
图2是本发明流程框图；
图3是本发明多种探测***安装位置示意图；
其中：1、双目立体视觉传感器；2、红外热成像传感器；3、点云激光雷达传感器；4、储备电源；5、伸缩机构。
具体实施方式
为了更好地了解本发明的目的、结构及功能，下面结合附图，对本发明的做进一步详细的描述。
参照图1～3，本发明的一种基于仿生机器狗的堤防险情巡查成套技术装备，包括四足仿生机器狗以及管理***；所述管理***包括数据层、网络层、应用层和决策层；所述四足仿生机器狗上集成多种探测***，用于获取堤防处的数据，并将数据传入数据层，数据层通过网络层将数据输入深度学习卷积神经网络，深度学习卷积神经网络进行病害特征分析，识别应用层中的堤防隐患病害，并由决策层进行堤防边坡安全的预警决策。
所述多种探测***包括：
双目立体视觉***用于获取图像数据，四足仿生机器狗通过双目立体视觉***实现极端危险环境下的自主规划巡检路线、自主避障、自主复位和编队巡检；
高密度激光点云成像***用于获取电磁回波数据，四足仿生机器狗利用电磁回波成像技术获得堤防边坡地下土层变化特征，结合后台终端储备的堤防边坡数据库判断是否存在病害；
高密度激光点云成像***用于获取激光点云数据，
红外热成像***用于获取温差数据，红外热成像***和高密度激光点云成像***能够使四足仿生机器狗满足全天候昼夜巡检工作。
四足仿生机器狗上建立机械电子与信息融合的多源智慧感知***，实现快速实时监测和预警。
四足仿生机器狗上集成多种对地探查传感器，具体为：
双目立体视觉***中的双目立体视觉传感器1安装在四足仿生机器狗的头部前端，并在四足仿生机器狗的背部上安装高密度激光点云成像***中的点云激光雷达传感器3、红外热成像***的红外热成像传感器2以及外置储备电源4，由储备电源4为四足仿生机器狗和管理***提供电力支持，所述四足仿生机器狗的腹部安装有内腔，并在内腔安装有能够向下探出的伸缩机构5，所述伸缩机构5上安装有自适应探地雷达装置和高密度激光点云成像***的电磁波成像传感器。
伸缩机构5为现有技术，能够伸缩的机构如图中所示的剪叉升降以及油缸、气缸等均可。
四足仿生机器狗在面临即将发生的险情时，将基于三维环境感知以及安全监控模型进行紧急避险，其中包括双目视觉技术融合雷达扫描进行环境感知和探测、利用标定匹配重建等技术对环境进行三维重建、基于蚁群优化算法做出避障路径规划。
为即时应对机器狗遇险后跌倒的问题，管理***中搭建了DNN框架、学习执行器网络和训练控制器，通过设置机器人姿态及建立机器人跌倒初始位置模型，搭建DNN框架，输出关节执行动作，模拟输出位置轨迹并判断是否超出空间可用范围，如果未超出空间范围，通过训练的控制器控制底层运动执行***执行跌倒后自主复位。
四足仿生机器狗的数量设置为多个，并设立领航机器狗和多个跟随机器狗进行编队协作巡检，在管理***中建立Leader-fllower队形控制框架和马丹妮模糊模型逻辑控制器实现相对协作定位。
基于双目立体视觉技术结合红外热成像技术和激光雷达光速测距技术，保证了四足仿生机器狗不受光照影响实现昼夜不间断工作。为达到四足仿生机器狗实时检测的目的，在四足仿生机器狗巡检范围内设有充电仓为机器狗提供足够的动力。
所述数据层为多源异构数据库，由视觉图像数据库、电磁回波数据库、激光点云数据库以及温差数据库构成。
管理***的台终端将基于多源多尺度多维度异构宏数据进行管理，对海量数据资源进行综合、归纳和抽象的表征，形成一个独立于具体硬件环境和宏数据库管理***的概念模型，实现双向数据交换、保证数据时效性。
所述网络层基于5G云技术构建，由多种传感器、PLC和数据处理***、数据可视化***、报警***之间进行数据实时传输。
网络层基于5G云技术构建堤防、边坡工程主要构筑物的多源海量数据实时汇聚、信息共享和决策协同方法，形成物联网环境下的立体化异构数据实时传输。
建立堤防、边坡性态与环境状态的“推演-反馈-自学习”动态耦合机制，通过终端多源异构数据库推演物理规律，演化形成人工智能机器狗。
所述决策层为多源异构数据管理***，由数据管理单元、监测预警单元、决策支持单元、应急处理单元、数据汇聚单元和数据分享单元构成。
将深度学习的神经网络作为堤坝渗透图像处理模块的基础框架，结合红外热成像采集和海量数据库进行病害特征分析，判断是否存在渗漏水现象；同时基于点云深度学习网络建立PointNet框架，对滑塌、鼓胀等表观病害特征进行深度学习，实现点云自动识别预测；利用三维点云对堤防边坡工程建立数字高程地图，实时监测堤防边坡变形和强降雨洪涝发生的地质危害；采用高频电磁回波技术进行对地耦合，排除堤防边坡地下可能出现或已经出现的潜在病害，实现堤防边坡安全的预警决策。
可以理解，本发明是通过一些实施例进行描述的，本领域技术人员知悉的，在不脱离本发明的精神和范围的情况下，可以对这些特征和实施例进行各种改变或等效替换。另外，在本发明的教导下，可以对这些特征和实施例进行修改以适应具体的情况及材料而不会脱离本发明的精神和范围。因此，本发明不受此处所公开的具体实施例的限制，所有落入本申请的权利要求范围内的实施例都属于本发明所保护的范围内。

Claims (8)

1.一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：包括四足仿生机器狗以及管理***；所述管理***包括数据层、网络层、应用层和决策层；所述四足仿生机器狗上集成多种探测***，用于获取堤防处的数据，并将数据传入数据层，数据层通过网络层将数据输入深度学习卷积神经网络，深度学习卷积神经网络进行病害特征分析，识别应用层中的堤防隐患病害，并由决策层进行堤防边坡安全的预警决策。
2.根据权利要求1所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述多种探测***包括：
双目立体视觉***用于获取图像数据，四足仿生机器狗通过双目立体视觉***实现极端危险环境下的自主规划巡检路线、自主避障、自主复位和编队巡检；
高密度激光点云成像***用于获取电磁回波数据，四足仿生机器狗利用电磁回波成像技术获得堤防边坡地下土层变化特征，结合后台终端储备的堤防边坡数据库判断是否存在病害；
高密度激光点云成像***用于获取激光点云数据，
红外热成像***用于获取温差数据，红外热成像***和高密度激光点云成像***能够使四足仿生机器狗满足全天候昼夜巡检工作。
3.根据权利要求2所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述双目立体视觉***中的双目立体视觉传感器(1)安装在四足仿生机器狗的头部前端，并在四足仿生机器狗的背部上安装高密度激光点云成像***中的点云激光雷达传感器(3)、红外热成像***的红外热成像传感器(2)以及外置储备电源(4)，由储备电源(4)为四足仿生机器狗和管理***提供电力支持，所述四足仿生机器狗的腹部安装有内腔，并在内腔安装有能够向下探出的伸缩机构(5)，所述伸缩机构(5)上安装有自适应探地雷达装置和高密度激光点云成像***的电磁波成像传感器。
4.根据权利要求3所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述管理***中搭建了DNN框架、学习执行器网络和训练控制器，通过设置机器人姿态及建立机器人跌倒初始位置模型，搭建DNN框架，输出关节执行动作，模拟输出位置轨迹并判断是否超出空间可用范围，如果未超出空间范围，通过训练的控制器控制底层运动执行***执行跌倒后自主复位。
5.根据权利要求4所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述四足仿生机器狗的数量设置为多个，并设立领航机器狗和多个跟随机器狗进行编队协作巡检，在管理***中建立Leader-fllower队形控制框架和马丹妮模糊模型逻辑控制器实现相对协作定位。
6.根据权利要求1所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述数据层为多源异构数据库，由视觉图像数据库、电磁回波数据库、激光点云数据库以及温差数据库构成。
7.根据权利要求6所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述网络层基于5G云技术构建，由多种传感器、PLC和数据处理***、数据可视化***、报警***之间进行数据实时传输。
8.根据权利要求6所述的一种基于仿生机器狗的堤防险情巡查成套技术装备，其特征在于：所述决策层为多源异构数据管理***，由数据管理单元、监测预警单元、决策支持单元、应急处理单元、数据汇聚单元和数据分享单元构成。
CN202210540575.7A 2022-05-17 2022-05-17 一种基于仿生机器狗的堤防险情巡查成套技术装备 Active CN114997359B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210540575.7A CN114997359B (zh) 2022-05-17 2022-05-17 一种基于仿生机器狗的堤防险情巡查成套技术装备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210540575.7A CN114997359B (zh) 2022-05-17 2022-05-17 一种基于仿生机器狗的堤防险情巡查成套技术装备

Publications (2)

Publication Number Publication Date
CN114997359A true CN114997359A (zh) 2022-09-02
CN114997359B CN114997359B (zh) 2024-06-28

Family

ID=83026451

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210540575.7A Active CN114997359B (zh) 2022-05-17 2022-05-17 一种基于仿生机器狗的堤防险情巡查成套技术装备

Country Status (1)

Country Link
CN (1) CN114997359B (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115564838A (zh) * 2022-12-06 2023-01-03 深圳联和智慧科技有限公司 基于无人机的河堤检测侵占定位方法及***
CN115793093A (zh) * 2023-02-02 2023-03-14 水利部交通运输部国家能源局南京水利科学研究院 堤坝隐伏病险诊断空地一体化装备
CN116690612A (zh) * 2023-08-07 2023-09-05 广东电网有限责任公司东莞供电局 一种具有自动充电功能的巡视机器人
CN118163880A (zh) * 2024-05-14 2024-06-11 中国海洋大学 一种建筑物病害检测四足机器人及检测方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112512887A (zh) * 2020-07-21 2021-03-16 华为技术有限公司 一种行驶决策选择方法以及装置
CN112721931A (zh) * 2021-01-18 2021-04-30 智马达汽车有限公司 一种车辆会车方法、装置、设备及存储介质
CN214912972U (zh) * 2021-01-22 2021-11-30 福州大学 搭载于机械狗的ai的计算机视觉消防监测和识别***
CN113821941A (zh) * 2021-11-22 2021-12-21 武汉华中思能科技有限公司 巡检仿真验证装置
CN113887376A (zh) * 2021-09-27 2022-01-04 中汽创智科技有限公司 目标检测方法、装置、介质及设备
WO2022021739A1 (zh) * 2020-07-30 2022-02-03 国网智能科技股份有限公司 一种语义智能变电站机器人仿人巡视作业方法及***
CN114255250A (zh) * 2021-12-28 2022-03-29 黄河勘测规划设计研究院有限公司 基于深度学习的河防工程边坡坍塌检测方法

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112512887A (zh) * 2020-07-21 2021-03-16 华为技术有限公司 一种行驶决策选择方法以及装置
WO2022021739A1 (zh) * 2020-07-30 2022-02-03 国网智能科技股份有限公司 一种语义智能变电站机器人仿人巡视作业方法及***
CN112721931A (zh) * 2021-01-18 2021-04-30 智马达汽车有限公司 一种车辆会车方法、装置、设备及存储介质
CN214912972U (zh) * 2021-01-22 2021-11-30 福州大学 搭载于机械狗的ai的计算机视觉消防监测和识别***
CN113887376A (zh) * 2021-09-27 2022-01-04 中汽创智科技有限公司 目标检测方法、装置、介质及设备
CN113821941A (zh) * 2021-11-22 2021-12-21 武汉华中思能科技有限公司 巡检仿真验证装置
CN114255250A (zh) * 2021-12-28 2022-03-29 黄河勘测规划设计研究院有限公司 基于深度学习的河防工程边坡坍塌检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
TANG LIANG: ""hyperspectral images classification with gabor filtering and convolutional neural network"", 《IEEE GEOSCIENCE AND REMOTE SENSING LETTERS》, 9 November 2017 (2017-11-09) *
ZHANGJING WANG: ""multi sensor fusion in automated driving a survey"", 《IEEE ACCESS》, 26 December 2019 (2019-12-26) *

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115564838A (zh) * 2022-12-06 2023-01-03 深圳联和智慧科技有限公司 基于无人机的河堤检测侵占定位方法及***
CN115564838B (zh) * 2022-12-06 2023-03-24 深圳联和智慧科技有限公司 基于无人机的河堤检测侵占定位方法及***
CN115793093A (zh) * 2023-02-02 2023-03-14 水利部交通运输部国家能源局南京水利科学研究院 堤坝隐伏病险诊断空地一体化装备
CN116690612A (zh) * 2023-08-07 2023-09-05 广东电网有限责任公司东莞供电局 一种具有自动充电功能的巡视机器人
CN116690612B (zh) * 2023-08-07 2023-10-20 广东电网有限责任公司东莞供电局 一种具有自动充电功能的巡视机器人
CN118163880A (zh) * 2024-05-14 2024-06-11 中国海洋大学 一种建筑物病害检测四足机器人及检测方法

Also Published As

Publication number Publication date
CN114997359B (zh) 2024-06-28

Similar Documents

Publication Publication Date Title
CN114997359A (zh) 一种基于仿生机器狗的堤防险情巡查成套技术装备
CN103869374B (zh) 航空森林清查***
Khan et al. UAV-based traffic analysis: A universal guiding framework based on literature survey
CN109760837B (zh) 一种电缆沟与隧道巡检无人机***
CN103364408B (zh) 一种采用水下机器人***对水工混凝土结构水下表面裂缝检测的方法
CN112098326B (zh) 针对桥梁病害的自动检测方法和***
US20090018712A1 (en) Method and system for remotely monitoring and controlling a vehicle via a virtual environment
CN111624641A (zh) 一种防爆型油库区智能巡检机器人
CN110673628B (zh) 一种复合翼无人机油气管线巡检方法
CN114092537A (zh) 一种变电站电力无人机自动巡检方法及装置
CN109901618A (zh) 电力巡线***及方法
CN108469817A (zh) 基于fpga和信息融合的无人船避障控制***
CN115793649A (zh) 一种电缆沟自动巡检装置及巡检方法
CN115743540A (zh) 基于多源信息融合的隧道全息巡检无人机装置及方法
Prabu et al. Drone networks and monitoring systems in smart cities
Aldana-Rodríguez et al. Use of unmanned aircraft systems for bridge inspection: a review
Ding et al. Electric power line patrol operation based on vision and laser SLAM fusion perception
CN116352722A (zh) 多传感器融合的矿山巡检救援机器人及其控制方法
CN114844925B (zh) 无人矿山全域智能监测***
CN114670170A (zh) 一种煤矿灾后救援机器人及其定位和通讯方法
CN108196576A (zh) 一种基于机器视觉的四旋翼飞行机器人目标锁定跟踪***
Chen Design of trajectory planning and 3D modeling for crane inspection based on UAV
Petkova Deploying drones for autonomous detection of pavement distress
Gifford et al. Mobile robots for polar remote sensing
KR102603964B1 (ko) 댐유역 및 수자원시설물의 상시 자동점검을 위한 인공지능드론 무인스테이션 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant