CN114924573A - 一种移动机器人 - Google Patents

一种移动机器人 Download PDF

Info

Publication number
CN114924573A
CN114924573A CN202210739327.5A CN202210739327A CN114924573A CN 114924573 A CN114924573 A CN 114924573A CN 202210739327 A CN202210739327 A CN 202210739327A CN 114924573 A CN114924573 A CN 114924573A
Authority
CN
China
Prior art keywords
robot
module
dexterous hand
depth camera
control module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210739327.5A
Other languages
English (en)
Inventor
杨传凯
师一卿
李旭
刘树桦
张晓兰
任双赞
刘晶
郭歌
江涛
郝东新
杨昌建
葛晨阳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
National Network Xi'an Environmental Protection Technology Center Co ltd
Shaanxi Zhongshi Electric Power Technology Co ltd
Xian Jiaotong University
Electric Power Research Institute of State Grid Shaanxi Electric Power Co Ltd
Original Assignee
National Network Xi'an Environmental Protection Technology Center Co ltd
Shaanxi Zhongshi Electric Power Technology Co ltd
Xian Jiaotong University
Electric Power Research Institute of State Grid Shaanxi Electric Power Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by National Network Xi'an Environmental Protection Technology Center Co ltd, Shaanxi Zhongshi Electric Power Technology Co ltd, Xian Jiaotong University, Electric Power Research Institute of State Grid Shaanxi Electric Power Co Ltd filed Critical National Network Xi'an Environmental Protection Technology Center Co ltd
Priority to CN202210739327.5A priority Critical patent/CN114924573A/zh
Publication of CN114924573A publication Critical patent/CN114924573A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0234Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons
    • G05D1/0236Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using optical markers or beacons in combination with a laser
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0214Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory in accordance with safety or protection criteria, e.g. avoiding hazardous areas
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0212Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory
    • G05D1/0221Control of position or course in two dimensions specially adapted to land vehicles with means for defining a desired trajectory involving a learning process
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0238Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors
    • G05D1/024Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using obstacle or wall sensors in combination with a laser
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0251Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0257Control of position or course in two dimensions specially adapted to land vehicles using a radar
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05DSYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02Control of position or course in two dimensions
    • G05D1/021Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0276Control of position or course in two dimensions specially adapted to land vehicles using signals provided by a source external to the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Electromagnetism (AREA)
  • Optics & Photonics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Multimedia (AREA)
  • Manipulator (AREA)

Abstract

本公开揭示了一种移动机器人,包括:移动平台,移动平台上搭载有3D视觉模块、主控模块和灵巧手拾取模块,其中,所述3D视觉模块用于扫描机器人行进过程中的路面信息以及用于采集机器人周边环境信息;所述主控模块用于根据所述3D视觉模块采集的路面信息控制机器人自动避障,以及根据周边环境信息控制灵巧手拾取模块对目标物进行拾取。

Description

一种移动机器人
技术领域
本公开属于移动机器人技术领域,具体涉及一种移动机器人。
背景技术
随着机器人、人工智能技术的发展,使得智能移动机器人代替传统人工巡检成为可能,巡检机器人在工业、电力、安防巡逻等领域都有着广泛的用途。但不同行业对移动机器人用途性能、搭载传感器类型等提出了不同的需求。比如在电力行业,变电站巡检机器人代替传统人工巡检已成为趋势,智能巡检机器人逐渐代替人工完成表计读数、红外测温等巡检任务,通过在线巡检降低运维人员的负担和工作强度,提升了变电站设备巡检效率和安全性,使运维人员及时发现设备不良的运行状况,从而保障变电站安全可靠运行。多自由度的机械臂和灵巧手在工业装配、消费电子自动化领域有着广泛用途,其与移动机器人的结合用于变电站智能巡检,使得传统巡检任务从被动观测转为主动式任务实施成为可能,比如特定目标物体的识别、抓取,拾捡线缆,开关操作等特定任务。
发明内容
针对现有技术中的不足,本公开的目的在于提供一种移动机器人,该机器人具备类似人的足、手、眼等模块,适用于工业、电力等多个行业的无人化、智能化业务实现。
为实现上述目的,本公开提供以下技术方案:
一种移动机器人,包括:
移动平台;
移动平台上搭载有3D视觉模块、主控模块和灵巧手拾取模块,其中,
所述3D视觉模块用于扫描机器人行进过程中的路面信息以及用于采集机器人周边环境信息;
所述主控模块用于根据所述3D视觉模块采集的路面信息控制机器人自动避障,以及根据周边环境信息控制灵巧手拾取模块对目标物进行拾取。
优选的,所述3D视觉模块包括激光雷达和多路广角RGB摄像头。
优选的,所述灵巧手拾取模块包括六自由度机械臂,六自由度机械臂上设置有灵巧手和RGBD深度相机。
优选的,所述灵巧手采用多自由度的五指灵巧手。
优选的,所述RGBD深度相机包括单目结构光深度相机、双目结构光深度相机和ToF深度相机中的任意一种。
优选的,所述主控模块采用NPU板。
优选的,所述机器人还包括通讯模块。
与现有技术相比,本公开带来的有益效果为:本公开所述机器人具备类似人类的足、手、眼、脑、通信功能模块,结合嵌入式AI算法,适用于工业、电力等多个行业的无人化、智能化业务实现。
附图说明
图1是本公开一个实施例提供的一种移动机器人的结构示意图;
图2是本公开一个实施例提供的基于四摄像头的360°环视模块结构的俯视图;
图3是本公开另一个实施例提供的主控模块的接口示意图;
附图中标记说明如下:
1、移动平台;2、3D视觉模块;3、主控模块;4、六自由度机械臂;5、手眼***-RGBD深度相机;6、灵巧手;7、机械臂控制器;8、通讯模块。
具体实施方式
下面将参照附图1至图3详细地描述本公开的具体实施例。虽然附图中显示了本公开的具体实施例,然而应当理解,可以通过各种形式实现本公开而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
需要说明的是,在说明书及权利要求当中使用了某些词汇来指称特定组件。本领域技术人员应可以理解,技术人员可能会用不同名词来称呼同一个组件。本说明书及权利要求并不以名词的差异作为区分组件的方式,而是以组件在功能上的差异作为区分的准则。如在通篇说明书及权利要求当中所提及的“包含”或“包括”为一开放式用语,故应解释成“包含但不限定于”。说明书后续描述为实施本公开的较佳实施方式,然所述描述乃以说明书的一般原则为目的,并非用以限定本公开的范围。本公开的保护范围当视所附权利要求所界定者为准。
为便于对本公开实施例的理解,下面将结合附图以具体实施例为例做进一步的解释说明,且各个附图并不构成对本公开实施例的限定。
一个实施例中,如图1所示,本公开提供一种移动机器人,包括:
移动平台1,
移动平台1上搭载有3D视觉模块2、主控模块3和灵巧手拾取模块,其中,
所述3D视觉模块2用于扫描机器人行进过程中的路面信息以及用于采集机器人周边环境信息;
所述主控模块3用于根据所述3D视觉模块2采集的路面信息控制机器人自动避障,以及根据周边环境信息控制灵巧手拾取模块对目标物进行拾取。
本实施例中,移动平台内设置有110~200V交流电源,输出为多路直流电源,比如12V、24V、48V等,可为其它模块提供一定功率的电源;移动平台内还设置有电机,可控制移动平台底端的车轮进行移动或转向。
另一个实施例中,所述3D视觉模块2包括激光雷达和多路广角RGB摄像头。
本实施例中,激光雷达可采用4线、8线、16线、32线、64线、128线激光雷达或ToF面激光雷达,可对路面实时扫描并生成路面的三维点云信息。RGB摄像头则实时对机器人的周边环境进行拍照,采集地面图像。示例性的,如图2所示,4个摄像头前后左右对称分布,每个RGB摄像头与相邻的两个RGB摄像头都有一定的视场重叠,可保证图像采集无死角,无遗漏。
另一个实施例中,所述灵巧手拾取模块包括六自由度机械臂4,六自由度机械臂4连接有机械臂控制器7,且六自由度机械臂4上设置有灵巧手6和RGBD深度相机5。
本实施例中,RGBD深度相机的USB信号线可通过六自由度机械臂的各轴内空间走线,使得在运动过程中不会出现USB信号线缠绕的情况。RGBD深度相机可实时获取目标物的RGB图像和depth深度图像并传输给主控模块,主控模块根据图像则可进行目标物的AI识别、实时计算目标物的三维坐标等一系列操作。
另一个实施例中,所述灵巧手采用多自由度的五指灵巧手。
本实施例中,灵巧手模拟人手进行设计,包括5个手指,每个手指包括2~4个运动关节,每个关节有2至3个自由度,并且手指末端内嵌高精度力反馈器,可以类似人手一样抓取物品。相比现有的机械手,本实施例给出的灵巧手具有更高的抓取灵活度,可适用于对不同形状目标物的抓取,特别适用于一些具有不规则形状的现有机械手难以正常抓取的目标物,避免了人工参与,从而提高了巡检效率以及最大程度保证作业人员的安全。
另一个实施例中,所述RGBD深度相机包括单目结构光深度相机、双目结构光深度相机和ToF深度相机中的任意一种。
另一个实施例中,所述主控模块3采用NPU板。
本实施例中,如图3所示,NPU板通过CAN总线或RS485串口通信连接3D视觉模块。其可对由RGB摄像头拍摄的RGB图像进行鱼眼校正、合成拼接、视角转换计算,以生成360°环视图和机器人四周的俯视图,并通过与由激光雷达获取的三维点云数据融合,从而为机器人模块提供3D视觉导航功能和自动避障功能。
此外,NPU板还通过USB接口连接灵巧手拾取模块,RGBD深度相机可实时获取点RGB图像以及目标物深度图像,其根据图像进行目标物体AI识别和实时计算目标物三维坐标,并控制机械臂控制器驱动六自由度机械臂以及灵巧手对目标物实施拾取等相应操作。
NPU板还通过CAN总线或RS485串口通信连接移动平台,其可实时读取电源的状态信息,从而对移动平台的移动状态做出相应控制。
另一个实施例中,所述机器人还包括通讯模块8。
本实施例中,通讯模块采用5G路由器,具有延时短、带宽大的特点,其通过无线wifi或有线以太网接口连接至主控模块。一方面,该路由器与远程操控模块进行通信,包括实时图像数据(点云、环视图、俯视图、灵巧手上的手眼***RGBD数据)和机器人状态数据的上传、控制指令的接收下达;另一方面,与机器人模块中的主控模块进行通信交互,使得远程操控模块能够实时在线观察并操控移动机器人模块。
以上应用了具体实施例对本公开进行了阐述,只是用于帮助理解本公开,并不用于限制本公开。任何熟悉该技术的技术人员在本公开所揭示的技术范围内的局部修改或替换,都应涵盖在本公开的范围之内。

Claims (7)

1.一种移动机器人,包括:
移动平台;
移动平台上搭载有3D视觉模块、主控模块和灵巧手拾取模块,其中,
所述3D视觉模块用于扫描机器人行进过程中的路面信息以及用于采集机器人周边环境信息;
所述主控模块用于根据所述3D视觉模块采集的路面信息控制机器人自动避障,以及根据周边环境信息控制灵巧手拾取模块对目标物进行拾取。
2.根据权利要求1所述的机器人,其中,优选的,所述3D视觉模块包括激光雷达和多路广角RGB摄像头。
3.根据权利要求1所述的机器人,其中,所述灵巧手拾取模块包括六自由度机械臂,六自由度机械臂上设置有灵巧手和RGBD深度相机。
4.根据权利要求1所述的机器人,其中,所述灵巧手采用多自由度的五指灵巧手。
5.根据权利要求1所述的机器人,其中,所述RGBD深度相机包括单目结构光深度相机、双目结构光深度相机和ToF深度相机中的任意一种。
6.根据权利要求1所述的机器人,其中,所述主控模块采用NPU板。
7.根据权利要求1所述的机器人,其中,所述机器人还包括通讯模块。
CN202210739327.5A 2022-06-27 2022-06-27 一种移动机器人 Pending CN114924573A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210739327.5A CN114924573A (zh) 2022-06-27 2022-06-27 一种移动机器人

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210739327.5A CN114924573A (zh) 2022-06-27 2022-06-27 一种移动机器人

Publications (1)

Publication Number Publication Date
CN114924573A true CN114924573A (zh) 2022-08-19

Family

ID=82814188

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210739327.5A Pending CN114924573A (zh) 2022-06-27 2022-06-27 一种移动机器人

Country Status (1)

Country Link
CN (1) CN114924573A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109333549A (zh) * 2018-10-25 2019-02-15 湖南大学 一种基于机器视觉的乒乓球拾取移动机器人及控制方法
CN109940620A (zh) * 2019-04-15 2019-06-28 于傲泽 一种智能探索机器人及其控制方法
CN110161047A (zh) * 2019-06-14 2019-08-23 汕头大学 一种路桥裂缝检测与修复一体化机器人
CN111823277A (zh) * 2020-07-24 2020-10-27 上海大学 一种基于机器视觉的物体抓取平台及方法
CN113829357A (zh) * 2021-10-25 2021-12-24 香港中文大学(深圳) 机器人手臂遥操作方法、装置、***及介质

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109333549A (zh) * 2018-10-25 2019-02-15 湖南大学 一种基于机器视觉的乒乓球拾取移动机器人及控制方法
CN109940620A (zh) * 2019-04-15 2019-06-28 于傲泽 一种智能探索机器人及其控制方法
CN110161047A (zh) * 2019-06-14 2019-08-23 汕头大学 一种路桥裂缝检测与修复一体化机器人
CN111823277A (zh) * 2020-07-24 2020-10-27 上海大学 一种基于机器视觉的物体抓取平台及方法
CN113829357A (zh) * 2021-10-25 2021-12-24 香港中文大学(深圳) 机器人手臂遥操作方法、装置、***及介质

Similar Documents

Publication Publication Date Title
CN111958594B (zh) 一种语义智能变电站巡视作业机器人***及方法
Zhao et al. Dual-arm robot design and testing for harvesting tomato in greenhouse
CN106493708B (zh) 一种基于双机械臂和辅助臂的带电作业机器人控制***
CN111906784A (zh) 一种基于机器视觉引导的咽拭子双臂采样机器人及采样方法
CN110977964A (zh) 一种电厂设备运行微漏探测用智能巡检机器人及检测方法
CN111687885B (zh) 一种用于无序零件装配的智能双臂机器人***及视觉引导方法
CN108582031A (zh) 一种基于力反馈主从控制的带电作业机器人支接引线搭接方法
CN106737862B (zh) 一种带电作业机器人数据通信***
CN111624994A (zh) 一种基于5g通信的机器人巡检方法
CN111015681A (zh) 信通机房巡检机器人***
CN114277725A (zh) 一种机场跑道目标异物处置设备
CN109612525A (zh) 环境监测机器人及其自动巡检方法
CN212515475U (zh) 一种输变电站智能巡检机器人自主导航避障***
CN110696012B (zh) 配电间智能机器人***
CN109676618A (zh) 安防巡检机器人及其自动巡检方法
CN111432991A (zh) 机器人***及使用其制作物品的方法
Guo et al. Design and control of the open apple-picking-robot manipulator
CN114924573A (zh) 一种移动机器人
CN209755210U (zh) 基于双目视觉的机械手定位***
US11656923B2 (en) Systems and methods for inter-process communication within a robot
CN116360447A (zh) 一种巡检机器人***及其控制方法
CN115194774A (zh) 一种基于多目视觉的双机械臂抓握***控制方法
CN112944287B (zh) 一种具有主动光源的空中修补***
CN213182424U (zh) 一种基于openmv的视觉伺服移动机器人***
WO2022115816A1 (en) Fusing a static large field of view and high fidelity moveable sensors for a robot platform

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination