CN110174903B - 用于在环境内控制可移动物体的***和方法 - Google Patents
用于在环境内控制可移动物体的***和方法 Download PDFInfo
- Publication number
- CN110174903B CN110174903B CN201910354911.7A CN201910354911A CN110174903B CN 110174903 B CN110174903 B CN 110174903B CN 201910354911 A CN201910354911 A CN 201910354911A CN 110174903 B CN110174903 B CN 110174903B
- Authority
- CN
- China
- Prior art keywords
- environment
- movable object
- uav
- sensor
- sensors
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 133
- 238000004891 communication Methods 0.000 claims description 46
- 230000004927 fusion Effects 0.000 claims description 35
- 230000000007 visual effect Effects 0.000 claims description 21
- 238000001914 filtration Methods 0.000 claims description 8
- 230000007613 environmental effect Effects 0.000 description 92
- 230000033001 locomotion Effects 0.000 description 40
- 230000007246 mechanism Effects 0.000 description 24
- 238000004422 calculation algorithm Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 23
- 230000006870 function Effects 0.000 description 22
- 230000001133 acceleration Effects 0.000 description 15
- 238000013507 mapping Methods 0.000 description 15
- 238000001514 detection method Methods 0.000 description 10
- 239000011159 matrix material Substances 0.000 description 9
- 238000013519 translation Methods 0.000 description 9
- 230000014616 translation Effects 0.000 description 9
- 241001465754 Metazoa Species 0.000 description 6
- 238000010276 construction Methods 0.000 description 6
- 238000010168 coupling process Methods 0.000 description 6
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 6
- 230000004888 barrier function Effects 0.000 description 5
- 230000008878 coupling Effects 0.000 description 5
- 238000005859 coupling reaction Methods 0.000 description 5
- 238000005259 measurement Methods 0.000 description 5
- 230000009466 transformation Effects 0.000 description 5
- 238000002604 ultrasonography Methods 0.000 description 5
- 238000013459 approach Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000005265 energy consumption Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 238000007500 overflow downdraw method Methods 0.000 description 4
- 241000271566 Aves Species 0.000 description 3
- 241000282412 Homo Species 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 241000196324 Embryophyta Species 0.000 description 2
- 230000002411 adverse Effects 0.000 description 2
- 239000000969 carrier Substances 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 238000005286 illumination Methods 0.000 description 2
- 230000007257 malfunction Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 239000000126 substance Substances 0.000 description 2
- RZVHIXYEVGDQDX-UHFFFAOYSA-N 9,10-anthraquinone Chemical compound C1=CC=C2C(=O)C3=CC=CC=C3C(=O)C2=C1 RZVHIXYEVGDQDX-UHFFFAOYSA-N 0.000 description 1
- 241000283690 Bos taurus Species 0.000 description 1
- 241000282472 Canis lupus familiaris Species 0.000 description 1
- 241001125840 Coryphaenidae Species 0.000 description 1
- 241000283086 Equidae Species 0.000 description 1
- 241000282326 Felis catus Species 0.000 description 1
- 241000238631 Hexapoda Species 0.000 description 1
- 241001494479 Pecora Species 0.000 description 1
- 241000283984 Rodentia Species 0.000 description 1
- 241000282887 Suidae Species 0.000 description 1
- 230000009471 action Effects 0.000 description 1
- 239000000853 adhesive Substances 0.000 description 1
- 230000001070 adhesive effect Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000006073 displacement reaction Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 238000010348 incorporation Methods 0.000 description 1
- 238000007373 indentation Methods 0.000 description 1
- 238000003331 infrared imaging Methods 0.000 description 1
- 230000004807 localization Effects 0.000 description 1
- 238000010801 machine learning Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000000691 measurement method Methods 0.000 description 1
- 230000006386 memory function Effects 0.000 description 1
- 239000002245 particle Substances 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000002310 reflectometry Methods 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 239000000779 smoke Substances 0.000 description 1
- 230000000087 stabilizing effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000003466 welding Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
- G05D1/102—Simultaneous control of position or course in three dimensions specially adapted for aircraft specially adapted for vertical take-off of aircraft
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/38—Electronic maps specially adapted for navigation; Updating thereof
- G01C21/3804—Creation or updating of map data
- G01C21/3833—Creation or updating of map data characterised by the source of data
- G01C21/3848—Data obtained from both position sensors and additional sensors
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/20—Control system inputs
- G05D1/22—Command input arrangements
- G05D1/228—Command input arrangements located on-board unmanned vehicles
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/60—Intended control result
- G05D1/652—Take-off
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2201/00—UAVs characterised by their flight controls
- B64U2201/10—UAVs characterised by their flight controls autonomous, i.e. by navigating independently from ground or air stations, e.g. by using inertial navigation systems [INS]
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B64—AIRCRAFT; AVIATION; COSMONAUTICS
- B64U—UNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
- B64U2201/00—UAVs characterised by their flight controls
- B64U2201/20—Remote controls
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
- G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
- G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
- G01C21/28—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S19/00—Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
- G01S19/38—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
- G01S19/39—Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
- G01S19/42—Determining position
Landscapes
- Engineering & Computer Science (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Aviation & Aerospace Engineering (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Artificial Intelligence (AREA)
- Evolutionary Computation (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Traffic Control Systems (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Navigation (AREA)
- Computer Networks & Wireless Communication (AREA)
Abstract
本发明提供了用于在环境内控制可移动物体的***和方法。在一方面,一种方法可以包括:生成第一信号以使所述可移动物体在所述环境内航行;使用由所述可移动物体携带的多个传感器中的至少一个传感器来确定所述可移动物体的当前位置;接收返航至返航位置的指令;以及生成第二信号以使所述可移动物体返航至所述返航位置。
Description
背景技术
诸如无人飞行器(UAV)等无人载具可用于在多种环境下执行监视、侦查和勘探任务以供军事和民用应用。UAV可由远程用户手动控制,或者可以按半自主或全自主的方式操作。这样的UAV可以包括被配置用于从周围环境收集数据的传感器。
在一些情况下,用于获取环境数据的现有方法可能并非最优。例如,环境数据的准确度可能基于用以收集数据的特定传感器类型的能力而受到限制。不准确的环境数据可能会对UAV功能产生不利影响。
发明内容
本文所公开的实施方式提供了用于在环境内控制诸如UAV等可移动物体的改进的方法。在许多实施方式中,UAV包含多种不同的传感器类型,用于收集关于周围环境的信息。从所述每种不同类型的传感器获取的数据可以组合,以便生成所述周围环境的表示,诸如二维(2D)或三维(3D)环境地图,并且所述数据还可以用于促进导航、物体识别和避障。有利地,本文所描述的方法可以用于改进多样化环境类型和操作条件下的UAV功能性。
因此,在一方面,提供了一种用于在环境内控制可移动物体的方法。所述方法包括:使用由所述可移动物体携带的多个传感器中的至少一个传感器来确定所述可移动物体的初始位置;生成第一信号以使所述可移动物体在所述环境内航行;使用所述多个传感器中的所述至少一个传感器来接收关于所述环境的感测数据;基于所述感测数据,生成表示所述环境的至少一部分的环境地图;接收返航至所述初始位置的指令;以及基于所述环境地图,生成第二信号以使所述可移动物体返航至所述初始位置。
在一些实施方式中,所述可移动物体是无人飞行器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地,所述无人飞行器可被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。所述无人飞行器可以是多旋翼航空器。
在一些实施方式中,所述环境可以是室内环境或低空环境。
在一些实施方式中,所述多个传感器可以包括全球定位***(GPS)传感器、视觉传感器或距离传感器。所述距离传感器可以包括以下至少一种:激光雷达传感器、超声传感器或飞行时间相机传感器。所述多个传感器可以包括多种不同的传感器类型。
在一些实施方式中,所述环境地图可以包括拓扑地图或尺度地图(metric map)。所述尺度地图可以包括以下至少一种:点云、3D网格地图、2D网格地图或2.5D网格地图。可选地,所述尺度地图可以包括占据网格地图(occupancy grid map)。
在一些实施方式中,生成所述第二信号包括:使用所述多个传感器中的至少一个传感器来确定所述可移动物体的当前位置;基于所述环境地图,确定从所述当前位置到所述初始位置的路径;以及生成信号以使所述可移动物体沿着所述路径移动以返航至所述初始位置。确定所述路径可以包括确定从所述当前位置到所述初始位置的最短路径。备选地或组合地,确定所述路径可以包括确定从所述当前位置到所述初始位置的、避开所述环境内的一个或多个障碍物的路径。所述路径可以包括由所述可移动物体先前行进过的一个或多个部分。所述路径可以不同于由所述可移动物体先前行进过的路径。可选地,所述路径可以是所述可移动物体的飞行路径。所述路径可以包括所述可移动物体的空间位置和方向。
在一些实施方式中,所述路径包括对应于所述可移动物体先前行进过的位置的多个航点,所述多个航点是当所述可移动物体在所述环境内航行时被记录的。当所述可移动物体在所述环境内航行时,可以实时地记录所述多个航点。或者,当所述可移动物体在所述环境内航行时,可以按预定时间间隔记录所述多个航点。可以将所述多个航点储存在列表数据结构中。
在一些实施方式中,生成所述信号以使所述可移动物体沿着所述路径移动可以包括:检测所述环境中沿着所述路径定位的障碍物;修改所述路径以便避开所述障碍物;以及生成信号以使所述可移动物体沿着经修改的路径移动。
在另一方面,提供了一种用于在环境内控制可移动物体的***。所述***可以包括:由所述可移动物体携带的多个传感器以及一个或多个处理器。所述一个或多个处理器可被单个地或共同地配置用于:使用所述多个传感器中的至少一个传感器来确定所述可移动物体的初始位置;生成第一信号,该第一信号使所述可移动物体在所述环境内航行;使用所述多个传感器中的所述至少一个传感器来接收关于所述环境的感测数据;基于所述感测数据,生成表示所述环境的至少一部分的环境地图;接收返航至所述初始位置的指令;以及基于所述环境地图生成第二信号,该第二信号使所述可移动物体航行以返航至所述初始位置。
在另一方面,提供了一种用于在环境内控制无人飞行器的方法。所述方法包括:生成第一信号以使所述无人飞行器在所述环境内航行;使用由所述无人飞行器携带的多个传感器来接收关于所述环境的至少一部分的感测数据;基于所述感测数据,生成表示所述环境的所述至少一部分的环境地图;使用所述环境地图来检测位于所述环境的所述部分中的一个或多个障碍物;以及使用所述环境地图来生成第二信号以使所述无人飞行器航行,以便避开所述一个或多个障碍物。
在一些实施方式中,所述无人飞行器是旋翼航空器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地,所述无人飞行器可被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。
在一些实施方式中,所述环境可以是室内环境或低空环境。
在一些实施方式中,所述多个传感器可以包括全球定位***(GPS)传感器、视觉传感器或距离传感器。所述距离传感器可以包括以下至少一种:激光雷达传感器、超声传感器或飞行时间相机传感器。所述多个传感器可以包括多种不同的传感器类型。所述感测数据可以包括相对于多个不同坐标系的数据,并且生成所述环境地图包括将所述数据映射到单一坐标系上。
在一些实施方式中,所述环境地图可以包括拓扑地图或尺度地图。所述尺度地图可以包括以下至少一种:点云、3D网格地图、2D网格地图或2.5D网格地图。可选地,所述尺度地图可以包括占据网格地图。
在一些实施方式中,基于从与所述无人飞行器通信的远程终端接收到的指令来生成所述第一信号。所述指令可以由用户输入到所述远程终端中。或者,所述第一信号可以由所述无人飞行器自主生成。
在一些实施方式中,所述感测数据包括相对于多个不同坐标系的数据,并且生成所述环境地图包括将所述数据映射到单一坐标系上。生成所述第一信号可以包括为所述无人飞行器生成的飞行路径,并且生成所述第二信号可以包括基于所述环境地图来修改所述飞行路径,以便避开所述一个或多个障碍物。所述飞行路径可被配置用于将所述无人飞行器从当前位置引导至先前位置。
在另一方面,提供了一种用于在环境内控制无人飞行器的***。所述***包括:由所述无人飞行器携带的多个传感器以及一个或多个处理器。所述一个或多个处理器可被单个地或共同地配置用于:生成第一信号以使所述无人飞行器在所述环境内航行;使用由所述无人飞行器携带的多个传感器来接收关于所述环境的至少一部分的感测数据;基于所述感测数据,生成表示所述环境的所述至少一部分的环境地图;使用所述环境地图来检测位于所述环境的所述部分中的一个或多个障碍物;以及使用所述环境地图来生成第二信号以使所述无人飞行器航行,以便避开所述一个或多个障碍物。
在另一方面,提供了一种用于在环境内控制无人飞行器的方法。所述方法包括:从第一传感器接收关于所述环境的第一感测信号,并从第二传感器接收关于所述环境的第二感测信号,其中所述第一传感器和第二传感器是不同的传感器类型,并且其中所述第一传感器和第二传感器由无人飞行器携带;使用所述第一感测信号来生成第一环境地图并使用所述第二感测信号来生成第二环境地图,所述第一环境地图和第二环境地图各自包括所述环境的障碍物占据信息;以及组合所述第一环境地图和第二环境地图,从而生成包含所述环境的障碍物占据信息的最终环境地图。
在一些实施方式中,所述方法进一步包括至少部分基于所述最终环境地图中的障碍物占据信息,生成信号以使所述无人飞行器在所述环境内航行。
在一些实施方式中,所述无人飞行器是旋翼航空器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地,所述无人飞行器可被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。
在一些实施方式中,所述环境可以是室内环境或低空环境。
在一些实施方式中,所述多个传感器可以包括全球定位***(GPS)传感器、视觉传感器或距离传感器。所述距离传感器可以包括以下至少一种:激光雷达传感器、超声传感器或飞行时间相机传感器。所述多个传感器可以包括多种不同的传感器类型。
在一些实施方式中,所述环境地图可以包括拓扑地图或尺度地图。所述尺度地图可以包括以下至少一种:点云、3D网格地图、2D网格地图或2.5D网格地图。可选地,所述尺度地图可以包括占据网格地图。
在一些实施方式中,相对于第一坐标系提供所述第一环境地图并且相对于与所述第一坐标系不同的第二坐标系提供所述第二环境地图。所述第一坐标系可以是全局坐标系而所述第二坐标系可以是局部坐标系。组合所述第一环境地图和第二环境地图可以包括将所述第一环境地图和第二环境地图转换至单一坐标系。
在一些实施方式中,所述第一传感器的感测范围不同于所述第二传感器的感测范围。
在另一方面,提供了一种用于在环境内控制无人飞行器的***。所述***包括:第一传感器,其由所述无人飞行器携带并且被配置用于生成关于所述环境的第一感测信号;第二传感器,其由所述无人飞行器携带并且被配置用于生成关于所述环境的第二感测信号,所述第二传感器和所述第一传感器是不同的传感器类型;以及一个或多个处理器。所述一个或多个处理器可被单个地或共同地配置用于:接收所述第一感测信号和第二感测信号;使用所述第一感测信号来生成第一环境地图并使用所述第二感测信号来生成第二环境地图,所述第一环境地图和第二环境地图各自包含所述环境的障碍物占据信息;以及组合所述第一环境地图和第二环境地图,从而生成包含所述环境的障碍物占据信息的最终环境地图。
在另一方面,提供了一种用于在环境内控制无人飞行器的方法。所述方法包括:使用由所述无人飞行器携带的多个传感器中的至少一个传感器来确定所述无人飞行器的初始位置;生成第一信号以使所述无人飞行器在所述环境内航行;使用所述多个传感器中的所述至少一个传感器来接收关于所述环境的感测数据;接收返航至所述初始位置的指令;以及生成第二信号以使所述无人飞行器沿着路径返航至所述初始位置,其中当所述多个传感器中的所述至少一个传感器检测到位于沿着所述路径的所述环境中的障碍物时,修改所述路径以避开所述障碍物。
在一些实施方式中,所述无人飞行器是旋翼航空器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地,所述无人飞行器可被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。
在一些实施方式中,所述环境可以是室内环境或低空环境。
在一些实施方式中,所述多个传感器可以包括全球定位***(GPS)传感器、视觉传感器或距离传感器。所述距离传感器可以包括以下至少一种:激光雷达传感器、超声传感器或飞行时间相机传感器。所述多个传感器可以包括多种不同的传感器类型。
在一些实施方式中,所述环境地图可以包括拓扑地图或尺度地图。所述尺度地图可以包括以下至少一种:点云、3D网格地图、2D网格地图或2.5D网格地图。可选地,所述尺度地图可以包括占据网格地图。
在一些实施方式中,所述路径包括由所述可移动物体先前行进过的一个或多个部分。所述路径可以不同于由所述可移动物体先前行进过的路径。可选地,所述路径可以是所述可移动物体的飞行路径。所述路径可以包括所述可移动物体的空间位置和定向。
在另一方面,提供了一种用于在环境内控制无人飞行器的***。所述***可以包括:由所述可移动物体携带的多个传感器以及一个或多个处理器。所述一个或多个处理器可被单个地或共同地配置用于:使用由所述无人飞行器携带的多个传感器中的至少一个传感器来确定所述可移动物体的初始位置;生成第一信号以使所述无人飞行器在所述环境内航行;使用所述多个传感器中的所述至少一个传感器来接收关于所述环境的感测数据;接收返航至所述初始位置的指令;以及生成第二信号以使所述无人飞行器沿着路径返航至所述初始位置,其中当所述多个传感器中的所述至少一个传感器检测到位于沿着所述路径的所述环境中的障碍物时,修改所述路径以避开所述障碍物。
在另一方面,提供了一种用于生成环境的地图的方法。所述方法包括:从由无人飞行器携带的一个或多个视觉传感器接收第一感测数据,所述第一感测数据包含所述环境的深度信息;从由所述无人飞行器携带的一个或多个距离传感器接收第二感测数据,所述第二感测数据包含所述环境的深度信息;以及使用所述第一感测数据和第二感测数据来生成包含所述环境的深度信息的环境地图。
在一些实施方式中,所述第一感测数据和第二感测数据各自包括具有多个像素的至少一个图像,所述多个像素中的每个像素与二维图像坐标和深度值相关联。所述多个像素中的每个像素可以与色值相关联。所述第一感测数据和第二感测数据可以各自包含所述环境中的一个或多个物体的轮廓信息。
在一些实施方式中,所述方法进一步包括:至少部分地基于所述环境地图中的深度信息,生成信号以使所述无人飞行器在所述环境内导航。
在一些实施方式中,所述无人飞行器是旋翼航空器。所述无人飞行器可以不超过10kg重。所述无人飞行器的最大尺寸可以不超过1.5m。所述无人飞行器可被配置用于在不超过400m的高度上飞行。可选地,所述无人飞行器可被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。所述限制飞行区域可以是机场。
在一些实施方式中,所述环境可以是室内环境或低空环境。
在一些实施方式中,所述一个或多个视觉传感器仅包括一个相机。或者,所述一个或多个视觉传感器可以包括两个或更多个相机。所述一个或多个距离传感器可以包括至少一个超声传感器或至少一个激光雷达传感器。所述第一感测数据可以包括第一组深度图像而所述第二感测数据可以包括第二组深度图像。生成所述环境地图可以包括:辨别存在于所述第一组深度图像中的第一多个特征点;辨别存在于所述第二组深度图像中的第二多个特征点,所述第二多个特征点中的每个特征点对应于所述第一多个特征点中的一个特征点;确定所述第一多个特征点与第二多个特征点之间的对应;以及基于所述对应,通过组合所述第一组深度图像和第二组深度图像而生成所述环境地图。
在一些实施方式中,相对于第一坐标系提供所述第一感测数据并且相对于与所述第一坐标系不同的第二坐标系提供所述第二感测数据。生成所述环境地图可以包括相对于第三坐标系来表示所述第一感测数据和第二感测数据。所述第三坐标系可以是所述第一坐标系或所述第二坐标系。或者,所述第三坐标系可以不同于所述第一坐标系和所述第二坐标系。
在一些实施方式中,所述环境地图可以包括拓扑地图或尺度地图。所述尺度地图可以包括以下至少一种:点云、3D网格地图、2D网格地图或2.5D网格地图。可选地,所述尺度地图可以包括占据网格地图。
在另一方面,提供了一种用于生成环境的地图的***。所述***可以包括:一个或多个视觉传感器,其由无人飞行器携带并且被配置用于生成第一感测数据,所述第一感测数据包含所述环境的深度信息;一个或多个距离传感器,其由所述无人飞行器携带并且被配置用于生成第二感测数据,所述第二感测数据包含所述环境的深度信息;以及一个或多个处理器。所述一个或多个处理器可被单个地或共同地配置用于:接收所述第一感测数据和第二感测数据;以及使用所述第一感测数据和第二感测数据来生成包含所述环境的深度信息的环境地图。
应当明白,本发明的不同方面可以被单独地、共同地或彼此结合地理解。本文所描述的本发明的各个方面可以适用于下文阐述的任何特定应用或者适用于任何其他类型的可移动物体。本文对飞行器的任何描述均可适用于和用于任何可移动物体,诸如任何载具。另外,本文在空中运动(例如,飞行)的情景下公开的***、设备和方法还可以适用于其他类型运动的情景下,诸如在地面上或在水上的移动、水下运动或者在太空中的运动。此外,本文对旋翼或旋翼总成的任何描述均可适用于和用于任何被配置用于通过旋转而生成推进力的推进***、设备或机构(例如,螺旋桨、轮子、轮轴)。
通过考察说明书、权利要求书和附图,本发明的其他目标和特征将会变得显而易见。
援引并入
本说明书中所提及的所有出版物、专利和专利申请均通过引用而并入于此,其程度犹如具体地和个别地指出要通过引用而并入每一个别出版物、专利或专利申请。
附图说明
在所附权利要求书中具体阐述了本发明的新颖特征。通过参考对在其中利用到本发明原理的说明性实施方式加以阐述的以下详细描述和附图,将会对本发明的特征和优点获得更好的理解;在附图中:
图1A图示了根据实施方式中的在户外环境中操作的UAV;
图1B图示了根据实施方式中的在室内环境中操作的UAV;
图2A图示了根据实施方式中的用于使用传感器融合来估计UAV姿态的方案;
图2B图示了根据实施方式中的用于使用传感器融合来估计UAV位置和速度的方案;
图3A图示了根据实施方式中的用于使用传感器融合来进行环境地图构建的方案;
图3B图示了根据实施方式中的用于使用传感器融合来生成环境地图的方法;
图4图示了根据实施方式中的用于使用不同传感器类型来进行环境地图构建的方法;
图5图示了根据实施方式中的用于控制UAV以躲避障碍物的方法;
图6图示了根据实施方式中的用于控制UAV以返航至初始位置的方法;
图7图示了根据实施方式中的用于控制UAV在避开障碍物的同时返航至初始位置的方法;
图8A和图8B图示了根据实施方式中的用于使用航点来控制UAV以返航至初始位置的算法;
图9A和图9B图示了根据实施方式中的用于使用拓扑地图来控制UAV以返航至目标位置的算法;
图10图示了根据实施方式中的UAV;
图11图示了根据实施方式中的包括载体和载荷的可移动物体;以及
图12图示了根据实施方式中的用于控制可移动物体的***。
具体实施方式
本公开内容提供了用于控制诸如无人飞行器(UAV)等可移动物体的***和方法。在一些实施方式中,UAV可适于携带被配置用于收集环境数据的多个传感器。其中的一些传感器可以是不同类型(例如,与距离传感器组合使用的视觉传感器)。由所述多个传感器获取的数据可以组合以生成表示周围环境的环境地图。在一些实施方式中,环境地图可以包括关于环境中物体(诸如物体或障碍物)位置的信息。UAV可以使用所生成的地图来执行各种操作,其中一些可以是半自动化的或全自动化的。例如,在一些实施方式中,环境地图可以用于自动为UAV确定一个飞行路径,以从其当前位置航行至目标位置。又例如,环境地图可以用于确定一个或多个障碍物的空间排列,并从而使得UAV能够执行避障机动。有利地,如本文所公开的用于收集环境数据的多种传感器类型的使用可以提高环境地图构建的准确度,即使是在多样化的环境和操作条件下亦如此,从而增强诸如导航和避障等UAV功能性的稳健性和灵活性。
本文提供的实施方式可适用于各种类型的UAV。例如,UAV可以是不超过10kg重和/或具有不超过1.5m的最大尺寸的小型UAV。在一些实施方式中,UAV可以是旋翼航空器,诸如由多个螺旋桨推动以在空中移动的多旋翼航空器(例如,四轴飞行器)。下文进一步详述了适合随本文介绍的实施方式一起使用的UAV和其他可移动物体的附加示例。
本文所描述的UAV可以完全自主地(例如,通过诸如机载控制器等合适的计算***)、半自主地或者手动地(例如,由人类用户)操作。UAV可以从合适的实体(例如,人类用户或自主控制***)接收命令并通过执行一个或多个动作来响应这样的命令。例如,可以控制UAV从地面起飞、在空中移动(例如,以多达三个平移自由度和多达三个旋转自由度)、移动至目标位置或一系列目标位置、在空中悬停、降落在地面上等。又例如,可以控制UAV以指定速度和/或加速度(例如,以多达三个平移自由度和多达三个旋转自由度)或者沿着指定移动路径移动。此外,所述命令可以用于控制一个或多个UAV部件,诸如本文所描述的部件(例如,传感器、致动器、推进单元、载荷等)。例如,一些命令可以用于控制诸如相机等UAV载荷的位置、方向和/或操作。可选地,UAV可被配置用于根据一个或多个预定操作规则来操作。所述操作规则可以用于控制UAV的任何合适的方面,诸如UAV的位置(例如,纬度、经度、高度)、方向(例如,横滚、俯仰、偏航)、速度(例如,平移和/或角度)和/或加速度(例如,平移和/或角度)。例如,可以设计操作规则以使得不允许UAV飞到阈值高度之外,例如,UAV可被配置成在距地面不超过400m的高度上飞行。在一些实施方式中,操作规则可适于提供自动化机制,用于提高UAV的安全性并防止安全事故。例如,UAV可被配置用于检测限制飞行区域(例如,机场)并且不在该限制飞行区域的预定距离内飞行,从而避免与飞行器和其他障碍物的潜在碰撞。
现转到附图,图1A图示了根据实施方式中的在户外环境100中操作的UAV 102。户外环境100可以是城市、郊区或乡村环境或者是不至少部分地位于建筑物内的任何其他环境。UAV 102可以相对靠近地面104(例如,低空)或者相对远离地面104(例如,高空)而操作。例如,在距地面小于或等于约10m处操作的UAV 102可被认为是在低空,而在距地面大于或等于约10m处操作的UAV 102可被认为是在高空。
在一些实施方式中,户外环境100包括一个或多个障碍物108a-障碍物108d。障碍物可以包括可阻碍UAV 102移动的任何物体或实体。一些障碍物(例如,障碍物108a、108d)可能位于地面104上,诸如建筑物、地面载具(例如,轿车、摩托车、卡车、自行车)、人类、动物、植物(例如,树木、灌木)和其他人造或自然构造物。一些障碍物可能与地面104、水、人造构造物或自然构造物相接触和/或由其所支撑。或者,一些障碍物(例如,障碍物108b、108c)可能完全位于空中106,包括飞行器(例如,飞机、直升机、热气球、其他UAV)或鸟类。空中障碍物可能不由地面104或由水或由任何自然或人造构造物所支撑。位于地面104上的障碍物可能包括显著延伸至空中106的部分(例如,高层建筑物诸如塔、摩天大楼、灯柱、无线电发射塔、输电线、树木等)。
图1B图示了根据实施方式中的在室内环境150中操作的UAV 152。室内环境150位于建筑物154的内部中,其具有地板156、一面或多面墙壁158以及/或者天花板或屋顶160。示例性建筑物包括住宅、商业或工业建筑物,诸如房屋、公寓、办公楼、生产设施、仓储设施等。建筑物154的内部可由地板156、墙壁158和天花板160完全封闭,使得UAV 152被约束到室内空间。相反地,可能不存在地板156、墙壁158或天花板160中的至少一个,从而使得UAV152能够从内部飞到外部,或者反之亦然。备选地或组合地,在地板156、墙壁158或天花板160中可能形成一个或多个缺口164(例如,门、窗、天窗)。
类似于户外环境100,室内环境150可能包含一个或多个障碍物162a-障碍物162d。一些障碍物可能位于地板156上(例如,障碍物162a),诸如家具、电器用具、人类、动物、植物或者其他人造物体或自然物体。相反地,一些障碍物可能位于空中(例如,障碍物162b),诸如鸟类或其他UAV。室内环境150中的一些障碍物可由其他构造物或物体所支撑。障碍物还可附着于天花板160(例如,障碍物162c),诸如灯具、吊扇、屋梁或其他安装在天花板上的电器用具或构造物。在一些实施方式中,障碍物可能附着于墙壁158(例如,障碍物162d),诸如灯具、搁架、橱柜或其他安装在墙壁上的电器用具或构造物。值得注意的是,建筑物154的构造物组件也可被认为是障碍物,包括地板156、墙壁158和天花板160。
本文所描述的障碍物可能是基本上静止的(例如,建筑物、植物、构造物)或者是基本上移动的(例如,人类、动物、载具,或者其他能够移动的物体)。一些障碍物可能包括静止组件和移动组件的组合(例如,风车)。移动障碍物或障碍物组件可以根据预定的或可预测的路径或模式而移动。例如,轿车的移动可能是相对可预测的(例如,根据道路的形状)。或者,一些移动障碍物或障碍物组件可以沿着随机的轨迹或以其他方式不可预测的轨迹移动。例如,诸如动物等生物可能按相对不可预测的方式移动。
为了确保安全和有效的操作,为UAV提供用于检测和辨别诸如障碍物等环境物体的机制可能是有益的。此外,对诸如地标和特征等环境物体的识别可促进导航,特别是当UAV以半自主或全自主方式操作时尤为如此。此外,对UAV在环境内的精确位置及其与周围环境物体的空间关系的了解对于多种UAV功能性可能是有价值的。
因此,本文所描述的UAV可以包括一个或多个传感器,所述传感器被配置用于收集相关数据,诸如与UAV状态、周围环境或者该环境内的物体有关的信息。适用于本文所公开的实施方式的示例性传感器包括位置传感器(例如,全球定位***(GPS)传感器、支持位置三角测量法的移动设备发射器)、视觉传感器(例如,能够检测可见光、红外光或紫外光的成像设备,诸如相机)、距离或范围传感器(例如,超声传感器、激光雷达、飞行时间相机)、惯性传感器(例如,加速度计、陀螺仪、惯性测量单元(IMUs))、高度传感器、姿态传感器(罗盘)、压力传感器(例如,气压计)、音频传感器(例如,麦克风)或场传感器(例如,磁力计、电磁传感器)。可以使用任何合适数目和组合的传感器,诸如一个、两个、三个、四个、五个或更多个传感器。可选地,可以从不同类型(例如,两种、三种、四种、五种或更多种类型)的传感器接收数据。不同类型的传感器可以测量不同类型的信号或信息(例如,位置、方向、速度、加速度、距离、压力等)以及/或者利用不同类型的测量技术来获取数据。例如,传感器可以包括主动式传感器(例如,生成和测量来自其自身能源的能量的传感器)和被动式传感器(例如,检测可用能量的传感器)的任何合适的组合。又例如,一些传感器可以生成依据全局坐标系提供的绝对测量数据(例如,由GPS传感器提供的位置数据、由罗盘或磁力计提供的姿态数据),而其他传感器可以生成依据局部坐标系提供的相对测量数据(例如,由陀螺仪提供的相对角速度;由加速度计提供的相对平移加速度;由视觉传感器提供的相对姿态信息;由超声传感器、激光雷达或飞行时间相机提供的相对距离信息)。在一些情况下,局部坐标系可以是相对于UAV定义的机体坐标系。
本文所描述的传感器可由UAV携带。传感器可位于UAV的任何合适的部分,诸如在UAV上部、底部、一个或多个侧面上或在机体内。一些传感器可以机械耦合至UAV,以使得UAV的空间安排和/或运动对应于传感器的空间排列和/或运动。传感器可经由刚性耦合而耦合至UAV,以使得该传感器不相对于其所附着至的UAV的部分而移动。或者,传感器与UAV之间的耦合可以允许该传感器相对于UAV的移动。耦合可以是永久耦合或非永久(例如,可拆卸)耦合。合适的耦合方法可以包括粘合剂、粘结、焊接和/或紧固件(例如,螺钉、钉、销等)。可选地,传感器可与UAV的一部分一体形成。此外,传感器可以与UAV的一部分(例如,处理单元、控制***、数据存储)电耦合,以便使得由传感器收集的数据能够用于UAV的各种功能(例如,导航、控制、推进、与用户或其他设备通信等),诸如本文所讨论的实施方式。
传感器可被配置用于收集各种类型的数据,诸如与UAV、周围环境或该环境内的物体有关的数据。例如,至少一些传感器可被配置用于提供关于UAV的状态的数据。由传感器提供的状态信息可以包括关于UAV的空间排列的信息(例如,诸如经度、纬度和/或高度等地点或位置信息;诸如横滚、俯仰和/或偏航等方向或姿态信息)。状态信息还可以包括关于UAV的运动的信息(例如,平移速度、平移加速度、角速度、角加速度等)。例如,传感器可被配置用于确定UAV关于多达六个自由度(例如,三个位置和/或平移自由度、三个方向和/或旋转自由度)的空间排列和/或运动。可以相对于全局坐标系或相对于局部坐标系(例如,相对于UAV或另一实体)来提供状态信息。例如,传感器可被配置用于确定UAV与控制该UAV的用户之间的距离,或者UAV与该UAV的飞行起始点之间的距离。
由传感器获取的数据可以提供各种类型的环境信息。例如,传感器数据可以是环境类型的指示,诸如室内环境、户外环境、低空环境或高空环境。传感器数据还可以提供关于当前的环境状况的信息,包括天气(例如,晴朗、下雨、下雪)、能见度状况、风速、当日时间等。此外,由传感器收集的环境信息可以包括关于该环境中物体(诸如本文所描述的障碍物)的信息。障碍物信息可以包括关于环境中障碍物的数目、密度、几何结构和/或空间排列的信息。
在一些实施方式中,通过组合由多个传感器获取的传感器数据(亦称为“传感器融合”)来生成感测结果。例如,传感器融合可以用于组合由不同的传感器类型获取的感测数据,所述不同传感器类型包括GPS传感器、惯性传感器、视觉传感器、激光雷达、超声传感器等。又例如,传感器融合可以用于组合不同类型的感测数据,诸如绝对测量数据(例如,相对于全局坐标系而提供的数据,诸如GPS数据)和相对测量数据(例如,相对于局部坐标系而提供的数据,诸如视觉感测数据、激光雷达数据或超声感测数据)。传感器融合可以用于补偿与单个传感器类型相关联的局限性或误差,从而提高最终感测结果的准确度和可靠性。
图2A图示了根据许多实施方式中的用于使用传感器融合来估计UAV姿态的方案200。虽然图2A的实施方式涉及对UAV偏航角的估计,但应当理解,方案200中描述的方法还可适用于对UAV的横滚角或俯仰角的估计。方案200利用IMU 202、至少一个相对定向传感器204和磁力计206。IMU 202和磁力计206可以用于提供对UAV偏航角208、210的相应的绝对估计。相对定向传感器204可以是提供关于局部坐标系(例如,UAV机体坐标系)而不是全局坐标系的姿态信息的任何传感器。示例性相对定向传感器包括视觉传感器、激光雷达、超声传感器以及飞行时间或深度相机。可以分析相对定向传感器数据以便提供对偏航率212和相对偏航角214的估计。
在相对定向传感器204是被配置用于捕捉图像序列(“帧”)的视觉传感器的实施方式中,可以使用选自所述序列的一个或多个图像(“关键帧”)来确定偏航率212和偏航角214。可以使用任何合适的方法来选择关键帧。例如,可以按预定间隔来选择关键帧,诸如按预定时间间隔、预定距离间隔、预定位移间隔、预定姿态间隔或者关键帧之间的预定平均视差间隔。又例如,可以基于连续的关键帧之间的关系(例如,关键帧之间的重叠面积量)来选择关键帧。可选地,可以基于本文所提供的参数的组合来选择关键帧。在一些实施方式中,至少一些关键帧可以包括连续的图像帧。或者,关键帧可以不包括任何连续的图像帧。后一种方法在减少存在于连续关键帧中的估计误差的传播方面可能是有利的。
可以使用任何合适数目的关键帧,诸如一个、两个、三个、四个或更多个关键帧,来估计给定时间处的偏航率212和偏航角214。可以使用任何合适的方法(诸如图像分析)来确定偏航率212和偏航角214。在一些实施方式中,可以假定以不同偏航角捕捉同一场景的两个关键帧将会有所不同。可以通过数学建模技术来确定不同的关键帧之间的偏航角。例如,可以通过辨别和匹配存在于全部两个关键帧中的特征点来确定关键帧之间的差异。基于全部两个关键帧中特征点的坐标,可以确定两个关键帧的相似变换矩阵,并且从该相似变换矩阵获取偏航角212。继而可以使用偏航角214以及两个关键帧之间的时间间隔来计算偏航率212。
可以融合由传感器202、204、206提供的绝对估计值和相对估计值(例如,使用扩展卡尔曼滤波器216或者其他类型的卡尔曼滤波器),以便提供最终偏航角结果218。可以实施任何合适的方法以便融合所述估计值。例如,可以将偏航率估计值212的积分与相对偏航角估计值214融合,以便更新相对偏航角估计值214。可以将相对偏航角估计值214分别与来自IMU 202和磁力计206的绝对偏航角估计值208、210相融合,以确定UAV的偏航角。可以提供最终偏航角结果218作为相对偏航角(例如,相对于UAV的机体坐标系)或者作为绝对偏航角。如前文所述,不同类型的测量数据的组合可以提高最终结果218的准确度。例如,在由磁力计206提供的数据不满足要求的情况下(例如,由于外部磁场),对来自IMU 202和/或相对定位传感器204的数据的使用可以减少磁力计误差对最终结果的影响程度。
图2B图示了根据实施方式中的用于使用传感器融合来估计UAV位置和速度的方案250。方案250利用IMU 252、至少一个相对位置和/或速度传感器254以及GPS传感器256。IMU252可以提供对UAV加速度258的估计。GPS传感器256可以提供对UAV 260的绝对位置的估计。可以使用相对位置和/或速度传感器254(例如,视觉传感器、激光雷达、超声传感器、飞行时间或深度相机或者任何其他提供相对位置和/或速度信息的传感器)来获取对UAV速度262和相对UAV位置264的估计。类似于图2A的相对定向传感器204,在其中相对位置和/或速度传感器254是视觉传感器的实施方式中,可以基于由该视觉传感器获取的一个或多个关键帧来确定速度和相对位置估计值262、264。例如,可以使用图像分析和数学建模来评估连续关键帧之间的差异,并从而确定将会产生这些差异的UAV的平移移动。继而可以基于关键帧之间经过的时间来估计UAV速度。
可以使用扩展卡尔曼滤波器266或者其他合适的卡尔曼滤波器类型来融合由传感器252、254和256提供的估计值,从而获取UAV的最终位置和速度结果268。例如,可以将加速度估计值258的积分与UAV速度估计值262相融合,以便确定UAV速度。可以将所确定的UAV速度的积分与相对位置估计值264和绝对位置估计值260相融合,以便确定UAV位置。可以相对于局部坐标系或全局坐标系来表示位置和速度结果268。
可选地,利用卡尔曼滤波器266的传感器融合还可以用于确定校准数据,以用于在相对速度和/或位置传感器254的局部坐标系与IMU252和GPS 256的全局坐标系之间进行转换。校准数据可以用于将IMU252和/或GPS 256所获取的绝对感测数据映射到传感器254所获取的相对感测数据上,或者反之亦然。例如,IMU 252和/或GPS 256可以用于以绝对坐标确定UAV行进的路径,而相对传感器254可以用于获取指示UAV在相对坐标中行进的路径的感测数据。本文提供的传感器融合方法可适用于确定将绝对路径数据投射到相对路径数据上所需的校准参数(例如,比例因子、旋转、平移),或者反之亦然。例如,可以通过数学建模来表示校准参数、绝对路径数据和相对路径数据之间的关系。继而可以将传感器所获取的绝对路径数据和相对路径数据输入到模型中以便求解校准参数。本文所描述的绝对路径数据和相对路径数据的组合可以用于提高路径确定的准确度,从而改善UAV航行。
本文所描述的传感器融合方法可适用于提供对UAV状态以及环境信息的更准确的估计值。在一些实施方式中,对UAV状态信息和环境信息的估计可以如此相互依赖,使得UAV状态信息用于估计环境信息,并且反之亦然。例如,一些传感器可以用于获取绝对环境信息而其他传感器可以用于获取相对环境信息可以基于关系将绝对环境信息投影到相对环境信息上(或者反之亦然),其中R表示全局坐标系与局部坐标系之间的旋转矩阵,并且T表示从全局坐标系的原点到局部坐标系的原点的平移矢量。在一些实施方式中,关于UAV的机体坐标系提供以便可以分别基于UAV的位置和定向而确定T和R。因此,可以使用UAV位置和方向信息来组合绝对环境数据和相对环境数据,从而生成环境信息的估计值。相反地,绝对环境数据和相对环境数据可以用于使用上述关系来估计UAV位置和方向。可以迭代该方法,以便提供UAV状态和环境信息的更新的估计值。
在一些实施方式中,传感器数据可以用于生成环境或者其至少一部分环境的表示。这样的表示在本文中可称为“环境地图”。环境地图可以表示紧邻UAV的环境的部分(局部地图),或者还可以表示相对远离UAV的部分(全局地图)。例如,局部地图可以表示距UAV约2m、5m、10m、15m、20m、25m或50m的半径内的环境部分。全局地图可以表示距UAV约25m、50m、75m、100m、125m、150m、200m、225m、250m、300m、400m、500m、1000m、2000m或5000m的半径内的部分。基于用以生成地图的传感器的有效范围,可以确定环境地图的大小。传感器的有效范围可以根据传感器类型而变化。例如,视觉传感器可以用于检测距UAV约10m、15m、20m或25m的半径内的物体。激光雷达传感器可以用于检测距UAV约2m、5m、8m、10m或15m的半径内的物体。超声传感器可以用于检测距UAV约2m、5m、8m、10m或15m的半径内的物体。在一些实施方式中,环境地图可以仅表示UAV先前行进过的部分。或者,在其他实施方式中,环境地图还可以表示UAV尚未行进过的环境部分。
环境地图可以用于表示各种类型的环境信息。例如,地图可以提供指示出诸如障碍物、构造物、地标或特征等环境物体的几何结构(例如,长度、宽度、高度、厚度、形状、表面积、体积)、空间排列(例如,位置、方向)和类型的信息。又例如,地图可以提供指示出环境的哪些部分被阻挡(例如,不可由UAV穿过)以及哪些部分未被阻挡(例如,可由UAV穿过)的信息。此外,地图可以提供关于UAV相对于各个环境物体的当前位置和/或其空间排列的信息。
可以使用任何合适类型的环境地图,诸如尺度地图或拓扑地图。拓扑地图可以描绘环境内的位置之间的连通性,而尺度地图可以描绘环境内的物体的几何结构。可选地,环境地图可以包括尺度信息和拓扑信息的组合。例如,环境地图可以描绘环境物体和/或位置之间的连通性以及绝对空间关系(例如,距离)。备选地或组合地,地图的一些部分可以按拓扑描绘,而其他部分可以按尺度描绘。
可以以任何合适的格式提供环境地图。例如,可以作为具有表示位置的顶点和表示位置之间的路径的边的图表来提供拓扑环境地图。拓扑环境地图的边可以与对应路径的距离信息相关联。尺度环境地图可以是描绘环境位置和物体的空间坐标的任何表示,如点云、拓扑地图、2D网格地图、2.5D网格地图或3D网格地图。所述空间坐标可以是3D坐标(例如,x、y和z坐标),其表示环境物体的表面上的点的空间位置。在一些实施方式中,尺度环境地图可以是占据网格地图。占据网格地图可以将环境表示成多个容积体。所述体积可以具有相同的大小或者具有不同的大小。占据网格地图可以针对每个体积指示出该体积是否基本上被障碍物占据,从而提供对环境内被阻挡的和未被阻挡的空间的精确表示。
可以使用任何合适的方法来生成本文所描述的环境地图。例如,环境地图的一个或多个部分可以在UAV操作期间(例如,飞行期间)生成,诸如通过使用同时定位与地图构建(SLAM)或者其他机器人地图构建技术来生成。或者,可以在UAV操作之前生成所述地图的一个或多个部分,并在飞行之前或飞行期间将其提供给UAV(例如,从远程计算***传输)。可以基于由UAV在飞行期间获取的数据来修改这样的地图,从而提供对地图数据的进一步精化。
在一些实施方式中,可以使用传感器融合来执行环境地图构建,以组合由多个传感器类型收集到的环境信息。该方法可以有利于补偿单个传感器类型的局限性。例如,当UAV处于室内环境中时,GPS感测数据可以是不准确的或者不可用的。视觉传感器可能未针对检测透明物体(例如,玻璃)或者针对相对较暗的环境(例如,夜间)而优化。在一些实施方式中,相比于其他传感器类型,激光雷达传感器可能具有相对较短的检测范围。本文所描述的多传感器融合的使用可以在多样化环境类型和操作条件下提供准确的地图构建,从而提高UAV操作的稳健性和灵活性。
图3A图示了根据实施方式中的用于使用传感器融合来进行环境地图构建的方案300。方案300可以用于生成本文所描述的环境地图的任何实施方式。在方案300中,感测数据从多个传感器302接收。所述多个传感器302可以包括一种或多种不同的传感器类型。传感器302可由UAV携带,例如,耦合至UAV的机身。可选地,可以对来自每个传感器302的感测数据进行预处理,以通过滤波、降噪、图像畸变校正等来提高数据质量。在一些实施方式中,可以相对于相应的坐标系来表示由每个传感器302提供的感测数据(例如,基于相对于UAV机身的传感器位置和方向)。因此,可以通过将所有的感测数据转换至单一坐标系304中而组合来自每个传感器的感测数据。例如,可以将相对于局部坐标系提供的感测数据转换至全局坐标系,或者反之亦然。坐标系转换304可以基于传感器校准数据306而得以完成。可以使用任何合适的技术来执行传感器校准,并且可以在UAV的操作之前(离线校准)或者在UAV的操作期间(在线校准)执行。在一些实施方式中,传感器校准涉及确定传感器302的外部参数,诸如每个传感器302之间的空间关系(例如,相对位置和方向)。继而可以基于所确定的传感器参数,来确定用于将感测数据转化至单一坐标系中的转换计算。
在坐标系转换304之后,继而可以使用传感器融合308来组合经转换的感测数据以获取单一感测结果。可以使用各种技术来执行传感器融合,诸如卡尔曼滤波(例如,卡尔曼滤波器、扩展卡尔曼滤波器、无迹卡尔曼滤波器)、粒子滤波或者本领域技术人员已知的其他滤波技术。所使用的方法可以根据所使用的传感器的特定组合和类型而有所变化。在一些实施方式中,传感器融合308可以利用来自所有传感器302的感测数据。相反地,传感器融合308可以利用仅来自传感器302的子集的数据。后一种方法可以有利于忽略不充分的或不可靠的传感器数据(例如,当UAV在室内时的GPS感测数据)。经融合的感测数据继而可以用于环境地图生成310。
可以基于来自传感器的任何合适组合的感测数据,来执行环境地图构建。例如,在一些实施方式中,本文所描述的地图构建方法由携带激光雷达传感器和视觉传感器(例如,诸如单相机等单目视觉传感器)的UAV来执行。激光雷达传感器可以用于获取环境物体相对于UAV的距离数据,而视觉传感器可以用于捕捉周围环境物体的图像数据。用于激光雷达和视觉传感器的传感器校准数据可以包括指示出激光雷达与视觉传感器之间的空间关系的传感器参数。例如,对于由激光雷达传感器确定为距UAV为距离Mi,并且对应于由视觉传感器捕捉的图像数据中的坐标mi处的环境物体,mi与Mi之间的关系可以由下式表示:
simi=K(R,t)Mi
其中R为旋转矩阵,t为变换矩阵,si为未知标量,并且K为视觉传感器的内部矩阵(由先前的校准所确定的内部参数)。在上述方程中,Mi、mi和K是已知的,而R和t是未知的。如果已经进行了N次测量,则由于R和t是恒定的(激光雷达传感器和视觉传感器的相对位置和方向是固定的),因此问题是n点透视(PNP)问题并且可以使用本领域技术人员已知的技术来求解,以便获得传感器参数R和t。
一旦已经获取传感器校准数据,则可以将激光雷达感测数据和视觉感测数据转换至同一坐标系(“世界”坐标系)中:
XW为相对于世界坐标系的数据(其对应于本实施方式中的视觉传感器坐标系),为相对于世界坐标系的视觉感测数据,为相对于视觉传感器坐标系的视觉感测数据,为相对于世界坐标系的激光雷达感测数据,为相对于激光雷达传感器坐标系的激光雷达感测数据,并且RWL和tWL为用于在视觉传感器坐标系与激光雷达传感器坐标系之间进行转换的旋转矩阵和变换矩阵(对应于上述R和t)。E为对角矩阵
其中s为未知的比例因子。
继而可以使用传感器融合技术来组合经转换的感测数据。例如,相对于视觉坐标系的视觉感测数据与相对于世界坐标系的视觉感测数据之间的关系可以由下式表示:
使用激光雷达感测数据,可以获取沿着激光雷达传感器的感测方向上最靠近UAV的点(表示为点i)。因此,由于
并且和是已知的(由于),可以确定s的值。因此,局部传感器数据和可以转换成相应的世界坐标和并且融合以生成单一结果XW。经融合的数据继而可以用于生成UAV周围环境的地图。
图3B图示了根据实施方式中的用于使用传感器融合来生成环境的地图的方法350。方法350可以由本文提供的任何***和设备来执行,诸如由UAV的一个或多个处理器来执行。
在步骤360中,从一个或多个视觉传感器接收第一感测数据,所述第一感测数据包括环境的深度信息。例如,视觉传感器可以仅包括一个相机(单目视觉传感器)。或者,视觉传感器可以包括两个(双目视觉传感器)或更多个相机。视觉传感器可以由UAV携带,诸如由UAV机身携带。在使用多个视觉传感器的实施方式中,每个传感器可以位于UAV的不同部分上,并且由每个传感器收集到的图像数据之间的视差可以用于提供环境的深度信息。本文中可以使用深度信息来指代关于一个或多个物体距UAV和/或传感器的距离的信息。在使用单一视觉传感器的实施方式中,可以通过捕捉针对视觉传感器多个不同位置和方向的图像数据并继而使用合适的图像分析技术(例如,运动中恢复结构)重建深度信息,来获取深度信息。
在步骤370中,从一个或多个距离传感器接收第二感测数据,所述第二感测数据包括环境的深度信息。距离传感器可以包括至少一个超声传感器(例如,广角传感器、阵列传感器)和/或至少一个激光雷达传感器。在一些实施方式中,相比于其他类型的超声传感器,超声阵列传感器可以提供更好的检测准确度。距离传感器也可以由UAV携带。距离传感器可以位于视觉传感器附近。可选地,距离传感器可以位于UAV的与用于携带视觉传感器的部分不同的部分上。
在步骤380中,使用第一感测数据和第二感测数据来生成包括环境的深度信息的环境地图。如本文所描述,第一感测数据和第二感测数据可以各自包括环境的深度信息。可选地,第一感测数据和第二感测数据还可以包括环境中的一个或多个物体的轮廓信息。本文中可以使用轮廓信息来指代关于环境物体的外形、轮廓或边缘的信息。由一个或多个距离传感器生成的感测数据可供作为像素深度图,同时可以使用诸如运动中恢复结构(structure from motion)、结构光法(structured light)、光片(sheet of light)、飞行时间或者立体视觉视差映射等技术从由一个或多个视觉传感器收集到的图像数据中提取深度信息。在一些实施方式中,第一感测数据和第二感测数据各自包括至少一个具有多个像素的图像,每个像素关联于2D图像坐标(例如,x和y坐标)、深度值(例如,对应于像素的环境物体与UAV和/或传感器之间的距离)和/或色值(例如,RGB色值)。这样的图像在本文中可称为深度图像。
考虑到融合过程期间每种类型的感测数据的相对可靠性和准确度,可以在空间上对准并组合与每组感测数据相关联的深度信息(例如,使用合适的传感器融合方法,诸如卡尔曼滤波)以便生成包括深度信息(例如,3D环境表示,诸如占据网格地图)的地图。在一些实施方式中,环境地图的生成可以涉及辨别存在于由视觉传感器提供的一组深度图像中的多个特征点、辨别存在于由距离传感器提供的一组深度图像中的对应的多个特征点、以及确定所述的多个特征点之间的对应。所述对应可以包括关于可适用于将距离深度图像映射至视觉深度图像上或者反之亦然的一种或多种变换(例如,平移、旋转、缩放)的信息。继而可以基于这样的对应来组合所述深度图像,以便生成环境地图。备选地或组合地,可以相对于不同坐标系提供第一感测数据和第二感测数据,并且可以通过在同一坐标系中表示第一感测数据和第二感测数据来生成环境地图。该坐标系可以是与第一感测数据相关联的坐标系、与第二感测数据相关联的坐标系或者完全不同的坐标系。一旦已经生成环境地图,则可以基于该环境地图中所包含的深度信息而在环境内导航UAV。
本文所描述的距离感测和视觉感测的组合可以补偿单个传感器类型的局限性,从而提高地图生成的准确度。例如,视觉传感器可以产生相对较高分辨率的彩色图像,但是当使用单目相机时或者当双目相机的距离相对较小时(例如当相机安装在小型UAV上时可能发生),可能相对难以从图像数据中获取准确的深度数据。另外,当照明很亮或者具有高对比度时,或者在不利的环境条件下(诸如雨、雾或烟雾),视觉传感器可能无法提供符合要求的图像数据。相反地,诸如超声传感器等距离传感器可以提供准确的深度数据,但是相比于视觉传感器可能具有较低的分辨率。并且,在一些情况下,超声传感器和其他距离传感器类型可能无法检测具有小反射面的物体(例如,细枝、角落、栏杆)或吸收性物体(例如,地毯),或者可能无法在具有许多物体的复杂环境(例如,室内环境)中分辨距离。然而,视觉感测数据一般可以作为距离感测数据的补充,这是因为在距离传感器正在生成并非最优数据的情况下,视觉传感器能够产生可靠的数据,并且反之亦然。因此,视觉传感器和距离传感器的组合使用可以用于在多种操作条件下并且针对多样类型的环境生成准确的环境地图。
图4图示了根据实施方式中的用于使用不同的传感器类型来进行环境地图构建的方法400。与本文所公开的所有方法一样,方法400可以使用本文介绍的***和设备的任何实施方式来实践,诸如由UAV机上携带的一个或多个处理器来实践。另外,与本文所公开的所有方法一样,方法400的任何步骤均可与本文其他方法的任何步骤相结合或者由其所替代。
在步骤410中,从由UAV携带的第一传感器接收第一感测信号。第一感测信号可以包含UAV正在操作的所在环境有关的信息,诸如指示出环境物体(例如,障碍物)的位置和几何结构的环境数据。类似地,在步骤420中,从由UAV携带的第二传感器接收第二信号。在一些实施方式中,第一传感器和第二传感器可以是不同的传感器类型,包括前文所描述的任何传感器类型(例如,激光雷达传感器和视觉传感器、超声传感器和视觉传感器等)。
在步骤430中,使用第一感测信号来生成第一环境地图,该第一环境地图包括环境的占据信息。在步骤440中,使用第二感测信号来生成第二环境地图,该第二环境地图包括环境的占据信息。第一环境地图和第二环境地图可以分别包括环境的障碍物占据信息,以使得所述环境地图可以用于确定障碍物相对于UAV的位置。例如,第一环境地图和第二环境地图可以是占据网格地图或者包含关于环境内被阻挡和未被阻挡的空间的信息的任何其他地图类型。
可选地,第一环境地图可以表示不同于第二环境地图的环境部分。例如,第一环境地图可以表示相对靠近UAV的环境部分,而第二环境地图可以表示相对远离UAV的环境部分。在一些实施方式中,可以使用不同的感测信号来生成跨越环境的不同部分的地图。对于所要用于生成不同地图的信号的选择可以基于任何合适的准则,诸如针对所述环境的特定部分的第一感测信号和第二感测信号的相对信号质量和/或准确度。感测数据的质量和准确度可取决于每个传感器的具体特性,并且可根据环境类型(例如,室内、户外、低空、高空)、天气状况(例如,晴朗、下雨、有雾)、感测到的环境物体的相对位置(例如,近距离、远距离)以及感测到的环境物体的性质(例如,透明度、反射率、吸收率、形状、大小、材料、移动性等)而有所变化。例如,第一传感器在近距离上可能比第二传感器更准确,而第二传感器在远距离上可能比第一传感器更准确。因此,第一传感器可以用于生成相对靠近UAV的环境部分的地图,而第二传感器可以用于生成相对远离UAV的环境部分的地图。备选地或组合地,对信号的选择可以基于所述环境部分是否位于对应的传感器的感测范围内。该方法在第一传感器和第二传感器具有不同感测范围的实施方式中可能是有利的。例如,近距离传感器可以用于生成相对靠近UAV的环境部分的地图,而远距离传感器可以用于生成相对远离UAV的、处于近距离传感器的范围之外的部分的地图。
在步骤450中,组合第一环境地图和第二环境地图,从而生成包含环境的占据信息的最终环境地图。可以使用本文所描述的传感器融合技术来组合环境地图。在相对于不同坐标系(例如,局部坐标系和全局坐标系)提供感测信号的实施方式中,地图部分的生成可以涉及将所述两个感测信号转换至单一的坐标系中,以便对准相应的环境数据,从而产生最终环境地图。随后,UAV可以基于最终环境地图而在该环境内导航行。例如,UAV可以至少部分地基于在最终环境地图中所表示的障碍物占据信息来航行,以便避免碰撞。UAV可由用户、由自动化控制***或者其合适的组合来导航。下文进一步详述了基于环境地图数据的UAV导航的附加示例。
虽然以上步骤示出了根据实施方式的环境地图构建的方法400,但本领域普通技术人员将会认识到基于本文所描述的教导的许多变体。一些步骤可以包括子步骤。在一些实施方式中,可以根据需要(例如,连续地或者以预定的时间间隔)重复方法400的步骤,以使得所产生的环境地图随着UAV在环境内导航而得以更新和精化。这样的实时地图构建方法可以使得UAV能够快速地检测环境物体并适应于变化的操作条件。
本文所描述的传感器融合方法可适用于各种类型的UAV功能,包括导航、物体识别和避障。在一些实施方式中,使用传感器融合结果而获得的环境数据可以用于通过提供准确的位置信息以及关于潜在障碍的信息来提高UAV操作的稳健性、安全性和灵活性。可以将环境数据提供给用户(例如,经由遥控器或终端、移动设备或者其他用户设备),以便为用户对UAV的手动控制提供信息。备选地或组合地,环境数据可以用于半自主或全自主控制***以引导UAV的自动化飞行。
例如,本文所公开的实施方式可以用于执行避障机动,以便防止UAV与环境物体相碰撞。在一些实施方式中,障碍物检测和避障可以是自动化的,从而提高UAV的安全性并减少用户对于避免碰撞的责任。对于缺乏经验的操作者以及在用户不能轻易察觉到UAV附近障碍物的存在的情况下,这样的方法可以是有利的。另外,自动化避障的实现可以降低与半自主或全自主UAV导航相关联的安全风险。此外,本文所描述的多传感器融合技术可以用于生成更准确的环境表示,从而提高这样的自动化防撞机制的可靠性。
图5图示了根据实施方式中的用于控制UAV以避开障碍物的方法500。方法500可由UAV携带的一个或多个处理器来实现。如前文所述,方法500可以是完全自动化的或者至少部分地自动化的,从而提供自动障碍物检测和避障能力。
在步骤510中,生成第一信号以使UAV在环境内导航。第一信号可以包括针对UAV的推进***(例如,旋翼)的控制信号。可以基于输入到远程终端或其他用户设备中并于随后传输至UAV的用户命令来生成第一信号。或者,第一信号可由UAV(例如,自动化机载控制器)自主地生成。在一些情况下,可以利用来自用户输入以及自动化路径确定机制的贡献而半自主地生成第一信号。例如,用户可以指示出UAV的一系列航点,而该UAV可以自动计算飞行路径以穿过所有航点。
在一些实施方式中,飞行路径可以为UAV指示出一系列期望的位置和/或方向(例如,关于多达六个自由度)。例如,飞行路径可以至少包括UAV的初始位置和目标位置。可选地,飞行路径可被配置用于将UAV从当前位置引导至先前位置。又例如,飞行路径可以包括UAV的目标飞行方向。在一些实施方式中,指令可以指定UAV的速度和/或加速度(例如,关于多达六个自由度),以使其沿着飞行路径移动。
在步骤520中,使用多个传感器来接收关于环境的至少一部分的感测数据。所述多个传感器可以包括不同类型的传感器(例如,视觉、激光雷达、超声、GPS等)。感测数据可以包含关于障碍物和/或其他环境物体的位置和特性的信息。例如,感测数据可以包含距离信息,该距离信息指示出UAV到附近障碍物的距离。可选地,感测数据可以包含与沿着UAV的飞行路径的环境的部分(诸如与飞行路径重叠或者靠近飞行路径的部分)有关的信息。
在步骤530中,基于感测数据来生成表示环境的至少一部分的环境地图。该环境地图可以是局部地图,其表示紧靠UAV周围的环境部分(例如,距UAV约2m、5m、10m、15m、20m、25m或50m的半径内)。或者,环境地图可以是全局地图,其还表示相对远离UAV的环境部分(例如,距UAV约25m、50m、75m、100m、125m、150m、200m、225m、250m、300m、400m、500m、1000m、2000m或5000m的半径内)。如前文所述,可以基于在步骤510中使用的传感器的有效范围来确定环境地图的大小。在一些实施方式中,可以使用前文所描述的基于传感器融合的方法(例如,方案300和/或方法400)来产生环境地图。例如,感测数据可以包括相对于多个不同坐标系的数据,并且环境地图生成可以涉及将所述数据映射到单一坐标系上,以便促进感测数据的融合。
在步骤540中,使用环境地图来检测位于环境的所述部分中的一个或多个障碍物。可以使用各种策略,诸如通过特征提取或模式识别技术等,来执行从地图信息的障碍物检测。可选地,可以执行合适的机器学习算法以完成障碍物检测。在一些实施方式中,如果环境地图是占据网格地图,则可以通过检测占据网格地图中被连续占据的体积来辨别障碍物。障碍物检测结果可以提供关于每个障碍物的位置、方向、大小、距离和/或类型的信息,以及结果的对应置信度信息。可以分析地图以辨别对UAV构成碰撞风险的障碍物(例如,位于沿着或靠近飞行路径处的障碍物)。
在步骤550中,使用环境地图来生成第二信号以使UAV航行,以便避开所述一个或多个障碍物。可以分析环境地图,以便确定所述一个或多个障碍物相对于UAV的位置,以及可供UAV移动的任何未被阻挡的空间的位置,以便避免与障碍物碰撞。第二信号因此可以提供适当的控制信号(例如,针对UAV的推进***)以使UAV航行经过所述未被阻挡的空间。在根据飞行路径来导航UAV的实施方式中,可以基于环境地图而修改飞行路径以便避开所述一个或多个障碍物,并且UAV可以根据经修改的飞行路径来航行。飞行路径修改可以引导UAV仅穿越经过未被阻挡的空间。例如,可以修改飞行路径以便使UAV绕过障碍物飞行(例如,在其之上、之下或者侧面)、飞离障碍物或者与障碍物保持指定的距离。在多个经修改的飞行路径均有可能的情况下,可以基于任何合适的准则来选择优选的飞行路径,所述准则诸如为使行进距离最小化、使行进时间最小化、使行进所述路径所需的能量的量最小化、使从原始飞行路径的偏离量最小化等。可选地,如果无法确定适当的飞行路径,则UAV可以简单地悬停于适当位置上并等待障碍物让路,或者等待用户采取手动控制。
在用于UAV操作的多传感器融合的另一示例性应用中,本公开介绍的实施方式可作为“自动返航”功能性的一部分而实现,其中UAV将会在某些情况下从当前位置自动航行至“返航”位置。该返航位置可能是UAV先前行进过的初始位置,诸如UAV最初起飞并开始飞行的位置。或者,返航位置可能不是UAV先前行进到的位置。返航位置可以是自动确定的,或者由用户指定。可以触发自动返航功能的情况的示例包括接收到来自用户的返航指令、失去与用户的遥控器的通信或者用户不再能够控制UAV的其他迹象、UAV电池电量低,或者检测到UAV故障或其他紧急情况。
图6图示了根据实施方式中的用于控制UAV返航至初始位置的方法600。在一些实施方式中,方法600由关联于自动化控制***的一个或多个处理器来实现,以至于需要很少的用户输入或者不需要用户输入来执行方法600。
在步骤610中,使用多个传感器中的至少一个传感器来确定UAV的初始位置。在一些实施方式中,可以使用具有不同传感器类型的多个传感器来确定所述位置。可以相对于全局坐标系(例如,GPS坐标)或者相对于局部坐标系(例如,相对于局部环境地标或特征)而确定所述位置。
在步骤620中,生成第一信号以使UAV在环境内航行。第一信号可以手动地、半自主地或者全自主地生成。例如,用户可以向遥控器中输入指令,该指令被传输至UAV以便控制UAV移动。又例如,UAV可以根据预定的飞行路径而移动或者行进至预定位置。UAV可以被导航至环境内的不同于初始位置(例如,关于经度、纬度或高度)的位置。
在步骤630中,从所述多个传感器中的至少一个传感器接收关于所述环境的感测数据。可以从在步骤610中使用的同一传感器或者从不同的传感器接收感测数据。类似地,可以从多种不同的传感器类型获取感测数据。如前文所述,这样的感测数据可以包括关于环境物体的位置和特性的信息。
在步骤640中,基于感测数据来生成表示环境的至少一部分的环境地图。在感测数据包括来自多种传感器类型的数据的实施方式中,可以使用前文所描述的基于传感器融合的方法(例如,方案300和/或方法400)来产生环境地图。所得的地图可以按任何合适的格式提供并且可以包含关于障碍物占据的信息(例如,障碍物网格地图)。
在步骤650中,基于环境地图生成第二信号以使UAV返航至初始位置。可以响应于自动返航指令而生成第二信号。自动返航指令可以由用户输入或者可以自动生成,例如,响应于诸如与控制UAV的遥控器失去通信等紧急情况而生成。在一些实施方式中,一旦UAV已经接收到自动返航的指令,该UAV可以使用环境地图来确定其当前位置、当前位置与初始位置之间的空间关系和/或任何环境障碍物的位置。基于环境地图中的障碍物占据信息,UAV可以继而确定适当的路径(例如,飞行路径)以从当前位置航行至初始位置。可以使用各种方法来确定UAV的合适路径。例如,如本文关于图9A和图9B所进一步详述,可以使用诸如拓扑地图等环境地图来确定路径。在一些实施方式中,所述路径可被配置用于避开可阻碍UAV飞行的一个或多个环境障碍物。备选地或组合地,所述路径可以是当前位置与初始位置之间的最短路径。所述路径可以包括UAV先前行进过的一个或多个部分,以及不同于UAV先前行进过的路径的一个或多个部分。例如,整个路径可能已由UAV先前行进过。又例如,如本文关于图8A和图8B所进一步详述,所述路径可以包括对应于UAV先前行进过的位置的多个航点。相反地,整个路径可能没有被UAV先前行进过。在一些实施方式中,可以生成多个潜在路径,并且基于合适的准则(例如,使总飞行时间最小化、使总飞行距离最小化、使能量消耗最小化、使遇到的障碍物数目最小化、与障碍物保持预定距离、保持预定高度范围等)而从所述多个路径中选择一个路径。UAV的飞行路径信息(例如,先前行进过的路径、潜在路径、所选路径)可以被包括在环境地图中。
一旦已经确定路径,可以处理路径信息以生成用于控制UAV的推进***的指令,以便使其沿着所述路径行进至初始位置。例如,所述路径可以包括针对UAV的一系列空间位置和方向信息,其可被转换成控制信号以将UAV的飞行从当前位置引导至初始位置。在一些实施方式中,当UAV沿着路径导航时,其可以检测沿着该路径的、阻碍其飞行的一个或多个障碍物。在这样的情况下,可以修改路径以避开障碍物,以便允许UAV继续航行至初始位置,例如,使用前文关于方法500所描述的技术。
图7图示了根据许多实施方式中的用于在避开障碍物的同时控制UAV返航至初始位置的方法700。类似于方法500,方法700可以按半自动化或全自动化方式作为UAV自动返航功能的一部分来执行。方法700的至少一些步骤可以由与UAV相关联的一个或多个处理器来执行。
在步骤710中,使用多个传感器中的至少一个传感器来确定UAV的初始位置。可选地,可以使用多种不同的传感器类型来确定初始位置。位置信息可以包括关于UAV的位置(例如,高度、纬度、经度)和/或方向(例如,横滚、俯仰、偏航)的信息。可以相对于全局坐标系(例如,地理坐标系)或局部坐标系(例如,相对于UAV)来提供位置信息。
在步骤720中,生成第一信号以使UAV在环境内航行,例如,至不同于初始位置的位置。如前文所述,可以基于用户输入、由自主控制***提供的指令或者其合适的组合来生成第一信号。
在步骤730中,使用所述多个传感器中的至少一个传感器来接收关于所述环境的感测数据。可选地,可以从与在步骤710中使用的传感器不同的传感器接收感测数据。如上文所述,可以通过使用合适的基于传感器融合的方法组合来自不同传感器类型的感测信号,以生成感测数据。在一些实施方式中,经融合的传感器数据可以用于产生有代表性的环境地图,诸如前文所讨论的实施方式。
在步骤740中,接收返航至初始位置的指令。返航指令可以由用户向遥控器中输入并于随后传输至UAV。或者,该指令可以由UAV自动生成,诸如由机载处理器和/或控制器生成。在一些实施方式中,可以独立于任何用户输入而生成所述指令,例如,在UAV检测到用户设备与UAV之间已经失去通信的情况下、当已经发生故障或紧急情况时等。
在步骤750中,生成第二信号以使UAV沿着一路径返航至所述初始位置,其中当所述多个传感器中的至少一个传感器检测到沿着路径的障碍物时,修改该路径以避开障碍物。可选地,用以检测障碍物的传感器可以不同于在步骤710和/或步骤730中使用的传感器。可以基于由多种不同的传感器类型生成的感测数据来检测障碍物。在一些实施方式中,可以使用基于传感器数据而产生的环境地图(例如,占据网格地图)来检测障碍物。环境地图可以是先前已经生成的(例如,基于在步骤730中收集的感测数据),或者可以是随着UAV沿着路径航行而实时生成的。可以使用各种方法来修改路径以便防止UAV与检测到的障碍物(诸如前文关于方法500所描述的那些障碍物)相碰撞。可以基于所获取的感测数据和/或环境地图中所表示的障碍物信息,来执行对经修正路径的确定。
图8A和图8B图示了根据实施方式中的用于使用航点来控制UAV返航至初始位置的算法800。算法800可以由用于控制UAV的操作的合适的处理器和/或控制器来执行。算法800的一个或多个步骤可以自动执行,从而为UAV提供自动返航功能。
在步骤802中UAV飞行开始(例如,起飞)之后,在步骤804中作出关于UAV飞行是否已经结束的确定。所述确定可以基于UAV是否已经降落(例如,降落在诸如地面等表面上)、UAV的推进***是否已经关闭、用户是否已经提供飞行结束的指令等。如果飞行已经结束,则在步骤806处结束算法800。否则,算法800继续至步骤808,以便确定UAV的当前位置(例如,纬度、经度、高度)。如前文所述,可以使用一个或多个传感器(其中至少一些具有不同的类型)来确定当前位置。例如,UAV可以包括GPS传感器和另一传感器类型,诸如视觉传感器。视觉感测数据可以与GPS感测数据相结合使用或者替代GPS感测数据,以便补偿当GPS传感器不能够提供可靠的感测数据时的情况(例如,在与GPS卫星的通信可能不够理想的室内和/或低空环境中、在GPS传感器尚未建立与GPS卫星的通信的飞行开始时)。因此,通过GPS感测数据与视觉感测数据的组合使用,可以提高定位准确度。可选地,可以使用支持相对于全局坐标系或局部坐标系而定位UAV的环境地图来确定当前位置。如上文所述,可以使用传感器融合技术来生成环境地图。
在步骤810中,将当前位置信息储存在合适的数据结构中,诸如位置信息列表中。位置列表可以用于储存由UAV先前行进过的一组位置,这在本文中可以称为“航点”。航点可以按顺序储存,从而提供对UAV行进过的飞行路径的表示。在这样的实施方式中,储存在位置列表中的第一航点对应于UAV的初始位置,而位置列表中的最后的航点对应于UAV最近的位置。因此,如下文所述,可以按倒序(从最后的航点到第一航点)历经所储存的航点,以便使UAV返航至初始位置。
在步骤812中,作出关于UAV是否应当启动自动返航功能以便返航至对应于位置列表中储存的第一航点的初始位置的确定。如前文所述,自动返航决定可以自动地作出或者基于用户输入而作出。如果自动返航功能未启动,则算法800返回至步骤804以开始航点确定和存储的下一迭代。在一些实施方式中,可以按期望频率(例如,连续地,以预定时间间隔,诸如每0.5s、1s、2s、5s、10s、20s或30s一次)按顺序重复步骤804、步骤808、步骤810和步骤812,以便在UAV飞行期间生成和储存一系列先前行进过的航点。如下文关于图8B所进一步详述,一旦在步骤812中确定UAV应当自动返航,则在步骤814中执行自动返航功能。在自动返航功能完成之后,算法800结束于步骤806。
图8B图示了根据实施方式的算法800的步骤814的子步骤。在步骤816处启动自动返航功能之后,在步骤818中作出关于位置列表(航点列表)是否为空的确定。如果列表为空,这表明UAV已经到达初始位置并且自动返航功能在步骤820中完成。如果列表不为空,这表明UAV尚未到达初始位置。在这样的情况下,继而在步骤822中从位置列表检索下一目标位置(航点)。
继而在步骤824中确定UAV的当前位置。可以使用本文所描述的任何方法,诸如使用多传感器融合和/或环境地图构建,来确定当前位置。在一些实施方式中,确定当前位置与检索到的目标位置之间的空间关系,以便生成当前位置与目标位置之间的飞行路径。如前文所述,可以基于环境地图构建数据来生成飞行路径以便避开潜在的飞行阻碍物。
在步骤826中,将UAV从当前位置航行至目标位置,例如,使用在步骤824中生成的飞行路径。随着UAV朝向目标位置移动,其可以获取和处理传感器数据以确定是否存在任何阻碍其飞行的障碍物。例如,传感器数据可以用于提供包含如上文所讨论的障碍物占据信息的局部环境地图。可以用于提供障碍物信息的示例性传感器包括视觉传感器、激光雷达传感器、超声传感器等。基于传感器数据,在步骤828中作出关于是否已经检测到障碍物的确定。如果没有检测到阻碍物,则UAV完成其向目标位置的航行,并且自动返航功能继续至步骤818以开始下一迭代。如果已经检测到障碍物,则如步骤830中所指示,确定并执行合适的避障机动。例如,可以修改飞行路径(例如,基于环境地图数据),以使得UAV航行至目标位置而不与检测到的障碍物相碰撞。
图9A和图9B图示了根据实施方式中的用于使用拓扑地图来控制UAV返航至目标位置的算法900。类似于算法800,算法900可以由用于控制UAV的操作的合适的处理器和/或控制器来执行。算法900的一个或多个步骤可以自动执行,从而为UAV提供自动返航功能。
类似于算法800的步骤802,步骤902中UAV飞行开始(例如,起飞)之后,在步骤904中作出关于UAV飞行是否已经结束的确定。如果飞行已经结束,则在步骤906处结束算法900。否则,算法900继续至步骤908,以便确定UAV的当前位置以及关于该UAV周围环境的环境信息。在一些实施方式中,如前文所述,环境信息包括关于一个或多个环境物体的空间排列、几何结构和/或特性的信息。可以使用从一个或多个传感器获取的感测数据来确定当前位置和/或环境信息。可选地,可以使用传感器融合技术来处理和组合来自不同传感器类型的感测数据,以便提高感测结果的可靠性和准确度。例如,可以从GPS传感器和至少一种其他传感器类型(例如,视觉传感器、激光雷达传感器和/或超声传感器)来获取感测数据。
在步骤910中,将当前位置和环境信息添加至表示操作环境的拓扑地图。在备选实施方式中,还可以使用其他类型的地图(例如,诸如网格地图等尺度地图)。拓扑地图可以用于储存对应于UAV先前行进过的位置的位置信息,从而提供UAV的飞行路径的记录。另外,根据前文所描述的实施方式,拓扑地图可以用于描绘各个环境位置之间的连通性。可选地,拓扑地图还可以包含尺度信息,诸如指示出所表示的位置之间的距离的信息,以及指示出环境物体的空间位置和几何结构的信息。可以在UAV飞行期间生成拓扑地图的至少一些部分,例如,使用多传感器地图构建。备选地或组合地,拓扑地图的一个或多个部分可以在UAV的操作之前生成并被提供给UAV(例如,从遥控器传输和/或储存在机载存储器中)。在后一实施方式中,可以在UAV操作期间基于收集到的传感器数据而精化或修改拓扑地图,以便反映当前环境信息。
类似于算法800的步骤812,在步骤912中,作出关于UAV是否应当启动自动返航功能以便返航至目标位置的确定。如果自动返航功能未启动,则算法900返回至步骤904。可以按期望频率(例如,连续地,以预定时间间隔,诸如每0.5s、1s、2s、5s、10s、20s或30s一次)按顺序重复步骤904、步骤908、步骤910和步骤912,以便随着UAV在环境内航行而用最近的位置和环境信息来更新拓扑地图。如下文参照图9B所进一步详述,一旦在步骤912中确定UAV应当自动返航,则在步骤914中执行自动返航功能。在自动返航功能完成之后,算法900结束于步骤906。
图9B图示了根据实施方式的算法900的步骤914的子步骤。在步骤916处启动自动返航功能之后,在步骤918中作出关于UAV是否已经到达目标位置的确定。目标位置可以是由用户指定的或者由UAV自动确定的位置。目标位置可以是UAV先前已经行进过的位置,诸如在飞行开始时UAV的初始位置(例如,起飞的位置)。或者,目标位置可以是UAV先前尚未行进过的位置。如果确定UAV已经到达目标位置,则在步骤920中完成自动返航功能。否则,自动返航继续至步骤924。
在步骤924中,使用本文所描述的任何方法,诸如使用多传感器融合和/或环境地图构建,来确定UAV的当前位置。在步骤926中,确定对应于当前UAV位置的拓扑地图位置,从而相对于拓扑地图中所表示的环境信息而定位该UAV。基于拓扑地图,在步骤926中确定从当前位置到目标位置的飞行路径。在一些实施方式中,返航飞行路径的一个或多个部分可以对应于UAV先前行进过的飞行路径。或者,该飞行路径的一个或多个部分可以不同于UAV的先前飞行路径。可以基于任何合适的准则来确定飞行路径。例如,飞行路径可被配置用于避开环境障碍物。又例如,飞行路径可被配置用于使UAV为了到达目标位置而行进的总距离最小化。随后,在步骤928中,基于所确定的飞行路径来调节UAV飞行控制,以便使该UAV沿着所述飞行路径移动。例如,飞行路径可以指定UAV的一系列位置和/或方向,并且可以生成合适的控制信号并将其传输至UAV推进***以便使UAV采取指定的位置和/或方向。
如步骤930和步骤932中所描述,随着UAV朝向目标位置移动,其可以检测障碍物并酌情执行避障机动。用于执行障碍物检测和避障的技术可以分别与关于算法800的步骤828和步骤830的那些描述相似。可选地,障碍物检测和/或避障可以基于所生成的拓扑地图。例如,一旦已经辨别出障碍物,拓扑地图中所表示的环境信息来可用于确定对飞行路径的合适的修改以避免潜在的碰撞。
本文所描述的***、设备和方法可以适用于多种可移动物体。如前文所述,本文对飞行器的任何描述均可适用于和用于任何可移动物体。本发明的可移动物体可被配置用于在任何合适的环境内移动,诸如在空中(例如,固定翼航空器、旋翼航空器或者既不具有固定翼也不具有旋翼的航空器)、在水中(例如,船舶或潜艇)、在地面上(例如,机动车,诸如轿车、卡车、公交车、厢式货车、摩托车;可移动构造物或框架,诸如棒状物、钓鱼竿;或者火车)、在地下(例如,地铁)、在太空(例如,航天飞机、卫星或探测器),或者这些环境的任何组合。可移动物体可以是载具,诸如本文其他各处所描述的载具。在一些实施方式中,可移动物体可以安装在活体身上,诸如人类或动物。合适的动物可以包括禽类、犬类、猫类、马类、牛类、羊类、猪类、海豚、啮齿类或昆虫。
可移动物体可以能够在所述环境内关于六个自由度(例如,三个平移自由度和三个旋转自由度)而自由移动。或者,可移动物体的移动可能关于一个或多个自由度受到约束,诸如由预定路径、轨迹或方向所约束。所述移动可以由任何合适的致动机构所致动,诸如引擎或马达。可移动物体的致动机构可以由任何合适的能源提供动力,例如电能、磁能、太阳能、风能、引力能、化学能、核能或者其中任何合适的组合。可移动物体可以如本文其他各处所述,经由推进***而自推进。所述推进***可以可选地依靠一种能源运行,例如电能、磁能、太阳能、风能、引力能、化学能、核能或者其中任何合适的组合。可选地,可移动物体可以由生物所携带。
在一些情况下,所述可移动物体可以是载具。合适的载具可以包括水上载具、飞行器、太空载具或地面载具。例如,飞行器可以是固定翼航空器(例如,飞机、滑翔机)、旋翼航空器(例如,直升机、旋翼飞机)、同时具有固定翼和旋翼的航空器、或者既无固定翼又无旋翼的航空器(例如,飞艇、热气球)。载具可以是自推进式,诸如在空中、在水上或水中、在太空中或者在地上或地下自推进。自推进式载具可以利用推进***,诸如包括一个或多个引擎、马达、轮子、轮轴、磁体、旋翼、螺旋桨、桨叶、喷嘴或者其中任何合适组合的推进***。在一些情况下,推进***可以用于使可移动物体能够从一表面起飞、降落在一表面上、保持其当前位置和/或方向(例如,悬停)、改变定向和/或改变位置。
可移动物体可以由用户遥控或者由可移动物体之内或之上的乘员在本地控制。在一些实施方式中,可移动物体是无人的可移动物体,诸如UAV。无人的可移动物体(诸如UAV)可以不搭乘操作者在可移动物体上。可移动物体可以由人类或自主控制***(例如,计算机控制***),或者其任何合适的组合来控制。可移动物体可以是自主式或半自主式机器人,诸如配置有人工智能的机器人。
可移动物体可以具有任何合适的大小和/或尺寸。在一些实施方式中,可移动物体可以具有能容纳人类乘员身处载具之内或之上的大小和/或尺寸。或者,可移动物体可以具有比能够容纳人类乘员身处载具之内或之上的大小和/或尺寸更小的大小/或尺寸。可移动物体可以具有适合于由人类搬运或携带的大小和/或尺寸。或者,可移动物体可以大于适合由人类搬运或携带的大小和/或尺寸。在一些情况下,可移动物体可以具有的最大尺寸(例如,长度、宽度、高度、直径、对角线)小于或等于约:2cm、5cm、10cm、50cm、1m、2m、5m或10m。该最大尺寸可以大于或等于约:2cm、5cm、10cm、50cm、1m、2m、5m或10m。例如,可移动物体的相对的旋翼的轴之间的距离可以小于或等于约:2cm、5cm、10cm、50cm、1m、2m、5m或10m。或者,相对的旋翼的轴之间的距离可以大于或等于约:2cm、5cm、10cm、50cm、1m、2m、5m或10m。
在一些实施方式中,可移动物体可以具有小于100cm x 100cm x 100cm、小于50cmx 50cm x 30cm或小于5cm x 5cm x 3cm的体积。可移动物体的总体积可以小于或等于约:1cm3、2cm3、5cm3、10cm3、20cm3、30cm3、40cm3、50cm3、60cm3、70cm3、80cm3、90cm3、100cm3、150cm3、200cm3、300cm3、500cm3、750cm3、1000cm3、5000cm3、10,000cm3、100,000cm3、1m3或10m3。相反地,可移动物体的总体积可以大于或等于约:1cm3、2cm3、5cm3、10cm3、20cm3、30cm3、40cm3、50cm3、60cm3、70cm3、80cm3、90cm3、100cm3、150cm3、200cm3、300cm3、500cm3、750cm3、1000cm3、5000cm3、10,000cm3、100,000cm3、1m3或10m3。
在一些实施方式中,可移动物体可以具有的占地面积(这可以指由所述可移动物体所包围的横截面面积)小于或等于约:32,000cm2、20,000cm2、10,000cm2、1,000cm2、500cm2、100cm2、50cm2、10cm2或5cm2。相反地,所述占地面积可以大于或等于约:32,000cm2、20,000cm2、10,000cm2、1,000cm2、500cm2、100cm2、50cm2、10cm2或5cm2。
在一些情况下,可移动物体可以不超过1000kg重。可移动物体的重量可以小于或等于约:1000kg、750kg、500kg、200kg、150kg、100kg、80kg、70kg、60kg、50kg、45kg、40kg、35kg、30kg、25kg、20kg、15kg、12kg、10kg、9kg、8kg、7kg、6kg、5kg、4kg、3kg、2kg、1kg、0.5kg、0.1kg、0.05kg或0.01kg。相反地,所述重量可以大于或等于约:1000kg、750kg、500kg、200kg、150kg、100kg、80kg、70kg、60kg、50kg、45kg、40kg、35kg、30kg、25kg、20kg、15kg、12kg、10kg、9kg、8kg、7kg、6kg、5kg、4kg、3kg、2kg、1kg、0.5kg、0.1kg、0.05kg或0.01kg。
在一些实施方式中,可移动物体相对于被该可移动物体所携带的负载可以较小。如下文进一步详述,所述负载可以包括载荷和/或载体。在一些示例中,可移动物体的重量与负载重量之比可以大于、小于或等于约1:1。在一些情况下,可移动物体的重量与负载重量之比可以大于、小于或等于约1:1。可选地,载体重量与负载重量之比可以大于、小于或等于约1:1。当需要时,可移动物体的重量与负载重量之比可以小于或等于:1:2、1:3、1:4、1:5、1:10或者甚至更小。相反地,可移动物体的重量与负载重量之比还可以大于或等于:2:1、3:1、4:1、5:1、10:1或者甚至更大。
在一些实施方式中,可移动物体可以具有低能耗。例如,可移动物体可以使用小于约:5W/h、4W/h、3W/h、2W/h、1W/h或更小。在一些情况下,可移动物体的载体可以具有低能耗。例如,所述载体可以使用小于约:5W/h、4W/h、3W/h、2W/h、1W/h或更小。可选地,可移动物体的载荷可以具有低能耗,诸如小于约:5W/h、4W/h、3W/h、2W/h、1W/h或更小。
图10图示了根据本发明的实施方式的UAV 1000。该UAV可以是本文所述的可移动物体的示例。UAV 1000可以包括具有四个旋翼1002、1004、1006和1008的推进***。可以提供任何数目的旋翼(例如,一个、两个、三个、四个、五个、六个或更多个)。所述旋翼可以是本文其他各处所述的自紧式旋翼的实施方式。无人飞行器的旋翼、旋翼总成或其他推进***可使该无人飞行器能够悬停/保持位置、改变定向和/或改变位置。相对的旋翼的轴之间的距离可以是任何合适的长度1010。例如,长度1010可以小于或等于2m,或者小于或等于5m。在一些实施方式中,长度1010可以在从40cm到1m、从10cm到2m或者从5cm到5m的范围内。本文对UAV的任何描述均可适用于可移动物体,诸如不同类型的可移动物体,并且反之亦然。
在一些实施方式中,可移动物体可以被配置用于携带负载。该负载可以包括乘客、货物、设备、仪器等之中的一种或多种。该负载可以提供在外壳内。该外壳可以与可移动物体的外壳相分离,或者是可移动物体的外壳的一部分。或者,可移动物体不具有外壳时负载可以具备外壳。或者,该负载的一部分或者整个该负载均可以不具有外壳。负载可以相对于所述可移动物体刚性固定。可选地,负载可以是相对于可移动物体是可以移动的(例如,可以相对于可移动物体平移或旋转)。
在一些实施方式中,负载包括载荷。所述载荷可被配置成不执行任何操作或功能。或者,载荷可以是被配置用于执行操作或功能,亦称为功能性载荷。例如,载荷可以包括一个或多个传感器,用于勘测一个或多个目标。可以向载荷中合并任何合适的传感器,诸如图像捕捉设备(例如,相机)、音频捕捉设备(例如,抛物面麦克风)、红外成像设备或紫外成像设备。所述传感器可以提供静态感测数据(例如,照片)或动态感测数据(例如,视频)。在一些实施方式中,传感器提供针对载荷的目标的感测数据。备选地或组合地,载荷可以包括一个或多个发射器,用于向一个或多个目标提供信号。可以使用任何合适的发射器,诸如照明源或声源。在一些实施方式中,载荷包括一个或多个收发器,诸如用于与远离可移动物体的模块通信。可选地,载荷可被配置用于与环境或目标相互作用。例如,载荷可以包括能够操纵物体的工具、仪器或机构,诸如机械臂。
可选地,负载可以包括载体。可以提供载体用于载荷,并且所述载荷可经由该载体直接地(例如,直接接触可移动物体)或间接地(例如,不接触可移动物体)耦合至可移动物体。相反地,载荷可在无需载体的情况下安装于可移动物体上。载荷可以与载体一体形成。或者,载荷可以可拆卸地耦合至载体。在一些实施方式中,载荷可以包括一个或多个载荷元件,并且所述载荷元件中的一个或多个可以如上文所述是相对于可移动物体和/或载体可移动的。
载体可以与可移动物体一体形成。或者,载体可以可拆卸地耦合至可移动物体。载体可以直接地或间接地耦合至可移动物体。载体可以向载荷提供支撑(例如,承载所述载荷的至少一部分重量)。载体可以包括合适的安装构造物(例如,云台平台),其能够稳定和/或引导载荷的移动。在一些实施方式中,载体可以适于控制载荷相对于可移动物体的状态(例如,位置和/或方向)。例如,载体可被配置用于相对于可移动物体而移动(例如,关于一个、两个或三个平移度以及/或者一个、两个或三个旋转度),以使得载荷保持其相对于合适的参考系的位置和/或方向,与可移动物体的移动无关。所述参考系可以是固定参考系(例如,周围环境)。或者,所述参考系可以是移动参考系(例如,可移动物体、载荷目标)。
在一些实施方式中,载体可被配置用于允许载荷相对于载体和/或可移动物体的移动。所述移动可以是关于多达三个自由度的平移(例如,沿着一个、两个或三个轴线)或者是关于多达三个自由度的旋转(例如,围绕一个、两个或三个轴线),或者是其任何合适的组合。
在一些情况下,载体可以包括载体框架总成以及载体致动总成。所述载体框架总成可以向载荷提供构造物支撑。载体框架总成可以包括单个的载体框架元件,其中一些元件可以是可相对于彼此移动的。所述载体致动总成可以包括一个或多个致动器(例如,马达),所述致动器致动单个载体框架元件的移动。致动器可以允许多个载体框架元件同时移动,或者可被配置用于每次允许单一载体框架元件的移动。载体框架元件的移动可以产生载荷的对应移动。例如,载体致动总成可以致动一个或多个载体框架元件围绕一个或多个旋转轴(例如,横滚(roll)轴、俯仰(pitch)轴或偏航(yaw)轴)的旋转。所述一个或多个载体框架元件的旋转可以使载荷相对于可移动物体围绕一个或多个旋转轴旋转。备选地或组合地,载体致动总成可以致动一个或多个载体框架元件沿着一个或多个平移轴的平移,并从而产生载荷相对于可移动物体沿着一个或多个对应的轴的平移。
在一些实施方式中,可移动物体、载体和载荷相对于固定参考系(例如,周围环境)和/或相对于彼此的移动可以由终端来控制。所述终端可以是处于远离所述可移动物体、载体和/或载荷的位置处的遥控设备。终端可以安置于或者固定在支撑平台上。或者,终端可以是手持式或可穿戴式设备。例如,终端可以包括智能电话、平板计算机、笔记本电脑、计算机、眼镜、手套、头盔、麦克风或者其合适的组合。终端可以包括用户接口,诸如键盘、鼠标、操纵杆、触摸屏或显示器。任何合适的用户输入均可用于与终端交互,诸如手动输入指令、语音控制、手势控制或位置控制(例如,经由终端的移动、定位或倾斜)。
终端可以用于控制可移动物体、载体和/或载荷的任何合适的状态。例如,终端可以用于控制可移动物体、载体和/或载荷相对于固定参考物从和/或向彼此的位置和/或方向。在一些实施方式中,终端可以用于控制可移动物体、载体和/或载荷的单个元件,诸如载体的致动总成、载荷的传感器或者载荷的发射器。终端可以包括适于与可移动物体、载体或载荷中的一个或多个相通信的无线通信设备。
终端可以包括一个合适的显示单元,用于查看可移动物体、载体和/或载荷的信息的。例如,终端可被配置用于显示可移动物体、载体和/或载荷的信息,所述信息关于位置、平移速度、平移加速度、方向、角速度、角加速度或其任何合适的组合。在一些实施方式中,终端可以显示由载荷提供的信息,诸如由功能性载荷提供的数据(例如,由相机或其他图像捕捉设备记录的图像)。
可选地,同一终端可以同时控制可移动物体、载体和/或载荷或者所述可移动物体、载体和/或载荷的状态,以及接收和/或显示来自所述可移动物体、载体和/或载荷的信息。例如,终端可以控制载荷相对于环境的定位,同时显示由载荷捕捉的图像数据,或者关于载荷的位置的信息。或者,不同的终端可以用于不同的功能。例如,第一终端可以控制可移动物体、载体和/或载荷的移动或状态,而第二终端可以接收和/或显示来自可移动物体、载体和/或载荷的信息。例如,第一终端可以用于控制载荷相对于环境的定位,而第二终端显示由该载荷捕捉的图像数据。多种通讯模式可以应用于一个可移动物体与一个集成终端之间,该集成终端既控制该可移动物体又接收数据,或者,多种通讯模式可以应用于该可移动物体与多个终端之间,该多个终端既控制该可移动物体又接收数据。。例如,在可移动物体与同时控制该可移动物体并接收来自该可移动物体的数据的终端之间,可以形成至少两种不同的通信模式。
图11图示了根据实施方式中的包括载体1102和载荷1104的可移动物体1100。虽然可移动物体1100被描绘为飞行器,但这样的描绘并不以此为限制,并且如前文所述可以使用任何合适类型的可移动物体。本领域技术人员将会理解,本文在航空器***的情景下描述的任何实施方式均可适用于任何合适的可移动物体(例如,UAV)。在一些情况下,可以在可移动物体1100上提供载荷1104而无需载体1102。可移动物体1100可以包括推进机构1106、感测***1108和通信***1110。
如前文所述,推进机构1106可以包括旋翼、螺旋桨、桨叶、引擎、马达、轮子、轴、磁体或喷嘴中的一种或多种。例如,推进机构1106可以如本文其他各处所公开,是自紧式旋翼、旋翼总成或其他旋转推进单元。可移动物体可以具有一个或多个、两个或更多个、三个或更多个或者四个或更多个推进机构。推进机构可以全都是同一类型。或者,一个或多个推进机构可以是不同类型的推进机构。推进机构1106可以使用任何合适的装置而安装在可移动物体1100上,所述装置诸如为本文其他各处所述的支撑元件(例如,驱动轴)。推进机构1106可以安装在可移动物体1100的任何合适的部分上,诸如顶部、底部、前面、后面、侧面或其合适的组合。
在一些实施方式中,推进机构1106可以使得可移动物体1100能够从一个表面垂直地起飞或者垂直地降落在一个表面上,而无需可移动物体1100的任何水平移动(例如,无需沿着跑道行进)。可选地,推进机构1106可以可操作地允许可移动物体1100以指定位置和/或方向悬停于空中。一个或多个推进机构1100可以独立于其他推进机构得到控制。或者,推进机构1100可被配置成同时受到控制。例如,可移动物体1100可以具有多个水平定向的旋翼,所述旋翼可以向该可移动物体提供升力和/或推力。可以致动所述多个水平定向的旋翼以向可移动物体1100提供垂直起飞、垂直降落以及悬停能力。在一些实施方式中,所述水平定向的旋翼中的一个或多个可以在顺时针方向上旋转,同时所述水平旋翼中的一个或多个可以在逆时针方向上旋转。例如,顺时针旋翼的数目可以等于逆时针旋翼的数目。每个水平定向的旋翼的旋转速率可独立地改变,以便控制由每个旋翼产生的升力和/或推力,并从而调节可移动物体1100的空间排列、速度和/或加速度(例如,关于多达三个平移自由度和多达三个旋转自由度)。
感测***1108可以包括一个或多个传感器,所述传感器可以感测可移动物体1100的空间排列、速度和/或加速度(例如,关于多达三个平移自由度和多达三个旋转自由度)。所述一个或多个传感器可以包括全球定位***(GPS)传感器、运动传感器、惯性传感器、距离传感器或图像传感器。由感测***1208提供的感测数据可以用于控制可移动物体1100的空间排列、速度和/或方向(例如,使用合适的处理单元和/或控制模块,如下文所述)。或者,感测***1108可以用于提供关于可移动物体周围环境的数据,诸如气象条件、距潜在障碍物的距离、地理特征的位置、人造构造物的位置等。
通信***1110支持经由无线信号1116与具有通信***1114的终端1112的通信。通信***1110、通信***1114可以包括任何数目的适合于无线通信的发射器、接收器和/或收发器。所述通信可以是单向通信,使得数据只能在一个方向上传输。例如,单向通信可以仅涉及可移动物体1100向终端1112传输数据,或者反之亦然。数据可以从通信***1110的一个或多个发射器传输至通信***1112的一个或多个接收器,或者反之亦然。或者,所述通信可以是双向通信,使得数据在可移动物体1100与终端1112之间的两个方向上均可传输。双向通信可以涉及从通信***1110的一个或多个发射器向通信***1114的一个或多个接收器传输数据,并且反之亦然。
在一些实施方式中,终端1112可以向可移动物体1100、载体1102和载荷1104中的一个或多个提供控制数据,以及从可移动物体1100、载体1102和载荷1104中的一个或多个接收信息(例如,可移动物体、载体或载荷的位置和/或运动信息;由载荷感测的数据,诸如由载荷相机捕捉的图像数据)。在一些情况下,来自终端的控制数据可以包括针对可移动物体、载体和/或载荷的相对位置、移动、致动或控制的指令。例如,控制数据可以导致可移动物体的位置和/或定向的修改(例如,经由推进机构1106的控制),或者载荷相对于可移动物体的移动(例如,经由载体1102的控制)。来自终端的控制数据可以导致对载荷的控制,诸如对相机或其他图像捕捉设备的操作的控制(例如,拍摄静态或移动图片、放大或缩小、开启或关闭、切换成像模式、改变图像分辨率、改变聚焦、改变景深、改变曝光时间、改变视角或视野)。在一些情况下,来自可移动物体、载体和/或载荷的通信可以包括来自一个或多个传感器(例如,感测***1108的或载荷1104的传感器)的信息。所述通信可以包括来自一个或多个不同类型的传感器(例如,GPS传感器、运动传感器、惯性传感器、距离传感器或图像传感器)的感测到的信息。这样的信息可以关于可移动物体、载体和/或载荷的位置(例如,位置、方向)、移动或加速度。来自载荷的这样的信息可以包括由该载荷捕捉的数据或感测到的该载荷的状态。由终端1112提供并传输的控制数据可被配置用于控制可移动物体1100、载体1102或载荷1104中的一个或多个的状态。备选地或组合地,载体1102和载荷1104还可以各自包括通信模块,该通信模块被配置用于与终端1112通信,以使得该终端可独立地与可移动物体1100、载体1102和载荷1104中的每一个通信和对其加以控制。
在一些实施方式中,可移动物体1100可被配置用于与另一远程设备相通信——附加于终端1112或代替终端1112。终端1112也可被配置用于与另一远程设备以及可移动物体1100相通信。例如,可移动物体1100和/或终端1112可以与另一可移动物体或者另一可移动物体的载体或载荷相通信。当需要时,所述远程设备可以是第二终端或其他计算设备(例如,计算机、笔记本电脑、平板计算机、智能电话或其他移动设备)。远程设备可被配置用于向可移动物体1100传输数据、从可移动物体1100接收数据、向终端1112传输数据以及/或者从终端1112接收数据。可选地,远程设备可以连接至因特网或其他电信网络,以使得从可移动物体1100和/或终端1112接收的数据可被上传至网站或服务器。
图12是根据实施方式中的用于控制可移动物体的***1200的通过框图来说明的示意图。***1200可以与本文所公开的***、设备和方法的任何合适的实施方式结合使用。***1200可以包括感测模块1202、处理单元1204、非易失性计算机可读介质1206、控制模块1208和通信模块1210。
感测模块1202可以利用不同类型的传感器来通过不同方式收集与可移动物体有关的信息。不同类型的传感器可以感测不同类型的信号或者来自不同来源的信号。例如,所述传感器可以包括惯性传感器、GPS传感器、距离传感器(例如,激光雷达)或视觉/图像传感器(例如,相机)。感测模块1202可以有效地耦合至具有多个处理器的处理单元1204。在一些实施方式中,感测模块可以有效地耦合至传输模块1212(例如,Wi-Fi图像传输模块),该传输模块被配置用于向合适的外部设备或***直接传输感测数据。例如,传输模块1212可以用于向远程终端传输由感测模块1202的相机捕捉的图像。
处理单元1204可以具有一个或多个处理器,诸如可编程处理器(例如,中央处理器(central processing unit,CPU))。处理单元1204可以有效地耦合至非易失性计算机可读介质1206。非易失性计算机可读介质1206可以储存可由处理单元1204执行的逻辑、代码和/或程序指令,用以执行一个或多个步骤。非易失性计算机可读介质可以包括一个或多个存储器单元(例如,可移动介质或外部存储器,诸如SD卡或随机存取存储器(random accessmemory,RAM))。在一些实施方式中,来自感测模块1202的数据可直接传送至并储存于非易失性计算机可读介质1206的存储器单元内。非易失性计算机可读介质1206的存储器单元可以储存可由处理单元1204执行的逻辑、代码和/或程序指令,用以执行本文所描述的方法的任何合适的实施方式。例如,处理单元1204可被配置用于执行指令,从而使处理单元1204的一个或多个处理器分析由感测模块产生的感测数据。存储器单元可以储存要由处理单元1204处理的、来自感测模块的感测数据。在一些实施方式中,非易失性计算机可读介质1206的存储单元可以用于储存由处理单元1204产生的处理结果。
在一些实施方式中,处理单元1204可以有效地耦合至控制模块1208,该控制模块1208被配置用于控制可移动物体的状态。例如,控制模块1208可被配置用于控制可移动物体的推进机构以调节可移动物体关于六个自由度的空间排列、速度和/或加速度。备选地或组合地,控制模块1208可以控制载体、载荷或感测模块的状态中的一个或多个。
处理单元1204可以有效地耦合至通信模块1210,该通信模块1210被配置用于传输数据和/或接收来自一个或多个外部设备(例如,终端、显示设备或其他遥控器)的数据。可以使用任何合适的通信手段,诸如有线通信或无线通信。例如,通信模块1210可以利用局域网(local area networks,LAN)、广域网(wide area networks,WAN)、红外线、无线电、WiFi、点对点(Point-to-Point,P2P)网络、电信网络、云通信等之中的一种或多种。可选地,可以使用中继站,诸如塔、卫星或移动台。无线通信可以依赖于距离或独立于距离。在一些实施方式中,通信可能需要或者可能不需要视线。通信模块1210可以传输和/或接收来自感测模块1202的感测数据、由处理单元1204产生的处理结果、预定控制数据、来自终端或遥控器的用户命令等之中的一个或多个。
***1200的组件可以按任何合适的配置来布置。例如,***1200的一个或多个组件可以位于可移动物体、载体、载荷、终端、感测***或与上述的一个或多个相通信的附加的外部设备上。此外,虽然图12描绘了单一处理单元1204和单一非易失性计算机可读介质1206,但本领域技术人员将会理解,这并不局限于此,并且***1200可以包括多个处理单元和/或非易失性计算机可读介质。在一些实施方式中,所述多个处理单元和/或非易失性计算机可读介质中的一个或多个可以位于不同的位置,诸如在可移动物体、载体、载荷、终端、感测模块、与上述的一个或多个相通信的附加的外部设备上或其合适的组合,以使得由***1200执行的处理和/或存储器功能的任何合适的方面可以发生于一个或多个上述位置处。
本文中使用的A和/或B包含A或B中的一个或多个以及其组合,诸如A和B。
虽然本文已经示出和描述了本发明的优选实施方式,但对于本领域技术人员显而易见的是,这样的实施方式只是以示例的方式提供的。本领域技术人员现将会在不偏离本发明的情况下想到许多更改、改变和替代。应当理解,在实践本发明的过程中可以采用对本文所描述的本发明实施方式的各种替代方案。以下权利要求旨在限定本发明的范围,并因此覆盖这些权利要求范围内的方法、结构及其等效项。
Claims (42)
1.一种用于在环境内控制可移动物体的方法,所述方法包括:
生成第一信号以使所述可移动物体在所述环境内航行;
使用由所述可移动物体携带的多个传感器中的至少一个传感器来确定所述可移动物体的当前位置;
使用所述多个传感器中的所述至少一个传感器来接收所述可移动物体基于所述第一信号在所述环境内航行时关于所述环境的感测数据;
接收返航至返航位置的指令;以及
生成第二信号以使所述可移动物体返航至所述返航位置;
其中,生成所述第二信号包括:
基于所述感测数据,确定从所述当前位置返航至所述返航位置的、避开所述环境内的一个或多个障碍物的路径;
生成所述第二信号以使所述可移动物体沿着所述路径移动以返航至所述返航位置。
2.根据权利要求1所述的方法,其中,基于从与所述可移动物体通信的远程终端接收到的指令来生成所述第一信号。
3.根据权利要求2所述的方法,其中,所述指令由用户输入到所述远程终端中。
4.根据权利要求1所述的方法,其中,由所述可移动物体自主生成所述第一信号。
5.根据权利要求1所述的方法,其中,所述可移动物体被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。
6.根据权利要求1所述的方法,其中,所述多个传感器包括全球定位***(GPS)传感器。
7.根据权利要求1所述的方法,其中,所述多个传感器包括视觉传感器。
8.根据权利要求1所述的方法,其中,所述多个传感器包括距离传感器。
9.根据权利要求8所述的方法,其中,所述距离传感器包括以下至少一种:激光雷达传感器、超声传感器或飞行时间相机传感器。
10.根据权利要求1所述的方法,其中,使用传感器融合来确定所述可移动物体的当前位置。
11.根据权利要求10所述的方法,其中,使用滤波技术来执行所述传感器融合;所述滤波技术包括卡尔曼滤波。
12.根据权利要求10所述的方法,其中,通过所述传感器融合实现所述可移动物体的返航。
13.根据权利要求1所述的方法,其中,所述返航位置包括所述可移动物体先前行进过的位置。
14.根据权利要求1所述的方法,其中,所述返航位置不同于所述可移动物体先前行进到的位置。
15.根据权利要求1所述的方法,其中,所述返航位置是自动确定的,或者由用户指定。
16.根据权利要求1所述的方法,其中,触发返航功能包括下述情况之一:
接收到来自用户的返航指令;
失去与用户的遥控器的通信;
可移动物体电池电量低;
检测到可移动物体故障。
17.根据权利要求1所述的方法,其中,确定所述路径包括确定从所述当前位置到所述返航位置的最短路径。
18.根据权利要求1所述的方法,其中,所述路径包括由所述可移动物体先前行进过的一个或多个部分;
或者,
所述路径不同于由所述可移动物体先前行进过的路径。
19.根据权利要求1所述的方法,其中,所述路径是所述可移动物体的飞行路径。
20.根据权利要求19所述的方法,其中,所述路径包括所述可移动物体的空间位置和方向。
21.根据权利要求1所述的方法,其中,所述路径包括对应于所述可移动物体先前行进过的位置的多个航点,所述多个航点是当所述可移动物体在所述环境内航行时被记录的。
22.根据权利要求21所述的方法,其中,所述返航位置包括所述多个航点中的一个或多个航点。
23.根据权利要求22所述的方法,其中,当所述可移动物体在所述环境内航行时,实时地记录所述多个航点。
24.根据权利要求22所述的方法,其中,当所述可移动物体在所述环境内航行时,以预定时间间隔记录所述多个航点。
25.根据权利要求22所述的方法,其中,将所述多个航点储存在列表数据结构中。
26.一种用于在环境内控制可移动物体的***,所述***包括:
由所述可移动物体携带的多个传感器;以及
一个或多个处理器,其被单个地或共同地配置用于:
生成第一信号以使所述可移动物体在所述环境内航行;
使用由所述可移动物体携带的多个传感器中的至少一个传感器来确定所述可移动物体的当前位置;
使用所述多个传感器中的所述至少一个传感器来接收所述可移动物体基于所述第一信号在所述环境内航行时关于所述环境的感测数据;
接收返航至返航位置的指令;以及
生成第二信号以使所述可移动物体返航至所述返航位置;
其中,生成所述第二信号包括:
基于所述感测数据,确定从所述当前位置返航至所述返航位置的、避开所述环境内的一个或多个障碍物的路径;
生成所述第二信号以使所述可移动物体沿着所述路径移动以返航至所述返航位置。
27.一种用于在环境内控制无人飞行器的方法,所述方法包括:
生成第一信号以使所述无人飞行器在所述环境内航行;
使用由所述无人飞行器携带的多个传感器接收关于所述可移动物体基于所述第一信号在所述环境内航行时所述环境的至少一部分的感测数据;
使用所述感测数据来检测位于所述环境的所述部分中的一个或多个障碍物;以及
生成第二信号以使所述无人飞行器航行,以便避开所述一个或多个障碍物;
其中,生成所述第一信号包括为所述无人飞行器生成的飞行路径;生成第二信号包括基于所述感测数据来修改所述飞行路径,以便避开所述一个或多个障碍物。
28.根据权利要求27所述的方法,其中,基于从与所述无人飞行器通信的远程终端接收到的指令来生成所述第一信号。
29.根据权利要求28所述的方法,其中,所述指令由用户输入到所述远程终端中。
30.根据权利要求27所述的方法,其中,由所述无人飞行器自主生成所述第一信号。
31.根据权利要求27所述的方法,其中,所述无人飞行器被配置用于检测限制飞行区域的存在,并且不在所述限制飞行区域的预定距离内飞行。
32.根据权利要求27所述的方法,其中,所述多个传感器包括全球定位***(GPS)传感器。
33.根据权利要求27所述的方法,其中,所述多个传感器包括视觉传感器。
34.根据权利要求27所述的方法,其中,所述多个传感器包括距离传感器。
35.根据权利要求27所述的方法,其中,所述多个传感器包括至少两个不同类型的传感器。
36.根据权利要求34所述的方法,其中,所述距离传感器包括以下至少一种:激光雷达传感器、超声传感器或飞行时间相机传感器。
37.根据权利要求27所述的方法,其中,所述飞行路径被配置用于所述无人飞行器从当前位置返航至先前位置。
38.根据权利要求27所述的方法,其中,所述飞行路径包括对应于所述无人飞行器先前行进过的位置的多个航点,所述多个航点是当所述无人飞行器在所述环境内航行时被记录的。
39.根据权利要求38所述的方法,其中,当所述无人飞行器在所述环境内航行时,实时地记录所述多个航点。
40.根据权利要求38所述的方法,其中,当所述无人飞行器在所述环境内航行时,以预定时间间隔记录所述多个航点。
41.根据权利要求38所述的方法,其中,将所述多个航点储存在列表数据结构中。
42.一种用于在环境内控制无人飞行器的***,所述***包括:
由所述无人飞行器携带的多个传感器;以及
一个或多个处理器,其被单个地或共同地配置用于:
生成第一信号以使所述无人飞行器在所述环境内航行;
使用由所述无人飞行器携带的多个传感器接收关于所述可移动物体基于所述第一信号在所述环境内航行时所述环境的至少一部分的感测数据;
使用所述感测数据来检测位于所述环境的所述部分中的一个或多个障碍物;以及
生成第二信号以使所述无人飞行器航行,以便避开所述一个或多个障碍物;
其中,生成所述第一信号包括为所述无人飞行器生成的飞行路径;生成第二信号包括基于所述感测数据来修改所述飞行路径,以便避开所述一个或多个障碍物。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910354911.7A CN110174903B (zh) | 2014-09-05 | 2014-09-05 | 用于在环境内控制可移动物体的***和方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2014/086007 WO2016033797A1 (en) | 2014-09-05 | 2014-09-05 | Multi-sensor environmental mapping |
CN201480031173.8A CN105492985B (zh) | 2014-09-05 | 2014-09-05 | 一种用于在环境内控制可移动物体的***及方法 |
CN201910354911.7A CN110174903B (zh) | 2014-09-05 | 2014-09-05 | 用于在环境内控制可移动物体的***和方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201480031173.8A Division CN105492985B (zh) | 2014-09-05 | 2014-09-05 | 一种用于在环境内控制可移动物体的***及方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110174903A CN110174903A (zh) | 2019-08-27 |
CN110174903B true CN110174903B (zh) | 2023-05-09 |
Family
ID=55437449
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910354911.7A Active CN110174903B (zh) | 2014-09-05 | 2014-09-05 | 用于在环境内控制可移动物体的***和方法 |
CN202210350511.0A Pending CN114675671A (zh) | 2014-09-05 | 2014-09-05 | 多传感器环境地图构建 |
CN201480031173.8A Active CN105492985B (zh) | 2014-09-05 | 2014-09-05 | 一种用于在环境内控制可移动物体的***及方法 |
CN201811161897.0A Active CN109388150B (zh) | 2014-09-05 | 2014-09-05 | 多传感器环境地图构建 |
Family Applications After (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210350511.0A Pending CN114675671A (zh) | 2014-09-05 | 2014-09-05 | 多传感器环境地图构建 |
CN201480031173.8A Active CN105492985B (zh) | 2014-09-05 | 2014-09-05 | 一种用于在环境内控制可移动物体的***及方法 |
CN201811161897.0A Active CN109388150B (zh) | 2014-09-05 | 2014-09-05 | 多传感器环境地图构建 |
Country Status (7)
Country | Link |
---|---|
US (3) | US10429839B2 (zh) |
EP (3) | EP3855276A1 (zh) |
JP (1) | JP6235716B2 (zh) |
CN (4) | CN110174903B (zh) |
DK (1) | DK3428766T3 (zh) |
ES (1) | ES2876449T3 (zh) |
WO (1) | WO2016033797A1 (zh) |
Families Citing this family (451)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8798840B2 (en) * | 2011-09-30 | 2014-08-05 | Irobot Corporation | Adaptive mapping with spatial summaries of sensor data |
US10009065B2 (en) | 2012-12-05 | 2018-06-26 | At&T Intellectual Property I, L.P. | Backhaul link for distributed antenna system |
US9113347B2 (en) | 2012-12-05 | 2015-08-18 | At&T Intellectual Property I, Lp | Backhaul link for distributed antenna system |
US9999038B2 (en) | 2013-05-31 | 2018-06-12 | At&T Intellectual Property I, L.P. | Remote distributed antenna system |
US9525524B2 (en) | 2013-05-31 | 2016-12-20 | At&T Intellectual Property I, L.P. | Remote distributed antenna system |
WO2015108586A2 (en) | 2013-10-21 | 2015-07-23 | Kespry, Inc. | System and methods for execution of recovery actions on an unmanned aerial vehicle |
US8897697B1 (en) | 2013-11-06 | 2014-11-25 | At&T Intellectual Property I, Lp | Millimeter-wave surface-wave communications |
US9209902B2 (en) | 2013-12-10 | 2015-12-08 | At&T Intellectual Property I, L.P. | Quasi-optical coupler |
WO2015085483A1 (en) | 2013-12-10 | 2015-06-18 | SZ DJI Technology Co., Ltd. | Sensor fusion |
US10735902B1 (en) * | 2014-04-09 | 2020-08-04 | Accuware, Inc. | Method and computer program for taking action based on determined movement path of mobile devices |
US12007763B2 (en) | 2014-06-19 | 2024-06-11 | Skydio, Inc. | Magic wand interface and other user interaction paradigms for a flying digital assistant |
US9798322B2 (en) | 2014-06-19 | 2017-10-24 | Skydio, Inc. | Virtual camera interface and other user interaction paradigms for a flying digital assistant |
US9678506B2 (en) | 2014-06-19 | 2017-06-13 | Skydio, Inc. | Magic wand interface and other user interaction paradigms for a flying digital assistant |
US9692101B2 (en) | 2014-08-26 | 2017-06-27 | At&T Intellectual Property I, L.P. | Guided wave couplers for coupling electromagnetic waves between a waveguide surface and a surface of a wire |
EP3855276A1 (en) * | 2014-09-05 | 2021-07-28 | SZ DJI Technology Co., Ltd. | Multi-sensor environmental mapping |
CN105517666B (zh) | 2014-09-05 | 2019-08-27 | 深圳市大疆创新科技有限公司 | 基于情景的飞行模式选择 |
JP6181300B2 (ja) | 2014-09-05 | 2017-08-16 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 無人航空機の速度を制御するシステム |
US9768833B2 (en) | 2014-09-15 | 2017-09-19 | At&T Intellectual Property I, L.P. | Method and apparatus for sensing a condition in a transmission medium of electromagnetic waves |
US10063280B2 (en) | 2014-09-17 | 2018-08-28 | At&T Intellectual Property I, L.P. | Monitoring and mitigating conditions in a communication network |
JP6174258B2 (ja) * | 2014-09-30 | 2017-08-02 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 飛行指示方法、飛行指示装置及び航空機 |
US9615269B2 (en) | 2014-10-02 | 2017-04-04 | At&T Intellectual Property I, L.P. | Method and apparatus that provides fault tolerance in a communication network |
US9685992B2 (en) | 2014-10-03 | 2017-06-20 | At&T Intellectual Property I, L.P. | Circuit panel network and methods thereof |
US9503189B2 (en) | 2014-10-10 | 2016-11-22 | At&T Intellectual Property I, L.P. | Method and apparatus for arranging communication sessions in a communication system |
US9973299B2 (en) | 2014-10-14 | 2018-05-15 | At&T Intellectual Property I, L.P. | Method and apparatus for adjusting a mode of communication in a communication network |
US9762289B2 (en) | 2014-10-14 | 2017-09-12 | At&T Intellectual Property I, L.P. | Method and apparatus for transmitting or receiving signals in a transportation system |
US9780834B2 (en) | 2014-10-21 | 2017-10-03 | At&T Intellectual Property I, L.P. | Method and apparatus for transmitting electromagnetic waves |
US9520945B2 (en) | 2014-10-21 | 2016-12-13 | At&T Intellectual Property I, L.P. | Apparatus for providing communication services and methods thereof |
US9627768B2 (en) | 2014-10-21 | 2017-04-18 | At&T Intellectual Property I, L.P. | Guided-wave transmission device with non-fundamental mode propagation and methods for use therewith |
US9577306B2 (en) | 2014-10-21 | 2017-02-21 | At&T Intellectual Property I, L.P. | Guided-wave transmission device and methods for use therewith |
US9312919B1 (en) | 2014-10-21 | 2016-04-12 | At&T Intellectual Property I, Lp | Transmission device with impairment compensation and methods for use therewith |
US9653770B2 (en) | 2014-10-21 | 2017-05-16 | At&T Intellectual Property I, L.P. | Guided wave coupler, coupling module and methods for use therewith |
US9769020B2 (en) | 2014-10-21 | 2017-09-19 | At&T Intellectual Property I, L.P. | Method and apparatus for responding to events affecting communications in a communication network |
JP6181321B2 (ja) | 2014-10-31 | 2017-08-16 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 目標物体を誘導する方法、システム、及び装置 |
US20160140851A1 (en) * | 2014-11-18 | 2016-05-19 | Ziv LEVY | Systems and methods for drone navigation |
US9997819B2 (en) | 2015-06-09 | 2018-06-12 | At&T Intellectual Property I, L.P. | Transmission medium and method for facilitating propagation of electromagnetic waves via a core |
US10243784B2 (en) | 2014-11-20 | 2019-03-26 | At&T Intellectual Property I, L.P. | System for generating topology information and methods thereof |
US10009067B2 (en) | 2014-12-04 | 2018-06-26 | At&T Intellectual Property I, L.P. | Method and apparatus for configuring a communication interface |
US9544006B2 (en) | 2014-11-20 | 2017-01-10 | At&T Intellectual Property I, L.P. | Transmission device with mode division multiplexing and methods for use therewith |
US9742462B2 (en) | 2014-12-04 | 2017-08-22 | At&T Intellectual Property I, L.P. | Transmission medium and communication interfaces and methods for use therewith |
US9800327B2 (en) | 2014-11-20 | 2017-10-24 | At&T Intellectual Property I, L.P. | Apparatus for controlling operations of a communication device and methods thereof |
US9461706B1 (en) | 2015-07-31 | 2016-10-04 | At&T Intellectual Property I, Lp | Method and apparatus for exchanging communication signals |
US9954287B2 (en) | 2014-11-20 | 2018-04-24 | At&T Intellectual Property I, L.P. | Apparatus for converting wireless signals and electromagnetic waves and methods thereof |
US9654173B2 (en) | 2014-11-20 | 2017-05-16 | At&T Intellectual Property I, L.P. | Apparatus for powering a communication device and methods thereof |
US9680670B2 (en) | 2014-11-20 | 2017-06-13 | At&T Intellectual Property I, L.P. | Transmission device with channel equalization and control and methods for use therewith |
CN107111598B (zh) * | 2014-12-19 | 2020-09-15 | 深圳市大疆创新科技有限公司 | 使用超声深度感测的光流成像***以及方法 |
US10719080B2 (en) | 2015-01-04 | 2020-07-21 | Hangzhou Zero Zero Technology Co., Ltd. | Aerial system and detachable housing |
US10220954B2 (en) | 2015-01-04 | 2019-03-05 | Zero Zero Robotics Inc | Aerial system thermal control system and method |
US10358214B2 (en) | 2015-01-04 | 2019-07-23 | Hangzhou Zero Zro Technology Co., Ltd. | Aerial vehicle and method of operation |
US10126745B2 (en) | 2015-01-04 | 2018-11-13 | Hangzhou Zero Zero Technology Co., Ltd. | System and method for automated aerial system operation |
US9836053B2 (en) | 2015-01-04 | 2017-12-05 | Zero Zero Robotics Inc. | System and method for automated aerial system operation |
US10366616B2 (en) | 2015-01-09 | 2019-07-30 | Botlink, Llc | System and method of collision avoidance in unmanned aerial vehicles |
US10144036B2 (en) | 2015-01-30 | 2018-12-04 | At&T Intellectual Property I, L.P. | Method and apparatus for mitigating interference affecting a propagation of electromagnetic waves guided by a transmission medium |
US9905134B2 (en) * | 2015-02-12 | 2018-02-27 | Aerobotic Innovations, LLC | System and method of preventing and remedying restricted area intrusions by unmanned aerial vehicles |
US9876570B2 (en) | 2015-02-20 | 2018-01-23 | At&T Intellectual Property I, Lp | Guided-wave transmission device with non-fundamental mode propagation and methods for use therewith |
WO2016141100A2 (en) * | 2015-03-03 | 2016-09-09 | Prenav Inc. | Scanning environments and tracking unmanned aerial vehicles |
US9749013B2 (en) | 2015-03-17 | 2017-08-29 | At&T Intellectual Property I, L.P. | Method and apparatus for reducing attenuation of electromagnetic waves guided by a transmission medium |
US9592828B2 (en) * | 2015-04-13 | 2017-03-14 | Nec Corporation | Long term driving danger prediction system |
US9705561B2 (en) | 2015-04-24 | 2017-07-11 | At&T Intellectual Property I, L.P. | Directional coupling device and methods for use therewith |
US10224981B2 (en) | 2015-04-24 | 2019-03-05 | At&T Intellectual Property I, Lp | Passive electrical coupling device and methods for use therewith |
US9948354B2 (en) | 2015-04-28 | 2018-04-17 | At&T Intellectual Property I, L.P. | Magnetic coupling device with reflective plate and methods for use therewith |
US9793954B2 (en) | 2015-04-28 | 2017-10-17 | At&T Intellectual Property I, L.P. | Magnetic coupling device and methods for use therewith |
US9490869B1 (en) | 2015-05-14 | 2016-11-08 | At&T Intellectual Property I, L.P. | Transmission medium having multiple cores and methods for use therewith |
US9871282B2 (en) | 2015-05-14 | 2018-01-16 | At&T Intellectual Property I, L.P. | At least one transmission medium having a dielectric surface that is covered at least in part by a second dielectric |
US9748626B2 (en) | 2015-05-14 | 2017-08-29 | At&T Intellectual Property I, L.P. | Plurality of cables having different cross-sectional shapes which are bundled together to form a transmission medium |
US10650940B2 (en) | 2015-05-15 | 2020-05-12 | At&T Intellectual Property I, L.P. | Transmission medium having a conductive material and methods for use therewith |
US9917341B2 (en) | 2015-05-27 | 2018-03-13 | At&T Intellectual Property I, L.P. | Apparatus and method for launching electromagnetic waves and for modifying radial dimensions of the propagating electromagnetic waves |
US9866309B2 (en) | 2015-06-03 | 2018-01-09 | At&T Intellectual Property I, Lp | Host node device and methods for use therewith |
US10812174B2 (en) | 2015-06-03 | 2020-10-20 | At&T Intellectual Property I, L.P. | Client node device and methods for use therewith |
US10103801B2 (en) | 2015-06-03 | 2018-10-16 | At&T Intellectual Property I, L.P. | Host node device and methods for use therewith |
US9912381B2 (en) | 2015-06-03 | 2018-03-06 | At&T Intellectual Property I, Lp | Network termination and methods for use therewith |
US9913139B2 (en) | 2015-06-09 | 2018-03-06 | At&T Intellectual Property I, L.P. | Signal fingerprinting for authentication of communicating devices |
US10142086B2 (en) | 2015-06-11 | 2018-11-27 | At&T Intellectual Property I, L.P. | Repeater and methods for use therewith |
US9608692B2 (en) | 2015-06-11 | 2017-03-28 | At&T Intellectual Property I, L.P. | Repeater and methods for use therewith |
US9820146B2 (en) | 2015-06-12 | 2017-11-14 | At&T Intellectual Property I, L.P. | Method and apparatus for authentication and identity management of communicating devices |
US20170201738A1 (en) * | 2015-06-13 | 2017-07-13 | Alberto Daniel Lacaze | Senising on uavs for mapping and obstacle avoidance |
US9667317B2 (en) | 2015-06-15 | 2017-05-30 | At&T Intellectual Property I, L.P. | Method and apparatus for providing security using network traffic adjustments |
US9865911B2 (en) | 2015-06-25 | 2018-01-09 | At&T Intellectual Property I, L.P. | Waveguide system for slot radiating first electromagnetic waves that are combined into a non-fundamental wave mode second electromagnetic wave on a transmission medium |
US9640850B2 (en) | 2015-06-25 | 2017-05-02 | At&T Intellectual Property I, L.P. | Methods and apparatus for inducing a non-fundamental wave mode on a transmission medium |
US9509415B1 (en) | 2015-06-25 | 2016-11-29 | At&T Intellectual Property I, L.P. | Methods and apparatus for inducing a fundamental wave mode on a transmission medium |
US10033108B2 (en) | 2015-07-14 | 2018-07-24 | At&T Intellectual Property I, L.P. | Apparatus and methods for generating an electromagnetic wave having a wave mode that mitigates interference |
US9836957B2 (en) | 2015-07-14 | 2017-12-05 | At&T Intellectual Property I, L.P. | Method and apparatus for communicating with premises equipment |
US9847566B2 (en) | 2015-07-14 | 2017-12-19 | At&T Intellectual Property I, L.P. | Method and apparatus for adjusting a field of a signal to mitigate interference |
US10033107B2 (en) | 2015-07-14 | 2018-07-24 | At&T Intellectual Property I, L.P. | Method and apparatus for coupling an antenna to a device |
US9722318B2 (en) | 2015-07-14 | 2017-08-01 | At&T Intellectual Property I, L.P. | Method and apparatus for coupling an antenna to a device |
US10341142B2 (en) | 2015-07-14 | 2019-07-02 | At&T Intellectual Property I, L.P. | Apparatus and methods for generating non-interfering electromagnetic waves on an uninsulated conductor |
US10170840B2 (en) | 2015-07-14 | 2019-01-01 | At&T Intellectual Property I, L.P. | Apparatus and methods for sending or receiving electromagnetic signals |
US10320586B2 (en) | 2015-07-14 | 2019-06-11 | At&T Intellectual Property I, L.P. | Apparatus and methods for generating non-interfering electromagnetic waves on an insulated transmission medium |
US10044409B2 (en) | 2015-07-14 | 2018-08-07 | At&T Intellectual Property I, L.P. | Transmission medium and methods for use therewith |
US9853342B2 (en) | 2015-07-14 | 2017-12-26 | At&T Intellectual Property I, L.P. | Dielectric transmission medium connector and methods for use therewith |
US10205655B2 (en) | 2015-07-14 | 2019-02-12 | At&T Intellectual Property I, L.P. | Apparatus and methods for communicating utilizing an antenna array and multiple communication paths |
US9882257B2 (en) | 2015-07-14 | 2018-01-30 | At&T Intellectual Property I, L.P. | Method and apparatus for launching a wave mode that mitigates interference |
US9628116B2 (en) | 2015-07-14 | 2017-04-18 | At&T Intellectual Property I, L.P. | Apparatus and methods for transmitting wireless signals |
US10148016B2 (en) | 2015-07-14 | 2018-12-04 | At&T Intellectual Property I, L.P. | Apparatus and methods for communicating utilizing an antenna array |
US10090606B2 (en) | 2015-07-15 | 2018-10-02 | At&T Intellectual Property I, L.P. | Antenna system with dielectric array and methods for use therewith |
US9793951B2 (en) | 2015-07-15 | 2017-10-17 | At&T Intellectual Property I, L.P. | Method and apparatus for launching a wave mode that mitigates interference |
US9608740B2 (en) | 2015-07-15 | 2017-03-28 | At&T Intellectual Property I, L.P. | Method and apparatus for launching a wave mode that mitigates interference |
US9871283B2 (en) | 2015-07-23 | 2018-01-16 | At&T Intellectual Property I, Lp | Transmission medium having a dielectric core comprised of plural members connected by a ball and socket configuration |
US9749053B2 (en) | 2015-07-23 | 2017-08-29 | At&T Intellectual Property I, L.P. | Node device, repeater and methods for use therewith |
US9948333B2 (en) | 2015-07-23 | 2018-04-17 | At&T Intellectual Property I, L.P. | Method and apparatus for wireless communications to mitigate interference |
US9912027B2 (en) | 2015-07-23 | 2018-03-06 | At&T Intellectual Property I, L.P. | Method and apparatus for exchanging communication signals |
US10784670B2 (en) | 2015-07-23 | 2020-09-22 | At&T Intellectual Property I, L.P. | Antenna support for aligning an antenna |
US9911344B2 (en) * | 2015-07-24 | 2018-03-06 | Honeywell International Inc. | Helicopter landing system using a camera for obstacle detection |
US10020587B2 (en) | 2015-07-31 | 2018-07-10 | At&T Intellectual Property I, L.P. | Radial antenna and methods for use therewith |
US9735833B2 (en) | 2015-07-31 | 2017-08-15 | At&T Intellectual Property I, L.P. | Method and apparatus for communications management in a neighborhood network |
US9967173B2 (en) | 2015-07-31 | 2018-05-08 | At&T Intellectual Property I, L.P. | Method and apparatus for authentication and identity management of communicating devices |
CN105874349B (zh) * | 2015-07-31 | 2018-06-12 | 深圳市大疆创新科技有限公司 | 探测装置、探测***、探测方法,以及可移动设备 |
US9599994B1 (en) * | 2015-08-03 | 2017-03-21 | The United States Of America As Represented By The Secretary Of The Army | Collisionless flying of unmanned aerial vehicles that maximizes coverage of predetermined region |
US10269257B1 (en) * | 2015-08-11 | 2019-04-23 | Gopro, Inc. | Systems and methods for vehicle guidance |
US9938024B1 (en) * | 2015-08-20 | 2018-04-10 | Board Of Trustees Of The University Of Alabama, For And On Behalf Of The University Of Alabama In Huntsville | Object redirection using energetic pulses |
US9904535B2 (en) | 2015-09-14 | 2018-02-27 | At&T Intellectual Property I, L.P. | Method and apparatus for distributing software |
US10136434B2 (en) | 2015-09-16 | 2018-11-20 | At&T Intellectual Property I, L.P. | Method and apparatus for use with a radio distributed antenna system having an ultra-wideband control channel |
US10009901B2 (en) | 2015-09-16 | 2018-06-26 | At&T Intellectual Property I, L.P. | Method, apparatus, and computer-readable storage medium for managing utilization of wireless resources between base stations |
US10079661B2 (en) | 2015-09-16 | 2018-09-18 | At&T Intellectual Property I, L.P. | Method and apparatus for use with a radio distributed antenna system having a clock reference |
US10009063B2 (en) | 2015-09-16 | 2018-06-26 | At&T Intellectual Property I, L.P. | Method and apparatus for use with a radio distributed antenna system having an out-of-band reference signal |
US10051629B2 (en) | 2015-09-16 | 2018-08-14 | At&T Intellectual Property I, L.P. | Method and apparatus for use with a radio distributed antenna system having an in-band reference signal |
US9769128B2 (en) | 2015-09-28 | 2017-09-19 | At&T Intellectual Property I, L.P. | Method and apparatus for encryption of communications over a network |
US9729197B2 (en) | 2015-10-01 | 2017-08-08 | At&T Intellectual Property I, L.P. | Method and apparatus for communicating network management traffic over a network |
US9876264B2 (en) | 2015-10-02 | 2018-01-23 | At&T Intellectual Property I, Lp | Communication system, guided wave switch and methods for use therewith |
US9882277B2 (en) | 2015-10-02 | 2018-01-30 | At&T Intellectual Property I, Lp | Communication device and antenna assembly with actuated gimbal mount |
US10355367B2 (en) | 2015-10-16 | 2019-07-16 | At&T Intellectual Property I, L.P. | Antenna structure for exchanging wireless signals |
US10665942B2 (en) | 2015-10-16 | 2020-05-26 | At&T Intellectual Property I, L.P. | Method and apparatus for adjusting wireless communications |
WO2017081898A1 (ja) * | 2015-11-09 | 2017-05-18 | Necソリューションイノベータ株式会社 | 飛行制御装置、飛行制御方法、及びコンピュータ読み取り可能な記録媒体 |
CN108290633A (zh) * | 2015-11-10 | 2018-07-17 | 马特耐特公司 | 使用无人航空载具进行运输的方法和*** |
US10540901B2 (en) * | 2015-11-23 | 2020-01-21 | Kespry Inc. | Autonomous mission action alteration |
CA3006974A1 (en) * | 2015-11-23 | 2017-06-01 | Kespry Inc. | Autonomous mission action alteration |
US10023310B2 (en) * | 2015-11-30 | 2018-07-17 | Panasonic Intellectual Property Corporation Of America | Unmanned flying object and flight control method thereof |
JP6276250B2 (ja) * | 2015-12-24 | 2018-02-07 | ファナック株式会社 | 被加工物を搬送する製造システム |
US9740200B2 (en) | 2015-12-30 | 2017-08-22 | Unmanned Innovation, Inc. | Unmanned aerial vehicle inspection system |
US9618940B1 (en) | 2015-12-31 | 2017-04-11 | Unmanned Innovation, Inc. | Unmanned aerial vehicle rooftop inspection system |
US10665115B2 (en) * | 2016-01-05 | 2020-05-26 | California Institute Of Technology | Controlling unmanned aerial vehicles to avoid obstacle collision |
US11461912B2 (en) | 2016-01-05 | 2022-10-04 | California Institute Of Technology | Gaussian mixture models for temporal depth fusion |
US9645581B1 (en) * | 2016-02-04 | 2017-05-09 | Zerotech (Shenzhen) Intelligence Robot Co., Ltd | Method and apparatus for navigating unmanned aerial vehicle |
US11573325B2 (en) | 2016-03-11 | 2023-02-07 | Kaarta, Inc. | Systems and methods for improvements in scanning and mapping |
US11567201B2 (en) | 2016-03-11 | 2023-01-31 | Kaarta, Inc. | Laser scanner with real-time, online ego-motion estimation |
EP3427008B1 (en) | 2016-03-11 | 2022-09-07 | Kaarta, Inc. | Laser scanner with real-time, online ego-motion estimation |
US10989542B2 (en) | 2016-03-11 | 2021-04-27 | Kaarta, Inc. | Aligning measured signal data with slam localization data and uses thereof |
CN109154816A (zh) * | 2016-03-21 | 2019-01-04 | 沃尔玛阿波罗有限责任公司 | 用于自主无人机导航的***和方法 |
US10001776B2 (en) * | 2016-03-21 | 2018-06-19 | The Boeing Company | Unmanned aerial vehicle flight control system |
US10553122B1 (en) * | 2016-03-22 | 2020-02-04 | Amazon Technologies, Inc. | Unmanned aerial vehicle data collection for routing |
CN107077140B (zh) * | 2016-03-28 | 2018-11-30 | 深圳市大疆创新科技有限公司 | 无人飞行器的悬停控制方法、控制***和无人飞行器 |
WO2017173416A1 (en) * | 2016-03-31 | 2017-10-05 | Netjets Inc. | Aviation sector special departure procedure systems and methods |
US10627821B2 (en) * | 2016-04-22 | 2020-04-21 | Yuneec International (China) Co, Ltd | Aerial shooting method and system using a drone |
US10435144B2 (en) | 2016-04-24 | 2019-10-08 | Hangzhou Zero Zero Technology Co., Ltd. | Aerial system propulsion assembly and method of use |
WO2017188762A2 (ko) * | 2016-04-27 | 2017-11-02 | 한화테크윈주식회사 | 오염 탐지용 이동 장치, 오염 탐지 시스템, 방법 및 컴퓨터 판독 가능한 기록매체 |
CN105953787A (zh) * | 2016-04-27 | 2016-09-21 | 河北德普电器有限公司 | 一种机器人导航地图生成*** |
US20190127067A1 (en) * | 2016-05-03 | 2019-05-02 | Sunshine Aerial Systems, Inc. | Autonomous aerial vehicle |
US10394240B1 (en) * | 2016-05-06 | 2019-08-27 | Olaeris, Inc. | Failover navigation for remotely operated aerial vehicles |
US11029352B2 (en) | 2016-05-18 | 2021-06-08 | Skydio, Inc. | Unmanned aerial vehicle electromagnetic avoidance and utilization system |
US10435176B2 (en) | 2016-05-25 | 2019-10-08 | Skydio, Inc. | Perimeter structure for unmanned aerial vehicle |
CN105955275B (zh) * | 2016-05-26 | 2021-07-13 | 华讯方舟科技有限公司 | 一种机器人路径规划方法及*** |
JP6786264B2 (ja) * | 2016-05-27 | 2020-11-18 | 株式会社東芝 | 情報処理装置、情報処理方法、および車両 |
CN109219785B (zh) | 2016-06-03 | 2021-10-01 | 深圳市大疆创新科技有限公司 | 一种多传感器校准方法与*** |
US10705221B2 (en) * | 2016-06-08 | 2020-07-07 | The Boeing Company | On-board backup and anti-spoofing GPS system |
US11341860B2 (en) * | 2016-06-10 | 2022-05-24 | Metal Raptor, Llc | Drone air traffic control over wireless networks for package pickup and delivery in an order defined by coordinates |
US10310498B2 (en) | 2016-06-16 | 2019-06-04 | Echostar Technologies International Corporation | Unmanned aerial vehicle transponder systems with integrated disablement |
EP3473552B1 (en) | 2016-06-17 | 2023-10-18 | Rakuten Group, Inc. | Unmanned aircraft control system, unmanned aircraft control method, and program |
ITUA20164478A1 (it) * | 2016-06-17 | 2017-12-17 | Simac Tech S R L | Impianto di pallettizzazione e/o depallettizzazione di merci |
US10032275B1 (en) * | 2016-06-21 | 2018-07-24 | Amazon Technologies, Inc. | Unmanned aerial vehicle sensor calibration during flight |
US10220964B1 (en) | 2016-06-21 | 2019-03-05 | Amazon Technologies, Inc. | Unmanned aerial vehicle sensor calibration validation before flight |
US9972212B1 (en) * | 2016-06-21 | 2018-05-15 | Amazon Technologies, Inc. | Unmanned aerial vehicle camera calibration as part of departure or arrival at a materials handling facility |
US9823089B1 (en) | 2016-06-21 | 2017-11-21 | Amazon Technologies, Inc. | Unmanned aerial vehicle sensor calibration as part of departure from a materials handling facility |
US9969486B1 (en) | 2016-06-21 | 2018-05-15 | Amazon Technologies, Inc. | Unmanned aerial vehicle heat sensor calibration |
US11017681B2 (en) * | 2016-06-24 | 2021-05-25 | Intel IP Corporation | Unmanned aerial vehicle avoiding obstacles |
WO2017222541A1 (en) * | 2016-06-24 | 2017-12-28 | Intel IP Corporation | Unmanned aerial vehicle |
US11796673B2 (en) * | 2016-07-06 | 2023-10-24 | Lawrence Livermore National Security, Llc | Object sense and avoid system for autonomous vehicles |
CN107613503B (zh) * | 2016-07-12 | 2020-04-28 | 华为技术有限公司 | 波束通信的方法和装置 |
US10234862B2 (en) * | 2016-07-15 | 2019-03-19 | Qualcomm Incorporated | WWAN radio link quality navigation for a drone |
CN114476105A (zh) * | 2016-08-06 | 2022-05-13 | 深圳市大疆创新科技有限公司 | 自动着陆表面地形评估以及相关的***和方法 |
US10520943B2 (en) | 2016-08-12 | 2019-12-31 | Skydio, Inc. | Unmanned aerial image capture platform |
US11709493B2 (en) * | 2016-08-18 | 2023-07-25 | Tevel Aerobotics Technologies Ltd. | System and method for plantation agriculture tasks management and data collection |
EP3500822A4 (en) * | 2016-08-18 | 2019-08-28 | SZ DJI Technology Co., Ltd. | SYSTEMS AND METHODS FOR ADVANCED STEREOSCOPIC PRESENTATION |
CN106289285A (zh) * | 2016-08-20 | 2017-01-04 | 南京理工大学 | 一种关联场景的机器人侦察地图及构建方法 |
WO2018039365A1 (en) * | 2016-08-23 | 2018-03-01 | Group Care Technologies, LLC | Intelligent event response with unmanned aerial system |
US9912419B1 (en) | 2016-08-24 | 2018-03-06 | At&T Intellectual Property I, L.P. | Method and apparatus for managing a fault in a distributed antenna system |
CN107784313A (zh) * | 2016-08-25 | 2018-03-09 | 河北国呈电子科技有限公司 | 环境监测方法、装置及其结果处理方法、装置和监测*** |
US20190179316A1 (en) * | 2016-08-25 | 2019-06-13 | Purdue Research Foundation | System and method for controlling a self-guided vehicle |
CN107783106B (zh) * | 2016-08-25 | 2021-02-26 | 大连楼兰科技股份有限公司 | 无人机与障碍物之间的数据融合方法 |
CN107783550A (zh) * | 2016-08-26 | 2018-03-09 | 北京臻迪机器人有限公司 | 控制无人机返航的方法及装置 |
US9860075B1 (en) | 2016-08-26 | 2018-01-02 | At&T Intellectual Property I, L.P. | Method and communication node for broadband distribution |
US11164149B1 (en) * | 2016-08-31 | 2021-11-02 | Corvus Robotics, Inc. | Method and system for warehouse inventory management using drones |
US11430332B2 (en) * | 2016-09-02 | 2022-08-30 | FLIR Belgium BVBA | Unmanned aerial system assisted navigational systems and methods |
US10291311B2 (en) | 2016-09-09 | 2019-05-14 | At&T Intellectual Property I, L.P. | Method and apparatus for mitigating a fault in a distributed antenna system |
CN106325299A (zh) * | 2016-09-13 | 2017-01-11 | 上海顺砾智能科技有限公司 | 基于视觉的无人机返航着陆方法 |
US11032819B2 (en) | 2016-09-15 | 2021-06-08 | At&T Intellectual Property I, L.P. | Method and apparatus for use with a radio distributed antenna system having a control channel reference signal |
US10928245B2 (en) * | 2016-09-15 | 2021-02-23 | Siteco Gmbh | Light measurement using an autonomous vehicle |
JP6849691B2 (ja) * | 2016-09-16 | 2021-03-24 | ヤマハ発動機株式会社 | 基板作業システム、および、基板作業システムにおける搬送方法 |
US11092690B1 (en) * | 2016-09-22 | 2021-08-17 | Apple Inc. | Predicting lidar data using machine learning |
WO2018053786A1 (en) * | 2016-09-23 | 2018-03-29 | Qualcomm Incorporated | Adaptive motion filtering in an unmanned autonomous vehicle |
CN110036162B (zh) * | 2016-09-30 | 2021-04-02 | 新加坡-Eth研究中心 | 用于将物体放置在表面上的***和方法 |
US11106988B2 (en) * | 2016-10-06 | 2021-08-31 | Gopro, Inc. | Systems and methods for determining predicted risk for a flight path of an unmanned aerial vehicle |
US10135146B2 (en) | 2016-10-18 | 2018-11-20 | At&T Intellectual Property I, L.P. | Apparatus and methods for launching guided waves via circuits |
US10135147B2 (en) | 2016-10-18 | 2018-11-20 | At&T Intellectual Property I, L.P. | Apparatus and methods for launching guided waves via an antenna |
US10340600B2 (en) | 2016-10-18 | 2019-07-02 | At&T Intellectual Property I, L.P. | Apparatus and methods for launching guided waves via plural waveguide systems |
US9991580B2 (en) | 2016-10-21 | 2018-06-05 | At&T Intellectual Property I, L.P. | Launcher and coupling system for guided wave mode cancellation |
US9876605B1 (en) | 2016-10-21 | 2018-01-23 | At&T Intellectual Property I, L.P. | Launcher and coupling system to support desired guided wave mode |
US10811767B2 (en) | 2016-10-21 | 2020-10-20 | At&T Intellectual Property I, L.P. | System and dielectric antenna with convex dielectric radome |
US10374316B2 (en) | 2016-10-21 | 2019-08-06 | At&T Intellectual Property I, L.P. | System and dielectric antenna with non-uniform dielectric |
US10573188B2 (en) * | 2016-10-23 | 2020-02-25 | Gopro, Inc. | Virtual wall mapping for aerial vehicle navigation |
US10312567B2 (en) | 2016-10-26 | 2019-06-04 | At&T Intellectual Property I, L.P. | Launcher with planar strip antenna and methods for use therewith |
US10225025B2 (en) | 2016-11-03 | 2019-03-05 | At&T Intellectual Property I, L.P. | Method and apparatus for detecting a fault in a communication system |
US10291334B2 (en) | 2016-11-03 | 2019-05-14 | At&T Intellectual Property I, L.P. | System for detecting a fault in a communication system |
US10498044B2 (en) | 2016-11-03 | 2019-12-03 | At&T Intellectual Property I, L.P. | Apparatus for configuring a surface of an antenna |
US10224634B2 (en) | 2016-11-03 | 2019-03-05 | At&T Intellectual Property I, L.P. | Methods and apparatus for adjusting an operational characteristic of an antenna |
US11536572B2 (en) | 2016-11-09 | 2022-12-27 | The Texas A&M University System | Method and system for accurate long term simultaneous localization and mapping with absolute orientation sensing |
CN107636549B (zh) | 2016-11-15 | 2019-07-05 | 深圳市大疆创新科技有限公司 | 用于控制可移动物体的方法、设备以及无人飞行器 |
US10340603B2 (en) | 2016-11-23 | 2019-07-02 | At&T Intellectual Property I, L.P. | Antenna system having shielded structural configurations for assembly |
US10535928B2 (en) | 2016-11-23 | 2020-01-14 | At&T Intellectual Property I, L.P. | Antenna system and methods for use therewith |
US10340601B2 (en) | 2016-11-23 | 2019-07-02 | At&T Intellectual Property I, L.P. | Multi-antenna system and methods for use therewith |
US10090594B2 (en) | 2016-11-23 | 2018-10-02 | At&T Intellectual Property I, L.P. | Antenna system having structural configurations for assembly |
US10178445B2 (en) | 2016-11-23 | 2019-01-08 | At&T Intellectual Property I, L.P. | Methods, devices, and systems for load balancing between a plurality of waveguides |
US10673917B2 (en) * | 2016-11-28 | 2020-06-02 | Microsoft Technology Licensing, Llc | Pluggable components for augmenting device streams |
KR101765235B1 (ko) * | 2016-11-28 | 2017-08-04 | 한국건설기술연구원 | 사물인터넷 기반 센서와 무인비행체를 이용한 시설물 유지관리 시스템 및 그 방법 |
KR20180062267A (ko) * | 2016-11-30 | 2018-06-08 | 삼성전자주식회사 | 무인 비행 장치 및 무인 비행 장치의 비행 제어방법 |
US10361489B2 (en) | 2016-12-01 | 2019-07-23 | At&T Intellectual Property I, L.P. | Dielectric dish antenna system and methods for use therewith |
US11295458B2 (en) | 2016-12-01 | 2022-04-05 | Skydio, Inc. | Object tracking by an unmanned aerial vehicle using visual sensors |
US10305190B2 (en) | 2016-12-01 | 2019-05-28 | At&T Intellectual Property I, L.P. | Reflecting dielectric antenna system and methods for use therewith |
US10382976B2 (en) | 2016-12-06 | 2019-08-13 | At&T Intellectual Property I, L.P. | Method and apparatus for managing wireless communications based on communication paths and network device positions |
US10819035B2 (en) | 2016-12-06 | 2020-10-27 | At&T Intellectual Property I, L.P. | Launcher with helical antenna and methods for use therewith |
US10755542B2 (en) | 2016-12-06 | 2020-08-25 | At&T Intellectual Property I, L.P. | Method and apparatus for surveillance via guided wave communication |
US10020844B2 (en) | 2016-12-06 | 2018-07-10 | T&T Intellectual Property I, L.P. | Method and apparatus for broadcast communication via guided waves |
US10694379B2 (en) | 2016-12-06 | 2020-06-23 | At&T Intellectual Property I, L.P. | Waveguide system with device-based authentication and methods for use therewith |
US10326494B2 (en) | 2016-12-06 | 2019-06-18 | At&T Intellectual Property I, L.P. | Apparatus for measurement de-embedding and methods for use therewith |
US9927517B1 (en) | 2016-12-06 | 2018-03-27 | At&T Intellectual Property I, L.P. | Apparatus and methods for sensing rainfall |
US10637149B2 (en) | 2016-12-06 | 2020-04-28 | At&T Intellectual Property I, L.P. | Injection molded dielectric antenna and methods for use therewith |
US10135145B2 (en) | 2016-12-06 | 2018-11-20 | At&T Intellectual Property I, L.P. | Apparatus and methods for generating an electromagnetic wave along a transmission medium |
US10727599B2 (en) | 2016-12-06 | 2020-07-28 | At&T Intellectual Property I, L.P. | Launcher with slot antenna and methods for use therewith |
US10439675B2 (en) | 2016-12-06 | 2019-10-08 | At&T Intellectual Property I, L.P. | Method and apparatus for repeating guided wave communication signals |
US10027397B2 (en) | 2016-12-07 | 2018-07-17 | At&T Intellectual Property I, L.P. | Distributed antenna system and methods for use therewith |
US10547348B2 (en) | 2016-12-07 | 2020-01-28 | At&T Intellectual Property I, L.P. | Method and apparatus for switching transmission mediums in a communication system |
US10168695B2 (en) | 2016-12-07 | 2019-01-01 | At&T Intellectual Property I, L.P. | Method and apparatus for controlling an unmanned aircraft |
US10139820B2 (en) | 2016-12-07 | 2018-11-27 | At&T Intellectual Property I, L.P. | Method and apparatus for deploying equipment of a communication system |
US10446936B2 (en) | 2016-12-07 | 2019-10-15 | At&T Intellectual Property I, L.P. | Multi-feed dielectric antenna system and methods for use therewith |
US10389029B2 (en) | 2016-12-07 | 2019-08-20 | At&T Intellectual Property I, L.P. | Multi-feed dielectric antenna system with core selection and methods for use therewith |
US10243270B2 (en) | 2016-12-07 | 2019-03-26 | At&T Intellectual Property I, L.P. | Beam adaptive multi-feed dielectric antenna system and methods for use therewith |
US9893795B1 (en) | 2016-12-07 | 2018-02-13 | At&T Intellectual Property I, Lp | Method and repeater for broadband distribution |
US10359749B2 (en) | 2016-12-07 | 2019-07-23 | At&T Intellectual Property I, L.P. | Method and apparatus for utilities management via guided wave communication |
US10389037B2 (en) | 2016-12-08 | 2019-08-20 | At&T Intellectual Property I, L.P. | Apparatus and methods for selecting sections of an antenna array and use therewith |
US10916969B2 (en) | 2016-12-08 | 2021-02-09 | At&T Intellectual Property I, L.P. | Method and apparatus for providing power using an inductive coupling |
US10601494B2 (en) | 2016-12-08 | 2020-03-24 | At&T Intellectual Property I, L.P. | Dual-band communication device and method for use therewith |
US10264467B2 (en) | 2016-12-08 | 2019-04-16 | At&T Intellectual Property I, L.P. | Method and apparatus for collecting data associated with wireless communications |
US9998870B1 (en) | 2016-12-08 | 2018-06-12 | At&T Intellectual Property I, L.P. | Method and apparatus for proximity sensing |
US10530505B2 (en) | 2016-12-08 | 2020-01-07 | At&T Intellectual Property I, L.P. | Apparatus and methods for launching electromagnetic waves along a transmission medium |
US9911020B1 (en) | 2016-12-08 | 2018-03-06 | At&T Intellectual Property I, L.P. | Method and apparatus for tracking via a radio frequency identification device |
US10326689B2 (en) | 2016-12-08 | 2019-06-18 | At&T Intellectual Property I, L.P. | Method and system for providing alternative communication paths |
US10103422B2 (en) | 2016-12-08 | 2018-10-16 | At&T Intellectual Property I, L.P. | Method and apparatus for mounting network devices |
US10411356B2 (en) | 2016-12-08 | 2019-09-10 | At&T Intellectual Property I, L.P. | Apparatus and methods for selectively targeting communication devices with an antenna array |
US10938108B2 (en) | 2016-12-08 | 2021-03-02 | At&T Intellectual Property I, L.P. | Frequency selective multi-feed dielectric antenna system and methods for use therewith |
US10777873B2 (en) | 2016-12-08 | 2020-09-15 | At&T Intellectual Property I, L.P. | Method and apparatus for mounting network devices |
US10069535B2 (en) | 2016-12-08 | 2018-09-04 | At&T Intellectual Property I, L.P. | Apparatus and methods for launching electromagnetic waves having a certain electric field structure |
US10264586B2 (en) | 2016-12-09 | 2019-04-16 | At&T Mobility Ii Llc | Cloud-based packet controller and methods for use therewith |
US10340983B2 (en) | 2016-12-09 | 2019-07-02 | At&T Intellectual Property I, L.P. | Method and apparatus for surveying remote sites via guided wave communications |
US9838896B1 (en) | 2016-12-09 | 2017-12-05 | At&T Intellectual Property I, L.P. | Method and apparatus for assessing network coverage |
WO2018110382A1 (ja) * | 2016-12-12 | 2018-06-21 | Kddi株式会社 | 飛行装置、飛行制御装置及び飛行制御方法 |
DE102017218671A1 (de) * | 2016-12-13 | 2018-06-14 | Robert Bosch Gmbh | Verfahren zur Steuerung einer automatisiert betriebenen mobilen Einheit und Verfahren zur Aussendung einer Gefahreninformation |
KR20180070932A (ko) * | 2016-12-19 | 2018-06-27 | 삼성전자주식회사 | 이동체 및 이동체의 제어 방법 |
US10831216B2 (en) | 2016-12-22 | 2020-11-10 | Intel Corporation | UAV positions method and apparatus |
EP3543650A4 (en) * | 2016-12-23 | 2020-01-01 | Cloudminds (Shenzhen) Robotics Systems Co., Ltd. | LOCATION METHOD, TERMINAL AND SERVER |
AU2018210949B2 (en) * | 2017-01-17 | 2022-08-11 | Alarm.Com Incorporated | Dynamic drone navigation |
US10843068B2 (en) * | 2017-01-18 | 2020-11-24 | Xvisio Technology Corp. | 6DoF inside-out tracking game controller |
US11231711B2 (en) * | 2017-01-22 | 2022-01-25 | Sichuan Golden Ridge Intelligence Science & Technology Co., Ltd. | Systems and methods for surrounding information acquisition and feedback for intelligent wheelchairs |
CN107077153A (zh) * | 2017-01-22 | 2017-08-18 | 深圳市大疆创新科技有限公司 | 可移动装置的控制方法、控制***、和可移动装置 |
US20180016006A1 (en) * | 2017-01-22 | 2018-01-18 | Haoxiang Electric Energy (Kunshan) Co., Ltd. | Smart unmanned aerial vehicle for home |
US10067513B2 (en) | 2017-01-23 | 2018-09-04 | Hangzhou Zero Zero Technology Co., Ltd | Multi-camera system and method of use |
CN106681330A (zh) * | 2017-01-25 | 2017-05-17 | 北京航空航天大学 | 基于多传感器数据融合的机器人导航方法及装置 |
US10621780B2 (en) * | 2017-02-02 | 2020-04-14 | Infatics, Inc. | System and methods for improved aerial mapping with aerial vehicles |
US9973940B1 (en) | 2017-02-27 | 2018-05-15 | At&T Intellectual Property I, L.P. | Apparatus and methods for dynamic impedance matching of a guided wave launcher |
JP6878567B2 (ja) * | 2017-03-02 | 2021-05-26 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 3次元形状推定方法、飛行体、モバイルプラットフォーム、プログラム及び記録媒体 |
US10192111B2 (en) | 2017-03-10 | 2019-01-29 | At&T Intellectual Property I, L.P. | Structure from motion for drone videos |
US10329017B2 (en) | 2017-03-13 | 2019-06-25 | General Electric Company | System and method for integrating flight path and site operating data |
US10298293B2 (en) | 2017-03-13 | 2019-05-21 | At&T Intellectual Property I, L.P. | Apparatus of communication utilizing wireless network devices |
WO2018174847A1 (en) | 2017-03-20 | 2018-09-27 | Google Llc | Systems and methods of determining an improved user location using real world map and sensor data |
CN107063275B (zh) * | 2017-03-24 | 2020-05-12 | 重庆邮电大学 | 基于路侧设备的智能车辆地图融合***及方法 |
CN110461147B (zh) * | 2017-03-25 | 2022-05-13 | 余绍炽 | 多功能光电声学离子无人机 |
CN106949887B (zh) * | 2017-03-27 | 2021-02-09 | 远形时空科技(北京)有限公司 | 空间位置追踪方法、空间位置追踪装置及导航*** |
JP6760876B2 (ja) * | 2017-03-27 | 2020-09-23 | Kddi株式会社 | 制御装置、プログラム、及び制御方法 |
US11217105B2 (en) | 2017-03-31 | 2022-01-04 | Telefonaktiebolaget Lm Ericsson (Publ) | Enhanced flight plan for unmanned traffic aircraft systems |
EP3602519A1 (en) | 2017-03-31 | 2020-02-05 | Telefonaktiebolaget LM Ericsson (PUBL) | Methods and systems for using network location services in a unmanned aircraft systems traffic management framework |
CN110662697B (zh) | 2017-03-31 | 2023-06-27 | 瑞典爱立信有限公司 | 在从无人飞行载具传送的无线电帧中广播地理定位信息 |
ES2684847B1 (es) * | 2017-03-31 | 2019-07-10 | Avansig S L L | Sistema de navegacion para un vehiculo aereo no tripulado en un recinto interior |
US11573575B2 (en) | 2017-04-12 | 2023-02-07 | Lawrence Livermore National Security, Llc | Attract-repel path planner system for collision avoidance |
EP3388972B1 (en) * | 2017-04-13 | 2020-08-26 | Aptiv Technologies Limited | A method and a device for generating an occupancy map of an environment of a vehicle |
US20180299899A1 (en) * | 2017-04-13 | 2018-10-18 | Neato Robotics, Inc. | Localized collection of ambient data |
EP3610346A1 (en) | 2017-04-14 | 2020-02-19 | Telefonaktiebolaget LM Ericsson (Publ) | Optimal unmanned aerial vehicle flight route planning based on quality-of-service requirements for data, telemetry, and command and control requirements in 3gpp networks |
US10242458B2 (en) | 2017-04-21 | 2019-03-26 | Qualcomm Incorporated | Registration of range images using virtual gimbal information |
WO2018195857A1 (zh) * | 2017-04-27 | 2018-11-01 | 深圳市大疆创新科技有限公司 | 无人机的控制方法、设备及障碍物的提示方法、设备 |
CN109923488A (zh) | 2017-04-27 | 2019-06-21 | 深圳市大疆创新科技有限公司 | 使用可移动物体生成实时地图的***和方法 |
WO2018203120A1 (en) | 2017-05-05 | 2018-11-08 | Telefonaktiebolaget Lm Ericsson (Publ) | Methods and systems for using an unmanned aerial vehicle (uav) flight path to coordinate an enhanced handover in 3rd generation partnership project (3gpp) networks |
CN107145578B (zh) * | 2017-05-08 | 2020-04-10 | 深圳地平线机器人科技有限公司 | 地图构建方法、装置、设备和*** |
US10726745B2 (en) * | 2017-06-13 | 2020-07-28 | At&T Intellectual Property I, L.P. | Autonomous multi-pass data acquisition using unmanned aerial vehicles |
US10969777B2 (en) * | 2017-06-23 | 2021-04-06 | Qualcomm Incorporated | Local drone identification verification |
US11659322B1 (en) | 2017-06-26 | 2023-05-23 | Wing Aviation Llc | Audio based aircraft detection |
MX2020000074A (es) | 2017-07-10 | 2020-02-17 | Ericsson Telefon Ab L M | Optimizacion de la asignacion de recursos de radio con base en informacion de trayectoria de vuelo de vehiculos aereos no tripulados. |
US10642264B2 (en) * | 2017-07-19 | 2020-05-05 | Superior Communications, Inc. | Security drone system |
CN107688184A (zh) * | 2017-07-24 | 2018-02-13 | 宗晖(上海)机器人有限公司 | 一种定位方法以及*** |
CN107610212B (zh) * | 2017-07-25 | 2020-05-12 | 深圳大学 | 场景重建方法、装置、计算机设备以及计算机存储介质 |
US11348269B1 (en) * | 2017-07-27 | 2022-05-31 | AI Incorporated | Method and apparatus for combining data to construct a floor plan |
IL253769B (en) * | 2017-07-31 | 2022-03-01 | Israel Aerospace Ind Ltd | Planning a path in motion |
FR3069931A1 (fr) * | 2017-08-01 | 2019-02-08 | Airbus Defence And Space Sas | Unite de commande embarquee pour un systeme de drone, drone et systeme de drone comprenant l'unite de commande embarquee |
US12008910B2 (en) * | 2017-08-04 | 2024-06-11 | ideaForge Technology Pvt. Ltd | UAV system emergency path planning on communication failure |
JP6904564B2 (ja) * | 2017-08-28 | 2021-07-21 | Necソリューションイノベータ株式会社 | 飛行経路設定装置、飛行経路設定方法、及びプログラム |
WO2019050500A1 (en) | 2017-09-05 | 2019-03-14 | Telefonaktiebolaget Lm Ericsson (Publ) | PLANNED CONTINUITY OF NON-PILOT AIRCRAFT CONNECTIVITY (UAV) IN UAV TRAFFIC MANAGEMENT SYSTEMS |
JP6737751B2 (ja) * | 2017-09-14 | 2020-08-12 | Kddi株式会社 | 飛行装置、管理装置、飛行管理方法及びプログラム |
US10402646B2 (en) * | 2017-09-21 | 2019-09-03 | Amazon Technologies, Inc. | Object detection and avoidance for aerial vehicles |
JP7109174B2 (ja) * | 2017-10-03 | 2022-07-29 | 株式会社トプコン | 経路選定装置、無人航空機、データ処理装置、経路選定処理方法および経路選定処理用プログラム |
WO2019070839A1 (en) | 2017-10-05 | 2019-04-11 | California Institute Of Technology | SIMULTANEOUS REPRESENTATION OF MOBILE AND STATIC OBSTACLES FOR AUTOMATICALLY CONTROLLED VEHICLES |
WO2019077682A1 (ja) * | 2017-10-17 | 2019-04-25 | 株式会社自律制御システム研究所 | 無人航空機の飛行計画経路を設定するためのシステム及びプログラム |
US10962650B2 (en) | 2017-10-31 | 2021-03-30 | United States Of America As Represented By The Administrator Of Nasa | Polyhedral geofences |
US10872534B2 (en) | 2017-11-01 | 2020-12-22 | Kespry, Inc. | Aerial vehicle inspection path planning |
JP7112194B2 (ja) * | 2017-11-16 | 2022-08-03 | 株式会社荏原製作所 | ドローンを用いた計測システムおよび計測方法 |
WO2019099605A1 (en) | 2017-11-17 | 2019-05-23 | Kaarta, Inc. | Methods and systems for geo-referencing mapping systems |
CN109932721B (zh) * | 2017-12-15 | 2023-09-29 | 财团法人车辆研究测试中心 | 应用于多感测器融合的误差及侦测机率分析方法 |
EP3731056B1 (en) * | 2017-12-21 | 2022-09-21 | Beijing Xiaomi Mobile Software Co., Ltd. | Method and device for determining flight path of unmanned aerial vehicle |
CN108196570A (zh) * | 2017-12-26 | 2018-06-22 | 深圳市道通智能航空技术有限公司 | 一种无人机航向修正方法、装置和无人机 |
WO2019130050A1 (en) | 2017-12-29 | 2019-07-04 | Telefonaktiebolaget Lm Ericsson (Publ) | Using a cellular interface for unmanned aerial vehicle communications |
US10866307B2 (en) * | 2017-12-29 | 2020-12-15 | Automotive Research & Testing Center | Method for analyzing error and existence probability of multi-sensor fusion of obstacle detection |
WO2019165194A1 (en) | 2018-02-23 | 2019-08-29 | Kaarta, Inc. | Methods and systems for processing and colorizing point clouds and meshes |
GB2571711A (en) * | 2018-03-01 | 2019-09-11 | Scout Drone Inspection As | Drone control system |
WO2019178429A1 (en) * | 2018-03-15 | 2019-09-19 | Kaarta, Inc. | Methods and systems for filtering point cloud map data for use with acquired scan frame data |
US11120568B2 (en) | 2018-03-15 | 2021-09-14 | Tower Mapping Aviation, LLC | Method and apparatus for precise measurements |
US11021106B2 (en) * | 2018-03-29 | 2021-06-01 | Intel Corporation | Vehicle, side mirror assembly for a vehicle, and methods thereof |
WO2019186245A1 (en) * | 2018-03-30 | 2019-10-03 | Telefonaktiebolaget Lm Ericsson (Publ) | Network coverage and policy information generation and distribution for unmanned aerial vehicle flight planning |
US11378956B2 (en) * | 2018-04-03 | 2022-07-05 | Baidu Usa Llc | Perception and planning collaboration framework for autonomous driving |
WO2019195270A1 (en) | 2018-04-03 | 2019-10-10 | Kaarta, Inc. | Methods and systems for real or near real-time point cloud map data confidence evaluation |
CN108427438A (zh) * | 2018-04-11 | 2018-08-21 | 北京木业邦科技有限公司 | 飞行环境检测方法、装置、电子设备及存储介质 |
US11565698B2 (en) * | 2018-04-16 | 2023-01-31 | Mitsubishi Electric Cornoration | Obstacle detection apparatus, automatic braking apparatus using obstacle detection apparatus, obstacle detection method, and automatic braking method using obstacle detection method |
WO2019222798A1 (en) * | 2018-05-22 | 2019-11-28 | Acid Ip Pty Ltd | Drone flight programming method and system |
CN108680177B (zh) * | 2018-05-31 | 2021-11-09 | 安徽工程大学 | 基于啮齿类动物模型的同步定位与地图构建方法及装置 |
JP6777355B2 (ja) * | 2018-06-04 | 2020-10-28 | 株式会社ナイルワークス | ドローンシステム、ドローンシステムの制御方法、およびドローンシステムの制御プログラム |
WO2020009826A1 (en) | 2018-07-05 | 2020-01-09 | Kaarta, Inc. | Methods and systems for auto-leveling of point clouds and 3d models |
CN109029422B (zh) * | 2018-07-10 | 2021-03-05 | 北京木业邦科技有限公司 | 一种多无人机协作构建三维调查地图的方法和装置 |
CA3106014A1 (en) | 2018-07-12 | 2020-01-16 | TerraClear Inc. | Object identification and collection system and method |
CN109116397B (zh) * | 2018-07-25 | 2022-12-30 | 吉林大学 | 一种车载多相机视觉定位方法、装置、设备及存储介质 |
WO2020028353A1 (en) | 2018-07-30 | 2020-02-06 | Seekops Inc. | Ultra-lightweight, handheld gas leak detection device |
CN110779496B (zh) * | 2018-07-30 | 2022-03-22 | 斑马智行网络(香港)有限公司 | 三维地图构建***、方法、设备和存储介质 |
CN110832280A (zh) * | 2018-08-01 | 2020-02-21 | 深圳市大疆创新科技有限公司 | 地图处理方法、设备、计算机可读存储介质 |
CN109084786B (zh) * | 2018-08-09 | 2020-12-25 | 北京智行者科技有限公司 | 一种地图数据的处理方法 |
CN110816840A (zh) * | 2018-08-14 | 2020-02-21 | 陈武记 | 无人机灭火装置及灭火方法 |
IL262690B2 (en) * | 2018-08-19 | 2023-03-01 | Israel Aerospace Ind Ltd | launch system |
DE102018120198A1 (de) * | 2018-08-20 | 2020-02-20 | Dr. Ing. H.C. F. Porsche Aktiengesellschaft | Luftfahrzeug |
US10140855B1 (en) * | 2018-08-24 | 2018-11-27 | Iteris, Inc. | Enhanced traffic detection by fusing multiple sensor data |
JP7132037B2 (ja) * | 2018-08-29 | 2022-09-06 | フォルシアクラリオン・エレクトロニクス株式会社 | 車載処理装置 |
CN109147058B (zh) * | 2018-08-31 | 2022-09-20 | 腾讯科技(深圳)有限公司 | 用于视觉惯导信息融合的初始化方法和装置以及存储介质 |
US11062614B2 (en) * | 2018-09-12 | 2021-07-13 | Alliance Solutions Group, Inc. | Systems and methods for collecting and analyzing hazardous materials information using an unmanned aerial vehicle |
JP2020042726A (ja) * | 2018-09-13 | 2020-03-19 | 株式会社東芝 | Ogm圧縮回路、ogm圧縮伸長システム、および移動体システム |
EP3627250B1 (en) | 2018-09-21 | 2023-12-06 | Tata Consultancy Services Limited | Method and system for free space detection in a cluttered environment |
US11520041B1 (en) * | 2018-09-27 | 2022-12-06 | Apple Inc. | Correcting depth estimations derived from image data using acoustic information |
CN109521767A (zh) * | 2018-10-18 | 2019-03-26 | 李培 | 自主导航机器人*** |
US11866198B2 (en) * | 2018-10-29 | 2024-01-09 | California Institute Of Technology | Long-duration, fully autonomous operation of rotorcraft unmanned aerial systems including energy replenishment |
CN109507677B (zh) * | 2018-11-05 | 2020-08-18 | 浙江工业大学 | 一种结合gps和雷达里程计的slam方法 |
KR102123360B1 (ko) * | 2018-11-20 | 2020-06-16 | 주식회사 공간정보 | 3차원 안전정보 측정을 위한 드론 탐지시스템 |
US11443637B2 (en) | 2018-11-21 | 2022-09-13 | Brunswick Corporation | Proximity sensing system and method for a marine vessel |
US11436927B2 (en) | 2018-11-21 | 2022-09-06 | Brunswick Corporation | Proximity sensing system and method for a marine vessel with automated proximity sensor location estimation |
US11794865B1 (en) | 2018-11-21 | 2023-10-24 | Brunswick Corporation | Proximity sensing system and method for a marine vessel |
EP3876070B1 (en) | 2018-11-21 | 2024-02-28 | Autel Robotics Co., Ltd. | Method and device for planning path of unmanned aerial vehicle, and unmanned aerial vehicle |
CN110770791A (zh) * | 2018-11-22 | 2020-02-07 | 深圳市大疆创新科技有限公司 | 一种基于点云地图的图像边界获取方法、设备及飞行器 |
CN110799983A (zh) * | 2018-11-22 | 2020-02-14 | 深圳市大疆创新科技有限公司 | 一种地图生成方法、设备、飞行器及存储介质 |
WO2020103108A1 (zh) * | 2018-11-22 | 2020-05-28 | 深圳市大疆创新科技有限公司 | 一种语义生成方法、设备、飞行器及存储介质 |
CN111223139B (zh) * | 2018-11-26 | 2024-02-13 | 深圳市优必选科技有限公司 | 目标定位方法及终端设备 |
CN109559277B (zh) * | 2018-11-28 | 2023-02-28 | 中国人民解放军国防科技大学 | 一种面向数据共享的多无人机协同地图构建方法 |
US20220046859A1 (en) * | 2018-12-11 | 2022-02-17 | Tevel Aerobotics Technologies Ltd. | System and method for selective harvesting at night or under poor visibility conditions, night dilution and agriculture data collection |
CN109358650B (zh) * | 2018-12-14 | 2022-11-18 | 国网冀北电力有限公司检修分公司 | 巡检路径规划方法、装置、无人机和计算机可读存储介质 |
US11403955B2 (en) | 2018-12-14 | 2022-08-02 | Brunswick Corporation | Marine propulsion control system and method with proximity-based velocity limiting |
US11373537B2 (en) | 2018-12-21 | 2022-06-28 | Brunswick Corporation | Marine propulsion control system and method with collision avoidance override |
CN111360810A (zh) * | 2018-12-25 | 2020-07-03 | 深圳市优必选科技有限公司 | 机器人传感器的外参标定方法、装置、机器人及存储介质 |
US11257242B2 (en) * | 2018-12-31 | 2022-02-22 | Wipro Limited | Method and device for determining operation of an autonomous device |
US11702178B2 (en) | 2019-01-31 | 2023-07-18 | Brunswick Corporation | Marine propulsion control system, method, and user interface for marine vessel docking and launch |
US11257378B2 (en) | 2019-01-31 | 2022-02-22 | Brunswick Corporation | Marine propulsion control system and method |
CN109816697B (zh) * | 2019-02-02 | 2019-12-10 | 绥化学院 | 一种无人模型车建立地图的***及方法 |
DE102019103344B4 (de) * | 2019-02-11 | 2021-02-18 | Sick Ag | Positionsbestimmungssystem |
US11560153B2 (en) | 2019-03-07 | 2023-01-24 | 6 River Systems, Llc | Systems and methods for collision avoidance by autonomous vehicles |
US11092456B2 (en) * | 2019-03-08 | 2021-08-17 | Aptiv Technologies Limited | Object location indicator system and method |
US20200285255A1 (en) * | 2019-03-08 | 2020-09-10 | Here Global B.V. | Method and apparatus for providing drone-based alerting of movement of a part of a vehicle into a path of travel |
US11402220B2 (en) * | 2019-03-13 | 2022-08-02 | Here Global B.V. | Maplets for maintaining and updating a self-healing high definition map |
JP2020154764A (ja) * | 2019-03-20 | 2020-09-24 | 東芝テック株式会社 | 情報処理装置及び読取システム |
EP3719696A1 (en) | 2019-04-04 | 2020-10-07 | Aptiv Technologies Limited | Method and device for localizing a sensor in a vehicle |
CN113631883B (zh) * | 2019-04-04 | 2024-04-30 | 三菱电机株式会社 | 车辆定位装置 |
CN110081881B (zh) * | 2019-04-19 | 2022-05-10 | 成都飞机工业(集团)有限责任公司 | 一种基于无人机多传感器信息融合技术的着舰引导方法 |
WO2020215198A1 (zh) * | 2019-04-23 | 2020-10-29 | 深圳市大疆创新科技有限公司 | 一种数据处理方法、装置、设备及可移动平台 |
CN110032196B (zh) * | 2019-05-06 | 2022-03-29 | 北京云迹科技股份有限公司 | 一种机器人回充方法及装置 |
US11430341B2 (en) * | 2019-05-31 | 2022-08-30 | Cognizant Technology Solutions Sindia Pvt. Ltd. | System and method for optimizing unmanned aerial vehicle based warehouse management |
EP3980717A1 (en) * | 2019-06-04 | 2022-04-13 | Flir Unmanned Aerial Systems As | 3d localization and mapping system and method |
CA3143762A1 (en) * | 2019-06-17 | 2020-12-24 | Rohit Seth | Relative position tracking using motion sensor with drift correction |
US10937232B2 (en) | 2019-06-26 | 2021-03-02 | Honeywell International Inc. | Dense mapping using range sensor multi-scanning and multi-view geometry from successive image frames |
DE102019209398A1 (de) * | 2019-06-27 | 2020-12-31 | Robert Bosch Gmbh | Angleichen von Koordinatensystemen mehrerer Karten basierend auf Trajektorien |
CN110299030B (zh) * | 2019-06-28 | 2021-11-19 | 汉王科技股份有限公司 | 手持终端、飞行器及其空域测量方法、控制方法 |
CN110243381B (zh) * | 2019-07-11 | 2020-10-30 | 北京理工大学 | 一种陆空机器人协同感知监测方法 |
WO2021007716A1 (en) * | 2019-07-12 | 2021-01-21 | Beijing Voyager Technology Co., Ltd. | Systems and methods for positioning |
US11119510B2 (en) * | 2019-07-29 | 2021-09-14 | Aurora Flight Sciences Corporation, a subsidiary of The Boeing Company | Systems and methods for generating flight paths for navigating an aircraft |
CN112393756A (zh) * | 2019-08-13 | 2021-02-23 | 江苏美的清洁电器股份有限公司 | 一种地图生成方法、装置及存储介质 |
KR20210022941A (ko) * | 2019-08-21 | 2021-03-04 | 엘지전자 주식회사 | Slam을 구현하는 방법 및 전자 장치 |
CN110377058B (zh) * | 2019-08-30 | 2021-11-09 | 深圳市道通智能航空技术股份有限公司 | 一种飞行器的偏航角修正方法、装置及飞行器 |
CN110568860A (zh) * | 2019-09-17 | 2019-12-13 | 深圳市道通智能航空技术有限公司 | 一种无人飞行器的返航方法、装置及无人飞行器 |
CN112119361A (zh) * | 2019-09-23 | 2020-12-22 | 深圳市大疆创新科技有限公司 | 可移动平台的返航控制方法、装置及可移动平台 |
US11551560B2 (en) * | 2019-09-27 | 2023-01-10 | The Boeing Company | Enhanced flight navigation determination |
US20240028051A1 (en) * | 2019-10-04 | 2024-01-25 | Seekops Inc. | Closed surface flight pattern generation for unmanned aerial vehicle (uav) flux plane assessment of large facilities |
CN110597297A (zh) * | 2019-10-21 | 2019-12-20 | 深圳市道通智能航空技术有限公司 | 一种飞行器返航控制方法、装置、飞行器和存储介质 |
CN111006676B (zh) * | 2019-11-14 | 2021-08-31 | 广东博智林机器人有限公司 | 地图构建方法、装置及*** |
CN111127652A (zh) * | 2019-11-18 | 2020-05-08 | 广东博智林机器人有限公司 | 机器人的室内地图构建方法、装置及电子设备 |
CN111061270B (zh) * | 2019-12-18 | 2023-12-29 | 深圳拓邦股份有限公司 | 一种全面覆盖方法、***及作业机器人 |
KR102583960B1 (ko) * | 2020-01-06 | 2023-09-27 | 한국전자통신연구원 | 무인 비행체의 데이터 세트 생성 방법 및 장치 |
CN111208526B (zh) * | 2020-01-17 | 2022-07-08 | 西北工业大学 | 基于激光雷达与定位向量匹配的多无人机协同定位方法 |
US11642257B2 (en) * | 2020-01-22 | 2023-05-09 | Toyota Motor North America, Inc. | Mapping and data collection of in-building layout via mobility devices |
CN111504299B (zh) * | 2020-04-03 | 2023-08-18 | 北京小狗吸尘器集团股份有限公司 | 一种地图建立方法、装置、可读介质及电子设备 |
CN111338382B (zh) * | 2020-04-15 | 2021-04-06 | 北京航空航天大学 | 一种安全态势引导的无人机路径规划方法 |
CN111656138A (zh) * | 2020-04-16 | 2020-09-11 | 珊口(上海)智能科技有限公司 | 构建地图及定位方法、客户端、移动机器人及存储介质 |
US20210325898A1 (en) * | 2020-04-21 | 2021-10-21 | Micron Technology, Inc. | Using drone data to generate high-definition map for autonomous vehicle navigation |
CN113642355A (zh) * | 2020-04-27 | 2021-11-12 | 光宝电子(广州)有限公司 | 可移动式电子装置及其操作方法 |
TWI736235B (zh) * | 2020-04-27 | 2021-08-11 | 大陸商光寶電子(廣州)有限公司 | 可移動式電子裝置及其操作方法 |
DE102020205549A1 (de) * | 2020-04-30 | 2021-11-04 | Volkswagen Aktiengesellschaft | Verfahren zum Betrieb eines Transportmittel-Assistenz- oder Steuerungssystems |
US11561553B1 (en) * | 2020-05-11 | 2023-01-24 | Vecna Robotics, Inc. | System and method of providing a multi-modal localization for an object |
CN111665498B (zh) * | 2020-05-20 | 2023-04-18 | 浙江大华技术股份有限公司 | 环境视图的测绘方法、装置、便携式探测设备 |
US11815914B2 (en) * | 2020-05-20 | 2023-11-14 | Jonathan Ralph Burdick | Adaptive anti-laser system |
US11587241B2 (en) | 2020-05-29 | 2023-02-21 | Wing Aviation Llc | Detection of environmental changes to delivery zone |
WO2021262942A1 (en) | 2020-06-24 | 2021-12-30 | Sloan Valve Company | Hybrid time-of-flight sensor and ir sensor |
JP7075966B2 (ja) * | 2020-07-08 | 2022-05-26 | 楽天グループ株式会社 | 無人航空機制御システム、無人航空機制御方法、及びプログラム |
JP7047180B2 (ja) * | 2020-07-16 | 2022-04-04 | Kddi株式会社 | 管理装置 |
JP6994087B2 (ja) * | 2020-07-16 | 2022-01-14 | Kddi株式会社 | 飛行装置、飛行制御方法及びプログラム |
KR20220010929A (ko) * | 2020-07-20 | 2022-01-27 | 현대자동차주식회사 | 이종 센서 융합 장치 및 그의 이종 센서 융합 방법 |
CN113970919A (zh) * | 2020-07-21 | 2022-01-25 | 图森有限公司 | 用于自动路线导航的***和方法 |
TWI749656B (zh) * | 2020-07-22 | 2021-12-11 | 英屬維爾京群島商飛思捷投資股份有限公司 | 定位圖資建立系統及建立方法 |
WO2022027032A1 (en) * | 2020-07-27 | 2022-02-03 | Waymo Llc | Processing perspective view range images using neural networks |
US11875519B2 (en) * | 2020-08-13 | 2024-01-16 | Medhat Omr | Method and system for positioning using optical sensor and motion sensors |
US20220060628A1 (en) * | 2020-08-19 | 2022-02-24 | Honeywell International Inc. | Active gimbal stabilized aerial visual-inertial navigation system |
WO2022040653A1 (en) * | 2020-08-21 | 2022-02-24 | Drobotics, Llc | Neural networks for unmanned aerial vehicles and airborne traffic management |
CN112050814A (zh) * | 2020-08-28 | 2020-12-08 | 国网智能科技股份有限公司 | 一种室内变电站无人机视觉导航***及方法 |
CN112543938B (zh) * | 2020-09-29 | 2022-02-08 | 华为技术有限公司 | 占据栅格地图的生成方法和装置 |
US11609582B2 (en) | 2020-10-08 | 2023-03-21 | Ford Global Technologies, Llc | Systems and methods for planning a travel route of a multifunctional robot |
JP7435406B2 (ja) * | 2020-10-28 | 2024-02-21 | トヨタ自動車株式会社 | モビリティサービスシステム及びモビリティサービス提供方法 |
US11644837B2 (en) * | 2020-11-11 | 2023-05-09 | Northrop Grumman Systems Corporation | Systems and methods for output biasing of a machine learning recommendation engine |
CN112347218B (zh) * | 2020-11-12 | 2024-06-04 | 珠海云洲智能科技股份有限公司 | 无人船艇的环境地图生成方法及无人船艇感知*** |
US11927972B2 (en) | 2020-11-24 | 2024-03-12 | Lawrence Livermore National Security, Llc | Collision avoidance based on traffic management data |
EP4268043A1 (en) * | 2020-12-24 | 2023-11-01 | Alauda Aeronautics Pty Ltd | Collision avoidance for manned vertical take-off and landing aerial vehicles |
JP7026765B1 (ja) | 2020-12-28 | 2022-02-28 | 楽天グループ株式会社 | 制御システム、飛行体、及び、方法 |
CN112833890A (zh) * | 2020-12-30 | 2021-05-25 | 深圳市海柔创新科技有限公司 | 地图构建方法、装置、设备、机器人及存储介质 |
US11897608B2 (en) | 2021-01-29 | 2024-02-13 | Daniel Marion | Methods, systems, apparatuses, and devices for facilitating sampling water of water bodies |
US20240199204A1 (en) * | 2021-02-17 | 2024-06-20 | Alauda Aeronautics Pty Ltd | Manned vertical take-off and landing aerial vehicle navigation |
CN113075686B (zh) * | 2021-03-19 | 2024-01-12 | 长沙理工大学 | 一种基于多传感器融合的电缆沟智能巡检机器人建图方法 |
CN113030960B (zh) * | 2021-04-06 | 2023-07-04 | 陕西国防工业职业技术学院 | 一种基于单目视觉slam的车辆定位方法 |
EP4330946A1 (en) * | 2021-04-29 | 2024-03-06 | Skygrid, LLC | Unmanned aerial vehicle response to object detection |
CN113190638A (zh) * | 2021-05-08 | 2021-07-30 | 苏州触达信息技术有限公司 | 基于声音测距的电子地图绘制方法 |
US11886188B2 (en) | 2021-06-10 | 2024-01-30 | R-Go Robotics, Ltd. | Techniques for environmental parameter mapping |
WO2022264413A1 (ja) * | 2021-06-18 | 2022-12-22 | 株式会社センシンロボティクス | 移動体の移動経路生成方法及びプログラム、管理サーバ、管理システム |
CN113391649B (zh) * | 2021-08-17 | 2021-11-02 | 成都卡莱博尔信息技术股份有限公司 | 无人机显控一体方法和***、装置及计算机可读储存介质 |
US20230079054A1 (en) * | 2021-09-10 | 2023-03-16 | Exploration Robotics Technologies Inc. | System and method for autonomous inspection for asset maintenance and management |
US11977379B2 (en) | 2021-11-19 | 2024-05-07 | Honeywell International Inc. | Apparatuses, computer-implemented methods, and computer program product to assist aerial vehicle pilot for vertical landing and/or takeoff |
US20240053756A1 (en) * | 2021-12-01 | 2024-02-15 | Adata Technology Co., Ltd. | Autonomous mobile vehicle, and guidance and obstacle avoidance method for an environmental field |
DE102022106110A1 (de) | 2022-03-16 | 2023-09-21 | Spleenlab GmbH | Verfahren zum sicheren Bestimmen eines Flugpfads eines unbemannten Fluggeräts und unbemanntes Fluggerät |
TWI830363B (zh) * | 2022-05-19 | 2024-01-21 | 鈺立微電子股份有限公司 | 用於提供三維資訊的感測裝置 |
WO2023228283A1 (ja) * | 2022-05-24 | 2023-11-30 | 株式会社センシンロボティクス | 情報処理システム及び移動体、情報処理方法、プログラム |
CN115019167B (zh) * | 2022-05-26 | 2023-11-07 | 中国电信股份有限公司 | 基于移动终端的融合定位方法、***、设备及存储介质 |
US20240239531A1 (en) * | 2022-08-09 | 2024-07-18 | Pete Bitar | Compact and Lightweight Drone Delivery Device called an ArcSpear Electric Jet Drone System Having an Electric Ducted Air Propulsion System and Being Relatively Difficult to Track in Flight |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1645284A (zh) * | 2004-12-17 | 2005-07-27 | 华北电力大学(北京) | 电力线路巡检机器人飞机及其控制*** |
CN103400392A (zh) * | 2013-08-19 | 2013-11-20 | 山东鲁能智能技术有限公司 | 基于变电站巡检机器人的双目视觉导航***及方法 |
CN103914068A (zh) * | 2013-01-07 | 2014-07-09 | 中国人民解放军第二炮兵工程大学 | 一种基于栅格地图的服务机器人自主导航方法 |
Family Cites Families (230)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
GB1118961A (en) * | 1965-06-01 | 1968-07-03 | North American Aviation Inc | Terrain-following system |
JP2574456B2 (ja) * | 1989-03-15 | 1997-01-22 | 松下電器産業株式会社 | 自走式掃除機 |
US5173947A (en) * | 1989-08-01 | 1992-12-22 | Martin Marietta Corporation | Conformal image processing apparatus and method |
JP3040611B2 (ja) | 1992-09-17 | 2000-05-15 | 三菱重工業株式会社 | 低騒音ヘリコプタ |
IL112237A (en) | 1994-01-18 | 1998-03-10 | Honeywell Inc | System and method for evading threats to aircraft |
DE4425662C1 (de) | 1994-07-20 | 1995-11-16 | Koenig & Bauer Ag | Vorrichtung zum Quertrennen einer Papierbahn |
US5785281A (en) * | 1994-11-01 | 1998-07-28 | Honeywell Inc. | Learning autopilot |
JP3561547B2 (ja) * | 1995-03-02 | 2004-09-02 | 綜合警備保障株式会社 | 自律型移動体の走行制御システム |
FR2731824B1 (fr) | 1995-03-17 | 1997-05-16 | Sextant Avionique | Dispositif d'evitement de collisions pour aeronef notamment avec le sol |
US5682229A (en) * | 1995-04-14 | 1997-10-28 | Schwartz Electro-Optics, Inc. | Laser range camera |
IL117792A (en) * | 1995-05-08 | 2003-10-31 | Rafael Armament Dev Authority | Autonomous command and control unit for mobile platform |
US6539290B1 (en) | 1995-06-07 | 2003-03-25 | Dabulamanzi Holdings, Llc | Method, apparatus and design procedure for controlling multi-input, multi-output (MIMO) parameter dependent systems using feedback LTI'zation |
US5716032A (en) * | 1996-04-22 | 1998-02-10 | United States Of America As Represented By The Secretary Of The Army | Unmanned aerial vehicle automatic landing system |
US6056237A (en) * | 1997-06-25 | 2000-05-02 | Woodland; Richard L. K. | Sonotube compatible unmanned aerial vehicle and system |
JPH11282530A (ja) * | 1998-03-27 | 1999-10-15 | Sanyo Electric Co Ltd | 車両運行システム |
DE19849857C2 (de) * | 1998-10-29 | 2003-08-21 | Eads Deutschland Gmbh | Fernlenkverfahren für ein unbemanntes Luftfahrzeug |
AU1930700A (en) * | 1998-12-04 | 2000-06-26 | Interval Research Corporation | Background estimation and segmentation based on range and color |
US6377889B1 (en) * | 2000-10-13 | 2002-04-23 | Trimble Navigation Limited | Non-linear method of guiding to arbitrary curves with adaptive feedback |
US6804607B1 (en) * | 2001-04-17 | 2004-10-12 | Derek Wood | Collision avoidance system and method utilizing variable surveillance envelope |
US6597987B1 (en) | 2001-05-15 | 2003-07-22 | Navigation Technologies Corp. | Method for improving vehicle positioning in a navigation system |
CN1230350C (zh) * | 2001-07-06 | 2005-12-07 | 精工爱普生株式会社 | 飞船*** |
US20050231425A1 (en) | 2001-09-10 | 2005-10-20 | American Gnc Corporation | Wireless wide area networked precision geolocation |
US20030055540A1 (en) | 2001-09-20 | 2003-03-20 | Hansen James K. | Anti-terrorism aircraft flight control system |
JP2003127994A (ja) * | 2001-10-24 | 2003-05-08 | Kansai Electric Power Co Inc:The | 無人飛行物体の制御システム |
US6875019B2 (en) * | 2002-02-11 | 2005-04-05 | United Defense, Lp | Naval virtual target range system |
US6725152B2 (en) * | 2002-02-21 | 2004-04-20 | Lockheed Martin Corporation | Real-time route and sensor planning system with variable mission objectives |
US8111289B2 (en) * | 2002-07-15 | 2012-02-07 | Magna B.S.P. Ltd. | Method and apparatus for implementing multipurpose monitoring system |
US7231063B2 (en) * | 2002-08-09 | 2007-06-12 | Intersense, Inc. | Fiducial detection system |
JP4300010B2 (ja) * | 2002-10-08 | 2009-07-22 | 富士重工業株式会社 | 無人ヘリコプタ、無人ヘリコプタの離陸方法及び無人ヘリコプタの着陸方法 |
US7145478B2 (en) * | 2002-12-17 | 2006-12-05 | Evolution Robotics, Inc. | Systems and methods for controlling a density of visual landmarks in a visual simultaneous localization and mapping system |
DE10305861A1 (de) * | 2003-02-13 | 2004-08-26 | Adam Opel Ag | Vorrichtung eines Kraftfahrzeuges zur räumlichen Erfassung einer Szene innerhalb und/oder außerhalb des Kraftfahrzeuges |
SE0300871D0 (sv) | 2003-03-27 | 2003-03-27 | Saab Ab | Waypoint navigation |
US7343232B2 (en) | 2003-06-20 | 2008-03-11 | Geneva Aerospace | Vehicle control system including related methods and components |
US7061401B2 (en) | 2003-08-07 | 2006-06-13 | BODENSEEWERK GERäTETECHNIK GMBH | Method and apparatus for detecting a flight obstacle |
US7747067B2 (en) * | 2003-10-08 | 2010-06-29 | Purdue Research Foundation | System and method for three dimensional modeling |
US7130741B2 (en) | 2003-10-23 | 2006-10-31 | International Business Machines Corporation | Navigating a UAV with a remote control device |
US7107148B1 (en) * | 2003-10-23 | 2006-09-12 | International Business Machines Corporation | Navigating a UAV with on-board navigation algorithms with flight depiction |
US7231294B2 (en) | 2003-10-23 | 2007-06-12 | International Business Machines Corporation | Navigating a UAV |
US7689321B2 (en) * | 2004-02-13 | 2010-03-30 | Evolution Robotics, Inc. | Robust sensor fusion for mapping and localization in a simultaneous localization and mapping (SLAM) system |
US7831094B2 (en) * | 2004-04-27 | 2010-11-09 | Honda Motor Co., Ltd. | Simultaneous localization and mapping using multiple view feature descriptors |
US7818127B1 (en) | 2004-06-18 | 2010-10-19 | Geneva Aerospace, Inc. | Collision avoidance for vehicle control systems |
EP1612632B1 (en) * | 2004-07-03 | 2009-01-07 | Saab Ab | A system and method for in-flight control of an aerial vehicle |
US7228227B2 (en) * | 2004-07-07 | 2007-06-05 | The Boeing Company | Bezier curve flightpath guidance using moving waypoints |
US7302316B2 (en) | 2004-09-14 | 2007-11-27 | Brigham Young University | Programmable autopilot system for autonomous flight of unmanned aerial vehicles |
US20060058931A1 (en) | 2004-09-15 | 2006-03-16 | Honeywell International Inc. | Collision avoidance involving radar feedback |
EP1835835B1 (en) | 2004-10-08 | 2014-03-12 | Bell Helicopter Textron Inc. | Control system for automatic flight and windshear conditions |
US8078338B2 (en) | 2004-10-22 | 2011-12-13 | Irobot Corporation | System and method for behavior based control of an autonomous vehicle |
US7307579B2 (en) * | 2004-11-03 | 2007-12-11 | Flight Safety Technologies, Inc. | Collision alerting and avoidance system |
US7512462B2 (en) * | 2004-11-16 | 2009-03-31 | Northrop Grumman Corporation | Automatic contingency generator |
US7242791B2 (en) | 2005-01-04 | 2007-07-10 | Deere & Company | Method and system for guiding a vehicle with vision enhancement |
US7610123B2 (en) | 2005-01-04 | 2009-10-27 | Deere & Company | Vision-aided system and method for guiding a vehicle |
BRPI0606200A2 (pt) * | 2005-01-06 | 2009-11-17 | Alan Shulman | sistema de detecção cognitiva de alterações |
US20100001902A1 (en) | 2005-01-21 | 2010-01-07 | The Boeing Company | Situation awareness display |
US7228232B2 (en) * | 2005-01-24 | 2007-06-05 | International Business Machines Corporation | Navigating a UAV with obstacle avoidance algorithms |
US20100004798A1 (en) * | 2005-01-25 | 2010-01-07 | William Kress Bodin | Navigating a UAV to a next waypoint |
US7408627B2 (en) * | 2005-02-08 | 2008-08-05 | Canesta, Inc. | Methods and system to quantify depth data accuracy in three-dimensional sensors using single frame capture |
US7248952B2 (en) | 2005-02-17 | 2007-07-24 | Northrop Grumman Corporation | Mixed integer linear programming trajectory generation for autonomous nap-of-the-earth flight in a threat environment |
US20060235610A1 (en) | 2005-04-14 | 2006-10-19 | Honeywell International Inc. | Map-based trajectory generation |
US7266477B2 (en) | 2005-06-22 | 2007-09-04 | Deere & Company | Method and system for sensor signal fusion |
US7494320B2 (en) | 2005-06-28 | 2009-02-24 | Petter Muren | Rotor for passively stable helicopter |
US7792330B1 (en) * | 2005-09-30 | 2010-09-07 | Mustang Technology Group, L.P. | System and method for determining range in response to image data |
WO2007047953A2 (en) * | 2005-10-20 | 2007-04-26 | Prioria, Inc. | System and method for onboard vision processing |
WO2007048029A2 (en) | 2005-10-21 | 2007-04-26 | Deere & Company | Systems and methods for obstacle avoidance |
US8275544B1 (en) | 2005-11-21 | 2012-09-25 | Miltec Missiles & Space | Magnetically stabilized forward observation platform |
DE112006003363B4 (de) * | 2005-12-16 | 2016-05-04 | Ihi Corporation | Verfahren und Vorrichtung zur Identifizierung der Eigenposition, und Verfahren und Vorrichtung zur Messung einer dreidimensionalen Gestalt |
US20070171042A1 (en) * | 2005-12-22 | 2007-07-26 | Petru Metes | Tactical surveillance and threat detection system |
WO2008013568A2 (en) * | 2005-12-30 | 2008-01-31 | Irobot Corporation | Autonomous mobile robot |
US8577538B2 (en) * | 2006-07-14 | 2013-11-05 | Irobot Corporation | Method and system for controlling a remote vehicle |
US7431243B1 (en) | 2006-03-23 | 2008-10-07 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Guidance and control for an autonomous soaring UAV |
US8666661B2 (en) | 2006-03-31 | 2014-03-04 | The Boeing Company | Video navigation |
US7511662B2 (en) | 2006-04-28 | 2009-03-31 | Loctronix Corporation | System and method for positioning in configured environments |
US8108092B2 (en) * | 2006-07-14 | 2012-01-31 | Irobot Corporation | Autonomous behaviors for a remote vehicle |
US7822266B2 (en) | 2006-06-02 | 2010-10-26 | Carnegie Mellon University | System and method for generating a terrain model for autonomous navigation in vegetation |
WO2007143756A2 (en) | 2006-06-09 | 2007-12-13 | Carnegie Mellon University | System and method for autonomously convoying vehicles |
US8355818B2 (en) * | 2009-09-03 | 2013-01-15 | Battelle Energy Alliance, Llc | Robots, systems, and methods for hazard evaluation and visualization |
US8271132B2 (en) * | 2008-03-13 | 2012-09-18 | Battelle Energy Alliance, Llc | System and method for seamless task-directed autonomy for robots |
US7587260B2 (en) * | 2006-07-05 | 2009-09-08 | Battelle Energy Alliance, Llc | Autonomous navigation system and method |
US20080033645A1 (en) * | 2006-08-03 | 2008-02-07 | Jesse Sol Levinson | Pobabilistic methods for mapping and localization in arbitrary outdoor environments |
US7725257B2 (en) * | 2006-09-05 | 2010-05-25 | Honeywell International Inc. | Method and system for navigation of an ummanned aerial vehicle in an urban environment |
US20090177398A1 (en) | 2008-01-08 | 2009-07-09 | Trex Enterprises Corp. | Angles only navigation system |
US7747364B2 (en) * | 2006-12-06 | 2010-06-29 | Honeywell International Inc. | Methods, apparatus and systems for enhanced synthetic vision and multi-sensor data fusion to improve operational capabilities of unmanned aerial vehicles |
FR2910617B1 (fr) * | 2006-12-22 | 2009-03-06 | Thales Sa | Procede et dispositif de calcul d'une trajectoire decalee lateralement par rapport a une trajectoire de reference |
US20100250022A1 (en) | 2006-12-29 | 2010-09-30 | Air Recon, Inc. | Useful unmanned aerial vehicle |
US8072581B1 (en) * | 2007-01-19 | 2011-12-06 | Rockwell Collins, Inc. | Laser range finding system using variable field of illumination flash lidar |
US20080195316A1 (en) | 2007-02-12 | 2008-08-14 | Honeywell International Inc. | System and method for motion estimation using vision sensors |
US20080195304A1 (en) | 2007-02-12 | 2008-08-14 | Honeywell International Inc. | Sensor fusion for navigation |
EP1972893A1 (en) | 2007-03-21 | 2008-09-24 | Universiteit Gent | System and method for position determination |
JP2008304260A (ja) | 2007-06-06 | 2008-12-18 | Mitsubishi Electric Corp | 画像処理装置 |
DE102007032084A1 (de) * | 2007-07-09 | 2009-01-22 | Eads Deutschland Gmbh | Kollisions- und Konfliktvermeidungssystem für autonome unbemannte Flugzeuge (UAV) |
JP2009031884A (ja) | 2007-07-25 | 2009-02-12 | Toyota Motor Corp | 自律移動体、自律移動体におけるマップ情報作成方法および自律移動体における移動経路特定方法 |
JP2009041932A (ja) | 2007-08-06 | 2009-02-26 | Toyota Motor Corp | 移動体用測位装置 |
US20090058723A1 (en) | 2007-09-04 | 2009-03-05 | Mediatek Inc. | Positioning system and method thereof |
DE102007043534A1 (de) * | 2007-09-12 | 2009-03-19 | Robert Bosch Gmbh | Anordnung zum Erfassen einer Umgebung |
US7979174B2 (en) | 2007-09-28 | 2011-07-12 | Honeywell International Inc. | Automatic planning and regulation of the speed of autonomous vehicles |
US7606115B1 (en) | 2007-10-16 | 2009-10-20 | Scientific Applications & Research Associates, Inc. | Acoustic airspace collision detection system |
IL191615A (en) * | 2007-10-23 | 2015-05-31 | Israel Aerospace Ind Ltd | A method and system for producing tie points for use in stereo adjustment of stereoscopic images and a method for identifying differences in the landscape taken between two time points |
WO2009068624A1 (en) | 2007-11-27 | 2009-06-04 | Pilkington Italia S.P.A. | Glazing |
JP2011508190A (ja) | 2007-12-11 | 2011-03-10 | クゥアルコム・インコーポレイテッド | カメラ支援を伴うgnss方法及び受信機 |
US8718838B2 (en) | 2007-12-14 | 2014-05-06 | The Boeing Company | System and methods for autonomous tracking and surveillance |
US8082102B2 (en) * | 2008-01-14 | 2011-12-20 | The Boeing Company | Computing flight plans for UAVs while routing around obstacles having spatial and temporal dimensions |
US9641822B2 (en) * | 2008-02-25 | 2017-05-02 | Samsung Electronics Co., Ltd. | Method and apparatus for processing three-dimensional (3D) images |
US8108139B1 (en) * | 2008-02-29 | 2012-01-31 | Williams-Pyro, Inc. | System and method for route representation with waypoint storage |
EP2263096A1 (en) | 2008-03-26 | 2010-12-22 | Genova Robot SRL | A method and a device for determining of a vehicle for the autonomous driving of a vehicle, in particular a robotized vehicle |
US9766074B2 (en) * | 2008-03-28 | 2017-09-19 | Regents Of The University Of Minnesota | Vision-aided inertial navigation |
CN101445156B (zh) | 2008-05-15 | 2011-05-25 | 龚文基 | 智能化空中机器人***集成技术 |
US8239133B2 (en) | 2008-07-02 | 2012-08-07 | O2Micro, International | Global positioning system and dead reckoning (GPSandDR) integrated navigation system |
KR100955483B1 (ko) * | 2008-08-12 | 2010-04-30 | 삼성전자주식회사 | 3차원 격자 지도 작성 방법 및 이를 이용한 자동 주행 장치의 제어 방법 |
TWI408397B (zh) | 2008-08-15 | 2013-09-11 | Univ Nat Chiao Tung | Automatic navigation device with ultrasonic and computer vision detection and its navigation method |
US8521339B2 (en) * | 2008-09-09 | 2013-08-27 | Aeryon Labs Inc. | Method and system for directing unmanned vehicles |
CN101403620B (zh) | 2008-09-10 | 2013-04-24 | 深圳市同洲电子股份有限公司 | 导航装置及方法 |
US8818567B2 (en) | 2008-09-11 | 2014-08-26 | Deere & Company | High integrity perception for machine localization and safeguarding |
JP5359680B2 (ja) | 2008-09-17 | 2013-12-04 | 豊田合成株式会社 | 燃料遮断弁 |
DK2343615T3 (en) * | 2008-10-01 | 2019-02-18 | Murata Machinery Ltd | Independent movement device |
US8543265B2 (en) | 2008-10-20 | 2013-09-24 | Honeywell International Inc. | Systems and methods for unmanned aerial vehicle navigation |
US8538673B2 (en) | 2008-10-31 | 2013-09-17 | Czech Technical University In Prague | System and method for planning/replanning collision free flight plans in real or accelerated time |
US8412456B2 (en) | 2008-11-06 | 2013-04-02 | Texas Instruments Incorporated | Loosely-coupled integration of global navigation satellite system and inertial navigation system: speed scale-factor and heading bias calibration |
CN201331349Y (zh) | 2008-12-01 | 2009-10-21 | 深圳职业技术学院 | 运动位移无线检测*** |
CN201331348Y (zh) | 2009-01-06 | 2009-10-21 | 山东科沐华信息技术有限公司 | 惯导组合gps车载终端 |
WO2010088290A1 (en) | 2009-01-27 | 2010-08-05 | Arthur Thomas D | Tight optical intergation (toi) of images with gps range measurements |
US9127908B2 (en) * | 2009-02-02 | 2015-09-08 | Aero Vironment, Inc. | Multimode unmanned aerial vehicle |
US8340852B2 (en) * | 2009-04-29 | 2012-12-25 | Honeywell International Inc. | System and method for simultaneous localization and map building |
US8977407B2 (en) | 2009-05-27 | 2015-03-10 | Honeywell International Inc. | Adaptive user interface for semi-automatic operation |
US8473187B2 (en) * | 2009-06-01 | 2013-06-25 | Robert Bosch Gmbh | Method and apparatus for combining three-dimensional position and two-dimensional intensity mapping for localization |
US8265818B2 (en) * | 2009-06-04 | 2012-09-11 | Defense Technologies, Inc. | Open architecture command system |
US20110084162A1 (en) | 2009-10-09 | 2011-04-14 | Honeywell International Inc. | Autonomous Payload Parsing Management System and Structure for an Unmanned Aerial Vehicle |
DE102009049849B4 (de) * | 2009-10-19 | 2020-09-24 | Apple Inc. | Verfahren zur Bestimmung der Pose einer Kamera, Verfahren zur Erkennung eines Objekts einer realen Umgebung und Verfahren zur Erstellung eines Datenmodells |
US8566071B2 (en) | 2009-10-26 | 2013-10-22 | The United States Of America As Represented By The Secretary Of The Army | Calibration and synchronization of micro air vehicle autopilots |
US8913783B2 (en) * | 2009-10-29 | 2014-12-16 | Sri International | 3-D model based method for detecting and classifying vehicles in aerial imagery |
TWI391874B (zh) * | 2009-11-24 | 2013-04-01 | Ind Tech Res Inst | 地圖建置方法與裝置以及利用該地圖的定位方法 |
IL202460A (en) * | 2009-12-01 | 2013-08-29 | Rafael Advanced Defense Sys | Method and system for creating a 3D view of real arena for military planning and operations |
US8366054B2 (en) | 2009-12-17 | 2013-02-05 | The United States Of America As Represented By The Secretary Of The Navy | Hand launchable unmanned aerial vehicle |
US9097532B2 (en) * | 2010-01-20 | 2015-08-04 | Honeywell International Inc. | Systems and methods for monocular airborne object detection |
JP5498178B2 (ja) | 2010-01-21 | 2014-05-21 | 株式会社Ihiエアロスペース | 無人移動体の制御方法及び無人移動体 |
DE112011100458B4 (de) * | 2010-02-05 | 2024-02-01 | Trimble Navigation Limited | Systeme und Verfahren zur Verarbeitung von Kartierungs- und Modellierungsdaten |
CN101867868B (zh) | 2010-03-26 | 2012-11-28 | 东南大学 | 一种组合导航装置和实施方法 |
US8577535B2 (en) * | 2010-03-31 | 2013-11-05 | Massachusetts Institute Of Technology | System and method for providing perceived first-order control of an unmanned vehicle |
WO2011120141A1 (en) | 2010-03-31 | 2011-10-06 | Ambercore Software Inc. | Dynamic network adjustment for rigorous integration of passive and active imaging observations into trajectory determination |
US8639426B2 (en) | 2010-07-15 | 2014-01-28 | George C Dedes | GPS/IMU/video/radar absolute/relative positioning communication/computation sensor platform for automotive safety applications |
CN101950027A (zh) | 2010-08-18 | 2011-01-19 | 东莞市泰斗微电子科技有限公司 | 一种导航卫星信号接收模块及用于该模块的信息处理方法 |
US8774982B2 (en) | 2010-08-26 | 2014-07-08 | Leptron Industrial Robotic Helicopters, Inc. | Helicopter with multi-rotors and wireless capability |
WO2012037994A1 (en) | 2010-09-23 | 2012-03-29 | Telefonica, S.A. | Method and system for calculating the geo-location of a personal device |
US8676498B2 (en) | 2010-09-24 | 2014-03-18 | Honeywell International Inc. | Camera and inertial measurement unit integration with navigation data feedback for feature tracking |
CN102023003A (zh) * | 2010-09-29 | 2011-04-20 | 清华大学 | 基于激光探测和图像识别的无人直升机三维定位及测绘方法 |
US8378881B2 (en) | 2010-10-18 | 2013-02-19 | Raytheon Company | Systems and methods for collision avoidance in unmanned aerial vehicles |
US8712679B1 (en) * | 2010-10-29 | 2014-04-29 | Stc.Unm | System and methods for obstacle mapping and navigation |
US9690099B2 (en) * | 2010-12-17 | 2017-06-27 | Microsoft Technology Licensing, Llc | Optimized focal area for augmented reality displays |
JP5618840B2 (ja) * | 2011-01-04 | 2014-11-05 | 株式会社トプコン | 飛行体の飛行制御システム |
EP2482269B1 (en) | 2011-01-28 | 2017-03-22 | The Boeing Company | Providing data for predicting aircraft trajectory |
US8401225B2 (en) * | 2011-01-31 | 2013-03-19 | Microsoft Corporation | Moving object segmentation using depth images |
US8711206B2 (en) * | 2011-01-31 | 2014-04-29 | Microsoft Corporation | Mobile camera localization using depth maps |
DE102011010679A1 (de) | 2011-02-08 | 2012-08-09 | Eads Deutschland Gmbh | Unbemanntes Luftfahrzeug mit eingebautem Kollisionswarnsystem |
US20120213436A1 (en) * | 2011-02-18 | 2012-08-23 | Hexagon Technology Center Gmbh | Fast Image Enhancement and Three-Dimensional Depth Calculation |
EP2681635B8 (en) * | 2011-02-28 | 2022-07-20 | BAE Systems Australia Limited | Control computer for an unmanned vehicle |
US8868323B2 (en) * | 2011-03-22 | 2014-10-21 | Honeywell International Inc. | Collaborative navigation using conditional updates |
US20120271461A1 (en) * | 2011-04-20 | 2012-10-25 | Spata Gregory P | Capturing environmental information |
EP3211449B1 (en) * | 2011-05-06 | 2021-10-27 | Hadal, Inc. | Systems and methods for synthetic aperture sonar |
JP5776324B2 (ja) | 2011-05-17 | 2015-09-09 | 富士通株式会社 | 地図処理方法及びプログラム、並びにロボットシステム |
CN103256931B (zh) * | 2011-08-17 | 2014-11-26 | 清华大学 | 无人机的可视导航*** |
CN102393747B (zh) | 2011-08-17 | 2015-07-29 | 清华大学 | 无人机集群的协作交互方法 |
US8972053B2 (en) * | 2011-08-30 | 2015-03-03 | 5D Robotics, Inc. | Universal payload abstraction |
US9297881B2 (en) | 2011-11-14 | 2016-03-29 | Microsoft Technology Licensing, Llc | Device positioning via device-sensed data evaluation |
US8582195B2 (en) | 2011-11-29 | 2013-11-12 | General Electric Company | Systems and methods for relative positioning |
US9031782B1 (en) * | 2012-01-23 | 2015-05-12 | The United States Of America As Represented By The Secretary Of The Navy | System to use digital cameras and other sensors in navigation |
DE102012201870A1 (de) * | 2012-02-08 | 2013-08-08 | RobArt GmbH | Verfahren zum automatischen Auslösen einer Selbstlokalisierung |
US9463574B2 (en) * | 2012-03-01 | 2016-10-11 | Irobot Corporation | Mobile inspection robot |
CN103323002B (zh) * | 2012-03-19 | 2016-04-27 | 联想(北京)有限公司 | 即时定位与地图构建方法和装置 |
CA2872698C (en) | 2012-05-04 | 2018-07-24 | Aeryon Labs Inc. | System and method for controlling unmanned aerial vehicles |
US9384668B2 (en) * | 2012-05-09 | 2016-07-05 | Singularity University | Transportation using network of unmanned aerial vehicles |
CN102707724B (zh) | 2012-06-05 | 2015-01-14 | 清华大学 | 一种无人机的视觉定位与避障方法及*** |
JP5987259B2 (ja) * | 2012-06-19 | 2016-09-07 | 株式会社リコー | 自動運転ナビゲーションシステム |
JP2014002604A (ja) | 2012-06-19 | 2014-01-09 | Ricoh Co Ltd | 課金システム、課金方法、課金システムを備えた機器 |
US8682521B2 (en) * | 2012-06-25 | 2014-03-25 | The Boeing Company | Unpredictable vehicle navigation |
CN102722178B (zh) * | 2012-06-29 | 2014-02-26 | 山东电力集团公司电力科学研究院 | 用于无人机巡检带电导线的电场测量避障***及方法 |
CN102749927A (zh) | 2012-07-20 | 2012-10-24 | 常州大学 | 无人飞机自动规避障碍物的***及其规避方法 |
US9441985B2 (en) * | 2012-07-25 | 2016-09-13 | Rockwell Collins, Inc. | Future scene generating system, device, and method for a remotely-operated vehicle |
CN103576690B (zh) | 2012-07-25 | 2016-12-21 | 深圳市大疆创新科技有限公司 | 一种无人机遥控方法及设备、无人机 |
CN104769496B (zh) | 2012-08-17 | 2019-03-15 | 展望机器人股份公司 | 具有用于定位和交互的绳组件的飞行摄像机 |
US20140056438A1 (en) | 2012-08-21 | 2014-02-27 | Harman International Industries, Incorporated | System for vehicle sound synthesis |
US20150350614A1 (en) | 2012-08-31 | 2015-12-03 | Brain Corporation | Apparatus and methods for tracking using aerial video |
CN102854887A (zh) | 2012-09-06 | 2013-01-02 | 北京工业大学 | 一种无人机航迹规划和远程同步操控方法 |
CN203038112U (zh) | 2012-09-19 | 2013-07-03 | 苏州工业园区职业技术学院 | 无人机uav自动控制*** |
US9488492B2 (en) * | 2014-03-18 | 2016-11-08 | Sri International | Real-time system for multi-modal 3D geospatial mapping, object recognition, scene annotation and analytics |
CN202815124U (zh) * | 2012-10-16 | 2013-03-20 | 山东电力集团公司电力科学研究院 | 一种多旋翼无人机检测绝缘子装置 |
GB201218963D0 (en) * | 2012-10-22 | 2012-12-05 | Bcb Int Ltd | Micro unmanned aerial vehicle and method of control therefor |
US8798922B2 (en) * | 2012-11-16 | 2014-08-05 | The Boeing Company | Determination of flight path for unmanned aircraft in event of in-flight contingency |
CN202939489U (zh) * | 2012-11-28 | 2013-05-15 | 桂林飞宇电子科技有限公司 | 一种多旋翼自动平衡飞行控制器 |
US9198363B2 (en) * | 2012-12-12 | 2015-12-01 | The Boeing Company | Tree metrology system |
US9527587B2 (en) | 2012-12-19 | 2016-12-27 | Elwha Llc | Unoccupied flying vehicle (UFV) coordination |
CN103900583B (zh) * | 2012-12-25 | 2018-02-27 | 联想(北京)有限公司 | 用于即时定位与地图构建的设备和方法 |
US9051043B1 (en) * | 2012-12-28 | 2015-06-09 | Google Inc. | Providing emergency medical services using unmanned aerial vehicles |
US8909391B1 (en) * | 2012-12-28 | 2014-12-09 | Google Inc. | Responsive navigation of an unmanned aerial vehicle to a remedial facility |
CN103057712B (zh) * | 2012-12-31 | 2015-06-17 | 北京航空航天大学 | 微小型飞行机器人集成飞行控制*** |
CN103921933A (zh) | 2013-01-10 | 2014-07-16 | 深圳市大疆创新科技有限公司 | 飞行器变形结构及微型飞行器 |
CN103116360B (zh) * | 2013-01-31 | 2015-06-17 | 南京航空航天大学 | 一种无人机避障控制方法 |
CN103744430B (zh) | 2013-02-07 | 2016-08-24 | 山东英特力光通信开发有限公司 | 一种小型无人直升机飞行控制方法 |
US9102406B2 (en) | 2013-02-15 | 2015-08-11 | Disney Enterprises, Inc. | Controlling unmanned aerial vehicles as a flock to synchronize flight in aerial displays |
US9367067B2 (en) | 2013-03-15 | 2016-06-14 | Ashley A Gilmore | Digital tethering for tracking with autonomous aerial robot |
US8989922B2 (en) | 2013-03-15 | 2015-03-24 | Azure Sky Group, LLC. | Modular drone and methods for use |
US9085354B1 (en) * | 2013-04-23 | 2015-07-21 | Google Inc. | Systems and methods for vertical takeoff and/or landing |
US9037396B2 (en) | 2013-05-23 | 2015-05-19 | Irobot Corporation | Simultaneous localization and mapping for a mobile robot |
US8868328B1 (en) | 2013-06-04 | 2014-10-21 | The Boeing Company | System and method for routing decisions in a separation management system |
US8996207B2 (en) | 2013-06-24 | 2015-03-31 | Honeywell International Inc. | Systems and methods for autonomous landing using a three dimensional evidence grid |
CN203397214U (zh) | 2013-07-09 | 2014-01-15 | 国家电网公司 | 一种适用于山区电网巡检的专用无人直升机避障*** |
CN103365299B (zh) | 2013-08-02 | 2015-12-23 | 中国科学院自动化研究所 | 一种无人机的避障方法及其装置 |
CN203397215U (zh) | 2013-08-05 | 2014-01-15 | 上海久能能源科技发展有限公司 | 一种自锁式聚光反射定日镜 |
CN103970143B (zh) * | 2013-08-27 | 2017-03-29 | 清华大学 | 一种无人飞行器自主巡点飞行的智能优化方法 |
US20160137293A1 (en) | 2013-10-15 | 2016-05-19 | Skypersonic | Enclosed drone apparatus and method for use thereof |
US9234728B2 (en) | 2013-11-08 | 2016-01-12 | Lonestar Inventions, L.P. | Rocket or artillery launched smart reconnaissance pod |
US9158304B2 (en) * | 2013-11-10 | 2015-10-13 | Google Inc. | Methods and systems for alerting and aiding an emergency situation |
WO2015085483A1 (en) | 2013-12-10 | 2015-06-18 | SZ DJI Technology Co., Ltd. | Sensor fusion |
US8825226B1 (en) | 2013-12-17 | 2014-09-02 | Amazon Technologies, Inc. | Deployment of mobile automated vehicles |
CN103809597B (zh) * | 2014-02-18 | 2016-09-21 | 清华大学 | 无人机的飞行路径规划方法及无人机 |
CN103901892B (zh) * | 2014-03-04 | 2016-12-07 | 清华大学 | 无人机的控制方法及*** |
CN103941747B (zh) * | 2014-03-31 | 2016-08-17 | 清华大学 | 无人机群的控制方法及*** |
CN103914077A (zh) | 2014-04-03 | 2014-07-09 | 江西洪都航空工业集团有限责任公司 | 一种有人/无人可选择双模飞行控制*** |
CN103925920B (zh) | 2014-04-10 | 2016-08-17 | 西北工业大学 | 一种基于图像透视的微型无人机室内自主导航方法 |
CN103941748B (zh) * | 2014-04-29 | 2016-05-25 | 百度在线网络技术(北京)有限公司 | 自主导航方法及***和地图建模方法及*** |
CN103941750B (zh) * | 2014-04-30 | 2016-08-31 | 东北大学 | 基于小型四旋翼无人机的构图装置及方法 |
US9354296B2 (en) | 2014-05-20 | 2016-05-31 | Verizon Patent And Licensing Inc. | Dynamic selection of unmanned aerial vehicles |
CN103984357B (zh) | 2014-05-30 | 2017-02-01 | 中国人民解放军理工大学 | 一种基于全景立体成像设备的无人机自动避障飞行*** |
JP6062079B2 (ja) | 2014-05-30 | 2017-01-18 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 無人型航空輸送機(uav)の動作を制御するための制御器および方法ならびに乗り物 |
CN107577247B (zh) | 2014-07-30 | 2021-06-25 | 深圳市大疆创新科技有限公司 | 目标追踪***及方法 |
EP3855276A1 (en) * | 2014-09-05 | 2021-07-28 | SZ DJI Technology Co., Ltd. | Multi-sensor environmental mapping |
JP6181300B2 (ja) | 2014-09-05 | 2017-08-16 | エスゼット ディージェイアイ テクノロジー カンパニー リミテッドSz Dji Technology Co.,Ltd | 無人航空機の速度を制御するシステム |
CN105517666B (zh) | 2014-09-05 | 2019-08-27 | 深圳市大疆创新科技有限公司 | 基于情景的飞行模式选择 |
CN107108022B (zh) | 2014-12-19 | 2021-01-15 | 威罗门飞行公司 | 用于控制和限制无人机***(uas)操作的监管安全*** |
US9552736B2 (en) | 2015-01-29 | 2017-01-24 | Qualcomm Incorporated | Systems and methods for restricting drone airspace access |
DE102015204947B4 (de) | 2015-03-19 | 2021-09-09 | Ford Global Technologies, Llc | Verfahren und Vorrichtung zum Betrieb eines wahlweise manuell steuerbaren oder zu autonomem Fahren fähigen Fahrzeugs |
US9592912B1 (en) | 2016-03-08 | 2017-03-14 | Unmanned Innovation, Inc. | Ground control point assignment and determination system |
US11232713B2 (en) | 2020-04-30 | 2022-01-25 | Dedrone Holdings, Inc. | Systems, methods, apparatuses, and devices for identifying, tracking, and deterring unmanned aerial vehicles via ADS-B signals |
-
2014
- 2014-09-05 EP EP21158873.6A patent/EP3855276A1/en not_active Withdrawn
- 2014-09-05 EP EP14901421.9A patent/EP3103043B1/en active Active
- 2014-09-05 CN CN201910354911.7A patent/CN110174903B/zh active Active
- 2014-09-05 CN CN202210350511.0A patent/CN114675671A/zh active Pending
- 2014-09-05 CN CN201480031173.8A patent/CN105492985B/zh active Active
- 2014-09-05 WO PCT/CN2014/086007 patent/WO2016033797A1/en active Application Filing
- 2014-09-05 ES ES18188201T patent/ES2876449T3/es active Active
- 2014-09-05 JP JP2016533706A patent/JP6235716B2/ja active Active
- 2014-09-05 DK DK18188201.0T patent/DK3428766T3/da active
- 2014-09-05 CN CN201811161897.0A patent/CN109388150B/zh active Active
- 2014-09-05 EP EP18188201.0A patent/EP3428766B1/en active Active
-
2015
- 2015-07-30 US US14/814,159 patent/US10429839B2/en not_active Expired - Fee Related
-
2019
- 2019-09-18 US US16/574,848 patent/US10901419B2/en active Active
-
2021
- 2021-01-25 US US17/157,905 patent/US11914369B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1645284A (zh) * | 2004-12-17 | 2005-07-27 | 华北电力大学(北京) | 电力线路巡检机器人飞机及其控制*** |
CN103914068A (zh) * | 2013-01-07 | 2014-07-09 | 中国人民解放军第二炮兵工程大学 | 一种基于栅格地图的服务机器人自主导航方法 |
CN103400392A (zh) * | 2013-08-19 | 2013-11-20 | 山东鲁能智能技术有限公司 | 基于变电站巡检机器人的双目视觉导航***及方法 |
Also Published As
Publication number | Publication date |
---|---|
DK3428766T3 (da) | 2021-06-07 |
CN109388150B (zh) | 2022-04-29 |
US20210247764A1 (en) | 2021-08-12 |
JP6235716B2 (ja) | 2017-11-22 |
CN110174903A (zh) | 2019-08-27 |
CN114675671A (zh) | 2022-06-28 |
EP3855276A1 (en) | 2021-07-28 |
US10901419B2 (en) | 2021-01-26 |
WO2016033797A1 (en) | 2016-03-10 |
ES2876449T3 (es) | 2021-11-12 |
US10429839B2 (en) | 2019-10-01 |
CN105492985A (zh) | 2016-04-13 |
CN105492985B (zh) | 2019-06-04 |
EP3428766A1 (en) | 2019-01-16 |
EP3103043A4 (en) | 2017-04-19 |
US20200142410A1 (en) | 2020-05-07 |
EP3103043B1 (en) | 2018-08-15 |
US11914369B2 (en) | 2024-02-27 |
US20160070265A1 (en) | 2016-03-10 |
CN109388150A (zh) | 2019-02-26 |
EP3103043A1 (en) | 2016-12-14 |
JP2017501484A (ja) | 2017-01-12 |
EP3428766B1 (en) | 2021-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11914369B2 (en) | Multi-sensor environmental mapping | |
JP6487010B2 (ja) | ある環境内で無人航空機を制御する方法、ある環境のマップを生成する方法、システム、プログラムおよび通信端末 | |
AU2020289790B2 (en) | Drop-off location planning for delivery vehicle | |
US10599149B2 (en) | Salient feature based vehicle positioning | |
CN107850902B (zh) | 可移动物体上的相机配置 | |
CN109923492B (zh) | 飞行路径确定 | |
CN111506109B (zh) | 传感器数据的选择性处理 | |
JP6278539B2 (ja) | 状況に基づく飛行モード選択 | |
JP6329642B2 (ja) | センサ融合 | |
WO2016179802A1 (en) | Apparatuses and methods of recognizing or detecting an obstacle |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |