CN102356417B - 用于通过人工操作员对机器进行远程控制的遥操作方法和人机界面 - Google Patents
用于通过人工操作员对机器进行远程控制的遥操作方法和人机界面 Download PDFInfo
- Publication number
- CN102356417B CN102356417B CN200980158119.9A CN200980158119A CN102356417B CN 102356417 B CN102356417 B CN 102356417B CN 200980158119 A CN200980158119 A CN 200980158119A CN 102356417 B CN102356417 B CN 102356417B
- Authority
- CN
- China
- Prior art keywords
- remote control
- machine
- vestibular
- operator
- feedback
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 24
- 230000001720 vestibular Effects 0.000 claims abstract description 104
- 230000000007 visual effect Effects 0.000 claims description 25
- 230000001133 acceleration Effects 0.000 claims description 6
- 238000001914 filtration Methods 0.000 claims description 3
- 238000005259 measurement Methods 0.000 claims description 2
- 238000012549 training Methods 0.000 claims description 2
- 238000004891 communication Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 3
- 210000000707 wrist Anatomy 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 241001269238 Data Species 0.000 description 1
- 241001465754 Metazoa Species 0.000 description 1
- QBWCMBCROVPCKQ-UHFFFAOYSA-N chlorous acid Chemical compound OCl=O QBWCMBCROVPCKQ-UHFFFAOYSA-N 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
- G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
- G09B9/08—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of aircraft, e.g. Link trainer
- G09B9/48—Simulators for teaching or training purposes for teaching control of vehicles or other craft for teaching control of aircraft, e.g. Link trainer a model being viewed and manoeuvred from a remote point
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0011—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement
- G05D1/005—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots associated with a remote control arrangement by providing the operator with signals other than visual, e.g. acoustic, haptic
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
- G09B9/02—Simulators for teaching or training purposes for teaching control of vehicles or other craft
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Aviation & Aerospace Engineering (AREA)
- General Physics & Mathematics (AREA)
- Educational Technology (AREA)
- Educational Administration (AREA)
- Business, Economics & Management (AREA)
- Acoustics & Sound (AREA)
- Human Computer Interaction (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Automation & Control Theory (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
- Manipulator (AREA)
Abstract
本发明涉及用于使用远程控制单元由人工操作员(5)来对机器进行远程控制的遥操作方法和人机界面,特别是对无人驾驶飞机进行远程控制的遥操作方法和人机界面,其中,将前庭反馈提供给操作员(5)以增强操作员(5)的环境感知,其中,前庭反馈表示远程控制机器的真实运动。
Description
技术领域
本发明涉及一种用于使用远程控制单元由人工操作员来对机器进行远程控制的遥操作(teleoperation)方法,特别是用于对无人机(UAV)进行远程控制的遥操作方法。
此外,本发明涉及一种用于在前面提到的遥操作方法中使用的人机界面(HRI)。
背景技术
在现代战争中,在侦查任务甚至是战斗任务中使用所谓的无人机(UAV)。通常而言,这些UAV是由操作员远程控制的,操作员经由无线电通信链路与UAV连接。然而,在这种远程控制场景中,操作员的环境感知(situational awareness)较差可能导致错误的反应,并且在最坏的情况中,会导致无人机的完全损失。
因此,用于对UAV进行远程控制的传统遥操作方法是不尽如人意的,这是因为这些传统方法经常导致操作员的错误反应和相当数量的完全无人机损失。
发明内容
因此,本发明的一个目标是改善前面提到的用于对UAV进行远程控制的传统遥操作方法。
本发明的进一步目标是提供用于在新颖的遥操作方法中使用的人机界面(HRI)。
这些目标是通过根据独立权利要求的新颖的遥操作方法和相应的人机界面来实现的。
发明人已经认识到前面提到的远程控制的UAV的损失主要是由操作员的环境感知较差所导致的。因此,本发明通过向操作员提供前庭(vestibular)反馈来改善操作员的环境感知。
优选地,前庭反馈是通过向操作员施加与远程控制机器的运动相对应的运动来向操作员提供的,使得操作员感受到犹如该操作员在远程控制机器(例如,UAV)上那样的大体上相同的前庭感觉。但是,在本发明的上下文中所使用的术语“前庭反馈”不限于其中操作员完成大体上与远程控制机器相同的运动的这些实施例。提供给操作员的前庭反馈仅包括少于三个自由度的操作员运动是非常有可能的。举例而言,有可能操作员经历与俯仰角和翻转角相关的运动,而偏航角是固定的。进一步,有可能前庭反馈仅重现远程控制机器的空间方位,而提供给操作员的前庭反馈不重现远程控制机器的加速度。但是,优选地,前庭反馈重现与远程控制机器的真实运动尽可能地相似的操作员运动。
优选地,新颖的遥操作方法包括:确定表示远程控制机器的真实运动的前庭数据的步骤。随后,基于远程控制机器的前庭数据来确定前庭反馈。接着,向操作员施加与远程控制机器的运动相对应的运动,其中,操作员的运动提供前庭反馈,并且操作员的运动是根据远程控制机器的前庭数据来产生的。
针对确定用于产生前庭反馈所需要的前庭数据,有若干不同的选择。
在本发明的一个实施例中,表示远程控制机器的真实运动的前庭数据是由远程控制机器的机载传感器来测量的。举例而言,UAV上可能载有陀螺仪和加速计,其中,这些传感器以远程控制机器的姿态(例如,俯仰角、翻转角、偏航角和线性坐标)、UAV的速度和加速度的形式来测量前庭数据。随后,由机载传感器测量的前庭数据经由通信链路(例如,无线电通信链路)从远程控制机器发送到远程控制单元。
在本发明的另一个实施例中,表示远程控制机器的真实运动的前庭数据是由固定的运动跟踪***来远程测量的,使得不需要将前庭数据经由无线链路从远程控制机器发送到远程控制单元。适当的运动跟踪***在商业上是可用的,例如,来自威康运动***(Vicon Motion System)公司的运动跟踪***,使得不需要对运动跟踪***作进一步的解释。
进一步的,前庭数据可以由前面所提到的替代物的混合来计算。举例而言,可以通过机载传感器来测量原始数据。随后,原始数据被发送到远程控制单元,在远程控制单元处,原始数据被用于例如更新远程控制机器的动态模型。
在本发明的另一个实施例中,完全不测量表示远程控制机器的真实运动的前庭数据,前庭数据是根据从远程控制单元发送到远程控制机器的运动命令来得到的。换句话说,可以在考虑远程控制机器的行为的动态模型的情况下基于运动命令信号来计算前庭数据。
在本发明的一个优选的实施例中,前庭反馈是通过承载操作员的自动设备(robot)提供给操作员的。优选地,自动设备是多轴串行操纵器,后者包括通过接合部连接的若干个连杆(link)。这种多轴自动设备在商业上是可用的,例如,来自德国公司KUKA Roboter股份有限公司的品牌Robocoaster但是,也可以使用来自不同厂商的其他类型自动设备来实现本发明。或者,自动设备可以是并行操纵器,特别是所谓的Stewart平台。
在优选的实施例中,本申请额外地向操作员提供其他类型的反馈(例如,视觉反馈、声反馈和/或触觉反馈),以进一步增强操作员的环境感知。
对于向操作员提供视觉反馈,有不同的选择。在本发明的一个实施例中,虚拟场景是基于远程控制机器的前庭数据来计算的。随后,将虚拟场景显示给操作员。
在本发明的另一个实施例中,远程控制机器(例如,UAV)包括用于从远程控制机器的视角来拍摄照片的机载相机。随后,这些图像经由通信链路发送到远程控制单元,在远程控制单元处,将这些图像显示给操作员。
前面已经提到,优选地,远程控制机器和远程控制单元之间有通信链路。这个通信链路优选的是无线链路(例如,无线电通信链路、红外远程控制链路或超声远程控制链路)。但是,远程控制机器和远程控制单元之间的通信链路也可以是有线通信链路。举例而言,远程控制机器和远程控制单元可以通过光学纤维或电力电缆来互连。
此外,已经提到,优选地,前庭数据包括远程控制机器的姿态,特别是远程控制机器的俯仰角、翻转角、偏航角和/或线性坐标。进一步,前庭数据可以包括远程控制机器的速度,特别是远程控制机器的俯仰角、翻转角和/或偏航角的时间变化。此外,前庭数据包括远程控制机器的加速度(特别是远程控制机器的俯仰角、翻转角和/或偏航角的加速度)是可能的。换句话说,前庭数据优选地包括远程控制机器的所有运动数据,这些数据对于重现几乎相同的操作员运动而言是必要的。
在本发明的一个优选的实施例中,远程控制机器是无人机(UAV),这已经在上文中提到。但是,远程控制机器是无人地面车辆(UGV),特别是无人地面战斗车辆(UGCV)也是可能的。本发明的进一步应用包括对远程操作的水下运载工具或无人宇宙飞船进行远程控制。此外,本发明在医学技术领域中对所谓的纳米机器人进行导航以使其通过动物体而言可能是有用的。
在本发明的优选实施例中,在基于经过滤的前庭数据来确定前庭反馈之前,对前庭数据进行过滤,其中,前庭数据的过滤确保了提供给操作员的前庭反馈符合安全限制和/或机械限制。举例而言,如果远程控制的UAV与另一个飞行物或地面碰撞,则不期望在前庭反馈中重现该UAV的坠毁,这是因为前庭反馈设备(例如,自动设备)和操作员将会由于坠毁的重现而机械性地过度紧张。
进一步需要注意的是,本发明不限于前面所提到的新颖的遥操作方法。本发明还包括用于在前面提到的遥操作方法中使用的相应的人机界面(HRI)。这个新颖的人机界面的特征在于其向操作员提供前庭反馈以增强操作员的环境感知,其中,前庭反馈表示远程控制机器的真实运动。
在本发明的优选实施例中,人机界面包括用于从远程控制物接收前庭数据的接收机,其中,前庭数据是由上面所提到的机载传感器来确定的。进一步,优选地,人机界面包括:用于基于经由通信链路从远程控制机器接收的前庭数据来确定适当的前庭反馈的控制器。此外,根据本发明的人机界面优选地包括用于向操作员提供前庭反馈的前庭反馈设备。
优选地,前庭反馈设备是自动设备(例如,串行操纵器或并行操纵器)。
前面提到的用作前庭反馈设备的自动设备承载操作员,使得自动设备可以重现远程控制机器的真实运动。优选地,自动设备还承载视觉反馈设备(特别是显示屏或投影***)以向操作员提供视觉反馈,其中,视觉反馈的产生已经在上文中进行了描述。为了进一步增强操作员的环境感知,优选地,自动设备还承载向操作员提供声反馈的声反馈设备以及向操作员提供触觉反馈的触觉反馈设备。操作员可以坐在自动设备承载的座位上,其中,操作员可以操作用于产生运动命令的控制杆或类似的控制设备,这些运动命令被发送到远程控制机器以用于控制远程控制机器的真实运动。
前面提到的***可以用于训练运载工具(特别是飞机或宇宙飞船)的驾驶员。但是,本发明不限于说明书中所公开的应用。
参考附图进行考虑,根据以下详细描述,本发明以及其特定的特征和优点将变得更为清楚。
附图说明
图1是示出了包括通过无线通信链路互连的远程控制机器和远程控制单元的遥操作***的示图,其中,远程控制单元向操作员提供前庭反馈,由此增强操作员的环境感知。
图2是与图1类似的遥操作***的替代实施例,其中,提供前庭反馈所需要的前庭数据是由固定的运动跟踪***来测量的。
图3示出了承载操作员的多轴串行自动设备的透视图,使得自动设备向操作员提供前庭反馈。
具体实施方式
图1示出了用于通过远程控制单元2来对无人机(UAV)1进行远程控制的人机界面(HRI)的原理图,其中,无人机1和远程控制单元2是通过无线电通信链路3互连的。
远程控制单元2包括输入设备4(例如,控制杆、踏板)。操作员5(参见图3)操作输入设备4,由此产生限定无人机1的所期望运动的运动命令。
经由远程控制单元2的收发机7和天线8、无线电通信链路3和无人机1中的天线9将运动命令发送到无人机1中的接收机6。
接收机6将运动命令转发到飞行控制器10,飞行控制器10相应地控制若干个执行机构11,其中,执行机构11根据从远程控制单元2接收的运动命令来调整例如无人机1的方向舵。
此外,无人机1包括若干个用于测量飞行数据(例如,姿态、空速)的若干个机载传感器12。这些飞行数据被提供到飞行控制器10,飞行控制器10在控制执行机构11时考虑这些飞行数据。
此外,无人机1包括用于测量无人机1的前庭数据(例如,无人机1的俯仰角、翻转角、偏航角)的机载前庭传感器13。由机载前庭传感器13测量的前庭数据还被提供给飞行控制器10,飞行控制器10在控制执行机构11时考虑该前庭数据。
此外,由传感器12测量的飞行数据和由前庭传感器13测量的前庭数据被提供给收发机14,收发机14将这些飞行数据(包含前庭数据)经由无线电通信链路3发送到远程控制单元2中的接收机15。
前庭数据经由过滤器17被提供到控制器16,其中,过滤器17确保前庭数据不会导致违反安全限制和机械限制的前庭反馈。
其他飞行数据被直接提供给控制器16。
控制器16控制如图3所示的多轴串行自动设备18,其中,自动设备18承载操作员5,使得自动设备18可以向操作员5提供前庭反馈。因此,控制器16以这样的方式来控制自动设备18:向操作员5施加与无人机1的真实运动(如由前庭传感器13测量的前庭数据所表示的)大体上相同的运动。因此,在无人机1的远程控制期间,自动设备18提供给操作员5的前庭反馈显著地改善了操作员5的环境感知。
此外,控制器16以传统方式控制力反馈设备19和声反馈设备220,以在无人机1的远程控制期间进一步增强操作员5的环境感知。
此外,远程控制单元2包括视觉反馈设备21,视觉反馈设备21也由控制器16控制并且由自动设备18承载。在无人机1的远程控制期间,视觉反馈设备1向操作员5提供视觉反馈。在本发明的一个实施例中,由视觉反馈设备21提供的视觉反馈是由无人机1中的机载相机产生的图像流。在本发明的另一实施例中,由视觉反馈设备21提供给操作员5的视觉反馈是由控制器16基于由无人机1中的机载前庭传感器13测量的前庭数据来计算的虚拟场景。
图2示出了与根据图1的实施例类似的替代实施例,使得参考上文的描述,其中,对于相应的部件和细节,使用相同的附图标记。
这个实施例的一个典型特征是表示无人机1的真实运动的前庭数据不是由机载前庭传感器13测量的,而是由与远程控制单元2相关联的运动跟踪***22测量的。
最后,图3示出了向操作员5提供前庭反馈的多轴自动设备18的原理图。
自动设备18包括固定的自动设备底座23和通过接合部连接的若干个自动设备连杆24、25和26,其中,远端连杆26承载自动设备腕部27,自动设备腕部27上安装了平台28。平台28承载具有操作员5的座位29,其中,操作员5可以操作控制杆形式的输入设备4。此外,视频屏幕形式的视觉反馈设备21被布置在操作员5的视场中,使得操作员5观看视觉反馈设备21提供的视觉反馈。
虽然,参考部件、特征等的特定布置来对本发明进行了描述,但是这些描述并非旨在穷尽所有可能的特征安排,并且对本领域的技术人员而言,很多其他的修改以及变形是可以确定的。
附图标记列表:
1 无人机
2 远程控制单元
3 无线电通信链路
4 输入设备
5 操作员
6 接收机
7 收发机
8 天线
9 天线
10 飞行控制器
11 执行机构
12 传感器
13 前庭传感器
14 收发机
15 接收机
16 控制器
17 过滤器
18 自动设备
19 力反馈设备
20 声反馈设备
21 视觉反馈设备
22 运动跟踪***
23 自动设备底座
24 连杆
25 连杆
26 连杆
27 自动设备腕部
28 平台
29 座位
Claims (17)
1.一种用于使用远程控制单元(2)由人工操作员(5)来对机器(1)进行远程控制的遥操作方法,包括以下步骤:
确定表示所述远程控制机器(1)的运动的前庭数据,
基于所述远程控制机器(1)的所述前庭数据来确定前庭反馈,其中所述前庭反馈表示所述远程控制机器(1)的真实运动,
由自动设备(18)向所述操作员(5)提供所述前庭反馈以增强所述操作员(5)的环境感知,其中所述自动设备(18)承载所述操作员(5),
其特征在于以下步骤:
对所述前庭数据进行过滤,
基于经过滤的前庭数据来确定所述前庭反馈,其中所述前庭数据的所述过滤确保所述前庭反馈符合承载所述操作员(5)的所述自动设备(18)的安全限制和/或机械限制。
2.根据权利要求1所述的遥操作方法,包括以下步骤:
向所述操作员(5)施加与所述远程控制机器的所述运动相对应的运动,其中,所述操作员(5)的所述运动提供所述前庭反馈并且是根据所述远程控制机器(1)的所述前庭数据来产生的。
3.根据权利要求2所述的遥操作方法,进一步包括以下步骤以用于确定所述前庭数据:
a)由所述远程控制机器(1)的机载传感器(13)测量所述前庭数据,以及
b)将所测量的前庭数据从所述远程控制机器(1)发送到所述远程控制单元(2),以向所述操作员(5)提供相应的前庭反馈。
4.根据权利要求2所述的遥操作方法,进一步包括以下步骤以确定所述前庭数据:
由运动跟踪***(22)远程测量所述远程控制机器(1)的所述前庭数据,使得不需要将所述前庭数据从所述远程控制机器(1)发送到所述远程控制单元(2)。
5.根据权利要求1所述的遥操作方法,其中,所述自动设备(18)是选择由以下所组成的组中的机器:
a)多轴串行操纵器,其包括通过接合部连接的若干个连杆,
b)并行操纵器,
c)Stewart平台。
6.根据权利要求1所述的遥操作方法,包括以下步骤:
向所述操作员(5)提供视觉反馈,其中,所述视觉反馈表示所述远程控制机器(1)的所述运动。
7.根据权利要求6所述的遥操作方法,包括以下步骤以用于向所述操作员(5)提供视觉反馈:
a)基于所述前庭数据来计算虚拟场景,以及
b)向所述操作员(5)显示所述虚拟场景。
8.根据权利要求6所述的遥操作方法,包括以下步骤以用于向所述操作员(5)提供所述视觉反馈:
a)利用机载相机从所述远程控制机器(1)的视角产生图像,
b)将所述图像从所述远程控制机器(1)发送到所述控制单元,
c)将所述图像显示给所述操作员(5)。
9.根据权利要求1所述的遥操作方法,其中,所述前庭数据包括以下数据:
a)所述远程控制机器(1)的姿态,即所述远程控制机器(1)的俯仰角、翻转角和偏航角,
b)所述远程控制机器(1)的速度,即所述远程控制机器(1)的所述俯仰角、所述翻转角和所述偏航角的时间变化,
c)所述远程控制机器(1)的加速度,即所述远程控制机器(1)的所述俯仰角、所述翻转角、所述偏航角和线性坐标的加速度。
10.根据权利要求1所述的遥操作方法,其中,所述远程控制机器是从由以下所组成的组中选择的:
a)无人机,
b)无人地面车辆,
c)水下运载工具,
d)无人地面战斗车辆。
11.一种用于使用远程控制单元(2)由人工操作员(5)来对远程控制机器(1)进行远程控制的人机界面,其中
所述人机界面向所述操作员(5)提供前庭反馈以增强所述操作员(5)的环境感知,
所述前庭反馈表示所述远程控制机器(1)的运动,
由自动设备(18)提供所述前庭反馈,其中所述自动设备(18)承载所述操作员(5),
其特征在于:
过滤器(17),用于对所述前庭数据进行过滤,从而基于经过滤的前庭数据来确定所述前庭反馈,其中所述前庭数据的所述过滤确保所述前庭反馈符合承载所述操作员(5)的所述自动设备(18)的安全限制和/或机械限制。
12.根据权利要求11所述的人机界面,包括:
a)用于从所述远程控制机器(1)接收前庭数据的接收机(15),其中,所述前庭数据是由机载传感器(13)来确定的,
b)用于基于从所述远程控制机器接收的所述前庭数据来确定所述前庭反馈的控制器(16),
c)用于向所述操作员(5)提供所述前庭反馈的前庭反馈设备。
13.根据权利要求11所述的人机界面,其中所述自动设备是从由以下所组成的组中选择的:
a)串行操纵器,其包括通过接合部连接的若干个连杆,
b)并行操纵器,
c)Stewart平台。
14.根据权利要求11所述的人机界面,其中,所述自动设备承载以下组件中的至少一个:
a)视觉反馈设备(21),
b)声反馈设备(20),其用于向所述操作员提供声反馈,
c)触觉反馈设备和/或力反馈设备(19),其用于向所述操作员(5)提供触觉反馈,
d)用于所述操作员的座位,
e)输入设备,其用于对所述远程控制机器的所述运动进行控制。
15.根据权利要求11所述的人机界面,包括所述远程控制机器(1)和所述远程控制单元(2)之间的无线链路(3),所述无线链路(3)用于将所述前庭数据从所述远程控制机器(1)发送到所述远程控制单元(2)并且用于将运动命令从所述远程控制单元(2)发送到所述远程控制机器(1)。
16.根据权利要求11-15中任一项所述的人机界面,其中,所述远程控制机器是从由以下所组成的组中选择的:
a)无人机,
b)无人地面车辆,
c)水下运载工具,
d)无人地面战斗车辆。
17.为了以下目的之一而使用根据权利要求11所述的人机界面:
a)训练运载工具的驾驶员,
b)无人运载工具的远程控制,c)无人机群的远程控制。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/EP2009/001964 WO2010105638A1 (en) | 2009-03-17 | 2009-03-17 | Teleoperation method and human robot interface for remote control of a machine by a human operator |
Publications (2)
Publication Number | Publication Date |
---|---|
CN102356417A CN102356417A (zh) | 2012-02-15 |
CN102356417B true CN102356417B (zh) | 2014-09-10 |
Family
ID=41347882
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN200980158119.9A Expired - Fee Related CN102356417B (zh) | 2009-03-17 | 2009-03-17 | 用于通过人工操作员对机器进行远程控制的遥操作方法和人机界面 |
Country Status (4)
Country | Link |
---|---|
US (1) | US8634969B2 (zh) |
EP (1) | EP2409287A1 (zh) |
CN (1) | CN102356417B (zh) |
WO (1) | WO2010105638A1 (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107088310A (zh) * | 2016-02-17 | 2017-08-25 | 智崴资讯科技股份有限公司 | 旋转式动态仿真装置及其视厅设备 |
Families Citing this family (57)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10051298B2 (en) | 1999-04-23 | 2018-08-14 | Monkeymedia, Inc. | Wireless seamless expansion and video advertising player |
US9412007B2 (en) | 2003-08-05 | 2016-08-09 | Fotonation Limited | Partial face detector red-eye filter method and apparatus |
US8121361B2 (en) | 2006-05-19 | 2012-02-21 | The Queen's Medical Center | Motion tracking system for real time adaptive imaging and spectroscopy |
CN102971777B (zh) * | 2010-05-21 | 2015-12-02 | ***-普朗克科学促进协会 | 运动模拟器及相应的方法 |
TWI459234B (zh) * | 2010-07-14 | 2014-11-01 | Hon Hai Prec Ind Co Ltd | 手持裝置及利用其控制無人飛行載具的方法 |
US9606209B2 (en) | 2011-08-26 | 2017-03-28 | Kineticor, Inc. | Methods, systems, and devices for intra-scan motion correction |
US9770828B2 (en) * | 2011-09-28 | 2017-09-26 | The Johns Hopkins University | Teleoperative-cooperative robotic system |
AT512834B1 (de) * | 2012-05-08 | 2014-05-15 | Amst Systemtechnik Gmbh | Manipulatoranordnung und Bewegungsvorrichtung |
US9058749B2 (en) | 2012-06-05 | 2015-06-16 | Rockwell Collins, Inc. | Embedded simulator method and related system |
WO2013184156A1 (en) * | 2012-06-05 | 2013-12-12 | Rockwell Collins, Inc. | Training data management and related system |
CN102722177B (zh) * | 2012-06-27 | 2014-06-25 | 哈尔滨工程大学 | 具有pid反馈增益的自主水下航行器三维直线路径跟踪控制方法 |
US9791897B2 (en) | 2012-06-29 | 2017-10-17 | Monkeymedia, Inc. | Handheld display device for navigating a virtual environment |
US20140002580A1 (en) * | 2012-06-29 | 2014-01-02 | Monkeymedia, Inc. | Portable proprioceptive peripatetic polylinear video player |
US11266919B2 (en) | 2012-06-29 | 2022-03-08 | Monkeymedia, Inc. | Head-mounted display for navigating virtual and augmented reality |
WO2014027097A2 (en) * | 2012-08-17 | 2014-02-20 | Markus Waibel | Flying camera with string assembly for localization and interaction |
CN102814815A (zh) * | 2012-08-24 | 2012-12-12 | 广东工业大学 | 一种虚拟工程机器人***及控制方法 |
DE102012022472A1 (de) * | 2012-11-16 | 2014-05-22 | Grenzebach Maschinenbau Gmbh | Verfahren und Vorrichtung zum kombinierten Simulieren und Steuern ferngesteuerter Fahrzeuge |
DE102012023925A1 (de) * | 2012-12-06 | 2014-06-12 | Grenzebach Maschinenbau Gmbh | Verfahren und Vorrichtung zum kombinierten Simulieren und Steuern ferngesteuerter Fahrzeuge mit einem benutzerfreundlichen Projektionssystem |
CN103207566A (zh) * | 2013-01-18 | 2013-07-17 | 西北工业大学 | 一种速度型虚拟力反馈动态辅助的空间遥操作方法 |
US9305365B2 (en) | 2013-01-24 | 2016-04-05 | Kineticor, Inc. | Systems, devices, and methods for tracking moving targets |
US9717461B2 (en) | 2013-01-24 | 2017-08-01 | Kineticor, Inc. | Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan |
US10327708B2 (en) | 2013-01-24 | 2019-06-25 | Kineticor, Inc. | Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan |
WO2014120734A1 (en) | 2013-02-01 | 2014-08-07 | Kineticor, Inc. | Motion tracking system for real time adaptive motion compensation in biomedical imaging |
US9911320B2 (en) | 2013-08-02 | 2018-03-06 | Vermeer Manufacturing Company | Remote control system |
CN103531051A (zh) * | 2013-10-21 | 2014-01-22 | 武汉湾流新技术有限公司 | 一种起重机操作的虚拟现实训练方法及模拟器 |
US20150199106A1 (en) * | 2014-01-14 | 2015-07-16 | Caterpillar Inc. | Augmented Reality Display System |
CN104901727B (zh) * | 2014-02-26 | 2018-02-09 | 清华大学 | 无人机队列编队协同的通信控制***和方法 |
US10004462B2 (en) | 2014-03-24 | 2018-06-26 | Kineticor, Inc. | Systems, methods, and devices for removing prospective motion correction from medical imaging scans |
WO2015155845A1 (ja) * | 2014-04-09 | 2015-10-15 | 株式会社日立製作所 | 作業機械の遠隔操縦システム |
US9908614B2 (en) | 2014-05-02 | 2018-03-06 | Sikorsky Aircraft Corporation | Crew seat integral inceptor system for aircraft |
CN104020777A (zh) * | 2014-06-17 | 2014-09-03 | 成都华诚智印科技有限公司 | 一种体感跟随式飞行控制***及其控制方法 |
EP3188660A4 (en) | 2014-07-23 | 2018-05-16 | Kineticor, Inc. | Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan |
CN104269099A (zh) * | 2014-09-19 | 2015-01-07 | 苏州博实机器人技术有限公司 | 一种模块化积木式可拆装串联机器人 |
US9655034B2 (en) | 2014-10-31 | 2017-05-16 | At&T Intellectual Property I, L.P. | Transaction sensitive access network discovery and selection |
US9629076B2 (en) | 2014-11-20 | 2017-04-18 | At&T Intellectual Property I, L.P. | Network edge based access network discovery and selection |
EP3048597B1 (de) * | 2015-01-21 | 2018-08-15 | BEC GmbH | Simulationsanordnung |
US10129706B2 (en) | 2015-06-05 | 2018-11-13 | At&T Intellectual Property I, L.P. | Context sensitive communication augmentation |
US10162351B2 (en) | 2015-06-05 | 2018-12-25 | At&T Intellectual Property I, L.P. | Remote provisioning of a drone resource |
CN105006187A (zh) * | 2015-06-26 | 2015-10-28 | 北京中科遥数信息技术有限公司 | 一种民用无人飞行器模拟训练*** |
US9943247B2 (en) | 2015-07-28 | 2018-04-17 | The University Of Hawai'i | Systems, devices, and methods for detecting false movements for motion correction during a medical imaging scan |
US10716515B2 (en) | 2015-11-23 | 2020-07-21 | Kineticor, Inc. | Systems, devices, and methods for tracking and compensating for patient motion during a medical imaging scan |
CN105404188A (zh) * | 2015-11-30 | 2016-03-16 | 无锡觅睿恪科技有限公司 | 无人机用控制遥控器 |
CN105654695A (zh) * | 2016-03-15 | 2016-06-08 | 艾仕达医疗科技(深圳)有限公司 | 远程控制义齿机的方法、装置和*** |
CN105791810A (zh) * | 2016-04-27 | 2016-07-20 | 深圳市高巨创新科技开发有限公司 | 一种虚拟立体显示的方法及装置 |
CN106383441A (zh) * | 2016-09-21 | 2017-02-08 | 哈尔滨理工大学 | 一种新型多足机器人在较平坦地形下的遥操作***及控制方法 |
US10470241B2 (en) | 2016-11-15 | 2019-11-05 | At&T Intellectual Property I, L.P. | Multiple mesh drone communication |
JP7119285B2 (ja) * | 2017-02-27 | 2022-08-17 | 株式会社Ihi | 遠隔操縦システム |
US10945603B2 (en) | 2017-03-20 | 2021-03-16 | At&T Intellectual Property I, L.P. | Detecting potential health risks using nanorobotics |
CN110537215B (zh) * | 2017-04-21 | 2021-09-17 | 深圳市大疆创新科技有限公司 | 风速力反馈 |
CN107329494A (zh) * | 2017-08-02 | 2017-11-07 | 合肥红铭网络科技有限公司 | 一种远程计算机摄像头监测***及控制方法 |
US10437247B2 (en) | 2017-08-10 | 2019-10-08 | Udelv Inc. | Multi-stage operation of autonomous vehicles |
JP6408093B1 (ja) * | 2017-08-31 | 2018-10-17 | 京商株式会社 | 体感型ラジオコントロール玩具およびその動作方法 |
US11559898B2 (en) | 2017-10-06 | 2023-01-24 | Moog Inc. | Teleoperation system, method, apparatus, and computer-readable medium |
US10467581B2 (en) | 2018-01-19 | 2019-11-05 | Udelv Inc. | Delivery management system |
CN108983734B (zh) * | 2018-08-29 | 2021-07-20 | 燕山大学 | 一种考虑三角形结构下遥操作***的有限时间控制方法 |
CN110434876B (zh) * | 2019-08-09 | 2024-03-22 | 南京工程学院 | 一种六自由度rov模拟驾驶***及其模拟方法 |
CN115657690A (zh) * | 2022-12-27 | 2023-01-31 | 武汉理工大学 | 基于Stewart平台的船舶远程驾驶控制云台及控制方法 |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1356675A (zh) * | 2001-12-21 | 2002-07-03 | 北京航空航天大学 | 一种用于无人驾驶直升机操纵者进行模拟飞行训练的装置 |
CN101093617A (zh) * | 2006-06-23 | 2007-12-26 | 莱斯莉·杰·莱内尔 | 安全着陆器 |
CN101241653A (zh) * | 2008-03-21 | 2008-08-13 | 北京航空航天大学 | 一种用于飞行模拟训练的故障模拟方法 |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US5865624A (en) * | 1995-11-09 | 1999-02-02 | Hayashigawa; Larry | Reactive ride simulator apparatus and method |
US5904724A (en) | 1996-01-19 | 1999-05-18 | Margolin; Jed | Method and apparatus for remotely piloting an aircraft |
US6694228B2 (en) * | 2002-05-09 | 2004-02-17 | Sikorsky Aircraft Corporation | Control system for remotely operated vehicles for operational payload employment |
US7343232B2 (en) * | 2003-06-20 | 2008-03-11 | Geneva Aerospace | Vehicle control system including related methods and components |
US7099752B1 (en) * | 2003-10-27 | 2006-08-29 | Leslie Jae Lenell | Safelander |
DE102004028261A1 (de) | 2004-06-11 | 2005-12-29 | Kuka Roboter Gmbh | Simulator |
WO2008060690A2 (en) * | 2006-05-12 | 2008-05-22 | Irobot Corporation | Method and device for controlling a remote vehicle |
US7885732B2 (en) * | 2006-10-25 | 2011-02-08 | The Boeing Company | Systems and methods for haptics-enabled teleoperation of vehicles and other devices |
US8255092B2 (en) * | 2007-05-14 | 2012-08-28 | Irobot Corporation | Autonomous behaviors for a remote vehicle |
-
2009
- 2009-03-17 WO PCT/EP2009/001964 patent/WO2010105638A1/en active Application Filing
- 2009-03-17 EP EP09776447A patent/EP2409287A1/en not_active Ceased
- 2009-03-17 CN CN200980158119.9A patent/CN102356417B/zh not_active Expired - Fee Related
- 2009-03-17 US US13/256,438 patent/US8634969B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1356675A (zh) * | 2001-12-21 | 2002-07-03 | 北京航空航天大学 | 一种用于无人驾驶直升机操纵者进行模拟飞行训练的装置 |
CN101093617A (zh) * | 2006-06-23 | 2007-12-26 | 莱斯莉·杰·莱内尔 | 安全着陆器 |
CN101241653A (zh) * | 2008-03-21 | 2008-08-13 | 北京航空航天大学 | 一种用于飞行模拟训练的故障模拟方法 |
Non-Patent Citations (2)
Title |
---|
Development of an Unmanned Aerial Vehicle Piloting System with Integrated Motion Cueing for Training and Pilot Evaluation;JAMES T.HING;《JOURAL OF INTELLIGENT AND ROBOTIC SYSTEMS》;20080716;第1-3卷(第54期);3-19 * |
JAMES T.HING.Development of an Unmanned Aerial Vehicle Piloting System with Integrated Motion Cueing for Training and Pilot Evaluation.《JOURAL OF INTELLIGENT AND ROBOTIC SYSTEMS》.2008,第1-3卷(第54期),3-19. |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107088310A (zh) * | 2016-02-17 | 2017-08-25 | 智崴资讯科技股份有限公司 | 旋转式动态仿真装置及其视厅设备 |
Also Published As
Publication number | Publication date |
---|---|
US8634969B2 (en) | 2014-01-21 |
US20120004791A1 (en) | 2012-01-05 |
CN102356417A (zh) | 2012-02-15 |
WO2010105638A1 (en) | 2010-09-23 |
EP2409287A1 (en) | 2012-01-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN102356417B (zh) | 用于通过人工操作员对机器进行远程控制的遥操作方法和人机界面 | |
US11693401B2 (en) | Method, device, and system for redundancy control | |
US10509415B2 (en) | Aircrew automation system and method with integrated imaging and force sensing modalities | |
AU2017238122B2 (en) | Aircrew automation system and method | |
CN106716272B (zh) | 用于飞行模拟的***和方法 | |
CA2891377C (en) | Method and device for the combined simulation and control of remote-controlled vehicles using a user-friendly projection system | |
CN112097789B (zh) | 无人飞行器飞行显示 | |
US11183077B2 (en) | VR emulator aboard aircraft | |
KR20210037761A (ko) | 이미징 기기로 캡처한 이미지를 제어하기 위한 시스템 및 방법 | |
US8755965B1 (en) | Unmanned vehicle simulator based control methods and apparatus | |
KR101408077B1 (ko) | 가상 영상을 이용한 무인기 조종 장치 및 방법 | |
KR20150073187A (ko) | 원격 제어식 운송수단의 시뮬레이션과 제어를 조합하여 수행하기 위한 방법 및 장치 | |
EP3543986A1 (en) | Vr emulator | |
CN203899120U (zh) | 真实感的遥控体验游戏*** | |
CN112164274A (zh) | 一种飞机飞行控制模拟*** | |
EP3547287B1 (en) | Vr emulator using galvanic vestibular stimulation devices | |
WO2016145946A1 (zh) | 一种实景交互式操控*** | |
Ji et al. | Data-driven augmented reality display and operations for UAV ground stations | |
Asiimwe et al. | Automation of the Maritime UAV command, control, navigation operations, simulated in real-time using Kinect sensor: A feasibility study | |
CN114897935B (zh) | 基于虚拟相机的无人机对空中目标物的追踪方法及*** | |
US11507081B2 (en) | Flight stick cockpit simulator ground station systems | |
CN117975789A (zh) | 一种混合现实的飞行驾驶训练*** | |
Marine et al. | A first-person view system for remotely operated vehicles using a fisheye-lens | |
RU2250486C2 (ru) | Вертолетный комплекс управления дистанционно пилотируемым летательным аппаратом | |
Rezek | Unmanned Vehicle Systems Experiences at the Dryden Flight |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20140910 Termination date: 20210317 |