CN110310537B - 一种门式起重机虚拟吊装培训***及培训方法 - Google Patents
一种门式起重机虚拟吊装培训***及培训方法 Download PDFInfo
- Publication number
- CN110310537B CN110310537B CN201910564069.XA CN201910564069A CN110310537B CN 110310537 B CN110310537 B CN 110310537B CN 201910564069 A CN201910564069 A CN 201910564069A CN 110310537 B CN110310537 B CN 110310537B
- Authority
- CN
- China
- Prior art keywords
- hoisting
- module
- gantry crane
- virtual
- trainees
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012549 training Methods 0.000 title claims abstract description 82
- 238000000034 method Methods 0.000 title claims abstract description 58
- 230000033001 locomotion Effects 0.000 claims abstract description 37
- 238000011156 evaluation Methods 0.000 claims abstract description 31
- 238000012544 monitoring process Methods 0.000 claims abstract description 27
- 230000008569 process Effects 0.000 claims abstract description 27
- 238000004891 communication Methods 0.000 claims abstract description 11
- 230000008451 emotion Effects 0.000 claims description 48
- 238000004088 simulation Methods 0.000 claims description 27
- 238000004458 analytical method Methods 0.000 claims description 22
- 230000009471 action Effects 0.000 claims description 17
- 238000012545 processing Methods 0.000 claims description 11
- 230000006870 function Effects 0.000 claims description 10
- 230000002650 habitual effect Effects 0.000 claims description 10
- 238000013480 data collection Methods 0.000 claims description 8
- 230000008859 change Effects 0.000 claims description 7
- 230000000007 visual effect Effects 0.000 claims description 7
- 238000002360 preparation method Methods 0.000 claims description 6
- 230000001815 facial effect Effects 0.000 claims description 4
- 230000001012 protector Effects 0.000 claims description 4
- 238000009826 distribution Methods 0.000 claims description 3
- 239000000284 extract Substances 0.000 claims description 3
- 230000002996 emotional effect Effects 0.000 claims description 2
- 230000002787 reinforcement Effects 0.000 abstract 1
- 238000001514 detection method Methods 0.000 description 19
- 238000010586 diagram Methods 0.000 description 15
- 238000009877 rendering Methods 0.000 description 9
- 230000003993 interaction Effects 0.000 description 5
- 238000007726 management method Methods 0.000 description 5
- 238000004364 calculation method Methods 0.000 description 4
- 238000013079 data visualisation Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000008921 facial expression Effects 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 239000003990 capacitor Substances 0.000 description 2
- 238000010276 construction Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 239000003623 enhancer Substances 0.000 description 2
- 230000010354 integration Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 229910000831 Steel Inorganic materials 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000018109 developmental process Effects 0.000 description 1
- 230000008909 emotion recognition Effects 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000002265 prevention Effects 0.000 description 1
- 230000033764 rhythmic process Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 210000000697 sensory organ Anatomy 0.000 description 1
- 239000010959 steel Substances 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000000844 transformation Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000010200 validation analysis Methods 0.000 description 1
- 238000012800 visualization Methods 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B9/00—Simulators for teaching or training purposes
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Electrically Operated Instructional Devices (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明涉及一种门式起重机虚拟吊装培训***及培训方法。该门式起重机虚拟吊装培训***包括吊装操作模块、报警显示模块,运动约束模块以及实时监控模块,所述门式起重机虚拟吊装培训***还包括操作评估模块,所述操作评估模块用于在虚拟场景中对受训人员的吊装操作进行技术培训,并根据操作员操作的熟练度、准确度进行评估考核,所述操作评估模块包括通信IC,通信IC接收受训人员操作信息并与标准吊装程序对比,并得出评估报告,所述评估报告包括操作完成度以及熟练度。本发明通过设置操作评估模块有助于受训人员针对性补强,从而有助于降低实操过程中人为事故的发生概率。
Description
技术领域
本发明涉及模拟教学领域,特别是涉及一种门式起重机虚拟吊装培训***及培训方法。
背景技术
随着中国经济高速发展,国内石油化工、水利水电、基础设施项目等规模越来越大,其单机设备也越来越大型化、精密化;并且由于模块化施工的逐渐推行,体积更大、重量更重的大型模块也不断涌现出来。吊装物的大型化、重型化,使得吊装工艺要求越发严苛,需要保证吊装物的准确吊装与防碰撞,难度远超以往的吊装作业。
门式起重机又称为龙门吊,是桥架通过两侧支腿支撑在地面轨道上的桥架型起重机,主要用于室外的货场、料场货、散货的装卸作业,船厂常用于船台拼装船体。门式起重机操作难度大,危险性高,对操作人员有很高的技术要求,但是对于从事吊装领域的新人们来说,在培训过程中受到时间、空间和培训成本的限制,实际操作的机会并不是很多,主要是通过多媒体课堂进行培训教学,信息部分呈现,互动性不足,难以调动学员积极性,上岗后缺乏实操经验,易发生人为失误操作的生产事故。
为此,授权公告号为CN105819339B的中国发明专利公开了一种大型吊装作业虚拟指挥舱及其工作方法,该虚拟指挥舱包括实景监控***、虚拟引导***、精准定位***和吊装力学分析***;该虚拟指挥舱为一线指挥人员提供准确、直观的预报警信息,向起重机驾驶员给出统一、标准化的吊装指令,协助起重机驾驶员顺利、安全完成吊装作业,为大型吊装作业提供安全、实时、有效的技术保障。众所周知的,操作人员在操作过程中难免存在操作不熟练的地方,但是对于上述虚拟指挥舱操作员并不一定能够及时获知操作不熟练的地方,操作不熟练的操作员实操时,容易发生因人为操作失误而造成的生产事故。
发明内容
针对上述技术问题,本发明提供了一种门式起重机虚拟吊装培训***及培训方法,以解决现有技术中的起重机虚拟吊装培训***因不能对操作人员操作评估而导致易发生人为事故的技术问题。
本发明的门式起重机虚拟吊装培训***的技术方案是:
一种门式起重机虚拟吊装培训***,包括吊装操作模块、报警显示模块,运动约束模块以及实时监控模块,所述门式起重机虚拟吊装培训***还包括操作评估模块,所述操作评估模块用于在虚拟场景中对受训人员的吊装操作进行技术培训,并根据操作员操作的熟练度、准确度进行评估考核,所述操作评估模块包括通信IC,通信IC接收受训人员操作信息并与标准吊装程序对比,并得出评估报告,所述评估报告包括操作完成度以及熟练度。
进一步的,所述门式起重机虚拟吊装培训***包括情感分析模块,所述情感分析模块用于分析受训人员在操作过程中所遇到的难点,并进行标记,标记后可重复引导受训人员操作所述难点;利用红外式光电传感器采集受训人员心率,通过心率对比分析了解当前状态下受训人员内心情况,并对心率较高时的操作动作进行标记;***在后台加入所有受训人员习惯性动作数据,受训人员通过输入个人信息,***提取当前受训人员习惯性动作,与信息库中动作数据做对比,分析当前受训人员动作变化,并结合多模态情感模型剖析当前操作是否为失误操作,***进行重点标记并反馈给受训人员。
进一步的,所述情感分析模块包括情感数据收集单元、情感数据处理单元,所述情感收集单元用于收集受训人员的情感数据,所述数据收集单元包括摄像头、红外式光电传感器、语音输入输出设备,所述情感数据处理单元基于摄像头、红外式光电传感器、语音输入输出设备的输入数据,计算受训人员操作时多方面分析受训人员状态。
进一步的,所述情感分析模块还包括反馈调整单元,所述反馈调整单元用于针对不同受训人员提供个性化的支持服务,并根据实时可视化情感分析将受训者操作状态反馈到***中比对标准状态后进行个性化调整,适当改变受训者单一环节操作任务;所述反馈调整单元包括串接的电感线圈、非门电路、RC滤波器、变送器、功率放大器和过压保护器。
进一步的,所述吊装操作模块通过***内部指令控制门式起重机模型,模型运动过程中,模拟器指令可实现对运动过程的调整,完成吊装操作。
进一步的,所述报警指示模块用于显示吊装场景的事实运动状态,并在吊装完成后发出报警提示。
进一步的,所述运动约束模块用于结合实际吊装环境,对虚拟场景中可控部件添加约束范围,并利用物理引擎实时模拟部件运动状态,贴合真实环境。
进一步的,所述实时监控模块用于对吊装过程中的各个环节进行多角度监控,所述运动约束模块包括多台摄像机以及与摄像机信号连接的显示器。
本发明的一种门式起重机虚拟吊装培训方法的技术方案是:
一种门式起重机虚拟吊装培训方法包括准备工作方法和应用工作方法,其中,所述准备工作方法包括以下操作步骤:
S1:依托FBX模型,对门式起重机、船台以及船体分段建模,将模型导入仿真平台,根据门式起重机吊装操作规程编写脚本程序,实现虚拟场景中门式起重机的吊装;
S2:在虚拟场景中依照真实门式起重机监控摄像机的分布情况添加监控组件,将其监控画面呈现在驾控室显示器上,实时显示吊装过程;
S3:在真实门式起重机集控操作平台中添加操作评估模块,用于在虚拟场景中对受训人员的吊装操作进行技术培训,并根据操作员操作的熟练度、准确度进行评估考核。
进一步的,所述应用工作方法包括以下步骤:
S1:指导受训者熟悉操作室摇杆和按钮功能,并对操作规范流程进行详细解读;
S2:调整深度摄像头位置用来采集受训者面部图像,利用红外式光电传感器采集受训者心率,对受训者操作动作进行保存记录;
S3:进行吊装操作,实时观察受训者状态,得出培训结果。
本发明的有益效果是:
(1)本发明提供了一种门式起重机虚拟吊装培训***,通过设置操作评估模块在虚拟场景中对受训人员的吊装操作进行技术培训,并根据操作员操作的熟练度、准确度进行评估考核。评估考核结果使受训人员能够及时发现自己的不足之处,有助于受训人员针对性补强,从而有助于降低实操过程中人为事故的发生概率。
(2)通过在模拟操作室进行吊装操作,完成较高精度的吊装贴合,并且操作过程中能够方便观察操作进度,也能实时从感官认知整体吊装工序,脱离现实复杂的培训环境,更能激发学习的热情。
(3)本发明的门式起重机虚拟吊装培训***涵盖门式起重机吊装操作工序,通过规划精准移动路径和接触部件,形成了高精度模型吊装虚拟场景,与真实吊装场景有较高相似度,相较于传统培训方法,较大程度上弥补学员参与度不高的问题。
(4)本发明的门式起重机虚拟吊装培训***采用层次模型和树状结构,多显示环节与多控制回路间能够相互响应,共同作为模拟操作室输出单元。
(5)本发明的门式起重机虚拟吊装培训***具备场景中全角度监控,监控镜头可依据操作位置进行自调,保证监控角度无遮挡,场景模型也能够在自身物理引擎下实时检测周围碰撞单元。
附图说明
图1是本发明的门式起重机虚拟吊装培训***的原理图;
图2是本发明的门式起重机虚拟吊装培训***的操作流程图;
图3是本发明的门式起重机虚拟吊装培训***中情感数据收集单元的原理图;
图4是本发明的门式起重机虚拟吊装培训***中实时监控模块的原理图;
图5是本发明的门式起重机虚拟吊装培训***中报警显示模块的原理图;
图6是本发明的门式起重机虚拟吊装培训***中运动约束模块的原理图;
图7是本发明的门式起重机虚拟吊装培训***中人机交换接口模块的原理图;
图8是本发明的门式起重机虚拟吊装培训***中场景管理控制模块的原理图;
图9是本发明的门式起重机虚拟吊装培训***中情感数据处理与分析单元模块的原理图;
图10是本发明的门式起重机虚拟吊装培训***中培训反馈调整模块的原理图;
图11是本发明的门式起重机虚拟吊装培训***中模型解析模块的原理图;
图12是本发明的门式起重机虚拟吊装培训***中吊装操作模块的原理图;
图13是本发明的门式起重机虚拟吊装培训***中视景生效操作界面渲染模块的原理图;
图14是本发明的门式起重机虚拟吊装培训***中装配评估模块的原理图;
图15是本发明的门式起重机虚拟吊装培训***中培训情感数据可视化模块的原理图;
具体实施方式
下面结合附图和实施例,对本发明的具体实施方式作进一步详细描述。以下实施例用于说明本发明,但不用来限制本发明的范围。
本发明的门式起重机虚拟吊装培训***的具体实施例一,如图1、图2所示,包括吊装操作模块、报警显示模块,运动约束模块、实时监控模块、情感分析模块以及操作评估模块。
其中,参照图12所示,吊装操作模块包括电源、电阻、可调电阻、电位器和电容,电源、电阻、可调电阻、电位器和电容依次相连。吊装操作模块是指通过***内部指令控制门式起重机模型,模型运动过程中,模拟器指令可实现对运动过程的调整,完成吊装操作。
参照图5所示,报警显示模块包括信号采集器、运放整流调整器、A/D转换器、单片机、载波信号锁相器和选频放大器,信号采集器、运放整流调整器、A/D转换器、单片机、载波信号锁相器和选频放大器依次相连,单片机分别于信号采集器、运放整流调整器、A/D转换器、载波信号锁相器和选频放大器相连。报警指示模块包括模型运动显示模块和吊装到位提示模块。模型运动显示模块用于显示吊装场景的实时运动状态;吊装到位提示模块指吊装操作结束后输出结束指令,提示吊装已完成。
参照图6所示,运动约束模块包括共模抑制器、低通滤波器、放大器、减法电路、数据采集器、模数转换器、数字滤波器和上位机,共模抑制器、低通滤波器、放大器、减法电路、数据采集器、模数转换器、数字滤波器和上位机依次相连。运动约束模块是结合实际吊装环境,对虚拟场景中可控部件添加约束范围,并利用物理引擎实时模拟部件运动状态,贴合真实环境。
如图4所示,实时监控模块包括FMH-461电源模块、电流传感器、整流器、开关、光耦合器和单片机,FMH-461电源模块、电流传感器、整流器、开关、光耦合器和单片机依次相连,单片机分别于FMH-461电源模块、电流传感器、开关、整流器和光耦合器相连。实时监控模块主要由吊装场景中多台摄像机联合控制,多机位交叉对吊装环节进行多角度监控,并在环形显示屏显示监控画面。
如图14所示,装配评估模块包括通信IC集成与电子变压器,通信IC集成与电子变压器依次相连。操作评估模块用于对操作人员的培训和评估,在虚拟场景中对操作人员的吊装操作进行技术培训,并根据操作的熟练度、准确度进行评估考核。
情感培训模型包括情感数据收集单元、情感数据处理单元、培训情感数据可视化单元和培训反馈调整单元。
如图3所示,情感数据采集单元主要实现了对受训者的情感数据采集功能。情感数据采集单元包括深度摄像头、红外式光电传感器、语音输入输出设备、CPLD、A/D转换器、数字信号处理器和PXI接口电路,CPLD、A/D转换器、数字信号处理器和PXI接口电路依次相连,CPLD分别与A/D转换器、数字信号处理器和PXI接口电路相连。情感数据采集单元借助深度摄像头、红外式光电传感器、语音输入输出设备等捕捉受训者的脸部表情、心率状态和语音信息,基于爬虫技术采集受训者在平台发布的信息。
参照图9所示,情感数据处理单元包括放大器、A/D转换器、存储器、DSP处理器、FPGA处理器、第一存储器、第二存储器和串行总线,放大器、A/D转换器、存储器、DSP处理器、FPGA处理器、第一存储器、第二存储器和串行总线依次连接。情感数据处理单元是指原型***的人脸表情识别是基于深度摄像头获取人脸面部运动单元,从而提取情感特征并进行情感分类;心率状态是基于受训者当前操作心率采集分析;语音情感是基于受训者发表的语音内容等进行识别。基于语音、心率及人脸表情情感识别结果,分别赋予不同权重,进行加权平均法计算,计算受训者操作时多方面分析受训者状态,并重点标记数值高时的受影响动作,进行记录保存。
参照图15所示,培训情感数据可视化单元包括图像采集器、射频识别器、存储器、无限片集成和电锁,图像采集器、射频识别器、存储器、无限片集成和电锁依次连接。培训情感数据可视化单元指根据可视化能够更直观的反映受训者的情感变化状态。
参照图10所示,培训反馈调整单元包括电感线圈、非门电路、RC滤波器、变送器、功率放大器和过压保护器,电感线圈、非门电路、RC滤波器、变送器、功率放大器和过压保护器依次连接。培训反馈调整单元是多模态情感计算***最重要的部分。理想的培训反馈调整模块应该针对不同受训者提供个性化的支持服务,并根据实时可视化情感分析将受训者操作状态反馈到***中比对标准状态后进行个性化调整,适当改变受训者单一环节操作任务。
人机交互接口模块是将模拟器的操作输入信号经数据转换为数字信号,送入动力学模型中进行计算,形成控制场景中门式起重机部件运动和渲染的信号,并将仿真结果输出到环形显示屏上,从而对吊装过程进行模拟。如图7所示,人机交互接口模块包括光传感器、加速度计、陀螺仪、红外传感器、光敏电阻、电容传感器、控制器、上位机和图像深度传感器,光传感器、加速度计、陀螺仪、红外传感器、光敏电阻、电容传感器、控制器、上位机和图像深度传感器依次连接,控制器分别与光传感器、加速度计、陀螺仪、红外传感器、光敏电阻、电容传感器、上位机和图像深度传感器相连。
场景管理控制模块是将模拟器中其余模块进行关联,并结合动力学模型,通过处理消息函数,完成场景调入、人机交互、声效处理和视景渲染等内容。如图13所示,视景声效操作界面渲染模块包括图形化界面模块GUI、着色器代码编辑模块ASE、3D预览模块和渲染实现模块,图形化界面模块GUI、着色器代码编辑模块ASE、3D预览模块和渲染实现模块依次连接。视景声效操作界面渲染模块是将动力模型中计算好的操作函数及控制参数和门式起重机位置信息,通过一系列变换后将虚拟场景渲染显示到环形显示屏上,并将操作者操作时周围环境进行显示。如图8所示,场景管理控制模块包括参数采集单元、动作执行单元、通讯管理单元和通讯总线,参数采集单元、动作执行单元、通讯管理单元和通讯总线依次相连。
声效输出模块是根据门式起重机运动状态和操作人员控制输入反馈回来的警报信息。如图11所示模型解析模块包括感应器、放大器、滤波器、增强器、解码器、赋频单元和编码单元,感应器、放大器、滤波器、增强器、解码器、赋频单元和编码单元依次连接。模型解析模块是将操作***中的场景模型经仿真软件预存场景贴图,在***运行时直接调用贴图,提高场景检索速度和渲染质量。
本发明的门式起重机虚拟吊装培训方法的具体实施例,包括准备工作方法和应用工作方法,其中,准备工作方法包括如下操作步骤:
S1:在仿真平台中完成门式起重机吊装场景的搭建,实现门式起重机吊装操作仿真。本实施例采用画图软件建立三维模型,包括门式起重机、船台以及船体分段模型,接着在建模软件中赋予模型材质,并将其转化为FBX格式,导入仿真平台,对整体门式起重机模型进行烘培和渲染,完成搭建门式起重机虚拟吊装场景。
完善门式起重机虚拟吊装场景模型:使用绳索组件构建具备动态物理特性的仿真钢丝绳模型;分别给上下小车、吊钩、船体分段等模型添加刚体、碰撞器组件;对上下小车、吊钩的运动添加约束。
根据门式起重机吊装操作规程编写脚本程序,实现虚拟场景中门式起重机的吊装动作。
S2:在构建的虚拟场景中添加吊装分段间的碰撞检测及监控组件,来确保门式起重机的精确吊装。在虚拟场景中依照真实门式起重机监控摄像机的分布情况添加监控组件,将其监控画面呈现在驾控室显示器上,实时显示吊装过程。对吊钩、吊装分段、拼接分段施加碰撞检测,在吊装过程中对操作人员进行提示,确保门式起重机的精确吊装。
S3:在真实门式起重机集控室操作平台操作虚拟场景中的吊装仿真,并利用环形显示屏,对吊装操作进行实时监控,用户在操作平台完成操作、培训功能。
通过数据连接,操作平台的操作人员通过移动控制器面板上对应摇杆,门吊中对应部件进行移动,并可通过按下速度旋钮对部件移动速度进行范围约束,当对齐工件和待对齐工件的某一轴,如x轴,此时对齐指示灯亮起,之后再完成剩下两轴的对齐;当所有轴对齐后,完成吊装。在吊装过程中,操作人员通过显示屏观察工件位置,避免工件发生移动阻碍。
操作平台包括本发明的门式起重机虚拟吊装培训***及相应功能组件;操作平台包括功能控制按钮、报警显示灯、控制操作摇杆和环形显示器。根据门式起重机操作的要求,综合运用模型解析、三维图形渲染、人机交互、声音处理等技术,方便在仿真平台中实现交互控制和场景的显示和调度。
该仿真平台针对门式起重机常态和干扰状态下的运动形式,采用风场模型进行分析,判断特殊情况下干扰量是否超出门式起重机组件承载范围,并对干扰量范围进行约束。
该操作平台具备培训功能,在操作平台进行仿真吊装操作,在环形显示器观看吊装过程,完成精确吊装;采用多模态情感培训模型收集操作人员培训情感数据和操作人员习惯性动作数据,并实时分析数据了解操作人员操作状态及操作难点,并给予反馈调整,此环节可达到培训操作人员的目的。
应用工作方法包括如下操作步骤:
S1:指导受训者熟悉操作室摇杆和按钮功能,并对操作规范流程进行详细解读。
S2:调整深度摄像头位置用来采集受训者面部图像,利用红外式光电传感器采集受训者心率,对受训者操作动作进行保存记录。
S3:进行吊装操作,实时观察受训者状态,得出培训结果。
在S1步骤中,操作室与真实门式起重机操作室相同,摇杆包括上小车及吊钩移动摇杆、下小车及吊钩移动摇杆、大车移动摇杆和吊钩正反向摇杆,按钮包括急停按钮、各小车速度转换按钮和复位按钮。
在S2步骤中,采用深度摄像机采集受训者面部表情图像,在情感分析模块中分析计算受训者在操作过程中所遇到的难点,***标记后,可重复引导受训者操作难点;利用红外式光电传感器采集受训者心率,通过心率对比分析了解当前状态下受训者内心情况,并对心率较高时的操作动作进行标记;***在后台加入所有受训人员习惯性动作数据,受训者通过输入个人信息,***提取当前受训者习惯性动作,与信息库中动作数据做对比,分析当前受训者动作变化,并结合多模态情感模型剖析当前操作是否为失误操作,***进行重点标记并反馈给受训者。
在S3步骤中,培训结果包括吊装过程完成度、软件熟练度和情感采集报告,吊装过程完成度需要与***中导入的标准吊装工序进行对比,得出完成百分比,软件熟练度是指操作中各个功能按钮是否能够熟练操作,也对现实操作熟练度有较大影响,情况采集报告包括受训者对关键操作的心态变化,以及随机应变的能力。
该仿真平台针对门式起重机常态和干扰状态下的运动形式,采用风场模型进行分析,判断特殊情况下干扰量是否超出门式起重机组件承载范围,并对干扰量范围进行约束。分别对多种工况下的组件进行受力分析,选取重点情况下的组件状态添加到动力学模块中,用来让受训者模拟恶劣工况下,操作中组件状态及所承受的受力极限,加强操作意识。
本实施例中所用动力学模型为门式起重机运行机构所需基本算法,包括仿真算法和碰撞检测与最小净距计算方法。
由于三维仿真***采用场景树的方式组织模型,因此通过修改各个节点在其父节点坐标系下的位置向量和方向矩阵可以实现如起重机行走、回转、变幅、起升等各种基本动作。门式起重机吊装运动仿真分为以下几种:
(1)单机作业仿真,实现单机吊装设备平移、升降、变幅等运动;
(2)主机与溜尾小车协同仿真,实现吊装设备翻转就位运动仿真,溜尾小车跟随主机运动仿真;
(3)主副机协同仿真,实现吊装设备翻转就位运动仿真。副机做为溜尾起重机,可分为主动力起重机随动仿真和副动力起重机随动仿真,也可主副机协同仿真。
应用高等机构学实现各种运动仿真,技术难点在于每运行指定步长之前,判断构件间几何和受力协调性,确定构件间的几何位置关系。如不满足要求,给予提示,修改步长。并提供合理随动路径。
碰撞检测的目的是判断虚拟场景中不同对象之间是否发生碰撞。从几何上讲,碰撞检测表现为两个多面体的求交测试问题。在虚拟现实***中,主要用于解决碰撞检测的实时性和精确性间的矛盾。
本实施例中,采用包围盒层次法,利用形状简单的包围盒将复杂的几何对象包裹起来,在进行碰撞检测时首先进行包围盒之间的相交测试;如果包围盒相交,再进行几何对象之间精确的碰撞检测。显然,包围盒法对于判断两个几何对象不相交是十分有效的。三维吊装仿真中场景物体间进行的碰撞检测计算,包括包围体与包围体之间的相交检测和几何体与几何体之间的相交检测,其中包围体之间的相交检测又包含子场景之间相交检测、子场景和几何体之间的相交检测以及几何体之间的相交检测。为了提高碰撞检测效率,在包围体层次结构基础上,采用二阶段广义/狭义碰撞检测算法在宏观上尽早剔除明显不相交的物体对,然后对可能相交的物体对作更精确的碰撞检测从而计算最小净距,提高了碰撞检测速度。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明技术原理的前提下,还可以做出若干改进和替换,这些改进和替换也应视为本发明的保护范围。
Claims (7)
1.一种门式起重机虚拟吊装培训***,包括吊装操作模块、报警显示模块,运动约束模块以及实时监控模块,其特征在于:所述门式起重机虚拟吊装培训***还包括操作评估模块,所述操作评估模块用于在虚拟场景中对受训人员的吊装操作进行技术培训,并根据操作员操作的熟练度、准确度进行评估考核,所述操作评估模块包括通信IC,通信IC接收受训人员操作信息并与标准吊装程序对比,得出评估报告,所述评估报告包括操作完成度以及熟练度;
所述门式起重机虚拟吊装培训***包括情感分析模块,所述情感分析模块用于分析受训人员在操作过程中所遇到的难点,并进行标记,标记后可重复引导受训人员操作所述难点;利用红外式光电传感器采集受训人员心率,通过心率对比分析了解当前状态下受训人员内心情况,并对心率较高时的操作动作进行标记;***在后台加入所有受训人员习惯性动作数据,受训人员通过输入个人信息,***提取当前受训人员习惯性动作,与信息库中动作数据做对比,分析当前受训人员动作变化,并结合多模态情感模型剖析当前操作是否为失误操作,***进行重点标记并反馈给受训人员;
所述情感分析模块包括情感数据收集单元、情感数据处理单元,所述情感数据收集单元用于收集受训人员的情感数据,所述情感数据收集单元包括摄像头、红外式光电传感器、语音输入输出设备,所述情感数据处理单元基于摄像头、红外式光电传感器、语音输入输出设备的输入数据,计算受训人员操作时多方面分析受训人员状态;所述情感分析模块还包括反馈调整单元,所述反馈调整单元用于针对不同受训人员提供个性化的支持服务,并根据实时可视化情感分析将受训者操作状态反馈到***中比对标准状态后进行个性化调整,适当改变受训者单一环节操作任务;
所述反馈调整单元包括串接的电感线圈、非门电路、RC滤波器、变送器、功率放大器和过压保护器。
2.根据权利要求1任一项所述的门式起重机虚拟吊装培训***,其特征在于:所述吊装操作模块通过***内部指令控制门式起重机模型,模型运动过程中,模拟器指令可实现对运动过程的调整,完成吊装操作。
3.根据权利要求1任一项所述的门式起重机虚拟吊装培训***,其特征在于:所述报警显示模块用于显示吊装场景的事实运动状态,并在吊装完成后发出报警提示。
4.根据权利要求1任一项所述的门式起重机虚拟吊装培训***,其特征在于:所述运动约束模块用于结合实际吊装环境,对虚拟场景中可控部件添加约束范围,并利用物理引擎实时模拟部件运动状态,贴合真实环境。
5.根据权利要求1任一项所述的门式起重机虚拟吊装培训***,其特征在于:所述实时监控模块用于对吊装过程中的各个环节进行多角度监控,所述运动约束模块包括多台摄像机以及与摄像机信号连接的显示器。
6.一种门式起重机虚拟吊装培训方法,其特征在于,应用于如权利要求1所述的门式起重机虚拟吊装培训***:包括准备工作方法和应用工作方法,其中,所述准备工作方法包括以下操作步骤:
S1:依托FBX模型,对门式起重机、船台以及船体分段建模,将模型导入仿真平台,根据门式起重机吊装操作规程编写脚本程序,实现虚拟场景中门式起重机的吊装;
S2:在虚拟场景中依照真实门式起重机监控摄像机的分布情况添加监控组件,将其监控画面呈现在驾控室显示器上,实时显示吊装过程;
S3:在真实门式起重机集控操作平台中添加操作评估模块,用于在虚拟场景中对受训人员的吊装操作进行技术培训,并根据操作员操作的熟练度、准确度进行评估考核。
7.根据权利要求6所述的门式起重机虚拟吊装培训方法,其特征在于:所述应用工作方法包括以下步骤:
S1:指导受训者熟悉操作室摇杆和按钮功能,并对操作规范流程进行详细解读;
S2:调整深度摄像头位置用来采集受训者面部图像,利用红外式光电传感器采集受训者心率,对受训者操作动作进行保存记录;
S3:进行吊装操作,实时观察受训者状态,得出培训结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910564069.XA CN110310537B (zh) | 2019-06-26 | 2019-06-26 | 一种门式起重机虚拟吊装培训***及培训方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910564069.XA CN110310537B (zh) | 2019-06-26 | 2019-06-26 | 一种门式起重机虚拟吊装培训***及培训方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110310537A CN110310537A (zh) | 2019-10-08 |
CN110310537B true CN110310537B (zh) | 2023-04-11 |
Family
ID=68076602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910564069.XA Active CN110310537B (zh) | 2019-06-26 | 2019-06-26 | 一种门式起重机虚拟吊装培训***及培训方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110310537B (zh) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116307861A (zh) * | 2023-02-28 | 2023-06-23 | 中国民用航空飞行学院 | 一种监察员培训测评*** |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006072193A (ja) * | 2004-09-06 | 2006-03-16 | Central Res Inst Of Electric Power Ind | 訓練システムおよび訓練方法 |
KR20180060806A (ko) * | 2016-11-29 | 2018-06-07 | (주)토탈소프트뱅크 | 농용트랙터 시뮬레이터를 이용한 훈련 평가 장치와 그 방법 |
WO2018141023A1 (en) * | 2017-02-02 | 2018-08-09 | Advancing Projects Pty Ltd | A vehicle driving simulator for training or use of automotive car drivers or mobile devices controlled or occupied by humans |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA3000969C (en) * | 2012-11-28 | 2021-08-10 | Vrsim, Inc. | Simulator for skill-oriented training |
CN104361781A (zh) * | 2014-11-25 | 2015-02-18 | 上海建工五建集团有限公司 | 塔机仿真模拟*** |
CN104616558A (zh) * | 2015-02-15 | 2015-05-13 | 山东建筑大学 | 一种塔式起重机模拟培训*** |
CN106782022A (zh) * | 2017-02-27 | 2017-05-31 | 武汉科码软件有限公司 | 六自由度岸桥起重机模拟器 |
CN107025819B (zh) * | 2017-06-20 | 2019-03-26 | 大连海事大学 | 一种船甲板克令吊虚拟训练***及其工作方法 |
CN107195239B (zh) * | 2017-07-14 | 2019-11-22 | 武汉市特种设备监督检验所 | 一种通用起重机械作业人员培训设备 |
CN107331235A (zh) * | 2017-07-28 | 2017-11-07 | 西南交通大学 | 集装箱门式起重机模拟操作全景仿真***及方法 |
CN107301799A (zh) * | 2017-08-15 | 2017-10-27 | 科盾科技股份有限公司北京分公司 | 一种模拟训练的方法及设备 |
CN107316531A (zh) * | 2017-08-15 | 2017-11-03 | 科盾科技股份有限公司北京分公司 | 一种模拟训练***及其客户端 |
CN107516449A (zh) * | 2017-08-15 | 2017-12-26 | 科盾科技股份有限公司北京分公司 | 一种模拟训练的方法及终端 |
-
2019
- 2019-06-26 CN CN201910564069.XA patent/CN110310537B/zh active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006072193A (ja) * | 2004-09-06 | 2006-03-16 | Central Res Inst Of Electric Power Ind | 訓練システムおよび訓練方法 |
KR20180060806A (ko) * | 2016-11-29 | 2018-06-07 | (주)토탈소프트뱅크 | 농용트랙터 시뮬레이터를 이용한 훈련 평가 장치와 그 방법 |
WO2018141023A1 (en) * | 2017-02-02 | 2018-08-09 | Advancing Projects Pty Ltd | A vehicle driving simulator for training or use of automotive car drivers or mobile devices controlled or occupied by humans |
Also Published As
Publication number | Publication date |
---|---|
CN110310537A (zh) | 2019-10-08 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112668687B (zh) | 云端机器人***、云服务器、机器人控制模块和机器人 | |
Kaarlela et al. | Digital twin and virtual reality for safety training | |
Chi et al. | Development of user interface for tele-operated cranes | |
Green et al. | Applying the Wizard-of-Oz framework to cooperative service discovery and configuration | |
CN108161882A (zh) | 一种基于增强现实的机器人示教再现方法及装置 | |
CN110021200A (zh) | 教学练考一体化的虚拟现实培训方法、装置及存储介质 | |
CN106485973A (zh) | 基于虚拟现实技术的电力技能培训平台 | |
CN103413487B (zh) | 一种变压器装配工艺仿真*** | |
CN110135476A (zh) | 一种个人安全装备的检测方法、装置、设备及*** | |
CN108038910A (zh) | 变电站主设备虚拟现实演示的实现方法 | |
CN110502119A (zh) | 基于虚拟现实的变压器故障案例可视化交互方法与*** | |
CN113299139A (zh) | 核电站主泵维修虚拟仿真平台及其构建方法 | |
CN110570744A (zh) | 一种交互式起重作业仿真安全培训教学*** | |
CN110310537B (zh) | 一种门式起重机虚拟吊装培训***及培训方法 | |
CN111341166A (zh) | 应急演练***的控制方法及*** | |
CN112991857A (zh) | 一种电力应急抢险培训***及方法 | |
CN116386414A (zh) | 一种基于数字镜影的人机工效学调整线训练***及方法 | |
CN112598953B (zh) | 一种基于列车驾驶仿真***乘务员的评价***及方法 | |
CN116563499A (zh) | 一种基于元宇宙技术的变电站智能互动*** | |
CN117409625A (zh) | 一种基于混合现实的变电设备培训***及方法 | |
CN110108510A (zh) | 基于嵌入式***汽车电子产品智能检测***及其方法 | |
CN109992118A (zh) | 基于虚拟现实技术的绝缘斗臂车仿真操作*** | |
Dong et al. | Research on overhead crane training system and its construction based on virtual reality | |
Fang et al. | Real-time visualization of crane lifting operation in virtual reality | |
Su et al. | On the visual reality and monitoring of gantry cranes using FBG sensing |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
EE01 | Entry into force of recordation of patent licensing contract | ||
EE01 | Entry into force of recordation of patent licensing contract |
Application publication date: 20191008 Assignee: Zhanjiang Nanhai Shipbuilding High tech Service Co.,Ltd. Assignor: CSSC HUANGPU WENCHONG SHIPBUILDING Co.,Ltd. Contract record no.: X2023980048830 Denomination of invention: A virtual lifting training system and training method for gantry cranes Granted publication date: 20230411 License type: Common License Record date: 20231130 |