CN116564159A - 一种光电测控设备跟踪操作仿真训练***及方法 - Google Patents

一种光电测控设备跟踪操作仿真训练***及方法 Download PDF

Info

Publication number
CN116564159A
CN116564159A CN202310826549.5A CN202310826549A CN116564159A CN 116564159 A CN116564159 A CN 116564159A CN 202310826549 A CN202310826549 A CN 202310826549A CN 116564159 A CN116564159 A CN 116564159A
Authority
CN
China
Prior art keywords
simulation target
target
simulation
control equipment
photoelectric measurement
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202310826549.5A
Other languages
English (en)
Inventor
张艳超
余毅
高策
赵立荣
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Original Assignee
Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Changchun Institute of Optics Fine Mechanics and Physics of CAS filed Critical Changchun Institute of Optics Fine Mechanics and Physics of CAS
Priority to CN202310826549.5A priority Critical patent/CN116564159A/zh
Publication of CN116564159A publication Critical patent/CN116564159A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B9/00Simulators for teaching or training purposes
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

一种光电测控设备跟踪操作仿真训练***及方法,涉及目标运动轨迹测量领域。该方法包括:采集光电测控设备输入的图像并将其转化为标准格式的真实背景图像;加载三维模型文件,生成仿真目标三维模型;仿真目标运动轨迹解算,获取当前时刻仿真目标位置和姿态数据;实时采集光电测控设备实际视轴指向位置数据;仿真目标位置投影变换;仿真目标尺寸投影变换;仿真目标叠加,输出合成图像。本发明采用增强现实技术将虚拟飞行目标信息图形化后应用到真实背景图像上,虚拟与现实信息相互补充、叠加,具有实时交互性,扩展了操作人员的感知范围,可逼真还原各类测量任务过程,为设备研制提供了学***。

Description

一种光电测控设备跟踪操作仿真训练***及方法
技术领域
本发明涉及目标运动轨迹测量技术领域,具体涉及一种光电测控设备跟踪操作仿真训练***及方法。
背景技术
光电测控设备在对预定轨迹的观测目标进行随动跟踪测量过程中,需要通过伺服操作手通过操控杆修正控制以及目标位置的提取信息,将观测目标不断调整至视场中心区域,以实现运动目标运动轨迹的高精度测量。另外,光电测控设备除了具备目标轨迹测量任务,还承担了图像实况记录与实况转播任务,这就要求观测目标尽量平稳的成像在视场中心。
光电测控设备目标跟踪方式一般分为三种:(1)基于目标位置图像提取的自动跟踪;(2)操控杆手动跟踪;(3)理论轨迹引导加操控杆小幅修正跟踪。由于自动跟踪方式需要图像处理***全程实现目标位置的稳定提取,而对于有云层干扰或地物遮挡等突发状况,容易发生误跟踪。因而目前光电测控设备的跟踪逐渐发展为以后两种方式为主、以自动跟踪为辅的跟踪方式。无论是操控杆手动跟踪,还是理论轨迹引导加操控杆修正跟踪都需要伺服操作手具有一定的操作能力。因此,需要采取一定的模拟训练手段对目标运动轨迹进行仿真,通过对仿真目标的反复跟踪练习,达到对伺服操作手长期训练的目的。
发明内容
本发明提供一种光电测控设备跟踪操作仿真训练***及方法,以期实现对目标运动轨迹的仿真,达到对仿真目标的反复跟踪练习实现长期训练伺服操作手进而提高伺服操作手操作能力的目的。
本发明为解决技术问题所采用的技术方案如下:
本发明提供的一种光电测控设备跟踪操作仿真训练***,包括:
图像采集模块,用于采集光电测控设备输入的图像,并将该图像转化为标准格式的真实背景图像后传输给目标合成模块;
动目标仿真模块,用于加载三维模型文件,生成仿真目标三维模型,实现仿真目标三维模型的运动控制,并将仿真目标三维模型传输给目标合成模块;
当前时刻仿真目标位置数据测量模块,用于根据预先载入的仿真目标运行轨迹文件,按照不同时刻进行位置解算与姿态解算,获得当前时刻仿真目标位置及姿态数据,并将当前时刻仿真目标位置及姿态数据传输给真实背景图像中仿真目标位置数据测量模块;
设备角度测量模块,用于实时采集获得光电测控设备实际视轴指向位置数据,并将光电测控设备实际视轴指向位置数据传输给真实背景图像中仿真目标位置数据测量模块;
真实背景图像中仿真目标位置数据测量模块,用于根据当前时刻仿真目标位置及姿态数据和光电测控设备实际视轴指向位置数据之间的位置关系进行解算获得真实背景图像中仿真目标位置数据,并将真实背景图像中仿真目标位置数据传输给目标合成模块;
目标合成模块,用于接收图像采集模块发送的真实背景图像、真实背景图像中仿真目标位置数据测量模块发送的真实背景图像中仿真目标位置数据和动目标仿真模块发送的仿真目标三维模型,并根据真实背景图像中仿真目标位置数据在真实背景图像上叠加仿真目标,输出合成图像,从而实现动目标仿真的功能。
本发明提供的一种光电测控设备跟踪操作仿真训练方法,采用所述的一种光电测控设备跟踪操作仿真训练***实现,该方法包括以下步骤:
步骤一、图像采集及预处理;
采集光电测控设备输入的图像,并将该图像转化为指定格式的真实背景图像;
步骤二、加载三维模型文件,生成仿真目标三维模型;
步骤三、仿真目标运动轨迹解算;
S3.1位置解算,获取当前时刻仿真目标位置数据;
S3.2姿态解算,获取当前时刻仿真目标姿态数据;
步骤四、实时采集获取光电测控设备实际视轴指向位置数据;
步骤五、仿真目标投影变换;
S5.1仿真目标位置投影变换;
S5.2仿真目标尺寸投影变换;
S5.3仿真目标叠加,输出合成图像。
进一步的,步骤S3.1的具体操作流程如下:
S3.1.1将光电测控设备中心位置坐标P由原坐标系C0转换到仿真目标运行轨迹所在坐标系C1下的相应位置P’;
S3.1.2计算在坐标系C1下,当前时刻为t时,仿真目标位置Tt与相应位置P’的相对位置Tt’;
S3.1.3将相对位置Tt’转换为以光电测控设备所在位置为坐标原点的球坐标系C2下的相对位置Tt’(At,Et,Rt),由此完成仿真目标的位置解算;At表示t时刻仿真目标相对于光电测控设备水方向偏角,Et表示t时刻仿真目标相对于光电测控设备垂直方向偏角,Rt表示t时刻仿真目标与光电测控设备之间的距离。
进一步的,步骤S3.2的具体操作流程如下:
假设在预设的仿真目标运行轨迹中,当前时刻仿真目标位置坐标为F,前一时刻仿真目标位置坐标为F’,则仿真目标的瞬时速度方向视作与二者连线同向,仿真目标速度向量V的方向与以坐标F’为起点、以坐标F为终点的向量F’F的方向相同,即仿真目标中轴线XP应平行于向量F’F,仿真目标尾部在坐标F’一侧且头部在坐标F一侧,仿真目标前端对应飞行方向,根据仿真目标的瞬时速度方向进行解算,即瞬时速度方向与水平方向之间的夹角即为俯仰角α,瞬时速度方向在水平方向的投影与发射坐标系XF轴的夹角即为偏航角β;若预设的仿真目标运行轨迹中同时包含滚转角γ,则直接使用。
进一步的,步骤S5.1的具体操作流程如下:
按照步骤三完成仿真目标运动轨迹解算后,结合步骤四获得的光电测控设备实际 视轴指向位置数据,实现仿真目标在图像坐标系下的投影变换,即将仿真目标空间位置Tt’ (At,Et,Rt)转换为在图像坐标系下的坐标位置Tt’’(xt,yt);变换公式如式(2)所示:(2);式中,xt表示t时刻仿真目标投影到真实背景图像中的像素位 置的x坐标,yt表示t时刻仿真目标投影到真实背景图像中的像素位置的y坐标,xt和yt均以 真实背景图像的左上角为坐标原点;At表示t时刻仿真目标相对于光电测控设备水方向偏 角;Ac为光电测控设备中心指向值的方位角;Et表示t时刻仿真目标相对于光电测控设备垂 直方向偏角;Ec为光电测控设备中心指向值的俯仰角;为光电测控设备中图像探测器单 个像素在焦距为f时的张角;ImgW为真实背景图像宽度,单位为像素数;ImgH为真实背景图 像高度,单位为像素数。
进一步的,步骤S5.2的具体操作流程如下:
几何光学的物象关系公式为:(3),Rt表示t时刻仿真目标与光电测控 设备之间的距离,v为仿真目标的像距;f为光电测控设备中图像探测器的焦距;由式(3)计 算出仿真目标在t时刻与光电测控设备之间的距离为Rt时,仿真目标的像距v为: (4);由几何光学的物象关系相似三角形得到以下公式: (5);将式(4)代入式(5)得 到仿真目标尺寸为H时在光电测控设备中图像探测器上的投影尺寸为: (6); 设光电测控设备中图像探测器的像元尺寸为,则仿真目标在真实背景图像上的投影像素 数为: (7)。
进一步的,步骤S5.3的具体操作流程如下:
当仿真目标投影位置处于真实背景图像显示范围内时,即xt和yt同时满足式(8)所示条件时进行仿真目标的叠加显示;当仿真目标投影位置不在真实背景图像显示范围内时,即xt和yt同时不满足式(8)所示条件时不进行仿真目标的叠加显示;
(8),xt表示t时刻仿真目标投影到真实背景图像中的像素位 置的x坐标;yt表示t时刻仿真目标投影到真实背景图像中的像素位置的y坐标;ImgW为真实 背景图像宽度,单位为像素数;ImgH为真实背景图像高度,单位为像素数;结合式(2)和式 (8)实现在真实背景图像上的指定位置、指定尺寸、指定姿态的仿真目标的叠加,输出合成 图像,实现动目标仿真。
本发明的有益效果是:
本发明采用增强现实技术(AR),将指定类型的虚拟飞行目标信息图形化后按照预先设定好的仿真目标运行轨迹,以训练时间为基准,依次叠加到真实观测场景的相应位置,操作人员通过手动调整光电测控设备视轴的指向位置,将仿真目标引入视场中心,并通过持续手动调整操控杆使仿真目标在按照预设轨迹飞行过程中始终接近视场中心范围内,以达到训练手动跟踪技能的目的。同时,本发明还可以用于执行测量任务前的操作预演练以及目标飞行轨迹特征参考的预判。
本发明将指定类型的虚拟飞行目标信息图形化后应用到真实背景图像上,虚拟与现实信息相互补充、叠加,从而扩展了操作人员的感知范围。通过在三维空间中指定位置处增加指定类型的虚拟飞行目标,具有实时交互性,将指定类型的虚拟飞行目标叠加到真实观测场景,可逼真还原各类测量任务过程,为设备研制提供了良好的学***。
附图说明
图1为本发明的一种光电测控设备跟踪操作仿真训练***的组成框图。
图2为标准格式的真实背景图像。
图3为仿真目标三维模型。
图4为位置解算流程示意图。
图5为仿真目标姿态角度关系图。
图6为预设的仿真目标运行轨迹示意图。
图7为真实背景图像中仿真目标显示区域。
图8为仿真目标与其在光电测控设备中图像探测器上的投影关系。
图9为仿真目标叠加效果图。
图10为输出的合成图像。
具体实施方式
以下结合附图对本发明作进一步详细说明。
第一方面,本发明提供一种光电测控设备跟踪操作仿真训练***,通过对目标运动轨迹的仿真,达到对仿真目标的反复跟踪练习,实现长期训练伺服操作手,进而提高伺服操作手的操作能力。如图1所示,该***主要包括:图像采集模块、动目标仿真模块、当前时刻仿真目标位置数据测量模块、设备角度测量模块、真实背景图像中仿真目标位置数据测量模块和目标合成模块,其中,各模块具体功能和作用如下:
所说的图像采集模块主要用于采集光电测控设备输入的图像,并将该图像转化为标准格式的真实背景图像后传输给目标合成模块;
所说的动目标仿真模块主要用于加载三维模型文件,生成仿真目标三维模型,实现仿真目标三维模型的运动控制,并将仿真目标三维模型传输给目标合成模块;
所说的当前时刻仿真目标位置数据测量模块用于根据预先载入的仿真目标运行轨迹文件,按照不同时刻进行位置解算与姿态解算,获得当前时刻仿真目标位置及姿态数据P1,并将当前时刻仿真目标位置及姿态数据P1传输给真实背景图像中仿真目标位置数据测量模块;
所说的设备角度测量模块用于实时采集获得光电测控设备实际视轴指向位置数据P2,并将光电测控设备实际视轴指向位置数据P2传输给真实背景图像中仿真目标位置数据测量模块;
所说的真实背景图像中仿真目标位置数据测量模块用于根据当前时刻仿真目标位置及姿态数据P1和光电测控设备实际视轴指向位置数据P2之间的位置关系进行解算获得真实背景图像中仿真目标位置数据P3,并将真实背景图像中仿真目标位置数据P3传输给目标合成模块;
所说的目标合成模块主要用于接收图像采集模块发送的真实背景图像、真实背景图像中仿真目标位置数据测量模块发送的真实背景图像中仿真目标位置数据P3和动目标仿真模块发送的仿真目标三维模型,并根据真实背景图像中仿真目标位置数据P3在真实背景图像上叠加仿真目标,输出合成图像,从而实现动目标仿真的功能。
第二方面,本发明提供一种光电测控设备跟踪操作仿真训练方法,该方法主要采用上述第一方面提供的一种光电测控设备跟踪操作仿真训练***实现。该方法采用增强现实技术(AR),从目标飞行姿态仿真、目标飞行轨迹仿真等多方面阐述了光电测控设备跟踪操作仿真训练***的实现方法。
该方法主要包括以下步骤:
步骤一、图像采集及预处理;
采集光电测控设备输入的图像,并将该图像转化为指定格式的真实背景图像,如图2所示;具体为,当光电测控设备输入的图像为单通道灰度图像时应将其转换为8位灰度图像,当光电测控设备输入的图像为彩色图像时应将其转换为24位RGB彩色图像;
步骤二、加载三维模型文件,生成仿真目标三维模型,如图3所示,实现仿真目标三维模型的运动控制;
步骤三、仿真目标运动轨迹解算;
在进行目标背景合成前需要对仿真目标运动轨迹进行解算,以确定仿真目标三维模型与光电测控设备实际视轴指向位置的相对位置,继而实现仿真目标与真实背景的准确叠加。具体操作步骤如下:
S3.1位置解算,获取当前时刻仿真目标位置数据;
位置解算是指,将预设的仿真目标运行轨迹从原有坐标系(一般为大地直角坐标系)所在位置转换为以光电测控设备所在位置为坐标原点的球坐标系所在位置。位置解算具体操作步骤如下:
S3.1.1将光电测控设备中心位置坐标P由原坐标系C0转换到仿真目标运行轨迹所在坐标系C1下的相应位置P’;
S3.1.2计算在坐标系C1下,当前时刻为t时,仿真目标位置Tt与相应位置P’的相对位置Tt’;
S3.1.3将相对位置Tt’转换为以光电测控设备所在位置为坐标原点的球坐标系C2下的相对位置Tt’(At,Et,Rt),由此完成仿真目标的位置解算。其中,At表示t时刻仿真目标相对于光电测控设备水方向偏角,Et表示t时刻仿真目标相对于光电测控设备垂直方向偏角,Rt表示t时刻仿真目标与光电测控设备之间的距离。
下面针对位置解算的具体步骤进行举例描述:
如图4所示,设光电测控设备中心位置所在坐标系为BLH空间坐标系C0,其中心位置坐标为P(B,L,H),其中,B为经度坐标,L为纬度坐标,H代表高程;设仿真目标运行轨迹所在坐标系为大地直角坐标系C1,当前时刻为t时,仿真目标在大地直角坐标系C1下的空间坐标为Tt(Xt,Yt,Zt);
按照上述流程步骤S3.1.1,将光电测控设备中心位置坐标P(B,L,H)由BLH空间坐标系C0转换到大地直角坐标系C1下的相应位置P’(Xg,Yg,Zg);
按照上述流程步骤S3.1.2,计算在坐标系C1下,当前时刻为t时,仿真目标位置Tt(Xt,Yt,Zt)与相应位置P’(Xg,Yg,Zg)的相对位置Tt’(Xtg,Ytg,Ztg);其中,坐标Xtg、Xt和Xg之间的关系,Ytg、Yt和Yg之间的关系,Ztg、Zt和Zg之间的关系如式(1)所示:
(1);
按照上述流程步骤S3.1.3,将相对位置Tt’(Xtg,Ytg,Ztg)转换为以光电测控设备所在位置为坐标原点的球坐标系C2下的相对位置Tt’(At,Et,Rt),由此完成仿真目标的位置解算。其中,At表示t时刻仿真目标相对于光电测控设备水方向偏角,Et表示t时刻仿真目标相对于光电测控设备垂直方向偏角,Rt表示t时刻仿真目标与光电测控设备之间的距离。
S3.2姿态解算,获取当前时刻仿真目标姿态数据;
根据步骤S3.1解算出的当前时刻仿真目标位置数据,光电测控设备可以根据当前时刻仿真目标位置数据以及预设的仿真目标运行轨迹,调整光电测控设备的方位角及俯仰角,从而对准当前时刻仿真目标的理论位置。
仿真目标一般为飞行器,其姿态信息主要包括:俯仰角α、偏航角β和滚转角γ,姿态角度关系如图5所示。其中,俯仰角α、偏航角β和滚转角γ的定义和解释如下:
俯仰角α是指目标中轴线XP轴与发射坐标系水平面的夹角;俯仰角α主要用于衡量 目标中轴线XP在发射坐标系水平面的上下浮动量;定义俯仰角α在水平面上为正,俯仰角α 不在水平面上为负;俯仰角α的取值范围为
偏航角β是指目标体坐标XP轴在发射坐标系水平面上的投影与发射坐标系XF轴的 夹角,即目标体坐标XP轴在发射坐标系水平面上的投影绕YP轴的旋转角;偏航角β主要用于 衡量目标中轴线XP在发射坐标系水平面上的左右偏离量;定义偏航角β逆时针为正,偏航角 β顺时针为负;偏航角β的取值范围为
滚转角γ是指目标体坐标YP轴与包含目标体坐标XP轴铅垂面的夹角,即目标体坐 标YP轴绕XP轴的旋转角;由仿真目标尾部沿着XP轴向前看,YP轴位于铅垂面右侧为正,YP轴位 于铅垂面左侧为负;滚转角γ的取值范围为
如图6所示,假设在预设的仿真目标运行轨迹中,当前时刻仿真目标位置坐标为F,而前一时刻仿真目标位置坐标为F’,则仿真目标的瞬时速度方向可以近似视作与二者(当前时刻仿真目标位置坐标F与前一时刻仿真目标位置坐标F’)连线同向,仿真目标速度向量V的方向与以坐标F’为起点、以坐标F为终点的向量F’F的方向相同,即仿真目标中轴线XP应平行于向量F’F,仿真目标尾部在坐标F’一侧且头部在坐标F一侧,仿真目标前端对应飞行方向,所以根据仿真目标的瞬时速度方向进行解算,即瞬时速度方向与水平方向之间的夹角即为俯仰角α,瞬时速度方向在水平方向的投影与发射坐标系XF轴的夹角即为偏航角β。若预设的仿真目标运行轨迹中同时包含滚转角γ,则可直接使用;若无法获取仿真目标的滚转角γ,由于对于飞机等仿真目标来说可以将其近似视为圆柱体,围绕仿真目标中轴线可旋转任意角度,仿真目标的形态可以认为保持基本不变,因此在仿真过程中可不考虑滚转角对仿真目标姿态的影响。
步骤四、实时采集获取光电测控设备实际视轴指向位置数据;
步骤五、仿真目标投影变换;
S5.1仿真目标位置投影变换;
按照步骤三完成仿真目标运动轨迹解算后,结合步骤四获得的光电测控设备实际视轴指向位置数据,实现仿真目标在图像坐标系下的投影变换,即将仿真目标空间位置Tt’(At,Et,Rt)转换为在图像坐标系下的坐标位置Tt’’(xt,yt)。其中,xt表示t时刻仿真目标投影到真实背景图像中的像素位置的x坐标;yt表示t时刻仿真目标投影到真实背景图像中的像素位置的y坐标;xt和yt均以真实背景图像的左上角为坐标原点;xt和yt的变换公式如式(2)所示:
(2);
式中,At表示t时刻仿真目标相对于光电测控设备水方向偏角;Ac为光电测控设备 中心指向值的方位角(即光电测控设备视轴投影到水平面后与0°指向位置之间的夹角,);Et表示t时刻仿真目标相对于光电测控设备垂直方向偏角;Ec为光电测控设 备中心指向值的俯仰角(即光电测控设备视轴与0°水平面之间的夹角,), Ac和Ec均可由光电测控设备直接测量得到;为光电测控设备中图像探测器单个像素在 焦距为f时的张角,可由光电测控设备直接测量得到;ImgW为真实背景图像宽度,单位为像 素数;ImgH为真实背景图像高度,单位为像素数。
S5.2仿真目标尺寸投影变换;
完成上述仿真目标位置投影变换后,在进行仿真目标叠加之前,还应结合仿真目标在t时刻与光电测控设备之间的距离Rt进行仿真目标尺寸投影变换。仿真目标与其在光电测控设备中图像探测器上的投影关系如图8所示,图8中,③表示仿真目标,④表示光电测控设备中的图像探测器,⑤表示仿真目标在光电测控设备中图像探测器上的投影。具体为:
几何光学的物象关系公式为:(3),其中,Rt表示t时刻仿真目标与光电 测控设备之间的距离,v为仿真目标的像距;f为光电测控设备中图像探测器的焦距。由式 (3)可以计算出仿真目标在t时刻与光电测控设备之间的距离为Rt时,仿真目标的像距v为:(4);由几何光学的物象关系相似三角形可以得到以下公式: (5);将式 (4)代入式(5)可以得到仿真目标尺寸为H时在光电测控设备中图像探测器上的投影尺寸 为: (6)。设光电测控设备中图像探测器的像元尺寸为,则仿真目标在真实 背景图像上的投影像素数为: (7)。
S5.3仿真目标叠加,输出合成图像;
如图7所示,图7中,区域①为仿真目标显示区域,区域②为非仿真目标显示区域,真实背景图像左上角为坐标原点(0,0),真实背景图像右上角坐标为(ImgW,0),真实背景图像左下角坐标为(0,ImgH),真实背景图像右下角坐标为(ImgW,ImgH)。当仿真目标投影位置处于真实背景图像显示范围内时,即xt和yt同时满足式(8)所示条件时进行仿真目标的叠加显示;反之,当仿真目标投影位置不在真实背景图像显示范围内时,即xt和yt同时不满足式(8)所示条件时不进行仿真目标的叠加显示;
(8),其中,xt表示t时刻仿真目标投影到真实背景图像中的像 素位置的x坐标;yt表示t时刻仿真目标投影到真实背景图像中的像素位置的y坐标;ImgW为 真实背景图像宽度,单位为像素数;ImgH为真实背景图像高度,单位为像素数。
结合上述式(2)和式(8),即可实现在真实背景图像上的指定位置、指定尺寸、指定姿态的仿真目标的叠加,输出合成图像,从而实现动目标仿真。其中,仿真目标叠加效果如图9所示,图9中,ΔA表示仿真目标中心与十字丝中心的水平方向指向角度的偏差,ΔE表示仿真目标中心与十字丝中心的俯仰方向指向角度的偏差,输出的合成图像如图10所示。
以上所述仅是本发明的优选实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。

Claims (7)

1.一种光电测控设备跟踪操作仿真训练***,其特征在于,包括:
图像采集模块,用于采集光电测控设备输入的图像,并将该图像转化为标准格式的真实背景图像后传输给目标合成模块;
动目标仿真模块,用于加载三维模型文件,生成仿真目标三维模型,实现仿真目标三维模型的运动控制,并将仿真目标三维模型传输给目标合成模块;
当前时刻仿真目标位置数据测量模块,用于根据预先载入的仿真目标运行轨迹文件,按照不同时刻进行位置解算与姿态解算,获得当前时刻仿真目标位置及姿态数据,并将当前时刻仿真目标位置及姿态数据传输给真实背景图像中仿真目标位置数据测量模块;
设备角度测量模块,用于实时采集获得光电测控设备实际视轴指向位置数据,并将光电测控设备实际视轴指向位置数据传输给真实背景图像中仿真目标位置数据测量模块;
真实背景图像中仿真目标位置数据测量模块,用于根据当前时刻仿真目标位置及姿态数据和光电测控设备实际视轴指向位置数据之间的位置关系进行解算获得真实背景图像中仿真目标位置数据,并将真实背景图像中仿真目标位置数据传输给目标合成模块;
目标合成模块,用于接收图像采集模块发送的真实背景图像、真实背景图像中仿真目标位置数据测量模块发送的真实背景图像中仿真目标位置数据和动目标仿真模块发送的仿真目标三维模型,并根据真实背景图像中仿真目标位置数据在真实背景图像上叠加仿真目标,输出合成图像,从而实现动目标仿真的功能。
2.一种光电测控设备跟踪操作仿真训练方法,其特征在于,采用权利要求1所述的一种光电测控设备跟踪操作仿真训练***实现,该方法包括以下步骤:
步骤一、图像采集及预处理;
采集光电测控设备输入的图像,并将该图像转化为指定格式的真实背景图像;
步骤二、加载三维模型文件,生成仿真目标三维模型;
步骤三、仿真目标运动轨迹解算;
S3.1位置解算,获取当前时刻仿真目标位置数据;
S3.2姿态解算,获取当前时刻仿真目标姿态数据;
步骤四、实时采集获取光电测控设备实际视轴指向位置数据;
步骤五、仿真目标投影变换;
S5.1仿真目标位置投影变换;
S5.2仿真目标尺寸投影变换;
S5.3仿真目标叠加,输出合成图像。
3.根据权利要求2所述的一种光电测控设备跟踪操作仿真训练方法,其特征在于,步骤S3.1的具体操作流程如下:
S3.1.1将光电测控设备中心位置坐标P由原坐标系C0转换到仿真目标运行轨迹所在坐标系C1下的相应位置P’;
S3.1.2计算在坐标系C1下,当前时刻为t时,仿真目标位置Tt与相应位置P’的相对位置Tt’;
S3.1.3将相对位置Tt’转换为以光电测控设备所在位置为坐标原点的球坐标系C2下的相对位置Tt’(At,Et,Rt),由此完成仿真目标的位置解算;At表示t时刻仿真目标相对于光电测控设备水方向偏角,Et表示t时刻仿真目标相对于光电测控设备垂直方向偏角,Rt表示t时刻仿真目标与光电测控设备之间的距离。
4.根据权利要求3所述的一种光电测控设备跟踪操作仿真训练方法,其特征在于,步骤S3.2的具体操作流程如下:
假设在预设的仿真目标运行轨迹中,当前时刻仿真目标位置坐标为F,前一时刻仿真目标位置坐标为F’,则仿真目标的瞬时速度方向视作与二者连线同向,仿真目标速度向量V的方向与以坐标F’为起点、以坐标F为终点的向量F’F的方向相同,即仿真目标中轴线XP应平行于向量F’F,仿真目标尾部在坐标F’一侧且头部在坐标F一侧,仿真目标前端对应飞行方向,根据仿真目标的瞬时速度方向进行解算,即瞬时速度方向与水平方向之间的夹角即为俯仰角α,瞬时速度方向在水平方向的投影与发射坐标系XF轴的夹角即为偏航角β;若预设的仿真目标运行轨迹中同时包含滚转角γ,则直接使用。
5.根据权利要求2所述的一种光电测控设备跟踪操作仿真训练方法,其特征在于,步骤S5.1的具体操作流程如下:
按照步骤三完成仿真目标运动轨迹解算后,结合步骤四获得的光电测控设备实际视轴指向位置数据,实现仿真目标在图像坐标系下的投影变换,即将仿真目标空间位置Tt’(At,Et,Rt)转换为在图像坐标系下的坐标位置Tt’’(xt,yt);变换公式如式(2)所示:(2);式中,xt表示t时刻仿真目标投影到真实背景图像中的像素位置的x坐标,yt表示t时刻仿真目标投影到真实背景图像中的像素位置的y坐标,xt和yt均以真实背景图像的左上角为坐标原点;At表示t时刻仿真目标相对于光电测控设备水方向偏角;Ac为光电测控设备中心指向值的方位角;Et表示t时刻仿真目标相对于光电测控设备垂直方向偏角;Ec为光电测控设备中心指向值的俯仰角;/>为光电测控设备中图像探测器单个像素在焦距为f时的张角;ImgW为真实背景图像宽度,单位为像素数;ImgH为真实背景图像高度,单位为像素数。
6.根据权利要求5所述的一种光电测控设备跟踪操作仿真训练方法,其特征在于,步骤S5.2的具体操作流程如下:
几何光学的物象关系公式为:(3),Rt表示t时刻仿真目标与光电测控设备之间的距离,v为仿真目标的像距;f为光电测控设备中图像探测器的焦距;由式(3)计算出仿真目标在t时刻与光电测控设备之间的距离为Rt时,仿真目标的像距v为:/>(4);由几何光学的物象关系相似三角形得到以下公式:/> (5);将式(4)代入式(5)得到仿真目标尺寸为H时在光电测控设备中图像探测器上的投影尺寸为:/> (6);设光电测控设备中图像探测器的像元尺寸为/>,则仿真目标在真实背景图像上的投影像素数为:/> (7)。
7.根据权利要求6所述的一种光电测控设备跟踪操作仿真训练方法,其特征在于,步骤S5.3的具体操作流程如下:
当仿真目标投影位置处于真实背景图像显示范围内时,即xt和yt同时满足式(8)所示条件时进行仿真目标的叠加显示;当仿真目标投影位置不在真实背景图像显示范围内时,即xt和yt同时不满足式(8)所示条件时不进行仿真目标的叠加显示;
(8),xt表示t时刻仿真目标投影到真实背景图像中的像素位置的x坐标;yt表示t时刻仿真目标投影到真实背景图像中的像素位置的y坐标;ImgW为真实背景图像宽度,单位为像素数;ImgH为真实背景图像高度,单位为像素数;结合式(2)和式(8)实现在真实背景图像上的指定位置、指定尺寸、指定姿态的仿真目标的叠加,输出合成图像,实现动目标仿真。
CN202310826549.5A 2023-07-07 2023-07-07 一种光电测控设备跟踪操作仿真训练***及方法 Withdrawn CN116564159A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202310826549.5A CN116564159A (zh) 2023-07-07 2023-07-07 一种光电测控设备跟踪操作仿真训练***及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202310826549.5A CN116564159A (zh) 2023-07-07 2023-07-07 一种光电测控设备跟踪操作仿真训练***及方法

Publications (1)

Publication Number Publication Date
CN116564159A true CN116564159A (zh) 2023-08-08

Family

ID=87486477

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202310826549.5A Withdrawn CN116564159A (zh) 2023-07-07 2023-07-07 一种光电测控设备跟踪操作仿真训练***及方法

Country Status (1)

Country Link
CN (1) CN116564159A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117116113A (zh) * 2023-10-19 2023-11-24 中国科学院长春光学精密机械与物理研究所 舰载光电经纬仪模拟训练器

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101738139A (zh) * 2009-12-31 2010-06-16 中国科学院长春光学精密机械与物理研究所 图像注入式目标模拟器
JP2010230925A (ja) * 2009-03-26 2010-10-14 Tamura Seisakusho Co Ltd 投影システム、投影方法、投影プログラム及び投影ベクトル演算装置
CN102654576A (zh) * 2012-05-16 2012-09-05 西安电子科技大学 基于sar图像和dem数据的图像配准方法
CN105067011A (zh) * 2015-09-15 2015-11-18 沈阳飞机工业(集团)有限公司 一种基于视觉标定及坐标转换的测量***整体校准方法
CN106556835A (zh) * 2016-12-01 2017-04-05 西安电子科技大学 基于双基前视sar图像的目标定位方法
CN109636927A (zh) * 2018-11-26 2019-04-16 中国科学院长春光学精密机械与物理研究所 一种飞行器姿态测量算法训练与鉴定的***及方法
CN110765620A (zh) * 2019-10-28 2020-02-07 上海科梁信息工程股份有限公司 飞行器视景仿真方法、***、服务器及存储介质
CN112884798A (zh) * 2021-01-27 2021-06-01 湖北三江航天红峰控制有限公司 一种运动目标跟踪瞄准***的验证方法
CN115876197A (zh) * 2022-11-03 2023-03-31 西安应用光学研究所 一种系留升空光电成像目标定位方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010230925A (ja) * 2009-03-26 2010-10-14 Tamura Seisakusho Co Ltd 投影システム、投影方法、投影プログラム及び投影ベクトル演算装置
CN101738139A (zh) * 2009-12-31 2010-06-16 中国科学院长春光学精密机械与物理研究所 图像注入式目标模拟器
CN102654576A (zh) * 2012-05-16 2012-09-05 西安电子科技大学 基于sar图像和dem数据的图像配准方法
CN105067011A (zh) * 2015-09-15 2015-11-18 沈阳飞机工业(集团)有限公司 一种基于视觉标定及坐标转换的测量***整体校准方法
CN106556835A (zh) * 2016-12-01 2017-04-05 西安电子科技大学 基于双基前视sar图像的目标定位方法
CN109636927A (zh) * 2018-11-26 2019-04-16 中国科学院长春光学精密机械与物理研究所 一种飞行器姿态测量算法训练与鉴定的***及方法
CN110765620A (zh) * 2019-10-28 2020-02-07 上海科梁信息工程股份有限公司 飞行器视景仿真方法、***、服务器及存储介质
CN112884798A (zh) * 2021-01-27 2021-06-01 湖北三江航天红峰控制有限公司 一种运动目标跟踪瞄准***的验证方法
CN115876197A (zh) * 2022-11-03 2023-03-31 西安应用光学研究所 一种系留升空光电成像目标定位方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CE GAO ETL: "infrared and Visible Image Fusion Method Based on ResNet in a Nonsubsampled Contourlet Transform Domain", 《IEEE ACCESS》, vol. 9, pages 91883 - 205 *
于洋等: "跟踪图像生成技术应用于光电设备模拟训练", 《液晶与显示》, vol. 30, no. 2, pages 347 - 352 *
盛磊等: "光电经纬仪三维视频模拟仿真***及遮挡效果的实现", 《仪器仪表学报》, vol. 32, no. 6, pages 6 - 10 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117116113A (zh) * 2023-10-19 2023-11-24 中国科学院长春光学精密机械与物理研究所 舰载光电经纬仪模拟训练器
CN117116113B (zh) * 2023-10-19 2024-01-02 中国科学院长春光学精密机械与物理研究所 舰载光电经纬仪模拟训练器

Similar Documents

Publication Publication Date Title
JP7260269B2 (ja) 航空非破壊検査用の測位システム
CN110347186B (zh) 基于仿生双目联动的地面运动目标自主跟踪***
CN111459046B (zh) 一种图像导引头用目标及场景实时动态生成***与方法
CN109887025B (zh) 单目自调式火点三维定位方法与装置
WO2018216536A1 (ja) 映像生成装置及び映像生成方法
CN116564159A (zh) 一种光电测控设备跟踪操作仿真训练***及方法
CN103226838A (zh) 地理场景中移动监控目标的实时空间定位方法
WO2018187927A1 (en) Vision simulation system for simulating operations of a movable platform
CN102566441A (zh) 用于无人机的可视仿真试验***
CN111192318A (zh) 确定无人机位置和飞行方向的方法、装置及无人机
CN115291536B (zh) 基于视觉的无人机跟踪地面目标半物理仿真平台验证方法
CN112381935A (zh) 一种合成视觉生成及多元融合装置
CN113126126A (zh) 一种全天时自动报靶***及其弹药落点定位方法
CN100443859C (zh) 用于光电经纬仪的目标仿真方法
Proctor et al. Vision-only aircraft flight control methods and test results
CN113177918B (zh) 一种无人机对电力杆塔的智能精准巡检方法及***
CN104786227A (zh) 基于高压带电作业机器人的跌落开关更换控制***及方法
CN112927356B (zh) 一种无人机图像的三维显示方法
CN116661334B (zh) 基于ccd相机的导弹跟踪目标半物理仿真平台验证方法
Oehler et al. A flexible framework for virtual omnidirectional vision to improve operator situation awareness
Ross et al. Vision-based target geolocation and optimal surveillance on an unmanned aerial vehicle
CN114136314A (zh) 一种航天飞行器辅助姿态解算方法
Sanna et al. A novel ego-motion compensation strategy for automatic target tracking in FLIR video sequences taken from UAVs
CN117666632A (zh) 一种光电伺服的目标跟踪模拟方法、装置及仿真无人机
CN116152349A (zh) 一种基于强相关目标联合时空特性的落区战斗部检测方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20230808