CN103916632B - 一种飞机跑道实时全景视频远程监控*** - Google Patents
一种飞机跑道实时全景视频远程监控*** Download PDFInfo
- Publication number
- CN103916632B CN103916632B CN201410133855.1A CN201410133855A CN103916632B CN 103916632 B CN103916632 B CN 103916632B CN 201410133855 A CN201410133855 A CN 201410133855A CN 103916632 B CN103916632 B CN 103916632B
- Authority
- CN
- China
- Prior art keywords
- video
- real
- runway
- time
- remote monitoring
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Closed-Circuit Television Systems (AREA)
Abstract
一种飞机跑道实时全景视频远程监控***属于飞机跑道实时全景视频远程监控技术领域，其特征在于包括：设在机场塔楼上的网络摄像机组、设在机房内依次串联的无线路由器和图形工作站、以太网以及设在客户端的远程监控中心；无线路由器以有线方式从一组网络摄像机输入多幅实时视频图像，图形工作站内的程序从所述无线路由器中以无线的形式输入一组多幅实时视频流，利用现有的实时图像拼接软件或者改进型实时视频流拼接软件对输入的多幅实时图像进行拼接处理，得到拼接线处平滑过渡且配准的图像经以太网送往远程监控中心，与传统的模拟‑数字监控***DVR比较，本发明具有远程传输、布线简单、实时性好、对跑道进行全景监控以及图像处理速度快的优点。
Description
技术领域
本发明涉及全景视频远程监控***，具体涉及一种飞机跑道实时全景视频远程监控***
背景技术
飞机跑道安全是一个很大的航空安全问题，飞机跑道的视频监控非常重要，随着科学技术的发展，目前飞机跑道所使用的视频监控***主要为“模拟-数字”监控***(DVR)已经不能满足人们在监控管理上的需求。“模拟-数字”监控***是以数字硬盘录像机DVR为核心、半模拟--半数字方案，从摄像机到DVR采用的是同轴电缆输出视频信号，通过DVR同时支持录像和回放，并且支持网络访问，由于DVR产品五花八门，没有标准，所以这一代***是非标准封闭***，DVR***仍存在大量局限。这种产品存在一些明显的缺点：(1)传输距离有限，这主要是由于同轴电缆的传输距离受限而影响到视频信号的传输距离。(2)布线复杂，每个摄像机都要安装单独的同轴电缆，导致布线复杂。(3)不适合远程监控，并且远程监控的时候实时性较差，有较高网络的延迟。(4)由于每一路摄像头监控范围有限，监控整个飞机跑道需要同时观看多路视频，监控起来比较麻烦。(5)多路视频分别存储，不利于回放和查找问题。(6)***部署困难，并且需要在监控机器上安装视频采集卡。
发明内容
发明目的：为了克服现有技术的不足，本发明提供了一种飞机跑道实时全景视频远程监控***，实现对飞机跑道远程集中监控和控制。
本发明包括：至少一组网络摄像机、至少一组无线路由器、至少一组图形工作站、以太网以及至少一个远程监控中心；其中：
网络摄像机组,安置在机场塔楼上，每组网络摄像机设有至少一个网络摄像机，对准飞机跑道上的不同位置；
无线路由器和图形工作站,设在机房内，每一台无线路由器对应一组网络摄像机，一台所述无线路由器通过LAN口以有线方式与一组内各个网络摄像机的实时视频图像输出端相连，每一台图形工作站以无线方式连接一台无线路由器，输入对应于一个机场跑道的不同位置的实时视频图像；
所述图形工作站，以有线方式连接以太网；
远程监控中心，是每个客户端PC机，以有线的方式连接以太网；
所述图形工作站，是一台同时设有无线网卡和有线网卡的计算机，内设有基于并行编程模型指令集架构CUDA的NVIDIA显卡，依次按以下步骤对从相应的所述网络摄像机输入的多路实时视频图像进行拼接：
步骤(1)，采集在水平方向有部分重合的三路一批的视频图像；
步骤(2)，对所述三路视频图像进行同步互斥控制，以确保视频流全景图像的正确拼接；
步骤(3)，判断所述三路视频图像的实时性：
若当前为离线阶段，则转至步骤(4)，
若当前为实时阶段，则转至步骤(6)；
步骤(4)，对从离线阶段输入的所述三路视频图像依次进行特征点提取、描述、匹配以及特征变换，其中：利用SURF算子提取特征点，再用RANSAC算法求解图像空间的空间变换模型，得到单应矩阵的8个参数，从而确定出一个三维平面上的点在不同二维图像中的投影位置，使得同组相邻的两幅视频图像分别得到配准；
步骤(5)，依次对配准后的两幅相邻的视频图像利用最终伽马校正参数进行颜色亮度校正，并且找出最佳缝合线，利用最佳缝合线对两幅有重叠的所述配准后的视频图像进行全景合成，在此基础上，再利用距离变换函数对设在所述最佳缝合线两侧的两个初始化权重矩阵，计算出对应于各初始化权重矩阵中所有非零像素点到与其相邻的最近的零像素点的街区距离，经过平滑过渡后，得到对应所述全景图像的所述两幅相邻且有部分重叠的视频图像的加权融合矩阵；
步骤(6)，依次按以下步骤对在实时阶段传入的三路实时视频图像进行实时拼接：
利用离线阶段得到的最终伽马校正参数进行颜色亮度校正；
调用所述基于并行编程模型指令集架构CUDA，直接利用离线阶段算出的单应矩阵，在图像处理器NVIDIA GPU卡上实现多线程并发的图像变换计算，对实时输入的相邻图像进行配准，确定图像的重叠区域和最佳缝合线，把结果返回给所述计算机的CPU；
所述计算机利用离线阶段得到加权融合矩阵进行加权融合，得到的最佳缝合线处更为平滑过渡的三幅实时视频图像，然后利用成熟的H264压缩算法对拼接后的全景视频图像进行压缩处理，再将压缩后的视频流经过以太网向远程监控中心输出。
有益效果：与现有的飞机跑道视频监控***先比，本实用新型的飞机跑道实时全景视频远程监控***具有以下优点：新型的机场实时全景视频远程监控***可以使得值班人员和指挥人员在远程便可以监控机场跑道，并且全景视频比多路视频具有更好的视觉效果，使得观察机场跑道情况更加方便，更容易察觉出飞机跑道的上出现障碍物或异常物体并且做出相应的处理，可以把损失降低到最小。并且，本***可以将拼接好的全景视频存储到磁盘上，当需要回放的时候，相比多路视频，可以更快捷的找出问题。另外，本***对全景视频使用H264编码器进行压缩，可以节省存储资源和降低传输带宽要求。但更重要的是，可以在一个远程监控中心同时监控多个飞机跑道，从而降低监控成本，具有很好的实用性，能够产生较好的经济效益和社会效益。
附图说明
图1是本发明公开的飞机跑道实时全景视频远程监控***结构示意图；
图2是本发明公开的飞机跑道实时全景视频远程监控***的部署示意图；
图3是传统视频监控显示方式；
图4是本发明对监控场景进行实时拼接显示的示意图；
图5是本发明公开的全景视频远程监控***的工作流程示意图。
具体实施方式
下面结合附图对本发明做进一步的说明。
本发明采用的技术方案如下：
一种飞机跑道实时全景视频远程监控***，***设备由网络摄像机、无线路由器、图形工作站组成。一个无线路由器上通过有线方式连接多个网络摄像头，无线路由器和图形工作站通过无线方式连接。图形工作站通过网络方式采集多个网络摄像头的视频数据，将多路角度不同方向但视野范围有部分重叠的视频流进行拼接，并利用先进的GPU并行计算对视频拼接处理进行加速以达到实时流畅的目的。在图形工作站对实时全景视频进行预览和存储。远程监控中心通过以太网和本***建立连接。
在所述的网络摄像头需要2～4路，无线路由器有2～4个LAN口用来连接网络摄像头。
在所述的图形工作站需要使用NVIDIA GPU卡，其中GPU计算能力需要在2.0以上,并且需要同时具有无线网卡和有线网卡。
如图1所示，本***设备由网络摄像机、无线路由器、图形工作站组成。本实施例中使用的络摄像机型号为海康威视DS-2CD883F-E(W)，无线路由器型号为TP-LINK TL-W841N，图形工作站使用的是联想ThinkStation S30，显卡为NVIDIA Quadro K600，处理器为Intel(R)Xeon(R)E5-1620 3.60GHz,12GB内存，Windows7 64位操作***。远程控制中心使用的机器为普通PC。
在路由器上有4个口LAN口，将网络摄像机部署在塔楼上，通过有线连接的方式和部署在机房中得无线路由器进行连接。图形工作站上有一块无线网卡和一块有线网卡，工作站和无线路由器之间通过无线的方式进行连接。图形工作站通过有线网卡连接以太网。远程监控中心的计算机也通过有线方式连接以太网。
图形工作站连接上无线路由器之后，首先查找每一路网络摄像机的IP和端口。确定相机的个数以及每一路网络摄像机的IP和端口以及位置顺序之后，初始化视频拼接，求得每路摄像机相对位置以及相应的变换参数。
在工作站上启动实时视频拼接和端口监听。远程控制中心向相应的工作站发起全景视频请求。整个工作流程如图4所示，工作站上部署的全景拼接***首先采集多路视频，然后对多路视频进行实时拼接，再利用成熟的H264压缩标准对全景视频进行压缩，接着使用RTP协议对压缩后的视频数据进行打包发送。远程控制中心部署的程序收到服务器端发来的RTP数据包后，利用H264标准进行解码，然后再将解码后的图像显示到屏幕上。
飞机跑道实时全景视频远程监控***，经过了严格的***测试，具有很高的稳定性。本***是一种充分利用先进的电子技术和现代通讯技术，是集实时全景预览、画面截图、视频压缩、全景录像回放、网络实时传输、远程监控等功能于一体的视频监控***。可以使得在一个监控中心对多处飞机跑道进行实时监控。本***采用先进的视频拼接算法以及GPU加速技术，可以对监控场景实施友好的全景监控。
飞机跑道全景视频远程监控***，是通过在远程监控中心对各个飞机跑道进行集中监视和管理，当飞机跑道出现障碍物或者异常人员的时候可以立即通知管理人员做出相应的处理，防患于未然，能更加有效的避免意外事故的发生。本发明具有以下创新点：
(1)远程集中管理：本***可以使得监控管理人员在一个监控中心同时监控多个飞机跑道，节省监控******的建设成本。
(2)部署简单方便：本***的工作站和网络摄像机是通过无线的方式连接的，其他连接方式这是通过网络的形式，无需安装使用采集卡等等。
(3)全景视频功能：本***将多路视频进行拼接处理，相比传统的多路视屏监控，具有更加友好的视觉效果，也更方便在监控场景中发现异常。
(4)全景记录回放功能：本***将实时拼接后的视频存储到磁盘设备上，当监控场景出现问题，可以更加快捷的找出问题根源。
Claims (3)
1.一种飞机跑道实时全景视频远程监控***，其特征在于，包括：至少一组网络摄像机、至少一组无线路由器、至少一组图形工作站、以太网以及至少一个远程监控中心；其中：
网络摄像机组,安置在机场塔楼上，每组网络摄像机设有至少一个网络摄像机，对准飞机跑道上的不同位置；
无线路由器和图形工作站,设在机房内，每一台无线路由器对应一组网络摄像机，一台所述无线路由器通过LAN口以有线方式与一组内各个网络摄像机的实时视频图像输出端相连，每一台图形工作站以无线方式连接一台无线路由器，输入对应于一个机场跑道的不同位置的实时视频图像；
所述图形工作站，以有线方式连接以太网；
远程监控中心，是每个客户端PC机，以有线的方式连接以太网；
所述图形工作站，是一台同时设有无线网卡和有线网卡的计算机，内设有基于并行编程模型指令集架构CUDA的NVIDIA显卡，依次按以下步骤对从相应的所述网络摄像机输入的多路实时视频图像进行拼接：
步骤(1)，采集在水平方向有部分重合的三路一批的视频图像；
步骤(2)，对所述三路视频图像进行同步互斥控制，以确保视频流全景图像的正确拼接；
步骤(3)，判断所述三路视频图像的实时性：
若当前为离线阶段，则转至步骤(4)，
若当前为实时阶段，则转至步骤(6)；
步骤(4)，对从离线阶段输入的所述三路视频图像依次进行特征点提取、描述、匹配以及特征变换，其中：利用SURF算子提取特征点，再用RANSAC算法求解图像空间的空间变换模型，得到单应矩阵的8个参数，从而确定出一个三维平面上的点在不同二维图像中的投影位置，使得同组相邻的两幅视频图像分别得到配准；
步骤(5)，依次对配准后的两幅相邻的视频图像利用最终伽马校正参数进行颜色亮度校正，并且找出最佳缝合线，利用最佳缝合线对两幅有重叠的所述配准后的视频图像进行全景合成，在此基础上，再利用距离变换函数对设在所述最佳缝合线两侧的两个初始化权重矩阵，计算出对应于各初始化权重矩阵中所有非零像素点到与其相邻的最近的零像素点的街区距离，经过平滑过渡后，得到对应所述全景图像的所述两幅相邻且有部分重叠的视频图像的加权融合矩阵；
步骤(6)，依次按以下步骤对在实时阶段传入的三路实时视频图像进行实时拼接：
利用离线阶段得到的最终伽马校正参数进行颜色亮度校正；
调用所述基于并行编程模型指令集架构CUDA，直接利用离线阶段算出的单应矩阵，在图像处理器NVIDIA GPU卡上实现多线程并发的图像变换计算，对实时输入的相邻图像进行配准，确定图像的重叠区域和最佳缝合线，把结果返回给所述计算机的CPU；
所述计算机利用离线阶段得到加权融合矩阵进行加权融合，得到的最佳缝合线处更为平滑过渡的三幅实时视频图像，然后利用成熟的H264压缩算法对拼接后的全景视频图像进行压缩处理，再将压缩后的视频流经过以太网向远程监控中心输出。
2.根据权利要求1所述的一种飞机跑道实时全景视频远程监控***，其特征在于，图形工作站采用的CPU为Intel(R)Xeon(R)E5-1620，计算机为联想ThinkStation S30，显卡为NVIDIA Quadro K600。
3.根据权利要求1所述的一种飞机跑道实时全景视频远程监控***，其特征在于，所述的图形工作站的拼接程序内同时设有市售的多路实时视频图像拼接软件海康威视大屏幕拼接***供选择拼接切换用。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410133855.1A CN103916632B (zh) | 2014-04-03 | 2014-04-03 | 一种飞机跑道实时全景视频远程监控*** |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201410133855.1A CN103916632B (zh) | 2014-04-03 | 2014-04-03 | 一种飞机跑道实时全景视频远程监控*** |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103916632A CN103916632A (zh) | 2014-07-09 |
| CN103916632B true CN103916632B (zh) | 2017-01-25 |
Family
ID=51041982
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201410133855.1A Active CN103916632B (zh) | 2014-04-03 | 2014-04-03 | 一种飞机跑道实时全景视频远程监控*** |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103916632B (zh) |
Families Citing this family (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104717465B (zh) * | 2014-12-23 | 2023-10-03 | 北京亿羽舜海科技有限公司 | 多个ip摄像头的广角视频监控设备及视频监控方法 |
| CN105282526A (zh) * | 2015-12-01 | 2016-01-27 | 北京时代拓灵科技有限公司 | 一种全景视频拼接的处理方法及*** |
| CN114510080A (zh) | 2015-12-09 | 2022-05-17 | 深圳市大疆创新科技有限公司 | 用于控制无人飞行器的飞行的方法和*** |
| CN105810023B (zh) * | 2016-05-16 | 2018-08-21 | 福建福光股份有限公司 | 机场起落架收放自动监测方法 |
| CN105933707B (zh) * | 2016-06-30 | 2019-02-22 | 北京奇艺世纪科技有限公司 | 一种全景视频的压缩方法及装置 |
| CN106385560B (zh) * | 2016-09-23 | 2020-08-28 | 威海元程信息科技有限公司 | 一种视频监控***及方法 |
| CN107197172A (zh) * | 2017-06-21 | 2017-09-22 | 北京小米移动软件有限公司 | 视频直播方法、装置和*** |
| TWI650018B (zh) * | 2017-07-18 | 2019-02-01 | 晶睿通訊股份有限公司 | 提供使用者介面以進行場景之監控畫面縫合之方法及其電子裝置 |
| CN107580200B (zh) * | 2017-09-30 | 2018-10-30 | 刘军 | 集群同步摄像实时路况实景动态漫游导航监控方法及*** |
| CN108769578B (zh) * | 2018-05-17 | 2020-07-31 | 南京理工大学 | 一种基于多路摄像头的实时全景成像***及方法 |
| WO2020008733A1 (ja) * | 2018-07-03 | 2020-01-09 | 富士フイルム株式会社 | 画像補正装置、撮像装置、画像補正方法、及び画像補正プログラム |
| CN111192230B (zh) * | 2020-01-02 | 2023-09-19 | 北京百度网讯科技有限公司 | 基于多相机的图像处理方法、装置、设备和可读存储介质 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1479462A (zh) * | 2003-06-04 | 2004-03-03 | 威海克劳斯数码通迅有限公司 | 全景远程网络安全监控*** |
| CN101119482A (zh) * | 2007-09-28 | 2008-02-06 | 北京智安邦科技有限公司 | 一种全景监控方法及设备 |
| CN101277429A (zh) * | 2007-03-27 | 2008-10-01 | 中国科学院自动化研究所 | 监控中多路视频信息融合处理与显示的方法和*** |
| CN101312526A (zh) * | 2008-06-26 | 2008-11-26 | 天津市亚安科技电子有限公司 | 全景联动视频监控装置及其全景图像的拼接方法 |
| CN102164269A (zh) * | 2011-01-21 | 2011-08-24 | 北京中星微电子有限公司 | 全景监控方法及装置 |
| EP2529811A2 (en) * | 2011-06-03 | 2012-12-05 | Nintendo Co., Ltd. | Information processing, program, information processing device, information processing system, and information processing method |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101685418B1 (ko) * | 2011-04-27 | 2016-12-12 | 한화테크윈 주식회사 | 3차원 영상을 생성하는 감시 시스템 |
-
2014
- 2014-04-03 CN CN201410133855.1A patent/CN103916632B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1479462A (zh) * | 2003-06-04 | 2004-03-03 | 威海克劳斯数码通迅有限公司 | 全景远程网络安全监控*** |
| CN101277429A (zh) * | 2007-03-27 | 2008-10-01 | 中国科学院自动化研究所 | 监控中多路视频信息融合处理与显示的方法和*** |
| CN101119482A (zh) * | 2007-09-28 | 2008-02-06 | 北京智安邦科技有限公司 | 一种全景监控方法及设备 |
| CN101312526A (zh) * | 2008-06-26 | 2008-11-26 | 天津市亚安科技电子有限公司 | 全景联动视频监控装置及其全景图像的拼接方法 |
| CN102164269A (zh) * | 2011-01-21 | 2011-08-24 | 北京中星微电子有限公司 | 全景监控方法及装置 |
| EP2529811A2 (en) * | 2011-06-03 | 2012-12-05 | Nintendo Co., Ltd. | Information processing, program, information processing device, information processing system, and information processing method |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103916632A (zh) | 2014-07-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103916632B (zh) | 一种飞机跑道实时全景视频远程监控*** | |
| CN201765696U (zh) | 变电站远程温度图像监测*** | |
| CN206313885U (zh) | 一种用于子弹时间制作的云台摄像机阵列 | |
| CN103188479B (zh) | 一种基于光纤接口的视频监控***及其监控方法 | |
| CN104270570A (zh) | 双目摄像机及其图像处理方法 | |
| CN103607567A (zh) | 低码流360度全景高清一体监控摄像机 | |
| CN214337647U (zh) | 一种变电站在线智能巡视*** | |
| CN204697218U (zh) | 一种考场监控*** | |
| CN106488189A (zh) | 一种多媒体远程监控*** | |
| CN103051874B (zh) | 一种应用于执法船上的实时高清视频监控取证*** | |
| US20230362315A1 (en) | Live video production system, live video production method, and cloud server | |
| CN107703956A (zh) | 一种基于惯性捕捉技术的虚拟交互***及其工作方法 | |
| CN107404633A (zh) | 视频监控***及其视频压缩编码方法、联合告警追踪方法 | |
| CN107800946A (zh) | 一种直播方法及*** | |
| CN112911221A (zh) | 一种基于5g和vr视频的远程实景仓储监管*** | |
| CN107889390A (zh) | 一种输电线路除障***的装配方法 | |
| CN202885975U (zh) | 变电站三维红外测温监测*** | |
| CN110177257A (zh) | 一种多摄像机视频监控装置及其人体跟踪方法 | |
| WO2022160414A1 (zh) | 一种电厂监控*** | |
| CN102957940A (zh) | 一种基于改进的四方向算子视频噪声检测方法 | |
| CN108391101A (zh) | 基于4g网络传输的电力移动巡检方法及*** | |
| CN103067654B (zh) | 一种具有无线电侦测及频谱显示功能的摄像机 | |
| CN104994271A (zh) | 一种索道摄像机***及其控制及视频信号传输方法 | |
| CN204795334U (zh) | 可信号预览的图像拼接处理*** | |
| CN106454262A (zh) | 一种智能视频监控***及实现方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| C06 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20190604 Address after: Room 1208, Block C, Xingzhi Science and Technology Park, National Economic and Technological Development Zone, Qixia District, Nanjing City, Jiangsu Province Patentee after: Nanjing Multimodal Intelligent Technology Co., Ltd. Address before: No. 100, Chaoyang District flat Park, Beijing, Beijing Patentee before: Beijing University of Technology |