CN105224535A - 基于海量视频的关注目标快速查询*** - Google Patents

基于海量视频的关注目标快速查询*** Download PDF

Info

Publication number
CN105224535A
CN105224535A CN201410234055.9A CN201410234055A CN105224535A CN 105224535 A CN105224535 A CN 105224535A CN 201410234055 A CN201410234055 A CN 201410234055A CN 105224535 A CN105224535 A CN 105224535A
Authority
CN
China
Prior art keywords
video
target
module
resource
intelligent
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410234055.9A
Other languages
English (en)
Inventor
陆成刚
王安
郝文娟
洪榛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Aerospace Changfeng Science & Technology Development Co Ltd
China Changfeng Science Technology Industry Group Corp
Original Assignee
Zhejiang Aerospace Changfeng Science & Technology Development Co Ltd
China Changfeng Science Technology Industry Group Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Aerospace Changfeng Science & Technology Development Co Ltd, China Changfeng Science Technology Industry Group Corp filed Critical Zhejiang Aerospace Changfeng Science & Technology Development Co Ltd
Priority to CN201410234055.9A priority Critical patent/CN105224535A/zh
Publication of CN105224535A publication Critical patent/CN105224535A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明涉及一种基于海量视频的关注目标快速查询***,包括海量视频整合、资源数据库、智能分析、人机交互四个模块,其中海量视频整合模块采用异构视频接入方式,对不同区域不同厂商的多种编码格式视频源进行同步解码;资源数据库模块完成地图相关信息的存储;智能分析模块并对所有视频智能摘要和视频内容检索指令进行综合调度,且将执行结果及时返回给人机交互模块;人机交互模块主要实现用户的直观操作,包括GIS地理界面的展示、所关注视频资源所属摄像头的选择及视频播放、视频智能摘要与视频内容检索条件的建立及指令发送、视频资源与其重要目标信息的统一编辑管理、关注目标的时空研判,及关注目标运动轨迹视频及线路图的导出。

Description

基于海量视频的关注目标快速查询***
技术领域
本发明涉及一种基于海量视频的关注目标快速查询***,整合海量异构视频资源,结合地理信息技术与视频智能分析技术,实现关注目标空间运动轨迹的快速查询。
背景技术
“智慧城市”是在物联网、云计算等新一代信息技术支撑下形成的新型信息化城市形态,“智慧安居”就是形态体现之一。“智慧安居”是以信息和通讯科技为核心,借助物联网、云计算及大数据处理平台等,构建面向智慧公共安全、智慧医疗、智慧社区、应急管理、智慧交通等诸多方面的智慧安居建设。
随着社会视频监控网络的大规模应用,积累了海量的监控视频资料,利用监控视频资源来快速查找关注目标已成为刑侦破案中常用的手段,也成为了智慧公共安全建设当前面临的一个巨大难题。
(1)目前社会上使用的视频监控设备来自于不同厂家,它们的视频格式及所采用的数据编码和封装格式也存在差异,无法实现视频的统一导入导出。
(2)人工查看视频数据工作量大,效率低,具有一定的局限性。如果长时间专注于单一视频画面,容易造成工作人员注意力低下,产生视觉疲劳,极易忽略视频中的某些重要目标。
(3)海量视频中查找关注目标时空信息不足,存在视频线索与视频资源的相互分离等缺陷。在不同监控视频资源中,需要工作人员对现场监控布点及现场环境有一定的熟悉程度,分析目标运动轨迹时都需要人工参与,缺乏有效地理分析工具及监控分布点示意图。
发明内容
本发明的目的是结合地理信息技术与智能视频分析技术,设计一套基于海量视频的关注目标快速查询***,缩短关注目标的查询时间,快速获取关注目标的历史空间运动轨迹,提高关注目标查询效率。
本发明的技术方案如下:
一种基于海量视频的关注目标快速查询***,其特征在于包括四个模块:海量视频整合模块、资源数据库模块、智能分析模块、人机交互模块,其中,
所述海量视频整合模块主要采用异构视频接入方式,对不同区域不同厂商的多种编码格式视频源进行同步解码,实现视频流的统一接入;
所述资源数据库模块主要完成地图相关信息的存储,维护视频资源与其所属摄像头在GIS地理位置的对应关系;
所述智能分析模块主要实现视频智能摘要和视频内容检索两大算法模块,并对所有视频智能摘要和视频内容检索指令进行综合调度,均衡分配给各单元执行,且将执行结果及时返回给人机交互模块;
所述人机交互模块主要实现用户的直观操作,包括GIS地理界面的展示、所关注视频资源所属摄像头的选择及视频播放、视频智能摘要与视频内容检索条件的建立及指令发送、视频资源与其重要目标信息的统一编辑管理、关注目标的时空研判,及关注目标运动轨迹视频及线路图的导出。
上述***中,所述的视频智能摘要,是通过对视频中运动目标的特征的提取、分析和跟踪,剔除无目标运动的无关视频,保留运动目标视频并进行多段目标视频的智能合成;所述的视频内容检索,是根据关注目标的检索信息,结合相似匹配的条件设置,根据样本对象的底层物理特征生成特征集,然后在视频库中进行相似性匹配,在视频库中实现与所选目标相似的视频关键帧的提取,并将所获得的关键帧以相似性高低进行排序,进而定位关注目标在视频中的位置,实现目标检测与跟踪。
本发明基于海量异构视频的统一接入,针对公共安全事件在处理时所遇到的海量视频数据提取关注目标困难、人力资源消耗较大等问题,结合地理信息技术与智能视频分析技术,实现海量视频中关注目标的快速检索,提高处理效率,为智慧公共安全建设提供了有力支持,更好地服务于智慧安居的全面建设,使居民能便捷地、高效地、舒适地、放心地享受到城市公共服务带来的安居环境,并面向未来构建全新的城市宜居形态。
附图说明
图1是本发明的***构成原理示意图。
具体实施方式
如图1所示,本发明一种基于海量视频的关注目标快速查询***,其特征在于包括四个模块:海量视频整合模块1、资源数据库模块2、智能分析模块3、人机交互模块4,其中,
所述海量视频整合模块1主要采用异构视频接入方式,对不同区域不同厂商的多种编码格式视频源进行同步解码,实现视频流的统一接入;
所述资源数据库模块2主要完成地图相关信息的存储,维护视频资源与其所属摄像头在GIS地理位置的对应关系;
所述智能分析模块3主要实现视频智能摘要和视频内容检索两大算法模块,并对所有视频智能摘要和视频内容检索指令进行综合调度,均衡分配给各单元执行,且将执行结果及时返回给人机交互模块;
所述人机交互模块4主要实现用户的直观操作,包括GIS地理界面的展示、所关注视频资源所属摄像头的选择及视频播放、视频智能摘要与视频内容检索条件的建立及指令发送、视频资源与其重要目标信息的统一编辑管理、关注目标的时空研判,及关注目标运动轨迹视频及线路图的导出。
上述***中,所述的视频智能摘要,是通过对视频中运动目标的特征的提取、分析和跟踪,剔除无目标运动的无关视频,保留运动目标视频并进行多段目标视频的智能合成;所述的视频内容检索,是根据关注目标的检索信息,结合相似匹配的条件设置,根据样本对象的底层物理特征生成特征集,然后在视频库中进行相似性匹配,在视频库中实现与所选目标相似的视频关键帧的提取,并将所获得的关键帧以相似性高低进行排序,进而定位关注目标在视频中的位置,实现目标检测与跟踪。
为进一步理解本发明,以下通过一个具体实施例,对本***的工作原理及流程进行说明。
(1)通过海量视频整合模块对城域范围的海量异构视频进行有效统一整合管理调度。即根据读取指令获取所关注的视频资源地址等信息,直接连接相应储存器,读取相关视频,并对其进行同步解码获取***所需要的统一视频流,排除视频格式不一的干扰。
(2)建立资源数据库,将不同监控网络的摄像头位置信息及其关联视频数据信息储存在数据库中。
(3)人机交互模块调用资源数据库中的各类表结构数据,并在其GIS地理信息界面上展示各视频资源相关联的所属摄像头位置信息,其中包括了摄像头覆盖范围和方向等。
(4)在GIS地理信息界面上,选择关注目标可能出现位置的摄像头资源,通过选择不同的视频智能处理方式进行相应视频指令发送。
(5)选择视频智能摘要处理方式,指出关注目标可能出现的视频时间段,并在原始视频播放基础上选择关注目标可能出现的区域(不选择的话,默认是全画面),并将执行摘要的指令发送给智能分析服务模块。选择视频内容检索处理方式,确定关注目标的样本图像或是属性(目标类型、颜色、速度等),指出关注目标可能出现的视频时间段,并将开始检索指令发送给智能分析服务模块。
(6)智能分析服务模块综合调度所有摘要和检索指令,并均衡分配给各分析单元执行。视频智能摘要是提取视频中的运动目标合成摘要视频,即通过对视频中运动目标的特征的提取、分析和跟踪,剔除无目标运动的无关视频,保留运动目标视频并进行多段目标视频的智能合成。视频内容检索是根据目标属性对关注目标进行检索与跟踪,即根据关注目标的检索信息,结合相似匹配的条件设置,根据样本对象的底层物理特征生成特征集,然后在视频库中进行相似性匹配,在视频库中实现与所选目标相似的视频关键帧的提取,并将所获得的关键帧以相似性高低进行排序,进而定位关注目标在视频中的位置,实现目标检测与跟踪。
(7)在执行智能分析过程中,智能分析服务模块会将各分析单元的执行情况,包括进度及结果等,及时返回给人机交互模块。
(8)人机交互模块根据智能分析服务模块提交的分析结果,可以通过查看摘要视频或是浏览检索结果图片选择关注目标,然后通过建立事件要素实现关注目标重要信息记录与其所属视频资源的一一关联对应,并将对应信息存储到资源数据库中。
(9)要素编辑完成之后,进行GIS时空分析研判,将关注目标所有相关视频以时间先后顺序进行排列和智能合成,并在GIS地理信息界面上描绘出一条具有时间性的关注目标历史空间运动轨迹。为了方便归档,可以将关注目标运动轨迹视频及线路图导出。

Claims (2)

1.一种基于海量视频的关注目标快速查询***,其特征在于包括四个模块:海量视频整合模块、资源数据库模块、智能分析模块、人机交互模块,其中,
所述海量视频整合模块主要采用异构视频接入方式,对不同区域不同厂商的多种编码格式视频源进行同步解码,实现视频流的统一接入;
所述资源数据库模块主要完成地图相关信息的存储,维护视频资源与其所属摄像头在GIS地理位置的对应关系;
所述智能分析模块主要实现视频智能摘要和视频内容检索两大算法模块,并对所有视频智能摘要和视频内容检索指令进行综合调度,均衡分配给各单元执行,且将执行结果及时返回给人机交互模块;
所述人机交互模块主要实现用户的直观操作,包括GIS地理界面的展示、所关注视频资源所属摄像头的选择及视频播放、视频智能摘要与视频内容检索条件的建立及指令发送、视频资源与其重要目标信息的统一编辑管理、关注目标的时空研判,及关注目标运动轨迹视频及线路图的导出。
2.根据权利要求1所述的基于海量视频的关注目标快速查询***,其特征在于:所述视频智能摘要,是通过对视频中运动目标的特征的提取、分析和跟踪,剔除无目标运动的无关视频,保留运动目标视频并进行多段目标视频的智能合成;所述视频内容检索,是根据关注目标的检索信息,结合相似匹配的条件设置,根据样本对象的底层物理特征生成特征集,然后在视频库中进行相似性匹配,在视频库中实现与所选目标相似的视频关键帧的提取,并将所获得的关键帧以相似性高低进行排序,进而定位关注目标在视频中的位置,实现目标检测与跟踪。
CN201410234055.9A 2014-05-29 2014-05-29 基于海量视频的关注目标快速查询*** Pending CN105224535A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201410234055.9A CN105224535A (zh) 2014-05-29 2014-05-29 基于海量视频的关注目标快速查询***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410234055.9A CN105224535A (zh) 2014-05-29 2014-05-29 基于海量视频的关注目标快速查询***

Publications (1)

Publication Number Publication Date
CN105224535A true CN105224535A (zh) 2016-01-06

Family

ID=54993513

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410234055.9A Pending CN105224535A (zh) 2014-05-29 2014-05-29 基于海量视频的关注目标快速查询***

Country Status (1)

Country Link
CN (1) CN105224535A (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106210450A (zh) * 2016-07-20 2016-12-07 罗轶 基于slam的影视人工智能
CN107977429A (zh) * 2017-11-30 2018-05-01 成都德尚视云科技有限公司 多媒体文件提取方法
CN110213651A (zh) * 2019-05-28 2019-09-06 暨南大学 一种基于安防视频的智能案情辅助分析***及方法
CN110399525A (zh) * 2019-07-27 2019-11-01 广州伽利略网络科技有限公司 一种基于图像识别技术的人、物运动轨迹快速检索方法
CN113255477A (zh) * 2021-05-08 2021-08-13 深圳市安软科技股份有限公司 一种行人视频图像的综合管理***及方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156707A (zh) * 2011-02-01 2011-08-17 刘中华 一种视频摘要形成和搜索的方法、***
CN103413330A (zh) * 2013-08-30 2013-11-27 中国科学院自动化研究所 一种复杂场景下可靠的视频摘要生成方法
CN103794234A (zh) * 2012-10-30 2014-05-14 北京航天长峰科技工业集团有限公司 基于海量视频的事件轨迹快速检索平台

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102156707A (zh) * 2011-02-01 2011-08-17 刘中华 一种视频摘要形成和搜索的方法、***
CN103794234A (zh) * 2012-10-30 2014-05-14 北京航天长峰科技工业集团有限公司 基于海量视频的事件轨迹快速检索平台
CN103413330A (zh) * 2013-08-30 2013-11-27 中国科学院自动化研究所 一种复杂场景下可靠的视频摘要生成方法

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106210450A (zh) * 2016-07-20 2016-12-07 罗轶 基于slam的影视人工智能
CN106210450B (zh) * 2016-07-20 2019-01-11 罗轶 一种多通道多视角大数据视频剪辑方法
CN107977429A (zh) * 2017-11-30 2018-05-01 成都德尚视云科技有限公司 多媒体文件提取方法
CN107977429B (zh) * 2017-11-30 2021-06-04 成都德尚视云科技有限公司 多媒体文件提取方法
CN110213651A (zh) * 2019-05-28 2019-09-06 暨南大学 一种基于安防视频的智能案情辅助分析***及方法
CN110399525A (zh) * 2019-07-27 2019-11-01 广州伽利略网络科技有限公司 一种基于图像识别技术的人、物运动轨迹快速检索方法
CN113255477A (zh) * 2021-05-08 2021-08-13 深圳市安软科技股份有限公司 一种行人视频图像的综合管理***及方法

Similar Documents

Publication Publication Date Title
Liu et al. China's smart city pilots: A progress report
Cordts et al. The cityscapes dataset
Li et al. Geomatics for smart cities-concept, key techniques, and applications
CN103984710B (zh) 基于海量数据的视频交互查询方法及***
CN102819578A (zh) 视频侦查嫌疑目标分析***及方法
CN105224535A (zh) 基于海量视频的关注目标快速查询***
Kyriazopoulou Smart city technologies and architectures: A literature review
CN102231820B (zh) 一种监控图像处理的方法、装置和***
CN103794234A (zh) 基于海量视频的事件轨迹快速检索平台
CN102880692A (zh) 一种面向检索的监控视频语义描述和检测建模方法
CN112148708B (zh) 面向电网规划的可视化应用***
Botero-Valencia et al. Trends in the Internet of Things‎
CN114328780A (zh) 基于六角格的智慧城市地理信息更新方法、设备及介质
Fernando et al. Pedestrian trajectory prediction with structured memory hierarchies
Masmoudi et al. Trajectory analysis for parking lot vacancy detection system
CN103399905A (zh) 一种海洋涡旋演变过程信息提取方法
Berntzen et al. Smart Cities, Big Data and Smart Decision-making-Understanding" Big Data" in Smart City Applications
CN114418360A (zh) 一种智慧城市运行体征大数据分析方法及装置
Cavicchioli et al. A novel real-time edge-cloud big data management and analytics framework for smart cities
Kim et al. TVDP: Translational visual data platform for smart cities
Li et al. RETRACTED ARTICLE: A City Monitoring System Based on Real-Time Communication Interaction Module and Intelligent Visual Information Collection System
Haridas et al. Visualization of automated and manual trajectories in wide-area motion imagery
Wang et al. A graph-based visual query method for massive human trajectory data
CN112306985A (zh) 一种数字视网膜多模态特征联合精准检索方法
Masmoudi et al. Multi agent parking lots modelling for anomalies detection while parking

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160106