CN101877780A - 实时智能视频监控*** - Google Patents

实时智能视频监控*** Download PDF

Info

Publication number
CN101877780A
CN101877780A CN2009100830139A CN200910083013A CN101877780A CN 101877780 A CN101877780 A CN 101877780A CN 2009100830139 A CN2009100830139 A CN 2009100830139A CN 200910083013 A CN200910083013 A CN 200910083013A CN 101877780 A CN101877780 A CN 101877780A
Authority
CN
China
Prior art keywords
intelligent
module
real
video monitoring
time
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2009100830139A
Other languages
English (en)
Inventor
黄英
王磊
邱嵩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vimicro Corp
Original Assignee
Vimicro Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vimicro Corp filed Critical Vimicro Corp
Priority to CN2009100830139A priority Critical patent/CN101877780A/zh
Publication of CN101877780A publication Critical patent/CN101877780A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)

Abstract

本发明涉及视频监控领域,尤其涉及实时智能视频监控***。本发明通过智能处理模块(140)完成监控前端的复杂核心算法,该智能处理模块(140)由运算功能强大的专用集成电路实现;以及通过嵌入式的智能分析模块(150)对来自智能处理模块(140)的数据做分析和处理,该嵌入式智能分析模块(150)的相关功能通过用户配置来实现。因此本发明的核心算法处理能力强,智能监控可配置性强,成本低廉,具有重要的应用价值。

Description

实时智能视频监控***
技术领域
本发明涉及视频监控领域,尤其涉及基于网络摄像机(IPCamera,Internet Protocol Camera)智能视频监控***。
背景技术
随着社会经济和电子技术的发展以及人们安全意识的增强,视频监控技术得到快速发展,视频监控***的智能化是监控技术发展的必然需求。
传统视频监控***通常采用嵌入式***。嵌入式***是以应用为中心,以计算机技术为基础,软硬件可裁剪,适用于对功能、可靠性、成本、体积、功耗有严格要求的专用计算机***。嵌入式***用于实现对其他设备的控制、监视或管理等功能。因此嵌入式***是一个技术密集、资金密集、高度分散、不断创新的知识集成***。
集成电路是一种微型电子器件或部件。集成电路具有体积小、重量轻、成本低,便于大规模生产等特点。ASIC(Application Specific IntegratedCircuit,专用集成电路)是为特定用户或特定电子***制作的集成电路。专用集成电路是指应特定用户要求和特定电子***的需要而设计、制造的集成电路。ASIC的特点是面向特定用户的需求。
嵌入式***相对于专用集成电路存在以下问题:
1.算法处理能力有限,不能应用到过于复杂***中;
2.核心代码被保护,不能进一步得到有效开发;
3.嵌入式芯片成本较高。
综上所述,传统的嵌入式智能视频监控***无法处理非常复杂的监控环境,且在大规模生产时价格相对昂贵;基于集成电路的智能视频监控***开发过程复杂且开发周期较长。
发明内容
本发明提供了一种能解决以上问题的实时智能视频监控***。
在第一方面,本发明提供了一种实时智能视频监控前端设备,包括智能处理模块和智能分析模块。智能处理模块由专用集成电路实现,用于完成该监控前端的复杂核心算法。智能分析模块由嵌入式芯片实现,该智能分析模块根据用户配置对来自智能处理模块的数据做分析和处理。
在第二方面,本发明提供了一种实时智能视频监控***,包括实时智能视频监控前端设备和终端服务器。该终端服务器接收来自一个或多个该前端设备发送过来的信息。
在本发明的一个实施例中,智能处理模块用于实时检测并跟踪监控***所属监控区域内的运动目标,并分析该运动目标的运动趋势。
在本发明的另一个实时例中,智能分析模块为用户提供参数配置接口,以便配置该前端设备的预警功能、统计功能中的一个或多个。
在本发明的又一个实时例中,终端服务器包括智能检索模块,用于对来自前端设备的信息做统计和分析,并根据统计分析结果对该信息做分类存储,以及为用户提供智能检索功能。
本发明的监控前端通过运算功能强大的专用集成电路完成核心算法,因此处理能力强且成本低廉;通过嵌入式芯片对来自集成电路的数据做进一步分析和处理,因此运算简单且可配置能力强;监控终端通过对来自前端信息做统计、分析再分类,进而实现智能检索功能。本发明的监控前端、终端及***具有重要的应用价值。
附图说明
下面将参照附图对本发明的具体实施方案进行更详细的说明,在附图中:
图1是本发明的基于智能视频监控的IP Camera***框图;
图2是本发明的基于多个IP Camera的智能视频监控***框图。
具体实施方式
图1是本发明的基于智能视频监控的IP Camera***框图。该IP Camera***包括光学镜头110、图像传感器120、图像处理模块130、智能处理模块140、智能分析模块150、报警模块160、OSD信息叠加模块170、视频压缩模块180和IP数据传输模块190。
光学镜头110用于获取监控场景中的光信号。图像传感器120用于将监控场景中的光信号转换成电信号,并输出原始的数字图像。图像处理模块130对原始的数字图像进行处理进而获取清晰的图像流,比如自动曝光、自动对焦,自动白平衡等。
智能处理模块140用于完成复杂且核心的算法,由运算速度快的专用集成电路实现。该集成电路可以是FPGA或IC硬件。智能处理模块140接收来自图像处理模块130的各帧图像,然后再分析和处理接收到的该各帧图像。进而实现对监控场景中运动目标的实时检测、跟踪及运动趋势分析功能。
具体地,智能处理模块140根据来自图像处理模块130的前一帧图像背景,按照现有前景检测方法对当前帧图像进行前景检测,获取前景检测结果。然后对前景检测结果中的像素进行聚类处理,获取当前帧图像中各个前景位置及形状数据,如目标的轮廓、外框等。然后再按照现有运动估算方式,获取前一帧图像中各个物体在当前帧图像中对应的位置及形状如轮廓或外框等。再判定当前帧图像与前一帧图像不匹配的前景为新出现的物体,并将一定时间内当前帧图像中未移动的物体设置为背景,用所述背景更新前一帧图像背景。当前帧图像中各个前景的位置和形状,以及前一帧图像中所有物体的平移速度,前一帧图像中各个物体在当前帧图像中对应的位置和形状等均可作为跟踪数据输出。
在本发明的一个实施例中,智能处理模块140为用户提供区域配置功能,用户可以通过智能处理模块140的区域配置接口配置跟踪区域,智能处理模块只处理跟踪区域内的运动目标,跟踪区域外的运动目标则不作处理,用户完成跟踪区域配置后,智能处理模块140向***返回的是跟踪区域内的监控目标。举例说明,停车场监控场景中经常有大量的树叶,晃动的树叶实际上也是运动物体,而用户只关心场景中的关键目标如汽车和行人。此时可以设定当前场景的跟踪区域只包含场景中的路面、停车位等关键区域,而树叶所在区域则剔除在外。因此用户可以通过调整智能处理模块140的配置,设置合适的跟踪区域,排除树叶对运动目标跟踪造成的影响,进而向***返回有用的监控信息。
智能分析模块150用于实现简单且关键的智能监控项目,由嵌入式芯片实现。该嵌入式芯片可以是ARM或DSP等。嵌入式智能分析模块150根据用户配置对来自智能处理模块140的数据做分析和处理,进而判定监控区域内运动目标是否触发预设报警规则,或统计监控区域内运动目标数量等。智能分析模块150为用户提供参数配置接口,进而配置预警功能、统计功能等。
智能分析模块150根据监控场景的实际需要配置相关参数,进而判定监控区域内是否有运动目标触发预警规则,或统计监控区域内运动目标数量等。举例说明,假设监控场景为敏感区域,当有运动目标进入该敏感区域时表示有危险目标入侵,则该危险目标触发预警规则。再假设监控场景为单向行驶道路,当有车辆逆行时则该车辆触发预警规则。再假设监控场景为需要统计运动车辆数量的场景,则智能分析模块150实时统计该监控场景中运动车辆数量,并将该数量通过IP数据传输模块180发送至终端服务器。用户可以通过配置智能分析模块150相关参数进而配置敏感区域范围、单向行驶路段、统计运动目标所属区域等。对于其他监控场景在此不再一一列举。
智能分析模块150除向用户提供参数配置接口之外,同时也可以为用户提供开放性开发平台,利用该开放性开发平台用户能够按照其需求开发出相应功能模块。
报警模块160用于接收来自智能分析模块150的报警信息,当监控区域内的运动目标触发报警规则时报警模块160即时报警,具体报警形式可以是语音也可以是光。报警方式有以下两种:
方式1,通过报警模块160直接在本地报警;
方式2,将报警信息通过IP数据传输模块180发送到终端服务器,通过终端服务器报警。
OSD(On Screen Display,在屏显示)技术是在图像上叠加文字或者图形信息,进而为用户提供更多附加信息的技术。OSD信息叠加模块170用于接收来自图像处理模块130的视频流和来自智能分析模块150的分析处理结果,并将该分析处理结果叠加到该视频流上。
视频压缩模块180用于接收已经叠加分析处理结果的视频流,并对该视频流压缩进而形成压缩视频流。
IP数据传输模块190用于接收来自智能分析模块150的信息,该信息包括报警信息和统计数据信息等,以及接收来自视频压缩模块180的压缩视频流,并将接收到的信息及压缩视频流发送至终端服务器。
图2是本发明的基于多个IP Camera的智能视频监控***框图。该智能视频监控***包括多个IP Camera及终端服务器210。安置于多个监控场景的多个IP Camera与一个或多个终端服务器210相连。终端服务器210可以是一个或多个,本说明书以一个终端服务器为例对本发明的智能视频监控***加以说明。
终端服务器210包括终端报警模块211、智能检索模块212和配置模块213。
终端报警模块211用于接收来自IP Camera的报警信息,并在接收到报警信息后即时报警。
智能检索模块212具有统计、分析数据,存储数据及智能检索功能。
具体地,智能检索模块212首先接收来自IP Camera的压缩视频流以及报警信息、统计数据等,并对接收到的信息做进一步统计和分析;然后再根据该统计分析结果对接收到的该信息做分类处理,并依照相应类别归类存储。
用户通过智能检索模块212对其需要内容做检索,智能检索模块212将用户输入的检索条件与存储在该智能检索模块中的已经分类的信息做匹配度分析,若匹配上,则用户通过智能检索模块212获取其需要的信息。
配置模块213为用户提供远程配置IP Camera各项参数的功能,包括远程配置智能处理模块140的监控目标无噪声区域;以及远程配置智能分析模块150的报警触发条件;远程配置智能分析模块150的统计功能相关参数等。
显而易见,在不偏离本发明的真实精神和范围的前提下,在此描述的本发明可以有许多变化。因此,所有对于本领域技术人员来说显而易见的改变,都应包括在本权利要求书所涵盖的范围之内。本发明所要求保护的范围仅由所述的权利要求书进行限定。

Claims (13)

1.一种实时智能视频监控前端设备,包括智能处理模块(140)和智能分析模块(150);
所述智能处理模块(140)由专用集成电路实现,用于完成所述智能监控前端的复杂核心算法;
所述智能分析模块(150)由嵌入式芯片实现,该智能分析模块(150)根据用户配置对来自智能处理模块(140)的数据做分析和处理。
2.如权利要求1所述的一种实时智能视频监控前端设备,其特征在于,所述智能处理模块(140)用于实时检测并跟踪该监控***所属监控区域内的运动目标,并分析该运动目标的运动趋势。
3.如权利要求1所述的一种实时智能视频监控前端设备,其特征在于,所述智能分析模块(150)为用户提供参数配置接口,以便配置该前端设备的预警功能、统计功能中的一个或多个。
4.如权利要求1所述的一种实时智能视频监控前端设备,包括OSD信息叠加模块(170);
所述OSD信息叠加模块(170)用于将来自所述智能分析模块(150)的分析处理结果叠加到来自所述前端设备的视频流上。
5.如权利要求4所述的一种实时智能视频监控前端设备,包括视频压缩模块(180),该视频压缩模块(180)用于压缩来自OSD信息叠加模块(170)的已经叠加分析处理结果的视频流。
6.如权利要求5所述的一种实时智能视频监控前端设备,包括IP数据传输模块(190),该IP数据传输模块(190)用于将来自智能分析模块(150)的信息,以及来自视频压缩模块(180)的压缩视频流发送出去。
7.如权利要求1所述的一种实时智能视频监控前端设备,其特征在于,所述前端设备是IP Camera。
8.一种实时智能视频监控***,包括权力要求1所述的实时智能视频监控前端设备和终端服务器(210),该终端服务器(210)接收来自一个或多个所述前端设备发送过来的信息。
9.如权利要求8所述的一种实时智能视频监控***,其特征在于所述终端服务器(210)包括智能检索模块(212),该智能检索模块(212)用于对来自所述前端设备的信息做统计和分析,并根据统计分析结果对该信息做分类存储,以及为用户提供智能检索功能。
10.如权利要求9所述的一种实时智能视频监控***,其特征在于,所述智能检索是用户输入的检索条件与智能检索模块(212)中的数据相匹配时,智能检索模块(212)为用户提供相应检索信息。
11.如权利要求8所述的一种实时智能视频监控***,所述终端服务器(210)包括配置模块(213),该配置模块(213)为用户提供远程配置所述前端设备参数的功能。
12.如权利要求11所述的一种实时智能视频监控***,其特征在于,所述远程配置前端设备参数包括远程配置智能处理模块(140)的监控目标无噪声区域;以及远程配置智能分析模块(150)的报警触发条件;远程配置智能分析模块(150)的统计功能相关参数中的一个或多个。
13.如权利要求8所述的一种实时智能视频监控***,所述终端服务器(210)包括终端报警模块(211),该终端报警模块(211)用于接收来自所述前端设备的报警信息,并在接收到报警信息后即时报警。
CN2009100830139A 2009-04-28 2009-04-28 实时智能视频监控*** Pending CN101877780A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009100830139A CN101877780A (zh) 2009-04-28 2009-04-28 实时智能视频监控***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009100830139A CN101877780A (zh) 2009-04-28 2009-04-28 实时智能视频监控***

Publications (1)

Publication Number Publication Date
CN101877780A true CN101877780A (zh) 2010-11-03

Family

ID=43020230

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009100830139A Pending CN101877780A (zh) 2009-04-28 2009-04-28 实时智能视频监控***

Country Status (1)

Country Link
CN (1) CN101877780A (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102104721A (zh) * 2011-01-17 2011-06-22 王兴国 双模智能视觉传感***架构
CN102984508A (zh) * 2012-12-21 2013-03-20 浙江宇视科技有限公司 一种摄像机
CN103158620A (zh) * 2013-03-25 2013-06-19 中国电子科技集团公司第三十八研究所 一种车辆行人检测跟踪预警***
CN103369308A (zh) * 2013-07-10 2013-10-23 浙江宇视科技有限公司 一种osd叠加管理、执行方法及装置
CN104202559A (zh) * 2014-08-11 2014-12-10 广州中大数字家庭工程技术研究中心有限公司 一种基于旋转不变特征的智能监控***及方法
CN105357495A (zh) * 2015-12-08 2016-02-24 浙江宇视科技有限公司 前后端配合智能分析的方法及装置
CN106454079A (zh) * 2016-09-28 2017-02-22 北京旷视科技有限公司 图像处理方法及装置和相机
CN107124577A (zh) * 2017-05-22 2017-09-01 东华大学 一种基于运动目标检测的实时防窃***
CN107358160A (zh) * 2017-06-08 2017-11-17 小草数语(北京)科技有限公司 终端监控视频处理方法、监控终端以及服务器
CN107992627A (zh) * 2017-12-25 2018-05-04 浙江宇视科技有限公司 需求视频实时查找方法与装置
CN108769629A (zh) * 2018-08-10 2018-11-06 苏州达能激光科技有限公司 一种高清智能化网络视频监控***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101093603A (zh) * 2007-07-03 2007-12-26 北京智安邦科技有限公司 智能视频监控设备模组和***及其监控方法
CN101227598A (zh) * 2008-02-26 2008-07-23 大连恒为电子有限公司 高清晰视频监控***
CN101355692A (zh) * 2008-07-30 2009-01-28 浙江大学 一种实时跟踪运动目标区域的智能监控装置
CN101404760A (zh) * 2008-10-28 2009-04-08 大连理工大学 一种自感知便携式图像无线监控设备及使用方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101093603A (zh) * 2007-07-03 2007-12-26 北京智安邦科技有限公司 智能视频监控设备模组和***及其监控方法
CN101227598A (zh) * 2008-02-26 2008-07-23 大连恒为电子有限公司 高清晰视频监控***
CN101355692A (zh) * 2008-07-30 2009-01-28 浙江大学 一种实时跟踪运动目标区域的智能监控装置
CN101404760A (zh) * 2008-10-28 2009-04-08 大连理工大学 一种自感知便携式图像无线监控设备及使用方法

Cited By (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102104721A (zh) * 2011-01-17 2011-06-22 王兴国 双模智能视觉传感***架构
CN102984508A (zh) * 2012-12-21 2013-03-20 浙江宇视科技有限公司 一种摄像机
CN103158620A (zh) * 2013-03-25 2013-06-19 中国电子科技集团公司第三十八研究所 一种车辆行人检测跟踪预警***
CN103158620B (zh) * 2013-03-25 2015-09-16 中国电子科技集团公司第三十八研究所 一种车辆行人检测跟踪预警***
CN103369308B (zh) * 2013-07-10 2017-04-19 浙江宇视科技有限公司 一种osd叠加管理、执行方法及装置
CN103369308A (zh) * 2013-07-10 2013-10-23 浙江宇视科技有限公司 一种osd叠加管理、执行方法及装置
CN104202559A (zh) * 2014-08-11 2014-12-10 广州中大数字家庭工程技术研究中心有限公司 一种基于旋转不变特征的智能监控***及方法
CN105357495A (zh) * 2015-12-08 2016-02-24 浙江宇视科技有限公司 前后端配合智能分析的方法及装置
CN106454079A (zh) * 2016-09-28 2017-02-22 北京旷视科技有限公司 图像处理方法及装置和相机
CN106454079B (zh) * 2016-09-28 2020-03-27 北京旷视科技有限公司 图像处理方法及装置和相机
CN107124577A (zh) * 2017-05-22 2017-09-01 东华大学 一种基于运动目标检测的实时防窃***
CN107358160A (zh) * 2017-06-08 2017-11-17 小草数语(北京)科技有限公司 终端监控视频处理方法、监控终端以及服务器
CN107992627A (zh) * 2017-12-25 2018-05-04 浙江宇视科技有限公司 需求视频实时查找方法与装置
CN108769629A (zh) * 2018-08-10 2018-11-06 苏州达能激光科技有限公司 一种高清智能化网络视频监控***

Similar Documents

Publication Publication Date Title
CN101877780A (zh) 实时智能视频监控***
US10599929B2 (en) Event monitoring with object detection systems
CN101854516B (zh) 视频监控***、视频监控服务器及视频监控方法
US20190122082A1 (en) Intelligent content displays
CN104506804B (zh) 一种快速道路上的机动车异常行为监测装置及其方法
JP2020149704A (ja) ビデオデータを用いた活動モニタリングのためのシステム及び方法
KR102122859B1 (ko) 교통 영상감시시스템의 멀티 표적 추적 방법
CN107705574A (zh) 一种精准快速的道路违章停车全自动抓拍***
US20150117704A1 (en) Bus lane infraction detection method and system
KR101964683B1 (ko) 스마트 영상처리장치 및 그 장치의 구동방법
KR102122850B1 (ko) 딥 러닝 기반의 교통분석 및 차량번호 인식 솔루션
Razalli et al. Emergency vehicle recognition and classification method using HSV color segmentation
CN111047824B (zh) 一种室内儿童看护联动控制预警方法及***
Magrini et al. Computer vision on embedded sensors for traffic flow monitoring
CN117319609A (zh) 一种物联网大数据智能视频监控***及方法
Zadobrischi et al. Pedestrian detection based on TensorFlow YOLOv3 embedded in a portable system adaptable to vehicles
WO2020008459A1 (en) System and method for use in object detection from video stream
CN113963316A (zh) 目标事件的确定方法、装置、存储介质及电子装置
WO2017176711A1 (en) Vehicle recognition system using vehicle characteristics
CN116311166A (zh) 交通障碍物识别方法、装置及电子设备
Anagnostopoulos et al. Intelligent traffic management through MPEG-7 vehicle flow surveillance
CN115471872A (zh) 散发广告的行为检测方法、装置、电子设备和存储介质
Vujović et al. Traffic video surveillance in different weather conditions
CN113902987A (zh) 群体智能的对象检测方法、存储介质和处理器
ElHakim et al. Traffisense: A smart integrated visual sensing system for traffic monitoring

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C12 Rejection of a patent application after its publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20101103