CN103646544A - 基于云台和相机设备的车辆行为分析识别方法 - Google Patents
基于云台和相机设备的车辆行为分析识别方法 Download PDFInfo
- Publication number
- CN103646544A CN103646544A CN201310567228.4A CN201310567228A CN103646544A CN 103646544 A CN103646544 A CN 103646544A CN 201310567228 A CN201310567228 A CN 201310567228A CN 103646544 A CN103646544 A CN 103646544A
- Authority
- CN
- China
- Prior art keywords
- vehicle
- image
- cloud terrace
- target
- holder
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Landscapes
- Image Analysis (AREA)
- Studio Devices (AREA)
Abstract
本发明公开了一种基于云台和相机设备的车辆行为分析识别方法，包括如下步骤：利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测；利用基于级联LBP空间直方图特征的车辆检测算法检测运动前景区域，判断该区域是否有车辆，并精确定位车辆位置；利用基于类Fern特征的快速车辆匹配算法长时间匹配定位目标车辆；利用目标的特征匹配数量来判断是否为违章停车，云台预置位切换后，对事前目标车辆进行分析与识别；使用嵌入式一体化的硬件结构，实现实时视频图像的采集、车辆行为分析、云台联动、图像压缩和网络传输等全部功能，同时还具有分时间段使能、分预置位使能等设备管理功能，后端平台软件只要接收图片并做数据整理筛选工作即可。
Description
技术领域
本发明属于智能交通技术领域，涉及一种基于云台和相机设备的车辆行为分析识别方法。
背景技术
在智能交通行业，监控摄像机和云台已经非常普及，但是对车辆的行为检测和分析的智能化程度却较低，自动检测违章事件（违章停车，逆行等）的能力不强，大多派专人查看，这样不仅需要投入大量的人力物力资源，而且由于人的精力和注意力有限，在高强度的工作环境下，往往会出现疏漏，从而，不能及时地对异常情况进行反应。
发明内容
本发明就是为了解决上述现有技术中的问题，提供了一种基于云台和相机设备的车辆行为分析识别方法。
为了达到上述目的，本发明采用如下技术方案：
本发明的基于云台和相机设备的车辆行为分析识别方法，包括如下步骤：
利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测；
利用基于级联LBP（local binary patterns，局部二值模式特征）空间直方图特征的车辆检测算法检测运动前景区域，判断该区域是否有车辆，并精确定位车辆位置；
利用基于类蕨（Fern）特征的快速车辆匹配算法长时间匹配定位目标车辆；
利用目标的特征匹配数量来判断是否为违章停车，云台预置位切换后在未检测出运动前景下静态检测目标车辆，对事前目标车辆进行分析与识别；
使用嵌入式一体化的硬件结构，实现实时视频图像的采集、车辆行为分析、云台联动、相机变倍聚焦、车辆抓拍、车牌识别、图像压缩和网络传输。
其中，利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测的具体步骤如下：首先利用改进的大尺度SOBEL（索贝尔）算子对图象进行垂直和水平方向卷积并取最大值得到边缘图；然后用边缘图象建立混合高斯模型建立背景和提取前景。
利用基于级联LBP空间直方图特征的车辆检测算法确认检测运动前景中是否有车辆存在的步骤级联使用了两种分类器：快速检测并过滤掉非车辆的SVM（support vector machine，支持向量基）线性分类器和进行精确的确认的SVM HIK（Histogram intersection kernel，直方图交叉核）非线性分类器。
基于类Fern特征的快速车辆匹配算法把匹配图像分为子区域，利用积分图方法计算所有子区域内的平均灰度作为匹配准则。
利用目标的特征匹配数量来判断是否为违章停车，将每帧图象检测到运动目标的位置、大小和距离放入固定长度的缓冲区进行不断的更新，并把最新检测到的目标特征和历史数据遍历进行匹配记数，达到预定数值便为停车。
在云台预置位切换后，采用基于多标定尺度的静态车辆检测技术，对事前目标车辆进行分析与识别，由远及近计算出不同的车辆标定尺度。
使用嵌入式一体化的硬件结构，通过智能分析模块、视频采集缓冲模块、云台主控模块和视频压缩等四大模块在云台前端完成监控、智能分析功能。
本发明具有的优点和积极效果是：
本发明的基于云台和相机设备的车辆行为分析识别方法，可以对目标车辆进行实时的检测与分析，对违章车辆进行抓拍图像并录像，记录下整个违章过程，操作人员只需要查询违章记录即可，大大提高了操作人员的工作效率。该方法能够及时地对异常情况进行反应和记录，避免了由于人工而造成疏漏。
附图说明
图1是本发明的LBP算子的计算方法；
图2是本发明的LBP空间直方图；
图3是基于级联LBP空间直方图特征的车辆检测算法流程图；
图4是基于类Fern特征的快速车辆匹配算法的分区图；
图5是本发明的硬件结构***框图；
图6是违章车辆检测、车辆抓拍、车***识别的流程图。
具体实施方式
下面结合附图和具体实施例对本发明的基于云台和相机设备的车辆行为分析识别方法做进一步说明。下述各实施例仅用于说明本发明而并非对本发明的限制。
本发明的基于云台和相机设备的车辆行为分析识别方法，包括如下步骤：
利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测：
利用基于级联LBP空间直方图特征的车辆检测算法检测运动前景区域，判断该区域是否有车辆，并精确定位车辆位置；
利用基于类Fern特征的快速车辆匹配算法长时间匹配定位目标车辆；
利用目标的特征匹配数量来判断是否为违章停车，云台预置位切换后在未检测出运动前景下静态检测目标车辆，对事前目标车辆进行分析与识别；
使用嵌入式一体化的硬件结构，实现实时视频图像的采集、车辆行为分析、云台联动、相机变倍聚焦、车辆抓拍、车牌识别、图像压缩和网络传输等全部功能，同时还具有分时间段使能、分预置位使能等设备管理功能。
其中，利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测的具体步骤如下：首先利用改进的大尺度SOBEL算子对图象进行垂直和水平方向卷积并取最大值得到边缘图，能够使比较弱的边缘增强，然后用边缘图象建立混合高斯模型建立背景和提取前景，可快速的提取驶入设定区域的违法车辆，大大提高了***的抗干扰性和检测的准确性。
利用基于级联LBP空间直方图特征的车辆检测算法确认检测运动前景中是否有车辆存在，该步骤级联使用了SVM线性分类器和SVM HIK非线性分类器两种分类器，线性分类器快速检测并过滤掉非车辆，非线性分类器进行精确的确认。
LBP算子的计算方法如图1所示，对于作为中心点的每个像素与周围8联通域的像素进行比较，如果大于或者等于则得到对应位的编码为1，否则为0，把这8个对应位的编码按照一定的顺序连接起来得到8位二进制数的十进制表示即为该中心点像素的LBP值。
LBP空间直方图如图2所示，把车辆样本分为一定的cell，每2x2个cell记为一个block，在每个block中统计LBP直方图，每个block在水平方向，竖直方向移动的步进为一个cell，直到遍历整个样本图像，并把每一个block的直方图串联起来得到整个样本的LBP空间直方图特征。
基于级联LBP空间直方图特征的车辆检测算法流程图如图3所示。对前景图像提取LBP空间直方图特征，对每个特征分别利用两个分类器进行分类判断，都认为有车则认为该位置有车，否则认为该位置无车。
基于类Fern特征的快速车辆匹配算法可以长时间的匹配目标车辆，该算法把匹配图像分为子区域，利用积分图方法计算所有子区域内的平均灰度作为匹配准则，该算法运行速度快，对遮挡和光照变化有一定的鲁棒性。
基于类Fern特征的快速车辆匹配算法把匹配图像分成13个子区域，如图4所示，分别统计子区域的的均值进行匹配。
利用目标的特征匹配数量来判断是否为违章停车，将每帧图象检测到运动目标的位置、大小和距离放入固定长度的缓冲区进行不断的更新，并把最新检测到的目标特征和历史数据遍历进行匹配记数，达到预定数值便认为停车，所有参数可调节，大大提高了***的适应性。
在云台预置位切换后，采用基于多标定尺度的静态车辆检测技术，可以对事前目标车辆进行分析与识别。该技术对车辆检测标定尺度进行逻辑优化，由远及近计算出不同的车辆标定尺度，使场景中不同远近、不同大小的车辆全部能够由基于级联LBP空间直方图特征的车辆检测算法准确检测出来。
使用嵌入式一体化的硬件结构，如图5所示，硬件电路主要包括智能分析主控模块、视频采集缓冲模块、云台主控模块和视频压缩模块。通过智能分析模块、视频采集缓冲模块、云台主控模块和视频压缩模块，可在云台前端完成监控、智能分析功能，该***具有响应速度快，占用后端平台资源少，智能分析无延时等优点。
在云台前端实现视频图像的采集、车辆行为分析、云台联动、相机变倍聚焦、车辆抓拍、车牌识别、图像压缩和网络传输等全部功能，同时还具有分时间段使能、分预置位使能等设备管理功能，后端平台软件只要接收图片并做数据整理筛选工作即可。
违章车辆检测、车辆抓拍、车牌识别线程实现流程图如图6所示，当有违章车辆时，需抓拍全景图，计算停车时长，超过规定时长后，控制云台，抓拍特写图片，进行车牌识别，然后控制云台，返回监控位置，再次抓拍全景图片。
Claims (7)
1.一种基于云台和相机设备的车辆行为分析识别方法，其特征在于，该方法包括如下步骤：
利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测；
利用基于级联的LBP空间直方图特征的车辆检测算法检测运动前景区域，判断该区域是否有车辆，并精确定位车辆位置；
利用基于类蕨特征的快速车辆匹配算法长时间匹配定位目标车辆；
利用目标的特征匹配数量来判断是否为违章停车，云台预置位切换后在未检测出运动前景下静态检测目标车辆，对事前目标车辆进行分析与识别；
使用嵌入式一体化的硬件结构，实现实时视频图像的采集、车辆行为分析、云台联动、相机变倍聚焦、车辆抓拍、车牌识别、图像压缩和网络传输。
2.根据权利要求1所述的基于云台和相机设备的车辆行为分析识别方法，其特征在于，利用基于图像弱边缘的混合高斯背景建模方法进行运动前景检测的具体步骤如下：首先利用改进的大尺度 SOBEL算子对图象进行垂直和水平方向卷积并取最大值得到边缘图；然后用边缘图象建立混合高斯模型建立背景和提取前景。
3.根据权利要求1所述的基于云台和相机设备的车辆行为分析识别方法，其特征在于，利用基于级联LBP空间直方图特征的车辆检测算法确认检测运动前景中是否有车辆存在的步骤级联使用了两种分类器：快速检测并过滤掉非车辆的SVM线性分类器和进行精确的确认的基于SVM HIK的非线性分类器。
4.根据权利要求1所述的基于云台和相机设备的车辆行为分析识别方法，其特征在于，基于类Fern特征的快速车辆匹配算法把匹配图像分为子区域，利用积分图方法计算所有子区域内的平均灰度作为匹配准则。
5.根据权利要求1所述的基于开关电源红外灯驱动电路，其特征在于：利用目标的特征匹配数量来判断是否为违章停车，将每帧图象检测到运动目标的位置、大小和距离放入固定长度的缓冲区进行不断的更新，并把最新检测到的目标特征和历史数据遍历进行匹配记数，达到预定数值便为停车。
6.根据权利要求1所述的基于开关电源红外灯驱动电路，其特征在于：在云台预置位切换后，采用基于多标定尺度的静态车辆检测技术，对事前目标车辆进行分析与识别，由远及近计算出不同的车辆标定尺度。
7.根据权利要求1所述的基于开关电源红外灯驱动电路，其特征在于：使用嵌入式一体化的硬件结构，通过智能分析模块、视频采集缓冲模块、云台主控模块和视频压缩等四大模块在云台前端完成监控、智能分析功能。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310567228.4A CN103646544B (zh) | 2013-11-15 | 2013-11-15 | 基于云台和相机设备的车辆行为分析识别方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201310567228.4A CN103646544B (zh) | 2013-11-15 | 2013-11-15 | 基于云台和相机设备的车辆行为分析识别方法 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN103646544A true CN103646544A (zh) | 2014-03-19 |
| CN103646544B CN103646544B (zh) | 2016-03-09 |
Family
ID=50251750
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201310567228.4A Active CN103646544B (zh) | 2013-11-15 | 2013-11-15 | 基于云台和相机设备的车辆行为分析识别方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN103646544B (zh) |
Cited By (8)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104157143A (zh) * | 2014-08-15 | 2014-11-19 | 青岛比特信息技术有限公司 | 违章停车检测***及其检测方法 |
| CN104778842A (zh) * | 2015-04-29 | 2015-07-15 | 深圳市保千里电子有限公司 | 一种基于车牌识别的云端车辆行驶轨迹跟踪的方法及*** |
| CN106446892A (zh) * | 2016-09-13 | 2017-02-22 | 东软集团股份有限公司 | 一种车牌号码识别方法、装置及一种充电桩 |
| CN106878674A (zh) * | 2017-01-10 | 2017-06-20 | 哈尔滨工业大学深圳研究生院 | 一种基于监控视频的停车检测方法及装置 |
| CN109035805A (zh) * | 2018-09-21 | 2018-12-18 | 深圳市九洲电器有限公司 | 一种车牌号码的智能识别方法及装置 |
| CN111291748A (zh) * | 2020-01-15 | 2020-06-16 | 广州玖峰信息科技有限公司 | 一种级联分布式的人工智能箱号识别*** |
| CN112183350A (zh) * | 2020-09-28 | 2021-01-05 | 天地伟业技术有限公司 | 一种基于视频的违章停车检测方法 |
| CN113592943A (zh) * | 2020-04-30 | 2021-11-02 | 丰田自动车株式会社 | 位置推定***及位置推定方法 |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1984236A (zh) * | 2005-12-14 | 2007-06-20 | 浙江工业大学 | 一种交通流信息视频检测中的特征采集方法 |
| CN101183427A (zh) * | 2007-12-05 | 2008-05-21 | 浙江工业大学 | 基于计算机视觉的违章停车检测装置 |
| EP1978470A1 (en) * | 2007-04-05 | 2008-10-08 | Mitsubishi Electric Corporation | Method for detecting objects left-behind in a scene |
| JP2012038318A (ja) * | 2010-08-10 | 2012-02-23 | Fujitsu Ltd | ターゲット検出方法及び装置 |
| CN102637257A (zh) * | 2012-03-22 | 2012-08-15 | 北京尚易德科技有限公司 | 一种基于视频的交通车辆检测识别***和方法 |
| CN103035013A (zh) * | 2013-01-08 | 2013-04-10 | 东北师范大学 | 一种基于多特征融合的精确运动阴影检测方法 |
-
2013
- 2013-11-15 CN CN201310567228.4A patent/CN103646544B/zh active Active
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN1984236A (zh) * | 2005-12-14 | 2007-06-20 | 浙江工业大学 | 一种交通流信息视频检测中的特征采集方法 |
| EP1978470A1 (en) * | 2007-04-05 | 2008-10-08 | Mitsubishi Electric Corporation | Method for detecting objects left-behind in a scene |
| CN101183427A (zh) * | 2007-12-05 | 2008-05-21 | 浙江工业大学 | 基于计算机视觉的违章停车检测装置 |
| JP2012038318A (ja) * | 2010-08-10 | 2012-02-23 | Fujitsu Ltd | ターゲット検出方法及び装置 |
| CN102637257A (zh) * | 2012-03-22 | 2012-08-15 | 北京尚易德科技有限公司 | 一种基于视频的交通车辆检测识别***和方法 |
| CN103035013A (zh) * | 2013-01-08 | 2013-04-10 | 东北师范大学 | 一种基于多特征融合的精确运动阴影检测方法 |
Non-Patent Citations (1)
| Title |
|---|
| 郝士新: "基于视频的运动车辆检测和跟踪算法研究", 《中国优秀硕士学位论文全文数据库 信息科技辑 》 * |
Cited By (12)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104157143A (zh) * | 2014-08-15 | 2014-11-19 | 青岛比特信息技术有限公司 | 违章停车检测***及其检测方法 |
| CN104778842A (zh) * | 2015-04-29 | 2015-07-15 | 深圳市保千里电子有限公司 | 一种基于车牌识别的云端车辆行驶轨迹跟踪的方法及*** |
| CN106446892A (zh) * | 2016-09-13 | 2017-02-22 | 东软集团股份有限公司 | 一种车牌号码识别方法、装置及一种充电桩 |
| CN106878674A (zh) * | 2017-01-10 | 2017-06-20 | 哈尔滨工业大学深圳研究生院 | 一种基于监控视频的停车检测方法及装置 |
| CN106878674B (zh) * | 2017-01-10 | 2019-08-30 | 哈尔滨工业大学深圳研究生院 | 一种基于监控视频的停车检测方法及装置 |
| CN109035805A (zh) * | 2018-09-21 | 2018-12-18 | 深圳市九洲电器有限公司 | 一种车牌号码的智能识别方法及装置 |
| CN109035805B (zh) * | 2018-09-21 | 2021-03-02 | 深圳市九洲电器有限公司 | 一种车牌号码的智能识别方法及装置 |
| CN111291748A (zh) * | 2020-01-15 | 2020-06-16 | 广州玖峰信息科技有限公司 | 一种级联分布式的人工智能箱号识别*** |
| CN113592943A (zh) * | 2020-04-30 | 2021-11-02 | 丰田自动车株式会社 | 位置推定***及位置推定方法 |
| CN113592943B (zh) * | 2020-04-30 | 2024-01-30 | 丰田自动车株式会社 | 位置推定***及位置推定方法 |
| CN112183350A (zh) * | 2020-09-28 | 2021-01-05 | 天地伟业技术有限公司 | 一种基于视频的违章停车检测方法 |
| CN112183350B (zh) * | 2020-09-28 | 2023-07-14 | 天地伟业技术有限公司 | 一种基于视频的违章停车检测方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN103646544B (zh) | 2016-03-09 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN103646544B (zh) | 基于云台和相机设备的车辆行为分析识别方法 | |
| Asha et al. | Vehicle counting for traffic management system using YOLO and correlation filter | |
| CN103093249B (zh) | 一种基于高清视频的出租车识别方法及*** | |
| CN104751634B (zh) | 高速公路隧道行车图像采集信息的综合应用方法 | |
| CN103077407B (zh) | 车标定位识别方法及*** | |
| CN109271872B (zh) | 一种高压隔离开关分合状态判断与故障诊断装置及方法 | |
| CN102759347B (zh) | 一种高铁接触网在线巡检装置、巡检方法以及其检测*** | |
| CN103093201B (zh) | 车标定位识别方法及*** | |
| CN101231786A (zh) | 一种基于视频图像特征的车辆检测方法 | |
| CN108269407B (zh) | 一种自动管理人流、物流的安防机器人 | |
| CN103824066A (zh) | 一种基于视频流的车牌识别方法 | |
| CN103927878A (zh) | 一种用于违章停车的自动抓拍装置及自动抓拍方法 | |
| CN105574543A (zh) | 一种基于深度学习的车辆品牌型号识别方法和*** | |
| CN103605953A (zh) | 基于滑窗搜索的车辆兴趣目标检测方法 | |
| CN103279756A (zh) | 基于集成分类器的车辆检测分析***及其检测分析方法 | |
| CN104537360A (zh) | 车辆未让行违章检测方法及其检测*** | |
| CN101937614A (zh) | 一种即插即用的交通综合检测*** | |
| CN106991821A (zh) | 违章车辆用手持移动终端数据采集*** | |
| CN104378539A (zh) | 场景自适应的视频结构化语义提取摄像机及其方法 | |
| CN102307297A (zh) | 一种多方位视频目标跟踪检测的智能监控*** | |
| CN107358236A (zh) | 一种基于摄像装置的车牌号码识别***及方法 | |
| CN202306822U (zh) | 一种基于dsp的便携式车牌信息快速识别装置 | |
| Jensen et al. | Presenting the multi-view traffic intersection dataset (MTID): A detailed traffic-surveillance dataset | |
| CN204375161U (zh) | 违章停车自动抓拍*** | |
| Shafie et al. | Smart video surveillance system for vehicle detection and traffic flow control |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| C10 | Entry into substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| C14 | Grant of patent or utility model | ||
| GR01 | Patent grant | ||
| CP03 | Change of name, title or address | ||
| CP03 | Change of name, title or address |
Address after: 300384 Tianjin City Huayuan Industrial Zone (outer ring road No. 8) two Haitai branch Patentee after: Tiandi Weiye Technology Co., Ltd. Address before: 300384 Tianjin city Xiqing District Huayuan new technology Industrial Park (outer ring road No. 8) two Haitai branch Patentee before: Tianjin Tiandy Digital Technology Co., Ltd. |