CN103095990A - 具有分布式图像采集单元的超高清摄像机 - Google Patents
具有分布式图像采集单元的超高清摄像机 Download PDFInfo
- Publication number
- CN103095990A CN103095990A CN2012105504138A CN201210550413A CN103095990A CN 103095990 A CN103095990 A CN 103095990A CN 2012105504138 A CN2012105504138 A CN 2012105504138A CN 201210550413 A CN201210550413 A CN 201210550413A CN 103095990 A CN103095990 A CN 103095990A
- Authority
- CN
- China
- Prior art keywords
- image
- acquisition units
- image acquisition
- processing unit
- graphics processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Studio Devices (AREA)
Abstract
本发明公开了一种具有分布式图像采集单元的超高清摄像机,涉及视频图像处理技术领域。本发明由前后连接的图像采集单元组和图像处理单元组成;图像采集单元组包括第1、2……N图像采集单元;图像采集单元包括依次连接的镜头、图像传感器、采集控制模块和信号传输模块;图像处理单元由前后连接的信号接收模块组和数字信号处理模块组成;信号接收模块组包括第1、2……N信号接收模块。本发明能实现普通单台摄像机无法实现的完整的超高清全景视频监控;不存在合成图像因待拼接图像时间不匹配导致的运动物体错位、重叠等问题;适用于重点区域的连片超高清视频监控应用。
Description
技术领域
本发明涉及视频图像处理技术领域,尤其涉及一种具有分布式图像采集单元的超高清摄像机。
背景技术
随着安防视频监控行业的发展,网络化、高清化成为这个行业的发展趋势。
在现有技术条件下,要实现重点监控区域的连片高清网络监控,例如一条城市主干道路的连片监控,一般采用布置多个高清网络摄像机的方式,例如相隔30到50米设置一台高清网络摄像机,每台高清网络摄像机传输到监控中心的视频是相互独立的,其监控区域即使依次重叠,也不能投射形成一幅完整的视频图像。目前有采用通过中心端服务器将前端多台网络摄像机采集的依次交叠的实时视频进行后端合成处理后形成完整全景图像的实现方式,但因为不同的网络摄像机采集视频图像通过网络传输后存在时延不等,容易产生合成图像因待拼接图像时间不匹配导致的运动物体错位、重叠等问题。
发明内容
本发明的目的就在于克服现有技术存在缺点和不足,提供了一种具有分布式图像采集单元的超高清摄像机,即提供一种可分布部署多个图像采集单元,并将多个图像采集单元采集的图像合成处理并输出一幅完整的超高清视频图像的超高清摄像机。
本发明的技术方案为:
一、具有分布式图像采集单元的超高清摄像机(简称摄像机)
本摄像机由前后连接的图像采集单元组和图像处理单元组成;
图像采集单元组包括第1、2……N图像采集单元,2≤N≤64;
图像采集单元包括依次连接的镜头、图像传感器、采集控制模块和信号传输模块;
图像处理单元由前后连接的信号接收模块组和数字信号处理模块组成,信号接收模块组包括第1、2……N信号接收模块,2≤N≤64。
二、具有分布式图像采集单元的超高清摄像方法(简称摄像方法)
本摄像方法包括下列步骤:
①N个图像采集单元分别采集原始视频图像;
②图像处理单元接收N个图像采集单元采集的原始视频图像;
③图像处理单元对N个图像采集单元采集的原始视频图像进行图像特征点提取;
④图像处理单元对第1个图像采集单元采集的原始视频图像和第2个图像采集单元采集的原始视频图像进行图像特征点配准,如果特征点匹配度低于阈值,则删除低于阈值的部分特征点,得到匹配点集;
⑤图像处理单元对第1个图像采集单元采集的原始视频图像和第2个图像采集单元采集的原始视频图像根据两幅原始图像保留的特征点计算出两幅图像的投影坐标差异,并对第2幅图像进行投影坐标校正;
⑥图像处理单元对第N个图像采集单元采集的原始视频图像和第N-1个经过投影坐标校正后的图像进行图像特征点配准,如果特征点匹配度低于阈值,则删除低于阈值的部分特征点,得到匹配点集;
⑦图像处理单元对第N个图像采集单元采集的原始视频图像和第N-1个经过投影坐标校正后的图像保留的特征点计算出两幅图像的投影坐标差异,并对第N个图像采集单元采集的原始视频图像进行投影坐标校正;
⑧图像处理单元将全部N-1个经过投影坐标校正的图像删除相似特征点部分,并与第一幅图像采集单元采集的原始视频图像合并成一幅完整的超高清视频图像;
⑨图像处理单元将合成后的超高清视频图像序列进行视频压缩编码,形成一路超高清视频图像输出。
本发明具有以下优点和积极效果:
1、能实现普通单台摄像机无法实现的完整的超高清全景视频监控;
3、与采用多个网络摄像机再通过后端平台进行拼接合成的方案相比,由于每个图像采集单元采集到的原始高清视频数据直接传输到图像处理单元,每个图像采集单元采集到的图像传输到图像处理单元无时延,不存在合成图像因待拼接图像时间不匹配导致的运动物体错位、重叠等问题。
3、与采用多个网络摄像机再通过后端平台进行拼接合成的方案相比具有成本较低的优点;
适用于重点区域的连片超高清视频监控应用。
附图说明
图1 为摄像机的结构方框图;
图2 为图像采集单元的结构方框图;
图3 为图像处理单元的结构方框图;
图4 为数字信号处理模块的结构方框图;
图5 为特征点匹配流程图。
图中:
100—图像采集单元组,
110、120、……1N0—第1、2……第N图像采集单元,2≤N≤64;
111—镜头,112—图像传感器,113采集控制模块,114—信号传输模块;
200—图像处理单元,
210—信号接收模块组,
211、212……21N—第1、2……第N信号接收模块,2≤N≤64。
220—数字信号处理模块,
221—图像特征点提取模块,222—特征点配准模块,
223—图像变换模块, 224—图像融合模块,
225—图像编码压缩模块。
具体实施方式
下面结合附图和实施例详细说明:
一、总体
如图1,本摄像机由前后连接的图像采集单元组100和图像处理单元200组成;
图像采集单元组100包括第1、2……N图像采集单元1N0,2≤N≤64;
二、功能部件
1、图像采集单元组100
1)第1图像采集单元110
如图2,第1图像采集单元110包括依次连接的镜头111、图像传感器112、采集控制模块113和信号传输模块114。
(1)镜头111采用安防行业通用的镜头。
(2)图像传感器112为通用的高清数字图像传感器。
(3)采集控制模块113为与图像传感器112配套的图像信号传感器控制器。
(4)信号传输模块114为通用的SDI信号转换驱动芯片。
第1图像采集单元110的工作机理:
镜头111将采集的实景图像投射在图像传感器112上,图像传感器112将实景图像通过光电转换形成的原始RAW格式的视频图像传输到采集控制模块113上,采集控制模块113一方面负责图像传感器112的时序产生及参数配置,另一方面负责将原始的RAW格式的视频图像转换为BT.1120格式的视频数据并传递给信号传输模块114,信号传输模块114负责对信号进行串并转换并进行信号的预加重等处理。
2)第2图像采集单元120……N图像采集单元1N0和第1图像采集单元110的结构、功能相同。
2、图像处理单元200
如图3,图像处理单元200由前后连接的信号接收模块组210和数字信号处理模块220组成;
信号接收模块组210包括第1、2……第N信号接收模块211、212……21N,分别负责对应接收来自第1、第2……N图像采集单元221、222……22N采集的视频数据;
数字信号处理模块220负责接收N个原始视频图像并将其合成处理并输出一幅完整的超高清视频图像。
数字信号处理模块220其硬件配置是:通用的高性能数字信号处理器为核心的最小***。
如图4,数字信号处理模块220其软件是由依次交互的图像特征点提取模块211、特征点配准模块212、图像变换模块213、图像融合模块214和图像编码压缩模块215组成。
1)图像特征点提取模块211负责对图像的关键特征点进行提取,提取的关键特征点将作为两幅图像进行融合匹配的基础信息;采用通用的SUSAN角点检测算法提取。
2)特征点配准模块212负责对图像特征点根据相对坐标信息进行比对从而得到两幅图像的匹配点集;采用特征向量的距离和点之间的相似性策略对特征点进行匹配;具体采用通用的最大相关法;在得到初步匹配点集后,将采用通用的RANSAC算法对数据进行拟合,从而去除低于匹配阈值的点,得到最优匹配点集。
具体地,如图5,特征点配准模块212的工作流程是:
①采用最大相关法取得初步匹配点集1;
②采用RANSAC算法进行拟合2;
③判断匹配度是否低于阈值3,是则进入步骤④,否则从匹配点集中删除5;
④得到最优匹配点集,流程结束。
3)图像变换模块213负责根据配准的匹配点集将匹配图像向参考图像进行投影,得到校正后图像;采用通用的坐标变换法进行。
4)图像融合模块214负责将校正后图像去除匹配区域图像后并与参考图像拼接;拼接线采用通用的加权平滑法进行处理。
5)图像编码压缩模块215负责将图像序列进行编码压缩;采用目前常用的H.264编码压缩算法。
以上所述,仅是本发明的较佳实例,本发明所主张的权利范围并不局限于此。本发明还有其他多种实施例,在不背离本发明精神及其实质的情况下,该领域技术人员当可根据本发明做出各种相应的改变和变形,但这些改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (2)
1.一种具有分布式图像采集单元的超高清摄像机,其特征在于:
由前后连接的图像采集单元组(100)和图像处理单元(200)组成;
图像采集单元组(100)包括第1、2……N图像采集单元(110、120……1N0),2≤N≤64;图像采集单元包括依次连接的镜头(111)、图像传感器(112)、采集控制模块(113)和信号传输模块(114);
图像处理单元(200)由前后连接的信号接收模块组(210)和数字信号处理模块(220)组成;信号接收模块组(210)包括第1、2……N信号接收模块(211、212……21N),2≤N≤64。
2.按权利要求1所述的具有分布式图像采集单元的超高清摄像机的摄像方法,其特征在于包括下列步骤:
①N个图像采集单元分别采集原始视频图像;
②图像处理单元接收N个图像采集单元采集的原始视频图像;
③图像处理单元对N个图像采集单元采集的原始视频图像进行图像特征点提取;
④图像处理单元对第1个图像采集单元采集的原始视频图像和第2个图像采集单元采集的原始视频图像进行图像特征点配准,如果特征点匹配度低于阈值,则删除低于阈值的部分特征点,得到匹配点集;
⑤图像处理单元对第1个图像采集单元采集的原始视频图像和第2个图像采集单元采集的原始视频图像根据两幅原始图像保留的特征点计算出两幅图像的投影坐标差异,并对第2幅图像进行投影坐标校正;
⑥图像处理单元对第N个图像采集单元采集的原始视频图像和第N-1个经过投影坐标校正后的图像进行图像特征点配准,如果特征点匹配度低于阈值,则删除低于阈值的部分特征点,得到匹配点集;
⑦图像处理单元对第N个图像采集单元采集的原始视频图像和第N-1个经过投影坐标校正后的图像保留的特征点计算出两幅图像的投影坐标差异,并对第N个图像采集单元采集的原始视频图像进行投影坐标校正;
⑧图像处理单元将全部N-1个经过投影坐标校正的图像删除相似特征点部分,并与第一幅图像采集单元采集的原始视频图像合并成一幅完整的超高清视频图像;
⑨图像处理单元将合成后的超高清视频图像序列进行视频压缩编码,形成一路超高清视频图像输出。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012105504138A CN103095990A (zh) | 2012-12-18 | 2012-12-18 | 具有分布式图像采集单元的超高清摄像机 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2012105504138A CN103095990A (zh) | 2012-12-18 | 2012-12-18 | 具有分布式图像采集单元的超高清摄像机 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN103095990A true CN103095990A (zh) | 2013-05-08 |
Family
ID=48208084
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2012105504138A Pending CN103095990A (zh) | 2012-12-18 | 2012-12-18 | 具有分布式图像采集单元的超高清摄像机 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103095990A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104023210A (zh) * | 2014-06-17 | 2014-09-03 | 防城港力申安防科技有限公司 | 高清一体化监控*** |
CN104159026A (zh) * | 2014-08-07 | 2014-11-19 | 厦门亿联网络技术股份有限公司 | 一种实现360度全景视频的*** |
CN104717465A (zh) * | 2014-12-23 | 2015-06-17 | 北京亿羽舜海科技有限公司 | 多个ip摄像头的广角视频监控设备及视频监控方法 |
CN105450945A (zh) * | 2015-11-13 | 2016-03-30 | 深圳大学 | 一种视频全景生成方法及并行计算*** |
CN105578199A (zh) * | 2016-02-22 | 2016-05-11 | 北京佰才邦技术有限公司 | 虚拟现实全景多媒体处理***、方法及客户端设备 |
CN106204436A (zh) * | 2016-06-27 | 2016-12-07 | 上海杰图天下网络科技有限公司 | 一种超高清电子图像数字化采集拼接方法 |
CN113431158A (zh) * | 2021-05-31 | 2021-09-24 | 陕西四季春清洁热源股份有限公司 | 一种中深层地埋管地热能设备间干式无污染排水*** |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101651841A (zh) * | 2008-08-13 | 2010-02-17 | 华为技术有限公司 | 一种立体视频通讯的实现方法、***和设备 |
CN101770643A (zh) * | 2008-12-26 | 2010-07-07 | 富士胶片株式会社 | 图像处理装置、图像处理方法以及图像处理程序 |
CN102081796A (zh) * | 2009-11-26 | 2011-06-01 | 日电(中国)有限公司 | 图像拼接方法和装置 |
CN102183525A (zh) * | 2011-01-20 | 2011-09-14 | 单宝华 | 基于ccd阵列摄像技术的桥梁表观状态自动检测装置及其方法 |
-
2012
- 2012-12-18 CN CN2012105504138A patent/CN103095990A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101651841A (zh) * | 2008-08-13 | 2010-02-17 | 华为技术有限公司 | 一种立体视频通讯的实现方法、***和设备 |
CN101770643A (zh) * | 2008-12-26 | 2010-07-07 | 富士胶片株式会社 | 图像处理装置、图像处理方法以及图像处理程序 |
CN102081796A (zh) * | 2009-11-26 | 2011-06-01 | 日电(中国)有限公司 | 图像拼接方法和装置 |
CN102183525A (zh) * | 2011-01-20 | 2011-09-14 | 单宝华 | 基于ccd阵列摄像技术的桥梁表观状态自动检测装置及其方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104023210A (zh) * | 2014-06-17 | 2014-09-03 | 防城港力申安防科技有限公司 | 高清一体化监控*** |
CN104159026A (zh) * | 2014-08-07 | 2014-11-19 | 厦门亿联网络技术股份有限公司 | 一种实现360度全景视频的*** |
CN104717465A (zh) * | 2014-12-23 | 2015-06-17 | 北京亿羽舜海科技有限公司 | 多个ip摄像头的广角视频监控设备及视频监控方法 |
CN104717465B (zh) * | 2014-12-23 | 2023-10-03 | 北京亿羽舜海科技有限公司 | 多个ip摄像头的广角视频监控设备及视频监控方法 |
CN105450945A (zh) * | 2015-11-13 | 2016-03-30 | 深圳大学 | 一种视频全景生成方法及并行计算*** |
CN105578199A (zh) * | 2016-02-22 | 2016-05-11 | 北京佰才邦技术有限公司 | 虚拟现实全景多媒体处理***、方法及客户端设备 |
CN106204436A (zh) * | 2016-06-27 | 2016-12-07 | 上海杰图天下网络科技有限公司 | 一种超高清电子图像数字化采集拼接方法 |
CN113431158A (zh) * | 2021-05-31 | 2021-09-24 | 陕西四季春清洁热源股份有限公司 | 一种中深层地埋管地热能设备间干式无污染排水*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103095990A (zh) | 具有分布式图像采集单元的超高清摄像机 | |
Jia et al. | LLVIP: A visible-infrared paired dataset for low-light vision | |
CN108769578B (zh) | 一种基于多路摄像头的实时全景成像***及方法 | |
CN102857739B (zh) | 分布式全景监控***及其方法 | |
US11790504B2 (en) | Monitoring method and apparatus | |
KR101937272B1 (ko) | 복수 개의 촬영영상으로부터 이벤트를 검출하는 장치 및 방법 | |
US11037308B2 (en) | Intelligent method for viewing surveillance videos with improved efficiency | |
US20130107072A1 (en) | Multi-resolution ip camera | |
CN104270570A (zh) | 双目摄像机及其图像处理方法 | |
CN101312526A (zh) | 全景联动视频监控装置及其全景图像的拼接方法 | |
CN102256111A (zh) | 多通道全景视频实时监控***及方法 | |
CN103329541A (zh) | 摄像机成像***和方法 | |
CN202841372U (zh) | 分布式全景监控*** | |
WO2005117448A1 (ja) | 移動物体検出装置および移動物体検出方法 | |
CN106709894B (zh) | 一种图像实时拼接方法及*** | |
CN103281519A (zh) | 一种新型的道路交通监控摄像机*** | |
JP3466169B2 (ja) | 道路や周辺施設等の管理システム | |
CN106803936A (zh) | 基于内存编码机制的视频抓拍方法及装置 | |
CN116916049B (zh) | 一种基于云计算技术的视频数据在线采集与存储*** | |
KR101977635B1 (ko) | 다중 카메라 기반 시설물 주변 항공뷰 형태의 전방위 비디오 합성 및 이동체 검출 방법 및 장치 | |
Iizuka | Image sensor communication—Current status and future perspectives | |
CN103188442A (zh) | 用于图像稳定的***和方法及使用该方法的变焦相机 | |
CN103002249A (zh) | 基于图像拼接的sdi全景摄像*** | |
CN104580895A (zh) | 一种具有摄照同步工作能力的机载成像*** | |
US11044399B2 (en) | Video surveillance system |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C02 | Deemed withdrawal of patent application after publication (patent law 2001) | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20130508 |