CN113205020A - 一种摄像机及基于摄像机人脸识别的人脸信息收集方法 - Google Patents
一种摄像机及基于摄像机人脸识别的人脸信息收集方法 Download PDFInfo
- Publication number
- CN113205020A CN113205020A CN202110438119.7A CN202110438119A CN113205020A CN 113205020 A CN113205020 A CN 113205020A CN 202110438119 A CN202110438119 A CN 202110438119A CN 113205020 A CN113205020 A CN 113205020A
- Authority
- CN
- China
- Prior art keywords
- face
- camera
- image
- information
- video data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 44
- 238000012544 monitoring process Methods 0.000 description 14
- 238000001514 detection method Methods 0.000 description 6
- 238000013473 artificial intelligence Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 230000008859 change Effects 0.000 description 1
- 238000004140 cleaning Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 238000012163 sequencing technique Methods 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
- G06V40/166—Detection; Localisation; Normalisation using acquisition arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/0002—Inspection of images, e.g. flaw detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/94—Hardware or software architectures specially adapted for image or video understanding
- G06V10/95—Hardware or software architectures specially adapted for image or video understanding structured as a network, e.g. client-server architectures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/172—Classification, e.g. identification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30168—Image quality inspection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30196—Human being; Person
- G06T2207/30201—Face
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Health & Medical Sciences (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Software Systems (AREA)
- Quality & Reliability (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Abstract
一种摄像机及基于摄像机人脸识别的人脸信息收集方法,其方法为:主控制器采集视频数据并缓存至主存储器,主控制器将主存储器中的分段视频数据传输至图像运算芯片,主控制器接收图像运算芯片解析的分段视频数据中的人脸信息及人脸图像的质量参数,主控制器根据人脸信息及人脸图像的质量参数达到预设指标抓拍人脸照片并存储及上传,本发明通过添加图像运算芯片承担简单但大量的人脸识别工作,并使用通用处理器根据人脸识别的结果进行人脸照片的获取和上传,能够取代原先直接上传原始视频码流供服务器进行人脸识别造成的带宽浪费,以及服务器的硬件资源浪费,适合同时监控和跟踪更多的人脸提升监控效果。
Description
本发明是2017年07月10日所提出的申请号为201710557708.0、发明名称为《一种基于摄像机人脸识别的人脸信息收集方法》的发明专利申请的分案申请。
技术领域
本发明涉及一种人脸信息的收集方法,具体涉及一种摄像机及基于摄像机人脸识别的人脸信息收集方法。
背景技术
当今社会,出于安全方面的考虑,视频监控设备越来越多地应用到平安城市监控,以及小区,工厂等各种场所的监控中。监控过程多数情况下是针对人的识别,而随着人脸识别技术的成熟,使得由人工智能来自动消化监控视频数据中的人脸成为可能。随着监控设备越来越普及,并且人脸识别对视频质量的要求较高,相应的监控数据也越来越大。
目前,在监控***中运用人脸识别,绝大部分情况下,采用的方式是摄像机把视频数据发给后台服务器,后台服务器再依赖其强大的硬件、复杂的软件做智能分析。如此监控网络的数据吞吐量惊人;在摄像机越来越多的条件下,后台服务器的存储能力和运算能力也备受考验,使得成本极大提升;此外监控环境复杂多样,摄像机的参数设置并不能保证实时完好,会导致无法识别和收集人像的情况发生,而使用远端服务器解析图像判断图像质量并返回摄像机参数修改要求,摄像机再调整拍照,会对硬件开销造成极大的压力,时间上也来不及。
近年来算法的改进和硬件性能的提升为摄像机识别人脸提供了可能,传统上采用cortex或基于X86的atom等常见移动端架构的通用处理器并不适用于进行视频处理和硬件管理的同时再进行人工智能所需的大规模简单运算。
发明内容
为了克服现有技术监控***网络开销大,硬件开销分布严重不均的情况,本发明的目的旨在提供一种基于摄像机人脸识别的人脸信息收集方法。
本发明提供的方法如下:
一种基于摄像机人脸识别的人脸信息收集方法,其方法为:摄像机采集视频数据的过程中,同时对每一帧视频数据进行人脸信息识别获得当前帧内所有人物的人脸图像和对应的人脸图像的质量参数,最后确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物,并且对该人物抓拍人脸照片。
所述对每一帧视频数据进行人脸信息识别获得当前帧内所有人物的人脸图像和对应的人脸图像的质量参数,具体为:所述摄像机根据视频数据的其中一帧中的亮度分布拾取人脸信息,之后根据人脸信息中的人脸图像的亮度、清晰度及正脸下人脸特征匹配程度确定人脸图像的质量参数。
所述摄像机根据视频数据的其中一帧中的亮度分布拾取人脸信息之后还包括:所述摄像机根据当前人脸信息与邻近若干帧中拾取人脸信息对比情况判断当前人脸图像是否为新人,如果确定为新人,为当前人脸图像分配人脸ID,反之,将当前人脸图像与已有的人脸ID建立对应关系。
所述确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物,并且对该人物抓拍人脸照片,具体为:当确定为新人且人脸图像的质量参数大于或等于预设阈值时,所述摄像机抓拍人脸照片并存储。
对每一帧视频数据进行人脸信息识别获得当前帧内所有人物的人脸图像和对应的人脸图像的质量参数之后,该方法还包括:当确定为新人但人脸图像的质量参数小于预设阈值时,所述摄像机根据人脸信息调整摄像机参数,同时丢弃人脸图像并继续判断后续视频数据产生的人脸图像的质量参数直至人脸图像的质量参数大于或等于预设阈值。
确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物,并且对该人物抓拍人脸照片,具体为:当确定为原有人脸且人脸图像的质量参数大于或等于预设阈值时,所述摄像机判断人脸图像的质量参数或人脸正脸程度大于原有人脸照片,最后抓拍人脸照片并替换原有人脸照片。
对每一帧视频数据进行人脸信息识别获得当前帧内所有人物的人脸图像和对应的人脸图像的质量参数之后,该方法还包括:当确定为原有人脸但人脸图像的质量参数小于预设阈值时,所述摄像机根据人脸信息调整摄像机参数,同时丢弃人脸图像并继续判断后续视频数据产生的人脸图像的质量参数直至人脸图像的质量参数大于或等于预设阈值。
人脸图像的质量参数大于或等于预设阈值时后,该方法还包括:所述摄像机记录人脸图像的质量参数大于或等于阈值时的曝光参数,之后判断摄像机在预设时间内未检测到人脸信息,则根据最近一次人脸图像参数大于或等于预设阈值时记录的曝光参数调整摄像机。
确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物,并且对该人物抓拍人脸照片同时,该方法还包括:摄像机检测到存储容量少于预警值,之后删除部分人脸照片,具体为:摄像机根据人脸ID对应的人脸照片的存取状态、上传状态和跟踪状态确定人脸ID的优先级并做实时调整,同时根据优先级排序删除人脸ID对应的人脸照片并注销该人脸ID,最后检测到存储容量高于预设阈值停止删除工作。
根据人脸信息及人脸图像的质量参数达到预设指标抓拍人脸照片并上传,具体为,摄像机根据远端服务器需求选择人脸照片的抓拍方式。
根据权利要求1所述的一种基于摄像机人脸识别的人脸信息收集方法,根据人脸信息及人脸图像的质量参数达到预设指标抓拍人脸照片并上传,具体为,摄像机根据远端服务器需求选择人脸照片的上传策略。
与现有技术相比,本发明通过添加图像运算芯片承担简单但大量的人脸识别工作,并使用通用处理器根据人脸识别的结果进行人脸照片的获取和上传,取代原先直接上传原始视频码流供服务器进行人脸识别造成的带宽浪费,以及服务器的硬件资源浪费,适合同时监控和跟踪更多的人脸提升监控效果。
附图说明
图1为一种基于摄像机人脸识别的人脸信息收集方法的流程图;
图2为一种基于摄像机人脸识别的人脸信息收集方法的一种具体实施方式的流程图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步详细说明。应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
本发明实施例提供一种基于摄像机的人脸识别方法,步骤包括:摄像机采集视频数据,在采集数据的同时对每一帧视频数据进行人脸信息识别以获取人脸人脸图像的人脸信息和人脸图像的质量参数,确定人脸图像达到预设指标,对人脸达到预设指标的人脸进行拍照。
为具体实现该方法,所述摄像机内部包括了用于控制摄像机操作、图像编解码及通信等工作的主控制器,以及对应的主存储器,还包括用于使用人脸识别算法进行人脸图像识别的图像运算芯片及其对应的存储器等外接部件,摄像机还可以加设外存,用于存储抓拍所得的照片,降低主存储器的存储压力。在此基础之上该方法的具体步骤包括:
步骤100:主控制器采集传感器的视频数据并缓存至主存储器。
步骤200:主控制器将分段视频数据传输至图像运算芯片。
步骤300:图像运算芯片分析分段视频数据中的人脸,识别人脸并将人脸信息返回给主控制器。
步骤301:图像运算芯片根据收到的分段视频数据中某一帧当中人脸图像的亮度分布,拾取人脸信息。
步骤302:图像运算芯片根据当前检测的人脸信息与向前邻近若干帧中检测到的人脸图像的人脸信息进行比对,判断二者相似度,并根据相似度和设定的阈值判断当前被检测的人脸是否为新人,根据判断结果将已经出现过的人脸图像的人脸信息与相应人脸ID相对应,或者为新人设置新的人脸ID。
步骤303;图像运算芯片根据当前人脸图像的亮度、清晰度以及与正脸下人脸特征的匹配程度给出当前人脸图像的质量参数。
步骤304:将人脸图像及质量参数信息传输至主控制器。
步骤400:主控制器根据人脸信息调整环境外设。
步骤401:主控制器根据人脸图像的质量参数及当前人脸的亮度判断是否需要调整曝光参数及需要的调整步长。
步骤402:人脸图像的质量参数达到设定阈值时,主控制器记录一段时间内的曝光参数。
步骤403:当检测不到人脸时,主控制器使用记录的曝光参数设置摄像机。
步骤500:主控制器抓拍人脸并存储在主存储器或外存中。
步骤501:根据人脸ID,当收到新人人脸图像的质量参数高于预设阈值时,主控制器控制摄像机抓怕人脸照片并存储。
具体的,主控制器根据设定,控制摄像机抓拍人脸图、人体图或原图,或三者的自由组合。
步骤502:根据人脸ID,当收到已保存人脸照片的人脸图像信息时,主控制器判断当前人脸图像并非正脸时,当前人脸图像与已经保存过的人脸照片的正脸面积相比更大,且当前人脸图像的质量参数高于阈值,或者当前人脸图像的质量参数高于已保存人脸照片则抓怕人脸照片并存储替换原有人脸照片并记录人脸照片的质量参数。
步骤503:根据人脸ID,当收到已保存人脸照片的人脸图像信息时,主控制器判断当已保存人脸照片为正脸时,当前人脸图像的质量参数大于已保存人脸则抓拍人脸照片并存储替换原有人脸照片并记录人脸照片的质量参数。
步骤600:上传并清理人脸照片。
步骤601:当人脸照片质量超过设定值时,主控制器上传人脸照片。
具体的,主控制器优先上传照片质量参数达到上传标准的照片并且与当前时间间隔更短的人脸照片,及所有人脸照片中质量参数更高的人脸照片。
具体的,主控制器根据设定,控制摄像机进行实时上传、人离开后上传和间隔上传三种上传方式,其中实时上传是在人脸照片产生变动后马上上传人脸照片,人离开后上传是当人离开检测区域后上传最优照片,间隔上传是人脸ID对应人脸图像在检测区域中出现时,定期上传最优照片。
步骤602:当主存储器或外存的使用容量达到设定值时,主控制器根据人脸ID对应人脸照片当前存取情况,当前上传情况,当前跟踪情况及最后跟踪时间为每个人脸ID设置优先级。
具体的,当前正在存取的人脸照片具有最高的优先级,当前尚未上传的人脸照片获得较高优先级,当前正在跟踪的人脸照片获得较高优先级,最后跟踪时间与当前时间间隔更长的人脸照片获得较低优先级。
步骤603:根据人脸ID的优先级,优先删除和覆盖优先级更低的人脸照片,并注销被覆盖人脸照片对应的人脸ID。
实施例一:
摄像机对所在检测区域进行录像,并存储在内存中,ARM处理器将分段视频数据通过BT1120标准视频数据接口传输至所述FPGA运算芯片。
FPGA运算芯片将分段视频数据缓存在FPGA运算芯片的内存中并对分段数据逐帧分析,拾取图像中人脸区域的亮度分布,抓取人脸图像并记录人脸信息。FPGA运算芯片使用当前记录的人脸信息与最近若干帧记录的人脸信息对比,判断该人脸是否与在先记录的人脸相一致,如果该人脸被判断是新人人脸则分配新的人脸ID,如果该人脸被判断是原有人脸,则将当前记录的人脸信息与原有人脸对应的人脸ID相关联。
FPGA运算芯片根据当前人脸信息的亮度、清晰度以及正脸下人脸特征的匹配程度给出当前人脸图像的质量参数并将质量参数和人脸信息传输至ARM处理器。
ARM处理器根据当前人脸信息的人脸亮度和质量参数判断是否需要调整曝光参数及其它摄像机参数,并确认调整的步长,控制摄像机完成拍摄参数的修改,同时监测FPGA运算芯片传输的后续人脸图像中的人脸信息,直至亮度足够,质量参数达到标准。
在人脸图像质量参数达到预设阈值的前提下,ARM处理器抓拍人脸照片并存储在内存中。
具体的,ARM处理器将缓存中的人脸图像提取作为人脸照片,同时添加对该文件的说明信息,记录拍摄时间和人脸ID。
ARM处理器将内存中存储的人脸照片上传至远端服务器。
该方案的优势在于:使用人脸ID判断人脸图像的获取情况,便于精确的控制和记录人脸信息的收集状况,并且无需获取并上传大量的图片,大大的节省了硬件的开销。
根据人脸照片的人脸信息和质量参数获取照片拍摄情况,实时调整摄像机参数,有利于拍出质量更高的照片。
实施例二:
在实施例一的基础之上,FPGA运算芯片检测不到任何人脸时,ARM处理器回溯最近拍出达到标准的人脸照片是,调整的曝光参数,用于设定摄像机。
该方案便于在检测检测区域下没有人脸时将摄像机的曝光状态设置在最合理的状态下,便于再次检测到人脸后更快捷的调整到合适的曝光位置。
实施例三:
在实施例一的基础之上,ARM控制器收到人脸图像信息后判断人脸ID,当人脸该人脸ID已抓拍并存储照片,则对应存储的人脸照片的质量参数以及正脸面积和当前人脸图像信息中包含的质量参数及人脸面积,若质量参数更高或正脸面积更大,则再次抓拍人脸照片并替换原先的人脸照片。
若存储的人脸照片为正脸则仅对比该人脸照片的质量参数及当前人脸图像的质量参数。若当前人脸图像的质量参数高于已存储人脸照片的质量参数,则抓拍并存储新的人脸照片,替换老的人脸照片。
平均而言正脸面积较大的照片,人脸图像的质量参数也相应较高,所以该方案适合筛选出更能辨识出人员的图像及照片。该方案便于快捷的对比和得到质量更高的人脸照片,便于保存质量更优的人脸照片。
实施例四:
在实施例三的基础之上,ARM处理器还接收来自于远端服务器的指令,根据远端服务器的需求调整抓怕规则。
具体的,包括但不限于如下图片样式:
当前场景原图,跟踪人脸所属人体图或跟踪人脸的人脸图或三者的任意组合;
还包括但不限于如下抓拍策略:
当人脸图像的质量参数达到阈值后,马上抓拍并上传;
当人脸所属人员离开检测区域后,上传该人脸对应的最优人脸照片;
当人脸所属人员在检测区域出现后定期传输最优人脸图片。
该方案使得摄像机更适应日常的监控任务,在没有视频资料作为存档的情况下保留更合理的资料。
实施例五:
在实施例一的基础之上,加设TF卡或ROM存储器作为外部存储与ARM处理器连接,ARM处理器将人脸照片存储在TF卡或ROM存储器中。
该方案优化了人脸照片的存储环境,防止上传不及时,而造成照片没有上传被丢弃或,新抓拍的照片无法存储的情况。
实施例六:
在实施例一或五的基础之上,当ARM处理器监测到内存或外存的存储空间小于预设阈值,对存储的人脸照片进行优先级排序。
具体的,根据人脸ID,判断人脸ID对应的人脸照片是否正在存取,为正在存取的人脸照片设置高优先级,判断人脸ID对应人脸照片的上传情况,为已经上传的人脸照片设置低优先级,判断人脸ID对应的人脸图像跟踪情况,为正在跟踪的人脸图像对应的人脸ID设置高优先级,根据最后跟踪时间从近到远顺次设置从高到低的优先级。
ARM处理器根据实时变化的优先级信息,删除内存或外存中优先级较低的人脸ID对应的人脸照片,并注销该人脸ID。当内存或外存的存储空间高于一个预设阈值,停止删除工作。
该方案在网络状况极端恶劣的情况下,保证了高价值的人脸照片更有效的保存同时不妨碍监控工作的正常进行。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应该以权利要求的保护范围为准。
Claims (20)
1.一种摄像机,其特征在于,包括传感器、主控制器和图像运算芯片,其中,
所述传感器用于,采集视频数据;
所述图像运算芯片用于,对每一帧视频数据进行人脸信息识别以获得当前帧内所有人物的人脸图像的人脸信息和对应的人脸图像的质量参数,并向所述主控制器传输所述人脸信息和所述质量参数;
所述主控制器用于,确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物时,控制所述摄像机对该人物抓拍人脸照片;
所述主控制器还用于,当所述人脸照片的质量超过设定值时,上传所述人脸照片。
2.根据权利要求1所述的摄像机,其特征在于:所述图像运算芯片具体用于:
根据视频数据的其中一帧中的亮度分布拾取人脸信息,之后根据人脸信息中的人脸图像的亮度、清晰度及正脸下人脸特征匹配程度确定人脸图像的质量参数。
3.根据权利要求2所述的摄像机,其特征在于:所述主控制器还用于:
在所述图像运算芯片根据视频数据的其中一帧中的亮度分布拾取人脸信息之后,根据当前人脸信息与邻近若干帧中拾取人脸信息对比情况判断当前人脸图像是否为新人,如果确定为新人,为当前人脸图像分配人脸ID,反之,将当前人脸图像与已有的人脸ID建立对应关系。
4.根据权利要求3所述的摄像机,其特征在于:所述主控制器具体用于:
当确定为新人且人脸图像的质量参数大于或等于预设阈值时,控制所述摄像机抓拍人脸照片并存储。
5.根据权利要求3所述的摄像机,其特征在于:所述图像运算芯片对每一帧视频数据进行人脸信息识别获得当前帧内所有人物的人脸图像和对应的人脸图像的质量参数之后,所述主控制器用于,当确定为新人但人脸图像的质量参数小于预设阈值时,根据人脸信息调整摄像机参数,同时丢弃人脸图像并继续判断后续视频数据产生的人脸图像的质量参数直至人脸图像的质量参数大于或等于预设阈值。
6.根据权利要求3所述的摄像机,其特征在于:所述主控制器具体用于:
当确定为原有人脸且人脸图像的质量参数大于或等于预设阈值时,判断人脸图像的质量参数或人脸正脸程度大于原有人脸照片,最后控制所述摄像机抓拍人脸照片并替换原有人脸照片。
7.根据权利要求3所述的摄像机,其特征在于:
所述图像运算芯片对每一帧视频数据进行人脸信息识别获得当前帧内所有人物的人脸图像和对应的人脸图像的质量参数之后,所述主控制器还用于:当确定为原有人脸但人脸图像的质量参数小于预设阈值时,根据人脸信息调整摄像机参数,同时丢弃人脸图像并继续判断后续视频数据产生的人脸图像的质量参数直至人脸图像的质量参数大于或等于预设阈值。
8.根据权利要求4或6所述的摄像机,其特征在于:所述主控制器还用于:
在人脸图像的质量参数大于或等于预设阈值时后,记录人脸图像的质量参数大于或等于阈值时的曝光参数,之后判断摄像机在预设时间内未检测到人脸信息,则根据最近一次人脸图像参数大于或等于预设阈值时记录的曝光参数调整摄像机。
9.根据权利要求3所述的摄像机,其特征在于:所述主控制器确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物,并且对该人物抓拍人脸照片同时,所述主控制器还用于检测到存储容量少于预警值,之后删除部分人脸照片,具体为:所述主控制器根据人脸ID对应的人脸照片的存取状态、上传状态和跟踪状态确定人脸ID的优先级并做实时调整,同时根据优先级排序删除人脸ID对应的人脸照片并注销该人脸ID,最后检测到存储容量高于预设阈值停止删除工作。
10.根据权利要求1所述的摄像机,其特征在于:所述主控制器根据人脸信息及人脸图像的质量参数达到预设指标抓拍人脸照片并上传,具体为,所述主控制器根据远端服务器需求选择人脸照片的上传策略。
11.一种基于摄像机人脸识别的人脸信息收集方法,其特征在于,包括:
获取视频数据;
对每一帧视频数据进行人脸信息识别以获得当前帧内所有人物的人脸图像的人脸信息和对应的人脸图像的质量参数;
确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物时,控制所述摄像机对该人物抓拍人脸照片;
当所述人脸照片的质量超过设定值时,上传所述人脸照片。
12.根据权利要求11所述的方法,其特征在于:对每一帧视频数据进行人脸信息识别以获得当前帧内所有人物的人脸图像的人脸信息和对应的人脸图像的质量参数,包括:
根据视频数据的其中一帧中的亮度分布拾取人脸信息,之后根据人脸信息中的人脸图像的亮度、清晰度及正脸下人脸特征匹配程度确定人脸图像的质量参数。
13.根据权利要求12所述的方法,其特征在于:根据视频数据的其中一帧中的亮度分布拾取人脸信息之后,还包括:
根据当前人脸信息与邻近若干帧中拾取人脸信息对比情况判断当前人脸图像是否为新人,如果确定为新人,为当前人脸图像分配人脸ID,反之,将当前人脸图像与已有的人脸ID建立对应关系。
14.根据权利要求13所述的方法,其特征在于:确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物时,控制所述摄像机对该人物抓拍人脸照片,包括:
当确定为新人且人脸图像的质量参数大于或等于预设阈值时,控制所述摄像机抓拍人脸照片并存储。
15.根据权利要求13所述的方法,其特征在于:对每一帧视频数据进行人脸信息识别以获得当前帧内所有人物的人脸图像的人脸信息和对应的人脸图像的质量参数之后,还包括:
当确定为新人但人脸图像的质量参数小于预设阈值时,根据人脸信息调整摄像机参数,同时丢弃人脸图像并继续判断后续视频数据产生的人脸图像的质量参数直至人脸图像的质量参数大于或等于预设阈值。
16.根据权利要求13所述的方法,其特征在于:确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物时,控制所述摄像机对该人物抓拍人脸照片,包括:
当确定为原有人脸且人脸图像的质量参数大于或等于预设阈值时,判断人脸图像的质量参数或人脸正脸程度大于原有人脸照片,最后控制所述摄像机抓拍人脸照片并替换原有人脸照片。
17.根据权利要求13所述的方法,其特征在于:对每一帧视频数据进行人脸信息识别以获得当前帧内所有人物的人脸图像的人脸信息和对应的人脸图像的质量参数之后,还包括:
当确定为原有人脸但人脸图像的质量参数小于预设阈值时,根据人脸信息调整摄像机参数,同时丢弃人脸图像并继续判断后续视频数据产生的人脸图像的质量参数直至人脸图像的质量参数大于或等于预设阈值。
18.根据权利要求14或16所述的方法,其特征在于:在人脸图像的质量参数大于或等于预设阈值时后,所述方法还包括:
记录人脸图像的质量参数大于或等于阈值时的曝光参数,之后判断摄像机在预设时间内未检测到人脸信息,则根据最近一次人脸图像参数大于或等于预设阈值时记录的曝光参数调整摄像机。
19.根据权利要求13所述的方法,其特征在于:确定所述当前帧内所有人物中人脸图像的人脸信息及质量参数达到预设标准的人物,并且对该人物抓拍人脸照片同时,所述方法还包括:
检测到存储容量少于预警值,之后删除部分人脸照片,具体为:根据人脸ID对应的人脸照片的存取状态、上传状态和跟踪状态确定人脸ID的优先级并做实时调整,同时根据优先级排序删除人脸ID对应的人脸照片并注销该人脸ID,最后检测到存储容量高于预设阈值停止删除工作。
20.根据权利要求11所述的方法,其特征在于:根据人脸信息及人脸图像的质量参数达到预设指标抓拍人脸照片并上传,具体为,根据远端服务器需求选择人脸照片的上传策略。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110438119.7A CN113205020A (zh) | 2017-07-10 | 2017-07-10 | 一种摄像机及基于摄像机人脸识别的人脸信息收集方法 |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710557708.0A CN107346426B (zh) | 2017-07-10 | 2017-07-10 | 一种基于摄像机人脸识别的人脸信息收集方法 |
CN202110438119.7A CN113205020A (zh) | 2017-07-10 | 2017-07-10 | 一种摄像机及基于摄像机人脸识别的人脸信息收集方法 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710557708.0A Division CN107346426B (zh) | 2017-07-10 | 2017-07-10 | 一种基于摄像机人脸识别的人脸信息收集方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113205020A true CN113205020A (zh) | 2021-08-03 |
Family
ID=60256883
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710557708.0A Active CN107346426B (zh) | 2017-07-10 | 2017-07-10 | 一种基于摄像机人脸识别的人脸信息收集方法 |
CN202110438119.7A Pending CN113205020A (zh) | 2017-07-10 | 2017-07-10 | 一种摄像机及基于摄像机人脸识别的人脸信息收集方法 |
CN202110438587.4A Pending CN113205021A (zh) | 2017-07-10 | 2017-07-10 | 一种摄像机及基于摄像机人脸识别的人脸信息收集方法 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710557708.0A Active CN107346426B (zh) | 2017-07-10 | 2017-07-10 | 一种基于摄像机人脸识别的人脸信息收集方法 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110438587.4A Pending CN113205021A (zh) | 2017-07-10 | 2017-07-10 | 一种摄像机及基于摄像机人脸识别的人脸信息收集方法 |
Country Status (1)
Country | Link |
---|---|
CN (3) | CN107346426B (zh) |
Families Citing this family (28)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107948472A (zh) * | 2017-11-29 | 2018-04-20 | 北京星云环影科技有限责任公司 | 智能监控摄像头及安防*** |
CN108875512B (zh) * | 2017-12-05 | 2021-04-23 | 北京旷视科技有限公司 | 人脸识别方法、装置、***、存储介质和电子设备 |
DE102018201909A1 (de) * | 2018-02-07 | 2019-08-08 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Objekterkennung |
CN108345861A (zh) * | 2018-06-01 | 2018-07-31 | 北京晨赢科技有限公司 | 一种基于人脸识别算法比对数据的识别设备及其*** |
CN112468717B (zh) * | 2018-06-20 | 2022-04-15 | 成都市喜爱科技有限公司 | 一种视频拍摄及播放的方法及*** |
CN109086670B (zh) * | 2018-07-03 | 2019-10-11 | 百度在线网络技术(北京)有限公司 | 人脸识别方法、装置及设备 |
CN108513110A (zh) * | 2018-07-05 | 2018-09-07 | 郑永春 | 人脸识别监控摄像头 |
CN108540707A (zh) * | 2018-07-05 | 2018-09-14 | 郑永春 | 人脸识别执法仪 |
CN110719398B (zh) * | 2018-07-12 | 2021-07-20 | 浙江宇视科技有限公司 | 一种人脸抓拍对象确定方法及装置 |
WO2020056545A1 (zh) * | 2018-09-17 | 2020-03-26 | 深圳鲲云信息科技有限公司 | 采用fpga硬件实现ai的方法及相关产品 |
CN109376743A (zh) * | 2018-09-28 | 2019-02-22 | 北京旷视科技有限公司 | 图像处理方法、装置、图像识别设备及储存介质 |
CN109376645B (zh) * | 2018-10-18 | 2021-03-26 | 深圳英飞拓科技股份有限公司 | 一种人脸图像数据优选方法、装置及终端设备 |
CN109508648A (zh) * | 2018-10-22 | 2019-03-22 | 成都臻识科技发展有限公司 | 一种人脸抓拍方法及设备 |
CN111161206A (zh) * | 2018-11-07 | 2020-05-15 | 杭州海康威视数字技术股份有限公司 | 一种图像抓拍方法、监控相机及监控*** |
CN109672858A (zh) * | 2018-11-23 | 2019-04-23 | 深圳奥比中光科技有限公司 | 3d人脸识别监控*** |
CN109636960A (zh) * | 2018-11-23 | 2019-04-16 | 深圳奥比中光科技有限公司 | 3d人脸识别智能门锁及3d人脸解锁方法 |
CN109558839A (zh) * | 2018-11-29 | 2019-04-02 | 徐州立讯信息科技有限公司 | 自适应人脸识别方法和实现该方法的设备及*** |
CN109376716A (zh) * | 2018-12-13 | 2019-02-22 | 深圳市信义科技有限公司 | 一种基于连续图像的人脸识别的优选方法 |
US11627248B2 (en) | 2019-02-03 | 2023-04-11 | Chengdu Sioeye Technology Co., Ltd. | Shooting method for shooting device, and electronic equipment |
CN110232323A (zh) * | 2019-05-13 | 2019-09-13 | 特斯联(北京)科技有限公司 | 一种用于人群的多人脸并行快速识别方法及其装置 |
CN110263680B (zh) * | 2019-06-03 | 2022-01-28 | 北京旷视科技有限公司 | 图像处理方法、装置和***及存储介质 |
CN110321378A (zh) * | 2019-06-03 | 2019-10-11 | 梁勇 | 一种移动监控图像识别***及方法 |
CN110276314A (zh) * | 2019-06-26 | 2019-09-24 | 苏州万店掌网络科技有限公司 | 人脸识别方法及人脸识别摄像机 |
CN111652139A (zh) * | 2020-06-03 | 2020-09-11 | 浙江大华技术股份有限公司 | 人脸抓拍方法、抓拍装置及存储装置 |
CN111914781B (zh) * | 2020-08-10 | 2024-03-19 | 杭州海康威视数字技术股份有限公司 | 一种人脸图像处理的方法及装置 |
CN112437278A (zh) * | 2020-11-23 | 2021-03-02 | 杭州海康威视数字技术股份有限公司 | 一种协同监控***、装置及方法 |
CN112637567B (zh) * | 2020-12-24 | 2021-10-26 | 中标慧安信息技术股份有限公司 | 基于多节点边缘计算设备的云端数据上传方法和*** |
CN113033521B (zh) * | 2021-05-25 | 2022-05-10 | 南京甄视智能科技有限公司 | 基于目标分析的周界动态预警方法与*** |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6594375B1 (en) * | 1998-09-28 | 2003-07-15 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium |
CN103942525A (zh) * | 2013-12-27 | 2014-07-23 | 高新兴科技集团股份有限公司 | 一种基于视频序列的实时人脸优选方法 |
CN104778446A (zh) * | 2015-03-19 | 2015-07-15 | 南京邮电大学 | 一种图像质量评价与人脸识别效率关系模型的构建方法 |
CN105243373A (zh) * | 2015-10-27 | 2016-01-13 | 北京奇虎科技有限公司 | 人脸图像滤重抓拍方法、服务器、智能监控设备及*** |
CN105868735A (zh) * | 2016-04-25 | 2016-08-17 | 南京大学 | 一种跟踪人脸的预处理方法及基于视频的智慧健康监视*** |
CN105930822A (zh) * | 2016-05-11 | 2016-09-07 | 北京格灵深瞳信息技术有限公司 | 一种人脸抓拍方法及*** |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9864900B2 (en) * | 2014-06-26 | 2018-01-09 | Cisco Technology, Inc. | Entropy-reducing low pass filter for face-detection |
US10007849B2 (en) * | 2015-05-29 | 2018-06-26 | Accenture Global Solutions Limited | Predicting external events from digital video content |
-
2017
- 2017-07-10 CN CN201710557708.0A patent/CN107346426B/zh active Active
- 2017-07-10 CN CN202110438119.7A patent/CN113205020A/zh active Pending
- 2017-07-10 CN CN202110438587.4A patent/CN113205021A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6594375B1 (en) * | 1998-09-28 | 2003-07-15 | Canon Kabushiki Kaisha | Image processing apparatus, image processing method, and storage medium |
CN103942525A (zh) * | 2013-12-27 | 2014-07-23 | 高新兴科技集团股份有限公司 | 一种基于视频序列的实时人脸优选方法 |
CN104778446A (zh) * | 2015-03-19 | 2015-07-15 | 南京邮电大学 | 一种图像质量评价与人脸识别效率关系模型的构建方法 |
CN105243373A (zh) * | 2015-10-27 | 2016-01-13 | 北京奇虎科技有限公司 | 人脸图像滤重抓拍方法、服务器、智能监控设备及*** |
CN105868735A (zh) * | 2016-04-25 | 2016-08-17 | 南京大学 | 一种跟踪人脸的预处理方法及基于视频的智慧健康监视*** |
CN105930822A (zh) * | 2016-05-11 | 2016-09-07 | 北京格灵深瞳信息技术有限公司 | 一种人脸抓拍方法及*** |
Also Published As
Publication number | Publication date |
---|---|
CN113205021A (zh) | 2021-08-03 |
CN107346426B (zh) | 2021-03-16 |
CN107346426A (zh) | 2017-11-14 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107346426B (zh) | 一种基于摄像机人脸识别的人脸信息收集方法 | |
CN109711318B (zh) | 一种基于视频流的多人脸检测与跟踪方法 | |
CN109271961B (zh) | 基于人物身份特征识别的行为模式判断方法 | |
CN102306304B (zh) | 人脸遮挡物识别方法及其装置 | |
CN101106700A (zh) | 视频监控***中的智能化目标细节捕获装置及方法 | |
CN111339831B (zh) | 一种照明灯控制方法和*** | |
CN109831650A (zh) | 一种监控视频的处理***及方法 | |
CN109195011B (zh) | 一种视频处理方法、装置、设备及存储介质 | |
CN105022999A (zh) | 一种人码伴随实时采集*** | |
US20220122360A1 (en) | Identification of suspicious individuals during night in public areas using a video brightening network system | |
CN106803936A (zh) | 基于内存编码机制的视频抓拍方法及装置 | |
CN110532857A (zh) | 基于多摄像头下的行为识别影像分析*** | |
CN115035088A (zh) | 一种基于yolov5和姿态估计的安全帽佩戴检测方法 | |
CN106683409A (zh) | 一种重型卡车摄像识别管理方法及其*** | |
CN108174198B (zh) | 一种视频图像质量诊断分析检测设备及应用*** | |
CN110781735A (zh) | 一种用于识别人员在岗状态的报警方法及*** | |
CN210666820U (zh) | 一种基于dsp边缘计算的行人异常行为检测*** | |
CN106886746A (zh) | 一种识别方法及后端服务器 | |
CN112561957A (zh) | 一种目标对象的状态跟踪方法及装置 | |
CN109614916B (zh) | 基于人脸识别的车站旅客状态实时监测预警计算机*** | |
CN107124577A (zh) | 一种基于运动目标检测的实时防窃*** | |
CN114863364B (zh) | 一种基于智能视频监控的安防检测方法及*** | |
CN113660455B (zh) | 一种基于dvs数据的跌倒检测方法、***、终端 | |
CN211529174U (zh) | 基于深度信息的安检门动态人像捕获*** | |
WO2013173994A1 (en) | Embedded system board, method, front device, backend server and system for video surveillance |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |