CN116205952A - 人脸识别与跟踪的方法、装置、电子设备及存储介质 - Google Patents
人脸识别与跟踪的方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN116205952A CN116205952A CN202310418131.0A CN202310418131A CN116205952A CN 116205952 A CN116205952 A CN 116205952A CN 202310418131 A CN202310418131 A CN 202310418131A CN 116205952 A CN116205952 A CN 116205952A
- Authority
- CN
- China
- Prior art keywords
- human body
- image
- camera
- zoom camera
- zoom
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/20—Analysis of motion
- G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/10—Image acquisition modality
- G06T2207/10016—Video; Image sequence
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Studio Devices (AREA)
- Image Analysis (AREA)
Abstract
本发明提供一种人脸识别与跟踪的方法、装置、电子设备及存储介质，属于图像处理技术领域，该方法包括：获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；对所述第二图像进行人脸识别，获取所述人体的身份信息。本发明同时准确进行人体跟踪和人脸识别，从而提高人员身份信息和位置信息获取的及时性和准确性。
Description
技术领域
本发明涉及图像处理技术领域，尤其涉及一种人脸识别与跟踪的方法、装置、电子设备及存储介质。
背景技术
目前人脸识别技术广泛应用在智慧出行领域、身份识别领域和门禁***领域等。人脸识别***主要包括四个组成部分，即人脸图像采集及检测、人脸图像预处理、人脸图像特征提取以及匹配与识别。
人脸识别技术主要基于人的脸部特征，对输入的人脸图像或者视频流，首先判断其是否存在人脸；如果存在人脸，则进一步给出每个脸的位置、大小和各个主要面部器官的位置信息；依据这些信息，进一步提取每个人脸中所蕴涵的身份特征；将其与已知的人脸进行对比，从而识别每个人脸的身份。
但在一些场景中需要同时进行人脸识别和跟踪，从而及时得到跟踪人员的身份信息和位置信息。例如，在对目标人员进行追踪和对景区游客进行搜救时，需要根据人员的身份信息定位人员的位置信息。因此，同时准确进行人脸识别和跟踪是目前急需解决的重要问题。
现有技术一般采用传统的固定焦距摄像头同时进行人脸识别和跟踪。在人员距离摄像头较远的情况下，只能得到人员的大概信息，对于人脸的细节特性不能全部记录，无法实现准确的人脸识别。因此，现有技术不能同时准确进行人脸识别和跟踪。
发明内容
针对现有技术存在的问题，本发明提供一种人脸识别与跟踪的方法、装置、电子设备及存储介质。
本发明提供一种人脸识别与跟踪的方法，包括：
获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；
对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；
对所述第二图像进行人脸识别，获取所述人体的身份信息。
根据本发明提供的一种人脸识别与跟踪的方法，所述对所述第一图像进行目标跟踪获取所述人体的位置信息的步骤包括：
获取所述定焦摄像头采集的所述人体的第三图像和所述变焦摄像头采集的所述人体的第四图像；
根据所述第三图像和所述第四图像对所述人体进行双目定位，获取所述人体的初始位置信息；
根据所述人体的初始位置信息确定所述人体在所述第三图像中的人体区域；
在所述第一图像为所述第三图像的下一帧的情况下，根据所述人体在所述第三图像中的人体区域确定所述人体在所述第一图像中的人体区域；
根据所述人体在所述第一图像中的人体区域和所述定焦摄像头的标定结果，获取所述人体的位置信息。
根据本发明提供的一种人脸识别与跟踪的方法，所述对变焦摄像头进行焦距调节的步骤包括：
获取所述定焦摄像头采集的所述人体的第三图像和所述变焦摄像头采集的所述人体的第四图像；
根据所述第三图像和所述第四图像对所述人体进行双目定位，获取所述人体的初始位置信息；
根据所述人体的初始位置信息确定所述人体在所述第四图像中的人体区域；
确定所述人体区域中的人脸区域，将所述变焦摄像头的成像平面的坐标系原点移动到所述人脸区域；
确定所述变焦摄像头的变焦倍数，根据所述变焦倍数调节所述变焦摄像头的焦距。
根据本发明提供的一种人脸识别与跟踪的方法，所述确定所述变焦摄像头的变焦倍数的步骤包括：
确定所述人脸区域中两个瞳孔的位置；
根据所述两个瞳孔的位置，确定所述人脸区域中两个瞳孔之间的像素数；
根据预设像素数与所述两个瞳孔之间的像素数之间的比值，确定所述变焦摄像头的变焦倍数。
根据本发明提供的一种人脸识别与跟踪的方法，在所述获取焦距调节后的变焦摄像头采集的所述人体的第二图像的步骤之后，还包括：
将所述变焦摄像头的成像平面的坐标系原点移动到所述变焦摄像头的成像平面的中点；
根据所述变焦摄像头的变焦倍数，将所述变焦摄像头的焦距恢复到调节前的焦距。
根据本发明提供的一种人脸识别与跟踪的方法，在所述获取定焦摄像头采集的人体的第一图像的步骤之前，还包括：
调整所述变焦摄像头的焦距，使得所述变焦摄像头的焦距与所述定焦摄像头的焦距一致；
调整所述变焦摄像头的云台，使得所述变焦摄像头的光轴与所述定焦摄像头的光轴平行。
根据本发明提供的一种人脸识别与跟踪的方法，在所述获取定焦摄像头采集的人体的第一图像的步骤之前，还包括：
对所述变焦摄像头和定焦摄像头进行标定，对标定后的所述变焦摄像头和定焦摄像头进行双目立体校正，使得所述变焦摄像头的成像平面和所述定焦摄像头的成像平面处于同一平面。
本发明还提供一种人脸识别与跟踪的装置，包括：
跟踪模块，用于获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；
调节模块，用于对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；
识别模块，用于对所述第二图像进行人脸识别，获取所述人体的身份信息。
本发明还提供一种电子设备，包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序，所述处理器执行所述程序时实现如上述任一种所述人脸识别与跟踪的方法。
本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现如上述任一种所述人脸识别与跟踪的方法。
本发明提供的人脸识别与跟踪的方法、装置、电子设备及存储介质，通过使用定焦摄像头采集的人体图像进行目标跟踪获取人***置信息，同时使用变焦摄像头变焦后采集的人体图像进行人脸识别，可以同时准确进行人体跟踪和人脸识别，从而提高人员身份信息和位置信息获取的及时性和准确性。
附图说明
为了更清楚地说明本发明或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明提供的人脸识别与跟踪的方法的流程示意图之一；
图2是本发明提供的人脸识别与跟踪的方法中目标跟踪方法的流程示意图；
图3是本发明提供的人脸识别与跟踪的方法的流程示意图之二；
图4是本发明提供的人脸识别与跟踪的装置的结构示意图；
图5是本发明提供的电子设备的结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合本发明中的附图，对本发明中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面结合图1描述本发明的一种人脸识别与跟踪的方法，包括：
步骤101，获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；
定焦摄像头的焦距保持不变。当有人体进入定焦摄像头的视野后，定焦摄像头对人体进行拍摄。
定焦摄像头采集的人体的第一图像为定焦摄像头拍摄的包含人体的当前帧，对当前帧中的人体进行目标跟踪。本实施例对目标跟踪方法不作限定。
可选地，采用图2所示的目标跟踪方法对第一图像进行目标跟踪。首先，用户对定焦摄像头采集的初始帧中的人体区域使用矩形框进行标定，根据矩形框中的特征建立外观模型；然后，通过人体的运动模型根据上一帧中的人体区域预测当前帧中人体可能出现的区域，从而在当前帧中产生多个候选框；接着，通过外观模型提取每个候选框的特征，通过观测模型根据每个候选框的特征与上一帧中人体区域的特征之间的相似性对每个候选框进行评分，将评分最高的候选框作为当前帧中的人体区域；最后，根据当前帧中人体区域的特征使用模型更新算法对观测模型进行在线更新。
对定焦摄像头进行标定的目的是建立定焦摄像头的图像像素位置与场景点位置之间的关系，即世界坐标系与图像坐标系之间的关系。标定方法是根据摄像机模型，由已知特征点的图像坐标求解摄像机的内外参数，从而确定定焦摄像头的成像平面到世界坐标的转换矩阵。
根据定焦摄像头采集的第一图像中的人体区域和定焦摄像头的转换矩阵，从第一图像中的人体区域出发恢复出人体的三维坐标，即人体的位置信息。
通过对人体进行跟踪得到人体每时刻的位置信息，根据人体在每时刻的位置信息得到人体的运动轨迹。
步骤102，对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；
变焦摄像头的焦距根据人体与变焦摄像头之间的距离会发生变化。当有人体进入变焦摄像头的视野后，变焦摄像头对人体进行拍摄。两个摄像头对同一人体同时进行拍摄。
可选地，为了清晰拍摄到人体，根据人体与变焦摄像头之间的距离调节焦距。当人体与变焦摄像头之间的距离较远时，将变焦摄像头的焦距调大。
第二图像为变焦摄像头焦距调节后拍摄的包含人体的图像。
步骤103，对所述第二图像进行人脸识别，获取所述人体的身份信息。
在使用定焦摄像头拍摄的第一图像对人体进行跟踪的过程中，使用变焦摄像头拍摄的一个或多个第二图像对该人体进行人脸识别。本实施例对人脸识别算法不作限定。
若采用定焦摄像头拍摄的第一图像同时对人体进行跟踪和人脸识别，在大场景下，即使定焦摄像头为高清摄像头，由于人体与定焦摄像头的距离较远，只能得到人体的大概信息，无法进行人脸识别。
若采用变焦摄像头拍摄的第二图像同时对人体进行跟踪和人脸识别，针对一些关键信息进行局部性的放大和识别，由于变焦后只能看到局部信息，人体跟踪效果较差。
本实施例通过使用定焦摄像头采集的人体图像进行目标跟踪获取人***置信息，同时使用变焦摄像头变焦后采集的人体图像进行人脸识别，可以同时准确进行人体跟踪和人脸识别，从而提高人员身份信息和位置信息获取的及时性和准确性。
在上述实施例的基础上，本实施例中所述对所述第一图像进行目标跟踪获取所述人体的位置信息的步骤包括：
获取所述定焦摄像头采集的所述人体的第三图像和所述变焦摄像头采集的所述人体的第四图像；
根据所述第三图像和所述第四图像对所述人体进行双目定位，获取所述人体的初始位置信息；
可选地，第三图像和第四图像为两个摄像头采集的人体的初始帧。
在进行人脸识别和目标跟踪之前，先根据两个摄像头采集的图像对人体进行双目定位，获取人体在世界坐标系中的空间位置，即初始位置信息。
在进行双目定位前对两个摄像头进行调节，使其符合双目定位的条件，包括两个摄像头的焦距一致、光轴平行且成像平面在同一平面。
根据所述人体的初始位置信息确定所述人体在所述第三图像中的人体区域；
根据人体的初始位置信息和对定焦摄像头标定得到的转换矩阵，得到人体在第三图像中的人体区域。
在所述第一图像为所述第三图像的下一帧的情况下，根据所述人体在所述第三图像中的人体区域确定所述人体在所述第一图像中的人体区域；
在获取到初始帧中的人体区域后，使用目标跟踪方法进行人体跟踪，得到初始帧的下一帧中的人体区域。
根据所述人体在所述第一图像中的人体区域和所述定焦摄像头的标定结果，获取所述人体的位置信息。
根据下一帧中的人体区域和对定焦摄像头标定得到的转换矩阵，得到人体在下一时刻的位置信息。
本实施例通过使用定焦摄像头和变焦摄像头对人体进行双目定位，得到人体的初始位置信息，根据初始位置信息自动确定人体跟踪的初始人体区域，提高人体跟踪的效率和准确性。
在上述实施例的基础上，本实施例中所述对变焦摄像头进行焦距调节的步骤包括：
获取所述定焦摄像头采集的所述人体的第三图像和所述变焦摄像头采集的所述人体的第四图像；
根据所述第三图像和所述第四图像对所述人体进行双目定位，获取所述人体的初始位置信息；
可选地，第三图像和第四图像为两个摄像头采集的人体的初始帧。
在进行人脸识别和目标跟踪之前，先根据两个摄像头采集的图像对人体进行双目定位，获取人体在世界坐标系中的空间位置，即初始位置信息。
在进行双目定位前对两个摄像头进行调节，使其符合双目定位的条件，包括两个摄像头的焦距一致、光轴平行且成像平面在同一平面。
根据所述人体的初始位置信息确定所述人体在所述第四图像中的人体区域；
根据人体的初始位置信息和对变焦摄像头标定得到的转换矩阵，得到人体在第四图像中的人体区域。
确定所述人体区域中的人脸区域，将所述变焦摄像头的成像平面的坐标系原点移动到所述人脸区域；
可选地，根据人脸区域占人体区域的预设比例，确定人体区域中上部分的人脸区域，从而确定人脸区域的中心点在变焦摄像头的成像平面上的坐标P o (x p ,y p )，此时成像平面坐标系的原点为成像平面的中心位置。
驱动变焦摄像头的云台电机，将变焦摄像头的成像平面的坐标原点移到P o 点，从而将人脸区域至于变焦摄像头的成像平面的中点。
确定所述变焦摄像头的变焦倍数，根据所述变焦倍数调节所述变焦摄像头的焦距。
可选地，根据人体距离变焦摄像头的距离确定变焦倍数。本实施例对变焦倍数的确定方法不作限定。
确定变焦倍数，以将人脸区域放大，从而提高人脸识别的准确性。
本实施例通过使用定焦摄像头和变焦摄像头对人体进行双目定位，得到人体的初始位置信息，根据初始位置信息准确确定人体区域，从而将人体区域中的人脸至于成像平面的中点，对人脸进行准确识别。
在上述实施例的基础上，本实施例中所述确定所述变焦摄像头的变焦倍数的步骤包括：
确定所述人脸区域中两个瞳孔的位置；
识别出人脸区域中两个瞳孔，从而确定两个瞳孔的位置。
根据所述两个瞳孔的位置，确定所述人脸区域中两个瞳孔之间的像素数；
统计两个瞳孔间的像素数为m。
根据预设像素数与所述两个瞳孔之间的像素数之间的比值，确定所述变焦摄像头的变焦倍数。
人脸识别的准确度与图像像素有关。一般来说，瞳距间需有25至30个以上像素点才能实现人脸识别。当摄像头与人脸之间距离较远时，人脸识别精度不高。
可选地，预设像素数一般取值为25至30之间。当预设像素数取值为30时，变焦倍数为30/m。
变焦摄像头的原焦距为F，则调整变焦摄像头的焦距为
，从而放大人脸区域，为实现精确人脸识别提供高清人脸图像。
根据高清人脸图像，通过人脸识别算法对人体进行人脸识别，从而获取人体的身份信息。
本实施例根据人脸中两个瞳孔之间的像素数对人脸进行放大，提高人脸识别的准确性。
在上述实施例的基础上，本实施例中在所述获取焦距调节后的变焦摄像头采集的所述人体的第二图像的步骤之后，还包括：
将所述变焦摄像头的成像平面的坐标系原点移动到所述变焦摄像头的成像平面的中点；
根据所述变焦摄像头的变焦倍数，将所述变焦摄像头的焦距恢复到调节前的焦距。
将变焦摄像头的云台位置和焦距恢复到初始值，为下一次人脸识别和跟踪做准备。
需要说明的是，在使用定焦摄像头进行人体跟踪的过程中，使用变焦摄像头对某一帧图像中的人体进行人脸识别后即可恢复焦距和成像平面的坐标系原点，便于下次进行双目定位和人脸识别。
在上述各实施例的基础上，本实施例中在所述获取定焦摄像头采集的人体的第一图像的步骤之前，还包括：
调整所述变焦摄像头的焦距，使得所述变焦摄像头的焦距与所述定焦摄像头的焦距一致；
调整所述变焦摄像头的云台，使得所述变焦摄像头的光轴与所述定焦摄像头的光轴平行。
调整变焦摄像头的焦距使其与定焦摄像头的焦距一致。调整变焦摄像头的云台，使两个摄像头的光轴平行。
在上述各实施例的基础上，本实施例中在所述获取定焦摄像头采集的人体的第一图像的步骤之前，还包括：
对所述变焦摄像头和定焦摄像头进行标定，对标定后的所述变焦摄像头和定焦摄像头进行双目立体校正，使得所述变焦摄像头的成像平面和所述定焦摄像头的成像平面处于同一平面。
如图3所示，本实施例包括双目相机标定及校正、双目定位、定焦摄像头完成目标跟踪及定位，以及变焦摄像头完成目标人脸识别。
双目相机标定及校正，包括相机单目标定、双目相机立体标定及双目相机立体校正等，得到两相机的内外参数及两个相机间的位置关系。
相机单目标定根据摄像机模型，由已知特征点的图像坐标求解摄像机的内外参数，从而确定摄像头的成像平面到世界坐标的转换矩阵。
双目相机立体标定旨在确定两个相机的位置关系，由两个相机的旋转矩阵和平移向量，推算两个摄像头之间的坐标转换矩阵。
通过两幅图像估计物点深度，需在两幅图像中准确匹配到同一物点。为降低匹配的计算量，两个摄像头的成像平面应处于同一平面。但是依靠摆放摄像头来实现这个目的较为困难，因此需进行双目相机立体校正，利用几何图形变换关系，将两个摄像头的成像平面处于同一平面。
本实施例中的人脸识别与跟踪的方法可应用在大场景中进行人脸识别与跟踪，不受人脸识别距离的限制，因此可以布置在人流量大的主干道。需要对目标人员进行追踪时，可输入目标人员的身份信息，利用本实施例提供的方法对主干道来往的行人进行人脸识别，锁定目标人员后对其移动轨迹进行跟踪。
对于复杂山岳地区，地形复杂，一旦出现人员失踪，搜救工作较为困难。利用本实施例提供的方法对景区游客进行身份识别并记录其位置信息，在搜救时可以提供其出行轨迹，缩短搜救时间，提高搜救效率。
下面对本发明提供的人脸识别与跟踪的装置进行描述，下文描述的人脸识别与跟踪的装置与上文描述的人脸识别与跟踪的方法可相互对应参照。
如图4所示，该装置包括跟踪模块401、调节模块402和识别模块403，其中：
跟踪模块401用于获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；
调节模块402用于对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；
识别模块403用于对所述第二图像进行人脸识别，获取所述人体的身份信息。
可选地，将高清变焦摄像头（含云台）和定焦摄像头固定在一个底座上。假定两个摄像头之间除是否可变焦外，其他分辨率、清晰度等参数相同，且两者之间的距离固定。
该装置为边缘计算设备，变焦摄像头负责人脸识别功能，定焦摄像头负责人物跟踪功能。当两者焦距相同时，可以实现双目定位。
本实施例通过使用定焦摄像头采集的人体图像进行目标跟踪获取人***置信息，同时使用变焦摄像头变焦后采集的人体图像进行人脸识别，可以同时准确进行人体跟踪和人脸识别，从而提高人员身份信息和位置信息获取的及时性和准确性。
图5示例了一种电子设备的实体结构示意图，如图5所示，该电子设备可以包括：处理器(processor)510、通信接口(Communications Interface)520、存储器(memory)530和通信总线540，其中，处理器510，通信接口520，存储器530通过通信总线540完成相互间的通信。处理器510可以调用存储器530中的逻辑指令，以执行人脸识别与跟踪的方法，该方法包括：获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；对所述第二图像进行人脸识别，获取所述人体的身份信息。
此外，上述的存储器530中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器（ROM，Read-Only Memory）、随机存取存储器（RAM，Random Access Memory）、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括计算机程序，计算机程序可存储在非暂态计算机可读存储介质上，所述计算机程序被处理器执行时，计算机能够执行上述各方法所提供的人脸识别与跟踪的方法，该方法包括：获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；对所述第二图像进行人脸识别，获取所述人体的身份信息。
又一方面，本发明还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现以执行上述各方法提供的人脸识别与跟踪的方法，该方法包括：获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；对所述第二图像进行人脸识别，获取所述人体的身份信息。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备（可以是个人计算机，服务器，或者网络设备等）执行各个实施例或者实施例的某些部分所述的方法。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种人脸识别与跟踪的方法，其特征在于，包括：
获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；
对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；
对所述第二图像进行人脸识别，获取所述人体的身份信息。
2.根据权利要求1所述的人脸识别与跟踪的方法，其特征在于，所述对所述第一图像进行目标跟踪获取所述人体的位置信息的步骤包括：
获取所述定焦摄像头采集的所述人体的第三图像和所述变焦摄像头采集的所述人体的第四图像；
根据所述第三图像和所述第四图像对所述人体进行双目定位，获取所述人体的初始位置信息；
根据所述人体的初始位置信息确定所述人体在所述第三图像中的人体区域；
在所述第一图像为所述第三图像的下一帧的情况下，根据所述人体在所述第三图像中的人体区域确定所述人体在所述第一图像中的人体区域；
根据所述人体在所述第一图像中的人体区域和所述定焦摄像头的标定结果，获取所述人体的位置信息。
3.根据权利要求1所述的人脸识别与跟踪的方法，其特征在于，所述对变焦摄像头进行焦距调节的步骤包括：
获取所述定焦摄像头采集的所述人体的第三图像和所述变焦摄像头采集的所述人体的第四图像；
根据所述第三图像和所述第四图像对所述人体进行双目定位，获取所述人体的初始位置信息；
根据所述人体的初始位置信息确定所述人体在所述第四图像中的人体区域；
确定所述人体区域中的人脸区域，将所述变焦摄像头的成像平面的坐标系原点移动到所述人脸区域；
确定所述变焦摄像头的变焦倍数，根据所述变焦倍数调节所述变焦摄像头的焦距。
4.根据权利要求3所述的人脸识别与跟踪的方法，其特征在于，所述确定所述变焦摄像头的变焦倍数的步骤包括：
确定所述人脸区域中两个瞳孔的位置；
根据所述两个瞳孔的位置，确定所述人脸区域中两个瞳孔之间的像素数；
根据预设像素数与所述两个瞳孔之间的像素数之间的比值，确定所述变焦摄像头的变焦倍数。
5.根据权利要求4所述的人脸识别与跟踪的方法，其特征在于，在所述获取焦距调节后的变焦摄像头采集的所述人体的第二图像的步骤之后，还包括：
将所述变焦摄像头的成像平面的坐标系原点移动到所述变焦摄像头的成像平面的中点；
根据所述变焦摄像头的变焦倍数，将所述变焦摄像头的焦距恢复到调节前的焦距。
6.根据权利要求2或3所述的人脸识别与跟踪的方法，其特征在于，在所述获取定焦摄像头采集的人体的第一图像的步骤之前，还包括：
调整所述变焦摄像头的焦距，使得所述变焦摄像头的焦距与所述定焦摄像头的焦距一致；
调整所述变焦摄像头的云台，使得所述变焦摄像头的光轴与所述定焦摄像头的光轴平行。
7.根据权利要求2或3所述的人脸识别与跟踪的方法，其特征在于，在所述获取定焦摄像头采集的人体的第一图像的步骤之前，还包括：
对所述变焦摄像头和定焦摄像头进行标定，对标定后的所述变焦摄像头和定焦摄像头进行双目立体校正，使得所述变焦摄像头的成像平面和所述定焦摄像头的成像平面处于同一平面。
8.一种人脸识别与跟踪的装置，其特征在于，包括：
跟踪模块，用于获取定焦摄像头采集的人体的第一图像，对所述第一图像进行目标跟踪获取所述人体的位置信息；
调节模块，用于对变焦摄像头进行焦距调节，获取焦距调节后的变焦摄像头采集的所述人体的第二图像；
识别模块，用于对所述第二图像进行人脸识别，获取所述人体的身份信息。
9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7任一项所述人脸识别与跟踪的方法。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述人脸识别与跟踪的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310418131.0A CN116205952B (zh) | 2023-04-19 | 2023-04-19 | 人脸识别与跟踪的方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202310418131.0A CN116205952B (zh) | 2023-04-19 | 2023-04-19 | 人脸识别与跟踪的方法、装置、电子设备及存储介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN116205952A true CN116205952A (zh) | 2023-06-02 |
| CN116205952B CN116205952B (zh) | 2023-08-04 |
Family
ID=86514909
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202310418131.0A Active CN116205952B (zh) | 2023-04-19 | 2023-04-19 | 人脸识别与跟踪的方法、装置、电子设备及存储介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN116205952B (zh) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101520838A (zh) * | 2008-02-27 | 2009-09-02 | 中国科学院自动化研究所 | 自动跟踪和自动变焦的虹膜图像获取方法 |
| US20130135468A1 (en) * | 2010-08-16 | 2013-05-30 | Korea Research Institute Of Standards And Science | Camera tracing and surveillance system and method for security using thermal image coordinate |
| CN108124090A (zh) * | 2016-11-26 | 2018-06-05 | 沈阳新松机器人自动化股份有限公司 | 移动机器人双摄像头人脸识别装置及方法 |
| CN108305326A (zh) * | 2018-01-22 | 2018-07-20 | 中国人民解放军陆军航空兵学院 | 一种混合虚拟现实的方法 |
| CN110177257A (zh) * | 2019-06-26 | 2019-08-27 | 北京深醒科技有限公司 | 一种多摄像机视频监控装置及其人体跟踪方法 |
| WO2021057887A1 (zh) * | 2019-09-26 | 2021-04-01 | 北京外号信息技术有限公司 | 用于为目标设置可呈现的虚拟对象的方法和*** |
| CN113268785A (zh) * | 2021-07-19 | 2021-08-17 | 军事科学院***工程研究院网络信息研究所 | 基于目标识别自动定焦的防窥显示方法 |
| CN113688794A (zh) * | 2021-09-24 | 2021-11-23 | 北京声智科技有限公司 | 身份识别方法、装置、电子设备和计算机可读存储介质 |
| WO2022037633A1 (zh) * | 2020-08-19 | 2022-02-24 | 展讯通信（上海）有限公司 | 双目摄像头的标定及图像矫正方法、装置、存储介质、终端、智能设备 |
| CN114979956A (zh) * | 2022-04-11 | 2022-08-30 | 齐鲁空天信息研究院 | 一种无人机航拍地面目标定位方法及*** |
-
2023
- 2023-04-19 CN CN202310418131.0A patent/CN116205952B/zh active Active
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN101520838A (zh) * | 2008-02-27 | 2009-09-02 | 中国科学院自动化研究所 | 自动跟踪和自动变焦的虹膜图像获取方法 |
| US20130135468A1 (en) * | 2010-08-16 | 2013-05-30 | Korea Research Institute Of Standards And Science | Camera tracing and surveillance system and method for security using thermal image coordinate |
| CN108124090A (zh) * | 2016-11-26 | 2018-06-05 | 沈阳新松机器人自动化股份有限公司 | 移动机器人双摄像头人脸识别装置及方法 |
| CN108305326A (zh) * | 2018-01-22 | 2018-07-20 | 中国人民解放军陆军航空兵学院 | 一种混合虚拟现实的方法 |
| CN110177257A (zh) * | 2019-06-26 | 2019-08-27 | 北京深醒科技有限公司 | 一种多摄像机视频监控装置及其人体跟踪方法 |
| WO2021057887A1 (zh) * | 2019-09-26 | 2021-04-01 | 北京外号信息技术有限公司 | 用于为目标设置可呈现的虚拟对象的方法和*** |
| WO2022037633A1 (zh) * | 2020-08-19 | 2022-02-24 | 展讯通信（上海）有限公司 | 双目摄像头的标定及图像矫正方法、装置、存储介质、终端、智能设备 |
| CN113268785A (zh) * | 2021-07-19 | 2021-08-17 | 军事科学院***工程研究院网络信息研究所 | 基于目标识别自动定焦的防窥显示方法 |
| CN113688794A (zh) * | 2021-09-24 | 2021-11-23 | 北京声智科技有限公司 | 身份识别方法、装置、电子设备和计算机可读存储介质 |
| CN114979956A (zh) * | 2022-04-11 | 2022-08-30 | 齐鲁空天信息研究院 | 一种无人机航拍地面目标定位方法及*** |
Non-Patent Citations (4)
| Title |
|---|
| JIULU GONG等: "Joint view-identity manifold for infrared target tracking and recognition", 《 COMPUTER VISION AND IMAGE UNDERSTANDING》, vol. 118, pages 211 - 224, XP028805073, DOI: 10.1016/j.cviu.2013.10.002 * |
| 任宇飞等: "水下无人航行器主动目标自动检测方法研究", 《船舶力学》, vol. 23, no. 2, pages 227 - 233 * |
| 罗志成;: "融合视频监控的远程多生物特征识别***", 中国安防, no. 12, pages 101 - 106 * |
| 韩暑等: "基于运动信息和再匹配的多目标追踪", 《计算机***应用》, vol. 31, no. 2, pages 1 - 11 * |
Also Published As
| Publication number | Publication date |
|---|---|
| CN116205952B (zh) | 2023-08-04 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106251399B (zh) | 一种基于lsd-slam的实景三维重建方法及实施装置 | |
| EP3236391B1 (en) | Object detection and recognition under out of focus conditions | |
| WO2018232837A1 (zh) | 移动目标的跟踪拍摄方法和跟踪设备 | |
| CN109583304A (zh) | 一种基于结构光模组的快速3d人脸点云生成方法及装置 | |
| CN110287776B (zh) | 一种人脸识别的方法、装置以及计算机可读存储介质 | |
| KR101510312B1 (ko) | 복수의 카메라들을 이용한 3d 얼굴 모델링 장치, 시스템 및 방법 | |
| JP6376474B2 (ja) | 多眼撮像システム、取得画像の合成処理方法、及びプログラム | |
| CN113762009B (zh) | 一种基于多尺度特征融合及双注意力机制的人群计数方法 | |
| KR20140054710A (ko) | 3차원 지도 생성 장치 및 3차원 지도 생성 방법 | |
| CN109753925A (zh) | 一种虹膜特征提取的方法和设备 | |
| CN115035546B (zh) | 三维人体姿态检测方法、装置及电子设备 | |
| CN110120013A (zh) | 一种点云拼接方法及装置 | |
| JP2014116716A (ja) | 追尾装置 | |
| CN113538315B (zh) | 图像处理方法及装置 | |
| KR101053253B1 (ko) | 3차원 정보를 이용한 얼굴 인식 장치 및 방법 | |
| CN104104911B (zh) | 全景图像生成过程中的时间戳消除和重置方法及*** | |
| CN113255449A (zh) | 一种双目视频图像的实时匹配方法 | |
| CN116205952B (zh) | 人脸识别与跟踪的方法、装置、电子设备及存储介质 | |
| CN116778533A (zh) | 一种掌纹全感兴趣区域图像提取方法、装置、设备及介质 | |
| CN108090930A (zh) | 基于双目立体相机的障碍物视觉检测***及方法 | |
| CN113225484B (zh) | 快速获取屏蔽非目标前景的高清图片的方法及装置 | |
| CN116051736A (zh) | 一种三维重建方法、装置、边缘设备和存储介质 | |
| CN113139504B (zh) | 身份识别方法、装置、设备及存储介质 | |
| CN112819984B (zh) | 一种基于人脸识别的课堂多人点名签到方法 | |
| CN116206050A (zh) | 三维重建方法、电子设备和计算机可读存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |