CN112529947A - 标定方法及装置、电子设备及存储介质 - Google Patents

标定方法及装置、电子设备及存储介质 Download PDF

Info

Publication number
CN112529947A
CN112529947A CN202011420092.0A CN202011420092A CN112529947A CN 112529947 A CN112529947 A CN 112529947A CN 202011420092 A CN202011420092 A CN 202011420092A CN 112529947 A CN112529947 A CN 112529947A
Authority
CN
China
Prior art keywords
face
frame
calibration
contour frame
thermal infrared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011420092.0A
Other languages
English (en)
Other versions
CN112529947B (zh
Inventor
张国庆
张弼坤
丁诚诚
林佩材
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Sensetime Technology Development Co Ltd
Original Assignee
Beijing Sensetime Technology Development Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Sensetime Technology Development Co Ltd filed Critical Beijing Sensetime Technology Development Co Ltd
Priority to CN202011420092.0A priority Critical patent/CN112529947B/zh
Publication of CN112529947A publication Critical patent/CN112529947A/zh
Priority to PCT/CN2021/096072 priority patent/WO2022121243A1/zh
Priority to TW110125930A priority patent/TW202223739A/zh
Application granted granted Critical
Publication of CN112529947B publication Critical patent/CN112529947B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/30—Determination of transform parameters for the alignment of images, i.e. image registration
    • G06T7/33—Determination of transform parameters for the alignment of images, i.e. image registration using feature-based methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161—Detection; Localisation; Normalisation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/168—Feature extraction; Face representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20228—Disparity calculation for image-based rendering

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Multimedia (AREA)
  • General Health & Medical Sciences (AREA)
  • Image Processing (AREA)
  • Image Analysis (AREA)
  • Studio Devices (AREA)

Abstract

本申请公开了一种标定方法及装置、电子设备及存储介质。该方法包括：响应于接收到的标定触发指令，进入标定用户界面，所述界面包括热红外图像和第一人脸轮廓框；响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框；在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。

Description

标定方法及装置、电子设备及存储介质
技术领域
本申请涉及计算机视觉技术领域，尤其涉及一种标定方法及装置、电子设备及存储介质。
背景技术
双目立体视觉(binocular stereo vision)是机器视觉的一种重要形式，它是基于视差原理并利用成像设备从不同的位置获取被测物体的两幅图像(下文将称为双目图像)。
在一些应用场景中，需要从双目图像中确定对应同一物体的像素点区域，而在双目图像之间存在视差的情况下，从双目图像中确定对应同一物体的像素点区域的准确度低。因此，如何标定双目图像之间的视差具有非常重要的意义。
发明内容
本申请提供一种标定方法及装置、电子设备及存储介质。
本申请提供了一种标定方法，所述方法包括：
响应于接收到的标定触发指令，进入标定用户界面，所述界面包括热红外图像和第一人脸轮廓框；
响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框；
在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。
结合本申请任一实施方式，所述方法还包括：
响应于接收到标定完成的指令，在所述标定用户界面中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果，其中，所述重合结果包括但不限于重合度，人脸额头区域。
结合本申请任一实施方式，所述在所述标定用户界面中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果之前，所述方法还包括：
获取可见光图像；
对所述可见光图像进行人脸识别处理，得到所述参考像素点区域在所述可见光图像中的位置；所述参考像素点区域为所述可见光图像中与所述第一人脸区域对应的区域；
依据参考视差和所述参考像素点区域在所述可见光图像中的位置，确定所述第一人脸区域在所述热红外图像中的位置；所述参考视差为所述可见光图像与所述热红外图像之间的视差；
依据所述第一人脸区域在所述热红外图像中的位置和所述终止位置，得到所述第一人脸轮廓框与所述第一人脸区域的重合结果。
结合本申请任一实施方式，所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框，包括：
在检测到物体在所述用户界面上滑动的移动指令的情况下，沿所述物体在所述用户界面上的滑动方向移动所述第一人脸轮廓框。
结合本申请任一实施方式，所述标定方法应用于标定装置；
在所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框之前，所述方法还包括：
在所述标定用户界面中显示至少一个虚拟方向按钮；所述至少一个虚拟方向按钮包括以下至少一个：向上虚拟按钮、向下虚拟按钮、向左虚拟按钮、向右虚拟按钮；
所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框，包括：
在检测到物体通过所述标定装置的屏幕触摸所述至少一个虚拟方向按钮的情况下，依据被触摸的所述虚拟方向按钮所指示的方向移动所述人脸框。
结合本申请任一实施方式，所述第一人脸轮廓框依据至少一个参考第一人脸轮廓框得到；所述至少一个参考第一人脸轮廓框通过对至少一张人脸图像进行人脸检测处理得到；所述至少一张人脸图像的采集条件均为实际采集条件；所述实际采集条件为所述标定装置的应用环境下的图像采集条件。
结合本申请任一实施方式，所述方法还包括：
在接收到重置所述第一人脸轮廓框的指令的情况下，将所述第一人脸轮廓框重置于初始位置。
结合本申请任一实施方式，所述第一人脸轮廓框包括至少一个人脸关键点；
所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合包括：所述第一人脸轮廓框与所述第一人脸区域的边界重合以及所述至少一个人脸关键点与所述第一人脸区域中对应的人脸关键点重合。
结合本申请任一实施方式，所述标定用户界面还包括与所述第一区域不同的第二显示区域，所述方法还包括：
在所述第二显示区域内显示所述第一人脸轮廓框与所述第一人脸区域的重合效果预览图；所述重合效果预览图包括第二人脸轮廓框与所述第二人脸区域的重合效果图；所述第二人脸框内标记有测温区域；所述第二人脸轮廓框在所述第二显示区域内的位置与所述第一人脸轮廓框在所述第一显示区域内的位置对应；所述第二人脸区域与所述第一人脸区域对应。
结合本申请任一实施方式，所述在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息之前，所述方法还包括：
响应于接收到针对所述热红外图像和所述第一人脸框的放大指令，按照所述放大指令放大所述热红外图像和所述第一人脸框；
响应于接收到针对所述热红外图像和所述第一人脸框的缩小指令，按照所述缩小指令放大所述热红外图像和所述第一人脸框。
在一些实施例中，本申请还提供了一种标定装置，所述标定装置包括：
第一处理单元，用于响应于接收到的标定触发指令，进入标定用户界面，所述界面包括热红外图像和第一人脸轮廓框；
第二处理单元，用于响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框；
输出单元，用于在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。
结合本申请任一实施方式，所述标定装置还包括：
第一显示单元，用于响应于接收到标定完成的指令，在所述标定用户界面中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果，其中，所述重合结果包括但不限于重合度，人脸额头区域。
结合本申请任一实施方式，所述标定装置还包括：
获取单元，用于在所述标定用户界面中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果之前，获取可见光图像；
第三处理单元，用于对所述可见光图像进行人脸识别处理，得到所述参考像素点区域在所述可见光图像中的位置；所述参考像素点区域为所述可见光图像中与所述第一人脸区域对应的区域；
第四处理单元，用于依据参考视差和所述参考像素点区域在所述可见光图像中的位置，确定所述第一人脸区域在所述热红外图像中的位置；所述参考视差为所述可见光图像与所述热红外图像之间的视差；
第五处理单元，用于依据所述第一人脸区域在所述热红外图像中的位置和所述终止位置，得到所述第一人脸轮廓框与所述第一人脸区域的重合结果。
结合本申请任一实施方式，所述第二处理单元，用于：
在检测到物体在所述用户界面上滑动的移动指令的情况下，沿所述物体在所述用户界面上的滑动方向移动所述第一人脸轮廓框。
结合本申请任一实施方式，所述标定装置，还包括：第二显示单元，用于在所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框之前，在所述标定用户界面中显示至少一个虚拟方向按钮；所述至少一个虚拟方向按钮包括以下至少一个：向上虚拟按钮、向下虚拟按钮、向左虚拟按钮、向右虚拟按钮；
所述第二处理单元，用于：
在检测到物体通过所述标定装置的屏幕触摸所述至少一个虚拟方向按钮的情况下，依据被触摸的所述虚拟方向按钮所指示的方向移动所述人脸框。
结合本申请任一实施方式，所述第一人脸轮廓框依据至少一个参考第一人脸轮廓框得到；所述至少一个参考第一人脸轮廓框通过对至少一张人脸图像进行人脸检测处理得到；所述至少一张人脸图像的采集条件均为实际采集条件；所述实际采集条件为所述标定装置的应用环境下的图像采集条件。
结合本申请任一实施方式，所述标定装置还包括：
重置单元，用于在接收到重置所述第一人脸轮廓框的指令的情况下，将所述第一人脸轮廓框重置于初始位置。
结合本申请任一实施方式，所述第一人脸轮廓框包括至少一个人脸关键点；
所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合包括：所述第一人脸轮廓框与所述第一人脸区域的边界重合以及所述至少一个人脸关键点与所述第一人脸区域中对应的人脸关键点重合。
结合本申请任一实施方式，所述标定用户界面还包括与所述第一区域不同的第二显示区域，所述第一处理单元，还用于在所述第二显示区域内显示所述第一人脸轮廓框与所述第一人脸区域的重合效果预览图；所述重合效果预览图包括第二人脸轮廓框与所述第二人脸区域的重合效果图；所述第二人脸框内标记有测温区域；所述第二人脸轮廓框在所述第二显示区域内的位置与所述第一人脸轮廓框在所述第一显示区域内的位置对应；所述第二人脸区域与所述第一人脸区域对应。
结合本申请任一实施方式，所述第二处理单元，还用于在所述在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息之前，响应于接收到针对所述热红外图像和所述第一人脸框的放大指令，按照所述放大指令放大所述热红外图像和所述第一人脸框；
响应于接收到针对所述热红外图像和所述第一人脸框的缩小指令，按照所述缩小指令放大所述热红外图像和所述第一人脸框。
在一些实施例中，本申请还提供了一种电子设备，其特征在于，包括：处理器和存储器，所述存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，在所述处理器执行所述计算机指令的情况下，所述电子设备执行如上述第一方面及其任意一种可能实现的方式的方法。
在一些实施例中，本申请还提供了另一种电子设备，包括：处理器、发送装置、输入装置、输出装置和存储器，所述存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，在所述处理器执行所述计算机指令的情况下，所述电子设备执行如上述第一方面及其任意一种可能实现的方式的方法。
在一些实施例中，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，所述计算机程序包括程序指令，在所述程序指令被处理器执行的情况下，使所述处理器执行如上述第一方面及其任意一种可能实现的方式的方法。
在一些实施例中，本申请还提供了一种计算机程序产品，所述计算机程序产品包括计算机程序或指令，在所述计算机程序或指令在计算机上运行的情况下，使得所述计算机执行上述第一方面及其任一种可能的实现方式的方法。
应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，而非限制本申请。
附图说明
为了更清楚地说明本申请实施例或背景技术中的技术方案，下面将对本申请实施例或背景技术中所需要使用的附图进行说明。
此处的附图被并入说明书中并构成本说明书的一部分，这些附图示出了符合本申请的实施例，并与说明书一起用于说明本申请的技术方案。
图1为本申请实施例提供的一种标定方法的流程示意图；
图2为本申请实施例提供的一种第一人脸轮廓框示意图；
图3为本申请实施例提供的一种标定用户界面示意图；
图4为本申请实施例提供的一种标定装置的结构示意图；
图5为本申请实施例提供的一种标定装置的硬件结构示意图。
具体实施方式
为了使本技术领域的人员更好地理解本申请方案，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别不同对象，而不是用于描述特定顺序。此外，术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其他步骤或单元。
应当理解，在本申请中，“至少一个(项)”是指一个或者多个，“多个”是指两个或两个以上，“至少两个(项)”是指两个或三个及三个以上，“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：只存在A，只存在B以及同时存在A和B三种情况，其中A，B可以是单数或者复数。字符“/”可表示前后关联对象是一种“或”的关系，是指这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b或c中的至少一项(个)，可以表示：a，b，c，“a和b”，“a和c”，“b和c”，或“a和b和c”，其中a，b，c可以是单个，也可以是多个。字符“/”还可表示数学运算中的除号，例如，a/b＝a除以b；6/3＝2。“以下至少一项(个)”或其类似表达。
在本文中提及“实施例”意味着，结合实施例描述的特定特征、结构或特性可以包含在本申请的至少一个实施例中。在说明书中的各个位置出现该短语并不一定均是指相同的实施例，也不是与其它实施例互斥的独立的或备选的实施例。本领域技术人员显式地和隐式地理解的是，本文所描述的实施例可以与其它实施例相结合。
众所周知，人在患病的时候，易出现体温异常的情况，因此，人的体温可作为判断人是否需要进一步确定是否患病的依据。而在某些特殊情况下，人与人之间需要保持一个安全距离，这就导致无法通过接触式测量的方式测量人的体温。
例如，呼吸道传染病具有易传染的特点，当患有呼吸道传染病的人出现在公共场所或人群中时，可能对社会安全造成较大的危害(如新冠肺炎的传播对人类安全的危害)。为降低呼吸道传染病的传播效率，可减少人与人之间的近距离接触。此时，不宜通过接触式测量的方式测量人的体温。
在无法通过接触式测量的方式测量人的体温的情况下，就只能通过非接触式测量的方式来测量人的体温了。目前的非接触测量方式的具体做法是，测温终端使用RGB摄像头和热成像摄像头分别对待测量对象的人脸进行拍摄，得到一张RGB图像和一张温度热力图。测温终端通过对RGB图像进行人脸检测处理，从RGB图像中确定第一人脸区域，再从温度热力图中确定与该第一人脸区域对应的像素点区域，作为目标像素点区域。测温终端依据目标像素点区域的温度，得到待测量对象的体温。
由于RGB摄像头的安装位置与热成像摄像头的安装位置不同，待测量对象的人脸在RGB图像中的位置与待测量对象的人脸在温度热力图中的位置不同。这样，测温终端从温度热力图中确定的目标像素点区域与待测量对象的第一人脸区域之间可能存在偏差，进而导致得到的待测量对象的体温不准确。
基于此，本申请实施例提供了一种标定方法，以确定RGB摄像头与热成像摄像头之间的位移差，从而提高待测量对象的体温的准确度。
本申请实施例的执行主体为标定装置。可选的，标定装置可以是以下中的一种：手机、计算机、服务器、平板电脑。下面结合本申请实施例中的附图对本申请实施例进行描述。
请参阅图1，图1是本申请实施例提供的一种标定方法的流程示意图。
101、响应于接收到的标定触发指令，进入标定用户界面。
本申请实施例中，标定触发指令用于指示标定装置启动标定程序。在一种可能实现的方式中，标定装置与显示器之间具有通信连接，标定装置通过该通信连接在显示器上显示是否启动标定程序的信息框。用户可通过该信息框向标定装置输入标定触发指令。
例如，该信息框包括启动标定程序和不启动标定程序。用户通过点击启动标定程序可向标定装置输入标定触发指令。
在另一种可能实现的方式中，用户通过向标定装置输入携带启动标定程序信息的语音数据，向标定装置输入标定触发指令。
在又一种可能实现的方式中，标定装置接收标定触发指令可以是，标定装置接收终端发送的标定触发指令。可选的，终端可以是以下任意一种：手机、计算机、平板电脑、服务器、可穿戴设备。
响应于接收到的标定触发指令，标定装置进入标定用户界面，以进行接下来的标定处理。可选的，标定装置进入标定用户界面可以是在接收到标定触发指令后，切换到用户界面。
102、响应于接收到移动第一人脸轮廓框的操作指令，按照上述操作指令移动上述第一人脸轮廓框。
本申请实施例中，标定用户界面包括第一显示区域，第一显示区域包括热红外图像和第一人脸轮廓框。其中，第一显示区域可以是标定用户界面中的一部分区域，第一显示区域也可以是标定用户界面的全部区域。
本申请实施例中，第一人脸轮廓框可以是图2所示的人脸轮廓。可选的，标定装置在执行步骤102之前，获取第一人脸轮廓框。在一种获取第一人脸轮廓框的实现方式中，标定装置接收用户通过输入组件输入的第一人脸轮廓框。可选的，上述输入组件包括：键盘、鼠标、触控屏、触控板和音频输入器等。
在另一种获取第一人脸轮廓框的实现方式中，标定装置接收终端发送的第一人脸轮廓框。
本申请实施例中，第一人脸轮廓框在标定用户界面中的初始位置是固定的。即标定装置响应于接收到标定触发指令，显示标定用户界面，并在标定用户界面中的初始位置显示第一人脸轮廓框。
本申请实施例中，移动第一人脸轮廓框的操作指令用于，指示标定装置在标定用户界面移动第一人脸轮廓框。
在一种可能实现的方式中，用户通过输入组件向标定装置输入移动第一人脸轮廓框的操作指令，以使标定装置按照该操作指令移动第一人脸轮廓框。例如，用户通过输入组件向标定装置输入将第一人脸轮廓框向左移动10个像素点单位的操作指令，标定装置在接收到操作指令的情况下，在标定用户界面中将第一人脸轮廓框向左移动10个像素点单位。
103、在上述第一人脸轮廓框与上述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。
本申请实施例中，热红外图像即为上述热成像设备采集得到的人脸图像。可选的，标定装置在进入标定用户界面后，还在标定用户界面中显示红热外图像。
本申请实施例中，第一人脸轮廓框在标定用户界面中的初始位置为，在将可见光图像显示于标定用户界面中时，第一人脸区域在可见光图像中的位置。例如，可见光图像包括第一人脸区域a。将可见光图像显示于标定用户界面中，第一人脸区域a在可见光图像中的位置为A。
本申请实施例中，热红外图像与可见光图像为双目图像，即热红外图像与可见光图像为不同成像设备在同一时间对同一个人脸进行拍摄得到的两张图像，其中，采集可见光图像的成像设备为可见光成像设备。可选的，可见光成像设备为RGB成像设备。
例如，测温终端包括RGB摄像头和RGB摄像头。测温终端使用RGB摄像头对张三的人脸进行拍摄得到RGB图像，并在使用RGB摄像头采集RGB图像的同时，使用RGB摄像头对张三的人脸进行拍摄得到热红外图像。
由于可将光成像设备的安装位置与热红外成像设备的安装位置不同，待测量对象的人脸在可见光图像中的位置与待测量对象的人脸在热红外图像中的位置不同。因此，在基于可见光图像和热红外图像，确定待测量对象的体温之前，需通过对可见光图像和热红外图像进行标定，得到可见光图像与热红外图像之间的视差。
由于第一人脸轮廓框在标定用户界面中的初始位置为，可光图像中的第一人脸区域在可见光图像中的位置，通过移动第一人脸轮廓框使第一人脸轮廓框与热红外图像中的第一人脸区域重合，即可完成可见光图像与热红外图像之间的标定。
例如，若标定装置通过将第一人脸轮廓框在标定用户界面向右移动5个像素点单位，使第一人脸轮廓框与热红外图像中的第一人脸区域重合。那么说明，将可见光图像向标定用户界面的右侧移动5个像素点单位，可使可见光图像与热红外图像重合。即可见光图像与热红外图像之间的视差为5个像素点单位。
标定装置在确定第一人脸轮廓框与热红外图像中的第一人脸区域重合的情况下，输出标定完成信息，以使告知用户已完成热红外图像与可见光图像之间的标定。
在一种可能实现的方式中，标定装置与显示器之间具有通信连接。标定装置通过该通信连接使显示器输出标定完成信息。
例如，标定装置可在标定用户界面中显示标定完成信息；又例如，标定装置可将标定用户界面切换成另一个界面，并在切换后的界面中显示标定完成信息。
在另一种可能实现的方式中，标定装置可通过输出语音数据输出标定完成信息。
在又一种可能实现的方式中，标定装置可通过控制提示灯闪烁输出标定完成信息。
本申请实施例中，标定装置在确定第一人脸轮廓框与热红外图像中的第一人脸区域重合的情况下，确定完成可见光图像与热红外图像之间的标定。
基于本申请实施例提供的技术方案，标定装置可对标定用户界面进行显示，这样，用户可通过移动人脸框，确定人脸框是否与热红外图像中的第一人脸区域重合，进而可完成可见光图像与热红外图像之间的标定，从而降低用户得到可见光图像和热红外图像之间的视差的操作复杂度。
作为一种可选的实施方式，标定装置还执行以下步骤：
1、在上述第一人脸轮廓框与上述热红外图像中的第一人脸区域重合的情况下，将上述第一人脸轮廓框在上述界面中的位置作为终止位置。
2、确定上述第一人脸轮廓框在上述界面中的初始位置与上述终止位置之间的位移差，作为上述热红外图像和可见光图像之间的视差。
本申请实施例中，同名点之间的视差指双目图像中互为同名点的两个像素点在各自图像中的位置之间的差异。
本申请实施例中，双目图像之间的视差为依据双目图像中所有同名点之间的视差得到的视差。可选的，将双目图像中所有同名点之间的视差的均值作为双目图像之间的视差。
本申请实施例中，标定装置通过确定位移差，得到可见光图像和热红外图像之间的视差，从而减少标定装置得到可见光图像和热红外图像之间的视差的数据处理量，以及降低用户得到可见光图像和热红外图像之间的视差的操作复杂度。
作为一种可选的实施方式，标定装置还执行以下步骤：
3、响应于接收到标定完成的指令，在上述第一显示区域中显示上述第一人脸轮廓框与上述第一人脸区域的重合结果。
本申请实施例中，重合结果包括但不限于重合度，人脸额头区域。其中，重合度可以是以下中的一种：数值、第一人脸轮廓框与热红外图像中的第一人脸区域之间的重合效果图。
人脸额头区域指第一人脸轮廓框中的人脸额头区域。由于在基于可见光图像和热红外图像测量人的体温时，通常通过测量人的额头的温度确定人的体温。因此，在标定用户界面中显示人脸额头区域，可使用户获知人脸框中的额头区域与热红外图像中的额头区域之间的重合度。这样，更有利于提升基于热红外图像和可见光图像得到的体温的准确度。
作为一种可选的实施方式，标定装置在执行在标定用户界面中显示第一人脸轮廓框与第一人脸区域的重合结果之前，还执行以下步骤：
4、获取可见光图像。
如上所述，可将光图像与热红外图像为双目图像。在一种获取可见光图像的实现方式中，标定装置接收用户通过输入组件输入的可见光图像。
在另一种获取可见光图像的实现方式中，标定装置接收终端发送的可见光图像。
在又一种获取可见光图像的实现方式中，标定装置装载有可见光成像设备。标定装置使用可见光成像设备采集可见光图像。
5、对上述可见光图像进行人脸识别处理，得到参考像素点区域在上述可见光图像中的位置。
本申请实施例中，参考像素点区域为可见光图像中与第一人脸区域对应的区域。即参考像素点区域与热红外图像中的第一人脸区域对应同一个人的人脸。
标定装置通过对可见光图像进行人脸识别处理，可确定可见光图像中的第一人脸区域的位置。在可见光图像中包含1个第一人脸区域的情况下，标定装置将可见光图像中的第一人脸区域作为参考像素点区域。在可见光图像中包含的第一人脸区域超过1的情况下，标定装置将面积最大的第一人脸区域作为参考像素点区域。
6、依据上述参考视差和上述参考像素点区域在上述可见光图像中的位置，确定上述第一人脸区域在上述热红外图像中的位置。
本申请实施例中，参考视差为可见光图像与热红外图像之间的视差。标定装置依据参考视差和参考像素点区域在可见光图像中的位置，可确定第一人脸区域在热红外图像中的位置。
7、依据上述第一人脸区域在上述热红外图像中的位置和上述终止位置，得到上述第一人脸轮廓框与上述第一人脸区域的重合结果。
在一种可能实现的方式中，标定装置依据第一人脸区域在热红外图像中的位置和终止位置，可确定第一人脸轮廓框与热红外图像中的第一人脸区域之间的面积重合度，作为重合结果。
在另一种可能实现的方式中，标定装置依据第一人脸区域在热红外图像中的位置和终止位置，可得到第一人脸轮廓框与热红外图像中的第一人脸区域之间的重合效果图，作为重合结果。
作为一种可选的实施方式，标定装置在执行步骤102的过程中执行以下步骤：
8、在检测到物体在上述用户界面上滑动的移动指令的情况下，沿上述物体在上述用户界面上的滑动方向移动上述第一人脸轮廓框。
本步骤中，标定装置与触摸显示器之间具有通信连接。标定装置通过检测物体在触摸显示器上滑动操作，检测物体在用户界面上滑动的移动指令。
标定装置在检测到该移动指令的情况下，沿物体在用户界面上的滑动方向移动第一人脸轮廓框。例如，用户用手指在触摸显示器上滑动移动第一人脸轮廓框；又例如，用户用触控笔在触摸显示器上滑动移动第一人脸轮廓框。
可选的，物体与触摸显示器接触的位置可位于第一人脸轮廓框上，物体与触摸显示器接触的位置也可不位于第一人脸轮廓框上。例如，在上述触摸显示器面积较大以致于用户难以单手操作的情况下，可将触摸显示器中用户手指可达区域(如触摸显示器左下角区域或右下角区域)作为控制区域，用户使用物体在控制区域内滑动可移动第一人脸轮廓框。
作为一种可选的实施方式，标定装置在执行步骤102之前还执行以下步骤：
9、在上述标定用户界面中显示至少一个虚拟方向按钮。
本申请实施例中，至少一个虚拟方向按钮包括以下至少一个：向上虚拟按钮、向下虚拟按钮、向左虚拟按钮、向右虚拟按钮。
虚拟方向按钮用于移动第一人脸轮廓框。具体的，向上虚拟按钮被物体触摸，表征第一人脸轮廓框应该向标定用户界面上侧移动；向下虚拟按钮被物体触摸，表征第一人脸轮廓框应该向标定用户界面下侧移动；向左虚拟按钮被物体触摸，表征第一人脸轮廓框应该向标定用户界面左侧移动；向右虚拟按钮被物体触摸，表征第一人脸轮廓框应该向标定用户界面右侧移动。
在执行完步骤9之后，标定装置在执行步骤102的过程中执行一项步骤：
10、在检测到物体通过上述标定装置的屏幕触摸上述至少一个虚拟方向按钮的情况下，依据被触摸的上述虚拟方向按钮所指示的方向移动上述人脸框。
在一种可能实现的方式中，标定装置在检测到物体触摸上述向上虚拟按钮的情况下，将上述第一人脸轮廓框向上述标定用户界面的上侧移动n个像素单位。
在至少一个虚拟方向按钮包括向上虚拟按钮，且标定装置在检测到物体触摸向上虚拟按钮的情况下，将第一人脸轮廓框向标定用户界面上侧移动n个像素单位。n的具体取值可依据实际需求进行设置。
例如，若n＝1，则物体触摸向上虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面上侧移动1个像素单位；若n＝3，则物体触摸向上虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面上侧移动3个像素单位。
在另一种可能实现的方式中，标定装置在检测到物体触摸上述向下虚拟按钮的情况下，将上述第一人脸轮廓框向上述标定用户界面的下侧移动m个像素单位。
在至少一个虚拟方向按钮包括向下虚拟按钮，且标定装置在检测到物体触摸向下虚拟按钮的情况下，将第一人脸轮廓框向标定用户界面下侧移动m个像素单位。m的具体取值可依据实际需求进行设置。
例如，若m＝1，则物体触摸向下虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面下侧移动1个像素单位；若m＝2，则物体触摸向下虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面下侧移动2个像素单位。
在另一种可能实现的方式中，标定装置在检测到物体触摸上述向左虚拟按钮的情况下，将上述第一人脸轮廓框向上述标定用户界面的左侧移动i个像素单位。
在至少一个虚拟方向按钮包括向左虚拟按钮，且标定装置在检测到物体触摸向左虚拟按钮的情况左，将第一人脸轮廓框向标定用户界面左侧移动i个像素单位。i的具体取值可依据实际需求进行设置。
例如，若i＝1，则物体触摸向左虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面左侧移动1个像素单位；若i＝2，则物体触摸向左虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面左侧移动2个像素单位。
在另一种可能实现的方式中，标定装置在检测到物体触摸上述向右虚拟按钮的情况下，将上述第一人脸轮廓框向上述标定用户界面的右侧移动j个像素单位。
在至少一个虚拟方向按钮包括向右虚拟按钮，且标定装置在检测到物体触摸向右虚拟按钮的情况右，将第一人脸轮廓框向标定用户界面右侧移动j个像素单位。j的具体取值可依据实际需求进行设置。
例如，若j＝1，则物体触摸向右虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面右侧移动1个像素单位；若j＝2，则物体触摸向右虚拟按钮一次，标定装置将第一人脸轮廓框向标定用户界面右侧移动2个像素单位。
用户通过触摸虚拟方向按钮可控制第一人脸轮廓框的移动，进而使第一人脸轮廓框与热红外图像中的第一人脸区域重合。
作为一种可选的实施方式，第一人脸轮廓框依据至少一个参考第一人脸轮廓框得到。至少一个参考第一人脸轮廓框通过对至少一张人脸图像进行人脸检测处理得到。至少一张人脸图像的采集条件均为实际采集条件，其中，实际采集条件为标定装置的应用环境下的图像采集条件。
本申请实施例中，人脸检测处理用于对人脸图像进行处理得到人脸轮廓以及人脸关键点。电子设备通过对一张人脸图像进行人脸检测处理，可得到至少一个人脸轮廓和至少一个人脸关键点。电子设备通过对至少一张人脸图像进行人脸检测处理，可得到至少一个参考第一人脸轮廓框。
电子设备进而可依据至少一个参考第一人脸轮廓框得到第一人脸轮廓框。例如，电子设备通过对至少一个参考第一人脸轮廓框进行拟合，得到第一人脸轮廓框。又例如，电子设备可对至少一个参考第一人脸轮廓框取平均值，得到第一人脸轮廓框。再例如，电子设备可将至少一个参考第一人脸轮廓框中的任意一个第一人脸轮廓框作为第一人脸轮廓框。
本申请实施例中，采集条件包括以下一种一个因素：亮度、拍摄角度。例如，候机厅内的采集条件和户外的采集条件不同；又例如，候机厅内有标定装置1和标定装置2，其中，标定装置1的摄像头的拍摄角度与标定装置2的摄像头的拍摄角度不同，即标定装置1的采集条件与标定装置2的采集条件不同。
显然，在不同的采集条件下对同一个人物进行拍摄得到的人脸图像之间存在区别。例如，在采集条件1下采集张三的人脸图像得到人脸图像1，在采集条件2下采集张三的人脸图像得到人脸图像2。此时，人脸图像1中张三的人脸轮廓与人脸图像2中张三的人脸轮廓不同。
本申请实施例中，将标定装置的应用环境下的图像采集条件称为实际采集条件。例如，标定装置应用于A公司的大厅，那么实际采集条件为标定装置在A公司大厅内采集图像时的采集条件。
在至少一张人脸图像的采集条件与实际采集条件相同的情况下，依据至少一个第五第一人脸轮廓框得到的第一人脸轮廓框，与标定装置在实际采集条件下对人脸进行拍摄得到的第一人脸轮廓框更接近，进而可提高可见光图像与热红外图像之间的标定准确度。
作为一种可选的实施方式，第一人脸轮廓框还包括以下至少一个人脸关键点：眼睛关键点、额头关键点、眼睛关键点。在第一人脸轮廓框包括至少一个人脸关键点的情况下，用户在判断第一人脸轮廓框与热红外图像中的第一人脸区域是否重合时，不仅可将第一人脸轮廓框中的人脸轮廓与第一人脸区域的边界是否重合作为判断依据，还可将第一人脸轮廓框中的至少一个人脸关键点与第一人脸区域中对应的人脸关键点是否重合作为判断依据。
例如，假设至少一个人脸关键点包括眼睛关键点。那么用户在判断第一人脸轮廓框是否与热红外图像中的第一人脸区域重合时，不仅将第一人脸轮廓框中的人脸轮廓与第一人脸区域的边界是否重合作为判断依据，还可将第一人脸轮廓框中的眼睛关键点与第一人脸区域中的眼睛关键点是否重合作为判断依据。
作为一种可选的实施方式，标定装置在接收到重置第一人脸轮廓框的指令的情况下，将第一人脸轮廓框重置于初始位置。在该种实施方式中，用户可通过向标定装置输入重置第一人脸轮廓框的指令，使第一人脸轮廓框重新回到初始位置。
作为一种可选的实施方式，标定用户界面还包括第二显示区域，标定装置还执行以下步骤：
11、在上述第二显示区域内显示上述第一人脸轮廓框与上述第一人脸区域的重合效果预览图。
本申请实施例中，第一显示区域与第二显示区域不同。可选的，第二显示区域与第一显示区域之间不存在交集。
本申请实施例中，重合效果预览图包括第二人脸轮廓框与第二人脸区域的重合效果图。其中，第二人脸框内标记有测温区域。可选的，该测温区域可以是用特殊颜色标注的点。例如，假设测温区域为绿色的点。说明该绿色的点为热红外成像设备的测温点。
可选的，该测温区域可以是用框标记出来的区域，此时，该测温区域为热红外成像设备的测温区域。
本申请实施例中，第二人脸轮廓框在第二显示区域内的位置与第一人脸轮廓框在第一显示区域内的位置对应。即若第一人脸轮廓框在第一显示区域内向左移动，那么第二人脸框在第二显示区域内向左移动；若第一人脸轮廓框在第一显示区域内向上移动，那么第二人脸框在第二显示区域内向上移动。
例如，用户通过点击向上虚拟按钮，使第一人脸轮廓框在第一显示区域内向上移动，此时，第二人脸轮廓框在第二显示区域内向上移动。
可选的，第一人脸轮廓框在第一显示区域内的移动距离与第二人脸轮廓框在第二显示区域内的移动距离之间的比值为预览比例。
例如，假设预览比例为2。若用户通过点击向上虚拟按钮，使第一人脸轮廓框在第一显示区域内向上移动4个像素点单位，此时第二人脸轮廓框在第二显示区域内向上移动2个像素点单位。
本申请实施例中，第二人脸区域与第一人脸区域对应，即在重合效果预览图中，第二人脸区域为第一人脸区域的预览图。可选的，第一人脸区域的尺寸与第二人脸区域的尺寸之间的比值为预览比例。
标定装置通过执行步骤11，可在移动第一人脸轮廓框的过程中，通过重合效果预览图显示测温区域的位置。这样，用户可获知热红外成像设备在采集热红外图像时，对测温对象的哪个部位进行测温。例如，测温区域在第二人脸区域的右额头区域内，那么，依据可见光图像和热红外图像得到的体温，为测温对象的右额头区域的温度。
作为一种可选的实施方式，在执行步骤103之前，标定装置还执行以下步骤：
12、响应于接收到针对上述热红外图像和上述人脸框的放大指令，按照上述放大指令放大上述热红外图像和上述人脸框。
本申请实施例中，放大指令用于指示标定装置放大热红外图像和人脸框。可选的，标定装置按照放大指令同时放大热红外图像和第一人脸框。
13、响应于接收到针对上述热红外图像和上述人脸框的缩小指令，按照上述缩小指令放大上述热红外图像和上述人脸框。
本申请实施例中，缩小指令用于指示标定装置放大热红外图像和人脸框。可选的，标定装置按照放大指令同时缩小热红外图像和第一人脸框。
用户通过向标定装置输入放大指令或缩小指令，以更好的观察第一人脸框与第一人脸区域之间的重合效果。
可选的，用户向标定装置输入放大指令，可以是触摸第一显示区域中的放大按钮；用户向标定装置输入缩小指令，可以是触摸第一显示区域中的放大按钮。
基于本申请实施例公开的技术方案，本申请实施例还提供了一种可能的应用场景。
如上所述，在使用测温终端进行非接触式测温时，测温终端从RGB图像中确定第一人脸区域，再从热红外图像中确定与该第一人脸区域对应的像素点区域，作为目标像素点区域。测温终端依据目标像素点区域的温度，得到待测量对象的体温。但若RGB图像和热红外图像之间存在较大的视差，得到的待测量对象的体温的误差较大，甚至可能得到不合理的体温。
例如，使用测温终端测量张三的体温，得到张三的体温为30度；又例如，使用测温终端测量张三的体温，得到张三的体温为43度。显然30度和40度均是不合理的体温。
当得到的体温明显不合理时，其原因可能是RGB摄像头和热成像摄像头之间的位移差较大，导致RGB图像与热红外图像之间的视差较大。此时，用户可通过基于本申请实施例提供的技术方案，确定RGB图像和热红外图像之间的视差，从提高待测量对象的体温的准确度。
应理解，在采集张三的人脸图像时，测温终端在通过显示器显示采集第一人脸轮廓框，以使张三通过调整脸的位置，使张三的脸部处于采集第一人脸轮廓框内。其中，采集第一人脸轮廓框在显示器的标定用户界面中的位置与第一人脸轮廓框在标定用户界面中的位置相同。
测温终端在确定张三的脸部处于采集第一人脸轮廓框内的情况下，使用RGB摄像头采集包含张三的脸部的图像作为RGB图像，并使用热成像摄像头采集包含张三的脸部的图像作为热红外图像。
测温终端基于本申请实施例提供的技术方案、可见RGB图像和热红外图像，可完成对RGB图像和热红外图像之间的标定。
具体的，用户可通过移动第一人脸轮廓框使第一人脸轮廓框与热红外图像中的第一人脸区域重合，并向测温终端输入第一人脸轮廓框与热红外图像中的第一人脸区域重合的指令。测温终端进而可确定RGB图像与热红外图像之间的视差。这样，测温终端可基于该视差，从热红外图像中确定目标像素点区域，从而提高待测量对象的体温的准确度。
例如，图3所示为显示第一人脸轮廓框和热红外图像的标定用户界面。在该用户界面中，虚线第一人脸轮廓框为第一人脸轮廓框。在该用户界面的下方有四个虚拟方向按钮，分别用于控制第一人脸轮廓框向用户界面的上侧移动、向用户界面的下侧移动、向用户界面的左侧移动、向用户界面的右侧移动。用户通过触摸虚拟方向按钮，可移动第一人脸轮廓框使第一人脸轮廓框与热红外图像中的第一人脸区域重合。
本领域技术人员可以理解，在具体实施方式的上述方法中，各步骤的撰写顺序并不意味着严格的执行顺序而对实施过程构成任何限定，各步骤的具体执行顺序应当以其功能和可能的内在逻辑确定。
上述详细阐述了本申请实施例的方法，下面提供了本申请实施例的装置。
请参阅图4，图4为本申请实施例提供的一种标定装置的结构示意图，该标定装置1包括：第一处理单元11、第二处理单元12、输出单元13、第一显示单元14、获取单元15、第三处理单元16、第四处理单元17、第五处理单元18、第二显示单元19和重置单元20，其中：
第一处理单元11，用于响应于接收到的标定触发指令，进入标定用户界面，所述界面包括热红外图像和第一人脸轮廓框；
第二处理单元12，用于响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框；
输出单元13，用于在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。
结合本申请任一实施方式，所述标定装置1还包括：
第一显示单元14，用于响应于接收到标定完成的指令，在所述标定用户界面中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果，其中，所述重合结果包括但不限于重合度，人脸额头区域。
结合本申请任一实施方式，所述标定装置还包括：
获取单元15，用于在所述标定用户界面中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果之前，获取可见光图像；
第三处理单元16，用于对所述可见光图像进行人脸识别处理，得到所述参考像素点区域在所述可见光图像中的位置；所述参考像素点区域为所述可见光图像中与所述第一人脸区域对应的区域；
第四处理单元17，用于依据参考视差和所述参考像素点区域在所述可见光图像中的位置，确定所述第一人脸区域在所述热红外图像中的位置；所述参考视差为所述可见光图像与所述热红外图像之间的视差；
第五处理单元18，用于依据所述第一人脸区域在所述热红外图像中的位置和所述终止位置，得到所述第一人脸轮廓框与所述第一人脸区域的重合结果。
结合本申请任一实施方式，所述第二处理单元12，用于：
在检测到物体在所述用户界面上滑动的移动指令的情况下，沿所述物体在所述用户界面上的滑动方向移动所述第一人脸轮廓框。
结合本申请任一实施方式，所述标定装置，还包括：第二显示单元19，用于在所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框之前，在所述标定用户界面中显示至少一个虚拟方向按钮；所述至少一个虚拟方向按钮包括以下至少一个：向上虚拟按钮、向下虚拟按钮、向左虚拟按钮、向右虚拟按钮；
所述第二处理单元12，用于：
在检测到物体通过所述标定装置的屏幕触摸所述至少一个虚拟方向按钮的情况下，依据被触摸的所述虚拟方向按钮所指示的方向移动所述人脸框。
结合本申请任一实施方式，所述第一人脸轮廓框依据至少一个参考第一人脸轮廓框得到；所述至少一个参考第一人脸轮廓框通过对至少一张人脸图像进行人脸检测处理得到；所述至少一张人脸图像的采集条件均为实际采集条件；所述实际采集条件为所述标定装置的应用环境下的图像采集条件。
结合本申请任一实施方式，所述标定装置1还包括：
重置单元20，用于在接收到重置所述第一人脸轮廓框的指令的情况下，将所述第一人脸轮廓框重置于初始位置。
结合本申请任一实施方式，所述第一人脸轮廓框包括至少一个人脸关键点；
所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合包括：所述第一人脸轮廓框与所述第一人脸区域的边界重合以及所述至少一个人脸关键点与所述第一人脸区域中对应的人脸关键点重合。
结合本申请任一实施方式，所述标定用户界面还包括与所述第一区域不同的第二显示区域，所述第一处理单元11，还用于在所述第二显示区域内显示所述第一人脸轮廓框与所述第一人脸区域的重合效果预览图；所述重合效果预览图包括第二人脸轮廓框与所述第二人脸区域的重合效果图；所述第二人脸框内标记有测温区域；所述第二人脸轮廓框在所述第二显示区域内的位置与所述第一人脸轮廓框在所述第一显示区域内的位置对应；所述第二人脸区域与所述第一人脸区域对应。
结合本申请任一实施方式，所述第二处理单元12，还用于在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息之前，响应于接收到针对所述热红外图像和所述第一人脸框的放大指令，按照所述放大指令放大所述热红外图像和所述第一人脸框；
响应于接收到针对所述热红外图像和所述第一人脸框的缩小指令，按照所述缩小指令放大所述热红外图像和所述第一人脸框。
在一些实施例中，本申请实施例提供的装置具有的功能或包含的模块可以用于执行上文方法实施例描述的方法，其具体实现可以参照上文方法实施例的描述，为了简洁，这里不再赘述。
图5为本申请实施例提供的一种标定装置的硬件结构示意图。该标定装置2包括处理器21，存储器22，输入装置23，输出装置24。该处理器21、存储器22、输入装置23和输出装置24通过连接器相耦合，该连接器包括各类接口、传输线或总线等等，本申请实施例对此不作限定。应当理解，本申请的各个实施例中，耦合是指通过特定方式的相互联系，包括直接相连或者通过其他设备间接相连，例如可以通过各类接口、传输线、总线等相连。
处理器21可以是一个或多个图形处理器(graphics processing unit，GPU)，在处理器21是一个GPU的情况下，该GPU可以是单核GPU，也可以是多核GPU。可选的，处理器21可以是多个GPU构成的处理器组，多个处理器之间通过一个或多个总线彼此耦合。可选的，该处理器还可以为其他类型的处理器等等，本申请实施例不作限定。
存储器22可用于存储计算机程序指令，以及用于执行本申请方案的程序代码在内的各类计算机程序代码。可选地，存储器包括但不限于是随机存储记忆体(random accessmemory，RAM)、只读存储器(read-only memory，ROM)、可擦除可编程只读存储器(erasableprogrammable read only memory，EPROM)、或便携式只读存储器(compact disc read-only memory，CD-ROM)，该存储器用于相关指令及数据。
输入装置23用于输入数据和/或信号，以及输出装置24用于输出数据和/或信号。输入装置23和输出装置24可以是独立的器件，也可以是一个整体的器件。
可理解，本申请实施例中，存储器22不仅可用于存储相关指令，还可用于存储相关数据，如该存储器22可用于存储通过输入装置23获取的标定触发指令，又或者该存储器22还可用于存储通过处理器21得到的可见光图像与所述热红外图像之间的视差等等，本申请实施例对于该存储器中具体所存储的数据不作限定。
可以理解的是，图5仅仅示出了一种标定装置的简化设计。在实际应用中，标定装置还可以分别包含必要的其他元件，包含但不限于任意数量的输入/输出装置、处理器、存储器等，而所有可以实现本申请实施例的标定装置都在本申请的保护范围之内。
本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。所属领域的技术人员还可以清楚地了解到，本申请各个实施例描述各有侧重，为描述的方便和简洁，相同或类似的部分在不同实施例中可能没有赘述，因此，在某一实施例未描述或未详细描述的部分可以参见其他实施例的记载。
在本申请所提供的几个实施例中，应该理解到，所揭露的***、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者通过所述计算机可读存储介质进行传输。所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(digital subscriberline，DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，数字通用光盘(digital versatiledisc，DVD))、或者半导体介质(例如固态硬盘(solid state disk，SSD))等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，该流程可以由计算机程序来指令相关的硬件完成，该程序可存储于计算机可读取存储介质中，该程序在执行时，可包括如上述各方法实施例的流程。而前述的存储介质包括：只读存储器(read-only memory，ROM)或随机存储存储器(random access memory，RAM)、磁碟或者光盘等各种可存储程序代码的介质。

Claims (13)

1.一种标定方法，其特征在于，所述方法包括：
响应于接收到的标定触发指令，进入标定用户界面，所述界面的第一显示区域包括热红外图像和第一人脸轮廓框；
响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框；
在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。
2.根据权利要求1所述的方法，其特征在于，所述方法还包括：
响应于接收到标定完成的指令，在所述第一显示区域中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果，其中，所述重合结果包括但不限于重合度，人脸额头区域。
3.根据权利要求2所述的方法，其特征在于，所述在所述第一显示区域中显示所述第一人脸轮廓框与所述第一人脸区域的重合结果之前，所述方法还包括：
获取可见光图像；
对所述可见光图像进行人脸识别处理，得到所述参考像素点区域在所述可见光图像中的位置；所述参考像素点区域为所述可见光图像中与所述第一人脸区域对应的区域；
依据参考视差和所述参考像素点区域在所述可见光图像中的位置，确定所述第一人脸区域在所述热红外图像中的位置；所述参考视差为所述可见光图像与所述热红外图像之间的视差；
依据所述第一人脸区域在所述热红外图像中的位置和所述终止位置，得到所述第一人脸轮廓框与所述第一人脸区域的重合结果。
4.根据权利要求1至3中任意一项所述的方法，其特征在于，所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框，包括：
在检测到物体在所述用户界面上滑动的移动指令的情况下，沿所述物体在所述用户界面上的滑动方向移动所述第一人脸轮廓框。
5.根据权利要求1至3中任意一项所述的方法，其特征在于，所述标定方法应用于标定装置；
在所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框之前，所述方法还包括：
在所述标定用户界面中显示至少一个虚拟方向按钮；所述至少一个虚拟方向按钮包括以下至少一个：向上虚拟按钮、向下虚拟按钮、向左虚拟按钮、向右虚拟按钮；
所述响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框，包括：
在检测到物体通过所述标定装置的屏幕触摸所述至少一个虚拟方向按钮的情况下，依据被触摸的所述虚拟方向按钮所指示的方向移动所述人脸框。
6.根据权利要求4或5所述的方法，其特征在于，所述第一人脸轮廓框依据至少一个参考第一人脸轮廓框得到；所述至少一个参考第一人脸轮廓框通过对至少一张人脸图像进行人脸检测处理得到；所述至少一张人脸图像的采集条件均为实际采集条件；所述实际采集条件为所述标定装置的应用环境下的图像采集条件。
7.根据权利要求1至6中任意一项所述的方法，其特征在于，所述方法还包括：
在接收到重置所述第一人脸轮廓框的指令的情况下，将所述第一人脸轮廓框重置于初始位置。
8.根据权利要求1至7中任意一项所述的方法，其特征在于，所述第一人脸轮廓框包括至少一个人脸关键点；
所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合包括：所述第一人脸轮廓框与所述第一人脸区域的边界重合以及所述至少一个人脸关键点与所述第一人脸区域中对应的人脸关键点重合。
9.根据权利要求1至8中任意一项所述的方法，其特征在于，所述标定用户界面还包括与所述第一区域不同的第二显示区域，所述方法还包括：
在所述第二显示区域内显示所述第一人脸轮廓框与所述第一人脸区域的重合效果预览图；所述重合效果预览图包括第二人脸轮廓框与所述第二人脸区域的重合效果图；所述第二人脸框内标记有测温区域；所述第二人脸轮廓框在所述第二显示区域内的位置与所述第一人脸轮廓框在所述第一显示区域内的位置对应；所述第二人脸区域与所述第一人脸区域对应。
10.根据权利要求1至9中任意一项所述的方法，其特征在于，所述在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息之前，所述方法还包括：
响应于接收到针对所述热红外图像和所述第一人脸框的放大指令，按照所述放大指令放大所述热红外图像和所述第一人脸框；
响应于接收到针对所述热红外图像和所述第一人脸框的缩小指令，按照所述缩小指令放大所述热红外图像和所述第一人脸框。
11.一种标定装置，其特征在于，所述标定装置包括：
第一处理单元，用于响应于接收到的标定触发指令，进入标定用户界面，所述界面的第一显示区域包括热红外图像和第一人脸轮廓框；
第二处理单元，用于响应于接收到移动所述第一人脸轮廓框的操作指令，按照所述操作指令移动所述第一人脸轮廓框；
输出单元，用于在所述第一人脸轮廓框与所述热红外图像中的第一人脸区域重合的情况下，输出标定完成信息。
12.一种电子设备，其特征在于，包括：处理器和存储器，所述存储器用于存储计算机程序代码，所述计算机程序代码包括计算机指令，在所述处理器执行所述计算机指令的情况下，所述电子设备执行如权利要求1至10中任意一项所述的方法。
13.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有计算机程序，所述计算机程序包括程序指令，在所述程序指令被处理器执行的情况下，使所述处理器执行权利要求1至10中任意一项所述的方法。
CN202011420092.0A 2020-12-07 2020-12-07 标定方法及装置、电子设备及存储介质 Active CN112529947B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202011420092.0A CN112529947B (zh) 2020-12-07 2020-12-07 标定方法及装置、电子设备及存储介质
PCT/CN2021/096072 WO2022121243A1 (zh) 2020-12-07 2021-05-26 标定方法及装置、电子设备、存储介质及程序产品
TW110125930A TW202223739A (zh) 2020-12-07 2021-07-14 標定方法及電子設備和電腦可讀儲存介質

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011420092.0A CN112529947B (zh) 2020-12-07 2020-12-07 标定方法及装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN112529947A true CN112529947A (zh) 2021-03-19
CN112529947B CN112529947B (zh) 2023-08-01

Family

ID=74998028

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011420092.0A Active CN112529947B (zh) 2020-12-07 2020-12-07 标定方法及装置、电子设备及存储介质

Country Status (3)

Country Link
CN (1) CN112529947B (zh)
TW (1) TW202223739A (zh)
WO (1) WO2022121243A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022121243A1 (zh) * 2020-12-07 2022-06-16 北京市商汤科技开发有限公司 标定方法及装置、电子设备、存储介质及程序产品

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1811771A1 (en) * 2006-01-20 2007-07-25 Infrared Solutions, Inc. Camera with visible light and infrared image blending
US20150304636A1 (en) * 2014-04-22 2015-10-22 Fluke Corporation Methods for end-user parallax adjustment
WO2019071489A1 (zh) * 2017-10-11 2019-04-18 深圳传音通讯有限公司 一种基于智能终端的拍照测温方法及拍照测温***
CN110288534A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备以及存储介质
CN110991266A (zh) * 2019-11-13 2020-04-10 北京智芯原动科技有限公司 一种双目人脸活体检测方法及装置
CN111209822A (zh) * 2019-12-30 2020-05-29 南京华图信息技术有限公司 一种热红外图像的人脸检测方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105931240B (zh) * 2016-04-21 2018-10-19 西安交通大学 三维深度感知装置及方法
CN110909634A (zh) * 2019-11-07 2020-03-24 深圳市凯迈生物识别技术有限公司 可见光与双红外线相结合的快速活体检测方法
CN111507200A (zh) * 2020-03-26 2020-08-07 北京迈格威科技有限公司 体温检测方法、体温检测装置、及双光相机
CN111739069B (zh) * 2020-05-22 2024-04-26 北京百度网讯科技有限公司 图像配准方法、装置、电子设备及可读存储介质
CN112001886A (zh) * 2020-07-17 2020-11-27 深圳市优必选科技股份有限公司 一种温度检测方法、装置、终端及可读存储介质
CN112529947B (zh) * 2020-12-07 2023-08-01 北京市商汤科技开发有限公司 标定方法及装置、电子设备及存储介质

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1811771A1 (en) * 2006-01-20 2007-07-25 Infrared Solutions, Inc. Camera with visible light and infrared image blending
CN101067710A (zh) * 2006-01-20 2007-11-07 红外线解决方案公司 具有可见光与红外图像混合的相机
US20150304636A1 (en) * 2014-04-22 2015-10-22 Fluke Corporation Methods for end-user parallax adjustment
WO2019071489A1 (zh) * 2017-10-11 2019-04-18 深圳传音通讯有限公司 一种基于智能终端的拍照测温方法及拍照测温***
CN110288534A (zh) * 2019-06-28 2019-09-27 Oppo广东移动通信有限公司 图像处理方法、装置、电子设备以及存储介质
CN110991266A (zh) * 2019-11-13 2020-04-10 北京智芯原动科技有限公司 一种双目人脸活体检测方法及装置
CN111209822A (zh) * 2019-12-30 2020-05-29 南京华图信息技术有限公司 一种热红外图像的人脸检测方法

Non-Patent Citations (2)

* Cited by examiner, † Cited by third party
Title
GUILLAUME-ALEXANDRE BILODEAU ET AL.: "Silhouette-based features for visible-infrared registration", 《 IEEE XPLORE》 *
王俊影;李扬;袁浩期;简单;郝敏;: "可见光与红外图像自动配准算法的设计与实现", 机电工程技术, no. 11 *

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022121243A1 (zh) * 2020-12-07 2022-06-16 北京市商汤科技开发有限公司 标定方法及装置、电子设备、存储介质及程序产品

Also Published As

Publication number Publication date
TW202223739A (zh) 2022-06-16
CN112529947B (zh) 2023-08-01
WO2022121243A1 (zh) 2022-06-16

Similar Documents

Publication Publication Date Title
CN105210144B (zh) 显示控制装置、显示控制方法和记录介质
JP6057396B2 (ja) ３次元ユーザインタフェース装置及び３次元操作処理方法
US9256986B2 (en) Automated guidance when taking a photograph, using virtual objects overlaid on an image
US20150277555A1 (en) Three-dimensional user interface apparatus and three-dimensional operation method
US9268410B2 (en) Image processing device, image processing method, and program
EP2977924A1 (en) Three-dimensional unlocking device, three-dimensional unlocking method and program
EP2905680B1 (en) Information processing apparatus, information processing method, and program
CN105992988A (zh) 用于检测第一对象与第二对象之间的触摸的方法和设备
JP6723814B2 (ja) 情報処理装置、その制御方法、プログラム、及び記憶媒体
JP6314251B2 (ja) 操作入力装置、操作入力方法及びプログラム
JP2013250882A5 (zh)
KR20070037773A (ko) 표시기기에서 사용자 명령 입력 장치 및 방법
JPWO2017057106A1 (ja) 入力装置、入力方法、及びプログラム
US9560272B2 (en) Electronic device and method for image data processing
JP2012238293A (ja) 入力装置
CN112529947B (zh) 标定方法及装置、电子设备及存储介质
CN104699279A (zh) 可悬浮操作的位移检测装置和包含该装置的电脑***
US20150268735A1 (en) User interface device and user interface method
CN113873159A (zh) 图像处理方法、装置及电子设备
JP2019087136A (ja) 画面表示制御方法および画面表示制御システム
US20220083145A1 (en) Information display apparatus using line of sight and gestures
JP2014052934A (ja) 携帯端末装置、プログラムおよび入力方法
JP2017130047A (ja) 情報処理装置、情報処理システム、及びプログラム
CN114578956A (zh) 设备控制方法、装置、虚拟穿戴设备以及存储介质
CN111766947A (zh) 一种显示方法、装置、可穿戴设备及介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40039110

Country of ref document: HK

GR01 Patent grant
GR01 Patent grant