CN109998501A - 生理指标及心理指标的检测方法、装置及终端设备 - Google Patents

生理指标及心理指标的检测方法、装置及终端设备 Download PDF

Info

Publication number
CN109998501A
CN109998501A CN201910233982.1A CN201910233982A CN109998501A CN 109998501 A CN109998501 A CN 109998501A CN 201910233982 A CN201910233982 A CN 201910233982A CN 109998501 A CN109998501 A CN 109998501A
Authority
CN
China
Prior art keywords
target person
signal
physical signs
target area
reference signal
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910233982.1A
Other languages
English (en)
Inventor
曾光
张祺
曹玥
石元庆
刘奇玮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen City Technology Co Ltd
Original Assignee
Shenzhen City Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen City Technology Co Ltd filed Critical Shenzhen City Technology Co Ltd
Priority to CN201910233982.1A priority Critical patent/CN109998501A/zh
Publication of CN109998501A publication Critical patent/CN109998501A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/145—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14542—Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Animal Behavior & Ethology (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • General Health & Medical Sciences (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Medical Informatics (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Cardiology (AREA)
  • Physiology (AREA)
  • Developmental Disabilities (AREA)
  • Educational Technology (AREA)
  • Social Psychology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Pulmonology (AREA)
  • Optics & Photonics (AREA)
  • Image Analysis (AREA)

Abstract

本发明适用于计算机技术领域，提供了一种生理指标及心理指标的检测方法、装置及终端设备，所述方法包括：分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。本发明通过多个图像采集装置从不同角度获取用户的人脸视频，使用户在运动时也能获取到精确的人脸视频，进而对比各个人脸视频，确定目标人物的参考信号，从而既提高生理指标及心理指标的检测的准确性，又能优化用户的体验。

Description

生理指标及心理指标的检测方法、装置及终端设备
技术领域
本发明属于计算机技术领域，尤其涉及一种生理指标及心理指标的检测方法、装置及终端设备。
背景技术
生理指标是反映人体生理健康的重要依据，在医学实践中占有重要的地位，随着现代医疗手段的不断进步，以及移动医疗的飞速发展，基于便携设备的人体健康状况检测已经成为一个热点。
而在基于便携设备的人体健康状况检测方法中，基于图像的健康状况检测由于只需拍摄人体某个部位的图像即可检测到对应的生理指标，因此受到大众的广泛关注。
但是，目前在使用基于图像的人体生理指标及心理指标的检测设备检测生理指标时，要求检测部位必须保持相对静止，且正对图像采集装置，否则图像采集装置无法检测到清晰的图像，进而导致输出的生理指标及心理指标的检测结果准确性差的问题。
发明内容
有鉴于此，本发明实施例提供了生理指标及心理指标的检测方法、装置及终端设备，以解决现有技术中因无法检测到清晰图像而导致的生理指标及心理指标的检测结果准确性差的问题。
本发明实施例的第一方面提供了一种生理指标及心理指标的检测方法，包括：
分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；
根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；
根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。
本发明实施例的第二方面提供了一种生理指标及心理指标的检测装置，包括：
颜色信号获取模块，用于分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；
参考信号获取模块，用于根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；
指标检测模块，用于根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。
本发明实施例的第三方面提供了一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，所述处理器执行所述计算机程序时实现如上所述生理指标及心理指标的检测方法的步骤。
本发明实施例的第四方面提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上所述生理指标及心理指标的检测方法的步骤。
本发明实施例与现有技术相比存在的有益效果是：本发明实施例分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。本发明实施例通过多个图像采集装置从不同角度获取用户的人脸视频，使用户在运动时也能获取到精确的人脸视频，进而对比各个人脸视频，确定所述目标人物的参考信号，从而既提高生理指标及心理指标的检测的准确性，又能优化用户的体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的生理指标及心理指标的检测方法的实现流程示意图；
图2是本发明实施例提供的图1中S101的实现流程示意图；
图3是本发明实施例提供的图2中S202的实现流程示意图；
图4是本发明实施例提供的图1中S102的实现流程示意图；
图5是本发明实施例提供的生理指标及心理指标的检测装置的结构示意图；
图6是本发明实施例提供的终端设备的示意图；
图7是本发明实施例提供的图像采集装置、人脸区域和目标区域之间关系的示意图。
具体实施方式
以下描述中，为了说明而不是为了限定，提出了诸如特定***结构、技术之类的具体细节，以便透彻理解本发明实施例。然而，本领域的技术人员应当清楚，在没有这些具体细节的其它实施例中也可以实现本发明。在其它情况中，省略对众所周知的***、装置、电路以及方法的详细说明，以免不必要的细节妨碍本发明的描述。
本发明的说明书和权利要求书及上述附图中的术语“包括”以及它们任何变形，意图在于覆盖不排他的包含。例如包含一系列步骤或单元的过程、方法或***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。此外，术语“第一”、“第二”和“第三”等是用于区别不同对象，而非用于描述特定顺序。
为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。
实施例1：
图1示出了本发明的一个实施例提供的一种生理指标及心理指标的检测方法的实现流程，本实施例的流程执行主体可以是终端设备，其过程详述如下：
S101：分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频。
在本实施例中，生理指标及心理指标的检测***可以包括图像采集装置和终端设备，终端设备获取图像采集装置发送的人脸视频。图像采集装置采集目标人物的人脸图像，并合成人脸视频。由于单个图像采集装置拍摄人脸视频时可能受人的运动、环境光线等影响，得到的人脸视频可能存在拍摄不清楚的情况。因此，在本实施例中，为了解决单个图像采集装置造成的拍摄的视频信噪差的问题，可以采取多个图像采集装置，图像采集装置可以设置在日常生活区域的多个不同方位，例如，车辆行驶过程中，驾驶员为目标人物，图像采集装置可以设置在驾驶位前方、左前方、右前方三个位置，用于从三个方向拍摄驾驶员的行驶过程中的人脸视频。办公过程中，目标人物为工作人员，图像采集装置可以设置在办公位前方、左前方和右前方三个位置，用于拍摄工作人员的人脸视频。
在本实施例中，图像采集装置既可以设置3个图像采集装置，也可以为设置在人脸前方视野区域的多个图像采集装置，如此，目标人物随意的改变人脸的朝向，均会有图像采集装置能够捕捉到清晰完整的人脸视频。
在本实施例中，图像采集装置包括摄像头、摄像机、相机、扫描仪、手机、平板电脑等其他带有拍照功能的设备，以及视频采集卡。
当图像采集装置采集到人脸视频时，各个图像采集装置按照预设时间段将人脸视频发送至终端设备，预设时间段可以为5s或者10s。终端设备可以为手机、计算机电脑、笔记本等智能终端。
在本实施例中，终端设备获取到人脸视频后，提取各个图像采集装置对应的人脸视频的颜色信号，颜色信号可以为RGB信号。
S102：根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号。
S103：根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。
在本实施例中，所述生理指标包括心率、呼吸、心率变异性、血氧、和血压变化值中的一种或多种，所述心理指标包括清醒、生理疲惫、昏昏欲睡、紧张、放松、痛苦、愉悦等中的一种或多种。
从上述实施例可知，本发明实施例分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。本发明实施例通过多个图像采集装置从不同角度获取用户的人脸视频，使用户在运动时也能获取到精确的人脸视频，进而对比各个人脸视频，确定所述目标人物的参考信号，从而既提高生理指标及心理指标的检测的准确性，又能优化用户的体验。
如图2所示，在本发明的一个实施例中，图2示出了图1中S101的具体实现流程，其过程详述如下：
S201：检测各个人脸视频中的人脸区域视频及特征点，并利用所述特征点将第一人脸区域划分为至少一个目标区域，所述第一人脸区域为任一图像采集装置采集的人脸区域。
在本实施例中，在获取到人脸视频后，在人脸视频中检测人脸区域和特征点，特征点为识别出的人脸中的某个位置点，可以为鼻翼，嘴角等位置，根据该特征点将人脸区域划分为至少一个目标区域，得到各个目标区域对应的人脸视频。
S202：分别提取所述第一人脸区域对应的各个目标区域的颜色信号。
在本实施例中，分别提取各个目标区域对应的人脸视频的颜色信号。
在本实施例中，在获取到颜色信号后，还可以对颜色信号进行滤波处理，得到滤波后的颜色信号。
在本发明的一个实施例中，所述图像采集装置包括RGB彩色摄像头和红外摄像头，所述颜色信号包括RGB信号和灰度信号。
在本实施例中，图像采集装置可以为RGB彩色摄像头，也可以为红外摄像头，当图像采集装置为红外摄像头时，可以避免外界光线变化对生理指标检测的干扰。
如图3所示，在本发明的一个实施例中，图3示出了图2中S202的具体实现流程，其过程详述如下：
S301：计算所述第一人脸区域中第一位置对应的目标区域的第一帧图像的色值平均值，所述第一位置为人脸中的任一位置，所述第一帧图像为所述目标区域对应的人脸视频的任一帧图像。
在本实施例中，由于第一位置对应的目标区域的图像的像素点可能不同，因此可以获取每个人脸区域的各个目标区域中每一帧图像中所有像素点的色值，然后计算某个目标区域的每一帧图像对应的色值平均值。
具体地，假如图像采集装置为RGB彩色摄像头，则获取每个人脸区域的各个目标区域中每帧图像中所有像素点的RGB值，然后对人脸区域的某个目标区域的第一帧图像中所有像素点的RGB值求平均，得到该目标区域第一帧图像的RGB平均值，进而分别得到该目标区域每帧图像的RGB平均值。
假如图像采集装置为红外摄像头，则获取每个人脸区域的各个目标区域中每帧图像中所有像素点的灰度值，然后对该目标区域的第一帧图像中所有像素点的灰度值求平均，得到第一帧图像的灰度平均值，从而分别得到该目标区域每帧图像的灰度平均值。
S302：根据所述第一人脸区域中第一位置对应的目标区域的第一帧图像的色值平均值，得到所述第一人脸区域中第一位置对应的目标区域的色值平均值矩阵。
在本实施例中，如图7所示，假设总共K个图像采集装置，每个图像采集装置分别采集一个包括M帧图像的人脸视频，若图像采集装置为RGB彩色摄像头，则第一位置对应的第一目标区域的第m帧的色值平均值矩阵为
式(1)中，R11(m)，G11(m)和B11(m)分别为第一位置的第m帧图像R红色信道的色值平均值、G绿色信道的色值平均值和B蓝色信道的色值平均值，R1K(m)，G1K(m)和B1K(m)分别为第一位置包含像素的第K个图像采集装置的第m帧图像的R的色值平均值、G的色值平均值和B的色值平均值。
具体地，包括K个图像采集装置M帧视频的第一位置对应的目标区域的R平均值矩阵如式(2)所示：
另外，G1和B1矩阵类似。其中为一个1xM的向量。
假设图像采集装置为红外摄像头，则包括K个图像采集装置M帧视频的第一位置对应的目标区域的色值平均值矩阵为：
其中，H11(m)为第一个图像采集装置对应的第一位置的第一帧图像的灰度平均值，H1K(m)为第K个图像采集装置的第一位置的第m帧图像的灰度平均值。
S303：将所述第一人脸区域中第一位置对应的目标区域的色值平均值矩阵中的色值平均值进行归一化处理，得到所述所述第一人脸区域中第一位置对应的目标区域的归一化色值矩阵。
在本实施例中，第一人脸区域中第一位置对应的目标区域的归一化色值矩阵为：第一位置对应的目标区域的RGB归一化矩阵为第一位置对应的目标区域的RGB归一化矩阵展开具体为：
式(4)(5)(6)中，mean代表均值，var代表方差。
如图4所示，在本发明的一个实施例中，图4示出了图1中S102的具体实现流程，其过程详述如下：
S401：根据各个图像采集装置的第一位置对应的目标区域的归一化色值矩阵，确定各个图像采集装置的第一位置对应的目标区域的信噪比。
在本实施例中，第一位置对应的各个图像采集装置的目标区域均有M个归一化后信号，其中第k个图像采集装置的第一位置对应的目标区域的归一化后的信号为：
式(7)中，针对所有的K路归一化信号，分别计算其信噪比得到SNRk,其中1<＝k<＝K。
S402：选取各个图像采集装置的第一位置对应的目标区域中信噪比最高的颜色信号作为所述第一位置的参考子信号。
其中，第一位置的第一个目标区域的参考子信号k′满足SNRkmax＝max(SNR).其中kmax代表的是信噪比最高的那个图像采集设备。
S403：获取所述目标人物的人脸的参考子信号，得到所述目标人物的参考信号
在本实施例中，比较多个图像采集装置采集的人脸同一位置的人脸视频的颜色信号的信噪比，并将信噪比最高的RGB或者灰度离散信号作为该同一位置的参考子信号，参照上述方法，依次得到各个位置的参考子信号，从而得到目标人物人脸的参考信号。比如人脸颜色的参考信号RGBface可以写为：
人脸颜色的参考信号为其中RGBn代表人脸第n个位置对应的目标区域的RGB参考子信号。
人脸的灰度参考信号为其中Huen代表人脸第n个位置对应的目标区域的灰度参考子信号。
从上述实施例可知，通过获取各个目标区域来自不同图像采集设备的颜色信号的信噪比，相同位置的目标区域均取信噪比最高的作为该位置的参考信号，从而提高目标人物的人脸的参考信号的整体信噪比，进而得到更加准确的生理指标及心理指标。
在本实施例中，我们可以利用如PCA等方法，将RGBface降维为如心率等生理指标信号。
在本实施例中，若多个图像采集装置拍摄人脸视频，而某一个图像采集装置拍摄的人脸视频的某一帧图像中不存在第一位置的目标区域时，则删除该图像采集装置的第一位置的所有帧图像并根据剩余图像采集装置的第一位置的目标区域的颜色信号得到该目标区域的参考子信号。
具体地，当某个图像采集装置拍摄的人脸视频中缺少的第一位置的目标区域的图像帧数小于预设帧数时，则采用插补方法插补缺少帧的图像，若某个图像采集装置拍摄的人脸视频中缺少的第一位置的目标区域的图像帧数大于预设帧数时，则直接删除该图像采集装置的第一位置的所有帧图像，并根据剩余图像采集装置的第一位置的目标区域的颜色信号得到该目标区域的参考子信号。
在本实施例中，图1中S102的具体实现流程还可以包括：
采用最大比率合并方法，将各个图像采集装置对应的颜色信号合并为所述目标人物的参考信号。
在本实施例中，若颜色信号为RGB信号，则第一位置第一目标区域的参考子信号可以通过下式(8)得到：
式(8)中，表示第一个图像采集装置对应的第一位置的目标区域归一化后的信号值，RGB殨为第一位置的参考子信号值。
在本发明的一个实施例中，所述生理指标包括心率、呼吸数据、心率变异性、血氧和血压变化值，图1中S103的具体实现流程，包括：
根据所述目标人物的参考信号，检测所述目标人物毛细血管的变化规律，得到所述目标人物的心率、血氧和心率变异性；并检测所述目标人物呼吸时肌肉的变化规律，得到所述目标人物的呼吸数据，以及检测所述目标人物的任意两个目标区域的血液流动的相位差，得到所述目标人物的血压变化值。
在本实施例中，当参考信号为RGB信号时，通过对目标人物呼吸时毛细血管的变化规律进行检测分析，得到目标人物的心率、心率变异性、血氧及血压等生理指标。并根据RGB信号，检测目标人物呼吸时肌肉的变化规律，得到目标人物的呼吸数据。以及根据RGB信号，通过选取两个目标区域直接的血液流动的相位差，来计算血流速度的相对变化快慢，从而推算出血压变化值。进一步地，还可以通过深度学习方法确定目标人物的生理指标。
当参考信号为灰度信号时，通过对目标人物呼吸时毛细血管的变化规律进行检测分析，得到目标人物的心率、心率变异性、血氧及血压等生理指标。并根据灰度信号，检测目标人物呼吸时肌肉的变化规律，得到目标人物的呼吸数据。以及根据灰度信号，通过选取两个目标区域直接的血液流动的相位差，来计算血流速度的相对变化快慢，从而推算出血压变化值。进一步地，还可以通过深度学习方法确定目标人物的生理指标。
在本实施例中，当获取到目标人物的生理指标后，还可以通过目标人物的人脸视频确定目标人物的微表情信息，再根据目标人物的生理指标及微表情信息，确定目标人物的心理指标，心理指标可以包括包括清醒、生理疲惫、昏昏欲睡、紧张、放松、痛苦、愉悦等中的一种或多种。
应理解，上述实施例中各步骤的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。
实施例2：
如图5所示，本发明的一个实施例提供的生理指标及心理指标的检测装置100，用于执行图1所对应的实施例中的方法步骤，其包括：
颜色信号获取模块110，用于分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；
参考信号获取模块120，用于根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；
指标检测模块130，用于根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。
从上述实施例可知，本发明实施例分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。本发明实施例通过多个图像采集装置从不同角度获取用户的人脸视频，使用户在运动时也能获取到精确的人脸视频，进而对比各个人脸视频，确定所述目标人物的参考信号，从而既提高生理指标及心理指标的检测的准确性，又能优化用户的体验。
在本发明的一个实施例中，颜色信号获取模块110还包括用于执行图2所对应的实施例中的方法步骤的步骤，其包括：
目标区域划分单元，用于检测各个人脸视频中的人脸区域视频及特征点，并利用所述特征点将第一人脸区域划分为至少一个目标区域，所述第一人脸区域为任一图像采集装置采集的人脸区域；
颜色信号提取单元，用于分别提取所述第一人脸区域对应的各个目标区域的颜色信号。
在本发明的一个实施例中，所述颜色信号包括归一化色值矩阵，颜色信号提取单元还包括用于执行图3所对应的实施例中的方法步骤的步骤，其包括：
色值平均值计算子单元，用于计算所述第一人脸区域中第一位置对应的目标区域的第一帧图像的色值平均值，所述第一位置为人脸中的任一位置，所述第一帧图像为所述目标区域对应的人脸视频的任一帧图像；
色值平均值矩阵获取子单元，用于根据所述所述第一人脸区域中第一位置对应的目标区域的第一帧图像的色值平均值，得到所述第一人脸区域中第一位置对应的目标区域的色值平均值矩阵；
归一化色值矩阵获取子单元，用于将所述第一人脸区域中第一位置对应的目标区域的色值平均值矩阵中的色值平均值进行归一化处理，得到所述所述第一人脸区域中第一位置对应的目标区域的归一化色值矩阵。
在本发明的一个实施例中，参考信号获取模块120还包括用于执行图4所对应的实施例中的方法步骤的步骤，其包括：
信噪比计算单元，用于根据各个图像采集装置的第一位置对应的目标区域的归一化色值矩阵，确定各个图像采集装置的第一位置对应的目标区域的信噪比；
第一位置参考信号获取单元，用于选取各个图像采集装置的第一位置对应的目标区域中信噪比最高的颜色信号作为所述第一位置的参考子信号；
参考信号获取子单元，用于获取所述目标人物的人脸各个位置的参考子信号，得到所述目标人物的参考信号。
在本发明的一个实施例中，参考信号获取模块120还包括：采用最大比率合并方法，将各个图像采集装置对应的颜色信号合并为所述目标人物的参考信号。
在本发明的一个实施例中，所述生理指标包括心率、呼吸数据、心率变异性、血氧和血压变化值，指标检测模块130包括：
根据所述目标人物的参考信号，检测所述目标人物毛细血管的变化规律，得到所述目标人物的心率、血氧及心率变异性；并检测所述目标人物呼吸时肌肉的变化规律，得到所述目标人物的呼吸数据，以及检测所述目标人物的任意两个目标区域的血液流动的相位差，得到所述目标人物的血压变化值。。
在本发明的一个实施例中，所述图像采集装置包括RGB彩色摄像头和红外摄像头，所述颜色信号包括RGB信号和灰度信号。
实施例3：
本发明实施例还提供了一种终端设备6，包括存储器61、处理器60以及存储在存储器61中并可在处理器60上运行的计算机程序62，所述处理器60执行所述计算机程序62时实现如实施例1中所述的各实施例中的步骤，例如图1所示的步骤S101至步骤S103。或者，所述处理器60执行所述计算机程序62时实现如实施例2中所述的各装置实施例中的各模块的功能，例如图5所示的模块110至130的功能。
所述终端设备6可以是桌上型计算机、笔记本、掌上电脑及云端服务器等计算设备。所述终端设备6可包括，但不仅限于，处理器60、存储器61。例如所述终端设备6还可以包括输入输出设备、网络接入设备、总线等。
所称处理器60可以是中央处理单元(Central Processing Unit，CPU)，还可以是其他通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器60等。
所述存储器61可以是所述终端设备6的内部存储单元，例如终端设备6的硬盘或内存。所述存储器61也可以是所述终端设备6的外部存储设备，例如所述终端设备6上配备的插接式硬盘，智能存储卡(Smart Media Card,SMC)，安全数字(Secure Digital,SD)卡，闪存卡(Flash Card)等。进一步地，所述存储器61还可以既包括终端设备6的内部存储单元也包括外部存储设备。所述存储器61用于存储所述计算机程序62以及所述终端设备6所需的其他程序和数据。所述存储器61还可以用于暂时地存储已经输出或者将要输出的数据。
实施例4：
本发明实施例还提供了一种计算机可读存储介质，计算机可读存储介质存储有计算机程序62，计算机程序62被处理器60执行时实现如实施例1中所述的各实施例中的步骤，例如图1所示的步骤S101至步骤S103。或者，所述计算机程序62被处理器60执行时实现如实施例2中所述的各装置实施例中的各模块的功能，例如图5所示的模块110至130的功能。
所述的计算机程序62可存储于一计算机可读存储介质中，该计算机程序62在被处理器60执行时，可实现上述各个方法实施例的步骤。其中，所述计算机程序62包括计算机程序代码，所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括：能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，RandomAccess Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是，所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减，例如在某些司法管辖区，根据立法和专利实践，计算机可读介质不包括是电载波信号和电信信号。
本发明实施例方法中的步骤可以根据实际需要进行顺序调整、合并和删减。
本发明实施例***中的模块或单元可以根据实际需要进行合并、划分和删减。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种生理指标及心理指标的检测方法，其特征在于，包括：
分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；
根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；
根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。
2.如权利要求1所述的生理指标及心理指标的检测方法，其特征在于，所述从各个人脸视频中提取对应的颜色信号，包括：
检测各个人脸视频中的人脸区域及特征点，并利用所述特征点将第一人脸区域划分为至少一个目标区域，所述第一人脸区域为任一图像采集装置采集的人脸区域；
分别提取所述第一人脸区域对应的各个目标区域的颜色信号。
3.如权利要求2所述的生理指标及心理指标的检测方法，其特征在于，所述颜色信号包括归一化色值矩阵，所述分别提取所述第一人脸区域对应的各个目标区域的颜色信号，包括：
计算所述第一人脸区域中的第一位置对应的目标区域的第一帧图像的的色值平均值，所述第一位置为人脸中的任一位置，所述第一帧图像为所述目标区域对应的人脸视频的任一帧图像；
根据所述第一人脸区域中的第一位置对应的目标区域的第一帧图像的色值平均值，得到所述第一人脸区域中第一位置对应的目标区域的色值平均值矩阵；
将所述第一人脸区域中第一位置对应的目标区域的色值平均值矩阵中的色值平均值进行归一化处理，得到所述所述第一人脸区域中第一位置对应的目标区域的归一化色值矩阵。
4.如权利要求3所述的生理指标及心理指标的检测方法，其特征在于，所述根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号，包括：
根据各个图像采集装置的第一位置对应的目标区域的归一化色值矩阵，确定各个图像采集装置的第一位置对应的目标区域的信噪比；
选取各个图像采集装置的第一位置对应的目标区域中信噪比最高的颜色信号作为所述第一位置的参考子信号；
获取所述目标人物的人脸各个位置的参考子信号，得到所述目标人物的参考信号。
5.如权利要求3所述的生理指标及心理指标的检测方法，其特征在于，所述根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号，包括：
采用最大比率合并方法，将各个图像采集装置对应的颜色信号合并为所述目标人物的参考信号。
6.如权利要求2至5任一项所述的生理指标及心理指标的检测方法，其特征在于，所述生理指标包括心率、呼吸数据、心率变异性、血氧和血压变化值，所述根据所述目标人物的参考信号，获取所述目标人物的生理指标，包括：
根据所述目标人物的参考信号，检测所述目标人物毛细血管的变化规律，得到所述目标人物的心率、血氧及心率变异性；并检测所述目标人物呼吸时肌肉的变化规律，得到所述目标人物的呼吸数据，以及检测所述目标人物的任意两个目标区域的血液流动的相位差，得到所述目标人物的血压变化值。
7.如权利要求1所述的生理指标及心理指标的检测方法，其特征在于，所述图像采集装置包括RGB彩色摄像头和红外摄像头，所述颜色信号包括RGB信号和灰度信号。
8.一种生理指标及心理指标的检测装置，其特征在于，包括：
颜色信号获取模块，用于分别获取多个图像采集装置采集的目标人物的人脸视频，并从各个人脸视频中提取对应的颜色信号；其中，所述多个图像采集装置用于从不同角度采集目标人物的人脸视频；
参考信号获取模块，用于根据各个图像采集装置对应的颜色信号，确定所述目标人物的参考信号；
指标检测模块，用于根据所述目标人物的参考信号，获取所述目标人物的生理指标及心理指标。
9.一种终端设备，包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述方法的步骤。
10.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述方法的步骤。
CN201910233982.1A 2019-03-26 2019-03-26 生理指标及心理指标的检测方法、装置及终端设备 Pending CN109998501A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910233982.1A CN109998501A (zh) 2019-03-26 2019-03-26 生理指标及心理指标的检测方法、装置及终端设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910233982.1A CN109998501A (zh) 2019-03-26 2019-03-26 生理指标及心理指标的检测方法、装置及终端设备

Publications (1)

Publication Number Publication Date
CN109998501A true CN109998501A (zh) 2019-07-12

Family

ID=67168238

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910233982.1A Pending CN109998501A (zh) 2019-03-26 2019-03-26 生理指标及心理指标的检测方法、装置及终端设备

Country Status (1)

Country Link
CN (1) CN109998501A (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112580410A (zh) * 2019-09-30 2021-03-30 梅州市青塘实业有限公司 一种马桶以及基于马桶的心率采集方法和装置
CN115376657A (zh) * 2022-10-24 2022-11-22 北京亮亮视野科技有限公司 量化产品使用量对人体表征信息影响的方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106264568A (zh) * 2016-07-28 2017-01-04 深圳科思创动实业有限公司 非接触式情绪检测方法和装置
CN106510736A (zh) * 2016-12-06 2017-03-22 山东瀚岳智能科技股份有限公司 基于多维心理状态指标的心理状态判定方法与***
CN107169419A (zh) * 2017-04-19 2017-09-15 中国电子科技集团公司电子科学研究院 基于机器视觉的非接触式人体体征检测方法及装置
CN108720825A (zh) * 2018-03-29 2018-11-02 合肥工业大学 一种基于多摄像头的非接触式生命体征参数的无缝检测方法
CN109044322A (zh) * 2018-08-29 2018-12-21 北京航空航天大学 一种非接触式心率变异性测量方法
CN109259749A (zh) * 2018-08-29 2019-01-25 南京邮电大学 一种基于视觉摄像头的非接触式心率测量方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106264568A (zh) * 2016-07-28 2017-01-04 深圳科思创动实业有限公司 非接触式情绪检测方法和装置
CN106510736A (zh) * 2016-12-06 2017-03-22 山东瀚岳智能科技股份有限公司 基于多维心理状态指标的心理状态判定方法与***
CN107169419A (zh) * 2017-04-19 2017-09-15 中国电子科技集团公司电子科学研究院 基于机器视觉的非接触式人体体征检测方法及装置
CN108720825A (zh) * 2018-03-29 2018-11-02 合肥工业大学 一种基于多摄像头的非接触式生命体征参数的无缝检测方法
CN109044322A (zh) * 2018-08-29 2018-12-21 北京航空航天大学 一种非接触式心率变异性测量方法
CN109259749A (zh) * 2018-08-29 2019-01-25 南京邮电大学 一种基于视觉摄像头的非接触式心率测量方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112580410A (zh) * 2019-09-30 2021-03-30 梅州市青塘实业有限公司 一种马桶以及基于马桶的心率采集方法和装置
CN115376657A (zh) * 2022-10-24 2022-11-22 北京亮亮视野科技有限公司 量化产品使用量对人体表征信息影响的方法及装置
CN115376657B (zh) * 2022-10-24 2023-04-28 北京亮亮视野科技有限公司 量化产品使用量对人体表征信息影响的方法及装置

Similar Documents

Publication Publication Date Title
WO2020207423A1 (zh) 肤质检测方法、肤质等级分类方法及肤质检测装置
US9141761B2 (en) Apparatus and method for assisting user to maintain correct posture
CN103116763B (zh) 一种基于hsv颜色空间统计特征的活体人脸检测方法
Qi et al. Multiple density maps information fusion for effectively assessing intensity pattern of lifelogging physical activity
CN109284737A (zh) 一种用于智慧教室的学生行为分析和识别***
CN112101124B (zh) 一种坐姿检测方法及装置
CN105989331B (zh) 脸部特征提取装置、脸部特征提取方法、图像处理设备和图像处理方法
CN105184246A (zh) 活体检测方法和活体检测***
CN107194361A (zh) 二维姿势检测方法及装置
CN111444748B (zh) 一种坐姿检测方法、装置、设备及存储介质
CN110287862B (zh) 基于深度学习的防偷拍检测方法
CN109876416A (zh) 一种基于图像信息的跳绳计数方法
CN109998501A (zh) 生理指标及心理指标的检测方法、装置及终端设备
CN110728242A (zh) 基于人像识别的图像匹配方法、装置、存储介质及应用
CN111639702A (zh) 一种多媒体数据分析方法、设备、服务器及可读存储介质
CN110660454A (zh) 一种癌痛实时评估仪及其评估方法
CN109977764A (zh) 基于平面检测的活体识别方法、装置、终端及存储介质
CN110458792A (zh) 人脸图像质量的评价方法及装置
Zheng et al. Heart rate prediction from facial video with masks using eye location and corrected by convolutional neural networks
CN108062521A (zh) 基于卷积神经网络的人脸检测方法、装置、终端及介质
CN110175522A (zh) 考勤方法、***及相关产品
CN106980818B (zh) 一种用于人脸图像的个性化预处理方法、***及其终端
CN107944346A (zh) 基于图像处理的异常情况监测方法及监测设备
US20230284968A1 (en) System and method for automatic personalized assessment of human body surface conditions
CN109359543B (zh) 一种基于骨骼化的人像检索方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190712

RJ01 Rejection of invention patent application after publication