CN113239724A - 一种基于大数据的心理测评分析方法 - Google Patents

一种基于大数据的心理测评分析方法 Download PDF

Info

Publication number
CN113239724A
CN113239724A CN202110351801.2A CN202110351801A CN113239724A CN 113239724 A CN113239724 A CN 113239724A CN 202110351801 A CN202110351801 A CN 202110351801A CN 113239724 A CN113239724 A CN 113239724A
Authority
CN
China
Prior art keywords
host
user
facial expression
big data
analysis result
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN202110351801.2A
Other languages
English (en)
Inventor
熊倩
王宇骁
王政
王学春
张志亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Chongqing Fengyun Jihui Intelligent Technology Co ltd
Original Assignee
Chongqing Fengyun Jihui Intelligent Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Chongqing Fengyun Jihui Intelligent Technology Co ltd filed Critical Chongqing Fengyun Jihui Intelligent Technology Co ltd
Priority to CN202110351801.2A priority Critical patent/CN113239724A/zh
Publication of CN113239724A publication Critical patent/CN113239724A/zh
Withdrawn legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174Facial expression recognition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/02Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/021Measuring pressure in heart or blood vessels
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/145Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue
    • A61B5/14542Measuring characteristics of blood in vivo, e.g. gas concentration, pH value; Measuring characteristics of body fluids or tissues, e.g. interstitial fluid, cerebral tissue for measuring blood gases
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • G10L25/63Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination for estimating an emotional state

Landscapes

  • Health & Medical Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Cardiology (AREA)
  • Public Health (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Veterinary Medicine (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Molecular Biology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Theoretical Computer Science (AREA)
  • Physiology (AREA)
  • Vascular Medicine (AREA)
  • General Physics & Mathematics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Child & Adolescent Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychiatry (AREA)
  • Computational Linguistics (AREA)
  • Signal Processing (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Acoustics & Sound (AREA)
  • Optics & Photonics (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明涉及视频分析技术领域,公开了一种基于大数据的心理测评分析方法,步骤一,通过人脸识别镜头拍摄用户面部表情形成面部表情图像发送给人脸情绪分析主机;同时,通过拾音机将用户回答声音发送给主机;步骤二,人脸情绪分析主机识别分析接收到的面部表情图像得到视频分析结果,人脸情绪分析主机,将视频分析结果发送给主机;步骤三,主机根据接收到的视频分析结果判断接收到的用户回答声音的真伪。本发明能够准确测评用户的回答信息的真伪。

Description

一种基于大数据的心理测评分析方法
技术领域
本发明涉及视频分析技术领域,具体涉及一种基于大数据的心理测评分析方法。
背景技术
为了确保用户回答的信息的真实性,会采用一些技术手段用来判断回答信息的真伪。现在常用的皮电原理方法进行检测。
在采用皮电原理方法时,需要被测人戴上感应器,被测人容易才生抵触抗拒心理,且容易受到环境、个人体质等多方面因素影响导致分析结果偏差。
发明内容
本发明的解决的技术问题在于提供一种基于大数据的心理测评分析方法。
本发明提供的基础方案为:一种基于大数据的心理测评分析方法,包括以下步骤:
步骤一,通过人脸识别镜头拍摄用户面部表情形成面部表情图像发送给人脸情绪分析主机;同时,通过拾音机将用户回答声音发送给主机;步骤二,人脸情绪分析主机识别分析接收到的面部表情图像得到视频分析结果,人脸情绪分析主机,将视频分析结果发送给主机;步骤三,主机根据接收到的视频分析结果判断接收到的用户回答声音的真伪。
本方案的优点在于:
能够通过用户在回答问题时的回答声音,同步面部表情识别,来判断回答声音的真伪。能够在现场就判断出回答的真实性,便于快速获取有效电子证据。
进一步,在步骤二中,主机将视频分析结果发送给显示屏显示。
便于现场人员看得到的分析结果。
进一步,步骤三中,主机从回答声音中提取回答信息和情绪信息,主机根据接收到的视频分析结果和情绪信息判断回答信息的真伪。
便于精准判断用户回答信息。
进一步,所述主机,包括中央处理器,所述中央处理器预设有问卷,中央处理器将问卷发送给显示屏显示,在用户完成问卷的同时,人脸识别摄像头将拍摄到的面部表情图像发送给人脸情绪分析主机。
便于进行智能化提问,避免人为诱导。
进一步,所述人脸识别镜头跟随用户头部移动而相应移动。
便于充分采集面部表情图像。
进一步,所述中央处理器内设有非接触体征识别模块。
便于对用户在回答问题的时候体征识别。
进一步,所述非接触体征识别模块用来比较判断心率、心率变异性、血氧、血压变化。
通过这些体征变化,结合用户的回答声音,能够更加精准地判断用户是否说谎。
附图说明
图1为本发明基于大数据的心理测评分析方法实施例一的***结构示意图。
具体实施方式
下面通过具体实施方式进一步详细的说明:
实施例一
实施例基本如附图1所示:基于大数据的心理测评分析***,包括主机,以及分别与主机连接的人脸情绪分析主机、人脸识别镜头、时间模块、显示模块、内置/外置电池、拾音器、外侧摄像机、内侧摄像机、显示单元和后台服务器,其中,人脸情绪分析主机与人脸识别镜头连接。
本实施例中,显示模块和显示单元都可以采用显示屏,只是作为显示模块的显示屏是面向公众的,另一个作为显示单元的显示屏仅面向包括法官在内的审核人员的。
主机,包括中央处理器,以及与中央处理器连接的其他器件和模块。
人脸识别镜头,用来采集用户面部表情形成面部表情图像发送给人脸情绪分析主机和主机的中央处理器;中央处理器将接收到的面部表情图像发送给显示单元,使审核人员同步看到用户的面部表情。
而人脸情绪分析主机,包括微处理器以及与微处理器连接的视频分析模块,视频分析模块对面部采集图像进行分析得到正常或者异常的初步分析结果,微处理器接收到的初步分析结果进行二次分析得到二次分析结果,发送给主机,主机将二次分析结果发送给显示模块显示。
中央处理器预设有问卷,中央处理器将问卷发送给显示屏显示,在用户完成问卷的同时,人脸识别摄像头将拍摄到的面部表情图像发送给中央处理器的视频分析模块。除了问卷,结合面部表情识别能够更加准确判断回答信息是否正确,更加准确判断用户的实际心理状态。
拾音机同步将用户回答问卷的回答声音发送给中央处理器,中央处理器内预设有问卷结果,中央处理器根据接收到的回答声音提取出回答信息,中央处理器比较回答信息和问卷结果得到心理分析初步结果。通过回答声音的方式进行答卷,不仅方便对面部表情图像的采集,声音中情感信息本身有助于进行判断。
中央处理器将初步分析结果结合心理分析初步结果得到二次分析结果。使判断结果更加准确。
中央处理器内设有非接触体征识别模块。非接触体征识别模块内设有生理分析单元。
面部表情分析模块首先从面部表情图像中筛选出能够识别出信息内容的有效面部表情图像,再从有效面部表情图像提取出异常面部表情图像。生理分析单元包括生病和损伤状态。
非接触体征识别模块用来比较判断心率、心率变异性、血氧、血压变化。以非接触的方式对被测人进行实时心理情绪检测计算跟踪,心理变化曲线呈现。实时监测被测人生理指标变化(心率、心率变异性、血氧、血压变化),并且可以结合问卷心理调查法产生的结果,对被测人员的心理状况作出一个综合性的评价。
需要说明的是,本实施例中的中央处理器和微处理器都是具有运算功能的普通处理芯片,其计算量可以相同也可以不同,本文仅是名称上作为了区分而已。
采用以上***,进行心理测评分析的时候,包括以下步骤:
步骤一,通过人脸识别镜头拍摄用户面部表情形成面部表情图像发送给人脸情绪分析主机;同时,通过拾音机将用户回答声音发送给主机;步骤二,人脸情绪分析主机识别分析接收到的面部表情图像得到视频分析结果,人脸情绪分析主机,将视频分析结果发送给主机;步骤三,主机根据接收到的视频分析结果判断接收到的用户回答声音的真伪。
在步骤二中,主机将视频分析结果发送给显示屏显示。便于现场人员看得到的分析结果。
步骤三中,主机从回答声音中提取回答信息和情绪信息,主机根据接收到的视频分析结果和情绪信息判断回答信息的真伪。便于精准判断用户回答信息。
本方法能够通过用户在回答问题时的回答声音,同步面部表情识别,来判断回答声音的真伪。能够在现场就判断出回答的真实性,便于快速获取有效电子证据。
具体地,本实施例中采用以下设备构建基于大数据的心理测评分析***:
人脸情绪分析主机:
材质:全铝合金;
电气指标:19V/4.7A,90W;
CPU型号:Intel I7 8750H,CPU频率:2.20GHz ,CPU核心:6核心(12线程);
内存类型:DDR4 ,内存容量:16G;
网络接口:1个千兆网口;
无线支持:无线2.4G&5G双频Wifi,蓝牙4.2;
USB接口:USB3.0,4个;
HDMI输出接口: 1个;
MiniDP输出接口:1个;
电源数量:1个;
软件功能:生理指标输出、紧张情绪输出;宏表情输出、微表情、微动作输出;
人脸识别镜头:
镜头:焦距: f=2.8mm, 水平视场角: 120°;
最低照度: 0.05 Lux @ (F1.8, AGC ON);
数字降噪: 2D, 3D数字降噪;
色彩空间/压缩: H.264 / MJPEG /YUY2 /NV12;
USB接口: 1路, USB 3.0: 类型B, 母座,输入电压: 5V (USB 供电)
输入电流: 600mA(MAX);
工作温度: -10°C ~ 40°C;
功耗: 3.0W(MAX);
尺寸: 194mm x 34mm x 42mm(不含支架);
净重: 0.34KG。
微表情识别及非接触式人体特征辅助识别是连接审核一体机一起使用的,人脸识别镜头通过对正在被审核的用户人脸进行实时采集,传输至人脸情绪分析主机,人脸情绪分析主机通过对采集到的实时图像进行分析,然后将分析结果传输至审核一体机的内侧显示屏上。审核人员可以根据微表情识别及非接触式人体特征辅助识别的分析结果来判断被审核人员此时的情绪是什么样,所述的内容是否正确,是否隐瞒了事实,是否对审核人员说谎,并且可以实时监测被测人生理指标变化(心率、心率变异性、血氧、血压变化)审核谈话中动态监护其生理健康水平,出现异常时实时报警提示。
本实施例基于AI人工智能原创技术和专利算法,综合了心理学、生物生理学、机器视觉、深度学***,出现异常时实时报警提示。以非接触的方式对被测人进行实时心理情绪检测计算跟踪,心理变化曲线呈现。能够更加精准地对用户回答信息进行真伪判断。
实施例二
本实施例中,所述微处理器内设置有心理分析单元和生理分析单元,微处理器在接收到初步分析结果为异常时,微处理器对该异常初步分析结果对应的采集图像通过心理分析单元和生理分析单元进行二次分析得到二次分析结果,微处理器根据二次分析结果启动报警模块工作。二次分析,使分析结果更加准确。
面部表情分析模块内存储有面部表情对应表,预存有不同的面部表情,以及其对应的心理分析链接和生理分析链接,当被拍摄到的面部表情图像不能和预存的面部表情对比成功的时候,该面部表情图像被判定为异常。当被拍摄到的面部图像表情能够和预存的面部表情对比相似率在75%以上,即判定当前面部图像表情与预存面部表情相似,可以进入对应的生理分析链接和心理分析链接。
其中,心理分析链接与中央处理器中的心理分析单元链接,能够通过传递过来的当前面部表情图像分析得出用户的心理情况,本实施例中心理分析单元中预设有心理情况表,用来根据当前面部表情中的眉眼嘴的位置变化判断出用户处在“暴躁、平静、脆弱、心慌”的心理状态下。当处在“暴躁”和“脆弱”的时候,分别触动相反情况的报警,即正向危险行为和反向危险行为均会触动报警。
同样,生理分析链接与中央处理器中的生理分析单元链接,能够通过传递过来的当前面部表情图像分析得出用户的生理情况,本实施例中生理分析单元中预设有生理情况表,用来根据当行为动作图像中的四肢的位置变化,以及身体表面的痕迹来判断出用户处在“生病、损伤、其他”的生理状态下。当处在“损伤”的时候,触动报警。
面部表情分析模块首先从面部表情图像中筛选出能够识别出信息内容的有效面部表情图像,再从有效面部表情图像提取出异常面部表情图像。筛除没有表达信息的面部表情图像,使经过有效面部表情图像得到的分析结果更加准确。
中央处理器连接有用来对用户进行生理检测的非接触体征识别模块。通过非接触体征识别模块,能够在用户不知道的情况下检测出用户的实际身体状态。
实施例三
本实施例中,所述人脸识别镜头跟随用户头部移动而相应移动。方便捕捉用户回答时的面部表情,进而判断回答信息表达的真实有效性。人脸识别镜头采用能够在高度位置上自由移动,且能够三百六十度转动的摄像装置。
实施例四
本实施例中,中央处理器内设有声音识别模块,用来分别识别回答声音中的语音信息和情感信息,语音信息提取成为初始回答信息,情感信息和面部表情的初步分析结果一起用来校正初始回答信息,删除用户违心的答案信息,形成最终的回答信息,并从中央处理器调取该回答信息对应的测评结果作为二次分析结果发送给显示屏。
实施例五
本实施例中,问卷可以通过显示屏或者喇叭播放两种呈现方式呈现出来。在用显示屏进行显示的时候,根据用户的性别和年龄不同,针对性地提供不同的背景颜色,用来使用户处于放松状态回答问题。具体地,中央处理器内预设有背景显示表,分别对于不同年龄段不同性别的用户设置不同的背景颜色,例如年龄段在24-38岁的女性,其调查问卷的背景颜色为浅紫色,而在同样年龄段的男性,其调查问卷的背景颜色为浅灰色。通过针对不同用户设置不同的问卷背景颜色,能够从视觉上引导用户放松,作出最适合本心的答案,使其下意识的回答更加真实。
而在用喇叭进行问卷声音播报的时候,针对不同性别不同年龄段的用户采用不同的声音播报。具体地,中央处理器内预设有声音播报表,分别对于不同年龄段不同性别的用户设置不同的播放声音选择,例如年龄段在24-38岁的女性,其播放声音为温柔舒缓的男声,而在同样年龄段的男性,其播放声音则为清脆快速的女声。通过针对不同用户设置不同的播放声音,能够从听觉上引导用户放松,作出最适合本心的答案,使其下意识的回答更加真实。
以上所述的仅是本发明的实施例,方案中公知的具体结构及特性等常识在此未作过多描述,所属领域普通技术人员知晓申请日或者优先权日之前发明所属技术领域所有的普通技术知识,能够获知该领域中所有的现有技术,并且具有应用该日期之前常规实验手段的能力,所属领域普通技术人员可以在本申请给出的启示下,结合自身能力完善并实施本方案,一些典型的公知结构或者公知方法不应当成为所属领域普通技术人员实施本申请的障碍。应当指出,对于本领域的技术人员来说,在不脱离本发明结构的前提下,还可以作出若干变形和改进,这些也应该视为本发明的保护范围,这些都不会影响本发明实施的效果和专利的实用性。本申请要求的保护范围应当以其权利要求的内容为准,说明书中的具体实施方式等记载可以用于解释权利要求的内容。

Claims (7)

1.一种基于大数据的心理测评分析方法,其特征在于,步骤一,通过人脸识别镜头拍摄用户面部表情形成面部表情图像发送给人脸情绪分析主机;同时,通过拾音机将用户回答声音发送给主机;步骤二,人脸情绪分析主机识别分析接收到的面部表情图像得到视频分析结果,人脸情绪分析主机,将视频分析结果发送给主机;步骤三,主机根据接收到的视频分析结果判断接收到的用户回答声音的真伪。
2.根据权利要求1所述的基于大数据的心理测评分析方法,其特征在于,在步骤二中,主机将视频分析结果发送给显示屏显示。
3.根据权利要求1所述的基于大数据的心理测评分析方法,步骤三中,主机从回答声音中提取回答信息和情绪信息,主机根据接收到的视频分析结果和情绪信息判断回答信息的真伪。
4.根据权利要求1所述的基于大数据的心理测评分析方法,所述主机,包括中央处理器,所述中央处理器预设有问卷,中央处理器将问卷发送给显示屏显示,在用户完成问卷的同时,人脸识别摄像头将拍摄到的面部表情图像发送给人脸情绪分析主机。
5.根据权利要求2所述的基于大数据的心理测评分析方法,其特征在于,所述人脸识别镜头跟随用户头部移动而相应移动。
6.根据权利要求1所述的基于大数据的心理测评分析方法,其特征在于,所述中央处理器内设有非接触体征识别模块。
7.根据权利要求8所述的基于大数据的心理测评分析方法,其特征在于,所述非接触体征识别模块用来比较判断心率、心率变异性、血氧、血压变化。
CN202110351801.2A 2021-03-31 2021-03-31 一种基于大数据的心理测评分析方法 Withdrawn CN113239724A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110351801.2A CN113239724A (zh) 2021-03-31 2021-03-31 一种基于大数据的心理测评分析方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110351801.2A CN113239724A (zh) 2021-03-31 2021-03-31 一种基于大数据的心理测评分析方法

Publications (1)

Publication Number Publication Date
CN113239724A true CN113239724A (zh) 2021-08-10

Family

ID=77130766

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110351801.2A Withdrawn CN113239724A (zh) 2021-03-31 2021-03-31 一种基于大数据的心理测评分析方法

Country Status (1)

Country Link
CN (1) CN113239724A (zh)

Similar Documents

Publication Publication Date Title
US7319780B2 (en) Imaging method and system for health monitoring and personal security
CN103561652B (zh) 用于辅助患者的方法和***
CN112971746A (zh) 一种心理测评***
US20040210159A1 (en) Determining a psychological state of a subject
KR20190005219A (ko) 사용자 건강 분석을 위한 증강 현실 시스템들 및 방법들
US20180060757A1 (en) Data annotation method and apparatus for enhanced machine learning
CN105147304B (zh) 一种人格特质值测验的刺激信息编制方法
CN110367934B (zh) 一种基于非语音身体声音的健康监测方法及监测***
JP6396351B2 (ja) 心身状態推定装置、心身状態推定方法、およびアイウエア
CN107411753A (zh) 一种识别步态的可穿戴设备
EP3897388B1 (en) System and method for reading and analysing behaviour including verbal, body language and facial expressions in order to determine a person's congruence
Yu et al. Magic mirror table for social-emotion alleviation in the smart home
KR102178294B1 (ko) 가상현실 기반의 어지럼증 치료장치 및 그 장치의 구동방법
KR20200056660A (ko) 얼굴 내 미세움직임 기반 통증 모니터링 방법 및 시스템
CN110755091A (zh) 一种个人心理健康监测***及方法
US20240251121A1 (en) Focus group apparatus and system
Liu et al. aiMSE: Toward an AI-based online mental status examination
KR102188076B1 (ko) 노년층 피보호자를 모니터링하기 위한 IoT 기술을 이용하는 방법 및 그 장치
US12033758B2 (en) Information processing apparatus and non-transitory computer readable medium
KR102171742B1 (ko) 노인 케어 시스템 및 그 방법
CN113040773A (zh) 一种数据采集处理方法
CN111803031A (zh) 一种非接触式吸毒人员复吸监测方法及***
CN113239724A (zh) 一种基于大数据的心理测评分析方法
Gupta et al. Recognition of human mental stress using machine learning paradigms
WO2022065446A1 (ja) 感情判定装置、感情判定方法及び感情判定プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication

Application publication date: 20210810

WW01 Invention patent application withdrawn after publication