CN113520394B - 一种基于表情识别与心理学测试生成性格的分析方法 - Google Patents

一种基于表情识别与心理学测试生成性格的分析方法 Download PDF

Info

Publication number
CN113520394B
CN113520394B CN202110674482.9A CN202110674482A CN113520394B CN 113520394 B CN113520394 B CN 113520394B CN 202110674482 A CN202110674482 A CN 202110674482A CN 113520394 B CN113520394 B CN 113520394B
Authority
CN
China
Prior art keywords
character
analysis
test
face
tested person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202110674482.9A
Other languages
English (en)
Other versions
CN113520394A (zh
Inventor
任国防
王艳华
王金娥
邓丽霞
陈靖涵
米鹏旭
杨丽娟
高瑞芳
吴玲玲
杨光辉
田建伟
于晓波
周广亚
高丽娟
荆怀福
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Anyang Normal University
Original Assignee
Anyang Normal University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Anyang Normal University filed Critical Anyang Normal University
Priority to CN202110674482.9A priority Critical patent/CN113520394B/zh
Publication of CN113520394A publication Critical patent/CN113520394A/zh
Application granted granted Critical
Publication of CN113520394B publication Critical patent/CN113520394B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/11—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils
    • A61B3/112—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for measuring interpupillary distance or diameter of pupils for measuring diameter of pupils
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B3/00—Apparatus for testing the eyes; Instruments for examining the eyes
    • A61B3/10—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions
    • A61B3/113—Objective types, i.e. instruments for examining the eyes independent of the patients' perceptions or reactions for determining or recording eye movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1118—Determining activity level
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1121—Determining geometric values, e.g. centre of rotation or angular range of movement
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7475—User input or interface means, e.g. keyboard, pointing device, joystick
    • Y—GENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02—TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02D—CLIMATE CHANGE MITIGATION TECHNOLOGIES IN INFORMATION AND COMMUNICATION TECHNOLOGIES [ICT], I.E. INFORMATION AND COMMUNICATION TECHNOLOGIES AIMING AT THE REDUCTION OF THEIR OWN ENERGY USE
    • Y02D10/00—Energy efficient computing, e.g. low power processors, power management or thermal management

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Pathology (AREA)
  • Physiology (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Psychiatry (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Ophthalmology & Optometry (AREA)
  • Developmental Disabilities (AREA)
  • Artificial Intelligence (AREA)
  • Signal Processing (AREA)
  • Child & Adolescent Psychology (AREA)
  • Geometry (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychology (AREA)
  • Social Psychology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Radiology & Medical Imaging (AREA)
  • Human Computer Interaction (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

本发明公开了一种基于表情识别与心理学测试生成性格的分析方法，通过对被测试者的表情进行长时间的采集与监控，并在性格分析空间的作用下将表情变化与心理学测试题相互对应，达到了以性格分析模型对被测者性格进行分析的目的，相较于人工测试能够更加敏锐和持久的对被测者的面部动态变化进行长期捕捉和评估，同时相较于人工测试也更加方便快捷，因此也会更加的廉价，再者，测试时不直接与其他人员接触，被测者也能够更加无顾忌的将自我性格进行表现出来。

Description

一种基于表情识别与心理学测试生成性格的分析方法
技术领域
本发明涉及信息处理与心理学测试相关领域，具体是一种基于表情识别与心理学测试生成性格的分析方法。
背景技术
心理学测试是一项能够通过回答或是选择问题来实现对被测试者的心理及性格等进行评估的一项专业性测试，其具有一定的心理学原理，通过在测试中观察被测试者的行为动作与面部动态变化，能够对被测试者的性格进行评估。
现有技术中的心理学测试方式多为两种，一种是较为简单的问卷式自我评估测试，这种测试方式往往测试结果较为不准确，大多取决于被测试者的心理主动意愿，测试结果受到较多的人为主动控制，另一种方式是通过专业的心理测试人员进行面对面的实时测试，这种测试方法往往相对较为准确，在对被测试者进行测试时，测试者能够对被测试者的表情变化进行评估作为测试内容参考的重要部分。
但在进行心理测试时，部分被测试者往往能够很好的隐藏自己的真实情感变化，能够十分有效的控制自己的表情变化，使得即使是专业性十分强的心理测试人员也难以进行十分有效的对被测试者的面部动态变化进行长时间捕捉评估，且专业的心理测试人员往往价格昂贵。
发明内容
本发明的目的在于提供一种基于表情识别与心理学测试生成性格的分析方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：
一种基于表情识别与心理学测试生成性格的分析方法，包含以下步骤：
实时采集获取被测者的面部数据信息，根据面部数据信息建立被测者面部的三维动态模型，所述面部数据信息包括面部距离数据以及眼球动态信息；
建立被测者性格分析空间，导入至少一项心理学测试题，执行初始程序对被测者进行表情初始化矫正并标记分析点，输出心理学测试题，并对三维动态模型进行时间标记；
对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成性格分析结果，所述性格分析模型用以表征不同性格人对心理学测试题的面部动态变化模式；
根据性格分析结果导入至少一项辅助心理学测试题，输出辅助心理学测试题，并执行所述根据性格分析模型进行性格比对分析的步骤以生成辅助性格分析结果并进行辅助判断，生成最终性格分析结果。
作为本发明的进一步方案：所述实时采集获取被测者的面部数据信息，根据面部数据信息建立被测者面部三维动态模型的步骤具体包括：
对所述被测者面部进行扫描，获取被测者的面部空间距离数据，所述面部空间距离数据为所述被测者面部各处到扫描装置间的距离；
根据面部数据建立被测者的三维动态模型，并根据所述三维动态模型提取特征点进行面部特征点标记，所述特征点标记包括眼球特征点标记、以及追踪特征点标记，所述面部特征点标记为被测者面部无相对动态变化的易识别特征区域；
根据所述眼球特征点标记对被测者进行眼球图像采集获取眼球动态信息，根据所述追踪特征点标记对被测者进行面部距离数据进行持续采集；
根据追踪特征点对面部距离数据进行处理，建立实时面部的三维动态模型。
作为本发明的再进一步方案：所述眼球动态信息包括瞳孔缩放数据和瞳孔转动数据，所述瞳孔缩放数据用于记录瞳孔在直线时间上的缩放变化，所述瞳孔转动数据用于记录所述瞳孔在直线时间上的运动情况，以表征所述被测者的眼球视线漂移情况。
作为本发明的再进一步方案：所述建立被测者性格分析空间，导入至少一项心理学测试题，执行初始程序对被测者进行表情初始化矫正并标记分析点，输出心理学测试题，并对三维动态模型进行时间标记的步骤具体包括：
建立被测者性格分析空间，所述性格分析空间用以在时间线上对被测者的面部数据信息进行记录；
导入至少一项心理学测试题；
执行预设的初始程序，所述预设初始程序包括至少一项初始问答题，输出所述初始问答题；
对所述被测者的面部的三维动态模型进行动态分析，将所述被测者面部运动区域进行分析点标记，所述分析点标记用于表征被测者表情变化时的面部相对运动区域，该所述运动为三维空间运动；
对所述被测者的面部的三维动态模型进行动态分析，将所述被测者面部分析点标记不再相对运动的面部数据信息设置为性格分析空间原点；
输出心理学测试题，并在性格分析空间进行时间标记。
作为本发明的再进一步方案：所述输出心理学测试题，并在性格分析空间进行时间标记的步骤在执行中，所述心理学测试题中设有特殊词汇点标记，所述时间标记包括测试题时间范围标记以及特殊词汇点标记，所述特殊词汇点标记用以表征心理学测试题中被测者易发生面部动作的词汇所在时间点。
作为本发明的再进一步方案：所述性格分析模型用以表征不同性格人对心理学测试题的面部动态变化模式，所述性格分析模型包括心理学测试题、与所述心理学测试题相对应的面部动作反馈结果以及与面部动作反馈结果相对应的性格分析结果。
作为本发明的再进一步方案：所述对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成性格分析结果的步骤具体包括：
根据时间标记对性格分析空间中存储的所述三维动态模型进行截取分析片段；
根据分析点标记对分析片段进行动态分析，生成测试反馈结果，所述测试反馈结果用于表征被测者在接收到所属心理学测试题时的面部动态变化；
根据性格分析模型对所述测试反馈结果进行性格比对分析，生成性格分析结果。
作为本发明的再进一步方案：所述对所述三维动态模型进行面部动作分解，生成测试反馈结果的步骤中，进行分解的面部动作的具体部分有：
根据多组面部距离数据建立的面部动作变化；以及
根据多组眼球动态信息建立的眼球动作变化；
其中，所述眼球动作变化的判断内容包括所述瞳孔的缩放数据与所述瞳孔的转动数据。
作为本发明的再进一步方案：所述根据性格分析结果导入至少一项辅助心理学测试题，输出辅助心理学测试题，并执行所述根据性格分析模型进行性格比对分析的步骤以生成辅助性格分析结果，进行辅助判断，生成最终性格分析结果的步骤，具体包括：
根据性格分析结果导出性格分析模型中相同性格分析结果下的心理学测试题，作为辅助心理学测试题；
向被测者性格分析空间中导入至少一项辅助心理学测试题；
输出心理学测试题，并对三维动态模型进行时间标记；
对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成辅助性格分析结果；
根据所述辅助性格分析结果与所述性格分析结果进行性格比对判断，生成最终性格分析结果。
作为本发明的再进一步方案：在根据时间标记对性格分析空间中存储的所述三维动态模型进行截取分析片段的步骤中，还会在所述时间标记后的一段预设时间内进行截取分析片段。
与现有技术相比，本发明的有益效果是：本发明提供了一种基于表情识别与心理学测试生成性格的分析方法，可以基于移动设备所使用，通过对被测试者的表情进行长时间的采集与监控，并在性格分析空间的作用下将表情变化与心理学测试题相互对应，达到了以性格分析模型对被测者性格进行分析的目的，相较于人工测试能够更加敏锐和持久的对被测者的面部动态变化进行长期捕捉和评估，同时相较于人工测试也更加方便快捷，因此也会更加的廉价，再者，测试时不直接与其他人员接触，被测者也能够更加无顾忌的将自我性格进行表现出来。
附图说明
图1为一种基于表情识别与心理学测试生成性格的分析方法的流程框图。
图2为一种基于表情识别与心理学测试生成性格的分析方法中建立三维动态模型步骤的具体流程框图。
图3为一种基于表情识别与心理学测试生成性格的分析方法中输出心理学测试题步骤的具体流程框图。
图4为一种基于表情识别与心理学测试生成性格的分析方法中生成性格分析结果步骤的具体流程图。
图5为一种基于表情识别与心理学测试生成性格的分析方法中生成最终性格分析结果的具体流程框图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
以下结合具体实施例对本发明的具体实现方式进行详细描述。
如图1所述，为本发明一个实施例提供的一种基于表情识别与心理学测试生成性格的分析方法，包括以下步骤：
S200，实时采集获取被测者的面部数据信息，根据面部数据信息建立被测者面部的三维动态模型，所述面部数据信息包括面部距离数据以及眼球动态信息。
S400，建立被测者性格分析空间，导入至少一项心理学测试题，执行初始程序对被测者进行表情初始化矫正并标记分析点，输出心理学测试题，并对三维动态模型进行时间标记。
S600，对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成性格分析结果，所述性格分析模型用以表征不同性格人对心理学测试题的面部动态变化模式。
S800，根据性格分析结果导入至少一项辅助心理学测试题，输出辅助心理学测试题，并执行所述根据性格分析模型进行性格比对分析的步骤以生成辅助性格分析结果并进行辅助判断，生成最终性格分析结果。
本发明实施例中，所提供的方法是可以在移动设备所使用的，如携带有3D扫描和眼动追踪设备的收集或是电脑等设备，3D扫描技术如今在很多手机上已经得到了较为广泛的普及，眼动追踪摄像头技术如今也已经较为成熟，在普通民众的使用领域中，较为多的可以在一些游戏设备上所看见，少数家用电视也配备有相关的眼动追踪的功能以达到实时暂停的能力；在步骤S200中，对被测者的面部进行持续的扫描和采集面部数据，包括用于建立被测者面部三维空间模型的面部距离数据和用于判断被测者是否眼神变化的眼球动态信息，这里可以这样对原理进行理解，当被测者发生情绪变化时，即使想要进行掩饰，但面部的部分肌肉是大脑直接控制对情绪产生表情反应的，无法进行完全的克服以欺骗到测试行为，同时，当被测者对某一项词汇感到敏感时，瞳孔也会第一时间产生难以人为控制的变化，如瞳孔的快速收缩和眼睛迅速的漂移，因此对这两项面部内容进行持续的观察采集；在步骤S400中，被测者性格分析空间是一种时间轴存储概念，可以将心理学测试题与被测者的面部变化进行时间点对应存储，以方便进行后续的分析使用；执行初始程序的目的是让被测者进行面部放松，使其面部状态达到最自然的状态情况下；在步骤S600中，性格分析模型是通过相关专业人员采用大量专业样本进行训练后得到的映射函数，通过表情的变化幅度与变化模式，映射得到与之相匹配的性格分析结果；步骤S800的作用是在步骤S600生成性格分析结果后，再根据性格分析结果导出相关度更高的心理学测试题作为辅助心理学测试题，然后进行再一次的性格确认分析；通过这样的设置实现了对被测者微表情长时间捕捉评估的目的，同时相较于采用专业人工测试相比，可以更加方便快捷和便宜，再者，测试时不直接与人员接触，被测者也能够更加无顾忌的将自我性格进行表现出来。
如图2所述，作为本发明一个优选的实施例，所述S200实时采集获取被测者的面部数据信息，根据面部数据信息建立被测者面部三维动态模型的步骤具体包括：
S201，对所述被测者面部进行扫描，获取被测者的面部空间距离数据，所述面部空间距离数据为所述被测者面部各处到扫描装置间的距离。
S202，根据面部数据建立被测者的三维动态模型，并根据所述三维动态模型提取特征点进行面部特征点标记，所述特征点标记包括眼球特征点标记以及追踪特征点标记，所述面部特征点标记为被测者面部无相对动态变化的易识别特征区域。
S203，根据所述眼球特征点标记对被测者进行眼球图像采集获取眼球动态信息，根据所述追踪特征点标记对被测者进行面部距离数据进行持续采集。
S204，根据追踪特征点对面部距离数据进行处理，建立实时面部的三维动态模型。
具体的来说，所述眼球动态信息包括瞳孔缩放数据和瞳孔转动数据，所述瞳孔缩放数据用于记录瞳孔在直线时间上的缩放变化，所述瞳孔转动数据用于记录所述瞳孔在直线时间上的运动情况，以表征所述被测者的眼球视线漂移情况。
本发明实施例中，对步骤S200的详细步骤进行了说明，其中在步骤S202中设置了特征点标记，根据人体肌肉与骨骼结构我们知道，人体面部的一些特定部位，不论我们的表情如何变化，其都是不会发生变化的，因此我们将这些部位中的某些具有识别特征的部位取出作为追踪特征点进行标记，这样便可以实现将持续采集到的众多面部以这些点作为坐标基准点进行建立模型(指这些特征点可以进行重合的三维空间模型)，眼球特征区域则是将眼球位置相对于面部进行标记的特征点。
如图3所述，作为本发明一个优选的实施例，所述建立被测者性格分析空间，导入至少一项心理学测试题，执行初始程序对被测者进行表情初始化矫正并标记分析点，输出心理学测试题，并对三维动态模型进行时间标记的步骤具体包括：
S401，建立被测者性格分析空间，所述性格分析空间用以在时间线上对被测者的面部数据信息进行记录。
S402，导入至少一项心理学测试题。
S403，执行预设的初始程序，所述预设初始程序包括至少一项初始问答题，输出所述初始问答题。
S404，对所述被测者的面部的三维动态模型进行动态分析，将所述被测者面部运动区域进行分析点标记，所述分析点标记用于表征被测者表情变化时的面部相对运动区域，该所述运动为三维空间运动。
S405，对所述被测者的面部的三维动态模型进行动态分析，将所述被测者面部分析点标记不再相对运动的面部数据信息设置为性格分析空间原点。
S406，输出心理学测试题，并在性格分析空间进行时间标记。
具体的来说，所述输出心理学测试题，并在性格分析空间进行时间标记的步骤在执行中，所述心理学测试题中设有特殊词汇点标记，所述时间标记包括测试题时间范围标记以及特殊词汇点标记，所述特殊词汇点标记用以表征心理学测试题中被测者易发生面部动作的词汇所在时间点。
本发明实施例中，对步骤S400进行了详细的流程分解说明，性格分析空间我们在对S400进行说明时已提到；其中，在优选实施例中，本发明对时间标记还做了相关的限定说明，在这里，时间标记包括测试题时间范围标记和特殊词汇点标记，测试题时间范围标记是对这一整个测试题所进行的时间内的整体范围起始点与结束点的标记，特殊词汇点标记则是这一所述心理学测试题中被测者容易产生反应的部分特殊词汇的时间点(相对于测试题时间范围较长时间内的较小时间段)，方便后续分析时对这一词汇的反应进行分析，其中，在步骤S403中，初始问答题的一般指的是用来使被测者面部肌肉放松的娱乐性问答或是笑话等放松性内容。
如图4所述，作为本发明一个优选的实施例，所述性格分析模型用以表征不同性格人对心理学测试题的面部动态变化模式，所述性格分析模型包括心理学测试题、与所述心理学测试题相对应的面部动作反馈结果以及与面部动作反馈结果相对应的性格分析结果。
具体的来说，所述对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成性格分析结果的步骤具体包括：
S601，根据时间标记对性格分析空间中存储的所述三维动态模型进行截取分析片段。
S602，根据分析点标记对分析片段进行动态分析，生成测试反馈结果，所述测试反馈结果用于表征被测者在接收到所属心理学测试题时的面部动态变化。
S603，根据性格分析模型对所述测试反馈结果进行性格比对分析，生成性格分析结果。
具体的来说，所述对所述三维动态模型进行面部动作分解，生成测试反馈结果的步骤中，进行分解的面部动作的具体部分有：
根据多组面部距离数据建立的面部动作变化；以及
根据多组眼球动态信息建立的眼球动作变化；
其中，所述眼球动作变化的判断内容包括所述瞳孔的缩放数据与所述瞳孔的转动数据。
本发明实施例中，对步骤S600进行了详细的流程分解，这里的性格分析模型在对步骤S600进行说明时已经进行说明，其中测试反馈结果是被测者的面部变化情况和程度(如哪一片的面部下凹或是向两侧拉伸(反应为肌肉的变化，即对应表情的变化)；这里对面部动作进行了补充说明，分别用于对应被测者的面部动态变化与眼神动作变化。
如图5所述，作为本发明一个优选的实施例，所述根据性格分析结果导入至少一项辅助心理学测试题，输出辅助心理学测试题，并执行所述根据性格分析模型进行性格比对分析的步骤以生成辅助性格分析结果，进行辅助判断，生成最终性格分析结果的步骤，具体包括：
S801，根据性格分析结果导出性格分析模型中相同性格分析结果下的心理学测试题，作为辅助心理学测试题。
S802，向被测者性格分析空间中导入至少一项辅助心理学测试题。
S803，输出心理学测试题，并对三维动态模型进行时间标记。
S804，对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成辅助性格分析结果。
S805，根据所述辅助性格分析结果与所述性格分析结果进行性格比对判断，生成最终性格分析结果。
本发明实施例中，对步骤S800进行了详细的流程分解，其作用是在被测者回答某一或某一组心理学测试题生成性格分析结果后，再根据性格分析结果获取更多直接相关的辅助心理学测试题，通过再试测试对其性格进行辅助分析确定以获得最终性格分析结果。
作为本发明一个优选的实施例在根据时间标记对性格分析空间中存储的所述三维动态模型进行截取分析片段的步骤中，还会在所述时间标记后的一段预设时间内进行截取分析片段。
本发明实施例中，对截取的分析片段进行了补充，其目的是在被测者在结束该心理学测试题后再截取一小段的片段进行分析，可以有效的应对被测者可以掩盖的行为，因为当被测者在进行掩盖情绪时，结束施压后，其情绪往往会重新释放，这一重要内容也可以作为性格分析的重要依据。
应该理解的是，虽然本发明各实施例的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，各实施例中的至少一部分步骤可以包括多个子步骤或者多个阶段，这些子步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些子步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的程序可存储于一非易失性计算机可读取存储介质中，该程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和/或易失性存储器。非易失性存储器可包括只读存储器(ROM)、可编程ROM(PROM)、电可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)或闪存。易失性存储器可包括随机存取存储器(RAM)或者外部高速缓冲存储器。作为说明而非局限，RAM以多种形式可得，诸如静态RAM(SRAM)、动态RAM(DRAM)、同步DRAM(SDRAM)、双数据率SDRAM(DDRSDRAM)、增强型SDRAM(ESDRAM)、同步链路(Synchlink)DRAM(SLDRAM)、存储器总线(Rambus)直接RAM(RDRAM)、直接存储器总线动态RAM(DRDRAM)、以及存储器总线动态RAM(RDRAM)等。
本领域技术人员在考虑说明书及实施例处的公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由权利要求指出。
应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (9)

1.一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，包含以下步骤：
实时采集获取被测者的面部数据信息，根据面部数据信息建立被测者面部的三维动态模型，所述面部数据信息包括面部距离数据以及眼球动态信息；
建立被测者性格分析空间，导入至少一项心理学测试题，执行初始程序对被测者进行表情初始化矫正并标记分析点，输出心理学测试题，并对三维动态模型进行时间标记；
对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成性格分析结果，所述性格分析模型用以表征不同性格人对心理学测试题的面部动态变化模式；
根据性格分析结果导入至少一项辅助心理学测试题，输出辅助心理学测试题，并执行所述根据性格分析模型进行性格比对分析的步骤以生成辅助性格分析结果，并进行辅助判断，生成最终性格分析结果；
所述根据性格分析结果导入至少一项辅助心理学测试题，输出辅助心理学测试题，并执行所述根据性格分析模型进行性格比对分析的步骤以生成辅助性格分析结果，进行辅助判断，生成最终性格分析结果的步骤，具体包括：
根据性格分析结果导出性格分析模型中相同性格分析结果下的心理学测试题，作为辅助心理学测试题；
向被测者性格分析空间中导入至少一项辅助心理学测试题；
输出辅助心理学测试题，并对三维动态模型进行时间标记；
对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成辅助性格分析结果；
根据所述辅助性格分析结果与所述性格分析结果进行性格比对判断，生成最终性格分析结果。
2.根据权利要求1所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于,所述实时采集获取被测者的面部数据信息，根据面部数据信息建立被测者面部三维动态模型的步骤具体包括：
对所述被测者面部进行扫描，获取被测者的面部空间距离数据，所述面部空间距离数据为所述被测者面部各处到扫描装置间的距离；
根据面部数据建立被测者的三维动态模型，并根据所述三维动态模型提取特征点进行面部特征点标记，所述特征点标记包括眼球特征点标记以及追踪特征点标记，所述面部特征点标记为被测者面部无动态变化的易识别特征区域；
根据所述眼球特征点标记对被测者进行眼球图像采集获取眼球动态信息，根据所述追踪特征点标记对被测者进行面部距离数据进行持续采集；
根据追踪特征点对面部距离数据进行处理，建立实时面部的三维动态模型。
3.根据权利要求2所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，所述眼球动态信息包括瞳孔缩放数据和瞳孔转动数据，所述瞳孔缩放数据用于记录瞳孔在直线时间上的缩放变化，所述瞳孔转动数据用于记录所述瞳孔在直线时间上的运动情况，以表征所述被测者的眼球视线漂移情况。
4.根据权利要求1所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，所述建立被测者性格分析空间，导入至少一项心理学测试题，执行初始程序对被测者进行表情初始化矫正并标记分析点，输出心理学测试题，并对三维动态模型进行时间标记的步骤具体包括：
建立被测者性格分析空间，所述性格分析空间用以在时间线上对被测者的面部数据信息进行记录；
导入至少一项心理学测试题；
执行预设的初始程序，所述预设初始程序包括至少一项初始问答题，输出所述初始问答题；
对所述被测者的面部的三维动态模型进行动态分析，将所述被测者面部运动区域进行分析点标记，所述分析点标记用于表征被测者表情变化时的面部相对运动区域，该所述运动为三维空间运动；
对所述被测者的面部的三维动态模型进行动态分析，将所述被测者面部分析点标记不再相对运动的面部数据信息设置为性格分析空间原点；
输出心理学测试题，并在性格分析空间进行时间标记。
5.根据权利要求4所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，所述输出心理学测试题，并在性格分析空间进行时间标记的步骤在执行中，所述心理学测试题中设有特殊词汇点标记，所述时间标记包括测试题时间范围标记以及特殊词汇点标记，所述特殊词汇点标记用以表征心理学测试题中被测者易发生面部动作的词汇所在时间点。
6.根据权利要求3所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，所述性格分析模型用以表征不同性格人对心理学测试题的面部动态变化模式，所述性格分析模型包括心理学测试题、与所述心理学测试题相对应的面部动作反馈结果以及与面部动作反馈结果相对应的性格分析结果。
7.根据权利要求6所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，所述对所述三维动态模型进行面部动作分解，生成测试反馈结果，根据性格分析模型对测试反馈结果进行性格比对分析，生成性格分析结果的步骤具体包括：
根据时间标记对性格分析空间中存储的所述三维动态模型进行截取分析片段；
根据分析点标记对分析片段进行动态分析，生成测试反馈结果，所述测试反馈结果用于表征被测者在接收到所属心理学测试题时的面部动态变化；
根据性格分析模型对所述测试反馈结果进行性格比对分析，生成性格分析结果。
8.根据权利要求7所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，所述对所述三维动态模型进行面部动作分解，生成测试反馈结果的步骤中，进行分解的面部动作的具体部分有：
根据多组面部距离数据建立的面部动作变化；以及
根据多组眼球动态信息建立的眼球动作变化；
其中，所述眼球动作变化的判断内容包括所述瞳孔的缩放数据与所述瞳孔的转动数据。
9.根据权利要求7所述的一种基于表情识别与心理学测试生成性格的分析方法，其特征在于，在根据时间标记对性格分析空间中存储的所述三维动态模型进行截取分析片段的步骤中，还会在所述时间标记后的一段预设时间内进行截取分析片段。
CN202110674482.9A 2021-06-18 2021-06-18 一种基于表情识别与心理学测试生成性格的分析方法 Active CN113520394B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202110674482.9A CN113520394B (zh) 2021-06-18 2021-06-18 一种基于表情识别与心理学测试生成性格的分析方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202110674482.9A CN113520394B (zh) 2021-06-18 2021-06-18 一种基于表情识别与心理学测试生成性格的分析方法

Publications (2)

Publication Number Publication Date
CN113520394A CN113520394A (zh) 2021-10-22
CN113520394B true CN113520394B (zh) 2023-07-07

Family

ID=78125121

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110674482.9A Active CN113520394B (zh) 2021-06-18 2021-06-18 一种基于表情识别与心理学测试生成性格的分析方法

Country Status (1)

Country Link
CN (1) CN113520394B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003248842A (ja) * 2002-02-25 2003-09-05 Nippon Telegr & Teleph Corp <Ntt> 顔３次元コンピュータグラフィック生成方法、そのプログラム及び記録媒体
CN109064361A (zh) * 2018-08-20 2018-12-21 安阳师范学院 一种心理学职业能力测评***
CN110135242A (zh) * 2019-03-28 2019-08-16 福州大学 基于低分辨率红外热成像深度感知的情绪识别装置及方法
WO2019232579A1 (en) * 2018-06-05 2019-12-12 Sdip Holdings Pty Ltd Technology adapted to enable improved collection of involuntary eyelid movement parameters, including collection of eyelid movement parameters to support analysis of neurological factors
CN110751126A (zh) * 2019-10-30 2020-02-04 王安 一种基于人脸特征判断人物性格的分析方法
WO2020222157A1 (en) * 2019-04-30 2020-11-05 Emoj S.R.L. Method and system for tracking, analyzing and reacting to user behaviour in digital and physical spaces

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8600100B2 (en) * 2009-04-16 2013-12-03 Sensory Logic, Inc. Method of assessing people's self-presentation and actions to evaluate personality type, behavioral tendencies, credibility, motivations and other insights through facial muscle activity and expressions
US10321818B2 (en) * 2016-10-31 2019-06-18 Brainscope Company, Inc. System and method for ocular function tests
US20210000404A1 (en) * 2019-07-05 2021-01-07 The Penn State Research Foundation Systems and methods for automated recognition of bodily expression of emotion

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003248842A (ja) * 2002-02-25 2003-09-05 Nippon Telegr & Teleph Corp <Ntt> 顔３次元コンピュータグラフィック生成方法、そのプログラム及び記録媒体
WO2019232579A1 (en) * 2018-06-05 2019-12-12 Sdip Holdings Pty Ltd Technology adapted to enable improved collection of involuntary eyelid movement parameters, including collection of eyelid movement parameters to support analysis of neurological factors
CN109064361A (zh) * 2018-08-20 2018-12-21 安阳师范学院 一种心理学职业能力测评***
CN110135242A (zh) * 2019-03-28 2019-08-16 福州大学 基于低分辨率红外热成像深度感知的情绪识别装置及方法
WO2020222157A1 (en) * 2019-04-30 2020-11-05 Emoj S.R.L. Method and system for tracking, analyzing and reacting to user behaviour in digital and physical spaces
CN110751126A (zh) * 2019-10-30 2020-02-04 王安 一种基于人脸特征判断人物性格的分析方法

Also Published As

Publication number Publication date
CN113520394A (zh) 2021-10-22

Similar Documents

Publication Publication Date Title
CN107480872B (zh) 一种基于数据交换网络的在线教学考评***及方法
JP4401079B2 (ja) 被験者の行動解析
CN109726663A (zh) 在线考试监控方法、装置、计算机设备及存储介质
CN111326253A (zh) 自闭症谱系障碍患者的多模态情感认知能力的评估方法
Makowski et al. DeepEyedentificationLive: Oculomotoric biometric identification and presentation-attack detection using deep neural networks
Komogortsev et al. Liveness detection via oculomotor plant characteristics: Attack of mechanical replicas
Yang et al. Brain processes while struggling with evidence accumulation during facial emotion recognition: An ERP study
Darwish et al. Biometric identification using the dynamic features of the eyes
Pérez-Rosas et al. A Multimodal Dataset for Deception Detection.
CN111222464B (zh) 情感分析方法以及***
Hoyer et al. Animation and interactivity in computer-based physics experiments to support the documentation of measured vector quantities in diagrams: An eye tracking study
Matlovič Emotion Detection using EPOC EEG device
CN113520394B (zh) 一种基于表情识别与心理学测试生成性格的分析方法
Sanders et al. Non-intrusive classroom attention tracking system (nicats)
Pepe et al. A consideration of signature complexity using simulators’ gaze behaviour
CN114998440B (zh) 基于多模态的测评方法、装置、介质及设备
AU2023201761A1 (en) A scalable configurable universal full spectrum cyber process that utilises measure points from sensor observation-derived representations or analytically rich sparse data sets for making cyber determinations regarding or utilising sensor observations or sensor observations subjects
Orozco et al. Automatic identification of participants in haptic systems
CN115601823A (zh) 一种中小学生专注度追踪及评估方法
Chettaoui et al. Predicting Students Performance Using Eye-Gaze Features in an Embodied Learning Environment
CN208709883U (zh) 非人灵长类动物用的三维视觉刺激实验***
KR102014475B1 (ko) 방송 표준을 위한 개인 맞춤형 ux/ui서비스를 제공하는 장치 및 방법
Lee et al. A multivariate singular spectrum analysis approach to clinically-motivated movement biometrics
CN111048200A (zh) 一种自闭症患者刻板行为评估***、方法及终端
Volk et al. Objective Measurement of Outcomes inFacial Palsy

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant