CN116781876A - 用于使用红外照明器阵列确定生物计量数据的方法和设备 - Google Patents

用于使用红外照明器阵列确定生物计量数据的方法和设备 Download PDF

Info

Publication number
CN116781876A
CN116781876A CN202310829912.9A CN202310829912A CN116781876A CN 116781876 A CN116781876 A CN 116781876A CN 202310829912 A CN202310829912 A CN 202310829912A CN 116781876 A CN116781876 A CN 116781876A
Authority
CN
China
Prior art keywords
user
image
biometric data
video
captured
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202310829912.9A
Other languages
English (en)
Inventor
C·L·克里斯滕森
Z·胡斯埃尼玛卡雷姆
B·查布拉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Micron Technology Inc
Original Assignee
Micron Technology Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Micron Technology Inc filed Critical Micron Technology Inc
Publication of CN116781876A publication Critical patent/CN116781876A/zh
Pending legal-status Critical Current

Links

Classifications

    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0082—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence adapted for particular medical purposes
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0062—Arrangements for scanning
    • A61B5/0064—Body surface scanning
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015—Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/0059—Measuring for diagnostic purposes; Identification of persons using light, e.g. diagnosis by transillumination, diascopy, fluorescence
    • A61B5/0077—Devices for viewing the surface of the body, e.g. camera, magnifying lens
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/01—Measuring temperature of body parts ; Diagnostic temperature sensing, e.g. for malignant or inflamed tissue
    • A61B5/015—By temperature mapping of body part
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/0205—Simultaneously evaluating both cardiovascular conditions and different types of body conditions, e.g. heart and respiratory condition
    • A61B5/02055—Simultaneously evaluating both cardiovascular condition and temperature
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02416—Detecting, measuring or recording pulse rate or heart rate using photoplethysmograph signals, e.g. generated by infrared radiation
    • A61B5/02427—Details of sensor
    • A61B5/02433—Details of sensor for infrared radiation
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116—Determining posture transitions
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/103—Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1126—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique
    • A61B5/1128—Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb using a particular sensing technique using image analysis
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/117—Identification of persons
    • A61B5/1171—Identification of persons based on the shapes or appearances of their bodies or parts thereof
    • A61B5/1176—Recognition of faces
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/48—Other medical applications
    • A61B5/4866—Evaluating metabolism
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/72—Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235—Details of waveform analysis
    • A61B5/7264—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems
    • A61B5/7267—Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems involving training the classification device
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/746—Alarms related to a physiological condition, e.g. details of setting alarm thresholds or avoiding false alarms
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/141—Control of illumination
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/10—Image acquisition
    • G06V10/12—Details of acquisition arrangements; Constructional details thereof
    • G06V10/14—Optical characteristics of the device performing the acquisition or on the illumination arrangements
    • G06V10/143—Sensing or illuminating at different wavelengths
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/103—Static body considered as a whole, e.g. static pedestrian or occupant recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/70—Multimodal biometrics, e.g. combining information from different biometric modalities
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0204—Acoustic sensors
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00—Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02—Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0257—Proximity sensors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/15—Biometric patterns based on physiological signals, e.g. heartbeat, blood flow

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Public Health (AREA)
  • General Health & Medical Sciences (AREA)
  • Animal Behavior & Ethology (AREA)
  • Veterinary Medicine (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • Cardiology (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • Social Psychology (AREA)
  • Signal Processing (AREA)
  • Educational Technology (AREA)
  • Hospice & Palliative Care (AREA)
  • Psychology (AREA)
  • Radiology & Medical Imaging (AREA)
  • Child & Adolescent Psychology (AREA)
  • Nuclear Medicine, Radiotherapy & Molecular Imaging (AREA)
  • Developmental Disabilities (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Dentistry (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Mathematical Physics (AREA)
  • Pulmonology (AREA)
  • Obesity (AREA)
  • Fuzzy Systems (AREA)

Abstract

本申请描述了用于使用红外IR照明器阵列来确定生物计量数据的方法、设备和***。在实例中，一种方法可以包括：使用点阵投影仪和IR照明器阵列将多个IR点投影到用户上；使用IR相机捕获所述多个IR点的IR图像；使用处理资源将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；以及至少部分地基于使用所述处理资源将所述所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据。

Description

用于使用红外照明器阵列确定生物计量数据的方法和设备
分案申请的相关信息
本申请是申请号为202111305144.4、申请日为2021年11月5日、发明名称为“用于使用红外照明器阵列确定生物计量数据的方法和设备”的中国发明专利申请的分案申请。
技术领域
本公开整体涉及红外IR(infrared)照明器阵列，且更具体地，涉及与使用IR照明器阵列确定用户的生物计量数据有关的方法、设备和***。
背景技术
IR照明器可以是例如发射IR光的装置。IR是电磁辐射光谱的区域。IR区域中的波长范围从约700纳米(NM)到1毫米(mm)。点阵投影仪可以将IR光投影为栅格图案。IR相机，也称为热像相机或热成像相机，可以捕获IR光并使用IR光形成热区图像。
发明内容
在一个方面，本公开内容涉及一种方法，所述方法包含：使用点阵投影仪和红外(IR)照明器阵列将多个IR点投影到用户上；使用IR相机捕获所述多个IR点的IR图像；使用处理资源将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；以及至少部分地基于使用所述处理资源将所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据。
在另一方面，本公开涉及一种设备，所述设备包含：红外(IR)照明器阵列，所述IR照明器阵列被配置成产生IR光；点阵投影仪，所述点阵投影仪被配置成使用由所述IR照明器阵列产生的所述IR光将多个IR点投影到用户上；IR相机，所述IR相机被配置成捕获所述多个IR点的IR图像；处理资源，所述处理资源被配置成：将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；以及至少部分基于将所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据；以及用户界面，所述用户界面用于显示视频。
在另一方面，本公开涉及一种设备，所述设备包含：红外(IR)照明器阵列，所述IR照明器阵列被配置成产生IR光；点阵投影仪，所述点阵投影仪被配置成使用由所述IR照明器阵列产生的所述IR光将多个IR点投影到用户上；IR相机，所述IR相机被配置成捕获所述多个IR点的IR图像；处理资源，所述处理资源被配置成：将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；至少部分基于将所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据；以及AI加速器，所述AI加速器被配置成使用所述生物计量数据来执行AI操作。
附图说明
图1示出了根据本公开的数个实施例的用于确定用户的生物计量数据的设备的实例。
图2示出了根据本公开的数个实施例的用于确定用户的生物计量数据的设备的实例。
图3示出了根据本公开的数个实施例的用于确定用户的生物计量数据的设备的实例。
图4是根据本公开的数个实施例的用于确定用户的生物计量数据的方法的流程图。
具体实施方式
本公开包括与使用IR照明器阵列确定生物计量数据相关的方法、设备和***。一种实例方法包括：使用点阵投影仪和IR照明器阵列将数个IR点投影到用户上；使用IR相机捕获数个IR点的IR图像；使用处理资源将所捕获的IR图像的数个像素与基线IR图像的数个对应像素进行比较；以及至少部分地基于使用处理资源将所捕获的IR图像与基线IR图像进行比较，来确定用户的生物计量数据。所确定的生物计量数据可以包括用户的心率、温度、卡路里燃烧速率(例如，一段时间内燃烧的卡路里数)、身体状态和/或情绪状态。可以基于用户面部的IR图像中的热分布(例如，每像素的强度参数)来确定用户的健康(例如，身体状态)，并且可以基于用户肌肉的IR图像中的热分布来确定用户的运动状态(例如，身体状态)。例如，正被锻炼的肌肉将比未被锻炼的肌肉产生更多的热量。在一些实例中，可以至少部分地基于用户的姿势、面部表情、声音和/或手势来确定用户的情绪状态。
如本文所用，用户可以是一或多个用户。用户的IR图像可以包括用户的整个身体或用户身体的一部分。用户身体的一部分可以是例如面部、头部、眼、耳、鼻、腿、臂或手。
基线IR图像还可以包括整个身体或身体的一部分。基线IR图像可以是例如用户的中性状态、由用户的数个先前拍摄的IR图像创建的用户的平均IR图像或来自库的普通人的IR图像。
单个IR照明器可以在区域上发射IR光，并且IR照明器阵列(例如，多个IR照明器)可以在更大的区域上发射IR光。例如，在单个IR照明器可以在用户的面部上发射IR光的情况下，IR照明器阵列可以在用户的整个身体上发射IR光。用IR光覆盖用户的整个身体可以允许IR相机捕获用户的整个身体的IR图像。
在数个实施例中，数个IR点的第一部分可由点阵投影仪投影到用户身体的第一部分上，并且数个IR点的第二部分可由点阵投影仪投影到用户身体的第二部分上。在一些实例中，数个IR点的第一部分可以是第一直径，并且数个IR点的第二部分可以是第二直径。当将点投影到需要IR图像中更多细节的用户身体的一部分上时，点直径可以更小，而当将点投影到需要IR图像中较少细节的用户身体的一部分上时，点直径可以更大。点阵投影仪可以将具有较小直径的点投影到用户身体的一部分上，其中用户身体在轮廓、颜色和/或形状上具有更多变化。例如，点阵投影仪可以将具有较小直径的点投影到用户的面部上，而将具有较大直径的点投影到用户的躯干上。在一些实例中，减小IR点直径允许在区域中投影更多的点，这在该区域中创建用户的更详细的IR图像。
这样，点阵投影仪投射到用户身体的一部分上的IR点的数量可以取决于需要IR图像中的更多细节的地方。点阵投影仪可以将数个IR点的第一部分投影到用户身体的第一部分上，并且将数个IR点的第二部分投影到用户身体的第二部分上，其中IR点的第一部分的数量大于IR点的第二部分的数量。点阵投影仪可以将更多数量的IR点投影到用户身体的一部分上，其中用户身体在轮廓、颜色和/或形状上具有更多变化。例如，点阵投影仪可以将更多数量的IR点投影在用户的耳朵上，而不是在用户的下巴上，因为用户的耳朵比用户的下巴具有更多的轮廓。
在数个实施例中，轴棱镜或轴棱镜阵列可以与IR照明器阵列、点阵投影仪和/或IR相机结合使用。轴棱镜是具有圆形孔径的锥形光学元件。轴棱镜可以防止光衍射。IR光可衍射并随距离损失其强度。将轴棱镜放置在点阵投影仪的前面，将使得IR光不发生衍射并且允许IR光在更大的距离上保持其强度。在一些实例中，一种包括IR照明器阵列、点阵投影仪、轴棱镜阵列和IR相机的设备，与包括IR照明器阵列、点投影和没有轴棱镜阵列的IR相机的设备相比，可以在距该设备更大的距离处，来投影和捕获数个IR点的IR图像。
IR相机可以捕获由IR照明器阵列发射的IR光并且使用数个IR点形成IR图像(例如，热区图像)。在数个实施例中，可以使用数个IR相机来捕获数个IR图像。例如，数个IR相机中的每一个可以位于不同的位置，以在用户的不同侧和/或用户的不同角度捕获用户的IR图像。
如本文所用，“数个”某物可以指一或多个此类事物。例如，数个计算装置可以指一或多个计算装置。“多个”某物意指两个或两个以上。另外，如本文所用，诸如“X”和“Y”的指示符，特别是关于附图中的参考数字，指示如此指定的数个特定特征可包括在本公开的数个实施例中。
本文的附图遵循编号惯例，其中第一个数字或多个数字对应于附图编号，而其余数字标识附图中的元件或组件。可通过使用类似数字来标识不同附图之间的类似元件或组件。例如，附图标记102可以表示图1中的元件“2”，并且类似的元件可以表示为图2中的202。在一些情况下，同一附图或不同附图中的多个类似但功能上和/或结构上可区分的元件或组件可以用相同的元件编号(例如，图1中的104－1、104－2和104－X)顺序地引用。如将所理解，可以添加、交换和/或消除本文的各个实施例中示出的元件，以便提供本公开的数个附加实施例。此外，附图中提供的元件的比例和相对比例，旨在示出本公开的各种实施例，而不用于限制的意义。
图1示出了根据本公开的数个实施例的用于确定用户106的生物计量数据的设备110的实例。设备110可以是但不限于电视、智能电视、游戏***、一件健身器材、智能镜、计算装置、个人膝上型计算机、台式计算机、智能电话、平板电脑、腕带装置、数码相机和/或它们的冗余组合。如图1所示，设备110可以包括红外照明器100、点阵投影仪102、数个轴棱镜104－1、104－2……104－X和IR相机108。
例如，生物计量数据可以包括用户的心率、温度、卡路里燃烧速率、身体状态和/或情绪状态。可以至少部分地基于用户的姿势、面部表情、声音和/或手势，来确定用户的情绪状态。
一或多个IR图像可用于确定用户的心率、温度、卡路里燃烧速率、姿势、面部表情和/或姿势。一或多个IR图像可以通过使用点阵投影仪102和IR照明器100将数个IR点105－1、105－2……105－Y投影到用户106上并使用IR相机108来捕获数个IR点105－1、105－2……105－Y的IR图像来创建。
IR照明器100可以发射IR光。IR照明器100可以是单个IR照明器和/或IR照明器阵列。如前所述，与单个IR照明器相比，IR照明器阵列可以在更大的区域上发射IR光。例如，单个IR照明器可以在用户身体的一部分上发射IR光，而IR照明器阵列可以在数个用户上发射IR光。
利用由IR照明器100发射的IR光的点阵投影仪102可以将数个点105－1、105－2……105－Y通过数个轴棱镜104－1、104－2……104－X6666直接投影到用户106上和/或来自点阵投影仪102的数个用户上。例如，数个IR点105－1、105－2……105－Y的第一部分可由点阵投影仪102投影到第一用户上，而数个IR点105－1、105－2……105－Y的第二部分可由点阵投影仪102投影到第二用户上。
在数个实施例中，数个IR点105－1、105－2……105－Y的第一部分可由点阵投影仪102投影到用户106的身体的第一部分上，而数个IR点105－1、105－2……105－Y的第二部分可由点阵投影仪102投影到用户106的身体的第二部分上。例如，数个IR点105－1、105－2……105－Y的第一部分可以包括IR点105－1和105－2，而数个IR点105－1、105－2……105－Y的第二部分可以包括IR点105－Y。
数个IR点105－1、105－2……105－Y的第一部分可以是第一直径，且数个IR点105－1、105－2……105－Y的第二部分可以是第二直径。在一些实例中，可以由IR光从IR投影仪102传播的距离来确定IR点的直径。例如，IR光行进越远，IR点就越大，这样，当用户106较远时，IR投影仪102可以投射较小的IR点，而当用户106较靠近IR投影仪102时，就可以投影较大的IR点。
虽然未在图1中示出，但是当IR点被投影到需要IR图像中更多细节的用户身体的一部分上时，IR点直径可以更小，而当IR点被投影到需要IR图像中较少细节的用户身体的一部分上时，IR点直径可以更大。点阵投影仪102可以将具有较小直径的点投影到用户身体的一部分上，其中用户身体在轮廓、颜色和/或形状上具有更多变化。例如，点阵投影仪102可以将具有较小直径的IR点投影到用户面部上，并将具有较大直径的IR点投影到用户身体，例如，颈部、肩部、胸部、躯干、手臂和/或腿上。在一些实例中，减小IR点直径允许在区域中投影更多的IR点，这在该区域中创建用户106的更详细的IR图像。
点阵投影仪102投影到用户身体的一部分上的IR点105－1、105－2……105－Y的数量可以取决于需要IR图像中的更多细节的位置。点阵投影仪102可以将数个IR点105－1、105－2……105－Y的第一部分投影到用户身体的第一部分上，并将数个IR点105－1、105－2……105－Y的第二部分投影到用户身体的第二部分上。点阵投影仪102可以将更多数量的IR点105－1、105－2……105－Y投影到用户身体的一部分上，其中用户身体在轮廓、颜色和/或形状上具有更多变化。例如，点阵投影仪102可以将更多数量的IR点105－1、105－2……105－Y投影到用户106的耳朵上，而不是用户106的下巴上，因为用户的耳朵比用户的下巴具有更多的轮廓。
在数个实施例中，轴棱镜104或轴棱镜阵列104－1、104－2……104－X可以与IR照明器100、点阵投影仪102和/或IR相机108结合使用。轴棱镜104是具有圆形孔径的锥形光学元件。轴棱镜104可以防止光衍射。IR光可衍射并随距离损失其强度。将轴棱镜104放置在点阵投影仪102的前面，将使IR光不发生衍射，并允许IR光在更大的距离上保持其强度。在一些实例中，与没有轴棱镜阵列104－1、104－2……104－X的设备相比，包括IR照明器100、点阵投影仪102、轴棱镜阵列104－1、104－2……104－X和IR相机108的设备110可以在距设备110更大的距离处投影和捕获数个IR点105－1、105－2……105－Y的图像。
IR相机108可以捕获由IR照明器100发射的IR光，并捕获数个IR点105－1、105－2……105－Y的IR图像。在数个实施例中，数个IR相机108可用于捕捉数个IR点105－1、105－2……105－Y。例如，数个IR相机108中的每一个可以位于不同的位置以捕获用户106不同侧的数个IR点105－1、105－2……105－Y。
图2示出了根据本公开的数个实施例的用于确定用户的生物计量数据的设备210的实例。设备210可以对应于图1中的设备110。设备210可以包括红外照明器200、点阵投影仪202和IR相机208。红外照明器200、点阵投影仪202和IR相机208可以分别对应于图1中的红外照明器100、点阵投影仪102和IR相机108。如图2所示，设备210可以进一步包括处理资源212和存储器222。
存储器222可以是可由处理资源212存取以执行本公开的各种实例的任何类型的存储介质。例如，存储器222可以是具有存储在其上的计算机可读指令(例如，计算机程序指令)的非瞬态计算机可读介质，这些指令可由处理资源212执行以经由IR照明器产生IR光，使用由IR照明器产生的IR光经由点阵投影仪将数个IR点投影到用户上，经由IR相机捕获该数个IR点的IR图像，将所捕获的IR图像的数个像素与基线IR图像的数个对应像素进行比较，并且至少部分地基于所捕获的IR图像与基线IR图像的比较来确定用户的生物计量数据。
在数个实施例中，图2中未示出的一或多个传感器可以包括在设备210中。例如，设备210可以包括用于捕获可见光图像的可见光相机。所捕获的可见光图像可以与所捕获的IR图像一起用于确定用户的生物计量数据。例如，所捕获的可见光图像可包括可用于确定用户的情绪状态的面部表情。然而，面部表情可能意味着基于人的地理位置、种族和/或文化的不同情绪状态。因此，所捕获的IR图像可与所捕获的可见光图像结合使用，以确定用户的真实情绪状态。
处理资源212可以从IR相机208和/或从存储器222接收一或多个IR图像。在一些实例中，处理资源212可以将来自IR相机208的IR图像与来自存储器222的IR图像组合。例如，来自IR相机208的IR图像可能不如来自存储器222的IR图像详细，因为与来自存储器222的IR图像相比，它是从离用户更远的距离而捕获的。处理装置212可以使用来自存储器222的IR图像和来自IR相机208的IR图像来创建用户的更准确的生物计量数据。
在数个实施例中，存储器222可以存储用户的生物计量数据。在一些实例中，可以在玩视频游戏、观看电影、观看教学视频和/或健身视频时使用生物计量数据。
存储器222可以是易失性或非易失性存储器。存储器222还可以是可移动(例如，便携式)存储器或不可移动(例如，内部)存储器。例如，存储器222可以是随机存取存储器(RAM)(例如，动态随机存取存储器(DRAM)和/或相变随机存取存储器(PCRAM))、只读存储器(ROM)(例如，电可擦除可编程只读存储器(EEPROM)和/或光盘只读存储器(CD－ROM))、闪存、激光盘、数字多功能盘(DVD)或其它光学存储和/或诸如磁带盒、磁带或磁盘等的磁介质，以及其它类型的存储器。
此外，虽然存储器222被示为位于设备200内，但是本公开的实施例不限于此。例如，存储器222可以位于外部设备上(例如，使计算机可读指令能够通过因特网或其它有线或无线连接下载)。
图3示出了根据本公开的数个实施例的用于确定用户的生物计量数据的设备310的实例。设备310可以对应于图2中的设备210。设备310可以包括IR照明器300、点阵投影仪302、轴棱镜304，IR相机308、处理资源312和存储器322。IR照明器300、点阵投影仪302、IR相机308、处理资源312和存储器322可以分别对应于图2中的红外照明器200、点阵投影仪202、IR相机208、处理资源212和存储器222。轴棱镜304可以对应于图1中的轴棱镜104。如图3所示，设备310还可以包括用户界面314、声学传感器316、接近传感器320、AI加速器324、扬声器328和灯329。
AI加速器324可以包括被配置成使用一或多个AI模型来执行与AI操作相关联的操作(例如，逻辑操作等)的硬件、软件和/或固件。AI模型可以存储在存储器322中和/或设备310的外部。在数个实施例中，可以在设备310上和/或外部训练AI模型。来自用户的数据或样本数据可用于训练AI模型。在一些实例中，可以使用具有相应基线IR图像的人的数个心率、心率状况(例如，心跳的频率和/或幅度)、温度、卡路里燃烧速率、身体状态和/或情绪状态，来训练AI模型。例如，被识别为具有愤怒情绪状态的人的基线IR图像可用于训练AI模型。与放松的人的IR图像相比，愤怒的人的基线IR图像将包括更多的由血流产生的热量。例如，愤怒的人的基线IR图像将包括位于特定颜色值范围内的数个像素。
AI加速器324可以包括训练参数，以训练AI模型。训练参数可以包括强度和亮度分布、不同波长(例如光谱)下的强度或热分布、高通和/或低通滤波数据上的空间分布比较、傅立叶域中的两个IR图像之间的差异和/或特征提取和分类。
来自所捕获的IR图像的数据可以输入到AI模型中。数据可以包括所捕获的IR图像的每个像素的颜色值。可以将数个像素中的每一个的颜色值与来自一或多个基线IR图像的数个像素中的每一个的颜色值进行比较。例如，AI模型可以将所捕获的IR图像的数个像素与基线IR图像的数个对应像素进行比较。例如，如果所捕获的图像的数个像素和基线IR图像的数个像素来自面部的相同特定区域，则捕获的IR图像的数个像素可以对应于基线IR图像的数个像素。如果所捕获的IR图像的数个像素在基线图像的数个像素的特定颜色值范围内，则用户的生物计量数据(例如，心率、温度、卡路里燃烧速率、身体状态和/或情绪状态)可以与用基线IR图像识别的生物计量数据相同或相似。
在一些实例中，可以通过外推基线IR图像的生物计量数据，来确定所捕获的IR图像中的用户的生物计量数据。例如，基线IR图像可以与温度相关联。可以通过将所捕获的IR图像与基线IR图像进行比较，以确定差值并且使用该差值和与基线IR图像相关联的温度，来计算与所捕获的IR图像相关联的温度来确定与所捕获的IR图像相关联的温度。用户界面314可以由设备310生成。用户界面314可以是能够向设备310的用户提供信息和/或从设备的用户接收信息的图形用户界面(GUI)。用户界面314可以显示在设备310的显示器上。
在数个实施例中，可以响应于来自用户的输入来生成用户界面314。生成用户界面314的用户输入可以包括例如对设备310加电和/或选择应用。
一旦在设备310上生成了用户界面314，用户界面314就可以显示视频。在一些实例中，视频可以是视频游戏、电影、教学视频或健身视频。在数个实施例中，可以使用AI加速器324对生物计量数据执行AI操作，并且可以响应于AI操作的输出来修改视频。
可以响应于用户的生物计量数据来修改视频。例如，AI加速器324可以响应于对用户的生物计量数据执行AI操作而输出使视频减速、加速和/或关闭的命令。在数个实施例中，可以响应于所确定的用户的生物计量数据在特定范围之外而减慢或加速视频。该特定范围可以是健康的心率范围，例如，如果用户的心率低于该特定范围，则可以加速视频，而如果用户的心率高于特定范围，则可以减慢视频。IR图像可以捕获静脉的尺寸，并且在数个IR图像上跟踪静脉变得越来越大和越来越小，以确定用户的心率。
AI加速器324可以通过分析一或多个所捕获的IR图像并加速视频游戏，来确定用户正厌烦视频游戏。AI加速器324可以通过量化用户从用户界面314观看的速率来确定用户正变得厌烦。例如，AI加速器324可以使用第一时间段上的第一数量的IR图像来确定用户离开用户界面314第一次数，并且使用第二时间段上的第二数量的IR图像来确定用户离开用户界面314第二次数。如果用户从用户界面314离开的第二次数大于第一次数，则AI加速器324可以输出命令以加速游戏，从而尝试使用户重新参与视频游戏。
在一些实例中，可以响应于用户的生物计量数据来改变视频的故事、任务和/或目标。例如，处理资源312可通过使用一段时间内的数个IR图像计算用户的心率，来确定用户已达到其心率目标。响应于用户满足其心率目标，AI加速器324可以为锻炼视频创建新的健身目标。
用户界面314还可以显示消息。可以响应于AI操作的输出来显示消息。例如，AI加速器324可以确定用户的心率是不规则的，并且用户需要医疗照顾。响应于确定用户需要医疗照顾的AI操作，可以在用户界面314上显示用户需要医疗照顾的消息。
设备310可以包括声学传感器316。声学传感器316可以检测用户产生的声音。检测到的声音例如可以包括但不限于说话、呼吸和/或脚步声。由声学传感器316捕获的声音的语言、音量和/或音调可以由AI加速器324分析。在数个实施例中，可以使用AI加速器324对声音数据执行AI操作。例如，AI加速器324可以通过对声音数据执行AI操作来确定用户已疲惫。声音数据可以包括用户在一段时间内呼吸的记录。例如，响应于AI加速器324确定用户在该时间段内呼吸加快，AI加速器324可以输出命令以减慢视频和/或改变视频的目标。
可以使用接近传感器320来检测用户的移动。可以对由接近传感器320从用户的移动收集的数据执行AI操作。AI加速器324可以确定用户移动的速度、用户移动的力和/或用户移动的方向。在一些实例中，AI加速器324可基于所确定的速度、所确定的力和/或所确定的用户移动方向来确定故事、任务和/或目标的结果。例如，在高尔夫视频游戏中，用户的挥杆可能已经在正确的方向上并且具有足够的力量击沉推杆并且将用户带到新的球洞。
扬声器328可以包括在设备310中。扬声器328可以基于AI操作的输出产生一种声音和/或多种声音。例如，AI加速器324可以对用户的生物计量数据执行AI操作，并确定用户的身体和/或情绪状态。生物计量数据可以包括用户的IR图像，该IR图像具有慵懒的姿势和/或皱眉的面部表情。基于IR图像，AI加速器324可以确定用户正伤心。例如，响应于AI加速器324确定用户正伤心，扬声器328可以播放欢快的歌曲和/或播放用户喜爱的歌曲。
设备310可以包括灯329。类似于扬声器328，灯329可以基于AI操作的输出发射一种类型的光。例如，AI加速器324可以对用户的生物计量数据执行AI操作，并确定用户的身体和/或情绪状态。生物计量数据可以包括用户眼睛闭合的数个IR图像。基于该数个IR图像，AI加速器324可以确定用户正在睡眠。响应于AI加速器324确定用户正在睡眠，灯329可以发射柔和的夜灯辉光。
图4是根据本公开的数个实施例的用于确定用户的生物计量数据的方法430的流程图。在框432，方法430可包括使用点阵投影仪和IR照明器阵列将数个IR点投影到用户上。
IR照明器可以发射IR光。在一些实例中，IR照明器可以发射不同强度的IR光。点阵投影仪可以利用由IR照明器发射的IR光将数个点投影到用户和/或数个用户上。点阵投影仪可以以不同的尺寸投射数个点。在一些实例中，点阵投影仪可以改变投影的点的数量。
在框434处，方法430可以包括使用IR相机来捕获数个IR点的IR图像。IR相机可以捕获由IR照明器发射的IR光。例如，IR图像可以是热区图像。
在框436处，方法430可包括使用处理资源将所捕捉的IR图像的数个像素与基线IR图像的数个对应像素进行比较。在一些实例中，可以将一或多个所捕获的IR图像与一或多个基线IR图像进行比较。一或多个所捕获的IR图像和/或一或多个基线IR图像可以来自IR相机和/或存储器。
在框438处，方法430可包括至少部分地基于使用处理资源将所捕捉的IR图像与基线IR图像进行比较，来确定用户的生物计量数据。在数个实施例中，当玩视频游戏、观看电影、观看教学视频和/或健身视频时，可以使用生物计量数据。例如，可以响应于生物计量数据来修改视频游戏、电影、教学视频和/或健身视频。
尽管这里已经示出和描述了特定实施例，但是本领域的普通技术人员将理解，可以用计算为实现相同结果的布置来代替所示的特定实施例。本公开旨在覆盖本公开的一或多个实施例的修改或变化。应当理解，以上描述是以说明性的方式进行的，而不是限制性的方式。通过阅读以上描述，上述实施方案的组合以及本文未特别描述的其他实施方案对于本领域技术人员将是显而易见的。本公开的一或多个实施例的范围包括其中使用上述结构和方法的其它应用。因此，本公开的一或多个实施例的范围应当参考所附权利要求以及这些权利要求被授权的等同物的全部范围来确定。
在前面的具体实施方式中，出于简化本公开的目的，将一些特征组合在单个实施例中。本公开的方法不应被解释为反映本公开的所公开的实施例必须使用比每个权利要求中明确记载的特征更多的特征的意图。相反，如以下权利要求所反映，发明主题在于少于单个公开实施例的所有特征。因此，下面的权利要求由此被结合到具体实施方式中，其中每个权利要求独立地作为单独的实施例。

Claims (19)

1.一种方法，所述方法包含：
使用点阵投影仪和红外IR照明器阵列将多个IR点投影到用户上；
使用IR相机捕获所述多个IR点的IR图像；
使用处理资源将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；
至少部分地基于使用所述处理资源将所述所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据；以及
基于所述用户的所确定的生物计量数据，修改显示在用户界面上的视频。
2.根据权利要求1所述的方法，所述方法进一步包含响应于所述用户的所确定的生物计量数据高于特定范围，通过放慢所述视频来修改显示在所述用户界面上的所述视频。
3.根据权利要求2所述的方法，所述方法进一步包含所述方法进一步包含响应于所述用户的所确定的生物计量数据低于所述特定范围，通过加速所述视频来修改显示在所述用户界面上的所述视频。
4.根据权利要求3所述的方法，其中所述特定范围是健康心率范围。
5.根据权利要求4所述的方法，所述方法进一步包含在包括所述所捕获的IR图像的多个IR图像中的每一者中捕获所述用户的静脉的尺寸。
6.根据权利要求5所述的方法，所述方法进一步包含基于所述多个IR图像来确定所述用户的心率。
7.根据权利要求1所述的方法，所述方法进一步包含在包括所述所捕获的IR图像的多个IR图像中的每一者中捕获所述用户的面部。
8.根据权利要求7所述的方法，所述方法进一步包含基于所述多个IR图像来确定所述用户离开所述视频的速率。
9.根据权利要求8所述的方法，所述方法进一步包含将所述用户离开所述视频的所述速率与之前的速率进行比较。
10.根据权利要求9所述的方法，所述方法进一步包含响应于所述用户离开所述视频的所述速率大于所述之前的速率，加速所述视频。
11.根据权利要求1所述的方法，所述方法进一步包含基于所确定的生物计量数据，响应于所述用户的所确定的生物计量数据，通过关闭所述视频来修改显示在所述用户界面上的所述视频。
12.一种设备，所述设备包含：
红外IR照明器阵列，所述IR照明器阵列经配置以产生IR光；
点阵投影仪，所述点阵投影仪经配置以使用由所述IR照明器阵列产生的所述IR光将多个IR点投影到用户上；
IR相机，所述IR相机经配置以捕获所述多个IR点的IR图像；
处理资源，所述处理资源经配置以：
将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；和
至少部分地基于将所述所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据；以及
用户界面，其用于基于所述用户的所确定的生物计量数据来显示视频。
13.根据权利要求12所述的设备，其进一步包括接近传感器，所述接近传感器经配置以收集包括所述用户的运动的数据。
14.根据权利要求13所述的设备，其中所述处理资源经配置以确定以下至少之一：所述用户的所述运动的速度、力或方向。
15.根据权利要求14所述的设备，其中显示在所述用户界面上的所述视频基于以下至少之一：所述用户的所述运动的所述速度、所述力或所述方向。
16.根据权利要求14所述的设备，其中所述处理资源经配置以基于所述用户的所述运动的所述速度、所述力或所述方向中的至少一者来确定以下各项中的至少一项：显示在所述用户界面上的所述视频的结果、任务或目标。
17.一种设备，所述设备包含：
红外IR照明器阵列，所述IR照明器阵列经配置以产生IR光；
点阵投影仪，所述点阵投影仪经配置以使用由所述IR照明器阵列产生的所述IR光将多个IR点投影到用户上；
IR相机，所述IR相机经配置以捕获所述多个IR点的IR图像；
处理资源，所述处理资源经配置以：
将所捕获的IR图像的多个像素与基线IR图像的多个对应像素进行比较；
至少部分基于将所述所捕获的IR图像与所述基线IR图像进行比较，来确定所述用户的生物计量数据；以及
基于所确定的生物计量数据为所述用户确定目标。
18.根据权利要求17所述的设备，其中所述目标是心率目标。
19.根据权利要求17所述的设备，其中所述处理资源经配置以响应于所述用户满足先前目标而为所述用户确定所述目标。
CN202310829912.9A 2020-11-09 2021-11-05 用于使用红外照明器阵列确定生物计量数据的方法和设备 Pending CN116781876A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US17/092,678 2020-11-09
US17/092,678 US11219371B1 (en) 2020-11-09 2020-11-09 Determining biometric data using an array of infrared illuminators
CN202111305144.4A CN114466172B (zh) 2020-11-09 2021-11-05 用于使用红外照明器阵列确定生物计量数据的方法和设备

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN202111305144.4A Division CN114466172B (zh) 2020-11-09 2021-11-05 用于使用红外照明器阵列确定生物计量数据的方法和设备

Publications (1)

Publication Number Publication Date
CN116781876A true CN116781876A (zh) 2023-09-19

Family

ID=79169166

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202310829912.9A Pending CN116781876A (zh) 2020-11-09 2021-11-05 用于使用红外照明器阵列确定生物计量数据的方法和设备
CN202111305144.4A Active CN114466172B (zh) 2020-11-09 2021-11-05 用于使用红外照明器阵列确定生物计量数据的方法和设备

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN202111305144.4A Active CN114466172B (zh) 2020-11-09 2021-11-05 用于使用红外照明器阵列确定生物计量数据的方法和设备

Country Status (3)

Country Link
US (3) US11219371B1 (zh)
CN (2) CN116781876A (zh)
DE (1) DE102021127150A1 (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09130679A (ja) * 1995-10-27 1997-05-16 Fujitsu Ltd 赤外線撮像装置
US20090012402A1 (en) * 2006-03-20 2009-01-08 Mintz Frederick W Mobile in vivo infra red data collection and diagnoses comparison system
CN102542258A (zh) * 2011-12-16 2012-07-04 天津理工大学 基于手指生物特征信息的成像设备及多模态身份识别方法
EP2946339A1 (en) * 2013-01-17 2015-11-25 Sionyx, Inc. Biometric imaging devices and associated methods
CN105308626A (zh) * 2013-01-17 2016-02-03 西奥尼克斯股份有限公司 生物识别成像装置以及其方法
US20190192010A1 (en) * 2017-12-22 2019-06-27 Viraj Mane Detection of flu using thermal imaging

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP1646310B1 (en) 2003-05-27 2015-07-08 Cardiowave, Inc. Methods and apparatus for a remote, noninvasive technique to detect core body temperature in a subject via thermal imaging
US20060274918A1 (en) 2005-06-03 2006-12-07 Sarnoff Corporation Method and apparatus for designing iris biometric systems for use in minimally constrained settings
US8792968B2 (en) * 2006-09-25 2014-07-29 Song Xiao System and method for health evaluation
US8463006B2 (en) 2007-04-17 2013-06-11 Francine J. Prokoski System and method for using three dimensional infrared imaging to provide detailed anatomical structure maps
US10628729B2 (en) 2010-06-08 2020-04-21 Styku, LLC System and method for body scanning and avatar creation
CN102542281B (zh) * 2010-12-27 2017-02-22 北京北科慧识科技股份有限公司 非接触式生物特征识别方法和***
KR20160068884A (ko) 2013-10-08 2016-06-15 에스알아이 인터내셔널 홍채 생체 인식 모듈 및 액세스 제어 조립체
JP6447516B2 (ja) * 2013-12-27 2019-01-09 ソニー株式会社 画像処理装置、および画像処理方法
EP3801215A4 (en) * 2018-05-30 2022-03-30 Thermworx, LLC INFRARED THERMOGRAPHY PLATFORM FOR DETERMINING PERSONAL VASCULAR HEALTH
US11627007B2 (en) * 2018-06-07 2023-04-11 Maxell, Ltd. Mobile information terminal
JP7312957B2 (ja) * 2018-06-21 2023-07-24 パナソニックＩｐマネジメント株式会社 肌評価装置、肌評価システム、肌評価方法、および肌評価のためのプログラムを格納したコンピュータ読み取り可能な記録媒体
CN112446243A (zh) * 2019-08-29 2021-03-05 鸿富锦精密电子(郑州)有限公司 电子装置及基于情绪的内容推送方法
US20230111692A1 (en) * 2020-01-23 2023-04-13 Utest App, Inc. System and method for determining human emotions

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09130679A (ja) * 1995-10-27 1997-05-16 Fujitsu Ltd 赤外線撮像装置
US20090012402A1 (en) * 2006-03-20 2009-01-08 Mintz Frederick W Mobile in vivo infra red data collection and diagnoses comparison system
US20150356351A1 (en) * 2011-07-13 2015-12-10 Sionyx, Inc. Biometric Imaging Devices and Associated Methods
CN102542258A (zh) * 2011-12-16 2012-07-04 天津理工大学 基于手指生物特征信息的成像设备及多模态身份识别方法
EP2946339A1 (en) * 2013-01-17 2015-11-25 Sionyx, Inc. Biometric imaging devices and associated methods
CN105308626A (zh) * 2013-01-17 2016-02-03 西奥尼克斯股份有限公司 生物识别成像装置以及其方法
US20190192010A1 (en) * 2017-12-22 2019-06-27 Viraj Mane Detection of flu using thermal imaging

Also Published As

Publication number Publication date
US11219371B1 (en) 2022-01-11
CN114466172A (zh) 2022-05-10
CN114466172B (zh) 2023-07-25
US20230148866A1 (en) 2023-05-18
US11793407B2 (en) 2023-10-24
US11559206B2 (en) 2023-01-24
DE102021127150A1 (de) 2022-05-12
US20220142486A1 (en) 2022-05-12

Similar Documents

Publication Publication Date Title
US20240045470A1 (en) System and method for enhanced training using a virtual reality environment and bio-signal data
US20200297262A1 (en) Directing live entertainment using biometric sensor data for detection of neurological state
US20200401216A1 (en) Technique for controlling virtual image generation system using emotional states of user
Manera et al. Cooperation or competition? Discriminating between social intentions by observing prehensile movements
JP2020502603A (ja) 頭部装着ディスプレイにおける仮想現実（ｖｒ）コンテンツの視野（ｆｏｖ）絞り
Han et al. Balancing accuracy and fun: designing camera based mobile games for implicit heart rate monitoring
BRPI1011193B1 (pt) método e sistema para prover ajuda com relação a um gesto realizado por usuário
JP2013545163A (ja) サーマルイメージングを用いたユーザインタフェースシステムおよび方法
US20140307927A1 (en) Tracking program and method
US20200349337A1 (en) Emotion sensing artificial intelligence
US20160106329A1 (en) Utilizing different color channels for rgb-image-based differential heart rate detection
Sundstedt et al. A psychophysical study of fixation behavior in a computer game
US20200219468A1 (en) Head mounted displaying system and image generating method thereof
US20230047787A1 (en) Controlling progress of audio-video content based on sensor data of multiple users, composite neuro-physiological state and/or content engagement power
US10814197B2 (en) System, method and apparatus for improving human response, sensitivity and performance
CN114466172B (zh) 用于使用红外照明器阵列确定生物计量数据的方法和设备
US20210187374A1 (en) Augmented extended realm system
AU2020102908A4 (en) IOTM- Class Monitoring System: IoT and AI based Monitoring System for Faculty and their Course Materials Availability
Zimmons The influence of lighting quality on presence and task performance in virtual environments
US20210409617A1 (en) Displaying a three-dimensional image of a user using an array of infrared illuminators
Bačić et al. Towards Real-Time Drowsiness Detection for Elderly Care
US20230241453A1 (en) Exercise motion system and method
Lages Nine Challenges for Immersive Entertainment
JP2024506427A (ja) 登録されたエクステンデッドリアリティ機器ユーザの集中度を管理及び制御する方法、装置並びにシステム
Bassano The Perception/Action loop: A Study on the Bandwidth of Human Perception and on Natural Human Computer Interaction for Immersive Virtual Reality Applications.

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination