CN102216876A - 用于生成基于心情的触觉反馈的方法和装置 - Google Patents

用于生成基于心情的触觉反馈的方法和装置 Download PDF

Info

Publication number
CN102216876A
CN102216876A CN2009801460245A CN200980146024A CN102216876A CN 102216876 A CN102216876 A CN 102216876A CN 2009801460245 A CN2009801460245 A CN 2009801460245A CN 200980146024 A CN200980146024 A CN 200980146024A CN 102216876 A CN102216876 A CN 102216876A
Authority
CN
China
Prior art keywords
user
mood
situation
sensing
haptic
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009801460245A
Other languages
English (en)
Other versions
CN102216876B (zh
Inventor
J·M·克鲁兹-埃尔南德兹
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Immersion Corp
Original Assignee
Immersion Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Immersion Corp filed Critical Immersion Corp
Priority to CN201510083095.2A priority Critical patent/CN104571535B/zh
Publication of CN102216876A publication Critical patent/CN102216876A/zh
Application granted granted Critical
Publication of CN102216876B publication Critical patent/CN102216876B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/02—Detecting, measuring or recording pulse, heart rate, blood pressure or blood flow; Combined pulse/heart-rate/blood pressure determination; Evaluating a cardiovascular condition not otherwise provided for, e.g. using combinations of techniques provided for in this group with electrocardiography or electroauscultation; Heart catheters for measuring blood pressure
    • A61B5/024—Detecting, measuring or recording pulse rate or heart rate
    • A61B5/02438—Detecting, measuring or recording pulse rate or heart rate with portable devices, e.g. worn by the patient
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/16—Devices for psychotechnics; Testing reaction times ; Devices for evaluating the psychological state
    • A61B5/165—Evaluating the state of mind, e.g. depression, anxiety
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/68—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887—Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898—Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • A—HUMAN NECESSITIES
    • A61—MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61B—DIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00—Measuring for diagnostic purposes; Identification of persons
    • A61B5/74—Details of notification to user or communication with user or patient ; user input means
    • A61B5/7455—Details of notification to user or communication with user or patient ; user input means characterised by tactile indication, e.g. vibration or electrical stimulation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/23—Updating
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/10—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals
    • A63F2300/1012—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game characterized by input arrangements for converting player-generated signals into game device control signals involving biosensors worn by the player, e.g. for measuring heart beat, limb activity
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F2300/00—Features of games using an electronically generated display having two or more dimensions, e.g. on a television screen, showing representations related to the game
    • A63F2300/60—Methods for processing data by generating or executing the game program
    • A63F2300/6027—Methods for processing data by generating or executing the game program using adaptive systems learning from user actions, e.g. for skill level adjustment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/011—Emotion or mood input determined on the basis of sensed human body parameters such as pulse, heart rate or beat, temperature of skin, facial expressions, iris, voice pitch, brain activity patterns
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01—Indexing scheme relating to G06F3/01
    • G06F2203/013—Force feedback applied to a game
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/12—Details of telephonic subscriber devices including a sensor for measuring a physical value, e.g. temperature or motion

Landscapes

  • Engineering & Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Biomedical Technology (AREA)
  • General Health & Medical Sciences (AREA)
  • Veterinary Medicine (AREA)
  • Molecular Biology (AREA)
  • Public Health (AREA)
  • Animal Behavior & Ethology (AREA)
  • Surgery (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Medical Informatics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Psychiatry (AREA)
  • Cardiology (AREA)
  • Child & Adolescent Psychology (AREA)
  • Dermatology (AREA)
  • Psychology (AREA)
  • Hospice & Palliative Care (AREA)
  • Educational Technology (AREA)
  • Developmental Disabilities (AREA)
  • Multimedia (AREA)
  • Neurosurgery (AREA)
  • Neurology (AREA)
  • Physiology (AREA)
  • Social Psychology (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Measuring And Recording Apparatus For Diagnosis (AREA)

Abstract

公开了一种生成基于心情的触觉反馈的方法和装置。一种触觉***包括感测设备、数字处理单元和触觉发生器。在一个实施例中，所述感测设备被配置为根据由一个或多个传感器收集的心情信息检测用户的模态，并且能够响应用户的模态发出感测信号。数字处理单元能够根据该感测信号识别用户的状况，并且响应用户的状况提供触觉信号。在一个方面，用户的状况指示用户的心情和/或用户的心理状况。触觉发生器根据触觉信号生成触觉反馈。

Description

用于生成基于心情的触觉反馈的方法和装置
技术领域
本发明的(多个)示例实施例涉及电子通信领域。更具体地，本发明的(多个)示例实施例涉及使用触觉反馈进行通信。
背景技术
随着基于计算机的***、电器(appliance)、自动取款机(ATM)、销售点终端等变得愈发普及，人机接口的使用方便性变得越来越重要。这样的接口应该操作直观并且需要很少或者不需要训练就能使得几乎任何人可以操作该接口。市场上存在多种传统的用户接口设备，比如键盘、鼠标、操纵杆以及触摸屏。其中已知更直观且更具交互性的接口设备中的一种是触敏面板，其可以是触摸屏或触控板。触摸屏包括触敏输入面板和显示设备，并且通过对用户的触摸敏感并且显示用户可以看见并且“触摸”的内容的面板，给用户提供机械接口。
常规的人机接口，诸如键盘、语音和触摸屏，在接口操作过程中通常需要视觉辅助或注视。例如，当用户在触摸屏上输入他或她的(多个)选择时，用户需要注视和/或识别要进行触摸的位置。另外，当用户操作鼠标时，在他或她可以按压点击键之前，用户需要看着图标在屏幕上的移动。
与常规的人机接口相关联的一个问题是有时在人机接口的操作过程中无法获得视觉辅助。例如，卡车司机或飞行员通常需要将他或她的视觉保持在驾驶或飞行上，并且因此，不能在输入/选择操作过程中注视接口设备。另外，工人可能无法在嘈杂环境中听见听觉指令。
发明内容
本发明的(多个)实施例包括能够生成基于心情(mood)的触觉反馈的触觉***，及其制造方法。一种触觉***包括感测设备、数字处理单元和触觉发生器。在一个实施例中，所述感测设备被配置为根据由一个或多个传感器收集的心情信息检测用户的模态(modality)，并且能够响应用户的模态发出感测信号。数字处理单元能够根据该感测信号识别用户的状况(condition)，并且响应用户的状况提供触觉信号。在一个方面，所述用户的状况指示用户的心情或用户的心理状况。触觉发生器根据触觉信号生成触觉反馈。
根据下述的详细描述、附图和权利要求，本发明的(多个)示例实施例的附加特征和益处将变得显而易见。
附图说明
根据下面给出的详细描述和本发明各个实施例的附图，将会更完全地理解本发明的(多个)示例实施例，然而，这些实施例和附图不应将本发明局限于特定的实施例，而是仅用于解释和理解目的。
图1是示出了根据本发明一个实施例的能够生成基于心情的触觉感觉的触觉***的图示；
图2是示出了根据本发明一个实施例的具有基于心情的触觉***的汽车环境的示例应用的图示；
图3是示出了根据本发明一个实施例的具有基于心情的触觉***的视频游戏环境的示例应用的图示；
图4示出了根据本发明一个实施例的能够与其它设备通信的基于心情的触觉***；
图5示出了根据本发明一个实施例的能够处理基于心情的触觉信息的处理设备；和
图6是示出了根据本发明一个实施例的提供基于心情的触觉反馈的处理的流程图。
具体实施方式
此处在使用便携触觉设备响应一个或多个事件提供基于心情的触觉反馈的方法、***和装置的上下文中描述本发明的各实施例。
本领域普通技术人员将认识到本发明的下列详细描述仅是说明性的，并不旨在以任何方式作为限制。受益于本公开的这些本领域技术人员容易想到本发明的其它实施例。现将详细参考在附图中示出的本发明各示例实施例的实现。在附图和下列详细描述中通篇使用相同的参考指示符(或数字)来指代相同或类似的部分。
为了清楚起见，未示出和描述此处描述的实现的所有标准硬件和例程特征。当然将会理解，在任意这种实际实现的开发中，必须做出多种特定于实现的决策以便实现开发者的特定目标，诸如符合关于***和关于业务的约束，并且这些特定目标可以根据实现和开发者的不同而改变。另外，将会意识到，这种开发努力可能是复杂和费时的，但是仍然是受益于本公开的普通技术人员的例行工程工作。
本发明的(多个)实施例包括能够生成基于心情的触觉反馈的触觉***和用于产生基于心情的触觉反馈的方法。触觉***包括感测设备、数字处理单元和触觉发生器。在一个实施例中，所述感测设备采用传感器感知指示用户模态的心情信息，并且随后根据用户模态发出感测信号。在接收到(多个)感测信号之后，数字处理单元识别用户的状况或心情。在根据所述用户的状况生成触觉信号之后，触觉发生器响应触觉信号生成触觉反馈。
图1是示出了根据本发明一个实施例的能够生成基于心情的触觉感觉的触觉***的图示100。图示100包括第一便携设备102、通信网络104和第二便携设备106。在一个实施例中，便携设备102和106可以经由网络104彼此通信，所述网络104可以包括一个或多个通信网络，诸如无线通信网络、因特网、私域网、局域网、城域网、广域网等。应当注意，如果向图示100中添加或从图示100中去除附加模块，不会改变本发明的示例实施例的底层概念。
在一个实施例中，便携设备102包括基于心情的触觉设备112、感测设备114和触觉发生器128。可以给设备102添加附加组件，诸如，显示器108、键盘110和天线116。应当注意，便携设备102可以是移动电话、个人数字助理(“PDA”)、蜂窝电话、便携计算机、触觉手表、触觉项链等。在另一方面，便携设备106包括基于心情的触觉设备122、感测设备124和触觉发生器130。类似地，还可以给便携设备106添加附加组件，诸如显示器118、键盘120和天线126。便携设备102和106可以是相同或不同的设备，但是只要它们两者都配备有基于心情的触觉设备，它们就能够彼此通信。
在一个实施例中，感测设备114包括被配置为感测和收集关于用户的心情信息的多个传感器。例如，感测设备114采用传感器以便经由各种模态或用户的心情状态检测和/或收集心情信息，用户的心情状态包括但不限于：用户的面部表情、语音语调和/或用户的生物测定参数。生物测定参数是用户的心情状态的子集，并且进一步包括体温、身体湿度或出汗、心搏或心率、呼吸节律、身体姿态、手势或移动等。在获得心情信息之后，可以是便携设备102或106机载的数字处理单元基于收集的心情信息识别用户的当前心情和/或(多个)心理状况。关于用户心情的信息随后被转发给关注方，关注方可以是用户自己或正与用户交互的(多个)人。例如，当两个人通过蜂窝电话交谈时，任意一方可以通过基于心情的触觉机制感知另一方的心情。
可替换地，感测设备114还包括传感器来检测周边(ambient)状况。例如，感测设备114收集关于周围的周边信息，诸如温度、湿度、照明、气压等。感测设备114和/或基于心情的触觉设备112可以使用周边信息连同心情信息来评估用户的心情。应当注意，周边信息还可以指示用户是处于敌对环境还是友好环境。
在操作中，用户A(图1未示出)使用便携设备102通过便携设备106与用户B通话和/或通信。在经由感测设备114感测到用户A的心情之后，基于心情的触觉设备112经由网络104将用户A的心情信息发送给便携设备106。在接收心情信息之后，触觉发生器130生成触觉反馈并且将其发送给用户B以指示用户A的心情。类似地，用户A也能以类似方式经由触觉发生器128感知用户B的心情。
随着能够检测人类心情以及环境状况的不同方面的高级感测技术的出现，具有高度准确性的人类行为和/或心理状况的人工智能或计算机评估变得愈发地可实现。例如，复杂的信号处理单元可以处理图像、语音和生物测定信息来生成大量心情信息或属性，以指示人类或用户的心情或身体状况。一旦心情信息被处理，则鉴于心情信息生成触觉反馈，其中触觉反馈可被发送给用户和/或正与用户交互的群体。便携设备102或106可以是手持设备、可佩戴计算机设备或能够从各种模态中识别用户心情的其它周围设备。便携设备102能够将基于心情的触觉反馈提供给处于附近或远程位置的(多个)用户。
在一个例子中，为了感知用户的心情，可以采用用于检测面部表情、语音分析和/或生物测定感测的感测技术。所述感测技术例如可以使用摄像机来观察用户的面部表情。根据某些面部表情，可以从视频记录中推断出用户的情感状态。应当注意，分析面部图像以推断人类的心情情感状态的技术已经是成熟且可获得的。还应当注意，设备上一般可以获得(多个)摄像机，诸如电话或PDS上的照相机。
感测技术还可以采用各种声音或音频传感器，以记录和/或便于语音分析。应当注意，经电话交谈时的语音频率和语音强度可以推断用户的心情。对于生物测定感测，可以使用不同传感器来测量体温、湿度(或排汗)、呼吸节律和/或心搏，以便指示用户的心情或状况。例如，可以使用触觉腕带或项链感测心搏，并且预测心情随时间的改变。
根据应用，可以使用不同模态以便生成作为目标的基于心情的触觉反馈。例如，为了在通过电话交谈的同时与朋友分享高兴的心理状态，可以通过从一个用户的电话向另一个发送表示高兴的心情或愉悦的心情状态的触觉提示信号来增强通信。为了在拨打手机或经手机交谈时捕捉用户的情感状态，例如可以使用手机上的数码照相机或摄像机捕捉心情信息或面部表情并且然后将捕捉到的心情信息或面部表情传输给正被呼叫的用户。
参考回图1，触觉***包括便携设备102和106，其中每个便携设备还包括一个或多个传感器和执行器。在一个方面，传感器和执行器可被构造在同一设备上。传感器被用来检测用户状况，而执行器则被用来根据所述用户状况提供触觉反馈。例如，心率传感器能够感测用户的心率，而温度传感器可以测量用户的体温。随后处理检测到的信息诸如心率和体温，并且生成指示当前用户的心情的一系列触觉反馈。应当注意，术语“触觉反馈”可被称为触知效果、触知反馈、触觉效果、力反馈、振动触知反馈、触觉提示等。
基于心情的触觉设备可以经由无线网络104在它们自己之间通信。无线通信网络可以包括局域射频、蓝牙、蜂窝(GPRS、CDMA、GSM、CDPD、2.5G、3G等)、超宽带(UWB)、WiMax、ZigBee和/或其它自组织/网格无线网络技术。为了减少功耗，设备102和106还可以使用中继站来放大信号强度以保存功率。例如，中继站可以接收来自其它用户使用的其它触觉设备的触觉信号，以便保存功率和覆盖范围。
还可以在个人或团队运动中使用设备102或106，诸如扑克牌玩家、水球运动员或骑车旅行者，以识别运动员的心情状况。例如，设备102可以根据检测到的心情或心理信息通知骑车人之一加速或减速，以便改进团队表现。应当注意，设备102还可被用于其它应用，诸如监视精神病院内精神不稳定的病人。
在一个实施例中，触觉***可以包括多个单元，其中这些单元中的某些可以位于胸部、腕部、足部等等以便感测用户的心情。触觉发生器128例如能够生成针对不同级别的心情波动的不同强度级别的触觉提示或触觉警告信号。例如，当用户略微不高兴时，触觉发生器128生成较轻的触觉提示，而当用户生气时则生成激烈的触觉提示。应当注意，使用触觉反馈指示用户的心理状况可以是微妙的、谨慎的和非介入的通信方法。
感测设备114和触觉发生器128可被组合或制造在单个设备内。例如，可以通过压电材料、形状记忆合金(“SMA”)、偏心旋转体(“ERM”)或线性谐振执行器(“LRA”)等提供振动触知反馈或触觉反馈。在一个实施例中，压电材料可用于执行感测功能和执行功能两者。
诸如压电材料的某些触觉材料具有感测和提供振动触知效果的物理属性。例如，当压电材料的物理形状由于压力变形时，压电材料释放电流以指示其检测到压力。压电材料的尺寸可被减小到相对较小的大小，诸如5毫米×5毫米。在一个实施例中，压电材料包括晶体和/或陶瓷，诸如石英(SiO2)。当给压电材料施加电压电势时，其从原始形状变形为膨胀形状。一旦去除了电压电势，压电材料可以返回其原始状态。然而，当压电材料被按压时，压电材料释放电流。结果，当被按压时，压电材料可以检测输入。如果以其它材料或器件诸如LRA、ERM和SMA取代压电材料，也可以执行传感器/执行器的类似功能。在一个例子中，在电压电势被去除之后，SMA能够保持变形的形状一段时间。应当注意，如果采用压电执行器之外的不同材料，本发明的实施例的底层概念并不改变。
采用基于心情的触觉反馈的优点是其本质上创建了在呼叫者之间传输心情信息的通信信道。基于心情的触觉***可被应用于各种应用，诸如多方之间的会话、团队运动、军事任务、审问、病人监视等等。
图2是示出了根据本发明一个实施例的具有基于心情的触觉***的汽车环境的示例应用的图示200。图示200包括汽车202和网络204，其中汽车202还包括具有基于心情的触觉设备208的方向盘206。应当注意，如果向图示200中添加或从图示200中去除附加设备和模块，不会改变本发明的示例实施例的底层概念。
在一个实施例中，汽车202包括未在图2中示出的感测设备、触觉发生器和心情处理单元，其中触觉发生器可与基于心情的触觉设备208结合。在检测到驾驶员的心情状况之后，触觉发生器能够生成各种触觉反馈，以便指示驾驶员的疲劳、警惕、分心和/或清醒级别。触觉发生器可以使驾驶员座椅振动，以减轻驾驶员紧张感或唤醒驾驶员。例如，方向盘206通过激励基于心情的触觉设备208生成振动触知反馈，以提醒驾驶员他或她太疲劳而不能继续驾驶车辆。可替换地，触觉发生器还可以将驾驶员的身体状况(或有效性)广播给关注方，诸如家庭成员、陪伴人员、高速路巡警等。应当注意，类似的基于心情的触觉***可被应用于火车、飞机和/或航海业。
在操作过程中，汽车202的感测设备从驾驶员读取感知的输入，诸如排汗、面部表情、语音、心跳等。在处理感知的输入之后，心情处理单元根据感测到的输入推断驾驶员的精神状态、心情、感觉等。在识别驾驶员的心情状况之后，触觉发生器生成触觉反馈以便指示驾驶员的当前心情。
在一个方面，基于心情的触觉设备208被配置为改变同一用户的精神或心情状态(从难过到高兴)。另外，还可以使用设备208通过提供某种类型的触觉反馈，保持相同用户的当前精神或心情状态(放松状态、高度集中)。另外，设备208能够将同一触觉效果传输给第三方个体或多个个体，诸如网络组。
图3是示出了根据本发明一个实施例的具有基于心情的触觉***的视频游戏环境的示例应用的图示250。图示250包括终端256、游戏台252和游戏控制器254，其中基于心情的触觉控制器258-260被放置在游戏台252和控制器260内。应当注意，如果向图示250中添加或从图示250去除附加设备和模块，不会改变本发明的示例实施例的底层概念。
对于游戏设备，在一个实施例中，游戏可以根据玩家的心情或情感改变困难程度或环境。例如，当基于心情的触觉控制器258或260的感测设备感知到放松的玩家时(例如，低排汗)，游戏台自动将游戏增加到更难的级别或不同的游戏事件。可替换地，当基于心情的触觉控制器258或260的感测设备感知到紧张或兴奋的心情时(例如，高排汗)，游戏台将游戏调整为更容易的级别或不同的游戏事件。换言之，游戏台可以监视并且确定用户玩游戏时有多么“冷静”。
在替换实施例中，基于心情的触觉***还可用于在与环境或设置有关的工作中提高效率。例如，可以根据以基于心情的触觉***检测到的工人的心情来调整制造组装线的速度。
图4示出了根据本发明一个实施例的能够与其它设备通信的基于心情的触觉***。图示300包括便携或可佩戴接口设备302、PC304、蜂窝电话306、PDA 308、服务器310和能够执行指令的处理设备312。应当注意，如果向图示300中添加或从图示300去除附加诸如电源的模块，不会改变本发明的示例实施例的底层概念。
设备302还包括传感器320、内部滤波器322、选择器324、发生器326、以及触觉输出设备328。在一个实施例中，传感器320被配置为检测面部表情、语音语调和与设备302的用户有关的生物测定。滤波器322用于滤除任意无关信息，诸如不需要的图像和语音，这些信息与来自用户的心情信息相反，被认为是自然和/或周围噪声。在另一个实施例中，内部滤波器322位于主机内，其中滤波处理由主计算机执行。发生器326响应经滤波的心情信息生成命令，并且经由可以是有线或无线通信的各种通信信道332-338向一个或多个处理设备(诸如PC 304或PDA 308)传输输入命令。
选择器324包括用于存储包含触觉效果列表的触觉数据的一个或多个触觉库。在一个实施例中，触觉效果列表用于根据检测到的心情信息给用户提供触觉反馈。每种心情检测或输入例如可以要求唯一的触觉反馈。应当注意，包含触觉数据的库还可以位于远程主机内。在一个替换实施例中，触觉数据可被动态生成并被不断更新，以便模拟和/或再现检测到的(多个)心情状态。为了实时模拟心情状态，选择器324能够动态生成触觉效果，以模拟检测到的心情和/或(多个)心情状态。触觉输出设备328根据来自选择器324的触觉数据生成触觉反馈。例如，振动效果模拟高兴的心情。
设备302的一种功能是将基于心情的触觉反馈同时传送给一个或多个设备，诸如膝上计算机304、蜂窝电话306、PDA 308、服务器310等等。应当注意，根据应用，组件320-328还可被分布在若干不同的实体内。设备302可以经由电缆连接、无线连接和有线和无线网络的组合与其它设备304-310通信。
图5示出了根据本发明一个实施例的能够处理基于心情的触觉信息的处理单元500。单元500包括处理单元501、接口总线511和输入/输出(“IO”)单元520。处理单元501包括处理器502、主存储器504、***总线511、静态存储器设备506、总线控制单元505、大容量存储存储器507和心情控制器530。总线511用于在各种组件和处理器502之间传输信息，以便进行数据处理。处理器502可以是各种通用处理器或微处理器中的任意一种，诸如，PentiumTM微处理器、
Figure BDA0000062120340000101
Core TM2 Duo、
Figure BDA0000062120340000102
CoreTM2 Quad、
Figure BDA0000062120340000103
Figure BDA0000062120340000104
AMDAthlonTM处理器、MotorolaTM68040或Power PCTM微处理器。心情控制器530响应基于心情的输入信号生成触觉反馈。
可以包括多级高速缓存存储器的主存储器504存储频繁使用的数据和指令。主存储器504可以是RAM(随机存取存储器)、MRAM(磁性RAM)或闪存存储器。静态存储器506可以是ROM(只读存储器)，其耦接到总线511，用于存储静态信息和/或指令。总线控制单元505耦接到总线511-512，并且控制可以使用总线的组件，诸如主存储器504或处理器502。总线控制单元505管理总线511和总线512之间的通信。大容量存储存储器507，其可以是磁盘、光盘、硬盘驱动器、软盘、CD-ROM和/或用于存储大量数据的闪存存储器。在一个实施例中，执行器控制模块530是执行触觉效果控制功能的独立组件(IC)。执行器控制器530的一个功能是驱动一个或多个触觉执行器524，后者可以是远程可佩戴戒指。在另一个实施例中，执行器控制模块530可以驻留在处理器502、主存储器504和/或静态存储器506内。
在一个实施例中，I/O单元520包括柔性显示器521、键盘522、光标控制设备523和通信设备525。键盘522可以是用于在处理单元500和(多个)计算机操作员之间传送信息的常规字母数字输入设备。用户输入设备的另一个例子是光标控制设备523，诸如常规鼠标、触摸鼠标、轨迹球、手指或用于在单元500和(多个)用户之间传送信息的其它类型的光标。通信设备525连接到总线512，以通过广域网存取来自远程计算机或服务器的信息。通信设备525可以包括调制解调器或无线网络接口设备，或便于单元500和网络之间的通信的其它类似设备。
本发明的(多个)示例实施例包括将在下面描述的各处理步骤。这些实施例的步骤可被具体化为机器或计算机可执行指令。所述指令可用于使得编程有该指令的通用或专用***执行本发明的(多个)实施例的步骤。可替换地，本发明的(多个)实施例的步骤可被由包含用于执行这些步骤的硬布线逻辑的专用硬件组件执行，或由被编程的计算机组件和定制硬件组件的任意组合执行。
图6是示出了根据本发明一个实施例的提供基于心情的触觉反馈的处理的流程图600。在框602，能够基于心情信息生成触觉反馈的处理感知与用户相关联的第一事件。在一个例子中，该处理被配置为感知与用户相关联的面部表情、语音和心率。在另一个例子中，该处理可以检测用户的生物测定，诸如体温和呼吸节律。
在框604，该处理响应第一事件生成感测信号。在一个实施例中，当第一事件指示高兴心情时，处理提供指示用户当前心情的高兴指示符。可替换地，当第一事件指示难过心情时，该处理能够提供指示用户当前心情的难过指示符。
在框606，该处理经由网络接收感测信号，并在随后基于该感测信号确定用户的状况或心情。该处理还能够通过无线通信网络获得感测信号。应当注意，可以对用户心情连续采样，并可由此更新用户的心情。
在框608，该处理根据用户的状况生成触觉信号，并且将触觉信号转发给触觉发生器。在一个实施例中，该处理还经由通信网络将触觉信号发送给由另一个用户操作的另一个触觉***。
在框610，该处理响应该触觉信号生成触觉反馈。在一个实施例中，处理根据用户的状况或心情调整游戏的难度级别。在另一个实施例中，处理提供指示用户的状况或心情的警报信号。在一个例子中，该处理能够感测与周边状况相关联的第二事件。例如，该处理能够检测周围环境的温度。
虽然已经示出并且描述了本发明的特定实施例，但本领域的普通技术人员显见的是，可以基于此处的教导做出改变和修改，而不脱离本发明及其更宽的方面。因此，所附权利要求旨在将如同在本发明的(多个)示例实施例的真实精神和范围内的所有这些改变和修改包括在其范围内。

Claims (26)

1.一种触觉***，包括：
感测设备，所述感测设备被配置为根据由一个或多个传感器收集的检测到的心情信息来检测用户的心情状态，并且能够响应该用户的心情状态发出感测信号；
处理单元，所述处理单元耦连到感测设备并且被配置为根据该感测信号识别用户状况，其中数字处理单元响应该用户状况提供触觉信号；和
触觉发生器，所述触觉发生器耦连到数字处理单元并且能够根据该触觉信号生成触觉反馈。
2.如权利要求1所述的***，还包括有源设备，所述有源设备逻辑地耦连到数字处理单元并且能够基于该用户的心情生成触觉反馈。
3.如权利要求2所述的***，其中有源设备采用无线通信网络与数字处理单元通信。
4.如权利要求2所述的***，其中有源设备是能够根据用户状况调整游戏事件的游戏设备。
5.如权利要求2所述的***，其中有源设备是能够发出与用户状况有关的警报的警报设备。
6.如权利要求1所述的***，其中被配置为检测用户的心情态的感测设备能够检测面部表情、语音、温度、湿度级别和电脉冲中的一种。
7.如权利要求1所述的***，其中被配置为检测用户的心情态的感测设备还能够检测周边状况。
8.如权利要求1所述的***，其中耦连到该感测设备并且被配置为识别用户状况的数字处理单元能够根据感测信号确定用户的心情。
9.如权利要求1所述的***，其中耦连到数字处理单元的触觉发生器经由无线通信网络耦连到数字处理单元。
10.一种用于生成触觉提示的方法，包括：
感测与用户相关联的第一事件；
响应第一事件生成感测信号；
经由网络接收感测信号，并且响应感测信号确定用户状况中的一个用户状况；
根据所述用户状况生成触觉信号，并且将触觉信号转发到触觉发生器；和
响应触觉信号生成触觉反馈。
11.如权利要求10所述的方法，还包括根据所述用户状况调整游戏的难度级别。
12.如权利要求10所述的方法，还包括提供指示所述用户状况的警报。
13.如权利要求10所述的方法，还包括感测与周边状况相关联的第二事件。
14.如权利要求13所述的方法，其中感测与周边状况相关联的第二事件包括检测周围环境的温度。
15.如权利要求10所述的方法，其中感测与用户相关联的第一事件包括感测面部表情、语音和心率中的一种。
16.如权利要求10所述的方法，其中响应感测信号确定用户状况中的一个用户状况还包括识别用户的心情。
17.如权利要求10所述的方法，其中响应第一事件生成感测信号还包括：
当第一事件指示高兴心情时，提供高兴指示符；和
当第一事件指示难过心情时，提供难过指示符。
18.如权利要求10所述的方法，其中经由网络接收感测信号包括通过无线通信网络获得感测信号。
19.如权利要求10所述的方法，其中将触觉信号转发给触觉发生器包括经由通信网络将触觉信号发送给由另一个用户操作的另一个触觉***。
20.一种用于生成触觉提示的装置，包括：
用于感测与用户相关联的第一事件的装置；
用于响应第一事件生成感测信号的装置；
用于经由网络接收感测信号，并且响应感测信号确定用户状况中的一个用户状况的装置；
用于根据所述用户状况生成触觉信号，并且将触觉信号转发给触觉发生器的装置；和
用于响应触觉信号生成触觉反馈的装置。
21.如权利要求20所述的装置，还包括根据所述用户状况调整游戏的难度级别的装置。
22.如权利要求20所述的装置，还包括用于提供指示所述用户状况的警报的装置。
23.如权利要求20所述的装置，还包括用于感测与周边状况相关联的第二事件的装置。
24.如权利要求20所述的装置，其中用于感测与周边状况相关联的第二事件的装置包括用于检测周围环境的温度的装置。
25.如权利要求20所述的装置，其中用于感测与用户相关联的第一事件的装置包括感测面部表情、语音和心率中的一种。
26.如权利要求20所述的装置，其中用于响应感测信号确定用户状况中的一个用户状况的装置包括识别用户的心情。
CN200980146024.5A 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置 Expired - Fee Related CN102216876B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201510083095.2A CN104571535B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US12/274,152 2008-11-19
US12/274,152 US8004391B2 (en) 2008-11-19 2008-11-19 Method and apparatus for generating mood-based haptic feedback
PCT/US2009/064348 WO2010059513A2 (en) 2008-11-19 2009-11-13 Method and apparatus for generating mood-based haptic feedback

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201510083095.2A Division CN104571535B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Publications (2)

Publication Number Publication Date
CN102216876A true CN102216876A (zh) 2011-10-12
CN102216876B CN102216876B (zh) 2015-03-18

Family

ID=42110296

Family Applications (2)

Application Number Title Priority Date Filing Date
CN200980146024.5A Expired - Fee Related CN102216876B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置
CN201510083095.2A Expired - Fee Related CN104571535B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Family Applications After (1)

Application Number Title Priority Date Filing Date
CN201510083095.2A Expired - Fee Related CN104571535B (zh) 2008-11-19 2009-11-13 用于生成基于心情的触觉反馈的方法和装置

Country Status (6)

Country Link
US (4) US8004391B2 (zh)
EP (1) EP2350776A2 (zh)
JP (2) JP5643214B2 (zh)
KR (3) KR101800992B1 (zh)
CN (2) CN102216876B (zh)
WO (1) WO2010059513A2 (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103315753A (zh) * 2013-06-24 2013-09-25 西南大学 便携式情感分析仪及分析方法
CN103914139A (zh) * 2013-01-09 2014-07-09 索尼公司 信息处理设备、信息处理方法及程序
CN103917993A (zh) * 2011-11-09 2014-07-09 皇家飞利浦有限公司 使用生物传感器来经由数据网络服务分享情绪
CN104007818A (zh) * 2013-02-21 2014-08-27 英默森公司 具有本能警告的移动设备
CN104049733A (zh) * 2013-03-11 2014-09-17 英默森公司 自动触觉效果调节***
CN104239304A (zh) * 2013-06-07 2014-12-24 华为技术有限公司 一种数据处理的方法、装置以及设备
CN104460977A (zh) * 2013-09-25 2015-03-25 联想（新加坡）私人有限公司 可穿戴式信息处理装置输出
CN104704439A (zh) * 2012-09-27 2015-06-10 微软公司 情绪驱动的设备
CN104799831A (zh) * 2015-03-18 2015-07-29 四川九洲电器集团有限责任公司 一种用于情感监测的可穿戴设备
CN105139317A (zh) * 2015-08-07 2015-12-09 北京环度智慧智能技术研究所有限公司 兴趣取向值测验的认知指标分析方法
CN105493477A (zh) * 2013-08-29 2016-04-13 索尼公司 腕带式信息处理装置、信息处理***、信息处理方法以及程序
CN105929942A (zh) * 2015-02-27 2016-09-07 意美森公司 基于用户情绪产生动作
CN105960572A (zh) * 2014-02-24 2016-09-21 索尼公司 用于定制的触觉反馈的智能可穿戴设备和方法
CN108079576A (zh) * 2016-11-23 2018-05-29 意美森公司 用于修改触觉效应的设备和方法
CN108653897A (zh) * 2017-03-31 2018-10-16 高军 一种单兵心理调适仪***
CN109432779A (zh) * 2018-11-08 2019-03-08 北京旷视科技有限公司 难度调整方法、装置、电子设备及计算机可读存储介质
CN109582137A (zh) * 2018-11-15 2019-04-05 深圳市知更鸟旅游投资发展有限公司 一种行为动作识别***及其方法
CN110502113A (zh) * 2013-05-24 2019-11-26 意美森公司 基于媒体内容和外部参数提供触觉反馈的方法及装置
US10587542B2 (en) 2015-11-13 2020-03-10 Sony Corporation Communication system and storage medium for transmitting physical expression information
CN111375196A (zh) * 2018-12-27 2020-07-07 电子技术公司 基于感知的动态游戏状态配置
CN113703567A (zh) * 2021-07-06 2021-11-26 清华大学 图像处理***、方法、设备、可读存储介质及程序产品
WO2024087433A1 (zh) * 2022-10-26 2024-05-02 瑞声开泰声学科技(上海)有限公司 触觉反馈方法和装置

Families Citing this family (101)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100312129A1 (en) 2005-01-26 2010-12-09 Schecter Stuart O Cardiovascular haptic handle system
US20100152620A1 (en) * 2008-12-12 2010-06-17 Immersion Corporation Method and Apparatus for Providing A Haptic Monitoring System Using Multiple Sensors
US20100201652A1 (en) * 2009-02-12 2010-08-12 Sony Ericsson Mobile Communications Ab Embedded piezoelectric elements in touch panels
KR101054359B1 (ko) * 2009-02-16 2011-08-04 한국과학기술원 근감각 피드백을 이용한 상호작용장치 및 이의 작동방법
CN102395410B (zh) * 2009-04-15 2015-12-02 皇家飞利浦电子股份有限公司 用于适应性调节用户环境的方法和***
KR101262922B1 (ko) * 2009-12-10 2013-05-09 한국전자통신연구원 감성 변화에 따른 감성지수 결정 장치 및 그 방법
US8314691B2 (en) * 2010-01-12 2012-11-20 Shepherd Center, Inc. Assistive driving aid
US20110276659A1 (en) * 2010-04-05 2011-11-10 Electronics And Telecommunications Research Institute System and method for providing multimedia service in a communication system
KR101855535B1 (ko) * 2010-04-23 2018-05-04 임머숀 코퍼레이션 햅틱 효과를 제공하는 시스템 및 방법
US10779761B2 (en) * 2010-06-07 2020-09-22 Affectiva, Inc. Sporadic collection of affect data within a vehicle
CN102387241B (zh) * 2010-09-02 2015-09-23 联想(北京)有限公司 一种移动终端及其发送处理方法
JP5149954B2 (ja) * 2010-11-25 2013-02-20 東芝テック株式会社 情報処理端末
EP2659486B1 (en) * 2010-12-30 2016-03-23 Nokia Technologies Oy Method, apparatus and computer program for emotion detection
US20120182211A1 (en) * 2011-01-14 2012-07-19 Research In Motion Limited Device and method of conveying emotion in a messaging application
US8674961B2 (en) * 2011-01-31 2014-03-18 National Semiconductor Corporation Haptic interface for touch screen in mobile device or other device
US8942828B1 (en) 2011-04-13 2015-01-27 Stuart Schecter, LLC Minimally invasive cardiovascular support system with true haptic coupling
KR101121784B1 (ko) * 2011-05-28 2012-03-09 (주)이미지스테크놀로지 입출력 성질을 가진 소자를 이용한 터치 및 햅틱 구동 시스템
US10191546B2 (en) * 2011-06-20 2019-01-29 Immersion Corporation Haptic theme framework
KR101779505B1 (ko) 2011-06-29 2017-09-18 엘지전자 주식회사 이동 단말기 및 이동 단말기의 생체신호 측정 방법
US9762719B2 (en) * 2011-09-09 2017-09-12 Qualcomm Incorporated Systems and methods to enhance electronic communications with emotional context
CN102438064A (zh) * 2011-09-28 2012-05-02 宇龙计算机通信科技(深圳)有限公司 移动终端的情绪表达方法、***及移动终端
US8781565B2 (en) * 2011-10-04 2014-07-15 Qualcomm Incorporated Dynamically configurable biopotential electrode array to collect physiological data
US20130144537A1 (en) * 2011-12-03 2013-06-06 Neuro Analytics and Technologies, LLC Real Time Assessment During Interactive Activity
JP5929145B2 (ja) * 2011-12-07 2016-06-01 株式会社ニコン 電子機器、情報処理方法およびプログラム
US20130227409A1 (en) * 2011-12-07 2013-08-29 Qualcomm Incorporated Integrating sensation functionalities into social networking services and applications
US8954372B2 (en) 2012-01-20 2015-02-10 Fuji Xerox Co., Ltd. System and methods for using presence data to estimate affect and communication preference for use in a presence system
US20130305169A1 (en) * 2012-05-11 2013-11-14 Robert Evan Gold Methods and Systems for Providing Feedback in Interactive, Interest Centric Communications Environment
US10013082B2 (en) 2012-06-05 2018-07-03 Stuart Schecter, LLC Operating system with haptic interface for minimally invasive, hand-held surgical instrument
DE102012214697A1 (de) * 2012-08-01 2014-02-06 Soma Analytics Ug (Haftungsbeschränkt) Vorrichtung, Verfahren und Applikation zur Ermittlung eines aktuellenBelastungsniveaus
US9116546B2 (en) 2012-08-29 2015-08-25 Immersion Corporation System for haptically representing sensor input
JP5634462B2 (ja) * 2012-08-31 2014-12-03 京セラドキュメントソリューションズ株式会社 表示入力装置および画像形成装置
CN103678417B (zh) * 2012-09-25 2017-11-24 华为技术有限公司 人机交互数据处理方法和装置
WO2014065781A1 (en) * 2012-10-23 2014-05-01 Empire Technology Development, Llc Filtering user actions based on user's mood
EP2923253A4 (en) 2012-11-21 2016-07-06 Somniq Inc EMPATHIC COMPUTING DEVICES, SYSTEMS, AND METHODS
US9378655B2 (en) 2012-12-03 2016-06-28 Qualcomm Incorporated Associating user emotion with electronic media
CN103905619A (zh) * 2012-12-26 2014-07-02 腾讯科技（深圳）有限公司 一种基于移动终端的交互方法、***及移动终端
US9046884B2 (en) 2012-12-31 2015-06-02 Microsoft Technology Licensing, Llc Mood-actuated device
US20140191939A1 (en) * 2013-01-09 2014-07-10 Microsoft Corporation Using nonverbal communication in determining actions
US9436756B2 (en) 2013-01-28 2016-09-06 Tata Consultancy Services Limited Media system for generating playlist of multimedia files
US20140239743A1 (en) * 2013-02-27 2014-08-28 James Edward Jennings Xeno transduction system
CN103179274A (zh) * 2013-03-11 2013-06-26 广东欧珀移动通信有限公司 在移动终端上显示心情的方法及***
US9904394B2 (en) * 2013-03-13 2018-02-27 Immerson Corporation Method and devices for displaying graphical user interfaces based on user contact
US10061476B2 (en) 2013-03-14 2018-08-28 Aperture Investments, Llc Systems and methods for identifying, searching, organizing, selecting and distributing content based on mood
US10242097B2 (en) 2013-03-14 2019-03-26 Aperture Investments, Llc Music selection and organization using rhythm, texture and pitch
US10623480B2 (en) 2013-03-14 2020-04-14 Aperture Investments, Llc Music categorization using rhythm, texture and pitch
US11271993B2 (en) 2013-03-14 2022-03-08 Aperture Investments, Llc Streaming music categorization using rhythm, texture and pitch
US10225328B2 (en) 2013-03-14 2019-03-05 Aperture Investments, Llc Music selection and organization using audio fingerprints
US9875304B2 (en) 2013-03-14 2018-01-23 Aperture Investments, Llc Music selection and organization using audio fingerprints
US9939900B2 (en) * 2013-04-26 2018-04-10 Immersion Corporation System and method for a haptically-enabled deformable surface
US9892413B2 (en) * 2013-09-05 2018-02-13 International Business Machines Corporation Multi factor authentication rule-based intelligent bank cards
US9669297B1 (en) 2013-09-18 2017-06-06 Aftershock Services, Inc. Using biometrics to alter game content
US9368006B1 (en) * 2013-09-24 2016-06-14 Woodenshark, LLC Wearable bracelet with bidirectional network connectivity and touch feedback
US9489048B2 (en) * 2013-12-13 2016-11-08 Immersion Corporation Systems and methods for optical transmission of haptic display parameters
GB2521436A (en) 2013-12-20 2015-06-24 Nokia Corp Method and apparatus for adaptive feedback
US9754445B2 (en) * 2013-12-31 2017-09-05 Video Gaming Technologies, Inc. Stress detecting input device for a gaming machine
US8941500B1 (en) 2014-01-23 2015-01-27 Google Inc. Somatosensory type notification alerts
US10254836B2 (en) * 2014-02-21 2019-04-09 Immersion Corporation Haptic power consumption management
US20220147562A1 (en) 2014-03-27 2022-05-12 Aperture Investments, Llc Music streaming, playlist creation and streaming architecture
US9509789B2 (en) * 2014-06-04 2016-11-29 Grandios Technologies, Llc Managing mood data on a user device
US9390706B2 (en) * 2014-06-19 2016-07-12 Mattersight Corporation Personality-based intelligent personal assistant system and methods
KR102254705B1 (ko) * 2014-09-19 2021-05-24 삼성전자주식회사 단말 장치 및 그 제어방법
KR102225400B1 (ko) 2014-12-04 2021-03-09 삼성전자주식회사 웨어러블 디바이스 및 웨어러블 디바이스에서 메시지를 전송하는 방법
US9946351B2 (en) 2015-02-23 2018-04-17 SomniQ, Inc. Empathetic user interface, systems, and methods for interfacing with empathetic computing device
US10613629B2 (en) 2015-03-27 2020-04-07 Chad Laurendeau System and method for force feedback interface devices
US9853905B2 (en) 2015-04-02 2017-12-26 Honda Motor Co., Ltd. System and method for wireless connected device prioritization in a vehicle
US10293260B1 (en) * 2015-06-05 2019-05-21 Amazon Technologies, Inc. Player audio analysis in online gaming environments
CN105100435A (zh) * 2015-06-15 2015-11-25 百度在线网络技术（北京）有限公司 移动通讯应用方法和装置
US10210737B2 (en) * 2015-06-23 2019-02-19 Cleveland State University Systems and methods for privacy-aware motion tracking with notification feedback
US20160378186A1 (en) 2015-06-23 2016-12-29 Intel Corporation Technologies for controlling haptic feedback intensity
US10248207B2 (en) * 2015-10-28 2019-04-02 Capital One Services, Llc Systems and methods for providing variable haptic feedback
USD806711S1 (en) 2015-12-11 2018-01-02 SomniQ, Inc. Portable electronic device
WO2017100641A1 (en) 2015-12-11 2017-06-15 SomniQ, Inc. Apparatus, system, and methods for interfacing with a user and/or external apparatus by stationary state detection
US10105608B1 (en) 2015-12-18 2018-10-23 Amazon Technologies, Inc. Applying participant metrics in game environments
US10102722B2 (en) 2015-12-18 2018-10-16 Immersion Corporation Wearable article having an actuator that performs non-haptic and haptic operations
US10382820B2 (en) * 2016-04-01 2019-08-13 Huawei Technologies Co., Ltd. Apparatus and method for bandwidth allocation as a function of a sensed characteristic of a user
US11660442B2 (en) 2016-04-01 2023-05-30 University of Pittburgh-Of the Commonwealth System of Higher Education Regulatory device and associated method
CN105852823A (zh) * 2016-04-20 2016-08-17 吕忠华 一种医学用智能化息怒提示设备
WO2017196666A1 (en) * 2016-05-09 2017-11-16 Subpac, Inc. Tactile sound device having active feedback system
US9886829B2 (en) 2016-06-20 2018-02-06 Immersion Corporation Systems and methods for closed-loop control for haptic feedback
US9921609B2 (en) 2016-08-02 2018-03-20 Immersion Corporation Systems and methods for deformation and haptic effects
WO2018035442A1 (en) * 2016-08-19 2018-02-22 Xsync Technologies Llc Systems and methods for multimedia tactile augmentation
WO2018042799A1 (ja) * 2016-08-29 2018-03-08 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
WO2018098098A1 (en) * 2016-11-23 2018-05-31 Google Llc Providing mediated social interactions
US10769418B2 (en) 2017-01-20 2020-09-08 At&T Intellectual Property I, L.P. Devices and systems for collective impact on mental states of multiple users
US20180247443A1 (en) * 2017-02-28 2018-08-30 International Business Machines Corporation Emotional analysis and depiction in virtual reality
CN107071154A (zh) * 2017-03-22 2017-08-18 广东小天才科技有限公司 一种通话过程中的提示方法及移动设备
GB201713301D0 (en) 2017-08-18 2017-10-04 Revolutioneyes Me Ltd Communication method
KR101901364B1 (ko) 2017-09-18 2018-11-22 주식회사 씨케이머티리얼즈랩 햅틱 장치를 위한 무선 제어 장치 및 방법
US20190138095A1 (en) * 2017-11-03 2019-05-09 Qualcomm Incorporated Descriptive text-based input based on non-audible sensor data
US10776576B2 (en) 2017-11-16 2020-09-15 International Business Machines Corporation Automated mobile device detection
CN108491074B (zh) * 2018-03-09 2021-07-09 Oppo广东移动通信有限公司 电子装置、运动辅助方法及相关产品
KR102311660B1 (ko) * 2018-09-17 2021-10-13 주식회사 씨케이머티리얼즈랩 햅틱 장치를 위한 무선 제어 장치 및 방법
EP3906081A4 (en) 2019-01-04 2022-10-05 Apollo Neuroscience, Inc. SYSTEMS AND METHODS OF WAVE GENERATION FOR TRANSCUTANEOUS VIBRATIONS
KR20200093090A (ko) * 2019-01-07 2020-08-05 현대자동차주식회사 차량 및 그 제어방법
CN110279426A (zh) * 2019-06-03 2019-09-27 常州为伊心理咨询有限公司 一种综合性中学生心理测评***
WO2020251565A1 (en) * 2019-06-12 2020-12-17 Hewlett-Packard Development Company, L.P. Finger clip biometric virtual reality controllers
WO2021119910A1 (zh) * 2019-12-16 2021-06-24 瑞声声学科技(深圳)有限公司 一种触觉反馈分享方法、装置及***
US11867242B2 (en) 2020-07-22 2024-01-09 Nsk Ltd. Power transmission path switching device and two-stage transmission
CN116802592A (zh) 2021-01-21 2023-09-22 三星电子株式会社 使用自适应机制在iot环境中定制设备的方法和***
CN114598896A (zh) * 2022-02-17 2022-06-07 北京达佳互联信息技术有限公司 网络直播方法、装置、电子设备以及存储介质
CN116943226B (zh) * 2023-09-20 2024-01-05 小舟科技有限公司 基于情绪识别的游戏难度调节方法、***、设备及介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
CN1434947A (zh) * 2000-06-30 2003-08-06 伊梅森公司 包含触觉反馈功能的聊天界面
CN1578964A (zh) * 2001-10-30 2005-02-09 英默森公司 在与虚拟宠物交互中提供触觉反馈的方法和装置
US20060221935A1 (en) * 2005-03-31 2006-10-05 Wong Daniel H Method and apparatus for representing communication attributes

Family Cites Families (36)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2928344B2 (ja) * 1990-07-11 1999-08-03 松下電器産業株式会社 体調監視装置
JP2868192B2 (ja) * 1991-07-30 1999-03-10 学校法人帝京平成大学 人の心理的変化の推定方法及び装置
JPH08229132A (ja) * 1994-12-28 1996-09-10 Hitachi Ltd 生体信号測定・誘導装置
US5720619A (en) * 1995-04-24 1998-02-24 Fisslinger; Johannes Interactive computer assisted multi-media biofeedback system
JPH09294724A (ja) * 1996-05-08 1997-11-18 Sanyo Electric Co Ltd 精神安定化訓練装置
JP2001252265A (ja) * 2000-03-08 2001-09-18 Sharp Corp バイオフィードバック装置
US7689437B1 (en) * 2000-06-16 2010-03-30 Bodymedia, Inc. System for monitoring health, wellness and fitness
US7027621B1 (en) * 2001-03-15 2006-04-11 Mikos, Ltd. Method and apparatus for operator condition monitoring and assessment
US6963762B2 (en) * 2001-05-23 2005-11-08 Nokia Corporation Mobile phone using tactile icons
US20040125120A1 (en) * 2001-06-08 2004-07-01 Michael Weiner Method and apparatus for interactive transmission and reception of tactile information
US20030195040A1 (en) * 2002-04-10 2003-10-16 Breving Joel S. Video game system and game controller
US8849379B2 (en) * 2002-04-22 2014-09-30 Geelux Holdings, Ltd. Apparatus and method for measuring biologic parameters
JP3953024B2 (ja) 2003-11-20 2007-08-01 ソニー株式会社 感情算出装置及び感情算出方法、並びに携帯型通信装置
US20060066569A1 (en) * 2003-12-08 2006-03-30 Immersion Corporation, A Delaware Corporation Methods and systems for providing haptic messaging to handheld communication devices
JP4165707B2 (ja) * 2004-03-22 2008-10-15 株式会社国際電気通信基礎技術研究所 刺激提示システム
EP1582965A1 (en) * 2004-04-01 2005-10-05 Sony Deutschland Gmbh Emotion controlled system for processing multimedia data
GB2416962B (en) * 2004-08-05 2009-04-01 Vodafone Plc New communication type for mobile telecommunications networks
US7148789B2 (en) * 2004-09-09 2006-12-12 Motorola, Inc. Handheld device having multiple localized force feedback
US20070063849A1 (en) * 2005-09-02 2007-03-22 Francesca Rosella Wearable haptic telecommunication device and system
US20070063850A1 (en) * 2005-09-13 2007-03-22 Devaul Richard W Method and system for proactive telemonitor with real-time activity and physiology classification and diary feature
JP2007115147A (ja) 2005-10-21 2007-05-10 Aruze Corp ユーザの感情や体調の安定化を図る感情・体調の安定化装置
WO2007055099A1 (ja) * 2005-11-09 2007-05-18 Pioneer Corporation 運転者精神状態情報提供システム
TWI311067B (en) * 2005-12-27 2009-06-21 Ind Tech Res Inst Method and apparatus of interactive gaming with emotion perception ability
US20100201512A1 (en) * 2006-01-09 2010-08-12 Harold Dan Stirling Apparatus, systems, and methods for evaluating body movements
US8157730B2 (en) * 2006-12-19 2012-04-17 Valencell, Inc. Physiological and environmental monitoring systems and methods
US8098273B2 (en) * 2006-12-20 2012-01-17 Cisco Technology, Inc. Video contact center facial expression analyzer module
KR101402243B1 (ko) * 2006-12-21 2014-06-02 삼성전자주식회사 촉각 서비스를 제공하는 휴대단말기 및 그 방법
EP1936929A1 (en) * 2006-12-21 2008-06-25 Samsung Electronics Co., Ltd Haptic generation method and system for mobile phone
US20080220865A1 (en) * 2007-03-06 2008-09-11 Wei Hsu Interactive playstation controller
US8315652B2 (en) * 2007-05-18 2012-11-20 Immersion Corporation Haptically enabled messaging
US9317110B2 (en) * 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US9754078B2 (en) 2007-06-21 2017-09-05 Immersion Corporation Haptic health feedback monitoring
US20090002178A1 (en) * 2007-06-29 2009-01-01 Microsoft Corporation Dynamic mood sensing
US20090110246A1 (en) * 2007-10-30 2009-04-30 Stefan Olsson System and method for facial expression control of a user interface
EP3206381A1 (en) * 2008-07-15 2017-08-16 Immersion Corporation Systems and methods for mapping message contents to virtual physical properties for vibrotactile messaging
US9046884B2 (en) * 2012-12-31 2015-06-02 Microsoft Technology Licensing, Llc Mood-actuated device

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6190314B1 (en) * 1998-07-15 2001-02-20 International Business Machines Corporation Computer input device with biosensors for sensing user emotions
CN1434947A (zh) * 2000-06-30 2003-08-06 伊梅森公司 包含触觉反馈功能的聊天界面
CN1578964A (zh) * 2001-10-30 2005-02-09 英默森公司 在与虚拟宠物交互中提供触觉反馈的方法和装置
US20060221935A1 (en) * 2005-03-31 2006-10-05 Wong Daniel H Method and apparatus for representing communication attributes

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
LORNA M. BROWN等: "Shake2Talk:Multimodal Messaging for Interpersonal Communication", 《HAPTIC AND AUDIO INTERACTION DESIGN》 *

Cited By (38)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103917993A (zh) * 2011-11-09 2014-07-09 皇家飞利浦有限公司 使用生物传感器来经由数据网络服务分享情绪
CN103917993B (zh) * 2011-11-09 2018-05-15 皇家飞利浦有限公司 使用生物传感器来经由数据网络服务分享情绪
CN104704439A (zh) * 2012-09-27 2015-06-10 微软公司 情绪驱动的设备
CN103914139A (zh) * 2013-01-09 2014-07-09 索尼公司 信息处理设备、信息处理方法及程序
CN103914139B (zh) * 2013-01-09 2017-08-08 索尼公司 信息处理设备、信息处理方法及程序
US10504339B2 (en) 2013-02-21 2019-12-10 Immersion Corporation Mobile device with instinctive alerts
CN104007818A (zh) * 2013-02-21 2014-08-27 英默森公司 具有本能警告的移动设备
CN104007818B (zh) * 2013-02-21 2018-09-14 意美森公司 具有本能警告的移动设备
CN104049733A (zh) * 2013-03-11 2014-09-17 英默森公司 自动触觉效果调节***
US10228764B2 (en) 2013-03-11 2019-03-12 Immersion Corporation Automatic haptic effect adjustment system
CN104049733B (zh) * 2013-03-11 2018-04-20 意美森公司 自动触觉效果调节***
CN110502113A (zh) * 2013-05-24 2019-11-26 意美森公司 基于媒体内容和外部参数提供触觉反馈的方法及装置
CN104239304A (zh) * 2013-06-07 2014-12-24 华为技术有限公司 一种数据处理的方法、装置以及设备
CN104239304B (zh) * 2013-06-07 2018-08-21 华为技术有限公司 一种数据处理的方法、装置以及设备
CN103315753A (zh) * 2013-06-24 2013-09-25 西南大学 便携式情感分析仪及分析方法
CN105493477A (zh) * 2013-08-29 2016-04-13 索尼公司 腕带式信息处理装置、信息处理***、信息处理方法以及程序
US10325457B2 (en) 2013-08-29 2019-06-18 Sony Corporation Wristband-type information processing device, information processing system, and information processing method
US10553084B2 (en) 2013-08-29 2020-02-04 Sony Corporation Information processing device, information processing system, and information processing method
CN104460977A (zh) * 2013-09-25 2015-03-25 联想（新加坡）私人有限公司 可穿戴式信息处理装置输出
CN104460977B (zh) * 2013-09-25 2019-01-18 联想（新加坡）私人有限公司 可穿戴式信息处理装置输出
CN105981083A (zh) * 2014-02-24 2016-09-28 索尼公司 智能可穿戴设备和用于优化输出的方法
CN105960572A (zh) * 2014-02-24 2016-09-21 索尼公司 用于定制的触觉反馈的智能可穿戴设备和方法
CN105981083B (zh) * 2014-02-24 2019-01-08 索尼公司 智能可穿戴设备和用于优化输出的方法
CN105960572B (zh) * 2014-02-24 2019-01-22 索尼公司 用于定制的触觉反馈的智能可穿戴设备和方法
CN105929942A (zh) * 2015-02-27 2016-09-07 意美森公司 基于用户情绪产生动作
CN104799831A (zh) * 2015-03-18 2015-07-29 四川九洲电器集团有限责任公司 一种用于情感监测的可穿戴设备
CN105139317A (zh) * 2015-08-07 2015-12-09 北京环度智慧智能技术研究所有限公司 兴趣取向值测验的认知指标分析方法
CN105139317B (zh) * 2015-08-07 2018-10-09 北京环度智慧智能技术研究所有限公司 兴趣取向值测验的认知指标分析方法
US10587542B2 (en) 2015-11-13 2020-03-10 Sony Corporation Communication system and storage medium for transmitting physical expression information
CN108079576A (zh) * 2016-11-23 2018-05-29 意美森公司 用于修改触觉效应的设备和方法
CN108653897A (zh) * 2017-03-31 2018-10-16 高军 一种单兵心理调适仪***
CN109432779A (zh) * 2018-11-08 2019-03-08 北京旷视科技有限公司 难度调整方法、装置、电子设备及计算机可读存储介质
CN109432779B (zh) * 2018-11-08 2022-05-17 北京旷视科技有限公司 难度调整方法、装置、电子设备及计算机可读存储介质
CN109582137A (zh) * 2018-11-15 2019-04-05 深圳市知更鸟旅游投资发展有限公司 一种行为动作识别***及其方法
CN111375196A (zh) * 2018-12-27 2020-07-07 电子技术公司 基于感知的动态游戏状态配置
CN111375196B (zh) * 2018-12-27 2023-08-04 电子技术公司 基于感知的动态游戏状态配置
CN113703567A (zh) * 2021-07-06 2021-11-26 清华大学 图像处理***、方法、设备、可读存储介质及程序产品
WO2024087433A1 (zh) * 2022-10-26 2024-05-02 瑞声开泰声学科技(上海)有限公司 触觉反馈方法和装置

Also Published As

Publication number Publication date
US20120001749A1 (en) 2012-01-05
JP5643214B2 (ja) 2014-12-17
WO2010059513A3 (en) 2010-11-18
US8004391B2 (en) 2011-08-23
KR20110088520A (ko) 2011-08-03
US20130225261A1 (en) 2013-08-29
US9841816B2 (en) 2017-12-12
JP2012509145A (ja) 2012-04-19
KR101655055B1 (ko) 2016-09-06
US20180143692A1 (en) 2018-05-24
US20100123588A1 (en) 2010-05-20
CN102216876B (zh) 2015-03-18
JP5952374B2 (ja) 2016-07-13
CN104571535A (zh) 2015-04-29
US8390439B2 (en) 2013-03-05
US10289201B2 (en) 2019-05-14
WO2010059513A2 (en) 2010-05-27
KR20160105991A (ko) 2016-09-08
EP2350776A2 (en) 2011-08-03
CN104571535B (zh) 2018-03-23
KR20150119493A (ko) 2015-10-23
JP2015062676A (ja) 2015-04-09
KR101800992B1 (ko) 2017-12-20
KR101600126B1 (ko) 2016-03-04

Similar Documents

Publication Publication Date Title
CN102216876B (zh) 用于生成基于心情的触觉反馈的方法和装置
CN113520340B (zh) 一种睡眠报告的生成方法、装置、终端以及存储介质
CN100583007C (zh) 具有表面显示信息与互动功能的可动装置
CN102246120B (zh) 使用多个传感器来提供触觉监视***的方法和设备
US20180374381A1 (en) Craving input and support system
CN104007818A (zh) 具有本能警告的移动设备
CN104049746A (zh) 用于触觉效果的参数修改的***和方法
CN108648381A (zh) 体感型通知警告
US10335060B1 (en) Method and apparatus to provide monitoring
WO2014052506A2 (en) Devices and methods to facilitate affective feedback using wearable computing devices
CN106878390A (zh) 电子宠物互动控制方法、装置及可穿戴设备
CN109471524A (zh) 一种控制马达振动的方法及移动终端
CN106774861A (zh) 智能设备及行为数据纠正方法和装置
KR102100418B1 (ko) 감정 상태를 개선시키는 방법 및 그 장치
CN117179706A (zh) 一种基于穿戴设备的科学睡眠监测的方法及装置
CN108837271B (zh) 电子装置、提示信息的输出方法及相关产品
CN110084176A (zh) 一种疲劳驾驶提醒的方法、装置、终端设备及存储介质
KR20230099066A (ko) 신체유형 분류방법 및 이를 포함하는 전자장치
Kumar et al. Design of a modular real time smart accessory
Stojanovic et al. a system for dynamic real-time personal fitness monitoring

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: American California

Applicant after: IMMERSION CORPORATION

Address before: American California

Applicant before: Immersion Corp.

COR Change of bibliographic data

Free format text: CORRECT: APPLICANT; FROM: IMMERSION CORP. TO: YIMEISEN COMPANY

C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20150318

Termination date: 20201113