CN105373219B - 可穿戴装置及其操作方法 - Google Patents

可穿戴装置及其操作方法 Download PDF

Info

Publication number
CN105373219B
CN105373219B CN201510487208.5A CN201510487208A CN105373219B CN 105373219 B CN105373219 B CN 105373219B CN 201510487208 A CN201510487208 A CN 201510487208A CN 105373219 B CN105373219 B CN 105373219B
Authority
CN
China
Prior art keywords
user
index
state
vehicle
drive
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201510487208.5A
Other languages
English (en)
Other versions
CN105373219A (zh
Inventor
洪承范
洪性旭
李承勇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN105373219A publication Critical patent/CN105373219A/zh
Application granted granted Critical
Publication of CN105373219B publication Critical patent/CN105373219B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K28/00Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions
    • B60K28/02Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver
    • B60K28/06Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver
    • B60K28/066Safety devices for propulsion-unit control, specially adapted for, or arranged in, vehicles, e.g. preventing fuel supply or ignition in the event of potentially dangerous conditions responsive to conditions relating to the driver responsive to incapacity of driver actuating a signalling device
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/04Alarms for ensuring the safety of persons responsive to non-activity, e.g. of elderly persons
    • G08B21/0438Sensor means for detecting
    • G08B21/0453Sensor means for detecting worn on the body to detect health condition by physiological monitoring, e.g. electrocardiogram, temperature, breathing
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/02Alarms for ensuring the safety of persons
    • G08B21/06Alarms for ensuring the safety of persons indicating a condition of sleep, e.g. anti-dozing alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/08Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B5/00Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied
    • G08B5/22Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission
    • G08B5/36Visible signalling systems, e.g. personal calling systems, remote indication of seats occupied using electric transmission; using electromagnetic transmission using visible light sources
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B6/00Tactile signalling systems, e.g. personal calling systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0827Inactivity or incapacity of driver due to sleepiness
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0818Inactivity or incapacity of driver
    • B60W2040/0863Inactivity or incapacity of driver due to erroneous selection or response of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/08Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to drivers or passengers
    • B60W2040/0872Driver physiology
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0001Details of the control system
    • B60W2050/0002Automatic control, details of type of controller or control system architecture
    • B60W2050/0008Feedback, closed loop systems or details of feedback error signal
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062Adapting control system settings
    • B60W2050/0063Manual parameter input, manual setting means, manual initialising or calibrating means
    • B60W2050/0064Manual parameter input, manual setting means, manual initialising or calibrating means using a remote, e.g. cordless, transmitter or receiver unit, e.g. remote keypad or mobile phone
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143Alarm means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/22Psychological state; Stress level or workload
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/221Physiology, e.g. weight, heartbeat, health or special needs
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2540/00Input parameters relating to occupants
    • B60W2540/26Incapacity
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2756/00Output or target parameters relating to data
    • B60W2756/10Involving external transmission of data to or from the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60YINDEXING SCHEME RELATING TO ASPECTS CROSS-CUTTING VEHICLE TECHNOLOGY
    • B60Y2302/00Responses or measures related to driver conditions
    • B60Y2302/05Leading to automatic stopping of the vehicle

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Mathematical Physics (AREA)
  • Cardiology (AREA)
  • Biophysics (AREA)
  • Physiology (AREA)
  • Pulmonology (AREA)
  • General Health & Medical Sciences (AREA)
  • Gerontology & Geriatric Medicine (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Physical Education & Sports Medicine (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Electromagnetism (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)

Abstract

可穿戴装置及其操作方法。提供一种可穿戴装置,该可穿戴装置包括:主体,其被配置为穿戴在用户的身体的特定部位上;感测单元,其被设置在所述主体中,感测用户的生物信号;存储单元,其收集与所述生物信号有关的日志信息,并且存储包括在收集的日志信息中的与用户的状态有关的指数模式;控制器,其利用存储的指数模式来设定参考驾驶指数,其中,当感测到用户进入车辆时,控制器基于设定的参考驾驶指数来确定与在用户进入车辆之前和进入车辆之后感测到的生物信号相对应的当前驾驶指数,并且输出通知与确定的结果对应的用户的状态的反馈。

Description

可穿戴装置及其操作方法
技术领域
本公开涉及一种能够感测用户的生物信号的可穿戴装置以及该可穿戴装置的操作方法。
背景技术
终端按照移动性大致分为可穿戴装置和固定终端。可穿戴装置按照便携性进一步分成手持终端和车载终端。
响应于对多样化功能的需求的增加,已按照具有诸如将摄影对象拍摄成静止图像或运动图像、再现数字音频和视频压缩文件、玩游戏、接收广播等的多个功能的多媒体播放器的形式实现终端。
由于这些改进,终端已演进为各种类型的设计。具体地,使终端重量更轻并且更小型化使得实现能够被穿戴在用户的身体部位上的终端成为可能,例如眼镜型终端、手表型终端、项链型终端、手镯型终端以及戒指型终端。另外,还正在开发能够附接到衣服上的终端。另外,在这些终端被穿戴在用户的任何身体部位上以便根据用户的目的和意图来使用的情况下,可检测用户的移动和生物信号并且相应地可执行各种功能。例如,可基于感测到的生物信息提供用户定制的服务。
发明内容
因此,详细描述的一方面在于提供一种能够利用感测到的生物信息提供与车辆的驾驶关联的个性化服务的可穿戴装置以及该可穿戴装置的操作方法。
详细描述的另一方面在于提供一种能够利用感测到的生物信息确定用户的状态是否适合于允许用户驾驶车辆并且帮助用户返回到适合于安全驾驶的状态的可穿戴装置以及该可穿戴装置的操作方法。
为了实现这些和其它优点并且依据本说明书的目的,如本文具体实现并广义描述的,提供了一种可穿戴装置,该可穿戴装置包括:主体,其被配置为穿戴在用户的身体的特定部位上;感测单元,其在主体被穿戴时感测用户的生物信号;控制器,其收集与用户的所述生物信号有关的日志信息以及与用户的状态有关的信息,存储包括在所收集的日志信息中的与用户的状态有关的指数模式,并且利用存储的指数模式来设置参考驾驶指数,其中,当感测到用户进入车辆时,所述控制器基于设定的参考驾驶指数来确定与在用户进入车辆之前和之后的参考时间周期感测到的用户的生物信号对应的当前驾驶指数,并且输出反馈,所述反馈向用户通知与确定的结果对应的用户的当前状态。
在该可穿戴装置中,当确定当前驾驶指数不适合于允许用户驾驶时,所述控制器可执行控制以使得输出反馈,所述反馈根据与当前驾驶指数对应的异常信号的类型或程度而变化。
在该可穿戴装置中,在确定当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器可输出向用户提醒用户的当前状态不适合于安全驾驶的提醒信号,或者输出向用户告知用户的当前状态不可用于安全驾驶的通知。
在该可穿戴装置中,所述提醒信号可包括声音、振动、光和画面变化当中的至少一个或更多个,并且所述控制器可根据用户的当前状态调节所述提醒信号的类型或强度。
该可穿戴装置还可包括输出视觉信息的触摸屏,其中,在确定当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器可执行控制以使得将用于检查用户的当前状态的视觉信息输出到所述触摸屏,并且当感测到预定触摸输入被施加到所述触摸屏时,所述控制器可输出对应反馈。
在该可穿戴装置中,所述参考驾驶指数和所述当前驾驶指数都可指示压力指数和困倦指数,其中,所述参考驾驶指数可指示所述压力指数和所述困倦指数是在所述压力指数和所述困倦指数适合于用户的安全驾驶的临界范围内的数值,并且每当存储的指数模式变化时可更新所述参考驾驶指数。
在该可穿戴装置中,所述压力指数和所述困倦指数都可包括指数上升区段和指数恢复区段,并且在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器可搜索与对应于用户的当前状态的指数恢复区段所对应的情境有关的日志信息,并且可输出有助于创建与搜索到的日志信息对应的情境的反馈。
在该可穿戴装置中,在确定当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器可执行控制以使得搜索与用户的当前状态所对应的指数恢复区段最短的情境有关的日志信息。
在该可穿戴装置中,在确定当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器可利用在与用户的当前状态对应的指数恢复区段中检测到的用户的生物信号并且利用外部背景信息,输出有助于用户的当前驾驶指数减小以使得当前驾驶指数小于参考驾驶指数的反馈。
在该可穿戴装置中,在确定当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器可执行控制以使得输出就与确定的结果对应的用户的当前状态询问用户的选择的消息,并且将对输出的所述消息的响应反映在参考驾驶指数中。
在该可穿戴装置中,所述指数模式可分成用户的物理指数模式和情绪指数模式,所述物理指数模式可基于在每天的相同时间周期内感测到的用户的生物信号来生成,所述情绪指数模式可基于在特定情境下感测到的用户的生物信号来生成。
在该可穿戴装置中,当感测到用户进入车辆时,所述控制器可将在用户进入车辆之前的参考时间周期内感测的用户的生物信号与存储的指数模式进行比较,识别关于在用户进入车辆之前进行的用户的活动的信息,并且可考虑所识别的关于用户的活动的信息来确定当前驾驶指数。
在该可穿戴装置中,当感测到用户进入车辆时,所述控制器可通过考虑在用户进入车辆之前的参考时间周期内感测的用户的生物信号与在用户进入车辆之后感测的生物信号之差,来确定当前驾驶指数被改变。
该可穿戴装置还可包括无线通信单元,该无线通信单元连接到车载控制设备,接收与车辆的状态有关的信息,其中,所述控制器可基于接收到的与车辆的当前状态有关的信息来感测用户进入车辆,并且可控制所述无线通信单元以使得关于与当前驾驶指数对应的用户的状态的信息被提供给所述车载控制设备。
在该可穿戴装置中,根据关于与当前驾驶指数对应的用户的状态的信息,所述控制器可控制所述无线通信单元以使得用于改变预先设定的目的地或移动路径的控制信号被提供给所述车载控制设备。
为了实现这些和其它优点并且依据本说明书的目的,如本文具体实现并广义描述的,提供了一种使得穿戴在用户的身体的特定部位上的可穿戴装置执行以下步骤的方法:感测用户的生物信号;收集包括与所述生物信号有关的信息以及与用户的状态有关的信息的日志信息,并且存储包括在所收集的日志信息中的与用户的状态有关的指数模式;利用存储的指数模式来设置适合于允许用户驾驶的参考驾驶指数;当感测到用户进入车辆时,基于设定的参考驾驶指数来确定与在用户进入车辆之前和之后的参考时间周期感测的用户的生物信号对应的当前驾驶指数;以及输出反馈,所述反馈向用户通知与确定的结果对应的用户的当前状态。
在该方法中,输出反馈的步骤可以是在确定当前驾驶指数不适合于允许用户驾驶的情况下,提供根据包括在当前驾驶指数中的异常信号的类型或程度而变化的反馈。
在该方法中,确定当前驾驶指数的步骤可包括:当感测到用户进入车辆时,将在用户进入车辆之前的参考时间周期内感测的生物信号与存储的指数模式进行比较,并且识别关于在用户进入车辆之前进行的用户的活动的信息;以及考虑所识别的关于用户的活动的信息来确定当前驾驶指数。
在该方法中,确定当前驾驶指数的步骤包括:当感测到用户进入车辆时,通过考虑在用户进入车辆之前的参考时间周期内感测的用户的生物信号与在用户进入车辆之后感测的生物信号之差,来确定当前驾驶指数被改变。
该方法还可包括以下步骤:接收与车辆的状态有关的信息,所述车辆的车辆***连接到所述可穿戴装置;基于接收到的与车辆的状态有关的信息来感测用户进入车辆;以及将关于与当前驾驶指数对应的用户的状态的信息提供给所述车载控制设备。
本申请的进一步的适用范围将从下文给出的详细描述而变得更明显。然而,应该理解,仅示意性地在指示本公开的优选实施方式的同时给出详细描述和具体示例,因为对于本领域技术人员而言,通过该详细描述,在本公开的精神和范围内的各种改变和修改将变得明显。
附图说明
附图被包括以提供对本公开的进一步理解,并且被并入本说明书并构成本说明书的一部分,附图示出了示例性实施方式并与说明书一起用于说明本公开的原理。
附图中:
图1A是描述根据本发明的可穿戴装置的框图;
图1B是例示根据本发明的可穿戴装置可操作的***的示图;
图2是示出作为根据本发明的可穿戴装置的一个示例的手表型终端的立体图;
图3A是描述在根据本发明的手表型终端中收集与用户的生物信号有关的日志信息并且生成与用户的状态有关的指数模式的方法的示图;
图3B是描述当用户进入车辆时在根据本发明的可穿戴装置中将用户的状态通知给用户的方法的示图;
图4是描述根据本发明的可穿戴装置的操作方法的示例性流程图;
图5A(a)和图5A(b)以及图5B是示出在根据本发明的可穿戴装置中生成与用户的状态有关的指数模式的示例的曲线图;
图6A至图6C是描述图4中的流程图的示图;
图7是描述在开始驾驶车辆之前在根据本发明的可穿戴装置中提供将用户的当前状态是否适合于允许用户驾驶车辆通知给用户的反馈的其它示例的流程图;
图8A至图10B(c)是描述在开始驾驶车辆之前在根据本发明的可穿戴装置中提供将用户的当前状态是否适合于允许用户驾驶车辆通知给用户的反馈的其它示例的示图;
图11和图12是描述在开始驾驶车辆之前在根据本发明的可穿戴装置中提供将用户的当前状态是否适合于允许用户驾驶车辆通知给用户的反馈的其它示例的流程图;以及
图13A至图13C是描述在开始驾驶车辆之前在根据本发明的可穿戴装置中提供将用户的当前状态是否适合于允许用户驾驶车辆通知给用户的反馈的示例的示图。
具体实施方式
现在将参照附图根据本文公开的示例性实施方式详细给出描述。为了参照附图简要描述,可为相同或等同的组件提供相同或相似的标号,其描述将不再重复。通常,诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述,后缀本身并非旨在给予任何特殊含义或功能。在本公开中,为了简明起见,相关领域的普通技术人员熟知的内容通常被省略。使用附图来帮助容易地理解各种技术特征,应该理解,本文呈现的实施方式不受附图的限制。因此,本公开应该被解释为扩展至附图中具体示出的那些更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
将理解,尽管本文中可使用术语第一、第二等来描述各种元件,这些元件不应受这些术语限制。这些术语通常仅用于将一个元件与另一元件区分。
将理解,当元件被称作“与”另一元件“连接”时,该元件可与所述另一元件连接或者还可存在中间元件。相比之下,当元件被称作“与”另一元件“直接连接”时,不存在中间元件。
单数表示形式可包括多数表示形式,除非其根据上下文表示明确不同的含义。
本文中使用诸如“包括”或“具有”的术语,这些术语应该被理解为旨在指示存在说明书中所公开的多个组件、功能或步骤,还将理解可同样使用更多或更少的组件、功能或步骤。
本说明书中的终端可包括诸如便携式电话、智能电话、笔记本计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航***、石板PC、平板PC、超极本等的可穿戴装置。
这种可穿戴装置可被实现为可穿戴在人体(超越了用户手所的传统概念)上的可穿戴装置。可穿戴装置可包括智能手表、智能眼镜、头戴式显示器(HMD)等。
以下,将参照图1A说明本发明的可穿戴装置的配置。
如图1A所示,可穿戴装置100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190的组件。将理解,不要求实现图1A所示的所有组件,可另选地实现更多或更少的组件。
现在参照图1A,无线通信单元110通常包括允许通信(例如,可穿戴装置100与无线通信***之间的无线通信、可穿戴装置100与另一移动终端之间的通信、可穿戴装置100与外部服务器之间的通信)的一个或更多个模块。另外,无线通信单元110通常包括将可穿戴装置100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短距离通信模块114和位置信息模块115中的一个或更多个。
输入单元120包括用于获得图像或视频的相机121、作为用于输入音频信号的一种音频输入装置的麦克风122以及使用户能够输入信息的用户输入单元123(例如,触摸键、按键、机械键、软键等)。数据(例如,音频、视频、图像等)通过输入单元120获得,并且可由控制器180根据装置参数、用户命令及其组合来分析和处理。
感测单元140通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现。例如,在图1A中,感测单元140被示出为具有接近传感器141和照明传感器142。如果需要,感测单元140可另选地或另外地包括其它类型的传感器或装置,例如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池电量计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器、气体传感器等)和化学传感器(例如,电子鼻、保健传感器、生物测量传感器等)等。可穿戴装置100可被配置为利用从感测单元140获得的信息,具体地讲,从感测单元140的一个或更多个传感器及其组合获得的信息。
输出单元150通常被配置为输出各种类型的信息,例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。
显示单元151可具有与触摸传感器的层间结构或集成结构,以便方便触摸屏。触摸屏可在可穿戴装置100与用户之间提供输出接口,并且用作在可穿戴装置100与用户之间提供输入接口的用户输入单元123。
接口单元160用作与可连接到可穿戴装置100的各种类型的外部装置的接口。例如,接口单元160可包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下,可穿戴装置100可响应于外部装置连接到接口单元160而执行与所连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储用于支持可穿戴装置100的各种功能或特征的数据。例如,存储器170可被配置为存储在可穿戴装置100中执行的应用程序、用于可穿戴装置100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在可穿戴装置100内,针对可穿戴装置100的基本功能(例如,接电话、打电话、接收消息、发送消息等),通常是这种情况。常见的是应用程序被存储在存储器170中,被安装在可穿戴装置100中,并由控制器180执行以执行可穿戴装置100的操作(或功能)。
除了与应用程序关联的操作以外,控制器180通常还用于控制可穿戴装置100的总体操作。通过对由图1A所示的各种组件输入或输出的信号、数据、信息等进行处理、或者激活存储在存储器170中的应用程序,控制器180可提供或处理适合于用户的信息或功能。例如,控制器180根据存储在存储器170中的应用程序的执行来控制图1A至图1C所示的一些或全部组件。
电源单元190可被配置为接收外部电力或提供内部电力,以便供应对包括在可穿戴装置100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池,所述电池可被配置为嵌入终端主体中,或者被配置为可从终端主体拆卸。
以下,在说明各种实施方式之前,将参照图1A更详细地说明可穿戴装置100的组件。
仍参照图1A,现在将更详细地描述此图中所示的各种组件。关于无线通信单元110,广播接收模块111通常被配置为经由广播频道从外部广播管理实体接收广播信号和/或广播相关信息。广播频道可包括卫星频道、地面频道或这二者。在一些实施方式中,可使用两个或更多个广播接收模块111以方便同时接收两个或更多个广播频道或支持在广播频道之间切换。
移动通信模块112可向一个或更多个网络实体发送无线信号和/或从其接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等。这些网络实体形成移动通信网络的一部分,所述移动通信网络是根据移动通信的技术标准或通信方法(例如,全球移动通信***(GSM)、码分多址(CDMA)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、长期演进(LTE)等)构建的。
经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号或者支持文本和多媒体消息的通信的各种格式的数据。
无线互联网模块113被配置为方便无线互联网接入。此模块可从内部或外部联结到可穿戴装置100。无线互联网模块113可根据无线互联网技术经由通信网络发送和/或接收无线信号。
这种无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(Wibro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等。无线互联网模块113可根据这些无线互联网技术以及其它互联网技术中的一个或更多个来发送/接收数据。
在一些实施方式中,当根据例如Wibro、HSDPA、GSM、CDMA、WCDMA、LET等实现无线互联网接入时,作为移动通信网络的一部分,无线互联网模块113执行这种无线互联网接入。因此,互联网模块113可与移动通信模块112协作或用作移动通信模块112。
短距离通信模块114被配置为方便短距离通信。用于实现这种短距离通信的合适的技术包括BLUETOOTHTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、ZigBee、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。短距离通信模块114通常经由无线局域网支持可穿戴装置100与无线通信***之间的无线通信、可穿戴装置100与另一可穿戴装置100之间的通信或者可穿戴装置与另一可穿戴装置100(或外部服务器)所在的网络之间的通信。无线局域网的一个示例是无线个域网。
位置信息模块115通常被配置为检测、计算、推导或识别移动终端的位置。例如,位置信息模块115包括全球定位***(GPS)模块、Wi-Fi模块或这二者。如果需要,位置信息模块115可另选地或另外地与无线通信单元110的任何其它模块一起工作,以获得与移动终端的位置有关的数据。
例如,当可穿戴装置使用GPS模块时,可利用从GPS卫星发送的信号来获取可穿戴装置的位置。又例如,当可穿戴装置使用Wi-Fi模块时,可基于与无线接入点(AP)有关的信息来获取可穿戴装置的位置,所述无线接入点(AP)向Wi-Fi模块发送无线信号或从Wi-Fi模块接收无线信号。
输入单元120可被配置为允许针对可穿戴装置120的各种类型输入。这种输入的示例包括音频、图像、视频、数据和用户输入。图像和视频输入常常利用一个或更多个相机121来获得。这些相机121可对在视频或图像拍摄模式下通过图像传感器获得的静止画面或视频的图像帧进行处理。经处理的图像帧可被显示在显示单元151上或存储在存储器170中。在一些情况下,相机121可按照矩阵配置布置,以使得具有各种角度或焦点的多个图像能够被输入至可穿戴装置100。又例如,相机121可按照立体布置方式来设置,以获取用于实现立体图像的左图像和右图像。
麦克风122通常被实现为允许向可穿戴装置100输入音频。可根据可穿戴装置100中执行的功能来按照各种方式处理音频输入。如果需要,麦克风122可包括各种噪声去除算法以去除在接收外部音频的过程中生成的不期望的噪声。
用户输入单元123是允许用户输入的组件。这种用户输入可使得控制器180能够控制可穿戴装置100的操作。用户输入单元123可包括机械输入元件(例如,位于可穿戴装置100的正面和/或背面或侧面的键、按钮、薄膜开关、滚轮、触合式开关等)或者触敏输入装置等中的一个或更多个。例如,触敏输入装置可以是通过软件处理显示在触摸屏上的虚拟键或软键、或者设置在可穿戴装置上的触摸屏以外的位置处的触摸键。另一方面,虚拟键或视觉键可按照各种形状(例如,图形、文本、图标、视频或其组合)显示在触摸屏上。
感测单元140通常被配置为感测移动终端的内部信息、移动终端的周围环境信息、用户信息等中的一个或更多个。控制器180通常与感测单元140协作以基于感测单元140所提供的感测来控制可穿戴装置100的操作或者执行与安装在可穿戴装置中的应用程序关联的数据处理、功能或操作。可利用各种传感器中的任何传感器来实现感测单元140,现在将更详细地描述其中一些传感器。
接近传感器141可包括在没有机械接触的情况下利用电磁场、红外线来感测是否存在靠近表面的物体或者位于表面附近的物体的传感器。接近传感器141可布置在可穿戴装置被触摸屏覆盖的内侧区域处或触摸屏附近。
例如,接近传感器141可包括透射型光电传感器、直接反射型光电传感器、镜反射型光电传感器、高频振荡型接近传感器、电容型接近传感器、磁接近传感器、红外线接近传感器等中的任何传感器。当触摸屏被实现为电容型接近传感器时,接近传感器141可通过电磁场响应于导电物体的靠近而发生的变化来感测指点器相对于触摸屏的接近。在这种情况下,触摸屏(触摸传感器)也可被归类为接近传感器。
本文中将常常提及术语“接近触摸”以表示指点器被设置成在没有接触触摸屏的情况下接近触摸屏的情景。本文中将常常提及术语“接触触摸”以表示指点器与触摸屏进行实际接触的情景。对于与指点器相对于触摸屏的接近触摸对应的位置,这种位置将对应于指点器垂直于触摸屏的位置。接近传感器141可感测接近触摸以及接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等)。
通常,控制器180对与接近传感器141感测到的接近触摸和接近触摸模式对应的数据进行处理,并在触摸屏上输出视觉信息。另外,控制器180可根据对触摸屏上的点的触摸是接近触摸还是接触触摸来控制可穿戴装置100执行不同的操作或处理不同的数据。
触摸传感器可利用各种触摸方法中的任何触摸方法来感测施加到触摸屏(例如,显示单元151)的触摸。这些触摸方法的示例包括电阻型、电容型、红外型和磁场型等。
例如,触摸传感器可被配置为将施加到显示单元151的特定部分的压力的变化或者在显示单元151的特定部分处发生的电容的变化转换为电输入信号。触摸传感器还可被配置为不仅感测触摸位置和触摸面积,而且感测触摸压力和/或触摸电容。通常使用触摸物体来对触摸传感器施加触摸输入。典型的触摸物体的示例包括手指、触摸笔、手写笔、指点器等。
当通过触摸传感器感测到触摸输入时,可将对应信号发送给触摸控制器。触摸控制器可对接收到的信号进行处理,然后将对应数据发送给控制器180。因此,控制器180可感测显示单元151的哪一区域被触摸。这里,触摸控制器可以是独立于控制器180的组件、控制器180及其组合。
在一些实施方式中,控制器180可根据对触摸屏或者除触摸屏以外设置的触摸键进行触摸的触摸物体的类型来执行相同或不同的控制。例如,根据提供触摸输入的物体是执行相同的控制还是不同的控制可基于可穿戴装置100的当前操作状态或者当前执行的应用程序来决定。
触摸传感器和接近传感器可单独实现或者组合实现,以感测各种类型的触摸。这些触摸包括短(或轻敲)触摸、长触摸、多触摸、拖曳触摸、轻拂触摸、缩小触摸、放大触摸、轻扫触摸、悬停触摸等。
如果需要,可实现超声传感器以利用超声波来识别与触摸物体有关的位置信息。例如,控制器180可基于由照明传感器和多个超声传感器感测的信息来计算波生成源的位置。由于光远比超声波快,光到达光学传感器的时间远比超声波到达超声传感器的时间短。可利用这一事实来计算波生成源的位置。例如,可基于光作为基准信号利用相对于超声波到达传感器的时间的时间差来计算波生成源的位置。
相机121通常包括至少一个相机传感器(CCD、CMOS等)、光电传感器(或图像传感器)和激光传感器。
利用激光传感器实现相机121可允许检测实体物体相对于3D立体图像的触摸。光电传感器可被层压在移动终端上或者与移动终端交叠。光电传感器可被配置为对接近触摸屏的实体物体的移动进行扫描。更详细地,光电传感器可包括成行和列的光电二极管和晶体管,以利用根据施加的光的量而变化的电信号来对光电传感器处接收的内容进行扫描。即,光电传感器可根据光的变化来计算实体物体的坐标,从而获得实体物体的位置信息。
显示单元151通常被配置为输出在可穿戴装置100中处理的信息。例如,显示单元151可显示在可穿戴装置100执行的应用程序的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施方式中,显示单元151可被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等的立体显示方案。
音频输出模块152通常被配置为输出音频数据。这些音频数据可从多种不同的源中的任何源获得,使得所述音频数据可从无线通信单元110接收或者可存储在存储器170中。所述音频数据可在诸如信号接收模式、呼叫模式、录制模式、语音识别模式、广播接收模式等的模式下输出。音频输出模块152可提供与可穿戴装置100所执行的特定功能有关的可听输出(例如,呼叫信号接收音、消息接收音等)。音频输出模块152还可被实现为受话器、扬声器、蜂鸣器等。
触觉模块153可被配置为产生用户感觉、感知或者体验的各种触觉效果。由触觉模块153产生的触觉效果的典型示例是振动。由触觉模块153产生的振动的强度、模式等可通过用户选择或控制器的设定来控制。例如,触觉模块153可按照组合方式或顺序方式输出不同的振动。
除了振动以外,触觉模块153可产生各种其它触觉效果,包括诸如插针排列向接触皮肤垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等的刺激效果、利用能够吸热或发热的元件再现冷和热的感觉的效果等。
除了通过直接接触传递触觉效果以外,触觉模块153还可被实现为使得用户能够通过诸如用户的手指或手臂的肌肉觉来感觉到触觉效果。可根据可穿戴装置100的特定配置来设置两个或更多个触觉模块153。
光学输出模块154可利用光源的光输出用于指示事件的发生的信号。可穿戴装置100中发生的事件的示例可包括消息接收、呼叫信号接收、未接呼叫、警报、日程提醒、电子邮件接收、通过应用的信息接收等。
由光学输出模块154输出的信号可按照可穿戴装置发射单色光或多种颜色的光的方式来实现。例如,当可穿戴装置感测到用户已查看所发生的事件时,信号输出可被终止。
接口单元160用作要与可穿戴装置100连接的外部装置的接口。例如,接口单元160可接收从外部装置发送来的数据,接收电力以输送给可穿戴装置100内的元件和组件,或者将可穿戴装置100的内部数据发送给这样的外部装置。接口单元160可包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。
所述标识模块可以是存储用于验证可穿戴装置100的使用权限的各种信息的芯片,并且可包括用户标识模块(UIM)、订户标识模块(SIM)、全球订户标识模块(USIM)等。另外,具有标识模块的装置(本文中也称作“标识装置”)可采取智能卡的形式。因此,标识装置可经由接口单元160与终端100连接。
当可穿戴装置100与外部托架连接时,接口单元160可用作使得能够将来自托架的电力供应给可穿戴装置100的通道,或者可用作使得能够用来将由用户从托架输入的各种命令信号输送给可穿戴装置的通道。从托架输入的各种命令信号或电力可用作用于识别可穿戴装置被正确安装在托架上的信号。
存储器170可存储用于支持控制器180的操作的程序,并存储输入/输出数据(例如,电话簿、消息、静止图像、视频等)。存储器170可存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。
存储器170可包括一种或更多种类型的存储介质,包括闪存、硬盘、固态盘、硅盘、微型多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。可穿戴装置100还可与在诸如互联网的网络上执行存储器170的存储功能的网络存储装置有关地操作。
控制器180通常可控制可穿戴装置100的总体操作。例如,当可穿戴装置的状态满足预设条件时,控制器180可设定或解除用于限制用户输入关于应用的控制命令的锁定状态。
控制器180还可执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理,或者执行模式识别处理以将在触摸屏上进行的手写输入或绘画输入分别识别为字符或图像。另外,控制器180可控制那些组件中的一个或其组合,以便实现本文公开的各种示例性实施方式。
电源单元190接收外部电力或提供内部电力,并供应对包括在可穿戴装置100中的各个元件和组件进行操作所需的适当电力。电源单元190可包括电池,电池通常是可充电的或者以可拆卸的方式联结到终端主体以便于充电。
电源单元190可包括连接端口。该连接端口可被配置为接口单元160的一个示例,用于供应电力以对电池进行充电的外部充电器可电连接到该连接端口。
又例如,电源单元190可被配置为以无线方式对电池进行充电,而不使用连接端口。在此示例中,电源单元190可利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种方法来接收从外部无线电力发射器输送的电力。
本文所述的各种实施方式可利用例如软件、硬件或其任何组合来在计算机可读介质、机器可读介质或类似介质中实现。
图1B是示出本发明的可穿戴装置100可工作的通信***的示图。
参照图1B,现在将更详细地描述能够与各种各样描述的移动终端一起工作的通信***。这种通信***可被配置为利用各种不同的空中接口和/或物理层中的任一种。通信***所使用这些空中接口的示例包括频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)、通用移动电信***(UMTS)(包括长期演进(LTE)、LTE-A(长期演进-高级))、全球移动通信***(GSM)等。
仅作为非限制性示例,进一步的描述将涉及CDMA通信***,但这些教导同样适用于包括CDMA无线通信***以及OFDM(正交频分复用)无线通信***在内的其它***类型。CDMA无线通信***通常包括一个或更多个移动终端(MT或用户设备UE)100、一个或更多个基站(BS、NodeB或演进NodeB)、一个或更多个基站控制器(BSC)以及移动交换中心(MSC)。MSC被配置为与传统的公共交换电话网络(PSTN)和BSC连接。BSC经由回程线路耦合到基站。回程线路可依据包括例如E1/T1、ATM、IP、PPP、帧中继、HDSL、ADSL或xDSL在内的多种已知接口中的任一种来配置。因此,CDMA无线通信***中可包括多个BSC。
各个基站可包括一个或更多个扇区,各个扇区具有全向天线或者从基站向外径向地指向特定方向的天线。另选地,各个扇区可包括两个或更多个不同天线。各个基站可被配置为支持多个频率指派,各个频率指派具有特定频谱(例如,1.25MHz、5MHz等)。
扇区和频率指派的交汇可被称作CDMA信道。基站还可被称作基站收发器子***(BTS)。在一些情况下,术语“基站”可用于统指BSC和一个或更多个基站。基站还可被表示为“蜂窝基站(cell site)”。另选地,给定基站的各个扇区可被称作蜂窝基站。
广播发送机(BT)将广播信号发送给在***内工作的移动终端100。图1A的广播接收模块111通常被配置在可穿戴装置100内以接收由BT发送的广播信号。
例如,用于对可穿戴装置100的位置进行定位的全球定位***(GPS)卫星可与CDMA无线通信***协作。可利用比两个卫星更多或更少的卫星来获得有用位置信息。将理解,可另选地实现其它类型的位置检测技术(即,除了GPS定位技术以外或代替GPS定位技术可使用的定位技术)。如果需要,GPS卫星中的至少一个可另选地或另外地被配置为提供卫星DMB传输。
位置信息模块115通常被配置为检测、计算或者以其它方式识别移动终端的位置。例如,位置信息模块115可包括全球定位***(GPS)模块、Wi-Fi模块或这二者。如果需要,位置信息模块115可另选地或另外地与无线通信单元110的任何其它模块一起工作,以获得与移动终端的位置有关的数据。
典型的GPS模块115可测量准确时间以及距三个或更多个卫星的距离,并且基于测量的时间和距离根据三角法准确地计算可穿戴装置的当前位置。可使用从三个卫星获取距离和时间信息并且利用单个卫星执行误差校正的方法。具体地,除了纬度、经度和高度值的位置以外,GPS模块还可从接收自卫星的位置信息获取准确的时间以及三维速度信息。
另外,GPS模块可实时地获取速度信息以计算当前位置。有时,当可穿戴装置位于卫星信号的盲点中(例如,位于室内空间中)时,可能有损测量位置的准确性。为了使这些盲点的影响最小化,可使用诸如Wi-Fi定位***(WPS)的另选或补充位置技术。
Wi-Fi定位***(WPS)是指使用Wi-Fi作为跟踪可穿戴装置100的位置的技术的基于无线局域网(WLAN)的位置确定技术。该技术通常包括使用可穿戴装置100中的Wi-Fi模块以及与Wi-Fi模块通信的无线接入点。
Wi-Fi定位***可包括Wi-Fi位置确定服务器、移动终端、连接到移动终端的无线接入点(AP)以及存储有无线AP信息的数据库。
连接到无线AP的可穿戴装置可将位置信息请求消息发送给Wi-Fi位置确定服务器。Wi-Fi位置确定服务器可基于可穿戴装置100的位置信息请求消息(或信号)提取连接到可穿戴装置100的无线AP的信息。无线AP的信息可通过可穿戴装置100被发送至Wi-Fi位置确定服务器,或者可从无线AP发送至Wi-Fi位置确定服务器。
基于可穿戴装置100的位置信息请求消息提取出的无线AP的信息可包括媒体访问控制(MAC)地址、服务集标识(SSID)、接收信号强度指示符(RSSI)、参考信号接收功率(RSRP)、参考信号接收质量(RSRQ)、信道信息、隐私、网络类型、信号强度、噪声强度等中的一个或更多个。
Wi-Fi位置确定服务器可如上所述地接收连接到可穿戴装置100的无线AP的信息,并且可从预先建立的数据库提取与连接到可穿戴装置的无线AP对应的无线AP信息。存储在数据库中的任何无线AP的信息可以是诸如MAC地址、SSID、RSSI、信道信息、隐私、网络类型、纬度和经度坐标、无线AP所在的建筑物、楼层号、详细室内位置信息(GPS坐标可用)、AP所有者的地址、电话号码等的信息。为了在位置确定处理期间去除利用移动AP或非法MAC地址提供的无线AP,Wi-Fi位置确定服务器可按照高RSSI的顺序仅提取预定数量的无线AP信息。
然后,Wi-Fi位置确定服务器可利用从数据库提取的至少一个无线AP信息来提取(分析)移动终端100的位置信息。
除了这些定位方法以外,可使用各种算法来提取(分析)移动终端的位置信息。提取的这些位置信息可通过Wi-Fi位置确定服务器被发送给可穿戴装置100,从而获取可穿戴装置100的位置信息。
可穿戴装置100可通过连接到至少一个无线AP来获取位置信息。获取可穿戴装置100的位置信息所需的无线AP的数量可根据可穿戴装置100所在的无线通信环境而不同地变化。
图2是示出依据另一示例性实施方式的手表型可穿戴装置200的一个示例的立体图。如图2所示,手表型可穿戴装置200包括具有显示单元251的主体201以及连接到主体201以能够佩戴在手腕上的表带202。通常,可穿戴装置200可被配置为包括与图1A的可穿戴装置100相同或相似的特征。
主体201可包括具有特定外观的壳体。如图所示,所述壳体可包括第一壳体201a和第二壳体201b,这两个壳体协作地限定用于容纳各种电子组件的内部空间。其它配置也是可能的。例如,另选地,可实现单个壳体,这种壳体被配置为限定内部空间,从而利用单一体来实现可穿戴装置200。
手表型可穿戴装置200可执行无线通信,并且用于无线通信的天线可安装在主体201中。该天线可利用壳体来扩展其功能。例如,包含导电材料的壳体可电连接到天线,以延伸接地区域或辐射区域。
显示单元251被示出为位于主体201的前侧,使得用户可看到显示的信息。在一些实施方式中,显示单元251包括触摸传感器,使得显示单元可用作触摸屏。如图所示,窗251a被设置在第一壳体201a上,以与第一壳体201a一起形成终端主体的前表面。
图示的实施方式包括设置在主体201上的音频输出模块252、相机221、麦克风222和用户输入单元223。当显示单元251被实现为触摸屏时,附加功能键可被最小化或去除。例如,当实现触摸屏时,用户输入单元223可被省略。
表带202通常被佩戴在用户的手腕上,并且可由柔性材料制成以方便装置的佩戴。例如,表带202可由毛皮、橡胶、硅、合成树脂等制成。表带202还可被配置为可从主体201拆卸。因此,可根据用户的偏好用各种类型的表带替换表带202。
在一个配置中,表带202可用于扩展天线的性能。例如,表带中可包括电连接到天线以延伸接地区域的接地延伸部分(未示出)。
表带202可包括系紧件202a。系紧件202a可被实现为扣环型、按扣钩结构、型等,并且包括柔性部分或材料。附图示出利用扣环实现系紧件202a的示例。
根据本发明的实施方式的、被配置为包括上述至少一个或更多个组成元件的可穿戴装置200被穿戴在特定身体部位上以便感测用户的生物信号并且预先收集与感测到的生物信号有关的日志信息。然后,基于收集到的信息,生成并存储与用户的状态有关的指数模式(index pattern)。利用存储的指数模式来设定用户定制的参考驾驶指数。即,基于平日感测到的生物信号,针对各个用户不同地设置适合于驾驶的最低驾驶指数(例如,在困倦指数或压力指数在适合于驾驶的临界范围中的情况下)。
接下来,当感测到用户进入车辆时,可穿戴装置200以预定驾驶指数充当参考,确定与在用户进入车辆之后感测到的生物信号对应的当前驾驶指数。即,作为分析在用户进入车辆之后感测到的生物信号的结果,以预定驾驶指数充当参考来确定困倦指数和压力指数是否适合于驾驶。然后,输出反馈,所述反馈将与所确定的结果对应的用户的状态通知给用户。因此,在开始驾驶之前,用户可知道他/她的状态是否适合于驾驶。因此,可以可靠地提前预防由于驾驶者开车时打瞌睡等引起的车辆事故。
就这一点,本说明书中所公开的“日志信息”包括与穿戴可穿戴装置200的用户的生物信号有关的信息以及与用户的状态有关的信息。“日志信息”按照用户的当前情境、时间和地点来分类并相应地收集。另外,可仅在对可穿戴装置200施加预定输入以进入“记录模式”的情况下才收集“日志信息”。
另外,与用户的状态有关的“指数模式”意指与用户的状态对应的生物信号或者基于感测到的生物信号而获取的生物信号的变化模式。例如,在用户处于“睡眠状态”的同时测量的各种生物信号的变化值被定义为用户的睡眠状态的特定指数模式。另外,在用户平日步行的同时测量的各种生物信号的变化值被定义为用户的“步行运动”的特定指数模式。
另外,“参考驾驶指数”指示基于用户的生物信号检测的压力指数和困倦指数是在确保驾驶者的安全驾驶的临界范围中的数值。即,“参考驾驶指数”意指驾驶者安全驾驶所需的最低物理和情绪状态。“参考驾驶指数”是基于平日感测到的生物信号的变化模式生成的,因此针对各个用户不同地设定。例如,满足指示驾驶者A可安全地驾驶车辆的困倦指数和压力指数的参考驾驶指数不同于满足指示驾驶者B可安全地驾驶车辆的困倦指数和压力指数的参考驾驶指数。
每当检测到驾驶者的状态的变化或者与驾驶者的正常状态对应的指数模式被改变时,更新“参考驾驶指数”。另外,“参考驾驶指数”被设定为包括多个阶段或水平以使得能够更精确地识别驾驶者的当前状态。
另外,提供将用户的状态通知给用户的“反馈”意指提供用户借以识别驾驶者的当前驾驶指数是否适合于安全驾驶的信息。例如,在作为确定驾驶者的当前驾驶指数的结果,驾驶者开车时打瞌睡的可能性较高的情况下,需要以各种方式提醒用户该状态,以便可靠地预防车辆事故.另外,所述“反馈”包括用于将驾驶者的当前驾驶指数增加至适合于安全驾驶的水平的情境信息。
在相关技术中的现有方法中,当驾驶者开车时打瞌睡的可能性变得较高或者感测到驾驶者的瞌睡状态时,就此提醒驾驶者以便引起用户的注意或者建议驾驶者应该休息,从而预防由于驾驶者开车时打瞌睡引起的车辆事故。然而,即使感测到这种状态,由于交通情况、驾驶者的习惯等,难以预料驾驶者将立即停止驾驶。即,难以防止由于驾驶者的疏忽而引起的车辆事故。
根据本发明,基于平日感测到的关于用户的生物信息,针对每一个用户设置适合于安全驾驶的参考驾驶指数。然后,当用户进入车辆时,基于当时感测到的生物信息和预定参考驾驶指数来确定用户的当前状态是否适合于安全驾驶。因此,将确定的结果通知给用户。即,用户可在开始驾驶之前预先知道他的状态。因此,可以可靠地增加安全驾驶的可能性,因此更可靠地预防由于驾驶者的疏忽(例如,驾驶者开车时打瞌睡)引起的车辆事故。
参照图4,下面利用手表型终端200作为可穿戴装置的示例描述根据本发明的可穿戴装置的操作方法,即,在进入车辆时将用户的当前状态是否适合于安全驾驶通知给用户的可穿戴装置的操作方法。
然而,本发明的实施方式不限于手表型终端200,可被实现为能够感测用户的生物信号的不同形式的可穿戴装置,或者可被实现为能够与包括感测用户的生物信号的传感器的装置(例如,链路等)无线通信的可穿戴装置。
另外,根据本发明,手表型终端200的操作大致分为在进入车辆之前执行的操作和在进入车辆之后执行的操作。此时,在进入车辆之后执行的可穿戴装置的操作是基于在进入车辆之前执行的操作以及所述操作的执行结果而执行的操作。
首先,参照图4,手表型终端200被佩戴在特定身体部位上并且感测用户的生物信号达预定时间周期(S410)。
就这一点,所述预定时间周期是由用户设定的特定时间周期或者感测到手表型终端200被佩戴的时间周期。所述预定时间周期可被限制为在感测到手表型终端被佩戴之后通过预定输入而进入的“生物信号记录模式”被激活的时间周期,
用户的生物信号在手表型终端200被佩戴的状态下感测,或者在手表型终端200连接到用于感测用户的生物信号的装置的状态下接收。
在通过手表型终端200感测用户的生物信号的情况下,利用各种方法感测手表型终端200被佩戴。例如,感测手表型终端的主体的倾斜和移动以便感测主体是否被佩戴。为此,主体还包括感测终端相对于X轴、Y轴和Z轴的空间移动的陀螺仪传感器、倾斜传感器等。另外,根据通过相机拍摄的画面信息或者根据设置到表带202的系紧件202a的一端是否连接到另一端来确定手表型终端200是否被佩戴。另外,在用户佩戴可所述主体之后按下特定键或者输入预定语音命令的情况下,感测到主体被佩戴。
当以这样的方式感测到主体被佩戴时,通过设置到手表型终端200的各种传感器周期性地检测用户的生物信号。
就这一点,生物信号是在佩戴有手表型终端200的用户的身体中发生的电信号。例如,生物信号是心电图(ECG)信号、光电血管容积图(PPG)信号和皮肤电反应(GSR)信号当中的一种,但是不限于这些,而是可包括在相关技术中广泛用于测量睡眠阶段的各种类型的信号。例如,手表型终端200还包括体温传感器、心搏动传感器、压力传感器等,并且还获取由这些传感器感测到的生物信号。
心电图(ECG)信号是在皮肤表面上发生的由心脏的电活动导致的电信号。ECG信号通过将在心肌处根据心跳发生的有源电流诱导到身体表面上的两个合适的区域中来测量。通过周期性地观测ECG的周期和波形的特性来标识佩戴手表型终端200的用户的心理状态。
肌电图(EMG)信号是在皮肤表面上发生的由肌肉收缩、肌肉活动和肌肉疲劳程度导致的电信号。EMG根据被佩戴的手表型可穿戴装置200感测到的用户的手指的移动来检测肌肉活动。具体地,可穿戴装置的用户的手腕内的腕管具有控制手指的移动的指屈肌腱。指屈肌腱具有9根肌腱和一根神经,如果手指移动,则指屈肌腱中包括的9根肌腱按照各种组合移动。感测单元140感测根据手指的移动或者手腕的移动而改变的肌腱的形状,控制器180基于感测到的信息来确定用手指做了什么手势。
脑电图(EEG)信号是注意力集中或响应于在皮肤表面上发生的外部刺激的大脑活动导致的电信号。EEG信号通过将发生于人脑中的电势的变化或者由所述变化导致的脑电流诱导到头皮中来测量。
EEG根据频率特性分成6种类型。通常,δ类型指示“睡眠”状态,θ类型指示“瞌睡状态”,α类型指示“舒适状态”,低β类型指示“集中状态”,中β类型指示“警惕状态”,高β类型指示“兴奋状态”。即,通过EEG确定用户的个人心理状态。
另外,皮肤电反射(GSR)信号是在皮肤表面上发生的由对交感神经的活动的皮肤电阻的变化导致的电信号。GSR信号通过测量由于外部刺激或情绪激动而在生命体的皮肤中发生的电阻暂时降低或者发生有源电势的现象来获取。当用户紧张或者醒来,因此用户的交感神经***被激活时,皮肤表面中的汗腺被激活,从而增加GSR。
另外,心率变异性(HRV)是在皮肤表面上发生的由心电图的R峰R峰间隔(R-R间隔(RRI))的变化导致的电信号。心率变异性的频域功率谱通过对RRI时间序列信号执行傅里叶变换来获取。功率谱的低频(LF:0~0.15Hz)域反映用户的交感神经***的活动,并且高频(HF:0.15~0.4Hz)指示副交感神经***的活动。
另外,光电血管容积图(PPG)信号是通过测量在指端的血管处的动脉血容积与心跳同步地交替增大和减小而获取的电信号。在指端处的光接收单元中检测的透射光被接收并且呈现为指示与心跳同步的血流量的变化的波形。透射光的量通过从入射光减去手指吸收的光的量来获取。所得波形为PPG。
通过同时考虑以这样的方式感测到的各种生物信号之间的相关性来确定佩戴手表型终端200的用户的物理和心理状态。然后,生物信号被与情境信息和时间信息一起存储。当生物信号被累积达预定时间周期时,获取与用户生命模式有关的有意义的数据组。
接下来,收集与感测到的用户的生物信号有关的日志信息,生成包括在所收集的日志信息中的与用户的状态有关的指数模式,并且将生成的指数模式存储在存储单元170(参照图1A)中(S420)。
就这一点,如上所述,“日志信息”包括与佩戴手表型终端200的用户的生物信号有关的信息以及与用户的状态有关的信息。“日志信息”按照用户的当前情境、时间和地点来分类并且被相应地收集。
为此,在感测到的生物信号中包括异常信号(例如,PPG等突然增大或改变的信号(例如,醒来、睡着)的情况下,日志信息收集单元(未示出)或控制器180收集高层到这种信号的时间、关于用户在该时间的移动的信息、外部情境信息(外部背景)、关于手表型终端200的位置信息等作为“日志信息”。
例如,收集的日志信息涉及感测到的生物信号中的异常信号(例如,GSP突然增大)被感测到的时间、与异常信号被感测到的时间对应的手表型终端200的位置、关于手表型终端200的周围环境信息(例如,天气、环境噪声级别等)当中的至少一个。另外,收集的日志信息涉及异常信号消除(例如,GSR减小)被感测到的时间、与感测到异常信号被消除的时间对应的手表型终端200的位置以及关于用户的移动(锻炼、睡眠等)的信息当中的至少一个。
即使用户没有请求日志信息,也在手表型终端200被佩戴的情况下自动地收集日志信息。
另一方面,当以这种方式收集日志信息时,手表型终端200利用收集到的日志信息生成与用户的状态有关的指数模式。就这一点,“指数模式”意指与用户的状态对应的生物信号或者基于感测到的生物信号获取的生物信号的变化模式。例如,用户作为个体在用户处于“睡眠状态”的同时测量的各种生物信号方面(例如,在ECG、EMG、EEG、HRV、PPG等方面)的变化模式是“睡眠状态”的指数模式。
另一方面,手表型终端的控制器180将与用户的特定状态(例如,睡眠、锻炼等)对应的指数模式的形状、持续时间和位置信息存储在一起。
图3A是描述在手表型终端200中收集与用户的生物信号有关的日志信息并且生成与用户的状态有关的指数模式的方法的示图。
如图3A所示,手表型终端200的日志信息收集单元(未示出)或控制器180基于在参考时间周期内(例如,一天内)收集的信息生成与用户的状态有关的指数模式。
例如,在图3A中,响应于通过经手表型终端200感测到的生物信号用户的睡眠状态切换为醒来状态,检测关于切换到醒来状态时的时间(例如,6:00)以及在该时间生物信号的变化模式的信息,以生成“醒来状态”的个人指数模式310。图3A中未示出描绘指数模式的曲线图。随后,当生物信号的变化值与生成的指数模式310相同或相似时,手表型终端200识别出用户处于“醒来状态”。
另外,基于感测到的生物信号,控制器180预先设定用于确定用户的睡眠状态切换为醒来状态的算法的边界值。另外,在手表型终端200中预先设定的闹钟时间用作用于确定醒来状态的数据。
另外,例如,当通过经手表型终端200感测的生物信号识别出用户的位置从室内移至室外时,生成关于发生“室内至室外的移动”的时间(例如,8:00)以及在该时间生物信号的变化模式的信息,例如“室内至室外的移动”的个人指数模式320(例如,通过GSR感测的出汗程度或体温变化程度)。另外,周围环境信息(例如,光量变化、照明强度变化、风、温度、湿度等)用作用于识别室内至室外的移动的附加信息。
另外,在手表型终端200处于特定地点(例如,“办公室”)的同时感测的生物信号的变化模式被生成作为该特定地点的个人指数模式330。另外,例如,当通过经手表型终端200感测的生物信号感测到用户在锻炼时,在这种情境下感测的生物信号的变化模式是进行锻炼的人的个人指数模式340。此时,关于“锻炼状态”持续的时间周期的时间信息、在“锻炼”状态持续的同时生成的生物信号的变化模式、在“锻炼”状态结束之后生成的生物信号的变化模式以及用户回到正常状态所花费的恢复时间被一起检测。
类似地,在下班后感测的生物信号的变化模式是用户离开特定地点的时间(即,下班后的私生活)的个人指数模式350。当通过生物信号感测到手表型终端200的用户处于“睡眠状态”时,“睡眠状态”持续的时间周期以及在维持“睡眠状态”的同时感测的生物信号的变化模式是“睡眠状态”的指数模式360。
以这样的方式,利用在参考时间周期内通过手表型终端200感测的生物信号获取用户生活日志信息。即,用户可识别在他/她锻炼时生物信号形成哪一变化模式或者当用户接近睡眠状态时生物信号如何逐渐变化。另外,在用户处于兴奋状态的同时感测的生物信号的变化模式、用户从兴奋状态恢复所花费的平均时间以及帮助用户回到正常状态的情境信息各自针对各个用户不同地设定。
另外,当指数模式累计达预定时间周期时,手表型终端200从累积的指数模式识别作为个体的用户的平均生活方式(例如,A在6:00和6:30之间起床并且在12:30和01:20之间去睡觉),并且另外可感测不符合该生活方式的健康无序状态。
图5A(a)和图5A(b)以及图5B是示出在根据本发明的可穿戴装置中生成与用户的状态有关的指数模式的示例的曲线图。
图5A(a)示出通过手表型终端200感测的生物信号或者由手表型终端200通过无线通信单元110接收的生物信号(例如,ECG)的频率和波形。所示的去除了伪影或者提取了特定伪影(例如,内部伪影)的曲线图用作从压力指数(下面描述)恢复的用户的呼吸频率的记录。
另外,图5A(b)是描绘基于感测的生物信号分析信号特性的结果的曲线图。例如,分析各个用户彼此不同的心电图的R峰R峰间隔(R-R间隔(RRI))。从所示的示例将理解,HRV为68BPM。
图5B示出在参考时间周期内感测各种生物信号(例如,ECG、PPG、GSR、EMG和EEG)并且在随时间而变化的一个指数模式中表达的示例。例如,通过由来自用户的生物信号形成的指数模式,识别用户的就寝时间、醒来时间、平均睡眠时间、平均锻炼时间、通常血压、通常心率、通常体温、通常脉搏波、通常心电图等。另外,识别用户的压力指数(或困倦指数)的指数上升区段以及用户的压力指数的指数恢复区段。通过跟踪压力指数(或困倦指数)以及关于用户活动的信息提取个性化特征和模式。另外,通过在图5B的曲线图上用圆圈标记的时间点处跟踪关于用户活动的信息或者终端的操作(例如,锻炼、睡眠、再现的一段音乐或内容)来获取稍后帮助用户从压力指数(或困倦指数)增加时快速恢复的信息。
当以这样的方式生成的指数模式被存储在存储单元170中时,手表型终端200的控制器180利用存储的指数模式设定参考驾驶指数(S430)。
就这一点,如上所述,参考驾驶指数是指在基于用户的生物信号检测的压力指数和困倦指数适合于驾驶者的安全驾驶的临界范围内的数值。即,“参考驾驶指数”意指驾驶者为了安全驾驶所需的最低物理和情绪状态。例如,在驾驶者过于兴奋或者很可能在开车时打瞌睡的情况下,可取的是驾驶者不应该再驾驶,以便预防由于驾驶者的疏忽引起的车辆事故。
就这一点,与“参考驾驶指数”对应的压力指数和困倦指数被确定为表示通过手表型终端200感测的生物信号的变化模式的数值范围。例如,当压力指数(或困倦指数)在0至50范围内时,这被定义为“低”。当压力指数(或困倦指数)在51至100范围内时,这被定义为“正常”。当压力指数(或困倦指数)超过100时,这被定义为“高”。另外,就压力指数(或困倦指数)而言,压力指数(或困倦指数)的“高”级别被细分成诸如“有点危险”、“危险”、“高度危险”的多个级别。“参考驾驶指数”被设定为在压力指数和困倦指数在“高”以下的数值范围内的边界值。
另一方面,如上所述,对于各个用户而言通常心率和通常血压各自不同。另外,血压、心率、体温、脉搏波、心电图等中的每一个的变化模式针对各个情境或者针对各个地点而不同。因此,根据本发明,利用“指数模式”针对各个用户而不同的个人“指数模式”来相对地确定“参考驾驶指数”。
例如,当A的通常压力指数高于平均压力指数时,可取的是与“参考驾驶指数”对应的压力指数应该被设定为高于其他人的压力指数。具体地,在压力指数超过150的情况下,这对于A被定义为“高”,与“参考驾驶指数”对应的A的压力指数被设定为“150”。
另外,例如,当在相同困倦指数的条件下B快速切换为“困倦”状态时,可取的是B的与“参考驾驶指数”对应的困倦指数应该被设定为低于其他人的困倦指数。具体地,在困倦指数超过70的情况下,这对于B被定义为“高”,而A的与“参考驾驶指数”对应的困倦指数被设定为“150”。
每当检测到驾驶者的状态的变化或者与待在车外的驾驶者的正常状态对应的指数模式变化时,更新“参考驾驶指数”。例如,在A兴奋的次数增加或者A的兴奋状态的时间周期变长的情况下,用数值高于当前压力指数的一个来更新与“参考驾驶指数”对应的当前压力指数。
另一方面,这些步骤全部在用户进入车辆之前执行。即,手表型终端200在用户进入车辆之前识别出适合于安全驾驶的最低状态。下面描述手表型终端在用户进入车辆之后执行的操作。另一方面,以下描述假设进入车辆的用户是车辆的驾驶者。然而,由于本发明的目的是在驾驶者开始驾驶之前向驾驶者提醒驾驶者的状态,所以术语“用户”和“驾驶者”可如上所述地互换使用。
当感测到用户(或驾驶者)进入车辆时,控制器180以预定参考驾驶指数充当参考,确定与在用户进入车辆之前和之后感测的用户的生物信号对应的当前驾驶指数(S440)。
利用各种方法感测用户进入车辆。
具体地,通过对手表型终端200施加的预定输入信号(例如,预定触摸输入、语音命令或者远程起动信号)感测用户上车。另外,在感测到用户用他/她的佩戴有手表型终端200的手打开车门的手势,利用设置在手表型终端200中的相机、压力传感器等感测到门被打开,或者外力被施加到设置在车辆的方向盘中的触摸传感器或压力传感器等的情况下,感测到用户进入车辆。另外,在通过麦克风222输入车辆起动音的情况下,可识别出用户进入车辆。另外,在另一示例中,当安装在车辆内的远程信息***被激活(打开)时,感测到用户进入车辆。
当以这样的方式感测到用户进入车辆时,手表型终端200的控制器180使用存储在存储单元170中的参考驾驶指数充当参考,计算与在用户进入车辆之前和之后感测的生物信号对应的当前驾驶指数。当前驾驶指数包括压力指数和困倦指数。
控制器180将用户进入车辆之后感测的生物信号的指数模式与预定参考驾驶指数所对应的指数模式进行比较。作为比较的结果,控制器180确定相对于与参考驾驶指数对应的压力指数和困倦指数的位置(以下称作“参考点”),与当前驾驶指数对应的压力指数和困倦指数的相对位置。
与当前驾驶指数对应的压力指数和困倦指数当中的至少一个相对位置高于参考点“0”(即,正值(“+”)),控制器180确定计算出的当前驾驶指数不适合于允许用户驾驶车辆。另一方面,与当前驾驶指数对应的压力指数和困倦指数二者均低于参考点“0”(即,负值(“-”)),控制器180确定计算出的当前驾驶指数适合于安全驾驶。
此时,控制器180考虑到在感测到用户进入车辆之后在参考时间周期内感测的生物信号的变化模式以及在用户进入车辆之后连续感测的生物信号的变化模式,确定当前驾驶指数是否适合于安全驾驶。
例如,当用户进入车辆时压力指数的相对位置高于参考点,但是在用户进入车辆之前和之后快速减小(即,处于指数恢复区段)时,控制器180将确定当前驾驶指数的时间扩展预定时间周期,并且计算当前驾驶指数。另外,例如,当用户进入车辆时困倦指数的相对位置低于参考点,但是在用户进入车辆之前和之后逐渐增大(即,上升至更高水平)时,控制器180将确定当前驾驶指数的时间扩展预定时间周期,随后计算当前驾驶指数。这里,预定时间周期之后将计算当前驾驶指数的时间点是在起动之后车辆行驶预定距离(例如,大约1m)或更远之前的任意时间点。
即,与当前驾驶指数对应的压力指数和困倦指数不是固定值,而是随时间变化的值。因此,可通过考虑基于在用户进入车辆之前和之后感测的生物信号而计算出的压力指数(或困倦指数)是在指数上升区段中还是指数恢复区段中来更精确地确定用户的当前状态。
为此,当感测到用户进入车辆时,控制器180实时地计算当前驾驶指数并且在触摸屏251上视觉上显示计算出的当前驾驶指数。
例如,控制器180将与参考驾驶指数对应的参考点以及实时计算的当前驾驶指数的相对位置以曲线图的形式输出到触摸屏251,或者将向用户通知用户是否处于适合于安全驾驶的状态的不同图像输出到触摸屏251。此时,与当前驾驶指数对应的压力指数和困倦指数二者可被显示,在压力指数和困倦指数当中可仅显示超出参考驾驶指数的指数模式。
接下来,控制器180输出反馈,所述反馈通知与确定的当前驾驶指数对应的用户的状态(S450)。
与当前驾驶指数对应的用户的状态包括指示用户是否处于适合于安全驾驶的状态的信息以及当用户不适合时用户不适合的原因的信息。
具体地,在当前驾驶指数不适合于允许用户驾驶车辆的情况下,控制器180输出反馈,例如预定的声音、语音、振动、显示在触摸屏251上的画面的变化或者LED颜色变化。然后,通过输出的反馈,用户可识别出该当前状态不适合于安全驾驶,因此在开始驾驶之前自己休息一会儿、听一段音乐、深呼吸等。
另外,控制器180输出提醒用户当前驾驶指数不适合于允许用户驾驶车辆的原因的提醒信号。例如,在确定与当前驾驶指数对应的困倦指数上升至较高水平的情况下,控制器180通过触摸屏251或声音输出单元252输出消息“你处于瞌睡状态。你可能在开车时打瞌睡。在休息一会儿后再驾驶”。
另外,控制器180向用户提供使得当前驾驶指数变得适合于允许用户驾驶车辆的情境信息。就这一点,控制器180提供根据当前驾驶指数不适合于允许用户驾驶车辆的原因而不同的情境信息.
例如,在困倦指数超出参考驾驶指数的情况下,控制器180建议用户应该听一听预先存储在手表型终端200中或者从外部服务器下载的内容项当中的一段音乐或音频内容以帮助摆脱困倦。另外,例如,在压力指数超过参考驾驶指数的情况下,为了降低用户的兴奋状态,控制器180建议用户应该听一听预先存储在手表型终端200中的用户的呼吸频率的记录、用户的脉搏的记录等。
另一方面,当如上所述地确定当前驾驶指数适合于允许用户驾驶车辆时,控制器180可输出模式与上述反馈(例如,预定声音、语音、振动、显示在触摸屏251上的画面的变化或者LED颜色变化)不同的反馈,或者可不输出反馈。
另外,在不适合于安全驾驶的当前驾驶指数改变为适合于安全驾驶的驾驶指数(反之亦然)的情况下,控制器180按照用户可识别该状态变化的方式输出相应反馈。
在此背景下,图3B是描述当用户进入车辆时通过手表型终端200将用户的状态是否适合于安全驾驶通知给用户的方法的示图。
如图3B所示,当感测到佩戴手表型终端200的用户进入车辆50时,在用户开始驾驶之前,确定用户的当前状态是否适合于安全驾驶,并因此通过手表型终端200输出反馈。
此时,手表型终端200在确定用户的当前状态是否适合于安全驾驶时使用预先存储在手表型终端200中的用户的通常指数模式以及基于通常指数模式生成的参考驾驶指数。另外,手表型终端200。在确定用户的当前状态是否适合于安全驾驶时,使用与使用GPS300的手表型终端200的位置信息对应的情境信息(参考用户在对应地点的指数模式的历史,例如,显示出在GANG-NAM站附近压力指数总是增大的历史)。另外,手表型终端200通过将安装在车辆50内的显示到目的地的移动路径的终端(例如,远程信息***200B)中设定的到目的地的路径的信息与用户的指数模式关联,来确定用户的当前状态是否适合于安全驾驶(例如,当用户长距离驾驶时,他/她感觉非常疲劳)。
当以这样的方式确定用户的当前状态时,手表型终端200输出通过手表型终端200提醒用户当前状态的消息(例如,“你处于瞌睡状态。休息一会儿之后再开始驾驶”、“你处于兴奋状态,听一段音乐。平静下来然后开始驾驶”)。另一方面,作为另一示例,手表型终端200可执行控制以使得通过远程信息***200B输出与用户的状态有关的信息,或者可控制操作(例如,“将当前移动路径改变为另一条路径(例如,沿着森林的路径)。另一方面,尽管未示出,在用户开始驾驶之后,也继续确定用户的状态是否适合于安全驾驶。
如上所述,根据本发明,利用在用户进入车辆之后但是在用户开始驾驶之前一直感测的生物信息预先向用户通知用户的当前状态是否适合于安全驾驶。这有助于安全驾驶,从而更可靠地预防由于驾驶者在开车时打瞌睡等引起的车辆事故。
图6A至图6C是示出在用户进入车辆时利用预先存储在手表型终端200中的指数模式和参考驾驶指数通过触摸屏251向用户通知用户的状态是否适合于安全驾驶的特定处理的示图。
当佩戴手表型终端200的用户进入车辆时,如图6A所示,在终端的触摸屏251上弹出通知用户进入车辆的画面信息(例如,消息601“感测到驾驶者进入车辆”)。
就这一点,如上所示,通过对手表型终端200输入、感测到车门打开、感测到对方向盘的压力、接收车辆起动音、激活安装在车辆内的远程信息***等,感测到用户进入车辆。
然后,控制器180基于在用户上车之前和之后感测的生物信号以及预先存储在手表型终端200中的个人指数模式和参考驾驶指数来实时地计算当前驾驶指数。如图6B所示,计算的当前驾驶指数作为曲线图画面602输出,该曲线图画面602包括指示参考驾驶指数的参考线602a以及指示实时的当前驾驶指数的实线602b。
此时,如图6B所示,当指示实时的当前驾驶指数的实线602b越来越远离参考线602a朝着零以下的负值移动时,则用户的困倦指数被识别为处于“高”状态。另一方面,在指示实时的当前驾驶指数的实线602b靠近参考线602a移动或者留在距参考线602a预定距离处的情况下,则用户的状态被识别为适合于安全驾驶。另外,当指示实时的当前驾驶指数的实线602b越来越远离参考线602a朝着零以上的正值移动,则压力指数被识别为处于“高”状态。
接下来,手表型终端200将向用户通知与当前驾驶指数对应的用户的状态的反馈输出到触摸屏251。例如,如图6C所示,在触摸屏251上弹出例如“你处于瞌睡状态。休息一会儿之后再驾驶”的消息603,该消息为向用户通知用户的状态不适合于安全驾驶的视觉信息的形式或者建议用于改变用户的当前状态的情境信息的视觉信息的形式。
随反馈一起,通过触摸屏251的主体或表带输出不规则模式的振动,这有助于用户摆脱困倦。以这样的方式,根据本发明,在不涉及驾驶车辆的情况下,手表型终端200建议或输出有助于用户处于适合于安全驾驶的状态的情境信息。另外,例如,手表型终端200输出与情境信息对应的不规则模式的振动。
参照图7至图13C,下面更详细地描述各种示例,其中,在开始驾驶车辆之前,在根据本发明的可穿戴装置中提供向用户通知用户的状态是否适合于允许用户驾驶车辆的反馈。
首先,图7至图8(c)示出在根据本发明的手表型终端200中输出反馈的方法,该反馈根据包括在当前驾驶指数中的信号的类型和大小当中的至少一个而变化。
参照图7,首先,感测佩戴手表型终端200的用户的生物信号打参考时间周期,并且收集与用户的生物信号有关的日志信息。“日志信息”按照用户的当前情境、时间和地点来分类并且被相应地收集。
接下来,控制器180将以这样的方式收集的与包括在收集的日志信息中的用户的状态有关的指数模式存储在存储单元170中(S710)。
就这一点,与用户的状态有关的“指数模式”意指与用户的状态对应的生物信号或者基于感测的生物信号获取的生物信号的变化模式。指数模式通过以有组织的方式排列用户的脉搏、呼吸频率、体温、脉搏波和心电图来得到。与压力指数的指数上升区段对应的情境信息(例如,时间、位置或者关于用户的活动的信息)以及与压力指数的指数恢复区段对应的情境信息(例如,恢复时间、地点、关于用户的活动的信息或者终端的操作)通过跟踪用户所感到的压力来获取并且因此被存储在一起。
当存储“指数模式”模式时,控制器180将指数模式分成物理指数模式和情绪指数模式并且存储所得的物理指数模式和情绪指数模式。
具体地,控制器180基于在相同的时间周期内感测的用户的生物信号生成并存储物理指数模式。例如,当用户醒来时感测的生物信号的变化模式以及在用户锻炼的同时感测的生物信号的变化模式被累积并且基于用户的睡眠状态、用户的醒来状态以及用户的活动程度来分析,以便生成物理指数模式。另外,控制器180基于在特定情境下感测的用户的生物信号的变化来生成情绪指数模式。例如,在用户压力重、放松、生气、疲劳或瞌睡的状态下感测的生物信号的变化模式被累积并分析以便生成情绪指数模式。
物理指数模式和情绪指数模式是个性化特性,因为在相同的时间和情况条件下各个用户的血压、心率、呼吸频率等各自不同。
控制器180利用以这样的方式存储的指数模式来设定参考驾驶指数(S720)。每当检测到用户的状态的变化或者用户的指数模式变化时,就更新“参考驾驶指数”。另外,“参考驾驶指数”被设定为包括多个阶段或级别,使得更精确地识别用户的当前状态。
当感测到用户进入车辆时,控制器180以预定参考驾驶指数充当参考,确定与在用户进入车辆之前和之后感测的用户的生物信号对应的当前驾驶指数(S730)。
作为确定的结果,如果当前驾驶指数适合于允许用户驾驶车辆(S740),则不输出反馈。作为确定的结果,在当前驾驶指数不适合于允许用户驾驶车辆时,提供根据包括在当前驾驶指数中的异常信号的类型或强度而变化的反馈(S750)。
具体地,当确定当前驾驶指数不适合于允许用户驾驶车辆时,控制器180输出向用户提醒用户的当前状态的提醒信号。此时,提醒信号包括声音、振动、光和画面变化中的至少一个或更多个。在这种情况下,控制器180执行控制以使得提醒信号的类型或强度根据用户的当前状态而变化。
例如,在确定用户处于超过与参考驾驶指数对应的压力指数的“兴奋状态”的情况下,手表型终端200以不规则的模式输出振动,使得用户识别出当前状态不适合于安全驾驶。然而,当用户尝试驾驶车辆或者用户的兴奋程度增加时,调节振动的强度和振动间隔使其增大,或者随振动一起进一步输出指导语音消息(例如,“你太兴奋了。请在开始驾驶之前等待一会儿”)。另一方面,当用户的兴奋程度降低时,不再输出提醒信号,并且输出向用户通知用户的状态适合于安全驾驶的反馈。
另一方面,在作为当前驾驶指数的确定结果指出用户的状态不适合于安全驾驶的情况下,控制器180还通过触摸屏251或声音输出单元252输出询问用户对确定的状态的意见的消息。然后,用户看到输出的消息并且输入通知他/她的状态实际上是否符合当前驾驶指数的响应。然后,控制器180基于用户对消息的响应来输出反馈。例如,在手表型终端200确定用户处于不适合于安全驾驶的“瞌睡状态”并因此输出了要求驾驶者确认所确定的状态的消息并且用户回复“否”的情况下,手表型终端200不再输出该消息并且在参考时间周期内监测困倦指数。
另外,控制器180将用户对消息的响应反映在预定的参考驾驶指数中。例如,在手表型终端200确定用户处于不适合于安全驾驶的“兴奋状态”并因此输出要求驾驶者确认所确定的状态的消息并且用户回复“否”的情况下,手表型终端200按照增大压力指数的方式调节与预定参考驾驶指数对应的压力指数。另一方面,在用户回复“是”作为对消息的响应的情况下,手表型终端200推荐有助于用户从“兴奋”状态快速恢复的情境信息(例如,听一段音乐、做深呼吸)。
另一方面,控制器180在通知用户与当前驾驶指数对应的用户的状态的反馈之后也继续监测用户的状态,并且提供与监测结果对应的反馈。就这一点,所述反馈根据作为监测结果用户的状态是否改变为适合于安全驾驶的状态或者根据不适合于安全驾驶的用户的状态是否继续或者恶化而改变。
例如,从图8A可理解,在用户进入车辆之后,通过手表型终端200的触摸屏251输出指示当前驾驶指数801b超过与参考驾驶指数801a对应的压力指数的曲线图信息801。这里,示出了当前驾驶指数以曲线图的形式输出的示例,但是驾驶指数不限于此。当前驾驶指数以数字、图形、图像等的形式显示,使得当前驾驶指数与参考驾驶指数形成对比。
接下来,如图8B所示,触摸屏251上弹出指示与当前驾驶指数对应的用户的状态的消息802(例如,“你处于兴奋状态。建议你一会儿之后再驾驶”)。
另一方面,在输出消息802之后,当即使在参考时间周期(例如,一分钟)之后用户仍没有从“兴奋状态”恢复但是感测到用户尝试驾驶车辆,或者监测到用户的兴奋程度增加时,控制器180提供有助于用户从兴奋状态恢复的情境信息。作为示例,在图8C中,从预先存储在手表型终端200中的指数模式提取与用户的呼吸频率对应的一部分,将提取的部分转换成声音并通过声音输出单元252输出。随该声音一起,视觉上指示用户的呼吸频率的画面信息以及指导信息803被输出到触摸屏251。用户可听到他/她的音频形式的呼吸频率,这有助于用户从兴奋状态快速恢复。当对输出到触摸屏251的“停止”键803a施加触摸时,不再输出用户的呼吸频率。
如上所述,基于参考驾驶指数以及在用户进入车辆之后感测的生物信号来确定当前驾驶指数,所述参考驾驶指数基于用户的通常物理指数模式和通常情绪指数模式来设定。然而,根据在用户进入车辆之前用户的移动和活动(例如,当在用户进入车辆之前用户进行剧烈运动时或者当用户跑上车时),测量到比平日更高的水平的与当前驾驶指数对应的压力指数。
下面参照图9A至图11描述在根据本发明的手表型终端200中识别关于在用户进入车辆之前进行的活动的信息以便更精确地确定当前驾驶指数的示例。
首先,在用户进入车辆之前,利用基于在参考时间周期内感测的用户的生物信号(例如,ECG、EMG、EEG、HRV和PPG)收集的日志信息以及利用预先存储在手表型终端200中的指数模式设定的参考驾驶指数来生成个人指数模式。
当感测到用户进入车辆时,如图11所示,首先,将在用户进入车辆之前在预定时间周期内感测的生物信号与预先存储的指数模式进行比较(S1110)。
就这一点,如上所示,感测到用户进入车辆时的时间对应于对手表型终端200输入、通过设置到手表型终端200的传感器的感测、车门的打开、对车辆的方向盘的压力的感测(在传感器附接到方向盘的情况下)、车辆起动音的输出、远程信息***的激活等中的任一个。在任一情况下,感测到用户进入车辆时的时间限于开始驾驶车辆之前的时间。
另外,就这一点,预先存储的指数模式意指物理指数模式,例如用户的通常生物信号的变化模式或者与醒来、移动、锻炼等对应的生物信号的变化模式。即,指数模式意指除了预先存储的情绪指数模式以外,与关于用户的活动的信息对应的生物信号的变化。
另外,就这一点,用户进入车辆之前的预定时间周期意指感测到用户进入车辆之前的任意时间点与感测到用户进入车辆时的时间点之间的时间长度。所述预定时间周期被确定为根据预定时间周期与用户的通常指数模式匹配的程度而不同。例如,当直至今早为止感测的生物信号的变化模式没有极大地偏离预先存储的指数模式,但是在下午两点钟之后感测的生物信号极大地偏离预先存储的指数模式时,手表型终端200从感测到这种变化的时间起收集生物信号作为有效数据。作为有效数据收集的生物信号用于分析关于用户的活动的信息(如下所述)。随后,当在没有感测到用户进入车辆的状态下用户的生物信号的变化模式变得与预先存储的指数模式相同或相似时,手表型终端200忽略之前收集的数据或者记录所述数据并且另外确定与用户进入车辆之前的预定时间周期对应的任意时间周期。
以这样的方式,为了识别在用户进入车辆之前的任意时间点的用户的生物信号的变化模式,要求根据本发明的手表型终端200在用户进入车辆之前被佩戴在用户的身体的特定部位上,从而连续地感测用户的生物信号。
另一方面,控制器180在执行比较时应用根据用户的健康状态调节的物理指数模式。例如,在从用户醒来的时间连续地感测到模式不同于通常指数模式的生物信号的情况下,手表型终端200确定用户健康较差,并且通过临时调节预先存储的物理指数模式(例如,将与预先存储的指数模式对应的脉搏和呼吸频率的所有数值增加或减小预定量)来执行比较。
可选地,除了步骤S1110以外,为了获取生物信号的变化程度,控制器180将在用户进入车辆之前的预定时间周期内感测的生物信号与用户进入车辆之后感测的生物信号进行比较(S1115)。通过执行比较(S1110、或者S1110和S1115),控制器180识别关于在用户进入车辆之前进行的用户的活动的信息(S1120)。
例如,当在PPG信号中动脉血容量规则地增加或减小时,确定压力指数高。通过检查与在用户进入车辆之后感测时相比,在用户进入车辆之前的特定时间点感测时PPG信号是否更缓慢地和更不规则地变化,或者通过检查与在用户进入车辆之后感测时相比,在用户进入车辆之前的特定时间点感测时PPG信号是否更快速地或者更缓慢地变化,估计关于在用户进入车辆之前进行的用户的活动的信息。在与在用户进入车辆之前的特定时间点感测时相比,在用户进入车辆之后感测时PPG信号更快速地和更不规则地变化的情况下,确定在用户进入车辆之前用户在“锻炼或跑步”。
此时,控制器180输出要求用户确认所识别的关于用户的活动的信息的消息。
接下来,控制器180考虑识别的关于用户的活动的信息来确定用户的当前驾驶指数(S1130)。
例如,如上所示,在确定在用户进入车辆之前用户正在“锻炼或跑步”的情况下,与用户的当前驾驶指数对应的压力指数被输出为具有比实际测量的值低的值,或者与参考驾驶指数对应的压力指数的值被增加超过预定值。以这样的方式,确定了当前驾驶指数。具体地,与当前驾驶指数对应的压力指数就绝对值而言较高,但这是由于正在用户进入车辆之前进行的用户的活动,并且压力指数自然地返回到通常水平。结果,控制器180确定用户的状态适合于安全驾驶。在这种情况下,控制器180随绝对值(即,与当前驾驶指数对应的压力指数)一起提供确定的当前驾驶指数。
参照图9A至图9C,当感测到用户进入车辆时,如图9A所示,在手表型终端200的触摸屏251上弹出消息901“感测到驾驶者进入车辆”。
当用户以这样的方式进入车辆时,控制器180执行识别关于在用户进入车辆之前进行的用户的活动的信息的步骤S1110、S1115和S1120(参照图11描述),并且输出要求用户确认所识别的信息的视觉信息,例如消息902“你在进入车辆之前在锻炼?”。当用户选择“是”902a时,反映关于在用户进入车辆之前正进行的用户的活动的信息,并因此确定当前驾驶指数。另一方面,如图9B所示,当用户选择“否”902b时,仅将用户进入车辆之后感测的生物信号与预先存储的参考驾驶指数进行比较,并因此确定当前驾驶指数。结果,如图9C所示,与当前驾驶指数对应的压力指数超过参考驾驶指数,在触摸屏251上弹出提醒用户当前状态不适合于安全驾驶的视觉信息,例如,“你处于兴奋状态。该状态不适合于安全驾驶”的消息903。另一方面,尽管未示出,提醒用户该用户的状态不适合于安全驾驶的视觉信息可随预定图像(例如,哭泣的脸的表情)一起显示。
另一方面,根据本发明,在用户的状态不适合于安全驾驶的情况下,通过手表型终端200推荐有助于用户快速回到适合于安全驾驶的状态的合适的情境信息。
在此背景下,图10A(a)至图10B(c)示出通过分析预先存储在手表型终端200中的指数模式来推荐或提供有助于用户摆脱困倦或者减轻压力的内容项的方法。
根据本发明,预先存储在手表型终端200中的参考驾驶指数和在用户进入车辆之后计算的当前驾驶指数中的每一个包括压力指数和困倦指数。然后,在预定时间周期内连续感测的压力指数和困倦指数中的每一个包括指数上升区段和指数恢复区段。
指数上升区段是曲线图上压力指数(或困倦指数)上升的区段。当斜率较陡时,这意味着压力快速上升。当斜率较缓时,这意味着压力缓慢上升。指数恢复区段是曲线图上处于高水平的压力指数(或困倦指数)下降的区段。当斜率较陡时,这意味着压力快速减轻。当斜率较缓时,这意味着压力缓慢减轻。另一方面,这里,为了避免多余描述,压力指数和困倦指数被一起描述,但是通常,当压力指数增大时,与预先存储的指数模式中的那些相比,脉搏、呼吸频率和心率极大地增大。当困倦指数增大时,通常,与预先存储的指数模式中的那些相比,脉搏、呼吸频率和心率极大地减小。这些事实被反映以生成曲线图。
另一方面,在用户进入车辆之后确定的当前驾驶指数不适合于允许用户驾驶车辆的情况下,手表型终端200的控制器180检测与用户的当前状态所对应的指数恢复区段中记录的情境有关的日志信息。为此,控制器180从在车辆外感测的生物信号提取与处于高水平的压力指数下降的区段有关的日志信息并且存储提取的日志信息。例如,与这种情境有关的日志信息不仅包括终端的操作(例如,当用户在手表型终端200中在处于高水平的压力指数下降的区段中再现一段特定音乐时),而且包括用户的活动(例如,当用户在处于高水平的压力指数下降的区段中在锻炼时)。
随后,控制器180通过触摸屏251或声音输出单元252输出有助于创建与检测的日志信息对应的情境的反馈。
例如,参照图10A(a),在用户进入车辆之后确定用户的状态不适合于允许用户驾驶车辆的情况下,通过手表型终端200的触摸屏251输出推荐用户“听一段音乐”的画面信息。在用户选择“是”1001a的情况下,如图10A(b)所示,控制器180将画面信息1002输出到触摸屏251。画面信息1002推荐在预先存储的指数模式中压力指数下降的区段中再现的一段音乐内容,或者用户最常听并因此最熟悉的一段音乐内容(例如,名为“一百万朵玫瑰花”的歌曲)。
此时,控制器180基于当前感测的用户的生物信号来调节再现的一段音乐的节奏(快或慢)。例如,在用户的压力指数较高的情况下,控制器180再现节拍与从PPG的伪影预测的用户的呼吸频率相同的一段音乐。
另一方面,当用户的状态改变为适合于安全驾驶的状态时,如图10A(c)所示,在触摸屏251上弹出指示用户的状态适合于安全驾驶的消息1003。然后,控制器180学习这一系列变化模式,即,用户的状态变化所花费的时间、压力指数和困倦指数的变化模式。另选地,控制器180组织这一系列变化模式以方便存取,并且将组织的一系列变化模式存储在数据库中。因此,这一系列变化模式被反映在预定的参考驾驶指数中。
另外,在确定在用户进入车辆之后测量的当前驾驶指数不适合于允许用户驾驶车辆的情况下,控制器180执行控制以检测与在用户的当前状态相对应的指数恢复区段最短的情况下记录的情境有关的日志信息。
就这一点,与用户的当前状态相对应的最短指数恢复区段是指在手表型终端200中检测的变化模式与当前压力指数的变化模式相似的至少一个指数模式所对应的指数恢复区段当中,存在至少当前压力指数(或困倦指数)和数值相同的点并且具有最陡斜率的指数恢复区段。这意味着在这种区段中,压力以快速有效的方式减轻。因此,在与该区段中的情境有关的日志信息被检测到并提供给用户的情况下,压力以快速有效的方式减轻,用户的状态变得适合于允许用户驾驶车辆。
另外,在用户进入车辆之后确定的当前驾驶指数不适合于允许用户驾驶车辆的情况下,控制器180利用在用户的当前状态所对应的指数恢复区段中记录的用户的生物信号并且利用外部背景信息,输出有助于用户的当前驾驶指数降低超过与参考驾驶指数对应的压力指数和困倦指数的反馈。
就这一点,外部背景信息包括关于手表型终端200的用户所偏好的音乐、地点、食物等的各种偏好信息、可通过外部服务器(未示出)获得并且具有与用户相似的生活日志信息的许多人所偏好的信息、以及关于新闻、天气等的环境信息。外部背景信息通过用户输入被输入到手表型终端200中或者被手表型终端200接收,或者从通过执行用于与服务器结合操作的应用而连接的服务器获取。
例如,如图10B(a)所示,手表型终端200通过触摸屏251输出通知用户在用户进入车辆之后确定的用户的状态的反馈,例如,消息1004“你处于瞌睡状态”。然后,提供合适的情境信息以使得用户的状态改变为适合于安全驾驶的状态。例如,如图10B(a)至10B(c)所示,视觉信息1005被输出到触摸屏251。该视觉信息利用GPS引导用户到达最接近手表型终端200的当前位置的特定咖啡店。此时,所述特定咖啡店与用户频繁光顾的地点等匹配,或者与用户的困倦指数中的指数恢复区段中记录的地点匹配,因此被推荐给用户。此时,当用户对视觉信息1005上指示所述特定咖啡店的文本1005a施加触摸时,输出的视觉信息1005改变为引导用户到达所选择的特定咖啡店(“星巴克”)的地图信息(未示出)。
另一方面,在向用户通知与当前驾驶指数对应的用户的状态的反馈被输出一次之后,控制器180还继续监测用户的生物信号以及与生物信号对应的状态变化。因此,当感测到在用户的状态恶化或者不适合于安全驾驶的状态下用户尝试驾驶车辆时,输出更高提醒级别的反馈。作为示例,如图10B(c)所示,不规则模式的振动被输出到手表型终端200,提醒消息1006“爸爸,危险!你在开车时打瞌睡”被输出到触摸屏251。另外,尽管未示出,与用户的生物信号以及生物信号所对应的状态变化对应的表情图像(例如,用户的状态越差,表情图像呈现更哭泣的脸,当用户的状态适合于安全驾驶时,表情图像呈现笑脸)被输出到触摸屏251。
如上所述,根据本发明,在确定用户的当前状态不适合于安全驾驶的情况下,利用预先存储的生物信号的模式来提供合适的情境信息,使得用户快速地回到适合于安全驾驶的状态。另外,通过跟踪并反映关于在用户进入车辆之前进行的用户的活动的信息,在检查驾驶者的当前状态时更精确地确定驾驶者的当前状态。
图12至图13C示出手表型终端与车辆***或者安装在车辆内的远程信息***结合操作以便输出与用户的状态关联的反馈的方法。
参照图12,感测佩戴手表型终端200的用户的生物信号达参考时间周期(S1210)。收集与感测的生物信号有关的日志信息,并且生成并存储与用户的状态有关的指数模式(S1220)。然后,利用存储的指数模式设定参考驾驶指数(S1230)。在步骤S1210至S1230中,手表型终端200的操作涉及使用平日在用户进入车辆之前感测的生物信号。
接下来,当感测到手表型终端200来到车辆附近(例如,距车辆5m内)时,手表型终端200连接到车辆***(例如,OBD***、远程信息***或平视显示器(HUD))并且从车辆***接收相关的信息(S1240)。为了接收与车辆的状态有关的信息,手表型终端200利用蓝牙、ZigBee、WiFi等执行与车辆***的无线通信,或者利用RS-232、RS-485、USB、CAN等执行与车辆的有线通信。
当基于接收到的信息感测到用户进入车辆时,手表型终端200以预定参考驾驶指数充当参考,确定与在用户进入车辆之前和之后感测的用户的生物信号对应的当前驾驶指数(S1250)。就这一点,与车辆的状态有关的信息包括例如与车门打开、车辆起动以及远程信息***或HUD的操作关联的信号。
接下来,手表型终端200将关于所确定的当前驾驶指数相对应的用户的状态的信息提供给连接的***(S1260)。具体地,手表型终端200的控制器180通知车辆***用户的当前状态是否适合于安全驾驶。如果当前状态不适合,则控制器180通知车辆***当前状态不适合的原因。
然后,车辆***分析由至少一个传感器或更多个传感器(例如,附接到车辆内的相机以及方向盘的传感器)感测的传感器值,并且检查关于由手表型终端200确定的用户的状态的信息。检查的结果返回给手表型终端200,并且在确定用户的当前驾驶指数时反映。
然后,手表型终端200输出通知用户与当前驾驶指数对应的用户的状态的反馈(S1270),或者基于与当前驾驶指数对应的用户的状态执行控制以操作车辆***。
具体地,根据关于与当前驾驶指数对应的用户的状态的信息,控制器180通过无线通信单元110提供用于改变在车辆***中预先设定的目的地或移动路径的控制信号。
例如,参照图13A至图13C,当安装在车辆内的远程信息***(例如,导航设备100B)被打开时(1302),连接到导航设备100B的手表型终端200确定用户进入车辆,感测用户的生物信号,并且基于预定的参考驾驶指数计算当前驾驶指数。结果,如图13A所示,输出通知用户与计算的当前驾驶指数对应的用户的状态的视觉信息(例如,消息1301“你的压力指数过高,不适合于安全驾驶”)以引起用户对安全驾驶的注意。
接下来,利用预先存储在手表型终端200中的指数模式来提取将压力指数降低至通常水平的情境信息。此时,提取的情境信息与导航设备100B中设定的信息结合来提供。例如,在图13B中导航设备100B中设定的目的地为“家”,存储在手表型终端200中的将压力指数降低至通常水平的情境信息为“饥饿”、“吃汉堡包”的情况下,推荐用户情境变化的视觉信息1303,例如,消息“你能在回“家”的路上去一趟“汉堡王”吗?”被输出到手表型终端200的触摸屏251。
此时,当用户选择“是”1303c时,手表型终端200向导航设备100B发送重设路径的控制信号,使得“汉堡王”被包括在所连接的导航设备100B中设定的移动路径中。另一方面,当对视觉信息1303上的“家”1303a施加触摸时,连接到导航设备100B中设定的目的地不变。另外,当对视觉信息1303上的“汉堡王”施加触摸时,输出的视觉信息1303改变为显示选择的“汉堡王”的位置的地图画面。
另一方面,在用户的压力指数保持不变的情况下,如图13C所示,手表型终端200输出推荐再现用户通常喜欢听的一段音乐1305a(例如,“古典2”)的视觉信息1305b。另外,作为重设路径的结果、“汉堡王”的位置1306a显示在导航设备100B上。
另外,尽管未示出,连接到手表型终端200的车辆***操作不直接与车辆的驾驶关联但被安装在车辆中以用于向用户提供适合于驾驶的环境的设备,例如空调(例如,用于在瞌睡状态下降低温度)、车载音频播放器(例如,用于在压力指数处于高水平的情况下再现古典乐)、照明器材(例如,用于在瞌睡状态下照亮车辆内部)等。
在上述根据本发明的可穿戴装置以及该可穿戴装置的操作方法中,利用在用户进入车辆之后但是在用户开始驾驶之前一直感测的生物信息预先向用户通知用户的当前状态是否适合于安全驾驶。这有助于安全驾驶,从而提前防止由于驾驶者在开车时打瞌睡等引起的车辆事故。另外,在确定用户的当前状态不适合于安全驾驶的情况下,利用记录的生物信号的模式提供合适的情境信息,使得用户快速回到适合于安全驾驶的状态。因此,可预防由于情绪状态而出现没有应有的小心和注意的驾驶。另外,在检查驾驶者的当前状态时通过跟踪并反映关于在用户进入车辆之前进行的用户的活动的信息,更精确地确定驾驶者的当前状态和驾驶者的当前状态的原因。
各种实施方式可利用存储有指令的机器可读介质来实现,所述指令由处理器执行以执行本文所呈现的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅磁盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置、本文呈现的其它类型的存储介质及其组合。如果需要,机器可读介质可按照载波的形式实现(例如,经互联网的传输)。所述处理器可包括移动终端的控制器180。
上述实施方式和优点仅是示例性的,不应被视为限制本公开。本教导可容易地应用于其它类型的设备。该描述旨在为例示性的,而非限制权利要求书的范围。对于本领域技术人员而言许多另选形式、修改形式和变化形式将是显而易见的。本文所述的示例性实施方式的特征、结构、方法和其它特性可按照各种方式组合以获得附加和/或另选示例性实施方式。
由于本发明的特征可在不脱离其特性的情况下按照多种形式具体实现,所以还应该理解,除非另外指明,否则上述实施方式不受以上描述的任何细节的限制,而是应该在所附权利要求书中限定的范围内广义地考虑,因此,落入权利要求书的范围或其等同范围内的所有变化和修改旨在被所附权利要求书涵盖。

Claims (18)

1.一种可穿戴装置,该可穿戴装置包括:
主体,其被配置为穿戴在用户的身体上;
感测单元,其被配置为感测用户的生物信号;
控制器,其被配置为收集包括与用户的所述生物信号有关的信息以及与用户的状态有关的信息的日志信息,存储包括在所收集的日志信息中的与用户的状态有关的指数模式,并且通过使用存储的指数模式来设定适合于允许用户驾驶的参考驾驶指数,其中,与用户的状态有关的指数模式是指与用户的状态对应的生物信号或者基于感测到的生物信号而获取的生物信号的变化模式,并且所述参考驾驶指数指示基于用户的所述生物信号检测的压力指数和困倦指数是在确保驾驶者的安全驾驶的临界范围中的数值,
其中,当用户进入车辆时,所述控制器还被配置为:
基于设定的参考驾驶指数,确定与在用户进入车辆之前和进入车辆之后的参考时间周期感测到的用户的所述生物信号相对应的当前驾驶指数,并且
输出反馈,所述反馈向用户通知与确定的结果相对应的用户的当前状态,
其中,当感测到用户进入车辆时,所述控制器将在用户进入车辆之前的参考时间周期内感测到的用户的所述生物信号与存储的指数模式进行比较,识别关于在用户进入车辆之前进行的用户活动的信息,并且考虑识别的关于用户活动的信息来确定所述当前驾驶指数。
2.根据权利要求1所述的可穿戴装置,其中,当确定所述当前驾驶指数不适合于允许用户驾驶时,所述控制器输出反馈,所述反馈根据与所述当前驾驶指数对应的异常信号的类型或程度发生变化。
3.根据权利要求2所述的可穿戴装置,其中,在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器输出向用户提醒用户的当前状态不适合于安全驾驶的提醒信号,或者输出向用户告知用户的当前状态不可用于安全驾驶的通知。
4.根据权利要求3所述的可穿戴装置,其中,所述提醒信号包括声音、振动、光和画面变化当中的至少一个或更多个,并且
其中,所述控制器根据用户的当前状态来调节所述提醒信号的类型或强度。
5.根据权利要求1所述的可穿戴装置,该可穿戴装置还包括:
触摸屏;
其中,在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器在所述触摸屏上显示用于检查用户的当前状态的视觉信息,并且
当预定的触摸输入被施加到所述触摸屏时,所述控制器输出对应的反馈。
6.根据权利要求1所述的可穿戴装置,其中,所述当前驾驶指数指示压力指数和困倦指数,
其中,每当存储的指数模式改变,更新所述参考驾驶指数。
7.根据权利要求6所述的可穿戴装置,其中,所述压力指数和所述困倦指数都包括指数上升区段和指数恢复区段,并且
其中,在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器搜索与情境有关的日志信息,所述情境对应于与用户的当前状态相对应的所述指数恢复区段,并且所述控制器输出有助于创建与搜索到的日志信息相对应的所述情境的反馈。
8.根据权利要求7所述的可穿戴装置,其中,在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器搜索其中与用户的当前状态相对应的所述指数恢复区段最短的情境有关的日志信息。
9.根据权利要求7所述的可穿戴装置,其中,在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器利用在与用户的当前状态对应的所述指数恢复区段中检测到的用户的所述生物信号并且利用外部背景信息,输出有助于用户的所述当前驾驶指数减小以使得所述当前驾驶指数小于所述参考驾驶指数的反馈。
10.根据权利要求1所述的可穿戴装置,其中,在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,所述控制器输出询问关于与所确定的结果相对应的用户的当前状态的用户意见的消息,并且在所述参考驾驶指数中反映对所输出的消息的响应。
11.根据权利要求1所述的可穿戴装置,其中,所述指数模式包括用户的物理指数模式和情绪指数模式,
其中,所述物理指数模式基于在每天的相同时间周期感测到的用户的生物信号来生成,并且
其中,所述情绪指数模式基于在特定情境下感测到的用户的生物信号来生成。
12.根据权利要求1所述的可穿戴装置,其中,当感测到用户进入车辆时,所述控制器通过考虑在用户进入车辆之前的所述参考时间周期内感测到的用户的所述生物信号与在用户进入车辆之后感测的所述生物信号之差,确定所述当前驾驶指数被改变。
13.根据权利要求1所述的可穿戴装置,该可穿戴装置还包括:
无线通信单元,其连接到车载控制设备,接收与车辆的状态有关的信息,
其中,所述控制器基于接收到的与车辆的状态有关的信息来感测用户进入车辆,并且控制所述无线通信单元以使得关于与所述当前驾驶指数对应的用户的当前状态的信息被提供给所述车载控制设备。
14.根据权利要求13所述的可穿戴装置,其中,根据关于与所述当前驾驶指数对应的用户的状态的信息,所述控制器控制所述无线通信单元以使得用于改变在所述车载控制设备中预先设定的目的地或移动路径的控制信号被提供给所述车载控制设备。
15.一种使得穿戴在用户的身体的特定部位上的可穿戴装置执行以下步骤的方法:
感测用户的生物信号;
收集包括与所述生物信号有关的信息以及与用户的状态有关的信息的日志信息,并且存储包括在所收集的日志信息中的与用户的状态有关的指数模式,其中,与用户的状态有关的指数模式是指与用户的状态对应的生物信号或者基于感测到的生物信号而获取的生物信号的变化模式;
利用存储的指数模式来设定适合于允许用户驾驶的参考驾驶指数,其中,所述参考驾驶指数指示基于用户的所述生物信号检测的压力指数和困倦指数是在确保驾驶者的安全驾驶的临界范围中的数值;
当感测到用户进入车辆时,基于设定的参考驾驶指数来确定与在用户进入车辆之前和进入车辆之后的参考时间周期感测到的用户的生物信号相对应的当前驾驶指数;以及
输出反馈,所述反馈向用户通知与确定的结果对应的用户的当前状态,
其中,确定所述当前驾驶指数包括:当感测到用户进入车辆时,将在用户进入车辆之前的参考时间周期内感测的生物信号与存储的指数模式进行比较,并且识别关于在用户进入车辆之前进行的用户的活动的信息;以及考虑到所识别的关于用户的活动的信息来确定所述当前驾驶指数。
16.根据权利要求15所述的方法,其中,输出所述反馈是在确定所述当前驾驶指数不适合于允许用户驾驶的情况下,输出根据包括在所述当前驾驶指数中的异常信号的类型或程度发生变化的反馈。
17.根据权利要求15所述的方法,其中,确定所述当前驾驶指数包括:当感测到用户进入车辆时,通过考虑在用户进入车辆之前的参考时间周期内感测到的用户的生物信号与在用户进入车辆之后感测到的生物信号之差,确定所述当前驾驶指数改变。
18.根据权利要求15所述的方法,该方法还包括以下步骤:
接收与车辆的状态有关的信息,所述车辆的车载控制设备连接到所述可穿戴装置;
基于接收到的与车辆的状态有关的信息来感测用户进入车辆;以及
将关于与所述当前驾驶指数对应的用户的当前状态的信息提供给所述车载控制设备。
CN201510487208.5A 2014-08-11 2015-08-10 可穿戴装置及其操作方法 Active CN105373219B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2014-0103845 2014-08-11
KR1020140103845A KR101570430B1 (ko) 2014-08-11 2014-08-11 웨어러블 디바이스 및 그것의 동작 방법

Publications (2)

Publication Number Publication Date
CN105373219A CN105373219A (zh) 2016-03-02
CN105373219B true CN105373219B (zh) 2018-09-07

Family

ID=54844364

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510487208.5A Active CN105373219B (zh) 2014-08-11 2015-08-10 可穿戴装置及其操作方法

Country Status (5)

Country Link
US (1) US9809228B2 (zh)
EP (1) EP3180222B1 (zh)
KR (1) KR101570430B1 (zh)
CN (1) CN105373219B (zh)
WO (1) WO2016024752A1 (zh)

Families Citing this family (73)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6170757B2 (ja) * 2013-06-26 2017-07-26 富士通テン株式会社 表示制御装置、表示システム、情報提供方法及びプログラム
KR101859311B1 (ko) * 2014-02-24 2018-05-18 소니 주식회사 출력을 최적화하기 위한 스마트 착용형 디바이스들 및 방법들
KR101659027B1 (ko) * 2014-05-15 2016-09-23 엘지전자 주식회사 이동 단말기 및 차량 제어 장치
US9830781B2 (en) * 2014-06-13 2017-11-28 Verily Life Sciences Llc Multipurpose contacts for delivering electro-haptic feedback to a wearer
JPWO2015194381A1 (ja) * 2014-06-18 2017-04-20 コニカミノルタ株式会社 通信システム、および受信装置
WO2016036114A1 (en) * 2014-09-03 2016-03-10 Samsung Electronics Co., Ltd. Electronic device and method for measuring vital signal
US10046618B2 (en) * 2014-10-15 2018-08-14 Honda Motor Co., Ltd. System and method for vehicle control integrating environmental conditions
US9952732B2 (en) * 2014-12-10 2018-04-24 Pixart Imaging Inc. Capacitive touch device, capacitive communication device and communication system
US9389742B2 (en) * 2014-12-10 2016-07-12 Pixart Imaging Inc. Capacitive touch device, capacitive communication device and communication system
US9800292B2 (en) 2014-12-10 2017-10-24 Pixart Imaging Inc Capacitive communication system and Bluetooth pairing method
CN104811903A (zh) * 2015-03-25 2015-07-29 惠州Tcl移动通信有限公司 一种组建交流群的方法及其可穿戴设备
CN105243799B (zh) * 2015-09-30 2018-07-27 小米科技有限责任公司 安全提醒处理方法和装置
US10397355B2 (en) * 2015-10-30 2019-08-27 American University Of Beirut System and method for multi-device continuum and seamless sensing platform for context aware analytics
US9854405B2 (en) * 2015-11-10 2017-12-26 At&T Intellectual Property I, L.P. Mobile application and device feature regulation based on profile data
KR101809131B1 (ko) * 2015-11-26 2017-12-14 엘지전자 주식회사 웨어러블 디바이스 및 그것의 동작방법
KR101642697B1 (ko) * 2015-12-03 2016-08-10 양선종 차량 운전자 생체정보신호 측정 시스템 및 방법
WO2017094937A1 (ko) * 2015-12-03 2017-06-08 엘지전자 주식회사 웨어러블 디바이스 및 그것의 동작방법
WO2017100167A1 (en) * 2015-12-06 2017-06-15 Voicebox Technologies Corporation System and method of conversational adjustment based on user's cognitive state and/or situational state
US10610146B1 (en) * 2015-12-21 2020-04-07 Dp Technologies, Inc. Utilizing wearable devices in an internet of things environment
US9758095B2 (en) * 2016-01-25 2017-09-12 International Business Machines Corporation Smartwatch blackbox
US11392117B2 (en) * 2016-02-18 2022-07-19 Sony Corporation Method and device for managing interaction between a wearable device and a vehicle
US20190079657A1 (en) * 2016-03-08 2019-03-14 Futureplay Inc. Control Device For Dynamically Providing Control Interface On Basis Of Change In Position Of User, Method For Dynamically Providing Control Interface In Control Device, And Computer Readable Recording Medium With Computer Program For Executing Method Recorded Thereon
US9912798B2 (en) * 2016-03-17 2018-03-06 Sandisk Technologies Llc Wearable device with receptacle to receive an audio device and method of operating same
CN105959021A (zh) * 2016-05-31 2016-09-21 深圳市元征科技股份有限公司 一种基于可穿戴设备的车载诊断处理方法和终端
KR102236531B1 (ko) * 2016-06-17 2021-04-06 주식회사 엘지화학 스팀히트펌프를 활용한 스팀공급시스템 및 스팀공급방법.
KR101866724B1 (ko) * 2016-06-23 2018-06-15 현대자동차주식회사 웨어러블 디바이스, 그와 통신하는 차량 및 그 제어 방법
CN106227348A (zh) * 2016-07-27 2016-12-14 惠州Tcl移动通信有限公司 振动***及其振动方法、穿戴式智能设备
US9925872B1 (en) 2016-11-14 2018-03-27 Denso International America, Inc. System for monitoring driver alertness and adapting vehicle settings thereto
CN106515444A (zh) * 2016-11-15 2017-03-22 南宁市浩发科技有限公司 一种汽车酒驾检测***
CN106681189A (zh) * 2016-12-22 2017-05-17 深圳市元征科技股份有限公司 基于智能穿戴设备的车辆预警方法、智能穿戴设备及***
CN106934043B (zh) * 2017-03-16 2020-04-03 腾讯科技(深圳)有限公司 媒体文件推荐方法、装置和***
US10258295B2 (en) * 2017-05-09 2019-04-16 LifePod Solutions, Inc. Voice controlled assistance for monitoring adverse events of a user and/or coordinating emergency actions such as caregiver communication
CN106956591B (zh) * 2017-05-15 2019-02-22 深兰科技(上海)有限公司 一种用于判断驾驶人员驾驶权限的***
CN108209902B (zh) * 2017-05-25 2020-09-22 深圳市未来健身科技有限公司 运动员竞技状态评估方法及***
US10474423B2 (en) * 2017-06-14 2019-11-12 GM Global Technology Operations LLC Systems and methods for soundscape selection in autonomous vehicles
KR102395293B1 (ko) * 2017-07-04 2022-05-09 현대자동차주식회사 무선통신시스템, 차량, 스마트 장치 및 무선통신시스템의 제어방법
DE102017211931B4 (de) * 2017-07-12 2022-12-29 Volkswagen Aktiengesellschaft Verfahren zum Anpassen zumindest eines Betriebsparameters eines Kraftfahrzeugs, System zum Anpassen zumindest eines Betriebsparameters eines Kraftfahrzeugs und Kraftfahrzeug
CN110809430B (zh) * 2017-07-19 2023-07-04 松下知识产权经营株式会社 睡意推测装置以及觉醒诱导装置
US10235859B1 (en) 2017-08-17 2019-03-19 State Farm Mutual Automobile Insurance Company Systems and methods for the mitigation of drowsy or sleepy driving
GB2566101A (en) * 2017-09-05 2019-03-06 B Secur Ltd Wearable authentication device
KR102506866B1 (ko) * 2017-12-13 2023-03-08 현대자동차주식회사 차량 환경에서 선발화 안내 장치, 방법 및 시스템
KR102083466B1 (ko) * 2017-12-18 2020-03-27 정우주 음악을 추천하기 위한 장치, 이를 위한 방법 및 이 방법을 수행하는 프로그램이 기록된 컴퓨터 판독 가능한 기록매체
US10147319B1 (en) * 2017-12-22 2018-12-04 Pin-Hua CHEN Safe driving system having function of detecting heart rate variability
US10966647B2 (en) * 2018-01-23 2021-04-06 Garmin Switzerland Gmbh Drowsiness detection
US11281878B2 (en) * 2018-02-20 2022-03-22 Fresenius Medical Care Holdings, Inc. Wetness detection with biometric sensor device for use in blood treatment
CN108597183B (zh) * 2018-03-28 2020-12-29 佛山正能光电有限公司 一种疲劳警报装置
KR102606689B1 (ko) * 2018-06-14 2023-11-28 삼성전자 주식회사 전자 장치에서 생체 정보 제공 방법 및 장치
US10772533B2 (en) * 2018-07-27 2020-09-15 Walter Werzowa Adaptive audio therapy system
US11180158B1 (en) * 2018-07-31 2021-11-23 United Services Automobile Association (Usaa) Routing or driving systems and methods based on sleep pattern information
US11099647B2 (en) * 2018-08-05 2021-08-24 Pison Technology, Inc. User interface control of responsive devices
US10802598B2 (en) * 2018-08-05 2020-10-13 Pison Technology, Inc. User interface control of responsive devices
KR102533295B1 (ko) 2018-11-13 2023-05-18 현대자동차주식회사 차량 및 그 제어 방법
JP7143736B2 (ja) * 2018-11-20 2022-09-29 トヨタ自動車株式会社 運転支援装置、ウェアラブル装置、運転支援方法およびプログラム
JP7070484B2 (ja) * 2019-03-20 2022-05-18 カシオ計算機株式会社 ウェアラブル機器、電子時計、磁気センサのキャリブレーション方法及びプログラム
CN109993119A (zh) * 2019-03-31 2019-07-09 广东乐之康医疗技术有限公司 一种基于可穿戴设备的数据收集和学习方法
TWI816008B (zh) * 2019-04-03 2023-09-21 財團法人工業技術研究院 駕駛輔助系統與駕駛輔助方法
CN110083245B (zh) * 2019-04-29 2023-11-03 西藏创煌信息科技有限公司 一种动态信息处理方法、设备及计算机可读存储介质
JP7328828B2 (ja) * 2019-08-27 2023-08-17 フォルシアクラリオン・エレクトロニクス株式会社 状態推定装置、状態推定プログラムおよび状態推定方法
CN110638473A (zh) * 2019-09-10 2020-01-03 中国平安财产保险股份有限公司 疲劳驾驶判定的方法、装置、电子设备和存储介质
CN110851544A (zh) * 2019-11-12 2020-02-28 芜湖盟博科技有限公司 一种使用远程服务控制远程车辆的方法
US11199908B2 (en) 2020-01-28 2021-12-14 Pison Technology, Inc. Wrist-worn device-based inputs for an operating system
US11157086B2 (en) 2020-01-28 2021-10-26 Pison Technology, Inc. Determining a geographical location based on human gestures
JP7421949B2 (ja) * 2020-02-21 2024-01-25 本田技研工業株式会社 情報処理システムおよび情報処理方法
CN111513438A (zh) * 2020-06-08 2020-08-11 深圳迈拓数码科技有限公司 一种监控人体疲劳程度并具有提醒功能的智能健康手表
US11931689B2 (en) 2020-07-16 2024-03-19 Ventec Life Systems, Inc. System and method for concentrating gas
CA3189534A1 (en) 2020-07-16 2022-01-20 Invacare Corporation System and method for concentrating gas
KR102531414B1 (ko) * 2020-10-29 2023-05-12 리틀원주식회사 스마트 체온계 및 이를 이용한 체온 측정 방법
CN115137941B (zh) * 2022-06-21 2024-05-03 北京中科心研科技有限公司 一种基于疲劳识别模型和电刺激的应急唤醒方法及***
US11610483B1 (en) * 2022-10-18 2023-03-21 Pathfins C. Okezie Safety apparatus and method
WO2024091209A1 (en) * 2022-10-27 2024-05-02 Turkiye'nin Otomobili Girisim Grubu Sanayi Ve Ticaret Anonim Sirketi A system for suggesting a new route according to physical conditions of users
CN115662102A (zh) * 2022-12-29 2023-01-31 小米汽车科技有限公司 车辆的控制方法、装置、电子设备及存储介质
US11735042B1 (en) 2023-03-14 2023-08-22 Pathfins C. Okezie Traffic watch, monitor, and accident prevention device
US11869357B1 (en) 2023-06-14 2024-01-09 Pathfins C. Okezie Method and apparatus for expanded traffic watch

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007145225A (ja) * 2005-11-29 2007-06-14 Denso Corp 自動車用ユーザーもてなしシステム
JP2007205764A (ja) * 2006-01-31 2007-08-16 Equos Research Co Ltd 経路探索装置
CN101320266A (zh) * 2007-06-04 2008-12-10 李珉和 利用生理信号控制车载电子设备
CN101681460A (zh) * 2007-06-15 2010-03-24 奥林巴斯株式会社 控制***、程序及信息存储介质
CN101795831A (zh) * 2007-09-06 2010-08-04 奥林巴斯株式会社 机器人控制***、机器人、程序以及信息存储介质
JP2010273155A (ja) * 2009-05-22 2010-12-02 Sony Ericsson Mobilecommunications Japan Inc 携帯端末およびそれによる運転支援方法
CN103370252A (zh) * 2011-02-18 2013-10-23 本田技研工业株式会社 对驾驶员行为进行响应的***和方法
CN103948394A (zh) * 2014-04-04 2014-07-30 驻马店市金格尔电气设备有限公司 一种疲劳驾驶检测***及消除疲劳装置
CN103956028A (zh) * 2014-04-23 2014-07-30 山东大学 一种汽车多元驾驶安全防护方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4706072A (en) * 1983-11-30 1987-11-10 Aisin Seiki Kabushiki Kaisha Human condition monitoring and security controlling apparatus on a road-vehicle
US5907282A (en) * 1997-04-29 1999-05-25 Chris W. Turto Physiology monitoring sleep prevention system
JP2005034520A (ja) * 2003-07-18 2005-02-10 Tokai Rika Co Ltd 体調監視システム
KR20090022909A (ko) 2007-08-31 2009-03-04 전북대학교산학협력단 운전자 졸음 방지장치
US9427191B2 (en) * 2011-07-25 2016-08-30 Valencell, Inc. Apparatus and methods for estimating time-state physiological parameters
CN102881117B (zh) * 2012-06-15 2014-11-12 浙江吉利汽车研究院有限公司杭州分公司 一种带有驾驶员疲劳检测的手表
US10956956B2 (en) * 2012-08-17 2021-03-23 Ebay Inc. System, method, and computer readable medium for recommendations based on wearable sensors
WO2014159700A1 (en) * 2013-03-13 2014-10-02 MDMBA Consulting, LLC Lifestyle management system
US20150182113A1 (en) * 2013-12-31 2015-07-02 Aliphcom Real-time fatigue, personal effectiveness, injury risk device(s)
US9531708B2 (en) * 2014-05-30 2016-12-27 Rovi Guides, Inc. Systems and methods for using wearable technology for biometric-based recommendations
US9428034B2 (en) * 2014-07-21 2016-08-30 Ford Global Technologies, Llc Integrated vehicle cabin with driver or passengers' prior conditions and activities
US9937791B2 (en) * 2015-04-29 2018-04-10 Ashton Cameron Cofer Systems and methods for detecting and alerting a drowsy driver

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007145225A (ja) * 2005-11-29 2007-06-14 Denso Corp 自動車用ユーザーもてなしシステム
JP2007205764A (ja) * 2006-01-31 2007-08-16 Equos Research Co Ltd 経路探索装置
CN101320266A (zh) * 2007-06-04 2008-12-10 李珉和 利用生理信号控制车载电子设备
CN101681460A (zh) * 2007-06-15 2010-03-24 奥林巴斯株式会社 控制***、程序及信息存储介质
CN101795831A (zh) * 2007-09-06 2010-08-04 奥林巴斯株式会社 机器人控制***、机器人、程序以及信息存储介质
JP2010273155A (ja) * 2009-05-22 2010-12-02 Sony Ericsson Mobilecommunications Japan Inc 携帯端末およびそれによる運転支援方法
CN103370252A (zh) * 2011-02-18 2013-10-23 本田技研工业株式会社 对驾驶员行为进行响应的***和方法
CN103948394A (zh) * 2014-04-04 2014-07-30 驻马店市金格尔电气设备有限公司 一种疲劳驾驶检测***及消除疲劳装置
CN103956028A (zh) * 2014-04-23 2014-07-30 山东大学 一种汽车多元驾驶安全防护方法

Also Published As

Publication number Publication date
KR101570430B1 (ko) 2015-11-20
CN105373219A (zh) 2016-03-02
US20160039424A1 (en) 2016-02-11
EP3180222A1 (en) 2017-06-21
WO2016024752A1 (en) 2016-02-18
EP3180222A4 (en) 2018-05-02
US9809228B2 (en) 2017-11-07
EP3180222B1 (en) 2020-11-11

Similar Documents

Publication Publication Date Title
CN105373219B (zh) 可穿戴装置及其操作方法
KR101809131B1 (ko) 웨어러블 디바이스 및 그것의 동작방법
CN105015551B (zh) 驾驶员状态监测***、用于控制该***的方法及车辆
KR102080747B1 (ko) 이동 단말기 및 그것의 제어 방법
CN105015552B (zh) 驾驶员状态监测***及其控制方法
Seneviratne et al. A survey of wearable devices and challenges
EP3064129B1 (en) Wearable electronic device and method for controlling the same
US10534900B2 (en) Electronic device
KR101562591B1 (ko) 이동 단말기 및 이를 이용한 차량의 사고 발생 처리 방법
US10182756B2 (en) Mobile terminal and control method therefor
US20190083034A1 (en) Watch-type terminal and method for controlling same
CN106471860B (zh) 移动终端和用于控制其的方法
KR102314644B1 (ko) 주변 디바이스의 정보를 제공하는 시스템 및 방법
JP2015150375A (ja) 生体情報収集システム
CN106231008A (zh) 手表式终端及其控制方法
KR20160145284A (ko) 이동단말기 및 그 제어방법
KR20150016021A (ko) 이동 단말기 및 그것의 제어 방법
KR101741074B1 (ko) 차량 사고 녹화 장치 및 그것의 방법
KR20180028358A (ko) 단말기 및 그 제어 방법
KR102284594B1 (ko) 이동 단말기 및 그 제어 방법
WO2017016941A1 (en) Wearable device, method and computer program product
KR20160068390A (ko) 이동 단말기 및 그 제어 방법
KR20160012820A (ko) 이동 단말기 및 그 제어 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant