CN104144643A - 动作判定装置、动作判定***和动作判定方法 - Google Patents

动作判定装置、动作判定***和动作判定方法 Download PDF

Info

Publication number
CN104144643A
CN104144643A CN201380012221.4A CN201380012221A CN104144643A CN 104144643 A CN104144643 A CN 104144643A CN 201380012221 A CN201380012221 A CN 201380012221A CN 104144643 A CN104144643 A CN 104144643A
Authority
CN
China
Prior art keywords
peak
action
unit
sensing data
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380012221.4A
Other languages
English (en)
Inventor
千叶雄树
宫崎阳司
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Publication of CN104144643A publication Critical patent/CN104144643A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00Machine learning
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01PMEASURING LINEAR OR ANGULAR SPEED, ACCELERATION, DECELERATION, OR SHOCK; INDICATING PRESENCE, ABSENCE, OR DIRECTION, OF MOVEMENT
    • G01P13/00Indicating or recording presence, absence, or direction, of movement
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116Determining posture transitions
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1123Discriminating type of movement, e.g. walking or running
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7271Specific aspects of physiological measurement analysis
    • A61B5/7282Event detection, e.g. detecting unique waveforms indicative of a medical condition
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B2562/00Details of sensors; Constructional details of sensor housings or probes; Accessories for sensors
    • A61B2562/02Details of sensors specially adapted for in-vivo measurements
    • A61B2562/0219Inertial sensors, e.g. accelerometers, gyroscopes, tilt switches
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/0002Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network
    • A61B5/0015Remote monitoring of patients using telemetry, e.g. transmission of vital signals via a communication network characterised by features of the telemetry system
    • A61B5/0022Monitoring a patient using a global network, e.g. telephone networks, internet
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1116Determining posture transitions
    • A61B5/1117Fall detection
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/103Detecting, measuring or recording devices for testing the shape, pattern, colour, size or movement of the body or parts thereof, for diagnostic purposes
    • A61B5/11Measuring movement of the entire body or parts thereof, e.g. head or hand tremor, mobility of a limb
    • A61B5/1118Determining activity level
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/68Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient
    • A61B5/6887Arrangements of detecting, measuring or recording means, e.g. sensors, in relation to patient mounted on external non-worn devices, e.g. non-medical devices
    • A61B5/6898Portable consumer electronic devices, e.g. music players, telephones, tablet computers
    • AHUMAN NECESSITIES
    • A61MEDICAL OR VETERINARY SCIENCE; HYGIENE
    • A61BDIAGNOSIS; SURGERY; IDENTIFICATION
    • A61B5/00Measuring for diagnostic purposes; Identification of persons
    • A61B5/72Signal processing specially adapted for physiological signals or for diagnostic purposes
    • A61B5/7235Details of waveform analysis
    • A61B5/7264Classification of physiological signals or data, e.g. using neural networks, statistical classifiers, expert systems or fuzzy systems

Landscapes

  • Health & Medical Sciences (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Medical Informatics (AREA)
  • Animal Behavior & Ethology (AREA)
  • Biophysics (AREA)
  • Pathology (AREA)
  • Biomedical Technology (AREA)
  • Heart & Thoracic Surgery (AREA)
  • Molecular Biology (AREA)
  • Surgery (AREA)
  • Physiology (AREA)
  • General Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Veterinary Medicine (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Dentistry (AREA)
  • Artificial Intelligence (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Psychiatry (AREA)
  • Signal Processing (AREA)
  • Data Mining & Analysis (AREA)
  • Evolutionary Computation (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)

Abstract

提供一种动作识别设备、动作识别***和动作识别方法,通过少量计算,其使得能以少量计算识别“事件动作”。通过使用传感器数据识别用户动作的动作识别***被配置成设置有:周期性丧失检测装置,其当用户正做动作时,检测传感器数据的周期性的丧失;以及识别处理装置,其根据所检测的传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所设定的数据区间的传感器数据,识别用户的动作。

Description

动作判定装置、动作判定***和动作判定方法
技术领域
本发明涉及动作识别设备、动作识别***和动作识别方法。
背景技术
近年来,普遍实行使用各种传感器,识别用户的动作的尝试。图1A示例使用传感器的常见动作识别处理的流程。首先,从连续传感器数据的项,提取某些区间的数据(在下文中,称为“时间窗”)。接着,由所提取的时间窗数据,计算表示待识别的动作的特征的统计量(称为“特征量”)等等。此外,通过比较,校验所计算的特征量是否大于例如预先设定的阈值,并且使用模式识别法,判定动作的类型。在下文中,执行数据提取、特征量计算和动作识别的三种处理统称为“识别处理”。
图1B示例当例如使用“步行”时,从加速度传感器获得的传感器数据SD时的识别处理。从传感器数据SD提取基于开始时刻ST和结束时刻ET指定的时间窗TW的数据WD。例如,由所提取的数据WD,计算特征量F1、F2和F3。当所计算的特征量F1大于阈值a时,将该动作识别为动作A,并且当特征量F1小于阈值a时,识别为动作B。图2示例实现该识别处理的动作识别***的构造例子。
在图2中,传感器数据获取/存储单元1从传感器获取数据并且临时存储该数据。时间窗开始/结束时刻设定单元21设定作为从其提取数据的区间的时间窗的开始时刻和结束时刻。时间窗数据提取单元22提取所设定的时间窗的传感器数据。特征量计算单元23计算所提取的传感器数据的特征量。动作识别单元24基于所计算的特征量,识别动作。
专利文献1公开了以这种方式,使用传感器识别动作的例子。专利文献1公开了使用附着在人上的加速度传感器,按时间窗设定、数据提取、特征量计算和动作识别的顺序,执行识别处理。
引用清单
专利文献
[PTL1]JP-A-2011-123832
发明内容
技术问题
然而,在专利文献1中公开的方法具有当在没有检测故障的情况下,识别在约1秒至5秒的短时间中完成的,诸如“站立”或“坐”的动作时,计算量增加的问题。在下文中,将描述该原因。
首先,图3示例在识别可重复动作,诸如“行走”时,从传感器数据提取时间窗数据。图3A示例在“行走”的传感器数据SD中,一步的动作的开始SP到结束EP的范围,即,一个周期的范围。通常,待提取的时间窗需要包括感兴趣的动作的一个周期的数据,即,动作的开始到结束的数据。当一步估算为约1秒时,时间窗TW要求1秒以上的持续时间。因此,在图3B、3C和3D的例子中,将时间窗TW的持续时间设定成3秒。图3B、3C和3D示例转变的时间窗的开始时刻(定时)的三个例子(ST1,ST2和ST3)。可重复动作,诸如“行走”频繁地持续相当长时间,诸如几十秒至1分钟以上,使得可以同样地正确确定图3B、3C和3D中所示的“定时1”、“定时2”或“定时3”的任何时间窗。即,当动作持续几十秒至1分钟以上的常见动作持续时间时,即使使相邻时间窗的重复间隔,即,相邻时间窗的开始时刻(ST1、ST2和ST3)之间的间隔设定为长,检测故障发生的可能性低,并且可以正确地识别动作。
因此,特定时间窗设定方法包括例如将在指定时间窗的结束时刻ET后立即获得的数据点设定成下一时间窗的开始时刻ST来防止在所获得的时间序列数据中产生未设定时间窗TW的空白区间的方法,以及设定时间窗之间的间隔,使得作为时间窗持续时间的一半的数据区间在相邻时间窗之间重叠的方法。
接着,图4示例在识别在约1秒至5秒的短时间中完成的动作,诸如“站立”或“坐”时,从传感器数据SD提取时间窗。图4A示例“坐”动作的开始SP到结束EP的范围,即,一个周期的范围UP。在本说明书中,短时间完成的这种动作称为“事件动作”。图4B、4C和4D示例平移的时间窗的起始时间(定时)的三个例子(ST1、ST2和ST3)。即使当“事件动作”时,与诸如“行走”动作的可重复动作类似,动作的开始SP到结束EP的区间UP需要安置在如图4C所示的“定时2”的时间窗TW中。然而,在短时间中完成了“事件动作”,并且当使相邻时间窗之间的时间间隔被设定为长时,时间窗不包括一个周期以上的动作,因此,不能正确地设定如在图4B所示的“定时1”和图4D所示的“定时3”中。
因此,为在“事件动作”识别时,使动作的开始到结束安置在时间窗中,有必要使相邻时间窗之间的重复间隔设定为短,并且在每一时间窗中,重复地执行数据提取、特征量计算和动作识别的处理,如图5所示。图5示例识别“坐”事件动作的例子,并且示例在稍微不同开始时刻ST的多个时间窗1、时间窗2、时间窗3、时间窗4等等中,重复地执行识别处理。因此,频繁地执行每一时间窗的识别处理,因此,识别处理的次数增加,并且要求大的计算量。此外,当使用仅具有有限计算资源的诸如移动电话的装置执行识别处理时,存在处理要求时间,以及电池的功耗相当大的问题。
因此,本发明的目的是提供动作识别设备、动作识别***和动作识别方法,其能解决上述问题,并且能通过小的计算量识别“事件动作”。问题的解决方案
为实现上述目的,根据本发明的动作识别设备是使用传感器数据,识别用户的动作的动作识别设备,并且具有:周期性丧失检测装置,当用户正做动作时,检测传感器数据的周期性的丧失;以及识别处理装置,根据所检测的传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于该数据区间的传感器数据,识别用户的动作。
此外,根据本发明的动作识别***具有:动作识别设备;传感器数据获取/存储单元,其获得从传感器数据输出的传感器数据,并且临时存储该传感器数据;以及识别结果输出单元,其输出由识别处理单元执行的动作识别的结果。
此外,根据本发明的动作识别方法是使用传感器数据,识别用户的动作的动作识别方法,并且包括:检测当用户正做动作时,传感器数据的周期性丧失的步骤;以及根据所检测的传感器数据的周期性丧失,设定用于动作识别的数据区间,并且基于该数据区间的传感器数据,识别用户的动作的步骤。
本发明的有益效果
本发明的效果是降低识别“事件动作”的处理中的计算量。
附图说明
图1是示例常见动作识别处理的流程的视图。
图2是示例用在图1的动作识别处理中使用的动作识别***的构造的框图。
图3是示例在识别可重复动作,诸如“行走”时,时间窗开始/结束时刻和动作的开始/结束之间的关系的视图。
图4是示例在识别“事件动作”时,时间窗开始/结束时刻与动作的开始/结束之间的关系的视图。
图5是示例当在“事件动作”识别处理中,通过逐渐地平移时间窗开始时刻,重复识别处理时的说明图。
图6是示例根据本发明的第一实施例的构造的框图。
图7是示例根据本发明的第一实施例的特定处理的图。
图8是示例使用即时峰信息,预测下一个出现的峰的方法的例子。
图9是示例用于说明预测峰和实际获得的峰是否匹配的视图;
图10是示例根据本发明的第一实施例的处理内容的流程图。
图11是示例根据本发明的第二实施例的构造的框图。
图12是示例根据本发明的第二实施例,在峰间隔历史存储单元35中存储的峰间隔和峰信息的例子的视图。
图13是示例根据本发明的第二实施例的处理内容的流程图。
图14是示例根据本发明的第三实施例的构造的框图。
图15是示例根据本发明的第三实施例的说明学习处理的视图。
图16是示例根据本发明的第三实施例的处理内容的流程图。
具体实施方式
接着,将参考图6至10,详细地描述本发明的第一实施例。
图6示例根据本发明的第一实施例的动作识别***10。动作识别***10具有传感器数据获取/存储单元1、识别处理单元2、事件动作检测单元3和识别结果输出单元4。识别处理单元2具有时间窗开始/结束时刻设定单元21、时间窗数据提取单元22、特征量计算单元23和动作识别单元24。事件动作检测单元3具有峰检测单元31、峰间隔计算单元32、峰预测单元33和峰匹配判定单元34。识别处理单元2和事件动作检测单元3可以构成动作识别设备8。事件动作检测单元3也称为周期性丧失检测装置。
传感器数据获取/存储单元1从各个传感器获得表示用户的动作的传感器数据,并且临时存储该传感器数据。峰检测单元31检测由传感器数据获取/存储单元1获得的传感器数据的峰形状的至少顶点的时刻(在下文中,称为峰时刻)。峰间隔计算单元32计算由峰检测单元31检测的峰时刻之间的间隔。峰预测单元33由峰间隔计算单元32计算的峰间隔的值和所获得的最新峰的时刻,预测下一次出现的峰时刻。峰匹配判定单元34将由峰检测单元31检测的峰时刻与由峰预测单元33预测的峰时刻比较,并且判定时刻之间的间隙是否在预定的特定持续时间中。
时间窗开始/结束时刻设定单元21设定时间窗开始时刻和结束时刻,来使仅当事件动作检测单元3检测到出现“事件动作”时的“事件动作”出现的时刻位于该时间窗中。时间窗数据提取单元22从由该时间窗开始/结束时刻设定单元21设定的时间窗开始时刻和结束时刻,截取具有预定持续时间的时间窗的传感器数据。特征量计算单元23使用由时间窗数据提取单元22截取的时间窗数据,计算表示识别目标动作的特征的特征量。特征量计算单元23使用由特征量计算单元23计算的特征量,判定是否执行估计目标动作。
当存在多种识别目标动作时,识别处理单元2可以被配置成每一目标动作单独地配置。当例如识别两种动作“行走”动作和“坐下”动作时,还可以利用包括两种识别处理单元“行走”识别处理单元和“坐”识别处理单元的构造。
当以这种方式,针对多种动作执行动作识别时,将每一动作预先识别为属于“事件动作”的动作或不属于“事件动作”的动作,并且存储在每一动作的识别处理单元中。当例如识别四种动作“行走”、“跑”、“站立”和“坐下”时,“行走”不被识别为“事件动作”,“跑”不被识别为“事件动作”,“站立”被识别为“事件动作”并且“坐下”被识别为“事件动作”,并且这些动作被存储在识别处理单元2中。
此外,仅当事件动作检测单元3检测“事件动作”出现时,“事件动作”的识别处理单元执行识别处理。同时,在如图2所示的相关技术中使用的识别处理可以被执行为识别不是“事件动作”的动作的处理,而不使用事件动作检测单元3。
动作识别***10是例如用户的移动电话,尽管作为物理构造,动作识别***10不限于此。在这种情况下,当例如用户拥有安装加速度传感器的移动电话时,移动电话内部的动作识别***10的传感器数据获取/存储单元1获取由加速度传感器生成的传感器数据。使用所获得的加速度传感器数据,在事件动作检测单元3和识别处理单元2中执行每一处理,并且在作为移动装置的显示装置的识别结果输出单元4上,显示识别处理单元2的动作识别单元24获得的识别结果。
不是“事件动作”的“行走”动作和是“事件动作”的“坐”动作将基于处理流的每一要素被描述为根据本发明的第一实施例的具体例子。将描述传感器数据获取/存储单元1实时地获取作为传感器数据的例子的加速度数据,并且顺序地处理所获得的加速度数据的情况。
首先,当用户正做动作时,传感器数据获取/存储单元1获取从传感器输出的传感器数据。此外,临时存储对应于预定持续时间,诸如约几秒至几十秒的短时间的传感器数据。传感器数据获取/存储单元1将所获得的传感器数据输入到事件动作检测单元3的峰检测单元31。当例如在安装加速度传感器的移动电话终端中提供传感器数据获取/存储单元1时,由于用户携带移动电话,当用户正做动作时,可以获得加速度传感器数据。
峰检测单元31检测从传感器数据获取/存储单元1获得的传感器数据的峰。峰是指当按时间顺序读取传感器数据的值时,至少局部最大值的数据点或局部最小值的数据点。峰检测单元31将包括所检测的峰的峰时刻的“峰信息”供应到峰间隔计算单元32和峰匹配判定单元34。
“峰信息”包括至少峰的数据点的时刻信息。其他峰信息包括例如作为峰的数据点的数据的值和作为峰的数据点和该数据点前后的数据点之间的倾斜度的值。
每次获得预定时间的传感器数据时,由峰检测单元31重复地执行峰检测处理,并且每次获得新的峰信息时,将新的峰信息供应到峰间隔计算单元32和峰匹配判定单元34。此外,当在所获得的传感器数据中没有峰时,峰检测单元31不将峰信息供应到峰间隔计算单元32和峰匹配判定单元34。
将参考图7A来继续说明。图7A示意性地示例从附着到用户的加速度传感器获得的“行走”动作的传感器数据。如在图7A中所示,将描述获得从指定时刻到时刻0秒的传感器数据的情形。峰检测单元31检测在时刻-0.5秒时的峰P0,并且将所获得的峰信息的信息作为峰信息供应到峰间隔计算单元32和峰匹配判定单元34。此外,在获得指定时刻到时刻0秒的传感器数据前,在时刻-1.5秒时已经检测到峰P-1,并且已经将峰P-1的峰信息供应到峰间隔计算单元32。
此外,尽管如上所述,峰的例子是作为局部最大的数据点或局部最小的数据点,待检测的峰不限于此。峰是例如在特定数据区间中,作为局部最大和最大值的点或局部最小和作为特定范围中的值的点。此外,当在特定数据区间中检测到满足条件的多个峰时,通过使用仅将具有所检测的峰中的最高值的峰视作峰的规则,可以仅检测表示动作的周期性的峰。
峰间隔计算单元32计算时间最新峰和与最新峰相比的第二最新峰之间的时间间隔,以及将所计算的峰间隔的值和最新峰的峰信息供应到峰预测单元33。
将描述图7A的例子,并且峰间隔计算单元32计算最新峰P0(时刻-0.5秒)和与最新峰相比的第二最新峰P-1(时刻-1.5秒)之间的时间间隔PI0,并且获得(-0.5秒)-(-1.5秒)=1秒的结果。峰间隔计算单元32将所计算的峰间隔的1秒的值和作为峰P0的峰信息的-0.5秒的时刻信息供应到峰预测单元33。
峰预测单元33使用从峰间隔计算单元32获得的峰间隔和时间最新峰信息,预测接下来出现的峰。接着,将使用图7和8,描述预测峰的方法的例子。
图7A和8示意性地示例从附着到用户的加速度传感器获得的“行走”动作的传感器数据,如上所述。在“行走”动作的情况下,指定峰和下一峰之间的区间对应于“行走”的一步,即,动作的一个周期。当“行走”动作以特定步调周期性地继续时,峰间隔被认为是固定的。因此,如在图7A中所示,在最新峰P0出现后,在即时峰间隔PI0通过后,预测出现预测峰Pe1
如图8A所示,该峰间隔PI0是峰P0的时刻t0与峰P-1的时刻t-1之间的差,并且在上述情况下,为1秒。因此,如图8B所示,认为下一峰出现在通过使即时峰间隔PI0的值(1秒)与最新峰P0的时刻t0(-0.5秒)相加获得的时刻te1(0.5秒)。峰预测单元33将预测峰信息供应到峰匹配判定单元34。“预测峰信息”至少包括待预测的峰的时刻te1的值(0.5秒)。
峰匹配判定单元34将从峰预测单元33获得的预测峰信息与通过峰检测单元31从传感器数据获得的峰信息进行比较,并且校验两个峰信息是否匹配。校验预测峰和新时间的峰(称为新峰)是否代替通过峰间隔计算单元32和峰预测单元33从峰检测单元31获得的峰。
同时,将使用图9,描述判定峰是否匹配的方法。图9A示例在最新峰P0(时刻t0)之后,将要出现的峰Pe1(时刻te1)。图9B示例预测峰Pe1和新峰P1匹配。图9C示例预测峰和新峰不匹配。
假定例如仅将峰的出现时刻用作峰信息,当从峰预测单元获得的预定峰Pe1的出现时刻te1和从峰检测单元31获得的新峰P1的出现时刻t1小于预定值(图9B)时,识别预测峰和新峰匹配。当峰匹配时,峰匹配判定单元34将峰匹配的识别结果,即,周期动作继续的识别结果、预测峰信息和新峰信息供应到时间窗开始/结束时刻设定单元21。
此外,当峰实际上不是出现在预测峰的时刻te1(图9C)时,并且更具体地说,从峰预测单元33获得的预测峰的出现时刻te1和从峰检测单元31获得的新峰的出现时刻t1之间的差大于预定值时,识别预测峰和新峰不匹配。
当峰不匹配时,峰匹配判定单元34将峰不匹配的识别结果,即,周期动作中途停止并且“事件动作”发生的识别结果、预测峰信息和新峰信息供应到时间窗开始/结束时刻设定单元21。
此外,即使当峰检测单元31检测由峰间隔计算单元32和峰预测单元33使用的峰,然后在预定持续时间以上,未检测新峰时,峰不匹配的识别结果和预测峰信息同样可以供应到时间窗开始/结束时刻设定单元。
将参考图7B,描述峰不匹配时的情形。图7B示例传感器数据获取/存储单元1获得时间0秒到时刻1秒的传感器数据,并且峰检测单元31处理时刻0秒到时刻1秒的加速度数据,结果,没有检测到峰。在预测峰Pe1的时刻0.5秒实际上没有峰,因此,识别预测峰和新峰不匹配。因此,“事件动作”发生的识别结果和作为预测峰信息的0.5秒的时刻信息被供应到时间窗开始/结束时刻设定单元21。
时间窗开始/结束时刻设定单元21根据从峰匹配判定单元34提供的识别结果,设定时间窗开始时刻和时间窗结束时刻。
更具体地说,当峰匹配判定单元34判定“事件动作”没有发生时,时间窗开始/结束时刻设定单元21不设定与“事件动作”有关的时间窗,然后,识别处理单元21也不执行后续的“事件动作”识别处理。
此外,当峰匹配判定单元34判定“事件动作”发生时,设定“事件动作”的时间窗开始时刻和结束时刻并且执行识别处理单元2中的后续识别处理。
当多个动作是识别目标时,可以采用定制单独的识别处理单元2并且进行识别的构造。关于这一点,每一识别处理单元2预先存储识别目标动作是否是“事件动作”。当例如“行走”识别处理单元2a和“站立”识别处理单元2b用作识别处理单元2时,“行走”识别处理单元2a预先存储动作不是“事件动作”,并且“站立”识别处理单元2b预先存储动作是“事件动作”来根据峰匹配判定单元34的识别结果,判定是否执行设定时间窗开始/结束时刻的处理。
同时,将描述具体时间窗设定方法。首先,每一识别目标动作地预先设定时间窗持续时间。通常,作为动作的一个周期或动作的开始到结束的时间窗持续时间的数据需要包括在每一时间窗中。
例如,将描述判定用来识别“行走”的时间窗持续时间的情形。在这种情况下,例如,能将向前移动一步的动作视作“行走”动作的一个周期。从实施实验的结果,将做出一步的动作所需的时间估算为最多约1秒,因此,能将时间窗持续时间确定为1秒。
类似地,当考虑用来将“坐”动作识别为“事件动作”的例子的时间窗持续时间时,由实施的实验的结果,将做出“坐”动作所需的时间估算为最多约2秒,因此,能将时间窗持续时间判定为2秒。
接着,将描述“事件动作”的时间窗开始/结束时刻的具体设定方法。设定时间窗开始时刻和结束时刻的方法包括例如设定开始时刻和结束时刻来将由峰预测单元33预测的峰时刻设定为时间窗开始时刻的方法,或设定开始时刻和结束时刻来将由峰预测单元33预测的峰时刻设定为时间窗中心时刻的方法。
另一方法是当在不同于由峰预测单元33预测的峰时刻的时间检测到新峰时,将检测的新峰时刻设定为时间窗结束时间。当新峰时刻设定为时间窗结束时刻时,将从每一感兴趣的动作的设定时间窗结束时刻跟踪预定时间窗持续时间得到的时刻设定为时间窗开始时刻。
类似地,例如,将由峰检测单元31检测的新峰的时刻设定为“事件动作”的时间窗开始时刻的方法是可行的。
设定多个时间窗的方法也是可行的。即,根据上述方法,设定时间窗,并且仅在所设定的时间窗前或后的特定区间中设定如图5所示通过短时间地平移开始和结束时刻设定的多个时间窗,并且每一时间窗执行识别处理的方法也是可行的。关于这一点,将通过设定在前和在后区间来平移时间窗的预定持续时间用作总共6秒的区间的方法是可行的,该总共6秒的区间是基于所设定的时间窗中心时刻的3秒的在前和在后区间。
设定平移时间窗的区间的另一方法可以是:由于对每一待识别的动作,时间窗持续时间不同,因此例如当时间窗持续时间为w秒时,通过将区间设定为基于所设定的时间窗中心时刻的、w秒的在前和在后区间的总共2w秒的区间,来单独地设定每一动作平移时间窗的区间的方法。该时间窗开始/结束时刻设定单元21将每一动作的时间窗开始时刻和结束时刻的信息供应到时间窗数据提取单元22。
接着,将参考图7C,具体地描述识别“坐”动作。如上所述,将描述使用设定开始时刻和结束时刻来将“坐”时间窗持续时间设定为2秒,并且将由峰预测单元22预测的峰时刻设定为时间窗的开始时刻的方法。时间窗开始/结束时刻设定单元21从峰匹配判定单元34获得预测峰Pe1的时刻0.5秒的信息,作为预测峰信息,然后,设定其时间窗开始点为预测峰时刻的0.5秒的2秒持续时间的时间窗TW。
时间窗数据提取单元22根据从时间窗开始/结束时刻设定单元21获得的每一动作的时间窗开始时刻和结束时刻,从临时存储在传感器数据获取/存储单元1中的传感器数据截取传感器数据。时间窗数据提取单元22将所截取的传感器数据供应到特征量计算单元23。
特征量计算单元23使用由时间窗数据提取单元22获得的传感器数据,计算特征化每一识别目标动作的动作的特征量。将特征量认为是例如各种统计量,诸如时间窗的传感器数据的平均值或方差值、最大值或最小值。特征量计算单元23将所获得的特征量供应到动作识别单元24。
动作识别单元24使用从特征量计算单元23获得的特征量,设定时间窗时的动作。当例如将时间窗中的方差值用作特征量来识别“行走”动作时,使用当方差值小于4000[mG2]时,判定该动作为“不是行走”,并且当方差值为4000[mG2]或更高时,判定该动作为“行走”的规则,执行动作识别。将由上述处理获得的动作识别结果显示在例如作为识别结果输出单元4的移动电话的显示装置上。
时间窗数据提取单元22、特征量计算单元23和动作识别单元24能使用相关技术的方法,并且能共同地用于“事件动作”和“除事件动作以外的”动作。
此外,尽管上面描述了峰预测单元33仅使用峰的时间信息,仅预测接下来出现的峰的时刻,但也可以执行将作为峰的数据点的值的程度用作峰信息或作为峰的数据点与在前和在后数据点的倾斜度的值,预测更正确峰的处理。当例如除时刻外,还将值的程度用作峰信息时,预测接下来出现的峰的时刻和将从峰间隔计算单元32获得的峰的值作为接下来出现的峰的值的预测值供应到峰匹配判定单元34的方法是可行的。
此外,预测峰的另一方法也可以是预测具有特定持续时间的时刻,而不统一地判定峰出现的时刻的方法。更具体地说,当例如由峰间隔计算单元32计算的峰间隔为PI0(秒)时,预测峰的出现时刻为中心时刻,在该时刻之前和之后的PI0/2(秒)的持续时间的区间被设定为预测峰出现区间。峰匹配判定单元34根据在所预测的峰出现区间中,是否存在从峰检测单元31获得的新峰,判定峰是否匹配。由此,峰匹配判定单元34用来判定在具有特定持续时间的预测峰出现区间中峰是否匹配的方法不限于上述方法。
此外,例如,在预测峰出现区间中假定高斯分布,并且基于高斯分布的中心,根据在诸如整个分布的30%以下的预定范围中是否分布了从峰检测单元31获得的新峰,来判定峰是否匹配的方法是可行的。此外,用这种方式,预测具有特定持续时间的峰的方法不仅可用于持续时间,而且可用于另一峰信息的预测,诸如作为峰的数据点的值的程度。
除上文外,尽管上文已经描述了取决于是否检测到“事件动作”出现判定是否执行“事件动作”识别处理的情形,但相同的方法可应用于除“事件动作”外的动作。即,当事件动作检测单元3判定“事件动作”不会出现时,执行识别不是“事件动作”的动作的处理,并且当事件动作检测单元3判定“事件动作”发生时,不执行识别不是“事件动作”的动作的处理的规则也可应用于不识别“事件动作”的动作识别处理单元。
在下文中,将描述根据本发明的第一实施例的物理构造。
尽管通过上述例子,已经描述了安装加速度传感器的用户的移动电话的构造具有整个动作识别***10,物理构造不限于此。另一可能构造也可以是例如在移动电话中,仅提供图6所示的构造的传感器数据获取/存储单元1,并且事件动作检测单元3和识别处理单元2是通过与移动电话通信执行动作识别的外部服务器设备或用户的个人电脑的构造。关于这一点,传感器数据获取/存储单元1具有将传感器数据传送到外部服务器设备的通信功能。关于这一点,可以实时地传送传感器数据来执行动作识别处理,或可以在服务器设备中提供存储器装置,并且可以当获取到一定量的传感器数据时集中地执行识别处理。
此外,在移动电话中提供存储器装置,在完成数据测量后,将传感器数据集中地传送到服务器设备,通过有线连接,将数据移动到个人电脑设备并且使用该数据的方法也是可行的。
此外,传感器不限于安装在移动电话上的加速度传感器,并且可以在一些情况下,是使用带子,附着到用户的身体的专用加速度传感器设备。
上述物理构造同样地可应用于下述的本发明的其他实施例。
接着,将参考图6至10,描述根据本发明的第一实施例的操作。
(步骤S1)传感器数据获取/存储单元1获取用户动作的传感器数据,并且临时存储该传感器数据。
(步骤S2)峰检测单元31检测从传感器数据获取/存储单元1获得的传感器数据中的峰。当传感器数据中有峰时(步骤S3为“是”),将峰信息供应到峰间隔计算单元32和峰匹配判定单元34。每次获得特定时刻的传感器数据时,重复地执行检测处理,并且每次获得新峰信息时,将新的峰信息供应到峰间隔计算单元32和峰匹配判定单元34。此外,当所获得的传感器数据中没有峰时(步骤S3为“否”),峰检测单元31不将峰信息供应到峰间隔计算单元32和峰匹配判定单元34并且操作返回到步骤S1。
(步骤S4)每次峰检测单元31获得新峰信息时,峰间隔计算单元32从峰检测单元31接收峰信息。峰间隔计算单元32使用所供应的峰信息,计算时间上最新的峰和与最新峰相比时间上第二最新峰之间的时间间隔,并且将所计算的峰间隔的值和最新峰的“峰信息”供应到峰预测单元33。
(步骤S5)峰预测单元33预测接下来出现的峰,并且将“预测的峰信息”供应到峰匹配判定单元34。
(步骤S6)峰匹配判定单元34将从峰预测单元33获得的预测峰信息与从峰检测单元31获得的新峰的峰信息进行比较,并且校验两个峰信息是否匹配。此外,当从峰预测单元33获得“预测峰信息”,并且峰检测单元31检测到新峰后,或当峰检测单元31在预定持续时间内未检测到新峰时的状态继续时,峰匹配判定单元34执行判定峰信息是否匹配的处理。峰匹配判定单元34将关于峰是否匹配的识别结果、预测的峰信息和从峰检测单元31获得的最新峰信息供应到识别处理单元2的时间窗开始/结束时刻设定单元21。
(步骤S8)时间窗开始/结束时刻设定单元21根据从峰匹配判定单元34供应的识别结果(步骤S7),设定每一识别目标动作的时间窗开始时刻和时间窗结束时刻,并且将所设定的时刻信息供应到时间窗数据提取单元22。
(步骤S9)时间窗数据提取单元22根据每一识别动作的时间窗开始时刻和结束时刻,从临时存储在传感器数据获取/存储单元1中的传感器数据截取传感器数据。时间窗数据提取单元22将所提取的传感器数据供应到特征量计算单元23。
(步骤S10)特征量计算单元23使用从时间窗数据提取单元22获得的传感器数据,计算特征化每一识别动作的动作的特征量。特征量计算单元23将所获得的特征量供应到动作识别单元24。
(步骤S11)动作识别单元24使用从特征量计算单元23获得的特征量,识别所设定的时间窗中的动作。
(步骤S12)识别结果输出单元4将识别结果输出到例如显示装置。
接着,将描述根据本发明的第一实施例的效果。
本发明的第一实施例提供减少识别事件动作的处理的计算量的效果。原因如下。聚焦在当“事件动作”发生时,丧失传感器数据的周期性,假定仅当丧失周期性时发生“事件动作”,来执行识别“事件动作”的处理。更具体地说,当预测峰出现时刻和实际上出现的峰时刻之间有间隙时,识别动作的周期性丧失,即,“事件动作”发生。此外,执行将时间窗仅设定在“事件动作”非常可能发生的时刻附近并且计算特征量的识别处理。因此,不必执行设定时间窗和执行识别处理,然后通过将时间窗开始时刻平移短时间来设定新的时间窗,并且相对于所有获得的传感器数据项再次执行识别处理的循环。结果,可以降低识别处理的执行的次数,并且减少识别“事件动作”的处理的整个计算量。
接下来,将参考图11至13,详细地描述本发明的第二实施例。
鉴于示例根据第一实施例的构造的图6和图11,本发明的第二实施例不同于第一实施例之处在于包括峰间隔历史存储单元35。
根据第一实施例,峰间隔计算单元32使用从峰检测单元31获得的最新时刻的峰信息和第二最新时刻的峰信息,计算峰间隔,并且峰预测单元33使用通过这种方式获得的最新峰间隔的值,预测接下来出现的峰。根据第二实施例,将由峰间隔计算单元32计算的峰间隔的值和最新峰的峰信息供应到峰间隔历史存储单元35。
峰间隔历史存储单元35存储从峰间隔计算单元32获得的、诸如过去5分钟的预定时刻的过去300个峰的预定数量的峰间隔的值以及所检测的过去峰信息。将所存储的峰间隔的值和峰信息供应到峰预测单元33。将供应到峰预测单元33的历史信息判定为过去5秒的历史信息或五个过去的历史信息。
图12示例在峰间隔历史存储单元35中存储的峰信息的例子。图12示例峰间隔历史存储单元35存储300条过去峰信息和300个过去峰间隔的值。峰间隔历史存储单元35将五个最新峰间隔PI0至PI4的值和5条最新峰信息P0至P-4供应到峰预测单元33。
峰预测单元33由从峰间隔历史存储单元35获得的峰间隔的值和特定持续时间的峰信息,预测接下来出现的峰。
预测峰的方法是例如将通过使作为在峰间隔历史存储单元35中存储的过去峰间隔的平均值的PIave的值与最新峰P0的时刻t0相加,而不是如图8B所示,使作为即时峰间隔的值PI0与最新峰P0的时刻t0相加获得的值设定为预测峰的出现时刻的方法。
将描述作为图12中所示的峰历史信息的五个最新峰间隔的值和五个最新峰信息的具体例子的情形。在这点上,五个过去峰间隔的值的平均值为1.06秒,并且通过使最新峰P0与时刻0.0秒相加获得的时刻1.06秒是预测峰时刻。
另一方法是例如计算峰间隔历史存储单元35中存储的峰间隔的值的最大值和最小值,并且根据将所存储的峰间隔的值分配到通过使最大值和最小值之间的区间10等分获得的区间的结果,将属于每一区间的峰间隔数为最高的区间用作峰间隔的方法。
更具体地说,在峰间隔历史存储单元35中存储的峰间隔按较早时间的顺序,为PI-n,PI-(n-1),…,PI-1和PI0,以及最小值的峰间隔为0.7秒,以及最大值的峰间隔为1.7秒。同时,10个区间包括0.7秒以上以及0.8秒以下的区间,以及1.6秒以上并且1.7秒以下的区间,并且将每一峰间隔PI-n,PI-(n-1),…,PI-1和PI0分配到每一峰间隔所属的每一区间。因此,当例如属于1.1秒以上并且1.2秒以下的区间的峰间隔数为最大时,将通过该区间与峰P0的时刻0秒相加获得的时刻1.1秒到时刻1.2秒的区间设定为预测峰出现区间的方法是可行的。
事件动作检测单元3和识别处理单元2的在后操作与本发明的第一实施例相同,将不再描述。
此外,如在本发明的第一实施例中所述,在峰预测单元33,作为峰信息,不仅使用峰的时刻信息,而且使用作为峰的数据点的值的程度以及作为峰的数据点和在前及在后数据点之间的倾斜度的值,预测更正确峰的方法是可行的。此外,预测具有特定持续时间的时刻,而不一律地判定峰出现的时刻的方法也是可行的。此外,统计预测方法,诸如最小平方法或曲线内插也可用于峰信息的历史和峰间隔的历史。
接着,将参考图11至13,详细地描述根据本发明的第二实施例的操作。
(步骤S1)传感器数据获取/存储单元1获取用户动作的传感器数据,并且临时存储传感器数据。
(步骤S2)峰检测单元31检测从传感器数据获取/存储单元1获得的传感器数据中的峰。当存在峰时(步骤S3为是),将峰信息供应到峰间隔计算单元32和峰匹配判定单元34。每次获得特定时刻的传感器数据时,重复地执行检测处理,并且每次获得新的峰信息时,将新的峰信息供应到峰间隔计算单元32和峰匹配判定单元34。此外,当在所获得的传感器数据中没有峰时(步骤S3为“否”),峰检测单元31不将峰信息供应到峰间隔计算单元32和峰匹配判定单元34,并且操作返回到步骤S1。
(步骤S4)每次峰检测单元31获得新的峰信息时,峰间隔计算单元32从峰检测单元31接收峰信息。峰间隔计算单元32使用所提供的峰信息,计算时间上最新峰和与最新峰相比时间上第二最新峰之间的时间间隔,并且将所计算的峰间隔值和最新峰的“峰信息”供应到峰间隔历史存储单元35。
(步骤S13)峰间隔历史存储单元35存储从峰间隔计算单元32获得的峰间隔的值和时间最新峰的峰信息。
(步骤S5)峰预测单元33使用从峰间隔历史存储单元35获得的过去峰间隔的值和过去峰信息的历史,预测接下来出现的峰,并且将“所预测的峰信息”供应到峰匹配判定单元34。
(步骤S6)峰匹配判定单元34从峰预测单元33获得预测的峰信息。当峰检测单元31检测新时刻的峰,代替由峰间隔计算单元32和峰预测单元33使用的峰信息时,从峰检测单元31获得所检测的峰信息。用这种方式,比较从峰预测单元33获得的预测峰信息和从峰检测单元31获得的新峰信息来校验两种峰信息是否匹配。
当从峰预测单元33获得预测的峰信息后,峰检测单元31检测新时刻的峰,或在预定持续时间或更长内峰检测单元31未检测到新峰的状态持续时,峰匹配判定单元34执行确定峰信息是否匹配的处理。峰匹配判定单元34将有关峰是否匹配的识别结果、预测的峰信息和从峰检测单元31获得的新峰信息供应到时间窗开始/结束时刻设定单元21。
(步骤S8)时间窗开始/结束时刻设定单元21根据从峰匹配判定单元34供应的识别结果(步骤S7),设定每一识别目标动作的时间窗开始时刻和时间窗结束时刻,并且将所设定的时刻信息供应到时间窗数据提取单元22。
(步骤S9)时间窗数据提取单元22根据每一识别动作的时间窗开始时刻和结束时刻,从临时存储在传感器数据获取/存储单元1中的传感器数据截取传感器数据。时间窗数据提取单元22将所提取的传感器数据供应到特征量计算单元23。
(步骤S10)特征量计算单元23使用从时间窗数据提取单元22获得的传感器数据,计算特征化每一识别动作的动作的特征量。特征量计算单元23将所获得的特征量供应到动作识别单元24。
(步骤S11)动作识别单元24使用从特征量计算单元23获得的特征量,识别所设定的时间窗中的动作。
(步骤S12)识别结果输出单元4将识别结果输出到例如显示装置。
接着,将描述根据本发明的第二实施例的效果。
根据本发明的第一实施例,峰预测单元33使用最新峰的出现时刻的峰信息和第二最新时刻的峰信息计算的峰间隔的值,预测接下来出现的峰。同时,根据本发明的第二实施例,峰预测单元33使用在峰间隔历史存储单元35中存储的特定时刻的过去峰间隔的值和过去峰信息,预测接下来出现的峰。由此,可以通过使用过去特定时刻的历史,更精确地预测接下来出现的峰。因此,与本发明的第一实施例相比,可以更适当地设定“事件动作”识别处理的时间窗开始/结束时刻和精确地执行“事件动作”识别处理。
接着,将参考图14至16,描述本发明的第三实施例。
图14示例根据本发明的第三实施例的构造。与图6中所示的本发明的第一实施例相比,不同之处在于增加了峰间隔历史存储单元5、峰学习单元6和校正动作输入单元7。
峰间隔历史存储单元5存储从峰间隔计算单元32获得的诸如过去24小时或过去一周的预定时间所检测的峰间隔的值和过去峰信息。
校正动作输入单元7将由用户实际执行的动作的类型输入到峰学习单元6。输入到峰学习单元6的信息至少包括执行动作时的时刻信息和动作的类型信息。至少包括执行动作时的时刻信息和动作的类型信息的信息在本说明书中称为“校正动作信息”。输入方法是例如通过计算机设备或移动电话,由用户输入过去的指定时刻和在该时刻执行的动作的类型的组合的方法。
峰学习单元6使用在峰间隔历史存储单元5中存储的特定时刻的峰间隔的值和峰信息以及从校正动作输入单元7获得的“校正动作信息”,学习峰信息或峰间隔。根据学习结果,峰学习单元6将用于峰预测的参数供应到峰预测单元33。所提供的参数是例如由峰预测单元33设定的预测峰出现区间的值。
使用图15,描述通过学习,改变峰预测方法。如在图15A中所示,将描述在过去的指定时刻,作为“事件动作”的“坐”动作发生的校正动作信息发生的情形。同时,当“坐”动作发生的时刻为0秒时,峰学习单元6从峰间隔历史存储单元5获得在包括时刻0秒的过去5分钟的预定区间中的峰间隔的值,以及峰信息。由此,峰学习单元6判定“事件动作”是否发生在获得峰间隔和峰信息的时刻0秒附近的区间中。
判定“事件动作”发生的方法采用与峰预测单元33和峰匹配判定单元34相同的处理,并且从峰间隔历史存储单元5获得峰信息。将描述如在本发明的第一实施例中所述,作为使用具有持续时间的预测峰出现区间,判定峰是否匹配的例子的情形。
当例如不包括最新峰P0的时刻t0秒时,正好在时刻0秒之前的峰间隔PIi为PIi=1秒,并且预测峰的出现时刻te为时刻te=0秒,基于时刻te=0秒,包括在时刻te=0秒之前和之后的PIi/2=0.5秒持续时间的区间是预测峰出现区间。
此外,根据从峰间隔历史存储单元5获得的新峰是否在该预测峰出现区间中,判定峰是否匹配。结果,当如在校正信息中,判定在时刻te=0秒,“事件动作”发生时,峰学习单元6不执行学习并且结束处理。
同时,与校正动作信息不同,当判定在时刻te=0秒,“事件动作”未发生时,即,当在预测峰出现区间,实际检测到峰时,更必要地设定预测峰出现区间。在这种情况下,如图15C所示,例如,作为比在前和在后PIi/2=0.5秒短的常规预测峰出现区间,在区间前后的PIi/3=0.3秒是预测峰出现区间。峰学习单元6将用来预测以这种方式获得的新峰的出现区间持续时间的值供应到峰预测单元33。
此外,即使当诸如“行走”的不是“事件动作”的动作的信息作为校正动作信息时,同样的学习方法是适用的。当例如获得在时刻t=0秒,执行“行走”动作的校正动作信息时,与上述方法类似,在时刻t=0秒附近的区间中,判定“事件动作”的发生。因此,当如由校正动作信息所示,判定约在时刻t=0秒附近,“事件动作”未发生时,峰学习单元6不执行学习并且处理结束。
同时,与校正动作信息不同,当判定“事件动作”发生时,更有必要设置短的预测峰出现区间。作为比在前和在后PIi/2(秒)长的常规区间的区间的前后PIi×(2/3)(秒)是预测峰出现区间。
此外,上述方法,以及此外,新设定峰预测方法也可以是校验是否可以正确地判定“事件动作”的出现的方法。即,根据如上所述相同的方法,学习时刻t的校正动作信息,并且在获得新峰预测的参数的值后,在同一时刻t,使用从校正动作信息获得的新峰预测方法,再次执行学习。由此,通过重复学习处理直到如由校正动作信息所示,可以判定“事件动作”发生,可以更精确地设定预测峰出现区间。
此外,即使当重复学习处理时,在一些情况下,如由校正动作信息所示,不能判定“事件动作”的出现,因此,可以另外提供将上限设定成学习处理的重复次数,并且当学习处理的次数达到上限时结束学习处理的规则。
此外,当通过学习,改变预测峰出现区间时,此外,如在本发明的第一实施例中所述,当例如峰前后的峰的值和倾斜度的信息被用于峰预测时,能根据相同的方法执行学习。
此外,尽管上文已经描述了用户将时刻t指定为校正动作信息,“事件动作”的出现时间实际上短,并且在一些情况下,依赖于用户记忆由用户指定的校正动作的出现时刻与“事件动作”实际发生的时刻不一定匹配。因此,峰间隔历史存储单元5可以将诸如指定时刻t前后的5分钟的具有预定持续时间的区间的峰间隔以及峰信息供应到峰学习单元6,来根据如由该区间中的校正动作信息所示判定是否出现“事件动作”,来执行学习处理。
峰预测单元33使用从峰学习单元6获得并且用来预测新峰的参数预测峰。
在下文中,将描述根据本发明的第三实施例的物理构造。可能构造是例如,校正动作输入单元7是用户的移动电话,并且峰间隔历史存储单元5和峰学习单元6是外部服务器设备。此外,物理构造不限于此,还可以是例如,校正动作输入单元7、峰间隔历史存储单元5和峰学习单元6是外部计算机设备,使用由用户通过计算机设备输入的校正动作信息在计算机设备内部执行学习处理,并且将新获得的峰预测方法通过计算机设备传送到移动电话来更新安装在移动电话上的事件动作检测单元3的峰预测单元33的预测方法的构造。
接着,将参考图14和16,详细地描述根据本发明的第三实施例的操作。
图16的步骤S1至S12所示的步骤是与根据本发明的第一实施例的操作所述的步骤S1至S12相同的操作,因此,将不再描述。
(步骤S13)峰间隔历史存储单元5存储从峰间隔计算单元32获得的峰间隔的值和时间最新峰的峰信息。
(步骤S14)校正动作输入单元7将包括由用户实际执行的动作的类型和该动作的时间信息的校正动作信息输入到峰学习单元6。
(步骤S15)峰学习单元6使用在峰间隔历史存储单元5中存储的特定时刻的峰间隔的值和峰信息以及从校正动作输入单元7获得的校正动作信息,学习峰间隔的倾斜度。将通过学习获得的新峰预测方法供应到峰预测单元33。
通过在步骤S14中所述的校正动作信息的输入,触发步骤S15中所述的学习处理。关于这一点,步骤S14和步骤S15不需要同时执行,在如步骤S14所述,输入校正动作信息后,如在步骤S15中所述,每天一次在预定时刻执行学习处理并且将所获得的峰预测方法供应到峰预测单元33的方法是可行的。
接着,将描述根据本发明的第三实施例的效果。
当在本发明的第一实施例中,基于预定规则,峰预测单元33预测接下来出现的峰时,在本发明的第三实施例中,峰学习单元6使用校正动作信息执行学习,以及改变峰预测和峰匹配方法。由此,方法被改变成使用校正动作信息,更精确地检测“事件动作”的方法,使得与本发明的第一实施例相比,可以执行精确地识别“事件动作”的处理。
此外,本发明的第三实施例能结合本发明的第二实施例使用来提供两者的效果。
此外,根据本发明的第一至第三实施例的动作识别程序能被配置成使计算机执行图10、13和16中所示的部分或所有步骤的程序。通过将该程序安装在计算机中来执行,可以实现根据第一至第三实施例的动作识别设备和动作识别方法。如上所述,计算机包括例如服务器设备、个人电脑和移动电话。
如在下述补充说明中,还描述了上述实施例的一部分或全部,并且绝不限于下文。
(补充说明1)
一种动作识别设备,所述动作识别设备使用传感器数据识别用户的动作,具有:
周期性丧失检测装置,所述周期性丧失检测装置当所述用户正做动作时,检测所述传感器数据的周期性的丧失;以及
识别处理装置,所述识别处理装置根据所检测的所述传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所述数据区间的传感器数据,识别所述用户的动作。
(补充说明2)
在补充说明1所述的动作识别设备中,所述传感器数据的周期性是在所述传感器数据中的作为取至少局部最大或局部最小的数据点的峰的周期性。
(补充说明3)
在补充说明1或2所述的动作识别设备中,所述数据区间被设定成对识别目标操作的每一类型具有预定持续时间。
(补充说明4)
补充说明1至3的任一项所述的动作识别设备具有意图用于识别目标操作的每一类型的识别处理装置。
(补充说明5)
在补充说明1至4的任一项所述的动作识别设备中,传感器数据是伴随所述用户的动作操作的加速度传感器的输出数据。
(补充说明6)
在补充说明1至5的任一项所述的动作识别设备中,所述周期性丧失检测装置包括:峰检测单元,所述峰检测单元从所述传感器数据检测作为取至少局部最大或局部最小的数据点的峰;峰间隔计算单元,所述峰间隔计算单元由多个所检测的峰的出现时刻,计算峰之间的时间间隔;峰预测单元,所述峰预测单元使用由所述峰间隔计算单元计算的峰间隔的值和由所述峰检测单元检测的峰的出现时刻,预测包括至少下一峰的出现时刻的峰信息;以及峰匹配判定单元,所述峰匹配判定单元判定由所述峰预测单元预测的峰和由所述峰检测单元从所述传感器数据检测的峰是否匹配。
(补充说明7)
补充说明6所述的动作识别设备进一步具有峰间隔历史存储单元,所述峰间隔历史存储单元存储由所述峰检测单元检测的特定过去时段的峰的时刻信息和由所述峰间隔计算单元计算的所述特定过去时段的峰间隔,并且所述峰预测单元使用在所述峰间隔历史存储单元中存储的峰信息和峰间隔的历史,预测下一峰的包括至少出现时刻的峰信息。
(补充说明8)
补充说明6中所述的动作识别设备进一步包括峰间隔历史存储单元,所述峰间隔历史存储单元存储由所述峰检测单元检测的特定过去时段的峰的时刻信息和由所述峰间隔计算单元计算的所述特定过去时段的峰间隔;校正动作输入单元,所述校正动作输入单元输入校正动作信息,所述校正动作信息包括至少实际所做的动作的类型和做出该动作的时刻;以及峰学习单元,所述峰学习单元从所述峰间隔历史存储单元获得在由所述校正动作输入单元输入的时刻附近的峰的时刻信息和峰间隔的历史,学习峰间隔的趋势,并且基于学习结果,改变周期性检测方法。
(补充说明9)
在补充说明6至8的任一项所述的动作识别设备中,所述峰匹配判定单元基于出现时刻之间的差,判定由所述峰预测单元预测的峰与由所述峰检测单元从所述传感器数据检测的峰是否匹配。
(补充说明10)
在补充说明6至8的任一项所述的动作识别设备中,所述峰匹配判定单元基于出现时刻之间的差和峰值之间的差,判定由所述峰预测单元预测的峰与由所述峰检测单元从所述传感器数据检测的峰是否匹配。
(补充说明11)
一种动作识别***具有:在补充说明1至10的任一项中所述的动作识别设备;传感器数据获取/存储单元,所述传感器数据获取/存储单元获取从传感器输出的传感器数据并且临时存储所述传感器数据;以及识别结果输出单元,所述识别结果输出单元输出由所述识别处理单元执行的动作识别的结果。
(补充说明12)
一种动作识别方法,所述动作识别方法使用传感器数据识别用户的动作,包括:当用户正做动作时,检测所述传感器数据的周期性的丧失的步骤;以及根据所检测的所述传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所述数据区间的传感器数据,识别所述用户的动作的步骤。
(补充说明13)
在补充说明12所述的动作识别方法中,检测所述周期性的丧失的步骤包括:从所述传感器数据检测作为至少取局部最大或局部最小的数据点的峰的步骤;由多个所检测的峰的出现时刻,计算峰之间的时间间隔的步骤;使用所计算的峰间隔的值和所检测的峰的出现时刻,预测下一峰的包括至少出现时刻的峰信息的步骤;以及判定所预测的峰和所检测的峰是否匹配的步骤。
(补充说明14)
在补充说明13中所述的动作识别方法进一步包括存储特定过去时段的所检测的峰的时刻信息和所计算的峰间隔的步骤,并且所述预测步骤包括使用所存储的峰信息和峰间隔的历史,预测下一峰的包括至少出现时刻的峰信息。
(补充说明15)
在补充说明13中所述的动作识别方法进一步包括:存储特定过去时段的所检测的峰的时刻信息和所计算的峰间隔的步骤;输入包括至少实际所做的动作的类型和做出该动作的时刻的校正动作信息的步骤;以及从存储所述特定过去时段的时刻信息和峰间隔的信息,获得在所输入的时刻附近的峰的时刻信息和峰间隔的历史,学习峰间隔的趋势,并且基于学习结果改变周期性检测方法的步骤。
(补充说明16)
在补充说明13至15的任一项所述的动作识别方法中,所述判定步骤包括基于出现时刻之间的差,判定所预测的峰和从所述传感器数据检测的峰是否匹配。
(补充说明17)
在补充说明13至15的任一项所述的动作识别方法中,所述判定步骤包括基于出现时刻之间的差和峰值之间的差,判定所预测的峰和从所述传感器数据检测的峰是否匹配。
(补充说明18)
一种动作识别程序,所述动作识别程序使用传感器数据识别用户的动作,所述动作识别程序使得计算机执行:当用户正做动作时,检测所述传感器数据的周期性的丧失的功能;以及根据所检测的所述传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所述数据区间的传感器数据,识别所述用户的动作的功能。
(补充说明19)
在补充说明18中所述的动作识别程序中,检测所述周期性的丧失的功能包括:从所述传感器数据检测作为取至少局部最大或局部最小的数据点的峰的功能;由多个所检测的峰的出现时刻,计算峰之间的时间间隔的功能;使用所计算的峰间隔的值和所检测的峰的出现时刻,预测下一峰的包括至少出现时刻的峰信息的功能;以及判定所预测的峰和所检测的峰是否匹配的功能。
(补充说明20)
补充说明18中所述的动作识别程序进一步使所述计算机执行存储特定过去时段的所检测的峰的时刻信息和所计算的峰间隔的功能,并且所述预测功能包括使用所存储的峰信息和峰间隔的历史,预测下一峰的包括至少出现时刻的峰信息。
(补充说明21)
补充说明19中所述的动作识别程序进一步使所述计算机执行:存储特定过去时段的所检测的峰的时刻信息和所计算的峰间隔的功能;输入包括至少实际所做的动作的类型和所做动作的时刻的校正动作信息的功能;以及从存储所述特定过去时段的时刻信息和峰间隔的信息获得在所输入时刻附近的峰的时刻信息和峰间隔的历史,学习峰间隔的趋势,并且基于学习结果改变周期性检测方法的功能。
本申请要求2012年3月2日提交的日本专利申请No.2012-044610的优先权,其全部内容在此引入以供参考。
尽管上文参考实施例描述了本发明,本发明决不限于上述实施例。在本领域的普通技术人员能理解的本发明的范围内,能不同地改变本发明的构造和细节。
工业适用性
根据本发明,通过使用例如通过识别人的动作获得的结果,精确地计算卡路里消耗和记录一天的动作识别结果,当用户浏览记录时,用户能将记录用作自动生成的日记,此外,应用本发明来通过实时地监视诸如“坠落”的危险动作的出现,来从远处观察婴儿或老人。
参考标记列表
1  传感器数据获取/存储单元
2  识别处理单元
21  时间窗开始/结束时刻设定单元
22  时间窗数据提取单元
23  特征量计算单元
24  动作识别单元
3  事件动作检测单元
31  峰检测单元
32  峰间隔计算单元
33  峰预测单元
34  峰匹配判定单元
35  峰间隔历史存储单元
4  识别结果输出单元
5  峰间隔历史存储单元
6  峰学习单元
7  校正动作输入单元
8  动作识别设备
10  动作识别***

Claims (10)

1.一种动作识别设备,所述动作识别设备使用传感器数据识别用户的动作,包括:
周期性丧失检测装置,所述周期性丧失检测装置当所述用户正做动作时,检测所述传感器数据的周期性的丧失;以及
识别处理装置,所述识别处理装置根据所检测的所述传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所述数据区间的传感器数据,识别所述用户的动作。
2.根据权利要求1所述的动作识别设备,其中,所述传感器数据的周期性是在所述传感器数据中的作为取至少局部最大或局部最小的数据点的峰的周期性。
3.根据权利要求1或2所述的动作识别设备,其中,所述数据区间被设定成对识别目标操作的每一类型具有预定持续时间。
4.根据权利要求1至3的任一项所述的动作识别设备,包括意图用于识别目标操作的每一类型的所述识别处理装置。
5.根据权利要求1至4的任一项所述的动作识别设备,其中,所述周期性丧失检测装置包括:
峰检测单元,所述峰检测单元从所述传感器数据检测作为取至少局部最大或局部最小的数据点的峰;
峰间隔计算单元,所述峰间隔计算单元由多个所检测的峰的出现时刻,计算峰之间的时间间隔;
峰预测单元,所述峰预测单元使用由所述峰间隔计算单元计算的峰间隔的值和由所述峰检测单元检测的峰的出现时刻,预测下一峰的包括至少出现时刻的峰信息;以及
峰匹配判定单元,所述峰匹配判定单元判定由所述峰预测单元预测的峰和由所述峰检测单元从传感器数据检测的峰是否匹配。
6.根据权利要求5所述的动作识别设备,进一步包括峰间隔历史存储单元,所述峰间隔历史存储单元存储由所述峰检测单元检测的特定过去时段的峰的时刻信息和由所述峰间隔计算单元计算的所述特定过去时段的峰间隔,其中,所述峰预测单元使用在所述峰间隔历史存储单元中存储的峰信息和峰间隔的历史,预测下一峰的包括至少出现时刻的峰信息。
7.根据权利要求5所述的动作识别设备,进一步包括:
峰间隔历史存储单元,所述峰间隔历史存储单元存储由所述峰检测单元检测的特定过去时段的峰的时刻信息和由所述峰间隔计算单元计算的所述特定过去时段的峰间隔;
校正动作输入单元,所述校正动作输入单元输入校正动作信息,所述校正动作信息包括至少实际所做的动作的类型和做出该动作的时刻;以及
峰学习单元,所述峰学习单元从所述峰间隔历史存储单元获得在由所述校正动作输入单元输入的时刻附近的峰的时刻信息和峰间隔的历史,学习峰间隔的趋势,并且基于学习结果,改变周期性检测方法。
8.一种动作识别***,包括:
根据权利要求1至7的任一项所述的动作识别设备;
传感器数据获取/存储单元,所述传感器数据获取/存储单元获取从传感器输出的传感器数据并且临时存储所述传感器数据;以及
识别结果输出单元,所述识别结果输出单元输出由所述识别处理单元执行的动作识别的结果。
9.一种动作识别方法,所述动作识别方法使用传感器数据识别用户的动作,包括:
当所述用户正做动作时,检测所述传感器数据的周期性的丧失的步骤;以及
根据所检测的所述传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所述数据区间的传感器数据,识别所述用户的动作的步骤。
10.一种动作识别程序,所述动作识别程序使用传感器数据识别用户的动作,所述程序使得计算机执行:
当所述用户正做动作时,检测所述传感器数据的周期性的丧失的功能;以及
根据所检测的所述传感器数据的周期性的丧失,设定用于动作识别的数据区间,并且基于所述数据区间的传感器数据,识别所述用户的动作的功能。
CN201380012221.4A 2012-03-02 2013-01-21 动作判定装置、动作判定***和动作判定方法 Pending CN104144643A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012-046610 2012-03-02
JP2012046610 2012-03-02
PCT/JP2013/051035 WO2013128972A1 (ja) 2012-03-02 2013-01-21 動作判定装置、動作判定システムおよび動作判定方法

Publications (1)

Publication Number Publication Date
CN104144643A true CN104144643A (zh) 2014-11-12

Family

ID=49082180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380012221.4A Pending CN104144643A (zh) 2012-03-02 2013-01-21 动作判定装置、动作判定***和动作判定方法

Country Status (5)

Country Link
US (1) US9606138B2 (zh)
EP (1) EP2821009A4 (zh)
JP (1) JP6052278B2 (zh)
CN (1) CN104144643A (zh)
WO (1) WO2013128972A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105310695A (zh) * 2015-11-03 2016-02-10 苏州景昱医疗器械有限公司 异动症评估设备

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9174084B2 (en) * 2013-03-05 2015-11-03 Microsoft Technology Licensing, Llc Automatic exercise segmentation and recognition
US10591387B2 (en) * 2013-08-22 2020-03-17 Ford Global Technologies, Llc Signal classification
US9241079B1 (en) * 2014-06-27 2016-01-19 Sap Se Mobile application usage monitor
KR102409381B1 (ko) * 2014-07-14 2022-06-15 삼성전자주식회사 재귀 추정을 이용한 생체 신호 처리 방법 및 그 장치
JP6784044B2 (ja) * 2016-03-24 2020-11-11 カシオ計算機株式会社 行動解析装置、行動解析方法及びプログラム
JP7279793B2 (ja) * 2019-07-29 2023-05-23 日本電信電話株式会社 中継サーバ、中継方法および中継プログラム
US11937917B1 (en) * 2023-08-16 2024-03-26 Alva Health Inc. Detecting falls with multiple wearable motion sensors

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1457246A (zh) * 2001-03-06 2003-11-19 微石有限公司 身体动作检测装置
JP2005021450A (ja) * 2003-07-03 2005-01-27 Toshiba Corp 生体状態分析装置及び生体状態分析方法
JP2007209430A (ja) * 2006-02-08 2007-08-23 Seiko Instruments Inc 運動計測装置
CN101394787A (zh) * 2006-03-14 2009-03-25 索尼株式会社 人体运动检测设备、人体运动检测方法和人体运动检测程序
CN101980659A (zh) * 2008-03-31 2011-02-23 夏普株式会社 体动测定装置、便携式电话、体动测定装置的控制方法、体动测定装置控制程序以及记录有该程序的计算机可读取记录介质
CN102027440A (zh) * 2008-03-18 2011-04-20 艾利普提克实验室股份有限公司 对象与运动检测
JP2011123832A (ja) * 2009-12-14 2011-06-23 Nippon Telegr & Teleph Corp <Ntt> 行動・状態モニタリング方法およびプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000213967A (ja) 1999-01-22 2000-08-04 Amutekkusu:Kk 人体動作判別装置
WO2002021585A1 (fr) * 2000-09-01 2002-03-14 Shin-Etsu Chemical Co., Ltd. Generateur de champ magnetique pour plasma de magnetron, appareil de gravure au plasma et procede utilisant ledit generateur de champ magnetique
WO2004026138A1 (ja) * 2002-09-19 2004-04-01 Matsushita Electric Industrial Co., Ltd. 身体運動評価装置、及び身体運動評価システム
FI119277B (fi) * 2003-11-21 2008-09-30 Polar Electro Oy Järjestely, menetelmä ja tietokoneohjelma ihmisen fyysisen aktiivisuustason määrittämiseksi
JP4389821B2 (ja) 2005-03-22 2009-12-24 ソニー株式会社 体動検出装置、コンテンツ再生装置、体動検出方法およびコンテンツ再生方法
JP5107519B2 (ja) 2005-12-27 2012-12-26 住友大阪セメント株式会社 状態解析装置及びソフトウエアプログラム
JP4800235B2 (ja) * 2007-02-14 2011-10-26 東京エレクトロン株式会社 処理方法
US10667727B2 (en) * 2008-09-05 2020-06-02 Varian Medical Systems, Inc. Systems and methods for determining a state of a patient
JP5522338B2 (ja) 2008-10-28 2014-06-18 日本電気株式会社 状況判定装置、状況判定システム、その方法及びプログラム
JP5590301B2 (ja) 2010-03-30 2014-09-17 日本電気株式会社 行動判定装置、行動判定システム、端末装置、行動判定方法、及びプログラム

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1457246A (zh) * 2001-03-06 2003-11-19 微石有限公司 身体动作检测装置
JP2005021450A (ja) * 2003-07-03 2005-01-27 Toshiba Corp 生体状態分析装置及び生体状態分析方法
JP2007209430A (ja) * 2006-02-08 2007-08-23 Seiko Instruments Inc 運動計測装置
CN101394787A (zh) * 2006-03-14 2009-03-25 索尼株式会社 人体运动检测设备、人体运动检测方法和人体运动检测程序
CN102027440A (zh) * 2008-03-18 2011-04-20 艾利普提克实验室股份有限公司 对象与运动检测
CN101980659A (zh) * 2008-03-31 2011-02-23 夏普株式会社 体动测定装置、便携式电话、体动测定装置的控制方法、体动测定装置控制程序以及记录有该程序的计算机可读取记录介质
JP2011123832A (ja) * 2009-12-14 2011-06-23 Nippon Telegr & Teleph Corp <Ntt> 行動・状態モニタリング方法およびプログラム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105310695A (zh) * 2015-11-03 2016-02-10 苏州景昱医疗器械有限公司 异动症评估设备
CN105310695B (zh) * 2015-11-03 2019-09-06 苏州景昱医疗器械有限公司 异动症评估设备

Also Published As

Publication number Publication date
JPWO2013128972A1 (ja) 2015-07-30
WO2013128972A1 (ja) 2013-09-06
EP2821009A1 (en) 2015-01-07
US20150006446A1 (en) 2015-01-01
EP2821009A4 (en) 2015-10-28
JP6052278B2 (ja) 2016-12-27
US9606138B2 (en) 2017-03-28

Similar Documents

Publication Publication Date Title
CN104144643A (zh) 动作判定装置、动作判定***和动作判定方法
CN112231174B (zh) 异常告警方法、装置、设备及存储介质
Peng et al. Quality-relevant fault detection and diagnosis for hot strip mill process with multi-specification and multi-batch measurements
CN111325416A (zh) 预测叫车平台的用户流失的方法和装置
US11501215B2 (en) Hierarchical clustered reinforcement machine learning
CN104111858A (zh) 事件分析器和计算机可读存储介质
CN104076809B (zh) 数据处理装置以及数据处理方法
CN102301294A (zh) 操作支援装置、操作支援方法及计算机程序
CN109243619A (zh) 预测模型的生成方法、装置及计算机可读存储介质
JP2019087101A (ja) 予知モデル維持システム、予知モデル維持方法及び予知モデル維持プログラム
CN111178537B (zh) 一种特征提取模型训练方法及设备
JP2017130094A (ja) セル制御装置、及び製造セルにおける複数の製造機械の稼働状況を管理する生産システム
CN114359970A (zh) 行人重识别方法、装置、电子设备及存储介质
CN113748389A (zh) 用于监控工业过程步骤的方法和设备
Liao et al. Nonparametric and semi-parametric sensor recovery in multichannel condition monitoring systems
CN106844152B (zh) 银行后台任务跑批时间的相关性分析方法及装置
CN114338416B (zh) 一种时空多指标预测方法、装置和存储介质
CN110766086B (zh) 基于强化学习模型对多个分类模型进行融合的方法和装置
JP2013109664A (ja) 混雑予測装置、混雑予測方法、及び混雑予測プログラム
Zhang et al. A deep reinforcement learning based human behavior prediction approach in smart home environments
CN113689125A (zh) 信息推送方法和装置
CN111931798B (zh) 进行冷头状态分类检测和寿命预测的方法
CN114120350A (zh) 一种手势识别的方法及其相关设备
Mateus et al. Comparing LSTM and GRU Models to Predict the Condition of a Pulp Paper Press. Energies 2021, 14, 6958
CN106599264B (zh) 一种基于大数据的突发事件演化推理方法及***

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20141112