CN204537060U - 一种基于肌电流和多传感器协同作用的人机交互设备 - Google Patents
一种基于肌电流和多传感器协同作用的人机交互设备 Download PDFInfo
- Publication number
- CN204537060U CN204537060U CN201520260383.6U CN201520260383U CN204537060U CN 204537060 U CN204537060 U CN 204537060U CN 201520260383 U CN201520260383 U CN 201520260383U CN 204537060 U CN204537060 U CN 204537060U
- Authority
- CN
- China
- Prior art keywords
- sensor
- main control
- control unit
- myoelectricity
- myoelectricity stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Landscapes
- Measurement And Recording Of Electrical Phenomena And Electrical Characteristics Of The Living Body (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本实用新型涉及一种基于肌电流和多传感器协同作用的人机交互设备,包括肌电流EMG传感器、辅助传感器与主控单元,所述肌电流EMG传感器用于提取人体EMG信号,所述辅助传感器用于提取相应类型的信号,所述主控单元分别与肌电流EMG传感器和辅助传感器相联通,该主控单元用于分析处理肌电流EMG传感器和辅助传感器提供的信息,且识别指令将指令发送,本实用新型通过多点采集肌电流信号和其他传感器信号,将多维信号有机融合,共同判断出使用者的操作意图,同时***具有自学习功能,可以不断加强分类准确度。多传感器协同使用和自学习算法可以显著提高人机接口的准确度。
Description
技术领域
本实用新型涉及医学康复工程和计算机技术领域,尤其涉及一种基于肌电流和多传感器协同作用的人机交互设备。
背景技术
随着生活水平的提高,生活中的电子设备越来越多,并已经成为人们不可或缺的生活元素。为了进一步提高生活质量,很多新型的对电子设备的控制方式运用而生。其中,非接触的控制方式以其便捷、快速等优点备受青睐。
如通过脑电控制电视机,如专利号为CN1949140A,申请日为2006.11.08的《一种脑-机接口鼠标控制方法》;通过手势控制遥控器,如专利号为CN202931503U,申请日为2012.10.31的《一种可手势识别的遥控***及电视机》);通过肌电流控制鼠标,如专利号为CN1818841A,申请日为2006.03.16的《肌电信号控制鼠标》)等。这些新型的控制方式一般是通过采集原始信号(脑电、运动图像、肌电),然后通过建立原始信号特征量与目标控制量之间的模型,从而实现对目标设备进行控制的目的。其中,训练过程的复杂程度、训练结果的准确程度都是制约着这些新型控制技术能否顺利转化生产,切实改善人民生活质量的关键。
针对这三种常见的新型控制方式:脑电的训练难度最大,一般要求佩戴者的精神高度集中,并经过多次训练才可通过脑电输出少数几个命令准确命令;手势控制一般是通过摄像头采集信息,训练过程简单,但当运动过快或摄像头摆放位置不当都会引起这种控制的失效,而且可编辑的动作较少,限制了对多控制输出情况下的应用;肌电流一般指表面肌电信号,是肌肉收缩时伴随产生的电信号,肌肉一般容易被人体所控制,因此肌电流信号也相对前两者更容易被人体控制,从而训练过程的难度大大降低,同时,由于人体上的肌肉分布广、种类多,且不同肌肉运动过程中产生的肌电信号各异,使得通过提取单独肌肉上的肌电流和计算多块肌肉上产生肌电流的分布,可实现对大量命令的准确控制。因此,通过肌电流进行多设备、多功能控制,并转化为实际生产,改善民生,有着极大的可能性。
另外如,专利号为CN103315737A,申请日为2013.06.18的《佩戴式多通道表面肌电信号采集臂环》实现了一种通用性的肌电采集器,但由于臂环可采集到的肌肉种类小、肌电流较小,因此可与控制命令建模的肌电特征量少。可控制的目标量少和控制的精度低,是限制了本类专利内容实际使用的主要原因。如专利号为CN102349037A,申请日为2012.02.08的《用于人机接口的基于肌电图的可佩戴控制器》发明了一种多肌电图传感器并用的人接交互设备并阐述了部分控制方法,理论上提高了肌电控制的准确度,但由于传感器防止位置不确定,各个部分肌肉发生的电信号特征多,其在建立模型过程中必定需要很大的计算量。
为了提高检测和判断的准确度,各个领域都引入了多模式检测概念和方法,即通过多种传感器,多个维度对同一事件进行检测和判断,以提高检测结果,降低检测难度。多肌电传感器并用已成为基于肌电流控制设备的必然趋势,然而多路肌电信号仍不能称为多模式检测。本发明,从多模式检测方法出发,将多点的肌电流信号与其他相关传感器有机融合,共同判断出佩戴者的真实意图,从而实现人机接口和对其他设备的控制。
实用新型内容
针对上述现有技术的现状,本实用新型所要解决的技术问题在于提供一种一种多传感器协助提供多维参考信息,使得***能够,辨别多肌电流传感器反映的真实信息,高效且准确的基于肌电流和多传感器协同作用的人机交互设备。
本实用新型解决上述技术问题所采用的技术方案为:一种基于肌电流和多传感器协同作用的人机交互设备,包括肌电流EMG传感器、辅助传感器与主控单元,所述肌电流EMG传感器用于提取人体EMG信号,所述辅助传感器用于提取相应类型的信号,所述主控单元分别与肌电流EMG传感器和辅助传感器相联通,该主控单元用于分析处理肌电流EMG传感器和辅助传感器提供的信息,且识别指令将指令发送。
进一步地,所述肌电流EMG传感器采集一个或多个点的人体表面EMG信号,该EMG信号的提取位置分布于佩戴者的手臂,腿部,颈部,头部或躯干其他部位。
进一步地,所述辅助传感器包括陀螺仪、加速度传感器、近距离传感器、光学传感器、温度传感器、湿度传感器与摄像头,该辅助传感器分别用于提取线性或转动加速度信号、地磁信号、与目标的距离、体表压力信号、环境光强度、皮肤及环境温度、皮肤及环境湿度及分布与周边物体的图像的信息。
进一步地,所述主控单元包括微处理器、FPGA、CPLD与无线通信设备,该主控单元通过微处理器、FPGA、CPLD将理肌电流EMG传感器和辅助传感器提供的信息进行指令的识别,并通过无线通信设备将指令传递。
进一步地,所述主控单元包括反馈***,该反馈***用于显示主控单元识别指令的结果,便于主控单元校准。
进一步地,所述主控单元还包含数据存储模块,供电模块,以及显示模块,增加本发明的使用功能性。
与现有技术相比,本实用新型的优点在于:本发明将肌电流EMG传感器和加速度传感器、陀螺仪、压力传感器、声音传感器等相结合,由辅助传感器提供多维参考信息,帮助***辨别多肌电流传感器反映的真实信息,比单纯的多点肌电流人机交互设备提高了速率和正确率,实现模型建立过程简洁、信号识别准确度高的人机交互设备,本发明可以实现佩戴者仅通过肢体的小幅度运动实现对个人控制意念的传达,可运用于新一代消费电子、患者的康复训练等多个领域,适宜大规模推广。
附图说明
图1为本实用新型的结构示意图。
具体实施方式
如图1所示,,一种基于肌电流和多传感器协同作用的人机交互设备,包括一个或多个肌电流EMG传感器、一个或多个辅助传感器与主控单元,所述肌电流EMG传感器用于提取人体EMG信号,所述辅助传感器用于提取相应类型的信号,所述主控单元分别与肌电流EMG传感器和辅助传感器相联通,该主控单元用于分析处理肌电流EMG传感器和辅助传感器提供的信息,且识别指令将指令发送。
优选的,所述肌电流EMG传感器采集人体表面EMG信号,该EMG信号的提取位置分布于佩戴者的手臂、腿部、颈部、头部或躯干其他部位。
优选地,所述辅助传感器包括陀螺仪、加速度传感器、近距离传感器、光学传感器、温度传感器、湿度传感器与摄像头,该辅助传感器分别用于提取线性或转动加速度信号、地磁信号、与目标的距离、体表压力信号、环境光强度、皮肤及环境温度、皮肤及环境湿度及分布与周边物体的图像的信息。
另外,所述主控单元包括微处理器、FPGA、CPLD与无线通信设备,该主控单元通过微处理器、FPGA、CPLD将理肌电流EMG传感器和辅助传感器提供的信息进行指令的识别,并通过无线通信设备将指令传递,该主控单元还用于显示主控单元识别指令的结果,便于主控单元校准包括反馈***的反馈***,以及数据存储模块,供电模块,以及显示模块,来增加本发明的使用功能性。
实施例一
操作者佩戴本基于肌电流和多传感器协同作用的人机交互设备,该设备内设有一个肌电流EMG传感器与辅助传感器和与前两者相连接的主控单元,其中辅助传感器具有肌电流、加速度、陀螺仪和温度的采集功能,当佩戴者带上设备后,***首先记录操作者温度,此温度为操作者体温,这个信息会作为指令发出的使能信息,即若设备不在操作者人体上时,部分命令将不识别。
当操作者发出第一条动作指令时,如操作者向上弯曲手臂,1肌电流EMG传感器会采集到响应信息,并保存;辅助传感器中的加速度传感器和陀螺仪会记录信号变化,通知模式识别可以判断出此时操作者的姿态和操作幅度,主控单元内的***将陀螺仪和加速度传感获得的运动信息和肌电流信息相融合,共同得出一个判断信息,作为此命令的特征量,与操作者的真实意图相关联,并做出相应的控制。
在操作者不断的操作过程中,分类算法中的参数会不断优化调整,实现一个自学习功能。即操作者使用的频率越高的动作,***识别的准确度越高。
实施例二
操作者分别佩戴多个肌电流EMG传感器,该肌电流EMG传感器分别佩戴于操作者的身体的不同位置,辅助传感器具有加速度、陀螺仪、与目标的距离的采集功能,当佩戴者带上设备后,主控单元能够辨别操作者的多种身体姿态,而且不同的指令之间的差异越大,提高主控单元判断的准确性。
最后应说明的是:以上实施例仅用以说明本实用新型的技术方案,而非对其限制;尽管参照前述实施例对本实用新型进行了详细的说明,本领域的技术人员应当理解,其依然可以对前述实施例所记载的技术方案进行修改,或者对其中部分技术特征进行同等替换;而这些修改或者替换,并不使相应技术方案的本质脱离本实用新型各实施例技术方案的精神与范围。
Claims (6)
1.一种基于肌电流和多传感器协同作用的人机交互设备,其特征在于,包括肌电流EMG传感器、辅助传感器与主控单元,所述肌电流EMG传感器用于提取人体EMG信号,所述辅助传感器用于提取相应类型的信号,所述主控单元分别与肌电流EMG传感器和辅助传感器相联通,该主控单元用于分析处理肌电流EMG传感器和辅助传感器提供的信息,且识别指令将指令发送。
2.根据权利要求1所述的一种基于肌电流和多传感器协同作用的人机交互设备,其特征在于,所述肌电流EMG传感器采集一个或多个点的人体表面EMG信号,该EMG信号的提取位置分布于佩戴者的手臂,腿部,颈部,头部或躯干其他部位。
3.根据权利要求1所述的一种基于肌电流和多传感器协同作用的人机交互设备,其特征在于,所述辅助传感器包括陀螺仪、加速度传感器、磁场传感器、近距离传感器、压力传感器、光学传感器、温度传感器、湿度传感器与摄像头,该辅助传感器分别用于提取线性或转动加速度信号、地磁信号、与目标的距离、体表压力信号、环境光强度、皮肤及环境温度、皮肤及环境湿度及分布与周边物体的图像的信息。
4.根据权利要求1所述的一种基于肌电流和多传感器协同作用的人机交互设备,其特征在于,所述主控单元包括微处理器、FPGA、CPLD与无线通信设备,该主控单元通过微处理器、FPGA、CPLD将理肌电流EMG传感器和辅助传感器提供的信息进行指令的识别,并通过无线通信设备将指令传递。
5.根据权利要求1或4所述的一种基于肌电流和多传感器协同作用的人机交互设备,其特征在于,所述主控单元包括反馈***,该反馈***用于显示主控单元识别指令的结果。
6.根据权利要求1所述的一种基于肌电流和多传感器协同作用的人机交互设备,其特征在于,所述主控单元还包含数据存储模块,供电模块,以及显示模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201520260383.6U CN204537060U (zh) | 2015-04-23 | 2015-04-23 | 一种基于肌电流和多传感器协同作用的人机交互设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201520260383.6U CN204537060U (zh) | 2015-04-23 | 2015-04-23 | 一种基于肌电流和多传感器协同作用的人机交互设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN204537060U true CN204537060U (zh) | 2015-08-05 |
Family
ID=53751034
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201520260383.6U Active CN204537060U (zh) | 2015-04-23 | 2015-04-23 | 一种基于肌电流和多传感器协同作用的人机交互设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN204537060U (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105138133A (zh) * | 2015-09-14 | 2015-12-09 | 李玮琛 | 生物信号手势识别设备及方法 |
CN105565212A (zh) * | 2016-02-29 | 2016-05-11 | 甘莅 | 基于肌电流和运动传感器的手势控制的搬运堆垛车及方法 |
CN108742957A (zh) * | 2018-06-22 | 2018-11-06 | 上海交通大学 | 一种多传感融合的假肢控制方法 |
CN109426299A (zh) * | 2017-09-04 | 2019-03-05 | 原相科技股份有限公司 | 传感器装置、方法及多传感器装置 |
CN109864740A (zh) * | 2018-12-25 | 2019-06-11 | 北京津发科技股份有限公司 | 一种运动状态的表面肌电信号采集传感器和设备 |
CN111475206A (zh) * | 2019-01-04 | 2020-07-31 | 优奈柯恩(北京)科技有限公司 | 用于唤醒可穿戴设备的方法及装置 |
-
2015
- 2015-04-23 CN CN201520260383.6U patent/CN204537060U/zh active Active
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN105138133A (zh) * | 2015-09-14 | 2015-12-09 | 李玮琛 | 生物信号手势识别设备及方法 |
CN105565212A (zh) * | 2016-02-29 | 2016-05-11 | 甘莅 | 基于肌电流和运动传感器的手势控制的搬运堆垛车及方法 |
CN105565212B (zh) * | 2016-02-29 | 2018-02-16 | 甘莅 | 基于肌电流和运动传感器的手势控制的搬运堆垛车及方法 |
CN109426299A (zh) * | 2017-09-04 | 2019-03-05 | 原相科技股份有限公司 | 传感器装置、方法及多传感器装置 |
CN109426299B (zh) * | 2017-09-04 | 2021-12-03 | 原相科技股份有限公司 | 传感器装置及其方法 |
CN108742957A (zh) * | 2018-06-22 | 2018-11-06 | 上海交通大学 | 一种多传感融合的假肢控制方法 |
CN109864740A (zh) * | 2018-12-25 | 2019-06-11 | 北京津发科技股份有限公司 | 一种运动状态的表面肌电信号采集传感器和设备 |
CN111475206A (zh) * | 2019-01-04 | 2020-07-31 | 优奈柯恩(北京)科技有限公司 | 用于唤醒可穿戴设备的方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN204537060U (zh) | 一种基于肌电流和多传感器协同作用的人机交互设备 | |
Jiang et al. | A novel, co-located EMG-FMG-sensing wearable armband for hand gesture recognition | |
CN104134060B (zh) | 基于肌电信号和运动传感器的手语翻译和显示发声*** | |
Jiang et al. | Feasibility of wrist-worn, real-time hand, and surface gesture recognition via sEMG and IMU sensing | |
CN102419588B (zh) | 一种基于脑电信号及运动信号对目标控制的方法及装置 | |
CN108983973B (zh) | 一种基于手势识别的仿人灵巧肌电假手控制方法 | |
CN103777752A (zh) | 基于手臂肌肉电流检测和运动传感器的手势识别设备 | |
CN103654774B (zh) | 穿戴式移动手环 | |
CN107553499A (zh) | 一种多轴机械臂的自然手势运动控制***和方法 | |
Chen et al. | Eyebrow emotional expression recognition using surface EMG signals | |
CN104337666A (zh) | 多肌肉协同肌电反馈康复训练***和方法 | |
US20140032462A1 (en) | Systems and methods for autoconfiguration of pattern-recognition controlled myoelectric prostheses | |
CN111553307A (zh) | 一种融合生物电阻抗信息和肌电信息的手势识别*** | |
CN110850987A (zh) | 基于人体表达的二维意图的特定标识控制方法和装置 | |
CN105232052A (zh) | 组合传感器识别人体下肢运动姿态的装置 | |
Yang et al. | Experimental study of an EMG-controlled 5-DOF anthropomorphic prosthetic hand for motion restoration | |
Guo et al. | Towards zero training for myoelectric control based on a wearable wireless sEMG armband | |
CN105962935A (zh) | 用于运动学习功能改善的脑电神经反馈训练***及其方法 | |
CN113190114B (zh) | 具有触觉模拟和情绪感知的虚拟场景体验***和方法 | |
CN106974795A (zh) | 一种欠驱动上肢康复机器人控制*** | |
CN104287705A (zh) | 一种健康管理用智能手环及其检测方法 | |
CN109765996A (zh) | 基于fmg臂带的对穿戴位置偏移不敏感的手势检测***和方法 | |
CN104825256A (zh) | 一种带有感知反馈功能的假肢*** | |
CN107315479B (zh) | 基于激光投影的肌电实时操作装置 | |
CN104856707A (zh) | 基于机器视觉的压力传感数据手套及其抓握过程判断方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C14 | Grant of patent or utility model | ||
GR01 | Patent grant |