CN113160930A - 基于vr的帕金森病轻度认知障碍的诊断康复***及方法 - Google Patents
基于vr的帕金森病轻度认知障碍的诊断康复***及方法 Download PDFInfo
- Publication number
- CN113160930A CN113160930A CN202110375151.5A CN202110375151A CN113160930A CN 113160930 A CN113160930 A CN 113160930A CN 202110375151 A CN202110375151 A CN 202110375151A CN 113160930 A CN113160930 A CN 113160930A
- Authority
- CN
- China
- Prior art keywords
- patient
- module
- cognitive
- evaluation
- rehabilitation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 208000010877 cognitive disease Diseases 0.000 title claims abstract description 23
- 208000018737 Parkinson disease Diseases 0.000 title claims abstract description 21
- 208000027061 mild cognitive impairment Diseases 0.000 title claims abstract description 20
- 238000000034 method Methods 0.000 title claims abstract description 18
- 238000003745 diagnosis Methods 0.000 title claims abstract description 14
- 230000001149 cognitive effect Effects 0.000 claims abstract description 81
- 230000003993 interaction Effects 0.000 claims abstract description 40
- 238000012549 training Methods 0.000 claims abstract description 39
- 238000011282 treatment Methods 0.000 claims abstract description 38
- 230000033001 locomotion Effects 0.000 claims abstract description 37
- 238000012545 processing Methods 0.000 claims abstract description 24
- 238000004891 communication Methods 0.000 claims abstract description 9
- 238000012544 monitoring process Methods 0.000 claims abstract description 7
- 238000011156 evaluation Methods 0.000 claims description 50
- 238000012360 testing method Methods 0.000 claims description 45
- 230000008449 language Effects 0.000 claims description 28
- 230000003920 cognitive function Effects 0.000 claims description 13
- 230000015654 memory Effects 0.000 claims description 13
- 230000006870 function Effects 0.000 claims description 9
- 230000007659 motor function Effects 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 claims description 9
- 230000003936 working memory Effects 0.000 claims description 9
- 230000002159 abnormal effect Effects 0.000 claims description 8
- 230000009471 action Effects 0.000 claims description 6
- 230000006399 behavior Effects 0.000 claims description 6
- 201000010099 disease Diseases 0.000 claims description 6
- 208000037265 diseases, disorders, signs and symptoms Diseases 0.000 claims description 6
- 230000002452 interceptive effect Effects 0.000 claims description 6
- 238000013542 behavioral therapy Methods 0.000 claims description 4
- 230000008859 change Effects 0.000 claims description 4
- 208000027418 Wounds and injury Diseases 0.000 claims description 3
- 230000015572 biosynthetic process Effects 0.000 claims description 3
- 230000006378 damage Effects 0.000 claims description 3
- 230000035876 healing Effects 0.000 claims description 3
- 230000006872 improvement Effects 0.000 claims description 3
- 208000014674 injury Diseases 0.000 claims description 3
- 238000007726 management method Methods 0.000 claims description 3
- 230000002040 relaxant effect Effects 0.000 claims description 3
- 230000006641 stabilisation Effects 0.000 claims description 3
- 238000011105 stabilization Methods 0.000 claims description 3
- 238000003786 synthesis reaction Methods 0.000 claims description 3
- 238000004148 unit process Methods 0.000 claims description 3
- 230000001939 inductive effect Effects 0.000 claims 1
- 238000002560 therapeutic procedure Methods 0.000 claims 1
- 230000006698 induction Effects 0.000 description 7
- 230000008569 process Effects 0.000 description 4
- 210000003414 extremity Anatomy 0.000 description 3
- 208000028698 Cognitive impairment Diseases 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 208000019901 Anxiety disease Diseases 0.000 description 1
- 241001672694 Citrus reticulata Species 0.000 description 1
- 206010012289 Dementia Diseases 0.000 description 1
- 241001112258 Moca Species 0.000 description 1
- 238000001604 Rao's score test Methods 0.000 description 1
- 206010044565 Tremor Diseases 0.000 description 1
- 230000005856 abnormality Effects 0.000 description 1
- 230000036506 anxiety Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000019771 cognition Effects 0.000 description 1
- 230000003930 cognitive ability Effects 0.000 description 1
- 230000007547 defect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 238000009207 exercise therapy Methods 0.000 description 1
- 210000000245 forearm Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000000079 pharmacotherapeutic effect Effects 0.000 description 1
- 238000000554 physical therapy Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 238000004904 shortening Methods 0.000 description 1
- 230000001225 therapeutic effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/20—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for computer-aided diagnosis, e.g. based on medical expert systems
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H20/00—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance
- G16H20/30—ICT specially adapted for therapies or health-improving plans, e.g. for handling prescriptions, for steering therapy or for monitoring patient compliance relating to physical therapies or activities, e.g. physiotherapy, acupressure or exercising
-
- G—PHYSICS
- G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
- G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
- G16H50/00—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics
- G16H50/30—ICT specially adapted for medical diagnosis, medical simulation or medical data mining; ICT specially adapted for detecting, monitoring or modelling epidemics or pandemics for calculating health indices; for individual health risk assessment
Landscapes
- Health & Medical Sciences (AREA)
- Engineering & Computer Science (AREA)
- Public Health (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Epidemiology (AREA)
- Primary Health Care (AREA)
- Biomedical Technology (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Pathology (AREA)
- Physical Education & Sports Medicine (AREA)
- Biophysics (AREA)
- Life Sciences & Earth Sciences (AREA)
- Rehabilitation Tools (AREA)
Abstract
本发明公开了一种基于VR的帕金森病轻度认知障碍的诊断康复***及方法,***包括用户端、VR设备、VR设备控制模块、外带装置感应器以及中央处理器;所述VR设备控制模块与外带装置感应器通信连接,所述中央处理器分别与VR设备控制模块、外带装置感应器以及用户端通信连接;所述VR设备控制模块用于向VR设备提供营造虚拟场景、人物,进行认知行为治疗;所述外带装置感应器用于监测、记录患者运动状态、运动信息以及交互数据;所述中央处理器用于评估、分析患者的病情,制订训练康复方案,记录各项数据,并控制康复***整体的工作。本发明通过创建虚拟场景,让患者在虚拟场景中进行训练,对训练数据进行分析,从而实时掌握患者的状态。
Description
技术领域
本发明属于生物医学技术领域,具体涉及一种基于VR的帕金森病轻度认知障碍的诊断康复***及方法。
背景技术
帕金森病认知障碍明显降低帕金森病患者的生活质量,已经成为病人及其家属最大的困扰之一,其中,约20%-50%帕金森病患者患有轻度认知障碍,约80%帕金森病患者最终发展为帕金森病痴呆。
目前,帕金森病认知障碍的诊断和认知状态的评估需要由专业人员采用一系列量表评分,最后通过量表得分对患者进行评估。然而,时间和空间上的限制给患者病情随访和追踪带来很大不便。同时,评估环境以及评估人员自身专业水平的不同会影响评估结果的准确性和一致性,并且完成一套全面的认知评估流程费时费力,增加医生负担。
目前针对帕金森病认知障碍的非药物治疗研究中,认知训练和体育锻炼或物理疗法是研究最多的两种治疗方法,并且大多数研究结果显示了程度不一的有效性。国内外已有研究证实纸笔认知训练或基于计算机的认知训练可以改善PD患者抑郁、焦虑等不良情绪以及提高患者日常生活认知和活动能力,表明认知训练可能有潜在改善PD患者认知功能的潜在益处。
同时,结合VR的认知康复训练则不像传统的认知训练那样局限于专业的医疗人员或者治疗人士,治疗对象也不局限于一对一的服务,相比目前的纸笔或者单纯的计算机辅助的认知训练,VR结合计算机的场景更加多维及逼真,患者可以在多样性的场景中进行全方面的认知能力评估和针对性训练,从而获得全面的认知评估和有针对性的认知训练。
发明内容
本发明的主要目的在于克服现有技术的缺点与不足,提出基于VR的帕金森病轻度认知障碍的诊断康复***及方法,通过创建虚拟场景,让患者在虚拟场景中进行训练,降低训练的可获取性,丰富训练的内容及场景,并且使用预设的人体认知模型对训练数据进行分析,从而实时掌握患者的状态。
为了达到上述目的,本发明采用以下技术方案:
基于VR的帕金森病轻度认知障碍的诊断康复***,包括用户端、VR设备、VR设备控制模块、外带装置感应器以及中央处理器;所述VR设备控制模块与外带装置感应器通信连接,所述中央处理器分别与VR设备控制模块、外带装置感应器以及用户端通信连接;
所述VR设备控制模块用于控制VR设备,向VR设备提供营造虚拟场景、人物,进行认知行为治疗;
所述外带装置感应器用于监测、记录患者运动状态、运动信息以及交互数据,帮助患者进行人机交互;
所述中央处理器用于评估、分析患者的病情,制订训练康复方案,记录各项数据,并控制康复***整体的工作。
进一步的,所述VR设备控制模块具体包括场景虚拟模块、虚拟人模块以及人机交互模块;
所述场景虚拟模块用于提供多维虚拟场景,营造沉浸式交互环境;
所述虚拟人模块用于提供交互的虚拟人物角色,设置虚拟场景故事中人物的密度、出现时间、人物关系以及行为,设置虚拟人物的各向属性,选择作为评估者或训练师角色;
所述人机交互模块用于进行语言人机交互和操作人机交互。
进一步的,所述人机交互模块具体包括语言交互模块以及操作交互模块;
所述语言交互模块,用于在VR设备接收到患者语音后,通过语音识别将语音转换为文本,保留语速、音量以及停顿特征信息,从文本中理解用户意图,并通过对话管理决策接下来的动作,更新对话状态,最后将决策后的动作生成为回复给用户的文本,通过语音合成将回复给用户的文本转换为语音,完成一次语言交互;
所述操作交互模块,用于在外带装置感应器采集到患者的操作信息后,将操作信息上传至中央处理器,中央处理器处理患者才做信息。
进一步的,所述中央处理器具体包括评估模块、分析模块、决策模块、训练模块以及存储模块;
所述评估模块用于评估和获取认知样本数据及对应的标签,并基于所述认知样本数据提取认知样本特征向量;
所述分析模块用于将所述认知样本特征向量及对应的标签对患者的运动功能和认知功能进行评估,获得用户的认知损伤和运动功能评估报告,并将本次训练后评估的报告和上次评分进行比较分析,得到患者病情变化趋势;
所述决策模块用于基于得到的用户评估报告,制定相应的认知行为疗法方案;
所述训练模块用于执行决策模块制定的训练方案,与VR设备控制模块进行交互联动;
所述存储模块用于储存患者的历史评估、分析、决策以及训练记录数据。
进一步的,所述用户端包括患者用户端和医生用户端,所述患者用户端用于患者及其家属实时查看病情并与医生进行交流,所述医生用户端用于与患者进行交流,管理患者数据,根据情况调整患者治疗方案;
所述中央处理器还包括警报模块,用于实时监测患者是否发生异常,异常时,向患者用户端和医生用户端发送警报。
进一步的,所述外部感应装置包括头部以及四肢的感应环,患者通过感应环与VR设备进行操作人机交互。
本发明还包括基于提供的诊断康复***的诊断康复方法,包括以下步骤:
患者佩戴并启动VR设备、外部装置感应器,设置VR设备的语言;
进行评估前放松,在评估前由患者选择音乐和虚拟场景画面,场景虚拟模块营造出相应的虚拟场景,帮助患者进行放松,提高后续评估的准确性和康复的疗效;
认知评估与运动评估,通过VR设备,对用户进行认知评估测验;VR设备向患者发出进行特定运动的提示,患者跟随指导进行特定运动,外部装置感应器收集患者运动信息,评估模块和分析模块根据认知评估测验和运动信息得出患者状态指数;
制定康复治疗方案,根据评估测验的结果,决策模块制定相应的认知治疗方案;
进行康复治疗,训练模块执行策略模块制定特定认知域的治疗方案,通过VR设备对用户进行康复治疗;
治疗后评估,当一次治疗疗程结束后,评估模块再次结合采集数据对用户进行认知评估和运动评估,中央处理器分析模块结合患者历史治疗记录,分析得出病情好转或平稳或加重的结论,并将结论上传至用户端,策略模块根据结论进行治疗方案调整。
进一步的,所述认知评估根据MDS轻度认知障碍诊断标准按照量表的评估方案执行;
所述认知评估测验具体包括全面认知功能测验、注意力及工作记忆、执行功能、语言、记忆力以及视空间能力,其中,全面认知功能测验为必须完成的测验,注意力及工作记忆、执行功能、语言、记忆力以及视空间能力随机完成其中两项。
进一步的,所述制定康复治疗方案具体为:
所述注意力及工作记忆、执行功能、语言、记忆力以及视空间能力五项认知域中,每项各两项测试,共十项测试,超过两项测试异常即诊断为轻度认知障碍,并根据每一认知域测试结果评估患者具体哪一认知域受损及受损程度,进而决策模块根据患者特定的认知域制定相应认知域的治疗方案。
进一步的,所述状态指数用于确定所述患者的整体认知和运动功能,具体为:
当状态指数小于预设阈值时,则确定患者的状态为差;
当状态指数等于预设阈值时,则确定患者的状态为良;
当状态指数大于预设阈值时,则确定患者的状态为优。
本发明与现有技术相比,具有如下优点和有益效果:
1、本发明对于患者而言,通过创建虚拟场景,让患者在虚拟场景中进行训练,降低了认知康复训练的获取成本,使患者不受时间及空间的限制,大大提高了诊疗的便捷性,丰富了训练的内容及场景,使患者可得到***全面的治疗。
2、本发明对于医务工作者而言,使用预设的人体认知模型对训练数据进行分析,从而可以实时掌握患者的状态,提高了工作效率。
附图说明
图1是本发明***的结构示意图。
具体实施方式
下面结合实施例及附图对本发明作进一步详细的描述,但本发明的实施方式不限于此。
实施例
如图1所示,本发明,基于VR的帕金森病轻度认知障碍的诊断康复***,包括用户端、VR设备、VR设备控制模块、外带装置感应器以及中央处理器;所述VR设备控制模块与外带装置感应器通信连接,所述中央处理器分别与VR设备控制模块、外带装置感应器以及用户端通信连接;
所述VR设备控制模块用于控制VR设备,向VR设备提供营造虚拟场景、人物,进行认知行为治疗;
所述外带装置感应器用于监测、记录患者运动状态、运动信息以及交互数据,帮助患者进行人机交互;
所述中央处理器用于评估、分析患者的病情,制订训练康复方案,记录各项数据,并控制康复***整体的工作。
在本实施例中,所述用户端包括患者用户端和医生用户端,患者用户通过登录、注册,保障自己的隐私安全,并可实时掌握自己的病情,也可在用户端与自己的主治医生交流;医生通过用户掌握患者病情的变化,管理患者数据,根据需要调整患者的治疗方式。
在本实施例中,所述外带感应装置包括头部以及四肢的感应环,感应环可放大或者缩小,满足不同部位的体积要求,用于检测患者肢体的运动速度、位置和震颤频率、幅度等,获得患者的运动信号;该装置与VR设备交互,帮助患者实现人机操作交互。
在本实施例中,所述VR设备控制模块具体包括场景虚拟模块、虚拟人模块以及人机交互模块;
所述场景虚拟模块用于提供多维虚拟场景,如“高山”、“流水”等,营造沉浸式交互环境;
所述虚拟人模块用于提供交互的虚拟人物角色,设置虚拟场景故事中人物的密度、出现时间、人物关系以及行为,设置虚拟人物的各向属性,用户可选择性别、服装颜色等,充当评估者和训练师的角色,拉近与用户的距离,提高用户使用的真实感。
所述人机交互模块用于进行语言人机交互和操作人机交互,具体包括语言交互模块以及操作交互模块;
具体包括语言交互模块以及操作交互模块;
所述语言交互模块,用于在VR设备接收到患者语音后,通过语音识别将语音转换为文本,保留语速、音量以及停顿特征信息,从文本中理解用户意图,并通过对话管理决策接下来的动作,更新对话状态,最后将决策后的动作生成为回复给用户的文本,通过语音合成将回复给用户的文本转换为语音,完成一次语言交互;
所述操作交互模块,用于在外带装置感应器采集到患者的操作信息后,将操作信息上传至中央处理器,中央处理器处理患者才做信息。
在本实施例中,所述中央处理器包括评估模块、分析模块、决策模块、训练模块、存储模块以及警报模块;
所述评估模块用于评估和获取认知样本数据及对应的标签,并基于所述认知样本数据提取认知样本特征向量;
所述分析模块用于将所述认知样本特征向量及对应的标签对患者的运动功能和认知功能进行评估,获得用户的认知损伤和运动功能评估报告,并将本次训练后评估的报告和上次评分进行比较分析,得到患者病情变化趋势;
所述决策模块用于基于得到的用户评估报告,制定相应的认知行为疗法方案。
所述训练模块用于执行决策模块制定的训练方案,与VR设备控制模块进行交互联动,进行康复治疗;
所述存储模块用于储存患者的历史评估、分析、决策、训练记录数据以及用户与医生交流的记录,并且储存了各类帕金森病认知评估量表以及认知行为疗法方案。
所述警报模块用于实时监测患者是否发生异常,异常时向用户端发送警报。
本发明还提供了基于上述实施例的诊断康复方法,方法包括以下步骤:
S1、患者佩戴并启动VR设备、外部装置感应器,设置VR设备的语言;
在本实施例中,所述VR设备的语言可选择普通话、粤语、闽南语、藏语等方言和英语、法语、西班牙语等国际语言。
S2、进行评估前放松,在评估前由患者选择音乐和虚拟场景画面,场景虚拟模块营造出相应的虚拟场景,帮助患者进行放松,提高后续评估的准确性和康复的疗效,具体为:
场景虚拟模块在评估或者训练前半小时由用户选择轻音乐和“高山”、“流水”等场景画面,让用户彻底放松,提高后续评估的准确性和康复的疗效。
S3、认知评估与运动评估,具体为:
通过VR设备,对用户进行认知评估测验;VR设备向患者发出进行特定运动的提示,患者跟随指导进行特定运动,外部装置感应器收集患者运动信息,评估模块和分析模块根据认知评估测验和运动信息得出患者状态指数;
所述状态指数用于确定所述患者的整体认知和运动功能,具体为:
当状态指数小于预设阈值时,则确定患者的状态为差;
当状态指数等于预设阈值时,则确定患者的状态为良;
当状态指数大于预设阈值时,则确定患者的状态为优。
在本实施例中,所述认知评估根据MDS轻度认知障碍诊断标准按照量表的评估方案执行;
在本实施例中,所述认知评估测验具体包括全面认知功能测验(MoCA、PD-CRS、SCOPA-COG、MDRS、MMSE)、注意力及工作记忆(WAIS-IV字母数字排序、WAIS-IV编码、连线测验A、数字广度倒推和数字排序、字色干扰测验)、执行功能(威斯康辛卡片分类测验、伦敦塔测验、语言流畅性测验)、语言(WAIS-IV相似测验、对立命名任务)、记忆力(Rey听觉词语学习测验、霍普金斯词语学习测验、韦氏记忆量表唱Ⅳ逻辑记忆分测验、BVMT-R)以及视空间能力(Benton直线定向判断、Hooper视觉组织测验、时钟复制),其中,全面认知功能测验为必须完成的测验,注意力及工作记忆、执行功能、语言、记忆力以及视空间能力随机完成每一认知域中的两项测试;
在本实施例中,进行认知评估测验时,所述注意力及工作记忆、执行功能、语言、记忆力以及视空间能力五项认知域中,每项各两项测试,共十项测试,超过两项测试异常即诊断为轻度认知障碍,并根据每一认知域测试结果评估患者具体哪一认知域受损及受损程度,进而决策模块根据患者特定的认知域制定相应认知域的治疗方案。
在本实施例中,所述运动评估具体为VR设备向患者发出进行简单运动的提示,患者跟随指导进行简单运动,简单运动包括双手轮替动作、捏指动作、手掌运动、前臂回旋运动、脚趾拍地运动等,测试前VR设备内会产生虚拟人物进行示范,并提出动作完成的要求。
S4、制定康复治疗方案,根据评估报告,策略模块制定相应的治疗方案;
S5、进行康复治疗,训练模块执行策略模块制定的治疗方案,通过VR设备对用户进行康复治疗;
S6、治疗后评估,当一次治疗疗程结束后,评估模块再次结合采集数据对用户进行认知评估和运动评估,中央处理器分析模块结合患者历史治疗记录,分析得出病情“好转”或者“平稳”或者“加重”的结论,并将结论上传至用户端,策略模块根据结论进行治疗方案调整。
还需要说明的是,在本说明书中,诸如术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其他实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (10)
1.基于VR的帕金森病轻度认知障碍的诊断康复***,其特征在于,包括用户端、VR设备、VR设备控制模块、外带装置感应器以及中央处理器;所述VR设备控制模块与外带装置感应器通信连接,所述中央处理器分别与VR设备控制模块、外带装置感应器以及用户端通信连接;
所述VR设备控制模块用于控制VR设备,向VR设备提供营造虚拟场景、人物,进行认知行为治疗;
所述外带装置感应器用于监测、记录患者运动状态、运动信息以及交互数据,帮助患者进行人机交互;
所述中央处理器用于评估、分析患者的病情,制订训练康复方案,记录各项数据,并控制康复***整体的工作。
2.根据权利要求1所述的基于VR的帕金森病轻度认知障碍的诊断康复***,其特征在于,所述VR设备控制模块具体包括场景虚拟模块、虚拟人模块以及人机交互模块;
所述场景虚拟模块用于提供多维虚拟场景,营造沉浸式交互环境;
所述虚拟人模块用于提供交互的虚拟人物角色,设置虚拟场景故事中人物的密度、出现时间、人物关系以及行为,设置虚拟人物的各向属性,选择作为评估者或训练师角色;
所述人机交互模块用于进行语言人机交互和操作人机交互。
3.根据权利要求2所述的基于VR的帕金森病轻度认知障碍的诊断康复***,其特征在于,所述人机交互模块具体包括语言交互模块以及操作交互模块;
所述语言交互模块,用于在VR设备接收到患者语音后,通过语音识别将语音转换为文本,保留语速、音量以及停顿特征信息,从文本中理解用户意图,并通过对话管理决策接下来的动作,更新对话状态,最后将决策后的动作生成为回复给用户的文本,通过语音合成将回复给用户的文本转换为语音,完成一次语言交互;
所述操作交互模块,用于在外带装置感应器采集到患者的操作信息后,将操作信息上传至中央处理器,中央处理器处理患者才做信息。
4.根据权利要求1所述的基于VR的帕金森病轻度认知障碍的诊断康复***,其特征在于,所述中央处理器具体包括评估模块、分析模块、决策模块、训练模块以及存储模块;
所述评估模块用于评估和获取认知样本数据及对应的标签,并基于所述认知样本数据提取认知样本特征向量;
所述分析模块用于将所述认知样本特征向量及对应的标签对患者的运动功能和认知功能进行评估,获得用户的认知损伤和运动功能评估报告,并将本次训练后评估的报告和上次评分进行比较分析,得到患者病情变化趋势;
所述决策模块用于基于得到的用户评估报告,制定相应的认知行为疗法方案;
所述训练模块用于执行决策模块制定的训练方案,与VR设备控制模块进行交互联动;
所述存储模块用于储存患者的历史评估、分析、决策以及训练记录数据。
5.根据权利要求4所述的基于VR的帕金森病轻度认知障碍的诊断康复***,其特征在于,所述用户端包括患者用户端和医生用户端,所述患者用户端用于患者及其家属实时查看病情并与医生进行交流,所述医生用户端用于与患者进行交流,管理患者数据,根据情况调整患者治疗方案;
所述中央处理器还包括警报模块,用于实时监测患者是否发生异常,异常时,向患者用户端和医生用户端发送警报。
6.根据权利要求2所述的基于VR的帕金森病轻度认知障碍的诊断康复***,其特征在于,所述外部感应装置包括头部以及四肢的感应环,患者通过感应环与VR设备进行操作人机交互。
7.基于权利要求1所述的诊断康复***的诊断康复方法,其特征在于,包括以下步骤:
患者佩戴并启动VR设备、外部装置感应器,设置VR设备的语言;
进行评估前放松,在评估前由患者选择音乐和虚拟场景画面,场景虚拟模块营造出相应的虚拟场景,帮助患者进行放松,提高后续评估的准确性和康复的疗效;
认知评估与运动评估,通过VR设备,对用户进行认知评估测验;VR设备向患者发出进行特定运动的提示,患者跟随指导进行特定运动,外部装置感应器收集患者运动信息,评估模块和分析模块根据认知评估测验和运动信息得出患者状态指数;
制定康复治疗方案,根据评估测验的结果,决策模块制定相应的认知治疗方案;
进行康复治疗,训练模块执行策略模块制定特定认知域的治疗方案,通过VR设备对用户进行康复治疗;
治疗后评估,当一次治疗疗程结束后,评估模块再次结合采集数据对用户进行认知评估和运动评估,中央处理器分析模块结合患者历史治疗记录,分析得出病情好转或平稳或加重的结论,并将结论上传至用户端,策略模块根据结论进行治疗方案调整。
8.根据权利要求7所述的诊断康复方法,其特征在于,所述认知评估根据MDS轻度认知障碍诊断标准按照量表的评估方案执行;
所述认知评估测验具体包括全面认知功能测验、注意力及工作记忆、执行功能、语言、记忆力以及视空间能力,其中,全面认知功能测验为必须完成的测验,注意力及工作记忆、执行功能、语言、记忆力以及视空间能力随机完成其中两项。
9.根据权利要求8所述的诊断康复方法,其特征在于,所述制定康复治疗方案具体为:
所述注意力及工作记忆、执行功能、语言、记忆力以及视空间能力五项认知域中,每项各两项测试,共十项测试,超过两项测试异常即诊断为轻度认知障碍,并根据每一认知域测试结果评估患者具体哪一认知域受损及受损程度,进而决策模块根据患者特定的认知域制定相应认知域的治疗方案。
10.根据权利要求7所述的诊断康复方法,其特征在于,所述状态指数用于确定所述患者的整体认知和运动功能,具体为:
当状态指数小于预设阈值时,则确定患者的状态为差;
当状态指数等于预设阈值时,则确定患者的状态为良;
当状态指数大于预设阈值时,则确定患者的状态为优。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110375151.5A CN113160930A (zh) | 2021-04-08 | 2021-04-08 | 基于vr的帕金森病轻度认知障碍的诊断康复***及方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202110375151.5A CN113160930A (zh) | 2021-04-08 | 2021-04-08 | 基于vr的帕金森病轻度认知障碍的诊断康复***及方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN113160930A true CN113160930A (zh) | 2021-07-23 |
Family
ID=76889152
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202110375151.5A Pending CN113160930A (zh) | 2021-04-08 | 2021-04-08 | 基于vr的帕金森病轻度认知障碍的诊断康复***及方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN113160930A (zh) |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113517055A (zh) * | 2021-07-28 | 2021-10-19 | 西安中盛凯新技术发展有限责任公司 | 一种基于虚拟仿真3d技术的认知评估训练方法 |
CN113744838A (zh) * | 2021-09-08 | 2021-12-03 | 杭州康晟健康管理咨询有限公司 | 帕金森运动康复智能管理*** |
CN113782155A (zh) * | 2021-09-18 | 2021-12-10 | 安徽医科大学附属巢湖医院 | 一种艾滋病患者情绪及认知功能矫治*** |
CN114129852A (zh) * | 2021-12-02 | 2022-03-04 | 上海市第五人民医院 | 一种用于认知障碍的vr靶向训练*** |
CN114882972A (zh) * | 2022-04-13 | 2022-08-09 | 江苏医药职业学院 | 一种基于虚拟现实的老年人康复锻炼***及方法 |
CN114974517A (zh) * | 2022-08-01 | 2022-08-30 | 北京科技大学 | 基于模拟场景与交互任务设计的社交焦虑干预方法及*** |
CN115762709A (zh) * | 2022-11-09 | 2023-03-07 | 苏州智康机器人有限公司 | 一种桌面镜像康复机器人***及其应用方法 |
CN116168805A (zh) * | 2023-01-20 | 2023-05-26 | 北京瑞帆科技有限公司 | 一种用于认知训练的思维训练装置及认知训练*** |
CN116403680A (zh) * | 2023-01-20 | 2023-07-07 | 北京瑞帆科技有限公司 | 一种基于xr技术的认知刺激治疗*** |
CN118236041A (zh) * | 2024-05-27 | 2024-06-25 | 北京大学 | 认知功能评估方法、***、设备及可读存储介质 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108939249A (zh) * | 2018-07-20 | 2018-12-07 | 广州狄卡视觉科技有限公司 | 一种自闭症认知教育强化智能评估康复训练*** |
CN109215804A (zh) * | 2018-10-09 | 2019-01-15 | 华南理工大学 | 基于虚拟现实技术与生理参数检测的精神类疾病辅助诊断*** |
CN110827953A (zh) * | 2019-11-14 | 2020-02-21 | 复旦大学 | 基于vr的认知记忆力训练评估***、方法及存储介质 |
CN110853753A (zh) * | 2019-11-26 | 2020-02-28 | 上海健康医学院 | 一种认知功能障碍老人居家康复护理*** |
CN111063416A (zh) * | 2019-11-16 | 2020-04-24 | 嘉兴赛科威信息技术有限公司 | 一种基于虚拟现实的阿尔兹海默症康复训练及能力评估*** |
-
2021
- 2021-04-08 CN CN202110375151.5A patent/CN113160930A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN108939249A (zh) * | 2018-07-20 | 2018-12-07 | 广州狄卡视觉科技有限公司 | 一种自闭症认知教育强化智能评估康复训练*** |
CN109215804A (zh) * | 2018-10-09 | 2019-01-15 | 华南理工大学 | 基于虚拟现实技术与生理参数检测的精神类疾病辅助诊断*** |
CN110827953A (zh) * | 2019-11-14 | 2020-02-21 | 复旦大学 | 基于vr的认知记忆力训练评估***、方法及存储介质 |
CN111063416A (zh) * | 2019-11-16 | 2020-04-24 | 嘉兴赛科威信息技术有限公司 | 一种基于虚拟现实的阿尔兹海默症康复训练及能力评估*** |
CN110853753A (zh) * | 2019-11-26 | 2020-02-28 | 上海健康医学院 | 一种认知功能障碍老人居家康复护理*** |
Cited By (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113517055A (zh) * | 2021-07-28 | 2021-10-19 | 西安中盛凯新技术发展有限责任公司 | 一种基于虚拟仿真3d技术的认知评估训练方法 |
CN113744838A (zh) * | 2021-09-08 | 2021-12-03 | 杭州康晟健康管理咨询有限公司 | 帕金森运动康复智能管理*** |
CN113782155A (zh) * | 2021-09-18 | 2021-12-10 | 安徽医科大学附属巢湖医院 | 一种艾滋病患者情绪及认知功能矫治*** |
CN114129852A (zh) * | 2021-12-02 | 2022-03-04 | 上海市第五人民医院 | 一种用于认知障碍的vr靶向训练*** |
CN114882972A (zh) * | 2022-04-13 | 2022-08-09 | 江苏医药职业学院 | 一种基于虚拟现实的老年人康复锻炼***及方法 |
CN114882972B (zh) * | 2022-04-13 | 2023-03-24 | 江苏医药职业学院 | 一种基于虚拟现实的老年人康复锻炼***及方法 |
CN114974517A (zh) * | 2022-08-01 | 2022-08-30 | 北京科技大学 | 基于模拟场景与交互任务设计的社交焦虑干预方法及*** |
CN115762709A (zh) * | 2022-11-09 | 2023-03-07 | 苏州智康机器人有限公司 | 一种桌面镜像康复机器人***及其应用方法 |
CN116168805A (zh) * | 2023-01-20 | 2023-05-26 | 北京瑞帆科技有限公司 | 一种用于认知训练的思维训练装置及认知训练*** |
CN116403680A (zh) * | 2023-01-20 | 2023-07-07 | 北京瑞帆科技有限公司 | 一种基于xr技术的认知刺激治疗*** |
CN118236041A (zh) * | 2024-05-27 | 2024-06-25 | 北京大学 | 认知功能评估方法、***、设备及可读存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN113160930A (zh) | 基于vr的帕金森病轻度认知障碍的诊断康复***及方法 | |
US11468288B2 (en) | Method of and system for evaluating consumption of visual information displayed to a user by analyzing user's eye tracking and bioresponse data | |
JP6850026B2 (ja) | 運動教示システム及び運動教示方法 | |
CN111063416A (zh) | 一种基于虚拟现实的阿尔兹海默症康复训练及能力评估*** | |
Chen et al. | DeepFocus: Deep encoding brainwaves and emotions with multi-scenario behavior analytics for human attention enhancement | |
CN112328072A (zh) | 一种基于脑电和眼电的多模态字符输入***及方法 | |
CN111345823A (zh) | 一种远程运动康复方法、装置和计算机可读存储介质 | |
Lotte et al. | A BCI challenge for the signal processing community: considering the user in the loop | |
Wampfler et al. | Affective state prediction in a mobile setting using wearable biometric sensors and stylus | |
Wang et al. | Design on the control system of a gait rehabilitation training robot based on Brain-Computer Interface and virtual reality technology | |
Huang et al. | An improved model using convolutional sliding window-attention network for motor imagery EEG classification | |
Li et al. | Automatic diagnosis of depression based on facial expression information and deep convolutional neural network | |
CN115985462A (zh) | 儿童脑瘫康复益智训练*** | |
Gnjatović et al. | Electrophysiologically-inspired evaluation of dialogue act complexity | |
Griol et al. | Mobile Conversational Agents for stroke rehabilitation therapy | |
CN113616466B (zh) | 按摩方式生成方法、装置、电子设备和存储介质 | |
Yongmao et al. | Application of wearable devices based on deep learning algorithm in rope skipping data monitoring | |
Dang et al. | An interactive care system based on a depth image and EEG for aged patients with dementia | |
Ferrara et al. | Infrastructure for data management and user centered rehabilitation in Rehab@ Home project | |
Ji et al. | Diagnostic and rehabilitation system for Alzheimer’s disease based on virtual reality technology in rehabilitation rooms | |
Wang et al. | Design of sports rehabilitation training system based on EEMD algorithm | |
Xie et al. | New methods for VR rehabilitation intervention for children with cerebral palsy based on artificial intelligence | |
Yu et al. | Brain-inspired Computing Based on Machine Learning And Deep Learning: A Review | |
Sharma et al. | A Human Brain Disease Anatomy Framework on Communication and Rehabilitation | |
Yang | A Review of Emotion Recognition Using EEG Data and Machine Learning Techniques |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20210723 |