CN106873780A - 一种全息脑控机器人*** - Google Patents
一种全息脑控机器人*** Download PDFInfo
- Publication number
- CN106873780A CN106873780A CN201710129758.9A CN201710129758A CN106873780A CN 106873780 A CN106873780 A CN 106873780A CN 201710129758 A CN201710129758 A CN 201710129758A CN 106873780 A CN106873780 A CN 106873780A
- Authority
- CN
- China
- Prior art keywords
- module
- sensor
- robot
- brain
- alarm
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/014—Hand-worn input/output arrangements, e.g. data gloves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/015—Input arrangements based on nervous system activity detection, e.g. brain waves [EEG] detection, electromyograms [EMG] detection, electrodermal response detection
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B19/00—Alarms responsive to two or more different undesired or abnormal conditions, e.g. burglary and fire, abnormal temperature and abnormal rate of flow
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Dermatology (AREA)
- Neurosurgery (AREA)
- Neurology (AREA)
- General Health & Medical Sciences (AREA)
- Health & Medical Sciences (AREA)
- Biomedical Technology (AREA)
- Toys (AREA)
Abstract
本发明公开了一种全息脑控机器人***,包括机器人和可穿戴设备,机器人包括机器人本体及设置于机器人本体上的传感器、第一处理模块及第一通信模块;可穿戴设备包括刺激模块、头盔本体及设置于头盔本体上的第二处理模块、第二通信模块及用于采集用户脑电信号的脑电信号采集模块。本发明提供的全息脑控机器人***是一个较为成熟的全息脑控机器人***,实现了将脑机接口技术和机器人智能控制技术结合起来,另外,机器人还可以通过传感器将其所处的环境信息反馈给可穿戴设备,用户通过可穿戴设备及其中的刺激模块即可了解和感受机器人所处环境的变化,且还实现了对机器人进行脑控。
Description
技术领域
本发明涉及脑控技术领域,特别是涉及一种全息脑控机器人***。
背景技术
随着科技的飞速发展,脑机接口(BCI,Brain Computer Interface)技术得到了极大的发展。BCI技术是指在人或动物的大脑与外部设备间建立的直接连接通路。另外,随着电影《阿凡达》的上映及机器人的快速发展,全息脑控机器人***的创新概念被突破性地提出。各国正在研制将BCI技术、机器人智能控制技术和虚拟现实技术结合在一起所研发出来的全息脑控机器人***,这些技术目的在于通过可穿戴脑电设备,发送指令给机器人完成实验者要求的动作。然而现在还没有研制出较成熟的全息脑控机器人***。
因此,如何提供一种解决上述问题的全息脑控机器人***是本领域技术人员目前需要解决的问题。
发明内容
本发明的目的是提供一种全息脑控机器人***,实现了将脑机接口技术和机器人智能控制技术结合起来,另外,机器人还可以通过传感器将其所处的环境信息反馈给可穿戴设备,用户通过可穿戴设备及其中的刺激模块即可了解和感受机器人所处环境的变化,且还实现了对机器人进行脑控。
为解决上述技术问题,本发明提供了一种全息脑控机器人***,包括机器人和可穿戴设备,其中,所述机器人包括机器人本体及设置于所述机器人本体上的传感器、第一处理模块及第一通信模块;所述可穿戴设备包括刺激模块、头盔本体及设置于所述头盔本体上的第二处理模块、第二通信模块及用于采集用户脑电信号的脑电信号采集模块,其中:
所述传感器用于采集所述机器人本体所处环境的环境信息;
所述第一处理模块用于将所述环境信息通过所述第一通信模块传送至所述第二处理模块,还用于依据机器人指令控制所述机器人本体进行相应动作;
所述第二处理模块用于通过所述第二通信模块接收所述环境信息,并依据所述环境信息生成刺激指令,还用于依据接收刺激后的用户产生的所述脑电信号生成所述机器人指令;
所述刺激模块用于依据所述刺激指令对用户产生相应刺激。
优选地,所述传感器包括温度传感器和/或触觉传感器和/或声音传感器和/或摄像头,分别对应用于采集所述机器人本体所处环境的温度信息和/或外界给所述机器人本体施加的压力和/或声音和/或环境图像信息;
所述刺激指令相应地包括温度刺激指令和/或压力刺激指令和/或声音刺激指令和/或图像刺激指令;
所述刺激模块相应地包括手套和/或声音播放模块和/或显示模块;其中:
所述手套用于依据所述温度刺激指令和/或所述压力刺激指令对应产生与所述温度信息成线性关系的温度和/或与所述压力成线性关系的压力;
所述声音播放模块用于依据所述声音刺激指令播放所述声音;
所述显示模块用于依据所述图像刺激指令播放所述环境图像信息。
优选地,所述显示模块为VR眼镜。
优选地,所述传感器还包括红外传感器和/或烟雾传感器和/或煤气传感器,其中:
所述红外传感器用于采集所述机器人本体的预设范围内的人体发出的红外线;
所述烟雾传感器用于采集所述机器人本体所处环境中的烟雾信息;
所述煤气传感器用于采集所述机器人本体所处环境中的煤气信息;
所述第一处理模块还用于分别依据所述红外传感器发送的信息判断所述机器人本体的预设范围内是否有人存在,如果是,则生成第一报警信号;还用于判断所述烟雾信息是否超过烟雾安全阈值,如果是,则生成第二报警信号;还用于判断所述煤气信息是否超过煤气安全阈值,如果是,则生成第三报警信号;
所述全息脑控机器人***还对应包括第一报警模块和/或第二报警模块和/或第三报警模块,其中:
所述第一报警模块用于依据所述第一报警信号发出警报;
所述第二报警模块用于依据所述第二报警信号发出警报;
所述第三报警模块用于依据所述第三报警信号发出警报。
优选地,所述报警模块为声音报警模块或者所述显示模块或者终端设备。
优选地,所述全息脑控机器人***还包括设置于所述机器人本体上的步进电机,所述红外传感器设置于所述步进电机上,以便所述红外传感器在工作时可以旋转。
优选地,所述烟雾传感器包括离子式烟雾传感器和光电式烟雾传感器。
优选地,所述第一通信模块和所述第二通信模块均包括WiFi模块和/或蓝牙模块和/或GPRS模块和/或USB模块。
优选地,所述脑电信号采集模块包括:
电极,用于采集用户的脑电信号;
滤波模块,用于滤除所述脑电信号中的杂波;
放大电路,用于将滤波后的脑电信号放大到A/D转换电路的转换电平范围内;
所述A/D转换电路,用于将输入的脑电信号由模拟量转换成数字量,并将所述数字量的脑电信号传送至所述第一处理模块。
本发明提供了一种全息脑控机器人***,包括机器人和可穿戴设备,机器人包括机器人本体及设置于机器人本体上的传感器、第一处理模块及第一通信模块;可穿戴设备包括刺激模块、头盔本体及设置于头盔本体上的第二处理模块、第二通信模块及用于采集用户脑电信号的脑电信号采集模块,传感器用于采集机器人本体所处环境的环境信息;第一处理模块用于将环境信息通过第一通信模块传送至第二处理模块,还用于依据机器人指令控制机器人本体进行相应动作;第二处理模块用于通过第二通信模块接收环境信息,并依据环境信息生成刺激指令,还用于依据接收刺激后的用户产生的脑电信号生成机器人指令;刺激模块用于依据刺激指令对用户产生相应刺激。
可见,本发明提供的全息脑控机器人***是一个较为成熟的全息脑控机器人***,实现了将脑机接口技术和机器人智能控制技术结合起来,另外,机器人还可以通过传感器将其所处的环境信息反馈给可穿戴设备,用户通过可穿戴设备及其中的刺激模块即可了解和感受机器人所处环境的变化,且还实现了对机器人进行脑控。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对现有技术和实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的一种全息脑控机器人***的结构示意图。
具体实施方式
本发明的核心是提供一种全息脑控机器人***,实现了将脑机接口技术和机器人智能控制技术结合起来,另外,机器人还可以通过传感器将其所处的环境信息反馈给可穿戴设备,用户通过可穿戴设备及其中的刺激模块即可了解和感受机器人所处环境的变化,且还实现了对机器人进行脑控。
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参照图1,图1为本发明提供的一种全息脑控机器人***的结构示意图,该机器人***包括机器人1和可穿戴设备2,其中,机器人1包括机器人本体11及设置于机器人本体11上的传感器12、第一处理模块13及第一通信模块14;可穿戴设备2包括刺激模块25、头盔本体21及设置于头盔本体21上的第二处理模块23、第二通信模块22及用于采集用户脑电信号的脑电信号采集模块24,其中:
传感器12用于采集机器人本体11所处环境的环境信息;
第一处理模块13用于将环境信息通过第一通信模块14传送至第二处理模块23,还用于依据机器人1指令控制机器人本体11进行相应动作;
第二处理模块23用于通过第二通信模块22接收环境信息,并依据环境信息生成刺激指令,还用于依据接收刺激后的用户产生的脑电信号生成机器人指令;
刺激模块25用于依据刺激指令对用户产生相应刺激。
可以理解的是,全息是将机器人1所处环境参数信息反馈给用户,使用户能实时了解和感受机器人1所处环境的变化。为了实现该目的,本申请中在机器人本体11上设置了传感器12,传感器12采集环境中的环境信息,第一处理模块13将环境信息通过第一通信模块14传送至第二处理模块23,以便第二处理模块23生成相应的刺激指令,以控制刺激模块25对用户产生相应的刺激,从而使得用户了解和感受机器人1所处环境的变化。
另外,设置于可穿戴设备2上的脑电信号采集模块24还通过采集用户的脑电信号,并将脑电信号传送至第二处理模块23,第二处理模块23在接收到脑电信号后,解析脑电信号并依据解析后的脑电信号生成机器人指令,用以控制机器人本体11进行相应动作,从而实现了脑控。
这里的传感器12可以实时地采集外界的环境信息,也可以是接收到指令(例如人脑通过第二处理模块23生成的指令)后再开始采集外界的环境信息。
对于这里提到的传感器12的个数及类型不做特别的限定,根据实际情况来定。
本申请中的可穿戴设备2还包括头盔本体21,第二处理模块23、第二通信模块22及脑电信号采集模块24设置在头盔本体21上,实现了脑控***的可穿戴化。
作为一种优选地实施例,这里的第一处理模块13和第二处理模块23均可以采用MSP430主控芯片最小***。当然,这里的第一处理模块13和第二处理模块23还可以采用其他类型的芯片,本发明在此不做特别的限定,根据实际情况来定。
作为一种优选地实施例,传感器12包括温度传感器和/或触觉传感器和/或声音传感器和/或摄像头,分别对应用于采集机器人本体11所处环境的温度信息和/或外界给机器人本体11施加的压力和/或声音和/或环境图像信息;
刺激指令相应地包括温度刺激指令和/或压力刺激指令和/或声音刺激指令和/或图像刺激指令;
刺激模块25相应地包括手套和/或声音播放模块和/或显示模块;其中:
手套用于依据温度刺激指令和/或压力刺激指令对应产生与温度信息成线性关系的温度和/或与压力成线性关系的压力;
声音播放模块用于依据声音刺激指令播放声音;
显示模块用于依据图像刺激指令播放环境图像信息。
为了将机器人1所处的环境参数信息较全面地反馈给用户,使得用户能够更加全面的了解和感受机器人1所处环境的变化。这里的传感器12可包括温度传感器和/或触觉传感器和/或声音传感器和/或摄像头。
具体地:
1)温度传感器
机器人1通过温度传感器采集外界温度信息,并发送给第一处理模块13,第一处理模块13再通过第一通信模块14将外界温度信息传送至可穿戴设备2中的第一处理模块13,由第一处理模块13依据温度信息生成温度刺激指令刺激手套产生温度来刺激用户,从而达到对人体反馈温度的目的。
需要说明的是,手套会产生与温度信息成线性关系的温度,这里手套产生的温度和外界温度可以是1:1的关系,也可以是2:1的关系,本发明在此不做特别的限定,但因为是直接刺激用户,因此,可以设定手套产生的温度范围在0℃-39℃的范围内,以避免对人体造成伤害。
作为全息的重要组成部分之一,这里的温度传感器可以使用DS18B20温度传感器。DS18B20可直接连接一个弱上拉电阻至IO口并输出温度的数字信息,大大节省了第一处理模块13的资源,其测量温度范围为-55℃-125℃,测量精度为±0.5℃。
2)触觉传感器
触觉传感模块的原理是在机器人本体11的外表加上触觉传感器,机器人1在拿东西或外表受到触摸等压力时会产生相应的数据信息,产生的数据信息发送给第一处理模块13,经第一处理模块13再通过第一通信模块14发送给可穿戴设备2,可穿戴设备2再根据接受的数据通过手套对人体做出相应的刺激,一方面会让人感受到机器人1所处环境给机器人1的触觉刺激,另一方面人脑会根据刺激发出指令,控制机器人本体11的下一步行动。如此往复,达到机器人1的触觉控制与反馈。
触觉传感器中的敏感元件为FSR力敏电阻。FSR是一种聚合体薄膜力敏电阻材料,这种材料对作用于其表面的正压力十分敏感,其电阻值随着作用于表面的压力增大而减小。与其它半导体材料相比,FSR力敏电阻材料在工作温度(-30℃~70℃)下,无温度漂移现象。此外,FSR力敏电阻材料还具有分辨率高、响应速度快的特点,对外加作用力的响应时间仅为2ms。
另外,这里的触觉传感器可以为6个,在实际应用中,可以将触觉传感器设置在机器人本体11的手或者手臂上,当然,还可以设置在机器人本体11的其他地方,本发明在此不做特别的限定。
3)声音传感器
声音传感器打开后会将机器人1所处环境的声音信号通过第一通信模块14发送给可穿戴设备2,可穿戴设备2可以通过声音播放模块播放声音,从而使人获取机器人1所处环境的声音信号。
这里可以采用LD3320语音处理芯片来搭建声音播放模块,LD3320集成了语音识别处理器、模数转换器AD、数模转换器DA、麦克风接口和声音输出接口。该芯片无需外接辅助芯片,结合语音算法和概率论实现语音识别/声控和人机对话功能。该专用芯片应用了语音识别ASR技术,是基于关键词语识别的技术,只需要设定好要识别的关键词语列表,并把这些关键词语以字符形式传送到LD3320芯片内部,就可以对声音进行采集识别。
该模块能够实现机器人1对语音环境的采集、处理、传输及音频输出等功能。在实际应用中,可穿戴设备2还可以包括麦克风,机器人1上还可以包括声音播放器,用户可以通过对可穿戴设备2上的麦克风说话,进而可在机器人1上的声音播放器上实现音频输出。机器人1的声音传感器采集到环境声音可在可穿戴设备2上的声音播放模块播出,实现了人与机器人1的语音环境共享,是全息***一个非常重要的模块。
另外,这里的声音播放模块可以为耳机,当然还可以为其他类型的声音播放装置。
4)摄像头
为方面用户实时了解机器人1所在环境的图像状况,传感器还包括摄像头,摄像头对机器人1所在环境进行摄像,并将得到的图像通过第一通信模块14传送至可穿戴设备2上的显示模块。
作为一种优选地实施例,显示模块为VR眼镜。
为了提高用户的用户体验,这里的显示模块可以VR眼镜,当然,这里的显示模块还可以为其他类型的显示模块,本发明在此不做特别的限定。
作为一种优选地实施例,传感器12还包括基于Gentle Adaboost的人脸检测算法的视觉传感器模块。
视觉传感器模块会将主要实现人脸的识别及通过对人脸图像的信息采集并发送给第一处理模块13,在第一处理模块13上进行算法处理,来进行人脸识别,第一处理模块13还可以将识别的人脸通过第一通信模块14发送至第二处理模块23,反馈给用户。
作为一种优选地实施例,传感器12还包括红外传感器和/或烟雾传感器和/或煤气传感器,其中:
红外传感器用于采集机器人本体11的预设范围内的人体发出的红外线;
烟雾传感器用于采集机器人本体11所处环境中的烟雾信息;
煤气传感器用于采集机器人本体11所处环境中的煤气信息;
第一处理模块13还用于分别依据红外传感器发送的信息判断器人本体11的预设范围内是否有人存在,如果是,则生成第一报警信号;还用于判断烟雾信息是否超过烟雾安全阈值,如果是,则生成第二报警信号;还用于判断煤气信息是否超过煤气安全阈值,如果是,则生成第三报警信号;
全息脑控机器人***还对应包括第一报警模块和/或第二报警模块和/或第三报警模块,其中:
第一报警模块用于依据第一报警信号发出警报;
第二报警模块用于依据第二报警信号发出警报;
第三报警模块用于依据第三报警信号发出警报。
为了提高全息脑控机器人***的实用性,这里的传感器12还可以包括红外传感器和/或烟雾传感器和/或煤气传感器等安防类传感器。
具体地:
1)红外传感器
可以理解的是,红外传感器可以敏锐地接收人体辐射出的特定波长的红外线(大约10um),而对其他波长的光线具有过滤作用。机器人1利用本模块,可以判断是否有人进入预设范围,并将信息传递到第一处理模块13,由第一处理模块13第一时间处理,第一处理模块13依据红外传感器12发送的信息判断机器人本体11的预设范围内是否有人存在,如果是,则生成第一报警信号,以控制第一报警模块报警。
这里的红外传感器采用PIR406B热释电红外探头,具有窗口大,感应灵敏,可上下左右四面探测的优点。红外菲涅尔透镜加以辅助,可将探测距离增加到27米。
作为一种优选地实施例,全息脑控机器人***还包括设置于机器人本体11上的步进电机,红外传感器设置于步进电机上,以便红外传感器在工作时可以旋转。
本申请中,将红外传感器设置于步进电机,让红外传感器在工作时可以旋转,这样克服了传统红外传感器检测不到径向移动或静止的人的缺点。
红外传感器的接入非常简单,从电源电路的12V取供电电源。当恒定的红外辐射照射在探测器上时,热释电晶体温度不变,晶体对外呈电中性,探测器没有电信号输出,因而恒定的红外辐射不能被检测到。当交变的红外线照射到晶体表面时,晶体温度迅速变化,这时才发生电荷的变化,从而形成一个明显的外电场。外电场经过滤波电路的滤波后,进入一级放大电路,放大倍数可以为18倍,接着进入二级放大电路,放大倍数可以为100倍。输出电信号经过双限电压比较器比较过后,如果超过阈值,电路就会输出相应的高电平,从而让第一处理模块13识别到有报警信号产生。
2)烟雾传感器
烟雾传感器用来采集烟雾信息,并将烟雾信息传送至第一处理模块13,第一处理模块13再判断烟雾信息对应的烟雾值是否超过烟雾安全阈值,如果是,则控制第二报警模块报警,以提醒人们灭火。
作为一种优选地实施例,烟雾传感器包括离子式烟雾传感器和光电式烟雾传感器。
本申请中,这里的烟雾传感器为双传感器,包括离子烟雾传感器和光电式烟雾传感器,其中,离子烟雾报警器对微小的烟雾粒子的感应要灵敏一些,对各种烟能均衡响应;而前向式光电烟雾报警器对稍大的烟雾粒子的感应较灵敏,对灰烟、黑烟响应差些。当发生熊熊大火时,空气中烟雾的微小粒子较多,而闷烧的时候,空气中稍大的烟雾粒子会多一些。如果火灾发生后,产生了大量的烟雾的微小粒子,离子烟雾报警器会比光电烟雾报警器先报警。另一类闷烧火灾发生后,产生了大量的稍大的烟雾粒子,光电烟雾报警器会比离子烟雾报警器先报警。
可见,本申请综合运用离子式烟雾传感器和光电式烟雾传感器,大大提高了烟雾模块的可靠性,能良好地应对火灾蔓延和闷烧式火灾的情况。
3)煤气传感器
煤气传感器主要使用了MQ-5煤气传感器。输出电压值与预定值通过比较电路进行比较,若超过阈值则输出报警信号。
另外,为避免在直接使煤气传感器时,因烟雾传感器受温湿度的影响较大,造成误报率较高的问题。本模块利用热敏电阻对MQ-5煤气传感器进行温度补偿,使得传感器具有良好的线性输出。具体原理为:本模块利用热敏电阻与另一定值电阻并联,改变MQ-5煤气传感器的参考值,进而对MQ-5煤气传感器进行正温度系数的温度补偿,使得传感器12具有良好的线性输出。
另外,由于传感器12在开机后需要一段时间预热,在此期间容易发生误报,因此添加了防止初始动作引发报警的电路,用以减小煤气报警器的误报率。
需要说明的是,这里的第一报警模块、第二报警模块及第三报警模块可以设置在可穿戴设备2上,可以为蜂鸣器或者显示模块,也可以为终端设备例如手机等。
作为一种优选地实施例,报警模块为声音报警模块或者显示模块或者终端设备。
需要说明的是,这里的第一报警模块、第二报警模块及第三报警模块可以为声音报警模块(如蜂鸣器)或者显示模块,还可以为终端设备例如手机,其中,声音报警模块及显示模块可以设置在可穿戴设备2上。
作为一种优选地实施例,第一通信模块14和第二通信模块22均包括WiFi模块和/或蓝牙模块和/或GPRS模块和/或USB模块。
在实际应用中,对于传输不同类型的数据或者在不同的环境中可以选用不同的模块来传输数据。另外,这里的通信模块还可以为其他类型的通信模块,本发明在此不做特别的限定。
作为一种优选地实施例,脑电信号采集模块24包括:
电极,用于采集用户的脑电信号;
滤波模块,用于滤除脑电信号中的杂波;
放大电路,用于将滤波后的脑电信号放大到A/D转换电路的转换电平范围内;
A/D转换电路,用于将输入的脑电信号由模拟量转换成数字量,并将数字量的脑电信号传送至第一处理模块13。
需要说明的是,脑电信号的特点主要有三个:一是信号微弱,一般在2-200μV或者更小;二是频率主要集中于低频段,一般在40Hz范围内;三是信号的源阻抗高,易于受外界干扰。
本申请中,为了精确的获取脑电信号,脑电信号的采集是通过专用的生物传感器——电极从人体头部提取。由于脑电信号的提取是在强干扰的背景下进行,所以,需要对采集到的脑电信号进行滤波,另外,还需要对滤波后的脑电信号进行放大,放大到A/D转换电路适合的电平转换范围内。
这里的放大电路一般采用差动输入的低噪声前置放大器并采取滤波、屏蔽等提高共模抑制比的措施来获取脑电波。
综上,在本发明中,通过机器人本体11上各传感器12来采集视觉,听觉,触觉,温度等环境信息,并转化为数据发送给可穿戴脑电设备。可穿戴设备2上,通过耳机、显示模块、手套等来将环境信息反馈给操作者,从而实现将机器人1所处环境参数信息较全面地反馈给操作者,使操作者能实时了解和感受机器人1所处环境变化的效果,即实现全息脑控机器人***。
另外,可穿戴脑电设备集成了脑电信号采集、脑电信号解析处理并转化为控制指令、控制指令发送的功能,而不需要进一步通过计算机处理和解析脑电信号,从而实现脑控***的可穿戴化。
本发明提供了一种全息脑控机器人***,包括机器人和可穿戴设备,机器人包括机器人本体及设置于机器人本体上的传感器、第一处理模块及第一通信模块;可穿戴设备包括刺激模块、头盔本体及设置于头盔本体上的第二处理模块、第二通信模块及用于采集用户脑电信号的脑电信号采集模块,传感器用于采集机器人本体所处环境的环境信息;第一处理模块用于将环境信息通过第一通信模块传送至第二处理模块,还用于依据机器人指令控制机器人本体进行相应动作;第二处理模块用于通过第二通信模块接收环境信息,并依据环境信息生成刺激指令,还用于依据接收刺激后的用户产生的脑电信号生成机器人指令;刺激模块用于依据刺激指令对用户产生相应刺激。
可见,本发明提供的全息脑控机器人***是一个较为成熟的全息脑控机器人***,实现了将脑机接口技术和机器人智能控制技术结合起来,另外,机器人还可以通过传感器将其所处的环境信息反馈给可穿戴设备,用户通过可穿戴设备及其中的刺激模块即可了解和感受机器人所处环境的变化,且还实现了对机器人进行脑控。
需要说明的是,在本说明书中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
对所公开的实施例的上述说明,使本领域专业技术人员能够实现或使用本发明。对这些实施例的多种修改对本领域的专业技术人员来说将是显而易见的,本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下,在其他实施例中实现。因此,本发明将不会被限制于本文所示的这些实施例,而是要符合与本文所公开的原理和新颖特点相一致的最宽的范围。
Claims (9)
1.一种全息脑控机器人***,其特征在于,包括机器人和可穿戴设备,其中,所述机器人包括机器人本体及设置于所述机器人本体上的传感器、第一处理模块及第一通信模块;所述可穿戴设备包括刺激模块、头盔本体及设置于所述头盔本体上的第二处理模块、第二通信模块及用于采集用户脑电信号的脑电信号采集模块,其中:
所述传感器用于采集所述机器人本体所处环境的环境信息;
所述第一处理模块用于将所述环境信息通过所述第一通信模块传送至所述第二处理模块,还用于依据机器人指令控制所述机器人本体进行相应动作;
所述第二处理模块用于通过所述第二通信模块接收所述环境信息,并依据所述环境信息生成刺激指令,还用于依据接收刺激后的用户产生的所述脑电信号生成所述机器人指令;
所述刺激模块用于依据所述刺激指令对用户产生相应刺激。
2.如权利要求1所述的全息脑控机器人***,其特征在于,所述传感器包括温度传感器和/或触觉传感器和/或声音传感器和/或摄像头,分别对应用于采集所述机器人本体所处环境的温度信息和/或外界给所述机器人本体施加的压力和/或声音和/或环境图像信息;
所述刺激指令相应地包括温度刺激指令和/或压力刺激指令和/或声音刺激指令和/或图像刺激指令;
所述刺激模块相应地包括手套和/或声音播放模块和/或显示模块;其中:
所述手套用于依据所述温度刺激指令和/或所述压力刺激指令对应产生与所述温度信息成线性关系的温度和/或与所述压力成线性关系的压力;
所述声音播放模块用于依据所述声音刺激指令播放所述声音;
所述显示模块用于依据所述图像刺激指令播放所述环境图像信息。
3.如权利要求2所述的全息脑控机器人***,其特征在于,所述显示模块为VR眼镜。
4.如权利要求2所述的全息脑控机器人***,其特征在于,所述传感器还包括红外传感器和/或烟雾传感器和/或煤气传感器,其中:
所述红外传感器用于采集所述机器人本体的预设范围内的人体发出的红外线;
所述烟雾传感器用于采集所述机器人本体所处环境中的烟雾信息;
所述煤气传感器用于采集所述机器人本体所处环境中的煤气信息;
所述第一处理模块还用于分别依据所述红外传感器发送的信息判断所述机器人本体的预设范围内是否有人存在,如果是,则生成第一报警信号;还用于判断所述烟雾信息是否超过烟雾安全阈值,如果是,则生成第二报警信号;还用于判断所述煤气信息是否超过煤气安全阈值,如果是,则生成第三报警信号;
所述全息脑控机器人***还对应包括第一报警模块和/或第二报警模块和/或第三报警模块,其中:
所述第一报警模块用于依据所述第一报警信号发出警报;
所述第二报警模块用于依据所述第二报警信号发出警报;
所述第三报警模块用于依据所述第三报警信号发出警报。
5.如权利要求4所述的全息脑控机器人***,其特征在于,所述报警模块为声音报警模块或者所述显示模块或者终端设备。
6.如权利要求4所述的全息脑控机器人***,其特征在于,所述全息脑控机器人***还包括设置于所述机器人本体上的步进电机,所述红外传感器设置于所述步进电机上,以便所述红外传感器在工作时可以旋转。
7.如权利要求4所述的全息脑控机器人***,其特征在于,所述烟雾传感器包括离子式烟雾传感器和光电式烟雾传感器。
8.如权利要求1所述的全息脑控机器人***,其特征在于,所述第一通信模块和所述第二通信模块均包括WiFi模块和/或蓝牙模块和/或GPRS模块和/或USB模块。
9.如权利要求1-8任一项所述的全息脑控机器人***,其特征在于,所述脑电信号采集模块包括:
电极,用于采集用户的脑电信号;
滤波模块,用于滤除所述脑电信号中的杂波;
放大电路,用于将滤波后的脑电信号放大到A/D转换电路的转换电平范围内;
所述A/D转换电路,用于将输入的脑电信号由模拟量转换成数字量,并将所述数字量的脑电信号传送至所述第一处理模块。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710129758.9A CN106873780A (zh) | 2017-03-06 | 2017-03-06 | 一种全息脑控机器人*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710129758.9A CN106873780A (zh) | 2017-03-06 | 2017-03-06 | 一种全息脑控机器人*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106873780A true CN106873780A (zh) | 2017-06-20 |
Family
ID=59169630
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710129758.9A Pending CN106873780A (zh) | 2017-03-06 | 2017-03-06 | 一种全息脑控机器人*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106873780A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107538492A (zh) * | 2017-09-07 | 2018-01-05 | 福物(上海)机器人科技有限公司 | 移动机器人的智能操控***、方法及智能学习方法 |
CN107767617A (zh) * | 2017-10-25 | 2018-03-06 | 中州大学 | 一种基于云端服务平台的智能家居安防*** |
CN108829255A (zh) * | 2018-06-22 | 2018-11-16 | 四川省有份儿智慧科技有限公司 | 一种基于脑电波采集技术的实时自适应全息交互*** |
CN109483572A (zh) * | 2018-10-15 | 2019-03-19 | 昆明理工大学 | 一种基于家庭智能服务机器人控制***及其控制方法 |
CN113084843A (zh) * | 2021-04-29 | 2021-07-09 | 上海建桥学院有限责任公司 | 一种脑电波服务机器人装置 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101032397A (zh) * | 2007-04-05 | 2007-09-12 | 上海交通大学 | 便携式无线通信多通道脑电数据采集仪 |
CN103885445A (zh) * | 2014-03-20 | 2014-06-25 | 浙江大学 | 一种脑控动物机器人***以及动物机器人的脑控方法 |
CN203802460U (zh) * | 2014-01-09 | 2014-09-03 | 昆明理工大学 | 一种脑机接口脑电头盔 |
CN105171752A (zh) * | 2015-09-10 | 2015-12-23 | 刘玉伟 | 机器人***及其方法 |
CN105411580A (zh) * | 2015-10-27 | 2016-03-23 | 中国航天员科研训练中心 | 一种基于触听觉诱发电位的脑控轮椅*** |
US20160341540A1 (en) * | 2015-05-21 | 2016-11-24 | Ascentia Imaging, Inc. | Angular localization system and method |
-
2017
- 2017-03-06 CN CN201710129758.9A patent/CN106873780A/zh active Pending
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101032397A (zh) * | 2007-04-05 | 2007-09-12 | 上海交通大学 | 便携式无线通信多通道脑电数据采集仪 |
CN203802460U (zh) * | 2014-01-09 | 2014-09-03 | 昆明理工大学 | 一种脑机接口脑电头盔 |
CN103885445A (zh) * | 2014-03-20 | 2014-06-25 | 浙江大学 | 一种脑控动物机器人***以及动物机器人的脑控方法 |
US20160341540A1 (en) * | 2015-05-21 | 2016-11-24 | Ascentia Imaging, Inc. | Angular localization system and method |
CN105171752A (zh) * | 2015-09-10 | 2015-12-23 | 刘玉伟 | 机器人***及其方法 |
CN105411580A (zh) * | 2015-10-27 | 2016-03-23 | 中国航天员科研训练中心 | 一种基于触听觉诱发电位的脑控轮椅*** |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107538492A (zh) * | 2017-09-07 | 2018-01-05 | 福物(上海)机器人科技有限公司 | 移动机器人的智能操控***、方法及智能学习方法 |
CN107767617A (zh) * | 2017-10-25 | 2018-03-06 | 中州大学 | 一种基于云端服务平台的智能家居安防*** |
CN108829255A (zh) * | 2018-06-22 | 2018-11-16 | 四川省有份儿智慧科技有限公司 | 一种基于脑电波采集技术的实时自适应全息交互*** |
CN109483572A (zh) * | 2018-10-15 | 2019-03-19 | 昆明理工大学 | 一种基于家庭智能服务机器人控制***及其控制方法 |
CN109483572B (zh) * | 2018-10-15 | 2021-09-07 | 昆明理工大学 | 一种基于家庭智能服务机器人控制***及其控制方法 |
CN113084843A (zh) * | 2021-04-29 | 2021-07-09 | 上海建桥学院有限责任公司 | 一种脑电波服务机器人装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106873780A (zh) | 一种全息脑控机器人*** | |
Singh et al. | Sensor technologies for fall detection systems: A review | |
Fan et al. | Robust unobtrusive fall detection using infrared array sensors | |
CN106020671A (zh) | 指纹传感器响应灵敏度的调节方法和装置 | |
CN111666549A (zh) | 一种智能耳机及其用户识别方法 | |
CN205338960U (zh) | 移动终端及移动终端*** | |
CN106551679A (zh) | 一种移动终端及基于移动终端的测温方法 | |
CN105809444B (zh) | 一种高安全性的支付***及方法 | |
CN207946657U (zh) | 一种基于视力保护***的电子手表 | |
CN110210395A (zh) | 静脉图像采集方法及相关产品 | |
CN105890770B (zh) | 基于热释电技术的人体状态检测装置的人体状态检测方法 | |
CN105809442B (zh) | 一种高安全性的支付***及方法 | |
CN108683790A (zh) | 语音处理方法及相关产品 | |
CN108600886A (zh) | 紫外线检测方法及相关产品 | |
Fan et al. | Fall detection with unobtrusive infrared array sensors | |
Zhen et al. | Wearable preimpact fall detector using SVM | |
CN105894731A (zh) | 一种用于人体的监测和报警装置 | |
CN204293137U (zh) | 一种人体健康信息检测装置 | |
CN110099346A (zh) | 一种基于助听器的耳道内心率测量方法 | |
US10082423B2 (en) | Method, electronic device and system for monitoring a skin surface condition | |
CN207771836U (zh) | 多功能健康管理机器人 | |
CN206117803U (zh) | 一种情景模式调节装置和电子设备 | |
CN206861817U (zh) | 空气净化器 | |
Bonde et al. | Deskbuddy: an office activity detection system: demo abstract | |
CN115299943A (zh) | 一种情绪监测方法及其装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170620 |