CN101609618A - 基于空间编码的实时手语交流*** - Google Patents
基于空间编码的实时手语交流*** Download PDFInfo
- Publication number
- CN101609618A CN101609618A CNA2008101635548A CN200810163554A CN101609618A CN 101609618 A CN101609618 A CN 101609618A CN A2008101635548 A CNA2008101635548 A CN A2008101635548A CN 200810163554 A CN200810163554 A CN 200810163554A CN 101609618 A CN101609618 A CN 101609618A
- Authority
- CN
- China
- Prior art keywords
- sign language
- space
- information
- palm
- hand
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 230000009471 action Effects 0.000 claims abstract description 16
- 230000000007 visual effect Effects 0.000 claims description 26
- 238000000034 method Methods 0.000 claims description 24
- 240000006409 Acacia auriculiformis Species 0.000 claims description 13
- 210000000988 bone and bone Anatomy 0.000 claims description 13
- 210000005069 ears Anatomy 0.000 claims description 13
- 239000000284 extract Substances 0.000 claims description 10
- 238000005452 bending Methods 0.000 claims description 8
- 238000000605 extraction Methods 0.000 claims description 4
- 210000001145 finger joint Anatomy 0.000 claims description 4
- 230000036541 health Effects 0.000 claims description 4
- 239000011159 matrix material Substances 0.000 claims description 4
- 241000905957 Channa melasoma Species 0.000 claims description 3
- 241001269238 Data Species 0.000 claims description 3
- 238000013480 data collection Methods 0.000 claims description 3
- 210000000624 ear auricle Anatomy 0.000 claims description 3
- 230000008569 process Effects 0.000 claims description 3
- 210000003811 finger Anatomy 0.000 description 8
- 206010011878 Deafness Diseases 0.000 description 6
- 238000010586 diagram Methods 0.000 description 6
- 238000000926 separation method Methods 0.000 description 4
- 230000003068 static effect Effects 0.000 description 4
- 210000003128 head Anatomy 0.000 description 3
- 238000006243 chemical reaction Methods 0.000 description 2
- 150000001875 compounds Chemical class 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000001932 seasonal effect Effects 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 206010048865 Hypoacusis Diseases 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 210000002805 bone matrix Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000012512 characterization method Methods 0.000 description 1
- 208000030251 communication disease Diseases 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000007812 deficiency Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 210000005224 forefinger Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000001737 promoting effect Effects 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 230000010473 stable expression Effects 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 210000000707 wrist Anatomy 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
一种基于空间编码的实时手语交流***,包括用于检测佩戴者的手形变换的数据手套、用于检测佩戴者的手所在空间区域的位置***以及用于根据数据手套和位置***进行手语识别的智能识别装置,所述智能识别装置包括手语运动信息转化为文本信息模块、文本信息转化为手语信息模块以及用于将文本信息、手语编码信息和动作动画建立对应序列的手语字典数据库。本发明提供一种快速性好、实时性强、成本低的基于空间编码的实时手语交流***。
Description
技术领域
本发明涉及一种聋哑人与正常人之间实现实时交流的***,尤其是一种手语交流***。
背景技术
手语是聋哑人使用的语言。它是由手形动作辅之以表情姿势而构成的比较稳定的表达***,是一种靠动作/视觉进行交际的特殊语言。我国有2000多万的听力障碍者,他们主要使用手语进行交流。由于手语不是社会的大多数人的常用语言,这在很大程度上制约了他们与社会的交流。手语交流***的研制,可以一定程度上解决这个问题,为聋人创造无障碍环境方面发挥重要作用,并对推广规范的中国手语有很大作用。
随着社会对聋哑人关爱的增长,越来越多的学者专家开始研究手语识别***,以更好地实现正常人和聋哑人之间的交流。目前的手语识别***主要分为基于数据手套的手语识别和基于视觉(图像)的手语识别***。对于具有时空并发性的手语的识别,宜采用数据手套作为手形输入设备,并采用位置***采集手掌的运动。因为与摄像机相比,数据手套与位置***采集的数据简洁、准确,这两种采集设备易获取表明手语时空特性的特征,如手指关节运动信息,手掌运动信息等,数据手套采集的数据不受光照等环境变化的影响。世界上很多专家致力于手语识别方法的研究,实现了手语信号到文本、声音信息的转化,也有一些专家采用电子设备把文本信息转化为手语动画,从而实现人与机器终端单向的手语交流。
然而,聋哑人绝大部分的交流障碍是在与正常人交流的过程中产生的。如果要实现实时的交流,就必须要求有响应迅速的输入输出设备,同时也要求高效的识别与转化方法,能在瞬间实现手语与文本信息的相互转化。为了进一步实现推广,所用的设备成本不能太昂贵。
发明内容
为了克服已有的手语识别***的快速性差、实时性差、成本高的不足,本发明提供一种快速性好、实时性强、成本低的基于空间编码的实时手语交流***。
本发明解决其技术问题所采用的技术方案是:
一种基于空间编码的实时手语交流***,包括用于检测佩戴者的手形变换的数据手套、用于检测佩戴者的手所在空间区域的位置***以及用于根据数据手套和位置***进行手语识别的智能识别装置,所述智能识别装置包括手语运动信息转化为文本信息模块、文本信息转化为手语信息模块以及用于将文本信息、手语编码信息和动作动画建立对应序列的手语字典数据库,所述手语运动信息转化为文本信息模块包括:
信号数据采集单元,用于根据数据手套和位置***的波特率得到时间段的数据帧,得到输入数据的一系列向量数据;
数据预处理单元,用于根据数据手套佩戴者的手语习惯对弯曲度值域进行界定,同时使用位置***对佩戴者的个体特征对空间区域进行划分,定位嘴,左耳垂,右耳垂,左肩以及右肩的位置;
手语信息特征提取单元,用于根据数据手套输入的数据提取手势信息,从位置***输入的数据中提取手的方向、位置信息,构成输入样本的特征向量;
手形信息编码单元,用于根据获得的特征向量的手语信号进行编码,得到字符串,编码规则如下:
(4.1)、每个手指关节分为三个活动状态——伸直、半弯曲以及完全弯曲,采用二进制编码方式对指关节弯曲状态进行编码;
(4.2)、对手掌所在的位置空间进行二进制编码;
输出信息匹配单元,用于根据字符串的数值在手语字典数据库中进行查询,查询到的结果得到文本信息;
所述文本信息转化为手语信息模块包括:
虚拟人的演示空间界定单元,用于根据虚拟人的骨骼参数设定虚拟人的演示空间,以空间划分规则界定虚拟人的演示空间;
定位装置确定单元,用于记录下运动手掌在演示空间中各个区域的中心位置和相关的骨骼位置的矩阵;
输入信息匹配单元,用于以输入的信息作为关键字在手语字典数据库中进行检索,检索到相关信息则提取出手语动作的编码;
关键帧定位单元,用于根据手语动作的编码设定虚拟人骨骼在手语意义涉及的各个区域中的定位位置,得到虚拟人动作关键帧;
虚拟演示单元,用于由关键帧自动生成插补帧,得到虚拟人演示的手语动画,显示于屏幕终端。
作为优选的一种方案:在手形信息编码单元中,将手指的三种状态分别编码为伸直00,半弯曲01,完全弯曲10,每个手指都按照上述的弯曲状态编码方式,则用一个十位的字符串来表示五指的状态。
作为优选的另一种方案:在手形信息编码单元中,对手掌所在的位置空间进行二进制编码过程为:将嘴部以上划分为三个空间,左耳以左的空间为“1001”,左耳到右耳之间的空间为“1000”,右耳以右的空间为“1010”;将嘴部以下、肩以上的空间划分为三个空间,左耳以左的空间为“0001”,左耳到右耳之间的空间为“0000”,右耳以右的空间为“0010”;将肩以下的空间也划分为三个空间,左肩以左的空间为“0101”,左肩到右肩的空间为“0100”,右肩以右的空间为“0110”;手掌方向根据手掌矢量对应的位置***的XYZ坐标,手掌朝上0010,手掌朝下0011,手掌朝左0101,手掌朝右0100,手掌朝前1001以及手掌朝身体1000。
本发明的技术构思为:基于手语动作常用的统计规律,通过构造一个带有编码的手形和手势的划分空间,提出了专用于手语与文本之间实现实时交流的方法。根据手形与手势的编码组合以及手语字典数据库的引入,给出了一种快速编码方法,用于手语的识别;给出了一种快速的解码方法,用于手语的合成。该方法具有编码效率高和解码速度快的特点。
本发明提出一种有效的手语字典数据库使用方法,用以存储手语编码信息并推动手语合成的应用。原有的将动作动画数据一一输入手语运动数据库方法,其数据库存储量大,***运行效率低,形成的手语合成文件过大,不适合实时手语翻译。提出的数据库使用方法是一种更有效的方法。
本发明的基于空间编码的特点为:(1)、常用手语中手的空间位置主要集中在头部周围,而少量分布于上半身身体周围,所以头部空间是手语运动频率最高的空间。竖直方向分别以嘴部,肩为分界点,将空间划分为3个横向空间,水平方向分别以左耳、右耳、左肩、右肩分界点将空间划分为6个纵向空间。这种划分方法有效地对头部周围的空间进行细致的划分,而对身体周围的空间则进行大致的划分,从而提高空间的识别效率。(2)、根据手语设备佩戴者个体大小的不同事先对手语运动空间进行预定义,使运动空间具有自适应性。(3)、编码效率高。利用空间的划分,手形的编码和手势的编码过程中充分采用了二进制编码方式,没有使用长码字和特殊码字的出现,可以使手语字典数据库的存储量更小,读写效率更高。利用本方法对手语运动信息编码,根据句子的长度数据量可以控制在0.75K以内。(4)、解码速度快。利用编码序列映射到虚拟人骨骼矩阵的特点,解码过程中可以有效避免图片或动画的编辑工作,因此可以很容易实现手语合成。(5)、方法简单,实现方便。整个算法只采用二进制匹配运算,避免了复杂的运算,是一种简单且有效的编码方法,可以方便的在多个不同版本的开发平台上移植。
本发明的有益效果主要表现在:(1)、借助于手语运动空间的划分与编码,实现了手语交流的实时功能,减少了无意义的等待与响应时间;(2)、带有手指弯曲传感器的数据手套就能实现手形特征的提取,降低***配套设施的成本;(3)、编码是高效的,佩戴者可以通过手语的输入完善手语字典数据库,保证了手语词汇的完备性;(4)、所用的快速合成手语方法能保证手语合成具有较快的速度;(5)、手语实时交流***是具有培训性的***,可以为不懂手语的用户提供手语教学训练。
附图说明
图1是实时手语交流***框架示意图。
图2是手形编码说明示意图。
图3是手语空间划分的示意图。
图4是手掌方向测量参考坐标示意图。
图5是汉语手指字母图。
图6是“你好”手语的示意图。
图7是“很高兴认识你”手语的示意图。
具体实施方式
下面结合附图对本发明作进一步描述。
参照图1~图7,一种基于空间编码的实时手语交流***,包括用于检测佩戴者的手形变换的数据手套、用于检测佩戴者的手所在空间区域的位置***以及用于根据数据手套和位置***进行手语识别的智能识别装置,所述智能识别装置包括手语运动信息转化为文本信息模块、文本信息转化为手语信息模块以及用于将文本信息、手语编码信息和动作动画建立对应序列的手语字典数据库,所述手语运动信息转化为文本信息模块包括:信号数据采集单元,用于根据数据手套和位置***的波特率得到时间段的数据帧,得到输入数据的一系列向量数据;数据预处理单元,用于根据数据手套佩戴者的手语习惯对弯曲度值域进行界定,同时使用位置***对佩戴者的个体特征对空间区域进行划分,定位嘴,左耳垂,右耳垂,左肩以及右肩的位置;手语信息特征提取单元,用于根据数据手套输入的数据提取手势信息,从位置***输入的数据中提取手的方向、位置信息,构成输入样本的特征向量;手形信息编码单元,用于根据获得的特征向量的手语信号进行编码,得到字符串,编码规则如下:
(4.1)、每个手指关节分为三个活动状态——伸直、半弯曲以及完全弯曲,采用二进制编码方式对指关节弯曲状态进行编码;
(4.2)、对手掌所在的位置空间进行二进制编码;
输出信息匹配单元,用于根据字符串的数值在手语字典数据库中进行查询,查询到的结果得到文本信息;
所述文本信息转化为手语信息模块包括:虚拟人的演示空间界定单元,用于根据虚拟人的骨骼参数设定虚拟人的演示空间,以空间划分规则界定虚拟人的演示空间;定位装置确定单元,用于记录下运动手掌在演示空间中各个区域的中心位置和相关的骨骼位置的矩阵;输入信息匹配单元,用于以输入的信息作为关键字在手语字典数据库中进行检索,检索到相关信息则提取出手语动作的编码;关键帧定位单元,用于根据手语动作的编码设定虚拟人骨骼在手语意义涉及的各个区域中的定位位置,得到虚拟人动作关键帧;虚拟演示单元,用于由关键帧自动生成插补帧,得到虚拟人演示的手语动画,显示于屏幕终端。
参照图2、图3,根据手势的运动信息进行编码:通过手语词汇实验结果,在充分考虑手语交流的实时性,本文给出的基于空间编码的手语识别方法是一种性能稳定,识别迅速的方法。该方法在中国手语词汇上进行应用说明。
当使用者佩戴上数据手套时,根据使用者手的大小及使用者对弯曲程度的不同定义阀值。如数据手套原始数据范围为0~4095,对于食指而言,相应的数据为小于1862的数表示手指处于伸直状态,显示值为1862-2268之间的数值表示手指处于半弯曲状态,显示值为2268-4095之间的数值则表示手指处于完全弯曲状态。由于每个手指的灵活程度不同,各个手指的阀值也不尽相同。
位置***固定于使用者的手腕上,绝对坐标原点位于接收器位置。位置***获得的角度信息可以确定手掌方向,将使用者以竖直方向分别以嘴部,肩为分界点,将空间划分为3个横向空间,水平方向分别以左耳、右耳、左肩、右肩分界点将空间划分为6个纵向空间。
本发明的编码方法为:根据对于所述终端上获得的手形和手势信息,依次设定每个手形和手势信息的编码值,得到码流数据,该码表对应动态链表存储时间序列。按照时间与手形的变换情况可分为静态手势,静态复合手势,和动态手势。
(1)、静态手势:如表1所示对应的手语手形,编码规则如表1所示。表1为汉字手指字母表对应编码:
字母 | 手掌方向 | 手形编码 |
A | 0100 | 0010101010 |
B | 1001 | 1000000000 |
C | 0101 | 0101010101 |
D | 1001 | 1010101010 |
E | 1000 | 1010000000 |
F | 1000 | 1000000101 |
G | 1000 | 1000101010 |
H | 1001 | 1000001010 |
I | 1001 | 1000101010 |
J | 0101 | 1001101010 |
K | 0101 | 0000001010 |
L | 0101 | 0000101010 |
M | 1001 | 1001010110 |
N | 1001 | 1001011010 |
O | 0101 | 1001010101 |
P | 0101 | 1010000000 |
Q | 1001 | 0001011010 |
R | 1000 | 0000101010 |
S | 1001 | 0010101010 |
T | 1001 | 1000101000 |
U | 1001 | 0000000000 |
V | 1001 | 0100001010 |
W | 1001 | 0100000010 |
X | 1001 | 0101001010 |
Y | 1001 | 0010101000 |
Z | 1000 | 0100101000 |
ZH | 1000 | 0100001000 |
CH | 0011 | 0001010101 |
SH | 1001 | 0001011010 |
NG | 1000 | 1010101000 |
表1
(2)、静态复合手势:如图6所示“你好”手语,按照时间顺序记录各个时间序列的手形,如表2所示
时间序列 | 手掌方向 | 手掌位置 | 手形编码 |
1 | 0011 | 0100 | 1000101010 |
2 | 0011 | 0100 | 1001101010 |
3 | 0011 | 0100 | 0010101010 |
表2
(3)、动态手势:如图7所示“很高兴认识你”手语,按照时间顺序记录各个时间序列的手形,如表3所示,左手手形同理可得。
时间序列 | 手掌方向 | 手掌位置 | 手形编码 |
1 | 1000 | 0100 | 0000000000 |
2 | 1000 | 0100 | 1000101010 |
3 | 0010 | 0100 | 1000101010 |
4 | 1000 | 0100 | 0000000000 |
5 | 0011 | 1000 | 1000001010 |
6 | 0101 | 0001 | 1000101010 |
7 | 0101 | 0100 | 1000101010 |
表3
上述编码信息经由手语字典数据库进行信息匹配,若对应各个时间序列上的各个编码均相同,则输出相对应文字;若对应各个时间序列上的编码不同,则输出“未知手语信息”,用户可以重新演示手语以确认手语信息或者作为新手语信息输入手语字典数据库。
当不懂手语的用户看到文字信息并以文字信息作为回应时,参照图3设定虚拟人的演示空间。控制虚拟入骨骼,使手掌位置经过演示空间中各个区域的中心位置,并记录骨骼关节矩阵以及相关的变换信息。以输入的文字信息作为关键字在手语数据词典中进行检索,检索到相关信息则提取出手语动作的编码,若检索不到则提醒用户重新输入文本信息。根据手语动作的时间序列设置动画时间与各个关键时刻点。提取手掌编码设定虚拟人骨骼在图3所示的各个区域中各个关键时刻点定位位置,提取手掌方向编码设定虚拟人手骨骼的方向,提取手形编码设定虚拟人手指骨骼的动作,从而得到各个时间序列中的关键帧;由关键帧生成插补帧,得到虚拟人演示的手语关键帧动画,显示于屏幕终端。
Claims (3)
1、一种基于空间编码的实时手语交流***,包括用于检测佩戴者的手形变换的数据手套、用于检测佩戴者的手所在空间区域的位置***以及用于根据数据手套和位置***进行手语识别的智能识别装置,其特征在于:所述智能识别装置包括手语运动信息转化为文本信息模块、文本信息转化为手语信息模块以及用于将文本信息、手语编码信息和动作动画建立对应序列的手语字典数据库,所述手语运动信息转化为文本信息模块包括:
信号数据采集单元,用于根据数据手套和位置***的波特率得到时间段的数据帧,得到输入数据的一系列向量数据;
数据预处理单元,用于根据数据手套佩戴者的手语习惯对弯曲度值域进行界定,同时使用位置***对佩戴者的个体特征对空间区域进行划分,定位嘴,左耳垂,右耳垂,左肩以及右肩的位置;
手语信息特征提取单元,用于根据数据手套输入的数据提取手势信息,从位置***输入的数据中提取手的方向、位置信息,构成输入样本的特征向量;
手形信息编码单元,用于根据获得的特征向量的手语信号进行编码,得到字符串,编码规则如下:
(4.1)、每个手指关节分为三个活动状态——伸直、半弯曲以及完全弯曲,采用二进制编码方式对指关节弯曲状态进行编码;
(4.2)、对手掌所在的位置空间进行二进制编码;
输出信息匹配单元,用于根据字符串的数值在手语字典数据库中进行查询,查询到的结果得到文本信息;
所述文本信息转化为手语信息模块包括:
虚拟人的演示空间界定单元,用于根据虚拟人的骨骼参数设定虚拟人的演示空间,以空间划分规则界定虚拟人的演示空间;
定位装置确定单元,用于记录下运动手掌在演示空间中各个区域的中心位置和相关的骨骼位置的矩阵;
输入信息匹配单元,用于以输入的信息作为关键字在手语字典数据库中进行检索,检索到相关信息则提取出手语动作的编码;
关键帧定位单元,用于根据手语动作的编码设定虚拟人骨骼在手语意义涉及的各个区域中的定位位置,得到虚拟人动作关键帧;
虚拟演示单元,用于由关键帧自动生成插补帧,得到虚拟人演示的手语动画,显示于屏幕终端。
2、如权利要求1所述的基于空间编码的实时手语交流***,其特征在于:在手形信息编码单元中,将手指的三种状态分别编码为伸直00,半弯曲01,完全弯曲10,每个手指都按照上述的弯曲状态编码方式,则用一个十位的字符串来表示五指的状态。
3、如权利要求1或2所述的基于空间编码的实时手语交流***,其特征在于:在手形信息编码单元中,对手掌所在的位置空间进行二进制编码过程为:将嘴部以上划分为三个空间,左耳以左的空间为“1001”,左耳到右耳之间的空间为“1000”,右耳以右的空间为“1010”;将嘴部以下、肩以上的空间划分为三个空间,左耳以左的空间为“0001”,左耳到右耳之间的空间为“0000”,右耳以右的空间为“0010”;将肩以下的空间也划分为三个空间,左肩以左的空间为“0101”,左肩到右肩的空间为“0100”,右肩以右的空间为“0110”;手掌方向根据手掌矢量对应的位置***的XYZ坐标,手掌朝上0010,手掌朝下0011,手掌朝左0101,手掌朝右0100,手掌朝前1001以及手掌朝身体1000。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2008101635548A CN101609618B (zh) | 2008-12-23 | 2008-12-23 | 基于空间编码的实时手语交流*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN2008101635548A CN101609618B (zh) | 2008-12-23 | 2008-12-23 | 基于空间编码的实时手语交流*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN101609618A true CN101609618A (zh) | 2009-12-23 |
CN101609618B CN101609618B (zh) | 2012-05-30 |
Family
ID=41483357
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN2008101635548A Expired - Fee Related CN101609618B (zh) | 2008-12-23 | 2008-12-23 | 基于空间编码的实时手语交流*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN101609618B (zh) |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102193633A (zh) * | 2011-05-25 | 2011-09-21 | 广州畅途软件有限公司 | 一种数据手套动态手语识别方法 |
CN102723019A (zh) * | 2012-05-23 | 2012-10-10 | 苏州奇可思信息科技有限公司 | 一种手语教学*** |
CN103309434A (zh) * | 2012-03-12 | 2013-09-18 | 联想(北京)有限公司 | 一种指令识别方法和电子设备 |
CN103337079A (zh) * | 2013-07-09 | 2013-10-02 | 广州新节奏智能科技有限公司 | 一种虚拟增强现实的教学方法及装置 |
CN104134060A (zh) * | 2014-08-03 | 2014-11-05 | 上海威璞电子科技有限公司 | 基于肌电信号和运动传感器的手语翻译和显示发声*** |
CN104462162A (zh) * | 2013-11-25 | 2015-03-25 | 安徽寰智信息科技股份有限公司 | 一种新型的手语识别采集方法及装置 |
CN104599553A (zh) * | 2014-12-29 | 2015-05-06 | 闽南师范大学 | 一种基于条形码识别的手语教学***及方法 |
CN104765455A (zh) * | 2015-04-07 | 2015-07-08 | 中国海洋大学 | 基于敲击振动的人机交互*** |
CN106056994A (zh) * | 2016-08-16 | 2016-10-26 | 安徽渔之蓝教育软件技术有限公司 | 一种用于手语职业教育的辅助学习*** |
CN104599554B (zh) * | 2014-12-29 | 2017-01-25 | 闽南师范大学 | 一种基于二维码识别的手语教学***及方法 |
CN108427910A (zh) * | 2018-01-30 | 2018-08-21 | 浙江凡聚科技有限公司 | 深层神经网络ar手语翻译学习方法、客户端及服务器 |
CN110491250A (zh) * | 2019-08-02 | 2019-11-22 | 安徽易百互联科技有限公司 | 一种聋哑人教学*** |
CN113657101A (zh) * | 2021-07-20 | 2021-11-16 | 北京搜狗科技发展有限公司 | 一种数据处理方法、装置和用于数据处理的装置 |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1506871A (zh) * | 2002-12-06 | 2004-06-23 | 徐晓毅 | 一种手语翻译*** |
CN1664807A (zh) * | 2005-03-21 | 2005-09-07 | 山东省气象局 | 手语气象预报在网络中的应用 |
CN101005574A (zh) * | 2006-01-17 | 2007-07-25 | 上海中科计算技术研究所 | 视频虚拟人手语编辑*** |
-
2008
- 2008-12-23 CN CN2008101635548A patent/CN101609618B/zh not_active Expired - Fee Related
Cited By (16)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102193633A (zh) * | 2011-05-25 | 2011-09-21 | 广州畅途软件有限公司 | 一种数据手套动态手语识别方法 |
CN103309434B (zh) * | 2012-03-12 | 2016-03-30 | 联想(北京)有限公司 | 一种指令识别方法和电子设备 |
CN103309434A (zh) * | 2012-03-12 | 2013-09-18 | 联想(北京)有限公司 | 一种指令识别方法和电子设备 |
CN102723019A (zh) * | 2012-05-23 | 2012-10-10 | 苏州奇可思信息科技有限公司 | 一种手语教学*** |
CN103337079A (zh) * | 2013-07-09 | 2013-10-02 | 广州新节奏智能科技有限公司 | 一种虚拟增强现实的教学方法及装置 |
CN104462162A (zh) * | 2013-11-25 | 2015-03-25 | 安徽寰智信息科技股份有限公司 | 一种新型的手语识别采集方法及装置 |
CN104134060A (zh) * | 2014-08-03 | 2014-11-05 | 上海威璞电子科技有限公司 | 基于肌电信号和运动传感器的手语翻译和显示发声*** |
CN104134060B (zh) * | 2014-08-03 | 2018-01-05 | 上海威璞电子科技有限公司 | 基于肌电信号和运动传感器的手语翻译和显示发声*** |
CN104599553A (zh) * | 2014-12-29 | 2015-05-06 | 闽南师范大学 | 一种基于条形码识别的手语教学***及方法 |
CN104599553B (zh) * | 2014-12-29 | 2017-01-25 | 闽南师范大学 | 一种基于条形码识别的手语教学***及方法 |
CN104599554B (zh) * | 2014-12-29 | 2017-01-25 | 闽南师范大学 | 一种基于二维码识别的手语教学***及方法 |
CN104765455A (zh) * | 2015-04-07 | 2015-07-08 | 中国海洋大学 | 基于敲击振动的人机交互*** |
CN106056994A (zh) * | 2016-08-16 | 2016-10-26 | 安徽渔之蓝教育软件技术有限公司 | 一种用于手语职业教育的辅助学习*** |
CN108427910A (zh) * | 2018-01-30 | 2018-08-21 | 浙江凡聚科技有限公司 | 深层神经网络ar手语翻译学习方法、客户端及服务器 |
CN110491250A (zh) * | 2019-08-02 | 2019-11-22 | 安徽易百互联科技有限公司 | 一种聋哑人教学*** |
CN113657101A (zh) * | 2021-07-20 | 2021-11-16 | 北京搜狗科技发展有限公司 | 一种数据处理方法、装置和用于数据处理的装置 |
Also Published As
Publication number | Publication date |
---|---|
CN101609618B (zh) | 2012-05-30 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101609618B (zh) | 基于空间编码的实时手语交流*** | |
CN101577062B (zh) | 一种基于空间编码的手语运动信息与文本信息相互转换的实现方法 | |
CN109190578B (zh) | 基于时域卷积网络与循环神经网络融合的手语视频翻译方法 | |
CN109086706B (zh) | 应用于人机协作中的基于分割人体模型的动作识别方法 | |
CN105426850A (zh) | 一种基于人脸识别的关联信息推送设备及方法 | |
CN107301820A (zh) | 一种能够识别观众类型的智能广告机及其控制方法 | |
CN107678550A (zh) | 一种基于数据手套的手语手势识别*** | |
CN105868715A (zh) | 一种手势识别方法、装置及手势学习*** | |
CN104134060A (zh) | 基于肌电信号和运动传感器的手语翻译和显示发声*** | |
CN106033435A (zh) | 物品识别方法和装置,室内地图生成方法和装置 | |
CN102831380A (zh) | 一种基于深度图像感应的肢体动作识别方法及*** | |
CN103745423B (zh) | 一种口型示教***与示教方法 | |
CN111027584A (zh) | 一种课堂行为识别方法及设备 | |
CN113435335B (zh) | 微观表情识别方法、装置、电子设备及存储介质 | |
CN114998983A (zh) | 一种基于增强现实技术和姿态识别技术的肢体康复方法 | |
CN102567716A (zh) | 一种人脸合成***及实现方法 | |
CN112508750A (zh) | 人工智能教学装置、方法、设备及存储介质 | |
CN108960171B (zh) | 一种基于特征迁移学习的转换手势识别到身份识别的方法 | |
CN108510988A (zh) | 一种用于聋哑人的语言识别***及方法 | |
CN111723779A (zh) | 一种基于深度学习的中文手语识别*** | |
CN114842547A (zh) | 基于手势动作生成与识别的手语教学方法、装置及*** | |
CN117055724A (zh) | 虚拟教学场景中生成式教学资源***及其工作方法 | |
CN206210144U (zh) | 手语语音转化帽 | |
CN115188074A (zh) | 一种互动式体育训练测评方法、装置、***及计算机设备 | |
Wang et al. | Labanotation generation from motion capture data for protection of folk dance |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20120530 |