CN106019977A - 一种手势及情感识别家居控制*** - Google Patents
一种手势及情感识别家居控制*** Download PDFInfo
- Publication number
- CN106019977A CN106019977A CN201610639992.1A CN201610639992A CN106019977A CN 106019977 A CN106019977 A CN 106019977A CN 201610639992 A CN201610639992 A CN 201610639992A CN 106019977 A CN106019977 A CN 106019977A
- Authority
- CN
- China
- Prior art keywords
- emotion recognition
- module
- gesture
- emotion
- control system
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008909 emotion recognition Effects 0.000 title claims abstract description 109
- 230000010365 information processing Effects 0.000 claims abstract description 17
- 238000000034 method Methods 0.000 claims abstract description 8
- 230000005236 sound signal Effects 0.000 claims abstract description 8
- 230000008451 emotion Effects 0.000 claims description 6
- 230000009286 beneficial effect Effects 0.000 claims description 4
- 230000001815 facial effect Effects 0.000 claims description 3
- 230000006399 behavior Effects 0.000 claims 1
- 238000004458 analytical method Methods 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000002708 enhancing effect Effects 0.000 description 2
- 230000007613 environmental effect Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000005728 strengthening Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B15/00—Systems controlled by a computer
- G05B15/02—Systems controlled by a computer electric
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B19/00—Programme-control systems
- G05B19/02—Programme-control systems electric
- G05B19/418—Total factory control, i.e. centrally controlling a plurality of machines, e.g. direct or distributed numerical control [DNC], flexible manufacturing systems [FMS], integrated manufacturing systems [IMS] or computer integrated manufacturing [CIM]
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
- G05B2219/00—Program-control systems
- G05B2219/20—Pc systems
- G05B2219/26—Pc applications
- G05B2219/2642—Domotique, domestic, home control, automation, smart house
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Automation & Control Theory (AREA)
- Manufacturing & Machinery (AREA)
- Quality & Reliability (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及一种手势及情感识别家居控制***,包括:手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块;手势识别模块、情感识别判断模块与综合信息处理模块电连接;音频信号采集模块与情感识别判断模块连接;视频信号采集模块与手势识别模块和情感识别判断模块连接;综合信息处理模块通过控制模块与无线收发模块电连接;综合信息处理模块,对手势识别结果、情感识别结果进行综合处理,得出综合判断信息,并根据该综合判断信息控制各智能家居设备执行相应的操作。本发明给用户提供了多种选择,使得智能家居的使用更加人性化。
Description
技术领域
本发明涉及智能家居技术领域,更具体地说,涉及一种手势及情感识别家居控制***。
背景技术
智能家居是在互联网的影响之下物联化的体现。智能家居通过物联网技术将家中的各种设备连接到一起,提供家电控制、照明控制、电话远程控制、室内外遥控、防盗报警、环境监测、暖通控制、红外转发以及可编程定时控制等多种功能和手段。与普通家居相比,智能家居不仅具有传统的居住功能,兼备建筑、网络通信、信息家电、设备自动化,集***、结构、服务、管理为一体的高效、舒适、安全、便利、环保的居住环境,提供全方位的信息交互功能,帮助家庭与外部保持信息交流畅通,优化人们的生活方式,帮助人们有效安排时间,增强家居生活的安全性,甚至为各种能源费用节约资金。
随着智能家居的越来越普及,单一的识别控制模式已经不能满足人们的需要。
发明内容
本发明要解决的技术问题在于,针对现有技术的上述缺陷,提供一种手势及情感识别家居控制***。
本发明解决其技术问题所采用的技术方案是:
构造一种手势及情感识别家居控制***,包括:手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块;所述手势识别模块、情感识别判断模块与所述综合信息处理模块电连接;所述音频信号采集模块与所述情感识别判断模块连接;所述视频信号采集模块与所述手势识别模块和所述情感识别判断模块连接;所述综合信息处理模块通过所述控制模块与所述无线收发模块电连接;所述综合信息处理模块,用于对手势识别结果、情感识别结果进行综合处理,得出综合判断信息,并根据该综合判断信息控制各智能家居设备执行相应的操作。
本发明所述的手势及情感识别家居控制***,其中,所述综合信息处理模块包括:
识别状态判断单元,用于根据用户设置输入参数判断当前识别状态,其中,当前识别状态包括:只根据手势识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据手势和情感识别进行判断的第三识别状态。
本发明所述的手势及情感识别家居控制***,其中,所述综合信息处理模块还包括:
综合判断信息生成单元,用于在当前识别状态为第三识别状态时,将手势识别结果作为第一参数、将情感识别结果作为第二参数,根据预设的判断公式输出综合判断信息。
本发明所述的手势及情感识别家居控制***,其中,所述情感识别判断模块包括:
第一情感识别单元,用于对所述语音信息进行语音音***感识别,生成第一情感识别结果;
第二情感识别单元,用于将所述语音信息转换为文字信息后,对所述文字信息进行语义情感识别生成第二情感识别结果;
情感识别结果输出单元,用于基于所述第一情感识别结果和第二情感识别结果,根据预定的情感识别结果判断方法生成用户情感识别结果。
本发明所述的手势及情感识别家居控制***,其中,所述手势识别模块连接有手势识别增强手套。
本发明所述的手势及情感识别家居控制***,其中,所述手势识别增强手套内置红外光源,且所述手势识别增强手套的外表面设置有多个小孔以利于所述红外光源发射出的红外光透过进而增强所述手势识别模块对用户的手势的识别。
本发明所述的手势及情感识别家居控制***,其中,所述情感识别包括褒义情感识别和贬义情感识别。
本发明所述的手势及情感识别家居控制***,其中,所述情感识别判断模块包括:
第三情感识别单元,用于对所述视频信号采集模块获取的面部图像信息进行图像识别判断,生成第三情感识别结果。
本发明的有益效果在于:通过采用情感识别和手势识别模式相结合的识别方式进行智能家居控制,给用户提供了多种选择,使得智能家居的使用更加人性化。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将结合附图及实施例对本发明作进一步说明,下面描述中的附图仅仅是本发明的部分实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他附图:
图1是本发明较佳实施例的手势及情感识别家居控制***原理框图。
具体实施方式
为了使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发明实施例中的技术方案进行清楚、完整的描述,显然,所描述的实施例是本发明的部分实施例,而不是全部实施例。基于本发明的实施例,本领域普通技术人员在没有付出创造性劳动的前提下所获得的所有其他实施例,都属于本发明的保护范围。
本发明较佳实施例的手势及情感识别家居控制***原理框图如图1所示,包括:手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块;手势识别模块、情感识别判断模块与综合信息处理模块电连接;音频信号采集模块与情感识别判断模块连接;视频信号采集模块与手势识别模块和情感识别判断模块连接;综合信息处理模块通过控制模块与无线收发模块电连接;综合信息处理模块,用于对手势识别结果、情感识别结果进行综合处理,得出综合判断信息,并根据该综合判断信息控制各智能家居设备执行相应的操作。本实施例通过采用情感识别和手势识别模式相结合的识别方式进行智能家居控制,给用户提供了多种选择,使得智能家居的使用更加人性化。
上述手势及情感识别家居控制***中,综合信息处理模块包括:识别状态判断单元,用于根据用户设置输入参数判断当前识别状态,其中,当前识别状态包括:只根据手势识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据手势和情感识别进行判断的第三识别状态。
上述手势及情感识别家居控制***中,综合信息处理模块还包括:综合判断信息生成单元,用于在当前识别状态为第三识别状态时,将手势识别结果作为第一参数、将情感识别结果作为第二参数,根据预设的判断公式输出综合判断信息。
上述手势及情感识别家居控制***中,情感识别判断模块包括:第一情感识别单元,用于对语音信息进行语音音***感识别,生成第一情感识别结果;第二情感识别单元,用于将语音信息转换为文字信息后,对文字信息进行语义情感识别生成第二情感识别结果;情感识别结果输出单元,用于基于第一情感识别结果和第二情感识别结果,根据预定的情感识别结果判断方法生成用户情感识别结果。
上述手势及情感识别家居控制***中,手势识别模块连接有手势识别增强手套。手势识别增强手套内置红外光源,且手势识别增强手套的外表面设置有多个小孔以利于红外光源发射出的红外光透过进而增强手势识别模块对用户的手势的识别。
上述手势及情感识别家居控制***中,情感识别包括褒义情感识别和贬义情感识别。例如,选定若干个褒义种子词和若干个贬义种子词生成情感词典;分别计算文字信息中的词语与情感词典中的褒义种子词和贬义种子词的词语相似度;根据词语相似度,通过预设的语义情感分析方法生成所述第二情感识别结果。具体地,可根据语义相似度计算方法分别计算所述文字信息中的词语与所述褒义种子词的词语相似度以及所述文字信息中的词语与所述贬义种子词的词语相似度。
上述实施例中,根据词语相似度,通过预设的语义情感分析方法生成所述第二情感识别结果的步骤具体方法为:通过词语情感倾向算式计算词语情感倾向值:当词语情感倾向值大于预定的阈值时,判断文字信息中的词语为褒义情感;当词语情感倾向值小于预定的阈值时,判断文字信息中的词语为贬义情感。
上述手势及情感识别家居控制***中,情感识别判断模块包括:第三情感识别单元,用于对视频信号采集模块获取的面部图像信息进行图像识别判断,生成第三情感识别结果。
应当理解的是,对本领域普通技术人员来说,可以根据上述说明加以改进或变换,而所有这些改进和变换都应属于本发明所附权利要求的保护范围。
Claims (8)
1.一种手势及情感识别家居控制***,其特征在于,包括:手势识别模块、情感识别判断模块、音频信号采集模块、视频信号采集模块、综合信息处理模块、控制模块、无线收发模块;所述手势识别模块、情感识别判断模块与所述综合信息处理模块电连接;所述音频信号采集模块与所述情感识别判断模块连接;所述视频信号采集模块与所述手势识别模块和所述情感识别判断模块连接;所述综合信息处理模块通过所述控制模块与所述无线收发模块电连接;所述综合信息处理模块,用于对手势识别结果、情感识别结果进行综合处理,得出综合判断信息,并根据该综合判断信息控制各智能家居设备执行相应的操作。
2.根据权利要求1所述的手势及情感识别家居控制***,其特征在于,所述综合信息处理模块包括:
识别状态判断单元,用于根据用户设置输入参数判断当前识别状态,其中,当前识别状态包括:只根据手势识别进行判断的第一识别状态、只根据情感识别进行判断的第二识别状态、同时根据手势和情感识别进行判断的第三识别状态。
3.根据权利要求2所述的手势及情感识别家居控制***,其特征在于,所述综合信息处理模块还包括:
综合判断信息生成单元,用于在当前识别状态为第三识别状态时,将手势识别结果作为第一参数、将情感识别结果作为第二参数,根据预设的判断公式输出综合判断信息。
4.根据权利要求1所述的手势及情感识别家居控制***,其特征在于,所述情感识别判断模块包括:
第一情感识别单元,用于对所述语音信息进行语音音***感识别,生成第一情感识别结果;
第二情感识别单元,用于将所述语音信息转换为文字信息后,对所述文字信息进行语义情感识别生成第二情感识别结果;
情感识别结果输出单元,用于基于所述第一情感识别结果和第二情感识别结果,根据预定的情感识别结果判断方法生成用户情感识别结果。
5.根据权利要求1所述的手势及情感识别家居控制***,其特征在于,所述手势识别模块连接有手势识别增强手套。
6.根据权利要求5所述的手势及情感识别家居控制***,其特征在于,所述手势识别增强手套内置红外光源,且所述手势识别增强手套的外表面设置有多个小孔以利于所述红外光源发射出的红外光透过进而增强所述手势识别模块对用户的手势的识别。
7.根据权利要求1所述的手势及情感识别家居控制***,其特征在于,所述情感识别包括褒义情感识别和贬义情感识别。
8.根据权利要求1所述的手势及情感识别家居控制***,其特征在于,所述情感识别判断模块包括:
第三情感识别单元,用于对所述视频信号采集模块获取的面部图像信息进行图像识别判断,生成第三情感识别结果。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610639992.1A CN106019977A (zh) | 2016-08-05 | 2016-08-05 | 一种手势及情感识别家居控制*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610639992.1A CN106019977A (zh) | 2016-08-05 | 2016-08-05 | 一种手势及情感识别家居控制*** |
Publications (1)
Publication Number | Publication Date |
---|---|
CN106019977A true CN106019977A (zh) | 2016-10-12 |
Family
ID=57134592
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610639992.1A Pending CN106019977A (zh) | 2016-08-05 | 2016-08-05 | 一种手势及情感识别家居控制*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN106019977A (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106019973A (zh) * | 2016-07-30 | 2016-10-12 | 杨超坤 | 一种具有情感识别功能的智能家居 |
CN109542233A (zh) * | 2018-11-30 | 2019-03-29 | 哈尔滨拓博科技有限公司 | 一种基于动态手势和人脸识别的灯具控制*** |
CN111770609A (zh) * | 2020-07-03 | 2020-10-13 | 深圳市明学光电股份有限公司 | 智能灯带控制***和方法 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102932212A (zh) * | 2012-10-12 | 2013-02-13 | 华南理工大学 | 一种基于多通道交互方式的智能家居控制*** |
CN103456299A (zh) * | 2013-08-01 | 2013-12-18 | 百度在线网络技术(北京)有限公司 | 一种控制语音识别的方法和装置 |
WO2015088141A1 (en) * | 2013-12-11 | 2015-06-18 | Lg Electronics Inc. | Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances |
CN105334743A (zh) * | 2015-11-18 | 2016-02-17 | 深圳创维-Rgb电子有限公司 | 一种基于情感识别的智能家居控制方法及其*** |
CN105468145A (zh) * | 2015-11-18 | 2016-04-06 | 北京航空航天大学 | 一种基于手势和语音识别的机器人人机交互方法和装置 |
-
2016
- 2016-08-05 CN CN201610639992.1A patent/CN106019977A/zh active Pending
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102932212A (zh) * | 2012-10-12 | 2013-02-13 | 华南理工大学 | 一种基于多通道交互方式的智能家居控制*** |
CN103456299A (zh) * | 2013-08-01 | 2013-12-18 | 百度在线网络技术(北京)有限公司 | 一种控制语音识别的方法和装置 |
WO2015088141A1 (en) * | 2013-12-11 | 2015-06-18 | Lg Electronics Inc. | Smart home appliances, operating method of thereof, and voice recognition system using the smart home appliances |
CN105334743A (zh) * | 2015-11-18 | 2016-02-17 | 深圳创维-Rgb电子有限公司 | 一种基于情感识别的智能家居控制方法及其*** |
CN105468145A (zh) * | 2015-11-18 | 2016-04-06 | 北京航空航天大学 | 一种基于手势和语音识别的机器人人机交互方法和装置 |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106019973A (zh) * | 2016-07-30 | 2016-10-12 | 杨超坤 | 一种具有情感识别功能的智能家居 |
CN109542233A (zh) * | 2018-11-30 | 2019-03-29 | 哈尔滨拓博科技有限公司 | 一种基于动态手势和人脸识别的灯具控制*** |
CN111770609A (zh) * | 2020-07-03 | 2020-10-13 | 深圳市明学光电股份有限公司 | 智能灯带控制***和方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN106228989A (zh) | 一种语音交互识别控制方法 | |
CN106782535A (zh) | 基于智能家电的数据处理方法及装置 | |
CN105185378A (zh) | 声控方法、声控***及能够进行声控的空调 | |
CN204904540U (zh) | 有屏智能遥控器 | |
CN106249614A (zh) | 智能终端、智能家居***、语音识别方法及下单方法 | |
CN107818782B (zh) | 一种实现家用电器智能控制的方法及*** | |
CN106205648A (zh) | 一种语音控制音乐网络播放方法 | |
CN103543699A (zh) | 一种基于智能盒的智能家居管理*** | |
CN108332363A (zh) | 一种带语音控制功能空调器及其控制方法 | |
CN106019977A (zh) | 一种手势及情感识别家居控制*** | |
CN111197841A (zh) | 控制方法、装置、遥控终端、空调器、服务器及存储介质 | |
WO2017166462A1 (zh) | 一种环境变化提醒方法、***与头戴式vr设备 | |
CN106251871A (zh) | 一种语音控制音乐本地播放装置 | |
CN108156705A (zh) | 一种智能语音灯光控制*** | |
CN106037560A (zh) | 一种智能淋浴***及其控制方法 | |
CN106254186A (zh) | 一种语音交互识别控制*** | |
CN106125566A (zh) | 一种家居背景音乐控制*** | |
WO2018023515A1 (zh) | 一种手势及情感识别家居控制*** | |
CN106296909A (zh) | 一种智能开门方法 | |
CN109584869A (zh) | 家电语音采集方法、装置及计算机可读存储介质 | |
CN205620724U (zh) | 智能语音远程控制*** | |
CN103645690A (zh) | 一种语音控制数字家庭智能盒的方法 | |
CN203012474U (zh) | 一种智能数字家庭多功能控制*** | |
CN104880953A (zh) | 一种控制方法及智能家居控制设备 | |
CN104698942A (zh) | 一种智能控制与信息管理***及方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
WD01 | Invention patent application deemed withdrawn after publication |
Application publication date: 20161012 |
|
WD01 | Invention patent application deemed withdrawn after publication |