CN106662931A - 一种机器人人机交互***、装置和方法 - Google Patents

一种机器人人机交互***、装置和方法 Download PDF

Info

Publication number
CN106662931A
CN106662931A CN201680001719.4A CN201680001719A CN106662931A CN 106662931 A CN106662931 A CN 106662931A CN 201680001719 A CN201680001719 A CN 201680001719A CN 106662931 A CN106662931 A CN 106662931A
Authority
CN
China
Prior art keywords
robot
information
man
variable factor
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201680001719.4A
Other languages
English (en)
Inventor
杨新宇
王昊奋
邱楠
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Green Bristlegrass Intelligence Science And Technology Ltd
Original Assignee
Shenzhen Green Bristlegrass Intelligence Science And Technology Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Green Bristlegrass Intelligence Science And Technology Ltd filed Critical Shenzhen Green Bristlegrass Intelligence Science And Technology Ltd
Publication of CN106662931A publication Critical patent/CN106662931A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Manipulator (AREA)

Abstract

本发明公开了一种机器人人机交互装置，其中包括输入模块，用于接收用户输入的指令信息；可变因素识别模块，用于识别机器人出现的可变因素；以及输出模块，用于输出人机交互的结果。其中指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。可变因素信息为基于用户与机器人的交互信息。通过本发明公开的人机交互***、装置、和方法，有利于及时反馈给用户机器人的状态，并且机器人通过动画方式主动告知用户，人机交互方式更为有趣、智能，且增加了人机交互的娱乐性。

Description

一种机器人人机交互***、装置和方法
技术领域
本发明涉及智能机器人技术领域，尤其是涉及一种机器人人机交互***、装置和方法。
背景技术
随着社会的进步，机器人不仅在工业、医学、农业或者军事上应用广泛，更是在生活上开始慢慢地融入人类的社交。常见社交上的机器人应用于活动现场或者家庭，特别是在活动现场，机器人的交互往往能吸引群众的关注和兴趣。
目前，机器人主要通过被动的形式与人们交互，这种被动是交互方式容易使得人们对其是去主动逗乐的兴趣。作为社交情感型智能机器人，需要凸显人的属性，然而主动沟通又是人与人之间发起情感联系的必须过程；在主动沟通中还需抓住人性的情感共鸣点，比如人都渴望被关心、被认可、在社群中的存在感；感性、健忘、偏好轻松、占到便宜、立即见效是普罗大众的共同特性。
发明内容
本发明公开了一种机器人人机交互***，包括：机器人端，用于接收用户发出的指令信息，其中机器人端中还包括可变因素信息，基于机器人的可变因素输出交互结果；以及用户端，用于向机器人发送指示信息，并与机器人互动。
优选的，指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
优选的，可变因素信息为基于用户与机器人的交互信息。
优选的，可变因素影响人机交互的输出结果。
本发明公开了一种机器人人机交互方法，包括：向机器人发送指示信息；接收用户的指令信息；以及基于机器人的可变因素输出交互结果。
优选的，指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
优选的，可变因素信息为基于用户与机器人的交互信息。
本发明公开了一种机器人人机交互装置，包括：输入模块，用于接收用户输入的指令信息；可变因素识别模块，用于识别机器人出现的可变因素；以及输出模块，用于输出人机交互的结果。
优选的，指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
优选的，可变因素信息为基于用户与机器人的交互信息。
本发明还公开了一种机器人人机交互方法，接收用户的指令信息；识别机器人的可变因素信息；以及根据可变因素信息输出交互结果。
优选的，指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
优选的，可变因素信息为基于用户与机器人的交互信息。
通过本发明公开的人机交互***、装置及方法，有利于及时反馈给用户机器人的状态，并且机器人通过动画方式主动告知用户，人机交互方式更为有趣、智能，且增加了人机交互的娱乐性。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为根据本发明的实施例一种机器人人机交互***框图。
图2为根据本发明的实施例一种机器人人机交互装置的模块框图。
图3为根据本发明的实施例一种机器人人机交互方法流程图。
图4为根据本发明的实施例一种机器人人机交互方法流程图。
具体实施例
下面结合附图和具体实施例对本发明的技术方案作进一步更详细的描述。显然，所描述的实施例仅仅是本发明的一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动的前提下所获得的所有其他实施例，都应属于本发明保护的范围。
图1所示为根据本发明的实施例一种机器人人机交互***。如图1所示，该***包括机器人端110和用户端120。机器人端110与用户端120相连接，可以相互发送指令信息，以及交互信息等。其中机器人端110可以是机器人、虚拟机器人或者其他智能装置等，用户端120可以是用户控制的智能手机设备、IPAD等等电子设备，但不局限于此类设备。
图2为根据本发明的实施例一种机器人人机交互装置的模块框图。具体的图2将结合图1进行描述。如图2所示，机器人端110中包括有输入模块210、可变因素识别模块220以及输出模块230。其中输入模块210用于接收用户输入的指令信息，其中用户输入为多模态输入，这里的“多模态输入”包括但不限于，视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、光感等信息。可变因素识别模块220与输入模块210相耦接，用于识别机器人出现的可变因素，比如机器人出现扭伤、日程计划改变等等，但不局限于此。多模态作为输入端(声音，图片，场景等)，可变因素为基于用户与机器人的交互信息。在一个实施例中，机器人由于过多次的做运动，过多次数跳舞等等的问题，会增大几率扭到脚等等，这种情况就会数显流程图旁边的例子，从而人机交互会改变，从原本答应跳舞到无法进行跳舞等，此时机器人会告知用户无法跳舞做出抱歉等动作表情传输到输出模块。输出模块230与可变因素识别模块相耦接，用于输出人机交互的结果。比如选择输出用户发出的指令，如跳舞、行走等等，或者在综合考虑可变因素后，选择输出抱歉等动作表情。
图3为根据本发明的实施例一种机器人人机交互方法流程图。图3将结合图1进行描述。如图3所示，步骤S301机器人接收用户指令信息。包括但不限于，视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、光感等信息。步骤S302：基于可变因素输出交互结果。在一个实施例中，可变因素为基于用户与机器人的交互信息，比如机器人由于过多次的做运动，过多次数跳舞等等的问题，会增大几率扭到脚等等，这种情况就会数显流程图旁边的例子，从而人机交互会改变，从原本答应跳舞到无法进行跳舞等，然后将不能跳舞的结果信息输出告知用户。
图4为根据本发明的实施例一种机器人人机交互方法流程图。图4将结合图2进行描述，主要包括以下步骤：S401：接收用户发出的指令信息；步骤402：识别可变因素；步骤403：基于可变因素输出交互结果。其中指令信息包括但不限于，视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、光感等信息。
通过本发明公开的人机交互方法，有利于及时反馈给用户机器人的状态，并且机器人通过动画方式主动告知用户，人机交互方式更为有趣、智能，且增加了人机交互的娱乐性。
以上所揭露的仅为本发明实施例中的较佳实施例而已，当然不能以此来限定本发明之权利范围，因此依本发明权利要求所作的等同变化，仍属本发明所涵盖的范围。

Claims (13)

1.一种机器人人机交互***，包括：
机器人端，用于接收用户发出的指令信息，其中机器人端中还包括可变因素信息，基于机器人的可变因素输出交互结果；以及
用户端，用于向机器人发送指示信息，并与机器人互动。
2.根据权利要求1所述的机器人人机交互***，其特征在于，其中指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
3.根据权利要求2所述的机器人人机交互***，其特征在于，所述可变因素信息为基于用户与机器人的交互信息。
4.根据权利要求1所述的机器人人机交互***，其特征在于，所述可变因素影响人机交互的输出结果。
5.一种机器人人机交互方法，包括：
向机器人发送指示信息；
接收用户的指令信息；以及
基于机器人的可变因素输出交互结果。
6.根据权利要求5所述的机器人人机交互方法，其特征在于，所述指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
7.根据权利要求5所述的机器人人机交互方法，其特征在于，所述可变因素信息为基于用户与机器人的交互信息。
8.一种机器人人机交互装置，包括：
输入模块，用于接收用户输入的指令信息；
可变因素识别模块，用于识别机器人出现的可变因素；以及
输出模块，用于输出人机交互的结果。
9.根据权利要求8所述的机器人人机交互装置，其特征在于，所述指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
10.根据权利要求8所述的机器人人机交互装置，其特征在于，所述可变因素信息为基于用户与机器人的交互信息。
11.一种机器人人机交互方法，其特征在于，包括：
接收用户的指令信息；
识别机器人的可变因素信息；以及
根据可变因素信息输出交互结果。
12.根据权利要求11所述的机器人人机交互方法，其特征在于，其中指令信息包括有视频、人脸、表情、场景、声纹、指纹、虹膜瞳孔、或光感信息。
13.根据权利要求11所述的机器人人机交互方法，其特征在于，其中可变因素信息为基于用户与机器人的交互信息。
CN201680001719.4A 2016-07-07 2016-07-07 一种机器人人机交互***、装置和方法 Pending CN106662931A (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2016/089231 WO2018006380A1 (zh) 2016-07-07 2016-07-07 一种机器人人机交互***、装置和方法

Publications (1)

Publication Number Publication Date
CN106662931A true CN106662931A (zh) 2017-05-10

Family

ID=58838047

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680001719.4A Pending CN106662931A (zh) 2016-07-07 2016-07-07 一种机器人人机交互***、装置和方法

Country Status (2)

Country Link
CN (1) CN106662931A (zh)
WO (1) WO2018006380A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107340859A (zh) * 2017-06-14 2017-11-10 北京光年无限科技有限公司 多模态虚拟机器人的多模态交互方法和***
CN110328667A (zh) * 2019-04-30 2019-10-15 北京云迹科技有限公司 用于机器人的控制方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100084734A (ko) * 2009-01-19 2010-07-28 한국과학기술원 사람과 상호작용이 가능한 감정 표현 로봇
US20110004577A1 (en) * 2009-07-02 2011-01-06 Samsung Electronics Co., Ltd. Emotion model, apparatus, and method for adaptively modifying personality features of emotion model
CN102103707A (zh) * 2009-12-16 2011-06-22 群联电子股份有限公司 情感引擎、情感引擎***及电子装置的控制方法
CN103218654A (zh) * 2012-01-20 2013-07-24 沈阳新松机器人自动化股份有限公司 一种机器人情绪情感生成与表达***
CN105082150A (zh) * 2015-08-25 2015-11-25 国家康复辅具研究中心 一种基于用户情绪及意图识别的机器人人机交互方法
CN105345818A (zh) * 2015-11-04 2016-02-24 深圳好未来智能科技有限公司 带有情绪及表情模块的3d视频互动机器人

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9569976B2 (en) * 2012-10-02 2017-02-14 Gavriel Yaacov Krauss Methods circuits, devices and systems for personality interpretation and expression
CN105490918A (zh) * 2015-11-20 2016-04-13 深圳狗尾草智能科技有限公司 一种机器人主动与主人交互的***及方法
CN105511608B (zh) * 2015-11-30 2018-12-25 北京光年无限科技有限公司 基于智能机器人的交互方法及装置、智能机器人
CN105598972B (zh) * 2016-02-04 2017-08-08 北京光年无限科技有限公司 一种机器人***及交互方法

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100084734A (ko) * 2009-01-19 2010-07-28 한국과학기술원 사람과 상호작용이 가능한 감정 표현 로봇
US20110004577A1 (en) * 2009-07-02 2011-01-06 Samsung Electronics Co., Ltd. Emotion model, apparatus, and method for adaptively modifying personality features of emotion model
CN102103707A (zh) * 2009-12-16 2011-06-22 群联电子股份有限公司 情感引擎、情感引擎***及电子装置的控制方法
CN103218654A (zh) * 2012-01-20 2013-07-24 沈阳新松机器人自动化股份有限公司 一种机器人情绪情感生成与表达***
CN105082150A (zh) * 2015-08-25 2015-11-25 国家康复辅具研究中心 一种基于用户情绪及意图识别的机器人人机交互方法
CN105345818A (zh) * 2015-11-04 2016-02-24 深圳好未来智能科技有限公司 带有情绪及表情模块的3d视频互动机器人

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107340859A (zh) * 2017-06-14 2017-11-10 北京光年无限科技有限公司 多模态虚拟机器人的多模态交互方法和***
CN107340859B (zh) * 2017-06-14 2021-04-06 北京光年无限科技有限公司 多模态虚拟机器人的多模态交互方法和***
CN110328667A (zh) * 2019-04-30 2019-10-15 北京云迹科技有限公司 用于机器人的控制方法及装置

Also Published As

Publication number Publication date
WO2018006380A1 (zh) 2018-01-11

Similar Documents

Publication Publication Date Title
CN111833418B (zh) 动画交互方法、装置、设备以及存储介质
US11600033B2 (en) System and method for creating avatars or animated sequences using human body features extracted from a still image
CN109902659B (zh) 用于处理人体图像的方法和装置
WO2020063009A1 (zh) 图像处理方法、装置、存储介质及电子设备
CN107728780A (zh) 一种基于虚拟机器人的人机交互方法及装置
JP2019145108A (ja) 顔に対応する３次元アバターを用いて顔の動きが反映された３ｄアバターを含むイメージを生成する電子装置
CN109919888A (zh) 一种图像融合的方法、模型训练的方法以及相关装置
CN110443167B (zh) 传统文化手势的智能识别方法、智能交互方法及相关装置
CN107632706A (zh) 多模态虚拟人的应用数据处理方法和***
CN113508369A (zh) 交流支持***、交流支持方法、交流支持程序以及图像控制程序
CN110418095B (zh) 虚拟场景的处理方法、装置、电子设备及存储介质
CN113362263B (zh) 变换虚拟偶像的形象的方法、设备、介质及程序产品
CN109327737A (zh) 电视节目推荐方法、终端、***及存储介质
CN106471444A (zh) 一种虚拟3d机器人的交互方法、***及机器人
CN107808191A (zh) 虚拟人多模态交互的输出方法和***
WO2021227916A1 (zh) 面部形象生成方法、装置、电子设备及可读存储介质
CN109584992A (zh) 交互方法、装置、服务器、存储介质及沙盘治疗***
CN106502382A (zh) 用于智能机器人的主动交互方法和***
CN108052250A (zh) 基于多模态交互的虚拟偶像演绎数据处理方法及***
CN113556603B (zh) 调整视频播放效果的方法及装置、电子设备
CN109343695A (zh) 基于虚拟人行为标准的交互方法及***
CN108037825A (zh) 一种虚拟偶像技能开启及演绎的方法及***
CN108563327A (zh) 增强现实方法、装置、存储介质及电子设备
CN107623622A (zh) 一种发送语音动画的方法及电子设备
CN108388889A (zh) 用于分析人脸图像的方法和装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: Room 301, Building 39, 239 Renmin Road, Gusu District, Suzhou City, Jiangsu Province, 215000

Applicant after: Suzhou Dogweed Intelligent Technology Co., Ltd.

Address before: 518000 Dongfang Science and Technology Building 1307-09, 16 Keyuan Road, Yuehai Street, Nanshan District, Shenzhen City, Guangdong Province

Applicant before: Shenzhen green bristlegrass intelligence Science and Technology Ltd.

CB02 Change of applicant information
RJ01 Rejection of invention patent application after publication

Application publication date: 20170510

RJ01 Rejection of invention patent application after publication