CN106325142A - 一种机器人***及其控制方法 - Google Patents

一种机器人***及其控制方法 Download PDF

Info

Publication number
CN106325142A
CN106325142A CN201510388530.2A CN201510388530A CN106325142A CN 106325142 A CN106325142 A CN 106325142A CN 201510388530 A CN201510388530 A CN 201510388530A CN 106325142 A CN106325142 A CN 106325142A
Authority
CN
China
Prior art keywords
signal
robot
robot system
voice signal
speech recognition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510388530.2A
Other languages
English (en)
Inventor
刘鑫
魏达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Yutou Technology Hangzhou Co Ltd
Original Assignee
Yutou Technology Hangzhou Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Yutou Technology Hangzhou Co Ltd filed Critical Yutou Technology Hangzhou Co Ltd
Priority to CN201510388530.2A priority Critical patent/CN106325142A/zh
Priority to PCT/CN2016/086059 priority patent/WO2017000795A1/zh
Priority to TW105120645A priority patent/TWI622474B/zh
Publication of CN106325142A publication Critical patent/CN106325142A/zh
Priority to HK17105096.3A priority patent/HK1231576A1/zh
Pending legal-status Critical Current

Links

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B25—HAND TOOLS; PORTABLE POWER-DRIVEN TOOLS; MANIPULATORS
    • B25J—MANIPULATORS; CHAMBERS PROVIDED WITH MANIPULATION DEVICES
    • B25J11/00—Manipulators not otherwise provided for
    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05B—CONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00—Programme-control systems
    • G05B19/02—Programme-control systems electric
    • G05B19/04—Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042—Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Robotics (AREA)
  • Mechanical Engineering (AREA)
  • Manipulator (AREA)
  • Circuit For Audible Band Transducer (AREA)

Abstract

本发明提供了一种机器人***及其控制方法，所述机器人***包括：麦克风阵列，接收用户发出的语音信号；双目深度摄像头，同步采集两通道图像信号；处理模块，对所述语音信号和所述图像信号进行处理，获取语音识别信号和转动角度信号；电机转动模块，接收所述转动角度信号，并根据所述转动角度信号进行平滑转动。所述机器人***，通过语音这种人类最自然的人机交互方式，在家居环境内，解放人们的双手，让机器人***成为一种高品质的伴侣。

Description

一种机器人***及其控制方法
技术领域
本发明涉及智能机器人技术领域，尤其涉及一种机器人***及其控制方法。
背景技术
随着人工智能、计算机软硬件技术的发展，机器人技术的发展经历了一个从低级到高级的发展过程。第一代机器人装有记忆存储器，由人将作业的各种要求示范给机器人，使其记住操作的程序和要领，当它接收到再现的命令时，则自主地模仿示范动作作业。第二代机器人是装有小型计算机和传感器的离散编程的工业机器人，它能感知外界信号并进行“思维”，它比第一代机器人更灵活、更能适应环境变化的需求。第三代机器人是智能机器人，它不但有第二代机器人的感觉功能和简单的自适应能力，而且能充分识别工作对象和工作环境，并能根据人给的指令和它自身的判断结果自动确定与之相适应的工作，是人工智能发展的高级产物，也是当今机器人发展的热点。
现有机器人***更多应用在工业场景下，工业机器人的控制存在程式化、编程难度高、操作界面不友好等问题，在工业场景下机器人的形态也被限定在机械臂等机器设备属性更强的应用，难以与人们更好地交互。同时，现有机器人***及控制技术存在难以普及，开发成本高等问题。另外，现有机器人***及控制技术难以应用在家居场景，无法友好地在家居场景内与家庭成员友好交互，更难以为家庭成员提供高品质、便捷的服务。
发明内容
针对上述技术问题，本申请提供了一种机器人***，包括：
麦克风阵列，接收用户发出的语音信号；
双目深度摄像头，同步采集两通道图像信号；
处理模块，分别与所述麦克风阵列和所述双目深度摄像头相连，以接收并处理所述语音信号和所述图像信号生成语音识别信号和转动角度信号；
电机转动模块，与所述处理模块相连，接收并根据所述转动角度信号进行平滑转动。
较佳的，所述处理模块包括：
DSP加速协处理器，分别与所述麦克风阵列和所述双目深度摄像头连接，用以接收所述语音信号和所述图像信号，对所述语音信号进行语音增强处理，对所述图像信号进行处理获取测距信号；
机器人主控制器，与所述DSP加速协处理器通过USB接口连接，接收经语音增强处理的所述语音信号和所述测距信号，并根据所述测距信号对所述语音信号进行自动增益处理，以获取所述语音识别信号；以及
根据对所述语音信号进行定位，以获取所述转动角度信号。
较佳的，所述机器人主控制器为多核ARM处理器。
较佳的，所述机器人***还包括：
云端语音识别引擎，接收所述语音识别信号与所述机器人主控制器进行交互，向用户反馈自动语音识别与自然语义处理的结果。
较佳的，所述机器人***还包括：
DLP内投显示模块，位于机器人***头部的内部，将所述机器人的交互界面投影在所述机器人的脸部。
较佳的，所述机器人主控制器通过I2C串行控制协议及HDIM接口与所述DLP内投显示模式连接。
较佳的，所述麦克风阵列为多通道麦克风阵列。
本发明还提供了一种机器人控制方法，适用于所述的机器人***，其特征在于，包括步骤：
S1：接收所述语音信号和所述图像信号，并传递至所述DSP加速协处理器；
S2：所述DSP加速协处理器对所述语音信号和所述图像信号进行处理后传递至所述机器人主控制器，获取语音识别信号以及转动角度信号；
S3：所述云端语音识别引擎接收所述语音识别信号，向户反馈自动语音识别与自然语义处理的结果；
S4：所述转动控制模块接收所述转动角度信号，并根据所述转动角度信号进行平滑转动。
较佳的，所述步骤S1包括步骤：
S11：所述多通道麦克风阵列同步采集不同方向的所述语音信号，传递至所述DSP加速协处理器；
S12：所述双目深度摄像头同步采集两通道的所述图像信号，传递至所述DSP加速协处理器。
较佳的，所述步骤S2包括步骤：
S21：所述DSP加速协处理器将所述语音信号进行波束形成处理，并对所述语音信号中混杂的噪声及回声信号进行语音增强处理；
S22：所述DSP加速协处理器对双目深度视觉算法进行硬件并行加速，对所述图像信号进行处理，获取所述测距信号；
S23：所述机器人主控制器根据所述测距信号对所述语音信号进行自动增益处理；
S24：所述机器人主控制器接收所述语音信号获取所述语音识别信号，并对所述语音信号进行定位获取所述转动角度信号。
综上所述，由于采用了上述技术方案，本专利申请记载了一种机器人***及其控制方法，其有益效果有：所述机器人***，通过语音这种人类最自然的人机交互方式，在家居环境内，解放人们的双手，让机器人***成为一种高品质的伴侣；所述双目深度摄像头对家庭用户进行自动识别与测距，并根据所述测距信号实现语音信号自动增益控制的智能化，便于用户在家居场景中不同距离内，采用自然说话音量都能够使得所述机器人***获取高准确率的语音识别效果；并对所述语音信号进行定位以及电机转动模块实现平滑转动，使得所述多通道麦克风阵列和所述双目深度摄像头自动对准目标，实现了屏蔽噪声、提升语音拾取信噪比；且所述DLP内投显示模块解决了交互界面不友好的问题，为用户提供更加便捷也更具未来科技的显示体验。
附图说明
图1是本发明一种机器人***的结构示意图；
图2是本发明一种机器人控制方法的流程图一；
图3是本发明一种机器人控制方法的流程图二；
图4是本发明一种机器人控制方法的流程图三。
具体实施方式
下面结合附图对本发明的具体实施方式作进一步的说明。
实施例一
如图1所示，本发明提供了一种机器人***，所述机器人***包括：
麦克风阵列，对多路麦克风语音信号进行同步采集，并将采集到的所述语音信号通过I2S音频接口实时传递至DSP加速协处理器3；
双目深度摄像头2，同步采集两通道图像信号，并将采集到的所述图像信号通过USB接口实时传输至DSP加速协处理器3；
DSP加速协处理器3，接收所述语音信号和所述图像信号，对语音增强算法及双目深度视觉算法加速，将所述语音信号和所述图像信号分别进行语音增强处理以及数目视觉处理获取测距信号，并将处理结果传递至机器人主控制器4；
机器人主控制器4，与所述DSP加速协处理器3通过USB接口相连，接收处理后的所述语音信号和所述测距信号，根据所述测距信号对所述语音信号进行自动增益控制，并根据对所述语音信号进行定位获取转动角度信号，实现调度和控制所述机器人***；
云端语音识别引擎5，与所述机器人主控制器4进行交互，反馈给用户准确及个性化的自动语音识别与自然语义处理的结果，实现远场自动语音识别的Hands-free的产品体验。
电机转动模块6，与所述机器人***中转动结构无缝连接，根据所述机器人主控制器4发送的转动角度信号进行平滑转动；
DLP内投显示模块7，位于所述机器人头部的内部，将所述机器人的交互界面高清投影在所述机器人的脸部，为用户带来未来交互方式的科技感。
其中，所述麦克风阵列为多通道麦克风阵列1，能够同步采集不同方向的语音信号。所述DSP加速协处理器3采用T1德州仪器高性能浮点运算数字信号处理器平台，所述机器人主控制器4采用多核ARM处理器。所述DSP加速协处理器3接收所述图像信号，并对所述图像信号中的目标用户进行识别，获取目标用于与所述机器人的距离，即所述测距信号。
所述机器人主控制器4接收所述DSP加速协处理器3增强后的高信噪比的所述语音信号，实现语音激活、语音寻向、本地自动语音识别，获取语音识别信号，并与所述云端语音识别引擎5进行交互，反馈给用户准确及个性化的自动语音识别与自然语义处理结果。从而实现远场自动语音上识别的Hands-free的产品体验。另外，所述机器人主控制器4接收并实时更新所述DSP加速协处理器3经双目视觉深度算法处理后提取的测距信号，并根据所述测距信号对所述语音信号进行自动增益控制，从而实现用户在家居场景的远距离条件下，不同距离都可以用自然的说话音量快速激活所述机器人，并进行自动语音识别交互。
所述机器人主控制器4通过I2C串行控制协议及HDMI接口与所述DLP内投显示模块7连接，实现机器人表情，并对从所述DSP加速协处理器3中采集到的所述测距信号处理后获取转动角度信号，所述电机转动模块6根据所述转动角度信号进行转动，将所述多通道麦克风阵列1对准说话用户，通过波束形成的方式来抑制远场环境中的噪声与回声，提高语音信号的信噪比，从而提升语音识别的准确率。同时，语音寻向转动可以将所述机器人界面最准用户，从而进一步提高所述机器人***与用户交互的趣味性。
所述机器人***，通过语音这种人类最自然的人机交互方式，在家居环境内，解放人们的双手，让机器人***成为一种高品质的伴侣。所述双目深度摄像头2对家庭用户进行自动识别与测距，并根据所述测距信号实现语音信号自动增益控制的智能化，便于用户在家居场景中不同距离内，采用自然说话音量都能够使得所述机器人***获取高准确率的语音识别效果。并对所述语音信号进行定位以及电机转动模块6实现平滑转动，使得所述多通道麦克风阵列1和所述双目深度摄像头2自动对准目标，实现了屏蔽噪声、提升语音拾取信噪比。且所述DLP内投显示模块7解决了交互界面不友好的问题，为用户提供更加便捷也更具未来科技的显示体验。
实施例二
根据实施例一提出的一种机器人***，本实施例基于该***提出了一种机器人控制方法，如图2所示，具体包括步骤：
S1：采取语音信号和图像信号，并将这两种信号传输给所述DSP加速协处理器3；
S2：所述DSP加速协处理器3对所述语音信号和所述图像信号进行处理后传递至所述机器人主控制器4，获取语音识别信号以及转动角度信号；
S3：所述云端语音识别引擎5接收所述语音识别信号，向用户反馈自动语音识别与自然语义处理的结果；
S4：所述电机转动模块6接收所述转动角度信号，并根据所述转动角度信号进行平滑转动。
其中，如图3所示步骤S1包括：
S11：所述多通道麦克风阵列1同步采集不同方向的语音信号，传递至所述DSP加速协处理器3；
S12：所述双目深度摄像头2同步采集两通道的所述图像信号，传递至所述DSP加速协处理器3。
如图4所示，所述步骤S2包括：
S21：所述DSP加速协处理器3将所述语音信号进行波束形成处理，并对语音信号中混杂的噪声及回声信号进行语音增强处理；
S22：所述DSP加速协处理器3对双目深度视觉算法进行硬件并行加速，对所述图像信号进行处理，获取测距信号；
S23：所述机器人主控制器4根据所述测距信号对所述语音信号进行自动增益处理；
S24：所述机器人主控制器4接收所述语音信号获取所述语音识别信号，并对所述语音信号进行定位获取所述转动角度信号。
所述机器人控制方法，通过所述多通道麦克风阵列1和所述双目深度摄像头2获取所述语音信号和所述图像信号，对所述图像信号进行处理后获取识别和测距信号，所述语音信号根据所述识别和测距信号进行相应的自动增益处理，便于用户在家居场景中不同距离内，采用自然说话音量都能够使得所述机器人***获取高准确率的语音识别效果。对所述语音信号进行定位，所述电机转动模块6根据定位结果进行平滑转动，使得所述多通道麦克风阵列1和所述双目深度摄像头2对准目标，实现了屏蔽噪声、提升语音拾取信噪比的效果。
以上所述仅为本发明较佳的实施例，并非因此限制本发明的实施方式及保护范围，对于本领域技术人员而言，应当能够意识到凡运用本发明说明书及图示内容所做出的等同替换和显而易见的变化所得到的方案，均应当包含在本发明的保护范围内。

Claims (10)

1.一种机器人***，其特征在于，包括：
麦克风阵列，接收用户发出的语音信号；
双目深度摄像头，同步采集两通道图像信号；
处理模块，分别与所述麦克风阵列和所述双目深度摄像头相连，以接收并处理所述语音信号和所述图像信号生成语音识别信号和转动角度信号；
电机转动模块，与所述处理模块相连，接收并根据所述转动角度信号进行平滑转动。
2.根据权利要求1所述的机器人***，其特征在于，所述处理模块包括：
DSP加速协处理器，分别与所述麦克风阵列和所述双目深度摄像头连接，用以接收所述语音信号和所述图像信号，对所述语音信号进行语音增强处理，对所述图像信号进行处理获取测距信号；
机器人主控制器，与所述DSP加速协处理器通过USB接口连接，接收经语音增强处理的所述语音信号和所述测距信号，并根据所述测距信号对所述语音信号进行自动增益处理，以获取所述语音识别信号；以及
根据对所述语音信号进行定位，以获取所述转动角度信号。
3.根据权利要求2所述的机器人***，其特征在于，所述机器人主控制器为多核ARM处理器。
4.根据权利要求1所述的机器人***，其特征在于，所述机器人***还包括：
云端语音识别引擎，与所述机器人主控制器相连，接收所述语音识别信号并与所述机器人主控制器进行交互，向用户反馈自动语音识别与自然语义处理的结果。
5.根据权利要求3所述的机器人***，其特征在于，所述机器人***还包括：
DLP内投显示模块，与所述机器人主控制器相连，位于机器人***头部的内部，将所述机器人的交互界面投影在所述机器人的脸部。
6.根据权利要求5所述的机器人***，其特征在于，所述机器人主控制器通过I2C串行控制协议及HDIM接口与所述DLP内投显示模式连接。
7.根据权利要求1所述的麦克风阵列，其特征在于，所述麦克风阵列为多通道麦克风阵列。
8.一种机器人控制方法，其特征在于，包括步骤：
S1：接收语音信号和图像信号，并传递至DSP加速协处理器；
S2：DSP加速协处理器对所述语音信号和所述图像信号进行处理后传递至机器人主控制器，获取语音识别信号以及转动角度信号；
S3：云端语音识别引擎接收所述语音识别信号，向户反馈自动语音识别与自然语义处理的结果；
S4：转动控制模块接收所述转动角度信号，并根据所述转动角度信号进行平滑转动。
9.根据权利要求8所述的机器人控制方法，其特征在于，所述步骤S1包括步骤：
S11：多通道麦克风阵列同步采集不同方向的所述语音信号，传递至所述DSP加速协处理器；
S12：双目深度摄像头同步采集两通道的所述图像信号，传递至所述DSP加速协处理器。
10.根据权利要求8所述的机器人控制方法，其特征在于，所述步骤S2包括步骤：
S21：所述DSP加速协处理器将所述语音信号进行波束形成处理，并对所述语音信号中混杂的噪声及回声信号进行语音增强处理；
S22：所述DSP加速协处理器对双目深度视觉算法进行硬件并行加速，对所述图像信号进行处理，获取所述测距信号；
S23：所述机器人主控制器根据所述测距信号对所述语音信号进行自动增益处理；
S24：所述机器人主控制器接收所述语音信号获取所述语音识别信号，并对所述语音信号进行定位获取所述转动角度信号。
CN201510388530.2A 2015-06-30 2015-06-30 一种机器人***及其控制方法 Pending CN106325142A (zh)

Priority Applications (4)

Application Number Priority Date Filing Date Title
CN201510388530.2A CN106325142A (zh) 2015-06-30 2015-06-30 一种机器人***及其控制方法
PCT/CN2016/086059 WO2017000795A1 (zh) 2015-06-30 2016-06-16 一种机器人***及其控制方法
TW105120645A TWI622474B (zh) 2015-06-30 2016-06-30 機器人系統及其控制方法
HK17105096.3A HK1231576A1 (zh) 2015-06-30 2017-05-19 種機器人系統及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510388530.2A CN106325142A (zh) 2015-06-30 2015-06-30 一种机器人***及其控制方法

Publications (1)

Publication Number Publication Date
CN106325142A true CN106325142A (zh) 2017-01-11

Family

ID=57607865

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510388530.2A Pending CN106325142A (zh) 2015-06-30 2015-06-30 一种机器人***及其控制方法

Country Status (4)

Country Link
CN (1) CN106325142A (zh)
HK (1) HK1231576A1 (zh)
TW (1) TWI622474B (zh)
WO (1) WO2017000795A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107464564A (zh) * 2017-08-21 2017-12-12 腾讯科技（深圳）有限公司 语音交互方法、装置及设备
CN108888204A (zh) * 2018-06-29 2018-11-27 炬大科技有限公司 一种扫地机器人呼唤装置及呼唤方法
WO2019056700A1 (zh) * 2017-09-22 2019-03-28 深圳壹账通智能科技有限公司 语音对话机器人的控制方法、装置、终端设备及介质
CN110695989A (zh) * 2019-09-20 2020-01-17 浙江树人学院（浙江树人大学） 一种用于智能机器人的视听交互***及其交互控制方法
CN111128152A (zh) * 2019-11-29 2020-05-08 中国科学院深圳先进技术研究院 语音交互控制器、***以及机器人

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107490843A (zh) * 2017-09-10 2017-12-19 南京中高知识产权股份有限公司 一种日夜两用的智能交互机器人
CN107627307A (zh) * 2017-09-10 2018-01-26 南京中高知识产权股份有限公司 一种小型高清摄像的智能交互机器人
WO2020018536A1 (en) 2018-07-17 2020-01-23 iT SpeeX LLC Method, system, and computer program product for communication with an intelligent industrial assistant and industrial machine
CN110238844A (zh) * 2019-04-30 2019-09-17 北京云迹科技有限公司 机器人转身处理方法及装置
CN111063079B (zh) * 2019-11-27 2022-04-15 深圳云天励飞技术有限公司 一种基于门禁***的双目活体人脸检测方法及装置
CN113580170A (zh) * 2021-08-27 2021-11-02 孙腾阔 基于Kinect的多功能家庭机器人

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102609089A (zh) * 2011-01-13 2012-07-25 微软公司 用于机器人和用户交互的多状态模型
CN102905094A (zh) * 2012-10-26 2013-01-30 鸿富锦精密工业（深圳）有限公司 声控电视机及其提高语音接收效果的方法
CN103052001A (zh) * 2011-10-17 2013-04-17 联想(北京)有限公司 智能设备及其控制方法
KR101281806B1 (ko) * 2012-12-28 2013-07-04 (주) 퓨처로봇 퍼스널 로봇
CN203151672U (zh) * 2013-03-21 2013-08-21 徐华中 一种具有声源定位功能的视频***
CN103366756A (zh) * 2012-03-28 2013-10-23 联想(北京)有限公司 一种声音信号的接收方法及装置
US20140005830A1 (en) * 2012-06-28 2014-01-02 Honda Motor Co., Ltd. Apparatus for controlling mobile robot
CN103761967A (zh) * 2014-01-08 2014-04-30 上海应用技术学院 一种嵌入式语音识别***
US20140164476A1 (en) * 2012-12-06 2014-06-12 At&T Intellectual Property I, Lp Apparatus and method for providing a virtual assistant
CN103902963A (zh) * 2012-12-28 2014-07-02 联想(北京)有限公司 一种识别方位及身份的方法和电子设备
CN104010251A (zh) * 2013-02-27 2014-08-27 晨星半导体股份有限公司 收音***与相关方法
CN104309964A (zh) * 2014-09-03 2015-01-28 北京大学深圳研究生院 一种基于声学矢量传感器的语音控制智能垃圾桶
CN104464739A (zh) * 2013-09-18 2015-03-25 华为技术有限公司 音频信号处理方法及装置、差分波束形成方法及装置

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4561209B2 (ja) * 2004-07-13 2010-10-13 日本ビクター株式会社 ロボット
KR101483269B1 (ko) * 2008-05-06 2015-01-21 삼성전자주식회사 로봇의 음원 위치 탐색 방법 및 그 장치
CN101612733B (zh) * 2008-06-25 2013-07-31 中国科学院自动化研究所 一种分布式多传感器移动机器人***
CN102323817A (zh) * 2011-06-07 2012-01-18 上海大学 一种服务机器人控制平台***及其多模式智能交互与智能行为的实现方法
CN103336788A (zh) * 2013-06-05 2013-10-02 上海交通大学 一种仿人机器人辅助的互联网信息获取方法及***
CN203689077U (zh) * 2014-02-18 2014-07-02 中航航空电子有限公司 智能服务机器人
CN203956916U (zh) * 2014-04-11 2014-11-26 北京路德瑞科电子技术有限公司 一种智能家用机器人
CN103984315A (zh) * 2014-05-15 2014-08-13 成都百威讯科技有限责任公司 一种家用多功能智能机器人
CN104102346A (zh) * 2014-07-01 2014-10-15 华中科技大学 一种家用信息采集和用户情感识别设备及其工作方法
CN104723339A (zh) * 2014-12-18 2015-06-24 深圳狗尾草智能科技有限公司 一种智能机器人***

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102609089A (zh) * 2011-01-13 2012-07-25 微软公司 用于机器人和用户交互的多状态模型
CN103052001A (zh) * 2011-10-17 2013-04-17 联想(北京)有限公司 智能设备及其控制方法
CN103366756A (zh) * 2012-03-28 2013-10-23 联想(北京)有限公司 一种声音信号的接收方法及装置
US20140005830A1 (en) * 2012-06-28 2014-01-02 Honda Motor Co., Ltd. Apparatus for controlling mobile robot
CN102905094A (zh) * 2012-10-26 2013-01-30 鸿富锦精密工业（深圳）有限公司 声控电视机及其提高语音接收效果的方法
US20140164476A1 (en) * 2012-12-06 2014-06-12 At&T Intellectual Property I, Lp Apparatus and method for providing a virtual assistant
KR101281806B1 (ko) * 2012-12-28 2013-07-04 (주) 퓨처로봇 퍼스널 로봇
CN103902963A (zh) * 2012-12-28 2014-07-02 联想(北京)有限公司 一种识别方位及身份的方法和电子设备
CN104010251A (zh) * 2013-02-27 2014-08-27 晨星半导体股份有限公司 收音***与相关方法
CN203151672U (zh) * 2013-03-21 2013-08-21 徐华中 一种具有声源定位功能的视频***
CN104464739A (zh) * 2013-09-18 2015-03-25 华为技术有限公司 音频信号处理方法及装置、差分波束形成方法及装置
CN103761967A (zh) * 2014-01-08 2014-04-30 上海应用技术学院 一种嵌入式语音识别***
CN104309964A (zh) * 2014-09-03 2015-01-28 北京大学深圳研究生院 一种基于声学矢量传感器的语音控制智能垃圾桶

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107464564A (zh) * 2017-08-21 2017-12-12 腾讯科技（深圳）有限公司 语音交互方法、装置及设备
WO2019056700A1 (zh) * 2017-09-22 2019-03-28 深圳壹账通智能科技有限公司 语音对话机器人的控制方法、装置、终端设备及介质
CN108888204A (zh) * 2018-06-29 2018-11-27 炬大科技有限公司 一种扫地机器人呼唤装置及呼唤方法
CN108888204B (zh) * 2018-06-29 2022-02-22 炬大科技有限公司 一种扫地机器人呼唤装置及呼唤方法
CN110695989A (zh) * 2019-09-20 2020-01-17 浙江树人学院（浙江树人大学） 一种用于智能机器人的视听交互***及其交互控制方法
CN111128152A (zh) * 2019-11-29 2020-05-08 中国科学院深圳先进技术研究院 语音交互控制器、***以及机器人

Also Published As

Publication number Publication date
HK1231576A1 (zh) 2017-12-22
TWI622474B (zh) 2018-05-01
TW201700238A (zh) 2017-01-01
WO2017000795A1 (zh) 2017-01-05

Similar Documents

Publication Publication Date Title
CN106325142A (zh) 一种机器人***及其控制方法
CN107333120B (zh) 一种基于麦克风阵列和立体视觉的集成传感器
CN107464564B (zh) 语音交互方法、装置及设备
CN102903362B (zh) 集成的本地和基于云的语音识别
US20240087587A1 (en) Wearable system speech processing
Nakadai et al. Design and Implementation of Robot Audition System'HARK'—Open Source Software for Listening to Three Simultaneous Speakers
CN111239687B (zh) 一种基于深度神经网络的声源定位方法及***
CN109318243A (zh) 一种视觉机器人的声源跟踪***、方法和清洁机器人
CN108297108B (zh) 一种球形跟随机器人及其跟随控制方法
CN110364145A (zh) 一种语音识别的方法、语音断句的方法及装置
CN109074816A (zh) 远场自动语音识别预处理
CN110223690A (zh) 基于图像与语音融合的人机交互方法及装置
Liu et al. Continuous sound source localization based on microphone array for mobile robots
WO2012067829A1 (en) Semi-private communication in open environments
CN104185116B (zh) 一种自动确定声辐射模式的方法
CN109640224A (zh) 一种拾音方法及装置
CN106863320A (zh) 一种用于智能机器人的语音交互数据获取方法及装置
Ahuja et al. Direction-of-voice (dov) estimation for intuitive speech interaction with smart devices ecosystems
JP5206151B2 (ja) 音声入力ロボット、遠隔会議支援システム、遠隔会議支援方法
CN110517702A (zh) 信号生成的方法、基于人工智能的语音识别方法及装置
Martinson et al. Improving human-robot interaction through adaptation to the auditory scene
CN209579577U (zh) 一种视觉机器人的声源跟踪***和清洁机器人
JP7400364B2 (ja) 音声認識システム及び情報処理方法
CN110364159B (zh) 一种语音指令的执行方法、装置及电子设备
CN109688512B (zh) 一种拾音方法及装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 1231576

Country of ref document: HK

RJ01 Rejection of invention patent application after publication

Application publication date: 20170111

RJ01 Rejection of invention patent application after publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: WD

Ref document number: 1231576

Country of ref document: HK