JP2018534641A - ロボットの感情データ更新方法及びシステム - Google Patents
ロボットの感情データ更新方法及びシステム Download PDFInfo
- Publication number
- JP2018534641A JP2018534641A JP2017538648A JP2017538648A JP2018534641A JP 2018534641 A JP2018534641 A JP 2018534641A JP 2017538648 A JP2017538648 A JP 2017538648A JP 2017538648 A JP2017538648 A JP 2017538648A JP 2018534641 A JP2018534641 A JP 2018534641A
- Authority
- JP
- Japan
- Prior art keywords
- data
- robot
- emotion
- user
- emotion data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000008451 emotion Effects 0.000 title claims abstract description 314
- 238000000034 method Methods 0.000 title claims abstract description 26
- 230000008921 facial expression Effects 0.000 claims description 54
- 230000002996 emotional effect Effects 0.000 claims description 8
- 241000282412 Homo Species 0.000 description 5
- 238000007499 fusion processing Methods 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 230000036651 mood Effects 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/174—Facial expression recognition
Landscapes
- Engineering & Computer Science (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Oral & Maxillofacial Surgery (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Manipulator (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
【選択図】図1
Description
第1の局面で、本発明は、
ユーザによって入力された多様な形式のデータであるマルチモード入力データを取得するステップS1と、
前記ユーザによって入力された多様な形式のデータに基づき、感情識別を行い、識別されたユーザのマルチモード感情データを得るステップS2と、
前記識別されたユーザのマルチモード感情データを融合して、前記ユーザの感情データ予測結果を得るステップS3と、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、前記ユーザの感情データ予測結果に基づき、前記ロボットの感情データを更新するステップS4と、を含むロボットの感情データ更新方法を提供する。
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、且つ前記ロボット感情属性テーブルによってロボットの言語データ及び表情データを得るステップS41と、
前記ユーザの感情データ予測結果に基づき、前記ロボットの言語データを更新して、前記ロボットの言語データの更新結果を得るステップS42と、
前記ユーザの感情データ予測結果に基づき、前記ロボットの表情データを更新して、前記ロボットの表情データの更新結果を得るステップS43と、を更に含む。
ユーザによって入力された多様な形式のデータであるマルチモード入力データを取得するためのデータ取得モジュールと、
前記ユーザによって入力された多様な形式のデータに基づき、感情識別を行い、識別されたユーザのマルチモード感情データを得るためのユーザ感情データ識別モジュールと、
前記識別されたユーザのマルチモード感情データを融合して、前記ユーザの感情データ予測結果を得るためのユーザ感情データ予測モジュールと、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、前記ユーザの感情データ予測結果に基づき、前記ロボットの感情データを更新するためのロボット感情データ更新モジュールと、を含むロボットの感情データ更新システムを提供する。
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、且つ前記ロボット感情属性テーブルによってロボットの言語データ及び表情データを得るためのロボットの感情データ取得モジュールと、
前記ユーザの感情データ予測結果に基づき、前記ロボットの言語データを更新して、前記ロボットの言語データの更新結果を得るための言語データ更新モジュールと、
前記ユーザの感情データ予測結果に基づき、前記ロボットの表情データを更新して、前記ロボットの表情データの更新結果を得るための表情データの更新モジュールと、を更に含む。
以下、本発明の実施の形態や従来の技術における技術的解決手段をより明瞭に説明するために、実施の形態や従来の技術の説明に必要な図面を簡単に説明する。
図1は、本発明の実施例1に係るロボットの感情データ更新方法を示すフローチャートである。図1に示すように、本発明の実施例1によるロボットの感情データ更新方法は、
ユーザによって入力された多様な形式のデータであるマルチモード入力データを取得するステップS1と、
ユーザによって入力された多様な形式のデータに基づき、感情識別を行い、識別されたユーザのマルチモード感情データを得るステップS2と、
識別されたユーザのマルチモード感情データを融合して、ユーザの感情データ予測結果を得るステップS3と、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、ユーザの感情データ予測結果に基づき、ロボットの感情データを更新するステップS4と、を含む。
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、且つロボット感情属性テーブルによってロボットの言語データ及び表情データを得るステップS41と、
ユーザの感情データ予測結果に基づき、ロボットの言語データを更新して、ロボットの言語データの更新結果を得るステップS42と、
ユーザの感情データ予測結果に基づき、ロボットの表情データを更新して、ロボットの表情データの更新結果を得るステップS43と、を更に含む。
図2は、本発明の実施例2に係るロボットの感情データ更新システムを示す模式図である。図2に示すように、本発明の実施例2によるロボットの感情データ更新システム10は、
ユーザによって入力された多様な形式のデータであるマルチモード入力データを取得するためのデータ取得モジュール101と、
ユーザによって入力された多様な形式のデータに基づき、感情識別を行い、識別されたユーザのマルチモード感情データを得るためのユーザ感情データ識別モジュール102と、
識別されたユーザのマルチモード感情データを融合して、ユーザの感情データ予測結果を得るためのユーザ感情データ予測モジュール103と、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、ユーザの感情データ予測結果に基づき、ロボットの感情データを更新するためのロボット感情データ更新モジュール104と、を含む。
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、且つロボット感情属性テーブルによってロボットの言語データ及び表情データを得るためのロボットの感情データ取得モジュール1041と、
ユーザの感情データ予測結果に基づき、ロボットの言語データを更新して、ロボットの言語データの更新結果を得るための言語データ更新モジュール1042と、
ユーザの感情データ予測結果に基づき、ロボットの表情データを更新して、ロボットの表情データの更新結果を得るための表情データの更新モジュール1043と、を更に含む。
Claims (10)
- ユーザによって入力された多様な形式のデータであるマルチモード入力データを取得するステップS1と、
前記ユーザによって入力された多様な形式のデータに基づき、感情識別を行い、識別されたユーザのマルチモード感情データを得るステップS2と、
前記識別されたユーザのマルチモード感情データを融合して、前記ユーザの感情データ予測結果を得るステップS3と、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、前記ユーザの感情データ予測結果に基づき、前記ロボットの感情データを更新するステップS4と、を含むことを特徴とするロボットの感情データ更新方法。 - 前記ロボットの感情データがロボットの言語データ及び表情データを含むことを特徴とする請求項1に記載のロボットの感情データ更新方法。
- 前記ステップS4には、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、且つ前記ロボット感情属性テーブルによってロボットの言語データ及び表情データを得るステップS41と、
前記ユーザの感情データ予測結果に基づき、前記ロボットの言語データを更新して、前記ロボットの言語データの更新結果を得るステップS42と、
前記ユーザの感情データ予測結果に基づき、前記ロボットの表情データを更新して、前記ロボットの表情データの更新結果を得るステップS43と、を更に含むことを特徴とする請求項2に記載のロボットの感情データ更新方法。 - 前記マルチモード入力データは、音声入力データ、テキスト入力データ、画像入力データ、手振り識別データのうちの少なくとも一方であることを特徴とする請求項1に記載のロボットの感情データ更新方法。
- 前記ロボット感情属性テーブルは、前記ロボットの属性情報を含む前記ロボットの知識マップによって取得されたものであることを特徴とする請求項1に記載のロボットの感情データ更新方法。
- ユーザによって入力された多様な形式のデータであるマルチモード入力データを取得するためのデータ取得モジュールと、
前記ユーザによって入力された多様な形式のデータに基づき、感情識別を行い、識別されたユーザのマルチモード感情データを得るためのユーザ感情データ識別モジュールと、
前記識別されたユーザのマルチモード感情データを融合して、前記ユーザの感情データ予測結果を得るためのユーザ感情データ予測モジュールと、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、前記ユーザの感情データ予測結果に基づき、前記ロボットの感情データを更新するためのロボット感情データ更新モジュールと、を含むことを特徴とするロボットの感情データ更新システム。 - 前記ロボットの感情データがロボットの言語データ及び表情データを含むことを特徴とする請求項6に記載のロボットの感情データ更新システム。
- 前記ロボット感情データ更新モジュールには、
ロボットの感情データを記述するためのロボット感情属性テーブルを取得し、且つ前記ロボット感情属性テーブルによってロボットの言語データ及び表情データを得るためのロボットの感情データ取得モジュールと、
前記ユーザの感情データ予測結果に基づき、前記ロボットの言語データを更新して、前記ロボットの言語データの更新結果を得るための言語データ更新モジュールと、
前記ユーザの感情データ予測結果に基づき、前記ロボットの表情データを更新して、前記ロボットの表情データの更新結果を得るための表情データの更新モジュールと、を更に含むことを特徴とする請求項7に記載のロボットの感情データ更新システム。 - 前記マルチモード入力データは、音声入力データ、テキスト入力データ、画像入力データ、手振り識別データのうちの少なくとも一方であることを特徴とする請求項6に記載のロボットの感情データ更新システム。
- 前記ロボット感情属性テーブルは、前記ロボットの属性情報を含む前記ロボットの知識マップによって取得されたものであることを特徴とする請求項6に記載のロボットの感情データ更新システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610539549.7 | 2016-07-07 | ||
CN201610539549.7A CN107590503A (zh) | 2016-07-07 | 2016-07-07 | 一种机器人情感数据更新方法及*** |
PCT/CN2016/094907 WO2018006471A1 (zh) | 2016-07-07 | 2016-08-12 | 一种机器人情感数据更新方法及*** |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2018534641A true JP2018534641A (ja) | 2018-11-22 |
Family
ID=60901648
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017538648A Pending JP2018534641A (ja) | 2016-07-07 | 2016-08-12 | ロボットの感情データ更新方法及びシステム |
Country Status (3)
Country | Link |
---|---|
JP (1) | JP2018534641A (ja) |
CN (1) | CN107590503A (ja) |
WO (1) | WO2018006471A1 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109079791A (zh) * | 2018-09-02 | 2018-12-25 | 重庆市南岸区瑜目网络科技有限责任公司 | 一种让人工智能机器人具有人类情绪的方法 |
CN113486233A (zh) * | 2020-08-21 | 2021-10-08 | 青岛海信电子产业控股股份有限公司 | 一种内容推荐方法、设备及介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003200370A (ja) * | 2001-11-05 | 2003-07-15 | Samsung Electronics Co Ltd | オブジェクトの成長制御システム及びオブジェクトの成長制御方法 |
JP2005128711A (ja) * | 2003-10-22 | 2005-05-19 | Omron Corp | 感性情報推定方法および文字アニメーション作成方法、これらの方法を用いたプログラム、記憶媒体、感性情報推定装置、文字アニメーション作成装置 |
JP2006178063A (ja) * | 2004-12-21 | 2006-07-06 | Toyota Central Res & Dev Lab Inc | 対話処理装置 |
JP2007271655A (ja) * | 2006-03-30 | 2007-10-18 | Brother Ind Ltd | 感情付加装置、感情付加方法及び感情付加プログラム |
JP2008125815A (ja) * | 2006-11-21 | 2008-06-05 | Business Design Kenkyusho:Kk | 会話ロボットシステム |
JP2012059107A (ja) * | 2010-09-10 | 2012-03-22 | Nec Corp | 感情推定装置、感情推定方法およびプログラム |
JP2016036883A (ja) * | 2014-08-08 | 2016-03-22 | 日本電信電話株式会社 | ロボット制御装置、ロボット制御方法及びロボット制御プログラム |
WO2016080553A1 (ja) * | 2014-11-21 | 2016-05-26 | ヴイストン株式会社 | 学習型ロボット、学習型ロボットシステム、及び学習型ロボット用プログラム |
Family Cites Families (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1151016C (zh) * | 1999-11-30 | 2004-05-26 | 索尼公司 | 机器人设备及其控制方法,和机器人性格判别方法 |
KR100953407B1 (ko) * | 2008-04-24 | 2010-04-19 | 한국과학기술원 | 로봇의 호감도 형성장치 및 그 방법 |
CN101604204B (zh) * | 2009-07-09 | 2011-01-05 | 北京科技大学 | 智能情感机器人分布式认知*** |
CN103413113A (zh) * | 2013-01-15 | 2013-11-27 | 上海大学 | 一种服务机器人智能情感交互的方法 |
CN103456314B (zh) * | 2013-09-03 | 2016-02-17 | 广州创维平面显示科技有限公司 | 一种情感识别方法以及装置 |
EP2933070A1 (en) * | 2014-04-17 | 2015-10-21 | Aldebaran Robotics | Methods and systems of handling a dialog with a robot |
CN104493827A (zh) * | 2014-11-17 | 2015-04-08 | 福建省泉州市第七中学 | 智能认知机器人及其认知*** |
US20160162807A1 (en) * | 2014-12-04 | 2016-06-09 | Carnegie Mellon University, A Pennsylvania Non-Profit Corporation | Emotion Recognition System and Method for Modulating the Behavior of Intelligent Systems |
CN104965426A (zh) * | 2015-06-24 | 2015-10-07 | 百度在线网络技术(北京)有限公司 | 基于人工智能的智能机器人控制***、方法和装置 |
CN105046238A (zh) * | 2015-08-17 | 2015-11-11 | 华侨大学 | 一种面部表情机器人多通道信息情感表达映射方法 |
CN105334743B (zh) * | 2015-11-18 | 2018-10-26 | 深圳创维-Rgb电子有限公司 | 一种基于情感识别的智能家居控制方法及其*** |
CN105355200B (zh) * | 2015-11-20 | 2020-02-07 | 深圳狗尾草智能科技有限公司 | 直接训练和修改机器人交互内容的***及方法 |
CN105739688A (zh) * | 2016-01-21 | 2016-07-06 | 北京光年无限科技有限公司 | 一种基于情感体系的人机交互方法、装置和交互*** |
CN105740948B (zh) * | 2016-02-04 | 2019-05-21 | 北京光年无限科技有限公司 | 一种面向智能机器人的交互方法及装置 |
CN105690408A (zh) * | 2016-04-27 | 2016-06-22 | 深圳前海勇艺达机器人有限公司 | 一种基于数据字典的情感识别机器人 |
-
2016
- 2016-07-07 CN CN201610539549.7A patent/CN107590503A/zh active Pending
- 2016-08-12 JP JP2017538648A patent/JP2018534641A/ja active Pending
- 2016-08-12 WO PCT/CN2016/094907 patent/WO2018006471A1/zh active Application Filing
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003200370A (ja) * | 2001-11-05 | 2003-07-15 | Samsung Electronics Co Ltd | オブジェクトの成長制御システム及びオブジェクトの成長制御方法 |
JP2005128711A (ja) * | 2003-10-22 | 2005-05-19 | Omron Corp | 感性情報推定方法および文字アニメーション作成方法、これらの方法を用いたプログラム、記憶媒体、感性情報推定装置、文字アニメーション作成装置 |
JP2006178063A (ja) * | 2004-12-21 | 2006-07-06 | Toyota Central Res & Dev Lab Inc | 対話処理装置 |
JP2007271655A (ja) * | 2006-03-30 | 2007-10-18 | Brother Ind Ltd | 感情付加装置、感情付加方法及び感情付加プログラム |
JP2008125815A (ja) * | 2006-11-21 | 2008-06-05 | Business Design Kenkyusho:Kk | 会話ロボットシステム |
JP2012059107A (ja) * | 2010-09-10 | 2012-03-22 | Nec Corp | 感情推定装置、感情推定方法およびプログラム |
JP2016036883A (ja) * | 2014-08-08 | 2016-03-22 | 日本電信電話株式会社 | ロボット制御装置、ロボット制御方法及びロボット制御プログラム |
WO2016080553A1 (ja) * | 2014-11-21 | 2016-05-26 | ヴイストン株式会社 | 学習型ロボット、学習型ロボットシステム、及び学習型ロボット用プログラム |
Also Published As
Publication number | Publication date |
---|---|
CN107590503A (zh) | 2018-01-16 |
WO2018006471A1 (zh) | 2018-01-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US20210081056A1 (en) | Vpa with integrated object recognition and facial expression recognition | |
US10977452B2 (en) | Multi-lingual virtual personal assistant | |
US20200236425A1 (en) | Method and apparatus for filtering video | |
US11206450B2 (en) | System, apparatus and method for providing services based on preferences | |
US10593322B2 (en) | Electronic device and method for controlling the same | |
KR102448382B1 (ko) | 텍스트와 연관된 이미지를 제공하는 전자 장치 및 그 동작 방법 | |
US10521723B2 (en) | Electronic apparatus, method of providing guide and non-transitory computer readable recording medium | |
US11508378B2 (en) | Electronic device and method for controlling the same | |
EP3756185B1 (en) | Electronic device for outputting response to speech input by using application and operation method thereof | |
KR102484257B1 (ko) | 전자 장치, 그의 문서 표시 방법 및 비일시적 컴퓨터 판독가능 기록매체 | |
CN104985599A (zh) | 基于人工智能的智能机器人控制方法、***及智能机器人 | |
KR102429583B1 (ko) | 전자 장치, 그의 가이드 제공 방법 및 비일시적 컴퓨터 판독가능 기록매체 | |
US20210124929A1 (en) | Device and method for auto audio and video focusing | |
JP2018024058A (ja) | 接客装置、接客方法及び接客システム | |
US11830502B2 (en) | Electronic device and method for controlling the same | |
KR20180096483A (ko) | 전자 장치, 이의 제어 방법 및 비일시적인 컴퓨터 판독가능 기록매체 | |
JP2018534641A (ja) | ロボットの感情データ更新方法及びシステム | |
KR20190061824A (ko) | 전자장치 및 그 제어 방법 | |
US20210004702A1 (en) | System and method for generating information for interaction with a user | |
KR20210079061A (ko) | 정보 처리 방법 및 정보 처리 장치 | |
KR102576788B1 (ko) | 로봇 인터랙션 행위 생성 장치 및 방법 | |
KR20220040997A (ko) | 전자 장치 및 그 제어 방법 | |
CN113946222A (zh) | 一种控制方法、电子设备及计算机存储介质 | |
KR20210078122A (ko) | 정보 처리 방법 및 정보 처리 장치 | |
EP3841460B1 (en) | Electronic device and method for controlling the same |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170721 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20181113 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190213 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20190702 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20190920 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190924 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20191210 |