CN113375295A - 生成虚拟人物交互的方法、交互***、电子设备和介质 - Google Patents
生成虚拟人物交互的方法、交互***、电子设备和介质 Download PDFInfo
- Publication number
- CN113375295A CN113375295A CN202110577069.0A CN202110577069A CN113375295A CN 113375295 A CN113375295 A CN 113375295A CN 202110577069 A CN202110577069 A CN 202110577069A CN 113375295 A CN113375295 A CN 113375295A
- Authority
- CN
- China
- Prior art keywords
- information
- air conditioner
- virtual character
- interaction
- virtual
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000003993 interaction Effects 0.000 title claims abstract description 72
- 238000000034 method Methods 0.000 title claims abstract description 48
- 230000002452 interceptive effect Effects 0.000 claims abstract description 31
- 230000014509 gene expression Effects 0.000 claims description 18
- 230000007613 environmental effect Effects 0.000 claims description 16
- 238000001228 spectrum Methods 0.000 claims description 16
- 238000012545 processing Methods 0.000 claims description 11
- 230000002194 synthesizing effect Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 10
- 238000013507 mapping Methods 0.000 claims description 8
- 230000009471 action Effects 0.000 claims description 5
- 230000004044 response Effects 0.000 claims description 3
- 238000004891 communication Methods 0.000 description 9
- 239000004973 liquid crystal related substance Substances 0.000 description 7
- 230000008569 process Effects 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000000428 dust Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/56—Remote control
- F24F11/58—Remote control using Internet communication
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
- F24F11/52—Indication arrangements, e.g. displays
- F24F11/526—Indication arrangements, e.g. displays giving audible indications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/62—Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
- F24F11/63—Electronic processing
- F24F11/64—Electronic processing using pre-stored data
Landscapes
- Engineering & Computer Science (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- Fuzzy Systems (AREA)
- Mathematical Physics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种生成虚拟人物交互的方法、交互***、电子设备和介质，包括：识别交互信号中的控制信息；将运行信息、环境信息和控制信息与云端数据库进行匹配；根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像。本发明提供的空调器生成虚拟人物交互的方法，通过识别用户对空调器的交互信号，获取控制信息，并根据获取的运行信息、环境信息以及控制信息与云端数据库进行匹配，由于云端数据库中包括基于运行信息、环境信息以及控制信息一一对应的影像合成文本，空调器可根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像，实现以视频的形式完成用户与空调器之间的交互，使得交互过程更加生动，提高用户的交互体验。
Description
技术领域
本发明涉及空调技术领域，尤其涉及一种生成虚拟人物交互的方法、交互***、电子设备和介质。
背景技术
人机交互是指人与计算机之间使用某种对话语言，以一定的交互方式，为完成确定任务的人与计算机之间的信息交换过程。随着计算机技术的发展和人工智能技术的进步，智能化人机交互方式已成为现阶段人机交互的主流。
现有的空调器一般通过人机交互界面与用户交流，并进行操作。例如，空调器的运行按键、远程遥控及语音控制等，但这些方式均没有直观的视觉呈现，交互方式单一，交互状态固定，无法模拟真实环境下的人与人之间的交互状态，用户的交互体验差。
发明内容
本发明实施例提供一种生成虚拟人物交互的方法、交互***、电子设备和介质，解决现有空调器交互方式单一，交互状态固定，用户的交互体验差的问题。
本发明实施例提供一种空调器生成虚拟人物交互的方法，包括：
识别交互信号中的控制信息；
获取空调器的运行信息和环境信息；
将所述运行信息、所述环境信息和所述控制信息与云端数据库进行匹配；其中，云端数据库包括：基于所述运行信息、所述环境信息以及所述控制信息一一对应的影像合成文本；
根据匹配出的所述影像合成文本，输出以虚拟人物为主体的虚拟影像。
根据本发明一个实施例提供的空调器生成虚拟人物交互的方法，，所述识别交互信号中的控制信息之前还包括：
通过对象特征识别，在潜在交互对象中确定目标对象；
获取所述目标对象输出的所述交互信号；所述交互信号包括：语音信号、动作信号或触控信号中的一种或多种的组合。
根据本发明一个实施例提供的空调器生成虚拟人物交互的方法，若所述交互信号为所述语音信号，则所述识别交互信号中的控制信息；获取空调器的运行信息和环境信息；将所述运行信息、所述环境信息和所述控制信息与云端数据库进行匹配的具体步骤包括：
将所述语音信号进行语音识别处理，获取所述语音信息中的声波频谱和文本信息；
获取空调器的运行信息和环境信息，基于所述运行信息、所述环境信息、所述声波频谱、所述文本信息相对影像合成文本的权重占比，将所述运行信息、所述环境信息、所述声波频谱、所述文本信息与多个所述影像合成文本进行匹配，确定最接近的所述影像合成文本。
根据本发明一个实施例提供的空调器生成虚拟人物交互的方法，所述获取空调器的运行信息和环境信息的具体步骤包括：
获取所述空调器的运行信息，所述运行信息包括：运行模式和运行状态；
获取所述空调器所处空间的环境信息，所述环境信息包括：环境温度和环境湿度。
根据本发明一个实施例提供的空调器生成虚拟人物交互的方法，所述识别交互信号中的控制信息之前还包括：
基于所述虚拟人物多种不同的语音特征、口形特征、表情特征和肢体特征，构建多个所述虚拟影像；
构建所述虚拟影像与所述空调器的响应信息的映射关系；
根据所述映射关系构建所述云端数据库。
根据本发明一个实施例提供的空调器生成虚拟人物交互的方法，所述根据匹配出的所述影像合成文本，输出以虚拟人物为主体的虚拟影像的具体步骤包括：
获取匹配出的所述影像合成文本的中的所述语音特征、所述口形特征、所述表情特征和所述肢体特征；
根据所述口形特征、所述表情特征和所述肢体特征构建所述虚拟人物；
根据所述语音信息和所述虚拟人物，合成并输出所述虚拟影像。
根据本发明一个实施例提供的空调器生成虚拟人物交互的方法，若所述虚拟人物包括：多种不同的形象模板，则所述基于所述虚拟人物多种不同的语音特征、口形特征、表情特征和肢体特征，构建多个不同的所述虚拟影像的具体步骤包括：
根据多个所述形象模板的语音特征、口形特征、表情特征和肢体特征，构建多个所述形象模板的所述虚拟影像。
本发明实施例还提供一种空调器交互***，包括：
拾音模块，用于识别交互信号中的控制信息；
感知模块，用于获取空调器的运行信息和环境信息；
处理模块，用于将所述运行信息、所述环境信息和所述控制信息与云端数据库进行匹配；其中，云端数据库包括：基于所述运行信息、所述环境信息以及所述控制信息一一对应的影像合成文本；
输出模块，用于根据匹配出的所述影像合成文本，输出以虚拟人物为主体的虚拟影像。
本发明实施例还提供一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，所述处理器执行所述程序时实现所述空调器生成虚拟人物交互的方法。
本发明实施例还提供一种非暂态计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现所述空调器生成虚拟人物交互的方法。
本发明提供的生成虚拟人物交互的方法、交互***、电子设备和介质，通过识别用户对空调器的交互信号，获取控制信息，并根据获取的运行信息、环境信息以及控制信息与云端数据库进行匹配，由于云端数据库中包括基于运行信息、环境信息以及控制信息一一对应的影像合成文本，空调器可根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像，实现以视频的形式完成用户与空调器之间的交互，使得交互过程更加生动，能够实现逼真、流畅、拟人的交互效果，提高用户的交互体验。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。
图1是本发明一实施例提供的空调器生成虚拟人物交互的方法的流程示意图；
图2是本发明另一实施例提供的空调器生成虚拟人物交互的方法的流程示意图；
图3是本发明又一实施例提供的空调器生成虚拟人物交互的方法的流程示意图；
图4是本发明一实施例提供的空调器交互***的结构示意图；
图5是本发明一实施例提供的电子设备的结构示意图；
附图标记：1、拾音模块；2、感知模块；3、处理模块；4、输出模块；510、处理器；520、通信接口；530、存储器；540、通信总线。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供一种空调器生成虚拟人物交互的方法，通过在空调器上增加液晶屏和扬声器来实现视频交互，如图1所示，该空调器生成虚拟人物交互的方法包括如下步骤：
步骤S101：识别交互信号中的控制信息。
步骤S102：获取空调器的运行信息和环境信息。
步骤S103：将运行信息、环境信息和控制信息与云端数据库进行匹配；其中，云端数据库包括：基于运行信息、环境信息以及控制信息一一对应的影像合成文本。
步骤S104：根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像。
在开启空调器的交互功能后，用户可对空调器输入交互信号，空调器识别获取的交互信号，可从中得到控制信息。
与此同时，空调器获取运行信息。运行信息主要包括空调器的运行模式和运行状态。由此可确定空调器是否正常运行、故障、脏堵或待机。确定运行信息后，开始获取空调器所处空间的环境信息，确定环境温度和环境湿度。
在获取控制信息、运行信息和环境信息后，空调器将数据传输至云端数据库，将运行信息、环境信息和控制信息与云端数据库进行匹配。由于云端数据库包括：基于运行信息、环境信息以及控制信息一一对应的影像合成文本，可匹配出与获取的数据对应的影像合成文本。
匹配结束后，云端数据库将数据传输至本地的空调器，空调器读取匹配出的影像合成文本，可通过液晶屏输出以虚拟人物为主体的虚拟影像。此外，若影像合成文本中包含声音，则还可同时通过液晶屏和扬声器输出以虚拟人物为主体的虚拟影像，从而虚拟人物呈现相应的表情和肢体动作，并通过人物口形给用户应答，让用户感觉完全是和人在沟通交流。
例如，用户操控空调器进行时，虚拟人物可根据环境信息呈现出不同的感受状态，如冷、热、舒适等，从而形象得给用户传递当前环境感受以及设置状态情况。
在空调器运行过程中，根据空调器自身不同状态进行呈现。例如，空调器正常运行时，虚拟人物呈工作的状态。空调器故障时，虚拟人物呈生病的状态。空调器脏堵时，虚拟人物对应邋遢状态。空调器待机时，虚拟人物呈休息状态。
当用户咨询产品服务时，根据用户不同服务要求，虚拟人物进行解答同时并进行演示解答，如更换滤尘网。
当用户想了解产品功能或咨询购买时，虚拟人物可讲解产品主要功能卖点，并进行自动化演示。
本发明实施例提供的空调器生成虚拟人物交互的方法，通过识别用户对空调器的交互信号，获取控制信息，并根据获取的运行信息、环境信息以及控制信息与云端数据库进行匹配，由于云端数据库中包括基于运行信息、环境信息以及控制信息一一对应的影像合成文本，空调器可根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像，实现以视频的形式完成用户与空调器之间的交互，使得交互过程更加生动，能够实现逼真、流畅、拟人的交互效果，提高用户的交互体验。
为避免在用户与空调器交互过程中受外界其它信息干扰，在识别交互信号中的控制信息之前还包括：
步骤S1001：通过对象特征识别，在潜在交互对象中确定目标对象。
其中，潜在交互对象指的是能够与空调器交互的主体。例如，与交互界面可能存在交互操作的自然人或终端。
步骤S1002：获取目标对象输出的交互信号；交互信号包括：语音信号、动作信号或触控信号中的一种或多种的组合。
具体地，识别交互信号中的控制信息之前，可通过摄像头检测预定范围内的属于特定类别的潜在交互对象，通过人脸、身高或声纹等从中识别出预先设定的目标对象。再通过目标对象的输出的语音信号、动作信号或触控信号中的一种或多种的组合，获取目标对象输出的交互信号。
若目标对象采用的交互信号为语音信号，则在生成虚拟人物的过程中，先将语音信号进行语音识别处理，获取语音信息中的声波频谱和文本信息，同时获取空调器的运行信息和环境信息。
若存在运行信息、环境信息、声波频谱、文本信息完全一致的影像合成文本，则与上述实施例相同，匹配出影像合成文本后，可通过液晶屏和扬声器输出以虚拟人物为主体的虚拟影像。
若不存在运行信息、环境信息、声波频谱、文本信息完全一致的影像合成文本，则可基于运行信息、环境信息、声波频谱、文本信息相对影像合成文本的权重占比，将运行信息、环境信息、声波频谱、文本信息与多个影像合成文本进行匹配，确定最接近的影像合成文本。例如，运行信息的权重占比为30％，环境信息的权重占比为10％，声波频谱的权重占比为10％，文本信息的权重占比为50％。根据权重占比以及运行信息、环境信息、声波频谱、文本信息与云端数据库中最接近的数据的相似度来确定最接近的影像合成文本。例如，在文本信息与云端数据库中的一文本信息相同，但运行信息、环境信息、声波频谱均未找到一致的，则匹配结果为该文本信息对应的影像合成文本。在运行信息与云端数据库中的一运行信息相同，但文本信息、环境信息、声波频谱均未找到一致的，由于运行信息的权重大于环境信息、声波频谱，则匹配结果为该文本信息对应的影像合成文本。最后同样在匹配出影像合成文本后，通过液晶屏和扬声器输出以虚拟人物为主体的虚拟影像。
在本发明提供的另一实施例中，如图2所示，在识别交互信号中的控制信息之前需要构建云端数据库，包括如下步骤：
步骤S1003：基于虚拟人物多种不同的语音特征、口形特征、表情特征和肢体特征，构建多个虚拟影像。
步骤S1004：构建虚拟影像与空调器的响应信息的映射关系。
步骤S1005：根据映射关系构建云端数据库。
构建云端数据库的过程中，将多种不同的语音特征、口形特征、表情特征和肢体特征排列组合，构成不同的虚拟影像，构建虚拟形象与空调器需要表达的相应信息的映射关系。例如，空调器正常运行时，虚拟人物呈工作的状态。空调器故障时，虚拟人物呈生病的状态。空调器脏堵时，虚拟人物对应邋遢状态。空调器待机时，虚拟人物呈休息状态。最后，依据这些映射关系的集合构建云端数据库。
根据需要虚拟人物可设置多组不同的形象模板。根据多个形象模板的语音特征、口形特征、表情特征和肢体特征，由此可构建多个不同风格形象模板的虚拟影像。
在本发明提供的又一实施例中，如图3所示，在输出以虚拟人物为主体的虚拟影像的具体步骤包括：
步骤S1041：获取匹配出的影像合成文本的中的语音特征、口形特征、表情特征和肢体特征。
步骤S1042：根据口形特征、表情特征和肢体特征构建虚拟人物。
步骤S1043：根据语音信息和虚拟人物，合成并输出虚拟影像。
具体地，匹配出的影像合成文本后，先将影像合成文本中的数据进行拆分，得到其中的语音特征、口形特征、表情特征和肢体特征。然后利用得到的口形特征、表情特征和肢体特征构建虚拟人物。利用音频编码器将语音信息导入虚拟人物，通过液晶屏和扬声器合成并输出音画同步的虚拟影像。
在合成虚拟影像的过程中，也可在同一虚拟影像设置多个虚拟人物，通过将语音信息导入相应的虚拟人物，合成设有多个虚拟人物且音画同步的虚拟影像。
本发明实施例还提供一种空调器交互***，如图4所示，该空调器交互***包括：拾音模块1、感知模块2、处理模块3、输出模块4以及通讯模块。
其中，通讯模块同时与拾音模块1、感知模块2、处理模块3和输出模块4电连接，主要用于数据传输。拾音模块1包含麦克，可将声波转换成电信号，用于识别交互信号中的控制信息。感知模块2用于获取空调器的运行信息和环境信息。处理模块3作为整个***的核心模块，用于将运行信息、环境信息和控制信息与云端数据库进行匹配；其中，云端数据库包括：基于运行信息、环境信息以及控制信息一一对应的影像合成文本。输出模块4用于根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像，分为音频播放模块和显示模块，音频播放模块将文字合成音播放出来，显示模块则为用户交互界面，可呈现不同虚拟人物。
在开启空调器的交互功能后，用户通过拾音模块1输入交互信号，拾音模块1识别获取的交互信号，可从中得到控制信息。
与此同时，感知模块2获取运行信息。运行信息主要包括空调器的运行模式和运行状态。由此可确定空调器是否正常运行、故障、脏堵或待机。确定运行信息后，感知模块2开始获取空调器所处空间的环境信息，确定环境温度和环境湿度。
在获取控制信息、运行信息和环境信息后，处理模块3将运行信息、环境信息和控制信息与云端数据库进行匹配。由于云端数据库包括：基于运行信息、环境信息以及控制信息一一对应的影像合成文本，可匹配出与获取的数据对应的影像合成文本。
处理模块3匹配结束后，输出模块4读取匹配出的影像合成文本，可通过液晶屏输出以虚拟人物为主体的虚拟影像。
本发明还提供一种电子设备，如图5所示，该电子设备可以包括：处理器(processor)510、通信接口(Communications Interface)520、存储器(memory)530和通信总线540，其中，处理器510，通信接口520，存储器530通过通信总线540完成相互间的通信。处理器510可以调用存储器530中的逻辑指令，以执行空调器生成虚拟人物交互的方法。
该空调器生成虚拟人物交互的方法包括如下步骤：
步骤S101：识别交互信号中的控制信息。
步骤S102：获取空调器的运行信息和环境信息。
步骤S103：将运行信息、环境信息和控制信息与云端数据库进行匹配；其中，云端数据库包括：基于运行信息、环境信息以及控制信息一一对应的影像合成文本。
步骤S104：根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像。
此外，上述的存储器530中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。
另一方面，本发明还提供一种计算机程序产品，所述计算机程序产品包括存储在计算机可读存储介质上的计算机程序，所述计算机程序包括程序指令，当所述程序指令被计算机执行时，计算机能够执行上述各方法所提供的空调器生成虚拟人物交互的方法。
又一方面，本发明还提供一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序，该计算机程序被处理器读取并运行时实现上述空调器生成虚拟人物交互的方法。
以上所描述的装置实施例仅仅是示意性的，其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下，即可以理解并实施。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件。基于这样的理解，上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品可以存储在计算机可读存储介质中，如ROM/RAM、磁碟、光盘等，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。
综上所述，本发明提供的生成虚拟人物交互的方法、交互***、电子设备和介质，通过识别用户对空调器的交互信号，获取控制信息，并根据获取的运行信息、环境信息以及控制信息与云端数据库进行匹配，由于云端数据库中包括基于运行信息、环境信息以及控制信息一一对应的影像合成文本，空调器可根据匹配出的影像合成文本，输出以虚拟人物为主体的虚拟影像，实现以视频的形式完成用户与空调器之间的交互，使得交互过程更加生动，能够实现逼真、流畅、拟人的交互效果，提高用户的交互体验。
最后应说明的是：以上实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。
Claims (10)
1.一种空调器生成虚拟人物交互的方法，其特征在于，包括：
识别交互信号中的控制信息；
获取空调器的运行信息和环境信息；
将所述运行信息、所述环境信息和所述控制信息与云端数据库进行匹配；其中，云端数据库包括：基于所述运行信息、所述环境信息以及所述控制信息一一对应的影像合成文本；
根据匹配出的所述影像合成文本，输出以虚拟人物为主体的虚拟影像。
2.根据权利要求1所述的空调器生成虚拟人物交互的方法，其特征在于，所述识别交互信号中的控制信息之前还包括：
通过对象特征识别，在潜在交互对象中确定目标对象；
获取所述目标对象输出的所述交互信号；所述交互信号包括：语音信号、动作信号或触控信号中的一种或多种的组合。
3.根据权利要求2所述的空调器生成虚拟人物交互的方法，其特征在于，若所述交互信号为所述语音信号，则所述识别交互信号中的控制信息；获取空调器的运行信息和环境信息；将所述运行信息、所述环境信息和所述控制信息与云端数据库进行匹配的具体步骤包括：
将所述语音信号进行语音识别处理，获取所述语音信息中的声波频谱和文本信息；
获取所述空调器的运行信息和环境信息，基于所述运行信息、所述环境信息、所述声波频谱、所述文本信息相对影像合成文本的权重占比，将所述运行信息、所述环境信息、所述声波频谱、所述文本信息与多个所述影像合成文本进行匹配，确定最接近的所述影像合成文本。
4.根据权利要求1所述的空调器生成虚拟人物交互的方法，其特征在于，所述获取空调器的运行信息和环境信息的具体步骤包括：
获取所述空调器的运行信息，所述运行信息包括：运行模式和运行状态；
获取所述空调器所处空间的环境信息，所述环境信息包括：环境温度和环境湿度。
5.根据权利要求1-4中任一项所述的空调器生成虚拟人物交互的方法，其特征在于，所述识别交互信号中的控制信息之前还包括：
基于所述虚拟人物多种不同的语音特征、口形特征、表情特征和肢体特征，构建多个所述虚拟影像；
构建所述虚拟影像与所述空调器的响应信息的映射关系；
根据所述映射关系构建所述云端数据库。
6.根据权利要求5所述的空调器生成虚拟人物交互的方法，其特征在于，所述根据匹配出的所述影像合成文本，输出以虚拟人物为主体的虚拟影像的具体步骤包括：
获取匹配出的所述影像合成文本的中的所述语音特征、所述口形特征、所述表情特征和所述肢体特征；
根据所述口形特征、所述表情特征和所述肢体特征构建所述虚拟人物；
根据所述语音信息和所述虚拟人物，合成并输出所述虚拟影像。
7.根据权利要求5所述的空调器生成虚拟人物交互的方法，其特征在于，若所述虚拟人物包括：多种不同的形象模板，则所述基于所述虚拟人物多种不同的语音特征、口形特征、表情特征和肢体特征，构建多个不同的所述虚拟影像的具体步骤包括：
根据多个所述形象模板的语音特征、口形特征、表情特征和肢体特征，构建多个所述形象模板的所述虚拟影像。
8.一种空调器交互***，其特征在于，包括：
拾音模块，用于识别交互信号中的控制信息；
感知模块，用于获取空调器的运行信息和环境信息；
处理模块，用于将所述运行信息、所述环境信息和所述控制信息与云端数据库进行匹配；其中，云端数据库包括：基于所述运行信息、所述环境信息以及所述控制信息一一对应的影像合成文本；
输出模块，用于根据匹配出的所述影像合成文本，输出以虚拟人物为主体的虚拟影像。
9.一种电子设备，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述处理器执行所述程序时实现如权利要求1至7中任一项所述空调器生成虚拟人物交互的方法。
10.一种非暂态计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7中任一项所述空调器生成虚拟人物交互的方法。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110577069.0A CN113375295A (zh) | 2021-05-26 | 2021-05-26 | 生成虚拟人物交互的方法、交互***、电子设备和介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110577069.0A CN113375295A (zh) | 2021-05-26 | 2021-05-26 | 生成虚拟人物交互的方法、交互***、电子设备和介质 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113375295A true CN113375295A (zh) | 2021-09-10 |
Family
ID=77571984
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110577069.0A Pending CN113375295A (zh) | 2021-05-26 | 2021-05-26 | 生成虚拟人物交互的方法、交互***、电子设备和介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113375295A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114818609A (zh) * | 2022-06-29 | 2022-07-29 | 阿里巴巴达摩院(杭州)科技有限公司 | 用于虚拟对象的交互方法、电子设备及计算机存储介质 |
| CN115052030A (zh) * | 2022-06-27 | 2022-09-13 | 北京蔚领时代科技有限公司 | 一种虚拟数字人的操控方法及其*** |
Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6595430B1 (en) * | 2000-10-26 | 2003-07-22 | Honeywell International Inc. | Graphical user interface system for a thermal comfort controller |
| CN101778198A (zh) * | 2010-01-25 | 2010-07-14 | 上海享云信息***有限公司 | 一种增强型电视终端*** |
| CN103822330A (zh) * | 2014-01-21 | 2014-05-28 | 茹祥忠 | 一种中央空调远端智能节能控制***及方法 |
| CN110822643A (zh) * | 2019-11-25 | 2020-02-21 | 广东美的制冷设备有限公司 | 空调器及其控制方法和计算机存储介质 |
| CN110822648A (zh) * | 2019-11-25 | 2020-02-21 | 广东美的制冷设备有限公司 | 空调器及其控制方法、计算机可读存储介质 |
| CN112465935A (zh) * | 2020-11-19 | 2021-03-09 | 科大讯飞股份有限公司 | 虚拟形象合成方法、装置、电子设备和存储介质 |
-
2021
- 2021-05-26 CN CN202110577069.0A patent/CN113375295A/zh active Pending
Patent Citations (6)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US6595430B1 (en) * | 2000-10-26 | 2003-07-22 | Honeywell International Inc. | Graphical user interface system for a thermal comfort controller |
| CN101778198A (zh) * | 2010-01-25 | 2010-07-14 | 上海享云信息***有限公司 | 一种增强型电视终端*** |
| CN103822330A (zh) * | 2014-01-21 | 2014-05-28 | 茹祥忠 | 一种中央空调远端智能节能控制***及方法 |
| CN110822643A (zh) * | 2019-11-25 | 2020-02-21 | 广东美的制冷设备有限公司 | 空调器及其控制方法和计算机存储介质 |
| CN110822648A (zh) * | 2019-11-25 | 2020-02-21 | 广东美的制冷设备有限公司 | 空调器及其控制方法、计算机可读存储介质 |
| CN112465935A (zh) * | 2020-11-19 | 2021-03-09 | 科大讯飞股份有限公司 | 虚拟形象合成方法、装置、电子设备和存储介质 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115052030A (zh) * | 2022-06-27 | 2022-09-13 | 北京蔚领时代科技有限公司 | 一种虚拟数字人的操控方法及其*** |
| CN114818609A (zh) * | 2022-06-29 | 2022-07-29 | 阿里巴巴达摩院(杭州)科技有限公司 | 用于虚拟对象的交互方法、电子设备及计算机存储介质 |
| CN114818609B (zh) * | 2022-06-29 | 2022-09-23 | 阿里巴巴达摩院(杭州)科技有限公司 | 用于虚拟对象的交互方法、电子设备及计算机存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109147784B (zh) | 语音交互方法、设备以及存储介质 | |
| CN113375295A (zh) | 生成虚拟人物交互的方法、交互***、电子设备和介质 | |
| RU2720359C1 (ru) | Способ и оборудование распознавания эмоций в речи | |
| CN111290682A (zh) | 交互方法、装置及计算机设备 | |
| CN112652041B (zh) | 虚拟形象的生成方法、装置、存储介质及电子设备 | |
| CN113436602A (zh) | 虚拟形象语音交互方法、装置、投影设备和计算机介质 | |
| CN111273775A (zh) | 增强现实眼镜、基于增强现实眼镜的ktv实现方法与介质 | |
| CN111291151A (zh) | 交互方法、装置及计算机设备 | |
| CN110822641A (zh) | 空调器及其控制方法、装置和可读存储介质 | |
| WO2020213468A1 (ja) | 情報処理システム、情報処理方法、及びプログラム | |
| CN113205569B (zh) | 图像绘制方法及装置、计算机可读介质和电子设备 | |
| CN114999441A (zh) | 虚拟形象生成方法、装置、设备、存储介质以及程序产品 | |
| CN112365957A (zh) | 一种基于虚拟现实的心理治疗*** | |
| CN117313785A (zh) | 一种基于弱势人群的智能数字人交互方法、设备和介质 | |
| CN112365956A (zh) | 基于虚拟现实的心理治疗方法、装置、服务器及存储介质 | |
| CN116737883A (zh) | 人机交互方法、装置、设备及存储介质 | |
| CN112381926A (zh) | 用于生成视频的方法和装置 | |
| CN116185191A (zh) | 一种服务器、显示设备和虚拟数字人交互方法 | |
| CN115223224A (zh) | 数字人说话视频生成方法、***、终端设备及介质 | |
| KR20060091329A (ko) | 대화식 시스템 및 대화식 시스템을 제어하는 방법 | |
| CN117370605A (zh) | 一种虚拟数字人驱动方法、装置、设备和介质 | |
| CN110718119A (zh) | 基于儿童专用穿戴智能设备的教育能力支持方法及*** | |
| US20240096329A1 (en) | Qa tv-making millions of characters alive | |
| CN112740219A (zh) | 手势识别模型的生成方法、装置、存储介质及电子设备 | |
| CN112712798B (zh) | 私有化数据获取方法及装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |