CN115880404A - 一种基于虚幻引擎的元宇宙虚拟交互方法 - Google Patents
一种基于虚幻引擎的元宇宙虚拟交互方法 Download PDFInfo
- Publication number
- CN115880404A CN115880404A CN202211549545.9A CN202211549545A CN115880404A CN 115880404 A CN115880404 A CN 115880404A CN 202211549545 A CN202211549545 A CN 202211549545A CN 115880404 A CN115880404 A CN 115880404A
- Authority
- CN
- China
- Prior art keywords
- animation
- mirror
- split
- information
- basic
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 27
- 230000003993 interaction Effects 0.000 title claims abstract description 19
- 238000009877 rendering Methods 0.000 claims abstract description 30
- 238000004519 manufacturing process Methods 0.000 claims abstract description 29
- 238000013461 design Methods 0.000 claims abstract description 19
- 238000012163 sequencing technique Methods 0.000 claims abstract description 15
- 238000000605 extraction Methods 0.000 claims abstract description 13
- 230000002159 abnormal effect Effects 0.000 claims description 25
- 230000008859 change Effects 0.000 claims description 18
- 238000012790 confirmation Methods 0.000 claims description 18
- 230000004048 modification Effects 0.000 claims description 8
- 238000012986 modification Methods 0.000 claims description 8
- 230000004044 response Effects 0.000 claims description 6
- 230000008569 process Effects 0.000 abstract description 5
- 238000012545 processing Methods 0.000 abstract description 3
- 230000015572 biosynthetic process Effects 0.000 description 6
- 230000000007 visual effect Effects 0.000 description 3
- 238000012827 research and development Methods 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 239000002699 waste material Substances 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000008921 facial expression Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
Images
Landscapes
- Processing Or Creating Images (AREA)
Abstract
本发明涉及图像处理领域,尤其涉及一种基于虚幻引擎的元宇宙虚拟交互方法,该方法包括:根据预设分镜动画信息项对接收的分镜动画设计信息进行关键词提取,对若干基础分镜动画进行对象识别,将识别的各个分镜动画对象信息与基础分镜动画对象信息进行匹配以根据目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画进行排序;对修改完成的基础分镜动画进行文本信息添加并进行动画制作并为待处理动画添加声音;根据分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染形成目标动画。通过对分镜动画进行动态制作、字幕音乐添加和渲染调整都完全基于虚幻引擎,使流程得到极大优化,提高了动画制作的便利性。
Description
技术领域
本发明涉及数据处理领域,尤其涉及一种基于虚幻引擎的元宇宙虚拟交互方法。
背景技术
虚幻引擎,侧重于数据生成和程序编写的方面,因此美工只需要程序员的很少量的协助,就能够尽可能多地开发游戏的数据资源,并且这个过程是在完全的可视化环境中完成的,实际操作非常便利。
公开号:CN113791821A的专利文献公开了基于虚幻引擎的动画处理方法,该方法包括:获取第二终端设备的终端信息,根据所述终端信息建立第一终端设备上运行的虚幻引擎与所述第二终端设备的远程连接;基于所述远程连接,通过所述虚幻引擎中的插件接收所述第二终端设备发送的对待处理动画的操作指令,并根据所述操作指令对所述待处理动画进行编辑,以生成目标动画。
现有技术通过第二终端设备发送的对待处理动画的操作指令对待处理动画进行编辑,但只是对完整动画进行远程操作处理,不适用于对动画制作的全流程,因此导致动画制作复杂度高。
发明内容
为此,本发明提供一种基于虚幻引擎的元宇宙虚拟交互方法,可以解决动画制作复杂度高的问题。
为实现上述目的,本发明提供一种基于虚幻引擎的元宇宙虚拟交互方法,该方法包括:
接收用户在虚幻引擎中的若干基础分镜动画和分镜动画设计信息;
根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取以形成目标分镜动画编辑信息,其中,所述预设分镜动画信息项包括目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,对若干基础分镜动画进行对象识别以形成若干基础分镜动画对象信息,将所述目标分镜动画编辑信息中各个分镜动画对象信息与所述基础分镜动画对象信息进行匹配并计算匹配率以判断分镜动画对象信息是否匹配成功,根据所述目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画进行排序,并获取用户对排序后的基础分镜动画的用户确认信息以对排序后的基础分镜动画进行修改;
根据所述各个分镜动画文本信息对修改完成的基础分镜动画进行文本信息添加;
根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画;
为所述待处理动画添加音乐信息和配音信息;
根据分镜动画渲染参数将所述音乐信息和配音信息添加完成的待处理动画进行渲染,并进行调整以形成目标动画。
进一步地,在根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取以形成目标分镜动画编辑信息时,将任意预设分镜动画信息项对应的关键词对分镜动画设计信息进行关键词提取,将提取到关键词形成目标分镜动画编辑信息;
在对若干基础分镜动画进行对象识别以形成若干基础分镜动画对象信息时,运用AI图像识别对若干基础分镜动画进行对象识别,所述识别形成的基础分镜动画对象信息包括人物信息、动物信息和物体信息,每个基础分镜动画对应一个基础分镜动画对象信息。
进一步地,在将所述目标分镜动画编辑信息中各个分镜动画对象信息与所述基础分镜动画对象信息进行匹配时,按所述人物信息、动物信息和物体信息的顺序将每个基础分镜动画对象信息分别与所述目标分镜动画编辑信息中各个分镜动画对象信息进行匹配,并计算每个基础分镜动画中匹配到的对象信息的匹配率P,其中,P=N/M,N为匹配到的对象信息数量,M为相互匹配的基础分镜动画对象信息和分镜动画对象信息的总数量。
进一步地,在判断所述分镜动画对象信息是否匹配成功时,将匹配率P与第一预设匹配率P1和第二预设匹配率P2进行比较,其中P1<P2;
若P>P2,则判定所述分镜动画对象信息匹配成功;
若P1≤P≤P2,则判定所述分镜动画对象信息匹配异常;
若P<P1,则判定所述分镜动画对象信息匹配失败。
进一步地,若判定所述分镜动画对象信息匹配成功,则根据所述目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画中匹配率最大的基础分镜动画进行序号标记,若判定所述分镜动画对象信息匹配失败,则将该分镜动画对象信息与下一个基础分镜动画对象信息进行匹配。
进一步地,若判定所述分镜动画对象信息匹配异常时,将对应的基础分镜动画进行异常符号标记,在所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配完成后,对各个标记有异常符号的基础分镜动画与标记有序号的基础分镜动画进行对比并判断标记有异常符号的基础分镜动画与标记有序号的基础分镜动画是否相似,若相似,则将该标有异常符号的基础分镜动画进行序号标记,其序号为判定为相似的基础分镜动画的序号的相邻序号且未标记出现的序号;
在若干基础分镜动画全部标记有序号后,根据序号对基础分镜动画进行排序;
将排序后的基础分镜动画发送给用户的虚幻引擎进行确认,并获取用户确认信息,其中,用户确认信息包括确认结果和修改信息,若所述确认结果为否,则根据所述修改信息对排序后的基础分镜动画进行修改。
进一步地,根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画包括:
根据文本信息添加完成的基础分镜动画对应的标记的序号匹配所述各个分镜动画时长中与每个文本信息添加完成的基础分镜动画序号对应的分镜动画时长;
按照所述分镜动画时长对对应的文本信息添加完成的基础分镜动画进行动画制作形成待处理动画。
进一步地,在为所述待处理动画添加音乐信息和配音信息时,获取用户的音乐信息,将所述音乐信息添加到待处理动画中,将添加有所述音乐信息的待处理动画形成待配音动画和配音指令发送给用户的虚幻引擎的配音界面,获取用户的配音指令的响应信息,其中,响应信息包括已配音的待处理动画。
进一步地,根据分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染和调整以形成目标动画包括:
获取用户的若干分镜动画渲染参数;
根据所述分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染以形成待调整动画;
分析所述待调整动画中各个分镜动画间的对象变化情况和声音大小变换情况,并判断对象形状变化情况和声音大小变换情况是否符合标准,将不符合标准的待调整动画中的分镜动画进行调整以形成目标动画。
进一步地,在分析所述待调整动画中各个分镜动画间的对象变化情况和声音大小变换情况时,按顺序将相邻两个分镜动画的对象形状大小、对象颜色像素、对象位置和声音大小,并计算将两个分镜动画的对象形状大小差值、对象颜色像素差值、对象位置距离差值和声音大小差值,将对象形状大小差值、对象颜色像素差值、对象位置距离差值和声音大小差值与对象形状大小预设差值、对象颜色像素预设差值、对象位置距离预设差值和声音大小预设差值进行比较,将超出预设差值的两个分镜动画进行调整,将所有超出预设差值的分镜动画发送给用户的虚幻引擎,获取用户的调整参数,根据所述调整参数将对应的分镜动画进行参数调整,生成目标动画。
与现有技术相比,本发明的有益效果在于,通过将用户在虚幻引擎中的动画设计信息根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取,获取到用户对每个分镜动画中的目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,接着对若干基础分镜动画进行对象识别,将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,将匹配成功的按序号对基础分镜动画进行排序,以实现分镜动画按顺序已形成完整的动画视频,然后通过为修改完成的基础分镜动画添加音乐信息和配音信息,实现了字幕的添加,并根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画,以实现将基础分镜动画的动态形成,对待处理动画进行声音信息添加实现对动画的背景音乐及配音,最后对分镜动画进行渲染和调整形成目标动画,对分镜动画进行动态制作、字幕音乐添和渲染调整都完全基于虚幻引擎,降低制作周期成本和减少资源在软件来回切换导致过多研发成本浪费且流程得到极大优化,提高了动画制作的便利性。
尤其,通过将用户在虚幻引擎中的动画设计信息根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取,获取到用户对每个分镜动画中的目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,接着对若干基础分镜动画进行对象识别,进而将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,将匹配成功的按序号对基础分镜动画进行排序,以实现将基础分镜动画的形成动态动画。
尤其,通过将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,并计算匹配率进而判断所述分镜动画对象信息匹配成功,将匹配成功的按序号对基础分镜动画进行排序,提高排序精确性,以实现分镜动画按顺序已形成完整的动画视频。
尤其,通过将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,进而将匹配成功的按序号对基础分镜动画进行排序,以实现将基础分镜动画的动态形成,通过智能识别和匹配对分镜动画进行排序提高了动画制作的便利性。
尤其,通过将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配后,将匹配异常的对应的基础分镜动画进行异常符号标记,对各个标记有异常符号的基础分镜动画与标记有序号的基础分镜动画进行对比并判断标记有异常符号的基础分镜动画与标记有序号的基础分镜动画是否相似,将相似的标有异常符号的基础分镜动画进行序号标记,然后再次进行排序,进而进行动画制作以形成待处理动画,以实现将基础分镜动画的动态形成,通过两次排序提高了分镜动画排序的准确性以提高动画制作的便利性。
尤其,通过再次排序和修改完成的基础分镜动画进行文本信息添加,实现了字幕的添加,并根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画,以实现将基础分镜动画的动态形成,通过智能添加字幕,提高了动画制作的便利性。
尤其,通过将完成声音信息添加的待处理动画进行渲染和调整形成目标动画,使动画的视觉效果和衔接更加准确,且对分镜动画进行动态制作、字幕音乐添加渲染调整都完全基于虚幻引擎,降低制作周期成本和减少资源在软件来回切换导致过多研发成本浪费且流程得到极大优化,提高了动画制作的便利性。
附图说明
图1为本发明一种实施例提供的基于虚幻引擎的元宇宙虚拟交互方法的流程示意图;
图2为本发明一种实施例提供的基于虚幻引擎的元宇宙虚拟交互方法的流程示意图;
图3为本发明另一种实施例提供的基于虚幻引擎的元宇宙虚拟交互方法的流程示意图。
具体实施方式
为了使本发明的目的和优点更加清楚明白,下面结合实施例对本发明作进一步描述;应当理解,此处所描述的具体实施例仅仅用于解释本发明,并不用于限定本发明。
下面参照附图来描述本发明的优选实施方式。本领域技术人员应当理解的是,这些实施方式仅仅用于解释本发明的技术原理,并非在限制本发明的保护范围。
需要说明的是,在本发明的描述中,术语“上”、“下”、“左”、“右”、“内”、“外”等指示的方向或位置关系的术语是基于附图所示的方向或位置关系,这仅仅是为了便于描述,而不是指示或暗示所述装置或元件必须具有特定的方位、以特定的方位构造和操作,因此不能理解为对本发明的限制。
此外,还需要说明的是,在本发明的描述中,除非另有明确的规定和限定,术语“安装”、“相连”、“连接”应做广义理解,例如,可以是固定连接,也可以是可拆卸连接,或一体地连接;可以是机械连接,也可以是电连接;可以是直接相连,也可以通过中间媒介间接相连,可以是两个元件内部的连通。对于本领域技术人员而言,可根据具体情况理解上述术语在本发明中的具体含义。
请参阅图1所示,本发明实施例提供的一种基于虚幻引擎的元宇宙虚拟交互方法,该方法包括:
步骤S110,接收用户在虚幻引擎中的若干基础分镜动画和分镜动画设计信息;
步骤S120,根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取以形成目标分镜动画编辑信息,其中,所述预设分镜动画信息项包括目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,对若干基础分镜动画进行对象识别以形成若干基础分镜动画对象信息,将所述目标分镜动画编辑信息中各个分镜动画对象信息与所述基础分镜动画对象信息进行匹配并计算匹配率以判断分镜动画对象信息是否匹配成功,根据所述目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画进行排序,并获取用户对排序后的基础分镜动画的用户确认信息以对排序后的基础分镜动画进行修改;
步骤S130,根据所述各个分镜动画文本信息对修改完成的基础分镜动画进行文本信息添加;
步骤S140,根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画;
步骤S150,为所述待处理动画添加音乐信息和配音信息;
步骤S160,根据分镜动画渲染参数将所述音乐信息和配音信息添加完成的待处理动画进行渲染,并进行调整以形成目标动画。
具体而言,分镜动画设计信息为用户对若干基础分镜动画的具体需求信息,例如每个基础分镜动画的时长和基础分镜动画中的对象信息等;目标分镜动画序号与各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长一一对应;所述文本信息可以为文本内容、文本添加字体、文本添加字体大小和文本添加位置等。
具体而言,本发明实施例通过将用户在虚幻引擎中的动画设计信息根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取,获取到用户对每个分镜动画中的目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,接着对若干基础分镜动画进行对象识别,将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,将匹配成功的按序号对基础分镜动画进行排序,以实现分镜动画按顺序已形成完整的动画视频,然后通过为修改完成的基础分镜动画添加音乐信息和配音信息,实现了字幕的添加,并根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画,以实现将基础分镜动画的动态形成,对待处理动画进行声音信息添加实现对动画的背景音乐及配音,最后对分镜动画进行渲染和调整形成目标动画,对分镜动画进行动态制作、字幕音乐添加和渲染调整都完全基于虚幻引擎,降低制作周期成本和减少资源在软件来回切换导致过多研发成本浪费且流程得到极大优化,提高了动画制作的便利性。
具体而言,在根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取以形成目标分镜动画编辑信息时,将任意预设分镜动画信息项对应的关键词对分镜动画设计信息进行关键词提取,将提取到关键词形成目标分镜动画编辑信息;
在对若干基础分镜动画进行对象识别以形成若干基础分镜动画对象信息时,运用AI图像识别对若干基础分镜动画进行对象识别,所述识别形成的基础分镜动画对象信息包括人物信息、动物信息和物体信息,每个基础分镜动画对应一个基础分镜动画对象信息。
具体而言,人物信息可以为人物性别、身体姿态、身长、面部表情、年龄及穿着信息等,动物信息可以为动物品种、身体颜色,姿态和身长等,物体信息可以为物体名称、位置及规格信息等。
具体而言,本发明实施例通过将用户在虚幻引擎中的动画设计信息根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取,获取到用户对每个分镜动画中的目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,接着对若干基础分镜动画进行对象识别,进而将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,将匹配成功的按序号对基础分镜动画进行排序,以实现将基础分镜动画的形成动态动画。
具体而言,在将所述目标分镜动画编辑信息中各个分镜动画对象信息与所述基础分镜动画对象信息进行匹配时,按所述人物信息、动物信息和物体信息的顺序将每个基础分镜动画对象信息分别与所述目标分镜动画编辑信息中各个分镜动画对象信息进行匹配,并计算每个基础分镜动画中匹配到的对象信息的匹配率P,其中,P=N/M,N为匹配到的对象信息数量,M为相互匹配的基础分镜动画对象信息和分镜动画对象信息的总数量。
具体而言,本发明实施例通过将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,并计算匹配率进而判断所述分镜动画对象信息匹配成功,将匹配成功的按序号对基础分镜动画进行排序,提高排序精确性,以实现分镜动画按顺序已形成完整的动画视频。
具体而言,在判断所述分镜动画对象信息是否匹配成功时,将匹配率P与第一预设匹配率P1和第二预设匹配率P2进行比较,其中P1<P2;
若P>P2,则判定所述分镜动画对象信息匹配成功;
若P1≤P≤P2,则判定所述分镜动画对象信息匹配异常;
若P<P1,则判定所述分镜动画对象信息匹配失败。
具体而言,本发明实施例通过将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配,进而将匹配成功的按序号对基础分镜动画进行排序,以实现将基础分镜动画的动态形成,通过智能识别和匹配对分镜动画进行排序提高了动画制作的便利性。
具体而言,若判定所述分镜动画对象信息匹配成功,则根据所述目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画中匹配率最大的基础分镜动画进行序号标记,若判定所述分镜动画对象信息匹配失败,则将该分镜动画对象信息与下一个基础分镜动画对象信息进行匹配。
具体而言,若判定所述分镜动画对象信息匹配异常时,将对应的基础分镜动画进行异常符号标记,在所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配完成后,对各个标记有异常符号的基础分镜动画与标记有序号的基础分镜动画进行对比并判断标记有异常符号的基础分镜动画与标记有序号的基础分镜动画是否相似,若相似,则将该标有异常符号的基础分镜动画进行序号标记,其序号为判定为相似的基础分镜动画的序号的相邻序号且未标记出现的序号;
在若干基础分镜动画全部标记有序号后,根据序号对基础分镜动画进行排序;
将排序后的基础分镜动画发送给用户的虚幻引擎进行确认,并获取用户确认信息,其中,用户确认信息包括确认结果和修改信息,若所述确认结果为否,则根据所述修改信息对排序后的基础分镜动画进行修改。
具体而言,若目标分镜动画序号有序1和序2,基础分镜动画有分镜1和分镜2,将序1对应的分镜动画对象信息分别与分镜1和分镜2对应的基础分镜动画对象信息进行匹配后,将序2对应的分镜动画对象信息分别与分镜1和分镜2对应的基础分镜动画对象信息进行匹配,并计算得出两组匹配率组,每组包括两个匹配率,将每组中的两个匹配率与预设匹配率进行比较,若Pa1:90%、Pa2:80%,Pb1:95%、Pb2:70%,由于Pa1和Pb1都判定匹配成功,但90%<95%,所以对Pb1对应的分镜1进行序号标记为序2,Pa2和Pb2被判定为异常则对分镜2进行异常符号标记;
判断标记有异常符号的基础分镜动画与标记有序号的基础分镜动画是否相似可以根据两个基础分镜动画对象信息之间的相似率以判断是否相似。
具体而言,本发明实施例通过将识别的所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配后,将匹配异常的对应的基础分镜动画进行异常符号标记,对各个标记有异常符号的基础分镜动画与标记有序号的基础分镜动画进行对比并判断标记有异常符号的基础分镜动画与标记有序号的基础分镜动画是否相似,将相似的标有异常符号的基础分镜动画进行序号标记,然后再次进行排序,进而进行动画制作以形成待处理动画,以实现将基础分镜动画的动态形成,通过两次排序提高了分镜动画排序的准确性以提高动画制作的便利性。
请参阅图2所示,根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画包括:
步骤S141,根据文本信息添加完成的基础分镜动画对应的标记的序号匹配所述各个分镜动画时长中与每个文本信息添加完成的基础分镜动画序号对应的分镜动画时长;
步骤S142,按照所述分镜动画时长对对应的文本信息添加完成的基础分镜动画进行动画制作形成待处理动画。
具体而言,在为所述待处理动画添加音乐信息和配音信息时,获取用户的音乐信息,将所述音乐信息添加到待处理动画中,将添加有所述音乐信息的待处理动画形成待配音动画和配音指令发送给用户的虚幻引擎的配音界面,获取用户的配音指令的响应信息,其中,响应信息包括已配音的待处理动画。
具体而言,所述音乐信息可以为歌曲音频、歌曲音频设置位置和歌曲声音大小等。
具体而言,本发明实施例通过再次排序和修改完成的基础分镜动画进行文本信息添加,实现了字幕的添加,并根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画,以实现将基础分镜动画的动态形成,通过智能添加字幕,提高了动画制作的便利性。
请参阅图3所示,根据分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染和调整以形成目标动画包括:
步骤S161,获取用户的若干分镜动画渲染参数;
步骤S162,根据所述分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染以形成待调整动画;
步骤S163,分析所述待调整动画中各个分镜动画间的对象变化情况和声音大小变换情况,并判断对象形状变化情况和声音大小变换情况是否符合标准,将不符合标准的待调整动画中的分镜动画进行调整以形成目标动画。
具体而言,在分析所述待调整动画中各个分镜动画间的对象变化情况和声音大小变换情况时,按顺序将相邻两个分镜动画的对象形状大小、对象颜色像素、对象位置和声音大小,并计算将两个分镜动画的对象形状大小差值、对象颜色像素差值、对象位置距离差值和声音大小差值,将对象形状大小差值、对象颜色像素差值、对象位置距离差值和声音大小差值与对象形状大小预设差值、对象颜色像素预设差值、对象位置距离预设差值和声音大小预设差值进行比较,将超出预设差值的两个分镜动画进行调整,将所有超出预设差值的分镜动画发送给用户的虚幻引擎,获取用户的调整参数,根据所述调整参数将对应的分镜动画进行参数调整,生成目标动画。
具体而言,本发明实施例通过将完成声音信息添加的待处理动画进行渲染和调整形成目标动画,使动画的视觉效果和衔接更加准确,且对分镜动画进行动态制作、字幕音乐添和渲染调整都完全基于虚幻引擎,降低制作周期成本和减少资源在软件来回切换导致过多研发成本浪费且流程得到极大优化,提高了动画制作的便利性。
至此,已经结合附图所示的优选实施方式描述了本发明的技术方案,但是,本领域技术人员容易理解的是,本发明的保护范围显然不局限于这些具体实施方式。在不偏离本发明的原理的前提下,本领域技术人员可以对相关技术特征做出等同的更改或替换,这些更改或替换之后的技术方案都将落入本发明的保护范围之内。
以上所述仅为本发明的优选实施例,并不用于限制本发明;对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。
Claims (10)
1.一种基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,包括:
接收用户在虚幻引擎中的若干基础分镜动画和分镜动画设计信息;
根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取以形成目标分镜动画编辑信息,其中,所述预设分镜动画信息项包括目标分镜动画序号、各个分镜动画对象信息、各个分镜动画文本信息和各个分镜动画时长,对若干基础分镜动画进行对象识别以形成若干基础分镜动画对象信息,将所述目标分镜动画编辑信息中各个分镜动画对象信息与所述基础分镜动画对象信息进行匹配并计算匹配率以判断分镜动画对象信息是否匹配成功,根据所述目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画进行排序,并获取用户对排序后的基础分镜动画的用户确认信息以对排序后的基础分镜动画进行修改;
根据所述各个分镜动画文本信息对修改完成的基础分镜动画进行文本信息添加;
根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画;
为所述待处理动画添加音乐信息和配音信息;
根据分镜动画渲染参数将所述音乐信息和配音信息添加完成的待处理动画进行渲染,并进行调整以形成目标动画。
2.根据权利要求1所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,在根据预设分镜动画信息项对所述分镜动画设计信息进行关键词提取以形成目标分镜动画编辑信息时,将任意预设分镜动画信息项对应的关键词对分镜动画设计信息进行关键词提取,将提取到关键词形成目标分镜动画编辑信息;
在对若干基础分镜动画进行对象识别以形成若干基础分镜动画对象信息时,运用AI图像识别对若干基础分镜动画进行对象识别,识别形成的基础分镜动画对象信息包括人物信息、动物信息和物体信息,每个基础分镜动画对应一个基础分镜动画对象信息。
3.根据权利要求2所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,在将所述目标分镜动画编辑信息中各个分镜动画对象信息与所述基础分镜动画对象信息进行匹配时,按所述人物信息、动物信息和物体信息的顺序将每个基础分镜动画对象信息分别与所述目标分镜动画编辑信息中各个分镜动画对象信息息进行匹配,并计算每个基础分镜动画中匹配到的对象信息的匹配率P,其中,P=N/M,N为匹配到的对象信息数量,M为相互匹配的基础分镜动画对象信息和分镜动画对象信息的总数量。
4.根据权利要求3所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,在判断所述分镜动画对象信息是否匹配成功时,将匹配率P与第一预设匹配率P1和第二预设匹配率P2进行比较,其中P1<P2;
若P>P2,则判定所述分镜动画对象信息匹配成功;
若P1≤P≤P2,则判定所述分镜动画对象信息匹配异常;
若P<P1,则判定所述分镜动画对象信息匹配失败。
5.根据权利要求4所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,若判定所述分镜动画对象信息匹配成功,则根据所述目标分镜动画序号将匹配成功的分镜动画对象信息对应的基础分镜动画中匹配率最大的基础分镜动画进行序号标记,若判定所述分镜动画对象信息匹配失败,则将该分镜动画对象信息与下一个基础分镜动画对象信息进行匹配。
6.根据权利要求5所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,若判定所述分镜动画对象信息匹配异常时,将对应的基础分镜动画进行异常符号标记,在所述目标分镜动画编辑信息中各个分镜动画对象信息与基础分镜动画对象信息进行匹配完成后,对各个标记有异常符号的基础分镜动画与标记有序号的基础分镜动画进行对比并判断标记有异常符号的基础分镜动画与标记有序号的基础分镜动画是否相似,若相似,则将该标记有异常符号的基础分镜动画进行序号标记,其序号为判定为相似的基础分镜动画的序号的相邻序号且未标记出现的序号;
在若干基础分镜动画全部标记有序号后,根据序号对基础分镜动画进行排序;
将排序后的基础分镜动画发送给用户的虚幻引擎进行确认,并获取用户确认信息,其中,用户确认信息包括确认结果和修改信息,若所述确认结果为否,则根据所述修改信息对排序后的基础分镜动画进行修改。
7.根据权利要求6所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,根据所述各个分镜动画时长将文本信息添加完成的基础分镜动画进行动画制作以形成待处理动画包括:
根据文本信息添加完成的基础分镜动画对应的标记的序号匹配所述各个分镜动画时长中与每个文本信息添加完成的基础分镜动画序号对应的分镜动画时长;
按照所述分镜动画时长对对应的文本信息添加完成的基础分镜动画进行动画制作形成待处理动画。
8.根据权利要求7所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,在为所述待处理动画添加音乐信息和配音信息时,获取用户的音乐信息,将所述音乐信息添加到待处理动画中,将添加有所述音乐信息的待处理动画形成待配音动画和配音指令发送给用户的虚幻引擎的配音界面,获取用户的配音指令的响应信息,其中,响应信息包括已配音的待处理动画。
9.根据权利要求8所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,根据分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染和调整以形成目标动画包括:
获取用户的若干分镜动画渲染参数;
根据所述分镜动画渲染参数将声音信息添加完成的待处理动画进行渲染以形成待调整动画;
分析所述待调整动画中各个分镜动画间的对象变化情况和声音大小变换情况,并判断对象形状变化情况和声音大小变换情况是否符合标准,将不符合标准的待调整动画中的分镜动画进行调整以形成目标动画。
10.根据权利要求9所述的基于虚幻引擎的元宇宙虚拟交互方法,其特征在于,在分析所述待调整动画中各个分镜动画间的对象变化情况和声音大小变换情况时,按顺序将相邻两个分镜动画的对象形状大小、对象颜色像素、对象位置和声音大小,并计算将两个分镜动画的对象形状大小差值、对象颜色像素差值、对象位置距离差值和声音大小差值,将对象形状大小差值、对象颜色像素差值、对象位置距离差值和声音大小差值与对象形状大小预设差值、对象颜色像素预设差值、对象位置距离预设差值和声音大小预设差值进行比较,将超出预设差值的两个分镜动画进行调整,将所有超出预设差值的分镜动画发送给用户的虚幻引擎,获取用户的调整参数,根据所述调整参数将对应的分镜动画进行参数调整,生成目标动画。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211549545.9A CN115880404A (zh) | 2022-12-05 | 2022-12-05 | 一种基于虚幻引擎的元宇宙虚拟交互方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202211549545.9A CN115880404A (zh) | 2022-12-05 | 2022-12-05 | 一种基于虚幻引擎的元宇宙虚拟交互方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN115880404A true CN115880404A (zh) | 2023-03-31 |
Family
ID=85765862
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202211549545.9A Pending CN115880404A (zh) | 2022-12-05 | 2022-12-05 | 一种基于虚幻引擎的元宇宙虚拟交互方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN115880404A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117671212A (zh) * | 2023-12-13 | 2024-03-08 | 江苏麦克数字空间营造有限公司 | 基于元宇宙的展厅展览***及其交互方法 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI272507B (en) * | 2005-09-22 | 2007-02-01 | Culture Com Technology Macau Ltd | Shooting script generation system and method thereof |
CN1940909A (zh) * | 2005-09-30 | 2007-04-04 | 文化传信科技(澳门)有限公司 | 分镜头剧本生成***以及方法 |
CN111667557A (zh) * | 2020-05-20 | 2020-09-15 | 完美世界(北京)软件科技发展有限公司 | 动画制作方法及装置、存储介质、终端 |
CN112565825A (zh) * | 2020-12-02 | 2021-03-26 | 腾讯科技(深圳)有限公司 | 一种视频数据处理方法、装置、设备以及介质 |
CN113591527A (zh) * | 2021-01-14 | 2021-11-02 | 腾讯科技(深圳)有限公司 | 一种对象轨迹识别方法、装置、电子设备和存储介质 |
CN113886632A (zh) * | 2021-12-03 | 2022-01-04 | 杭州并坚科技有限公司 | 一种基于动态规划的视频检索匹配方法 |
CN114638232A (zh) * | 2022-03-22 | 2022-06-17 | 北京美通互动数字科技股份有限公司 | 一种文本转换成视频的方法、装置、电子设备及存储介质 |
-
2022
- 2022-12-05 CN CN202211549545.9A patent/CN115880404A/zh active Pending
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
TWI272507B (en) * | 2005-09-22 | 2007-02-01 | Culture Com Technology Macau Ltd | Shooting script generation system and method thereof |
CN1940909A (zh) * | 2005-09-30 | 2007-04-04 | 文化传信科技(澳门)有限公司 | 分镜头剧本生成***以及方法 |
CN111667557A (zh) * | 2020-05-20 | 2020-09-15 | 完美世界(北京)软件科技发展有限公司 | 动画制作方法及装置、存储介质、终端 |
CN112565825A (zh) * | 2020-12-02 | 2021-03-26 | 腾讯科技(深圳)有限公司 | 一种视频数据处理方法、装置、设备以及介质 |
CN113591527A (zh) * | 2021-01-14 | 2021-11-02 | 腾讯科技(深圳)有限公司 | 一种对象轨迹识别方法、装置、电子设备和存储介质 |
CN113886632A (zh) * | 2021-12-03 | 2022-01-04 | 杭州并坚科技有限公司 | 一种基于动态规划的视频检索匹配方法 |
CN114638232A (zh) * | 2022-03-22 | 2022-06-17 | 北京美通互动数字科技股份有限公司 | 一种文本转换成视频的方法、装置、电子设备及存储介质 |
Non-Patent Citations (2)
Title |
---|
夏立伟;: "使用游戏引擎制作三维动画的利弊分析", 当代电影, no. 08, 5 August 2018 (2018-08-05), pages 1 - 7 * |
开发游戏的老王: "如何在UE4中对动画片段进行简单的剪切(Trim)和拼接(Composite)", pages 1 - 7, Retrieved from the Internet <URL:https:zhuanlan.zhihu.com/344643453> * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN117671212A (zh) * | 2023-12-13 | 2024-03-08 | 江苏麦克数字空间营造有限公司 | 基于元宇宙的展厅展览***及其交互方法 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Andriluka et al. | Fluid annotation: a human-machine collaboration interface for full image annotation | |
CN101281540B (zh) | 用于处理信息的设备、方法和计算机程序 | |
Tariq et al. | Emotion recognition from an ensemble of features | |
JP2005513967A (ja) | 情報ストリーム内のコンテンツを検出するアルゴリズムを進化させるための方法、装置、およびプログラム | |
CN115880404A (zh) | 一种基于虚幻引擎的元宇宙虚拟交互方法 | |
CN112989977A (zh) | 一种基于跨模态注意力机制的视听事件定位方法及装置 | |
CN110070914B (zh) | 一种基因序列识别方法、***和计算机可读存储介质 | |
CN109740530A (zh) | 视频段的提取方法、装置、设备及计算机可读存储介质 | |
CN112966088A (zh) | 未知意图的识别方法、装置、设备及存储介质 | |
CN117376632A (zh) | 基于智能深度合成的数据恢复方法和*** | |
CN111741331A (zh) | 一种视频片段处理方法、装置、存储介质及设备 | |
Yao et al. | Dance with you: The diversity controllable dancer generation via diffusion models | |
CN113821703B (zh) | 一种车联网用户画像生成方法及其*** | |
CN116186310B (zh) | 一种融合ai通用助手的ar空间标注及展示方法 | |
CN112565903A (zh) | 视频推荐方法、装置、服务器及存储介质 | |
CN111191658A (zh) | 基于广义局部二值模式的纹理描述方法及图像分类方法 | |
CN111814922B (zh) | 一种基于深度学习的视频片段内容匹配方法 | |
Chang et al. | A Closer Look at Geometric Temporal Dynamics for Face Anti-Spoofing | |
CN109934302B (zh) | 新类别识别方法和基于模糊理论和深度学习的机器人*** | |
CN112132931A (zh) | 一种模板化视频合成的处理方法、装置及*** | |
Xu et al. | Automatic generated recommendation for movie trailers | |
CN114205677B (zh) | 一种基于原型视频的短视频自动编辑方法 | |
CN117953590B (zh) | 一种三元交互动作检测方法、***、设备及介质 | |
CN116229943B (zh) | 一种对话式数据集的生成方法和装置 | |
CN114627340B (zh) | 基于三重度量的图像隐写检测特征自适应选取方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |