CN106445460B - 控制方法及装置 - Google Patents

Abstract

本发明公开了控制方法及装置。其中，该方法包括：采用获取音频信号；获取所述音频信号的一个或多个属性参数；根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作。本发明解决了现有技术将音乐与动画结合的技术问题。

Description

控制方法及装置

技术领域

本发明涉及音频处理领域，具体而言，涉及控制方法及装置。

背景技术

目前，有的PC上的音乐播放器只有音乐播放功能，后来为了增加更丰富的用户音乐体验，根据音乐的节奏和强度在视觉上为用户提供了动态的实时显示的频谱图形。使用户在听音乐的同时可以看到频谱的变化，在音乐播放时波形图形随着音乐的播放而显示出来，有的是实时的相识音乐的频率波动曲线。以上这些随着音频显示的图片都很单一，仅仅是频率曲线的简单变化，少有使用者会去观看，所以该频谱图形起不到娱乐和增加用户体验的效果。目前，没有将频谱与有娱乐效果的动画进行结合的技术方案。

针对上述音频显示的问题，目前尚未提出有效的解决方案。

发明内容

本发明实施例提供了控制方法及装置，以至少解决现有技术将音乐与动画结合的技术问题。

根据本发明实施例的一个方面，提供了一种控制方法，包括：获取音频信号；获取所述音频信号的一个或多个属性参数；根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作。

进一步地，获取所述音频信号的一个或多个属性参数包括:获取第一属性参数和第二属性参数；所述第一属性参数包括所述音频的幅值、频率、和/或波形；所述第二属性参数包括歌曲的频谱、歌曲PCM数据、歌曲在曲库中的标签、和/或歌曲风格。

进一步地，根据所述一个或多个属性参数控制所述虚拟形象的一个或多个部分做出动作包括以下至少之一：根据所述音频信号的幅值控制所述虚拟形象的一个或多个部分做出动作的幅度大小；根据所述音频信号的频率控制所述虚拟形象的一个或多个部分做出所述动作的快慢；根据所述音频信号的波形控制所述虚拟形象的一个或多个部分做出所述动作的种类；根据幅值频段的优先级，选择触发信号，控制所述虚拟形象的一个或多个部分的创建或者消灭。

进一步地，在根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作之前，所述方法还包括：根据所述第二属性参数从预先配置的多个虚拟形象和场景中选择一个或多个做出所述动作的虚拟形象和/或场景；根据所述第二属性参数来显示不同的形象和场景。

进一步地，在选出做出所述动作的一个或多个虚拟形象和/或场景之后，所述方法还包括：根据所述一个或多个属性参数从选出的做出所述动作的一个或多个虚拟形象和/或场景中选择做出所述动作的一个或多个部分。

进一步地，根据所述一个或多个属性参数控制所述虚拟形象和/或场景的一个或多个部分做出动作包括：获取选择出的虚拟形象和/或场景的优先级；根据所述优先级和所述一个或多个属性参数分别控制所述选择出的虚拟形象的一个或多个部分做出动作。

进一步地，所述虚拟形象包括：虚拟生物形象，所述虚拟生物形象的优先级高于虚拟非生物形象。

根据本发明实施例的另一方面，还提供了一种控制装置，包括：获取单元，用于获取音频信号；处理单元，用于获取所述音频信号的一个或多个属性参数；控制单元，用于根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作。

进一步地，处理单元包括:第一处理单元和第二处理单元；所述第一处理单元，用于获取所述音频的幅值、频率、和/或波形；所述第二处理单元，用于获取歌曲的频谱、歌曲PCM数据、歌曲在曲库中的标签、和/或歌曲风格。

进一步地，所述控制单元包括以下至少之一：幅度模块，用于根据所述音频信号的幅值控制所述虚拟形象的一个或多个部分做出动作的幅度大小；速度模块，用于根据所述音频信号的频率控制所述虚拟形象的一个或多个部分做出所述动作的快慢；种类模块，用于根据所述音频信号的波形控制所述虚拟形象的一个或多个部分做出所述动作的种类；生成模块，用于根据幅值频段的优先级，选择触发信号，控制所述虚拟形象的一个或多个部分的创建或者消灭。

进一步地，所述控制单元还包括：配置模块，用于根据所述第二属性参数从预先配置的多个虚拟形象和场景中选择一个或多个做出所述动作的虚拟形象和/或场景；选择模块，用于根据所述第二属性参数来选择不同的形象和场景。

进一步地，所述选择模块还包括：部分选择模块，用于根据所述一个或多个属性参数从选出的做出所述动作的一个或多个虚拟形象和/或场景中选择做出所述动作的一个或多个部分。

进一步地，所述部分选择模块包括：优先级模块，获取选择出的虚拟形象和/或场景的优先级；控制模块，根据所述优先级和所述一个或多个属性参数分别控制所述选择出的虚拟形象的一个或多个部分做出动作。

在本发明实施例中，采用获取音频信号；获取所述音频信号的一个或多个属性参数；根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作，进而解决了现有技术将音乐与动画结合的技术问题。

附图说明

此处所说明的附图用来提供对本发明的进一步理解，构成本申请的一部分，本发明的示意性实施例及其说明用于解释本发明，并不构成对本发明的不当限定。在附图中：

图1是根据本发明实施例的一种控制方法的流程图；以及，

图2是根据本发明实施例的一种控制装置的示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

根据本发明实施例，还提供了一种控制方法的实施例，需要说明的是，在附图的流程图示出的步骤可以在诸如一组计算机可执行指令的计算机***中执行，并且，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤。

图1是根据本发明实施例的一种控制方法的流程图。如图1所示，该方法包括步骤如下：

步骤S102，获取音频信号；

步骤S104，获取所述音频信号的一个或多个属性参数；

步骤S106，根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作。

在上述步骤中，获取音频信号之后，通过FFT算法获取音频信号的频谱并且归纳频谱在不同频段的幅值，频谱和幅值作为属性参数之一，预先将不同的属性参数绑定不同的动画部件元素，动画部件元素就是代表不同的虚拟形象的一部分，然后当重新接收到属性参数时，触发控制相应的虚拟形象的一个或多个部分做出动作。

如果是音频则是需要先筛选振幅频段的优先级，再选择相应的信号最后来触发控制相应的虚拟形象的一个或多个部分做出动作。

通过上述步骤，使用音频的不同参数控制虚拟形象做出种类复杂的动作，使用户观看到的更有娱乐性。

在一个可选的实施方式中，获取所述音频信号的一个或多个属性参数包括:

获取第一属性参数和第二属性参数；

所述第一属性参数包括所述音频的幅值、频率、和/或波形；

所述第二属性参数包括歌曲的频谱、歌曲PCM数据、歌曲在曲库中的标签、和/或歌曲风格。

通过将属性参数划分不同的类别，并且分别进行处理，比如第一属性参数使用FFT算法获取，第二属性参数是歌曲文件中相关的也可以是根据外界的语音得到的参数。通过对属性参数的详细划分，使用动画控制更为复杂从而使得音频对应的动画种类更为丰富和多变。

在一个可选的实施方式中，根据所述一个或多个属性参数控制所述虚拟形象的一个或多个部分做出动作包括以下至少之一：

根据所述音频信号的幅值控制所述虚拟形象的一个或多个部分做出动作的幅度大小；根据音频信号的某个参数(比如，根据幅值相关参数)更改物体的长宽高参数，或整体比例；

根据所述音频信号的频率控制所述虚拟形象的一个或多个部分做出所述动作的快慢；

根据所述音频信号的波形控制所述虚拟形象的一个或多个部分做出所述动作的种类；

根据幅值频段的优先级，选择触发信号，控制所述虚拟形象的一个或多个部分的创建或者消灭。触发信号根据音频算法得出。

例如，根据上述根据音频信号的某个参数和/或音频算法总结出的触发信号，移动物体、改变运动方向或改变速度，亦或者，旋转物体，改变旋转方向或旋转速度。其中移动物体和改变运动方向可以是结合幅值频段的优先级，当符合所绑定某种动画部件或多个动画部件对应的声音的幅值频段时就触发控制信号，从而控制这个虚拟形象的这个部件或者多个部件出现或者消失。控制速度可以是当所绑定某种动画部件或多个动画部件对应的音频信号的频率时，就触发控制信号，从而控制相应的某种动画部件或多个动画部件做出与音频信号的频率相同的动作。

通过以上这些参数对应的虚拟形象的动作组合，实现复杂的动画动作与音频的对应关系控制，组合出多种对应的动作，比如改变动画旋转方向等。

在一个可选的实施方式中，根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作之前，所述方法还包括：

根据所述第二属性参数从预先配置的多个虚拟形象和场景中选择一个或多个做出所述动作的虚拟形象和/或场景；

根据所述第二属性参数来显示不同的形象和场景。

第二属性参数既可以是从音乐也可以是从外界输入的声音所获得的参数，通过预先设定配置不同场景与虚拟形象对应不同的音乐风格、音乐在曲库中的标签等参数从而来选择相应的场景和虚拟形象。比如选择在水波纹环境下的机器人形象或者在无场景时的机器人形象。在根据第二属性参数选择相应场景和虚拟形象之前，先进行判断输入音频是音乐还是语音，音乐还是语音这一标准可以作为选择场景与虚拟形象的一个参数，从而筛选出不同的场景和虚拟形象，使得用户的体验更为丰富，因为在不同场景下选择不同虚拟形象，大大丰富了动画。

在一个可选的实施方式中，在选出做出所述动作的一个或多个虚拟形象和/或场景之后，还可以包括：

根据所述一个或多个属性参数从选出的做出所述动作的一个或多个虚拟形象和/或场景中选择做出所述动作的一个或多个部分。

通过将将不同场景下的不同虚拟形象的不同部件做出不同的动作，增加了动画的复杂度，可以组合成一些有内容的动画，从而增加娱乐性，吸引使用者观看。

在一个可选的实施方式中，根据所述一个或多个属性参数控制所述虚拟形象和/或场景的一个或多个部分做出动作包括：获取选择出的虚拟形象和/或场景的优先级；

根据所述优先级和所述一个或多个属性参数分别控制所述选择出的虚拟形象的一个或多个部分做出动作。

可以根据不同的音频选择不同的场景或虚拟形象，也可以根据不同的场景选择最佳的虚拟形象。

在一个可选的实施方式中，所述虚拟形象包括：虚拟生物形象，所述虚拟生物形象的优先级高于虚拟非生物形象。比如机器人、喇叭等等。

在上述实施方式中，还可以获取虚拟生物形象展示动作的背景图像，根据背景图像中的图像特征选出一组动作，然后，该动作如何运行取决于播放的声音或者音乐。例如，如果背景图片是一张印度的景色，那么选出的动作就可以是一组印度舞中的动作，然后该印度舞的动作做哪些，如何做由音频参数控制。

图像中的图像特征的识别可以通过一个接口，该接口连接到外部的识图工具(例如，某些搜索引擎提供识图功能)，通过该接口发送图片，同时也可以通过该接口接收到图片对应的文字信息，这些文字信息用来标识该图像的图像特征，然后再根据这些文字信息来选择出一组动作。

本实施例还提供了一种控制装置。该装置可以通过处理单元和控制单元实现其功能。需要说明的是，本实施例的控制装置可以用于执行本实施例所提供的一种控制方法，本实施例的一种控制方法也可以通过本发明实施例所提供的控制装置执行。

图2是根据本发明实施例的一种控制装置的示意图。如图2所示，一种控制装置包括：

获取单元22，用于获取音频信号；

处理单元24，用于获取所述音频信号的一个或多个属性参数；

控制单元26，用于根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作。

在一个可选的实施方式中，处理单元包括:

第一处理单元和第二处理单元；；

所述第一处理单元，用于获取所述音频的幅值、频率、和/或波形；

所述第二处理单元，用于获取歌曲的频谱、歌曲PCM数据、歌曲在曲库中的标签、和/或歌曲风格。

在一个可选的实施方式中，所述控制单元包括以下至少之一：

幅度模块，用于根据所述音频信号的幅值控制所述虚拟形象的一个或多个部分做出动作的幅度大小；

速度模块，用于根据所述音频信号的频率控制所述虚拟形象的一个或多个部分做出所述动作的快慢；

种类模块，用于根据所述音频信号的波形控制所述虚拟形象的一个或多个部分做出所述动作的种类；

生成模块，用于根据幅值频段的优先级，选择触发信号，控制所述虚拟形象的一个或多个部分的创建或者消灭。

在一个可选的实施方式中，所述控制单元还包括：

配置模块，用于根据所述第二属性参数从预先配置的多个虚拟形象和场景中选择一个或多个做出所述动作的虚拟形象和/或场景；

选择模块，用于根据所述第二属性参数来选择不同的形象和场景。

在一个可选的实施方式中，所述选择模块还包括：

部分选择模块，用于根据所述一个或多个属性参数从选出的做出所述动作的一个或多个虚拟形象和/或场景中选择做出所述动作的一个或多个部分。

在一个可选的实施方式中，所述部分选择模块包括：

优先级模块，获取选择出的虚拟形象和/或场景的优先级；

控制模块，根据所述优先级和所述一个或多个属性参数分别控制所述选择出的虚拟形象的一个或多个部分做出动作。

在本申请所提供的几个实施例中，应该理解到，所揭露的技术内容，可通过其它的方式实现。其中，以上所描述的装置实施例仅仅是示意性的，例如所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，单元或模块的间接耦合或通信连接，可以是电性或其它的形式。

所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

所述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。

以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (10)

1.一种控制方法，其特征在于，包括：

获取音频信号；

获取所述音频信号的一个或多个属性参数；

根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作，其中，所述动作的种类根据图像特征进行确定，所述图像特征为在展示所述动作时所显示的背景图像中的特征；

所述动作的种类根据图像特征进行确定，包括：

识别所述背景图像，获取背景图像对应的文字信息，根据所述文字信息确定所述动作的种类，其中，所述文字信息用于标识所述图像的图像特征。

2.根据权利要求1所述的控制方法，其特征在于，获取所述音频信号的一个或多个属性参数包括:

获取第一属性参数和第二属性参数；

所述第一属性参数包括所述音频的幅值、频率、和/或波形；

所述第二属性参数包括歌曲的频谱、歌曲PCM数据、歌曲在曲库中的标签、和/或歌曲风格。

3.根据权利要求2所述的控制方法，其特征在于，根据所述一个或多个属性参数控制所述虚拟形象的一个或多个部分做出动作包括以下至少之一：

根据所述音频信号的幅值控制所述虚拟形象的一个或多个部分做出动作的幅度大小；

根据所述音频信号的频率控制所述虚拟形象的一个或多个部分做出所述动作的快慢；

根据所述音频信号的波形控制所述虚拟形象的一个或多个部分做出所述动作的种类；

根据幅值频段的优先级，选择触发信号，控制所述虚拟形象的一个或多个部分的创建或者消灭。

4.根据权利要求2所述的控制方法，其特征在于，在根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作之前，所述方法还包括：

根据所述第二属性参数从预先配置的多个虚拟形象和场景中选择一个或多个做出所述动作的虚拟形象和/或场景；

根据所述第二属性参数来显示不同的虚拟形象和场景。

5.根据权利要求4所述的控制方法，其特征在于，在选出做出所述动作的一个或多个虚拟形象和/或场景之后，所述方法还包括：

根据所述一个或多个属性参数从选出的做出所述动作的一个或多个虚拟形象和/或场景中选择做出所述动作的一个或多个部分。

6.根据权利要求4所述的控制方法，其特征在于，根据所述一个或多个属性参数控制所述虚拟形象和/或场景的一个或多个部分做出动作包括：

获取选择出的虚拟形象和/或场景的优先级；

根据所述优先级和所述一个或多个属性参数分别控制所述选择出的虚拟形象的一个或多个部分做出动作。

7.根据权利要求6所述的控制方法，其特征在于，所述虚拟形象包括：虚拟生物形象，所述虚拟生物形象的优先级高于虚拟非生物形象。

8.一种控制装置，其特征在于，包括：

获取单元，用于获取音频信号；

处理单元，用于获取所述音频信号的一个或多个属性参数；

控制单元，用于根据所述一个或多个属性参数控制虚拟形象的一个或多个部分做出动作，其中，所述动作的种类根据图像特征进行确定，所述图像特征为在展示所述动作时所显示的背景图像中的特征；

控制单元，还用于识别所述背景图像，获取背景图像对应的文字信息，根据所述文字信息确定所述动作的种类，其中，所述文字信息用于标识所述图像的图像特征。

9.根据权利要求8所述的控制装置，其特征在于，所述处理单元包括:

第一处理单元和第二处理单元；

所述第一处理单元，用于获取所述音频的幅值、频率、和/或波形；

所述第二处理单元，用于获取歌曲的频谱、歌曲PCM数据、歌曲在曲库中的标签、和/或歌曲风格。

10.根据权利要求9所述的控制装置，其特征在于，所述控制单元包括以下至少之一：

幅度模块，用于根据所述音频信号的幅值控制所述虚拟形象的一个或多个部分做出动作的幅度大小；

速度模块，用于根据所述音频信号的频率控制所述虚拟形象的一个或多个部分做出所述动作的快慢；

种类模块，用于根据所述音频信号的波形控制所述虚拟形象的一个或多个部分做出所述动作的种类；

生成模块，用于根据幅值频段的优先级，选择触发信号，控制所述虚拟形象的一个或多个部分的创建或者消灭。