CN103974020B - 音视频数据采集方法及装置 - Google Patents

Abstract

一种音视频数据采集方法，所述方法包括以下步骤：在接收到与采集视频数据对应的第一指令时记录第一参考时间；发送与采集音频数据对应的第二指令；自所述第一参考时间开始至预定时间到达时响应所述第一指令采集视频数据；接收与所述第二指令对应的音频数据；根据所述预定时间对所述视频数据和所述音频数据进行同步处理。本发明还公开了一种音视频数据采集装置。本发明能够防止在视频通话的过程中声音相对图像滞后，实现视频通话中图像和声音同步。

Description

音视频数据采集方法及装置

【技术领域】

本发明涉及音视频采集领域，特别涉及一种音视频数据采集方法及装置。

【背景技术】

传统的用户设备（例如，数字电视接收机或计算机）可以实现视频通话的功能。该用户设备在实现视频通话的功能的过程中一般会分别采集视频数据和音频数据，例如，通过内置于用户设备中的摄像头采集视频数据，而通过内置于与该用户设备独立的诸如遥控器、蓝牙耳麦、移动终端等设备来采集音频数据，采集音频数据的设备与采集视频数据的用户设备通过无线的方式通信。

在实践中，发明人发现现有技术至少存在以下问题：

采集音频数据的设备与采集视频数据的用户设备在通过无线的方式通信的过程中会出现时间差，这会导致视频通话中的图像和声音不同步，例如，声音滞后于图像，严重影响了视频通话的质量。

故，有必要提出一种新的技术方案，以解决上述技术问题。

【发明内容】

本发明的目的在于提供一种音视频数据采集方法及装置，其能防止在视频通话的过程中声音相对图像滞后，实现视频通话中图像和声音同步。

为解决上述问题，本发明的技术方案如下：

一种音视频数据采集方法，所述方法包括以下步骤：在接收到与采集视频数据对应的第一指令时记录第一参考时间；发送与采集音频数据对应的第二指令；自所述第一参考时间开始至预定时间到达时响应所述第一指令采集视频数据；接收与所述第二指令对应的音频数据；根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

一种音视频数据采集装置，所述装置包括：参考时间记录模块，用于在接收到与采集视频数据对应的第一指令时记录第一参考时间；发送模块，用于发送与采集音频数据对应的第二指令；视频数据采集模块，用于自所述第一参考时间开始至预定时间到达时响应所述第一指令采集视频数据；接收模块，用于接收与所述第二指令对应的音频数据；同步模块，用于根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

相对现有技术，本发明由于在进行视频数据采集之前即采取同步视频数据和音频数据的措施，同时，在采集到视频数据后进一步地采取同步视频数据和音频数据的措施，这样，可以防止在视频通话的过程中声音相对图像滞后，实现视频通话中图像和声音同步，提高了视频通话的质量。

为让本发明的上述内容能更明显易懂，下文特举优选实施例，并配合所附图式，作详细说明如下：

【附图说明】

图1为本发明的音视频数据采集方法第一实施例的流程图；

图2为本发明的音视频数据采集方法第二实施例的流程图；

图3为本发明的音视频数据采集方法第三实施例的流程图；

图4为本发明的音视频数据采集方法第四实施例的流程图；

图5为本发明的音视频数据采集方法第五实施例的流程图；

图6为本发明的音视频数据采集方法第六实施例的流程图；

图7为本发明的音视频数据采集方法第七实施例的流程图；

图8为本发明的音视频数据采集装置第一实施例的框图；

图9为本发明的音视频数据采集装置第五实施例的框图。

【具体实施方式】

以下各实施例的说明是参考附加的图式，用以例示本发明可用以实施的特定实施例。

参考图1，图1为本发明的音视频数据采集方法第一实施例的流程图。

本实施例的音视频数据采集方法包括以下步骤：

步骤101，在接收到与采集视频数据对应的第一指令时记录第一参考时间。

步骤102，发送与采集音频数据对应的第二指令。

步骤103，自所述第一参考时间开始至预定时间到达时响应所述第一指令采集视频数据。

步骤104，接收与所述第二指令对应的音频数据。

步骤105，根据所述预定时间对所述视频数据和所述音频数据进行同步处理。具体地，可以在将音频数据和视频数据整合（多路复用）成视频通话信号的过程中，将视频数据延迟预定时间，这样，便可以实现视频通话中的声音和图像同步。

在本实施例中，由于在进行视频数据采集之前即采取同步视频数据和音频数据的措施，同时，在采集到视频数据后进一步地采取同步视频数据和音频数据的措施，这样，可以防止在视频通话的过程中声音相对图像滞后，实现视频通话中图像和声音同步，提高了视频通话的质量。

参考图2，图2为本发明的音视频数据采集方法第二实施例的流程图。本实施例与上述第一实施例相似，不同之处在于：

所述响应所述第一指令采集视频数据的步骤（即，步骤103）为：

响应所述第一指令，根据第一时钟信号采集视频数据，即，在采集视频数据的过程中根据该第一时钟信号记录相应的时间。

所述音频数据是根据第二时钟信号生成的，即，在采集音频数据的过程中根据该第二时钟记录相应的时间。在接收该音频数据的步骤（即，步骤104）中，可以一并接收该第二时钟信号。

在本实施例中，由于所述视频数据和音频数据分别是根据第一时钟信号和第二时钟信号来采集的，因此有利于使得音频数据和视频数据实现精确的同步。

参考图3，图3为本发明的音视频数据采集方法第三实施例的流程图。本实施例与上述第一或第二实施例相似，不同之处在于：

所述第一时钟信号与所述第二时钟信号同步。

所述根据所述预定时间对所述视频数据和所述音频数据进行同步处理的步骤（即，步骤105）为：

以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

在本实施例中，由于在第一时钟信号与第二时钟信号同步的情况下根据该预定时间对视频数据和音频数据进行同步处理，有利于保证视频通话中的图像和声音同步，提高视频通话的质量。

参考图4，图4为本发明的音视频数据采集方法第四实施例的流程图。本实施例与上述第一或第二实施例相似，不同之处在于：

所述第一时钟信号与所述第二时钟信号不同步。

所述根据所述预定时间对所述视频数据和所述音频数据进行同步处理的步骤（即，步骤105）包括：

步骤1051，计算所述第一时钟信号与所述第二时钟信号的差值（时间差）。

步骤1052，以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间和所述差值对所述视频数据和所述音频数据进行同步处理。

在本实施例中，由于在第一时钟信号与第二时钟信号同步的情况下根据该预定时间以及第一时钟信号与第二时钟信号的时间差对视频数据和音频数据进行同步处理，有利于保证视频通话中的图像和声音同步，提高视频通话的质量。

参考图5，图5为本发明的音视频数据采集方法第五实施例的流程图。本实施例与上述第一、第二、第三、第四实施例中的任意一个实施例相似，不同之处在于：

在记录第一参考时间的步骤（即，步骤101）之前，所述方法还包括以下步骤：

步骤501，计算所述预定时间。

在本实施例中，通过计算该预定时间，即，该预定时间是根据实际情况（当前数字电视接收机与遥控器的相对位置），可以使得视频通话中的声音和图像同步，提高了视频通话的质量。

参考图6，图6为本发明的音视频数据采集方法第六实施例的流程图。本实施例与上述第一、第二、第三、第四、第五实施例中的任意一个实施例相似，不同之处在于：

所述计算所述预定时间的步骤（即，步骤501）包括：

步骤5011，发送测试信息并接收与所述测试信息对应的反馈信息。

步骤5012，根据自发送所述测试信息至接收到所述反馈信息的延时计算所述预定时间，所述预定时间的取值为所述延时的二分之一。

在本实施例中，通过发送测试信息并接收与所述测试信息对应的反馈信息，并根据该测试信息的发送时间以及该反馈信息的接收时间计算该预定时间，因此可以根据实际情况（数字电视接收机与遥控器的相对位置）计算出该预定时间，从而使得视频通话中的声音和图像同步，提高了视频通话的质量。

参考图7，图7为本发明的音视频数据采集方法第七实施例的流程图。本实施例与上述第一、第二、第三、第四、第五、第六实施例中的任意一个实施例相似，不同之处在于：

所述发送测试信息并接收与所述测试信息对应的反馈信息的步骤（即，步骤5011）为：

发送至少两组测试信息并接收与每一组所述测试信息对应的反馈信息。

所述根据自发送所述测试信息至接收到所述反馈信息的延时计算所述预定时间的步骤（即，步骤5012）为：

根据自发送每一组所述测试信息至接收到每一组所述反馈信息的延时的平均值计算所述预定时间。

在本实施例中，通过多次采集预定时间，可以计算得出更加精确的预定时间，有利于使得视频通话中的声音和图像实现精确地同步，提高视频通话的质量。

在上述第一至第七实施例中，作为一种改进，可以实时地监控是否需要采集视频数据并生成监控结果，若是，则生成该第一指令和第二指令，并进入步骤101，否则，继续监控。由于在视频通话的过程中遥控器或其它移动终端持于用户的手中，因此可以在一定的范围内移动，为此作为另一种改进，在视频通话的过程中实时地计算该预定时间，并动态地对视频数据和音频数据进行同步处理，这样，有利于在手持遥控器或其它移动终端的用户变换所处的位置时，视频通话的图像和声音仍然保持同步。

参考图8，图8为本发明的音视频数据采集装置第一实施例的框图。

本实施例的音视频数据采集装置包括参考时间记录模块801、发送模块802、视频数据采集模块803、接收模块804和同步模块805。

所述参考时间记录模块801用于在接收到与采集视频数据对应的第一指令时记录第一参考时间。

所述发送模块802用于发送与采集音频数据对应的第二指令。

所述视频数据采集模块803用于自所述第一参考时间开始至预定时间到达时响应所述第一指令采集视频数据。

所述接收模块804用于接收与所述第二指令对应的音频数据。

所述同步模块805用于根据所述预定时间对所述视频数据和所述音频数据进行同步处理。具体地，所述同步模块805可以用于在将音频数据和视频数据整合（多路复用）成视频通话信号的过程中，将视频数据延迟预定时间，这样，便可以实现视频通话中的声音和图像同步。

在本实施例中，由于在进行视频数据采集之前即采取同步视频数据和音频数据的措施，同时，在采集到视频数据后进一步地采取同步视频数据和音频数据的措施，这样，可以防止在视频通话的过程中声音相对图像滞后，实现视频通话中图像和声音同步。

本发明的音视频数据采集装置的第二实施例与上述第一实施例相似，不同之处在于：

所述视频数据采集模块803还用于响应所述第一指令，根据第一时钟信号采集视频数据，即，所述视频数据采集模块803还用于在采集视频数据的过程中根据该第一时钟信号记录相应的时间。

所述音频数据是根据第二时钟信号生成的，即，在采集音频数据的过程中根据该第二时钟记录相应的时间。所述视频数据采集模块803还可以用于一并接收该第二时钟信号。

在本实施例中，由于所述视频数据和音频数据分别是根据第一时钟信号和第二时钟信号来采集的，因此有利于使得音频数据和视频数据实现精确的同步。

本发明的音视频数据采集装置的第三实施例与上述第一或第二实施例相似，不同之处在于：

所述第一时钟信号与所述第二时钟信号同步。

所述同步模块805还用于以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

在本实施例中，由于在第一时钟信号与第二时钟信号同步的情况下根据该预定时间对视频数据和音频数据进行同步处理，有利于保证视频通话中的图像和声音同步，提高视频通话的质量。

本发明的音视频数据采集装置的第四实施例与上述第一或第二实施例相似，不同之处在于：

所述第一时钟信号与所述第二时钟信号不同步。

所述同步模块805还用于计算所述第一时钟信号与所述第二时钟信号的差值（时间差），以及用于以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间和所述差值对所述视频数据和所述音频数据进行同步处理。

在本实施例中，由于在第一时钟信号与第二时钟信号同步的情况下根据该预定时间以及第一时钟信号与第二时钟信号的时间差对视频数据和音频数据进行同步处理，有利于保证视频通话中的图像和声音同步，提高视频通话的质量。

参考图9，图9为本发明的音视频数据采集装置第五实施例的框图。本实施例与上述第一、第二、第三、第四实施例中的任意一个实施例相似，不同之处在于：

本实施例的音视频数据采集装置还包括预定时间计算模块901。

所述预定时间计算模块901用于计算所述预定时间。

在本实施例中，通过计算该预定时间，即，该预定时间是根据实际情况（当前数字电视接收机与遥控器的相对位置），可以使得视频通话中的声音和图像同步，提高了视频通话的质量。

本发明的音视频数据采集装置的第六实施例与上述第一、第二、第三、第四、第五实施例中的任意一个实施例相似，不同之处在于：

所述发送模块802还用于发送测试信息。

所述接收模块804还用于接收与所述测试信息对应的反馈信息。

所述预定时间计算模块901还用于根据自发送所述测试信息至接收到所述反馈信息的延时计算所述预定时间，所述预定时间的取值为所述延时的二分之一。

在本实施例中，通过发送测试信息并接收与所述测试信息对应的反馈信息，并根据该测试信息的发送时间以及该反馈信息的接收时间计算该预定时间，因此可以根据实际情况（数字电视接收机与遥控器的相对位置）计算出该预定时间，从而使得视频通话中的声音和图像同步，提高了视频通话的质量。

本发明的音视频数据采集装置的第七实施例与上述第一、第二、第三、第四、第五、第六实施例中的任意一个实施例相似，不同之处在于：

所述发送模块802还用于发送至少两组测试信息。

所述接收模块804还用于接收与每一组所述测试信息对应的反馈信息。

所述预定时间计算模块901还用于根据自发送每一组所述测试信息至接收到每一组所述反馈信息的延时的平均值计算所述预定时间。

在本实施例中，通过多次采集预定时间，可以计算得出更加精确的预定时间，有利于使得视频通话中的声音和图像实现精确地同步，提高视频通话的质量。

在上述第一至第七实施例中，作为一种改进，本发明的音视频数据采集装置还可以包括监控模块（图中未示出），该监控模块可以用于实时地监控是否需要采集视频数据并生成监控结果，若是，则生成该第一指令和第二指令，否则，继续监控。由于在视频通话的过程中遥控器或其它移动终端持于用户的手中，因此可以在一定的范围内移动，为此作为另一种改进，在视频通话的过程中实时地计算该预定时间，并动态地对视频数据和音频数据进行同步处理，这样，有利于在手持遥控器或其它移动终端的用户变换所处的位置时，视频通话的图像和声音仍然保持同步。

综上所述，虽然本发明已以优选实施例揭露如上，但上述优选实施例并非用以限制本发明，本领域的普通技术人员，在不脱离本发明的精神和范围内，均可作各种更动与润饰，因此本发明的保护范围以权利要求界定的范围为准。

Claims (12)

1.一种音视频数据采集方法，其特征在于，所述方法包括以下步骤：

发送测试信息并接收与所述测试信息对应的反馈信息；

根据自发送所述测试信息至接收到所述反馈信息的延时计算预定时间；

在接收到与采集视频数据对应的第一指令时记录第一参考时间；

自所述第一参考时间开始至所述预定时间到达时响应所述第一指令采集视频数据；

发送与采集音频数据对应的第二指令；

接收与所述第二指令对应的音频数据；

根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

2.根据权利要求1所述的音视频数据采集方法，其特征在于，所述响应所述第一指令采集视频数据的步骤为：

响应所述第一指令，根据第一时钟信号采集视频数据；

所述音频数据是根据第二时钟信号生成的。

3.根据权利要求2所述的音视频数据采集方法，其特征在于，所述第一时钟信号与所述第二时钟信号同步；

所述根据所述预定时间对所述视频数据和所述音频数据进行同步处理的步骤为：

以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

4.根据权利要求2所述的音视频数据采集方法，其特征在于，所述第一时钟信号与所述第二时钟信号不同步；

所述根据所述预定时间对所述视频数据和所述音频数据进行同步处理的步骤包括：

计算所述第一时钟信号与所述第二时钟信号的差值；

以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间和所述差值对所述视频数据和所述音频数据进行同步处理。

5.根据权利要求1所述的音视频数据采集方法，其特征在于，所述预定时间的取值为所述延时的二分之一。

6.根据权利要求5所述的音视频数据采集方法，其特征在于，所述发送测试信息并接收与所述测试信息对应的反馈信息的步骤为：

发送至少两组测试信息并接收与每一组所述测试信息对应的反馈信息；

所述根据自发送所述测试信息至接收到所述反馈信息的延时计算所述预定时间的步骤为：

根据自发送每一组所述测试信息至接收到每一组所述反馈信息的延时的平均值计算所述预定时间。

7.一种音视频数据采集装置，其特征在于，所述装置包括：

预定时间计算模块，用于根据自发送测试信息至接收到反馈信息的延时计算预定时间；

参考时间记录模块，用于在接收到与采集视频数据对应的第一指令时记录第一参考时间；

视频数据采集模块，用于自所述第一参考时间开始至所述预定时间到达时响应所述第一指令采集视频数据；

发送模块，用于发送与采集音频数据对应的第二指令；

接收模块，用于接收与所述第二指令对应的音频数据，以及接收与所述测试信息对应的反馈信息；

同步模块，用于根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

8.根据权利要求7所述的音视频数据采集装置，其特征在于，所述视频数据采集模块还用于响应所述第一指令，根据第一时钟信号采集视频数据；

所述音频数据是根据第二时钟信号生成的。

9.根据权利要求8所述的音视频数据采集装置，其特征在于，所述第一时钟信号与所述第二时钟信号同步；

所述同步模块还用于以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间对所述视频数据和所述音频数据进行同步处理。

10.根据权利要求8所述的音视频数据采集装置，其特征在于，所述第一时钟信号与所述第二时钟信号不同步；

所述同步模块还用于计算所述第一时钟信号与所述第二时钟信号的差值，以及用于以所述第一时钟信号或第二时钟信号为参考，根据所述预定时间和所述差值对所述视频数据和所述音频数据进行同步处理。

11.根据权利要求7所述的音视频数据采集装置，其特征在于，所述预定时间的取值为所述延时的二分之一。

12.根据权利要求11所述的音视频数据采集装置，其特征在于，所述发送模块还用于发送至少两组测试信息；

所述接收模块还用于接收与每一组所述测试信息对应的反馈信息；

所述预定时间计算模块还用于根据自发送每一组所述测试信息至接收到每一组所述反馈信息的延时的平均值计算所述预定时间。