CN101990082B - 一种实现可视电话的方法及装置 - Google Patents

Abstract

本发明提供了一种实现可视电话的方法及装置，其中，所述方法包括下述步骤：发送端判断要发送的数据帧是否为背景噪声帧，若为背景噪声帧时，则进一步判断当前是否已产生预先规定的标志帧；当当前已产生所述标志帧，则发送所述标志帧给对端。本发明提供的实现可视电话的方法及装置，通过在可视电话业务过程中，根据发送端是否处于静默模式，动态地将发送端处于静默模式时发送背景噪声帧的资源用于发送图像数据及标志帧，接收端模拟得到发送端的背景噪声帧，以此达到扩展可视电话业务中图像数据传输带宽的目的，有效地解决了可视电话业务中图像的马赛克现象，同时实现简单、适用性强。

Description

一种实现可视电话的方法及装置

技术领域

本发明涉及移动通信技术领域，尤其涉及一种实现可视电话的方法及装置。

背景技术

目前，移动通信迎来了第三代移动通信技术(3rd-generation，3G)时代，与第二代移动通信技术(second generation，2G)时代相比，3G的真正应用是带宽下提供的实时性业务。如：可视电话、多媒体实时游戏、远程无线监控等，其中，可视电话是3G应用最广泛的业务之一。

在3GPP的协议中，可视电话的视频编码可以采用H.261、H.263、H.264、MPEG-4中的一种；音频编码采用自适应多速率(Adaptive Multi-Rate，AMR)、高级音频编码(Advanced Audio Coding，AAC)、高通码激励线性预测(QualcommCode Excited Linear Predictive，QCELP)、增强型变速率编解码(EnhancedVariable Rate Codec，EVRC)等。因为受限于网络条件，可视电话通常要在占用信道带宽尽量小的同时，保证压缩后图像和语音的质量。

目前，可视电话存在的主要问题为图像不够清晰流畅，主要表现在移动终端在移动或者场景内物体发生移动后，可视电话画面内容会出现不同程度的马赛克现象，特别是在高速移动下的场景，图像的马塞克更为严重。而针对上述可视电话图像的问题，目前的采用的解决方案有：

1、改进视频编解码算法的性能，从MPG-4到H.264，视频编解码的性能虽然得到较大提升，但对于网络设备给定的前提下，通过改进视频编解码算法的性能提升可视电话画面的流畅性作用有限，而且视频编解码算法多以标准的形式进行使用，因此实现起来较为复杂。

2、提高网络流媒体的传输性能，对于移动终端来说，用于可视电话的带宽是限定的，因此通过增加图像传输带宽来提升视频质量，是不太容易实现的。

3、提升编码前图像的质量，通过提高图像输出设备的性能，使得原始输出图像的边界模糊现象得以改善，从而使得视频编码的复杂度降低，提高效率。这种改善方式的局限性表现为适应性不广泛，对于不同性能的图像输出设备，改善的性能会有较大的差异。

发明内容

有鉴于此，本发明的主要目的在于提供一种实现可视电话的方法及装置，能够改善可视电话中图像的马赛克现象。

为达到上述目的，本发明的技术方案是这样实现的：

一种实现可视电话的方法，所述方法包括：发送端判断要发送的数据帧是否为背景噪声帧；若为背景噪声帧时，则进一步判断当前是否已产生预先规定的标志帧，若已产生所述标志帧，则发送所述标志帧给对端。

进一步地，所述方法还包括：若当前没有产生标志帧，则将所述背景噪声帧发送给对端，同时产生标志帧。

进一步地，所述发送所述标志帧给对端之后，该方法还包括：接收端判断接收到的数据帧是否为标志帧，若为标志帧时，则根据已接收到的背景噪声帧模拟发送端的背景噪声帧。

进一步地，所述方法还包括：当接收到的数据帧为图像数据帧时，判断是否满足匹配条件，若满足，则将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧。

进一步地，所述判断是否满足匹配条件为：当接收到的数据帧为图像数据帧时，将预先设置的变量的值置为true；判断所述变量的值是否为true，若是，则为满足匹配条件；

相应地，所述将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧之后，该方法还包括：将变量的值置为false。

进一步地，所述标志帧包括：帧类型位、帧质量指示位、模式指示位、模式请求位、数据校验位和标志帧内容部分；其中，所述帧类型位的长度为4bit，值为12、13或14中的一种；所述帧质量指示位的长度为1 bit，值为1；所述模式指示位和所述模式请求位的长度均为3bit，值为12；所述数据校验位的长度为8bit；所述标志帧内容部分定义为“Noise_flag”。

一种实现可视电话的装置，所述装置还包括：帧类型判断模块、标志帧控制模块；其中，

帧类型判断模块，用于判断要发送的数据帧是否为背景噪声帧，若为背景噪声帧时，则发送触发信息给标志帧控制模块；

标志帧控制模块，用于接收到所述帧类型判断模块发送的触发信息后，判断当前是否已产生预先设定的标志帧，若是，则发送所述标志帧给对端。

进一步地，所述装置还包括背景噪声控制模块；其中，标志帧控制模块还用于当当前没有产生标志帧时，则发送触发信息给背景噪声控制模块，同时产生标志帧；背景噪声控制模块，用于接收到所述标志帧控制模块的触发信息后，将所述背景噪声帧发送给对端。

进一步地，所述装置还包括：背景噪声模拟模块；其中，帧类型判断模块还用于判断接收到的数据帧是否为标志帧，若是，则发送触发信息给背景噪声模拟模块；背景噪声模拟模块，用于接收到所述帧类型判断模块的触发信息后，根据已接收到的背景噪声帧模拟发送端的背景噪声帧。

进一步地，所述装置还包括背景噪声与图像匹配模块；其中，帧类型判断模块还用于根据接收到图像数据帧时所产生的通知，产生并发送图像数据帧触发信息；背景噪声与图像匹配模块，用于当接收到帧类型判断模块发送的图像数据帧触发信息时，判断当前是否满足匹配条件，若满足，则将所述背景噪声模拟模块得到的背景噪声帧作为图像数据帧对应的背景噪声帧。

进一步地，所述背景噪声与图像匹配模块具体用于接收到图像数据帧触发信息时，将预先设置的变量的值置为true；然后判断所述变量的值是否为true，若是，则为满足匹配条件；并在将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧后，将变量的值置为false。

本发明提供的实现可视电话的方法及装置，通过在可视电话业务过程中，根据发送端是否处于静默模式，动态地将发送端处于静默模式时发送背景噪声帧的资源用于发送图像数据及标志帧，接收端模拟得到发送端的背景噪声帧，以此达到扩展可视电话业务中图像数据传输带宽的目的，有效地解决了可视电话业务中图像的马赛克现象，同时实现简单、适用性强。

附图说明

图1为本发明的实现可视电话的方法的流程示意图；

图2为本发明的实现可视电话的方法中的标志帧的结构示意图；

图3为本发明的实现可视电话的方法的接收实施例的流程示意图；

图4为本发明的实现可视电话的装置的组成结构示意图；

图5为图4所示装置内置于移动终端中进行可视电话业务的组成结构示意图。

具体实施方式

本发明的基本思想为：发送端判断要发送的数据帧是否为背景噪声帧，若为背景噪声帧时，则进一步判断当前是否已产生预先规定的标志帧；当当前已产生所述标志帧，则发送所述标志帧给对端。

为使本发明的目的、技术方案和优点更加清楚明白，以下举实施例并参照附图，对本发明进一步详细说明。

图1示出了本发明的实现可视电话的方法的流程，如图1所示，所述方法包括下述步骤：

步骤101，发送端判断音频处理模块要发送的音频数据帧是否为背景噪声帧，若否，则执行步骤1Q2，若是，则执行步骤103；

本步骤中，具体可以通过判断音频数据帧中的帧类型位进行音频数据帧类型的判断，按照3GPP规定，当帧类型位为8时，则该音频数据帧为背景噪声帧，此时发送端的可视电话所处的模式为静默模式。

步骤102，当音频处理模块要发送的音频数据帧为正常的语音数据帧时，按照正常的语音数据帧发送流程进行发送，例如：通过无线信道直接进行发送等；

步骤103，进一步判断此时是否已经产生预先规定的标志帧，若否，则执行步骤104，若是，则执行步骤105；

本步骤中，所述标志帧的结构可以参考图2，标志帧的结构为：

1、帧类型位(Frame Type)：占用4比特的长度，按照3GPP的规定，音频数据帧12～14为预留帧，因此可以定义标志帧的帧类型位为12、13、14中的一种，本发明实施例中，定义该标志帧的帧类型位为12。

2、帧质量指示位(Frame Quality Indicator)：占用1比特的长度，本发明实施例中定义其为1，按照3GPP的规定，即为Good frame。

3、模式指示位(Mode Indication)：占用3比特的长度，为区别已有的定义，该模式指示位定义为12。

4、模式请求位(Mode Request)：占用3比特的长度，为区别已有的定义，该模式请求位定义为12。

5、数据校验位(Codec CRC)：占用8比特的长度。

6、标志帧内容部分(Frame content)：定义该帧内容为“Noise_flag”，对应为相应的二进制。

步骤104，发送当前的背景噪声帧给对端，并产生标志帧，当前处理流程结束；

步骤105，发送已产生的标志帧给对端，当前处理流程结束。

图3示出了本发明实现可视电话的方法的接收实施例的流程，如图3所示，所述接收实施例包括：

步骤201，接收端判断接收到的数据帧是否为标志帧，若否，则执行步骤202，若是，则执行步骤203；

本步骤中，通过判断预先规定的标志帧的帧类型为是否为12，若是，则接收到的数据帧为标志帧，若不是，则接收到的数据帧不是标志帧。

步骤202，按照正常的数据帧处理流程对接收到的数据帧进行处理，当前处理流程结束。

步骤203，根据之前接收到的背景噪声帧，模拟发送端的背景噪声帧；

步骤204，是否接收到图像数据帧，若是，则产生通知以执行步骤205，否则，执行步骤202；

步骤205步骤207，判断是否满足匹配条件，若满足，则将上述模拟的背景噪声帧作为接收到的图像数据帧对应的背景噪声帧；

具体地，步骤205为当接收到图像数据帧时，将变量flag的值置为true，flag为预先设置的变量；步骤206为判断变量flag的值是否为true，若是，即满足匹配条件，则执行步骤207，否则当前处理流程结束；步骤207为将步骤203中模拟得到的背景噪声帧作为步骤204中接收到的图像数据帧对应的背景噪声帧。

步骤208，将变量flag的值置为false，返回步骤201。

图4示出了本发明实现可视电话的装置的组成结构，如图4所示，所述装置包括：帧类型判断模块10以及标志帧控制模块20；其中，帧类型判断模块10用于判断要发送的数据帧是否为背景噪声帧，若为背景噪声帧时，则发送触发信息给标志帧控制模块20；标志帧控制模块20用于接收到所述帧类型判断模块10发送的触发信息后，判断当前是否已产生预先设定的标志帧，若是，则发送所述标志帧给对端。

进一步地，所述装置还包括背景噪声控制模块30；其中，标志帧控制模块20还用于当当前没有产生标志帧时，则发送触发信息给背景噪声控制模块30，同时产生标志帧；背景噪声控制模块30用于接收到所述标志帧控制模块20的触发信息后，将所述背景噪声帧发送给对端。

进一步地，所述装置还包括背景噪声模拟模块40；其中，帧类型判断模块10还用于判断接收到的数据帧是否为标志帧，若是，则发送触发信息给背景噪声模拟模块40；背景噪声模拟模块40用于接收到所述帧类型判断模块10的触发信息后，根据接收到的背景噪声帧模拟发送端的背景噪声帧。

进一步地，所述装置还包括背景噪声与图像匹配模块50；其中，帧类型判断模块10还用于根据接收到图像数据帧时所产生的通知，产生并发送图像数据帧触发信息；背景噪声与图像匹配模块50，用于当接收到帧类型判断模块10发送的图像数据帧触发信息时，判断当前是否满足匹配条件，若满足，则将所述背景噪声模拟模块40得到的背景噪声帧作为图像数据帧对应的背景噪声帧。

进一步地，所述背景噪声与图像匹配模块50具体用于接收到图像数据帧触发信息时，将预先设置的变量的值置为true，然后判断预先设置的变量的值是否为true，若是，则为满足匹配条件；并在将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧后，将所述变量的值置为fa1se。

下面结合图5，通过一具体的实施例，对上述装置的工作过程进行进一步地详细说明。

图5示出了将上述装置内置于移动终端中进行可视电话业务的组成结构示意，参考图5，移动终端一为可视电话业务的发送端；移动终端二为可视电话业务的接收端；其中音频处理模块、视频编码模块、实时传输协议/实时传输控制协议功能模块(RTP/RTCP功能模块)为移动终端现有的功能模块。

发送过程：

移动终端一启动发送流程：视频编码模块104完成图像压缩编码、运动补偿算法处理后，将处理后的图像数据帧发送给RTP/RTCP功能模块103处理；

音频处理模块101完成将声音信号转换为音频数据帧，并检测移动终端一是否处于静默模式，若是，则发送背景噪声帧给实现可视电话的装置102，若否，则发送正常的音频数据帧给RTP/RTCP功能模块103处理；

实现可视电话的装置102对接收到的数据帧进行判断，当接收到的为背景噪声帧时，进一步判断是否已产生预先规定的标志帧，若没有，则发送背景噪声帧给移动终端二，同时产生标志帧；若已产生标志帧，则发送标志帧给移动终端二；位于发送端的实现可视电话的装置102包括帧类型判断模块、标志帧控制模块和背景噪声控制模块；

RTP/RTCP功能模块103负责将接收到的数据帧打包处理，并发送给移动终端二。

接收过程：

移动终端二启动接收流程：RTP/RTCP功能模块203负责将接收到的数据包拆包，若为图像数据帧，则将图像数据帧发送给视频编码模块204并通知实现可视电话的装置202；若为音频数据帧，则将音频数据帧发送给实现可视电话的装置202；

视频编码模块204完成对图像数据帧的解码处理，并将图像转换成可显示的图像格式；

实现可视电话的装置202对接收到的音频数据帧进行判断，当其为正常的音频数据帧或背景噪声帧时，将正常的音频数据帧或背景噪声帧发送给音频处理模块201进行处理；当其为标志帧时，则根据已接收到的背景噪声帧模拟移动终端一的背景噪声帧，并在接收到RTP/RTCP功能模块203的通知时，产生图像数据帧触发信息，触发判断是否满足背景噪声与图像的匹配条件，若满足，则将模拟的背景噪声帧发送给音频处理模块201，具体地，可以通过预先设置的变量，如flag，当接收到RTP/RTCP功能模块203的通知时，实现可视电话的装置202将flag的值置为true；然后判断变量flag的值是否为true，若是，即满足匹配条件；在将模拟的背景噪声帧发送给音频处理模块201后，将flag变量的值置为false；位于接收端的实现可视电话的装置202包括帧类型判断模块、背景噪声模拟模块和背景噪声与图像匹配模块；

音频处理模块201，将接收到的背景噪声帧和正常的音频数据帧进行声音信号的转换。

应当理解，上述实施例中移动终端二同样也可以向移动终端一发起可视电话业务的呼叫，其具体过程与上述相同，在此不再赘述。

以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。

Claims (7)

1.一种实现可视电话的方法，其特征在于，所述方法包括：

发送端通过数据帧中的帧类型位判断要发送的数据帧是否为背景噪声帧；

若为背景噪声帧时，则进一步判断当前是否已产生预先规定的标志帧，若已产生所述标志帧，则发送所述标志帧给对端；

接收端判断接收到的数据帧是否为标志帧，若为标志帧时，则根据已接收到的背景噪声帧模拟发送端的背景噪声帧；

当接收到的数据帧为图像数据帧时，判断是否满足背景噪声与图像的匹配条件，若满足，则将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧。

2.根据权利要求1所述的方法，其特征在于，所述方法还包括：若当前没有产生标志帧，则将所述背景噪声帧发送给对端，同时产生标志帧。

3.根据权利要求1所述的方法，其特征在于，所述判断是否满足匹配条件为：

当接收到的数据帧为图像数据帧时，将预先设置的变量的值置为true；

判断所述变量的值是否为true，若是，则为满足匹配条件；

相应地，所述将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧之后，该方法还包括：将变量的值置为false。

4.根据权利要求1至3任一项所述的方法，其特征在于，所述标志帧包括：帧类型位、帧质量指示位、模式指示位、模式请求位、数据校验位和标志帧内容部分；

其中，所述帧类型位的长度为4bit，值为12、13或14中的一种；所述帧质量指示位的长度为1bit，值为1；所述模式指示位和所述模式请求位的长度均为3bit，值为12；所述数据校验位的长度为8bit；所述标志帧内容部分定义为“Noise_flag”。

5.一种实现可视电话的装置，其特征在于，所述装置还包括：帧类型判断模块、标志帧控制模块、背景噪声模拟模块和背景噪声与图像匹配模块；其中，

帧类型判断模块，用于通过数据帧中的帧类型位判断要发送的数据帧是否为背景噪声帧，若为背景噪声帧时，则发送触发信息给标志帧控制模块；并用于判断接收到的数据帧是否为标志帧，若是，则发送触发信息给背景噪声模拟模块；还用于根据接收到图像数据帧时所产生的通知，产生并发送图像数据帧触发信息；

标志帧控制模块，用于接收到所述帧类型判断模块发送的触发信息后，判断当前是否已产生预先设定的标志帧，若是，则发送所述标志帧给对端；

背景噪声模拟模块，用于接收到所述帧类型判断模块的触发信息后，根据已接收到的背景噪声帧模拟发送端的背景噪声帧；

背景噪声与图像匹配模块，用于当接收到帧类型判断模块发送的图像数据帧触发信息时，判断当前是否满足背景噪声与图像的匹配条件，若满足，则将所述背景噪声模拟模块得到的背景噪声帧作为图像数据帧对应的背景噪声帧。

6.根据权利要求5所述的装置，其特征在于，所述装置还包括背景噪声控制模块；其中，

标志帧控制模块还用于当当前没有产生标志帧时，则发送触发信息给背景噪声控制模块，同时产生标志帧；

背景噪声控制模块，用于接收到所述标志帧控制模块的触发信息后，将所述背景噪声帧发送给对端。

7.根据权利要求5所述的装置，其特征在于，所述背景噪声与图像匹配模块具体用于接收到图像数据帧触发信息时，将预先设置的变量的值置为true；然后判断所述变量的值是否为true，若是，则为满足匹配条件；并在将所述模拟的背景噪声帧作为所述图像数据帧对应的背景噪声帧后，将变量的值置为false。