CN111131210B - 数据处理方法及电子设备 - Google Patents

数据处理方法及电子设备 Download PDF

Info

Publication number
CN111131210B
CN111131210B CN201911295261.XA CN201911295261A CN111131210B CN 111131210 B CN111131210 B CN 111131210B CN 201911295261 A CN201911295261 A CN 201911295261A CN 111131210 B CN111131210 B CN 111131210B
Authority
CN
China
Prior art keywords
multimedia data
video call
electronic device
data packet
packet
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911295261.XA
Other languages
English (en)
Other versions
CN111131210A (zh
Inventor
付磊磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201911295261.XA priority Critical patent/CN111131210B/zh
Publication of CN111131210A publication Critical patent/CN111131210A/zh
Priority to PCT/CN2020/135206 priority patent/WO2021121119A1/zh
Priority to KR1020227021699A priority patent/KR20220107013A/ko
Priority to EP20904140.9A priority patent/EP4060956A4/en
Application granted granted Critical
Publication of CN111131210B publication Critical patent/CN111131210B/zh
Priority to US17/839,458 priority patent/US11843652B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/762Media network packet handling at the source 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/80Responding to QoS
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L43/00Arrangements for monitoring or testing data switching networks
    • H04L43/08Monitoring or testing based on specific metrics, e.g. QoS, energy consumption or environmental parameters
    • H04L43/0823Errors, e.g. transmission errors
    • H04L43/0829Packet loss
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60Network streaming of media packets
    • H04L65/75Media network packet handling
    • H04L65/765Media network packet handling intermediate
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/142Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
    • H04N2007/145Handheld terminals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • H04N7/147Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Environmental & Geological Engineering (AREA)
  • Telephonic Communication Services (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明实施例提供一种数据处理方法及电子设备,应用于通信技术领域,以解决电子设备在视频通话过程中所存在的持续花屏的问题。该方法包括:在第一电子设备进行视频通话的情况下,获取预定时间段内该视频通话的多媒体数据包的丢包量;若上述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包。其中,上述目标多媒体数据包为:上述第一电子设备中缓存的上述视频通话对应的所有多媒体数据包。本发明实施例应用于视频通话场景中。

Description

数据处理方法及电子设备
技术领域
本发明实施例涉及通信技术领域,尤其涉及一种数据处理方法及电子设备。
背景技术
随着电子技术的发展,电子设备在用户日常生活中占有越来越重要的地位,用户在各种场景中会应用到电子设备的视频通话功能,使得用户可以通过电子设备与其他用户视频通话。
在传统技术中,电子设备开启视频通话功能后,在向后台服务器发送该视频通话的多媒体数据包时,会在预定时间内检测该多媒体数据包是否已向后台服务器发起传输。
然而,由于电子设备在视频通话过程中会持续向后台服务器发送大量的多媒体数据包,因此,为了保证后续数据的正常传输,若电子设备检测到任一多媒体数据包在预定时间未发起传输,则电子设备会丢弃该多媒体数据包,以防止电子设备出现数据过度延时和排队现象。
如此,很有可能导致对端电子设备无法解析该多媒体数据包,从而造成对端电子设备持续产生花屏现象。
发明内容
本发明实施例提供一种数据处理方法及电子设备,以解决电子设备在视频通话过程中所存在的持续花屏的问题。
为了解决上述技术问题,本发明实施例是这样实现的:
第一方面,本发明实施例提供一种数据处理方法,该方法包括:
在第一电子设备进行视频通话的情况下,获取预定时间段内该视频通话的多媒体数据包的丢包量;
若上述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包;
其中,上述目标多媒体数据包为:上述第一电子设备中缓存的上述视频通话对应的所有多媒体数据包。
第二方面,本发明实施例还提供了一种电子设备,该电子设备包括:
获取模块,用于在第一电子设备进行视频通话的情况下,获取预定时间段内该视频通话的多媒体数据包的丢包量;
执行模块,用于若上述获取模块获取的上述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包;
其中,上述目标多媒体数据包为:第一电子设备中缓存的上述视频通话对应的所有多媒体数据包。
第三方面,本发明实施例提供了一种电子设备,包括处理器、存储器及存储在该存储器上并可在该处理器上运行的计算机程序,该计算机程序被该处理器执行时实现如第一方面所述的数据处理方法的步骤。
第四方面,本发明实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储计算机程序,该计算机程序被处理器执行时实现如第一方面所述的数据处理方法的步骤。
在本发明实施例中,在第一电子设备进行视频通话的情况下,当预定时间段内该视频通话的多媒体数据包的丢包量过多时,为了避免与第一电子设备进行视频通话的第二电子设备持续花屏,第一电子设备可以通过清除第一电子设备中缓存的上述视频通话对应的所有多媒体数据包,使得第一电子设备中的数据不会出现过度延时和排队现象,以使后续第一电子设备可以向服务器发送上述视频通话当前产生的多媒体数据包,而服务器也可以将该视频通话当前产生的多媒体数据包转发给第二电子设备,从而使得第二电子设备在接收到新的多媒体数据包后刷新显示新的画面,进而可以避免第二电子设备持续花屏的问题。
附图说明
图1为本发明实施例提供的一种可能的安卓操作***的架构示意图;
图2为本发明实施例提供的一种数据处理方法流程示意图;
图3为本发明实施例提供的一种电子设备的结构示意图之一;
图4为本发明实施例提供的一种电子设备的结构示意图之二。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明实施例保护的范围。
需要说明的是,本文中的“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。
需要说明的是,本文中的“多个”是指两个或多于两个。
需要说明的是,本发明实施例中,“示例性的”或者“例如”等词用于表示作例子、例证或说明。本发明实施例中被描述为“示例性的”或者“例如”的任何实施例或设计方案不应被解释为比其它实施例或设计方案更优选或更具优势。确切而言,使用“示例性的”或者“例如”等词旨在以具体方式呈现相关概念。
需要说明的是,为了便于清楚描述本发明实施例的技术方案,在本发明实施例中,采用了“第一”、“第二”等字样对功能或作用基本相同的相同项或相似项进行区分,本领域技术人员可以理解“第一”、“第二”等字样并不对数量和执行次序进行限定。例如,第一电子设备和第二电子设备是用于区别不同的电子设备,而不是用于描述电子设备的特定顺序。
I帧又称帧内编码帧,是一种自带全部信息的独立帧,无需参考其他图像便可独立进行解码,可以简单理解为一张静态画面。视频序列中的第一个帧始终都是I帧,因为它是关键帧。
P帧又称帧间预测编码帧,需要参考前面的I帧才能进行编码。表示的是当前帧画面与前一帧(前一帧可能是I帧也可能是P帧)的差别。解码时需要用之前缓存的画面叠加上本帧定义的差别,生成最终画面。与I帧相比,P帧通常占用更少的数据位,但不足的是,由于P帧对前面的P帧和I帧有着复杂的依赖性,因此对传输错误非常敏感。
本发明实施例提供的数据处理方法的执行主体可以为上述的电子设备(包括移动电子设备和非移动电子设备),也可以为该电子设备中能够实现该数据处理方法的功能模块和/或功能实体,具体的可以根据实际使用需求确定,本发明实施例不作限定。下面以电子设备为例,对本发明实施例提供的数据处理方法进行示例性的说明。
本发明实施例中的电子设备可以为移动电子设备,也可以为非移动电子设备。移动电子设备可以为手机、平板电脑、笔记本电脑、掌上电脑、车载终端设备、可穿戴设备、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本或者个人数字助理(personal digital assistant,PDA)等;非移动电子设备可以为个人计算机(personalcomputer,PC)、电视机(television,TV)、柜员机或者自助机等;本发明实施例不作具体限定。
本发明实施例中的电子设备可以为具有操作***的电子设备。该操作***可以为安卓(Android)操作***,可以为ios操作***,还可以为其他可能的操作***,本发明实施例不作具体限定。
下面以安卓操作***为例,介绍一下本发明实施例提供的数据处理方法所应用的软件环境。
如图1所示,为本发明实施例提供的一种可能的安卓操作***的架构示意图。在图1中,安卓操作***的架构包括4层,分别为:应用程序层、应用程序框架层、***运行库层和内核层(具体可以为Linux内核层)。
其中,应用程序层包括安卓操作***中的各个应用程序(包括***应用程序和第三方应用程序)。
应用程序框架层是应用程序的框架,开发人员可以在遵守应用程序的框架的开发原则的情况下,基于应用程序框架层开发一些应用程序。
***运行库层包括库(也称为***库)和安卓操作***运行环境。库主要为安卓操作***提供其所需的各类资源。安卓操作***运行环境用于为安卓操作***提供软件环境。
内核层是安卓操作***的操作***层,属于安卓操作***软件层次的最底层。内核层基于Linux内核为安卓操作***提供核心***服务和与硬件相关的驱动程序。
以安卓操作***为例,本发明实施例中,开发人员可以基于上述如图1所示的安卓操作***的***架构,开发实现本发明实施例提供的数据处理方法的软件程序,从而使得该数据处理方法可以基于如图1所示的安卓操作***运行。即处理器或者电子设备可以通过在安卓操作***中运行该软件程序实现本发明实施例提供的数据处理方法。
下面结合图2所示的数据处理方法流程图对本发明实施例的数据处理方法进行说明,图2为本发明实施例提供的一种数据处理方法流程示意图,应用于第一电子设备,包括步骤201和步骤202:
步骤201:在第一电子设备进行视频通话的情况下,第一电子设备获取预定时间段内该视频通话的多媒体数据包的丢包量。
在本发明实施例中,第一电子设备可以通过不同的应用程序与第二电子设备进行视频电话。例如,上述的第一电子设备可以通过“电话”APP与第二电子设备进行视频通话,也可以通过“聊天”APP与第二电子设备进行视频通话,具体的可以根据实际需求进行设置,本发明实施例对此不作限定。
示例性的,上述的预定时间段(例如,1秒)可以是用户预先设置的时间段,也可以是***默认的时间段,还可以是统计的持续丢包时长的时间段,本发明实施例对此不作限定。
示例性的,上述的多媒体数据包可以包括以下至少一项:音频数据包,视频数据包。
示例性的,上述的丢包量可以为在预定时间段内,第一电子设备在分组数据汇聚协议(packet data convergence protocol,PDCP)层丢弃的上述视频通话的多媒体数据包。
可选的,在本发明实施例中,当上述的丢包量过多时,可能会导致第二电子设备持续花屏,为避免该问题,第一电子设备可以对上述的丢包量进行统计,以判断丢包量是否过多。
示例性的,上述的步骤201可以包括如下步骤201a和步骤201b:
步骤201a:在预定时间段内,上述视频通话产生的任一多媒体数据包对应的定时器超时,则第一电子设备丢弃该任一多媒体数据包,并控制计数器加1。
步骤201b:在上述预定时间段之后,第一电子读取上述计数器的数值。
示例性的,上述的计数器用于统计上述视频通话在上述预定时间段内的多媒体数据包的丢包量。
示例性的,上述的一个多媒体数据包对应一个定时器(timer)。
示例性的,上述的定时器可以为上述的服务器为第一电子设备配置的。示例性的,服务器可以向第一电子设备发送携带配置信息的RRC信令,该配置信息用于为第一电子设备配置该定时器。
示例性的,上述的计数器可以为加法计数器,或者可以为可逆计数器,本发明实施例对此不做限定。其中,可逆计数器为可加可减的计数器。
步骤202:若上述丢包量大于或等于预定阈值,则第一电子设备清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包。
在本发明实施例中,上述目标多媒体数据包为:第一电子设备中缓存的上述视频通话对应的所有多媒体数据包。
可选的,在本发明实施例中,在第一电子设备进行视频通话的情况下,第一电子设备获取该视频通话的丢包参数,该丢包参数包括:持续丢包时长以及该持续丢包时长内(即统计的持续丢包时长的时间段内)该视频通话的多媒体数据包的丢包量。
示例性的,上述的预定时间段即持续丢包时长,该持续丢包时长大于或等于预设时长。
可选的,在本发明实施例中,第一电子设备可以检测到上述的视频通话丢包,则可以对该视频通话的持续丢包时长进行统计。例如,电子设备检测到每0.5秒电子设备中的视频通话都会丢包,统计持续丢包时长累计为5秒。
可选的,在本发明实施例中,在上述持续丢包时长大于或等于预定时长,且在该持续丢包时长内该视频通话的多媒体数据包的丢包量大于或等于预定阈值的情况下,第一电子设备清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包,即预定时间段内该视频通话的多媒体数据包的丢包量大于或等于预定阈值,则第一电子设备清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包。
示例性的,上述的预定阈值和预定时长可以是用户预先设置的阈值,也可以是***默认的阈值,本发明实施例对此不作限定。例如,上述的预定阈值可以为第一电子设备在1秒内丢弃50个多媒体数据包。
举例说明,以第一电子设备为手机A、第二电子设备为手机B为例,当用户通过手机A中的“聊天”APP与其他用户进行视频通话时,手机A会向服务器发送大量的视频数据包,然后服务器会转发给手机B。在手机A会向服务器发送大量的视频数据包的过程中,手机A可以实时监测视频数据包的丢包情况。若手机A监测到手机A在1秒内持续丢包,该1秒内的丢包量为55个,大于50个,由于丢包量过多,手机B无法解析后续接收到的视频数据包,已经花屏,而此时,手机A可以清除缓存的该视频通话的视频数据包,当缓存的该视频通话的视频数据包清空后,手机A可以向服务器发送新的该视频通话的视频数据包。当手机B收到新的该视频通话的视频数据包,可以刷新显示新的画面。
需要说明的是,在手机A丢弃一部分视频数据后,由于手机B后续接收到的都是P帧,因此手机B无法解析该P帧,而上述的新的该视频通话的视频数据包中包含I帧,因此,当手机B收到新的该视频通话的视频数据包,可以对新的视频数据包进行解析,进而可以刷新显示新的画面。
在一种示例中,上述的目标多媒体数据可以为第一电子设备在PDCP层缓存的多媒体数据包。
本发明实施例提供的数据处理方法,在第一电子设备进行视频通话的情况下,当预定时间段内该视频通话的多媒体数据包的丢包量过多时,为了避免与第一电子设备进行视频通话的第二电子设备持续花屏,第一电子设备可以通过清除第一电子设备中缓存的上述视频通话对应的所有多媒体数据包,使得第一电子设备中的数据不会出现过度延时和排队现象,以使后续第一电子设备可以向服务器发送上述视频通话当前产生的多媒体数据包,而服务器也可以将该视频通话当前产生的多媒体数据包转发给第二电子设备,从而使得第二电子设备在接收到新的多媒体数据包后刷新显示新的画面,进而可以避免第二电子设备持续花屏的问题。
可选的,在本发明实施例中,为避免在第一电子设备清除目标多媒体数据包的过程中,继续向服务器发送第二电子设备无法解析的多媒体数据包,第一电子设备可以先停止发送多媒体数据包。
示例性的,在上述的步骤202中的第一电子设备清除目标多媒体数据包之前,所述方法还可以包括如下步骤203:
步骤203:若上述丢包量大于或等于预定阈值,则第一电子设备停止向上述服务器发送上述视频通话的多媒体数据包。
举例说明,以第一电子设备为手机A、第二电子设备为手机B为例,当用户通过手机A与其他用户进行视频通话时,手机A会向服务器发送大量的视频数据包,然后服务器会转发给手机B。若手机A监测到手机A在1秒内持续丢包,该1秒内的丢包量为55个,大于50个,此时,手机A可以停止(暂停)向服务器发送该视频通话的视频数据包,而手机B的屏幕则会停留在最后一个画面,当手机B收到新的该视频通话的视频数据包,可以刷新显示新的画面。
这样,当第一电子设备监测到上述的丢包量大于或等于预定阈值时,可以先停止向上述服务器发送上述视频通话的多媒体数据包,从而避免第二电子设备继续接收到无法解析的上述视频通话的多媒体数据包,进而减少第二电子设备的花屏时间。
进一步可选的,第一电子设备可以通知电子设备的应用层停止发送上述视频通话的多媒体数据包,进而停止向上述服务器发送上述视频通话的多媒体数据包。
示例性的,上述的步骤203具体还可以包括如下步骤203a和步骤203b:
步骤203a:若上述丢包量大于或等于预定阈值,则第一电子设备向该第一电子设备的应用层发送停止命令。
示例性的,上述的停止命令用于指示第一电子设备的应用层停止发送上述视频通话的多媒体数据包。
示例性的,上述的应用层用于产生数据包并向应用层的下层进行传输。
步骤203b:根据上述停止命令,第一电子设备的应用层停止发送上述视频通话的多媒体数据包。
举例说明,以第一电子设备为手机A、第二电子设备为手机B为例,当用户通过手机A与其他用户进行视频通话时,若手机A检测到手机A在1秒内持续丢包,该1秒内的丢包量为55个,大于50个,则手机A可以向手机A的应用层发送停止命令,当手机A的应用层接收到该停止命令时暂停上述视频通话的视频数据包的发送。
这样,第一电子设备可以监测到上述的丢包量大于或等于预定阈值时,可以直接且准确的通知第一电子设备的应用层停止数据发送。
可选的,在本发明实施例中,PDCP层是数据传输最重要的一层,且数据包的丢弃发生在PDCP层,为减少第一电子设备的工作量,第一电子设备可以只清除PDCP层的上述视频通话的多媒体数据包,也可避免第二电子设备持续花屏。
示例性的,上述的步骤202中的若上述丢包量大于或等于预定阈值,则第一电子设备清除目标多媒体数据包,具体可以包括如下步骤202a1和步骤202a2:
步骤202a1:若目标多媒体数据包为第一电子设备的PDCP层中缓存的上述视频通话对应的所有多媒体数据包,且若上述丢包量大于或等于预定阈值,则第一电子设备向该第一电子设备的PDCP层发送清除命令。
示例性的,上述的清除命令用于指示第一电子设备清除PDCP层中缓存的上述视频通话的多媒体数据包。
步骤202a2:根据上述清除命令,第一电子设备清除PDCP层中缓存的上述视频通话对应的所有多媒体数据包。
这样,第一电子设备可以通过清除PDCP层的上述视频通话对应的所有多媒体数据包,使得第一电子设备中的数据不会出现过度延时和排队现象,且减少了第一电子设备的工作量。
进一步可选的,在本发明实施例中,第一电子设备在清除PDCP层的上述视频通话对应的所有多媒体数据包之后,可以触发第一电子设备重新发送上述视频通话的多媒体数据包。
示例性的,上述的步骤202中的向服务器发送所述视频通话当前产生的多媒体数据包,具体可以包括如下步骤202b1和步骤202b2:
步骤202b1:第一电子设备向上述PDCP层的上层应用层发送重新发送命令。
示例性的,上述的重新发送命令用于指示第一电子设备向服务器发送上述视频通话当前产生的多媒体数据包。
示例性的,若上述的多媒体数据包为视频数据包时,上述的重新发送命令还用于指示第一电子设备重新产生包括I帧的视频数据包进行发送。
步骤202b2:根据上述重新发送命令,第一电子设备向服务器发送上述视频通话当前产生的多媒体数据包。
举例说明,以第一电子设备为手机A、第二电子设备为手机B为例,当用户通过手机A与其他用户进行视频通话时,若手机A检测到手机A的PDCP层在1秒内持续丢包,在1秒内的丢包量为55个,大于50个,则手机A可以向手机A的PDCP层发送清除命令,当手机A的PDCP层接收到该清除命令时,清除手机A的PDCP层中缓存的上述视频通话的视频数据包。然后,当手机A的PDCP层中缓存的上述视频通话的视频数据包清空后,手机A可以向PDCP层的上层应用层发送重新发送命令。接着,当手机A的应用层接收到该重新发送命令时,可以向服务器发送当前产生的新的包括I帧的视频数据包。最后当手机B收到新的该视频通话的包括I帧的视频数据包,可以刷新显示新的画面。
这样,第一电子设备可以通过清除PDCP层的上述视频通话对应的所有多媒体数据包,使得第一电子设备中的数据不会出现过度延时和排队现象,在PDCP层的该视频通话的多媒体数据包清空后,第一电子设备可以向服务器发送当前产生的新的多媒体数据包。从而使得当第二电子设备在接收到新的多媒体数据包后刷新显示新的画面,进而可以避免第二电子设备持续花屏的问题。
图3为实现本发明实施例提供的一种电子设备的可能的结构示意图,如图3所示,电子设备300包括:获取模块301和执行模块302,其中:获取模块301,用于在第一电子设备进行视频通话的情况下,获取预定时间段内该视频通话的多媒体数据包的丢包量;执行模块302,用于若上述获取模块301获取的上述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包。其中,上述目标多媒体数据包为:第一电子设备中缓存的上述视频通话对应的所有多媒体数据包。
可选的,上述执行模块302,还用于若上述获取模块获取的上述丢包量大于或等于预定阈值,则停止向上述服务器发送上述视频通话的多媒体数据包。
可选的,上述执行模块302,具体用于在上述目标多媒体数据包为:上述第一电子设备的PDCP层中缓存的所有上述视频通话对应的所有多媒体数据包的情况下,若上述获取模块301获取的上述丢包量大于或等于预定阈值,则向上述第一电子设备的PDCP层发送清除命令;并根据上述清除命令,清除PDCP层中缓存的上述视频通话对应的所有多媒体数据包。
可选的,上述执行模块302,具体用于向上述PDCP层的上层应用层发送重新发送命令,并根据上述重新发送命令,向服务器发送上述视频通话当前产生的多媒体数据包。
可选的,上述获取模块301,具体用于在预定时间段内,上述视频通话产生的任一多媒体数据包对应的定时器超时,则丢弃上述任一多媒体数据包,并控制计数器加1,并在上述预定时间段之后,读取上述计数器的数值;其中,上述计数器用于统计该视频通话在上述预定时间段内的多媒体数据包的丢包量。
本发明实施例提供的电子设备,在第一电子设备进行视频通话的情况下,当预定时间段内该视频通话的多媒体数据包的丢包量过多时,为了避免与第一电子设备进行视频通话的第二电子设备持续花屏,第一电子设备可以通过清除第一电子设备中缓存的上述视频通话对应的所有多媒体数据包,使得第一电子设备中的数据不会出现过度延时和排队现象,以使后续第一电子设备可以向服务器发送上述视频通话当前产生的多媒体数据包,而服务器也可以将该视频通话当前产生的多媒体数据包转发给第二电子设备,从而使得第二电子设备在接收到新的多媒体数据包后刷新显示新的画面,进而可以避免第二电子设备持续花屏的问题。
本发明实施例提供的电子设备能够实现上述方法实施例中电子设备实现的各个过程,为避免重复,这里不再赘述。
图4为实现本发明各个实施例的一种电子设备的硬件结构示意图,该电子设备100包括但不限于:射频单元101、网络模块102、音频输出单元103、输入单元104、传感器105、显示单元106、用户输入单元107、接口单元108、存储器109、处理器110、以及电源111等部件。本领域技术人员可以理解,图4中示出的电子设备100的结构并不构成对电子设备的限定,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备100包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端设备、可穿戴设备、以及计步器等。
其中,处理器110,用于在第一电子设备进行视频通话的情况下,获取预定时间段内该视频通话的多媒体数据包的丢包量,还用于若上述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送上述视频通话当前产生的多媒体数据包。其中,上述目标多媒体数据包为:第一电子设备中缓存的上述视频通话对应的所有多媒体数据包。
本发明实施例提供的电子设备,在第一电子设备进行视频通话的情况下,当预定时间段内该视频通话的多媒体数据包的丢包量过多时,为了避免与第一电子设备进行视频通话的第二电子设备持续花屏,第一电子设备可以通过清除第一电子设备中缓存的上述视频通话对应的所有多媒体数据包,使得第一电子设备中的数据不会出现过度延时和排队现象,以使后续第一电子设备可以向服务器发送上述视频通话当前产生的多媒体数据包,而服务器也可以将该视频通话当前产生的多媒体数据包转发给第二电子设备,从而使得第二电子设备在接收到新的多媒体数据包后刷新显示新的画面,进而可以避免第二电子设备持续花屏的问题。
应理解的是,本发明实施例中,射频单元101可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器110处理;另外,将上行的数据发送给基站。通常,射频单元101包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元101还可以通过无线通信***与网络和其他设备通信。
电子设备100通过网络模块102为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元103可以将射频单元101或网络模块102接收的或者在存储器109中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元103还可以提供与电子设备100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元103包括扬声器、蜂鸣器以及受话器等。
输入单元104用于接收音频或视频信号。输入单元104可以包括图形处理器(Graphics Processing Unit,GPU)1041和麦克风1042,图形处理器1041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元106上。经图形处理器1041处理后的图像帧可以存储在存储器109(或其它存储介质)中或者经由射频单元101或网络模块102进行发送。麦克风1042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元101发送到移动通信基站的格式输出。
电子设备100还包括至少一种传感器105,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板1061的亮度,接近传感器可在电子设备100移动到耳边时,关闭显示面板1061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器105还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元106用于显示由用户输入的信息或提供给用户的信息。显示单元106可包括显示面板1061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板1061。
用户输入单元107可用于接收输入的数字或字符信息,以及产生与电子设备100的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元107包括触控面板1071以及其他输入设备1072。触控面板1071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板1071上或在触控面板1071附近的操作)。触控面板1071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器110,接收处理器110发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板1071。除了触控面板1071,用户输入单元107还可以包括其他输入设备1072。具体地,其他输入设备1072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板1071可覆盖在显示面板1061上,当触控面板1071检测到在其上或附近的触摸操作后,传送给处理器110以确定触摸事件的类型,随后处理器110根据触摸事件的类型在显示面板1061上提供相应的视觉输出。虽然在图4中,触控面板1071与显示面板1061是作为两个独立的部件来实现电子设备100的输入和输出功能,但是在某些实施例中,可以将触控面板1071与显示面板1061集成而实现电子设备100的输入和输出功能,具体此处不做限定。
接口单元108为外部装置与电子设备100连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元108可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备100内的一个或多个元件或者可以用于在电子设备100和外部装置之间传输数据。
存储器109可用于存储软件程序以及各种数据。存储器109可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器109可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器110是电子设备100的控制中心,利用各种接口和线路连接整个电子设备100的各个部分,通过运行或执行存储在存储器109内的软件程序和/或模块,以及调用存储在存储器109内的数据,执行电子设备100的各种功能和处理数据,从而对电子设备100进行整体监控。处理器110可包括一个或多个处理单元;可选的,处理器110可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器110中。
电子设备100还可以包括给各个部件供电的电源111(比如电池),可选的,电源111可以通过电源管理***与处理器110逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。
另外,电子设备100包括一些未示出的功能模块,在此不再赘述。
可选的,本发明实施例还提供一种电子设备,包括处理器,存储器,存储在存储器上并可在所述处理器110上运行的计算机程序,该计算机程序被处理器执行时实现上述数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述数据处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台电子设备(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明实施例各个实施例所述的方法。
上面结合附图对本发明实施例的实施例进行了描述,但是本发明实施例并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明实施例的启示下,在不脱离本发明实施例宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明实施例的保护之内。

Claims (10)

1.一种数据处理方法,其特征在于,应用于第一电子设备,所述方法包括:
在所述第一电子设备进行视频通话的情况下,获取预定时间段内所述视频通话的多媒体数据包的丢包量;
若所述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送所述视频通话当前产生的多媒体数据包;
其中,所述目标多媒体数据包为:所述第一电子设备中缓存的所述视频通话对应的所有多媒体数据包;
所述获取预定时间段内所述视频通话的多媒体数据包的丢包量,包括:
在所述预定时间段内,所述视频通话产生的任一多媒体数据包对应的定时器超时,则丢弃所述任一多媒体数据包,并控制计数器加1;
在所述预定时间段之后,读取所述计数器的数值;
其中,所述计数器用于统计所述视频通话在所述预定时间段内的多媒体数据包的丢包量。
2.根据权利要求1所述的方法,其特征在于,所述清除目标多媒体数据包之前,所述方法还包括:
若所述丢包量大于或等于预定阈值,则停止向所述服务器发送所述视频通话的多媒体数据包。
3.根据权利要求1或2所述的方法,其特征在于,所述目标多媒体数据包为:所述第一电子设备的PDCP层中缓存的所述视频通话对应的所有多媒体数据包;
所述若所述丢包量大于或等于预定阈值,则清除目标多媒体数据包,包括:
若所述丢包量大于或等于预定阈值,则向所述第一电子设备的PDCP层发送清除命令;
根据所述清除命令,清除所述PDCP层中缓存的所述视频通话对应的所有多媒体数据包。
4.根据权利要求3所述的方法,其特征在于,所述向服务器发送所述视频通话当前产生的多媒体数据包,包括:
向所述PDCP层的上层应用层发送重新发送命令;
根据所述重新发送命令,向服务器发送所述视频通话当前产生的多媒体数据包。
5.一种电子设备,所述电子设备为第一电子设备,其特征在于,所述电子设备包括:
获取模块,用于在所述第一电子设备进行视频通话的情况下,获取预定时间段内所述视频通话的多媒体数据包的丢包量;
执行模块,用于若所述获取模块获取的所述丢包量大于或等于预定阈值,则清除目标多媒体数据包,并向服务器发送所述视频通话当前产生的多媒体数据包;
其中,所述目标多媒体数据包为:所述第一电子设备中缓存的所述视频通话对应的所有多媒体数据包;
所述获取模块,具体用于在所述预定时间段内,所述视频通话产生的任一多媒体数据包对应的定时器超时,则丢弃所述任一多媒体数据包,并控制计数器加1,并在所述预定时间段之后,读取所述计数器的数值;
其中,所述计数器用于统计所述视频通话在所述预定时间段内的多媒体数据包的丢包量。
6.根据权利要求5所述的电子设备,其特征在于,所述执行模块,还用于在所述清除目标多媒体数据包之前,若所述获取模块获取的所述丢包量大于或等于预定阈值,则停止向所述服务器发送所述视频通话的多媒体数据包。
7.根据权利要求5或6所述的电子设备,其特征在于,所述执行模块,具体用于在所述目标多媒体数据包为:所述第一电子设备的PDCP层中缓存的所述视频通话对应的所有多媒体数据包的情况下,若所述获取模块获取的所述丢包量大于或等于预定阈值,则向所述第一电子设备的PDCP层发送清除命令;并根据所述清除命令,清除所述PDCP层中缓存的所述视频通话对应的所有多媒体数据包。
8.根据权利要求7所述的电子设备,其特征在于,所述执行模块,具体用于向所述PDCP层的上层应用层发送重新发送命令,并根据所述重新发送命令,向服务器发送所述视频通话当前产生的多媒体数据包。
9.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至4中任一项所述的数据处理方法的步骤。
10.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质上存储计算机程序,所述计算机程序被处理器执行时实现如权利要求1至4中任一项所述的数据处理方法的步骤。
CN201911295261.XA 2019-12-16 2019-12-16 数据处理方法及电子设备 Active CN111131210B (zh)

Priority Applications (5)

Application Number Priority Date Filing Date Title
CN201911295261.XA CN111131210B (zh) 2019-12-16 2019-12-16 数据处理方法及电子设备
PCT/CN2020/135206 WO2021121119A1 (zh) 2019-12-16 2020-12-10 数据处理方法及电子设备
KR1020227021699A KR20220107013A (ko) 2019-12-16 2020-12-10 데이터 처리 방법 및 전자 장치
EP20904140.9A EP4060956A4 (en) 2019-12-16 2020-12-10 DATA PROCESSING METHODS AND ELECTRONIC DEVICE
US17/839,458 US11843652B2 (en) 2019-12-16 2022-06-13 Data processing method and electronic device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201911295261.XA CN111131210B (zh) 2019-12-16 2019-12-16 数据处理方法及电子设备

Publications (2)

Publication Number Publication Date
CN111131210A CN111131210A (zh) 2020-05-08
CN111131210B true CN111131210B (zh) 2021-09-17

Family

ID=70499313

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911295261.XA Active CN111131210B (zh) 2019-12-16 2019-12-16 数据处理方法及电子设备

Country Status (5)

Country Link
US (1) US11843652B2 (zh)
EP (1) EP4060956A4 (zh)
KR (1) KR20220107013A (zh)
CN (1) CN111131210B (zh)
WO (1) WO2021121119A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111131210B (zh) * 2019-12-16 2021-09-17 维沃移动通信有限公司 数据处理方法及电子设备
CN117641420A (zh) * 2022-08-09 2024-03-01 华为技术有限公司 数据处理方法及装置

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103814582A (zh) * 2013-11-05 2014-05-21 华为技术有限公司 视频业务数据传输方法、数据接收装置和数据发送装置
CN104702968A (zh) * 2015-02-17 2015-06-10 华为技术有限公司 一种视频帧丢帧方法及视频发送装置
CN108769450A (zh) * 2018-06-21 2018-11-06 深圳市道通智能航空技术有限公司 数据传输控制方法、信息发送端、接收端及飞行器图传***
CN108924574A (zh) * 2018-08-01 2018-11-30 广州视源电子科技股份有限公司 录播***中的丢包处理方法、装置、设备及存储介质
US10291541B1 (en) * 2015-07-16 2019-05-14 Sprint Spectrum L.P. Systems and methods for scheduling transmissions from an access node
CN110290559A (zh) * 2019-07-10 2019-09-27 维沃移动通信有限公司 一种数据传输方法及终端

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7317685B1 (en) * 2001-11-26 2008-01-08 Polycom, Inc. System and method for dynamic bandwidth allocation for videoconferencing in lossy packet switched networks
CN101904197A (zh) * 2007-12-20 2010-12-01 株式会社Ntt都科摩 移动台、基站装置、通信控制方法以及移动通信***
US8325608B2 (en) * 2008-08-07 2012-12-04 Qualcomm Incorporated Efficient packet handling for timer-based discard in a wireless communication system
US9621444B2 (en) * 2012-12-18 2017-04-11 Telefonaktiebolaget Lm Ericsson (Publ) Method and device for handling dropped data packets
US9185045B1 (en) 2015-05-01 2015-11-10 Ubitus, Inc. Transport protocol for interactive real-time media
EP3354059B1 (en) * 2015-09-24 2020-10-21 Nokia Solutions and Networks Oy Reporting of uplink quality of service metrics
CN109802922A (zh) * 2017-11-16 2019-05-24 电信科学技术研究院 一种缓存同步异常的处理方法和设备
CN110677882B (zh) * 2018-07-02 2021-03-30 华为技术有限公司 一种通信方法及相关设备
CN111131210B (zh) * 2019-12-16 2021-09-17 维沃移动通信有限公司 数据处理方法及电子设备

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103814582A (zh) * 2013-11-05 2014-05-21 华为技术有限公司 视频业务数据传输方法、数据接收装置和数据发送装置
CN104702968A (zh) * 2015-02-17 2015-06-10 华为技术有限公司 一种视频帧丢帧方法及视频发送装置
US10291541B1 (en) * 2015-07-16 2019-05-14 Sprint Spectrum L.P. Systems and methods for scheduling transmissions from an access node
CN108769450A (zh) * 2018-06-21 2018-11-06 深圳市道通智能航空技术有限公司 数据传输控制方法、信息发送端、接收端及飞行器图传***
CN108924574A (zh) * 2018-08-01 2018-11-30 广州视源电子科技股份有限公司 录播***中的丢包处理方法、装置、设备及存储介质
CN110290559A (zh) * 2019-07-10 2019-09-27 维沃移动通信有限公司 一种数据传输方法及终端

Also Published As

Publication number Publication date
CN111131210A (zh) 2020-05-08
US11843652B2 (en) 2023-12-12
EP4060956A4 (en) 2022-11-23
US20220311818A1 (en) 2022-09-29
KR20220107013A (ko) 2022-08-01
WO2021121119A1 (zh) 2021-06-24
EP4060956A1 (en) 2022-09-21

Similar Documents

Publication Publication Date Title
CN110175062B (zh) 一种移动终端的屏幕刷新帧率方法、移动终端及存储介质
CN108681498B (zh) 一种cpu占用率的监测方法、装置以及移动终端
CN111328119B (zh) 一种语音业务处理方法及电子设备
CN110445924B (zh) 网络任务执行方法及终端设备
CN110944408B (zh) 一种数据传输方法及电子设备
CN109831359B (zh) 一种数据网络连接状态的检测方法及其终端设备
US11843652B2 (en) Data processing method and electronic device
CN109995862B (zh) 一种资源调度方法及终端
CN111405112B (zh) 消息提示方法及电子设备
CN111343710B (zh) 一种功率调整方法及电子设备
CN110597437A (zh) 一种截屏方法及终端设备
CN110290277B (zh) 天线控制方法及终端
CN107908983A (zh) 一种控制移动终端屏幕的方法和移动终端
CN110087267A (zh) 网络切换方法、装置、电子设备及可读存储介质
CN111026263B (zh) 一种音频播放方法及电子设备
CN108881775B (zh) 一种视频通信方法和移动终端
CN111309133A (zh) 省电控制方法及电子设备
CN108391288B (zh) 一种优化通信业务质量的方法及移动终端
CN111050108A (zh) 多路视频通话的实现方法、装置及电子设备
CN108234745B (zh) 一种信号接收方法、移动终端及计算机可读存储介质
US20220022198A1 (en) Method for radio link monitoring, terminal, base station, and storage medium
CN112887404B (zh) 一种音频传输控制方法、设备及计算机可读存储介质
CN110035553B (zh) 资源调度请求方法、装置和移动终端
CN108668005B (zh) 一种终端检测方法及终端
CN107864294B (zh) 一种免打扰模式启动方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant