CN115334053A - 一种云会议中关联投屏的实现方法及相关产品 - Google Patents

一种云会议中关联投屏的实现方法及相关产品 Download PDF

Info

Publication number
CN115334053A
CN115334053A CN202210919844.0A CN202210919844A CN115334053A CN 115334053 A CN115334053 A CN 115334053A CN 202210919844 A CN202210919844 A CN 202210919844A CN 115334053 A CN115334053 A CN 115334053A
Authority
CN
China
Prior art keywords
cloud
speaker
concerned
file
content
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202210919844.0A
Other languages
English (en)
Other versions
CN115334053B (zh
Inventor
梅品西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Happycast Technology Co Ltd
Original Assignee
Shenzhen Happycast Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Happycast Technology Co Ltd filed Critical Shenzhen Happycast Technology Co Ltd
Priority to CN202210919844.0A priority Critical patent/CN115334053B/zh
Publication of CN115334053A publication Critical patent/CN115334053A/zh
Application granted granted Critical
Publication of CN115334053B publication Critical patent/CN115334053B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H04L65/403—Arrangements for multi-party communication, e.g. for conferences
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/16—Speech classification or search using artificial neural networks
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/26—Speech to text systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1095—Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本申请实施例提供一种云会议中关联投屏的实现方法及相关产品，所述方法包括如下步骤：云会议服务器接收主讲人的云终端在云会议中待共享的共享文件；云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏。本申请提供的技术方案具有提高云会议效果的优点。

Description

一种云会议中关联投屏的实现方法及相关产品
技术领域
本申请涉及电子及通信技术领域，尤其涉及一种云会议中关联投屏的实现方法及相关产品。
背景技术
云会议是基于云计算技术的一种高效、便捷、低成本的会议形式。使用者只需要通过互联网界面，进行简单易用的操作，便可快速高效地与全球各地团队及客户同步分享语音、数据文件及视频，而会议中数据的传输、处理等复杂技术由云会议服务商帮助使用者进行操作。
云会议场景下共享文件区域的图像数据传输数据量过大，影响了会议图像数据的延时，进而影响云会议的效果，降低用户体验度。
发明内容
本申请实施例公开了一种云会议中关联投屏的实现方法及相关产品，该方法可以降低云会议图像数据的延时，提高云会议的技术效果，提高用户的体验度。
第一方面，提供一种云会议中关联投屏的实现方法，所述方法包括如下步骤：
云会议服务器接收主讲人的云终端在云会议中待共享的共享文件；
云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；
云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏；
第二压缩算法为比第一压缩算法压缩量更大的算法。
第二方面，提供一种云会议中关联投屏的实现***，所述***包括：
通信单元，用于接收主讲人的云终端在云会议中待共享的共享文件；
处理单元，用于对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏；
第二压缩算法为比第一压缩算法压缩量更大的算法。
第三方面，提供一种电子设备，包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行第一方面所述的方法中的步骤的指令。
第四方面，提供了一种计算机可读存储介质，存储用于电子数据交换的计算机程序，其中，所述计算机程序使得计算机执行第一方面所述的方法。
第五方面，提供了一种计算机程序产品，其中，上述计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，上述计算机程序可操作来使计算机执行如本申请实施例第一方面中所描述的部分或全部步骤。该计算机程序产品可以为一个软件安装包。
本申请提供的云会议服务器接收主讲人云终端在云会议中待共享的共享文件；云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端。这样通过上述方案将共享文件中主讲人非关注的内容进行不同的压缩方式压缩，这样能够在不影响主讲人进行会议的前提下，尽量的减少其他非关注内容占用网络传输量，数据量小，单帧数据量小，数据延时低，进而降低网络的流量，提高云会议的流畅度，提高会议的质量，进而提高用户体验度。
附图说明
以下对本申请实施例用到的附图进行介绍。
图1是本申请的一种云会议平台的构架的示意图；
图2是本申请提供的一种云会议中关联投屏的实现方法的流程示意图；
图3是本申请提供的一种云会议中关联投屏的实现***的结构示意图；
图4为本申请提供的分屏显示的示意图；
图5是本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
下面结合本申请实施例中的附图对本申请实施例进行描述。
本申请中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如，A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，表示前后关联对象是一种“或”的关系。
本申请实施例中出现的“多个”是指两个或两个以上。本申请实施例中出现的第一、第二等描述，仅作示意与区分描述对象之用，没有次序之分，也不表示本申请实施例中对设备个数的特别限定，不能构成对本申请实施例的任何限制。本申请实施例中出现的“连接”是指直接连接或者间接连接等各种连接方式，以实现设备间的通信，本申请实施例对此不做任何限定。
参阅图1，图1为云会议平台的构架示意图，如图1所示，其具有多个云终端，该云终端通过云会议服务器连接在一起，上述云终端具体可以包括：处理器、存储器、显示屏、通信电路、音频组件和摄像组件，上述部件可以通过总线连接，也可以通过其他方式连接，本申请并不限制上述连接的具体方式。上述云终端与云会议平台连接的方式可以通过有线网络连接，当然也可以通过无线通信***的无线网络连接。
上述无线通信***可以是：全球移动通讯(Global System of Mobilecommunication，GSM)***、码分多址(Code Division Multiple Access，CDMA)***、宽带码分多址(Wideband Code Division Multiple Access，WCDMA)***、通用分组无线业务(General Packet Radio Service，GPRS)、长期演进(Long Term Evolution，LTE)***、先进的长期演进(Advanced long term evolution，LTE-A)***、新空口(New Radio，NR)***、NR***的演进***、免授权频谱上的LTE***(LTE-based access to unlicensedspectrum，LTE-U)、免授权频谱上的NR***(NR-based access tounlicensed spectrum，NR-U)、通用移动通信***(Universal Mobile Telecommunication System，UMTS)、下一代通信***或其他通信***等。
参阅图2，图2提供了一种云会议中关联投屏的实现方法的流程示意图，如图2所示的方法可以在如图1所示的云会议平台的构架下执行，具体的，其可以通过如图1所示的云会议平台中的云终端执行，当然也可以由云会议服务器执行，本实施例以云会议服务器为例进行说明，在实际应用中，也可以是云终端执行，该方法如图2所示，包括如下步骤：
步骤S201、云会议服务器接收主讲人的云终端在云会议中待共享的共享文件；
上述共享文件可以为任意格式的文件，包括但不限于：PPT、word、WPS等等。上述接收方式可以通过有线方式接收，也可以通过无线方式接收，具体的接收方式可以因为云终端与云会议服务器之间的连接方式来决定，本申请并不限制上述接收的具体方式。
步骤S202、云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；
上述关注的部分内容可以为主讲人正在讲的内容或在设定时间内主讲人需要讲的内容，上述内容可以为文字、图片、视频中的任意一种或任意组合。
示例的，上述关注的部分内容可以为主讲人标记本次需要讲解的内容，当然还可以为其他形式的内容，本申请并不限制上述关注的部分内容的具体形式。
步骤S203、云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏(非主讲人终端)；
示例的，上述第二压缩算法为比第一压缩算法压缩量更大的算法。
示例的，上述第一压缩算法与第二压缩算法可以为相同的压缩算法，具体在压缩时，第二压缩算法的压缩比大于第一压缩算法的压缩比，当然上述第一压缩算法和第二压缩算法可以为不同的压缩算法，其具体的压缩算法可以为通用的压缩算法，本申请并不限制上述压缩算法的具体形式，也不限制上述压缩的具体流程。
例如，一个100Mb(兆比特)的文件，通过第一压缩算法压缩以后变成50Mb，通过第二压缩算法压缩以后变成40Mb(只需要低于50Mb)，即可以认为第二压缩算法为比第一压缩算法压缩量更大的算法。
本申请提供的云会议服务器接收主讲人云终端在云会议中待共享的共享文件；云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端。这样通过上述方案将共享文件中主讲人非关注的内容进行不同的压缩方式压缩，这样能够在不影响主讲人进行会议的前提下，尽量的减少其他非关注内容占用网络传输量，数据量小，单帧数据量小，数据延时低，进而降低网络的流量，提高云会议的流畅度，提高会议的质量，进而提高用户体验度。
示例的，上述将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端具体可以包括：
云会议服务器获取其他云终端的网络延时，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级。
示例的，上述依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级具体可以包括：
将其他云终端按网络延时升序排列得到第一序列，按第一序列的先后顺序设置其他云终端传输优先级的高低，即第一序列在先的云终端传输优先级高(即优先发送)，在后的云终端优先级低(即后发送)。
例如，终端1的网络延时为10毫秒，终端2的网络延时为20毫秒，那么终端2的按传输优先级大于终端1的传输优先级。
示例的，上述云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容具体可以包括：
云会议服务器接收主讲人的云终端采集的音频数据，对该音频数据进行语音识别确定该音频数据的文本信息，从该共享文件确定与该文本信息对应的内容确定为该主讲人关注的部分内容，将该共享文件的其他内容确定为该主讲人非关注的部分内容。
示例的，上述对该音频数据进行语音识别确定该音频数据的文本信息的具体方法可以采用LSTM的识别方法，具体可以包括：
将该音频数据组成LSTM各个时刻的输入数据Xt(其中t表示时刻的标识)，采用下述公式识别得到该音频数据的文本信息；
LSTM可以分为忘记门、输入门、输出门，对应三个计算，其计算的公式如下：
忘记门，ft＝σ(ht-1*Xt+bf)。
输入门：
it＝σ(ht-1*Xt+bi)
C’t＝tanh(ht-1*Xt+bc)；
输出门：
Ot＝σ(ht-1*Xt+b0)；
ht＝Ot*tanh(Ct)。
其中，Ct＝Ct-1*ft+it*C’t。
上述，bf表示ft函数的偏置，该数值为常量，同理，bi、bc、bo分别表示对应公式的偏置，Ot表示t时刻的输出结果。
示例的，上述方法还可以包括：
获取该音频数据在各个时刻的各个输出结果，统计各个输出结果的各个置信率，从各个置信率中查找低于第一阈值的置信率i，提取该置信率i的时刻i的hi-1以及i+1以及i-1对应的两个置信率，从两个置信率中获取较高置信率对应的时刻i+1或i-1；若较高置信率为时刻i+1(也可以为时刻i-1)，将时刻i+1对应的输入数据与时刻i的输入数据组合起来作为一个新的输入数据通过上述公式计算出新的输出结果，若该新的输出结果的置信率高于时刻i+1与时刻i的置信率的均值，将该新的输出结果替换时刻i+1以及时刻i的输出结果。
本申请通过组合方式来提高输入结果的准确率，这样能够提高音频数据的识别精度。
示例的，上述将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏具体可以包括：
将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端，指示其他云终端通过分屏方式显示对该第一压缩文件以及第二压缩文件解压后的第一文件以及第二文件，其中，将该第一文件可以设置在中间区域，该第二文件可以设置在边缘区域。
如图4所示，为分屏方式显示的示意图，假设第一文件具有2个图片，分别为图片1、图片2，该第二文件具有4个图片，分别为图片3、4、5、6，该2个图片可以设置在显示区域的中间区域的两侧，其他4个图片设置在中间区域的4个侧面。
示例的，上述方法还可以包括：
云会议服务器若接收到第二云终端(其他云终端中的任意一个)点击边缘区域的指示信息时，依据该指示信息确定该第二文件中图片标识，将该图片标识采用第一压缩算法压缩后发送至该第二云终端。
此技术方案能够在任意终端关注图片时，对图片进行重新发送，进而提高关注图片的清晰度。
参阅图3，图3为本申请提供的一种云会议中关联投屏的实现***的结构示意图，所述***包括：
通信单元301，用于接收主讲人的云终端在云会议中待共享的共享文件；
处理单元302，用于对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏；
第二压缩算法为比第一压缩算法压缩量更大的算法。
本申请提供的***中，接收主讲人云终端在云会议中待共享的共享文件；云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端。这样通过上述方案将共享文件中主讲人非关注的内容进行不同的压缩方式压缩，这样能够在不影响主讲人进行会议的前提下，尽量的减少其他非关注内容占用网络传输量，数据量小，单帧数据量小，数据延时低，进而降低网络的流量，提高云会议的流畅度，提高会议的质量，进而提高用户体验度。
示例的，
所述处理单元，具体用于获取其他云终端的网络延时，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级。
示例的，
所述处理单元，具体用于将其他云终端按网络延时升序排列得到第一序列，按第一序列的先后顺序设置其他云终端传输优先级的高低。
示例的，
所述通信单元，还用于接收主讲人的云终端采集的音频数据；
所述处理单元，还用于对该音频数据进行语音识别确定该音频数据的文本信息，从该共享文件确定与该文本信息对应的内容确定为该主讲人关注的部分内容，将该共享文件的其他内容确定为该主讲人非关注的部分内容。
示例的，
处理单元，还用于将该音频数据组成LSTM各个时刻的输入数据Xt(其中t表示时刻的标识)，采用下述公式识别得到该音频数据的文本信息；
LSTM可以分为忘记门、输入门、输出门，对应三个计算，其计算的公式如下：
忘记门，ft＝σ(ht-1*Xt+bf)。
输入门：
it＝σ(ht-1*Xt+bi)
C’t＝tanh(ht-1*Xt+bc)；
输出门：
Ot＝σ(ht-1*Xt+b0)；
ht＝Ot*tanh(Ct)。
其中，Ct＝Ct-1*ft+it*C’t。
上述，bf表示ft函数的偏置，该数值为常量，同理，bi、bc、bo分别表示对应公式的偏置，Ot表示t时刻的输出结果。
示例的，上述方法还可以包括：
获取该音频数据在各个时刻的各个输出结果，统计各个输出结果的各个置信率，从各个置信率中查找低于第一阈值的置信率i，提取该置信率i的时刻i的hi-1以及i+1以及i-1对应的两个置信率，从两个置信率中获取较高置信率对应的时刻i+1或i-1；若较高置信率为时刻i+1(也可以为时刻i-1)，将时刻i+1对应的输入数据与时刻i的输入数据组合起来作为一个新的输入数据通过上述公式计算出新的输出结果，若该新的输出结果的置信率高于时刻i+1与时刻i的置信率的均值，将该新的输出结果替换时刻i+1以及时刻i的输出结果。
可以理解的是，上述装置为了实现上述功能，其包含了执行各个功能相应的硬件和/或软件模块。结合本文中所公开的实施例描述的各示例的算法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。本领域技术人员可以结合实施例对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
本实施例可以根据上述方法示例对电子设备进行功能模块的划分，例如，可以对应各个功能划分各个功能模块，也可以将两个或两个以上的功能集成在一个处理模块中。上述集成的模块可以采用硬件的形式实现。需要说明的是，本实施例中对模块的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
需要说明的是，上述方法实施例涉及的各步骤的所有相关内容均可以援引到对应功能模块的功能描述，在此不再赘述。
在采用集成的单元的情况下，用户设备可以包括处理模块和存储模块。其中，处理模块可以用于对用户设备的动作进行控制管理，例如，可以用于支持电子设备执行上述获取单元、通信单元、处理单元执行的步骤。存储模块可以用于支持电子设备执行存储程序代码和数据等。
其中，处理模块可以是处理器或控制器。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框，模块和电路。处理器也可以是实现计算功能的组合，例如包含一个或多个微处理器组合，数字信号处理(digital signal processing，DSP)和微处理器的组合等等。存储模块可以是存储器。通信模块具体可以为射频电路、蓝牙芯片、Wi-Fi芯片等与其他电子设备交互的设备。
可以理解的是，本申请实施例示意的各模块间的接口连接关系，只是示意性说明，并不构成对用户设备的结构限定。在本申请另一些实施例中，用户设备也可以采用上述实施例中不同的接口连接方式，或多种接口连接方式的组合。
请参见图5，图5是本申请实施例提供的一种电子设备50，该电子设备50包括处理器501、存储器502、通信接口503和显示屏504，所述处理器501、存储器502和通信接口503通过总线相互连接，所述显示屏为所述电子设备供电，该电子设备还可以包括：
存储器502包括但不限于是随机存储记忆体(random access memory，RAM)、只读存储器(read-only memory，ROM)、可擦除可编程只读存储器(erasable programmableread only memory，EPROM)、或便携式只读存储器(compact disc read-only memory，CD-ROM)，该存储器502用于相关计算机程序及数据。通信接口503用于接收和发送数据。
处理器501可以是一个或多个中央处理器(central processing unit，CPU)，在处理器501是一个CPU的情况下，该CPU可以是单核CPU，也可以是多核CPU。
处理器501可以包括一个或多个处理单元，例如：处理单元可以包括应用处理器(application processor，AP)，调制解调处理器，图形处理器(graphics processingunit，GPU)，图像信号处理器(image signal processor，ISP)，控制器，视频编解码器，数字信号处理器(digital signal processor，DSP)，基带处理器，和/或神经网络处理器(neural-network processing unit，NPU)等。其中，不同的处理单元可以是独立的部件，也可以集成在一个或多个处理器中。在一些实施例中，用户设备也可以包括一个或多个处理单元。其中，控制器可以根据指令操作码和时序信号，产生操作控制信号，完成取指令和执行指令的控制。在其他一些实施例中，处理单元中还可以设置存储器，用于存储指令和数据。示例性地，处理单元中的存储器可以为高速缓冲存储器。该存储器可以保存处理单元刚用过或循环使用的指令或数据。如果处理单元需要再次使用该指令或数据，可从所述存储器中直接调用。这样就避免了重复存取，减少了处理单元的等待时间，因而提高了用户设备处理数据或执行指令的效率。
在一些实施例中，处理器501可以包括一个或多个接口。接口可以包括集成电路间(inter-integrated circuit，I2C)接口、集成电路间音频(inter-integrated circuitsound，I2S)接口、脉冲编码调制(pulse code modulation，PCM)接口、通用异步收发传输器(universal asynchronous receiver/transmitter，UART)接口、移动产业处理器接口(mobile industry processor interface，MIPI)、用输入输出(general-purpose input/output，GPIO)接口、SIM卡接口和/或USB接口等。其中，USB接口是符合USB标准规范的接口，具体可以是Mini USB接口、Micro USB接口、USB Type C接口等。USB接口可以用于连接充电器为用户设备充电，也可以用于用户设备与***设备之间传输数据。该USB接口也可以用于连接耳机，通过耳机播放音频。
若该电子设备50为云会议服务器或云设备，例如智能手机、计算机设备、服务器，该电子设备50中的处理器501用于读取所述存储器502中存储的计算机程序代码，执行以下操作：
接收主讲人的云终端在云会议中待共享的共享文件；对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；
将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏；第二压缩算法为比第一压缩算法压缩量更大的算法。
其中，所述将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端具体包括：
获取其他云终端的网络延时，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级。
其中，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级具体包括：
将其他云终端按网络延时升序排列得到第一序列，按第一序列的先后顺序设置其他云终端传输优先级的高低。
其中，所述对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容具体包括：
接收主讲人的云终端采集的音频数据，对该音频数据进行语音识别确定该音频数据的文本信息，从该共享文件确定与该文本信息对应的内容确定为该主讲人关注的部分内容，将该共享文件的其他内容确定为该主讲人非关注的部分内容。
其中，上述方法实施例涉及的各场景的所有相关内容均可以援引到对应功能模块的功能描述，在此不再赘述。
本申请实施例还提供一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，当其在网络设备上运行时，图2所示的方法流程得以实现。
本申请实施例还提供一种计算机程序产品，当所述计算机程序产品在终端上运行时，图2所示的方法流程得以实现。
本申请实施例还提供一种电子设备，包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行图2所示实施例的方法中的步骤的指令。
上述主要从方法侧执行过程的角度对本申请实施例的方案进行了介绍。可以理解的是，电子设备为了实现上述功能，其包含了执行各个功能相应的硬件结构和/或软件模板。本领域技术人员应该很容易意识到，结合本文中所提供的实施例描述的各示例的单元及算法步骤，本申请能够以硬件或硬件和计算机软件的结合形式来实现。某个功能究竟以硬件还是计算机软件驱动硬件的方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用使用不同方法来实现所描述的功能，但是这种实现不应认为超出本申请的范围。
本申请实施例可以根据上述方法示例对电子设备进行功能单元的划分，例如，可以对应各个功能划分各个功能单元，也可以将两个或两个以上的功能集成在一个处理单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。需要说明的是，本申请实施例中对单元的划分是示意性的，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式。
需要说明的是，对于前述的各方法实施例，为了简单描述，故将其都表述为一系列的动作组合，但是本领域技术人员应该知悉，本申请并不受所描述的动作顺序的限制，因为依据本申请，某些步骤可以采用其他顺序或者同时进行。其次，本领域技术人员也应该知悉，说明书中所描述的实施例均属于优选实施例，所涉及的动作和模板并不一定是本申请所必须的。
在上述实施例中，对各个实施例的描述都各有侧重，某个实施例中没有详述的部分，可以参见其他实施例的相关描述。
在本申请所提供的几个实施例中，应该理解到，所揭露的装置，可通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性或其它的形式。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。
上述集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储器中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干指令用以使得一台计算机设备(可为个人计算机、服务器或者网络设备等)执行本申请各个实施例上述方法的全部或部分步骤。而前述的存储器包括：U盘、只读存储器(ROM，Read-Only Memory)、随机存取存储器(RAM，Random Access Memory)、移动硬盘、磁碟或者光盘等各种可以存储程序代码的介质。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储器中，存储器可以包括：闪存盘、只读存储器(英文：Read-Only Memory，简称：ROM)、随机存取器(英文：Random Access Memory，简称：RAM)、磁盘或光盘等。

Claims (10)

1.一种云会议中关联投屏的实现方法，其特征在于，所述方法包括如下步骤：
云会议服务器接收主讲人的云终端在云会议中待共享的共享文件；
云会议服务器对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；
云会议服务器将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏；
第二压缩算法为比第一压缩算法压缩量更大的算法。
2.根据权利要求1所述的方法，其特征在于，所述将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端具体包括：
获取其他云终端的网络延时，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级。
3.根据权利要求2所述的方法，其特征在于，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级具体包括：
将其他云终端按网络延时升序排列得到第一序列，按第一序列的先后顺序设置其他云终端传输优先级的高低。
4.根据权利要求1所述的方法，其特征在于，所述对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容具体包括：
接收主讲人的云终端采集的音频数据，对该音频数据进行语音识别确定该音频数据的文本信息，从该共享文件确定与该文本信息对应的内容确定为该主讲人关注的部分内容，将该共享文件的其他内容确定为该主讲人非关注的部分内容。
5.一种云会议中关联投屏的实现***，其特征在于，所述***包括：
通信单元，用于接收主讲人的云终端在云会议中待共享的共享文件；
处理单元，用于对该共享文件进行识别确定该共享文件中的该主讲人关注的部分内容以及该主讲人非关注的部分内容；将该关注的部分内容通过第一压缩算法压缩后得到第一压缩文件，将该非关注的部分内容通过第二压缩算法压缩后得到第二压缩文件，将第一压缩文件以及第二压缩文件共享给云会议中的其他云终端进行投屏；
第二压缩算法为比第一压缩算法压缩量更大的算法。
6.根据权利要求5所述的***，其特征在于，
所述处理单元，具体用于获取其他云终端的网络延时，依据该网络延时动态的分配该第一压缩文件以及第二压缩文件的在其他云终端的传输优先级。
7.根据权利要求6所述的***，其特征在于，
所述处理单元，具体用于将其他云终端按网络延时升序排列得到第一序列，按第一序列的先后顺序设置其他云终端传输优先级的高低。
8.根据权利要求5所述的***，其特征在于，
所述通信单元，还用于接收主讲人的云终端采集的音频数据；
所述处理单元，还用于对该音频数据进行语音识别确定该音频数据的文本信息，从该共享文件确定与该文本信息对应的内容确定为该主讲人关注的部分内容，将该共享文件的其他内容确定为该主讲人非关注的部分内容。
9.一种电子设备，包括处理器、存储器、通信接口，以及一个或多个程序，所述一个或多个程序被存储在所述存储器中，并且被配置由所述处理器执行，所述程序包括用于执行如权利要求1-4任意一项所述的方法的步骤的指令。
10.一种计算机可读存储介质，所述计算机可读存储介质中存储有计算机程序，当其在用户设备上运行时，执行如权利要求1-4任意一项所述的方法。
CN202210919844.0A 2022-08-03 2022-08-03 一种云会议中关联投屏的实现方法及相关产品 Active CN115334053B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210919844.0A CN115334053B (zh) 2022-08-03 2022-08-03 一种云会议中关联投屏的实现方法及相关产品

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210919844.0A CN115334053B (zh) 2022-08-03 2022-08-03 一种云会议中关联投屏的实现方法及相关产品

Publications (2)

Publication Number Publication Date
CN115334053A true CN115334053A (zh) 2022-11-11
CN115334053B CN115334053B (zh) 2023-07-18

Family

ID=83919767

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210919844.0A Active CN115334053B (zh) 2022-08-03 2022-08-03 一种云会议中关联投屏的实现方法及相关产品

Country Status (1)

Country Link
CN (1) CN115334053B (zh)

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040111755A1 (en) * 2002-12-10 2004-06-10 Perlman Stephen G. Apparatus and method for wireless video gaming
US20100302405A1 (en) * 2005-08-16 2010-12-02 Konica Minolta Holdings, Inc. Image sensing apparatus and image processing method
CN102855059A (zh) * 2012-08-21 2013-01-02 东莞宇龙通信科技有限公司 终端和信息分享方法
CN103561259A (zh) * 2013-07-10 2014-02-05 杭州云本科技有限公司 面向应用共享服务的网络会议视觉质量自动化评估方法
CN105812714A (zh) * 2016-03-18 2016-07-27 浙江万朋教育科技股份有限公司 一种用于共享ppt文档页面的数据压缩方法
CN109525802A (zh) * 2018-11-27 2019-03-26 平安科技（深圳）有限公司 一种视频流传输方法和装置
CN111954028A (zh) * 2020-10-19 2020-11-17 深圳乐播科技有限公司 音频数据的投屏方法、装置、设备及存储介质
CN111954051A (zh) * 2020-02-11 2020-11-17 华为技术有限公司 一种传输视频音频的方法、设备和***
CN112422591A (zh) * 2021-01-25 2021-02-26 北京拓课网络科技有限公司 一种传输视频流数据的方法、装置及电子设备
CN113204687A (zh) * 2020-11-10 2021-08-03 摩赛恩科技(苏州)有限公司 质谱数据自动上传方法及终端设备
CN114679437A (zh) * 2022-03-11 2022-06-28 阿里巴巴（中国）有限公司 远程会议方法、数据交互方法、设备及计算机存储介质
CN114827134A (zh) * 2022-07-01 2022-07-29 深圳乐播科技有限公司 云会议桌面的差异化推送方法、相关装置及显示方法
CN114816308A (zh) * 2022-06-28 2022-07-29 深圳乐播科技有限公司 信息分区显示方法及相关设备

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20200230505A1 (en) * 2002-12-10 2020-07-23 Sony Interactive Entertainment America Llc Video Compression System and Method for Compensating for Bandwidth Limitations of a Communication Channel
US20040111755A1 (en) * 2002-12-10 2004-06-10 Perlman Stephen G. Apparatus and method for wireless video gaming
US20100302405A1 (en) * 2005-08-16 2010-12-02 Konica Minolta Holdings, Inc. Image sensing apparatus and image processing method
CN102855059A (zh) * 2012-08-21 2013-01-02 东莞宇龙通信科技有限公司 终端和信息分享方法
CN103561259A (zh) * 2013-07-10 2014-02-05 杭州云本科技有限公司 面向应用共享服务的网络会议视觉质量自动化评估方法
CN105812714A (zh) * 2016-03-18 2016-07-27 浙江万朋教育科技股份有限公司 一种用于共享ppt文档页面的数据压缩方法
CN109525802A (zh) * 2018-11-27 2019-03-26 平安科技（深圳）有限公司 一种视频流传输方法和装置
CN111954051A (zh) * 2020-02-11 2020-11-17 华为技术有限公司 一种传输视频音频的方法、设备和***
CN111954028A (zh) * 2020-10-19 2020-11-17 深圳乐播科技有限公司 音频数据的投屏方法、装置、设备及存储介质
CN113204687A (zh) * 2020-11-10 2021-08-03 摩赛恩科技(苏州)有限公司 质谱数据自动上传方法及终端设备
CN112422591A (zh) * 2021-01-25 2021-02-26 北京拓课网络科技有限公司 一种传输视频流数据的方法、装置及电子设备
CN114679437A (zh) * 2022-03-11 2022-06-28 阿里巴巴（中国）有限公司 远程会议方法、数据交互方法、设备及计算机存储介质
CN114816308A (zh) * 2022-06-28 2022-07-29 深圳乐播科技有限公司 信息分区显示方法及相关设备
CN114827134A (zh) * 2022-07-01 2022-07-29 深圳乐播科技有限公司 云会议桌面的差异化推送方法、相关装置及显示方法

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
ILKER HAMZAOGLU: "Low power digital video compression hardware design", 2016 INTERNATIONAL CONFERENCE ON DESIGN AND TECHNOLOGY OF INTEGRATED SYSTEMS IN NANOSCALE ERA (DTIS) *
刘晓昱: "网络视频会议***的研究与应用", 中国优秀硕士学位论文全文数据库 (信息科技辑) *
田均成;胡坤;曹宏宇;宋占伟;: "移动终端图像信息云推送投影***的研发", 吉林大学学报(信息科学版), no. 03 *

Also Published As

Publication number Publication date
CN115334053B (zh) 2023-07-18

Similar Documents

Publication Publication Date Title
US20200068635A1 (en) Data-stream allocation method for link aggregation and related devices
WO2019042169A1 (zh) 资源配置方法及相关产品
WO2019042180A1 (zh) 资源配置方法及相关产品
US10165058B2 (en) Dynamic local function binding apparatus and method
US9311920B2 (en) Voice processing method, apparatus, and system
WO2019072208A1 (zh) 应用程序运行控制方法及设备
US11182210B2 (en) Method for resource allocation and terminal device
CN113766270B (zh) 视频播放方法、***、服务器、终端设备、以及电子设备
WO2019072180A1 (zh) 应用程序的资源配置方法及设备
WO2019047708A1 (zh) 资源配置方法及相关产品
CN114996168A (zh) 一种多设备协同测试方法、测试设备及可读存储介质
CN112463391B (zh) 内存控制方法、内存控制装置、存储介质与电子设备
CN115119228A (zh) 信道状态信息csi的上报方法及相关产品
CN113222806A (zh) 大数据的存储分配方法及***
CN115334053B (zh) 一种云会议中关联投屏的实现方法及相关产品
CN112965922A (zh) 一种用于增强智能终端的ai性能的方法及***
CN106330504B (zh) 一种实现应用的方法及业务控制器
CN112165572A (zh) 图像处理方法、装置、终端及存储介质
US11012372B2 (en) Electronic apparatus and method for control thereof
CN107426114B (zh) 资源分配方法及***
CN112887155B (zh) QoS关联信息同步方法及相关产品
CN115361569B (zh) 一种云会议中的动态帧投屏方法及相关产品
CN111432384B (zh) 用于具有录音功能设备的大数据量音频蓝牙实时传输方法
CN114641031A (zh) 信道状态信息csi的上报方法及相关产品
CN112558885B (zh) 功能手机的存储器使用方法及相关产品

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant