CN111405301B - 终端的录屏交互方法、装置、计算机设备及存储介质 - Google Patents

终端的录屏交互方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN111405301B
CN111405301B CN202010135464.9A CN202010135464A CN111405301B CN 111405301 B CN111405301 B CN 111405301B CN 202010135464 A CN202010135464 A CN 202010135464A CN 111405301 B CN111405301 B CN 111405301B
Authority
CN
China
Prior art keywords
screen recording
matched
terminal
video frame
image processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010135464.9A
Other languages
English (en)
Other versions
CN111405301A (zh
Inventor
苏庆辉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Huya Technology Co Ltd
Original Assignee
Guangzhou Huya Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Huya Technology Co Ltd filed Critical Guangzhou Huya Technology Co Ltd
Priority to CN202010135464.9A priority Critical patent/CN111405301B/zh
Publication of CN111405301A publication Critical patent/CN111405301A/zh
Application granted granted Critical
Publication of CN111405301B publication Critical patent/CN111405301B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/85—Providing additional services to players
    • A63F13/86—Watching games played by other players
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4334—Recording operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Databases & Information Systems (AREA)
  • Television Signal Processing For Recording (AREA)

Abstract

本发明实施例公开了一种终端的录屏交互方法、装置、计算机设备和存储介质。该方法包括：响应于录屏任务启动指令，对终端屏幕进行实时录屏；获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理；根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备，本发明实施例的技术方案在对录屏内容中的每一个视频帧进行正常图像处理的同时，最大程度的减少对CPU的消耗，一定程度上避免了录屏过程中录屏进程的强制关闭，提高了录屏类直播的直播顺畅度。

Description

终端的录屏交互方法、装置、计算机设备及存储介质
技术领域
本发明实施例涉及信息交互技术领域，尤其涉及一种终端的录屏交互方法、装置、计算机设备及存储介质。
背景技术
目前，随着视频直播技术和游戏行业的不断发展，越来越多的游戏玩家选择将游戏视频直播给其他用户观看。游戏视频的直播过程主要是通过游戏玩家对游戏终端进行录屏后，将录屏内容经由直播服务器转发给其他观众端实现。
现有技术中，在游戏终端将录屏内容发送至直播服务器之前，需要对录屏内容中的每一帧进行一定的图像处理(例如，增加水印或者屏幕翻转等操作)，以适配其他观众端的播放。目前，主要使用游戏终端的CPU(Central Processing Unit，中央处理器)实现上述图像处理过程。
发明人在实现本发明的过程中，发现现有技术存在如下技术缺陷：由CPU执行上述图像的方式，对CPU的消耗很大。特别是对于CPU开销上限有限制的操作***(例如，iOS操作***)，当录屏过程中的CPU消耗超过***设置的开销上限时，会造成录屏进程的强制关闭，大大影响了录屏类直播的直播顺畅度。
发明内容
本发明实施例提供一种终端的录屏交互方法、装置、计算机设备及存储介质，在对录屏内容中的每一个视频帧进行正常图像处理的同时，最大程度的减少对CPU的消耗。
第一方面，本发明实施例提供了一种终端的录屏交互方法，包括：
响应于录屏任务启动指令，对终端屏幕进行实时录屏；
获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理；
根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
第二方面，本发明实施例还提供了一种终端的录屏交互装置，包括：
实时录屏模块，用于响应于录屏任务启动指令，对终端屏幕进行实时录屏；
图像处理模块，用于获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理；
音视频数据合成模块，用于根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
第三方面，本发明实施例还提供了一种计算机设备，设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当一个或多个程序被一个或多个处理器执行，使得一个或多个处理器实现本发明任意实施例提供的终端的录屏交互方法。
第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明任意实施例提供的终端的录屏交互方法。
本发明实施例的技术方案通过在对终端屏幕进行实时录屏后，获取录屏过程中产生的各视频帧和与匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理的技术手段，在进行视频帧的图像处理过程中，不再一视同仁针对不同的录屏终端均使用CPU进行图像处理，而是个性化的根据不同的终端性能选择使用终端中不同的处理器对各视频帧进行处理，在对录屏内容中的每一个视频帧进行正常图像处理的同时，最大程度的减少对CPU的消耗，一定程度上避免了录屏过程中录屏进程的强制关闭，提高了录屏类直播的直播顺畅度。
附图说明
图1是本发明实施例一中的一种终端的录屏交互方法的流程图；
图2是本发明实施例二中的一种终端的录屏交互方法的流程图；
图3是本发明实施例三中的一种终端的录屏交互方法的流程图；
图4是本发明实施例四中的一种终端的录屏交互方法的流程图；
图5是本发明实施例五中的一种终端的录屏交互方法的流程图；
图6是本发明实施例六中的一种图像处理装置的结构示意图；
图7是本发明实施例七中的一种计算机设备的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。
实施例一
图1是本发明实施例一提供的一种终端的录屏交互方法的流程图，本实施例可适用于终端进行屏幕录屏后，调用合适的处理器对录屏过程中产生的各视频帧进行图像处理的情况，该方法可以由终端的录屏交互装置来执行，该装置可以由硬件和/或软件来实现，并一般可以集成在各种可以提供录屏服务的终端设备中，例如，手机、平板电脑、或者台式机等。如图1所示，该方法包括：
S110、响应于录屏任务启动指令，对终端屏幕进行实时录屏。
在本实施例中，直播类应用程序为了满足主播的游戏直播需求，为主播提供了录屏功能(也即，屏幕捕捉功能)，当主播选择开启录屏功能时，会相应触发生成录屏任务启动指令，该录屏任务启动指令，具体是指用于触发所述主播类应用程序开始进行实时录屏的指令。
一般来说，用户在直播主界面中，需要经过一级或者多级下级展开窗口或者控制面板，达到录屏按钮所在窗口或者控制面板，该录屏按钮用于触发生成该录屏任务启动指令。相应的，用户可以通过自主选择的方式，通过上述一级或者多级展开窗口或者控制面板，人为搜索该录屏按钮，并通过点击该录屏按钮的方式，触发生成录屏任务启动指令；或者，为了进一步简便用户的操作，降低用户使用录屏功能的门槛，可以在检测到用户的录屏需求时，直播类平台自动拉起一级或者多级展开窗口或者控制面板，并通过遍历搜索的方式搜索得到该录屏按钮，通过模拟用户点击该录屏按钮的方式，可以直接触发生成该录屏任务启动指令。
S120、获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理。
在本实施例中，当用户选择录屏功能后，直播类应用程序会同时捕捉屏幕显示内容，例如，每隔一个采集间隔捕捉一个屏幕截图作为视频帧，上述连续捕捉的多个视频帧用于构成录屏视频。同时，通过采集终端中的音频输出设备输出的音频内容(典型的，当前终端显示屏幕中显示的应用程序的音频，也即应用音频)以及麦克风音频(典型的，主播在游戏中输入的主播音频)，并将上述两种音频进行组合，可以得到与该连续的视频帧匹配的音频数据。
一般来说，直接通过屏幕截图获取的视频帧不能直接作为直播内容使用，需要进行一定图像处理。例如，主播在通过手机玩游戏时，一般会选择横握手机的方式，如果对直接录屏获取的视频帧不进行处理直接进行直播，不符合观众端的观看习惯，因此需要首先对视频帧进行旋转操作；又例如，由于主播在进行游戏时，所选择的终端设备各有不同，屏幕大小以及分辨率也各不相同，为了统一后续的播放格式，需要在得到该视频帧后，首先按照统一的格式标准，对该视频帧进行缩放处理。
在另一个具体的例子中，一般来说，录屏得到的视频中需要增加主播信息、直播间信息或者特效信息等屏幕截图中所没有的内容，因为，需要基于上述信息，需要对录屏得到的视频帧进行二次渲染等处理。
现有技术中，无论主播在录屏过程中使用何种终端，直播类应用程序均会统一使用CPU对视频帧进行上述处理。特别是，如果主播使用iOS操作***，而上述图像处理操作超过了iOS操作***预先设定的CPU的消耗限制，则会造成录屏过程的异常中断(例如，当前开启的录屏线程***作***杀死)。在本实施例中，创造性的提出：根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理的操作方式。
目前，随着终端技术的不断发展，一般的终端中均具有多种类型的处理器，例如，CPU以及GPU(Graphics Processing Unit，图形处理器)等，一般来说，使用GPU进行图像处理的速度会快于使用CPU进行图像处理。因此，在本实施例中，可以根据终端性能参数匹配的配置信息，对应选择终端中的CPU或者GPU，或者同时使用CPU和GPU对各视频帧进行至少一项图像处理，以最大程度的减少对CPU的消耗。
相应的，在本实施例的一个可选的实施方式中，在获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理之前，还可以包括：
获取所述终端的终端型号、操作***版本号以及录屏应用的应用标识作为终端性能参数；将所述终端性能参数发送至服务器，接收所述服务器反馈的与所述终端性能参数匹配的配置信息。
其中，所述录屏应用具体是指当前被录屏的应用程序。
具体的，可以预先在终端型号、操作***版本号以及录屏应用这三个维度下，对不同终端进行视频帧的图像处理时，所使用的处理器消耗进行分析，得到最好的处理器使用方式。例如，当确定终端型号为A，操作***版本号为B，录屏应用为C时，使用CPU+GPU的组合对处理器的总体消耗少(或者，能够满足操作***预先设定的CPU的消耗限制)，处理时间最少等。
相应的，基于上述分析结果，可以构造不同维度下的图片加工策略(也即，图像处理所使用的处理器)，并在服务器中进行存储。当服务器接收到终端发送的，由所述终端的终端型号、操作***版本号以及录屏应用的应用标识构成的终端性能参数时，可以获取与上述参数匹配的图片加工策略作为一项配置信息反馈给该终端。
当然，可以理解的是，直播类应用程序可以预先从服务器中获取全部图片加工策略，或者在直播类应用程序的安装包中预装全部图片加工策略，进而可以实时根据终端性能参数，确定与该终端性能参数匹配的图片加工策略。
在本实施例中，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理，包括：
根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理。
在本实施例中，所述图像加工处理包括下述至少一项：旋转、缩放以及二次渲染。
具体的，在进行二次渲染时，可以首先确定需要进行二次渲染的全部内容，例如，动效、主播水印或者房间号等信息，之后将上述内容一次性的全部渲染至视频帧上，以最大程度的提高渲染效率。
S130、根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
在本实施例中，在得到各个视频帧后，可以通过各视频帧的时间信息，将视频帧拼接得到视频数据，通过将视频数据与匹配的音频数据进行组合，可以合成得到音视频数据。进而，直播类应用可以将合成得到的音视频数据发送给匹配的接收设备。例如，可以经由直播服务器，将上述音视频流发送至直播间内的各个观众进行观看。
需要说明书的是，本发明实施例的方法可以由直播类应用程序中开启的录屏线程实现，也可以由直播类应用程序的主进程和录屏线程配合使用，本实施例对此并不进行限制。
本发明实施例的技术方案通过在对终端屏幕进行实时录屏后，获取录屏过程中产生的各视频帧和与匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理的技术手段，在进行视频帧的图像处理过程中，不再一视同仁针对不同的录屏终端均使用CPU进行图像处理，而是个性化的根据不同的终端性能选择使用终端中不同的处理器对各视频帧进行处理，在对录屏内容中的每一个视频帧进行正常图像处理的同时，最大程度的减少对CPU的消耗，一定程度上避免了录屏过程中录屏进程的强制关闭，提高了录屏类直播的直播顺畅度。
实施例二
图2是本发明实施例二提供的一种终端的录屏交互方法的流程图。本实施例可以与上述实施例中各个可选方案结合。在本实施例中，对录屏任务启动指令的触发方式进行具体化。具体的，参考图2，该方法可以包括如下步骤：
S210、根据用户的录屏任务发起请求，打开录屏入口面板，并在所述录屏入口面板中搜索用于启动录屏任务的录屏按钮。
对于一般的直播类应用程序来说，触发生成录屏任务启动指令的录屏按钮一般不直接位于直播间主界面上，当用户需要进行录屏操作时，需要在直播间主界面中逐级打开一个或者多个窗口，或者开启一个或者多个控制面板，在对应窗口或者控制面板下，人工搜索该录屏按钮并选择点击。在本实施例中，为了进一步简便用户的操作，降低录屏门槛，提出了一种省略用户人工搜索并点击该录屏按钮的方案。
在本实施例中，以录屏按钮位于直播间主界面的下一级录屏入口面板为例，可以当用户在直播间主界面中点击录屏任务按钮，并触发生成选择进入录屏入口面板的录屏任务发起请求时，打开录屏入口面板，并在所述录屏入口面板中搜索用于启动录屏任务的录屏按钮。
其中，可以通过前台显式打开或者后台隐藏打开的方式，打开该录屏入口面板。其中，该录屏入口面板中可能具有多个不同功能的按钮，可以通过遍历各个按钮的按钮名称的方式，搜索得到用于启动录屏任务的录屏按钮。
S220、向所述录屏按钮发送模拟点击事件后，关闭所述录屏入口面板，所述模拟点击事件用于触发所述录屏按钮生成所述录屏启动指令。
在遍历得到该录屏按钮后，可以构造模拟点击事件，并将上述模拟点击事件发送至录屏按钮，以模拟用户按下该录屏按钮，进而可以触发该录屏按钮生成所述录屏启动指令。
在完成模拟点击事件后，该录屏入口面板就没有必要继续处于打开状态，进而可以直接对该录屏入口面板进行关闭。
S230、响应于录屏任务启动指令，对终端屏幕进行实时录屏。
S240、获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理。
S250、根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
本发明实施例的技术方案通过根据用户的录屏任务发起请求，打开录屏入口面板，并在所述录屏入口面板中搜索用于启动录屏任务的录屏按钮；向所述录屏按钮发送模拟点击事件后，关闭所述录屏入口面板的操作，大大降低了新用户使用录屏功能的门槛，简化了用户的录屏操作流程，提高了用户使用录屏功能的交互体验。
实施例三
图3是本发明实施例三提供的一种终端的录屏交互方法的流程图。本实施例可以与上述实施例中各个可选方案结合。在本实施例中，在根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理之前，还具体包括：根据所述配置信息中的颜色空间处理策略，对各所述视频帧进行颜色空间转换。
具体的，参考图3，该方法可以包括如下步骤：
S310、响应于录屏任务启动指令，对终端屏幕进行实时录屏。
S320、获取所述终端的终端型号、操作***版本号以及录屏应用的应用标识作为终端性能参数。
S330、将所述终端性能参数发送至服务器，接收所述服务器反馈的与所述终端性能参数匹配的配置信息。
在本实施例中，发明人进一步发现，不同的类型的终端对终端屏幕的录屏效果参差不齐，不同终端因为终端型号、操作***版本号以及录屏应用的不同，最终在录屏过程中得到的各个视频帧的画面质量也不尽相同。有些视频帧的录屏画面偏白，或者有些视频帧的录屏画面偏绿等，情况不同。
在本实施例中，可以预先在终端型号、操作***版本号以及录屏应用这三个维度下，对不同维度下的终端进行视频帧的图像质量进行分析，得到将视频帧的图像质量还原至原画面质量的颜色转换方式。例如，当确定终端型号为X，操作***版本号为Y，录屏应用为Z时，确定可以将视频帧中各个像素点中的G(绿色)值调整至原来值的50％时，使得视频帧的画面质量接近原始画质。
相应的，基于上述分析结果，可以构造不同维度下的颜色空间处理策略(也即，视频帧所使用的颜色空间转换方式)，并在服务器中进行存储。当服务器接收到终端发送的，由所述终端的终端型号、操作***版本号以及录屏应用的应用标识构成的终端性能参数，可以将匹配的颜色空间处理策略作为一项配置信息反馈给该终端。
S340、获取录屏过程中产生的各视频帧和匹配的音频数据。
S350、根据所述配置信息中的颜色空间处理策略，对各所述视频帧进行颜色空间转换。
具体的，可以根据该颜色空间处理策略，对各所述视频帧进行颜色空间转换。具体的，所述颜色空间处理策略可以为将视频帧中各个像素点的一项或者多项参数(例如，RBG值)进行调整。
S360、根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理。
其中，所述图像加工处理包括下述至少一项：旋转、缩放以及二次渲染。
S370、根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
本发明实施例的技术方案通过获取所述终端的终端型号、操作***版本号以及录屏应用的应用标识作为终端性能参数，将所述终端性能参数发送至服务器，接收所述服务器反馈的与所述终端性能参数匹配的配置信息，并根据所述配置信息中的颜色空间处理策略，对各所述视频帧进行颜色空间转换的方式，可以进一步提高最终录屏得到的音视频流中画面的质量，使得画面质量尽可能的与原始画面一致，提高了录屏效果。
实施例四
图4是本发明实施例四提供的一种终端的录屏交互方法的流程图。本实施例可以与上述实施例中各个可选方案结合。在本实施例中，对获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理的步骤中，主进程和录屏线程之间的信息交互过程进行具体化。
具体的，参考图4，该方法可以包括如下步骤：
S410、在所述主进程中搭建服务器，并在所述录屏线程中搭建客户端。
现有技术中，当用户选择打开直播类应用程序时，会在终端的操作***中首先建立与该直播类应用程序对应的主进程，用户触发直播类应用程序的录屏功能时，主进程会相应建立与该录屏功能匹配的录屏线程，由该录屏线程实现各项录屏操作。发明人在实现本发明的过程中，发现：录屏线程的处理性能是低于主进程的，当录屏线程执行的处理任务比较大时，有可能会造成线程的卡顿或者异常关闭等。相应的，在本实施例中，提出了建立主进程与录屏线程之间的通信通道的技术方案，通过上述通信通道，可以建立主进程与录屏线程之间的通信连接，对于录屏过程中计算量比较大的操作，可以由录屏线程传输至主进程进行处理，以进一步提高录屏应用的稳定性，并保证录屏得到的音视频数据的数据质量。S420、建立所述服务器与所述客户端之间的至少一个套接字连接，所述套接字连接用于传输设定类型的数据。
在本实施例中，可以首先在主进程中搭建服务器，并在所述录屏线程中搭建客户端，进而可以在服务器与所述客户端之间建立至少一个套接字连接(也即，socket连接)。一般来说，一个socket连接可以用来传输一种类型的数据。在本实施例中，可以建立三个socket连接，分别用于在主进程与录屏线程之间传输视频帧，音频数据以及控制指令。
S430、通过主进程，响应于录屏任务启动指令，建立录屏线程。
S440、通过所述录屏线程，对终端屏幕进行实时录屏。
S450、通过所述录屏线程，获取录屏过程中产生的各视频帧和匹配的音频数据。
S460、通过所述录屏线程，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理。
S470、通过所述录屏线程，将图像处理后的各所述视频帧以及所述匹配的音频数据经由预先建立的套接字连接发送至主进程。
S480、通过所述主进程，根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
在本实施例中，针对性能比较好的终端(例如，平板电脑)，可以由录屏线程实现对各所述视频帧进行至少一项图像处理后，由主进程实现根据图像处理后的各所述视频帧以及匹配的音频数据，合成得到音视频数据的操作，在综合评估终端性能的基础上，最大限度的利用了录屏线程以及主进程的能力。
本发明实施例的技术方案通过在主进程和录屏线程之间建立通信连接，并由主进程和录屏线程之间的共同配合实现对终端屏幕的录屏操作，可以将录屏过程中计算量比较大的操作，可以由录屏线程传输至主进程进行处理，以进一步提高录屏应用的稳定性，并保证录屏得到的音视频数据的数据质量。
实施例五
图5是本发明实施例五提供的一种终端的录屏交互方法的流程图。本实施例可以与上述实施例中各个可选方案结合。在本实施例中，对获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理的步骤中，主进程和录屏线程之间的信息交互过程进行具体化。
S510、在所述主进程中搭建服务器，并在所述录屏线程中搭建客户端。
S520、建立所述服务器与所述客户端之间的至少一个套接字连接，所述套接字连接用于传输设定类型的数据。
S530、通过主进程，响应于录屏任务启动指令，建立录屏线程。
S540、通过所述录屏线程，对终端屏幕进行实时录屏。
S550、通过录屏线程，获取录屏过程中产生的各视频帧和匹配的音频数据。
S560、通过所述录屏线程，将各所述视频帧以及所述匹配的音频数据经由预先建立的套接字连接发送至主进程。
S570、通过所述主进程，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理。
S580、通过所述主进程，根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
在本实施例中，针对性能一般的终端(例如，手机)，可以由录屏线程将录屏过程中得到的各视频帧以及音频数据发送至主进程，由主进程实现对各所述视频帧进行至少一项图像处理，并将根据图像处理后的各所述视频帧以及匹配的音频数据，合成得到音视频数据的操作，在综合评估终端性能的基础上，最大限度的利用了录屏线程以及主进程的能力。
本发明实施例的技术方案通过在主进程和录屏线程之间建立通信连接，并由主进程和录屏线程之间的共同配合实现对终端屏幕的录屏操作，可以将录屏过程中计算量比较大的操作，可以由录屏线程传输至主进程进行处理，以进一步提高录屏应用的稳定性，并保证录屏得到的音视频数据的数据质量。
实施例六
图6是本发明实施例六中的一种终端的录屏交互装置的结构示意图，如图6所示，该图像处理装置包括：实时录屏模块610、图像处理模块620以及音视频数据合成模块630。
实时录屏模块610，用于响应于录屏任务启动指令，对终端屏幕进行实时录屏。
图像处理模块620，用于获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理。
音视频数据合成模块630，用于根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
本发明实施例的技术方案通过在对终端屏幕进行实时录屏后，获取录屏过程中产生的各视频帧和与匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理的技术手段，在进行视频帧的图像处理过程中，不再一视同仁针对不同的录屏终端均使用CPU进行图像处理，而是个性化的根据不同的终端性能选择使用终端中不同的处理器对各视频帧进行处理，在对录屏内容中的每一个视频帧进行正常图像处理的同时，最大程度的减少对CPU的消耗，一定程度上避免了录屏过程中录屏进程的强制关闭，提高了录屏类直播的直播顺畅度。
在上述各实施例的基础上，还可以包括，模拟触发模块，用于：
在响应于录屏任务启动指令，对终端屏幕进行实时录屏之前，根据用户的录屏任务发起请求，打开录屏入口面板，并在所述录屏入口面板中搜索用于启动录屏任务的录屏按钮；
向所述录屏按钮发送模拟点击事件后，关闭所述录屏入口面板，所述模拟点击事件用于触发所述录屏按钮生成所述录屏启动指令。
在上述各实施例的基础上，还可以包括，配置信息获取模块，用于：
在根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理之前，获取所述终端的终端型号、操作***版本号以及录屏应用的应用标识作为终端性能参数；
将所述终端性能参数发送至服务器，接收所述服务器反馈的与所述终端性能参数匹配的配置信息。
在上述各实施例的基础上，图像处理模块620，具体可以用于：
根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理；
所述图像加工处理包括下述至少一项：旋转、缩放以及二次渲染。
在上述各实施例的基础上，所述图像处理模块620，还包括，颜色转换单元，具体用于：
在根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理之前，根据所述配置信息中的颜色空间处理策略，对各所述视频帧进行颜色空间转换。
在上述各实施例的基础上，实时录屏模块610，具体可以用于：
通过主进程，响应于录屏任务启动指令，建立录屏线程；
通过所述录屏线程，对终端屏幕进行实时录屏；
音视频数据合成模块630，具体可以用于：通过所述主进程，根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
在上述各实施例的基础上，图像处理模块620，具体可以用于：
获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理，具体包括：
通过所述录屏线程，获取录屏过程中产生的各视频帧和匹配的音频数据；
通过所述录屏线程，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理；
通过所述录屏线程，将图像处理后的各所述视频帧以及所述匹配的音频数据经由预先建立的套接字连接发送至主进程。
在上述各实施例的基础上，图像处理模块620，具体可以用于：
通过录屏线程，获取录屏过程中产生的各视频帧和匹配的音频数据；
通过所述录屏线程，将各所述视频帧以及所述匹配的音频数据经由预先建立的套接字连接发送至主进程；
通过所述主进程，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理。
在上述各实施例的基础上，还可以包括，连接建立模块，用于：在获取录屏过程中产生的各视频帧和匹配的音频数据之前，在所述主进程中搭建服务器，并在所述录屏线程中搭建客户端；
建立所述服务器与所述客户端之间的至少一个套接字连接，所述套接字连接用于传输设定类型的数据。
本发明实施例所提供的终端的录屏交互装置可执行本发明任意实施例所提供的终端的录屏交互方法，具备执行方法相应的功能模块和有益效果。
实施例七
图7是本发明实施例七公开的一种计算机设备的结构示意图。图7示出了适于用来实现本发明实施方式的示例性设备12的框图。图7显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。
如图7所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，***存储器28，连接不同***组件(包括***存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，***总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及***组件互连(PCI)总线。
设备12典型地包括多种计算机***可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。
***存储器28可以包括易失性存储器形式的计算机***可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机***存储介质。仅作为举例，存储***34可以用于读写不可移动的、非易失性磁介质(图7未显示，通常称为“硬盘驱动器”)。尽管图7中未示出可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作***、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。
设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。
处理单元16通过运行存储在***存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的一种终端的录屏交互方法。
也即：响应于录屏任务启动指令，对终端屏幕进行实时录屏；获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理；根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
实施例八
本发明实施例八还提供了一种计算机存储介质，其上存储有计算机程序，该程序被处理器执行时实现一种终端的录屏交互方法，包括：响应于录屏任务启动指令，对终端屏幕进行实时录屏；获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理；根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种终端的录屏交互方法，其特征在于，包括：
在主进程中搭建服务器，并在录屏线程中搭建客户端；
建立所述服务器与所述客户端之间的至少一个套接字连接，所述套接字连接用于传输设定类型的数据；
通过所述主进程，响应于录屏任务启动指令，建立录屏线程；
通过所述录屏线程，对终端屏幕进行实时录屏；
获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理，所述调用匹配的处理器包括：调用终端中的CPU或者GPU，或者同时调用CPU和GPU；
通过所述主进程，根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
2.根据权利要求1所述的方法，其特征在于，在响应于录屏任务启动指令，对终端屏幕进行实时录屏之前，还包括：
根据用户的录屏任务发起请求，打开录屏入口面板，并在所述录屏入口面板中搜索用于启动录屏任务的录屏按钮；
向所述录屏按钮发送模拟点击事件后，关闭所述录屏入口面板，所述模拟点击事件用于触发所述录屏按钮生成所述录屏任务启动指令。
3.根据权利要求1所述的方法，其特征在于，在根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理之前，还包括：
获取所述终端的终端型号、操作***版本号以及录屏应用的应用标识作为终端性能参数；
将所述终端性能参数发送至服务器，接收所述服务器反馈的与所述终端性能参数匹配的配置信息。
4.根据权利要求1所述的方法，其特征在于，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理，包括：
根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理；
所述图像加工处理包括下述至少一项：旋转、缩放以及二次渲染。
5.根据权利要求4所述的方法，其特征在于，在根据所述配置信息中的图片加工策略，调用匹配的处理器，对各所述视频帧进行图像加工处理之前，还包括：
根据所述配置信息中的颜色空间处理策略，对各所述视频帧进行颜色空间转换。
6.根据权利要求5所述的方法，其特征在于，获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理，具体包括：
通过所述录屏线程，获取录屏过程中产生的各视频帧和匹配的音频数据；
通过所述录屏线程，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理；
通过所述录屏线程，将图像处理后的各所述视频帧以及所述匹配的音频数据经由预先建立的套接字连接发送至主进程。
7.根据权利要求5所述的方法，其特征在于，获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各视频帧进行至少一项图像处理，包括：
通过录屏线程，获取录屏过程中产生的各视频帧和匹配的音频数据；
通过所述录屏线程，将各所述视频帧以及所述匹配的音频数据经由预先建立的套接字连接发送至主进程；
通过所述主进程，根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理。
8.一种终端的录屏交互装置，其特征在于，包括：
连接建立模块，用于在主进程中搭建服务器，并在录屏线程中搭建客户端；建立所述服务器与所述客户端之间的至少一个套接字连接，所述套接字连接用于传输设定类型的数据；
实时录屏模块，用于通过所述主进程，响应于录屏任务启动指令，建立录屏线程；通过所述录屏线程，对终端屏幕进行实时录屏；
图像处理模块，用于获取录屏过程中产生的各视频帧和匹配的音频数据，并根据与终端性能参数匹配的配置信息，调用匹配的处理器对各所述视频帧进行至少一项图像处理，所述调用匹配的处理器包括：调用终端中的CPU或者GPU，或者同时调用CPU和GPU；
音视频数据合成模块，用于通过所述主进程，根据图像处理后的各所述视频帧以及所述匹配的音频数据，合成得到音视频数据，并将所述音视频数据发送至匹配的接收设备。
9.一种计算机设备，其特征在于，所述设备包括：
一个或多个处理器；
存储装置，用于存储一个或多个程序，
当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-7中任一所述的终端的录屏交互方法。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-7中任一所述的终端的录屏交互方法。
CN202010135464.9A 2020-03-02 2020-03-02 终端的录屏交互方法、装置、计算机设备及存储介质 Active CN111405301B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010135464.9A CN111405301B (zh) 2020-03-02 2020-03-02 终端的录屏交互方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010135464.9A CN111405301B (zh) 2020-03-02 2020-03-02 终端的录屏交互方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN111405301A CN111405301A (zh) 2020-07-10
CN111405301B true CN111405301B (zh) 2022-10-04

Family

ID=71428488

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010135464.9A Active CN111405301B (zh) 2020-03-02 2020-03-02 终端的录屏交互方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN111405301B (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112073641B (zh) * 2020-09-18 2022-04-22 深圳市众志联城科技有限公司 影像拍摄方法、装置、移动终端以及存储介质
CN112565865A (zh) * 2020-11-30 2021-03-26 维沃移动通信有限公司 图像处理方法、装置及电子设备
CN114979744B (zh) * 2021-02-25 2024-03-19 腾讯科技（深圳）有限公司 界面处理方法、装置、服务器及存储介质
CN114125341B (zh) * 2021-10-29 2024-01-23 北京达佳互联信息技术有限公司 视频处理方法、装置、电子设备、存储介质及产品
CN115278110B (zh) * 2022-07-12 2023-08-25 时空穿越(深圳)科技有限公司 基于数字孪生舱的信息处理方法、装置、***以及可读存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106686424A (zh) * 2017-01-06 2017-05-17 广州四三九九信息科技有限公司 基于移动端录屏直播方法
CN109168014A (zh) * 2018-09-26 2019-01-08 广州虎牙信息科技有限公司 一种直播方法、装置、设备及存储介质

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103686222B (zh) * 2012-08-31 2017-02-08 华为终端有限公司 虚拟空间中媒体内容控制的方法及终端、设备
CN107515759B (zh) * 2017-09-20 2020-08-04 武汉斗鱼网络科技有限公司 截屏方法、装置、电子设备及可读存储介质
CN108777812B (zh) * 2018-06-25 2021-03-23 香港乐蜜有限公司 一种录屏直播方法、装置、电子设备及存储介质

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106686424A (zh) * 2017-01-06 2017-05-17 广州四三九九信息科技有限公司 基于移动端录屏直播方法
CN109168014A (zh) * 2018-09-26 2019-01-08 广州虎牙信息科技有限公司 一种直播方法、装置、设备及存储介质

Also Published As

Publication number Publication date
CN111405301A (zh) 2020-07-10

Similar Documents

Publication Publication Date Title
CN111405301B (zh) 终端的录屏交互方法、装置、计算机设备及存储介质
CN114286173B (zh) 一种显示设备及音画参数调节方法
WO2021068558A1 (zh) 一种同声字幕翻译方法、智能电视及存储介质
WO2019086037A1 (zh) 视频素材的处理方法、视频合成方法、终端设备及存储介质
WO2021114708A1 (zh) 多人视频直播业务实现方法、装置、计算机设备
WO2018095219A1 (zh) 媒体信息处理方法和装置
CN109729429B (zh) 视频播放方法、装置、设备和介质
CN111629253A (zh) 视频处理方法及装置、计算机可读存储介质、电子设备
CN113542875B (zh) 视频处理方法、装置、电子设备以及存储介质
CN111312240A (zh) 数据控制方法、装置、电子设备及存储介质
WO2022001027A1 (zh) 网络教学中投屏画面自适应的方法以及装置
WO2021023047A1 (zh) 人脸图像的处理方法、装置、终端及存储介质
WO2021218981A1 (zh) 互动记录的生成方法、装置、设备及介质
CN109600424B (zh) 一种集成微主机、网络接入和音频采集的教室智慧终端
CN111901695B (zh) 视频内容截取方法、装置和设备及计算机存储介质
WO2019214019A1 (zh) 基于卷积神经网络的网络教学方法以及装置
WO2024001661A1 (zh) 视频合成方法、装置、设备和存储介质
CN114125498B (zh) 视频数据处理方法、装置、设备以及存储介质
WO2021114709A1 (zh) 直播视频互动方法、装置以及计算机设备
CN114095793A (zh) 一种视频播放方法、装置、计算机设备及存储介质
CN113938742B (zh) 自动投屏内容播放的控制方法、***、设备及存储介质
CN115565557A (zh) 音频采集方法、装置、显示屏幕、电子设备及存储介质
CN115270808A (zh) 显示设备和语义理解方法
CN112433698A (zh) 一种资源展示方法、装置、电子设备及存储介质
CN111580766A (zh) 一种信息显示方法、装置和信息显示***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant