CN111629240B - 多屏互动显示方法及装置 - Google Patents

多屏互动显示方法及装置 Download PDF

Info

Publication number
CN111629240B
CN111629240B CN202010374621.1A CN202010374621A CN111629240B CN 111629240 B CN111629240 B CN 111629240B CN 202010374621 A CN202010374621 A CN 202010374621A CN 111629240 B CN111629240 B CN 111629240B
Authority
CN
China
Prior art keywords
interactive
screen projection
data
audio
connection channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010374621.1A
Other languages
English (en)
Other versions
CN111629240A (zh
Inventor
龙春宇
王昊
张瑶琦
杨智慧
王孟灰
黄磊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shanghai Hode Information Technology Co Ltd
Original Assignee
Shanghai Hode Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanghai Hode Information Technology Co Ltd filed Critical Shanghai Hode Information Technology Co Ltd
Priority to CN202010374621.1A priority Critical patent/CN111629240B/zh
Publication of CN111629240A publication Critical patent/CN111629240A/zh
Priority to US17/923,226 priority patent/US11910072B2/en
Priority to PCT/CN2020/141032 priority patent/WO2021223453A1/zh
Application granted granted Critical
Publication of CN111629240B publication Critical patent/CN111629240B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4884—Data services, e.g. news ticker for displaying subtitles
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种多屏互动显示方法，该方法包括：接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道；通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型；根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。本申请还提供一种多屏互动显示装置、计算机设备以及计算机可读存储介质。本申请通过建立与音视频数据连接通道相互独立的互动数据连接通道，从而支持更多类型的投屏内容，实现了投屏的互动性。

Description

多屏互动显示方法及装置
技术领域
本申请涉及互联网技术领域，尤其涉及一种多屏互动显示方法、装置、计算机设备及计算机可读存储介质。
背景技术
随着计算机技术的发展，越来越多种类的电子设备被开发并被广泛使用。各类电子设备一般具有各自的设备特点，例如，手机的便携性更好，电视屏幕的显示效果更好，而音箱的音质效果更好。为了充分发挥不同电子设备的设备特点，电子设备可以通过投屏等方式实现显示内容在多个设备之间的切换和显示。
然而，现有的投屏技术仅支持音视频的投屏，不能展现其他互动数据，因此，投屏的内容比较单一，互动性差。
发明内容
本申请提出一种多屏互动显示方法、装置、计算机设备及计算机可读存储介质，能够解决现有技术中投屏内容单一，互动性差的问题。
首先，为实现上述目的，本申请提供一种多屏互动显示方法，所述方法包括：
接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道；通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型；根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。
在一个例子中，所述通过所述音视频数据连接通道获取音视频数据包括：获取所述投屏请求中的所述音视频数据的资源地址；透过所述音视频数据连接通道与所述资源地址进行连接，并访问所述音视频数据。
在一个例子中，所述互动数据类型包括文字、图片、弹幕、打赏、礼物中的至少一种。
在一个例子中，所述根据互动数据类型建立与所述投屏终端之间的互动数据连接通道包括：根据所述互动数据类型从预设的互动数据连接通道信息表中查询对应的互动数据连接通道类型及建立规则；根据所述建立规则建立所述互动数据连接通道类型的互动数据连接通道。
在一个例子中，所述建立规则包括通过预设协议建立数据通信链路；所述互动数据连接通道包括支持至少一种互动数据类型的互动数据进行传输的通信链路。
在一个例子中，所述方法还包括：将所述互动数据发送至互动服务器；接收由所述互动服务器返回的其他终端对于所述互动数据的互动反馈数据，并将所述互动反馈数据显示到所述目标显示窗口。
在一个例子中，所述方法还包括：将所述互动反馈数据通过所述互动连接通道发送至所述投屏终端。
此外，为实现上述目的，本申请还提供一种多屏互动显示装置，所述装置包括：
第一接收模块，用于接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道；第一显示模块，用于通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；第二接收模块，用于接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型；建立模块，用于根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；第二显示模块，用于通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。
进一步地，本申请还提出一种计算机设备，所述计算机设备包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如上述的多屏互动显示方法的步骤。
进一步地，为实现上述目的，本申请还提供一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序可被至少一个处理器执行，以使所述至少一个处理器执行如上述的多屏互动显示方法的步骤。
相较于现有技术，本申请所提出的多屏互动显示方法、装置、计算机设备及计算机可读存储介质，能够在接收投屏终端的投屏请求之后，建立音视频数据连接通道，通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；然后再接收所述投屏终端的互动请求，获取的互动数据类型，并根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；最后通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。通过建立与音视频数据连接通道相互独立的互动数据连接通道，从而支持更多类型的投屏内容，实现了投屏的互动性。
附图说明
图1是本申请一实施例的应用环境示意图；
图2是本申请多屏互动显示方法一具体实施例的流程示意图；
图3是步骤S202中的通过所述音视频数据连接通道获取音视频数据的一具体实施例的流程示意图；
图4是步骤S206中的根据互动数据类型建立与所述投屏终端之间的互动数据连接通道的一具体实施例的流程示意图；
图5是基于图2的一具体实施例的流程示意图；
图6是本申请多屏互动显示方法一具体实施例的流程效果图；
图7是本申请多屏互动显示装置一实施例的程序模块示意图；
图8是本申请计算机设备一可选的硬件架构的示意图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本申请，并不用于限定本申请。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。
需要说明的是，在本申请中涉及“第一”、“第二”等的描述仅用于描述目的，而不能理解为指示或暗示其相对重要性或者隐含指明所指示的技术特征的数量。由此，限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。另外，各个实施例之间的技术方案可以相互结合，但是必须是以本领域普通技术人员能够实现为基础，当技术方案的结合出现相互矛盾或无法实现时应当认为这种技术方案的结合不存在，也不在本申请要求的保护范围之内。
图1是本申请一实施例的应用环境示意图。参阅图1所示，所述计算机设备1与投屏终端2以及互动服务器3连接，可以接收由投屏终端2发送的投屏显示请求，建立与所述投屏终端2之间的音视频数据连接通道，并通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；然后再接收所述投屏终端2的互动请求，获取所述互动请求中的互动数据类型，根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；最后通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。在本实施例中，所述投屏终端2可以是手机、平板、便携设备或者PC机等；所述计算机设备1可作为手机、平板、便携设备、PC机或者具有显示功能的电子设备等。
实施例一
图2是本申请多屏互动显示方法一实施例的流程示意图。可以理解，本方法实施例中的流程图不用于对执行步骤的顺序进行限定。下面以计算机设备1为执行主体进行示例性描述。
如图2所示，所述多屏互动显示方法可以包括步骤S200～S208其中：
步骤S200，接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道。
步骤S202，通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口。
具体地，当用户想要将投屏终端上的音视频数据投屏到所述计算机设备1上时，那么投屏终端首先需要与所述计算机设备1进行网络连接，然后用户通过投屏终端向所述计算机设备1发送投屏请求。所述计算机设备1则接收所述投屏请求，然后根据所述投屏请求建立音视频数据连接通道。
如图3所示，在一示例性的实施例中，步骤S202中的通过所述音视频数据连接通道获取音视频数据，包括步骤S300～S302。
步骤S300，获取所述投屏请求中的所述音视频数据的资源地址。
步骤S302，透过所述音视频数据连接通道与所述资源地址进行连接，并访问所述音视频数据。
在本实施例中，所述投屏终端需要将点播、直播或者实时播放的视频数据投屏到所述计算机设备1，因此，所述投屏终端需要将待投屏的音视频数据的格式以及资源路径或地址封装成投屏请求发送给所述计算机设备1。由于音视频数据连接通道一般都支持绝大多数的音频格式和视频格式，因此所述计算机设备1接收到投屏请求后，则可以直接建立音视频数据连接通道，用于传输投屏内容中的音视频数据，然后透过所述音视频数据连接通道与所述资源地址或路径进行连接，并访问所述音视频数据，也就可以调用所述音视频数据，显示到目标显示窗口。
例如，投屏终端从资源地址A点播了视频a，当投屏终端想要将点播的视频a投屏到所述计算机设备1，那么，所述投屏终端向所述计算机设备1发送投屏请求，所述计算机设备1根据投屏请求建立音视频数据连接通道，然后再从投屏请求中获取到资源地址A，最后透过音视频数据连接通道与投屏终端连接上的资源地址A连接，然后访问并播放视频a。再例如，投屏终端直接将拍摄的音视频数据进行投屏时，那么所述计算机设备1则可以透过所述音视频数据连接通道直接与投屏终端的拍摄单元连接，并实时获取投屏终端的拍摄单元所拍摄的音视频数据，以进行播放。
步骤S204，接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型。
步骤S206，根据互动数据类型建立与所述投屏终端之间的互动数据连接通道。
具体地，在投屏的过程中，用户还可以通过投屏终端触发互动消息。当用户通过投屏终端触发互动消息时，例如，用户通过投屏终端进行弹幕或者打赏，那么，投屏终端则会向所述计算机设备1发送互动请求。所述计算机设备1接收到所述互动请求后，则获取所述互动请求中的互动数据类型。在本实施例中，所述互动数据类型包括文字、图片、弹幕、打赏、礼物中的至少一种。接着，所述计算机设备1进一步根据互动数据类型建立与所述投屏终端之间的互动数据连接通道，所述互动数据连接通道用于传输以上所述互动数据。也就是说，所述互动数据连接通道是不同于所述音视频数据连接通道的第二连接通道。
如图4所示，在一示例性的实施例中，步骤S206中的根据互动数据类型建立与所述投屏终端之间的互动数据连接通道，包括步骤S400～S402。
步骤S400，根据所述互动数据类型从预设的互动数据连接通道信息表中查询对应的互动数据连接通道类型及建立规则。
步骤S402，根据所述建立规则建立所述互动数据连接通道类型的互动数据连接通道。
具体地，所述计算机设备1与投屏终端预先配置好了包括对于不同互动数据的互动数据连接通道建立规则的互动数据连接通道信息表。因此，当所述计算机设备1获取到所述互动数据类型之后，则会根据所述互动数据类型从预设的互动数据连接通道信息表中查询对应的互动数据连接通道类型及建立规则，然后根据所述建立规则建立所述互动数据连接通道类型的互动数据连接通道。在本实施例中，所述建立规则包括通过预设协议建立数据通信链路；所述互动数据连接通道包括支持至少一种互动数据类型的互动数据进行传输的通信链路。例如，一般的音视频数连接据通道为基于UDP协议(User Datagram Protocol，用户数据报协议)，仅支持音视频数据传输的数据链路。因此，所述计算机设备1可以建立TCP协议(Transmission Control Protocol，传输控制协议)的支持弹幕，或者打赏等互动数据类型的数据链路，也就是互动数据连接通道。当然，互动数据连接通道的创建规则中包括的支持传输的数据格式则对应于互动数据类型的格式。
步骤S208，通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。
当建立好互动数据连接通道之后，所述计算机设备1则可以通过所述互动数据连接通道接收投屏终端发送的互动数据，然后将互动数据显示到所述目标显示窗口的视频播放画面。
如图5所示，在一示例性的实施例中，所述多屏互动显示方法除了包括步骤S200～S208，还可以包括步骤S500～S502。
步骤S500，将所述互动数据发送至互动服务器。
步骤S502，接收由所述互动服务器返回的其他终端对于所述互动数据的互动反馈数据，并将所述互动反馈数据显示到所述目标显示窗口。
具体地，由于多个终端设备对于同一播放视频进行的互动消息需要相互传递，因此，所述计算机设备1获取到投屏终端发送的互动数据之后，还会转发至互动服务器，其中，所述互动服务器存储同一视频的所有互动数据，所述互动服务器接收到所述互动数据后还会推送到其他视频播放终端。然后，所述计算机设备1还能够接收所述互动服务器上返回的其他终端对于所述互动数据的互动反馈数据，并将所述互动反馈数据显示到所述目标显示窗口。
当然，所述计算机设备1将所述互动反馈数据显示到所述目标显示窗口之后，还会将所述互动反馈数据通过所述互动连接通道发送至所述投屏终端。
如图6所示，是一具体实施例的流程效果图。其中：首先，用户在小屏手机上触发互动，然后小屏手机根据用户触发的互动封装互动数据；小屏手机将封装的互动数据通过互动数据连接通道发送给大屏设备(即计算机设备1)。接着，大屏设备接收并解析互动数据，并将互动数据展示到视频播放窗口。同时，大屏设备将互动数据发送至后台互动***(即互动服务器)，后台互动***接收、解析、审查及处理互动数据。后台互动***也就是对互动数据进行检查，对于不合格的互动数据进行适当修改或删除，对于合格的互动数据则进行存储。然后大屏设备还会判断所述后台互动***是否返回反馈数据。当后台互动***返回反馈数据时，大屏设备则会对反馈数据进行显示处理；同时还会将反馈数据通过互动数据连接通道发送给小屏手机。最后，小屏手机接收反馈数据，然后等待用户发起新的互动。
综上所述，本实施例所提出的多屏互动显示方法能够在接收投屏终端的投屏请求之后，建立音视频数据连接通道，通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；然后再接收所述投屏终端的互动请求，获取的互动数据类型，并根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；最后通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。本申请通过建立与音视频数据连接通道相互独立的互动数据连接通道，对比于目前小屏设备向大屏设备进行投屏时，一般都是以镜像的方式投屏或者小屏设备直接将音视频数据发送至大屏设备进行播放的方式，能够支持更多类型的投屏内容，实现了投屏的互动性。
实施例二
图7示意性示出了根据本申请实施例二的多屏互动显示装置的框图，该多屏互动显示装置可以被分割成一个或多个程序模块，一个或者多个程序模块被存储于存储介质中，并由一个或多个处理器所执行，以完成本申请实施例。本申请实施例所称的程序模块是指能够完成特定功能的一系列计算机程序指令段，以下描述将具体介绍本实施例中各程序模块的功能。
如图7所示，该多屏互动显示装置400可以包括第一接收模块410、第一显示模块420、第二接收模块430、建立模块440和第二显示模块450，其中：
第一接收模块410，用于接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道。
第一显示模块420，用于通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口。
第二接收模块430，用于接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型。
建立模块440，用于根据互动数据类型建立与所述投屏终端之间的互动数据连接通道。
第二显示模块450，用于通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。
在示例性的实施例中，第一显示模块420，还用于：获取所述投屏请求中的所述音视频数据的资源地址；透过所述音视频数据连接通道与所述资源地址进行连接，并访问所述音视频数据。
在示例性的实施例中，建立模块430，还用于：根据所述互动数据类型从预设的互动数据连接通道信息表中查询对应的互动数据连接通道类型及建立规则；根据所述建立规则建立所述互动数据连接通道类型的互动数据连接通道。其中，所述互动数据类型包括文字、图片、弹幕、打赏、礼物中的至少一种；所述建立规则包括通过预设协议建立数据通信链路；所述互动数据连接通道包括支持至少一种互动数据类型的互动数据进行传输的通信链路。
在示例性的实施例中，第二显示模块450，还用于：将所述互动数据发送至互动服务器；接收由所述互动服务器返回的其他终端对于所述互动数据的互动反馈数据，并将所述互动反馈数据显示到所述目标显示窗口；以及将所述互动反馈数据通过所述互动连接通道发送至所述投屏终端。
实施例三
图8示意性示出了根据本申请实施例三的适于实现多屏互动显示方法的计算机设备1的硬件架构示意图。本实施例中，计算机设备1是一种能够按照事先设定或者存储的指令，自动进行数值计算和/或信息处理的设备。例如，可以是具有网关功能的机架式服务器、刀片式服务器、塔式服务器或机柜式服务器(包括独立的服务器，或者多个服务器所组成的服务器集群)等。如图8所示，计算机设备1至少包括但不限于：可通过***总线相互通信链接存储器510、处理器520、网络接口530。其中：
存储器510至少包括一种类型的计算机可读存储介质，可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中，存储器510可以是计算机设备1的内部存储模块，例如该计算机设备1的硬盘或内存。在另一些实施例中，存储器510也可以是计算机设备1的外部存储设备，例如该计算机设备1上配备的插接式硬盘，智能存储卡(SmartMedia Card，简称为SMC)，安全数字(Secure Digital，简称为SD)卡，闪存卡(Flash Card)等。当然，存储器510还可以既包括计算机设备1的内部存储模块也包括其外部存储设备。本实施例中，存储器510通常用于存储安装于计算机设备1的操作***和各类应用软件，例如多屏互动显示方法的程序代码等。此外，存储器510还可以用于暂时地存储已经输出或者将要输出的各类数据。
处理器520在一些实施例中可以是中央处理器(Central Processing Unit，简称为CPU)、控制器、微控制器、微处理器、或其他数据处理芯片。该处理器520通常用于控制计算机设备1的总体操作，例如执行与计算机设备1进行数据交互或者通信相关的控制和处理等。本实施例中，处理器520用于运行存储器510中存储的程序代码或者处理数据。
网络接口530可包括无线网络接口或有线网络接口，该网络接口530通常用于在计算机设备1与其他计算机设备之间建立通信链接。例如，网络接口530用于通过网络将计算机设备1与外部终端相连，在计算机设备1与外部终端之间的建立数据传输通道和通信链接等。网络可以是企业内部网(Intranet)、互联网(Internet)、全球移动通讯***(GlobalSystem of Mobile communication，简称为GSM)、宽带码分多址(Wideband Code DivisionMultiple Access，简称为WCDMA)、4G网络、5G网络、蓝牙(Bluetooth)、Wi-Fi等无线或有线网络。
需要指出的是，图8仅示出了具有部件510-530的计算机设备，但是应理解的是，并不要求实施所有示出的部件，可以替代的实施更多或者更少的部件。
在本实施例中，存储于存储器510中的多屏互动显示方法的程序代码还可以被分割为一个或者多个程序模块，并由一个或多个处理器(本实施例为处理器520)所执行，以完成本申请实施例。
实施例四
本实施例还提供一种计算机可读存储介质，计算机可读存储介质其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
从线程池提取预设数量的服务请求；根据配置规则将每一条服务请求配置为组装任务，其中，组装任务包括任务属性；根据所述任务属性将不同的组装任务分配到不同的任务处理管道进行处理，得到对应的反馈结果；将反馈结果分别返回给对应的请求方。
本实施例中，计算机可读存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如，SD或DX存储器等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等。在一些实施例中，计算机可读存储介质可以是计算机设备的内部存储单元，例如该计算机设备的硬盘或内存。在另一些实施例中，计算机可读存储介质也可以是计算机设备的外部存储设备，例如该计算机设备上配备的插接式硬盘，智能存储卡(Smart Media Card，简称为SMC)，安全数字(Secure Digital，简称为SD)卡，闪存卡(Flash Card)等。当然，计算机可读存储介质还可以既包括计算机设备的内部存储单元也包括其外部存储设备。本实施例中，计算机可读存储介质通常用于存储安装于计算机设备的操作***和各类应用软件，例如实施例中服务平台的组件管理方法的程序代码等。此外，计算机可读存储介质还可以用于暂时地存储已经输出或者将要输出的各类数据。
显然，本领域的技术人员应该明白，上述的本申请实施例的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个的计算装置上，或者分布在多个计算装置所组成的网络上，可选地，它们可以用计算装置可执行的程序代码来实现，从而，可以将它们存储在存储装置中由计算装置来执行，并且在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本申请实施例不限制于任何特定的硬件和软件结合。
以上仅为本申请实施例的优选实施例，并非因此限制本申请实施例的专利范围，凡是利用本申请实施例说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本申请实施例的专利保护范围内。

Claims (9)

1.一种多屏互动显示方法，其特征在于，所述方法包括：
接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道；
通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；
接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型；
根据互动数据类型建立与所述投屏终端之间的互动数据连接通道；
其中，所述根据互动数据类型建立与所述投屏终端之间的互动数据连接通道包括：
根据所述互动数据类型从预设的互动数据连接通道信息表中查询对应的互动数据连接通道类型及建立规则；
根据所述建立规则建立所述互动数据连接通道类型的互动数据连接通道，所述建立规则包括通过预设协议建立数据通信链路；
通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。
2.如权利要求1所述的多屏互动显示方法，其特征在于，所述通过所述音视频数据连接通道获取音视频数据包括：
获取所述投屏请求中的所述音视频数据的资源地址；
透过所述音视频数据连接通道与所述资源地址进行连接，并访问所述音视频数据。
3.如权利要求1所述的多屏互动显示方法，其特征在于，所述互动数据类型包括文字、图片、弹幕、打赏、礼物中的至少一种。
4.如权利要求1所述的多屏互动显示方法，其特征在于，所述互动数据连接通道包括支持至少一种互动数据类型的互动数据进行传输的通信链路。
5.如权利要求1所述的多屏互动显示方法，其特征在于，所述方法还包括：
将所述互动数据发送至互动服务器；
接收由所述互动服务器返回的其他终端对于所述互动数据的互动反馈数据，并将所述互动反馈数据显示到所述目标显示窗口。
6.如权利要求5所述的多屏互动显示方法，其特征在于，所述方法还包括：将所述互动反馈数据通过所述互动连接通道发送至所述投屏终端。
7.一种多屏互动显示装置，其特征在于，所述装置包括：
第一接收模块，用于接收投屏终端的投屏请求，建立与所述投屏终端之间的音视频数据连接通道；
第一显示模块，用于通过所述音视频数据连接通道获取音视频数据并显示到目标显示窗口；
第二接收模块，用于接收所述投屏终端的互动请求，获取所述互动请求中的互动数据类型；
建立模块，用于根据互动数据类型建立与所述投屏终端之间的互动数据连接通道，包括：
根据所述互动数据类型从预设的互动数据连接通道信息表中查询对应的互动数据连接通道类型及建立规则；
根据所述建立规则建立所述互动数据连接通道类型的互动数据连接通道，所述建立规则包括通过预设协议建立数据通信链路；
第二显示模块，用于通过所述互动数据连接通道接收所述投屏终端的互动数据，将所述互动数据显示到所述目标显示窗口。
8.一种计算机设备，其特征在于，所述计算机设备包括存储器、处理器，所述存储器上存储有可在所述处理器上运行的计算机程序，所述计算机程序被所述处理器执行时实现如权利要求1-6任一项所述的多屏互动显示方法的步骤。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质存储有计算机程序，所述计算机程序可被至少一个处理器执行，以使所述至少一个处理器执行如权利要求1-6中任一项所述的多屏互动显示方法的步骤。
CN202010374621.1A 2020-05-06 2020-05-06 多屏互动显示方法及装置 Active CN111629240B (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN202010374621.1A CN111629240B (zh) 2020-05-06 2020-05-06 多屏互动显示方法及装置
US17/923,226 US11910072B2 (en) 2020-05-06 2020-12-29 Multi-screen interactive display method and apparatus
PCT/CN2020/141032 WO2021223453A1 (zh) 2020-05-06 2020-12-29 多屏互动显示方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010374621.1A CN111629240B (zh) 2020-05-06 2020-05-06 多屏互动显示方法及装置

Publications (2)

Publication Number Publication Date
CN111629240A CN111629240A (zh) 2020-09-04
CN111629240B true CN111629240B (zh) 2021-08-10

Family

ID=72261130

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010374621.1A Active CN111629240B (zh) 2020-05-06 2020-05-06 多屏互动显示方法及装置

Country Status (3)

Country Link
US (1) US11910072B2 (zh)
CN (1) CN111629240B (zh)
WO (1) WO2021223453A1 (zh)

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111629240B (zh) * 2020-05-06 2021-08-10 上海幻电信息科技有限公司 多屏互动显示方法及装置
CN112732212A (zh) * 2020-12-31 2021-04-30 咪咕音乐有限公司 显示方法、电子设备及存储介质
CN114827742B (zh) * 2021-01-29 2024-04-30 抖音视界有限公司 直播互动方法、装置、计算机设备及计算机可读介质
CN114296848B (zh) * 2021-12-23 2024-03-19 深圳市宝视达光电有限公司 会议一体机、屏幕切分显示方法以及存储装置
CN114567810A (zh) * 2022-02-28 2022-05-31 深圳创维－Rgb电子有限公司 投屏交互方法、装置、投屏器及存储介质
CN114827690B (zh) * 2022-03-30 2023-07-25 北京奇艺世纪科技有限公司 一种网络资源显示方法、装置及***
CN115022694B (zh) * 2022-06-27 2023-10-27 北京奇艺世纪科技有限公司 一种投屏时间统计方法、装置、***、后台服务器及介质
CN115174537B (zh) * 2022-06-30 2023-07-21 重庆长安汽车股份有限公司 一种车机交互的双屏互动方法及***

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103067383A (zh) * 2012-12-27 2013-04-24 华为终端有限公司 无线上网设备和多媒体通信方法
CN108829482A (zh) * 2018-06-20 2018-11-16 广州视源电子科技股份有限公司 数据传输协作控制***、方法、存储介质及交互设备
CN110602805A (zh) * 2019-09-30 2019-12-20 联想(北京)有限公司 信息处理方法、第一电子设备和计算机***

Family Cites Families (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8281339B1 (en) * 2004-01-12 2012-10-02 United Video Properties, Inc. Customizable flip and browse overlays in an interactive television system
US20100263005A1 (en) * 2009-04-08 2010-10-14 Eric Foster White Method and system for egnaging interactive web content
US8966131B2 (en) 2012-01-06 2015-02-24 Qualcomm Incorporated System method for bi-directional tunneling via user input back channel (UIBC) for wireless displays
CN103581704B (zh) * 2012-07-31 2017-07-07 华为技术有限公司 实现多屏互动的方法和装置
CN105245801A (zh) * 2015-09-24 2016-01-13 天脉聚源（北京）科技有限公司 一种传送电视互动***互动信号的方法
CN105791291B (zh) * 2016-03-02 2019-09-03 腾讯科技（深圳）有限公司 网络应用的显示控制方法、显示中实时更新的方法和装置
CN105828171A (zh) * 2016-03-14 2016-08-03 乐视网信息技术（北京）股份有限公司 智能互联方法和智能终端
US10142699B2 (en) * 2016-03-18 2018-11-27 Google Llc Systems and methods for providing interactive content
US10110968B2 (en) * 2016-04-19 2018-10-23 Google Llc Methods, systems and media for interacting with content using a second screen device
CN108616764A (zh) * 2016-12-09 2018-10-02 中兴通讯股份有限公司 一种控制方法及设备
CN106792055A (zh) * 2016-12-28 2017-05-31 福建星网视易信息***有限公司 实时投屏方法、设备及***
CN108668027A (zh) * 2018-05-22 2018-10-16 武汉卡比特信息有限公司 手机互联时分屏投射到计算机类终端并反向控制的***及方法
CN108769814B (zh) * 2018-06-01 2022-02-01 腾讯科技（深圳）有限公司 视频互动方法、装置、终端及可读存储介质
CN109474670A (zh) * 2018-10-22 2019-03-15 中国人民解放军战略支援部队航天工程大学 一种信息交互方法及***
CN109996097B (zh) * 2019-03-12 2022-01-04 广州虎牙信息科技有限公司 一种投屏方法、***及存储装置
CN110109636B (zh) * 2019-04-28 2022-04-05 华为技术有限公司 投屏方法、电子设备以及***
CN110392226A (zh) * 2019-06-19 2019-10-29 视联动力信息技术股份有限公司 一种直播实现方法和装置
CN110597474B (zh) * 2019-09-12 2022-03-25 联想(北京)有限公司 信息处理方法及电子设备
CN110620953A (zh) * 2019-10-08 2019-12-27 赛诺贝斯（北京）营销技术股份有限公司 一种多屏互动方法、装置及***
CN110913013B (zh) * 2019-12-06 2022-07-29 贵州电网有限责任公司 多屏互动方法及***
CN111629240B (zh) * 2020-05-06 2021-08-10 上海幻电信息科技有限公司 多屏互动显示方法及装置
CN111309279B (zh) * 2020-05-06 2020-11-24 上海幻电信息科技有限公司 多屏互动显示方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103067383A (zh) * 2012-12-27 2013-04-24 华为终端有限公司 无线上网设备和多媒体通信方法
CN108829482A (zh) * 2018-06-20 2018-11-16 广州视源电子科技股份有限公司 数据传输协作控制***、方法、存储介质及交互设备
CN110602805A (zh) * 2019-09-30 2019-12-20 联想(北京)有限公司 信息处理方法、第一电子设备和计算机***

Also Published As

Publication number Publication date
CN111629240A (zh) 2020-09-04
US11910072B2 (en) 2024-02-20
WO2021223453A1 (zh) 2021-11-11
US20230188813A1 (en) 2023-06-15

Similar Documents

Publication Publication Date Title
CN111629240B (zh) 多屏互动显示方法及装置
CN111309279B (zh) 多屏互动显示方法及装置
CN111726399B (zh) Docker容器安全访问方法及装置
US11589102B2 (en) Screen projection method and system
CN104918105B (zh) 媒体文件的多屏播放方法、设备及***
US11909812B2 (en) Application control method and apparatus, electronic device, and storage medium
CN104539977A (zh) 直播预览方法及装置
EP3185545A1 (en) Video conference control method and system
CN112073754B (zh) 一种云游戏投屏方法、装置、计算机设备、计算机可读存储介质及云游戏投屏交互***
CN112437318A (zh) 一种内容显示方法、装置、***及存储介质
CN112486620A (zh) 跨进程离屏渲染方法、装置、电子设备及存储介质
CN103647982A (zh) 广告资源获取方法和装置以及广告资源发送方法和装置
CN112911320A (zh) 一种直播方法、装置、计算机设备和存储介质
CN110677443A (zh) 数据发送和接收方法、发送端、接收端、***及存储介质
CN111698281A (zh) 一种资源下载方法、装置、电子设备及存储介质
CN106792202B (zh) 机顶盒数据适配方法、装置以及***
CN113259339B (zh) 一种基于udp的数据传输方法、***及电子设备
CN113961162A (zh) 投屏控制方法、投屏发送端、投屏接收端和投屏***
KR101964661B1 (ko) 트래픽 감소를 위한 ｖｒ 영상의 공유 시스템
CN113709541A (zh) 基于web的多终端设备互动方法、***、终端设备
CN114302250B (zh) 一种资源处理方法、装置、***、设备及存储介质
CN113271502B (zh) 基于视频弹幕的数据显示方法、装置以及计算机设备
CN114942812B (zh) 多媒体信息共享方法、装置和电子设备
CN115002101B (zh) 云会议的文件共享方法及相关装置
CN115037979B (zh) 投屏方法及相关设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant