CN114679595A - 一种互动教学信息的多视窗处理方法及*** - Google Patents

一种互动教学信息的多视窗处理方法及*** Download PDF

Info

Publication number
CN114679595A
CN114679595A CN202210173789.5A CN202210173789A CN114679595A CN 114679595 A CN114679595 A CN 114679595A CN 202210173789 A CN202210173789 A CN 202210173789A CN 114679595 A CN114679595 A CN 114679595A
Authority
CN
China
Prior art keywords
data
window
video
file
display processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210173789.5A
Other languages
English (en)
Inventor
严宇峰
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuhan Huajin Technology Co ltd
Original Assignee
Wuhan Huajin Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuhan Huajin Technology Co ltd filed Critical Wuhan Huajin Technology Co ltd
Priority to CN202210173789.5A priority Critical patent/CN114679595A/zh
Publication of CN114679595A publication Critical patent/CN114679595A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
    • G09B5/14—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Educational Administration (AREA)
  • Physics & Mathematics (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Databases & Information Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明一方面提供了互动教学信息的多视窗处理方法，互动教学信息的多视窗处理方法能够实施在一个视频显示处理端。视频显示处理端能够连接多个用户端。互动教学信息的多视窗处理方法包括步骤：生成第一类视窗数据、生成第二类视窗数据、生成第三类视窗数据、生成第四类视窗数据、生成第五类视窗数据、生成教学显示视窗文件、控制信息控制教学显示视窗文件、向外发送本地音视频文件。用户以所见即所得的多视窗操作。完成本地，远程教学/会议活动。教学/会议活动用户操作数据，各类音视频录播数据可存储，点播，直播和教学大数据分析。同时，本发明还提供了一种互动教学信息的多视窗处理***。

Description

一种互动教学信息的多视窗处理方法及***
技术领域
本发明涉及多屏互动、交互、多视窗、图像处理设备、智慧教室、网络教学、图像处理设备、图像处理方法和程序技术领域领域。本发明具体涉及一种互动教学信息的多视窗处理方法及***。
背景技术
在多媒体教室,智慧教室,线上线下混合教学,会议过程中,用户需要对于PC电脑，云桌面，笔记本，苹果、安卓、WINDOWS无线手持终端,PPT、PDF、图片、视频等文件，白板，网络摄像机，线上教学资源，录播主机等教学硬件设备，软件资源实现统一接入，操作及管理。
目前有以下几种方法：现有技术1(CN201910591526。4)本发明公开了一种多屏互动的网络教学方法,方法包括:1,对教师终端及学生终端进行权限配置；2,控制单元接收多个网络教学视频源信号,多个网络教学视频源为关联视频源；根据关联视频源的内容对视频进行分类,根据多个网络教学视频的内容对网络教学视频源进行重要等级排序；获取多个关联的终端显示设备的预设优先级与视频源重要等级排序的对应关系表项,根据对应关系表项,将各个网络教学视频源分别通过与各网络教学视频源重要等级排序对应优先级的终端显示设备显示；3,教师终端按照班级群组查看该组学生终端的显示情况。本发明的教师终端可以将学生终端的内容投放到投影模块上,便于随堂作业的针对性讲解,且操作方便, 提高了操作效率。
现有技术2(CN109243226A)本发明涉及多媒体教学领域,具体提供一种多屏互动教学***及方法。一种多屏互动教学***,其特征在于:包括教学管理平台,教师终端,学生终端, 投影模块和服务器；所述服务器与所述教学管理平台连接；所述教学管理平台包括教学资源管理模块和用户权限管理模块；所述教学资源管理模块包括课件管理单元,所述课件管理单元用于存放教师的课件；所述用户管理模块包括权限管理单元和用户分组单元；所述权限管理单元用于对所述教师终端及所述学生终端进行权限配置；所述教师终端按照班级群组查看该组学生终端的显示情况；所述教师终端获取学生终端的显示画面发送至投影模块进行显示。
现有技术3(CN201710626865。2)本发明公开了一种课上多屏互动教学操作方法和***,方法包括把需要被呈现的内容模块化,由PC端调度模块对小窗口进行统一管理,整个大屏幕的内容显示完成后,程序将根据需要将大屏幕内容传输到对应的学生平板端,***包括调度模块,小窗口显示模块,传输模块,显示模块四个模块。本发明实现了将一个屏幕分为多个屏幕的目的,大大减少了不必要时间的浪费,提高了教师的上课效率,解决了坐在后排的学生看不清大屏幕的问题,更使课堂上的互动变得丰富有趣,从而提高了学生的学习效率。
综上所述，现有技术的多媒体互动教学方式和***主要采用下列几种方法：第一种是：通过录播***，摄像机进行互动教学。第二种是：通过矩阵，拼接器设备实现互动教学。第三种是安装应用软件，通过软件方式实现互动教学。
由此可知，现有技术中多媒体互动教学方式和***还存在的缺点为：用户体验差。视窗数量最多4个，而且不能实现预览，拖动，缩放，批注等操作；接入教学资源少、只有手机，PC；操作复杂，老师学生的设备需要安装应用程序，才能完成交互；扩展性差，无法完成多间教室，或者线上线下教学活动；缺少录播功能，或者需要额外配置录播主机实现资源记录；此外，现有技术互动教学***大多配备指定软件平台，软件平台操作各异，数据互不相通，为使用者带来额外工作量，同样给***的安装、管理、维护带来不便。
发明内容
本发明的目的是提供一种互动教学信息的多视窗处理方法，其可操作性强、互动性高在多媒体教室,智慧教室,线上线下完成混合教学。实现用户对于PC电脑，云桌面，笔记本，苹果、安卓、WINDOWS无线手持终端,PPT、PDF、图片、视频等文件，白板，网络摄像机，线上教学资源，录播主机等教学硬件设备，软件资源实现统一接入、操作及管理。用户以所见即所得的多视窗操作。完成本地，远程教学/会议活动。教学/会议活动用户操作数据，各类音视频录播数据可存储，点播，直播和教学大数据分析。
本发明中的一种互动教学信息的多视窗处理***。通过视频显示处理端和多个用户端的设置，用户以所见即所得的多视窗操作。完成本地，远程教学/会议活动。教学/会议活动用户操作数据，各类音视频录播数据可存储，点播，直播和教学大数据分析。
本发明一个方面，提供了互动教学信息的多视窗处理方法，互动教学信息的多视窗处理方法能够实施在一个视频显示处理端。视频显示处理端能够连接多个用户端。互动教学信息的多视窗处理方法包括步骤：
步骤S101，视频显示处理端从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。根据第一音频数据和第一视频数据生成第一类视窗数据。
步骤S102，视频显示处理端从用户端接收苹果AIRPLAY无线投屏的流媒体数据。根据流媒体数据生成第二类视窗数据。
步骤S103，视频显示处理端从用户端接收安卓***移动设备或WIN10***处理设备的 MIRACAST无线投屏数据。根据无线投屏数据生成第三类视窗数据。
步骤S104，视频显示处理端从用户端接收GB28181、ONVIF协议的网络摄像机的输出视频数据。根据输出视频数据生成第四类视窗数据。
步骤S105，视频显示处理端从用户端接收且解析PPT、PDF、WORD文件以及其中的视频文件和图片文件数据，获取解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据。根据解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据生成第五类视窗数据。
步骤S106，视频显示处理端根据第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据，在本地生成教学显示视窗文件。
步骤S107，视频显示处理端从用户端的处理器接收用户端的控制信息。根据用户端的控制信息控制教学显示视窗文件。
步骤S108，视频显示处理端能够采集本地音视频文件且将本地音视频文件发送到用户端。
在本发明互动教学信息的多视窗处理方法的一种实施方式中，互动教学信息的多视窗处理方法能够实施在多个视频显示处理端。多个视频显示处理端之间网络连接。任一个视频显示处理端均能够采集本地音视频文件且将本地音视频文件发送到其他视频显示处理端。其他视频显示处理端能够在本地显示和播放音视频文件。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，视频显示处理端的显示界面窗口能够同时显示、预览且拖动，缩放，滑动包括8个以上的视窗窗口。8个以上的视窗窗口包括第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据所生成的视窗窗口。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，视频显示处理端能够存储教学显示视窗文件且能够将教学显示视窗文件向远程推流。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，步骤S101中视频显示处理端通过高清HDMI图像数据采集接口从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。高清HDMI图像数据采集接口支持最高1080P60HZ输出的台式机、笔记本的视音频数据采集。高清HDMI图像数据采集接口支持HDMI高清的图像采集文件且支持对外部音频源的融合采集。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，步骤S107中，用户端的处理器在本地应用加载WINDOWS操作***、安卓操作***、苹果操作***。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，任一个视频显示处理端获取其他视频显示处理端所发送的本地音视频文件后。判断本地音视频文件中是否具有 MIRACAST、AIRPLAY或WIDI协议，若存在识别其文件中的标识PIN码是否正确，若是，则执行协议并连接且获取本地音视频文件且在本地显示。
本发明的另一个方面，提供了一种互动教学信息的多视窗处理***，其包括一个视频显示处理端和多个用户端。视频显示处理端能够连接多个用户端。视频显示处理端配置为：
从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。根据第一音频数据和第一视频数据生成第一类视窗数据。
从用户端接收苹果AIRPLAY无线投屏的流媒体数据。根据流媒体数据生成第二类视窗数据。
从用户端接收安卓***移动设备或WIN10***处理设备的MIRACAST无线投屏数据。根据无线投屏数据生成第三类视窗数据。
从用户端接收GB28181、ONVIF协议的网络摄像机的输出视频数据。根据输出视频数据生成第四类视窗数据。
从用户端接收且解析PPT、PDF、WORD文件以及其中的视频文件和图片文件数据，获取解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据。根据解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据生成第五类视窗数据。
根据第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据，在本地生成教学显示视窗文件。
从用户端的处理器接收用户端的控制信息。根据用户端的控制信息控制教学显示视窗文件。
能够采集本地音视频文件且将本地音视频文件发送到用户端。
在本发明互动教学信息的多视窗处理***的另一种实施方式中，视频显示处理端为多个视频显示处理端。多个视频显示处理端之间网络连接。任一个视频显示处理端均能够采集本地音视频文件且将本地音视频文件发送到其他视频显示处理端。其他视频显示处理端能够在本地显示和播放音视频文件。
视频显示处理端的显示界面窗口能够同时显示、预览且拖动，缩放，滑动包括8个以上的视窗窗口。8个以上的视窗窗口包括第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据所生成的视窗窗口。视频显示处理端能够存储教学显示视窗文件且能够将教学显示视窗文件向远程推流。
在本发明互动教学信息的多视窗处理***的另一种实施方式中，视频显示处理端还配置为：通过高清HDMI图像数据采集接口从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。
高清HDMI图像数据采集接口支持最高1080P60HZ输出的台式机、笔记本的视音频数据采集。高清HDMI图像数据采集接口支持HDMI高清的图像采集文件且支持对外部音频源的融合采集。用户端的处理器在本地应用加载WINDOWS操作***、安卓操作***、苹果操作***。
任一个视频显示处理端获取其他视频显示处理端所发送的本地音视频文件后。判断本地音视频文件中是否具有MIRACAST、AIRPLAY或WIDI协议，若存在识别其文件中的标识PIN码是否正确，若是，则执行协议并连接且获取本地音视频文件且在本地显示。
下文将以明确易懂的方式，结合附图对互动教学信息的多视窗处理方法及***的特性、技术特征、优点及其实现方式予以进一步说明。
附图说明
图1是用于说明在本发明一种实施方式中，互动教学信息的多视窗处理方法的流程示意图。
图2是用于说明在本发明一种实施方式中，互动教学信息的多视窗处理***的组成示意图。
图3是用于说明在本发明另一种实施方式中，互动教学信息的多视窗处理***的组成示意图。
具体实施方式
为了对发明的技术特征、目的和效果有更加清楚的理解，现对照附图说明本发明的具体实施方式，在各图中相同的标号表示结构相同或结构相似但功能相同的部件。
在本文中，“示意性”表示“充当实例、例子或说明”，不应将在本文中被描述为“示意性”的任何图示、实施方式解释为一种更优选的或更具优点的技术方案。为使图面简洁，各图中只示意性地表示出了与本示例性实施例相关的部分，它们并不代表其作为产品的实际结构及真实比例。
如图1、2所示，本发明一方面提供了互动教学信息的多视窗处理方法，互动教学信息的多视窗处理方法能够实施在一个视频显示处理端201。视频显示处理端201能够连接多个用户端。互动教学信息的多视窗处理方法包括步骤：
步骤S101，生成第一类视窗数据。
本步骤中，视频显示处理端201从第一类型用户端101，即用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。根据第一音频数据和第一视频数据生成第一类视窗数据。第一类型用户端101为台式机或笔记本使用者的用户。
步骤S102，生成第二类视窗数据。
本步骤中，视频显示处理端201从第二类型用户端102，即用户端接收苹果AIRPLAY无线投屏的流媒体数据。根据流媒体数据生成第二类视窗数据。第二类型用户端102为移动终端使用者的用户。
步骤S103，生成第三类视窗数据。
本步骤中，视频显示处理端201从第三类型用户端103，即用户端接收安卓***移动设备或WIN10***处理设备的MIRACAST无线投屏数据。根据无线投屏数据生成第三类视窗数据。第三类型用户端103为使用安卓***移动设备或WIN10***处理设备的用户。
步骤S104，生成第四类视窗数据。
本步骤中，视频显示处理端201从第四类型用户端104，即用户端接收GB28181、ONVIF 协议的网络摄像机的输出视频数据。根据输出视频数据生成第四类视窗数据。第四类型用户端104为GB28181、ONVIF协议的网络摄像机或录制设备的用户。
步骤S105，生成第五类视窗数据。
本步骤中，视频显示处理端201从第五类型用户端105，即用户端接收且解析PPT、PDF、WORD文件以及其中的视频文件和图片文件数据，获取解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据。根据解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据生成第五类视窗数据。第五类型用户端105为在笔记本、台式机或移动终端上使用文档文件的用户。
步骤S106，生成教学显示视窗文件。
本步骤中，视频显示处理端201根据第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据，在本地生成教学显示视窗文件，根据成教学显示视窗文件在本地显示屏显示其视窗301。
步骤S107，控制信息控制教学显示视窗文件。
本步骤中，视频显示处理端201从用户端的处理器接收用户端的控制信息。根据用户端的控制信息控制教学显示视窗文件。
步骤S108，向外发送本地音视频文件。
本步骤中，视频显示处理端201能够采集本地音视频文件且将本地音视频文件发送到用户端。
再此特别指出，本说明书中主要以完成在线上/线下教学/会议活动的名义进行阐述本发明的实施，但可以理解的是，本发明的方法和***还可以作为其他网络线上/线下混合交流场景的使用。本发明涉及给予多媒体教学、网络教学、在线培训、线上会议、应急指挥、金融***等教学活动或会议过程的操作方法，***以及计算机程序产品，在多媒体教学、网络教学、在线培训、线上会议、应急指挥、金融***等教学内容或会议内容的实时操控、各类数据的存储、点播、直播和教学大数据。
如图3所示，在本发明互动教学信息的多视窗处理方法的一种实施方式中，互动教学信息的多视窗处理方法能够实施在多个视频显示处理端201、202、203、202、203。每个视频显示处理端201、202、203对应一个显示屏。分别显示视窗301、302和303。多个视频显示处理端201、202、203、202、203通过云存储或云服务401连接。
多个视频显示处理端201、202、203之间网络连接。任一个视频显示处理端201均能够采集本地音视频文件且将本地音视频文件发送到其他视频显示处理端201。其他视频显示处理端201能够在本地显示和播放音视频文件。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，视频显示处理端201 的显示界面窗口能够同时显示、预览且拖动，缩放，滑动包括8个以上的视窗窗口。8个以上的视窗窗口包括第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据所生成的视窗窗口。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，视频显示处理端201 能够存储教学显示视窗文件且能够将教学显示视窗文件向远程推流。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，步骤S101中视频显示处理端201通过高清HDMI图像数据采集接口从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。高清HDMI图像数据采集接口支持最高1080P60HZ输出的台式机、笔记本的视音频数据采集。高清HDMI图像数据采集接口支持HDMI高清的图像采集文件且支持对外部音频源的融合采集。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，步骤S107中，用户端的处理器在本地应用加载WINDOWS操作***、安卓操作***、苹果操作***。
在本发明互动教学信息的多视窗处理方法的另一种实施方式中，任一个视频显示处理端201获取其他视频显示处理端201所发送的本地音视频文件后。判断本地音视频文件中是否具有MIRACAST、AIRPLAY或WIDI协议，若存在识别其文件中的标识PIN码是否正确，若是，则执行协议并连接且获取本地音视频文件且在本地显示。
本发明的另一个方面，提供了一种互动教学信息的多视窗处理***，其包括一个视频显示处理端201和多个用户端。视频显示处理端201能够连接多个用户端。视频显示处理端201配置为：
从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。根据第一音频数据和第一视频数据生成第一类视窗数据。
从用户端接收苹果AIRPLAY无线投屏的流媒体数据。根据流媒体数据生成第二类视窗数据。
从用户端接收安卓***移动设备或WIN10***处理设备的MIRACAST无线投屏数据。根据无线投屏数据生成第三类视窗数据。
从用户端接收GB28181、ONVIF协议的网络摄像机的输出视频数据。根据输出视频数据生成第四类视窗数据。
从用户端接收且解析PPT、PDF、WORD文件以及其中的视频文件和图片文件数据，获取解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据。根据解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据生成第五类视窗数据。
根据第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据，在本地生成教学显示视窗文件。
从用户端的处理器接收用户端的控制信息。根据用户端的控制信息控制教学显示视窗文件。
能够采集本地音视频文件且将本地音视频文件发送到用户端。
在本发明互动教学信息的多视窗处理***的另一种实施方式中，视频显示处理端201 为多个视频显示处理端201、202、203。多个视频显示处理端201、202、203之间网络连接。任一个视频显示处理端201均能够采集本地音视频文件且将本地音视频文件发送到其他视频显示处理端201。其他视频显示处理端201能够在本地显示和播放音视频文件。
视频显示处理端201的显示界面窗口能够同时显示、预览且拖动，缩放，滑动包括8个以上的视窗窗口。8个以上的视窗窗口包括第一类视窗数据、第二类视窗数据、第三类视窗数据、第四类视窗数据和第五类视窗数据所生成的视窗窗口。视频显示处理端201能够存储教学显示视窗文件且能够将教学显示视窗文件向远程推流。
在本发明互动教学信息的多视窗处理***的另一种实施方式中，视频显示处理端201 还配置为：通过高清HDMI图像数据采集接口从用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据。
高清HDMI图像数据采集接口支持最高1080P60HZ输出的台式机、笔记本的视音频数据采集。高清HDMI图像数据采集接口支持HDMI高清的图像采集文件且支持对外部音频源的融合采集。用户端的处理器在本地应用加载WINDOWS操作***、安卓操作***、苹果操作***。
任一个视频显示处理端201获取其他视频显示处理端201所发送的本地音视频文件后。判断本地音视频文件中是否具有MIRACAST、AIRPLAY或WIDI协议，若存在识别其文件中的标识PIN码是否正确，若是，则执行协议并连接且获取本地音视频文件且在本地显示。
在本发明的另一种实施方式中：
S1、根据本发明的目的，提供多视窗互动教学方法，包括以下步骤：
S2、有线设备，笔记本，电脑通过高清HDMI音频进行图像采集，以及视窗化；
S3、苹果AIRPLAY无线投屏流媒体数据接入，以及视窗化；
S4、安卓、WIN10 MIRACAST无线显示数据接入，以及视窗化；
S5、GB28181、ONVIF协议的网络摄像机接入，以及视窗化；
S6、PPT、PDF、WORD、视频、图片文件解析，显示，以及视窗化；
S7、WINDOWS、安卓、苹果***的反控；
S8、多个视窗预览、拖动，缩放，滑动等操作，屏幕可实现同时8个视窗操作；
从显示屏采集音视频数据，任意推送到其他多视窗设备；从其他多视窗设备获取音视频数据，显示到本地视窗；对视窗内容存储，推流，对视窗操作动作捕捉存储；其中，
所述高清HDMI图像数据采集支持最高1080P60HZ输出的台式机/笔记本的视音频数据采集，并以视窗方式显示，并支持教学触摸一体机的反向控制。
所述高清HDMI图像数据采集支持HDMI高清的图像采集，并支持对外部音频源的融合采集，并以视窗方式显示，支持本地录播实现远程教学直播。
所述苹果AIRPLAY协议是苹果公司实现的在苹果产品之间传输媒体流信息的一组协议，其基于组播DNS(Multicast Domain Name Server)协议和DNS服务发现协议，实现设备间的发现，音频，图片，视频的传输以及屏幕镜像。
所述无线投屏视窗化是指苹果***(IOS,MAC OS)终端通过AIRPLAY协议镜像至本***，并以视窗方式显示，支持推流，批注。
所述安卓、WINDOWS无线显示是指由Wi-Fi联盟于2012年所定制，以Wi-Fi直连(Wi-Fi Direct)为基础的无线显示标准。支持此标准的设备可以不依赖任何连接线实现设备画面的投屏。
所述GB28181、ONVIF协议都是为了确保安全防范视频监控联网***信息传输即网络视频在安防市场的应用接口标准的不同，将不同厂商生产的网络视频产品具有互通性的接口标准。
所述GB28181、ONVIF协议的网络视频接入是指负责将GB28181、ONVIF设备/平台推送的PS流转成ES流，然后提供RTSP、RTMP、FLV、HLS多种格式，并以视窗化显示，支持直播分享、录制、点播。
所述文档包括Microsoft WORD文档、PPT文档、EXCEL文档、PDF文档、TXT文档、视频、图片文档；
所述应用操作包括所述文档的打开、关闭、翻页、前进、后退、以及使用者在所述电子文档上的批注动作的位置信息等等。
所述WINDOWS、安卓、苹果***的反向控制是指设备通过USB连接至本***，可以在主窗口显示区远程控制电脑。
所述多视窗预览、拖动、缩放、滑动等操作是指本***接入的有线、无线设备及文件，可以在教学资源预览区按类型分组预览，以及主窗口显示区进行放大拖动、缩放、控制、录制等操作。
所述多视窗，是指本***支持最少同时支持从教学资源预览区，拖入8个资源视窗(包括笔记本，PC，文件等)，在主窗口显示区，并进行移动，缩放，滑动等操作。此技术通过对AIRPLAY，MIRACAST数据进行接入并解码，通过对HDMI数据采集接入，通过对PPT， PDF，图片视频文件解析，通过图形，图像处理及优化，实现多视窗功能。
所述从显示屏采集音视频数据，指本***可以对主窗口显示区的音频视频，以及摄像机图像进行H264编码，通过网口，以流媒体形式通过交换机推送到其他多视窗设备。通过这种方式，远端教室可以获取本教室的老师画面，课件及声音；
所述从其他多视窗设备获取音视频数据，是指本***可以对把其他多视窗设备音视频数据流，获取并H264解码，并显示到小组/远程教室预览区，以进行教学互动或会议讨论。通过这种方式，本地教室可以获取多个分教室的画面及声音；
所述对视窗内容存储，推流，对视窗操作动作捕捉存储，指本***可以进行本地化录制存储/推送至录播服务器进行存储。
应当理解，虽然本说明书是按照各个实施方式中描述的，但并非每个实施方式仅包含一个独立的技术方案，说明书的这种叙述方式仅仅是为清楚起见，本领域技术人员应当将说明书作为一个整体，各实施例中的技术方案也可以经适当组合，形成本领域技术人员可以理解的其他实施方式。
上文所列出的一系列的详细说明仅仅是针对本发明的可行性实施方式的具体说明，它们并非用以限制本发明的保护范围，凡未脱离本发明技艺精神所作的等效实施方式或变更均应包含在本发明的保护范围之内。

Claims (10)

1.一种互动教学信息的多视窗处理方法，其特征在于，所述互动教学信息的多视窗处理方法能够实施在一个视频显示处理端；所述视频显示处理端能够连接多个用户端；所述互动教学信息的多视窗处理方法包括步骤：
步骤S101，所述视频显示处理端从所述用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据；根据所述第一音频数据和所述第一视频数据生成第一类视窗数据；
步骤S102，所述视频显示处理端从用户端接收苹果AIRPLAY无线投屏的流媒体数据；根据所述流媒体数据生成第二类视窗数据；
步骤S103，所述视频显示处理端从用户端接收安卓***移动设备或WIN10***处理设备的MIRACAST无线投屏数据；根据所述无线投屏数据生成第三类视窗数据；
步骤S104，所述视频显示处理端从用户端接收GB28181、ONVIF协议的网络摄像机的输出视频数据；根据所述输出视频数据生成第四类视窗数据；
步骤S105，所述视频显示处理端从用户端接收且解析PPT、PDF、WORD文件以及其中的视频文件和图片文件数据，获取解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据；根据解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据生成第五类视窗数据；
步骤S106，所述视频显示处理端根据所述第一类视窗数据、所述第二类视窗数据、所述第三类视窗数据、所述第四类视窗数据和所述第五类视窗数据，在本地生成教学显示视窗文件；
步骤S107，所述视频显示处理端从用户端的处理器接收用户端的控制信息；根据所述用户端的控制信息控制所述教学显示视窗文件；
步骤S108，所述视频显示处理端能够采集本地音视频文件且将所述本地音视频文件发送到所述用户端。
2.根据权利要求1所述的互动教学信息的多视窗处理方法，其特征在于，所述互动教学信息的多视窗处理方法能够实施在多个视频显示处理端；所述多个视频显示处理端之间网络连接；所述任一个视频显示处理端均能够采集本地音视频文件且将所述本地音视频文件发送到其他视频显示处理端；所述其他视频显示处理端能够在本地显示和播放所述音视频文件。
3.根据权利要求1或2所述的互动教学信息的多视窗处理方法，其特征在于，所述视频显示处理端的显示界面窗口能够同时显示、预览且拖动，缩放，滑动包括8个以上的视窗窗口；所述8个以上的视窗窗口包括所述第一类视窗数据、所述第二类视窗数据、所述第三类视窗数据、所述第四类视窗数据和所述第五类视窗数据所生成的视窗窗口。
4.根据权利要求1或2所述的互动教学信息的多视窗处理方法，其特征在于，所述视频显示处理端能够存储所述教学显示视窗文件且能够将所述教学显示视窗文件向远程推流。
5.根据权利要求1所述的互动教学信息的多视窗处理方法，其特征在于，所述步骤S101中所述视频显示处理端通过高清HDMI图像数据采集接口从所述用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据；所述高清HDMI图像数据采集接口支持最高1080P60HZ输出的台式机、笔记本的视音频数据采集；所述高清HDMI图像数据采集接口支持HDMI高清的图像采集文件且支持对外部音频源的融合采集。
6.根据权利要求1所述的互动教学信息的多视窗处理方法，其特征在于，所述步骤S107中，所述用户端的处理器在本地应用加载WINDOWS操作***、安卓操作***、苹果操作***。
7.根据权利要求2所述的的互动教学信息的多视窗处理方法，其特征在于，所述任一个视频显示处理端获取其他视频显示处理端所发送的本地音视频文件后；判断所述本地音视频文件中是否具有MIRACAST、AIRPLAY或WIDI协议，若存在识别其文件中的标识PIN码是否正确，若是，则执行协议并连接且获取所述本地音视频文件且在本地显示。
8.一种互动教学信息的多视窗处理***，其特征在于，其包括一个视频显示处理端和多个用户端；所述视频显示处理端能够连接多个用户端；所述视频显示处理端配置为：
从所述用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据；根据所述第一音频数据和所述第一视频数据生成第一类视窗数据；
从用户端接收苹果AIRPLAY无线投屏的流媒体数据；根据所述流媒体数据生成第二类视窗数据；
从用户端接收安卓***移动设备或WIN10***处理设备的MIRACAST无线投屏数据；根据所述无线投屏数据生成第三类视窗数据；
从用户端接收GB28181、ONVIF协议的网络摄像机的输出视频数据；根据所述输出视频数据生成第四类视窗数据；
从用户端接收且解析PPT、PDF、WORD文件以及其中的视频文件和图片文件数据，获取解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据；根据解析后的PPT、PDF、WORD文件以及其中的视频文件和图片文件数据生成第五类视窗数据；
根据所述第一类视窗数据、所述第二类视窗数据、所述第三类视窗数据、所述第四类视窗数据和所述第五类视窗数据，在本地生成教学显示视窗文件；
从用户端的处理器接收用户端的控制信息；根据所述用户端的控制信息控制所述教学显示视窗文件；
能够采集本地音视频文件且将所述本地音视频文件发送到所述用户端。
9.根据权利要求8所述的互动教学信息的多视窗处理***，其特征在于，所述视频显示处理端为多个视频显示处理端；所述多个视频显示处理端之间网络连接；所述任一个视频显示处理端均能够采集本地音视频文件且将所述本地音视频文件发送到其他视频显示处理端；所述其他视频显示处理端能够在本地显示和播放所述音视频文件；
所述视频显示处理端的显示界面窗口能够同时显示、预览且拖动，缩放，滑动包括8个以上的视窗窗口；所述8个以上的视窗窗口包括所述第一类视窗数据、所述第二类视窗数据、所述第三类视窗数据、所述第四类视窗数据和所述第五类视窗数据所生成的视窗窗口；所述视频显示处理端能够存储所述教学显示视窗文件且能够将所述教学显示视窗文件向远程推流。
10.根据权利要求9所述的互动教学信息的多视窗处理***，其特征在于，所述视频显示处理端还配置为：通过高清HDMI图像数据采集接口从所述用户端接收笔记本电脑和台式机电脑的第一音频数据和第一视频数据；
所述高清HDMI图像数据采集接口支持最高1080P60HZ输出的台式机、笔记本的视音频数据采集；所述高清HDMI图像数据采集接口支持HDMI高清的图像采集文件且支持对外部音频源的融合采集；所述用户端的处理器在本地应用加载WINDOWS操作***、安卓操作***、苹果操作***；
所述任一个视频显示处理端获取其他视频显示处理端所发送的本地音视频文件后；判断所述本地音视频文件中是否具有MIRACAST、AIRPLAY或WIDI协议，若存在识别其文件中的标识PIN码是否正确，若是，则执行协议并连接且获取所述本地音视频文件且在本地显示。
CN202210173789.5A 2022-02-23 2022-02-23 一种互动教学信息的多视窗处理方法及*** Pending CN114679595A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210173789.5A CN114679595A (zh) 2022-02-23 2022-02-23 一种互动教学信息的多视窗处理方法及***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210173789.5A CN114679595A (zh) 2022-02-23 2022-02-23 一种互动教学信息的多视窗处理方法及***

Publications (1)

Publication Number Publication Date
CN114679595A true CN114679595A (zh) 2022-06-28

Family

ID=82071805

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210173789.5A Pending CN114679595A (zh) 2022-02-23 2022-02-23 一种互动教学信息的多视窗处理方法及***

Country Status (1)

Country Link
CN (1) CN114679595A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002054192A2 (en) * 2001-01-04 2002-07-11 3Cx, Inc. Synchronized multimedia presentation
JP2006314073A (ja) * 2005-05-04 2006-11-16 Era Digital Media Co Ltd 対話型マルチメディアインタフェース画面を表示するマルチメディアコンテンツ配信方法
EP1783598A1 (en) * 2005-11-02 2007-05-09 Hsin-Tung Tseng Integrated teaching base station
US20100037151A1 (en) * 2008-08-08 2010-02-11 Ginger Ackerman Multi-media conferencing system
CN107945592A (zh) * 2017-11-03 2018-04-20 杨斌 一种同步互助课堂教学***
CN111258522A (zh) * 2020-01-13 2020-06-09 深圳市视界通科技有限公司 一种多应用多***多信息在屏幕上可视化集中显示控制的实现方法
CN111669606A (zh) * 2019-03-09 2020-09-15 苏州知了信息科技有限公司 一种线下线上同步教学的直播***
CN112988102A (zh) * 2021-05-11 2021-06-18 荣耀终端有限公司 投屏方法和装置
KR102308443B1 (ko) * 2021-02-19 2021-10-05 유비트론(주) 스마트 첨단 강의 및 녹화 시스템

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002054192A2 (en) * 2001-01-04 2002-07-11 3Cx, Inc. Synchronized multimedia presentation
JP2006314073A (ja) * 2005-05-04 2006-11-16 Era Digital Media Co Ltd 対話型マルチメディアインタフェース画面を表示するマルチメディアコンテンツ配信方法
EP1783598A1 (en) * 2005-11-02 2007-05-09 Hsin-Tung Tseng Integrated teaching base station
US20100037151A1 (en) * 2008-08-08 2010-02-11 Ginger Ackerman Multi-media conferencing system
CN107945592A (zh) * 2017-11-03 2018-04-20 杨斌 一种同步互助课堂教学***
CN111669606A (zh) * 2019-03-09 2020-09-15 苏州知了信息科技有限公司 一种线下线上同步教学的直播***
CN111258522A (zh) * 2020-01-13 2020-06-09 深圳市视界通科技有限公司 一种多应用多***多信息在屏幕上可视化集中显示控制的实现方法
KR102308443B1 (ko) * 2021-02-19 2021-10-05 유비트론(주) 스마트 첨단 강의 및 녹화 시스템
CN112988102A (zh) * 2021-05-11 2021-06-18 荣耀终端有限公司 投屏方法和装置

Similar Documents

Publication Publication Date Title
CN110352451B (zh) 一种同屏教学方法、装置、***及存储介质
CN105306861B (zh) 一种网络教学录播方法及***
CN104038722B (zh) 一种视频会议的内容交互方法及***
US8803991B2 (en) Snapshot capture in video stream
US10050800B2 (en) Electronic tool and methods for meetings for providing connection to a communications network
CN104796455A (zh) 跨平台的多屏互动方法、装置及***
CN103414751A (zh) 一种pc屏幕内容分享互动控制方法
CN110943909A (zh) 一种音视频融合通信服务器
US10965480B2 (en) Electronic tool and methods for recording a meeting
Ziewer et al. Transparent teleteaching.
WO2015021898A1 (zh) 文件共享方法、服务器及终端
CN114629897B (zh) 数据处理方法以及***
CN104424824A (zh) 一种用于远程多媒体交互教学的教学互动方法和装置
CN110992746A (zh) 一种分组研讨教学方法及***
CN111885351B (zh) 一种屏幕显示方法、装置、终端设备和存储介质
Latchman et al. Hybrid asynchronous and synchronous learning networks in distance education
CN114679595A (zh) 一种互动教学信息的多视窗处理方法及***
Kimball et al. Low bandwidth desktop and video streaming for collaborative tiled display environments
CN110493231B (zh) 信息传输的方法、装置和***
CN111356009B (zh) 音频数据的处理方法、装置、存储介质以及终端
CN113345281A (zh) 智慧教学***
KR20130100813A (ko) ｅ-Ｂｏｏｋ 기반 온라인 방송 학습 시스템 및 방법
Osamnia et al. A cloud-based multi-functional e-meeting system by flash-based multimedia technology for higher education on the WebELS system
CN112769711A (zh) 一种数据处理方法和***
Chunwijitra An advanced cloud-based e-learning platform for higher education for low speed internet

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination