CN102209080A - 一种用于同步教学或会议的终端***及其控制方法 - Google Patents

一种用于同步教学或会议的终端***及其控制方法 Download PDF

Info

Publication number
CN102209080A
CN102209080A CN2010101354344A CN201010135434A CN102209080A CN 102209080 A CN102209080 A CN 102209080A CN 2010101354344 A CN2010101354344 A CN 2010101354344A CN 201010135434 A CN201010135434 A CN 201010135434A CN 102209080 A CN102209080 A CN 102209080A
Authority
CN
China
Prior art keywords
speaker
session
enter
handwriting
person
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2010101354344A
Other languages
English (en)
Inventor
刘盛举
殷森余
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Individual
Original Assignee
Individual
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Individual filed Critical Individual
Priority to CN2010101354344A priority Critical patent/CN102209080A/zh
Publication of CN102209080A publication Critical patent/CN102209080A/zh
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明公开了一种用于同步教学或会议的终端***，其特征在于该***还包括网络同步通讯模块——用于实现对采集到的音频数据，视频数据、笔迹数据、以及用户打开的文档等会话内容进行处理、播放、显示，并通过Internet网把处理好的会话内容发送给远程终端，同时对收到远程终端的会话内容数据进行处理、播放、显示。本发明能够将传统教学方式与网络教学方式有机地结合起来，解决因地理位置、区域贫富不均等因素造成的教学资源缺乏和优秀教师资源分布不均衡的问题，缓解传统教学方式造成严重的职业病问题，克服当前远程教学***及设备的缺点；同时增强了教学的互动性，提高了学员的学习的积极性。本发明的终端***同样适用于网络会议和本地会议。

Description

一种用于同步教学或会议的终端***及其控制方法
技术领域：
本发明涉及一种消费类电子和计算机外设产品领域，具体涉及一种用于同步教学或会议的终端***及其控制方法。
背景技术：
***教科文组织《2009全民教育全球监测报告》的摘要指出基于财富、性别、地理位置、种族及其他不利因素的深刻而顽固的差异，正在构成教育发展的重大障碍。就我国而言，贫困穷家庭、农村地区的孩子的入学率和高中的续读率明显低于城市里的孩子；农村的教育比不上县城的教育，县城的教育比不是省城的教育；中西部贫穷地区的教师资源比不上省会城市的教师资源，更不用说优秀教师资源；中西部的教育质量比不上沿海地区的教育质量。
如今，虽然科学技术发展得很快，各种新教学产品推出，但是现在全球主流的本地教学模式还是“黑板+粉笔”，教师写板书为主的教学方式。2006年，由第三军医大学新桥医院完成的一项调查显示，65.1％的中学教师患有一种或一种以上“职业病”。其中，腰背痛、咽炎、颈椎病、下肢静脉曲张和胃炎或胃溃疡排在前5位。2007年，由重庆市教科院组织专家对该市500余名一线教师进行了详细调查，结果发现76.9％的教师感觉压力大，51％的教师落下“职业病”，37％的教师产生职业倦怠。教师患这些职业病的主要原因是：在传统的教学中，教师经常呼入粉笔浮尘，由于粉笔浮尘的刺激，嗓音使用过度或不当，导致咽喉发炎、声音嘶哑、干燥不适、疼痛、有异物感或分泌物等等，重者嘶哑呈持续性，甚至失音；由于老师站立时间过长，腿部肌肉长期处于紧张状态，下肢血液回流受到影响，造成下肢肿胀、疼痛，严重的还会引起静脉曲张；由于教师长时间备课、改作业、写黑板，会使腰肌、颈椎、颈背部一直处于紧张状态，时间久了会造成慢性腰肌劳损、颈椎疾病、筋膜炎及肌腱炎等，重时酸痛无力，活动受限，甚至头部眩晕；由于教师工作时间长、用脑过度，工作压力大，容易引起脑的血液和氧气供应不足，使大脑出现疲劳感，出现头晕、失眠、记忆力下降，注意力不能集中、情绪不稳等症状。虽有极少数学校采用白板或者电子白板、交互式白板来代替传统教学中的黑板和粉笔，以及多媒体教学，但是老师的职业病现状并没有得到大的改进。
据报道，优秀的教学资源缺乏和优秀的教师资源的分布不均衡成了网络教学发展中的两大主要问题。现代远程教育也被称为网络教学，在国外被称为E-learnin——即电子教学。现在用于网络教学/中、远程网络会议的***有软件解决方案和硬件解决方案之分。软件解决方案的代表有WebEx、Centra、Microsoft Live Meeting、NetMeeting、Cenwave等，这些产品的基本功能都是具有白板操作、视频传送、音频交流、协同浏览、文件共享、屏幕共享、网络文件管理等。这些产品应用于教学时，其教学形式与传统的教学形式差别非常大，与传统几乎不相容；不能够充分利用传统教学中丰富的教学资源和大量的优秀教师资源；不能解决由于地理位置、区域贫富不均等因素造成的教学资源缺乏和优秀教师资源分布不均衡的问题。硬件解决方案的代表有Polycom、tendberg、苏州科达、华为、中兴、深圳迪威、上海华平等，这些产品的基本功能是把会议现场的声音和画面传送其他会场，各会场之间相互传送该本地会场的画面和声音。其主要特征：1)是功能比较单一；2)产品价格昂贵，对于学校和一般企业来说，基本上承担不起硬件会议***带来的费用；3)所需的网络带宽大；4)交互性比较差。
发明内容：
本发明的一个目的是提供一种用于同步教学或会议的终端***，这种终端***除了播放、显示本地教学或会议内容(包括声音、现场会面、板书笔迹、共享文档)和对本地教学或会议内容数据进行处理，并发送给网络远程终端之外，还可以接收网络远程终端***传来的反馈信息(包括音频流、笔迹流、共享文档的注解)，并对反馈信息进行处理和显示。
为了实现上述目的，本发明的技术方案是：一种用于同步教学或会议的终端***，包括微处理器、内存、***存储器、电源管理模块、以及通过***总线与微处理器相连接的多种***设备，其特征在于该***还包括网络同步通讯模块——用于实现对采集到的音频数据，视频数据、笔迹数据、以及用户打开的文档等会话内容进行处理、播放、显示，并通过Internet网把处理好的会话内容及时发送给远程终端，同时对收到的远程终端会话内容数据进行处理、播放、显示。这些***设备包括液晶显示屏、笔迹采集模块、以太网控制器、音频处理模块、视频采集设备、高速视频数模转换器、USB接口；网络插口与以太网控制器相连；VGA接口与高速视频数模转换器相连；耳机插座、麦克风插座、左右扬声器与音频处理模块相连。
本发明的另一个目的是提供一种用于同步教学或会议的控制方法，除了播放、显示本地教学/会议内容(包括声音、现场会面、板书笔迹、共享文档)和对本地教学/会议内容数据进行处理，并发送给网络远程终端之外，还可以接收网络远程终端***传来的反馈信息(包括音频流、笔迹流、共享文档的注解)，并对反馈信息进行处理和显示。
为了实现上述目的，本发明的技术方案是：一种用于同步教学或会议的控制方法，其特征在于该方法包括以下步骤：A、首先检查并更新日志文件；B、显示用户登录界面，用户登录，如果登录成功进入执行C，否则询问用户是否重试，如果是继续显示用户登录界面，让用户重新登录，否则询问用是否开展本地会话，如果是则进入F，否则退出***；C、显示网络同步会话申请界面，让用户申请申请网络同步会话，如果申请成功，则进入D，否则进入E；D、开始网络同步会话；E、显示申请不成功的原因，并询问用户是否要开展本地会话。如果是则进入F，如否则退出***；F、开始本地会话。其中本地会话包括以下步骤：采集主讲人的声音，并立即播放出来；根据主讲人的操作，液晶屏显示现场视频、板书、演示文档等内容，这些内容可以同时被投影仪投影出来；当然，会话的所有内容都可以被保存下来。网络同步会话处理步骤是a、会话初始化，如果初始化成功则进入b否则报告错误并退出会话；b、显示会话界面；c、判断会话是否结束，如是则退出会话，如否则进入d；d、判断是主讲模式吗，如否则进入f，如是则进入e；e、判断是主讲人吗？如是则进入g，如否，则进入h；f、判断是主讲人吗？如是则进入i，如否，则进入j；g、处理主讲模式下主讲人端的会话内容，如果在会话进行中主讲人改变会话模式，则进入c；h、处理主讲模式下非主讲人端的会话内容；i、处理讨论模式下主讲人端的会话内容，如果在会话进行中主讲人改变会话模式，则进入c；j、处理讨论模式下非主讲人端的会话内容。在主讲模式下，主讲人端的会话内容处理方式：主讲人端的声音、现场画面、板书的笔迹、打开的文档以及对文档注解，除了在本地立即播放、显示之外，同时被压缩编码成音频流、视频流、笔迹流和共享文件被矢量化，并通过以太网发送给网络远程终端；在主讲模式下，非主讲人端的会话内容处理方式是：对收到会话内容数据进行相应的解码、处理后立即再现主讲人端的会话场景，但除了主讲人之外，其他人不能对会话内容进行修改，但可以申请发言。在讨论模式下，主讲人端的会话内容处理方式是：他的终端***除了处理本地声音、现场画面、板书的笔迹、打开的文档以及对文档注解的播放显示，把本地产生的音频流、视频流、笔迹流和矢量化文件及注解发送给网络远程终端之外，还要及时处理其他参加课堂(会议)人的终端传来的反馈信息，这些反馈信息包括表达意见的音频流、对板书修改的笔迹流、对共享文档增加的注解；在讨论模式下，非主讲人端除了可以再现远程端会话场景外，非主讲人还可以对收到会话内容发表意见、对板书进行修改、对共享文档进行注解，他发表的意见、修改笔迹、注解被立即处理，并发给主讲人和其他非主讲人。
本发明的终端***具备笔迹采集及处理功能、视频采集和处理以及显示功能、具备音频采集和处理及播放功能、媒体存储功能、屏幕共享功能、文档共享功能、网络通讯功能，以及VGA输出功能。这使得本发明的终端可以用于本地教学(需要配合投影仪或者大尺寸屏幕的电视)，完全取代传统教学活动中的黑板和粉笔，从而降低老师在教学过程中的劳动强度，同时免除吸入粉笔灰，造成对身体的伤害——老师上课过程中板书(笔迹)、打开的文档及在文档上作画过程、演示的课件、实验的详细过程都能够保存下来，供以后使用；当本发明终端连上Internet网时，老师上课的内容能够及时传到远程终端(如本发明终端、电脑，PDA等)，远程的老师或者学员可以对收到的上课内容发表意见，并可以对老师的板书及文档进行注释或者修改，这些反馈信息经过相应的处理后及时发送到其他远程终端；本发明能够将传统教学方式与网络教学方式有机地结合起来——解决因地理位置、区域贫富不均等因素造成的教学资源缺乏和优秀教师资源分布不均衡的问题和缓解传统教学方式造成严重的职业病问题，克服当前远程教学***及设备应用于教学时，其教学形式与传统的教学形式差别非常大，与传统几乎不相容，和不能够充分利用传统教学中丰富的教学资源和大量的优秀教师资源，需要大量的带宽等不足；同时增强了教学的互动性，提高了学员的学习的积极性。当然，本发明的终端***同样适用于网络会议和本地会议。
附图说明
图1为本发明终端***的功能结构；
图2为本发明终端***的一个特定应用实例；
图3为本发明终端***的通信软件***的流程；
图4为本发明终端***的通信软件的本地会话流程；
图5为本发明终端***的通信软件的会话保存流程；
图6为本发明终端***的通信软件的网络同步会话流程；
图7为本发明终端***的通信软件的主讲模式下主讲端的会话内容处理流程；
图8为本发明终端***的通信软件的主讲模式下非主讲端的会话内容处理流程；
图9为本发明终端***的通信软件的讨论模式下主讲端的会话内容处理流程；
图10为本发明终端***的通信软件的讨论模式下，非主讲端的会话内容处理流程。
具体实施方式：
下面结合附图对本发明作进一步的描述。
在本发明的较佳实施例的下述描述中，参考了作为说明书一部分的附图进行描述，所述附图说明了本发明可以采用的特定实施例。本领域技术人员应该理解在不背离本发明精神的情况下，还可以使用其它实施例或对这些实施例进行修改。这都没有超出本发明的保护范围。
1终端***的功能结构
参照图1，该终端***包括微处理器120(IC：S3C6410)、内存116(IC：K4X51163PC)、***存储器115(IC：K9F2G08U0M)、电源管理模块102(IC：LM2596-5.0、LM2596-3.3)、网络同步通讯模块121、直流输入插座101、纽扣电池113以及把各种***设备连接到微处理器的***总线。纽扣电池作用是提供RTC时钟，确保掉电后日历、时间仍能正常运作；输入本发明终端***的是12V直流电，经过电源管理模块后被转化为5V和3.3V的两种直流电源，以供其他模块用。***设备包括12英寸的液晶显示屏119、笔迹采集模块118(即电阻式4线制触摸屏)、以太网控制器104(IC：DM9000AE)、音频处理模块105(IC：WM9713L)、视频采集设备117(即摄像头)、高速视频数模转换器111(采用芯片：ADV7213)、USB接口110，以及多个功能键114。网络插口即网口103与以太网控制器相连；VGA接口112与高速视频数模转换器相连；耳机插座107、麦克风插座108、左声道扬声器106、右声道扬声器109与音频处理模块相连。该***还包括实时操作***(Windows CE6.0)、初始化代码、驱动程序，这些程序和网络同步通讯模块都固化在***存储器内，***启动时将被调到内存里。***上电时(即启动***)，初始化代码首先被执行，它使微处理器从复杂状态进入到操作***能够运行的状态；操作***从初始化程序中取得***控制权后就开始组织外设、存储器和处理时间等***资源；驱动程序是操作***与硬件之间的一种接口程序，提供了硬件到操作***的一个接口以及协调二者之间的关系。在***运行中，网络同步通讯模块通过驱动程序使***设备发生相应的操作以实对本地声音、视频、笔迹，以及用户打开的文档等会话内容进行采集、处理、播放、显示，并通过Internet网把处理好的会话内容发送给远程终端，同时对收到的远程终端会话内容数据进行处理、播放、显示。网络同步通讯模块的处理流程如图3所示。
2本发明的终端***的典型应用场景
本发明的终端***的典型应用方案包括学校的本地教学和同步教学、培训机构的本地教学和同步教学、企事业单位(包括公司、政府、军队)的视频会议，为了讨论方便，现在以学校的同步教学为例，如图2所示。该同步教学涉及到在聚集在A地教室200的L个学生和一个主讲老师，和聚集在B地教室210的N个学生和一个辅导老师，以及M个分散的远程学生。教室200配备有本发明的终端设备204、捕获会议音频的麦克风设备205、投影仪202、扬声器203，摄像头201，以及将终端设备204连接到在Internet网络环境中的控制服务器230及转发服务器232和网络连接231。教室210配备与教室200的配备相似，即配备了终端设备213、麦克风215、投影仪211、扬声器212，摄像头214。分布在其他地方的M个学生可以在办公室里，在家里，还可能在商务旅途中，他们配备了个人终端(240a…240x…240M)(如个人PC、笔记本电脑、本发明的终端等等)、带麦克风的耳机，以及能够连接控制服务器230和转发服务器232的网络连接231。在教学的过程中，教室200里的主讲老师直接在终端设备204上板书，笔迹被及时采集和处理、显示在终端设备204上，也被投影在教室的墙上，他打开的文档以及对文档的注释也被投影在教室的墙上，播发的课件也如此，他做实验的过程被采集、再现在终端设备204上和投影在墙上。同时教室200里老师的上课时的板书、声音、实验过程等分别被及时地采集和编码处理，并通过Internet网发送到教室210里的终端设备213和M个远程学生的接收终端，远程的终端接收到笔迹、音频、视频数据流之后，立即对这些数据进行相应的解码，播发收到声音和再现收到的笔迹、视频；还有，教室200里老师的上课时打开的文档以及对文档的注释和播发的课件也被及时地发送到远程的终端设备213和M个远程学生的接收终端，同样被及时处理和再现。现在假如远程学生240x有疑问，他可以对教室200里老师的板书进行修改，对收到的文档进行注释，对实验过程或者再现的课件进行提问，他所做的修改，或者注释，包括语音被采集和处理，并被及时反馈到教室200里的终端设备上，同时也发送到终端***213和其他学生的设备上。并且，所有上可以的内容能够保存下来。
3网络同步通讯模块
一种用于同步教学/会议的控制方法，其特征在于该方法包括以下步骤(如图3所示)：A、首先检查并更新日志文件301，如果日志文件不存在则创建日志文件，如果日志文件过大则删除最后几次前所有日志，日志的作用是记录***的运行状态；B、显示用户登录界面302，用户登录，如果登录成功进入执行C，否则询问用户是否重试，如果是继续显示用户登录界面，让用户重新登录，否则询问用是否开展本地会话，如果是则进入F，否则退出***；C、显示网络同步会话申请界面303，让用户申请网络同步会话，如果申请成功，则进入D，否则进入E；D、开始网络同步会话304；E、显示申请不成功的原因307，并询问用户是否要开展本地会话，如果是则进入F，如否则退出***；F、开始本地会话306；G、会话结束后退出***305。其中本地会话的流程如图4所示，包括以下步骤：采集主讲人的声音，并立即播放出来；根据主讲人的操作，液晶屏显示现场视频、板书、演示文档等内容，这些内容可以同时被投影仪投影出来；当然，会话的所有内容都可以被保存下来，保存的方式如图5所示。在进行网络同步会话时，根据会话不同阶段不同特点，主讲人可以控制会话在主讲模式或者讨论模式下进行：在主讲模式下，主讲人有整个会话过程的控制权，主讲人端的所有会话内容被处理并发送给远程的参与者，远程的参与者可以请求发言，得到主讲人的同意后才能发言；在讨论模式下，主讲人端的所有会话内容传给远程参与者的同时也能够接受远程参与者的及时反馈信息，其处理步骤如图6、图7、图8、图9、图10所示。
3.1本地会话
当本发明终端被用来给聚集在一个教室的学生上课或者所有参加会议的人都在一个会议室时，本发明终端***不需要连接以太网，其教学(会议)内容处理过程如图4所示。为了讨论方便，这里以本地教学为例来阐述。本发明终端***用于本地教学时，其教学方式与传统教学方式相差不大，这使得老师很容易地适应这种教学方式。老师讲课的声音被采集407，并立即播放出来406；屏幕选择内容401，投影仪投影出来的内容是根据上课的需要进行选择，老师可以选择视频403、板书404，或者是演示课件405：这里视频是指老师做实验的过程将被录制(视频采集)408，显示在终端液晶屏上，同时被投影出来(视频显示)409；如果老师选择板书，他可以直接用触摸笔在触摸屏上写字，画图，笔迹被采集(笔迹采集)410后显示和投影出来(笔迹显示)411——这与传统教学方式的用粉笔在黑板上写字画图相当；老师可以用事先准备好的文档来讲解，其处理过程是文档首先被矢量化处理413(即被转化为Microsoft emf格式)，然后文档显示412，同时老师可以在所显示的文档上板书(即注释，勾画重点等)——板书的笔迹采集414后被矢量化415，然后将注释显示417和保存到emf格式文档的尾部416。当然，老师上课时的所有内容都可以被保存下来418，保存过程如图5所示：采集到的音频数据501经过AAC编码502形成音频流；以每秒25帧的速度截取液晶屏显示的画面506，画面数据经过H.264编码后形成视频流505；最后把音频流和视频流封装成TS流503，并保存到文件504。这样就可以得到一般播放软件(如windows mediaplayer)能够播放的媒体文件。
3.2网络同步教学(网络远程会议)
本发明的网络同步会话的流程如图6所示，当网络同步会话启动后，网络同步会话包括：a、会话初始化601，如果初始化成功则进入b，否则报告错误并退出会话608；b、显示会话界面602；c、判断会话是否结束，如是则退出会话，如否则进入d；d、判断是主讲模式吗，如否则进入f，如是则进入e；e、判断是主讲人吗？如是则进入g，如否，则进入h；f、判断是主讲人吗？如是则进入i，如否，则进入j；g、处理主讲模式下主讲人端的会话内容603，其具体处理流程如图7所示，如果在会话进行中主讲人改变会话模式或者按关闭按钮604，则进入c；h、处理主讲模式下非主讲人端的会话内容605，其具体处理流程如图8所示；i、处理讨论模式下主讲人端的会话内容606，其具体处理流程如图9所示，如果在会话进行中主讲人改变会话模式或者按关闭按钮，则进入c；j、处理讨论模式下非主讲人端的会话内容607，其具体处理流程如图10所示。
3.2.1主讲模式下主讲端对会话内容的处理流程
如图7所示，在主讲模式下，主讲人的声音被采集707，并立即播放出来706，同时音频数据被采用G.729编码压缩成音频流708，并通过UDP方式发送给网络远端717；根据会话的需要，主讲人可以选择屏幕显示的内容702，这些内容可以是现场视频703、屏幕共享704、板书727，或者是文档共享726，如果选择的是视频，采集到视频数据710后立即显示711，并被采用H.264编码压缩成视频流709；如果选择的是屏幕共享，则进行屏幕拷贝712，拷贝数据也被编码成H.264格式的视频流，视频流采用UDP方式发送给网络远端717；如果选择板书，则主讲人的板书笔迹被采集714后立即显示716，并进行笔迹处理715形成笔迹流，其处理方式详见专利名称为《基于笔迹特征数据流的视频通信***及方法》的专利(申请号为2008102011081)，并通过TCP方式发送给网络远端720；如果选择文档共享，则主讲人打开的文档被文档矢量化719(即转化成emf格式文件)，随后进行文档显示718，注解的笔迹被采集721后进行数据矢量化722，并进行保存723，emf格式文件和注解数据被采用TCP方式发送给网络远端720；主讲人的其它请求命令被处理成命令数据725，也通过TCP方式发送给网络远端720。主讲人的终端当收到网络远端传来的TCP数据701(即请求命令)时，将立即执行命令705.
3.2.2主讲模式下非主讲端对会话内容的处理流程
如图8所示，在主讲模式下，学员只能收到网络远程传来的课堂内容数据800，这些数据可以是音频流UDP数据、视频流UDP数据、板书的笔迹流，或者是共享文档的emf格式文件数据及注解形成的TCP数据包。如果UDP数据包是音频数据，则音频流数据被G.729解码器解码801后立即播放出802；否则，视频流数据被H.264解码器解码803后立即显示出来804；收到的TCP数据包如果是命令，则执行命令811，否则是会话内容——如果收到的会话内容是板书数据，则笔迹流数据被处理805后立即显示出来806，否则是文档共享807数据，收到的emf格式文件立即被显示808，而收到的注解被显示809的同时也被保存到相应的emf文件尾部810。当然，学员可以向远程的老师申请发言814，他的请求形成命令813，并通过TCP的方式发送给远程的老师812。
3.2.3讨论模式下主讲端对会话内容的处理流程
为了阐述方便，这里假设老师就是主讲人。在讨论模式下，如图9所示，老师的终端除了需要处理本地产生的声音、视频图像、板书、共享文档数据外，同时还要及时处理网络远程传来的反馈信息，这些信息包括音频流、板书的笔迹流、对共享文档注解信息。从图9和图7可以看出，在讨论模式下除了声音播放外，老师这边的终端对本地的声音、视频、笔迹、共享文档以及注解的处理方式与主讲模式下主讲人端对声音、视频、笔迹、共享文档以及注解的处理方式是相同，这里不再论述。在讨论模式下，终端除了处理本地采集到得声音外，还能接收到通过UDP方式传来远程学员的声音。当收到远程传来的音频流UDP包时，***采用G.729解码器立即对收到的音频流进行解码，接下来把当前短时间(30ms)内收到的多路远程音频同本地音频一起经过混音处理901，生成一路音频，然后再播放出来。当收到网络远程端传来的笔迹数据时，笔迹流经过处理后得到笔迹数，***就根据笔迹数据在本地白板上绘制出相应的图形(即网络远程端的笔迹与本地的笔迹是有机结合为一体的)。对网络远程端传来的文档注解数据的处理方式与对本地端文档注解数据的处理方式是一样的。
3.2.4讨论模式下非主讲端对会话内容的处理流程
在讨论模式下，学员(为了讨论方便，假定该学员不是主讲人)不光网络远程端传来的老师(假定老师是主讲人)上课的内容、其他学员的反馈信息，他还能对老师的板书进行修改，对老师共享的文档进行注解，对老师的上课内容和其他学员的反馈信息发表意见，他操作的反馈信息(包括笔迹和注解)和他发表的意见都将被处理，并立即发送给老师和其他学员。讨论模式下非主讲端对教学(会议)内容的处理流程如图10所示，非主讲端不但需要处理网络远程传来的UDP数据和TCP数据，还要处理本地端学员的反馈信息。传来的TCP数据如果是命令，终端就立即执行命令，否则就是教学(会议)内容数据，它如果是笔迹流数据，那么笔迹数据对笔迹流进行处理，随即把笔迹显示出来，否则TCP数据就是文档共享，那就显示文档以及显示注解，并保存注解。传来的UDP数据如果是视频流，那就对它进行h.264解码，解码结束后立即显示出来，否则就对码流进行G.729解码，解码后就得到了音频数据。该学员可以对对上课的任何内容发表观点，他的声音被采集后进行G.729编码，随即通过UDP的方式把码流发送给其他学员和老师，同时本地终端把采集的音频数据与当时短时间收到并解码的音频数据进行混音，随后播放混音数据。如果液晶屏上活动的是白板，那么学员可以对板书进行修改，他的笔迹被采集、处理，并通过TCP的方式发送给其他学员和老师；如果液晶屏上活动的是文档共享，那么学员可以对显示的文档进行注解和修改，他的笔迹被采集、矢量化、显示、保存，并通过TCP的方式发送给其他学员和老师。学员还可以向主讲人提出请求，他的请求命令通过TCP的方式发送给老师。

Claims (8)

1.一种用于同步教学或会议的终端***，***包括微处理器、内存、***存储器、电源管理模块，以及通过***总线与微处理器相连接的多种***设备，其特征在于该***还包括网络同步通讯模块，用于实现对采集到的音频数据，视频数据、笔迹数据、以及用户打开的文档等会话内容进行处理、播放、显示，并通过Internet网把处理好的会话内容发送给远程终端，同时对收到的远程终端会话内容的数据进行处理、播放、显示。
2.如权利要求1所述的终端***，其特征在于***设备包括液晶显示屏、笔迹采集模块、以太网控制器、音频处理模块、视频采集设备、高速视频数模转换器、USB接口；网络插口与以太网控制器相连；VGA接口与高速视频数模转换器相连；耳机插座、麦克风插座、左右扬声器与音频处理模块相连。
3.一种用于同步教学或会议的控制方法，其特征在于该方法包括以下步骤：A、首先检查并更新日志文件；B、显示用户登录界面，用户登录，如果登录成功进入执行C，否则询问用户是否重试，如果是继续显示用户登录界面，让用户重新登录，否则询问用是否开展本地会话，如果是则进入F，否则退出***；C、显示网络同步会话申请界面，让用户申请网络同步会话，如果申请成功，则进入D，否则进入E；D、开始网络同步会话；E、显示申请不成功的原因，并询问用户是否要开展本地会话，如果是则进入F，如否则退出***；F、开始本地会话。
4.如权利要求3所述的控制方法，其特征在于网络同步会话包括如下步骤：a、会话初始化，如果初始化成功则进入b否则报告错误并退出会话；b、显示会话界面；c、判断会话是否结束，如是则退出会话，如否则进入d；d、判断是主讲模式吗，如否则进入f，如是则进入e；e、判断是主讲人吗？如是则进入g，如否，则进入h；f、判断是主讲人吗？如是则进入i，如否，则进入j；g、处理主讲模式下主讲人端的会话内容，如果在会话进行中主讲人改变会话模式，则进入c；h、处理主讲模式下非主讲人端的会话内容；i、处理讨论模式下主讲人端的会话内容，如果在会话进行中主讲人改变会话模式，则进入c；j、处理讨论模式下非主讲人端的会话内容。
5.如权利要求4所述的控制方法，其特征在于在步骤g和步骤i中，主讲人控制会话模式在主讲模式或者讨论模式之间切换。
6.如权利要求4或5所述的控制方法，其特征在于在主讲模式下，主讲人拥有整个会话的控制权，主讲人的声音、现场画面、板书的笔迹、打开的文档以及对文档注解，除了在本地立即播放、显示之外，同时被压缩编码成音频流、视频流、笔迹流和共享文件被矢量化，并通过以太网发送给网络远程终端，非主讲人端再现主讲人端的会话场景。
7.如权利要求4或5所述的控制方法，其特征在于，在讨论模式下，主讲人的终端***除了处理本地声音、现场画面、板书的笔迹、打开的文档以及对文档注解的播放显示，把本地产生的音频流、视频流、笔迹流和矢量化文件及注解发送给网络远程终端之外，同时需要及时处理其他参加会议人终端传来的反馈信息，这些反馈信息包括表达意见的音频流、对板书修改的笔迹流、对共享文档增加的注解；非主讲人端可以对收到会话内容发表意见、对板书进行修改、对共享文档进行注解，他发表的意见、修改笔迹、注解被立即处理，并发给主讲人和其他非主讲人。
8.如权利要求3所述的控制方法，其特征在于本地会话包括以下步骤：采集主讲人的声音，并立即播放出来；根据主讲人的操作，液晶屏显示现场视频、板书、演示文档等内容，这些内容同时被投影仪投影出来。
CN2010101354344A 2010-03-30 2010-03-30 一种用于同步教学或会议的终端***及其控制方法 Pending CN102209080A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2010101354344A CN102209080A (zh) 2010-03-30 2010-03-30 一种用于同步教学或会议的终端***及其控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2010101354344A CN102209080A (zh) 2010-03-30 2010-03-30 一种用于同步教学或会议的终端***及其控制方法

Publications (1)

Publication Number Publication Date
CN102209080A true CN102209080A (zh) 2011-10-05

Family

ID=44697744

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2010101354344A Pending CN102209080A (zh) 2010-03-30 2010-03-30 一种用于同步教学或会议的终端***及其控制方法

Country Status (1)

Country Link
CN (1) CN102209080A (zh)

Cited By (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102413140A (zh) * 2011-11-30 2012-04-11 江苏奇异点网络有限公司 支持语音交互的网络教学方法
CN102523532A (zh) * 2011-11-30 2012-06-27 苏州奇可思信息科技有限公司 具有多画面同步输出的会议现场课件输出方法
CN102789704A (zh) * 2012-07-13 2012-11-21 李清树 基于电子信息平台的现代教与学方法
CN103150934A (zh) * 2013-02-27 2013-06-12 南京中网科技实业有限公司 一种实验室互动教学***
CN103280127A (zh) * 2013-05-27 2013-09-04 成都市工业职业技术学校 机床多媒体实景教学平台
CN103413471A (zh) * 2013-08-14 2013-11-27 苏州阔地网络科技有限公司 一种网络同步课堂控制方法及***
CN103489339A (zh) * 2013-05-27 2014-01-01 陕西理工学院 一种视频教学***及其实现教学的方法
CN103531049A (zh) * 2013-11-05 2014-01-22 熊才平 一种异地同步互动网络教学平台
CN104021702A (zh) * 2013-03-01 2014-09-03 联想(北京)有限公司 一种显示方法及装置
CN104064201A (zh) * 2014-06-13 2014-09-24 广州视睿电子科技有限公司 数据同步方法和***
CN104157174A (zh) * 2014-09-03 2014-11-19 巫贤华 一种计算机多媒体教学***
CN104185034A (zh) * 2013-05-27 2014-12-03 宋晓娜 一种具有多屏互动管理、网络通信和视频输出功能的装置
CN104298655A (zh) * 2014-10-28 2015-01-21 广州视源电子科技股份有限公司 一种课件批注方法及***
CN104469078A (zh) * 2014-10-17 2015-03-25 深圳市雅图新媒体科技有限公司 互动投影控制方法和***
CN104506621A (zh) * 2014-12-24 2015-04-08 北京佳讯飞鸿电气股份有限公司 一种采用视频标注进行远程指导的方法
CN104581353A (zh) * 2013-10-24 2015-04-29 深圳习习网络科技有限公司 一种视频的录制/播放方法及录制/播放装置
CN104978877A (zh) * 2014-04-11 2015-10-14 深圳市瑞源达文化创新有限公司 一种互动教学***
WO2015184907A1 (zh) * 2014-12-30 2015-12-10 中兴通讯股份有限公司 一种实现投影内容编辑的方法及装置
CN105376063A (zh) * 2015-11-03 2016-03-02 广州视睿电子科技有限公司 一种数据传输方法、装置及通信***
CN105551329A (zh) * 2016-02-29 2016-05-04 重庆工程职业技术学院 教学资源库云综合***
CN105608755A (zh) * 2015-12-21 2016-05-25 惠州Tcl移动通信有限公司 一种基于移动终端的电子签到方法及***
CN105611350A (zh) * 2015-12-21 2016-05-25 努比亚技术有限公司 媒体录制装置和方法
CN105654793A (zh) * 2016-03-30 2016-06-08 苏州点通教育科技有限公司 教学音视频共享***及方法
CN105934772A (zh) * 2014-03-06 2016-09-07 谷歌公司 阅读组电子书同步
CN106157718A (zh) * 2016-08-23 2016-11-23 北京汉博信息技术有限公司 一种用于远程教育的可视化数据交互方法及***
CN106205243A (zh) * 2016-07-11 2016-12-07 广州伟度计算机科技有限公司 一种用于辅助教学过程的教学***及教学方法
WO2017045447A1 (zh) * 2015-09-18 2017-03-23 谷鸿林 内容录制、再现***和方法
CN107168622A (zh) * 2017-05-11 2017-09-15 北京大生在线科技有限公司 多端课件实时互动方法及***
CN107302537A (zh) * 2017-07-10 2017-10-27 努比亚技术有限公司 网络会议方法、***、服务终端及计算机可读存储介质
CN107341137A (zh) * 2017-05-22 2017-11-10 广州视源电子科技股份有限公司 一种基于多平板的批注跟随方法及***
CN107479841A (zh) * 2017-08-11 2017-12-15 广州视源电子科技股份有限公司 双板展示***的控制方法、装置、设备和存储介质
CN108492640A (zh) * 2018-05-16 2018-09-04 湖南城市学院 一种基于物联网的视频教学***
CN108647331A (zh) * 2012-07-19 2018-10-12 格兰斯电讯网络有限公司 协同浏览与其他形式的信息共享的集成
CN110083424A (zh) * 2013-06-18 2019-08-02 微软技术许可有限责任公司 用于电子墨水投影的方法和***
CN110166950A (zh) * 2018-02-13 2019-08-23 海能达通信股份有限公司 一种接听反馈的方法、相关设备及***
CN110599835A (zh) * 2019-09-25 2019-12-20 淄博职业学院 一种交互式计算机远程教育***
CN110750961A (zh) * 2019-09-12 2020-02-04 北京真视通科技股份有限公司 一种文件格式转换方法、装置、计算机设备和存储介质
CN111124333A (zh) * 2019-12-05 2020-05-08 视联动力信息技术股份有限公司 电子白板显示内容同步的方法、装置、设备以及存储介质
CN111179650A (zh) * 2020-01-02 2020-05-19 北京科技大学 一种纸写板书和讲解自动文档化的讲台***
CN113296727A (zh) * 2021-05-08 2021-08-24 广州市奥威亚电子科技有限公司 声音控制方法、装置、电子设备及存储介质
CN113538988A (zh) * 2021-06-04 2021-10-22 深圳市中达聚能技术有限公司 智慧教室以及用于智慧教室的教学控制方法
CN114679437A (zh) * 2022-03-11 2022-06-28 阿里巴巴（中国）有限公司 远程会议方法、数据交互方法、设备及计算机存储介质
CN115396404A (zh) * 2022-08-08 2022-11-25 深圳乐播科技有限公司 云会议场景中主讲人讲解位置的同步投屏方法及相关装置

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1400541A (zh) * 2002-08-20 2003-03-05 西安交通大学 基于ip网的多媒体实时授课***
CN2854946Y (zh) * 2005-12-09 2007-01-03 深圳市台电实业有限公司 一种会议***主机及由其构成的电子会议***

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1400541A (zh) * 2002-08-20 2003-03-05 西安交通大学 基于ip网的多媒体实时授课***
CN2854946Y (zh) * 2005-12-09 2007-01-03 深圳市台电实业有限公司 一种会议***主机及由其构成的电子会议***

Cited By (56)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102523532A (zh) * 2011-11-30 2012-06-27 苏州奇可思信息科技有限公司 具有多画面同步输出的会议现场课件输出方法
CN102413140A (zh) * 2011-11-30 2012-04-11 江苏奇异点网络有限公司 支持语音交互的网络教学方法
CN102789704A (zh) * 2012-07-13 2012-11-21 李清树 基于电子信息平台的现代教与学方法
CN108647331A (zh) * 2012-07-19 2018-10-12 格兰斯电讯网络有限公司 协同浏览与其他形式的信息共享的集成
CN103150934A (zh) * 2013-02-27 2013-06-12 南京中网科技实业有限公司 一种实验室互动教学***
CN104021702B (zh) * 2013-03-01 2016-09-28 联想(北京)有限公司 一种显示方法及装置
CN104021702A (zh) * 2013-03-01 2014-09-03 联想(北京)有限公司 一种显示方法及装置
CN104185034A (zh) * 2013-05-27 2014-12-03 宋晓娜 一种具有多屏互动管理、网络通信和视频输出功能的装置
CN103280127A (zh) * 2013-05-27 2013-09-04 成都市工业职业技术学校 机床多媒体实景教学平台
CN103489339A (zh) * 2013-05-27 2014-01-01 陕西理工学院 一种视频教学***及其实现教学的方法
CN103280127B (zh) * 2013-05-27 2015-08-05 成都市工业职业技术学校 机床多媒体实景教学平台
CN110083424B (zh) * 2013-06-18 2022-06-24 微软技术许可有限责任公司 用于电子墨水投影的方法和***
CN110083424A (zh) * 2013-06-18 2019-08-02 微软技术许可有限责任公司 用于电子墨水投影的方法和***
CN103413471B (zh) * 2013-08-14 2015-07-15 苏州阔地网络科技有限公司 一种网络同步课堂控制方法及***
CN103413471A (zh) * 2013-08-14 2013-11-27 苏州阔地网络科技有限公司 一种网络同步课堂控制方法及***
CN104581353A (zh) * 2013-10-24 2015-04-29 深圳习习网络科技有限公司 一种视频的录制/播放方法及录制/播放装置
CN104581353B (zh) * 2013-10-24 2018-08-24 深圳习习网络科技有限公司 一种视频的录制/播放方法及录制/播放装置
CN103531049A (zh) * 2013-11-05 2014-01-22 熊才平 一种异地同步互动网络教学平台
CN105934772A (zh) * 2014-03-06 2016-09-07 谷歌公司 阅读组电子书同步
CN105934772B (zh) * 2014-03-06 2019-12-03 谷歌有限责任公司 阅读组电子书同步
CN104978877A (zh) * 2014-04-11 2015-10-14 深圳市瑞源达文化创新有限公司 一种互动教学***
CN104064201A (zh) * 2014-06-13 2014-09-24 广州视睿电子科技有限公司 数据同步方法和***
CN104064201B (zh) * 2014-06-13 2017-04-12 广州视睿电子科技有限公司 数据同步方法和***
CN104157174A (zh) * 2014-09-03 2014-11-19 巫贤华 一种计算机多媒体教学***
CN104469078A (zh) * 2014-10-17 2015-03-25 深圳市雅图新媒体科技有限公司 互动投影控制方法和***
CN104298655A (zh) * 2014-10-28 2015-01-21 广州视源电子科技股份有限公司 一种课件批注方法及***
CN104506621B (zh) * 2014-12-24 2018-07-31 北京佳讯飞鸿电气股份有限公司 一种采用视频标注进行远程指导的方法
CN104506621A (zh) * 2014-12-24 2015-04-08 北京佳讯飞鸿电气股份有限公司 一种采用视频标注进行远程指导的方法
WO2015184907A1 (zh) * 2014-12-30 2015-12-10 中兴通讯股份有限公司 一种实现投影内容编辑的方法及装置
CN105812615A (zh) * 2014-12-30 2016-07-27 中兴通讯股份有限公司 一种实现投影内容编辑的方法及装置
WO2017045447A1 (zh) * 2015-09-18 2017-03-23 谷鸿林 内容录制、再现***和方法
CN105376063B (zh) * 2015-11-03 2018-09-18 广州视睿电子科技有限公司 一种数据传输方法、装置及通信***
CN105376063A (zh) * 2015-11-03 2016-03-02 广州视睿电子科技有限公司 一种数据传输方法、装置及通信***
WO2017076091A1 (zh) * 2015-11-03 2017-05-11 广州视睿电子科技有限公司 一种数据传输方法、装置及通信***
CN105608755A (zh) * 2015-12-21 2016-05-25 惠州Tcl移动通信有限公司 一种基于移动终端的电子签到方法及***
CN105611350A (zh) * 2015-12-21 2016-05-25 努比亚技术有限公司 媒体录制装置和方法
CN105551329A (zh) * 2016-02-29 2016-05-04 重庆工程职业技术学院 教学资源库云综合***
CN105654793A (zh) * 2016-03-30 2016-06-08 苏州点通教育科技有限公司 教学音视频共享***及方法
CN106205243A (zh) * 2016-07-11 2016-12-07 广州伟度计算机科技有限公司 一种用于辅助教学过程的教学***及教学方法
CN106157718A (zh) * 2016-08-23 2016-11-23 北京汉博信息技术有限公司 一种用于远程教育的可视化数据交互方法及***
CN107168622A (zh) * 2017-05-11 2017-09-15 北京大生在线科技有限公司 多端课件实时互动方法及***
CN107341137A (zh) * 2017-05-22 2017-11-10 广州视源电子科技股份有限公司 一种基于多平板的批注跟随方法及***
CN107302537A (zh) * 2017-07-10 2017-10-27 努比亚技术有限公司 网络会议方法、***、服务终端及计算机可读存储介质
CN107479841A (zh) * 2017-08-11 2017-12-15 广州视源电子科技股份有限公司 双板展示***的控制方法、装置、设备和存储介质
CN110166950A (zh) * 2018-02-13 2019-08-23 海能达通信股份有限公司 一种接听反馈的方法、相关设备及***
CN108492640A (zh) * 2018-05-16 2018-09-04 湖南城市学院 一种基于物联网的视频教学***
CN110750961A (zh) * 2019-09-12 2020-02-04 北京真视通科技股份有限公司 一种文件格式转换方法、装置、计算机设备和存储介质
CN110599835A (zh) * 2019-09-25 2019-12-20 淄博职业学院 一种交互式计算机远程教育***
CN111124333A (zh) * 2019-12-05 2020-05-08 视联动力信息技术股份有限公司 电子白板显示内容同步的方法、装置、设备以及存储介质
CN111179650A (zh) * 2020-01-02 2020-05-19 北京科技大学 一种纸写板书和讲解自动文档化的讲台***
CN113296727A (zh) * 2021-05-08 2021-08-24 广州市奥威亚电子科技有限公司 声音控制方法、装置、电子设备及存储介质
CN113296727B (zh) * 2021-05-08 2024-05-14 广州市奥威亚电子科技有限公司 声音控制方法、装置、电子设备及存储介质
CN113538988A (zh) * 2021-06-04 2021-10-22 深圳市中达聚能技术有限公司 智慧教室以及用于智慧教室的教学控制方法
CN114679437A (zh) * 2022-03-11 2022-06-28 阿里巴巴（中国）有限公司 远程会议方法、数据交互方法、设备及计算机存储介质
CN115396404A (zh) * 2022-08-08 2022-11-25 深圳乐播科技有限公司 云会议场景中主讲人讲解位置的同步投屏方法及相关装置
CN115396404B (zh) * 2022-08-08 2023-09-05 深圳乐播科技有限公司 云会议场景中主讲人讲解位置的同步投屏方法及相关装置

Similar Documents

Publication Publication Date Title
CN102209080A (zh) 一种用于同步教学或会议的终端***及其控制方法
CN109615961A (zh) 一种课堂教学师生互动网络***与方法
CN205910890U (zh) 一种多媒体移动终端培训教学***
KR20010096407A (ko) 근거리 통신망이나 인터넷을 이용한 원격지간의 양방향실시간 학습지 지도 시스템 및 그 방법
KR20100060289A (ko) 쌍방향 온라인 동영상 강의 시스템 및 방법
CN209746825U (zh) 一种互动型多媒体智慧教室
CN110276999A (zh) 一种具有同步板书和直播功能的远程互动教学***及方法
CN113905003A (zh) 一种智能交互的同频互动讲解方法及***
Gribbins et al. Technology-enhanced learning in blended learning environments: A report on standard practices
Sanford et al. Audio channel constraints in video-mediated communication
JP3741485B2 (ja) 遠隔協同授業システム
CN210804824U (zh) 一种具有同步板书和直播功能的远程互动教学***
CN112071132B (zh) 音视频教学设备、智能教学***
McConnell Cyclops shared-screen teleconferencing
Smyth et al. Internet-Based Videoconferencing for Teaching and Learning.
Disbrow The overall effect of online audio conferencing in communication courses: What do students really think
Parlakkilic Bridging the gap with distance education students: Telepresence
Smith Student satisfaction in distance learning classes
KR100451957B1 (ko) 실시간 쌍방향 원격교육시스템
Lee et al. Implementation of a videoconferencing system between multiple family medicine departments
Jian et al. RESEARCH ON ACCESSIBILITY TECHNOLOGY OF HIGH INCLUSIVE EDUCATION IN HEARING IMPAIRED STUDENTS
Wheeler Convergent technologies in distance learning delivery
McConnell and Teletex Systems are being applied to the field of distance teaching (eg. see Owen, 1982). Within this context, the Open University's Cyclops telewriting (or audiographics) system has already contributed
Grenquist The Virtual Classroom at UMR: Broadcasting" Live" Audio, Notes, and Images as a MultiMedia Lecture over the World-Wide Web in Real Time
Network 12 Cyclops Shared-Screen Teleconferencing

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20111005

WD01 Invention patent application deemed withdrawn after publication