CN113516031A - 一种vr教学***及多媒体教室 - Google Patents
一种vr教学***及多媒体教室 Download PDFInfo
- Publication number
- CN113516031A CN113516031A CN202110473070.9A CN202110473070A CN113516031A CN 113516031 A CN113516031 A CN 113516031A CN 202110473070 A CN202110473070 A CN 202110473070A CN 113516031 A CN113516031 A CN 113516031A
- Authority
- CN
- China
- Prior art keywords
- student
- audio
- teacher
- image
- course
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004891 communication Methods 0.000 claims abstract description 22
- 230000009471 action Effects 0.000 claims abstract description 18
- 230000003993 interaction Effects 0.000 claims abstract description 10
- 239000013598 vector Substances 0.000 claims description 44
- 230000000007 visual effect Effects 0.000 claims description 23
- 238000004364 calculation method Methods 0.000 claims description 5
- 238000013507 mapping Methods 0.000 claims description 4
- 238000012545 processing Methods 0.000 claims description 4
- 230000008859 change Effects 0.000 claims description 3
- 210000001747 pupil Anatomy 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 3
- 238000005516 engineering process Methods 0.000 description 11
- 230000009286 beneficial effect Effects 0.000 description 9
- 230000002452 interceptive effect Effects 0.000 description 9
- QAOWNCQODCNURD-UHFFFAOYSA-N sulfuric acid Substances OS(O)(=O)=O QAOWNCQODCNURD-UHFFFAOYSA-N 0.000 description 9
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 6
- 238000002474 experimental method Methods 0.000 description 5
- 238000000034 method Methods 0.000 description 5
- 238000012986 modification Methods 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 239000012895 dilution Substances 0.000 description 2
- 238000010790 dilution Methods 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 241001310793 Podium Species 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000007613 environmental effect Effects 0.000 description 1
- 238000007654 immersion Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000035484 reaction time Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 239000000243 solution Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S5/00—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations
- G01S5/18—Position-fixing by co-ordinating two or more direction or position line determinations; Position-fixing by co-ordinating two or more distance determinations using ultrasonic, sonic, or infrasonic waves
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/08—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations
- G09B5/14—Electrically-operated educational appliances providing for individual presentation of information to a plurality of student stations with provision for individual teacher-student communication
Landscapes
- Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Business, Economics & Management (AREA)
- General Engineering & Computer Science (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- Human Computer Interaction (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- Multimedia (AREA)
- Electrically Operated Instructional Devices (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明提供一种VR教学***及多媒体教室，其中***包括：教师终端，用于接收教师录制或编制的课程；服务器端，与教师终端通讯连接，用于接收教师终端上传的课程；学生终端，与服务器端通讯连接，用于接收服务器端的课程并播放，并且在课程播放时接收学生的交互动作；其中，学生终端包括：至少一个VR手柄，用于在课程播放时接收学生的交互动作。本发明的VR教学***，使用户能积极地参与到VR情景中，以达到更好的学习效果。
Description
技术领域
本发明涉及教学***技术领域，特别涉及一种VR教学***及多媒体教室。
背景技术
目前，虚拟现实技术(英文名称：Virtual Reality，缩写为VR)，又称灵境技术，是20世纪发展起来的一项全新的实用技术。虚拟现实技术囊括计算机、电子信息、仿真技术，其基本实现方式是计算机模拟虚拟环境从而给人以环境沉浸感。随着社会生产力和科学技术的不断发展，各行各业对VR技术的需求日益旺盛。VR技术也取得了巨大进步，并逐步成为一个新的科学技术领域。
教育信息化的核心内容是教学信息化。教学是教育领域的中心工作，教学信息化就是要使教学手段科技化、教育传播信息化、教学方式现代化。教育信息化，要求在教育过程中较全面地运用以计算机、多媒体、大数据、人工智能和网络通讯为基础的现代信息技术，促进教育改革，从而适应正在到来的信息化社会提出的新要求，对深化教育改革，实施素质教育，具有重大的意义。因此将VR技术应用与教育信息化建设具有重要意义，现有的VR技术只能做到录播，并不能使用户积极参与到VR情景中。
发明内容
本发明目的之一在于提供了一种VR教学***，使用户能积极地参与到VR情景中，以达到更好的学习效果。
本发明实施例提供的一种VR教学***，包括：
教师终端，用于接收教师录制或编制的课程；
服务器端，与教师终端通讯连接，用于接收教师终端上传的课程；
学生终端，与服务器端通讯连接，用于接收服务器端的课程并播放，并且在课程播放时接收学生的交互动作；
其中，学生终端包括：
至少一个VR手柄，用于在课程播放时接收学生的交互动作。
优选的，教师终端包括：
音频采集设备，用于采集教师的音频信息；
图像采集设备，用于采集教师的图像信息；
第一控制设备，与音频采集设备和图像采集设备电连接；第一控制设备用于获取音频采集设备和图像采集设备采集的音频信息和图像信息，接收教师对音频信息和图像信息的编辑操作以生成课程；
第一控制设备包括：
第一通讯模块，与服务器端通讯连接；
显示模块，用于显示音频信息和图像信息；
人体输入模块，用于接收教师的编辑操作；
处理模块，与第一通讯模块、显示模块、人体输入模块、音频采集设备和图像采集设备电连接。
优选的，图像采集设备包括：
至少四个摄像头，分别从教师的前、后、左、右四个方向拍摄教师录制课程时的图像。
优选的，音频采集设备包括：
多个麦克风，在教师录制课程时阵列设置在教师四周。
优选的，学生终端包括：
穿戴式VR设备，与VR手柄电连接，用于播放服务器端发送的课程；
第一移动感知模块，设置在穿戴式VR设备中，用于感知学生的移动；
服务器端执行如下操作：
基于图像采集设备采集的图像信息和音频采集设备采集的音频信息构建虚拟课程空间；
将虚拟课程空间与课程对应存储；
在接收到学生终端播放课程的状态时，调取对应的虚拟课程空间；
将学生映射至虚拟课程空间的初始点，播放虚拟课程空间中学生的视线范围内的图像；
通过第一移动感知模块感知学生的移动；
基于学生的移动，实时确定学生视线范围内的图像并播放；
基于学生的移动和初始点，确定学生在虚拟课程空间中的位置，播放位置对应的音频采集设备采集的音频信息。
优选的，基于学生的移动，实时确定学生视线范围内的图像并播放，包括：
获取构建虚拟空间的各个摄像头的中心拍摄向量，中心拍摄向量为以摄像头镜头的中心点并垂直摄像头镜头面向摄像头的拍摄方向；
获取学生的中心视野向量，中心视野向量为以学生瞳孔为起点向外；
基于学生位置与虚拟课程空间中教师的位置，确定位置向量；
当位置向量与中心视野向量的夹角小于预设的第一阈值时，计算中心视野向量与各个摄像头的中心摄像向量的夹角，计算公式如下：
其中，θi为中心视野向量与第i个中心摄像向量的夹角；xj为中心视野向量的第j维参数值；yij为第i个中心摄像向量的第j维参数值；n为数据维数；
比较夹角大小，选择夹角最小的摄像头拍摄的图像作为学生视线范围内的图像并播放；
基于学生的移动和初始点，确定学生在虚拟课程空间中的位置，播放位置对应的音频采集设备采集的音频信息，包括：
计算学生的位置与各个音频采集设备的设置位置的距离，计算公式如下：
其中，Lk为学生的位置与第k个音频采集设备的设置位置的距离；A1k、A2k、A3k分别为第k个音频采集设备的设置位置的X轴、Y轴和Z轴坐标值；B1、B1、B1分别为学生的位置的X轴、Y轴和Z轴坐标值；
比较学生的位置与各个音频采集设备的设置位置的距离，以距离最短的音频采集设备的音频信息为基础音频；
确定学生的位置与虚拟课程空间中教师的位置的第二距离、距离最短的音频采集设备与虚拟课程空间中教师的位置的第三距离；
基于第一距离、第二距离和第三距离查询预设的关联系数表，确定最终播放音频与基础音频之间的关系系数；
基于关系系数和基础音频，确定最终播放音频。
优选的，服务器端执行如下操作：
通过VR手柄接收学生的表示记录笔记的第一动作时，获取当前播放的课程的第一位置向前推进一预设时间的播放点作为记录起始点；
当通过VR手柄接收学生的表示笔记结束的第二动作时，获取当前播放的课程的第二位置作为记录终止点；
对记录起始点和记录终止点之间的音频数据进行转换，将其转换为文字数据，并在课程结束时输出给学生；
接收学生对于文字数据的编辑操作，以形成课程笔记；、
其中，第一动作包括：按压住VR手柄的按键；第二动作包括：松开被按压住的按键。
优选的，VR手柄包括：
壳体，为圆柱形，在外周设置有防滑纹路；
按键，设置壳体的一端面；
压力传感器阵列，设置在壳体的外周；
第二移动感知模块，设置在壳体内，用于感知VR手柄的移动；
处理器，设置壳体内，分别与按键、第二移动感知模块和压力传感器阵列电连接；
第二通讯模块，与处理器和服务器端电连接；
处理器通过压力传感器阵列检测学生的握力；当握力大于预设的第一压力阈值时，对应的虚拟形象手部握紧以抓取虚拟图像上的物体；
处理器通过第二感知模块感知VR手柄的移动，以同步改变学生对应的虚拟形象得手部移动。
本发明还提供一种多媒体教室，应用于上述任一的VR教学***，包括：
多个VR手柄连接接口，分别设置在各个学生座位上，用于VR手柄的连接。
本发明的其它特征和优点将在随后的说明书中阐述，并且，部分地从说明书中变得显而易见，或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
下面通过附图和实施例，对本发明的技术方案做进一步的详细描述。
附图说明
附图用来提供对本发明的进一步理解，并且构成说明书的一部分，与本发明的实施例一起用于解释本发明，并不构成对本发明的限制。在附图中：
图1为本发明实施例中一种VR教学***的示意图；
图2为本发明实施例中一种教师终端的示意图；
图3为本发明实施例中一种VR手柄的示意图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明，应当理解，此处所描述的优选实施例仅用于说明和解释本发明，并不用于限定本发明。
本发明实施例提供了一种VR教学***，如图1所示，包括：
教师终端1，用于接收教师录制或编制的课程；
服务器端2，与教师终端1通讯连接，用于接收教师终端1上传的课程；
学生终端3，与服务器端2通讯连接，用于接收服务器端2的课程并播放，并且在课程播放时接收学生的交互动作；
其中，学生终端3包括：
至少一个VR手柄31，用于在课程播放时接收学生的交互动作。
上述技术方案的工作原理及有益效果为：
教师终端1为教师使用，教师可以使用教师终端1编制或录制课程；录制课程主要通过采用录像功能将教师的讲课过程进行录制；编制课程就比较复杂，需要考虑在课程播放时，学生的交互可能。例如：在编制浓硫酸稀释实验时，正确步骤为将浓硫酸顺着杯壁倒入水中；学生的操作可能存在多种情况：一、直接瞬间倒入，二、将水倒入浓硫酸中；三、将浓硫酸顺着杯壁倒入水中；在编制时，需要分别编制好学生的各种交互操作后的视频或现象。
学生终端3为学生使用，主要是学生登录到服务器端2使用；学生使用学生终端3观看服务器端2发送的课程时，通过VR手柄31实现交互动作，例如：视频暂停、回放、快进等；此外，还可在播放实验时，进行实验操作。例如浓硫酸稀释实验时，可以实现，一、直接将浓硫酸瞬间倒入水中，二、将水倒入浓硫酸中；三、将浓硫酸顺着杯壁倒入水中，诸如此类的操作。
本发明的VR教学***，使用户能积极地参与到VR情景中，以达到更好的学习效果，并且在进行危险的实验时，不会因为操作步骤的错误，造成事故的发生，并且让学生清楚直观地感受到操作错误造成的后果。
在一个实施例中，如图2所示，教师终端1包括：
音频采集设备11，用于采集教师的音频信息；
图像采集设备12，用于采集教师的图像信息；
第一控制设备13，与音频采集设备11和图像采集设备12电连接；第一控制设备13用于获取音频采集设备11和图像采集设备12采集的音频信息和图像信息，接收教师对音频信息和图像信息的编辑操作以生成课程；
第一控制设备13包括：
第一通讯模块132，与服务器端2通讯连接；
显示模块133，用于显示音频信息和图像信息；
人体输入模块134，用于接收教师的编辑操作；
处理模块131，与第一通讯模块132、显示模块133、人体输入模块134、音频采集设备11和图像采集设备12电连接。
上述技术方案的工作原理及有益效果为：
教师终端1通过图像采集设备12和音频采集设备11分别采集教师录制课程的视频信息和音频信息；实现了课程录制。录制后的课程需要经过编辑；编辑操作包括剪辑、设置触发交互动作等；其中，显示模块133为显示器；人体输入模块134包括：键盘和鼠标；第一通讯模块132包括网卡；处理模块131为电脑主机。
在一个实施例中，图像采集设备12包括：
至少四个摄像头，分别从教师的前、后、左、右四个方向拍摄教师录制课程时的图像。
上述技术方案的工作原理及有益效果为：
通过全方位的录制，实现全景录制；在学生终端3播放时，可以根据学生的交互动作，切换播放的角度，使学生能够有身临其境的感觉，提高学生的学习体验。
在一个实施例中，音频采集设备11包括：
多个麦克风，在教师录制课程时阵列设置在教师四周。
上述技术方案的工作原理及有益效果为：
通过阵列设置的麦克风，可以实现全方位的声音捕捉，实现在学生切换播放角度的时候同步切换声音的播放。例如可以采用四个麦克风与摄像头一一对应；当切换到对应的摄像头录制的画面时同步切换到播放对应的麦克风采集的声音。
在一个实施例中，学生终端3包括：
穿戴式VR设备，与VR手柄31电连接，用于播放服务器端2发送的课程；
第一移动感知模块，设置在穿戴式VR设备中，用于感知学生的移动；
服务器端2执行如下操作：
基于图像采集设备12采集的图像信息和音频采集设备11采集的音频信息构建虚拟课程空间；
将虚拟课程空间与课程对应存储；
在接收到学生终端3播放课程的状态时，调取对应的虚拟课程空间；
将学生映射至虚拟课程空间的初始点，播放虚拟课程空间中学生的视线范围内的图像；
通过第一移动感知模块感知学生的移动；
基于学生的移动，实时确定学生视线范围内的图像并播放；
基于学生的移动和初始点，确定学生在虚拟课程空间中的位置，播放位置对应的音频采集设备11采集的音频信息。
上述技术方案的工作原理及有益效果为：
基于穿戴式VR设备和第一移动感知模块实现了学生与虚拟课程空间的映射，以实现根据学生的视角显示图像，可以根据学生的移动切换对应的视角以及声音，实现沉浸式学习体验。
在一个实施例中，基于学生的移动，实时确定学生视线范围内的图像并播放，包括：
获取构建虚拟空间的各个摄像头的中心拍摄向量，中心拍摄向量为以摄像头镜头的中心点并垂直摄像头镜头面向摄像头的拍摄方向；
获取学生的中心视野向量，中心视野向量为以学生瞳孔为起点向外；
基于学生位置与虚拟课程空间中教师的位置，确定位置向量；
当位置向量与中心视野向量的夹角小于预设的第一阈值时，计算中心视野向量与各个摄像头的中心摄像向量的夹角，计算公式如下：
其中，θi为中心视野向量与第i个中心摄像向量的夹角；xj为中心视野向量的第j维参数值；yij为第i个中心摄像向量的第j维参数值；n为数据维数；
比较夹角大小，选择夹角最小的摄像头拍摄的图像作为学生视线范围内的图像并播放；
基于学生的移动和初始点，确定学生在虚拟课程空间中的位置，播放位置对应的音频采集设备11采集的音频信息，包括：
计算学生的位置与各个音频采集设备11的设置位置的距离，计算公式如下：
其中，Lk为学生的位置与第k个音频采集设备11的设置位置的距离；A1k、A2k、A3k分别为第k个音频采集设备11的设置位置的X轴、Y轴和Z轴坐标值；B1、B1、B1分别为学生的位置的X轴、Y轴和Z轴坐标值；
比较学生的位置与各个音频采集设备11的设置位置的距离，以距离最短的音频采集设备11的音频信息为基础音频；
确定学生的位置与虚拟课程空间中教师的位置的第二距离、距离最短的音频采集设备11与虚拟课程空间中教师的位置的第三距离；
基于第一距离、第二距离和第三距离查询预设的关联系数表，确定最终播放音频与基础音频之间的关系系数；
基于关系系数和基础音频，确定最终播放音频。
上述技术方案的工作原理及有益效果为：
中心视野向量作为视线的表征参数，通过其与位置向量的夹角可以确定学生是否为观看教师的讲课；只有当其夹角小于第一阈值时，第一阈值可以设置为60度；当夹角大于第一阈值时，可以播放预设的虚拟课程空间的背景并用箭头指示出视线调整的方向，以此方便学生快速调整视线。当学生为观看教师讲课时，通过中心视野向量与中心摄像向量的夹角确定最佳的显示图像，以显示给学生。通过学生的位置，确定最终的播放音频，实现了准确的音频确定。进而实现了音视频根据学生的移动发生变化，提高了学生的沉浸感，提高了学生的VR体验。
在一个实施例中，服务器端2执行如下操作：
通过VR手柄31接收学生的表示记录笔记的第一动作时，获取当前播放的课程的第一位置向前推进一预设时间的播放点作为记录起始点；
当通过VR手柄31接收学生的表示笔记结束的第二动作时，获取当前播放的课程的第二位置作为记录终止点；
对记录起始点和记录终止点之间的音频数据进行转换，将其转换为文字数据，并在课程结束时输出给学生；
接收学生对于文字数据的编辑操作，以形成课程笔记；、
其中，第一动作包括：按压住VR手柄31的按键313；第二动作包括：松开被按压住的按键313。
上述技术方案的工作原理及有益效果为：
通过按压住按键313，启动教学***的笔记记录功能，解决了用户在观看VR课程时无法进行笔记的问题，通过将音频数据直接进行文字转换，提高了笔记的准确率及效率。将记录起始点由第一动作的触发点向前推，考虑到学生的一个反应时间与***的指令相应时间，保证笔记记录的完整性；在最后还需根据学生的需求进行文字数据的编辑，编辑包括删除多余的数据，使笔记更加简化。更进一步地，预设时间与按键313按压的力道相关联，即按压力道越大，预设时间越长，可以事先设置一对应表，根据按压力道提取预设时间进行记录起始点的确定。
在一个实施例中，如图3所示，VR手柄31包括：
壳体，为圆柱形，在外周设置有防滑纹路；
按键313，设置壳体的一端面；
压力传感器阵列314，设置在壳体的外周；
第二移动感知模块315，设置在壳体内，用于感知VR手柄31的移动；
处理器311，设置壳体内，分别与按键313、第二移动感知模块315和压力传感器阵列314电连接；
第二通讯模块312，与处理器311和服务器端2电连接；
处理器311通过压力传感器阵列314检测学生的握力；当握力大于预设的第一压力阈值时，对应的虚拟形象手部握紧以抓取虚拟图像上的物体；
处理器311通过第二感知模块感知VR手柄31的移动，以同步改变学生对应的虚拟形象得手部移动。
上述技术方案的工作原理及有益效果为：
基于第二移动感知模块315、压力传感器阵列314和按键313；实现了交互动作的输入；将虚拟形象与学生对于VR手柄31的操作同步，方便学生的沉浸式体验过程中的参数操作。其中，压力传感器阵列314为阵列排布的多个压力传感器；第二移动感知模块315包括：三轴陀螺仪和三轴加速度计。
本发明还提供一种多媒体教室，应用于上述任一的VR教学***，包括：
多个VR手柄连接接口，分别设置在各个学生座位上，用于VR手柄31的连接。
上述技术方案的工作原理及有益效果为：
VR手柄连接接口用于学生连接，以进入VR教学***；实现多人同时进行VR课程学习。
一个具体的应用场景：在教师讲台位置设置大屏显示教师课程；当课程进入交互操作端，将操作界面分别投射到学生座位上的小屏上，学生通过VR手柄31进行交互操作。
再一个具体的应用场景：教师在讲台位置进行课程讲解，当课程进入交互操作端，将操作界面分别投射到学生座位上的小屏上，学生通过VR手柄31进行交互操作，交互操作完成后将操作过程结果总结至教师位置的教师终端1。
更进一步地，在教师位置设置有全息投影设备，实现课程的全息投影。
此外，多媒体教师还提供穿戴式VR设备的接入口。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。
Claims (9)
1.一种VR教学***，其特征在于，包括：
教师终端，用于接收教师录制或编制的课程；
服务器端，与所述教师终端通讯连接，用于接收所述教师终端上传的所述课程；
学生终端，与所述服务器端通讯连接，用于接收所述服务器端的所述课程并播放，并且在所述课程播放时接收学生的交互动作；
其中，所述学生终端包括：
至少一个VR手柄，用于在所述课程播放时接收学生的交互动作。
2.如权利要求1所述的VR教学***，其特征在于，所述教师终端包括：
音频采集设备，用于采集教师的音频信息；
图像采集设备，用于采集教师的图像信息；
第一控制设备，与所述音频采集设备和所述图像采集设备电连接；所述第一控制设备用于获取所述音频采集设备和所述图像采集设备采集的所述音频信息和所述图像信息，接收教师对所述音频信息和所述图像信息的编辑操作以生成所述课程；
所述第一控制设备包括：
第一通讯模块，与所述服务器端通讯连接；
显示模块，用于显示所述音频信息和所述图像信息；
人体输入模块，用于接收教师的编辑操作；
处理模块，与所述第一通讯模块、所述显示模块、所述人体输入模块、所述音频采集设备和所述图像采集设备电连接。
3.如权利要求2所述的VR教学***，其特征在于，所述图像采集设备包括：
至少四个摄像头，分别从教师的前、后、左、右四个方向拍摄教师录制课程时的图像。
4.如权利要求3所述的VR教学***，其特征在于，所述音频采集设备包括：
多个麦克风，在教师录制课程时阵列设置在所述教师四周。
5.如权利要求4所述的VR教学***，其特征在于，所述学生终端包括：
穿戴式VR设备，与所述VR手柄电连接，用于播放所述服务器端发送的所述课程；
第一移动感知模块，设置在所述穿戴式VR设备中，用于感知学生的移动；
所述服务器端执行如下操作：
基于所述图像采集设备采集的图像信息和所述音频采集设备采集的音频信息构建虚拟课程空间；
将所述虚拟课程空间与所述课程对应存储；
在接收到所述学生终端播放所述课程的状态时，调取对应的虚拟课程空间；
将学生映射至所述虚拟课程空间的初始点，播放所述虚拟课程空间中所述学生的视线范围内的图像；
通过第一移动感知模块感知学生的移动；
基于学生的移动，实时确定所述学生视线范围内的图像并播放；
基于学生的移动和所述初始点，确定所述学生在所述虚拟课程空间中的位置，播放所述位置对应的所述音频采集设备采集的音频信息。
6.如权利要求5所述的VR教学***，其特征在于，所述基于学生的移动，实时确定所述学生视线范围内的图像并播放，包括：
获取构建虚拟空间的各个摄像头的中心拍摄向量，所述中心拍摄向量为以所述摄像头镜头的中心点并垂直所述摄像头镜头面向所述摄像头的拍摄方向；
获取所述学生的中心视野向量，所述中心视野向量为以学生瞳孔为起点向外；
基于所述学生位置与所述虚拟课程空间中教师的位置，确定位置向量；
当所述位置向量与所述中心视野向量的夹角小于预设的第一阈值时，计算所述中心视野向量与各个摄像头的所述中心摄像向量的夹角，计算公式如下：
其中，θi为所述中心视野向量与第i个所述中心摄像向量的夹角；xj为所述中心视野向量的第j维参数值；yij为所述第i个所述中心摄像向量的第j维参数值；n为数据维数；
比较所述夹角大小，选择所述夹角最小的所述摄像头拍摄的图像作为所述学生视线范围内的图像并播放；
所述基于学生的移动和所述初始点，确定所述学生在所述虚拟课程空间中的位置，播放所述位置对应的所述音频采集设备采集的音频信息，包括：
计算所述学生的位置与各个所述音频采集设备的设置位置的距离，计算公式如下：
其中，Lk为所述学生的位置与第k个所述音频采集设备的设置位置的距离；A1k、A2k、A3k分别为第k个所述音频采集设备的设置位置的X轴、Y轴和Z轴坐标值；B1、B1、B1分别为所述学生的位置的X轴、Y轴和Z轴坐标值；
比较所述学生的位置与各个所述音频采集设备的设置位置的距离，以距离最短的所述音频采集设备的音频信息为基础音频；
确定所述学生的位置与所述虚拟课程空间中教师的位置的第二距离、所述距离最短的所述音频采集设备与所述虚拟课程空间中教师的位置的第三距离；
基于所述第一距离、所述第二距离和所述第三距离查询预设的关联系数表，确定最终播放音频与所述基础音频之间的关系系数；
基于所述关系系数和所述基础音频，确定最终播放音频。
7.如权利要求1所述的VR教学***，其特征在于，所述服务器端执行如下操作：
通过所述VR手柄接收学生的表示记录笔记的第一动作时，获取当前播放的课程的第一位置向前推进一预设时间的播放点作为记录起始点；
当通过所述VR手柄接收学生的表示笔记结束的第二动作时，获取当前播放的课程的第二位置作为记录终止点；
对所述记录起始点和所述记录终止点之间的音频数据进行转换，将其转换为文字数据，并在课程结束时输出给所述学生；
接收所述学生对于所述文字数据的编辑操作，以形成课程笔记；、
其中，第一动作包括：按压住所述VR手柄的按键；所述第二动作包括：松开被按压住的所述按键。
8.如权利要求1所述的VR教学***，其特征在于，所述VR手柄包括：
壳体，为圆柱形，在外周设置有防滑纹路；
按键，设置所述壳体的一端面；
压力传感器阵列，设置在所述壳体的外周；
第二移动感知模块，设置在所述壳体内，用于感知VR手柄的移动；
处理器，设置所述壳体内，分别与所述按键、所述第二移动感知模块和所述压力传感器阵列电连接；
第二通讯模块，与所述处理器和所述服务器端电连接；
所述处理器通过所述压力传感器阵列检测学生的握力；当所述握力大于预设的第一压力阈值时，对应的虚拟形象手部握紧以抓取虚拟图像上的物体；
所述处理器通过所述第二感知模块感知所述VR手柄的移动，以同步改变所述学生对应的虚拟形象得手部移动。
9.一种多媒体教室，应用于权利要求1至8任一所述的VR教学***，其特征在于，包括：
多个VR手柄连接接口，分别设置在各个学生座位上，用于所述VR手柄的连接。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110473070.9A CN113516031B (zh) | 2021-04-29 | 2021-04-29 | 一种vr教学***及多媒体教室 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202110473070.9A CN113516031B (zh) | 2021-04-29 | 2021-04-29 | 一种vr教学***及多媒体教室 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN113516031A true CN113516031A (zh) | 2021-10-19 |
| CN113516031B CN113516031B (zh) | 2024-03-19 |
Family
ID=78063502
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202110473070.9A Active CN113516031B (zh) | 2021-04-29 | 2021-04-29 | 一种vr教学***及多媒体教室 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113516031B (zh) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114743419A (zh) * | 2022-03-04 | 2022-07-12 | 广州容溢教育科技有限公司 | 一种基于vr的多人虚拟实验教学*** |
Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105844987A (zh) * | 2016-05-30 | 2016-08-10 | 深圳科润视讯技术有限公司 | 多媒体教学互动操作方法及装置 |
| CN108172040A (zh) * | 2018-01-18 | 2018-06-15 | 安徽三弟电子科技有限责任公司 | 一种基于vr虚拟课堂的教学*** |
| CN109064811A (zh) * | 2018-09-03 | 2018-12-21 | 温州大学 | 一种基于vr虚拟课堂的教学*** |
| CN109949187A (zh) * | 2019-03-01 | 2019-06-28 | 北华大学 | 一种新型物联网远程教学***及控制方法 |
| CN110246383A (zh) * | 2019-07-18 | 2019-09-17 | 许昌学院 | 一种多媒体教学***及其使用方法 |
| CN110364041A (zh) * | 2019-06-24 | 2019-10-22 | 科谊达(北京)智能科技有限公司 | 一种课堂实景再现教学*** |
| CN111081099A (zh) * | 2019-09-28 | 2020-04-28 | 马鞍山问鼎网络科技有限公司 | 一种基于虚拟现实技术的远程教育*** |
| KR20200050281A (ko) * | 2018-11-01 | 2020-05-11 | 유엔젤주식회사 | 인공지능 기반 증강 현실과 가상 현실을 이용한 학습 지원 시스템 및 방법 |
| CN111402651A (zh) * | 2020-05-22 | 2020-07-10 | 丽水学院 | 一种基于vr技术的智能教学*** |
| JP6739611B1 (ja) * | 2019-11-28 | 2020-08-12 | 株式会社ドワンゴ | 授業システム、視聴端末、情報処理方法及びプログラム |
| CN111787343A (zh) * | 2020-06-23 | 2020-10-16 | 深圳市思考乐文化教育科技发展有限公司 | 一种带有虚拟直播的教室直播***及其实现方法 |
| CN211787619U (zh) * | 2020-05-14 | 2020-10-27 | 刘班 | 一种远程教育教学*** |
| CN111949822A (zh) * | 2020-08-20 | 2020-11-17 | 山东大学 | 一种基于云计算和移动终端的智能教育视频服务***及其运行方法 |
| CN112087656A (zh) * | 2020-09-08 | 2020-12-15 | 远光软件股份有限公司 | 在线笔记生成方法、装置及电子设备 |
| AU2020103849A4 (en) * | 2020-12-02 | 2021-02-11 | G. L. Bhong | QCIU- Education Environment System: Quantum Computing Integrated Development Education Environment Using IoT-Based System |
-
2021
- 2021-04-29 CN CN202110473070.9A patent/CN113516031B/zh active Active
Patent Citations (15)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105844987A (zh) * | 2016-05-30 | 2016-08-10 | 深圳科润视讯技术有限公司 | 多媒体教学互动操作方法及装置 |
| CN108172040A (zh) * | 2018-01-18 | 2018-06-15 | 安徽三弟电子科技有限责任公司 | 一种基于vr虚拟课堂的教学*** |
| CN109064811A (zh) * | 2018-09-03 | 2018-12-21 | 温州大学 | 一种基于vr虚拟课堂的教学*** |
| KR20200050281A (ko) * | 2018-11-01 | 2020-05-11 | 유엔젤주식회사 | 인공지능 기반 증강 현실과 가상 현실을 이용한 학습 지원 시스템 및 방법 |
| CN109949187A (zh) * | 2019-03-01 | 2019-06-28 | 北华大学 | 一种新型物联网远程教学***及控制方法 |
| CN110364041A (zh) * | 2019-06-24 | 2019-10-22 | 科谊达(北京)智能科技有限公司 | 一种课堂实景再现教学*** |
| CN110246383A (zh) * | 2019-07-18 | 2019-09-17 | 许昌学院 | 一种多媒体教学***及其使用方法 |
| CN111081099A (zh) * | 2019-09-28 | 2020-04-28 | 马鞍山问鼎网络科技有限公司 | 一种基于虚拟现实技术的远程教育*** |
| JP6739611B1 (ja) * | 2019-11-28 | 2020-08-12 | 株式会社ドワンゴ | 授業システム、視聴端末、情報処理方法及びプログラム |
| CN211787619U (zh) * | 2020-05-14 | 2020-10-27 | 刘班 | 一种远程教育教学*** |
| CN111402651A (zh) * | 2020-05-22 | 2020-07-10 | 丽水学院 | 一种基于vr技术的智能教学*** |
| CN111787343A (zh) * | 2020-06-23 | 2020-10-16 | 深圳市思考乐文化教育科技发展有限公司 | 一种带有虚拟直播的教室直播***及其实现方法 |
| CN111949822A (zh) * | 2020-08-20 | 2020-11-17 | 山东大学 | 一种基于云计算和移动终端的智能教育视频服务***及其运行方法 |
| CN112087656A (zh) * | 2020-09-08 | 2020-12-15 | 远光软件股份有限公司 | 在线笔记生成方法、装置及电子设备 |
| AU2020103849A4 (en) * | 2020-12-02 | 2021-02-11 | G. L. Bhong | QCIU- Education Environment System: Quantum Computing Integrated Development Education Environment Using IoT-Based System |
Non-Patent Citations (1)
| Title |
|---|
| 黄娟;: "为远程教育插上翅膀――浅谈基于智能录播***的课件制作", 科技信息, no. 03, pages 486 * |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114743419A (zh) * | 2022-03-04 | 2022-07-12 | 广州容溢教育科技有限公司 | 一种基于vr的多人虚拟实验教学*** |
| CN114743419B (zh) * | 2022-03-04 | 2024-03-29 | 国育产教融合教育科技(海南)有限公司 | 一种基于vr的多人虚拟实验教学*** |
Also Published As
| Publication number | Publication date |
|---|---|
| CN113516031B (zh) | 2024-03-19 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN107103801B (zh) | 远程三维场景互动教学***及控制方法 | |
| EP4184927A1 (en) | Sound effect adjusting method and apparatus, device, storage medium, and computer program product | |
| CN108389249B (zh) | 一种多兼容性的vr/ar空间教室及其构建方法 | |
| CN109600559B (zh) | 一种视频特效添加方法、装置、终端设备及存储介质 | |
| US11442685B2 (en) | Remote interaction via bi-directional mixed-reality telepresence | |
| CN109951718A (zh) | 一种通过5g和vr技术可360度全景实时拍摄直播的方法 | |
| CN114402276A (zh) | 授课***、视听终端、信息处理方法以及程序 | |
| CN109844600A (zh) | 信息处理设备、信息处理方法和程序 | |
| CN112331001A (zh) | 一种基于虚拟现实技术的教学*** | |
| CN112675527A (zh) | 一种基于vr技术的家庭教育游戏***及方法 | |
| CN113516031B (zh) | 一种vr教学***及多媒体教室 | |
| CN108335542A (zh) | 一种vr教学*** | |
| CN205540577U (zh) | 虚拟教学视频直播装置 | |
| CN112288876A (zh) | 远距离ar识别服务器及*** | |
| CN112037090A (zh) | 基于vr技术和6dof姿态跟踪的知识教育*** | |
| JP7130290B2 (ja) | 情報抽出装置 | |
| CN110262662A (zh) | 一种智能人机交互方法 | |
| JP7465736B2 (ja) | コンテンツ制御システム、コンテンツ制御方法、およびコンテンツ制御プログラム | |
| JP7465737B2 (ja) | 授業システム、視聴端末、情報処理方法及びプログラム | |
| CN210072615U (zh) | 一种沉浸式教练***及可穿戴设备 | |
| JP7361612B2 (ja) | 情報処理方法、情報処理装置、およびプログラム | |
| JP6864041B2 (ja) | 情報記憶方法および情報記憶システム | |
| CN115004281A (zh) | 视听终端、视听方法、视听***以及程序 | |
| CN206353386U (zh) | 一种基于增强现实技术的数字化教育装置 | |
| TWI789974B (zh) | 線上直播運動姿勢指導輔助系統與方法 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB02 | Change of applicant information |
Country or region after: China Address after: Room 502-503, Floor 5, Building 5, Hongtai Smart Valley, No. 19, Sicheng Road, Tianhe District, Guangzhou, Guangdong 510000 Applicant after: Guangdong Feidie Virtual Reality Technology Co.,Ltd. Address before: 518000 3311, 3rd floor, building 1, aerospace building, No.51, Gaoxin South nine road, Gaoxin community, Yuehai street, Nanshan District, Shenzhen City, Guangdong Province Applicant before: Shenzhen FEIDIE Virtual Reality Technology Co.,Ltd. Country or region before: China |
|
| CB02 | Change of applicant information | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |