CN109326154A - 一种通过语音识别引擎进行人机互动教学的方法 - Google Patents

一种通过语音识别引擎进行人机互动教学的方法 Download PDF

Info

Publication number
CN109326154A
CN109326154A CN201811480252.3A CN201811480252A CN109326154A CN 109326154 A CN109326154 A CN 109326154A CN 201811480252 A CN201811480252 A CN 201811480252A CN 109326154 A CN109326154 A CN 109326154A
Authority
CN
China
Prior art keywords
learner
video
program
audio
teaching
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811480252.3A
Other languages
English (en)
Inventor
温茁育
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Hangu Education Technology Co Ltd
Original Assignee
Beijing Hangu Education Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Hangu Education Technology Co Ltd filed Critical Beijing Hangu Education Technology Co Ltd
Priority to CN201811480252.3A priority Critical patent/CN109326154A/zh
Publication of CN109326154A publication Critical patent/CN109326154A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00—Electrically-operated educational appliances
    • G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
    • G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Electrically Operated Instructional Devices (AREA)

Abstract

本发明公开了一种通过语音识别引擎进行人机互动教学的方法，（1）客户将程序安装在具备视音频采集功能设备中；（2）打开程序，选一个互动情景和人物；（3）首先出现动画人物或真人对话画面；（4）学习者根据视频情境或提示，通过麦克风输入语音并进行口语和听力训练和测评；（5）程序接收到测评数据后，按规则判断用户是否通过；（6）如没通过，则继续切换到跟读教学环节到用户通过为止；（7）通过这种方式，可以把现有动画片或其它视频制作成既有娱乐功能同时具有互动学习功能的作品。该方法使学习者融入到互动场景中，而不仅是被动的观看视频，增强了学习效果。

Description

一种通过语音识别引擎进行人机互动教学的方法
技术领域
本发明涉及广播电视，教育、培训、视频制作技术等技术领域，具体为一种利用机顶盒或智能电视，通过语音识别引擎进行人机互动教学的方法。
背景技术
一直以来，无论是广播电视上的教育节目、培训机构的教育视频，基本上都是以单向播出的方式进行的，也就是说观众只能够被动地观看视频，无法融入到视频中与视频中的人物进行互动，观众只能通过线下的授课老师的辅助教学来完成互动方面的学习，造成教学非常的缺乏互动性，并增加了培训机构的教师成本投入。
发明内容
本发明的目的在于提供一种通过语音识别引擎进行人机互动教学的方法，以解决上述背景技术中提出的问题。
为实现上述目的，本发明提供如下技术方案：一种通过语音识别引擎进行人机互动教学的方法。
（1）客户将程序安装下面任一设备中：机顶盒或智能电视中；
（2）确认这些设备可以连接摄像设备和麦克风，具备采集视音频功能；
（3）学习者通过自拍或上传一个大头照，设为动画人物形象，也可以直接***学习者视频；
（4）选择单人互动情景或多人互动情景，并选择希望扮演的角色；
（5）***会提示是否将默认头像替代为人物头像，如需要将自己的头像代入到练习里，选择“是”,或只选音频互动,情景开始后会先出现对话的画面，如是单人互动场景，学习者将扮演刚才所选择的角色，如是多人互动场景，则多个学习者同时分别扮演多个角色；
（6）学***台语音引擎进行语音测评；
（7）引擎接收到数据后，会按照规则将声音文件进行评测及打分，然后将最终的结果返还给程序；
（8）程序接收到返还的最终数据后，根据设定的逻辑，自动进行判断用户是否通过，通过了，继续下面的对话流程，没有通过，***将会让用户多次输入语音并进行评测，在设定次数内都未通过，***把画面切换到对应的跟读教学环节，在教学环节结束后，自动返回到提示用户输入语音的画面以继续，如果学习者语音依然没有通过，则继续循环直到用户通过为止，最后统一完成以后，根据测评结果，确定是否需要教学环节；
（9）学习者生成一个完整的音频或视音频作品，欣赏或下载转发；
（10）在教学环节，学习者的视音频可以直接在屏幕显示和收听；
（11）教学环节在动画片上实施或在重新拍摄的视频中实施；
（12）观看和实施端可以是手机、电脑、电视和其它显示设备。
与现有技术相比，本发明的有益效果是：该方法主要利用AI和媒体制作技术，为学习者提供语言学习和训练的情境，使学习者融入到情境之中，解决学习过程枯燥无趣和教师成本过高的问题。 可以利用电视学习，减少电脑和手机对学习者视力的损伤。将会在app中创建不同的情境。根据不同的情境，设定不同的逻辑步骤及步骤中的分支点。为每一个分支点设置对应的语音以供语音引擎进行辨析。当用户输入语音后，***会通过语音评测引擎自动分辨语音的正确与否，判断程序下一步应进入步骤。把学习者融入到情境中，让学习者在轻松的心情中，进行听力、表达的训练，寓教于玩。
根据情境，可支持单人或多人进行互动。可以使学习者融入到互动场景中，而不是只能被动的观看视频，增强了学习的效果。同样，在培训机构中使用可以在不增加教师成本的情况下，加强学习的互动效果，培养学习者学习兴趣，提高学习的积极性和效果。
具体实施方式
下面将结合本发明实施例，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
本发明提供一种技术方案：
实施例1：
一种通过语音识别引擎进行人机互动教学的方法，
（1）客户将程序安装下面任一设备中：机顶盒或智能电视中；
（2）确认这些设备可以连接摄像设备和麦克风，具备采集视音频功能；
（3）学习者通过自拍或上传一个大头照，设为动画人物形象，也可以直接***学习者视频；
（4）选择单人互动情景或多人互动情景，并选择希望扮演的角色；
（5）***会提示是否将默认头像替代为人物头像，如需要将自己的头像代入到练习里，选择“是”,或只选音频互动,情景开始后会先出现对话的画面，如是单人互动场景，学习者将扮演刚才所选择的角色，如是多人互动场景，则多个学习者同时分别扮演多个角色；
（6）学***台语音引擎进行语音测评；
（7）引擎接收到数据后，会按照规则将声音文件进行评测及打分，然后将最终的结果返还给程序；
（8）程序接收到返还的最终数据后，根据设定的逻辑，自动进行判断用户是否通过，通过了，继续下面的对话流程，没有通过，***将会让用户多次输入语音并进行评测，在设定次数内都未通过，***把画面切换到对应的跟读教学环节，在教学环节结束后，自动返回到提示用户输入语音的画面以继续，如果学习者语音依然没有通过，则继续循环直到用户通过为止，最后统一完成以后，根据测评结果，确定是否需要教学环节；
（9）学习者生成一个完整的音频或视音频作品，欣赏或下载转发；
（10）在教学环节，学习者的视音频可以直接在屏幕显示和收听；
（11）教学环节在动画片上实施或在重新拍摄的视频中实施；
（12）观看和实施端可以是手机、电脑、电视和其它显示设备。
尽管已经示出和描述了本发明的实施例，对于本领域的普通技术人员而言，可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型，本发明的范围由所附权利要求及其等同物限定。

Claims (1)

1.一种通过语音识别引擎进行人机互动教学的方法，其特征是：
（1）客户将程序安装下面任一设备中：机顶盒或智能电视中；
（2）确认这些设备可以连接摄像设备和麦克风，具备采集视音频功能；
（3）学习者通过自拍或上传一个大头照，设为动画人物形象，也可以直接***学习者视频；
（4）选择单人互动情景或多人互动情景，并选择希望扮演的角色；
（5）***会提示是否将默认头像替代为人物头像，如需要将自己的头像代入到练习里，选择“是”,或只选音频互动,情景开始后会先出现对话的画面，如是单人互动场景，学习者将扮演刚才所选择的角色，如是多人互动场景，则多个学习者同时分别扮演多个角色；
（6）学***台语音引擎进行语音测评；
（7）引擎接收到数据后，会按照规则将声音文件进行评测及打分，然后将最终的结果返还给程序；
（8）程序接收到返还的最终数据后，根据设定的逻辑，自动进行判断用户是否通过，通过了，继续下面的对话流程，没有通过，***将会让用户多次输入语音并进行评测，在设定次数内都未通过，***把画面切换到对应的跟读教学环节，在教学环节结束后，自动返回到提示用户输入语音的画面以继续，如果学习者语音依然没有通过，则继续循环直到用户通过为止，最后统一完成以后，根据测评结果，确定是否需要教学环节；
（9）学习者生成一个完整的音频或视音频作品，欣赏或下载转发；
（10）在教学环节，学习者的视音频可以直接在屏幕显示和收听；
（11）教学环节在动画片上实施或在重新拍摄的视频中实施；
（12）观看和实施端可以是手机、电脑、电视和其它显示设备。
CN201811480252.3A 2018-12-05 2018-12-05 一种通过语音识别引擎进行人机互动教学的方法 Pending CN109326154A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811480252.3A CN109326154A (zh) 2018-12-05 2018-12-05 一种通过语音识别引擎进行人机互动教学的方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811480252.3A CN109326154A (zh) 2018-12-05 2018-12-05 一种通过语音识别引擎进行人机互动教学的方法

Publications (1)

Publication Number Publication Date
CN109326154A true CN109326154A (zh) 2019-02-12

Family

ID=65256389

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811480252.3A Pending CN109326154A (zh) 2018-12-05 2018-12-05 一种通过语音识别引擎进行人机互动教学的方法

Country Status (1)

Country Link
CN (1) CN109326154A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109686146A (zh) * 2019-02-19 2019-04-26 北京儒博科技有限公司 一种学习模块的切换方法、装置、存储介质及电子设备
CN110675668A (zh) * 2019-10-18 2020-01-10 张力权 基于智能识别+虚拟真实环境的母语级英语学习***
CN111768667A (zh) * 2020-07-15 2020-10-13 唐山劳动技师学院 一种用于英语教学的互动式循环演示方法及***
CN112006901A (zh) * 2019-08-30 2020-12-01 孙维萍 一种学生学习保护视力锻炼眼睛的方法
CN112908068A (zh) * 2021-02-06 2021-06-04 江苏电子信息职业学院 一种大学英语口语会话互动***
CN113096690A (zh) * 2021-03-25 2021-07-09 北京儒博科技有限公司 一种发音评测方法、装置、设备及存储介质

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070292824A1 (en) * 2006-03-29 2007-12-20 James Ueltschi Method of teaching gaming in a casino environment
CN103246765A (zh) * 2013-04-24 2013-08-14 胡松伟 一种装备虚拟训练平台开发方法
CN103413468A (zh) * 2013-08-20 2013-11-27 苏州跨界软件科技有限公司 一种基于虚拟人物的亲子教育方法
CN106448288A (zh) * 2016-11-01 2017-02-22 安阳师范学院 一种交互式英语学习***及方法
CN106502402A (zh) * 2016-10-25 2017-03-15 四川农业大学 一种三维动态情景教学***及方法
CN106683501A (zh) * 2016-12-23 2017-05-17 武汉市马里欧网络有限公司 一种ar儿童情景扮演投影教学方法及***
CN107945069A (zh) * 2017-11-17 2018-04-20 厦门亿学软件有限公司 商务英语智能***

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070292824A1 (en) * 2006-03-29 2007-12-20 James Ueltschi Method of teaching gaming in a casino environment
CN103246765A (zh) * 2013-04-24 2013-08-14 胡松伟 一种装备虚拟训练平台开发方法
CN103413468A (zh) * 2013-08-20 2013-11-27 苏州跨界软件科技有限公司 一种基于虚拟人物的亲子教育方法
CN106502402A (zh) * 2016-10-25 2017-03-15 四川农业大学 一种三维动态情景教学***及方法
CN106448288A (zh) * 2016-11-01 2017-02-22 安阳师范学院 一种交互式英语学习***及方法
CN106683501A (zh) * 2016-12-23 2017-05-17 武汉市马里欧网络有限公司 一种ar儿童情景扮演投影教学方法及***
CN107945069A (zh) * 2017-11-17 2018-04-20 厦门亿学软件有限公司 商务英语智能***

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109686146A (zh) * 2019-02-19 2019-04-26 北京儒博科技有限公司 一种学习模块的切换方法、装置、存储介质及电子设备
CN112006901A (zh) * 2019-08-30 2020-12-01 孙维萍 一种学生学习保护视力锻炼眼睛的方法
CN110675668A (zh) * 2019-10-18 2020-01-10 张力权 基于智能识别+虚拟真实环境的母语级英语学习***
CN111768667A (zh) * 2020-07-15 2020-10-13 唐山劳动技师学院 一种用于英语教学的互动式循环演示方法及***
CN112908068A (zh) * 2021-02-06 2021-06-04 江苏电子信息职业学院 一种大学英语口语会话互动***
CN113096690A (zh) * 2021-03-25 2021-07-09 北京儒博科技有限公司 一种发音评测方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN109326154A (zh) 一种通过语音识别引擎进行人机互动教学的方法
CN106227335B (zh) 预习讲义与视频课程的交互学习方法及应用学习客户端
CN107633719B (zh) 基于多语种人机交互的拟人形象人工智能教学***和方法
US9414040B2 (en) Method and system for assisting language learning
CN109166370A (zh) 一种英语语言学习辅助***
CN107967830A (zh) 在线教学互动的方法、装置、设备及存储介质
US10741089B2 (en) Interactive immersion system for movies, television, animation, music videos, language training, entertainment, video games and social networking
CN106796496A (zh) 显示设备及其操作方法
CN108055592A (zh) 字幕显示方法、装置、移动终端及存储介质
US11800202B2 (en) Systems and methods for generating supplemental content for a program content stream
CN109618223B (zh) 一种声音替换方法
CN111107442B (zh) 音视频文件的获取方法、装置、服务器及存储介质
CN110517554A (zh) 一种钢琴在线教学方法及***、存储介质及教学终端
CN103546790A (zh) 基于移动终端与互动电视语言交互的方法及***
TW201407563A (zh) 互動式語言學習平台
CN109598991A (zh) 一种英语发音教学***、装置及方法
KR20190083532A (ko) 학습자가 선택한 동영상을 학습 콘텐츠로 활용하는 외국어 학습시스템 및 이의 학습 콘텐츠 생성방법
CN102244750A (zh) 具有声级控制功能的视频显示装置及其控制方法
CN114157920A (zh) 一种展示手语的播放方法、装置、智能电视及存储介质
CN103778809A (zh) 一种基于字幕的视频学习效果自动测试方法
KR101198091B1 (ko) 학습 콘텐츠 서비스 제공 방법 및 시스템
KR20100133730A (ko) 자막정보가 포함된 디지털 동영상으로 부터 추출된 언어학습용 데이터를 이용한 언어학습방법
CN103648012A (zh) 一种字幕渐进变色显示的英语视频教学方法
CN108364518A (zh) 一种基于全景教学模式的师生互动过程记录方法
CN110675672B (zh) 原版影视外语教学***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20190212

RJ01 Rejection of invention patent application after publication