CN111523343B - 阅读互动方法、装置、设备、服务器及存储介质 - Google Patents

阅读互动方法、装置、设备、服务器及存储介质 Download PDF

Info

Publication number
CN111523343B
CN111523343B CN201910040221.4A CN201910040221A CN111523343B CN 111523343 B CN111523343 B CN 111523343B CN 201910040221 A CN201910040221 A CN 201910040221A CN 111523343 B CN111523343 B CN 111523343B
Authority
CN
China
Prior art keywords
information
reading
text content
user
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910040221.4A
Other languages
English (en)
Other versions
CN111523343A (zh
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing ByteDance Network Technology Co Ltd
Original Assignee
Beijing ByteDance Network Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing ByteDance Network Technology Co Ltd filed Critical Beijing ByteDance Network Technology Co Ltd
Priority to CN201910040221.4A priority Critical patent/CN111523343B/zh
Publication of CN111523343A publication Critical patent/CN111523343A/zh
Application granted granted Critical
Publication of CN111523343B publication Critical patent/CN111523343B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/40Document-oriented image-based pattern recognition
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • G09B5/04Electrically-operated educational appliances with audible presentation of the material to be studied

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Artificial Intelligence (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了阅读互动方法、装置、设备、服务器及存储介质。该方法包括:获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容,所述图像信息由所述点读设备上的摄像头捕获;确定所述文本内容中的关键知识信息;基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。利用该方法,通过阅读过程中与阅读用户的问题互动,增强了用户阅读过程中的趣味性,还增强用户阅读过程中进行主动思考的积极性,从而达到了提高用户阅读兴趣以及提高用户发散思维能力的阅读效果。

Description

阅读互动方法、装置、设备、服务器及存储介质
技术领域
本发明实施例涉及数据交互技术领域,尤其涉及阅读互动方法、装置、设备、服务器及存储介质。
背景技术
用户对书本进行阅读时,由于书本内容的展现方式单一,使得用户的整个阅读过程比较枯燥乏味、互动性较低,从而导致用户排斥书本阅读。
此外,用户往往只对书本上提供的内容进行阅读,很难在阅读中积极主动思考和探究,不利于用户在阅读中的发散思维,由此影响了用户进行书本阅读的阅读效果。
发明内容
本发明实施例提供了一种阅读互动方法、装置、设备、服务器及存储介质,以在用户阅读时进行阅读互动,增强了用户阅读中的阅读趣味性。
第一方面,本发明实施例提供了一种阅读互动方法,包括:
获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容;
确定所述文本内容中的关键知识信息;
基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
第二方面,本发明实施例还提供了一种阅读互动装置,包括:
信息获取模块,用于获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容;
关键信息确定模块,用于确定所述文本内容中的关键知识信息;
互动问题确定模块,用于基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
第三方面,本发明实施例还提供了一种点读设备,包括:
主体、位于主体内的控制器和无线网络模块以及嵌套于所述主体上的拾音装置、发音装置、摄像头以及触摸屏,所述主体设置在阅读材料所在载体上,
所述控制器,用于控制下述至少一项:拾音装置、发音装置、摄像头、和触摸屏执行相应的工作,还用于实现如本发明实施例提供的阅读互动方法;
其中,所述拾音装置,用于采集音频信息,所述音频信息包括用户的答复信息;
所述发音装置,用于进行音频信息播放;
所述摄像头,用于捕获图像信息,所述图像信息包括阅读材料中各阅读页;
所述触摸屏,用于进行信息显示。
第四方面,本发明实施例还提供了一种服务器,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现本发明实施例提供的阅读互动方法。
第五方面,本发明实施例还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时实现本发明实施例提供的阅读互动方法。
本发明实施例提供了阅读互动方法、装置、设备、服务器及存储介质,该方法包括:获取当前阅读页面的图像信息,并识别图像信息中的文本内容,确定文本内容中的关键知识信息,基于预设的知识信息及关键知识信息,确定对应所述当前阅读页面的互动问题,并发送至点读设备播放。利用该方法,通过阅读过程中与阅读用户的问题互动,增强了用户阅读过程中的趣味性,还增强用户阅读过程中进行主动思考的积极性,从而达到了提高用户阅读兴趣以及提高用户发散思维能力的阅读效果。
附图说明
图1为本发明实施例一提供的一种阅读互动方法的流程示意图;
图2为本发明实施例二提供的一种阅读互动方法的流程示意图;
图3为本发明实施例三提供的一种阅读互动装置的结构示意图;
图4为本发明实施例四提供的一种点读设备的结构示意图;
图5为本发明实施例五提供的一种服务器的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部结构。
在更加详细地讨论示例性实施例之前应当提到的是,一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作(或步骤)描述成顺序的处理,但是其中的许多操作可以被并行地、并发地或者同时实施。此外,各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止,但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。
实施例一
图1为本发明实施例一提供的一种阅读互动方法的流程示意图,该方法适用于在用户阅读时需要进行阅读互动的情况,该方法可以由阅读互动装置来执行,其中该装置可以由软件和/或硬件实现,并一般集成在点读设备和/或点读设备的服务器上。
需要说明的是,本实施例提供的阅读互动方法具体应用在点读设备和/或点读设备的服务器端,其具体可通过点读设备和/或点读设备的服务器端实现用户阅读过程中与用户的阅读互动。
如图1所示,本发明实施例一提供的一种阅读互动方法,包括如下操作:
S101、获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容。
在本实施例中,所述当前阅读页面具体可以是用户所选阅读材料中当前正在阅读的阅读页,其中,所述阅读材料具体可以是用户可阅读的书本、绘本或报纸等。本实施例可认为所述阅读材料中包含至少一篇用户可阅读的当前待阅读内容。可以知道的是,当用户进行阅读时,可将阅读材料及点读设备放置在同一载体(如桌面)上。
同时,所述图像信息对应所述当前阅读页,且该图像信息可以由点读设备中的摄像头捕获,所述文本内容可理解为对图像信息进行识别后确定的所述当前阅读页所包含的内容。
示例性地,用户进行阅读时,可将包含当前阅读页的阅读材料置于放置有点读设备的书桌上,且用户可调整阅读材料的放置位置,以使点读设备上的摄像头可以捕获到阅读材料中的当前阅读页,从而获得用户所阅读当前阅读页的图像信息。
可以理解的是,本步骤可获取由点读设备的摄像头捕获的当前阅读页的图像信息,之后可通过给定的图像识别算法,如基于特征匹配的图像识别及基于分类的图像识别等算法等,对获取的图像信息进行识别,从而获得图像信息对应的文本内容。
S102、确定所述文本内容中的关键知识信息。
在本实施例中,所述关键知识信息具体可理解为含盖了当前阅读页所对应文本内容中核心关键内容的信息。本步骤确定关键知识信息的实现可以是:从预先设定的知识信息库中查找与该文本内容相匹配的标准文本内容,然后获取预先对应该标准文本内容设定的关键知识信息,其中,所述知识信息库可预先基于人工校验编排形成。
需要说明的是,本实施例所提供阅读互动方法,在进行人工校验编排时,可确定出本实施例所提供阅读互动方法适用的主要用户的阅读频率较高的读物,然后重点对这些读物中每个阅读页的内容进行人工校验编排,从而形成不同读物中各阅读页对应的关键知识信息。
此外,本步骤确定关键知识信息的实现还可以是:直接对当前阅读页的文本内容进行分词分析,从而确定出文本内容中的关键词,然后根据各关键词的词义结合设定的编译语法形成对应该当前阅读页的关键知识点信息。
示例性地,假设基于上述步骤确定当前阅读页中的文本内容是一个名为猴子捞月的故事,则本实施例可从预先进过人工校验编排的知识信息库中获得或者通过分词分析确定出该故事的关键知识信息为:一群猴子从井里捞月亮,但并没有捞到月亮,月亮依旧挂在天上。
S103、基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
在本实施例中,所述互动问题库具体可理解为预先基于挖掘出的关键知识点信息编排形成相关问题数据集。示例性地,本步骤获得当前阅读页的关键知识点信息后,可从互动问题库中查找与本关键知识信息匹配的标准知识信息,并将该标准知识信息对应的互动问题作为本关键知识信息的互动问题。可以知道的是,本步骤确定出的互动问题可以有多个,为实现与阅读用户的互动问答,本步骤可顺序选取一个互动问题发送给点读设备以用于播放。
接上述示例,在确定出上述故事中的关键知识点信息后,可以基于关键知识点信息结合互动问题库确定出当前阅读页的互动问题,这些互动问题可以有,如,当前内容讲了一个什么故事呀,故事中的猴子从哪里捞月亮呀,猴子捞到月亮了没有呀,其互动问题还可以有,猴子为什么不能捞到月亮呢等等。本步骤可以在获得相关的互动问题后,可以以设定时间间隔顺序选取一个互动问题发送给点读设备,以通过点读设备与阅读用户进行问题互动。
本发明实施例一提供的一种阅读互动方法,包括:获取当前阅读页面的图像信息,并识别图像信息中的文本内容,确定文本内容中的关键知识信息,基于预设的知识信息及关键知识信息,确定对应所述当前阅读页面的互动问题,并发送至点读设备播放。利用该方法,通过阅读过程中与阅读用户的问题互动,增强了用户阅读过程中的趣味性,还增强用户阅读过程中进行主动思考的积极性,从而达到了提高用户阅读兴趣以及提高用户发散思维能力的阅读效果。
在上述实施例基础上,作为本实施例的一个可选实施例,在确定所述文本内容中的关键知识信息之后,还优化增加了:基于所述关键知识信息生成相应的画面描绘信息,并用于播放所述画面描绘信息。
在本实施例中,确定出当前阅读页的关键知识信息后,除了可以确定出相关的互动问题外,还可以基于关键知识信息生成可在点读设备端播放的画面描绘信息,并可将画面描绘信息发送到点读设备端以用于动态展示播放给阅读用户。
具体地,可以确定出关键知识信息中描述人物或动物的名词,如,‘猴子’,也可以确定出描述景物的名词,如‘月亮’、‘井’以及‘大树’等,还可以确定出一个动词,如,‘捞’由此,可以将上述各名词和动词结合描绘出关联的卡通图像,是上述示例,可形成一个猴子从井中捞月亮的图像并通过点读设备动态展示给阅读用户,由此可以更形象的向阅读用户展示当前阅读内容。
本可选实施例的技术特征,实现了将当前阅读页面中关键知识信息的图像化,由此增强了阅读用户在阅读过程中的画面感,同样提高了用户的阅读兴趣。
实施例二
图2为本发明实施例二提供的一种阅读互动方法的流程示意图,本实施例以上述实施例一为基础进行优化,在本实施例中,进一步将确定所述文本内容中的关键知识信息,具体化为:分词处理所述文本内容,获得对应所述文本内容的词语集合;统计各所述词语的出现频次,获得出现频次大于设定阈值的关键词;基于设定的语法编译模型汇总各所述关键词,获得所述文本内容对应的关键知识信息。
同时,本实施例进一步增加了:接收到用户针对当前互动问题的答复信息后,确定所述答复信息对应的点评信息并用于展示,所述答复信息由所述点读设备上的麦克风采集。
如图2所示,本发明实施例二提供的一种阅读互动方法,具体包括如下操作:
S201、获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容。
示例性地,本步骤获取点读设备的摄像头捕获的当前阅读页面的图像信息。需要说明的是,本实施例下述S202至S204具体给出了一种关键知识信息确定的实现方法。
S202、分词处理所述文本内容,获得对应所述文本内容的词语集合。
在本实施例中,为实现关键知识信息的确定,首先可以采用给定的文本分词处理算法,对图像信息对应的文本内容进行分词处理,由此获取到相关的词语集合。
S203、统计各所述词语的出现频次,获得出现频次大于设定阈值的关键词。
在本实施例中,可以对词语集合中的词语进行出现频次统计,并可基于各词语的出现频次,由高到低对不同词语进行排序,最终可选取到出现频次高于设定阈值的关键词。
S204、基于设定的语法编译模型汇总各所述关键词,获得所述文本内容对应的关键知识信息。
在本实施例中,所述语法编译模型具体可理解为一个用于基于关键词汇输出相关的关键知识信息的神经网络模型,其预先可基于一定量的作为样本集的样本词语进行训练学习,由此形成一个可应用的网络模型,本步骤可以将上述确定出的关键词作为语法编译模型的输入词汇,最终可获得基于语法编译模型的关键知识信息。
S205、基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
示例性地,本步骤通过从互动问题库中查找与关键知识信息匹配的标准知识信息,可获得出关联当前阅读页面的互动问题,之后可将获得的互动问题以设定顺序在点读设备的触摸屏上播放,其中,发送一个互动问题后,可在接收到阅读用户的问题答复后进行下一互动问题的播放,也可在达到设定时间间隔后进行下一互动问题的播放。
S206、接收到用户针对当前互动问题的答复信息后,确定所述答复信息对应的点评信息并用于展示。
在本实施例中,本实施例可将当前选取发送给点读设备的互动问题记为当前互动问题,可以理解的是,对于阅读用户而言,其获取到点读设备播放的当前互动问题后,可以给出所播放当前互动问题的答复信息,其中,所述答复信息由所述点读设备上的麦克风采集。本步骤可以接收到用户反馈的答复信息,并可对答复信息进行分析,以确定答复信息是否符合该当前互动问题的标准答案,且可根据确定结果形成相应的点评信息。
示例性地,如,当确定答复信息与标准答案不符时,可形成告知阅读用户答复错误的动态画面作为点评信息并由点读设备播放,还可以将标准答案作为点评信息以动态画面形式由点读设备进行播放,或者,也可由点读设备向阅读用户展示一些惩罚项(如惩罚用户再阅读一遍当前阅读页的文本内容等)。
又如,当确定答复信息与标准答案相同时,就可形成告知阅读用户答复正确的动态画面作为点评信息并由点读设备播放,或者,也可由点读设备播放一些奖励项目作为点评信息(如奖励阅读用户一定数量的金币或者等级值等)展示给阅读用户。
进一步地,所述确定所述答复信息对应的点评信息并用于展示,包括:
将所述答复信息与预先为所述当前互动问题设定的标准答复信息进行比对;如果所述答复信息与所述标准答复信息的匹配度大于设定匹配值,则将设定的表扬语句作为点评信息,并用于语音播放及动画展示所述表扬语句;否则,将设定的惩罚信息作为点评信息,并用于语音播放所述惩罚信息;或者,将设定的答案提示信息作为点评信息,并用于语音播放及动画展示所述答案提示。
可以理解的是,用户的答复信息不一定要与标准答复信息完全一致,只要大致意思相同,即本步骤确定出的匹配度大于或等于设定匹配值即可认为阅读用户答复正确,此时,可形成表扬语句作为点评信息反馈,且可以知道的是,本实施例可以将该点评信息以动画形式通过点读设备的触摸屏展示,也可以将点评信息以语音形式通过点读设备的发音装置播放。
当本步骤确定出的匹配度小于设定匹配值时,可以向阅读用户反馈惩罚信息,其惩罚信息同样可以由触摸屏播放展示,或者,由发音装置播放。此外,在答复信息与标准答复信息的匹配度小于设定匹配值时,也可以确定该互动问题的答案提示信息,并将答案提示信息显示在点读设备的触摸屏上,或者以语音形式播放出来,并进一步等到阅读用户基于答复提示给出的答复信息,再次进行上述答复匹配操作,以向阅读用户反馈点评信息。
示例性地,所述表扬信息可以以彩蛋的动画形式展示在点读设备的触摸屏上并通过点读设备的发声装置播放相对应的语音,其显示和播放的表扬内容可以有“恭喜你,答对了”、“真棒,答对了,奖励你一个金币哟”等,所述惩罚信息也可以以动画形式展示在点读设备上,且可用一个卡通的哭脸或者一个遗憾的表情来作为动画内容,并配上相应的文字如“真遗憾,差一点你就成功啦”、“很抱歉,回答错误,再想想正确答案吧”等,同样,其答案提示也可以动画展示给阅读用户。
可以理解的是,当上述实施例一或实施例二的执行主体为点读设备时,点读设备可直接基于上述步骤实现与阅读用户的阅读互动,当上述实施例一或实施例二的执行主体为点读设备的服务器时,服务器可实时与点读设备进行数据交互,由此实现与阅读用户的阅读互动。此外,上述上述实施例一或实施例二所提供方法的执行主体也可以是点读设备及点读设备的服务器,二者配合执行上述方法步骤,实现用户阅读时的阅读互动,本发明实施例对实现所提供阅读互动方法的执行主体并不做具体限定,可具体情况具体分析。
本发明实施例二提供的一种阅读互动方法,具体化了文本内容中关键知识信息的实现过程,同时增加了阅读用户针对互动问题的答复信息获取操作。利用该方法,通过阅读过程中与阅读用户的互动问答,增强了用户阅读过程中的趣味性,还增强用户阅读过程中进行主动思考的积极性,从而达到了提高用户阅读兴趣以及提高用户发散思维能力的阅读效果。
实施例三
图3为本发明实施例三提供的一种阅读互动装置的结构示意图,该装置适用于在用户阅读是需要进行阅读互动的情况,该装置可以由软件和/或硬件实现,并一般集成在点读设备和/或点读设备的服务器上。具体地,如图3所示,该装置包括:信息获取模块31、关键信息确定模块32以及互动问题确定模块33。
其中,信息获取模块31,用于获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容,所述图像信息由所述点读设备上的摄像头捕获;
关键信息确定模块32,用于确定所述文本内容中的关键知识信息;
互动问题确定模块33,用于基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
在本实施例中,该装置首先通过信息获取模块31获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容,然后通过关键信息确定模块32确定所述文本内容中的关键知识信息,最终通过互动问题确定模块33基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
本发明实施例三提供的阅读互动装置,通过阅读过程中与阅读用户的问题互动,增强了用户阅读过程中的趣味性,还增强用户阅读过程中进行主动思考的积极性,从而达到了提高用户阅读兴趣以及提高用户发散思维能力的阅读效果。
进一步地,关键信息确定模块32,具体用于:
分词处理所述文本内容,获得对应所述文本内容的词语集合;
统计各所述词语的出现频次,获得出现频次大于设定阈值的关键词;
基于设定的语法编译模型汇总各所述关键词,获得所述文本内容对应的关键知识信息。
进一步地,该装置还包括:
点评信息确定模块,用于接收到用户针对当前互动问题的答复信息后,确定所述答复信息对应的点评信息并用于展示,所述答复信息由所述点读设备上的麦克风采集。
进一步地,所述点评信息确定模块,具体用于:
接收到用户针对当前互动问题的答复信息后,将所述答复信息与预先为所述当前互动问题设定的标准答复信息进行比对;
如果所述答复信息与所述标准答复信息的匹配度大于设定匹配值,则将设定的表扬语句作为点评信息,并用于语音播放及动画展示所述表扬语句;否则,
将设定的惩罚信息作为点评信息,并用于语音播放所述惩罚信息;或者,
将设定的答案提示信息作为点评信息,并用于语音播放及动画展示所述答案提示。
进一步地,该装置还包括:
描绘信息生成模块,用于在确定所述文本内容中的关键知识信息之后,基于所述关键知识信息生成相应的画面描绘信息,并用于播放所述画面描绘信息。
实施例四
图4为本发明实施例四提供的一种点读设备的结构示意图,如图4所示,该点读设备包括:主体41、位于主体41内的控制器(未示出)和无线网络模块(未示出)以及嵌套于主体41上的拾音装置42、发音装置43、摄像头44以及触摸屏45,主体41设置在阅读材料47所在载体46上,控制器,用于控制下述至少一项:拾音装置42、发音装置43、摄像头44以及触摸屏45执行相应的工作,还用于实现本发明实施例提供的阅读互动方法,其中,拾音装置42,用于采集音频信息,所述音频信息包括用户的答复信息;发音装置43,用于进行音频信息播放;摄像头44,用于捕获图像信息,所述图像信息包括阅读材料中各阅读页;触摸屏45,用于进行信息显示。
点读设备例如可以是具有拾音装置、发音装置、摄像头以及触摸屏的电脑、平板或手机等电子设备,其中,拾音装置可以是麦克风、发音装置可以是扬声器。所述阅读材料可以是常规的纸质书籍、期刊或绘本等。示例性地,阅读材料所在载体可以为桌面,点读设备的主体41安装在桌面上,控制器可通过无线网络模块与后端的服务器进行数据交互。
作为本公开实施例所提供方法执行主体的点读设备,能够增强用户阅读过程中的趣味性,以及增强用户阅读过程中进行主动思考的积极性,从而达到了提高用户阅读兴趣以及提高用户发散思维能力的阅读效果。
实施例五
图5为本发明实施例五提供的一种服务器的结构示意图。可以理解的是,本发明实施例五提供的服务器同样可以作为本发明实施例所提供阅读互动方法的执行主体。如图5所示,本发明实施例五提供的服务器包括:一个或多个处理器51和存储装置52;该服务器中的处理器51可以是一个或多个,图5中以一个处理器51为例;存储装置52用于存储一个或多个程序;所述一个或多个程序被所述一个或多个处理器51执行,使得所述一个或多个处理器51实现如本发明实施例中任一项所述的阅读互动方法。
所述服务器还可以包括:输入装置53和输出装置54。
服务器中的处理器51、存储装置52、输入装置53和输出装置54可以通过总线或其他方式连接,图5中以通过总线连接为例。
该服务器中的存储装置52作为一种计算机可读存储介质,可用于存储一个或多个程序,所述程序可以是软件程序、计算机可执行程序以及模块,如本发明实施例一或二所提供阅读互动方法对应的程序指令/模块(例如,附图4所示的阅读互动装置中的模块,包括:信息获取模块31、关键信息确定模块32以及互动问题确定模块33)。处理器51通过运行存储在存储装置52中的软件程序、指令以及模块,从而执行服务器的各种功能应用以及数据处理,即实现上述方法实施例中阅读互动方法。
存储装置52可包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序;存储数据区可存储根据服务器的使用所创建的数据等。此外,存储装置52可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他非易失性固态存储器件。在一些实例中,存储装置52可进一步包括相对于处理器51远程设置的存储器,这些远程存储器可以通过网络连接至设备。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。
输入装置53可用于接收输入的数字或字符信息,以及产生与服务器的用户设置以及功能控制有关的键信号输入。输出装置54可包括显示屏等显示设备。
并且,当上述服务器所包括一个或者多个程序被所述一个或者多个处理器51执行时,程序进行如下操作:
获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容,所述图像信息由所述点读设备上的摄像头捕获;确定所述文本内容中的关键知识信息;基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
本发明实施例五还提供了一种计算机可读存储介质,其上存储有计算机程序,该程序被处理器执行时用于执行阅读互动方法,该方法包括:
获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容,所述图像信息由所述点读设备上的摄像头捕获;确定所述文本内容中的关键知识信息;基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放。
可选的,该程序被处理器执行时还可以用于执行本发明任意实施例所提供的阅读互动方法。
本发明实施例的计算机存储介质,可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(Random AccessMemory,RAM)、只读存储器(Read Only Memory,ROM)、可擦式可编程只读存储器(ErasableProgrammable Read Only Memory,EPROM)、闪存、光纤、便携式CD-ROM、光存储器件、磁存储器件、或者上述的任意合适的组合。计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行***、装置或者器件使用或者与其结合使用。
计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于:电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。
计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、无线电频率(Radio Frequency,RF)等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)——连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
注意,上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解,本发明不限于这里所述的特定实施例,对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此,虽然通过以上实施例对本发明进行了较为详细的说明,但是本发明不仅仅限于以上实施例,在不脱离本发明构思的情况下,还可以包括更多其他等效实施例,而本发明的范围由所附的权利要求范围决定。

Claims (8)

1.一种阅读互动方法,其特征在于,包括:
获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容;
确定所述文本内容中的关键知识信息;
基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放;
其中,所述互动问题为多个,顺序选取其中一个互动问题用于播放;
其中,所述确定所述文本内容中的关键知识信息之后,还包括:
基于所述关键知识信息生成相应的画面描绘信息,并用于播放所述画面描绘信息;
其中,所述确定所述文本内容中的关键知识信息,包括:
分词处理所述文本内容,获得对应所述文本内容的词语集合;
统计各所述词语的出现频次,获得出现频次大于设定阈值的关键词;
基于设定的语法编译模型汇总各所述关键词,获得所述文本内容对应的关键知识信息。
2.根据权利要求1所述的方法,其特征在于,还包括:
接收到用户针对当前互动问题的答复信息后,确定所述答复信息对应的点评信息并用于展示,所述答复信息由点读设备上的麦克风采集。
3.根据权利要求2所述的方法,其特征在于,所述确定所述答复信息对应的点评信息并用于展示,包括:
将所述答复信息与预先为所述当前互动问题设定的标准答复信息进行比对;
如果所述答复信息与所述标准答复信息的匹配度大于设定匹配值,则将设定的表扬语句作为点评信息,并用于语音播放及动画展示所述表扬语句;否则,
将设定的惩罚信息作为点评信息,并用于语音播放所述惩罚信息;或者,
将设定的答案提示信息作为点评信息,并用于语音播放及动画展示所述答案提示。
4.一种阅读互动装置,其特征在于,包括:
信息获取模块,用于获取当前阅读页面的图像信息,并识别所述图像信息中的文本内容;
关键信息确定模块,用于确定所述文本内容中的关键知识信息;
互动问题确定模块,用于基于预设的互动问题库及所述关键知识信息,确定对应所述当前阅读页面的互动问题,发送所述互动问题并用于播放;
其中,所述互动问题为多个,顺序选取其中一个互动问题用于播放;
描绘信息生成模块,用于在确定所述文本内容中的关键知识信息之后,基于所述关键知识信息生成相应的画面描绘信息,并用于播放所述画面描绘信息;
其中,所述确定所述文本内容中的关键知识信息,包括:
分词处理所述文本内容,获得对应所述文本内容的词语集合;
统计各所述词语的出现频次,获得出现频次大于设定阈值的关键词;
基于设定的语法编译模型汇总各所述关键词,获得所述文本内容对应的关键知识信息。
5.根据权利要求4所述的装置,其特征在于,还包括:
点评信息确定模块,用于接收到用户针对当前互动问题的答复信息后,确定所述答复信息对应的点评信息并用于展示,所述答复信息由点读设备上的麦克风采集。
6.一种点读设备,其特征在于,包括:主体、位于主体内的控制器和无线网络模块以及嵌套于所述主体上的拾音装置、发音装置、摄像头以及触摸屏,所述主体设置在阅读材料所在载体上,
所述控制器,用于控制下述至少一项:拾音装置、发音装置、摄像头、和触摸屏执行相应的工作,还用于实现如权利要求1-3任一项所述的阅读互动方法;
其中,所述拾音装置,用于采集音频信息,所述音频信息包括用户的答复信息;
所述发音装置,用于进行音频信息播放;
所述摄像头,用于捕获图像信息,所述图像信息包括阅读材料中各阅读页;
所述触摸屏,用于进行信息显示。
7.一种服务器,其特征在于,包括:
一个或多个处理器;
存储装置,用于存储一个或多个程序;
当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-3中任一所述的阅读互动方法。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-3中任一所述的阅读互动方法。
CN201910040221.4A 2019-01-16 2019-01-16 阅读互动方法、装置、设备、服务器及存储介质 Active CN111523343B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910040221.4A CN111523343B (zh) 2019-01-16 2019-01-16 阅读互动方法、装置、设备、服务器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910040221.4A CN111523343B (zh) 2019-01-16 2019-01-16 阅读互动方法、装置、设备、服务器及存储介质

Publications (2)

Publication Number Publication Date
CN111523343A CN111523343A (zh) 2020-08-11
CN111523343B true CN111523343B (zh) 2022-04-01

Family

ID=71900008

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910040221.4A Active CN111523343B (zh) 2019-01-16 2019-01-16 阅读互动方法、装置、设备、服务器及存储介质

Country Status (1)

Country Link
CN (1) CN111523343B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112287705A (zh) * 2020-10-21 2021-01-29 北京大米科技有限公司 点读设备的交互方法、装置、存储介质及点读设备
CN113420131A (zh) * 2021-06-11 2021-09-21 洪恩完美(北京)教育科技发展有限公司 儿童绘本的阅读引导方法、设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107798931A (zh) * 2017-12-05 2018-03-13 上海电机学院 一种智能幼教学习***及方法
CN108055593A (zh) * 2017-12-20 2018-05-18 广州虎牙信息科技有限公司 一种互动消息的处理方法、装置、存储介质及电子设备
CN108509136A (zh) * 2018-04-12 2018-09-07 山东音为爱智能科技有限公司 一种基于人工智能的儿童绘本辅助阅读方法
CN108710653A (zh) * 2018-05-09 2018-10-26 北京智能管家科技有限公司 一种绘本朗读点播方法、装置及***
CN108806360A (zh) * 2018-05-31 2018-11-13 北京智能管家科技有限公司 伴读方法、装置、设备和存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150269133A1 (en) * 2014-03-19 2015-09-24 International Business Machines Corporation Electronic book reading incorporating added environmental feel factors
CN108279833A (zh) * 2018-01-08 2018-07-13 维沃移动通信有限公司 一种阅读互动方法及移动终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107798931A (zh) * 2017-12-05 2018-03-13 上海电机学院 一种智能幼教学习***及方法
CN108055593A (zh) * 2017-12-20 2018-05-18 广州虎牙信息科技有限公司 一种互动消息的处理方法、装置、存储介质及电子设备
CN108509136A (zh) * 2018-04-12 2018-09-07 山东音为爱智能科技有限公司 一种基于人工智能的儿童绘本辅助阅读方法
CN108710653A (zh) * 2018-05-09 2018-10-26 北京智能管家科技有限公司 一种绘本朗读点播方法、装置及***
CN108806360A (zh) * 2018-05-31 2018-11-13 北京智能管家科技有限公司 伴读方法、装置、设备和存储介质

Also Published As

Publication number Publication date
CN111523343A (zh) 2020-08-11

Similar Documents

Publication Publication Date Title
CN110517689B (zh) 一种语音数据处理方法、装置及存储介质
CN108847214B (zh) 语音处理方法、客户端、装置、终端、服务器和存储介质
CN107040452B (zh) 一种信息处理方法、装置和计算机可读存储介质
CN111107442B (zh) 音视频文件的获取方法、装置、服务器及存储介质
CN101998107A (zh) 信息处理装置、会议***和信息处理方法
CN114339285B (zh) 知识点的处理方法、视频处理方法、装置及电子设备
US10089898B2 (en) Information processing device, control method therefor, and computer program
CN110569364A (zh) 在线教学方法、装置、服务器及存储介质
CN111524507A (zh) 语音信息的反馈方法、装置、设备、服务器及存储介质
CN113140138A (zh) 互动教学方法、装置、存储介质及电子设备
CN111523343B (zh) 阅读互动方法、装置、设备、服务器及存储介质
CN110808038A (zh) 普通话评测方法、装置、设备及存储介质
CN113315979A (zh) 数据处理方法、装置、电子设备和存储介质
US20220391058A1 (en) Interaction information processing method and apparatus, electronic device and storage medium
CN110767005A (zh) 基于儿童专用智能设备的数据处理方法及***
CN110970030A (zh) 一种语音识别转换方法及***
CN113573128B (zh) 一种音频处理方法、装置、终端以及存储介质
CN111241802B (zh) 一种作业生成方法、装置、存储介质及终端
CN113763925B (zh) 语音识别方法、装置、计算机设备及存储介质
KR102088047B1 (ko) 언어 학습 장치
KR20230025708A (ko) 오디오 제시 인터렉션을 갖는 자동화된 어시스턴트
KR100884826B1 (ko) 페이지 인덱스를 이용한 반복 학습 단말기, 시스템 및 방법
CN111580766A (zh) 一种信息显示方法、装置和信息显示***
Abreu et al. Voice Interaction on TV: Analysis of natural language interaction models
KR20200071996A (ko) 학습 단말기와 서버를 이용한 언어 학습 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant