CN111027358B - 一种基于书写进度的听写报读方法及电子设备 - Google Patents

Abstract

一种基于书写进度的听写报读方法及电子设备，该方法包括：在报读当前听写内容之后，监测用户针对当前听写内容的书写内容以及书写状态信息；其中，该书写状态信息至少包括书写内容中的书写时长；判断书写内容的实际书写笔顺是否与当前听写内容的标准书写笔顺相匹配；如果不匹配，根据书写状态信息判断用户针对书写内容的书写时长是否大于预设的标准书写时长；如果大于，控制电子设备切换并报读下一听写内容。实施本发明实施例，能够提高听写报读的效率和智能化程度。

Description

一种基于书写进度的听写报读方法及电子设备

技术领域

本发明涉及教育技术领域，具体涉及一种基于书写进度的听写报读方法及电子设备。

背景技术

听写是小学语文常见的一种作业形式。对于大多数学生来说，听写过程中生字词的报读工作主要由家长完成，即家长以人工报读的方式向学生报读生字词，以辅助学生完成相应的听写任务。这种人工报读的方式需要配合家长的空闲时间，然而，家长常常会因为忙碌于工作而没有太多时间辅助学生进行听写，学生的听写任务无法按时完成。

为了解决学生无法按时完成听写任务的问题，听写报读应用应运而生。学生可以在安装有听写报读应用的电子设备上选择想要听写的内容，然后通过听写报读应用预设的报读模式对听写内容进行报读，或者通过人工控制电子设备进行听写报读。

其中，在通过听写报读应用预设的报读模式对听写内容进行报读时，听写内容依靠默认设置的间隔时长进行切换，因此在听写完毕当前的听写内容之后，学生通常需要等待一定时长，直至电子设备报读下一个听写内容，因此听写报读的效率较低。而采用人工控制的方式则需要学生点击该电子设备上的对应操作按钮来实现听写内容的切换，听写报读的智能化程度较低。可见，目前的听写报读方式的听写报读效率低下，且缺乏智能性。

发明内容

本发明实施例公开了一种基于书写进度的听写报读方法及电子设备，能够提高听写报读的效率和智能化程度。

本发明实施例第一方面公开一种基于书写进度的听写报读方法，包括：

在电子设备报读当前听写内容之后，监测用户针对所述当前听写内容的书写内容以及书写状态信息；其中，所述书写状态信息至少包括所述书写内容中的书写时长；

判断所述书写内容的实际书写笔顺是否与所述当前听写内容的标准书写笔顺相匹配；

如果不匹配，根据所述书写状态信息判断用户针对所述书写内容的书写时长是否大于预设的标准书写时长；

如果大于，控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，在本发明实施例第一方面中，如果所述书写时长大于所述标准书写时长，所述方法还包括：

判断所述书写内容的当前书写速度是否小于预设的标准书写速度；

如果所述当前书写速度小于所述标准书写速度，执行所述的控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，在本发明实施例第一方面中，如果所述实际书写笔顺与所述标准书写笔顺匹配，所述方法还包括：

判断所述实际书写笔顺是否为所述书写内容的结尾笔顺；

如果所述实际书写笔顺为所述书写内容的结尾笔顺，执行所述的控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，在本发明实施例第一方面中，所述在电子设备报读当前听写内容之后，监测用户针对所述当前听写内容的书写内容以及书写状态信息，包括：

在电子设备报读当前听写内容之后，通过所述电子设备的红外传感器对所述电子设备所在的学习桌面进行识别，以得到人体红外特征信息；

根据所述人体红外特征信息确定用户的书写区域；

调整所述电子设备的第一摄像头的拍摄方向，以使所述第一摄像头的拍摄方向朝向所述书写区域，并拍摄用户在所述书写区域书写所述书写内容的多帧书写图像；

分析所述多帧书写图像，以获得用户针对所述当前听写内容的书写内容以及书写状态信息。

作为一种可选的实施方式，在本发明实施例第一方面中，控制所述电子设备的第二摄像头拍摄用户的多帧脸部图像；

从所述多帧脸部图像中截取出眼部图像，并通过分析所述眼部图像，得到第一脸部特征信息；

从所述多帧脸部图像中截取出唇部图像，并通过分析唇部图像，得到第二脸部特征信息；

根据所述第一脸部特征信息以及所述第二脸部特征信息进行计算以确定用户的疲劳指数，并判断所述疲劳指数是否高于预设疲劳指数；

如果所述疲劳指数高于所述预设疲劳指数，控制所述电子设备暂停报读所述下一个听写内容。

本发明实施例第二方面公开一种电子设备，包括：

监测单元，用于在电子设备报读当前听写内容之后，监测用户针对所述当前听写内容的书写内容以及书写状态信息；其中，所述书写状态信息至少包括所述书写内容中的书写时长；

判断单元，用于判断所述书写内容的实际书写笔顺是否与所述当前听写内容的标准书写笔顺相匹配，以及在判断出所述实际书写笔顺与所述标准书写笔顺不匹配时，根据所述书写状态信息判断用户针对所述书写内容的书写时长是否大于预设的标准书写时长；

报读单元，用于在所述判断单元判断出所述书写时长大于所述标准书写时长时，控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，在本发明实施例第二方面中，所述判断单元，还用于在判断出所述当前书写时长大于所述标准书写时长时，判断所述书写内容的当前书写速度是否小于预设的标准书写速度；

所述报读单元，具体用于在所述判断单元判断出所述当前书写时长大于所述标准书写时长时，以及所述当前书写速度小于所述标准书写速度时，控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，在本发明实施例第二方面中，所述判断单元，还用于在判断出所述实际书写笔顺与所述标准书写笔顺匹配时，判断所述实际书写笔顺是否为所述书写内容的结尾笔顺；

所述报读单元，还用于在所述判断单元判断出所述实际书写笔顺为所述书写内容的结尾笔顺时，控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，在本发明实施例第二方面中，所述监测单元，包括：

识别子单元，用于在电子设备报读当前听写内容之后，控制所述电子设备的红外传感器对所述电子设备所在的学习桌面进行识别，以得到人体红外特征信息；

确定子单元，用于根据所述人体红外特征信息确定用户的书写区域；

调整子单元，用于调整所述电子设备的第一摄像头的拍摄方向，以使所述第一摄像头的拍摄方向朝向所述书写区域；

拍摄子单元，用于拍摄用户在所述书写区域书写所述书写内容的多帧书写图像；

分析子单元，用于分析所述多帧书写图像，以获得用户针对所述当前听写内容的书写内容以及书写状态信息。

作为一种可选的实施方式，在本发明实施例第二方面中，所述电子设备还包括：

控制单元，用于控制所述电子设备的第二摄像头拍摄用户的多帧脸部图像；

截取分析单元，用于从所述多帧脸部图像中截取出眼部图像，并通过分析所述眼部图像，得到第一脸部特征信息，以及从所述多帧脸部图像中截取出唇部图像，并通过分析唇部图像，得到第二脸部特征信息；

计算单元，用于根据所述第一脸部特征信息以及所述第二脸部特征信息进行计算以确定用户的疲劳指数；

所述判断单元，还用于判断所述疲劳指数是否高于预设疲劳指数；

暂停单元，用于控制所述电子设备暂停报读所述下一个听写内容。

本发明实施例第三方面公开一种电子设备，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行本发明实施例第一方面公开的任一项方法。

本发明第四方面公开一种计算机可读存储介质，其存储计算机程序，其中，所述计算机程序使得计算机执行本发明实施例第一方面公开的任一项方法。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行本发明实施例第一方面公开的任一项方法。

与现有技术相比，本发明实施例具有以下有益效果：

电子设备在报读当前听写内容之后，监测用户针对当前听写内容的书写内容以及书写状态信息；其中，书写状态信息至少包括书写内容中的书写时长；判断书写内容的实际书写笔顺是否与当前听写内容的标准书写笔顺相匹配；如果不匹配，根据书写状态信息判断用户针对书写内容的书写时长是否大于预设的标准书写时长；如果大于，控制电子设备切换并报读下一听写内容。可见，实施本发明实施例，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种基于书写进度的听写报读方法的流程示意图；

图2是本发明实施例公开的另一种基于书写进度的听写报读方法的流程示意图；

图3是本发明实施例公开的又一种基于书写进度的听写报读方法的流程示意图；

图4是本发明实施例公开的一种电子设备的结构示意图；

图5是本发明实施例公开的另一种电子设备的结构示意图；

图6是本发明实施例公开的又一种电子设备的结构示意图；

图7是本发明实施例公开的又一种电子设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开了一种基于书写进度的听写报读方法及电子设备，能够提高听写报读的效率和智能化程度。以下分别进行详细说明。

实施例一

请参阅图1，图1是本发明实施例公开的一种基于书写进度的听写报读方法的流程示意图。其中，图1所描述的听写作业的批改方法适用于家教机、学***板等电子设备，本发明实施例不做限定。其中，上述的电子设备的操作***可包括但不限于Android操作***、IOS操作***、Symbian(塞班)操作***、Black Berry(黑莓)操作***、WindowsPhone8操作***等等，本发明实施例不做限定。如图1所示，该基于书写进度的听写报读方法可以包括以下步骤：

101、电子设备在报读当前听写内容之后，监测用户针对当前听写内容的书写内容以及书写状态信息；其中，该书写状态信息至少包括书写内容中的书写时长。

本发明实施例中，电子设备可以通过预先安装的听写报读应用为用户提供听写报读服务。家长或老师可以在与该电子设备绑定的学***板或笔记本电脑等等)为学生用户设置听写任务，并通过学习管控终端将该听写任务发送至电子设备的听写报读应用，以使该电子设备的听写报读应用根据该听写任务为学生用户提供听写报读服务。其中，该听写任务可以包括听写内容(生字词、课文等等)、听写执行时间等，本发明实施例不做限定。

本发明实施例中，可选的，上述书写状态信息还可以包括用户的书写动作特征；进一步可选的，电子设备可以判断该书写动作特征是否与预设的标准书写动作特征相匹配；如果该书写动作特征与标准书写动作特征相匹配，触发执行步骤102；如果该书写动作特征与标准书写动作特征不匹配，输出提示信息以提示用户注意书写动作规范。其中，用户的书写动作特征可以包括用户的握笔姿态特征，也可以是用户的坐姿特征等等，本发明实施例不做限定。再进一步可选的，电子设备可以通过与其关联的动作感应传感器(例如压力传感器等)获取用户的书写动作特征，并且该动作感应传感器可以设置在用户用于完成听写任务的书写笔(普通铅笔、水性笔、智能笔或者电子书写笔等等)以及用户完成听写任务所端坐的座椅上，本发明实施例不做限定。

102、电子设备判断书写内容的实际书写笔顺是否与当前听写内容的标准书写笔顺相匹配，如果不匹配，触发执行步骤103；如果匹配，结束本流程。

作为一种可选的实施方式，如果实际书写笔顺与标准书写笔顺匹配，电子设备还可以判断实际书写笔顺是否为书写内容的结尾笔顺；如果实际书写笔顺为书写内容的结尾笔顺，触发执行所步骤104。

本发明实施例中，听写内容可以是生字词，因此，该听写内容可以看成是由若干个单字组成，而每个单字可以由若干个笔画组成，每个单字笔画的书写顺序即为书写笔顺。一般来说，每个书写笔顺均存在预先设定的笔顺规则，例如先左后右，先上后下，先内后外等等，由预先设定的规则可以确定出标准书写笔顺。可选的，上述当前听写内容的标准书写笔顺可以存储在电子设备的预设笔顺库中，本发明实施例不做限定。

103、电子设备根据书写状态信息判断用户针对上述书写内容的书写时长是否大于预设的标准书写时长，如果该书写时长大于预设的标准书写时长，触发执行步骤104；如果该书写时长不大于预设的标准书写时长，继续执行步骤103。

作为一种可选的实施方式，上述书写时长可以包括单字书写时长以及相邻两个连续字之间的间隔时长；那么，进一步的，电子设备根据书写状态信息判断用户针对上述书写内容的书写时长是否大于预设的标准时长，可以包括：

电子设备判断上述书写内容中的单字书写时长是否大于预设的标准单字书写时长；如果该单字书写时长大于预设的标准单字书写时长，判断上述内容中的两个连续字之间的间隔时长是否大于预设的标准间隔时长；如果上述间隔时长大于预设的标准间隔时长，确定用户针对上述书写内容的书写时长大于预设的标准时长。

104、电子设备控制其切换并报读下一听写内容。

本发明实施例中，上述听写任务可以包括若干个听写内容，因此，电子设备在执行完步骤104之后，还可以转向步骤101，直至该听写任务所包括的所有听写任务报读完毕，结束本流程。

可见，在图1所描述的方法中，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高。

实施例二

请参阅图2，图2是本发明实施例公开的另一种基于书写进度的听写报读方法的流程示意图。如图2所示，该基于书写进度的听写报读方法包括以下步骤：

本发明实施例中，该基于书写进度的听写报读方法包括步骤201～202，针对步骤201～202的描述，请参照实施例一中针对步骤101～102的详细描述。其中，在步骤202中，电子设备判断书写内容的实际书写笔顺是否与当前听写内容的标准书写笔顺相匹配，如果不匹配，触发执行步骤203；如果匹配，结束本流程。

203、电子设备根据书写状态信息判断用户针对书写内容的书写时长是否大于预设的标准书写时长；如果大于预设的标准书写时长，触发执行步骤204；如果不大于预设的标准书写时长，继续执行步骤203。

作为一种可选的实施方式，如果上述书写时长大于预设的标准书写时长，电子设备还可以判断书写内容的当前书写速度是否小于预设的标准书写速度，如果当前书写速度小于标准书写速度，控制电子设备切换并报读下一听写内容；如果当前书写速度不小于标准书写速度，在预先设置的切换时长后切换并报读下一听写内容。

本发明实施例中，上述标准书写时长以及标准书写速度可以是根据预先建立的书写模型确定出来的，其中，该书写模型可以是通过采集到的用于反映用户在电子设备或者书本上的书写过程的样本数据(样本数据可以包括书写速度数据、单字书写时长的数据以及连续字的间隔时间的数据等等)训练得到的，该书写模型可以是神经网络模型，本发明实施例不做限定。

204、电子设备控制该电子设备的第二摄像头拍摄用户的多帧脸部图像。

205、电子设备从多帧脸部图像中截取出眼部图像，并通过分析眼部图像，得到第一脸部特征信息；以及从多帧脸部图像中截取出唇部图像，并通过分析唇部图像，得到第二脸部特征信息。

本发明实施例中，由于人的疲劳状态可以体现在用户的脸部特征上，因此，电子设备可以将眼部在某一时间段内的闭合次数或者闭合程度(面积)、嘴部的开合程度(面积)作为采样特征对用户的疲劳状态进行判断。

206、电子设备根据第一脸部特征信息以及第二脸部特征信息进行计算以确定用户的疲劳指数。

本发明实施例中，电子设备可以根据每个脸部特征信息所对应的权重值以及预先确定出的每个上述脸部特征信息所对应的参数值计算用户的疲劳指数。具体来说，电子设备可以根据每个脸部特征信息与针对该脸部特征信息的标准脸部特征信息的比对结果，确定每个脸部特征信息对应的参数值；进一步地，计算每个脸部特征信息所对应的权重值以及其对应的参数值的乘积，并计算所有乘积的和；根据所有乘积的和确定用户的疲劳指数。

在本方案中，脸部特征信息包括第一脸部特征信息和第二脸部特征信息，而脸部特征信息所对应的预设的权重值为第一权重值和第二权重值；进一步地，将第一脸部特征信息与针对第一脸部特征信息的第一标准脸部特征信息进行比对，根据得到的第一比对结果确定出第一参数值；同时，将第二脸部特征信息与针对第二脸部特征信息的第一标准脸部特征信息进行比对，根据得到的第二比对结果确定出第二参数值；计算第一权重值与第一参数值的乘积，得到第一乘积结果，以及计算第二权重值与第二参数值的乘积，得到第二乘积结果；对第一乘积结果和第二乘积结果进行加权和的计算，根据加权和的计算结果确定用户的疲劳指数。其中，将脸部特征信息与针对该脸部特征信息的标准脸部特征信息进行比对，根据比对结果确定参数值，具体来说，可以将脸部特征信息与针对该脸部特征信息的标准脸部特征信息进行比对，得到该脸部特征信息与其对应的标准脸部特征信息的相似度；判断该相似度是否高于与其对应的预设相似度的阈值，如果高于，参数值为A；如果不高于，参数值为B。其中，A和B可以是预先设置的任意数值(例如0、1等)，本发明实施例不做限定。可见，本发明实施例，能够通过第一脸部特征信息以及第二脸部特征信息的加权计算结果确定用户的疲劳指数，提高了确定疲劳指数的速度，同时与单一因素相比，对疲劳判断的准确性和可靠性更高。

207、电子设备判断疲劳指数是否高于预设疲劳指数，如果疲劳指数高于预设疲劳指数，触发执行步骤208；如果疲劳指数不高于该预设疲劳指数，触发执行步骤209。

作为一种可选的实施方式，如果疲劳指数不高于预设疲劳指数，电子设备还可以获取预设时间段内(例如一周内、三天内等等)用户在各个社交应用平台发布的日志信息，并对该日志信息进行识别，以得到用户的情绪类型。当该情绪类型为正面情绪类型时，触发执行步骤209；当该情绪类型为负面情绪类型时，触发执行步骤208。

本发明实施例中，可选的，社交应用平台可以包括但不限于QQ、微博、博客；日志信息中可以包括文字、静态图片、动态图片、语音、视频等。以日志信息为文字为例，电子设备对日志信息进行识别，以得到用户的情绪类型，可以包括：

电子设备对日志信息进行分词处理，得到若干个待匹配分词；

将若干个待匹配分词与各个预设的分词集合进行匹配；

确定与上述待匹配分词匹配成功最多的目标分词集合，将该目标分词集合所对应的目标情绪类型确定为用户的情绪类型；其中，用户的情绪类型可以包括正面情绪类型以及负面情绪类型。

本方案中，可以预先设定各个情绪类型对应的分词集合。接下来通过具体实例进行说明：用户在QQ发布的“说说”(“说说”为QQ空间的一个功能模块，也就是空间动态，用户可以在“说说”以文字等形式记录自己的日常动态)内容为：今天好烦呀。那么电子设备可以对该“说说”内容进行分词处理，并从中提取到“烦”这一分词，并根据这一分词与各个预设的分词集合的匹配，确定出用户的情绪类型为负面情绪类型。

可见，本发明实施例，能够基于用户在社交应用平台发布的日志信息对用户进行情绪识别，使得情绪识别结果更符合用户的实际情况，识别结果更准确。

此外，电子设备还可以采集用户的体征数据，并通过用户的体征数据确定用户的情绪类型。具体来说，电子设备可以接收预先关联的体征传感器发送的各个类型的体征数据，并将每个类型的体征数据与其类型所对应的标准体征数据进行对比，根据比对结果确定该类型的体征数据所对应的分值；对所有类型的体征数据所对应的分值进行加和，得到加和的总分值；分别计算总分值与各个情绪类型对应的标准分值的差值，将与总分值差值最小的标准分值所对应的情绪类型确定为用户的情绪类型。例如，预设的情绪类型有正面情绪类型、正常情绪类型和负面情绪类型，正面情绪类型对应的标准分值为80分，负面情绪类型对应的标准分值为40分；正常情绪类型对应的分值60分；而总分值为30分；可知总分值与负面情绪类型的差值最小，因此可以确定用户的情绪类型为负面情绪类型。

其中，上述体征传感器位于用户身上穿戴的移动设备上，用于检测用户的心率、血压、体温等等人体生理特征数据；因此，体征传感器可以包括但不限于脉搏传感器、人体温度传感器等等。

可见，本发明实施例，能够根据用户当前的体征数据识别用户当前的情绪类型，使得情绪类型的识别结果更符合用户的实际情况，识别结果更准确。

208、电子设备控制暂停报读下一个听写内容。

209、电子设备在预先设置的切换时长之后切换并报读下一听写内容。

本发明实施例中，上述听写任务可以包括若干个听写内容，因此，电子设备在执行完步骤209之后，还可以转向步骤201，直至该听写任务所包括的所有听写任务报读完毕，结束本流程。

基于上述实施例内容，从用户的多个脸部特征信息(例如眼部和嘴部)综合确定出用户当前的疲劳指数，进而依据其疲劳指数的大小确定对听写内容执行相应的操作(切换报读或者暂停报读)。这种对于听写内容的智能控制方法使得听写内容的切换更符合用户的实际身体状况，进而能够改善用户的听写效果。

可见，在图2所示的方法中，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高；以及，能够通过第一脸部特征信息以及第二脸部特征信息的加权计算结果确定用户的疲劳指数，与单一因素相比，对疲劳判断的准确性和可靠性更高；此外，能够根据用户当前的体征数据或者用户的日志信息识别用户当前的情绪类型，使得情绪类型的识别结果更符合用户的实际情况，识别结果更准确。

实施例三

请参阅图3，图3是本发明实施例公开的又一种基于书写进度的听写报读方法的流程示意图。如图3所示，该基于书写进度的听写报读方法包括以下步骤：

301、电子设备在电子设备报读当前听写内容之后，通过电子设备的红外传感器对电子设备所在的学习桌面进行识别，以得到人体红外特征信息。

需要说明的是，本方案默认电子设备所在的学习桌面为用户根据当前听写内容书写上述书写内容的桌面。

302、电子设备根据上述人体红外特征信息确定用户的书写区域。

本发明实施例中，上述书写区域指的是用户的手掌以及手臂(至少包括前臂)在上述学习桌面的活动区域。

303、电子设备调整电子设备的第一摄像头的拍摄方向，以使该第一摄像头的拍摄方向朝向书写区域，并拍摄用户在书写区域书写上述书写内容的多帧书写图像。

本发明实施例中，基于上述实施例内容，电子设备可以在报读当前听写内容之后，可以通过电子设备内置的红外传感器对其所在的学习桌面进行识别，此时如果用户在学习桌面进行听写的话，电子设备可以通过红外传感器对用户位于学习桌面上的手臂进行识别从而得到人体红外特征信息；进一步地，根据该人体红外特征信息就可以确定出用户在该学习桌面的活动范围，该活动范围即为用户的书写区域，进而调整第一摄像头的拍摄方向，以使该拍摄方向对准书写区域进行拍摄，得到用户在书写区域书写上述书写内容的多帧书写图像。可见，基于红外传感器识别得到的人体红外特征信息可以确定出用户的书写区域，并以此调整第一摄像头的拍摄方向，使得第一摄像头朝向书写区域拍摄用户书写上述书写内容的过程，得到多帧书写图像，避免了第一摄像头拍摄到过多无用图像，使得摄像头的拍摄内容更具有针对性，减少后续书写图像识别的工作量，从而提高书写图像的识别准确度。

304、电子设备分析多帧书写图像，以获得用户针对当前听写内容的书写内容以及书写状态信息；其中，该书写状态信息至少包括书写内容中的书写时长。

本发明实施例中，可以理解，书写区域可以包括有用户用于书写上述书写内容的书写面(如书本、作业本的纸面或者电子书写板面等)，因此，电子设备可以通过分析多帧书写图像得到用户针对当前听写内容的书写内容，并可以通过分析书写内容在每帧书写图像中的差异确定出书写内容的书写时长。

其中，该基于书写进度的听写报读方法包括步骤305～312，针对步骤305～312的描述，请参照实施例二中针对步骤202～209的详细描述。

可见，在图3所描述的方法中，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高；以及，能够通过第一脸部特征信息以及第二脸部特征信息的加权计算结果确定用户的疲劳指数，与单一因素相比，对疲劳判断的准确性和可靠性更高；以及，能够根据用户当前的体征数据或者用户的日志信息识别用户当前的情绪类型，使得情绪类型的识别结果更符合用户的实际情况，识别结果更准确；此外，避免了第一摄像头拍摄到过多无用图像，使得摄像头的拍摄内容更具有针对性，减少后续书写图像识别的工作量，从而提高书写图像的识别准确度。

实施例四

请参阅图4，图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示，该电子设备可以包括：

监测单元401，用于在电子设备报读当前听写内容之后，监测用户针对当前听写内容的书写内容以及书写状态信息，并提供给判断单元402；其中，该书写状态信息至少可以包括书写内容中的书写时长。

判断单元402，用于判断书写内容的实际书写笔顺是否与当前听写内容的标准书写笔顺相匹配，以及在判断出实际书写笔顺与标准书写笔顺不匹配时，根据书写状态信息判断用户针对书写内容的书写时长是否大于预设的标准书写时长，并将判断结果提供给报读单元403。

本发明实施例中，可选的，上述书写状态信息还可以包括用户的书写动作特征；进一步可选的，判断单元402还可以用于判断该书写动作特征是否与预设的标准书写动作特征相匹配；如果该书写动作特征与标准书写动作特征相匹配，进一步判断书写内容的实际书写笔顺是否与当前听写内容的标准书写笔顺相匹配，以及在判断出实际书写笔顺与标准书写笔顺不匹配时，根据书写状态信息判断用户针对书写内容的书写时长是否大于预设的标准书写时长，并将判断结果提供给报读单元403；如果该书写动作特征与标准书写动作特征不匹配，控制输出单元(在图4中未示出)输出提示信息以提示用户注意书写动作规范。其中，用户的书写动作特征可以包括用户的握笔姿态特征，也可以是用户的坐姿特征等等，本发明实施例不做限定。再进一步可选的，上述监测单元401还可以通过与其关联的动作感应传感器(例如压力传感器等)获取用户的书写动作特征，并且该动作感应传感器可以设置在用户用于完成听写任务的书写笔(普通铅笔、水性笔、智能笔或者电子书写笔等等)以及用户完成听写任务所端坐的座椅上，本发明实施例不做限定。

作为一种可选的实施方式，上述书写时长可以包括单字书写时长以及相邻两个连续字之间的间隔时长；那么，进一步的，判断单元402根据书写状态信息判断用户针对上述书写内容的书写时长是否大于预设的标准时长的方式具体可以为：

判断上述书写内容中的单字书写时长是否大于预设的标准单字书写时长；如果该单字书写时长大于预设的标准单字书写时长，判断上述内容中的两个连续字之间的间隔时长是否大于预设的标准间隔时长；如果上述间隔时长大于预设的标准间隔时长，确定用户针对上述书写内容的书写时长大于预设的标准时长。

报读单元403，用于在上述判断单元402判断出书写时长大于标准书写时长时，控制电子设备切换并报读下一听写内容。

可见，实施如图4所示的电子设备，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高。

实施例五

请参阅图5，图5是本发明实施例公开的另一种电子设备的结构示意图。其中，图5所示的电子设备是由图4所示的电子设备进行优化得到的。如图5所示，该电子设备还可以包括：

控制单元404，用于控制电子设备的第二摄像头拍摄用户的多帧脸部图像，并将多帧脸部图像提供给截取分析单元405。

其中，可选的，上述控制单元404，可以用于在电子设备报读当前听写内容之后，控制电子设备的第二摄像头拍摄用户的多帧脸部图像，并将多帧脸部图像提供给截取分析单元405。

截取分析单元405，用于从多帧脸部图像中截取出眼部图像，并通过分析眼部图像，得到第一脸部特征信息，以及从多帧脸部图像中截取出唇部图像，并通过分析唇部图像，得到第二脸部特征信息，以及将第一脸部特征信息以及第二脸部特征信息提供给计算单元406。

计算单元406，用于根据第一脸部特征信息以及第二脸部特征信息进行计算以确定用户的疲劳指数，并将该疲劳指数提供给判断单元402。

本发明实施例中，计算单元406可以根据每个脸部特征信息所对应的权重值以及预先确定出的每个上述脸部特征信息所对应的参数值计算用户的疲劳指数。具体来说，计算单元406，可以根据每个脸部特征信息与针对该脸部特征信息的标准脸部特征信息的比对结果，确定每个脸部特征信息对应的参数值；进一步地，计算每个脸部特征信息所对应的权重值以及其对应的参数值的乘积，并计算所有乘积的和；根据所有乘积的和确定用户的疲劳指数。

在本方案中，脸部特征信息包括第一脸部特征信息和第二脸部特征信息，而脸部特征信息所对应的预设的权重值为第一权重值和第二权重值；进一步地，将第一脸部特征信息与针对第一脸部特征信息的第一标准脸部特征信息进行比对，根据得到的第一比对结果确定出第一参数值；同时，将第二脸部特征信息与针对第二脸部特征信息的第一标准脸部特征信息进行比对，根据得到的第二比对结果确定出第二参数值；计算第一权重值与第一参数值的乘积，得到第一乘积结果，以及计算第二权重值与第二参数值的乘积，得到第二乘积结果；对第一乘积结果和第二乘积结果进行加权和的计算，根据加权和的计算结果确定用户的疲劳指数。其中，将脸部特征信息与针对该脸部特征信息的标准脸部特征信息进行比对，根据比对结果确定参数值，具体来说，可以将脸部特征信息与针对该脸部特征信息的标准脸部特征信息进行比对，得到该脸部特征信息与其对应的标准脸部特征信息的相似度；判断该相似度是否高于与其对应的预设相似度的阈值，如果高于，参数值为A；如果不高于，参数值为B。其中，A和B可以是预先设置的任意数值(例如0、1等)，本发明实施例不做限定。可见，本发明实施例，能够通过第一脸部特征信息以及第二脸部特征信息的加权计算结果确定用户的疲劳指数，提高了确定疲劳指数的速度，

同时与单一因素相比，对疲劳判断的准确性和可靠性更高。

上述判断单元402，还用于判断疲劳指数是否高于预设疲劳指数，并将判断结果提供给暂停单元407。

暂停单元407，用于控制电子设备暂停报读下一个听写内容。

可见，实施如图5所示的电子设备，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高；以及，能够通过第一脸部特征信息以及第二脸部特征信息的加权计算结果确定用户的疲劳指数，与单一因素相比，对疲劳判断的准确性和可靠性更高；此外，能够根据用户当前的体征数据或者用户的日志信息识别用户当前的情绪类型，使得情绪类型的识别结果更符合用户的实际情况，识别结果更准确。

实施例六

请参阅图6，图6是本发明实施例公开的又一种电子设备的结构示意图。其中，图6所示的电子设备是由图6所示的电子设备进行优化得到的。如图6所示，在该电子设备中：

上述判断单元402，还用于在判断出当前书写时长大于标准书写时长时，判断书写内容的当前书写速度是否小于预设的标准书写速度，并将判断结果提供给报读单元403。

上述报读单元403，具体用于在上述判断单元402判断出当前书写时长大于标准书写时长时，以及当前书写速度小于标准书写速度时，控制电子设备切换并报读下一听写内容。

作为一种可选的实施方式，如图6所示，上述判断单元402，还用于在判断出实际书写笔顺与标准书写笔顺匹配时，判断实际书写笔顺是否为书写内容的结尾笔顺，并将该判断结果提供给报读单元403。

上述报读单元403，还用于在上述判断单元402判断出实际书写笔顺为书写内容的结尾笔顺时，控制电子设备切换并报读下一听写内容。

作为另一种可选的实施方式，如图6所示，上述监测单元401，可以包括：

识别子单元4011，用于在电子设备报读当前听写内容之后，控制电子设备的红外传感器对电子设备所在的学习桌面进行识别，以得到人体红外特征信息，并将人体红外特征信息提供给确定子单元4012。

确定子单元4012，用于根据人体红外特征信息确定用户的书写区域，并将该书写区域提供给调整子单元4013。

调整子单元4013，用于调整电子设备的第一摄像头的拍摄方向，以使第一摄像头的拍摄方向朝向书写区域，并触发拍摄子单元4014启动。

拍摄子单元4014，用于拍摄用户在书写区域书写上述书写内容的多帧书写图像，并将多帧书写图像提供给分析子单元4015。

分析子单元4015，用于分析多帧书写图像，以获得用户针对当前听写内容的书写内容以及书写状态信息。

可见，实施如图6所示的电子设备，能够通过依次判断用户对于当前听写内容的书写笔顺以及书写时长来判断用户对于当前听写内容的掌握程度，并在判断出用户未掌握该听写内容时立即控制电子设备切换并报读下一听写内容。相比较现有技术中采用预设的报读模式或者人工控制的方式切换听写内容，本方案既提高了听写报读的效率，同时切换听写报读的过程无需人工干预，智能化程度较高；以及，能够通过第一脸部特征信息以及第二脸部特征信息的加权计算结果确定用户的疲劳指数，与单一因素相比，对疲劳判断的准确性和可靠性更高；以及，能够根据用户当前的体征数据或者用户的日志信息识别用户当前的情绪类型，使得情绪类型的识别结果更符合用户的实际情况，识别结果更准确；此外，避免了第一摄像头拍摄到过多无用图像，使得摄像头的拍摄内容更具有针对性，减少后续书写图像识别的工作量，从而提高书写图像的识别准确度。

实施例七

请参阅图7，图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示，该电子设备可以包括：

存储有可执行程序代码的存储器901；

与存储器901耦合的处理器902；

其中，处理器902调用存储器901中存储的可执行程序代码，执行图1～图3所示的任一种基于书写进度的听写报读方法。

需要说明的是，图7所示的电子设备还可以包括电源、输入按键、扬声器、麦克风、屏幕、RF电路、Wi-Fi模块、蓝牙模块、传感器等未显示的组件，本实施例不作赘述。

本发明实施例公开一种计算机可读存储介质，其存储计算机程序，其中，该计算机程序使得计算机执行图1～图3所示的任一种基于书写进度的听写报读方法。

本发明实施例公开一种计算机程序产品，该计算机程序产品包括存储了计算机程序的非瞬时性计算机可读存储介质，且该计算机程序可操作来使计算机执行图1～图3所示的任一种基于书写进度的听写报读方法。

应理解，说明书通篇中提到的“一个实施例”或“一实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，在整个说明书各处出现的“在一个实施例中”或“在一实施例中”未必一定指相同的实施例。此外，这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作和模块并不一定是本发明所必须的。

在本发明的各种实施例中，应理解，上述各过程的序号的大小并不意味着执行顺序的必然先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物单元，即可位于一个地方，或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本发明各实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可获取的存储器中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分，可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等，具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

以上对本发明实施例公开的一种基于书写进度的听写报读方法及电子设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想。同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于书写进度的听写报读方法，其特征在于，包括：

在电子设备报读当前听写内容之后，监测用户针对所述当前听写内容的书写内容以及书写状态信息；其中，所述书写状态信息至少包括所述书写内容中的书写时长；

判断所述书写内容的实际书写笔顺是否与所述当前听写内容的标准书写笔顺相匹配；

如果不匹配，根据所述书写状态信息判断用户针对所述书写内容的书写时长是否大于预设的标准书写时长；

如果大于，控制电子设备切换并报读下一听写内容。

2.根据权利要求1所述的方法，其特征在于，如果所述书写时长大于所述标准书写时长，所述方法还包括：

判断所述书写内容的当前书写速度是否小于预设的标准书写速度；

如果所述当前书写速度小于所述标准书写速度，执行所述的控制电子设备切换并报读下一听写内容。

3.根据权利要求1所述的方法，其特征在于，如果所述实际书写笔顺与所述标准书写笔顺匹配，所述方法还包括：

判断所述实际书写笔顺是否为所述书写内容的结尾笔顺；

如果所述实际书写笔顺为所述书写内容的结尾笔顺，执行所述的控制电子设备切换并报读下一听写内容。

4.根据权利要求1～3任一项所述的方法，其特征在于，所述在电子设备报读当前听写内容之后，监测用户针对所述当前听写内容的书写内容以及书写状态信息，包括：

在电子设备报读当前听写内容之后，通过所述电子设备的红外传感器对所述电子设备所在的学习桌面进行识别，以得到人体红外特征信息；

根据所述人体红外特征信息确定用户的书写区域；

调整所述电子设备的第一摄像头的拍摄方向，以使所述第一摄像头的拍摄方向朝向所述书写区域，并拍摄用户在所述书写区域书写所述书写内容的多帧书写图像；

分析所述多帧书写图像，以获得用户针对所述当前听写内容的书写内容以及书写状态信息。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

控制所述电子设备的第二摄像头拍摄用户的多帧脸部图像；

从所述多帧脸部图像中截取出眼部图像，并通过分析所述眼部图像，得到第一脸部特征信息；

从所述多帧脸部图像中截取出唇部图像，并通过分析唇部图像，得到第二脸部特征信息；

根据所述第一脸部特征信息以及所述第二脸部特征信息进行计算以确定用户的疲劳指数，并判断所述疲劳指数是否高于预设疲劳指数；

如果所述疲劳指数高于所述预设疲劳指数，控制所述电子设备暂停报读所述下一个听写内容。

6.一种电子设备，其特征在于，所述电子设备包括：

监测单元，用于在电子设备报读当前听写内容之后，监测用户针对所述当前听写内容的书写内容以及书写状态信息；其中，所述书写状态信息至少包括所述书写内容中的书写时长；

判断单元，用于判断所述书写内容的实际书写笔顺是否与所述当前听写内容的标准书写笔顺相匹配，以及在判断出所述实际书写笔顺与所述标准书写笔顺不匹配时，根据所述书写状态信息判断用户针对所述书写内容的书写时长是否大于预设的标准书写时长；

报读单元，用于在所述判断单元判断出所述书写时长大于所述标准书写时长时，控制电子设备切换并报读下一听写内容。

7.根据权利要求6所述的电子设备，其特征在于，所述判断单元，还用于在判断出当前书写时长大于所述标准书写时长时，判断所述书写内容的当前书写速度是否小于预设的标准书写速度；

所述报读单元，具体用于在所述判断单元判断出所述当前书写时长大于所述标准书写时长时，以及所述当前书写速度小于所述标准书写速度时，控制电子设备切换并报读下一听写内容。

8.根据权利要求6所述的电子设备，其特征在于，所述判断单元，还用于在判断出所述实际书写笔顺与所述标准书写笔顺匹配时，判断所述实际书写笔顺是否为所述书写内容的结尾笔顺；

所述报读单元，还用于在所述判断单元判断出所述实际书写笔顺为所述书写内容的结尾笔顺时，控制电子设备切换并报读下一听写内容。

9.根据权利要求6～8任一项所述的电子设备，其特征在于，所述监测单元，包括：

识别子单元，用于在电子设备报读当前听写内容之后，控制所述电子设备的红外传感器对所述电子设备所在的学习桌面进行识别，以得到人体红外特征信息；

确定子单元，用于根据所述人体红外特征信息确定用户的书写区域；

调整子单元，用于调整所述电子设备的第一摄像头的拍摄方向，以使所述第一摄像头的拍摄方向朝向所述书写区域；

拍摄子单元，用于拍摄用户在所述书写区域书写所述书写内容的多帧书写图像；

分析子单元，用于分析所述多帧书写图像，以获得用户针对所述当前听写内容的书写内容以及书写状态信息。

10.根据权利要求6所述的电子设备，其特征在于，所述电子设备还包括：

控制单元，用于控制所述电子设备的第二摄像头拍摄用户的多帧脸部图像；

截取分析单元，用于从所述多帧脸部图像中截取出眼部图像，并通过分析所述眼部图像，得到第一脸部特征信息，以及从所述多帧脸部图像中截取出唇部图像，并通过分析唇部图像，得到第二脸部特征信息；

计算单元，用于根据所述第一脸部特征信息以及所述第二脸部特征信息进行计算以确定用户的疲劳指数；

所述判断单元，还用于判断所述疲劳指数是否高于预设疲劳指数；

暂停单元，用于控制所述电子设备暂停报读所述下一个听写内容。

Images