CN111081227B - 一种听写内容的识别方法及电子设备 - Google Patents

一种听写内容的识别方法及电子设备 Download PDF

Info

Publication number
CN111081227B
CN111081227B CN201910689394.9A CN201910689394A CN111081227B CN 111081227 B CN111081227 B CN 111081227B CN 201910689394 A CN201910689394 A CN 201910689394A CN 111081227 B CN111081227 B CN 111081227B
Authority
CN
China
Prior art keywords
dictation
user
content
electronic device
writing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910689394.9A
Other languages
English (en)
Other versions
CN111081227A (zh
Inventor
周林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangdong Genius Technology Co Ltd
Original Assignee
Guangdong Genius Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangdong Genius Technology Co Ltd filed Critical Guangdong Genius Technology Co Ltd
Priority to CN201910689394.9A priority Critical patent/CN111081227B/zh
Publication of CN111081227A publication Critical patent/CN111081227A/zh
Application granted granted Critical
Publication of CN111081227B publication Critical patent/CN111081227B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V30/00Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
    • G06V30/10Character recognition
    • G06V30/32Digital ink
    • G06V30/36Matching; Classification
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L2015/088Word spotting
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computational Linguistics (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Human Computer Interaction (AREA)
  • Acoustics & Sound (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明实施例涉及教育技术领域,公开了一种听写内容的识别方法及电子设备,该方法包括:根据用户输入的语音识别出用户意图;若所述用户意图为听写启动,控制摄像设备进行拍摄,以获得第一拍摄图像;检测所述第一拍摄图像中是否存在所述用户根据播报的听写音频节所书写的第一听写笔迹;若否,判断出所述听写音频节播报的听写内容为所述用户的漏写内容。本发明实施例,能够提高听写检测的准确率。

Description

一种听写内容的识别方法及电子设备
技术领域
本发明涉及教育技术领域,尤其涉及一种听写内容的识别方法及电子设备。
背景技术
目前,市面上的多数电子设备(如家教机)大都具有听写功能,这类电子设备在识别用户的听写内容时,大多是通过光学字符识别技术从书写页面中识别出用户的书写内容。但在实践中发现,光学字符识别技术有着较多的局限性,使得电子设备无法检测出用户漏写的听写内容,进而容易影响听写检测的准确率。
发明内容
本发明实施例公开一种听写内容的识别方法及电子设备,能够提高听写检测的准确率。
本发明实施例第一方面公开一种听写内容的识别方法,所述方法包括:
根据用户输入的语音识别出用户意图;
若所述用户意图为听写启动,控制摄像设备进行拍摄,以获得第一拍摄图像;
检测所述第一拍摄图像中是否存在所述用户根据播报的听写音频节所书写的第一听写笔迹;若否,判断出所述听写音频节播报的听写内容为所述用户的漏写内容。
作为一种可选的实施方式,在本发明实施例第一方面中,在根据用户输入的语音识别出用户意图之前,所述方法还包括:
检测电子设备是否接收到听写任务通知;其中,所述听写任务通知是由与所述电子设备绑定的终端设备发送,且至少包括所述听写内容以及听写时间;
若是,根据所述听写时间设置所述听写内容的推送时间点;
检测当前时间点是否满足所述推送时间点;若是,输出第一询问信息,所述第一询问信息用于咨询所述用户是否启动听写。
作为一种可选的实施方式,在本发明实施例第一方面中,在输出第一咨询信息之后,以及根据用户输入的语音识别出用户意图之前,所述方法还包括:
控制所述摄像设备对所述用户进行拍摄,以获得含有所述用户面部图像的第二拍摄图像;
从所述第二拍摄图像中识别所述用户的当前姿态是否为正确听写姿态;若否,控制所述电子设备输出第一提示信息,所述第一提示信息用于提示所述用户调整所述当前姿态至所述正确听写姿态。
作为一种可选的实施方式,在本发明实施例第一方面中,在判断出所述听写音频播报的听写内容为所述用户的漏写内容之后,所述方法还包括:
控制所述电子设备输出第二提示信息,所述第二提示信息用于提示所述用户在听写过程中出现漏写;
输出第二询问信息;其中,所述第二询问信息用于询问所述用户是否需要重播所述漏写内容对应的所述听写音频节;
若所述用户需要重播所述漏写内容对应的所述听写音频节,控制所述电子设备重播所述漏写内容对应的所述听写音频节。
作为一种可选的实施方式,在本发明实施例第一方面中,在控制所述电子设备重播所述漏写内容对应的所述听写音频节之后,所述方法还包括:
获取所述用户根据重播的所述听写音频节所书写的第二听写笔迹的实际书写笔顺;
检测所述第二听写笔迹的实际书写笔顺和所述漏写内容的标准书写笔顺是否匹配;若否,控制电子设备播放所述漏写内容的标准书写笔顺的书写视频。
本发明实施例第二方面公开一种电子设备,所述电子设备包括:
第一识别单元,用于根据用户输入的语音识别出用户意图;
第一控制单元,用于所述第一识别单元识别出所述用户意图为听写启动时,控制摄像设备进行拍摄,以获得第一拍摄图像;
第一检测单元,用于检测所述第一拍摄图像中是否存在所述用户根据播报的听写音频所书写的第一听写笔迹;
确定单元,用于在所述第一检测单元检测出所述第一拍摄图像中不存在所述用户根据播报的听写音频所书写的第一听写笔迹时,判断出所述听写音频播报的听写内容为所述用户的漏写内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
第二检测单元,用于在所述第一识别单元根据用户输入的语音识别出用户意图之前,检测电子设备是否接收到听写任务通知;其中,所述听写任务通知是由与所述电子设备绑定的终端设备发送,且至少包括所述听写内容以及听写时间;
设置单元,用于在所述第二检测单元检测出所述电子设备接收到听写任务通知时,根据所述听写时间设置所述听写内容的推送时间点;
第三检测单元,用于检测当前时间点是否满足所述推送时间点;
第一输出单元,用于在第三检测单元检测出当前时间点满足所述推送时间点时,输出第一询问信息,所述第一询问信息用于咨询所述用户是否启动听写。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
所述第一控制单元,还用于在所述第一输出单元输出第一询问信息之后,以及所述第一识别单元根据用户输入的语音识别出用户意图之前,控制所述摄像设备对所述用户进行拍摄,以获得含有所述用户面部图像的第二拍摄图像;
第二识别单元,从所述第二拍摄图像中识别所述用户的当前姿态是否为正确听写姿态;
第二控制单元,用于在所述第二识别单元从所述第二拍摄图像中识别出所述用户的当前姿态不为正确听写姿态时,控制所述电子设备输出第一提示信息,所述第一提示信息用于提示所述用户调整所述当前姿态至所述正确听写姿态。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
所述第二控制单元,还用于在所述确定单元判断出所述听写音频播报的听写内容为所述用户的漏写内容之后,控制所述电子设备输出第二提示信息,所述第二提示信息用于提示所述用户在听写过程中出现漏写;
第二输出单元,用于输出第二询问信息;其中,所述第二询问信息用于询问所述用户是否需要重播所述漏写内容对应的所述听写音频节;
第三控制单元,用于若所述用户需要重播所述漏写内容对应的所述听写音频节,控制所述电子设备重播所述漏写内容对应的所述听写音频节。
作为一种可选的实施方式,在本发明实施例第二方面中,所述电子设备还包括:
获取单元,用于在所述第三控制单元控制所述电子设备重播所述漏写内容对应的所述听写音频节之后,获取所述用户根据重播的所述听写音频节所书写的第二听写笔迹的实际书写笔顺;
第四检测单元,用于检测所述第二听写笔迹的实际书写笔顺和所述漏写内容的标准书写笔顺是否匹配;
第四控制单元,用于在所述第四检测单元检测出所述第二听写笔迹的实际书写笔顺和所述漏写内容的标准书写笔顺不匹配时,控制电子设备播放所述漏写内容的标准书写笔顺的书写视频。
本发明实施例第三方面公开一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行本发明实施例第一方面公开的一种听写内容的识别方法。
本发明实施例第四方面公开一种计算机可读存储介质,其存储计算机程序,其中,所述计算机程序使得计算机执行本发明实施例第一方面公开的一种听写内容的识别方法。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,电子设备可以根据用户输入的语音识别出用户意图,当用户意图为听写启动时,电子设备可以控制摄像设备进行拍摄,以获得第一拍摄图像,电子设备还可以检测第一拍摄图像中是否存在用户根据播报的听写音频节所书写的第一听写笔迹,若否,电子设备可以判断出听写音频节播报的听写内容为用户的漏写内容。可见,本发明实施例,能够提高听写检测的准确率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种听写内容的识别方法的流程示意图;
图2是本发明实施例公开的另一种听写内容的识别方法的流程示意图;
图3是本发明实施例公开的另一种听写内容的识别方法的流程示意图;
图4是本发明实施例公开的一种电子设备的结构示意图;
图5是本发明实施例公开的另一种电子设备的结构示意图;
图6是本发明实施例公开的另一种电子设备的结构示意图;
图7是本发明实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明的说明书和权利要求书中的术语“第一”、“第二”、“第三”“第四”等是用于区别不同的对象,而不是用于描述特定顺序。本发明实施例的术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开了一种听写内容的识别方法,能够提高听写检测的准确率。以下结合附图进行详细描述。
实施例一
请参阅图1,图1是本发明实施例公开的一种听写内容的识别方法的流程示意图。如图1所示,该听写内容的识别方法可以包括以下步骤。
101、电子设备根据用户输入的语音识别出用户意图。
本发明实施例中,电子设备可以是供学生使用的学习平板、学习机、家教机、点读机等电子设备,本发明实施例中不做限定。
作为一种可选的实施方式,本发明实施例中,电子设备可以识别用户输入的语音中是否存在与听写启动意图相关的预设关键词,例如“我要听写”等,若存在,则判断出该用户意图为听写启动。
举例来说,在电子设备当前已进入学习模式之后,用户可以通过语音方式唤醒电子设备的用户意图识别功能,在电子设备的用户意图识别功能被唤醒之后,电子设备即可接收用户输入的语音,执行步骤101。
又举例来说,在电子设备当前已进入学习模式之后,用户可以通过触屏方式手动唤醒电子设备的用户意图识别功能,在电子设备的用户意图识别功能被唤醒之后,电子设备即可接收用户输入的语音,执行步骤101。
又举例来说,在电子设备当前已进入学习模式之后,用户可以通过手动开启设置在电子设备上的物理按键开关唤醒电子设备的用户意图识别功能,在电子设备的用户意图识别功能被唤醒之后,电子设备即可接收用户输入的语音,执行步骤101。
102、若用户意图为听写启动,电子设备控制摄像设备进行拍摄,以获得第一拍摄图像。
作为一种可选的实施方式,本发明实施例中,在电子设备获得第一拍摄图像之后,电子设备可以检测第一拍摄图像中是否存在书写页面,若否,电子设备可以控制设置于电子设备上方的反光镜弹出,并可以通过调节反光镜相对于摄像设备的镜头面的角度,使用户无论以什么角度使用电子设备,反光镜中的镜像皆存在有书写页面。
103、电子设备检测第一拍摄图像中是否存在用户根据播报的听写音频节所书写的第一听写笔迹,若否,执行步骤104,若是,结束本次流程。
作为一种可选的实施方式,本发明实施例中,上述听写音频节可以是整个听写音频文件中的任一听写内容的听写音频节,例如,若电子设备的整个听写音频文件中含有“你好”、“假如”、“家人”、“存在”以及“学习”等听写内容所对应的听写音频节,当电子设备需要播报“存在”这一听写内容时,电子设备可以只播报含有“存在”一词的听写音频节。
作为一种可选的实施方式,本发明实施例中,在电子设备播报下一个听写音频节时,电子设备可以检测第一拍摄图像中是否用户根据播报的听写音频节所书写的第一听写笔迹,若否,电子设备可以行步骤104。
作为一种可选的实施方式,本发明实施例中,若电子设备检测到第一拍摄图像中存在用户根据播报的听写音频节所书写的第一听写笔迹时,电子设备可以检测该第一听写笔迹是否书写错误;
以及,在电子设备检测出该第一听写笔迹书写错误,电子设备可以将该第一听写笔迹的正确书写内容输出至电子设备的显示屏上,并可以将该第一听写笔迹存储进用户的听写错误记录表中。
104、电子设备判断出听写音频节播报的听写内容为用户的漏写内容。
作为一种可选的实施方式,本发明实施例中,在电子设备判断出听写音频节播报的听写内容为用户的漏写内容之后,电子设备可以即刻发出提示信息,以提示用户尽快将所漏写的听写内容书写完毕;
以及,在电子设备发出提示信息之后,电子设备可以再次播报上述听写音频节,并可以再次检测用户是否书写完毕该听写内容;
以及,若电子设备检测出用户在指定时长内并未将该听写内容书写完毕,电子设备可以判断出用户对该听写内容并未完全掌握,电子设备可以将该听写内容输出至电子设备的显示屏上;
以及,在电子设备将该听写内容输出至电子设备的显示屏上之后,电子设备还可以将该听写内容和用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导;
以及,在电子设备将该听写内容输出至电子设备的显示屏上之后,电子设备还可以将该听写内容通过中间服务器(如社交服务器)发送给用户选择的好友账号,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性;
以及,在电子设备将该听写内容输出至电子设备的显示屏上之后,用户可以通过游戏的方式加深对听写内容的掌握程度,以便提高用户学习的积极性。
可见,实施图1所描述的听写内容的识别方法,能够提高听写检测的准确率。
此外,实施图1所描述的听写内容的识别方法,能够使用户无论以什么角度使用电子设备,电子设备皆可以获取用户的书写页面。
此外,实施图1所描述的听写内容的识别方法,能够让用户所属的教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
此外,实施图1所描述的听写内容的识别方法,用户可以通过游戏的方式加深对听写内容的掌握程度,能够提高用户学习的积极性。
实施例二
请参阅图2,图2是本发明实施例公开的另一种听写内容的识别方法的流程示意图。如图2所示,该听写内容的识别方法可以包括以下步骤。
201、电子设备检测电子设备是否接收到听写任务通知,若是,执行步骤202~步骤203,若否,结束本次流程。
本发明实施例中,上述听写任务通知可以是由与电子设备绑定的终端设备发送,且至少包括上述听写内容以及听写时间。
作为一种可选的实施方式,本发明实施例中,在电子设备与终端设备绑定之后,电子设备可以被终端设备进行监管;
以及,在终端设备与电子设备初次建立连接的过程中,电子设备可以预先设置终端设备的身份信息以及终端设备对电子设备进行监管的权限。
举例来说,终端设备的身份信息可以为监护人、老师、亲属、朋友以及陌生人等,电子设备对于不同的身份信息可以设置不同的对电子设备进行监管的权限,例如监护人对电子设备进行监管的权限可以为第一权限等级,老师对电子设备进行监管的权限可以为第二权限等级,亲属对电子设备进行监管的权限可以为第三权限等级,对电子设备进行监管的权限可以为第四权限等级,对电子设备进行监管的权限可以为第五权限等级。其中,可以将第一权限等级的权限最高,将第五权限等级的权限最低,权限越高时对电子设备进行监管的允许频率越高,而权限越低时对电子设备进行监管的允许频率越低。
作为一种可选的实施方式,本发明实施例中,上述听写内容可以为教师汇总、整理出一些需要用户完成听写的生字词语句子等;和/或,上述听写内容可以为教师汇总、整理出除去课文必须要完成的生字词语之外的生字词语句子等;
以及,上述听写内容还可以为家长自己根据用户的学习情况整理出来的生字词语句子等,和/或,上述听写内容可以为家长自己根据教师的学习要求整理出来的生字词语句子等。
202、电子设备根据听写时间设置听写内容的推送时间点。
作为一种可选的实施方式,本发明实施例中,上述听写任务通知可以还包括听写内容的听写次数,电子设备可以除了设置推送时间点,还可以设置听写内容的听写次数,即用户需要针对上述听写内容重复听写该听写次数对应的次数。举例来说,听写次数为3,那么用户需要重新听写三遍该听写内容。
作为一种可选的实施方式,本发明实施例中,在电子设备根据听写时间设置听写内容的推送时间点之后,电子设备可以向用户输出该设置好的推送时间点;
以及,在电子设备向用户输出该设置好的推送时间点之后,电子设备可以向用户发送询问信息,以询问用户是否需要更改该推送时间点,若是,电子设备可以输出调整推送时间点的显示框,在用户确认更改的推送时间点后,电子设备可以执行步骤203。
203、电子设备检测当前时间点是否满足上述推送时间点,若是,执行步骤204,若否,结束本次流程。
作为一种可选的实施方式,本发明实施例中,在电子设备检测当前时间点满足上述推送时间点之后,电子设备可以检测用户当前所处的位置环境是否满足预设的听写环境,若是,电子设备可以执行步骤204,若否,电子设备可以将上述推送时间点推迟一定时长;
以及,当电子设备将上述推送时间点推迟一定时长之后,电子设备可以再次检测用户当前所处的位置环境是否满足预设的听写环境,若是,电子设备可以执行步骤204,若否,电子设备可以发出提示信息,以提示用户尽快到达预设的听写环境中进行听写。
204、电子设备输出第一询问信息,上述第一询问信息用于咨询用户是否启动听写,若是,执行步骤205~步骤206,若否,结束本次流程。
作为一种可选的实施方式,本发明实施例中,在电子设备获取到用户不进行启动听写时,电子设备可以再次输出询问信息,以询问用户是否需要更改上述听写内容的推送时间点,若是,电子设备可以输出调整推送时间点的显示框,在用户确认更改的推送时间点后,电子设备可以重新执行步骤203;
以及,若用户不需要更改上述听写内容的推送时间点,电子设备可以向用户输出显示框,用户可以向显示框输入用户该为何不对上述听写内容进行听写操作的原因;
以及,在用户向显示框输入用户该为何不对上述听写内容进行听写操作的原因之后,电子设备可以将该原因发送至与电子设备绑定的终端设备,并可以询问终端设备是否需要取消该听写内容的听写操作,若是,电子设备可以需要取消该听写内容的听写。
205、电子设备控制摄像设备对用户进行拍摄,以获得含有用户面部图像的第二拍摄图像。
作为一种可选的实施方式,本发明实施例中,在电子设备获取到含有用户面部图像的第二拍摄图像之后,电子设备可以对含有用户面部图像的第二拍摄图像进行分析,进而得到用户的当前情绪类型;
在电子设备得到用户的当前情绪类型之后,电子设备可以判断当前情绪类型是否为低落情绪,若是,电子设备可以停止当前对上述的听写内容进行听写的操作,并可以检测用户当前所处的位置环境是否适合进行改善低落情绪的运动(如散步),若适合,向用户发送提示信息,以便于用户改善低落情绪。
206、电子设备从第二拍摄图像中识别用户的当前姿态是否为正确听写姿态,若否,执行步骤207~步骤210,若是,执行步骤208~步骤210。
作为一种可选的实施方式,本发明实施例中,在电子设备确定当前时间点满足推送时间点时、且用户以正确姿态端坐在家教设备屏幕前方,即用户已做好听写准备时,将执行步骤208~步骤210。
207、电子设备控制电子设备输出第一提示信息,上述第一提示信息用于提示所述用户调整当前姿态至正确听写姿态。
作为一种可选的实施方式,本发明实施例中,电子设备输出的第一提示信息包括:
电子设备显示屏的显示信息提示;
和/或,电子设备发出的语音信息提示。
208、电子设备根据用户输入的语音识别出用户意图。
209、若用户意图为听写启动,电子设备控制摄像设备进行拍摄,以获得第一拍摄图像。
210、电子设备检测第一拍摄图像中是否存在用户根据播报的听写音频节所书写的第一听写笔迹,若否,执行步骤211,若是,结束本次流程。
211、电子设备判断出听写音频节播报的听写内容为用户的漏写内容。
作为一种可选的实施方式,本发明实施例中,电子设备可以从上述第二拍摄图像中获取得到用户的面部特征,并可以根据该面部特征从电子设备预存的人像信息中获取得到用户的身份信息;
以及,在电子设备从电子设备预存的人像信息中获取得到用户的身份信息之后,电子设备可以根据用户的身份信息以得到用户的好友列表,并从好友列表中获取与用户处于同一听写时间的好友;
以及,在电子设备从好友列表中获取与用户处于同一听写时间的好友之后,电子设备可将该好友推送至电子设备的显示屏上,以使用户可以获悉当前与用户处于同一听写时间的好友,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
可见,实施图2所描述的听写内容的识别方法,能够提高听写检测的准确率。
此外,实施图2所描述的听写内容的识别方法,能够及时获取改善用户低落情绪的方式,避免影响用户在听写过程中的注意力。
此外,实施图2所描述的听写内容的识别方法,能够让用户获悉当前与用户处于同一听写时间的好友,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
实施例三
请参阅图3,图3是本发明实施例公开的另一种听写内容的识别方法的流程示意图。如图3所示,该听写内容的识别方法可以包括以下步骤。
301、电子设备检测电子设备是否接收到听写任务通知,若是,执行步骤302~步骤303,若否,结束本次流程。
本发明实施例,上述听写任务通知是由与电子设备绑定的终端设备发送,且至少包括上述听写内容以及听写时间。
302、电子设备根据听写时间设置听写内容的推送时间点。
303、电子设备检测当前时间点是否满足上述推送时间点,若是,执行步骤304,若否,结束本次流程。
304、电子设备输出第一询问信息,上述第一询问信息用于咨询用户是否启动听写,若是,执行步骤305~步骤306,若否,结束本次流程。
305、电子设备控制摄像设备对用户进行拍摄,以获得含有用户面部图像的第二拍摄图像。
306、电子设备从第二拍摄图像中识别用户的当前姿态是否为正确听写姿态,若否,执行步骤307~步骤310,若是,执行步骤308~步骤310。
307、电子设备控制电子设备输出第一提示信息,上述第一提示信息用于提示所述用户调整当前姿态至正确听写姿态。
308、电子设备根据用户输入的语音识别出用户意图。
309、若用户意图为听写启动,电子设备控制摄像设备进行拍摄,以获得第一拍摄图像。
310、电子设备检测第一拍摄图像中是否存在用户根据播报的听写音频节所书写的第一听写笔迹,若否,执行步骤311,若是,结束本次流程。
311、电子设备判断出听写音频节播报的听写内容为用户的漏写内容。
312、电子设备控制电子设备输出第二提示信息,上述第二提示信息用于提示用户在听写过程中出现漏写。
作为一种可选的实施方式,本发明实施例中,电子设备可以在电子设备播放完所有听写音频节之后再向用户输出第二提示信息;和/或,电子设备可以在电子设备播放完当前的听写音频节,以及判断出听写音频节播报的听写内容为用户的漏写内容之后,即刻向用户输出第二提示信息。
313、电子设备输出第二询问信息;其中,所述第二询问信息用于询问用户是否需要重播漏写内容对应的听写音频节。
作为一种可选的实施方式,本发明实施例中,若用户不需要重播漏写内容对应的听写音频节,电子设备可以判断出用户的漏写内容为用户还未掌握的内容,电子设备可以将该漏写内容对应的听写内容输出至电子设备的显示屏上;
以及,在电子设备将该漏写内容对应的听写内容输出至电子设备的显示屏上之后,电子设备还可以将该漏写内容对应的听写内容和用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
314、若用户需要重播漏写内容对应的听写音频节,电子设备控制电子设备重播漏写内容对应的听写音频节。
作为一种可选的实施方式,本发明实施例中,在电子设备重播漏写内容对应的听写音频节之后,电子设备可以检测用户在预设时长内是否将漏写内容对应的听写内容书写完毕,若否,电子设备可以输出与该漏写内容对应的听写内容的提示信息,以提示用户如何书写该听写内容。
315、电子设备获取用户根据重播的听写音频节所书写的第二听写笔迹的实际书写笔顺。
316、电子设备检测第二听写笔迹的实际书写笔顺和漏写内容的标准书写笔顺是否匹配,若否,执行步骤317,若是,结束本次流程。
作为一种可选的实施方式,本发明实施例中,电子设备所获取得到的第二听写笔迹的实际书写笔顺至少包括第二听写笔迹的实际相对位置、第二听写笔迹的书写向量方向以及第二听写笔迹的第一和第二汉字笔画的交叉点;
以及,在电子设备获取得到第二听写笔迹的实际书写笔顺之后,电子设备可以检测获取第二听写笔迹的的相对位置、第二听写笔迹的书写向量方向以及第二听写笔迹的第一和第二汉字笔画的交叉点是否与目标汉字中笔画书写相符时,电子设备可以依次顺序检测,也可以同步检测;
以及,在电子设备进行检测时只要上述任一项不与目标汉字中笔画书写相符,即可确定用户书写有误,从而可以有效提高用户输入笔画的检测效率。
317、电子设备控制电子设备播放漏写内容的标准书写笔顺的书写视频。
作为一种可选的实施方式,本发明实施例中,在电子设备控制电子设备播放漏写内容的标准书写笔顺的书写视频之后,电子设备还可以将该漏写内容对应的听写内容和用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导;
以及,在电子设备控制电子设备播放漏写内容的标准书写笔顺的书写视频之后,电子设备还可以将该漏写内容对应的听写内容通过中间服务器(如社交服务器)发送给用户选择的好友账号,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性;
以及,在电子设备控制电子设备播放漏写内容的标准书写笔顺的书写视频之后,用户可以通过游戏的方式加深对该漏写内容对应的听写内容的掌握程度,以便提高用户学习的积极性。
作为一种可选的实施方式,本发明实施例中,在电子设备结束听写操作后,电子设备可以获取用户完成该听写内容所获得的听写得分,并可将该听写得分输出至电子设备的显示屏上;
以及,在电子设备获取得到用户完成该听写内容所获得的听写得分之后,还可以统计用户听写该听写内容的次数,若次数满足设置的听写次数时,则结束听写流程,若次数未满足设置的听写次数时,电子设备可以执行播报听写内容所对应的听写音频节的步骤,以辅助用户再次完成对听写内容的听写。
可见,实施图3所描述的听写内容的识别方法,能够提高听写检测的准确率。
此外,实施图3所描述的听写内容的识别方法,用户可以通过游戏的方式加深对该漏写内容对应的听写内容的掌握程度,能够提高用户学习的积极性。
此外,实施图3所描述的听写内容的识别方法,能够增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
此外,实施图3所描述的听写内容的识别方法,能够有效提高用户输入笔画的检测效率。
实施例四
请参阅图4,图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示,该电子设备可以包括:
第一识别单元401,用于根据用户输入的语音识别出用户意图。
第一控制单元402,用于若用户意图为听写启动,控制摄像设备进行拍摄,以获得第一拍摄图像。
第一检测单元403,用于检测第一拍摄图像中是否存在用户根据播报的听写音频节所书写的第一听写笔迹。
确定单元404,用于在第一检测单元403检测出第一拍摄图像中不存在用户根据播报的听写音频节所书写的第一听写笔迹时,判断出听写音频节播报的听写内容为用户的漏写内容。
本发明实施例中,电子设备可以是供学生使用的学习平板、学习机、家教机、点读机等电子设备,本发明实施例中不做限定。
作为一种可选的实施方式,本发明实施例中,第一识别单元401可以识别用户输入的语音中是否存在与听写启动意图相关的预设关键词,例如“我要听写”等,若存在,则判断出该用户意图为听写启动。
举例来说,在电子设备当前已进入学习模式之后,用户可以通过语音方式唤醒电子设备的用户意图识别功能,在电子设备的用户意图识别功能被唤醒之后,电子设备即可接收用户输入的语音,并可以根据用户输入的语音识别出用户意图。
又举例来说,在电子设备当前已进入学习模式之后,用户可以通过触屏方式手动唤醒电子设备的用户意图识别功能,在电子设备的用户意图识别功能被唤醒之后,电子设备即可接收用户输入的语音,并可以根据用户输入的语音识别出用户意图。
又举例来说,在电子设备当前已进入学习模式之后,用户可以通过手动开启设置在电子设备上的物理按键开关唤醒电子设备的用户意图识别功能,在电子设备的用户意图识别功能被唤醒之后,电子设备即可接收用户输入的语音,并可以根据用户输入的语音识别出用户意图。
作为一种可选的实施方式,本发明实施例中,在电子设备获得第一拍摄图像之后,电子设备可以检测第一拍摄图像中是否存在书写页面,若否,第一控制单元402可以控制设置于电子设备上方的反光镜弹出,并可以通过调节反光镜相对于摄像设备的镜头面的角度,使用户无论以什么角度使用电子设备,反光镜中的镜像皆存在有书写页面。
作为一种可选的实施方式,本发明实施例中,在电子设备播报下一个听写音频节时,第一检测单元403可以检测第一拍摄图像中是否用户根据播报的听写音频节所书写的第一听写笔迹,若否,确定单元404可以判断出听写音频节播报的听写内容为用户的漏写内容。
作为一种可选的实施方式,本发明实施例中,若第一检测单元403检测到第一拍摄图像中存在用户根据播报的听写音频节所书写的第一听写笔迹时,电子设备可以检测该第一听写笔迹是否书写错误;
以及,在电子设备检测出该第一听写笔迹书写错误,电子设备可以将该第一听写笔迹的正确书写内容输出至电子设备的显示屏上,并可以将该第一听写笔迹存储进用户的听写错误记录表中。
作为一种可选的实施方式,本发明实施例中,在确定单元404判断出听写音频节播报的听写内容为用户的漏写内容之后,电子设备可以即刻发出提示信息,以提示用户尽快将所漏写的听写内容书写完毕;
以及,在电子设备发出提示信息之后,电子设备可以再次播报上述听写音频节,并可以再次检测用户是否书写完毕该听写内容;
以及,若电子设备检测出用户在指定时长内并未将该听写内容书写完毕,电子设备可以判断出用户对该听写内容并未完全掌握,电子设备可以将该听写内容输出至电子设备的显示屏上;
以及,在电子设备将该听写内容输出至电子设备的显示屏上之后,电子设备还可以将该听写内容和用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导;
以及,在电子设备将该听写内容输出至电子设备的显示屏上之后,电子设备还可以将该听写内容通过中间服务器(如社交服务器)发送给用户选择的好友账号,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性;
以及,在电子设备将该听写内容输出至电子设备的显示屏上之后,用户可以通过游戏的方式加深对听写内容的掌握程度,以便提高用户学习的积极性。
可见,实施图4所描述的电子设备,能够提高听写检测的准确率。
此外,实施图4所描述的电子设备,能够使用户无论以什么角度使用电子设备,电子设备皆可以获取用户的书写页面。
此外,实施图4所描述的电子设备,能够让用户所属的教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
此外,实施图4所描述的电子设备,用户可以通过游戏的方式加深对听写内容的掌握程度,能够提高用户学习的积极性。
实施例五
请参阅图5,图5是本发明实施例公开的另一种电子设备的结构示意图。其中,图5所示的电子设备是由图4所示的电子设备进行优化得到的。与图4所示的电子设备相比较,图5所示的电子设备还可以包括:
第二检测单元405,用于在第一识别单元401根据用户输入的语音识别出用户意图之前,检测电子设备是否接收到听写任务通知。其中,上述听写任务通知是由与电子设备绑定的终端设备发送,且至少包括上述听写内容以及听写时间。
作为一种可选的实施方式,本发明实施例中,在电子设备与终端设备绑定之后,电子设备可以被终端设备进行监管;
以及,在终端设备与电子设备初次建立连接的过程中,电子设备可以预先设置终端设备的身份信息以及终端设备对电子设备进行监管的权限。
举例来说,终端设备的身份信息可以为监护人、老师、亲属、朋友以及陌生人等,电子设备对于不同的身份信息可以设置不同的对电子设备进行监管的权限,例如监护人对电子设备进行监管的权限可以为第一权限等级,老师对电子设备进行监管的权限可以为第二权限等级,亲属对电子设备进行监管的权限可以为第三权限等级,对电子设备进行监管的权限可以为第四权限等级,对电子设备进行监管的权限可以为第五权限等级。其中,可以将第一权限等级的权限最高,将第五权限等级的权限最低,权限越高时对电子设备进行监管的允许频率越高,而权限越低时对电子设备进行监管的允许频率越低。
作为一种可选的实施方式,本发明实施例中,上述听写内容可以为教师汇总、整理出一些需要用户完成听写的生字词语句子等;和/或,上述听写内容可以为教师汇总、整理出除去课文必须要完成的生字词语之外的生字词语句子等;
以及,上述听写内容还可以为家长自己根据用户的学习情况整理出来的生字词语句子等,和/或,上述听写内容可以为家长自己根据教师的学习要求整理出来的生字词语句子等。
设置单元406,用于在第二检测单元405检测出电子设备接收到听写任务通知时,根据听写时间设置上述听写内容的推送时间点。
作为一种可选的实施方式,本发明实施例中,上述听写任务通知可以还包括听写内容的听写次数,设置单元406可以除了设置推送时间点,还可以设置听写内容的听写次数,即用户需要针对上述听写内容重复听写该听写次数对应的次数。举例来说,听写次数为3,那么用户需要重新听写三遍该听写内容。
作为一种可选的实施方式,本发明实施例中,在设置单元406根据听写时间设置听写内容的推送时间点之后,电子设备可以向用户输出该设置好的推送时间点;
以及,在设置单元406向用户输出该设置好的推送时间点之后,电子设备可以向用户发送询问信息,以询问用户是否需要更改该推送时间点,若是,电子设备可以输出调整推送时间点的显示框。
第三检测单元407,用于检测当前时间点是否满足上述推送时间点。
作为一种可选的实施方式,本发明实施例中,在第三检测单元407检测当前时间点满足上述推送时间点之后,电子设备可以检测用户当前所处的位置环境是否满足预设的听写环境,若是,电子设备可以输出第一询问信息,若否,电子设备可以将上述推送时间点推迟一定时长;
以及,当电子设备将上述推送时间点推迟一定时长之后,电子设备可以再次检测用户当前所处的位置环境是否满足预设的听写环境,若是,电子设备可以输出第一询问信息,若否,电子设备可以发出提示信息,以提示用户尽快到达预设的听写环境中进行听写。
第一输出单元408,用于在第三检测单元407检测出当前时间点满足推送时间点时,输出第一询问信息,第一询问信息用于咨询用户是否启动听写。
作为一种可选的实施方式,本发明实施例中,在电子设备获取到用户不进行启动听写时,第一输出单元408可以再次输出询问信息,以询问用户是否需要更改上述听写内容的推送时间点,若是,第一输出单元408可以输出调整推送时间点的显示框;
以及,若用户不需要更改上述听写内容的推送时间点,第一输出单元408可以向用户输出显示框,用户可以向显示框输入用户该为何不对上述听写内容进行听写操作的原因;
以及,在用户向显示框输入用户该为何不对上述听写内容进行听写操作的原因之后,电子设备可以将该原因发送至与电子设备绑定的终端设备,并可以询问终端设备是否需要取消该听写内容的听写操作,若是,电子设备可以需要取消该听写内容的听写。
作为一种可选的实施方式,在图5所示的电子设备中,第一控制单元402还用于在第二控制单元408输出第一询问信息之后,以及第一识别单元401根据用户输入的语音识别出用户意图之前,控制摄像设备对用户进行拍摄,以获得含有用户面部图像的第二拍摄图像。相应地,与图4所示的电子设备相比较,图5所示的电子设备还包括:
第二识别单元409,用于从第二拍摄图像中识别用户的当前姿态是否为正确姿态。
作为一种可选的实施方式,本发明实施例中,在第一控制单元402获取到含有用户面部图像的第二拍摄图像之后,电子设备可以对含有用户面部图像的第二拍摄图像进行分析,进而得到用户的当前情绪类型;
在电子设备得到用户的当前情绪类型之后,电子设备可以判断当前情绪类型是否为低落情绪,若是,电子设备可以停止当前对上述的听写内容进行听写的操作,并可以检测用户当前所处的位置环境是否适合进行改善低落情绪的运动(如散步),若适合,向用户发送提示信息,以便于用户改善低落情绪。
作为一种可选的实施方式,本发明实施例中,在电子设备确定当前时间点满足推送时间点时、且用户以正确姿态端坐在家教设备屏幕前方,即用户已做好听写准备时,将执行听写操作。
第二控制单元410,用于在第二识别单元409从第二拍摄图像中识别出用户的当前姿态不为正确姿态时,控制电子设备输出第一提示信息,第一提示信息用于提示所述用户调整所述当前姿态至所述正确听写姿态。
作为一种可选的实施方式,本发明实施例中,电子设备输出的第一提示信息包括:
电子设备显示屏的显示信息提示;
和/或,电子设备发出的语音信息提示。
作为一种可选的实施方式,本发明实施例中,第一控制单元402可以从上述第二拍摄图像中获取得到用户的面部特征,并可以根据该面部特征从电子设备预存的人像信息中获取得到用户的身份信息;
以及,在电子设备从电子设备预存的人像信息中获取得到用户的身份信息之后,电子设备可以根据用户的身份信息以得到用户的好友列表,并从好友列表中获取与用户处于同一听写时间的好友;
以及,在电子设备从好友列表中获取与用户处于同一听写时间的好友之后,电子设备可将该好友推送至电子设备的显示屏上,以使用户可以获悉当前与用户处于同一听写时间的好友,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
可见,实施图5所描述的另一种电子设备,能够提高听写检测的准确率。
此外,实施图5所描述的另一种电子设备,能够及时获取改善用户低落情绪的方式,避免影响用户在听写过程中的注意力。
此外,实施图5所描述的另一种电子设备,能够让用户获悉当前与用户处于同一听写时间的好友,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
实施例六
请参阅图6,图6是本发明实施例公开的另一种电子设备的结构示意图。其中,图6所示的电子设备是由图5所示的电子设备进行优化得到的。图6所示的第二控制单元408还用于在确定单元404判断出听写音频播报的听写内容为用户的漏写内容之后,控制电子设备输出第二提示信息,第二提示信息用于提示用户在听写过程中出现漏写。与图5所示的电子设备相比较,图6所示的电子设备还可以包括:
第二输出单元411,用于输出第二询问信息;其中,第二询问信息用于询问用户是否需要重播漏写内容对应的听写音频节。
作为一种可选的实施方式,本发明实施例中,第二控制单元408可以在电子设备播放完所有听写音频节之后再向用户输出第二提示信息;和/或,第二控制单元408可以在电子设备播放完当前的听写音频节,以及判断出听写音频节播报的听写内容为用户的漏写内容之后,即刻向用户输出第二提示信息。
作为一种可选的实施方式,本发明实施例中,若用户不需要重播漏写内容对应的听写音频节,电子设备可以判断出用户的漏写内容为用户还未掌握的内容,第二输出单元411可以将该漏写内容对应的听写内容输出至电子设备的显示屏上;
以及,在第二输出单元411将该漏写内容对应的听写内容输出至电子设备的显示屏上之后,电子设备还可以将该漏写内容对应的听写内容和用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导。
第三控制单元412,用于若用户需要重播漏写内容对应的听写音频节,控制电子设备重播漏写内容对应的听写音频节。
作为一种可选的实施方式,本发明实施例中,在电子设备重播漏写内容对应的听写音频节之后,电子设备可以检测用户在预设时长内是否将漏写内容对应的听写内容书写完毕,若否,电子设备可以输出与该漏写内容对应的听写内容的提示信息,以提示用户如何书写该听写内容。
相应地,与图5所示的电子设备相比较,图6所示的电子设备还包括:
获取单元413,用于在第三控制单元412控制电子设备重播漏写内容对应的听写音频节之后,获取用户根据重播的听写音频节所书写的第二听写笔迹的实际书写笔顺。
第四检测单元414,用于检测第二听写笔迹的实际书写笔顺和漏写内容的标准书写笔顺是否匹配。
作为一种可选的实施方式,本发明实施例中,获取单元413所获取得到的第二听写笔迹的实际书写笔顺至少包括第二听写笔迹的实际相对位置、第二听写笔迹的书写向量方向以及第二听写笔迹的第一和第二汉字笔画的交叉点;
以及,在获取单元413获取得到第二听写笔迹的实际书写笔顺之后,第四检测单元414可以检测获取第二听写笔迹的的相对位置、第二听写笔迹的书写向量方向以及第二听写笔迹的第一和第二汉字笔画的交叉点是否与目标汉字中笔画书写相符,第四检测单元414可以依次顺序检测,也可以同步检测;
以及,在第四检测单元414进行检测时只要上述任一项不与目标汉字中笔画书写相符,即可确定用户书写有误,从而可以有效提高用户输入笔画的检测效率。
第四控制单元415,用于在第四检测单元414检测出第二听写笔迹的实际书写笔顺和漏写内容的标准书写笔顺不匹配时,控制电子设备播放漏写内容的标准书写笔顺的书写视频。
作为一种可选的实施方式,本发明实施例中,在第四控制单元415控制电子设备播放漏写内容的标准书写笔顺的书写视频之后,电子设备还可以将该漏写内容对应的听写内容和用户的身份信息上报给该用户对应的教师终端,让教师终端所属教师获悉哪一些字对于用户而言是陌生的或者是尚未掌握的,以便于教师可以对该用户进行针对性的加以辅导;
以及,在第四控制单元415控制电子设备播放漏写内容的标准书写笔顺的书写视频之后,电子设备还可以将该漏写内容对应的听写内容通过中间服务器(如社交服务器)发送给用户选择的好友账号,以增加用户与好友之间在学习上的交流,以便提高用户学习的积极性;
以及,在第四控制单元415控制电子设备播放漏写内容的标准书写笔顺的书写视频之后,用户可以通过游戏的方式加深对该漏写内容对应的听写内容的掌握程度,以便提高用户学习的积极性。
作为一种可选的实施方式,本发明实施例中,在电子设备结束听写操作后,电子设备可以获取用户完成该听写内容所获得的听写得分,并可将该听写得分输出至电子设备的显示屏上;
以及,在电子设备获取得到用户完成该听写内容所获得的听写得分之后,还可以统计用户听写该听写内容的次数,若次数满足设置的听写次数时,则结束听写流程,若次数未满足设置的听写次数时,电子设备可以执行播报听写内容所对应的听写音频节的步骤,以辅助用户再次完成对听写内容的听写。
可见,实施图6所描述的另一种电子设备,能够提高听写检测的准确率。
此外,实施图6所描述的另一种电子设备,用户可以通过游戏的方式加深对该漏写内容对应的听写内容的掌握程度,能够提高用户学习的积极性。
此外,实施图6所描述的另一种电子设备,能够增加用户与好友之间在学习上的交流,以便提高用户学习的积极性。
此外,实施图6所描述的另一种电子设备,能够有效提高用户输入笔画的检测效率。
实施例七
请参阅图7,图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示,该电子设备可以包括:
存储有可执行程序代码的存储器701;
与存储器701耦合的处理器702;
其中,处理器702调用存储器701中存储的可执行程序代码,执行图1~图3任意一种听写内容的识别方法。
本发明实施例公开一种计算机可读存储介质,其存储计算机程序,其中,该计算机程序使得计算机执行图1~图3任意一种听写内容的识别方法。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
以上对本发明实施例公开的一种听写内容的识别方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (8)

1.一种听写内容的识别方法,其特征在于,所述方法包括:
检测电子设备是否接收到听写任务通知;其中,所述听写任务通知是由与所述电子设备绑定的终端设备发送,且至少包括所述听写内容以及听写时间;若是,根据所述听写时间设置所述听写内容的推送时间点;
检测当前时间点是否满足所述推送时间点;若是,检测用户当前所处的位置环境是否满足预设的听写环境;若是,输出第一询问信息,所述第一询问信息用于咨询所述用户是否启动听写,若否,将所述推送时间点推迟预定时长;
根据所述用户输入的语音识别出用户意图;若所述用户意图为听写启动,控制摄像设备进行拍摄,以获得第一拍摄图像;检测所述第一拍摄图像中是否存在所述用户根据播报的听写音频节所书写的第一听写笔迹;若否,判断出所述听写音频节播报的听写内容为所述用户的漏写内容;
在输出第一询问信息之后,以及根据所述用户输入的语音识别出用户意图之前,所述方法还包括:
控制所述摄像设备对所述用户进行拍摄,以获得含有所述用户面部图像的第二拍摄图像;
对所述第二拍摄图像进行分析,以得到所述用户的当前情绪类型;判断所述当前情绪类型是否为低落情绪;若是,检测所述用户当前所处的位置环境是否适合进行改善低落情绪的运动;若适合,向所述用户发送提示信息;
所述方法还包括:
从所述第二拍摄图像中获取所述用户的面部特征,根据所述面部特征从预存的人像信息中获取所述用户的身份信息,根据所述身份信息得到所述用户的好友列表,从所述好友列表中获取与所述用户处于同一听写时间的好友并推送至所述电子设备的显示屏上。
2.根据权利要求1所述的听写内容的识别方法,其特征在于,所述方法还包括:
从所述第二拍摄图像中识别所述用户的当前姿态是否为正确听写姿态;若否,控制所述电子设备输出第一提示信息,所述第一提示信息用于提示所述用户调整所述当前姿态至所述正确听写姿态。
3.根据权利要求1或2所述的听写内容的识别方法,其特征在于,在判断出所述听写音频节播报的听写内容为所述用户的漏写内容之后,所述方法还包括:
控制所述电子设备输出第二提示信息,所述第二提示信息用于提示所述用户在听写过程中出现漏写;
输出第二询问信息;其中,所述第二询问信息用于询问所述用户是否需要重播所述漏写内容对应的所述听写音频节;
若所述用户需要重播所述漏写内容对应的所述听写音频节,控制所述电子设备重播所述漏写内容对应的所述听写音频节。
4.根据权利要求3所述的听写内容的识别方法,其特征在于,在控制所述电子设备重播所述漏写内容对应的所述听写音频节之后,所述方法还包括:
获取所述用户根据重播的所述听写音频节所书写的第二听写笔迹的实际书写笔顺;
检测所述第二听写笔迹的实际书写笔顺和所述漏写内容的标准书写笔顺是否匹配;若否,控制电子设备播放所述漏写内容的标准书写笔顺的书写视频。
5.一种电子设备,其特征在于,所述电子设备包括:
第一识别单元,用于根据用户输入的语音识别出用户意图;
第一控制单元,用于若所述用户意图为听写启动,控制摄像设备进行拍摄,以获得第一拍摄图像;
第一检测单元,用于检测所述第一拍摄图像中是否存在所述用户根据播报的听写音频节所书写的第一听写笔迹;
确定单元,用于在所述第一检测单元检测出所述第一拍摄图像中不存在所述用户根据播报的听写音频节所书写的第一听写笔迹时,判断出所述听写音频节播报的听写内容为所述用户的漏写内容;
第二检测单元,用于在所述第一识别单元根据用户输入的语音识别出用户意图之前,检测电子设备是否接收到听写任务通知;其中,所述听写任务通知是由与所述电子设备绑定的终端设备发送,且至少包括所述听写内容以及听写时间;
设置单元,用于在所述第二检测单元检测出所述电子设备接收到听写任务通知时,根据所述听写时间设置所述听写内容的推送时间点;
第三检测单元,用于检测当前时间点是否满足所述推送时间点;若是,检测所述用户当前所处位置环境是否满足预设的听写环境,若否,将所述推送时间点推迟预定时长;
第一输出单元,用于在所述第三检测单元检测出所述用户当前所处位置满足所述预设的听写环境时,输出第一询问信息,所述第一询问信息用于咨询所述用户是否启动听写;
所述第一控制单元,还用于控制所述摄像设备对所述用户进行拍摄,以获得含有所述用户面部图像的第二拍摄图像;对所述第二拍摄图像进行分析,以得到所述用户的当前情绪类型;判断所述当前情绪类型是否为低落情绪;若是,检测所述用户当前所处的位置环境是否适合进行改善低落情绪的运动;若适合,向所述用户发送提示信息;以及,从所述第二拍摄图像中获取所述用户的面部特征,根据所述面部特征从预存的人像信息中获取所述用户的身份信息,根据所述身份信息得到所述用户的好友列表,从所述好友列表中获取与所述用户处于同一听写时间的好友并推送至所述电子设备的显示屏上。
6.根据权利要求5所述的电子设备,其特征在于,所述电子设备还包括:
第二识别单元,从所述第二拍摄图像中识别所述用户的当前姿态是否为正确听写姿态;
第二控制单元,用于在所述第二识别单元从所述第二拍摄图像中识别出所述用户的当前姿态不为正确听写姿态时,控制所述电子设备输出第一提示信息,所述第一提示信息用于提示所述用户调整所述当前姿态至所述正确听写姿态。
7.一种电子设备,其特征在于,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行权利要求1~4任一项所述听写内容的识别方法。
8.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储计算机程序,其中,所述计算机程序使得计算机执行权利要求1~4任一项所述听写内容的识别方法。
CN201910689394.9A 2019-07-29 2019-07-29 一种听写内容的识别方法及电子设备 Active CN111081227B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910689394.9A CN111081227B (zh) 2019-07-29 2019-07-29 一种听写内容的识别方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910689394.9A CN111081227B (zh) 2019-07-29 2019-07-29 一种听写内容的识别方法及电子设备

Publications (2)

Publication Number Publication Date
CN111081227A CN111081227A (zh) 2020-04-28
CN111081227B true CN111081227B (zh) 2022-12-27

Family

ID=70310129

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910689394.9A Active CN111081227B (zh) 2019-07-29 2019-07-29 一种听写内容的识别方法及电子设备

Country Status (1)

Country Link
CN (1) CN111081227B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112712737A (zh) * 2021-01-13 2021-04-27 百度在线网络技术(北京)有限公司 交互方法、装置、设备以及存储介质

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109660619A (zh) * 2018-12-20 2019-04-19 广东小天才科技有限公司 一种作文题目的推送方法及电子设备
CN109669661A (zh) * 2018-12-20 2019-04-23 广东小天才科技有限公司 一种听写进度的控制方法及电子设备

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9691385B2 (en) * 2014-06-19 2017-06-27 Nuance Communications, Inc. Methods and apparatus for associating dictation with an electronic record
CN105679119A (zh) * 2016-01-20 2016-06-15 潘爱松 一种扫描听写法
CN109300347B (zh) * 2018-12-12 2021-01-26 广东小天才科技有限公司 一种基于图像识别的听写辅助方法及家教设备
CN109558511A (zh) * 2018-12-12 2019-04-02 广东小天才科技有限公司 一种听写报读方法及装置
CN109599108A (zh) * 2018-12-17 2019-04-09 广东小天才科技有限公司 一种听写辅助方法及听写辅助装置
CN109887349B (zh) * 2019-04-12 2021-05-11 广东小天才科技有限公司 一种听写辅助方法及装置

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109660619A (zh) * 2018-12-20 2019-04-19 广东小天才科技有限公司 一种作文题目的推送方法及电子设备
CN109669661A (zh) * 2018-12-20 2019-04-23 广东小天才科技有限公司 一种听写进度的控制方法及电子设备

Also Published As

Publication number Publication date
CN111081227A (zh) 2020-04-28

Similar Documents

Publication Publication Date Title
EP3611895B1 (en) Method and device for user registration, and electronic device
CN109960809B (zh) 一种听写内容的生成方法及电子设备
CN109346059B (zh) 一种方言语音的识别方法及电子设备
CN109410664B (zh) 一种发音纠正方法及电子设备
CN109446315B (zh) 一种解题辅助方法及解题辅助客户端
CN111077996B (zh) 一种基于点读的信息推荐方法及学习设备
CN109165336B (zh) 一种信息输出控制方法及家教设备
CN111081080B (zh) 一种语音检测方法及学习设备
CN111081084B (zh) 一种听写内容的播报方法及电子设备
CN111079501B (zh) 一种文字识别方法及电子设备
CN111026949A (zh) 一种基于电子设备的搜题方法及***
CN113657509B (zh) 教学训练提升方法、装置、终端和存储介质
CN111026786B (zh) 一种听写列表生成方法及家教设备
CN111081227B (zh) 一种听写内容的识别方法及电子设备
CN111079504A (zh) 一种文字识别方法及电子设备
CN111028591B (zh) 一种听写控制方法及学习设备
CN109271480B (zh) 一种语音搜题方法及电子设备
CN111078890B (zh) 一种生字词的收集方法及电子设备
CN111028590B (zh) 一种听写过程中引导用户书写的方法及学习设备
CN111026839B (zh) 一种听写字掌握程度的检测方法及电子设备
CN111091008B (zh) 一种听写提示内容的确定方法及电子设备
CN110415688B (zh) 一种信息交互方法及机器人
CN111027794B (zh) 一种听写作业的批改方法及学习设备
CN111079414A (zh) 一种听写检测方法、电子设备及存储介质
CN111078992A (zh) 一种听写内容生成方法及电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant