CN111078083A - 一种点读内容的确定方法及电子设备 - Google Patents
一种点读内容的确定方法及电子设备 Download PDFInfo
- Publication number
- CN111078083A CN111078083A CN201910499988.3A CN201910499988A CN111078083A CN 111078083 A CN111078083 A CN 111078083A CN 201910499988 A CN201910499988 A CN 201910499988A CN 111078083 A CN111078083 A CN 111078083A
- Authority
- CN
- China
- Prior art keywords
- determining
- fingertip
- image
- area
- delineation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 67
- 238000012545 processing Methods 0.000 claims description 16
- 238000001514 detection method Methods 0.000 claims description 14
- 238000004364 calculation method Methods 0.000 claims description 4
- 238000010586 diagram Methods 0.000 description 8
- 238000004590 computer program Methods 0.000 description 7
- 210000000282 nail Anatomy 0.000 description 5
- 230000000694 effects Effects 0.000 description 4
- 230000009286 beneficial effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 210000004905 finger nail Anatomy 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012216 screening Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/40—Extraction of image or video features
- G06V10/44—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components
- G06V10/457—Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components by analysing connectivity, e.g. edge linking, connected component analysis or slices
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/065—Combinations of audio and video presentations, e.g. videotapes, videodiscs, television systems
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Business, Economics & Management (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明涉及教育技术领域,公开一种点读内容的确定方法及电子设备,包括:当检测到用户的手指在学习页面上点击时,采集手指点击学习页面时的图像,并确定图像的坐标系;从图像中识别手指的指尖特征,并确定指尖特征在坐标系中的指尖坐标;从图像中确定与指尖坐标对应的若干个备选勾勒区域;计算各个备选勾勒区域的中心点距指尖坐标的距离;将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容。实施本发明实施例,能够从采集的用户手指点击学习页面时的图像中确定距指尖坐标最近的目标勾勒区域,以使学习设备从目标勾勒区域中确定用户指示的点读内容,从而提高确定点读内容的准确率。
Description
技术领域
本发明涉及教育技术领域,具体涉及一种点读内容的确定方法及电子设备。
背景技术
随着学习设备的快速发展,越来越多的电子设备(如家教机)可以满足学生的点读需求。目前,电子设备实现点读的方式通常为:电子设备检测学生在书本上点击的需要点读的内容,进而播放与该内容匹配的音频。然而,在实践中发现,用户在书本上点击需要点读的内容时,通常会使用手指来点击,由于手指相对于书本上的文字来说在书本上的覆盖面积较大,因此电子设备可能会将用户未指定的文字识别为点读内容,从而导致确定的点读内容不准确。
发明内容
本发明实施例公开一种点读内容的确定方法及电子设备,能够提高确定点读内容的准确率。
本发明实施例第一方面公开一种点读内容的确定方法,所述方法包括:
当检测到用户的手指在学习页面上点击时,采集所述手指点击所述学习页面时的图像,并确定所述图像的坐标系;
从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标;
从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
计算各个所述备选勾勒区域的中心点距所述指尖坐标的距离;
将所述距离最短的备选勾勒区域确定为目标勾勒区域,并将所述目标勾勒区域中包含的第一文字内容确定为点读内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标之后,所述方法还包括:
检测所述指尖坐标是否位于所述图像中的任意一个勾勒区域内部;
如果否,执行所述的从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
如果是,读取所述任意一个勾勒区域包含的第二文字内容,并将所述第二文字内容确定为点读内容。
作为一种可选的实施方式,在本发明实施例第一方面中,所述从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域,包括:
在所述图像中划分出若干个勾勒区域,并确定各个所述勾勒区域的中心点;
从所述图像中确定以所述指尖坐标为圆心以及以预设距离为半径的目标区域,并将所述中心点位于所述目标区域之内的勾勒区域确定为备选勾勒区域。
作为一种可选的实施方式,在本发明实施例第一方面中,所述从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标,包括:
对所述图像进行二值化处理,得到黑白图像;
从所述黑边图像中识别若干个连通域,并计算各个连通域的面积;
将所述面积最大的连通域确定为目标连通域;
从所述目标连通域中识别所述手指的指尖特征;
通过行扫描法确定所述指尖特征在所述坐标系中的指尖坐标。
作为一种可选的实施方式,在本发明实施例第一方面中,所述将所述目标勾勒区域中包含的第一文字内容确定为点读内容之后,所述方法还包括:
从预设的语音库中获取与所述点读内容匹配的标准读音;
通过电子设备的扬声器输出所述标准读音。
本发明实施例第二方面公开一种电子设备,包括:
采集单元,用于当检测到用户的手指在学习页面上点击时,采集所述手指点击所述学习页面时的图像,并确定所述图像的坐标系;
识别单元,用于从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标;
第一确定单元,用于从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
计算单元,用于计算各个所述备选勾勒区域的中心点距所述指尖坐标的距离;
第二确定单元,用于将所述距离最短的备选勾勒区域确定为目标勾勒区域,并将所述目标勾勒区域中包含的第一文字内容确定为点读内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述学习设备还包括:
检测单元,用于在所述识别单元确定所述指尖特征在所述坐标系中的指尖坐标之后,检测所述指尖坐标是否位于所述图像中的任意一个勾勒区域内部;
所述第一确定单元,还用于在所述检测单元的检测结果为否时,从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
读取单元,用于在所述检测单元的检测结果为是时,读取所述任意一个勾勒区域包含的第二文字内容,并将所述第二文字内容确定为点读内容。
作为一种可选的实施方式,在本发明实施例第二方面中,所述第一确定单元包括:
第一确定子单元,用于在所述图像中划分出若干个勾勒区域,并确定各个所述勾勒区域的中心点;
第二确定子单元,用于从所述图像中确定以所述指尖坐标为圆心以及以预设距离为半径的目标区域,并将所述中心点位于所述目标区域之内的勾勒区域确定为备选勾勒区域。
作为一种可选的实施方式,在本发明实施例第二方面中,所述识别单元包括:
处理子单元,用于对所述图像进行二值化处理,得到黑白图像;
计算子单元,用于从所述黑边图像中识别若干个连通域,并计算各个连通域的面积;
第三确定子单元,用于将所述面积最大的连通域确定为目标连通域;
识别子单元,用于从所述目标连通域中识别所述手指的指尖特征;
第四确定子单元,用于通过行扫描法确定所述指尖特征在所述坐标系中的指尖坐标。
作为一种可选的实施方式,在本发明实施例第二方面中,所述学习设备还包括:
获取单元,用于在所述第二确定单元将所述目标勾勒区域中包含的第一文字内容确定为点读内容之后,从预设的语音库中获取与所述点读内容匹配的标准读音;
输出单元,用于通过所述电子设备的扬声器输出所述标准读音。
本发明实施例第三方面公开另一种电子设备,包括:
存储有可执行程序代码的存储器;
与所述存储器耦合的处理器;
所述处理器调用所述存储器中存储的所述可执行程序代码,执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第四方面公开一种计算机可读存储介质,所述计算机可读存储介质存储了程序代码,其中,所述程序代码包括用于执行第一方面的任意一种方法的部分或全部步骤的指令。
本发明实施例第五方面公开一种计算机程序产品,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
本发明实施例第六方面公开一种应用发布平台,所述应用发布平台用于发布计算机程序产品,其中,当所述计算机程序产品在计算机上运行时,使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。
与现有技术相比,本发明实施例具有以下有益效果:
本发明实施例中,当检测到用户的手指在学习页面上点击时,采集手指点击学习页面时的图像,并确定图像的坐标系;从图像中识别手指的指尖特征,并确定指尖特征在坐标系中的指尖坐标;从图像中确定与指尖坐标对应的若干个备选勾勒区域;计算各个备选勾勒区域的中心点距指尖坐标的距离;将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容。可见,实施本发明实施例,能够获取到用户手指点击学习页面的图像,并且从图像中可以确定用户手指指尖的坐标,从而可以从图像中将距指尖坐标最近的目标勾勒区域,以使学习设备可以从图像中的目标勾勒区域确定用户指示的点读内容,从而提高确定点读内容的准确率。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例公开的一种点读内容的确定方法的流程示意图;
图2是本发明实施例公开的另一种点读内容的确定方法的流程示意图;
图3是本发明实施例公开的另一种点读内容的确定方法的流程示意图;
图4是本发明实施例公开的一种电子设备的结构示意图;
图5是本发明实施例公开的另一种电子设备的结构示意图;
图6是本发明实施例公开的另一种电子设备的结构示意图;
图7是本发明实施例公开的另一种电子设备的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
需要说明的是,本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
本发明实施例公开一种点读内容的确定方法及电子设备,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。以下分别进行详细说明。
实施例一
请参阅图1,图1是本发明实施例公开的一种点读内容的确定方法的流程示意图。如图1所示,该点读内容的确定方法可以包括以下步骤:
101、当检测到用户的手指在学习页面上点击时,电子设备采集手指点击学习页面时的图像,并确定图像的坐标系。
本发明实施例中,电子设备可以为家教机、学***面直角坐标系,且该坐标系的原点可以为图像中的任意一点。
102、电子设备从图像中识别手指的指尖特征,并确定指尖特征在坐标系中的指尖坐标。
本发明实施例中,手指的指尖特征可以为指尖弧线、指甲等,电子设备可以对图像中包含的手指图像进行图像识别,以得到手指图像中的若干个图像特征,并且可以从识别出的图像特征中确定与手指指尖特征相似的指尖特征。如果电子设备识别出指尖特征为指尖弧线,电子设备可以计算得到该指尖弧线的第一中点,并且可以获取该第一中点在图像的坐标系中对应的坐标,电子设备可以将该坐标确定为指尖坐标;如果电子设备识别出指尖特征为指甲,电子设备可以通过图像识别技术分析得到该指甲的顶端边缘,并且可以确定指甲的顶端边缘的第二中点,进而可以获取该第二中点在图像的坐标系中对应的坐标,电子设备可以将该坐标确定为指尖坐标。
103、电子设备从图像中确定与指尖坐标对应的若干个备选勾勒区域。
本发明实施例中,电子设备可以预先对图像中的学习页面进行识别,电子设备可以提取出学习页面中包含的字符,并根据学习页面中字符的排序对提取的字符进行识别,以得到学习页面中包含的字符的含义,更进一步,学习设备可以根据识别出的字符的含义将学习页面中的字符分割为若干个词语,学习设备可以根据分割得到的若干个词语确定勾勒区域,该确定的勾勒区域中可以包含任意一个词语,且任意两个勾勒区域之间的位置关系可以为相邻关系,也可以为相离关系,但不能为相交关系。电子设备可以将与指尖坐标距离处于较近的范围内的若干个勾勒区域确定为备选勾勒区域,从而缩小目标勾勒区域的筛选范围。
104、电子设备计算各个备选勾勒区域的中心点距指尖坐标的距离。
本发明实施例中,电子设备可以获取各个备选勾勒区域的中心点在坐标系中的点坐标,进而可以根据勾股定理计算得到各个备选勾勒区域的中心点的点坐标与指尖坐标的距离,以使计算得到的距离更加精确。
105、电子设备将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容。
作为一种可选的实施方式,电子设备将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容的方式可以包含以下步骤:
电子设备将距离最短的备选勾勒区域确定为目标勾勒区域;
电子设备判断目标勾勒区域的数量是否唯一;
如果是,电子设备将目标勾勒区域中包含的第一文字内容确定为点读内容;
如果否,电子设备从图像中识别得到用户手指指尖的指示方向;
电子设备确定指尖坐标指向各个目标勾勒区域的中心点的目标方向;
电子设备计算各个目标方向与指示方向的夹角;
电子设备将夹角最小的目标方向对应的目标勾勒区域中包含的第一文字内容确定点读内容。
其中,实施这种实施方式,可以在电子设备确定出目标勾勒区域的数量为多个时,确定用户手指的指尖的指示方向,并根据指示方向从目标勾勒区域中确定出最终需要识别的勾勒区域,以使电子设备确定的勾勒区域与用户手指的指向更为贴合。
在图1所描述的方法中,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。此外,实施图1所描述的方法,可以使电子设备确定的勾勒区域与用户手指的指向更为贴合。
实施例二
请参阅图2,图2是本发明实施例公开的另一种点读内容的确定方法的流程示意图。如图2所示,该点读内容的确定方法可以包括以下步骤:
201、当检测到用户的手指在学习页面上点击时,电子设备采集手指点击学习页面时的图像,并确定图像的坐标系。
202、电子设备从图像中识别手指的指尖特征,并确定指尖特征在坐标系中的指尖坐标。
203、电子设备检测指尖坐标是否位于图像中的任意一个勾勒区域内部,如果是,执行步骤204;如果否,执行步骤205~步骤207。
作为一种可选的实施方式,电子设备检测指尖坐标是否位于图像中的任意一个勾勒区域内部的方式可以包含以下步骤:
电子设备获取各个勾勒区域的坐标范围信息,该坐标范围信息中可以包含该坐标范围信息对应的勾勒区域的最大横坐标、最小横坐标、最大纵坐标以及最小纵坐标;
电子设备获取指尖坐标的指尖横坐标,并检测所有的坐标范围信息中是否存在最大横坐标大于指尖横坐标且最小横坐标小于指尖横坐标的若干个勾勒区域;
如果不存在若干个勾勒区域,电子设备执行步骤205~步骤207;
如果存在若干个勾勒区域,电子设备获取指尖坐标的指尖纵坐标,并检测是否存在任意一个勾勒区域的坐标范围信息中的最大纵坐标大于指尖纵坐标且最小纵坐标小于指尖纵坐标;
如果不存在任意一个勾勒区域,电子设备执行步骤205~步骤207;
如果存在任意一个勾勒区域,电子设备确定指尖坐标位于该任意一个勾勒区域的内部,并执行步骤204。
其中,实施这种实施方式,可以获取到指尖坐标的横坐标以及纵坐标,并且获得各个勾勒区域的坐标范围信息,从而使得电子设备可以从坐标范围信息中确定指尖坐标与各个勾勒区域的位置关系,以使电子设备对指尖坐标的位置检测更加准确。
204、电子设备读取任意一个勾勒区域包含的第二文字内容,并将第二文字内容确定为点读内容。
本发明实施例中,实施上述的步骤203~步骤204,可以在检测到指尖坐标位于任意一个勾勒区域内部时,将该勾勒区域内部包含的内容确定为点读内容,从而使得电子设备可以在确定用户的手指指尖处于任意一个勾勒区域中时,将该勾勒区域确定为用户明确指示的区域,从而使得从该勾勒区域中读取的点读内容更加准确。
205、电子设备从图像中确定与指尖坐标对应的若干个备选勾勒区域。
作为一种可选的实施方式,电子设备从图像中确定与指尖坐标对应的若干个备选勾勒区域的方式可以包含以下步骤:
电子设备在图像中划分出若干个勾勒区域,并确定各个勾勒区域的中心点;
电子设备从图像中确定以指尖坐标为圆心以及以预设距离为半径的目标区域,并将中心点位于目标区域之内的勾勒区域确定为备选勾勒区域。
其中,实施这种实施方式,可以以指尖坐标为圆心,确定出目标区域,并且可以从目标区域中确定备选勾勒区域,以缩小目标勾勒区域的确定范围,从而提高确定目标勾勒区域的速度。
可选的,预设距离可以根据学习页面中的字符的大小来确定,如果字符越大,则预设距离越大;如果字符越小,则预设距离越小。如果预设距离为固定不变的值,则可能出现当字符较大时目标区域较小,以至于无法从目标区域中确定备选勾勒区域的情况,因此可以将预设距离的确定与字符的大小相关联。
206、电子设备计算各个备选勾勒区域的中心点距指尖坐标的距离。
207、电子设备将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容。
在图2所描述的方法中,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。此外,实施图2所描述的方法,可以使电子设备对指尖坐标的位置检测更加准确。此外,实施图2所描述的方法,使得从该勾勒区域中读取的点读内容更加准确。此外,实施图2所描述的方法,可以将预设距离的确定与字符的大小相关联。
实施例三
请参阅图3,图3是本发明实施例公开的另一种点读内容的确定方法的流程示意图。如图3所示,该点读内容的确定方法可以包括以下步骤:
301、当检测到用户的手指在学习页面上点击时,电子设备采集手指点击学习页面时的图像,并确定图像的坐标系。
302、电子设备对图像进行二值化处理,得到黑白图像。
本发明实施例中,对图像进行二值化(Thresholding)处理可以将图像中各个像素点的灰度值调整为0或255,以使图像成为黑白图像,从而突出图像中的特征点。
303、电子设备从黑边图像中识别若干个连通域,并计算各个连通域的面积。
本发明实施例中,如果黑白图像中存在闭合曲线,则可以将该闭合曲线的内部确定为连通域,电子设备采集的黑白图像中可以包含若干个连通域,且各个连通域之间的面积大小不一,电子设备可以通过微积分等方式计算得到各个连通域的面积。
304、电子设备将面积最大的连通域确定为目标连通域。
本发明实施例中,手指相对于学习页面中的文字来说通常手指在学习页面中的覆盖面积较大,因此电子设备可以将连通域中面积最大的连通域确定为目标连通域,即可以认为面积最大的连通域对应用户手指。
305、电子设备从目标连通域中识别手指的指尖特征。
本发明实施例中,由于用户在学习页面中执行点击操作时,用户的手背的方向通常向上,用户的手心的方向通常向下,因此电子设备采集的图像中包含的用户的手指图像应为手背向上的手指图像,因此电子设备可以从手背向上的手指图像中识别出指甲的特征,由于手指的指尖通常具有一定的弧度,因此电子设备可以将指甲的特征和指尖的弧度共同确定为指尖特征。
306、电子设备通过行扫描法确定指尖特征在坐标系中的指尖坐标。
本发明实施例中,实施上述的步骤302~步骤306,可以对图像进行二值化处理,以得到黑白图像,进而在黑白图像中确定最大连通域,由于用户的手指在黑白图像中应为面积最大的连通域,因此确定出最大连通域可以认为是确定的手指对应的连通域,进而可以在最大连通域中确定指尖坐标,从而提高确定的指尖坐标精确度。
307、电子设备从图像中确定与指尖坐标对应的若干个备选勾勒区域。
308、电子设备计算各个备选勾勒区域的中心点距指尖坐标的距离。
309、电子设备将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容。
310、电子设备从预设的语音库中获取与点读内容匹配的标准读音。
本发明实施例中,预设的语音库可以为电子设备预先获取的文字的正确读音,电子设备可以从预设的语音库中获取点读内容包含的各个文字的正确读音,进而将各个文字的正确读音进行整合,以得到点读内容的标准读音。
311、电子设备通过电子设备的扬声器输出标准读音。
本发明实施例中,实施上述的步骤310~步骤311,可以获取电子设备确定的点读内容的标准读音,并输出该标准读音,以使电子设备的用户可以学习到点读内容准确的读音,从而保证用户拼读点读内容的读音正确。
作为一种可选的实施方式,电子设备执行步骤311之后,还可以执行以下步骤:
电子设备通过音频采集设备采集电子设备所处环境中的声音;
电子设备从声音中识别用户输入的拼读语音;
电子设备将该拼读语音与标准读音进行对比,得到拼读语音与标准读音的相似度;
电子设备判断相似度是否大于预设相似度;
如果大于,电子设备确定用户拼读点读内容的读音正确;
如果不大于,电子设备再次输出标准读音,并执行通过音频采集设备采集电子设备所处环境中的声音的步骤。
其中,实施这种实施方式,可以在电子设备输出标准读音之后采集用户输入的拼读语音,并且将拼读语音与标准读音进行对比,如果拼读语音与标准读音的相似度不高,则可以认为用户未学会该点读内容的读音,因此控制电子设备再次输出标准读音,从而提升用户学习点读内容的标准读音的学习效果。
在图3所描述的方法中,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。此外,实施图3所描述的方法,可以提高确定的指尖坐标精确度。此外,实施图3所描述的方法,可以保证用户拼读点读内容的读音正确。此外,实施图3所描述的方法,可以提升用户学习点读内容的标准读音的学习效果。
实施例四
请参阅图4,图4是本发明实施例公开的一种电子设备的结构示意图。如图4所示,该电子设备可以包括:
采集单元401,用于当检测到用户的手指在学习页面上点击时,采集手指点击学习页面时的图像,并确定图像的坐标系。
识别单元402,用于从采集单元401采集的图像中识别手指的指尖特征,并确定指尖特征在坐标系中的指尖坐标。
第一确定单元403,用于从采集单元401采集的图像中确定与识别单元402确定的指尖坐标对应的若干个备选勾勒区域。
计算单元404,用于计算第一确定单元403确定的各个备选勾勒区域的中心点距识别单元402确定的指尖坐标的距离。
第二确定单元405,用于将计算单元404计算的距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容。
作为一种可选的实施方式,第二确定单元405将距离最短的备选勾勒区域确定为目标勾勒区域,并将目标勾勒区域中包含的第一文字内容确定为点读内容的方式具体可以为:
将距离最短的备选勾勒区域确定为目标勾勒区域;
判断目标勾勒区域的数量是否唯一;
如果是,将目标勾勒区域中包含的第一文字内容确定为点读内容;
如果否,从图像中识别得到用户手指指尖的指示方向;
确定指尖坐标指向各个目标勾勒区域的中心点的目标方向;
计算各个目标方向与指示方向的夹角;
将夹角最小的目标方向对应的目标勾勒区域中包含的第一文字内容确定点读内容。
其中,实施这种实施方式,可以在电子设备确定出目标勾勒区域的数量为多个时,确定用户手指的指尖的指示方向,并根据指示方向从目标勾勒区域中确定出最终需要识别的勾勒区域,以使电子设备确定的勾勒区域与用户手指的指向更为贴合。
可见,实施图4所描述的电子设备,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。此外,实施图4所描述的电子设备,可以使电子设备确定的勾勒区域与用户手指的指向更为贴合。
实施例五
请参阅图5,图5是本发明实施例公开的另一种电子设备的结构示意图。其中,图5所示的电子设备是由图4所示的电子设备进行优化得到的。图5所示的电子设备还可以包括:
检测单元406,用于在识别单元402确定指尖特征在坐标系中的指尖坐标之后,检测指尖坐标是否位于图像中的任意一个勾勒区域内部。
第一确定单元403,还用于在检测单元406的检测结果为否时,从图像中确定与指尖坐标对应的若干个备选勾勒区域。
读取单元407,用于在检测单元406的检测结果为是时,读取任意一个勾勒区域包含的第二文字内容,并将第二文字内容确定为点读内容。
本发明实施例中,可以在检测到指尖坐标位于任意一个勾勒区域内部时,将该勾勒区域内部包含的内容确定为点读内容,从而使得电子设备可以在确定用户的手指指尖处于任意一个勾勒区域中时,将该勾勒区域确定为用户明确指示的区域,从而使得从该勾勒区域中读取的点读内容更加准确。
作为一种可选的实施方式,检测单元406检测指尖坐标是否位于图像中的任意一个勾勒区域内部的方式具体可以为:
获取各个勾勒区域的坐标范围信息,该坐标范围信息中可以包含该坐标范围信息对应的勾勒区域的最大横坐标、最小横坐标、最大纵坐标以及最小纵坐标;
获取指尖坐标的指尖横坐标,并检测所有的坐标范围信息中是否存在最大横坐标大于指尖横坐标且最小横坐标小于指尖横坐标的若干个勾勒区域;
如果不存在若干个勾勒区域,触发第一确定单元403执行从图像中确定与指尖坐标对应的若干个备选勾勒区域;
如果存在若干个勾勒区域,获取指尖坐标的指尖纵坐标,并检测是否存在任意一个勾勒区域的坐标范围信息中的最大纵坐标大于指尖纵坐标且最小纵坐标小于指尖纵坐标;
如果不存在任意一个勾勒区域,触发第一确定单元403执行从图像中确定与指尖坐标对应的若干个备选勾勒区域;
如果存在任意一个勾勒区域,确定指尖坐标位于该任意一个勾勒区域的内部,并触发读取单元407执行读取任意一个勾勒区域包含的第二文字内容,并将第二文字内容确定为点读内容。
其中,实施这种实施方式,可以获取到指尖坐标的横坐标以及纵坐标,并且获得各个勾勒区域的坐标范围信息,从而使得电子设备可以从坐标范围信息中确定指尖坐标与各个勾勒区域的位置关系,以使电子设备对指尖坐标的位置检测更加准确。
作为一种可选的实施方式,图5所示的电子设备的第一确定单元403可以包括:
第一确定子单元4031,用于在图像中划分出若干个勾勒区域,并确定各个勾勒区域的中心点;
第二确定子单元4032,用于从图像中确定以指尖坐标为圆心以及以预设距离为半径的目标区域,并将第一确定子单元4031确定的中心点位于目标区域之内的勾勒区域确定为备选勾勒区域。
其中,实施这种实施方式,可以以指尖坐标为圆心,确定出目标区域,并且可以从目标区域中确定备选勾勒区域,以缩小目标勾勒区域的确定范围,从而提高确定目标勾勒区域的速度。
可见,实施图5所描述的电子设备,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。此外,实施图5所描述的电子设备,可以使电子设备对指尖坐标的位置检测更加准确。此外,实施图5所描述的电子设备,使得从该勾勒区域中读取的点读内容更加准确。此外,实施图5所描述的电子设备,可以将预设距离的确定与字符的大小相关联。
实施例六
请参阅图6,图6是本发明实施例公开的另一种电子设备的结构示意图。其中,图6所示的电子设备是由图5所示的电子设备进行优化得到的。图6所示的电子设备的识别单元402可以包括:
处理子单元4021,用于对采集单元401采集的图像进行二值化处理,得到黑白图像。
计算子单元4022,用于从处理子单元4021得到的黑边图像中识别若干个连通域,并计算各个连通域的面积。
第三确定子单元4023,用于将计算子单元4022计算的面积最大的连通域确定为目标连通域。
识别子单元4024,用于从第三确定子单元4023确定的目标连通域中识别手指的指尖特征。
第四确定子单元4025,用于通过行扫描法确定识别子单元4024识别的指尖特征在坐标系中的指尖坐标。
本发明实施例中,可以对图像进行二值化处理,以得到黑白图像,进而在黑白图像中确定最大连通域,由于用户的手指在黑白图像中应为面积最大的连通域,因此确定出最大连通域可以认为是确定的手指对应的连通域,进而可以在最大连通域中确定指尖坐标,从而提高确定的指尖坐标精确度。
作为一种可选的实施方式,图5所示的电子设备还可以包括:
获取单元408,用于在第二确定单元405将目标勾勒区域中包含的第一文字内容确定为点读内容之后,从预设的语音库中获取与点读内容匹配的标准读音;
输出单元409,用于通过电子设备的扬声器输出获取单元408获取的标准读音。
其中,实施这种实施方式,可以获取电子设备确定的点读内容的标准读音,并输出该标准读音,以使电子设备的用户可以学习到点读内容准确的读音,从而保证用户拼读点读内容的读音正确。
作为一种可选的实施方式,输出单元409还可以用于:
通过音频采集设备采集电子设备所处环境中的声音;
从声音中识别用户输入的拼读语音;
将该拼读语音与标准读音进行对比,得到拼读语音与标准读音的相似度;
判断相似度是否大于预设相似度;
如果大于,确定用户拼读点读内容的读音正确;
如果不大于,再次输出标准读音,并执行通过音频采集设备采集电子设备所处环境中的声音的步骤。
其中,实施这种实施方式,可以在电子设备输出标准读音之后采集用户输入的拼读语音,并且将拼读语音与标准读音进行对比,如果拼读语音与标准读音的相似度不高,则可以认为用户未学会该点读内容的读音,因此控制电子设备再次输出标准读音,从而提升用户学习点读内容的标准读音的学习效果。
可见,实施图6所描述的电子设备,能够从图像中确定的用户指示的目标勾勒区域中获取用户指示的点读内容,从而提高确定点读内容的准确率。此外,实施图6所描述的电子设备,可以提高确定的指尖坐标精确度。此外,实施图6所描述的电子设备,可以保证用户拼读点读内容的读音正确。此外,实施图6所描述的电子设备,可以提升用户学习点读内容的标准读音的学习效果。
实施例七
请参阅图7,图7是本发明实施例公开的另一种电子设备的结构示意图。如图7所示,该电子设备可以包括:
存储有可执行程序代码的存储器701;
与存储器701耦合的处理器702;
其中,处理器702调用存储器701中存储的可执行程序代码,执行以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种计算机可读存储介质,其中,计算机可读存储介质存储了程序代码,其中,程序代码包括用于执行以上各方法实施例中的方法的部分或全部步骤的指令。
本发明实施例还公开一种计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
本发明实施例还公开一种应用发布平台,其中,应用发布平台用于发布计算机程序产品,其中,当计算机程序产品在计算机上运行时,使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。
应理解,说明书通篇中提到的“本发明实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此,在整个说明书各处出现的“在本发明实施例中”未必一定指相同的实施例。此外,这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉,说明书中所描述的实施例均属于可选实施例,所涉及的动作和模块并不一定是本发明所必须的。
在本发明的各种实施例中,应理解,上述各过程的序号的大小并不意味着执行顺序的必然先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
另外,本文中术语“***”和“网络”在本文中常可互换使用。应理解,本文中术语“和/或”,仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,本文中字符“/”,一般表示前后关联对象是一种“或”的关系。
在本发明所提供的实施例中,应理解,“与A对应的B”表示B与A相关联,根据A可以确定B。但还应理解,根据A确定B并不意味着仅仅根据A确定B,还可以根据A和/或其他信息确定B。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质包括只读存储器(Read-Only Memory,ROM)、随机存储器(Random Access Memory,RAM)、可编程只读存储器(Programmable Read-only Memory,PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory,EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory,OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory,EEPROM)、只读光盘(CompactDisc Read-Only Memory,CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。
上述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可位于一个地方,或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。
另外,在本发明各实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可获取的存储器中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分,可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储器中,包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等,具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。
以上对本发明实施例公开的一种点读内容的确定方法及电子设备进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (10)
1.一种点读内容的确定方法,其特征在于,所述方法包括:
当检测到用户的手指在学习页面上点击时,采集所述手指点击所述学习页面时的图像,并确定所述图像的坐标系;
从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标;
从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
计算各个所述备选勾勒区域的中心点距所述指尖坐标的距离;
将所述距离最短的备选勾勒区域确定为目标勾勒区域,并将所述目标勾勒区域中包含的第一文字内容确定为点读内容。
2.根据权利要求1所述的方法,其特征在于,所述从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标之后,所述方法还包括:
检测所述指尖坐标是否位于所述图像中的任意一个勾勒区域内部;
如果否,执行所述的从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
如果是,读取所述任意一个勾勒区域包含的第二文字内容,并将所述第二文字内容确定为点读内容。
3.根据权利要求2所述的方法,其特征在于,所述从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域,包括:
在所述图像中划分出若干个勾勒区域,并确定各个所述勾勒区域的中心点;
从所述图像中确定以所述指尖坐标为圆心以及以预设距离为半径的目标区域,并将所述中心点位于所述目标区域之内的勾勒区域确定为备选勾勒区域。
4.根据权利要求1~3任一项所述的方法,其特征在于,所述从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标,包括:
对所述图像进行二值化处理,得到黑白图像;
从所述黑边图像中识别若干个连通域,并计算各个连通域的面积;
将所述面积最大的连通域确定为目标连通域;
从所述目标连通域中识别所述手指的指尖特征;
通过行扫描法确定所述指尖特征在所述坐标系中的指尖坐标。
5.根据权利要求1~4任一项所述的方法,其特征在于,所述将所述目标勾勒区域中包含的第一文字内容确定为点读内容之后,所述方法还包括:
从预设的语音库中获取与所述点读内容匹配的标准读音;
通过电子设备的扬声器输出所述标准读音。
6.一种电子设备,其特征在于,包括:
采集单元,用于当检测到用户的手指在学习页面上点击时,采集所述手指点击所述学习页面时的图像,并确定所述图像的坐标系;
识别单元,用于从所述图像中识别所述手指的指尖特征,并确定所述指尖特征在所述坐标系中的指尖坐标;
第一确定单元,用于从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
计算单元,用于计算各个所述备选勾勒区域的中心点距所述指尖坐标的距离;
第二确定单元,用于将所述距离最短的备选勾勒区域确定为目标勾勒区域,并将所述目标勾勒区域中包含的第一文字内容确定为点读内容。
7.根据权利要求6所述的电子设备,其特征在于,所述学习设备还包括:
检测单元,用于在所述识别单元确定所述指尖特征在所述坐标系中的指尖坐标之后,检测所述指尖坐标是否位于所述图像中的任意一个勾勒区域内部;
所述第一确定单元,还用于在所述检测单元的检测结果为否时,从所述图像中确定与所述指尖坐标对应的若干个备选勾勒区域;
读取单元,用于在所述检测单元的检测结果为是时,读取所述任意一个勾勒区域包含的第二文字内容,并将所述第二文字内容确定为点读内容。
8.根据权利要求7所述的电子设备,其特征在于,所述第一确定单元包括:
第一确定子单元,用于在所述图像中划分出若干个勾勒区域,并确定各个所述勾勒区域的中心点;
第二确定子单元,用于从所述图像中确定以所述指尖坐标为圆心以及以预设距离为半径的目标区域,并将所述中心点位于所述目标区域之内的勾勒区域确定为备选勾勒区域。
9.根据权利要求6~8任一项所述的电子设备,其特征在于,所述识别单元包括:
处理子单元,用于对所述图像进行二值化处理,得到黑白图像;
计算子单元,用于从所述黑边图像中识别若干个连通域,并计算各个连通域的面积;
第三确定子单元,用于将所述面积最大的连通域确定为目标连通域;
识别子单元,用于从所述目标连通域中识别所述手指的指尖特征;
第四确定子单元,用于通过行扫描法确定所述指尖特征在所述坐标系中的指尖坐标。
10.根据权利要求6~9任一项所述的电子设备,其特征在于,所述学习设备还包括:
获取单元,用于在所述第二确定单元将所述目标勾勒区域中包含的第一文字内容确定为点读内容之后,从预设的语音库中获取与所述点读内容匹配的标准读音;
输出单元,用于通过所述电子设备的扬声器输出所述标准读音。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910499988.3A CN111078083A (zh) | 2019-06-09 | 2019-06-09 | 一种点读内容的确定方法及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910499988.3A CN111078083A (zh) | 2019-06-09 | 2019-06-09 | 一种点读内容的确定方法及电子设备 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN111078083A true CN111078083A (zh) | 2020-04-28 |
Family
ID=70310071
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910499988.3A Pending CN111078083A (zh) | 2019-06-09 | 2019-06-09 | 一种点读内容的确定方法及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111078083A (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111582264A (zh) * | 2020-05-12 | 2020-08-25 | 广东小天才科技有限公司 | 一种精准框题的方法、装置、***、电子设备及存储介质 |
CN111652182A (zh) * | 2020-06-17 | 2020-09-11 | 广东小天才科技有限公司 | 一种悬空手势识别的方法、装置、电子设备和存储介质 |
CN111711758A (zh) * | 2020-06-29 | 2020-09-25 | 广东小天才科技有限公司 | 多指定位的试题拍摄方法、装置、电子设备和存储介质 |
CN111723811A (zh) * | 2020-05-20 | 2020-09-29 | 上海积跬教育科技有限公司 | 文字识别及处理的方法、装置、介质以及电子设备 |
CN112651298A (zh) * | 2020-11-27 | 2021-04-13 | 深圳点猫科技有限公司 | 基于手指关节定位的点读方法、装置、***及介质 |
CN112784663A (zh) * | 2020-05-08 | 2021-05-11 | 珠海金山办公软件有限公司 | 一种文字识别方法及装置 |
CN112800904A (zh) * | 2021-01-19 | 2021-05-14 | 深圳市玩瞳科技有限公司 | 一种根据手指指向识别图片中字符串的方法及装置 |
CN112817445A (zh) * | 2021-01-25 | 2021-05-18 | 暗物智能科技(广州)有限公司 | 一种信息采集方法、装置、电子设备及存储介质 |
CN112817447A (zh) * | 2021-01-25 | 2021-05-18 | 暗物智能科技(广州)有限公司 | 一种ar内容显示方法及*** |
CN114648756A (zh) * | 2022-05-24 | 2022-06-21 | 之江实验室 | 一种基于指向向量的书本文字识别指读方法和*** |
WO2022206534A1 (zh) * | 2021-03-29 | 2022-10-06 | 广州视源电子科技股份有限公司 | 文本内容识别方法、装置、计算机设备和存储介质 |
WO2023272604A1 (zh) * | 2021-06-30 | 2023-01-05 | 东莞市小精灵教育软件有限公司 | 基于生物特征识别的定位方法及装置 |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101799996A (zh) * | 2010-03-11 | 2010-08-11 | 南昌航空大学 | 一种基于视频图像的点读机点读方法 |
CN102411477A (zh) * | 2011-11-16 | 2012-04-11 | 鸿富锦精密工业(深圳)有限公司 | 电子设备及其文本导读方法 |
CN102799350A (zh) * | 2012-06-13 | 2012-11-28 | 优视科技有限公司 | 焦点元素的确定方法及装置 |
CN104035992A (zh) * | 2014-06-10 | 2014-09-10 | 复旦大学 | 利用图像处理技术及语义向量空间的文本语义处理方法和*** |
CN104050471A (zh) * | 2014-05-27 | 2014-09-17 | 华中科技大学 | 一种自然场景文字检测方法及*** |
CN104157171A (zh) * | 2014-08-13 | 2014-11-19 | 三星电子(中国)研发中心 | 一种点读***及其方法 |
CN104217197A (zh) * | 2014-08-27 | 2014-12-17 | 华南理工大学 | 一种基于视觉手势的点读方法和装置 |
CN104267812A (zh) * | 2014-09-22 | 2015-01-07 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN107622044A (zh) * | 2016-07-13 | 2018-01-23 | 阿里巴巴集团控股有限公司 | 字符串的分词方法、装置及设备 |
CN107748744A (zh) * | 2017-10-31 | 2018-03-02 | 广东小天才科技有限公司 | 一种勾勒框知识库的建立方法及装置 |
CN107844552A (zh) * | 2017-10-31 | 2018-03-27 | 广东小天才科技有限公司 | 一种勾勒框知识库内容提供方法及装置 |
CN109063583A (zh) * | 2018-07-10 | 2018-12-21 | 广东小天才科技有限公司 | 一种基于点读操作的学习方法及电子设备 |
-
2019
- 2019-06-09 CN CN201910499988.3A patent/CN111078083A/zh active Pending
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101799996A (zh) * | 2010-03-11 | 2010-08-11 | 南昌航空大学 | 一种基于视频图像的点读机点读方法 |
CN102411477A (zh) * | 2011-11-16 | 2012-04-11 | 鸿富锦精密工业(深圳)有限公司 | 电子设备及其文本导读方法 |
CN102799350A (zh) * | 2012-06-13 | 2012-11-28 | 优视科技有限公司 | 焦点元素的确定方法及装置 |
CN104050471A (zh) * | 2014-05-27 | 2014-09-17 | 华中科技大学 | 一种自然场景文字检测方法及*** |
CN104035992A (zh) * | 2014-06-10 | 2014-09-10 | 复旦大学 | 利用图像处理技术及语义向量空间的文本语义处理方法和*** |
CN104157171A (zh) * | 2014-08-13 | 2014-11-19 | 三星电子(中国)研发中心 | 一种点读***及其方法 |
CN104217197A (zh) * | 2014-08-27 | 2014-12-17 | 华南理工大学 | 一种基于视觉手势的点读方法和装置 |
CN104267812A (zh) * | 2014-09-22 | 2015-01-07 | 联想(北京)有限公司 | 一种信息处理方法及电子设备 |
CN107622044A (zh) * | 2016-07-13 | 2018-01-23 | 阿里巴巴集团控股有限公司 | 字符串的分词方法、装置及设备 |
CN107748744A (zh) * | 2017-10-31 | 2018-03-02 | 广东小天才科技有限公司 | 一种勾勒框知识库的建立方法及装置 |
CN107844552A (zh) * | 2017-10-31 | 2018-03-27 | 广东小天才科技有限公司 | 一种勾勒框知识库内容提供方法及装置 |
CN109063583A (zh) * | 2018-07-10 | 2018-12-21 | 广东小天才科技有限公司 | 一种基于点读操作的学习方法及电子设备 |
Cited By (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112784663A (zh) * | 2020-05-08 | 2021-05-11 | 珠海金山办公软件有限公司 | 一种文字识别方法及装置 |
CN111582264A (zh) * | 2020-05-12 | 2020-08-25 | 广东小天才科技有限公司 | 一种精准框题的方法、装置、***、电子设备及存储介质 |
CN111723811A (zh) * | 2020-05-20 | 2020-09-29 | 上海积跬教育科技有限公司 | 文字识别及处理的方法、装置、介质以及电子设备 |
CN111652182A (zh) * | 2020-06-17 | 2020-09-11 | 广东小天才科技有限公司 | 一种悬空手势识别的方法、装置、电子设备和存储介质 |
CN111711758B (zh) * | 2020-06-29 | 2021-06-18 | 广东小天才科技有限公司 | 多指定位的试题拍摄方法、装置、电子设备和存储介质 |
CN111711758A (zh) * | 2020-06-29 | 2020-09-25 | 广东小天才科技有限公司 | 多指定位的试题拍摄方法、装置、电子设备和存储介质 |
CN112651298A (zh) * | 2020-11-27 | 2021-04-13 | 深圳点猫科技有限公司 | 基于手指关节定位的点读方法、装置、***及介质 |
CN112800904A (zh) * | 2021-01-19 | 2021-05-14 | 深圳市玩瞳科技有限公司 | 一种根据手指指向识别图片中字符串的方法及装置 |
CN112817445A (zh) * | 2021-01-25 | 2021-05-18 | 暗物智能科技(广州)有限公司 | 一种信息采集方法、装置、电子设备及存储介质 |
CN112817447A (zh) * | 2021-01-25 | 2021-05-18 | 暗物智能科技(广州)有限公司 | 一种ar内容显示方法及*** |
CN112817447B (zh) * | 2021-01-25 | 2024-05-07 | 暗物智能科技(广州)有限公司 | 一种ar内容显示方法及*** |
WO2022206534A1 (zh) * | 2021-03-29 | 2022-10-06 | 广州视源电子科技股份有限公司 | 文本内容识别方法、装置、计算机设备和存储介质 |
WO2023272604A1 (zh) * | 2021-06-30 | 2023-01-05 | 东莞市小精灵教育软件有限公司 | 基于生物特征识别的定位方法及装置 |
CN114648756A (zh) * | 2022-05-24 | 2022-06-21 | 之江实验室 | 一种基于指向向量的书本文字识别指读方法和*** |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111078083A (zh) | 一种点读内容的确定方法及电子设备 | |
CN109817046B (zh) | 一种基于家教设备的学习辅助方法及家教设备 | |
CN109446315B (zh) | 一种解题辅助方法及解题辅助客户端 | |
CN109766412B (zh) | 一种基于图像识别的学习内容获取方法及电子设备 | |
CN111081080B (zh) | 一种语音检测方法及学习设备 | |
CN111027537A (zh) | 一种搜题方法及电子设备 | |
CN111026949A (zh) | 一种基于电子设备的搜题方法及*** | |
CN111079494A (zh) | 一种学习内容推送方法及电子设备 | |
CN111026924A (zh) | 一种待搜索内容的获取方法及电子设备 | |
CN110796130A (zh) | 用于文字识别的方法、装置及计算机存储介质 | |
CN111079501A (zh) | 一种文字识别方法及电子设备 | |
CN111078915A (zh) | 一种点读模式下的点读内容获取方法及电子设备 | |
CN111078983B (zh) | 一种待识别页面的确定方法及学习设备 | |
CN111081092B (zh) | 一种学习内容输出方法及学习设备 | |
CN111027353A (zh) | 一种搜索内容的提取方法及电子设备 | |
CN111077997A (zh) | 一种点读模式下的点读控制方法及电子设备 | |
CN111091034A (zh) | 一种基于多手指识别的搜题方法及家教设备 | |
CN111079489A (zh) | 一种内容识别方法及电子设备 | |
CN111090343A (zh) | 在点读场景下识别点读内容的方法及装置 | |
CN111090989B (zh) | 一种基于文字识别的提示方法及电子设备 | |
CN113449652A (zh) | 基于生物特征识别的定位方法及装置 | |
CN111077990B (zh) | 一种待点读内容的确定方法及学习设备 | |
CN111078067A (zh) | 一种信息定位方法及电子设备 | |
CN111079725A (zh) | 一种用于区分英文和拼音的方法及电子设备 | |
CN111142763B (zh) | 一种触发搜索的方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20200428 |
|
RJ01 | Rejection of invention patent application after publication |