CN107168536A - 试题搜索方法、试题搜索装置及电子终端 - Google Patents
试题搜索方法、试题搜索装置及电子终端 Download PDFInfo
- Publication number
- CN107168536A CN107168536A CN201710358116.6A CN201710358116A CN107168536A CN 107168536 A CN107168536 A CN 107168536A CN 201710358116 A CN201710358116 A CN 201710358116A CN 107168536 A CN107168536 A CN 107168536A
- Authority
- CN
- China
- Prior art keywords
- examination question
- electric terminal
- mentioned
- eye motion
- search
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/903—Querying
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computational Linguistics (AREA)
- Data Mining & Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
本发明公开了一种试题搜索方法、试题搜索装置、电子终端及计算机可读存储介质,其中,上述试题搜索方法包括:当接收到搜题触发指令时,在所述搜题触发指令的指示下启动所述电子终端的后置摄像头;检测所述电子终端的当前用户的眼部动作;若在所述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发所述后置摄像头的拍照动作;基于所述拍照动作获得的图像进行试题搜索。本发明提供的技术方案能够在试题搜索的场景下减少拍照的抖动。
Description
技术领域
本发明涉及搜题技术领域,具体涉及一种试题搜索方法、试题搜索装置及电子终端。
背景技术
搜题类应用程序(即搜索类App,其中,App为Application的英文缩写)是指能够获取题目并自动从题库中搜索该题目的解题步骤和答案后,显示该题目的解题步骤和答案的App。
目前主流的搜题类App是通过拍摄题目的图像并将图像上传至服务器,由服务器基于图像中的题目进行试题搜索并返回搜题结果。由于是基于图像进行搜题,因此,图像的质量直接影响搜题的准确率。
现有技术中,用户需要点击电子终端的拍照按键触发拍照动作以拍摄题目的图像,由于点击拍照按键时非常容易造成电子终端(尤其对于体积较大的电子终端)的抖动,而电子终端的抖动会直接影响拍摄的质量,因此,现有的通过点击电子终端的拍照按键触发拍照动作的方式容易导致拍摄得到的图像模糊不清,最终影响试题搜索的准确率。
发明内容
本发明提供一种试题搜索方法、试题搜索装置及电子终端,用于在试题搜索的场景下减少拍照的抖动。
本发明第一方面提供一种试题搜索方法,应用于电子终端,该试题搜索方法包括:
当接收到搜题触发指令时,在所述搜题触发指令的指示下启动所述电子终端的后置摄像头;
检测所述电子终端的当前用户的眼部动作;
若在所述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发所述后置摄像头的拍照动作;
基于所述拍照动作获得的图像进行试题搜索。
基于本发明第一方面,在第一种可能的实现方式中,所述检测所述电子终端的当前用户的眼部动作,包括:
通过所述电子终端的前置摄像头进行人脸检测;
若检测到人脸,则检测所述人脸的眼部动作。
基于本发明第一方面,或者本发明第一方面的第一种可能的实现方式,在第二种可能的实现方式中,所述触发所述后置摄像头的拍照动作,之后包括:
等待预设的时长;
若在所述时长内未接收到重拍指令,则执行所述基于所述拍照动作获得的图像进行试题搜索的步骤;
若在所述时长内接收到重拍指令,则触发所述后置摄像头进入取景模式,以便重新进行图像拍摄。
基于本发明第一方面的第二种可能的实现方式,在第三种可能的实现方式中,所述试题搜索方法还包括:
若在所述时长内检测到预设的第二眼部动作,则确定在所述时长内接收到所述重拍指令;
其中,所述第二眼部动作不同于所述第一眼部动作。
基于本发明第一方面的第三种可能的实现方式,在第四种可能的实现方式中,所述第一眼部动作为:单眼闭合的时间不小于预设的第一时间阈值;所述第二眼部动作为:双眼闭合的时间不小于预设的第二时间阈值。
本发明第二方面提供一种试题搜索装置,应用于电子终端,该试题搜索装置包括:
启动单元,用于当接收到搜题触发指令时,在所述搜题触发指令的指示下启动所述电子终端的后置摄像头;
检测单元,用于检测所述电子终端的当前用户的眼部动作;
触发单元,用于当所述检测单元在所述后置摄像头的取景模式下检测到预设的第一眼部动作时,触发所述后置摄像头的拍照动作;
试题搜索单元,用于基于所述拍照动作获得的图像进行试题搜索。
基于本发明第二方面,在第一种可能的实现方式中,所述检测单元具体用于:通过所述电子终端的前置摄像头进行人脸检测;若检测到人脸,则检测所述人脸的眼部动作。
基于本发明第二方面,或者本发明第二方面的第一种可能的实现方式,在第二种可能的实现方式中,所述试题搜索装置还包括:
计时单元,用于在所述触发单元触发时启动计时并进入等待;
所述触发单元具体在所述计时单元的计时到达预设的时长且在所述时长内未接收到重拍指令时触发;
所述触发单元还用于:当在所述时长内接收到所述重拍指令时,触发所述后置摄像头进入取景模式,以便重新进行图像拍摄。
本发明第三方面提供一种电子终端,所述电子终端包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的试题搜索程序,所述处理器执行所述试题搜索程序时实现如本发明第一方面或者本发明第一方面的任一可能实现方式中的试题搜索方法。
本发明第四方面提供一种计算机可读存储介质,上述计算机可读存储介质存储有试题搜索程序,上述试题搜索程序被至少一个处理器执行时,实现如本发明第一方面或者本发明第一方面的任一可能实现方式中的试题搜索方法。
由上可见,本发明方案中当接收到搜题触发指令时,启动电子终端的后置摄像头,并检测该电子终端的当前用户的眼部动作,当在该后置摄像头的取景模式下检测到预设的第一眼部动作时,触发该后置摄像头的拍照动作,以基于拍照动作获得的图像进行试题搜索。基于本方案,用户在试题搜索流程下可以通过眼部动作来触发电子终端的后置摄像头的拍照动作,由于不需要触碰电子终端的拍照按键进行拍摄,因此,可以在试题搜索的场景下减少因点击电子终端拍照按键触发拍照动作而产生的抖动,从而可提高试题搜索流程中的拍摄质量,进而提高试题搜索的准确率。
附图说明
为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本发明提供的试题搜索方法一个实施例流程示意图;
图2为本发明提供的试题搜索方法另一个实施例流程示意图;
图3为本发明提供的试题搜索装置一个实施例结构示意图;
图4为本发明提供的电子终端一个实施例结构示意图。
具体实施方式
为使得本发明的发明目的、特征、优点能够更加的明显和易懂,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而非全部实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
实施例一
本发明实施例对一种应用于电子终端的试题搜索方法进行描述,请参阅图1,上述试题搜索方法包括:
步骤101、当接收到搜题触发指令时,在上述搜题触发指令的指示下启动上述电子终端的后置摄像头;
本发明实施例中,为电子终端配置“搜题触发指令”的输入接口,以便用户可以通过该输入接口输入上述搜题触发指令。具体地,该输入接口可以表现为一实体按键,以便通过该实体按键输入上述搜题触发指令,实现一键触发图1所示的搜题流程。或者,该输入接口也可以是其它表现形式,例如,该输入接口也可以表现为应用程序(即搜题类App)的启动接口,当用户启动该搜题类App时,即相当于输入上述搜题触发指令。本发明实施例中不对上述搜题触发指令的具体输入方式进行限定。
在本发明实施例中,当接收到上述搜题触发指令时,在上述搜题触发指令的指示下启动上述电子终端的后置摄像头。进一步,还可以在上述后置摄像头启动后,在上述电子终端的显示屏上加载上述后置摄像头的预览界面,以便用户可通过该预览界面浏览到上述后置摄像头在取景模式下的取景范围。
步骤102、检测上述电子终端的当前用户的眼部动作;
本发明实施例中,可在上述后置摄像头启动后,检测上述电子终端的当前用户的眼部动作。
可选的,在步骤102中,可以通过该电子终端的前置摄像头进行人脸检测,当检测到人脸时,检测该人脸的眼部动作。进一步,当检测不到人脸时,可以持续检测直至检测到人脸或者持续检测直至用户手动触发上述后置摄像头的拍照动作(例如用户通过触发上述电子终端的拍照按键的方式触发上述后置摄像头的拍照动作),需要说明的是,本发明实施例中,上述后置摄像头的取景模式下,用户均可以手动触发上述后置摄像头的拍照动作。
具体地,上述检测上述电子终端的当前用户的眼部动作包括:通过上述电子终端的前置摄像头进行人脸检测,当上述电子终端的前置摄像头检测到人脸时,连续采集该人脸的k张图像(k为大于1的预设值);分别从上述k张图像中提取出人眼区域;基于预设的眼部检测算法对上述k张图像的人眼区域进行检测分析,以确定该电子终端的当前用户的眼部动作。具体地,在上述分别从上述k张图像中提取出人眼区域的步骤中,可以采用ASM(英文全称为:Activy Shape Model)算法分别从上述k张图像中提取出人眼区域。由于ASM算法需要通过人工标定的方法先标定训练集,经过训练获得形状模型,再通过关键点的匹配实现特定物体的匹配。因此,本发明实施例中,可以预先通过人工标定的方法在多张人眼样本图像中选择一定数量的人眼轮廓特征点(例如可以选取21个人眼轮廓特征点)构建出人眼区域形状模型,然后根据人眼轮廓特征点周围的像素点,为每个人眼轮廓特征点构建局部灰度模型。针对上述k张图像的每一张图像,可先根据预先构建的人眼区域形状模型建立一个人眼区域初始估计模型,再根据预先构建的局部灰度模型为该人眼区域初始估计模型搜索最佳匹配,从图像中提取出人眼区域。进一步,在提取出各张图像的人眼区域后,还可以对各张图像的人眼区域进行边缘轮廓提取。本发明实施例中可以使用基于Canny算子的图像轮廓提取算法对上述k张图像中的人眼区域进行边缘轮廓提取,以获得各张图像的人眼边缘轮廓图像,之后基于获得的k张图像的人眼边缘轮廓图像进行检测分析,以确定该电子终端的当前用户的眼部动作。当然,在步骤102中,也可以不通过该电子终端的前置摄像头,而通过其它方式检测上述电子终端的当前用户的眼部动作,例如,通过外接于上述电子终端的外置摄像头检测上述电子终端的当前用户的眼部动作,此处不作限定。
可选的,上述眼部检测算法可以为眨眼检测算法,则步骤102可表现为:检测上述电子终端的当前用户的眨眼动作。
步骤103、若在上述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发上述后置摄像头的拍照动作;
本发明实施例中,在步骤102的基础上,当在上述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发上述后置摄像头的拍照动作。其中,上述取景模式也即拍照模式下的拍照等待过程,在该取景模式下,用户可以调整拍摄的角度、焦距、对焦区域等。
可选的,上述第一眼部动作可设为:单眼闭合的时间不小于预设的第一时间阈值。当在上述后置摄像头的取景模式下检测到该第一眼部动作时,触发上述后置摄像头的拍照动作。其中,上述第一时间阈值也可以根据实际需求进行设定,当然,上述第一眼部动作也可以设为其它动作,例如可以设为单眼连续眨动n次(其中,n可为大于1的预设值),此处不作限定。
步骤104、基于上述拍照动作获得的图像进行试题搜索;
本发明实施例中基于步骤103拍照得到的图像进行试题搜索。
可选的,将该图像传至服务器,由服务台基于该图像进行试题搜索。当然,也可以预先在本地(即上述电子终端本地)构建所需的数据库,则在步骤104中,无需与服务器联网即可直接在本地基于获得的图像进行试题搜索。
需要说明的是,本发明实施例中的试题搜索方法可以由试题搜索装置实现,该试题搜索装置可以为独立的设备,也可以集成在电子终端(例如智能手机、平板电脑、智能可穿戴设备、电子学习机等)中,此处不作限定。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
由上可见,本发明实施例中,当接收到搜题触发指令时,启动电子终端的后置摄像头,并检测该电子终端的当前用户的眼部动作,当在该后置摄像头的取景模式下检测到预设的第一眼部动作时,触发该后置摄像头的拍照动作,以基于拍照动作获得的图像进行试题搜索。基于本方案,用户在试题搜索流程下可以通过眼部动作来触发电子终端的后置摄像头的拍照动作,由于不需要触碰电子终端的拍照按键进行拍摄,因此,可以在试题搜索的场景下减少因点击电子终端拍照按键触发拍照动作而产生的抖动,从而可提高试题搜索流程中的拍摄质量,进而提高试题搜索的准确率。
实施例二
本发明实施例与实施例一的区别在于,本发明实施例在拍照动作触发后,不立即进行试题搜索,以便为用户提供重新拍照的机会,也避免因基于用户不满意的图像进行试题搜索而产生的不必要的时耗。具体地,请参阅图2,本发明实施例中的试题搜索方法包括:
步骤201、当接收到搜题触发指令时,在上述搜题触发指令的指示下启动上述电子终端的后置摄像头;
本发明实施例中,为电子终端配置“搜题触发指令”的输入接口,以便用户可以通过该输入接口输入上述搜题触发指令。具体地,该输入接口可以表现为一实体按键,以便通过该实体按键输入上述搜题触发指令,实现一键触发图1所示的搜题流程。或者,该输入接口也可以是其它表现形式,例如,该输入接口也可以表现为应用程序(即搜题类App)的启动接口,当用户启动该搜题类App时,即相当于输入上述搜题触发指令。本发明实施例中不对上述搜题触发指令的具体输入方式进行限定。
在本发明实施例中,当接收到上述搜题触发指令时,在上述搜题触发指令的指示下启动上述电子终端的后置摄像头。进一步,还可以在上述后置摄像头启动后,在上述电子终端的显示屏上加载上述后置摄像头的预览界面,以便用户可通过该预览界面浏览到上述后置摄像头在取景模式下的取景范围。
步骤202、检测上述电子终端的当前用户的眼部动作;
本发明实施例中,可在上述后置摄像头启动后,检测上述电子终端的当前用户的眼部动作。
可选的,在步骤202中,可以通过该电子终端的前置摄像头进行人脸检测,当检测到人脸时,检测该人脸的眼部动作。进一步,当检测不到人脸时,可以持续检测直至检测到人脸或者持续检测直至用户手动触发上述后置摄像头的拍照动作(例如用户通过触发上述电子终端的拍照按键的方式触发上述后置摄像头的拍照动作),需要说明的是,本发明实施例中,上述后置摄像头的取景模式下,用户均可以手动触发上述后置摄像头的拍照动作。
具体地,上述检测上述电子终端的当前用户的眼部动作包括:通过上述电子终端的前置摄像头进行人脸检测,当上述电子终端的前置摄像头检测到人脸时,连续采集该人脸的k张图像(k为大于1的预设值);分别从上述k张图像中提取出人眼区域;基于预设的眼部检测算法对上述k张图像的人眼区域进行检测分析,以确定该电子终端的当前用户的眼部动作。具体地,在上述分别从上述k张图像中提取出人眼区域的步骤中,可以采用ASM(英文全称为:Activy Shape Model)算法分别从上述k张图像中提取出人眼区域。由于ASM算法需要通过人工标定的方法先标定训练集,经过训练获得形状模型,再通过关键点的匹配实现特定物体的匹配。因此,本发明实施例中,可以预先通过人工标定的方法在多张人眼样本图像中选择一定数量的人眼轮廓特征点(例如可以选取21个人眼轮廓特征点)构建出人眼区域形状模型,然后根据人眼轮廓特征点周围的像素点,为每个人眼轮廓特征点构建局部灰度模型。针对上述k张图像的每一张图像,可先根据预先构建的人眼区域形状模型建立一个人眼区域初始估计模型,再根据预先构建的局部灰度模型为该人眼区域初始估计模型搜索最佳匹配,从图像中提取出人眼区域。进一步,在提取出各张图像的人眼区域后,还可以对各张图像的人眼区域进行边缘轮廓提取。本发明实施例中可以使用基于Canny算子的图像轮廓提取算法对上述k张图像中的人眼区域进行边缘轮廓提取,以获得各张图像的人眼边缘轮廓图像,之后基于获得的k张图像的人眼边缘轮廓图像进行检测分析,以确定该电子终端的当前用户的眼部动作。当然,在步骤202中,也可以不通过该电子终端的前置摄像头,而通过其它方式检测上述电子终端的当前用户的眼部动作,例如,通过外接于上述电子终端的外置摄像头检测上述电子终端的当前用户的眼部动作,此处不作限定。
可选的,上述眼部检测算法可以为眨眼检测算法,则步骤202可表现为:检测上述电子终端的当前用户的眨眼动作。
步骤203、若在上述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发上述后置摄像头的拍照动作;
本发明实施例中,在步骤202的基础上,当在上述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发上述后置摄像头的拍照动作。其中,上述取景模式也即拍照模式下的拍照等待过程,在该取景模式下,用户可以调整拍摄的角度、焦距、对焦区域等。
可选的,上述第一眼部动作为设为:单眼闭合的时间不小于预设的第一时间阈值。则当在上述后置摄像头的取景模式下检测到该第一眼部动作时,则触发上述后置摄像头的拍照动作。其中,上述第一时间阈值也可以根据实际需求进行设定,当然,上述第一眼部动作也可以设为其它动作,例如可以设为连续眨眼n次(其中,n可为大于1的预设值),此处不作限定。
步骤204、等待预设的时长;
本发明实施例中,在触发上述后置摄像头的拍照动作后等待预设的时长,考虑到延时不能过长并且也需要给予用户一定的反映时间,因此可设定该时长为2秒。当然,该时长也可以具体根据实际需求进行设定,此处不作限定。
步骤205、若在上述时长内未接收到重拍指令,则基于本次拍照动作获得的图像进行试题搜索;
本发明实施例中当在上述时长内未接收到重拍指令,则自动基于本次拍照动作获得的图像进行试题搜索。
可选的,将该图像传至服务器,由服务台基于该图像进行试题搜索。当然,也可以预先在本地(即上述电子终端本地)构建所需的数据库,则在步骤205中,无需与服务器联网即可直接在本地基于获得的图像进行试题搜索。
步骤206、若在上述时长内接收到重拍指令,则触发上述后置摄像头进入取景模式,以便重新进行图像拍摄;
可选的,在上述时长内检测上述电子终端的当前用户的眼部动作,具体地检测过程可以参照步骤202中的描述,此处不再赘述。若在上述时长内检测到预设的第二眼部动作,则确定在上述时长内接收到上述重拍指令。具体地,上述第二眼部动作可设为:双眼闭合的时间不小于预设的第二时间阈值。当在上述后置摄像头的取景模式下检测到该第二眼部动作时,确定在上述时长内接收到上述重拍指令,此时触发上述后置摄像头进入取景模式,以便重新进行图像拍摄。其中,上述第二时间阈值也可以根据实际需求进行设定,当然,上述第二眼部动作也可以设为其它动作,例如可以设为双眼连续眨动m次(其中,m可为大于1的预设值),只需使得上述第二眼部动作不同于上述第一眼部动作即可,此处不做限定。
当然,在上述时长内,用户也可以通过手动触发拍照按键或其它预设按键的方式输出上述重拍指令,此处不作限定。
需要说明的是,本发明实施例中的试题搜索方法可以由试题搜索装置实现,该试题搜索装置可以为独立的设备,也可以集成在电子终端(例如智能手机、平板电脑、智能可穿戴设备、电子学习机等)中,此处不作限定。
应理解,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本发明实施例的实施过程构成任何限定。
由上可见,本发明实施例中,当接收到搜题触发指令时,启动电子终端的后置摄像头,并检测该电子终端的当前用户的眼部动作,当在该后置摄像头的取景模式下检测到预设的第一眼部动作时,触发该后置摄像头的拍照动作,以基于拍照动作获得的图像进行试题搜索。基于本方案,用户在试题搜索流程下可以通过眼部动作来触发电子终端的后置摄像头的拍照动作,由于不需要触碰电子终端的拍照按键进行拍摄,因此,可以在试题搜索的场景下减少因点击电子终端拍照按键触发拍照动作而产生的抖动,从而可提高试题搜索流程中的拍摄质量,进而提高试题搜索的准确率。另外,在拍照动作触发后,不立即进行试题搜索,以便为用户提供重新拍照的机会,也可避免因基于用户不满意的图像进行试题搜索而产生的不必要的时耗。
实施例三
本发明提供一种试题搜索装置,该试题搜索装置应用于电子终端。如图3所示,上述试题搜索装置包括:
启动单元301,用于当接收到搜题触发指令时,在所述搜题触发指令的指示下启动所述电子终端的后置摄像头;
检测单元302,用于检测所述电子终端的当前用户的眼部动作;
触发单元303,用于当检测单元302在所述后置摄像头的取景模式下检测到预设的第一眼部动作时,触发所述后置摄像头的拍照动作;
试题搜索单元304,用于基于所述拍照动作获得的图像进行试题搜索。
可选的,检测单元303具体用于:通过所述电子终端的前置摄像头进行人脸检测;若检测到人脸,则检测所述人脸的眼部动作。
可选的,本发明实施例中的试题搜索装置还包括:计时单元,用于在触发单元303触发时启动计时并进入等待;触发单元303具体在所述计时单元的计时到达预设的时长且在所述时长内未接收到重拍指令时触发;触发单元303还用于:当在所述时长内接收到所述重拍指令时,触发所述后置摄像头进入取景模式,以便重新进行图像拍摄。
可选的,本发明实施例中的试题搜索装置还包括:确定单元,用于当在上述时长内检测到预设的第二眼部动作,则确定在上述时长内接收到上述重拍指令;其中,上述第二眼部动作不同于上述第一眼部动作。
可选的,所述第一眼部动作为:单眼闭合的时间不小于预设的第一时间阈值;所述第二眼部动作为:双眼闭合的时间不小于预设的第二时间阈值。
需要说明的是,本发明实施例中的试题搜索装置可以为独立的设备,也可以集成在电子终端(例如智能手机、平板电脑、智能可穿戴设备、电子学习机等)中,此处不作限定。
应理解,本发明实施例中的试题搜索装置可以用于实现上述方法实施例中的全部技术方案,其各个功能模块的功能可以根据上述方法实施例中的方法具体实现,其具体实现过程可参照上述实施例中的相关描述,此处不再赘述。
由上可见,本发明实施例中,当接收到搜题触发指令时,启动电子终端的后置摄像头,并检测该电子终端的当前用户的眼部动作,当在该后置摄像头的取景模式下检测到预设的第一眼部动作时,触发该后置摄像头的拍照动作,以基于拍照动作获得的图像进行试题搜索。基于本方案,用户在试题搜索流程下可以通过眼部动作来触发电子终端的后置摄像头的拍照动作,由于不需要触碰电子终端的拍照按键进行拍摄,因此,可以在试题搜索的场景下减少因点击电子终端拍照按键触发拍照动作而产生的抖动,从而可提高试题搜索流程中的拍摄质量,进而提高试题搜索的准确率。另外,在拍照动作触发后,不立即进行试题搜索,以便为用户提供重新拍照的机会,也可避免因基于用户不满意的图像进行试题搜索而产生的不必要的时耗。
实施例四
图4是本发明一实施例提供的智能终端的示意图。如图4所示,该实施例的电子终端4包括:处理器40、存储器41以及存储在存储器41中并可在处理器40上运行的计算机程序42,例如试题搜索程序。处理器40执行计算机程序42时实现上述各个方法实施例中的试题搜索方法,例如图1所示的步骤101~104,图2所示的步骤201~206。或者,计算机程序42可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在存储器41中,并由处理器40执行,以完成本发明。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述计算机程序42在智能终端4中的执行过程。例如,计算机程序42可以被分割成如图3所示的启动单元301、检测单元302和触发单元303,启动单元301、检测单元302和触发单元303的功能可以参照图3所示实施例中的描述,此处不再赘述。
电子终端4可包括,但不仅限于处理器40、存储器41。本领域技术人员可以理解,图4仅仅是电子终端4的示例,并不构成对电子终端4的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如电子终端4还可以包括输入输出设备、网络接入设备、总线等。
所称处理器40可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器41可以是电子终端4的内部存储单元,例如电子终端4的硬盘或内存。所述存储器41也可以是电子终端4的外部存储设备,例如电子终端4上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(FlashCard)等。进一步地,所述存储器41还可以既包括电子终端4的内部存储单元也包括外部存储设备。存储器41用于存储所述计算机程序以及电子终端4所需的其他程序和数据。存储器41还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述***中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
在本发明所提供的实施例中,应该理解到,所揭露的装置/智能终端和方法,可以通过其它的方式实现。例如,以上所描述的装置/智能终端实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围,均应包含在本发明的保护范围之内。
Claims (10)
1.一种试题搜索方法,应用于电子终端,其特征在于,所述试题搜索方法包括:
当接收到搜题触发指令时,在所述搜题触发指令的指示下启动所述电子终端的后置摄像头;
检测所述电子终端的当前用户的眼部动作;
若在所述后置摄像头的取景模式下检测到预设的第一眼部动作,则触发所述后置摄像头的拍照动作;
基于所述拍照动作获得的图像进行试题搜索。
2.根据权利要求1所述的试题搜索方法,其特征在于,所述检测所述电子终端的当前用户的眼部动作,包括:
通过所述电子终端的前置摄像头进行人脸检测;
若检测到人脸,则检测所述人脸的眼部动作。
3.根据权利要求1或2所述的试题搜索方法,其特征在于,所述触发所述后置摄像头的拍照动作,之后包括:
等待预设的时长;
若在所述时长内未接收到重拍指令,则执行所述基于所述拍照动作获得的图像进行试题搜索的步骤;
若在所述时长内接收到重拍指令,则触发所述后置摄像头进入取景模式,以便重新进行图像拍摄。
4.根据权利要求3所述的试题搜索方法,其特征在于,所述试题搜索方法还包括:
若在所述时长内检测到预设的第二眼部动作,则确定在所述时长内接收到所述重拍指令;
其中,所述第二眼部动作不同于所述第一眼部动作。
5.根据权利要求4所述的试题搜索方法,其特征在于,所述第一眼部动作为:单眼闭合的时间不小于预设的第一时间阈值;所述第二眼部动作为:双眼闭合的时间不小于预设的第二时间阈值。
6.一种试题搜索装置,应用于电子终端,其特征在于,所述试题搜索装置包括:
启动单元,用于当接收到搜题触发指令时,在所述搜题触发指令的指示下启动所述电子终端的后置摄像头;
检测单元,用于检测所述电子终端的当前用户的眼部动作;
触发单元,用于当所述检测单元在所述后置摄像头的取景模式下检测到预设的第一眼部动作时,触发所述后置摄像头的拍照动作;
试题搜索单元,用于基于所述拍照动作获得的图像进行试题搜索。
7.根据权利要求6所述的试题搜索装置,其特征在于,所述检测单元具体用于:通过所述电子终端的前置摄像头进行人脸检测;若检测到人脸,则检测所述人脸的眼部动作。
8.根据权利要求6或7所述的试题搜索装置,其特征在于,所述试题搜索装置还包括:
计时单元,用于在所述触发单元触发时启动计时并进入等待;
所述触发单元具体在所述计时单元的计时到达预设的时长且在所述时长内未接收到重拍指令时触发;
所述触发单元还用于:当在所述时长内接收到所述重拍指令时,触发所述后置摄像头进入取景模式,以便重新进行图像拍摄。
9.一种电子终端,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的试题搜索程序,其特征在于,所述处理器执行所述试题搜索程序时实现如权利要求1至5任一项所述的试题搜索方法。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有试题搜索程序,其特征在于,所述试题搜索程序被至少一个处理器执行时,实现如权利要求1-5中任一项所述的试题搜索方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710358116.6A CN107168536A (zh) | 2017-05-19 | 2017-05-19 | 试题搜索方法、试题搜索装置及电子终端 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710358116.6A CN107168536A (zh) | 2017-05-19 | 2017-05-19 | 试题搜索方法、试题搜索装置及电子终端 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN107168536A true CN107168536A (zh) | 2017-09-15 |
Family
ID=59815665
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710358116.6A Pending CN107168536A (zh) | 2017-05-19 | 2017-05-19 | 试题搜索方法、试题搜索装置及电子终端 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107168536A (zh) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107807772A (zh) * | 2017-10-17 | 2018-03-16 | 广东欧珀移动通信有限公司 | 图像数据处理方法、装置及移动终端 |
CN107944400A (zh) * | 2017-11-28 | 2018-04-20 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置及智能终端 |
CN107992816A (zh) * | 2017-11-28 | 2018-05-04 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置及电子设备 |
CN108153811A (zh) * | 2017-11-24 | 2018-06-12 | 广东小天才科技有限公司 | 一种搜索内容的输入方法、装置、移动终端及存储介质 |
CN111753168A (zh) * | 2020-06-23 | 2020-10-09 | 广东小天才科技有限公司 | 一种搜题的方法、装置、电子设备及存储介质 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101241360A (zh) * | 2008-02-27 | 2008-08-13 | 浙江工业大学 | 通用监控***的采集端控制*** |
CN101241366A (zh) * | 2008-03-07 | 2008-08-13 | 杭州普诺科技有限公司 | 通用监控***的前端机控制*** |
CN103530110A (zh) * | 2013-07-29 | 2014-01-22 | 广东明创软件科技有限公司 | 以图片作为定时提醒内容的定时提醒方法 |
CN105072332A (zh) * | 2015-07-20 | 2015-11-18 | 魅族科技(中国)有限公司 | 一种拍照方法及终端 |
CN106101529A (zh) * | 2016-06-07 | 2016-11-09 | 广东欧珀移动通信有限公司 | 一种拍照控制方法及移动终端 |
CN106227331A (zh) * | 2016-07-08 | 2016-12-14 | 广东小天才科技有限公司 | 应用于电子终端的试题搜索方法和装置 |
CN106354777A (zh) * | 2016-08-22 | 2017-01-25 | 广东小天才科技有限公司 | 一种应用于电子终端的搜题方法及装置 |
CN106572304A (zh) * | 2016-11-02 | 2017-04-19 | 西安电子科技大学 | 基于眨眼检测的智能手机拍照***和方法 |
-
2017
- 2017-05-19 CN CN201710358116.6A patent/CN107168536A/zh active Pending
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101241360A (zh) * | 2008-02-27 | 2008-08-13 | 浙江工业大学 | 通用监控***的采集端控制*** |
CN101241366A (zh) * | 2008-03-07 | 2008-08-13 | 杭州普诺科技有限公司 | 通用监控***的前端机控制*** |
CN103530110A (zh) * | 2013-07-29 | 2014-01-22 | 广东明创软件科技有限公司 | 以图片作为定时提醒内容的定时提醒方法 |
CN105072332A (zh) * | 2015-07-20 | 2015-11-18 | 魅族科技(中国)有限公司 | 一种拍照方法及终端 |
CN106101529A (zh) * | 2016-06-07 | 2016-11-09 | 广东欧珀移动通信有限公司 | 一种拍照控制方法及移动终端 |
CN106227331A (zh) * | 2016-07-08 | 2016-12-14 | 广东小天才科技有限公司 | 应用于电子终端的试题搜索方法和装置 |
CN106354777A (zh) * | 2016-08-22 | 2017-01-25 | 广东小天才科技有限公司 | 一种应用于电子终端的搜题方法及装置 |
CN106572304A (zh) * | 2016-11-02 | 2017-04-19 | 西安电子科技大学 | 基于眨眼检测的智能手机拍照***和方法 |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN107807772A (zh) * | 2017-10-17 | 2018-03-16 | 广东欧珀移动通信有限公司 | 图像数据处理方法、装置及移动终端 |
CN108153811A (zh) * | 2017-11-24 | 2018-06-12 | 广东小天才科技有限公司 | 一种搜索内容的输入方法、装置、移动终端及存储介质 |
CN108153811B (zh) * | 2017-11-24 | 2020-05-26 | 广东小天才科技有限公司 | 一种搜索内容的输入方法、装置、移动终端及存储介质 |
CN107944400A (zh) * | 2017-11-28 | 2018-04-20 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置及智能终端 |
CN107992816A (zh) * | 2017-11-28 | 2018-05-04 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置及电子设备 |
CN107944400B (zh) * | 2017-11-28 | 2020-07-31 | 广东小天才科技有限公司 | 一种拍照搜索方法、装置、智能终端及计算机可读存储介质 |
CN111753168A (zh) * | 2020-06-23 | 2020-10-09 | 广东小天才科技有限公司 | 一种搜题的方法、装置、电子设备及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7181437B2 (ja) | 制御されていない照明条件の画像中の肌色を識別する技術 | |
CN107168536A (zh) | 试题搜索方法、试题搜索装置及电子终端 | |
WO2021227726A1 (zh) | 面部检测、图像检测神经网络训练方法、装置和设备 | |
CN108229369A (zh) | 图像拍摄方法、装置、存储介质及电子设备 | |
CN110503076B (zh) | 基于人工智能的视频分类方法、装置、设备和介质 | |
WO2021175071A1 (zh) | 图像处理方法、装置、存储介质及电子设备 | |
TWI781554B (zh) | 物品名稱確定方法、裝置、電腦設備及儲存媒體 | |
CN111382648A (zh) | 人脸动态表情的检测方法、装置、设备及存储介质 | |
CN106354777B (zh) | 一种应用于电子终端的搜题方法及装置 | |
WO2021169754A1 (zh) | 构图提示方法、装置、存储介质及电子设备 | |
CN108108711B (zh) | 人脸布控方法、电子设备及存储介质 | |
CN110442742A (zh) | 检索图像的方法及装置、处理器、电子设备及存储介质 | |
CN111126347B (zh) | 人眼状态识别方法、装置、终端及可读存储介质 | |
CN106919326A (zh) | 一种图片搜索方法及装置 | |
JP7491867B2 (ja) | ビデオクリップ抽出方法、ビデオクリップ抽出装置及び記憶媒体 | |
CN106303234A (zh) | 拍照处理方法及装置 | |
CN110502959A (zh) | 性别判断方法、装置、存储介质及电子设备 | |
CN106303235A (zh) | 拍照处理方法及装置 | |
CN105512119A (zh) | 一种实现图片排序的方法及终端 | |
CN112528978A (zh) | 人脸关键点的检测方法、装置、电子设备及存储介质 | |
CN113052025A (zh) | 图像融合模型的训练方法、图像融合方法及电子设备 | |
CN112101479B (zh) | 一种发型识别方法及装置 | |
CN109034059A (zh) | 静默式人脸活体检测方法、装置、存储介质及处理器 | |
Cao et al. | Automatic image cropping via the novel saliency detection algorithm | |
Li et al. | An Identifying Campus Garbage Application Based on Optimized Convolutional Neural Networks |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170915 |
|
RJ01 | Rejection of invention patent application after publication |