CN110443224A - 翻页检测方法、装置、电子设备及存储介质 - Google Patents
翻页检测方法、装置、电子设备及存储介质 Download PDFInfo
- Publication number
- CN110443224A CN110443224A CN201910749800.6A CN201910749800A CN110443224A CN 110443224 A CN110443224 A CN 110443224A CN 201910749800 A CN201910749800 A CN 201910749800A CN 110443224 A CN110443224 A CN 110443224A
- Authority
- CN
- China
- Prior art keywords
- page turning
- image
- camera
- detected
- books
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 title claims abstract description 86
- 238000004590 computer program Methods 0.000 claims description 21
- 238000012545 processing Methods 0.000 claims description 12
- 238000000605 extraction Methods 0.000 claims description 8
- 230000001960 triggered effect Effects 0.000 claims description 3
- 238000013507 mapping Methods 0.000 claims 2
- 238000000034 method Methods 0.000 abstract description 27
- 230000006870 function Effects 0.000 description 14
- 238000010586 diagram Methods 0.000 description 12
- 238000004422 calculation algorithm Methods 0.000 description 5
- 238000012544 monitoring process Methods 0.000 description 4
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010422 painting Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000008878 coupling Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000005259 measurement Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 238000012360 testing method Methods 0.000 description 2
- 238000004458 analytical method Methods 0.000 description 1
- 238000010009 beating Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000010485 coping Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000005611 electricity Effects 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000006698 induction Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000004088 simulation Methods 0.000 description 1
- 238000013519 translation Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/26—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion
- G06V10/273—Segmentation of patterns in the image field; Cutting or merging of image elements to establish the pattern region, e.g. clustering-based techniques; Detection of occlusion removing elements interfering with the pattern to be recognised
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/10—Terrestrial scenes
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- Theoretical Computer Science (AREA)
- Image Analysis (AREA)
Abstract
本申请提供了一种翻页检测方法、装置、电子设备及存储介质,其方法包括:获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值。本申请所述方法利用终端自带的摄像头获取图书页面图像来进行翻页检测,无需添加额外的设备支撑,可以节约成本,适用性强;且利用OpenCV对所述获取的图像帧进行对比来确定图书是否处于翻页状态,可以提升翻页检测的准确性。
Description
技术领域
本申请属于智能识别技术领域,尤其涉及一种翻页检测方法、装置、电子设备及存储介质。
背景技术
随着手机、平板等智能设备的普及,越来越多人使用智能设备来进行学习和获取资讯。例如电子教学领域中,通常会使用终端将各类纸质图书教材的图书页面进行拍摄、扫描等操作识读图书页面中的内容,从而根据识读的内容来进一步地进行学习操作。
目前的智能设备在识读图书页面中的内容之前需要先对图书进行翻页检测,判断图书的页面页码是否稳定。现有技术中,常规智能设备的翻页检测方案都需要利用红外距离感应等额外设备支撑,硬件要求较多,且成本高,适用性低。
发明内容
有鉴于此,本申请实施例提供了一种翻页检测方法、装置、电子设备及存储介质,以解决现有技术中常规智能设备进行翻页检测时需要利用红外距离感应等额外设备支撑,硬件要求较多,且成本高,适用性低的问题。
本申请实施例的第一方面提供了一种翻页检测方法,所述翻页检测方法包括:
获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;
对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;
根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值。
结合第一方面,在第一方面的第一种可能实现方式中,所述获取摄像头拍摄的待检测图像的步骤,还包括:
获取所述摄像头实时拍摄的图像数据;
从所述摄像头实时拍摄的图像数据中按照预设的间隔时长提取至少两个图像帧;
对所述提取的间隔相邻的两个图像帧进行关联形成一组待检测图像。
结合第一方面的第一种可能实现方式,在第一方面的第二种可能实现方式中,所述从所述摄像头实时拍摄的图像数据中按照预设的间隔时长提取至少两个图像帧的步骤,包括:
从所述摄像头实时拍摄的图像数据中按照预设的图片帧数量间隔提取至少两个图像帧;或者
从所述摄像头实时拍摄的图像数据中按照预设的的时间间隔提取至少两个图像帧。
结合第一方面,在第一方面的第三种可能实现方式中,所述按照预设的时间间隔获取页面的图像帧的步骤之前,还包括:
监听所述摄像头的使用状态;
当所述摄像头的使用状态为打开时,触发翻页检测指令,以执行翻页检测操作。
结合第一方面,在第一方面的第四种可能实现方式中,所述获取摄像头拍摄的待检测图像的步骤之后,还包括:
对所述摄像头拍摄的图像帧进行图书识别,以获取所述图像帧中目标图书的轮廓信息;
根据所述目标图书的轮廓信息对所述图像帧进行裁剪并保存经裁剪得到的第一图像帧;
对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度。
结合第一方面的第四种可能实现方式,在第一方面的第五种可能实现方式中,所述对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度的步骤,包括:
利用OpenCV对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度。
结合第一方面,在第一方面的第六种可能实现方式中,所述根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值的步骤,还包括:
当所述差异度大于预设的阈值时,判断图书当前处于翻页状态;
从所述摄像头拍摄的图像数据中继续提取待检测的图像帧,以重新执行翻页检测操作至检测出图书处于非翻页状态为止。
本申请实施例的第二方面提供了一种翻页检测装置,所述翻页检测装置包括:
获取模块,用于获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;
处理模块,用于对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;
执行模块,用于根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设的阈值为识别图书是否处于翻页状态的基准值。
本申请实施例的第三方面提供了一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如第一方面任一项所述翻页检测方法的步骤。
本申请实施例的第四方面提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,所述计算机程序被处理器执行时实现如第一方面任一项所述翻页检测方法的步骤。
本申请实施例与现有技术相比存在的有益效果是:
当用户采用智能设备识读图书页面中的内容之前,通过启动智能设备的摄像头获取该摄像头拍摄图书页面的图像数据,并且从所述图像数据中提取至少两个图像帧组成待检测图像。然后利用OpenCV对所述组成待检测图像的至少两个图像帧进行相互对比,计算出所述至少两个图像帧相互之间的差异度,进而根据差异度识别图书当前是否处于翻页状态,使得用户在采用智能设备识读图书页面中的内容时可利用终端自带的摄像头获取图书页面图像来进行翻页检测,无需添加额外的设备支撑,可以节约成本,适用性强;且利用OpenCV对所述获取的图像帧进行对比来确定图书是否处于翻页状态,可以提升翻页检测的准确性。
进一步地,本申请实施例在进行翻页检测之前对拍摄的图像帧进行图书识别和裁剪处理,移除了图书区域外的数据影响判断的概率,可以提高翻页识别的稳定性,抗干扰能力强;裁剪后图片压缩了数据大小,使利用OpenCV对比数据时,大大提升了翻页识别的速度。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种翻页检测方法的基本方法流程示意图;
图2为本申请实施例提供的翻页检测方法中获取待检测图像的一种方法流程示意图;
图3为本申请实施例提供的翻页检测方法中确定是否执行翻页检测操作的一种方法流程示意图;
图4为本申请实施例提供的翻页检测方法中对待检测的图像进行剪裁处理的一种方法流程示意图;
图5为本申请实施例提供的翻页检测方法中执行翻页检测时的一种方法流程示意图;
图6为本申请实施例提供的一种翻页检测装置的结构示意图;
图7为本申请实施例提供的一种实现翻页检测方法的电子设备的示意图。
具体实施方式
以下描述中,为了说明而不是为了限定,提出了诸如特定***结构、技术之类的具体细节,以便透彻理解本申请实施例。然而,本领域的技术人员应当清楚,在没有这些具体细节的其它实施例中也可以实现本申请。在其它情况中,省略对众所周知的***、装置、电路以及方法的详细说明,以免不必要的细节妨碍本申请的描述。
首先,本申请的目的在于在用户采用智能设备识读图书页面中的内容之前,通过所述智能设备的摄像头拍摄的图像来进行图书的翻页检测操作,进而在图书页面处于非翻页状态,即图书页面相对稳定的情况下,对图书页面中的内容进行下一步的逻辑操作,包括阅读、翻译、解答、搜索等学习操作。举例说明,例如孩子采用智能设备进行搜索难题错题解答思路的操作时,通过打开所述智能设备的摄像头对题册进行拍摄,获取当前题册页面的图像数据,所述智能设备首先对所述题册的图像数据进行翻页检测,当检测结果为所述题册页面处于非翻页状态时,进行下一步操作,如读取所述题册页面的内容,然后根据所述读取的内容搜索并反馈对应的答题思路。
为了说明本申请所述的技术方案,下面通过具体实施例来进行说明。
在本申请的一些实施例中,请参阅图1,图1为本申请实施例提供的一种翻页检测方法的基本方法流程示意图,详述如下:
在步骤S101中,获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧。
本实施例中,所述摄像头为智能设备内置的摄像头,所述智能设备可以是手机、电脑、学习机、点读机等具有摄像功能的智能设备。具体的,本申请中用户通过启动所述智能设备的摄像头对准图书页面进行拍摄操作,进而获得当前图书页面的图像数据,然后再从所述图像数据中提取至少两个图像帧组成待检测图像。
在本申请的一些实施例中,请一并参阅图2,图2为本申请实施例提供的翻页检测方法中获取待检测图像的一种方法流程示意图。详细如下:
在步骤S201中,监听所述摄像头实时拍摄的图像数据。
在步骤S202中,从所述摄像头实时拍摄的图像数据中按照预设的间隔时长提取至少两个图像帧。
在步骤S203中,对所述提取的间隔时长相邻的两个图像帧进行关联形成一组待检测图像。
本实施例中,用户采用智能设备的摄像头拍摄的图像来进行图书的翻页检测操作时,具体通过监听所述摄像头实时拍摄的图像数据,当所述智能设备启动翻页检测功能时,从所述摄像头实时拍摄的图像数据中提取第一个图像帧,然后,按照在所述智能设备中针对翻页检测功能预先设置的间隔时长提取第2个、第3个、第4个、...、第n个图像帧。当所述智能设备只提取了两个图像帧时,可以直接对所述提取的两个图像帧进行关联形成一组待检测图像,以提供给后续步骤进行对比,实现翻页检测操作。当所述智能设备提取了多于两个图像帧时,可以通过将第1个图像帧和第2个图像帧进行关联形成一组待检测图像,将第2个图像帧和第3个图帧进行关联形成一组待检测图像,将第3个图像帧和第4个图像帧进行关联形成一组待检测图像...,实现对所述提取的间隔时长相邻的两个图像帧进行关联,并形成多组待检测图像,以提供给后续步骤进行多次的对比,进而实现翻页检测操作。当然,当所述智能设备提取了多于两个图像帧时,也可以通过将第1个图像帧和第2个图像帧进行关联形成一组待检测图像,将第3个图像帧和第4个图帧进行关联形成一组待检测图像,将第5个图像帧和第6个图像帧进行关联形成一组待检测图像...,以此类推,实现对所述提取的间隔时长相邻的两个图像帧进行关联,并形成多组待检测图像,以提供给后续步骤进行多次的对比,进而实现翻页检测操作。
在一个具体的实施方式中,所述预设的间隔时长可以是预先设定的图像帧间隔数量,进而通过按照预先设定的图像帧间隔数量来提取待检测的图像帧。例如,当获得当前图书页面的图像数据之后,按照时间先后顺序,每间隔5帧图像提取1帧图像作为待检测的图像。可以理解的是,图像帧间隔的数量可依据翻页检测准确性的实际情况进行调整。
在另一个具体的实施方式中,所述预设的间隔时长还可以是预先设定的时间间隔,进而通过按照预先设定的时间间隔来提取待检测的图像帧。例如,当获得当前图书页面的图像数据之后,按照时间先后顺序,每间隔1秒的时间提取1帧图像作为待检测的图像。可以理解的是,时间间隔的长短可依据翻页检测准确性的实际情况进行调整。
在步骤S102中,对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度。
本实施例中,从所述摄像头拍摄的图像数据源中提取得到待检测的图像帧之后,进一步地将所述待检测图像中的至少两个图像帧进行对比,以计算得出所述两个图像帧之间的差异度,以实现根据两个图像帧之间的差异度来检测图书的翻页状态。具体的实施方式中,可以通过标记所述两个图像帧中的至少一个特征点及其特征点对应的位置信息,然后根据两个图像帧之间特征点的差异来进行度量。具体的,通过对所述两个图像帧中相互对应的特征点进行一一比对,确定每一个特征点是否相同,包括特征点的位置是否相同,计算出两个图像帧之间相同特征点的个数来确定该两个图像帧之间的差异度。
本实施例中,当所述待检测图像包括多个从所述摄像头拍摄的图像数据源中提取的图像帧时,本申请实施例通过按照时间顺序,对时间相邻的两个图像帧两两进行对比,计算出图像帧两两之间的差异度,从而得出多个差异度值,进而依据多次对比得出的多个差异度值综合来判断图书是否处于翻页状态。
在步骤S103中,根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值。
本实施例中,所述预设阈值为识别图书是否处于翻页状态的基准值,其中,所述基准值可以是通过模拟测试得出的一个经验值。通过对所述待检测图像中的至少两个图像帧进行对比之后得出所述两个图像帧之间的差异度,然后将该差异度与预设的用于识别图书是否处于翻页状态的阈值进行比较,从而根据差异度与预设阈值的比较结果,检测图书的翻页状态。如果比较的结果为所述待检测图像中两个图像帧之间的差异度小于预设的阈值时,说明图书当前处于非翻页状态,即表明图书当前的页面状态相对稳定。在此情况下,所述智能设备可以根据所述摄像头拍摄的图书页面的内容进行进一步的逻辑操作,例如阅读、翻译、解题等学习操作。当所述待检测图像包括多个从所述摄像头拍摄的图像数据源中提取的图像帧时,针对计算出的多个差异度值,可以通过判断所述多个差异度至是否都小于预设的阈值,当判断结果为都小于时,可以确定所述图书当前处于非翻页状态,否则处于翻页状态。而相反地,当所述差异度大于预设的阈值时,则判断图书当前处于翻页状态。
在本申请的一些实施例中,请参阅图3,图3为本申请实施例提供的翻页检测方法中确定是否执行翻页检测操作的一种方法流程示意图。详细如下:
在步骤S301中,监听所述摄像头的使用状态。
在步骤S302中,当所述摄像头的使用状态为打开时,触发翻页检测指令,以执行翻页检测操作。
本实施例中,用户采用智能设备识读图书页面中的内容时,可以通过监听智能设备摄像头的使用状态来确定是否启动智能设备执行翻页检测操作。当监听到所述摄像头处于打开状态时,说明所述摄像头正在拍摄图像数据,此时,自动触发翻页检测指令,由所述智能设备根据所述翻页检测指令执行翻页检测操作。一些具体的实施例中,所述智能设备为多功能智能设备,例如手机,此时,摄像头除了可以用于识读图书外,还可以有其他用途。因此,本申请在监听所述智能设备摄像头的使用状态时,还可以通过监听所述摄像头的打开路径,判断所述摄像头当前的打开状态是否用于识读图书页面。
在本申请的一些实施例中,请参阅图4,图4为本申请实施例提供的翻页检测方法中对待检测的图像进行剪裁处理的一种方法流程示意图。详细如下:
在步骤S401中,对从所述摄像头拍摄的图像数据中提取的图像帧进行图书识别,以获取所述图像帧中目标图书的轮廓信息。
在步骤S402中,根据所述目标图书的轮廓信息对所述图像帧进行裁剪并保存经裁剪得到的第一图像帧。
在步骤S403中,对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度。
本实施例中,由于所述摄像头在拍摄图像数据过程中可能会存在图书页面与摄像头拍摄范围的大小不一致,导致拍摄的图像数据中出现除图书页面以外的其他物体或数据,容易影响翻页检测的准确性。因此,本实施例在从所述摄像头拍摄的图像数据中提取得到的待检测的图像帧之后,对所述图像帧进行图书识别,获取该图像帧中目标图书的轮廓信息,然后根据该轮廓信息对所述图像帧进行裁剪操作,并且保存经过裁剪后得到的仅保留有目标图书的第一图像帧,进而通过对所述第一图像帧进行对比来实现翻页检测操作。这样一来,在进行图像比对之前,先对所述待检测的图像进行剪裁等预处理操作,消除了除图书页面以外区域的数据干扰提高了翻页识别的稳定性和准确性。而且,通过剪裁后的图像的数据大小明显小于原始拍摄的图像的数据大小,这样,在进行图像比对是,由于数据量减少,还大大地提升了翻页检测的速度。
在一些的实施方式中,具体利用OpenCV对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度。
OpenCV为基于BSD许可的开源的计算机视觉库,具体由一系列C函数和少量C++类构成,同时提供了Python、Ruby、MATLAB等语言的接口,是可以实现图像处理和计算机视觉方面的通用算法,包括图像处理、图像结构分析、运动描述和追踪、模式识别和摄像机标定。
本实施例中,通过利用OpenCV对两个图像帧进行对比来计算两个图像帧之间的差异度时,可以基于简单的向量来对图像帧进行差异度度量。例如,针对于所述两个图像帧,首先分别计算所述两个图像帧的直方图并将直方图进行归一化处理,最后按照预设的距离度量标准进行差异度的度量;还可以采用感知哈希算法(perceptual hash algorithm)来对图像帧进行差异度评价,例如,采用该算法针对每一个图像帧生成对应的指纹字符串,然后通过比较不同图像帧的指纹来确定两个图像帧之间的差异度。
在本申请的一些实施例中,请参阅图5,图5为本申请实施例提供的翻页检测方法中执行翻页检测时的一种方法流程示意图。详细如下:
在步骤S501中,当所述差异度大于预设的阈值时,判断图书当前处于翻页状态。
在步骤S502中,从所述摄像头拍摄的图像数据中继续提取待检测的图像帧,以重新执行翻页检测操作至检测出图书处于非翻页状态为止。
本实施例中,通过利用OpenCV对所述待检测的两个图像帧进行对比之后,当出现两个图像帧之间的差异度大于预设的阈值的情况时,可以判断图书当前处于翻页状态,即表明图书当前的页面状态不稳定。此时,所述智能设备不会对图书页面中的内容进行下一步的逻辑操作,而是从所述摄像头拍摄的图像数据中继续提取待检测的图像帧,并且根据该继续提取的待检测图像重新执行翻页检测操作。可以理解的是,此次提取的待检测的图像帧相对于前面进行检测的图像帧而言,时间相对靠后。从而,根据对此次提取的待检测的图像帧继续对图书进行翻页检测,直至检测出所述图书处于非翻页状态为止。
可以理解的是,上述实施例中各步骤的序号的大小并不意味着执行顺序的先后,各过程的执行顺序应以其功能和内在逻辑确定,而不应对本申请实施例的实施过程构成任何限定。
在本申请的一些实施例中,请参阅图6,图6为本申请实施例提供的一种翻页检测装置的结构示意图,详述如下:
所述翻页检测装置包括:获取模块601、处理模块602以及执行模块603。其中,所述获取模块601用于获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;所述处理模块602用于对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;所述执行模块603用于根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设的阈值为识别图书是否处于翻页状态的基准值。
所述翻页检测装置,与上述的翻页检测方法一一对应。
在本申请的一些实施例中,请参阅图7,图7为本申请实施例提供的一种实现翻页检测方法的电子设备的示意图。如图7所示,该实施例的电子设备7包括:处理器70、存储器71以及存储在所述存储器71中并可在所述处理器70上运行的计算机程序72,例如翻页检测程序。所述处理器70执行所述计算机程序72时实现上述各个翻页检测方法实施例中的步骤。或者,所述处理器70执行所述计算机程序72时实现上述各装置实施例中各模块/单元的功能。
示例性的,所述计算机程序72可以被分割成一个或多个模块/单元,所述一个或者多个模块/单元被存储在所述存储器71中,并由所述处理器70执行,以完成本申请。所述一个或多个模块/单元可以是能够完成特定功能的一系列计算机程序指令段,该指令段用于描述所述计算机程序72在所述电子设备7中的执行过程。例如,所述计算机程序72可以被分割成:
获取模块,用于获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;
处理模块,用于对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;
执行模块,用于根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值。
所述电子设备可包括,但不仅限于,处理器70、存储器71。本领域技术人员可以理解,图7仅仅是电子设备7的示例,并不构成对电子设备7的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件,例如所述电子设备还可以包括输入输出设备、网络接入设备、总线等。
所称处理器70可以是中央处理单元(Central Processing Unit,CPU),还可以是其他通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(Field-Programmable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。
所述存储器71可以是所述电子设备7的内部存储单元,例如电子设备7的硬盘或内存。所述存储器71也可以是所述电子设备7的外部存储设备,例如所述电子设备7上配备的插接式硬盘,智能存储卡(Smart Media Card,SMC),安全数字(Secure Digital,SD)卡,闪存卡(Flash Card)等。进一步地,所述存储器71还可以既包括所述电子设备7的内部存储单元也包括外部存储设备。所述存储器71用于存储所述计算机程序以及所述电子设备所需的其他程序和数据。所述存储器71还可以用于暂时地存储已经输出或者将要输出的数据。
所属领域的技术人员可以清楚地了解到,为了描述的方便和简洁,仅以上述各功能单元、模块的划分进行举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能单元、模块完成,即将所述装置的内部结构划分成不同的功能单元或模块,以完成以上描述的全部或者部分功能。实施例中的各功能单元、模块可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中,上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。另外,各功能单元、模块的具体名称也只是为了便于相互区分,并不用于限制本申请的保护范围。上述***中单元、模块的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述或记载的部分,可以参见其它实施例的相关描述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
在本申请所提供的实施例中,应该理解到,所揭露的装置/终端设备和方法,可以通过其它的方式实现。例如,以上所描述的装置/终端设备实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通讯连接可以是通过一些接口,装置或单元的间接耦合或通讯连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
所述集成的模块/单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请实现上述实施例方法中的全部或部分流程,也可以通过计算机程序来指令相关的硬件来完成,所述的计算机程序可存储于一计算机可读存储介质中,该计算机程序在被处理器执行时,可实现上述各个方法实施例的步骤。。其中,所述计算机程序包括计算机程序代码,所述计算机程序代码可以为源代码形式、对象代码形式、可执行文件或某些中间形式等。所述计算机可读介质可以包括:能够携带所述计算机程序代码的任何实体或装置、记录介质、U盘、移动硬盘、磁碟、光盘、计算机存储器、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、电载波信号、电信信号以及软件分发介质等。需要说明的是,所述计算机可读介质包含的内容可以根据司法管辖区内立法和专利实践的要求进行适当的增减,例如在某些司法管辖区,根据立法和专利实践,计算机可读介质不包括是电载波信号和电信信号。
以上所述实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的精神和范围,均应包含在本申请的保护范围之内。
Claims (10)
1.一种翻页检测方法,其特征在于,所述翻页检测方法包括:
获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;
对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;
根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值。
2.根据权利要求1所述的翻页检测方法,其特征在于,所述获取摄像头拍摄的待检测图像的步骤,还包括:
获取所述摄像头实时拍摄的图像数据;
从所述摄像头实时拍摄的图像数据中按照预设的间隔时长提取至少两个图像帧;
对所述提取的间隔时长相邻的两个图像帧进行关联形成一组待检测图像。
3.根据权利要求2所述的翻页检测方法,其特征在于,所述从所述摄像头实时拍摄的图像数据中按照预设的间隔时长提取至少两个图像帧的步骤,包括:
从所述摄像头实时拍摄的图像数据中按照预设的图片帧数量间隔提取至少两个图像帧;或者
从所述摄像头实时拍摄的图像数据中按照预设的的时间间隔提取至少两个图像帧。
4.根据权利要求1所述的翻页检测方法,其特征在于,所述按照预设的时间间隔获取页面的图像帧的步骤之前,还包括:
监听所述摄像头的使用状态;
当所述摄像头的使用状态为打开时,触发翻页检测指令,以执行翻页检测操作。
5.根据权利要求1所述的翻页检测方法,其特征在于,所述获取摄像头拍摄的待检测图像的步骤之后,还包括:
对所述摄像头拍摄的图像帧进行图书识别,以获取所述图像帧中目标图书的轮廓信息;
根据所述目标图书的轮廓信息对所述图像帧进行裁剪并保存经裁剪得到的第一图像帧;
对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度。
6.根据权利要求5所述的翻页检测方法,其特征在于,所述对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度的步骤,包括:
利用OpenCV对所述第一图像帧进行对比,计算所述两个第一图像帧之间的差异度。
7.根据权利要求1所述的翻页检测方法,其特征在于,所述根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值的步骤,还包括:
当所述差异度大于预设的阈值时,判断图书当前处于翻页状态;
从所述摄像头拍摄的图像数据中继续提取待检测的图像帧,以重新执行翻页检测操作至检测出图书处于非翻页状态为止。
8.一种翻页检测装置,其特征在于,所述翻页检测装置包括:
获取模块,用于获取摄像头拍摄的待检测图像,其中,所述待检测图像包括从所述摄像头拍摄的图像数据中提取的至少两个图像帧;
处理模块,用于对所述待检测图像中的至少两个图像帧进行对比,计算所述两个图像帧之间的差异度;
执行模块,用于根据差异度与预设阈值的比较结果,检测图书的翻页状态,其中,所述预设阈值为识别图书是否处于翻页状态的基准值。
9.一种电子设备,包括存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,其特征在于,所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述翻页检测方法的步骤。
10.一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其特征在于,所述计算机程序被处理器执行时实现如权利要求1至7任一项所述翻页检测方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910749800.6A CN110443224A (zh) | 2019-08-14 | 2019-08-14 | 翻页检测方法、装置、电子设备及存储介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910749800.6A CN110443224A (zh) | 2019-08-14 | 2019-08-14 | 翻页检测方法、装置、电子设备及存储介质 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110443224A true CN110443224A (zh) | 2019-11-12 |
Family
ID=68435465
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910749800.6A Pending CN110443224A (zh) | 2019-08-14 | 2019-08-14 | 翻页检测方法、装置、电子设备及存储介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110443224A (zh) |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111639713A (zh) * | 2020-06-01 | 2020-09-08 | 广东小天才科技有限公司 | 一种翻页检测的方法、装置、电子设备和存储介质 |
CN111723653A (zh) * | 2020-05-12 | 2020-09-29 | 北京光年无限科技有限公司 | 基于人工智能的绘本阅读方法及装置 |
CN111860122A (zh) * | 2020-06-04 | 2020-10-30 | 上海翎腾智能科技有限公司 | 一种现实场景下的阅读综合行为的识别方法及*** |
CN111967327A (zh) * | 2020-07-16 | 2020-11-20 | 深圳市沃特沃德股份有限公司 | 阅读状态识别方法、装置、计算机设备和可读存储介质 |
CN112084978A (zh) * | 2020-09-14 | 2020-12-15 | 深圳市沃特沃德股份有限公司 | 阅读监测的方法、阅读机器人以及计算设备 |
CN112165554A (zh) * | 2020-08-10 | 2021-01-01 | 北京网梯科技发展有限公司 | 点读中自动启动省电模式的方法及装置 |
CN113676670A (zh) * | 2021-08-26 | 2021-11-19 | 荣耀终端有限公司 | 拍照方法、电子设备、芯片***及存储介质 |
Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012242901A (ja) * | 2011-05-16 | 2012-12-10 | Panasonic Corp | 操作入力装置、プログラム |
CN104978131A (zh) * | 2015-06-18 | 2015-10-14 | Tcl移动通信科技(宁波)有限公司 | 一种基于相机图像的电子书翻页检测方法及*** |
CN109117748A (zh) * | 2018-07-23 | 2019-01-01 | 安徽淘云科技有限公司 | 翻页检测方法及装置 |
CN109145751A (zh) * | 2018-07-23 | 2019-01-04 | 安徽淘云科技有限公司 | 翻页检测方法及装置 |
-
2019
- 2019-08-14 CN CN201910749800.6A patent/CN110443224A/zh active Pending
Patent Citations (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012242901A (ja) * | 2011-05-16 | 2012-12-10 | Panasonic Corp | 操作入力装置、プログラム |
CN104978131A (zh) * | 2015-06-18 | 2015-10-14 | Tcl移动通信科技(宁波)有限公司 | 一种基于相机图像的电子书翻页检测方法及*** |
CN109117748A (zh) * | 2018-07-23 | 2019-01-01 | 安徽淘云科技有限公司 | 翻页检测方法及装置 |
CN109145751A (zh) * | 2018-07-23 | 2019-01-04 | 安徽淘云科技有限公司 | 翻页检测方法及装置 |
Cited By (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111723653A (zh) * | 2020-05-12 | 2020-09-29 | 北京光年无限科技有限公司 | 基于人工智能的绘本阅读方法及装置 |
CN111723653B (zh) * | 2020-05-12 | 2023-09-26 | 北京光年无限科技有限公司 | 基于人工智能的绘本阅读方法及装置 |
CN111639713B (zh) * | 2020-06-01 | 2023-09-08 | 广东小天才科技有限公司 | 一种翻页检测的方法、装置、电子设备和存储介质 |
CN111639713A (zh) * | 2020-06-01 | 2020-09-08 | 广东小天才科技有限公司 | 一种翻页检测的方法、装置、电子设备和存储介质 |
CN111860122A (zh) * | 2020-06-04 | 2020-10-30 | 上海翎腾智能科技有限公司 | 一种现实场景下的阅读综合行为的识别方法及*** |
CN111860122B (zh) * | 2020-06-04 | 2023-10-13 | 上海翎腾智能科技有限公司 | 一种现实场景下的阅读综合行为的识别方法及*** |
CN111967327A (zh) * | 2020-07-16 | 2020-11-20 | 深圳市沃特沃德股份有限公司 | 阅读状态识别方法、装置、计算机设备和可读存储介质 |
CN111967327B (zh) * | 2020-07-16 | 2024-06-14 | 深圳市沃特沃德信息有限公司 | 阅读状态识别方法、装置、计算机设备和可读存储介质 |
CN112165554B (zh) * | 2020-08-10 | 2022-05-31 | 北京网梯科技发展有限公司 | 点读中自动启动省电模式的方法及装置 |
CN112165554A (zh) * | 2020-08-10 | 2021-01-01 | 北京网梯科技发展有限公司 | 点读中自动启动省电模式的方法及装置 |
CN112084978A (zh) * | 2020-09-14 | 2020-12-15 | 深圳市沃特沃德股份有限公司 | 阅读监测的方法、阅读机器人以及计算设备 |
CN113676670B (zh) * | 2021-08-26 | 2022-09-27 | 荣耀终端有限公司 | 拍照方法、电子设备、芯片***及存储介质 |
CN113676670A (zh) * | 2021-08-26 | 2021-11-19 | 荣耀终端有限公司 | 拍照方法、电子设备、芯片***及存储介质 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110443224A (zh) | 翻页检测方法、装置、电子设备及存储介质 | |
CN107633204B (zh) | 人脸遮挡检测方法、装置及存储介质 | |
CN108269333A (zh) | 人脸识别方法、应用服务器及计算机可读存储介质 | |
CN105590097B (zh) | 暗视觉条件下双摄像头协同实时人脸识别安防***及方法 | |
CN106295502B (zh) | 一种人脸检测方法及装置 | |
CN110363076A (zh) | 人员信息关联方法、装置及终端设备 | |
CN109165589A (zh) | 基于深度学习的车辆重识别方法和装置 | |
CN109426785B (zh) | 一种人体目标身份识别方法及装置 | |
CN110047095A (zh) | 基于目标检测的跟踪方法、装置及终端设备 | |
CN112052815B (zh) | 一种行为检测方法、装置及电子设备 | |
CN106529255B (zh) | 基于笔迹指纹的用户身份识别方法和装置 | |
CN111652087A (zh) | 验车方法、装置、电子设备和存储介质 | |
CN108197585A (zh) | 脸部识别方法和装置 | |
CN110348434A (zh) | 相机来源鉴别方法、***、存储介质和计算设备 | |
CN110084187B (zh) | 基于计算机视觉的位置识别方法、装置、设备及存储介质 | |
CN110175500B (zh) | 指静脉比对方法、装置、计算机设备及存储介质 | |
CN107479715A (zh) | 利用手势控制实现虚拟现实交互的方法和装置 | |
CN108875500A (zh) | 行人再识别方法、装置、***及存储介质 | |
CN110688878B (zh) | 活体识别检测方法、装置、介质及电子设备 | |
CN105302715B (zh) | 应用程序用户界面的获取方法和装置 | |
CN112699811A (zh) | 活体检测方法、装置、设备、储存介质及程序产品 | |
CN108831158A (zh) | 违停监测方法、装置及电子终端 | |
CN110502961A (zh) | 一种面部图像检测方法及装置 | |
CN108399387A (zh) | 用于识别目标群体的数据处理方法及装置 | |
CN111967529A (zh) | 识别方法、装置、设备及*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191112 |
|
RJ01 | Rejection of invention patent application after publication |