CN111090407A - 一种基于图像识别的显示屏开启方法及终端设备 - Google Patents

Abstract

本发明涉及终端设备技术领域，公开一种基于图像识别的显示屏开启方法及终端设备，包括：显示屏包括墨水屏和彩色显示屏，当墨水屏处于运行状态且彩色显示屏处于关闭状态时，检测是否预存储有通过彩色显示屏播放的待播放多媒体内容；如果是，对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态；如果否，开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容。实施本发明实施例，能够在开启彩色显示屏之前先检测用户眼睛的疲劳状态，如果用户眼睛仍然处于疲劳状态，则不开启彩色显示屏，从而实现根据用户眼睛的状态控制彩色显示屏的开启，降低了用户视力受损的几率。

Description

一种基于图像识别的显示屏开启方法及终端设备

技术领域

本发明涉及电子设备技术领域，具体涉及一种基于图像识别的显示屏开启方法及终端设备。

背景技术

随着智能手机、平板电脑等终端设备的快速发展，越来越多的用户选择使用终端设备进行学习、工作或是娱乐。目前，市面上通过使用液晶显示屏作为终端设备的显示屏，然而，在实践中发现，液晶显示屏输出的光线中可能存在高能短波蓝光(Blue Laser)，如果用户在出现视疲劳的情况下使用液晶显示屏，则可能会对用户的视网膜和视觉神经造成不可逆的伤害，从而导致用户的视力受损。

发明内容

本发明实施例公开一种基于图像识别的显示屏开启方法及终端设备，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。

本发明实施例第一方面公开一种基于图像识别的显示屏开启方法，所述显示屏包括墨水屏和彩色显示屏，所述方法包括：

当所述墨水屏处于运行状态且所述彩色显示屏处于关闭状态时，检测是否预存储有通过所述彩色显示屏播放的待播放多媒体内容；

如果预存储有所述待播放多媒体内容，对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，其中，所述目标图像中包含所述终端设备的用户的眼睛图像；

如果用户眼睛未处于疲劳状态，开启所述彩色显示屏，并通过所述彩色显示屏播放所述待播放多媒体内容。

作为一种可选的实施方式，在本发明实施例第一方面中，所述对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，包括：

通过终端设备设置的图像采集设备采集目标图像，所述目标图像中包含所述终端设备的用户的眼睛图像；

从所述目标图像中提取与所述眼睛图像匹配的眼周图像；

同时对所述眼睛图像和所述眼周图像进行分析，获得所述眼睛图像和所述眼周图像中包含的眼睛特征点；

判断所述眼睛特征点中是否存在与预先存储的疲劳特征点匹配的任意一个目标眼睛特征点；

如果否，确定用户眼睛未处于疲劳状态。

作为一种可选的实施方式，在本发明实施例第一方面中，所述通过终端设备设置的图像采集设备采集目标图像，包括：

通过终端设备设置的红外感应装置确定用户所在的目标区域；

通过所述终端设备设置的图像采集设备在所述目标区域内确定用户眼睛的方位；

以所述方位为依据，控制所述图像采集设备采集目标图像，以使所述目标图像中包含用户眼睛的眼睛图像。

作为一种可选的实施方式，在本发明实施例第一方面中，在判断出不存在所述目标眼睛特征点之后，所述方法还包括：

通过所述图像采集设备获取用户眼睛的当前眨眼频率；

判断所述当前眨眼频率是否小于预设频率；

如果是，确定用户眼睛未处于疲劳状态。

作为一种可选的实施方式，在本发明实施例第一方面中，所述开启所述彩色显示屏，并通过所述彩色显示屏播放所述待播放多媒体内容，包括：

开启所述彩色显示屏，并输出询问信息，所述询问信息用于询问所述终端设备的用户是否需要通过所述彩色显示屏播放所述待播放多媒体内容；

当检测到用户输入的用于指示通过所述彩色显示屏播放所述待播放多媒体内容的指令时，控制所述彩色显示屏播放所述待播放多媒体内容。

本发明实施例第二方面公开一种终端设备，所述终端设备包含显示屏，所述显示屏包括墨水屏和彩色显示屏，所述终端设备包括：

检测单元，用于当所述墨水屏处于运行状态且所述彩色显示屏处于关闭状态时，检测是否预存储有通过所述彩色显示屏播放的待播放多媒体内容；

第一判断单元，用于在所述检测单元的检测结果为是时，对所述终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，其中，所述目标图像中包含所述终端设备的用户的眼睛图像；

开启单元，用于在所述第一判断单元的判断结果为否时，开启所述彩色显示屏，并通过所述彩色显示屏播放所述待播放多媒体内容。

作为一种可选的实施方式，在本发明实施例第二方面中，所述第一判断单元包括：

采集子单元，用于在所述检测单元的检测结果为是时，通过所述终端设备设置的图像采集设备采集目标图像，所述目标图像中包含所述终端设备的用户的眼睛图像；

提取子单元，用于从所述目标图像中提取与所述眼睛图像匹配的眼周图像；

分析子单元，用于同时对所述眼睛图像和所述眼周图像进行分析，获得所述眼睛图像和所述眼周图像中包含的眼睛特征点；

判断子单元，用于判断所述眼睛特征点中是否存在与预先存储的疲劳特征点匹配的任意一个目标眼睛特征点；

确定子单元，用于在所述判断子单元的判断结果为否时，确定用户眼睛未处于疲劳状态。

作为一种可选的实施方式，在本发明实施例第二方面中，所述采集子单元包括：

第一确定模块，用于在所述检测单元的检测结果为是时，通过所述终端设备设置的红外感应装置确定用户所在的目标区域；

第二确定模块，用于通过所述终端设备设置的图像采集设备在所述目标区域内确定用户眼睛的方位；

采集模块，用于以所述方位为依据，控制所述图像采集设备采集目标图像，以使所述目标图像中包含用户眼睛的眼睛图像。

作为一种可选的实施方式，在本发明实施例第二方面中，所述终端设备还包括：

获取单元，用于在所述判断子单元的判断结果为否之后，通过所述图像采集设备获取用户眼睛的当前眨眼频率；

第二判断单元，用于判断所述当前眨眼频率是否小于预设频率；

确定单元，用于在所述第二判断单元的判断结果为是时，确定用户眼睛未处于疲劳状态。

作为一种可选的实施方式，在本发明实施例第二方面中，所述开启单元包括：

输出子单元，用于在所述第一判断单元的判断结果为否时，开启所述彩色显示屏，并输出询问信息，所述询问信息用于询问所述终端设备的用户是否需要通过所述彩色显示屏播放所述待播放多媒体内容；

控制子单元，用于当检测到用户输入的用于指示通过所述彩色显示屏播放所述待播放多媒体内容的指令时，控制所述彩色显示屏播放所述待播放多媒体内容。

本发明实施例第三方面公开另一种终端设备，包括：

存储有可执行程序代码的存储器；

与所述存储器耦合的处理器；

所述处理器调用所述存储器中存储的所述可执行程序代码，执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第四方面公开一种计算机可读存储介质，所述计算机可读存储介质存储了程序代码，其中，所述程序代码包括用于执行第一方面的任意一种方法的部分或全部步骤的指令。

本发明实施例第五方面公开一种计算机程序产品，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

本发明实施例第六方面公开一种应用发布平台，所述应用发布平台用于发布计算机程序产品，其中，当所述计算机程序产品在计算机上运行时，使得所述计算机执行第一方面的任意一种方法的部分或全部步骤。

与现有技术相比，本发明实施例具有以下有益效果：

本发明实施例中，显示屏包括墨水屏和彩色显示屏，当墨水屏处于运行状态且彩色显示屏处于关闭状态时，检测是否预存储有通过彩色显示屏播放的待播放多媒体内容；如果预存储有待播放多媒体内容，对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，其中，目标图像中包含终端设备的用户的眼睛图像；如果用户眼睛未处于疲劳状态，开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容。可见，实施本发明实施例，能够在开启彩色显示屏之前先检测用户眼睛的疲劳状态，如果用户眼睛仍然处于疲劳状态，则不开启彩色显示屏，从而实现根据用户眼睛的状态控制彩色显示屏的开启，降低了用户视力受损的几率。

附图说明

为了更清楚地说明本发明实施例中的技术方案，下面将对实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据这些附图获得其他的附图。

图1是本发明实施例公开的一种基于图像识别的显示屏开启方法的流程示意图；

图2是本发明实施例公开的另一种基于图像识别的显示屏开启方法的流程示意图；

图3是本发明实施例公开的另一种基于图像识别的显示屏开启方法的流程示意图；

图4是本发明实施例公开的一种终端设备的结构示意图；

图5是本发明实施例公开的另一种终端设备的结构示意图；

图6是本发明实施例公开的另一种终端设备的结构示意图；

图7是本发明实施例公开的另一种终端设备的结构示意图。

具体实施方式

下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。

需要说明的是，本发明实施例及附图中的术语“包括”和“具有”以及它们任何变形，意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元，而是可选地还包括没有列出的步骤或单元，或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。

本发明实施例公开一种基于图像识别的显示屏开启方法及终端设备，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。以下分别进行详细说明。

实施例一

请参阅图1，图1是本发明实施例公开的一种基于图像识别的显示屏开启方法的流程示意图。显示屏包括墨水屏和彩色显示屏，如图1所示，该基于图像识别的显示屏开启方法可以包括以下步骤：

101、当墨水屏处于运行状态且彩色显示屏处于关闭状态时，终端设备检测是否预存储有通过彩色显示屏播放的待播放多媒体内容，如果是，执行步骤102；如果否，结束本流程。

本发明实施例中，终端设备可以为家教机、学习平板等，且终端设备上设置的显示屏可以包含墨水屏和彩色显示屏，且本发明实施例对墨水屏和彩色显示屏的大小以及墨水屏和彩色显示屏的相对位置关系均不做限定，此外，墨水屏可以通过电子纸显技术实现，墨水屏可以模拟书本的效果，从而实现保护用户视力的效果；彩色显示屏可以为液晶显示器(Liquid Crystal Display，LCD)等，由于墨水屏输出的多媒体内容在墨水屏上输出的效果为黑白效果，因此用墨水屏输出多媒体内容的效果较差，可以通过彩色显示屏输出多媒体内容，以使终端设备的用户可以通过彩色显示屏看到更为清晰、效果更好的多媒体内容，提高了终端设备用户的使用体验。

本发明实施例中，墨水屏处于运行状态可以为墨水屏开启但是墨水屏上未运行任何应用，也可以为墨水屏开启且墨水屏上正在运行任意预先安装在墨水屏内的应用。彩色显示屏处于关闭状态可以为彩色显示屏隐藏在墨水屏中，还可以为彩色显示屏的屏幕未开启。

本发明实施例中，待播放多媒体内容可以为需要彩色显示屏播放的多媒体内容，由于终端设备检测到用户的眼睛处于疲劳状态，因此不能通过彩色显示屏输出多媒体内容，以保护用户的眼睛不会继续受到彩色显示屏输出的光线的伤害。

102、终端设备对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，如果是，结束本流程；如果否，执行步骤103；其中，目标图像中包含终端设备的用户的眼睛图像。

本发明实施例中，图像采集设备可以为摄像头等设备，可以通过拍摄等方式采集包含用户眼睛的目标图像，且图像采集设备可以设置在终端设备的墨水屏上，也可以设置在终端设备的彩色显示屏上，对此，本发明实施例不做限定。

本发明实施例中，由于目标图像中包含用户的眼睛图像，因此可以通过对用户的眼睛图像的检测，判断用户眼睛是否出现视疲劳，例如，可以通过识别用户的眼睛图像中红血丝的严重程度判断用户的眼睛是否处于疲劳状态；还可以通过用户的眼睛图像中出现的眼泪的多少判断用户的眼睛是否处于疲劳状态；此外还可以根据用户眼睛周围区域的黑眼圈的严重程度判断用户眼睛是否处于疲劳状态。

103、终端设备开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容。

本发明实施例中，如果用户眼睛未处于疲劳状态，可以认为用户的眼睛可以使用彩色显示屏，进而可以开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容，以使用户可以继续使用彩色显示屏输出需要观看的内容。

作为一种可选的实施方式，终端设备开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容的方式可以包含以下步骤：

终端设备开启彩色显示屏，并获取预存储的待播放多媒体内容；

终端设备从该待播放多媒体内容中获取播放进度信息；

终端设备输出播放进度提示信息，该播放进度提示信息用于提示终端设备的用户是否需要从该播放进度信息对应的播放节点播放待播放多媒体内容；

当检测到用户输入的用于指示从该播放进度信息对应的播放节点播放待播放多媒体内容的指令时，终端设备通过彩色显示屏从该播放进度信息对应的播放节点播放待播放多媒体内容；

当检测到用户输入的用于指示不从该播放进度信息对应的播放节点播放待播放多媒体内容的指令时，终端设备通过彩色显示屏从初始位置播放待播放多媒体内容。

其中，实施这种实施方式，可以根据终端设备的用户的意愿确定终端设备的彩色显示屏播放的内容，从而提高了终端设备的用户与终端设备的交互程度。

在图1所描述的方法中，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。此外，实施图1所描述的方法，提高了终端设备的用户与终端设备的交互程度。

实施例二

请参阅图2，图2是本发明实施例公开的另一种基于图像识别的显示屏开启方法的流程示意图。显示屏包括墨水屏和彩色显示屏，如图2所示，该基于图像识别的显示屏开启方法可以包括以下步骤：

201、当墨水屏处于运行状态且彩色显示屏处于关闭状态时，终端设备检测是否预存储有通过彩色显示屏播放的待播放多媒体内容，如果是，执行步骤202～步骤205；如果否，结束本流程。

202、终端设备通过终端设备设置的图像采集设备采集目标图像，目标图像中包含终端设备的用户的眼睛图像。

作为一种可选的实施方式，终端设备通过终端设备设置的图像采集设备采集目标图像的方式可以包含以下步骤：

终端设备通过终端设备设置的红外感应装置确定用户所在的目标区域；

终端设备通过终端设备设置的图像采集设备在目标区域内确定用户眼睛的方位；

终端设备以方位为依据，控制图像采集设备采集目标图像，以使目标图像中包含用户眼睛的眼睛图像。

其中，实施这种实施方式，可以通过红外感应装置预先确定用户相对于终端设备的方位，以使图像采集设备可以快速的获取到包含用户眼睛的目标图像，从而提升图像采集设备拍摄到的包含用户眼睛的目标图像的几率。

可选的，红外感应装置可以为红外线传感器等装置，可以通过探测人体反射的红外感应信息发射的红外线，来确定用户所在的目标区域，红外感应装置可以通过对人体的红外检测，构建人体模型，并且还可以计算构建的人体模型的面积，并根据该面积确定图像采集设备需要拍摄的区域范围，终端设备还可以根据确定的区域范围调整图像采集设备的参数，以使图像采集设备采集的图像可以包含检测到的人体。图像采集设备可以采集到包含人体的预览图像，进而可以对该预览图像进行识别，确定预览图像中人体的眼睛的区域，并且根据眼睛的区域在预览图像中的位置，计算得到人体的眼睛在图像采集设备的拍摄区域中的方位，进而使图像采集设备根据计算得到的方位拍摄包含人体眼睛的图像，以使拍摄得到的眼睛图像更加清晰。

203、终端设备从目标图像中提取与眼睛图像匹配的眼周图像。

作为一种可选的实施方式，终端设备从目标图像中提取与眼睛图像匹配的眼周图像的方式可以包含以下步骤：

终端设备计算眼睛图像中的眼睛中心点；

终端设备获取预设的眼周半径，并以该眼睛中心点为原点，获取以眼周半径为目标半径的眼周区域；

终端设备从目标图像中提取与眼周区域匹配的初始眼周图像；

终端设备将初始眼周图像中包含的眼睛图像删除，得到最终的眼周图像。

其中，实施这种实施方式，可以根据预设的眼周半径以及识别的眼睛图像确定眼周区域，进而根据眼周区域从目标图像中提取眼周图像，以使获取到的眼周图像更加准确。

204、终端设备同时对眼睛图像和眼周图像进行分析，获得眼睛图像和眼周图像中包含的眼睛特征点。

本发明实施例中，眼睛特征点可以为红血丝、眼泪等特征点。

205、终端设备判断眼睛特征点中是否存在与预先存储的疲劳特征点匹配的任意一个目标眼睛特征点，如果是，结束本流程；如果否，执行步骤206～步骤207。

206、终端设备确定用户眼睛未处于疲劳状态。

本发明实施例中，实施上述的步骤202～步骤206，可以从目标图像中提取眼睛图像和眼周图像，并分析眼睛图像和眼周图像的眼睛特征点，如果分析出用户眼睛和眼周存在红血丝、黑眼圈或流泪等眼睛特征点，可以认为上述眼睛特征点为疲劳特征点，从而确认用户眼睛属于疲劳状态，以使针对用户眼睛的疲劳状态的判断更加准确。

作为一种可选的实施方式，终端设备在判断出不存在目标眼睛特征点之后，以及执行步骤206之前，还可以执行以下步骤：

终端设备通过图像采集设备获取用户眼睛的当前眨眼频率；

终端设备判断当前眨眼频率是否小于预设频率；

如果是，终端设备确定用户眼睛未处于疲劳状态。

其中，实施这种实施方式，由于用户眼睛出现视疲劳的情况时，可能会通过眨眼来缓解视疲劳的状况，因此可以通过图像采集设备计算用户眨眼的频率确定用户眼睛的疲劳状态，从而使得终端设备得到的用户眼睛的疲劳状态的结果更具有可靠性。

作为一种可选的实施方式，终端设备通过图像采集设备获取用户眼睛的当前眨眼频率的方式可以包含以下步骤：

终端设备通过图像采集设备获取用户连续两次闭眼的图像，得到第一闭眼图像和第二闭眼图像；

终端设备获取第一闭眼图像的第一时刻，并获取第二闭眼图像的第二时刻；

终端设备计算第一时刻与第二时刻之间差值的绝对值；

终端设备将该绝对值确定为用户眼睛的当前眨眼时长；

终端设备计算当前眨眼时长与一分钟的比值，将该比值确定为用户眼睛的当前眨眼频率。

其中，实施这种实施方式，可以根据通过图像采集设备采集到用户连续两次闭眼的图像，以及连续两次闭眼的时刻，进而计算得到用户一次眨眼的时长，并且可以根据一次眨眼的时长计算得到用户眼睛的当前眨眼频率，以提高计算用户眼睛的当前眨眼频率的准确性。

207、终端设备开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容。

在图2所描述的方法中，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。此外，实施图2所描述的方法，提升图像采集设备拍摄到的包含用户眼睛的目标图像的几率。此外，实施图2所描述的方法，可以使获取到的眼周图像更加准确。此外，实施图2所描述的方法，可以使针对用户眼睛的疲劳状态的判断更加准确。此外，实施图2所描述的方法，可以使得终端设备得到的用户眼睛的疲劳状态的结果更具有可靠性。此外，实施图2所描述的方法，可以提高计算用户眼睛的当前眨眼频率的准确性。

实施例三

请参阅图3，图3是本发明实施例公开的另一种基于图像识别的显示屏开启方法的流程示意图。显示屏包括墨水屏和彩色显示屏，如图3所示，该基于图像识别的显示屏开启方法可以包括以下步骤：

301、当墨水屏处于运行状态且彩色显示屏处于关闭状态时，终端设备检测是否预存储有通过彩色显示屏播放的待播放多媒体内容，如果是，执行步骤302；如果否，结束本流程。

302、终端设备对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，如果是，结束本流程；如果否，执行步骤303～步骤304；其中，目标图像中包含终端设备的用户的眼睛图像。

303、终端设备开启彩色显示屏，并输出询问信息，询问信息用于询问终端设备的用户是否需要通过彩色显示屏播放待播放多媒体内容。

本发明实施例中，输出询问信息可以通过彩色显示屏输出，还可以通过墨水屏输出，输出询问信息的方式可以为通过在彩色显示屏或墨水屏上输出询问窗口，在询问窗口内输出具体的询问信息。

304、当检测到用户输入的用于指示通过彩色显示屏播放待播放多媒体内容的指令时，终端设备控制彩色显示屏播放待播放多媒体内容。

本发明实施例中，用户可以通过点击询问窗口中的确定按钮以实现输入的用于指示通过彩色显示屏播放待播放多媒体内容的指令，还可以通过语音的方式输入用于指示通过彩色显示屏播放待播放多媒体内容的指令。

本发明实施例中，实施上述的步骤303～步骤304，可以在开启彩色显示屏之后，询问用户是否需要输出上次关闭彩色显示屏时未正常关闭的多媒体内容，以使提高用户对于终端设备的控制程度。

在图3所描述的方法中，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。此外，实施图3所描述的方法，可以提高用户对于终端设备的控制程度。

实施例四

请参阅图4，图4是本发明实施例公开的一种终端设备的结构示意图。其中，终端设备包含显示屏，显示屏包括墨水屏和彩色显示屏，如图4所示，该终端设备可以包括：

检测单元401，用于当墨水屏处于运行状态且彩色显示屏处于关闭状态时，检测是否预存储有通过彩色显示屏播放的待播放多媒体内容。

第一判断单元402，用于在检测单元401的检测结果为是时，对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，其中，目标图像中包含终端设备的用户的眼睛图像。

开启单元403，用于在第一判断单元402的判断结果为否时，开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容。

作为一种可选的实施方式，开启单元403开启彩色显示屏，并通过彩色显示屏播放待播放多媒体内容的方式具体可以为：

开启彩色显示屏，并获取预存储的待播放多媒体内容；

从该待播放多媒体内容中获取播放进度信息；

输出播放进度提示信息，该播放进度提示信息用于提示终端设备的用户是否需要从该播放进度信息对应的播放节点播放待播放多媒体内容；

当检测到用户输入的用于指示从该播放进度信息对应的播放节点播放待播放多媒体内容的指令时，通过彩色显示屏从该播放进度信息对应的播放节点播放待播放多媒体内容；

当检测到用户输入的用于指示不从该播放进度信息对应的播放节点播放待播放多媒体内容的指令时，通过彩色显示屏从初始位置播放待播放多媒体内容。

其中，实施这种实施方式，可以根据终端设备的用户的意愿确定终端设备的彩色显示屏播放的内容，从而提高了终端设备的用户与终端设备的交互程度。

可见，实施图4所描述的终端设备，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。此外，实施图4所描述的终端设备，提高了终端设备的用户与终端设备的交互程度。

实施例五

请参阅图5，图5是本发明实施例公开的另一种终端设备的结构示意图。其中，图5所示的终端设备是由图4所示的终端设备进行优化得到的。其中，终端设备包含显示屏，显示屏包括墨水屏和彩色显示屏，图5所示的终端设备的第一判断单元402可以包括：

采集子单元4021，用于在检测单元401的检测结果为是时，通过终端设备设置的图像采集设备采集目标图像，目标图像中包含终端设备的用户的眼睛图像。

提取子单元4022，用于从采集子单元4021采集的目标图像中提取与眼睛图像匹配的眼周图像。

作为一种可选的实施方式，提取子单元4022从目标图像中提取与眼睛图像匹配的眼周图像的方式具体可以为：

计算眼睛图像中的眼睛中心点；

获取预设的眼周半径，并以该眼睛中心点为原点，获取以眼周半径为目标半径的眼周区域；

从目标图像中提取与眼周区域匹配的初始眼周图像；

将初始眼周图像中包含的眼睛图像删除，得到最终的眼周图像。

其中，实施这种实施方式，可以根据预设的眼周半径以及识别的眼睛图像确定眼周区域，进而根据眼周区域从目标图像中提取眼周图像，以使获取到的眼周图像更加准确。

分析子单元4023，用于同时对采集子单元4021采集的眼睛图像和提取子单元4022提取的眼周图像进行分析，获得眼睛图像和眼周图像中包含的眼睛特征点。

判断子单元4024，用于判断分析子单元4023得到的眼睛特征点中是否存在与预先存储的疲劳特征点匹配的任意一个目标眼睛特征点。

确定子单元4025，用于在判断子单元4024的判断结果为否时，确定用户眼睛未处于疲劳状态。

本发明实施例中，可以从目标图像中提取眼睛图像和眼周图像，并分析眼睛图像和眼周图像的眼睛特征点，如果分析出用户眼睛和眼周存在红血丝、黑眼圈或流泪等眼睛特征点，可以认为上述眼睛特征点为疲劳特征点，从而确认用户眼睛属于疲劳状态，以使针对用户眼睛的疲劳状态的判断更加准确。

作为一种可选的实施方式，图5所示的终端设备的采集子单元4021可以包括：

第一确定模块40211，用于在检测单元401的检测结果为是时，通过终端设备设置的红外感应装置确定用户所在的目标区域；

第二确定模块40212，用于通过终端设备设置的图像采集设备在第一确定模块40211确定的目标区域内确定用户眼睛的方位；

采集模块40213，用于以第二确定模块40212确定的方位为依据，控制图像采集设备采集目标图像，以使目标图像中包含用户眼睛的眼睛图像。

其中，实施这种实施方式，可以通过红外感应装置预先确定用户相对于终端设备的方位，以使图像采集设备可以快速的获取到包含用户眼睛的目标图像，从而提升图像采集设备拍摄到的包含用户眼睛的目标图像的几率。

作为一种可选的实施方式，图5所示的终端设备还可以包括：

获取单元404，用于在判断子单元4024的判断结果为否之后，通过图像采集设备获取用户眼睛的当前眨眼频率；

第二判断单元405，用于判断获取单元404获取的当前眨眼频率是否小于预设频率；

确定单元406，用于在第二判断单元405的判断结果为是时，确定用户眼睛未处于疲劳状态。

其中，实施这种实施方式，由于用户眼睛出现视疲劳的情况时，可能会通过眨眼来缓解视疲劳的状况，因此可以通过图像采集设备计算用户眨眼的频率确定用户眼睛的疲劳状态，从而使得终端设备得到的用户眼睛的疲劳状态的结果更具有可靠性。

作为一种可选的实施方式，获取单元404通过图像采集设备获取用户眼睛的当前眨眼频率的方式具体可以为：

通过图像采集设备获取用户连续两次闭眼的图像，得到第一闭眼图像和第二闭眼图像；

获取第一闭眼图像的第一时刻，并获取第二闭眼图像的第二时刻；

计算第一时刻与第二时刻之间差值的绝对值；

将该绝对值确定为用户眼睛的当前眨眼时长；

计算当前眨眼时长与一分钟的比值，将该比值确定为用户眼睛的当前眨眼频率。

其中，实施这种实施方式，可以根据通过图像采集设备采集到用户连续两次闭眼的图像，以及连续两次闭眼的时刻，进而计算得到用户一次眨眼的时长，并且可以根据一次眨眼的时长计算得到用户眼睛的当前眨眼频率，以提高计算用户眼睛的当前眨眼频率的准确性。

可见，实施图5所描述的终端设备，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。此外，实施图5所描述的终端设备，提升图像采集设备拍摄到的包含用户眼睛的目标图像的几率。此外，实施图5所描述的终端设备，可以使获取到的眼周图像更加准确。此外，实施图5所描述的终端设备，可以使针对用户眼睛的疲劳状态的判断更加准确。此外，实施图5所描述的终端设备，可以使得终端设备得到的用户眼睛的疲劳状态的结果更具有可靠性。此外，实施图5所描述的终端设备，可以提高计算用户眼睛的当前眨眼频率的准确性。

实施例六

请参阅图6，图6是本发明实施例公开的另一种终端设备的结构示意图。其中，图6所示的终端设备是由图5所示的终端设备进行优化得到的。其中，终端设备包含显示屏，显示屏包括墨水屏和彩色显示屏，图6所示的终端设备的开启单元403可以包括：

输出子单元4031，用于在第一判断单元402的判断结果为否时，开启彩色显示屏，并输出询问信息，询问信息用于询问终端设备的用户是否需要通过彩色显示屏播放待播放多媒体内容。

控制子单元4032，用于当检测到用户输入的用于指示通过彩色显示屏播放待播放多媒体内容的指令时，控制彩色显示屏播放待播放多媒体内容。

本发明实施例中，可以在开启彩色显示屏之后，询问用户是否需要输出上次关闭彩色显示屏时未正常关闭的多媒体内容，以使提高用户对于终端设备的控制程度。

可见，实施图6所描述的终端设备，能够根据用户眼睛的状态控制彩色显示屏的开启，从而降低用户视力受损的几率。此外，实施图6所描述的终端设备，可以提高用户对于终端设备的控制程度。

实施例七

请参阅图7，图7是本发明实施例公开的另一种终端设备的结构示意图。如图7所示，该终端设备可以包括：

存储有可执行程序代码的存储器701；

与存储器701耦合的处理器702；

其中，处理器702调用存储器701中存储的可执行程序代码，执行以上各方法实施例中的方法的部分或全部步骤。

本发明实施例还公开一种计算机可读存储介质，其中，计算机可读存储介质存储了程序代码，其中，程序代码包括用于执行以上各方法实施例中的方法的部分或全部步骤的指令。

本发明实施例还公开一种计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

本发明实施例还公开一种应用发布平台，其中，应用发布平台用于发布计算机程序产品，其中，当计算机程序产品在计算机上运行时，使得计算机执行如以上各方法实施例中的方法的部分或全部步骤。

应理解，说明书通篇中提到的“本发明实施例”意味着与实施例有关的特定特征、结构或特性包括在本发明的至少一个实施例中。因此，在整个说明书各处出现的“在本发明实施例中”未必一定指相同的实施例。此外，这些特定特征、结构或特性可以以任意适合的方式结合在一个或多个实施例中。本领域技术人员也应该知悉，说明书中所描述的实施例均属于可选实施例，所涉及的动作和模块并不一定是本发明所必须的。

在本发明的各种实施例中，应理解，上述各过程的序号的大小并不意味着执行顺序的必然先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本发明实施例的实施过程构成任何限定。

另外，本文中术语“***”和“网络”在本文中常可互换使用。应理解，本文中术语“和/或”，仅仅是一种描述关联对象的关联关系，表示可以存在三种关系，例如A和/或B，可以表示：单独存在A，同时存在A和B，单独存在B这三种情况。另外，本文中字符“/”，一般表示前后关联对象是一种“或”的关系。

在本发明所提供的实施例中，应理解，“与A对应的B”表示B与A相关联，根据A可以确定B。但还应理解，根据A确定B并不意味着仅仅根据A确定B，还可以根据A和/或其他信息确定B。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质包括只读存储器(Read-Only Memory，ROM)、随机存储器(Random Access Memory，RAM)、可编程只读存储器(Programmable Read-only Memory，PROM)、可擦除可编程只读存储器(Erasable Programmable Read Only Memory，EPROM)、一次可编程只读存储器(One-time Programmable Read-Only Memory，OTPROM)、电子抹除式可复写只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、只读光盘(CompactDisc Read-Only Memory，CD-ROM)或其他光盘存储器、磁盘存储器、磁带存储器、或者能够用于携带或存储数据的计算机可读的任何其他介质。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可位于一个地方，或者也可以分布到多个网络单元上。可根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本发明各实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

上述集成的单元若以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可获取的存储器中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或者部分，可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储器中，包括若干请求用以使得一台计算机设备(可以为个人计算机、服务器或者网络设备等，具体可以是计算机设备中的处理器)执行本发明的各个实施例上述方法的部分或全部步骤。

以上对本发明实施例公开的一种基于图像识别的显示屏开启方法及终端设备进行了详细介绍，本文中应用了具体个例对本发明的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本发明的方法及其核心思想；同时，对于本领域的一般技术人员，依据本发明的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种基于图像识别的显示屏开启方法，其特征在于，所述显示屏包括墨水屏和彩色显示屏，所述方法包括：

当所述墨水屏处于运行状态且所述彩色显示屏处于关闭状态时，检测是否预存储有通过所述彩色显示屏播放的待播放多媒体内容；

如果预存储有所述待播放多媒体内容，对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，其中，所述目标图像中包含所述终端设备的用户的眼睛图像；

如果用户眼睛未处于疲劳状态，开启所述彩色显示屏，并通过所述彩色显示屏播放所述待播放多媒体内容。

2.根据权利要求1所述的方法，其特征在于，所述对终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，包括：

通过终端设备设置的图像采集设备采集目标图像，所述目标图像中包含所述终端设备的用户的眼睛图像；

从所述目标图像中提取与所述眼睛图像匹配的眼周图像；

同时对所述眼睛图像和所述眼周图像进行分析，获得所述眼睛图像和所述眼周图像中包含的眼睛特征点；

判断所述眼睛特征点中是否存在与预先存储的疲劳特征点匹配的任意一个目标眼睛特征点；

如果否，确定用户眼睛未处于疲劳状态。

3.根据权利要求2所述的方法，其特征在于，所述通过终端设备设置的图像采集设备采集目标图像，包括：

通过终端设备设置的红外感应装置确定用户所在的目标区域；

通过所述终端设备设置的图像采集设备在所述目标区域内确定用户眼睛的方位；

以所述方位为依据，控制所述图像采集设备采集目标图像，以使所述目标图像中包含用户眼睛的眼睛图像。

4.根据权利要求2或3所述的方法，其特征在于，在判断出不存在所述目标眼睛特征点之后，所述方法还包括：

通过所述图像采集设备获取用户眼睛的当前眨眼频率；

判断所述当前眨眼频率是否小于预设频率；

如果是，确定用户眼睛未处于疲劳状态。

5.根据权利要求1～4任一项所述的方法，其特征在于，所述开启所述彩色显示屏，并通过所述彩色显示屏播放所述待播放多媒体内容，包括：

开启所述彩色显示屏，并输出询问信息，所述询问信息用于询问所述终端设备的用户是否需要通过所述彩色显示屏播放所述待播放多媒体内容；

当检测到用户输入的用于指示通过所述彩色显示屏播放所述待播放多媒体内容的指令时，控制所述彩色显示屏播放所述待播放多媒体内容。

6.一种终端设备，其特征在于，所述终端设备包含显示屏，所述显示屏包括墨水屏和彩色显示屏，所述终端设备包括：

检测单元，用于当所述墨水屏处于运行状态且所述彩色显示屏处于关闭状态时，检测是否预存储有通过所述彩色显示屏播放的待播放多媒体内容；

第一判断单元，用于在所述检测单元的检测结果为是时，对所述终端设备设置的图像采集设备采集的目标图像进行分析，判断用户眼睛是否处于疲劳状态，其中，所述目标图像中包含所述终端设备的用户的眼睛图像；

开启单元，用于在所述第一判断单元的判断结果为否时，开启所述彩色显示屏，并通过所述彩色显示屏播放所述待播放多媒体内容。

7.根据权利要求6所述的终端设备，其特征在于，所述第一判断单元包括：

采集子单元，用于在所述检测单元的检测结果为是时，通过所述终端设备设置的图像采集设备采集目标图像，所述目标图像中包含所述终端设备的用户的眼睛图像；

提取子单元，用于从所述目标图像中提取与所述眼睛图像匹配的眼周图像；

分析子单元，用于同时对所述眼睛图像和所述眼周图像进行分析，获得所述眼睛图像和所述眼周图像中包含的眼睛特征点；

判断子单元，用于判断所述眼睛特征点中是否存在与预先存储的疲劳特征点匹配的任意一个目标眼睛特征点；

确定子单元，用于在所述判断子单元的判断结果为否时，确定用户眼睛未处于疲劳状态。

8.根据权利要求7所述的终端设备，其特征在于，所述采集子单元包括：

第一确定模块，用于在所述检测单元的检测结果为是时，通过所述终端设备设置的红外感应装置确定用户所在的目标区域；

第二确定模块，用于通过所述终端设备设置的图像采集设备在所述目标区域内确定用户眼睛的方位；

采集模块，用于以所述方位为依据，控制所述图像采集设备采集目标图像，以使所述目标图像中包含用户眼睛的眼睛图像。

9.根据权利要求7或8所述的终端设备，其特征在于，所述终端设备还包括：

获取单元，用于在所述判断子单元的判断结果为否之后，通过所述图像采集设备获取用户眼睛的当前眨眼频率；

第二判断单元，用于判断所述当前眨眼频率是否小于预设频率；

确定单元，用于在所述第二判断单元的判断结果为是时，确定用户眼睛未处于疲劳状态。

10.根据权利要求6～9任一项所述的终端设备，其特征在于，所述开启单元包括：

输出子单元，用于在所述第一判断单元的判断结果为否时，开启所述彩色显示屏，并输出询问信息，所述询问信息用于询问所述终端设备的用户是否需要通过所述彩色显示屏播放所述待播放多媒体内容；

控制子单元，用于当检测到用户输入的用于指示通过所述彩色显示屏播放所述待播放多媒体内容的指令时，控制所述彩色显示屏播放所述待播放多媒体内容。

Images