CN106527693A - 一种应用程序控制方法及移动终端 - Google Patents

一种应用程序控制方法及移动终端 Download PDF

Info

Publication number
CN106527693A
CN106527693A CN201610931807.6A CN201610931807A CN106527693A CN 106527693 A CN106527693 A CN 106527693A CN 201610931807 A CN201610931807 A CN 201610931807A CN 106527693 A CN106527693 A CN 106527693A
Authority
CN
China
Prior art keywords
mobile terminal
sight line
control interface
display screen
module
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610931807.6A
Other languages
English (en)
Inventor
袁文龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201610931807.6A priority Critical patent/CN106527693A/zh
Publication of CN106527693A publication Critical patent/CN106527693A/zh
Pending legal-status Critical Current

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F9/00—Arrangements for program control, e.g. control units
    • G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
    • G06F9/44—Arrangements for executing specific programs
    • G06F9/451—Execution arrangements for user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72469—User interfaces specially adapted for cordless or mobile telephones for operating the device by selecting functions from two or more displayed items, e.g. menus or icons

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Telephone Function (AREA)

Abstract

本发明提供了一种应用程序控制方法及移动终端，涉及计算机技术领域。所述方法，包括：追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。解决了现有的大屏移动终端在小屏模式下导致目标应用程序对象缩小，从而影响用户操作的问题。方便用户通过视线以及单手操作在不缩小目标应用程序对象的条件下，控制移动终端的应用程序。

Description

一种应用程序控制方法及移动终端
技术领域
本发明涉及通信技术领域，尤其涉及一种应用程序控制方法及移动终端。
背景技术
随着技术的进步，移动通信设备越来越发达，手机等移动终端成为人类生活中不可或缺的必需品。以手机为例，从手机诞生到现在为止，手机经历了很多次变革，从刚开始只能打电话发信息到具有广播音乐功能的手机，再到现在集上网娱乐影音功能于一体的大屏手机。
而且，随着触摸屏技术的发展，现在人们越来越倾向于利用触摸屏幕来操控移动终端中的应用程序，但是随着移动终端的屏幕越来越大，人们通过单手来操控移动终端也越来越不方便。现有解决上述问题的方案小屏模式，即在单手操作时通过将显示屏适当缩小以方便单手操作。
但是对于上述方案而言，其缺点在于再将显示屏缩小的同时，显示屏中的目标应用程序对象也会相应缩小，而且小屏与移动终端本身屏幕之间还有黑色边框，比较影响用户操作。
发明内容
本发明实施例提供一种应用程序控制方法及移动终端，以解决现有的大屏移动终端小屏模式导致目标应用程序对象缩小，从而影响用户操作的问题。
一方面，本发明提供了一种应用程序控制方法，包括：
追踪移动终端用户的视线；
获取移动终端用户的视线在移动终端的显示屏中的位置坐标；
确定所述位置坐标对应的目标应用程序对象；
将所述目标应用程序对象调整为预设突出显示方式；
显示一操控界面；
其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
另一方面，本发明还提供了一种移动终端，包括：
视线追踪模块，用于追踪移动终端用户的视线；
视线位置坐标获取模块，用于获取移动终端用户的视线在移动终端的显示屏中的位置坐标；
目标对象确定模块，用于确定所述位置坐标对应的目标应用程序对象；
显示方式调整模块，用于将所述目标应用程序对象调整为预设突出显示方式；
操控界面显示模块，用于显示一操控界面；
其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
这样，本发明实施例中，通过追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。从而方便用户通过视线以及单手操作控制移动终端的应用程序。
上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例的描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1是本发明实施例一中的一种应用程序控制方法的流程图；
图1A本发明实施例一中的一种单手可操控区域的示意图；
图1B本发明实施例一中的一种当用户的视线落入移动终端显示屏目标应用程序对象中时，显示相应操控界面的示意图；
图2是本发明实施例二中的一种应用程序控制方法的流程图；
图3是本发明实施例三中的一种移动终端的结构示意图；
图3A是本发明实施例三中的一种优选的移动终端的结构示意图；
图3B是本发明实施例三中的一种操控界面显示模块的结构示意图；
图3C是本发明实施例三中的一种目标区域确认子模块的结构示意图；
图3D是本发明实施例三中的一种显示方式调整模块的结构示意图；
图3E是本发明实施例三中的一种视线位置坐标获取模块的结构示意图；
图4是本发明实施例四中的一种移动终端的结构示意图；
图5是本发明实施例五中的一种移动终端的框图。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
下面通过列举几个具体的实施例详细介绍本发明提供的一种应用程序控制方法及移动终端。
实施例一
详细介绍本发明实施例提供的一种应用程序控制方法。
参照图1，示出了本发明实施例中一种应用程序控制方法的流程图。
步骤101，追踪移动终端用户的视线。
视线追踪技术是利用机械、电子、光学等各种检测手段获取用户当前“注视方向"的技术，其可以利用用户眼球转动时相对位置不变的某些眼部结构和特征作为参照，在位置变化特征和这些不变特征之间提取用户的视线。按照***构成和采用的检测方法可以粗略划分为侵入式和非侵入式两种.随着数字化技术、计算机视觉、人工智能技术的迅速发展，基于数字视频分析(Video Oculographic，VOG)的非侵入式视线追踪技术成为当前热点研究方向.基于VOG的视线追踪技术分为视线特征参数提取和视线估计模型建立两个组成部分。随着***硬件和视线估计模型不同，基于VOG的视线追踪方法可分为如下几类：
(1)瞳孔-角膜反射法(the pupil center cornea reflection technique，PCCR)：采用红外光源产生角膜反射，通过计算瞳孔中心与角膜反射之间的向量来估计视线方向。视线估计模型可以采用映射模型(通常为非线性多项式模型)，也可以采用几何模型。
(2)角膜反射矩阵法(cross-ratios method)：多红外光源在角膜上产生多个角膜反射形成角膜反射矩阵。通过计算角膜反射与瞳孔中心的位置特征估计视线方向，视线估计模型使用投影平面不变的交比(cross-ratios)值。
(3)椭圆法线方向法(“one-circle”algorithm)：通过记录高分辨率眼睛图像，计算虹膜边界圈的法线方向估计视线方向。在可见光下追踪高分辨率的眼睛图像并通过基本的投影几何关系计算椭圆虹膜圈的法线方向并视其为视线方向。
在本发明实施例中，可以利用包括上述的任何一种可用方法追踪用户的视线，并获取用户的视线在移动终端显示屏中的位置坐标，对此本发明实施例不加以限定。
步骤102，获取移动终端用户的视线在移动终端的显示屏中的位置坐标。
在本发明实施例中，可以利用包括上述的任何一种可用方法追踪用户的视线，并获取用户的视线在移动终端显示屏中的位置坐标，对此本发明实施例不加以限定。
例如，可以首先利用移动终端的前置摄像头拍下包含眼睛的人脸图像，在拍摄的人脸图像中通过人脸识别算法识别出人脸，并在人脸中识别到眼睛所在位置；进而估计眼睛瞳孔所在位置及瞳孔圆心；再由瞳孔圆心确定虹膜边界，根据虹膜边界以及人眼特征确定视线的法线方向；最后由法线方向投影到移动终端显示屏从而确定用户的视线在移动终端显示屏中的坐标位置。
需要说明的是，在本发明实施例中，可以只追踪用户任意一个眼睛的视线，并获取一只眼睛的视线在移动终端显示屏中的位置坐标；也可以同时追踪用户两只眼睛的视线，以两只眼睛的视线在移动终端显示屏的交点作为该用户的视线最终的在移动终端显示屏中的位置坐标，对此本发明实施例不加以限定。其中，追踪用户两只眼睛的视线相对于追踪该用户一只眼睛的视线更准确。
步骤103，确定所述位置坐标对应的目标应用程序对象。
在实际应用中，移动终端的显示屏中可以显示有各种目标应用程序对象，用户可以通过点击或触摸目标应用程序对象等等方式触发启动相应的应用程序。而在启动该应用程序后，同样可以通过触摸或点击等方式对该应用程序显示屏中控件进行相应的操作。其中，目标应用程序对象可以展示在动终端显示屏中任何位置，而且启动后的应用程序的显示屏也可以完全覆盖移动终端显示屏。那么，用户在选择某一应用程序，或者是在应用程序的显示屏中进行操作时，可能需要触摸移动终端显示屏的任何区域。但是对于显示屏较大的移动终端，如果用户通过单手操作控制移动终端，此时很难通过单手操作触摸到移动终端的全部区域。而且这种困难随着移动终端显示屏尺寸的增大是不断加强的。如图1A所示为一般具有较大显示屏的移动终端，如果用户在移动终端的右下角握住移动终端，那么用户单手可操控范围以及用户不单手可操控范围的示意图。其中，竖条纹区域1为用户单手不可操控范围，无条纹区域2为用户单手可操控范围。
因此，在本发明实施例中，为了方便用户通过单手操作控制移动终端的全部应用程序，可以根据获取移动终端用户的视线在移动终端的显示屏中的位置坐标，确定位置坐标对应的目标应用程序对象。其中的目标应用程序对象可以为目标应用程序对象，也可以为应用程序控件等等，对此本发明实施例不加以限定。
步骤104，将所述目标应用程序对象调整为预设突出显示方式。
在本发明实施例中，如果用户的视线在显示屏中的位置坐标位于显示屏中的目标应用程序对象中时，表明用户当前想要选定该目标应用程序对象。那么为了方便用户直观了解其是否选定其自身期望的目标应用程序对象，可以将选定的目标应用程序对象调整为预设突出显示方式。其中，预设突出方式可以根据需求在本步骤之前，或者是本步骤之前的任一步骤之前进行设定。例如，可以设置预设突出显示方式为调节视线所注视到的目标应用程序对象的背景颜色，或是调节视线所注视到的目标应用程序对象中字体颜色，或是调节视线所注视到的目标应用程序对象的大小等等，或者是在视线所注视到的目标应用程序对象显示高亮度边框等等，对此本发明实施例不加以限定。这样用户就可以知道此时操作的位置是否是自己想要的位置。
例如，当移动终端用户用右手使用大屏手机时，此时需要启动某个靠左上角的应用程序对象时，利用右手的单手操作无法实现，那么此时用户可以注视这个应用程序对象，经过上述的视线追踪可以检测到用户正在注视这个应用图标对象，那么就会适当的调节该应用程序对象的背景颜色或者调节应用程序标题字体颜色等，用户即可知道当前已选中该应用程序对象，然后移动终端用户即可以通过对应该应用程序的操控界面输入对该应用程序的操作指令，改善用户使用体验。
步骤105，显示一操控界面。
其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
在本发明实施例中，为了方便用户通过单手操作控制移动终端的全部应用程序，可以在当用户的视线在移动终端显示屏中的位置坐标位于显示屏中的目标应用程序对象中时，在显示屏的单手可触控区域内显示对应该目标应用程序对象的操控界面，其中的操控界面可以用于接收用户输入的针对该应用程序的操控指令，例如启动指令、关闭指令、启动下一层级应用程序的指令等等，对此本发明实施例不加以限定。其中，操控界面也可以有部分位于单手不可操控区域，部分位于单手可操控区域，那么此时用户可以通过在单手可操控区域内的操控界面输入针对该应用程序的操控指令，对此本发明实施例不加以限定。另外，单手可操控区域是相对于移动终端用户使用移动终端握持方式有关，例如，如果移动终端用户通过右手握持移动终端，那么此时单手可操控区域靠近移动终端右侧，而如果移动终端用户通过左手握持移动终端，那么此时单手可操控区域靠近移动终端左侧。在本发明实施例中，可以预先设置根据不同握持方式，操控界面的显示位置，对此本发明实施例不加以限定。
如图1B为一种当用户的视线落入移动终端显示屏目标应用程序对象中时，显示相应操控界面的示意图。其中的矩形方框为目标应用程序对象，弧形方框3为操控界面。在本发明实施例中，操控界面的具体形状以及尺寸等等参数都可以根据需求预设设定，对此本发明实施例不加以限定。
其中，对应任一应用程序的各种操作对应的操作指令可以在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。例如，对于某一音乐播放应用程序，可以设定在确定用户的视线在该音乐播放应用程序的图标中时，如果用户点击其对应的操控界面，即可以启动该音乐播放应用程序，那么在移动终端的显示屏中显示该音乐播放应用程序的主页面，那么还可以设定用户在操控界面中触摸划动对应于在移动终端的显示屏中的触摸滑动，而且为了方便用户及时了解当前用户通过操控界面对应触摸的移动终端显示屏的位置，可以在移动终端的显示屏中通过光标、箭头等方式标注用户当前触控的位置，对此本发明实施例不加以限定。
另外，还可以设定点击操控界面为启动相应的应用程序，在预设时间内双击操控界面为关闭相应的应用程序，连续触碰操控界面达到第一预设时间为启动该应用程序的下一级第一子应用程序，连续触碰操控界面达到第二预设时间为启动该应用程序的下一级第二子应用程序，等等，对此本发明实施例不加以限定。
需要说明的是，在本发明实施例中，如果移动终端显示屏中显示有控件图标，且用户的视线在显示屏中的位置坐标在该控件图标中，那么也可以在单手可操控区域内生成针对该控件图标的操控界面，那么用户可以通过操控界面操控该控件图标对应的控件。而如果移动终端已启动某一应用程序，且移动终端显示屏中显示已启动的应用程序某一页面，另外显示屏中已显示有针对该应用程序的操控界面。在本发明实施例中，为了方便用户通过操控界面输入指令，设置操控界面始终处于移动终端显示屏的最上层。此时仍然可以继续对用户进行视线追踪，当用户的视线的位置坐标当前显示页面中任一图标时，则可以通过操控界面输入针对该图标的控制指令，对此本发明实施例不加以限定。
例如，假设用户的视线的坐标位置在移动终端显示屏的相机图标中，那么则可以在移动终端的单手可触控区域内显示针对相机的操控界面。进一步的，如果用户通过操控界面输入启动指令启动相机，此时移动终端的显示屏中显示相机的启动页面，同时操控界面会显示在相机的启动页面之上。那么如果此时用户的视线的坐标位置移动至启动页面的拍摄控件，那么此时用户可以通过操控界面输入针对该拍摄控件的操作指令，例如可以通过点击操控界面输入拍照指令等等。
另外，在本发明实施例中，可以设定如果用户的视线的坐标位置从一个目标应用程序对象A切换至另一个目标应用程序对象B中，那么也可以将显示屏中显示的针对目标应用程序对象A的操控界面切换至对应于目标应用程序对象B；或者是设置用户在关闭应用程序A时可以对应同时关闭其对应的操控界面，而当用户的视线的位置坐标再次位于目标应用程序对象A中时，则可以再次在显示屏中显示针对应用程序A的操控界面。而且，为了避免用户在移动视线时，容易使用户显示先后落入多个目标应用程序对象中，而其中的部分目标应用程序对象用户并不需要选定，那么可以设定如果在预设时间之内，追踪到的用户的视线都位于同一目标应用程序对象中，则表明此时用户需要选定该目标应用程序对象，此时可以在移动终端的显示屏中显示针对该应用程序的操控界面。
而且，在本发明实施例中，步骤105可以与步骤104同时执行，也可以在步骤105之前执行，对此本发明实施例不加以限定。
本发明实施例的应用程序控制方法，通过追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。从而可以方便用户通过视线以及单手操作控制移动终端的应用程序。
实施例二
详细介绍本发明实施例提供的一种应用程序控制方法。
参照图2，示出了本发明实施例中一种应用程序控制方法的流程图。
步骤201，采集至少一个视线信息。
在本发明实施例中，为了过滤掉无效或无关的视线信息，可以先采集至少一个视线信息。具体的，可以利用前置摄像头拍摄包括眼睛图案的图片，并从采集的图片中提取出视线信息。当然也可以利用任何其他可用的方式采集视线信息，对此本发明实施例不加以限定。
步骤202，将所述至少一个视线信息中每个视线信息对应的眼纹与预先存储的眼纹进行比对。
本发明实施例中的眼纹可以理解为虹膜，虹膜是眼睛构造的一部分，虹膜中心有一圆形开口，称为瞳孔，犹如相机当中可调整大小的光圈，内含色素决定眼睛的颜色。人类眼睛的虹膜与手指纹一样，是独一无二的。因此可以利用虹膜进行身份验证。在本发明实施例中，可以预先将移动终端对应的安全用户的虹膜录入到移动终端，即为预先存储的眼纹，当然也可以将眼纹存储至云端服务器等网络存储空间，在需要进行身份验证时，可以将预先存储的眼纹从云端服务器下载至移动终端本地，也可以先获取当前用户的虹膜，然后将该虹膜上传至云端服务器进行验证，对此本发明实施例不加以限定。
步骤203，将与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息。
如果某一视线信息对应的眼纹与预先存储的眼纹相匹配，则可以将与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息，并继续执行后续的操作。而如果视线信息对应的眼纹与预先存储的眼纹不匹配，则表明该视线信息不是移动终端用户的视线信息，此时可以直接过滤掉该视线信息。在本发明实施例中，还可以设定如果全部视线信息对应的眼纹与预先存储的眼纹不匹配，则暂停进行视线追踪，如果后续需要继续启动视线追踪，那么用户可以通过预设方式输入视线追踪启动指令，以控制移动终端继续进行视线追踪。其中的预设方式可以根据需求进行预先设定，对此本发明实施例不加以限定。
步骤204，追踪移动终端用户的视线。
视线追踪技术是利用机械、电子、光学等各种检测手段获取用户当前“注视方向"的技术，其可以利用用户眼球转动时相对位置不变的某些眼部结构和特征作为参照，在位置变化特征和这些不变特征之间提取用户的视线。按照***构成和采用的检测方法可以粗略划分为侵入式和非侵入式两种.随着数字化技术、计算机视觉、人工智能技术的迅速发展，基于数字视频分析(Video Oculographic，VOG)的非侵入式视线追踪技术成为当前热点研究方向.基于VOG的视线追踪技术分为视线特征参数提取和视线估计模型建立两个组成部分。随着***硬件和视线估计模型不同，基于VOG的视线追踪方法可分为如下几类：
(1)瞳孔-角膜反射法(the pupil center cornea reflection technique，PCCR)：采用红外光源产生角膜反射，通过计算瞳孔中心与角膜反射之间的向量来估计视线方向。视线估计模型可以采用映射模型(通常为非线性多项式模型)，也可以采用几何模型。
(2)角膜反射矩阵法(cross-ratios method)：多红外光源在角膜上产生多个角膜反射形成角膜反射矩阵。通过计算角膜反射与瞳孔中心的位置特征估计视线方向，视线估计模型使用投影平面不变的交比(cross-ratios)值。
(3)椭圆法线方向法(“one-circle”algorithm)：通过记录高分辨率眼睛图像，计算虹膜边界圈的法线方向估计视线方向。在可见光下追踪高分辨率的眼睛图像并通过基本的投影几何关系计算椭圆虹膜圈的法线方向并视其为视线方向。
在本发明实施例中，可以利用包括上述的任何一种可用方法追踪用户的视线，并获取用户的视线在移动终端显示屏中的位置坐标，对此本发明实施例不加以限定。
步骤205，获取移动终端用户的视线在移动终端的显示屏中的位置坐标。
优选地，在本发明实施例中，步骤205具体可以包括：
(1)控制所述前置摄像头采集所述移动终端用户的人脸图像。
在本发明实施例中，可以利用前述的椭圆法线方向法进行视线追踪。首先可以利用移动终端的前置摄像头采集移动终端用户的人脸图案。其中，人脸图案也可以不包含全部的人脸图案，而包含人眼图案即可。而且根据用户的设定可以只包含用户的一只眼睛，或者是必须包含用户的两只眼睛。而且，采集到人脸图案可以缓存等形式存放，也可以直接保存至移动终端本地等，对此本发明实施例不加以限定。在本发明实施例中，为了能够实时进行视线追踪，可以在本步骤之前预先设置一个预设时间间隔，每隔预设时间间隔则利用移动终端的前置摄像头采集一次移动终端用户的人脸图案，对此本发明实施例不加以限定。
(2)确定所述人脸图像中移动终端用户的眼睛的瞳孔圆心。
在获取到人脸图案之后，则可以确认人脸图像中移动终端用户的眼睛的瞳孔圆心。具体的可以利用人脸识别算法，或者是根据五官特征，等等任何可用方法在人脸图案中定位眼睛的瞳孔圆心，对此本发明实施例不加以限定。
(3)基于所述瞳孔圆心，确定虹膜边界。
在确定了瞳孔圆心后，即可以基于瞳孔圆心，确定虹膜边界。在本发明实施例中，可以利用任何可用方法确定虹膜边界，对此本发明实施例不加以限定。
(4)基于所述虹膜边界，确定视线的法线。
在确定了虹膜边界后，即可以基于虹膜边界，确定视线的法线。在本发明实施例中，可以利用任何可用方法确定视线的法线，对此本发明实施例不加以限定。
(5)将所述法线投影到移动终端显示屏上的位置确定为所述视线在移动终端的显示屏中的位置坐标。
目前常用的视线跟踪技术都是基于视频图像处理的方法，基本原理是先利用摄像机获取人眼图像，然后准确地定位和跟踪图像中的眼睛位置，最后根据平面映射技术估算出用户在屏幕上的注视位置。其核心是如何精确定位出瞳孔中心，定位的准确程度直接影响到视线跟踪的精度。
目前瞳孔定位的算法很多，如圆周差分算法，径向对称算法，Hough变换拟合圆的算法，灰度积分投影算法等。这些算法大都仅仅针对瞳孔未变形的情况，一旦瞳孔出现变形就变得不再适用。灰度积分投影算法虽然不受瞳孔形状的限制，但其定位精度太低，且易受到光照的影响，因此不能满足视线跟踪的精度要求。针对变形瞳孔的定位，可以利用Hough变换拟合椭圆的算法来定位瞳孔，但由于椭圆的参数有5个，参数空间过于庞大，因此拟合效率很低，满足不了实时要求。最小二乘法的椭圆拟合方法，由于瞳孔在边缘检测过程中容易受到干扰点的影响，拟合出来的椭圆与真实结果相比往往具有较大偏差。
基于5点的随机采样一致性(RANSAC_5)思想的瞳孔定位算法，该算法首先通过在瞳孔边缘上随机采样5个点计算出相应的椭圆参数，然后计算出此参数空间对应的一致集。如果一致集的规模小于某个阈值，则重新采样5个点，继续上述过程直到找到满足条件的一致集为止，最后通过去一致性完成最终的椭圆定位。该算法大大提高了椭圆的拟合速度，但由于每次仍需要采样5个点，导致在有较大干扰的图像中容易引入无效采样，使得计算量和内存需求增大，而且还可能导致算法在可接受的时间或内存占有情况下定位失败。
针对上述算法的不足，还可以引入瞳孔边缘像素点的灰度梯度方向特性，提出了基于3点的随机采样一致性瞳孔定位算法(RANSAC_3)，利用随机采样到的2点(包括它们的梯度方向)和搜索获得的第3点来确定椭圆参数，最后利用最小二乘法进行去一致集处理。该算法可以有效降低采样到干扰点的几率，同时有效地解决无效采样和误差累积问题，从而提高了实现追踪的效率和精度。
在本发明实施例中，可以根据需求设定利用上述的任意一种算法进行眼睛瞳孔定位，然后再基于平面映射技术估算出用户在屏幕上的注视位置，对此本发明实施例不加以限定。
步骤206，确定所述位置坐标对应的目标应用程序对象。
步骤207，若所述目标应用程序对象为目标应用程序图标，则将所述目标应用程序图标调整至预设的图标格式。
在实际应用中，移动终端的目标应用程序对象可以为目标应用程序图标、应用程序界面中的控件等等。那么，在本发明实施例中，针对不同类型的目标应用程序对象，突出显示的方式可以有所区别。
若目标应用程序对象为目标应用程序图标，则可以将目标应用程序图标调整至预设的图标格式。其中，预设的图标格式可以为设定目标应用程序图标的形状或大小、颜色，等等，具体可以在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。
步骤208，若所述目标应用程序对象为应用程序界面中的控件，则调整所述控件的背景至预设颜色或调整所述控件上的字体至预设颜色。
而若目标应用程序对象为应用程序界面中的控件，则可以调整控件的背景至预设颜色或调整控件上的字体至预设颜色。其中的预设颜色都可以根据需求在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。
步骤209，获取所述移动终端的第一侧边和第二侧边上的触控点的个数信息。
在本发明实施例中，为了确认移动终端的手持方式，可以先获取移动终端的第一侧边和第二侧边上的触控点的个数信息。在实际应用中，如果移动终端的握持方式为左手握持，那么移动终端靠左侧边的触控点数量会明显多于右侧边的触控点数量，而如果移动终端的握持方式为右手握持，那么移动终端靠左侧边的触控点数量会明显少于右侧边的触控点数量。在本发明实施例中，可以根据需求按照左右方位将移动终端的显示屏划分为第一侧边和第二侧边，例如将移动终端显示屏划分为相同的左右两个区域，并且设定左侧区域为第一侧边，右侧区域为第一侧边。当然也可以只取移动终端显示屏中的部分区域作为第一侧边和第二侧边，对此本发明实施例不加以限定。在已知第一侧边和第二侧边的情况下，可以获取移动终端的第一侧边和第二侧边上的触控点的个数信息。
步骤210，基于所述第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式。
在获取第一侧边和第二侧边上的触控点的个数信息之后，即可以基于第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式。例如，上述的第一侧边为移动终端显示屏的左侧区域，第二侧边为移动终端显示屏的右侧区域，那么如果第一侧边上的触控点的个数大于第二侧边上的触控点的个数，则说明此时移动终端为左手握持，而如果第一侧边上的触控点的个小于第二侧边上的触控点的个数，则说明此时移动终端为右手握持。
步骤211，基于所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域。
如前述，需要将操控界面显示于移动终端用户当前单手可操控区域，而握持方式不同，单手可操控区域也不同。那么在本发明实施例中，可以基于握持方式，确定移动终端的显示屏中操控界面待显示的目标区域。
优选地，在本发明实施例中，所述步骤211进一步可以包括：
若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为所述目标区域。若所述握持方式为右手握持方式，则将显示屏中的离移动终端用户右手拇指的第二预设范围的区域确定为所述目标区域。
在本发明实施例中，若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为目标区域。其中的第一预设范围可以在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。当然，在本发明实施例中，也可以将显示屏中距离移动终端左下角的第一预设范围的区域确定为所述目标区域，对此本发明实施例不加以限定。
在本发明实施例中，若所述握持方式为右手握持方式，则将显示屏中距离移动终端用户右手拇指的第二预设范围的区域确定为目标区域。其中的第二预设范围可以在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。当然，在本发明实施例中，也可以将显示屏中距离移动终端右下角的第二预设范围的区域确定为所述目标区域，对此本发明实施例不加以限定。
步骤212，在所述目标区域显示所述操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
步骤213，检测移动终端用户在所述操控界面中的触控操作。
当用户通过视线选定某一目标应用程序对象，且该用户通过虹膜验证时，则可以通过在操控界面中的触控操作输入各种指令。因此，需要检测移动终端用户在操控界面中的触控操作。
步骤214，当检测到触控操作时，对所述目标应用程序对象执行与所述触控操作对应的操控指令。
在本发明实施例中，可以设置不同的触控操作对应不同的操控指令，那么当检测到触控操作时，则可以对目标应用程序对象执行与检测到的触控操作对应的操控指令。
例如，当移动终端接收到该用户通过操界面输入的与启动指令对应的触控操作时，则可以控制移动终端启动该目标应用程序对象对应的应用程序。其中，启动指令对应的触控操作可以在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。例如，可以设定通过单击操控界面输入启动指令等等。
可选地，在本发明实施例中，在步骤212之后，还可以包括：检测所述移动终端用户的视线在移动终端的显示屏中的位置变化信息。根据所述位置变化信息，调整所述操控界面在所述显示屏中的位置。
在根据视线选定了目标应用程序对象，并且在目标区域显示对应目标应用程序对象的操控界面之后，则可以继续检测移动终端用户的视线在移动终端的显示屏中的位置变化信息。具体的可以利用任何可用方式检测移动终端用户的视线在移动终端的显示屏中的位置变化信息，对此本发明实施例不加以限定。
此时，可以将移动终端用户的视线在移动终端的显示屏中的位置变化信息与操控界面在所述显示屏中的位置建立对应关系，并且根据位置变化信息，调整相应的操控界面在显示屏中的位置。具体的，位置变化信息与操控界面在显示屏中的位置之间的对应比例关系可以在本步骤之前，或者是本步骤之前的任一步骤之前根据需求进行设定，对此本发明实施例不加以限定。
在本发明实施例中，为了方便用户单手操作，还可以以一定时间间隔实时检测移动终端的倾斜方向，进而根据移动终端的倾斜方向调节操控界面在显示屏中的显示位置。
在本发明实施例中，可以利用陀螺仪、重力传感器、加速度传感器等设备检测移动终端的倾斜方向，对此本发明实施例不加以限定。在本发明实施例中，用以检测移动终端倾斜状态的设备可以与移动终端为一体，也可以独立于移动终端并通过有线或无线等方式与移动终端建立连接，对此本发明实施例也不加以限定。例如，利用陀螺仪检测移动终端倾斜方向的具体方式可以为设置陀螺仪的预设重力方向相对于陀螺仪是固定的，而且，当移动终端处于平衡状态时，预设重力方向与地心重力方向相同，当移动终端发生倾斜时，陀螺仪也会随之相应发生倾斜，那么此时陀螺仪可以检测出预设重力方向相对于地心重力方向的旋转方向，如果预设重力方向相对于地心重力方向顺时针旋转，表明移动终端向右倾斜，而如果预设重力方向相对于地心重力方向逆时针旋转，表明移动终端向左倾斜。在实际应用中，用户在正常使用移动终端的过程中，需要保证移动终端的正面朝上，因此移动终端的倾斜角度一般会小于90度。因此，在本发明实施例中，移动终端向右倾斜可以理解为移动终端向用户的右侧倾斜；移动终端向左倾斜可以理解为移动终端向用户的左侧倾斜。
在本发明实施例中，当然也可利用其他任何可用方式检测移动终端的倾斜方向，对此本发明实施例不加以限定。
在本发明实施例中，可以设置如果移动终端向右倾斜，则控制所述操控界面向右移动，而如果移动终端向左倾斜，则控制所述操控界面向左移动，当然也可以相反，对此本发明实施例不加以限定。
还可以设置控制操控界面左右移动的具体规则，例如可以设置操控界面匀速左右移动，那么当移动终端向右倾斜时，则控制操控界面向右匀速移动直至操控界面的右侧边界与移动终端显示屏的右侧边界重合或者是移动终端不再向右倾斜；当移动终端向左倾斜时，则控制操控界面向右匀速移动直至操控界面的左侧边界与移动终端显示屏的左侧边界重合或者是移动终端不再向左倾斜。当然，在本发明实施例中，还可以设置操控界面变速左右移动等等，具体的规则可以根据需求预设设定，对此本发明实施例不加以限定。
可选地，在本发明实施例中，在步骤212之后，还包括：接收所述移动终端用户输入的对所述操控界面的尺寸调整指令。按照所述尺寸调整指令，调整所述操控界面的尺寸。
在本发明实施例中，为了方便用户通过操作界面输入各种指令，满足用户个性化需求，用户可以根据需求调节操控界面的尺寸。具体的，可以设定用户通过触碰操作界面任一顶角达到第一预设时间之后再向操控界面内部或外部滑动以对操控界面缩小或放大，也可以设定通过触碰操作界面内部第二预设时间之后，利用至少两个指头在操控界面内部向着操控界面外部触碰滑动或者是向着触控界面内部触碰滑动以对操控界面放大或缩小等等，对此本发明实施例不加以限定。在本发明实施例中，为了方便用户区别当前用户的操作是否为输入尺寸调整指令，还可以在用户触碰操作界面任一顶角达到第一预设时间之后，或是触碰操作界面内部第二预设时间之后，调整操控界面边界颜色等方式提示用户当前可以调整操控界面的尺寸，对此本发明实施例不加以限定。
如前述，当用户按照预设方式输入尺寸调整指令时，则可以按照尺寸调整指令调整操控界面的尺寸。其中，对操控界面的尺寸调整不可能超出移动终端显示屏。
本发明实施例的应用程序控制方法，通过追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。从而可以方便用户通过视线以及单手操作控制移动终端的应用程序。而且，在本发明实施例中，还可以对用户进行虹膜验证，从而提高了安全性。另外，在本发明实施例中，可以根据移动终端的握持方式确定用户显示操控界面的目标区域，从而提高了操控界面展示方式的准确性。进一步地，在本发明实施例中，用户还可以调整操控界面的尺寸，以及根据移动终端的倾斜方向调整操控界面的位置，从而可以进一步提高用户的使用体验。
实施例三
详细介绍本发明实施例提供的一种移动终端。
参照图3，示出了本发明实施例中一种移动终端的结构示意图，移动终端300能实现上述的实施例一至实施例二中的一种应用程序控制方法的细节，并达到相同的效果。
本发明实施例的移动终端300包括：视线追踪模块301、视线位置坐标获取模块302、目标对象确定模块303、显示方式调整模块304、操控界面显示模块305。
下面分别详细介绍各模块的功能以及各模块之间的交互关系。
视线追踪模块301，用于追踪移动终端用户的视线。
视线位置坐标获取模块302，用于获取移动终端用户的视线在移动终端的显示屏中的位置坐标。
目标对象确定模块303，用于确定所述位置坐标对应的目标应用程序对象。
显示方式调整模块304，用于将所述目标应用程序对象调整为预设突出显示方式。
操控界面显示模块305，用于显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
参照图3A，在图3的基础上，在本发明实施例的另一实施例中，移动终端。还包括：
视线信息采集模块306，用于采集至少一个视线信息。
眼纹比对模块307，用于将由所述视线信息采集模块获取的所述至少一个视线信息中每个视线信息对应的眼纹与预先存储的眼纹进行比对。
视线信息确认模块308，用于将由所述眼纹比对模块获取的与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息。
触控操作检测模块309，用于检测移动终端用户在所述操控界面中的触控操作。
操控指令执行模块310，用于当检测到触控操作时，对所述目标应用程序对象执行与所述触控操作对应的操控指令。
视线变化检测模块311，用于检测所述移动终端用户的视线在移动终端的显示屏中的位置变化信息。
操控界面位置调整模块312，用于根据由所述视线变化检测模块获取的所述位置变化信息，调整所述操控界面在所述显示屏中的位置。
尺寸调整指令接收模块313，用于接收所述移动终端用户输入的对所述操控界面的尺寸调整指令。
尺寸调整模块314，用于按照由所述尺寸调整指令接收模块获取的所述尺寸调整指令，调整所述操控界面的尺寸。
优选地，参照图3B，在本发明实施例的另一实施例中，上述操控界面显示模块305，包括：
触控点个数信息获取子模块3051，用于获取所述移动终端的第一侧边和第二侧边上的触控点的个数信息。
握持方式确认子模块3052，用于基于由所述触控点个数信息获取子模块获取的所述第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式。
目标区域确认子模块3053，用于基于由所述握持方式确认子模块确定的所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域。
操控界面显示子模块3054，用于在由所述目标区域确认子模块确定的所述目标区域显示所述操控界面。
优选地，参照图3C，在本发明实施例的另一实施例中，上述目标区域确认子模块3053，包括：
第一目标区域确认单元30531，用于若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为所述目标区域。
第二目标区域确认单元30532，用于若所述握持方式为右手握持方式，则将显示屏中的离移动终端用户右手拇指的第二预设范围的区域确定为所述目标区域。
优选地，参照图3D，在本发明实施例的另一实施例中，上述显示方式调整模块304，包括：
第一显示方式调整子模块3041，用于若所述目标应用程序对象为目标应用程序图标，则将所述目标应用程序图标调整至预设的图标格式。
第二显示方式调整子模块3042，用于若所述目标应用程序对象为应用程序界面中的控件，则调整所述控件的背景至预设颜色或调整所述控件上的字体至预设颜色。
优选地，参照图3E，在本发明实施例的另一实施例中，上述视线位置坐标获取模块302，包括：
人脸图像采集子模块3021，用于控制所述前置摄像头采集所述移动终端用户的人脸图像。
瞳孔圆心确定子模块3022，用于确定由所述人脸图像采集子模块获取的所述人脸图像中移动终端用户的眼睛的瞳孔圆心。
虹膜边界确定子模块3023，用于基于由所述瞳孔圆心确定子模块获取的所述瞳孔圆心，确定虹膜边界。
法线确定子模块3024，用于基于由所述虹膜边界确定子模块获取的所述虹膜边界，确定视线的法线。
视线位置坐标获取子模块3025，用于将所述由所述法线确定子模块获取的法线投影到移动终端显示屏上的位置确定为所述视线在移动终端的显示屏中的位置坐标。
本发明实施例的移动终端，通过上述模块追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。从而可以方便用户通过视线以及单手操作控制移动终端的应用程序。而且，在本发明实施例中，还可以对用户进行虹膜验证，从而提高了安全性。另外，在本发明实施例中，可以根据移动终端的握持方式确定用户显示操控界面的目标区域，从而提高了操控界面展示方式的准确性。进一步地，在本发明实施例中，用户还可以调整操控界面的尺寸，以及根据移动终端的倾斜方向调整操控界面的位置，从而可以进一步提高用户的使用体验。
实施例四
详细介绍本发明实施例提供的一种移动终端。
参照图4，示出了本发明实施例中一种移动终端的框图。
图4所示的移动终端400包括：至少一个处理器401、存储器402、至少一个网络接口404、用户接口403和前置摄像头406。移动终端400中的各个组件通过总线***405耦合在一起。可理解，总线***405用于实现这些组件之间的连接通信。总线***405除包括数据总线之外，还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见，在图4中将各种总线都标为总线***405。
其中，用户接口403可以包括显示器、键盘或者点击设备(例如，鼠标，轨迹球(trackball)、触感板或者触摸屏等。
可以理解，本发明实施例中的存储器402可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，DRRAM)。本发明实施例描述的***和方法的存储器402旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中，存储器402存储了如下的元素，可执行模块或者数据结构，或者他们的子集，或者他们的扩展集：操作***4021和应用程序4022。
其中，操作***4021，包含各种***程序，例如框架层、核心库层、驱动层等，用于实现各种基础业务以及处理基于硬件的任务。应用程序4022，包含各种应用程序，例如媒体播放器(Media Player)、浏览器(Browser)等，用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序4022中。
在本发明实施例中，通过调用存储器402存储的程序或指令，具体的，可以是应用程序4022中存储的程序或指令，处理器401用于追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
上述本发明实施例揭示的方法可以应用于处理器401中，或者由处理器401实现。处理器401可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法的各步骤可以通过处理器401中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器401可以是通用处理器、数字信号处理器(Digital Signal Processor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(FieldProgrammable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器402，处理器401读取存储器402中的信息，结合其硬件完成上述方法的步骤。
可以理解的是，本发明实施例描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现，处理单元可以实现在一个或多个专用集成电路(Application Specific Integrated Circuits，ASIC)、数字信号处理器(Digital SignalProcessing，DSP)、数字信号处理设备(DSP Device，DSPD)、可编程逻辑设备(ProgrammableLogic Device，PLD)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现，可通过执行本发明实施例所述功能的模块(例如过程、函数等)来实现本发明实施例所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
可选地，作为另一个实施例，处理器401还用于：采集至少一个视线信息；将所述至少一个视线信息中每个视线信息对应的眼纹与预先存储的眼纹进行比对；将与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息。
可选地，作为另一个实施例，处理器401还用于：获取所述移动终端的第一侧边和第二侧边上的触控点的个数信息；基于所述第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式；基于所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域；在所述目标区域显示所述操控界面。
可选地，处理器401还用于：若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为所述目标区域；若所述握持方式为右手握持方式，则将显示屏中的离移动终端用户右手拇指的第二预设范围的区域确定为所述目标区域。
可选地，处理器401还用于：检测移动终端用户在所述操控界面中的触控操作；当检测到触控操作时，对所述目标应用程序对象执行与所述触控操作对应的操控指令。
可选地，处理器401还用于：若所述目标应用程序对象为目标应用程序图标，则将所述目标应用程序图标调整至预设的图标格式；若所述目标应用程序对象为应用程序界面中的控件，则调整所述控件的背景至预设颜色或调整所述控件上的字体至预设颜色。
可选地，处理器401还用于：检测所述移动终端用户的视线在移动终端的显示屏中的位置变化信息；根据所述位置变化信息，调整所述操控界面在所述显示屏中的位置。
可选地，处理器401还用于：接收所述移动终端用户输入的对所述操控界面的尺寸调整指令；按照所述尺寸调整指令，调整所述操控界面的尺寸。
可选地，处理器401还用于：控制所述前置摄像头采集所述移动终端用户的人脸图像；确定所述人脸图像中移动终端用户的眼睛的瞳孔圆心；基于所述瞳孔圆心，确定虹膜边界；基于所述虹膜边界，确定视线的法线；将所述法线投影到移动终端显示屏上的位置确定为所述视线在移动终端的显示屏中的位置坐标。
移动终端400能够实现前述实施例中移动终端实现的各个过程，为避免重复，这里不再赘述。
本发明实施例的移动终端，通过上述模块追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。从而可以方便用户通过视线以及单手操作控制移动终端的应用程序。而且，在本发明实施例中，还可以对用户进行虹膜验证，从而提高了安全性。另外，在本发明实施例中，可以根据移动终端的握持方式确定用户显示操控界面的目标区域，从而提高了操控界面展示方式的准确性。进一步地，在本发明实施例中，用户还可以调整操控界面的尺寸，以及根据移动终端的倾斜方向调整操控界面的位置，从而可以进一步提高用户的使用体验。
实施例五
图5是本发明另一个实施例的移动终端的结构示意图。具体地，图5中的移动终端可以为手机、平板电脑、个人数字助理(Personal Digital Assistant，PDA)、或车载电脑等。
图5中的移动终端包括射频(Radio Frequency，RF)电路510、存储器520、输入单元530、显示单元540、处理器560、音频电路570、WiFi(Wireless Fidelity)模块580、电源590和前置摄像头550。
其中，输入单元530可用于接收用户输入的数字或字符信息，以及产生与移动终端的用户设置以及功能控制有关的信号输入。具体地，本发明实施例中，该输入单元530可以包括触控面板531。触控面板531，也称为触摸屏，可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板531上的操作)，并根据预先设定的程式驱动相应的连接装置。可选的，触控面板531可包括触摸检测装置和触摸控制器两个部分。其中，触摸检测装置检测用户的触摸方位，并检测触摸操作带来的信号，将信号传送给触摸控制器；触摸控制器从触摸检测装置上接收触摸信息，并将它转换成触点坐标，再送给该处理器560，并能接收处理器560发来的命令并加以执行。此外，可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板531。除了触控面板531，输入单元530还可以包括其他输入设备532，其他输入设备532可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中，显示单元540可用于显示由用户输入的信息或提供给用户的信息以及移动终端的各种菜单界面。显示单元540可包括显示面板541，可选的，可以采用LCD或有机发光二极管(Organic Light-Emitting Diode，OLED)等形式来配置显示面板541。
应注意，触控面板531可以覆盖显示面板541，形成触摸显示屏，当该触摸显示屏检测到在其上或附近的触摸操作后，传送给处理器560以确定触摸事件的类型，随后处理器560根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。
触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定，可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件，例如，设置按钮、界面编号、滚动条、电话本图标等目标应用程序对象等。
其中，处理器560是移动终端的控制中心，利用各种接口和线路连接整个手机的各个部分，通过运行或执行存储在第一存储器521内的软件程序和/或模块，以及调用存储在第二存储器522内的数据，执行移动终端的各种功能和处理数据，从而对移动终端进行整体监控。可选的，处理器560可包括一个或多个处理单元。
在本发明实施例中，通过调用存储该第一存储器521内的软件程序和/或模块和/或该第二存储器522内的数据，处理器560用于追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
可选地，作为另一个实施例，处理器560还用于：采集至少一个视线信息；将所述至少一个视线信息中每个视线信息对应的眼纹与预先存储的眼纹进行比对；将与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息。
可选地，作为另一个实施例，处理器560还用于：获取所述移动终端的第一侧边和第二侧边上的触控点的个数信息；基于所述第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式；基于所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域；在所述目标区域显示所述操控界面。
可选地，处理器560还用于：若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为所述目标区域；若所述握持方式为右手握持方式，则将显示屏中的离移动终端用户右手拇指的第二预设范围的区域确定为所述目标区域。
可选地，处理器560还用于：检测移动终端用户在所述操控界面中的触控操作；当检测到触控操作时，对所述目标应用程序对象执行与所述触控操作对应的操控指令。
可选地，处理器560还用于：若所述目标应用程序对象为目标应用程序图标，则将所述目标应用程序图标调整至预设的图标格式；若所述目标应用程序对象为应用程序界面中的控件，则调整所述控件的背景至预设颜色或调整所述控件上的字体至预设颜色。
可选地，处理器560还用于：检测所述移动终端用户的视线在移动终端的显示屏中的位置变化信息；根据所述位置变化信息，调整所述操控界面在所述显示屏中的位置。
可选地，处理器560还用于：接收所述移动终端用户输入的对所述操控界面的尺寸调整指令；按照所述尺寸调整指令，调整所述操控界面的尺寸。
可选地，处理器560还用于：控制所述前置摄像头采集所述移动终端用户的人脸图像；确定所述人脸图像中移动终端用户的眼睛的瞳孔圆心；基于所述瞳孔圆心，确定虹膜边界；基于所述虹膜边界，确定视线的法线；将所述法线投影到移动终端显示屏上的位置确定为所述视线在移动终端的显示屏中的位置坐标。
可见，本发明实施例的移动终端，通过上述模块追踪移动终端用户的视线；获取移动终端用户的视线在移动终端的显示屏中的位置坐标；确定所述位置坐标对应的目标应用程序对象；将所述目标应用程序对象调整为预设突出显示方式；显示一操控界面；其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。从而可以方便用户通过视线以及单手操作控制移动终端的应用程序。而且，在本发明实施例中，还可以对用户进行虹膜验证，从而提高了安全性。另外，在本发明实施例中，可以根据移动终端的握持方式确定用户显示操控界面的目标区域，从而提高了操控界面展示方式的准确性。进一步地，在本发明实施例中，用户还可以调整操控界面的尺寸，以及根据移动终端的倾斜方向调整操控界面的位置，从而可以进一步提高用户的使用体验。
本领域普通技术人员可以意识到，结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的***、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。
在本申请所提供的实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个***，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外，在本发明各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述，仅为本发明的具体实施方式，但本发明的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本发明揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本发明的保护范围之内。因此，本发明的保护范围应以权利要求的保护范围为准。

Claims (18)

1.一种应用程序控制方法，应用于包括前置摄像头的移动终端，其特征在于，所述方法包括：
追踪移动终端用户的视线；
获取移动终端用户的视线在移动终端的显示屏中的位置坐标；
确定所述位置坐标对应的目标应用程序对象；
将所述目标应用程序对象调整为预设突出显示方式；
显示一操控界面；
其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
2.根据权利要求1所述的方法，其特征在于，所述追踪移动终端用户的视线的步骤之前，所述方法还包括：
采集至少一个视线信息；
将所述至少一个视线信息中每个视线信息对应的眼纹与预先存储的眼纹进行比对；
将与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息。
3.根据权利要求1所述的方法，其特征在于，所述显示一操控界面的步骤，包括：
获取所述移动终端的第一侧边和第二侧边上的触控点的个数信息；
基于所述第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式；
基于所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域；
在所述目标区域显示所述操控界面。
4.根据权利要求3所述的方法，其特征在于，所述基于所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域的步骤，包括：
若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为所述目标区域；
若所述握持方式为右手握持方式，则将显示屏中的离移动终端用户右手拇指的第二预设范围的区域确定为所述目标区域。
5.根据权利要求1所述的方法，其特征在于，所述显示一操控界面的步骤之后，所述方法还包括：
检测移动终端用户在所述操控界面中的触控操作；
当检测到触控操作时，对所述目标应用程序对象执行与所述触控操作对应的操控指令。
6.根据权利要求1所述的方法，其特征在于，所述将所述目标应用程序对象调整为预设突出显示方式的步骤，包括：
若所述目标应用程序对象为目标应用程序图标，则将所述目标应用程序图标调整至预设的图标格式；
若所述目标应用程序对象为应用程序界面中的控件，则调整所述控件的背景至预设颜色或调整所述控件上的字体至预设颜色。
7.根据权利要求1所述的方法，其特征在于，所述显示一操控界面的步骤之后，所述方法还包括：
检测所述移动终端用户的视线在移动终端的显示屏中的位置变化信息；
根据所述位置变化信息，调整所述操控界面在所述显示屏中的位置。
8.根据权利要求1所述的方法，其特征在于，所述显示一操控界面的步骤之后，所述方法还包括：
接收所述移动终端用户输入的对所述操控界面的尺寸调整指令；
按照所述尺寸调整指令，调整所述操控界面的尺寸。
9.根据权利要求1所述的方法，其特征在于，所述获取移动终端用户的视线在移动终端的显示屏中的位置坐标的步骤，包括：
控制所述前置摄像头采集所述移动终端用户的人脸图像；
确定所述人脸图像中移动终端用户的眼睛的瞳孔圆心；
基于所述瞳孔圆心，确定虹膜边界；
基于所述虹膜边界，确定视线的法线；
将所述法线投影到移动终端显示屏上的位置确定为所述视线在移动终端的显示屏中的位置坐标。
10.一种移动终端，包括前置摄像头，其特征在于，所述移动终端还包括：
视线追踪模块，用于追踪移动终端用户的视线；
视线位置坐标获取模块，用于获取移动终端用户的视线在移动终端的显示屏中的位置坐标；
目标对象确定模块，用于确定所述位置坐标对应的目标应用程序对象；
显示方式调整模块，用于将所述目标应用程序对象调整为预设突出显示方式；
操控界面显示模块，用于显示一操控界面；
其中，所述操控界面用于接收所述移动终端用户输入的针对所述目标应用程序对象的操控指令。
11.根据权利要求10所述的移动终端，其特征在于，还包括：
视线信息采集模块，用于采集至少一个视线信息；
眼纹比对模块，用于将由所述视线信息采集模块获取的所述至少一个视线信息中每个视线信息对应的眼纹与预先存储的眼纹进行比对；
视线信息确认模块，用于将由所述眼纹比对模块获取的与预先存储的眼纹匹配的眼纹对应的视线信息确定为移动终端用户的视线信息。
12.根据权利要求10所述的移动终端，其特征在于，所述操控界面显示模块，包括：
触控点个数信息获取子模块，用于获取所述移动终端的第一侧边和第二侧边上的触控点的个数信息；
握持方式确认子模块，用于基于由所述触控点个数信息获取子模块获取的所述第一侧边和第二侧边上的触控点的个数信息，确定移动终端的握持方式；
目标区域确认子模块，用于基于由所述握持方式确认子模块确定的所述握持方式，确定移动终端的显示屏中所述操控界面待显示的目标区域；
操控界面显示子模块，用于在由所述目标区域确认子模块确定的所述目标区域显示所述操控界面。
13.根据权利要求12所述的移动终端，其特征在于，所述目标区域确认子模块，包括：
第一目标区域确认单元，用于若所述握持方式为左手握持方式，则将显示屏中距离移动终端用户左手拇指的第一预设范围的区域确定为所述目标区域；
第二目标区域确认单元，用于若所述握持方式为右手握持方式，则将显示屏中的离移动终端用户右手拇指的第二预设范围的区域确定为所述目标区域。
14.根据权利要求10所述的移动终端，其特征在于，还包括：
触控操作检测模块，用于检测移动终端用户在所述操控界面中的触控操作；
操控指令执行模块，用于当检测到触控操作时，对所述目标应用程序对象执行与所述触控操作对应的操控指令。
15.根据权利要求10所述的移动终端，其特征在于，所述显示方式调整模块，包括：
第一显示方式调整子模块，用于若所述目标应用程序对象为目标应用程序图标，则将所述目标应用程序图标调整至预设的图标格式；
第二显示方式调整子模块，用于若所述目标应用程序对象为应用程序界面中的控件，则调整所述控件的背景至预设颜色或调整所述控件上的字体至预设颜色。
16.根据权利要求10所述的移动终端，其特征在于，还包括：
视线变化检测模块，用于检测所述移动终端用户的视线在移动终端的显示屏中的位置变化信息；
操控界面位置调整模块，用于根据由所述视线变化检测模块获取的所述位置变化信息，调整所述操控界面在所述显示屏中的位置。
17.根据权利要求10所述的移动终端，其特征在于，还包括：
尺寸调整指令接收模块，用于接收所述移动终端用户输入的对所述操控界面的尺寸调整指令；
尺寸调整模块，用于按照由所述尺寸调整指令接收模块获取的所述尺寸调整指令，调整所述操控界面的尺寸。
18.根据权利要求10所述的移动终端，其特征在于，所述视线位置坐标获取模块，包括：
人脸图像采集子模块，用于控制所述前置摄像头采集所述移动终端用户的人脸图像；
瞳孔圆心确定子模块，用于确定由所述人脸图像采集子模块获取的所述人脸图像中移动终端用户的眼睛的瞳孔圆心；
虹膜边界确定子模块，用于基于由所述瞳孔圆心确定子模块获取的所述瞳孔圆心，确定虹膜边界；
法线确定子模块，用于基于由所述虹膜边界确定子模块获取的所述虹膜边界，确定视线的法线；
视线位置坐标获取子模块，用于将所述由所述法线确定子模块获取的法线投影到移动终端显示屏上的位置确定为所述视线在移动终端的显示屏中的位置坐标。
CN201610931807.6A 2016-10-31 2016-10-31 一种应用程序控制方法及移动终端 Pending CN106527693A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201610931807.6A CN106527693A (zh) 2016-10-31 2016-10-31 一种应用程序控制方法及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610931807.6A CN106527693A (zh) 2016-10-31 2016-10-31 一种应用程序控制方法及移动终端

Publications (1)

Publication Number Publication Date
CN106527693A true CN106527693A (zh) 2017-03-22

Family

ID=58291657

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610931807.6A Pending CN106527693A (zh) 2016-10-31 2016-10-31 一种应用程序控制方法及移动终端

Country Status (1)

Country Link
CN (1) CN106527693A (zh)

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107562305A (zh) * 2017-08-01 2018-01-09 努比亚技术有限公司 一种动态图标的设置方法、终端及计算机可读存储介质
CN107765851A (zh) * 2017-09-28 2018-03-06 努比亚技术有限公司 基于虹膜识别的应用程序处理方法、终端及存储介质
CN108111649A (zh) * 2017-12-25 2018-06-01 广东欧珀移动通信有限公司 电子装置、拍照方法及相关产品
CN108289151A (zh) * 2018-01-29 2018-07-17 维沃移动通信有限公司 一种应用程序的操作方法及移动终端
CN108920061A (zh) * 2018-06-26 2018-11-30 沈文策 一种信息标识的展示方法、装置及移动终端
CN109101110A (zh) * 2018-08-10 2018-12-28 北京七鑫易维信息技术有限公司 一种操作指令执行方法、装置、用户终端及存储介质
CN109246292A (zh) * 2018-08-17 2019-01-18 珠海格力电器股份有限公司 一种终端桌面图标的移动方法及装置
CN110231963A (zh) * 2019-06-12 2019-09-13 Oppo广东移动通信有限公司 应用控制方法及相关装置
CN110471587A (zh) * 2019-07-17 2019-11-19 深圳传音控股股份有限公司 交互方法、交互设备、终端及计算机可读存储介质
CN110764608A (zh) * 2018-07-26 2020-02-07 中兴通讯股份有限公司 一种调整多媒体信息的输出参数的方法、终端和存储介质
CN110928407A (zh) * 2019-10-30 2020-03-27 维沃移动通信有限公司 信息显示方法及装置
CN111077994A (zh) * 2019-06-09 2020-04-28 广东小天才科技有限公司 一种点读场景下显示屏的控制方法及点读机设备
CN111104035A (zh) * 2019-11-08 2020-05-05 芯海科技（深圳）股份有限公司 显示界面控制方法、装置、设备及计算机可读存储介质
CN111199734A (zh) * 2018-11-20 2020-05-26 奥迪股份公司 移动终端的控制方法及装置、计算机设备和可读存储介质
CN112817441A (zh) * 2021-01-14 2021-05-18 深圳卡多希科技有限公司 一种按键与人眼识别结合的方法和装置
CN113110770A (zh) * 2021-03-31 2021-07-13 联想(北京)有限公司 一种控制方法及装置
CN114035718A (zh) * 2021-09-26 2022-02-11 岚图汽车科技有限公司 电子终端操作方法、装置、电子设备及存储介质
WO2023078548A1 (en) * 2021-11-03 2023-05-11 Telefonaktiebolaget Lm Ericsson (Publ) Operation of a user display interface when in scaled down mode
CN117472262A (zh) * 2023-12-28 2024-01-30 荣耀终端有限公司 交互方法和电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050175218A1 (en) * 2003-11-14 2005-08-11 Roel Vertegaal Method and apparatus for calibration-free eye tracking using multiple glints or surface reflections
CN102081503A (zh) * 2011-01-25 2011-06-01 汉王科技股份有限公司 基于视线追踪自动翻页的电子阅读器及其方法
CN104731339A (zh) * 2015-03-31 2015-06-24 努比亚技术有限公司 移动终端的握持方式识别方法及装置
CN105631280A (zh) * 2015-07-28 2016-06-01 宇龙计算机通信科技(深圳)有限公司 图标控制方法、图标控制装置和终端
CN106020454A (zh) * 2016-05-11 2016-10-12 惠州Tcl移动通信有限公司 一种基于眼控技术的智能终端触摸屏操作方法及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050175218A1 (en) * 2003-11-14 2005-08-11 Roel Vertegaal Method and apparatus for calibration-free eye tracking using multiple glints or surface reflections
CN102081503A (zh) * 2011-01-25 2011-06-01 汉王科技股份有限公司 基于视线追踪自动翻页的电子阅读器及其方法
CN104731339A (zh) * 2015-03-31 2015-06-24 努比亚技术有限公司 移动终端的握持方式识别方法及装置
CN105631280A (zh) * 2015-07-28 2016-06-01 宇龙计算机通信科技(深圳)有限公司 图标控制方法、图标控制装置和终端
CN106020454A (zh) * 2016-05-11 2016-10-12 惠州Tcl移动通信有限公司 一种基于眼控技术的智能终端触摸屏操作方法及***

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107562305A (zh) * 2017-08-01 2018-01-09 努比亚技术有限公司 一种动态图标的设置方法、终端及计算机可读存储介质
CN107562305B (zh) * 2017-08-01 2020-11-24 努比亚技术有限公司 一种动态图标的设置方法、终端及计算机可读存储介质
CN107765851A (zh) * 2017-09-28 2018-03-06 努比亚技术有限公司 基于虹膜识别的应用程序处理方法、终端及存储介质
CN108111649A (zh) * 2017-12-25 2018-06-01 广东欧珀移动通信有限公司 电子装置、拍照方法及相关产品
CN108289151A (zh) * 2018-01-29 2018-07-17 维沃移动通信有限公司 一种应用程序的操作方法及移动终端
CN108920061A (zh) * 2018-06-26 2018-11-30 沈文策 一种信息标识的展示方法、装置及移动终端
CN110764608A (zh) * 2018-07-26 2020-02-07 中兴通讯股份有限公司 一种调整多媒体信息的输出参数的方法、终端和存储介质
CN109101110A (zh) * 2018-08-10 2018-12-28 北京七鑫易维信息技术有限公司 一种操作指令执行方法、装置、用户终端及存储介质
CN109246292B (zh) * 2018-08-17 2020-01-17 珠海格力电器股份有限公司 一种终端桌面图标的移动方法及装置
CN109246292A (zh) * 2018-08-17 2019-01-18 珠海格力电器股份有限公司 一种终端桌面图标的移动方法及装置
CN111199734B (zh) * 2018-11-20 2024-03-12 奥迪股份公司 移动终端的控制方法及装置、计算机设备和可读存储介质
CN111199734A (zh) * 2018-11-20 2020-05-26 奥迪股份公司 移动终端的控制方法及装置、计算机设备和可读存储介质
CN111077994A (zh) * 2019-06-09 2020-04-28 广东小天才科技有限公司 一种点读场景下显示屏的控制方法及点读机设备
CN110231963A (zh) * 2019-06-12 2019-09-13 Oppo广东移动通信有限公司 应用控制方法及相关装置
CN110471587A (zh) * 2019-07-17 2019-11-19 深圳传音控股股份有限公司 交互方法、交互设备、终端及计算机可读存储介质
CN110928407A (zh) * 2019-10-30 2020-03-27 维沃移动通信有限公司 信息显示方法及装置
CN111104035A (zh) * 2019-11-08 2020-05-05 芯海科技（深圳）股份有限公司 显示界面控制方法、装置、设备及计算机可读存储介质
CN112817441A (zh) * 2021-01-14 2021-05-18 深圳卡多希科技有限公司 一种按键与人眼识别结合的方法和装置
CN113110770A (zh) * 2021-03-31 2021-07-13 联想(北京)有限公司 一种控制方法及装置
CN114035718A (zh) * 2021-09-26 2022-02-11 岚图汽车科技有限公司 电子终端操作方法、装置、电子设备及存储介质
WO2023078548A1 (en) * 2021-11-03 2023-05-11 Telefonaktiebolaget Lm Ericsson (Publ) Operation of a user display interface when in scaled down mode
CN117472262A (zh) * 2023-12-28 2024-01-30 荣耀终端有限公司 交互方法和电子设备

Similar Documents

Publication Publication Date Title
CN106527693A (zh) 一种应用程序控制方法及移动终端
US20220319100A1 (en) User interfaces simulated depth effects
US9360965B2 (en) Combined touch input and offset non-touch gesture
US9111076B2 (en) Mobile terminal and control method thereof
KR101542625B1 (ko) 제스처를 수행함으로써 사용자 인터페이스 내 오브젝트를 선택하기 위한 방법 및 장치
CN105446673B (zh) 屏幕显示的方法及终端设备
CN106454135B (zh) 一种拍照提醒方法及移动终端
CN104932809B (zh) 用于控制显示面板的装置和方法
US10514842B2 (en) Input techniques for virtual reality headset devices with front touch screens
CN106231178B (zh) 一种自拍方法和移动终端
WO2015196703A1 (zh) 一种应用程序图标显示方法及装置
JP2009140368A (ja) 入力装置、表示装置、入力方法、表示方法及びプログラム
CN106713764A (zh) 一种拍照方法及移动终端
US11823558B2 (en) Generating tactile output sequences associated with an object
US10754446B2 (en) Information processing apparatus and information processing method
CN106911897B (zh) 一种拍摄焦点的确定方法及移动终端
CN108984092A (zh) 设备控制方法、装置、存储介质及电子设备
US9958946B2 (en) Switching input rails without a release command in a natural user interface
US20180260031A1 (en) Method for controlling distribution of multiple sub-screens and device using the same
WO2020055613A1 (en) User interfaces for simulated depth effects
US10599326B2 (en) Eye motion and touchscreen gestures
KR101503159B1 (ko) 시선의 위치를 감지하여 터치스크린을 제어하는 방법
CN118012303A (zh) 基于肢体动作识别的Web端用户界面交互***和方法
CN109753143A (zh) 一种优化光标位置的方法和装置
KR20140077610A (ko) 휴대용 단말 장치 및 그의 멀티 터치 동작 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170322

RJ01 Rejection of invention patent application after publication