CN106502378A - 一种电子设备界面的控制方法及电子设备 - Google Patents

一种电子设备界面的控制方法及电子设备 Download PDF

Info

Publication number
CN106502378A
CN106502378A CN201610811405.2A CN201610811405A CN106502378A CN 106502378 A CN106502378 A CN 106502378A CN 201610811405 A CN201610811405 A CN 201610811405A CN 106502378 A CN106502378 A CN 106502378A
Authority
CN
China
Prior art keywords
user
information
sight line
electronic equipment
control instruction
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201610811405.2A
Other languages
English (en)
Inventor
刘均
刘新
宋朝忠
欧阳张鹏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Launch Technology Co Ltd
Original Assignee
Shenzhen Launch Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Launch Technology Co Ltd filed Critical Shenzhen Launch Technology Co Ltd
Priority to CN201610811405.2A priority Critical patent/CN106502378A/zh
Priority to PCT/CN2016/111287 priority patent/WO2018045669A1/zh
Publication of CN106502378A publication Critical patent/CN106502378A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013Eye tracking input arrangements

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

本申请实施例公开了一种电子设备界面的控制方法及电子设备。一种电子设备界面的控制方法包括:通过电子设备的视线采集装置获取用户视线;对所述用户视线进行分析,得到所述用户视线的变化轨迹信息;根据所述用户视线的变化轨迹信息生成控制指令;根据所述控制指令对所述电子设备当前显示界面进行控制。本发明实施例的技术方案便于用户在不方便用手操作电子设备的情况下,用眼睛实现对电子设备界面的控制,给用户的使用带来便利,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。

Description

一种电子设备界面的控制方法及电子设备
技术领域
本发明涉及电子设备控制领域,特别涉及一种电子设备界面的控制方法及电子设备。
背景技术
随着科技的迅猛发展,电子设备在人们的生活中已经越来越普及,例如智能手机、平板电脑、智能手表等。人们可以通过这类电子设备在日常生活中获取信息,例如查询交通信息、天气信息、娱乐设施信息、新闻资讯等。因此,对于这类产品的应用,已经渗透到了人们生活中的方方面面。
目前,对于这类产品界面的控制方式基本上为触摸式,需要用户用手触摸其屏幕进行操作,当用户双手拿着东西或者单手操作不稳的情况下,虽然已经实现了语音控制功能,但这种功能的应用也受到了限制,例如在公共场合,周围环境较为嘈杂时,语音控制功能的效果并不理想,导致了用户在这类情况下对电子设备的操作不便。
发明内容
本发明实施例提供了一种电子设备界面的控制方法及电子设备,以期提供一种当用户双手拿着东西或者单手操作不稳时,能用眼睛控制电子设备界面的方法,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
本发明实施例第一方面提供了一种电子设备界面的控制方法,包括:
通过电子设备的视线采集装置获取用户视线;
对所述用户视线进行分析,得到所述用户视线的变化轨迹信息;
根据所述用户视线的变化轨迹信息生成控制指令;
根据所述控制指令对所述电子设备当前显示界面进行控制。
结合本发明实施例第一方面,在本发明实施例第一方面的第一种实现方式中,所述通过电子设备视线采集装置获取用户视线,包括:采用所述电子设备的前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向,根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
结合本发明实施例第一方面,在本发明实施例第一方面的第二种实现方式中,所述通过电子设备视线采集装置获取用户视线,包括:采用红外摄像头,通过所述用户眼睛的瞳孔反射的红外光来获取所述用户视线。
结合本发明实施例第一方面或本发明实施例第一方面的第一种至第二种中的任一种实现方式,在本发明实施例第一方面的第三种实现方式中,所述用户视线的变化轨迹信息包括以下至少一种:
左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。
结合本发明实施例第一方面或本发明实施例第一方面的第一种至第三种中的任一种实现方式,在本发明实施例第一方面的第四种实现方式中,所述控制指令包括以下至少一种:
左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。
本发明实施例第二方面提供了一种电子设备,包括:
获取单元,用于通过电子设备的视线采集装置获取用户视线;
分析单元,用于对所述用户视线进行分析,得到所述用户视线的变化轨迹信息;
指令生成单元,用于根据所述用户视线的变化轨迹信息生成控制指令;
执行单元,用于根据所述控制指令对所述电子设备当前显示界面进行控制。
结合本发明实施例第二方面,在本发明实施例第二方面的第一种实现方式中,所述获取单元还包括:
追踪识别单元,用于采用所述电子设备的前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向;
分析获取单元,用于根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
结合本发明实施例第二方面,在本发明实施例第二方面的第二种实现方式中,所述获取单元具体用于,采用红外摄像头,通过所述用户眼睛的瞳孔反射的红外光来获取所述用户视线。
结合本发明实施例第二方面或本发明实施例第二方面的第一种至第二种中的任一种实现方式,在本发明实施例第二方面的第三种实现方式中,所述用户视线的变化轨迹信息包括以下至少一种:
左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。
结合本发明实施例第二方面或本发明实施例第二方面的第一种至第三种中的任一种实现方式,在本发明实施例第二方面的第四种实现方式中,所述控制指令包括以下至少一种:
左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。
可以看出,本实施例的方案简化了用户对电子设备的操作方法,当用户双手拿着东西或者单手操作不稳时,能用眼睛对电子设备界面进行控制,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
附图说明
为了更清楚地说明本发明实施例中的技术方案,下面将对实施例中所需使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本发明实施例提供的一种电子设备界面的控制方法流程图;
图2-a为本发明实施例提供一种场景演示流程图;
图2-b为本发明实施例提供的一种场景示意效果图;
图3为本发明实施例提供的一种电子设备结构示意图;
图4为本发明实施例提供的一种获取单元的结构示意图;
图5为本发明实施例提供的另一种电子设备结构示意图。
具体实施方式
本发明实施例提供了一种电子设备界面的控制方法及电子设备,以期提供一种当用户双手拿着东西或者单手操作不稳时,能用眼睛控制电子设备界面的方法,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
本发明说明书、权利要求书和附图中出现的术语“包括”和“具有”以及它们任何变形,意图在于覆盖不排他的包含。例如包含了一系列步骤或单元的过程、方法、***、产品或设备没有限定于已列出的步骤或单元,而是可选地还包括没有列出的步骤或单元,或可选地还包括对于这些过程、方法、产品或设备固有的其它步骤或单元。
下面首先结合相关附图来举例介绍下本申请实施例方案可能用到的流程图。
具体参见图1所示,图1为本发明实施例提供的一种电子设备界面的控制方法流程图,具体包括:
步骤S101、通过电子设备的视线采集装置获取用户视线。
其中,本发明实施例中提及的电子设备例如可为手机、平板电脑、掌上电脑、智能手表或其它移动终端。
其中,本发明实施例中提及的视线采集装置例如可为前置摄像头、红外摄像头、传感器等。
可选的,采用所述电子设备的前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向,根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
可选的,采用红外摄像头和前置摄像头,通过前置摄像头来搜集所述用户眼睛的瞳孔反射的由红外摄像头发出的红外光,从而获取所述用户视线。
步骤S102、对所述用户视线进行分析,得到所述用户视线的变化轨迹信息。
其中,所述用户视线的变化轨迹信息可以包括以下至少一种:
左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。可以理解,所述用户视线变化轨迹信息不限定于已列出的这几种。
其中,至少一次眨眼信息可以包括一次眨眼信息和两次眨眼信息;当一次眨眼之后的停顿时间大于时间阈值X时(X的值例如可为1s、1.5s、2s),判断眨眼动作结束,***保存一次眨眼信息;当连续眨眼次数为两次且第二次眨眼之后的停顿时间大于时间阈值X时,判断眨眼动作结束,***保存两次眨眼信息。
其中,所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值Y时(Y的值例如可为1s、1.5s、2s),判断为固定投射动作,***保存固定投射信息。
步骤S103、根据所述用户视线的变化轨迹信息生成控制指令。
其中,所述控制指令可以包括以下至少一种:左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。可以理解,所述控制指令不限定于已列出的这几种。
优选的,用户可以根据自己的使用习惯,在电子设备上预设控制指令库,不同的视线变化轨迹对应于不同的控制指令。当用户视线发生变化时,可以在预设的控制指令库内,根据用户视线的变化轨迹信息,调用相应的控制指令。
可选的,电子设备自带一个控制指令库,特定的视线变化轨迹信息对应于特定的控制指令。用户可以根据说明,用特定的视线变化轨迹信息,来调用相应的控制指令。
例如,当得到的用户视线变化轨迹信息为左移信息时,生成界面左滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息时,生成界面右滑的控制指令;
当得到的用户视线变化轨迹信息为上移信息时,生成界面上滑的控制指令;
当得到的用户视线变化轨迹信息为下移信息时,生成界面下滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信息时,生成界面放大的指令;其中,右移信息和上移信息可以同时得到;左移信息和下移信息可以同时得到;
当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信息时,生成界面缩小的控制指令;其中,右移信息和下移信息可以同时得到;左移信息和上移信息可以同时得到;
当得到的用户视线变化轨迹信息为一次眨眼信息时,生成点击控制指令;
当得到的用户视线变化轨迹信息为两次眨眼信息时,生成截图控制指令;
当得到的用户视线变化轨迹信息为固定投射信息时,生成长按控制指令;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值;
当得到的用户视线变化轨迹信息为固定投射信息和移动信息时,生成拖拽指令;其中移动信息可以包括:左移信息、右移信息、上移信息、下移信息,生成的拖拽指令包含的拖拽方向指令与移动信息包含的方向信息相对应。
以上根据用户视线变化轨迹信息产生的相应的控制指令为优选方案,但是不限定于此方案,也可以有其它的方案。
又例如,当得到的用户视线变化轨迹信息为左移信息时,生成界面右滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息时,生成界面左滑的控制指令;
当得到的用户视线变化轨迹信息为上移信息时,生成界面下滑的控制指令;
当得到的用户视线变化轨迹信息为下移信息时,生成界面上滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信息时,生成界面缩小的指令;其中,右移信息和上移信息可以同时得到;左移信息和下移信息可以同时得到;
当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信息时,生成界面放大的控制指令;其中,右移信息和下移信息可以同时得到;左移信息和上移信息可以同时得到。
步骤S104、根据所述控制指令对所述电子设备当前显示界面进行控制。
可选的,当所述控制指令为左滑时,所述电子设备的当前显示界面往左滑;
当所述控制指令为右滑时,所述电子设备的当前显示界面往右滑;
当所述控制指令为上滑时,所述电子设备的当前显示界面往上滑;
当所述控制指令为下滑时,所述电子设备的当前显示界面往下滑;
当所述控制指令为放大时,所述电子设备的当前显示界面被放大;
当所述控制指令为缩小时,所述电子设备的当前显示界面被缩小;
当所述控制指令为点击时,所述用户视线固定投射在所述当前显示界面的预设区域被点击;
当所述控制指令为截图时,所述电子设备的当前显示界面被截图,并保存截图结果;
当所述控制指令为长按时,所述用户视线固定投射在所述当前显示界面的预设区域被长按;
当所述控制指令为拖拽时,所述用户视线固定投射在所述当前显示界面的预设区域被拖拽;其中,此预设区域内可包含功能图标。
可以看出,本实施例的方案简化了用户对电子设备的操作方法。当用户双手拿着东西或者单手操作不稳时,能用眼睛对电子设备界面进行控制,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
为了更好地理解和实施本发明实施例的上述方法以及使用效果,下面结合具体的应用场景来进行举例说明。
请参见图2-a和图2-b,图2-a为本发明实施例提供一种场景演示流程图;图2-b为本发明实施例提供的一种场景示意效果图,以手机为例。其中,210为手机的前置摄像头,220为用户的眼睛。
其中,如图2-a所示,当用户需要手机显示解锁界面时,该过程可以包括以下步骤:
步骤S201、用户按下电源键,手机屏幕点亮,当前显示界面显示“滑动来解锁”;如图2-b用户眼睛移动之前的手机显示界面所示;
步骤S202、用户眼睛盯着手机屏幕任一位置从左往右看;
步骤S203、手机的前置摄像头获取用户视线;
步骤S204、对用户视线进行分析,得到用户视线的变化轨迹信息为右移信息;
步骤S205、根据得到的右移信息生成右移控制指令,手机屏幕右移,显示“请输入密码”的解锁界面;如图2-b用户眼睛移动之后的手机显示界面所示。
可以看出,本实施例的方案简化了用户对电子设备的操作方法。当用户双手拿着东西或者单手操作不稳时,能用眼睛对电子设备界面进行控制,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
为了更好地实施本发明实施例的上述方案,本发明还对应提供了一种电子设备,如图3示出的本发明的一个实施例提供的一种电子设备结构示意图,电子设备300可以包括:获取单元310、分析单元320、指令生成单元330和执行单元340。
其中,获取单元310,用于通过电子设备的视线采集装置获取用户视线。
具体地,如图4示出的本发明实施例提供的一种获取单元的结构示意图,获取单元310包括:追踪识别单元3110和分析获取单元3120,其中,
追踪识别单元3110,用于采用所述电子设备的前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向;
分析获取单元3120,用于根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
可选的,所述获取单元具体用于,采用红外摄像头和前置摄像头,通过前置摄像头来搜集所述用户眼睛的瞳孔反射的由红外摄像头发出的红外光,从而获取所述用户视线。
分析单元320,用于对所述用户视线进行分析,得到所述用户视线的变化轨迹信息。
其中,所述用户视线的变化轨迹信息可以包括以下至少一种:左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。可以理解,所述用户视线的变化轨迹信息不限定于已列出的这几种。
其中,至少一次眨眼信息可以包括一次眨眼信息和两次眨眼信息;当一次眨眼之后的停顿时间大于时间阈值X时(X的值例如可为1s、1.5s、2s),判断眨眼动作结束,***保存一次眨眼信息;当连续眨眼次数为两次且第二次眨眼之后的停顿时间大于时间阈值X时,判断眨眼动作结束,***保存两次眨眼信息。
其中,所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值Y时(Y的值例如可为1s、1.5s、2s),判断为固定投射动作,***保存固定投射信息。
指令生成单元330,用于根据所述用户视线的变化轨迹信息生成控制指令。
其中,所述控制指令可以包括以下至少一种:左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。可以理解,所述控制指令不限定于已列出的这几种。
优选的,用户可以根据自己的使用习惯,在电子设备上预设控制指令库,不同的视线变化轨迹对应于不同的控制指令。当用户视线发生变化时,可以在预设的控制指令库内,根据用户视线的变化轨迹信息,调用相应的控制指令。
可选的,电子设备自带一个控制指令库,特定的视线变化轨迹信息对应于特定的控制指令。用户可以根据说明,用特定的视线变化轨迹信息,来调用相应的控制指令。
例如,当得到的用户视线变化轨迹信息为左移信息时,生成界面左滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息时,生成界面右滑的控制指令;
当得到的用户视线变化轨迹信息为上移信息时,生成界面上滑的控制指令;
当得到的用户视线变化轨迹信息为下移信息时,生成界面下滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信息时,生成界面放大的指令;其中,右移信息和上移信息可以同时得到;左移信息和下移信息可以同时得到;
当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信息时,生成界面缩小的控制指令;其中,右移信息和下移信息可以同时得到;左移信息和上移信息可以同时得到;
当得到的用户视线变化轨迹信息为一次眨眼信息时,生成点击控制指令;
当得到的用户视线变化轨迹信息为两次眨眼信息时,生成截图控制指令;
当得到的用户视线变化轨迹信息为固定投射信息时,生成长按控制指令;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值;
当得到用的户视线变化轨迹信息为固定投射信息和移动信息时,生成拖拽指令;其中移动信息包括:左移信息、右移信息、上移信息、下移信息,生成的拖拽指令包含的拖拽方向指令与移动信息包含的方向信息相对应。
以上根据用户视线变化轨迹信息产生的相应的控制指令为优选方案,但是不限定于此方案,也可以有其它的方案。
又例如,当得到的用户视线变化轨迹信息为当得到的用户视线变化轨迹信息为左移信息时,生成界面右滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息时,生成界面左滑的控制指令;
当得到的用户视线变化轨迹信息为上移信息时,生成界面下滑的控制指令;
当得到的用户视线变化轨迹信息为下移信息时,生成界面上滑的控制指令;
当得到的用户视线变化轨迹信息为右移信息和上移信息或者左移信息和下移信息时,生成界面缩小的指令;其中,右移信息和上移信息可以同时得到;左移信息和下移信息可以同时得到;
当得到的用户视线变化轨迹信息为右移信息和下移信息或者左移信息和上移信息时,生成界面放大的控制指令;其中,右移信息和下移信息可以同时得到;左移信息和上移信息可以同时得到。
执行单元340,用于根据所述控制指令对所述电子设备当前显示界面进行控制。
可选的,当所述控制指令为左滑时,所述电子设备的当前显示界面往左滑;
当所述控制指令为右滑时,所述电子设备的当前显示界面往右滑;
当所述控制指令为上滑时,所述电子设备的当前显示界面往上滑;
当所述控制指令为下滑时,所述电子设备的当前显示界面往下滑;
当所述控制指令为放大时,所述电子设备的当前显示界面被放大;
当所述控制指令为缩小时,所述电子设备的当前显示界面被缩小;
当所述控制指令为截图时,所述电子设备的当前显示界面被截图,并保存截图结果;
当所述控制指令为点击时,所述用户视线固定投射在所述当前显示界面的预设区域被点击;
当所述控制指令为长按时,所述用户视线固定投射在所述当前显示界面的预设区域被长按;
当所述控制指令为拖拽时,所述用户视线固定投射在所述当前显示界面的预设区域被拖拽;其中,此预设区域内可包含功能图标。
可以看出,本实施例的方案简化了用户对电子设备的操作方法。当用户双手拿着东西或者单手操作不稳时,能用眼睛对电子设备界面进行控制,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
请参阅图5,图5是本发明实施例提供的另一种电子设备结构示意图。其中,如图5所示,电子设备500可以包括:至少一个处理器510,例如CPU,用户接口530,存储器540,至少一个通信总线520以及显示屏550。其中,通信总线520用于实现这些组件之间的连接通信。其中,用户接口530可以是前置摄像头。存储器540可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器。存储器540可选的还可以是至少一个位于远离前述处理器510的存储***。如图5所示,作为一种计算机存储介质的存储器540中可以包括操作***、网络通信模块、用户接口模块以及界面控制程序。
在图5所示的电子设备500中,处理器510可以用于调用存储器540中存储的界面控制程序,并执行以下操作:
通过用户接口530获取用户视线;
对所述用户视线进行分析,得到所述用户视线的变化轨迹信息;
根据所述用户视线的变化轨迹信息生成控制指令;
根据所述控制指令对所述电子设备当前显示界面进行控制,通过显示屏550显示出来。
具体地,用户接口530获取用户视线,可以包括:采用前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向,根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
用户接口530获取用户视线,还可以包括:采用红外摄像头,通过所述用户眼睛的瞳孔反射的红外光来获取所述用户视线。
具体的,所述用户视线的变化轨迹信息可以包括以下至少一种:
左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。可以理解,所述用户视线变化轨迹信息不限定于已列出的这几种。
具体的,所述控制指令可以包括以下至少一种:
左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。可以理解,所述控制指令不限定于已列出的这几种。
可以看出,本实施例的方案简化了用户对电子设备的操作方法。当用户双手拿着东西或者单手操作不稳时,能用眼睛对电子设备界面进行控制,方便用户使用,同时也丰富了电子设备的操作方式,增加用户使用电子设备的趣味性,提升用户体验。
以上对本发明实施例所提供的一种电子设备界面的控制方法及电子设备进行了详细的介绍,本文中应用了具体个例对本发明的具体实施步骤进行了详细的阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

Claims (10)

1.一种电子设备界面的控制方法,其特征在于,包括:
通过电子设备的视线采集装置获取用户视线;
对所述用户视线进行分析,得到所述用户视线的变化轨迹信息;
根据所述用户视线的变化轨迹信息生成控制指令;
根据所述控制指令对所述电子设备当前显示界面进行控制。
2.如权利要求1所述的方法,其特征在于,所述通过电子设备视线采集装置获取用户视线,包括:
采用所述电子设备的前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向,根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
3.如权利要求1所述的方法,其特征在于,所述通过电子设备视线采集装置获取用户视线,包括:
采用红外摄像头,通过所述用户眼睛的瞳孔反射的红外光来获取所述用户视线。
4.如权利要求1-3任一项所述的方法,其特征在于,所述用户视线的变化轨迹信息包括以下至少一种:
左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。
5.如权利要求1-4任一项所述的方法,其特征在于,所述控制指令包括以下至少一种:
左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。
6.一种电子设备,其特征在于,包括:
获取单元,用于通过电子设备的视线采集装置获取用户视线;
分析单元,用于对所述用户视线进行分析,得到所述用户视线的变化轨迹信息;
指令生成单元,用于根据所述用户视线的变化轨迹信息生成控制指令;
执行单元,用于根据所述控制指令对所述电子设备当前显示界面进行控制。
7.如权利要求6所述的电子设备,其特征在于,所述获取单元还包括:
追踪识别单元,用于采用所述电子设备的前置摄像头对所述用户的眼球进行追踪,识别出所述用户眼球的位置及方向;
分析获取单元,用于根据所述用户眼球的位置及方向分析所述用户瞳孔聚焦的投射点在所述电子设备当前显示界面投射的具***置,从而获取所述用户视线。
8.如权利要求6所述的电子设备,其特征在于,所述获取单元具体用于,采用红外摄像头,通过所述用户眼睛的瞳孔反射的红外光来获取所述用户视线。
9.如权利要求6-8任一项所述的电子设备,其特征在于,所述用户视线的变化轨迹信息包括以下至少一种:
左移信息、右移信息、上移信息、下移信息、至少一次眨眼信息、固定投射信息;其中所述固定投射信息是指所述用户视线固定投射在所述当前显示界面预设区域的时长达到预设时间阈值。
10.如权利要求6-9任一项所述的电子设备,所述控制指令包括以下至少一种:
左滑、右滑、上滑、下滑、缩放、截图、点击、长按、拖拽。
CN201610811405.2A 2016-09-08 2016-09-08 一种电子设备界面的控制方法及电子设备 Pending CN106502378A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201610811405.2A CN106502378A (zh) 2016-09-08 2016-09-08 一种电子设备界面的控制方法及电子设备
PCT/CN2016/111287 WO2018045669A1 (zh) 2016-09-08 2016-12-21 一种电子设备界面的控制方法及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201610811405.2A CN106502378A (zh) 2016-09-08 2016-09-08 一种电子设备界面的控制方法及电子设备

Publications (1)

Publication Number Publication Date
CN106502378A true CN106502378A (zh) 2017-03-15

Family

ID=58291363

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610811405.2A Pending CN106502378A (zh) 2016-09-08 2016-09-08 一种电子设备界面的控制方法及电子设备

Country Status (2)

Country Link
CN (1) CN106502378A (zh)
WO (1) WO2018045669A1 (zh)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107492339A (zh) * 2017-06-30 2017-12-19 柳州贵族酒业有限公司 一种瞳孔控制led显示玻璃幕墙
CN107596690A (zh) * 2017-10-10 2018-01-19 网易(杭州)网络有限公司 界面显示方法及终端设备
CN109462694A (zh) * 2018-11-19 2019-03-12 维沃移动通信有限公司 一种语音助手的控制方法及移动终端
CN109739344A (zh) * 2018-11-20 2019-05-10 平安科技(深圳)有限公司 基于眼球运动轨迹的解锁方法、装置、设备和存储介质
CN109828812A (zh) * 2018-12-29 2019-05-31 维沃移动通信有限公司 截图方法、装置及终端设备
CN110069960A (zh) * 2018-01-22 2019-07-30 北京亮亮视野科技有限公司 基于视线运动轨迹的拍摄控制方法、***及智能眼镜
CN111045516A (zh) * 2019-12-05 2020-04-21 珠海格力电器股份有限公司 终端的操作方法、装置、终端及存储介质
CN112967796A (zh) * 2019-12-13 2021-06-15 深圳迈瑞生物医疗电子股份有限公司 体外诊断设备的非接触式控制方法、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130300652A1 (en) * 2011-11-30 2013-11-14 Google, Inc. Unlocking a Screen Using Eye Tracking Information
CN104360751A (zh) * 2014-12-05 2015-02-18 三星电子(中国)研发中心 一种实现智能控制的方法和设备
CN104461014A (zh) * 2014-12-26 2015-03-25 小米科技有限责任公司 屏幕解锁方法及装置
CN105320261A (zh) * 2015-01-07 2016-02-10 维沃移动通信有限公司 移动终端的控制方法及移动终端

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101308400A (zh) * 2007-05-18 2008-11-19 肖斌 基于眼动和头动检测的新型人机交互装置
CN104023127A (zh) * 2014-05-16 2014-09-03 深圳市中兴移动通信有限公司 一种短信息处理的方法及装置
CN104536654B (zh) * 2014-12-25 2018-02-02 小米科技有限责任公司 智能穿戴设备上的菜单选取方法、装置及智能穿戴设备
CN105892642A (zh) * 2015-12-31 2016-08-24 乐视移动智能信息技术(北京)有限公司 一种根据眼部动作对终端进行控制的方法及装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130300652A1 (en) * 2011-11-30 2013-11-14 Google, Inc. Unlocking a Screen Using Eye Tracking Information
CN104360751A (zh) * 2014-12-05 2015-02-18 三星电子(中国)研发中心 一种实现智能控制的方法和设备
CN104461014A (zh) * 2014-12-26 2015-03-25 小米科技有限责任公司 屏幕解锁方法及装置
CN105320261A (zh) * 2015-01-07 2016-02-10 维沃移动通信有限公司 移动终端的控制方法及移动终端

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
杜坤坤等: "《情感机器人》", 31 October 2012, 机械工业出版社 *

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107492339A (zh) * 2017-06-30 2017-12-19 柳州贵族酒业有限公司 一种瞳孔控制led显示玻璃幕墙
CN107596690A (zh) * 2017-10-10 2018-01-19 网易(杭州)网络有限公司 界面显示方法及终端设备
CN107596690B (zh) * 2017-10-10 2020-12-08 网易(杭州)网络有限公司 界面显示方法及终端设备
CN110069960A (zh) * 2018-01-22 2019-07-30 北京亮亮视野科技有限公司 基于视线运动轨迹的拍摄控制方法、***及智能眼镜
CN109462694A (zh) * 2018-11-19 2019-03-12 维沃移动通信有限公司 一种语音助手的控制方法及移动终端
CN109739344A (zh) * 2018-11-20 2019-05-10 平安科技(深圳)有限公司 基于眼球运动轨迹的解锁方法、装置、设备和存储介质
CN109739344B (zh) * 2018-11-20 2021-12-14 平安科技(深圳)有限公司 基于眼球运动轨迹的解锁方法、装置、设备和存储介质
CN109828812A (zh) * 2018-12-29 2019-05-31 维沃移动通信有限公司 截图方法、装置及终端设备
CN109828812B (zh) * 2018-12-29 2022-06-17 维沃移动通信有限公司 截图方法、装置及终端设备
CN111045516A (zh) * 2019-12-05 2020-04-21 珠海格力电器股份有限公司 终端的操作方法、装置、终端及存储介质
CN112967796A (zh) * 2019-12-13 2021-06-15 深圳迈瑞生物医疗电子股份有限公司 体外诊断设备的非接触式控制方法、设备及存储介质

Also Published As

Publication number Publication date
WO2018045669A1 (zh) 2018-03-15

Similar Documents

Publication Publication Date Title
CN106502378A (zh) 一种电子设备界面的控制方法及电子设备
KR102023768B1 (ko) 카메라 효과를 위한 사용자 인터페이스
EP3576014A1 (en) Fingerprint recognition method, electronic device, and storage medium
CN101291364B (zh) 一种移动通信终端的交互方法、装置及移动通信终端
US20220382440A1 (en) User interfaces for managing media styles
EP2660681A2 (en) Mobile terminal and control method thereof
CN105940365B (zh) 一种通知信息处理方法、装置和终端
CN109219796A (zh) 实时视频上的数字触摸
KR20220066198A (ko) 향상된 디지털 이미지들을 캡처하고 그들과 상호작용하기 위한 디바이스들 및 방법들
CN109753159A (zh) 用于控制电子装置的方法和设备
CN110138959A (zh) 显示人机交互指令的提示的方法及电子设备
DK201670755A9 (en) User Interface for Camera Effects
US20190205786A1 (en) Method and system for classifying time-series data
CN112306220A (zh) 基于肢体识别的控制方法、装置、电子设备及存储介质
CN110196646A (zh) 一种信息输入方法及移动终端
CN107688385A (zh) 一种控制方法及装置
DE202017002874U1 (de) Benutzerschnittstelle für Kameraeffekte
CN112817443A (zh) 基于手势的显示界面控制方法、装置、设备及存储介质
CN108108079A (zh) 一种图标显示处理方法及移动终端
CN102915193A (zh) 一种网页浏览方法、装置及智能终端
CN112270918A (zh) 信息处理方法、装置、***、电子设备及存储介质
CN103974107A (zh) 电视机眼动控制方法、装置及电视机
CN112954209B (zh) 拍照方法、装置、电子设备及介质
CN112114653A (zh) 终端设备的操控方法、装置、设备及存储介质
CN112243065B (zh) 视频录制方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170315

RJ01 Rejection of invention patent application after publication