CN106716332A - 用于次要用户界面的手势导航 - Google Patents

用于次要用户界面的手势导航 Download PDF

Info

Publication number
CN106716332A
CN106716332A CN201580051788.1A CN201580051788A CN106716332A CN 106716332 A CN106716332 A CN 106716332A CN 201580051788 A CN201580051788 A CN 201580051788A CN 106716332 A CN106716332 A CN 106716332A
Authority
CN
China
Prior art keywords
input
capital equipment
user interface
gesture
equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
CN201580051788.1A
Other languages
English (en)
Inventor
M.K.拉曼
B.D.克罗斯
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Microsoft Technology Licensing LLC
Original Assignee
Microsoft Technology Licensing LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Microsoft Technology Licensing LLC filed Critical Microsoft Technology Licensing LLC
Publication of CN106716332A publication Critical patent/CN106716332A/zh
Withdrawn legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/02Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
    • H04L67/025Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M2250/00Details of telephonic subscriber devices
    • H04M2250/22Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

提供了用于针对次要用户界面的手势导航的一种或多种技术和/或***。举例而言,主要设备(例如,智能电话)可以建立与具有次要显示器(例如,电视)的次要设备的通信连接。主要设备可以将在主要设备上执行的次要应用(例如,照片app)的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面可以包括用户界面元素(例如,照片轮播)。主要设备可以接收连续的运动手势输入(例如,在智能电话的触摸显示器上的环回手势)。主要设备可以基于连续的运动手势输入而通过次要用户界面来可视地遍历用户界面元素的一个或多个内容项目(例如,滚动通过照片轮播的照片)。

Description

用于次要用户界面的手势导航
背景
许多用户可以与各种类型的计算设备(诸如膝上型计算机、平板电脑、个人计算机、移动电话、信息亭、视频游戏***等)交互。在一个示例中,用户可以利用移动电话来通过地图界面而获得去往目的地的驾驶方向。在另一示例中,用户可以利用商店信息亭来通过商店用户界面去打印优惠券和查找库存。用户可以利用键盘、鼠标、触摸输入设备、相机和/或其它输入设备与这样的计算设备交互。
发明内容
本概要被提供来以简化的形式介绍概念的选择,这些概念将在以下的详细描述中被进一步说明。本概要既不打算标识所要求保护的主题的关键因素或必要特征,也不打算被用来限制所要求保护的主题的范围。
除了其他的之外,本文提供了用于针对次要(secondary)用户界面的手势导航的一个或多个***和/或技术。在一个示例中,主要(primary)设备建立与次要设备的通信连接。主要设备将在主要设备上执行的次要应用的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面包括用户界面元素。主要设备通过与主要设备相关联的主要输入传感器接收连续的运动手势输入。例如,可以在显示于主要设备的主要显示器上的主要用户界面内填充虚拟触控板(touch pad),通过该虚拟触控板可以接收连续的运动手势输入。主要设备基于连续的运动手势输入而通过次要用户界面来可视地遍历(traverse)用户界面元素的一个或多个内容项目。
为了实现前述和相关的目的,以下的描述和附图阐述了某些说明性方面和实施方式。这些仅指示可以按其采用一个或多个方面的各种方式中的几种方式。当结合附图考虑时,从下面的详细描述中,本公开的其他方面、优点和新颖特征将变得显而易见。
附图说明
图1是图示用于针对次要用户界面的手势导航的示范性方法的流程图。
图2A是图示用于针对次要用户界面的手势导航的示范性***的组件框图。
图2B是图示用于针对次要用户界面的手势导航的示范性***的组件框图,其中次要用户界面的再现被投影到次要显示器。
图2C是图示用于针对次要用户界面的手势导航的示范性***的组件框图,其中用户界面元素的内容项目被可视地遍历。
图2D是图示用于针对次要用户界面的手势导航的示范性***的组件框图,其中用户界面元素的内容项目被可视地遍历。
图2E是图示用于针对次要用户界面的手势导航的示范性***的组件框图,其中内容项目被激活。
图2F是图示用于针对次要用户界面的手势导航的示范性***的组件框图,其中实施了回退命令(back command)。
图3是图示用于针对次要用户界面的手势导航的示范性***的组件框图,其中用户界面元素被定位。
图4是图示用于针对次要用户界面的手势导航的示范性***的组件框图。
图5是图示用于针对次要用户界面的手势导航的示范性***的组件框图。
图6是示范性计算机可读介质的图示,在所述介质中可以包括处理器可执行指令,其被配置来具体化本文阐述的一个或多个规定。
图7图示了在其中可以实现本文阐述的一个或多个规定的示范性计算环境。
具体实施方式
现在参考附图描述所要求保护的主题,其中在各处同样的参考数字通常用于指代同样的元件。在下面的描述中,为了解释的目的,阐述了许多具体细节以提供对所要求保护的主题的理解。然而,可能明显的是,可以在没有这些具体细节的情况下实践所要求保护的主题。在其它实例中,以框图形式图示了结构和设备,以便易于描述所要求保护的主题。
本文提供了用于针对次要用户界面的手势导航的一个或多个***和/或技术。用户可能期望将在主要设备(例如,智能电话)上执行的应用投影到次要设备(例如,电视),使得应用的应用界面按照次要设备的设备特性(例如,与电视的电视显示器的宽高比匹配)被显示在次要设备的次要显示器上。因为应用正在主要设备上执行但被显示在次要设备的次要显示器上,所以由于主要设备正在驱动次要显示器,因而用户可以与主要设备交互(例如,在智能电话上的触摸手势),以便与应用界面的用户界面元素交互。因此,如本文所提供的,通过与主要显示器相关联的主要输入传感器接收的连续的运动手势输入(例如,在智能手机所显示的输入用户界面表面——比如虚拟化触控板——上的圆形(circular)手指手势)可以被用于可视地遍历次要用户界面的用户界面元素的一个或多个内容项目(例如,用户可以滚动通过投影到电视显示器的次要用户界面的图像轮播(carousel)的图像)。以这种方式,用户可以使用主要设备上的连续的运动手势输入来滚动通过显示在次要显示器上的用户界面元素的内容项目。因为连续的运动手势输入可以被用于遍历一个或多个内容项目(例如,圆形手指手势可以是模拟输入,其中每个环回(loop)被翻译为某个图像的单个滚动,因此10个连续的环回可以导致用户滚动通过10个图像),所以用户也许不会为必须执行多个单独的轻拂(flick)手势(例如,10个单独的轻拂手势)所累,不然的话要使用多个单独的轻拂手势来在内容项目之间导航。因此,主要设备上的简单连续手势可以影响从主要设备(例如,智能电话)投影到次要设备(例如,电视)的次要用户界面的再现。
针对次要用户界面的手势导航的实施例由图1的示范性方法100来图示。在102,该方法开始。在104,主要设备可以建立与次要设备的通信连接。主要设备(例如,智能电话、平板电脑等)可以被配置为本地地支持次要应用的执行,次要应用诸如是安装在主要设备上的照片app。次要设备(例如,诸如冰箱的器具、电视、视听设备、车辆设备、诸如智能手表或眼镜的可佩戴设备、膝上型计算机、个人计算机等等)可以不本地地支持次要应用的执行(例如,照片app可以不安装在次要设备上)。在示例中,通信连接可以是无线通信信道(例如,蓝牙)。在示例中,用户可以在持有智能电话主要设备的同时走过电视次要设备,并且因此可以(例如,自动地、以编程方式等)建立通信连接。在示例中,用户可以(例如,手动地)发起通信连接。
在106,在主要设备上执行的次要应用的次要用户界面的再现可以从主要设备投影到次要设备的次要显示器。次要用户界面包括用户界面元素。例如,智能电话主要设备可以正在执行照片app。智能手机主要设备可以生成包括标题用户界面元素、照片轮播用户界面元素、搜索文本输入框用户界面元素和/或其他用户界面元素的照片app用户界面的再现。智能电话主要设备可以通过向电视次要设备提供那些再现以供在电视显示器上显示来驱动电视次要设备的电视显示器。以这种方式,智能手机主要设备可以通过将那些再现提供给电视次要设备以供在电视显示器上显示而将照片app用户界面的再现投影到电视显示器。
在示例中,主要用户界面被显示在主要设备的主要显示器上。例如,由智能手机主要设备的移动操作***所宿有(host)的电子邮件应用可以被显示在智能手机显示器上。在示例中,主要用户界面不同于次要用户界面(例如,主要用户界面对应于电子邮件应用,同时次要用户界面对应于照片app)。在示例中,次要用户界面不显示在主要显示器上,和/或主要用户界面不显示在次要显示器上(例如,次要用户界面并不是显示在主要显示器上的东西的镜像)。在示例中,主要用户界面可以被填充以输入用户界面表面,诸如虚拟化触控板,通过其用户可以提供输入,比如连续的运动手势输入,该输入可以被用作为对于被通过次要显示器投影为次要用户界面的次要应用的输入。
在108,连续的运动手势输入可以由主要设备通过与主要设备相关联的主要输入传感器(例如,检测可视手势或身体姿势的相机输入传感器,可视手势或身体姿势诸如是用户以圆形运动移动手或臂;虚拟化触控板;运动传感器、罗盘、腕部传感器和/或陀螺仪,其可以检测到用户以圆形运动移动智能手机主要设备;触摸传感器,比如智能手机主要设备的使能触摸的显示器等)接收。例如,用户可以在虚拟化触控板上(例如,使用手指)绘制至少部分连续的形状(例如,圆形、正方形、多边形或任何其他环回(loop)类型的手势)。以这种方式,连续的运动手势输入可以包括圆形手势、环回手势、触摸手势、主要设备移动手势、由相机输入传感器捕获的可视手势等。在示例中,连续的运动手势可以包括第一触摸输入和第二触摸输入。第二触摸输入可以是与第一触摸输入并发的(例如,双指轻扫(swipe)、捏合等)。在示例中,连续的运动手势可以包括第一锚(anchor)触摸输入和第二运动触摸输入(例如,用户可以在虚拟化触控板上将第一手指保持为锚,并且可以以圆形运动围绕第一手指轻扫第二手指)。可以意识到的是,可以将各种各样输入检测为连续的运动手势输入。
在110,可以基于连续的运动手势输入来遍历用户界面元素的一个或多个内容项目。例如,在电视显示器上显示的照片app用户界面内的照片轮播用户界面元素的照片可以被遍历(例如,在其间滚动以使得照片被带入到照片轮播用户界面元素的焦点中(intofocus),然后离开焦点(out of focus))。以这种方式,主要设备上的用户输入可以被用于遍历与正在主要设备上执行且被投影到次要设备的次要显示器的次要应用相关联的内容项目。连续的运动手势输入可以允许用户利用单个连续手势来遍历多个内容项目,诸如在多个内容项目之间滚动(例如,单个环回手势可以被用作模拟输入以在任何数量的照片之间滚动),这与诸如轻拂手势之类的其他手势形成对比,其对于每个内容项目遍历可能需要单独的轻拂手势(例如,10个轻拂手势以在10张照片之间滚动)。
在示例中,可以在未选择次要用户界面的可遍历用户界面元素的时候接收到连续的运动手势输入,但仍然可以遍历用户界面元素。例如,可以确定用户意图,并且可以选择相应的用户界面元素用于遍历。例如,因为照片轮播用户界面元素或许是可能可遍历的唯一用户界面元素、因为照片轮播用户界面元素是用户与之交互的最后的用户界面元素、因为照片轮播用户界面元素是距当前光标位置最近的用户界面元素等,所以相对于标题用户界面元素、搜索文本输入框用户界面元素和/或其他用户界面元素而言,用户意图可被确定为对应于照片轮播用户界面元素。因此,可以基于用户意图来选择照片轮播用户界面元素用于遍历。
在示例中,内容项目可以以相对于连续的运动手势输入的速度的遍历速度被可视地遍历,因此环回手势的速度可以影响在内容项目之间滚动的速度)。例如,可以基于连续的运动手势输入的速度的增加或减小而增加或减小遍历速度,从而向用户提供例如对于用户多快地滚动通过照片轮播用户界面元素的照片的控制。
在示例中,连续的运动手势输入包括第一触摸输入(例如,第一手指手势)和第二触摸输入(例如,第二手指手势)。第二触摸输入可以是与第一触摸输入并发的。主要设备可以基于第一触摸输入控制可视遍历的第一遍历方面(例如,滚动方向)。主要设备可以基于第二触摸输入来控制可视遍历的第二遍历方面(例如,照片的缩放方面)。
在示例中,连续的运动手势输入包括第一锚触摸输入(例如,用户可以将第一手指保持在智能手机显示器上)和第二运动触摸输入(例如,用户可以用第二手指绕第一手指环回)。可以基于第二运动触摸输入并且基于在第一锚触摸输入的第一锚触摸输入位置和第二运动触摸输入的第二运动触摸输入位置之间的距离来可视地遍历一个或多个内容项目(例如,可以在对应于第二运动触摸输入的方向上且以对应于在第一锚触摸输入位置和第二运动触摸输入位置之间的距离的遍历速度来遍历照片)。
在示例中,连续的运动手势输入包括第一触摸输入和与第一触摸输入并发的第二触摸输入。第一触摸输入可以被映射为对用户界面元素的第一输入,用于控制一个或多个内容项目的可视遍历。第二触摸输入可以被映射为对第二用户界面元素(例如,可滚动的相册选择列表用户界面元素)的第二输入。以这种方式,用户可以并发地控制多个用户界面元素(例如,第一触摸输入可以被用于滚动照片轮播用户界面元素的照片,并且第二触摸输入可以被用于滚动可滚动的相册选择列表的相册)。
在示例中,可以通过主要输入传感器接收激活输入(例如,触摸手势,诸如虚拟化触控板上的轻击输入、双击输入等)。在次要显示器上,用户界面元素被聚焦在其上的当前内容项目可以变为激活的。例如,用户可以滚动通过照片轮播用户界面元素,直到海滩度假照片被带入焦点中。用户可以使用轻击手势将海滩度假照片打开为全屏观看模式(例如,照片app用户界面可以被转移到海滩度假照片的全屏观看模式)。在示例中,可以基于次要用户界面基于激活而转移到新状态(例如,基于照片app用户界面转移到全屏观看模式),来在回退堆栈(例如,由智能电话主要设备的移动操作***维护的、被用于导航回到用户界面的先前状态的回退堆栈)中创建条目。条目可以指定:在激活之前的次要用户界面的先前状态期间该当前内容项目处于焦点中(例如,在照片app用户界面转移到全屏观看模式之前海滩度假照片对于照片轮播用户界面元素是处于焦点中的)。响应于接收到回退命令输入,次要用户界面可以从新状态转变到先前状态,基于回退堆栈内的条目而使该当前内容项目被带入焦点中。以这种方式,用户可以在次要用户界面的各种状态之间导航。在112,该方法结束。
图2A-2F图示了用于针对次要用户界面的手势导航的***201的示例,其包括主要设备208。图2A图示了用户206在主要设备208(例如,智能电话主要设备)上收听摇滚乐队歌曲210的示例200。主要设备208可以距包括处于空闲模式的次要显示器204的次要设备202(例如,电视次要设备)大于阈值距离212。图2B图示了基于主要设备208处在距次要设备202的阈值距离212内而令投影触发事件触发的示例220。主要设备208可以建立与次要设备202的通信连接220。安装在主要设备208上的音乐视频播放器app可以被执行来提供音乐视频观看功能性(例如,对于摇滚乐队歌曲210的视频)。因此,主要设备208可以利用主要设备208的主处理器、主存储器和/或其他资源来执行音乐视频播放器app以创建音乐视频播放器app用户界面232,用于投影到次要设备202的次要显示器204。主要设备208可以将音乐视频播放器app用户界面232的再现222投影到次要显示器204(例如,主要设备208可以本地生成再现222,并且可以通过通信连接220发送该再现222到次要设备202以供在次要显示器204上显示)。以这种方式,主要设备208可以驱动次要显示器204。在示例中,音乐视频播放器app用户界面232不显示在主要设备208上。
音乐视频播放器app用户界面232可以包括一个或多个用户界面元素, 比如视频选择轮播用户界面元素224。视频选择轮播用户界面元素224可以包括可能可遍历(比如可滚动)的一个或多个内容项目。例如,视频选择轮播用户界面元素224可以包括重金属乐队视频228、摇滚乐队视频226、乡村乐队视频230和/或可用于通过音乐视频播放器app播放的其他视频内容项目。
图2C图示了主要设备208接收连续的运动手势输入244(例如,用户206可以使用手指242来执行环回手势,例如第一环回)的示例240。主要设备208可以基于连续的运动手势输入244而通过音乐视频播放器app用户界面232来可视地遍历246视频选择轮播用户界面元素224的一个或多个视频内容项目。例如,基于连续的运动手势输入244(例如,用户可以缓慢地执行环回手势)以5个中的1个的遍历速度,重金属乐队视频228可以被向左滚动离开音乐视频播放器app用户界面232的视野,摇滚乐队视频226可以被向左滚动离开焦点,而乡村乐队视频230可以被向左滚动到焦点中,从而导致第一更新的视频选择轮播用户界面元素224a。在示例中,主要设备208可以将第一更新的视频选择轮播用户界面元素224a的再现投影到次要显示器204。
图2D图示了主要设备208继续接收连续的运动手势输入244a(例如,用户206可以继续使用手指242执行环回手势,诸如执行第二环回)的示例250。主要设备208可以基于用户继续执行连续的运动手势输入244a而通过音乐视频播放器app用户界面232来继续可视地遍历254第一更新的视频选择轮播用户界面元素224a的一个或多个视频内容项目。例如,基于连续的运动手势输入244a(例如,用户206可以以更快速率的速度执行环回手势)以5个中的3个的遍历速度,摇滚乐队视频226可以被向左滚动离开音乐视频播放器app用户界面232的视野,乡村乐队视频230可以被向左滚动离开焦点,垃圾乐队视频256可以被向左滚动进入焦点,而流行乐队视频258可以被向左滚动进入视野中,从而导致第二更新的视频选择轮播用户界面元素224b。在示例中,主要设备208可以将第二更新的视频选择轮播用户界面元素224b的再现投影到次要显示器204。
图2E图示了主要设备208基于接收到激活输入262而激活内容项目的示例260。例如,音乐视频播放器app用户界面232的第一状态可以包括垃圾乐队视频256对于第二更新的视频选择轮播用户界面元素224b而言处于焦点中(例如,图2D的示例250)。当垃圾乐队视频256处于焦点中时,用户206可以轻击主要设备208(例如,轻击智能手机主要设备的触摸屏),其可以被主要设备208作为激活输入262而接收。主要设备208可以通过调用在主要设备208上执行的音乐视频播放器app来实现激活输入262,以通过视频回放用户界面元素266来播放垃圾乐队视频256。在示例中,主要设备208可以将视频回放用户界面元素266的再现投影到次要显示器204。以这种方式,音乐视频播放器app用户界面232的新状态可以包括播放垃圾乐队视频256的视频回放用户界面元素266。在示例中,主要设备208可以在回退堆栈264(例如,由智能手机主要设备的移动操作***维护的、被用于导航回到用户界面的先前状态的回退堆栈)内创建条目。该条目可以指定:在激活垃圾乐队视频256之前的音乐视频播放器app用户界面232的第一状态(例如,先前状态)期间,垃圾乐队视频256处在焦点中。
图2F图示了主要设备208利用回退堆栈264内的条目实现回退命令276的示例270。例如,用户206可以在通过视频回放用户界面元素266观看垃圾乐队视频256的时候执行回退命令手势272。主要设备208可以查询回退堆栈264以识别指定在激活垃圾乐队视频256之前的音乐视频播放器app用户界面232的第一状态(例如,先前状态)期间垃圾乐队视频256处在焦点中的条目。因此,主要设备208可以将音乐视频播放器app用户界面232转移到第一状态,其中,对于第二更新的视频选择轮播用户界面元素224b,垃圾乐队视频256处在焦点中。在示例中,主要设备208可以将第二更新的视频选择轮播用户界面元素224b的再现投影到次要显示器204。
图3图示了用于针对次要用户界面的手势导航的***301的示例300。主要设备308可以建立与次要设备302的通信连接314。主要设备308可以被配置为本地地支持次要应用(比如安装在主要设备308上的图像app)的执行。次要设备302可以不本地地支持次要应用的执行(例如,图像app可以不安装在次要设备302上)。主要设备308可以将在主要设备308上执行的图像app的图像app用户界面318的再现投影到次要设备302的次要显示器304。图像app用户界面318可以包括度假图像列表用户界面元素320、广告用户界面元素322、文本框用户界面元素324、图像用户界面元素326和/或其他用户界面元素。
主要设备308可以通过与主要设备308相关联的主要输入传感器接收连续的运动手势输入312(例如,由相机输入传感器检测到的圆形的手部手势)。可以在未选择图像app用户界面318的可遍历的用户界面元素的时候接收连续的运动手势输入312。因此,主要设备308可以定位316用户界面元素来用于遍历。例如,主要设备308可以确定与度假图像列表320的遍历相对应的用户意图(例如,因为度假图像列表320可以是用户306与之交互的最后的用户界面元素)。主要设备308可以基于用户意图而选择度假图像列表用户界面元素320来用于遍历。以这种方式,用户306可以基于连续的运动手势输入312而遍历通过度假图像列表用户界面元素320内的度假图像。
图4图示了包括显示虚拟化触控板408的主要设备402(例如,平板主要设备)的***400的示例,用户可以通过虚拟化触控板408与在主要设备上执行的次要应用(例如,图像app)的次要用户界面交互,该次要用户界面被投影到次要设备(例如,电视)的次要显示器。例如,可以通过虚拟化触控板408接收连续的运动手势输入。连续的运动手势输入包括第一锚触摸输入406(例如,用户可以将第一手指保持在第一锚触摸输入406的第一锚触摸输入位置)和第二运动触摸输入404(例如,用户可以以第一锚触摸输入位置和第二运动触摸输入404的第二运动触摸输入位置404a之间的距离410而让第二手指绕第一锚触摸输入位置环回)。主要设备402可以基于第二运动触摸输入(例如,对应于图像轮播用户界面元素内的图像之间的滚动方向和遍历速度)和/或基于距离410(例如,对应于图像的缩放水平,比如随着距离410减小的对于图像的放大,以及随着距离410增加的对于图像的缩小)而可视地遍历次要用户界面的用户界面元素的一个或多个内容项目(例如,滚动通过图像app的图像轮播用户界面元素的图像)。以这种方式,用户可以使用在主要设备402的虚拟化触控板408上的连续的运动手势输入来导航通过显示在次要显示器上的图像app,和/或以其他方式与之交互。
图5图示了包括显示虚拟化触控板508的主要设备502(例如,平板主要设备)的***500的示例,用户可以通过虚拟化触控板508与在主要设备上执行的次要应用(例如,音乐app)的次要用户界面交互,该次要用户界面被投影到次要设备(例如,电视)的次要显示器。例如,可以通过虚拟化触控板508接收连续的运动手势输入。连续的运动手势输入包括第一触摸输入506(例如,用户可以按照第一环回手势来移动第一手指)和第二触摸输入504(例如,用户可以按照第二环回手势来移动第二手指)。主要设备502可以基于第一触摸输入506和第二触摸输入504来可视地遍历次要用户界面的用户界面元素的一个或多个内容项目(例如,滚动通过音量设置)。例如,音量设置可以以增加的遍历速度来遍历,因为连续的运动手势输入包括第一触摸输入506和第二触摸输入504两者,这与否则可能导致音量设置的相对较慢遍历的仅仅单个触摸输入形成对比。以这种方式,用户可以使用在虚拟化触控板508上的连续的运动手势输入来导航通过显示在次要显示器上的音乐app,和/或以其他方式与之交互。
根据本公开的一个方面,提供了一种用于针对次要用户界面的手势导航的***。该***包括主要设备。主要设备被配置为建立与次要设备的通信连接。主要设备被配置为将在主要设备上执行的次要应用的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面包括用户界面元素。主要设备被配置为通过与主要设备相关联的主要输入传感器接收连续的运动手势输入。主要设备被配置为基于连续的运动手势输入而通过次要用户界面来可视地遍历用户界面元素的一个或多个内容项目。
根据本公开的一个方面,提供了一种用于针对次要用户界面的手势导航的方法。该方法包括在主要设备和次要设备之间建立通信连接。该方法包括由主要设备将在主要设备上执行的次要应用的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面包括用户界面元素。该方法包括由主要设备通过与主要设备相关联的主要输入传感器接收连续的运动手势输入。该方法包括基于连续的运动手势输入而由主要设备通过次要用户界面来可视地遍历用户界面元素的一个或多个内容项目。
根据本公开的一个方面,提供了一种包括指令的计算机可读介质,所述指令在被执行时完成用于针对次要用户界面的手势导航的方法。该方法包括在主要设备的主要显示器上显示主要用户界面。该方法包括在主要设备和次要设备之间建立通信连接。该方法包括由主要设备将在主要设备上执行的次要应用的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面包括用户界面元素,其中次要用户界面与主要用户界面不同。该方法包括由主要设备用输入用户界面表面填充主要用户界面。该方法包括由主要设备通过输入用户界面表面接收连续的运动手势输入。该方法包括基于连续的运动手势输入,由主要设备通过次要用户界面来可视地遍历用户界面元素的一个或多个内容项目。
根据本公开的一个方面,提供了一种用于针对次要用户界面的手势导航的装置。通过用于手势导航的装置建立主要设备和次要设备之间的通信连接。通过用于手势导航的装置将在主要设备上执行的次要应用的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面包括用户界面元素。通过用于手势导航的装置经由与主要设备相关联的主要输入传感器接收连续的运动手势输入。通过用于手势导航的装置,基于连续的运动手势输入而可视地遍历用户界面元素的一个或多个内容项目。
根据本公开的一个方面,提供了一种用于针对次要用户界面的手势导航的装置。通过用于手势导航的装置把主要用户界面显示在主要设备的主要显示器上。通过用于手势导航的装置建立主要设备和次要设备之间的通信连接。通过用于手势导航的装置将在主要设备上执行的次要应用的次要用户界面的再现投影到次要设备的次要显示器。次要用户界面包括用户界面元素,其中次要用户界面与主要用户界面不同。通过用于手势导航的装置用输入用户界面表面来填充主要用户界面。通过用于手势导航的装置经由输入用户界面表面来接收连续的运动手势输入。通过用于手势导航的装置,基于连续的运动手势输入而可视地遍历用户界面元素的一个或多个内容项目。
又一个实施例涉及一种包括处理器可执行指令的计算机可读介质,所述处理器可执行指令被配置为实现本文所提出的技术中的一项或多项。图6中图示了计算机可读介质或计算机可读设备的示例实施例,其中实现600包括计算机可读介质608,诸如CD-R、DVD-R、闪存驱动器、硬盘驱动器的盘片(platter)等,其上编码有计算机可读数据606。计算机可读数据606——诸如包括零或一中的至少一个的二进制数据——进而又包括被配置为根据本文阐述的一个或多个原理操作的一组计算机指令604。在一些实施例中,处理器可执行计算机指令604被配置为执行方法602,举例而言比如图1的示范性方法100中的至少一些。在一些实施例中,处理器可执行指令604被配置为实现一***,举例而言比如图2A-2F的示范性***201中的至少一些、图3的示范性***301的至少一些、图4的示范性***400的至少一些和/或图5的示范性***500中的至少一些。本领域的普通技术人员设计了许多这样的计算机可读介质,其被配置为根据本文给出的技术进行操作。
尽管已经用特定于结构特征和/或方法动作的语言描述了主题,但是应当理解,在所附权利要求中限定的主题不一定限于上述具体的特征或动作。相反,上述具体的特征和动作是作为实现权利要求中的至少一些的示例形式而被公开的。
当在本申请中使用时,术语“组件”、“模块”、“***”、“接口”和/或诸如此类通常打算指计算机相关的实体,或者是硬件、硬件和软件的组合、软件,或者是执行中的软件。例如,组件可以是,但不限于,在处理器上运行的进程、处理器、对象、可执行文件、执行的线程、程序和/或计算机。作为举例说明,在控制器上运行的应用和控制器两者都可以是组件。一个或多个组件可以驻留在进程和/或执行的线程内,并且组件可以被局限在一个计算机上和/或被分布在两个或更多个计算机之间。
此外,所要求保护的主题可以被实现为使用标准编程和/或工程技术来产生软件、固件、硬件或其任何组合的方法、装置或制品,以控制计算机去实现所公开的主题。当在本文中使用时,术语“制品”打算包括可从任何计算机可读设备、载体或介质访问的计算机程序。当然,在不脱离所要求保护的主题的范围或精神的情况下,可以对该配置进行许多修改。
图7和以下的讨论提供了合适计算环境的简要的一般描述,该合适计算环境用于实现本文所阐述的规定中的一项或多项的实施例。图7的操作环境仅仅是合适的操作环境的一个示例,且不打算提出有关操作环境的使用范围或功能性的任何限制。示例计算设备包括但不限于个人计算机、服务器计算机、手持或膝上型设备、移动设备(诸如移动电话、个人数字助理(PDA)、媒体播放器等)、多处理器***、消费电子产品、微型计算机、大型计算机、包括任何上述***或设备的分布式计算环境等。
虽然不是必需的,但是实施例是在“计算机可读指令” 正由一个或多个计算设备执行的一般上下文中描述的。计算机可读指令可以经由计算机可读介质(下面讨论)来分发。计算机可读指令可以被实现为执行特定任务或实现特定抽象数据类型的程序模块,诸如函数、对象、应用编程接口(API)、数据结构等。通常,计算机可读指令的功能性可以按所需要的那样在各种环境中被组合或分布。
图7图示了包括被配置为实现本文提供的一个或多个实施例的计算设备712的***700的示例。在一种配置中,计算设备712包括至少一个处理单元716和存储器718。取决于计算设备的确切的配置和类型,存储器718可以是易失性的(举例而言,比如RAM)、非易失性的(举例而言,比如ROM、闪存等)或两者的某种组合。该配置在图7中由虚线714来图示。
在其他实施例中,设备712可以包括附加的特征和/或功能性。例如,设备712还可以包括附加的存储装置(例如,可拆卸和/或不可拆卸的),包括但不限于磁存储装置、光存储装置等。这样的附加的存储装置在图7中由存储装置720来图示。在一个实施例中,用于实现本文提供的一个或多个实施例的计算机可读指令可以在存储装置720中。存储装置720还可以存储其他计算机可读指令以实现操作***、应用程序等。例如,计算机可读指令可以被加载到存储器718中以便由处理单元716执行。
当在本文中使用时,术语“计算机可读介质”包括计算机存储介质。计算机存储介质包括以用于存储诸如计算机可读指令或其他数据之类的信息的任何方法或技术实现的易失性和非易失性、可拆卸和不可拆卸的介质。存储器718和存储装置720是计算机存储介质的示例。计算机存储介质包括但不限于RAM、ROM、EEPROM、闪存或其他存储器技术、CD-ROM、数字通用盘(DVD)或其他光存储装置、磁带盒、磁带、磁盘存储装置或其它磁存储设备,或者可用于存储所期望的信息且可由设备712访问的任何其它介质。然而,计算机存储介质不包括传播的信号。相反,计算机存储介质排除了传播的信号。任何这样的计算机存储介质可以是设备712的一部分。
设备712还可以包括允许设备712与其他设备通信的(多个)通信连接726。(多个)通信连接726可以包括但不限于调制解调器、网络接口卡(NIC)、集成的网络接口、射频发射器/接收器、红外端口、USB连接或用于将计算设备712连接到其他计算设备的其他接口。(多个)通信连接726可以包括有线连接或无线连接。(多个)通信连接726可以发送和/或接收通信介质。
术语“计算机可读介质”可以包括通信介质。通信介质通常将计算机可读指令或其他数据具体化在诸如载波或其它传输机制的“调制的数据信号”中,并且通信介质包括任何信息传递介质。术语“调制的数据信号”可以包括使其一个或多个特性以在信号中编码信息这样的方式来设置或改变的信号。
设备712可以包括(多个)输入设备724,诸如键盘、鼠标、笔、话音输入设备、触摸输入设备、红外摄像机、视频输入设备和/或任何其它输入设备。在设备712中还可以包括(多个)输出设备722,诸如一个或多个显示器、扬声器、打印机和/或任何其他输出设备。(多个)输入设备724和(多个)输出设备722可以经由有线连接、无线连接或其任何组合而被连接到设备712。在一个实施例中,来自另一计算设备的输入设备或输出设备可以被用作计算设备712的(多个)输入设备724或(多个)输出设备722。
计算设备712的组件可以通过各种互连(诸如总线)被连接。这样的互连可以包括诸如PCI Express的***组件互连(PCI)、通用串行总线(USB)、火线(IEEE1394)、光总线结构等。在另一实施例中,计算设备712的组件可以通过网络来互连。例如,存储器718可以由位于通过网络互连的不同物理位置中的多个物理存储器单元组成。
本领域技术人员将认识到,被利用来存储计算机可读指令的存储设备可以跨网络地分布。例如,经由网络728可访问的计算设备730可以存储计算机可读指令以实现本文提供的一个或多个实施例。计算设备712可以访问计算设备730并下载部分或全部的所述计算机可读指令以供执行。替换地,计算设备712可以按所需要的下载多条计算机可读指令,或者一些指令可以在计算设备712处执行,而一些指令可以在计算设备730处执行。
本文提供了实施例的各种操作。在一个实施例中,所描述的操作中的一个或多个可以构成存储在一个或多个计算机可读介质上的计算机可读指令,如果由计算设备执行,其将导致计算设备执行所描述的操作。描述一些或所有操作所用的顺序不应被解释为暗示这些操作必定是与顺序相关的。受益于本说明书的本领域技术人员将意识到有可替换的顺序。此外,应当理解,并非所有的操作都必定存在于本文提供的每个实施例中。而且,要理解,在一些实施例中不是所有的操作都是必要的。
此外,除非另外规定,否则“第一”、“第二”和/或诸如此类并不打算暗示时间方面、空间方面、排序等。相反,这样的术语仅被用作对于特征、元素、项目等的标识符、名称等。例如,第一对象和第二对象通常对应于对象A和对象B或两个不同的或两个相同的对象或同一对象。
此外,当在本文中使用时,“示范性”意味着充当示例、实例、举例说明等,并且不一定是有利的。当在本文中使用时,“或”打算意指包括性的“或”而不是排他性的“或”。另外,除非另外规定或者从上下文中清楚的是针对单数形式,否则在本申请中使用的“一”和“一个”通常被解释为意指“一个或多个”。此外,A和B中的至少一个和/或类似表达通常意指A或B和/或A和B两者。另外,在“包含”、“具有”、“有”、“带有”和/或其变体被使用在详细描述或权利要求中的意义上,这样的术语打算以类似于术语“包括(comprise)”的方式是包含性的。
此外,尽管已经关于一个或多个实现而示出和描述了本公开,但是基于对本说明书和附图的阅读和理解,本领域技术人员将想到等同的更改和修改。本公开包括所有这样的修改和更改,并且仅由以下的权利要求的范围限制。特别地,关于由上述组件(例如,元件、资源等)执行的各种功能,除非另外指明,否则用于描述这样的组件的术语打算对应于执行所描述组件的规定功能的任何组件(例如,其是功能上等同的),即使其在结构上不等同于所公开的结构。另外,虽然本公开的特定特征可能是相对于几个实现中的仅一个实现而公开的,但是这样的特征可以按对于任何给定或特定的应用可能是期望的和有利的那样,与其它实现的一个或多个其他特征组合。

Claims (13)

1.一种用于针对次要用户界面的手势导航的***,包括:
主要设备,其被配置为:
建立与次要设备的通信连接;
将在所述主要设备上执行的次要应用的次要用户界面的再现投影到所述次要设备的次要显示器,所述次要用户界面包括用户界面元素;
通过与所述主要设备相关联的主要输入传感器接收连续的运动手势输入;和
基于所述连续的运动手势输入而通过所述次要用户界面来可视地遍历所述用户界面元素的一个或多个内容项目。
2.根据权利要求1所述的***,所述主要设备被配置为:
在所述主要设备的主要显示器上显示主要用户界面,所述主要用户界面不同于所述次要用户界面,所述次要用户界面不显示在所述主要显示器上,并且所述主要用户界面不显示在所述次要显示器上。
3.根据权利要求1所述的***,所述主要设备被配置为:
以相对于所述连续的运动手势输入的速度的遍历速度可视地遍历所述一个或多个内容项目。
4.根据权利要求3所述的***,所述主要设备被配置为:
基于检测到所述连续的运动手势输入的速度的增加而增加所述遍历速度。
5.根据权利要求3所述的***,所述主要设备被配置为:
基于检测到所述连续的运动手势输入的速度的减小而减小所述遍历速度。
6.根据权利要求1所述的***,所述主要设备被配置为:
响应于通过所述主要输入传感器接收到激活输入,而在所述次要显示器上激活所述用户界面元素被聚焦于其上的当前内容项目。
7. 根据权利要求6所述的***,所述主要设备被配置为:
根据所述次要用户界面基于所述激活而转移到新状态,来在回退堆栈内创建一条目,所述条目指定在所述激活之前的所述次要用户界面的先前状态期间所述当前内容项目处于焦点中;和
响应于接收到回退命令输入,将所述次要用户界面从所述新状态转移到所述先前状态,其中基于所述回退堆栈内的所述条目将所述当前内容项目带入焦点中。
8.根据权利要求1所述的***,所述连续的运动手势输入包括第一锚触摸输入和第二运动触摸输入,并且所述主要设备被配置为:
基于所述第二运动触摸输入以及在所述第一锚触摸输入的第一锚触摸输入位置和所述第二运动触摸输入的第二运动触摸输入位置之间的距离,可视地遍历所述一个或多个内容项目。
9. 根据权利要求1所述的***,所述连续的运动手势输入包括第一触摸输入和与所述第一触摸输入并发的第二触摸输入,并且所述主要设备被配置为:
基于所述第一触摸输入来控制所述一个或多个内容项目的可视遍历的第一遍历方面;和
基于所述第二触摸输入来控制所述一个或多个内容项目的可视遍历的第二遍历方面。
10.一种用于针对次要用户界面的手势导航的方法,包括:
在主要设备和次要设备之间建立通信连接;
由所述主要设备将在所述主要设备上执行的次要应用的次要用户界面的再现投影到所述次要设备的次要显示器,所述次要用户界面包括用户界面元素;
由所述主要设备通过与所述主要设备相关联的主要输入传感器来接收连续的运动手势输入;以及
由所述主要设备基于所述连续的运动手势输入而通过所述次要用户界面来可视地遍历所述用户界面元素的一个或多个内容项目。
11.根据权利要求10所述的方法,包括:
响应于通过所述主要输入传感器接收到激活输入,而激活所述用户界面元素被聚焦于其上的当前内容项目。
12.根据权利要求10所述的方法,所述可视地遍历包括:
以相对于所述连续的运动手势输入的速度的遍历速度可视地遍历所述一个或多个内容项目。
13. 根据权利要求12所述的方法,包括以下中的至少一项:
基于检测到所述连续的运动手势输入的速度的增加而增加所述遍历速度;或者
基于检测到所述连续的运动手势输入的速度的减小而减小所述遍历速度。
CN201580051788.1A 2014-09-24 2015-09-16 用于次要用户界面的手势导航 Withdrawn CN106716332A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/495,122 US20160088060A1 (en) 2014-09-24 2014-09-24 Gesture navigation for secondary user interface
US14/495122 2014-09-24
PCT/US2015/050319 WO2016048731A1 (en) 2014-09-24 2015-09-16 Gesture navigation for secondary user interface

Publications (1)

Publication Number Publication Date
CN106716332A true CN106716332A (zh) 2017-05-24

Family

ID=54293330

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580051788.1A Withdrawn CN106716332A (zh) 2014-09-24 2015-09-16 用于次要用户界面的手势导航

Country Status (4)

Country Link
US (1) US20160088060A1 (zh)
EP (1) EP3198393A1 (zh)
CN (1) CN106716332A (zh)
WO (1) WO2016048731A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113360692A (zh) * 2021-06-22 2021-09-07 上海哔哩哔哩科技有限公司 轮播视图的展示方法与***
CN113853575A (zh) * 2019-06-07 2021-12-28 脸谱科技有限责任公司 具有滑动菜单的人工现实***

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9769227B2 (en) 2014-09-24 2017-09-19 Microsoft Technology Licensing, Llc Presentation of computing environment on multiple devices
US10635296B2 (en) 2014-09-24 2020-04-28 Microsoft Technology Licensing, Llc Partitioned application presentation across devices
US10025684B2 (en) 2014-09-24 2018-07-17 Microsoft Technology Licensing, Llc Lending target device resources to host device computing environment
US10448111B2 (en) 2014-09-24 2019-10-15 Microsoft Technology Licensing, Llc Content projection
US10168895B2 (en) * 2015-08-04 2019-01-01 International Business Machines Corporation Input control on a touch-sensitive surface
CN106354418B (zh) * 2016-11-16 2019-07-09 腾讯科技(深圳)有限公司 一种基于触摸屏的操控方法和装置
US10795563B2 (en) 2016-11-16 2020-10-06 Arris Enterprises Llc Visualization of a network map using carousels
KR102660859B1 (ko) * 2016-12-27 2024-04-26 삼성전자주식회사 전자 장치, 웨어러블 장치 및 전자 장치의 표시 객체 제어 방법
US20190155958A1 (en) * 2017-11-20 2019-05-23 Microsoft Technology Licensing, Llc Optimized search result placement based on gestures with intent
US10365815B1 (en) * 2018-02-13 2019-07-30 Whatsapp Inc. Vertical scrolling of album images
US11370415B2 (en) * 2019-11-25 2022-06-28 Ford Global Technologies, Llc Systems and methods for adaptive user input boundary support for remote vehicle motion commands
US11995248B2 (en) * 2022-07-12 2024-05-28 Samsung Electronics Co., Ltd. User interface device of display device and method for controlling the same

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101052939A (zh) * 2004-07-30 2007-10-10 苹果电脑有限公司 用于触敏输入设备的基于模式的图形用户接口
CN103412712A (zh) * 2013-07-31 2013-11-27 天脉聚源(北京)传媒科技有限公司 一种功能菜单的选择方法和装置
US20140022192A1 (en) * 2012-07-18 2014-01-23 Sony Mobile Communications, Inc. Mobile client device, operation method, recording medium, and operation system
EP2712152A1 (en) * 2012-09-24 2014-03-26 Denso Corporation Method and Device

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB0027260D0 (en) * 2000-11-08 2000-12-27 Koninl Philips Electronics Nv An image control system
US7209116B2 (en) * 2003-10-08 2007-04-24 Universal Electronics Inc. Control device having integrated mouse and remote control capabilities
DE202005021427U1 (de) * 2004-07-30 2008-02-14 Apple Inc., Cupertino Elektronische Vorrichtung mit berührungsempfindlicher Eingabeeinrichtung
US8769408B2 (en) * 2005-10-07 2014-07-01 Apple Inc. Intelligent media navigation
US9395905B2 (en) * 2006-04-05 2016-07-19 Synaptics Incorporated Graphical scroll wheel
US20080084400A1 (en) * 2006-10-10 2008-04-10 Outland Research, Llc Touch-gesture control of video media play on handheld media players
US7956847B2 (en) * 2007-01-05 2011-06-07 Apple Inc. Gestures for controlling, manipulating, and editing of media files using touch sensitive devices
US9767681B2 (en) * 2007-12-12 2017-09-19 Apple Inc. Handheld electronic devices with remote control functionality and gesture recognition
US20100060588A1 (en) * 2008-09-09 2010-03-11 Microsoft Corporation Temporally separate touch input
KR101498078B1 (ko) * 2009-09-02 2015-03-03 엘지전자 주식회사 이동 단말기 및 디지털 액자 및 그 제어 방법
US9465532B2 (en) * 2009-12-18 2016-10-11 Synaptics Incorporated Method and apparatus for operating in pointing and enhanced gesturing modes
US20110231796A1 (en) * 2010-02-16 2011-09-22 Jose Manuel Vigil Methods for navigating a touch screen device in conjunction with gestures
GB201011146D0 (en) * 2010-07-02 2010-08-18 Vodafone Ip Licensing Ltd Mobile computing device
US9134799B2 (en) * 2010-07-16 2015-09-15 Qualcomm Incorporated Interacting with a projected user interface using orientation sensors
US20120274547A1 (en) * 2011-04-29 2012-11-01 Logitech Inc. Techniques for content navigation using proximity sensing
US20130031261A1 (en) * 2011-07-29 2013-01-31 Bradley Neal Suggs Pairing a device based on a visual code
WO2013067526A1 (en) * 2011-11-04 2013-05-10 Remote TelePointer, LLC Method and system for user interface for interactive devices using a mobile device
WO2013144807A1 (en) * 2012-03-26 2013-10-03 Primesense Ltd. Enhanced virtual touchpad and touchscreen
JP5877374B2 (ja) * 2012-06-13 2016-03-08 パナソニックIpマネジメント株式会社 操作表示装置、プログラム
US9613011B2 (en) * 2012-12-20 2017-04-04 Cable Television Laboratories, Inc. Cross-reference of shared browser applications
US20140218289A1 (en) * 2013-02-06 2014-08-07 Motorola Mobility Llc Electronic device with control interface and methods therefor
US20140229858A1 (en) * 2013-02-13 2014-08-14 International Business Machines Corporation Enabling gesture driven content sharing between proximate computing devices
US9357250B1 (en) * 2013-03-15 2016-05-31 Apple Inc. Multi-screen video user interface
US9965174B2 (en) * 2013-04-08 2018-05-08 Rohde & Schwarz Gmbh & Co. Kg Multitouch gestures for a measurement system
US20140365336A1 (en) * 2013-06-07 2014-12-11 Bby Solutions, Inc. Virtual interactive product display with mobile device interaction
KR102034587B1 (ko) * 2013-08-29 2019-10-21 엘지전자 주식회사 이동 단말기 및 이의 제어 방법
US9507482B2 (en) * 2013-10-07 2016-11-29 Narsys, LLC Electronic slide presentation controller
US10782787B2 (en) * 2014-06-06 2020-09-22 Adobe Inc. Mirroring touch gestures
US9729591B2 (en) * 2014-06-24 2017-08-08 Yahoo Holdings, Inc. Gestures for sharing content between multiple devices
US10635296B2 (en) * 2014-09-24 2020-04-28 Microsoft Technology Licensing, Llc Partitioned application presentation across devices

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101052939A (zh) * 2004-07-30 2007-10-10 苹果电脑有限公司 用于触敏输入设备的基于模式的图形用户接口
US20140022192A1 (en) * 2012-07-18 2014-01-23 Sony Mobile Communications, Inc. Mobile client device, operation method, recording medium, and operation system
EP2712152A1 (en) * 2012-09-24 2014-03-26 Denso Corporation Method and Device
CN103412712A (zh) * 2013-07-31 2013-11-27 天脉聚源(北京)传媒科技有限公司 一种功能菜单的选择方法和装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113853575A (zh) * 2019-06-07 2021-12-28 脸谱科技有限责任公司 具有滑动菜单的人工现实***
CN113360692A (zh) * 2021-06-22 2021-09-07 上海哔哩哔哩科技有限公司 轮播视图的展示方法与***

Also Published As

Publication number Publication date
US20160088060A1 (en) 2016-03-24
EP3198393A1 (en) 2017-08-02
WO2016048731A1 (en) 2016-03-31

Similar Documents

Publication Publication Date Title
CN106716332A (zh) 用于次要用户界面的手势导航
US11635869B2 (en) Display device and method of controlling the same
WO2021035884A1 (zh) 投屏方法、装置、终端及存储介质
US10871868B2 (en) Synchronized content scrubber
US10013098B2 (en) Operating method of portable terminal based on touch and movement inputs and portable terminal supporting the same
JP5628300B2 (ja) アニメーションに使用するための望ましい物理的特徴を伴うグラフィックオブジェクトを生成する方法、装置及びコンピュータプログラム製品
KR102269481B1 (ko) 디바이스 간에 화면 공유 방법 및 이를 이용하는 디바이스
US9977472B2 (en) Method and apparatus for displaying relative motion of objects on graphical user interface
US20230229287A1 (en) Display device and method of controlling the same
US8988459B2 (en) Method and apparatus for operating a display unit of a mobile device
US20110145745A1 (en) Method for providing gui and multimedia device using the same
US20180329589A1 (en) Contextual Object Manipulation
US20150067540A1 (en) Display apparatus, portable device and screen display methods thereof
US9747004B2 (en) Web content navigation using tab switching
KR20160140932A (ko) 확장 가능한 애플리케이션 표시 및 콘텐트 전송
US20160103574A1 (en) Selecting frame from video on user interface
US20140229823A1 (en) Display apparatus and control method thereof
US10976895B2 (en) Electronic apparatus and controlling method thereof
WO2023056925A1 (zh) 文档内容更新方法、装置和电子设备
US20150293888A1 (en) Expandable Application Representation, Milestones, and Storylines
KR102197886B1 (ko) 웨어러블 디바이스의 제어 방법 및 그 장치
KR101230210B1 (ko) 터치스크린을 구비한 사용자 단말 제어방법, 장치, 이를 위한 기록매체 및 이를 포함하는 사용자 단말
KR20160038413A (ko) 콘텐츠 탐색 장치 및 콘텐츠 탐색 방법
KR101284452B1 (ko) 터치스크린을 구비한 사용자 단말 제어방법, 장치, 이를 위한 기록매체 및 이를 포함하는 사용자 단말
US20140372916A1 (en) Fixed header control for grouped grid panel

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
WW01 Invention patent application withdrawn after publication
WW01 Invention patent application withdrawn after publication

Application publication date: 20170524