CN103383598A - 终端和基于空间交互控制所述终端的方法 - Google Patents

终端和基于空间交互控制所述终端的方法 Download PDF

Info

Publication number
CN103383598A
CN103383598A CN2013101629001A CN201310162900A CN103383598A CN 103383598 A CN103383598 A CN 103383598A CN 2013101629001 A CN2013101629001 A CN 2013101629001A CN 201310162900 A CN201310162900 A CN 201310162900A CN 103383598 A CN103383598 A CN 103383598A
Authority
CN
China
Prior art keywords
terminal
user
gesture
screen
touch
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN2013101629001A
Other languages
English (en)
Inventor
全轸泳
姜志营
李宝嬴
金大成
金镇龙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020120047678A external-priority patent/KR20130124061A/ko
Priority claimed from KR1020120132222A external-priority patent/KR20130124138A/ko
Priority claimed from KR1020120132223A external-priority patent/KR20130124139A/ko
Priority claimed from KR1020120137740A external-priority patent/KR20130124143A/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority to CN201910897441.9A priority Critical patent/CN110647244A/zh
Publication of CN103383598A publication Critical patent/CN103383598A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G06F3/038—Control and interface arrangements therefor, e.g. drivers or device-embedded control circuitry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0483—Interaction with page-structured environments, e.g. book metaphor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04101—2.5D-digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface and also measures the distance of the input means within a short range in the Z direction, possibly with a separate measurement setup
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04808—Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72442—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality for playing music files
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)
  • Image Analysis (AREA)
  • Position Input By Displaying (AREA)
  • Telephone Function (AREA)

Abstract

提供一种终端和使用空间交互控制所述终端的方法。所述终端包括感测单元，检测在终端附近之内沿特定方向移动对象的用户手势；控制单元，确定用户手势的移动方向、移动速度和移动距离中的至少一个，并根据确定的用户手势的移动方向、移动速度和移动距离中的至少一个，执行与当前运行的应用相关的控制操作；显示单元，在控制单元的控制下，显示所述应用的执行屏幕。

Description

终端和基于空间交互控制所述终端的方法
技术领域
本发明涉及一种终端和用于基于空间交互控制所述终端的方法。更具体地讲，本发明涉及一种终端和用于识别不同的空间手势并交互地执行与识别的空间手势相应的输入的方法。
背景技术
随着智能电子装置的广泛使用，研究与开发已集中于用于促进用户的装置控制的各种交互技术。
根据现有技术，一些典型的基于交互的装置控制技术包括基于触摸或运动的装置控制和基于手势的装置控制技术。
因此，需要存在一种终端和用于识别不同的空间手势并交互地执行与识别的空间手势相应的输入的方法。
以上信息被呈现为背景信息以仅帮助本公开的理解。针对本发明，上面的任意信息是否可应用为现有技术，没有做出确定，也没有做出断定。
发明内容
本发明的多方面在于至少解决上述的问题和/或缺点，并在于至少提供下面描述的优点。因此，本发明的一方面提供一种终端和用于以识别不同的空间手势并交互地执行与识别的空间手势相应的输入的方式来控制所述终端的方法。
根据本发明的一方面，提供一种用于控制终端的方法。所述方法包括：检测空间手势，分析所述空间手势，并根据分析结果执行动作。
根据本发明的另一方面，提供一种用于控制终端的方法。所述方法包括：检测在终端附近之内沿特定方向移动对象的用户手势；确定用户手势的移动方向、移动速度和移动距离中的至少一个；根据确定的用户手势的移动方向、移动速度和移动距离中的至少一个，执行与当前运行的应用相关的控制操作。
根据本发明的另一方面，提供一种终端，所述终端包括：感测单元，检测在终端附近之内沿特定方向移动对象的用户手势；控制单元，确定用户手势的移动方向、移动速度和移动距离中的至少一个，并根据确定的用户手势的移动方向、移动速度和移动距离中的至少一个，执行与当前运行的应用相关的控制操作；显示单元，在控制单元的控制下，显示所述应用的执行屏幕。
根据本发明的另一方面，提供一种用于控制在车辆内的终端的方法。所述方法包括：基于终端的移动状态和车辆的移动状态中的至少一个启动行驶模式；当终端处于行驶模式时，检测在终端附近之内的用户手势；当终端处于行驶模式时，执行与相应的用户手势相关的功能。
根据本发明的另一方面，提供一种终端。所述终端包括：感测单元，检测在终端附近之内沿特定方向移动的用户手势；控制单元，基于终端的移动状态和车辆的移动状态启动行驶模式，当终端处于行驶模式时由感测单元检测到用户手势时，执行与终端处于行驶模式时的相应的用户手势相应的功能；输出单元，在控制单元的控制下输出功能执行结果。
在根据本发明的另一方面，提供一种用于控制终端的方法。所述方法包括：根据终端的状态输入特定操作模式，当终端处于特定操作模式时检测在终端附近之内的用户手势，响应于所述用户手势，显示与所述操作模式相关的信息。
根据本发明的另一方面，提供一种终端。所述终端包括：感测单元，检测在终端附近之内的用户手势；显示单元，显示信息；控制单元，根据终端的状况，输入特定操作模式，当终端处于特定操作模式时由感测单元检测到用户手势时，响应于所述用户手势，显示与所述操作模式相关的信息。
根据本发明的另一方面，提供一种用于控制终端的方法。所述方法包括：检测在终端附近之内的用户手势，确定用户手势的类型，并根据用户手势执行终端的控制操作。
根据本发明的另一方面，提供一种终端。所述终端包括：感测单元，检测终端附近之内的用户手势；控制单元，确定用户手势的类型并根据所述用户手势执行终端的控制操作；显示单元，显示控制单元的控制操作的结果。
通过下面结合附图公开本发明的示例性实施例的详细描述，本发明的其他方面、优点和突出特点对本领域的技术人员将变得清楚。
附图说明
从下面结合附图进行的描述，本发明的特定示例性实施例的以上和其他方面、特征和优点将变得明显，其中：
图1是示出根据本发明的示例性实施例的用于基于空间手势控制终端的方法的流程图；
图2至图25是示出根据本发明的示例性实施例的定义为在基于空间交互的终端控制方法中使用的空间手势的示图；
图26是示出根据本发明的示例性实施例的设置为在基于空间交互的终端控制方法中使用的示例性空间交互的示图；
图27是示出根据本发明的示例性实施例的结合基于空间交互的终端控制方法呈现的示例性屏幕显示的示图；
图28是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图29是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图30是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图31是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图32是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图33是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图34是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图35是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图；
图36是示出根据本发明的示例性实施例的终端的配置的框图。
贯穿附图，应注意，相同标号被用于描绘相同或相似的元件、特征和结构。
具体实施方式
提供参照附图进行的以下描述以帮助对由权利要求及其等同物限定的本发明的示例性实施例的全面理解。包括各种特定细节以帮助理解，但是这些仅被视作示例性的。因此，本领域的普通技术人员将认识到，在不脱离本发明的范围和精神的情况下，可做出对这里描述的实施例的各种改变和修改。此外，为了清楚和简明，可省略对公知功能和构造的描述。
在以下描述和权利要求中使用的术语和词语不限于字面含义，而是仅由发明人使用来实现对本发明的清楚和一致理解。因此，本领域的技术人员应该清楚的是，仅为了示出目的并且不是为了限制由权利要求及其等同物限定本发明的目的，来提供本发明的示例性实施例的以下描述。
将理解，单数形式包括复数形式，除非上下文清楚地另有说明。因此，例如，对“组件接口”的提及包括对一个或多个这种接口的提及。
本发明适用于能够识别空间手势的所有类型的装置以及电子终端，包括：智能电话、便携式终端、移动终端、个人数字助理（PDA）、便携式多媒体播放器（PMP）、膝上型计算机、平板计算机、个人计算机、WiBro终端、数字相机、便携式游戏机、MP3播放器、手持电子书、全球定位***（GPS）导航、高清晰度电视等。
这里使用的术语仅是为了描述特定示例性实施例的目的，并不意图限制本发明。除非这里另有定义，否则这里使用的所有术语具有与本发明所属领域的普通技术人员通常理解的含义相同的含义，并且不应被解释为具有过于全面的含义或过于缩小的含义。如果这里使用的技术术语是不能精确表达本发明的技术思想的错误的术语，则这样的技术术语应由允许本发明的技术人员正确理解的技术术语来替代。这里使用的通用术语应根据词典中或上下文中的定义被解释，而不应被解释为过于缩小的含义。
如这里使用的，除非上下文有明确的另外指示，否则单数形式被意图也包括复数形式。还将理解当在这里使用术语“包括”时，指示存在所陈述的特征、整体、步骤、操作、元件和/或组件，但并不排除存在或添加一个或多个其它特征、步骤、操作、元件、组件和/或它们的组合。
在下文中，参照附图详细描述本发明的示例性实施例。
图1是示出根据本发明的示例性实施例的用于基于空间手势控制终端的方法的流程图。
参照图1，根据本发明的示例性实施例的终端控制方法包括以下步骤。
在步骤S110，终端检测空间手势。作为示例，可利用输入工具（例如，用户的手（包括手指）等）来做出空间手势。
根据本发明的示例性实施例，终端能够通过（例如，使用）相机、接近传感器等来检测空间手势。终端还能够同时或顺序地检测多个空间手势。
根据本发明的示例性实施例，终端可能够检测触摸手势以及空间手势。作为示例，终端可能够同时或顺序地检测空间手势和触摸手势。作为另一示例，终端可能够在保持触摸手势的状态下，检测空间手势。
此后，在步骤S120，终端分析检测到的空间手势。
根据本发明的示例性实施例，终端可能够通过分析由相机拍摄的照片和/或通过（例如，使用）接近传感器来检测空间手势。终端能够分析朝向至少一个方向的运动或绘制特定形状（可被称为轻拂）、运动速度、运动长度、输入工具的形状（例如，手或手指形状）、与输入工具的接近相关的至少一个坐标、接近速度、接近距离等。
如果用户的手相应于输入工具，则用户能够做出可由终端识别的空间手势。例如，空间手势可包括:点击（例如，向前弯曲随后将手伸展）、轻拂(例如，向上/向下/向左/向右将手轻拂)、摇摆（水平摇摆和/或垂直摇摆）、圆圈（例如，沿顺时针方向或逆时针方向划圆）、抓取(握紧手掌以形成拳头)、捏合（例如，拇指和食指之间的挤压）、接近、跟踪（例如，实时跟踪手运动）、覆盖（例如，使用手来覆盖终端）、推（例如，将手推到终端）、双手推、双手打开、双手圆圈、放置双手、触摸并轻拂、接近等。在图2至图25中分别描绘前述手势。
图2至图25是示出根据本发明的示例性实施例的定义为在基于空间交互的终端控制方法中使用的空间手势的示图。
参照图2，空间手势可以是非触摸式点击。例如，非触摸式点击可相应于用户将手移动得更靠近于屏幕。非触摸式点击可相应于用户将手移动得更靠近于屏幕的特定期望的部分。根据本发明的示例性实施例，终端可通过确定用户的手被移动得更靠近于屏幕来检测非触摸式点击。例如，终端可比较检测到的用户的手的坐标并确定检测到的用户的手的坐标的变化相应于非触摸式点击。
参照图3，空间手势可以是非触摸式轻拂。非触摸式轻拂可以是沿向上、向下、向左和向右方向中的至少一个方向的轻拂运动。例如，非触摸式轻拂可相应于用户的手被布置为使得用户的手的手掌的表面大体上垂直于屏幕表面，并沿向上、向下、向左和向右方向中的至少一个方向移动。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上垂直于屏幕表面）并确定用户的手相对于屏幕被移动（例如，横过）来检测非触摸式轻拂。例如，终端可比较检测到的用户的手的坐标，并确定检测到的用户的手的坐标的变化相应于非触摸式轻拂。
参照图4，空间手势可以是非触摸式水平摇摆。非触摸式水平摇摆可以是用户的手从终端的一侧不同地横过屏幕移动到所述终端的相反侧的运动。例如，用户的手的运动可从终端屏幕的左侧移动到所述屏幕的右侧。在非触摸式水平摇摆中可重复用户的手的运动。作为示例，水平摇摆可包括：伸开用户的手使得用户的手掌面向（例如，大体上平行于）屏幕。根据本发明的示例性实施例，终端可通过确定用户的手以预定配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的手相对于屏幕被移动（例如，从左侧到右侧、从右侧到左侧等）来检测非触摸式水平摇摆。例如，终端可比较检测到的用户的手的坐标并确定检测到的用户的手的坐标的变化相应于非触摸式水平晃动。
参照图5，空间手势可以是非触摸式垂直摇摆。非触摸式垂直摇摆可以是用户的手从终端的一侧不同地横过屏幕移动到所述终端的相反侧的运动。例如，用户的手的运动可从终端屏幕的顶部移动到所述屏幕的底部。在非触摸式垂直摇摆中可重复用户的手的运动。作为示例，垂直摇摆可包括：当手在到终端的顶部的运动和到终端的底部的运动之间时，伸开用户的手使得用户的手掌面向（例如，大体上平行于）屏幕。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的手（例如，用户的伸开的手指）相对于屏幕被移动（例如，从顶部到底部、从底部到顶部等）来检测非触摸式垂直摇摆。例如，终端可比较检测到的用户的手（例如，用户的伸开的手指）的坐标并确定检测到的用户的手的坐标的变化相应于非触摸式垂直晃动。
参照图6，空间手势可以是非触摸式覆盖。例如，非触摸式覆盖可相应于用户的手被移动以覆盖屏幕。非触摸式覆盖可包括：用户的手将手掌面向屏幕以大体上平行于屏幕并大体上覆盖所述屏幕。在非触摸式覆盖期间可伸开用户的手指。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的手相对于屏幕被移动（例如，以大体上覆盖整个屏幕）来检测非触摸式覆盖。例如，终端可比较检测到的用户的手的坐标并确定检测到的用户的手的坐标的变化相应于非触摸式覆盖。例如，非触摸式覆盖可包括：用户将手移动得更靠近于屏幕从而大体上覆盖整个屏幕。作为另一示例，非触摸式覆盖可包括用户大体上沿原平面移动手从而大体上覆盖整个屏幕。
参照图7，空间手势可以是非触摸式掌推。例如，非触摸式掌推可包括用户的手移动得更靠近于屏幕。非触摸式掌推可包括伸开用户的手指并将手掌面向屏幕（例如，使得手掌的表面大体上平行于屏幕）。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的手相对于屏幕被移动（例如，使得用户的手掌移动得更靠近于屏幕）来检测非触摸式掌推。例如，终端可比较检测到的用户的手的坐标并确定检测到的用户的手（例如，用户的手掌）的坐标的变化相应于非触摸式掌推。
参照图8，空间手势可以是沿顺时针方向的非触摸式划圆。所述非触摸式划圆可包括沿顺时针方向移动用户的手的部分。例如，所述非触摸式划圆可包括相对于屏幕沿顺时针方向移动手掌。作为另一示例，非触摸式划圆可包括相对于屏幕沿顺时针方向移动至少一个手指。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的手相对于屏幕被移动（例如，使得用户的至少一部分沿顺时针方向被移动）来检测所述非触摸式划圆。例如，终端可比较检测到的用户的手（例如，手掌、至少一个手指等）的坐标并确定检测到的用户的手（例如，手掌、至少一个手指等）的坐标的变化相应于沿顺时针方向的非触摸式划圆。
参照图9，空间手势可以是沿逆时针方向的非触摸式划圆。所述非触摸式划圆可包括沿逆时针方向移动用户的手的部分。例如，所述非触摸式划圆可包括相对于屏幕沿逆时针方向移动手掌。作为另一示例，所述非触摸式划圆可包括相对于屏幕沿逆时针方向移动至少一个手指。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的相对于屏幕被移动（例如，使得用户的手的至少一个部分沿逆时针方向被移动）来检测所述非触摸式划圆。例如，终端可比较检测到的用户的手（例如，手掌、至少一个手指等）的坐标并确定检测到的用户的手（例如，手掌、至少一个手指等）的坐标的变化相应于沿逆时针方向的非触摸式划圆。
参照图10，空间手势可以是非触摸式抓取。非触摸式抓取可包括移动用户的手使得用户的手指从大体上伸开的位置被移动到手指更接近于用户的拇指的位置，或使得手指朝向握紧的拳头。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得用户的手指相对于用户的手掌和/或拇指大体上被伸开）并确定用户的手相对于屏幕被移动（例如，使得用户的手指朝向用户的拇指和手掌中的至少一个，从而形成或开始形成例如握紧的拳头）来检测非触摸式抓取。例如，终端可比较检测到的用户的手（例如，手掌、至少一个手指等）的坐标并确定检测到的用户的手（例如，手掌、至少一个手指等）的坐标的变化相应于非触摸式抓取。
参照图11，空间手势可以是非触摸式捏合。非触摸式捏合可包括将用户的手从至少一个手指被伸开的位置移动到至少一个伸开的手指大体上触摸拇指的位置。例如，非触摸式捏合可包括将伸开的手指和伸开的拇指相向移动。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得用户的手指的至少一个相对于用户的手掌和/或拇指大体上被伸开）并确定用户的手相对于屏幕被移动（例如，使得至少一个伸开的手指朝向用户的拇指）来检测非触摸式捏合。例如，终端可比较检测到的用户的手(例如，手掌、至少一个手指、拇指等)的坐标并确定检测到的用户的手(例如，手掌、至少一个手指、拇指等)的坐标的变化相应于非触摸式捏合。
参照图12，空间手势可以是非触摸式接近。例如，非触摸式接近可包括用户的手被移动得更接近于屏幕。非触摸式接近可包括伸开用户的手指并且手掌面向屏幕（例如，使得手掌的表面大体上平行于屏幕）。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定用户的手相对于屏幕被移动（例如，使得用户的手被移动得更接近于屏幕）来检测非触摸式接近。例如，终端可比较检测到的用户的手的坐标并确定检测到的用户的手（例如，用户的手掌）的坐标的变化相应于非触摸式接近。根据示例性实施例，终端可基于沿垂直于屏幕的轴的距离来区分非触摸式掌推和非触摸式接近，其中，手沿着更接近于屏幕的方向移动。例如，非触摸式接近可包括：与非触摸式掌推相比，手最初被布置得更远离屏幕。
参照图13，空间手势可以是非触摸式跟踪。例如，非触摸式跟踪可包括将伸开的手指移动得横过屏幕。非触摸式跟踪可包括沿着横过屏幕的路径移动伸开的手指。根据本发明的示例性实施例，终端可通过确定用户的手以预定义配置被布置（例如，使得用户的手指中的至少一个相对于用户的手掌和/或拇指大体上被伸开）并确定用户的手相对于屏幕被移动（例如，使得至少一个伸开的手指被移动得横过屏幕）来检测非触摸式跟踪。例如，终端可比较检测到的用户的手（例如，伸开的手指）的坐标并确定检测到的用户的手（例如，伸开的手指）的坐标的变化相应于非触摸式跟踪。例如，对于非触摸式跟踪手势，贯穿所述跟踪，伸开的手指与屏幕表面之间的距离可大体上保持相同。
参照图14，空间手势可以是非触摸式双手掌推。例如，非触摸式双手掌推可包括双手被移动得更靠近于屏幕。非触摸式双手掌推可包括伸开双手的手指并且将双手的各个手掌面向屏幕（例如，使得手掌的表面大体上平行于屏幕）。根据本发明的示例性实施例，终端可通过确定双手分别以预定义配置被布置（例如，使得手掌的表面大体上平行于屏幕表面）并确定双手相对于屏幕被移动（例如，使得各个手掌被移动得更靠近于屏幕）来检测非触摸式双手掌推。例如，终端可比较检测到的双手的坐标并确定检测到的双手（例如，各个手掌）的坐标的变化相应于非触摸式双手掌推。
参照图15，空间手势可以是非触摸式双手捏合。例如，非触摸式双手捏合可包括双手中的至少一只手相对于屏幕被移动，从而将双手移动得更靠近在一起。非触摸式双手捏合可包括伸开双手中的每只手上的至少一个手指或拇指并将伸开的双手中的每只手的至少一个手指或拇指被移动得更靠近在一起。非触摸式双手捏合可包括伸开的双手中的每只手的至少一个手指或拇指被移动从而处于触摸关系。根据本发明的示例性实施例，终端可通过确定双手分别以预定义配置被布置（例如，使得双手中的每只手伸开至少一个手指或拇指）并确定双手中的至少一只手相对于屏幕朝向另一只手移动（例如，使得伸开的每只手上的至少一个手指或拇指相向移动，具体地讲，使得伸开的每只手上的至少一个手指或拇指被移动从而处于触摸关系）来检测非触摸式双手捏合。例如，终端可比较检测到的双手的坐标并确定检测到的双手中的至少一只手（例如，至少一个伸开的手指或拇指）的坐标的变化相应于非触摸式双手捏合。
参照图16，空间手势可以是非触摸式平行旋转。非触摸式平行旋转可包括双手布置得彼此相距一定距离，并绕着垂直于屏幕的轴而移动。例如，非触摸式平行旋转可相应于双手被布置使得双手的手掌的表面大体上垂直于屏幕表面并被布置使得每只手的手掌平行于另一只手的手掌，并且手围绕垂直于屏幕的轴移动。根据本发明的示例性实施例，终端可通过确定双手中的每只手以预定义配置被布置（例如，使得手掌的表面大体上垂直于屏幕表面），确定双手中的每只手的手掌大体上彼此平行，并确定双手相对于屏幕被移动（例如，绕着垂直于屏幕（并从屏幕延伸）的轴）来检测非触摸式平行旋转。例如，终端可比较检测到的双手的坐标并确定检测到的双手的坐标的变化相应于非触摸式平行旋转。
参照图17，空间手势可以是非触摸式拍手。非触摸式拍手可包括双手被布置得彼此相距一定距离（例如，使得手的各个手掌彼此面对），并相向（例如，沿大体上平行于屏幕的轴）移动。例如，非触摸式拍手可相应于双手被布置使得双手的各个手掌的表面大体上垂直于屏幕表面并被布置使得每只手的手掌平行于另一只手的手掌（例如，手掌相反或面向于彼此），并且手沿大体上平行于屏幕的轴被移动。根据本发明的示例性实施例，终端可通过确定双手中的每只手以预定义配置被布置（例如，使得手掌的表面大体上垂直于屏幕表面），确定双手中的每只手的手掌相反或面向于另一只手的手掌，并确定双手相对于屏幕被移动（例如，绕着大体上平行于屏幕的轴）来检测非触摸式拍手。例如，终端可比较检测到的双手的坐标并确定检测到的双手的相对坐标相应于非触摸式拍手。
参照图18，空间手势可以是利用（例如，结合）非触摸式轻拂的触摸。利用非触摸式轻拂的触摸可包括用户利用输入工具（例如，触控笔、手指、拇指等）触摸屏幕并且轻拂运动沿向上、向下、向左和向右方向中的至少一个方向。例如，利用非触摸式轻拂的触摸可相应于用户利用输入工具触摸屏幕并且手被布置使得所述手的手掌的表面大体上垂直于屏幕表面并沿向上、向下、向左和向右方向中的至少一个方向被移动。根据本发明的示例性实施例，终端可检测触摸（例如，通过屏幕中的电容的改变），并通过确定手以预定义配置被布置（例如，使得手掌的表面大体上垂直于屏幕表面）并确定手相对于（例如，横过至少部分）屏幕被移动来检测非触摸式轻拂。例如，终端可比较检测到的手的坐标并确定结合触摸事件的检测到的手的坐标的变化相应于利用非触摸式轻拂的触摸。
参照图19，空间手势可以是手指悬停。例如，手指悬停可相应于用户在相对于屏幕大体上相同的位置上保持手指（或其他输入工具）至少预定义时间段。手指悬停可包括手指被保持在相对于屏幕大体上恒定的相同的位置上（布置得远离屏幕），使得布置得远离屏幕的输入工具与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定所述输入工具被保持在远离屏幕的大体上恒定的位置上至少预定义时间段来检测手指悬停。例如，终端可比较在预定时间段内检测到的输入工具的坐标并确定检测到的输入工具的坐标没有变化相应于手指悬停。
参照图20，空间手势可以是手掌。例如，所述手掌可相应于用户在相对于屏幕大体上相同的位置上将伸开的手（例如，手指伸开）保持至少预定义时间段。所述手掌可包括手掌在相对于屏幕大体上恒定的相同的位置（布置得远离屏幕）上保持使得所述手掌与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定手掌在远离屏幕的大体上恒定的位置上保持至少预定义时间段来检测所述手掌。例如，终端可比较在预定时间段内检测到的手掌的坐标并确定检测到的手掌的坐标没有变化相应于手掌。作为另一示例，终端可比较预定义时间段内的手的配置，并确定将手的配置以伸开的配置维持预定义时间段相应于所述手掌。
参照图21，空间手势可以是拳头。例如，所述拳头可相应于用户在相对于屏幕大体上相同的位置上保持握紧的手（例如，拳头中握紧的手指和拇指）至少预定义时间段。所述拳头可包括手（例如，拳头）保持在相对于屏幕大体上恒定的相同的位置上（布置得远离屏幕），使得所述拳头与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定所述手处于预定配置（例如，手形成握紧的拳头）并确定所述拳头在远离屏幕的大体上恒定的位置上保持至少预定义时间段来检测所述拳头。例如，终端可比较在预定义时间段内检测到的拳头的坐标，并确定检测到的拳头的坐标没有变化相应于拳头。作为另一示例，终端可比较预定义时间段内的手的配置，并确定将手的配置以拳头配置维持相应于拳头。
参照图22，空间手势可以是竖起拇指。例如，竖起拇指可相应于用户在相对于屏幕大体上相同的位置上将具有伸开的拇指和向手掌握紧的手指的手保持预定义时间段。竖起拇指可包括手（例如，伸开的拇指）在布置得远离屏幕的相对于屏幕大体上恒定的相同的位置上被保持使得手与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定手处于预定配置（例如，手形成竖起拇指标志）并确定竖起拇指在远离屏幕的大体上恒定的位置上被保持预定义时间段来检测拇指。例如，终端可在预定义时间段比较检测到的竖起拇指的坐标并确定检测到的竖起拇指的坐标没有变化相应于所述竖起拇指。作为另一示例，终端可比较预定时间段内手的配置并确定预定义时间段内以竖起拇指的配置来维持手的配置相应于所述竖起拇指。
参照图23，空间手势可以是指向手势。例如，指向手势可相应于用户将具有输入工具（例如，伸开的手指、拇指等）的手在相对于屏幕大体上相同的位置上保持至少预定义时间段。指向手势可包括手（例如，伸开的手指）在布置得远离屏幕的相对于屏幕大体上恒定的相同的位置上被保持使得在伸开的手指与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定手处于预定义配置（例如，手形成至少一个手指被伸开的指向手势）并确定指向手势在远离屏幕的大体上恒定的位置上被保持至少预定义时间段来检测所述指向手势。例如，终端可比较检测到在预定义时间段内检测到的指向手势的坐标并确定检测到的指向手势的坐标没有变化相应于指向手势。作为另一示例，终端可比较在预定义时间段内的手的配置并确定在预定义时间段内以指向手势配置来维持手的配置相应于指向手势。
参照图24，空间手势可以是OK手势。例如，OK手势可相应于用户将食指和拇指形成圆圈并将其余的手指伸开的手在相对于屏幕大体上相同的位置上保持至少预定义时间段。OK手势可包括手（例如，将食指和拇指形成圆圈并将其余的手指伸开的手）在布置得远离屏幕的相对于屏幕大体上恒定的相同的位置上被保持使得手与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定所述手处于预定配置（例如，将食指和拇指形成圆圈并且其余的手指伸开的手）并确定OK手势在远离屏幕的大体上恒定的位置上保持至少预定义时间段来检测OK手势。例如，终端可比较预定义时间段内检测到的OK手势的坐标，并确定检测到的OK手势的坐标的没有变化相应于OK手势。作为另一示例，终端可比较预定义时间段内手的配置，并确定预定义时间段内以OK手势配置来维持手的配置相应于OK手势。
参照图25，空间手势可以是计数手势。例如，计数手势可相应于用户在相对于屏幕大体上相同的位置上伸开预定义数量的手指的手保持至少预定义时间段。计数手势可包括手（例如，拇指和两个手指被伸开）在布置得远离屏幕的相对于屏幕大体上恒定的相同的位置上被保持使得手与屏幕表面之间没有接触。根据本发明的示例性实施例，终端可通过确定手处于预定配置（例如，拇指和两个手指被伸开）并确定计数手势在远离屏幕的大体上恒定的位置上保持预定义时间段来检测计数手势。例如，终端可比较预定义时间段内检测到的计数手势的坐标，并确定检测到的计数手势的坐标没有变化相应于计数手势。作为另一示例，终端可比较预定义时间段内手的配置，并确定预定义时间段内以计数手势配置来维持手的配置预定义时间段相应于计数手势。根据本发明的示例性实施例，计数手势可包括多个手势，其中，所述多个手势中的每一个手势相应于被伸开的手指和拇指的不同的组合。
返回参照图1，在执行步骤S120之后，在步骤S130，终端确定与分析结果相应的特定动作。
根据本发明的示例性实施例，终端能够确定与分析的空间手势相应的动作。例如，终端能够确定终端的操作模式。可根据检测到的空间手势来确定所述终端的操作模式。
根据本发明的示例性实施例，终端的操作模式可包括相机拍摄模式、多媒体回放模式、文本收发模式、语音呼叫模式、电子书阅读模式、导航模式、日历显示模式、邮件收发模式、视频游戏模式等中的任意模式。
根据本发明的示例性实施例，终端还能够结合操作模式确定与空间手势相应的特定动作。
根据本发明的示例性实施例，如果终端处于多媒体回放模式，并且如果检测到的空间手势与沿特定方向的轻拂手势相应，则终端能够将此手势视作用于回放播放列表上的沿相应方向的下一歌曲的命令。
根据本发明的示例性实施例，如果终端处于电子书阅读模式，并且如果检测到的空间手势相应于沿特定方向的轻拂手势，则终端能够将此手势视作用于沿相应的方向显示电子书的下一页的命令。
为了确定相应于空间手势的动作，可使用如图26中所示的一组空间交互。
图26是示出根据本发明的示例性实施例的设置为在基于空间交互的终端控制方法中使用的示例性空间交互的示图。
参照图26，终端能够定义空间手势的标题，描述与空间手势相应的详细的动作，并存储相应的空间手势的隐喻（metaphor）。具体表现指示与空间手势相应的动作。例如，终端能够分析检测到的空间手势，并基于分析结果从交互集检索映射到空间手势的动作。定义的空间手势和映射到所述定义的空间手势的相关动作可被存储为查找表（LUT）。
此后，在步骤S140，终端执行所述动作。例如，基于空间手势的检测和确定，终端可确定与空间手势相应的操作或动作，并执行与空间手势相应的操作或动作。
根据本发明的示例性实施例，终端能够执行确定的动作。
在下文中，参照附图详细描述根据本发明的示例性实施例的基于空间手势的终端控制方法。
图27是示出根据本发明的示例性实施例的结合基于空间交互的终端控制方法呈现的示例性屏幕显示的示图。
参照图27，终端检测由相机拍摄的输入图像并分析所述图像。终端基于所述输入的图像能够分析输入工具的方向、速度和移动距离中的至少一个。例如，终端能够检测用户的手向左/右方向的移动。
终端能够执行与分析结果相应的动作。例如，终端能够沿向左/向右方向滚动显示单元的屏幕上的项。
终端能够以同步于输入工具的移动速度的速度滚动项。终端还能够同步于输入工具的移动速度和距离翻动电子书的一页或多页（或一章）。终端还能够根据空间手势翻动相册应用的照片或播放在播放列表中接着当前播放的歌曲列出的下一歌曲。
作为示例，图27示出基于检测到从屏幕的一侧到屏幕的相反侧的非触摸式跟踪、检测到具有低速度的从屏幕的一侧到屏幕的相反侧的非触摸式轻拂以及检测到具有高速度的从屏幕的一侧到屏幕的相反侧的非触摸式轻拂来翻动文档或电子书的页面。根据检测到的手势，终端可翻动单个页面、几个页面或若干（例如，很多）页面。例如，翻动的页面的数量可相应于对于终端出现的手势如何呈现。
图28是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图28，终端能够同时或顺序地检测触摸手势和空间手势。终端还能够在跟踪触摸手势的状态下检测空间手势。例如，终端能够在特定位置上做出的触摸手势被维持的状态下检测沿特定方向做出的空间手势。
在此情况下，终端能够在屏幕上选择做出（例如，检测到）触摸手势的位置上的项，并与空间手势的移动方向同步地在屏幕上沿左/右方向移动相应的选择的项。例如，选择的项可以是布置在背景上的图标、小控件、图像等。
终端还能够与空间手势的移动方向同步地沿左/右方向滚动项（除选择的项以外）。所述项可以是显示在背景屏幕上的所有类型的用户界面（UI）项（例如，图标和小控件）中的任意项。
根据本发明的示例性实施例，与触摸手势相应的选择的项可保持在静态的显示位置上，显示在屏幕上的其他项可根据检测到的空间手势（例如，非触摸式轻拂）而被移动或改变。
终端还能够根据空间手势发出呼叫或将文本消息或文件发送到由触摸手势选择的接收者。
图29是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图29，终端能够检测由相机拍摄的输入图像并分析所述输入图像。终端能够分析所述输入图像以检测与拳头相应的空间手势。
终端能够执行与分析结果相应的动作。例如，当检测到与拳头相应的空间手势时，终端可执行相应的预定义的动作。
例如，终端能够捕捉和存储显示在屏幕上的内容或包括未显示在屏幕上的部分的整个内容。终端还能够以图像的形式存储捕捉的内容。
在将捕捉的内容存储为图像的情况下，终端能够与移动速度、握拳之前的手指展开程度、握拳之后的手指折叠程度等同步地将所述图像处理为具有预定大小、分辨率和宽高比的格式。
图30是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图30，终端能够检测由相机拍摄的输入图像并分析所述输入图像。终端能够分析所述输入图像以检测朝向特定方向的空间手势。
终端能够根据空间手势执行导航web浏览器的动作。在多个web浏览器以选项卡的形式被布置的情况下，终端能够执行导航选项卡的动作。在多个应用在运行的情况下，终端能够执行导航应用的动作。
终端还能够显示web浏览器被移动到左/右/上/下侧的屏幕或网页浏览器被移动到顶/低部的屏幕。终端还能够在显示在屏幕上的web浏览器上执行刷新、扩展/收缩、复制、导航、打印、转到先前/下一页等的动作。
图31是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图31，终端能够检测由相机拍摄的输入图像并分析输入工具的形状。例如，终端能够确定手的形状。终端能够确定展开的手指的数量、手指的形状、手的手掌和手背、手指的位置和大小。
终端能够根据所述输入工具的形状执行动作。
根据本发明的示例性实施例，终端能够基于展开的手指的数量确定相机的拍摄时间。例如，终端能够控制相机功能使得相机在与展开的手指的数量相应的时间之后或在与展开的手指的数量相应的时间期间捕捉图像。终端还能够控制相机功能使得相机根据手的形状立即捕捉图像。
根据本发明的示例性实施例，终端还能够控制相机根据手的形状自动对焦。例如，相机可被配置为当检测到竖起拇指手势时执行自动对焦。
终端还能够根据检测到的空间手势应用特定视觉效果。
图32是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图32，终端能够检测沿特定方向的移动或接近于终端的输入工具的手势。例如，终端能够检测手指接近。
终端能够分析移动方向和速度、接近的手指的坐标以及距离。
终端能够执行与所述分析相应的动作。
根据本发明的示例性实施例，终端能够显示根据输入工具的移动方向和速度移动的水面。终端还能够显示示出在特定位置上落下水滴的屏幕。终端能够显示给出各种情感效果的屏幕。终端能够显示2维（2D）或3维（3D）屏幕图像，并与屏幕图像的改变同步地输出震动和声效。
例如，当检测到非触摸式轻拂时，终端可显示示出波动、波纹或横穿屏幕的一系列波动的屏幕。作为另一示例，当检测到指点效果或非触摸式悬停时，终端可显示示出与或正落到液体中的对象或水滴相关的波纹效果的屏幕。
图33是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图33，终端能够检测接近终端的对象的移动或靠近终端的输入工具的手势，分析所述移动或手势，并执行与所述分析相应的动作。
终端能够显示与操作模式相关的简单信息。例如，终端能够在锁屏模式、省电模式等的模式下显示天气信息、时间、电池充电状态和警报窗。
图34是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图34，终端能够检测移动并分析所述移动的方向。终端还能够执行与操作模式相关的动作。
根据本发明的示例性实施例，终端能够基于从速度/加速度传感器、陀螺仪传感器等获取的数据确定所述终端是否处于行驶模式。如果当终端处于行驶模式时检测到移动或空间手势，则检测所述移动或空间手势的方向并可执行相应的动作（例如，接收呼入呼叫、拒绝呼叫、拒绝呼叫并发送告知用户在车辆中的通知消息等）。例如，当终端被确定为处于行驶模式下时，空间手势可作为用于控制所述终端的免提工具。
图35是示出根据本发明的示例性实施例的做出在基于空间交互的终端控制方法中可用的空间手势的示例性情况的示图。
参照图35，终端能够基于空间手势控制多媒体回放。
例如，终端能够检测通过相机输入的图像并根据输入工具的移动和/或形状等向前/向后导航多媒体文件列表、播放/暂停、混编（shuffling）多媒体文件。
图36是示出根据本发明的示例性实施例的终端的配置的框图。
参照图36，终端包括输入单元110、感测单元120、控制单元130、相机单元140、存储单元150和显示单元160。
输入单元110响应于用于控制终端100的用户的操纵产生输入信号。可以以键盘、圆形开关（dome switch）、触摸板（电阻式/电容式）、旋钮、滚动开关等中的至少一个来实现输入单元100。
感测单元120包括触摸传感器121、接近传感器122、速度/加速度传感器123、陀螺仪传感器124等中的至少一个。
触摸传感器121能够检测触摸输入。可使用触摸膜、触摸片、触摸板等来实现触摸传感器121。
根据本发明的示例性实施例，触摸传感器121可与显示单元160集成为触摸屏。触摸传感器121可被配置为将显示单元的特定位置上的压力、电容的变化等转换为电子输入信号。触摸传感器121可能够检测触摸位置和大小以及触摸压力。
如果检测到触摸输入，则触摸传感器121产生相应的触摸信号，并将所述触摸信号发送到控制单元130。控制单元130能够基于所述触摸信号确定做出触摸输入的位置。
根据本发明的示例性实施例，显示单元160可被实现为触摸屏。
接近传感器122可被布置在显示单元160周围的终端100的内部。接近传感器122可能够在没有物理接触的情况下，通过电场或红外线来检测接近预定检测表面的对象或终端100的周围的对象的存在。
可以以透明型光电传感器、直接反射式光电传感器、镜面反射式光学传感器、微波振荡接近传感器、电容式接近传感器、磁性接近传感器、红外接近传感器等中的至少一个来实现接近传感器122。如果以电容式触摸屏的形式实现显示单元160，则接近传感器122可被配置为基于电场的变化检测指示物的接近。
接近传感器122可能够检测接近触摸和接近触摸样式（例如，接近触摸距离、接近触摸方向、接近触摸速度、接近触摸时间、接近触摸位置、接近触摸移动状态等）。与检测到的接近触摸手势相关的信息和接近触摸样式可被显示在显示单元160的屏幕上。
速度/加速度传感器123可能够检测终端100的运动。速度/加速度传感器123可能够包括用于将沿特定方向的加速度的变化转换为电子信号的装置。
根据本发明的示例性实施例，控制单元130能够基于由速度/加速度传感器123检测到的终端的运动确定所述终端是否处于行驶模式。
陀螺仪传感器124可能够检测终端的方位。陀螺仪传感器124可测量终端100的角速度以检测到参考方位的旋转角度。例如，陀螺仪传感器124可能够检测或确定到三个方位轴（例如，方位、俯仰和滚转）的比例角。
根据本发明的示例性实施例，控制单元130可能够基于检测到的方位确定终端100置于平坦的表面上还是被安装在插接站（docking station）上。
控制单元130控制终端100的组件的操作。例如，控制单元130能够检测针对终端100的空间手势，分析所述空间手势，确定映射到所述空间手势的动作，并执行确定的动作。
控制单元130的详细操作是如上所述的。
相机单元140可在视频呼叫模式、静止图片捕捉模式或运动图片捕捉模式下处理视频帧（例如，由图像传感器获取的静止图片和运动图片）。处理的视频帧可通过显示单元160被显示。
相机单元140能够将处理的视频帧传送到存储单元150和控制单元130。控制单元130分析来自相机单元140的图像以检测关于图像的形状、形式等。
存储单元150可能够临时或半永久地存储与控制单元130的操作相关的程序和输入/输出数据（例如，电话簿、消息、静止图像和运动图像等）。存储单元150可还能够存储与在检测触摸屏上的触摸手势时输出的各种震动样式和声效相关的数据。
存储单元150可还能够存储与空间手势映射的一组空间交互和将被交互地执行的相应的动作。
可以以闪速存储器、硬盘、微型多媒体卡（例如，SD和xD存储卡）、随机存取存储器（RAM）、静态RAM（SRAM）、只读存储器（ROM）、电可擦只读存储器（EEPROM）、可编程只读存储器（PROM）、磁存储器、磁盘、光盘等中的至少一个来实现存储单元150。
显示单元可能够以UI或图形UI（GUI）的形式显示（输出）由终端100处理的信息。
可以以液晶显示器（LCD）、薄膜晶体管LCD(TFT LCD)、有机发光二极管（OLED）、柔性显示器和三维（3D）显示器之一来实现显示单元160。
显示单元160可被实现为具有层间触摸传感器121和/或接近传感器123的触摸屏。在此情况下，显示单元160可能够操作为输入装置以及输入装置。
如上所述，根据本发明的示例性实施例的终端和基于空间交互的终端控制方法能够利用用户的空间手势直观方便地控制终端。
另外，根据本发明的示例性实施例的终端和基于空间交互的终端控制方法在即使没有直接触摸终端的情况下也有利于有效地控制终端。例如，当用户利用戴在用户的手上的手套来对终端进行操作时，或当终端沾有异物时，根据本发明的示例性实施例的终端和用于控制这样的终端的方法可能会是有益的。
将理解，在根据权利要求和说明书中的描述的本发明的示例性实施例可以以硬件、软件或硬件和软件的组合的形式被实现。
任何这样的软件可被存储在非暂时计算机可读存储介质中。计算机可读记录介质存储一个或多个程序（软件模块），所述一个或多个程序包括指令，其中，当所述指令被电子装置中的一个或多个处理器执行时，使电子装置执行本发明的方法。
任何这样的软件可以以易失性或非易失性存储器的形式（例如，如只读存储器（ROM）、可擦除还是可重写的存储装置）被存储，或以存储器的形式（例如，随机存取存储器（RAM）、存储芯片、装置或集成电路）被存储，或可在光学或磁性可读介质（例如，紧凑盘（CD）、数字通用盘（DVD）、磁性盘或磁带等）上被存储。将理解所述存储装置和存储介质是可适用于存储包括指令的程序或多个程序的机器可读存储器的示例性实施例，其中，所述程序或多个程序在被执行时实现本发明的示例性实施例。因此，示例性实施例提供包括代码的程序，所述程序实现在此说明书中的权利要求中的任何一个权利要求所要求保护的设备或方法，并且非暂时性机器可读存储器存储这样的程序。
虽然已参照本发明的特定示例性实施例示出和描述了本发明，但是本领域的普通技术人员将理解，在不脱离由权利要求及其等同物限定的本发明的精神和范围的情况下，可以对其做出形式和细节上的各种改变。

Claims (21)

1.一种用于控制终端的方法，所述方法包括：
检测在终端附近之内沿特定方向移动对象的用户手势；
确定用户手势的移动方向、移动速度和移动距离中的至少一个；
根据确定的用户手势的移动方向、移动速度和移动距离中的至少一个，执行与当前运行的应用相关的控制操作。
2.如权利要求1所述的方法，其中，所述用户手势包括：
将对象接近到终端周围的预定范围；
在所述预定范围内，沿特定方向移动所述对象。
3.如权利要求1所述的方法，其中，所述用户手势是下列之一：单向水平移动、单向垂直移动、单向轻拂、往复移动、双向移动和摇摆移动。
4.如权利要求1所述的方法，其中，执行控制操作的步骤包括：沿移动方向翻动电子书的至少一页。
5.如权利要求4所述的方法，其中，翻动电子书的至少一页的步骤包括：基于用户手势的移动速度和移动距离中至少一个，翻动电子书的一页或多页或者一章。
6.如权利要求1所述的方法，其中，执行控制操作的步骤包括：基于用户手势控制回放媒体文件。
7.如权利要求6所述的方法，其中，控制回放媒体文件的步骤包括：播放当前媒体文件之前或之后的媒体文件、向上或向下调整音量、开始或结束回放以及混编文件中的至少一个。
8.如权利要求1所述的方法，其中，执行控制操作的步骤包括：根据移动方向、移动速度和移动距离中的至少一个控制以下中的至少一个：沿向上、向下、向左或向右方向移动应用的内容、扩大或缩小应用的内容、复制应用的内容、打印应用的内容以及在屏幕上搜索应用的内容。
9.如权利要求10所述的方法，其中，所述内容包括web页、列表、图像和电子书中的至少一个。
10.如权利要求1所述的方法，其中，执行控制操作的步骤包括：控制显示单元的屏幕上的与用户手势相应的效果的应用。
11.如权利要求10所述的方法，其中，控制效果的应用的步骤包括：应用波浪效果、水滴效果、风效果、颜色变化效果和屏幕切换效果中的至少一个。
12.如权利要求10所述的方法，其中，所述屏幕是空闲屏幕、锁定屏幕和用户界面屏幕之一。
13.如权利要求1所述的方法，其中，执行控制操作的步骤包括：根据用户手势导航在背景上运行的web页浏览器的选项卡。
14.如权利要求1所述的方法，其中，执行控制操作的步骤包括：在web页的选项卡和当前运行的应用中的至少一个当中进行切换。
15.如权利要求14所述的方法，其中，在web页的选项卡和当前运行的应用中的至少一个当中进行切换的步骤包括：
在web页或当前运行的应用的列表上确定与移动方向相应的选项卡或背景运行的应用；
切换到将被显示在屏幕上的确定的web页或背景运行的应用。
16.一种终端，包括：
感测单元，检测在终端附近之内沿特定方向移动对象的用户手势；
控制单元，确定用户手势的移动方向、移动速度和移动距离中的至少一个，并根据确定的用户手势的移动方向、移动速度和移动距离中的至少一个，执行与当前运行的应用相关的控制操作；
显示单元，在控制单元的控制下，显示所述应用的执行屏幕。
17.如权利要求16所述的终端，其中，用户手势包括：
将对象接近到终端周围的预定范围；
在所述预定范围内，沿特定方向移动所述对象。
18.如权利要求16所述的终端，其中，控制单元控制翻页、媒体回放、内容移动、web页浏览器选项卡切换、应用切换和屏幕上的视觉效果应用当中的至少一个。
19.如权利要求16所述的终端，其中，感测单元使用接近传感器、红外传感器和相机传感器中的至少一个来检测用户手势，
其中，感测单元将与用户手势相应的输入信号产生到控制单元。
20.如权利要求16所述的终端，其中，用户手势与下列之一相应：单向水平移动、单向垂直移动、单向轻拂、往复移动、双向移动和摇摆移动。
21.一种非暂时性计算机可读存储介质，存储当被执行时使至少一个处理器执行如权利要求1所述的方法的指令。
CN2013101629001A 2012-05-04 2013-05-06 终端和基于空间交互控制所述终端的方法 Pending CN103383598A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910897441.9A CN110647244A (zh) 2012-05-04 2013-05-06 终端和基于空间交互控制所述终端的方法

Applications Claiming Priority (8)

Application Number Priority Date Filing Date Title
KR1020120047678A KR20130124061A (ko) 2012-05-04 2012-05-04 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR10-2012-0047678 2012-05-04
KR1020120132222A KR20130124138A (ko) 2012-11-21 2012-11-21 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR10-2012-0132222 2012-11-21
KR10-2012-0132223 2012-11-21
KR1020120132223A KR20130124139A (ko) 2012-11-21 2012-11-21 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR10-2012-0137740 2012-11-30
KR1020120137740A KR20130124143A (ko) 2012-11-30 2012-11-30 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말

Related Child Applications (1)

Application Number Title Priority Date Filing Date
CN201910897441.9A Division CN110647244A (zh) 2012-05-04 2013-05-06 终端和基于空间交互控制所述终端的方法

Publications (1)

Publication Number Publication Date
CN103383598A true CN103383598A (zh) 2013-11-06

Family

ID=48227029

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201910897441.9A Pending CN110647244A (zh) 2012-05-04 2013-05-06 终端和基于空间交互控制所述终端的方法
CN2013101629001A Pending CN103383598A (zh) 2012-05-04 2013-05-06 终端和基于空间交互控制所述终端的方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201910897441.9A Pending CN110647244A (zh) 2012-05-04 2013-05-06 终端和基于空间交互控制所述终端的方法

Country Status (5)

Country Link
US (3) US20130293454A1 (zh)
EP (2) EP3742263A1 (zh)
JP (1) JP2013235588A (zh)
CN (2) CN110647244A (zh)
AU (1) AU2013205613B2 (zh)

Cited By (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103645897A (zh) * 2013-12-05 2014-03-19 深圳市中兴移动通信有限公司 移动终端及其操作方法
CN103838496A (zh) * 2014-02-20 2014-06-04 联想(北京)有限公司 一种控制电子设备的方法及电子设备
CN104063047A (zh) * 2014-01-09 2014-09-24 苏州天趣信息科技有限公司 基于手势遥控对电子书翻页的遥控装置及其翻页方法
CN104219786A (zh) * 2014-08-21 2014-12-17 深圳市金立通信设备有限公司 一种终端连接的方法
CN104219384A (zh) * 2014-08-21 2014-12-17 深圳市金立通信设备有限公司 一种终端
CN104243693A (zh) * 2014-08-21 2014-12-24 深圳市金立通信设备有限公司 一种终端
CN104243692A (zh) * 2014-08-21 2014-12-24 深圳市金立通信设备有限公司 一种终端连接的方法
CN104679230A (zh) * 2013-12-03 2015-06-03 华为终端有限公司 一种非接触式输入信息的方法及终端
CN104765278A (zh) * 2015-04-20 2015-07-08 宇龙计算机通信科技(深圳)有限公司 一种智能家居设备控制方法及电子设备
CN104978133A (zh) * 2014-04-04 2015-10-14 阿里巴巴集团控股有限公司 一种用于智能终端的截屏方法和装置
CN105021204A (zh) * 2014-04-24 2015-11-04 深圳市赛格导航科技股份有限公司 一种非接触式车载导航***及导航方法
CN105242599A (zh) * 2015-09-30 2016-01-13 南京邮电大学 一种基于手势追踪传感器的音乐无线控制***和方法
CN105717982A (zh) * 2014-12-03 2016-06-29 联想(北京)有限公司 信息处理方法及电子设备
CN105872691A (zh) * 2015-12-14 2016-08-17 乐视致新电子科技（天津）有限公司 浏览器控制方法及装置
CN105975072A (zh) * 2016-04-29 2016-09-28 乐视控股（北京）有限公司 识别手势动作的方法、装置及***
CN106249899A (zh) * 2016-08-15 2016-12-21 珠海格力电器股份有限公司 一种手势识别***、电器及其控制方法
WO2016202005A1 (zh) * 2015-06-16 2016-12-22 腾讯科技（深圳）有限公司 游戏场景中锁定目标的方法和终端
CN106371759A (zh) * 2016-09-29 2017-02-01 努比亚技术有限公司 一种基于接近传感器的速度识别***及移动终端
CN106406524A (zh) * 2016-09-05 2017-02-15 珠海格力电器股份有限公司 设备的控制方法及装置
CN106484105A (zh) * 2016-09-20 2017-03-08 努比亚技术有限公司 一种实现手势识别的方法及装置
CN106502383A (zh) * 2016-09-21 2017-03-15 努比亚技术有限公司 一种信息处理方法及移动终端
CN106603811A (zh) * 2016-10-31 2017-04-26 努比亚技术有限公司 一种终端静音控制装置及方法
WO2017088631A1 (zh) * 2015-11-27 2017-06-01 努比亚技术有限公司 一种移动终端及其增减调节方法及装置、存储介质
CN107005609A (zh) * 2015-04-28 2017-08-01 华为技术有限公司 基于吹气动作操作移动终端的方法和移动终端
CN108196666A (zh) * 2017-09-28 2018-06-22 努比亚技术有限公司 一种终端控制的方法、终端及计算机可读存储介质
CN108632411A (zh) * 2018-05-11 2018-10-09 Oppo广东移动通信有限公司 电子装置
CN108989553A (zh) * 2018-06-29 2018-12-11 北京微播视界科技有限公司 场景操控的方法、装置及电子设备
CN109343754A (zh) * 2018-08-27 2019-02-15 维沃移动通信有限公司 一种图像显示方法及终端
CN110069137A (zh) * 2019-04-30 2019-07-30 徐州重型机械有限公司 手势控制方法、控制装置和控制***
CN110249290A (zh) * 2017-02-13 2019-09-17 索尼公司 信息处理设备、信息处理方法和程序

Families Citing this family (55)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI463371B (zh) * 2012-06-20 2014-12-01 Pixart Imaging Inc 手勢偵測裝置以及根據速度判斷連續手勢的方法
CN103713735B (zh) * 2012-09-29 2018-03-16 华为技术有限公司 一种使用非接触式手势控制终端设备的方法和装置
US20140267094A1 (en) * 2013-03-13 2014-09-18 Microsoft Corporation Performing an action on a touch-enabled device based on a gesture
US20140368737A1 (en) 2013-06-17 2014-12-18 Spotify Ab System and method for playing media during navigation between media streams
US9430045B2 (en) * 2013-07-17 2016-08-30 Lenovo (Singapore) Pte. Ltd. Special gestures for camera control and image processing operations
US20150033121A1 (en) * 2013-07-26 2015-01-29 Disney Enterprises, Inc. Motion based filtering of content elements
US10110649B2 (en) 2013-08-01 2018-10-23 Spotify Ab System and method for transitioning from decompressing one compressed media stream to decompressing another media stream
WO2015022498A1 (en) * 2013-08-15 2015-02-19 Elliptic Laboratories As Touchless user interfaces
US9785241B2 (en) * 2013-08-26 2017-10-10 Paypal, Inc. Gesture identification
US9917869B2 (en) 2013-09-23 2018-03-13 Spotify Ab System and method for identifying a segment of a file that includes target content
US9529888B2 (en) 2013-09-23 2016-12-27 Spotify Ab System and method for efficiently providing media and associated metadata
KR20150043149A (ko) * 2013-10-14 2015-04-22 삼성전자주식회사 손 모양 인식을 이용한 디지털 장치의 제어 방법 및 촬영 방법과, 그 장치
US10152136B2 (en) * 2013-10-16 2018-12-11 Leap Motion, Inc. Velocity field interaction for free space gesture interface and control
US9063640B2 (en) 2013-10-17 2015-06-23 Spotify Ab System and method for switching between media items in a plurality of sequences of media items
KR102063349B1 (ko) * 2013-11-19 2020-01-08 엘지디스플레이 주식회사 표시장치와 그 구동 방법
US10126822B2 (en) 2013-12-16 2018-11-13 Leap Motion, Inc. User-defined virtual interaction space and manipulation of virtual configuration
KR20150087544A (ko) 2014-01-22 2015-07-30 엘지이노텍 주식회사 제스처 장치, 그 동작 방법 및 이를 구비한 차량
KR20160114158A (ko) * 2014-01-28 2016-10-04 후아웨이 디바이스 컴퍼니 리미티드 단말 장치를 처리하는 방법 및 단말 장치
GB2523132A (en) * 2014-02-13 2015-08-19 Nokia Technologies Oy An apparatus and associated methods for controlling content on a display user interface
CN104866070A (zh) * 2014-02-20 2015-08-26 联想(北京)有限公司 信息处理的方法及电子设备
US10162737B2 (en) 2014-02-20 2018-12-25 Entit Software Llc Emulating a user performing spatial gestures
WO2015148591A1 (en) 2014-03-25 2015-10-01 Analog Devices, Inc. Optical user interface
KR102251541B1 (ko) * 2014-06-23 2021-05-14 엘지전자 주식회사 이동단말기 및 그것의 제어방법
WO2016002270A1 (ja) 2014-06-30 2016-01-07 クラリオン株式会社 非接触操作検出装置
JP5682899B1 (ja) * 2014-08-04 2015-03-11 求 藤川 撮像装置、撮像装置の制御方法、調整装置、調整装置の制御方法、設定装置、設定装置の制御方法、装置プログラム
JP6519074B2 (ja) * 2014-09-08 2019-05-29 任天堂株式会社 電子機器
CN105487648A (zh) * 2014-09-16 2016-04-13 深圳富泰宏精密工业有限公司 增加镜头功能的软件控制***及方法
WO2016104266A1 (ja) * 2014-12-24 2016-06-30 ソニー株式会社 電子機器および電子機器の制御方法
DE102015201613A1 (de) * 2015-01-30 2016-08-04 Robert Bosch Gmbh Verfahren und Vorrichtung zum Betreiben einer Eingabevorrichtung, Eingabevorrichtung
JP6519075B2 (ja) * 2015-02-10 2019-05-29 任天堂株式会社 情報処理装置、情報処理プログラム、情報処理システム、および、情報処理方法
WO2016136838A1 (ja) * 2015-02-25 2016-09-01 京セラ株式会社 ウェアラブル装置、制御方法及び制御プログラム
JP5869711B1 (ja) * 2015-04-07 2016-02-24 株式会社メディアドゥ コンテンツ表示装置、コンテンツ表示プログラム、コンテンツ表示方法
CN104978131B (zh) * 2015-06-18 2018-09-18 Tcl移动通信科技（宁波）有限公司 一种基于相机图像的电子书翻页检测方法及***
CN108475324B (zh) * 2015-09-09 2022-03-25 格马尔托股份有限公司 非接触摩擦纹脊捕获装置
CN105491206B (zh) * 2015-11-30 2018-04-06 上海斐讯数据通信技术有限公司 一种近距离感应解锁方法及***、智能设备
CN105718056B (zh) * 2016-01-19 2019-09-10 北京小米移动软件有限公司 手势识别方法及装置
US20170351336A1 (en) * 2016-06-07 2017-12-07 Stmicroelectronics, Inc. Time of flight based gesture control devices, systems and methods
CN106126029B (zh) * 2016-06-24 2019-02-22 维沃移动通信有限公司 一种背景图片切换方法及移动终端
US10775998B2 (en) * 2017-01-04 2020-09-15 Kyocera Corporation Electronic device and control method
CN107046597B (zh) * 2017-02-22 2019-11-26 Tcl移动通信科技（宁波）有限公司 一种基于移动终端的音量设置处理方法及移动终端
JP6293953B1 (ja) * 2017-04-04 2018-03-14 京セラ株式会社 電子機器、プログラムおよび制御方法
CN107155009A (zh) * 2017-07-13 2017-09-12 彭声强 一种手机拍照方法
US20190179499A1 (en) * 2017-10-20 2019-06-13 Qurika Inc. Systems and methods for providing a digital content reader and collection display application implementing 3d graphical user interfaces and interactions
US11875012B2 (en) 2018-05-25 2024-01-16 Ultrahaptics IP Two Limited Throwable interface for augmented reality and virtual reality environments
JP7244231B2 (ja) 2018-07-27 2023-03-22 京セラ株式会社 電子機器、制御プログラム及び表示制御方法
JP7034856B2 (ja) * 2018-07-27 2022-03-14 京セラ株式会社 電子機器、制御プログラム及び表示制御方法
USD930676S1 (en) * 2018-09-07 2021-09-14 Samsung Display Co., Ltd. Display device with generated image for display
JP2020052681A (ja) * 2018-09-26 2020-04-02 シュナイダーエレクトリックホールディングス株式会社 操作処理装置
JP7280032B2 (ja) * 2018-11-27 2023-05-23 ローム株式会社 入力デバイス、自動車
CN112394811B (zh) * 2019-08-19 2023-12-08 华为技术有限公司 一种隔空手势的交互方法及电子设备
CN111524157B (zh) * 2020-04-26 2022-07-01 南瑞集团有限公司 基于摄像头阵列的触屏物体分析方法、***及存储介质
CN112270302A (zh) * 2020-11-17 2021-01-26 支付宝(杭州)信息技术有限公司 肢体控制方法、装置和电子设备
JP2022087700A (ja) * 2020-12-01 2022-06-13 京セラドキュメントソリューションズ株式会社 電子機器および画像形成装置
US11994909B2 (en) 2020-12-30 2024-05-28 Panasonic Intellectual Property Management Co., Ltd. Electronic device, electronic system, and sensor setting method for an electronic device
WO2024117757A1 (ko) * 2022-11-29 2024-06-06 삼성전자주식회사 제스처를 인식하는 전자 장치 및 그 동작 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080040692A1 (en) * 2006-06-29 2008-02-14 Microsoft Corporation Gesture input
US20100175018A1 (en) * 2009-01-07 2010-07-08 Microsoft Corporation Virtual page turn
CN201945948U (zh) * 2011-03-10 2011-08-24 中科芯集成电路股份有限公司 一种基于图像检测的非接触式手势翻书演示***

Family Cites Families (40)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2986455B1 (ja) * 1998-07-24 1999-12-06 株式会社エイ・ティ・アール知能映像通信研究所 手振り認識装置
US20040196400A1 (en) * 2003-04-07 2004-10-07 Stavely Donald J. Digital camera user interface using hand gestures
GB2407635B (en) * 2003-10-31 2006-07-12 Hewlett Packard Development Co Improvements in and relating to camera control
US8381135B2 (en) * 2004-07-30 2013-02-19 Apple Inc. Proximity detector in handheld device
JP4717539B2 (ja) * 2005-07-26 2011-07-06 キヤノン株式会社 撮像装置及び撮像方法
DE102006037156A1 (de) * 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
GB0612624D0 (en) * 2006-06-26 2006-08-02 Symbian Software Ltd Speed of gesture
US7877707B2 (en) * 2007-01-06 2011-01-25 Apple Inc. Detecting and interpreting real-world and security gestures on touch and hover sensitive devices
US8219936B2 (en) * 2007-08-30 2012-07-10 Lg Electronics Inc. User interface for a mobile device using a user's gesture in the proximity of an electronic device
CN101465961B (zh) * 2007-12-19 2013-10-30 神基科技股份有限公司 以特征影像辨识控制快门的摄像装置及方法
US9772689B2 (en) * 2008-03-04 2017-09-26 Qualcomm Incorporated Enhanced gesture-based image manipulation
JP2009260907A (ja) * 2008-03-18 2009-11-05 Nec Corp 携帯端末装置、端末操作方法、プログラム、及び記録媒体
US8576181B2 (en) * 2008-05-20 2013-11-05 Lg Electronics Inc. Mobile terminal using proximity touch and wallpaper controlling method thereof
US7990421B2 (en) * 2008-07-18 2011-08-02 Sony Ericsson Mobile Communications Ab Arrangement and method relating to an image recording device
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
JP2010170166A (ja) * 2009-01-20 2010-08-05 Sony Corp 情報処理装置、情報処理方法および情報処理プログラム
US9569001B2 (en) * 2009-02-03 2017-02-14 Massachusetts Institute Of Technology Wearable gestural interface
JP2010244132A (ja) * 2009-04-01 2010-10-28 Mitsubishi Electric Corp タッチパネル付きユーザインタフェース装置、ユーザインタフェース制御方法およびユーザインタフェース制御プログラム
JP4840620B2 (ja) * 2009-04-30 2011-12-21 株式会社デンソー 車載用電子機器操作装置
US8619029B2 (en) * 2009-05-22 2013-12-31 Motorola Mobility Llc Electronic device with sensing assembly and method for interpreting consecutive gestures
JP5282661B2 (ja) * 2009-05-26 2013-09-04 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
JP2010277197A (ja) * 2009-05-26 2010-12-09 Sony Corp 情報処理装置、情報処理方法およびプログラム
US20110022307A1 (en) * 2009-07-27 2011-01-27 Htc Corporation Method for operating navigation frame, navigation apparatus and recording medium
JP2011134271A (ja) * 2009-12-25 2011-07-07 Sony Corp 情報処理装置、情報処理方法およびプログラム
CN101742114A (zh) * 2009-12-31 2010-06-16 上海量科电子科技有限公司 通过手势识别来决定拍摄操作的方法及装置
US10007393B2 (en) * 2010-01-19 2018-06-26 Apple Inc. 3D view of file structure
JP5413673B2 (ja) * 2010-03-08 2014-02-12 ソニー株式会社 情報処理装置および方法、並びにプログラム
KR20110109551A (ko) * 2010-03-31 2011-10-06 삼성전자주식회사 터치스크린 장치 및 터치스크린 장치의 입력 처리 방법
US8457353B2 (en) * 2010-05-18 2013-06-04 Microsoft Corporation Gestures and gesture modifiers for manipulating a user-interface
US9086956B2 (en) * 2010-05-21 2015-07-21 Zetta Research and Development—RPO Series Methods for interacting with an on-screen document
JP5601045B2 (ja) * 2010-06-24 2014-10-08 ソニー株式会社 ジェスチャ認識装置、ジェスチャ認識方法およびプログラム
KR20120024247A (ko) * 2010-09-06 2012-03-14 삼성전자주식회사 사용자의 제스처를 인식하여 이동 장치를 동작하는 방법 및 그 이동 장치
CN102055844B (zh) * 2010-11-15 2013-05-15 惠州Tcl移动通信有限公司 一种通过手势识别实现照相机快门功能的方法及手机装置
US8982045B2 (en) * 2010-12-17 2015-03-17 Microsoft Corporation Using movement of a computing device to enhance interpretation of input events produced when interacting with the computing device
CN102142084B (zh) * 2011-05-06 2012-12-26 北京网尚数字电影院线有限公司 一种手势识别的方法
US20120304132A1 (en) * 2011-05-27 2012-11-29 Chaitanya Dev Sareen Switching back to a previously-interacted-with application
CN102420942A (zh) * 2011-11-28 2012-04-18 康佳集团股份有限公司 一种基于拍照设备的拍照控制方法及拍照设备
US20130155237A1 (en) * 2011-12-16 2013-06-20 Microsoft Corporation Interacting with a mobile device within a vehicle using gestures
US8811938B2 (en) * 2011-12-16 2014-08-19 Microsoft Corporation Providing a user interface experience based on inferred vehicle state
US10209881B2 (en) * 2012-03-15 2019-02-19 Ibrahim Farid Cherradi El Fadili Extending the free fingers typing technology and introducing the finger taps language technology

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080040692A1 (en) * 2006-06-29 2008-02-14 Microsoft Corporation Gesture input
US20100175018A1 (en) * 2009-01-07 2010-07-08 Microsoft Corporation Virtual page turn
CN201945948U (zh) * 2011-03-10 2011-08-24 中科芯集成电路股份有限公司 一种基于图像检测的非接触式手势翻书演示***

Cited By (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104679230B (zh) * 2013-12-03 2018-05-18 华为终端（东莞）有限公司 一种非接触式输入信息的方法及终端
CN104679230A (zh) * 2013-12-03 2015-06-03 华为终端有限公司 一种非接触式输入信息的方法及终端
CN103645897A (zh) * 2013-12-05 2014-03-19 深圳市中兴移动通信有限公司 移动终端及其操作方法
CN104063047A (zh) * 2014-01-09 2014-09-24 苏州天趣信息科技有限公司 基于手势遥控对电子书翻页的遥控装置及其翻页方法
CN103838496A (zh) * 2014-02-20 2014-06-04 联想(北京)有限公司 一种控制电子设备的方法及电子设备
CN104978133A (zh) * 2014-04-04 2015-10-14 阿里巴巴集团控股有限公司 一种用于智能终端的截屏方法和装置
TWI659331B (zh) * 2014-04-04 2019-05-11 阿里巴巴集團服務有限公司 用於智慧終端機的截取螢幕方法和裝置
CN105021204A (zh) * 2014-04-24 2015-11-04 深圳市赛格导航科技股份有限公司 一种非接触式车载导航***及导航方法
CN104219786A (zh) * 2014-08-21 2014-12-17 深圳市金立通信设备有限公司 一种终端连接的方法
CN104219786B (zh) * 2014-08-21 2019-05-14 深圳市金立通信设备有限公司 一种终端连接的方法
CN104243692A (zh) * 2014-08-21 2014-12-24 深圳市金立通信设备有限公司 一种终端连接的方法
CN104243693A (zh) * 2014-08-21 2014-12-24 深圳市金立通信设备有限公司 一种终端
CN104219384A (zh) * 2014-08-21 2014-12-17 深圳市金立通信设备有限公司 一种终端
CN105717982B (zh) * 2014-12-03 2019-03-08 联想(北京)有限公司 信息处理方法及电子设备
CN105717982A (zh) * 2014-12-03 2016-06-29 联想(北京)有限公司 信息处理方法及电子设备
CN104765278A (zh) * 2015-04-20 2015-07-08 宇龙计算机通信科技(深圳)有限公司 一种智能家居设备控制方法及电子设备
CN107005609B (zh) * 2015-04-28 2020-08-07 华为技术有限公司 基于吹气动作操作移动终端的方法和移动终端
CN107005609A (zh) * 2015-04-28 2017-08-01 华为技术有限公司 基于吹气动作操作移动终端的方法和移动终端
WO2016202005A1 (zh) * 2015-06-16 2016-12-22 腾讯科技（深圳）有限公司 游戏场景中锁定目标的方法和终端
US10391390B2 (en) 2015-06-16 2019-08-27 Tencent Technology (Shenzhen) Company Limited Method for locking target in game scenario and terminal
US10814221B2 (en) 2015-06-16 2020-10-27 Tencent Technology (Shenzhen) Company Limited Method for locking target in game scenario and terminal
CN105242599A (zh) * 2015-09-30 2016-01-13 南京邮电大学 一种基于手势追踪传感器的音乐无线控制***和方法
WO2017088631A1 (zh) * 2015-11-27 2017-06-01 努比亚技术有限公司 一种移动终端及其增减调节方法及装置、存储介质
WO2017101504A1 (zh) * 2015-12-14 2017-06-22 乐视控股（北京）有限公司 浏览器控制方法及装置
CN105872691A (zh) * 2015-12-14 2016-08-17 乐视致新电子科技（天津）有限公司 浏览器控制方法及装置
CN105975072A (zh) * 2016-04-29 2016-09-28 乐视控股（北京）有限公司 识别手势动作的方法、装置及***
CN106249899A (zh) * 2016-08-15 2016-12-21 珠海格力电器股份有限公司 一种手势识别***、电器及其控制方法
CN106406524A (zh) * 2016-09-05 2017-02-15 珠海格力电器股份有限公司 设备的控制方法及装置
CN106484105A (zh) * 2016-09-20 2017-03-08 努比亚技术有限公司 一种实现手势识别的方法及装置
CN106502383A (zh) * 2016-09-21 2017-03-15 努比亚技术有限公司 一种信息处理方法及移动终端
CN106371759A (zh) * 2016-09-29 2017-02-01 努比亚技术有限公司 一种基于接近传感器的速度识别***及移动终端
CN106603811A (zh) * 2016-10-31 2017-04-26 努比亚技术有限公司 一种终端静音控制装置及方法
CN110249290A (zh) * 2017-02-13 2019-09-17 索尼公司 信息处理设备、信息处理方法和程序
CN108196666A (zh) * 2017-09-28 2018-06-22 努比亚技术有限公司 一种终端控制的方法、终端及计算机可读存储介质
CN108632411A (zh) * 2018-05-11 2018-10-09 Oppo广东移动通信有限公司 电子装置
CN108989553A (zh) * 2018-06-29 2018-12-11 北京微播视界科技有限公司 场景操控的方法、装置及电子设备
WO2020001015A1 (zh) * 2018-06-29 2020-01-02 北京微播视界科技有限公司 场景操控的方法、装置及电子设备
GB2590207A (en) * 2018-06-29 2021-06-23 Beijing Microlive Vision Tech Co Ltd Scenario control method and device, and electronic device
GB2590207B (en) * 2018-06-29 2023-02-08 Beijing Microlive Vision Tech Co Ltd Scene controlling method, device and electronic equipment
US11755119B2 (en) 2018-06-29 2023-09-12 Beijing Microlive Vision Technology Co., Ltd Scene controlling method, device and electronic equipment
CN109343754A (zh) * 2018-08-27 2019-02-15 维沃移动通信有限公司 一种图像显示方法及终端
CN110069137A (zh) * 2019-04-30 2019-07-30 徐州重型机械有限公司 手势控制方法、控制装置和控制***
CN110069137B (zh) * 2019-04-30 2022-07-08 徐州重型机械有限公司 手势控制方法、控制装置和控制***

Also Published As

Publication number Publication date
AU2013205613B2 (en) 2017-12-21
US20200257373A1 (en) 2020-08-13
EP2660682A2 (en) 2013-11-06
AU2013205613A1 (en) 2013-11-21
EP2660682A3 (en) 2017-04-26
US20130293454A1 (en) 2013-11-07
EP3742263A1 (en) 2020-11-25
CN110647244A (zh) 2020-01-03
JP2013235588A (ja) 2013-11-21
US20180107282A1 (en) 2018-04-19

Similar Documents

Publication Publication Date Title
CN103383598A (zh) 终端和基于空间交互控制所述终端的方法
US10387016B2 (en) Method and terminal for displaying a plurality of pages,method and terminal for displaying a plurality of applications being executed on terminal, and method of executing a plurality of applications
US20200073443A1 (en) Flexible display apparatus and operating method thereof
US9927964B2 (en) Customization of GUI layout based on history of use
US8059111B2 (en) Data transfer using hand-held device
US20140267130A1 (en) Hover gestures for touch-enabled devices
US20120159402A1 (en) Method and apparatus for providing different user interface effects for different implementation characteristics of a touch event
WO2009084809A1 (en) Apparatus and method for controlling screen by using touch screen
AU2013306644A1 (en) Flexible apparatus and control method thereof
CN102870076A (zh) 便携式电子设备及其控制方法
KR20140010596A (ko) 터치 및 제스처 입력을 이용한 단말의 제어 방법 및 그 단말
CN101981537A (zh) 拖放具有触敏屏幕的便携电子设备的用户界面
KR20160028823A (ko) 전자 장치에서 기능 실행 방법 및 장치
WO2014121626A1 (zh) 一种移动终端快捷方式的显示方法、装置及存储介质
US20170285904A1 (en) Direct data transfer electronic device and method
KR20130124061A (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR20130124139A (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
US9256360B2 (en) Single touch process to achieve dual touch user interface
KR102194778B1 (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR20130124143A (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR102061254B1 (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR102306535B1 (ko) 디바이스를 제어하는 방법 및 디바이스
KR20130124138A (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말
KR20200143346A (ko) 공간상의 상호 작용을 이용한 단말의 제어 방법 및 그 단말

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20131106