CN105278840A - 一种用于操控操作对象的方法与设备 - Google Patents

Abstract

本发明的目的是提供一种用于操控操作对象的方法与设备。本发明检测操作对象是否进入对应的应用窗口，当存在操作对象进入所述应用窗口时，则在所述应用窗口内呈现所述操作对象对应的对象指示信息、以及所述对象指示信息与所述操作对象的视觉关联信息。与现有技术相比，本发明通过在操作对象与对象指示信息间建立视觉关联的方式，方便用户识别、选择和操控所述操作对象，支持用户便捷地对该操作对象执行操作，进而支持更为复杂的人机交互，以便用户更为便捷地执行复杂操作，提高人机交互效率并提升用户的使用体验。

Description

一种用于操控操作对象的方法与设备

技术领域

本发明涉及计算机技术领域，尤其涉及一种用于操控操作对象的技术。

背景技术

在现有技术中，对操作对象的操控方法依赖于配套的硬件设施。如在PC端对操作对象的操控方法中，需要采用传统的鼠标、键盘等硬件进行支持，用户通过鼠标点击、键盘按键进行输入等方式，实现对屏幕上操作对象的操控；在基于其他外接设备，如PS3、PS4、XBOX360等主机时，用户可通过操控手柄来操作屏幕上的操作对象。

而在触摸设备上，用户仅能通过触摸或点击触摸屏来实现对操作对象的操控。当一个或多个操作对象在屏幕上频繁移动或需要同时对多个操作对象进行操作时，仅依靠用户手指在屏幕上进行点选则很难实现对操作对象的快速准确选择与快速目标切换，从而导致操作不便，影响了处理效率。

发明内容

本发明的目的是提供一种用于操控操作对象的方法与设备。

根据本发明的一个方面，提供了一种用于操控操作对象的方法，其中，该方法包括：

a检测是否有操作对象进入对应的应用窗口；

b当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

根据本发明的另一方面，还提供了一种用于操控操作对象的设备，其中，该设备包括：

第一装置，用于检测是否有操作对象进入对应的应用窗口；

第二装置，用于当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

与现有技术相比，本发明检测操作对象是否进入对应的应用窗口，当存在操作对象进入所述应用窗口时，则在所述应用窗口内呈现所述操作对象对应的对象指示信息、以及所述对象指示信息与所述操作对象的视觉关联信息；从而通过在操作对象与对象指示信息间建立视觉关联的方式，方便用户识别、选择和操控所述操作对象，支持用户便捷地对该操作对象执行操作，进而支持更为复杂的人机交互，以便用户更为便捷地执行复杂操作，提高人机交互效率并提升用户的使用体验。

而且，本发明还可以在所述应用窗口内呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息，从而能够在屏幕上更加清晰完整的显示相关对象，进一步方便用户的识别、选择和操控。

而且，本发明还可以根据所述对象指示信息与所述操作对象来确定视觉关联信息；进一步地，还可以根据所述操作对象的对象相关信息确定所述对象指示信息与所述操作对象的视觉关联信息；或者，进一步地，还可以根据所述应用窗口内的已有视觉关联信息确定所述对象指示信息与所述操作对象的视觉关联信息，使得所确定的视觉关联信息与所述已有视觉关联信息在视觉上相区分。从而，本发明提供了多种易于识别的视觉关联信息，进一步方便用户识别、选择和操控所述操作对象，提高人机交互效率并提升用户的使用体验。

而且，本发明还可以根据用户对所述对象指示信息的选中操作，选中所述操作对象；进一步地，还可以根据所述选中操作的一种或多种后续操作，对所述视觉关联信息和/或所述对象指示信息执行隐藏操作。从而，本发明能够便捷、高效地对所述操作对象进行操作，支持更为复杂的人机交互，进一步地还能够提供更为清晰的显示效果，提高人机交互效率并提升用户的使用体验。

而且，本发明还可以在触摸终端上进行应用，并根据触摸终端触摸屏的特点来设置所述对象指示信息、所述操作对象的位置；进一步地，还可以根据用户对对象操控按钮的滑动操作移动所述应用窗口中的所述对象指示信息，并根据移动后的所述对象指示信息调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。从而，本发明能够适应用户操作触摸屏的操作特点，即使仅采用单指的小幅移动也可以实现对所述操作对象的控制，因此，操作更为便捷、高效，提高人机交互效率并提升用户的使用体验。

附图说明

通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本发明的其它特征、目的和优点将会变得更明显：

图1示出根据本发明一个方面的一种用于操控操作对象的设备示意图；

图2示出根据本发明一个优选实施例的一种用于操控操作对象的设备示意图；

图3示出根据本发明另一个方面的一种用于操控操作对象的方法流程图；

图4示出根据本发明一个优选实施例的一种用于操控操作对象的方法流程图；

图5示出根据本发明另一个优选实施例的一种用于操控操作对象的应用窗口内的呈现信息示意图。

附图中相同或相似的附图标记代表相同或相似的部件。

具体实施方式

下面结合附图对本发明作进一步详细描述。

在更加详细地讨论示例性实施例之前应当提到的是，一些示例性实施例被描述成作为流程图描绘的处理或方法。虽然流程图将各项操作描述成顺序的处理，但是其中的许多操作可以被并行地、并发地或者同时实施。此外，各项操作的顺序可以被重新安排。当其操作完成时所述处理可以被终止，但是还可以具有未包括在附图中的附加步骤。所述处理可以对应于方法、函数、规程、子例程、子程序等等。

在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器(CPU)、输入/输出接口、网络接口和内存。

内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RAM)和/或非易失性内存等形式，如只读存储器(ROM)或闪存(flashRAM)。内存是计算机可读介质的示例。

计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括非暂存电脑可读媒体(transitorymedia)，如调制的数据信号和载波。

后面所讨论的方法(其中一些通过流程图示出)可以通过硬件、软件、固件、中间件、微代码、硬件描述语言或者其任意组合来实施。当用软件、固件、中间件或微代码来实施时，用以实施必要任务的程序代码或代码段可以被存储在机器或计算机可读介质(比如存储介质)中。(一个或多个)处理器可以实施必要的任务。

这里所公开的具体结构和功能细节仅仅是代表性的，并且是用于描述本发明的示例性实施例的目的。但是本发明可以通过许多替换形式来具体实现，并且不应当被解释成仅仅受限于这里所阐述的实施例。

应当理解的是，虽然在这里可能使用了术语“第一”、“第二”等等来描述各个单元，但是这些单元不应当受这些术语限制。使用这些术语仅仅是为了将一个单元与另一个单元进行区分。举例来说，在不背离示例性实施例的范围的情况下，第一单元可以被称为第二单元，并且类似地第二单元可以被称为第一单元。这里所使用的术语“和/或”包括其中一个或更多所列出的相关联项目的任意和所有组合。

这里所使用的术语仅仅是为了描述具体实施例而不意图限制示例性实施例。除非上下文明确地另有所指，否则这里所使用的单数形式“一个”、“一项”还意图包括复数。还应当理解的是，这里所使用的术语“包括”和/或“包含”规定所陈述的特征、整数、步骤、操作、单元和/或组件的存在，而不排除存在或添加一个或更多其他特征、整数、步骤、操作、单元、组件和/或其组合。

下面结合附图对本发明作进一步详细描述。

图1示出根据本发明一个方面的一种用于操控操作对象的设备示意图；其中，该设备包括第一装置1和第二装置2。具体地，所述第一装置1检测是否有操作对象进入对应的应用窗口；当存在操作对象进入所述应用窗口，所述第二装置2在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

其中，所述设备包括但不限于任意移动设备和/或非移动设备。所述设备自带用于呈现操作对象和/或其他相关信息的呈现窗口；或者所述设备能够与其他具有呈现窗口的设备相交互，以控制该呈现窗口内所呈现的操作对象和/或其他相关信息。

在此，本领域技术人员应能理解，本发明可以应用于各类设备，如移动设备、非移动设备；优选地，本发明可应用于触摸终端，所述触摸终端包括移动触摸终端与非移动触摸终端；更优选地，本发明可应用于具有触摸终端的移动设备。

所述第一装置1检测是否有操作对象进入对应的应用窗口。

具体地，所述第一装置1可以基于定时监测或基于特定事件触发的方式，检测是否有操作对象进入对应的应用窗口。

其中，所述操作对象包括但不限于用户正在操作中的一个或多个操作目标，或即将被用户操作的一个或多个操作目标。所述操作目标可以被用户完全操控，也可以是由当前用户与其他一名或多名用户来联合操控。当至少两名用户操控所述操作对象时，当前用户可以是主要控制者，如控制该操作对象的移动、主要动作、状态变更等，也可以是辅助控制者，如仅控制该操作对象的状态变更等。在此，本领域技术人员应能理解，所述控制方式仅为举例，其他对操作对象的控制方式如能适用于本发明，同样包含在本发明的保护范围内，并以引用的方式包含于此。

其中，所述应用窗口即为在终端屏幕中当前所显示的、为操作用户可见的内容；本领域技术人员应能理解，所述应用窗口可以呈现于整个屏幕上，也可呈现于部分屏幕上。

在此，所述检测方法包括以下至少任一项：当所述操作对象完全进入所述应用窗口时；当所述操作对象部分进入所述应用窗口时；当所述操作对象的特定位置进入所述应用窗口时；当所述操作对象即将进入所述应用窗口时(如所述操作对象进入所述应用窗口的时间小于预定阈值，如在下一秒就会进入所述应用窗口)。

优选地，当所述操作对象所对应的类别、控制者等属性不同时，可以基于其属性的不同，对所述操作对象采取不同的检测方法。例如，若所述操作对象的类别为人物，或者该操作对象的主要控制者非当前用户时，则当该人物的任一部分进入所述应用窗口时即可检测到有操作对象进入所述对应的应用窗口；若所述操作对象的类别为非人物，或者该操作对象的主要控制者为当前用户时，则当该操作对象的特定位置(如重心位置)进入所述应用窗口时才将其检测为有操作对象进入所述对应的应用窗口。

在此，本领域技术人员应能理解，上述检测方法仅为示例，并非对本发明的限制，其他检测是否有操作对象进入对应的应用窗口的方法，同样适用于本发明，在此不再赘述，同样包含于本发明的保护范围中。

当存在操作对象进入所述应用窗口，所述第二装置2在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

具体地，当所述第一装置1检测到存在操作对象进入所述应用窗口时，所述第二装置2首先确定所述对象指示信息以及所述视觉关联信息的样式与位置；然后，基于所确定的样式与位置，在所述应用窗口内进行展现。

在此，所述确定方式包括但不限于：基于缺省设置，基于所述操作对象的类别和/或控制者等属性设置、基于所述操作对象的当前位置信息、基于当前应用窗口内已呈现的各类信息(包括但不限于操作对象、对象指示信息以及视觉关联信息中的任意一种或其他)等。

例如，在缺省设置中，可设置所述对象指示信息为小于所述操作对象的图标标识，从而使得所述对象指示信息占用更小的显示面积，以提高屏幕资源利用率，而所述视觉关联信息则可设置为在所述图标标识以及所述操作对象之间的连线，或是将所述图标标识与所述操作对象设置为同样的颜色、形状等，以显示所述对象指示信息与所述操作对象的关联性。

或者，例如，可将属于同一类别或属于同一控制者的操作对象的图标标识设置成近似形状或具有近似的颜色；或者，例如，可根据所述操作对象的当前位置信息来设置所述对象指示信息在屏幕上的显示位置；或者，例如，可根据当前应用窗口内已呈现的视觉关联信息的颜色或显示方式(如连线方式或近似形状的显示方式)，将新设置的视觉关联信息设置为与已呈现的视觉关联信息近似的显示方式以及不同的颜色等等。

在此，本领域技术人员应能理解，上述显示方式仅为示例，并非对本发明的限制，其他能够指示所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息的方式同样适用于本发明，在此不再赘述，同样包含于本发明的保护范围中。

优选地，当存在操作对象进入所述应用窗口，所述第二装置2可以在所述应用窗口内呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

具体地，所述第二装置2还可以在所述应用窗口内呈现所述操作对象，使得所述应用窗口内同时呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。在此，本领域技术人员应能理解，若所述第一装置1在所述操作对象进入所述应用窗口内之后才检测到有所述操作对象进入所述应用窗口，则当所述第一装置1确认有该操作对象进入时，则直接在所述应用窗口内显示所述操作对象；若所述第一装置1在所述操作对象进入所述应用窗口内前便可检测到有所述操作对象进入所述应用窗口，则当该操作对象进入所述应用窗口之后，在所述应用窗口内显示所述操作对象。

在此，所述第二装置2呈现所述对象指示信息以及所述视觉关联信息的方式与图1中所述第二装置2相同或相似，故在此不再赘述，并以引用的方式包含于此。

所述第二装置2可以根据所述操作对象来确定所述对象指示信息以及所述视觉关联信息的样式与位置。反之，优选地，所述第二装置2也可以根据所述对象指示信息以及所述视觉关联信息的样式与位置来重新确定所述操作对象的样式与位置等信息，以使得所述应用窗口显示更为清晰，便于操作。

优选地，所述视觉关联信息包括以下至少任一项：

-所述对象指示信息与所述操作对象共用的显示色彩信息，例如，将所述操作对象与所述对象指示信息的全部或部分设置为相同的色彩或色系，以表示两者间的对应关系，如所述操作对象的边框为红色，则所述对象指示信息的主色调也为红色等；

-所述对象指示信息与所述操作对象共用的显示形状信息，例如，所述对象指示信息与所述操作对象为相同的方框、圆形或其他形状，在此，所述“共用”包括但不限于两者的形状大小等完全或部分一致，或是仅是包含了相似的显示形状标识(如两者在右上角共用三角形状的小标识)等；

-所述对象指示信息与所述操作对象共用的显示图标信息，例如，所述对象指示信息与所述操作对象具有相同的头像信息或其他标识信息等；

-所述对象指示信息与所述操作对象之间的连线信息，例如，通过具有相同或不同颜色、线型或其组合的连线，在所述对象指示信息以及所述操作对象之间进行连接。其中，所述线型包括但不限于实线、虚线或如点画线、圆点线等。

优选地，所述设备还包括第三装置(未示出)，其中，所述第三装置根据用户对所述对象指示信息的选中操作，选中所述操作对象。

具体地，所述第三装置通过与所述用户进行交互，或者与能够获取所述用户操作的其他装置进行交互，以获取用户的一个或多个对所述对象指示信息的选中操作；其中，所述选中操作包括但不限于基于点击、触摸、按键等方式进行的选中。

然后，所述第三装置根据所述对象指示信息所对应的操作对象，将所述操作对象作为所选中的目标，从而使得用户的操作更加便捷、高效，用户的使用体验更好。

更优选地，所述设备还包括第四装置(未示出)，其中，所述第四装置用于以下至少任一项：

-当所述操作对象被选中时，隐藏所述视觉关联信息和/或所述对象指示信息：即当所述操作对象通过所述对象指示信息被选中时，则在屏幕上隐藏所述视觉关联信息和/或所述对象指示信息，从而既能向用户表明已选中特定的操作对象，同时也不会继续遮挡所述应用窗口的显示内容，提高了屏幕资源利用率；

-当所述操作对象被移出所述应用窗口时，隐藏所述视觉关联信息和/或所述对象指示信息：即当所述操作对象已不再显示于该应用窗口时，则同时将所述视觉关联信息和/或所述对象指示信息进行隐藏，以避免所述应用窗口的显示混乱；

-当所述操作对象被选中且被执行操作后，隐藏所述视觉关联信息和/或所述对象指示信息：即当所述操作对象被选中且执行一个或多个操作后，再隐藏所述视觉关联信息和/或所述对象指示信息；在此，隐藏方法包括但不限于基于特定操作进行隐藏，或者在执行特定数量后的操作后隐藏，或者在所执行的操作满足一定条件后隐藏(如对所述操作对象的状态值的改变满足某一阈值等)等。

优选地，本发明可应用于触摸终端，所述应用窗口显示于触摸终端的触屏上；所述对象指示信息比所述操作对象接近所述应用窗口内的对象操控按钮，或者所述对象指示信息与所述对象操控按钮的距离小于或等于预定的距离阈值信息。

如图5所示，所述操作对象1至操作对象3与其对应的对象指示信息通过箭头线相连，所述箭头线的线型各不相同；所述操作对象1与其对应的对象指示信息通过相应的颜色相对应，以示出二者的对应关系。所述对象指示信息1至4邻近所述对象操控按钮，所述对象操控按钮即用于对所述操作对象执行具体操作的控制按钮，如使得所述操作对象的位置移动或状态改变等。从而所述用户在选择或移动所述操作对象时，手指移动的范围更小，操作更加便捷、高效，用户体验更好。

或者，所述对象指示信息与所述对象操控按钮的距离小于等于预定的距离阈值信息，如3cm，使得用户通过单指在小幅度内移动即可移动多个所述操作对象，同样实现了操作更加便捷、高效，用户体验更好。

更优选地，所述设备还包括第五装置(未示出)和第六装置(未示出)，其中，所述第五装置根据用户对所述对象操控按钮的滑动操作移动所述应用窗口中的所述对象指示信息；所述第六装置根据移动后的所述对象指示信息调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。

具体地，所述第五装置根据所述用户对所述对象操控按钮的上滑、下滑或其他方向的滑动操作，对所述应用窗口中的一个或多个所述对象指示信息进行移动；其中，所述移动可以根据所述滑动操作的方向与移动位置来等比例移动，也可以按照缺省设置向同一方向和/或以同一距离移动。

然后，所述第六装置根据移动后的所述对象指示信息，例如根据预定的间距或根据所述应用窗口上的整体排布，相应地调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。

优选地，所述操作对象和/或所述视觉关联信息可以被移除或移入当前应用窗口。

图2示出根据本发明一个优选实施例的一种用于操控操作对象的设备示意图；其中，所述设备包括第一装置1’和第二装置2’，所述第二装置2’包括第一单元21’、所述第二单元22’、所述第三单元23’。具体地，所述第一装置1’检测是否有操作对象进入对应的应用窗口；当存在操作对象进入所述应用窗口，所述第一单元21’在所述应用窗口内呈现所述操作对象对应的对象指示信息；所述第二单元22’确定所述对象指示信息与所述操作对象的视觉关联信息；所述第三单元23’在所述应用窗口内呈现所述视觉关联信息。

其中，所述设备的第一装置1’与图1所示对应装置相同或基本相同，故此处不再赘述，并通过引用的方式包含于此。

具体地，当存在操作对象进入所述应用窗口，所述第一单元21’根据缺省设置，或基于当前应用窗口内所存在的对象指示信息，确定所述操作对象所对应的对象指示信息的形状、颜色等信息，并在在所述应用窗口内呈现所述操作对象对应的对象指示信息；然后，所述第二单元22’根据所述对象指示信息，或者根据当前应用窗口内已经存在的视觉关联信息等，确定所述对象指示信息与所述操作对象的视觉关联信息；所述第三单元23’在所述应用窗口内呈现所述视觉关联信息。

在此，本领域技术人员应能理解，所述第一单元21’与所述第二单元22’可以按照图2所示的顺序执行，也可以并行，或先执行所述第二单元22’的操作后再执行所述第一单元21’的操作。

在此，基于当前应用窗口内已经存在的对象指示信息或视觉关联信息，来确定新的对象指示信息或视觉关联信息的方式包括但不限于将新的对象指示信息或视觉关联信息的形状、颜色和/或位置等与已经存在的对象指示信息或视觉关联信息的形状、颜色和/或位置相同、相近或相反。

优选地，所述第二单元22’可以根据所述操作对象的对象相关信息确定所述对象指示信息与所述操作对象的视觉关联信息。

具体地，所述第二单元22’可以根据所述操作对象的对象相关信息，如名称、等级、权重、类别、当前状态等内容，确定所述视觉关联信息。例如，若存在多个操作对象，则属于相同类别的操作对象则采用同样的视觉关联信息；不同等级的操作对象则采用不同颜色的视觉关联信息等。

优选地，所述第二单元22’可以根据所述应用窗口内的已有视觉关联信息确定所述对象指示信息与所述操作对象的视觉关联信息，其中，所述视觉关联信息与所述已有视觉关联信息在视觉上相区分。

具体地，所述第二单元22’可根据所述应用窗口内已有的视觉关联信息，将新确定的视觉关联信息确定为与其具有不同视觉效果的信息；例如，采用不同的色彩、不同的形状、不同的表达方式(如连线或同型色等)。从而使得所述应用窗口内的各个视觉关联信息具有区分度，便于用户的辨识与操作。

在此，本领域技术人员应能理解，上述示例仅为举例，并非对本发明的限制，其他的确定所述视觉关联信息的方式如能适用于本发明，同样包含在本发明的保护范围内。

图3示出根据本发明另一个方面的一种用于操控操作对象的方法流程图。具体地，在步骤S1中，所述设备检测是否有操作对象进入对应的应用窗口；当存在操作对象进入所述应用窗口，在步骤S2中，所述设备在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

在步骤S1中，所述设备检测是否有操作对象进入对应的应用窗口。

具体地，在步骤S1中，所述设备可以基于定时监测或基于特定事件触发的方式，检测是否有操作对象进入对应的应用窗口。

其中，所述操作对象包括但不限于用户正在操作中的一个或多个操作目标，或即将被用户操作的一个或多个操作目标。所述操作目标可以被用户完全操控，也可以是由当前用户与其他一名或多名用户来联合操控。当至少两名用户操控所述操作对象时，当前用户可以是主要控制者，如控制该操作对象的移动、主要动作、状态变更等，也可以是辅助控制者，如仅控制该操作对象的状态变更等。在此，本领域技术人员应能理解，所述控制方式仅为举例，其他对操作对象的控制方式如能适用于本发明，同样包含在本发明的保护范围内，并以引用的方式包含于此。

其中，所述应用窗口即为在终端屏幕中当前所显示的、为操作用户可见的内容；本领域技术人员应能理解，所述应用窗口可以呈现于整个屏幕上，也可呈现于部分屏幕上。

在此，所述检测方法包括以下至少任一项：当所述操作对象完全进入所述应用窗口时；当所述操作对象部分进入所述应用窗口时；当所述操作对象的特定位置进入所述应用窗口时；当所述操作对象即将进入所述应用窗口时(如所述操作对象进入所述应用窗口的时间小于预定阈值，如在下一秒就会进入所述应用窗口)。

优选地，当所述操作对象所对应的类别、控制者等属性不同时，可以基于其属性的不同，对所述操作对象采取不同的检测方法。例如，若所述操作对象的类别为人物，或者该操作对象的主要控制者非当前用户时，则当该人物的任一部分进入所述应用窗口时即可检测到有操作对象进入所述对应的应用窗口；若所述操作对象的类别为非人物，或者该操作对象的主要控制者为当前用户时，则当该操作对象的特定位置(如重心位置)进入所述应用窗口时才将其检测为有操作对象进入所述对应的应用窗口。

在此，本领域技术人员应能理解，上述检测方法仅为示例，并非对本发明的限制，其他检测是否有操作对象进入对应的应用窗口的方法，同样适用于本发明，在此不再赘述，同样包含于本发明的保护范围中。

当存在操作对象进入所述应用窗口，在步骤S2中，所述设备在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

具体地，当所述步骤S1检测到存在操作对象进入所述应用窗口时，在步骤S2中，所述设备首先确定所述对象指示信息以及所述视觉关联信息的样式与位置；然后，基于所确定的样式与位置，在所述应用窗口内进行展现。

在此，所述确定方式包括但不限于：基于缺省设置，基于所述操作对象的类别和/或控制者等属性设置、基于所述操作对象的当前位置信息、基于当前应用窗口内已呈现的各类信息(包括但不限于操作对象、对象指示信息以及视觉关联信息中的任意一种或其他)等。

例如，在缺省设置中，可设置所述对象指示信息为小于所述操作对象的图标标识，从而使得所述对象指示信息占用更小的显示面积，以提高屏幕资源利用率，而所述视觉关联信息则可设置为在所述图标标识以及所述操作对象之间的连线，或是将所述图标标识与所述操作对象设置为同样的颜色、形状等，以显示所述对象指示信息与所述操作对象的关联性。

或者，例如，可将属于同一类别或属于同一控制者的操作对象的图标标识设置成近似形状或具有近似的颜色；或者，例如，可根据所述操作对象的当前位置信息来设置所述对象指示信息在屏幕上的显示位置；或者，例如，可根据当前应用窗口内已呈现的视觉关联信息的颜色或显示方式(如连线方式或近似形状的显示方式)，将新设置的视觉关联信息设置为与已呈现的视觉关联信息近似的显示方式以及不同的颜色等等。

在此，本领域技术人员应能理解，上述显示方式仅为示例，并非对本发明的限制，其他能够指示所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息的方式同样适用于本发明，在此不再赘述，同样包含于本发明的保护范围中。

优选地，当存在操作对象进入所述应用窗口，在步骤S2中，所述设备可以在所述应用窗口内呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

具体地，在步骤S2中，所述设备还可以在所述应用窗口内呈现所述操作对象，使得所述应用窗口内同时呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。在此，本领域技术人员应能理解，若在步骤S1中，所述设备在所述操作对象进入所述应用窗口内之后才检测到有所述操作对象进入所述应用窗口，则当所述步骤S1确认有该操作对象进入时，则直接在所述应用窗口内显示所述操作对象；若在步骤S1中，所述设备在所述操作对象进入所述应用窗口内前便可检测到有所述操作对象进入所述应用窗口，则当该操作对象进入所述应用窗口之后，在所述应用窗口内显示所述操作对象。

在此，在步骤S2中，所述设备呈现所述对象指示信息以及所述视觉关联信息的方式与图3中所述步骤S2相同或相似，故在此不再赘述，并以引用的方式包含于此。

在步骤S2中，所述设备可以根据所述操作对象来确定所述对象指示信息以及所述视觉关联信息的样式与位置。反之，优选地，在步骤S2中，所述设备也可以根据所述对象指示信息以及所述视觉关联信息的样式与位置来重新确定所述操作对象的样式与位置等信息，以使得所述应用窗口显示更为清晰，便于操作。

优选地，所述视觉关联信息包括以下至少任一项：

-所述对象指示信息与所述操作对象共用的显示色彩信息，例如，将所述操作对象与所述对象指示信息的全部或部分设置为相同的色彩或色系，以表示两者间的对应关系，如所述操作对象的边框为红色，则所述对象指示信息的主色调也为红色等；

-所述对象指示信息与所述操作对象共用的显示形状信息，例如，所述对象指示信息与所述操作对象为相同的方框、圆形或其他形状，在此，所述“共用”包括但不限于两者的形状大小等完全或部分一致，或是仅是包含了相似的显示形状标识(如两者在右上角共用三角形状的小标识)等；

-所述对象指示信息与所述操作对象共用的显示图标信息，例如，所述对象指示信息与所述操作对象具有相同的头像信息或其他标识信息等；

-所述对象指示信息与所述操作对象之间的连线信息，例如，通过具有相同或不同颜色、线型或其组合的连线，在所述对象指示信息以及所述操作对象之间进行连接。其中，所述线型包括但不限于实线、虚线或如点画线、圆点线等。

优选地，所述方法还包括步骤S3(未示出)，其中，在步骤S3中，所述设备根据用户对所述对象指示信息的选中操作，选中所述操作对象。

具体地，在步骤S3中，所述设备通过与所述用户进行交互，或者与能够获取所述用户操作的其他装置进行交互，以获取用户的一个或多个对所述对象指示信息的选中操作；其中，所述选中操作包括但不限于基于点击、触摸、按键等方式进行的选中。

然后，在步骤S3中，所述设备根据所述对象指示信息所对应的操作对象，将所述操作对象作为所选中的目标，从而使得用户的操作更加便捷、高效，用户的使用体验更好。

更优选地，所述方法还包括步骤S4(未示出)，其中，在步骤S4中，所述设备包括以下至少任一项：

-当所述操作对象被选中时，隐藏所述视觉关联信息和/或所述对象指示信息：即当所述操作对象通过所述对象指示信息被选中时，则在屏幕上隐藏所述视觉关联信息和/或所述对象指示信息，从而既能向用户表明已选中特定的操作对象，同时也不会继续遮挡所述应用窗口的显示内容，提高了屏幕资源利用率；

-当所述操作对象被移出所述应用窗口时，隐藏所述视觉关联信息和/或所述对象指示信息：即当所述操作对象已不再显示于该应用窗口时，则同时将所述视觉关联信息和/或所述对象指示信息进行隐藏，以避免所述应用窗口的显示混乱；

-当所述操作对象被选中且被执行操作后，隐藏所述视觉关联信息和/或所述对象指示信息：即当所述操作对象被选中且执行一个或多个操作后，再隐藏所述视觉关联信息和/或所述对象指示信息；在此，隐藏方法包括但不限于基于特定操作进行隐藏，或者在执行特定数量后的操作后隐藏，或者在所执行的操作满足一定条件后隐藏(如对所述操作对象的状态值的改变满足某一阈值等)等。

优选地，本发明可应用于触摸终端，所述应用窗口显示于触摸终端的触屏上；所述对象指示信息比所述操作对象接近所述应用窗口内的对象操控按钮，或者所述对象指示信息与所述对象操控按钮的距离小于或等于预定的距离阈值信息。

如图5所示，所述操作对象1至操作对象3与其对应的对象指示信息通过箭头线相连，所述箭头线的线型各不相同；所述操作对象1与其对应的对象指示信息通过相应的颜色相对应，以示出二者的对应关系。所述对象指示信息1至4邻近所述对象操控按钮，所述对象操控按钮即用于对所述操作对象执行具体操作的控制按钮，如使得所述操作对象的位置移动或状态改变等。从而所述用户在选择或移动所述操作对象时，手指移动的范围更小，操作更加便捷、高效，用户体验更好。

或者，所述对象指示信息与所述对象操控按钮的距离小于等于预定的距离阈值信息，如3cm，使得用户通过单指在小幅度内移动即可移动多个所述操作对象，同样实现了操作更加便捷、高效，用户体验更好。

更优选地，所述方法还包括步骤S5(未示出)和步骤S6(未示出)，其中，在步骤S5中，所述设备根据用户对所述对象操控按钮的滑动操作移动所述应用窗口中的所述对象指示信息；在步骤S6中，所述设备根据移动后的所述对象指示信息调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。

具体地，在步骤S5中，所述设备根据所述用户对所述对象操控按钮的上滑、下滑或其他方向的滑动操作，对所述应用窗口中的一个或多个所述对象指示信息进行移动；其中，所述移动可以根据所述滑动操作的方向与移动位置来等比例移动，也可以按照缺省设置向同一方向和/或以同一距离移动。

然后，在步骤S6中，所述设备根据移动后的所述对象指示信息，例如根据预定的间距或根据所述应用窗口上的整体排布，相应地调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。

优选地，所述操作对象和/或所述视觉关联信息可以被移除或移入当前应用窗口。

图4示出根据本发明一个优选实施例的一种用于操控操作对象的方法流程图。具体地，在步骤S1’中，所述设备检测是否有操作对象进入对应的应用窗口；当存在操作对象进入所述应用窗口，在步骤S21’中，所述设备在所述应用窗口内呈现所述操作对象对应的对象指示信息；在步骤S22’中，所述设备确定所述对象指示信息与所述操作对象的视觉关联信息；在步骤S23’中，所述设备在所述应用窗口内呈现所述视觉关联信息。

其中，所述方法的步骤S1’与图3所示对应步骤相同或基本相同，故此处不再赘述，并通过引用的方式包含于此。

具体地，当存在操作对象进入所述应用窗口，在步骤S21’中，所述设备根据缺省设置，或基于当前应用窗口内所存在的对象指示信息，确定所述操作对象所对应的对象指示信息的形状、颜色等信息，并在在所述应用窗口内呈现所述操作对象对应的对象指示信息；然后，在步骤S22’中，所述设备根据所述对象指示信息，或者根据当前应用窗口内已经存在的视觉关联信息等，确定所述对象指示信息与所述操作对象的视觉关联信息；在步骤S23’中，所述设备在所述应用窗口内呈现所述视觉关联信息。

在此，本领域技术人员应能理解，所述步骤S21’与所述步骤S22’可以按照图4所示的顺序执行，也可以并行，或先执行所述步骤S22’的操作后再执行所述步骤S21’的操作。

在此，基于当前应用窗口内已经存在的对象指示信息或视觉关联信息，来确定新的对象指示信息或视觉关联信息的方式包括但不限于将新的对象指示信息或视觉关联信息的形状、颜色和/或位置等与已经存在的对象指示信息或视觉关联信息的形状、颜色和/或位置相同、相近或相反。

优选地，在步骤S22’中，所述设备可以根据所述操作对象的对象相关信息确定所述对象指示信息与所述操作对象的视觉关联信息。

具体地，在步骤S22’中，所述设备可以根据所述操作对象的对象相关信息，如名称、等级、权重、类别、当前状态等内容，确定所述视觉关联信息。例如，若存在多个操作对象，则属于相同类别的操作对象则采用同样的视觉关联信息；不同等级的操作对象则采用不同颜色的视觉关联信息等。

优选地，所述第二单元22’可以根据所述应用窗口内的已有视觉关联信息确定所述对象指示信息与所述操作对象的视觉关联信息，其中，所述视觉关联信息与所述已有视觉关联信息在视觉上相区分。

具体地，所述第二单元22’可根据所述应用窗口内已有的视觉关联信息，将新确定的视觉关联信息确定为与其具有不同视觉效果的信息；例如，采用不同的色彩、不同的形状、不同的表达方式(如连线或同型色等)。从而使得所述应用窗口内的各个视觉关联信息具有区分度，便于用户的辨识与操作。

在此，本领域技术人员应能理解，上述示例仅为举例，并非对本发明的限制，其他的确定所述视觉关联信息的方式如能适用于本发明，同样包含在本发明的保护范围内。

需要注意的是，本发明可在软件和/或软件与硬件的组合体中被实施，例如，本发明的各个装置可采用专用集成电路(ASIC)或任何其他类似硬件设备来实现。在一个实施例中，本发明的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本发明的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本发明的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。

对于本领域技术人员而言，显然本发明不限于上述示范性实施例的细节，而且在不背离本发明的精神或基本特征的情况下，能够以其他的具体形式实现本发明。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本发明的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本发明内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。***权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。

Claims (20)

1.一种用于操控操作对象的方法，其中，该方法包括：

a检测是否有操作对象进入对应的应用窗口；

b当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

2.根据权利要求1所述的方法，其中，所述步骤b包括：

当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

3.根据权利要求1或2所述的方法，其中，所述步骤b包括：

b1当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象对应的对象指示信息；

b2确定所述对象指示信息与所述操作对象的视觉关联信息；

b3在所述应用窗口内呈现所述视觉关联信息。

4.根据权利要求3所述的方法，其中，所述步骤b2包括：

根据所述操作对象的对象相关信息确定所述对象指示信息与所述操作对象的视觉关联信息。

5.根据权利要求3或4所述的方法，其中，所述步骤b2包括：

根据所述应用窗口内的已有视觉关联信息确定所述对象指示信息与所述操作对象的视觉关联信息，其中，所述视觉关联信息与所述已有视觉关联信息在视觉上相区分。

6.根据权利要求1至5中任一项所述的方法，其中，该方法还包括：

根据用户对所述对象指示信息的选中操作，选中所述操作对象。

7.根据权利要求6所述的方法，其中，该方法还包括：

当所述操作对象被选中时，隐藏所述视觉关联信息和/或所述对象指示信息；或者，

当所述操作对象被移出所述应用窗口时，隐藏所述视觉关联信息和/或所述对象指示信息；或者，

当所述操作对象被选中且被执行操作后，隐藏所述视觉关联信息和/或所述对象指示信息。

8.根据权利要求1至7中任一项所述的方法，其中，所述视觉关联信息包括以下至少任一项：

所述对象指示信息与所述操作对象共用的显示色彩信息；

所述对象指示信息与所述操作对象共用的显示形状信息；

所述对象指示信息与所述操作对象共用的显示图标信息；

所述对象指示信息与所述操作对象之间的连线信息。

9.根据权利要求1至8中任一项所述的方法，其中，所述应用窗口显示于触摸终端的触屏上；所述对象指示信息比所述操作对象接近所述应用窗口内的对象操控按钮，或者所述对象指示信息与所述对象操控按钮的距离小于或等于预定的距离阈值信息。

10.根据权利要求9所述的方法，其中，该方法还包括：

根据用户对所述对象操控按钮的滑动操作移动所述应用窗口中的所述对象指示信息；

根据移动后的所述对象指示信息调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。

11.一种用于操控操作对象的设备，其中，该设备包括：

第一装置，用于检测是否有操作对象进入对应的应用窗口；

第二装置，用于当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

12.根据权利要求11所述的设备，其中，所述第二装置用于：

当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象、所述操作对象对应的对象指示信息，以及所述对象指示信息与所述操作对象的视觉关联信息。

13.根据权利要求11或12所述的设备，其中，所述第二装置包括：

第一单元，用于当存在操作对象进入所述应用窗口，在所述应用窗口内呈现所述操作对象对应的对象指示信息；

第二单元，用于确定所述对象指示信息与所述操作对象的视觉关联信息；

第三单元，用于在所述应用窗口内呈现所述视觉关联信息。

14.根据权利要求13所述的设备，其中，所述第二单元用于：

根据所述操作对象的对象相关信息确定所述对象指示信息与所述操作对象的视觉关联信息。

15.根据权利要求13或14所述的设备，其中，所述第二单元用于：

根据所述应用窗口内的已有视觉关联信息确定所述对象指示信息与所述操作对象的视觉关联信息，其中，所述视觉关联信息与所述已有视觉关联信息在视觉上相区分。

16.根据权利要求11至15中任一项所述的设备，其中，该设备还包括：

第三装置，用于根据用户对所述对象指示信息的选中操作，选中所述操作对象。

17.根据权利要求16所述的设备，其中，该设备还包括第四装置，用于：

当所述操作对象被选中时，隐藏所述视觉关联信息和/或所述对象指示信息；或者，

当所述操作对象被移出所述应用窗口时，隐藏所述视觉关联信息和/或所述对象指示信息；或者，

当所述操作对象被选中且被执行操作后，隐藏所述视觉关联信息和/或所述对象指示信息。

18.根据权利要求11至17中任一项所述的设备，其中，所述视觉关联信息包括以下至少任一项：

所述对象指示信息与所述操作对象共用的显示色彩信息；

所述对象指示信息与所述操作对象共用的显示形状信息；

所述对象指示信息与所述操作对象共用的显示图标信息；

所述对象指示信息与所述操作对象之间的连线信息。

19.根据权利要求11至18中任一项所述的设备，其中，所述应用窗口显示于触摸终端的触屏上；所述对象指示信息比所述操作对象接近所述应用窗口内的对象操控按钮，或者所述对象指示信息与所述对象操控按钮的距离小于或等于预定的距离阈值信息。

20.根据权利要求19所述的设备，其中，该设备还包括：

第五装置，用于根据用户对所述对象操控按钮的滑动操作移动所述应用窗口中的所述对象指示信息；

第六装置，用于根据移动后的所述对象指示信息调整所述操作对象和/或所述视觉关联信息在所述应用窗口中的显示位置。