CN105786930A - 基于触摸交互的搜索方法及装置 - Google Patents

Abstract

本发明提供了一种基于触摸交互的搜索方法及装置。基于触摸交互的搜索方法包括：接收用户基于当前界面进行搜索的触发指令；接收所述用户对所述当前界面进行的触摸滑动操作，并根据所述触摸滑动操作确定滑动区域；基于所述滑动区域提取其中的对象，并针对所述对象进行搜索。采用本发明能够解决了通过键盘(包括软键盘输入搜索慢、不便捷的问题)，节省了上述搜索框打开、复制粘贴等操作，使得搜索操作变得简单易行，解决于基于触摸交互的终端想搜就搜的问题，节省时间，并提高了用户感受体验。

Description

基于触摸交互的搜索方法及装置

技术领域

本发明涉及互联网搜索领域，特别是涉及一种基于触摸交互的搜索方法及装置。

背景技术

随着互联网业务的发展趋势，移动终端因其可移动性、便捷性越来越成为互联网业务的主要载体。人们越来越趋向于在随身携带的移动终端上查找信息、上网浏览、游戏娱乐等等。

移动终端(例如智能手机)上的搜索服务，例如各种搜索应用(app)，都是基于搜索框输入的。使用时，需要打开搜索app，在搜索框中输入搜索词，后点击确定，触发搜索操作。

但是，考虑到触摸屏需要用户触摸输入，而搜索框因其窄小存在输入不便捷的问题，导致搜索体验差，效率低。尤其是当用户在使用智能手机时基于屏幕上的字符、图像等有各种即时的搜索需求时，再打开搜索app，弹出搜索框中再输入，非常的不便捷。

发明内容

鉴于上述问题，提出了本发明以便提供一种克服上述问题或者至少部分地解决上述问题的基于触摸交互的搜索方法和相应的装置。

基于本发明的一个方面，提供了一种基于触摸交互的搜索方法，包括：

接收用户基于当前界面进行搜索的触发指令；

接收所述用户对所述当前界面进行的触摸滑动操作，并根据所述触摸滑动操作确定滑动区域；

基于所述滑动区域提取其中的对象，并针对所述对象进行搜索。

可选地，所述接收用户基于当前界面进行触摸搜索的触发指令之后，包括：在所述当前界面上呈现半透明的可操作图层；

对所述当前界面进行滑动操作，包括：

在所述可操作图层上进行滑动操作。

可选地，所述可操作图层利用触发悬浮控件实现。

可选地，所述接收用户基于当前界面进行触摸搜索的触发指令，包括：

所述悬浮控件在所述当前界面中提供搜索触发入口；

接收所述用户通过所述搜索触发入口输入的所述触发指令。

可选地，基于所述滑动区域提取其中的对象，包括：

对所述滑动区域进行截取，得到相应滑动区域截图；

对所述滑动区域截图进行识别，提取其中包含的一个或多个对象。

可选地，所述对象包括下列至少之一：文字、图片、符号。

基于本发明的另一个方面，本发明还提供了一种基于触摸交互的搜索装置，包括：

接收模块，适于接收用户基于当前界面进行触摸搜索的触发指令；

所述接收模块，还适于接收所述用户对所述当前界面进行的触摸滑动操作；

区域确定模块，适于根据所述滑动操作确定滑动区域；

对象识别模块，适于基于所述滑动区域提取其中的对象；

搜索模块，适于针对所述对象进行搜索。

可选地，上述装置还包括：

图层设置模块，适于所述接收用户基于当前界面进行触摸搜索的触发指令之后，在所述当前界面上呈现半透明的可操作图层；

所述区域确定模块，还适于：

在所述可操作图层上进行滑动操作。

可选地，所述可操作图层利用触发悬浮控件实现。

可选地，所述接收模块还适于：

接收所述用户通过所述悬浮控件在所述当前界面中提供的搜索触发入口输入的所述触发指令。

可选地，所述对象识别模块，还适于：

对所述滑动区域进行截取，得到相应滑动区域截图；

对所述滑动区域截图进行识别，提取其中包含的一个或多个对象。

可选地，所述对象包括下列至少之一：文字、图片、符号。

本发明实施例实现了一种基于触摸交互的搜索方法。在本发明实施例中，用户基于当前界面发出搜索的触发指令，随后，根据用户对当前界面上进行的触摸滑动操作，确定滑动区域，进而基于滑动区域提取其中的对象，并针对提取的对象进行搜索。由上述可知，本发明实施例的搜索并不需要打开搜索app，在搜索框中输入对象，或将选择的对象复制粘贴到搜索框中，再进行搜索。相应的，本发明实施例通过用户的触摸滑动操作界定了滑动区域，对滑动区域中的对象直接提取并搜索，解决了通过键盘(包括软键盘输入搜索慢、不便捷的问题)，节省了上述搜索框打开、复制粘贴等操作，使得搜索操作变得简单易行，解决于基于触摸交互的终端想搜就搜的问题，节省时间，并提高了用户感受体验。另外，滑动区域能够充分体现用户的搜索意愿，解决了现有部分搜索app只能复制整段内容而不能精确搜索单个词或某几个离散词汇的弊端，提高了搜索词的精准性。

上述说明仅是本发明技术方案的概述，为了能够更清楚了解本发明的技术手段，而可依照说明书的内容予以实施，并且为了让本发明的上述和其它目的、特征和优点能够更明显易懂，以下特举本发明的具体实施方式。

根据下文结合附图对本发明具体实施例的详细描述，本领域技术人员将会更加明了本发明的上述以及其他目的、优点和特征。

附图说明

通过阅读下文优选实施方式的详细描述，各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的，而并不认为是对本发明的限制。而且在整个附图中，用相同的参考符号表示相同的部件。在附图中：

图1示出了根据本发明一个实施例的基于触摸交互的搜索方法的处理流程图；

图2示出了根据本发明一个实施例的短信界面的示意图；

图3示出了根据本发明一个实施例的在图2界面上增加可操作图层的示意图；

图4示出了根据本发明一个实施例的对快递速递号进行搜索的查询结果的示意图；

图5示出了根据本发明一个实施例的IM聊天记录的示意图；

图6示出了根据本发明一个实施例的在图5所示的界面上增加可操作图层后的示意图；

图7示出了根据本发明一个实施例的“360公司总部”的地址示意图；

图8示出了根据本发明一个实施例的基于触摸交互的搜索装置的结构示意图；以及

图9示出了根据本发明一个实施例的基于触摸交互的搜索装置的另一个结构示意图。

具体实施方式

下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。

为解决上述技术问题，本发明实施例提供了一种基于触摸交互的搜索方法。图1示出了根据本发明一个实施例的基于触摸交互的搜索方法的处理流程图。参见图1，该方法至少包括步骤S102至步骤S106：

步骤S102、接收用户基于当前界面进行搜索的触发指令；

步骤S104、接收用户对当前界面进行的触摸滑动操作，并根据触摸滑动操作确定滑动区域；

步骤S106、基于滑动区域提取其中的对象，并针对提取的对象进行搜索。

本发明实施例实现了一种基于触摸交互的搜索方法。在本发明实施例中，用户基于当前界面发出搜索的触发指令，随后，根据用户对当前界面上进行的触摸滑动操作，确定滑动区域，进而基于滑动区域提取其中的对象，并针对提取的对象进行搜索。由上述可知，本发明实施例的搜索并不需要打开搜索app，在搜索框中输入对象，或将选择的对象复制粘贴到搜索框中，再进行搜索。相应的，本发明实施例通过用户的触摸滑动操作界定了滑动区域，对滑动区域中的对象直接提取并搜索，解决了通过键盘(包括软键盘输入搜索慢、不便捷的问题)，节省了上述搜索框打开、复制粘贴等操作，使得搜索操作变得简单易行，解决于基于触摸交互的终端想搜就搜的问题，节省时间，并提高了用户感受体验。另外，滑动区域能够充分体现用户的搜索意愿，解决了现有部分搜索app只能复制整段内容而不能精确搜索单个词或某几个离散词汇的弊端，提高了搜索词的精准性。

本发明实施例提供的基于触摸交互的搜索方法适用于任何提供触摸交互方式的终端，尤其是目前常见的提供触摸屏的移动终端。用户使用手指或触摸笔对触摸屏进行操作，能够可见地、有意向地界定出滑动区域，更好地体现出用户的搜索意向。具体地，对滑动区域进行截取之后，可以得到相应滑动区域截图。截图能够原汁原味地体现出滑动区域的内容，避免数据或元素或对象的等的，增加数据的真实性和完整性。截图可能是针对某个网页，可能是针对某部动漫的图片，可能是针对视频的某频图像，可能是针对某个app的应用界面，可能是针对终端的桌面，可能是用户的图片库中的图片或照片，等等。可以看出，截图中包括的内容可能相当丰富，因此，本发明实施例在截图之后，需要对滑动区域截图进行识别，提取其中包含的一个或多个对象。优选地，提取的对象可以包括下列至少之一：文字、图片、符号。而识别技术可以使用多种，例如，图片OCR(OpticalCharacterRecognition，光学字符识别)识别技术，即，后台通过OCR识别从图片中提取文字信息；再例如，UiAutomator自动化测试技术：UiAutomator是android自带自动化测试工具，可以用来提取当前页面文本信息，这种技术可以获取100％正确文字。各识别技术存在不同的适用场景，UiAutomator与OCR结合能极大提高识别准确度。

为使得基于触摸交互的搜索方法对于用户的可视性更强，可以在接收用户基于当前界面进行触摸搜索的触发指令之后，采用在当前界面上呈现半透明的可操作图层的操作手段。半透明的可操作图层覆盖在当前界面上，既能够使得用户看清楚界面，又能够在图层上针对界面进行符合用户意向的滑动操作，使得滑动操作所确定的滑动区域中准确包括用户想要搜索的内容，实现时，在界面上出现类似水雾玻璃擦除效果，用户手指滑过触摸屏时，手指滑过的区域水雾被擦除，显示出其中的文字、图片等图像。

其中，可操作图层可以利用触发悬浮控件实现。实现时，可以利用悬浮控件在当前界面中提供搜索触发入口，用户通过搜索触发入口输入触发指令，以触发后续流程。搜索触发入口的形状可以是可点击的圆形、方形、多边形等，为保证触摸交互界面的正常应用，通常在屏幕的边角位置设置，被触发后，可以将半透明的可操作图层引出，进而完成后续流程。图2示出了根据本发明一个实施例的短信界面的示意图。参见图2，搜索触发入口设置为双圆环形状，当其被点击时，触发半透明可操作图层的显示。

现以文字搜索为例对本发明实施例提供的基于触摸交互的搜索方法进行说明。因通过触摸交互方式实现对文字的摸索，更形象地，可以称之为摸字搜索。本实施例应用于带触摸屏的移动终端。

当用户在屏幕处于任何点亮的界面状态下，点击悬浮控件生成的摸词搜索触发入口，即在界面上生成一层蒙板(即前文提及的半透明的可操作图层，简称蒙板)，用户可以根据想选择的位置，通过手指滑动，摸出高亮的区域，而高亮区域内的涵盖的文字部分，则为用户想要识别并搜索的文字，点击下方的确定按钮，弹出高亮区域的截图，以及基于此截图识别出截图中的文字，输入到上方的搜索框中，用户点击搜索按钮，即可实现快捷摸字搜索。

其中，本实施例根据预定的换行摸字的识别策略在截图中识别出文字，这种策略主要应用于用户想要摸出的字分别在两行的机制。由于摸字识别主要是基于用户手指滑动在蒙板上产生的类似矩形高亮区域的像素点的边界(左右上下(x,y)四个点)来识别的。但是如果文本属于两行，手指滑动两次，也依然会根据两次合并后区左右上下四个像素点，这样四个像素点圈出的范围就比手指滑动两次高亮区域要大很多，就使得没有精准在高亮词上，因此解决的方法是：考虑换行摸字这两次他们的重合度高低，如果重合度很低(例如30％以下，阈值可以再调节)，就作为两张截图来分别识别，这样就提高了精准程度。

本实施例的流程可以归纳为：点击摸词搜索触发入口->***截屏和Uiautomator获取当前屏幕数据->裁剪图片分析文本数据传递给后台OCR分析->获取OCR返回结果->调用搜索引擎进行搜索。通过本实施例的摸字搜索方式，可省略用户繁琐的软件盘输入，非常便捷。

在本实施例中，若用户手指滑动摸出的高亮部分不准确，有文字截取未截取完整的情形，则基于用户摸字的区域，将边界扩展一定阈值(比如30％)，相对于原截图，边界扩展后就有了一张比原截图略大的新截图，新截图能够将截取一半的文字包含在界面中，这样就解决了用户摸字区域文字截取不完整的问题，保证了可搜索内容获取的完整性。

实施例一

以图2所示的短信界面作为示意图。其中，短信内容中存在快递速递号。对于用户而言，其关注地是快递目前的状态，发出到哪儿了，有多久能到自己手里，快递小哥的联系方式是多少等等。这些信息需要根据快递速递号在网络中进行查询。

在本实施例中，用户通过触发设置为双圆环形的搜索触发入口，在短信界面上增加半透明的可操作图层，本例中类似于毛玻璃。图3示出了根据本发明一个实施例的在图2界面上增加可操作图层的示意图。随后，用户在可操作图层上进行滑动，滑动过的区域去除半透明的效果，清晰显示并识别出其中的对象，参见图3中的代表快递速递号的数字。

随后，根据图3中的快递速递号进行搜索，得到图4所示的查询结果。

由此可见，本发明实施例利用手指滑动就能够进行快递速递号的选择，并对其进行搜索，得到查询结果，简单快捷，大大增加了用户的感受体验。

实施例二

本实施例对即时通信消息(IM)为例进行说明。图5示出了根据本发明一个实施例的IM聊天记录的示意图。其中用户A提及某个地点，但是用户B并不知道。此时，触发搜索触发入口，在聊天记录上增加半透明的可操作图层。图6示出了在图5所示的界面上增加可操作图层后的示意图。随后，用户利用手指在“360公司总部”上滑动，去除半透明的效果，清晰显示并识别出“360公司总部”，具体见图6。

随后，对识别出的“360公司总部”进行搜索，得到其具体地址。图7示出了根据本发明一个实施例的“360公司总部”的地址示意图。

由此可见，本发明实施例利用手指滑动就能够进行指定地点的选定，并对其进行搜索，得到查询结果，简单快捷，大大增加了用户的感受体验。

本实施例仅仅是以文字为例进行说明，在实施应用中，图片、符号等其他对象的搜索方式相类似，本领域技术人员能够根据上述实施例相应实现，在此不做赘述。

基于同一发明构思，本发明实施例提供了一种基于触摸交互的搜索装置，用于支持上述任意一个实施例所提供的基于触摸交互的搜索方法。图2示出了根据本发明一个实施例的基于触摸交互的搜索装置的结构示意图。参见图2，该装置至少包括：

接收模块810，适于接收用户基于当前界面进行触摸搜索的触发指令；

接收模块810，还适于接收用户对当前界面进行的触摸滑动操作；

区域确定模块820，与接收模块810耦合，适于根据滑动操作确定滑动区域；

对象识别模块830，与区域确定模块820耦合，适于基于滑动区域提取其中的对象；

搜索模块840，与对象识别模块830耦合，适于针对提取的对象进行搜索。

图9示出了根据本发明一个实施例的基于触摸交互的搜索装置的另一个结构示意图。参见图9，基于触摸交互的搜索装置除包括图8所示的结构之外，还包括：

图层设置模块910，分别与接收模块810及区域确定模块820耦合，适于接收用户基于当前界面进行触摸搜索的触发指令之后，在当前界面上呈现半透明的可操作图层；

区域确定模块820，还适于：在可操作图层上进行滑动操作。

在一个优选的实施例中，可操作图层利用触发悬浮控件实现。

在一个优选的实施例中，接收模块810还可以适于：接收用户通过悬浮控件在当前界面中提供的搜索触发入口输入的触发指令。

在一个优选的实施例中，对象识别模块890，还适于：

对滑动区域进行截取，得到相应滑动区域截图；

对滑动区域截图进行识别，提取其中包含的一个或多个对象。

在一个优选的实施例中，对象包括下列至少之一：文字、图片、符号。

采用本发明实施例提供的基于触摸交互的搜索方法及装置能够达到如下有益效果：

在本发明实施例中，用户基于当前界面发出搜索的触发指令，随后，根据用户对当前界面上进行的触摸滑动操作，确定滑动区域，进而基于滑动区域提取其中的对象，并针对提取的对象进行搜索。由上述可知，本发明实施例的搜索并不需要打开搜索app，在搜索框中输入对象，或将选择的对象复制粘贴到搜索框中，再进行搜索。相应的，本发明实施例通过用户的触摸滑动操作界定了滑动区域，对滑动区域中的对象直接提取并搜索，解决了通过键盘(包括软键盘输入搜索慢、不便捷的问题)，节省了上述搜索框打开、复制粘贴等操作，使得搜索操作变得简单易行，解决于基于触摸交互的终端想搜就搜的问题，节省时间，并提高了用户感受体验。另外，滑动区域能够充分体现用户的搜索意愿，解决了现有部分搜索app只能复制整段内容而不能精确搜索单个词或某几个离散词汇的弊端，提高了搜索的精准性。

在此处所提供的说明书中，说明了大量具体细节。然而，能够理解，本发明的实施例可以在没有这些具体细节的情况下实践。在一些实例中，并未详细示出公知的方法、结构和技术，以便不模糊对本说明书的理解。

类似地，应当理解，为了精简本公开并帮助理解各个发明方面中的一个或多个，在上面对本发明的示例性实施例的描述中，本发明的各个特征有时被一起分组到单个实施例、图、或者对其的描述中。然而，并不应将该公开的方法解释成反映如下意图：即所要求保护的本发明要求比在每个权利要求中所明确记载的特征更多的特征。更确切地说，如下面的权利要求书所反映的那样，发明方面在于少于前面公开的单个实施例的所有特征。因此，遵循具体实施方式的权利要求书由此明确地并入该具体实施方式，其中每个权利要求本身都作为本发明的单独实施例。

本领域那些技术人员可以理解，可以对实施例中的设备中的模块进行自适应性地改变并且把它们设置在与该实施例不同的一个或多个设备中。可以把实施例中的模块或单元或组件组合成一个模块或单元或组件，以及此外可以把它们分成多个子模块或子单元或子组件。除了这样的特征和/或过程或者单元中的至少一些是相互排斥之外，可以采用任何组合对本说明书(包括伴随的权利要求、摘要和附图)中公开的所有特征以及如此公开的任何方法或者设备的所有过程或单元进行组合。除非另外明确陈述，本说明书(包括伴随的权利要求、摘要和附图)中公开的每个特征可以由提供相同、等同或相似目的的替代特征来代替。

此外，本领域的技术人员能够理解，尽管在此所述的一些实施例包括其它实施例中所包括的某些特征而不是其它特征，但是不同实施例的特征的组合意味着处于本发明的范围之内并且形成不同的实施例。例如，在权利要求书中，所要求保护的实施例的任意之一都可以以任意的组合方式来使用。

本发明的各个部件实施例可以以硬件实现，或者以在一个或者多个处理器上运行的软件模块实现，或者以它们的组合实现。本领域的技术人员应当理解，可以在实践中使用微处理器或者数字信号处理器(DSP)来实现根据本发明实施例的基于触摸交互的搜索装置中的一些或者全部部件的一些或者全部功能。本发明还可以实现为用于执行这里所描述的方法的一部分或者全部的设备或者装置程序(例如，计算机程序和计算机程序产品)。这样的实现本发明的程序可以存储在计算机可读介质上，或者可以具有一个或者多个信号的形式。这样的信号可以从因特网网站上下载得到，或者在载体信号上提供，或者以任何其他形式提供。

应该注意的是上述实施例对本发明进行说明而不是对本发明进行限制，并且本领域技术人员在不脱离所附权利要求的范围的情况下可设计出替换实施例。在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的元件或步骤。位于元件之前的单词“一”或“一个”不排除存在多个这样的元件。本发明可以借助于包括有若干不同元件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。

至此，本领域技术人员应认识到，虽然本文已详尽示出和描述了本发明的多个示例性实施例，但是，在不脱离本发明精神和范围的情况下，仍可根据本发明公开的内容直接确定或推导出符合本发明原理的许多其他变型或修改。因此，本发明的范围应被理解和认定为覆盖了所有这些其他变型或修改。

Claims (12)

1.一种基于触摸交互的搜索方法，包括：

接收用户基于当前界面进行搜索的触发指令；

接收所述用户对所述当前界面进行的触摸滑动操作，并根据所述触摸滑动操作确定滑动区域；

基于所述滑动区域提取其中的对象，并针对所述对象进行搜索。

2.根据权利要求1所述的方法，其中，所述接收用户基于当前界面进行触摸搜索的触发指令之后，包括：在所述当前界面上呈现半透明的可操作图层；

对所述当前界面进行滑动操作，包括：

在所述可操作图层上进行滑动操作。

3.根据权利要求2所述的方法，其中，所述可操作图层利用触发悬浮控件实现。

4.根据权利要求3所述的方法，其中，所述接收用户基于当前界面进行触摸搜索的触发指令，包括：

所述悬浮控件在所述当前界面中提供搜索触发入口；

接收所述用户通过所述搜索触发入口输入的所述触发指令。

5.根据权利要求1至4任一项所述的方法，其中，基于所述滑动区域提取其中的对象，包括：

对所述滑动区域进行截取，得到相应滑动区域截图；

对所述滑动区域截图进行识别，提取其中包含的一个或多个对象。

6.根据权利要求1至5任一项所述的方法，其中，所述对象包括下列至少之一：文字、图片、符号。

7.一种基于触摸交互的搜索装置，包括：

接收模块，适于接收用户基于当前界面进行触摸搜索的触发指令；

所述接收模块，还适于接收所述用户对所述当前界面进行的触摸滑动操作；

区域确定模块，适于根据所述滑动操作确定滑动区域；

对象识别模块，适于基于所述滑动区域提取其中的对象；

搜索模块，适于针对所述对象进行搜索。

8.根据权利要求7所述的装置，其中，还包括：

图层设置模块，适于所述接收用户基于当前界面进行触摸搜索的触发指令之后，在所述当前界面上呈现半透明的可操作图层；

所述区域确定模块，还适于：

在所述可操作图层上进行滑动操作。

9.根据权利要求8所述的装置，其中，所述可操作图层利用触发悬浮控件实现。

10.根据权利要求9所述的装置，其中，所述接收模块还适于：

接收所述用户通过所述悬浮控件在所述当前界面中提供的搜索触发入口输入的所述触发指令。

11.根据权利要求7至10任一项所述的装置，其中，所述对象识别模块，还适于：

对所述滑动区域进行截取，得到相应滑动区域截图；

对所述滑动区域截图进行识别，提取其中包含的一个或多个对象。

12.根据权利要求7至11任一项所述的装置，其中，所述对象包括下列至少之一：文字、图片、符号。