CN103279583A - 基于电子画板的实时搜索方法及*** - Google Patents

Abstract

本发明涉及智能终端、互联网技术和移动互联网领域，提供一种基于电子画板的实时搜索方法及***，所述方法包括步骤有：图形数据生成步骤，对电子画板进行绘图操作，生成图形数据；内容数据生成步骤，对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据；查询步骤，根据所述内容数据实时查询出相关内容的网页链接；排序步骤，对查询结果进行排序，返回排序靠前的若干所述查询结果至用户界面；以及呈现步骤，呈现包括所述电子画板的用户界面。借此，本发明采用电子画板作为搜索接口，符合人们对触摸屏设备的使用习惯，能够方便输入且可精确表达待搜索内容，从而提高内容搜索服务的质量。

Description

基于电子画板的实时搜索方法及***

技术领域

本发明涉及智能终端、互联网技术和移动互联网领域，更具体地，涉及一种基于电子画板的实时搜索方法及***。

背景技术

目前互联网市场上的主流搜索引擎，包括Google、Bing和百度等，都是基于文字输入、语音或上传图片，且搜索到的内容都是互联网上已存在的。一方面，基于文字和语音的搜索引擎和界面存在如下问题：1.由于有些内容用户无法用语言准确表达、***对表义理解或***对语音识别不到位等问题，导致搜索结果不符合用户需求，甚至会误导用户；2.对于一些复杂的表达，如数学公式、图标等，用户很难输入或无法输入；3.对于一些特殊人群，如聋哑人，文字和语音输入是不易实现的；4.文字和语音输入对用户是不便利的，因为需要通过键盘（包括软键盘）或话筒逐字逐句地输入查询内容。通过上传图片可以部分解决上述问题，但图片本身来源的问题就给用户带来不便，且以文件形式存在的图片会占用用户的存储资源，已有图片对用户想法的表达也很难匹配。另一方面，对于已存在内容的搜索有时不能精确匹配用户需求。

然而，在各种带触摸屏的智能终端设备（如智能手机、平板电脑，智能电视等）充斥人们生活的今天，人们更加喜欢或习惯于通过手绘的方式，轻松地在触摸屏上自由表达自己的思想和创造内容。

综上，目前主流搜索引擎在实际使用上，由于文本、语音或图片输入的不便和表达不精准，会导致内容搜索服务的低质量，所以有必要加以改进。

发明内容

为解决上述现有技术的缺陷，本发明的目的在于提供一种基于电子画板的实时搜索方法及***，利用电子画板作为搜索接口，符合人们对触摸屏设备的使用习惯，能够方便输入且可精确表达待搜索内容，从而提高内容搜索服务的质量。

为达成上述目的，本发明提供一种基于电子画板的实时搜索方法，包括以下步骤：

图形数据生成步骤，对电子画板进行绘图操作，生成图形数据；

内容数据生成步骤，对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据；

查询步骤，根据所述内容数据实时查询出相关内容的网页链接；

排序步骤，对查询结果进行排序，返回排序靠前的若干所述查询结果至用户界面；以及

呈现步骤，呈现包括所述电子画板的用户界面。

上述电子画板支持位图格式和可缩放矢量图形（Scalable VectorGraphics，SVG）格式。

上述图形数据生成步骤包括：

对电子画板进行绘图操作，生成位图数据；

将所述位图数据转化为SVG数据。

上述图形数据生成步骤包括：

对电子画板进行绘图操作，生成位图的增量数据；

将上述位图的增量数据同之前的位图数据一起生成整体绘图的SVG数据。

上述查询步骤包括：

预设内容索引表；以及

从所述内容数据中提取关键字与所述内容索引表进行匹配查询，获得相关内容的网页链接。

上述查询步骤还包括：

根据所述内容数据实时查询出相关内容的应答者，以供连线实时交互。

上述排序步骤中对查询结果进行排序具体为：根据所述查询结果与所述内容数据的相关度对所述查询结果进行排序。

上述用户界面的布局包括：

画板区，用于呈现画板的内容；

搜索结果区，用于呈现根据所述画板内容搜索到的结果。

上述搜索结果区用于按相关度大小顺序有选择性地呈现若干项搜索结果于所述画板周围的位置。

本发明还提供一种基于电子画板的实时搜索***，包括客户终端及服务端，其特征在于，所述客户终端包括：

电子画板，用于进行绘图操作，并将绘图操作产生的图形数据上报到服务端；

呈现模块，连接于所述电子画板，用于呈现包括电子画板的用户界面；以及

所述服务端，包括：

画板服务器，分别连接于所述电子画板及所述呈现模块，用于对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据，同时发出对所述内容数据的搜索请求，并将反馈的若干搜索结果推送到用户界面；

搜索引擎，连接于所述画板服务器，用于响应所述搜索请求，根据从所述画板服务器获取的内容数据实时查询出相关内容的网页链接，对查询结果进行排序，返回排序靠前的若干所述相关内容的网页链接至所述画板服务器。

上述客户终端为浏览器或独立应用程序。

上述电子画板支持位图格式和可缩放矢量图形（Scalable VectorGraphics，SVG）格式。

上述图形数据为位图数据。

上述电子画板用于将绘画操作产生的位图数据转化为SVG数据。

上述电子画板用于将绘画操作产生的位图的增量数据发送到所述画板服务器；

所述画板服务器用于将所述位图的增量数据和之前的位图数据一起整体转化为SVG数据。

上述搜索引擎包括：

数据库，用于存储内容索引表；以及

计算单元，分别连接于所述数据库及所述画板服务器，用于响应所述搜索请求，从所述画板服务器获取的内容数据中提取关键字与所述数据库中的内容索引表进行匹配查询，并将查询结果排序返回给所述画板服务器。

上述搜索引擎还用于根据所述内容数据实时查询出相关内容的应答者以供连线实时交互，对查询结果进行排序，返回排序靠前的若干所述应答者至所述画板服务器。

上述搜索引擎用于根据所述查询结果与所述内容数据的相关度对所述查询结果进行排序。

上述用户界面的布局包括：

画板区，用于呈现画板的内容；

搜索结果区，用于呈现根据所述画板内容搜索到的结果；

上述搜索结果区用于按相关度大小顺序有选择性地呈现若干项搜索结果于所述画板周围的位置。

本发明针对现有的基于文本、图片及语音输入的搜索技术的缺陷，为用户提供了一种新颖的和方便使用的智能终端界面及对内容搜索的方法，提出了基于绘画的搜索接口，符合目前广泛流行的触摸屏终端设备的使用模式和用户习惯。避免了基于文本、图片或语音输入的搜索由于输入不便和表达不准确造成搜索结果的不理想或误导，也避免了文本输入给一些不会使用文本输入方法的特殊人群带来的不便。另外，通过绘画方式为用户提供了输入一些特殊符号的有效接口，如数学公式等，方便学生等用户群对学习相关的内容的搜索。

附图说明

图1为本发明基于电子画板的实时搜索***的结构示意图；

图2为本发明用户输入部分内容时的用户界面的画板区实例图；

图3为本发明相对于图2用户增加内容时的用户界面的画板区实例图；

图4为本发明相对于图2和图3用户放大内容时通过滑动选择显示其他部分内容的用户界面的画板区实例图；

图5为本发明用户界面的布局实例图；

图6为本发明基于电子画板的实时搜索方法的流程图；

图7为本发明第一实施例中基于电子画板的实时搜索方法的流程图；以及

图8为本发明第二实施例中基于电子画板的实时搜索方法的流程图。

具体实施方式

为了使本发明的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。

本发明提供一种基于画板的实时内容搜索方法及***，包括：用户可通过手划、触摸笔、鼠标或远距体感操控等方式实现绘画内容输入的电子画板11；根据用户在电子画板11上绘出内容进行实时搜索的方法；基于上述电子画板11对搜索内容的呈现和布局方式。

图1为本发明基于电子画板11的实时搜索***100的结构示意图，所述实时搜索***100包括客户终端10及服务端20，所述客户终端10为浏览器或独立应用程序，***通过网页（浏览器访问模式）或独立应用程序（安装在智能终端设备上）为用户提供一个画板。

所述客户终端10包括：

电子画板11，用于进行绘图操作，并将绘图操作产生的图形数据上报到服务端20。

优选的是，该电子画板11是基于HTML5Canvas实现的一个可支持位图格式和可缩放矢量图形（Scalable Vector Graphics，SVG）格式的画布。所述图形数据为位图数据，所述电子画板11用于将绘画操作产生的位图数据转化为SVG数据。或者，所述电子画板11用于将绘画操作产生的位图的增量数据发送到所述画板服务器21，由所述画板服务器21将所述位图的增量数据和之前的位图数据一起整体转化为SVG数据。

呈现模块12，连接于所述电子画板11，用于呈现包括电子画板11的用户界面。

所述服务端20，包括：

画板服务器21，分别连接于所述电子画板11及所述呈现模块12，用于对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据，同时发出对所述内容数据的搜索请求，并将反馈的若干搜索结果推送到用户界面。

搜索引擎22，连接于所述画板服务器21，用于响应所述搜索请求，根据从所述画板服务器21获取的内容数据实时查询出相关内容的网页链接，对查询结果进行排序，返回排序靠前的若干所述相关内容的网页链接至所述画板服务器21。

优选的是，所述搜索引擎22包括：数据库222，用于存储内容索引表；以及计算单元221，分别连接于所述数据库222及所述画板服务器21，用于响应所述搜索请求，从所述画板服务器21获取的内容数据中提取关键字与所述数据库222中的内容索引表进行匹配查询，并将查询结果排序返回给所述画板服务器21。

更好的是，所述搜索引擎22还用于根据所述内容数据实时查询出相关内容的应答者以供连线实时交互，对查询结果进行排序，返回排序靠前的若干所述应答者至所述画板服务器21。所述搜索引擎22用于根据所述查询结果与所述内容数据的相关度对所述查询结果进行排序，或者将查询结果按与所述内容数据的重要程度进行排序。

其中，电子画板11与画板服务器21之间的接口A基于HTTP和Webscoket，负责用户界面呈现、画板内容的提交和搜索结果的反馈，搜索引擎22通过接口B返回搜索结果给画板服务器21，画板服务器21取前若干项搜索结果的相关信息通过接口A推送到客户端。

本发明旨在基于人们对触摸屏设备的使用习惯，提供一种方便输入且可精确表达的内容搜索接口。

图2为本发明用户输入部分内容时的用户界面的画板区实例图；图3为本发明相对于图2用户增加内容时的用户界面的画板区实例图；图4为本发明相对于图2和图3用户放大内容时通过滑动选择显示其他部分内容的用户界面的画板区实例图。***会根据用户请求或自动调整输入内容与画板的尺寸比例，在不影响内容（图像）视觉质量的情况下方便用户增加、减少输入的内容。如图1和图2所示，相对于用户终端设备屏幕，画板大小固定不变（在某一屏幕显示比例下），而画板自身的分辨率会根据用户输入的内容自动地或由用户请求（比如通过两个手指的向内或向外拨动屏幕）缩放。例如，当用户在图1画板的基础上输入更多内容时，画板由图1变成图2；而当用户想放大输入内容的某个部分时，画板可由图2变回图1。而用户也可以通过左右上下滑动画板里的内容。例如，当用户将图2的画板内容放大到图1后，通过向左滑动画板，画板由图1变成图3。在任意画板分辨率下，当画板上没有隐藏任何用户输入过的内容时，用户可通过左右上下滑动屏幕实现画板的翻页。

而用户绘画的线条宽度和颜色可由用户自己设定或由***自动定义。画板的形状（比如矩形、圆角矩形、圆形和椭圆等）可由用户设定（选择或直接拖动画板的边角）或由***自动生成。画板可以在全屏和普通模式之间随意切换。

图5为本发明用户界面的布局实例图；如图5所示，所述用户界面的布局包括：画板区，用于呈现画板的内容；搜索结果区，用于呈现根据所述画板内容搜索到的结果。

更优的是，上述搜索结果区用于按相关度大小顺序有选择性地呈现若干项搜索结果于所述画板周围的位置。

当用户在画板上输入部分内容时，***会实时搜出相关内容的链接，以列表形式展示在画板周围。搜索出的结果根据其相关程度按顺序（由图中的数字序号表示）选择性地分布在画板周围的对应位置，相关性或重要性高的结果排在较显著的位置，如图中的结果1，依次类推。搜索结果区所呈现的搜索结果项数由具体实现和UI设计而定。***在搜索相关内容的同时，也搜索可提供相关问题解答的在线应答者（其他用户或为***服务的相关问题专家），用户可选择搜索结果的链接访问相关网页或与应答者连线进行实时交互。

上述电子画板11的呈现方式可以是客户端软件独立应用程序或网页形式（在浏览器上），但都是通过HTML5和Javascript基于Javascript引擎（App自带或浏览器内建）提供的JS API实现上述画板操作功能和与画板服务器21的通信功能。客户端与画板服务器21的交互如下：

1.当用户打开画板时，客户端首先通过HTTP从服务端20获得相应的HTML5和Javascript代码作相应呈现并与服务端20建立Websocket连接。

2.当用户在画板上绘画时，每当用户完成一个绘画动作，如添加一笔或擦除一画，或调整颜色，画板都会将当前的绘画内容的数据通过Websocket消息发送到服务端20，并临时存储作为搜索的依据或转发到其他共享画板的客户端。该内容数据的生成和发送包括可选两种方法：a）由客户端画板将当前的绘画内容整体转化为SVG代码，并发送到服务端20；b）客户端画板将新增内容的位图数据发送到服务端20，并由服务端20将新增位图数据与之前缓存的位图数据合并一起生成SVG代码。

3.当用户对画板进行翻页时，画板都会将当前页的绘画内容的数据按上述方法通过Websocket消息发送到服务端20，同时服务器生成一页码代号并与该SVG数据配对存储。当用户返回之前页时，服务端20将当前页号减一并查询相应的SVG数据（通过HTTP或Websocket）返回给客户端展示。

4.当客户端画板收到由服务端20推送的SVG数据时，客户端画板直接将该SVG代码解析呈现。

本发明提供一种智能终端的用户接口和互联网内容呈现界面，称为电子画板11，和基于该接口进行实时内容搜索的方法。通过在互联网上的实时数据传输，为用户通过其网络终端设备提供一个方便易用、所想即所得的输入和输出接口，以精确表达、搜索目标内容，以及创造个性化的内容。

图6为本发明基于电子画板11的实时搜索方法的流程图，其可通过如图1所示的实时搜索***100实现，所述方法包括步骤有：

步骤S601，图形数据生成步骤：对电子画板11进行绘图操作，生成图形数据。

步骤S602，内容数据生成步骤：对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据。

步骤S603，查询步骤：根据内容数据实时查询出相关内容的网页链接。

步骤S604，排序步骤：对查询结果进行排序，返回排序靠前的若干查询结果至用户界面。

步骤S605，呈现步骤：呈现包括电子画板11的用户界面。

图7为本发明第一实施例中基于电子画板11的实时搜索方法的流程图，所述方法包括步骤有：

步骤S701，对电子画板11进行绘图操作，生成位图数据。其中：用户可用手指或触摸笔或鼠标或远距体感操控等方式在画板上画出任意图形、公式和文字等。

步骤S702，将位图数据转化为SVG数据。

优选的是，由客户端电子画板11将当前的绘画内容的位图数据整体转化为SVG代码，并发送到服务端20。或者当用户在电子画板11上绘画时，每当用户完成一个绘画操作，如添加一笔或擦除一画，或调整颜色，就会生成位图的增量数据，电子画板11将增量的绘图内容的数据发送到服务端20，由服务端20将上述位图的增量数据同之前的位图数据一起生成整体绘图的SVG数据。

步骤S703，对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据。

步骤S704，从内容数据中提取关键字与预存的内容索引表进行匹配查询，获得相关内容的网页链接。

步骤S705，根据查询结果与内容数据的相关度，对查询结果进行排序，返回排序靠前的若干查询结果至用户界面。

步骤S706，呈现包括电子画板11的用户界面。

图8为本发明第二实施例中基于电子画板11的实时搜索方法的流程图，所述方法包括步骤有：

步骤S801，对电子画板11进行绘图操作，生成位图数据。

步骤S802，将位图数据转化为SVG数据。

步骤S803，对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据。

步骤S804，从内容数据中提取关键字与预存的内容索引表进行匹配查询，获得相关内容的网页链接和应答者。

步骤S805，根据查询结果与内容数据的相关度，对查询结果进行排序，返回排序靠前的若干查询结果至用户界面。

步骤S806，呈现包括电子画板11的用户界面。

所述用户界面的布局包括：

画板区，用于呈现画板的内容；

搜索结果区，用于呈现根据所述画板内容搜索到的结果；

所述搜索结果区用于按相关度大小顺序有选择性地呈现若干项搜索结果于所述画板周围的位置。

综上所述，本发明为用户提供了一种新颖的和方便使用的智能终端界面及对内容搜索的方法，提出了基于绘画的搜索接口，符合目前广泛流行的触摸屏终端设备的使用模式和用户习惯。避免了基于文本或语音输入的搜索由于输入不便和表达不准确造成搜索结果的不理想或误导，也避免了文本输入给一些不会使用文本输入方法的特殊人群带来的不便。另外，通过绘画方式为用户提供了输入一些特殊符号的有效接口，如数学公式等，方便学生等用户群对学习相关的内容的搜索。

以上所述仅为本发明的优选实施例而已，并不用于限制本发明，对于本领域的技术人员来说，本发明可以有各种更改和变化。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (20)

1.一种基于电子画板的实时搜索方法，其特征在于，包括以下步骤：

图形数据生成步骤，对电子画板进行绘图操作，生成图形数据；

内容数据生成步骤，对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据；

查询步骤，根据所述内容数据实时查询出相关内容的网页链接；

排序步骤，对查询结果进行排序，返回排序靠前的若干所述查询结果至用户界面；以及

呈现步骤，呈现包括所述电子画板的用户界面。

2.根据权利要求1所述的实时搜索方法，其特征在于，所述电子画板支持位图格式和可缩放矢量图形（Scalable Vector Graphics，SVG）格式。

3.根据权利要求2所述的实时搜索方法，其特征在于，所述图形数据生成步骤包括：

对电子画板进行绘图操作，生成位图数据；

将所述位图数据转化为SVG数据。

4.根据权利要求2所述的实时搜索方法，其特征在于，所述图形数据生成步骤包括：

对电子画板进行绘图操作，生成位图的增量数据；

将上述位图的增量数据同之前的位图数据一起生成整体绘图的SVG数据。

5.根据权利要求1所述的实时搜索方法，其特征在于，所述查询步骤包括：

预设内容索引表；以及

从所述内容数据中提取关键字与所述内容索引表进行匹配查询，获得相关内容的网页链接。

6.根据权利要求1所述的实时搜索方法，其特征在于，所述查询步骤还包括：

根据所述内容数据实时查询出相关内容的应答者，以供连线实时交互。

7.根据权利要求6所述的实时搜索方法，其特征在于，所述排序步骤中对查询结果进行排序具体为：根据所述查询结果与所述内容数据的相关度对所述查询结果进行排序。

8.根据权利要求1～7任一项所述的实时搜索方法，其特征在于，所述用户界面的布局包括：

画板区，用于呈现画板的内容；

搜索结果区，用于呈现根据所述画板内容搜索到的结果。

9.根据权利要求8所述的实时搜索方法，其特征在于，所述搜索结果区用于按相关度大小顺序有选择性地呈现若干项搜索结果于所述画板周围的位置。

10.一种基于电子画板的实时搜索***，包括客户终端及服务端，其特征在于，所述客户终端包括：

电子画板，用于进行绘图操作，并将绘图操作产生的图形数据上报到服务端；

呈现模块，连接于所述电子画板，用于呈现包括电子画板的用户界面；以及

所述服务端，包括：

画板服务器，分别连接于所述电子画板及所述呈现模块，用于对每一个绘图操作完成后所产生的图形数据进行语义识别，生成内容数据，同时发出对所述内容数据的搜索请求，并将反馈的若干搜索结果推送到用户界面；

搜索引擎，连接于所述画板服务器，用于响应所述搜索请求，根据从所述画板服务器获取的内容数据实时查询出相关内容的网页链接，对查询结果进行排序，返回排序靠前的若干所述相关内容的网页链接至所述画板服务器。

11.根据权利要求1所述的实时搜索***，其特征在于，所述客户终端为浏览器或独立应用程序。

12.根据权利要求11所述的实时搜索***，其特征在于，所述电子画板支持位图格式和可缩放矢量图形（Scalable Vector Graphics，SVG）格式。

13.根据权利要求12所述的实时搜索***，其特征在于，所述图形数据为位图数据。

14.根据权利要求13所述的实时搜索***，其特征在于，所述电子画板用于将绘画操作产生的位图数据转化为SVG数据。

15.根据权利要求13所述的实时搜索***，其特征在于，所述电子画板用于将绘画操作产生的位图的增量数据发送到所述画板服务器；

所述画板服务器用于将所述位图的增量数据和之前的位图数据一起整体转化为SVG数据。

16.根据权利要求10所述的实时搜索***，其特征在于，所述搜索引擎包括：

数据库，用于存储内容索引表；以及

计算单元，分别连接于所述数据库及所述画板服务器，用于响应所述搜索请求，从所述画板服务器获取的内容数据中提取关键字与所述数据库中的内容索引表进行匹配查询，并将查询结果排序返回给所述画板服务器。

17.根据权利要求16所述的实时搜索***，其特征在于，所述搜索引擎还用于根据所述内容数据实时查询出相关内容的应答者以供连线实时交互，对查询结果进行排序，返回排序靠前的若干所述应答者至所述画板服务器。

18.根据权利要求17所述的实时搜索***，其特征在于，所述搜索引擎用于根据所述查询结果与所述内容数据的相关度对所述查询结果进行排序。

19.根据权利要求10～18任一项所述的实时搜索***，其特征在于，所述用户界面的布局包括：

画板区，用于呈现画板的内容；

搜索结果区，用于呈现根据所述画板内容搜索到的结果；

20.根据权利要求19所述的实时搜索***，其特征在于，所述搜索结果区用于按相关度大小顺序有选择性地呈现若干项搜索结果于所述画板周围的位置。

Images