CN105045504B - 图像内容提取方法及装置 - Google Patents

Abstract

本公开是关于一种图像内容提取方法及装置。其中，所述方法包括：对用户选定的图像进行识别；产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮；在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。由于用户可以在识别出图像内容后使用悬浮按钮快速提取自己想要的内容到目标位置，用户操作少，效率高。

Description

图像内容提取方法及装置

技术领域

本公开涉及图像识别领域，尤其涉及一种图像内容提取方法及装置。

背景技术

图像内容，是指对图像进行处理、分析和理解之后，识别出的文字、线条图案等内容。

相关技术中，在对图像文件进行识别后，会将图像文件转换成word或者其他文本文件。例如，对固定形式的车牌或名片图像文件进行识别，可以得到包含车牌或名片内容的word或者其他文本文件。

但是，给用户提供转换后的word或者其他文本文件，不一定是用户想要的。在这种情况下，用户只能打开转换后的word或者其他文本文件，从中找出自己想要的图像内容。可见，相关技术使得用户操作多，效率低，用户无法快速提取想要的图像内容。

发明内容

为克服相关技术中存在的问题，本公开提供一种图像内容提取方法及装置。

根据本公开实施例的第一方面，提供一种图像内容提取方法，包括：对用户选定的图像进行识别，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮，在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。

根据本公开实施例的第二方面，提供一种图像内容提取装置，包括：识别单元，被配置为对用户选定的图像进行识别。悬浮按钮产生单元，被配置为产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。复制操作单元，被配置为在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。

根据本公开实施例的第三方面，提供一种图像内容提取装置，包括：处理器；用于存储处理器可执行指令的存储器；其中，所述处理器被配置为：对用户选定的图像进行识别；产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮；在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。

本公开的实施例提供的技术方案可以包括以下有益效果：由于本公开提供的技术方案对用户选定的图像进行识别，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮，在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置，因此，用户可以在识别出图像内容后使用悬浮按钮快速提取自己想要的内容到目标位置，用户操作少，效率高。

本公开提供了所述图像内容提取方法的一个实施例，其中，所述对用户选定的图像进行识别包括：对用户选定的图像文件整体进行识别；或者，对用户选定的图像文件中的选定区域中的图像进行识别。

本公开提供了所述图像内容提取装置的一个实施例，其中，所述识别单元包括：整体识别子单元，被配置为对用户选定的图像文件整体进行识别。或者，部分识别子单元，被配置为对用户选定的图像文件中的选定区域中的图像进行识别。

本实施例提供的技术方案可以包括以下有益效果：由于本实施例提供了整体或部分选定区域两种可能的识别范围，更加符合用户需要。

本公开提供了所述图像内容提取方法的一个实施例，其中，所述对用户选定的图像文件中的选定区域中的图像进行识别包括：打开用户选定的图像文件，显示所述图像文件中的图片；进入画笔模式以便用户在所述图片上绘制线条，检测用户所绘制的线条是否形成封闭区域；如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

本公开提供了所述图像内容提取装置的一个实施例，其中，所述部分识别子单元包括：图片打开子单元，被配置为打开用户选定的图像文件，显示所述图像文件中的图片。画笔圈定子单元，被配置为进入画笔模式以便用户在所述图片上绘制线条，检测用户所绘制的线条是否形成封闭区域。区域识别子单元，被配置为如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

本实施例提供的技术方案可以包括以下有益效果：由于本实施例在打开用户选定的图像文件，显示所述图像文件中的图片之后，进入画笔模式以便用户在所述图片上绘制用于圈定选定区域的线条，因此，用户既可以灵活选择要识别的图像内容，又可以在识别出图像内容后，使用悬浮按钮快速提取自己想要的内容到目标位置，用户操作少，效率高。

本公开提供了所述图像内容提取方法的一个实施例，其中，所述方法应用于具有触摸屏的用户终端。所述进入画笔模式以便用户绘制线条，检测用户所绘制的线条是否形成封闭区域包括：响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式，在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹，并检测触点移动的轨迹是否形成封闭区域。

本公开提供了所述图像内容提取装置的一个实施例，其中，所述装置配置于具有触摸屏的用户终端。所述画笔圈定子单元包括：画笔模式进入子单元，被配置为响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式。线条显示子单元，被配置为在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹。封闭区域检测子单元，被配置为检测触点移动的轨迹是否形成封闭区域。

本实施例提供的技术方案可以包括以下有益效果：由于本实施例在以用户按压触摸屏的触点作为画笔工具进行绘制，使得用户操作更加简单、方便。

本公开提供了所述图像内容提取方法的一个实施例，其中，所述方法还包括：显示可移动指示标；根据用户对所述可移动指示标的拖动操作，相应改变所述可移动指示标所在位置；根据所述可移动指示标所在位置，确定所述部分内容的范围。

本公开提供了所述图像内容提取装置的一个实施例，其中，指示标显示单元，被配置为显示可移动指示标。指示标位置改变单元，被配置为根据用户对所述可移动指示标的拖动操作，相应改变所述可移动指示标所在位置。部分内容确定单元，被配置为根据所述可移动指示标所在位置，确定所述部分内容的范围。

本实施例提供的技术方案可以包括以下有益效果：本实施例使得用户可以通过拖动可移动指示标来改变用户想要复制的部分内容的范围，操作简单。

本公开提供了所述图像内容提取方法的一个实施例，其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项。所述在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置包括：响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上，响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置。

本公开提供了所述图像内容提取装置的一个实施例，其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项。所述复制操作单元包括：第一复制触发子单元，被配置为响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。第一界面切换子单元，被配置为响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上。第一粘贴触发子单元，被配置为响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置。

本实施例提供的技术方案可以包括以下有益效果：由于本实施例所述悬浮按钮包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项，而且，在界面切换时，仍然悬浮于切换后的界面之上，因此，不必在切换后的界面另外创建用于粘贴的悬浮按钮，减少对计算资源的浪费，用户操作也更加简单，方便。

本公开提供了所述图像内容提取方法的一个实施例，其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项。所述在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置包括：响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，响应于界面切换操作，所述悬浮按钮消失，在界面切换之后，如果用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮，响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。

本公开提供了所述图像内容提取装置的一个实施例，其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项。所述复制操作单元包括：第二复制触发子单元，被配置为响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。第二界面切换子单元，被配置为响应于界面切换操作，所述悬浮按钮消失。粘贴按钮产生子单元，被配置为在界面切换之后，如果用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮。第二粘贴触发子单元，被配置为响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。

本实施例提供的技术方案可以包括以下有益效果：由于本实施例在界面切换时，所述悬浮按钮消失，在界面切换之后，响应于用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮，因此，用户可以自主选择创建用于粘贴的悬浮按钮的时机，更便于用户对切换后的界面的使用。

应当理解的是，以上的一般描述和后文的细节描述仅是示例性和解释性的，并不能限制本公开。

附图说明

此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本公开的实施例，并与说明书一起用于解释本公开的原理。

图1是根据一示例性实施例示出的一种实施环境的示意图。

图2是根据一示例性实施例示出的一种图像内容提取方法的流程图。

图3是根据另一示例性实施例示出的一种图像内容提取方法的流程图。

图4是根据一示例性实施例示出的具有触摸屏的用户终端界面示意图之一。

图5是根据一示例性实施例示出的具有鼠标的个人电脑界面示意图。

图6a是根据一示例性实施例示出的具有触摸屏的用户终端界面示意图之二。

图6b是根据一示例性实施例示出的具有触摸屏的用户终端界面示意图之三。

图7是根据又一示例性实施例示出的一种图像内容提取方法的流程图。

图8是根据再一示例性实施例示出的一种图像内容提取方法的流程图。

图8a是根据一示例性实施例示出的具有触摸屏的用户终端界面示意图之四。

图8b是根据一示例性实施例示出的具有触摸屏的用户终端界面示意图之五。

图8c是根据一示例性实施例示出的具有触摸屏的用户终端界面示意图之六。

图9是根据再一示例性实施例示出的一种图像内容提取方法的流程图。

图10是根据一示例性实施例示出的一种图像内容提取装置的框图。

图11是根据另一示例性实施例示出的一种图像内容提取装置的框图。

图12是根据又一示例性实施例示出的一种图像内容提取装置的框图。

具体实施方式

这里将详细地对示例性实施例进行说明，其示例表示在附图中。下面的描述涉及附图时，除非另有表示，不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本公开相一致的所有实施方式。相反，它们仅是与如所附权利要求书中所详述的、本公开的一些方面相一致的装置和方法的例子。

图1是根据一示例性实施例示出的一种实施环境的示意图。该实施环境包括用户终端110。本公开提供的方法可以应用于所述用户终端110。其中，用户终端110可以是个人电脑，智能手机，平板电脑等用户终端。图1中以所述用户终端110为具有触摸屏的智能手机示意。

图2是根据一示例性实施例示出的一种图像内容提取方法的流程图。该图像内容提取方法可以包括：

在步骤210中，对用户选定的图像进行识别。

在步骤220中，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。

在步骤230中，在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。

综上所述，由于本实施例对用户选定的图像进行识别，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮，在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置，因此，用户可以在识别出图像内容后使用悬浮按钮快速提取自己想要的内容到目标位置，用户操作少，效率高。其中，所述目标位置可以由用户任意指定，具体指定方式本公开并不进行限制。例如，可以预先设置或者临时指定。

在本公开提供的技术方案中，对用户选定的图像文件整体进行识别可以对用户选定的图像文件整体进行识别，或者，也可以对用户选定的图像文件中的选定区域中的图像进行识别。由于提供了整体或部分选定区域两种可能的识别范围，更加符合用户需要。下面，对用户选定的图像文件中的选定区域中的图像进行识别的一种可能的实施方式进行详细说明。

图3是根据另一示例性实施例示出的一种图像内容提取方法的流程图。该图像内容提取方法可以包括：

在步骤310中，打开用户选定的图像文件，显示所述图像文件中的图片。

在步骤311中，进入画笔模式以便用户在所述图片上绘制线条，检测用户所绘制的线条是否形成封闭区域。

本公开对进入画笔模式的触发方式不限。例如，可以由用户执行指定特定操作触发，也可以在打开用户选定的图像文件，显示所述图像文件中的图片之后，自动进入画笔模式。可以理解的是，画笔模式，是用于定义绘图色与底图的相互作用的模式，其中，可以提供画笔工具，以及定义画笔工具以何种方式对图像中的像素产生影响。

例如，在本公开所提供的方法应用于具有触摸屏的用户终端的实施方式中，所述进入画笔模式可以指进入以用户按压触摸屏的触点作为画笔工具进行绘制的模式。如图4所示具有触摸屏的用户终端界面示意图。可以响应于用户按压触摸屏显示的图片的时长超过预设时长(例如，2秒)，进入画笔模式，在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹，并检测触点移动的轨迹是否形成封闭区域。例如，在该实施方式中，当用户手指长按超过2秒的时候，可以判定用户开始在图片上圈定范围，并将屏幕压力最大点作为触点，以线条410显示触点移动轨迹，只要用户手不离开屏幕，一直沿着手指的轨迹显示颜色线条。在该实施方式中，由于以用户按压触摸屏的触点作为画笔工具进行绘制，使得用户操作更加简单、方便。

再例如，在本公开所提供的方法应用于具有鼠标的个人电脑的实施方式中。如图5所示具有鼠标的个人电脑界面示意图，可以响应于用户使用鼠标左键和/或右键点住显示的图片的时长超过预设时长(例如，2秒)，在用户按压鼠标左键和/或右键移动过程中，以带有颜色的线条显示鼠标指针移动的轨迹，并检测鼠标指针移动的轨迹是否形成封闭区域。

可以理解的是，本实施例所述画笔工具对应的画笔图标可以显示也可以不显示。具体根据实施需要设置。例如，在本公开提供的方法应用于具有触摸屏的用户终端的实施方式中，用户按压触摸屏的触点作为画笔进行绘制的过程中，可以不必显示画笔图标。再例如，在本公开提供的方法应用于具有鼠标的个人电脑的实施方式中，用户按压鼠标左键超过预设时长则显示如图5中510所示的画笔图标。

在步骤312中，如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

例如，当检测到用户所绘制的线条首尾相接，则可以确定用户所绘制的线条形成封闭区域。可以理解的是，用户所绘制的封闭区域所圈住的部分即为用户想要识别的字符、数字或者线条图案，因此，可以对所述封闭区域中的图像进行识别。

在步骤320中，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。

需要说明的是，本公开对产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮的触发方式不限。例如，可以响应于完成对用户选定的图像的识别，自动产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。再例如，在本公开提供的方法应用于具有触摸屏的用户终端的情况下，可以响应于用户针对触摸屏显示的识别出的内容执行指定手势操作(例如，按压识别出的内容超过一定时间、双击，等等)，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。

另外，还可以显示可移动指示标，根据用户对所述可移动指示标的拖动操作，相应改变所述可移动指示标所在位置，根据所述可移动指示标所在位置，确定所述部分内容的范围。在该实施方式中，用户可以通过拖动该指示标来改变所述部分内容的范围，便于用户操作。

例如，参见图6a所示具有触摸屏的用户终端界面示意图。所述可移动指示标可以如图6a所示包括用于限定所述部分内容的起始位置的首指示标601，以及用于限定所述部分内容的结束位置的尾指示标602，在所述首指示标与尾指示标之间的内容即为用户想要复制的部分内容。在该实施方式中，用户可以通过拖动可移动指示标来改变用户想要复制的部分内容的范围，操作简单。

在步骤330中，在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。

综上所述，由于本实施例在打开用户选定的图像文件，显示所述图像文件中的图片之后，进入画笔模式以便用户在所述图片上绘制用于圈定选定区域的线条，因此，用户既可以灵活选择要识别的图像内容，又可以在识别出图像内容后，使用悬浮按钮快速提取自己想要的内容到目标位置，用户操作少，效率高。

可以理解的是，通过进入画笔模式使用户在所述图片上绘制线条来选择要识别的图像内容，只是本公开所提供的技术方案便于用户选择选定区域的一种可能的实施方式。本公开所提供的技术方案还可以包括其他选择选定区域的实施方式，例如，可以提供矩形区域圈定工具，以便用户通过使用矩形区域圈定工具将其想要识别的图像内容用矩形区域圈定出来。然而，相较于该实施方式，通过画笔模式使用户在所述图片上绘制线条来选择要识别的图像内容，使得用户圈定要识别的图像内容的操作更加灵活，尤其对于布置格局不仅包括矩形的图像内容来说，更加便于用户圈定。

需要说明的是，本公开提供的技术方案所述悬浮按钮可以通过编写实现悬浮窗口的应用来产生。例如，一些可能的实施方式中，可以在应用中通过getApplication().getSystemService(Context.WINDOW_SERVICE)，或者，activity.getSystemService(Context.WINDOW_SERVICE)得到用于实现悬浮窗口的类CompatModeWrapper，然后通过类CompatModeWrapper创建添加悬浮窗口视图。悬浮按钮的位置不固定，可以被自由拖动。在当前界面中所创建的悬浮窗口视图，可以在界面切换时消失，也可以在界面切换后仍然悬浮在切换后的界面上，具体可以根据实施需要设置。下面，分别对这两种可能的情况分别进行介绍。

例如，图7是根据又一示例性实施例示出的一种图像内容提取方法的流程图。该图像内容提取方法可以包括：

在步骤710中，对用户选定的图像进行识别。

在步骤720中，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮，其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项。例如，可以产生如图6a所示的悬浮按钮610。

在步骤730中，响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。例如，用户可以通过点击如图6a所示的悬浮按钮610中的“复制”，将首指示标601与尾指示标602之间的内容“当用户手指…圈定范围”复制到内存预设存储位置。

需要说明的是，所述内存预设存储位置可以是内存中，操作***与应用之间所约定的、用于暂时保存所复制的内容的存储位置。

在步骤731中，响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上。例如，用户在如图6a所示的界面中通过向左滑动屏幕切换到如图6b所示的另一界面，则如图6b所示，所述悬浮按钮仍然显示于切换后的界面之上。

在步骤732中，响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置。例如，用户可以通过点击如图6b所示的悬浮按钮610中的“粘贴”，将内存预设位置中所复制的内容“当用户手指…圈定范围”粘贴到切换后的界面中用户指定的目标位置。

在本实施例中，用于对识别出的部分内容或全部内容进行复制的悬浮按钮包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项，而且，在界面切换时，仍然悬浮于切换后的界面之上，因此，不必在切换后的界面另外创建用于粘贴的悬浮按钮，减少对计算资源的浪费，用户操作也更加简单，方便。

再例如，图8是根据再一示例性实施例示出的一种图像内容提取方法的流程图。该图像内容提取方法可以包括：

在步骤810中，对用户选定的图像进行识别。

在步骤820中，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮，其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项。例如，用户在如图8a所示的界面中显示的识别出的内容处按压超过2秒，则如图8a所示，产生包含复制选项的悬浮按钮810。

在步骤830中，响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。

在步骤831中，响应于界面切换操作，所述悬浮按钮消失。例如，用户在如图8a所示的界面中通过向左滑动屏幕切换到如图8b所示的另一界面，则如图8b所示，所述悬浮按钮消失。

在步骤832中，在界面切换之后，如果用户执行了指定操作(例如，在所述方法应用于具有触摸屏的用户终端的实施方式中，指定操作可以为用户在目标位置处按压时长超过一定预设时长，如2秒)，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮。例如，用户在如图8b所示的界面中在目标位置处按压超过2秒，则如图8c所示，产生包含粘贴选项的另一悬浮按钮820。

在步骤833中，响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。例如，用户可以通过点击如图8c所示的悬浮按钮820中的“粘贴”，将内存预设位置中所复制的内容“当用户手指…圈定范围”粘贴到切换后的界面中用户指定的目标位置。

在本实施例中，用于对识别出的部分内容或全部内容进行复制的悬浮按钮包含对识别出的部分内容或全部内容进行复制的选项，而且，在界面切换时，悬浮按钮消失，在界面切换之后，响应于用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮，因此，用户可以自主选择创建用于粘贴的悬浮按钮的时机，更便于用户对切换后的界面的使用。

下面，结合上述提到的应用于具有触摸屏的用户终端的几种实施方式，对本公开提供的方法应用于具有触摸屏的用户终端的一可能的实施方式进行详细说明。例如，图9是根据再一示例性实施例示出的一种图像内容提取方法的流程图。该图像内容提取方法可以包括：

在步骤910中，打开用户选定的图像文件，显示所述图像文件中的图片。

在步骤911中，响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式，在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹，并检测触点移动的轨迹是否形成封闭区域。

在步骤912中，如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

在步骤920中，响应于用户针对触摸屏显示的识别出的内容执行指定手势操作，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。其中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项。以及，

在步骤921中，显示可移动指示标，以便用户通过按压触摸屏拖动可移动指示标，根据所述可移动指示标所在位置，确定所述部分内容的范围。

在步骤930中，响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。

在步骤931中，响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上。

在步骤932中，响应于用户触摸了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置。

综上所述，由于本实施例在显示所述图像文件中的图片之后，响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式以便用户在所述图片上利用触点绘制用于圈住待识别图像的线条，使得用户可以灵活选择用户所要识别的图像内容，并且响应于用户对识别出的内容执行指定手势操作而产生悬浮按钮，以及可移动指示标，从而用户可以通过按压触摸屏拖动可移动指示标，根据所述可移动指示标所在位置，确定所述部分内容的范围，并且，由于所述悬浮按钮包含对所复制的内容进行粘贴的选项，在界面切换时，仍然悬浮于切换后的界面之上，因此，不必在切换后的界面另外创建用于粘贴的悬浮按钮，减少对计算资源的浪费，用户操作也更加简单，方便。

图10是根据一示例性实施例示出的一种图像内容提取装置的框图。参照图10，该装置可以包括识别单元1010，悬浮按钮产生单元1020和复制操作单元1030。

其中，该识别单元1010可以被配置为对用户选定的图像进行识别。

该悬浮按钮产生单元1020被配置为产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮。

该复制操作单元1030被配置为在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置。

综上所述，由于本实施例对用户选定的图像进行识别，产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮，在用户使用所述悬浮按钮对部分内容或全部内容进行复制操作的情况下，将所述部分内容或全部内容复制到目标位置，因此，用户可以在识别出图像内容后使用悬浮按钮快速提取自己想要的内容到目标位置，用户操作少，效率高。其中，所述目标位置可以由用户任意指定，具体指定方式本公开并不进行限制。例如，可以预先设置或者临时指定。

一些可能的实施方式中，如图11所示，所述识别单元1010可以包括：整体识别子单元1011，被配置为对用户选定的图像文件整体进行识别。或者，部分识别子单元1012，被配置为对用户选定的图像文件中的选定区域中的图像进行识别。

一些可能的实施方式中，如图11所示，所述部分识别子单元1012可以包括：图片打开子单元1013，被配置为打开用户选定的图像文件，显示所述图像文件中的图片。画笔圈定子单元1014，被配置为进入画笔模式以便用户在所述图片上绘制线条，检测用户所绘制的线条是否形成封闭区域。区域识别子单元1015，被配置为如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

一些可能的实施方式中，所述装置配置于具有触摸屏的用户终端。如图11所示，所述画笔圈定子单元1014可以包括：画笔模式进入子单元1014a，被配置为响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式。线条显示子单元1014b，被配置为在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹。封闭区域检测子单元1014c，被配置为检测触点移动的轨迹是否形成封闭区域。

一些可能的实施方式中，如图11所示，所述装置还可以包括：指示标显示单元1040，被配置为显示可移动指示标。指示标位置改变单元1041，被配置为根据用户对所述可移动指示标的拖动操作，相应改变所述可移动指示标所在位置。部分内容确定单元1042，被配置为根据所述可移动指示标所在位置，确定所述部分内容的范围。

一些可能的实施方式中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项。如图11所示，所述复制操作单元1030可以包括：第一复制触发子单元1031，被配置为响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。第一界面切换子单元1032，被配置为响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上。第一粘贴触发子单元1033，被配置为响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置。

一些可能的实施方式中，所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项。如图11所示，所述复制操作单元1030可以包括：第二复制触发子单元1034，被配置为响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置。第二界面切换子单元1035，被配置为响应于界面切换操作，所述悬浮按钮消失。粘贴按钮产生子单元1036，被配置为在界面切换之后，如果用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮。第二粘贴触发子单元1037，被配置为响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。

关于上述实施例中的装置，其中各个模块执行操作的具体方式已经在有关该方法的实施例中进行了详细描述，此处将不做详细阐述说明。

图12是根据一示例性实施例示出的一种图像内容提取装置1200的框图。例如，装置1200可以是移动电话，计算机，数字广播终端，消息收发设备，游戏控制台，平板设备，医疗设备，健身设备，个人数字助理等。

参照图12，装置1200可以包括以下一个或多个组件：处理组件1202，存储器1204，电力组件1206，多媒体组件1208，音频组件1210，输入/输出(I/O)的接口1212，传感器组件1214，以及通信组件1216。

处理组件1202通常控制装置1200的整体操作，诸如与显示，电话呼叫，数据通信，相机操作和记录操作相关联的操作。处理组件1202可以包括一个或多个处理器1220来执行指令，以完成上述的方法的全部或部分步骤。此外，处理组件1202可以包括一个或多个模块，便于处理组件1202和其他组件之间的交互。例如，处理组件1202可以包括多媒体模块，以方便多媒体组件1208和处理组件1202之间的交互。

存储器1204被配置为存储各种类型的数据以支持在装置1200的操作。这些数据的示例包括用于在装置1200上操作的任何应用程序或方法的指令，联系人数据，电话簿数据，消息，图片，视频等。存储器1204可以由任何类型的易失性或非易失性存储设备或者它们的组合实现，如静态随机存取存储器(SRAM)，电可擦除可编程只读存储器(EEPROM)，可擦除可编程只读存储器(EPROM)，可编程只读存储器(PROM)，只读存储器(ROM)，磁存储器，快闪存储器，磁盘或光盘。

电力组件1206为装置1200的各种组件提供电力。电力组件1206可以包括电源管理***，一个或多个电源，及其他与为装置1200生成、管理和分配电力相关联的组件。

多媒体组件1208包括在所述装置1200和用户之间的提供一个输出接口的屏幕。在一些实施例中，屏幕可以包括液晶显示器(LCD)和触摸面板(TP)。如果屏幕包括触摸面板，屏幕可以被实现为触摸屏，以接收来自用户的输入信号。触摸面板包括一个或多个触摸传感器以感测触摸、滑动和触摸面板上的手势。所述触摸传感器可以不仅感测触摸或滑动动作的边界，而且还检测与所述触摸或滑动操作相关的持续时间和压力。在一些实施例中，多媒体组件1208包括一个前置摄像头和/或后置摄像头。当装置1200处于操作模式，如拍摄模式或视频模式时，前置摄像头和/或后置摄像头可以接收外部的多媒体数据。每个前置摄像头和后置摄像头可以是一个固定的光学透镜***或具有焦距和光学变焦能力。

音频组件1210被配置为输出和/或输入音频信号。例如，音频组件1210包括一个麦克风(MIC)，当装置1200处于操作模式，如呼叫模式、记录模式和语音识别模式时，麦克风被配置为接收外部音频信号。所接收的音频信号可以被进一步存储在存储器1204或经由通信组件1216发送。在一些实施例中，音频组件1210还包括一个扬声器，用于输出音频信号。

I/O接口1212为处理组件1202和***接口模块之间提供接口，上述***接口模块可以是键盘，点击轮，按钮等。这些按钮可包括但不限于：主页按钮、音量按钮、启动按钮和锁定按钮。

传感器组件1214包括一个或多个传感器，用于为装置1200提供各个方面的状态评估。例如，传感器组件1214可以检测到装置1200的打开/关闭状态，组件的相对定位，例如所述组件为装置800的显示器和小键盘，传感器组件1214还可以检测装置1200或装置1200一个组件的位置改变，用户与装置1200接触的存在或不存在，装置1200方位或加速/减速和装置1200的温度变化。传感器组件1214可以包括接近传感器，被配置用来在没有任何的物理接触时检测附近物体的存在。传感器组件1214还可以包括光传感器，如CMOS或CCD图像传感器，用于在成像应用中使用。在一些实施例中，该传感器组件1214还可以包括加速度传感器，陀螺仪传感器，磁传感器，压力传感器或温度传感器。

通信组件1216被配置为便于装置1200和其他设备之间有线或无线方式的通信。装置1200可以接入基于通信标准的无线网络，如WiFi，2G或3G，或它们的组合。在一个示例性实施例中，通信组件1216经由广播信道接收来自外部广播管理***的广播信号或广播相关信息。在一个示例性实施例中，所述通信组件1216还包括近场通信(NFC)模块，以促进短程通信。例如，在NFC模块可基于射频识别(RFID)技术，红外数据协会(IrDA)技术，超宽带(UWB)技术，蓝牙(BT)技术和其他技术来实现。

在示例性实施例中，装置1200可以被一个或多个应用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、控制器、微控制器、微处理器或其他电子元件实现，用于执行上述图像内容提取方法。

在示例性实施例中，还提供了一种包括指令的非临时性计算机可读存储介质，例如包括指令的存储器1204，上述指令可由装置1200的处理器1220执行以完成上述图像内容提取方法。例如，所述非临时性计算机可读存储介质可以是ROM、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光数据存储设备等。

本领域技术人员在考虑说明书及实践本公开后，将容易想到本公开的其它实施方案。本申请旨在涵盖本公开的任何变型、用途或者适应性变化，这些变型、用途或者适应性变化遵循本公开的一般性原理并包括本公开未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的，本公开的真正范围和精神由下面的权利要求指出。

应当理解的是，本公开并不局限于上面已经描述并在附图中示出的精确结构，并且可以在不脱离其范围进行各种修改和改变。本公开的范围仅由所附的权利要求来限制。

Claims (12)

1.一种图像内容提取方法，其特征在于，包括：

对用户选定的图像进行识别；

产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮；

当所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项时，

响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，

响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上，

响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置；

当所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项时，

响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，

响应于界面切换操作，所述悬浮按钮消失，

在界面切换之后，如果用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮，

响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。

2.根据权利要求1所述的方法，其特征在于，所述对用户选定的图像进行识别包括：

对用户选定的图像文件整体进行识别；

或者，

对用户选定的图像文件中的选定区域中的图像进行识别。

3.根据权利要求2所述的方法，其特征在于，所述对用户选定的图像文件中的选定区域中的图像进行识别包括：

打开用户选定的图像文件，显示所述图像文件中的图片；

进入画笔模式以便用户在所述图片上绘制线条，检测用户所绘制的线条是否形成封闭区域；

如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

4.根据权利要求3所述的方法，其特征在于，所述方法应用于具有触摸屏的用户终端；

所述进入画笔模式以便用户绘制线条，检测用户所绘制的线条是否形成封闭区域包括：

响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式，在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹，并检测触点移动的轨迹是否形成封闭区域。

5.根据权利要求1所述的方法，其特征在于，所述方法还包括：

显示可移动指示标；

根据用户对所述可移动指示标的拖动操作，相应改变所述可移动指示标所在位置；

根据所述可移动指示标所在位置，确定所述部分内容的范围。

6.一种图像内容提取装置，其特征在于，包括：

识别单元，被配置为对用户选定的图像进行识别；

悬浮按钮产生单元，被配置为产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮；

复制操作单元；

当所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项时，所述复制操作单元包括：

第一复制触发子单元，被配置为响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，

第一界面切换子单元，被配置为响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上，

第一粘贴触发子单元，被配置为响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置；

当所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项时，所述复制操作单元包括：

第二复制触发子单元，被配置为响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置；

第二界面切换子单元，被配置为响应于界面切换操作，所述悬浮按钮消失；

粘贴按钮产生子单元，被配置为在界面切换之后，如果用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮；

第二粘贴触发子单元，被配置为响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。

7.根据权利要求6所述的装置，其特征在于，所述识别单元包括：

整体识别子单元，被配置为对用户选定的图像文件整体进行识别；

或者，

部分识别子单元，被配置为对用户选定的图像文件中的选定区域中的图像进行识别。

8.根据权利要求7所述的装置，其特征在于，所述部分识别子单元包括：

图片打开子单元，被配置为打开用户选定的图像文件，显示所述图像文件中的图片；

画笔圈定子单元，被配置为进入画笔模式以便用户在所述图片上绘制线条，检测用户所绘制的线条是否形成封闭区域；

区域识别子单元，被配置为如果检测到用户所绘制的线条形成封闭区域，对所述封闭区域中的图像进行识别。

9.根据权利要求8所述的装置，其特征在于，所述装置配置于具有触摸屏的用户终端；

所述画笔圈定子单元包括：

画笔模式进入子单元，被配置为响应于用户按压触摸屏显示的图片的时长超过预设时长，进入画笔模式；

线条显示子单元，被配置为在用户按压触摸屏的触点移动过程中，以带有颜色的线条显示触点移动的轨迹；

封闭区域检测子单元，被配置为检测触点移动的轨迹是否形成封闭区域。

10.根据权利要求6所述的装置，其特征在于，所述装置还包括：

指示标显示单元，被配置为显示可移动指示标；

指示标位置改变单元，被配置为根据用户对所述可移动指示标的拖动操作，相应改变所述可移动指示标所在位置；

部分内容确定单元，被配置为根据所述可移动指示标所在位置，确定所述部分内容的范围。

11.一种图像内容提取装置，其特征在于，包括：

处理器；

用于存储处理器可执行指令的存储器；

其中，所述处理器被配置为：

对用户选定的图像进行识别；

产生用于对识别出的部分内容或全部内容进行复制的悬浮按钮；

当所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项，以及，对所复制的内容进行粘贴的选项时，

响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，

响应于界面切换操作，将所述悬浮按钮显示于切换后的界面之上，

响应于用户触发了所述悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到所述切换后的界面中的目标位置；

当所述悬浮按钮中包含对识别出的部分内容或全部内容进行复制的选项时，

响应于用户触发了所述悬浮按钮中对识别出的部分内容或全部内容进行复制的选项，将所述部分内容或全部内容存储到内存预设存储位置，

响应于界面切换操作，所述悬浮按钮消失，

在界面切换之后，如果用户执行了指定操作，产生包含对所复制的内容进行粘贴的选项的另一悬浮按钮，

响应于用户触发了所述另一悬浮按钮中对复制的内容进行粘贴的选项，从所述内存预设位置读取出所述部分内容或全部内容，粘贴到切换后的界面中的目标位置。

12.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质中存储有指令，当所述存储介质中的指令在处理组件上运行时，使得处理组件执行如权利要求1至5任一所述的图像内容提取方法。