CN103345350A

CN103345350A - 一击标记用户界面

Info

Publication number: CN103345350A
Application number: CN2013100351677A
Authority: CN
Inventors: C.劳斯塞奥; J.穆发特-梅里多
Original assignee: Intel Corp
Current assignee: Intel Corp
Priority date: 2012-01-30
Filing date: 2013-01-30
Publication date: 2013-10-09
Also published as: TWI512598B; TW201346701A; KR101478514B1; WO2013115775A1; JP2013156992A; KR20130088074A; US20150177918A1; US10254919B2

Abstract

方法和***可以提供用于识别对界面中的一个或多个对象的第一用户选择，并且确定与第二用户选择关联的标记。第一用户选择可以是单击选择，并且第二用户选择可以对应于已标记的对象和标记的其中之一。另外，可以在第一用户选择的这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。如果第二用户选择在第一用户选择之前，则可以响应于第一用户选择创建标记关系。如果第二用户选择在第一用户选择之后，则可以响应于第二用户选择创建标记关系。

Description

一击标记用户界面

技术领域

实施例通常涉及标记媒体内容中的对象。更具体来说，实施例涉及一击标记用户界面的实现。

背景技术

标记照片可以涉及将文本标签应用到照片中的脸以使得文本标签可以充实照片的元数据以用于未来的数据挖掘。在常规的手动标记解决方案中，用户可以为照片中的每一张脸输入标记信息。另一方面，在常规的自动化解决方案中，脸部辨识算法可以尝试识别照片中的个体。尽管在某些情况下这样的解决方案可能是合适的，但仍然存在相当大的改进空间。例如，常规的手动解决方案可能是费时的，特别对于其中涉及很多脸的实例，并且常规的自动化解决方案可能会受限于脸部辨识算法识别非最优情况下的个体（例如，化妆的脸、伪装的脸等等）的能力。

附图说明

对本领域技术人员来说，通过阅读下面的说明书和所附的权利要求书，并且通过参考下面的附图，本发明的实施例的各种优势将变得显而易见，附图中：

图1是根据实施例的界面的示例的图示；

图2A是根据实施例标记对象的方法的示例的流程图；

图2B是根据实施例查看已标记的对象的方法的示例的流程图；以及

图3是根据实施例的计算***的示例的框图。

具体实施方式

现在转向图1，示出界面10，其中将各个媒体内容对象呈现给用户以用于标记和回顾。通常，所示的界面10包括数据库部分/视图12、对象视图14和标记视图16。数据库视图12可以示出媒体内容18（例如，照片、视频、文档、演示文稿、网页等等），而在对象视图14中可以显示从媒体内容18提取的一个或多个对象。另外，可以在标记视图16中显示已经创建的任何标记24（24a-24e）。在所示示例中，对象视图14包含已标记的对象20（20a-20d）以及未标记的对象22。例如，已经以“A”标记24a（例如，Alex）为所示的已标记的对象20a加上了标签，而已经以“B”标记24b（例如，Bob）为所示的已标记的对象20b加上了标签。

尽管将对象20、22示为是脸，但对象20、22也可以是其他感兴趣的项，例如汽车、花、标志、文本等等。在这点上，在示出的示例中，底层的***可以对媒体内容18进行初步分析以识别对象20、22在媒体内容18中的位置（例如，候选脸区域）并从媒体内容18提取它们，而通过用户对对象20、22进行实际辨识。可以通过使已标记的对象20变灰或通过使用另一种适当的外观修改技术（例如，高亮、动画、大小改变、颜色改变等等）来在视觉上区别已标记的对象20和未标记的对象22。也可以从视图中选择性地隐藏已标记的对象20和未标记的对象22。

如将更具体地讨论，可以以快速、直观、用户友好并且可靠的独特方式来将标记24应用于对象20、22。具体来说，可以使用一个或多个单击/一击选择来以标记24给对象20、22加上标签，其中取决于所使用的特定的硬件配置，“点击”可以代表鼠标点击、手指触摸等等。实质上，基于先（previous）用户选择或者后（subsequent）用户选择，单击选择可以导致标记关系的自动创建。

先用户选择：例如，为了以“D”标记24d给未标记的对象22的其中之一加上标签，用户可以在选择D标记24d之后简单地触摸（例如，在触敏屏幕的情况下）期望的未标记的对象22（其中，对D标记的选择将组成先用户选择）。如果用户想要将D标记24d分配给已标记的对象20中的一个或多个，也将同样如此。实际上，在示出的示例中，用户可以以四个连续的触摸快速地将标记24d分配给四个未标记的对象22中的每一个。备选地，用户可以在触摸已标记的对象20d之后触摸未标记的对象22以便为选择的未标记的对象22复制相同的标记关系。这样的单击方式可以明显地比常规的手动标记解决方案花费更少时间，并且从对象辨识立场来说在非最优情况下可以比常规的自动化标记解决方案更可靠。

后用户选择：以D标记24d来为未标记的对象22中的一个或多个加上标签的另一种方式将是触摸期望的未标记的对象22，以便选择它们（当当前没有标记时），并接着触摸D标记24d以便将“D”标签同时应用到期望的未标记的对象22。如同在上述示例中一样，用户可以以这种方式选择大量的未标记的对象22。备选地，用户可以选择期望的未标记的对象22，并随后触摸已标记的对象20d以便同时为选择的未标记的对象22复制相同的标记关系。同样地，这样的单击方式可以明显地比常规的手动标记解决方案花费更少的时间，并且可以比常规的自动化标记解决方案更可靠。

图2A示出标记对象的方法30。方法30可以实现为一组可执行逻辑指令，这一组可执行逻辑指令存储在至少一个机器可读或计算机可读存储介质（例如，随机存取存储器（RAM）、只读存储器（ROM）、可编程ROM（PROM）、闪速存储器、固件、微码等等）中，存储在可配置逻辑（例如，可编程逻辑阵列（PLA）、现场可编程门阵列（FPGA）、复杂可编程逻辑器件（CPLD））中，存储在使用电路技术（例如，专用集成电路（ASIC）、互补金属氧化物半导体（CMOS）或晶体管-晶体管逻辑（TTL）技术）的固定功能性硬件中，或存储在其任意组合中。例如，执行方法30中所示的操作的计算机程序代码可以以一种或多种编程语言的任意组合来编写，包括面向对象的编程语言（例如，C++等等）以及常规的过程化编程语言（例如，“C”编程语言或类似编程语言）。此外，可以使用前述的电路技术中的任何一种技术将方法30的各个方面实现为处理器的嵌入式逻辑。

所示的处理方框32提供用于识别对一个或多个对象的用户选择（例如，“第一”用户选择）。如上所述，用户选择可以包括一个或多个单击选择，其中每一个单击选择对应于一个对象。可以在方框34确定与另一用户选择（例如，“第二”用户选择）关联的标记。第二用户选择可以先于第一用户选择/在第一用户选择之前或者在第一用户选择之后发生，它可以对应于已标记的对象或标记。方框36可以在第一用户选择的这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。因此，如果第二用户选择在第一用户选择之前，则可以响应于第一用户选择创建标记关系。另一方面，如果第二用户选择在第一用户选择之后，则可以响应于第二用户选择创建标记关系。还可以将创建的标记关系存储到非易失性存储器（NVM）以使得它们立即变成永存。如将更详细地讨论，创建标记关系可以涉及删除先前的标记关系，其中删除还可以在NVM中有所反映。

回顾标记关系：现在返回到图1，所示的方式还可以提供增强的解决方案以回顾先前分配的标记。具体来说，为了查看已经以特定的标记加上标签的所有对象，用户只需选择所关注的标记。例如，如果用户选择标记视图16中的“C”标记24c，则所示的界面10将自动地修改加上标签的对象20c（和具有该标签的任何其他对象）的外观以便向用户指示已经将C标记24c分配给那个加上标签的对象20c。如上所述，外观修改可以包括高亮、动画化选择的对象和标记以及改变其大小、改变其颜色等等。类似地，如果用户选择标记视图16中的“B”标记24b，则界面10可以自动地修改加上标签的对象20b（和具有该标签的任何其他对象）的外观以便向用户指示已经将B标记24b分配给加上标签的对象20b。另外，如果当前没有标记并且用户触摸已标记的对象20，则它的标记变成当前标记。例如，在示出的示例中，点击已标记的对象20d与点击标记24d是相同的。

图2B示出查看已标记的对象的方法38。方法38可以实现为一组可执行逻辑指令，这一组可执行逻辑指令存储在至少一个机器可读或计算机可读存储介质（例如，RAM、ROM、PROM、闪速存储器、固件、微码等等）中，存储在可配置逻辑（例如，PLA、FPGA、CPLD）中，存储在使用电路技术（例如，ASIC、CMOS或TTL技术）的固定功能性硬件中，或存储在其任意组合中。所示的处理方框40提供用于识别对标记的用户选择（例如，“第三”用户选择），其中可以在方框42响应于对标记的用户选择而确定一个或多个有关对象。另外，方框44可以提供用于修改选择的标记和这一个或多个有关对象的外观以便向用户指示在它们之间存在标记关系。

按钮功能：再次返回到图1，所示的对象视图14包括便于用户对对象20、22进行管理和操纵的一组软按钮26（26a-26c）。具体来说，提取按钮26a可以用于发起在包含媒体内容18的数据库中的特征的提取。因此，提取按钮26a可以启动候选脸区域检测过程。另外，第一隐藏按钮26b可以用于隐藏已标记的对象20，并且第二隐藏按钮26c可以用于隐藏没有以当前标记加上标签的任何对象。

标记视图16也可以包括便于用户对标记24进行管理和操纵的一组软按钮28（28a-28c）。具体来说，创建按钮28a可以用于创建新标记并为当前选择的感兴趣的对象加上标签，编辑按钮28b可以用于改变当前标记的文本，而删除按钮28c可以用于删除当前标记并从以该标签标记的每一个对象移除它的标签。

所示的对象视图14和所示的标记视图16都可以通过向上或向下“轻按”相应的内容而进行滚动。响应于在对象视图14中执行的滚动操作，数据库视图12可以自动地放大和缩小底层数据库中的媒体内容。

另一个有利的特征是自动删除先前的标记关系的能力。例如，如果当选择了“E”标记24e时触摸已标记的对象20a，则除了创建与已标记的对象20a的“E”标记24e关系以外，还可以删除与“A”标记24a的关系。此外，如果选择了标记并且用户触摸以该标记加上标签的对象，则可以取消选择该对象并且使对象未加标签或者以它的先前标记加上标签。例如，如果当选择了“A”标记24a时用户触摸已标记的对象20a，则可以删除与“A”标记24a的关系并且以已标记的对象20a的先前分配的标记来代替或不加标记（例如，如果不存在先前分配的标记）。

图3示出可以作为移动设备的一部分的计算***/平台46，移动设备具有计算功能性（例如，个人数字助理/PDA、膝上型计算机、桌面型计算机、智能平板）、通信功能性（例如，无线智能电话）、成像功能性、媒体播放功能性（例如，智能电视/TV）或其任意组合（例如，移动互联网设备/MID）。在所示的示例中，平台46包括处理器48、集成的存储器控制器（IMC）50、平台控制器集线器（PCH）52、***存储器54、网络控制器（例如，网络接口卡）56、NVM 58、以及一个或多个用户设备60。处理器48可以备选地经由将平台46中的每个组件相互连接的前端总线或点对点结构（fabric）与IMC 50（又称为北桥）的芯片外变型通信。处理器48可以包括具有一个或若干个处理器核62的核区域，如上所述，它可以执行逻辑指令64以实现用户界面（例如，界面10（图1））。具体来说，用户设备60能够使用户能与平台46交互并且感知来自平台46的界面。

因此，输出组件（例如，监视器、屏幕）66可以显示界面，而输入组件（例如，触摸屏幕传感器阵列、鼠标）68可以检测对界面中的一个或多个对象的第一用户选择。所示的逻辑指令64在执行时识别对这一个或多个对象的第一用户选择，确定与第二用户选择关联的标记，并且在这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。

所示的PCH 52（有时称为南桥或芯片组的南复合体）用作主控制器并且与网络控制器56通信，网络控制器56可以提供平台外通信功能性以用于各种各样的目的，例如蜂窝电话（例如，W-CDMA（UMTS）、CDMA2000（IS-856/IS-2000）等等）、WiFi（例如，IEEE 802.11，1999版，LAN/MAN无线LANS）、蓝牙（例如，IEEE 802.15.1-2005，无线个人局域网）、WiMax（例如，IEEE 802.16-2004，LAN/MAN宽带无线LANS）、全球定位***（GPS）、扩频（例如，900 MHz）、以及其他射频（RF）电话目的。PCH 52还可以包括一个或多个无线硬件电路块以支持这样的功能性。

NVM 58可以包括一个或多个硬盘驱动器（HDD）设备、固态盘（SSD）NAND芯片等等，并且可以用于提供大容量数据存储和/或大量的并行性。如上所述，NVM 58可以用于存储标记关系。还可以存在包括实现为单独ASIC控制器的NAND控制器的解决方案，这些单独的ASIC控制器在诸如下列的标准总线上连接到PCH 52：串行ATA（SATA，例如，SATA修订3.0版规范，2009年5月27日，SATA国际组织/SATA-IO）总线，或PCI Express Graphics（PEG，例如，***组件互连/PCI Express xl6 Graphics 150W-ATX规范1.0，PCI特别兴趣小组（PCI Special Interest Group））总线。NVM 58还可以用作USB（通用串行总线，例如，USB规范3.0，USB实施者论坛（USB Implementers Forum））闪速存储设备。

因此，实施例可以提供用于计算机实现的方法，其中识别对界面中的一个或多个对象的第一用户选择。该方法还可以涉及确定与第二用户选择关联的标记，并且在这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。

实施例还可以包括具有一组指令的计算机可读存储介质，这一组指令在由处理器执行时使计算机识别对界面中的一个或多个对象的第一用户选择。指令还可以使计算机确定与第二用户选择关联的标记，并且在这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。

其他实施例可以包括一种具有用于显示界面的输出组件以及用于检测对界面中的一个或多个对象的第一用户选择的输入组件的***。该***还可以具有逻辑，该逻辑用于识别对界面中的一个或多个对象的第一用户选择，确定与第二用户选择关联的标记，并在这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。

另外，实施例可以包括计算机实现的方法，其中提供了具有对象视图和标记视图的界面。该方法还可以提供用于识别对界面的对象视图中的一个或多个对象的第一用户选择，其中第一用户选择包括一个或多个单击选择，并且其中每一个单击选择对应于一个对象。可以确定与第二用户选择关联的标记，其中第二用户选择对应于界面的对象视图中的已标记的对象和界面的标记视图中的标记的其中之一。另外，该方法可以提供用于在这一个或多个对象和与第二用户选择关联的标记之间创建标记关系。可以将标记关系存储到非易失性存储器，并且可以响应于第一用户选择修改这一个或多个对象的外观。对这一个或多个对象的外观的修改可以指示对这一个或多个对象的选择。该方法还可以提供用于识别对界面的标记视图中的标记的第三单击用户选择，并且响应于第三单击用户选择确定在界面的对象视图中的一个或多个有关对象。另外，该方法可以涉及修改由第三单击用户选择所选择的标记和对象视图中的这一个或多个有关对象的外观。

本发明的实施例的某些方面可以使用硬件、软件、或它们的组合来实现，并且可以在一个或多个计算机***或其他处理***中实现。可以将程序代码应用于使用输入设备输入的数据以执行所描述的功能并生成输出信息。可以将输出信息应用于一个或多个输出设备。本领域技术人员可以认识到，可以使用各种计算机***配置（包括多处理器***、小型计算机、大型计算机等等）来实现实施例。实施例还可以在分布式计算环境中实现，其中任务可以由通过通信网络链接的远程处理设备来执行。

可以以高级过程化或面向对象的编程语言来实现每个程序以便与处理***通信。然而，如果需要，也可以以汇编或机器语言来实现程序。在任何情况下，语言可以是功能语言、编译语言或解释语言。

程序指令可以用于使以指令编程的通用或专用处理***来执行本文所描述的方法。备选地，可以通过包含用于执行这些方法的硬连线逻辑的特定硬件组件、或通过编程的计算机组件和定制硬件组件的任意组合来执行这些方法。可以将本文描述的方法提供为可以包括其上存储有指令的至少一个机器可读介质的计算机程序产品，这些指令可以用于对处理***或其他电子设备编程以执行这些方法。本文所使用的术语“机器可读介质”或“机器可存取介质”应当包括能够存储或编码指令序列以便供机器执行并且使机器执行本文所描述的任何一种方法的任何介质。因此，术语“机器可读介质”和“机器可存取介质”可以包括但不限于固态存储器、光盘和磁盘、以及编码数据信号的载波。此外，在本领域中常见的是，以一种或另一种形式（例如，程序、过程、进程、应用、模块、逻辑等等）将软件谈及为采取行动或导致结果。这样的表达仅仅是陈述处理***执行软件以使处理器执行动作或产生结果的简略方式。

本文中术语“耦合”可以用于指所讨论的组件之间的任何类型的关系（直接或间接），并且可以适用于电、机械、流体、光、电磁、机电或其他连接。另外，本文中可使用术语“第一”、“第二”等只是为了便于讨论，并且除非另外指出，否则不带任何特定的时间或时间顺序意义。

尽管上面已经描述了本发明的各个实施例，但应当理解，只是举例而不是限制性地介绍它们。本领域技术人员将理解，在不脱离所附的权利要求书所定义的本发明的精神和范围的情况下，可以在其中作出形式和细节上的各种改变。因此，本发明的宽度和范围不应受限于任何上述的示范性实施例，而是应当根据所附的权利要求书及其等同物来定义。

Claims

1. 一种计算机实现的方法，包括：

提供包括对象视图和标记视图的界面；

识别对所述界面的对象视图中的一个或多个对象的第一用户选择，其中所述第一用户选择包括一个或多个单击选择，并且其中每一个单击选择对应于一个对象；

确定与第二用户选择关联的标记，其中所述第二用户选择对应于所述界面的对象视图中的已标记的对象和所述界面的标记视图中的标记的其中之一；

在所述一个或多个对象和与所述第二用户选择关联的标记之间创建标记关系；

将所述标记关系存储到非易失性存储器；

响应于所述第一用户选择而修改所述一个或多个对象的外观，其中对所述一个或多个对象的外观的修改指示对所述一个或多个对象的选择；

识别对所述界面的标记视图中的标记的第三单击用户选择；

响应于所述第三单击用户选择，确定所述界面的对象视图中的一个或多个有关对象；以及

修改所述标记视图中的由所述第三单击用户选择所选择的标记和所述对象视图中的所述一个或多个有关对象的外观。

2. 如权利要求1所述的方法，其中所述第二用户选择在所述第一用户选择之前，并且响应于所述第一用户选择创建所述标记关系。

3. 如权利要求1所述的方法，其中所述第二用户选择在所述第一用户选择之后，并且响应于所述第二用户选择创建所述标记关系。

4. 如权利要求1所述的方法，还包括删除所述界面的对象视图中的所述一个或多个对象的先前的标记关系。

5. 一种***，包括：

输出组件，用于显示界面；

输入组件，用于检测对所述界面中的一个或多个对象的第一用户选择；以及

逻辑，用于：

识别对所述界面中的一个或多个对象的所述第一用户选择，

确定与第二用户选择关联的标记，以及

在所述一个或多个对象和与所述第二用户选择关联的标记之间创建标记关系。

6. 如权利要求5所述的***，其中所述第二用户选择对应于所述界面的对象视图中的已标记的对象和所述界面的标记视图中的标记的其中之一。

7. 如权利要求5所述的***，其中所述第二用户选择在所述第一用户选择之前，并且所述标记关系是响应于所述第一用户选择而创建的。

8. 如权利要求5所述的***，其中所述第二用户选择在所述第一用户选择之后，并且所述标记关系是响应于所述第二用户选择而创建的。

9. 如权利要求5所述的***，其中所述逻辑响应于所述第一用户选择修改所述一个或多个对象的外观。

10. 如权利要求9所述的***，其中对所述一个或多个对象的外观的修改指示对所述一个或多个对象的选择。

11. 如权利要求5所述的***，其中所述输入组件检测对所述界面的标记视图中的标记的第三用户选择，并且所述逻辑：

识别对所述界面的标记视图中的标记的所述第三用户选择，

响应于对所述标记视图中的标记的所述第三用户选择，确定所述界面的对象视图中的一个或多个有关对象，以及

修改所述标记视图中的由所述第三单击用户选择所选择的标记和所述界面的对象视图中的所述一个或多个有关对象的外观。

12. 如权利要求5所述的***，还包括非易失性存储器，其中所述逻辑将所述标记关系存储到所述非易失性存储器。

13. 如权利要求5所述的***，其中所述逻辑响应于所述第一用户选择删除所述一个或多个对象的先前的标记关系。

14. 如权利要求5所述的***，其中所述第一用户选择是一个或多个单击选择，并且其中每一个单击选择对应于一个对象。

15. 一种包括一组指令的计算机可读存储介质，所述一组指令在由处理器执行时使计算机：

识别对界面中的一个或多个对象的第一用户选择；

确定与第二用户选择关联的标记；以及

16. 如权利要求15所述的介质，其中所述第二用户选择对应于所述界面的对象视图中的已标记的对象和所述界面的标记视图中的标记的其中之一。

17. 如权利要求15所述的介质，其中所述第二用户选择在所述第一用户选择之前，并且所述标记关系是响应于所述第一用户选择而创建的。

18. 如权利要求15所述的介质，其中所述第二用户选择在所述第一用户选择之后，并且所述标记关系是响应于所述第二用户选择而创建的。

19. 如权利要求15所述的介质，其中所述指令在执行时使计算机响应于所述第一用户选择修改所述一个或多个对象的外观。

20. 如权利要求19所述的介质，其中对所述一个或多个对象的外观的修改指示对所述一个或多个对象的选择。

21. 如权利要求15所述的介质，其中所述指令在执行时使计算机：

识别对所述界面的标记视图中的标记的第三用户选择；

响应于对所述标记视图中的标记的所述第三用户选择，确定所述界面的对象视图中的一个或多个有关对象；以及

22. 如权利要求15所述的介质，其中所述指令在执行时使计算机将所述标记关系存储到非易失性存储器。

23. 如权利要求15所述的介质，其中所述指令在执行时使计算机响应于所述第一用户选择删除所述一个或多个对象的先前的标记关系。

24. 如权利要求15所述的介质，其中所述用户选择是一个或多个单击选择，并且其中每一个单击选择对应于一个对象。

25. 一种计算机实现的方法，包括：

识别对界面中的一个或多个对象的第一用户选择；

确定与第二用户选择关联的标记；以及

26. 如权利要求25所述的方法，其中所述第二用户选择对应于所述界面的对象视图中的已标记的对象和所述界面的标记视图中的标记的其中之一。

27. 如权利要求25所述的方法，其中所述第二用户选择在所述第一用户选择之前，并且响应于所述第一用户选择创建所述标记关系。

28. 如权利要求25所述的方法，其中所述第二用户选择在所述第一用户选择之后，并且响应于所述第二用户选择创建所述标记关系。

29. 如权利要求25所述的方法，还包括响应于所述第一用户选择修改所述一个或多个对象的外观。

30. 如权利要求29所述的方法，其中对所述一个或多个对象的外观的修改指示对所述一个或多个对象的选择。

31. 如权利要求25所述的方法，还包括：

识别对所述界面的标记视图中的标记的第三用户选择；

32. 如权利要求25所述的方法，还包括将所述标记关系存储到非易失性存储器。

33. 如权利要求25所述的方法，还包括响应于所述第一用户选择删除所述一个或多个对象的先前的标记关系。

34. 如权利要求25所述的方法，其中所述用户选择是一个或多个单击选择，并且其中每一个单击选择对应于一个对象。