CN103428325A - 功能协作方法和支持所述方法的便携式终端 - Google Patents

功能协作方法和支持所述方法的便携式终端 Download PDF

Info

Publication number
CN103428325A
CN103428325A CN2013101845886A CN201310184588A CN103428325A CN 103428325 A CN103428325 A CN 103428325A CN 2013101845886 A CN2013101845886 A CN 2013101845886A CN 201310184588 A CN201310184588 A CN 201310184588A CN 103428325 A CN103428325 A CN 103428325A
Authority
CN
China
Prior art keywords
photo
face
phone book
telephone directory
book information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2013101845886A
Other languages
English (en)
Other versions
CN103428325B (zh
Inventor
金泫锡
李柱承
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103428325A publication Critical patent/CN103428325A/zh
Application granted granted Critical
Publication of CN103428325B publication Critical patent/CN103428325B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04B—TRANSMISSION
    • H04B1/00—Details of transmission systems, not covered by a single one of groups H04B3/00 - H04B13/00; Details of transmission systems not characterised by the medium used for transmission
    • H04B1/38—Transceivers, i.e. devices in which transmitter and receiver form a structural unit and in which at least one part is used for functions of transmitting and receiving
    • H04B1/40—Circuits
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/16—Communication-related supplementary services, e.g. call-transfer or call-hold
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/30—Scenes; Scene-specific elements in albums, collections or shared content, e.g. social network photos or video
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172—Classification, e.g. identification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/26—Devices for calling a subscriber
    • H04M1/27—Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
    • H04M1/27467—Methods of retrieving data
    • H04M1/27475—Methods of retrieving data using interactive graphical means or pictorial representations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/26—Devices for calling a subscriber
    • H04M1/27—Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
    • H04M1/27453—Directories allowing storage of additional subscriber data, e.g. metadata
    • H04M1/27457—Management thereof, e.g. manual editing of data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/26—Devices for calling a subscriber
    • H04M1/27—Devices whereby a plurality of signals may be stored simultaneously
    • H04M1/274—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc
    • H04M1/2745—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips
    • H04M1/2753—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips providing data content
    • H04M1/2757—Devices whereby a plurality of signals may be stored simultaneously with provision for storing more than one subscriber number at a time, e.g. using toothed disc using static electronic memories, e.g. chips providing data content by data transmission, e.g. downloading
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/52—Details of telephonic subscriber devices including functional features of a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Mathematical Physics (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Collating Specific Patterns (AREA)

Abstract

提供一种功能协作方法和支持所述方法的便携式终端。链接终端的功能的方法包括：识别包括在照片中的脸部，确定是否存在具有与识别的脸部匹配的脸部的照片的电话簿信息，并产生图片库-电话簿文件。所述匹配的电话簿信息与识别的脸部链接。图片库-电话簿文件的电话簿信息基于存储在存储单元中的电话簿文件，如果包括在图片库-电话簿文件中的电话簿信息的记录日期比存储在存储单元中的电话簿文件的产生日期更早，则控制器确定是否是更新电话簿文件。

Description

功能协作方法和支持所述方法的便携式终端
技术领域
本发明涉及一种便携式终端的功能协作。更具体地讲，本发明涉及一种具有同时进行操作的多功能的终端的操作和这样的功能之间的协作。
背景技术
为了用户（包括各个消费者）的便利性和安全性，以及为了在工作场所使用，已开发和分布了诸如便携式终端的电子装置，并且所述电子装置向用户提供甚至在几年前还不为所知的方便性。这样的电子装置现正被开发为向用户提供更顺畅和更高质量的生活。例如，便携式终端可通过允许内容的简单重放而不论环境和/或时间如何来提高用户时间效率。
另外，传统的便携式终端对于用户所需的各种功能，经常提供与特定功能相关的附加服务（即，支持功能）。例如，当传统的便携式终端包括相机时，这种便携式终端分离地存储和管理由相机拍摄的图片和从外部接收的图片，并提供其他相关服务（例如，搜索图片）。
另外，传统的便携式终端将存储和管理其他终端的电话号码，并提供与其他终端的通话所需的电话服务。同样地，传统的便携式终端提供各种支持功能项，以支持用户所需的特定功能，并基于提供的功能项支持相应的功能。然而，从开发所述功能的开发者的观点提供每个功能，因此用户的可利用性和可操作性可能会不好。例如，在提供电话号码的传统功能的情况下，用户检查基于文本提供的特定电话号码和联系人的姓名，并做出呼叫。此时，在用户没有准确地记住基于文本提供的电话号码和用户的姓名的情况下，对于用户而言，所述数据可能基本上没有意义。为此，当支持用户功能时，需要具有增强的用户可操作性的用户友好支持功能。
另外，传统的便携式终端的用户访问多任务功能，以使用其他功能以及特定终端功能。例如，为了在对图片搜索功能进行操作的同时执行与另一终端的呼叫连接，传统的便携式终端的用户应停止先前提供的功能或应激活用于呼叫连接的屏幕，例如，电话号码输入或电话簿列表屏幕。为了搜索选择这样的功能，存在中断用户的工作流程的问题，并具有不便于转换到用户期望的工作屏幕的问题。
发明内容
至少鉴于以上问题中的一些问题，已做出本发明，本发明的目标在于提供一种功能协作方法的方法和支持所述方法的终端，所述方法通过在允许用户的简单的识别和操作的同时维持工作连续性来允许更方便地对便携式终端功能进行操作。
根据本发明的示例性方面，一种链接终端的功能的方法优选地包括：由配置用于脸部识别的控制器识别包括在照片中的脸部；确定是否存在具有与识别的脸部匹配的脸部的照片的电话簿信息；通过将匹配的电话簿信息与识别的脸部进行链接来产生图片库-电话簿文件。
根据本发明的另一示例性方面，一种链接终端的功能的方法包括：接收包括电话簿信息的图片库-电话簿文件，其中，电话簿信息与照片的脸部信息链接；使用包括在图片库-电话簿文件中的电话簿信息更新存储在存储单元中的电话簿文件。
根据本发明的另一示例性方面，一种用于支持功能链接的终端包括：存储单元，用于存储用于支持图片库功能的至少一张照片和用于支持电话簿功能的至少一组电话簿信息；控制器，用于在识别包括在照片中的脸部并确定是否存在具有包括与识别的脸部匹配的脸部的照片的电话簿信息之后，通过将匹配的电话簿信息与识别的脸部进行链接来产生图片库-电话簿文件。
附图说明
从下面结合附图进行的详细描述，本发明的示例性对象、特征和优点将对于本领域的普通技术人员变得更加清楚，其中：
图1示意性示出根据本发明的示例性实施例的用于支持功能协作的终端的示例性配置；
图2示出本发明的图片库-电话簿协作***的示例性配置；
图3示出根据本发明的照片-图片库类的内部属性的示例；
图4示出用于本发明的协作支持功能的类之中电话簿类的内部属性的示例；
图5示出具有与DB文件属性相应的数据布局的示例性照片-图片库类和电话簿类；
图6示出包括使用脸部的脸部识别的示例性图片库-电话簿协作***；
图7示出本发明的示例性PnP数据库类；
图8示出本发明的示例性照片文件管理器类；
图9示出本发明的示例性列表查看类；
图10示出本发明的示例性缩略图查看类；
图11示出与本发明的图片库-电话簿协作***的每个类相关的示图；
图12示出本发明的图片库-电话簿协作***的示例性流程操作；
图13示出根据本发明的示例性实施例的外部链接***；
图14示出根据本发明的示例性实施例的用于支持功能协作的屏幕接口的示例；
图15示出根据本发明的示例性实施例的根据功能协作显示图片库-电话簿文件的方法。
具体实施方式
下面，将参照附图在此详细描述本发明的示例性实施例。贯穿附图使用的相同的标号指示相同或相似的部件。可省略合并于此的公知功能和结构的详细描述，以避免模糊本领域的普通技术人员对本发明的主体内容的理解。
当描述示例性实施例时，可省略具有大体上相同的功能和结构的组件的描述，以避免冗余。
针对附图，一些组件可被夸大、省略或示意性地示出在附图中，并且附图中的每个组件的大小可与组件的实际大小不同。因此，本发明不限于附图中所绘制的相对大小或间隔。
图1示意性示出根据本发明的示例性实施例的用于支持功能性协作的终端的配置。
现参照图1，本发明的便携式终端100包括：无线通信单元110、输入单元120、音频处理单元130、显示单元140、存储单元150和控制器160。便携式终端的前述的元件由硬件组成，并且在最宽的合理解释下，用于这样的硬件项的词语“单元”的要求保护的发明详述将被解释为符合美国专利法第101条的法定主题。
包括此示例性配置的本发明的便携式终端支持存储在存储单元150中的电话簿信息155将与图片库功能链接。
更具体地讲，便携式终端100可允许将与图片库功能链接的电话簿信息155的编辑、添加和删除，并可允许基于电话簿信息155的呼叫功能在图片库功能中被进行操作。另外，便携式终端100允许通过与其他终端通过SNS连接接口等共享在图片库功能中提供的图像，使用基于图片库功能发送和接收的图像来执行电话簿信息155的更新。另外，便携式终端100允许附加的信息（例如，关于收集图像的位置的信息和附加到图像的标签信息）被应用到电话簿信息。为此，本发明支持除了简单地提供电话号码和ID卡的照片等的功能之外，还支持提供各种信息组的功能。
通信单元110支持便携式终端100的无线通信功能。通信单元110可在终端100被制造为支持通信功能时被添加。因此，如果本发明可被应用的终端100不支持通信功能，则通信单元100可选择地从终端100的配置省略。另外，通信单元100可以以移动通信模块的形式被提供，以支持终端100的通信功能，具体地讲，移动通信功能。包括收发器的通信单元110通过与移动通信***形成通信信道来支持用于执行终端100的移动通信功能的信号的发送和接收。例如，通信单元110可形成移动通信***、语音服务信道、图像服务信道和数据服务信道中的至少一个，并可根据服务信道支持特定信号的发送和接收。
另外，通信单元110可支持连接到用于图像文件的发送和接收或图像文件的共享的云***，以支持本发明的图片库电话簿功能。换句话讲，通信单元110可从存储在存储单元150中的文件之中发送包括电话簿信息的图像文件（在下文中，被称为“图片库电话簿文件”），并可根据所述另一终端的请求，从另一终端接收图片库电话簿文件。接收的图片库电话簿文件可属于图片库功能的类别和电话簿功能的类别中的至少一个类别。为此，本发明的终端可支持通过通信单元110接收的图片库电话簿文件在激活图片库功能的状态下或激活电话簿功能的状态下被搜索。
输入单元120产生对便携式终端100进行操作所需的各种输入信号。这样的输入单元120可根据终端100的兼容性由各种输入硬件装置（例如，键盘、键区和键按钮等）形成。另外，输入单元120可在显示单元140被提供为触摸屏的情况下以在触摸屏上输出的触摸映射的形式被配置。例如，输入单元120可以以各种键映射（例如，3×4键映射、5×4键映射、QWERTY键映射、Dvorak键映射）中的至少一个的形式被配置。具体地讲，输入单元120可产生用于激活图片库功能的输入信号、用于激活电话簿功能的输入信号、用于激活图片库-电话簿协作功能的输入信号等。输入单元120可根据用户的请求产生用于在图片库-电话簿协作功能被激活的状态下搜索图像文件的输入信号、用于选择通过脸部识别提取的图像文件的提取的区域的输入信号、用于产生、删除与选择区域相关的电话簿信息的输入信号、用于基于选择区域请求呼叫功能的操作的输入信号、用于共享图片库-电话簿文件的输入信号等。产生的输入信号被发送到控制器160，并且所述输入信号可被使用为用于执行根据每个输入信号的功能的命令。
包括音频编解码器的音频处理单元130可输出在对终端100进行操作的处理中设置的音频数据、根据存储在存储单元150中的音频文件的重放的音频数据、从外部接收的音频数据等的各种组。另外，音频处理单元130可支持收集音频数据的功能。为此，音频处理单元130可还包括扬声器（SPK）和麦克风（MIC）。具体地讲，在当重放图片库电话簿文件时特定音频文件被设置为重放的情况下，音频处理单元130可支持根据图片库-电话簿文件的重放的音频文件的输出。在以上描述中，图片库-电话簿文件已被描述为静止图像形式的图像文件，但是本发明还可被应用于运动图像文件以及静止图像文件。稍后将与关于本发明的屏幕接口的说明一起详细描述本发明的此类型的应用。另外，当激活图片库-电话簿协作功能时，音频处理单元130可输出根据搜索和选择至少一个图像文件的声音效果、根据在图像文件中完成脸部识别的声音效果、根据选择提取的区域并执行基于提取的区域执行的呼叫功能的声音效果。另外，可由音频处理单元130的用户设置或设计者的设计改变而省略以上声音效果的输出。
显示单元140提供终端100的操作所需的各种屏幕接口。例如，包括硬件（例如，可包括LCD、LED、OLED或其他类型的薄膜技术（TFT）的显示面板）的显示单元140支持并显示为终端100的操作所需的待机屏幕、菜单屏幕等的输出。本发明的这样的显示单元140可包括触摸面板和显示面板。另外，显示单元140可包括提供根据本发明的示例性实施例的与图片库-电话簿协作功能相关的各种屏幕接口。基本上，显示单元140可提供图片库功能激活屏幕和电话簿功能激活屏幕。另外，显示单元140可提供用于通过图片库-电话簿协作功能搜索、编辑和删除电话簿信息的屏幕接口。另外，显示单元140可基于图片库-电话簿协作功能输出与通过SNS连接接口至另一终端或外部服务器的连接相应的屏幕。将参照将在下文中描述的屏幕接口来更加详细描述根据通过显示单元140提供的图片库-电话簿协作功能的屏幕接口。
包括非暂时性机器可读介质的存储单元150可存储操作终端的100所需的各种基本操作***以及与各种用户功能相应的数据、应用程序、算法等。具体地讲，存储单元150可存储包括用于支持本发明的图片库-电话簿协作功能的机器可执行代码的协作功能支持程序151、用于支持图片库功能的图像文件153、用于支持电话簿功能的电话簿信息155和根据图片库-电话簿协作的图片库-电话簿文件157。这里，当用户输入用于激活图片库-电话簿协作的输入信号时，随着图片库-电话簿协作功能被激活，图片库-电话簿文件157可通过图像文件153和电话簿信息155的实时协作被临时产生，或图片库-电话簿文件157可通过图像文件153和电话簿信息155的协作被产生为单独的文件并被存储在存储单元150中。
另外，存储单元150可包括用于照片的脸部识别的脸部识别算法159。
继续参照图1，协作功能支持程序151支持各种功能以支持本发明的图片库-电话簿协作功能。例如，协作功能支持程序151可支持照片-图片库功能、分类功能、查看功能、脸部识别功能、电话簿功能和外部社交网络链接功能等。
照片-图片库功能可包括使用包括在终端100的照片或外部照片文件管理图形文件的功能。终端100支持文件管理功能作为照片-图片库功能。文件管理支持功能可包括用于管理具有各种属性的图形文件的功能。文件管理功能可支持添加、删除和编辑在文件管理***中提供的文件的功能的操作。另外，文件管理功能在存储在存储单元150中的文件之中索引图形文件并管理其信息以进行文件管理。作为照片-图片库功能，协作功能支持程序151可支持对检索的照片进行分类的功能。当选择图片库-电话簿协作功能时，为了迅速响应用户的文件搜索请求等，分类功能可提前对存储的图像文件或图片库-电话簿文件157进行分类。这样的分类功能使用有限的资源（例如，便携式终端）选择性地提供适当的用户环境。
查看功能是指被用户查看的功能，并可通常包括将存储在存储单元150中的图像文件、图片库-电话簿文件或电话簿信息显示为棋盘形状的缩略图图像的缩略图查看功能和将所述文件显示为列表形式的列表查看功能。另外，查看功能可对至少一个文件支持水平查看功能或垂直查看功能。另外，查看功能根据终端是否被实施，支持触摸面板中的点击功能（通过触摸屏幕推进功能）、分离的硬件键的箭头键操作功能或用于用户交互支持的特定点的软键操作功能，并转换或控制基于其上的屏幕。
在本发明的图片库-电话簿协作功能中支持的功能之中，脸部识别功能识别包括在图像文件中的特定图片或特定人的脸部。当执行编辑功能时，这样的脸部识别功能可通过配置为这样的操作的控制器被首次执行，以查看或编辑关于包括在照片或图像中的特定人的信息。脸部识别功能可识别在图片中所示的人的脸部等，并可将识别的结果提供给用户。在此处理中，脸部识别功能可在识别的脸部周围画框，从而提供给用户作为特定脸部识别的结果。为此，用户可通过显示在照片或图像上的框来检查哪个脸部已被识别和所述脸部是否被定位。此外，尽管以上描述了人脸识别功能使用框来提供识别脸部的结果，但是技术人员应理解并认识到目前要求保护的发明不限于此。换句话讲，脸部识别功能突出识别的脸部的边缘区域，或将识别的脸部指示为箭头，从而可通过各种方案指示识别的脸部的位置。
另外，用户可根据识别结果例如通过在显示脸部的触摸面板上点击来选择特定指示的人的脸部，并且终端100可结合所述人提供在终端100中提前登记的信息。这里，在不存在与识别的脸部的人链接的电话簿信息155或除了电话号码不存在其他信息的情况下，终端100可支持用于输入用户信息的编辑功能。这里，编辑功能可包括用于提供屏幕接口的功能，所述屏幕接口用于新输入电话簿信息。
电话簿功能按项或组提供用户信息，例如，电话号码、地址、电子邮件和备忘录、生日、姓名、昵称、脸部照片等。这里，备忘录可以是关于具有电话簿信息的人的由用户记录的特定文本信息。另外，本发明的电话簿功能可通过示出通过照片库连接的照片之中在人脸识别之后通过框修剪的照片，向用户通知电话簿功能何时与图片库功能链接。另外，电话簿功能新添加用户信息，或者删除或编辑产生的信息。
外部社交网络协作功能可在特定（具体的）终端100中局部地使用图片库-电话簿协作功能，并可通过网络连接与另一终端或服务器共享图片库-电话簿协作功能。为此，外部社交网络协作功能被配置为支持云服务的服务器连接，所述云服务是用户为用户自己的终端而设置用于信息共享的云服务和为了与其他终端用户信息共享而登记的云服务。存在装置可访问云的多种方式，例如，Wi-Fi到服务器或WLAN连接以及WiBro、WiMax，仅列举一些可能性。另外，外部社交网络协作功能可共享另一终端和存储单元150的特定区域，例如，图片库-电话簿文件517的存储区域。
另外，协作功能支持程序151包括机器可执行代码，当将所述机器可执行代码加载到控制器时，支持将通过上述系列功能而产生的或为功能支持而提供的信息作为数据库并在存储单元150中存储所述数据库。这里，在此示例中，做出数据库是指指定唯一键，从而用户可搜索特定信息。
根据协作功能支持程序151的图片库-电话簿协作***60可提供如图2中所示的六种使用情况。换句话讲，图片库-电话簿协作***60可包括照片-图片库使用情况65、人脸识别使用情况67、电话呼叫使用情况61、文件管理器使用情况63、电话簿使用情况69和存储使用情况68。
照片-图片库使用情况65是管理诸如在当前终端100中使用的照片的图像的应用的使用情况。具体地讲，在图片库-电话簿协作***60中，照片-图片库使用情况65通过使用脸部识别使用情况功能来支持识别脸部的功能，其中，在所述脸部识别使用情况功能中搜索存储的照片，将通过脸部识别收集的信息和包括在电话簿信息155中的信息进行比较，并根据比较结果将包括在电话簿信息155中的电话号码连接到照片。另外，照片-图片库使用情况65可基于通过脸部识别连接的内容支持直接电话呼叫和SNS连接功能。
继续参照图2，脸部识别使用情况67支持在特定图像或照片中识别的脸部的位置信息。脸部识别使用情况67可将框显示为以上提到的或其它形状类型的标识符，从而用户可识别位于特定照片中的至少一个脸部的位置信息等。另外，脸部识别使用情况67可基于水平轴和垂直轴将特定图片上的特定脸部的位置信息提供为特定坐标信息。
电话呼叫使用情况61支持终端100的语音或视频电话呼叫功能的操作。具体地讲，当呼叫终止时，由于电话呼叫使用情况61被直接连接到照片-图片库使用情况65，所以电话呼叫使用情况61可支持返回点以进入照片-图片库激活屏幕而不进入待机状态。
文件管理器使用情况63提供列表向上（list-up）功能，从而按可被使用的信息组、属性和数据进行索引，以方便地管理照片的信息。照片-图片库使用情况65延伸文件管理器使用情况63的功能，以按文件的形式管理每个照片。例如，照片-图片库使用情况65可基于文件管理器使用情况63在屏幕上示出一个照片并顺序地改变屏幕，或在屏幕上示出显示若干照片的列表视图。此时，文件管理器使用情况63可根据从输入单元120或显示单元140输入的特定输入信号（例如，轻弹输入信号）通过图片照片库使用情况65提供查看功能。
电话簿使用情况69表示用户存储与特定终端有关的由用户登记的联系人信息的使用情况。电话簿使用情况69可使用唯一索引信息。例如，电话簿使用情况69可将与终端100的用户相关的人的姓名用作索引键，而不分配单独的ID。这里，在电话簿使用情况69中使用的电话簿信息155可由包括若干字段（例如，姓名、至少一个电话号码、电子邮件地址、家庭或公司地址信息、SNS信息和其他）中的至少一个字段的数据类型形成。另外，电话簿信息155可包含用于本发明的图片库-电话簿文件的操作的更多的信息。换句话讲，本发明的电话簿信息155可***作为以上字段信息组中的仅一个字段信息，并可具有添加了诸如在以上字段信息中未定义的备忘录、标签信息等的字段的数据类型。
存储使用情况68支持存储数据的功能。具体地讲，在本发明的图片库-电话簿协作***60中，存储使用情况68存储在照片-图片库中指定的数据和电话簿中的数据的自然连接的结果，例如，图片库-电话簿文件157。
另外，图片库-电话簿协作***60具有作为外部角色（actor）的SNS接口角色64，此外部角色64可被用于例如在未来通过SNS接口支持与外部服务器的协作功能。在上述***使用情况示图中，作用物可被划分为用户角色62和SNS角色64。
示例中的用户角色62是指终端100的用户。另外，在本发明中，用户角色62可以是另一***的接口。换句话讲，用户角色62可以是可连接到图片库-电话簿协作***60中的图片库使用情况65和电话簿使用情况69的另一终端。
SNS接口角色64可包括例如接近通过电话簿和照片库完成的数据库的外部***和通过当前社交网络服务公司当前提供的服务接口（例如，脸书、推特等）。
在以上描述中，将图片库-电话簿协作***60显示为四边形可表示内部***和外部***之间的边界。更具体地讲，为了在用户角色62的一部分上使用本发明的***功能，仅通过电话簿使用情况69和照片库使用情况65的接口是可行的，并且在社交网络中，仅存储使用情况68可被访问。
包括硬件（例如，处理器、微处理器、比较器等）的控制器160支持用于支持根据本发明的示例性实施例的图片库-电话簿协作功能的信号流或数据处理外部连接控制和其他命令处理。为此，控制器160可被配置为确定并控制各种候选类（例如，在下面的表1中所示）的操作。
表一
Figure BDA00003206688500101
如以上图1中所示，控制器160可包括照片-图片库类、照片文件类、照片文件管理器类、照片文件查看器类、轻拂类、列表查看类、电话号码类、脸部检测类、电话簿&照片库（p&p）同步类、p&p数据库类、存储介质类、外部社交网络类等的确定和控制操作。这里，轻拂类指示一个动作，因此轻拂类可通过仅定义动作而不用在整个图片库电话簿协作***60中采用而被包括为照片库类的方法。将参照图3至图11详细描述上述类候选中的每个类候选。
图3示出用于本发明的协作支持功能的类之中的照片-图片库类。
现参照图3，本发明的照片-图片库类的内部属性可具有nPhotoCnt和nViewType。这里，nPhotoCnt可包括存储照片的数量和如何被显示在实际屏幕中的点的属性。此点可成为由用户选择的值。照片-图片库类提供作为操作功能的用于编辑的Edit()操作、用于添加的Add()操作和用于删除的Delete()操作。另外，照片-图片库类可包括用于实际显示给实际用户的View()操作。另外，照片-图片库类可包括将从脸部检测类接收的数据位置存储为坐标值的CoordinateCal()操作。CoordinateCal()操作可支持用于通知关于坐标值的点的使用的单独的操作。
照片-图片库类包括用于与电话号码类协作的SyncPhonebook()操作。SyncPhonebook()操作基于电话号码和单独的键执行同步操作，在本发明中，“姓名（Name）”可被设置为键。另外，照片-图片库类可以是与p&p数据库类相关的类。换句话讲，支持相关数据作为数据库，并在对照片-图片库类和电话簿类进行同步和连接之后，执行数据库的单独的管理。
图4示出可在本发明的协作支持功能中使用的类之中的电话簿类。
现参照图4，本发明的电话簿类可包括姓名（Name）、电话号码（PhoneNumber）、地址（Address）、电子邮件地址（EmailAddr）和备忘录（Memo）作为属性。另外，根据用户的请求或***设计或需要，其他属性可被添加到电话簿类的属性或一些属性可被删除。电话簿类提供添加、删除、编辑和存储记录的基本操作。另外，电话簿类包括用于本发明的图片库-电话簿协作***60的SynGallery()操作。SynGallery()操作作为与照片-图片库类具有较强的关系的电话簿类的基本功能，使用姓名（Name）字段根据照片-图片库类中提供的坐标对记录进行同步。从照片-图片库类移交的照片可被存储在记录中，用户可检查在电话簿中选择的记录。
图5示出本发明的照片-图片库类和电话簿类的数据布局的一个示例。为了照片-图片库类和电话簿类在本发明的图片库-电话簿协作***60中被同步，照片-图片库类和电话簿类可具有与图5中所示的DB文件属性相应的结构。换句话讲，照片-图片库类和电话簿类可具有元文件以及图片文件。更具体地讲，具有图片文件的照片-图片库类应具有如图5中所示的诸如文件名（FileName）、PositionXY（位置XY）、个人姓名（PersonnalName）的元文件，电话簿类应将照片-图片库类的元文件同步为唯一密钥。这里，唯一密钥可以是个人姓名（PersonnalName）。在数据库中通常具有用于防止冗余的字段作为唯一密钥，但在终端的情况下，可使用个人姓名作为唯一密钥而不产生用于数据库的单独的唯一密钥。如果个人姓名（PersonnalName）被加入为密钥，则图5中所示的子段被添加到电话簿类的数据库，并且可完成与照片-图片库类的同步。这里，完成同步可表示完成用于在照片-图片库类中调用电话簿类的数据的准备。
图6示出根据本发明的示例性实施例的脸部检测类。
现参照图6，脸部检测类可具有坐标值（CoordinateVal）和坐标消减（CoordinatePare）属性。
脸部检测类将在检测到的脸部照片内的坐标值存储到CoordinateVal的属性中。另外，在使用CoordinateVal属性在相同的照片中的若干检测到的脸部的情况下，脸部检测类可区分所述结果。在脸部检测类中，nPhoto()执行接受外部照片的功能，CovertPhoto()操作数执行覆盖除了脸部之外的部分以检测脸部的功能。FaceFin()操作数检查CovertPhoto()操作数中覆盖的部分的位置，并返回识别为脸部的部分的坐标。DisplaySuqire()操作数执行通过绘制识别为脸部的部分的单独的轮廓来将位置通知给用户的功能，从而用户可容易地做出选择。
图7和图8示出根据本发明的示例性实施例的PnP数据库类和照片文件管理器类。
照片文件管理器类识别输入的文件的属性，并将所述文件存储为用于文件管理的添加、删除和编辑的树结构。PnP数据库类使电话簿中的数据作为数据库，以用于管理。为此，PnP数据库类与电话簿类相关，照片文件管理器类与输入的图片文件相关，并且为了确定输入的文件的类型，示出关于照片文件类的从属关系。
图9示出根据本发明的示例性实施例的列表查看类，图10示出缩略图查看类的示例性实施例。
如图所示，列表查看类和缩略图查看类支持根据用户的选择以列表的形式或以缩略图的形式显示照片文件。列表查看类的方法与缩略图查看类的方法相似，但是列表查看类型的内容和操作与缩略图类型的内容和操作不同，因此列表查看类和缩略图查看类被分类为单独的类。
图11示出与本发明的图片库-电话簿协作***的每个类相关的示图。
现参照图11，不管电话簿类与照片-图片库类之间的关系如何，使用电话簿类的SyncGallery()和照片-图片库类的SyncPhonebook()，以多对多的关系执行相互同步。电话簿类的和照片-图片库类的同步数据被存储在PnP数据库类中。
图12示出根据本发明的示例性实施例的图片库-电话簿协作***的状态图。
现参照图12，在此示例中的图片库-电话簿协作***的操作具有6种状态。换句话讲，图片库-电话簿协作***的状态可具有包括空闲（Idle）、取照片文件（TakePhotoFile）、脸部检测（FaceDetetion）、同步信息（SyncInfor）、输入信息（InputInfor）和信息查看（InforView）的六种状态。
继续参照图12，空闲状态1210是终端已进入本发明的图片库-电话簿协作***的状态。更具体地讲，当进入电话簿协作***时，终端100可处于空闲状态。空闲状态是用于移动到下一状态的待机状态。另外，当在初始阶段对本发明的图片库-电话簿协作***进行操作时，还可在空闲状态下执行终端100的初始化处理。
取照片文件状态1220在此示例中例如包括用于拿来照片文件的状态或已拿来照片文件的状态。所有数字照片以文件的形式存在，因此在本发明的图片库-电话簿协作***中，已存储的照片文件和新拍摄的照片可被识别为相同的照片文件。
脸部检测状态包括用户提前扫描照片从而用户可在已被读取的照片文件中容易地选择照片上的脸部，并且识别的脸部的位置被通知的状态。脸部检测状态可以是在照片中存在多个脸部的情况下通过特定效果（例如，显示框或突出脸部）来将每个脸部位置通知给用户的状态。
在用户选择照片的情况下，此示例中的同步信息状态和输入信息状态包括电话簿信息被连接到选择的照片或用户信息被添加到选择的照片的状态。具体地讲，此示例中的同步信息状态包括用于通过读取现有的电话簿信息的数据库来连接电话簿信息与照片的状态。
信息查看状态包括将屏幕配置为列表查看状态或缩略图状态之一的状态。在由用户提前指定的值是列表查看状态的设置的情况下，信息查看状态支持将在屏幕上输出的项显示为列表查看状态，在由用户提前指定的值已在缩略图状态下被设置的情况下，信息查看状态支持将屏幕配置为缩略图状态。
基于以上所述的六种状态，根据以上示例的图片库-电话簿协作***在用户首次试图使用终端的情况下，将终端100提供为空闲状态。在此空闲状态下，如上所述，初始化处理也被执行，并且所述状态可立即终止。另外，当用户选择照片时，所述处理可移动到取照片文件状态。
终端100的初始化处理可移动到终端100自动检测并显示人的脸部的脸部检测状态1230，从而用户可容易地选择显示在照片中的特定人。在产生用于在脸部检测状态下连接到现有的电话簿数据的输入信号的情况下，终端100的处理移动到同步信息状态1245a，或者在新产生电话簿数据的情况下，所述处理移动到输入信息状态1245b。当上述状态被完成并且整个照片被显示在显示单元140时，所述照片可根据由用户提前选择的查看方案以列表查看的形式或缩略图查看的形式被显示。其后，终端100的处理根据下一动作返回到空闲状态，以重复上述状态。
图13示意性示出根据本发明的示例性实施例的用于通过SNS接口将图片库-电话簿协作功能和社交网络服务进行连接的***的配置。
现参照图13，此示例中的连接***1300可被配置为包括服务器1303和至少一个客户机1301。这里，客户机1301可以是用于对本发明的图片库-电话簿协作***进行操作的终端。
连接***1300可与非特定的终端形成网络，或可与特定的终端组形成网络。在实际客户机中，如关于使用情况所示，在存储使用情况或DBMS中与服务器1303的连接是可行的。
在使用分配的帐户将包括与电话簿信息同步的信息的特定人的照片上传到服务器的情况下，与所述人相关的另一用户可在上述连接***1300中查看或编辑所述照片。为此，连接***1300提供另一用户可将附加信息提供给上传的照片的编辑功能，通过这样，可促使与其他用户的信息共享。根据这样的服务支持，连接***1300提供支持从而可通过添加与已上传第一张照片的特定人相关的人的信息来获取很多的社交信息而无需特定人的单独的操作或控制努力，并提供支持从而在特定人的终端中根据特定人的控制，附加信息更新可以是可行的。
另外，根据本发明的示例性实施例的图片库-电话簿协作***60可提供读取/写入/删除/添加/编辑的API作为标准API。另外，本发明的图片库-电话簿协作***60还可包括提供在照片中提供的位置信息的API。提供位置信息的位置API可提供位于所述照片中的检测到脸部的特定人的用户信息，并可提供关于包括在所述照片中的特定建筑物或特定对象的信息。另外，在照片的情况下，由于SNS服务器1303或客户机的问题，位置信息可在发送照片或调整照片大小的处理中失真。因此，位置API可识别这样的失真的点并支持修正功能。例如，在特定人连接到SNS服务器作为客户机1301之后，可上传具有高分辨率的照片。其后，当与特定人相关的另一用户的客户机1301试图通过连接到SNS服务器1303来查看具有高分辨率的图片时，如果不支持上述的高分辨率，则可通过在服务器1303调整照片的大小来支持本发明的图片库-电话簿协作***。在此示例性情况下，如果图片库-电话簿协作***不执行调整了大小的照片的位置的修正，则错误的信息可被与另一客户机1301共享。另外，即使连接到SNS服务器1303的终端是相同用户的终端，如果终端的属性彼此不同（即，终端不支持高分辨率的情况下），则可需要位置的修正。为此，实现图片库-电话簿协作***的客户机1301或服务器1303可在使用位置API调整特定照片的大小的处理中，调节包括在图片中的元素的位置。
另外，在执行将照片连接到电话簿的功能的处理中，可根据包括在照片中的人是否被允许来限制协作功能。为此，本发明的终端100可支持限制将电话簿信息与特定照片进行链接的功能的功能。为此，在对于特定照片限制电话簿信息协作功能之后，在所述照片被上传到SNS服务器1303的情况下，即使另一用户共享所述照片，限制任意地链接电话簿信息包括在当前要求权利的本发明的范围之内。
如上所述，根据本发明的示例性实施例的终端的功能协作方法和支持所述功能协作方法的终端通过将电话号码与照片中识别的特定人的脸部进行链接，基于根据图像的直观的用户接口来提供电话簿信息的操作。
图14示出根据本发明的示例性实施例的支持图片库-电话簿协作功能的终端100的屏幕接口的示例。
现参照图14，用户可在对终端100进行操作的处理中调用图片库功能。随后，终端100可在显示单元140上输出根据图片库功能的屏幕（如屏幕1401中所示）。
例如，显示单元140可以以缩略图查看方案显示多个照片。另外，终端100可提供用于执行本发明的图片库-电话簿协作功能的项。
现参照图14的屏幕1401，终端100可在屏幕的一侧输出用于支持图片库-电话簿协作功能的虚拟键按钮14。另外，终端100可通过单独的菜单窗提供用于图片库-电话簿协作功能的支持的菜单。这样，用户可通过待机屏幕上的菜单选择请求执行图片库-电话簿协作功能，以基于终端100执行图片库-电话簿协作功能。
另外，如果发生用于激活图片库-电话簿协作功能的输入信号，则终端100可根据图片库-电话簿协作功能支持图片库-电话簿文件157的显示，如屏幕1403中所示。为此，终端100可识别每个照片的脸部。另外，终端100可基于识别的脸部信息检查电话簿信息155是否包括登记为相同的脸部的信息。例如，终端100可将识别的脸部与电话簿信息155中登记的脸部进行比较，并可检查是否存在具有符合的脸部照片的电话簿信息155。另外，如果存在符合的电话簿信息155，则终端100可示出与每个照片链接的电话簿信息155，如屏幕1403中所示。
例如，照片1410示出两个脸部被识别的情况，识别的脸部与存储在存储单元150中的电话簿信息155中包括的特定脸部照片匹配。这样，终端100可控制将两组匹配的电话簿信息连接到照片1410。在此处理中，如在识别的脸部区域中所示，终端100可通过显示虚线框来向用户通知脸部识别已成功并且存在关于识别的脸部的电话簿信息。例如，终端100可通过在分离的区域（即，照片1410的底部区域）上显示“F1”、“F2”等来指示存在与识别的脸部相应的电话簿信息的事实。这里，“F1”和“F2”可以是包括在电话簿信息中的用户的姓名、昵称、电话号码等。
以相同的方式，终端100可在照片1420中识别脸部并检查与识别的脸部匹配的电话簿信息。另外，如果存在匹配的电话簿信息，则终端100可通过存在匹配的电话簿信息的标记或其他可见的指示来绘制显示/输出/标识。更具体地讲，终端100可在脸部区域周围的区域中显示与所述脸部相应的虚线边框，并可显示与识别的脸部匹配的电话簿信息的至少一部分。例如，终端100可支持输出与信息组之中的姓名信息相应的“F3”，其中，所述信息组被包括在与照片1420内的特定空间中识别的脸部匹配的电话簿信息中。随后，用户可通过选择虚线边框或“F3”，基于匹配的电话信息激活特定用户功能。照片1430显示仅与识别的脸部匹配的电话簿信息被显示在照片的特定区域的状态。
如照片1440中所示，在识别脸部之后，终端100试图将识别的脸部与电话簿信息的脸部照片进行匹配。作为结果，不存在匹配的结果，终端100可支持输出特定指定的指定文本信息或者显示与其他框不同的虚线框。
例如，终端100可对于没有匹配的电话簿信息的脸部，通过在照片1440的一侧输出可选择的文本信息“谁”或通过遮蔽虚线框来指示不存在匹配的电话簿信息。
这里，在用户选择在电话簿信息中没有匹配的信息的脸部的情况下，终端100可输出用于在电话簿信息中输入新数据的屏幕，如屏幕1405中所示。此时，终端100可捕获在标识脸部的处理中识别的脸部照片，并可将捕获的照片使用为电话簿信息的新数据脸部照片，并可直接输入姓名、电话号码、电子邮件地址等。另外，在照片1440是与电话簿信息链接的照片的情况下，终端100可根据用户的新数据产生请求，控制与照片1440链接的电话簿信息的自动提取，并在屏幕1405中自动记录姓名、电话号码、电子邮件地址等。为此，如上所述，照片1440可包括与电话簿信息链接的图片库-电话簿文件，这样的图片库-电话簿文件可以是由另一用户或由特定服务器通过针对每个人与电话簿信息的链接而提供的文件。
另外，在用户产生用于在照片1410中选择特定人的输入信号的情况下，例如，当用户选择显示为“F2”的区域或与“F2”相应的脸部的虚线框时，终端100可基于与选择的脸部链接的电话簿信息执行呼叫功能，如屏幕1407中所示。这里，终端100可自动尝试与相应于脸部“F2”的用户的终端进行语音呼叫连接或者尝试视频呼叫连接。另外，终端100可输出用于选择语音呼叫和视频呼叫之一的弹出窗口，并根据选择的项尝试呼叫连接。
另外，如图1450中所示，作为脸部识别的结果，如果照片不包括任何单独的脸部，则终端100可不显示任何信息，可在与照片邻近的区域中或在照片内输出指示不存在识别的脸部的信息，例如，“无”。
另外，在以上描述中，示出了对于包括在图片库中的所有照片执行了图片库-电话簿协作功能，并相应地显示图片库-电话簿文件157，但是当前要求权利的本发明不限于此。更具体地讲，在执行了图片库-电话簿协作功能的状态下，仅针对由用户指定的特定照片文件或设置为默认的特定照片文件执行图片库-电话簿协作功能，并且与所述照片文件相应的图片库-电话簿文件157可被输出在显示单元140中。
另外，图片库-电话簿协作功能可在用户指示特定照片的特定脸部时被执行。具体地讲，在激活图片库-电话簿协作功能的状态下，终端100可仅执行脸部识别，以仅支持指示在特定照片中存在可识别的脸部的状态。另外，在用户选择识别的特定脸部的情况下，终端100可搜索具有与指定的脸部匹配的脸部照片的电话簿信息，并可将所述信息链接到识别的脸部。这里，终端100可通过在所述照片中附加搜索的电话簿信息来产生图片库-电话簿文件。在产生图片库-电话簿文件的情况下，终端100可支持包括在照片中的电话簿信息与识别的脸部的链接而不用搜索单独的电话簿信息。
另外，以上描述指示在图片库功能中执行进入图片库-电话簿协作功能，但是当前要求权利的本发明不限于此。例如，图片库-电话簿协作功能可在电话簿功能中被进入。为此，终端100可支持根据电话簿功能性能在屏幕上显示用于进入到图片库-电话簿协作功能的虚拟键按钮14。另外，终端100可支持在待机屏幕状态下通过特定热键输入或特定菜单选择进入到图片库-电话簿协作功能。
图15示出根据本发明的示例性实施例的图片库-电话簿文件的操作。
现参照图15，终端100可提供通过将电话簿信息与照片文件进行链接而产生的图片库-电话簿文件。此时，终端100可如所示按类别对图片库-电话簿文件进行分类。此时，按类别的分类可以是根据存储在初始图片库中的照片做出的分类。更具体地讲，图片库-电话簿文件可根据由终端100提供的图片库功能的照片类别划分而自动产生。例如，在如屏幕1501中所示照片按诸如“家庭”、“朋友”和“公司”等的类别被分类的情况下，图片库-电话簿文件可继承并具有相同的类别。另外，用户可产生图片库-电话簿文件的类别，按类别对新产生的图片库-电话簿文件进行分类并存储所述文件。
屏幕1501示出已选择的“家庭”类别的情况，包括在“家庭”类别中的特定照片可在显示单元140的大部分区域被输出为默认。此时，“家庭”图片库-电话簿文件可包括指示可选择包括在照片中的脸部的脸部区域周围的文本信息或虚线边框。每个识别的脸部区域可根据预先识别的脸部结果指示与电话簿信息链接的状态。为此，用户可选择特定虚线边框区域或特定文本信息，并可基于与选择的区域或信息链接的电话簿信息使用呼叫功能。这里，呼叫功能可自动执行文本消息服务、语音呼叫服务和视频呼叫服务中的至少一个，或者用于特定服务选择的屏幕可被输出。参照屏幕1501，用户可产生与沿特定方向的轻拂操作相应的触摸事件，从而搜索与家庭相关的另一照片。另一家庭相关的照片可以是包括家庭成员中的一些成员的脸部的照片，包括在所述照片中的脸部也可与电话簿信息链接。
屏幕1503示出通过将照片中识别的脸部与电话簿信息进行链接做出的图片库-电话簿文件，并示出显示方法与屏幕1501的显示方法不同地被应用的状态。更具体地讲，当显示图片库-电话簿文件时，终端100可以以缩略图查看方案在一个屏幕上显示多个照片。另外，终端100可在照片的特定区域（例如，在照片的底部区域）显示与包括在每个照片中的识别的脸部相应的电话簿信息的至少一部分作为文本信息。为此，用户可选择显示在照片的底部的文本信息组中的一个文本信息，并对呼叫功能进行操作。这里，终端100可根据在照片中所示的每个脸部的排列，确定与电话簿信息相应的文本信息的排列位置。例如，在屏幕1503，可排列三个脸部，文本信息可在照片1510中相应地被划分为例如三个区域。用户可通过分别检查脸部的排列位置和文本信息的排列位置来选择与特定脸部平行排列的文本信息，基于与脸部相应的电话簿信息对呼叫功能进行操作。以相同的方式，照片1530示出两张脸部被排列并且文本信息也相应地被划分为两个区域。另外，尽管示图示出文本信息的排列沿纵向方向均匀分布，但是当前要求保护权利的发明不限于此。换句话讲，终端可在与显示在照片中的脸部的排列位置的纵向方向平行的位置显示与电话簿信息链接的文本信息。
屏幕1505示出当选择“公司”类别时，包括在所述类别中的一些照片。这里，屏幕1505示出代表性照片或选择的照片被放大并且其他照片以缩略图查看方案被示出。关于何时拍摄照片的时间信息的至少一部分或在哪里拍摄照片的位置信息的至少一部分可被显示在以缩略图查看方案显示的照片上。当选择以缩略图查看方案显示的特定照片时，在特定比例的照片区域中显示的照片可被改变为选择的照片。另外，在选择的照片被显示为特定比例的区域中，终端100可针对没有与识别的脸部匹配的电话簿信息的脸部显示特定标记，例如，问号。在用户选择问号或已显示问号的脸部的情况下，可输出图14中所示的屏幕1405。
关于以上内容，已描述按类别以不同的显示方案显示的状态，但本发明不限于此，特定类别的显示方案可根据用户的选择的操作被调节。为此，所有类别可以以相同的显示方案被显示，或可如上所述以不同的显示方案被显示。
如上所述，根据本发明的示例性实施例的用于支持功能协作的终端和支持方法通过将包括在电话簿功能中的电话簿信息与包括在图片库功能中的照片相互链接，基于电话簿基于照片支持呼叫功能的操作。这样，在用户通过图像（例如，脸部）识别信息而没有通过文本信息（例如，姓名和电话号码）识别信息之后，本发明基于识别的信息支持将被使用的特定功能。所以，本发明支持通过图像使状况识别清楚，并可在用户清楚地识别其他人的类型的状况下执行呼叫连接处理。例如，可存在电话簿中登记的姓名相同，但电话号码不同的情况。在此情况下，用户可检查照片中显示的脸部并与具有所述脸部的用户执行呼叫连接，从而更精确的执行用户意图的功能。
可例如在如上所述的被设置为可由多个用户访问的特定服务器（例如，云服务器）中登记上述的图片库-电话簿文件。此时，登记的图片库-电话簿文件可包括照片，其中，所述照片包括脸部和与所述脸部链接的电话簿信息。为此，检查所述文件的另一用户可更恰当地获取包括在特定照片中的电话簿信息。
另外，在电话簿信息从外部接收与电话簿信息链接的图片库-电话簿文件的情况下，终端100可支持基于存储在照片中的电话簿信息更新电话簿信息。具体地讲，如果终端100接收通过将电话簿信息与照片中的特定脸部进行链接做出的图片库-电话簿文件，则终端100可在图片库电话簿文件中自动提取通过脸部识别识别的脸部信息和电话簿信息。另外，终端100还可检查是否存在与脸部信息匹配的现有的电话簿信息。在此处理中，在存在已经存在的匹配的电话簿信息的情况下，终端100的控制器被配置为检查包括在电话簿信息中的信息是否与包括在图片库-电话簿文件中的电话簿信息相一致。另外，在包括在电话簿信息中的信息与包括在图片库-电话簿文件中的电话簿信息不一致的情况下，终端100可使用在图片库-电话簿文件中提取的电话簿信息来控制存储单元150的电话簿信息的更新。此时，终端100可检查电话簿信息产生日期或更新日期以及收集的图片库-电话簿文件的电话簿信息记录日期。另外，在图片库-电话簿文件的电话簿信息是相对新的信息的情况下，终端100可控制存储单元150的电话簿信息的更新。另外，在图片库-电话簿文件的电话簿信息是相对早的信息的情况下，终端100可基于存储在存储单元150中的电话簿信息来控制更新图片库-电话簿文件的电话簿信息。另外，在不存在与脸部信息匹配的电话簿信息的情况下，终端100可控制自动产生新的电话簿信息并在产生的电话簿信息中记录从图片库-电话簿文件提取的电话簿信息。
另外，终端100还可根据提供类型包括各种附加的模块。更具体地讲，在通信终端的情况下，终端100可包括上面未提及的组件，例如，近场通信模块、用于通过终端100的有线通信方法或无线通信方法发送和接收数据的接口、用于通过与互联网进行通信执行互联网功能的互联网通信模块、用于接收和重放数字广播的数字广播模块。所述组件随着数字装置的融合趋势可以以各种方式改变，因此，这里不会列出所有这样的组件，但当前要求保护的发明可在装置中包括与上述组件相同级别的一个或多个组件。另外，当前要求保护的发明的终端100的一些组件可不被包括在以上配置中，或可存在其他组件的替代物。本发明的普通技术人员应理解并认识到要求保护的发明不限于在这里示出和描述的示例，在权利要求的范围内可做出各种替代物。
另外，根据本发明的示例性实施例的终端100可包括用于使用麦克风收集音频信号的所有类型的装置。例如，终端100可包括根据与各种通信***相应的通信协议操作的所有类型的移动通信终端，以及所有信息通信装置、多媒体装置和其他应用装置（例如，便携式多媒体播放器（PMP）、数字广播播放器、个人数字助理（PDA）、音乐播放器（例如，MP3播放器）、便携式游戏机、智能电话、笔记本计算机和手持PC等）。
上述根据本发明的方法可在硬件、固件中被实施或被实施为被存储在（诸如CD ROM、闪存、EPROM、EEPROM、RAM、软盘、拇指驱动器、硬盘、或磁光盘）记录介质中的软件或计算机代码，或被实施为通过网络下载的计算机代码（其中，所述计算机代码最初存储在远程记录介质，随后存储在非暂时性介质上并加载到硬件（诸如，处理器或微处理器））。存储在非暂时性机器可读介质上的机器可执行代码可被存储在本地记录介质上并加载到硬件（诸如，通用计算机或专用处理器），或者存储在可编程硬件或专用硬件（诸如ASIC或FPGA）中。如本领域中所理解：计算机、处理器、微处理器控制器或可编程的硬件包括存储器组件（例如，RAM、ROM、闪存等），其中，所述存储器组件可存储或接收软件或计算机代码，其中，所述软件或计算机代码在被计算机、处理器或硬件访问并执行时将实施描述于此的处理方法。另外，将认识到：当通用计算机访问用于实施于此示出的所述处理的代码时，所述代码的执行将通用计算机转变为用于执行于此示出的所述处理的专用计算机。另外，技术人员理解并认识到在要求保护的发明中，“处理器”、“微处理器”或“单元”构成要求权利的本发明中的硬件。最后，要求保护的发明可包括位置信息服务器的使用，其中，所述位置信息服务器包括一个以上的服务器，例如，代理服务器。在最宽的合理解释下，鉴于美国专利法第101条，要求保护的发明构成法定主体内容，而不构成软件本身。
如上所述，本发明提高了用户的信息存储和可操作性，并通过允许基于图像的电话簿信息操作来支持更方便的电话簿信息操作。
另外，本发明通过对基于图像的电话簿信息进行操作和共享来支持由用户本身所需的容易的信息选择。
另外，本发明在对电话簿信息进行操作中通过基于各种元件的协作来支持用户的方便终端功能操作。
虽然已在上文详细描述了本发明的示例性实施例，但是，应清楚地理解：对本领域的技术人员可明显的是，这里教导的基本发明构思的许多变化和修改将仍然落入在权利要求书中限定的本发明的范围之内。

Claims (15)

1.一种链接便携式终端的功能的方法，所述方法包括：
由控制器识别包括在当前显示的照片中的脸部；
由控制器确定存储器中是否存在包括与由显示器输出的识别的脸部匹配的脸部的先前标识的照片的电话簿信息；
通过将来自存储器的匹配的电话簿信息与照片的识别的脸部进行链接来产生图片库-电话簿文件。
2.如权利要求1所述的方法，还包括：
在照片中显示指示电话簿信息已被链接的显示信息。
3.如权利要求2所述的方法，其中，在显示器上显示信息的步骤包括下面的至少一个：
显示在其中包含识别的脸部的可选择的几何形状；
在识别的脸部的边缘周围显示可选择的几何形状的边框；
在与当前显示的照片相邻的位置上，选择性地平行于识别的脸部来显示文本信息；
在识别的脸部周围显示文本信息。
4.如权利要求3所述的方法，其中，在其中包含识别的脸部的几何形状或围绕着识别的脸部边缘的几何形状的边框至少部分是由虚线构成的。
5.如权利要求1所述的方法，还包括：
由显示器以缩略图方案显示多个照片，其中，通过控制器产生图片库-电话簿文件的步骤包括下列步骤之一：
由控制器识别以缩略图方案显示的多个照片的每个缩略图照片中包括的一个或多个脸部，并将以缩略图方案显示的每个识别的脸部与电话簿信息进行链接，从而产生图片库-电话簿文件；
由控制器识别在以缩略图方案显示的照片之中由输入信号指示的缩略图照片中包括的所有脸部，并将每个识别的脸部与电话簿信息进行链接，以产生图片库-电话簿文件；
由控制器识别在以缩略图方案显示的照片之中由输入信号指示的照片的特定脸部，并将识别的脸部与电话簿信息进行链接，以产生图片库-电话簿文件。
6.如权利要求1所述的方法，还包括下列步骤之一：
当控制器已确定不存在匹配的电话簿信息时，在当前显示的照片的脸部区域周围的显示区域或在与当前显示的照片相邻的区域中显示不存在将被链接的电话簿信息的指示；
接收显示器上所示的没有将被链接的电话簿信息的脸部的选择，并由控制器产生包括选择的脸部的新电话簿信息；
将图片库-电话簿文件上传到外部服务器。
7.一种用于支持功能链接的便携式终端，所述终端包括：
存储单元，具有用于支持存储在其中的图片库功能的至少一张照片，并存储用于支持电话簿功能的至少一组电话簿信息；
控制器，被配置为在识别包括在照片中的脸部并确定是否存在具有包括与识别的脸部匹配的脸部的照片的电话簿信息之后，产生图片库-电话簿文件，用于将匹配的电话簿信息与识别的脸部进行链接。
8.如权利要求7所述的便携式终端，还包括：
显示器，输出显示信息，所述显示信息指示至少直观地指示电话簿信息已被链接到照片。
9.如权利要求8所述的便携式终端，其中，显示器输出下列中的至少一个：
包含识别的脸部的可选择的几何形状；
围绕着识别的脸部边缘的可选择的几何边框；
在与照片相邻的位置上选择性地平行于识别的脸部显示的文本信息；
围绕着识别的脸部边缘的文本信息。
10.如权利要求7所述的便携式终端，其中，显示器以缩略图方案显示多个照片，
其中，控制器控制执行下列操作中的一个或多个操作：
对于以缩略图方案显示的多个照片，识别每个照片中包括的脸部，并将以缩略图方案的每个识别的脸部与电话簿信息进行链接，以产生图片库-电话簿文件；
识别在以缩略图方案显示的照片之中由输入信号指示的照片中包括的所有脸部，并将每个识别的脸部与电话簿信息进行链接，以产生图片库-电话簿文件；
识别在以缩略图方案显示的照片之中由输入信号指示的照片的特定脸部，并将识别的脸部与电话簿信息进行链接，以产生图片库-电话簿文件。
11.如权利要求7所述的便携式终端，还包括：
显示器，当不存在匹配的电话簿信息时，输出不存在将被链接的电话簿信息的可见指示，其中，可见指示位于照片的脸部区域周围的区域或与所述照片相邻的区域。
12.如权利要求11所述的便携式终端，其中，当选择没有将被链接的电话簿信息的脸部时，控制器控制包括选择的脸部的新电话簿信息的产生。
13.如权利要求7所述的便携式终端，还包括：
通信单元，用于将图片库-电话簿文件上传到特定的外部服务器。
14.如权利要求13所述的便携式终端，其中，通信单元接收包括与照片的脸部信息链接的电话簿信息的图片库-电话簿文件，
其中，控制器使用包括在图片库-电话簿文件中的电话簿信息，更新存储在存储单元中的电话簿文件。
15.如权利要求13所述的便携式终端，其中，当包括在图片库-电话簿文件中的电话簿信息的记录日期比存储在存储单元中的电话簿文件的产生日期更新时，控制器控制基于图片库-电话簿文件的电话簿信息更新存储在存储单元中的电话簿文件，当包括在图片库-电话簿文件中的电话簿信息的记录日期比存储在存储单元中的电话簿文件的产生日期更早时，控制器控制基于存储在存储单元中的电话簿文件更新图片库-电话簿文件的电话簿信息。
CN201310184588.6A 2012-05-17 2013-05-17 功能协作方法和支持所述方法的便携式终端 Expired - Fee Related CN103428325B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120052624A KR101921201B1 (ko) 2012-05-17 2012-05-17 단말기의 기능 연동 방법 및 이를 지원하는 단말기
KR10-2012-0052624 2012-05-17

Publications (2)

Publication Number Publication Date
CN103428325A true CN103428325A (zh) 2013-12-04
CN103428325B CN103428325B (zh) 2018-04-13

Family

ID=48430480

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310184588.6A Expired - Fee Related CN103428325B (zh) 2012-05-17 2013-05-17 功能协作方法和支持所述方法的便携式终端

Country Status (5)

Country Link
US (1) US9357364B2 (zh)
EP (1) EP2665242A3 (zh)
JP (1) JP2013242871A (zh)
KR (1) KR101921201B1 (zh)
CN (1) CN103428325B (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105120084A (zh) * 2015-07-29 2015-12-02 小米科技有限责任公司 基于图像的通信方法及装置
CN109343915A (zh) * 2018-08-01 2019-02-15 平安科技（深圳）有限公司 图片列表展现方法、装置、终端设备及存储介质
CN109766460A (zh) * 2018-12-05 2019-05-17 北京奇安信科技有限公司 一种图片分析的方法及装置

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160024002A (ko) 2014-08-21 2016-03-04 삼성전자주식회사 비쥬얼 사운드 이미지를 제공하는 방법 및 이를 구현하는 전자 장치
KR102230267B1 (ko) * 2014-09-04 2021-03-19 삼성전자주식회사 영상 표시 장치 및 방법
JP6142897B2 (ja) * 2015-05-15 2017-06-07 カシオ計算機株式会社 画像表示装置、表示制御方法及びプログラム
CN105095873B (zh) * 2015-07-31 2018-12-18 小米科技有限责任公司 照片共享方法、装置
US20210081651A1 (en) * 2019-09-16 2021-03-18 David Gorodyansky System and method for picture sharing via artificial intelligence

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080146274A1 (en) * 2006-12-18 2008-06-19 Samsung Electronics Co., Ltd. Method and apparatus for storing image file in mobile terminal
CN101605178A (zh) * 2008-06-10 2009-12-16 三星电子株式会社 使用便携式终端中的图像信息的方法
US20110053570A1 (en) * 2009-08-25 2011-03-03 Song Jiyoung Mobile terminal and method for managing phone book data thereof
US20110249144A1 (en) * 2010-04-09 2011-10-13 Apple Inc. Tagging Images in a Mobile Communications Device Using a Contacts List

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100493090C (zh) * 2006-01-25 2009-05-27 ***通信集团公司 移动终端与服务器之间的数据同步方法
US8774767B2 (en) * 2007-07-19 2014-07-08 Samsung Electronics Co., Ltd. Method and apparatus for providing phonebook using image in a portable terminal
KR101853057B1 (ko) * 2011-04-29 2018-04-27 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080146274A1 (en) * 2006-12-18 2008-06-19 Samsung Electronics Co., Ltd. Method and apparatus for storing image file in mobile terminal
CN101605178A (zh) * 2008-06-10 2009-12-16 三星电子株式会社 使用便携式终端中的图像信息的方法
US20110053570A1 (en) * 2009-08-25 2011-03-03 Song Jiyoung Mobile terminal and method for managing phone book data thereof
US20110249144A1 (en) * 2010-04-09 2011-10-13 Apple Inc. Tagging Images in a Mobile Communications Device Using a Contacts List

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105120084A (zh) * 2015-07-29 2015-12-02 小米科技有限责任公司 基于图像的通信方法及装置
CN109343915A (zh) * 2018-08-01 2019-02-15 平安科技（深圳）有限公司 图片列表展现方法、装置、终端设备及存储介质
CN109766460A (zh) * 2018-12-05 2019-05-17 北京奇安信科技有限公司 一种图片分析的方法及装置

Also Published As

Publication number Publication date
EP2665242A2 (en) 2013-11-20
JP2013242871A (ja) 2013-12-05
KR20130128708A (ko) 2013-11-27
KR101921201B1 (ko) 2018-11-22
US9357364B2 (en) 2016-05-31
EP2665242A3 (en) 2016-11-09
CN103428325B (zh) 2018-04-13
US20130310011A1 (en) 2013-11-21

Similar Documents

Publication Publication Date Title
CN103428325A (zh) 功能协作方法和支持所述方法的便携式终端
US10739958B2 (en) Method and device for executing application using icon associated with application metadata
CN103218387B (zh) 用于在便携式终端中综合管理内容的方法和设备
US20180275840A1 (en) Method for executing program and electronic device thereof
US9195882B2 (en) Mobile terminal and group generating method therein
KR102058465B1 (ko) 전자기기 원격제어 시스템 및 이의 운용방법
US20140365395A1 (en) Electronic business card application software and its system
CN104104768A (zh) 通过使用呼叫方电话号码来提供附加信息的装置和方法
CN103197874A (zh) 电子装置及在电子装置属于不同状态同步显示内容的方法
CN102763079A (zh) 用自定义控件取代键盘的应用程序编程接口(api)
CN103631768A (zh) 协作数据编辑和处理***
CN102754065A (zh) 接收并作用于用户输入的信息的设备和方法
CN103577522B (zh) 用于管理数据的方法及其电子装置
US20130042177A1 (en) Systems and methods for incorporating a control connected media frame
CN102693259A (zh) 提供备忘录功能的方法和支持所述方法的便携式终端
KR20150139184A (ko) 이동 단말기 및 그 제어 방법
CN103167258A (zh) 用于选择图像捕获装置上捕获的图像的方法、***和设备
US9363649B2 (en) System and method for transmitting and receiving an event message
CN110462615A (zh) 增强的粘贴板使用的技术
EP2704030A1 (en) Mobile terminal and control method thereof
KR20110028811A (ko) 이동 단말기 및 이동 단말기에서의 정보 제공 방법
CN105204718B (zh) 一种信息处理方法及电子设备
US11303464B2 (en) Associating content items with images captured of meeting content
WO2020034094A1 (zh) 图像形成方法及装置、以及移动终端
KR20130132189A (ko) 인물 사진 운용 방법 및 이를 지원하는 단말기

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20180413

Termination date: 20200517

CF01 Termination of patent right due to non-payment of annual fee