WO2013189317A1 - 基于人脸信息的多媒体交互方法及装置及终端 - Google Patents

基于人脸信息的多媒体交互方法及装置及终端 Download PDF

Info

Publication number
WO2013189317A1
WO2013189317A1 PCT/CN2013/080766 CN2013080766W WO2013189317A1 WO 2013189317 A1 WO2013189317 A1 WO 2013189317A1 CN 2013080766 W CN2013080766 W CN 2013080766W WO 2013189317 A1 WO2013189317 A1 WO 2013189317A1
Authority
WO
WIPO (PCT)
Prior art keywords
biometric information
contact
information
terminal
matching
Prior art date
Application number
PCT/CN2013/080766
Other languages
English (en)
French (fr)
Inventor
金骏
孙奥
Original Assignee
中兴通讯股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 中兴通讯股份有限公司 filed Critical 中兴通讯股份有限公司
Publication of WO2013189317A1 publication Critical patent/WO2013189317A1/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints

Definitions

  • the present invention relates to the field of communications technologies, and in particular, to a multimedia interaction method and apparatus based on face information and a terminal. Background technique
  • Human-Computer Interaction Techniques are technologies that enable people to talk to computers in an efficient manner through computer input and output devices.
  • Human-computer interaction technology emerged with the advent of computers. From the initial manual operation stage to the human-computer interaction technology represented by virtual reality technology, human-computer interaction technology has experienced many stages. The history of human-computer interaction has shown that it is gradually moving from a computer-centric complex interaction to a simple, natural interaction with people. The current multimedia-based, multi-channel human-computer interaction technology has achieved a lot of research results, such as text recognition, gesture recognition, speech recognition, speech synthesis and many other research results and products.
  • the disadvantages of the above methods include: The interaction process is unfriendly, and the manual operation in the initial stage of human-computer interaction development is basically the same, and the efficiency is low. When the time is long, the information of the characters on the multimedia data cannot be recalled, and further interaction will be failure. Summary of the invention
  • the embodiments of the present invention are directed to a multimedia interaction method and device based on face information, and a terminal, which are used to solve the problem of unfriendly human interaction in the prior art and low efficiency in the interaction process.
  • the problem of interaction failure is a multimedia interaction method and device based on face information, and a terminal, which are used to solve the problem of unfriendly human interaction in the prior art and low efficiency in the interaction process. The problem of interaction failure.
  • a multimedia interaction method based on biometric information comprising:
  • the biometric information is extracted in the current multimedia material, and the extracted biometric information is matched with the previously stored biometric information. If the matching is determined to be successful, the contact information of the contact corresponding to the biometric information is called to interact.
  • the biometric information is further matched to the network social media related to the end user or the terminal is directly requested to perform storage processing.
  • the network social media related to the end user is accessed, and the extracted biometric information is further matched with the biometric information of the contact stored in the social media, and if it is determined that the further matching is successful, the call is made.
  • the contact information of the contact corresponding to the biometric information is exchanged; if the further matching fails, the terminal is requested to perform an edit storage process.
  • the step of the requesting terminal performing the edit storage process includes:
  • the contact information is modified as needed.
  • the current multimedia material is multimedia material existing in the terminal, or is a multimedia material captured by the terminal in real time.
  • the biometric information is face information.
  • a multimedia interaction device based on biometric information comprising:
  • the associated storage module is configured to associate and store the biometric information of the contact with the contact information of the contact in the terminal;
  • Matching the interaction module extracting the biometric information in the current multimedia material, and matching the extracted biometric information with the previously stored biometric information, and if it is determined that the matching is successful, calling the contact corresponding to the biometric information Contact information to interact.
  • the matching interaction module is further configured to: if the matching fails, further matching the biometric information to the network social media related to the end user or requesting the associated storage module to perform editing storage processing.
  • a terminal comprising at least the biometric information based multimedia interaction device of claim 8 or 9.
  • the embodiment of the invention further excavates the information in the image, and the method is simple, effective, friendly, and efficient compared with the previous interaction mode, thereby greatly improving the friendliness of the system.
  • FIG. 1 is a schematic flow chart of a first method embodiment of the present invention
  • FIG. 2 is a schematic flow chart of a second method embodiment of the present invention.
  • FIG. 3 is a schematic structural diagram of an apparatus according to an embodiment of the present invention.
  • FIG. 4 is a schematic structural diagram of a terminal according to an embodiment of the present invention. detailed description
  • FIG. 1 is a schematic flowchart of a first method embodiment of the present invention, which may specifically include:
  • Step 101 Associate the biometric information of the contact with the contact information of the contact in the terminal, and store the data after the association, where the storage location may be the terminal local or the server;
  • Step 102 Extract biometric information in the current multimedia material, and match the extracted biometric information with the previously stored biometric information, and if it is determined that the matching is successful, call the contact information of the contact corresponding to the biometric information. Interact.
  • the first method embodiment of the present invention automatically detects the biometric information in the multimedia data, and extracts the identified biometric information to match the previously stored biometric information, thereby calling up the contact information of the corresponding contact. Automatically interact with multimedia materials.
  • FIG. 2 is a schematic flowchart of a second method embodiment of the present invention, which may specifically include the following steps:
  • Step 200 Collect biometric information of the contact; the collection manner may be multiple, for example, may be collected by the terminal in real time, or may be downloaded to the terminal through a computer or a network; Step 201: Associate the biometric information of the contact with the contact information of the contact in the terminal, and the storage location may be the terminal local or the server; specifically, the user collects through the collection device or the Internet or the computer.
  • the biometric information of the contact obtained by importing and the like is associated with the contact information of the contact, and the contact information may be edited and modified according to the actual situation, for example, adding new contact information or modifying the existing contact information, etc.
  • the contact information includes: one or more of the contact name, the title, the unit, the phone number, the email address, the QQ number, the Kaixin account, and the like; when the user associates, the terminal may be based on the terminal
  • the original contact information function software associates the biometric information of the contact with the corresponding phone number in the address book software; or establishes a total contact information database, and associates the biometric information of the contact with all or Part of the contact information Line association; wherein, the user can establish a contact information database by using various methods, including: (1) The user can establish a database according to the currently owned, already marked multimedia data set at a certain time; (2) adopting The method of function 1 incrementally establishes the database; (3) the user marks the personal information while browsing the data, and updates the marked data to the database in real time; if, if desired, with the person on the multimedia material The interaction triggers the terminal to extract the biometric information of the contact in the current multimedia material, and searches and matches the extracted biometric information with the previously
  • Step 203 determining whether the matching is successful, if yes, performing step 204; otherwise, performing the step
  • Step 204 Display the matching result, that is, the contact information of the contact, in an interactive manner on the user interface, for example, prompting the terminal user to send a message to the person, or sending an email to the person;
  • Step 205 Determine whether the terminal user needs to modify the contact information of the contact, if not modified, go to step 206, otherwise go to step 209;
  • Step 206 The user operates according to the prompt, and enters a corresponding software function module, such as a short message processing software module;
  • Step 207 when the biometric information of the contact is not matched to the contact information corresponding to the contact, the user may further search for the social media related to the end user after being authorized by the user. , further matching the biometric information in the social media according to the biometric information of the contact;
  • the terminal may be directly requested to perform storage, that is, step 209 is performed;
  • Step 208 Determine whether the further matching is successful, if yes, go to step 204; otherwise, go to step 209;
  • Step 209 The terminal is requested to perform storage; specifically, the user is asked whether to store the biometric information of the contact and associate with the corresponding contact information. If yes, the requesting terminal stores the biometric information and the currently known contact information. And associating the biometric information with the contact information; if the contact information corresponding to the biometric information is not currently known, the biometric information may be selected to be stored as a reserve for later editing and use;
  • Step 210 The user performs the multimedia material reading offline after completing the recording. If there is still the next biometric information to be matched, the process proceeds to step 200, and the above process is repeatedly performed.
  • the face information is taken as an example, and the use process includes but is not limited to these scenarios.
  • User A uses the terminal to browse the local picture.
  • the user may want to interact with the person in the photo.
  • the face detection algorithm is used to detect the face of the image, and then the detected face is identified and matched based on the detection.
  • the sample library user A for face recognition can be authorized and configured.
  • the user A authorization program can access the local contact database.
  • the program matches the avatar information in the local contact of the user according to the detected face information, and performs recognition of the character in the current image. If the recognition is successful, a prompt box will pop up on the current image browsing interface, giving the user A some options that can be operated, such as calling a person in the photo, or sending a message to the person in the short message.
  • search fails, there will be corresponding prompts on the interface, such as whether to complete the contact information, or further request the user's authorization to determine whether the search scope can be expanded.
  • prompts on the interface such as whether to complete the contact information, or further request the user's authorization to determine whether the search scope can be expanded.
  • user A can authorize the program to access the homepage of the website.
  • the character recognition is further performed in the picture of the user's buddy list and the avatar information. If the identification is successful, the interface may be prompted whether to further interact with the task, for example, displaying the status update of the task for a recent period of time.
  • the currently acquired images can be analyzed in real time. Similar to the previous usage scenario, the face is first detected and the detected face information is identified. If the identification fails, the user is prompted to manually mark the multimedia information material so as to conveniently interact with the multimedia material in the future.
  • the user information marked by the user is stored as a sample of the local person sample, which is also a library of image retrieval samples that are defaulted by the user when performing image interaction in the future.
  • FIG. 3 is a schematic structural diagram of an apparatus according to an embodiment of the present invention, which may include: an associated storage module and a matching interaction module, where
  • the associated storage module is mainly responsible for pre-associating and storing the biometric information of the contact with the contact information of the contact in the terminal, and the storage location may be the terminal local or the server;
  • the matching interaction module is mainly responsible for extracting the current multimedia data. Biometric information, and Matching the extracted biometric information with the previously stored biometric information, and if it is determined that the matching is successful, calling out the contact information of the contact corresponding to the biometric information to interact; if the matching fails, the biometric information is Further matching with the network social media related to the end user or requesting the associated storage module to perform editing storage processing.
  • FIG. 4 is a schematic structural diagram of a terminal according to an embodiment of the present invention.
  • the terminal includes at least the foregoing apparatus according to the embodiment of the present invention, where the apparatus includes: an associated storage module and a matching interaction module, where
  • the associated storage module is mainly responsible for pre-associating and storing the biometric information of the contact with the contact information of the contact in the terminal, and the storage location may be the terminal local or the server;
  • the matching interaction module is mainly responsible for extracting the current multimedia data. Biometric information, and the extracted biometric information is matched with the previously stored biometric information. If it is determined that the matching is successful, the contact information of the contact corresponding to the biometric information is called to interact; if the matching fails, then The biometric information is further matched to the network social media related to the end user or the associated storage module is requested to perform an edit storage process.
  • the embodiment of the present invention provides a multimedia interaction method and device based on face information, and a terminal. Compared with the prior art, the embodiment of the present invention further mines information in an image, and some need manual intervention. The things are handled automatically, and the user only needs to make a selection based on the output information of the system. Compared with the previous interaction mode, this method is simple, effective, friendly, and efficient, which greatly enhances the friendliness of the system.

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Security & Cryptography (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种基于生物特征信息的多媒体交互方法及装置及终端，其中方法包括：在终端中预先将联系人的生物特征信息与该联系人的联系信息进行关联并存储；在当前多媒体资料中提取生物特征信息，并将提取到的生物特征信息与之前存储的生物特征信息进行匹配，如果确定匹配成功则调出与该生物特征信息对应的联系人的联系信息进行交互；本发明相比之前的交互方式，该方式简单、有效，界面友好，效率较高，大大提升了***的友好性。

Description

基于人脸信息的多媒体交互方法及装置及终端 技术领域
本发明涉及通信技术领域， 尤其涉及一种基于人脸信息的多媒体交互 方法及装置及终端。 背景技术
人机交互技术 ( Human-Computer Interaction Techniques )是指通过计算 机输入、 输出设备， 以有效的方式实现人与计算机对话的技术。
人机交互技术是随着计算机的出现应运而生的， 从最初的手工作业阶 段， 到现在以虚拟现实技术为代表的人机交互技术， 人机交互技术已经经 历了很多阶段。 人机交互的发展历史表明其由以计算机为中心的复杂交互 逐渐向以人为中心的简单、 自然的交互。 目前的基于多媒体、 多通道的人 机交互技术已经取得了不少研究成果， 比如在文字识别、 手势识别、 语音 识别、 语音合成等方面都有不少研究成果和产品问世。
随着电子技术的发展， 手机、 MP4、 平板电脑、 数码相机、 数码摄像 机等便携式终端设备的普及程度越来越高， 人们使用这些设备的多媒体记 录功能记录了大量的多媒体数据， 包括照片、 有声以及无声的视频录像等 等。 在记录的多媒体文件中， 内容里有人参与的占有绝大一部分。 随着时 代的发展， 技术的进步， 人们生活水平的提高， 个人拥有的类似的多媒体 资料也越来越多。 这些多媒体资料作为生活以及工作中记录或是记忆长期 存在， 人们在浏览这些资料时， 只能从资料上被动的获得信息， 而无法进 一步与资料上的内容（主要是指资料中的人物）进行交互， 使用者若需和 多媒体资料上记录的人进行进一步的交流， 必须手动借助于另一种资料， 如通讯录、 备忘录等， 获得该联系人的联系方式， 进而和该对象进行进一 步的联系。
上述方法存在的弊端包括： 交互过程不友好， 与人机交互发展初期的 手工操作基本相当， 效率及其低下； 当时间久远， 已无法回忆出多媒体资 料上人物的信息时， 进一步的互动就将失败。 发明内容
鉴于上述的分析， 本发明实施例旨在提供一种基于人脸信息的多媒体 交互方法及装置及终端， 用以解决现有技术中存在的人机交互不友好以及 交互过程中存在的效率低或者互动失败的问题。
本发明实施例的目的主要是通过以下技术方案实现的：
一种基于生物特征信息的多媒体交互方法， 包括：
在终端中预先将联系人的生物特征信息与该联系人的联系信息进行关 联并存储；
在当前多媒体资料中提取生物特征信息， 并将提取到的生物特征信息 与之前存储的生物特征信息进行匹配， 如果确定匹配成功则调出与该生物 特征信息对应的联系人的联系信息进行交互。
其中， 如果匹配失败， 则根据该生物特征信息到本终端用户相关的网 络社交媒体做进一步匹配或者直接请求终端进行存储处理。
其中， 在经过授权后访问与本终端用户相关的网络社交媒体， 将提取 到的生物特征信息与该网络社交媒体中存储的联系人的生物特征信息做进 一步匹配， 如果确定进一步匹配成功则调出与该生物特征信息对应的联系 人的联系信息进行交互； 如果进一步匹配失败， 则请求终端进行编辑存储 处理。
其中， 所述请求终端进行编辑存储处理的步骤包括：
请求终端存储该生物特征信息和对应的已知的联系信息， 并将该生物 特征信息与已知的联系信息进行关联； 如果当前不知道该生物特征信息对 应的联系信息， 则仅存储该生物特征信息作为储备。
其中， 当匹配成功并调用与该生物特征信息对应的联系人的联系信息 时， 根据需要对该联系信息进行修改。
其中， 所述当前多媒体资料为终端中已有的多媒体资料， 或者为终端 实时拍摄的多媒体资料。
其中， 所述生物特征信息为人脸信息。
一种基于生物特征信息的多媒体交互装置， 包括：
关联存储模块， 配置为在终端中预先将联系人的生物特征信息与该联 系人的联系信息进行关联并存储；
匹配交互模块， 用在当前多媒体资料中提取生物特征信息， 并将提取 到的生物特征信息与之前存储的生物特征信息进行匹配， 如果确定匹配成 功则调出与该生物特征信息对应的联系人的联系信息进行交互。
其中， 所述匹配交互模块还配置为， 如果匹配失败， 则对该生物特征 信息到与本终端用户相关的网络社交媒体中做进一步匹配或者请求所述关 联存储模块进行编辑存储处理。
一种终端， 至少包括权利要求 8或 9所述的基于生物特征信息的多媒 体交互装置。
本发明实施例有益效果如下：
本发明实施例更进一步的挖掘出图像中的信息， 相比之前的交互方式， 该方式简单、 有效， 界面友好， 效率较高， 大大提升了***的友好性。 附图说明
图 1为本发明第一方法实施例的流程示意图；
图 2为本发明第二方法实施例的流程示意图；
图 3为本发明实施例所述装置的结构示意图；
图 4为本发明实施例所述终端的结构示意图。 具体实施方式
下面结合附图来具体描述本发明的优选实施例， 其中， 附图构成本申 请一部分， 并与本发明的实施例一起用于阐释本发明的原理。 应当理解， 此处所描述的具体实施例仅用以解释本发明， 并不用于限定本发明。 需要 说明的是， 在不冲突的情况下， 本申请中的实施例及实施例中的特征可以 相互任意组合。
首先， 结合附图 1和 2对本发明所述方法实施例进行详细说明。
第一方法实施例：
如图 1所示， 图 1为本发明第一方法实施例的流程示意图， 具体可以 包括：
步骤 101 :在终端中预先将联系人的生物特征信息与该联系人的联系信 息进行关联， 并将关联之后的数据进行存储， 存储位置可以是终端本地或 者服务器；
步骤 102: 在当前多媒体资料中提取生物特征信息， 并将提取到的生物 特征信息与之前存储的生物特征信息进行匹配， 如果确定匹配成功则调出 与该生物特征信息对应的联系人的联系信息进行交互。
本发明第一方法实施例通过自动检测多媒体资料中的生物特征信息， 将识别到的生物特征信息提取出来与之前存储的生物特征信息进行匹配， 从而调出将对应的联系人的联系信息， 达到自动跟多媒体资料进行互动的 目的。
第二方法实施例：
如图 2所示， 图 2为本发明第二方法实施例的流程示意图， 具体可以 包括如下步骤：
步骤 200: 采集联系人的生物特征信息； 采集方式可以有多种， 例如可 以通过终端实时采集， 也可以通过电脑或网络下载到本终端； 步骤 201：在终端中预先将联系人的生物特征信息与该联系人的联系信 息进行关联并存储， 存储位置可以是终端本地或者服务器； 具体的说就是， 用户将通过采集设备采集或者互联网或者电脑导入等方式得到的联系人的 生物特征信息与该联系人的联系信息进行关联， 关联时可以根据实际情况 对联系信息进行编辑修改， 例如增加新的联系信息或对已有联系信息进行 修改等， 关联之后进行存储； 其中， 该联系信息包括： 联系人的姓名、 职 务、 单位、 电话号码、 邮件地址、 QQ号码、 开心网账号等信息中的一个或 多个； 用户进行关联的时候可以基于终端原有的联系信息功能软件， 例如， 在通讯录软件中将联系人的生物特征信息与相应的电话号码进行关联； 也 可以建立一个总的联系信息数据库， 将联系人的生物特征信息与其所有或 部分联系信息进行关联； 其中， 使用者可以使用多种方法建立联系信息数 据库， 包括： （ 1 )使用者可以在某一时间， 根据当前拥有的、 已经进行了 标记的多媒体资料集中建立数据库； （2 )采用功能一中的方法增量的建立 数据库； （3 )用户在浏览资料的同时标记个人信息， 并将标记后的资料实 时增量更新到数据库中； 料时， 如果想跟多媒体资料上的人进行互动， 则触发终端在当前多媒体资 料中提取该联系人的生物特征信息， 并将提取到的生物特征信息与之前预 先存储的生物特征信息进行查找匹配；
步骤 203 : 判断匹配是否成功， 如果是， 执行步骤 204; 否则执行步骤
207;
步骤 204:将匹配结果即该联系人的联系信息以互动的方式显示在用户 界面上， 例如， 提示终端用户发消息给此人， 或是发邮件给此人；
步骤 205: 判断终端用户是否需要对该联系人的联系信息进行修改， 如 果不用修改， 执行步骤 206， 否则转到步骤 209; 步骤 206: 用户根据提示进行操作， 进入相应的软件功能模块， 例如短 信处理软件模块；
步骤 207: 作为本发明优选的实施例， 当根据该联系人的生物特征信息 没有在终端匹配到与其对应的联系信息时， 可以在经过用户授权后进一步 到与终端用户有关的网络社交媒体中查找， 即根据该联系人的生物特征信 息进一步与网络社交媒体中的生物特征信息进行匹配；
需要说明的是， 当根据该联系人的生物特征信息没有在终端匹配到与 其对应的联系信息， 也可以直接请求终端进行存储， 即执行步骤 209;
步骤 208: 判断进一步匹配是否成功， 如果是， 执行步骤 204; 否则执 行步骤 209;
步骤 209: 请求终端进行存储； 具体的说就是， 询问用户是否存储该联 系人的生物特征信息并与对应的联系信息建立关联， 如果是， 请求终端存 储该生物特征信息和当前已知的联系信息， 并将该生物特征信息与联系信 息进行关联； 如果当前不知道该生物特征信息对应的联系信息， 则可以选 择仅存储该生物特征信息作为储备， 以便日后编辑使用；
步骤 210: 用户在完成记录后离线进行多媒体资料阅读， 如果还有下个 生物特征信息需要匹配， 则转到步骤 200， 重复执行上述过程。
为了便于对本发明实施例所述方法进行理解， 以下将以人脸信息为例， 际使用过程中包括但不限于这些场景。
使用场景一：
用户 A使用终端在进行本地图片的浏览， 当用户正在浏览带有人物图 像信息的图片时， 用户可能想与照片中的人物进行互动。 此时， 使用人脸 检测算法对图像进行人脸进行检测， 进而在检测的基础上， 对检测到的人 脸进行识别和匹配。 进行人脸识别的样本库用户 A可以进行授权和配置， 例如， 用户 A授权程序可以访问本地的联系人数据库， 在这种情况下， 程 序根据检测到的人脸信息， 和用户本地联系人中的头像信息进行匹配， 进 行当前图像中人物的识别。 若识别成功， 会在当前的图像浏览界面弹出提 示框， 给出用户 A—些可以操作的选择， 例如呼叫照片中的人物， 或是发 送消息给短消息中的人物。 如果检索失败， 也会在界面上有相应的提示， 例如是否完善联系人信息， 或是进一步请求用户的授权， 确定是否可以扩 大搜索范围， 例如用户 A可以给程序授权访问人人网主页， 可以在用户的 好友列表的图片以及头像信息里进一步的进行人物的识别。 若识别成功， 可以在界面上提示是否和该任务进一步交互， 例如显示出该任务最近一段 时间的状态更新情况。
使用场景二：
用户 A使用手持终端进行图像或者视频拍摄时， 可以实时的对当前采 集到的图像进行分析。 和上一个使用场景类似， 首先检测出人脸， 并对检 测到的人脸信息进行识别。 若识别失败， 则提示用户是否手动进行多媒体 信息资料的标记， 以便日后方便的与该多媒体资料进行交互。 用户标记的 用户信息作为本地人物样本库存在， 这个也是用户日后进行图像交互时默 认的图像检索样本库。
以上结合附图 1和 2以及两个具体应用场景对于本发明实施例所述方 法进行了详细说明， 接下来将结合附图 3对本发明实施例所述装置进行详 细说明。
如图 3所示， 图 3为本发明实施例所述装置的结构示意图， 具体可以 包括： 关联存储模块和匹配交互模块， 其中，
关联存储模块， 主要负责在终端中预先将联系人的生物特征信息与该 联系人的联系信息进行关联并存储， 存储位置可以是终端本地或者服务器； 匹配交互模块， 主要负责在当前多媒体资料中提取生物特征信息， 并 将提取到的生物特征信息与之前存储的生物特征信息进行匹配， 如果确定 匹配成功则调出与该生物特征信息对应的联系人的联系信息进行交互； 如 果匹配失败， 则对该生物特征信息到与本终端用户相关的网络社交媒体中 做进一步匹配或者请求所述关联存储模块进行编辑存储处理。
需要说明的是， 对于本发明实施例所述装置的具体实现流程， 由于上 述方法中已有详细说明， 故此处不再赘述。
最后， 结合附图 4对本发明实施例所述终端进行详细说明。
如图 4所示， 图 4为本发明实施例所述终端的结构示意图， 该终端至 少包括上述本发明实施例所述装置， 该装置包括： 关联存储模块和匹配交 互模块， 其中，
关联存储模块， 主要负责在终端中预先将联系人的生物特征信息与该 联系人的联系信息进行关联并存储， 存储位置可以是终端本地或者服务器； 匹配交互模块， 主要负责在当前多媒体资料中提取生物特征信息， 并 将提取到的生物特征信息与之前存储的生物特征信息进行匹配， 如果确定 匹配成功则调出与该生物特征信息对应的联系人的联系信息进行交互； 如 果匹配失败， 则对该生物特征信息到与本终端用户相关的网络社交媒体中 做进一步匹配或者请求所述关联存储模块进行编辑存储处理。
综上所述， 本发明实施例提供了基于人脸信息的多媒体交互方法及装 置及终端， 与现有技术相比较， 本发明实施例更进一步地挖掘出图像中的 信息， 将一些需要人工干预的事情进行自动化的处理， 用户只需要根据系 统的输出信息做出选择即可。 相比之前的交互方式， 该方式简单、 有效， 界面友好， 效率较高， 大大提升了***的友好性。
以上所述， 仅为本发明的较佳实施例而已， 并非用于限定本发明的保 护范围。

Claims

权利要求书
1、 一种基于生物特征信息的多媒体交互方法， 包括：
在终端中预先将联系人的生物特征信息与该联系人的联系信息进行关 联并存储；
在当前多媒体资料中提取生物特征信息， 并将提取到的生物特征信息 与之前存储的生物特征信息进行匹配， 如果确定匹配成功则调出与该生物 特征信息对应的联系人的联系信息进行交互。
2、 根据权利要求 1所述的方法， 其中， 如果匹配失败， 则根据该生物 特征信息到本终端用户相关的网络社交媒体做进一步匹配或者直接请求终 端进行存储处理。
3、 根据权利要求 2所述的方法， 其中， 在经过授权后访问与本终端用 户相关的网络社交媒体， 将提取到的生物特征信息与该网络社交媒体中存 储的联系人的生物特征信息做进一步匹配， 如果确定进一步匹配成功则调 出与该生物特征信息对应的联系人的联系信息进行交互； 如果进一步匹配 失败， 则请求终端进行编辑存储处理。
4、 根据权利要求 2或 3所述的方法， 其中， 所述请求终端进行编辑存 储处理的步骤包括：
请求终端存储该生物特征信息和对应的已知的联系信息， 并将该生物 特征信息与已知的联系信息进行关联； 如果当前不知道该生物特征信息对 应的联系信息， 则仅存储该生物特征信息作为储备。
5、 根据权利要求 1所述的方法， 其中， 当匹配成功并调用与该生物特 征信息对应的联系人的联系信息时， 根据需要对该联系信息进行修改。
6、 根据权利要求 1所述的方法， 其中， 所述当前多媒体资料为终端中 已有的多媒体资料， 或者为终端实时拍摄的多媒体资料。
7、 根据权利要求 1、 2、 3或 5所述的方法， 其中， 所述生物特征信息 为人脸信息。
8、 一种基于生物特征信息的多媒体交互装置， 包括：
关联存储模块， 配置为在终端中预先将联系人的生物特征信息与该联 系人的联系信息进行关联并存储；
匹配交互模块， 用在当前多媒体资料中提取生物特征信息， 并将提取 到的生物特征信息与之前存储的生物特征信息进行匹配， 如果确定匹配成 功则调出与该生物特征信息对应的联系人的联系信息进行交互。
9、 根据权利要求 8所述的装置， 其中， 所述匹配交互模块还配置为， 如果匹配失败， 则对该生物特征信息到与本终端用户相关的网络社交媒体 中做进一步匹配或者请求所述关联存储模块进行编辑存储处理。
10、 一种终端， 至少包括权利要求 8或 9所述的基于生物特征信息的 多媒体交互装置。
PCT/CN2013/080766 2012-12-28 2013-08-02 基于人脸信息的多媒体交互方法及装置及终端 WO2013189317A1 (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201210583452.8 2012-12-28
CN2012105834528A CN103076879A (zh) 2012-12-28 2012-12-28 基于人脸信息的多媒体交互方法及装置及终端

Publications (1)

Publication Number Publication Date
WO2013189317A1 true WO2013189317A1 (zh) 2013-12-27

Family

ID=48153437

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2013/080766 WO2013189317A1 (zh) 2012-12-28 2013-08-02 基于人脸信息的多媒体交互方法及装置及终端

Country Status (2)

Country Link
CN (1) CN103076879A (zh)
WO (1) WO2013189317A1 (zh)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103076879A (zh) * 2012-12-28 2013-05-01 中兴通讯股份有限公司 基于人脸信息的多媒体交互方法及装置及终端
CN104185140A (zh) * 2013-05-23 2014-12-03 深圳中兴网信科技有限公司 一种视频智能楼宇服务器、终端、***及访问方法
CN103414815B (zh) * 2013-07-15 2017-04-05 魅族科技（中国）有限公司 联系人信息的显示方法和终端
CN104346159A (zh) * 2013-08-09 2015-02-11 联想(北京)有限公司 信息处理的方法及电子设备
CN104901994B (zh) * 2014-10-22 2018-05-25 腾讯科技（深圳）有限公司 网络***中用户的属性数值转移方法、装置及***
CN105320407A (zh) * 2015-11-12 2016-02-10 上海斐讯数据通信技术有限公司 一种获取照片人物社交动态的方法及装置
CN107194817B (zh) * 2017-03-29 2023-06-23 腾讯科技（深圳）有限公司 用户社交信息的展示方法、装置和计算机设备
CN109002447A (zh) * 2017-06-07 2018-12-14 中兴通讯股份有限公司 一种信息采集整理方法及装置
CN109427017A (zh) * 2017-08-24 2019-03-05 中兴通讯股份有限公司 一种提示方法及装置
CN110555171B (zh) * 2018-03-29 2024-04-30 腾讯科技（深圳）有限公司 一种信息处理方法、装置、存储介质及***
CN110661898A (zh) * 2018-06-29 2020-01-07 阿里巴巴集团控股有限公司 一种实现应用程序处理的方法及装置
CN112235181A (zh) * 2020-08-29 2021-01-15 上海量明科技发展有限公司 弱社交方法、客户端及***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070140532A1 (en) * 2005-12-20 2007-06-21 Goffin Glen P Method and apparatus for providing user profiling based on facial recognition
CN101641948A (zh) * 2007-03-29 2010-02-03 索尼爱立信移动通讯有限公司 具有集成照片管理***的移动设备
CN102667763A (zh) * 2009-08-07 2012-09-12 谷歌公司 带有社交网络辅助的面部识别
CN103076879A (zh) * 2012-12-28 2013-05-01 中兴通讯股份有限公司 基于人脸信息的多媒体交互方法及装置及终端

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100677421B1 (ko) * 2004-12-30 2007-02-02 엘지전자 주식회사 휴대단말기에서의 참조필드 이용방법
CN100580691C (zh) * 2007-03-16 2010-01-13 上海博康智能信息技术有限公司 综合利用人脸及人体辅助信息的交互式人脸识别***及方法
CN101576810B (zh) * 2008-05-09 2011-01-12 杭州中正生物认证技术有限公司 利用生物识别技术实现文件安全打印的方法及***
CN101741973A (zh) * 2009-12-07 2010-06-16 深圳华为通信技术有限公司 显示相关信息的方法及移动通信终端
US20110316666A1 (en) * 2010-06-25 2011-12-29 Kabushiki Kaisha Toshiba Information device, computer program product and method thereof
CN102521619A (zh) * 2011-11-22 2012-06-27 汉王科技股份有限公司 基于人脸识别的信息呈现方法及装置和人脸识别打印***
CN102523213B (zh) * 2011-12-13 2014-09-17 华为终端有限公司 服务器、终端鉴权方法以及服务器、终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070140532A1 (en) * 2005-12-20 2007-06-21 Goffin Glen P Method and apparatus for providing user profiling based on facial recognition
CN101641948A (zh) * 2007-03-29 2010-02-03 索尼爱立信移动通讯有限公司 具有集成照片管理***的移动设备
CN102667763A (zh) * 2009-08-07 2012-09-12 谷歌公司 带有社交网络辅助的面部识别
CN103076879A (zh) * 2012-12-28 2013-05-01 中兴通讯股份有限公司 基于人脸信息的多媒体交互方法及装置及终端

Also Published As

Publication number Publication date
CN103076879A (zh) 2013-05-01

Similar Documents

Publication Publication Date Title
WO2013189317A1 (zh) 基于人脸信息的多媒体交互方法及装置及终端
US9058375B2 (en) Systems and methods for adding descriptive metadata to digital content
US9304657B2 (en) Audio tagging
US9521175B2 (en) Media tagging
US8649776B2 (en) Systems and methods to provide personal information assistance
CN106971009B (zh) 语音数据库生成方法及装置、存储介质、电子设备
US20090327272A1 (en) Method and System for Searching Multiple Data Types
WO2012015919A1 (en) Automatic media sharing via shutter click
US20110148857A1 (en) Finding and sharing of digital images based on shared face models
TW201540115A (zh) 通訊事件歷史
CN110602516A (zh) 基于视频直播的信息交互方法、装置及电子设备
US20130332804A1 (en) Methods and devices for data entry
CN101297292A (zh) 用于向电子日记本加入内容或从中获取内容的方法和***
KR102252964B1 (ko) 온라인 커뮤니케이션의 리뷰 시스템, 방법 및 컴퓨터 프로그램
TW201539210A (zh) 個人資訊管理服務系統
WO2014101416A1 (zh) 一种文件展示方法及装置
CN107220387A (zh) 评论方法及装置
CN107153684A (zh) 推送消息的显示方法、装置和设备
CN105354284A (zh) 模板的处理方法及装置、短信识别方法及装置
TWI528186B (zh) 經由音訊發布訊息的系統及方法
WO2015101074A1 (zh) 基于图片的识图方法、***、设备及装置
CN106558311B (zh) 语音内容提示方法和装置
JP2017021672A (ja) 検索装置
US20120059855A1 (en) Method and computer program product for enabling organization of media objects
JP2020009011A (ja) フォトブック作製システム及びサーバ装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13806924

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 13806924

Country of ref document: EP

Kind code of ref document: A1