CN103813126A - 进行视频通话时提供用户感兴趣信息的方法及其电子装置 - Google Patents

进行视频通话时提供用户感兴趣信息的方法及其电子装置 Download PDF

Info

Publication number
CN103813126A
CN103813126A CN201310537633.1A CN201310537633A CN103813126A CN 103813126 A CN103813126 A CN 103813126A CN 201310537633 A CN201310537633 A CN 201310537633A CN 103813126 A CN103813126 A CN 103813126A
Authority
CN
China
Prior art keywords
information
interest
user
video calling
providing method
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310537633.1A
Other languages
English (en)
Other versions
CN103813126B (zh
Inventor
李承桓
文弼敬
尹琇碝
李相俊
李政莲
李峻昊
郑圣勋
曹逢铉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN103813126A publication Critical patent/CN103813126A/zh
Application granted granted Critical
Publication of CN103813126B publication Critical patent/CN103813126B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/01—Social networking
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/40—Extraction of image or video features
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4826—End-user interface for program selection using recommendation lists, e.g. of programs or channels sorted out according to their score
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L15/18—Speech classification or search using natural language modelling
    • G10L15/1822—Parsing for meaning understanding
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/08—Speech classification or search
    • G10L2015/088—Word spotting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Health & Medical Sciences (AREA)
  • Marketing (AREA)
  • Strategic Management (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computing Systems (AREA)
  • General Business, Economics & Management (AREA)
  • Economics (AREA)
  • General Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • Primary Health Care (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Acoustics & Sound (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明提供了信息提供方法及其电子装置。根据电子装置的信息提供方法，当进行视频通话时，识别进行视频通话的用户，基于用户在社交网络服务（SNS）上的使用信息获取识别出的用户的至少一条感兴趣信息，并且在视频通话屏幕上显示所述至少一条感兴趣信息。

Description

进行视频通话时提供用户感兴趣信息的方法及其电子装置
相关申请的交叉引用
本申请要求于2012年11月2日向韩国知识产权局提交的韩国专利申请第10-2012-0123647号的优先权，通过引用将其全部公开内容结合于此。
技术领域
与示例性实施例一致的装置及方法涉及信息提供方法及其电子装置，更具体地，涉及当视频通话在进行中时给进行视频通话的用户提供感兴趣信息的信息提供方法及使用该信息提供方法的电子装置。
背景技术
随着通信技术的发展，比如电视机（TV）的许多大的电子装置以及比如移动电话的移动通信设备提供视频通话功能。
然而，在提供视频通话功能的相关技术装置或者服务中，当用户完成了与视频通话关联的主题时，用户没有别的选择而只能挂断视频通话，因为除了视频通话功能之外，所述装置或者服务不提供额外的功能。
因此，需要在进行视频通话的用户之间获取感兴趣信息以给视频通话提供丰富的谈话资料的方法。
发明内容
示例性实施例克服了上述缺点以及上面未描述的其它缺点。同时，示例性实施例不需要克服上述缺点，并且示例性实施例可以不克服上述问题中的任何一个。
根据示例性实施例的方面，提供一种通过在进行视频通话的用户之间提供感兴趣信息来提供新的视频通话环境的信息提供方法，及使用所述信息提供方法的电子装置。
根据示例性实施例的信息提供方法包括：进行视频通话，识别进行视频通话的用户，基于用户在社交网络服务（SNS）上的使用信息获取识别出的用户的至少一条感兴趣信息，以及在视频通话屏幕上显示所述至少一条感兴趣信息。
获取至少一条感兴趣信息还可以包括：获取用户和与所述用户进行视频通话的对方两者都感兴趣的共同感兴趣信息，显示至少一条感兴趣信息可以包括：在视频通话屏幕上显示所述共同感兴趣信息。
显示至少一条感兴趣信息可以包括：当预定时间段已经过去时，将共同感兴趣信息改变成用户和与所述用户进行视频通话的对方单独感兴趣的单独感兴趣信息，并且显示所述单独感兴趣信息。
它还可以包括：响应于用户输入将所显示的至少一条感兴趣信息改变成不同的感兴趣信息。
识别进行视频通话的用户可以包括：通过面部识别模块识别进行视频通话的用户的面部。
识别用户还可以包括：当视频通话在进行中时，对用户的说话语音执行语音识别，基于语音识别的结果确定用户言语中至少一条感兴趣信息的使用频率，并且存储用户言语中使用频率大于预定数量的感兴趣信息。
当进行下一次视频通话时，可以优先提供用户言语中使用频率大于预定数量的感兴趣信息。
显示至少一条感兴趣信息可以包括：在视频通话屏幕上以具有增强现实动画效果的缩略图的形式显示至少一条感兴趣信息。
显示至少一条感兴趣信息还可以包括：如果选择了至少一条感兴趣信息中的一条，则显示详细描述所选择的该条感兴趣信息的用户接口（UI）。
根据示例性实施例的电子装置包括：通信器，其与外部装置通信；摄影设备，其执行摄影操作；用户识别器，其通过所述通信器和所述摄影设备来识别进行视频通话的用户；显示器；以及控制器，其获取由用户识别器识别出的用户的、基于用户在社交网络服务（SNS）上的使用信息创建的至少一条感兴趣信息，并且控制所述显示器在视频通话屏幕上显示所述至少一条感兴趣信息。
所述控制器可以获取用户和与所述用户进行视频通话的对方两者都感兴趣的共同感兴趣信息，并且控制所述显示器在视频通话屏幕上显示所述共同感兴趣信息。
当预定时间段已经过去时，所述控制器可以将共同感兴趣信息改变成用户和与所述用户进行视频通话的对方单独感兴趣的单独感兴趣信息，并且控制所述显示器显示所述单独感兴趣信息。
所述电子装置还可以包括接收用户输入的用户输入单元，所述控制器可以响应于通过所述用户输入设备接收到的用户输入将显示的至少一条感兴趣信息改变成不同的感兴趣信息。
用户识别器可以通过经由面部识别模块识别进行视频通话的用户的面部来识别用户。
所述电子装置还可以包括存储器，当视频通话在进行中时，所述控制器可以对用户的说话语音执行语音识别，基于语音识别的结果确定用户言语中至少一条感兴趣信息的使用频率，并且将用户言语中使用频率大于预定数量的感兴趣信息存储在所述存储器中。
当进行下一次视频通话时，可以优先提供用户言语中使用频率大于预定数量的感兴趣信息。
所述控制器可以控制显示器在视频通话屏幕上以具有增强现实动画效果的缩略图图像的形式显示所述至少一条感兴趣信息。
如果选择了至少一条感兴趣信息中的一条，则所述控制器可以控制所述显示器显示详细描述所选择的该条感兴趣信息的UI。
附加的和/或其它方面将在随后的描述中部分地阐明，并将从该描述中部分地变得明显，或者可以通过实践示例性实施例而习得。
附图说明
通过参照附图描述某些示例性实施例，上述和/或其它方面将变得更加清楚，附图中：
图1是示意地示出根据示例性实施例的电子装置的框图；
图2是详细地示出根据示例性实施例的电子装置的框图；
图3至图7示出了根据各种示例性实施例的提供感兴趣信息的UI；
图8是示出根据示例性实施例的电子装置的信息提供方法的流程图；以及
图9是用于解释根据示例性实施例的视频通话***的信息提供方法的时序图。
具体实施方式
现在将参照附图更详细地描述某些示例性实施例。
在以下描述中，即使在不同的附图中，相同的附图标记也用于相同的元素。提供描述中定义的内容，如具体的构造和元件，是为了帮助综合理解示例性实施例。因而，显然可以在没有那些具体定义的内容的情况下执行示例性实施例。此外，不具体描述公知的功能或构造，因为它们将以不必要的细节使公开模糊。
图1是示意地示出根据示例性实施例的电子装置100的框图。如图1中所示，电子装置100包括通信器110、摄影设备120、显示器130、用户识别器140、以及控制器150。电子装置100可以是智能电视，然而，电子装置100不局限于智能电视。即，电子装置100可以被实现为进行视频通话的各种电子装置中的一种，比如平板个人计算机（PC）、智能电话、笔记本等等。
通信器110与外部电子装置或者外部服务器通信。具体地，通信器110与外部电子装置通信以给用户提供视频通话功能。同时，通信器110与外部服务器通信以给用户提供感兴趣信息。
摄影设备120执行给进行视频通话的用户摄影的操作。同时，被摄影设备120摄影的图像可以被用来识别用户的面部。摄影设备120可以被实现为照相机。
显示器130在控制器150的控制下显示图像数据。具体地，当进行视频通话时，显示器130可以显示从外部电子装置传送的视频通话数据。同时，当视频通话在进行中时，显示器130可以在显示屏幕上围绕对方显示感兴趣信息。
用户识别器140可以执行识别进行视频通话的用户的功能。具体地，用户识别器140可以使用面部识别模块来识别用户的面部，从而识别用户。然而，使用面部识别来识别用户的方法仅仅是示例性的，并且可以使用比如语音识别、指纹识别、虹膜识别、口令识别等等的各种识别方法来识别用户。
控制器150执行电子装置100的总体操作。具体地，当进行视频通话时，控制器150可以获取由用户识别器140识别出的用户的、基于用户在社交网络服务（SNS）上的使用信息创建的至少一条感兴趣信息，并且控制显示器130在视频通话屏幕上显示所述感兴趣信息。
详细地，如果当进行视频通话时，用户被用户识别器140识别出来，则控制器150可以向服务器10发送关于识别出的用户的信息。
如果从电子装置100接收到关于用户的信息，则服务器10基于用户在SNS上的使用信息创建用户的感兴趣信息。此时，除了用户的感兴趣信息之外，服务器10还可以创建用户正在对其说话的对方的感兴趣信息。具体地，由服务器10创建的感兴趣信息可以包括用户和用户正在对其说话的对方两者都感兴趣的共同感兴趣信息以及用户和对方单独感兴趣的单独感兴趣信息。
服务器10可以将所述感兴趣信息发送给电子装置100。
如果通过通信器110接收到感兴趣信息，则控制器150可以控制显示器130在视频通话屏幕上显示接收到的感兴趣信息。此时，控制器150可以控制显示器130在视频通话屏幕上以具有增强现实动画效果的至少一个缩略图图像的形式显示所述感兴趣信息。
同时，控制器150可以控制显示器130在视频通话屏幕上优先显示在感兴趣信息当中的共同感兴趣信息。然后，当预定时间段过去时，控制器150可以将共同感兴趣信息改变成进行视频通话的用户单独感兴趣的单独感兴趣信息，并且控制显示器130显示所述单独感兴趣信息。同时，控制器150可以响应于用户输入将显示的至少一条感兴趣信息改变成不同条感兴趣信息。
此外，当视频通话在进行中时，控制器150可以对用户的说话语音执行语音识别。然后，控制器150可以基于语音识别的结果确定用户言语中至少一条感兴趣信息的使用频率，并且将用户言语中对其的使用频率大于预定数量的感兴趣信息存储在内部存储器（未示出）或者外部服务器10中。因此，当进行下一次视频通话时，控制器150可以优先提供用户言语中对其的使用频率大于预定数量的感兴趣信息。
同时，如果选择了在显示屏幕上显示的至少一条感兴趣信息中的一条，则控制器150可以控制显示器130显示详细描述所选择的感兴趣信息的UI。
通过这种方式，如上所述的电子装置100可以给用户提供其中提供丰富的谈话资料的新的视频通话环境。
下文中，将参照图2到图7更详细地描述示例性实施例。图2是详细地示出根据示例性实施例的电子装置200的配置的框图。如图2中所示，电子装置200包括通信器210、摄影设备220、语音输入设备230、图像接收器240、显示器250、存储器260、用户输入设备270、用户识别器280、以及控制器290。
图2涉及其中电子装置200包括用于执行比如通信功能、广播接收功能、视频播放功能、显示功能等等的各种功能的组件的示例。因此，可以省略或者变更图2中所示的组件中的一些组件，或者可以添加其它组件。
通信器210与外部电子装置或者外部服务器20通信。具体地，通信器210可以与外部电子装置通信来给用户提供视频通话功能。同时，通信器210与外部服务器20通信来获取进行视频通话的用户感兴趣的感兴趣信息。
此时，通信器210可以根据各种通信方法中的一种与外部电子装置或者外部服务器20通信。例如，通信器210可以包括各种通信芯片，比如WiFi芯片、蓝牙芯片、近场通信（NFC）芯片、无线通信芯片等等。WiFi芯片、蓝牙芯片以及NFC芯片分别通过WiFi方法、蓝牙方法以及NFC方法执行通信。NFC芯片是通过使用135kHz、13.56MHz、433MHz、860到960MHz、2.45GHz等等的各种RF-ID频带当中的13.56MHz的NFC方法来工作的芯片。在使用WiFi芯片或者蓝牙芯片的情况下，可以首先发送和接收比如服务集标识符（SSID）、会话密钥等等的各种连接信息，以使用连接信息进行接入，然后可以发送和接收各种信息。无线通信芯片是根据各种通信标准执行通信的芯片，所述各种通信标准比如IEEE、Zigbee、第三代（3G）、第三代合作伙伴计划（3GPP）、长期演进（LTE）等等。
摄影设备220被安装在电子装置200的一侧以便对使用电子装置200的用户进行摄影。具体地，当视频通话在进行中时，摄影设备220可以执行对用户摄影并提供图像的功能，并且可以执行提供用于识别用户面部的图像的功能。此外，如果电子装置200具有根据用户的动作控制电子装置200的动作识别控制功能，则摄影设备220可以执行提供用于动作识别控制的图像的功能。
同时，摄影设备220可以被实现为照相机。
语音输入设备230接收用户的说话语音以便执行视频通话功能。语音输入设备230将接收到的语音信号转换成电信号，并且将所述电信号输出到控制器290。
语音输入设备230可以被实现为麦克风。此外，语音输入设备230可以与电子装置200被实现为一体，或者被实现为与电子装置200分离的单元。如果语音输入设备230被实现为分离的单元，则语音输入设备230可以通过有线或无线网络连接到电子装置200。
图像接收器240通过各种源接收图像数据。例如，图像接收器240可以从广播站接收广播数据、从外部设备（例如，数字视频盘（DVD）、蓝光盘（BD）播放器等等）接收图像数据、或者接收存储在存储器260中的图像数据。
显示器250在控制器290的控制下显示视频帧和各种屏幕中的至少一个，其中，所述视频帧通过在视频处理器(未示出)中处理图像接收器240接收到的图像数据来创建，并且所述各种屏幕由图形处理器293创建。具体地，当进行视频通话时，显示器250可以在视频通话屏幕上显示至少一条感兴趣信息。
存储器260存储各种数据和用于驱动电子装置200的各种模块。例如，存储器260可以存储包括基模块、感测模块、通信模块、展示模块、网络浏览器模块、以及服务模块的软件。基模块是基本模块，其处理从包括在电子装置200中的单独硬件传送的信号，并且将经处理的信号传送到上层模块。感测模块是用于从各种传感器收集信息、并且分析和管理所收集的信息的模块，并且感测模块可以包括面部识别模块、语音识别模块、动作识别模块、NFC识别模块等等。展示模块是用于配置显示屏幕的模块，并且可以包括用于再现和输出多媒体内容的多媒体模块、以及用于执行UI和图形处理的UI绘制（rendering）模块。通信模块是用于与外部设备通信的模块。网络浏览器模块是用于执行网页浏览以接入网络服务器的的模块。服务模块是包括用于提供各种服务的各种应用的模块。
用户输入设备270被用来接收用户用于控制电子装置200的总体操作的命令。具体地，用户输入设备270可以被实现为各种输入设备中的一种输入设备，比如遥控器、指示设备、触控板等等。
用户识别器280被用来识别正在进行视频通话的用户。具体地，用户识别器280可以使用由摄影设备220拍摄的用户面部图像、通过面部识别模块来识别用户。详细地，用户识别器280可以分析被摄影的用户面部的对称结构、特征（例如，眼睛、鼻子以及嘴唇的形状和位置）、头发、眼睛的颜色、以及肌肉运动中的至少一个来提取用户面部的特征，然后将所述用户面部的特征与预存的图像数据进行比较，从而识别出用户的面部。
同时，如上所述的用户识别器280识别用户的面部以识别出用户的方法仅仅是示例性的，并且可以使用比如虹膜识别、指纹识别、口令识别等等的各种识别方法来识别用户。
控制器290使用存储在存储器260中的各种程序控制电子装置200的总体操作。
如图2中所示，控制器290包括RAM291、ROM292、图形处理器293、主CPU294、第一到第n接口295-1到295-n以及总线296。这里，RAM291、ROM292、图形处理器293、主CPU294、第一到第n接口295-1到295-n等等可以通过总线296相互连接。
ROM292存储用于***引导的命令集等等。如果输入开启命令从而提供电力，则主CPU294根据存储在ROM292中的命令将存储在存储器260中的O/S复制到RAM291，并且运行O/S以引导***。如果完成了引导，则主CPU294将存储在存储器260中的各种应用程序复制到RAM291，并且运行复制到RAM291中的应用程序以执行各种操作。
图形处理器293使用计算单元（未示出）和绘制单元（未示出）创建包括各种对象的屏幕，所述对象比如图标、图像、文本等等。计算单元使用通过用户输入设备270接收到的控制命令、根据屏幕布局计算单个对象的比如坐标值、形状、大小、色彩等等的属性值。绘制单元基于由计算单元计算的属性值创建包括对象的屏幕的各种布局。在显示器250的显示区域上显示由绘制单元创建的屏幕。
主CPU294访问存储器260以使用存储在存储器260中的O/S执行引导。此外，主CPU294使用存储在存储器260中的各种程序、内容、数据等等执行各种操作。
第一到第n接口295-1到295-n连接到如上所述的各种组件。接口295-1到295-n中的一个可以是通过网络连接到外部设备的网络接口。
当进行视频通话时，控制器290可以获取由用户识别器280识别出的用户的、基于用户在SNS上的使用信息创建的至少一条感兴趣信息，并且控制显示器250在视频通话屏幕上显示所述感兴趣信息。
具体来说，当进行视频通话时，控制器290可以控制用户识别器280使用如上所述的方法识别进行视频通话的用户。
如果进行视频通话的用户被识别出来，则控制器290可以向外部服务器20发送关于识别出的用户的信息。
如果从电子装置200接收到关于进行视频通话的用户的信息，则服务器20可以搜索用户在SNS上的使用信息。详细地，服务器20可以搜索用户经常使用的关键词、检索词等等。此外，服务器20可以提取被用户使用超过预定次数的关键词，并且将这样关键词创建为感兴趣信息。此外，服务器20可以提取已经被用户使用达到预定时间段的关键词，并且将这样的关键词创建为感兴趣信息。
同时，除了用户的感兴趣信息之外，服务器20还可以创建用户与其进行视频通话的对方的感兴趣信息。这里，感兴趣信息可以包括进行视频通话的用户两者都感兴趣的共同感兴趣信息、以及进行视频通话的用户单独感兴趣的单独感兴趣信息。
例如，如果用户A对戏剧、音乐剧、电影、音乐、足球、以及总统大选感兴趣，而用户B对戏剧、音乐剧、电影、音乐、棒球、以及购物感兴趣，则服务器20可以将戏剧、音乐剧、电影、以及音乐创建为共同感兴趣信息，并将足球、棒球、总统大选、以及购物创建为单独感兴趣信息。
然后，服务器20可以将感兴趣信息发送给电子装置200。
如果感兴趣信息被发送到电子装置200，则电子装置200可以在视频通话屏幕上显示从服务器20接收到的感兴趣信息。此时，电子装置200与其进行视频通话的对方的电子装置也可以显示感兴趣信息，并且对方的电子装置可以提供与电子装置200提供的感兴趣信息相同的感兴趣信息。然而，对方的电子装置也可以提供与电子装置200提供的感兴趣信息不同的感兴趣信息。
具体地，控制器290可以控制显示器250在视频通话屏幕上优先显示在感兴趣信息当中的共同感兴趣信息。详细地，如上所述，如果接收到包括作为共同感兴趣信息的戏剧、音乐剧、电影、以及音乐以及作为单独感兴趣信息的足球、棒球、总统大选、以及购物的感兴趣信息，则控制器290可以控制显示器250显示与作为共同感兴趣信息的戏剧、音乐剧、电影、以及音乐相对应的四个项目310、320、330、以及340。
具体地，控制器290可以控制显示器250在视频通话屏幕上将感兴趣信息显示为具有增强现实动画效果的多个缩略图310、320、330、以及340。此时，控制器290可以将缩略图310、320、330、以及340显示为与对方的面部不重叠，以使得对方的面部不被遮盖。详细地，控制器290可以提取在视频通话屏幕上显示的对方的面部轮廓，并且控制显示器250在对方的面部轮廓之外布置缩略图310、320、330、以及340。
然后，控制器290可以控制显示器250将共同感兴趣信息改变成进行视频通话的用户单独感兴趣的单独感兴趣信息，并显示这些单独感兴趣信息。
详细地，如果第一预定时间段（例如，5分钟）已经过去，则如图4中所示，控制器290可以控制显示器250移除与在共同感兴趣信息当中的戏剧和音乐剧相对应的缩略图310和320，并且显示与作为单独感兴趣信息的足球和棒球相对应的缩略图410和420。
然后，如果第二预定时间段（例如，10分钟）已经过去，则如图5中所示，控制器290可以控制显示器250将与电影和音乐相对应的缩略图330和340改变成与总统大选和购物相对应的缩略图510和520。
此时，虽然可以以预定的顺序移除被移除的感兴趣信息，但是也可以基于语音识别的结果优先移除用户未提及的感兴趣信息。
如上所述，通过随着时间的推移将共同感兴趣信息改变成单独感兴趣信息，用户可以优先地关于共同感兴趣信息与对方交谈，并且稍后关于单独感兴趣信息与对方交谈。
同时，如上所述的当预定时间段已经过去时将共同感兴趣信息改变成单独感兴趣信息的方法仅仅是示例性的，并且也可以根据用户命令将共同感兴趣信息改变成单独感兴趣信息。例如，当通过动作识别控制电子装置200时，如果接收到用户的第一动作（例如，拍打(slap)动作），则控制器290可以将共同感兴趣信息改变成单独感兴趣信息。
同时，如果当显示多条感兴趣信息时接收到用于选择多条感兴趣信息中的一条感兴趣信息的用户命令，则控制器290可以显示包括所选择的感兴趣信息的详细信息的UI。例如，如果当显示与四条感兴趣信息相对应的缩略图310、320、330和340时，接收到用于选择电影的用户命令，则控制器290可以在显示屏幕的右侧显示包括作为感兴趣信息的电影的详细信息的UI610（图6）。这里，包括作为所选择的感兴趣信息的电影的详细信息的UI610可以包括关于近来发行的电影、票房结果的信息、关于与电影相关的主要文章的信息等等。
可以在显示屏幕的一侧显示包括所选择的感兴趣信息的详细信息的UI610，然而这仅仅是示例性的，并且控制器290可以在缩略图330内或者周围显示包括所述详细信息的UI610。
此外，当视频通话在进行中时，控制器290可以对用户的说话语音执行语音识别。具体地，控制器290可以基于语音识别的结果确定用户言语中至少一条感兴趣信息的使用频率，并且将用户言语中使用频率大于预定数量的感兴趣信息存储在存储器260中或者将该感兴趣信息发送给服务器20。因此，当进行下一次视频通话时，控制器290可以优先提供用户言语中使用频率大于预定数量的感兴趣信息。
例如，如果控制器290按照对用户说话语音的语音识别结果确定关键词“电影”和“足球”的使用频率大于预定数量，则当进行下一次视频通话时，控制器290可以优先提供“电影”和“足球”作为感兴趣信息。
通过如上所述的电子装置200，用户可以得到使用户能够关于感兴趣信息不断与对方交谈的新的视频通话环境。
上述示例性实施例涉及基于用户在SNS上的使用信息来获取感兴趣信息的情况，然而这仅仅是示例性的，并且也可以获取由用户事先输入的感兴趣信息。例如，用户可以在进行视频通话之前输入比如戏剧、音乐剧、音乐、电影、总统大选等等的感兴趣信息。
上述示例性实施例涉及以缩略图的形式显示感兴趣信息的情况，然而，这个是仅仅是示例性的，并且控制器290可以在显示屏幕的至少一侧以列表710的形式显示感兴趣信息，如图7中所示。
下文中，将参照图8和图9更详细地描述示例性实施例。图8是示出根据示例性实施例的电子装置的信息提供方法的流程图。将参照图2和图8给出下面的描述。
首先，电子装置200通过通信器210与另一个电子装置进行视频通话（操作S810）。
电子装置200通过用户识别器280识别进行视频通话的用户（操作S820）。此时，电子装置200可以通过面部识别来识别进行视频通话的用户，然而，这仅仅是示例性的，并且可以使用各种方法（例如，虹膜识别、指纹识别、语音识别、以及口令识别）来识别用户。
然后，电子装置200获取识别出的用户的感兴趣信息（操作S830）。详细地，电子装置200向服务器20发送关于识别出的用户的信息，并且服务器20基于关于用户的信息在SNS上搜索用户的使用信息，以据此创建感兴趣信息。所述感兴趣信息可以包括进行视频通话的用户两者都感兴趣的共同感兴趣信息、以及所述用户单独感兴趣的单独感兴趣信息。同时，电子装置200可以通过从服务器20接收感兴趣信息来获取用户的感兴趣信息。
然后，电子装置200在视频通话屏幕上显示用户的感兴趣信息（操作S840）。详细地，电子装置200可以优先显示感兴趣信息当中的共同感兴趣信息，然后当预定时间段已经过去时，通过将共同感兴趣信息改变成单独感兴趣信息来显示单独感兴趣信息。此外，如果选择了至少一条感兴趣信息，则电子装置200可以显示包括所选择的感兴趣信息的详细信息的UI。
图9是根据示例性实施例的用于解释视频通话***的信息提供方法的时序图。
首先，第一电子装置200-1和第二电子装置200-2进行视频通话（操作S910）。
如果进行视频通话，则第一电子装置200-1识别进行视频通话的第一用户（操作S915）。同样地，第二电子装置200-2识别进行视频通话的第二用户（操作S920）。
然后，第一电子装置200-1向服务器20发送关于识别出的第一用户的信息（操作S925），并且第二电子装置200-2向服务器20发送关于识别出的第二用户的信息（操作S930）。
如果接收到关于第一用户的信息和关于第二用户的信息，则服务器20通过在SNS上搜索第一用户和第二用户的日志(log)历史来创建第一用户和第二用户的感兴趣信息（操作S940）。所述感兴趣信息可以包括第一用户和第二用户两者都感兴趣的共同感兴趣信息、以及第一用户和第二用户单独感兴趣的单独感兴趣信息。
服务器20将所创建的感兴趣信息发送给第一电子装置200-1和第二电子装置200-2（操作S945和S950）。
如果接收到感兴趣信息，则第一电子装置200-1在视频通话屏幕上显示感兴趣信息（操作S955），并且第二电子装置200-2也在视频通话屏幕上显示感兴趣信息（操作S960）。
根据如上所述的视频通话***，进行视频通话的用户能够得到新的视频通话环境，所述环境使他们能够基于共同感兴趣信息以更亲密的感觉相互交谈。
同时，上述示例性实施例涉及服务器20从第一电子装置200-1和第二电子装置200-2两者接收关于用户的信息的情况，然而，这仅仅是示例性的，并且服务器20可以从第一电子装置200-1和第二电子装置200-2之一接收关于用户的信息。在这种情况下，服务器20可以仅将信息已经提供的用户的感兴趣信息发送给第一电子装置200-1和第二电子装置200-2。
同时，如上所述，电子装置的信息提供方法可以被实现为程序，并且在显示设备中提供。
详细地，可以提供存储程序的非瞬时计算机可读介质，所述程序包括：进行视频通话；识别进行视频通话的用户；基于用户在SNS上的使用信息获取用户的至少一条感兴趣信息；以及在视频通话屏幕上显示所述至少一条感兴趣信息。
非瞬时计算机可读介质不是比如寄存器、高速缓存、存储器等等的临时存储数据的介质，而是半永久地存储数据并允许机器读取所述数据的介质。详细地，如上所述，各种应用或者程序可以被存储在比如CD、DVD、硬盘、蓝光盘、USB、存储卡、ROM等等的非瞬时计算机可读介质中。
上述示例性实施例仅仅是示例性的，并不被解释为限制本公开。本教导能够容易地应用于其它类型的装置。同时，对示例性实施例的描述意图是说明性的，不是为了限制权利要求的范围，并且许多替换、更改和变化对于本领域技术人员将是明显的。

Claims (15)

1.一种信息提供方法，包括：
进行视频通话；
识别进行视频通话的用户；
基于用户在社交网络服务（SNS）上的使用信息获取识别出的用户的至少一条感兴趣信息；以及
在视频通话屏幕上显示所述至少一条感兴趣信息。
2.如权利要求1所述的信息提供方法，其中，获取至少一条感兴趣信息还包括：获取用户和与所述用户进行视频通话的对方共同感兴趣的共同感兴趣信息，
其中，显示至少一条感兴趣信息包括：在视频通话屏幕上显示所述共同感兴趣信息。
3.如权利要求2所述的信息提供方法，其中，显示至少一条感兴趣信息包括：当预定时间段已经过去时，将共同感兴趣信息改变成用户和与所述用户进行视频通话的对方个人所感兴趣的个人感兴趣信息，并且显示所述个人感兴趣信息。
4.如权利要求1所述的信息提供方法，还包括：响应于用户输入将所显示的至少一条感兴趣信息改变成不同的感兴趣信息。
5.如权利要求1所述的信息提供方法，其中，识别进行视频通话的用户包括：通过面部识别模块识别进行视频通话的用户的面部。
6.如权利要求1所述的信息提供方法，还包括：
当视频通话在进行中时，对用户的讲话语音执行语音识别；
基于语音识别的结果确定用户关于至少一条感兴趣信息的讲话频率；以及
存储用户关于其的讲话频率大于预定数量的感兴趣信息。
7.如权利要求6所述的信息提供方法，其中，当进行下一次视频通话时，优先提供用户关于其的讲话频率大于预定数量的感兴趣信息。
8.如权利要求1所述的信息提供方法，其中显示至少一条感兴趣信息包括：在视频通话屏幕上以具有增强现实动画效果的缩略图的形式显示至少一条感兴趣信息。
9.如权利要求1所述的信息提供方法，其中，显示至少一条感兴趣信息还包括：如果选择了至少一条感兴趣信息中的一条感兴趣信息，则显示详细描述所选择的该条感兴趣信息的UI。
10.一种电子装置，包括：
通信单元，被配置成与外部装置通信；
摄影单元，被配置成执行摄影操作；
用户识别单元，被配置成通过所述通信单元和所述摄影单元来识别进行视频通话的用户；
显示器；以及
控制器，被配置成获取用户识别单元识别出的用户的、基于用户在社交网络服务（SNS）上的使用信息创建的至少一条感兴趣信息，并且控制所述显示器在视频通话屏幕上显示所述至少一条感兴趣信息。
11.如权利要求10所述的电子装置，其中，所述控制器获取用户和与所述用户进行视频通话的对方共同感兴趣的共同感兴趣信息，并且控制所述显示器在视频通话屏幕上显示所述共同感兴趣信息。
12.如权利要求11所述的电子装置，其中，当预定时间段已经过去时，所述控制器将共同感兴趣信息改变成用户和与所述用户进行视频通话的对方个人所感兴趣的个人感兴趣信息，并且所述控制器控制所述显示器显示个人感兴趣信息。
13.如权利要求10所述的电子装置，还包括被配置成接收用户输入的用户输入单元，
其中，所述控制器响应于通过所述用户输入单元接收到的用户输入将显示的至少一条感兴趣信息改变成不同的感兴趣信息。
14.如权利要求10所述的电子装置，其中，用户识别单元通过经由面部识别模块识别进行视频通话的用户的面部来识别用户。
15.如权利要求10所述的电子装置，还包括存储单元，
其中，当视频通话在进行中时，所述控制器对用户的讲话语音执行语音识别，基于语音识别的结果确定用户关于至少一条感兴趣信息的讲话频率，并且将用户关于其的讲话频率大于预定数量的感兴趣信息存储在所述存储单元中。
CN201310537633.1A 2012-11-02 2013-11-04 进行视频通话时提供用户感兴趣信息的方法及其电子装置 Expired - Fee Related CN103813126B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120123647A KR101990536B1 (ko) 2012-11-02 2012-11-02 영상 통화 수행 시 사용자들의 관심 정보를 제공하는 정보 제공 방법 및 이를 적용한 전자 장치
KR10-2012-0123647 2012-11-02

Publications (2)

Publication Number Publication Date
CN103813126A true CN103813126A (zh) 2014-05-21
CN103813126B CN103813126B (zh) 2018-11-16

Family

ID=49553571

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310537633.1A Expired - Fee Related CN103813126B (zh) 2012-11-02 2013-11-04 进行视频通话时提供用户感兴趣信息的方法及其电子装置

Country Status (6)

Country Link
US (1) US9247199B2 (zh)
EP (1) EP2728859B1 (zh)
KR (1) KR101990536B1 (zh)
CN (1) CN103813126B (zh)
MX (1) MX341764B (zh)
WO (1) WO2014069943A1 (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104378553A (zh) * 2014-12-08 2015-02-25 联想(北京)有限公司 一种图像处理方法及电子设备
CN106658448A (zh) * 2016-11-30 2017-05-10 Tcl集团股份有限公司 一种语音通话方法及装置
CN107622496A (zh) * 2017-09-11 2018-01-23 广东欧珀移动通信有限公司 图像处理方法及装置
CN107707721A (zh) * 2017-11-06 2018-02-16 广东欧珀移动通信有限公司 移动终端的录音方法、装置、存储介质及移动终端
CN111405116A (zh) * 2020-03-23 2020-07-10 Oppo广东移动通信有限公司 通话信息的可视化方法、终端及计算机存储介质

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9569530B2 (en) * 2013-11-12 2017-02-14 International Business Machines Corporation Extracting and mining of quote data across multiple languages
KR102268540B1 (ko) 2014-06-26 2021-06-23 삼성전자주식회사 데이터 관리 방법 및 그 방법을 처리하는 전자 장치
EP3222069B1 (en) * 2014-11-20 2020-05-27 Samsung Electronics Co., Ltd. Method and device for sharing enriched information associated with a call
KR102346630B1 (ko) 2015-02-17 2022-01-03 삼성전자주식회사 복수의 사용자의 활동에 기초하여 콘텐트를 추천하는 방법 및 이를 위한 장치
US10169917B2 (en) 2015-08-20 2019-01-01 Microsoft Technology Licensing, Llc Augmented reality
US10235808B2 (en) 2015-08-20 2019-03-19 Microsoft Technology Licensing, Llc Communication system
JP6387205B2 (ja) * 2016-03-23 2018-09-05 株式会社オプティム コミュニケーションシステム、コミュニケーション方法及びプログラム
US10394831B2 (en) * 2016-06-03 2019-08-27 Facebook, Inc. Profile with third-party content
CN107846565B (zh) * 2016-09-19 2019-10-18 北京字节跳动网络技术有限公司 视频通话中的互动方法及其***
KR102034838B1 (ko) 2017-12-15 2019-10-21 주식회사 하이퍼커넥트 영상 통화 서비스를 제공하는 단말과 서버
KR101933822B1 (ko) * 2018-01-22 2019-03-29 숭실대학교산학협력단 얼굴인식 기반 지능형 스피커, 이를 이용한 능동적인 대화 제공 방법 및 이를 수행하기 위한 기록매체

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101427262A (zh) * 2005-12-20 2009-05-06 通用仪表公司 用于基于面部识别提供用户简档的方法和装置
CN102025968A (zh) * 2009-09-15 2011-04-20 柯尼卡美能达商用科技株式会社 图像发送装置和图像发送方法
US20110275317A1 (en) * 2010-05-06 2011-11-10 Lg Electronics Inc. Mobile terminal and control method thereof
CN102623011A (zh) * 2011-01-31 2012-08-01 国际商业机器公司 信息处理装置、信息处理方法、信息处理***以及程序
US20120236103A1 (en) * 2011-02-23 2012-09-20 Supyo, Inc. Platform for pseudo-anonymous video chat with intelligent matching of chat partners

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6084628A (en) * 1998-12-18 2000-07-04 Telefonaktiebolaget Lm Ericsson (Publ) System and method of providing targeted advertising during video telephone calls
JP2001067098A (ja) * 1999-08-25 2001-03-16 Sanyo Electric Co Ltd 人物検出方法と人物検出機能搭載装置
US7610287B1 (en) * 2005-06-28 2009-10-27 Google Inc. System and method for impromptu shared communication spaces
JP2008083100A (ja) * 2006-09-25 2008-04-10 Toshiba Corp 音声対話装置及びその方法
KR101050573B1 (ko) 2007-12-28 2011-07-19 주식회사 케이티 Ｉｍｓ 기반의 유무선 복합망에서의 사회 관계 구성 장치 및 방법
KR101205189B1 (ko) * 2009-09-05 2012-11-27 에스케이플래닛 주식회사 영상통화 중 감정 전달 시스템 및 방법
KR101348110B1 (ko) * 2010-10-06 2014-01-10 킴소프트 주식회사 이동 통신 단말기의 메신저를 이용한 광고방법
US9432502B2 (en) * 2011-01-31 2016-08-30 Facebook, Inc. Caller identification using social network information
KR101334116B1 (ko) 2011-01-31 2013-12-02 주식회사 팬택 사용자 정보와 소셜 네트워크 정보가 통합된 사용자 통합 정보를 제공하는 이동통신 단말 장치 및 방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101427262A (zh) * 2005-12-20 2009-05-06 通用仪表公司 用于基于面部识别提供用户简档的方法和装置
CN102025968A (zh) * 2009-09-15 2011-04-20 柯尼卡美能达商用科技株式会社 图像发送装置和图像发送方法
US20110275317A1 (en) * 2010-05-06 2011-11-10 Lg Electronics Inc. Mobile terminal and control method thereof
CN102623011A (zh) * 2011-01-31 2012-08-01 国际商业机器公司 信息处理装置、信息处理方法、信息处理***以及程序
US20120236103A1 (en) * 2011-02-23 2012-09-20 Supyo, Inc. Platform for pseudo-anonymous video chat with intelligent matching of chat partners

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104378553A (zh) * 2014-12-08 2015-02-25 联想(北京)有限公司 一种图像处理方法及电子设备
CN106658448A (zh) * 2016-11-30 2017-05-10 Tcl集团股份有限公司 一种语音通话方法及装置
CN107622496A (zh) * 2017-09-11 2018-01-23 广东欧珀移动通信有限公司 图像处理方法及装置
CN107707721A (zh) * 2017-11-06 2018-02-16 广东欧珀移动通信有限公司 移动终端的录音方法、装置、存储介质及移动终端
CN111405116A (zh) * 2020-03-23 2020-07-10 Oppo广东移动通信有限公司 通话信息的可视化方法、终端及计算机存储介质

Also Published As

Publication number Publication date
MX341764B (es) 2016-09-01
CN103813126B (zh) 2018-11-16
EP2728859A2 (en) 2014-05-07
KR101990536B1 (ko) 2019-06-18
EP2728859B1 (en) 2020-08-19
US20140125757A1 (en) 2014-05-08
MX2015005393A (es) 2015-07-21
US9247199B2 (en) 2016-01-26
KR20140057036A (ko) 2014-05-12
WO2014069943A1 (en) 2014-05-08
EP2728859A3 (en) 2015-05-06

Similar Documents

Publication Publication Date Title
CN103813126A (zh) 进行视频通话时提供用户感兴趣信息的方法及其电子装置
CN102595228B (zh) 内容同步设备和方法
CN104063175B (zh) 元数据标记***和用户终端装置
CN113992934B (zh) 多媒体信息处理方法、装置、电子设备和存储介质
CN109274999A (zh) 一种视频播放控制方法、装置、设备及介质
CN111343512B (zh) 信息获取方法、显示设备及服务器
EP3131254B1 (en) Mobile terminal and method for controlling the same
CN108228776B (zh) 数据处理方法、装置、存储介质及电子设备
CN103973880A (zh) 便携式设备和控制外部设备的方法
CN105191328A (zh) 显示装置和向显示装置提供用户接口的方法
WO2021169466A1 (zh) 信息收藏方法、电子设备及计算机可读存储介质
CN106358079A (zh) 图像显示装置及操作该图像显示装置的方法
CN106464976A (zh) 显示设备、用户终端设备、服务器及其控制方法
CN106060641A (zh) 用于搜索的显示装置及其控制方法
CN108040280A (zh) 内容项目显示方法及装置、存储介质
CN104853223A (zh) 视频流的插播方法及终端设备
US10936878B2 (en) Method and device for determining inter-cut time range in media item
TWI551130B (zh) 使用共享視訊裝置及個人裝置之個人化視訊內容消費技術
CN113946254B (zh) 内容显示方法、装置、设备及介质
KR20170043944A (ko) 디스플레이 장치 및 이의 제어 방법
EP2733954A1 (en) Display apparatus and method for delivering message thereof
CN111191063A (zh) 图片的分类方法、装置、终端及存储介质
WO2019082606A1 (ja) コンテンツ管理機器、コンテンツ管理システム、および、制御方法
JP2014110469A (ja) 電子機器、画像処理方法、及びプログラム
KR20190076621A (ko) 전자 장치 및 전자 장치에서 방송 콘텐트와 관련된 서비스 정보 제공 방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20181116

Termination date: 20211104