CN104735389B - 信息处理方法和信息处理设备 - Google Patents
信息处理方法和信息处理设备 Download PDFInfo
- Publication number
- CN104735389B CN104735389B CN201310717106.9A CN201310717106A CN104735389B CN 104735389 B CN104735389 B CN 104735389B CN 201310717106 A CN201310717106 A CN 201310717106A CN 104735389 B CN104735389 B CN 104735389B
- Authority
- CN
- China
- Prior art keywords
- information
- electronic equipment
- display image
- image
- voice messaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000010365 information processing Effects 0.000 title claims abstract description 124
- 238000003672 processing method Methods 0.000 title claims abstract description 84
- 230000006854 communication Effects 0.000 claims abstract description 165
- 238000004891 communication Methods 0.000 claims abstract description 151
- 230000004044 response Effects 0.000 claims abstract description 19
- 238000012986 modification Methods 0.000 claims description 30
- 230000004048 modification Effects 0.000 claims description 30
- 230000005540 biological transmission Effects 0.000 claims description 27
- 238000001514 detection method Methods 0.000 claims description 14
- 238000010586 diagram Methods 0.000 claims description 10
- 230000008859 change Effects 0.000 claims description 9
- 230000005611 electricity Effects 0.000 claims description 7
- 238000000034 method Methods 0.000 description 20
- 238000012545 processing Methods 0.000 description 15
- 230000008569 process Effects 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 210000004209 hair Anatomy 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 241000208340 Araliaceae Species 0.000 description 2
- 235000005035 Panax pseudoginseng ssp. pseudoginseng Nutrition 0.000 description 2
- 235000003140 Panax quinquefolius Nutrition 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 235000008434 ginseng Nutrition 0.000 description 2
- 235000020094 liqueur Nutrition 0.000 description 2
- 235000020354 squash Nutrition 0.000 description 2
- 230000001360 synchronised effect Effects 0.000 description 2
- 241000406668 Loxodonta cyclotis Species 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000004069 differentiation Effects 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 238000007689 inspection Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000002123 temporal effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/147—Communication arrangements, e.g. identifying the communication as a video-communication, intermediate storage of the signals
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Information Transfer Between Computers (AREA)
- Telephonic Communication Services (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供了一种信息处理方法和信息处理设备,应用于服务器,所述信息处理方法包括:响应于第一电子设备与第二电子设备之间通信链路的建立,获取第一电子设备的第一用户的第一显示图像;从所述第一电子设备接收第一媒体信息,所述第一媒体信息包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息;基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像;以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息。
Description
技术领域
本发明涉及信息处理的领域,更具体地,本发明涉及一种信息处理方法和信息处理设备。
背景技术
随着信息技术的发展,诸如视频通信的网络通信越来越普遍。在这样的网络通信的过程中,通信双方不仅能够听到通过通信对方的音频输入设备(如麦克风等)所采集的通信对方的语音,还能够看到通过通信对方的视频输入设备(如摄像头等)所采集的通信对方的图像。
然而,存在用户不太希望在网络通信过程中暴露自身形象的场合,例如,当通信双方是陌生人或不太熟悉的人时,当用户由于通信建立时的个人形象不整洁等的情况而不希望暴露真实面容时,等等。由于这些情况的存在,阻碍了视频通信的广泛应用。
发明内容
有鉴于上述情况,本发明提供了一种信息处理方法和信息处理设备,其既能够使得用户在视频通信的过程中不暴露自身的真实形象,又能够使得通信对方用户在视频通信的过程中真实而同步地感受到所述用户的细微改变,如所述用户的神情、动作等的改变,从而极大丰富并改进了用户的体验。
进一步地,本发明提供了一种信息处理方法和信息处理设备,其不仅能够如上所述改进用户体验,还能够显著地降低视频通信中的传输数据量,从而能够提高传输效率,使得视频通信更加流畅。
根据本发明一实施例,提供了一种信息处理方法,应用于服务器,所述信息处理方法包括:响应于第一电子设备与第二电子设备之间通信链路的建立,获取第一电子设备的第一用户的第一显示图像;从所述第一电子设备接收第一媒体信息,所述第一媒体信息包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息;基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像;以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息。
所述第一显示图像通过以下步骤生成:获取第三显示图像;从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成;以及基于所述第三显示图像和所述调整信息,生成所述第一显示图像。
获取第三显示图像的步骤包括:根据从所述第一电子设备接收的参考信息,基于预定策略而从多个候选图像中选择所述第三显示图像。
所述生成第二显示图像的步骤包括:基于所述第一媒体信息中所包含的第一特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
所述生成第二显示图像的步骤包括:对所述第一媒体信息中的所述第一语音信息进行语音识别,以获得第二特征信息;以及基于所述第二特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
所述信息处理方法还包括:对所述第一语音信息进行识别;对识别后的所述第一语音信息进行转换,以生成转换后的第一语音信息以及第三特征信息;并且,所述生成第二显示图像的步骤包括:基于所述第一特征信息和所述第三特征信息,对所述第一显示图像进行修改,以生成第二显示图像;将所述第二显示图像和所述第一语音信息发送至所述第二电子设备的步骤包括:将所述第二显示图像和所述转换后的第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述转换后的第一语音信息。
所述第一媒体信息还包含所述第一电子设备所采集的所述第一用户的第一视频信息,所述信息处理方法还包括:在生成第二显示图像之前,获取表示所述通信链路的通信状态的通信状态信息,所述通信状态信息从所述第一电子设备与所述第二电子设备中的至少一个接收或由所述服务器检测;判断所述通信状态信息是否符合切换条件;以及当判断所述通信状态信息符合切换条件时,生成所述第二显示图像以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备;当判断所述通信状态信息不符合切换条件时,将所述第一视频信息和所述第一语音信息发送至所述第二电子设备,其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
根据本发明另一实施例,提供了一种信息处理方法,应用于第一电子设备,所述信息处理方法包括:响应于所述第一电子设备与第二电子设备之间通信链路的建立,采集所述第一用户的第一语音信息;检测所述第一用户的形象,以生成表示所述第一用户的形象的第一特征信息;以及将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器,使得所述服务器基于所述第一媒体信息执行修改操作并将所述第一语音信息和作为所述修改操作的结果的第二显示图像发送至所述第二电子设备;或者,将所述第一语音信息与所述第一特征信息发送至所述第二电子设备,使得所述第二电子设备执行所述修改操作;其中,所述修改操作包括:获取第一显示图像,并基于所述第一媒体信息对所述第一显示图像进行修改,以生成所述第二显示图像;并且其中,所述第二电子设备输出所述第二显示图像和所述第一语音信息。
所述信息处理方法还包括:响应于所述第一电子设备与第二电子设备之间通信链路的建立,通过摄像单元采集所述第一用户的第一视频信息;检测表示所述通信链路的通信状态的通信状态信息;判断所述通信状态信息是否满足切换条件;当判断所述通信状态信息满足所述切换条件时,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器;当判断所述通信状态信息不满足所述切换条件时,将所述第一语音信息与所述第一视频信息通过所述服务器发送至所述第二电子设备。
所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
根据本发明另一实施例,提供了一种信息处理设备,应用于服务器,所述信息处理设备包括:第一获取单元,响应于第一电子设备与第二电子设备之间通信链路的建立,获取第一电子设备的第一用户的第一显示图像;第一接收单元,从所述第一电子设备接收第一媒体信息,所述第一媒体信息包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息;第一生成单元,基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像;以及发送单元,将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息。
所述信息处理设备还包括:第二获取单元,获取第三显示图像;第二接收单元,从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成;以及第二生成单元,基于所述第三显示图像和所述调整信息,生成所述第一显示图像。
所述第二获取单元配置为:根据从所述第一电子设备接收的参考信息,基于预定策略而从多个候选图像中选择所述第三显示图像。
所述第一生成单元包括:第一修改单元,基于所述第一媒体信息中所包含的第一特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
所述第一生成单元包括:识别单元,对所述第一媒体信息中的所述第一语音信息进行语音识别,以获得第二特征信息;以及第二修改单元,基于所述第二特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
所述信息处理设备还包括:识别单元,对所述第一语音信息进行识别;转换单元,对识别后的所述第一语音信息进行转换,以生成转换后的第一语音信息以及第三特征信息;并且,所述第一生成单元包括:第三修改单元,基于所述第一特征信息和所述第三特征信息,对所述第一显示图像进行修改,以生成第二显示图像;所述发送单元配置为:将所述第二显示图像和所述转换后的第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述转换后的第一语音信息。
所述第一媒体信息还包含所述第一电子设备所采集的所述第一用户的第一视频信息,所述信息处理设备还包括:第三获取单元,在生成第二显示图像之前,获取表示所述通信链路的通信状态的通信状态信息,所述通信状态信息从所述第一电子设备与所述第二电子设备中的至少一个接收或由所述服务器检测;判断单元,判断所述通信状态信息是否符合切换条件;并且,所述发送单元配置为:当判断所述通信状态信息符合切换条件时,生成所述第二显示图像以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备;当判断所述通信状态信息不符合切换条件时,将所述第一视频信息和所述第一语音信息发送至所述第二电子设备,其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
根据本发明另一实施例,提供了一种信息处理设备,应用于第一电子设备,所述信息处理设备包括:第一采集单元,响应于所述第一电子设备与第二电子设备之间通信链路的建立,采集所述第一用户的第一语音信息;第一检测单元,检测所述第一用户的形象,以生成表示所述第一用户的形象的第一特征信息;以及发送单元,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器,使得所述服务器基于所述第一媒体信息执行修改操作并将所述第一语音信息和作为所述修改操作的结果的第二显示图像发送至所述第二电子设备;或者,将所述第一语音信息与所述第一特征信息发送至所述第二电子设备,使得所述第二电子设备执行所述修改操作;其中,所述修改操作包括:获取第一显示图像,并基于所述第一媒体信息对所述第一显示图像进行修改,以生成所述第二显示图像;并且其中,所述第二电子设备输出所述第二显示图像和所述第一语音信息。
所述信息处理设备还包括:第二采集单元,响应于所述第一电子设备与第二电子设备之间通信链路的建立,通过摄像单元采集所述第一用户的第一视频信息;第二检测单元,检测表示所述通信链路的通信状态的通信状态信息;判断单元,判断所述通信状态信息是否满足切换条件;所述发送单元配置为当判断所述通信状态信息满足所述切换条件时,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器;当判断所述通信状态信息不满足所述切换条件时,将所述第一语音信息与所述第一视频信息通过所述服务器发送至所述第二电子设备。
所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
在本发明实施例的信息处理方法和信息处理设备中,通过在通信过程中,获取表示用户的虚拟形象的显示图像,并基于用户在通信过程中的表现(如神情、动作的改变等等)而修改所述虚拟形象,并将修改后的显示图像发送至通信对方,从而能够在通信过程中不暴露用户真实形象的同时使得通信对方用户同步而有真实感地感受到所述用户在通信过程中的表现,与仅仅使用诸如卡通形象等的任意图像来代替的方式相比,增加真实感和现场感,从而极大丰富并改进了用户的体验。
进一步地,在本发明实施例的信息处理方法和信息处理设备中,由于所述用户侧的电子设备仅需向服务器发送对图像进行分析之后的特征信息而非摄像头采集的视频图像信息和/或所述通信对方侧的电子设备仅需从服务器接收虚拟形象信息而非摄像头采集的视频图像信息,其传输数据量显著小于通信双方发送/接收摄像头采集的视频图像信息的情况,因此,本发明实施例的信息处理方法和信息处理设备能够降低传输数据量,提高通信效率,使得通信更加流畅。
附图说明
图1是图示根据本发明实施例的信息处理方法的流程图;
图2是图示根据本发明另一实施例的信息处理方法的流程图;
图3是图示根据本发明实施例的信息处理设备的主要配置的框图;以及
图4是图示根据本发明另一实施例的信息处理设备的主要配置的框图。
具体实施方式
以下将参考附图详细描述本发明实施例。
首先,将描述根据本发明实施例的信息处理方法。
本发明实施例的信息处理方法应用于一服务器。所述服务器可以与诸如第一电子设备和第二电子设备的多个电子设备通信。所述第一电子设备和所述第二电子设备例如为手机、平板电脑或PC等的具有通信功能的电子设备。具体地,在通信过程中,所述第一电子设备可以将通信信息(如语音信息、视频信息等)发送到所述服务器。所述服务器从所述第一电子设备和所述第二电子设备之一接收所述通信信息,并将其转发到所述第一电子设备和所述第二电子设备中的另一方,由此实现所述第一电子设备和所述第二电子设备之间的通信。
下面,将参照图1详细描述本发明实施例的信息处理方法。
如图1所示,在本发明实施例的信息处理方法开始时,首先,所述第一电子设备与所述第二电子设备之间建立了通信链路,即,所述第一电子设备要与所述第二电子设备开始通信。由此,在步骤S101,所述信息处理方法响应于第一电子设备与第二电子设备之间通信链路的建立,获取第一电子设备的第一用户的第一显示图像。也即,所述信息处理方法获取登陆所述第一电子设备的第一用户所对应的第一账号的第一显示图像。
与传统视频通信中通过第一电子设备的摄像头所采集的第一用户的真实形象的图像不同,在本发明实施例中,所述第一显示图像不是通过摄像头所采集的图像,而可以是表示所述第一电子设备的第一用户的虚拟形象的图像。
具体地,所述第一显示图像可以是基于所述第一用户的真实形象而预先或在通信过程中所生成的虚拟形象。
更具体地,在一示例中,所述第一显示图像可以通过以下步骤而生成。首先,所述信息处理方法获取第三显示图像。所述第三显示图像可以是与所述第一显示图像相对应的基准形象的图像。例如,在所述第一显示图像为表示所述第一用户的面部形象的图像的情况下,所述第三显示图像可以是基准面部形象的图像。又例如,在所述第一显示图像为表示所述第一用户的半身/全身形象的图像的情况下,所述第三显示图像可以是基准半身/全身形象的图像。以下,为描述方便,适当时将所述第三显示图像称为基准形象/图像,而将所述第一显示图像称为虚拟形象/图像。
此外,所述第三显示图像可以预先存储在所述服务器中。替代地,所述第三显示图像也可以在需要时从外部存储体(如第一电子设备、第二电子设备或其他的服务器等等)获取。
接下来,所述信息处理方法可以从所述第一电子设备接收调整信息。所述调整信息是用于对所述基准形象进行调整、以使得所述基准形象更符合所述用户的真实形象的信息。例如,在基准形象为面部形象的情况下,所述调整信息可以包含关于面部五官、发型、眉形、肤色、发色、纹理等等的细节(特征)的信息。
在一示例中,所述调整信息由所述第一电子设备根据所述第一用户的指示而生成,并从所述第一电子设备发送至所述服务器。具体地,所述第一电子设备可以获取所述基准形象,并将所述基准形象呈现给所述第一用户。此外,所述第一电子设备还可向所述第一用户呈现关于上述各种特征的备选项。所述备选项可以以图形形式呈现,并根据用户的选择而与所述基准形象叠加/替代显示,以方便用户直观预览到调整后的结果并从而进行确认。此后,所述第一电子设备接收用户关于各种特征的选择和确认,并由此相应生成所述调整信息。
在另一示例中,所述调整信息由所述第一电子设备通过检测所述第一用户的特征而自动生成,并从所述第一电子设备发送至所述服务器。具体地,一方面,所述第一电子设备可以获取所述基准形象。另一方面,所述第一电子设备例如可以通过摄像头而检测所述第一用户的特征,例如如上所述的面部五官、发型、眉形、肤色、发色、纹理等等。接下来,所述第一电子设备自动将所述特征与所述基准形象进行比对,以生成调整信息。所述比对处理的细节为图像处理领域的技术人员所知,在此不再详述。当然,以上所述的检测第一用户的特征而生成调整信息的方式仅为示例。本领域技术人员完全可以根据其他各种技术而生成所述调整信息,其都在本发明的范围内。
在所述信息处理方法通过如上所述的各种方式而从所述第一电子设备获取所述调整信息之后,所述信息处理方法基于所述第三显示图像和所述调整信息,生成所述第一显示图像。
具体地,所述信息处理方法可以在所述第三显示图像(基准形象)的基础之上,依据所述调整信息进行调整,从而生成所述第一显示图像(虚拟形象)。所述信息处理方法可以采取现有的各种图像处理方法而生成所述第一显示图像,在此不再详述。
此外,关于上述的基准形象,所述信息处理方法可以获取唯一的图像作为所述上述基准形象。替代地,所述信息处理方法也可以基于预定策略,从多个候选图像中选择一个作为针对所述第一用户的基准形象。
具体地,在一实施例中,所述信息处理方法中可以预先存储多个候选图像,如针对不同性别的候选图像、不同人种的候选图像等等。
此外,所述信息处理方法可以预先从所述第一电子设备接收一参考信息。所述参考信息是用于帮助所述服务器从多个候选图像中进行选择的参考信息。在第一示例中,所述参考信息可以是所述第一电子设备的第一用户的音频信息。由此,所述信息处理方法通过对所述音频信息进行分析,识别出所述第一用户的性别为女性,从而从多个候选图像中选择女性候选图像作为基准形象。
在第二示例中,所述信息处理方法可以通过对所述音频信息进行语音识别,识别出所述第一用户的语言,进而确定所述第一用户的人种,从而从多个候选图像中选择相应人种的候选图像作为基准形象。
在第三示例中,所述参考信息可以是所述第一电子设备的第一用户的地理位置信息。由此,所述信息处理方法可以通过所述地理位置信息确定所述第一用户的人种,从而从多个候选图像中选择相应人种的候选图像作为基准形象。
在第四示例中,所述参考信息可以是所述第一电子设备的第一用户的图像/视频信息,即,通过所述第一电子设备的摄像头采集的所述第一用户的图像/视频。由此,所述信息处理方法可以对所述图像/视频进行图像识别,以将其与多个候选图像进行相似度匹配,并从所述多个候选图像中选择相似度匹配最高的候选图像作为基准形象。
需要注意的是,以上所述的各种参考信息及相应的策略和处理方式仅为示例。本领域技术人员完全可以在此基础之上设计其他各种参考信息及相应的策略和处理方法,其都在本发明范围内。此外,本领域技术人员可以将各种参考信息及其策略进行组合,以更精确地选择最适合的基准形象。
通过以上所述的处理,所述信息处理方法可以根据用户的特征而自动为用户选择最接近的基准形象,从而降低了此后的生成调整信息、以及基于调整信息生成虚拟形象的过程中的数据处理量和数据传输量,提高了处理效率。
在通过如上所述的步骤S101的处理而获取了第一用户的虚拟形象之后,在步骤S102,所述信息处理方法从所述第一电子设备接收第一媒体信息。
具体地,所述第一媒体信息可以包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息。
更具体地,所述第一语音信息为所述第一用户在所述通信过程中所产生的语音信息。所述第一特征信息为所述第一用户的特征在所述通信过程中所产生的变化的信息,例如,关于用户面部神情的变化、口型的变化、手势的变化等等的信息。所述第一特征信息由所述第一电子设备的摄像头通过检测所述第一用户并进行图像识别而获得。
接下来,在步骤S103,所述信息处理方法基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像。
具体地,在一实施例中,所述信息处理方法可以基于所述第一媒体信息中所包含的第一特征信息,对所述第一显示图像进行修改,以生成第二显示图像。所述信息处理方法可以采取各种图像处理方式,例如与基于调整信息修改基准形像以生成虚拟形象的处理方式类似的方式,基于所述第一特征信息对所述虚拟形象进行修改,以生成第二显示图像,即,反应所述第一用户在通信过程中的实时变化的实时虚拟形象。
在另一实施例中,所述信息处理方法可以对所述第一媒体信息中的所述第一语音信息进行语音识别,以获得第二特征信息。此后,所述信息处理方法基于所述第二特征信息,对所述第一显示图像进行修改,以生成第二显示图像。例如,所述信息处理方法可以通过所述语音识别,获得所述第一用户的语言信息作为所述第二特征信息。此后,所述信息处理方法可以基于所述语言信息,获取与所述语言信息相对应的唇部动作(口型),从而基于所述唇部动作对所述第一显示图像进行修改,以生成所述第二显示图像。
进一步地,在又一实施例中,假设所述第一电子设备侧的第一用户的第一语种与通信对方的第二电子设备侧的第二用户的第二语种不同,所述信息处理方法还可以自动对其进行转换。
具体地,在此实施例中,所述信息处理方法可以对所述第一语音信息进行识别,并对识别后的所述第一语音信息进行转换即翻译,从而以生成转换后的第一语音信息以及第三特征信息。所述转换后的第一语音信息的语种对应于所述第二语种。所述第三特征信息为所述第一语音信息所对应的含义在第二语种中相应的唇部动作的信息。由此,所述信息处理方法基于所述第三特征信息,对所述第一显示图像进行修改。当然,此时,所述信息处理方法还可以基于所述第一特征信息,对所述第一显示图像进行修改。此后,所述信息处理方法将所述第二显示图像和所述转换后的第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述转换后的第一语音信息。
由此,所生成的第二显示图像中,不仅能够体现基于所述第一特征信息所得到的所述第一用户的神情(如眨眼等)的变化,还能够体现基于所述第三特征信息所得到的所述第一用户的唇部动作的变化。而且,在此实施例中,所述信息处理方法自动将不同语种的用户的语言进行翻译,并转换对应的唇部动作,从而实现了不同语种的用户之间的顺畅的沟通,且所显示的虚拟形象的唇部动作与接收方所收听到的语言一致,进一步增强了用户体验。
在通过如上所述的步骤S103的操作生成了第二显示图像之后,在步骤S104,所述信息处理方法将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息。
以上描述了本发明实施例的信息处理方法。在本发明实施例的信息处理方法中,通过在通信过程中,获取表示用户的虚拟形象的显示图像,并基于用户在通信过程中的表现(如神情、动作的改变等等)而修改所述虚拟形象,并将修改后的显示图像发送至通信对方,从而能够在通信过程中不暴露用户真实形象的同时使得通信对方用户同步而有真实感地感受到所述用户在通信过程中的表现,与仅仅使用诸如卡通形象等的任意图像来代替的方式相比,增加面对面通信的真实感和现场感,从而极大丰富并改进了用户的体验。
进一步地,在本发明实施例的信息处理方法中,由于所述用户侧的电子设备仅需向服务器发送对图像进行分析之后的特征信息而非摄像头采集的视频图像信息和/或所述通信对方侧的电子设备仅需从服务器接收虚拟形象信息而非摄像头采集的视频图像信息,其传输数据量显著小于通信双方发送/接收摄像头采集的视频图像信息的情况,因此,本发明实施例的信息处理方法能够降低传输数据量,提高通信效率,使得通信更加流畅。
具体地,通过本发明实施例的信息处理方法,所述第一电子设备和/或所述第二电子设备能够根据网络通信状况,而选择传输通过摄像头采集的视频图像信息还是如上所述的虚拟形象信息。
更具体地,所述第一媒体信息还可包含所述第一电子设备所采集的所述第一用户的第一视频信息。在生成第二显示图像之前,所述第一电子设备、所述第二电子设备、所述服务器中的至少一个可以检测表示所述通信链路的通信状态的通信状态信息,例如包括上行传输速率、下行传输速率、丢包率、网络带宽等等参数的信息。在所述第一电子设备和/或所述第二电子设备检测所述通信状态信息的情况下,所述第一电子设备和/或所述第二电子设备进一步讲所检测的所述通信状态信息发送至所述服务器。由此,所述服务器获取所述通信状态信息,并判断所述通信状态信息是否符合切换条件。所述切换条件可以由所述服务器根据需要任意设置。例如,所述信息处理方法可以判断传输速率是否低于预定阈值。又例如,所述信息处理方法可以判断网络带宽是否低于预定阈值,等等。当然,以上所述的切换条件仅为示例。本领域技术人员可以根据通信状态信息所包含的不同参数而相应地设置切换条件。
当判断所述通信状态信息符合切换条件时,所述信息处理方法通过如上所述的处理生成所述第二显示图像,并将所述第二显示图像和所述第一语音信息发送至所述第二电子设备。另一方面,当判断所述通信状态信息不符合切换条件时,所述信息处理方法将所述第一视频信息和所述第一语音信息发送至所述第二电子设备。所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
需要指出的是,上面以服务器侧判断是否满足切换条件并执行相应的切换处理为例进行了描述。本领域技术人员应当理解,上述判断及切换的处理可以类似地在终端侧的第一电子设备和/或第二电子设备执行。
也就是说,本发明实施例的信息处理方法能够根据网络通信状态而自动选择相应的传输图像。就发送端的电子设备(第一电子设备)而言,当网络通信状态较好时,即,当不满足切换条件时,所述第一电子设备将通过其摄像头所采集的用户的视频图像发送至所述服务器,并由服务器转发至通信对方的第二电子设备,从而使得通信对方用户能够更真实地感受到面对面通信的感觉。另一方面,当网络通信状态较差时,即,当满足切换条件时,所述第一电子设备将通过如上所述的处理生成的第一特征信息发送至所述服务器,所述服务器基于所述第一特征信息生成虚拟形象并将其转发至第二电子设备,从而使得所述第一电子设备的传输数据量显著减小,并能够在使得通信对方用户有较好的通信真实感和亲切感的同时使得通信更加流畅,提高通信效率。
另一方面,就接收端的电子设备(第二电子设备)而言,当网络通信状态较好时,即,当不满足切换条件时,所述第二电子设备从所述服务器接收由所述第一电子设备通过其摄像头所采集的用户的视频图像,从而能够更真实地感受到面对面通信的感觉。另一方面,当网络通信状态较差时,即,当满足切换条件时,所述第二电子设备从所述服务器接收大小显著小于视频图像的虚拟形象,从而能够在使得用户有较好的通信真实感和亲切感的同时使得通信更加流畅,提高通信效率。
以上,参照图1描述了应用于服务器的本发明实施例的信息处理方法。
下面,将参照图2,描述本发明另一实施例的信息处理方法。
本发明此实施例的信息处理方法应用于一电子设备。所述电子设备为诸如手机、平板电脑、PC等的具有通信功能的电子设备。所述电子设备通过服务器与另一电子设备进行通信。以下,为描述方便,将所述电子设备称为第一电子设备,并将所述第一电子设备的通信对方称为第二电子设备。
如图2所示,首先,在步骤S201,所述信息处理方法响应于所述第一电子设备与第二电子设备之间通信链路的建立,采集所述第一用户的第一语音信息。
接下来,在步骤S202,所述信息处理方法检测所述第一用户的形象,以生成表示所述第一用户的形象的第一特征信息。
此后,在步骤S203,所述信息处理方法将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器,使得所述服务器基于所述第一媒体信息执行修改操作并将所述第一语音信息和作为所述修改操作的结果的第二显示图像发送至所述第二电子设备;或者,将所述第一语音信息与所述第一特征信息发送至所述第二电子设备,使得所述第二电子设备执行所述修改操作。所述修改操作包括:获取第一显示图像,并基于所述第一媒体信息对所述第一显示图像进行修改,以生成所述第二显示图像。所述第二电子设备输出所述第二显示图像和所述第一语音信息。
以上步骤S201-S203的详细处理已经在参照图1的信息处理方法中进行描述,在此不再重复。
需要指出的是,如上所述,基于第一媒体信息对第一显示图像进行修改以生成第二显示图像的修改操作可以如上述实施例中那样在服务器侧执行,从而降低终端侧的处理负担。替代地,在终端侧的处理能力较强的情况下,所述修改操作也可以在接收端的电子设备执行,从而服务器仅需转发包含第一特征信息的第一媒体信息,而无需转发第一视频信息,从而更进一步降低了传输数据量,提高了通信效率。
此外,在另一实施例中,所述信息处理方法还可包括:响应于所述第一电子设备与第二电子设备之间通信链路的建立,通过摄像单元采集所述第一用户的第一视频信息;检测表示所述通信链路的通信状态的通信状态信息;判断所述通信状态信息是否满足切换条件;当判断所述通信状态信息满足所述切换条件时,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器;当判断所述通信状态信息不满足所述切换条件时,将所述第一语音信息与所述第一视频信息通过所述服务器发送至所述第二电子设备。所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
以上,参照图1和图2描述了本发明实施例的信息处理方法。下面,将参照图3和图4描述本发明实施例的信息处理设备。
首先,参照图3,其图示了本发明实施例的信息处理设备。所述信息处理设备应用于服务器。如图3所示,本发明实施例的信息处理设备300包括:第一获取单元301、第一接收单元302、第一生成单元303和发送单元304。
所述第一获取单元301响应于第一电子设备与第二电子设备之间通信链路的建立,获取第一电子设备的第一用户的第一显示图像。
所述第一接收单元302从所述第一电子设备接收第一媒体信息,所述第一媒体信息包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息。
所述第一生成单元303基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像。
所述发送单元304将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息。
在一实施例中,所述信息处理设备300还包括:第二获取单元、第二接收单元和第二生成单元。所述第二获取单元获取第三显示图像。所述第二接收单元从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成。所述第二生成单元基于所述第三显示图像和所述调整信息,生成所述第一显示图像。
在另一实施例中,所述第二获取单元配置为:根据从所述第一电子设备接收的参考信息,基于预定策略而从多个候选图像中选择所述第三显示图像。
在另一实施例中,所述第一生成单元303包括:第一修改单元,基于所述第一媒体信息中所包含的第一特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
在另一实施例中,所述第一生成单元303包括:识别单元,对所述第一媒体信息中的所述第一语音信息进行语音识别,以获得第二特征信息;以及第二修改单元,基于所述第二特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
在另一实施例中,所述信息处理设备300还包括:识别单元,对所述第一语音信息进行识别;转换单元,对识别后的所述第一语音信息进行转换,以生成转换后的第一语音信息以及第三特征信息;并且,所述第一生成单元303包括:第三修改单元,基于所述第一特征信息和所述第三特征信息,对所述第一虚拟形象进行修改,以生成第二显示图像;所述发送单元304配置为:将所述第二显示图像和所述转换后的第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述转换后的第一语音信息。
在另一实施例中,所述第一媒体信息还包含所述第一电子设备所采集的所述第一用户的第一视频信息,所述信息处理设备300还包括:第三获取单元,在生成第二显示图像之前,获取表示所述通信链路的通信状态的通信状态信息,所述通信状态信息从所述第一电子设备与所述第二电子设备中的至少一个接收或由所述服务器检测;判断单元,判断所述通信状态信息是否符合切换条件;并且,所述发送单元304配置为:当判断所述通信状态信息符合切换条件时,生成所述第二显示图像以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备;当判断所述通信状态信息不符合切换条件时,将所述第一视频信息和所述第一语音信息发送至所述第二电子设备,其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
所述信息处理设备300的各单元的配置和操作已经在参照图1所述的信息处理方法中详细描述,在此不再重复。
下面,将参照图4描述本发明另一实施例的信息处理设备。本发明实施例的信息处理设备应用于一电子设备,以下将其称之为第一电子设备。如图4所示,本发明实施例的信息处理设备400包括:第一采集单元401、第一检测单元402、发送单元403。
所述第一采集单元401响应于所述第一电子设备与第二电子设备之间通信链路的建立,采集所述第一用户的第一语音信息。
所述第一检测单元402检测所述第一用户的形象,以生成表示所述第一用户的形象的第一特征信息。
所述发送单元403将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器,使得所述服务器基于所述第一媒体信息执行修改操作并将所述第一语音信息和作为所述修改操作的结果的第二显示图像发送至所述第二电子设备;或者,将所述第一语音信息与所述第一特征信息发送至所述第二电子设备,使得所述第二电子设备执行所述修改操作;其中,所述修改操作包括:获取第一显示图像,并基于所述第一媒体信息对所述第一显示图像进行修改,以生成所述第二显示图像;并且其中,所述第二电子设备输出所述第二显示图像和所述第一语音信息。
在一实施例中,所述信息处理设备400还包括:第二采集单元,响应于所述第一电子设备与第二电子设备之间通信链路的建立,通过摄像单元采集所述第一用户的第一视频信息;第二检测单元,检测表示所述通信链路的通信状态的通信状态信息;判断单元,判断所述通信状态信息是否满足切换条件;所述发送单元403配置为当判断所述通信状态信息满足所述切换条件时,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器;当判断所述通信状态信息不满足所述切换条件时,将所述第一语音信息与所述第一视频信息通过所述服务器发送至所述第二电子设备。
在另一实施例中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
以上,参照图3和图4描述了本发明实施例的信息处理设备。在本发明实施例的信息处理设备中,通过在通信过程中,获取表示用户的虚拟形象的显示图像,并基于用户在通信过程中的表现(如神情、动作的改变等等)而修改所述虚拟形象,并将修改后的显示图像发送至通信对方,从而能够在通信过程中不暴露用户真实形象的同时使得通信对方用户同步而有真实感地感受到所述用户在通信过程中的表现,与仅仅使用诸如卡通形象等的任意图像来代替的方式相比,增加真实感和现场感,从而极大丰富并改进了用户的体验。
进一步地,在本发明实施例的信息处理设备中,由于所述用户侧的电子设备仅需向服务器发送对图像进行分析之后的特征信息而非摄像头采集的视频图像信息和/或所述通信对方侧的电子设备仅需从服务器接收虚拟形象信息而非摄像头采集的视频图像信息,其传输数据量显著小于通信双方发送/接收摄像头采集的视频图像信息的情况,因此,本发明实施例的信息处理设备能够降低传输数据量,提高通信效率,使得通信更加流畅。
以上,参照图1到图4描述了根据本发明实施例的信息处理方法和信息处理设备。
需要说明的是,在本说明书中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个......”限定的要素,并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
此外,需要说明的是,在本说明书中,类似“第一...单元”、“第二...单元”的表述仅为了在描述时方便区分,而并不意味着其必须实现为物理分离的两个或多个单元。事实上,根据需要,所述单元可以整体实现为一个单元,也可以实现为多个单元。
最后,还需要说明的是,上述一系列处理不仅包括以这里所述的顺序按时间序列执行的处理,而且包括并行或分别地、而不是按时间顺序执行的处理。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到本发明可借助软件加必需的硬件平台的方式来实现,当然也可以全部通过硬件来实施。基于这样的理解,本发明的技术方案对背景技术做出贡献的全部或者部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例或者实施例的某些部分所述的方法。
在本发明实施例中,单元/模块可以用软件实现,以便由各种类型的处理器执行。举例来说,一个标识的可执行代码模块可以包括计算机指令的一个或多个物理或者逻辑块,举例来说,其可以被构建为对象、过程或函数。尽管如此,所标识模块的可执行代码无需物理地位于一起,而是可以包括存储在不同位里上的不同的指令,当这些指令逻辑上结合在一起时,其构成单元/模块并且实现该单元/模块的规定目的。
在单元/模块可以利用软件实现时,考虑到现有硬件工艺的水平,所以可以以软件实现的单元/模块,在不考虑成本的情况下,本领域技术人员都可以搭建对应的硬件电路来实现对应的功能,所述硬件电路包括常规的超大规模集成(VLSI)电路或者门阵列以及诸如逻辑芯片、晶体管之类的现有半导体或者是其它分立的元件。模块还可以用可编程硬件设备,诸如现场可编程门阵列、可编程阵列逻辑、可编程逻辑设备等实现。
以上对本发明进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。
Claims (16)
1.一种信息处理方法,应用于服务器,所述信息处理方法包括:
从第一电子设备接收关于第一用户的参考信息,所述参考信息用于帮助所述服务器从多个候选图像中进行选择;
根据所述参考信息并且基于预定策略,从所述多个候选图像中选择所述第一用户的第三显示图像;
从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成;
基于所述第三显示图像和所述调整信息,生成并且存储第一用户的第一显示图像;
响应于所述第一电子设备与第二电子设备之间通信链路的建立,获取所述第一电子设备的所述第一用户的所述第一显示图像;
从所述第一电子设备接收第一媒体信息,所述第一媒体信息包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息;
基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像;以及
将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息。
2.如权利要求1所述的信息处理方法,其中,所述生成第二显示图像的步骤包括:
基于所述第一媒体信息中所包含的第一特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
3.如权利要求1所述的信息处理方法,其中,所述生成第二显示图像的步骤包括:
对所述第一媒体信息中的所述第一语音信息进行语音识别,以获得第二特征信息;以及
基于所述第二特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
4.如权利要求1所述的信息处理方法,还包括:
对所述第一语音信息进行识别;
对识别后的所述第一语音信息进行转换,以生成转换后的第一语音信息以及第三特征信息;
并且,所述生成第二显示图像的步骤包括:
基于所述第一特征信息和所述第三特征信息,对所述第一显示图像进行修改,以生成第二显示图像;
将所述第二显示图像和所述第一语音信息发送至所述第二电子设备的步骤包括:
将所述第二显示图像和所述转换后的第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述转换后的第一语音信息。
5.如权利要求1所述的信息处理方法,其中,所述第一媒体信息还包含所述第一电子设备所采集的所述第一用户的第一视频信息,所述信息处理方法还包括:
在生成第二显示图像之前,获取表示所述通信链路的通信状态的通信状态信息,所述通信状态信息从所述第一电子设备与所述第二电子设备中的至少一个接收或由所述服务器检测;
判断所述通信状态信息是否符合切换条件;以及
当判断所述通信状态信息符合切换条件时,生成所述第二显示图像以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备;当判断所述通信状态信息不符合切换条件时,将所述第一视频信息和所述第一语音信息发送至所述第二电子设备,
其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
6.一种信息处理方法,应用于第一电子设备,所述信息处理方法包括:
响应于所述第一电子设备与第二电子设备之间通信链路的建立,采集第一用户的第一语音信息;
检测所述第一用户的形象,以生成表示所述第一用户的形象的第一特征信息;以及
将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器,使得所述服务器基于所述第一媒体信息执行修改操作并将所述第一语音信息和作为所述修改操作的结果的第二显示图像发送至所述第二电子设备;或者,将所述第一语音信息与所述第一特征信息发送至所述第二电子设备,使得所述第二电子设备执行所述修改操作;
其中,所述修改操作包括:获取第一显示图像,并基于所述第一媒体信息对所述第一显示图像进行修改,以生成所述第二显示图像,
其中,所述第二电子设备输出所述第二显示图像和所述第一语音信息,
其中,所述第一显示图像通过以下步骤生成:
获取第三显示图像;
从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成;以及
基于所述第三显示图像和所述调整信息,生成所述第一显示图像,
其中,获取第三显示图像的步骤包括:
根据从所述第一电子设备接收的参考信息,基于预定策略而从多个候选图像中选择所述第三显示图像。
7.如权利要求6所述的信息处理方法,还包括:
响应于所述第一电子设备与第二电子设备之间通信链路的建立,通过摄像单元采集所述第一用户的第一视频信息;
检测表示所述通信链路的通信状态的通信状态信息;
判断所述通信状态信息是否满足切换条件;
当判断所述通信状态信息满足所述切换条件时,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器;当判断所述通信状态信息不满足所述切换条件时,将所述第一语音信息与所述第一视频信息通过所述服务器发送至所述第二电子设备。
8.如权利要求7所述的信息处理方法,其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
9.一种信息处理设备,应用于服务器,所述信息处理设备包括:
第一获取单元,响应于第一电子设备与第二电子设备之间通信链路的建立,获取第一电子设备的第一用户的第一显示图像;
第一接收单元,从所述第一电子设备接收第一媒体信息,所述第一媒体信息包含所述第一电子设备所采集的所述第一用户的第一语音信息、以及表示所述第一用户的特征的第一特征信息;
第一生成单元,基于所述第一媒体信息,对所述第一显示图像进行修改,以生成第二显示图像;
发送单元,将所述第二显示图像和所述第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述第一语音信息;
第二获取单元,根据从所述第一电子设备接收的关于第一用户的参考信息,基于预定策略而从多个候选图像中选择所述第一用户的第三显示图像;
第二接收单元,从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成;以及
第二生成单元,基于所述第三显示图像和所述调整信息,生成所述第一显示图像。
10.如权利要求9所述的信息处理设备,其中,所述第一生成单元包括:
第一修改单元,基于所述第一媒体信息中所包含的第一特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
11.如权利要求9所述的信息处理设备,其中,所述第一生成单元包括:
识别单元,对所述第一媒体信息中的所述第一语音信息进行语音识别,以获得第二特征信息;以及
第二修改单元,基于所述第二特征信息,对所述第一显示图像进行修改,以生成第二显示图像。
12.如权利要求9所述的信息处理设备,还包括:
识别单元,对所述第一语音信息进行识别;
转换单元,对识别后的所述第一语音信息进行转换,以生成转换后的第一语音信息以及第三特征信息;
并且,所述第一生成单元包括:
第三修改单元,基于所述第一特征信息和所述第三特征信息,对所述第一显示图像进行修改,以生成第二显示图像;
所述发送单元配置为:
将所述第二显示图像和所述转换后的第一语音信息发送至所述第二电子设备,以在所述第二电子设备输出所述第二显示图像和所述转换后的第一语音信息。
13.如权利要求9所述的信息处理设备,其中,所述第一媒体信息还包含所述第一电子设备所采集的所述第一用户的第一视频信息,所述信息处理设备还包括:
第三获取单元,在生成第二显示图像之前,获取表示所述通信链路的通信状态的通信状态信息,所述通信状态信息从所述第一电子设备与所述第二电子设备中的至少一个接收或由所述服务器检测;
判断单元,判断所述通信状态信息是否符合切换条件;
并且,所述发送单元配置为:
当判断所述通信状态信息符合切换条件时,生成所述第二显示图像以及将所述第二显示图像和所述第一语音信息发送至所述第二电子设备;当判断所述通信状态信息不符合切换条件时,将所述第一视频信息和所述第一语音信息发送至所述第二电子设备,
其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
14.一种信息处理设备,应用于第一电子设备,所述信息处理设备包括:
第一采集单元,响应于所述第一电子设备与第二电子设备之间通信链路的建立,采集第一用户的第一语音信息;
第一检测单元,检测所述第一用户的形象,以生成表示所述第一用户的形象的第一特征信息;以及
发送单元,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器,使得所述服务器基于所述第一媒体信息执行修改操作并将所述第一语音信息和作为所述修改操作的结果的第二显示图像发送至所述第二电子设备;或者,将所述第一语音信息与所述第一特征信息发送至所述第二电子设备,使得所述第二电子设备执行所述修改操作;
其中,所述修改操作包括:获取第一显示图像,并基于所述第一媒体信息对所述第一显示图像进行修改,以生成所述第二显示图像,
其中,所述第二电子设备输出所述第二显示图像和所述第一语音信息,
其中,所述第一显示图像通过以下生成:
获取第三显示图像;
从所述第一电子设备接收调整信息,所述调整信息通过所述第一电子设备检测所述第一用户的特征而生成、或通过所述第一电子设备接收所述第一用户的指示而生成;以及
基于所述第三显示图像和所述调整信息,生成所述第一显示图像,
其中,获取第三显示图像包括:
根据从所述第一电子设备接收的参考信息,基于预定策略而从多个候选图像中选择所述第三显示图像。
15.如权利要求14所述的信息处理设备,还包括:
第二采集单元,响应于所述第一电子设备与第二电子设备之间通信链路的建立,通过摄像单元采集所述第一用户的第一视频信息;
第二检测单元,检测表示所述通信链路的通信状态的通信状态信息;
判断单元,判断所述通信状态信息是否满足切换条件;
所述发送单元配置为当判断所述通信状态信息满足所述切换条件时,将所述第一语音信息与所述第一特征信息作为第一媒体信息而发送至服务器;当判断所述通信状态信息不满足所述切换条件时,将所述第一语音信息与所述第一视频信息通过所述服务器发送至所述第二电子设备。
16.如权利要求15所述的信息处理设备,其中,所述第二显示图像的传输数据量小于所述第一视频信息的传输数据量。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310717106.9A CN104735389B (zh) | 2013-12-23 | 2013-12-23 | 信息处理方法和信息处理设备 |
US14/500,317 US20150181161A1 (en) | 2013-12-23 | 2014-09-29 | Information Processing Method And Information Processing Apparatus |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201310717106.9A CN104735389B (zh) | 2013-12-23 | 2013-12-23 | 信息处理方法和信息处理设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104735389A CN104735389A (zh) | 2015-06-24 |
CN104735389B true CN104735389B (zh) | 2018-08-31 |
Family
ID=53401532
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201310717106.9A Active CN104735389B (zh) | 2013-12-23 | 2013-12-23 | 信息处理方法和信息处理设备 |
Country Status (2)
Country | Link |
---|---|
US (1) | US20150181161A1 (zh) |
CN (1) | CN104735389B (zh) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN114037467A (zh) * | 2015-10-20 | 2022-02-11 | 索尼公司 | 信息处理***、信息处理方法和计算机可读存储介质 |
CN105611357A (zh) * | 2015-12-25 | 2016-05-25 | 百度在线网络技术(北京)有限公司 | 图像处理方法及装置 |
CN107277425A (zh) * | 2016-04-08 | 2017-10-20 | 中兴通讯股份有限公司 | 一种服务器、会场终端以及云会议处理方法 |
US11019698B2 (en) * | 2018-02-05 | 2021-05-25 | Signify Holding B.V. | Retrofit light emitting diode, LED, lighting device with reduced power consumption in standby mode |
CN109698962A (zh) * | 2018-12-10 | 2019-04-30 | 视联动力信息技术股份有限公司 | 实时视频通信方法和*** |
CN110210310B (zh) * | 2019-04-30 | 2021-11-30 | 北京搜狗科技发展有限公司 | 一种视频处理方法、装置和用于视频处理的装置 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1427626A (zh) * | 2001-12-20 | 2003-07-02 | 松下电器产业株式会社 | 虚拟电视通话装置 |
CN1435064A (zh) * | 2000-04-07 | 2003-08-06 | 媒体逻辑***有限公司 | 移动用户的视频和图形分配*** |
CN102209273A (zh) * | 2010-04-01 | 2011-10-05 | 微软公司 | 交互且共享的观看体验 |
CN102422639A (zh) * | 2009-05-11 | 2012-04-18 | 思科技术公司 | 用于在会议环境中翻译参与者之间的通信的***和方法 |
CN103218843A (zh) * | 2013-03-15 | 2013-07-24 | 苏州跨界软件科技有限公司 | 虚拟人物通讯***和方法 |
CN103369288A (zh) * | 2012-03-29 | 2013-10-23 | 深圳市腾讯计算机***有限公司 | 基于网络视频的即时通讯方法及*** |
CN103442137A (zh) * | 2013-08-26 | 2013-12-11 | 苏州跨界软件科技有限公司 | 一种在手机通话中查看对方虚拟人脸的方法 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20080080657A (ko) * | 2005-12-22 | 2008-09-04 | 피케이알 리미티드 | 온라인 게이밍에 관한 개선 |
US8694899B2 (en) * | 2010-06-01 | 2014-04-08 | Apple Inc. | Avatars reflecting user states |
US9402057B2 (en) * | 2012-04-02 | 2016-07-26 | Argela Yazilim ve Bilisim Teknolojileri San. ve Tic. A.S. | Interactive avatars for telecommunication systems |
WO2013152453A1 (en) * | 2012-04-09 | 2013-10-17 | Intel Corporation | Communication using interactive avatars |
CN103368929B (zh) * | 2012-04-11 | 2016-03-16 | 腾讯科技(深圳)有限公司 | 一种视频聊天方法及*** |
US8970656B2 (en) * | 2012-12-20 | 2015-03-03 | Verizon Patent And Licensing Inc. | Static and dynamic video calling avatars |
WO2014139142A1 (en) * | 2013-03-15 | 2014-09-18 | Intel Corporation | Scalable avatar messaging |
US9191620B1 (en) * | 2013-12-20 | 2015-11-17 | Sprint Communications Company L.P. | Voice call using augmented reality |
-
2013
- 2013-12-23 CN CN201310717106.9A patent/CN104735389B/zh active Active
-
2014
- 2014-09-29 US US14/500,317 patent/US20150181161A1/en not_active Abandoned
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1435064A (zh) * | 2000-04-07 | 2003-08-06 | 媒体逻辑***有限公司 | 移动用户的视频和图形分配*** |
CN1427626A (zh) * | 2001-12-20 | 2003-07-02 | 松下电器产业株式会社 | 虚拟电视通话装置 |
CN102422639A (zh) * | 2009-05-11 | 2012-04-18 | 思科技术公司 | 用于在会议环境中翻译参与者之间的通信的***和方法 |
CN102209273A (zh) * | 2010-04-01 | 2011-10-05 | 微软公司 | 交互且共享的观看体验 |
CN103369288A (zh) * | 2012-03-29 | 2013-10-23 | 深圳市腾讯计算机***有限公司 | 基于网络视频的即时通讯方法及*** |
CN103218843A (zh) * | 2013-03-15 | 2013-07-24 | 苏州跨界软件科技有限公司 | 虚拟人物通讯***和方法 |
CN103442137A (zh) * | 2013-08-26 | 2013-12-11 | 苏州跨界软件科技有限公司 | 一种在手机通话中查看对方虚拟人脸的方法 |
Also Published As
Publication number | Publication date |
---|---|
US20150181161A1 (en) | 2015-06-25 |
CN104735389A (zh) | 2015-06-24 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104735389B (zh) | 信息处理方法和信息处理设备 | |
Chen et al. | EMC: Emotion-aware mobile cloud computing in 5G | |
US11670015B2 (en) | Method and apparatus for generating video | |
CN110519636B (zh) | 语音信息播放方法、装置、计算机设备及存储介质 | |
CN110503703A (zh) | 用于生成图像的方法和装置 | |
CN107534656A (zh) | 用于通信会话参与者的可视配置 | |
CN108985257A (zh) | 用于生成信息的方法和装置 | |
CN108427939A (zh) | 模型生成方法和装置 | |
CN110266879A (zh) | 播放界面显示方法、装置、终端及存储介质 | |
KR102045575B1 (ko) | 스마트 미러 디스플레이 장치 | |
CN110472558A (zh) | 图像处理方法和装置 | |
CN105493501A (zh) | 虚拟视觉相机 | |
CN109804353A (zh) | 用于音频和视频内容的管理*** | |
CN108363999A (zh) | 基于人脸识别的操作执行方法和装置 | |
JP2020038640A (ja) | イメージ自動分類方法及びシステム | |
CN109584992A (zh) | 交互方法、装置、服务器、存储介质及沙盘治疗*** | |
CN108229535A (zh) | 涉黄图像审核方法、装置、计算机设备及存储介质 | |
CN109800730A (zh) | 用于生成头像生成模型的方法和装置 | |
CN108234659A (zh) | 数据处理方法、装置及*** | |
CN112330781A (zh) | 生成模型和生成人脸动画的方法、装置、设备和存储介质 | |
CN108364029A (zh) | 用于生成模型的方法和装置 | |
CN110532983A (zh) | 视频处理方法、装置、介质和设备 | |
CN107886559A (zh) | 用于生成图片的方法和装置 | |
CN109145783A (zh) | 用于生成信息的方法和装置 | |
CN108510466A (zh) | 用于验证人脸的方法和装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |