CN111614922A - 一种信息交互方法、网络端及终端 - Google Patents

一种信息交互方法、网络端及终端 Download PDF

Info

Publication number
CN111614922A
CN111614922A CN201910133921.8A CN201910133921A CN111614922A CN 111614922 A CN111614922 A CN 111614922A CN 201910133921 A CN201910133921 A CN 201910133921A CN 111614922 A CN111614922 A CN 111614922A
Authority
CN
China
Prior art keywords
video stream
video
target
terminal
audio
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910133921.8A
Other languages
English (en)
Inventor
张慧媛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Original Assignee
China Mobile Communications Group Co Ltd
China Mobile Communications Ltd Research Institute
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by China Mobile Communications Group Co Ltd, China Mobile Communications Ltd Research Institute filed Critical China Mobile Communications Group Co Ltd
Priority to CN201910133921.8A priority Critical patent/CN111614922A/zh
Publication of CN111614922A publication Critical patent/CN111614922A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/14—Systems for two-way working
    • H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/40—Support for services or applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/75—Media network packet handling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/84—Generation or processing of descriptive data, e.g. content descriptors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Engineering & Computer Science (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供一种信息交互方法、网络端及终端，其中，该信息交互方法包括：接收终端发送的视频流；对所述视频流的视频图像输入画面批注信息；对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流；将所述目标视频流发送至所述终端。本发明的实施例，可以在视频客服时，借助视频图像上输入的画面批注信息，为终端用户提供手把手的服务，近似于对终端用户不懂的操作或者出现的使用问题，进行现场面对面的服务，从而大大降低售后服务成本，提高沟通效率，提升用户体验。

Description

一种信息交互方法、网络端及终端
技术领域
本发明涉及通信技术领域，尤其涉及一种信息交互方法、网络端及终端。
背景技术
目前，客服***实现视频客服的方式通常为现有的视频通话方式，即本地终端显示客服人员的图像，客服***端显示终端用户或本地物品的图像，比如当终端用户对所购买物品的使用方式或安装方式进行咨询，或对物品的问题进行投诉时，可将相应物品的图像发送到客服***。
但对于终端用户来说，本地显示客服人员的图像对所要解决的问题没有任何帮助，造成现有视频客服的沟通效率低。
发明内容
本发明实施例提供一种信息交互方法、网络端及终端，以解决现有视频客服的沟通效率低的问题。
为了解决上述技术问题，本发明是这样实现的：
第一方面，本发明实施例提供一种信息交互方法，应用于网络端，包括：
接收终端发送的视频流；
对所述视频流的视频图像输入画面批注信息；
对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流；
将所述目标视频流发送至所述终端。
第二方面，本发明实施例提供一种信息交互方法，应用于终端，包括：
向网络端发送视频流；
接收所述网络端发送的目标视频流；其中，所述目标视频流是所述网络端对画面批注信息和所述视频流的视频图像对应的视频信息进行合成得到，所述画面批注信息是对所述视频流的视频图像输入的；
显示所述目标视频流。
第三方面，本发明实施例提供一种客服***，包括：
第一接收模块，用于接收终端发送的视频流；
第二接收模块，用于对所述视频流的视频图像输入画面批注信息；
合成模块，用于对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流；
第一发送模块，用于将所述目标视频流发送至所述终端。
第四方面，本发明实施例提供一种终端，包括：
第二发送模块，用于向网络端发送视频流；
第三接收模块，用于接收所述网络端发送的目标视频流；其中，所述目标视频流是所述网络端对画面批注信息和所述视频流的视频图像对应的视频信息进行合成得到，所述画面批注信息是对所述视频流的视频图像输入的；
显示模块，用于显示所述目标视频流。
第五方面，本发明实施例提供一种客服***，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中，所述计算机程序被所述处理器执行时实现上述应用于客服***的信息交互方法的步骤。
第六方面，本发明实施例提供一种终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其中，所述计算机程序被所述处理器执行时实现上述应用于终端的信息交互方法的步骤。
第七方面，本发明实施例提供了一种计算机可读存储介质，其上存储有计算机程序，其中，所述计算机程序被处理器执行时实现上述应用于网络端的信息交互方法的步骤，或者上述应用于终端的信息交互方法的步骤。
本发明实施例中，接收终端发送的视频流，对所述视频流的视频图像输入画面批注信息，对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流，将所述目标视频流发送至所述终端，可以在视频客服时，借助视频图像中输入的画面批注信息，为终端用户提供手把手的服务，近似于对终端用户不懂的操作或者出现的使用问题，进行现场面对面的服务，从而大大降低售后服务成本，提高沟通效率，提升用户体验。
进一步的，本发明实施例可以支持目前任意支持视频通话的终端，即目前任意支持视频通话的终端都可享受到本实施例中增强现实(Augmented Reality，AR)形态的视频客服形式，无需配置专用的应用程序APP等，从而降低成本。其中，终端支持的视频通话可以是基于移动通信网络的视频通话，也可以是基于即时消息软件的视频通话，本实施例不对此进行限制。
附图说明
为了更清楚地说明本发明实施例的技术方案，下面将对本发明实施例中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本发明实施例中***结构的示意图；
图2为本发明实施例的一信息交互方法的流程图；
图3为本发明实施例的另一信息交互方法的流程图；
图4为本发明实施例的网络端的结构示意图之一；
图5为本发明实施例的终端的结构示意图之一；
图6为本发明实施例的网络端的结构示意图之二；
图7为本发明实施例的终端的结构示意图之二。
具体实施方式
下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
首先指出的是，参见图1所示，本发明实施例中涉及的***结构包括网络端1和终端3，该网络端1和终端3通过通信网络2进行信息交互，以实现视频客服过程。其中，该网络端1可选为客服***。该网络端1具有网络接口，可通过通信网络2接收和发送音视频流，并与具有客服需求的终端3进行通信。该通信网络2可以是有线网络，也可以是无线网络比如wifi，也可以是蜂窝通信网络。该终端3可以是通用的用户终端，只要支持视频电话功能即可，无需做特殊的升级和配置。该终端3中的视频通话软件可以是基于通信基础能力的视频通话软件，也可以是即时消息通信软件。
下面将结合实施例和附图对本发明进行详细说明。
请参见图2，图2是本发明实施例提供的一种信息交互方法的流程图，该方法应用于网络端，该网络端具体可选为客服***。如图2所示，该方法包括如下步骤：
步骤201：接收终端发送的视频流。
其中，此步骤中的视频流可以通过终端中本地摄像头拍摄得到，即该视频流的视频图像是由本地摄像头拍摄得到。当接收到终端发送的视频流时，该网络端可借助其屏幕显示，以实现所见即所得。
步骤202：对所述视频流的视频图像输入画面批注信息。
以网络端为客服***为例，客服***的前端输入界面可提供画笔功能，比如提供画笔工具(或称为画笔助手)，以使客服人员利用画笔工具在视频图像上进行批注，得到画面批注信息，实现对终端用户的指导。
步骤203：对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流。
本实施例中，对画面批注信息和视频流中的视频信息进行合成的方式可为：对视频流的视频图像和相应画面批注信息对应的输入图像进行图像叠加。
比如具体实现时，图像叠加的过程可为：首先，将视频流中当前时刻的视频帧(即视频图像)读取出来，以点阵的方式进行缓存，同时将当前时刻的画面批注信息对应的输入图像也以点阵的方式进行缓存，其中每一个像素点对应屏幕上的一个坐标；然后，将输入图像中有画笔痕迹的位置(即有批注信息的位置)的输入像素值定为输入颜色的像素值，和将输入图像中没有画笔痕迹的位置的输入像素值定为0；最后，将视频图像和输入图像中相应像素点的像素值进行叠加运算，即对于输入图像中像素值为非0的像素点，以输入图像的像素值替换相应视频图像中对应位置的像素值，对于输入图像中像素值为0的像素点，取值为视频图像中对应位置的像素值，从而得到目标视频流。
步骤204：将所述目标视频流发送至所述终端。
具体实现时，终端可分屏显示图像，其中一个分屏显示本地摄像头拍摄的图像，即发送到网络端的视频流的视频图像，另一个分屏显示网络端发送的目标视频流，即添加了画面批注信息的本地视频图像。
以客服***为例，当终端用户具有客服需求时，可通过终端发送视频请求消息到客服***；客服人员点击接通按钮后，客服***的屏幕即显示终端本地摄像头摄入的图像，其中包括用户咨询问题对应的对象；客服人员在分析用户咨询问题后，可利用客服***屏幕上的画图助手，对所显示的相应对象进行圈点标注，而批注的同时，客服***屏幕上即显示出批注后的画面展示效果，实现所见即所得；客服***屏幕上所展示的图像以视频流的方式发送到终端，使得终端屏幕显示批注后的视频图像，即终端屏幕显示的远程视频与客服***屏幕显示的批注后的视频一模一样，以为终端用户提供视频服务。
这样，本发明实施例的信息交互方法，可以在视频客服时，借助视频图像中输入的画面批注信息，为终端用户提供手把手的服务，近似于对终端用户不懂的操作或者出现的使用问题，进行现场面对面的服务，从而大大降低售后服务成本，提高沟通效率，提升用户体验。
进一步的，本发明实施例可以支持目前任意支持视频通话的终端，即目前任意支持视频通话的终端都可享受到本实施例中AR形态的视频客服形式，无需配置专用的应用程序APP等，从而降低成本。其中，终端支持的视频通话可以是基于移动通信网络的视频通话，也可以是基于即时消息软件的视频通话，本实施例不对此进行限制。
本发明实施例中，可选的，上述步骤204之前，所述方法还可包括：
采集网络端的音频流；其中以客服***为例，该音频流可选为客服人员的音频流；
对所述音频流和所述目标视频流进行音视频编码，得到目标音视频流；
上述步骤204具体为：将所述目标音视频流发送至所述终端。
这样，借助画面批注信息和音频流，可以在视频服务过程中对所要服务的内容一边批注一边语音解答，从而提高服务效果。
一种实施方式中，以客服***为例，本实施例中的客服***可包括本地音视频处理模块、音视频流合成模块、远程音视频流输入模块(与通信网络连接)、音视频流输出模块(与通信网络连接)和本地音频采集模块。其中，远程音视频流输入模块用于通过通信网络接收终端发送的音视频流，将接收到的音视频流传输到本地音视频处理模块；本地音视频处理模块用于将本地的画面批注信息和视频捕捉模块接收到的视频信息进行合成，并将合成的视频信息发送到音视频流合成模块；音视频流合成模块用于接收本地音频采集模块采集的音频信息和本地音视频处理模块发送的视频信息，并对接收到的音频信息和视频信息进行音视频编码及协议封装，得到目标音视频流；音视频流输出模块用于通过通信网络将目标音视频流发送给终端。
例如，本发明具体实例中客服***提供客服的过程可为：
S1：当终端用户具有客服需求时，通过终端向客服***发送视频通话请求消息，同时打开本地摄像头，终端屏幕上显示本地摄像头摄入的图像；
S2：客服***接收到视频通话请求消息后，接收客服人员点击应答按钮的操作，接通与终端的视频通话通信链路；
S3：在视频通话通信链路接通后，终端向客服***发送音视频流；其中此音视频流中的视频图像是由本地摄像头拍摄，包括用户咨询问题对应的对象，此音视频流中的音频是采集的用户咨询问题的声音；
S4：客服***接收到终端发送的音视频流后，通过外设(比如耳机或扬声器)播放音视频流中的音频，同时通过屏幕显示音视频流中的视频图像；
S5：客服人员查看客服***屏幕上显示的视频图像，分析用户咨询问题，并在客服***屏幕上进行画面批注，而批注的同时，客服***屏幕上即显示终端发送的本地视频图像以及客服人员批注的信息；
S6：客服***对终端发送的视频流和客服人员批注的信息进行合成，得到目标视频流；
S7：如果客服人员一边批注一边进行语音解答，则客服***通过本地麦克风，将客服人员语音输入到客服***，并与目标视频流进行同步，以及与目标视频流进行封装(音视频编码)，得到目标音视频流；
S8：客服***通过通信网络将目标音视频流发送给终端；
S9：终端接收到目标音视频流后，通过外设(比如耳机或扬声器)播放目标音视频流中的音频，同时通过一个分屏幕显示目标音视频流中的视频图像，以为终端用户解答所咨询问题。
本发明实施例中，由于视频图像是是动态的，视频中的物体对象也是动态的，因此为了保证客服效果，在对画面批注信息和视频信息进行合成时，需保证批注信息伴随着画面对象共同移动。可选的，上述步骤203可包括：
获取所述视频流的视频图像上的目标对象的移动位移；其中，所述画面批注信息是针对所述目标对象进行的批注；
以所述移动位移，对所述画面批注信息对应的输入图像进行移动，得到待合成的输入图像；
对所述视频流中移动后的目标对象对应的视频图像和所述待合成的输入图像进行图像叠加，得到所述目标视频流。
这样，可以实现画面批注信息伴随着目标对象实时匹配移动的效果，从而保证客服效果。
一种实施方式中，以客服***为例，客服***实现画面批注信息伴随着目标对象实时匹配移动的过程可为：
首先，选定目标对象；比如，客服人员使用客服***前端输入界面上的选择目标工具，将其放置在客服***屏幕显示的目标对象上，而客服***截取当前时刻的图像帧，并根据当前选择位置的图像的特征，识别目标对象的轮廓，并记录目标对象中心相对于屏幕的坐标；
然后，接收画面批注信息；比如，客服人员使用客服***前端输入界面上的画笔工具，在屏幕上对目标对象进行批注，而客服***捕获从输入画面批注信息开始到结束形成的输入图像，以画笔进入画面为始到画笔离开画面为终，并记录输入图像的中心相对于屏幕的坐标；
最后，当视频帧中的目标对象在屏幕上移动时，客服***可记录目标对象的移动位移，将相应画面批注信息对应的输入图像以同样的移动位移进行移动，形成新的输入图像，并将移动后的目标对象的视频图像和新的输入图像进行图像叠加，得到目标视频帧输出。
不难理解，当视频帧中的目标对象移出客服***屏幕时，客服***将不再对目标对象对应的视频图像和输入图像进行叠加，直接输出目标对象对应的视频图像(即网络输入的视频图像)即可。
请参见图3，图3是本发明实施例提供的一种信息交互方法的流程图，该方法应用于终端，如图3所示，该方法包括如下步骤：
步骤301：向网络端发送视频流。
其中，此步骤中的视频流可以通过终端中本地摄像头拍摄得到，即该视频流的视频图像是由本地摄像头拍摄得到。
步骤302：接收所述网络端发送的目标视频流。
其中，所述目标视频流是所述网络端对画面批注信息和所述视频流的视频图像对应的视频信息进行合成得到，所述画面批注信息是对所述视频流的视频图像输入的；
步骤303：显示所述目标视频流。
本发明实施例的信息交互方法，可以在视频客服时，借助视频图像中输入的画面批注信息，为终端用户提供手把手的服务，近似于对终端用户不懂的操作或者出现的使用问题，进行现场面对面的服务，从而大大降低售后服务成本，提高沟通效率，提升用户体验。
本发明实施例中，可选的，步骤302具体为：
接收所述网络端发送的目标音视频流；其中，所述目标音视频流是所述网络端对采集的音频流和所述目标视频流进行音视频编码得到。
所述方法还可包括：
对所述目标音视频流中的音频流进行播放。
请参见图4，图4是本发明实施例提供的一种网络端的结构示意图，如图4所示，该网络端40包括：
第一接收模块41，用于接收终端发送的视频流；
输入模块42，用于对所述视频流的视频图像输入画面批注信息；
合成模块43，用于对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流；
第一发送模块44，用于将所述目标视频流发送至所述终端。
本发明实施例中，可以在视频客服时，借助视频图像中输入的画面批注信息，为终端用户提供手把手的服务，近似于对终端用户不懂的操作或者出现的使用问题，进行现场面对面的服务，从而大大降低售后服务成本，提高沟通效率，提升用户体验。
可选的，所述合成模块43包括：
获取单元，用于获取所述视频流的视频图像上的目标对象的移动位移；其中，所述画面批注信息是针对所述目标对象进行的批注；
移动单元，用于以所述移动位移，对所述画面批注信息对应的输入图像进行移动，得到待合成的输入图像；
叠加单元，用于对所述视频流中移动后的目标对象对应的视频图像和所述待合成的输入图像进行图像叠加，得到所述目标视频流。
可选的，所述网络端还包括：
采集模块，用于采集网络端的音频流；
编码模块，用于对所述音频流和所述目标视频流进行音视频编码，得到目标音视频流；
所述第一发送模块44具体用于：
将所述目标音视频流发送至所述终端。
请参见图5，图5是本发明实施例提供的一种终端的结构示意图，如图5所示，该终端50包括：
第二发送模块51，用于向网络端发送视频流；
第二接收模块52，用于接收所述网络端发送的目标视频流；其中，所述目标视频流是所述网络端对画面批注信息和所述视频流的视频图像对应的视频信息进行合成得到，所述画面批注信息是对所述视频流的视频图像输入的；
显示模块53，用于显示所述目标视频流。
本发明实施例中，可以借助客服人员的画面批注信息，为终端用户提供手把手的服务，近似于对终端用户不懂的操作或者出现的使用问题，进行现场面对面的服务，从而大大降低售后服务成本，提高沟通效率，提升用户体验。
可选的，所述第二接收模块52具体用于：
接收所述网络端发送的目标音视频流；其中，所述目标音视频流是所述网络端对采集的音频流和所述目标视频流进行音视频编码得到；
所述终端还包括：
播放模块，用于对所述目标音视频流中的音频流进行播放。
参见图6，图6是本发明实施例提供的另一种网络端的结构示意图，如图6所示，网络端60包括：处理器61、存储器62及存储在所述存储器62上并可在所述处理器上运行的计算机程序，终端60中的各个组件通过总线接口63耦合在一起，所述计算机程序被所述处理器61执行时可实现上述应用于网络端的信息交互方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
参见图7，图7是本发明实施例提供的另一种终端的结构示意图，如图7所示，终端70包括：处理器71、存储器72及存储在所述存储器72上并可在所述处理器上运行的计算机程序，终端70中的各个组件通过总线接口73耦合在一起，所述计算机程序被所述处理器71执行时可实现上述应用于终端的信息交互方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
本发明实施例提供了一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时可实现上述应用于网络端的信息交互方法实施例的各个过程，或者上述应用于终端的信息交互方法实施例的各个过程，且能达到相同的技术效果，为避免重复，这里不再赘述。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体,可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(CD-ROM)、数字多功能光盘(DVD)或其他光学存储、磁盒式磁带，磁带磁磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。按照本文中的界定，计算机可读介质不包括暂存电脑可读媒体(transitory media)，如调制的数据信号和载波。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，空调器，或者网络设备等)执行本发明各个实施例所述的方法。
以上所述仅是本发明的优选实施方式，应当指出，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也应视为本发明的保护范围。

Claims (13)

1.一种信息交互方法，其特征在于，包括：
接收终端发送的视频流；
对所述视频流的视频图像输入画面批注信息；
对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流；
将所述目标视频流发送至所述终端。
2.根据权利要求1所述的方法，其特征在于，所述对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流，包括：
获取所述视频流的视频图像上的目标对象的移动位移；其中，所述画面批注信息是针对所述目标对象进行的批注；
以所述移动位移，对所述画面批注信息对应的输入图像进行移动，得到待合成的输入图像；
对所述视频流中移动后的目标对象对应的视频图像和所述待合成的输入图像进行图像叠加，得到所述目标视频流。
3.根据权利要求1所述的方法，其特征在于，所述将所述目标视频流发送至所述终端之前，所述方法还包括：
采集网络端的音频流；
对所述音频流和所述目标视频流进行音视频编码，得到目标音视频流；
所述将所述目标视频流发送至所述终端，具体为：
将所述目标音视频流发送至所述终端。
4.一种信息交互方法，其特征在于，包括：
向网络端发送视频流；
接收所述网络端发送的目标视频流；其中，所述目标视频流是所述网络端对画面批注信息和所述视频流的视频图像对应的视频信息进行合成得到，所述画面批注信息是对所述视频流的视频图像输入的；
显示所述目标视频流。
5.根据权利要求4所述的方法，其特征在于，所述接收所述网络端发送的目标视频流，具体为：
接收所述网络端发送的目标音视频流；其中，所述目标音视频流是所述网络端对采集的音频流和所述目标视频流进行音视频编码得到；
所述方法还包括：
对所述目标音视频流中的音频流进行播放。
6.一种网络端，其特征在于，包括：
第一接收模块，用于接收终端发送的视频流；
输入模块，用于对所述视频流的视频图像输入画面批注信息；
合成模块，用于对所述画面批注信息和所述视频流的视频图像对应的视频信息进行合成，得到目标视频流；
第一发送模块，用于将所述目标视频流发送至所述终端。
7.根据权利要求6所述的网络端，其特征在于，所述合成模块包括：
获取单元，用于获取所述视频流的视频图像上的目标对象的移动位移；其中，所述画面批注信息是针对所述目标对象进行的批注；
移动单元，用于以所述移动位移，对所述画面批注信息对应的输入图像进行移动，得到待合成的输入图像；
叠加单元，用于对所述视频流中移动后的目标对象对应的视频图像和所述待合成的输入图像进行图像叠加，得到所述目标视频流。
8.根据权利要求6所述的网络端，其特征在于，所述网络端还包括：
采集模块，用于采集网络端的音频流；
编码模块，用于对所述音频流和所述目标视频流进行音视频编码，得到目标音视频流；
所述第一发送模块具体用于：
将所述目标音视频流发送至所述终端。
9.一种终端，其特征在于，包括：
第二发送模块，用于向网络端发送视频流；
第二接收模块，用于接收所述网络端发送的目标视频流；其中，所述目标视频流是所述网络端对画面批注信息和所述视频流的视频图像对应的视频信息进行合成得到，所述画面批注信息是对所述视频流的视频图像输入的；
显示模块，用于显示所述目标视频流。
10.根据权利要求9所述的终端，其特征在于，所述第二接收模块具体用于：
接收所述网络端发送的目标音视频流；其中，所述目标音视频流是所述网络端对采集的音频流和所述目标视频流进行音视频编码得到；
所述终端还包括：
播放模块，用于对所述目标音视频流中的音频流进行播放。
11.一种网络端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述计算机程序被所述处理器执行时实现如权利要求1至3中任一项所述的信息交互方法的步骤。
12.一种终端，包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序，其特征在于，所述计算机程序被所述处理器执行时实现如权利要求4或5所述的信息交互方法的步骤。
13.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至5中任一项所述的信息交互方法的步骤。
CN201910133921.8A 2019-02-22 2019-02-22 一种信息交互方法、网络端及终端 Pending CN111614922A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910133921.8A CN111614922A (zh) 2019-02-22 2019-02-22 一种信息交互方法、网络端及终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910133921.8A CN111614922A (zh) 2019-02-22 2019-02-22 一种信息交互方法、网络端及终端

Publications (1)

Publication Number Publication Date
CN111614922A true CN111614922A (zh) 2020-09-01

Family

ID=72197604

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910133921.8A Pending CN111614922A (zh) 2019-02-22 2019-02-22 一种信息交互方法、网络端及终端

Country Status (1)

Country Link
CN (1) CN111614922A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112565844A (zh) * 2020-12-04 2021-03-26 维沃移动通信有限公司 视频通信方法、装置和电子设备
CN112637541A (zh) * 2020-12-23 2021-04-09 平安银行股份有限公司 一种音视频标注方法、装置、计算机设备及存储介质
CN113595867A (zh) * 2021-06-22 2021-11-02 青岛海尔科技有限公司 基于远程交互的设备操作方法及装置
CN115797507A (zh) * 2023-01-29 2023-03-14 北京金茂教育科技有限公司 文件批注展示方法及***

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106339094A (zh) * 2016-09-05 2017-01-18 山东万腾电子科技有限公司 基于增强现实技术的交互式远程专家协作检修***及方法
CN107332845A (zh) * 2017-07-03 2017-11-07 努比亚技术有限公司 会议投影批注方法、移动终端及计算机可读存储介质
CN107995538A (zh) * 2017-12-18 2018-05-04 威创集团股份有限公司 视频批注方法及***

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106339094A (zh) * 2016-09-05 2017-01-18 山东万腾电子科技有限公司 基于增强现实技术的交互式远程专家协作检修***及方法
CN107332845A (zh) * 2017-07-03 2017-11-07 努比亚技术有限公司 会议投影批注方法、移动终端及计算机可读存储介质
CN107995538A (zh) * 2017-12-18 2018-05-04 威创集团股份有限公司 视频批注方法及***

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112565844A (zh) * 2020-12-04 2021-03-26 维沃移动通信有限公司 视频通信方法、装置和电子设备
CN112637541A (zh) * 2020-12-23 2021-04-09 平安银行股份有限公司 一种音视频标注方法、装置、计算机设备及存储介质
CN113595867A (zh) * 2021-06-22 2021-11-02 青岛海尔科技有限公司 基于远程交互的设备操作方法及装置
CN115797507A (zh) * 2023-01-29 2023-03-14 北京金茂教育科技有限公司 文件批注展示方法及***

Similar Documents

Publication Publication Date Title
CN110377250B (zh) 一种投屏场景下的触控方法及电子设备
CN111614922A (zh) 一种信息交互方法、网络端及终端
EP3958548A1 (en) Screen projection display method and electronic device
US20170304735A1 (en) Method and Apparatus for Performing Live Broadcast on Game
CN105991962B (zh) 连接方法、信息展示方法、装置及***
US20210321046A1 (en) Video generating method, apparatus, electronic device and computer storage medium
CN101242509B (zh) 能够与外部装置通信的拍摄装置及其控制方法
JP6582626B2 (ja) 送信制御方法、表示端末および送信制御プログラム
CN109831662B (zh) Ar眼镜屏幕的实时画面投射方法、装置及控制器和介质
JP6385429B2 (ja) ストリーム・メディア・データを再生する方法および装置
US20100304720A1 (en) Method and apparatus for guiding media capture
CN104657934B (zh) 一种图像数据的处理方法和装置
EP4117313A1 (en) Audio processing method and apparatus, readable medium, and electronic device
CN112423076B (zh) 一种音频投屏同步控制方法、设备及计算机可读存储介质
JP2018528623A (ja) 撮影パラメータ設定方法、装置、プログラム及び記録媒体
CN105681713A (zh) 视频录制方法、装置及移动终端
JP2017501598A5 (zh)
CN111966314A (zh) 图像投屏方法、图像投屏装置、移动终端以及投屏设备
CN110740131B (zh) 数据处理方法、装置、电子设备及存储介质
WO2023151526A1 (zh) 音频采集方法、装置、电子设备及外设组件
CN113206970A (zh) 一种用于视频通讯的无线投屏方法、装置及存储介质
CN106131929A (zh) WiFi接入点信息清理方法及装置
CN106792024B (zh) 多媒体信息的分享方法及装置
CN114866659A (zh) 一种拍摄方法及电子设备
CN116723353A (zh) 一种视频监控区域配置方法、***、装置及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20200901

RJ01 Rejection of invention patent application after publication