CN113965665A - 一种用于确定虚拟直播图像的方法与设备 - Google Patents
一种用于确定虚拟直播图像的方法与设备 Download PDFInfo
- Publication number
- CN113965665A CN113965665A CN202111387823.0A CN202111387823A CN113965665A CN 113965665 A CN113965665 A CN 113965665A CN 202111387823 A CN202111387823 A CN 202111387823A CN 113965665 A CN113965665 A CN 113965665A
- Authority
- CN
- China
- Prior art keywords
- virtual
- image
- live broadcast
- virtual background
- anchor
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 52
- 230000006978 adaptation Effects 0.000 claims abstract description 53
- 230000015654 memory Effects 0.000 claims description 36
- 230000003044 adaptive effect Effects 0.000 claims description 30
- 230000008859 change Effects 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 14
- 238000009825 accumulation Methods 0.000 claims description 9
- 238000012545 processing Methods 0.000 claims description 3
- 230000000694 effects Effects 0.000 abstract description 12
- 230000004927 fusion Effects 0.000 abstract description 6
- 238000004891 communication Methods 0.000 description 10
- 230000005291 magnetic effect Effects 0.000 description 7
- 238000004364 calculation method Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 4
- 230000004044 response Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 238000004422 calculation algorithm Methods 0.000 description 3
- 238000012790 confirmation Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 230000003287 optical effect Effects 0.000 description 3
- 238000010801 machine learning Methods 0.000 description 2
- 238000012549 training Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 101100498818 Arabidopsis thaliana DDR4 gene Proteins 0.000 description 1
- 208000033748 Device issues Diseases 0.000 description 1
- 230000001186 cumulative effect Effects 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000005294 ferromagnetic effect Effects 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 238000007499 fusion processing Methods 0.000 description 1
- 230000004886 head movement Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 230000001902 propagating effect Effects 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000001228 spectrum Methods 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/2224—Studio circuitry; Studio devices; Studio equipment related to virtual studio applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
- H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- General Engineering & Computer Science (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Abstract
本申请的目的是提供一种用于确定虚拟直播图像的方法与设备，包括：接收所述主播的第一用户设备上传的、对应直播的实时直播图像；获取关于所述实时直播图像的虚拟背景指令；响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像；将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。本申请使虚拟背景与主播人像融合显得更加真实，并提升直播图像的显示效果，为观众用户提供良好的直播观看体验。
Description
技术领域
本申请涉及通信领域，尤其涉及一种用于确定虚拟直播图像的技术。
背景技术
直播是在现场架设独立的信号采集设备(音频+视频)导入导播端(导播设备或平台)，再通过网络上传至服务器，发布至网址供人观看。直播吸取和延续了互联网的优势，利用视讯方式进行网上现场直播，可以将产品展示、相关会议、背景介绍、方案测评、网上调查、对话访谈、在线培训等内容现场发布到互联网上，利用互联网的直观、快速，表现形式好、内容丰富、交互性强、地域不受限制、受众可划分等特点，加强活动现场的推广效果。现有直播应用中，主播可以对背景进行一键切换，但是切换后的直播显示效果并不理想。
发明内容
本申请的一个目的是提供一种用于确定虚拟直播图像的方法与设备。
根据本申请的一个方面，提供了一种用于确定虚拟直播图像的方法，该方法包括：
接收所述主播的第一用户设备上传的、对应直播的实时直播图像；
获取关于所述实时直播图像的虚拟背景指令；
响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，其中，所述适配比例信息包括所述主播人像区域相对于所述虚拟背景图像的像素比例；
将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。
根据本申请的另一个方面，提供了一种用于确定虚拟直播图像的设备，该设备包括：
一一模块，用于接收所述主播的第一用户设备上传的、对应直播的实时直播图像；
一二模块，用于获取关于所述实时直播图像的虚拟背景指令；
一三模块，用于响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，其中，所述适配比例信息包括所述主播人像区域相对于所述虚拟背景图像的像素比例；
一四模块，用于将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。
根据本申请的一个方面，提供了一种计算机设备，其中，该设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如上所述任一方法的操作。
根据本申请的一个方面，提供了一种存储指令的计算机可读介质，所述指令在被执行时使得***进行如上所述任一方法的操作。
与现有技术相比，本申请通过对实时直播图像进行处理，能够获得立体化视觉效果的虚拟直播图像，从而使虚拟背景与主播人像融合显得更加真实，并提升直播图像的显示效果，为观众用户提供良好的直播观看体验。
附图说明
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述，本申请的其它特征、目的和优点将会变得更明显：
图1示出根据本申请一个实施例的一种用于确定虚拟直播图像的方法流程图；
图2示出根据本申请另一个实施例的一种网络设备的功能模块；
图3示出可被用于实施本申请中所述的各个实施例的示例性***。
附图中相同或相似的附图标记代表相同或相似的部件。
具体实施方式
下面结合附图对本申请作进一步详细描述。
在本申请一个典型的配置中，终端、服务网络的设备和可信方均包括一个或多个处理器(例如，中央处理器(Central Processing Unit，CPU))、输入/输出接口、网络接口和内存。
内存可能包括计算机可读介质中的非永久性存储器，随机存取存储器(RandomAccess Memory，RAM)和/或非易失性内存等形式，如只读存储器(Read Only Memory，ROM)或闪存(Flash Memory)。内存是计算机可读介质的示例。
计算机可读介质包括永久性和非永久性、可移动和非可移动媒体可以由任何方法或技术来实现信息存储。信息可以是计算机可读指令、数据结构、程序的模块或其他数据。计算机的存储介质的例子包括，但不限于相变内存(Phase-Change Memory，PCM)、可编程随机存取存储器(Programmable Random Access Memory，PRAM)、静态随机存取存储器(Static Random-Access Memory，SRAM)、动态随机存取存储器(Dynamic Random AccessMemory，DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(Electrically-Erasable Programmable Read-Only Memory，EEPROM)、快闪记忆体或其他内存技术、只读光盘只读存储器(Compact Disc Read-Only Memory，CD-ROM)、数字多功能光盘(Digital Versatile Disc,DVD)或其他光学存储、磁盒式磁带，磁带磁盘存储或其他磁性存储设备或任何其他非传输介质，可用于存储可以被计算设备访问的信息。
本申请所指设备包括但不限于用户设备、网络设备、或用户设备与网络设备通过网络相集成所构成的设备。所述用户设备包括但不限于任何一种可与用户进行人机交互(例如通过触摸板进行人机交互)的移动电子产品，例如智能手机、平板电脑等，所述移动电子产品可以采用任意操作***，如Android操作***、iOS操作***等。其中，所述网络设备包括一种能够按照事先设定或存储的指令，自动进行数值计算和信息处理的电子设备，其硬件包括但不限于微处理器、专用集成电路(Application Specific IntegratedCircuit，ASIC)、可编程逻辑器件(Programmable Logic Device，PLD)、现场可编程门阵列(Field Programmable Gate Array，FPGA)、数字信号处理器(Digital Signal Processor，DSP)、嵌入式设备等。所述网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云；在此，云由基于云计算(Cloud Computing)的大量计算机或网络服务器构成，其中，云计算是分布式计算的一种，由一群松散耦合的计算机集组成的一个虚拟超级计算机。所述网络包括但不限于互联网、广域网、城域网、局域网、VPN网络、无线自组织网络(Ad Hoc网络)等。优选地，所述设备还可以是运行于所述用户设备、网络设备、或用户设备与网络设备、网络设备、触摸终端或网络设备与触摸终端通过网络相集成所构成的设备上的程序。
当然，本领域技术人员应能理解上述设备仅为举例，其他现有的或今后可能出现的设备如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。
在本申请的描述中，“多个”的含义是两个或者更多，除非另有明确具体的限定。
图1示出了根据本申请一个方面的一种用于确定虚拟直播图像的方法，应用于网络设备，具体包括步骤S101、步骤S102、步骤S103以及步骤S104。在步骤S101中，接收所述主播的第一用户设备上传的、对应直播的实时直播图像；在步骤S102中，获取关于所述实时直播图像的虚拟背景指令；在步骤S103中，响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，其中，所述适配比例信息包括所述主播人像区域相对于所述虚拟背景图像的像素比例；在步骤S104中，将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。在此，所述网络设备与所述直播的直播应用相对应，网络设备包括但不限于计算机、网络主机、单个网络服务器、多个网络服务器集或多个服务器构成的云。
具体而言，在步骤S101中，接收所述主播的第一用户设备上传的、对应直播的实时直播图像。例如，主播持有第一用户设备，第一用户设备可以通过对应的摄像装置采集关于主播的当前的实时直播图像，其中，第一用户设备包括但不限于手机、pad、个人电脑或者摄像机等，摄像装置包括不限于摄像头、深度摄像机、红外摄像头或者设备的外接摄像头等。第一用户设备采集对应的实时视频流并通过与网络设备的通信连接上传至网络设备，网络设备接收视频流中的实时直播图像，其中，实时直播图像包括拍摄的关于主播的实时视频流中的当前时刻对应的视频帧。在一些实施方式中，所述实时直播图像包括对应目标对象，该目标对象可以是待推广的产品，或者主播直播的互动对象等。
在步骤S102中，获取关于所述实时直播图像的虚拟背景指令。例如，虚拟背景指令用于指示替换实时直播图像中除主播人物之外的背景图像的指示信息。第一用户设备可以采集的关于主播的用户操作，确定对应的虚拟背景指令，从而将该虚拟背景指令发送至网络设备。或者，网络设备获取主播的直播相关参数，若直播相关参数满足预设条件，则生成对应的虚拟背景指令等，提高直播的互动性。
在一些实施方式中，在步骤S102中，接收所述第一用户设备上传的、基于所述主播的用户操作的虚拟背景指令。例如，主播持有第一用户设备，第一用户设备端设置有虚拟背景指令的指示信息，主播可以根据自己的需求输入相关操作，第一用户设备根据采集主播的操作，将该操作与预设的指示信息相匹配；若匹配，则生成对应虚拟背景指令，并将该虚拟背景指令发送至网络设备。在一些实施方式中，所述用户操作包括但不限于：语音信息；体态信息；触控信息；二维码信息。例如，所述主播的用户操作包括语音信息(如“开启虚拟背景”、“背景开启”等语音信息)，第一用户设备根据用户的输入的语音信息进行语音识别确定对应文本或者语义，将对应文本或者语义与预设的语音指令进行匹配，若匹配，则生成对应的虚拟背景指令。例如，所述主播的用户操作包括体态信息(如手势信息、手部动作、头部动作、腿部动作或者身体姿势等)，第一用户根据用户的输入的体态信息获取对应体态特征，并将体态特征与预设的姿态特征进行匹配，若匹配，则生成对应的虚拟背景指令。例如，所述主播的用户操作包括触控信息(如触控触摸板、触控触摸屏等)，第一用户根据用户的输入的触控信息，并将触控信息与预设的触控操作进行匹配，若匹配，则生成对应的虚拟背景指令。例如，例如，所述主播的用户操作包括二维码信息(如用于触发虚拟背景指令的二维码等)，第一用户识别扫描到的实时直播图像中的二维码，若存在某二维码的二维码链接包括虚拟背景指示信息，则生成对应的虚拟背景指令。在此，用于生成虚拟背景指令的用户操作可以包括前述一种或者多种的组合。当然，本领域技术人员应能理解上述用户操作仅为举例，其他现有的或今后可能出现的用户操作如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。
在一些实施方式中，在步骤S102中，根据所述直播的直播参数信息满足预设条件，确定所述实时直播图像的虚拟背景指令。例如，网络设备获取主播的直播的直播参数信息，如直播页面的观看用户的数量、高等级用户的数量、获取礼物的累计量或者主播等级信息等；网络设备设置有预设条件，如观看用户的数量达到一定的数量阈值(如一千等)、高等级用户的数量达到一定的数量阈值(如五百等)、获取礼物的累计量达到一定累计阈值(如一千积分等)、主播的主播等级信息达到一定等级阈值(如高级主播等)。若直播的直播参数信息满足预设条件，则生成关于实时直播图像的虚拟背景指令，通过主播的直播页面的用户数量或者资源累计等触发虚拟背景指令，从而增强主播与用户之间的互动，同时增强用户的观看体验。
在一些实施方式中，所述直播参数信息包括不限于：所述直播的当前观众用户的第一用户数量；所述直播的当前观众用户中用户等级大于或等于用户等级阈值的观众用户的第二用户数量；所述直播的资源累加信息；所述主播的主播等级信息。例如，所述直播的当前观众用户的第一用户数量包括当前直播页面中观看用户的真实用户数量或者统计用户数量，统计用户数量包括基于观看用户的等级分配的不同的用户数量值，如低等级用户统计用户值为1，中等级用户统计用户值为5，高等级用户统计用户值为10等。所述直播参数信息包括所述直播的观众用户的第一用户数量，则对应预设条件包括所述第一用户数量大于或等于第一用户数量阈值等。例如，所述直播参数信息包括直播的当前观众用户中用户等级大于或等于用户等级阈值(如中级或者高级用户等)的观众用户的第二用户数量，该第二用户数量包括用户等级大于或等于用户等级阈值的观众用户的真实用户数量，其中，用户等级的划分可以是通过低级、中级、高级等形式进行区分，或者通过数值划分，具体如1-100级等；对应预设条件包括所述第二用户数量大于或等于第二用户数量阈值。所述第一用户数量、第二用户数量中的第一、第二仅用于区分不同的指代参数，并不包含任何顺序、大小关系等。例如，所述直播参数信息包括所述直播的资源累加信息，所述资源累加信息包括直播页面的本次直播或者所有直播过程中获取资源的累计价值等，对应资源包括观众用户赠送的礼物、活动分发的奖励等；对应的预设条件包括所述资源累加信息大于或等于资源累加阈值。所述直播参数信息包括主播的主播等级信息，主播等级信息包括主播用户的当前直播等级，该直播等级与直播时长、观看用户数量、直播资源累计等关联；对应预设条件包括所述主播等级信息达到预设等级阈值。所述直播参数信息可以包括上述参数的一种或者多种的组合，在此不做限制。当然，本领域技术人员应能理解上述直播参数信息仅为举例，其他现有的或今后可能出现的直播参数信息如可适用于本申请，也应包含在本申请保护范围以内，并在此以引用方式包含于此。
在步骤S103中，响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，其中，所述适配比例信息包括所述主播人像区域相对于所述虚拟背景图像的像素比例。例如，所述主播人像区域包括主播对应像素在所述实时直播图像中像素位置。网络设备获取到对应的实时直播图像后，利用计算机视觉算法识别或跟踪实时直播图像中主播对应的主播人像区域，如利用对象实例分割算法、轮廓识别等。具体地，当所述实时直播图像为第一个需要识别主播人像区域的图像信息时，根据预设的主播特征信息识别出实时直播图像中主播所处的像素区域；或者，当所述实时直播图像为非首个需要识别主播人像区域的图像信息时，此时我们可以根据该实时直播图像的前序(如前一帧或多帧)实时直播图像的前序主播人像区域跟踪确定实时直播图像中的主播人像区域，例如，利用前序实时直播图像中的前序主播人像区域对实时直播图像中的主播人像区域进行估计确定估计像素区域，同时对主播人像区域进行识别确定对应的识别像素区域，从而综合估计像素区域和识别像素区域得到较为精确的主播人像区域。其中，所述主播人像区域包括主播在实时直播图像中对应的像素的像素位置，例如，以实时直播图像左上角为坐标原点建立对应的像素坐标系，则主播人像区域包括主播对应的像素在该坐标系中的坐标的集合。主播人像区域用于指示主播在直播图像中的正常像素区域，该像素区域对应着在直播图像中的正常人大小，而虚拟背景区域根据匹配结果可能为不同的场景，该场景与正常人的人像比例可能与主播人像区域与实时直播图像的比例不相同，此时网络设备可以对主播人像区域和虚拟背景图像进行一定的调整，保证图像融合的适配性。网络设备根据对应的所述适配比例信息，将主播人像区域叠加至虚拟背景图像中生成对应的虚拟直播图像。
在步骤S104中，将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。例如，网络设备确定对应虚拟直播图像后，将该虚拟直播图像下发至直播对应的观看用户的第二用户设备；在一些实施方式中，网络设备还将该虚拟直播图像发送至第一用户设备，供主播查看对应虚拟直播效果等；或者网络设备先将虚拟直播图像下发至第一用户设备，第一用户设备呈现该虚拟直播图像，若获取到主播关于该虚拟直播图像的确认操作，则第一用户设备向网络设备发送背景确认信息，网络设备基于接收到的背景确认信息将该虚拟直播图像下发至一个或多个第二用户设备。
在一些实施方式中，所述虚拟背景指令包括对应的直播标识信息；其中，所述方法还包括步骤S105(未示出)，在步骤S105中，基于所述直播标识信息匹配确定对应的虚拟背景图像，其中，所述虚拟背景图像对应的背景关键字段与所述直播标识信息相匹配。例如，网络设备获取虚拟背景指令时还能获取对应的直播标识信息，直播标识信息包括直播页面的当前标题、主题或者当前直播内容的关键字段等，该直播标识信息可以是接收第一用户设备根据主播的输入操作确定的，还可以是根据实时直播图像识别确定的，例如，识别图像中的目标对象或者识别当前图像中的歌曲名字、舞蹈名字等。网络设备设置有图像库，图像库中包含多个背景图像记录，每个背景图像记录包括一个背景图像及该背景图像对应的背景关键字段。网络设备根据直播标识信息在图像库中匹配确定对应的虚拟背景图像，该虚拟背景图像的背景关键字段与直播标识信息相同或语义相同等。
在一些实施方式中，在步骤S105中，基于所述直播标识信息匹配确定对应的一个或多个候选虚拟背景图像，其中，每个候选虚拟背景图像对应的背景关键字段与所述直播标识信息相匹配；基于所述一个或多个候选虚拟背景图像获取对应的虚拟背景图像。例如，网络设备根据直播标识信息进行匹配时，可能匹配到一个或多个候选虚拟背景图像，该一个或多个虚拟背景图像对应的背景关键字段相同或相似，例如，同一个关键字段“足球”，可能匹配到“足球场”对应的背景图像，也可能匹配到“足球”对应的背景图像，还可能匹配到“踢足球”对应的背景图像等。网络设备确定一个或多个候选虚拟背景图像后，可以从中一个作为对应的虚拟背景图像，例如，随机选择或者根据实时直播图像分析确定，还可以发送至第一用户设备供主播选择等。其中，网络设备可以对实时直播图像中主播人像区域进行分析，结合当前主播人像区域的大小或比例等，确定大小或比例适配的背景图像等，从而从一个或多个候选虚拟背景图像中确定适配的虚拟背景图像等。
在一些实施方式中，所述基于所述一个或多个候选虚拟背景图像获取对应的虚拟背景图像，包括：将所述一个或多个候选虚拟背景图像返回至所述第一用户设备；接收所述第一用户设备返回的、基于所述主播的操作确定的虚拟背景图像，其中，所述虚拟背景图像包含于所述一个或多个候选虚拟背景图像。例如，网络设备确定一个或多个候选虚拟背景图像后，可以将该一个或多个候选虚拟背景信息返回至第一用户设备，供主播进行选择等。第一用户设备接收并呈现该一个或多个候选虚拟背景图像，采集主播的相关操作(如语音信息、体态信息或者触控信息相关的选中操作)，第一用户设备基于主播的相关操作从一个或多个候选虚拟背景图像中确定对应的虚拟背景图像，并将该虚拟背景图像或者该虚拟背景图像的图像标识信息发送至网络设备。网络设备接收虚拟背景图像或者该虚拟背景图像的图像标识信息后，基于该虚拟背景图像与阴影主播人像区域生成对应的虚拟直播图像。
在一些实施方式中，所述方法还包括步骤S106(未示出)，在步骤S106中，实时获取所述直播的实时直播标识信息；若所述实时直播标识信息变更，生成对应的虚拟背景变更指令；响应于所述虚拟背景变更指令，基于所述实时直播标识信息匹配确定对应的变更虚拟背景图像，其中，所述变更虚拟背景图像对应的背景关键字段与所述实时直播标识信息相匹配；其中，所述根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：根据所述主播人像区域及所述变更虚拟背景图像确定对应的变更适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述变更适配比例信息，生成对应的变更虚拟直播图像；其中，在步骤S104中，将所述变更虚拟直播图像下发至所述直播的观众用户的第二用户设备。例如，网络设备基于对应虚拟背景指令生成虚拟直播图像之后，在实时直播过程中，还可以基于直播标识信息的改变而实时调整背景图像，从而呈现不同的虚拟直播图像，增强直播的实时性和趣味性，为用户提供更好的直播体验等。例如，网络设备实时获取直播的实时直播标识信息，例如，通过识别当前上传的实时视频流中的当前视频帧中包含的字段或者基于主播关于直播主题、标题等的更改操作上传对应字段等。网络设备若检测到实时直播标识信息与前序直播标识信息不匹配，则确定该实时直播标识信息发生变更，生成对应的虚拟背景变更指令。网络设备根据该虚拟背景变更指令中的实时直播标识信息，在图像库中匹配确定对应的变更虚拟背景图像，确定对应变更适配比例信息，并基于变更适配比例信息将主播人像区域叠加至该变更虚拟背景图像信息中生成对应的变更虚拟直播图像。随后，网络设备将该变更虚拟直播图像返回至观众用户的第二用户设备。
在一些实施方式中，所述方法还包括步骤S107(未示出)，在步骤S107中，对所述主播人像区域进行阴影化处理，确定对应的阴影主播人像区域；其中，所述根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：根据所述阴影主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像。例如，网络设备获取主播人像区域后，通过对主播进行阴影计算获取立体化效果的阴影主播人像区域。所述阴影主播人像区域包括主播人像区域以及该主播人像区域相对应的阴影区域。具体阴影计算是先确定一个光源点，并基于该光源点为中心向对应区域投射光线从而生成对应阴影，在一些情形下，除了计算出对应阴影区域之外，我们还会根据光源点的投射距离改变主播人像区域中各像素的像素亮度等，从而形成明亮适配的阴影主播人像区域。其中，主播阴影区域生成所参考的光源点坐标可以通过机器学习的方式选择最佳坐标点，具体流程包括：1)对根据不同光源点坐标所生成的阴影进行人工标注评分，得分范围在[0,1]，得分为0代表效果最差，得分为1代表效果最佳；2)根据步骤1)得到的训练数据，对机器学习模型采用梯度下降算法进行参数最优化，模型的输入有三个：前景图片I1，虚拟背景I2，得分S(在部署阶段S默认值为1)；模型的输出是使得分为S的光源的三个坐标点(x,y,z)；3)根据步骤2的到的光源点坐标，对实时直播图像即主播进行阴影计算，并与虚拟背景融合，从而得到对应的虚拟直播图像。融合过程包括将主播人像区域覆盖于虚拟背景图像中，并将主播人像区域的阴影区域以一定透明度叠加呈现于虚拟背景图像中。所述阴影主播人像区域包括主播人像区域及对应的阴影区域，网络设备确定对应虚拟背景图像后，可以将阴影主播人像区域直接叠加至虚拟背景图像中生成对应的虚拟直播图像。在一些情形下，网络设备对阴影区域的像素进行一定的透明化调整，从而将主播人像区域覆盖叠加至虚拟背景图像的同时，将阴影区域以一定透明度的方式叠加至虚拟背景图像中，提升了背景融合的真实性，在提供了立体化视觉的虚拟直播图像的同时，提高了图像融合的效果。
在一些实施方式中，所述根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：根据所述适配比例信息调整所述主播人像区域和/或所述虚拟背景图像，从而确定对应的适配主播人像区域及适配虚拟背景图像；将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像。例如，主播人像区域通常为一个正常人大小，而虚拟背景区域根据匹配结果可能为不同的场景，该场景与正常人的比例可能与主播人像区域与实时直播图像的比例不相同，此时网络设备可以对主播人像区域和虚拟背景图像进行一定的调整，保证图像融合的适配性。例如，每个虚拟背景图像还包括对应的人像比例信息，该人像比例信息用于指示该虚拟背景图像中单位人体像素数量的占比；网络设备根据虚拟背景图像的人像比例信息可以调整主播人像区域和/或虚拟背景图像，以达到较好的适配效果。例如，网络设备根据虚拟背景图像的人像比例信息调整主播人像区域，保持虚拟背景图像不变，将主播人像区域调整为与虚拟背景图像适配的适配主播人像区域。例如，网络设备保持主播人像区域不变，根据人像比例信息调整虚拟背景图像，并对调整后的虚拟背景图像进行填充或者裁减等，使调整后的虚拟背景图像与实时直播图像的像素宽高比一致。例如，网络设备根据人像比例信息，并结合一定的人像在图像中的预设比例(如60％-70％等)，同时调整主播人像区域和虚拟背景图像，并对调整后的虚拟背景图像进行填充或者裁减等，使调整后的虚拟背景图像与实时直播图像的像素宽高比一致。网络设备将经过上述调整后的主播人像区域和虚拟背景图像均称为适配主播人像区域和适配虚拟背景图像，并根据适配主播人像区域和适配虚拟背景图像生成对应的虚拟直播图像。
在一些实施方式中，所述将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像，包括：根据所述适配主播人像区域及所述适配虚拟背景图像确定所述适配主播人像区域在所述适配背景图像对应的叠加位置信息；根据所述叠加位置信息将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像。例如，网络设备确定对应适配主播人像区域和适配虚拟背景信息后，根据适配主播人像区域和适配虚拟背景信息确定该适配主播人像区域在虚拟背景信息中的叠加位置信息，该叠加位置信息包括该适配主播人像区域的像素相对于适配虚拟背景图像的相对位置信息，例如，适配主播人像区域在适配虚拟背景图像对应像素坐标系中的各个像素的像素坐标信息等。网络设备可以根据对应像素位置将适配主播人像区域叠加至适配虚拟背景图像中，从而生成对应的虚拟直播图像。
上文主要对本申请的一种用于确定虚拟直播图像的方法的各实施例进行介绍，此外，本申请还提供了能够实施上述各实施例的具体设备，下面我们结合图2进行介绍。
图2示出了根据本申请一个方面的一种用于确定虚拟直播图像的网络设备，具体包括一一模块101、一二模块102、一三模块103以及一四模块104。一一模块101，用于接收所述主播的第一用户设备上传的、对应直播的实时直播图像；一二模块102，用于获取关于所述实时直播图像的虚拟背景指令；一三模块103，用于响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，其中，所述适配比例信息包括所述主播人像区域相对于所述虚拟背景图像的像素比例；一四模块104，用于将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。
在一些实施方式中，一二模块102，用于接收所述第一用户设备上传的、基于所述主播的用户操作的虚拟背景指令。在一些实施方式中，所述用户操作包括但不限于：语音信息；体态信息；触控信息；二维码信息。在一些实施方式中，一二模块102，用于根据所述直播的直播参数信息满足预设条件，确定所述实时直播图像的虚拟背景指令。在一些实施方式中，所述直播参数信息包括不限于：所述直播的当前观众用户的第一用户数量；所述直播的当前观众用户中用户等级大于或等于用户等级阈值的观众用户的第二用户数量；所述直播的资源累加信息；所述主播的主播等级信息。
在此，图2示出的所述一一模块101、一二模块102、一三模块103以及一四模块104对应的具体实施方式与前述图1示出的步骤S101、步骤S102、步骤S103以及步骤S104的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
在一些实施方式中，所述虚拟背景指令包括对应的直播标识信息；其中，所述设备还包括一五模块(未示出)，用于基于所述直播标识信息匹配确定对应的虚拟背景图像，其中，所述虚拟背景图像对应的背景关键字段与所述直播标识信息相匹配。在一些实施方式中，一五模块，用于基于所述直播标识信息匹配确定对应的一个或多个候选虚拟背景图像，其中，每个候选虚拟背景图像对应的背景关键字段与所述直播标识信息相匹配；基于所述一个或多个候选虚拟背景图像获取对应的虚拟背景图像。在一些实施方式中，所述基于所述一个或多个候选虚拟背景图像获取对应的虚拟背景图像，包括：将所述一个或多个候选虚拟背景图像返回至所述第一用户设备；接收所述第一用户设备返回的、基于所述主播的操作确定的虚拟背景图像，其中，所述虚拟背景图像包含于所述一个或多个候选虚拟背景图像。
在一些实施方式中，所述设备还包括一六模块(未示出)，用于实时获取所述直播的实时直播标识信息；若所述实时直播标识信息变更，生成对应的虚拟背景变更指令；响应于所述虚拟背景变更指令，基于所述实时直播标识信息匹配确定对应的变更虚拟背景图像，其中，所述变更虚拟背景图像对应的背景关键字段与所述实时直播标识信息相匹配；其中，所述根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：根据所述主播人像区域及所述变更虚拟背景图像确定对应的变更适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述变更适配比例信息，生成对应的变更虚拟直播图像；其中，一四模块104，用于将所述变更虚拟直播图像下发至所述直播的观众用户的第二用户设备。在一些实施方式中，所述设备还包括一七模块(未示出)，用于：对所述主播人像区域进行阴影化处理，确定对应的阴影主播人像区域；其中，所述根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：根据所述阴影主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像。
在一些实施方式中，所述根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，用于根据所述适配比例信息调整所述主播人像区域和/或所述虚拟背景图像，从而确定对应的适配主播人像区域及适配虚拟背景图像；将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像。
在一些实施方式中，所述将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像，包括：根据所述适配主播人像区域及所述适配虚拟背景图像确定所述适配主播人像区域在所述适配背景图像对应的叠加位置信息；根据所述叠加位置信息将所述适配阴影主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像。
在此，所述一五模块至一七模块对应的具体实施方式与前述步骤S105至步骤S107的实施例相同或相似，因而不再赘述，以引用的方式包含于此。
除上述各实施例介绍的方法和设备外，本申请还提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机代码，当所述计算机代码被执行时，如前任一项所述的方法被执行。
本申请还提供了一种计算机程序产品，当所述计算机程序产品被计算机设备执行时，如前任一项所述的方法被执行。
本申请还提供了一种计算机设备，所述计算机设备包括：
一个或多个处理器；
存储器，用于存储一个或多个计算机程序；
当所述一个或多个计算机程序被所述一个或多个处理器执行时，使得所述一个或多个处理器实现如前任一项所述的方法。
图3示出了可被用于实施本申请中所述的各个实施例的示例性***；
如图3所示在一些实施例中，***300能够作为各所述实施例中的任意一个上述设备。在一些实施例中，***300可包括具有指令的一个或多个计算机可读介质(例如，***存储器或NVM/存储设备320)以及与该一个或多个计算机可读介质耦合并被配置为执行指令以实现模块从而执行本申请中所述的动作的一个或多个处理器(例如，(一个或多个)处理器305)。
对于一个实施例，***控制模块310可包括任意适当的接口控制器，以向(一个或多个)处理器305中的至少一个和/或与***控制模块310通信的任意适当的设备或组件提供任意适当的接口。
***控制模块310可包括存储器控制器模块330，以向***存储器315提供接口。存储器控制器模块330可以是硬件模块、软件模块和/或固件模块。
***存储器315可被用于例如为***300加载和存储数据和/或指令。对于一个实施例，***存储器315可包括任意适当的易失性存储器，例如，适当的DRAM。在一些实施例中，***存储器315可包括双倍数据速率类型四同步动态随机存取存储器(DDR4SDRAM)。
对于一个实施例，***控制模块310可包括一个或多个输入/输出(I/O)控制器，以向NVM/存储设备320及(一个或多个)通信接口325提供接口。
例如，NVM/存储设备320可被用于存储数据和/或指令。NVM/存储设备320可包括任意适当的非易失性存储器(例如，闪存)和/或可包括任意适当的(一个或多个)非易失性存储设备(例如，一个或多个硬盘驱动器(HDD)、一个或多个光盘(CD)驱动器和/或一个或多个数字通用光盘(DVD)驱动器)。
NVM/存储设备320可包括在物理上作为***300被安装在其上的设备的一部分的存储资源，或者其可被该设备访问而不必作为该设备的一部分。例如，NVM/存储设备320可通过网络经由(一个或多个)通信接口325进行访问。
(一个或多个)通信接口325可为***300提供接口以通过一个或多个网络和/或与任意其他适当的设备通信。***300可根据一个或多个无线网络标准和/或协议中的任意标准和/或协议来与无线网络的一个或多个组件进行无线通信。
对于一个实施例，(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器(例如，存储器控制器模块330)的逻辑封装在一起。对于一个实施例，(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器的逻辑封装在一起以形成***级封装(SiP)。对于一个实施例，(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器的逻辑集成在同一模具上。对于一个实施例，(一个或多个)处理器305中的至少一个可与***控制模块310的一个或多个控制器的逻辑集成在同一模具上以形成片上***(SoC)。
在各个实施例中，***300可以但不限于是：服务器、工作站、台式计算设备或移动计算设备(例如，膝上型计算设备、手持计算设备、平板电脑、上网本等)。在各个实施例中，***300可具有更多或更少的组件和/或不同的架构。例如，在一些实施例中，***300包括一个或多个摄像机、键盘、液晶显示器(LCD)屏幕(包括触屏显示器)、非易失性存储器端口、多个天线、图形芯片、专用集成电路(ASIC)和扬声器。
需要注意的是，本申请可在软件和/或软件与硬件的组合体中被实施，例如，可采用专用集成电路(ASIC)、通用目的计算机或任何其他类似硬件设备来实现。在一个实施例中，本申请的软件程序可以通过处理器执行以实现上文所述步骤或功能。同样地，本申请的软件程序(包括相关的数据结构)可以被存储到计算机可读记录介质中，例如，RAM存储器，磁或光驱动器或软磁盘及类似设备。另外，本申请的一些步骤或功能可采用硬件来实现，例如，作为与处理器配合从而执行各个步骤或功能的电路。
另外，本申请的一部分可被应用为计算机程序产品，例如计算机程序指令，当其被计算机执行时，通过该计算机的操作，可以调用或提供根据本申请的方法和/或技术方案。本领域技术人员应能理解，计算机程序指令在计算机可读介质中的存在形式包括但不限于源文件、可执行文件、安装包文件等，相应地，计算机程序指令被计算机执行的方式包括但不限于：该计算机直接执行该指令，或者该计算机编译该指令后再执行对应的编译后程序，或者该计算机读取并执行该指令，或者该计算机读取并安装该指令后再执行对应的安装后程序。在此，计算机可读介质可以是可供计算机访问的任意可用的计算机可读存储介质或通信介质。
通信介质包括藉此包含例如计算机可读指令、数据结构、程序模块或其他数据的通信信号被从一个***传送到另一***的介质。通信介质可包括有导的传输介质(诸如电缆和线(例如，光纤、同轴等))和能传播能量波的无线(未有导的传输)介质，诸如声音、电磁、RF、微波和红外。计算机可读指令、数据结构、程序模块或其他数据可被体现为例如无线介质(诸如载波或诸如被体现为扩展频谱技术的一部分的类似机制)中的已调制数据信号。术语“已调制数据信号”指的是其一个或多个特征以在信号中编码信息的方式被更改或设定的信号。调制可以是模拟的、数字的或混合调制技术。
作为示例而非限制，计算机可读存储介质可包括以用于存储诸如计算机可读指令、数据结构、程序模块或其它数据的信息的任何方法或技术实现的易失性和非易失性、可移动和不可移动的介质。例如，计算机可读存储介质包括，但不限于，易失性存储器，诸如随机存储器(RAM,DRAM,SRAM)；以及非易失性存储器，诸如闪存、各种只读存储器(ROM,PROM,EPROM,EEPROM)、磁性和铁磁/铁电存储器(MRAM,FeRAM)；以及磁性和光学存储设备(硬盘、磁带、CD、DVD)；或其它现在已知的介质或今后开发的能够存储供计算机***使用的计算机可读信息/数据。
在此，根据本申请的一个实施例包括一个装置，该装置包括用于存储计算机程序指令的存储器和用于执行程序指令的处理器，其中，当该计算机程序指令被该处理器执行时，触发该装置运行基于前述根据本申请的多个实施例的方法和/或技术方案。
对于本领域技术人员而言，显然本申请不限于上述示范性实施例的细节，而且在不背离本申请的精神或基本特征的情况下，能够以其他的具体形式实现本申请。因此，无论从哪一点来看，均应将实施例看作是示范性的，而且是非限制性的，本申请的范围由所附权利要求而不是上述说明限定，因此旨在将落在权利要求的等同要件的含义和范围内的所有变化涵括在本申请内。不应将权利要求中的任何附图标记视为限制所涉及的权利要求。此外，显然“包括”一词不排除其他单元或步骤，单数不排除复数。装置权利要求中陈述的多个单元或装置也可以由一个单元或装置通过软件或者硬件来实现。第一，第二等词语用来表示名称，而并不表示任何特定的顺序。
Claims (15)
1.一种用于确定虚拟直播图像的方法，其中，该方法包括：
接收所述主播的第一用户设备上传的、对应直播的实时直播图像；
获取关于所述实时直播图像的虚拟背景指令；
响应于所述虚拟背景指令，根据所述实时直播图像确定所述主播的主播人像区域，根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，其中，所述适配比例信息包括所述主播人像区域相对于所述虚拟背景图像的像素比例；
将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备。
2.根据权利要求1所述的方法，其中，所述获取关于所述实时直播图像的虚拟背景指令，包括：
接收所述第一用户设备上传的、基于所述主播的用户操作的虚拟背景指令。
3.根据权利要求2所述的方法，其中，所述用户操作包括以下至少任一项：
语音信息；
体态信息；
触控信息；
二维码信息。
4.根据权利要求1所述的方法，其中，所述获取关于所述实时直播图像的虚拟背景指令，包括：
根据所述直播的直播参数信息满足预设条件，确定所述实时直播图像的虚拟背景指令。
5.根据权利要求4所述的方法，其中，所述直播参数信息包括以下至少任一项：
所述直播的当前观众用户的第一用户数量；
所述直播的当前观众用户中用户等级大于或等于用户等级阈值的观众用户的第二用户数量；
所述直播的资源累加信息；
所述主播的主播等级信息。
6.根据权利要求1所述的方法，其中，所述虚拟背景指令包括对应的直播标识信息；其中，所述方法还包括：
基于所述直播标识信息匹配确定对应的虚拟背景图像，其中，所述虚拟背景图像对应的背景关键字段与所述直播标识信息相匹配。
7.根据权利要求6所述的方法，其中，所述基于所述直播标识信息匹配确定对应的虚拟背景图像，包括：
基于所述直播标识信息匹配确定对应的一个或多个候选虚拟背景图像，其中，每个候选虚拟背景图像对应的背景关键字段与所述直播标识信息相匹配；
基于所述一个或多个候选虚拟背景图像获取对应的虚拟背景图像。
8.根据权利要求7所述的方法，其中，所述基于所述一个或多个候选虚拟背景图像获取对应的虚拟背景图像，包括：
将所述一个或多个候选虚拟背景图像返回至所述第一用户设备；
接收所述第一用户设备返回的、基于所述主播的操作确定的虚拟背景图像，其中，所述虚拟背景图像包含于所述一个或多个候选虚拟背景图像。
9.根据权利要求6至8中任一项所述的方法，其中，所述方法还包括：
实时获取所述直播的实时直播标识信息；
若所述实时直播标识信息变更，生成对应的虚拟背景变更指令；
响应于所述虚拟背景变更指令，基于所述实时直播标识信息匹配确定对应的变更虚拟背景图像，其中，所述变更虚拟背景图像对应的背景关键字段与所述实时直播标识信息相匹配；
其中，所述根据所述主播人像区域及对应的虚拟背景图像确定对应的适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：
根据所述主播人像区域及所述变更虚拟背景图像确定对应的变更适配比例信息，根据所述主播人像区域、所述虚拟背景图像以及所述变更适配比例信息，生成对应的变更虚拟直播图像；
其中，所述将所述虚拟直播图像下发至所述直播的观众用户的第二用户设备，包括：
将所述变更虚拟直播图像下发至所述直播的观众用户的第二用户设备。
10.根据权利要求1所述的方法，其中，所述方法还包括：
对所述主播人像区域进行阴影化处理，确定对应的阴影主播人像区域；
其中，所述根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：
根据所述阴影主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像。
11.根据权利要求1所述的方法，其中，所述根据所述主播人像区域、所述虚拟背景图像以及所述适配比例信息，生成对应的虚拟直播图像，包括：
根据所述适配比例信息调整所述主播人像区域和/或所述虚拟背景图像，从而确定对应的适配主播人像区域及适配虚拟背景图像；
将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像。
12.根据权利要求11所述的方法，其中，所述将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像，包括：
根据所述适配主播人像区域及所述适配虚拟背景图像确定所述适配主播人像区域在所述适配背景图像对应的叠加位置信息；
根据所述叠加位置信息将所述适配主播人像区域叠加至所述适配虚拟背景图像，以生成对应的虚拟直播图像。
13.一种计算机设备，其中，该设备包括：
处理器；以及
被安排成存储计算机可执行指令的存储器，所述可执行指令在被执行时使所述处理器执行如权利要求1至12中任一项所述方法的步骤。
14.一种计算机可读存储介质，其上存储有计算机程序/指令，其特征在于，该计算机程序/指令在被执行时使得***进行执行如权利要求1至12中任一项所述方法的步骤。
15.一种计算机程序产品，包括计算机程序/指令，其特征在于，该计算机程序/指令被处理器执行时实现权利要求1至12中任一项所述方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111387823.0A CN113965665A (zh) | 2021-11-22 | 2021-11-22 | 一种用于确定虚拟直播图像的方法与设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202111387823.0A CN113965665A (zh) | 2021-11-22 | 2021-11-22 | 一种用于确定虚拟直播图像的方法与设备 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN113965665A true CN113965665A (zh) | 2022-01-21 |
Family
ID=79471503
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202111387823.0A Pending CN113965665A (zh) | 2021-11-22 | 2021-11-22 | 一种用于确定虚拟直播图像的方法与设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN113965665A (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114449355A (zh) * | 2022-01-24 | 2022-05-06 | 腾讯科技（深圳）有限公司 | 一种直播互动的方法、装置、设备及存储介质 |
| CN117596418A (zh) * | 2023-10-11 | 2024-02-23 | 书行科技(北京)有限公司 | 直播间ui展示控制方法、装置、电子设备及存储介质 |
Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106713942A (zh) * | 2016-12-27 | 2017-05-24 | 广州华多网络科技有限公司 | 视频处理方法和装置 |
| CN107920256A (zh) * | 2017-11-30 | 2018-04-17 | 广州酷狗计算机科技有限公司 | 直播数据播放方法、装置及存储介质 |
| CN108040265A (zh) * | 2017-12-13 | 2018-05-15 | 北京奇虎科技有限公司 | 一种对视频进行处理的方法和装置 |
| CN110049378A (zh) * | 2019-04-17 | 2019-07-23 | 珠海格力电器股份有限公司 | 一种视频模式下的互动方法、控制***及终端 |
| CN111010589A (zh) * | 2019-12-19 | 2020-04-14 | 腾讯科技（深圳）有限公司 | 基于人工智能的直播方法、装置、设备及存储介质 |
| CN111369582A (zh) * | 2020-03-06 | 2020-07-03 | 腾讯科技（深圳）有限公司 | 图像分割方法、背景替换方法、装置、设备及存储介质 |
| CN111432235A (zh) * | 2020-04-01 | 2020-07-17 | 网易（杭州）网络有限公司 | 直播视频生成方法、装置、计算机可读介质及电子设备 |
| CN112188228A (zh) * | 2020-09-30 | 2021-01-05 | 网易（杭州）网络有限公司 | 直播方法及装置、计算机可读存储介质和电子设备 |
| CN112702615A (zh) * | 2020-11-27 | 2021-04-23 | 深圳市创成微电子有限公司 | 一种网络直播音视频处理方法及*** |
| CN113269863A (zh) * | 2021-07-19 | 2021-08-17 | 成都索贝视频云计算有限公司 | 一种基于视频图像的前景物体阴影实时生成方法 |
| CN113490063A (zh) * | 2021-08-26 | 2021-10-08 | 上海盛付通电子支付服务有限公司 | 一种用于直播互动的方法、设备、介质及程序产品 |
-
2021
- 2021-11-22 CN CN202111387823.0A patent/CN113965665A/zh active Pending
Patent Citations (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106713942A (zh) * | 2016-12-27 | 2017-05-24 | 广州华多网络科技有限公司 | 视频处理方法和装置 |
| CN107920256A (zh) * | 2017-11-30 | 2018-04-17 | 广州酷狗计算机科技有限公司 | 直播数据播放方法、装置及存储介质 |
| CN108040265A (zh) * | 2017-12-13 | 2018-05-15 | 北京奇虎科技有限公司 | 一种对视频进行处理的方法和装置 |
| CN110049378A (zh) * | 2019-04-17 | 2019-07-23 | 珠海格力电器股份有限公司 | 一种视频模式下的互动方法、控制***及终端 |
| CN111010589A (zh) * | 2019-12-19 | 2020-04-14 | 腾讯科技（深圳）有限公司 | 基于人工智能的直播方法、装置、设备及存储介质 |
| CN111369582A (zh) * | 2020-03-06 | 2020-07-03 | 腾讯科技（深圳）有限公司 | 图像分割方法、背景替换方法、装置、设备及存储介质 |
| CN111432235A (zh) * | 2020-04-01 | 2020-07-17 | 网易（杭州）网络有限公司 | 直播视频生成方法、装置、计算机可读介质及电子设备 |
| CN112188228A (zh) * | 2020-09-30 | 2021-01-05 | 网易（杭州）网络有限公司 | 直播方法及装置、计算机可读存储介质和电子设备 |
| CN112702615A (zh) * | 2020-11-27 | 2021-04-23 | 深圳市创成微电子有限公司 | 一种网络直播音视频处理方法及*** |
| CN113269863A (zh) * | 2021-07-19 | 2021-08-17 | 成都索贝视频云计算有限公司 | 一种基于视频图像的前景物体阴影实时生成方法 |
| CN113490063A (zh) * | 2021-08-26 | 2021-10-08 | 上海盛付通电子支付服务有限公司 | 一种用于直播互动的方法、设备、介质及程序产品 |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN114449355A (zh) * | 2022-01-24 | 2022-05-06 | 腾讯科技（深圳）有限公司 | 一种直播互动的方法、装置、设备及存储介质 |
| CN114449355B (zh) * | 2022-01-24 | 2023-06-20 | 腾讯科技（深圳）有限公司 | 一种直播互动的方法、装置、设备及存储介质 |
| CN117596418A (zh) * | 2023-10-11 | 2024-02-23 | 书行科技(北京)有限公司 | 直播间ui展示控制方法、装置、电子设备及存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11741328B2 (en) | Dynamic embedding of machine-readable codes within video and digital media | |
| CN110136229B (zh) | 一种用于实时虚拟换脸的方法与设备 | |
| CN113741698B (zh) | 一种确定和呈现目标标记信息的方法与设备 | |
| US10798363B2 (en) | Video file processing method and apparatus | |
| CN110166842B (zh) | 一种视频文件操作方法、装置和存储介质 | |
| CN113965665A (zh) | 一种用于确定虚拟直播图像的方法与设备 | |
| CN110166795B (zh) | 一种视频截图方法及装置 | |
| CN111683260A (zh) | 基于虚拟主播的节目视频生成方法、***和存储介质 | |
| CN107221346B (zh) | 一种用于确定ar视频的识别图片的方法与设备 | |
| CN113709519B (zh) | 一种用于确定直播遮挡区域的方法与设备 | |
| CN113301413B (zh) | 信息显示方法及装置 | |
| CN113490063B (zh) | 一种用于直播互动的方法、设备、介质及程序产品 | |
| CN113794831B (zh) | 视频拍摄方法、装置、电子设备及介质 | |
| CN110780955A (zh) | 一种用于处理表情消息的方法与设备 | |
| CN112822419A (zh) | 一种用于生成视频信息的方法与设备 | |
| CN112818719A (zh) | 一种识别二维码的方法与设备 | |
| CN109636922B (zh) | 一种用于呈现增强现实内容的方法与设备 | |
| US10936878B2 (en) | Method and device for determining inter-cut time range in media item | |
| CN114143568B (zh) | 一种用于确定增强现实直播图像的方法与设备 | |
| CN109547830B (zh) | 一种用于多个虚拟现实设备的同步播放的方法与装置 | |
| CN114449355B (zh) | 一种直播互动的方法、装置、设备及存储介质 | |
| KR101947553B1 (ko) | 객체 기반 동영상 편집 장치 및 방법 | |
| CN112383831B (zh) | 一种用于生成弹幕信息的方法与设备 | |
| CN112752110B (zh) | 视频呈现方法及装置、计算设备、存储介质 | |
| CN114821410A (zh) | 一种确定目标对象的对象关联信息的方法与设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination |