CN115086738B - 信息添加方法、装置、计算机设备及存储介质 - Google Patents

信息添加方法、装置、计算机设备及存储介质 Download PDF

Info

Publication number
CN115086738B
CN115086738B CN202210638195.7A CN202210638195A CN115086738B CN 115086738 B CN115086738 B CN 115086738B CN 202210638195 A CN202210638195 A CN 202210638195A CN 115086738 B CN115086738 B CN 115086738B
Authority
CN
China
Prior art keywords
target
key point
information
image
determining
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202210638195.7A
Other languages
English (en)
Other versions
CN115086738A (zh
Inventor
郭昀霖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Boguan Information Technology Co Ltd
Original Assignee
Guangzhou Boguan Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Guangzhou Boguan Information Technology Co Ltd filed Critical Guangzhou Boguan Information Technology Co Ltd
Priority to CN202210638195.7A priority Critical patent/CN115086738B/zh
Publication of CN115086738A publication Critical patent/CN115086738A/zh
Application granted granted Critical
Publication of CN115086738B publication Critical patent/CN115086738B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/161Detection; Localisation; Normalisation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Image Analysis (AREA)

Abstract

本申请实施例公开了一种信息添加方法、装置、计算机设备及存储介质。本方案通过获取直播界面的主播用户的人脸位置的实时变化,将横幅信息的移动位置与获取的人脸位置的进行区域交叉判断,若存在交叉遮挡,则将横幅信息的显示位置进行相应的偏移,以此避免主播用户的人脸被遮挡,从而提高观众用户的视频观看体验。

Description

信息添加方法、装置、计算机设备及存储介质
技术领域
本申请涉及计算机技术领域,具体涉及一种信息添加方法、装置、计算机设备及存储介质。
背景技术
随着互联网技术的快速发展,网络直播称为一种新兴的网络互动方式,因其具有实时性、交互性等特点受到越来越多观众的喜爱。在主播进行视频直播时,为了活跃直播气氛,会触发各式各样的横幅信息,横幅信息常见的展现形式是在直播间视频区中间偏上或者偏下的位置进行移动播放,但是,在有大量横幅信息进行排第播放时,部分横幅信息会将主播的脸遮挡,导致长时间的主播的脸被遮挡,从而影响观众用户的观看体验。
发明内容
本申请实施例提供一种信息添加方法、装置、计算机设备及存储介质,可以提高用户的视频观看体验。
本申请实施例提供了一种信息添加方法,所述方法包括:
确定当前处理后图像,其中,所述当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取所述目标信息在所述当前处理后图像中的当前位置,以及所述目标信息对应的移动参数;
基于所述目标视频中相邻图像帧间的时间间隔以及所述移动参数,确定所述目标信息在所述当前图像帧的下一图像帧中的移动后位置;
根据所述移动后位置以及所述当前处理后图像中目标对象所处的目标位置,判断在所述下一图像帧中所述目标信息是否遮挡所述目标对象;
若是,则对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
相应的,本申请实施例还提供了一种信息添加装置,所述装置包括:
第一确定单元,用于确定当前处理后图像,其中,所述当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取单元,用于获取所述目标信息在所述当前处理后图像中的当前位置,以及所述目标信息对应的移动参数;
第二确定单元,用于基于所述目标视频中相邻图像帧间的时间间隔以及所述移动参数,确定所述目标信息在所述当前图像帧的下一图像帧中的移动后位置;
判断单元,用于根据所述移动后位置以及所述当前处理后图像中目标对象所处的目标位置,判断在所述下一图像帧中所述目标信息是否遮挡所述目标对象;
调整单元,用于若是,则对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,判断单元包括:
识别子单元,用于对所述当前处理后图像进行识别处理,确定所述目标对象在所述当前处理后图像中的所述目标位置;
判断子单元,用于判断所述下一图像帧中所述移动后位置与所述目标位置是否存在重叠。
在一些实施例中,判断子单元具体用于:
从多个关键点位置中筛选出目标关键点位置,并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,判断子单元具体用于:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;根据所述移动参数从所述第一候选关键点位置中筛选出第二候选关键点位置;根据所述第二候选关键点位置中相邻关键点位置之间的偏移距离,从所述第二候选关键点中筛选出所述目标关键点位置;并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,判断子单元具体用于:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;从所述目标对象的多个方向侧中确定与所述移动方向相对的目标方向侧;从所述第一候选关键点位置中筛选出位于所述目标方向侧的关键点位置,得到所述第二候选关键点位置;根据所述第二候选关键点位置中相邻关键点位置之间的偏移距离,从所述第二候选关键点中筛选出所述目标关键点位置;并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交
在一些实施例中,判断子单元具体用于:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;根据所述移动参数从所述第一候选关键点位置中筛选出第二候选关键点位置;计算所述第二候选关键点位置中目标第二候选关键点位置与前一相邻关键点位置的第一偏移距离,以及所述目标第二候选关键点位置与后一相邻关键点位置的第二偏移距离;确定所述第一偏移距离与所述第二偏移距离的比值;若所述比值满足预设比值范围,则确定所述目标第二候选关键点位置为所述目标关键点位置;并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,识别子单元具体用于:
通过第一检测模型对所述当前处理后图像进行处理,确定所述当前处理后图像中的人体区域图像;
对所述人体区域图像进行二值化处理,得到处理后人体图像;
通过第二检测模型对所述处理后人体图像进行处理,得到所述人脸部位在所述当前处理后图像中的目标位置。
在一些实施例中,调整单元包括:
获取子单元,用于从所述下一图像帧中获取所述目标位置与所述移动后位置相交的交点位置;
确定子单元,用于根据所述目标位置与所述交点位置的位置关系确定位置调节信息;
调整子单元,用于基于所述位置调节信息对所述移动后位置进行调整,得到所述下一帧处理后图像。
在一些实施例中,确定子单元具体用于:
从所述目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
根据所述交点位置分别与所述第一边缘位置以及所述第二边缘位置的距离,确定调整方向以及调节距离,得到所述位置调节信息。
在一些实施例中,确定子单元具体用于:
从所述目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
计算所述交点位置在所述指定方向上与所述第一边缘位置的第一距离,以及与所述第二边缘位置的第二距离;若所述第一距离大于所述第二距离,则根据所述交点位置朝向所述第二边缘位置的方向确定所述调整方向,以及根据所述第二距离确定所述调节距离;若所述第一距离小于所述第二距离,则根据所述交点位置朝向所述第一边缘位置的方向确定所述调整方向,以及根据所述第一距离确定所述调节距离,得到所述位置调节信息。
相应的,本申请实施例还提供了一种计算机设备,包括存储器,处理器及存储在储存器上并可在处理器上运行的计算机程序,其中,处理器执行本申请实施例任一提供的信息添加方法。
相应的,本申请实施例还提供了一种计算机可读存储介质,计算机可读存储介质存储有多条指令,指令适于处理器进行加载,以执行如上的信息添加方法。
本申请实施例通过获取直播界面的主播用户的人脸位置的实时变化,将横幅信息的移动位置与获取的人脸位置的进行区域交叉判断,若存在交叉遮挡,则将横幅信息的显示位置进行相应的偏移,以此避免主播用户的人脸被遮挡,从而提高观众用户的视频观看体验。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种信息添加方法的流程示意图。
图2为本申请实施例提供的一种信息添加方法的应用场景示意图。
图3为本申请实施例提供的另一种信息添加方法的流程示意图。
图4为本申请实施例提供的另一种信息添加方法的应用场景示意图。
图5为本申请实施例提供的另一种信息添加方法的应用场景示意图。
图6为本申请实施例提供的一种信息添加装置的结构框图。
图7为本申请实施例提供的计算机设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请的一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种信息添加方法、装置、存储介质及计算机设备。具体地,本申请实施例的信息添加方法可以由计算机设备执行,其中,该计算机设备可以为服务器等设备。服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式***,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN、以及大数据和人工智能平台等基础云计算服务的云服务器。
例如,该计算机设备可以是终端,该终端确定当前处理后图像,其中,当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
基于上述问题,本申请实施例提供第一种信息添加方法、装置、计算机设备及存储介质,可以提高用户的视频观看体验。
以下分别进行详细说明。需说明的是,以下实施例的描述顺序不作为对实施例优选顺序的限定。
本申请实施例提供一种信息添加方法,该方法可以由终端或服务器执行,本申请实施例以信息添加方法由终端执行为例来进行说明,该终端可以为主播客户端。
请参阅图1,图1为本申请实施例提供的一种信息添加方法的流程示意图。该信息添加方法的具体流程可以如下:
101、确定当前处理后图像。
其中,当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到。目标视频指的是当前终端的用户界面播放的视频,目标视频可以为多种类型的视频,不同类型的视频可以通过不同的视频应用进行播放,比如,目标视频可以为已完成录制的娱乐视频,包括视频数据库中存储的电影、电视剧、综艺等视频,娱乐视频可以通过视频播放软件进行播放;或者,目标视频可以为实时录制播放的视频,包括直播视频,直播视频可以通过直播软件进行播放等。
其中,当前视频帧指的是目标视频中任一原始视频帧,目标信息指的是目标视频在播放过程中添加的显示信息。
例如,当目标视频为娱乐视频时,目标信息可以为弹幕信息,也即目标视频通过视频播放软件进行播放时,用户输入的弹幕信息;或者,当目标视频为直播视频时,目标信息可以为横幅信息,也即目标视频通过直播软件播放时,直播软件根据直播内容确定的横幅内容等。
具体的,当前处理后图像可以通过采集当前视频帧对应的播放界面得到。比如,请参阅图2,图2为本申请实施例提供的一种信息添加方法的应用场景示意图。在图2所示的视频播放界面播放有目标视频的当前图像帧,以及目标信息,则截取该视频播放界面的播放画面,即可以得到当前处理后图像。
102、获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数。
在本申请实施例中,目标信息在目标视频播放过程中可以为移动显示,则目标信息在目标视频的不同图像帧中的显示位置可以不相同,比如,目标信息从开始显示直至结束显示过程中,视频播放界面对应播放目标视频的第一图像帧至第十图像帧,则目标信息分别在第一图像帧至第十图像帧的不同位置显示。
其中,移动参数指的是目标信息在移动显示过程中的各个参数,可以包括目标信息的初始显示位置、移动方向以及移动速度等,比如,初始显示位置可以为视频播放界面左上方,移动方向可以为向右移动,移动速度可以为每秒移动1厘米等。
103、基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置。
其中,相邻图像帧间的时间间隔指的是目标视频通过视频播放界面播放过程中,视频播放界面播放相邻两个图像帧之间的时间间隔,比如,时间间隔可以为0.1秒等。
其中,移动参数可以包括移动速度,首先可以根据时间间隔与移动速度确定目标信息由当前图像帧到下一图像帧的移动距离,然后根据目标信息在当前图像帧的初始显示位置加上移动距离,即可以得到目标信息在下一图像帧中的位置,也即移动后位置。
例如,获取目标信息在当前图像帧中的初始显示位置可以为P1,时间间隔可以为0.1秒,移动速度可以为每秒移动1厘米,则根据时间间隔与移动速度的乘值,得到移动距离可以为0.1厘米,然后将初始显示位置与移动距离相加,得到移动后位置可以为P1+0.1。其中,由于当前图像帧与下一图像帧均为目标视频中的图像帧,则当前图像帧与下一图像帧的大小相同,且当前图像帧中的各个位置,下一图像帧中都有相同位置与之对应。
104、根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象。
其中,目标对象指的是目标视频中的主要显示内容,比如,目标对象可以为指定的文字、人物、或者图案等内容。
在本申请实施例中,由于目标视频播放过程中,视频播放界面会显示有目标信息,为了避免目标信息显示时对目标对象产生遮挡,影响用户观看目标视频,可以对视频播放界面的目标对象以及目标信息的显示位置进行检测,进而根据检测结果对目标信息的显示位置进行调整,以解决遮挡目标对象的问题。
在一些实施例中,为了获取目标对象的准确位置,步骤“根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象”,可以包括以下操作:
对当前处理后图像进行识别处理,确定目标对象在当前处理后图像中的目标位置;
判断下一图像帧中移动后位置与目标位置是否存在重叠。
具体的,在对当前处理后图像进行识别处理时,可以通过检测模型识别出当前处理后图像中的目标对象,从而确定目标对象在处理后图像中的位置,也即目标位置。
在一些实施例中,目标对象为可以人脸部位,为了提高目标对象的检测准确性,步骤“对当前处理后图像进行识别处理,确定目标对象在当前处理后图像中的目标位置”,可以包括以下操作:
通过第一检测模型对当前处理后图像进行处理,确定当前处理后图像中的人体区域图像;
对人体区域图像进行二值化处理,得到处理后人体图像;
通过第二检测模型对处理后人体图像进行处理,得到人脸部位在当前处理后图像中的目标位置。
首先,对于当前处理后图像进行图像预处理,图像预处理指的是对图像进行特征抽取、分割和匹配前所进行的处理。图像预处理的主要目的是消除图像中无关的信息,恢复有用的真实信息,增强有关信息的可检测性和最大限度地简化数据,从而改进特征抽取、图像分割、匹配和识别的可靠性。图像预处理过程一般有数字化、几何变换、归一化、平滑、复原和增强等步骤。
在对当前处理后图像进行图像预处理之后,将预处理后的当前处理后图像输入第一检测模型,第一检测模型用于识别出图像中的人体区域,比如,第一检测模型可以为YCbCr肤色模型,通过YCbCr肤色模型对当前处理后图像进行检测,可以得到当前处理后图像中的手掌、手臂、脸部等人体区域。根据所得人体区域快速剔除当前处理后图像中除人体区域以外的背景图像,从而分割出人体区域图像。
其中,YCbCr肤色模型是一种常用的肤色检测的色彩模型,其中Y代表亮度,Cr代表光源中的红色分量,Cb代表光源中的蓝色分量。人的肤色在外观上的差异是由色度引起的,不同人的肤色分布集中在较小的区域内。肤色的YCbCr颜色空间CbCr平面分布在近似的椭圆区域内,通过判断当前像素点的CbCr是否落在肤色分布的椭圆区域内,就可以很容易地确认当前像素点是否属于肤色。将图像转换到YCbCr空间并且在CbCr平面进行投影,可以采集到肤色的样本点。
在一些实施例中,为了减小检测模型的输入数据量,对于分割出的人体区域图像可以进行二值化处理,得到处理后人体图像。其中,图像的二值化,就是将图像上的像素点的灰度值设置为0或255,也就是将整个图像呈现出明显的只有黑和白的视觉效果,以此,可以减少模型的计算量,提高模型检测效率。
进一步的,将处理后人体图像输入第二检测模型,第二检测模型用于识别人脸部位,比如,第二检测模型可以为人脸检测模型,通过人脸检测模型对处理后人体图像进行检测处理,得到人脸部位在当前处理后图像中的目标位置,目标位置可以包括人脸部位的各个人脸关键点的位置。
在确定当前处理后图像中目标对象所在的目标位置之后,可以将目标位置与目标信息的移动后位置进行比较,判断目标位置与移动后位置是否存在重叠。
在一些实施例中,为了减少计算处理量,步骤“判断下一图像帧中移动后位置与目标位置是否存在重叠”,可以包括以下操作:
从多个关键点位置中筛选出目标关键点位置,并基于目标关键点位置生成关键点轨迹;
根据移动后位置确定目标信息的***轨迹;
判断关键点轨迹与***轨迹是否存在相交。
其中,目标位置可以包括构成目标对象的各个对象关键点对应的关键点位置,比如,构成目标对象的关键点包括:第一对象关键点,第二对象关键点,第三对象关键点等,则目标位置包括第一对象关键点对应的第一关键点位置,第二对象关键点对应的第二关键点位置,第三对象关键点对应的第三关键点位置。
其中,目标关键点位置指的是用于检测目标位置与移动后位置是否存在重叠的目标位置中的主要关键点位置。
具体的,基于目标关键点位置生成关键点轨迹可以将各个目标关键点位置按照位置排列顺序依次连接,从而得到关键点轨迹。
比如,目标关键点位置可以包括:第一对象关键点,第五对象关键点,第六对象关键点,第八对象关键点等,各目标关键点位置的位置排列顺序可以为:第一对象关键点、第五对象关键点、第六对象关键点、第八对象关键点。则可以将第一对象关键点与第五对象关键点连接,将第五对象关键点与第六对象关键点连接,将第六对象关键点与第八对象关键点连接,将第八对象关键点与第一对象关键点连接,得到目标关键点位置的连接轨迹,也即关键点轨迹。
在本申请实施例中,目标信息在下一图像帧中对应有显示区域,该显示区域的位置也即移动后位置。具体的,根据移动后位置确定目标信息的***轨迹,也即从移动后位置中选取显示区域的***边界,得到***轨迹,比如,显示区域可以为矩形显示区域,则获取该矩形显示区域的***矩形轮廓,即可以得到***轨迹。
进一步的,通过判断关键点轨迹与***轨迹是否存在相交,来判断下一图像帧中移动后位置与目标位置是否存在重叠。若关键点轨迹与***轨迹存在相交,则可以确定下一图像帧中移动后位置与目标位置存在重叠;若关键点轨迹与***轨迹不存在相交,则可以确定下一图像帧中移动后位置与目标位置不存在重叠。
在一些实施例中,为了进一步减少计算处理量,步骤“从多个关键点位置中筛选出目标关键点位置”,可以包括以下操作:
从多个关键点位置中筛选出对应于目标对象的***轮廓的第一候选关键点位置;
根据移动参数从第一候选关键点位置中筛选出第二候选关键点位置;
根据第二候选关键点位置中相邻关键点位置之间的偏移距离,从第二候选关键点中筛选出目标关键点位置。
在上述通过人脸检测模型对处理后人体图像进行检测处理,得到人脸部位各个关键点在当前处理后图像中对应的关键点位置,其中,关键点标注了人脸的部位,比如,眼睛,鼻子,嘴巴,脸等。
其中,目标对象的***轮廓也即指的是当前处理后图像中目标对象的轮廓位置,然后从检测出的目标对象对应的多个关键点位置中确定位于轮廓位置的关键点,从而得到第一候选关键点位置。
具体的,在筛选***轮廓的关键点时,可以采用凸包算法,凸包(Convex Hull)是一个计算几何(图形学)中的概念。在一个实数向量空间V中,对于给定集合X,所有包含X的凸集的交集S被称为X的凸包。X的凸包可以用X内所有点(X1,...Xn)的线性组合来构造。在二维欧几里得空间中,凸包可想象为一条刚好包著所有点的橡皮圈。也就是说,给定二维平面上的点集,凸包就是将最外层的点连接起来构成的凸多边型,它能包含点集中所有的点。
在一些实施例中,为了减少计算量,步骤“根据移动参数从第一候选关键点位置中筛选出第二候选关键点位置”,可以包括以下操作:
从目标对象的多个方向侧中确定与移动方向相对的目标方向侧;
从第一候选关键点位置中筛选出位于目标方向侧的关键点位置,得到第二候选关键点位置。
其中,移动参数可以包括移动方向。根据目标信息的移动方向对第一候选关键点进一步筛选。目标信息的移动方向可以为:水平向左或者水平向右等,则在判断目标信息的位置是否遮挡目标对象,可通过判断目标对象的左侧或者右侧是否与目标信息的位置相交。
其中,目标对象的多个方向侧包括:目标对象的上侧,下侧,左侧,右侧等,若移动方向为水平向右移动,则可以确定目标方向侧为目标对象的左侧;若移动方向为水平向左移动,则可以确定目标方向侧为目标对象的右侧等。
在确定目标方向侧后,从第一候选关键点位置中筛选位于目标方向侧的关键点位置,即可以得到第二候选关键点位置。
在一些实施例中,为了减少计算量,步骤“根据第二候选关键点位置中相邻关键点位置之间的偏移距离,从第二候选关键点中筛选出目标关键点位置”,可以包括以下操作:
计算第二候选关键点位置中目标第二候选关键点位置与前一相邻关键点位置的第一偏移距离,以及目标第二候选关键点位置与后一相邻关键点位置的第二偏移距离;
确定第一偏移距离与第二偏移距离的比值;
若比值满足预设比值范围,则确定目标第二候选关键点位置为目标关键点位置。
具体的,根据第二候选关键点位置的连线的变化趋势,进一步的对第二候选关键点位置进行筛选。遍历每一第二候选关键点位置,判断每一第二候选关键点位置的走势,也即判断该第二候选关键点位置是否为拐点,如果为拐点则保留该第二候选关键点位置,如果不为拐点,则删除该第二候选关键点位置。
例如,对于第二候选关键点中的关键点Pn,判断Pn是否为拐点,首先,需要计算与Pn相邻的前一个第二候选关键点Pn-1和与与Pn相邻的后一个Pn+1两个关键点位置的偏移值,通过计算获得Pn与Pn-1的偏移值可以为:offsetX1=Pn.x-Pn-1.x,offsetY1=Pn.y-Pn-1.y;Pn与Pn+1的偏移值可以为:offsetX2=Pn+1.x-Pn.x,offsetY2=Pn+1.y-Pn.y,再通过偏移量计算偏移比,offsetFactor1=offsetX1/offsetY1,offsetFactor2=offsetX2/offsetY2,最后比较两个偏移比的差值diff=offsetFactor2-offsetFactor1,如果差值diff在给定的合理偏移范围,也即预设比值范围外:diff>diffMax(最大范围值)或者diff<diffMin(最小范围值),则可以确定Pn是拐点,对于每一第二候选关键点位置可以通过上述方式判断是否为拐点,将拐点进行保留,从而得到目标关键点位置。
105、对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,为了避免目标信息对目标对象的遮挡,步骤“对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像”,可以包括以下操作:
从下一图像帧中获取目标位置与移动后位置相交的交点位置;
根据目标位置与交点位置的位置关系确定位置调节信息;
基于位置调节信息对移动后位置进行调整,得到下一帧处理后图像。
其中,获取目标位置与移动后位置相交的交点位置,也即获取基于目标位置生成的关键点轨迹与移动后位置的***轮廓轨迹的相交点,得到交点位置。然后根据下一图像帧中目标对象所处的目标位置与交点位置的位置关系确定目标信息的位置调节信息。
在一些实施例中,为了提高位置调节效率,步骤“根据目标位置与交点位置的位置关系确定位置调节信息”,可以包括以下操作:
从目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
根据交点位置分别与第一边缘位置以及第二边缘位置的距离,确定调整方向以及调节距离,得到位置调节信息。
其中,指定方向可以为竖直方向,第一边缘位置指的是目标位置中在竖直方向上距离值最大的边缘位置,第二边缘位置指的是目标位置中在竖直方向上距离值最小的边缘位置。
例如,第一边缘位置为(X1,Y1),第二边缘位置为(X2,Y2),其中,Y1大于Y2,且Y1在所有目标位置的所有Y值中取值最大,Y2在所有目标位置的所有Y值中取值最小。
在一些实施例中,步骤“根据交点位置分别与第一边缘位置以及第二边缘位置的距离,确定调整方向以及调节距离”,可以包括以下操作:
计算交点位置在指定方向上与第一边缘位置的第一距离,以及与第二边缘位置的第二距离;
若第一距离大于第二距离,则根据交点位置朝向第二边缘位置的方向确定调整方向,以及根据第二距离确定调节距离;
若第一距离小于第二距离,则根据交点位置朝向第一边缘位置的方向确定调整方向,以及根据第一距离确定调节距离。
例如,第一边缘位置为(X1,Y1),第二边缘位置为(X2,Y2),交点位置为(X3,Y3),计算交点位置在指定方向上与第一边缘位置的第一距离为:Y1-Y3,计算交点位置在指定方向上与第二边缘位置的第二距离为:Y3-Y2。
具体的,若交点位置与第一边缘位置的距离更近,则可以根据交点位置向第一边缘位置的方向确定调整方向,以及根据第一距离确定调整距离;若交点位置与第二边缘位置的距离更近,则可以根据交点位置向第二边缘位置的方向确定调整方向,以及根据第二距离确定调整距离。
例如,若第一距离Y1-Y3,大于第二距离Y3-Y2,则可以确定交点位置朝向第二边缘位置的方向,也即向下的方向,作为调整方向,并将第二距离作为调整距离,从而得到位置调节信息;若第一距离Y1-Y3,小于第二距离Y3-Y2,则可以确定交点位置朝向第一边缘位置的方向,也即向上的方向,作为调整方向,并将第一距离作为调整距离,从而得到位置调节信息。
进一步的,基于位置调节信息对移动后位置进行调整,即可以得到下一帧处理后图像,也即播放当前处理后图像之后的下一帧播放图像。
在一些实施例中,若目标视频的图像帧中除了显示目标信息外,还显示有其他信息,则为了保证视频播放界面的显示效果,在步骤“对目标信息在下一图像帧中的移动后位置进行调整”之后,还可以包括以下步骤:
若下一帧处理后图像中存在其他显示信息,且目标信息的调整后位置遮挡其他显示信息;
则获取目标信息的显示级别与其他显示信息的显示级别;
若目标信息的显示级别高于其他显示信息的显示级别,则在下一帧处理后图像中隐藏其他显示信息中被目标信息遮挡的内容。
具体的,检测下一帧处理后图像中是否存在除目标信息之外的其他显示信息,若存在其他显示信息,则判断目标信息的调整后位置是否与其他显示信息的显示位置存在重叠,若存在重叠,则确定目标信息遮挡其他显示信息。
当目标信息遮挡其他显示信息时,可以通过目标信息与其他显示信息的显示级别,对目标信息或者其他显示信息的显示进行调整。其中,显示级别表示信息的重要级别,重要级别越高,显示级别越高。
若目标信息的显示级别高于其他显示信息的显示级别,则为了优先保证目标信息的显示,可以将目标信息与其他显示信息的重叠区域显示目标信息,隐藏该重叠区域的其他显示信息;若目标信息的显示级别低于其他显示信息的显示级别,则为了优先保证其他显示信息的显示,可以将目标信息与其他显示信息的重叠区域显示其他显示信息,隐藏该重叠区域的目标信息。
在一些实施例中,为了保证其他显示信息与目标信息的共同显示,当其他显示信息与目标信息存在重叠时,可以继续对目标信息的显示位置进行调整,使得在下一帧处理后图像共同显示两者的内容,以方便用户观看更多显示内容。
本申请实施例公开了一种信息添加方法,该方法包括:确定当前处理后图像,其中,当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。以此,可以提高用户的视频观看体验。
根据上述介绍的内容,下面将举例来进一步说明本申请的信息添加方法。请参阅图3,图3为本申请实施例提供的另一种信息添加方法的流程示意图,以该信息添加方法应用于直播场景为例,具体流程可以如下:
201、当终端接收到针对目标横幅的展示指令时,获取当前直播界面的直播图像。
其中,目标横幅可以为***提示信息或者直播间的用户输入的信息,直播图像指的是当前直播界面播放的视频帧图像,也即实时的视频流图像。在本申请实施例中,当目标横幅开始显示时,启动检测逻辑,检测逻辑执行横幅位置检测以及位置判断操作。
202、终端对直播图像进行人脸检测,确定直播图像中主播用户的人脸位置。
具体的,对获得的直播图像进行预处理,通过YCbCr肤色模型检测对预处理后的直播图像进行处理,得到直播图像中的手掌、手臂、脸部等区域。根据所得区域快速剔除直播图像的背景,从而分割出主播用户的人体区域图像,并对人体区域图像进行二值化处理,二值化处理是为了减小人脸检测模型的输入数据量,从而减少计算量,提高效率,通过人脸检测模型对人体区域图像进行检测处理,可以快速确定人脸位置,从而获取人脸的位置的关键点集合m[(X1,Y1),…(Xn,Yn)]。
例如,请参阅图4,图4为本申请实施例提供的另一种信息添加方法的应用场景示意图,在图4所示的直播图像中,通过人脸检测模型识别出主播用户的人脸位置,得到人脸的位置的关键点。
203、终端判断目标横幅的显示位置与人脸位置是否存在重叠。
在本申请实施例中,预计算横幅与人脸是否相交是为了提前预判横幅遮挡人脸的可能性,因为检测判断逻辑是定时处理的,也是为了减少计算处理量。其主要通过以下步骤进行处理:
***轮廓点筛选:首先是选取人脸的关键点,已知通过人脸检测模型获得了一个人脸的关键点位置的集合m,这些关键点标注了人脸的各部位的位置,要判断人脸与横幅是否相交,仅需通过判断人脸***轮廓的相邻点的连线是否与横幅相交即可,这样也能够减少计算量。在已获得的关键点集合m中再筛选***轮廓点,通过凸包算法计算快速获得***轮廓关键点m1,再对已经筛选好的脸部***轮廓关键点m1按照位置顺时针排序好,这样是为了方便下面流程的处理。
轮廓点二次筛选:根据横幅运动方向进行筛选,横幅一般是按照固定的方向移动,一般是从左往右或者从右往左进行平移运动,要判断是否相交,只需要判断人脸左侧或者右侧是否与横幅是否相交即可,如果横幅往左运动,则从关键点集合m1中选取人脸右侧关键点,反之横幅往右运动,则从关键点集合m1中选取人脸左侧关键点,最终通过方向筛选获得关键点合集m2。
轮廓点三次筛选:根据关键点连线的走势对部分关键点进行剔除,遍历关键点集合m2,依次判断关键点的走势,即判断此关键点是否是拐点,如是保留否则删除,拐点的判断通过计算与前后两个关键点的偏移值来确定,设定一个偏移范围,超过偏移范围则认为是拐点。
例如,请参阅图5,图5为本申请实施例提供的另一种信息添加方法的应用场景示意图,譬如计算关键点Pn是否为拐点,则需要计算与前一个Pn-1和后一个Pn+1两个关键点位置的偏移值,通过计算获得与前一个的偏移值offsetX1=Pn.x-Pn-1.x,offsetY1=Pn.y-Pn-1.y;与后一个关键点的偏移值为offsetX2=Pn+1.x-Pn.x,offsetY2=Pn+1.y-Pn.y,再通过偏移量计算偏移比,offsetFactor1=offsetX1/offsetY1,offsetFactor2=offsetX2/offsetY2,最后比较两个偏移比的差值diff=offsetFactor2-offsetFactor1,如果差值在给定的合理偏移范围外:diff>diffMax(最大范围值)或者diff<diffMin(最小范围值),则认为是拐点。通过上面处理最终获得关键点的集合m3。
计算横幅与轮廓点连线是否相交:通过上面的3次筛选最是为了减少了相交的计算量,只需要遍历关键点合集m3依次计算的相邻两个关键点的连线是否与横幅边线相交即可,横幅的显示位置可以是一个矩形,需要选取左右边线和上下边线去做相交判断,因为是预处理提前判断,所以判断计算时横幅边线的位置还需要加上检测间隔时间内的横幅移动预计偏移量,将预计算好的横幅边线的下次位置与人脸关键点集合m3中各相邻关键点的连线进行相交判断。
若横幅与轮廓点连线相交,则可以执行步骤204;若横幅与轮廓点连线不相交,则可以执行步骤206。
204、终端根据显示位置与人脸位置的交点位置确定位置调节信息。
具体的,获取目标横幅的显示位置与人脸位置的交点位置,判断交点位于人脸的位置,在人脸关键点集合m3中选取坐标y最大的关键点的值ymax和坐标y最小的关键点的值ymin,则可以得到中心点的y坐标值ym=(ymax+ymin)/2,交点y值大于ym,则是偏上,横幅向上偏移,即人脸上方,反之则是偏下,横幅向下偏移,即人脸下方。
205、终端根据位置调节信息调整目标横幅在下一帧直播图像中的显示位置。
在确定位置调节信息之后,即可以根据位置调节信息对目标横幅的显示位置进行调整,其中,偏移横幅只需要调整横幅的坐标y值即可,偏移量则是横幅距离y坐标最大关键点的ymax或者y坐标最小的关键的ymin的差值。横幅根据偏移量自动调整位置即可,这样就能及时避免遮挡人脸的情况。
206、结束操作。
当横幅与轮廓点连线不相交,也即横幅显示不会遮挡主播用户的人脸,则不需要对横幅的显示位置进行调整,可以结束操作。
本申请实施例公开了一种信息添加方法,该方法包括:当终端接收到针对目标横幅的展示指令时,获取当前直播界面的直播图像,对直播图像进行人脸检测,确定直播图像中主播用户的人脸位置,判断目标横幅的显示位置与人脸位置是否存在重叠;若存在重叠,则根据显示位置与人脸位置的交点位置确定位置调节信息,并根据位置调节信息调整目标横幅在下一帧直播图像中的显示位置;若不存在重叠,则结束操作。以此,可以避免直播间主播用户的人脸被遮挡,提高观众用户的直播观看体验。
为便于更好的实施本申请实施例提供的信息添加方法,本申请实施例还提供一种基于上述信息添加方法的信息添加装置。其中名词的含义与上述信息添加方法中相同,具体实现细节可以参考方法实施例中的说明。
请参阅图6,图6为本申请实施例提供的一种信息添加装置的结构框图,该装置包括:
第一确定单元301,用于确定当前处理后图像,其中,所述当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取单元302,用于获取所述目标信息在所述当前处理后图像中的当前位置,以及所述目标信息对应的移动参数;
第二确定单元303,用于基于所述目标视频中相邻图像帧间的时间间隔以及所述移动参数,确定所述目标信息在所述当前图像帧的下一图像帧中的移动后位置;
判断单元304,用于根据所述移动后位置以及所述当前处理后图像中目标对象所处的目标位置,判断在所述下一图像帧中所述目标信息是否遮挡所述目标对象;
调整单元305,用于若是,则对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,判断单元包括:
识别子单元,用于对所述当前处理后图像进行识别处理,确定所述目标对象在所述当前处理后图像中的所述目标位置;
判断子单元,用于判断所述下一图像帧中所述移动后位置与所述目标位置是否存在重叠。
在一些实施例中,判断子单元具体用于:
从多个关键点位置中筛选出目标关键点位置,并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,判断子单元具体用于:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;根据所述移动参数从所述第一候选关键点位置中筛选出第二候选关键点位置;根据所述第二候选关键点位置中相邻关键点位置之间的偏移距离,从所述第二候选关键点中筛选出所述目标关键点位置;并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,判断子单元具体用于:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;从所述目标对象的多个方向侧中确定与所述移动方向相对的目标方向侧;从所述第一候选关键点位置中筛选出位于所述目标方向侧的关键点位置,得到所述第二候选关键点位置;根据所述第二候选关键点位置中相邻关键点位置之间的偏移距离,从所述第二候选关键点中筛选出所述目标关键点位置;并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,判断子单元具体用于:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;根据所述移动参数从所述第一候选关键点位置中筛选出第二候选关键点位置;计算所述第二候选关键点位置中目标第二候选关键点位置与前一相邻关键点位置的第一偏移距离,以及所述目标第二候选关键点位置与后一相邻关键点位置的第二偏移距离;确定所述第一偏移距离与所述第二偏移距离的比值;若所述比值满足预设比值范围,则确定所述目标第二候选关键点位置为所述目标关键点位置;并基于所述目标关键点位置生成关键点轨迹;
根据所述移动后位置确定所述目标信息的***轨迹;
判断所述关键点轨迹与所述***轨迹是否存在相交。
在一些实施例中,识别子单元具体用于:
通过第一检测模型对所述当前处理后图像进行处理,确定所述当前处理后图像中的人体区域图像;
对所述人体区域图像进行二值化处理,得到处理后人体图像;
通过第二检测模型对所述处理后人体图像进行处理,得到所述人脸部位在所述当前处理后图像中的目标位置。
在一些实施例中,调整单元包括:
获取子单元,用于从所述下一图像帧中获取所述目标位置与所述移动后位置相交的交点位置;
确定子单元,用于根据所述目标位置与所述交点位置的位置关系确定位置调节信息;
调整子单元,用于基于所述位置调节信息对所述移动后位置进行调整,得到所述下一帧处理后图像。
在一些实施例中,确定子单元具体用于:
从所述目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
根据所述交点位置分别与所述第一边缘位置以及所述第二边缘位置的距离,确定调整方向以及调节距离,得到所述位置调节信息。
在一些实施例中,确定子单元具体用于:
从所述目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
计算所述交点位置在所述指定方向上与所述第一边缘位置的第一距离,以及与所述第二边缘位置的第二距离;若所述第一距离大于所述第二距离,则根据所述交点位置朝向所述第二边缘位置的方向确定所述调整方向,以及根据所述第二距离确定所述调节距离;若所述第一距离小于所述第二距离,则根据所述交点位置朝向所述第一边缘位置的方向确定所述调整方向,以及根据所述第一距离确定所述调节距离,得到所述位置调节信息。
本申请实施例公开了一种信息添加装置,通过第一确定单元301确定当前处理后图像,其中,所述当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;获取单元302获取所述目标信息在所述当前处理后图像中的当前位置,以及所述目标信息对应的移动参数;第二确定单元303基于所述目标视频中相邻图像帧间的时间间隔以及所述移动参数,确定所述目标信息在所述当前图像帧的下一图像帧中的移动后位置;判断单元304根据所述移动后位置以及所述当前处理后图像中目标对象所处的目标位置,判断在所述下一图像帧中所述目标信息是否遮挡所述目标对象;调整单元305若是,则对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。以此,可以提高用户的视频观看体验。
相应的,本申请实施例还提供一种计算机设备,该计算机设备可以为服务器。如图7所示,图7为本申请实施例提供的计算机设备的结构示意图。该计算机设备600包括有一个或者一个以上处理核心的处理器601、有一个或一个以上计算机可读存储介质的存储器602及存储在存储器602上并可在处理器上运行的计算机程序。其中,处理器601与存储器602电性连接。本领域技术人员可以理解,图中示出的计算机设备结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
处理器601是计算机设备600的控制中心,利用各种接口和线路连接整个计算机设备600的各个部分,通过运行或加载存储在存储器602内的软件程序和/或模块,以及调用存储在存储器602内的数据,执行计算机设备600的各种功能和处理数据,从而对计算机设备600进行整体监控。
在本申请实施例中,计算机设备600中的处理器601会按照如下的步骤,将一个或一个以上的应用程序的进程对应的指令加载到存储器602中,并由处理器601来运行存储在存储器602中的应用程序,从而实现各种功能:
确定当前处理后图像,其中,当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;
基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;
根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;
若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象,包括:
对当前处理后图像进行识别处理,确定目标对象在当前处理后图像中的目标位置;
判断下一图像帧中移动后位置与目标位置是否存在重叠。
在一些实施例中,目标位置包括目标对象中各个对象关键点对应的关键点位置;
判断下一图像帧中移动后位置与目标位置是否存在重叠,包括:
从多个关键点位置中筛选出目标关键点位置,并基于目标关键点位置生成关键点轨迹;
根据移动后位置确定目标信息的***轨迹;
判断关键点轨迹与***轨迹是否存在相交。
在一些实施例中,从多个关键点位置中筛选出目标关键点位置,包括:
从多个关键点位置中筛选出对应于目标对象的***轮廓的第一候选关键点位置;
根据移动参数从第一候选关键点位置中筛选出第二候选关键点位置;
根据第二候选关键点位置中相邻关键点位置之间的偏移距离,从第二候选关键点中筛选出目标关键点位置。
在一些实施例中,移动参数包括移动方向;
根据移动参数从第一候选关键点位置中筛选出第二候选关键点位置,包括:
从目标对象的多个方向侧中确定与移动方向相对的目标方向侧;
从第一候选关键点位置中筛选出位于目标方向侧的关键点位置,得到第二候选关键点位置。
在一些实施例中,根据第二候选关键点位置中相邻关键点位置之间的偏移距离,从第二候选关键点中筛选出目标关键点位置,包括:
计算第二候选关键点位置中目标第二候选关键点位置与前一相邻关键点位置的第一偏移距离,以及目标第二候选关键点位置与后一相邻关键点位置的第二偏移距离;
确定第一偏移距离与第二偏移距离的比值;
若比值满足预设比值范围,则确定目标第二候选关键点位置为目标关键点位置。
在一些实施例中,目标对象为人脸部位;
对当前处理后图像进行识别处理,确定目标对象在当前处理后图像中的目标位置,包括:
通过第一检测模型对当前处理后图像进行处理,确定当前处理后图像中的人体区域图像;
对人体区域图像进行二值化处理,得到处理后人体图像;
通过第二检测模型对处理后人体图像进行处理,得到人脸部位在当前处理后图像中的目标位置。
在一些实施例中,对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像,包括:
从下一图像帧中获取目标位置与移动后位置相交的交点位置;
根据目标位置与交点位置的位置关系确定位置调节信息;
基于位置调节信息对移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,根据目标位置与交点位置的位置关系确定位置调节信息,包括:
从目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
根据交点位置分别与第一边缘位置以及第二边缘位置的距离,确定调整方向以及调节距离,得到位置调节信息。
在一些实施例中,根据交点位置分别与第一边缘位置以及第二边缘位置的距离,确定调整方向以及调节距离,包括:
计算交点位置在指定方向上与第一边缘位置的第一距离,以及与第二边缘位置的第二距离;
若第一距离大于第二距离,则根据交点位置朝向第二边缘位置的方向确定调整方向,以及根据第二距离确定调节距离;
若第一距离小于第二距离,则根据交点位置朝向第一边缘位置的方向确定调整方向,以及根据第一距离确定调节距离。
在一些实施例中,在对目标信息在下一图像帧中的移动后位置进行调整之后,还包括:
若下一帧处理后图像中存在其他显示信息,且目标信息的调整后位置遮挡其他显示信息;
则获取目标信息的显示级别与其他显示信息的显示级别;
若目标信息的显示级别高于其他显示信息的显示级别,则在下一帧处理后图像中隐藏其他显示信息中被目标信息遮挡的内容。
本方案通过确定当前处理后图像;获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。以此,可以提高用户的视频观看体验。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
可选的,如图7所示,计算机设备600还包括:触控显示屏603、射频电路604、音频电路605、输入单元606以及电源607。其中,处理器601分别与触控显示屏603、射频电路604、音频电路605、输入单元606以及电源607电性连接。本领域技术人员可以理解,图7中示出的计算机设备结构并不构成对计算机设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
触控显示屏603可用于显示图形用户界面以及接收用户作用于图形用户界面产生的操作指令。触控显示屏603可以包括显示面板和触控面板。其中,显示面板可用于显示由用户输入的消息或提供给用户的消息以及计算机设备的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。可选的,可以采用液晶显示器(LCD,Liquid Crystal Display)、有机发光二极管(OLED,Organic Light-EmittingDiode)等形式来配置显示面板。触控面板可用于收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板上或在触控面板附近的操作),并生成相应的操作指令,且操作指令执行对应程序。可选的,触控面板可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸消息,并将它转换成触点坐标,再送给处理器601,并能接收处理器601发来的命令并加以执行。触控面板可覆盖显示面板,当触控面板检测到在其上或附近的触摸操作后,传送给处理器601以确定触摸事件的类型,随后处理器601根据触摸事件的类型在显示面板上提供相应的视觉输出。在本申请实施例中,可以将触控面板与显示面板集成到触控显示屏603而实现输入和输出功能。但是在某些实施例中,触控面板与触控面板可以作为两个独立的部件来实现输入和输出功能。即触控显示屏603也可以作为输入单元606的一部分实现输入功能。
在本申请实施例中,通过处理器601执行游戏应用程序在触控显示屏603上生成图形用户界面,图形用户界面上的虚拟场景中包含至少一个技能控制区域,技能控制区域中包含至少一个技能控件。该触控显示屏603用于呈现图形用户界面以及接收用户作用于图形用户界面产生的操作指令。
射频电路604可用于收发射频信号,以通过无线通信与网络设备或其他计算机设备建立无线通讯,与网络设备或其他计算机设备之间收发信号。
音频电路605可以用于通过扬声器、传声器提供用户与计算机设备之间的音频接口。音频电路605可将接收到的音频数据转换后的电信号,传输到扬声器,由扬声器转换为声音信号输出;另一方面,传声器将收集的声音信号转换为电信号,由音频电路605接收后转换为音频数据,再将音频数据输出处理器601处理后,经射频电路604以发送给比如另一计算机设备,或者将音频数据输出至存储器602以便进一步处理。音频电路605还可能包括耳塞插孔,以提供外设耳机与计算机设备的通信。
输入单元606可用于接收输入的数字、字符消息或用户特征消息(例如指纹、虹膜、面部消息等),以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。
电源607用于给计算机设备600的各个部件供电。可选的,电源607可以通过电源管理***与处理器601逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。电源607还可以包括一个或一个以上的直流或交流电源、再充电***、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管图7中未示出,计算机设备600还可以包括摄像头、传感器、无线保真模块、蓝牙模块等,在此不再赘述。
在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详述的部分,可以参见其他实施例的相关描述。
由上可知,本实施例提供的计算机设备,通过确定当前处理后图像,其中,当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条计算机程序,该计算机程序能够被处理器进行加载,以执行本申请实施例所提供的任一种信息添加方法中的步骤。例如,该计算机程序可以执行如下步骤:
确定当前处理后图像,其中,当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;
基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;
根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;
若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象,包括:
对当前处理后图像进行识别处理,确定目标对象在当前处理后图像中的目标位置;
判断下一图像帧中移动后位置与目标位置是否存在重叠。
在一些实施例中,目标位置包括目标对象中各个对象关键点对应的关键点位置;
判断下一图像帧中移动后位置与目标位置是否存在重叠,包括:
从多个关键点位置中筛选出目标关键点位置,并基于目标关键点位置生成关键点轨迹;
根据移动后位置确定目标信息的***轨迹;
判断关键点轨迹与***轨迹是否存在相交。
在一些实施例中,从多个关键点位置中筛选出目标关键点位置,包括:
从多个关键点位置中筛选出对应于目标对象的***轮廓的第一候选关键点位置;
根据移动参数从第一候选关键点位置中筛选出第二候选关键点位置;
根据第二候选关键点位置中相邻关键点位置之间的偏移距离,从第二候选关键点中筛选出目标关键点位置。
在一些实施例中,移动参数包括移动方向;
根据移动参数从第一候选关键点位置中筛选出第二候选关键点位置,包括:
从目标对象的多个方向侧中确定与移动方向相对的目标方向侧;
从第一候选关键点位置中筛选出位于目标方向侧的关键点位置,得到第二候选关键点位置。
在一些实施例中,根据第二候选关键点位置中相邻关键点位置之间的偏移距离,从第二候选关键点中筛选出目标关键点位置,包括:
计算第二候选关键点位置中目标第二候选关键点位置与前一相邻关键点位置的第一偏移距离,以及目标第二候选关键点位置与后一相邻关键点位置的第二偏移距离;
确定第一偏移距离与第二偏移距离的比值;
若比值满足预设比值范围,则确定目标第二候选关键点位置为目标关键点位置。
在一些实施例中,目标对象为人脸部位;
对当前处理后图像进行识别处理,确定目标对象在当前处理后图像中的目标位置,包括:
通过第一检测模型对当前处理后图像进行处理,确定当前处理后图像中的人体区域图像;
对人体区域图像进行二值化处理,得到处理后人体图像;
通过第二检测模型对处理后人体图像进行处理,得到人脸部位在当前处理后图像中的目标位置。
在一些实施例中,对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像,包括:
从下一图像帧中获取目标位置与移动后位置相交的交点位置;
根据目标位置与交点位置的位置关系确定位置调节信息;
基于位置调节信息对移动后位置进行调整,得到下一帧处理后图像。
在一些实施例中,根据目标位置与交点位置的位置关系确定位置调节信息,包括:
从目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
根据交点位置分别与第一边缘位置以及第二边缘位置的距离,确定调整方向以及调节距离,得到位置调节信息。
在一些实施例中,根据交点位置分别与第一边缘位置以及第二边缘位置的距离,确定调整方向以及调节距离,包括:
计算交点位置在指定方向上与第一边缘位置的第一距离,以及与第二边缘位置的第二距离;
若第一距离大于第二距离,则根据交点位置朝向第二边缘位置的方向确定调整方向,以及根据第二距离确定调节距离;
若第一距离小于第二距离,则根据交点位置朝向第一边缘位置的方向确定调整方向,以及根据第一距离确定调节距离。
在一些实施例中,在对目标信息在下一图像帧中的移动后位置进行调整之后,还包括:
若下一帧处理后图像中存在其他显示信息,且目标信息的调整后位置遮挡其他显示信息;
则获取目标信息的显示级别与其他显示信息的显示级别;
若目标信息的显示级别高于其他显示信息的显示级别,则在下一帧处理后图像中隐藏其他显示信息中被目标信息遮挡的内容。
本方案通过确定当前处理后图像;获取目标信息在当前处理后图像中的当前位置,以及目标信息对应的移动参数;基于目标视频中相邻图像帧间的时间间隔以及移动参数,确定目标信息在当前图像帧的下一图像帧中的移动后位置;根据移动后位置以及当前处理后图像中目标对象所处的目标位置,判断在下一图像帧中目标信息是否遮挡目标对象;若是,则对目标信息在下一图像帧中的移动后位置进行调整,得到下一帧处理后图像。以此,可以提高用户的视频观看体验。
以上各个操作的具体实施可参见前面的实施例,在此不再赘述。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,random access memory)、磁盘或光盘等。
由于该存储介质中所存储的计算机程序,可以执行本申请实施例所提供的任一种信息添加方法中的步骤,因此,可以实现本申请实施例所提供的任一种信息添加方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的一种信息添加方法、装置、存储介质及计算机设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (12)

1.一种信息添加方法,其特征在于,所述方法包括:
确定当前处理后图像,其中,所述当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取所述目标信息在所述当前处理后图像中的当前位置,以及所述目标信息对应的移动参数,所述移动参数包括移动速度;
基于所述目标视频中相邻图像帧间的时间间隔以及所述移动速度确定所述目标信息由所述当前图像帧到下一图像帧的移动距离,以及根据所述当前位置与所述移动距离,确定所述目标信息在所述当前图像帧的下一图像帧中的移动后位置,其中,所述时间间隔指的通过视频播放界面播放所述目标视频的相邻两个图像帧之间的时间间隔;
对所述当前处理后图像进行识别处理,确定所述目标对象在所述当前处理后图像中的目标位置,所述目标位置包括所述目标对象中各个对象关键点对应的关键点位置;
从多个关键点位置中筛选出目标关键点位置,并基于所述目标关键点位置生成关键点轨迹,其中,所述目标关键点位置为所述目标对象的***轮廓中与所述目标信息的移动方向相对的部分关键点位置;
根据所述移动后位置确定所述目标信息的***轨迹;
根据所述关键点轨迹与所述***轨迹是否存在相交,判断在所述下一图像帧中所述目标信息是否遮挡所述目标对象;
若是,则对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像;
若所述下一帧处理后图像中所述目标信息与其他显示信息存在重叠,则继续调整所述目标信息的显示位置,以使所述目标显示信息与所述其他显示信息互不重叠。
2.根据权利要求1所述的方法,其特征在于,所述从多个关键点位置中筛选出目标关键点位置,包括:
从所述多个关键点位置中筛选出对应于所述目标对象的***轮廓的第一候选关键点位置;
根据所述移动参数从所述第一候选关键点位置中筛选出第二候选关键点位置;
根据所述第二候选关键点位置中相邻关键点位置之间的偏移距离,从所述第二候选关键点中筛选出所述目标关键点位置。
3.根据权利要求2所述的方法,其特征在于,所述移动参数包括移动方向;
所述根据所述移动参数从所述第一候选关键点位置中筛选出第二候选关键点位置,包括:
从所述目标对象的多个方向侧中确定与所述移动方向相对的目标方向侧;
从所述第一候选关键点位置中筛选出位于所述目标方向侧的关键点位置,得到所述第二候选关键点位置。
4.根据权利要求2所述的方法,其特征在于,所述根据所述第二候选关键点位置中相邻关键点位置之间的偏移距离,从所述第二候选关键点中筛选出所述目标关键点位置,包括:
计算所述第二候选关键点位置中目标第二候选关键点位置与前一相邻关键点位置的第一偏移距离,以及所述目标第二候选关键点位置与后一相邻关键点位置的第二偏移距离;
确定所述第一偏移距离与所述第二偏移距离的比值;
若所述比值满足预设比值范围,则确定所述目标第二候选关键点位置为所述目标关键点位置。
5.根据权利要求1所述的方法,其特征在于,所述目标对象为人脸部位;
所述对所述当前处理后图像进行识别处理,确定所述目标对象在所述当前处理后图像中的所述目标位置,包括:
通过第一检测模型对所述当前处理后图像进行处理,确定所述当前处理后图像中的人体区域图像;
对所述人体区域图像进行二值化处理,得到处理后人体图像;
通过第二检测模型对所述处理后人体图像进行处理,得到所述人脸部位在所述当前处理后图像中的目标位置。
6.根据权利要求1所述的方法其特征在于,所述对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像,包括:
从所述下一图像帧中获取所述目标位置与所述移动后位置相交的交点位置;
根据所述目标位置与所述交点位置的位置关系确定位置调节信息;
基于所述位置调节信息对所述移动后位置进行调整,得到所述下一帧处理后图像。
7.根据权利要求6所述的方法,其特征在于,所述根据所述目标位置与所述交点位置的位置关系确定位置调节信息,包括:
从所述目标位置中确定指定方向上的第一边缘位置与第二边缘位置;
根据所述交点位置分别与所述第一边缘位置以及所述第二边缘位置的距离,确定调整方向以及调节距离,得到所述位置调节信息。
8.根据权利要求7所述的方法,其特征在于,所述根据所述交点位置分别与所述第一边缘位置以及所述第二边缘位置的距离,确定调整方向以及调节距离,包括:
计算所述交点位置在所述指定方向上与所述第一边缘位置的第一距离,以及与所述第二边缘位置的第二距离;
若所述第一距离大于所述第二距离,则根据所述交点位置朝向所述第二边缘位置的方向确定所述调整方向,以及根据所述第二距离确定所述调节距离;
若所述第一距离小于所述第二距离,则根据所述交点位置朝向所述第一边缘位置的方向确定所述调整方向,以及根据所述第一距离确定所述调节距离。
9.根据权利要求1所述的方法,其特征在于,在所述对所述目标信息在所述下一图像帧中的移动后位置进行调整之后,还包括:
若所述下一帧处理后图像中存在其他显示信息,且所述目标信息的调整后位置遮挡所述其他显示信息;
则获取所述目标信息的显示级别与所述其他显示信息的显示级别;
若所述目标信息的显示级别高于所述其他显示信息的显示级别,则在所述下一帧处理后图像中隐藏所述其他显示信息中被所述目标信息遮挡的内容。
10.一种信息添加装置,其特征在于,所述装置包括:
第一确定单元,用于确定当前处理后图像,其中,所述当前处理后图像通过在目标视频的当前图像帧上添加目标信息得到;
获取单元,用于获取所述目标信息在所述当前处理后图像中的当前位置,以及所述目标信息对应的移动参数,所述移动参数包括移动速度;
第二确定单元,用于基于所述目标视频中相邻图像帧间的时间间隔以及所述移动速度确定所述目标信息由所述当前图像帧到下一图像帧的移动距离,以及根据所述当前位置与所述移动距离,确定所述目标信息在所述当前图像帧的下一图像帧中的移动后位置,其中,所述时间间隔指的通过视频播放界面播放所述目标视频的相邻两个图像帧之间的时间间隔;
判断单元,用于对所述当前处理后图像进行识别处理,确定所述目标对象在所述当前处理后图像中的目标位置,所述目标位置包括所述目标对象中各个对象关键点对应的关键点位置;从多个关键点位置中筛选出目标关键点位置,并基于所述目标关键点位置生成关键点轨迹,其中,所述目标关键点位置为所述目标对象的***轮廓中与所述目标信息的移动方向相对的部分关键点位置;根据所述移动后位置确定所述目标信息的***轨迹;根据所述关键点轨迹与所述***轨迹是否存在相交,判断在所述下一图像帧中所述目标信息是否遮挡所述目标对象;
调整单元,用于若是,则对所述目标信息在所述下一图像帧中的移动后位置进行调整,得到下一帧处理后图像;
所述装置还用于:若所述下一帧处理后图像中所述目标信息与其他显示信息存在重叠,则继续调整所述目标信息的显示位置,以使所述目标显示信息与所述其他显示信息互不重叠。
11.一种计算机设备,包括存储器,处理器及存储在存储器上并在处理器上运行的计算机程序,其中,所述处理器执行所述程序时实现如权利要求1至9任一项所述的信息添加方法。
12.一种计算机可读存储介质,其特征在于,所述计算机可读存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1至9任一项所述的信息添加方法。
CN202210638195.7A 2022-06-07 2022-06-07 信息添加方法、装置、计算机设备及存储介质 Active CN115086738B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210638195.7A CN115086738B (zh) 2022-06-07 2022-06-07 信息添加方法、装置、计算机设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210638195.7A CN115086738B (zh) 2022-06-07 2022-06-07 信息添加方法、装置、计算机设备及存储介质

Publications (2)

Publication Number Publication Date
CN115086738A CN115086738A (zh) 2022-09-20
CN115086738B true CN115086738B (zh) 2024-06-11

Family

ID=83252387

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210638195.7A Active CN115086738B (zh) 2022-06-07 2022-06-07 信息添加方法、装置、计算机设备及存储介质

Country Status (1)

Country Link
CN (1) CN115086738B (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104735518A (zh) * 2015-03-31 2015-06-24 北京奇艺世纪科技有限公司 一种信息展示方法及装置
KR20160116585A (ko) * 2015-03-30 2016-10-10 한국전자통신연구원 동영상 유해 영역 차단 방법 및 장치
CN107147941A (zh) * 2017-05-27 2017-09-08 努比亚技术有限公司 视频播放的弹幕显示方法、装置及计算机可读存储介质
CN109710365A (zh) * 2018-12-28 2019-05-03 武汉斗鱼网络科技有限公司 一种弹幕显示方法、装置、电子设备及介质
CN111385665A (zh) * 2018-12-29 2020-07-07 百度在线网络技术(北京)有限公司 弹幕信息的处理方法、装置、设备及存储介质
CN113891154A (zh) * 2020-07-02 2022-01-04 武汉斗鱼鱼乐网络科技有限公司 防止弹幕遮挡特定目标的方法、装置、介质及计算机设备
CN113920167A (zh) * 2021-11-01 2022-01-11 广州博冠信息科技有限公司 一种图像处理方法、装置、存储介质及计算机***

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160116585A (ko) * 2015-03-30 2016-10-10 한국전자통신연구원 동영상 유해 영역 차단 방법 및 장치
CN104735518A (zh) * 2015-03-31 2015-06-24 北京奇艺世纪科技有限公司 一种信息展示方法及装置
CN107147941A (zh) * 2017-05-27 2017-09-08 努比亚技术有限公司 视频播放的弹幕显示方法、装置及计算机可读存储介质
CN109710365A (zh) * 2018-12-28 2019-05-03 武汉斗鱼网络科技有限公司 一种弹幕显示方法、装置、电子设备及介质
CN111385665A (zh) * 2018-12-29 2020-07-07 百度在线网络技术(北京)有限公司 弹幕信息的处理方法、装置、设备及存储介质
CN113891154A (zh) * 2020-07-02 2022-01-04 武汉斗鱼鱼乐网络科技有限公司 防止弹幕遮挡特定目标的方法、装置、介质及计算机设备
CN113920167A (zh) * 2021-11-01 2022-01-11 广州博冠信息科技有限公司 一种图像处理方法、装置、存储介质及计算机***

Also Published As

Publication number Publication date
CN115086738A (zh) 2022-09-20

Similar Documents

Publication Publication Date Title
US20210281771A1 (en) Video processing method, electronic device and non-transitory computer readable medium
US11114130B2 (en) Method and device for processing video
CN109427083B (zh) 三维虚拟形象的显示方法、装置、终端及存储介质
US20220148337A1 (en) Living body detection method and apparatus, electronic device, and storage medium
CN111147880A (zh) 视频直播的互动方法、装置、***、电子设备及存储介质
WO2023065849A1 (zh) 电子设备的屏幕亮度调节方法、装置以及电子设备
WO2022148293A1 (zh) 信息提示方法及装置
CN113538696A (zh) 特效生成方法、装置、存储介质及电子设备
CN113645476B (zh) 画面处理方法、装置、电子设备及存储介质
CN117455753B (zh) 特效模板生成方法、特效生成方法、装置及存储介质
CN109544441B (zh) 图像处理方法及装置、直播中的肤色处理方法及装置
US10134164B2 (en) Information processing apparatus, information processing system, information processing method, and program
CN112316425B (zh) 画面渲染方法、装置、存储介质和电子设备
CN115086738B (zh) 信息添加方法、装置、计算机设备及存储介质
CN112511890A (zh) 视频图像处理方法、装置及电子设备
CN112435173A (zh) 一种图像处理和直播方法、装置、设备和存储介质
CN114071244B (zh) 生成直播封面的方法及装置、计算机存储介质、电子设备
CN115761638A (zh) 基于图像数据的在线实时智能分析方法及终端设备
CN116797631A (zh) 差异区域定位方法、装置、计算机设备及存储介质
CN111679737B (zh) 手部分割方法和电子设备
CN111258408B (zh) 一种用于人机交互的对象边界确定方法及设备
CN112804546B (zh) 基于直播的互动方法、装置、设备和存储介质
CN106020433A (zh) 一种3d车载终端人机交互***及交互方法
CN115248501A (zh) 增强现实设备的显示方法、装置和增强现实设备
CN117041611A (zh) 特效播放方法、装置、电子设备和可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant