CN111915337B - 信息投放方法、装置、设备和介质 - Google Patents

Abstract

本发明实施例公开了一种信息投放方法、装置、设备和介质。该方法包括：将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配；根据匹配结果从所述待投放信息中确定目标投放信息；对所述待播放视频进行所述目标投放信息的投放。本发明实施例提供了一种信息投放方法、装置、设备和介质，实现了对信息的精准投放。

Description

信息投放方法、装置、设备和介质

技术领域

本发明实施例涉及信息处理领域，尤其涉及一种信息投放方法、装置、设备和介质。

背景技术

随着短视频新流量的暴增，短视频已经成为网民消息获取的重要载体，尤其受到年轻一代青睐。

当前对针对短视频的信息投放主要是：短视频开始和/或结束时进行信息内容的展示。其中信息内容的确定一般是设定，或根据用户的搜索记录确定。

然而，设定或根据用户的搜索记录确定的信息内容无法真实反映用户的当前需求。从而导致推送效率低下的问题。

发明内容

本发明实施例提供一种信息投放方法、装置、设备和介质，以实现对信息的精准投放。

第一方面，本发明实施例提供了一种信息投放方法，该方法包括：

将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配；

根据匹配结果从所述待投放信息中确定目标投放信息；

对所述待播放视频进行所述目标投放信息的投放。

第二方面，本发明实施例还提供了一种信息投放装置，该装置包括：

图像匹配模块，用于将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配；

目标信息确定模块，用于根据匹配结果从所述待投放信息中确定目标投放信息；

信息投放模块，用于对所述待播放视频进行所述目标投放信息的投放。

第三方面，本发明实施例还提供了一种设备，所述设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明实施例中任一所述的信息投放方法。

第四方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的信息投放方法。

本发明实施例通过基于待播放视频中的视频图像与待投放图像的匹配结果，确定目标投放信息。其中，待播放视频中的视频图像与待投放图像的匹配，可以实现对待播放视频中投放元素的挖掘。然后根据匹配结果确定目标投放信息，从而实现对挖掘的投放元素进行信息的投放。进而提高信息投放的准确率。

附图说明

图1为本发明实施例一提供的一种信息投放方法的流程图；

图2是本发明实施例二提供的一种信息投放方法的流程图；

图3是本发明实施例三提供的一种视频段边界确定和视频段分类的示意图；

图4是本发明实施例三提供的一种视频段的确定和分类效果示意图；

图5a是本发明实施例三提供的一种在教育行业中待投放图像确定的效果示意图；

图5b是本发明实施例三提供的另一种在教育行业中待投放图像确定的效果示意图；

图5c是本发明实施例三提供的一种在汽车行业中待投放图像确定的效果示意图；

图5d是本发明实施例三提供的另一种在汽车行业中待投放图像确定的效果示意图；

图6是本发明实施例三提供的一种广告投放的效果示意图；

图7是本发明实施例四提供的一种信息投放装置的结构示意图；

图8为本发明实施例五提供的一种设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1为本发明实施例一提供的一种信息投放方法的流程图。本实施例可适用于对待播放视频进行信息投放的情况。该方法可以由一种信息投放装置来执行，该装置可以由软件和/或硬件的方式实现。参见图1，本实施例提供的信息投放方法包括：

S110、将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配。

其中，待投放信息可以任意需要投放至待播放视频中的信息。具体地，待投放信息可以包括图像，可选地待投放信息也可以包括文字。

待播放视频中的视频图像可以是，从待播放视频中随意抽取的至少一帧视频图像。

为提高匹配的覆盖率，可以按照设定时间间隔从待播放视频中抽取至少一帧视频图像。

典型地，将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配，包括：

确定所述待播放视频中包括的至少一个视频段，其中每个所述视频段包括一个主题；

根据所述视频段的主题，将所述视频段中的视频图像与所述待投放信息中的待投放图像进行匹配。

具体地，视频段的确定可以基于场景的相似度确定。

发明人发现，在观看视频的过程中用户关注的重点通常是视频中的运动信息。因此，为提高对包括不同主题的视频段的确定准确率。所述确定所述待播放视频中包括的至少一个视频段，包括：

基于帧间运动信息确定所述待播放视频中包括的至少一个视频段。

其中，帧间运动信息是指各帧的视频图像中描述的物体运动信息。例如，帧间运动信息可以是一个动作的完整执行信息。

视频段由连续的至少两帧视频图像构成。

进一步地，所述基于帧间运动信息确定所述待播放视频中包括的至少一个视频段之前，还包括：

基于设定帧数对所述待播放视频进行划分，生成至少两个视频单元；

识别所述视频单元的视频特征；

基于所述视频特征进行多尺度上下文组合，构建各所述视频单元的特征金字塔；

根据所述特征金字塔确定所述待播放视频的帧间运动信息。

具体地，基于所述视频特征进行多尺度上下文组合，构建各视频单元的特征金字塔包括：

基于所述视频特征进行多尺度上下文组合，构建不同长度的特征序列；

组合所述特征序列确定每个视频单元的特征金字塔。

其中，特征金字塔包括至少两层特征序列。每层特征序列由目标视频单元的视频特征，以及与目标视频单元相邻的至少一个视频单元的视频特征，按照视频单元的时间发生顺序排列而成。并且，以目标视频单元的视频特征作为特征序列的中心。随着特征金字塔层数的增加，特征序列的长度也不断增长。

视频段的应用可以达到如下效果：

因为每个视频段包括一个主题，所以视频段的应用可以将待播放视频中无意义的视频图像过滤，仅对包括主题的视频图像进行匹配。进而提高图像的匹配效率。

S120、根据匹配结果从所述待投放信息中确定目标投放信息。

具体地，将匹配成功的待投放图像作为目标投放信息。

可选地，将匹配成功的待投放图像关联的待投放信息作为目标投放信息。

S130、对所述待播放视频进行所述目标投放信息的投放。

本实施例对待播放视频进行目标投放信息投放的方式不做限定。

具体地，可以在待播放视频的过程中插播，也可以做成贴片视频广告或原生视频广告。

典型地，将目标投放信息投放至待播放视频的所述视频段中。

本发明实施例的技术方案，通过基于待播放视频中的视频图像与待投放图像的匹配结果，确定目标投放信息。其中，待播放视频中的视频图像与待投放图像的匹配，可以实现对待播放视频中投放元素的挖掘。然后根据匹配结果确定目标投放信息，从而实现对挖掘的投放元素进行信息的投放。进而提高信息投放的准确率。

此外，相比对视频进行识别，根据识别结果确定目标投放信息。本实施例中直接将视频图像与待投放图像进行匹配，可以实现对待投放元素的全面挖掘。因为识别过程中往往会遗漏掉一些投放元素。

为进一步提高信息的投放准确率，所述对待播放视频进行目标投放信息的投放之前，还包括：

基于用户的搜索记录，对目标投放信息进行过滤。

实施例二

图2是本发明实施例二提供的一种信息投放方法的流程图。本实施例是在上述实施例的基础上提出的一种可选方案。参见图2，本实施例提供的信息投放方法包括：

S210、确定所述待播放视频中包括的至少一个视频段，其中每个所述视频段包括一个主题。

S220、确定所述视频段中的视频图像与待投放信息中的待投放图像的相似度。

S230、若所述相似度大于相似度阈值，则将所述待投放图像作为目标图像。

其中，相似度阈值是在满足相似要求的前提下，相似度的最小值。

S240、将所述目标图像所属信息主的所述待投放信息作为候选投放信息。

信息主是为推销商品或者提供服务，自行或者委托他人设计、制作、发布信息的法人、其他经济组织或者个人。

S250、匹配所述视频段的主题与所述候选投放信息的主题。

因为同一信息主可以包括不同主题的待投放信息。例如汽车类待投放信息、服装类待投放信息等。

通过该步骤可以将候选投放信息中于视频段的主题不一致的信息滤除。

S260、根据匹配结果从所述待投放信息中确定目标投放信息。

具体地，若匹配成功，则将所述候选投放信息作为目标投放信息。

S270、对所述待播放视频进行所述目标投放信息的投放。

本发明实施例的技术方案，通过从待投放信息中的待投放图像中确定目标图像，将目标图像所属信息主的投放信息作为候选投放信息，从而实现对投放信息的扩招。并通过匹配所述视频段的主题与所述候选投放信息的主题，实现对候选投放信息的过滤，进而提高目标投放信息的确定准确率。

实施例三

本实施例是在上述实施例的基础上以投放信息为广告为例，提出的一种可选方案。

在实现本发明的过程中发明人发现如下问题：

投放广告和视频主体内容的关联度低，甚至有些短视频加长广告的方式造成了用户的强烈反感，导致视频广告的商业转化能力较弱。同时，商家为了更高的广告效用，不得不精心计算广告效果，在各种不同的视频中投放同一个广告。

为解决上述问题，本实施提供的信息投放方法包括：

参见图3，首先将输入的待播放视频平均分为多个视频单元310。具体地，可以是16帧为一个视频单元310。

将每一个视频单元310送入视频编码器(C3D，其中C3D使用3D卷积网络学习时空特征)中，生成视频单元特征。

利用生成的视频单元特征构建特征金字塔300。

具体过程如下：假设当前处理视频流的时间窗口为w_{t},通过滑窗的方式可以获得视频流上下文的信息，如w_{t+3},w_{t+2},w_{t+1},w_{t-1},w_{t-2},w_{t-3}，每一个窗口对应一个视频单元310。每个视频单元310都可以得到视频单元特征。

继续参见图3，将利用视频单元特征构造不同长度的特征序列320，由特征序列320构造特征金字塔300。每层特征序列中包括核心视频单元的视频单元特征321和至少一个相邻视频单元的视频单元特征322，其中核心视频单元为上述目标视频单元。

将特征金字塔300输入预先训练的深度学习模型，输出待播放视频中包括视频段的时间边界330，以及视频段的分类340(也即视频段的主题)。

具体视频段的确定和分类效果参见图4，图中标注了真实的视频段410，利用深度学习模型准确预测的视频段420和视频段分类430，利用深度学习模型错误预测的视频段440和视频段分类450。

根据视频段的分类，确定与视频段中视频图像匹配的待投放图像。

参见图5a和图5b，在教育行业中，左边是从待播放视频中识别出讲师宣传授课的视频段。右边是检索出的与讲师宣传授课的视频段匹配的待投放图像。

参见图5c和图5d，在车辆行业中，左边是从待播放视频中识别出的汽车宣传车型的视频段。右边是检索出的与汽车宣传车型的视频段匹配的待投放图像。

根据匹配的待投放图像和视频段的分类，从待投放广告中确定目标投放广告。

利用用户搜索记录对目标投放广告进行过滤，对待播放视频进行目标投放广告的投放。

参见图6，在视频播放中的设定位置610处，进行目标投放广告的投放。

本实施例采用单元级坐标回归，而不是在帧级回归时间坐标。与帧级回归相比，模型复用单元特征来实现单元级坐标回归更容易学习、更有效。

通过挖掘海量视频中待投放元素(也即商品元素)并投放广告主商业广告，借助视频原生内容的载体将商家服务内容更高效的传递给网民，让网民更便捷的获取所求。

本实施例基于视频片段分类和分帧细化理解来识别不同类别视频中可投放广告的商业场景。通过准确识别和快速定位视频内容的商业元素，完成不同视频内容的商业产品广告实时推送到用户的闭环。从而实现在迎合用户搜索兴趣和获取精准人群的同时，极大提升广告效果和用户转化效率，将商业广告场景深层渗透到视频内容中。避免了短视频加长广告的方式造成了用户的强烈反感。在提高广告效果的同时，减少了人的干预。

需要说明的是，经过本实施例的技术教导，本领域技术人员有动机将上述实施例中描述的任一种实施方式进行方案的组合，以实现对待播放视频进行信息的有效投放。

实施例四

图7是本发明实施例四提供的一种信息投放装置的结构示意图。参见图7，本实施例提供的信息投放装置包括：图像匹配模块10、目标信息确定模块20和信息投放模块30。

其中，图像匹配模块10，用于将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配；

目标信息确定模块20，用于根据匹配结果从待投放信息中确定目标投放信息；

信息投放模块30，用于对待播放视频进行目标投放信息的投放。

本发明实施例通过基于待播放视频中的视频图像与待投放图像的匹配结果，确定目标投放信息。其中，待播放视频中的视频图像与待投放图像的匹配，可以实现对待播放视频中投放元素的挖掘。然后根据匹配结果确定目标投放信息，从而实现对挖掘的投放元素进行信息的投放。进而提高信息投放的准确率。

进一步地，图像匹配模块，包括：视频段确定单元和图像匹配单元。

其中，视频段确定单元，用于确定所述待播放视频中包括的至少一个视频段，其中每个所述视频段包括一个主题；

图像匹配单元，用于根据所述视频段的主题，将所述视频段中的视频图像与待投放信息中的待投放图像进行匹配。

进一步地，所述视频段确定单元具体用于：

基于帧间运动信息确定所述待播放视频中包括的至少一个视频段。

进一步地，所述的装置，还包括：视频划分模块、特征识别模块、特征构建模块和运动信息确定模块。

其中，视频划分模块，用于所述基于帧间运动信息确定所述待播放视频中包括的至少一个视频段之前，基于设定帧数对待播放视频进行划分，生成至少两个视频单元；

特征识别模块，用于识别所述视频单元的视频特征；

特征构建模块，用于基于所述视频特征进行多尺度上下文组合，构建各视频单元的特征金字塔；

运动信息确定模块，用于根据所述特征金字塔确定待播放视频的帧间运动信息。

进一步地，图像匹配单元具体用于：

确定所述视频段中的视频图像与待投放信息中的待投放图像的相似度；

若所述相似度大于相似度阈值，则将所述待投放图像作为目标图像；

将所述目标图像所属信息主的待投放信息作为候选投放信息；

匹配所述视频段的主题与所述候选投放信息的主题。

进一步地，所述装置还包括：

信息过滤模块，用于所述对待播放视频进行目标投放信息的投放之前，基于用户的搜索记录，对目标投放信息进行过滤。

本发明实施例所提供的信息投放装置可执行本发明任意实施例所提供的信息投放方法，具备执行方法相应的功能模块和有益效果。

实施例五

图8为本发明实施例五提供的一种设备的结构示意图。图8示出了适于用来实现本发明实施方式的示例性设备12的框图。图8显示的设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图8所示，设备12以通用计算设备的形式表现。设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，***存储器28，连接不同***组件(包括***存储器28和处理单元16)的总线18。

总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，***总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及***组件互连(PCI)总线。

设备12典型地包括多种计算机***可读介质。这些介质可以是任何能够被设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

***存储器28可以包括易失性存储器形式的计算机***可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机***存储介质。仅作为举例，存储***34可以用于读写不可移动的、非易失性磁介质(图8未显示，通常称为“硬盘驱动器”)。尽管图8中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如存储器28中，这样的程序模块42包括但不限于操作***、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

设备也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该设备12交互的设备通信，和/或与使得该设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图所示，网络适配器20通过总线18与设备12的其它模块通信。应当明白，尽管图中未示出，可以结合设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID***、磁带驱动器以及数据备份存储***等。

处理单元16通过运行存储在***存储器28中的程序，从而执行各种功能应用以及数据处理，例如实现本发明实施例所提供的信息投放方法。

实施例六

本发明实施例六还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现如本发明实施例中任一所述的信息投放方法。

该方法包括：

将待播放视频中的视频图像与待投放信息中的待投放图像进行匹配；

根据匹配结果从待投放信息中确定目标投放信息；

对待播放视频进行目标投放信息的投放。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的***、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行***、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行***、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括——但不限于无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如”C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。

Claims (10)

1.一种信息投放方法，其特征在于，包括：

确定待播放视频中包括的至少一个视频段；其中，每个所述视频段包括一个主题；

确定所述视频段中的视频图像与待投放信息中的待投放图像的相似度；

若所述相似度大于相似度阈值，则将所述待投放图像作为目标图像；

将所述目标图像所属信息主的所述待投放信息作为候选投放信息；

匹配所述视频段的主题与所述候选投放信息的主题；

根据匹配结果从所述待投放信息中确定目标投放信息；

对所述待播放视频进行所述目标投放信息的投放。

2.根据权利要求1所述的方法，其特征在于，所述确定所述待播放视频中包括的至少一个视频段，包括：

基于帧间运动信息确定所述待播放视频中包括的至少一个视频段。

3.根据权利要求2所述的方法，其特征在于，所述基于帧间运动信息确定所述待播放视频中包括的至少一个视频段之前，还包括：

基于设定帧数对所述待播放视频进行划分，生成至少两个视频单元；

识别所述视频单元的视频特征；

基于所述视频特征进行多尺度上下文组合，构建各所述视频单元的特征金字塔；

根据所述特征金字塔确定所述待播放视频的帧间运动信息。

4.根据权利要求1所述的方法，其特征在于，所述对所述待播放视频进行所述目标投放信息的投放之前，还包括：

基于用户的搜索记录，对所述目标投放信息进行过滤。

5.一种信息投放装置，其特征在于，包括：

图像匹配模块，包括视频段确定单元和图像匹配单元；

所述视频段确定单元，用于确定待播放视频中包括的至少一个视频段；其中，每个所述视频段包括一个主题；

所述图像匹配单元，用于确定所述视频段中的视频图像与待投放信息中的待投放图像的相似度；若所述相似度大于相似度阈值，则将所述待投放图像作为目标图像；将所述目标图像所属信息主的所述待投放信息作为候选投放信息；匹配所述视频段的主题与所述候选投放信息的主题；

目标信息确定模块，用于根据匹配结果从所述待投放信息中确定目标投放信息；

信息投放模块，用于对所述待播放视频进行所述目标投放信息的投放。

6.根据权利要求5所述的装置，其特征在于，所述视频段确定单元具体用于：

基于帧间运动信息确定所述待播放视频中包括的至少一个视频段。

7.根据权利要求6所述的装置，其特征在于，还包括：

视频划分模块，用于所述基于帧间运动信息确定所述待播放视频中包括的至少一个视频段之前，基于设定帧数对所述待播放视频进行划分，生成至少两个视频单元；

特征识别模块，用于识别所述视频单元的视频特征；

特征构建模块，用于基于所述视频特征进行多尺度上下文组合，构建各所述视频单元的特征金字塔；

运动信息确定模块，用于根据所述特征金字塔确定所述待播放视频的帧间运动信息。

8.根据权利要求5所述的装置，其特征在于，还包括：

信息过滤模块，用于所述对所述待播放视频进行所述目标投放信息的投放之前，基于用户的搜索记录，对所述目标投放信息进行过滤。

9.一种电子设备，其特征在于，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如权利要求1-4中任一所述的信息投放方法。

10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，该程序被处理器执行时实现如权利要求1-4中任一所述的信息投放方法。