CN112770176B - 一种视频帧确定方法、装置、电子设备和计算机可读介质 - Google Patents
一种视频帧确定方法、装置、电子设备和计算机可读介质 Download PDFInfo
- Publication number
- CN112770176B CN112770176B CN202011540143.3A CN202011540143A CN112770176B CN 112770176 B CN112770176 B CN 112770176B CN 202011540143 A CN202011540143 A CN 202011540143A CN 112770176 B CN112770176 B CN 112770176B
- Authority
- CN
- China
- Prior art keywords
- frame
- video
- adjacent
- scene
- picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 39
- 238000004891 communication Methods 0.000 claims description 19
- 238000004590 computer program Methods 0.000 claims description 11
- 238000012552 review Methods 0.000 description 9
- 238000010586 diagram Methods 0.000 description 6
- 230000008569 process Effects 0.000 description 5
- 230000009471 action Effects 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 238000003491 array Methods 0.000 description 1
- 230000001427 coherent effect Effects 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8456—Structuring of content, e.g. decomposing content into time segments by decomposing the content in the time domain, e.g. in time segments
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本申请提供了一种视频帧确定方法、装置、电子设备和计算机可读介质，涉及视频技术领域，所述方法包括：获取待剪辑视频和所述待剪辑视频对应的参考视频；确定所述参考视频中的参考帧，其中，所述参考帧包括所述参考视频的正片起始帧或正片结束帧；确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或与所述正片结束帧对应的目标结束帧。本申请根据目标起始帧和目标结束帧对待剪辑视频进行剪辑，提高了剪辑准确度，提高了剪辑效率。
Description
技术领域
本申请涉及视频技术领域，尤其涉及一种视频帧确定方法、装置、电子设备和计算机可读介质。
背景技术
一般情况下，电视剧或综艺节目等视频，会首先在电视台进行播放，待电视台播放完成后才可以在视频客户端进行播放，这是因为电视台的版权为直播版权，而视频客户端的版权为点播版权。这就需要视频客户端在播放点播视频时，视频内容需要与电视台播放的视频内容同步，以使用户在通过电视台观看视频中断后，还可以在视频客户端的相同剧集继续观看该视频内容。
点播视频中的视频内容只包括片头曲、片尾曲和正片，而电视台播放的视频中包括片头曲、前情提要、正片、下集预告和片尾曲，这就需要视频剪辑师找到电视台播放视频中的正片点位，然后根据该正片点位在DVD视频中进行剪辑，目前采用人工方式查找正片点位，效率低下。
发明内容
为了解决上述技术问题或者至少部分地解决上述技术问题，本申请提供了一种视频帧确定方法、装置、电子设备和计算机可读介质。
第一方面，本申请提供了一种视频帧确定方法，所述方法包括：
获取待剪辑视频和所述待剪辑视频对应的参考视频；
确定所述参考视频中的参考帧，其中，所述参考帧包括所述参考视频的正片起始帧或正片结束帧；
确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或与所述正片结束帧对应的目标结束帧。
可选地，所述确定所述参考视频中的参考帧包括：
获取所述参考视频中的备选帧，其中，所述备选帧为所述参考视频的非正片内容中的一个画面帧；
确定所述备选帧对应的备选时刻；
基于所述备选时刻延续预设时长，得到目标剪辑时刻，其中，所述延续预设时长为执行向前延续或向后延续；
根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧。
可选地，所述参考视频中顺序包括邻接起始场景和正片场景，所述备选帧为所述邻接起始场景中的任一帧，所述基于所述备选时刻延续预设时长，得到目标剪辑时刻，包括：基于所述邻接起始场景中的备选帧对应的备选时刻，向后延续第一时长得到第一剪辑时刻；
所述根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧包括：确定所述第一剪辑时刻对应的第一画面帧；将所述第一画面帧作为所述参考视频中的参考帧。
可选地，所述备选帧为所述邻接起始场景中的起始帧，确定所述备选帧对应的备选时刻包括：
从数据库获取预设的邻接起始帧画面，其中，所述邻接起始帧画面为所述邻接起始场景中的起始帧对应的画面；
在所述邻接起始场景中，查找所述邻接起始帧画面对应的邻接起始帧；
确定所述邻接起始帧在所述邻接起始场景中的邻接起始时刻，并将所述邻接起始时刻作为所述备选时刻。
可选地，所述参考视频中顺序包括正片场景和邻接结束场景，所述备选帧为所述邻接结束场景中的任一帧，所述基于所述备选时刻延续预设时长，得到目标剪辑时刻包括：基于所述备选帧对应的备选时刻，向前延续第二时长得到第二剪辑时刻；
所述根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧包括：确定所述第二剪辑时刻对应的第二画面帧；将所述第二画面帧作为所述参考视频中的参考帧。
可选地，所述备选帧为所述邻接结束场景中的结束帧，确定所述备选帧对应的备选时刻包括：
从数据库获取预设的邻接结束帧画面，其中，所述邻接结束帧画面为所述邻接结束场景中的结束帧对应的画面；
在所述邻接结束场景中，查找所述邻接结束帧画面对应的邻接结束帧；
确定所述邻接结束帧在所述邻接结束场景中的邻接结束时刻，并将所述结束起始时刻作为所述备选时刻。
可选地，所述确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或所述正片结束帧对应的目标结束帧包括：
确定所述正片起始帧携带的起始帧标识或所述正片结束帧携带的结束帧标识；
通过遍历所述待剪辑视频的所有画面帧对应的帧标识，查找到所述起始帧标识或所述结束帧标识；
在所述待剪辑视频中，确定所述起始帧标识对应的目标起始帧或所述结束帧标识对应的目标结束帧，其中，所述待剪辑视频和所述参考视频采用相同的帧标识。
第二方面，提供了一种视频帧确定装置，所述装置包括：
获取模块，用于获取待剪辑视频和所述待剪辑视频对应的参考视频；
第一确定模块，用于确定所述参考视频中的参考帧，其中，所述参考帧包括所述参考视频的正片起始帧或正片结束帧；
第二确定模块，用于确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或与所述正片结束帧对应的目标结束帧。
第三方面，提供了一种电子设备，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现任一所述的方法步骤。
第四方面，提供了一种计算机可读存储介质，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现任一所述的方法步骤。
本申请实施例提供的上述技术方案与现有技术相比具有如下优点：
本申请实施例提供的视频剪辑方式，服务器获取待剪辑视频和待剪辑视频对应的参考视频，并确定参考视频中的参考帧，其中，参考帧包括参考视频的正片起始帧或正片结束帧，最后确定待剪辑视频中与正片起始帧对应的目标起始帧或与正片结束帧对应的目标结束帧。本申请根据帧匹配确定待剪辑视频中的目标起始帧或目标结束帧，可以根据目标起始帧或目标结束帧对待剪辑视频进行剪辑，提高帧识别的准确度，从而提高了剪辑准确度。
附图说明
此处的附图被并入说明书中并构成本说明书的一部分，示出了符合本发明的实施例，并与说明书一起用于解释本发明的原理。
为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，对于本领域普通技术人员而言，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。
图1为本申请实施例提供的一种视频帧确定的方法流程图；
图2为本申请实施例提供的确定参考帧的一方法流程图；
图3为本申请实施例提供的确定参考帧的一示意图；
图4为本申请实施例提供的确定参考帧的又一方法流程图；
图5为本申请实施例提供的确定参考帧的另一示意图；
图6为本申请实施例提供的确定参考帧的又一示意图；
图7为本申请实施例提供的一种视频剪辑***示意图；
图8为本申请实施例提供的一种视频帧确定的结构示意图；
图9为本申请实施例提供的一种电子设备的结构示意图。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚，下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本申请的一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动的前提下所获得的所有其他实施例，都属于本申请保护的范围。
本申请实施例提供了一种视频帧确定方法，可以应用于服务器，用于识别出待剪辑视频的目标起始帧或目标结束帧，从而在目标起始帧位置或目标结束帧位置进行视频剪辑。
下面将结合具体实施方式，对本申请实施例提供的一种视频帧确定方法进行详细的说明，如图1所示，具体步骤如下：
步骤101：获取待剪辑视频和待剪辑视频对应的参考视频。
在本申请实施例中，服务器根据片方提供的DVD视频，从DVD视频中提取待剪辑视频，并将电视台的已播放视频信息作为参考视频。
步骤102：确定参考视频中的参考帧，其中，参考帧包括参考视频的正片起始帧或正片结束帧。
在本申请实施例中，参考视频包括三种类型，分别为邻接起始场景+正片场景，或正片场景+邻接结束场景，或邻接起始场景+正片场景+邻接结束场景。不同类型的参考视频可以采用不同的方式得到参考帧，不同类型的参考视频得到参考帧的方式会在下文中进行详述。
邻接起始场景为正片场景播放前的场景，可以只包括片头曲，也可以只包括前情提要，还可以包括片头曲和前情提要等内容，邻接结束场景为正片场景播放后的场景，可以只包括下集预告，也可以只包括片尾曲，还可以包括下集预告和片尾曲等内容。服务器确定邻接起始场景和/或邻近结束场景中的备选帧，并确定该备选帧对应的备选时刻，然后基于备选时刻向前或向后延续预设时长得到参考帧，参考帧中包括确定正片场景的正片起始帧或正片结束帧，服务器将参考帧保存在数据库中。
步骤103：确定待剪辑视频中与正片起始帧对应的目标起始帧或与正片结束帧对应的目标结束帧。
在本申请实施例中，待剪辑视频和参考视频中均包括多个画面帧，每个画面帧均具有对应的帧标识，待剪辑视频和参考视频中相同画面帧具有相同的帧标识。其中，帧标识可以用于唯一标识画面帧，示例性地，帧标识为数值、字符等。
服务器从数据库中获取参考视频的正片起始帧或正片结束帧，可以确定正片起始帧携带的起始帧标识或正片结束帧携带的结束帧标识，由于待剪辑视频和参考视频采用相同的帧标识，因此，服务器可以通过遍历待剪辑视频的所有画面帧对应的帧标识，从而查找到起始帧标识或结束帧标识，服务器在待剪辑视频中，根据起始帧标识确定目标起始帧，或根据结束帧标识确定目标结束帧。
在本申请中，服务器可以根据参考视频的参考帧，自动匹配待剪辑视频中的目标起始帧或目标结束帧，相对于采用人工方式进行帧识别，提高了帧识别的准确度。
可选地，服务器中预先保存有视频帧与时刻的对应关系，在确定待剪辑视频的目标起始帧或目标结束帧后，服务器可以根据该对应关系确定目标起始帧对应的目标起始时刻或目标结束帧对应的目标结束时刻。服务器可以根据目标起始帧，在待剪辑视频的目标起始时刻处进行剪辑，得到包含正片场景和邻接结束场景的已剪辑视频。服务器可以根据目标结束帧，在待剪辑视频的目标结束时刻处进行剪辑，得到包含邻接起始场景和正片场景的已剪辑视频。服务器可以根据目标起始帧和目标结束帧，在待剪辑视频的目标起始时刻和目标结束时刻进行剪辑，得到包含正片场景的已剪辑视频。本申请采用自动剪辑的方式，提高了剪辑效率，采用AI剪辑，提高了剪辑准确度。
作为一种可选的实施方式，确定参考视频中的参考帧包括：获取参考视频中的备选帧，其中，备选帧为参考视频的非正片内容中的一个画面帧；确定备选帧对应的备选时刻；基于备选时刻延续预设时长，得到目标剪辑时刻，其中，延续预设时长为执行向前延续或向后延续；根据目标剪辑时刻对应的画面帧，得到参考视频中的参考帧。
在本申请实施例中，参考视频中顺序包括邻接起始场景、正片场景和邻接结束场景，服务器将邻接起始场景或邻接结束场景中的一个画面帧作为备选帧，然后通过该备选帧确定正片场景中的参考帧。具体地，服务器确定备选帧对应的备选时刻，然后基于备选时刻向前或向后延续预设时长，得到目标剪辑时刻，然后将该目标剪辑时刻对应的画面帧作为参考帧。若备选帧位于邻接起始场景中，则是向后延续预设时长才可以得到参考帧，若备选帧位于邻接结束场景中，则是向前延续预设时长才可以得到参考帧。
作为一种可选的实施方式，如图2所示，参考视频中顺序包括邻接起始场景和正片场景，备选帧为邻接起始场景中的任一帧，得到参考视频中的参考帧包括：
步骤201：基于邻接起始场景中的备选帧对应的备选时刻，向后延续第一时长得到第一剪辑时刻；
在本申请实施例中，服务器从邻接起始场景中的视频帧中，选取任意一个视频帧作为备选帧，并根据视频帧与时刻的对应关系确定该备选帧对应的备选时刻。由于该备选帧位于邻接起始场景中，因此服务器向后延续第一时长才可以得到第一剪辑时刻。
服务器从邻接起始场景中的备选时刻开始，向后延续第一子时长，得到第一剪辑子时刻，该时刻对应正片场景中的正片起始帧，其中，第一子时长为从备选帧至正片起始帧之间的时长；服务器从备选时刻开始，向后延续第二子时长，得到第二剪辑子时刻，该时刻对应正片场景中的正片结束帧，其中，第二子时长包括第一子时长和正片时长。这样服务器可以根据邻接起始场景中的备选帧得到正片起始帧和正片结束帧。
如图3所示，备选帧A为邻接起始场景中的一个视频帧，正片起始帧对应a，正片结束帧对应b，备选帧A向后延续第一子时长1到达a点，备选帧A向后延续第二子时长2到达b点。
步骤202：确定第一剪辑时刻对应的第一画面帧，将第一画面帧作为参考视频中的参考帧。
在本申请实施例中，服务器根据视频帧和时刻的对应关系，确定第一剪辑时刻对应正片场景中的第一画面帧，服务器将第一画面帧作为参考视频中的参考帧。
在本申请中，服务器可以从邻接起始场景中的任一帧开始，往后延续第一时长，得到正片场景中的正片起始帧或正片结束帧，提高查找效率。
作为一种可选的实施方式，备选帧为邻接起始场景中的起始帧，确定备选帧对应的备选时刻包括：从数据库获取预设的邻接起始帧画面，其中，邻接起始帧画面为邻接起始场景中的起始帧对应的画面；在邻接起始场景中，查找邻接起始帧画面对应的邻接起始帧；确定邻接起始帧在邻接起始场景中的邻接起始时刻，并将邻接起始时刻作为备选时刻。服务器从邻接起始时刻开始，将向后延续邻接起始场景的时长作为第一子时长，并将该时刻对应的视频帧作为正片起始帧；服务器从邻接起始时刻开始，将向后延续邻接起始场景+正片场景的总时长作为第二子时长，并将该时刻对应的视频帧作为正片结束帧。
在本申请实施例中，数据库中预存有邻接起始场景的起始帧对应的邻接起始帧画面，示例性地，邻接起始帧画面为片头曲的起始帧对应的画面，也可以为前情回顾的起始帧对应的画面。
若邻接起始帧画面为片头曲的起始帧对应的画面，则服务器从数据库中获取该邻接起始帧画面，并在邻接起始场景中查找与该邻接起始帧画面对应的邻接起始帧，即片头曲中的首帧。服务器确定该邻接起始帧在片头曲中的邻接起始时刻，并将邻接起始时刻作为备选时刻。服务器从该备选时刻开始，向后延续片头曲+前情回顾的时长，得到正片起始帧，并向后延续片头曲+前情回顾+正片场景的时长，得到正片结束帧。
若邻接起始帧画面为前情回顾的起始帧对应的画面，则服务器从数据库中获取该邻接起始帧画面，并在邻接起始场景中查找与该邻接起始帧画面对应的邻接起始帧，即前情回顾中的首帧。服务器确定该邻接起始帧在前情回顾中的邻接起始时刻，并将邻接起始时刻作为备选时刻。服务器从该备选时刻开始，向后延续前情回顾的时长，得到正片起始帧，并向后延续前情回顾+正片场景的时长，得到正片结束帧。
在本申请中，服务器确定邻接起始帧对应的邻接起始时刻，由于邻接起始场景中的片头曲和前情回顾等内容的时长基本为固定时长，因此，从邻接起始时刻向后延续第一时长，采用自动化方式查找参考帧，缩短了查找时长，提高了查找效率。
作为一种可选的实施方式，由于参考视频的邻接起始场景中包含广告，不同剧集的参考视频中广告会发生更换，不同广告的时长会存在差异，因此，从邻接起始时刻向后延续第一时长，得到的第一剪辑时刻对应的视频帧有可能不是参考帧。服务器将第一剪辑时刻对应的视频帧作为第一待选帧，然后确定第一待选帧的所属的第一帧集合，第一帧集合包括位于第一待选帧之前的若干画面帧、第一待选帧和位于第一待选帧之后的若干画面帧。服务器获取预设帧画面，然后根据该预设帧画面在第一帧集合中查找参考帧，这样可以提高参考帧的查找准确度。
示例性地，预设帧画面为目标起始帧的画面，目标起始帧的画面可以为黑屏并显示“第x集”，服务器根据黑屏“第x集”在第一帧集合中查找到正片起始帧。
作为一种可选的实施方式，如图4所示，参考视频中顺序包括正片场景和邻接结束场景，备选帧为邻接结束场景中的任一帧，得到参考视频中的参考帧包括：
步骤401：基于备选帧对应的备选时刻，向前延续第二时长得到第二剪辑时刻。
在本申请实施例中，服务器从邻接结束场景中的视频帧中，选取任意一个视频帧作为备选帧，并根据视频帧与时刻的对应关系确定该备选结束帧对应的备选结束时刻。由于该备选帧位于邻接结束场景中，因此服务器向前延续第二时长才可以得到第二剪辑时刻。
服务器从备选时刻开始，向前延续第三子时长，得到第三剪辑子时刻，该时刻对应正片场景中的正片结束帧，其中，第三子时长包括从备选帧至正片结束帧之间的时长；服务器从备选时刻开始，向前延续第四子时长，得到第四剪辑子时刻，该时刻对应正片场景中的正片起始帧，其中，第四子时长包括第三子时长和正片时长。这样服务器可以根据邻接结束场景中的备选帧得到正片起始帧和正片结束帧。
如图5所示，备选帧B为邻接结束场景中的一个视频帧，正片起始帧对应a，正片结束帧对应b，备选帧B向前延续第三子时长3到达b点，备选帧B向前延续第四子时长4到达a点。
步骤402：确定第二剪辑时刻对应的第二画面帧，将第二画面帧作为参考视频中的参考帧。
在本申请实施例中，服务器根据视频帧和时刻的对应关系，确定第二剪辑时刻对应的正片场景中的第二画面帧，服务器将第二画面帧作为参考视频中的参考帧。
在本申请中，服务器可以从邻接结束场景中的任一帧开始，往前延续第二时长，得到正片场景中的正片起始帧或正片结束帧，提高查找效率。
参考视频中顺序包括正片起始场景、正片场景和邻接结束场景，备选帧包括邻接起始场景中的任一帧和邻接结束场景中的任一帧，得到参考视频中的参考帧的过程为：服务器从邻接起始场景中的备选时刻开始，向后延续第一子时长，得到第一剪辑子时刻，该时刻对应正片场景中的正片起始帧，其中，第一子时长为从邻接起始场景中的备选帧到正片起始帧之间的时长；服务器从邻接结束场景中的备选时刻开始，向前延续第四子时长，得到第四剪辑子时刻，该时刻对应正片场景中的正片结束帧，其中，第四子时长为邻接结束场景中的备选帧到正片结束帧之间的时长。这样服务器可以根据邻接起始场景中的备选帧得到正片起始帧，根据邻接结束场景中的备选帧得到正片结束帧。
如图6所示，备选帧A为邻接起始场景中的一个视频帧，备选帧B为邻接结束场景中的一个视频帧，正片起始帧对应a，正片结束帧对应b，备选帧A向后延续第一子时长1到达a点，备选帧B向前延续第三子时长3到达b点。
作为一种可选的实施方式，备选帧为邻接结束场景中的结束帧，确定备选帧对应的备选时刻包括：从数据库获取预设的邻接结束帧画面，其中，邻接结束帧画面为邻接结束场景中的结束帧对应的画面；在邻接结束场景中，查找邻接结束帧画面对应的邻接结束帧；确定邻接结束帧在邻接结束场景中的邻接结束时刻，并将结束起始时刻作为备选时刻。
在本申请实施例中，数据库中预存有邻接结束场景的结束帧对应的邻接结束帧画面，示例性地，邻接结束帧画面为片尾曲的结束帧对应的画面，也可以为前情回顾的结束帧对应的画面。服务器从数据库中获取邻接结束帧画面，并确定邻接结束帧画面在邻接结束场景中对应的邻接结束帧，即邻接结束场景中的最后一帧。服务器确定邻接结束帧在邻接结束场景中的邻接结束时刻，并将邻接结束时刻作为备选时刻。服务器从邻接结束时刻开始，将向前延续的邻接结束场景中的时长作为第二时长，并将该时刻对应的视频帧作为正片结束帧；服务器从邻接结束时刻开始，将向前延续的邻接结束场景+正片场景中的总时长作为第二时长，并将该时刻对应的视频帧作为正片起始帧。
在本申请中，数据库中预存有邻接结束场景的结束帧对应的邻接结束帧画面，示例性地，邻接结束帧画面为片尾曲中的结束帧对应的画面，或下集预告中的结束帧对应的画面。
若邻接结束帧画面为片尾曲的结束帧对应的画面，则服务器从数据库中获取该邻接结束帧画面，并在邻接结束场景中查找与该邻接结束帧画面对应的邻接结束帧，即片尾曲中的尾帧。服务器确定该邻接结束帧在片尾曲中的邻接结束时刻，并将邻接结束时刻作为备选时刻。服务器从该备选时刻开始，向前延续片尾曲+下集预告的时长，得到正片结束帧，并向前延续片尾曲+下集预告+正片场景的时长，得到正片起始帧。
若邻接结束帧画面为下集预告的结束帧对应的画面，则服务器从数据库中获取该邻接结束帧画面，并在邻接结束场景中查找与该邻接结束帧画面对应的邻接结束帧，即下集预告中的尾帧。服务器确定该邻接结束帧在下集预告中的邻接结束时刻，并将邻接结束时刻作为备选时刻。服务器从该备选时刻开始，向前延续下集预告的时长，得到正片结束帧，并向前延续下集预告+正片场景的时长，得到正片起始帧。
在本申请中，服务器确定邻接结束帧对应的邻接结束时刻，由于邻接结束场景中的片尾曲和下集预告等内容的时长基本为固定时长，因此，从邻接结束时刻向前延续第一时长，缩短了查找时长，提高了查找效率。
作为一种可选的实施方式，服务器从邻接结束时刻向前延续第二时长，得到第二剪辑时刻。由于参考视频的邻接结束场景中包含广告，不同剧集的参考视频中广告会发生更换，不同广告的时长会存在差异，因此，第二剪辑时刻对应的视频帧有可能不是参考帧。服务器将第二剪辑时刻对应的视频帧作为第二待选帧，然后确定第二待选帧的所属的第二帧集合，第二帧集合包括位于第二待选帧之前的若干画面帧、第二待选帧和位于第二待选帧之后的若干画面帧。服务器获取预设帧画面，然后根据该预设帧画面在第二帧集合中查找参考帧，这样可以提高参考帧的查找准确度。
示例性地，预设帧画面为临接结束场景中的首帧画面，临接结束场景中的首帧画面可以为广告首帧画面，服务器在第二帧集合中查找广告首帧，并将广告首帧的前一帧作为目标结束帧。
作为一种可选的实施方式，待剪辑视频剪辑完成后得到已剪辑视频，其中，已剪辑视频可以包括至少两个目标剧集，由于每个目标剧集均包括一个邻接起始场景和邻接结束场景，则需要按照剧集顺序，删掉目标剧集之间的邻接起始场景和邻接结束场景，这样得到连贯的只包含正片内容的已剪辑视频。
已剪辑视频可以包括一个目标剧集，可以识别出已剪辑视频中的目标起始帧和目标结束帧，便于在目标起始帧前添加前情回顾场景，或在目标结束帧后添加下集预告场景。
基于相同的技术构思，本申请实施例还提供了一种视频剪辑***，如图7所示，该***包括任务模块1、AI服务模块2和审核模块3。任务模块1获取待剪辑视频和参考视频，任务模块1将TV流资源作为参考视频，将DVD流资源作为待剪辑视频，并将TV流资源和DVD流资源发送至AI服务模块2，AI服务模块2识别出参考视频中的正片起始帧以及正片结束帧，并将正片起始帧和正片结束帧保存在数据库中，然后根据正片起始帧确定待剪辑视频中的目标起始帧，根据正片结束帧确定待剪辑视频中的目标结束帧，对待剪辑视频进行剪辑。AI服务模块2将剪辑后的已剪辑视频发送至审核模块3进行审核，若审核模块3确定已剪辑视频的剧集连接处的视频内容与参考视频的视频内容相同，则确定审核通过，视频剪辑成功。
基于相同的技术构思，本申请实施例还提供了一种视频帧确定装置，如图8所示，该装置包括：
获取模块801，用于获取待剪辑视频和待剪辑视频对应的参考视频；
第一确定模块802，用于确定参考视频中的参考帧，其中，参考帧包括参考视频的正片起始帧或正片结束帧；
第二确定模块802，用于确定待剪辑视频中与正片起始帧对应的目标起始帧或与正片结束帧对应的目标结束帧。
可选地，第一确定模块802包括：
获取单元，用于获取参考视频中的备选帧，其中，备选帧为参考视频的非正片内容中的一个画面帧；
确定单元，用于确定备选帧对应的备选时刻；
第一得到单元，用于基于备选时刻延续预设时长，得到目标剪辑时刻，其中，延续预设时长为执行向前延续或向后延续；
第二得到单元，用于根据目标剪辑时刻对应的画面帧，得到参考视频中的参考帧。
可选地，参考视频中顺序包括邻接起始场景和正片场景，第一得到单元包括：
第一延续子单元，用于基于邻接起始场景中的备选帧对应的备选时刻，向后延续第一时长得到第一剪辑时刻；
第二得到单元包括：
第一确定子单元，用于确定第一剪辑时刻对应的第一画面帧；
第一作为子单元，用于将第一画面帧作为参考视频中的参考帧。
可选地，备选帧为邻接起始场景中的起始帧，第一延续子单元包括：
第一获取子模块，用于从数据库获取预设的邻接起始帧画面，其中，邻接起始帧画面为邻接起始场景中的起始帧对应的画面；
第一查找子模块，用于在邻接起始场景中，查找邻接起始帧画面对应的邻接起始帧；
第一确定子模块，用于确定邻接起始帧在邻接起始场景中的邻接起始时刻，并将邻接起始时刻作为备选时刻。
可选地，参考视频中顺序包括正片场景和邻接结束场景，备选帧为邻接结束场景中的任一帧，第一得到单元包括：
第二延续子单元，用于基于备选帧对应的备选时刻，向前延续第二时长得到第二剪辑时刻；
第二得到单元包括：
第二确定子单元，用于确定第二剪辑时刻对应的第二画面帧；
第二作为子单元，用于将第二画面帧作为参考视频中的参考帧。
可选地，第二延续子单元包括：
第二获取子模块，用于从数据库获取预设的邻接结束帧画面，其中，邻接结束帧画面为邻接结束场景中的结束帧对应的画面；
第二查找子模块，用于在邻接结束场景中，查找邻接结束帧画面对应的邻接结束帧；
第二确定子模块，用于确定邻接结束帧在邻接结束场景中的邻接结束时刻，并将结束起始时刻作为备选时刻。
可选地，第二确定模块803包括：
第三确定模块，用于确定正片起始帧携带的起始帧标识或正片结束帧携带的结束帧标识；
遍历模块，用于通过遍历待剪辑视频的所有画面帧对应的帧标识，查找到起始帧标识或结束帧标识；
第四确定模块，用于在待剪辑视频中，确定起始帧标识对应的目标起始帧或结束帧标识对应的目标结束帧，其中，待剪辑视频和参考视频采用相同的帧标识。
基于相同的技术构思，本发明实施例还提供了一种电子设备，如图9所示，包括处理器901、通信接口902、存储器903和通信总线904，其中，处理器901，通信接口902，存储器903通过通信总线904完成相互间的通信，
存储器903，用于存放计算机程序；
处理器901，用于执行存储器903上所存放的程序时，实现上述步骤。
上述电子设备提到的通信总线可以是外设部件互连标准(Peripheral ComponentInterconnect，PCI)总线或扩展工业标准结构(Extended Industry StandardArchitecture，EISA)总线等。该通信总线可以分为地址总线、数据总线、控制总线等。为便于表示，图中仅用一条粗线表示，但并不表示仅有一根总线或一种类型的总线。
通信接口用于上述电子设备与其他设备之间的通信。
存储器可以包括随机存取存储器(Random Access Memory，RAM)，也可以包括非易失性存储器(Non-Volatile Memory，NVM)，例如至少一个磁盘存储器。可选的，存储器还可以是至少一个位于远离前述处理器的存储装置。
上述的处理器可以是通用处理器，包括中央处理器(Central Processing Unit，CPU)、网络处理器(Network Processor，NP)等；还可以是数字信号处理器(Digital SignalProcessing，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现场可编程门阵列(Field-Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。
在本发明提供的又一实施例中，还提供了一种计算机可读存储介质，该计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现上述任一方法的步骤。
在本发明提供的又一实施例中，还提供了一种包含指令的计算机程序产品，当其在计算机上运行时，使得计算机执行上述实施例中任一方法。
在上述实施例中，可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时，可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时，全部或部分地产生按照本发明实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中，或者从一个计算机可读存储介质向另一个计算机可读存储介质传输，例如，所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线(DSL))或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质，(例如，软盘、硬盘、磁带)、光介质(例如，DVD)、或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
需要说明的是，在本文中，诸如“第一”和“第二”等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来，而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者设备所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括所述要素的过程、方法、物品或者设备中还存在另外的相同要素。
以上所述仅是本发明的具体实施方式，使本领域技术人员能够理解或实现本发明。对这些实施例的多种修改对本领域的技术人员来说将是显而易见的，本文中所定义的一般原理可以在不脱离本发明的精神或范围的情况下，在其它实施例中实现。因此，本发明将不会被限制于本文所示的这些实施例，而是要符合与本文所申请的原理和新颖特点相一致的最宽的范围。
Claims (9)
1.一种视频帧确定方法，其特征在于，所述方法包括：
获取待剪辑视频和所述待剪辑视频对应的参考视频；
确定所述参考视频中的参考帧，其中，所述参考帧包括所述参考视频的正片起始帧或正片结束帧；
确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或与所述正片结束帧对应的目标结束帧；
所述确定所述参考视频中的参考帧包括：
获取所述参考视频中的备选帧，其中，所述备选帧为所述参考视频的非正片内容中的一个画面帧；
确定所述备选帧对应的备选时刻；
基于所述备选时刻延续预设时长，得到目标剪辑时刻，其中，所述延续预设时长为执行向前延续或向后延续；
根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧。
2.根据权利要求1所述的方法，其特征在于，所述参考视频中顺序包括邻接起始场景和正片场景，所述备选帧为所述邻接起始场景中的任一帧，所述基于所述备选时刻延续预设时长，得到目标剪辑时刻，包括：基于所述邻接起始场景中的备选帧对应的备选时刻，向后延续第一时长得到第一剪辑时刻；
所述根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧包括：确定所述第一剪辑时刻对应的第一画面帧；将所述第一画面帧作为所述参考视频中的参考帧。
3.根据权利要求2所述的方法，其特征在于，所述备选帧为所述邻接起始场景中的起始帧，确定所述备选帧对应的备选时刻包括：
从数据库获取预设的邻接起始帧画面，其中，所述邻接起始帧画面为所述邻接起始场景中的起始帧对应的画面；
在所述邻接起始场景中，查找所述邻接起始帧画面对应的邻接起始帧；
确定所述邻接起始帧在所述邻接起始场景中的邻接起始时刻，并将所述邻接起始时刻作为所述备选时刻。
4.根据权利要求1所述的方法，其特征在于，所述参考视频中顺序包括正片场景和邻接结束场景，所述备选帧为所述邻接结束场景中的任一帧，所述基于所述备选时刻延续预设时长，得到目标剪辑时刻包括：基于所述备选帧对应的备选时刻，向前延续第二时长得到第二剪辑时刻；
所述根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧包括：确定所述第二剪辑时刻对应的第二画面帧；将所述第二画面帧作为所述参考视频中的参考帧。
5.根据权利要求4所述的方法，其特征在于，所述备选帧为所述邻接结束场景中的结束帧，确定所述备选帧对应的备选时刻包括：
从数据库获取预设的邻接结束帧画面，其中，所述邻接结束帧画面为所述邻接结束场景中的结束帧对应的画面；
在所述邻接结束场景中，查找所述邻接结束帧画面对应的邻接结束帧；
确定所述邻接结束帧在所述邻接结束场景中的邻接结束时刻，并将所述邻接结束时刻作为所述备选时刻。
6.根据权利要求1所述的方法，其特征在于，所述确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或所述正片结束帧对应的目标结束帧包括：
确定所述正片起始帧携带的起始帧标识或所述正片结束帧携带的结束帧标识；
通过遍历所述待剪辑视频的所有画面帧对应的帧标识，查找到所述起始帧标识或所述结束帧标识；
在所述待剪辑视频中，确定所述起始帧标识对应的目标起始帧或所述结束帧标识对应的目标结束帧，其中，所述待剪辑视频和所述参考视频采用相同的帧标识。
7.一种视频帧确定装置，其特征在于，所述装置包括：
获取模块，用于获取待剪辑视频和所述待剪辑视频对应的参考视频；
第一确定模块，用于确定所述参考视频中的参考帧，其中，所述参考帧包括所述参考视频的正片起始帧或正片结束帧；
第二确定模块，用于确定所述待剪辑视频中与所述正片起始帧对应的目标起始帧或与所述正片结束帧对应的目标结束帧；
所述第一确定模块，还用于：
获取所述参考视频中的备选帧，其中，所述备选帧为所述参考视频的非正片内容中的一个画面帧；
确定所述备选帧对应的备选时刻；
基于所述备选时刻延续预设时长，得到目标剪辑时刻，其中，所述延续预设时长为执行向前延续或向后延续；
根据所述目标剪辑时刻对应的画面帧，得到所述参考视频中的参考帧。
8.一种电子设备，其特征在于，包括处理器、通信接口、存储器和通信总线，其中，处理器，通信接口，存储器通过通信总线完成相互间的通信；
存储器，用于存放计算机程序；
处理器，用于执行存储器上所存放的程序时，实现权利要求1-6任一所述的方法步骤。
9.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质内存储有计算机程序，所述计算机程序被处理器执行时实现权利要求1-6任一所述的方法步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011540143.3A CN112770176B (zh) | 2020-12-23 | 2020-12-23 | 一种视频帧确定方法、装置、电子设备和计算机可读介质 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202011540143.3A CN112770176B (zh) | 2020-12-23 | 2020-12-23 | 一种视频帧确定方法、装置、电子设备和计算机可读介质 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN112770176A CN112770176A (zh) | 2021-05-07 |
| CN112770176B true CN112770176B (zh) | 2022-10-25 |
Family
ID=75694770
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202011540143.3A Active CN112770176B (zh) | 2020-12-23 | 2020-12-23 | 一种视频帧确定方法、装置、电子设备和计算机可读介质 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN112770176B (zh) |
Families Citing this family (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN115914738B (zh) * | 2022-11-08 | 2024-06-04 | 北京奇艺世纪科技有限公司 | 一种视频生成方法、装置、服务器及存储介质 |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103716676A (zh) * | 2013-12-30 | 2014-04-09 | 深圳Tcl新技术有限公司 | 智能电视的视频节目播放方法及装置 |
| WO2018086303A1 (zh) * | 2016-11-14 | 2018-05-17 | 武汉斗鱼网络科技有限公司 | 一种广告插播方法、装置及可读存储介质 |
| CN108769731A (zh) * | 2018-05-25 | 2018-11-06 | 北京奇艺世纪科技有限公司 | 一种检测视频中目标视频片段的方法、装置及电子设备 |
| CN110290419A (zh) * | 2019-06-25 | 2019-09-27 | 北京奇艺世纪科技有限公司 | 视频播放方法、装置及电子设备 |
| CN110858921A (zh) * | 2018-08-22 | 2020-03-03 | 北京优酷科技有限公司 | 节目视频的处理方法及装置 |
| CN110915224A (zh) * | 2018-08-01 | 2020-03-24 | 深圳市大疆创新科技有限公司 | 视频剪辑方法、装置、设备及存储介质 |
| CN111356015A (zh) * | 2020-02-25 | 2020-06-30 | 北京奇艺世纪科技有限公司 | 重复视频检测方法、装置、计算机设备和存储介质 |
-
2020
- 2020-12-23 CN CN202011540143.3A patent/CN112770176B/zh active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103716676A (zh) * | 2013-12-30 | 2014-04-09 | 深圳Tcl新技术有限公司 | 智能电视的视频节目播放方法及装置 |
| WO2018086303A1 (zh) * | 2016-11-14 | 2018-05-17 | 武汉斗鱼网络科技有限公司 | 一种广告插播方法、装置及可读存储介质 |
| CN108769731A (zh) * | 2018-05-25 | 2018-11-06 | 北京奇艺世纪科技有限公司 | 一种检测视频中目标视频片段的方法、装置及电子设备 |
| CN110915224A (zh) * | 2018-08-01 | 2020-03-24 | 深圳市大疆创新科技有限公司 | 视频剪辑方法、装置、设备及存储介质 |
| CN110858921A (zh) * | 2018-08-22 | 2020-03-03 | 北京优酷科技有限公司 | 节目视频的处理方法及装置 |
| CN110290419A (zh) * | 2019-06-25 | 2019-09-27 | 北京奇艺世纪科技有限公司 | 视频播放方法、装置及电子设备 |
| CN111356015A (zh) * | 2020-02-25 | 2020-06-30 | 北京奇艺世纪科技有限公司 | 重复视频检测方法、装置、计算机设备和存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN112770176A (zh) | 2021-05-07 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN108769731B (zh) | 一种检测视频中目标视频片段的方法、装置及电子设备 | |
| CN106686404B (zh) | 一种视频分析平台、匹配方法、精准投放广告方法及*** | |
| US10231023B2 (en) | Media fingerprinting for content determination and retrieval | |
| CN108235141B (zh) | 直播视频转碎片化点播的方法、装置、服务器和存储介质 | |
| CN108924586B (zh) | 一种视频帧的检测方法、装置及电子设备 | |
| US8503523B2 (en) | Forming a representation of a video item and use thereof | |
| US20220021952A1 (en) | Determining A Popularity Metric for Media Content | |
| CN109889882B (zh) | 一种视频剪辑合成方法和*** | |
| CN110913241B (zh) | 一种视频检索方法、装置、电子设备及存储介质 | |
| CN109168037B (zh) | 视频播放方法和装置 | |
| WO2018076998A1 (zh) | 一种回放视频文件的生成方法和装置 | |
| CN103581705A (zh) | 视频节目识别方法和*** | |
| US20070130611A1 (en) | Triggerless interactive television | |
| CN202998337U (zh) | 视频节目识别*** | |
| CN110113626B (zh) | 一种回放直播视频的方法及装置 | |
| JP2009239729A (ja) | コンテンツのシーン出現を通知する装置、方法およびプログラム | |
| RU2413990C2 (ru) | Способ и устройство для обнаружения границ элемента контента | |
| WO2020078676A1 (en) | Methods and apparatus for generating a video clip | |
| CN110674345A (zh) | 一种视频搜索方法、装置及服务器 | |
| US10795932B2 (en) | Method and apparatus for generating title and keyframe of video | |
| CN108616769B (zh) | 一种视频点播的方法和装置 | |
| CN112770176B (zh) | 一种视频帧确定方法、装置、电子设备和计算机可读介质 | |
| CN107948718B (zh) | 一种节目信息的处理方法、装置及*** | |
| CN104581226A (zh) | 一种针对当前直播流进行节目推荐的方法和装置 | |
| CN114245229B (zh) | 一种短视频制作方法、装置、设备以及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |