CN107105342B - 一种视频播放控制方法及移动终端 - Google Patents

一种视频播放控制方法及移动终端 Download PDF

Info

Publication number
CN107105342B
CN107105342B CN201710286861.4A CN201710286861A CN107105342B CN 107105342 B CN107105342 B CN 107105342B CN 201710286861 A CN201710286861 A CN 201710286861A CN 107105342 B CN107105342 B CN 107105342B
Authority
CN
China
Prior art keywords
image
frame
video
images
video segment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201710286861.4A
Other languages
English (en)
Other versions
CN107105342A (zh
Inventor
杨章
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Vivo Mobile Communication Co Ltd
Original Assignee
Vivo Mobile Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Vivo Mobile Communication Co Ltd filed Critical Vivo Mobile Communication Co Ltd
Priority to CN201710286861.4A priority Critical patent/CN107105342B/zh
Publication of CN107105342A publication Critical patent/CN107105342A/zh
Application granted granted Critical
Publication of CN107105342B publication Critical patent/CN107105342B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65Transmission of management data between client and server
    • H04N21/658Transmission by the client directed to the server
    • H04N21/6587Control parameters, e.g. trick play commands, viewpoint selection

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

本发明提供了一种视频播放控制方法及移动终端。其中,该视频播放控制方法包括:获取组成视频的连续N帧图像;获取连续N帧图像中每一帧图像的目标对象;根据每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段;在检测到对视频的播放控制指令时,根据播放控制指令,以视频段为单位,控制视频的播放进度在T个视频段中进行切换;其中,N为大于0的整数,T为大于0的整数。上述技术方案,以视频中的目标对象为依据,对视频进行划分,将视频分割为多个视频段,每一视频段所播放的内容与该视频段包含的目标对象息息相关,这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。

Description

一种视频播放控制方法及移动终端
技术领域
本发明涉及通信技术领域,尤其涉及一种视频播放控制方法及移动终端。
背景技术
随着移动终端技术的发展以及移动终端的轻巧便携特性,越来越多的人使用移动终端(如手机、平板电脑等)观看视频。在使用移动终端观看视频时,有时为了加快观看速度,经常出现用户想要跳着看的情况,这时一般会采用快进或快退方式调整视频的播放进度。
现有技术中,视频的快进单位一般是按照时间来划分的,也就是规定了固定的移动变量,但电视剧、电影、情景短片或是综艺类节目等与人物有关的视频,其发展进程往往是与其中的人物息息相关的,采用现有技术中的快进或快退方式进行快进,如果没有操作好可能会漏掉一些关键人物的表演或关键剧情的发展等,较难定位到用户想要观看的包含关键人物等的视频播放的理想位置,这时用户又需要重新对视频进度进行调整,非常不方便。
发明内容
本发明实施例提供了一种视频播放控制方法及移动终端,以解决现有技术中进行视频进度调整时,视频定位不便的问题。
第一方面,提供了一种视频播放控制方法,包括:
获取组成视频的连续N帧图像;
获取所述连续N帧图像中每一帧图像的目标对象;
根据每一帧图像中包含的所述目标对象,将所述连续N帧图像划分为T个视频段;
在检测到对所述视频的播放控制指令时,根据所述播放控制指令,以视频段为单位,控制所述视频的播放进度在所述T个视频段中进行切换;
其中,N为大于0的整数,T为大于0的整数。
第二方面,提供了一种移动终端,包括:
第一获取模块,用于获取组成视频的连续N帧图像;
第二获取模块,用于获取所述第一获取模块获取的所述连续N帧图像中每一帧图像的目标对象;
划分模块,用于根据所述第二获取模块获取的每一帧图像中包含的所述目标对象,将所述连续N帧图像划分为T个视频段;
控制模块,用于在检测到对所述视频的播放控制指令时,根据所述播放控制指令,以视频段为单位,控制所述视频的播放进度在所述划分模块划分的T个视频段中进行切换;
其中,N为大于0的整数,T为大于0的整数。
本发明的有益效果是:
上述技术方案,以视频中的目标对象为依据,对视频进行划分,分割为多个视频段,每一视频段所播放的内容与该视频段包含的目标对象息息相关,这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行调整的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
附图说明
为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1表示本发明实施例提供的视频播放控制方法的流程图;
图2表示本发明实施例提供的步骤103的子步骤流程图;
图3表示本发明实施例提供的移动终端的框图之一;
图4表示本发明实施例提供的移动终端的框图之二;
图5表示本发明实施例提供的移动终端的框图之三;
图6表示本发明实施例提供的移动终端的框图之四。
具体实施方式
下面将参照附图更详细地描述本发明的示例性实施例。虽然附图中显示了本发明的示例性实施例,然而应当理解,可以以各种形式实现本发明而不应被这里阐述的实施例所限制。相反,提供这些实施例是为了能够更透彻地理解本发明,并且能够将本发明的范围完整的传达给本领域的技术人员。
依据本发明实施例的一个方面,提供了一种视频播放控制方法。
如图1所示,该视频播放控制方法包括:
步骤101、获取组成视频的连续N帧图像。
其中,本步骤中获取的连续N帧图像,可以是组成视频的所有图像,也可以是组成视频的部分图像,具体情况可根据实际需求选择,本发明实施例对此不进行限制。
其中,N为大于0的整数。
步骤102、获取连续N帧图像中每一帧图像的目标对象。
对于步骤101中获取的连续N帧图像,本步骤对其中的每一帧图像进行目标对象的识别和确认。
其中,该目标对象一般是与视频中的情节发展息息相关的物体。例如,若该视频为电影,而电影发展的剧情是以人物活动为主线的,则对该视频划分时,所依据的目标对象为人脸图像;若该视频为与动物有关的纪录片,则对该视频进行划分时所依据的目标对象为动物图像;若该视频为与植物有关的纪录片,则对该视频进行划分时所依据的目标对象为植物图像。因此,本发明实施例中,该目标对象为人脸图像、动物图像或者植物图像等,具体情况可依据视频的具体内容来确定。
步骤103、根据每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段。
本步骤中,依据图像中的目标对象,将获取的连续N帧图像划分为T个视频段。其中,T为大于0的整数。
其中,目标对象与视频中的情节发展息息相关,而不同的播放进度所对应的情节发展可能与不同的具体目标对象有关。以电影类视频为例,例如当前播放的场景为女主一号与男主一号在对话,对话一段时间后,跳转到一下场景:女配一号与女配二号在对话,在前一场景中,无论是否增加了其他演员,但女主一号与男主一号一直都在,剧情的发展是与女主一号与男主一号相关的,因此可将前一场景中连续具有女主一号与男主一号的帧图像划分为一个视频段。而下一场景中是与女配一号与女配二号相关的,且并无女主一号与男主一号,因此可将下一场景中,连续具有女配一号与女配二号的帧图像划分为一个视频段中。综上所述,一段连续的帧图像中,包含的共同目标对象可能为关键信息,因此本发明实施例根据每一帧图像中包含的目标对象之间的关系,将所述视频划分为T个视频段,以方便用户对关键信息的关注。
步骤104、在检测到对视频的播放控制指令时,根据该播放控制指令,以视频段为单位,控制视频的播放进度在T个视频段中进行切换。
在完成对视频的划分后,若检测到对视频的播放控制指令(如快进操作指令或快退操作指令),则根据该播放控制指令,以视频为单位,控制视频的播放进度在T个视频段中进行切换。这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行调整的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
具体地,本发明的一个实施例中,该播放控制指令包括:快进操作指令和快退操作指令。
其中,在检测到快进操作指令时,控制视频的播放进度跳转至当前播放视频段的后一个视频段的首帧图像进行播放;在检测到快退操作指令时,控制视频的播放进度跳转至当前播放视频段的前一个视频段的首帧图像进行播放,这样,用户在进行快进或快退操作时,不仅能够提高视频进度调整的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
进一步地,如图2所示,步骤103中根据每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段时,可以按照如下步骤执行:
步骤1031、将连续N帧图像中包含目标对象的第一帧图像确定为第一个视频段的首帧图像。
本步骤中,按照播放顺序,确定获取的连续N帧图像中第一帧包含目标对象的图像(即步骤1031中所述的第一帧图像),并将该图像设置为第一个视频段的首帧图像,同时,还要对该第一帧图像中的目标对象进行判断和识别。例如,将一段视频中第一次呈现出人脸图像的帧图像设置为包含人脸图像的第一个视频段的首帧图像,同时对该帧图像中的人脸进行识别,确定每一张人脸所对应的人物。
其中,该第一个视频段为包含目标对象的第一个视频段,即按照顺时播放顺序,在所有包含目标对象的视频段中,该视频段为第一个视频段。
步骤1032、确定第一帧图像中包含的所有目标对象形成的第一集合。
本步骤,根据第一帧图像中的目标对象,确定由第一帧图像中包含的所有目标对象形成的第一集合。例如,第一帧图像中包含目标对象A和目标对象B,则第一帧图像中包含的所有目标对象形成的第一集合X={A,B}。
步骤1033、在第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第一集合之间的关系,将M帧图像与第一帧图像划分在第一个视频段中。
也就是,在确定包含目标对象的第一个视频段的首帧图像之后,对与该首帧图像相邻的下一帧图像(下面称为第二帧图像)中的目标对象进行判断和识别,并根据处理结果判断第二帧图像中包含的目标对像形成的集合与第一集合之间的关系,若满足预设的集合关系,则将第二帧图像与该首帧图像划分在同一个视频段内,然后继续判断与第二帧图像相邻的第三帧图像中包含的目标对象形成的集合与第一集合之间的关系,直至当第一帧图像之后的第M+1帧图像中包含的目标对象形成的集合与第一集合之间不满足预设的集合关系时,将该首帧图像以及该首帧图像之后的M帧图像划分为一个视频段。
其中,M为大于0的整数。
其中,该预设的集合关系可根据实际需求设计。
步骤1034、按照上述第一个视频段的划分方式,将第一帧图像之后的第M+1帧图像至连续N帧图像中的第N帧图像依次划分为T-1个视频段。
其中,所述划分方式为:将存在预设集合关系的图像划分在同一个视频段中。
在完成上述第一个视频段的划分后,依照该第一视频段的划分方法,将第一帧图像之后的第M+1帧图像至连续N帧图像中的第N帧图像依次划分为T-1个视频段,以完成连续N帧图像的视频段划分。其中,所述连续N帧图像中的第N帧图像为该连续N帧图像中的最后一帧图像。
具体地,确定第M+1帧图像中包含的所有目标对象形成的第二集合,当第二集合与第一集合之间不存在预设集合关系时,将第M+1帧图像确定为第二个视频段的首帧图像。在第M+1帧图像之后的P帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第二集合之间的关系,将P帧图像与第M+1帧图像划分在第二个视频段中。依据第二个视频段的划分方式,完成之后剩余图像的划分。其中,P为大于0的整数。
优选地,本发明实施例中,预设的集合关系为具有子集关系。所述具有子集关系为:在进行集合关系比较的两帧图像中,前一帧图像中所有目标对象形成的第三集合为后一帧图像中所有目标对象形成的第四集合的子集,或第四集合为第三集合的子集。
一般,当两帧图像中的目标对象形成的集合之间具有子集关系时,说明两帧图像中具有共同的目标对象,而对应的情节发展应该是与该共同的目标对象密切相关的,因此通过判断是否具有子集关系而划分出来的每一段视频段都具有关键的目标对象,这样能够方便用户对关键信息的关注。当然,具有的子集关系也可能是空集关系。
本发明实施例根据每帧图像中目标对象形成的集合之间的子集关系,对视频进行划分,从而将关联关系较近的情节划分在一个视频段内,以便用户在进行视频进度调整时,避免错过与目标对象相关的情节,优化了视频的播放效果。
基于上述描述,步骤1032可具体为:在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,则将所述M帧图像与第一帧图像划分在所述第一个视频段中。
例如,目标对象为人脸图像,根据人脸识别技术确认第一帧图像中的人脸图像分别为A、B、C和D,构成的集合为S1={A,B,C,D},第二帧图像中的人脸图像分别为A、B和C,构成的集合为S2={A,B,C},此时S2为S1的子集,即第二帧图像包含的目标对象形成的集合与第一集合之间具有子集关系,则将第二帧图像与第一帧图像划分在同一个视频段内;或是当S1={A,B,C,D},S2={A,B,C,D,F,G}时,第二帧图像与第一帧图像相比增加了两个人物,此时S1为S2的子集,则也将第二帧图像与第一帧图像划分在同一个视频段内;当S2为空集(即第二帧图像中不包含目标对象时),或S2为S1的假子集(即第二帧图像中的目标对象与第一帧图像中的目标对象一样)时,由于也属于子集关系,同样将第二帧图像与第一帧图像划分在同一个视频段内。
再例如,S1={A,B,C,D},S2={B,C,E},此时S2与S1不具有子集关系,即第二帧图像包含的目标对象形成的集合与第一集合之间不具有子集关系,则将第二帧图像设置为另一个视频段的首帧图像。
进一步地,本发明实施例中,预设的集合关系还可以为:具有子集关系,且在具有子集关系时,进行集合关系比较的两帧图像中,前一帧图像对应的集合中元素的个数与后一帧图像对应的集合中元素的个数的差值小于或等于预设差值。
该预设条件不仅考虑到关键的目标对象,还通过增加目标对象个数差值的限制,避免划分的一个视频段中具有过多的帧图像,造成该视频段播放时间较长,影响用户对视频进度调整的问题。
基于上述描述,步骤1032可具体为:在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,且M帧图像中每一帧图像对应的集合中元素的个数满足预设条件,则将所述M帧图像与第一帧图像划分在第一个视频段中。
其中,预设条件包括:M帧图像中每一帧图像对应的集合的元素个数与第一集合的元素个数之间的差值均小于或等于预设阈值。
其中,需要说明的是,M帧图像中每一帧图像对应的集合中元素的个数与第一帧图像对应的集合中元素的个数的差值,并非只是M帧图像中每一帧图像对应的集合中元素的个数减去第一帧图像对应的集合中元素的个数得到的数值,也可以是第一帧图像对应的集合中元素的个数减去M帧图像中每一帧图像对应的集合中元素的个数得到的数值;或者理解为:M帧图像中每一帧图像对应的集合中元素的个数与第一帧图像对应的集合中元素的个数的差值的绝对值小于或等于预设差值,该差值大于或等于0。
继续以上述事例说明,假设预设差值为3。第一帧图像中的人脸对应的人物的集合为S1={A,B,C,D},第二帧图像中的人脸对应的人物的集合为S2={A,B},S2为S1的子集,且两个集合中元素个数的差值为2,差值小于3,满足判断条件,因此将第二帧图像与第一帧图像划分在同一个视频段内。
再例如,S1={A,B,C,D},S2={B,C,E},此时S2与S1不具有子集关系,不满足判断条件,则将第二帧图像设置为另一个视频段的首帧图像。
再例如,S1={A,B,C,E,D,F,G},S2={B,C,E},S2为S1的子集,但两个集合中元素个数的差值为4,差值大于3,不满足判断条件,则将第二帧图像设置为另一个视频段的首帧图像。
进一步地,本发明实施例中,还可将连续N帧图像中不包含目标对象的连续S帧图像划分在同一个视频段中。
其中,在不包含目标对象的所述视频段中,将第一帧不包含目标对象的图像确定为该视频段的首帧图像。
其中,S为大于0的整数。
例如,在获取的连续N帧图像中,若在第一帧包含目标对象的图像(即步骤1031中所述的第一帧图像)之前,还具有至少一帧不包含目标对象的图像,可将这些不包含目标对象的图像单独划分为一个视频段,并将这些不包含目标对象的图像中的第一帧图像设置为该视频段的首帧图像。
当然可以理解的是,还可将这些不包含目标对象的图像与上述第一帧包含目标对象的图像划分在同一个视频段内,并将这些不包含目标对象的图像中的第一帧图像设置为该视频段的首帧图像。
通过上述的划分方式,能够全面的对视频进行划分,防止忽略对部分帧图像的处理。
进一步地,本发明实施例中,为了避免一个视频段的播放时间过长,可对一个视频段的图像帧数进行限制,即设置一个视频段的最大图像帧数,在划分时,若一个视频段的图像帧数超过最大图像帧数,则将超过的帧图像划分在另一个视频段内。
综上所述,本发明实施例提供的视频播放控制方法,以视频中的目标对象为依据,对视频进行划分,分割为多个视频段,每一视频段所播放的内容与该视频段包含的目标对象息息相关,这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行调整的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
依据本发明实施例的另一个方面,提供了一种移动终端300。
如图3所示,该移动终端300包括:
第一获取模块301,用于获取组成视频的连续N帧图像。
其中,本步骤中获取的连续N帧图像,可以是组成视频的所有图像,也可以是组成视频的部分图像,具体情况可根据实际需求选择,本发明实施例对此不进行限制。
其中,N为大于0的整数
第二获取模块302,用于获取第一获取模块301获取的连续N帧图像中每一帧图像的目标对象。
对于第一获取模块301获取的连续N帧图像,第二获取模块302对其中的每一帧图像进行目标对象的识别和确认。
其中,该目标对象一般是与视频中的情节发展息息相关的物体。例如,若该视频为电影,而电影发展的剧情是以人物活动为主线的,则对该视频划分时,所依据的目标对象为人脸图像;若该视频为与动物有关的纪录片,则对该视频进行划分时所依据的目标对象为动物图像;若该视频为与植物有关的纪录片,则对该视频进行划分时所依据的目标对象为植物图像。因此,本发明实施例中,该目标对象为人脸图像、动物图像或者植物图像等,具体情况可依据视频的具体内容来确定。
划分模块303,用于根据第二获取模块302获取的每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段。
划分模块303依据图像中的目标对象,将获取的连续N帧图像划分为T个视频段。
其中,T为大于0的整数。
其中,目标对象与视频中的情节发展息息相关,而不同的播放进度所对应的情节发展可能与不同的具体目标对象有关。以电影类视频为例,例如当前播放的场景为女主一号与男主一号在对话,对话一段时间后,跳转到一下场景:女配一号与女配二号在对话,在前一场景中,无论是否增加了其他演员,但女主一号与男主一号一直都在,剧情的发展是与女主一号与男主一号相关的,因此可将前一场景中连续具有女主一号与男主一号的帧图像划分为一个视频段。而下一场景中是与女配一号与女配二号相关的,且并无女主一号与男主一号,因此可将下一场景中,连续具有女配一号与女配二号的帧图像划分为一个视频段中。综上所述,一段连续的帧图像中,包含的共同目标对象可能为关键信息,因此本发明实施例根据每一帧图像中包含的目标对象之间的关系,将所述视频划分为T个视频段,以方便用户对关键信息的关注。
控制模块304,用于在检测到对视频的播放控制指令时,根据播放控制指令,以视频段为单位,控制视频的播放进度在划分模块划分的T个视频段中进行切换。
在划分模块303完成对视频的划分后,若检测到对视频的播放控制指令(如快进操作指令或快退操作指令),则控制模块304根据该播放控制指令,以视频为单位,控制视频的播放进度在T个视频段中进行切换。这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行播放的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
进一步地,如图4所示,划分模块303包括:
第一确定单元3031,用于将连续N帧图像中包含目标对象的第一帧图像确定为第一个视频段的首帧图像。
其中,第一确定单元3031按照播放顺序,确定获取的连续N帧图像中第一帧包含目标对象的图像(即步骤1021中所述的第一帧图像),并将该图像设置为第一个视频段的首帧图像,同时,还要对该第一帧图像中的目标对象进行判断和识别。例如将一段视频中第一次呈现出人脸图像的帧图像设置为包含人脸图像的第一个视频段的首帧图像,同时对该帧图像中的人脸进行识别,确定每一张人脸所对应的人物。
其中,该第一个视频段为包含目标对象的第一个视频段,即按照顺时播放顺序,在所有包含目标对象的视频段中,该视频段为第一个视频段。
第二确定单元3032,用于确定第一帧图像中包含的所有目标对象形成的第一集合。
其中,第二确定单元3032根据第一帧图像中的目标对象,确定由第一帧图像中包含的所有目标对象形成的第一集合。例如,第一帧图像中包含目标对象A和目标对象B,则第一帧图像中包含的所有目标对象形成的第一集合X={A,B}。
第一划分单元3033,用于在第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第一集合之间的关系,将M帧图像与第一帧图像划分在第一个视频段中。
也就是,在确定包含目标对象的第一个视频段的首帧图像之后,由第一划分单元3033对与该首帧图像相邻的下一帧图像(下面称为第二帧图像)中的目标对象进行判断和识别,并根据处理结果判断第二帧图像中包含的目标对像形成的集合与第一集合之间的关系,若满足预设的集合关系,则将第二帧图像与该首帧图像划分在同一个视频段内,然后继续判断与第二帧图像相邻的第三帧图像中包含的目标对象形成的集合与第一集合之间的关系,直至当第一帧图像之后的第M+1帧图像中包含的目标对象形成的集合与第一集合之间不满足预设的集合关系时,将该首帧图像以及该首帧图像之后的M帧图像划分为一个视频段。
其中,M为大于0的整数。
其中,该预设的集合关系可根据实际需求设计。
第二划分单元3034,用于按照第一个视频段的划分方式,将第一帧图像之后的第M+1帧图像至连续N帧图像中的第N帧图像依次划分为T-1个视频段。
其中,划分方式为:将存在预设集合关系的图像划分在同一个视频段中。
其中,所述划分方式为:将存在预设集合关系的图像划分在同一个视频段中。
在完成上述第一个视频段的划分后,第二划分单元3034依照该第一视频段的划分方法,将第一帧图像之后的第M+1帧图像至连续N帧图像中的第N帧图像依次划分为T-1个视频段,以完成连续N帧图像的视频段划分。其中,所述连续N帧图像中的第N帧图像为该连续N帧图像中的最后一帧图像。
进一步地,如图4所示,第二划分单元3034包括:
第一确定子单元30341,用于确定第M+1帧图像中包含的所有目标对象形成的第二集合。
第二确定子单元30342,用于当第二集合与第一集合之间不存在预设集合关系时,将第M+1帧图像确定为第二个视频段的首帧图像。
第一划分子单元30343,用于在第M+1帧图像之后的P帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第二集合之间的关系,将P帧图像与第M+1帧图像划分在第二个视频段中。
在完成上述第一个视频段的划分后,依照该第一视频段的划分方法,将第一帧图像之后的第M+1帧图像至连续N帧图像中的第N帧图像依次划分为T-1个视频段。
其中,P为大于0的整数。
进一步地,如图4所示,第一划分单元3033包括:
第二划分子单元30331,用于在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,则将M帧图像与第一帧图像划分在第一个视频段中。
优选地,本发明实施例中,预设的集合关系为具有子集关系。所述具有子集关系为:在进行集合关系比较的两帧图像中,前一帧图像中所有目标对象形成的第三集合为后一帧图像中所有目标对象形成的第四集合的子集,或第四集合为第三集合的子集。
一般,当两帧图像中的目标对象形成的集合之间具有子集关系时,说明两帧图像中具有共同的目标对象,而对应的情节发展应该是与该共同的目标对象密切相关的,因此通过判断是否具有子集关系而划分出来的每一段视频段都具有关键的目标对象,这样能够方便用户对关键信息的关注。当然,具有的子集关系也可能是空集关系。
例如,目标对象为人脸图像,根据人脸识别技术确认第一帧图像中的人脸图像分别为A、B、C和D,构成的集合为S1={A,B,C,D},第二帧图像中的人脸图像分别为A、B和C,构成的集合为S2={A,B,C},此时S2为S1的子集,即第二帧图像包含的目标对象形成的集合与第一集合之间具有子集关系,则将第二帧图像与第一帧图像划分在同一个视频段内;或是当S1={A,B,C,D},S2={A,B,C,D,F,G}时,第二帧图像与第一帧图像相比增加了两个人物,此时S1为S2的子集,则也将第二帧图像与第一帧图像划分在同一个视频段内;当S2为空集(即第二帧图像中不包含目标对象时),或S2为S1的假子集(即第二帧图像中的目标对象与第一帧图像中的目标对象一样)时,由于也属于子集关系,同样将第二帧图像与第一帧图像划分在同一个视频段内。
再例如,S1={A,B,C,D},S2={B,C,E},此时S2与S1不具有子集关系,即第二帧图像包含的目标对象形成的集合与第一集合之间不具有子集关系,则将第二帧图像设置为另一个视频段的首帧图像。
本发明实施例根据每帧图像中目标对象形成的集合之间的子集关系,对视频进行划分,从而将关联关系较近的情节划分在一个视频段内,以便用户在进行视频进度调整时,避免错过与目标对象相关的情节,优化了视频的播放效果。
进一步地,如图4所示,第一划分单元3033包括:
第三划分子单元30332,用于在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,且M帧图像中每一帧图像对应的集合中元素的个数满足预设条件,则将M帧图像与第一帧图像划分在第一个视频段中。
其中,预设条件包括:M帧图像中每一帧图像对应的集合的元素个数与第一集合的元素个数之间的差值小于或等于预设阈值。
本发明实施例中,预设的集合关系还可以为:具有子集关系,且在具有子集关系时,进行集合关系比较的两帧图像中,前一帧图像对应的集合中元素的个数与后一帧图像对应的集合中元素的个数的差值均小于或等于预设差值。
该预设条件不仅考虑到关键的目标对象,还通过增加目标对象个数差值的限制,避免划分的一个视频段中具有过多的帧图像,造成该视频段播放时间较长,影响用户对视频进度调整的问题。
其中,需要说明的是,M帧图像中每一帧图像对应的集合中元素的个数与第一帧图像对应的集合中元素的个数的差值,并非只是M帧图像中每一帧图像对应的集合中元素的个数减去第一帧图像对应的集合中元素的个数得到的数值,也可以是第一帧图像对应的集合中元素的个数减去M帧图像中每一帧图像对应的集合中元素的个数得到的数值;或者理解为:M帧图像中每一帧图像对应的集合中元素的个数与第一帧图像对应的集合中元素的个数的差值的绝对值小于或等于预设差值,该差值大于或等于0。
继续以上述事例说明,假设预设差值为3。第一帧图像中的人脸对应的人物的集合为S1={A,B,C,D},第二帧图像中的人脸对应的人物的集合为S2={A,B},S2为S1的子集,且两个集合中元素个数的差值为2,差值小于3,满足判断条件,因此将第二帧图像与第一帧图像划分在同一个视频段内。
再例如,S1={A,B,C,D},S2={B,C,E},此时S2与S1不具有子集关系,不满足判断条件,则将第二帧图像设置为另一个视频段的首帧图像。
再例如,S1={A,B,C,E,D,F,G},S2={B,C,E},S2为S1的子集,但两个集合中元素个数的差值为4,差值大于3,不满足判断条件,则将第二帧图像设置为另一个视频段的首帧图像。
进一步地,如图4所示,划分模块303包括:
第三划分单元3035,用于将连续N帧图像中不包含目标对象的连续S帧图像划分在同一个视频段中。
其中,在不包含目标对象的视频段中,将第一帧不包含目标对象的图像确定为视频段的首帧图像;其中,S为大于0的整数。
例如,在获取的连续N帧图像中,若在第一帧包含目标对象的图像(即上述第一帧图像)之前,还具有至少一帧不包含目标对象的图像,可将这些不包含目标对象的图像单独划分为一个视频段,并将这些不包含目标对象的图像中的第一帧图像设置为该视频段的首帧图像。
当然可以理解的是,还可将这些不包含目标对象的图像与上述第一帧包含目标对象的图像划分在同一个视频段内,并将这些不包含目标对象的图像中的第一帧图像设置为该视频段的首帧图像。
通过上述的划分方式,能够全面的对视频进行划分,防止忽略对部分帧图像的处理。
进一步地,本发明实施例中,播放控制指令包括:快进操作指令和快退操作指令。
如图4所示,控制模块304包括:
第一控制单元3041,用于在检测到快进操作指令时,控制视频的播放进度跳转至当前播放视频段的后一个视频段的首帧图像进行播放。
第二控制单元3042,用于在检测到快退操作指令时,控制视频的播放进度跳转至当前播放视频段的前一个视频段的首帧图像进行播放。
这样,用户在进行快进或快退操作时,不仅能够提高视频进度调整的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
综上所述,本发明实施例提供的移动终端,以视频中的目标对象为依据,对视频进行划分,分割为多个视频段。具体地,通过第一获取模块301获取组成视频的连续N帧图像,由第二获取模块302获取连续N帧图像中每一帧图像的目标对象,由划分模块303根据第二获取模块302获取的每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段,在检测到对视频的播放控制指令时,控制模块304根据播放控制指令,以视频段为单位,控制视频的播放进度在划分模块划分的T个视频段中进行切换。
划分后的每一视频段所播放的内容与该视频段包含的目标对象息息相关,这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行调整的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
依据本发明实施例的另一个方面,提供了一种移动终端500。
如图5所示,该移动终端500包括:至少一个处理器501、存储器502、至少一个网络接口504和用户接口503。移动终端500中的各个组件通过总线***505耦合在一起。可理解,总线***505用于实现这些组件之间的连接通信。总线***505除包括数据总线之外,还包括电源总线、控制总线和状态信号总线。但是为了清楚说明起见,在图5中将各种总线都标为总线***505。
其中,用户接口503可以包括显示器、键盘或者点击设备(例如,鼠标,轨迹球(trackball)、触感板或者触摸屏等。
可以理解,本发明实施例中的存储器502可以是易失性存储器或非易失性存储器,或可包括易失性和非易失性存储器两者。其中,非易失性存储器可以是只读存储器(Read-Only Memory,ROM)、可编程只读存储器(Programmable ROM,PROM)、可擦除可编程只读存储器(Erasable PROM,EPROM)、电可擦除可编程只读存储器(Electrically EPROM,EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory,RAM),其用作外部高速缓存。通过示例性但不是限制性说明,许多形式的RAM可用,例如静态随机存取存储器(Static RAM,SRAM)、动态随机存取存储器(Dynamic RAM,DRAM)、同步动态随机存取存储器(Synchronous DRAM,SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM,DDRSDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM,ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM,SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM,DRRAM)。本文描述的***和方法的存储器502旨在包括但不限于这些和任意其它适合类型的存储器。
在一些实施方式中,存储器502存储了如下的元素,可执行模块或者数据结构,或者他们的子集,或者他们的扩展集:操作***5021和应用程序5022。
其中,操作***5021,包含各种***程序,例如框架层、核心库层、驱动层等,用于实现各种基础业务以及处理基于硬件的任务。应用程序5022,包含各种应用程序,例如媒体播放器(Media Player)、浏览器(Browser)等,用于实现各种应用业务。实现本发明实施例方法的程序可以包含在应用程序5022中。
在本发明实施例中,通过调用存储器502存储的程序或指令,具体的,可以是应用程序5022中存储的程序或指令,处理器501用于获取组成视频的连续N帧图,像以及获取连续N帧图像中每一帧图像的目标对象,并根据每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段;在检测到对视频的播放控制指令时,根据播放控制指令,以视频段为单位,控制视频的播放进度在T个视频段中进行切换;其中,N为大于0的整数,T为大于0的整数。
上述本发明实施例揭示的方法可以应用于处理器501中,或者由处理器501实现。处理器501可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器501中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器501可以是通用处理器、数字信号处理器(Digital Signal Processor,DSP)、专用集成电路(Application Specific Integrated Circuit,ASIC)、现成可编程门阵列(FieldProgrammable Gate Array,FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本发明实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本发明实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器,闪存、只读存储器,可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器502,处理器501读取存储器502中的信息,结合其硬件完成上述方法的步骤。
可以理解的是,本文描述的这些实施例可以用硬件、软件、固件、中间件、微码或其组合来实现。对于硬件实现,处理单元可以实现在一个或多个专用集成电路(ApplicationSpecific Integrated Circuits,ASIC)、数字信号处理器(Digital Signal Processing,DSP)、数字信号处理设备(DSP Device,DSPD)、可编程逻辑设备(Programmable LogicDevice,PLD)、现场可编程门阵列(Field-Programmable Gate Array,FPGA)、通用处理器、控制器、微控制器、微处理器、用于执行本申请所述功能的其它电子单元或其组合中。
对于软件实现,可通过执行本文所述功能的模块(例如过程、函数等)来实现本文所述的技术。软件代码可存储在存储器中并通过处理器执行。存储器可以在处理器中或在处理器外部实现。
可选地,处理器501还用于:将连续N帧图像中包含目标对象的第一帧图像确定为第一个视频段的首帧图像;确定第一帧图像中包含的所有目标对象形成的第一集合;在第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第一集合之间的关系,将M帧图像与第一帧图像划分在第一个视频段中;按照第一个视频段的划分方式,将第一帧图像之后的第M+1帧图像至所述连续N帧图像中的第N帧图像依次划分为T-1个视频段;其中,M为大于0的整数,划分方式为:将存在预设集合关系的图像划分在同一个视频段中。
可选地,处理器501还用于:确定第M+1帧图像中包含的所有目标对象形成的第二集合;当第二集合与第一集合之间不存在预设集合关系时,将第M+1帧图像确定为第二个视频段的首帧图像;在第M+1帧图像之后的P帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第二集合之间的关系,将P帧图像与第M+1帧图像划分在第二个视频段中;其中,P为大于0的整数。
可选地,处理器501还用于:在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,则将M帧图像与第一帧图像划分在第一个视频段中。
可选地,处理器501还用于:在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,且M帧图像中每一帧图像对应的集合中元素的个数满足预设条件,则将M帧图像与第一帧图像划分在第一个视频段中。其中,预设条件包括:M帧图像中每一帧图像对应的集合的元素个数与第一集合的元素个数之间的差值均小于或等于预设阈值。
可选地,处理器501还用于:将连续N帧图像中不包含目标对象的连续S帧图像划分在同一个视频段中;在不包含目标对象的视频段中,将第一帧不包含目标对象的图像确定为视频段的首帧图像;其中,S为大于0的整数。
可选地,播放控制指令包括:快进操作指令和快退操作指令;处理器501还用于:在检测到快进操作指令时,控制视频的播放进度跳转至当前播放视频段的后一个视频段的首帧图像进行播放;在检测到快退操作指令时,控制视频的播放进度跳转至当前播放视频段的前一个视频段的首帧图像进行播放。
移动终端500能够实现前述实施例中移动终端实现的各个过程,为避免重复,这里不再赘述。
本发明实施例提供的移动终端500,以视频中的目标对象为依据,对视频进行划分,分割为多个视频段,每一视频段所播放的内容与该视频段包含的目标对象息息相关,这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行调整的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
依据本发明实施例的另一个方面,提供了一种移动终端600。
该移动终端600可以为手机、平板电脑、个人数字助理(Personal DigitalAssistant,PDA)或车载电脑等。
如图6所示,该移动终端600包括射频(Radio Frequency,RF)电路601、存储器602、输入单元603、显示单元604、处理器606、音频电路607、WiFi(Wireless Fidelity)模块608和电源609。
其中,输入单元603可用于接收用户输入的数字或字符信息,以及产生与移动终端600的用户设置以及功能控制有关的信号输入。具体地,本发明实施例中,该输入单元603可以包括触控面板6031。触控面板6031,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板6031上的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触控面板6031可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给该处理器606,并能接收处理器606发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板6031。除了触控面板6031,输入单元603还可以包括其他输入设备6032,其他输入设备6032可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
其中,显示单元604可用于显示由用户输入的信息或提供给用户的信息以及移动终端600的各种菜单界面。显示单元604可包括显示面板6041,可选的,可以采用LCD或有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板6041。
应注意,触控面板6031可以覆盖显示面板6041,形成触摸显示屏,当该触摸显示屏检测到在其上或附近的触摸操作后,传送给处理器606以确定触摸事件的类型,随后处理器606根据触摸事件的类型在触摸显示屏上提供相应的视觉输出。
触摸显示屏包括应用程序界面显示区及常用控件显示区。该应用程序界面显示区及该常用控件显示区的排列方式并不限定,可以为上下排列、左右排列等可以区分两个显示区的排列方式。该应用程序界面显示区可以用于显示应用程序的界面。每一个界面可以包含至少一个应用程序的图标和/或widget桌面控件等界面元素。该应用程序界面显示区也可以为不包含任何内容的空界面。该常用控件显示区用于显示使用率较高的控件,例如,设置按钮、界面编号、滚动条、电话本图标等应用程序图标等。
其中,处理器606是移动终端600的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在第一存储器6021内的软件程序和/或模块,以及调用存储在第二存储器6022内的数据,执行移动终端600的各种功能和处理数据,从而对移动终端600进行整体监控。可选的,处理器606可包括一个或多个处理单元。
在本发明实施例中,通过调用存储该第一存储器6021内的软件程序和/或模块和/或该第二存储器6022内的数据,处理器606用于获取组成视频的连续N帧图,像以及获取连续N帧图像中每一帧图像的目标对象,并根据每一帧图像中包含的目标对象,将连续N帧图像划分为T个视频段;在检测到对视频的播放控制指令时,根据播放控制指令,以视频段为单位,控制视频的播放进度在T个视频段中进行切换;其中,N为大于0的整数,T为大于0的整数。
可选地,处理器606还用于:将连续N帧图像中包含目标对象的第一帧图像确定为第一个视频段的首帧图像;确定第一帧图像中包含的所有目标对象形成的第一集合;在第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第一集合之间的关系,将M帧图像与第一帧图像划分在第一个视频段中;按照第一个视频段的划分方式,将第一帧图像之后的第M+1帧图像至所述连续N帧图像中的第N帧图像依次划分为T-1个视频段;其中,M为大于0的整数,划分方式为:将存在预设集合关系的图像划分在同一个视频段中。
可选地,处理器606还用于:确定第M+1帧图像中包含的所有目标对象形成的第二集合;当第二集合与第一集合之间不存在预设集合关系时,将第M+1帧图像确定为第二个视频段的首帧图像;在第M+1帧图像之后的P帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与第二集合之间的关系,将P帧图像与第M+1帧图像划分在第二个视频段中;其中,P为大于0的整数。
可选地,处理器606还用于:在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,则将M帧图像与第一帧图像划分在第一个视频段中。
可选地,处理器606还用于在第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与第一集合之间具有子集关系,且M帧图像中每一帧图像对应的集合中元素的个数满足预设条件,则将M帧图像与第一帧图像划分在第一个视频段中。其中,预设条件包括:M帧图像中每一帧图像对应的集合的元素个数与第一集合的元素个数之间的差值均小于或等于预设阈值。
可选地,处理器606还用于:将连续N帧图像中不包含目标对象的连续S帧图像划分在同一个视频段中;在不包含目标对象的视频段中,将第一帧不包含目标对象的图像确定为视频段的首帧图像;其中,S为大于0的整数。
可选地,播放控制指令包括:快进操作指令和快退操作指令;处理器606还用于:在检测到快进操作指令时,控制视频的播放进度跳转至当前播放视频段的后一个视频段的首帧图像进行播放;在检测到快退操作指令时,控制视频的播放进度跳转至当前播放视频段的前一个视频段的首帧图像进行播放。
可见,本发明实施例提供的移动终端600,以视频中的目标对象为依据,对视频进行划分,分割为多个视频段,每一视频段所播放的内容与该视频段包含的目标对象息息相关,这样,用户在进行视频进度调整时,能够避免错过与目标对象相关的情节,优化了视频的播放效果。此外,用户在进行视频进度调整时,是按照视频段进行调整的,不仅能够提高快进的准确性,还能够加快用户关注重要信息的速度,为用户提供了更好的使用体验。
本领域普通技术人员可以意识到,结合本发明实施例中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本发明的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的***、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的实施例中,应该理解到,所揭露的装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本发明各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。

Claims (12)

1.一种视频播放控制方法,其特征在于,包括:
获取组成视频的连续N帧图像;
获取所述连续N帧图像中每一帧图像的目标对象;
根据每一帧图像中包含的所述目标对象,将所述连续N帧图像划分为T个视频段;
在检测到对所述视频的播放控制指令时,根据所述播放控制指令,以视频段为单位,控制所述视频的播放进度在所述T个视频段中进行切换;
其中,N为大于0的整数,T为大于0的整数;
所述根据每一帧图像中包含的所述目标对象,将所述连续N帧图像划分为T个视频段的步骤,包括:
将所述连续N帧图像中包含目标对象的第一帧图像确定为第一个视频段的首帧图像;
确定所述第一帧图像中包含的所有目标对象形成的第一集合;
在所述第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与所述第一集合之间的关系,将所述M帧图像与所述第一帧图像划分在所述第一个视频段中;
按照所述第一个视频段的划分方式,将所述第一帧图像之后的第M+1帧图像至所述连续N帧图像中的第N帧图像依次划分为T-1个视频段;
其中,M为大于0的整数,所述划分方式为:将存在预设集合关系的图像划分在同一个视频段中;
所述在所述第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与所述第一集合之间的关系,将所述M帧图像与所述第一帧图像划分在所述第一个视频段中的步骤,包括:
在所述第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与所述第一集合之间具有子集关系,且所述M帧图像中每一帧图像对应的集合中元素的个数满足预设条件,则将所述M帧图像与所述第一帧图像划分在所述第一个视频段中;
其中,所述预设条件包括:所述M帧图像中每一帧图像对应的集合的元素个数与所述第一集合的元素个数之间的差值均小于或等于预设阈值;
其中,若一个视频段的图像帧数超过预设最大图像帧数,则将超过的帧图像划分在另一个视频段内。
2.根据权利要求1所述的视频播放控制方法,其特征在于,所述按照所述第一个视频段的划分方式,将所述第一帧图像之后的第M+1帧图像至所述连续N帧图像中的第N帧图像依次划分为T-1个视频段的步骤,包括:
确定所述第M+1帧图像中包含的所有目标对象形成的第二集合;
当所述第二集合与所述第一集合之间不存在所述预设集合关系时,将所述第M+1帧图像确定为第二个视频段的首帧图像;
在所述第M+1帧图像之后的P帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与所述第二集合之间的关系,将所述P帧图像与所述第M+1帧图像划分在所述第二个视频段中;
其中,P为大于0的整数。
3.根据权利要求1所述的视频播放控制方法,其特征在于,所述子集关系包括:在进行集合关系比较的两帧图像中,前一帧图像中所有目标对象形成的第三集合为后一帧图像中所有目标对象形成的第四集合的子集,或所述第四集合为所述第三集合的子集。
4.根据权利要求1所述的视频播放控制方法,其特征在于,所述根据每一帧图像中包含的所述目标对象,将所述连续N帧图像划分为T个视频段的步骤,包括:
将所述连续N帧图像中不包含目标对象的连续S帧图像划分在同一个视频段中;
在不包含目标对象的所述视频段中,将第一帧不包含目标对象的图像确定为所述视频段的首帧图像;
其中,S为大于0的整数。
5.根据权利要求1所述的视频播放控制方法,其特征在于,所述播放控制指令包括:快进操作指令和快退操作指令;
所述在检测到对所述视频的播放控制指令时,根据所述播放控制指令,以视频段为单位,控制所述视频的播放进度在所述T个视频段中进行切换的步骤,包括:
在检测到快进操作指令时,控制所述视频的播放进度跳转至当前播放视频段的后一个视频段的首帧图像进行播放;
在检测到快退操作指令时,控制所述视频的播放进度跳转至当前播放视频段的前一个视频段的首帧图像进行播放。
6.根据权利要求1所述的视频播放控制方法,其特征在于,所述目标对象为人脸图像、动物图像或者植物图像。
7.一种移动终端,其特征在于,包括:
第一获取模块,用于获取组成视频的连续N帧图像;
第二获取模块,用于获取所述第一获取模块获取的所述连续N帧图像中每一帧图像的目标对象;
划分模块,用于根据所述第二获取模块获取的每一帧图像中包含的所述目标对象,将所述连续N帧图像划分为T个视频段;
控制模块,用于在检测到对所述视频的播放控制指令时,根据所述播放控制指令,以视频段为单位,控制所述视频的播放进度在所述划分模块划分的T个视频段中进行切换;
其中,N为大于0的整数,T为大于0的整数;
所述划分模块包括:
第一确定单元,用于将所述连续N帧图像中包含目标对象的第一帧图像确定为第一个视频段的首帧图像;
第二确定单元,用于确定所述第一帧图像中包含的所有目标对象形成的第一集合;
第一划分单元,用于在所述第一帧图像之后的M帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与所述第一集合之间的关系,将所述M帧图像与所述第一帧图像划分在所述第一个视频段中;
第二划分单元,用于按照所述第一个视频段的划分方式,将所述第一帧图像之后的第M+1帧图像至所述连续N帧图像中的第N帧图像依次划分为T-1个视频段;
其中,M为大于0的整数,所述划分方式为:将存在预设集合关系的图像划分在同一个视频段中;
所述第一划分单元包括:
第三划分子单元,用于在所述第一帧图像之后的M帧图像中,若每一帧图像中包含的所有目标对象形成的集合与所述第一集合之间具有子集关系,且所述M帧图像中每一帧图像对应的集合中元素的个数满足预设条件,则将所述M帧图像与所述第一帧图像划分在所述第一个视频段中;
其中,所述预设条件包括:所述M帧图像中每一帧图像对应的集合的元素个数与所述第一集合的元素个数之间的差值均小于或等于预设阈值;
所述移动终端,还用于:
若一个视频段的图像帧数超过预设最大图像帧数,则将超过的帧图像划分在另一个视频段内。
8.根据权利要求7所述的移动终端,其特征在于,所述第二划分单元包括:
第一确定子单元,用于确定所述第M+1帧图像中包含的所有目标对象形成的第二集合;
第二确定子单元,用于当所述第二集合与所述第一集合之间不存在所述预设集合关系时,将所述第M+1帧图像确定为第二个视频段的首帧图像;
第一划分子单元,用于在所述第M+1帧图像之后的P帧图像中,根据每一帧图像中包含的所有目标对象形成的集合与所述第二集合之间的关系,将所述P帧图像与所述第M+1帧图像划分在所述第二个视频段中;
其中,P为大于0的整数。
9.根据权利要求7所述的移动终端,其特征在于,所述子集关系包括:在进行集合关系比较的两帧图像中,前一帧图像中所有目标对象形成的第三集合为后一帧图像中所有目标对象形成的第四集合的子集,或所述第四集合为所述第三集合的子集。
10.根据权利要求7所述的移动终端,其特征在于,所述划分模块包括:
第三划分单元,用于将所述连续N帧图像中不包含目标对象的连续S帧图像划分在同一个视频段中;
在不包含目标对象的所述视频段中,将第一帧不包含目标对象的图像确定为所述视频段的首帧图像;
其中,S为大于0的整数。
11.根据权利要求7所述的移动终端,其特征在于,所述播放控制指令包括:快进操作指令和快退操作指令;
所述控制模块包括:
第一控制单元,用于在检测到快进操作指令时,控制所述视频的播放进度跳转至当前播放视频段的后一个视频段的首帧图像进行播放;
第二控制单元,用于在检测到快退操作指令时,控制所述视频的播放进度跳转至当前播放视频段的前一个视频段的首帧图像进行播放。
12.根据权利要求7所述的移动终端,其特征在于,所述目标对象为人脸图像、动物图像或者植物图像。
CN201710286861.4A 2017-04-27 2017-04-27 一种视频播放控制方法及移动终端 Active CN107105342B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710286861.4A CN107105342B (zh) 2017-04-27 2017-04-27 一种视频播放控制方法及移动终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710286861.4A CN107105342B (zh) 2017-04-27 2017-04-27 一种视频播放控制方法及移动终端

Publications (2)

Publication Number Publication Date
CN107105342A CN107105342A (zh) 2017-08-29
CN107105342B true CN107105342B (zh) 2020-04-17

Family

ID=59657716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710286861.4A Active CN107105342B (zh) 2017-04-27 2017-04-27 一种视频播放控制方法及移动终端

Country Status (1)

Country Link
CN (1) CN107105342B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108012164B (zh) * 2017-12-05 2021-07-30 北京奇艺世纪科技有限公司 一种视频播放方法、装置及电子设备
CN110545480A (zh) * 2018-05-29 2019-12-06 北京字节跳动网络技术有限公司 一种媒体文件的预加载控制方法、装置及存储介质
CN110545470A (zh) * 2018-05-29 2019-12-06 北京字节跳动网络技术有限公司 一种媒体文件加载方法、装置及存储介质
CN108848332A (zh) * 2018-08-27 2018-11-20 深圳艺达文化传媒有限公司 推介视频的分段拍摄方法及相关产品
CN111277915B (zh) * 2018-12-05 2022-08-12 阿里巴巴集团控股有限公司 一种视频转换方法及装置
CN110166830A (zh) * 2019-05-27 2019-08-23 航美传媒集团有限公司 广告机电子屏幕的监控***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102163201A (zh) * 2010-02-24 2011-08-24 腾讯科技(深圳)有限公司 一种多媒体文件切割方法、装置及转码器
CN103347167A (zh) * 2013-06-20 2013-10-09 上海交通大学 一种基于分段的监控视频内容描述方法
CN104902312A (zh) * 2015-05-28 2015-09-09 成都市斯达鑫辉视讯科技有限公司 一种机顶盒遥控器控制快进的方法
CN105979267A (zh) * 2015-12-03 2016-09-28 乐视致新电子科技(天津)有限公司 一种视频压缩、播放方法以及装置

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5845801B2 (ja) * 2011-10-18 2016-01-20 ソニー株式会社 画像処理装置、画像処理方法、及び、プログラム
CN104780388B (zh) * 2015-03-31 2018-03-09 北京奇艺世纪科技有限公司 一种视频数据的切分方法和装置
CN106162223B (zh) * 2016-05-27 2020-06-05 北京奇虎科技有限公司 一种新闻视频切分方法和装置

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102163201A (zh) * 2010-02-24 2011-08-24 腾讯科技(深圳)有限公司 一种多媒体文件切割方法、装置及转码器
CN103347167A (zh) * 2013-06-20 2013-10-09 上海交通大学 一种基于分段的监控视频内容描述方法
CN104902312A (zh) * 2015-05-28 2015-09-09 成都市斯达鑫辉视讯科技有限公司 一种机顶盒遥控器控制快进的方法
CN105979267A (zh) * 2015-12-03 2016-09-28 乐视致新电子科技(天津)有限公司 一种视频压缩、播放方法以及装置

Also Published As

Publication number Publication date
CN107105342A (zh) 2017-08-29

Similar Documents

Publication Publication Date Title
CN107105342B (zh) 一种视频播放控制方法及移动终端
US11683565B2 (en) User interfaces for interacting with channels that provide content that plays in a media browsing application
US9652125B2 (en) Device, method, and graphical user interface for navigating media content
AU2015279949B2 (en) Input device and user interface interactions
CN106293410B (zh) 一种视频进度调节方法及移动终端
CN107438204B (zh) 一种媒体文件循环播放的方法及移动终端
JP6321301B2 (ja) ビデオ特効処理方法、装置、端末機器、プログラム、及び記録媒体
EP2670132B1 (en) Method and apparatus for playing video in portable terminal
US20150095845A1 (en) Electronic device and method for providing user interface in electronic device
CN106648382B (zh) 一种图片浏览方法和移动终端
CN107608601B (zh) 一种视频回放方法、移动终端及计算机可读存储介质
US20120242577A1 (en) Method for positioning a cursor on a screen
US9497434B2 (en) Method and apparatus for multi-playing videos
CN107643912B (zh) 一种信息分享方法及移动终端
US11435897B2 (en) Content scrubber bar with real-world time indications
CN107221347B (zh) 一种音频播放的方法及终端
US20130227480A1 (en) Apparatus and method for selecting object in electronic device having touchscreen
KR20140055486A (ko) 디스플레이 장치 및 이의 제어 방법
US20150363091A1 (en) Electronic device and method of controlling same
CN107103224B (zh) 一种解锁方法及移动终端
CN112887802A (zh) 视频访问方法及装置
CN106161776B (zh) 一种音量调节方法及移动终端
US20240184434A1 (en) Display method and apparatus
EP2779071A1 (en) Mobile display device with flip-screen functionality
CN107728898B (zh) 一种信息处理方法及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant