CN112040142A - 用于移动终端上的视频创作的方法 - Google Patents
用于移动终端上的视频创作的方法 Download PDFInfo
- Publication number
- CN112040142A CN112040142A CN202010650204.5A CN202010650204A CN112040142A CN 112040142 A CN112040142 A CN 112040142A CN 202010650204 A CN202010650204 A CN 202010650204A CN 112040142 A CN112040142 A CN 112040142A
- Authority
- CN
- China
- Prior art keywords
- text
- image
- video
- list
- icon
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 51
- 239000000463 material Substances 0.000 claims abstract description 152
- 238000003860 storage Methods 0.000 claims description 8
- 238000004590 computer program Methods 0.000 claims description 3
- 230000008569 process Effects 0.000 abstract description 8
- 238000010586 diagram Methods 0.000 description 22
- 230000006870 function Effects 0.000 description 20
- 238000012545 processing Methods 0.000 description 7
- 238000004891 communication Methods 0.000 description 5
- 230000008676 import Effects 0.000 description 4
- 238000007781 pre-processing Methods 0.000 description 4
- 238000006243 chemical reaction Methods 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000011218 segmentation Effects 0.000 description 3
- 230000015572 biosynthetic process Effects 0.000 description 2
- 238000011161 development Methods 0.000 description 2
- 230000018109 developmental process Effects 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 238000003786 synthesis reaction Methods 0.000 description 2
- 238000005520 cutting process Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000007726 management method Methods 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/10—Text processing
- G06F40/189—Automatic justification
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/30—Semantic analysis
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/278—Subtitling
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Theoretical Computer Science (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Artificial Intelligence (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本发明涉及一种用于移动终端上的视频创作的方法,包括:在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。根据本发明实施例,可以充分利用移动终端屏幕的显示空间,用户可以很方便地通篇浏览、编辑图像和文本素材,设置它们的对应关系,进行视频创作。
Description
技术领域
本发明涉及移动终端技术领域,具体涉及一种用于移动终端上的视频创作的方法、装置、电子设备和计算机可读存储介质。
背景技术
随着视频平台的快速发展,视频成为一种主流媒介形态。基于此,视频创作工具也成为各类自媒体创作者的一个重要生产工具。目前的视频创作工具,产品形态为横向排列信息,主要提供较为专业的图像素材编辑功能。
随着移动互联网和视频技术的迅速发展,更多的用户希望从移动终端便捷地创作视频内容。然而,他们使用现有的视频创作工具,学习成本较高。同时,目前新兴了一种解说类视频形式,不再以视频画面为主,而是以文字稿为主,再配以相应主题的文字图片或者动图,组成一个具有字幕的视频内容。这类内容的主体为文字,现有的视频创作工具无法提供较为便利的文字编辑功能和配图功能。
发明内容
有鉴于此,为了解决现有视频创作工具不适合移动环境,操作过程中效率低、易出错的问题,本发明提供了一种能够便捷地在移动终端上进行视频创造的工具。通过该工具,可以充分利用移动终端屏幕的显示空间,用户可以很方便地通篇浏览、编辑图像和文本素材,设置它们的对应关系,进行视频创作。例如,将图文知识类内容快速高效转化为高质量的视频。
根据本发明的第一方面,提供了一种用于移动终端上的视频创作的方法,包括:在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。
在一个可能的实施例中,所述第一区域和所述第二区域可以位于所述屏幕的左右两侧,所述图标列表中的图标和所述文本列表中的文本被显示为从上向下的布局。
在一个可能的实施例中,所述设置图像素材与文本的对应关系,可以包括:基于所述图像素材的图标与所述文本的水平位置关系,设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,所述图标可以具有用于调整大小的控件,所述方法还可以包括:通过所述控件调整所述图标的大小,设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,所述方法还可以包括:移动所述图标和/或所述文本的位置,以设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,所述方法还可以包括:选中所述图标和/或所述文本,并编辑相应的图像素材和文本。
在一个可能的实施例中,所述产生视频,具体可以包括:提供与所述文本相关的语音;基于所述语音的时间轴和所述图像素材的时间轴,以时长更长的内容为基准,校准时间轴和产生包括所述语音和图像素材的视频。
在一个可能的实施例中,所述图像素材可以是静态图片、动态图片和视频图像中的任一种。
在一个可能的实施例中,所述方法还可以包括:获取包括图像素材和文本内容的图文内容;将所述文本内容分段,并形成所述图像素材和文本内容的段落的初始对应关系;将所述文本内容的段落分句,形成所述文本列表;以及根据所述图像素材、所述文本列表和所述初始对应关系,在移动终端的屏幕的第一区域显示与所述图像素材相关的图标列表和在屏幕的第二区域显示所述文本列表。
在一个可能的实施例中,所述方法还可以包括:从素材库中选择和导入与所述文本列表中的文本对应的图像素材。
在一个可能的实施例中,所述方法还可以包括:选择所述文本列表中的文本,根据所述文本的语义计算出语义相关的图像素材,作为与所述文本对应的图像素材。
根据本发明的第二方面,提供了一种用于移动终端上的视频创作的装置,包括:显示单元,用于在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;调整单元,用于调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及视频产生单元,用于基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。
根据本公开的第三方面,提供一种电子设备,包括:存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如第一方面所述的方法。
根据本公开的第四方面,提供一种计算机可读存储介质,所述计算机可读存储介质上存储有可执行指令,该指令被处理器执行时使处理器执行如第一方面所述的方法。
本发明的其他特征和优点将在随后的说明书阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明实施例而了解。本发明的目的和其他优点可通过在所写的说明书以及附图中所特别指出的结构来实现和获得。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。通过附图所示,本申请的上述及其它目的、特征和优势将更加清晰。在全部附图中相同的附图标记指示相同的部分。并未刻意按实际尺寸等比例缩放绘制附图,重点在于示出本申请的主旨。
图1示出了根据本发明实施例的在移动终端创作视频的一种编辑模式的示意操作界面图。
图2示出了根据本发明实施例的在移动终端创作视频的另一种编辑模式的示意操作界面图。
图3示出了根据发明实施例的在移动终端调整图像素材与文本的对应关系的示意操作界面图。
图4示出了根据本发明实施例的在移动终端编辑文本的示意操作界面图。
图5示出了根据本发明实施例的将用于产生视频的图文内容和导入图像素材的示意操作界面图。
图6A-6C示出了根据本发明实施例的从图文内容产生图像素材、文本及其对应关系的示意图。
图7示出了根据本发明实施例的用于移动终端上的视频创作的方法的示意流程图。
图8示出了根据本发明实施例的用于移动终端上的视频创作的装置的示意框图。
图9示出了根据本发明实施例的一种电子设备的结构示意图。
具体实施方式
以下,将参照附图来描述本发明的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本发明的范围。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本发明的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本发明。这里使用的词语“一”、“一个(种)”和“该”等也应包括“多个”、“多种”的意思,除非上下文另外明确指出。此外,在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
图1示出了根据本发明实施例的在移动终端创作视频的一种编辑模式的示意操作界面图。图1示出的编辑模式也可以被称为时间轴模式;传统的视频创作工具通常使用这种视图模式。
如图所示,在移动终端屏幕下部示出了用于视频创作的一系列素材,包括图像素材110、字幕文本120、音乐素材130。图像素材110可以是静态图片、动态图片或视频图像之一。字幕文本120可以任何类型的文本数据,其分为多个语句或段落,便于在视频图像中随视频播放而显示。音乐素材可以是任何自定义的音频,例如,可以是与字幕文本120对应的解说音频,解说音频可以是基于任何智能算法产生的人类语音。
在时间轴模式的编辑界面中,在移动终端的上部显示预览的视频窗口140。同时,用户可以利用当前时间线150来对齐图像素材110、字幕文本120、音乐素材130。在一个实施例中,用户可以左右拖动图像素材110、字幕文本120、音乐素材130中任意一个或多个来对齐这些素材,即,实现图像、文本、声音的同步。此外,用户还可以触摸图像素材110、字幕文本120、音乐素材130来实现对触摸位置处的素材的编辑,例如,对视频素材进行美化,修改字幕文本内容,以及调整对应的音频。
可以看出,在图1所示的编辑模式下,图像素材110、字幕文本120、音频素材等素材信息是横向排列的,屏幕上部的较大空间用于展示视频素材,缩略方式显示文字内容。这种横向排列信息的不足之处在于:
一、视频会占据较大显示空间,会导致文字内容缩略展示,创作者无法通篇浏览文字内容;这时,用户需要不断进行右滑屏幕操作,才能浏览完整的文字内容,不符合人的文字阅读习惯;
二、需要***新的文字时,必须依附于一个图像素材,即先有图像视频后有文字,而解说类视频通常是先有文字稿后进行配图。这种创作流程与之相反,无法提供较为流畅的创作体验;
三、文字作为一个附属内容,没有较为便捷的编辑方式,仅支持对单句文字进行操作,不支持批量编辑文字内容、批量改变文字位置、批量合成配音等功能。
四、视频编辑功能也更注重对单个视频的剪辑功能,没有提供便捷地调整素材与文字对应关系的功能。
五、不支持自动将图文内容转化为视频草稿。
鉴于以上,在传统视频创作工具的基础上,本发明提供了「大纲编辑」的模式。例如,可以通过图1所示的界面上的大纲编辑160控件切换到大纲模式。在大纲模式下,图像视频素材和文字纵向排列,视频缩小展示,用更多地空间展示文字,使得用户能够很方便地进行通篇浏览,同时文字的展示形态更加符合传统阅读习惯。
图2示出了根据本发明实施例的在移动终端创作视频的另一种编辑模式(也称为大纲模式)的示意操作界面图。需要注意的是,在素材的编辑上,单个素材的编辑功能仍可在传统时间轴模式下完成,大纲模式则更注重调整素材与文字的对应关系。
如图2所示,在移动终端的屏幕的左侧区域示出了多个与图像视频素材相关的图标210;在屏幕的右侧区域示出了多个分割为句子形式的多个文本220,句子形式的文本之间具有分隔线。在左侧区域,图像素材相关的图标210形成为图标列表;在右侧区域文本220形成为文本列表。图2中还示出了与图1的时间线150类似的当前时间线250。可以根据当前时间线250的位置,在屏幕上部显示当前的视频预览240。
根据本发明的实施例,可以根据图标210和文本220在屏幕上的位置关系来设置图像视频素材与文本的对应关系。具体地,根据图标210的大小或高度,例如图标210的上端位置、下端位置与右侧区域的文本的水平位置关系,由此来设置图像视频素材与文本的对应关系。例如,用户在选中素材210后,素材210上会显示两个控件,比如把手211和212,可通过拖动把手211和212,调整图标210的大小或高度,从而快速调整图像视频素材与文字间的对应关系。可以理解,调整图标210变大,可以使得该图像视频素材对应于更多的文本内容,调整图标210变小,与该素材对应的文本内容也变少。
需要注意的是,图1的时间轴模式和图2的大纲模式下,均可以利用时间线快速预览视频整体效果。尤其是,大纲模式能够显著提高对应关系的预览效率与操作效率,让用户操作更加专注与高效。
图3示出了根据发明实施例的在移动终端调整图像素材与文本的对应关系的示意操作界面图。除了通过调整图标210大小或高度来调整图像素材与文本的对应关系,还可以通过长按素材可以快速调整素材与素材的对应关系,以及素材的前后顺序。
图3的左侧视图示出了长按和拖动图标310以便将相应的视频素材移动,从而调整图像视频素材与文本的对应关系的示意图。用户长按图标310,这时,在屏幕上显示图标310浮起的效果,用户可以拖动图标310将其***到想要的位置处。例如,可以将图标310向上拖动,***到前方位置,以便将该视频素材更早播放;或者相反,可以将图标310向下拖动,***到后方位置,以便将该视频素材更晚播放。
在一个实施例中,图标310被拖动离开原来位置后,原来位置处可以显示为黑色或任何其他颜色,提示这里没有与文本对应的图像视频素材。本领域技术人员可以理解,被拖动后的图标还可以进一步被调整大小,以增加或减少其对应的文本。
图3的右侧视图示出了长按和拖动文本320“我从十二岁起”这段语句(例如,用户按住文本右侧的菜单项),从而调整图像视频素材与文本的对应关系的示意图。类似地,在屏幕上显示文本320浮起的效果,用户可以拖动文本310将其***到想要的位置处。例如,可以将文本320向上拖动,***到前方位置,以便播放视频时将该文本更早显示;或者相反,可以将文本320向下拖动,***到后方位置,以便将该文本更晚显示。
在一个实施例中,文本320被拖动离开原来位置后,原来位置处可以实现为空白或任何其他颜色,提示这里没有与图像视频素材对应的文本。
可以看出,在大纲模式下,已添加字幕文字与图像视频素材的对应关系得到明确预览,减少了因为剪辑视频素材而造成的出错与效率低下的问题。
图4示出了根据本发明实施例的在移动终端编辑文本的示意操作界面图。图4从左到右依次示出了文本编辑、更多操作、多选文本操作的界面图。
在图2所示的大纲模式下,点击任一文本220就可以进行编辑。如图4的左侧图所示,相比于图1的横向信息显示方式,本发明的文本编辑视图可以展示更多的文字内容,包括被编辑的文本自身以及该文本的上下文都能够被看到,非常方便,且更符合用户阅读习惯。
如图4的中间图所示,用户可以选中一段文本语句,从而在屏幕上呈现菜单项,包括“多选”、“复制”、“粘贴”等,快速对文本进行编辑。如选择“多选”,屏幕上呈现如图4右侧图所示的界面,用户可以勾选多个文本,一起进行编辑,如复制文本、剪切文本、删除文本。
图5示出了根据本发明实施例的将用于产生视频的图文内容和导入图像素材的示意操作界面图。
在“知乎”应用下,用户常常需要从包括图片(包括静态图片、动态图片或视频图像)和文本的混合型图文内容产生解说类的视频。如图5左侧所示,用户回答内容包括数段文本和图片。如图5右侧所示,用户还可以从素材库中选择若干个图像素材,用于产生解说类的视频。下方操作栏可针对当前选中的素材进行素材的快速管理操作,例如,编辑素材、替换素材、删除素材、批量导入素材。在一个实施例中,可批量导入素材,在编辑完文字稿后,快速从底部素材栏中为文字稿选择配图。也就是说,用户可以自由添加和删除图像素材,而不限于原始的混合型图文内容之内的素材。
可以看出,这提高了用户对图像视频素材与文本的管理与编辑效率,快速添加内容与文本,且对字幕文本的修改调整快捷方便。
以下结合图6A-6C说明产生参考图1至4描述的图像视频素材和字幕文本的初始对应关系的典型示例。
图6A-6C示出了根据本发明实施例的从图文内容产生图像素材、文本及其对应关系的示意图。本发明基于“素材预处理”、“智能分段”和“智能分句”三个阶段实现图像素材、文本及其对应关系的初始化。
第一步,素材预处理。
●图片素材的预处理逻辑:可以只导入静态图和GIF,导入失败时需用黑场视频占位显示。不导入视频,未导入的素材不占位显示。
●文字素材的预处理逻辑:丢弃的文字包括代码块、注释、链接(当文字和地址不同时,保留文字)、公式、本自然段中或本列表项中仅有空格。保留的文字包括标题、引用块、有序列表后的文字(保留序号数字,每句末尾如果没分隔符/逗号则加句号)、无序列表后的文字(去掉序号标志,每句末尾如果没分隔符/逗号则加句号)。所有文字转化时都清除格式。
第二步,智能分段处理。
●先进行文字分段:以自然段作为分段依据,每个自然段为一「段」。若有连续2个及以上的自然段,字数<=5,则将这些自然段合并为一个「段」。
●再将图片与文字段落进行一一对应:单独一张图片,对应文字是图片上方最近的自然段(合并处理后的);连续多张图片,图片和文字都按照倒序相对应(即最后一张图对应最后一段,倒数第二张图对应倒数第二段,以此类推……);无图片对应的文字,则对应默认黑场视频,如图6A中的第一段、第二段、第三段等。若可对应的文字区间内,出现图片比自然段多的情况,则后边多出来的图片对应空白字幕,如图6B中的“图3”:。若两个图片之间,若只有空格,或只有换行符,则视为连续;若两个图片之间,若文字全部被丢弃,或有分割线,视为不连续,如图6C中“图2”不对应于任何字幕文字。
第三部、智能分句处理。
●将每段文字切割为更短的句子,每个句子对应一行字幕。
●首先以分割符划分句子:分割符包括「。」「;」「;」「:」「:」「?」「?」「!」「!」「…」「——」「换行符」,两个及以上「.」「·」「–」。一个分割符+引号=分割符;如果分割后某一句末尾是「左引号」,则把「左引号」挪到下一句句首,若没有下一句则删掉。一个分割符+括号=分割符;如果分割后某一句末尾是「左括号」,则把「左括号」挪到下一句句首,若没有下一句则删掉。多个分割符连续出现,视为一个分割符;两个分割符之间,若文字全部被丢弃或只有空格,则视为连续。若分割符前后都是数字,则不处理该分割符(例如,两队比分是1:1)(例如,全年总产量194,211,400个)。其他标点符号不处理,正常展示在字幕中
●对超长句子再次进行划分:若划分后的句子,超出26个汉字(英文、标点、数字算半个汉字),从26字以内的最后一个「,」「,」处切割句子,直到所有句子都<=26个汉字。若有多个「,」「,」连续,合并为一个「,」。若没有逗号,即使该句>26个汉字,也不再切割。
●标点处理:视频中的每行字幕,句尾显示的「,」「,」「。」「:」「:」隐藏处理。
由上就产生了图像视频素材、文本及其对应关系。本领域技术人员应理解,用户还可以进一步如上述参考图1至5所述那样调整、编辑、导入图像视频素材、文本及其对应关系。例如,针对缺少对应的图像视频素材的字幕文本,本发明还提供了自动配图功能,根据文字的语义,自动计算匹配相关图片进行配图,简化了用户搜索素材进行配图的步骤。
接下来,基于所设置的图像素材与文本的对应关系,产生包括文本作为字幕信息的视频。在一个实施例中,还提供了一键配音的功能,用户可以从文本产生相应的解说音频。例如,根据用户偏好,选择男声、女生或童声,并配置音量大小产生解说音频。解释音频可以与图像视频素材、文本一起组合形成解说类视频。根据本发明实施例,在产生视频时,还提供了自动校准功能,当视频和文字时长(例如,文字对应的解说音频的播放时长)不一致时,以时长较长的内容为基准,自动校准时间轴,简化了用户操作步骤。
图7示出了根据本发明实施例的用于移动终端上的视频创作的方法700的示意流程图。
方法700包括:在步骤710,在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;
在步骤720,调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及
在步骤730,基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。
在一个可能的实施例中,所述第一区域和所述第二区域可以位于所述屏幕的左右两侧,所述图标列表中的图标和所述文本列表中的文本被显示为从上向下的布局。
在一个可能的实施例中,所述设置图像素材与文本的对应关系,可以包括:基于所述图像素材的图标与所述文本的水平位置关系,设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,所述图标可以具有用于调整大小的控件,所述方法还可以包括:通过所述控件调整所述图标的大小,设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,所述方法还可以包括:移动所述图标和/或所述文本的位置,以设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,所述方法还可以包括:选中所述图标和/或所述文本,并编辑相应的图像素材和文本。
在一个可能的实施例中,所述产生视频,具体可以包括:提供与所述文本相关的语音;基于所述语音的时间轴和所述图像素材的时间轴,以时长更长的内容为基准,校准时间轴和产生包括所述语音和图像素材的视频。
在一个可能的实施例中,所述图像素材可以是静态图片、动态图片和视频图像中的任一种。
在一个可能的实施例中,所述方法还可以包括:获取包括图像素材和文本内容的图文内容;将所述文本内容分段,并形成所述图像素材和文本内容的段落的初始对应关系;将所述文本内容的段落分句,形成所述文本列表;以及根据所述图像素材、所述文本列表和所述初始对应关系,在移动终端的屏幕的第一区域显示与所述图像素材相关的图标列表和在屏幕的第二区域显示所述文本列表。
在一个可能的实施例中,所述方法还可以包括:从素材库中选择和导入与所述文本列表中的文本对应的图像素材。
在一个可能的实施例中,所述方法还可以包括:选择所述文本列表中的文本,根据所述文本的语义计算出语义相关的图像素材,作为与所述文本对应的图像素材。
图8示出了根据本发明实施例的用于移动终端上的视频创作的装置800的示意框图。
用于移动终端上的视频创作的装置800,包括:显示单元810,用于在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;
调整单元820,用于调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及
视频产生单元830,用于基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。
在一个可能的实施例中,调整单元820还可以用于:移动所述图标和/或所述文本的位置,以设置所述图像素材与所述文本的对应关系。
在一个可能的实施例中,调整单元820还可以用于:选中所述图标和/或所述文本,并编辑相应的图像素材和文本。
在一个可能的实施例中,视频产生单元830可以用于:提供与所述文本相关的语音;基于所述语音的时间轴和所述图像素材的时间轴,以时长更长的内容为基准,校准时间轴和产生包括所述语音和图像素材的视频。
在一个可能的实施例中,所述图像素材可以是静态图片、动态图片和视频图像中的任一种。
在一个可能的实施例中,装置800可以包括初始化单元(图中未示出)。初始化单元用于:获取包括图像素材和文本内容的图文内容;将所述文本内容分段,并形成所述图像素材和文本内容的段落的初始对应关系;将所述文本内容的段落分句,形成所述文本列表。由此,显示单元810可以用于根据所述图像素材、所述文本列表和所述初始对应关系,在移动终端的屏幕的第一区域显示与所述图像素材相关的图标列表和在屏幕的第二区域显示所述文本列表。初始化单元820还可以用于从素材库中选择和导入与所述文本列表中的文本对应的图像素材;以及,选择所述文本列表中的文本,根据所述文本的语义计算出语义相关的图像素材,作为与所述文本对应的图像素材。
基于上述对本发明的详细阐述,可以看出,本发明打破了传统视频创作工具的信息组织形态,以文字为核心纵向排列信息,用更多地空间展示文字,使得用户能够很方便地进行通篇浏览,同时浏览方式更加符合传统阅读习惯。
提供了更加便捷的文字编辑功能,单句文字的输入更加原生化,与传统的文字输入方式保持一致,降低了学习成本;在此之上还提供了批量编辑文字的功能,满足更加复杂的文字编辑需求;同时提供了一键配音的功能,提供语音合成生成配音,节省了用户配音的时间。
在传统视频剪辑功能的基础上,提供了更加宏观的素材编辑功能,侧重于调整素材与文字间的对应关系,支持批量为文字配图,更加符合图文作者创作视频的使用习惯。提供了自动校准功能,当视频和文字时长不一致时,以时长较长的内容为基准,自动校准时间轴,简化了用户操作步骤。提供了自动配图功能,根据文字的语义,自动计算匹配相关图片进行配图,简化了用户搜索素材进行配图的步骤。
支持将已有的图文内容一键转化为视频草稿,并进行智能分段、分句;同时亦批量导入素材生成视频草稿,节省了素材导入的时间。
图9示出了根据本发明实施例的一种电子设备的结构示意图。该电子设备900包括中央处理单元(CPU)901,其可以根据存储在只读存储器(ROM)902中的程序或者从存储部分908加载到随机访问存储器(RAM)903中的程序而执行如图7所示的各种适当的动作和处理。在RAM 903中,还存储有电子设备900操作所需的各种程序和数据。CPU 901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
以下部件连接至I/O接口905:包括键盘、鼠标等的输入部分906;包括诸如阴极射线管(CRT)、液晶显示器(LCD)等以及扬声器等的输出部分907;包括硬盘等的存储部分908;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分909。通信部分909经由诸如因特网的网络执行通信处理。驱动器910也根据需要连接至I/O接口905。可拆卸介质911,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器910上,以便于从其上读出的计算机程序根据需要被安装入存储部分908。
本发明实施例提供一种计算机可读存储介质,所述计算机可读存储介质上存储有可执行指令,该指令被处理器执行时使处理器执行如图7所示的任意一种方法。示例性的,计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。该可用介质可以是磁性介质,(例如,软盘,硬盘、磁带)、光介质(例如,DVD)或者半导体介质(例如固态硬盘Solid State Disk(SSD))等。
通过以上的实施方式的描述,所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,仅以上述各功能模块的划分举例说明,实际应用中,可以根据需要而将上述功能分配由不同的功能模块完成,即将装置的内部结构划分成不同的功能模块,以完成以上描述的全部或者部分功能。上述描述的***,装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的***和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述模块或单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个***,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现,也可以采用软件功能单元的形式实现。
以上,仅为本发明的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应以权利要求的保护范围为准。
Claims (14)
1.一种用于移动终端上的视频创作的方法,包括:
在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;
调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及
基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。
2.如权利要求1所述的方法,其中,所述第一区域和所述第二区域位于所述屏幕的左右两侧,所述图标列表中的图标和所述文本列表中的文本被显示为从上向下的布局。
3.如权利要求2所述的方法,其中,所述设置图像素材与文本的对应关系,包括:基于所述图像素材的图标与所述文本的水平位置关系,设置所述图像素材与所述文本的对应关系。
4.如权利要求1-3中任一项所述的方法,其中,所述图标具有用于调整大小的控件,所述方法还包括:通过所述控件调整所述图标的大小,以设置所述图像素材与所述文本的对应关系。
5.如权利要求1-3中任一项所述的方法,所述方法还包括:移动所述图标和/或所述文本的位置,以设置所述图像素材与所述文本的对应关系。
6.如权利要求1-3中任一项所述的方法,所述方法还包括:选中所述图标和/或所述文本,并编辑相应的图像素材和文本。
7.如权利要求1所述的方法,其中,所述产生视频,具体包括:提供与所述文本相关的语音;基于所述语音的时间轴和所述图像素材的时间轴,以时长更长的内容为基准,校准时间轴和产生包括所述语音和图像素材的视频。
8.如权利要求1所述的方法,其中,所述图像素材是静态图片、动态图片和视频图像中的任一种。
9.如权利要求1所述的方法,所述方法还包括:
获取包括图像素材和文本内容的图文内容;
将所述文本内容分段,并形成所述图像素材和文本内容的段落的初始对应关系;
将所述文本内容的段落分句,形成所述文本列表;以及
根据所述图像素材、所述文本列表和所述初始对应关系,在移动终端的屏幕的第一区域显示与所述图像素材相关的图标列表和在屏幕的第二区域显示所述文本列表。
10.如权利要求1所述的方法,所述方法还包括:从素材库中选择和导入与所述文本列表中的文本对应的图像素材。
11.如权利要求1所述的方法,所述方法还包括:选择所述文本列表中的文本,根据所述文本的语义计算出语义相关的图像素材,作为与所述文本对应的图像素材。
12.一种用于移动终端上的视频创作的装置,包括:
显示单元,用于在移动终端的屏幕的第一区域显示与图像素材相关的图标列表和在屏幕的第二区域显示文本列表;
调整单元,用于调整所述图标列表中的图标和所述文本列表中的文本中的至少一个,以设置图像素材与文本的对应关系;以及
视频产生单元,用于基于所设置的图像素材与文本的对应关系,产生包括所述文本作为字幕信息的视频。
13.一种电子设备,包括:存储器、处理器以及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如权利要求1-11中任一项所述的方法。
14.一种计算机可读存储介质,所述计算机可读存储介质上存储有可执行指令,该指令被处理器执行时使处理器执行如权利要求1-11中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010650204.5A CN112040142B (zh) | 2020-07-08 | 2020-07-08 | 用于移动终端上的视频创作的方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010650204.5A CN112040142B (zh) | 2020-07-08 | 2020-07-08 | 用于移动终端上的视频创作的方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112040142A true CN112040142A (zh) | 2020-12-04 |
CN112040142B CN112040142B (zh) | 2023-05-02 |
Family
ID=73578953
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010650204.5A Active CN112040142B (zh) | 2020-07-08 | 2020-07-08 | 用于移动终端上的视频创作的方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112040142B (zh) |
Cited By (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113473204A (zh) * | 2021-05-31 | 2021-10-01 | 北京达佳互联信息技术有限公司 | 一种信息展示方法、装置、电子设备及存储介质 |
CN114125553A (zh) * | 2021-12-31 | 2022-03-01 | 深圳市爱剪辑科技有限公司 | 基于移动端的视频剪辑***及其应用方法 |
WO2023040743A1 (zh) * | 2021-09-15 | 2023-03-23 | 北京字跳网络技术有限公司 | 一种视频处理方法、装置、设备及存储介质 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004199696A (ja) * | 2002-12-17 | 2004-07-15 | Ricoh Co Ltd | 複数のマルチメディア文書に格納された情報の表示法 |
JP2009094586A (ja) * | 2007-10-03 | 2009-04-30 | Sony Corp | 映像再生装置、映像再生方法、および、プログラム |
CN101751215A (zh) * | 2008-11-27 | 2010-06-23 | 索尼株式会社 | 信息处理装置、显示控制方法以及程序 |
US20110107217A1 (en) * | 2009-10-29 | 2011-05-05 | Margery Kravitz Schwarz | Interactive Storybook System and Method |
CN102592298A (zh) * | 2010-12-02 | 2012-07-18 | 索尼公司 | 内容整合框架中的用户界面的视觉处理 |
US20130024807A1 (en) * | 2011-01-26 | 2013-01-24 | Hiroki Kobayashi | Mobile electronic device |
CN104885036A (zh) * | 2013-07-11 | 2015-09-02 | 三星电子株式会社 | 用于显示应用的用户终端设备及其方法 |
US20160371312A1 (en) * | 2012-02-20 | 2016-12-22 | Wix.Com Ltd. | System and method for the creation and use of visually-diverse high-quality dynamic visual data structures |
US20170083172A1 (en) * | 2015-09-23 | 2017-03-23 | Microsoft Technology Licensing, Llc | Controlling a Device |
US20170164021A1 (en) * | 2012-05-23 | 2017-06-08 | Yahoo! Inc. | Systems and Methods Involving Creation of Information Modules, Including Server, Media Searching, User Interface and/or Other Features |
CN108965737A (zh) * | 2017-05-22 | 2018-12-07 | 腾讯科技(深圳)有限公司 | 媒体数据处理方法、装置及存储介质 |
-
2020
- 2020-07-08 CN CN202010650204.5A patent/CN112040142B/zh active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2004199696A (ja) * | 2002-12-17 | 2004-07-15 | Ricoh Co Ltd | 複数のマルチメディア文書に格納された情報の表示法 |
JP2009094586A (ja) * | 2007-10-03 | 2009-04-30 | Sony Corp | 映像再生装置、映像再生方法、および、プログラム |
CN101751215A (zh) * | 2008-11-27 | 2010-06-23 | 索尼株式会社 | 信息处理装置、显示控制方法以及程序 |
US20110107217A1 (en) * | 2009-10-29 | 2011-05-05 | Margery Kravitz Schwarz | Interactive Storybook System and Method |
CN102592298A (zh) * | 2010-12-02 | 2012-07-18 | 索尼公司 | 内容整合框架中的用户界面的视觉处理 |
US20130024807A1 (en) * | 2011-01-26 | 2013-01-24 | Hiroki Kobayashi | Mobile electronic device |
US20160371312A1 (en) * | 2012-02-20 | 2016-12-22 | Wix.Com Ltd. | System and method for the creation and use of visually-diverse high-quality dynamic visual data structures |
US20170164021A1 (en) * | 2012-05-23 | 2017-06-08 | Yahoo! Inc. | Systems and Methods Involving Creation of Information Modules, Including Server, Media Searching, User Interface and/or Other Features |
CN104885036A (zh) * | 2013-07-11 | 2015-09-02 | 三星电子株式会社 | 用于显示应用的用户终端设备及其方法 |
US20170083172A1 (en) * | 2015-09-23 | 2017-03-23 | Microsoft Technology Licensing, Llc | Controlling a Device |
CN108965737A (zh) * | 2017-05-22 | 2018-12-07 | 腾讯科技(深圳)有限公司 | 媒体数据处理方法、装置及存储介质 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113473204A (zh) * | 2021-05-31 | 2021-10-01 | 北京达佳互联信息技术有限公司 | 一种信息展示方法、装置、电子设备及存储介质 |
CN113473204B (zh) * | 2021-05-31 | 2023-10-13 | 北京达佳互联信息技术有限公司 | 一种信息展示方法、装置、电子设备及存储介质 |
WO2023040743A1 (zh) * | 2021-09-15 | 2023-03-23 | 北京字跳网络技术有限公司 | 一种视频处理方法、装置、设备及存储介质 |
CN114125553A (zh) * | 2021-12-31 | 2022-03-01 | 深圳市爱剪辑科技有限公司 | 基于移动端的视频剪辑***及其应用方法 |
Also Published As
Publication number | Publication date |
---|---|
CN112040142B (zh) | 2023-05-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10380228B2 (en) | Output generation based on semantic expressions | |
US8078963B1 (en) | Efficient creation of documents | |
CN112040142B (zh) | 用于移动终端上的视频创作的方法 | |
US7415475B2 (en) | Authoring tools, including content-driven treetables, for fluid text | |
US7454698B2 (en) | Digital document browsing system and method thereof | |
JP4857122B2 (ja) | プレゼンテーションアプリケーションにおける文脈位置を明らかにするインテリジェントアジェンダオブジェクト | |
US8555186B2 (en) | Interactive thumbnails for transferring content among electronic documents | |
US11334519B2 (en) | Content file suggestions | |
US20050229118A1 (en) | Systems and methods for browsing multimedia content on small mobile devices | |
US20130321460A1 (en) | System and method for editing image data for media repurposing | |
CN103197850A (zh) | 信息处理设备、信息处理方法和计算机可读介质 | |
CN100485679C (zh) | 用于浏览多媒体文档的方法和***以及计算机产品 | |
US11922975B2 (en) | Method, apparatus, device and medium for generating video in text mode | |
JP2003091344A (ja) | 情報処理装置および情報処理方法、記録媒体、データ構造、並びにプログラム | |
JPH10240915A (ja) | コンピュ−タを用いた漫画の製作方法及びその方法で作られたモニタ画面で見る漫画 | |
CN113901776A (zh) | 音频交互方法、介质、装置和计算设备 | |
WO2007132984A1 (en) | Document editing program of tree-structure and method thereof | |
JP2003099424A (ja) | 文書のデータ構造、記憶媒体及び情報処理装置 | |
WO2024093572A1 (zh) | 用于呈现文档的方法、装置、设备和存储介质 | |
US20240127512A1 (en) | Adaptive editing experience for mixed media content | |
TWI828490B (zh) | 翻頁式漫畫線上文字翻譯系統 | |
CN117911582A (zh) | 混合媒体内容的自适应编辑体验 | |
CN118211571A (zh) | 文件编辑方法以及装置、电子设备及存储介质 | |
JP2024033437A (ja) | 情報処理装置、方法、プログラム、およびシステム | |
Finkelstein | 44 tips and tricks to help turbocharge your PowerPoint presentations |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |