CN111491211B - 视频处理方法、视频处理装置及电子设备 - Google Patents
视频处理方法、视频处理装置及电子设备 Download PDFInfo
- Publication number
- CN111491211B CN111491211B CN202010305884.7A CN202010305884A CN111491211B CN 111491211 B CN111491211 B CN 111491211B CN 202010305884 A CN202010305884 A CN 202010305884A CN 111491211 B CN111491211 B CN 111491211B
- Authority
- CN
- China
- Prior art keywords
- music
- target
- video
- piece
- input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000012545 processing Methods 0.000 title claims abstract description 21
- 238000003672 processing method Methods 0.000 title claims abstract description 15
- 238000000034 method Methods 0.000 claims abstract description 51
- 230000004044 response Effects 0.000 claims abstract description 25
- 238000004590 computer program Methods 0.000 claims description 11
- 238000004519 manufacturing process Methods 0.000 abstract description 12
- 230000008569 process Effects 0.000 description 20
- 230000006870 function Effects 0.000 description 11
- 238000003860 storage Methods 0.000 description 11
- 230000000694 effects Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 5
- 230000005236 sound signal Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 3
- 238000001514 detection method Methods 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 238000007667 floating Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8106—Monomedia components thereof involving special audio data, e.g. different tracks for different languages
- H04N21/8113—Monomedia components thereof involving special audio data, e.g. different tracks for different languages comprising music, e.g. song in MP3 format
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明提供一种视频处理方法、视频处理装置及电子设备,该方法包括:显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为所述电子设备的麦克风采集的音频;接收用户对所述音乐标识的第一输入;响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。这样可以简化视频制作过程中,背景音乐的获取添加操作。
Description
技术领域
本发明涉及通信技术领域,尤其涉及一种视频处理方法、视频处理装置及电子设备。
背景技术
目前,在制作视频、策划方案等多媒体内容的过程中,通常会添加背景音乐,以提升多媒体内容的播放效果。然而,在添加背景音乐的过程中,通常需要用户先查找本地数据库中是否有感兴趣的背景音乐;如果没有,则需要从网络数据卡中下载感兴趣的背景音乐,最后再将感兴趣的背景音乐添加到多媒体内容中。可见,现有视频制作过程中,背景音乐的添加存在操作繁琐的问题。
发明内容
本发明实施例提供一种视频处理方法、视频处理装置及电子设备,能够解决现有视频制作过程中,背景音乐的添加存在操作繁琐的问题。
为解决上述技术问题,本发明是这样实现的:
第一方面,本发明实施例提供了一种视频处理方法,应用于电子设备,包括:
显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为所述电子设备的麦克风采集的音频;
接收用户对所述音乐标识的第一输入;
响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
第二方面,本发明实施例还提供一种视频处理装置,包括:
第一显示模块,用于显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为电子设备的麦克风采集的音频;
第一接收模块,用于接收用户对所述音乐标识的第一输入;
添加模块,用于响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
第三方面,本发明实施例还提供一种电子设备,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现上述视频处理方法的步骤。
第四方面,本发明实施例还提供一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述计算机程序被处理器执行时实现上述视频处理方法的步骤。
在本发明实施例中,在视频的制作过程中,电子设备的麦克风采集到音频的情况下,能够通过采集到的音频自动识别与该音频对应的目标音乐,并通过音乐标识的形式直观的显示出来,以提示用户有可用的背景音乐;还可以通过接收用户对该音乐标识的第一输入,将与目标音乐关联的目标音乐片段添加至目标视频中,从而实现目标视频的背景音乐的添加;相较于需要用户输入检索关键词,查找用户感兴趣的背景音乐,可以有效简化视频制作过程中,背景音乐的获取添加操作。
附图说明
图1是本发明实施例提供的视频处理方法的流程图;
图2a是本发明实施例提供的目标视频的制作界面的示意图;
图2b是本发明实施例提供的音乐编辑界面的示意图之一;
图2c是本发明实施例提供的音乐编辑界面的示意图之二;
图3是本发明实施例提供的视频处理装置的结构图;
图4是本发明实施例提供的电子设备的结构图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
如图1所示,本发明实施例提供一种视频处理方法,该方法可以应用于手机、平板电脑等电子设备,以便用户在制作多媒体内容的过程添加背景音乐,并包括以下步骤:
步骤101、显示音乐标识。
该步骤中,音乐标识用于指示目标音乐,且目标音乐为基于目标音频所识别到的音乐,目标音频为电子设备的麦克风采集的音频。
比如,在视频处理的过程中,当电子设备的麦克风检测到音频信号的情况下,则会采集该音频信号,获取与该音频信号对应的音频数据,并根据采集到的音频数据识别出对应的音乐,从而实现音乐的采集获取。
其中,若是检测到的音频数据里面包括除音乐音频数据之外的其他音频数据,则对其他音频数据进行过滤处理,仅对提取其中的音乐音频数据,并通过提取的音乐音频数据识别对应的音乐,从而降低其他音频数据对目标音乐的识别的干扰影响。
而且,在识别到目标音乐的情况下,在视频处理界面可以显示音乐标识,以指示用户,电子设备采集到了音乐信息,并可以用作视频的背景音乐。
其中,音乐标识可以是显示在视频处理界面中的控件标识,该控件标识还可以根据音乐的类型以不同的形状或者颜色进行显示。比如,若采集到的音乐是流行音乐,则显示与流行风格的标识;若采集到的音乐是电子音乐,则显示与电音风格的标识,以提升音乐风格的辨识度。
进一步的,还可以分析识别到的音乐和当前制作的视频的匹配度,给识别到的音乐打分;并且可以将分数较低的音乐直接过滤掉,即对于得分较低的音乐,不显示音乐标识,以减少推荐次数,提升用户在视频制作过程中的操作体验。
本实施方式中,通过电子设备的麦克风采集到的音频,并获取对应的目标音乐,无需用户主动搜索与当前视频适配的背景音乐,有效的简化了背景音乐的获取操作。
具体的,可以基于电子设备的声纹识别算法,自动检测用户/电子设备周围的音乐信号。比如,在制作视频的过程中,可以通过识别街道上的店铺播放的音乐,或者识别路人哼唱的歌曲。
在电子设备的麦克风采集到音频数据的情况下,可以根据本地数据库或者网络数据库中存储的音频数据,判断识别麦克风采集到的音频数据的音乐识别信息。比如,识别麦克风采集到的音频数据的歌名信息、歌手信息、歌词信息、专辑信息等等。
在确定麦克风采集到的音频数据的音乐识别信息之后,可以根据音乐识别信息在网络数据库中获取与该音频数据关联的音频片段,即识别与该音频数据关联的音乐,并显示音乐标识,以提示用户识别到了可用做视频背景音乐的音乐。这样通过识别周围的音频数据,推荐可用的背景音乐,相较于需要用户输入检索关键词,查找用户感兴趣的背景音乐,可以有效简化视频制作过程中,背景音乐的获取添加操作。
需要说明的是,若是未采集到音频数据,则不会显示音乐标识;而且,若采集到了音频数据,但未能确定该音频数据的确定信息,导致无法获取与该音频数据对应的音乐片段,则也不会显示音乐标识。
其中,若是在同一时刻,识别到多个音频数据,则可以在视频的制作界面显示与识别到多个音频数据关联的音频片段,以便用户选择背景音乐。
其中,音乐标识的可以是悬浮显示在视频的制作界面。而且,音乐标识还可以显示与音频数据关联的歌名信息或者歌手信息等,以便用户通过查看音乐标识,选择是否将音频数据关联的音频片段作为该视频的背景音乐。
步骤102、接收用户对所述音乐标识的第一输入。
该步骤中,第一输入可以是用户对音乐标识的按压操作、触控操作等。
步骤103、响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
该步骤中,通过响应于第一输入,将于目标音乐关联的目标音乐片段添加至目标视频中,从而实现视频的背景音乐的添加。
其中,目标音乐片段可以是目标音频所包括的目标音乐的音乐片段,即当前识别到的目标音频所包括的目标音乐的音乐片段;还可以是从目标音乐的至少两个音乐片段中选取的音乐片段。
而且,当目标音乐片段是目标音频所包括的目标音乐的音乐片段的情况下,可以直接将其添加至目标视频中,从而省去用户的选取操作,进一步提高目标视频的背景音乐的添加的便利性。
本实施方式中,在视频的制作过程中,电子设备的麦克风采集到音频的情况下,能够通过采集到的音频自动识别与该音频对应的目标音乐,并通过音乐标识的形式直观的显示出来,以提示用户有可用的背景音乐;还可以通过接收用户对该音乐标识的第一输入,将与目标音乐关联的目标音乐片段添加至目标视频中,从而实现目标视频的背景音乐的添加;相较于需要用户输入检索关键词,查找用户感兴趣的背景音乐,可以有效简化视频制作过程中,背景音乐的获取添加操作。
可选的,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段;其中,T为正整数。
本实施方式中,在视频的背景音乐添加界面,可以显示目标音乐的音乐识别信息,以便用户知晓目标音乐的具体信息,比如歌曲风格信息、歌手信息、播放时长、专辑信息等等;还可以显示目标音乐的T个音乐片段,以便用户从T个音乐片段中选取目标音乐片段,作为目标视频的背景音乐。
具体的,可以通过接收用户对T个音乐片段中的第一音乐片段的选取输入,以将第一音乐片段作为目标音乐片段,并将其添加至目标视频中。这样,通过增加音乐片段的选择性,可以增强用户在背景音乐添加过程中,与电子设备之间的互动,即可以提升人机互动效果。
其中,T个音乐片段,可以包括当前识别到的音乐片段,或者是具有预设音乐特征的音乐片段,比如目标音乐的高潮片段,还可以包括目标音乐的整个音乐片段。
如图2a所示,针对电子设备的麦克风采集到的音频,并在获取与该音频关联的目标音乐的情况下,可以通过接收针对音乐标识10的选取输入,并响应于该选取输入,显示显示如图2b所示的音乐编辑界面20;并可以在音乐编辑界面20显示目标音乐的当前识别片段21、目标音乐的高潮片段22和目标音乐的全部片段23,从而增加背景音乐的选择,以便用户从音乐编辑界面显示的音频片段中选择合适的音频片段作为目标视频的背景音乐。
如图2b所示,还可以在可供选取的音乐片段的下方显示视频轨道界面24,视频轨道界面显示有多个视频帧缩略图和视频滑杆,并可以通过拖动视频滑杆设置目标音乐片段的添加位置。
其中,可以通过接收用户对显示的T个音乐片段中的第一音乐片段的选择输入,确定目标音乐片段。具体的,可以在每个音乐片段的后面显示选取框,当接收到针对选取框的选取输入时,则将该选取框对应的音频音乐添加到目标视频中。
比如,在视频多媒体内容的制作过程中,还可以在音乐编辑界面显示视频的关键帧画面,以便用户确定背景音乐的添加位置。并可以在背景音乐的添加位置设置视频滑杆,以便用户查看背景音乐的添加位置。
在目标视频的第一位置添加了背景音乐后,还可以通过拖动视频滑杆调整背景音乐的添加位置,比如从第一位置调整至第二位置。
其中,还可以接受用户对目标视频的关键帧画面的滑动操作,比如左滑操作、右滑操作,查看视频的关键帧画面。
比如,可以显示目标视频的视频轨道,目标视频包括P个视频帧缩略图和视频滑杆,并通过接收用户对视频滑杆的第五输入,比如拖动输入/滑动输入,将视频滑杆从第一位置移动至第二位置,并将选取的目标音乐片段添加至目标视频帧中,目标视频帧为第二位置处的视频帧缩略图对应的视频帧;其中,P为正整数,T个音乐片段中包括目标音乐所识别到的第一片段、预设音乐特征的第二片段等,具体的,T个音乐片段可以包括如图2b所示的目标音乐的当前识别片段21、目标音乐的高潮片段22和目标音乐的全部片段23。
其中,针对音乐显示界面显示的音乐片段,还显示有音乐片段的播放长度,并可以通过接收用户对播放长度的拖动操作,调整音乐片段的播放长度。而且,为了提升音乐片段的播放长度的调整精度,还可以接收用户对音乐片段的长按操作,响应于该长按操作,显示音乐片段的播放长度的调整界面,在调整界面可以以秒为单位,截取音乐片段的播放时长。比如,针对播放时长是20秒的音乐片段,可以输入数字5和15,从而截取音乐片段的5秒~15秒的部分。
可选的,当目标音乐片段的第一播放时长小于目标视频的第二播放时长的情况下,可以将目标音乐片段在目标视频中的播放模式设置为循环播放模式,以使目标视频的播放过程中,始终有背景音乐,提升目标视频的播放效果。
可选的,当目标音乐片段的第一播放时长大于目标视频的第二播放时长的情况下,可以按照第二播放时长,对目标音乐片段进行截取,并将截取后的目标音乐片段添加至目标视频中,以提升目标音乐片段和目标视频的匹配度,从而提升目标视频的背景音乐的播放效果。
进一步的,若用户想在目标视频中添加多段背景音乐,比如将目标音乐的当前识别片段添加在目标视频的前两分钟,将目标音乐的高潮片段添加在目标视频的后两分钟;则先将视频滑杆定位在目标视频的起始位置(即第一帧画面),并勾选目标音乐的当前识别片段;然后将视频滑杆移动至目标视频的中间位置,并勾选目标音乐的高潮片段。
其中,若是添加的音乐片段的播放时长小于两分钟,则控制该音乐片段在对应的播放区间内循环播放,从而提升目标视频的播放效果。
比如,若是目标音乐的当前识别片段小于两分钟,则在目标视频的前两分钟内循环播放目标音乐的当前识别片段;并当目标音乐的当前识别片段的播放时长超过两分钟时,则自动停止播放目标音乐的当前识别片段;然后进入到目标视频的后两分钟播放时段,并在目标视频的后两分钟播放时段,调用目音乐的高潮片段作为背景音乐播放。
可选的,所述音乐识别信息包括音乐名称标签和音乐演唱者标签;所述显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段之后,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:接收用户对所述音乐演唱者标签的第三输入;响应于所述第三输入,将所述音乐演唱者标签的标签内容由第一演唱者更新为第二演唱者,并将所述T个音乐片段更新为S个音乐片段;其中,所述T个音乐片段为第一演唱版本的所述目标音乐的音乐片段,所述第一演唱版本的所述目标音乐为所述第一演唱者演唱的;所述S个音乐片段为第二演唱版本的所述目标音乐的音乐片段,所述第二演唱版本的所述目标音乐为所述第二演唱者演唱的;且S为正整数。
进一步可选的,所述将所述音乐演唱者标签的标签内容由第一演唱者更新为第二演唱者,并将所述T个音乐片段更新为S个音乐片段之后,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:接收用户对所述S个音乐片段中的第二音乐片段的第四输入;响应于所述第四输入,将所述第二音乐片段确定为目标音乐片段。
本实施方式中,可以提供不同版本的音乐片段以供用户选择,以增加背景音乐的选择的灵活性,提升背景音乐的添加效果。
如图2c所示,还可以在音乐编辑界面20显示音乐版本标签25(即音乐演唱者标签),以提供不同的歌手的演唱版本,还可以提供同一歌手在不同场合的演唱版本,以增加背景音乐的选择的灵活性和多样性。
其中,第四输入为目标音乐关联的歌曲信息的版本切换操作。而且,在响应于第四输入的情况下,还可以将添加在目标视频的目标音乐片段更新成目标版本(即第二演唱者所演唱的版本)的音乐片段,以便用户选取喜欢的版本作为目标视频的背景音乐。
本发明实施例的视频处理方法,通过显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为所述电子设备的麦克风采集的音频;接收用户对所述音乐标识的第一输入;响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。这样可以简化视频制作过程中,背景音乐的获取添加操作。
如图3所示,本发明实施例还提供一种视频处理装置,该视频处理装置300包括:
第一显示模块301,用于显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为电子设备的麦克风采集的音频;
第一接收模块302,用于接收用户对所述音乐标识的第一输入;
添加模块303,用于响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
可选的,所述目标音乐片段为所述目标音频所包括的所述目标音乐的音乐片段,或者,所述目标音乐片段为所述目标音乐的至少两个音乐片段中的一个。
可选的,所述视频处理装置300还包括:
第二显示模块,用于显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段;
其中,T为正整数。
可选的,所述视频处理装置300还包括:
第二接收模块,用于接收用户对所述T个音乐片段中的第一音乐片段的第二输入;
第二确定模块,用于响应于所述第二输入,将所述第一音乐片段确定为目标音乐片段。
可选的,所述音乐识别信息包括音乐名称标签和音乐演唱者标签;
所述视频处理装置300还包括:
第三接收模块,用于接收用户对所述音乐演唱者标签的第三输入;
更新模块,用于响应于所述第三输入,将所述音乐演唱者标签的标签内容由第一演唱者更新为第二演唱者,并将所述T个音乐片段更新为S个音乐片段;
其中,所述T个音乐片段为第一演唱版本的所述目标音乐的音乐片段,所述第一演唱版本的所述目标音乐为所述第一演唱者演唱的;所述S个音乐片段为第二演唱版本的所述目标音乐的音乐片段,所述第二演唱版本的所述目标音乐为所述第二演唱者演唱的;且S为正整数。
可选的,所述视频处理装置300还包括:
第四接收模块,用于接收用户对所述S个音乐片段中的第二音乐片段的第四输入;
第二确定模块,用于响应于所述第四输入,将所述第二音乐片段确定为目标音乐片段。
可选的,所述添加模块303包括:
显示单元,用于显示所述目标视频的视频轨道,所述目标视频包括P个视频帧缩略图和视频滑杆,接收用户对所述视频滑杆的第五输入;
第一添加单元,用于响应于所述第五输入,将所述视频滑杆由第一位置移动至第二位置,并将目标音乐片段添加至目标视频帧中,所述目标视频帧为所述第二位置处的视频帧缩略图对应的视频帧;
其中,P为正整数,所述T个音乐片段包括所述目标音乐的所识别到的第一片段、预设音乐特征的第二片段。
可选的,所述添加模块303包括:
第二添加单元,用于在所述目标音乐片段的第一播放时长小于所述目标视频的第二播放时长的情况下,将所述目标音乐片段添加至所述目标视频中,并将所述目标音乐片段的播放模式设置为循环播放模式;
第三添加单元,用于在所述目标音乐片段的第一播放时长大于所述目标视频的第二播放时长的情况下,按照第二播放时长,对所述目标音乐片段进行截取,将截取后的所述目标音乐片段添加至所述目标视频中。
视频处理装置300能够实现图1和图2c的方法实施例中电子设备实现的各个过程,为避免重复,这里不再赘述。
如图4所述,本发明实施例还提供一种电子设备,该电子设备400包括但不限于:射频单元401、网络模块402、音频输出单元403、输入单元404、传感器405、显示单元406、用户输入单元407、接口单元408、存储器409、处理器410、以及电源411等部件。本领域技术人员可以理解,图4中示出的电子设备结构并不构成对电子设备的限定,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。在本发明实施例中,电子设备包括但不限于手机、平板电脑、笔记本电脑、掌上电脑、车载终端、可穿戴设备、以及计步器等。
其中,显示单元406,用于显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为所述电子设备的麦克风采集的音频;用户输入单元407,用于接收用户对所述音乐标识的第一输入;处理器410,用于响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
可选的,所述目标音乐片段为所述目标音频所包括的所述目标音乐的音乐片段,或者,所述目标音乐片段为所述目标音乐的至少两个音乐片段中的一个。
可选的,显示单元406,用于显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段;其中,T为正整数。
可选的,用户输入单元407,用于接收用户对所述T个音乐片段中的第一音乐片段的第二输入;处理器410,用于响应于所述第二输入,将所述第一音乐片段确定为目标音乐片段。
可选的,所述音乐识别信息包括音乐名称标签和音乐演唱者标签;用户输入单元407,用于接收用户对所述音乐演唱者标签的第三输入;处理器410,用于响应于所述第三输入,将所述音乐演唱者标签的标签内容由第一演唱者更新为第二演唱者,并将所述T个音乐片段更新为S个音乐片段;其中,所述T个音乐片段为第一演唱版本的所述目标音乐的音乐片段,所述第一演唱版本的所述目标音乐为所述第一演唱者演唱的;所述S个音乐片段为第二演唱版本的所述目标音乐的音乐片段,所述第二演唱版本的所述目标音乐为所述第二演唱者演唱的;且S为正整数。
可选的,用户输入单元407,用于接收用户对所述S个音乐片段中的第二音乐片段的第四输入;处理器410,用于响应于所述第四输入,将所述第二音乐片段确定为目标音乐片段。
可选的,显示单元406,用于显示所述目标视频的视频轨道,所述目标视频包括P个视频帧缩略图和视频滑杆,接收用户对所述视频滑杆的第五输入;处理器410,用于响应于所述第五输入,将所述视频滑杆由第一位置移动至第二位置,并将目标音乐片段添加至目标视频帧中,所述目标视频帧为所述第二位置处的视频帧缩略图对应的视频帧;其中,P为正整数,所述T个音乐片段包括所述目标音乐的所识别到的第一片段、预设音乐特征的第二片段。
可选的,用户输入单元407,用于在所述目标音乐片段的第一播放时长小于所述目标视频的第二播放时长的情况下,将所述目标音乐片段添加至所述目标视频中,并将所述目标音乐片段的播放模式设置为循环播放模式;用户输入单元407,用于在所述目标音乐片段的第一播放时长大于所述目标视频的第二播放时长的情况下,按照第二播放时长,对所述目标音乐片段进行截取,将截取后的所述目标音乐片段添加至所述目标视频中。
电子设备400能够实现前述实施例中电子设备实现的各个过程,为避免重复,这里不再赘述。
应理解的是,本发明实施例中,射频单元401可用于收发信息或通话过程中,信号的接收和发送,具体的,将来自基站的下行数据接收后,给处理器410处理;另外,将上行的数据发送给基站。通常,射频单元401包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器、双工器等。此外,射频单元401还可以通过无线通信***与网络和其他设备通信。
电子设备通过网络模块402为用户提供了无线的宽带互联网访问,如帮助用户收发电子邮件、浏览网页和访问流式媒体等。
音频输出单元403可以将射频单元401或网络模块402接收的或者在存储器409中存储的音频数据转换成音频信号并且输出为声音。而且,音频输出单元403还可以提供与电子设备400执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出单元403包括扬声器、蜂鸣器以及受话器等。
输入单元404用于接收音频或视频信号。输入单元404可以包括图形处理器(Graphics Processing Unit,GPU)4041和麦克风4042,图形处理器4041对在视频捕获模式或图像捕获模式中由图像捕获装置(如摄像头)获得的静态图片或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元406上。经图形处理器4041处理后的图像帧可以存储在存储器409(或其它存储介质)中或者经由射频单元401或网络模块402进行发送。麦克风4042可以接收声音,并且能够将这样的声音处理为音频数据。处理后的音频数据可以在电话通话模式的情况下转换为可经由射频单元401发送到移动通信基站的格式输出。
电子设备400还包括至少一种传感器405,比如光传感器、运动传感器以及其他传感器。具体地,光传感器包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板4061的亮度,接近传感器可在电子设备400移动到耳边时,关闭显示面板4061和/或背光。作为运动传感器的一种,加速计传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别电子设备姿态(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;传感器405还可以包括指纹传感器、压力传感器、虹膜传感器、分子传感器、陀螺仪、气压计、湿度计、温度计、红外线传感器等,在此不再赘述。
显示单元406用于显示由用户输入的信息或提供给用户的信息。显示单元406可包括显示面板4061,可以采用液晶显示器(Liquid Crystal Display,LCD)、有机发光二极管(Organic Light-Emitting Diode,OLED)等形式来配置显示面板4061。
用户输入单元407可用于接收输入的数字或字符信息,以及产生与电子设备的用户设置以及功能控制有关的键信号输入。具体地,用户输入单元407包括触控面板4071以及其他输入设备4072。触控面板4071,也称为触摸屏,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触控面板4071上或在触控面板4071附近的操作)。触控面板4071可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器410,接收处理器410发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触控面板4071。除了触控面板4071,用户输入单元407还可以包括其他输入设备4072。具体地,其他输入设备4072可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆,在此不再赘述。
进一步的,触控面板4071可覆盖在显示面板4061上,当触控面板4071检测到在其上或附近的触摸操作后,传送给处理器410以确定触摸事件的类型,随后处理器410根据触摸事件的类型在显示面板4061上提供相应的视觉输出。虽然在图4中,触控面板4071与显示面板4061是作为两个独立的部件来实现电子设备的输入和输出功能,但是在某些实施例中,可以将触控面板4071与显示面板4061集成而实现电子设备的输入和输出功能,具体此处不做限定。
接口单元408为外部装置与电子设备400连接的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。接口单元408可以用于接收来自外部装置的输入(例如,数据信息、电力等等)并且将接收到的输入传输到电子设备400内的一个或多个元件或者可以用于在电子设备400和外部装置之间传输数据。
存储器409可用于存储软件程序以及各种数据。存储器409可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作***、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据手机的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器409可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。
处理器410是电子设备的控制中心,利用各种接口和线路连接整个电子设备的各个部分,通过运行或执行存储在存储器409内的软件程序和/或模块,以及调用存储在存储器409内的数据,执行电子设备的各种功能和处理数据,从而对电子设备进行整体监控。处理器410可包括一个或多个处理单元;优选的,处理器410可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作***、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器410中。
电子设备400还可以包括给各个部件供电的电源411(比如电池),优选的,电源411可以通过电源管理***与处理器410逻辑相连,从而通过电源管理***实现管理充电、放电、以及功耗管理等功能。
另外,电子设备400包括一些未示出的功能模块,在此不再赘述。
优选的,本发明实施例还提供一种电子设备,包括处理器410,存储器409,存储在存储器409上并可在所述处理器410上运行的计算机程序,该计算机程序被处理器410执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。
本发明实施例还提供一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该计算机程序被处理器执行时实现上述视频处理方法实施例的各个过程,且能达到相同的技术效果,为避免重复,这里不再赘述。其中,所述的计算机可读存储介质,如只读存储器(Read-Only Memory,简称ROM)、随机存取存储器(Random Access Memory,简称RAM)、磁碟或者光盘等。
需要说明的是,在本文中,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者装置不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者装置所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括该要素的过程、方法、物品或者装置中还存在另外的相同要素。
通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件,但很多情况下前者是更佳的实施方式。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质(如ROM/RAM、磁碟、光盘)中,包括若干指令用以使得一台终端(可以是手机,计算机,服务器,空调器,或者网络设备等)执行本发明各个实施例所述的方法。
上面结合附图对本发明的实施例进行了描述,但是本发明并不局限于上述的具体实施方式,上述的具体实施方式仅仅是示意性的,而不是限制性的,本领域的普通技术人员在本发明的启示下,在不脱离本发明宗旨和权利要求所保护的范围情况下,还可做出很多形式,均属于本发明的保护之内。
Claims (10)
1.一种视频处理方法,应用于电子设备,其特征在于,包括:
显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为所述电子设备的麦克风采集的音频;
接收用户对所述音乐标识的第一输入;
响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
2.根据权利要求1所述的方法,其特征在于,所述目标音乐片段为所述目标音频所包括的所述目标音乐的音乐片段,或者,所述目标音乐片段为所述目标音乐的至少两个音乐片段中的一个。
3.根据权利要求1所述的方法,其特征在于,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:
显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段;
其中,T为正整数。
4.根据权利要求3所述的方法,其特征在于,所述显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段之后,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:
接收用户对所述T个音乐片段中的第一音乐片段的第二输入;
响应于所述第二输入,将所述第一音乐片段确定为目标音乐片段。
5.根据权利要求3所述的方法,其特征在于,所述音乐识别信息包括音乐名称标签和音乐演唱者标签;
所述显示所述目标音乐的音乐识别信息和所述目标音乐的T个音乐片段之后,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:
接收用户对所述音乐演唱者标签的第三输入;
响应于所述第三输入,将所述音乐演唱者标签的标签内容由第一演唱者更新为第二演唱者,并将所述T个音乐片段更新为S个音乐片段;
其中,所述T个音乐片段为第一演唱版本的所述目标音乐的音乐片段,所述第一演唱版本的所述目标音乐为所述第一演唱者演唱的;所述S个音乐片段为第二演唱版本的所述目标音乐的音乐片段,所述第二演唱版本的所述目标音乐为所述第二演唱者演唱的;且S为正整数。
6.根据权利要求5所述的方法,其特征在于,所述将所述音乐演唱者标签的标签内容由第一演唱者更新为第二演唱者,并将所述T个音乐片段更新为S个音乐片段之后,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中之前,所述方法还包括:
接收用户对所述S个音乐片段中的第二音乐片段的第四输入;
响应于所述第四输入,将所述第二音乐片段确定为目标音乐片段。
7.根据权利要求3至6中任一项所述的方法,其特征在于,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中,包括:
显示所述目标视频的视频轨道,所述目标视频包括P个视频帧缩略图和视频滑杆,接收用户对所述视频滑杆的第五输入;
响应于所述第五输入,将所述视频滑杆由第一位置移动至第二位置,并将目标音乐片段添加至目标视频帧中,所述目标视频帧为所述第二位置处的视频帧缩略图对应的视频帧;
其中,P为正整数,所述T个音乐片段包括所述目标音乐的所识别到的第一片段、预设音乐特征的第二片段。
8.根据权利要求1至6中任一项所述的方法,其特征在于,所述将与所述目标音乐关联的目标音乐片段添加至目标视频中,包括:
在所述目标音乐片段的第一播放时长小于所述目标视频的第二播放时长的情况下,将所述目标音乐片段添加至所述目标视频中,并将所述目标音乐片段的播放模式设置为循环播放模式;
在所述目标音乐片段的第一播放时长大于所述目标视频的第二播放时长的情况下,按照第二播放时长,对所述目标音乐片段进行截取,将截取后的所述目标音乐片段添加至所述目标视频中。
9.一种视频处理装置,其特征在于,包括:
第一显示模块,用于显示音乐标识,所述音乐标识指示目标音乐,所述目标音乐为基于目标音频所识别到的音乐,所述目标音频为电子设备的麦克风采集的音频;
第一接收模块,用于接收用户对所述音乐标识的第一输入;
添加模块,用于响应于所述第一输入,将与所述目标音乐关联的目标音乐片段添加至目标视频中。
10.一种电子设备,其特征在于,包括处理器、存储器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述计算机程序被所述处理器执行时实现如权利要求1至8中任一项所述的视频处理方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010305884.7A CN111491211B (zh) | 2020-04-17 | 2020-04-17 | 视频处理方法、视频处理装置及电子设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010305884.7A CN111491211B (zh) | 2020-04-17 | 2020-04-17 | 视频处理方法、视频处理装置及电子设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111491211A CN111491211A (zh) | 2020-08-04 |
CN111491211B true CN111491211B (zh) | 2022-01-28 |
Family
ID=71812851
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010305884.7A Active CN111491211B (zh) | 2020-04-17 | 2020-04-17 | 视频处理方法、视频处理装置及电子设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111491211B (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112153307A (zh) * | 2020-08-28 | 2020-12-29 | 北京达佳互联信息技术有限公司 | 短视频中添加歌词的方法、装置、电子设备及存储介质 |
CN114143587A (zh) * | 2020-09-03 | 2022-03-04 | 上海哔哩哔哩科技有限公司 | 一种用于在目标音乐视频中乐谱展示的方法与设备 |
CN113038014A (zh) * | 2021-03-17 | 2021-06-25 | 北京字跳网络技术有限公司 | 应用程序的视频处理方法和电子设备 |
CN113573161B (zh) * | 2021-09-22 | 2022-02-08 | 腾讯科技(深圳)有限公司 | 多媒体数据处理方法、装置、设备及存储介质 |
CN114329223A (zh) * | 2022-01-04 | 2022-04-12 | 北京字节跳动网络技术有限公司 | 媒体内容搜索方法、装置、设备及介质 |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1524667A1 (en) * | 2003-10-16 | 2005-04-20 | Magix Ag | System and method for improved video editing |
CN105070283A (zh) * | 2015-08-27 | 2015-11-18 | 百度在线网络技术(北京)有限公司 | 为歌声语音配乐的方法和装置 |
CN107707828A (zh) * | 2017-09-26 | 2018-02-16 | 维沃移动通信有限公司 | 一种视频处理方法及移动终端 |
CN107959873A (zh) * | 2017-11-02 | 2018-04-24 | 深圳天珑无线科技有限公司 | 在视频中植入背景音乐的方法、装置、终端及存储介质 |
CN109246474A (zh) * | 2018-10-16 | 2019-01-18 | 维沃移动通信(杭州)有限公司 | 一种视频文件编辑方法及移动终端 |
CN109547847A (zh) * | 2018-11-22 | 2019-03-29 | 广州酷狗计算机科技有限公司 | 添加视频信息的方法、装置及计算机可读存储介质 |
CN110222224A (zh) * | 2019-06-06 | 2019-09-10 | 广州酷狗计算机科技有限公司 | 识别歌曲信息的方法、装置和*** |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102053998A (zh) * | 2009-11-04 | 2011-05-11 | 周明全 | 一种利用声音方式检索歌曲的方法及***装置 |
CN103914238B (zh) * | 2012-12-30 | 2017-02-08 | 杭州网易云音乐科技有限公司 | 一种实现界面上多控件整合的方法和装置 |
-
2020
- 2020-04-17 CN CN202010305884.7A patent/CN111491211B/zh active Active
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1524667A1 (en) * | 2003-10-16 | 2005-04-20 | Magix Ag | System and method for improved video editing |
CN105070283A (zh) * | 2015-08-27 | 2015-11-18 | 百度在线网络技术(北京)有限公司 | 为歌声语音配乐的方法和装置 |
CN107707828A (zh) * | 2017-09-26 | 2018-02-16 | 维沃移动通信有限公司 | 一种视频处理方法及移动终端 |
CN107959873A (zh) * | 2017-11-02 | 2018-04-24 | 深圳天珑无线科技有限公司 | 在视频中植入背景音乐的方法、装置、终端及存储介质 |
CN109246474A (zh) * | 2018-10-16 | 2019-01-18 | 维沃移动通信(杭州)有限公司 | 一种视频文件编辑方法及移动终端 |
CN109547847A (zh) * | 2018-11-22 | 2019-03-29 | 广州酷狗计算机科技有限公司 | 添加视频信息的方法、装置及计算机可读存储介质 |
CN110222224A (zh) * | 2019-06-06 | 2019-09-10 | 广州酷狗计算机科技有限公司 | 识别歌曲信息的方法、装置和*** |
Non-Patent Citations (1)
Title |
---|
基于内容的视频检索中的音频处理;冯哲;《中国博士学位论文全文数据库 信息科技辑》;20050315(第01期);I138-32 * |
Also Published As
Publication number | Publication date |
---|---|
CN111491211A (zh) | 2020-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111491211B (zh) | 视频处理方法、视频处理装置及电子设备 | |
CN108470041B (zh) | 一种信息搜索方法及移动终端 | |
CN110557683B (zh) | 一种视频播放控制方法及电子设备 | |
CN110248251B (zh) | 一种多媒体播放方法及终端设备 | |
CN108763316B (zh) | 一种音频列表管理方法及移动终端 | |
CN110618969B (zh) | 一种图标显示方法及电子设备 | |
CN109561211B (zh) | 一种信息显示方法及移动终端 | |
CN108334272B (zh) | 一种控制方法及移动终端 | |
CN112689201B (zh) | 弹幕信息识别方法、显示方法、服务器及电子设备 | |
EP3699743B1 (en) | Image viewing method and mobile terminal | |
CN111445927B (zh) | 一种音频处理方法及电子设备 | |
CN110866038A (zh) | 信息推荐方法及终端设备 | |
CN110958485A (zh) | 一种视频播放方法、电子设备及计算机可读存储介质 | |
CN109324999B (zh) | 一种基于下载指令执行操作的方法和电子设备 | |
CN110990679A (zh) | 信息搜索方法及电子设备 | |
CN109246474B (zh) | 一种视频文件编辑方法及移动终端 | |
CN111372029A (zh) | 视频显示方法、装置及电子设备 | |
CN111212316B (zh) | 视频生成方法及电子设备 | |
CN111143614A (zh) | 视频显示方法及电子设备 | |
CN111491205A (zh) | 视频处理方法、装置及电子设备 | |
CN110932964A (zh) | 一种信息的处理方法及装置 | |
CN108710521B (zh) | 一种便签生成方法和终端设备 | |
CN110032320B (zh) | 一种页面滚动的控制方法、装置及终端 | |
CN111445929A (zh) | 一种语音信息处理方法及电子设备 | |
CN110928616A (zh) | 快捷图标管理方法及电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |