CN104078035A - 一种演奏乐曲的方法及装置 - Google Patents

一种演奏乐曲的方法及装置 Download PDF

Info

Publication number
CN104078035A
CN104078035A CN201310275056.3A CN201310275056A CN104078035A CN 104078035 A CN104078035 A CN 104078035A CN 201310275056 A CN201310275056 A CN 201310275056A CN 104078035 A CN104078035 A CN 104078035A
Authority
CN
China
Prior art keywords
music score
chinese operas
information
music
playing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201310275056.3A
Other languages
English (en)
Other versions
CN104078035B (zh
Inventor
王新宇
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Guangzhou Kugou Computer Technology Co Ltd
Original Assignee
Shenzhen Tencent Computer Systems Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Tencent Computer Systems Co Ltd filed Critical Shenzhen Tencent Computer Systems Co Ltd
Priority to CN201310275056.3A priority Critical patent/CN104078035B/zh
Priority to PCT/CN2014/081407 priority patent/WO2015000404A1/zh
Publication of CN104078035A publication Critical patent/CN104078035A/zh
Application granted granted Critical
Publication of CN104078035B publication Critical patent/CN104078035B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H1/00Details of electrophonic musical instruments
    • G10H1/0033Recording/reproducing or transmission of music for electrophonic musical instruments
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/441Image sensing, i.e. capturing images or optical patterns for musical purposes or musical control purposes
    • G10H2220/451Scanner input, e.g. scanning a paper document such as a musical score for automated conversion into a musical file format

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Auxiliary Devices For Music (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

本发明公开了一种演奏乐曲的方法及装置,所述方法包括:生成乐曲的曲谱片段图片序列;识别并提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;根据所述完整的曲谱信息,对所述乐曲进行演奏。本发明实现了对乐曲连贯、完整地弹奏,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间。

Description

一种演奏乐曲的方法及装置
技术领域
本发明涉及计算机技术领域,尤其涉及一种演奏乐曲的方法及装置。
背景技术
曲谱即乐谱,是记录音乐音高或者节奏的各种书面符号的有规律的组合,简谱、五线谱、吉他谱、古琴谱等等各种现代的或者古代的乐谱都叫做曲谱。它的出现使得人们能够方便并且有效的进行音乐的交流和传承。古往今来的音乐作品大多以纸质形式的曲谱进行记载。
随着计算机技术的迅速发展,各种终端,如智能手机、个人数字助理、笔记本电脑、平板电脑等,日渐进入人们的工作、生活和学习中。终端上的应用软件亦是日趋繁多,其功能也越来越强大。现有的某些终端所安装的应用软件可以通过摄像头对纸质形式的曲谱进行拍摄,并对所拍摄曲谱图片进行识别、演奏。但是,当一首乐曲的曲谱很长时,需要连续拍摄多张曲谱片段图片,才能完整的将该首乐曲的曲谱采集完毕,而现有的应用软件只能对单张曲谱片段图片进行单独的识别和演奏,无法将所拍摄的多张曲谱片段图片进行衔接识别,来实现对同一首乐曲连贯、完整地弹奏。
发明内容
鉴于以上理由,本发明实施例提出一种演奏乐曲的方法及装置,来解决以上背景技术部分提到的技术问题。
一方面,本发明实施例提供了一种演奏乐曲的方法,所述方法包括:
生成乐曲的曲谱片段图片序列;
识别并提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;
将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;
根据所述完整的曲谱信息,对所述乐曲进行演奏。
一方面,本发明实施例提供了一种演奏乐曲的装置,所述装置包括:
图片生成模块,用于生成乐曲的曲谱片段图片序列;
信息提取模块,用于识别并提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;
信息衔接模块,用于将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;
乐曲演奏模块,用于根据所述完整的曲谱信息,对所述乐曲进行演奏。
相较于现有技术,本发明实施例通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息的识别与衔接,实现了对乐曲连贯、完整地弹奏,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间。
附图说明
图1为本发明第一实施例提供的一种演奏乐曲的方法的流程示意图;
图2为本发明第一实施例提供的生成乐曲的曲谱片段图片序列的流程示意图;
图3为本发明第二实施例提供的一种演奏乐曲的方法的流程示意图;
图4为本发明第三实施例提供的一种演奏乐曲的方法的流程示意图;
图5为本发明第四实施例提供的一种演奏乐曲的装置的结构示意图;
图6为本发明第五实施例提供的一种演奏乐曲的装置的结构示意图;
图7为本发明第六实施例提供的一种演奏乐曲的装置的结构示意图;
图8为可用于实施本发明方案的终端的结构示意图。
具体实施方式
下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅用于解释本发明,而非对本发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与本发明相关的部分而非全部内容。
图1示出了本发明的第一实施例。
图1为本发明第一实施例提供的一种演奏乐曲的方法的流程示意图。参见图1,所述方法包括:
步骤S101、生成乐曲的曲谱片段图片序列。
在本实施例中,可通过获取图像采集装置采集的、拷贝外接设备存储的或者下载网页中存有的乐曲的各曲谱片段图片,得到曲谱片段图片序列。优选的,本实施通过获取图像采集装置采集的乐曲的各曲谱片段图片,得到曲谱片段图片序列,其中所述图像采集装置为终端自身所携带的照相机。
图2为本发明第一实施例提供的生成乐曲的曲谱片段图片序列的流程示意图。参见图2,步骤S101进一步包括:
子步骤S1011、获取图像采集装置实时采集的取景图片;
子步骤S1012、判断所采集的取景图片是否与上一张曲谱片段图片发生重叠,如果否,执行子步骤S1013,否则,执行子步骤S1014;
子步骤S1013、向图像采集装置发送拍摄指令,接收图像采集装置拍摄得到的曲谱片段图片;
子步骤S1014、按照预设的重叠渲染规则,在图像采集装置取景界面显示的图片中对重叠区域进行渲染。
其中,对于子步骤S1012,可根据现有的图像拼接技术,通过判断取景图片的最上面预设区域是否与上一张曲谱片段图片的最下面预设区域相似度达到设定的阈值,来判断取景图片是否与上一张曲谱片段图片发生重叠:如果相似度达到设定的阈值,则取景图片与上一张曲谱片段图片发生重叠,否则,取景图片与上一张曲谱片段图片未发生重叠;对于子步骤S1014,重叠渲染规则用于对重叠区域的渲染方式进行描述和界定。在本实施例中,按照预设的重叠渲染规则,在图像采集装置取景界面显示的图片中对所重叠区域进行渲染包括:在图像采集装置取景界面显示的图片中对重叠区域进行着色处理。例如,用绿色覆盖所述重叠区域,以提示用户所要拍摄的曲谱片段图片与上一张曲谱片段图片的重叠部分,使得用户能够据此对曲谱片段图片进行合理的拍摄。
步骤S102、识别并提取曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息。
在生成乐曲的曲谱片段图片序列后,首先根据光字符识别技术,对所述曲谱片段图片序列中各张曲谱片段图片进行信息识别,该识别过程包括但不限于:对曲谱片段图片进行倾斜校正、二值化、剔除歌词等预处理;定位曲谱片段图片中的音符基元;根据音符库,对音符基元进行识别。然后根据识别结果,提取曲谱片段图片所包含的曲谱片段信息,该曲谱片段信息包括多个音符及与所述多个音符中的每个音符对应的位置、音阶、节拍。
步骤S103、将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息。
在本实施例中,可按照曲谱片段图片序列中各张曲谱片段图片的顺序,依次将所提取的各曲谱片段图片所包含的曲谱片段信息衔接在一起,生成所述乐曲的完整的曲谱信息。
步骤S104、根据所述完整的曲谱信息,对所述乐曲进行演奏。
在得到所述乐曲的完整的曲谱信息之后,首先获取与所述乐曲对应的乐器名称,例如钢琴、吉他、小提琴、口琴、笛子等。具体地,该乐器名称可以是本地存储器存储的,通过查询本地存储器获取与所述乐曲对应的乐器名称。当然,与所述乐曲对应的乐器名称的获取也可以是通过接受用户输入的指令完成。其次,根据音色库和所述完整的曲谱片段信息,生成与乐器名称相对应的音乐格式的数据信息,其中音色库存储着不同乐器名称所对应的不同音符的音色,音乐格式的数据信息包括曲谱片段信息中所包括的多个音符及与所述多个音符中的每个音符对应的位置、音阶、节拍、音色。然后,根据音波表得到与音乐格式的数据信息相对应的模拟的音频信号,其中音波表存储着不同音符的不同音色的波形表。最后,将所述音频信号的功率进行放大,通过音频播放装置发出音乐,来实现对所述乐曲的演奏。
本发明第一实施例提出的技术方案,通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息进行识别与衔接处理,进而实现了对乐曲连贯、完整地弹奏,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间。
图3示出了本发明的第二实施例。
图3为本发明第二实施例提供的一种演奏乐曲的方法的流程示意图。参见图3,所述方法包括:
步骤S301、生成乐曲的曲谱片段图片序列。
本步骤与第一实施例中的步骤S101相同,这里不再赘述。
步骤S302、识别并提取曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息。
本步骤与第一实施例中的步骤S102相同,这里不再赘述。
步骤S303、将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息。
本步骤与第一实施例中的步骤S103相同,这里不再赘述。
步骤S304、显示能够被编辑的所述完整的曲谱信息。
在本实施例中,可通过提供一个人机交互界面,来显示所述完整的曲谱信息。在所显示的曲谱信息中所有的音符以及与每个音符对应的音阶、节拍均能够被用户编辑。优选的,可通过接收对某个音符的双击指令,来进入对该音符的编辑状态。
步骤S305、接收输入的编辑操作指令,对所述完整的曲谱信息进行编辑。
在通过人机交互界面显示能够被编辑的所述完整的曲谱信息后,接收用户输入的编辑操作指令,完成对曲谱信息中音符、音阶或者节拍进行的编辑,以实现对曲谱信息的修改。
步骤S306、根据经过编辑后的完整的曲谱信息,对所述乐曲进行演奏。
本发明第二实施例提供的技术方案,通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息进而识别与衔接处理,得到完整的曲谱信息,同时能够对曲谱信息进行编辑,进而实现了对乐曲准确、连贯、完整地弹奏,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间,同时能够协助用户进行乐曲创作。
图4示出了本发明的第三实施例。
图4为本发明第三实施例提供的一种演奏乐曲的方法的流程示意图。参见图4,所述方法包括:
步骤S401、生成乐曲的曲谱片段图片序列。
本步骤与第一实施例中的步骤S101相同,这里不再赘述。
步骤S402、识别并提取曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息。
本步骤与第一实施例中的步骤S102相同,这里不再赘述。
步骤S403、将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息。
本步骤与第一实施例中的步骤S103相同,这里不再赘述。
步骤S404、显示所述完整的曲谱信息。
在得到完整的曲谱信息后,提供一个人机交互界面,用于显示该曲谱信息。
步骤S405、接收输入的演奏位置指令,得到曲谱演奏的指定位置,其中指定位置包括起始位置和终止位置。
在本实施例中,接收用户在上述人机界面上显示的曲谱信息中触控选择的第一个音符,将该音符对应的位置作为曲谱演奏的起始位置;接收用户在上述人机界面上显示的曲谱信息中触控选择的第二个音符,将该音符对应的位置作为曲谱演奏的终止位置。特别的,当只接收到用户在上述人机界面上显示的曲谱信息中触控选择的唯一的一个音符时,将该音符对应的位置作为曲谱演奏的起始位置,将上述完整的曲谱信息中的最后一个音符对应的位置作为曲谱演奏的终止位置。
当然,本领域的普通技术人员应该知道,还可通过提供一个输入控件,供用户直接输入曲谱演奏的起始位置和终止位置。
步骤S406、从完整的曲谱信息中查找起始位置和终止位置之间所对应的曲谱信息。
步骤S407、根据所查找到的曲谱信息,对所述乐曲进行演奏。
本发明第三实施例提供的技术方案,通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息进行识别与衔接处理,而后对曲谱信息演奏位置加以指定,进而能够连贯、完整地弹奏用户所任意指定位置区域内的曲谱,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间。
图5示出了本发明的第四实施例。
图5为本发明第四实施例提供的一种演奏乐曲的装置的结构示意图。参见图5,该装置包括:图片生成模块501,用于生成乐曲的曲谱片段图片序列;信息提取模块502,用于识别并提取曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;信息衔接模块503,用于将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;乐曲演奏模块504,用于根据完整的曲谱信息,对所述乐曲进行演奏。
在本实施例中,图片生成模块501可通过获取图像采集装置采集的、拷贝外接设备存储的或者下载网页中存有的乐曲的各曲谱片段图片,得到曲谱片段图片序列。优选的,本实施图片生成模块501通过获取图像采集装置采集的乐曲的各曲谱片段图片,得到曲谱片段图片序列,其中所述图像采集装置为终端自身所携带的照相机。
图片生成模块501进一步包括:
获取子模块5011,用于获取图像采集装置实时采集的取景图片;
重叠识别子模块5012,用于判断所采集的取景图片是否与上一张曲谱片段图片发生重叠;
接收子模块5013,用于在判断未发生重叠时,向图像采集装置发送拍摄指令,接收所述图像采集装置拍摄得到的曲谱片段图片。
重叠渲染子模块5014,用于在判断发生重叠时,按照预设的重叠渲染规则,在图像采集装置取景界面显示的图片中对所述重叠区域进行渲染。
其中,重叠识别子模块5012可根据现有的图像拼接技术,通过判断取景图片的最上面预设区域是否与上一张曲谱片段图片的最下面预设区域相似度达到设定的阈值,来判断取景图片是否与上一张曲谱片段图片发生重叠:如果相似度达到设定的阈值,取景图片与上一张曲谱片段图片发生重叠,否则,取景图片与上一张曲谱片段图片未发生重叠。重叠渲染规则用于对重叠区域的渲染方式进行描述和界定。在本实施例中,重叠渲染子模块5014按照预设的重叠渲染规则,在图像采集装置取景界面显示的图片中对所重叠区域进行渲染包括:在图像采集装置取景界面显示的图片中对重叠区域进行着色处理。例如,重叠渲染子模块5014用绿色覆盖所述重叠区域,以提示用户所要拍摄的曲谱片段图片与上一张曲谱片段图片的重叠部分,使得用户能够据此对曲谱片段图片进行合理的拍摄。
信息提取模块502进一步包括:
信息识别子模块5021根据光字符识别技术,对所述曲谱片段图片序列中各张曲谱片段图片进行信息识别,所述识别包括但不限于:对曲谱片段图片进行倾斜校正、二值化、剔除歌词等预处理;定位曲谱片段图片中的音符基元;根据音符库,对音符基元进行识别;
信息提取子模块5022根据识别结果,提取曲谱片段图片所包含的曲谱片段信息,该曲谱片段信息包括多个音符及与所述多个音符中的每个音符对应的位置、音阶、节拍。
在本实施例中,信息衔接模块503可按照曲谱片段图片序列中各张曲谱片段图片的顺序,依次将所提取的各曲谱片段图片所包含的曲谱片段信息衔接在一起,生成所述乐曲的完整的曲谱信息。
在得到所述乐曲的完整的曲谱信息之后,乐曲演奏模块504首先获取与所述乐曲对应的乐器名称,例如钢琴、吉他、小提琴、口琴、笛子等。具体地,该乐器名称可以是本地存储器存储的,乐曲演奏模块504通过查询本地存储器获取与所述乐曲对应的乐器名称。当然,与所述乐曲对应的乐器名称的获取也可以是通过接受用户输入的指令完成。其次,乐曲演奏模块504根据音色库和所述完整的曲谱片段信息,生成与乐器名称相对应的音乐格式的数据信息,其中音色库存储着不同乐器名称所对应的不同音符的音色,音乐格式的数据信息包括曲谱片段信息中所包括的多个音符及与所述多个音符中的每个音符对应的位置、音阶、节拍、音色。然后,乐曲演奏模块504根据音波表得到与音乐格式的数据信息相对应的模拟的音频信号,其中音波表存储着不同音符的不同音色的波形表。最后,乐曲演奏模块504将所述音频信号的功率进行放大,通过音频播放装置发出音乐,来实现对所述乐曲的演奏。
本发明第四实施例与上述第一实施例属于一个发明构思,在第四实施例中未详尽描述的细节内容,可以参考第一实施例。
本发明第四实施例提供的技术方案,通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息进行识别与衔接处理,进而实现了对乐曲连贯、完整地弹奏,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间。
图6示出了本发明的第五实施例。
图6为本发明第四实施例提供的一种演奏乐曲的装置的结构示意图。参见图6,该装置包括:图片生成模块601,用于生成乐曲的曲谱片段图片序列;信息提取模块602,用于识别并提取曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;信息衔接模块603,用于将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;信息编辑模块604,用于显示能够被编辑的完整的曲谱信息,接收输入的编辑操作指令,对完整的曲谱信息进行编辑;乐曲演奏模块605用于根据经过编辑后的完整的曲谱信息,对所述乐曲进行演奏。
在本实施例中,图片生成模块601、信息提取模块602、信息衔接模块603与第四实施例中的图片生成模块501、信息提取模块502、信息衔接模块503功能对应相同,这里不再赘述。
在本实施例中,信息编辑模块604可通过提供一个人机交互界面,来显示所述完整的曲谱信息。在所显示的曲谱信息中所有的音符以及与每个音符对应的音阶、节拍均能够被用户编辑。优选的,信息编辑模块604可通过接收对某个音符的双击指令,来进入对该音符的编辑状态。在通过人机交互界面显示能够被编辑的所述完整的曲谱信息后,信息编辑模块604接收用户输入的编辑操作指令,完成对曲谱信息中音符、音阶或者节拍进行的编辑,以实现对曲谱信息的修改。
本发明第五实施例与上述第二实施例属于一个发明构思,在第五实施例中未详尽描述的细节内容,可以参考第二实施例。
本发明第五实施例提供的技术方案,通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息进而识别与衔接处理,得到完整的曲谱信息,同时能够对曲谱信息进行编辑,进而实现了对乐曲准确、连贯、完整地弹奏,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间,同时能够协助用户进行乐曲创作。
图7示出了本发明的第六实施例。
图7为本发明第六实施例提供的一种演奏乐曲的装置的结构示意图。参见图7,该装置包括:图片生成模块701,用于生成乐曲的曲谱片段图片序列;信息提取模块702,用于识别并提取曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;信息衔接模块703,用于将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;演奏位置指定模块704,用于显示所述完整的曲谱信息,接收输入的演奏位置指令,得到曲谱演奏的指定位置,其中所述指定位置包括起始位置和终止位置;乐曲演奏模块705用于从完整的曲谱信息中查找起始位置和终止位置之间对应的曲谱信息,根据所查找到的曲谱信息,对所述乐曲进行演奏。
在本实施例中,图片生成模块701、信息提取模块702、信息衔接模块703与第四实施例中的图片生成模块501、信息提取模块502、信息衔接模块503功能对应相同,这里不再赘述。
在本实施例中,演奏位置指定模块704接收用户在上述人机界面上显示的曲谱信息中触控选择的第一个音符,将该音符对应的位置作为曲谱演奏的起始位置;接收用户在上述人机界面上显示的曲谱信息中触控选择的第二个音符,将该音符对应的位置作为曲谱演奏的终止位置。特别的,当演奏位置指定模块604只接收到用户在上述人机界面上显示的曲谱信息中触控选择的唯一的一个音符时,将该音符对应的位置作为曲谱演奏的起始位置,将上述完整的曲谱信息中的最后一个音符对应的位置作为曲谱演奏的终止位置。
当然,本领域的普通技术人员应该知道,演奏位置指定模块704还可通过提供一个输入控件,供用户直接输入曲谱演奏的起始位置和终止位置。
本发明第六实施例提供的技术方案,通过对乐曲的曲谱片段图片序列中所包含的曲谱片段信息进行识别与衔接处理,而后对曲谱信息演奏位置加以指定,进而能够连贯、完整地弹奏用户所任意指定位置区域内的曲谱,克服了手动输入曲谱费时费力的弊端,延长了该方法和装置所应用的终端上电池的续航时间。
图8为可用于实施本发明方案的终端的结构示意图。参见图8,终端80可以包括图像采集单元801、存储器802、处理器803、输入单元804、显示单元805、音频电路806、扬声器807等部件。
图像采集单元801可用于获取曲谱片段图片序列数据,并将所获取的数据输出至存储器802以便进一步处理,在一个优选方式中,图像采集单元801可以为照相机。
存储器802可用于存储实现演奏乐曲的软件程序以及模块,处理器803通过运行存储在存储器802的软件程序以及模块,从而执行各种功能应用以及数据处理。
输入单元804可用于接收输入的数字或音符信息,以及产生与用户设置或功能控制有关的触控板、键盘、鼠标、操作杆信号输入。
显示单元805可用于显示由用户输入的信息或提供给用户的信息以及终端80的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成,在一个优选方式中,显示单元805为触摸屏显示器。
音频电路806、扬声器807可提供用户与终端80之间的音频接口。音频电路806可将从处理器803接收到的音频数据转换后的电信号,传送至扬声器807,由扬声器807转换为声音信号输出。
本领域技术人员可以理解,图8中示出的终端结构并不构成对终端的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。
以上实施例提供的技术方案中的全部或部分内容可以通过软件编程实现,其软件程序存储在可读取的存储介质中,存储介质例如:计算机中的硬盘、计算机只读存储器、光盘或软盘等。
以上所述仅为本发明的较佳实施例,并不用以限制本发明,凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (20)

1.一种演奏乐曲的方法,其特征在于,所述方法包括:
生成乐曲的曲谱片段图片序列;
识别并提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;
将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;
根据所述完整的曲谱信息,对所述乐曲进行演奏。
2.根据权利要求1所述的演奏乐曲的方法,其特征在于,所述生成乐曲的曲谱片段图片序列的步骤包括:获取图像采集装置采集的所述乐曲的各曲谱片段图片,生成所述曲谱片段图片序列。
3.根据权利要求2所述的演奏乐曲的方法,其特征在于,所述获取图像采集装置采集的所述乐曲的各曲谱片段图片的步骤包括:
获取所述图像采集装置实时采集的取景图片;
判断所采集的取景图片是否与上一张曲谱片段图片发生重叠;
如果未发生重叠,则向所述图像采集装置发送拍摄指令,接收所述图像采集装置拍摄得到的曲谱片段图片。
4.根据权利要求3所述的演奏乐曲的方法,其特征在于,如果发生重叠,则按照预设的重叠渲染规则,在所述图像采集装置取景界面显示的图片中对所述重叠区域进行渲染。
5.根据权利要求1所述的演奏乐曲的方法,其特征在于,所述识别并提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息的步骤包括:
根据光字符识别技术,对所述曲谱片段图片序列中的各张曲谱片段图片进行信息识别;
提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息,所述曲谱片段信息包括多个音符及所述多个音符中的每个音符对应的位置、音阶、节拍。
6.根据权利要求1所述的演奏乐曲的方法,其特征在于,所述将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息的步骤包括:按照所述曲谱片段图片序列中各张曲谱片段图片的顺序,依次将所提取的曲谱片段信息衔接在一起,生成所述乐曲的完整的曲谱信息。
7.根据权利要求1所述的演奏乐曲的方法,其特征在于,所述将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息的步骤之后还包括:
显示能够被编辑的所述完整的曲谱信息;
接收输入的编辑操作指令,对所述完整的曲谱信息进行编辑。
8.根据权利要求7所述的演奏乐曲的方法,其特征在于,根据所述完整的曲谱信息的对所述乐曲进行演奏的步骤包括:根据经过编辑后的所述完整的曲谱信息,对所述乐曲进行演奏。
9.根据权利要求1所述的演奏乐曲的方法,其特征在于,所述将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息的步骤之后还包括:
显示所述完整的曲谱信息;
接收输入的演奏位置指令,得到曲谱演奏的指定位置,其中所述指定位置包括起始位置和终止位置。
10.根据权利要求9所述的演奏乐曲的方法,其特征在于,根据所述完整的曲谱信息对所述乐曲进行演奏的步骤包括:
从所述完整的曲谱信息中查找所述起始位置和所述终止位置之间对应的曲谱信息;
根据所查找到的曲谱信息,对所述乐曲进行演奏。
11.一种演奏乐曲的装置,其特征在于,所述装置包括:
图片生成模块,用于生成乐曲的曲谱片段图片序列;
信息提取模块,用于识别并提取所述曲谱片段图片序列中的各张曲谱片段图片所包含的曲谱片段信息;
信息衔接模块,用于将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息;
乐曲演奏模块,用于根据所述完整的曲谱信息,对所述乐曲进行演奏。
12.根据权利要求11所述的演奏乐曲的装置,其特征在于,所述图片生成模块具体用于:获取图像采集装置采集的所述乐曲的各曲谱片段图片,生成所述曲谱片段图片序列。
13.根据权利要求12所述的演奏乐曲的装置,其特征在于,所述图片生成模块包括:
获取子模块,用于获取所述图像采集装置实时采集的取景图片;
重叠识别子模块,用于判断所采集的取景图片是否与上一张曲谱片段图片发生重叠;
接收子模块,用于在判断未发生重叠时,向所述图像采集装置发送拍摄指令,接收所述图像采集装置拍摄得到的曲谱片段图片。
14.根据权利要求13所述的演奏乐曲的装置,其特征在于,所述图片生成模块还包括重叠渲染子模块,用于在判断发生重叠时,按照预设的重叠渲染规则,在所述图像采集装置取景界面显示的图片中对所述重叠区域进行渲染。
15.根据权利要求11所述的演奏乐曲的装置,其特征在于,所述信息提取模块包括:
信息识别子模块,用于根据光字符识别技术,对所述曲谱片段图片序列中各张曲谱片段图片进行信息识别;
信息提取子模块,用于提取所述曲谱片段图片序列中各张曲谱片段图片所包含的曲谱片段信息,所述曲谱片段信息包括多个音符及所述多个音符中的每个音符对应的位置、音阶、节拍。
16.根据权利要求11所述的演奏乐曲的装置,其特征在于,所述信息衔接模块具体用于:按照所述曲谱片段图片序列中各张曲谱片段图片的顺序,依次将所提取的曲谱片段信息衔接在一起,生成所述乐曲的完整的曲谱信息。
17.根据权利要求11所述的演奏乐曲的装置,其特征在于,所述装置还包括信息编辑模块,用于在所述信息衔接模块将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息之后,显示能够被编辑的所述完整的曲谱信息,接收输入的编辑操作指令,对所述完整的曲谱信息进行编辑。
18.根据权利要求17所述的演奏乐曲的装置,其特征在于,所述乐曲演奏模块具体用于:根据经过编辑后的所述完整的曲谱信息,对所述乐曲进行演奏。
19.根据权利要求11所述的演奏乐曲的装置,其特征在于,所述装置还包括演奏位置指定模块,用于在所述信息衔接模块将所提取的曲谱片段信息进行衔接,生成所述乐曲的完整的曲谱信息之后,显示所述完整的曲谱信息,接收输入的演奏位置指令,得到曲谱演奏的指定位置,其中所述指定位置包括起始位置和终止位置。
20.根据权利要求19所述的演奏乐曲的装置,其特征在于,所述乐曲演奏模块具体用于:从所述完整的曲谱信息中查找所述起始位置和所述终止位置之间对应的曲谱信息,根据所查找到的曲谱信息,对所述乐曲进行演奏。
CN201310275056.3A 2013-07-02 2013-07-02 一种演奏乐曲的方法及装置 Active CN104078035B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201310275056.3A CN104078035B (zh) 2013-07-02 2013-07-02 一种演奏乐曲的方法及装置
PCT/CN2014/081407 WO2015000404A1 (zh) 2013-07-02 2014-07-01 一种演奏乐曲的方法及装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310275056.3A CN104078035B (zh) 2013-07-02 2013-07-02 一种演奏乐曲的方法及装置

Publications (2)

Publication Number Publication Date
CN104078035A true CN104078035A (zh) 2014-10-01
CN104078035B CN104078035B (zh) 2016-10-05

Family

ID=51599258

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201310275056.3A Active CN104078035B (zh) 2013-07-02 2013-07-02 一种演奏乐曲的方法及装置

Country Status (2)

Country Link
CN (1) CN104078035B (zh)
WO (1) WO2015000404A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105760386A (zh) * 2014-12-16 2016-07-13 广州市动景计算机科技有限公司 电子图片曲谱滚动方法、装置及***
CN106485984A (zh) * 2015-08-27 2017-03-08 ***通信集团公司 一种钢琴的智能教学方法和装置
CN106584479A (zh) * 2016-12-30 2017-04-26 中国地质大学(武汉) 基于实时信息流的扬琴机器人双臂协同防交叉演奏方法
CN107945780A (zh) * 2017-11-23 2018-04-20 北京物灵智能科技有限公司 一种基于计算机视觉的乐器演奏方法及装置
CN108268530A (zh) * 2016-12-30 2018-07-10 阿里巴巴集团控股有限公司 一种歌词的配乐生成方法和相关装置
CN108769846A (zh) * 2018-05-15 2018-11-06 广东小天才科技有限公司 一种识别乐谱的方法及麦克风
CN109376776A (zh) * 2018-10-15 2019-02-22 百度在线网络技术(北京)有限公司 用于播放音乐的方法和装置
CN111524493A (zh) * 2020-05-27 2020-08-11 珠海格力智能装备有限公司 调试曲谱的方法及装置
CN112183658A (zh) * 2020-10-14 2021-01-05 小叶子(北京)科技有限公司 一种曲谱识别方法、装置、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6137041A (en) * 1998-06-24 2000-10-24 Kabashiki Kaisha Kawai Gakki Music score reading method and computer-readable recording medium storing music score reading program
CN1862656A (zh) * 2005-05-13 2006-11-15 杭州波导软件有限公司 一种将乐谱转换成音乐输出的方法及其装置
CN1901716A (zh) * 2005-07-18 2007-01-24 三星电子株式会社 输出音频数据和乐谱图像的方法和设备
TW201044374A (en) * 2009-06-12 2010-12-16 Univ Nat Taiwan Science Tech Method and system for recognizing music scores
CN202512877U (zh) * 2012-03-08 2012-10-31 苏州市职业大学 一种用于乐谱识别及自动演奏的装置

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101222564A (zh) * 2007-01-13 2008-07-16 海尔集团公司 一种具有扫描功能的移动终端

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6137041A (en) * 1998-06-24 2000-10-24 Kabashiki Kaisha Kawai Gakki Music score reading method and computer-readable recording medium storing music score reading program
CN1862656A (zh) * 2005-05-13 2006-11-15 杭州波导软件有限公司 一种将乐谱转换成音乐输出的方法及其装置
CN1901716A (zh) * 2005-07-18 2007-01-24 三星电子株式会社 输出音频数据和乐谱图像的方法和设备
TW201044374A (en) * 2009-06-12 2010-12-16 Univ Nat Taiwan Science Tech Method and system for recognizing music scores
CN202512877U (zh) * 2012-03-08 2012-10-31 苏州市职业大学 一种用于乐谱识别及自动演奏的装置

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105760386B (zh) * 2014-12-16 2019-10-25 广州爱九游信息技术有限公司 电子图片曲谱滚动方法、装置及***
CN105760386A (zh) * 2014-12-16 2016-07-13 广州市动景计算机科技有限公司 电子图片曲谱滚动方法、装置及***
CN106485984A (zh) * 2015-08-27 2017-03-08 ***通信集团公司 一种钢琴的智能教学方法和装置
CN106584479A (zh) * 2016-12-30 2017-04-26 中国地质大学(武汉) 基于实时信息流的扬琴机器人双臂协同防交叉演奏方法
CN108268530A (zh) * 2016-12-30 2018-07-10 阿里巴巴集团控股有限公司 一种歌词的配乐生成方法和相关装置
CN108268530B (zh) * 2016-12-30 2022-04-29 阿里巴巴集团控股有限公司 一种歌词的配乐生成方法和相关装置
CN106584479B (zh) * 2016-12-30 2019-02-01 中国地质大学(武汉) 基于实时信息流的扬琴机器人双臂协同防交叉演奏方法
CN107945780A (zh) * 2017-11-23 2018-04-20 北京物灵智能科技有限公司 一种基于计算机视觉的乐器演奏方法及装置
CN108769846A (zh) * 2018-05-15 2018-11-06 广东小天才科技有限公司 一种识别乐谱的方法及麦克风
CN109376776A (zh) * 2018-10-15 2019-02-22 百度在线网络技术(北京)有限公司 用于播放音乐的方法和装置
CN111524493A (zh) * 2020-05-27 2020-08-11 珠海格力智能装备有限公司 调试曲谱的方法及装置
CN112183658A (zh) * 2020-10-14 2021-01-05 小叶子(北京)科技有限公司 一种曲谱识别方法、装置、电子设备及存储介质
CN112183658B (zh) * 2020-10-14 2024-01-26 小叶子(北京)科技有限公司 一种曲谱识别方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
CN104078035B (zh) 2016-10-05
WO2015000404A1 (zh) 2015-01-08

Similar Documents

Publication Publication Date Title
CN104078035A (zh) 一种演奏乐曲的方法及装置
US9558727B2 (en) Performance method of electronic musical instrument and music
JP4389330B2 (ja) 演奏位置検出方法および楽譜表示装置
CN101657816B (zh) 用于分布式音频文件编辑的门户网站
CN104239392B (zh) 与显示内容关联地记录音频
CN1953044B (zh) 一种基于midi文件的乐器演奏提示和检测***及方法
CN102142247A (zh) 多功能电子琴谱
KR20130134195A (ko) 오디오 스트림을 고속 시각화시키는 전자 장치 및 방법
US10971125B2 (en) Music synthesis method, system, terminal and computer-readable storage medium
CN107274876A (zh) 一种听音绘谱仪
CN107103915A (zh) 一种音频数据处理方法以及装置
CN101998107A (zh) 信息处理装置、会议***和信息处理方法
Delgado et al. A state of the art on computational music performance
JP6070952B2 (ja) カラオケ装置及びカラオケ用プログラム
JP5549521B2 (ja) 音声合成装置およびプログラム
CN106531202A (zh) 一种音频处理方法及装置
JP5034599B2 (ja) 楽曲紹介文生成装置、ナレーション付加装置およびプログラム
CN208507176U (zh) 一种影音交互***
KR101467852B1 (ko) 코드 이미지가 인쇄된 인쇄물을 이용하는 전자펜의 악기 연주 음향재생 제어방법 및 이를 수행하는 전자펜
KR101020557B1 (ko) 사용자 창조형 음악 콘텐츠 제작을 위한 악보 생성 장치 및그 방법
Jaime et al. A new multiformat rhythm game for music tutoring
JP2005326811A (ja) 音声合成装置および音声合成方法
WO2012102424A1 (ko) 전자 그림책 편집 장치 및 방법
JP5969421B2 (ja) 楽器音出力装置及び楽器音出力プログラム
JP2012181307A (ja) 音声処理装置、音声処理方法及び音声処理プログラム

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20161031

Address after: 510000 Guangzhou, Tianhe District branch Yun Yun Road, No. 16, self built room 2, building 1301

Patentee after: Guangzhou KuGou Networks Co., Ltd.

Address before: The South Road in Guangdong province Shenzhen city Fiyta building 518057 floor 5-10 Nanshan District high tech Zone

Patentee before: Shenzhen Tencent Computer System Co., Ltd.

CP02 Change in the address of a patent holder

Address after: No. 315, Huangpu Avenue middle, Tianhe District, Guangzhou City, Guangdong Province

Patentee after: GUANGZHOU KUGOU COMPUTER TECHNOLOGY Co.,Ltd.

Address before: 510000 room 1301, building 2, No.16 Keyun Road, Tianhe District, Guangzhou City, Guangdong Province

Patentee before: GUANGZHOU KUGOU COMPUTER TECHNOLOGY Co.,Ltd.

CP02 Change in the address of a patent holder