CN102103857A - 演唱打分*** - Google Patents

演唱打分*** Download PDF

Info

Publication number
CN102103857A
CN102103857A CN2009102020121A CN200910202012A CN102103857A CN 102103857 A CN102103857 A CN 102103857A CN 2009102020121 A CN2009102020121 A CN 2009102020121A CN 200910202012 A CN200910202012 A CN 200910202012A CN 102103857 A CN102103857 A CN 102103857A
Authority
CN
China
Prior art keywords
word
sound
module
score
sub
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2009102020121A
Other languages
English (en)
Other versions
CN102103857B (zh
Inventor
蔡洪滨
黄伟
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SHANGHAI GEAK ELECTRONICS Co.,Ltd.
Original Assignee
Shanda Computer Shanghai Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shanda Computer Shanghai Co Ltd filed Critical Shanda Computer Shanghai Co Ltd
Priority to CN2009102020121A priority Critical patent/CN102103857B/zh
Publication of CN102103857A publication Critical patent/CN102103857A/zh
Application granted granted Critical
Publication of CN102103857B publication Critical patent/CN102103857B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Landscapes

  • Electrophonic Musical Instruments (AREA)
  • Reverberation, Karaoke And Other Acoustics (AREA)

Abstract

本发明公开了一种演唱打分***,包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器;演唱声音标准模型模块包括演唱声音标准模型,演唱声音参考模型模块包括演唱声音参考模型,利用通用语音识别打分模块,将演唱声音采集模块采集传来的演唱声音信号,分别与所述演唱声音标准模型、演唱声音参考模型进行匹配,输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到咬字得分模块,咬字得分模块根据所述演唱声音标准、参考声学得分结果,得到该演唱的咬字得分,从而能对演唱者歌词咬字的准确度进行高精确度的咬字打分评测。

Description

演唱打分***
技术领域
本发明涉及人工智能技术,特别涉及一种演唱打分***。
背景技术
演唱打分是一种实时对用户的个人演唱进行即时反馈的技术,可以对演唱者的演唱准确度进行评估,在互动娱乐平台上利用演唱打分***提供演唱打分功能,可以给用户带来很好的体验,具有很高的娱乐性,用户可以进行飚歌、多人PK等娱乐。
由于声音具有相当的不稳定性,难以直接用单一声学模型进行精确评估,常规的演唱打分***,声学模型中通常仅包括音准、音色等因素,而不包括咬字因素,仅根据音准、音色进行打分。常规的演唱打分***,当演唱者的音准、音色并无太大区别,即便演唱者的演唱内容和实际歌词内容不一致,具体打分仍然会无太大差别,具体打分无法体现演唱者对歌词咬字的准确度。
发明内容
本发明要解决的技术问题是提供一种演唱打分***,能够对演唱者歌词咬字的准确度进行打分。
为解决上述技术问题,本发明的演唱打分***,包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器;
所述演唱声音采集模块采集输出演唱声音信号到所述语音识别打分模块;
所述演唱声音标准模型模块,包括演唱声音标准模型;所述演唱声音参考模型模块包括演唱声音参考模型;
所述通用语音识别打分模块,将演唱声音采集模块采集传来的演唱声音信号,分别与所述演唱声音标准模型、演唱声音参考模型进行匹配,输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到所述咬字得分模块;
所述咬字得分模块,根据所述演唱声音标准声学得分信号及演唱声音参考声学得分信号,得到演唱咬字得分,输出咬字得分信号到所述得分规整模块;
所述得分规整模块,根据分数转换模型,将所述咬字得分信号中的演唱咬字得分转换为相应的演唱咬字分值输出到显示器。
所述演唱声音标准声学得分信号中包括有演唱者演唱的歌词中各个字的标准声学得分;
所述演唱声音参考声学得分信号中包括有该首歌词中各个字的参考声学得分;
所述咬字得分模块,将所述演唱声音标准声学得分信号中的演唱者演唱的歌词中各个字的标准声学得分,分别同所述演唱声音参考声学得分信号中的该首歌词中各个字的参考声学得分相减,得到该首歌词中各个字的声学得分差,并将该首歌词中各个字的声学得分差取算术平均后得到该演唱咬字得分,输出咬字得分信号到所述得分规整模块。
本发明的演唱打分***,设置有演唱声音标准模型模块,演唱声音参考模型模块,演唱声音标准模型模块包括演唱声音标准模型,演唱声音参考模型模块包括演唱声音参考模型,利用通用语音识别打分模块,将演唱声音采集模块采集传来的演唱声音信号,分别与所述演唱声音标准模型、演唱声音参考模型进行匹配,输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到咬字得分模块,咬字得分模块根据所述演唱声音标准、参考声学得分结果,得到该演唱的咬字得分,从而能对演唱者歌词咬字的准确度进行高精确度的咬字打分评测,可以克服用单一声学模型进行打分带来的精度不足的问题。
附图说明
下面结合附图和具体实施方式对本发明作进一步的详细说明。
图1是本发明的演唱打分***一实施方式示意图。
具体实施方式
本发明的演唱打分***一实施方式如图1所示,包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器;
所述演唱声音采集模块采集输出演唱声音信号到所述语音识别打分模块;
所述演唱声音标准模型模块,包括演唱声音标准模型,通过采集多个发音咬字准确的歌唱声音数据,对这批数据进行训练,得到咬字准确的语音识别模型,该咬字准确的语音识别模型作为演唱声音标准模型;所述演唱声音参考模型模块包括演唱声音参考模型,通过采集多个带有咬字不准或者与歌词不匹配的歌唱声音数据,对这批数据进行训练,得到咬字不准确的语音识别模型,该咬字不准确的语音识别模型作为演唱声音参考模型;演唱声音标准及参考模型的充分训练要求对性别、目标客户年龄段、各种口音的完整覆盖;
所述通用语音识别打分模块,将演唱声音采集模块采集传来的演唱声音信号,分别与所述演唱声音标准模型、演唱声音参考模型进行匹配,输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到所述咬字得分模块;所述演唱声音标准声学得分信号中包括有演唱者演唱的歌词中各个字的标准声学得分,所述演唱声音参考声学得分信号中包括有该首歌词中各个字的参考声学得分;
所述咬字得分模块,将所述演唱声音标准声学得分信号中的演唱者演唱的歌词中各个字的标准声学得分,分别同所述演唱声音参考声学得分信号中的该首歌词中各个字的参考声学得分相减,得到该首歌词中各个字的声学得分差,并将该首歌词中各个字的声学得分差取算术平均后得到该演唱咬字得分,输出咬字得分信号到所述得分规整模块。
所述得分规整模块,根据分数转换模型,将所述咬字得分信号中的演唱咬字得分转换为相应的演唱咬字分值输出到显示器;所述分数转换模型,是通过收集多个演唱咬字得分打分数据并和实际人工打分结果进行对照后确定,所述咬字得分信号中的演唱咬字得分结果经过转换后,就得到了实际在显示器上显示的演唱咬字打分值。
一实施例如下。
演唱者A要唱“东方红”时,基本没出错,通用语音识别打分模块根据歌词演唱声音标准模型得到的该首歌词中各个字的演唱声音标准声学得分,分别为:(5834,5736,8249),根据歌词演唱声音参考模型得到的该首歌词中各个字的演唱声音参考声学得分,分别为:(2874,2873,5473),所述咬字得分模块,将标准声学得分(5834,5736,8249)同参考声学得分(2874,2873,5473)中的各个字的得分分别对应相减,得到演唱的该首歌词中各个字的声学得分差:(2960,2863,2776),并将演唱的该首歌词中各个字的声学得分差取算术平均后得到该首歌词的演唱咬字得分2866,所述得分规整模块,根据分数转换模型,将2866映射转换为咬字分值90显示在显示器上;而演唱者B将“红”唱错了,通用语音识别打分模块根据歌词演唱声音标准模型得到的该首歌词中各个字的演唱声音标准声学得分,分别为:(4824,5230,5235),根据歌词演唱声音参考模型得到的该首歌词中各个字的演唱声音参考声学得分,分别为:(1827,2341,7129),所述咬字得分模块,将标准声学得分(4824,5230,5235)同参考声学得分(1827,2341,7129)中的各个字的得分分别对应相减,得到演唱的该首歌词中各个字的声学得分差:(2997,2889,-1894),并将演唱的该首歌词中各个字的声学得分差取算术平均后得到该首歌词的演唱咬字得分1331,所述得分规整模块,根据分数转换模型,将1331映射转换为咬字分值66显示在显示器上。
本发明的演唱打分***,设置有演唱声音标准模型模块,演唱声音参考模型模块,演唱声音标准模型模块包括演唱声音标准模型,演唱声音参考模型模块包括演唱声音参考模型,利用通用语音识别打分模块,将演唱声音采集模块采集传来的演唱声音信号,分别与所述演唱声音标准模型、演唱声音参考模型进行匹配,输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到咬字得分模块,咬字得分模块根据所述演唱声音标准、参考声学得分结果,得到该演唱的咬字得分,从而能对演唱者歌词咬字的准确度进行高精确度的咬字打分评测,可以克服用单一声学模型进行打分带来的精度不足的问题。

Claims (5)

1.一种演唱打分***,其特征在于,包括演唱声音采集模块、演唱声音标准模型模块、演唱声音参考模型模块、通用语音识别打分模块、咬字得分模块、得分规整模块、显示器;
所述演唱声音采集模块采集输出演唱声音信号到所述语音识别打分模块;
所述演唱声音标准模型模块,包括演唱声音标准模型;所述演唱声音参考模型模块包括演唱声音参考模型;
所述通用语音识别打分模块,将演唱声音采集模块采集传来的演唱声音信号,分别与所述演唱声音标准模型、演唱声音参考模型进行匹配,输出对应的演唱声音标准声学得分信号及演唱声音参考声学得分信号到所述咬字得分模块;
所述咬字得分模块,根据所述演唱声音标准声学得分信号及演唱声音参考声学得分信号,得到演唱咬字得分,输出咬字得分信号到所述得分规整模块;
所述得分规整模块,根据分数转换模型,将所述咬字得分信号中的演唱咬字得分转换为相应的演唱咬字分值输出到显示器。
2.根据权利要求1所述的演唱打分***,其特征在于,所述演唱声音标准声学得分信号中包括有演唱者演唱的歌词中各个字的标准声学得分;
所述演唱声音参考声学得分信号中包括有该首歌词中各个字的参考声学得分;
所述咬字得分模块,将所述演唱声音标准声学得分信号中的演唱者演唱的歌词中各个字的标准声学得分,分别同所述演唱声音参考声学得分信号中的该首歌词中各个字的参考声学得分相减,得到该首歌词中各个字的声学得分差,并将该首歌词中各个字的声学得分差取算术平均后得到该演唱咬字得分,输出咬字得分信号到所述得分规整模块。
3.根据权利要求1所述的演唱打分***,其特征在于,所述分数转换模型,是通过收集多个演唱咬字得分打分数据并和实际人工打分结果进行对照后确定。
4.根据权利要求1所述的演唱打分***,其特征在于,通过采集多个发音咬字准确的歌唱声音数据,对这批数据进行训练,得到咬字准确的语音识别模型,该咬字准确的语音识别模型作为演唱声音标准模型。
5.根据权利要求1所述的演唱打分***,其特征在于,通过采集多个带有咬字不准或者与歌词不匹配的歌唱声音数据,对这批数据进行训练,得到咬字不准确的语音识别模型,该咬字不准确的语音识别模型作为演唱声音参考模型。
CN2009102020121A 2009-12-21 2009-12-21 演唱打分*** Active CN102103857B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2009102020121A CN102103857B (zh) 2009-12-21 2009-12-21 演唱打分***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2009102020121A CN102103857B (zh) 2009-12-21 2009-12-21 演唱打分***

Publications (2)

Publication Number Publication Date
CN102103857A true CN102103857A (zh) 2011-06-22
CN102103857B CN102103857B (zh) 2013-10-30

Family

ID=44156574

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2009102020121A Active CN102103857B (zh) 2009-12-21 2009-12-21 演唱打分***

Country Status (1)

Country Link
CN (1) CN102103857B (zh)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104064180A (zh) * 2014-06-06 2014-09-24 百度在线网络技术(北京)有限公司 演唱评分方法及装置
CN104966144A (zh) * 2015-04-20 2015-10-07 北京中艺润泽文化传媒有限公司 真实艺术水平检测***
CN108206027A (zh) * 2016-12-20 2018-06-26 北京酷我科技有限公司 一种音频质量评价方法及***
CN109165836A (zh) * 2018-08-15 2019-01-08 南京光辉互动网络科技股份有限公司 一种演唱评分中歌词发音的处理及测评方法及***
CN110047466A (zh) * 2019-04-16 2019-07-23 深圳市数字星河科技有限公司 一种开放性创建语音朗读标准参考模型的方法
CN110211585A (zh) * 2019-06-05 2019-09-06 广州小鹏汽车科技有限公司 车内娱乐互动方法、装置、车辆和机器可读介质
CN110610721A (zh) * 2019-09-16 2019-12-24 上海瑞美锦鑫健康管理有限公司 一种基于歌词演唱准确度的检测***及方法
CN111710213A (zh) * 2020-06-05 2020-09-25 河南艺树教育科技有限公司 一种可量化的音乐教学***
CN112508397A (zh) * 2020-12-04 2021-03-16 成都音悦创想科技有限公司 一种游戏化vod评分***及方法
CN112686020A (zh) * 2020-12-29 2021-04-20 科大讯飞股份有限公司 作文评分方法、装置、电子设备及存储介质
CN114093386A (zh) * 2021-11-10 2022-02-25 厦门大学 一种面向教育的多维度歌唱评价方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004205567A (ja) * 2002-12-24 2004-07-22 Casio Comput Co Ltd 演奏評価装置および演奏評価プログラム
CN101430876B (zh) * 2007-11-08 2012-03-14 中国科学院声学研究所 一种演唱的评分***和方法

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104064180A (zh) * 2014-06-06 2014-09-24 百度在线网络技术(北京)有限公司 演唱评分方法及装置
CN104966144A (zh) * 2015-04-20 2015-10-07 北京中艺润泽文化传媒有限公司 真实艺术水平检测***
CN108206027A (zh) * 2016-12-20 2018-06-26 北京酷我科技有限公司 一种音频质量评价方法及***
CN109165836B (zh) * 2018-08-15 2022-02-11 南京光辉互动网络科技股份有限公司 一种演唱评分中歌词发音的处理及测评方法及***
CN109165836A (zh) * 2018-08-15 2019-01-08 南京光辉互动网络科技股份有限公司 一种演唱评分中歌词发音的处理及测评方法及***
CN110047466A (zh) * 2019-04-16 2019-07-23 深圳市数字星河科技有限公司 一种开放性创建语音朗读标准参考模型的方法
CN110047466B (zh) * 2019-04-16 2021-04-13 深圳市数字星河科技有限公司 一种开放性创建语音朗读标准参考模型的方法
CN110211585A (zh) * 2019-06-05 2019-09-06 广州小鹏汽车科技有限公司 车内娱乐互动方法、装置、车辆和机器可读介质
CN110610721A (zh) * 2019-09-16 2019-12-24 上海瑞美锦鑫健康管理有限公司 一种基于歌词演唱准确度的检测***及方法
CN110610721B (zh) * 2019-09-16 2022-01-07 上海瑞美锦鑫健康管理有限公司 一种基于歌词演唱准确度的检测***及方法
CN111710213A (zh) * 2020-06-05 2020-09-25 河南艺树教育科技有限公司 一种可量化的音乐教学***
CN112508397A (zh) * 2020-12-04 2021-03-16 成都音悦创想科技有限公司 一种游戏化vod评分***及方法
CN112508397B (zh) * 2020-12-04 2024-04-16 成都音悦创想科技有限公司 一种游戏化vod评分***及方法
CN112686020A (zh) * 2020-12-29 2021-04-20 科大讯飞股份有限公司 作文评分方法、装置、电子设备及存储介质
CN112686020B (zh) * 2020-12-29 2024-06-04 科大讯飞股份有限公司 作文评分方法、装置、电子设备及存储介质
CN114093386A (zh) * 2021-11-10 2022-02-25 厦门大学 一种面向教育的多维度歌唱评价方法

Also Published As

Publication number Publication date
CN102103857B (zh) 2013-10-30

Similar Documents

Publication Publication Date Title
CN102103857B (zh) 演唱打分***
CN106340286B (zh) 一种通用的实时乐器演奏评价***
CN1172291C (zh) 共振峰转换装置、应用该转换装置的方法和卡拉ok装置
CN107146497A (zh) 一种钢琴考级评分***
CN109448754A (zh) 一种多维度演唱评分***
CN108140369A (zh) 乐谱、***和方法
US20030233930A1 (en) Song-matching system and method
CN107767847A (zh) 一种智能钢琴演奏测评方法及***
JP2017509011A (ja) 物理的オブジェクトにより音楽の学習、作曲及び演奏するためのシステム及び方法
CN105989842A (zh) 对比声纹相似度的方法、装置及其在数字娱乐点播***中的应用
CN101441865A (zh) 演唱类游戏的评分方法及***
CN109065008A (zh) 一种音乐演奏曲谱匹配方法、存储介质及智能乐器
CN101383103A (zh) 口语发音水平自动测试方法
CN205541849U (zh) 一种具有评分和调音功能的智能钢琴***
CN101719366A (zh) 一种音乐符号与音谱记号的编辑及显示方法及伴唱机***
CN201017624Y (zh) 无键位弦乐器音准、视奏辅助练习装置
CN201611570U (zh) 音频评测装置
CN111553260A (zh) 一种交互式教学方法和***
CN104200801A (zh) 小提琴
CN100538560C (zh) 电子节拍校音器及其控制方法
CN205900074U (zh) 一种钢琴及钢琴跟弹***
CN110910714A (zh) 一种钢琴学习***
CN108428458A (zh) 一种声乐学习电子辅助发音***
CN108320613A (zh) 一种交互式音乐教学***
CN113160655A (zh) 乐器教学***、方法及可读存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: SHANGHAI GUOKE ELECTRONIC CO., LTD.

Free format text: FORMER OWNER: SHANDA NETWORKING CO., LTD.

Effective date: 20140731

C41 Transfer of patent application or patent right or utility model
TR01 Transfer of patent right

Effective date of registration: 20140731

Address after: 201203 Pudong New Area Huaxia Road, Lane No. 958, No. 60, Shanghai

Patentee after: Shanghai Guoke Electronic Co., Ltd.

Address before: Shanghai city Pudong New Area 201203 GuoShouJing Road No. 356

Patentee before: Shanda computer (Shanghai) Co., Ltd.

CP03 Change of name, title or address
CP03 Change of name, title or address

Address after: Room 127, building 3, 356 GuoShouJing Road, China (Shanghai) pilot Free Trade Zone, Pudong New Area, Shanghai, 200120

Patentee after: SHANGHAI GEAK ELECTRONICS Co.,Ltd.

Address before: No.60, Lane 958, Huaxia Middle Road, Pudong New Area, Shanghai, 201203

Patentee before: Shanghai Nutshell Electronics Co.,Ltd.