CN108205946B - 一种基于增强现实的钢琴教学方法、设备及钢琴 - Google Patents

一种基于增强现实的钢琴教学方法、设备及钢琴 Download PDF

Info

Publication number
CN108205946B
CN108205946B CN201611169359.7A CN201611169359A CN108205946B CN 108205946 B CN108205946 B CN 108205946B CN 201611169359 A CN201611169359 A CN 201611169359A CN 108205946 B CN108205946 B CN 108205946B
Authority
CN
China
Prior art keywords
piano
key
playing
virtual visual
player
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201611169359.7A
Other languages
English (en)
Other versions
CN108205946A (zh
Inventor
姚树沛
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Kuwo Technology Co Ltd
Original Assignee
Beijing Kuwo Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Kuwo Technology Co Ltd filed Critical Beijing Kuwo Technology Co Ltd
Priority to CN201611169359.7A priority Critical patent/CN108205946B/zh
Publication of CN108205946A publication Critical patent/CN108205946A/zh
Application granted granted Critical
Publication of CN108205946B publication Critical patent/CN108205946B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B15/00—Teaching music
    • G09B15/02—Boards or like means for providing an indication of notes
    • G09B15/023—Electrically operated

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本发明涉及一种基于增强现实的钢琴教学方法、设备及钢琴。该方法包括：定位钢琴的琴键位置；加载标准钢琴文件，并根据所述钢琴标准文件，在所述钢琴琴键位置上方生成相应的虚拟可视的钢琴音符；通过分析所述钢琴的琴键位置的变化，获取所述演奏者的弹奏情况，并基于所述虚拟可视的钢琴音符对所述演奏者的弹奏情况进行评分。该***包括定位模块、转化模块和处理模块。该钢琴为包括该钢琴教学设备的钢琴。本发明通过使钢琴演奏者看到虚拟可视的钢琴音符来增加钢琴演奏过程中的趣味性，并基于虚拟可视的钢琴音符对钢琴的演奏情况进行评分，增进演奏者对自身演奏水平的了解，一定程度上实现了辅助教学。

Description

一种基于增强现实的钢琴教学方法、设备及钢琴
技术领域
本发明涉及视频图像处理技术领域，尤其涉及一种钢琴演奏的纠错方法及***。
背景技术
音乐是人类灵魂的一部分，钢琴被誉为“乐器之王”，随着社会的进步和时代的发展，人们开始注重精神上的追求和个人的修养，各个年龄阶层的人中都涌现出大量的钢琴学习者，大批的培训机构也应运而生。
但是，钢琴教学工作者的音乐素养和教学水平各异，对钢琴爱好者寻找一个合适的钢琴老师造成了困扰。同时，跟随老师学***时的练***，也可能会觉得练习过程枯燥无味。
发明内容
本发明的目的在于，为解决现有技术中的上述问题，提供了一种基于增强现实的钢琴教学方法、设备及钢琴，通过使钢琴演奏者看到虚拟可视的钢琴音符来增加钢琴演奏过程中的趣味性，并基于虚拟可视的钢琴音符对钢琴的演奏情况进行评分，增进演奏者对自身演奏水平的了解，一定程度上实现了辅助教学。
为了实现上述目的，一方面，本发明提供了一种基于增强现实的钢琴教学方法。该方法包括以下步骤：定位钢琴的琴键位置；加载标准钢琴文件，并根据钢琴标准文件，在钢琴琴键位置上方生成相应的虚拟可视的钢琴音符；通过分析钢琴的琴键位置的变化，获取演奏者的弹奏情况，并基于虚拟可视的钢琴音符对演奏者的弹奏情况进行评分。
优选地，定位钢琴的琴键位置步骤具体包括：在钢琴琴键上铺设一层超薄的激光接收器，定位仪根据检测到的激光接收器的坐标对钢琴的琴键位置进行定位。
优选地，基于虚拟可视的钢琴音符对演奏者的弹奏情况进行评分步骤具体包括：当虚拟可视的钢琴音符尚未掉落至对应的钢琴的琴键上时，用户弹奏该钢琴琴键则分数增加，当虚拟可视的钢琴音符掉落至对应的钢琴的琴键上后用户仍未能弹奏该钢琴琴键则分数不变。
优选地，基于虚拟可视的钢琴音符，对演奏者的弹奏情况进行评分步骤还包括：在弹奏的过程中显示分数的变化和/或在弹奏结束后显示最终的分数。
优选地，在加载标准钢琴文件步骤之前还包括：获取标准钢琴文件。
另一方面，本发明提供了一种基于增强现实的钢琴教学设备。该设备包括定位模块、转化模块和处理模块。定位模块用于定位钢琴的琴键位置；转化模块用于加载标准钢琴文件，并根据钢琴标准文件，在钢琴琴键位置上方生成相应的虚拟可视的钢琴音符；处理模块用于通过分析钢琴的琴键位置的变化，获取演奏者的弹奏情况，并基于虚拟可视的钢琴音符对演奏者的弹奏情况进行评分。
优选地，定位模块包括定位仪和一层超薄的激光接收器，激光接收器铺设于钢琴的琴键上。
优选地，处理模块具体用于：通过分析钢琴的琴键位置的变化，获取演奏者的弹奏情况，当虚拟可视的钢琴音符尚未掉落至对应的钢琴的琴键上时，用户弹奏该钢琴琴键则分数增加，当虚拟可视的钢琴音符掉落至对应的钢琴的琴键上后用户仍未能弹奏该钢琴琴键则分数不变；在弹奏的过程中显示分数的变化和/或在弹奏结束后显示最终的分数。
优选地，还包括通信模块，通信模块用于从服务器获取标准钢琴文件。
又一方面，本发明还提供了一种钢琴。该钢琴包括上述基于增强现实的钢琴教学设备。
本发明提供的一种基于增强现实的钢琴教学方法、设备及钢琴，通过使钢琴演奏者看到虚拟可视的钢琴音符来增加钢琴演奏过程中的趣味性，并基于虚拟可视的钢琴音符对钢琴的演奏情况进行评分，增进演奏者对自身演奏水平的了解，一定程度上实现了辅助教学。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对实施例描述中所需要使用的附图作简单地介绍。显而易见地，下面描述中的附图仅仅是本发明的一些实施例。
图1为本发明实施例提供的一种基于增强现实的钢琴教学方法的流程示意图；
图2为本发明实施例提供的一种基于增强现实的钢琴教学设备的结构示意图；
图3为本发明实施例提供的另一种基于增强现实的钢琴教学设备的结构示意图；
图4为本发明实施例提供的又一种基于增强现实的钢琴教学设备的结构示意图。
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本发明一部分实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本发明保护的范围。
为便于对本发明实施例的理解，下面将结合附图以具体实施例做进一步的解释说明，实施例并不构成对本发明实施例的限定。
图1为本发明实施例提供的一种基于增强现实的钢琴教学方法的流程示意图。如图所示，该方法包括步骤S101-S103：
S101，定位钢琴的琴键位置。
定位的基本原理为利用定位光塔，对定位空间发射横竖两个方向扫射的激光，在被定位物体上放置多个激光感应接收器，通过计算两束光纤到达定位物体的角度差，计算出待定位节点的坐标。
具体地，在钢琴琴键上铺设一层超薄的激光接收器，定位仪中的定位光塔对定位空间发射横竖两个方向扫射的激光，通过计算两束光纤到达激光接收器的角度差，计算出激光接收器节点的坐标，根据检测计算出的激光接收器的坐标对钢琴的琴键位置进行定位。
S102，加载标准钢琴文件，并根据钢琴标准文件，在钢琴琴键位置上方生成相应的虚拟可视的钢琴音符。
具体地，在加载标准钢琴文件之前，还可以包括获取标准钢琴文件。根据钢琴标准文件，利用现有的虚拟现实(Virtual Reality，简称VR)技术，将钢琴标准文件转化成虚拟可视的三维立体钢琴音符，并投射在相应的钢琴琴键位置的上方。
S103，通过分析钢琴的琴键位置的变化，获取演奏者的弹奏情况，并基于虚拟可视的钢琴音符对演奏者的弹奏情况进行评分。
当所述虚拟可视的钢琴音符尚未掉落至对应的钢琴的琴键上时，用户弹奏该钢琴琴键则分数增加，当所述虚拟可视的钢琴音符掉落至对应的钢琴的琴键上后用户仍未能弹奏该钢琴琴键则分数不变。在弹奏的过程中显示分数的变化和/或在弹奏结束后显示最终的分数。
本发明实施例提供的一种基于增强现实的钢琴教学方法，通过使钢琴演奏者看到虚拟可视的钢琴音符来增加钢琴演奏过程中的趣味性，并基于虚拟可视的钢琴音符对钢琴的演奏情况进行评分，增进演奏者对自身演奏水平的了解，一定程度上实现了辅助教学。
图2为本发明实施例提供的一种基于增强现实的钢琴教学设备的结构示意图。如图2所示，该设备200包括：定位模块201、转化模块202和处理模块203。
定位模块201用于定位钢琴的琴键位置。
定位模块包括定位仪和一层超薄的激光接收器，激光接收器铺设于钢琴的琴键上。定位仪中的定位光塔对定位空间发射横竖两个方向扫射的激光，通过计算两束光纤到达激光接收器的角度差，计算出激光接收器节点的坐标，根据检测计算出的激光接收器的坐标对钢琴的琴键位置进行定位。
转化模块202用于加载标准钢琴文件，并根据钢琴标准文件，在钢琴琴键位置上方生成相应的虚拟可视的钢琴音符。
具体地，转化模块202根据钢琴标准文件，利用现有的VR(Virtual Reality)技术，将钢琴标准文件转化成虚拟可视的三维立体钢琴音符，并投射在相应的钢琴琴键位置的上方。
处理模块203用于通过分析钢琴的琴键位置的变化，获取演奏者的弹奏情况，并基于虚拟可视的钢琴音符对演奏者的弹奏情况进行评分。
具体地，处理模块203通过分析钢琴的琴键位置的变化，获取演奏者的弹奏情况，包括所按琴键的位置和时间点，并基于虚拟可视的钢琴音符对演奏者的弹奏情况进行评分。当所述虚拟可视的钢琴音符尚未掉落至对应的钢琴的琴键上时，用户弹奏该钢琴琴键则分数增加，当所述虚拟可视的钢琴音符掉落至对应的钢琴的琴键上后用户仍未能弹奏该钢琴琴键则分数不变。在弹奏的过程中显示分数的变化和/或在弹奏结束后显示最终的分数。
图3为本发明实施例提供的另一种基于增强现实的钢琴教学设备的结构示意图。如图3所示，该***200除了定位模块201、转化模块202和处理模块203以外，还可以包括通信模块204。通信模块204用于在加载标准钢琴文件以前获取标准钢琴文件。
图4为本发明实施例提供的又一种基于增强现实的钢琴教学设备的结构示意图。如图3所示，该***200除了定位模块201、转化模块202、处理模块203和通信模块204以外，还可以包括存储模块205。存储模块205用于接收并存储通信模块204获得的标准钢琴文件。
本发明实施例提供的一种基于增强现实的钢琴教学设备，通过使钢琴演奏者看到虚拟可视的钢琴音符来增加钢琴演奏过程中的趣味性，并基于虚拟可视的钢琴音符对钢琴的演奏情况进行评分，增进演奏者对自身演奏水平的了解，一定程度上实现了辅助教学。
另一方面，本发明还提供了一种钢琴。该钢琴包括上述的基于增强现实的钢琴教学设备。
本发明实施例提供的一种钢琴，通过使钢琴演奏者看到虚拟可视的钢琴音符来增加钢琴演奏过程中的趣味性，并基于虚拟可视的钢琴音符对钢琴的演奏情况进行评分，增进演奏者对自身演奏水平的了解，一定程度上实现了辅助教学。
以上所述的具体实施方式，对本发明的目的、技术方案和有益效果进行了进一步详细说明，所应理解的是，以上所述仅为本发明的具体实施方式而已，并不用于限定本发明的保护范围，凡在本发明的精神和原则之内，所做的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (5)

1.一种基于增强现实的钢琴教学方法，其特征在于，包括以下步骤：
在钢琴琴键上铺设一层超薄的激光接收器，定位仪中的定位光塔对定位空间发射横竖两个方向扫射的激光，通过计算两束光纤到达激光接收器的角度差，计算出激光接收器节点的坐标，根据检测计算到的激光接收器的坐标对钢琴的琴键位置进行定位；
加载标准钢琴文件，并根据所述标准钢琴文件，利用虚拟现实技术在所述钢琴琴键位置上方生成相应的虚拟可视的钢琴音符；
通过分析所述钢琴的琴键位置的变化，获取演奏者的弹奏情况，包括所按琴键的位置和时间点，并基于所述虚拟可视的钢琴音符对所述演奏者的弹奏情况进行评分，所述评分具体包括：
当所述虚拟可视的钢琴音符尚未掉落至对应的钢琴的琴键上时，用户弹奏该钢琴琴键则分数增加，当所述虚拟可视的三维立体的钢琴音符掉落至对应的钢琴的琴键上后用户仍未能弹奏该钢琴琴键则分数不变；
在弹奏的过程中显示分数的变化，并在弹奏结束后显示最终的分数。
2.根据权利要求1所述的方法，其特征在于，在所述加载标准钢琴文件步骤之前还包括：获取所述标准钢琴文件。
3.一种基于增强现实的钢琴教学设备，其特征在于，包括以下步骤：
定位模块，所述定位模块包括定位仪和一层超薄的激光接收器，将所述激光接收器铺设于所述钢琴的琴键上，定位仪根据检测到的激光接收器的坐标对钢琴的琴键位置进行定位；
转化模块，用于加载标准钢琴文件，并根据所述标准钢琴文件，利用虚拟现实技术在所述钢琴琴键位置上方生成相应的虚拟可视的三维立体的钢琴音符；
处理模块，用于通过分析所述钢琴的琴键位置的变化，获取演奏者的弹奏情况，并基于所述虚拟可视的钢琴音符对所述演奏者的弹奏情况进行评分；通过分析所述钢琴的琴键位置的变化，获取所述演奏者的弹奏情况，当所述虚拟可视的钢琴音符尚未掉落至对应的钢琴的琴键上时，用户弹奏该钢琴琴键则分数增加，当所述虚拟可视的钢琴音符掉落至对应的钢琴的琴键上后用户仍未能弹奏该钢琴琴键则分数不变；在弹奏的过程中显示分数的变化，并在弹奏结束后显示最终的分数。
4.根据权利要求3所述的设备，其特征在于，还包括通信模块，所述通信模块用于从服务器获取所述标准钢琴文件。
5.一种钢琴，其特征在于，包括如权利要求3或4所述的基于增强现实的钢琴教学设备。
CN201611169359.7A 2016-12-16 2016-12-16 一种基于增强现实的钢琴教学方法、设备及钢琴 Active CN108205946B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611169359.7A CN108205946B (zh) 2016-12-16 2016-12-16 一种基于增强现实的钢琴教学方法、设备及钢琴

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611169359.7A CN108205946B (zh) 2016-12-16 2016-12-16 一种基于增强现实的钢琴教学方法、设备及钢琴

Publications (2)

Publication Number Publication Date
CN108205946A CN108205946A (zh) 2018-06-26
CN108205946B true CN108205946B (zh) 2022-07-15

Family

ID=62601633

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611169359.7A Active CN108205946B (zh) 2016-12-16 2016-12-16 一种基于增强现实的钢琴教学方法、设备及钢琴

Country Status (1)

Country Link
CN (1) CN108205946B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109697918B (zh) * 2018-12-29 2021-04-27 深圳市掌网科技股份有限公司 一种基于增强现实的打击乐器体验***
CN109493686B (zh) * 2018-12-29 2021-03-30 深圳市掌网科技股份有限公司 一种基于混合现实的钢琴训练***及方法
CN110689866A (zh) * 2019-09-18 2020-01-14 江西昕光年智能科技有限公司 基于增强现实的小提琴辅助教学方法及***

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201984457U (zh) * 2011-04-26 2011-09-21 友碁科技股份有限公司 光学式键盘输入设备
CN102591464A (zh) * 2012-01-13 2012-07-18 吴岳忠 一种激光虚拟键盘
CN205541905U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有提示键位和评分功能的智能钢琴***

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101719366A (zh) * 2009-12-16 2010-06-02 德恩资讯股份有限公司 一种音乐符号与音谱记号的编辑及显示方法及伴唱机***
CN201994051U (zh) * 2010-08-31 2011-09-28 朱海涛 一种键盘乐器辅助装置
CN103235641B (zh) * 2013-03-17 2016-08-03 浙江大学 一种6维度感官交互的虚拟键盘乐器***及其实现方法
CN104217625B (zh) * 2014-07-31 2017-10-03 合肥工业大学 一种基于增强现实技术的钢琴辅助学习***
CN204596404U (zh) * 2015-04-30 2015-08-26 周友仁 一种钢琴弹奏采集器
CN205594300U (zh) * 2016-05-13 2016-09-21 余思宇 虚拟钢琴投影装置
CN106205280B (zh) * 2016-09-07 2022-06-07 广州丰谱信息技术有限公司 一种交互式动态彩色形意释谱方法与乐器弹奏教练装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN201984457U (zh) * 2011-04-26 2011-09-21 友碁科技股份有限公司 光学式键盘输入设备
CN102591464A (zh) * 2012-01-13 2012-07-18 吴岳忠 一种激光虚拟键盘
CN205541905U (zh) * 2016-04-14 2016-08-31 安徽克洛斯威智能乐器科技有限公司 一种具有提示键位和评分功能的智能钢琴***

Also Published As

Publication number Publication date
CN108205946A (zh) 2018-06-26

Similar Documents

Publication Publication Date Title
US8383923B2 (en) System and method for musical game playing and training
US9472178B2 (en) Score-directed string retuning and gesture cueing in synthetic multi-string musical instrument
CN108205946B (zh) 一种基于增强现实的钢琴教学方法、设备及钢琴
CN108074439A (zh) 一种钢琴陪练设备及钢琴
US20210104169A1 (en) System and method for ai based skill learning
KR20160093131A (ko) 동작 기반 인터랙티브 서비스 방법 및 시스템
CN108074440A (zh) 一种钢琴演奏的纠错方法及***
CN108052277A (zh) 一种ar定位学习方法和装置
CN111028615A (zh) 智能化乐器演奏教学方法、***及存储介质
Marky et al. Let’s frets! Assisting guitar students during practice via capacitive sensing
CN111259863A (zh) 弹奏手型检测/展示方法、介质、钢琴、终端及服务端
CN101604486A (zh) 基于计算机语音识别技术的乐器弹奏跟练方法
Radecki et al. Interactive sonification of images in serious games as an education aid for visually impaired children
CN110310528A (zh) 一种纸云互动语言教学***和方法
CN110718101A (zh) 一种基于虚拟现实技术和人工智能技术的教育***及方法
US11580868B2 (en) AR-based supplementary teaching system for guzheng and method thereof
Feng Design and research of music teaching system based on virtual reality system in the context of education informatization
KR20120034486A (ko) 음악교습에 사용되는 건반장치
CN103927907B (zh) 一种外语教具
US20140260903A1 (en) System, platform and method for digital music tutoring
Menzies et al. A digital bagpipe chanter system to assist in one-to-one piping tuition
US11996070B1 (en) Isolated guitar string audio capture and visual string indication and chord-finger number overlay process and system
Olmos et al. A high-fidelity orchestra simulator for individual musicians’ practice
CN111159433B (zh) 一种内容定位方法及电子设备
KR20130058384A (ko) 휴대용 드럼연주시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant