CN105845119B - 一种智能掌上乐器及演奏方法 - Google Patents
一种智能掌上乐器及演奏方法 Download PDFInfo
- Publication number
- CN105845119B CN105845119B CN201610312748.4A CN201610312748A CN105845119B CN 105845119 B CN105845119 B CN 105845119B CN 201610312748 A CN201610312748 A CN 201610312748A CN 105845119 B CN105845119 B CN 105845119B
- Authority
- CN
- China
- Prior art keywords
- finger
- palm
- musical instrument
- angle
- data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 37
- 238000006073 displacement reaction Methods 0.000 claims abstract description 54
- 238000005452 bending Methods 0.000 claims description 51
- 230000000694 effects Effects 0.000 claims description 5
- 238000004891 communication Methods 0.000 abstract description 23
- 238000004088 simulation Methods 0.000 abstract description 6
- 210000003811 finger Anatomy 0.000 description 218
- 238000010586 diagram Methods 0.000 description 10
- 230000001174 ascending effect Effects 0.000 description 8
- 210000004936 left thumb Anatomy 0.000 description 8
- 210000003813 thumb Anatomy 0.000 description 7
- 210000004935 right thumb Anatomy 0.000 description 5
- 210000004712 air sac Anatomy 0.000 description 4
- 210000004932 little finger Anatomy 0.000 description 2
- 210000003205 muscle Anatomy 0.000 description 2
- 230000004397 blinking Effects 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 210000004934 left little finger Anatomy 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000004933 right little finger Anatomy 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10H—ELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
- G10H7/00—Instruments in which the tones are synthesised from a data store, e.g. computer organs
- G10H7/002—Instruments in which the tones are synthesised from a data store, e.g. computer organs using a common processing for different operations or calculations, and a set of microinstructions (programme) to control the sequence thereof
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Acoustics & Sound (AREA)
- Multimedia (AREA)
- Electrophonic Musical Instruments (AREA)
- Auxiliary Devices For Music (AREA)
Abstract
本发明公开了一种智能掌上乐器,包括手掌壳体,手掌壳体上设置有处理器、角度传感器、五个手指姿态传感器及无线通信模块;处理器分别与角度传感器、五个手指姿态传感器及无线通信模块接;手指姿态传感器包括气囊,气囊内设置有气体压力传感器,气囊位于手掌壳体的手心侧,且靠近手指根部;或者手指姿态传感器包括直线位移传感器,直线位移传感器的连杆连接有拉绳,拉绳另一端固定在智能掌上乐器的指套上,直线位移传感器位于手掌壳体的手背侧,且靠近手指根部。本发明还同时公开了一种智能掌上乐器演奏方法。本发明所提供方案实现了模拟多种传统乐器,方便携带。
Description
技术领域
本发明涉及智能乐器技术领域,尤其涉及一种智能掌上乐器及演奏方法。
背景技术
人们常使用乐器演奏乐曲,从而来表达、交流思想感情。但传统乐器存在如下缺点:功能单一,如钢琴通常仅能作为钢琴使用、吉他也仅能作为吉他使用;携带不方便,如钢琴、吉他等乐器尺寸较大。
发明内容
有鉴于此,本发明实施例期望提供一种智能掌上乐器及演奏方法,以实现模拟多种传统乐器,方便携带。
为达到上述目的,本发明的技术方案是这样实现的:
一种智能掌上乐器,包括手掌壳体,所述手掌壳体上设置有处理器、角度传感器、五个手指姿态传感器及无线通信模块;所述处理器分别与所述角度传感器、五个所述手指姿态传感器及所述无线通信模块接;
所述手指姿态传感器包括气囊,所述气囊内设置有气体压力传感器,所述气囊位于所述手掌壳体的手心侧,且靠近手指根部;或者
所述手指姿态传感器包括直线位移传感器,所述直线位移传感器的连杆连接有拉绳,所述拉绳另一端固定在所述智能掌上乐器的指套上,所述直线位移传感器位于所述手掌壳体的手背侧,且靠近手指根部。
进一步,所述智能掌上乐器还包括五个震动马达,所述震动马达与所述处理器连接,所述震动马达设置在所述智能掌上乐器的指套上。
进一步,所述手掌壳体上还设置有指示灯,所述指示灯与所述处理器连接。
本发明还公开了一种智能掌上乐器演奏方法,所述方法包括:
采集手指姿势数据及手掌角度值;
根据乐器类型及预设规则将所述手指姿势数据,及所述手掌角度值分别转换成音高数据及音区数据;
根据所述乐器类型播放所述音高数据及所述音区数据。
进一步,所述预设规则的设置过程包括:
将X轴方向上的不同空间区域设定为钢琴的不同音区;
将手指的弯曲角度小于第一角度阈值的手指姿势设定为手指按下钢琴白键;
将手指的弯曲角度大于所述第一角度阈值的手指姿势设定为手指按下钢琴黑键。
进一步,所述将X轴方向上的不同空间区域设定为钢琴的不同音区,包括:
将X轴方向上的左手活动区域按照预设角度划分为六个区域;将X轴方向上的右手活动区域按照预设角度划分为六个区域;
将所述左手活动区域的六个区域及所述右手活动区域的六个区域分别与钢琴的音区相对应;
其中,所述左手活动区域是指以左手肘为圆心左手臂为半径的扇形区域;所述右手活动区域是指以右手肘为圆心右手臂为半径的扇形区域。
进一步,所述预设规则的设置过程包括:
将Z轴方向上的不同空间区域设定为吉他的不同品位;
将左手单个手指或多个手指的弯曲角度均小于第二角度阈值的手指姿势设定为左手手指按下吉他的相应琴弦;
将右手单个手指或多个手指的弯曲角度均小于所述第二角度阈值的手指姿势设定为右手手指弹拨吉他的相应琴弦。
进一步,所述根据乐器类型及预设规则将所述手指姿势数据,及所述手掌角度值分别转换成音高数据及音区数据,包括:
根据所述手掌角度值及,左手活动区域的六个区域及右手活动区域的六个区域分别与钢琴音区的对应关系,确定手掌当前所在音区;
根据每个手指对应的气体压强值或位移值确定每个手指的弯曲角度;
根据每个手指的所述弯曲角度及第一角度阈值确定每个手指按下的琴键的类型;
根据所述手掌当前所在音区、所述琴键的类型及手指类型,获得通过手掌输入的音区数据及通过每个手指输入的音高数据。
进一步,所述根据乐器类型及预设规则将所述手指姿势数据,及所述手掌角度值分别转换成音高数据及音区数据,包括:
根据所述手掌角度值,及不同空间区域与吉他品位的对应关系,确定通过手掌输入的音区数据;
根据手指对应的气体压强值或位移值确定手指的弯曲角度;
根据左手手指的所述弯曲角度及第二角度阈值确定左手手指按下的琴弦;
根据右手手指的所述弯曲角度及第二角度阈值确定右手手指弹拨的琴弦;
根据所述左手手指按下的琴弦及所述右手手指弹拨的琴弦,获得通过手指输入的音高数据。
进一步,在所述根据所述乐器类型播放所述音高数据及所述音区数据之前,所述方法还包括:
将所述手指姿态数据转换成音量值;其中,不同的所述手指姿态数据代表不同的所述音量值;
所述根据所述乐器类型播放所述音高数据及所述音区数据,具体为:
根据所述乐器类型及所述音量值播放所述音高数据及所述音区数据。
进一步,在所述根据所述乐器类型播放所述音高数据及所述音区数据之前,所述方法还包括:
根据五个右手手指的所述手指姿态数据确定右手整体姿势;
根据所述右手整体姿势确定吉他演奏技巧;
所述根据所述乐器类型播放所述音高数据及所述音区数据,具体为:
根据吉他乐器播放所述音高数据、所述音区数据及所述吉他演奏技巧。
进一步,在所述根据所述乐器类型播放所述音高数据及所述音区数据之前,所述方法还包括:
通过震动马达提示手指需执行的动作;通过指示灯提示手掌需执行的动作。
本发明实施例提供的一种智能掌上乐器,包括手掌壳体,手掌壳体上设置有处理器、角度传感器、五个手指姿态传感器及无线通信模块;处理器分别与角度传感器、五个手指姿态传感器及无线通信模块接;手指姿态传感器包括气囊,气囊内设置有气体压力传感器,气囊位于手掌壳体的手心侧,且靠近手指根部;或者手指姿态传感器包括直线位移传感器,直线位移传感器的连杆连接有拉绳,拉绳另一端固定在智能掌上乐器的指套上,直线位移传感器位于手掌壳体的手背侧,且靠近手指根部。如此,能实现模拟多种传统乐器,方便携带及使用;可与终端设备连接,通过终端设备播放使用智能掌上乐器演奏的乐曲。
本发明实施例还提供的一种智能掌上乐器奏方法,采集手指姿势数据及手掌角度值;根据乐器类型及预设规则将手指姿势数据,及手掌角度值分别转换成音高数据及音区数据;根据乐器类型播放音高数据及音区数据。如此,能实现模拟多种传统乐器,方便使用。
附图说明
图1为本发明实施例提供的一种智能掌上乐器的结构示意图;
图2为本发明提供的一种智能掌上乐器具体实施例一的结构示意图;
图3为本发明提供的一种智能掌上乐器具体实施例一中手掌壳体1手心侧的结构示意图;
图4为本发明提供的一种智能掌上乐器具体实施例二的结构示意图;
图5为本发明提供的一种智能掌上乐器具体实施例二中手掌壳体1手背侧的结构示意图;
图6为本发明实施例提供的一种智能掌上乐器演奏方法的流程示意图;
图7为本发明实施例提供的一种智能掌上乐器演奏方法中钢琴音区对应的空间区域的示意图;
图8为本发明实施例提供的一种智能掌上乐器演奏方法中吉他品位对应的空间区域的示意图。
具体实施方式
下面结合附图和具体实施例,对本发明进一步详细说明。
图1为本发明实施例提供的一种智能掌上乐器的结构示意图,如图1所示,该智能掌上乐器包括手掌壳体1,手掌壳体1上设置有处理器2、角度传感器3、五个手指姿态传感器4及无线通信模块5;处理器2分别与角度传感器3、五个手指姿态传感器4及无线通信模块5连接;手指姿态传感器4包括气囊,气囊内设置有气体压力传感器,气囊位于手掌壳体的手心侧,且靠近手指根部;或者手指姿态传感器4包括直线位移传感器,直线位移传感器的连杆连接有拉绳,拉绳另一端固定在智能掌上乐器的指套上,直线位移传感器位于手掌壳体的手背侧,且靠近手指根部。
需说明的是,本发明实施例提供的智能掌上乐器可以分为,左手智能掌上乐器及右手智能掌上乐器。
具体地,所述左手智能掌上乐器与右手智能掌上乐器结构可以相同,在此种情况下,上述所述无线通信模块可以为蓝牙模块或WIFI模块,左手智能掌上乐器通过蓝牙模块或WIFI模块与终端设备无线连接,右手智能掌上乐器也通过蓝牙模块或WIFI模块与终端设备无线连接。
具体地,所述左手智能掌上乐器与右手智能掌上乐器结构也可以不相同,其区别之处在于,左手智能掌上乐器包括两个无线通信模块,一个无线通信模块为蓝牙模块或WIFI模块,另一个无线通信模块为射频RF(Radio Freqency)模块;右手智能掌上乐器包括一个无线通信模块,该无线通信模块为射频RF模块。左手智能掌上乐器与右手智能掌上乐器通过射频RF模块无线连接,左手智能掌上乐器与终端设备通过蓝牙模块或WIFI模块无线连接。
具体地,所述左手智能掌上乐器与右手智能掌上乐器结构也可以不相同,其区别之处在于,右手智能掌上乐器包括两个无线通信模块,一个无线通信模块为蓝牙模块或WIFI模块,另一个无线通信模块为射频RF模块;左手智能掌上乐器包括一个无线通信模块,该无线通信模块为射频RF模块。右手智能掌上乐器与左手智能掌上乐器通过射频RF模块无线连接,右手智能掌上乐器与终端设备通过蓝牙模块或WIFI模块无线连接。
具体地,上述所述终端设备可以为手机或者平板电脑等终端。
图2为本发明提供的一种智能掌上乐器具体实施例一的结构示意图,如图2所示,该智能掌上乐器包括手掌壳体1,手掌壳体1上设置有处理器2、角度传感器3、五个手指姿态传感器4及无线通信模块5;处理器2分别与角度传感器3、五个手指姿态传感器4及无线通信模块5连接;手指姿态传感器4包括气囊401,气囊401内设置有气体压力传感器402,如图3所示,气囊401位于手掌壳体1的手心侧,且靠近手指根部。
具体地,所述手掌壳体1整体呈环状可以套在手掌上。
具体地,所述处理器2可以为中央处理器(Central Processing Unit,CPU)或微处理器(Micro Processor Unit,MPU)等处理器;所述处理器2可以位于手掌壳体1的手心处。
具体地,所述角度传感器3可以位于手掌壳体1的手心处。从而可以通过角度传感器测量出手掌当前所处的空间位置,进而在不同空间区域代表不同音区的情况下,可以通过角度传感器确定出手掌当前所在的音区。
如角度传感器3位于手掌壳体1的手心处,在手掌壳体1的手心侧朝下时,角度度传感器3可以测量出手掌壳体1在X轴方向上的不同角度;在手掌壳体1的手心侧朝左或右时,角度度传感器3可以测量出手掌壳体1在Z轴方向上的不同角度。
具体地,五个所述气体压力传感器402分别与处理器2连接。具体地,如图3所示,五个气囊401分别与五个手指对应;如第一个气囊4011位于手掌壳体1的手心侧,且在用户手掌带上手掌壳体1后,第一个气囊4011靠近拇指根部;第二个气囊4012位于手掌壳体1的手心侧,且在用户手掌带上手掌壳体1后,第二个气囊4012靠近食指根部;第三个气囊4013位于手掌壳体1的手心侧,且在用户手掌带上手掌壳体1后,第三个气囊4013靠近中指根部;第四个气囊4014位于手掌壳体1的手心侧,且在用户手掌带上手掌壳体1后,第四个气囊4014靠近无名指根部;第五个气囊4015位于手掌壳体1的手心侧,且在用户手掌带上手掌壳体1后,第五个气囊4015靠近小指根部。
具体地,在手指弯曲时,手指第一节指骨上的肌肉即会按压到气囊401,使得气囊401产生形变,气囊401内气体的压强发生变化,气囊401内气体压力传感器402输出的气体压强值发生变化。如在食指弯曲时,食指第一节指骨上的肌肉即会按压到靠近食指根部的气囊401,使得该气囊401产生形变,该气囊401内气体的压强值发生变化,该气囊401内气体压力传感器402输出的气体压强值发生变化。其中,所述第一节指骨是指靠近手指根部的指骨。从而可以测量出手指的姿势,如手指是否弯曲及手指的弯曲角度。
进一步地,如图2所示,所述智能掌上乐器还包括五个震动马达6,五个震动马达6分别与处理器2连接,震动马达6设置在智能掌上乐器的指套上。具体地,所述智能掌上乐器包括五个指套,每个指套上设置一个震动马达。从而可以通过震动马达的震动来提示用户手指需执行演奏操作。
如在实际应用中,在用户不懂乐器乐理,且期望通过智能掌上乐器来演奏乐曲的情况下,智能掌上乐器的处理器可以通过控制震动马达震动,来提示用户当前时刻哪个手指应该执行演奏操作,如哪个手指应该弯曲。从而使得不懂得乐器乐理的用户也可以通过智能掌上乐器演奏乐曲。
进一步地,如图2所示,所述手掌壳体1上还设置有指示灯7,指示灯7与处理器2连接。
具体地,在所述手掌壳体1的手心侧可以设置指示灯7,且可以设置多个指示灯7。从而可以在将Z轴方向上的不同空间区域作为吉他乐器的不同品位的情况下,通过不同指示灯来提示用户当前手掌应该执行的演奏操作,如手掌应该移动至相应品位对应的空间区域。
具体地,在所述手掌壳体1的手背侧也可以设置指示灯7,且可以设置多个指示灯7。从而可以在将X轴方向上的不同空间区域作为钢琴乐器的不同音区的情况下,通过不同指示灯来提示用户当前手掌应该执行的演奏操作,如手掌应该移动至相应音区对应的空间区域。
本实施例提供的智能掌上乐器的工作原理如下:
角度传感器3,用于测量带有手掌壳体1的手掌的角度值;气体压力传感器402,用于测量气囊401内的气体压强值;处理器2,用于采集手掌的角度值及气体压强值,通过无线通信模块5发送给终端设备;还用于控制震动马达6震动,及控制指示灯7闪烁。
在实际使用中,用户可以左手带左手智能掌上乐器,右手带右手智能掌上乐器,手掌壳体1套在手掌上,将指套套在手指上,通过移动手掌及弯曲手指按压气囊401来演奏乐曲;或者根据指示灯7的闪烁移动手掌,根据震动马达6的震动弯曲手指按压气囊401来演奏乐曲。
从而能实现模拟多种传统乐器,方便携带及使用;可与终端设备连接,通过终端设备播放使用智能掌上乐器演奏的乐曲。
图4为本发明提供的一种智能掌上乐器具体实施例二的结构示意图,如图4所示,该智能掌上乐器包括手掌壳体1,手掌壳体1上设置有处理器2、角度传感器3、五个手指姿态传感器4及无线通信模块5;处理器2分别与角度传感器3、五个手指姿态传感器4及无线通信模块5连接;手指姿态传感器4包括直线位移传感器8,如图5所示,直线位移传感器8的连杆9连接有拉绳10,拉绳10另一端固定在智能掌上乐器的指套11上,直线位移传感器8位于手掌壳体1的手背侧,且靠近手指根部。
具体地,所述手掌壳体1整体呈环状可以套在手掌上。
具体地,所述处理器2可以为CPU或MPU等处理器;所述处理器2可以位于手掌壳体1的手心处。
具体地,所述角度传感器3可以位于手掌壳体1的手心处。从而可以通过角度传感器测量出手掌当前所处的空间位置,进而在不同空间区域代表不同音区的情况下,可以通过角度传感器确定出手掌当前所在的音区。
如角度传感器3位于手掌壳体1的手心处,在手掌壳体1的手心侧朝下时,角度度传感器3可以测量出手掌壳体1在X轴方向上的不同角度;在手掌壳体1的手心侧朝左或右时,角度度传感器3可以测量出手掌壳体1在Z轴方向上的不同角度。
具体地,五个所述直线位移传感器8的信号线分别与处理器2连接。具体地,五个直线位移传感器8分别与五个手指对应;如第一个直线位移传感器8位于手掌壳体1的手背侧,且在用户手掌带上手掌壳体1后,直线位移传感器8的连杆9末端靠近拇指根部;第二个直线位移传感器8位于手掌壳体1的手背侧,且在用户手掌带上手掌壳体1后,其连杆9末端靠近食指根部;第三直线位移传感器8位于手掌壳体的手背侧,且在用户手掌带上手掌壳体1后,其连杆9末端靠近中指根部;第四个直线位移传感器8位于手掌壳体的手背侧,且在用户手掌带上手掌壳体1后,其连杆9末端靠近无名指根部;第五个直线位移传感器8位于手掌壳体1的手背侧,且在用户手掌带上手掌壳体1后,其连杆9末端靠近小指根部。
具体地,在手指弯曲时,指套11牵拉拉绳10,拉绳10牵拉直线位移传感器8的连杆9,连杆9移动,直线位移传感器8输出的位移值发生变化。如在食指弯曲时,食指的指套11牵拉与其连接的拉绳10,该拉绳10牵拉与食指对应的直线位移传感器8的连杆9,该连杆9移动,该直线位移传感器8输出的位移值发生变化。从而可以测量出手指的姿势,如手指是否弯曲及手指的弯曲程度。
进一步地,如图4所示,所述智能掌上乐器还包括五个震动马达6,五个震动马达6分别与处理器4连接,震动马达6设置在智能掌上乐器的指套11上。具体地,所述智能掌上乐器包括五个指套11,每个指套11上设置一个震动马达6。从而可以通过震动马达的震动来提示用户手指需执行演奏操作。
如在实际应用中,在用户不懂乐器乐理,且期望通过智能掌上乐器来演奏乐曲的情况下,智能掌上乐器的处理器可以通过控制震动马达震动,来提示用户当前时刻哪个手指应该执行演奏操作,如哪个手指应该弯曲。从而使得不懂得乐器乐理的用户也可以通过智能掌上乐器演奏乐曲。
进一步地,如图4所示,所述手掌壳体1上还设置有指示灯7,指示灯7与处理器2连接。
具体地,在所述手掌壳体1的手心侧可以设置指示灯7,且可以设置多个指示灯7。从而可以在将Z轴方向上的不同空间区域作为吉他乐器的不同品位的情况下,通过不同指示灯来提示用户当前手掌应该执行的演奏操作,如手掌应该移动至相应品位对应的空间区域。
具体地,在所述手掌壳体1的手背侧也可以设置指示灯7,且可以设置多个指示灯7。从而可以在将X轴方向上的不同空间区域作为钢琴乐器的不同音区的情况下,通过不同指示灯来提示用户当前手掌应该执行的演奏操作,如手掌应该移动至相应音区对应的空间区域。
本实施例提供的智能掌上乐器的工作原理如下:
角度传感器3,用于测量带有手掌壳体1的手掌的角度值;直线位移传感器8,用于测量手指的位移值;处理器2,用于采集手掌的角度值及手指的位移值,通过无线通信模块5发送给终端设备;还用于控制震动马达6震动,及控制指示灯7闪烁。
在实际使用中,用户可以左手带左手智能掌上乐器,右手带右手智能掌上乐器,手掌壳体1套在手掌上,将指套11套在手指上,通过移动手掌及弯曲手指拉动直线位移传感器8的连杆9来演奏乐曲;或者根据指示灯7的闪烁移动手掌,根据震动马达6的震动弯曲手指拉动直线位移传感器8的连杆9来演奏乐曲。
从而能实现模拟多种传统乐器,方便携带及使用;可与终端设备连接,通过终端设备播放使用智能掌上乐器演奏的乐曲。
图6为本发明实施例提供的一种智能掌上乐器演奏方法的流程示意图,如图6所示,该方法包括:
步骤101:采集手指姿势数据及手掌角度值。
具体地,本步骤可以为,终端设备采集手指姿势数据及手掌角度值。
具体地,本步骤可以包括,智能掌上乐器的处理器采集其手指姿势传感器输出的手指姿势数据,及其角度传感器输出的手掌角度值;该处理器将采集到的手指姿势数据及手掌角度值发送给终端设备;终端设备接收该手指姿势数据及手掌角度值。
其中,所述终端设备可以为手机或者平板电脑等终端。所述手指姿势数据可以为智能掌上乐器的气体压力传感器输出的气体压强值;或者为智能掌上乐器的直线位移传感器输出的位移值。
步骤102:根据乐器类型及预设规则将手指姿势数据,及手掌角度值分别转换成音高数据及音区数据。
具体地,本步骤可以为,终端设备根据乐器类型及预设规则将手指姿势数据,及手掌角度值分别转换成音高数据及音区数据。
需说明的是,在未设置预设规则的情况下,在步骤101之前,本发明实施例提供的智能掌上乐器演奏方法还包括,终端设备设置预设规则。
具体地,所述预设规则的设置过程可以包括:终端设备将X轴方向上的不同空间区域设定为钢琴的不同音区;终端设备将手指的弯曲角度小于第一角度阈值的手指姿势设定为手指按下钢琴白键;终端设备将手指的弯曲角度大于第一角度阈值的手指姿势设定为手指按下钢琴黑键。其中,所述第一角度阈值可以根据实际需求进行设置。
具体地,所述终端设备将X轴方向上的不同空间区域设定为钢琴的不同音区,可以包括,终端设备将X轴方向上的左手活动区域按照预设角度划分为六个区域;终端设备将X轴方向上的右手活动区域按照预设角度划分为六个区域;终端设备将左手活动区域的六个区域及右手活动区域的六个区域分别与钢琴的音区相对应;其中,所述左手活动区域是指以左手肘为圆心左手臂为半径的扇形区域;所述右手活动区域是指以右手肘为圆心右手臂为半径的扇形区域。即将钢琴五十二个白键及三十六个黑键分为十二组,每组五个白键分别对应手掌五个手指。
具体地,如图7所示,所述左手活动区域50的角度为六十度,右手活动区域51的角度也为六十度,所述预设角度可以为十度。左手活动区域50的第一个区域501对应钢琴的小字组,具体对应钢琴小字组的BAGFE共五个白键,及该组的升A或降B黑键、升G或降A黑键、升F或降G黑键及升D或降E黑键共四个黑键;左手活动区域50的第二个区域502对应钢琴的小字组及大字组,具体对应钢琴小字组的DC白键及大字组BAG白键共五个白键,及小字组的升D或降E黑键、升C或降D黑键,及大字组的升A或降B黑键、升G或降A黑键及升F或降G共五个黑键;左手活动区域50的第三个区域503、第四个区域504、第五个区域505、第六个区域506与钢琴音区琴键的对应关系可以依次类推。
右手活动区域51的第一个区域511对应钢琴的小字一组,具体对应钢琴小字一组的CDEFG共五个白键,及该组的升C或降D黑键、升D或降E黑键、升F或降G黑键及升G或降A黑键共四个黑键;右手活动区域51的第二个区域512对应钢琴的小字一组及小字二组,具体对应钢琴小字一组的AB白键及小字二组CDE白键共五个白键,及小字一组的升G或降A黑键、升A或降B黑键,小字二组的升C或降D黑键及升D或降E黑键共四个黑键;右手活动区域51的第三个区域513、第四个区域514、第五个区域515及第六个区域516与钢琴音区琴键的对应关系可以依次类推。
需说明的是,左手活动区域的角度、右手活动区域的角度及预设角度可以根据实际需求进行设定,如左手活动区域的角度或者为一百二十度,右手活动区域的角度或者为一百二十度,预设角度或者为二十度。
具体地,所述预设规则的设置过程还可以包括:终端设备将Z轴方向上的不同空间区域设定为吉他的不同品位;终端设备将左手单个手指或多个手指弯曲角度均小于第二角度阈值的手指姿势设定为左手手指按下吉他的相应琴弦;终端设备将右手单个手指或多个手指弯曲角度均小于第二角度阈值的手指姿势设定为右手手指弹拨吉他的相应琴弦。
如图8所示,Z轴方向上每隔二十度的一个空间区域代表吉他的一个品位,从上至下依次为吉他的一品位81至吉他的十二品位82,在实际应用中,该角度可以根据实际需求进行设置。
具体地,左手手指姿势与琴弦对应关系如可以为,左手拇指弯曲角度小于第二角度阈值的手指姿势代表按下吉他一弦;左手拇指和食指弯曲角度均小于该阈值的手指姿势代表按下吉他二弦;左手食指弯曲角度小于该阈值的手指姿势代表按下吉他三弦;左手中指弯曲角度小于该阈值的手指姿势代表按下吉他四弦;左手无名指弯曲角度小于该阈值的手指姿势代表按下吉他五弦;左手小指弯曲角度小于该阈值的手指姿势代表按下吉他六弦。
具体地,右手手指姿势与琴弦对应关系如可以为,右手拇指弯曲角度小于第二角度阈值的手指姿势代表弹拨吉他一弦;右手拇指和食指弯曲角度均小于该阈值的手指姿势代表弹拨吉他二弦;右手食指弯曲角度小于该阈值的手指姿势代表弹拨吉他三弦;右手中指弯曲角度小于该阈值的手指姿势代表弹拨吉他四弦;右手无名指弯曲角度小于该阈值的手指姿势代表弹拨吉他五弦;右手小指弯曲角度小于该阈值的手指姿势代表弹拨吉他六弦。
具体地,所述乐器类型可以为钢琴乐器或者吉他乐器。
具体地,本步骤102可以包括,终端设备根据乐器类型确定该乐器类型对应的预设规则;终端设备按照乐器类型对应的预设规则,将手指姿势数据及手掌角度值分别转换成音高数据及音区数据。
具体地,所述终端设备按照乐器类型对应的预设规则,将手指姿势数据及手掌角度值分别转换成音高数据及音区数据,可以包括,终端设备根据手掌角度值及,左手活动区域的六个区域及右手活动区域的六个区域分别与钢琴音区的对应关系,确定手掌当前所在音区;终端设备根据每个手指对应的气体压强值或位移值确定每个手指的弯曲角度;终端设备根据每个手指的弯曲角度及第一角度阈值确定每个手指按下的琴键的类型;终端设备根据手掌当前所在音区、琴键的类型及手指类型,获得通过手掌输入的音区数据及通过每个手指输入的音高数据。
需说明的是,手指的弯曲角度不同,智能掌上乐器的气体压力传感器或直线位移传感器输出的气体压强值或位移值也不同,从而可以根据手指对应的气体压强值或位移值确定出手指的弯曲角度。钢琴对应的预设规则中包括将手指的弯曲角度小于第一角度阈值的手指姿势设定为手指按下钢琴白键;将手指的弯曲角度大于第一角度阈值的手指姿势设定为手指按下钢琴黑键,从而可以根据手指的弯曲角度及第一角度阈值确定手指按下的琴键的类型。
需说明的是,所述手指类型可以为左手拇指、右手拇指、左手食指、右手食指、左手中指、右手中指、左手无名指、右手无名指、左手小指或右手小指。
具体地,如终端设备根据手掌角度值及,左手活动区域的六个区域及右手活动区域的六个区域分别与钢琴音区的对应关系,确定的手掌当前所在音区可以为小字组;终端设备根据左手拇指的弯曲角度及第一角度阈值,确定的左手拇指按下的琴键的类型可以为白键;则终端设备根据小字组、白键及左手拇指获得通过手掌输入的音区数据为中音区,通过左手拇指输入的音高数据为si。
如终端设备根据手掌角度值及,左手活动区域的六个区域及右手活动区域的六个区域分别与钢琴音区的对应关系,确定的手掌当前所在音区可以为小字组及大字组;终端设备根据左手中指的弯曲角度及第一角度阈值,确定的左手中指按下的琴键的类型可以为白键;则终端设备根据小字组及大字组、白键及左手中指获得通过手掌输入的音区数据为低音区,通过左手中指输入的音高数据为si。
具体地,所述终端设备按照乐器类型对应的预设规则,将手指姿势数据及手掌角度值分别转换成音高数据及音区数据,或者可以包括,终端设备根据手掌角度值,及不同空间区域与吉他品位的对应关系,确定通过手掌输入的音区数据;终端设备根据手指对应的气体压强值或位移值确定手指的弯曲角度;终端设备根据左手手指的弯曲角度及第二角度阈值确定左手手指按下的琴弦;终端设备根据右手手指的弯曲角度及第二角度阈值确定右手手指弹拨的琴弦;终端设备根据左手手指按下的琴弦及右手手指弹拨的琴弦,获得通过手指输入的音高数据。
如终端设备根据手掌角度值,及不同空间区域与吉他品位的对应关系,确定出的通过手掌输入的音区数据,可以为吉他的一品位、二品位或三品位等;终端设备根据左手手指的弯曲角度及第二角度阈值确定的左手手指按下的琴弦,可以为吉他的一弦、二弦或三弦等;终端设备根据右手手指的弯曲角度及第二角度阈值确定的右手手指弹拨的琴弦,可以为吉他的一弦、二弦或三弦等。
步骤103:根据乐器类型播放音高数据及音区数据。
具体地,本步骤可以为,终端设备根据乐器类型播放通过手掌输入的音高数据,及通过手指输入的音区数据。
如终端设备播放钢琴的中音do,或者播放吉他的中音do。
需说明的是,为了更好地模拟乐器,在步骤103之前,本发明提供的智能掌上乐器演奏方法还可以包括,终端设备将手指姿态数据转换成音量值;其中,不同的手指姿态数据代表不同的音量值。
具体地,如由于终端设备将手指的弯曲角度小于第一角度阈值的手指姿势设定为手指按下钢琴白键,因此对于钢琴白键的音量,终端设备可以用小于第一角度阈值的不同手指弯曲角度代表不同的白键音量值。如第一角度阈值为九十度,则手指弯曲一至八十九度可以代表不同的白键音量值。钢琴黑键的音量值及吉他的音量值可以与上述类似。
具体地,步骤103可以为,终端设备根据乐器类型及音量值播放音高数据及音区数据。
需说明的是,为了更好地模拟吉他乐器,在步骤103之前,本发明提供的智能掌上乐器演奏方法还可以包括,终端设备根据五个右手手指的指姿态数据确定右手整体姿势;终端设备根据右手整体姿势确定吉他演奏技巧。如在右手五个手指均弯曲时,终端设备确定右手整体姿势为握拳,并确定通过右手输入了扫弦技巧。
具体地,步骤103可以为,终端设备根据吉他乐器播放音高数据、音区数据及吉他演奏技巧。
需说明的是,为了使得不懂乐器乐理的用户,也可以使用智能掌上乐器演奏乐曲,在步骤103之前,本发明提供的智能掌上乐器演奏方法还可以包括,智能掌上乐器的处理器通过震动马达提示手指需执行的动作;智能掌上乐器的处理器通过指示灯提示手掌需执行的动作。
如通过智能掌上乐器演奏某吉他乐曲,在需通过左手手掌输入一品位的情况下,即可通过左手智能掌上乐器上的指示灯提示用户将左手手掌移动至吉他一品位对应的Z轴方向上的空间区域;在需通过左手拇指输入按下一弦的情况下,即可通过左手智能掌上乐器的左手拇指指套上的震动马达震动提示用户将左手拇指弯曲小于第二角度阈值;在需通过右手拇指输入弹拨一弦的情况下,即可通过右手智能掌上乐器的右手拇指指套上的震动马达震动提示用户将右手拇指弯曲小于第二角度阈值。
从而能实现模拟多种传统乐器,方便使用。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化,本发明的保护范围以权利要求为准。
Claims (7)
1.一种智能掌上乐器演奏方法,其特征在于,所述方法包括:
采集手指姿势数据及手掌角度值;
根据乐器类型及预设规则将所述手指姿势数据,及所述手掌角度值分别转换成音高数据及音区数据;
根据所述乐器类型播放所述音高数据及所述音区数据;
所述根据乐器类型及预设规则将所述手指姿势数据,及所述手掌角度值分别转换成音高数据及音区数据,包括:
根据所述手掌角度值,及不同空间区域与吉他品位的对应关系,确定通过手掌输入的音区数据;
根据手指对应的气体压强值或位移值确定手指的弯曲角度;其中,所述气体压强值通过五个手指姿态传感器获得,所述手指姿态传感器包括气囊,所述气囊内设置有气体压力传感器,所述气囊位于手掌壳体的手心侧,且靠近手指根部;或者所述手指姿态传感器包括直线位移传感器,所述直线位移传感器的连杆连接有拉绳,所述拉绳另一端固定在智能掌上乐器的指套上,所述直线位移传感器位于所述手掌壳体的手背侧,且靠近手指根部;
根据左手手指的所述弯曲角度及第二角度阈值确定左手手指按下的琴弦;
根据右手手指的所述弯曲角度及第二角度阈值确定右手手指弹拨的琴弦;
根据所述左手手指按下的琴弦及所述右手手指弹拨的琴弦,获得通过手指输入的音高数据。
2.根据权利要求1所述的方法,其特征在于,所述预设规则的设置过程包括:
将Z轴方向上的不同空间区域设定为吉他的不同品位;
将左手单个手指或多个手指的弯曲角度均小于第二角度阈值的手指姿势设定为左手手指按下吉他的相应琴弦;
将右手单个手指或多个手指的弯曲角度均小于所述第二角度阈值的手指姿势设定为右手手指弹拨吉他的相应琴弦。
3.根据权利要求1所述的方法,其特征在于,在所述根据所述乐器类型播放所述音高数据及所述音区数据之前,所述方法还包括:
将所述手指姿态数据转换成音量值;其中,不同的所述手指姿态数据代表不同的所述音量值;
所述根据所述乐器类型播放所述音高数据及所述音区数据,具体为:
根据所述乐器类型及所述音量值播放所述音高数据及所述音区数据。
4.根据权利要求1所述的方法,其特征在于,在所述根据所述乐器类型播放所述音高数据及所述音区数据之前,所述方法还包括:
根据五个右手手指的所述手指姿态数据确定右手整体姿势;
根据所述右手整体姿势确定吉他演奏技巧;
所述根据所述乐器类型播放所述音高数据及所述音区数据,具体为:
根据吉他乐器播放所述音高数据、所述音区数据及所述吉他演奏技巧。
5.根据权利要求1所述的方法,其特征在于,在所述根据所述乐器类型播放所述音高数据及所述音区数据之前,所述方法还包括:
通过震动马达提示手指需执行的动作;通过指示灯提示手掌需执行的动作。
6.一种智能掌上乐器演奏方法,其特征在于,所述方法包括:
采集手指姿势数据及手掌角度值;
根据乐器类型及预设规则将所述手指姿势数据,及所述手掌角度值分别转换成音高数据及音区数据;
根据所述乐器类型播放所述音高数据及所述音区数据;
所述预设规则的设置过程包括:
将X轴方向上的不同空间区域设定为钢琴的不同音区;
将手指的弯曲角度小于第一角度阈值的手指姿势设定为手指按下钢琴白键;
将手指的弯曲角度大于所述第一角度阈值的手指姿势设定为手指按下钢琴黑键;
其中,所述手指的弯曲角度根据手指对应的气体压强值或位移值确定,所述气体压强值通过五个手指姿态传感器获得,所述手指姿态传感器包括气囊,所述气囊内设置有气体压力传感器,所述气囊位于手掌壳体的手心侧,且靠近手指根部;或者所述手指姿态传感器包括直线位移传感器,所述直线位移传感器的连杆连接有拉绳,所述拉绳另一端固定在智能掌上乐器的指套上,所述直线位移传感器位于所述手掌壳体的手背侧,且靠近手指根部。
7.根据权利要求6所述的方法,其特征在于,所述将X轴方向上的不同空间区域设定为钢琴的不同音区,包括:
将X轴方向上的左手活动区域按照预设角度划分为六个区域;将X轴方向上的右手活动区域按照预设角度划分为六个区域;
将所述左手活动区域的六个区域及所述右手活动区域的六个区域分别与钢琴的音区相对应;
其中,所述左手活动区域是指以左手肘为圆心左手臂为半径的扇形区域;所述右手活动区域是指以右手肘为圆心右手臂为半径的扇形区域。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610312748.4A CN105845119B (zh) | 2016-05-12 | 2016-05-12 | 一种智能掌上乐器及演奏方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201610312748.4A CN105845119B (zh) | 2016-05-12 | 2016-05-12 | 一种智能掌上乐器及演奏方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN105845119A CN105845119A (zh) | 2016-08-10 |
CN105845119B true CN105845119B (zh) | 2024-01-23 |
Family
ID=56591784
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201610312748.4A Active CN105845119B (zh) | 2016-05-12 | 2016-05-12 | 一种智能掌上乐器及演奏方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN105845119B (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN106328109A (zh) * | 2016-08-16 | 2017-01-11 | 北京千音互联科技有限公司 | 一种智能乐器的半智能及智能演奏方法 |
CN106205283B (zh) * | 2016-08-26 | 2019-09-20 | 北京千音互联科技有限公司 | 一种手戴式智能乐器演奏方法 |
WO2018068203A1 (en) * | 2016-10-11 | 2018-04-19 | Sunland Information Technology Co., Ltd. | A smart detecting and feedback system for smart piano |
CN109887481B (zh) * | 2019-02-01 | 2021-06-01 | 中央民族大学 | 电子琴演奏方法及装置 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006330136A (ja) * | 2005-05-24 | 2006-12-07 | Advanced Telecommunication Research Institute International | 表情付け音声発生装置 |
CN201194137Y (zh) * | 2007-10-26 | 2009-02-11 | 刘海宽 | 一种新型手语识别装置 |
CN102135794A (zh) * | 2010-01-26 | 2011-07-27 | 杨志雄 | 掌指互动变化的3d无线鼠标 |
TW201132388A (en) * | 2010-03-23 | 2011-10-01 | Hon Hai Prec Ind Co Ltd | Game glove |
CN102426477A (zh) * | 2011-08-09 | 2012-04-25 | 广东科学中心 | 一种手势侦测方法及侦测装置 |
CN103076895A (zh) * | 2012-12-31 | 2013-05-01 | 罗琮贵 | 手指键、液压键、键位切换装置和鼠标、键盘暨方法 |
CN204463536U (zh) * | 2015-01-05 | 2015-07-08 | 刘述亮 | 一种可识别手势的手套乐器 |
CN104850216A (zh) * | 2014-02-18 | 2015-08-19 | 太瀚科技股份有限公司 | 具有压力触觉感测器的手套 |
CN105575219A (zh) * | 2016-03-07 | 2016-05-11 | 钦赛勇 | 智能手套 |
CN205751507U (zh) * | 2016-05-12 | 2016-11-30 | 北京千音互联科技有限公司 | 一种智能掌上乐器 |
-
2016
- 2016-05-12 CN CN201610312748.4A patent/CN105845119B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006330136A (ja) * | 2005-05-24 | 2006-12-07 | Advanced Telecommunication Research Institute International | 表情付け音声発生装置 |
CN201194137Y (zh) * | 2007-10-26 | 2009-02-11 | 刘海宽 | 一种新型手语识别装置 |
CN102135794A (zh) * | 2010-01-26 | 2011-07-27 | 杨志雄 | 掌指互动变化的3d无线鼠标 |
TW201132388A (en) * | 2010-03-23 | 2011-10-01 | Hon Hai Prec Ind Co Ltd | Game glove |
CN102426477A (zh) * | 2011-08-09 | 2012-04-25 | 广东科学中心 | 一种手势侦测方法及侦测装置 |
CN103076895A (zh) * | 2012-12-31 | 2013-05-01 | 罗琮贵 | 手指键、液压键、键位切换装置和鼠标、键盘暨方法 |
CN104850216A (zh) * | 2014-02-18 | 2015-08-19 | 太瀚科技股份有限公司 | 具有压力触觉感测器的手套 |
CN204463536U (zh) * | 2015-01-05 | 2015-07-08 | 刘述亮 | 一种可识别手势的手套乐器 |
CN105575219A (zh) * | 2016-03-07 | 2016-05-11 | 钦赛勇 | 智能手套 |
CN205751507U (zh) * | 2016-05-12 | 2016-11-30 | 北京千音互联科技有限公司 | 一种智能掌上乐器 |
Also Published As
Publication number | Publication date |
---|---|
CN105845119A (zh) | 2016-08-10 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN105845119B (zh) | 一种智能掌上乐器及演奏方法 | |
Lu et al. | A hand gesture recognition framework and wearable gesture-based interaction prototype for mobile devices | |
US20190000354A1 (en) | Systems and methods for determining axial orientation and location of a user's wrist | |
CN103235642B (zh) | 一种6维度感官交互的虚拟乐器***及其实现方法 | |
CN110838286A (zh) | 一种模型训练的方法、语种识别的方法、装置及设备 | |
CN203953635U (zh) | 一种压力传感器组件及动脉搏动检测装置 | |
JP2016507851A (ja) | ジェスチャに基づいて制御するための筋活動センサ信号と慣性センサ信号とを結合する方法および装置 | |
CN108089798A (zh) | 终端显示控制方法、柔性屏终端及计算机可读存储介质 | |
CN105825842A (zh) | 一种智能掌上管笛类乐器、演奏***及方法 | |
CN107407961A (zh) | 计算机的手持式控制器、计算机的控制***和计算机*** | |
CN204147018U (zh) | 一种动脉搏动检测装置、压力传感器组件、智能腕带、智能手表和通信*** | |
CN205680441U (zh) | 一种虚拟演奏*** | |
CN102770830B (zh) | 输入设备、输入方法 | |
CN105096691A (zh) | 钢琴仿真学习设备及其使用方法 | |
CN103295570A (zh) | 一种手套式发声*** | |
CN211016498U (zh) | 手指乐器 | |
CN206021886U (zh) | 一种智能掌上管笛类乐器的吹嘴 | |
CN205751507U (zh) | 一种智能掌上乐器 | |
CN109887481B (zh) | 电子琴演奏方法及装置 | |
CN108231046B (zh) | 歌曲调性识别方法及装置 | |
US20120209560A1 (en) | Human machine interface device | |
CN206639582U (zh) | 一种体感架子鼓 | |
CN205792544U (zh) | 一种基于微型雷达的智能手环乐器 | |
CN109684501A (zh) | 歌词信息生成方法及其装置 | |
KR102397835B1 (ko) | 음악회상기법 기반 인지능력 향상 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |