CN111198613B - 一种利用生物电流的音乐控制装置及控制方法 - Google Patents

一种利用生物电流的音乐控制装置及控制方法 Download PDF

Info

Publication number
CN111198613B
CN111198613B CN202010065009.6A CN202010065009A CN111198613B CN 111198613 B CN111198613 B CN 111198613B CN 202010065009 A CN202010065009 A CN 202010065009A CN 111198613 B CN111198613 B CN 111198613B
Authority
CN
China
Prior art keywords
gesture
control chip
controller
interface
sending
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010065009.6A
Other languages
English (en)
Other versions
CN111198613A (zh
Inventor
张倩倩
阙周莹
苏靖璇
梁峭
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Jiangnan University
Original Assignee
Jiangnan University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Jiangnan University filed Critical Jiangnan University
Priority to CN202010065009.6A priority Critical patent/CN111198613B/zh
Publication of CN111198613A publication Critical patent/CN111198613A/zh
Application granted granted Critical
Publication of CN111198613B publication Critical patent/CN111198613B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H5/00Instruments in which the tones are generated by means of electronic generators
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10HELECTROPHONIC MUSICAL INSTRUMENTS; INSTRUMENTS IN WHICH THE TONES ARE GENERATED BY ELECTROMECHANICAL MEANS OR ELECTRONIC GENERATORS, OR IN WHICH THE TONES ARE SYNTHESISED FROM A DATA STORE
    • G10H2220/00Input/output interfacing specifically adapted for electrophonic musical tools or instruments
    • G10H2220/155User input interfaces for electrophonic musical instruments
    • G10H2220/321Garment sensors, i.e. musical control means with trigger surfaces or joint angle sensors, worn as a garment by the player, e.g. bracelet, intelligent clothing
    • G10H2220/326Control glove or other hand or palm-attached control device

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • General Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Electrophonic Musical Instruments (AREA)

Abstract

一种利用生物电流的音乐控制装置及控制方法,其可通过手势实现人与音乐的交互,并可对音乐参数进行编辑或控制,其包括电极片、壳体、安装于壳体内部的控制芯片U1、手势控制模块,电极片贴装于植物叶片上,电极片与控制芯片U1电连接,控制芯片U1通过MIDI信号传输通道与控制器连接,手势控制模块包括手势传感器、Arduino Lilypad,控制芯片U1内设置有模数转换模块、比较模块,一种音频控制的方法,其包括以下步骤:变量初始化、获取植物叶片上的电位值、对电位值与预先设定的电位阈值进行比较、将电位值转化为MIDI信号、将MIDI数据输送给控制器、通过手势传感器检测手势动作、控制器根据手势动作控制音频的响度、振幅、压缩及混响。

Description

一种利用生物电流的音乐控制装置及控制方法
技术领域
本发明涉及人机交互技术领域,尤其涉及一种利用生物电流的音乐控制装置及控制方法。
背景技术
随着音频控制技术的发展,出现了通过触碰植物进行音乐演奏、丰富音乐创作的全新人机交互体验方式,公告号为CN106601219A的专利文献公开了一种用植物奏乐的乐器,其基于检测人触碰植物不同位置所产生的电信号变化、并将其转化为不同音频控制信号的***和方法,也就是通过触摸植物来播放不同频率的声音,其主要包括:植物盆、用于检测人触碰植物不同位置所产生的电信号变化的检测模块、用于输出电信号至所述检测模块,并根据电信号变化产生不同的音频控制信号的控制芯片U1、用于接收到控制芯片U1因人触碰植物不同位置而输出的音频控制信号并输出不同频率声音的音频播放模块,其还公开了一种用植物奏乐的乐器控制方法,其可以通过触摸植物来创作音乐的全新人机交互体验,触碰植物不同部位可以发出不同的频率的声音,然而此方法未能将电信号或音频控制信号转换为现代音乐制作人使用数字音乐工作站、电子乐器时频繁使用的MIDI信号、用户不能对声音的各项参数进行控制和调整,比如自由调整音调的高低、响度的大小;交互方式上依靠触摸植物的位置的变化来改变音高,但是音高和位置没有明确的逻辑对应关系,因此不便于用户判断;创作音乐时只能先录音再通过其他方法进行后期调整,对于音乐创作来说具有相当的局限性。
手势识别是计算机科学和语言技术中的一个主题,目的是通过数学算法来识别人类手势,手势可以源自任何身体运动或状态,但通常源自面部或手,本领域中的当前焦点包括来自面部和手势识别的情感识别,用户可以使用简单的手势来控制或与设备交互,而无需接触他们。从而在机器和人之间搭建比原始文本用户界面或甚至GUI(图形用户界面)更丰富的桥梁。An approach to natural gesture in virtual environment,pages 180-182. Gesture Based Interaction NUI: An Overview,pages 633-635.等文献都对此技术作了详细的介绍,手势识别使人们能够与机器(HMI)进行通信,并且无需任何机械设备即可自然交互,使用手势识别的概念,可以将手指指向计算机屏幕,使得光标将相应地移动,这可能使常规输入设备(如鼠标,键盘甚至触摸屏)变得冗余,将手势识别运用在电子音乐创作中具有创新性,这一方式能够让音乐人摆脱用一手操作键盘、另一手移动鼠标来创作数字音乐或用双手演奏单一乐器的局限性,让音乐人既能用单手完成操作传统机械旋钮的复杂指令,又能通过双手进行多个音轨、多种通道的协奏,使得音乐人在使用多种多样的设备进行创作时能更加灵活。但现阶段就用手势识别技术直接替代传统的交互手段,并不一定意味着高效和进步,手势识别技术的应用场景和与之相匹配的其他***的更新是这项技术能否带来交互变革的难点。
现有技术中还提供了一种将哼唱旋律转换为MIDI旋律的转换方法,公开号为CN105244021B,其采用一种基于相邻或间邻哼唱音符音程分析的哼唱旋律的调性分析法。即先估算实际哼唱相邻或间邻哼唱音符的音程,而后再在音程序列上估算哼唱旋律的调性。并由此建立期望哼唱旋律的估算模型。这种方法是将声音信号转为MIDI信号,涉及到语音识别或合成技术,通过分析语音后可得到估算的音调,让MIDI旋律匹配语音识别的结果的,但是植物电信号本身不包含声音信息,需要对数据进行分析和转换才能得到和谐的MIDI旋律。
又如公告号为CN206932773U的专利文献公开了一种智能植物音乐盆栽,其在花盆本体的内部底面上设有触摸传感器,触摸传感器用于采集植物被触摸信息,并将该信息传送给主控器,主控器根据收到的信息来控制扬声器,从而实现花盆能够随着碰触的节奏发出美妙的声音,提高用户体验,并且其在所述花盆本体的表面上设有七彩LED灯,在主控器的控制下,七彩LED灯能够跟随播放音乐的节奏闪烁,此发明是将对植物的触摸转化为音乐播放的开关,是一种和植物盆栽相结合的音乐播放器,无法达成人和音乐本身的交互。
发明内容
针对现有技术中存在的利用植物来演奏音乐的装置和设备在音乐参数上的不可编辑/不可控制性,以及交互方式局限性较大的问题,本发明提供了一种利用生物电流的音乐控制装置及控制方法,其可通过手势实现人与音乐的交互,并且在利用植物来演奏音乐时,可对音乐参数进行编辑或控制。
一种利用生物电流的音乐控制装置,其包括电极片,所述电极片与所述控制器连接,所述控制器还连接有音频输出装置、发光二极管LED,其特征在于,其还包括壳体、安装于壳体内部的控制芯片U1、手势控制模块,所述电极片贴装于植物叶片上,所述电极片用于采集并传输植物的电信号数据,所述电极片与控制芯片U1电连接,所述控制芯片U1通过MIDI信号传输通道与控制器连接,所述手势控制模块包括手势传感器、Arduino Lilypad,所述手势传感器通过所述Arduino Lilypad与所述控制器连接;所述控制芯片U1内设置有模数转换模块、比较模块,所述模数转换模块用于将所述电极片传输的电信号数据转换为音符数据,所述比较模块用于将电信号数据与预先设定的电位阈值进行对比。
其进一步特征在于,所述壳体上设置有音频接口U5、Arduino Lilypad接口U2、MIDI信号接口U4,所述音频接口U5一端与所述电极片电连接,所述音频接口U5另一端与所述控制芯片U1电连接,所述MIDI接口U4一端与所述控制芯片U1电连接,所述MIDI信号接口U4另一端与所述控制器电连接,所述Arduino Lilypad接口U2一端与所述手势传感器电连接,所述Arduino Lilypad接口U2另一端与所述控制器电连接;
所述MIDI信号传输通道为USB-MIDI线;
所述控制器为电脑、平板或手机;
所述MIDI信号传输通道的数量与所述手势的数量一致,所述手势控制模块包括八种手势,八种手势分别用于控制八个所述MIDI信号传输通道,八种所述手势分别为上、下、左、右、前、后、左翻转、右翻转,所述上、下手势分别用于实现音频响度增加、减弱,所述左、右手势分别用于实现音频振幅增强、减弱,所述前、后手势分别用于实现音频压缩升高、降低,所述左翻转、右翻转分别用于实现音频混响增加、减弱;
其还包括计时器芯片U3,所述计时器芯片U3通过导线分别连接发光二极管LED、所述控制芯片U1;
所述音频接口U5、Arduino Lilypad接口U2、MIDI信号接口U4、计时器芯片U3与所述控制芯片U1连接的电路包括电阻R1、R2、有源电容C1,所述音频接口U5的2端口分别连接电阻R2一端、计时器芯片U3的7管脚,所述音频接口U5的3端口连接所述计时器芯片U3的2、6管脚,所述电阻R2另一端分别连接所述计时器芯片U3的4、5管脚、电池BAT负极、控制芯片U1的7、20管脚、滑动电阻R3的3端口、Arduino Lilypad接口U2的1管脚、所述电阻R1一端,所述MIDI信号接口U4的1管脚连接所述控制芯片U1的1、2、3管脚,所述MIDI信号接口U4的2管脚连接所述电阻R1另一端,所述Arduino Lilypad接口U2的2管脚连接所述控制芯片U1的26管脚,所述Arduino Lilypad接口U2的3管脚连接所述控制芯片U1的25管脚,所述ArduinoLilypad接口U2的4管脚分别连接滑动电阻R3的1端口、控制芯片U1的22、8管脚电池BAT正极、所述发光二极管LED阴极、有源电容C1负极、计时器芯片U3的1管脚,所述滑动电阻R3的2端口连接所述控制芯片U1的23管脚,所述滑动电阻R3的3端口分别连接所述控制芯片U1的23管脚,所述计时器芯片U3的3管脚分别连接所述控制芯片U1的4管脚、发光二极管LED阳极。
所述控制芯片U1为ATMEGA 328芯片;
一种基于上述音乐控制装置实现音频控制的方法,其包括以下步骤:S1、变量初始化;其特征在于,其还包括以下步骤S2、通过电极片获取植物叶片上的电位值,并将该电位值发送给控制芯片U1;S3、通过控制芯片U1中的比较模块将步骤S2采集的电位值与预先设定的电位阈值进行比较;S4、通过控制芯片U1中的模数转换模块将电位值转化为MIDI信号;S5、通过MIDI信号传输通道将经步骤S4转换后的MIDI数据输送给控制器,并存储;S6、通过手势传感器检测手势动作,并通过Arduino Lilypad发送给控制器;S7,控制器根据手势动作控制音频的响度、振幅、压缩及混响;
其进一步特征在于,步骤S3包括以下具体内容:S31、当电位值在电位阈值范围内时,直接进入步骤S4;S32、当电位值超出电位阈值范围时,通过数据处理模块对电位值进行处理,将处理后获得的数据发送至步骤S3中进行再一次比较,直至电位值处理结果符合电位阈值范围,再进入步骤S4;
步骤S7包括以下具体内容:S71、如果手势动作为向上,通过手势传感器将该手势指令发送给Arduino Lilypad,Arduino Lilypad将相应的增加声音响度发送给控制器,如果手势动作为向下,Arduino Lilypad将相应的降低声音响度输送给控制器;
S72、如果手势动作为向左,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的增强声音振幅发送给控制器,如果手势动作为向右,Arduino Lilypad将相应的减弱声音振幅输送给控制器;
S73、如果手势动作为向前,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的升高声音压缩发送给控制器,如果手势动作为向后,Arduino Lilypad将相应的降低声音压缩输送给控制器;
S74、如果手势动作为向左翻转,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的增加声音混响发送给控制器,如果手势动作为向后,Arduino Lilypad将相应的减弱声音混响输送给控制器;
采用本发明的上述结构可以达到如下有益效果:本发明为音乐艺术家提供了一种全新的音乐拾取及音频编辑的交互方法,具体提出了将植物电信号转化为可在控制器上进行专业编辑的MIDI信号、并用手势来对数字化后的信号进行混音处理,用户只须将电极片贴在植物叶片上,灵活使用手势传感器就能体验专业人士混音、创作时的乐趣。用户在使用时通过电极片采集植物叶片上的电位值,即生物电流,并将该电位值传输给控制芯片,通过控制芯片内的比较模块将电位值与预先设定的阈值进行比较,通过模数转换模块将电位值转换为音符数据,并通过MIDI信号传输通道将音符数据发送给控制器,从而实现利用植物来演奏音乐;控制器还连接有手势控制模块,通过手势控制模块中的手势传感器获取手势动作,并通过Arduino Lilypad将手势动作转化为相应的音乐参数发送给控制器,从而实现对音乐参数的编辑或控制。
附图说明
图1为本发明的主视结构示意图;
图2为本发明的俯视结构示意图;
图3为本发明的***结构框图;
图4为本发明的电路原理图;
图5为本发明音乐控制方法的控制流程图。
具体实施方式
见图1、图2、图3,一种利用生物电流的音乐控制装置,其包括电极片1、壳体2、安装于壳体2内部的控制芯片U1、手势控制模块3、控制器4,控制器4还连接有音频输出装置5、发光二极管LED,电极片1贴装于植物叶片上,电极片1用于采集并传输植物的电信号数据,电极片1与控制芯片U1电连接,控制芯片U1通过MIDI信号传输通道与控制器连4接,手势控制模块3包括手势传感器31、Arduino Lilypad 32,手势传感器31通过Arduino Lilypad 32与控制器4连接;控制芯片U1内设置有模数转换模块61、比较模块62,模数转换模块61用于将电极片1传输的电信号数据转换为音符数据,比较模块62用于将电信号数据与预先设定的电位阈值进行对比。
壳体2上设置有音频接口U5、Arduino Lilypad接口U2、MIDI信号接口U4,音频接口U5一端与电极片1电连接,音频接口U5另一端与控制芯片U1电连接,MIDI接口U4一端与控制芯片U1电连接,MIDI信号接口U4另一端与控制器4电连接,Arduino Lilypad接口U2一端与手势传感器31电连接,Arduino Lilypad接口U2另一端与控制器4电连接,本实施例中控制器4为电脑,MIDI信号传输通道为USB-MIDI线,控制芯片U1为ATMEGA 328芯片;
MIDI信号传输通道的数量与手势的数量一致,手势控制模块包括八种手势,八种手势分别用于控制八个MIDI信号传输通道,八种手势分别为向上、向下、向左、向右、向前、向后、左翻转、右翻转,向上、向下手势分别用于实现音频响度增加、减弱,向左、向右手势分别用于实现音频振幅增强、减弱,向前、向后手势分别用于实现音频压缩升高、降低,左翻转、右翻转分别用于实现音频混响增加、减弱;
其还包括计时器芯片U3,计时器芯片U3通过导线分别连接发光二极管LED、控制芯片U1,本实施例中设置有若干个发光二极管LED,且发光二极管LED呈圆周状布置于壳体2的顶端端面上;
见图4,音频接口U5、Arduino Lilypad接口U2、MIDI信号接口U4、计时器芯片U3与控制芯片U1连接的电路包括电阻R1、R2、有源电容C1,音频接口U5的2端口分别连接电阻R2一端、计时器芯片U3的7管脚,音频接口U5的3端口连接计时器芯片U3的2、6管脚,电阻R2另一端分别连接计时器芯片U3的4、5管脚、电池BAT负极、控制芯片U1的7、20管脚、滑动电阻R3的3端口、Arduino Lilypad接口U2的1管脚、电阻R1一端,MIDI信号接口U4的1管脚连接控制芯片U1的1、2、3管脚,MIDI信号接口U4的2管脚连接电阻R1另一端,Arduino Lilypad接口U2的2管脚连接控制芯片U1的26管脚,Arduino Lilypad接口U2的3管脚连接控制芯片U1的25管脚,Arduino Lilypad接口U2的4管脚分别连接滑动电阻R3的1端口、控制芯片U1的22、8管脚电池BAT正极、发光二极管LED阴极、有源电容C1负极、计时器芯片U3的1管脚,滑动电阻R3的2端口连接控制芯片U1的23管脚,滑动电阻R3的3端口分别连接控制芯片U1的23管脚,计时器芯片U3的3管脚分别连接控制芯片U1的4管脚、发光二极管LED阳极,Arduino Lilypad采用现有常规技术。
通过上述音乐控制装置实现利用植物来演奏音乐时,电脑接收两种信号(电极片传入的MIDI信号和手势传感器传入的控制信号),最终在电脑中实现音频编辑与创作,具体的:采用电极片1作为植物电信号的接收器,用户将电极片1贴到任意植物的叶片上,将与电极片相连的电极线***壳体2侧面的标准插孔上,即音频接口U5的一端,即可向壳体2内部的控制芯片U1传输植物的电信号数据,通过控制芯片U1内部的比较模块62对输入的电位值进行判断,若输入的电位值在预先设定的电位阈值范围内,则通过模数转换模块61将该电位值转换为音符数据,并将其计入8位MIDI通道中,若输入的电位值不在预先设定的电位阈值范围内,则采用数据处理模块进行处理,再将处理后的合理值计入MIDI信号传输通道中;控制芯片U1中还可用于实现发光二极管LED灯的控制,控制器U1将转换后音符数据通过MIDI信号传输通道发送给控制器4,控制器4通过音频输出装置5将音频播出,从而实现植物音乐的播放。在使用该音乐控制装置时,使用者可将USB-MIDI线的MIDI头***壳体2侧面的MIDI信号接口U4中,将USB头***电脑的USB插口上,或通过其他转接线与平板或手机等相连,打开任意数字音频工作站,选择本设备的名称作为MIDI输入源,设置任意音色和播放轨道,便可从电脑扬声器上听到植物音乐;本设备的手势交互技术通过Arduino Lilypad实现,程序预先设置四组动作,共八个手势来控制8个MIDI通道上存储的数据,若检测到手势动作是向上/向下,则对输出声音参数的响度进行相应的增减,以此类推,完成上/下和响度,左/右和振幅,前/后和压缩,左翻转/右翻转和混响的对应关系,如若用户想通过电脑、平板等设备上的数字音频软件对植物音乐进行进一步处理,则可将手势信号设置为软件的MIDI输入控制,让其控制音频软件里的参数。
一种基于上述音乐控制装置实现音频控制的方法,其包括以下步骤:
S1、变量初始化;
S2、通过电极片1获取植物叶片上的电位值,并将该电位值发送给控制芯片U1;
S3、通过控制芯片U1中的比较模块将步骤S2采集的电位值与预先设定的电位阈值进行比较,具体的:S31、当电位值在电位阈值范围内时,直接进入步骤S4;
S32当电位值超出电位阈值范围时,通过数据处理模块对电位值进行处理,将处理后获得的数据发送至步骤S3中进行再一次比较,直至电位值处理结果符合电位阈值范围,再进入步骤S4;
S4、通过控制芯片U1中的模数转换模块将电位值转化为MIDI信号;
S5、通过MIDI信号传输通道将经步骤S4转换后的MIDI数据输送给电脑,并存储;
S6、通过手势传感器检测手势动作,并通过Arduino Lilypad发送给电脑;
S7,控制器根据手势动作控制音频的响度、振幅、压缩及混响,具体的:S71、如果手势动作为向上,通过手势传感器将该手势指令发送给Arduino Lilypad,Arduino Lilypad将相应的增加声音响度发送给控制器,如果手势动作为向下,Arduino Lilypad将相应的降低声音响度输送给控制器;
S72、如果手势动作为向左,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的增强声音振幅发送给控制器,如果手势动作为向右,Arduino Lilypad将相应的减弱声音振幅输送给控制器;
S73、如果手势动作为向前,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的升高声音压缩发送给控制器,如果手势动作为向后,Arduino Lilypad将相应的降低声音压缩输送给控制器;
S74、如果手势动作为向左翻转,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的增加声音混响发送给控制器,如果手势动作为向后,Arduino Lilypad将相应的减弱声音混响输送给控制器。
MIDI信号接口U4为(Musical Instrument Digital Interface)乐器数字接口,是20 世纪80 年代初为解决电声乐器之间的通信问题而提出的,MIDI是编曲界最广泛的音乐标准格式,可称为“计算机能理解的乐谱”,它用音符的数字控制信号来记录音乐,一首完整的MIDI音乐只有几十KB大,而能包含数十条音乐轨道,几乎所有的现代音乐都是用MIDI加上音色库来制作合成的。MIDI 传输的不是声音信号,而是音符、控制参数等指令, 它指示MIDI设备要做什么,怎么做,如演奏哪个音符、多大音量等,它们被统一表示成MIDI消息(MIDI Message) ,传输时采用异步串行通信,标准通信波特率为31.25×( 1±0.01)KBaud,《MIDI信号的解码及实时音符显示》一文详细解释了MID信号解码的问题。
综上所述,仅是本发明的较佳实施例而已,并非是对本发明作其他形式的限制,任何熟悉本专业的技术人员可能利用上述揭示的技术内容加以变更或改型为同等变化的等效实施例。但是凡是未脱离本发明技术方案内容,依据本发明的技术实质对以上实施例所作的任何简单修改、等同变化与改型,仍属于本发明技术方案的保护范围。

Claims (8)

1.一种利用生物电流的音乐控制装置,其包括电极片,所述电极片与控制器连接,所述控制器分别与音频输出装置、发光二极管LED连接,其特征在于,其还包括壳体、安装于壳体内部的控制芯片U1、手势控制模块,所述电极片贴装于植物叶片上,所述电极片用于采集并传输植物的电信号数据,所述电极片与控制芯片U1电连接,所述控制芯片U1通过MIDI信号传输通道与控制器连接,所述手势控制模块包括手势传感器、Arduino Lilypad,所述手势传感器通过所述Arduino Lilypad与所述控制器连接;所述控制芯片U1内设置有模数转换模块、比较模块,所述模数转换模块用于将所述电极片传输的电信号数据转换为音符数据,所述比较模块用于将电信号数据与预先设定的电位阈值进行对比;
所述壳体上设置有音频接口U5、Arduino Lilypad接口U2、MIDI信号接口U4,所述电极片通过所述音频接口U5与所述控制芯片U1连接,所述控制芯片U1通过MIDI接口U4与所述控制器连接,所述Arduino Lilypad通过所述Arduino Lilypad接口U2与所述控制器连接;
所述音符数据以8位数据格式计入8位MIDI通道中;
所述Arduino Lilypad接收预设四组动作共八个手势来控制8个MIDI通道上存储的数据。
2.根据权利要求1所述的一种利用生物电流的音乐控制装置,其特征在于,所述控制器为电脑、平板或手机。
3.根据权利要求1所述的一种利用生物电流的音乐控制装置,其特征在于,其还包括计时器芯片U3,所述计时器芯片U3通过导线分别连接发光二极管LED、所述控制芯片U1。
4.根据权利要求3所述的一种利用生物电流的音乐控制装置,其特征在于,所述音频接口U5、Arduino Lilypad接口U2、MIDI信号接口U4、计时器芯片U3与所述控制芯片U1连接的电路包括电阻R1、R2、有源电容C1,所述音频接口U5的2端口分别连接电阻R2一端、所述计时器芯片U3的7管脚,所述音频接口U5的3端口连接所述计时器芯片U3的2、6管脚,所述电阻R2另一端分别连接所述计时器芯片U3的4、5管脚、电池BAT负极、控制芯片U1的7、20管脚、滑动电阻R3的3端口、Arduino Lilypad接口U2的1管脚、所述电阻R1一端,所述MIDI信号接口U4的1管脚连接所述控制芯片U1的1、2、3管脚,所述MIDI信号接口U4的2管脚连接所述电阻R1另一端,所述Arduino Lilypad接口U2的2管脚连接所述控制芯片U1的26管脚,所述ArduinoLilypad接口U2的3管脚连接所述控制芯片U1的25管脚,所述Arduino Lilypad接口U2的4管脚分别连接滑动电阻R3的1端口、控制芯片U1的22、8管脚电池BAT正极、所述发光二极管LED阴极、有源电容C1负极、计时器芯片U3的1管脚,所述滑动电阻R3的2端口连接所述控制芯片U1的23管脚,所述滑动电阻R3的3端口分别连接所述控制芯片U1的23管脚,所述计时器芯片U3的3管脚分别连接所述控制芯片U1的4管脚、发光二极管LED阳极。
5.根据权利要求4所述的一种利用生物电流的音乐控制装置,其特征在于,所述控制芯片U1为ATMEGA 328芯片。
6.根据权利要求5所述的一种利用生物电流的音乐控制装置,其特征在于,所述MIDI信号传输通道的数量与所述手势的数量一致,所述手势控制模块包括八种手势,八种手势分别用于控制八个所述MIDI信号传输通道,八种所述手势分别为上、下、左、右、前、后、左翻转、右翻转,所述上、下手势分别用于实现音频响度增加、减弱,所述左、右手势分别用于实现音频振幅增强、减弱,所述前、后手势分别用于实现音频压缩升高、降低,所述左翻转、右翻转分别用于实现音频混响增加、减弱。
7. 基于权利要求6所述的音乐控制装置实现的一种音频控制的方法,其包括步骤S1、变量初始化,其特征在于,其还包括以下步骤:S2、通过电极片获取植物叶片上的电位值,并将该电位值发送给控制芯片U1;S3、通过控制芯片U1中的比较模块将步骤S2采集的电位值与预先设定的电位阈值进行比较;S4、通过控制芯片U1中的模数转换模块将电位值转化为MIDI信号;S5、通过MIDI信号传输通道将经步骤S4转换后的MIDI数据输送给控制器,并存储;S6、通过手势传感器检测手势动作,并通过Arduino Lilypad发送给控制器;S7,控制器根据手势动作控制音频的响度、振幅、压缩及混响;
其中步骤S3包括以下具体内容:S31、当电位值在电位阈值范围内时,直接进入步骤S4,当电位值超出电位阈值范围时,通过数据处理模块对电位值进行处理,将处理后获得的数据发送至步骤S3中进行再一次比较,直至电位值处理结果符合电位阈值范围,再进入步骤S4。
8.根据权利要求7所述的一种音频控制的方法,其特征在于,步骤S7包括以下具体内容:S71、如果手势动作为向上,通过手势传感器将该手势指令发送给Arduino Lilypad,Arduino Lilypad将相应的增加声音响度发送给控制器,如果手势动作为向下,ArduinoLilypad将相应的降低声音响度输送给控制器;
S72、如果手势动作为向左,通过手势传感器将该手势指令发送给Arduino Lilypad,Arduino Lilypad将相应的增强声音振幅发送给控制器,如果手势动作为向右,ArduinoLilypad将相应的减弱声音振幅输送给控制器;
S73、如果手势动作为向前,通过手势传感器将该手势指令发送给Arduino Lilypad,Arduino Lilypad将相应的升高声音压缩发送给控制器,如果手势动作为向后,ArduinoLilypad将相应的降低声音压缩输送给控制器;
S74、如果手势动作为向左翻转,通过手势传感器将该手势指令发送给ArduinoLilypad,Arduino Lilypad将相应的增加声音混响发送给控制器,如果手势动作为向后,Arduino Lilypad将相应的减弱声音混响输送给控制器。
CN202010065009.6A 2020-01-20 2020-01-20 一种利用生物电流的音乐控制装置及控制方法 Active CN111198613B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010065009.6A CN111198613B (zh) 2020-01-20 2020-01-20 一种利用生物电流的音乐控制装置及控制方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010065009.6A CN111198613B (zh) 2020-01-20 2020-01-20 一种利用生物电流的音乐控制装置及控制方法

Publications (2)

Publication Number Publication Date
CN111198613A CN111198613A (zh) 2020-05-26
CN111198613B true CN111198613B (zh) 2021-09-07

Family

ID=70746247

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010065009.6A Active CN111198613B (zh) 2020-01-20 2020-01-20 一种利用生物电流的音乐控制装置及控制方法

Country Status (1)

Country Link
CN (1) CN111198613B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111766944A (zh) * 2020-05-26 2020-10-13 浙江大学 一种人与植物交互装置
CN112289288A (zh) * 2020-11-03 2021-01-29 上海音乐学院 一种基于智能移动终端的音乐创作***
CN114851200A (zh) * 2022-05-18 2022-08-05 上海海事大学 基于手势识别控制机械臂进行叶片装配的方法及***

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106601219A (zh) * 2016-03-25 2017-04-26 浙江大学 一种用植物奏乐的乐器及其控制方法
CN108182927A (zh) * 2017-12-29 2018-06-19 深圳市翠园科技有限公司 基于移动终端实现与植物的远程互动的***及其实现方法
JP2019013183A (ja) * 2017-07-06 2019-01-31 学校法人立命館 栽培管理装置、栽培管理方法、コンピュータプログラム、及び栽培用具
CN109523982A (zh) * 2018-10-11 2019-03-26 索乐有限责任公司 一种植物音乐发生装置及发生方法

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102614669A (zh) * 2012-01-04 2012-08-01 杭州合力电子有限公司 一种手持挥动发声玩具
US9006554B2 (en) * 2013-02-28 2015-04-14 Effigy Labs Human interface device with optical tube assembly
US20150332660A1 (en) * 2014-05-15 2015-11-19 Fender Musical Instruments Corporation Musical Instrument and Method of Controlling the Instrument and Accessories Using Control Surface
CN105786162A (zh) * 2014-12-15 2016-07-20 上海贝尔股份有限公司 一种用于进行虚拟演奏指挥的方法和装置
CN108011786A (zh) * 2016-11-01 2018-05-08 许扬杰 智能家居***及其装置
CN109085885A (zh) * 2018-08-14 2018-12-25 李兴伟 智能戒指

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106601219A (zh) * 2016-03-25 2017-04-26 浙江大学 一种用植物奏乐的乐器及其控制方法
JP2019013183A (ja) * 2017-07-06 2019-01-31 学校法人立命館 栽培管理装置、栽培管理方法、コンピュータプログラム、及び栽培用具
CN108182927A (zh) * 2017-12-29 2018-06-19 深圳市翠园科技有限公司 基于移动终端实现与植物的远程互动的***及其实现方法
CN109523982A (zh) * 2018-10-11 2019-03-26 索乐有限责任公司 一种植物音乐发生装置及发生方法

Also Published As

Publication number Publication date
CN111198613A (zh) 2020-05-26

Similar Documents

Publication Publication Date Title
CN111198613B (zh) 一种利用生物电流的音乐控制装置及控制方法
US9558727B2 (en) Performance method of electronic musical instrument and music
CN100588279C (zh) 输出音频数据和乐谱图像的方法和设备
CN110942758A (zh) 一种基于机器视觉识别乐谱的识别方法及装置
CN107274876A (zh) 一种听音绘谱仪
JP2016518180A (ja) 音楽洗濯機および制御方法
CN108200703A (zh) 一种与音频互动的灯光的控制方法、装置及电子设备
CN101515452B (zh) 数码键盘多弦鼓琴
CN114449713A (zh) 一种智能音频识别灯光控制***
CN104099749A (zh) 一种音乐控制水流的洗衣机及控制方法
US20050056144A1 (en) Computer music input system, processing method and keyboard apparatus
CN208655232U (zh) 一种设置有重锤力度键盘的智能钢琴
CN206260064U (zh) 一种数字特效伴奏麦克风
CN210156109U (zh) 一种物联网智慧钢琴***
CN114898727A (zh) 一种基于外设设备的midi控制器、midi消息生成***及方法
CN104167121A (zh) 一种钢琴信息处理方法及钢琴学习***
CN104099747A (zh) 一种音乐控制水流的洗衣机及控制方法
Lyons et al. Creating new interfaces for musical expression
CN210535054U (zh) 多传感器融合的管乐器教学***
CN212967074U (zh) 一种吹弹一体式电子乐器
CN109195048B (zh) 一种不失真录制耳机
CN110010109A (zh) 一种物联网智慧钢琴***
CN217740168U (zh) 一种基于外设设备的midi控制器及midi消息生成***
CN111862915B (zh) 一种具有人工智能算法的电子筝
CN209978919U (zh) 一种具有卡拉ok唱歌功能的娱乐导航***装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant