CN101425004A - 用声音作为计算机***输入控制的方法和装置 - Google Patents

用声音作为计算机***输入控制的方法和装置 Download PDF

Info

Publication number
CN101425004A
CN101425004A CNA2007100097238A CN200710009723A CN101425004A CN 101425004 A CN101425004 A CN 101425004A CN A2007100097238 A CNA2007100097238 A CN A2007100097238A CN 200710009723 A CN200710009723 A CN 200710009723A CN 101425004 A CN101425004 A CN 101425004A
Authority
CN
China
Prior art keywords
sound
computer system
signal
input control
digital
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CNA2007100097238A
Other languages
English (en)
Other versions
CN101425004B (zh
Inventor
陈风
吴亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Fujian Star Net Communication Co Ltd
Original Assignee
Fujian Star Net Communication Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Fujian Star Net Communication Co Ltd filed Critical Fujian Star Net Communication Co Ltd
Priority to CN2007100097238A priority Critical patent/CN101425004B/zh
Publication of CN101425004A publication Critical patent/CN101425004A/zh
Application granted granted Critical
Publication of CN101425004B publication Critical patent/CN101425004B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Complex Calculations (AREA)

Abstract

用声音作为计算机***输入控制的方法,包括:发出的声音转化为模拟的音频电信号;模拟音频电信号转换成计算机***可以处理的频域数字音频信号;计算机***将上述频域数字音频信号转化成相应的计算机指令,从而控制计算机***。本发明还提供了用声音作为计算机***输入控制的装置,包括:用于发出声音的发声源;将声音转换为模拟音频电信号的话筒;用于将模拟音频电信号转换成频域数字音频信号的音频信号处理***;用于接收频域数字音频信号并将其转化成相应的计算机指令的计算机***。本发明的优点在于:在某些特定的计算机***中起到传统的输入控制所不能达到的效果,比如在某些游戏***中,采用了该输入控制后,游戏的可玩性和趣味性大大加强。

Description

用声音作为计算机***输入控制的方法和装置
【技术领域】
本发明是关于一种计算机中数据处理的方法,特别是指一种用声音作为计算机***输入控制的方法。
【背景技术】
目前计算机***上的输入控制装置基本上都是键盘,鼠标,触摸板,触摸屏或遥控杆等可以手工操作的设备,用户通过这些看得见摸得着的设备,将自己的动作转化成计算机***能够识别的指令,从而控制计算机***。实际操作中,通常发现反复的将手从键盘移到鼠标、触摸板等再移回键盘是一种负担。并且对用户来说,这种输入控制方法是“看得见摸得着”的。久而久之,用户对这些设备必然会产生审美疲劳,其新颖性及对用户的吸引力便大打折扣。
并且,这种传统的输入控制装置的输入效果单调,在某些特定的计算机***中,比如,尤其是用于娱乐的计算机***,不管是通用计算机***还是嵌入式计算机***,使用传统设备作为输入控制的新颖性和娱乐性便远不如使用一种新型的方法。而对于这种应用于娱乐的计算机***,不管是通用的还是嵌入式的,新颖性和娱乐性是至关重要的。现在,越来越多的人开始热衷于电脑游戏,电脑游戏的设计逐渐趋于更可玩性与趣味性,现有传统的键盘及鼠标等输入方式已远远满足不了电脑游戏爱好者对趣味性的要求,因此,基于简单方便以及效果多样性的需求,越来越需要对计算机***输入控制技术进行改进。某些时候,一种新型的输入控制方法对于娱乐性的贡献可能已经超过了那个娱乐***本身。因此,一种新型的输入控制方法对于某些计算机***而言可能就是一场全新的革命。
【发明内容】
本发明所要解决的技术问题在于提供一种与传统的输入控制方法和装置完全不同的用声音作为计算机***输入控制的方法和装置。
本发明是通过以下技术方案解决上述技术问题的:一种用声音作为计算机***输入控制的方法,包括以下步骤:
发出的声音进行声电转换,将声音转化为模拟的音频电信号;
音频信号处理,将通过上一步骤得到的模拟音频电信号转换成计算机***可以处理的频域数字音频信号;
计算机***接收到上述频域数字音频信号,根据用户的预先设置,然后通过软件将其转化成相应的计算机指令,从而控制计算机***。
所述音频信号处理步骤还包括下述步骤:
模拟音频电信号首先转换成数字音频信号;
经过上一步骤转换得到的数字音频信号从时域转换到频域,得到频域数字音频信号。
本发明还提供了一种用声音作为计算机***输入控制的装置,包括:
发声源,用于发出声音;
话筒,将发声源发出的声音转换为模拟的音频电信号;
音频信号处理***,用于音频信号处理,将通过话筒转换后得到的模拟音频电信号转换成计算机***可以处理的频域数字音频信号;
计算机***,用于接收上述频域数字音频信号,并根据用户的预先设置,通过软件将其转化成相应的计算机指令,从而控制计算机***。
所述音频信号处理***还包括:
模数转换***,用于将通过话筒转换得到的模拟音频电信号转换成数字音频信号;
数字信号处理***,用于将通过模数转换***转换得到的数字音频信号从时域转换到频域,得到频域数字音频信号。
本发明用声音作为计算机***输入控制的方法的优点在于:与计算机***的传统输入控制方法相比,本方法实现的是用声音来控制某些参量,其难点就在于对于声音的捕捉和处理,并将其转化为计算机***的控制参量。对于使用娱乐性计算机***的用户而言,习惯了传统的看得见摸得着的输入控制方法,当使用一种能够用自己的声音控制的输入控制方法,一种既看不见又摸不着但是却能控制计算机***的方法,那么整个娱乐***对用户的吸引力便大为增加。本发明提供的方法就是要将用户看不见摸不着的声音转化成计算机***可以识别并执行的指令,是对既有的传统的输入控制方法的一种有力的补充。将声音信号应用到输入控制过程中,在某些特定的计算机***中会起到传统的输入控制装置所不能达到的效果。比如在某些游戏***中,采用了这种输入控制方法后,游戏的可玩性和趣味性会大大加强。
【附图说明】
下面参照附图结合实施例对本发明作进一步的描述。
图1是本发明用声音作为计算机***输入控制的方法的流程图。
图2是图1中音频信号处理子程序的流程图。
图3是本发明用声音作为计算机***输入控制装置的示意结构图。
图4示出了图3中音频信号处理***的内部结构。
【具体实施方式】
请参阅图1,本发明用声音作为计算机***输入控制的方法的流程图,该流程开始于步骤11,在步骤12,用户发声,可以由其它的可发声的设备或是任何可发声的物体发出声音,如由扬声器发出声音。
步骤13,将步骤11中发出的声音进行声电转换,将声音转化为模拟的音频电信号。
步骤14,音频信号处理,将通过步骤13得到的模拟音频电信号转换成计算机***可以处理的频域数字音频信号。经过音频信号处理得到的信号,可能是纯粹的频谱数据,也可能是仅局限于某个频率范围的比较纯粹的信号或频谱数据。
步骤15,计算机***接收到上述频域数字音频信号,根据用户的预先设置,比如只对某频率或某强度的信号做出反应,然后通过软件将其转化成相应的计算机指令,从而控制计算机***。
流程结束于步骤16。
请参阅图2,为图1中音频信号处理子程序的流程图,步骤14还包括步骤142和步骤144。
步骤142,从步骤13中得到的模拟音频电信号首先转换成数字音频信号,由于步骤13中输出的仅仅是连续的模拟的电信号,这种信号不能直接交给计算机处理,计算机能够处理的信号必须是离散的数字信号,因此需要将模拟信号转换成数字信号。
步骤144,将经过步骤142转换的数字音频信号从时域转换到频域,得到频域数字音频信号,接着进入步骤15,一般的说,模拟音频信号转换成数字音频信号后,就可以直接由计算机进行处理,虽然数字信号可以直接由计算机进行处理,但是时域的离散的数字音频信号是不能直接用来做计算机输入控制的,因为不管是连续的模拟音频信号还是离散的数字音频信号,在时域内看起来都是杂乱无章的,要想从这些看似杂乱无章的信号内提取有用的信息,进而用来作为计算机***的输入控制,则必须从频率域来分析这些信号,因此需要将数字音频信号从时域转换到频域。该步骤中数字信号处理方法中用到的数学变换,可以是信号处理领域内的任何一种变换方法,比如离散傅立叶变换(DFT),快速傅立叶变换(FFT),Z变换,离散余弦变换(DCT),离散正弦变换(DST),离散哈特利变换(DHT)等等。
请参阅图3,是本发明用声音作为计算机***输入控制装置的示意结构图,包括发声源100、话筒200、音频信号处理***300,以及计算机***400。
发声源100,用于发出声音,其可以是用户,也可以是扬声器,还可以是计算机,或者是任意可以发声的设备或物体。
话筒200,是一种电声器材,是声电转换的换能器,将发声源100发出的声音转换为模拟的音频电信号,声波在空气中传播时,引起空气振动,振动的空气作用到电声元件上,引起电声元件的振动而产生电流,从而实现了从声音到电信号的转换。话筒又称传声器,麦克风,或微音器。
音频信号处理***300,用于音频信号处理,将通过话筒200转换后得到的模拟音频电信号转换成计算机***可以处理的频域数字音频信号。经过音频信号处理***300得到的信号,可能是纯粹的频谱数据,也可能是仅局限于某个频率范围的比较纯粹的信号或频谱数据。
计算机***400,用于接收上述频域数字音频信号,并根据用户的预先设置,比如只对某频率或某强度的信号做出反应,然后通过软件将其转化成相应的计算机指令,从而控制计算机***400。这里的计算机***400既可以是通用计算机***,如人们日常使用的计算机等,也可以是有特定用途的嵌入式计算机***,如用于视频点播的嵌入式机顶盒***,用于某个游戏的游戏机***等。
请参阅图4,为图3中音频信号处理***300的内部结构,该音频信号处理***300包括模数转换***310以及数字信号处理***320。
模数转换***310,用于将通过话筒2转换得到的模拟音频电信号转换成数字音频信号,因为模拟音频电信号不能直接交给计算机处理,计算机能够处理的信号必须是离散的数字信号,这就需要一个能将模拟信号转换成数字信号的装置或设备,也就是模数转换***310。
数字信号处理***320,用于将通过模数转换***310转换得到的数字音频信号从时域转换到频域,得到频域数字音频信号,一般的说,模数转换***310将模拟音频信号转换成数字音频信号后得到的数字音频信号就可以直接由计算机进行处理。虽然数字信号可以直接由计算机进行处理,但是时域的离散的数字音频信号是不能直接用来做计算机输入控制的,因为不管是连续的模拟音频信号还是离散的数字音频信号,在时域内看起来都是杂乱无章的。要想从这些看似杂乱无章的信号内提取有用的信息,进而用来作为计算机***的输入控制,则必须从频率域来分析这些信号,这就必须借助于数字信号处理***320。数字信号处理***320是这样的一种***,它能将输入的数字信号经过一定的数学变换,将信号从时间域变换到频率域,进而进行分析处理得到想要的信号或其成分,从频域内对信号进行分析处理则比从时域内分析处理方便的多。
数字信号处理***320中用到的数学变换,可以是信号处理领域内的任何一种变换方法,比如离散傅立叶变换(DFT),快速傅立叶变换(FFT),Z变换,离散余弦变换(DCT),离散正弦变换(DST),离散哈特利变换(DHT)等等。
这里提到的模数转换***310和数字信号处理***320既可以是独立的***,如嵌入式的用模数转换(A/D)芯片实现的模数转换电路***和用数字信号处理(DSP)芯片实现的数字信号处理***(包括运行在这些嵌入式***上的程序指令),也可以是通用计算机上的模数转换电路和数字信号处理***(包括程序指令)。数字信号处理***320可以是信号处理领域内的任意一种或几种的组合,比如高通滤波器,低通滤波器,带通滤波器,或者是任意的能将纯粹的时域信号分析成频域数据的***等等。
下面仅对如何将纯粹的频谱数据作为输入控制参量作示例性的说明。
以常见的沙壶球游戏为例。人们在每扔一次沙壶球时,所产生的力度大小,方向等都是不太一致的,这与人们说话的声音很类似。利用了这一点,就可以使用声音代替鼠标点击实现游戏。在计算机模拟的沙壶球游戏中,玩家通过移动鼠标和点击鼠标来控制扔球的方向和力度。如果使用声音进行控制,当玩家对着话筒大吼一声时,他的声音便经过音频信号处理***分析成频谱数据,分析的过程为:首先对频域内的数据进行分析综合,去掉不属于人声的频率分量,然后将在人声频率范围(大约为80Hz-1.1KHz)内的各频率幅度对比,找出最大的频率分量,再通过一个对数函数公式将其量化成合适的值,如果这个值作为沙壶球能够前进的距离,那这就代替了鼠标点击动作产生的力度。至于扔球的方向,可以有多种办法,一种简单的算法就是计算取值处的频率值在整个人声频率内的比例,进而换算成扔球的角度。这种用声音控制的沙壶球游戏的可玩性和趣味性明显的比用传统的鼠标控制的方法强的多。
这里以沙壶球游戏为例,但该方法绝不局限于某款游戏或某种游戏***,该方法也是可以适用于其它的类似的游戏***或计算机***。
虽然以上描述了本发明的具体实施方式,但是熟悉本技术领域的技术人员应当理解,我们所描述的具体的实施例只是说明性的,而不是用于对本发明的范围的限定,熟悉本领域的技术人员在依照本发明的精神所作的等效的修饰以及变化,都应当涵盖在本发明的权利要求所保护的范围内。

Claims (10)

1.一种用声音作为计算机***输入控制的方法,其特征在于:包括以下步骤:
发出的声音进行声电转换,将声音转化为模拟的音频电信号;
音频信号处理,将通过上一步骤得到的模拟音频电信号转换成计算机***可以处理的频域数字音频信号;
计算机***接收到上述频域数字音频信号,根据用户的预先设置,然后通过软件将其转化成相应的计算机指令,从而控制计算机***。
2.如权利要求1所述的用声音作为计算机***输入控制的方法,其特征在于:所述音频信号处理步骤还包括下述步骤:
模拟音频电信号首先转换成数字音频信号;
经过上一步骤转换得到的数字音频信号从时域转换到频域,得到频域数字音频信号。
3.如权利要求1所述的用声音作为计算机***输入控制的方法,其特征在于:经过音频信号处理得到的信号,是纯粹的频谱数据,或是仅局限于某个频率范围的比较纯粹的信号或频谱数据。
4.如权利要求1所述的用声音作为计算机***输入控制的方法,其特征在于:所述音频信号处理步骤中用到数学变换,所述数学变换是信号处理领域内的任何一种变换方法。
5.如权利要求4所述的用声音作为计算机***输入控制的方法,其特征在于:所述数学变换方法是下述数学变换方法之一:离散傅立叶变换,快速傅立叶变换,Z变换,离散余弦变换,离散正弦变换,离散哈特利变换。
6.一种用声音作为计算机***输入控制的装置,其特征在于:包括:
发声源,用于发出声音;
话筒,将发声源发出的声音转换为模拟的音频电信号;
音频信号处理***,用于音频信号处理,将通过话筒转换后得到的模拟音频电信号转换成计算机***可以处理的频域数字音频信号;
计算机***,用于接收上述频域数字音频信号,并根据用户的预先设置,通过软件将其转化成相应的计算机指令,从而控制计算机***。
7.如权利要求6所述的用声音作为计算机***输入控制的装置,其特征在于:所述发声源是用户、扬声器,或者是计算机。
8.如权利要求1所述的用声音作为计算机***输入控制的装置,其特征在于:所述计算机***是通用计算机***,或者是有特定用途的嵌入式计算机***。
9.如权利要求6所述的用声音作为计算机***输入控制的装置,其特征在于:所述音频信号处理***包括模数转换***以及数字信号处理***,
模数转换***,用于将通过话筒转换得到的模拟音频电信号转换成数字音频信号;
数字信号处理***,用于将通过模数转换***转换得到的数字音频信号从时域转换到频域,得到频域数字音频信号。
10.如权利要求9所述的用声音作为计算机***输入控制的装置,其特征在于:所述模数转换***和数字信号处理***是独立的***,或者是通用计算机上的模数转换电路和数字信号处理***,所述数字信号处理***是下述信号处理***中的任意一种或两种或两种以上的组合:高通滤波器,低通滤波器,带通滤波器。
CN2007100097238A 2007-10-29 2007-10-29 用声音作为计算机***输入控制的方法和装置 Expired - Fee Related CN101425004B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2007100097238A CN101425004B (zh) 2007-10-29 2007-10-29 用声音作为计算机***输入控制的方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2007100097238A CN101425004B (zh) 2007-10-29 2007-10-29 用声音作为计算机***输入控制的方法和装置

Publications (2)

Publication Number Publication Date
CN101425004A true CN101425004A (zh) 2009-05-06
CN101425004B CN101425004B (zh) 2011-12-07

Family

ID=40615642

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007100097238A Expired - Fee Related CN101425004B (zh) 2007-10-29 2007-10-29 用声音作为计算机***输入控制的方法和装置

Country Status (1)

Country Link
CN (1) CN101425004B (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101776987A (zh) * 2010-02-26 2010-07-14 中山大学 一种输出植物音频的方法
CN101807427A (zh) * 2010-02-26 2010-08-18 中山大学 一种音频输出***
CN102737161A (zh) * 2011-04-08 2012-10-17 迪士尼企业公司 导入音频以影响游戏性体验
CN106845636A (zh) * 2017-03-31 2017-06-13 兰州交通大学 基于声控的神经元动作电位发生器
CN107481727A (zh) * 2017-06-23 2017-12-15 罗时志 一种基于电音基调控制的音频信号处理方法及***
CN108404410A (zh) * 2018-02-09 2018-08-17 腾讯科技(深圳)有限公司 对象的控制方法和装置、存储介质、电子装置
CN110302531A (zh) * 2019-05-23 2019-10-08 深圳市八达晟电子有限公司 无线适配器、适配方法、存储介质和计算机设备

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6289140B1 (en) * 1998-02-19 2001-09-11 Hewlett-Packard Company Voice control input for portable capture devices
CN1118733C (zh) * 1998-11-04 2003-08-20 致伸实业股份有限公司 用来控制一游戏控制器的语音控制***

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101776987A (zh) * 2010-02-26 2010-07-14 中山大学 一种输出植物音频的方法
CN101807427A (zh) * 2010-02-26 2010-08-18 中山大学 一种音频输出***
CN102737161A (zh) * 2011-04-08 2012-10-17 迪士尼企业公司 导入音频以影响游戏性体验
CN102737161B (zh) * 2011-04-08 2016-07-06 迪士尼企业公司 导入音频以影响游戏性体验
CN106845636A (zh) * 2017-03-31 2017-06-13 兰州交通大学 基于声控的神经元动作电位发生器
CN107481727A (zh) * 2017-06-23 2017-12-15 罗时志 一种基于电音基调控制的音频信号处理方法及***
CN107481727B (zh) * 2017-06-23 2020-05-29 罗时志 一种基于电音基调控制的音频信号处理方法及***
CN108404410A (zh) * 2018-02-09 2018-08-17 腾讯科技(深圳)有限公司 对象的控制方法和装置、存储介质、电子装置
CN110302531A (zh) * 2019-05-23 2019-10-08 深圳市八达晟电子有限公司 无线适配器、适配方法、存储介质和计算机设备

Also Published As

Publication number Publication date
CN101425004B (zh) 2011-12-07

Similar Documents

Publication Publication Date Title
CN101425004B (zh) 用声音作为计算机***输入控制的方法和装置
CN108305603B (zh) 音效处理方法及其设备、存储介质、服务器、音响终端
KR20120126446A (ko) 입력된 오디오 신호로부터 진동 피드백을 생성하기 위한 장치
CN104834642A (zh) 改变音乐演绎风格的方法、装置及设备
JP6563603B2 (ja) 周波数変化によって実時間振動を提供する振動提供システム及び振動提供方法
Turchet et al. Smart instruments: Towards an ecosystem of interoperable devices connecting performers and audiences
Turchet Smart Mandolin: autobiographical design, implementation, use cases, and lessons learned
US20180315343A1 (en) System and method for translating sound to tactile
EP1701336A3 (en) Sound processing apparatus and method, and program therefor
Ketabdar et al. Magimusic: using embedded compass (magnetic) sensor for touch-less gesture based interaction with digital music instruments in mobile devices
CN107705776A (zh) 一种智能钢琴左右键盘分区使用的***与方法
CN109144257A (zh) 从歌曲中提取特征并转化为触觉感受的方法
CN203689892U (zh) 视唱场所专用个人音频数据调备装置
CN102641591B (zh) 交互式游戏装置
KR102212409B1 (ko) 오디오 신호 및 오디오 신호를 기반으로 한 진동 신호를 생성하는 방법 및 장치
CN103167161A (zh) 一种基于麦克风输入实现手机吹奏乐器的***及方法
CN104768106B (zh) 一种终端音效的转换方法及装置
CN104007951B (zh) 一种信息处理方法及电子设备
Elblaus et al. Modes of sonic interaction in circus: Three proofs of concept
DE102013206073A1 (de) Musikinstrument und Vorrichtung zum Fernsteuern eines Vorgangs im Umfeld des Musikinstruments
CN106847249B (zh) 一种发音处理方法及***
KR20120096880A (ko) 사용자가 자신의 음성에 기초하여 디지털 악기를 연주할 수 있도록 하기 위한 방법, 시스템 및 컴퓨터 판독 가능한 기록 매체
Michalakos The augmented drum kit: an intuitive approach to live electronic percussion performance
CN201498194U (zh) 用于产生音乐的手套
CN106571132A (zh) 民族戏剧电子锣鼓

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
EE01 Entry into force of recordation of patent licensing contract

Application publication date: 20090506

Assignee: FUJIAN STAR-NET EVIDEO INFORMATION SYSTEM Co.,Ltd.

Assignor: FUJIAN STAR-NET COMMUNICATION Co.,Ltd.

Contract record no.: 2016350000046

Denomination of invention: Method and device for using voice as input control of computer system

Granted publication date: 20111207

License type: Common License

Record date: 20161108

LICC Enforcement, change and cancellation of record of contracts on the licence for exploitation of a patent or utility model
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20111207