CN105451139A - 声音信号处理方法、装置和移动终端 - Google Patents

声音信号处理方法、装置和移动终端 Download PDF

Info

Publication number
CN105451139A
CN105451139A CN201410286346.2A CN201410286346A CN105451139A CN 105451139 A CN105451139 A CN 105451139A CN 201410286346 A CN201410286346 A CN 201410286346A CN 105451139 A CN105451139 A CN 105451139A
Authority
CN
China
Prior art keywords
mobile terminal
sound collection
collection parts
voice signal
state information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201410286346.2A
Other languages
English (en)
Inventor
郑佳佳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to CN201410286346.2A priority Critical patent/CN105451139A/zh
Priority to US14/649,418 priority patent/US20160150207A1/en
Priority to PCT/IB2015/050480 priority patent/WO2015198161A1/en
Publication of CN105451139A publication Critical patent/CN105451139A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/806—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components with processing of the sound signal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00—Details of transducers, loudspeakers or microphones
    • H04R1/20—Arrangements for obtaining desired frequency or directional characteristics
    • H04R1/32—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only
    • H04R1/40—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers
    • H04R1/406—Arrangements for obtaining desired frequency or directional characteristics for obtaining desired directional characteristic only by combining a number of identical transducers microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00—Circuits for transducers, loudspeakers or microphones
    • H04R3/005—Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R5/00—Stereophonic arrangements
    • H04R5/04—Circuit arrangements, e.g. for selective connection of amplifier inputs/outputs to loudspeakers, for loudspeaker detection, or for adaptation of settings to personal preferences or hearing impairments
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S1/00—Two-channel systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S7/00—Indicating arrangements; Control arrangements, e.g. balance control
    • H04S7/30—Control circuits for electronic adaptation of the sound field
    • H04S7/302—Electronic adaptation of stereophonic sound system to listener position or orientation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00—Signal processing covered by H04R, not provided for in its groups
    • H04R2430/01—Aspects of volume control, not necessarily automatic, in sound systems
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2499/00—Aspects covered by H04R or H04S not otherwise provided for in their subgroups
    • H04R2499/10—General applications
    • H04R2499/11—Transducers incorporated or for use in hand-held devices, e.g. mobile phones, PDA's, camera's
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04S—STEREOPHONIC SYSTEMS 
    • H04S2400/00—Details of stereophonic systems covered by H04S but not provided for in its groups
    • H04S2400/15—Aspects of sound capture and related signal processing for recording or reproduction

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephone Function (AREA)
  • Studio Devices (AREA)

Abstract

本发明提供一种声音信号处理方法、装置以及移动终端。该声音信号处理方法包括：通过图像采集部件获取图像信号；通过至少两个声音采集部件获取声音信号；通过状态传感部件获取移动终端的状态信息；当图像采集部件采集图像信号时，根据移动终端的状态信息对至少两个声音采集部件所采集到的声音信号进行处理。通过本发明实施例，可以动态地对来自不同声音采集部件的声音信号进行控制，由此能够获得良好的立体声拍摄效果，提高用户的体验。

Description

声音信号处理方法、装置和移动终端
技术领域
本发明涉及一种声音信号处理技术，尤其涉及一种声音信号处理方法、装置和移动终端。
背景技术
目前，一些移动终端具备摄像功能，如具备摄像功能的通信移动终端(手机)、照相机、平板电脑等。通过设置在这些移动终端中的摄像元件，用户可以拍摄影像，并且通过设置在这些移动终端中的声音信号采集部件(例如麦克风)，用户还可以采集声音信号。
应该注意，上面对技术背景的介绍只是为了方便对本发明的技术方案进行清楚、完整的说明，并方便本领域技术人员的理解而阐述的。不能仅仅因为这些方案在本发明的背景技术部分进行了阐述而认为上述技术方案为本领域技术人员所公知。
发明内容
但是发明人发现：现有的移动终端中一般具备1个或2个麦克风；对于声音信号的处理，所有麦克风的设置均相同。当用户使用移动终端进行视频采集时，往往需要不断调整拍摄位置或拍摄角度以获得更佳的视频效果。而相同设置的麦克风并不能随着位置或角度的变化而调整对声音信号的处理，因此往往采集到的声音效果不理想。
本发明提供了一种声音信号处理方法、装置和移动终端，可在进行视频采集时动态调整采集到的声音，由此可以获得很好的声音效果。
根据本发明的第一方面，提供了一种声音信号处理方法，所述声音信号处理方法包括：
通过图像采集部件获取图像信号；
通过至少两个声音采集部件获取声音信号；
通过状态传感部件获取移动终端的状态信息；
当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的声音信号进行处理。
根据本发明的第二方面，其中，对所述至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理。
根据本发明的第三方面，其中，所述移动终端的状态信息包括平移信息和/或旋转信息。
根据本发明的第四方面，其中，所述状态传感部件为加速度计，所述加速度计获取的状态信息包括线加速度信息和/或角加速度信息。
根据本发明的第五方面，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的所述声音信号进行处理，包括：
根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制。
根据本发明的第六方面，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制，包括：
当所述移动终端的运动状态信息为向第一方向平移时，增加所述至少两个声音采集部件中靠近所述第一方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态信息为远离第二方向平移时，降低所述至少两个声音采集部件中靠近所述第二方向的声音采集部件所采集到的声音信号的增益。
根据本发明的第七方面，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制，包括：
当所述移动终端的运动状态信息为朝第三方向旋转时，增加所述至少两个声音采集部件中靠近所述第三方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态信息为远离第四方向旋转时，降低所述至少两个声音采集部件中靠近所述第四方向的声音采集部件所采集到的声音信号的增益。
根据本发明的第八方面，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的所述声音信号进行处理，包括：
根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行信号处理，以获取用户感兴趣的声音信号。
根据本发明的第九方面，提供一种声音信号处理装置，所述声音信号处理装置包括：
图像获取单元，用于通过图像采集部件获取图像信号；
声音获取单元，通过至少两个声音采集部件获取声音信号；
状态获取单元，通过状态传感部件获取移动终端的状态信息；
信息处理单元，当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的所述声音信号进行处理。
根据本发明的第十方面，其中，所述信息处理单元对所述至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理。
根据本发明的第十一方面，其中，所述移动终端的状态信息包括平移信息和/或旋转信息。
根据本发明的第十二方面，其中，所述状态传感部件为加速度计，所述加速度计获取的状态信息包括线加速度信息和/或角加速度信息。
根据本发明的第十三方面，其中，所述信息处理单元用于：根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制。
根据本发明的第十四方面，其中，所述信息处理单元具体用于：当所述移动终端的运动状态信息为向第一方向平移时，增加所述至少两个声音采集部件中靠近所述第一方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态信息为远离第二方向平移时，降低所述至少两个声音采集部件中靠近所述第二方向的声音采集部件所采集到的声音信号的增益。
根据本发明的第十五方面，其中，所述信息处理单元具体用于：
当所述移动终端的运动状态信息为朝第三方向旋转时，增加所述至少两个声音采集部件中靠近所述第三方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态信息为远离第四方向旋转时，降低所述至少两个声音采集部件中靠近所述第四方向的声音采集部件所采集到的声音信号的增益。
根据本发明的第十六方面，其中，所述信息处理单元用于：根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行信号处理，以获取用户感兴趣的声音信号。
根据本发明的第十七方面，提供一种移动终端，所述移动终端包括：
图像采集部件，用于采集图像信号；
至少两个声音采集部件，用于分别采集声音信号；
状态传感部件，用于获取所述移动终端的状态信息；
声音处理器，用于对所述至少两个声音采集部件所采集到的所述声音信号进行处理；
控制器，用于当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息来控制所述声音处理器进行声音处理。
根据本发明的第十八方面，其中，所述声音采集部件为两个、且以分离的方式置于所述移动终端的两侧；所述状态传感部件为加速度计，且位于所述移动终端的一侧。
本发明实施例的有益效果在于，根据移动终端的状态信息对至少两个声音采集部件所采集到的声音信号进行处理，可以动态地对来自不同声音采集部件的声音信号进行控制，由此能够获得良好的立体声拍摄效果，提高用户的体验。
参照后文的说明和附图，详细公开了本发明的实施方式。应该理解，本发明的实施方式在范围上并不因此而受到限制。在所附权利要求的精神和条款的范围内，本发明的实施方式包括许多改变、修改和等同。
针对一种实施方式描述和/或示出的特征可以以相同或类似的方式在一个或更多个其他实施方式中使用，与其他实施方式中的特征相组合，或替代其他实施方式中的特征。
应该强调，术语“包括/包含”在本文使用时指特征、整件、或组件的存在，但并不排除一个或更多个其他特征、整件或组件的存在或附加。
附图说明
从以下结合附图的详细描述中，本发明实施例的上述以及其他目的、特征和优点将变得更加明显，在附图中：
图1是本发明实施例的声音信号处理方法的一流程示意图；
图2是本发明实施例的声音信号处理方法的另一流程示意图；
图3是本发明实施例的声音信号处理装置的一构成示意图；
图4是本发明实施例的移动终端的一构成示意图；
图5是本发明实施例的移动终端进行平移的一示意图；
图6是本发明实施例的移动终端进行旋转的一示意图；
图7是本发明实施例的移动终端的另一构成示意图；
图8是本发明实施例的移动终端的***构成的一示意框图。
具体实施方式
可互换术语“电子设备”和“电子装置”包括便携式无线电通信设备。术语“便携式无线电通信设备”在下面被称为“移动无线电终端”、“便携式电子装置”或“便携式通信装置”，包括所有诸如移动电话、寻呼机、通信装置、电子记事簿、个人数字助理(PDA)、智能电话、便携式通信装置等的设备。
在本申请中，主要就形式为移动电话(也称为“手机”)的便携式电子装置描述了本发明的实施方式。然而，应当理解，本发明不应限于移动电话的情况，而可以涉及任何类型的合适的电子设备，这样的电子设备的示例包括媒体播放器、游戏设备、PDA和计算机、数字摄像机、平板电脑等。
实施例1
本发明实施例提供一种声音信号处理方法。图1是本发明实施例的声音信号处理方法的一流程示意图，如图1所示，所述声音信号处理方法包括：
步骤101，通过图像采集部件获取图像信号；
步骤102，通过至少两个声音获取部件采集声音信号；
步骤103，通过状态传感部件获取移动终端的状态信息；
步骤104，当图像采集部件采集图像信号时，根据移动终端的状态信息对至少两个声音采集部件所采集到的声音信号进行处理。
在本实施例中，该声音信号处理方法可以应用于移动终端。该移动终端例如可以是通信移动终端、照相机、摄像机、平板电脑等，或者还可以是可穿戴设备等。本实施例并不仅限于此，以下仅以通信移动终端(手机)为例进行说明。
在本实施例中，可以通过状态传感部件获取移动终端的状态信息，其中状态信息可以是移动终端的运动状态信息。但本发明不限于此，还可以是移动终端在静止状态时的信息，例如可以是移动终端被用户拍打后的受力状态信息，或者是被用户紧握后的形变状态信息。
在本实施例中，图像采集部件例如可以是摄像头(camera)，声音采集部件例如可以是麦克风(microphone)。状态传感部件例如可以是加速度计(accelerometer)。但本发明不限于此，例如还可以使用其他传感器来获得移动终端的运动状态信息。此外，状态检测部件例如还可以是近距离传感器、温度传感器、速度传感器、大气压力传感器、地磁传感器、形变传感器、湿度传感器以及光线传感器等等。
在本实施例中，步骤104中根据移动终端的状态信息，可以对至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理。由此可以分别对不同声音采集部件所采集的声音信号进行控制，获得更好的声音效果。
在本实施例中，步骤101至步骤104之间没有执行顺序的限制。例如可以先执行步骤101，也可以先执行步骤102或步骤103，还可以并行执行步骤101至步骤103；此外步骤101和步骤104可以并行执行。本发明不限于此，可以根据实际情况确定具体的实施方式。
在本实施例中，移动终端的运动状态信息可以包括平移信息和/或旋转信息。由此，可以通过状态传感部件来获得移动终端的拍摄位置或拍摄角度。并且，根据移动终端的运动状态信息对至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理；可以动态地对来自不同声音采集部件的声音信号进行独立的控制，由此能够获得良好的立体声拍摄效果，提高用户的体验。
以下以状态传感部件为加速度计为例对本发明进行详细说明。其中，加速度计获取的运动状态信息包括线加速度信息和/或角加速度信息。其中，加速度计的功能可以由线加速度计和角加速度计组合来实现，也可以单独使用例如线加速度计或角加速度计；关于加速度计的具体技术内容可以参考相关技术。
在本实施例中，步骤104根据移动终端的状态信息对至少两个声音采集部件所采集到的所述声音信号进行处理，具体可以包括：根据移动终端的状态信息，对至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制。
其中，例如可以根据移动终端的运动状态信息，增加其中一个或几个声音采集部件所采集到的声音信号的增益(gain)，例如增加声音信号的功率或幅值；而对于其他的声音采集部件所采集到的声音信号，不进行增益的控制。或者，降低其中一个或几个声音采集部件所采集到的声音信号的增益(gain)，而对于其他的声音采集部件所采集到的声音信号，不进行增益的控制。
值得注意的是，以上仅对增益的控制进行了说明。但本发明不限于此，例如还可以对各声音采集部件所采集的声音信号进行其他处理，例如滤波、限幅或调节频率响应等等。只要根据移动终端的状态信息，对至少两个声音采集部件所采集到的声音信号进行处理，均应落在本发明实施例的范围内。
以下仅以进行增益控制，并采用平移或旋转为例对本发明实施例进行说明。
在一个实施方式中，根据移动终端的状态信息对至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制，可以包括：当移动终端的运动状态信息为向第一方向平移时，增加至少两个声音采集部件中靠近第一方向的声音采集部件所采集到的声音信号的增益；或者当移动终端的运动状态信息为远离第二方向平移时，降低至少两个声音采集部件中靠近第二方向的声音采集部件所采集到的声音信号的增益。
图2是本发明实施例的声音信号处理方法的另一流程示意图，如图2所示，所述声音信号处理方法包括：
步骤201，通过图像采集部件获取图像信号；
步骤202，通过至少两个声音采集部件获取声音信号；
步骤203，通过状态传感部件获取移动终端的运动状态信息；
步骤204，根据运动状态信息判断移动终端是否平移；如果处于平移状态，则执行步骤205，否则执行步骤206；
步骤205，增加靠***移方向的声音采集部件所采集到的声音信号的增益。
在本实施例中，若移动终端向左平移，则增加靠近左侧的声音采集部件所采集到的声音信号的增益；若移动终端向右平移，则增加靠近右侧的声音采集部件所采集到的声音信号的增益。
步骤206，根据运动状态信息判断移动终端是否旋转；如果处于旋转状态，则执行步骤207，否则执行步骤208；
在本实施例中，可以根据加速度计的线加速度信息来确定移动终端的平移方向；例如移动终端从左向右平移时，则加速度计的X轴方向的线加速度Xaxis>0，由此可以确定移动终端从左向右移动。此外，可以根据加速度计的角加速度信息来确定移动终端的旋转方向；例如移动终端向左侧旋转时，则加速度计的Z轴方向的角加速度Zaxis>0，由此可以确定移动终端向左侧旋转。关于使用加速度计如何进行平移或旋转的判断，可以参考相关技术，本实施例不再赘述。
步骤207，增加靠近旋转方向的声音采集部件所采集到的声音信号的增益。
在本实施例中，若移动终端向左侧旋转，则增加靠近左侧的声音采集部件所采集到的声音信号的增益；若移动终端向右侧旋转，则增加靠近右侧的声音采集部件所采集到的声音信号的增益。
步骤208，记录获得的图像信号和声音信号，以得到拍摄的视频信号。
值得注意的是，在上述图2的例子中对增益进行了增加的控制，但本发明不限于此，例如还可以降低增益等；可以对左右两侧的声音采集部件分别独立地进行控制。此外，上述例子中仅以左右方向为例对本发明进行了说明，但本发明不限于此，还可以是其他任意的方向。
此外，图2仅示意性地示出了本实施例的各个步骤和执行顺序，但本发明不限于此。例如可以并行执行步骤201至步骤203等；或者还可以先判断是否旋转，再判断是否平移等；或者还可以仅进行平移的判断或者仅进行旋转的判断等。可以根据实际情况确定具体的步骤和执行顺序。
以上仅以平移和旋转为例，对本发明的移动状态进行了说明。但本发明不限于此，例如移动终端的移动可以是复杂的，可以在整个空间的各个方向进行运动；可以对整个空间设置坐标系，在此基础上将移动终端的运动分解为多个平移和旋转的组合，由此获得移动终端的运动状态信息。具体如何实施可以参考相关技术。
在本实施例中，步骤104根据移动终端的状态信息对至少两个声音采集部件所采集到的声音信号进行处理，还可以包括：根据移动终端的状态信息对至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行信号处理，以获取用户感兴趣的声音信号。
例如，当形变传感器检测到用户增加了握住移动终端左侧的力度时，可以输出左侧形变的状态信息。移动终端可以根据该状态信息对左侧的麦克风采集到的声音信号进行信号处理。例如，过滤掉左侧声音的高频部分而仅保留低频部分，以获取用户感兴趣的声音信号。
由上述实施例可知，根据移动终端的状态信息对至少两个声音采集部件所采集到的声音信号进行处理，可以动态地对来自不同声音采集部件的声音信号进行控制，由此能够获得良好的立体声拍摄效果，提高用户的体验。
实施例2
本发明实施例提供一种声音信号处理装置，配置于移动终端中。本发明实施例对应于实施例1中的声音信号处理方法，相同的内容不再赘述。
图3是本发明实施例的声音信号处理装置的一构成示意图，如图3所示，声音信号处理装置300包括：图像获取单元301、声音获取单元302、状态获取单元303和信息处理单元304；
其中，图像获取单元301用于通过图像采集部件获取图像信号；声音获取单元302通过至少两个声音采集部件获取声音信号；状态获取单元303通过状态传感部件获取移动终端的状态信息；信息处理单元404用于当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的所述声音信号进行处理。
在本实施例中，信息处理单元304可以对至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理。所述移动终端的状态信息可以包括平移信息和/或旋转信息。
在本实施例中，所述状态传感部件可以为加速度计，所述加速度计获取的运动状态信息包括线加速度信息和/或角加速度信息。但本发明不限于此。
在本实施例中，所述信息处理单元304可以用于：根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制。
在一个实施方式中，所述信息处理单元304具体可以用于：当所述移动终端的运动状态信息为向第一方向平移时，增加所述至少两个声音采集部件中靠近所述第一方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态信息为远离第二方向平移时，降低所述至少两个声音采集部件中靠近所述第二方向的声音采集部件所采集到的声音信号的增益。
在另一个实施方式中，所述信息处理单元304具体可以用于：当所述移动终端的运动状态信息为朝第三方向旋转时，增加所述至少两个声音采集部件中靠近所述第三方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态信息为远离第四方向旋转时，降低所述至少两个声音采集部件中靠近所述第四方向的声音采集部件所采集到的声音信号的增益。
在本实施例中，所述信息处理单元304还可以用于：根据移动终端的状态信息对至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行信号处理，以获取用户感兴趣的声音信号。
由上述实施例可知，根据移动终端的状态信息对至少两个声音采集部件所采集到的声音信号进行处理，可以动态地对来自不同声音采集部件的声音信号进行控制，由此能够获得良好的立体声拍摄效果，提高用户的体验。
实施例3
本发明实施例3提供一种移动终端。在本实施例中，该移动终端可以包括如实施例2所述的声音信号处理装置，其内容被合并于此，重复之处不再赘述。
在本实施例中，该移动终端可以是手机、照相机、摄像机、平板电脑或者可穿戴设备等，但本发明不限于此。
图4是本发明实施例的移动终端的一构成示意图，示出了该移动终端的一实例。其中为了简单起见，图4仅示出了与本发明相关的部件，移动终端的其他部件没有示出，可以参考相关技术。
如图4所示，移动终端400包括：图像采集部件401、至少两个声音采集部件402和403、状态传感部件404、声音处理器405和控制器406；
其中，图像采集部件401用于采集图像信号；至少两个声音采集部件402和403用于分别采集声音信号；状态传感部件404用于获取所述移动终端的状态信息；声音处理器405用于对至少两个声音采集部件402和403所采集到的声音信号进行处理；控制器406用于当图像采集部件401采集图像信号时，根据移动终端的状态信息来控制声音处理器405进行声音处理。
如图4所示，声音采集部件可以为两个、且以分离的方式置于移动终端的两侧；状态传感部件404可以为加速度计，且位于移动终端的一侧。声音处理器405例如可以对声音采集部件402和403分别独立地进行增加增益或者降低增益的控制。
图5是本发明实施例的移动终端进行平移的一示意图。如图5所示，当移动终端400从右向左平移(例如沿着X轴向左移动)时，左侧的声音采集部件402所采集到的声音信号的增益被增加。
图6是本发明实施例的移动终端进行旋转的一示意图。如图6所示，当移动终端400向左侧进行旋转(例如绕着Z轴旋使得摄像头的摄像范围向左侧移动)时，左侧的声音采集部件402所采集到的声音信号的增益被增加。
在本实施例中，实施例2所述的声音信号处理装置300的功能可以被配置到声音处理器405和控制器406中。其中，图像获取单元301、声音获取单元302、状态获取单元303的功能可以被配置到控制器406中。而信息处理单元304的功能可以被配置到声音处理器405和控制器406中。
图7是本发明实施例的移动终端的另一构成示意图，示出了移动终端700的一实例。其中，声音处理器405和控制器406的功能由中央控制器701实现。中央控制器701可以包括实施例2所述的声音信号处理装置300的各个模块。
以下以通信移动终端(手机)为例，对本发明实施例的移动终端进行说明。
图8是本发明实施例的移动终端700的***构成的一示意框图。如图8所示，该移动终端800可以包括中央处理器100和存储器140；存储器140耦合到中央处理器100。值得注意的是，该图是示例性的；还可以使用其他类型的结构，来补充或代替该结构，以实现电信功能或其他功能。
如图8所示，移动终端800还可以包括：照相机150(图像采集部件)、至少两个麦克风131(声音采集部件)、加速度计180(状态传感部件)。
在一个实施方式中，声音信号处理的功能可以被集成到中央处理器100中。其中，中央处理器100可以被配置为进行如实施例1所述的声音信号处理方法。
在另一个实施方式中，声音信号处理装置300可以与中央处理器100分开配置，例如可以将声音信号处理装置300配置为与中央处理器100连接的芯片，通过中央处理器的控制来实现声音信号处理的功能。
如图8所示，该移动终端800还可以包括：通信模块110、输入单元120、音频处理器130、显示器160、电源170。值得注意的是，移动终端800也并不是必须要包括图8中所示的所有部件；此外，移动终端800还可以包括图8中没有示出的部件，可以参考现有技术。
如图8所示，中央处理器100有时也称为控制器或操作控件，可以包括微处理器或其他处理器装置和/或逻辑装置，该中央处理器100接收输入并控制电子设备800的各个部件的操作。
其中，存储器140，例如可以是缓存器、闪存、硬驱、可移动介质、易失性存储器、非易失性存储器或其它合适装置中的一种或更多种。可储存上述与失败有关的信息，此外还可存储执行有关信息的程序。并且中央处理器100可执行该存储器140存储的该程序，以实现信息存储或处理等。
输入单元120向中央处理器100提供输入。该输入单元120例如为按键或触摸输入装置。照相机150用于摄取图像数据，并将摄取的图像数据提供给中央处理器100，以按常规方式使用，例如，进行存储、传送等。电源170用于向移动终端800提供电力。显示器160用于进行图像和文字等显示对象的显示。该显示器例如可为LCD显示器，但并不限于此。
该存储器140可以是固态存储器，例如，只读存储器(ROM)、随机存取存储器(RAM)、SIM卡等。还可以是这样的存储器，其即使在断电时也保存信息，可被选择性地擦除且设有更多数据，该存储器的示例有时被称为EPROM等。存储器140还可以是某种其它类型的装置。存储器140包括缓冲存储器141(有时被称为缓冲器)。存储器140可以包括应用/功能存储部142，该应用/功能存储部142用于存储应用程序和功能程序或用于通过中央处理器100执行移动终端800的操作的流程。
存储器140还可以包括数据存储部143，该数据存储部143用于存储数据，例如联系人、数字数据、图片、声音和/或任何其他由电子设备使用的数据。存储器140的驱动程序存储部144可以包括电子设备的用于通信功能和/或用于执行电子设备的其他功能(如消息传送应用、通讯录应用等)的各种驱动程序。
通信模块110即为经由天线111发送和接收信号的发送机/接收机110。通信模块(发送机/接收机)110耦合到中央处理器100，以提供输入信号和接收输出信号，这可以和常规移动通信终端的情况相同。
基于不同的通信技术，在同一电子设备中，可以设置有多个通信模块110，如蜂窝网络模块、蓝牙模块和/或无线局域网模块等。通信模块(发送机/接收机)110还经由音频处理器130耦合到扬声器131和麦克风132，以经由扬声器131提供音频输出，并接收来自麦克风132的音频输入，从而实现通常的电信功能。音频处理器130可以包括任何合适的缓冲器、解码器、放大器等。另外，音频处理器130还耦合到中央处理器100，从而使得可以通过麦克风132能够在本机上录音，且使得可以通过扬声器131来播放本机上存储的声音。
本发明实施例还提供一种计算机可读程序，其中当在移动终端中执行所述程序时，所述程序使得计算机在所述电子设备中执行如上面实施例1所述的声音信号处理方法。
本发明实施例还提供一种存储有计算机可读程序的存储介质，其中所述计算机可读程序使得计算机在移动终端中执行上面实施例1所述的声音信号处理方法。
以上参照附图描述了本发明的优选实施方式。这些实施方式的许多特征和优点根据该详细的说明书是清楚的，因此所附权利要求旨在覆盖这些实施方式的落入其真实精神和范围内的所有这些特征和优点。此外，由于本领域的技术人员容易想到很多修改和改变，因此不是要将本发明的实施方式限于所例示和描述的精确结构和操作，而是可以涵盖落入其范围内的所有合适修改和等同物。
应当理解，本发明的各部分可以用硬件、软件、固件或者它们的组合来实现。在上述实施方式中，多个步骤或方法可以用存储在存储器中且由合适的指令执行***执行的软件或固件来实现。例如，如果用硬件来实现，和在另一实施方式中一样，可以用本领域共知的下列技术中的任一项或者他们的组合来实现：具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路，具有合适的组合逻辑门电路的专用集成电路，可编程门阵列(PGA)，现场可编程门阵列(FPGA)等。
流程图中或在此以其它方式描述的任何过程或方法描述或框可以被理解为，表示包括一个或更多个用于实现特定逻辑功能或过程中的步骤的可执行指令的代码的模块、片段或部分，并且本发明的优选实施方式的范围包括另外的实现，其中，可以不按所示出或讨论的顺序，包括根据所涉及的功能按基本同时的方式或者按相反的顺序，来执行功能，这应被本发明所述技术领域的技术人员所理解。
在流程图中表示或者在此以其它方式描述的逻辑和/或步骤，例如，可以被认为是用于实现逻辑功能的可执行指令的定序列表，可以具体实现在任何计算机可读介质中，以供指令执行***、装置或设备(如基于计算机的***、包括处理器的***或其他可以从指令执行***、装置或设备取指令并执行指令的***)使用，或结合这些指令执行***、装置或设备而使用。
上述文字说明和附图示出了本发明的各种不同的特征。应当理解，本领域普通技术人员可以准备合适的计算机代码来实现上面描述且在附图中例示的各个步骤和过程。还应当理解，上面描述的各种终端、计算机、服务器、网络等可以是任何类型的，并且可以根据公开内容来准备所述计算机代码以利用所述装置实现本发明。
在此公开了本发明的特定实施方式。本领域的普通技术人员将容易地认识到，本发明在其他环境下具有其他应用。实际上，还存在许多实施方式和实现。所附权利要求绝非为了将本发明的范围限制为上述具体实施方式。另外，任意对于“用于……的装置”的引用都是为了描绘要素和权利要求的装置加功能的阐释，而任意未具体使用“用于……的装置”的引用的要素都不希望被理解为装置加功能的元件，即使该权利要求包括了“装置”的用词。
尽管已经针对特定优选实施方式或多个实施方式示出并描述了本发明，但是显然，本领域技术人员在阅读和理解说明书和附图时可以想到等同的修改例和变型例。尤其是对于由上述要素(部件、组件、装置、组成等)执行的各种功能，除非另外指出，希望用于描述这些要素的术语(包括“装置”的引用)对应于执行所述要素的具体功能的任意要素(即，功能等效)，即使该要素在结构上不同于在本发明的所例示的示例性实施方式或多个实施方式中执行该功能的公开结构。另外，尽管以上已经针对几个例示的实施方式中的仅一个或更多个描述了本发明的具体特征，但是可以根据需要以及从对任意给定或具体应用有利的方面考虑，将这种特征与其他实施方式的一个或更多个其他特征相结合。

Claims (18)

1.一种声音信号处理方法，其特征在于，所述声音信号处理方法包括：
通过图像采集部件获取图像信号；
通过至少两个声音采集部件获取声音信号；
通过状态传感部件获取移动终端的状态信息；
当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的声音信号进行处理。
2.根据权利要求1所述的声音信号处理方法，其中，对所述至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理。
3.根据权利要求1所述的声音信号处理方法，其中，所述移动终端的状态信息包括平移信息和/或旋转信息。
4.根据权利要求3所述的声音信号处理方法，其中，所述状态传感部件为加速度计，所述加速度计获取的运动状态信息包括线加速度信息和/或角加速度信息。
5.根据权利要求1所述的声音信号处理方法，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的声音信号进行处理，包括：
根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制。
6.根据权利要求5所述的声音信号处理方法，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制，包括：
当所述移动终端的运动状态为向第一方向平移时，增加所述至少两个声音采集部件中靠近所述第一方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态为远离第二方向平移时，降低所述至少两个声音采集部件中靠近所述第二方向的声音采集部件所采集到的声音信号的增益。
7.根据权利要求5所述的声音信号处理方法，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制，包括：
当所述移动终端的运动状态为朝第三方向旋转时，增加所述至少两个声音采集部件中靠近所述第三方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态为远离第四方向旋转时，降低所述至少两个声音采集部件中靠近所述第四方向的声音采集部件所采集到的声音信号的增益。
8.根据权利要求1所述的声音信号处理方法，其中，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的声音信号进行处理，包括：
根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行信号处理，以获取用户感兴趣的声音信号。
9.一种声音信号处理装置，其特征在于，所述声音信号处理装置包括：
图像获取单元，用于通过图像采集部件获取图像信号；
声音获取单元，通过至少两个声音采集部件获取声音信号；
状态获取单元，通过状态传感部件获取移动终端的状态信息；
信息处理单元，当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息对所述至少两个声音采集部件所采集到的声音信号进行处理。
10.根据权利要求9所述的声音信号处理装置，其中，所述信息处理单元对所述至少两个声音采集部件所采集到的声音信号以相互独立的方式进行处理。
11.根据权利要求9所述的声音信号处理装置，其中，所述移动终端的状态信息包括平移信息和/或旋转信息。
12.根据权利要求11所述的声音信号处理装置，其中，所述状态传感部件为加速度计，所述加速度计获取的运动状态信息包括线加速度信息和/或角加速度信息。
13.根据权利要求9所述的声音信号处理装置，其中，所述信息处理单元用于：根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行增益控制。
14.根据权利要求13所述的声音信号处理装置，其中，所述信息处理单元具体用于：当所述移动终端的运动状态为向第一方向平移时，增加所述至少两个声音采集部件中靠近所述第一方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态为远离第二方向平移时，降低所述至少两个声音采集部件中靠近所述第二方向的声音采集部件所采集到的声音信号的增益。
15.根据权利要求13所述的声音信号处理装置，其中，所述信息处理单元具体用于：
当所述移动终端的运动状态为朝第三方向旋转时，增加所述至少两个声音采集部件中靠近所述第三方向的声音采集部件所采集到的声音信号的增益；或者
当所述移动终端的运动状态为远离第四方向旋转时，降低所述至少两个声音采集部件中靠近所述第四方向的声音采集部件所采集到的声音信号的增益。
16.根据权利要求9所述的声音信号处理装置，其中，所述信息处理单元用于：根据所述移动终端的状态信息对所述至少两个声音采集部件中的部分或者全部部件所采集到的声音信号进行信号处理，以获取用户感兴趣的声音信号。
17.一种移动终端，其特征在于，所述移动终端包括：
图像采集部件，用于采集图像信号；
至少两个声音采集部件，用于分别采集声音信号；
状态传感部件，用于获取所述移动终端的状态信息；
声音处理器，用于对所述至少两个声音采集部件所采集到的所述声音信号进行处理；
控制器，用于当所述图像采集部件采集所述图像信号时，根据所述移动终端的状态信息来控制所述声音处理器进行声音处理。
18.根据权利要求17所述的移动终端，其中，所述声音采集部件为两个、且以分离的方式置于所述移动终端的两侧；所述状态传感部件为加速度计，且位于所述移动终端的一侧。
CN201410286346.2A 2014-06-24 2014-06-24 声音信号处理方法、装置和移动终端 Pending CN105451139A (zh)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201410286346.2A CN105451139A (zh) 2014-06-24 2014-06-24 声音信号处理方法、装置和移动终端
US14/649,418 US20160150207A1 (en) 2014-06-24 2015-01-22 Sound signal processing method and apparatus, and mobile terminal
PCT/IB2015/050480 WO2015198161A1 (en) 2014-06-24 2015-01-22 Sound signal processing method and apparatus, and mobile terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410286346.2A CN105451139A (zh) 2014-06-24 2014-06-24 声音信号处理方法、装置和移动终端

Publications (1)

Publication Number Publication Date
CN105451139A true CN105451139A (zh) 2016-03-30

Family

ID=52697474

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410286346.2A Pending CN105451139A (zh) 2014-06-24 2014-06-24 声音信号处理方法、装置和移动终端

Country Status (3)

Country Link
US (1) US20160150207A1 (zh)
CN (1) CN105451139A (zh)
WO (1) WO2015198161A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109696658A (zh) * 2017-10-23 2019-04-30 京东方科技集团股份有限公司 采集设备、声音采集方法、声源跟踪***及其方法
CN111050269A (zh) * 2018-10-15 2020-04-21 华为技术有限公司 音频处理方法和电子设备

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101719999B1 (ko) * 2015-07-10 2017-03-27 엘지전자 주식회사 이동 단말기
JP2020166641A (ja) * 2019-03-29 2020-10-08 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
CN110853294A (zh) * 2019-10-29 2020-02-28 广东美的白色家电技术创新中心有限公司 利用家用电器进行监控的方法、装置和计算机存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1169559A (zh) * 1996-06-12 1998-01-07 任天堂株式会社 与图像显示同步的音响发生装置
US20050140810A1 (en) * 2003-10-20 2005-06-30 Kazuhiko Ozawa Microphone apparatus, reproducing apparatus, and image taking apparatus
CN102771141A (zh) * 2009-12-24 2012-11-07 诺基亚公司 一种装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09312790A (ja) * 1996-05-21 1997-12-02 Sharp Corp 音声記録制御装置
JP2010130403A (ja) * 2008-11-28 2010-06-10 Sharp Corp 映像制御装置およびそれを備えた撮像装置、表示装置
JP2011071962A (ja) * 2009-08-28 2011-04-07 Sanyo Electric Co Ltd 撮像装置及び再生装置
EP2795931B1 (en) * 2011-12-21 2018-10-31 Nokia Technologies Oy An audio lens
EP2680615B1 (en) * 2012-06-25 2018-08-08 LG Electronics Inc. Mobile terminal and audio zooming method thereof
US9288604B2 (en) * 2012-07-25 2016-03-15 Nokia Technologies Oy Downmixing control
EP2984854B1 (en) * 2013-04-10 2021-11-17 Nokia Technologies Oy Audio recording and playback apparatus

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1169559A (zh) * 1996-06-12 1998-01-07 任天堂株式会社 与图像显示同步的音响发生装置
US20050140810A1 (en) * 2003-10-20 2005-06-30 Kazuhiko Ozawa Microphone apparatus, reproducing apparatus, and image taking apparatus
CN102771141A (zh) * 2009-12-24 2012-11-07 诺基亚公司 一种装置

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109696658A (zh) * 2017-10-23 2019-04-30 京东方科技集团股份有限公司 采集设备、声音采集方法、声源跟踪***及其方法
US11525883B2 (en) 2017-10-23 2022-12-13 Beijing Boe Technology Development Co., Ltd. Acquisition equipment, sound acquisition method, and sound source tracking system and method
CN111050269A (zh) * 2018-10-15 2020-04-21 华为技术有限公司 音频处理方法和电子设备

Also Published As

Publication number Publication date
WO2015198161A1 (en) 2015-12-30
US20160150207A1 (en) 2016-05-26

Similar Documents

Publication Publication Date Title
CN105451139A (zh) 声音信号处理方法、装置和移动终端
CN106572302A (zh) 一种图像信息处理方法及设备
KR101920029B1 (ko) 모바일 장치 및 제어방법
CN107256139A (zh) 音频音量的调整方法、终端及计算机可读存储介质
CN107770448A (zh) 一种图像采集方法、移动终端和计算机存储介质
CN112543250B (zh) 音频播放控制方法、智能手机、装置及可读存储介质
CN105679300A (zh) 移动终端和降噪方法
CN112423175B (zh) 耳机降噪方法、装置、存储介质及电子设备
CN107454248A (zh) 一种音频信号处理方法、装置及移动终端
CN105245777A (zh) 生成视频图片的方法及装置
CN104410822B (zh) 视频监控方法和车载视频监控设备
CN104021148A (zh) 调节音效的方法和装置
CN105681894A (zh) 显示视频文件的装置及方法
US20190098398A1 (en) Multi-Resolution Audio Signals
CN105824400A (zh) 电子设备的控制方法、控制装置以及电子设备
CN108540639A (zh) 拼接屏幕的显示处理方法、设备及计算机可存储介质
CN106507269A (zh) 一种数据迁移方法及终端设备
CN106302974B (zh) 一种信息处理的方法及电子设备
CN107197101B (zh) 音频调整方法、移动终端及计算机可读存储介质
CN106249992A (zh) 一种网页控制方法及移动终端
CN106502623A (zh) 音频输出装置及方法
US20190122687A1 (en) Method for processing audio signal and electronic device for supporting the same
CN105262952A (zh) 一种移动终端及其处理图像的方法
CN108540659A (zh) 降低tdd噪声影响的方法、终端及计算机可读存储介质
CN106131747A (zh) 一种音效添加方法及用户终端

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160330