CN115623121A - 一种通话方法及电子设备 - Google Patents

一种通话方法及电子设备 Download PDF

Info

Publication number
CN115623121A
CN115623121A CN202111194770.0A CN202111194770A CN115623121A CN 115623121 A CN115623121 A CN 115623121A CN 202111194770 A CN202111194770 A CN 202111194770A CN 115623121 A CN115623121 A CN 115623121A
Authority
CN
China
Prior art keywords
channel audio
mode
audio signal
call
left channel
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202111194770.0A
Other languages
English (en)
Other versions
CN115623121B (zh
Inventor
玄建永
杨枭
刘镇亿
夏日升
吴元友
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Honor Device Co Ltd
Original Assignee
Beijing Honor Device Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Honor Device Co Ltd filed Critical Beijing Honor Device Co Ltd
Priority to PCT/CN2022/093888 priority Critical patent/WO2023284406A1/zh
Publication of CN115623121A publication Critical patent/CN115623121A/zh
Application granted granted Critical
Publication of CN115623121B publication Critical patent/CN115623121B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/03Constructional features of telephone transmitters or receivers, e.g. telephone hand-sets
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72433User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for voice messaging, e.g. dictaphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Telephone Function (AREA)

Abstract

一种通话方法及电子设备。在该方法中,电子设备中设置了两个发声器:第一发声器置于电子设备的侧面,第二发声器置于电子设备的屏幕内侧。电子设备可以将其他电子设备发送给本机的音频信号进行处理,生成左声道音频信号以及右声道音频信号。第一发声器用于播放左声道音频信号,其播放的左声道音频信号通过空气传输到人耳。第二发声器用于播放右声道音频信号,其播放的右声道音频信号通过骨骼传输到人耳,该第二发声器可以被称为骨传导发声器。其中,左声道音频信号中,低频声音信号的能量大于高频声音信号的能量,该右声道音频信号中高频声音信号的能量大于低频声音信号的能量。

Description

一种通话方法及电子设备
技术领域
本申请涉及终端及通信技术领域,尤其涉及一种通话方法及电子设备。
背景技术
屏占比为电子设备的屏幕占电子设备正面的比例。随着电子设备的不断发展,用户对电子设备的屏占比要求越来越高。发展到现阶段,多数电子设备都是全面屏,即该电子设备的正面全部都是屏幕,四个边框位置都是采用的无边框设计,是接近100%的屏占比。
虽然,全面屏电子设备对于视觉体验有显著的提升。但是,全面屏的出现导致电子设备的听筒不能设置在手机的正面,只能设置在电子设备的侧面。
这样,电子设备紧贴人耳在利用听筒播放音频信号时,部分音频信号从听筒输出到人耳之外,没有进入到人耳而是进入人耳周围环境中,导致漏音。另一部分音频信号可以虽然从听筒输出到人耳,但是由于漏音导致该部分音频信号的能量相比于完整的音频信号有所损失,这时,如果人耳周围环境存在噪声信号,该噪声信号进入人耳后,会干扰用户对该部分音频信号的识别,导致听音不清晰。
发明内容
本申请提供了一种通话方法及电子设备,通话过程中,电子设备可以将其他电子设备发送给本机的音频信号在不同的通话模式下利用不同的参数进行处理,生成不同的左声道音频信号以及右声道音频信号,以适配通话环境。
第一方面,本申请提供了一种通话方法,应用于包括第一发声器和第二发声器的电子设备,该第二发声器与该第一发声器不同,该第一发声器对应左声道,该第二发声器对应右声道,该方法包括:显示通话应用界面;该电子设备确定为第一通话模式,该第一通话模式对应第一左声道音频特征和第一右声道音频特征,该第一左声道音频特征为左声道输出的音频信号的音频特征,该第一右声道音频特征为该右声道输出的音频信号的音频特征,该第一通话模式对应第一通话环境;确定该电子设备处于第二通话环境;该电子设备切换为第二通话模式,该第二通话模式对应第二左声道音频特征和第二右声道音频特征,该第二左声道音频特征为该左声道输出的音频信号的音频特征,该第二右声道音频特征为该右声道输出的音频信号的音频特征,该第二通话模式对应第二通话环境,该第一通话环境和该第二通话环境不同,其中,该第一左声道音频特征与该第二左声道音频特征不同,和/或,该第一右声道音频特征与该第二右声道音频特征不同。
在上述实施例中,用户通话时,电子设备播放的音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。例如,普通模式下,嘈杂模式下,外界噪音大,则可以使得播放的音频音量增大,增大人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音的能量,使得用户在嘈杂的通话环境中可以拾音清晰。在安静模式下,外界较为安静,则可以使得播放的音频的音量变小,同时突出人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音,使得减少漏音的同时,保证用户可以拾音清晰。
结合第一方面,在一种实施方式中,该电子设备确定为第一通话模式之后,该方法还包括:该电子设备接收下行音频;该下行音频为通话过程中其他电子设备发送给该电子设备的音频;该电子设备在该第一通话模式下,对该下行音频进行处理,得到第一左声道音频以及第一右声道音频,其中,该第一左声道音频中,低频音的能量大于高频音的能量,该第一右声道音频中,高频音的能量大于低频音的能量;该电子设备通过该第一发声器播放该第一左声道音频,通过该第二发声器播放该第一右声道音频。
在上述实施例中,通常来说,两个发声器的材质是不同的,其中一个发声器适合用于播放高频的音频,另一个播放低频的音频效果更好,则电子设备生成的两路音频其中一路为低频的能量大于高频,另一路为高频的能量大于低频,则可以适配不同的发声器,提高音质。
结合第一方面,在一种实施方式中,该第一发声器置于该电子设备的侧面,该第二发声器置于该电子设备的屏幕内侧;其中,该第一发声器播放的目标左声道音频通过空气传输到人耳,该第二发声器播放的目标右声道音频通过骨骼传输到人耳。
在上述实施例中,第二发声器置于电子设备的屏幕内侧,通过骨传导实现声音的传播,使得用户可以实现在任何通话模式下都拾音清晰。同时,有了第二发声器,第一发声器播放的音频声音的能量可以适当减小,也可以使得用户拾音清晰,同时实现减少漏音。
结合第一方面,在一种实施方式中,对该下行音频进行处理,得到第一左声道音频以及第一右声道音频,具体包括:该电子设备根据下行音频得到处理前的第一左声道音频以及处理后的第一右声道音频;将该处理前的第一左声道音频以及处理前的第一右声道音频分别进行音色调整以及音量调整,得到第一左声道音频以及第一右声道音频,该音色调整是指调整音频中不同频段的声音的能量分布,该音量调整是指调整音频的能量大小。
在上述实施例中,电子设备可以对音频进行音色和音量调整,使得处理后的音频与通话时的环境适配。实现音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。
结合第一方面,在一种实施方式中,该电子设备根据下行音频得到处理前的第一左声道音频以及处理前的第一右声道音频之后,将该处理前的第一左声道音频和该处理前的第一右声道音频分别进行音色调整以及音频调整之前,该方法还包括:该电子设备确定对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数,该参数包括左声道音色参数、右声道音色参数、左声道音量参数及右声道音量参数;将该处理前的第一左声道音频和该处理前的第一右声道音频分别进行音色调整以及音频调整,得到第一左声道音频以及第一右声道音频,具体包括:利用该左声道音色参数和该左声道音量参数对处理前的左声道音频分别进行音色调整以及音量调整得到第一左声道音频;利用该右声道音色参数和该右声道音量参数对处理前的右声道音频分别进行音色调整以及音量调整,得到第一右声道音频。
在上述实施例中,在不同的通话环境下,电子设备对音频进行音色调整和音量调整的参数是不同的,这样可以使得处理后的音频与通话时的环境适配。实现音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。
结合第一方面,在一种实施方式中,确定对该处理前的左声道音频和该处理前的右声道音频进行处理的参数,具体包括:该电子设备确定通话环境类型,该通话环境类型包括安静、普通及嘈杂;其中,通话环境类型为安静时与通话环境类型为普通/嘈杂时相比,前者对应的第一上行音频中噪声的长时能量比后者小;通话环境类型为嘈杂时与通话环境类型为安静/普通时相比,前者对应的第一上行音频中噪声的长时能量比后者大;该电子设备确定用户与屏幕之间的状态,该用户与屏幕之间的状态包括紧贴屏幕状态和非紧贴屏幕状态;该紧贴屏幕状态为用户与该电子设备的屏幕之间的距离小于一个预设值且大于该预设值的此续时间大于一个预设时间的状态,该非紧贴屏幕状态为用户与该电子设备的屏幕之间的距离不小于一个预设值且不小于该预设值的此续时间大于一个预设时间的状态;基于该通话环境类型以及用户与屏幕之间的状态确定通话模式,该通话模式为第一通话模式及第二通话模式中的一个。
在上述实施例中,电子设备用过通话环境类型以及用户与屏幕之间的状态确定通话模式。这样,可以使得确定的通话模式更准确,例如,当用户与屏幕紧贴时,且环境嘈杂时,可以确定为嘈杂模式,此时可以设置增大播放的音频的音量使得用户拾音清晰。
结合第一方面,在一种实施方式中,该第一模式为安静模式、普通模式以及嘈杂模式中的一个,第二模式为安静模式、普通模式以及嘈杂模式中的另一个,基于该通话环境类型以及用户与屏幕之间的状态确定通话模式,具体包括:在该通话环境类型为普通且该用户与屏幕之间的状态为紧贴屏幕状态的情况下或者该用户与屏幕之间的状态为非紧贴屏幕状态的情况下,该电子设备确定该通话模式为普通模式;该电子设备确定该普通模式对应的参数为对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数;在该通话环境类型为安静,该用户与屏幕之间的状态为紧贴屏幕状态的情况下,该电子设备确定通话模式为安静模式;该电子设备确定该安静模式对应的参数为对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数;在该通话环境类型为嘈杂,该用户与屏幕之间的状态为紧贴屏幕状态的情况下,确定通话模式为嘈杂模式;该电子设备确定该嘈杂模式对应的参数为对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数。
在上述实施例中,通话模式可以分为安静模式、普通模式和嘈杂模式,这三个模式下得到的处理后的音频的特征是不同的。例如,对于普通模式来说,将第一发声器以及第二发声器播放的音频信号的能量整体都设置为比安静模式大但是比嘈杂模式小,且突出第一频段的声音信号的能量,可以使得拾音清晰的同时减少漏音。对于嘈杂模式来说,将第一发声器以及第二发声器播放的音频信号的能量整体都设置为最大,且突出第一频段的声音信号的能量,可以使得在嘈杂的环境下也能实现拾音清晰。
结合第一方面,在一种实施方式中,设置计算第一上行音频中噪声的长时能量时涉及的参数,使得该通话模式,只能从安静模式切换到普通模式、普通模式切换到嘈杂模式、嘈杂模式切换到普通模式及普通模式切换到安静模式。
在上述实施例中,电子设备的通话模式不会从安静模式突然切换到嘈杂模式,也不会从嘈杂模式突然切换到安静模式,这样,可以使得用户听到的声音变化时平和的。不会突然一下变大然后突然一下变小。
结合第一方面,在一种实施方式中,显示通话应用界面之后,该电子设备确定为第一通话模式之前,该方法还包括:该电子设备确定用户通话过程中,通过该第一发声器以及该第二发声器播放音频。
在上述实施例中,当电子设备使用第一发声器以及该第二发声器播放音频时才使用本方案中模式切换方案。如果不是使用第一发声器以及该第二发声器播放音频,例如,使用扬声器播放音频,则使用其他的算法处理音频。增加了电子设备与硬件的适配性。
结合第一方面,在一种实施方式中,该电子设备默认设置通话环境类型为普通;该电子设备默认设置用户与屏幕之间的状态为紧贴屏幕状态。
在上述实施例中,这样,可以使得电子设备刚开始通话的时候,确定通话模式为普通模式,是用户听到的声音保持在一个平均的水平,更加具有普适性。
结合第一方面,在一种实施方式中,该方法还包括:该电子设备根据第一参考信号及第二参考信号估计出回声,该第一参考信号为第一左声道音频经过第一功率放大器之后输出的音频,该第二参考信号为第一右声道音频经过第二功率放大器之后输出的音频,该回声为估计出的麦克风采集的该第一发声器以及该第二发声器播放的音频;从该第一上行音频中除去该回声,得到目标上行音频。
在上述实施例中,除去处理后麦克风采集的音频中的回声,使得其他设备在于本机通过通话类APP进行通信时听不到本机采集的回声,可以体高通话质量。
第二方面,本申请提供了一种电子设备,该电子设备包括:一个或多个处理器和存储器;该存储器与该一个或多个处理器耦合,该存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令,该一个或多个处理器调用该计算机指令以使得该电子设备执:显示通话应用界面;确定为第一通话模式,该第一通话模式对应第一左声道音频特征和第一右声道音频特征,该第一左声道音频特征为左声道输出的音频信号的音频特征,该第一右声道音频特征为该右声道输出的音频信号的音频特征,该第一通话模式对应第一通话环境;确定处于第二通话环境;切换为第二通话模式,该第二通话模式对应第二左声道音频特征和第二右声道音频特征,该第二左声道音频特征为该左声道输出的音频信号的音频特征,该第二右声道音频特征为该右声道输出的音频信号的音频特征,该第二通话模式对应第二通话环境,该第一通话环境和该第二通话环境不同,其中,该第一左声道音频特征与该第二左声道音频特征不同,和/或,该第一右声道音频特征与该第二右声道音频特征不同。
上述实施例中,用户通话时,电子设备播放的音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。例如,普通模式下,嘈杂模式下,外界噪音大,则可以使得播放的音频音量增大,增大人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音的能量,使得用户在嘈杂的通话环境中可以拾音清晰。在安静模式下,外界较为安静,则可以使得播放的音频的音量变小,同时突出人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音,使得减少漏音的同时,保证用户可以拾音清晰。
结合第二方面,在一种实施方式中,该一个或多个处理器还用于调用该计算机指令以使得该电子设备执:接收下行音频;该下行音频为通话过程中其他电子设备发送给的音频;在该第一通话模式下,对该下行音频进行处理,得到第一左声道音频以及第一右声道音频,其中,该第一左声道音频中,低频音的能量大于高频音的能量,该第一右声道音频中,高频音的能量大于低频音的能量;通过该第一发声器播放该第一左声道音频,通过该第二发声器播放该第一右声道音频。
上述实施例中,通常来说,两个发声器的材质是不同的,其中一个发声器适合用于播放高频的音频,另一个播放低频的音频效果更好,则电子设备生成的两路音频其中一路为低频的能量大于高频,另一路为高频的能量大于低频,则可以适配不同的发声器,提高音质。
结合第二方面,在一种实施方式中,该一个或多个处理器具体用于调用该计算机指令以使得该电子设备执:根据下行音频得到处理前的第一左声道音频以及处理后的第一右声道音频;将该处理前的第一左声道音频以及处理前的第一右声道音频分别进行音色调整以及音量调整,得到第一左声道音频以及第一右声道音频,该音色调整是指调整音频中不同频段的声音的能量分布,该音量调整是指调整音频的能量大小。
上述实施例中,电子设备可以对音频进行音色和音量调整,使得处理后的音频与通话时的环境适配。实现音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。
结合第二方面,在一种实施方式中,该一个或多个处理器还用于调用该计算机指令以使得该电子设备执:确定对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数,该参数包括左声道音色参数、右声道音色参数、左声道音量参数及右声道音量参数;该一个或多个处理器具体用于调用该计算机指令以使得该电子设备执:利用该左声道音色参数和该左声道音量参数对处理前的左声道音频分别进行音色调整以及音量调整得到第一左声道音频;利用该右声道音色参数和该右声道音量参数对处理前的右声道音频分别进行音色调整以及音量调整,得到第一右声道音频。
上述实施例中,在不同的通话环境下,电子设备对音频进行音色调整和音量调整的参数是不同的,这样可以使得处理后的音频与通话时的环境适配。实现音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。
结合第二方面,在一种实施方式中,该一个或多个处理器具体用于调用该计算机指令以使得该电子设备执:确定通话环境类型,该通话环境类型包括安静、普通及嘈杂;其中,通话环境类型为安静时与通话环境类型为普通/嘈杂时相比,前者对应的第一上行音频中噪声的长时能量比后者小;通话环境类型为嘈杂时与通话环境类型为安静/普通时相比,前者对应的第一上行音频中噪声的长时能量比后者大;确定用户与屏幕之间的状态,该用户与屏幕之间的状态包括紧贴屏幕状态和非紧贴屏幕状态;该紧贴屏幕状态为用户与的屏幕之间的距离小于一个预设值且大于该预设值的此续时间大于一个预设时间的状态,该非紧贴屏幕状态为用户与的屏幕之间的距离不小于一个预设值且不小于该预设值的此续时间大于一个预设时间的状态;基于该通话环境类型以及用户与屏幕之间的状态确定通话模式,该通话模式为第一通话模式及第二通话模式中的一个。
上述实施例中,电子设备用过通话环境类型以及用户与屏幕之间的状态确定通话模式。这样,可以使得确定的通话模式更准确,例如,当用户与屏幕紧贴时,且环境嘈杂时,可以确定为嘈杂模式,此时可以设置增大播放的音频的音量使得用户拾音清晰。
结合第二方面,在一种实施方式中,该一个或多个处理器具体用于调用该计算机指令以使得该电子设备执:在该通话环境类型为普通且该用户与屏幕之间的状态为紧贴屏幕状态的情况下或者该用户与屏幕之间的状态为非紧贴屏幕状态的情况下,确定该通话模式为普通模式;确定该普通模式对应的参数为对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数;在该通话环境类型为安静,该用户与屏幕之间的状态为紧贴屏幕状态的情况下,确定通话模式为安静模式;确定该安静模式对应的参数为对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数;在该通话环境类型为嘈杂,该用户与屏幕之间的状态为紧贴屏幕状态的情况下,确定通话模式为嘈杂模式;确定该嘈杂模式对应的参数为对该处理前的第一左声道音频和该处理前的第一右声道音频进行处理的参数。
上述实施例中,通话模式可以分为安静模式、普通模式和嘈杂模式,这三个模式下得到的处理后的音频的特征是不同的。例如,对于普通模式来说,将第一发声器以及第二发声器播放的音频信号的能量整体都设置为比安静模式大但是比嘈杂模式小,且突出第一频段的声音信号的能量,可以使得拾音清晰的同时减少漏音。对于嘈杂模式来说,将第一发声器以及第二发声器播放的音频信号的能量整体都设置为最大,且突出第一频段的声音信号的能量,可以使得在嘈杂的环境下也能实现拾音清晰。
结合第二方面,在一种实施方式中,该一个或多个处理器还用于调用该计算机指令以使得该电子设备执:确定用户通话过程中,通过该第一发声器以及该第二发声器播放音频。
上述实施例中,当电子设备使用第一发声器以及该第二发声器播放音频时才使用本方案中模式切换方案。如果不是使用第一发声器以及该第二发声器播放音频,例如,使用扬声器播放音频,则使用其他的算法处理音频。增加了电子设备与硬件的适配性。
结合第二方面,在一种实施方式中,该一个或多个处理器还用于调用该计算机指令以使得该电子设备执:根据第一参考信号及第二参考信号估计出回声,该第一参考信号为第一左声道音频经过第一功率放大器之后输出的音频,该第二参考信号为第一右声道音频经过第二功率放大器之后输出的音频,该回声为估计出的麦克风采集的该第一发声器以及该第二发声器播放的音频;从该第一上行音频中除去该回声,得到目标上行音频。
上述实施例中,除去处理后麦克风采集的音频中的回声,使得其他设备在于本机通过通话类APP进行通信时听不到本机采集的回声,可以体高通话质量。
第三方面,本申请提供了一种电子设备,该电子设备包括:一个或多个处理器和存储器;该存储器与该一个或多个处理器耦合,该存储器用于存储计算机程序代码,该计算机程序代码包括计算机指令,该一个或多个处理器调用该计算机指令以使得该电子设备执行如第一方面或第一方面的任意一种实施方式所描述的方法。
在上述实施例中,用户通话时,电子设备播放的音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。例如,普通模式下,嘈杂模式下,外界噪音大,则可以使得播放的音频音量增大,增大人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音的能量,使得用户在嘈杂的通话环境中可以拾音清晰。在安静模式下,外界较为安静,则可以使得播放的音频的音量变小,同时突出人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音,使得减少漏音的同时,保证用户可以拾音清晰。
第四方面,本申请实施例提供了一种芯片***,该芯片***应用于电子设备,该芯片***包括一个或多个处理器,该处理器用于调用计算机指令以使得该电子设备执行如第一方面或第一方面的任意一种实施方式所描述的方法。
在上述实施例中,用户通话时,电子设备播放的音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。例如,普通模式下,嘈杂模式下,外界噪音大,则可以使得播放的音频音量增大,增大人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音的能量,使得用户在嘈杂的通话环境中可以拾音清晰。在安静模式下,外界较为安静,则可以使得播放的音频的音量变小,同时突出人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音,使得减少漏音的同时,保证用户可以拾音清晰。
第五方面,本申请实施例提供了一种包含指令的计算机程序产品,当该计算机程序产品在电子设备上运行时,使得该电子设备执行如第一方面或第一方面的任意一种实施方式所描述的方法。
在上述实施例中,用户通话时,电子设备播放的音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。例如,普通模式下,嘈杂模式下,外界噪音大,则可以使得播放的音频音量增大,增大人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音的能量,使得用户在嘈杂的通话环境中可以拾音清晰。在安静模式下,外界较为安静,则可以使得播放的音频的音量变小,同时突出人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音,使得减少漏音的同时,保证用户可以拾音清晰。
第六方面,本申请实施例提供了一种计算机可读存储介质,当该指令在电子设备上运行时,使得该电子设备执行如第一方面或第一方面的任意一种实施方式所描述的方法。
在上述实施例中,用户通话时,电子设备播放的音频可以随着通话环境的变化进行调整,得到适应该通话环境的音频。例如,普通模式下,嘈杂模式下,外界噪音大,则可以使得播放的音频音量增大,增大人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音的能量,使得用户在嘈杂的通话环境中可以拾音清晰。在安静模式下,外界较为安静,则可以使得播放的音频的音量变小,同时突出人耳敏感且指向性较好的频段(例如频率为1khz-3khz)的声音,使得减少漏音的同时,保证用户可以拾音清晰。
附图说明
图1示出了一种通话算法的示意图;
图2示出了一种方案中电子设备的发声器的示意图;
图3示出了本申请实施例中电子设备的发声器的示意图;
图4示出了本申请实施例涉及的通话方法的一个示意图;
图5示出了电子设备不是手持通话的示意性场景;
图6a-图6d示出了通话模式的三个示意图;
图7a-图7d示出了电子设备设置通话模式是否为可调节模式的一组示例性用户界面;
图8为本申请实施例中涉及的通话方法的一个示意性流程图;
图9为本申请实施例提供的通话环境类型变化的示意性说明图;
图10为电子设备在普通模式下处理下行音频信号的一个示意性流程图;
图11为电子设备除去麦克风采集的音频信号中的回声信号的一个示意性流程图;
图12是本申请实施例提供的电子设备的结构示意图;
图13是本申请实施例提供的电子设备的***结构示意图。
具体实施方式
本申请以下实施例中所使用的术语只是为了描述特定实施例的目的,而并非旨在作为对本申请的限制。如在本申请的说明书和所附权利要求书中所使用的那样,单数表达形式“一个”、“一种”、“所述”、“上述”、“该”和“这一”旨在也包括复数表达形式,除非其上下文中明确地有相反指示。还应当理解,本申请中使用的术语“和/或”是指并包含一个或多个所列出项目的任何或所有可能组合。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为暗示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征,在本申请实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请以下实施例中的术语“用户界面(user interface,UI)”,是应用程序或操作***与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面是通过java、可扩展标记语言(extensible markuplanguage,XML)等特定计算机语言编写的源代码,界面源代码在电子设备上经过解析,渲染,最终呈现为用户可以识别的内容。用户界面常用的表现形式是图形用户界面(graphicuser interface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的文本、图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
为了便于理解,下面先对本申请实施例涉及的相关术语及概念进行介绍。
(1)通话算法
通话算法中包括通话下行涉及的算法以及通话上行涉及的算法。
其中,通话下行是指电子设备接收其他电子设备发送给本机的输入音频信号之后,电子设备将该输入音频信号进行第一处理得到的音频信号,并可以通过发声器等将其进行播放。
通话上行是指电子设备通过麦克风采集声音信号,并对该声音信号进行第二处理,生成输出音频信号,然后通过发送给其他的电子设备。第一处理使用的算法为通话下行涉及的算法,第二处理使用的算法为通话上线涉及的算法。
图1示出了一种通话算法的示意图。
如图1所示,通话上行的过程中,电子设备将其他电子设备通过基站传输给本机的输入音频信号进行第一处理。该第一处理包括:首先经过调制解调器将其解码成电子设备可以识别的音频信号,然后经过通话下行处理模块,再利用编解码器将其解码成模拟音频信号,经过功率放大器进行功率放大,然后驱动发声器对其进行播放。该通话下行处理模块涉及的算法可以包括降噪、音色调整以及音量调整。
通话上行的过程中,则是电子设备的麦克风采集声音信号,将该声音信号进行第二处理。还第二处理包括:首先通过编解码器将其进行编码得到数字音频信号,然后通过通话上行处理模块,再利用调制解调器进行调制,得到基站可以识别的输出音频信号。该通话上行处理模块涉及的算法可以包括降噪、音色调整以及音量调整。
该通话下行处理模块以及通话上行处理模块中涉及的降噪、音色调整以及音量调整相同。
其中,降噪用于对一路音频信号时进行降噪,抑制该音频信号中的噪声信号以及混响信号。
音色调整用于调整音频信号中不同频段的音频信号的能量大小,改善语音音色。能量的单位为分贝(decibel,dB),其用于描述声音信号的强度。能量越大的音频信号利用同一个发声器进行播放时听起来音量越大。
可以理解的是,音色为音频信号中不同频段的音频信号的能量占比大小。
音量调整用于调整音频信号的能量。
在一种方案中,为了提高电子设备的屏占比,实现全面屏,发声器置于电子设备的侧面,采取侧缝或顶部开孔使发声器播放的音频信号可以传输至人耳。
如图2示出了一种方案中电子设备的发声器的示意图。
如图2中的(a)所示,用户界面20为电子设备的一个通话界面,区域201中显示的内容为电子设备的侧面,发声器置于该电子设备的侧面,电子设备可以设置侧缝以及顶部开孔,使得发声器播放的音频信号可以传输至人耳,例如,该侧缝可以如区域201A中所示,顶部开孔可以为区域201B中所示。
如图2中的(b)所示,在通话的过程中,电子设备紧贴人耳利用发声器播放音频信时,一部分音频信号可以为音频信号a以及音频信号b,另一部分音频信号可以为漏音a。其中,音频信号a可以通过侧缝直接进入人耳,音频信号b可以通过顶部开孔直接进入人耳。而漏音a为发声器播放的音频信号中,没有传输到人耳的那部分音频信号。
一方面,可以理解的是,通话时,因为电子设备产生了漏音a,导致电子设备播放的音频信号泄露,可能会造成用户隐私泄露。
另一方面,在人耳周围存在有噪声信号的情况下,例如,如图2中的(b)所示,该噪声信号可以为噪声a。该噪声a进入人耳后,会干扰用户对音频信号a的识别,如果音频信号a的能量比噪声a小,则会导致听音不清。
这样,如果将发声器置于电子设备的侧面,则在通话过程中,电子设备利用发声器播放音频信号时,会导致漏音引起隐私泄露以及噪声信号进入人耳干扰用户识别音频信号的问题。
在本申请实施例中,电子设备中设置了两个发声器:第一发声器置于电子设备的侧面,第二发声器置于电子设备的屏幕内侧。电子设备可以将其他电子设备发送给本机的音频信号进行处理,生成处理后的左声道音频信号以及处理后的右声道音频信号。第一发声器用于播放处理后的左声道音频信号,其播放的左声道音频信号(处理后的)通过空气传输到人耳。第二发声器用于播放处理后的右声道音频信号,其播放的右声道音频信号(处理后的)通过骨骼传输到人耳,该第二发声器可以被称为骨传导发声器。其中,左声道音频信号中,低频声音信号的能量大于高频声音信号的能量,该右声道音频信号中高频声音信号的能量大于低频声音信号的能量。
在本申请实施例中,第一发声器播放的左声道音频信号皆为处理后的左声道音频信号,第二发声器播放的右声道音频信号皆为处理后的右声道音频信号。电子设备具体如何得到该处理后的左/右音频信号可以参考下述步骤S201-步骤S203的描述。
图3示出了本申请实施例中电子设备的发声器的示意图。
如图3中的(a)所示,用户界面30为电子设备的一个通话界面,第一发声器可以参考前述图2中涉及的发声器的相关描述,第二发声器可以设置在区域301中所示。
如图3中的(b)所示,在通话的过程中,电子设备紧贴人耳利用第一发声器播放左声道音频信号时,一部分音频信号可以为音频信号1以及音频信号2,其中,音频信号1可以通过侧缝直接进入人耳,音频信号2可以通过顶部开孔直接进入人耳。另一部分音频信号可以为漏音1。同时,电子设备可以利用第二发声器播放右声道音频信号,该右声道音频信号如音频信号3所示。此时,第一发声器虽然导致了漏音,但是第二发声器可以播放右声道音频信号进行弥补使得进入人耳的音频信号的能量增大,使得用户可以拾音清晰。
在一些实施例中,在嘈杂环境下,人耳周围存在噪声信号,例如,该噪声信号可以为噪声1。电子设备也可以通过增加处理后的左声道音频信号及处理后的右声道音频信号的能量使得用户识别该左声道音频信号及右声道音频信号,降低噪声信号对用户干扰。
在另一些实施例中,在安静环境下,电子设备可以通过降低左声道音频信号的能量,使得第一发声器可以减少漏音。主要依靠第二发声器播放右声道音频信号使得用户可以拾音清晰。
下面介绍本申请实施例涉及的通话方法。
本申请实施例涉及的通话方法适用于通话下行以及通话上行的过程。
如图4示出了本申请实施例涉及的通话方法的一个示意图。
如图4所示,通话下行的过程中,电子设备确定通话模式为可调节模式以及用户紧贴屏幕的情况下,可以结合通话环境类型确定通话模式。不同的通话模式下,电子设备可以设置不同的参数对下行音频信号进行处理,得到音色以及音量不同的处理后的左声道音频信号及处理后的右声道音频信号,然后利用第一发声器播放左声道音频信号(处理后的)以及利用第二发声器播放右声道音频信号(处理后的)。
具体的,可以通过双器件通话算法中的双器件通话下行处理模块可以对该下行音频信号进行降噪、音色调整以及音量调整得到处理后的左声道音频信号及处理后的右声道音频信号。其中,不同的通话模式下,进行音色调整以及音量调整涉及的参数不同。
然后电子设备将处理后的左声道音频信号经过第一功率放大器进行功率放大,驱动第一发声器播放该左声道音频信号(处理后的),将处理后的右声道音频信号经过第二功率放大器进行功率放大,驱动第二发声器播放该右声道音频信号(处理后的)。
其中,下行音频信号为其他电子设备发送给本机的音频信号。
在一些实施例中,通话模式可以分为安静模式、普通模式以及嘈杂模式。
通话上行的过程中,电子设备可以对上行音频信号进行回声消除。具体的,电子设备可以通过双器件通话上行处理模块中的回声消除算法利用第一功率放大器输出的参考信号以及第二功率放大器输出的参考信号估计出回声信号,然后,从上行音频信号中除去该回声信号。
下面介绍本申请实施例中的通话方法的适用情况。
本申请实施例的通话方法适用于电子设备处于手持通话模式的情况下。该手持通话模式是指电子设备通过第一发声器和/或第二发声器播放音频信号,例如在通话的过程中,电子设备通过电子设备的扬声器对音频信号进行播放不属于手持通话模式,通过耳机或者音箱等其他的发声器对音频信号进行播放也不属于手持通话模式。通过扬声器对音频信号进行播放,如图5中的(a)所示,电子设备通过扬声器播放音频信号,参见用户界面50中扬声器图标501为灰色。通过耳机等其他的发声器对音频信号进行播放,例如通过蓝牙耳机播放音频信号,如图5中的(b)所示,电子设备通过TWS耳机播放音频信号,用户界面51中耳机***提示图标502可示出。
在电子设备确定通话时使用本申请实施例涉及的通话方法的情况下,电子设备可以确定通话模式,这样可以根据不同的通话模式,设置对下行音频信号进行处理的参数。得到处理后的右声道音频信号以及处理后的左声道音频信号。
具体的,首先利用该下行音频信号生成处理前的左声道音频信号及处理前的右声道音频信号,然后利用不同的参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行音色调整以及音量调整,得到符合通话环境的处理后的右声道音频信号以及处理后的左声道音频信号。并且利用第一发声器播放左声道音频信号(处理后的),利用第二发声器播放右声道音频信号(处理后的),实现了通话下行过程中利用双通道播放音频信号。
关于电子设备具体如何生成处理后的右声道音频信号以及处理后的左声道音频信号的详细过程可以参考下述对步骤S108的描述,此处暂不赘述。
下面介绍本申请实施例中的通话方法涉及的通话模式。
在一些实施例中,通话模式可以包括普通模式、安静模式以及嘈杂模式。
在不同的通话模式下,对于同一下行音频信号,电子设备处理得到的处理后的左声道音频信号以及处理后的右声道音频信号不同,该不同可以体现在音量和/或音色上,其中,音量用于指示音频信号的能量或声音大小,音色用于指示音频信号在不同频段上的声音信号的能量分布(占比大小)。例如,从音量的角度:对于该处理后的左声道音频信号和该处理后的右声道音频信号,嘈杂模式下最大,普通模式下次之,安静模式下最小。从音色的角度:对于处理后的右声道音频信号,嘈杂模式下,第一频段的声音信号的能量比其他频段的声音信号的能量大第一程度,普通模式下,第一频段的声音信号的能量比其他频段的声音信号的能量大第二程度,安静模式下,第一频段的声音信号的能量比其他频段的声音信号的能量大第三程度。对于处理后的左声道音频信号,嘈杂模式下及普通模式下,不同频段上的能量分布不做调整(与处理前的左声道音频信号在不同频段上的能量占比大小相同),安静模式下,第一频段的声音信号的能量比其他频段的声音信号的能量小第四程度,其中第一程度、第二程度、第三程度及第四程度可以用分贝度量,且第一程度、第二程度、第三程度及第四程度可以相同也可以不同,通常来说第一程度>第二程度>第三程度。
应该理解的是,除了音量和/或音色以外,在不同的通话模式下,对于同一下行音频信号,电子设备处理得到的处理后的左声道音频信号以及处理后的右声道音频信号还可以有其他的不同,本申请以音量和/或音色为例说明,不应该构成对本申请的限定。
用户接听电话后,电子设备设置通话模式为普通模式。然后,在通话模式为可调节模式的情况下,电子设备可以在三个通话模式之间进行切换。可选的,响应于用户接听电话,电子电子设备设置通话模式为普通模式,用户可以开始通话。可以理解的,也可以用户接听电话后,电子设备设置通话模式为安静模式或者嘈杂模式,为了便于说明,以通话模式为普通模式为例进行说明。
其中,当电子设备确定用户紧贴屏幕且通话环境类型为普通的情况下或者确定用户为非紧贴屏幕的情况下,可以确定通话模式为普通模式。
其中,用户非紧贴屏幕为用户与电子设备的屏幕之间的距离大于一个预设值且大于该预设值的此续时间大于一个预设时间。用户紧贴屏幕为用户与电子设备的屏幕之间的距离小于一个预设值且小于该预设值的此续时间大于一个预设时间。
当电子设备确定用户紧贴屏幕且通话环境类型为安静的情况下,可以确定通话模式为安静模式。
当电子设备确定用户紧贴屏幕且通话环境类型为嘈杂的情况下,可以确定通话模式为嘈杂模式。
其中,通话环境类型可以用于描述电子设备在通话时周围环境中噪声的长时能量大小。噪声的长时能量为一段时间(例如30s等时间段)内噪声的平均能量。在一些实施例中,通话环境类型可以分为安静、普通及嘈杂。电子设备可以通过该长时能量的大小来判断通话环境类型,长时能量大则为嘈杂,小则为安静,中间状态为普通。其中,噪声的长时能量为一段时间内噪声的平均能量,其用于指示一段时间内噪声的能量大小。该长时能量大是指该长时能量大于一个阈值,该长时能量小是指该长时能量小于另一个阈值,该长时能量介于一个阈值与另一个阈值之间为中间状态。该过程的具体内容可以参考下述对步骤S106的描述,此处暂不赘述。
图6a-图6d示出了通话模式的三个示意图。
其中,图6b-图6d中,图标611以及图标612表示噪声,该图标611以及图标612的数量表示噪声的大小,数量越多表示噪声越大。图标613表示第一发声器(处理后的左声道)播放的处理后的音频信号,该图标613的数量越多表示处理后的左声道音频信号能量越大,即音量越大,反之表示能量越小,即声音越小。同理,图标614表示第二发声器(处理后的右声道)播放的音频信号,该图标614的数量表示处理后的右声道音频信号的能量大小。图6a中示出的是用户非紧贴屏幕时的一个示例。图6a及图6b-图6d中的(a)示出的为用户紧贴屏幕时的一个示例。
如图6a所示,为普通模式的一个示意图,用户没有紧贴屏幕,则此时,电子设备可以确定通话模式为普通模式。
如图6b中的(a)所示,为另一个普通模式的示意图。此时,用户紧贴屏幕。周围存在噪声且噪声长时能量为中间状态,电子设备可以确定此时为普通模式。
如图6b中的(b)所示,普通模式下,在通话的过程中,电子设备紧贴人耳利用第一发声器播放左声道音频信号(处理后的)时,该左声道音频信号可以包括音频信号1和/或音频信号2(下面为了便于说明以音频信号1和音频信号2为例进行说明),其中,音频信号1可以通过开孔或侧缝或其他物理通道进入人耳,音频信号2可以通过顶部开孔或者侧缝或者其他物理通道进入人耳。该左声道音频信号还可以包括漏音1。同时,电子设备可以利用第二发声器播放右声道音频信号,该右声道音频信号包括音频信号3,音频信号3为第二发生器所播放的音频信号。此时,环境中的噪声为噪声1。可以理解的,左右声道为示例性的,也可以左声道音频信号对应音频信号3,右声道音频信号对应音频信号1和/或音频信号2。
这样,第一发声器虽然导致了漏音且外界存在噪声,但是第二发声器可以播放右声道音频信号进行弥补使得进入人耳的音频信号的能量增大,使得用户可以拾音清晰;由于第二声生器的增设,使音频信号进入用户耳朵的路径变短且方向性强,相对于仅有第一发声器,拾音更加清晰。
如图6c中的(a)所示,为安静模式的一个示意图。此时,用户紧贴屏幕。周围不存在噪声,则电设备可以确定此时为安静模式。
如图6c中的(b)所示,安静模式下,在通话的过程中,电子设备紧贴人耳利用第一发声器播放左声道音频信号(处理后的)时,该左声道音频信号可以包括为音频信号1和/或音频信号2(下面为了便于说明以音频信号1和音频信号2为例进行说明),其中,音频信号1可以通过开孔、侧缝或其他物理通道进入人耳,音频信号2可以通过开孔、侧缝或其他物理通道进入人耳。该左声道音频信号还可以包括漏音1。同时,电子设备可以利用第二发声器播放右声道音频信号,该右声道音频信号还包括音频信号3,音频信号3为第二发声器所产生的音频信号。此时,环境中的噪声为没有噪声。可以理解的,左右声道为示例性的,也可以左声道音频信号对应音频信号3,右声道音频信号对应音频信号1和/或音频信号2。
图6c中的(b)对比图6b中的(b)可知,安静模式下的音频信号1、音频信号2以及音频信号3分别相比于普通模式的音频信号1、音频信号2以及音频信号3的能量都变小了,则听起来声音变小。
此时,由于安静模式下的漏音1相比于普通模式下的漏音1的能量变小了,则在安静的环境下,可以保护用户的隐私。
如图6d中的(a)所示,为嘈杂模式的一个示意图。此时,用户紧贴屏幕。周围存在噪声,则电子设备可以确定此时为嘈杂模式。
如图6d中的(b)所示,嘈杂模式下,在通话的过程中,电子设备紧贴人耳利用第一发声器播放左声道音频信号(处理后的)时,一部分音频信号可以为音频信号1以及音频信号2,其中,音频信号1可以通过侧缝直接进入人耳,音频信号2可以通过顶部开孔直接进入人耳。另一部分音频信号可以为漏音1。同时,电子设备可以利用第二发声器播放右声道音频信号,该右声道音频信号如音频信号3所示。
图6d中的(b)对比图6b中的(b)可知,嘈杂模式下的音频信号1、音频信号2以及音频信号3分别相比于普通模式的音频信号1、音频信号2以及音频信号3的能量都变大了,则听起来声音变大。
此时,嘈杂模式下的噪声信号为噪声1,相比于普通模式下的噪声1,该嘈杂模式下的噪声1的能量变大了,则听起来声音变大。即时在嘈杂的环境中,用户也可以实现拾音清晰。
应该理解的是,上述图6a-图6d中的内容展示的是:不同模式下,不同的发声器播放音频信号的音量不同。除了音量不同以外,不同模式下,不同的发声器播放音频信号的频域也可以不相同,该频域可以根据不同模式进行设置。具体的描述可以参考前述对频域的相关介绍以及下文对步骤S106中相关内容的描述。
可选的,在一些实施例中,不同模式下得到的处理后的左声道音频信号以及处理后的右声道音频信号的特点如下表1所示:
表1
Figure BDA0003302614090000141
如表1所示,在普通模式下,处理后的左声道音频信号的特点为:处理后的左声道音频信号的能量为第一能量,可选的,该处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量,其中,低频声音信号以及高频声音信号是根据实际需求进行设置的,本申请实施例对此不作限定。例如,低频可以是指2khz以下的声音信号,高频是指2khz以上的声音信号。处理后的右声道音频信号的特点为:处理后的右声道音频信号的能量为第四能量,处理后的第一频段的声音信号的能量比其他频段的声音信号的能量大第一分贝(decibel,dB);可选的,该处理后的右声道音频信号的高频声音信号的能量大于低频声音信号的能量。可选的,第一能量与第四能量相同;或者第四能量与第一能量不同,但相差较小。
在安静模式下,处理后的左声道音频信号的特点为:处理后的左声道音频信号的能量为第二能量,为了使得安静模式下声音听起来比普通模式小,则该第二能量小于第一能量,处理后的第二频段的声音信号的能量比其他频段的声音信号的能量小第二分贝;可选的,该处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量。处理后的右声道音频信号的特点为:处理后的右声道音频信号的能量为第五能量,第五能量小于第四能量,处理后的第一频段的声音信号的能量比其他频段的声音信号的能量大第三分贝,可选的,该处理后的右声道音频信号的高频声音信号的能量大于低频声音信号的能量。第五能量小于第四能量。
在嘈杂模式下,处理后的左声道音频信号的特点为:处理后的左声道音频信号的能量为第三能量,为了使得嘈杂模式下声音听起来比普通模式大,则该第三能量大于第一能量。可选的,该处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量。处理后的右声道音频信号的特点为:处理后的右声道音频信号的能量为第六能量,处理后的第一频段的声音信号的能量比其他频段的声音信号的能量大第四分贝;可选的,该处理后的右声道音频信号的高频声音信号的能量大于低频声音信号的能量。第六能量大于第四能量。可选的,第六能量与第三能量相同;或者第六能量与第三能量不同,但相差较小。
普通模式以及嘈杂模式下,对于左声道音频信号进行音色调整时,采用现有技术即可,在此不进行赘述。安静模式下,对左声道音频信号进行的音色调整是为了适应两个发声器时的情况,在某些情况下,对于普通模式以及嘈杂模式下的左声道音频信号也会对应进行其他的音色调整。
应该理解的是,第一分贝、第二分贝、第三分贝以及第四分贝可以相同也可以不同,通常来说第一分贝<第二分贝<第四分贝。
其中,第一频段的声音信号可以为用户听觉上比较敏感,指向性比较好的频段上的声音信号,例如可以是频率为1khz-3khz的声音信号。第二频段的声音信号可以为高频的声音信号,例如,大于1khz的声音信号。为了使得用户在嘈杂环境中拾音清晰,可以使得第四分贝最大,第三分贝次之,第一分贝最小,第二分贝可以与第三分贝相同。通常,第一分贝可以为3dB,第二分贝和第三分贝可以为6dB,第四分贝为9db。第一能量可以为(-9dB~-6dB),第二能量可以为(-15dB~-12dB),第三能量可以为(-3dB~-0dB),第五能量可以为(-12dB~-9dB)。
应该理解的是,以上1khz-3khz、1khz、3dB、6dB、9dB、(-9dB~-6dB)、(-15dB~-12dB)以及(-3dB~-0dB)等数据只是举例说明,可以根据实际需求更改,不构成对本申请实施例的限制。其中,(-9dB~-6dB)、(-15dB~-12dB)以及(-3dB~-0dB)可以为进行归一化后的数据。
在一些实施例中,任一处理后的左声道音频信号的第一能量与任一处理后的右声道音频信号的第四能量可以不同也可以相同。任一处理后的左声道音频信号的第二能量与任一处理后的右声道音频信号的第五能量可以不同也可以相同。任一处理后的左声道音频信号的第三能量与任一处理后的右声道音频信号的第六能量可以不同也可以相同。例如,处理后的左声道音频信号的第一能量可以大于处理后的右声道音频信号的第四能量也可以相同。这样,对于安静模式来说,电子设备的周围噪音较小,第二发声器播放(骨传导的)的右声道音频信号的能量大于第一发声器播放的左声道音频信号(处理后的)的能量,可以使得电子设备主要是通过第二发声器发声,使得漏音得以减小。对于第一频段的声音信号,指向性比较好,用户听觉上比较敏感,突出该部分音频信号的能量可以使得用户在安静模式下对外减少漏音,对用户则可以实现拾音清晰。
对于普通模式来说,将第一发声器以及第二发声器播放的音频信号的能量整体都设置为比安静模式大但是比嘈杂模式小,且突出第一频段的声音信号的能量,可以使得拾音清晰的同时减少漏音。
对于嘈杂模式来说,将第一发声器以及第二发声器播放的音频信号的能量整体都设置为最大,且突出第一频段的声音信号的能量,可以使得在嘈杂的环境下也能实现拾音清晰。
电子设备确定通话模式为可调节模式的情况下,才可以在三个通话模式之间进行切换。
可选的,通话模式是否为可调节模式可以通过用户进行设置。
图7a-图7d示出了电子设备设置通话模式是否为可调节模式的一组示例性用户界面。
如图7a所示,用户界面70为电子设备的一个设置界面。该用户界面70中包括声音和振动设置项701。响应于用户在声音和振动设置控件701上的操作(例如点击操作),该电子设备可以显示图7b中示出的用户界面71。
如图7b所示,用户界面71为对应声音和振动设置项701的设置内容的一个用户界面。该用户界面71中可以包括手持通话接听方式设置项711,响应于用户在手持通话接听方式设置项711上的操作(例如点击操作),电子设备可以显示如图7c所示的用户界面72。
如图7c所示,用户界面72为对应手持通话接听方式设置项711的设置内容的一个用户界面。用于提示用户在手持通话接听的情况下,是否开启贴耳自动音质调节功能。其中,开启贴耳自动音质调节功能是指电子设备可以在三个通话模式之间进行切换。关闭贴耳自动音质调节功能是指电子设备不可以在三个通话模式之间进行切换,始终保持一种通话模式,例如普通模式。
在一些实施例中,电子设备可以设置默认开启贴耳自动音质调节功能,可以在三个通话模式之间进行切换。
例如,用户界面72所示,电子设备默认开启贴耳自动音质调节功能,此时,开启调整控件721置灰。在用户不改变设置的情况下,则通话时,电子设备可以在三个通话模式之间进行切换。在用户改变设置的情况下,则通话时,电子设备不可以在三个通话模式之间进行切换。例如,响应于用户在关闭调整控件722上的操作(例如点击操作),则电子设备关闭贴耳自动音质调节功能,显示如图7d所示的用户界面73。
如图7d所示,用户界面73中,关闭调整控件722置灰。则通话时,电子设备不可以在三个通话模式之间进行切换,始终保持一种通话模式,例如普通模式。
在一些实施例中,在开启贴耳自动音质调节功能的情况下,通话时电子设备可以在三个通话模式之间进行切换。此时,电子设备可以结合用户与屏幕之间的状态以及环境类型确定通话模式。
用户与屏幕之间的状态可以分为紧贴屏幕状态与非紧贴屏幕状态。
可选的,紧贴屏幕状态为用户与电子设备的屏幕之间的距离小于一个预设值且大于该预设值的此续时间大于一个预设时间的状态,非紧贴屏幕状态为用户与电子设备的屏幕之间的距离不小于一个预设值且不小于该预设值的此续时间大于一个预设时间的状态。
可选的,电子设备确定处于非紧贴屏幕状态(即,电子设备确定用户处于非紧贴屏幕状态,该非紧贴屏幕状态也可以替代为第一状态或者第二状态等,用于标识电子设备所处的状态或者用于标识相对于用户的距离,同理紧贴屏幕的状态是相同的,在此不进行赘述,同样适用于其他实施例中),用户紧贴屏幕为用户与电子设备的屏幕之间的距离小于第一预设值且用户保持(该小于第一预设值的距离的)持续时间大于第一预设时间,电子设备从非紧贴屏幕状态切换为紧贴屏幕状态;若未达到上述条件,则依然处于非紧贴屏幕状态。可以理解的,切换条件也可以是其他条件。
同样的,电子设备确定处于紧贴屏幕状态,当确定用户与电子设备的屏幕之间的距离大于第二预设值且用户保持(该大于第二预设值的距离的)持续时间大于第二预设时间,电子设备从紧贴屏幕状态切换为非紧贴屏幕状态;若未达到上述条件,则依然处于紧贴屏幕状态。可以理解的,切换条件也可以是其他条件。
应该理解的是,前述是以用户与电子设备的屏幕之间的距离,以及该距离持续的时间为例进行说明,还有其他判断用户与屏幕之间状态的方式。例如,通过用户给屏幕的压力以及该压力持续的时间来确定用户与屏幕之间的状态,即将前述利用距离判断用户与屏幕的状态的方法中的距离更改为压力即可,也可以通过电子设备检测到人体皮肤(包括人脸和耳朵等)与电子设备的接触面积来实现,此处不再进行赘述。
可选的,第一预设值和第二预设值可以相同,也可以不同。可选的,第一预设时间和第二预设时间可以相同,也可以不同。
可选的,第一预设时间和/或第二预设时间可以由用户进行设置的。例如,如图7c中的用户界面72所示。用户可以通过设置音质调节灵敏度来控制用户与屏幕接触多长时间电子设备才确定用户紧贴屏幕。例如,当灵敏度调整控件723处于提示文字:“快”时,则当用户与屏幕接触时间较短时,电子设备就可以确定用户紧贴屏幕。该接触时间可以为1秒-5秒,例如3秒。当灵敏度调整控件723处于提示文字:“慢”时,则当用户与屏幕接触时间较长时,电子设备才可以确定用户紧贴屏幕。该接触时间可以为10秒以上,例如10秒。应该理解的是,当敏度调整控件723越接近提示文字:“慢”时,则用户与屏幕接触时间越长,电子设备才可以确定用户紧贴屏幕。
下面详细介绍本申请实施例涉及的通话方法。
本申请实施例中,对于通话下行的过程,电子设备开始通话之后,在处于手持通话模式的情况下,首先设置通话模式为普通模式。然后,确定是否为可调节模式,在通话模式为不可调节模式的情况下,则电子设备的通话模式保持普通模式不改变。在通话模式为可调节模式的情况下,电子设备确定用户与屏幕之间的状态以及通话环境类型之后,则结合用户与屏幕之间的状态以及通话环境类型重新确定通话模式,可以进行模式切换。这样,可以根据不同的通话模式,设置对下行音频信号进行处理的参数。得到处理后的右声道音频信号以及处理后的左声道音频信号。再利用第一发声器播放处理后的左声道音频信号,利用第二发声器播放处理后的右声道音频信号。
图8为本申请实施例中涉及的通话方法的一个示意性流程图。
关于本申请实施例中涉及的通话方法可以参考下述对步骤S101-步骤S114的详细描述。
S101.电子设备开启通话类应用;
通话类应用为可以为电子设备提供通话功能的APP,通话包括语音通话和视频通话。
可选的,电子设备显示来电提示,响应于接听控件上的操作(例如点击操作),电子设备可以通过该通话类应用与其他电子设备进行通信,通过电子设备,用户可以开始通话。
其中,语音通话是指电子设备与至少一个其他电子设备之间实时传送音频信号的一种通信方式。视频通话是指电子设备与至少一个其他电子设备之间实时传送音频信号和图像信号的一种通信方式。
可选的,从通话开始到结束通话的过程中,电子设备持续获取下行音频信号,即电子设备可以持续接收其他电子设备发送给本机的音频信号。该下行音频信号为其他电子设备发送给本机的一帧或多帧音频信号。一帧音频信号具体为多长时间的音频信号可以根据电子设备的处理能力决定,一般可以为10ms-50ms,例如10ms或者20ms、30ms等10ms的倍数。
可选的,在电子设备开启通话类应用之后,接收到其他电子设备给本机发的第一帧下行音频信号之后,在对该下行音频信号进行处理之前,该电子设备可以执行步骤S102及步骤S103等确定对该第一帧下行音频信号进行处理的方式。对于电子设备获取下行音频信号的方面,例如获取方式和获取时间,本申请实施例不进行限定,下面详细介绍步骤S102及步骤S103。
S102.电子设备确定通话过程是否为手持通话模式;
手持通话模式是指,电子设备开启通话类应用,用户开始通话的过程中,通过第一发声器或第二发声器播放音频信号。即在通话的过程中,电子设备没有通过扬声器或者耳机等其他的发声器对音频信号进行播放。
例如,前述图3中的(a)示出的即为电子设备为手持通话的一个示例性用户界面,具体内容可以参考前述对3中的(a)的相关描述。前述图5中的(a)以及图5中的(b)示出的即为电子设备不为手持通话模式的示例性用户界面,具体内容可以参考前述对图5中的(a)以及图5中的(b)的相关描述。
在一些实施例中,默认情况下,音频信号通过第一发声器或者第二发声器播放,在电子设备检测到本机没有连接耳机以及通过扬声器等其他发声器播放音频信号的情况下,则可以确定通话模式为手持通话模式。在电子设备检测到本机连接耳机或通过扬声器等其他发声器播放音频信号的情况下,则可以确定不为手持通话模式。
在电子设备确定通话模式为手持通话模式的情况下,则执行步骤S104-步骤S114。
在电子设备确定不为手持通话模式的情况下,则执行步骤S103。
S103.电子设备使用其他算法处理下行音频信号;
在确定不是手持通话模式的情况下,电子设备使用其他算法(例如降噪算法等)处理该下行音频信号。然后,通过其他的发声器播放该处理后的下行音频信号,例如,电子设备可以通过扬声器播放该处理后的下行音频信号。
在电子设备确定通话模式为手持通话模式的情况下,则执行步骤S104-步骤S114。确定通话模式,在该通话模式下处理该下行音频信号,得到处理后的左声道音频信号以及处理后的右声道音频信号,然后,通过第一发声器播放该处理后的左声道音频信号以及通过第二发声器播放该处理后的右声道音频信号。关于步骤S104-步骤S114的详细描述如下:
S104.电子设备确定通话模式是否为可调节模式;
可调节模式为电子设备可以在三个通话模式之间进行切换。
在一些实施例中,电子设备可以通过用户设置改变本机是否为可调节模式。
例如,如前述图7a-图7d所示,为用户通过电子设备设置通话模式是否为可调节模式的一组示例性用户界面。具体内容可以参考前述对图7a-图7d的相关描述。
电子设备确定通话模式为可调节模式,则执行步骤S105-步骤S114。
电子设备确定通话模式为不可调节模式,则在普通模式下处理该下行音频信号,即利用普通模式下涉及的参数对该下行音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号,然后,通过第一发声器播放该处理后的左声道音频信号以及通过第二发声器播放该处理后的右声道音频信号。具体过程可以参考下述对步骤S108的描述,此处暂不赘述。
在确定通话模式为可调节模式之后,电子设备执行步骤S105-步骤S114,其中,步骤S104-步骤S113是持续进行的,直到结束通话。
应该理解的是,可选的,在一种可能的实现方式中,步骤S102中,确定通话模式为手持通话模式之后,电子设备可以不执行步骤S104,直接确定通话模式为普通模式,然后在普通模式下处理该下行音频信号。或者,也可以用户接听电话后,电子设备设置通话模式为安静模式或者嘈杂模式。
在另一种可能的实现方式中,步骤S102中,确定通话模式为手持通话模式之后,可以不直接确定通话模式为普通模式而是执行步骤S105,判断电子设备的通话模式是否为可调节模式,如果是,则重新判断电子设备的通话模式。
S105.电子设备确定用户与屏幕之间的状态是否为紧贴屏幕状态;
用户与屏幕之间的状态可以分为紧贴屏幕状态与非紧贴屏幕状态。其具体的描述可以参考前述相关内容,此处不再赘述。
可选的,电子设备可以默认设置用户与屏幕之间的状态为紧贴状态,然后,根据用户是否紧贴屏幕更新该用户与屏幕之间的状态。
具体的,电子设备可以通过屏幕上的传感器检测到用户是否与屏幕接触,如果是,则确定用户与屏幕之间的状态为紧贴屏幕状态。否则,确定用户与屏幕之间的状态为非紧贴屏幕状态。判断条件前面已经进行说明,在此不进行赘述。
在一些实施例中,用户与屏幕接触多长时间电子设备才确定用户紧贴屏幕是可以由用户进行设置的。例如,如图7c中的用户界面72所示。用户可以通过设置音质调节灵敏度来控制用户与屏幕接触多长时间电子设备才确定用户紧贴屏幕,对该过程的具体描述可以参考前述对图7c中的相关内容的描述,此处不再赘述。
电子设备确定用户与屏幕之间的状态为紧贴屏幕状态时,可以执行步骤S106以确定通话环境类型,再基于该通话环境类型确定通话模式。
可选的,在一些实施例中,电子设备确定用户与屏幕之间的状态为非紧贴屏幕状态时,可以执行步骤S107,确定通话模式为普通模式。
在另一些实施例中,电子设备确定用户与屏幕之间的状态为非紧贴屏幕状态时,可以执行步骤S108,在普通模式下处理该下行音频信号。
应该理解的是,当电子设备确定用户与屏幕之间的状态为非紧贴屏幕状态时,电子设备还可以确定通话模式为安静模式或者嘈杂模式。
S106.电子设备确定通话环境类型;
通话环境类型可以用于描述通话时,电子设备周围环境中噪声的长时能量大小。噪声的长时能量为预设一段时间内噪声的平均能量。
可选的,电子设备可以通过计算麦克风获取的帧音频信号中噪声的长时能量来确定通话环境类型。
在一些实施例中,通话环境类型可以分为安静、普通及嘈杂。在第一次更新通话环境类型之前,电子设备可以设置通话环境类型为普通。然后,根据帧音频信号中噪声的长时能量来更新通话环境类型。电子设备可以通过该长时能量的大小来判断通话环境类型,长时能量大则为嘈杂,小则为安静,中间状态为普通。
具体的,电子设备可以利用麦克风获取的第一上行音频信号中噪声的能量以及第二上行音频信号中噪声的长时能量,得到第一上行音频信号中噪声的长时能量。
该第一上行音频信号为电子设备的麦克风获取的第t帧音频信号。
该第二上行音频信号为与第一上行音频信号相差X帧的音频信号,其中,X为大于等于1的整数。X的取值范围与电子设备的处理能力相关,通过可以为1-5,例如X=1时,则第二上行音频信号为第一上行音频信号的前一帧音频信号,即第t-1帧音频信号,此时,该第一上行音频信号中噪声的长时能量,可以理解为下述公式(1)中的Nl(t),该第一上行音频信号中噪声的能量,可以理解为下述公式(1)中的Nt(t),此时,该第二上行音频信号中噪声的长时能量,可以理解为下述公式(1)中的Nl(t-1)。
这里应该理解的是,噪声可以分为稳态噪声和非稳态噪声,其中,稳态噪声为在测量时间内,被测声源的声级起伏不大于一定阈值(如3dB)的噪声,非稳态噪声是指在测量时间内,被测声源的声级起伏不小于一定阈值(如3dB)的噪声。
电子设备计算该第一上行音频信号中噪声的长时能量的相关公式可以参考下述公式(1):
Nl(t)=a*Nl(t-1)+(1-a)Nt(t)(t>1) 公式(1)
公式(1)中,Nl(t)即为第一上行音频信号中噪声的长时能量,Nt(t)表示第一上行音频信号中噪声的能量,特别的,该Nt(t)的噪声可以为稳态噪声,也可以包括稳态噪声和非稳态噪声,具体可以根据需要进行设置。Nl(t-1)表示第二上行音频信号中噪声的长时能量。a表示平滑因子,其取值范围为(0.9,1),a可以常数,也可以是变量,为变量时,可以基于Nt(t)中包括的噪声类型对a的值进行调整,例如,当Nt(t)的噪声包括稳态噪声但是不包括非稳态噪声时,该a可以取值为0.9,该a可以根据其他的情况进行改变,本申请实施例对此不做限定。
其中,可选的,Nt(t)可以通过最小值控制的递归平均(mcra)算法得到。
应该理解的是,当电子设备计算麦克风获取的第一帧第一上行音频信号时,公式(2)中的Nl(t-1)还无法计算得到,则此时,可以将Nl(t-1)设置为一个初始值,该初始值的大小可以根据经验取得。
在一些实施例中,电子设备可以通过第一能量阈值、第二能量阈值以及该第一上行音频信号中噪声的长时能量确定通话环境类型,该过程可以参考下述公式(2)。
Figure BDA0003302614090000201
公式(2)中,N1表示第一阈值,N2表示第二阈值,该第一阈值小于第二阈值。通常,该第一阈值可以设置为(-65db,-55db),例如-60db。该第二阈值可以设置为(-35db,-25db),例如-30db。当第一上行音频信号中噪声的长时能量小于第一阈值时,则电子设备确定通话环境类型为安静;当第一上线音频信号中噪声的长时能量大于第一阈值但是小于第二阈值时,则电子设备确定通话环境类型为普通;当第一上线音频信号中噪声的长时能量大于第二阈值时,则电子设备确定通话环境类型为嘈杂。
在另一些实施中,为了使得通话环境类型不会在安静、普通及嘈杂模式之间进行频繁的切换,从而导致通话模式在安静模式、普通模式及嘈杂模式之间进行频繁的切换,电子设备可以设置从普通模式到安静模式的阈值小于从安静模式到普通模式的阈值,这样当电子设备从安静模式切换到普通模式之后,如需再切换到嘈杂模式,则需要通话环境更安静才可以,从普通模式到嘈杂模式的阈值大于从嘈杂模式到普通模式的阈值,这样当电子设备从嘈杂模式切换到普通模式之后,如需再切换到嘈杂模式,则需要通话环境更嘈杂才可以。
可选的,电子设备可以通过第三能量阈值、第四能量阈值、第五能量阈值、第六能量阈值,确定该第一上行音频信号中噪声的长时能量确定通话环境类型,该过程可以参考上述公式(3)。
Figure BDA0003302614090000211
公式(3)中,N3表示第三能量阈值,N4表示第四能量阈值,N5表示第五能量阈值,N6表示第六能量阈值,其中,N5小于N6,N3小于N4,N4大于N6,N6大于N3。对该公式(3)的描述,可以参考对图9的描述。如图9所示,当通话环境类型变化的方向是从安静到普通、普通到嘈杂或者安静到嘈杂中的一种时,当第一上行音频信号中噪声的长时能量小于N3时,则确定通话环境类型为安静,大于N3小于N4时,则确定通话环境类型为普通,大于N4时为嘈杂。当通话环境类型变化的方向是从嘈杂到普通、普通到安静或者嘈杂到安静中的一种时,当第一上行音频信号中噪声的长时能量大于N6时,则确定通话环境类型为嘈杂,大于N5小于N6时,则确定通话环境类型为普通,小于N5时为安静。
当之前通话环境类型为安静时,如果要确定通话环境类型,则需要参考公式(3)。当之前通话环境类型为嘈杂时,如果要确定通话环境类型,则需要参考公式(2)。当之前通话环境类型为普通时,如果要确定通话环境类型为嘈杂,则需要参考公式(2)。当之前通话环境类型为普通时,如果要确定通话环境类型为安静,则需要参考公式(3)。
其中,之前通话环境类型为通过第二上行音频信号中噪声的长时能量所确定的通话环境类型。
其中,为了使得通话环境类型不会在安静、普通及嘈杂三个模式之间频繁切换且不会从安静模式直接切换到嘈杂模式或者从嘈杂模式直接切换到安静模式,前述公式(2)中的平滑因子可以设置得比较大,例如,该平滑因子的取值范围可以为(0.9,1),通常可以配置为0.95。
应该理解的是,前述步骤S105以及步骤S106的执行顺序没有先后之分,电子设备可以先执行步骤S105或步骤S106,也可以同时执行,本申请实施例对此不作限定。
在一些实施例中,电子设备可以结合前述步骤S105中所确定的用户与屏幕之间的状态以及前述步骤S106中所确定的通话环境类型来确定通话模式。
具体的,电子设备通过用户与屏幕之间的状态以及通话环境类型来确定通话模式是普通模式、安静模式还是嘈杂模式的一个示意性逻辑可以参考下述表2。
表2
用户与屏幕之间的状态 通话环境类型 通话模式
紧贴屏幕状态 普通 普通模式
紧贴屏幕状态 安静 安静模式
紧贴屏幕状态 嘈杂 嘈杂模式
非紧贴屏幕状态 普通/安静/嘈杂 普通模式
上述表2中可以看出,在用户与屏幕之间的状态为紧贴屏幕状态的情况下,通话环境类型为普通,则电子设备确定通话模式为普通模式。当通话环境类型为安静的情况下,则电子设备确定通话模式为安静。当通话环境类型为嘈杂的情况下,则电子设备确定通话模式为嘈杂模式。在用户与屏幕之间的状态为非紧贴屏幕状态时,则电子设备确定通话模式为普通模式。
可选的,对于安静模式的确定,电子设备除了可以基于表2中示出的方式以外,还可以通过其他的方式进行确定。例如,当屏幕检测到的压力大于一个预设压力值时且持续时间大于一个预设时间值时,电子设备可以确定通话模式为安静模式。
电子设备在进行通话的过程中,步骤S105以及步骤S106是持续执行的,则电子设备确定通话模式时,可以获取用户与屏幕之间的状态以及通话环境类型,按照表2的描述,结合用户与屏幕之间的状态以及通话环境类型确定通话模式。
其中,表2示出的是一个示例性逻辑,电子设备可以按照其他的逻辑确定通话环境类型,本申请实施例对此不作限定。
应该理解的是,在一些实施例中,电子设备可以默认设置用户与屏幕之间的状态为紧贴屏幕状态,以及默认设置通话环境类型为普通,然后,电子设备可以根据用户与屏幕之间的状态以及通话环境类型重新确定通话模式,即更新通话模式。
对于不同的通话模式,电子设备可以用不同的参数对该下行音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。
可选的,在一些实施例中,不同模式下得到的处理后的左声道音频信号以及右声道音频信号的特点可以参考上述对表1及相关内容的描述,此处不再赘述。
具体的,当电子设备确定通话模式为普通模式时,得到处理后的左声道音频信号以及处理后的右声道音频信号的过程可以参考下述对步骤S107及步骤S108的描述。当电子设备确定通话模式为普通模式时,该过程可以参考下述对步骤S109及步骤S110的描述。当电子设备确定通话模式为普通模式时,该过程可以参考下述对步骤S111及步骤S112的描述。
对于通话模式为普通模式的描述可以参考下述对步骤S107及步骤S108的描述。
S107.电子设备确定通话模式为普通模式;
在用户与屏幕之间的状态为紧贴屏幕状态以及通话环境类型为普通的情况下,或者在用户与屏幕之间的状态为非紧贴屏幕状态的情况下,电子设备可以确定通话模式为普通模式。如前述图6a以及前述图6b所示,为普通模式的一个示意图。具体内容可以参考前述对前述图6a以及前述图6b的描述,此处不再赘述。
电子设备可以利用该下行音频信号得到处理前的左声道音频信号以及处理前的右声道音频信号。然后利用第一参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。
该第一参数中包括第一音量参数以及第一音色参数。该第一音量参数中包括第一右声道音量参数以及第一左声道音量参数。该第一音色参数中包括第一右声道音色参数以及第一左声道音色参数。
其中,第一左声道音色参数用于对处理前的左声道音频信号进行音色调整,使得处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量。
第一左声道音量参数用于对处理前的左声道音频信号进行音量调整,使得处理后的左声道音频信号的能量为第一能量。
第一右声道音色参数用于对处理前的右声道音频信号进行音色调整,使得处理后的右声道音频信号的高频声音信号的能量大于低频声音信号的能量且第一频段的声音信号的能量比其他频段的声音信号的能量大第一分贝(decibel,dB)。
第一右声道音量参数用于对处理前的右声道音频信号进行音量调整,使得处理后的右声道音频信号的能量为第一能量。
具体的,电子设备如何在普通模式下对该下行音频信号进行处理,可以参考下述对步骤S108的描述。
图10为电子设备在普通模式下处理下行音频信号的一个示意性流程图。
S108.电子设备在普通模式下处理该下行音频信号;
电子设备可以利用该下行音频信号得到处理前的左声道音频信号以及处理前的右声道音频信号。然后利用第一参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。该过程可以参考对图10中示出的步骤S201-步骤S203的描述。
S201.电子设备对该下行音频进行降噪,得到处理前的左声道音频信号以及处理前的右声道音频信号。
电子设备首先对该下行音频信号进行降噪,抑制该下行音频信号中的噪声。然后将降噪后的下行音频信号拷贝为两路降噪后的下行音频信号,其中一路降噪后的下行音频信号作为处理前的左声道音频信号,另一路作为处理前的右声道音频信号。
电子设备对下行音频信号进行降噪得到降噪后的下行音频信号的公式可以参数下述公式(4)。
x1-d=x1-x1-n 公式(4)
公式(4)中,x1-d表示降噪后的下行音频信号,x1表示下行音频信号,x1-n表示下行音频信号中的噪声。
其中,电子设备可以利用最优改进对数谱幅度估计(optimally modified log-spectral amplitude estimator,OMLSA)算法、最小统计量控制递归平均(improvedminima controlled recursive averaging,IMCRA)算法及谱减法等算法中一个或多个算法的结合来对计算得到公式(4)中的x1-n,即下行音频信号中的噪声。
然后电子设备将上述降噪拷贝为两路降噪后的下行音频信号,其中一路降噪后的下行音频信号作为处理前的左声道音频信号,另一路作为处理前的右声道音频信号。相关公式可以参考公式(5)。
Figure BDA0003302614090000241
公式(5)中,xdl表示处理前的左声道音频信号,xdr表示处理前的右声道音频信号。
S202.电子设备利用第一参数,对该处理前的左声道音频信号以及处理前的右声道音频信号进行音量调整以及音色调整,得到处理后的左声道音频信号以及处理后的右声道音频信号。
对该第一参数的介绍可以参考前述对步骤S107中相关内容的描述,此处不再赘述。
音色调整用于调整音频信号中不同频段的音频信号的能量占比大小,改善语音音色,常见的音色调整的算法为均衡器(Equalizer,EQ)算法。也可以为其他的算法,本申请实施例对此不作限定。
音量调整用于调整音频信号的能量。常见的音量调整算法可以包括动态范围调整(dynamic range control,DRC)算法,自动增益控制(automatic gain control,AGC)算法中的一个或两者的结合。也可以为其他的算法,本申请实施例对此不作限定。
电子设备可以利用第一左声道音色参数以及第一左声道音量参数对该处理前的左声道音频信号进行处理,得到处理后的左声道音频信号,使得该处理后的左声道音频信号中的低频声音信号的能量大于高频声音信号的能量且使得该处理后的左声道音频信号的能量为第一能量。
电子设备可以利用第一右声道音色参数以及第一右声道音量参数对该处理前的右声道音频信号进行处理,得到处理后的右声道音频信号,使得该处理后的右声道音频信号中的高频声音信号的能量大于低频声音信号的能量且第一频段的声音信号的能量比其他频段的声音信号的能量大第一分贝,以及,该处理后的左声道音频信号的能量为第一能量。
应该理解的是,电子设备利用处理前的左声道音频信号生成处理后的左声道音频信号的过程与右声道音频信号生成处理后的右声道音频信号的过程相似,下面以生成处理后的左声道音频信号为例进行详细描述:
可选的,电子设备可以通过EQ算法对该处理前的左声道音频信号进行音色调整,此时,第一左声道音色参数为该EQ算法中涉及的对左声道音频信号进行滤波的滤波器系数,此时,该滤波器系数也可以被称为第一左声道滤波器系数。该第一左声道音色参数用于对该处理前的左声道音频信号进行音色调整,对该处理前的左声道音频信号的不同频段的声音信号进行抑制或者增强,使得处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量。电子设备可以使用DRC结合AGC的算法对该处理前的左声道音频信号进行音量调整,此时,第一左声道音量参数即为DRC结合AGC的算法中对处理前的左声道音频信号进行音量调整的增益系数,此时,该增益系数也可以被称为第一左声道增益系数。该第一左声道音量参数用于使得处理后的左声道音频信号的能量为第一能量。
在一些实施例中,电子设备利用处理前的左声道音频信号得到处理后的左声道音频信号的公式可以参考下述公式(6)。
x1l=gain1l*filter1l(xdl) 公式(6)
公式(6)中,x1l表示处理后的左声道音频信号,filter1l表示第一左声道音色参数,例如可以为第一左声道滤波器系数,gain1l表示第一左声道音量参数,例如可以为第一左声道增益系数,gain1l*filter1l(xdl)表示利用第一左声道滤波器系数对处理前的左声道音频信号进行音色调整以及利用第一左声道增益系数对处理前的左声道音频信号进行音量调节。
在另一些实施例中,为了避免电子设备在三个通话模式之间切换引起处理后的左声道音频信号的能量忽大忽小的问题,可以在电子设备在生成处理后的左声道音频信号时引入一个平滑过渡时间。则电子设备利用左声道音频信号得到处理后的左声道音频信号的公式可以参考下述公式(7)。
Figure BDA0003302614090000251
公式(7)中,x1l表示处理后的左声道音频信号,Ts表示平滑过渡时间,该值为大于1的整数,其单位为帧。i表示x1l为电子设备在普通模式要计算的第i帧处理后的左声道音频信号。其取值范围为(0,Ts)中的整数,应该理解的是,每次重新切换到普通模式,则i值从1开始,每计算出一帧处理后的左声道音频信号之后,i值增加1。其中,x1l-1=gain1l-1*filter1l-1(xdl),x1l-2=gain1l-2*filter1l-2(xdl)。gain1l-1表示普通模式下计算处理后的左声道音频信号的音色参数,即第一左声道音色参数,filter1l-1表示普通模式下计算处理后的左声道音频信号的音量参数,即第一左声道音量参数,x1l-1为利用处理前的左声道音频信号结合第一左声道音色参数以及第一左声道音量参数计算得到的处理后的左声道音频信号。gain1l-2表示切换到普通模式之前的通话模式下计算处理后的左声道音频信号的音色参数,filter1l-2表示切换到普通模式之前的通话模式下计算处理后的左声道音频信号的音量参数,x1l-2为利用处理前的左声道音频信号结合该音色参数以及音量参数计算得到的处理后的左声道音频信号。
则电子设备利用处理前的右声道音频信号生成处理后的右声道音频信号的过程可以参考前述对利用处理前的左声道音频信号生成处理后的左声道音频信号的过程的描述,公式(6)以及公式(7)中涉及的第一左声道音色参数更改为第一右声道音色参数,公式(6)以及公式(7)中涉及的第一左声道音量参数更改为第一右声道音量参数,其他描述相似,此处不再赘述。
S203.电子设备利用第一发声器播放处理后的左声道音频信号和第二发声器播放处理后的声道音频信号。
在一些实施例中,电子设备可以利用编解码器对该处理后的左声道音频信号进行解码,将其解码为模拟电信号。得到解码后的处理后的左声道音频信号,然后利用第一功率放大器进行功率放大,驱动第一发声器播放该编码后的处理后的左声道音频信号。
电子设备可以利用编解码器对该处理后的右声道音频信号进行解码,将其解码为模拟电信号。得到解码后的处理后的右声道音频信号,然后利用第二功率放大器进行功率放大,驱动第二发声器播放该编码后的处理后的右声道音频信号。
S109.电子设备确定通话模式为安静模式;
在用户与屏幕之间的状态为紧贴屏幕状态以及通话环境类型为安静的情况下,电子设备可以确定通话模式为安静模式。如前述图6c所示,为安静模式的一个示意图。具体内容可以参考前述对前述图6c的描述,此处不再赘述。
电子设备可以利用该下行音频信号得到处理前的左声道音频信号以及处理前的右声道音频信号。然后利用第二参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。
该第二参数中包括第二音量参数以及第二音色参数。该第二音量参数中包括第二右声道音量参数以及第二左声道音量参数。该第二音色参数中包括第二右声道音色参数以及第二左声道音色参数。
其中,第二左声道音色参数用于对处理前的左声道音频信号进行音色调整,使得处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量且第二频段的声音信号的能量比其他频段的声音信号的能量小第二分贝。
第二左声道音量参数用于对处理前的左声道音频信号进行音量调整,使得处理后的左声道音频信号的能量为第二能量。
第二右声道音色参数用于对处理前的右声道音频信号进行音色调整,使得处理后的右声道音频信号的高频声音信号的能量大于低频声音信号的能量且第一频段的声音信号的能量比其他频段的声音信号的能量大第三分贝(decibel,dB)。
第二右声道音量参数用于对处理前的右声道音频信号进行音量调整,使得处理后的右声道音频信号的能量为第二能量。
S110.电子设备在安静模式下处理该下行音频信号;
电子设备可以利用该下行音频信号得到处理前的左声道音频信号以及处理前的右声道音频信号。然后利用第二参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。该过程可以参考前述对步骤109的描述。
步骤S11中,电子设备利用处理前的左声道音频信号生成处理后的左声道音频信号的过程可以参考前述步骤S108中利用处理前的左声道音频信号生成处理后的左声道音频信号的过程的描述,公式(6)以及公式(7)中涉及的第一左声道音色参数更改为第二左声道音色参数,公式(6)以及公式(7)中涉及的第一左声道音量参数更改为第二左声道音量参数,其他描述相似,此处不再赘述。
步骤S11中,电子设备利用处理前的右声道音频信号生成处理后的右声道音频信号的过程可以参考前述对利用处理前的左声道音频信号生成处理后的左声道音频信号的过程的描述,公式(6)以及公式(7)中涉及的第一左声道音色参数更改为第二右声道音色参数,公式(6)以及公式(7)中涉及的第一左声道音量参数更改为第二右声道音量参数,其他描述相似,此处不再赘述。
S111.电子设备确定通话模式为嘈杂模式;
在用户与屏幕之间的状态为紧贴屏幕状态以及通话环境类型为嘈杂的情况下,电子设备可以确定通话模式为嘈杂模式。如前述图6d所示,为安静模式的一个示意图。具体内容可以参考前述对前述图6d的描述,此处不再赘述。
电子设备可以利用该下行音频信号得到处理前的左声道音频信号以及处理前的右声道音频信号。然后利用第三参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。
该第三参数中包括第三音量参数以及第三音色参数。该第三音量参数中包括第三右声道音量参数以及第三左声道音量参数。该第三音色参数中包括第三右声道音色参数以及第三左声道音色参数。
其中,第三左声道音色参数用于对处理前的左声道音频信号进行音色调整,使得处理后的左声道音频信号的低频声音信号的能量大于高频声音信号的能量。
第三左声道音量参数用于对处理前的左声道音频信号进行音量调整,使得处理后的左声道音频信号的能量为第三能量。
第三右声道音色参数用于对处理前的右声道音频信号进行音色调整,使得处理后的右声道音频信号的高频声音信号的能量大于低频声音信号的能量且第一频段的声音信号的能量比其他频段的声音信号的能量大第四分贝(decibel,dB)。
第三右声道音量参数用于对处理前的右声道音频信号进行音量调整,使得处理后的右声道音频信号的能量为第三能量。
S112.电子设备在嘈杂模式下处理该下行音频信号;
电子设备可以利用该下行音频信号得到处理前的左声道音频信号以及处理前的右声道音频信号。然后利用第三参数分别对该处理前的左声道音频信号以及处理前的右声道音频信号进行处理,得到处理后的左声道音频信号以及处理后的右声道音频信号。该过程可以参考前述对步骤109的描述。
步骤S13中,电子设备利用处理前的左声道音频信号生成处理后的左声道音频信号的过程可以参考前述步骤S108中利用处理前的左声道音频信号生成处理后的左声道音频信号的过程的描述,公式(6)以及公式(7)中涉及的第一左声道音色参数更改为第三左声道音色参数,公式(6)以及公式(7)中涉及的第一左声道音量参数更改为第三左声道音量参数,其他描述相似,此处不再赘述。
步骤S13中,电子设备利用处理前的右声道音频信号生成处理后的右声道音频信号的过程可以参考前述对利用处理前的左声道音频信号生成处理后的左声道音频信号的过程的描述,公式(6)以及公式(7)中涉及的第一左声道音色参数更改为第三右声道音色参数,公式(6)以及公式(7)中涉及的第一左声道音量参数更改为第三右声道音量参数,其他描述相似,此处不再赘述。
S113.电子设备确定通话是否结束;
在确定通话没有结束的情况下,电子设备继续获取下一帧下行音频信号,重复执行步骤S104-步骤S113。重新确定通话模式是否为可调节模式,然后,得到处理后的左声道音频信号以及处理后的右声道音频信号,然后进行播放。
可选的,在确定通话没有结束的情况下,电子设备继续获取下一帧下行音频信号,重复执行步骤S105-步骤S113,不执行步骤S104,不用重新确定通话模式是否为可调节模式。
在确定通话结束的情况下,电子设备执行步骤S114。
S114.电子设备退出通话类应用。
本申请实施例中,对于通话上行的过程,电子设备通过麦克风获取音频信号时,在采集电子设备周围的音频信号的同时,也可以采集到第一发声器播放以及第二发声器播放的音频信号从而导致该麦克风采集的音频信号中包括其他电子设备的回声信号。该回声信号是由于麦克风采集的音频信号中,包括第一发声器以及第二发声器播放的音频信号而导致的。
电子设备可以除去麦克风采集的音频信号中的回声信号,图11为电子设备除去麦克风采集的音频信号中的回声信号的一个示意性流程图。
该过程涉及的详细描述可以参考下述对步骤S301-步骤S304的描述。
S301.电子设备获取上行音频信号;
该上行音频信号为电子设备的麦克风采集的一帧音频信号。一帧音频信号具体为多长时间的音频信号可以根据电子设备的处理能力决定,一般可以为10ms-50ms,例如10ms或者20ms、30ms等10ms的倍数。
该上行音频信号中包括电子设备周围的声音信号及用户的声音信号,还包括第一发声器以及第二发声器播放的音频信号而导致的回声信号。电子设备可以执行下述步骤S302-步骤S304除去该回声信号。
S302.电子设备获取获取第一参考信号和第二参考信号;
该第一参考信号为处理后的左声道音频信号经过第一功率放大器之后输出的音频信号。
该第二参数信号为处理后的右声道音频信号经过第二功率放大器之后输出的音频信号。
电子设备可以获取一帧第一功率放大器输出的音频信号作为第一参考信号以及获取一帧第一功率放大器输出的音频信号作为第一参考信号。
S303.电子设备利用该第一参考信号和第二参考信号估计出回声信号;
该回声信号即为估计出的麦克风采集的第一发声器以及第二发声器播放的音频信号。
在一些实施例中,电子设备可以结合第一参考信号以及第二参考信号,估计出回声信号。
在一些实施例中,电子设备确定该回声信号的相关公式,可以参考下述公式(8)。
Figure BDA0003302614090000281
公式(8)中,
Figure BDA0003302614090000282
表示回声信号,fl表示第一参考信号到回声信号的传递函数。fr表示第二参考信号到回声信号的传递函数。x′l(t,f)表示频域上的第一参考信号,x′r(t,f)表示频域上的第二参考信号,其中,t表示帧,f表示频点。
在另一些实施例中,电子设备确定该回声信号的相关公式,可以参考下述公式(9)。
Figure BDA0003302614090000283
公式(9)中,
Figure BDA0003302614090000284
表示回声信号,max表示时频点取大操作,其他相关符号的定义可以参考公式(8)中的描述。
上述公式(8)以及公式(9)中设计的传递函数可以利用回声消除(acoustic echocancellation,AEC)算法确定,也可以利用其他的算法确定。不构成对本申请实施例的限定。
S304.电子设备从上行音频信号中除去该回声信号,得到处理后的上行音频信号。
该处理后的上行音频信号为上行音频信号除去回声信号之后的那部分音频信号。
在一些实施例中,电子设备利用上行音频信号及回声信号,得到处理后的上行音频信号的相关公式可以参考下述公式(10)。
Figure BDA0003302614090000291
公式(10)中,x2-d表示处理后的上行音频信号,x2表示上行音频信号,
Figure BDA0003302614090000292
表示回声信号。
应该理解的是,本申请中涉及的安静模式、普通模式以及嘈杂模式也可以被称为第一通话模式或第二通话模式中的一个,当第一模式为三个模式(安静模式、普通模式以及嘈杂模式)中的一个时,第二模式可以为该三个模式中的另一个,例如,当第一通话模式为安静模式时,第二模式可以为普通模式或嘈杂模式中的一个。通话环境可以为安静环境、普通环境或者嘈杂环境。
其中,第一模式下的左声道音频信号的特点可以被称为第一左声道音频特征,第一模式下的右声道音频信号的特点可以被称为第一右声道音频特征。第一模式下,用户与屏幕之间的状态和/或通话环境类型可以被称为第一通话环境。
第二模式下的左声道音频信号的特点可以被称为第二左声道音频特征,第二模式下的右声道音频信号的特点可以被称为第二右声道音频特征。第二模式下,用户与屏幕之间的状态和/或通话环境类型可以被称为第二通话环境。
结合表1中的相关内容可知,第一左声道音频特征与第二左声道音频特征可以不同,和/或,第一右声道音频特征与第二右声道音频特征可以不同,该不同可以体现在音量和/或音色上。例如,当第一模式为普通模式时,第二模式为安静模式时,第一左声道音频信号的音量为第一能量,第二左声道音频信号的音量为第二能量,该第一能量大于第二能量,则使得第一左声道音频特征与第二左声道音频特征不同。
本申请实施例中涉及的全部音频信号也可以被称为音频,发声器(第一发声器以及第二发声器)播放音频信号(左声道音频信号以及右声道音频信号)也可以被称为输出音频信号。声音信号也可以被称为声音。
应该理解的是,本申请实施例中提及的第一上行音频信号可以为第t帧音频信号。
下面首先介绍本申请实施例提供的示例性电子设备。
图12是本申请实施例提供的电子设备的结构示意图。
下面以电子设备为例对实施例进行具体说明。应该理解的是,电子设备可以具有比图中所示的更多的或者更少的部件,可以组合两个或多个的部件,或者可以具有不同的部件配置。图中所示出的各种部件可以在包括一个或多个信号处理和/或专用集成电路在内的硬件、软件、或硬件和软件的组合中实现。
电子设备可以包括:处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194以及用户标识模块(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本发明实施例示意的结构并不构成对电子设备的具体限定。在本申请另一些实施例中,电子设备可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器(简称调制解调器),图形处理器(graphicsprocessing unit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了***的效率。
调制解调器用于在接收到其他电子设备发送给本机的音频信号之后,可以将其进行解码,得到下行音频信号。然后将该下行音频信号传输至双器件通话算法。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED)等。在一些实施例中,电子设备可以包括1个或N个显示屏194,N为大于1的正整数。
在本申请实施例中,该显示屏194也可以被称为屏幕。
电子设备可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。
电子设备可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
本申请实施例中,该受话器170B也可以被称为发声器,电子设备可以包括第一发声器(未示出)以及第二发声器(未示出),该第一发声器用于播放模拟的左声道音频信号。该第二发声器用于播放模拟的右声道音频信号。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备可以设置至少一个麦克风170C。在另一些实施例中,电子设备可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
在一些实施例中,麦克风可以将采集的音频信号传输至编解码器进行编码,得到上行音频信号,然后将该上行音频信号传输至双器件通话算法。双器件通话算法可以结合该上行音频信号计算得到通话环境类型。耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminalplatform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunicationsindustry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。
在一些实施例中,压力传感器可以用于确定用户与屏幕之间的状态,例如,当压力传感器检测到用户与屏幕之间的压力大于一个预设压力值时,且持续时间大于一个预设时间时,电子设备可以确定用户与屏幕之间的状态为紧贴屏幕状态。当压力传感器检测到用户与屏幕之间的压力小于一个预设压力值时,或持续时间小于一个预设时间时,电子设备可以确定用户与屏幕之间的状态为非紧贴屏幕状态。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。
环境光传感器180L用于感知环境光亮度。电子设备可以根据感知的环境光亮度自适应调整显示屏194亮度。环境光传感器180L也可用于拍照时自动调整白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备是否在口袋里,以防误触。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。
显示屏194上的传感器,例如触摸传感器,可以检测用户是否与该显示屏194接触。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备可以接收按键输入,产生与电子设备的用户设置以及功能控制有关的键信号输入。
本申请实施例中,电子设备还包括编解码器(未示出),第一功率发大器(未示出)及第二功率发大器(未示出)。
该编解码器用于将模拟信号编码成数字信号,也可以用于将数字信号解码成模拟信号。例如,可以将数字的处理后的左声道音频信号进行编码,得到模拟的左声道音频信号。
该第一功率放大器用于将模拟的音频信号进行功率放大,驱动受话器170B播放该模拟的音频信号。例如,将编码后的处理后的左声道音频信号进行功率放大,驱动第一发声器播放该模拟的处理后的左声道音频信号。
该第二功率放大器用于将模拟的音频信号进行功率放大,驱动受话器170B播放该模拟的音频信号。例如,将编码后的处理后的右声道音频信号进行功率放大,驱动第二发声器播放该模拟的处理后的右声道音频信号。
本申请实施例中,该处理器110可以调用内部存储器121中存储的计算机指令,以使得电子设备执行本申请实施例中的通话方法。
图13是本申请实施例的电子设备的***结构示意图。
下面示例性介绍电子设备的***结构。
分层架构将***分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,将***分为四层,从上至下分别为应用程序层,应用程序框架层、硬件抽象层以及硬件层。
应用程序层可以包括一系列应用程序包。
如图13所示,应用程序包可以包括电话、设置等应用程序(也可以称为应用)。
其中,设置应用中可以提供设置通话模式是否为可调节模式的用户界面,以及设置音质调节灵敏度来控制用户与屏幕接触多长时间电子设备才确定用户紧贴屏幕的用户界面。例如,前述图7a-图7d可以为相关的用户界面。
在一些实施例中,该设置应用可以将用户设置的通话模式是否为可调节模式的信息传输到下述硬件抽象层中的音频硬件抽象。以及用户设置的音质调节灵敏度的信息传输到下述硬件抽象层中的屏幕硬件抽象。
通话应用为通话类应用,开启该通话类应用,用户可以通过电子设备进行通话。例如,响应于用户在电话应用上接听电话的操作,电话应用可以通过应用框架层的电话管理器确定通话已连接,然后,该电话管理器可以调用抽象层的音频硬件抽象启动麦克风、第一发声器及第二发声器等通话过程中涉及的硬件使得电子设备开启通话类应用,用户可以开始通话。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
在一些实施例中,应用程序框架层可以包括电话管理器等。
电话管理器用于提供电子设备的通信功能。例如通话状态的管理(包括接通,挂断等)。
在一些实施例中,该电话管理器还可以确定电子设备的是否为手持通话模式。并且将是否为手持通话模式的信息传递到音频硬件抽象。
硬件抽象层为位于应用程序框架层以及硬件层之间的接口层,为操作***提供虚拟硬件平台。
本申请实施例中,硬件抽象层可以包括音频硬件抽象以及屏幕硬件抽象。
其中,音频硬件抽象可以用于接收电话管理器下发的手持通话模式的信息以及设置应用下发的通话模式是否为可调节模式的信息,并将这两个信息存储在内置的数据库中。
在一些实施例中,当音频硬件抽象确定通话状态为手持通话模式以及通话模式为可调节模式的情况下,可以调用屏幕硬件抽象获取用户与屏幕之间的状态,且,调用双器件通话算法对下行音频信号进行处理。当电话管理器确定通话状态为手持通话模式以及通话模式不为可调节模式的情况下,则调用双器件通话算法对下行音频信号进行处理。当电话管理器确定通话状态不为手持通话模式的情况下则调用其他通话算法对下行音频信号进行处理。
下述描述以音频硬件抽象确定通话状态为手持通话模式以及通话模式为可调节模式为例进行讲解,其他情况可以参考对此的描述。
屏幕硬件抽象可以用于接收设置应用下发的音质调节灵敏度的信息,并将该信息存储在内置的数据库中。
在一些实施例中,在接收到音频硬件抽象调用屏幕硬件抽象获取用户与屏幕之间的状态的指令之后,该屏幕硬件抽象可以从内置的数据库中获取音质调节灵敏度的信息,结合该音质调节灵敏度的信息,通过屏幕上的传感器检测到用户是否与屏幕紧贴。然后用户是否与屏幕紧贴的信息发送到下述音频数字信号处理器中的双器件通话算法。
在本申请实施例中,硬件层涉及的硬件可以包括:音频数字信号处理器、编解码器、调制解调器、屏幕、第一功率放大器、第二功率放大器、第一发声器、第二发声器以及麦克风等。
编解码器等其他硬件的相关功能可以参考前述对图12中的相关内容的描述,此处不再赘述。
其中,音频数字信号处理器中可以设置通话算法。
通话算法中可以包括双器件通话算法以及其他通话算法。
其中,双器件通话算法为本申请实施例中涉及的通话算法。该双器件通话算法可以接收下述调制解调器传输的下行音频信号,并将该下行音频信号进行处理得到处理后的左声道音频信号以及处理后的右声道音频信号。然后将该处理后的左声道音频信号以及处理后的右声道音频信号下发至编解码器。
该双器件通话算法还可以接收下述编解码器传输的上行音频信号,同时获取编解码器传输的第一参考信号以及第二参考信号。然后,结合该第一参考信号以及第二参考信号对该上行音频信号进行回声消除,得到处理后的上行音频信号。
其他电子设备传输给本机的音频信号经过调制解调器解码之后,可以得到下行音频信号。然后,该调制解调器可以将下行音频信号传输至双器件通话算法。
麦克风可以将采集的音频信号传输至编解码器进行编码。
编解码器在接收到处理后的左声道音频信号以及处理后的右声道音频信号之后,可以将该处理后的左声道音频信号以及处理后的右声道音频信号进行解码,得到解码后的处理后的左声道音频信号以及处理后的右声道音频信号。然后将该解码后的处理后的左声道音频信号传输至第一功率放大器以及将该解码后的处理后的右声道音频信号传输至第二功率放大器。
编解码器可以接收麦克风采集的音频信号,将其进行编码得到上行音频信号,然后将该上行音频信号传输至双器件通话算法。
编解码器还可以接收第一功率放大器传输的解码后的处理后的左声道音频信号将其进行编码得到第一参考信号。且,接收第二功率放大器传输的解码后的处理后的右声道音频信号将其进行编码得到第二参考信号。然后将该第一参考信号以及第二参考信号传输至双器件通话算法。
第一功率放大器在接收到解码后的处理后的左声道音频信号之后可以将其进行功率放大,驱动第一发声器播放该解码后的处理后的左声道音频信号。
第二功率放大器在接收到解码后的处理后的右声道音频信号之后可以将其进行功率放大,驱动第二发声器播放该解码后的处理后的右声道音频信号。
以上所述,以上实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述实施例对本申请进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。
上述实施例中所用,根据上下文,术语“当…时”可以被解释为意思是“如果…”或“在…后”或“响应于确定…”或“响应于检测到…”。类似地,根据上下文,短语“在确定…时”或“如果检测到(所陈述的条件或事件)”可以被解释为意思是“如果确定…”或“响应于确定…”或“在检测到(所陈述的条件或事件)时”或“响应于检测到(所陈述的条件或事件)”。
在上述实施例中,可以全部或部分地通过软件、硬件、固件或者其任意组合来实现。当使用软件实现时,可以全部或部分地以计算机程序产品的形式实现。所述计算机程序产品包括一个或多个计算机指令。在计算机上加载和执行所述计算机程序指令时,全部或部分地产生按照本申请实施例所述的流程或功能。所述计算机可以是通用计算机、专用计算机、计算机网络、或者其他可编程装置。所述计算机指令可以存储在计算机可读存储介质中,或者从一个计算机可读存储介质向另一个计算机可读存储介质传输,例如,所述计算机指令可以从一个网站站点、计算机、服务器或数据中心通过有线(例如同轴电缆、光纤、数字用户线)或无线(例如红外、无线、微波等)方式向另一个网站站点、计算机、服务器或数据中心进行传输。所述计算机可读存储介质可以是计算机能够存取的任何可用介质或者是包含一个或多个可用介质集成的服务器、数据中心等数据存储设备。所述可用介质可以是磁性介质,(例如,软盘、硬盘、磁带)、光介质(例如DVD)、或者半导体介质(例如固态硬盘)等。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程,该流程可以由计算机程序来指令相关的硬件完成,该程序可存储于计算机可读取存储介质中,该程序在执行时,可包括如上述各方法实施例的流程。而前述的存储介质包括:ROM或随机存储记忆体RAM、磁碟或者光盘等各种可存储程序代码的介质。

Claims (15)

1.一种通话方法,其特征在于,应用于包括第一发声器和第二发声器的电子设备,所述第二发声器与所述第一发声器不同,所述第一发声器对应左声道,所述第二发声器对应右声道,所述方法包括:
显示通话应用界面;
所述电子设备确定为第一通话模式,所述第一通话模式对应第一左声道音频特征和第一右声道音频特征,所述第一左声道音频特征为左声道输出的音频信号的音频特征,所述第一右声道音频特征为所述右声道输出的音频信号的音频特征,所述第一通话模式对应第一通话环境;
确定所述电子设备处于第二通话环境;
所述电子设备切换为第二通话模式,所述第二通话模式对应第二左声道音频特征和第二右声道音频特征,所述第二左声道音频特征为所述左声道输出的音频信号的音频特征,所述第二右声道音频特征为所述右声道输出的音频信号的音频特征,所述第二通话模式对应第二通话环境,所述第一通话环境和所述第二通话环境不同,其中,
所述第一左声道音频特征与所述第二左声道音频特征不同,和/或,所述第一右声道音频特征与所述第二右声道音频特征不同。
2.根据权利要求1所述的方法,其特征在于,所述电子设备确定为第一通话模式之后,所述方法还包括:
所述电子设备接收下行音频;所述下行音频为通话过程中其他电子设备发送给所述电子设备的音频;
所述电子设备在所述第一通话模式下,对所述下行音频进行处理,得到第一左声道音频以及第一右声道音频,其中,所述第一左声道音频中,低频音的能量大于高频音的能量,所述第一右声道音频中,高频音的能量大于低频音的能量;
所述电子设备通过所述第一发声器播放所述第一左声道音频,通过所述第二发声器播放所述第一右声道音频。
3.根据权利要求1或2所述的方法,其特征在于:
所述第一发声器置于所述电子设备的侧面,所述第二发声器置于所述电子设备的屏幕内侧;其中,所述第一发声器播放的目标左声道音频通过空气传输到人耳,所述第二发声器播放的目标右声道音频通过骨骼传输到人耳。
4.根据权利要求2或3所述的方法,其特征在于,对所述下行音频进行处理,得到第一左声道音频以及第一右声道音频,具体包括:
所述电子设备根据下行音频得到处理前的第一左声道音频以及处理后的第一右声道音频;
将所述处理前的第一左声道音频以及处理前的第一右声道音频分别进行音色调整以及音量调整,得到第一左声道音频以及第一右声道音频,所述音色调整是指调整音频中不同频段的声音的能量分布,所述音量调整是指调整音频的能量大小。
5.根据权利要求4所述的方法,其特征在于,所述电子设备根据下行音频得到处理前的第一左声道音频以及处理前的第一右声道音频之后,将所述处理前的第一左声道音频和所述处理前的第一右声道音频分别进行音色调整以及音频调整之前,所述方法还包括:
所述电子设备确定对所述处理前的第一左声道音频和所述处理前的第一右声道音频进行处理的参数,所述参数包括左声道音色参数、右声道音色参数、左声道音量参数及右声道音量参数;
将所述处理前的第一左声道音频和所述处理前的第一右声道音频分别进行音色调整以及音频调整,得到第一左声道音频以及第一右声道音频,具体包括:
利用所述左声道音色参数和所述左声道音量参数对处理前的左声道音频分别进行音色调整以及音量调整得到第一左声道音频;利用所述右声道音色参数和所述右声道音量参数对处理前的右声道音频分别进行音色调整以及音量调整,得到第一右声道音频。
6.根据权利要求5所述的方法,其特征在于,确定对所述处理前的左声道音频和所述处理前的右声道音频进行处理的参数,具体包括:
所述电子设备确定通话环境类型,所述通话环境类型包括安静、普通及嘈杂;其中,通话环境类型为安静时与通话环境类型为普通/嘈杂时相比,前者对应的第一上行音频中噪声的长时能量比后者小;通话环境类型为嘈杂时与通话环境类型为安静/普通时相比,前者对应的第一上行音频中噪声的长时能量比后者大;
所述电子设备确定用户与屏幕之间的状态,所述用户与屏幕之间的状态包括紧贴屏幕状态和非紧贴屏幕状态;所述紧贴屏幕状态为用户与所述电子设备的屏幕之间的距离小于一个预设值且大于该预设值的此续时间大于一个预设时间的状态,所述非紧贴屏幕状态为用户与所述电子设备的屏幕之间的距离不小于一个预设值且不小于该预设值的此续时间大于一个预设时间的状态;
基于所述通话环境类型以及用户与屏幕之间的状态确定通话模式,所述通话模式为第一通话模式及第二通话模式中的一个。
7.根据权利要求1-6中的任一项所述的方法,其特征在于,所述第一模式为安静模式、普通模式以及嘈杂模式中的一个,第二模式为安静模式、普通模式以及嘈杂模式中的另一个,基于所述通话环境类型以及用户与屏幕之间的状态确定通话模式,具体包括:
在所述通话环境类型为普通且所述用户与屏幕之间的状态为紧贴屏幕状态的情况下或者所述用户与屏幕之间的状态为非紧贴屏幕状态的情况下,所述电子设备确定所述通话模式为普通模式;
所述电子设备确定所述普通模式对应的参数为对所述处理前的第一左声道音频和所述处理前的第一右声道音频进行处理的参数;
在所述通话环境类型为安静,所述用户与屏幕之间的状态为紧贴屏幕状态的情况下,所述电子设备确定通话模式为安静模式;
所述电子设备确定所述安静模式对应的参数为对所述处理前的第一左声道音频和所述处理前的第一右声道音频进行处理的参数;
在所述通话环境类型为嘈杂,所述用户与屏幕之间的状态为紧贴屏幕状态的情况下,确定通话模式为嘈杂模式;
所述电子设备确定所述嘈杂模式对应的参数为对所述处理前的第一左声道音频和所述处理前的第一右声道音频进行处理的参数。
8.根据权利要求7所述的方法,其特征在于:
设置计算第一上行音频中噪声的长时能量时涉及的参数,使得所述通话模式,只能从安静模式切换到普通模式、普通模式切换到嘈杂模式、嘈杂模式切换到普通模式及普通模式切换到安静模式。
9.根据权利要求1-8中任一项所述的方法,其特征在于,显示通话应用界面之后,所述电子设备确定为第一通话模式之前,所述方法还包括:
所述电子设备确定用户通话过程中,通过所述第一发声器以及所述第二发声器播放音频。
10.根据权利要求6-9中任一项所述的方法,其特征在于:
所述电子设备默认设置通话环境类型为普通;
所述电子设备默认设置用户与屏幕之间的状态为紧贴屏幕状态。
11.根据权利要求1-10中任一项所述的方法,其特征在于,所述方法还包括:
所述电子设备根据第一参考信号及第二参考信号估计出回声,所述第一参考信号为第一左声道音频经过第一功率放大器之后输出的音频,所述第二参考信号为第一右声道音频经过第二功率放大器之后输出的音频,所述回声为估计出的麦克风采集的所述第一发声器以及所述第二发声器播放的音频;
从所述第一上行音频中除去该回声,得到目标上行音频。
12.一种电子设备,其特征在于,所述电子设备包括:一个或多个处理器和存储器;所述存储器与所述一个或多个处理器耦合,所述存储器用于存储计算机程序代码,所述计算机程序代码包括计算机指令,所述一个或多个处理器调用所述计算机指令以使得所述电子设备执行如权利要求1-11中任一项所述的方法。
13.一种芯片***,所述芯片***应用于电子设备,所述芯片***包括一个或多个处理器,所述处理器用于调用计算机指令以使得所述电子设备执行如权利要求1-11中任一项所述的方法。
14.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在电子设备上运行时,使得所述电子设备执行如权利要求1-11中任一项所述的方法。
15.一种计算机可读存储介质,包括指令,其特征在于,当所述指令在电子设备上运行时,使得所述电子设备执行如权利要求1-11中任一项所述的方法。
CN202111194770.0A 2021-07-13 2021-10-13 一种通话方法、电子设备、芯片***及存储介质 Active CN115623121B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/CN2022/093888 WO2023284406A1 (zh) 2021-07-13 2022-05-19 一种通话方法及电子设备

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN2021107915800 2021-07-13
CN202110791580 2021-07-13

Publications (2)

Publication Number Publication Date
CN115623121A true CN115623121A (zh) 2023-01-17
CN115623121B CN115623121B (zh) 2024-04-05

Family

ID=84855470

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111194770.0A Active CN115623121B (zh) 2021-07-13 2021-10-13 一种通话方法、电子设备、芯片***及存储介质

Country Status (2)

Country Link
CN (1) CN115623121B (zh)
WO (1) WO2023284406A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117135262A (zh) * 2023-01-29 2023-11-28 荣耀终端有限公司 一种通话方法及电子设备

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080292121A1 (en) * 2007-04-16 2008-11-27 Sony Corporation Audio reproduction system and speaker apparatus
CN103973863A (zh) * 2014-05-30 2014-08-06 深圳市中兴移动通信有限公司 自动调节通话音量的方法和通信终端
CN104378485A (zh) * 2014-11-28 2015-02-25 小米科技有限责任公司 调节音量的方法和装置
CN104935742A (zh) * 2015-06-10 2015-09-23 瑞声科技(南京)有限公司 移动通讯终端及改善其在听筒模式下的音质的方法
CN106604167A (zh) * 2016-11-21 2017-04-26 捷开通讯(深圳)有限公司 一种自动调整耳机左右声道输出音量的方法及移动终端
CN111385687A (zh) * 2018-12-29 2020-07-07 北京小米移动软件有限公司 一种防漏音电子设备
CN113079401A (zh) * 2021-03-29 2021-07-06 海信视像科技股份有限公司 显示设备及回声消除方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101378423A (zh) * 2007-08-28 2009-03-04 希姆通信息技术(上海)有限公司 手机通话接收端音量自动调节装置
CN201805538U (zh) * 2010-09-10 2011-04-20 康佳集团股份有限公司 根据环境声音改善播放声音清晰度的电路及装置
CN103369440B (zh) * 2013-08-01 2016-08-10 广东欧珀移动通信有限公司 一种压电骨导受话器手机
CN105657125B (zh) * 2014-11-12 2018-10-30 阿尔卡特朗讯 一种用于调节通话音量的方法与设备
US9553960B1 (en) * 2015-09-04 2017-01-24 Intel Corporation Loudspeaker with laminate panel for mobile computing platforms
CN206712855U (zh) * 2017-04-27 2017-12-05 上海爱优威软件开发有限公司 受话***及通话设备
CN108833638B (zh) * 2018-05-17 2021-08-17 Oppo广东移动通信有限公司 发声方法、装置、电子装置及存储介质
CN110944079B (zh) * 2019-11-29 2021-06-04 维沃移动通信有限公司 电子设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080292121A1 (en) * 2007-04-16 2008-11-27 Sony Corporation Audio reproduction system and speaker apparatus
CN103973863A (zh) * 2014-05-30 2014-08-06 深圳市中兴移动通信有限公司 自动调节通话音量的方法和通信终端
CN104378485A (zh) * 2014-11-28 2015-02-25 小米科技有限责任公司 调节音量的方法和装置
CN104935742A (zh) * 2015-06-10 2015-09-23 瑞声科技(南京)有限公司 移动通讯终端及改善其在听筒模式下的音质的方法
CN106604167A (zh) * 2016-11-21 2017-04-26 捷开通讯(深圳)有限公司 一种自动调整耳机左右声道输出音量的方法及移动终端
CN111385687A (zh) * 2018-12-29 2020-07-07 北京小米移动软件有限公司 一种防漏音电子设备
CN113079401A (zh) * 2021-03-29 2021-07-06 海信视像科技股份有限公司 显示设备及回声消除方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117135262A (zh) * 2023-01-29 2023-11-28 荣耀终端有限公司 一种通话方法及电子设备

Also Published As

Publication number Publication date
CN115623121B (zh) 2024-04-05
WO2023284406A1 (zh) 2023-01-19

Similar Documents

Publication Publication Date Title
US11710473B2 (en) Method and device for acute sound detection and reproduction
CN110741654B (zh) 耳塞语音估计
US10957301B2 (en) Headset with active noise cancellation
CN110896509A (zh) 耳机佩戴状态确定方法、电子设备控制方法及电子设备
JP2018517167A (ja) 音声信号を処理するための方法及び装置
EP3777114B1 (en) Dynamically adjustable sidetone generation
KR20210102333A (ko) 음성 검출을 위한 방법들 및 시스템들
US10121491B2 (en) Intelligent volume control interface
CN112911441A (zh) 降噪方法、装置、音频设备和计算机可读存储介质
CN115623121B (zh) 一种通话方法、电子设备、芯片***及存储介质
US20230328461A1 (en) Hearing aid comprising an adaptive notification unit
CN113824838B (zh) 发声控制方法、装置、电子设备及存储介质
CN113067944B (zh) 通话音量的调节方法、装置、终端及存储介质
CN116055626B (zh) 一种通话方法、终端和存储介质
CN113938557A (zh) 智能终端自适应方法、装置及介质
US20240089671A1 (en) Hearing aid comprising a voice control interface
CN113825081B (zh) 一种基于掩蔽治疗***的助听方法及装置
US20230074554A1 (en) Hearing aid comprising a user interface
CN113825082B (zh) 一种用于缓解助听延迟的方法及装置
WO2024016229A1 (zh) 音频处理方法及电子设备
CN114979889A (zh) 降低耳机闭塞效应的方法、装置、耳机及存储介质
CN116320867A (zh) 风噪检测方法、装置及耳机
CN115668370A (zh) 听力设备自带的语音检测器
JP2022122270A (ja) 通話中の音声のノイズを低減するバイノーラル聴覚装置
CN117714581A (zh) 音频信号的处理方法和电子设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant