CN111462747A - 一种听力辅助设备及其设定方法 - Google Patents
一种听力辅助设备及其设定方法 Download PDFInfo
- Publication number
- CN111462747A CN111462747A CN202010323344.1A CN202010323344A CN111462747A CN 111462747 A CN111462747 A CN 111462747A CN 202010323344 A CN202010323344 A CN 202010323344A CN 111462747 A CN111462747 A CN 111462747A
- Authority
- CN
- China
- Prior art keywords
- voice assistant
- user
- sound
- setting
- hearing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 45
- 230000003213 activating effect Effects 0.000 claims abstract description 21
- 238000012544 monitoring process Methods 0.000 claims abstract description 18
- 230000005236 sound signal Effects 0.000 claims description 45
- 230000001960 triggered effect Effects 0.000 claims description 11
- 230000007613 environmental effect Effects 0.000 claims description 10
- 238000004891 communication Methods 0.000 claims description 9
- 238000004519 manufacturing process Methods 0.000 abstract description 5
- 208000032041 Hearing impaired Diseases 0.000 abstract description 3
- 230000036541 health Effects 0.000 description 8
- 230000003993 interaction Effects 0.000 description 6
- 238000005070 sampling Methods 0.000 description 6
- 244000062793 Sorghum vulgare Species 0.000 description 5
- 230000002159 abnormal effect Effects 0.000 description 5
- 238000001514 detection method Methods 0.000 description 5
- 235000019713 millet Nutrition 0.000 description 5
- 230000005856 abnormality Effects 0.000 description 4
- 230000000694 effects Effects 0.000 description 4
- 230000008569 process Effects 0.000 description 4
- 230000007246 mechanism Effects 0.000 description 3
- 230000009467 reduction Effects 0.000 description 3
- 241000238558 Eucarida Species 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 230000036760 body temperature Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 210000001503 joint Anatomy 0.000 description 2
- 230000032683 aging Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 230000009429 distress Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 230000001771 impaired effect Effects 0.000 description 1
- 238000006467 substitution reaction Methods 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009978 visual deterioration Effects 0.000 description 1
- 230000002618 waking effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B25/00—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
- G08B25/01—Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
- G08B25/016—Personal emergency signalling and security systems
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
- G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
- G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
- H04L67/125—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks involving control of end-device applications over a network
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
- G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
- G10L2015/223—Execution procedure of a spoken command
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Acoustics & Sound (AREA)
- Signal Processing (AREA)
- Computational Linguistics (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Computing Systems (AREA)
- Computer Security & Cryptography (AREA)
- Business, Economics & Management (AREA)
- Emergency Management (AREA)
- General Physics & Mathematics (AREA)
- Telephone Function (AREA)
Abstract
本发明公开了一种听力辅助设备及其设定方法。该设备包括声音采集模块、发声模块和用于与智能设备连接的连接模块,以及分别与所述声音采集模块、发声模块和连接模块耦接的信号处理模块,所述信号处理模块被配置为可执行以下步骤:监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;通过所述智能设备的语音助手向云服务平台发送设定更新请求;接收所述云服务平台发送的设定更新信息,并根据所述设定更新信息更新设定。本发明在监测到辅助设备的当前设定不满足用户需求时,借用智能设备的语音助手从云服务平台更新设定信息,无需用户呼叫语音助手,以达到协助老年用户或听力损伤用户,实现有效助听或辅听的目的。
Description
技术领域
本发明涉及为用户提供听力辅助的技术领域,具体地说,是一种听力辅助设备及其设定方法。
背景技术
当前,语音助手已经成为智能设备的标准配置,海外以亚马逊公司的语音Alexa、苹果公司的Siri为代表,国内手机等智能设备、互联网服务提供商已经纷纷将语音助手作为用户交互的入口之一提供给消费者使用。由于不同的设备提供商预置了不同的语音助手,因此用户在实际使用中,需要首先触发语音助手服务,才能够进行语音服务的通道,对接云端的语音服务;如用户使用小米手机,则需要先呼叫小爱同学,如果使用百度智能音箱,则需要呼叫小度,使用高德导航软件语音助手,则需要在应用程序界面点击语音呼叫按钮后,才开始进行语音语义识别,并予以反馈。
另外,随着整个社会老龄化程度的加重,越来越多的老年用户和失能用户成为智能手机和智能设备的使用者,由于视力下降等客观因素,语音已经日益成为重要的用户交互的入口,承载着重要的用户体验。而老年人难以记住他们所在使用的多种智能设备的品牌与具体型号,因此时至今日,面向老年人的语音服务仍然未能大规模发展。同时,老年人的听力普遍受损,因此需要使用带有助听或辅助听力类的耳机设备,来配合智能设备的日常使用。
现有市场上的助听或辅听设备,普遍采用首次佩戴时,由医生、专业听力师或用户自助式完成听力检测,根据听力检测的结果,预设助听模式的服务方式。由于用户身处的环境复杂多变,无法通过简单的听力检测充分模拟各种可能出现的情况,因此用户在实际使用进往往并不舒适,尤其是在一些特殊的场景中,助听和辅听设备无法进行合理的降噪与动态压缩、放大,无法实现足够的信噪比,来辅助用户在复杂环境下实现听力辅助。
综上所述,现有助听与辅听设备,无法灵活地适应用户使用的各种场景,同时,由于启动语音助手的复杂性,阻碍了用户,特别是老年用户对语音助手服务的使用。这些限制都使得老年或听力损失用户无法得到优质的助听与辅听服务,也无法充分利用语音助手,使用语音助手平台提供的各种服务,无法提升面向该类用户的服务质量。
发明内容
本发明要解决的技术问题是提供一种在设定不满足用户需要时,可以很方便地实现对听力辅助设备的设定进行更新的听力辅助设备及设定方法。
为了解决上述技术问题,本发明提供了一种听力辅助设备,包括声音采集模块、发声模块和用于与智能设备连接的连接模块,以及分别与所述声音采集模块、发声模块和连接模块耦接的信号处理模块,所述信号处理模块被配置为可执行以下步骤:
监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;
通过所述智能设备的语音助手向云服务平台发送设定更新请求;
接收所述云服务平台发送的设定更新信息,并根据所述设定更新信息更新设定。
进一步地,监测听力辅助设备的当前设定是否满足用户需求通过以下方法之一实现:
配置虚拟或实体的按钮,若监测到用户触发所述按钮,则判断为当前设定不满足用户需求;
通过所述声音采集模块监听用户的说话和/或环境声音,在监听到预设的词语或者预设的声音特征值时,判断为当前设定不满足用户需求;
通过所述声音采集模块监听声音,在监听到超过预设声压值的声音时,判断为当前设定不满足用户需求。
进一步地,激活所述智能设备的语音助手的方法为:
向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号。
按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令。
进一步地,向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号通过以下方法之一实现:
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在需要激活语音助手时依次读取包含语音助手唤醒词的音频数据播放并发送给所述智能设备,直到收到所述智能设备的反馈;
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在将所述听力辅助设备连接到智能设备时,从所述智能设备获取对应的语音助手信息,在需要激活语音助手时根据所述语音助手信息选择包含对应语音助手唤醒词的音频数据并发送给所述智能设备。
进一步地,所述包含有所述智能设备语音助手的唤醒词的声音信号只发送到所述智能设备而不通过所述发声模块播放。
进一步地,向所述云服务平台发送的设定更新请求中包含有用户指令、本地采集的噪音特征值、本地各路声音采样数据其中之一或任意组合。
进一步地,所述设定更新信息以声音信号作为载体。
进一步地,所述声音信号使用人听力范围或听力辅助设备播放频段范围之外的频率。
进一步地,所述听力辅助设备接收到所述声音信号后,从所述声音信号中解析出设定更新信息,而不通过所述发声模块播放所述声音信号。
进一步地,所述设定更新信息包括配置信息、算法信息和服务信息其中之一或任意组合。
进一步地,还包括一个或多个健康类传感器,所述听力辅助设备监测到所述健康类传感器的检测数据异常时,或者监测到用户说出预设的与用户身体异常相关的词语时,或者监测到预设的声音特征值时,通过所述语音助手向所述智能设备和/或所述云服务平台发送报警信号。
本发明还提供了一种听力辅助设备的设定方法,包括:
将听力辅助设备与已接入到互联网的智能设备连接;
监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;
通过所述智能设备的语音助手向云服务平台发送设定更新请求;
所述云服务平台根据所述设定请求发送设定更新信息给所述听力辅助设备;
所述听力辅助设备根据所述设定更新信息更新设定。
进一步地,监测听力辅助设备的当前设定是否满足用户需求通过以下方法之一实现:
配置虚拟或实体的按钮,若监测到用户触发所述按钮,则判断为当前设定不满足用户需求;
通过所述声音采集模块监听用户的说话和/或环境声音,在监听到预设的词语或者预设的声音特征值时,判断为当前设定不满足用户需求;
通过所述声音采集模块监听声音,在监听到超过预设声压值的声音时,判断为当前设定不满足用户需求。
进一步地,激活所述智能设备的语音助手的方法为:
向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号。
按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令。
进一步地,向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号通过以下方法之一实现:
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在需要激活语音助手时依次读取包含语音助手唤醒词的音频数据播放并发送给所述智能设备,直到收到所述智能设备的反馈;
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在将所述听力辅助设备连接到智能设备时,从所述智能设备获取对应的语音助手信息,在需要激活语音助手时根据所述语音助手信息选择包含对应语音助手唤醒词的音频数据并发送给所述智能设备。
进一步地,所述包含有所述智能设备语音助手的唤醒词的声音信号只发送到所述智能设备而不播放。
进一步地,向所述云服务平台发送的设定更新请求中包含有用户指令、本地采集的噪音特征值、本地各路声音采样数据其中之一或任意组合。
进一步地,所述设定更新信息以声音信号作为载体。
进一步地,所述声音信号使用人听力范围或听力辅助设备播放频段范围之外的频率。
进一步地,所述听力辅助设备接收到所述声音信号后,从所述声音信号中解析出设定更新信息,而不播放所述声音信号。
进一步地,其特征在于,所述设定更新信息包括配置信息、算法信息和服务信息其中之一或任意组合。
进一步地,还监测用户的健康信息,在监测到用户的身体健康异常或者监测到用户说出预设的与用户身体异常相关的词语时,或者监测到预设的声音特征值时,通过所述语音助手向所述智能设备和/或所述云服务平台发送报警信号。
本发明的听力辅助设备及其设定方法,在监测到辅助设备的当前设定不满足用户需求时,借用智能设备的语音助手从云服务平台更新设定信息,可以根据用户所处环境,动态选择助听、辅听算法与配置,并巧妙利用了听力辅助设备本身具备对声音信号进行处理的能力,无需用户呼叫语音助手,以达到协助老年用户或听力损伤用户,实现有效助听或辅听,并提供个性化助听服务、健康检测服务,与语音服务的目的。
附图说明
图1是本发明的听力辅助设备一实施例的结构原理框图。
图2是本发明的听力辅助设备设定方法一实施例的原理框图。
具体实施方式
下面结合附图和具体实施例对本发明作进一步说明,以使本领域的技术人员可以更好地理解本发明并能予以实施,但所举实施例不作为对本发明的限定。
如图1所示,作为本发明的听力辅助设备的一实施例,包括声音采集模块、发声模块和用于与智能设备连接的连接模块,以及分别与所述声音采集模块、发声模块和连接模块耦接的信号处理模块,所述信号处理模块被配置为可执行以下步骤:
听力辅助设备初始化与所述智能设备的连接,根据智能设备的相关信息确定激活语音助手的设置;
监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;
通过所述智能设备的语音助手向云服务平台发送设定更新请求;
接收所述云服务平台发送的设定更新信息,并根据所述设定更新信息更新设定。
其中,本实施例中的声音采集模块通常为麦克风,发声模块通常为耳机,连接模块既可以是蓝牙、Wifi等无线连接模块,也可以是3.5mm通用音频接口、USB Type C接口或者lightning接口等。而为了完成上述步骤,既可以为听力辅助设备配置相应的硬件,例如CPU、存储器等,然后通过预置在听力辅助设备上的软件执行上述步骤;也可以只为听力辅助设备配置简单的软、硬件,例如DSP(Digital Signal Processing,数字信号处理)芯片,而上述步骤由安装在智能设备上的应用程序(App)来配合完成。
例如,本发明采用耳机的形式,并在智能手机、平板电脑、电脑或其他智能设备上安装配合耳机使用的App。以手机为例,在安装该App时,可以一次性或定期对手机本机已经注册和使用的语音助手服务或应用进行扫描与识别,包括手机本机***提供的语音助手服务(如小米手机预置的“小爱同学”)和手机上安装的App所携带的语音助手服务(如百度语音助手、Alexa语音助手等等),必要时提供用户引导,来确定耳机激活手机语音助手服务的设置。在本实施例中,所使用手机为小米手机,同时安装了使用Alexa语音助手应用。
手机App将该手机所注册的语音助手信息上报给云服务平台,云服务平台与各语音助手平台进行了对接,并可根据手机App上报的语音助手信息,接入新出现的语音助手平台或更新和已有语音助手平台的对接,确保用户使用常用的语音助手平台,都可以享受到云服务平台所提供的服务。在本实施例中,云服务平台根据手机App上报的信息,对该耳机-手机组合所使用的语音助手服务,注册为小米语音助手和Alexa语音助手。
听力辅助设备的当前设定不满足用户需求,通常体现为本地的助听效果无法达到预设的助听效果与相应的助听指标要求,包括但不限于信噪比、环境降噪、对不同听力频段的听力补偿等。
例如当用户佩戴着耳机,从开放的街道环境,步入一个比较嘈杂的酒吧环境里,在这个过程里,耳机本身先根据预置的环境降噪和助听算法,进行切换与尝试,在切换或尝试的过程中,或尝试过手机预置的所有算法组合后,用户喃喃自语,或者和其他人说道(可以是当面说,也可以是通过耳机和别人通话中任一方提到):“这里怎么这么吵”、“我听不清楚你说什么”之类的语言,则认为听力辅助设备的当前设定不能满足用户需求,从而触发上报条件。
其中,监测听力辅助设备的当前设定是否满足用户需求通过以下方法之一实现:
(1)配置虚拟或实体的按钮,实时监测按钮有没有被触发,当监测到用户触发所述按钮时,则判断为当前设定不满足用户需求。在该方案下,配置实体的按钮时,通常需要用户主动触发,也即当用户感觉听力辅助设备当前的设定不能满足其需求时,触发所述实体的按钮。实体的按钮既可以是按键式,也可以是触摸式。而虚拟的按钮通常是配置在触控屏上的一个区域,该区域根据配置是可变换位置的,以提高其灵活性。由于虚拟的按钮是由软件配置实现的,因此除了由用户手动触发外,也可以在满足一定条件时自动触发。
(2)通过所述声音采集模块监听用户的说话和/或环境声音,识别用户常用的与听力效果相关的语音信息,在监听到预设的词语时,判断为当前设定不满足用户需求。例如用户反复说“喂,喂”、“你大点声”、“听不清楚”等,进行语义分析后,即可认为听力辅助设备的当前设定不满足用户需求。或者在环境声音中监测到预设的声音特征值,判断为此时进入了特定环境,需要将听力辅助设备切换到特定模式,此时也需要对听力辅助设备的设定进行更新。
(3)通过所述声音采集模块监听声音,在监听到超过预设声压值的声音时,判断为当前设定不满足用户需求。
在本实施例中,激活所述智能设备的语音助手的方法为:向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号。或者,也可以通过以下方法激活所述智能设备的语音助手:按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令,在本实施例中,既可通过建立蓝牙连接手机时,获取手机的具体型号,在手机App上或通过云平台的服务了解对应的语音助手协议指令,也可以通过用户引导程序验证与手机的通信协议,确保激活语音助手。
例如,当将听力辅助设备首次与智能设备建立连接时,安装于智能设备上的App启动引导程序,App可以通过智能设备的硬件或操作***获取智能设备的具体型号,并根据该智能设备的型号匹配对应的语音助手,然后建立连接,并引导用户对所建立的连接进行验证。App也可以将所支持的语音助手列表展示给用户,由用户来选择所使用的智能设备支持的语音助手,然后引导用户操作,将听力辅助设备与该语音助手建立连接,并对所建立的连接进行验证。
其中,包含有所述智能设备语音助手的唤醒词的声音信号可以由用户说出唤醒词,经听力辅助设备采集后转换成声音信号发送给智能设备。也可以通过以下方法之一实现:
在所述听力辅助设备中预置存储包含有所述智能设备语音助手的唤醒词的音频数据,在需要激活语音助手时,读取包含有语音助手的唤醒词的音频数据并播放发送给所述智能设备。为了可以适用不同的智能设备,可以在听力辅助设备中预置存储多个包含有所述智能设备语音助手的唤醒词的音频数据,在需要激活语音助手时,依次读取包含有语音助手的唤醒词的音频数据并播放发送给所述智能设备,直到收到所述智能设备的反馈。例如,在听力辅助设备中预置存储包含有“小爱同学”、“小度小度”、“Hey, Siri”等词语的音频数据,在需要激活语音助手时,依次读取该些音频数据并播放发送给所述智能设备,直到收到智能设备上语音助手的反馈。例如当听力辅助设备连接到小米手机时,第一次读取并播放包含有“小爱同学”的音频数据发送到手机时,即可以收到反馈;而当听力辅助设备连接到苹果公司的iPhone手机时,在读取并播放包含有“小爱同学”、“小度小度”的音频数据发送到手机时,不会收到反馈;而当读取到包含“Hey, Siri”的音频数据并播放时,即可以收到反馈。
另外,也可以在将所述听力辅助设备连接到智能设备时,从所述智能设备获取对应的语音助手信息,在需要激活语音助手时根据所述语音助手信息选择对应的唤醒词并发送给所述智能设备。例如,当将听力辅助设备连接到苹果公司的iPhone手机时,听力辅助设备从iPhone手机处获取到与之连接是苹果智能设备,则听力辅助设备将包含“Hey, Siri”的音频数据设为第一读取文件。这样,在需要激活语音助手时就可以直接读取包含“Hey,Siri”的音频数据并播放,从而唤醒iPhone手机的Siri。
当然,也可以通过语音合成技术来合成包含有语音助手唤醒词的声音信号并发送给智能设备。
为了减少对用户的干扰,可以只将包含有所述智能设备语音助手的唤醒词的声音信号发送到所述智能设备,而不通过所述发声模块向用户播放。同样,对于智能设备语音助手的反馈声音,听力辅助设备也只进行接收和识别而不播放出来。也就是用户听不到听力辅助设备向智能设备发出的此类唤醒语音助手的语音指令,也听不到手机语音助手激活后的反馈语音。
也可以按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令,智能设备自动打开语音助手。
在本实施例中,向所述云服务平台发送的设定更新请求中包含有用户指令、本地采集的声音特征值、噪音特征值、本地各路声音采样数据其中之一或任意组合。
向所述云服务平台发送的更新请求可以以声音信号作为载体,即将更新请求转换为声音信号文件发送到智能设备,再由智能设备的语音助手发送到云服务平台。为了不对用户造成干扰,所述听力辅助设备不通过所述发声模块向用户播放更新请求的声音信号。
具体地,以耳机形式的听力辅助设备为例。当监测到当前设定不能满足用户需求时,耳机通过通信协议,激活“小爱同学”;或耳机驱动耳机内置的信号处理器,向手机发送“小爱同学”语音指令,同时不回放该语音指令给耳机的扬声器部分。此时,手机预置的“小爱同学”语音助手被激活,手机反馈发出声音“在呢在呢”,该反馈声通常在耳机向手机发送语音指令后的一段时间内(如5秒钟)发出,耳机内置的信号处理器将自动屏蔽“在呢在呢”的语音反馈给扬声器,也就是用户不会听到手机语音助手提供的反馈。信号处理器在收到来自手机语音助手的“在呢在呢”的反馈后,发送连接服务器的语音指令,该语音指令为云服务平台在小爱同学语音助手平台所注册的启动服务的语音指令(一个类似的例子,是用户说:“我要听音乐”,就连接到了小爱同学语音助手平台上注册的播放音乐的云服务器),如“智能助听”。
此时语音助手小爱同学可返回“正在为你寻找智能助听内容”之类的反馈语音,该反馈声通常在耳机向手机发送语音指令后的一段时间内(如5秒钟)发出,耳机内置的信号处理器将自动屏蔽“正在为你寻找智能助听内容”的语音反馈给扬声器,也就是用户不会听到手机语音助手提供的反馈。信号处理器在收到来自“正在为你寻找智能助听内容”的反馈后,将之前一段时间,或现场采样到的用户的语音信息、周围环境的声音信息特征值或声音信息,通过语音助手发送到云服务平台。
云服务平台接收到听力辅助设备发送的设定更新请求后,根据请求中包含的用户指令、本地采集的声音特征值、噪音特征值、本地各路声音采样数据等信息,选择适用的助听或辅听配置、算法等信息和/或服务信息,生成设定更新信息发送到智能设备,再由智能设备发送给听力辅助设备。
云服务平台的核心功能在于通过各语音助手平台,获取耳机通过智能手机或直接上报给云服务平台的用户语音指令,或耳机在本地采集的声音特征值或噪音特征值,或耳机在本地采集的本地各路声音采样数据,并根据获取的信息,推送建议的指令给耳机,包括不同的助听算法、动态压缩算法、环境降噪算法等,这些算法可以是独立的算法,也可以是算法间的组合。
为了可以通过智能设备的语音助手实现云服务平台与听力辅助设备的连接,提高易用性,云服务平台所生成的设定更新信息以声音信号作为载体。也就是说,将设定更新信息转换成声音信号,其中一种可行的方案是:用高频声音表示二进制的0,用低频声音表示二进制的1,这样就可以将二进制的设定更新信息转换成由高频和低频组成的声音文件。云服务平台将该声音文件发送给智能设备的语音助手,语音助手再将该声音文件播放,转换成声音传递给听力辅助设备接收到该声音后,将高频声音解析为二进制的0,将低频声音解析为二进制的1,从而将声音信号还原成二进制的设定更新信息,根据设定更新信息在本地执行指令、进行配置、替代算法或对用户进行服务。在其他实施例中,也可以采用其他方式由声音信号承载设定更新信息。
优选地,所述声音信号使用人听力范围或听力辅助设备播放频段范围之外的频率,这样,当听力辅助设备接收到声音信号并解析更新设定时,用户不会听到该段音频,避免对用户造成干扰。当然,也可以采用由听力辅助设备屏蔽该段音频的方式来避免对用户的干扰,此时声音信号也可以使用人听力范围或听力辅助设备播放频段范围之内的频率。
当然,在其他实施例中,为了让用户知道听力辅助设备正在进行更新,可以为用户播放提示音。提示音既可以是语言提示,也可以是特定的声音,例如“嘟、嘟”声等。
当智能设备上同时存在多个语音助手(例如同时存在小爱同学和Alexa语音助手)时,在通过其中一个语音助手(例如小爱同学)完成交互暂时结束或出现中断后,还可以通过其他语音助手(例如Alexa语音助手)再执行一遍交互过程,这样可以提高服务健壮度的效果(例如用户在交互过程中,小爱同学语音服务器和云服务器之间的网络出现不稳定的情况)。另外,由于云服务平台可以从多个语音助手接收到来自同样耳机-手机组合的上报和反馈,云服务平台可以进行综合比对,推送最适合用户当前使用的算法或算法组合。
上述流程可以随着用户的使用不断优化,如用户每次表达听不清楚时,检查环境声音,提供不同的算法或算法组合,并通过用户的反馈历史完成用户使用习惯的自适应。
另外,本发明的听力辅助设备还可以在检测到用户处于异常状态时,自动连接手机的语音助手云平台,向语音助手云平台发送异常信息,以获得远程帮助。即听力辅助设备还可以携带其他健康类传感器设备,例如心率传感器、血压传感器、体温传感器、陀螺仪等,因此上述的触发机制,还可以增加传感器携带的信息,对用户的情况进行更加准确地判断。甚至在一些极端情况下,可以触发呼救机制。如检测到用户的心率、血压、体温等身体特征值在不正常的情况下,或者通过陀螺仪检测到用户跌倒的情况下,或者用户自言自语或者和别人提到“我不太舒服”、“我心脏难受”、“有点喘不过气来”之类的信息,或者监测到环境中出现预设的声音特征值时,例如出现长时间的救护车的声音等特殊的声音信息,也可以采用上述方式,通过语音服务,触发呼救机制,呼叫医疗单位或用户预设的紧急联系人,协助用户解决问题。
同理,本发明的听力辅助设备的设定方法的一实施例,包括:
将听力辅助设备与已接入到互联网的智能设备连接;
监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;
通过所述智能设备的语音助手向云服务平台发送设定更新请求;
所述云服务平台根据所述设定请求发送设定更新信息给所述听力辅助设备;
所述听力辅助设备根据所述设定更新信息更新设定。
其中,监测听力辅助设备的当前设定是否满足用户需求通过以下方法之一实现:
配置虚拟或实体的按钮,若监测到用户触发所述按钮,则判断为当前设定不满足用户需求;
通过所述声音采集模块监听用户的说话和/或环境声音,在监听到预设的词语或者预设的声音特征值时,判断为当前设定不满足用户需求;
通过所述声音采集模块监听声音,在监听到超过一预设声压值的声音时,判断为当前设定不满足用户需求。
而激活所述智能设备的语音助手的方法为:向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号;或者按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令。优选地,向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号通过以下方法之一实现:
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在需要激活语音助手时依次读取包含语音助手唤醒词的音频数据播放并发送给所述智能设备,直到收到所述智能设备的反馈;
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在将所述听力辅助设备连接到智能设备时,从所述智能设备获取对应的语音助手信息,在需要激活语音助手时根据所述语音助手信息选择包含对应语音助手唤醒词的音频数据并发送给所述智能设备。
进一步优选地,所述包含有所述智能设备语音助手的唤醒词的声音信号只发送到所述智能设备而不向用户播放。
其中,向所述云服务平台发送的设定更新请求中包含有用户指令、本地采集的声音特征值、噪音特征值、本地各路声音采样数据其中之一或任意组合。由云服务平台所生成的设定更新信息以声音信号作为载体,该声音信号优选使用人听力范围或听力辅助设备播放频段范围之外的频率。听力辅助设备接收到所述声音信号后,从所述声音信号中解析出设定更新信息,而不播放所述声音信号。所述设定更新信息包括配置信息、算法信息和服务信息其中之一或任意组合。
此外,本发明还可以同时监测用户的健康信息,在监测到用户的身体健康异常或者监测到用户说出预设的与用户身体异常相关的词语时,或者监测到环境声音中出现预设的声音特征值时,通过所述语音助手向所述智能设备和/或所述云服务平台发送报警信号。
以上所述实施例仅是为充分说明本发明而所举的较佳的实施例,本发明的保护范围不限于此。本技术领域的技术人员在本发明基础上所作的等同替代或变换,均在本发明的保护范围之内。本发明的保护范围以权利要求书为准。
Claims (10)
1.一种听力辅助设备,其特征在于,包括声音采集模块、发声模块和用于与智能设备连接的连接模块,以及分别与所述声音采集模块、发声模块和连接模块耦接的信号处理模块,所述信号处理模块被配置为可执行以下步骤:
监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;
通过所述智能设备的语音助手向云服务平台发送设定更新请求;
接收所述云服务平台发送的设定更新信息,并根据所述设定更新信息更新设定。
2.如权利要求1所述的听力辅助设备,其特征在于,监测听力辅助设备的当前设定是否满足用户需求通过以下方法之一实现:
配置虚拟或实体的按钮,若监测到用户触发所述按钮,则判断为当前设定不满足用户需求;
通过所述声音采集模块监听用户的说话和/或环境声音,在监听到预设的词语或者预设的声音特征值时,判断为当前设定不满足用户需求;
通过所述声音采集模块监听声音,在监听到超过预设声压值的声音时,判断为当前设定不满足用户需求。
3.如权利要求1所述的听力辅助设备,其特征在于,激活所述智能设备的语音助手的方法包括:
向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号;或者,
按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令。
4.如权利要求3所述的听力辅助设备,其特征在于,向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号通过以下方法之一实现:
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在需要激活语音助手时依次读取包含语音助手唤醒词的音频数据播放并发送给所述智能设备,直到收到所述智能设备的反馈;
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在将所述听力辅助设备连接到智能设备时,从所述智能设备获取对应的语音助手信息,在需要激活语音助手时根据所述语音助手信息选择包含对应语音助手唤醒词的音频数据并发送给所述智能设备。
5.如权利要求3或4所述的听力辅助设备,其特征在于,所述包含有所述智能设备语音助手的唤醒词的声音信号只发送到所述智能设备而不通过所述发声模块向用户播放。
6.一种听力辅助设备的设定方法,其特征在于,包括:
将听力辅助设备与已接入到互联网的智能设备连接;
监测听力辅助设备的当前设定是否满足用户需求,若否,激活所述智能设备的语音助手;
通过所述智能设备的语音助手向云服务平台发送设定更新请求;
所述云服务平台根据所述设定请求发送设定更新信息给所述听力辅助设备;
所述听力辅助设备根据所述设定更新信息更新设定。
7.如权利要求6所述的听力辅助设备的设定方法,其特征在于,监测听力辅助设备的当前设定是否满足用户需求通过以下方法之一实现:
配置虚拟或实体的按钮,若监测到用户触发所述按钮,则判断为当前设定不满足用户需求;
通过所述声音采集模块监听用户的说话和/或环境声音,在监听到预设的词语或者预设的声音特征值时,判断为当前设定不满足用户需求;
通过所述声音采集模块监听声音,在监听到超过预设声压值的声音时,判断为当前设定不满足用户需求。
8.如权利要求6所述的听力辅助设备的设定方法,其特征在于,激活所述智能设备的语音助手的方法包括:
向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号;或者,
按照与所述智能设备约定的通信协议,向智能设备发送激活语音助手的协议指令。
9.如权利要求6所述的听力辅助设备的设定方法,其特征在于,向所述智能设备发送包含有所述智能设备语音助手的唤醒词的声音信号通过以下方法之一实现:
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在需要激活语音助手时依次读取包含语音助手唤醒词的音频数据播放并发送给所述智能设备,直到收到所述智能设备的反馈;
在所述听力辅助设备中预置多个包含语音助手唤醒词的音频数据,在将所述听力辅助设备连接到智能设备时,从所述智能设备获取对应的语音助手信息,在需要激活语音助手时根据所述语音助手信息选择包含对应语音助手唤醒词的音频数据并发送给所述智能设备。
10.如权利要求8或9所述的听力辅助设备的设定方法,其特征在于,所述包含有所述智能设备语音助手的唤醒词的声音信号只发送到所述智能设备而不向用户播放。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010323344.1A CN111462747B (zh) | 2020-04-22 | 2020-04-22 | 一种听力辅助设备及其设定方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202010323344.1A CN111462747B (zh) | 2020-04-22 | 2020-04-22 | 一种听力辅助设备及其设定方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN111462747A true CN111462747A (zh) | 2020-07-28 |
CN111462747B CN111462747B (zh) | 2024-04-05 |
Family
ID=71678602
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202010323344.1A Active CN111462747B (zh) | 2020-04-22 | 2020-04-22 | 一种听力辅助设备及其设定方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN111462747B (zh) |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104023302A (zh) * | 2014-05-19 | 2014-09-03 | 周电 | 可编程数字助听***及其方法 |
CN206210062U (zh) * | 2016-11-30 | 2017-05-31 | 赵紫瑜 | 一种老人摔倒呼救智能手环 |
CN106921926A (zh) * | 2017-04-17 | 2017-07-04 | 西安音悦电子科技有限公司 | 一种高效自助验配助听器*** |
CN107134279A (zh) * | 2017-06-30 | 2017-09-05 | 百度在线网络技术(北京)有限公司 | 一种语音唤醒方法、装置、终端和存储介质 |
CN108712566A (zh) * | 2018-04-27 | 2018-10-26 | 维沃移动通信有限公司 | 一种语音助手唤醒方法及移动终端 |
CN108810175A (zh) * | 2018-08-14 | 2018-11-13 | 陕西科技大学 | 一种老年人生活护理智能交互***及其操作方法 |
CN110322880A (zh) * | 2018-03-28 | 2019-10-11 | 上海博泰悦臻网络技术服务有限公司 | 车载终端设备以及唤醒其多个语音交互程序的方法 |
WO2019227370A1 (zh) * | 2018-05-31 | 2019-12-05 | Dong Xuezhang | 一种多语音助手控制方法、装置、***及计算机可读存储介质 |
CN110650421A (zh) * | 2018-06-26 | 2020-01-03 | 深圳市智汇声科技有限公司 | 一种听力辅助***及其主机和从机 |
CN110853645A (zh) * | 2019-12-02 | 2020-02-28 | 三星电子(中国)研发中心 | 一种识别语音命令的方法及装置 |
-
2020
- 2020-04-22 CN CN202010323344.1A patent/CN111462747B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104023302A (zh) * | 2014-05-19 | 2014-09-03 | 周电 | 可编程数字助听***及其方法 |
CN206210062U (zh) * | 2016-11-30 | 2017-05-31 | 赵紫瑜 | 一种老人摔倒呼救智能手环 |
CN106921926A (zh) * | 2017-04-17 | 2017-07-04 | 西安音悦电子科技有限公司 | 一种高效自助验配助听器*** |
CN107134279A (zh) * | 2017-06-30 | 2017-09-05 | 百度在线网络技术(北京)有限公司 | 一种语音唤醒方法、装置、终端和存储介质 |
CN110322880A (zh) * | 2018-03-28 | 2019-10-11 | 上海博泰悦臻网络技术服务有限公司 | 车载终端设备以及唤醒其多个语音交互程序的方法 |
CN108712566A (zh) * | 2018-04-27 | 2018-10-26 | 维沃移动通信有限公司 | 一种语音助手唤醒方法及移动终端 |
WO2019227370A1 (zh) * | 2018-05-31 | 2019-12-05 | Dong Xuezhang | 一种多语音助手控制方法、装置、***及计算机可读存储介质 |
CN110650421A (zh) * | 2018-06-26 | 2020-01-03 | 深圳市智汇声科技有限公司 | 一种听力辅助***及其主机和从机 |
CN108810175A (zh) * | 2018-08-14 | 2018-11-13 | 陕西科技大学 | 一种老年人生活护理智能交互***及其操作方法 |
CN110853645A (zh) * | 2019-12-02 | 2020-02-28 | 三星电子(中国)研发中心 | 一种识别语音命令的方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN111462747B (zh) | 2024-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN111447539B (zh) | 一种用于听力耳机的验配方法和装置 | |
US11251763B2 (en) | Audio signal adjustment method, storage medium, and terminal | |
EP3711306B1 (en) | Interactive system for hearing devices | |
EP3160162B1 (en) | Hearing aid device for hands free communication | |
US20130343584A1 (en) | Hearing assist device with external operational support | |
US20200128317A1 (en) | Throat microphone system and method | |
WO2012151997A1 (zh) | 用于移动终端的通话语音记录方法、装置及移动终端 | |
US11356783B2 (en) | Hearing device comprising an own voice processor | |
CN106416299A (zh) | 具有用于控制至少一个助听器的操作的应用软件的个人通信设备 | |
CN113015073A (zh) | 用于调整听力仪器的方法和相关的听力*** | |
CN112911441A (zh) | 降噪方法、装置、音频设备和计算机可读存储介质 | |
US20240221757A1 (en) | Audio signal processing for automatic transcription using ear-wearable device | |
CN108810778B (zh) | 用于运行听力设备的方法和听力设备 | |
EP4132010A2 (en) | A hearing system and a method for personalizing a hearing aid | |
US11589173B2 (en) | Hearing aid comprising a record and replay function | |
US20220295191A1 (en) | Hearing aid determining talkers of interest | |
JP4114392B2 (ja) | 検査センター装置、端末装置、聴力補償方法、聴力補償方法プログラム記録媒体、聴力補償方法のプログラム | |
CN113422866A (zh) | 音量调节方法、装置、存储介质及电子设备 | |
EP2876902A1 (en) | Adjustable hearing aid device | |
JP2002223500A (ja) | モバイルフィッティングシステム | |
CN111462747A (zh) | 一种听力辅助设备及其设定方法 | |
CN107493376A (zh) | 一种铃声音量调节方法和装置 | |
CN109218875B (zh) | 具定向交谈功能的智能型耳机装置个人化***及使用方法 | |
CN113825082B (zh) | 一种用于缓解助听延迟的方法及装置 | |
KR102609206B1 (ko) | 크래들을 구비한 셀프 피팅이 가능한 보청기 시스템 및 이를 이용한 피팅 방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |