CN115460031A - 一种基于物联网的智能音响控制监管***及方法 - Google Patents

一种基于物联网的智能音响控制监管***及方法 Download PDF

Info

Publication number
CN115460031A
CN115460031A CN202211416733.4A CN202211416733A CN115460031A CN 115460031 A CN115460031 A CN 115460031A CN 202211416733 A CN202211416733 A CN 202211416733A CN 115460031 A CN115460031 A CN 115460031A
Authority
CN
China
Prior art keywords
tone
data
network
module
acquiring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202211416733.4A
Other languages
English (en)
Other versions
CN115460031B (zh
Inventor
杨宁虎
董海庄
张敏
郑承翔
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Heard & Learn Technology Co ltd
Original Assignee
Shenzhen Heard & Learn Technology Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Heard & Learn Technology Co ltd filed Critical Shenzhen Heard & Learn Technology Co ltd
Priority to CN202211416733.4A priority Critical patent/CN115460031B/zh
Publication of CN115460031A publication Critical patent/CN115460031A/zh
Application granted granted Critical
Publication of CN115460031B publication Critical patent/CN115460031B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/28Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803Home automation networks
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B31/00Predictive alarm systems characterised by extrapolation or other computation using updated historic data
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination
    • GPHYSICS
    • G16INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16YINFORMATION AND COMMUNICATION TECHNOLOGY SPECIALLY ADAPTED FOR THE INTERNET OF THINGS [IoT]
    • G16Y40/00IoT characterised by the purpose of the information processing
    • G16Y40/30Control
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • YGENERAL TAGGING OF NEW TECHNOLOGICAL DEVELOPMENTS; GENERAL TAGGING OF CROSS-SECTIONAL TECHNOLOGIES SPANNING OVER SEVERAL SECTIONS OF THE IPC; TECHNICAL SUBJECTS COVERED BY FORMER USPC CROSS-REFERENCE ART COLLECTIONS [XRACs] AND DIGESTS
    • Y02TECHNOLOGIES OR APPLICATIONS FOR MITIGATION OR ADAPTATION AGAINST CLIMATE CHANGE
    • Y02PCLIMATE CHANGE MITIGATION TECHNOLOGIES IN THE PRODUCTION OR PROCESSING OF GOODS
    • Y02P90/00Enabling technologies with a potential contribution to greenhouse gas [GHG] emissions mitigation
    • Y02P90/02Total factory control, e.g. smart factories, flexible manufacturing systems [FMS] or integrated manufacturing systems [IMS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Acoustics & Sound (AREA)
  • Computing Systems (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Multimedia (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • General Physics & Mathematics (AREA)
  • Automation & Control Theory (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Alarm Systems (AREA)

Abstract

本发明公开了一种基于物联网的智能音响控制监管***及方法,属于智能音响控制技术领域。该***包括:智能音响数据模块、音调分析模块、网络判断模块、音色匹配模块、音调预警模块。所述智能音响数据模块的输出端与所述音调分析模块的输入端相连接;所述音调分析模块的输出端与所述网络判断模块的输入端相连接;所述网络判断模块的输出端与所述音色匹配模块的输入端相连接;所述音色匹配模块的输出端与所述音调预警模块的输入端相连接。在本发明中,能够基于室内音调变化,以及音色分析,同时考虑网络数据流量,能够在保证用户隐私的前提下,精准分析出室内的情景状态,做出预警,缓和情绪,提高家庭幸福感。

Description

一种基于物联网的智能音响控制监管***及方法
技术领域
本发明涉及智能音响控制技术领域,具体为一种基于物联网的智能音响控制监管***及方法。
背景技术
智能音响作为物联网的代表产品之一,其能够实现用户与家居的智能互联,然而随着社会的发展,智能音响技术也往往能够窥探着用户的隐私,同时目前的智能音响能够实现的往往只有语音播放、暂停等功能,而其采集的用户语音数据则作为存储数据逐渐变成冗杂垃圾,加剧数据库的负担。
发明内容
本发明的目的在于提供一种基于物联网的智能音响控制监管***及方法,以解决上述背景技术中提出的问题。
为了解决上述技术问题,本发明提供如下技术方案:一种基于物联网的智能音响控制监管方法,该方法包括以下步骤:
S1、用户注册智能家居***,授权智能音响采集室内声音数据和智能家居网络数据;
S2、获取用户个性化历史数据,构建音调分析模型,生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;
S3、所述网络判断模块处于智能音响中,其连接有智能家居局域网***,获取智能家居局域网在此时的网络数据变化量;
S4、构建音调预警模型,若存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;
S5、若音色匹配结果为婴幼儿,则输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
根据上述技术方案,所述构建音调分析模型包括:
获取用户个性化历史数据,所述用户个性化历史数据包括用户输入的日常语音指令控制;
获取历史数据下用户的语音数据组,分别采集每一组语音数据组的音调高度,与用户本身对应的日常语音指令控制下的音调高度计算差值,构建数据差值组;
根据数据差值组生成音调分析模型:
Figure 305351DEST_PATH_IMAGE001
其中,
Figure 594381DEST_PATH_IMAGE002
代表用户处于情绪激动状态的概率;
Figure 478023DEST_PATH_IMAGE003
代表数据差值组中的 任一数据;
Figure 92675DEST_PATH_IMAGE004
代表参数值;
Figure 61768DEST_PATH_IMAGE005
Figure 888910DEST_PATH_IMAGE004
的转置;b指误差;
设置音调变化阈值,输入采集到的用户音调高度计算差值,输出用户处于情绪激动状态的概率,作为音调变化概率,若存在音调变化概率超出音调变化阈值,则初步判断用户处于情绪激动状态,并启动网络判断模块。
根据上述技术方案,所述构建音调预警模型包括:
获取智能家居局域网在此时的网络数据变化量;
构建网络数据变化量阈值:获取n组存在网络信息数据交互的历史网络数据变化量作为测试数据,构建预测模型,预测得出新一次的存在网络信息数据交互的历史网络数据变化量;所述存在网络信息交互指家居设备通过局域网与外界互联网形成数据传输;
构建原始数据结构列,记为集合A0={A0(1),A0(2),A0(3),……,A0(n)};
对集合A0作灰色累加生成处理,生成集合A1={A1(1),A1(2),A1(3),……,A1(n)};
满足:
Figure 892638DEST_PATH_IMAGE006
其中,
Figure 911147DEST_PATH_IMAGE007
=1,2,……,n;
Figure 570799DEST_PATH_IMAGE008
代表序号;
对集合A1以紧邻均值的方式计算,生成集合A2={A2(1),A2(2),A2(3),……,A2(n)};
满足:
Figure 326265DEST_PATH_IMAGE009
构建集合A1白化微分方程:
Figure 794287DEST_PATH_IMAGE010
其中,
Figure 609796DEST_PATH_IMAGE011
为发展系数,
Figure 428848DEST_PATH_IMAGE012
为灰作用量;
基于最小二乘法,计算得出发展系数与灰作用量的比值,代入模型求解:
Figure 253584DEST_PATH_IMAGE013
构建新一次的网络数据变化量阈值:
Figure 841691DEST_PATH_IMAGE014
其中,
Figure 562523DEST_PATH_IMAGE015
即作为新一次的网络数据变化量阈值,若存在网络数据变化量 未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;
若音色匹配结果为婴幼儿,则输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
根据上述技术方案,所述音色匹配包括:
构建采集的声音数据的音色波形曲线;获取数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线;
分别获取H个特征点,构建音色匹配模型:
Figure 382054DEST_PATH_IMAGE016
其中,
Figure 479323DEST_PATH_IMAGE017
代表采集的声音数据的音色波形曲线、
Figure 187516DEST_PATH_IMAGE018
代表数据库中预设的成人音色波 形曲线、婴幼儿音色波形曲线中的任一种;i代表特征序号;
Figure 282511DEST_PATH_IMAGE019
代表采集的声音数据的音色波 形曲线中的任一特征点;
Figure 200788DEST_PATH_IMAGE020
代表数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线 中的任一种对应的特征点;
Figure 977114DEST_PATH_IMAGE021
代表两组音色波形曲线的相似度值;
分别计算采集的声音数据的音色波形曲线与数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线任一种的相似度值;
取相似度较大的判定为对应的音色波形曲线。
一种基于物联网的智能音响控制监管***,该***包括:智能音响数据模块、音调分析模块、网络判断模块、音色匹配模块、音调预警模块;
所述智能音响数据模块用于在用户注册智能家居***后,获取用户授权信息,采集室内声音数据和智能家居网络数据;所述音调分析模块用于获取用户个性化历史数据,构建音调分析模型,生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;所述网络判断模块处于智能音响中,其连接有智能家居局域网***,用于获取智能家居局域网在此时的网络数据变化量;所述音色匹配模块用于存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;所述音调预警模块用于在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐;
所述智能音响数据模块的输出端与所述音调分析模块的输入端相连接;所述音调分析模块的输出端与所述网络判断模块的输入端相连接;所述网络判断模块的输出端与所述音色匹配模块的输入端相连接;所述音色匹配模块的输出端与所述音调预警模块的输入端相连接。
根据上述技术方案,所述智能音响数据模块包括用户授权单元、数据采集单元;
所述用户授权单元用于在用户注册智能家居***后,获取用户授权信息;所述数据采集单元用于采集室内声音数据和智能家居网络数据;
所述用户授权单元的输出端与所述数据采集单元的输入端相连接。
根据上述技术方案,所述音调分析模块包括数据存储单元、音调分析单元;
所述数据存储单元用于获取用户个性化历史数据,构建音调分析模型;所述音调分析单元用于根据音调分析模型生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;
所述数据存储单元的输出端与所述音调分析单元的输入端相连接。
根据上述技术方案,所述网络判断模块包括阈值处理单元、网络判断单元;
所述阈值处理单元,用于获取智能家居局域网的历史网络数据变化量,构建存在网络信息交互下的网络数据变化量阈值;所述网络判断单元用于获取当前的智能家居局域网的网络数据变化量,判断是否超出存在网络信息交互下的网络数据变化量阈值;
所述阈值处理单元的输出端与所述网络判断单元的输入端相连接。
根据上述技术方案,所述音色匹配模块包括指令接收单元、音色匹配单元;
所述指令接收单元用于接收判断指令,若存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;所述音色匹配单元用于匹配当前音色与数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线任一种的相似度值,选取出相似度较高的一种;
所述指令接收单元的输出端与所述音色匹配单元的输入端相连接。
根据上述技术方案,所述音调预警模块包括预警单元、控制单元;
所述预警单元用于在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;所述控制单元用于在音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
与现有技术相比,本发明所达到的有益效果是:本发明利用智能音响数据模块在用户注册智能家居***后,获取用户授权信息,采集室内声音数据和智能家居网络数据;利用音调分析模块获取用户个性化历史数据,构建音调分析模型,生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;利用网络判断模块获取智能家居局域网在此时的网络数据变化量;利用音色匹配模块在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;利用音调预警模块在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐;在本发明中,能够基于室内音调变化,以及音色分析,同时考虑网络数据流量,能够在保证用户隐私的前提下,精准分析出室内的情景状态,做出预警,缓和情绪,提高家庭幸福感。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1是本发明一种基于物联网的智能音响控制监管***及方法的流程示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,在本实施例一中,设置有一智能音响,其登录在智能家居***中,用户注册智能家居***,授权智能音响采集室内声音数据和智能家居网络数据;
获取用户个性化历史数据,构建音调分析模型,所述构建音调分析模型包括:
获取用户个性化历史数据,所述用户个性化历史数据包括用户输入的日常语音指令控制;
获取历史数据下用户的语音数据组,分别采集每一组语音数据组的音调高度,与用户本身对应的日常语音指令控制下的音调高度计算差值,构建数据差值组;
根据数据差值组生成音调分析模型:
Figure 664448DEST_PATH_IMAGE022
其中,
Figure 602448DEST_PATH_IMAGE002
代表用户处于情绪激动状态的概率;
Figure 8021DEST_PATH_IMAGE003
代表数据差值组中的 任一数据;
Figure 86574DEST_PATH_IMAGE004
代表参数值;
Figure 628413DEST_PATH_IMAGE005
Figure 2894DEST_PATH_IMAGE004
的转置;b指误差;
设置音调变化阈值,输入采集到的用户音调高度计算差值,输出用户处于情绪激动状态的概率,作为音调变化概率,若存在音调变化概率超出音调变化阈值,则初步判断用户处于情绪激动状态,并启动网络判断模块。
所述网络判断模块处于智能音响中,其连接有智能家居局域网***,获取智能家居局域网在此时的网络数据变化量;
获取智能家居局域网在此时的网络数据变化量;
构建网络数据变化量阈值:获取n组存在网络信息数据交互的历史网络数据变化量作为测试数据,构建预测模型,预测得出新一次的存在网络信息数据交互的历史网络数据变化量;所述存在网络信息交互指家居设备通过局域网与外界互联网形成数据传输;
例如,在一个家庭中,其智能家居通常是以固定的网络数据传输智能家居服务器平台,如果存在与外界互联网进行交互,一般是用户手机或者电脑、网络电视机等等通过局域网获取外界数据,例如通过电脑观看电影,那么上传以及下载的数据量就会远高于平时的固定网络数据;以这样的方式进行识别判断,在当前出现情绪激动的音调时,是否存在大量的网络传输数据量,进而判断得出是否是由于其它设备引发的虚假噪声,例如影视剧的争吵、哭喊等,提高***判断精度,避免侵犯用户隐私。
构建原始数据结构列,记为集合A0={A0(1),A0(2),A0(3),……,A0(n)};
对集合A0作灰色累加生成处理,生成集合A1={A1(1),A1(2),A1(3),……,A1(n)};
满足:
Figure 833447DEST_PATH_IMAGE006
其中,
Figure 76209DEST_PATH_IMAGE007
=1,2,……,n;
Figure 347922DEST_PATH_IMAGE008
代表序号;
对集合A1以紧邻均值的方式计算,生成集合A2={A2(1),A2(2),A2(3),……,A2(n)};
满足:
Figure 17938DEST_PATH_IMAGE023
构建集合A1白化微分方程:
Figure 7890DEST_PATH_IMAGE024
其中,
Figure 54344DEST_PATH_IMAGE011
为发展系数,
Figure 947607DEST_PATH_IMAGE012
为灰作用量;
基于最小二乘法,计算得出发展系数与灰作用量的比值,代入模型求解:
Figure 788524DEST_PATH_IMAGE013
构建新一次的网络数据变化量阈值:
Figure 265773DEST_PATH_IMAGE025
其中,
Figure 850338DEST_PATH_IMAGE015
即作为新一次的网络数据变化量阈值,若存在网络数据变化量 未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;
若音色匹配结果为婴幼儿,则输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
所述音色匹配包括:
构建采集的声音数据的音色波形曲线;获取数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线;
分别获取H个特征点,构建音色匹配模型:
Figure 424539DEST_PATH_IMAGE016
其中,
Figure 311723DEST_PATH_IMAGE017
代表采集的声音数据的音色波形曲线、
Figure 135323DEST_PATH_IMAGE018
代表数据库中预设的成人音色波 形曲线、婴幼儿音色波形曲线中的任一种;i代表特征序号;
Figure 398945DEST_PATH_IMAGE019
代表采集的声音数据的音色波 形曲线中的任一特征点;
Figure 889969DEST_PATH_IMAGE020
代表数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线 中的任一种对应的特征点;
Figure 446590DEST_PATH_IMAGE021
代表两组音色波形曲线的相似度值;
分别计算采集的声音数据的音色波形曲线与数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线任一种的相似度值;
取相似度较大的判定为对应的音色波形曲线。
在现有技术中,虽然每个人的音色均是不同的,但是精准判断每个人的音色匹配需要大量的历史数据支撑,那么就会导致,用户在使用过程中,即便录入多种声音,依然很难满足准确的音色判断,而本申请简化流程,不需要复杂的精度运算,只需要区分成人与婴幼儿即可,适配性高且效果好,婴幼儿的音调变化通常是由于哭闹引起,那么及时将这种情况预警到管理员端口,提醒及时查看即可;而成人的音调变化则基本为情绪变化引起,例如吵架、大喜大悲等情况,那么在此时会根据***预设的情况,智能音响播放缓和的音乐,打乱用户当前的异常情绪节奏,例如在吵架中,经研究表明,突然的声响会直接打乱人的思绪,短暂的音乐就可以引起吵架的瞬间终止,致使二人逐渐平复情绪,有利于家庭和谐沟通。
在本实施例二中,提供一种基于物联网的智能音响控制监管***,该***包括:智能音响数据模块、音调分析模块、网络判断模块、音色匹配模块、音调预警模块;
所述智能音响数据模块用于在用户注册智能家居***后,获取用户授权信息,采集室内声音数据和智能家居网络数据;所述音调分析模块用于获取用户个性化历史数据,构建音调分析模型,生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;所述网络判断模块处于智能音响中,其连接有智能家居局域网***,用于获取智能家居局域网在此时的网络数据变化量;所述音色匹配模块用于存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;所述音调预警模块用于在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐;
所述智能音响数据模块的输出端与所述音调分析模块的输入端相连接;所述音调分析模块的输出端与所述网络判断模块的输入端相连接;所述网络判断模块的输出端与所述音色匹配模块的输入端相连接;所述音色匹配模块的输出端与所述音调预警模块的输入端相连接。
所述智能音响数据模块包括用户授权单元、数据采集单元;
所述用户授权单元用于在用户注册智能家居***后,获取用户授权信息;所述数据采集单元用于采集室内声音数据和智能家居网络数据;
所述用户授权单元的输出端与所述数据采集单元的输入端相连接。
所述音调分析模块包括数据存储单元、音调分析单元;
所述数据存储单元用于获取用户个性化历史数据,构建音调分析模型;所述音调分析单元用于根据音调分析模型生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;
所述数据存储单元的输出端与所述音调分析单元的输入端相连接。
所述网络判断模块包括阈值处理单元、网络判断单元;
所述阈值处理单元,用于获取智能家居局域网的历史网络数据变化量,构建存在网络信息交互下的网络数据变化量阈值;所述网络判断单元用于获取当前的智能家居局域网的网络数据变化量,判断是否超出存在网络信息交互下的网络数据变化量阈值;
所述阈值处理单元的输出端与所述网络判断单元的输入端相连接。
所述音色匹配模块包括指令接收单元、音色匹配单元;
所述指令接收单元用于接收判断指令,若存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;所述音色匹配单元用于匹配当前音色与数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线任一种的相似度值,选取出相似度较高的一种;
所述指令接收单元的输出端与所述音色匹配单元的输入端相连接。
所述音调预警模块包括预警单元、控制单元;
所述预警单元用于在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;所述控制单元用于在音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
需要说明的是,在本文中,诸如第一和第二等之类的关系术语仅仅用来将一个实体或者操作与另一个实体或操作区分开来,而不一定要求或者暗示这些实体或操作之间存在任何这种实际的关系或者顺序。而且,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、物品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、物品或者设备所固有的要素。
最后应说明的是:以上所述仅为本发明的优选实施例而已,并不用于限制本发明,尽管参照前述实施例对本发明进行了详细的说明,对于本领域的技术人员来说,其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种基于物联网的智能音响控制监管方法,其特征在于:该方法包括以下步骤:
S1、用户注册智能家居***,授权智能音响采集室内声音数据和智能家居网络数据;
S2、获取用户个性化历史数据,构建音调分析模型,生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;
S3、所述网络判断模块处于智能音响中,其连接有智能家居局域网***,获取智能家居局域网在此时的网络数据变化量;
S4、构建音调预警模型,若存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;
S5、若音色匹配结果为婴幼儿,则输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
2.根据权利要求1所述的一种基于物联网的智能音响控制监管方法,其特征在于:所述构建音调分析模型包括:
获取用户个性化历史数据,所述用户个性化历史数据包括用户输入的日常语音指令控制;
获取历史数据下用户的语音数据组,分别采集每一组语音数据组的音调高度,与用户本身对应的日常语音指令控制下的音调高度计算差值,构建数据差值组;
根据数据差值组生成音调分析模型:
Figure 223583DEST_PATH_IMAGE001
其中,
Figure 343986DEST_PATH_IMAGE002
代表用户处于情绪激动状态的概率;
Figure 858144DEST_PATH_IMAGE003
代表数据差值组中的任一 数据;
Figure 958081DEST_PATH_IMAGE004
代表参数值;
Figure 178977DEST_PATH_IMAGE005
Figure 532598DEST_PATH_IMAGE004
的转置;b指误差;
设置音调变化阈值,输入采集到的用户音调高度计算差值,输出用户处于情绪激动状态的概率,作为音调变化概率,若存在音调变化概率超出音调变化阈值,则初步判断用户处于情绪激动状态,并启动网络判断模块。
3.根据权利要求2所述的一种基于物联网的智能音响控制监管方法,其特征在于:所述构建音调预警模型包括:
获取智能家居局域网在此时的网络数据变化量;
构建网络数据变化量阈值:获取n组存在网络信息数据交互的历史网络数据变化量作为测试数据,构建预测模型,预测得出新一次的存在网络信息数据交互的历史网络数据变化量;所述存在网络信息交互指家居设备通过局域网与外界互联网形成数据传输;
构建原始数据结构列,记为集合A0={A0(1),A0(2),A0(3),……,A0(n)};
对集合A0作灰色累加生成处理,生成集合A1={A1(1),A1(2),A1(3),……,A1(n)};
满足:
Figure 206156DEST_PATH_IMAGE006
其中,
Figure 936215DEST_PATH_IMAGE007
=1,2,……,n;
Figure 11618DEST_PATH_IMAGE008
代表序号;
对集合A1以紧邻均值的方式计算,生成集合A2={A2(1),A2(2),A2(3),……,A2(n)};
满足:
Figure 536141DEST_PATH_IMAGE009
构建集合A1白化微分方程:
Figure 24891DEST_PATH_IMAGE010
其中,
Figure 666962DEST_PATH_IMAGE011
为发展系数,
Figure 721506DEST_PATH_IMAGE012
为灰作用量;
基于最小二乘法,计算得出发展系数与灰作用量的比值,代入模型求解:
Figure 823454DEST_PATH_IMAGE013
构建新一次的网络数据变化量阈值:
Figure 596238DEST_PATH_IMAGE014
其中,
Figure 277886DEST_PATH_IMAGE015
即作为新一次的网络数据变化量阈值,若存在网络数据变化量未超 出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;
若音色匹配结果为婴幼儿,则输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
4.根据权利要求3所述的一种基于物联网的智能音响控制监管方法,其特征在于:所述音色匹配包括:
构建采集的声音数据的音色波形曲线;获取数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线;
分别获取H个特征点,构建音色匹配模型:
Figure 655778DEST_PATH_IMAGE016
其中,
Figure 522103DEST_PATH_IMAGE017
代表采集的声音数据的音色波形曲线、
Figure 657549DEST_PATH_IMAGE018
代表数据库中预设的成人音色波形曲 线、婴幼儿音色波形曲线中的任一种;i代表特征序号;
Figure 533101DEST_PATH_IMAGE019
代表采集的声音数据的音色波形曲 线中的任一特征点;
Figure 939068DEST_PATH_IMAGE020
代表数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线中的 任一种对应的特征点;
Figure 241874DEST_PATH_IMAGE021
代表两组音色波形曲线的相似度值;
分别计算采集的声音数据的音色波形曲线与数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线任一种的相似度值;
取相似度较大的判定为对应的音色波形曲线。
5.一种基于物联网的智能音响控制监管***,其特征在于:该***包括:智能音响数据模块、音调分析模块、网络判断模块、音色匹配模块、音调预警模块;
所述智能音响数据模块用于在用户注册智能家居***后,获取用户授权信息,采集室内声音数据和智能家居网络数据;所述音调分析模块用于获取用户个性化历史数据,构建音调分析模型,生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;所述网络判断模块处于智能音响中,其连接有智能家居局域网***,用于获取智能家居局域网在此时的网络数据变化量;所述音色匹配模块用于存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;所述音调预警模块用于在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;若音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐;
所述智能音响数据模块的输出端与所述音调分析模块的输入端相连接;所述音调分析模块的输出端与所述网络判断模块的输入端相连接;所述网络判断模块的输出端与所述音色匹配模块的输入端相连接;所述音色匹配模块的输出端与所述音调预警模块的输入端相连接。
6.根据权利要求5所述的一种基于物联网的智能音响控制监管***,其特征在于:所述智能音响数据模块包括用户授权单元、数据采集单元;
所述用户授权单元用于在用户注册智能家居***后,获取用户授权信息;所述数据采集单元用于采集室内声音数据和智能家居网络数据;
所述用户授权单元的输出端与所述数据采集单元的输入端相连接。
7.根据权利要求5所述的一种基于物联网的智能音响控制监管***,其特征在于:所述音调分析模块包括数据存储单元、音调分析单元;
所述数据存储单元用于获取用户个性化历史数据,构建音调分析模型;所述音调分析单元用于根据音调分析模型生成音调变化值,在音调变化值超出音调变化阈值时,启动网络判断模块;
所述数据存储单元的输出端与所述音调分析单元的输入端相连接。
8.根据权利要求5所述的一种基于物联网的智能音响控制监管***,其特征在于:所述网络判断模块包括阈值处理单元、网络判断单元;
所述阈值处理单元,用于获取智能家居局域网的历史网络数据变化量,构建存在网络信息交互下的网络数据变化量阈值;所述网络判断单元用于获取当前的智能家居局域网的网络数据变化量,判断是否超出存在网络信息交互下的网络数据变化量阈值;
所述阈值处理单元的输出端与所述网络判断单元的输入端相连接。
9.根据权利要求5所述的一种基于物联网的智能音响控制监管***,其特征在于:所述音色匹配模块包括指令接收单元、音色匹配单元;
所述指令接收单元用于接收判断指令,若存在网络数据变化量未超出网络数据变化量阈值,获取采集的声音数据,进行音色匹配;所述音色匹配单元用于匹配当前音色与数据库中预设的成人音色波形曲线、婴幼儿音色波形曲线任一种的相似度值,选取出相似度较高的一种;
所述指令接收单元的输出端与所述音色匹配单元的输入端相连接。
10.根据权利要求5所述的一种基于物联网的智能音响控制监管***,其特征在于:所述音调预警模块包括预警单元、控制单元;
所述预警单元用于在音色匹配结果为婴幼儿时,输出预警信息至管理员端口;所述控制单元用于在音色匹配结果为成人,则输出预警信息至智能音响播放控制端口,发出指令播放***预设音乐。
CN202211416733.4A 2022-11-14 2022-11-14 一种基于物联网的智能音响控制监管***及方法 Active CN115460031B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202211416733.4A CN115460031B (zh) 2022-11-14 2022-11-14 一种基于物联网的智能音响控制监管***及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202211416733.4A CN115460031B (zh) 2022-11-14 2022-11-14 一种基于物联网的智能音响控制监管***及方法

Publications (2)

Publication Number Publication Date
CN115460031A true CN115460031A (zh) 2022-12-09
CN115460031B CN115460031B (zh) 2023-04-11

Family

ID=84295736

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202211416733.4A Active CN115460031B (zh) 2022-11-14 2022-11-14 一种基于物联网的智能音响控制监管***及方法

Country Status (1)

Country Link
CN (1) CN115460031B (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116385234A (zh) * 2022-12-30 2023-07-04 青岛交通科技信息有限公司 一种基于物联网的车载智能终端管理***及方法
CN116520755A (zh) * 2023-06-29 2023-08-01 深圳东原电子有限公司 一种音响的自动化产线监测预警方法及***

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090313019A1 (en) * 2006-06-23 2009-12-17 Yumiko Kato Emotion recognition apparatus
US20110088534A1 (en) * 2009-10-15 2011-04-21 Yamaha Corporation Tone signal processing apparatus and method
CN105280187A (zh) * 2015-11-13 2016-01-27 上海斐讯数据通信技术有限公司 一种家庭情绪管理的装置和方法
CN105609110A (zh) * 2016-01-25 2016-05-25 上海斐讯数据通信技术有限公司 一种应用在网络设备中的语音识别方法及***
CN109104667A (zh) * 2018-06-25 2018-12-28 福来宝电子(深圳)有限公司 一种智能音响的控制方法、***及智能音响
CN111402925A (zh) * 2020-03-12 2020-07-10 北京百度网讯科技有限公司 语音调节的方法、装置、电子设备、车载***和可读介质
CN113467258A (zh) * 2020-04-24 2021-10-01 海信集团有限公司 一种智能监控方法及其设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090313019A1 (en) * 2006-06-23 2009-12-17 Yumiko Kato Emotion recognition apparatus
US20110088534A1 (en) * 2009-10-15 2011-04-21 Yamaha Corporation Tone signal processing apparatus and method
CN105280187A (zh) * 2015-11-13 2016-01-27 上海斐讯数据通信技术有限公司 一种家庭情绪管理的装置和方法
CN105609110A (zh) * 2016-01-25 2016-05-25 上海斐讯数据通信技术有限公司 一种应用在网络设备中的语音识别方法及***
CN109104667A (zh) * 2018-06-25 2018-12-28 福来宝电子(深圳)有限公司 一种智能音响的控制方法、***及智能音响
CN111402925A (zh) * 2020-03-12 2020-07-10 北京百度网讯科技有限公司 语音调节的方法、装置、电子设备、车载***和可读介质
CN113467258A (zh) * 2020-04-24 2021-10-01 海信集团有限公司 一种智能监控方法及其设备

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116385234A (zh) * 2022-12-30 2023-07-04 青岛交通科技信息有限公司 一种基于物联网的车载智能终端管理***及方法
CN116385234B (zh) * 2022-12-30 2023-09-19 青岛交通科技信息有限公司 一种基于物联网的车载智能终端管理***及方法
CN116520755A (zh) * 2023-06-29 2023-08-01 深圳东原电子有限公司 一种音响的自动化产线监测预警方法及***
CN116520755B (zh) * 2023-06-29 2023-09-26 深圳东原电子有限公司 一种音响的自动化产线监测预警方法及***

Also Published As

Publication number Publication date
CN115460031B (zh) 2023-04-11

Similar Documents

Publication Publication Date Title
CN115460031B (zh) 一种基于物联网的智能音响控制监管***及方法
CN105895087B (zh) 一种语音识别方法及装置
JP6967059B2 (ja) 映像を生成するための方法、装置、サーバ、コンピュータ可読記憶媒体およびコンピュータプログラム
CN112328849B (zh) 用户画像的构建方法、基于用户画像的对话方法及装置
CN110505491A (zh) 一种直播的处理方法、装置、电子设备及存储介质
Woźniak et al. Intelligent home systems for ubiquitous user support by using neural networks and rule-based approach
US20090144225A1 (en) Information processing device, information processing terminal, information processing method, and program
US10524005B2 (en) Facilitating television based interaction with social networking tools
US20200219384A1 (en) Methods and systems for ambient system control
TWI823055B (zh) 電子資源推送方法及系統
CN111883131B (zh) 语音数据的处理方法及装置
CN116825088B (zh) 一种基于深度学习的会议语音检测方法及***
CN115426582B (zh) 一种耳机音频处理方法及装置
Defréville et al. Automatic recognition of urban sound sources
CN114157023B (zh) 一种配变预警信息获取方法
CN115734024A (zh) 音频数据处理方法、装置、设备及存储介质
CN116959471A (zh) 语音增强方法、语音增强网络的训练方法及电子设备
KR101119867B1 (ko) 다중 감정 센싱 기반으로 사용자의 감정정보를 제공하는 장치
CN112073757A (zh) 情绪波动指数获取方法、显示方法及多媒体内容制作方法
CN116932735A (zh) 一种文本比对方法、装置、介质和设备
CN115269906A (zh) 图像生成方法、装置、存储介质及电子装置
CN110164438A (zh) 一种语音识别方法、装置及电子设备
CN114078484B (zh) 语音情绪识别的方法、装置以及存储介质
WO2022141142A1 (zh) 一种确定目标音视频的方法及***
CN115373280A (zh) 一种远程语音控制方法、装置及***

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant