CN111583941A - 家电设备录音方法、装置、存储介质和家电设备 - Google Patents
家电设备录音方法、装置、存储介质和家电设备 Download PDFInfo
- Publication number
- CN111583941A CN111583941A CN202010378219.0A CN202010378219A CN111583941A CN 111583941 A CN111583941 A CN 111583941A CN 202010378219 A CN202010378219 A CN 202010378219A CN 111583941 A CN111583941 A CN 111583941A
- Authority
- CN
- China
- Prior art keywords
- recording
- audio
- audio data
- application program
- household appliance
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 238000005070 sampling Methods 0.000 claims abstract description 70
- 238000012952 Resampling Methods 0.000 claims abstract description 36
- 230000001960 triggered effect Effects 0.000 claims abstract description 17
- 238000012545 processing Methods 0.000 claims description 36
- 238000004590 computer program Methods 0.000 claims description 21
- 230000004044 response Effects 0.000 claims description 5
- 230000006870 function Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 238000013139 quantization Methods 0.000 description 5
- 238000010025 steaming Methods 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000010411 cooking Methods 0.000 description 4
- 238000001914 filtration Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000003993 interaction Effects 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 206010063385 Intellectualisation Diseases 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 125000004122 cyclic group Chemical group 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11C—STATIC STORES
- G11C7/00—Arrangements for writing information into, or reading information out from, a digital store
- G11C7/16—Storage of analogue signals in digital stores using an arrangement comprising analogue/digital [A/D] converters, digital memories and digital/analogue [D/A] converters
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
- G10L17/22—Interactive procedures; Man-machine interfaces
- G10L17/24—Interactive procedures; Man-machine interfaces the user being prompted to utter a password or a predefined phrase
Landscapes
- Signal Processing For Digital Recording And Reproducing (AREA)
- Stored Programmes (AREA)
Abstract
本申请涉及一种家电设备录音方法、装置、存储介质和家电设备。所述方法包括：获取对已启动语音应用程序的家电设备触发的录音请求，录音请求携带录音应用识别标识；响应录音请求，基于语音应用程序对应的音频源进行音频数据采集；对音频录制器的音频参数中的采样率进行初始化，根据初始化后的采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；将处理后的音频数据，反馈至与录音应用识别标识对应的录音应用程序。采用本方法能够实现对语音应用程序的音频源的复用，从复用的音频源中提取到所需的音频数据，实现了在家电设备上语音应用程序和录音应用程序同时运行的功能，更好地满足用户需求，提高了针对家电设备的使用便捷性。
Description
技术领域
本申请涉及电器技术领域，特别是涉及一种家电设备录音方法、装置、存储介质和家电设备。
背景技术
随着电器技术和物联网的快速发展，家电设备逐步实现智能化和网络化，智能家电设备上搭载了应用于人机交互的语音功能。现有***设计中，家电设备上仅设置了一路音频编码解码器的硬件资源，即仅存在一个音频源。在家电设备的语音应用程序在线的工作场景下，语音应用程序需要实时占用音频编码解码器的硬件资源。
由于现有的具备语音功能的家电设备上语音应用程序一直在线，音频编码解码器的硬件资源一直被语音应用程序所占用，导致其他录音应用程序等无法正常运行。比如录音应用程序无法录制音频，或由于无法调用音频编码解码器的硬件资源导致所录制的音频无声音等情况，导致现有的家电设备，无法满足语音应用程序和其他录音应用程序需要同时运行的需求，使用便捷性较低。
发明内容
基于此，有必要针对上述技术问题，提供一种能够提高家电设备使用便捷性的家电设备录音方法、装置、存储介质和家电设备。
一种家电设备录音方法，所述方法包括：
获取对已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
对所述音频录制器的音频参数中的采样率进行初始化；
根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
在其中一个实施例中，所述响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集，包括：
响应所述录音请求，新建与所述录音应用识别标识对应的采集线程；
调用所述采集线程，基于所述语音应用程序对应的音频源进行音频数据采集。
在其中一个实施例中，所述根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据，包括：
调用音频管理器，新建与所述录音应用识别标识对应的追踪线程；
调用所述追踪线程，根据初始化后的所述采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。
在其中一个实施例中，所述响应所述录音请求，新建与所述录音应用识别标识对应的采集线程，包括：
响应所述录音请求，调用媒体录制器，新建与所述录音应用识别标识对应的音频录制器；
调用所述音频录制器，新建与所述录音应用识别标识对应的采集线程。
在其中一个实施例中，所述调用音频管理器，新建与所述录音应用识别标识对应的追踪线程，包括：
调用音频管理器，新建与所述录音应用识别标识对应的录制记录对象；
调用所述录制记录对象，新建与所述录音应用识别标识对应的追踪线程。
在其中一个实施例中，在所述将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序之后，还包括：
基于所述音频录制器，对处理后的所述音频数据进行编码处理，生成录音文件；
将所述录音文件存储至所述家电设备对应的缓存中；
当检测到基于所述家电设备的录音播放请求时，响应所述播放请求，从所述家电设备对应的缓存中提取对应所述录音文件，并进行语音播报。
一种家电设备录音装置，所述装置包括：
录音请求获取模块，用于获取已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
音频数据采集模块，用于响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
采样率初始化模块，用于对所述音频录制器的音频参数中的采样率进行初始化；
重采样处理模块，用于根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
音频数据反馈模块，用于将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
在其中一个实施例中，所述音频数据采集模块，还用于：
响应所述录音请求，新建与所述录音应用识别标识对应的采集线程；调用所述采集线程，基于所述语音应用程序对应的音频源进行音频数据采集。
一种家电设备，包括家电设备主体、声音采集/输出装置、存储器和处理器，所述声音采集/输出装置、存储器和处理器设置在所述家电设备主体上；所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现以下步骤：
获取对已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
对所述音频录制器的音频参数中的采样率进行初始化；
根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
一种计算机可读存储介质，其上存储有计算机程序，所述计算机程序被处理器执行时实现以下步骤：
获取对已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
对所述音频录制器的音频参数中的采样率进行初始化；
根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
上述家电设备录音方法、装置、存储介质和家电设备中，通过获取已启动语音应用程序的家电设备触发的录音请求，并响应录音请求，基于语音应用程序对应的音频源进行音频数据采集，实现对语音应用程序的音频源的复用。其中，语音应用程序基于音频录制器的音频参数进行音频数据处理，通过对音频录制器的音频参数中的采样率进行初始化，以满足不同应用程序具备不同音频采样率的要求，进而利用初始化后的采样率对所采集的音频数据进行重采样处理，得到符合录音应用程序要求的音频数据，并反馈至与录音请求携带的录音应用识别标识对应的家电设备的录音应用程序。由于通过对家电设备的语音应用程序的音频源进行复用，即使在语音应用程序一直在线并占用音频源的情况下，也可从复用的音频源中提取到所需的音频数据，通过重采样处理得到符合录音应用程序所需的音频数据，实现了在家电设备上语音应用程序和录音应用程序同时运行的功能，更好地满足用户需求，提高了针对家电设备的使用便捷性。
附图说明
图1为一个实施例中家电设备录音方法的流程示意图；
图2为另一个实施例中家电设备录音方法的流程示意图；
图3为一个实施例中家电设备录音方法的实现架构示意图；
图4为一个实施例中家电设备录音装置的结构框图；
图5为一个实施例中家电设备的内部结构图。
具体实施方式
为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处描述的具体实施例仅仅用以解释本申请，并不用于限定本申请。
在一个实施例中，如图1所示，提供了一种家电设备录音方法，本实施例以该方法应用于家电设备终端进行举例说明，可以理解的是，该方法也可以应用于服务器，还可以应用于包括家电设备终端和服务器的***，并通过家电设备终端和服务器的交互实现。本实施例中，该方法包括以下步骤：
步骤S102，获取对已启动语音应用程序的家电设备触发的录音请求，录音请求携带录音应用识别标识。
具体地，用户通过对已启动语音应用程的家电设备触发录音请求，实现家电设备在语音应用程序一直在线的情形下，可根据录音请求，启动与录音应用识别标识对应的录音应用程序。
在一个实施例，在触发对家电设备的录音请求之前，还包括：
获取并响应针对家电设备的唤醒词，唤醒家电设备，并自启动家电设备上的语音应用程序。启动语音应用程序后，调用媒体录制器，新建与语音应用程序对应的音频录制器，并通过调用音频管理器，初始化与音频录制器对应的全部音频参数。进而基于音频硬件抽象层接口，调用音频驱动，从音频编码解码器的硬件资源中获取音频数据，并将所获取的音频数据，确定为与语音应用程序对应的音频源。
具体地，在获取到针对家电设备唤醒词后，响应唤醒词，并唤醒家电设备。家电设备唤醒后，自启动安装在家电设备上的语音应用程序，其中，安装在家电设备上的语音应用程序可以是搭载在家电设备上的语音助手，自启动语音助手可以实现家电设备的语音识别功能。在启动语音应用程序后，通过调用家电设备上设置有的媒体录制器(即MediaRecorder)，新建与语音应用程序对应的音频录制器(即AudioRecorder)。
其中，不同的应用程序创建各自对应的媒体录制器(MediaRecorder)，并在框架(framework)层各自创建相对于的音频录制器(AudioRecorder)。音频管理器(即AudioFlinger)是家电设备音频***的核心，主要承担音频混合输出，可将所收集的音频数据等进行处理，并将处理后的音频数据写入到音频硬件抽象层(即audio HAL)。
音频管理器在加载音频设备库文件时，从/system/lib/hw/下查找以audio开头的库，同时根据audio_policy.conf中定义的音频设备名作为库的第二部分名称，并确定加载音频设备库的名称，每个音频库的实现接口均为一致，得以让音频管理器使用相同的接口来调用不同音频设备。
基于音频硬件抽象层接口，可调用音频驱动，从音频编码解码器(即Audio Codec)的硬件资源中获取音频数据，还可将所获取到的音频数据存储至家电设备的预设缓存中。其中，HAL层分为两部分，一部分为各种音频设备，每种音频设备由一个独立的库文件实现，另一部分为音频策略。HAL层的上面是音频***的核心音频管理器，音频管理器实现了各种输入、输出音频流的管理，管理实时可用的音频通道，为各种音频流选择音频通道，实现多个音频流的混音等。
进一步地，初始化与语音应用程序对应的音频录制器的全部音频参数后，语音应用程序利用初始化后的各音频参数，对所采集的音频数据进行语音识别处理，得到符合需求的音频文件。
其中，音频录制器的音频参数主要包括：(1)音频源：可以理解为音频数据的来源。(2)采样频率：也称为采样速度或采样率，定义了每秒从连续信号中提取并组成离散信号的采样个数，可以理解为每秒钟采集信号样本的个数。(3)采样位数：即采样值或取样值，用来衡量声音波动变化的参数，即声卡处理声音的解析度，是指声卡在采集和播放声音文件时所使用数字声音信号的二进制位数，这个数值越大，解析度就越高，录制和回放的声音就越真实。(4)声道数：有单声道和双声道之分，双声道又称为立体声，在硬件中要占两条线路，音质和音色好，立体声数字化后所占空间比单声道多一倍。(5)量化位数：表示对模拟音频信号的幅度轴进行数字化，决定了模拟信号数字化以后的动态范围。
步骤S104，响应录音请求，基于语音应用程序对应的音频源进行音频数据采集。
具体地，响应录音请求，新建与录音应用识别表示对应的采集线程(即RecordThread)，调用采集线程，基于语音应用程对应的音频源进行音频数据采集。
进一步地，响应录音请求，调用与录音应用识别标识对应的媒体录制器，新建与录音应用识别标识对应的音频录制器，通过调用音频录制器，新建与录音应用识别标识对应的采集线程。基于采集线程，循环不断地从语音应用程对应的音频源中读取音频脉冲编码调制数据。
其中，语音应用程序基于音频录制器的音频参数，对所采集的音频数据进行处理，包括语音识别处理。
步骤S106，对音频录制器的音频参数中的采样率进行初始化。
具体地，通过获取语音应用程序对应的音频录制器的全部音频参数，并对音频参数中的采样率进行初始化，将初始化后的采样率和其他音频参数，包括音频源、声道数、采样位数以及量化位数等参数，确定为与录音应用程序对应的音频录制器的音频参数。
步骤S108，根据初始化后的采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据。
具体地，通过调用家电设备音频***的音频管理器，新建与录音应用对应的追踪线程(即TrackThread)，并调用追踪线程，根据初始化后的采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。其中，在语音识别处理过程中，为了满足对不同采样率的要求，常需要对语音进行重采样，重采样即将原始的采样频率变换为新的采样频率以适应不同采样率的要求。
其中，音频重采样主要步骤是进行插值或抽取，由于抽取可能产生混叠，内插可能产生镜像，则需要在抽取前进行抗混叠滤波，在内插后进行抗镜像滤波，抗混叠滤波和抗镜像滤波都可以通过使用低通滤波器实现。实现重采样的方法包括：一是若原模拟信号x(t)可以再生，或是已记录下来，可以进行重新采样；二是将x(n)通过数模转换D/A变成模拟信号x(t)，对x(t)经模数转换A/D在重新采样；三是L/M倍采样率转换算法，对采样后的数字信号x(n)，在“数字域”做采样率转换，以得到新的采样率，其中，方法三的应用较为广泛。
进一步地，通过调用家电设备音频***的音频管理器，新建与录音应用标识对应的录制记录对象(即RecordTrack对象)，并通过调用录制记录对象，新建与录音应用识别表示对应的追踪线程。
步骤S110，将处理后的音频数据，反馈至与录音应用识别标识对应的家电设备的录音应用程序。
具体地，通过将处理后的音频数据反馈至与录音应用识别表示对应的录音应用程序，使得录音应用程序基于音频源，对处理后的音频数据进行编码处理，生成录音文件，并将录音文件存储至家电设备对应的缓存中。其中，音频驱动开始工作后，会申请***内存，将采集到的音频数据放该***内存缓存，上层应用可通过读取***内存获取采集的音频数据。
进一步地，在生成录音文件之后，还包括：当检测到基于家电设备的录音播放请求时，响应播放请求，从家电设备对应的缓存中提取对应录音文件，并进行语音播报。
上述家电设备录音方法中，通过获取已启动语音应用程序的家电设备触发的录音请求，并响应录音请求，基于语音应用程序对应的音频源进行音频数据采集，实现对语音应用程序的音频源的复用。其中，语音应用程序基于音频录制器的音频参数进行音频数据处理，通过对音频录制器的音频参数中的采样率进行初始化，以满足不同应用程序具备不同音频采样率的要求，进而利用初始化后的采样率对所采集的音频数据进行重采样处理，得到符合录音应用程序要求的音频数据，并反馈至与录音请求携带的录音应用识别标识对应的家电设备的录音应用程序。由于通过对家电设备的语音应用程序的音频源进行复用，即使在语音应用程序一直在线并占用音频源的情况下，也可从复用的音频源中提取到所需的音频数据，通过重采样处理得到符合录音应用程序所需的音频数据，实现了在家电设备上语音应用程序和录音应用程序同时运行的功能，更好地满足用户需求，提高了针对家电设备的使用便捷性。
在一个实施例中，如图2所示，提供了另一种家电设备录音方法，具体包括以下步骤：
1)获取并响应针对家电设备的唤醒词，唤醒家电设备。
其中，家电设备可以是烹饪设备，包括烤箱、电饭锅、微波炉、蒸烤一体机以及自动炒菜机等智能烹饪设备，还可以是电冰箱和空调器等其他家电设备。针对不同家电设备，相应的唤醒词不一致，比如针对烹饪设备中的蒸烤一体机，相应的唤醒词可以是“开启蒸烤一体机”，当获取到“开启蒸烤一体机”的唤醒词时，蒸烤一体机响应该唤醒词，并成功唤醒。
2)自启动家电设备上的语音应用程序。
具体地，家电设备上设置的语音应用程序可以是语音助手，在家电设备唤醒后，搭载在家电设备上的语音助手自启动，并对所获取到的音频数据进行语音识别处理。
3)调用媒体录制器，新建与语音应用程序对应的音频录制器。
具体地，不同应用程序的音频录制器不同，语音应用程序自启动后，调用相应的媒体录制器，新建与语音应用程序对应的音频录制器。
4)调用音频管理器，初始化与语音应用程序对应的音频录制器的全部音频参数。
具体地，语音应用程序的音频参数包括音频源、采样率、采样位数、声道数和量化位数，通过调用音频管理器，实现对全部音频参数的初始化操作。
5)基于音频硬件抽象层接口，调用音频驱动，新建与语音应用程序对应的采集线程。
其中，音频硬件抽象层接口即audio HAL接口中的HAL层分为两部分，一部分包括各种音频设备，每种音频设备由一个独立的库文件实现，另一部分为音频策略。通过调用音频硬件抽象层接口，控制音频驱动，新建与语音应用程序对应的采集线程，同时，基于音频硬件抽象层接口，可调用音频驱动，从音频编码解码器(即Audio Codec)的硬件资源中获取音频数据，还可将所获取到的音频数据存储至家电设备的预设缓存中。
6)调用与语音应用程序对应的采集线程，从音频编码解码器的硬件资源中获取音频数据，并将所获取的音频数据，确定为与语音应用程序对应的音频源。
具体地，通过调用与语音应用程序对应的采集线程，实现音频数据的获取，并将所获取的音频数据确定为语音应用程序的音频源，通过从语音应用程序的音频源进行数据采集，实现后续录音应用程序对语音应用程序的音频源复用。
7)获取对已启动语音应用程序的家电设备触发的录音请求，录音请求携带录音应用识别标识。
具体地，在家电设备的语音应用程序已启动且在线的情况下，获取对家电设备触发的录音请求，同时获取录音请求携带的录音应用识别标识，基于录音应用识别标识可确定具体需要启动的录音应用程序。
8)响应录音应用请求，新建与录音应用识别标识对应的媒体录制器。
9)调用与录音应用识别标识对应的媒体录制器，新建与录音应用识别标识对应的音频录制器。
10)调用与录音应用识别标识对应的音频录制器，新建与录音应用识别标识对应的采集线程。
11)调用与录音应用识别标识对应的采集线程，基于语音应用程序对应的音频源进行音频数据采集。
具体地，通过调用与录音应用识别标识对应的采集线程，基于语音应用程对应的音频源进行音频数据采集，实现录音应用程序对语音应用程序的音频源复用。
12)对语音应用程序的音频录制器的音频参数中的采样率进行初始化，得到初始化后的采样率。
具体地，通过获取语音应用程序的音频录制器的全部音频参数，并对音频参数中的采样率进行初始化，所获得的初始化后的采样率满足录音应用程序的要求。
13)调音频管理器，新建与录音应用识别标识对应的录制记录对象。
14)调用录制记录对象，新建与录音应用识别标识对应的追踪线程。
15)调用追踪线程，根据初始化后的采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。
具体地，通过调用追踪线程，基于初始化后的采样率，实现对从语音应用程序对应的音频源所采集的音频数据进行重采样处理，进行重采样处理后得到的音频数据，满足录音应用程序进行编码处理的要求。
16)将处理后的音频数据，反馈至与录音应用识别表示对应的家电设备的录音应用程序。
17)录音应用程序基于语音应用程序的其他音频参数，对处理后的音频数据进行编码处理，生成录音文件，并将录音文件存储家电设备对应的缓存中。
具体地，录音应用程序基于语音应用程序的音频录制器的其他音频参数，包括采样位数、量化位数和声道数等，实现对所接收的音频数据进行编码处理，进一步的到录音文件，并存储在家电设备的预设缓存中。其中，在家电设备的音频***中，音频驱动开始工作后，会申请***内存，将采集到的音频数据放该***内存缓存，上层应用可通过读取***内存获取采集的音频数据。
18)当检测到基于家电设备的录音播放请求时，响应播放请求，从家电设备对应的缓存中提取对应录音文件，并进行语音播报。
具体地，当检测到基于家电设备的录音播放请求时，获取录音播放请求携带的录音文件标识，响应录音播放请求，从家电设备的缓存中提取与录音文件标识对应的录音文件，并对录音文件进行语音播报。
本实施例中，通过获取已启动语音应用程序的家电设备触发的录音请求，并响应录音请求，基于语音应用程序对应的音频源进行音频数据采集，实现对语音应用程序的音频源的复用。其中，语音应用程序基于音频录制器的音频参数进行音频数据处理，通过对音频录制器的音频参数中的采样率进行初始化，以满足不同应用程序具备不同音频采样率的要求，进而利用初始化后的采样率对所采集的音频数据进行重采样处理，得到符合录音应用程序要求的音频数据，并反馈至与录音请求携带的录音应用识别标识对应的家电设备的录音应用程序，使得录音应用程序可利用音频录制器的其他音频参数，对所获取的音频数据进行编码处理，生成录音文件。由于通过对家电设备的语音应用程序的音频源进行复用，即使在语音应用程序一直在线并占用音频源的情况下，也可从复用的音频源中提取到所需的音频数据，通过重采样处理得到符合录音应用程序所需的音频数据，实现了在家电设备上语音应用程序和录音应用程序同时运行的功能，更好地满足用户需求，提高了针对家电设备的使用便捷性。
在一个实施例中，图1或图2所示的家电设备录音方法，基于图3所示的家电设备录音方法的实现架构示意图实现，参照图3，家电设备录音方法的实现架构包括硬件层、内核层、硬件抽象层、框架层和应用层，其中硬件层包括音频硬件模块模块，即音频编码解码器(即Audio Codec)，内核层包括音频却驱动，硬件抽象层包括音频硬件抽象层接口(即audioHAL接口)，框架层包括音频管理器，以及与语音应用程序和录音应用程序分别对应的媒体录制器、音频录制器、采集线程、记录录制对象和追踪线层，应用层包括语音应用程序和录音应用程序。
其中，如图3所示，在框架层(framework层)设置了与语音应用程序和录音应用程序分别对应的媒体录制器(MediaRecorder)和音频录制器(AudioRecorder)，通过调用媒体录制器可新建对应的音频录制器。其中音频管理器(AudioFlinger)可使用同一接口，来实现对不同应用程序的采集线程和记录录制对象的新建，其中，通过语音应用程序的采集线程(RecordThread)可实现从音频编码解码器(Audio Codec)的硬件资源中循环采集音频数据，生成语音应用程序对应的音频源。通过录音应用程序的采集线程，可从语音应用程对应的音频源中读取音频脉冲编码调制数据。
进一步地，通过语音应用程序的记录录制对象(Recordtrack对象)，可实现对语音应用程序对应的音频录制器的全部音频参数进行初始化，还可通过调用记录录制对象，新建与语音应用程序对应的追踪线程(TrackThread)，实现对存储在音频数据的缓冲区中的音频数据进行重采样处理。通过将处理后的音频数据反馈至语音应用程序，使得语音应用程序对所获取的音频数据进行语音识别处理。
同样地，通过录音应用程序对应的记录录制对象，实现对语音应用程序对应的音频录制器的采样率进行初始化处理，其他音频参数包括音频源、声道数、采样位数以及量化位数等，无需进行初始化处理。通过调用与录音应用程序对应的记录录制对象，新建与录音应用识别标识对应的追踪线程。调用与录音应用识别标识对应的追踪线程，根据初始化后的采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。通过将处理后的音频数据反馈至与录音应用识别表示对应的录音应用程序，使得录音应用程序基于音频源，对处理后的音频数据进行编码处理，生成录音文件，并将录音文件存储至家电设备对应的缓存中。
应该理解的是，虽然图1-2的流程图中的各个步骤按照箭头的指示依次显示，但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明，这些步骤的执行并没有严格的顺序限制，这些步骤可以以其它的顺序执行。而且，图1-2中的至少一部分步骤可以包括多个步骤或者多个阶段，这些步骤或者阶段并不必然是在同一时刻执行完成，而是可以在不同的时刻执行，这些步骤或者阶段的执行顺序也不必然是依次进行，而是可以与其它步骤或者其它步骤中的步骤或者阶段的至少一部分轮流或者交替地执行。
在一个实施例中，如图4所示，提供了一种家电设备录音装置，包括：录音请求获取模块402、音频数据采集模块404、采样率初始化模块406、重采样处理模块408以及音频数据反馈模块410，其中：
录音请求获取模块402，用于获取已启动语音应用程序的家电设备触发的录音请求，录音请求携带录音应用识别标识。
音频数据采集模块404，用于响应录音请求，基于语音应用程序对应的音频源进行音频数据采集；语音应用程序基于音频录制器的音频参数进行音频数据处理。
采样率初始化模块406，用于对音频录制器的音频参数中的采样率进行初始化。
重采样处理模块408，用于根据初始化后的采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据。
音频数据反馈模块410，用于将处理后的音频数据，反馈至与录音应用识别标识对应的家电设备的录音应用程序。
上述家电设备录音装置中，通过获取已启动语音应用程序的家电设备触发的录音请求，并响应录音请求，基于语音应用程序对应的音频源进行音频数据采集，实现对语音应用程序的音频源的复用。其中，语音应用程序基于音频录制器的音频参数进行音频数据处理，通过对音频录制器的音频参数中的采样率进行初始化，以满足不同应用程序具备不同音频采样率的要求，进而利用初始化后的采样率对所采集的音频数据进行重采样处理，得到符合录音应用程序要求的音频数据，并反馈至与录音请求携带的录音应用识别标识对应的家电设备的录音应用程序。由于通过对家电设备的语音应用程序的音频源进行复用，即使在语音应用程序一直在线并占用音频源的情况下，也可从复用的音频源中提取到所需的音频数据，通过重采样处理得到符合录音应用程序所需的音频数据，实现了在家电设备上语音应用程序和录音应用程序同时运行的功能，更好地满足用户需求，提高了针对家电设备的使用便捷性。
在一个实施例中，音频数据采集模块还用于：
响应录音请求，新建与录音应用识别标识对应的采集线程；
调用采集线程，基于语音应用程序对应的音频源进行音频数据采集。
在一个实施例中，音频数据采集模块还用于：
响应录音请求，调用媒体录制器，新建与录音应用识别标识对应的音频录制器；
调用音频录制器，新建与录音应用识别标识对应的采集线程。
在一个实施例中，重采样处理模块还用于：
调用音频管理器，新建与录音应用识别标识对应的追踪线程；
调用追踪线程，根据初始化后的采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。
在一个实施例中，重采样处理模块还用于：
调用音频管理器，新建与录音应用识别标识对应的录制记录对象；
调用录制记录对象，新建与录音应用识别标识对应的追踪线程。
在一个实施例中，家电设备录音装置还包括：
音频数据编码处理模块，用于基于音频录制器，对处理后的音频数据进行编码处理，生成录音文件。
录音文件存储模块，用于将录音文件存储至家电设备对应的缓存中。
录音文件播放模块，用于当检测到基于家电设备的录音播放请求时，响应播放请求，从家电设备对应的缓存中提取对应录音文件，并进行语音播报。
关于家电设备录音装置的具体限定可以参见上文中对于家电设备录音方法的限定，在此不再赘述。上述家电设备录音装置中的各个模块可全部或部分通过软件、硬件及其组合来实现。上述各模块可以硬件形式内嵌于或独立于计算机设备中的处理器中，也可以以软件形式存储于计算机设备中的存储器中，以便于处理器调用执行以上各个模块对应的操作。
在一个实施例中，提供了一种计算机设备，该计算机设备可以是家电设备，其内部结构图可以如图5所示。该家电设备包括通过***总线连接的处理器、存储器、通信接口、显示屏和声音采集/输出装置。其中，该计算机设备的处理器用于提供计算和控制能力。该计算机设备的存储器包括非易失性存储介质、内存储器。该非易失性存储介质存储有操作***和计算机程序。该内存储器为非易失性存储介质中的操作***和计算机程序的运行提供环境。该计算机设备的通信接口用于与外部的终端进行有线或无线方式的通信，无线方式可通过WIFI、运营商网络、NFC(近场通信)或其他技术实现。该计算机程序被处理器执行时以实现一种家电设备录音方法。该计算机设备的显示屏可以是液晶显示屏或者电子墨水显示屏，该计算机设备的输入装置可以是显示屏上覆盖的触摸层，也可以是计算机设备外壳上设置的按键、轨迹球或触控板，还可以是外接的键盘、触控板或鼠标等。
本领域技术人员可以理解，图5中示出的结构，仅仅是与本申请方案相关的部分结构的框图，并不构成对本申请方案所应用于其上的计算机设备的限定，具体的计算机设备可以包括比图中所示更多或更少的部件，或者组合某些部件，或者具有不同的部件布置。
在一个实施例中，一种家电设备，包括家电设备主体、声音采集/输出装置、存储器和处理器，所述声音采集/输出装置、存储器和处理器设置在所述家电设备主体上；存储器中存储有计算机程序，该处理器执行计算机程序时实现以下步骤：
获取对已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
对所述音频录制器的音频参数中的采样率进行初始化；
根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
响应所述录音请求，新建与所述录音应用识别标识对应的采集线程；
调用所述采集线程，基于所述语音应用程序对应的音频源进行音频数据采集。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
调用音频管理器，新建与所述录音应用识别标识对应的追踪线程；
调用所述追踪线程，根据初始化后的所述采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
响应所述录音请求，调用媒体录制器，新建与所述录音应用识别标识对应的音频录制器；
调用所述音频录制器，新建与所述录音应用识别标识对应的采集线程。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
调用音频管理器，新建与所述录音应用识别标识对应的录制记录对象；
调用所述录制记录对象，新建与所述录音应用识别标识对应的追踪线程。
在一个实施例中，处理器执行计算机程序时还实现以下步骤：
基于所述音频录制器，对处理后的所述音频数据进行编码处理，生成录音文件；
将所述录音文件存储至所述家电设备对应的缓存中；
当检测到基于所述家电设备的录音播放请求时，响应所述播放请求，从所述家电设备对应的缓存中提取对应所述录音文件，并进行语音播报。
在一个实施例中，提供了一种计算机可读存储介质，其上存储有计算机程序，计算机程序被处理器执行时实现以下步骤：
获取对已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
对所述音频录制器的音频参数中的采样率进行初始化；
根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
响应所述录音请求，新建与所述录音应用识别标识对应的采集线程；
调用所述采集线程，基于所述语音应用程序对应的音频源进行音频数据采集。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
调用音频管理器，新建与所述录音应用识别标识对应的追踪线程；
调用所述追踪线程，根据初始化后的所述采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
响应所述录音请求，调用媒体录制器，新建与所述录音应用识别标识对应的音频录制器；
调用所述音频录制器，新建与所述录音应用识别标识对应的采集线程。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
调用音频管理器，新建与所述录音应用识别标识对应的录制记录对象；
调用所述录制记录对象，新建与所述录音应用识别标识对应的追踪线程。
在一个实施例中，计算机程序被处理器执行时还实现以下步骤：
基于所述音频录制器，对处理后的所述音频数据进行编码处理，生成录音文件；
将所述录音文件存储至所述家电设备对应的缓存中；
当检测到基于所述家电设备的录音播放请求时，响应所述播放请求，从所述家电设备对应的缓存中提取对应所述录音文件，并进行语音播报。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分流程，是可以通过计算机程序来指令相关的硬件来完成，所述的计算机程序可存储于一非易失性计算机可读取存储介质中，该计算机程序在执行时，可包括如上述各方法的实施例的流程。其中，本申请所提供的各实施例中所使用的对存储器、存储、数据库或其它介质的任何引用，均可包括非易失性和易失性存储器中的至少一种。非易失性存储器可包括只读存储器(Read-Only Memory，ROM)、磁带、软盘、闪存或光存储器等。易失性存储器可包括随机存取存储器(Random Access Memory，RAM)或外部高速缓冲存储器。作为说明而非局限，RAM可以是多种形式，比如静态随机存取存储器(Static Random Access Memory，SRAM)或动态随机存取存储器(Dynamic Random Access Memory，DRAM)等。
以上实施例的各技术特征可以进行任意的组合，为使描述简洁，未对上述实施例中的各个技术特征所有可能的组合都进行描述，然而，只要这些技术特征的组合不存在矛盾，都应当认为是本说明书记载的范围。
以上所述实施例仅表达了本申请的几种实施方式，其描述较为具体和详细，但并不能因此而理解为对发明专利范围的限制。应当指出的是，对于本领域的普通技术人员来说，在不脱离本申请构思的前提下，还可以做出若干变形和改进，这些都属于本申请的保护范围。因此，本申请专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种家电设备录音方法，其特征在于，所述方法包括：
获取对已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
对所述音频录制器的音频参数中的采样率进行初始化；
根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
2.根据权利要求1所述的方法，其特征在于，所述响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集，包括：
响应所述录音请求，新建与所述录音应用识别标识对应的采集线程；
调用所述采集线程，基于所述语音应用程序对应的音频源进行音频数据采集。
3.根据权利要求1所述的方法，其特征在于，所述根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据，包括：
调用音频管理器，新建与所述录音应用识别标识对应的追踪线程；
调用所述追踪线程，根据初始化后的所述采样率，对所采集的音频数据进行重采样处理，得到处理后的音频数据。
4.根据权利要求2所述的方法，其特征在于，所述响应所述录音请求，新建与所述录音应用识别标识对应的采集线程，包括：
响应所述录音请求，调用媒体录制器，新建与所述录音应用识别标识对应的音频录制器；
调用所述音频录制器，新建与所述录音应用识别标识对应的采集线程。
5.根据权利要求3所述的方法，其特征在于，所述调用音频管理器，新建与所述录音应用识别标识对应的追踪线程，包括：
调用音频管理器，新建与所述录音应用识别标识对应的录制记录对象；
调用所述录制记录对象，新建与所述录音应用识别标识对应的追踪线程。
6.根据权利要求1所述的方法，其特征在于，在所述将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序之后，还包括：
基于所述音频录制器，对处理后的所述音频数据进行编码处理，生成录音文件；
将所述录音文件存储至所述家电设备对应的缓存中；
当检测到基于所述家电设备的录音播放请求时，响应所述播放请求，从所述家电设备对应的缓存中提取对应所述录音文件，并进行语音播报。
7.一种家电设备录音装置，其特征在于，所述装置包括：
录音请求获取模块，用于获取已启动语音应用程序的家电设备触发的录音请求，所述录音请求携带录音应用识别标识；
音频数据采集模块，用于响应所述录音请求，基于所述语音应用程序对应的音频源进行音频数据采集；所述语音应用程序基于音频录制器的音频参数进行音频数据处理；
采样率初始化模块，用于对所述音频录制器的音频参数中的采样率进行初始化；
重采样处理模块，用于根据初始化后的所述采样率对所采集的音频数据进行重采样处理，得到处理后的音频数据；
音频数据反馈模块，用于将处理后的所述音频数据，反馈至与所述录音应用识别标识对应的家电设备的录音应用程序。
8.根据权利要求7所述的家电设备录音装置，其特征在于，所述音频数据采集模块，还用于：
响应所述录音请求，新建与所述录音应用识别标识对应的采集线程；调用所述采集线程，基于所述语音应用程序对应的音频源进行音频数据采集。
9.一种家电设备，包括家电设备主体、声音采集/输出装置、存储器和处理器，所述声音采集/输出装置、存储器和处理器设置在所述家电设备主体上；所述存储器存储有计算机程序，其特征在于，所述处理器执行所述计算机程序时实现权利要求1至6中任一项所述的方法的步骤。
10.一种计算机可读存储介质，其上存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现权利要求1至6中任一项所述的方法的步骤。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010378219.0A CN111583941B (zh) | 2020-05-07 | 2020-05-07 | 家电设备录音方法、装置、存储介质和家电设备 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN202010378219.0A CN111583941B (zh) | 2020-05-07 | 2020-05-07 | 家电设备录音方法、装置、存储介质和家电设备 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN111583941A true CN111583941A (zh) | 2020-08-25 |
| CN111583941B CN111583941B (zh) | 2024-01-16 |
Family
ID=72126327
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN202010378219.0A Active CN111583941B (zh) | 2020-05-07 | 2020-05-07 | 家电设备录音方法、装置、存储介质和家电设备 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN111583941B (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113360208A (zh) * | 2021-06-15 | 2021-09-07 | 读书郎教育科技有限公司 | 一种解决语音唤醒应用占用录音的方法 |
| CN113971969A (zh) * | 2021-08-12 | 2022-01-25 | 荣耀终端有限公司 | 一种录音方法、装置、终端、介质及产品 |
| CN117389507A (zh) * | 2023-12-12 | 2024-01-12 | 荣耀终端有限公司 | 音频数据处理方法、电子设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103269374A (zh) * | 2013-05-29 | 2013-08-28 | 北京小米科技有限责任公司 | 录音同步方法、装置和设备 |
| CN107040496A (zh) * | 2016-02-03 | 2017-08-11 | 中兴通讯股份有限公司 | 一种音频数据处理方法和装置 |
| CN110097897A (zh) * | 2019-04-02 | 2019-08-06 | 烽火通信科技股份有限公司 | 一种Android设备录音复用方法及*** |
| CN110113494A (zh) * | 2019-05-05 | 2019-08-09 | Oppo广东移动通信有限公司 | 录音方法及相关装置 |
| CN110351445A (zh) * | 2019-06-19 | 2019-10-18 | 成都康胜思科技有限公司 | 一种基于智能语音识别的高并发voip录音服务*** |
-
2020
- 2020-05-07 CN CN202010378219.0A patent/CN111583941B/zh active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN103269374A (zh) * | 2013-05-29 | 2013-08-28 | 北京小米科技有限责任公司 | 录音同步方法、装置和设备 |
| CN107040496A (zh) * | 2016-02-03 | 2017-08-11 | 中兴通讯股份有限公司 | 一种音频数据处理方法和装置 |
| CN110097897A (zh) * | 2019-04-02 | 2019-08-06 | 烽火通信科技股份有限公司 | 一种Android设备录音复用方法及*** |
| CN110113494A (zh) * | 2019-05-05 | 2019-08-09 | Oppo广东移动通信有限公司 | 录音方法及相关装置 |
| CN110351445A (zh) * | 2019-06-19 | 2019-10-18 | 成都康胜思科技有限公司 | 一种基于智能语音识别的高并发voip录音服务*** |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN113360208A (zh) * | 2021-06-15 | 2021-09-07 | 读书郎教育科技有限公司 | 一种解决语音唤醒应用占用录音的方法 |
| CN113360208B (zh) * | 2021-06-15 | 2022-11-25 | 读书郎教育科技有限公司 | 一种解决语音唤醒应用占用录音的方法 |
| CN113971969A (zh) * | 2021-08-12 | 2022-01-25 | 荣耀终端有限公司 | 一种录音方法、装置、终端、介质及产品 |
| CN117389507A (zh) * | 2023-12-12 | 2024-01-12 | 荣耀终端有限公司 | 音频数据处理方法、电子设备及存储介质 |
| CN117389507B (zh) * | 2023-12-12 | 2024-05-10 | 荣耀终端有限公司 | 音频数据处理方法、电子设备及存储介质 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN111583941B (zh) | 2024-01-16 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN111583941B (zh) | 家电设备录音方法、装置、存储介质和家电设备 | |
| CN105049917B (zh) | 录制音视频同步时间戳的方法和装置 | |
| CN107402835A (zh) | 应用程序的异常处理方法、装置及存储介质和移动终端 | |
| WO2020024945A1 (zh) | 确定时间戳的方法和装置 | |
| CN108334202B (zh) | 壁纸更新方法及相关产品 | |
| CN107146623B (zh) | 基于人工智能的语音识别方法、装置和*** | |
| CN108282673A (zh) | 一种播放记录的更新方法、服务器及客户端 | |
| CN110335615A (zh) | 音频数据的处理方法、装置、电子设备及存储介质 | |
| US20220244845A1 (en) | Method, device, electronic device, and storage medium for sending and receiving message | |
| CN109542385B (zh) | 一种多数据流同屏显示方法、***、装置及可读存储介质 | |
| CN113312237A (zh) | 信息反馈方法、装置、电子设备及存储介质 | |
| CN116723353A (zh) | 一种视频监控区域配置方法、***、装置及可读存储介质 | |
| CN103369383A (zh) | 空间遥控器的控制方法、装置、空间遥控器及多媒体终端 | |
| CN107797898B (zh) | 数据采集方法及其装置 | |
| WO2019134685A1 (zh) | 示波器数据处理方法、装置及示波器 | |
| CN115170700A (zh) | 基于Flutter框架实现CSS动画的方法、计算机设备及存储介质 | |
| CN113507529B (zh) | 基于Web应用实现文件下载的方法 | |
| JP2020017125A (ja) | 情報処理装置、情報処理システム、情報処理方法、及びプログラム | |
| CN115328496A (zh) | 一种文件生成方法及装置 | |
| CN112393799A (zh) | 远场语音设备检测的方法及装置、电视终端 | |
| CN111459756A (zh) | 一种日志处理方法及相关设备 | |
| CN111857551A (zh) | 一种录像数据老化方法及装置 | |
| CN110311754A (zh) | 一种数据的接收方法、装置、存储介质及电子设备 | |
| CN113535299B (zh) | 服务器、显示设备以及健康管理方法 | |
| CN115499339B (zh) | 一种vnc功能的压力测试方法、***、装置及存储介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant |