CN107249162A - 智能化音频驱动*** - Google Patents

智能化音频驱动*** Download PDF

Info

Publication number
CN107249162A
CN107249162A CN201710684098.0A CN201710684098A CN107249162A CN 107249162 A CN107249162 A CN 107249162A CN 201710684098 A CN201710684098 A CN 201710684098A CN 107249162 A CN107249162 A CN 107249162A
Authority
CN
China
Prior art keywords
equipment
background
sound
target
intensity
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201710684098.0A
Other languages
English (en)
Inventor
不公告发明人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Wuxi Beidou Xingtong Information Technology Co Ltd
Original Assignee
Wuxi Beidou Xingtong Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Wuxi Beidou Xingtong Information Technology Co Ltd filed Critical Wuxi Beidou Xingtong Information Technology Co Ltd
Priority to CN201710684098.0A priority Critical patent/CN107249162A/zh
Publication of CN107249162A publication Critical patent/CN107249162A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2420/00Details of connection covered by H04R, not provided for in its groups
    • H04R2420/03Connection circuits to selectively connect loudspeakers or headphones to amplifiers

Landscapes

  • Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明涉及一种智能化音频驱动***,包括亮度传感器、收音器、动作检测设备和飞思卡尔IMX6处理芯片,所述亮度传感器用于检测周围环境的亮度强度以作为实时亮度强度输出,所述收音器用于检测周围环境的声音强度以作为实时声音强度输出,所述动作检测设备设置在终端设备上,用于检测各种即将触发终端设备发出声音的动作,所述飞思卡尔IMX6处理芯片分别与所述亮度传感器、所述收音器和所述动作检测设备连接,用于基于所述亮度传感器、所述收音器和所述动作检测设备的输出确定对终端设备的音频控制策略。通过本发明,能够有力维护终端设备附近人员的睡眠质量。

Description

智能化音频驱动***
技术领域
本发明涉及智能化驱动领域,尤其涉及一种智能化音频驱动***。
背景技术
随着手机等移动终端上的应用程序的日益增多以及移动网络的普及使用,人们越来越离不开手机,甚至睡觉前抱着手机不愿意休息。
手机等移动终端上上的各个应用程序在来消息时,为了提醒用户,都会发出较大的声音,如果是在用户睡眠状态下,这些声音会干扰人们的休息。同时,应用程序的声音不能根据外界声音进行调整,无法使用其发出的声音与外界声音相适应,使得一旦发出声音,要不听不见,要不特别醒耳,干扰人们的生活。
发明内容
为了解决上述问题,本发明提供了一种智能化音频驱动***,对手机所在环境的亮度强度以及所在环境的声音大小进行实时检测,对手机用户的睡眠状态进行实时检测,基于上述三种检测的结果,判断是否需要开启应用程序的消息声音以及消息声音的大小,从而为手机用户提供良好的使用体验。
根据本发明的一方面,提供了一种智能化音频驱动***,所述***包括亮度传感器、收音器、动作检测设备和飞思卡尔IMX6处理芯片,所述亮度传感器用于检测周围环境的亮度强度以作为实时亮度强度输出,所述收音器用于检测周围环境的声音强度以作为实时声音强度输出,所述动作检测设备设置在终端设备上,用于检测各种即将触发终端设备发出声音的动作,所述飞思卡尔IMX6处理芯片分别与所述亮度传感器、所述收音器和所述动作检测设备连接,用于基于所述亮度传感器、所述收音器和所述动作检测设备的输出确定对终端设备的音频控制策略。
更具体地,在所述智能化音频驱动***中,还包括:
FLASH存储器,用于预先存储预设亮度阈值和预设音量阈值;
音频控制设备,设置在终端设备内,与所述飞思卡尔IMX6处理芯片连接,用于接收并执行所述飞思卡尔IMX6处理芯片确定的终端设备的音频控制策略;
其中,所述音频控制设备与终端设备的音频播放设备连接,用于驱动音频播放设备。
更具体地,在所述智能化音频驱动***中,还包括:
高清摄像头,设置在终端设备附近,用于对终端设备附近场景进行拍摄以获得高清场景图像,所述高清场景图像是以帧为单位基于时间轴被连续获得;
边缘增强设备,与高清摄像头连接,用于接收高清场景图像,对高清场景图像进行边缘增强处理,以获得边缘增强图像;
背景分析设备,与边缘增强设备连接,用于接收边缘增强图像并分析边缘增强图像的背景状况,当判断背景为运动背景时,确定背景检测时间间隔,当判断背景为静止背景时,背景检测时间间隔为0;
背景提取设备,与背景分析设备连接,用于基于背景分析设备确定的背景检测时间间隔,每隔背景检测时间间隔,从边缘增强图像中提取一次背景图像,当背景检测时间间隔为0时,仍使用之前提取的背景图像;背景分割设备,分别与图像平滑设备和背景提取设备连接,用于从边缘增强图像中分割出背景图像以作为前景图像输出;
目标提取设备,与背景分割设备连接,用于分析出前景图像中多个目标,并从前景图像中分割出与多个目标分别对应的多个目标子图像;人体识别设备,与目标提取设备连接,用于接收多个目标子图像,确定目标子图像所在目标矩形的长宽比,当所述目标矩形的长宽比在1.4和6范围内时,确定所述目标矩形内的目标子图像对应的目标为人体目标;
其中,所述目标矩形为能够包括目标子图像的最小矩形;运动状态检测设备,与人体识别设备连接,用于基于时间轴确定每一个目标子图像的运动状态,当确定所有目标子图像的运动状态为静止状态并达到预定时间阈值时,发出休息状态提醒信号,否则,发出非休息状态提醒信号;
所述飞思卡尔IMX6处理芯片分别与所述运动状态检测设备、所述亮度传感器、所述收音器和所述动作检测设备连接,用于当实时声音强度小于等于预设亮度阈值、实时声音强度小于等于预设音量阈值且接收到休息状态提醒信号时,发出声音禁止信号,否则,发出声音允许信号。
更具体地,在所述智能化音频驱动***中:音频控制设备与所述飞思卡尔IMX6处理芯片连接,用于在接收到声音禁止信号时,向音频播放设备发送关闭控制指令,还用于在接收到声音允许信号时,向音频播放设备发送打开控制指令。
更具体地,在所述智能化音频驱动***中:所述FLASH存储器还与所述运动状态检测设备连接,用于预先存储所述预定时间阈值。
更具体地,在所述智能化音频驱动***中,还包括:显示设备,与所述飞思卡尔IMX6处理芯片连接,用于接收并实时显示实时声音强度和实时声音强度,还用于接收并实时显示与休息状态提醒信号对应的文字信息。
更具体地,在所述智能化音频驱动***中:所述显示设备为LED显示设备或LCD显示设备,设置在终端设备附近。
附图说明
以下将结合附图对本发明的实施方案进行描述,其中:
图1为根据本发明实施方案示出的智能化音频驱动***的结构方框图。
附图标记:1亮度传感器;2收音器;3动作检测设备;4飞思卡尔IMX6处理芯片
具体实施方式
下面将参照附图对本发明的智能化音频驱动***的实施方案进行详细说明。
当前,手机等终端设备的声音无法根据周围环境进行自适应调整,也无法根据终端设备用户的睡眠状态进行开启或关闭。
为了克服上述不足,本发明搭建了一种智能化音频驱动***,使用亮度传感器检测周围环境的亮度强度以作为实时亮度强度输出,使用收音器检测周围环境的声音强度以作为实时声音强度输出,使用所述动作检测设备检测各种即将触发终端设备发出声音的动作,并能够基于所述亮度传感器、所述收音器和所述动作检测设备的输出确定对终端设备的音频控制策略。
图1为根据本发明实施方案示出的智能化音频驱动***的结构方框图,所述***包括亮度传感器、收音器、动作检测设备和飞思卡尔IMX6处理芯片,所述亮度传感器用于检测周围环境的亮度强度以作为实时亮度强度输出,所述收音器用于检测周围环境的声音强度以作为实时声音强度输出,所述动作检测设备设置在终端设备上,用于检测各种即将触发终端设备发出声音的动作,所述飞思卡尔IMX6处理芯片分别与所述亮度传感器、所述收音器和所述动作检测设备连接,用于基于所述亮度传感器、所述收音器和所述动作检测设备的输出确定对终端设备的音频控制策略。
接着,继续对本发明的智能化音频驱动***的具体结构进行进一步的说明。
在所述***中,还包括:
FLASH存储器,用于预先存储预设亮度阈值和预设音量阈值;
音频控制设备,设置在终端设备内,与所述飞思卡尔IMX6处理芯片连接,用于接收并执行所述飞思卡尔IMX6处理芯片确定的终端设备的音频控制策略;
其中,所述音频控制设备与终端设备的音频播放设备连接,用于驱动音频播放设备。
在所述***中,还包括:
高清摄像头,设置在终端设备附近,用于对终端设备附近场景进行拍摄以获得高清场景图像,所述高清场景图像是以帧为单位基于时间轴被连续获得;
边缘增强设备,与高清摄像头连接,用于接收高清场景图像,对高清场景图像进行边缘增强处理,以获得边缘增强图像;
背景分析设备,与边缘增强设备连接,用于接收边缘增强图像并分析边缘增强图像的背景状况,当判断背景为运动背景时,确定背景检测时间间隔,当判断背景为静止背景时,背景检测时间间隔为0;
背景提取设备,与背景分析设备连接,用于基于背景分析设备确定的背景检测时间间隔,每隔背景检测时间间隔,从边缘增强图像中提取一次背景图像,当背景检测时间间隔为0时,仍使用之前提取的背景图像;背景分割设备,分别与图像平滑设备和背景提取设备连接,用于从边缘增强图像中分割出背景图像以作为前景图像输出;
目标提取设备,与背景分割设备连接,用于分析出前景图像中多个目标,并从前景图像中分割出与多个目标分别对应的多个目标子图像;人体识别设备,与目标提取设备连接,用于接收多个目标子图像,确定目标子图像所在目标矩形的长宽比,当所述目标矩形的长宽比在1.4和6范围内时,确定所述目标矩形内的目标子图像对应的目标为人体目标;
其中,所述目标矩形为能够包括目标子图像的最小矩形;运动状态检测设备,与人体识别设备连接,用于基于时间轴确定每一个目标子图像的运动状态,当确定所有目标子图像的运动状态为静止状态并达到预定时间阈值时,发出休息状态提醒信号,否则,发出非休息状态提醒信号;
所述飞思卡尔IMX6处理芯片分别与所述运动状态检测设备、所述亮度传感器、所述收音器和所述动作检测设备连接,用于当实时声音强度小于等于预设亮度阈值、实时声音强度小于等于预设音量阈值且接收到休息状态提醒信号时,发出声音禁止信号,否则,发出声音允许信号。
更具体地,在所述智能化音频驱动***中:音频控制设备与所述飞思卡尔IMX6处理芯片连接,用于在接收到声音禁止信号时,向音频播放设备发送关闭控制指令,还用于在接收到声音允许信号时,向音频播放设备发送打开控制指令。
在所述***中:所述FLASH存储器还与所述运动状态检测设备连接,用于预先存储所述预定时间阈值。
在所述***中,还包括:显示设备,与所述飞思卡尔IMX6处理芯片连接,用于接收并实时显示实时声音强度和实时声音强度,还用于接收并实时显示与休息状态提醒信号对应的文字信息。
在所述***中:所述显示设备为LED显示设备或LCD显示设备,设置在终端设备附近。
另外,所述高清摄像头可包括CMOS图像传感器。CMOS图像传感器是一种典型的固体成像传感器,与CCD有着共同的历史渊源。CMOS图像传感器通常由像敏单元阵列、行驱动器、列驱动器、时序控制逻辑、AD转换器、数据总线输出接口、控制接口等几部分组成,这几部分通常都被集成在同一块硅片上。其工作过程一般可分为复位、光电转换、积分、读出几部分。
在CMOS图像传感器芯片上还可以集成其他数字信号处理电路,如AD转换器、自动曝光量控制、非均匀补偿、白平衡处理、黑电平控制、伽玛校正等,为了进行快速计算甚至可以将具有可编程功能的DSP器件与CMOS器件集成在一起,从而组成单片数字相机及图像处理***。
1963年Morrison发表了可计算传感器,这是一种可以利用光导效应测定光斑位置的结构,成为CMOS图像传感器发展的开端。1995年低噪声的CMOS有源像素传感器单片数字相机获得成功。
CMOS图像传感器具有以下几个优点:1)、随机窗口读取能力。随机窗口读取操作是CMOS图像传感器在功能上优于CCD的一个方面,也称之为感兴趣区域选取。此外,CMOS图像传感器的高集成特性使其很容易实现同时开多个跟踪窗口的功能。2)、抗辐射能力。总的来说,CMOS图像传感器潜在的抗辐射性能相对于CCD性能有重要增强。3)、***复杂程度和可靠性。采用CMOS图像传感器可以大大地简化***硬件结构。4)、非破坏性数据读出方式。5)、优化的曝光控制。值得注意的是,由于在像元结构中集成了多个功能晶体管的原因,CMOS图像传感器也存在着若干缺点,主要是噪声和填充率两个指标。鉴于CMOS图像传感器相对优越的性能,使得CMOS图像传感器在各个领域得到了广泛的应用。
采用本发明的智能化音频驱动***,针对现有技术中手机等设备终端的消息声音无法根据环境自适应调整的技术问题,通过对周围环境的亮度强度、周围环境的声音强度以及周围人体目标的睡眠状态进行高精度检测,基于上述检测结果,在终端设备的动作检测设备检测各种即将触发终端设备发出声音的动作时,自动开关终端设备的声音或控制声音的音量大小,从而避免给终端设备的用户造成干扰。
可以理解的是,虽然本发明已以较佳实施例披露如上,然而上述实施例并非用以限定本发明。对于任何熟悉本领域的技术人员而言,在不脱离本发明技术方案范围情况下,都可利用上述揭示的技术内容对本发明技术方案做出许多可能的变动和修饰,或修改为等同变化的等效实施例。因此,凡是未脱离本发明技术方案的内容,依据本发明的技术实质对以上实施例所做的任何简单修改、等同变化及修饰,均仍属于本发明技术方案保护的范围内。

Claims (7)

1.一种智能化音频驱动***,所述***包括亮度传感器、收音器、动作检测设备和飞思卡尔IMX6处理芯片,所述亮度传感器用于检测周围环境的亮度强度以作为实时亮度强度输出,所述收音器用于检测周围环境的声音强度以作为实时声音强度输出,所述动作检测设备设置在终端设备上,用于检测各种即将触发终端设备发出声音的动作,所述飞思卡尔IMX6处理芯片分别与所述亮度传感器、所述收音器和所述动作检测设备连接,用于基于所述亮度传感器、所述收音器和所述动作检测设备的输出确定对终端设备的音频控制策略。
2.如权利要求1所述的智能化音频驱动***,其特征在于,还包括:
FLASH存储器,用于预先存储预设亮度阈值和预设音量阈值;
音频控制设备,设置在终端设备内,与所述飞思卡尔IMX6处理芯片连接,用于接收并执行所述飞思卡尔IMX6处理芯片确定的终端设备的音频控制策略;
其中,所述音频控制设备与终端设备的音频播放设备连接,用于驱动音频播放设备。
3.如权利要求2所述的智能化音频驱动***,其特征在于,还包括:
高清摄像头,设置在终端设备附近,用于对终端设备附近场景进行拍摄以获得高清场景图像,所述高清场景图像是以帧为单位基于时间轴被连续获得;
边缘增强设备,与高清摄像头连接,用于接收高清场景图像,对高清场景图像进行边缘增强处理,以获得边缘增强图像;
背景分析设备,与边缘增强设备连接,用于接收边缘增强图像并分析边缘增强图像的背景状况,当判断背景为运动背景时,确定背景检测时间间隔,当判断背景为静止背景时,背景检测时间间隔为0;
背景提取设备,与背景分析设备连接,用于基于背景分析设备确定的背景检测时间间隔,每隔背景检测时间间隔,从边缘增强图像中提取一次背景图像,当背景检测时间间隔为0时,仍使用之前提取的背景图像;
背景分割设备,分别与图像平滑设备和背景提取设备连接,用于从边缘增强图像中分割出背景图像以作为前景图像输出;
目标提取设备,与背景分割设备连接,用于分析出前景图像中多个目标,并从前景图像中分割出与多个目标分别对应的多个目标子图像;
人体识别设备,与目标提取设备连接,用于接收多个目标子图像,确定目标子图像所在目标矩形的长宽比,当所述目标矩形的长宽比在1.4和6范围内时,确定所述目标矩形内的目标子图像对应的目标为人体目标;其中,所述目标矩形为能够包括目标子图像的最小矩形;
运动状态检测设备,与人体识别设备连接,用于基于时间轴确定每一个目标子图像的运动状态,当确定所有目标子图像的运动状态为静止状态并达到预定时间阈值时,发出休息状态提醒信号,否则,发出非休息状态提醒信号;
所述飞思卡尔IMX6处理芯片分别与所述运动状态检测设备、所述亮度传感器、所述收音器和所述动作检测设备连接,用于当实时声音强度小于等于预设亮度阈值、实时声音强度小于等于预设音量阈值且接收到休息状态提醒信号时,发出声音禁止信号,否则,发出声音允许信号。
4.如权利要求3所述的智能化音频驱动***,其特征在于:
音频控制设备与所述飞思卡尔IMX6处理芯片连接,用于在接收到声音禁止信号时,向音频播放设备发送关闭控制指令,还用于在接收到声音允许信号时,向音频播放设备发送打开控制指令。
5.如权利要求4所述的智能化音频驱动***,其特征在于:
所述FLASH存储器还与所述运动状态检测设备连接,用于预先存储所述预定时间阈值。
6.如权利要求5所述的智能化音频驱动***,其特征在于,还包括:
显示设备,与所述飞思卡尔IMX6处理芯片连接,用于接收并实时显示实时声音强度和实时声音强度,还用于接收并实时显示与休息状态提醒信号对应的文字信息。
7.如权利要求6所述的智能化音频驱动***,其特征在于:
所述显示设备为LED显示设备或LCD显示设备,设置在终端设备附近。
CN201710684098.0A 2017-08-11 2017-08-11 智能化音频驱动*** Pending CN107249162A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201710684098.0A CN107249162A (zh) 2017-08-11 2017-08-11 智能化音频驱动***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201710684098.0A CN107249162A (zh) 2017-08-11 2017-08-11 智能化音频驱动***

Publications (1)

Publication Number Publication Date
CN107249162A true CN107249162A (zh) 2017-10-13

Family

ID=60012782

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710684098.0A Pending CN107249162A (zh) 2017-08-11 2017-08-11 智能化音频驱动***

Country Status (1)

Country Link
CN (1) CN107249162A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20080169932A1 (en) * 2007-01-17 2008-07-17 Graco Children's Products Inc. Vibration Alert Method and Monitor System
CN101227666A (zh) * 2007-01-15 2008-07-23 致伸科技股份有限公司 通信装置
CN101295405A (zh) * 2008-06-13 2008-10-29 西北工业大学 人像与车辆识别报警跟踪方法
US20110134237A1 (en) * 2008-08-04 2011-06-09 Koninklijke Philips Electronics N.V. Communication device with peripheral viewing means
CN105242563A (zh) * 2015-11-16 2016-01-13 西宁家家慧电子科技有限公司 一种智能家居的多媒体控制***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101227666A (zh) * 2007-01-15 2008-07-23 致伸科技股份有限公司 通信装置
US20080169932A1 (en) * 2007-01-17 2008-07-17 Graco Children's Products Inc. Vibration Alert Method and Monitor System
CN101295405A (zh) * 2008-06-13 2008-10-29 西北工业大学 人像与车辆识别报警跟踪方法
US20110134237A1 (en) * 2008-08-04 2011-06-09 Koninklijke Philips Electronics N.V. Communication device with peripheral viewing means
CN105242563A (zh) * 2015-11-16 2016-01-13 西宁家家慧电子科技有限公司 一种智能家居的多媒体控制***

Similar Documents

Publication Publication Date Title
CN110177221B (zh) 高动态范围图像的拍摄方法及装置
CN107613191B (zh) 一种拍照方法、设备及计算机可读存储介质
CN108024065B (zh) 一种终端拍摄的方法、终端及计算机可读存储介质
CN110766621B (zh) 图像处理方法、装置、存储介质及电子设备
WO2019148978A1 (zh) 图像处理方法、装置、存储介质及电子设备
US10506372B2 (en) Indoor/outdoor coverage detection based on sensor inputs
US20220210308A1 (en) Image processing method and electronic apparatus
CN105611185A (zh) 图像生成方法、装置及终端设备
AU2018263022A1 (en) Camera assembly and mobile electronic device
US20140346361A1 (en) Time-of-flight pixels also sensing proximity and/or detecting motion in imaging devices & methods
CN109819088B (zh) 光感校准方法及相关装置
CN110445986B (zh) 图像处理方法、装置、存储介质及电子设备
CN112600994B (zh) 物体探测装置、方法、存储介质和电子设备
CN108989638B (zh) 成像装置及其控制方法、电子装置和计算机可读存储介质
CN113228622A (zh) 图像采集方法、装置及存储介质
CN109547699A (zh) 一种拍照的方法及装置
US10951816B2 (en) Method and apparatus for processing image, electronic device and storage medium
US9270984B2 (en) Camera with dust checking function
CN107454264A (zh) 一种智能化音频驱动方法
CN108647566B (zh) 一种识别皮肤特征的方法及终端
KR20160004827A (ko) 이미지 센서, 이미지 센싱 방법, 그리고 이미지 센서를 포함하는 이미지 촬영 장치
CN107249162A (zh) 智能化音频驱动***
CN112584015A (zh) 物体探测方法、装置、存储介质和电子设备
CN107968937B (zh) 一种缓解眼球疲劳的***
US9275268B2 (en) Image processing device, image processing method, and non-transitory recording medium

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20171013