CN107487677A - 电梯困人事件的检测方法和*** - Google Patents
电梯困人事件的检测方法和*** Download PDFInfo
- Publication number
- CN107487677A CN107487677A CN201710561698.8A CN201710561698A CN107487677A CN 107487677 A CN107487677 A CN 107487677A CN 201710561698 A CN201710561698 A CN 201710561698A CN 107487677 A CN107487677 A CN 107487677A
- Authority
- CN
- China
- Prior art keywords
- audio frame
- term
- short
- elevator
- background
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B66—HOISTING; LIFTING; HAULING
- B66B—ELEVATORS; ESCALATORS OR MOVING WALKWAYS
- B66B5/00—Applications of checking, fault-correcting, or safety devices in elevators
- B66B5/0006—Monitoring devices or performance analysers
- B66B5/0012—Devices monitoring the users of the elevator system
Landscapes
- Indicating And Signalling Devices For Elevators (AREA)
Abstract
本发明涉及一种电梯困人事件的检测方法和***,在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据并计算背景音频帧的短时电平变化量;在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据并计算当前音频帧的短时电平变化量,获取当前音频帧的短时电平变化量和背景音频帧的短时电平变化量的差值,当故障电梯中有人员时,人员发出声音,可以获得一定数量的差值满足阈值条件的当前音频帧,当故障电梯中无人员时,获得的当前音频帧与背景音频帧相似,差值满足阈值条件的当前音频帧很少,通过累计差值满足阈值条件的当前音频帧数量,可以判断是否发生电梯困人事件,可以利用较低配置的设备实现电梯困人事件的检测,降低设备成本。
Description
技术领域
本发明涉及电梯检测技术领域,特别是涉及一种电梯困人事件的检测方法和***。
背景技术
在电梯的实际使用过程中,有时会因不可预知的因素出现电梯困人事件,可能危害电梯内人员的生命安全,因此对电梯困人事件的检测显得尤为重要。
目前,大多通过红外感应检测或者视频分析检测的方式进行电梯困人事件的检测。红外感应检测需要在电梯上额外安装红外传感器;视频分析检测的算法较为复杂,运算量大,需要配置较高运算能力的设备才能实现,因此上述两种方式对电梯困人事件检测的设备成本较高。
发明内容
基于此,有必要针对传统的电梯困人事件检测方式的设备成本较高的问题,提供一种电梯困人事件的检测方法和***。
一种电梯困人事件的检测方法,包括以下步骤:
在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据,根据背景音频数据计算背景音频帧的短时电平变化量;
在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据,根据当前音频数据计算当前音频帧的短时电平变化量;
获取当前音频帧的短时电平变化量与背景音频帧的短时电平变化量的差值;
累计差值大于等于第一阈值的当前音频帧数;
在累计的当前音频帧数大于等于第二阈值时,判定发生电梯困人事件。
一种电梯困人事件的检测***,包括:
背景音频获取单元,用于在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据,根据背景音频数据计算背景音频帧的短时电平变化量;
当前音频获取单元,用于在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据,根据当前音频数据计算当前音频帧的短时电平变化量;
音频处理单元,用于获取当前音频帧的短时电平变化量与背景音频帧的短时电平变化量的差值;累计差值大于等于第一阈值的当前音频帧数;
事件判定单元,用于在累计的当前音频帧数大于等于第二阈值时,判定发生电梯困人事件。
根据上述本发明的电梯困人事件的检测方法和***,在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据并计算背景音频帧的短时电平变化量;在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据并计算当前音频帧的短时电平变化量,获取当前音频帧的短时电平变化量和背景音频帧的短时电平变化量的差值,当故障电梯中有人员时,人员发出声音,可以获得一定数量的差值满足阈值条件的当前音频帧,当故障电梯中无人员时,获得的当前音频帧与背景音频帧相似,差值满足阈值条件的当前音频帧很少,通过累计差值满足阈值条件的当前音频帧数量,可以判断是否发生电梯困人事件,相比于视频信号的处理过程,声音信号的处理过程更为简单,可以利用较低配置的设备实现电梯困人事件的检测,降低设备成本。
一种可读存储介质,其上存储有可执行程序,该程序被处理器执行时实现上述的电梯困人事件的检测方法的步骤。
一种检测设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时实现上述的电梯困人事件的检测方法的步骤。
根据上述本发明的电梯困人事件的检测方法,本发明还提供一种计算机可读存储介质和计算机设备,用于通过程序实现上述电梯困人事件的检测方法。
附图说明
图1为其中一个实施例的电梯困人事件的检测方法的流程示意图;
图2为其中一个实施例的电梯困人事件的检测***的结构示意图;
图3为其中一个实施例的电梯困人事件的检测***的结构示意图;
图4为其中一个具体实施例的电梯困人事件检测的流程示意图;
图5为其中一个具体实施例的音频检测的流程示意图;
图6为其中一个具体实施例的生成背景图像和背景掩模的流程示意图;
图7为其中一个具体实施例的故障电梯内人物检测的流程示意图。
具体实施方式
为使本发明的目的、技术方案及优点更加清楚明白,以下结合附图及实施例,对本发明进行进一步的详细说明。应当理解,此处所描述的具体实施方式仅仅用以解释本发明,并不限定本发明的保护范围。
参见图1所示,为本发明一个实施例的电梯困人事件的检测方法的流程示意图。该实施例中的电梯困人事件的检测方法,包括以下步骤:
步骤S101:在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据,根据背景音频数据计算背景音频帧的短时电平变化量;
在本步骤中,空闲待召状态是指电梯正常运行时停留在某一楼层,而且电梯没有收到内部的召唤指令和外部的召唤指令的状态,在此状态下,没有人员在电梯轿厢内部,不会获取到人员发出的声音,因此可以获取电梯轿厢内部的背景音频数据;
步骤S102:在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据,根据当前音频数据计算当前音频帧的短时电平变化量;
在本步骤中,故障状态是指电梯出现运行故障且电梯梯门关闭的状态,在此状态下,不论电梯内是否有人员,都可以采集电梯轿厢内部的当前音频数据;
步骤S103:获取当前音频帧的短时电平变化量与背景音频帧的短时电平变化量的差值,累计差值大于等于第一阈值的当前音频帧数;
在本步骤中,一个差值对应一个当前音频帧;
步骤S104:在累计的当前音频帧数大于等于第二阈值时,判定发生电梯困人事件。
在本实施例中,在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据并计算背景音频帧的短时电平变化量;在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据并计算当前音频帧的短时电平变化量,获取当前音频帧的短时电平变化量和背景音频帧的短时电平变化量的差值,当故障电梯中有人员时,人员发出声音,可以获得一定数量的差值满足阈值条件的当前音频帧,当故障电梯中无人员时,获得的当前音频帧与背景音频帧相似,差值满足阈值条件的当前音频帧很少,通过累计差值满足阈值条件的当前音频帧数量,可以判断是否发生电梯困人事件,相比于视频信号的处理过程,声音信号的处理过程更为简单,可以利用较低配置的设备实现电梯困人事件的检测,降低设备成本。
在电梯处于故障状态时,可能存在电梯内部没有人员,但是有离散噪声,累计差值大于等于第一阈值的当前音频帧数,在累计的当前音频帧数大于等于第二阈值时判定发生电梯困人事件,可以防止在有离散噪声场景下的误判。第一阈值和第二阈值可以根据实际应用场景进行调节。
在其中一个实施例中,采集的背景音频数据和当前音频数据的采样参数类型相同,采样参数类型包括音频帧时长、音频采样总时长和音频帧中的采样电平个数。
在本实施例中,采集的背景音频数据和当前音频数据的采样参数类型相同,如音频帧时长、音频采样总时长、音频帧中的采样电平个数相同,可以在同一采样参数类型的前提下比较背景音频和当前音频,从而准确识别出当前音频中是否有电梯内人员所发出的音频。
在其中一个实施例中,电梯困人事件的检测方法还包括以下步骤:
在累计的当前音频帧数小于第二阈值时,获取当前音频采样总时长;
在当前音频采样总时长超过预设时长时,将累计的音频帧数清零。
在本实施例中,在电梯处于故障状态时,可能存在电梯内部没有人员,但是有离散噪声,离散噪声的存在可能使当前音频帧满足差值大于等于第一阈值,但需要较长的音频采样总时长才能使累计的音频帧数大于等于第二阈值,因此,在累计的当前音频帧数小于第二阈值时,可以获取当前音频采样总时长,在当前音频采样总时长超过预设时长时,将累计的音频帧数清零,可以消除离散噪音的影响,使利用音频判断电梯困人事件更加准确。
可选的,将累计的音频帧数清零后,当前音频采样总时长也清零,开始重新计算。
在其中一个实施例中,根据背景音频数据计算背景音频帧的短时电平变化量的步骤包括以下步骤:
根据背景音频数据计算背景音频帧中相邻两个音频数据的短时电平变化量,并根据背景音频帧中所有短时电平变化量计算背景音频帧的短时电平平均变化量;
获取当前音频帧的短时电平变化量与背景音频帧的短时电平变化量的差值的步骤包括以下步骤:
获取当前音频帧的短时电平变化量与背景音频帧的短时电平平均变化量的差值。
在本实施例中,对背景音频帧的短时电平变化量进行了平均化处理,由于在电梯处于空闲待召状态时采集的电梯轿厢内部的背景音频数据中可能含有噪音数据,噪音数据的存在会使后续计算的背景音频帧的短时电平变化量偏高,从而减小当前音频帧的短时电平变化量与背景音频帧的短时电平变化量的差值,将背景音频帧的短时电平变化量进行平均化处理,可以避免背景音频数据中噪音数据的影响,差值更能体现当前音频帧与背景音频帧的区别。
可选的,背景音频帧中的相邻两个音频数据可以是相邻两个采样电平值。
可选的,背景音频帧的短时电平平均变化量可以是多个背景音频帧中所有短时电平变化量的平均量。
在其中一个实施例中,根据背景音频数据计算背景音频帧的短时电平平均变化量的步骤包括以下步骤:
根据公式计算背景音频的短时电平平均变化量;
式中,Lb为背景音频帧的短时电平平均变化量,Tf为背景音频帧时长,Tt为背景音频采样总时长,K为背景音频帧中的采样电平个数,Pn+1、Pn为背景音频帧中的采样电平值。
在本实施例中,背景音频帧时长、背景音频采样总时长、背景音频帧中的采样电平个数、背景音频帧中的采样电平值等数据可以在采集电梯轿厢内部的背景音频数据时得到,上述公式计算过程简单,可以快速得到背景音频帧的短时电平平均变化量。
在其中一个实施例中,电梯困人事件的检测方法还包括以下步骤:
根据公式计算背景音频帧中的采样电平个数,其中,Tf以毫秒为单位,SR为音频采样率。
在本实施例中,音频采样率可以在采集电梯轿厢内部的背景音频数据时得到,根据上述公式可以快速计算出背景音频帧中的采样电平个数。
在其中一个实施例中,根据当前音频数据计算当前音频帧的短时电平变化量的步骤包括以下步骤:
根据公式计算当前音频帧的短时电平变化量;
式中,L为当前音频帧的短时电平变化量,K′为当前音频帧中的采样电平个数,Pn′+1、Pn′为当前音频帧中的采样电平值。
在本实施例中,当前音频帧中的采样电平个数、采样电平值可以在采集电梯轿厢内部的当前音频数据时得到,上述公式计算过程简单,可以快速得到当前音频帧的短时电平变化量。
在其中一个实施例中,采集电梯轿厢内部的当前音频数据的步骤与根据当前音频数据计算当前音频帧的短时电平变化量的步骤并行执行。
在本实施例中,采集电梯轿厢内部的当前音频数据时可以得到多个当前音频帧,计算短时电平变化量时也是针对多个当前音频帧,在得到一个当前音频帧后就可以计算其短时电平变化量,因此,采集电梯轿厢内部的当前音频数据的步骤与根据当前音频数据计算当前音频帧的短时电平变化量的步骤可以并行执行,如此可以缩短对音频数据的处理时间,提高音频处理效率。
在其中一个实施例中,判定发生电梯困人事件的步骤之后还包括以下步骤:
输出电梯困人报警信号。
在本实施例中,在判定发生电梯困人事件后,可以输出电梯困人报警信号,提醒电梯运维人员及时进行处理。还可以将电梯困人报警信号发送至对应电梯运维人员的移动终端,便于不在现场的电梯运维人员及时知晓电梯状况。
在其中一个实施例中,在累计的音频帧数小于第二阈值时,根据电梯轿厢的图像判断是否发生电梯困人事件;
根据电梯轿厢的图像判断是否发生电梯困人事件的步骤包括:
在电梯处于空闲待召状态时,获取电梯轿厢内部的背景图像;
在本步骤中,空闲待召状态是指电梯正常运行时停留在某一楼层,而且电梯没有收到内部的召唤指令和外部的召唤指令的状态,在此状态下,没有人员在电梯轿厢内部,因此可以获取电梯轿厢内部的背景图像;
确定背景图像中的静态像素点位置;
在本步骤中,电梯轿厢内部可能安装有多媒体设备,背景图像中就可能包含多媒体设备播放的画面,该画面是动态显示的,确定的静态像素点位置就不包括多媒体设备播放的画面像素点位置,起到区分隔离的作用;
在电梯处于故障状态时,获取电梯轿轿厢内部的当前图像,其中,背景图像的获取方位和当前图像的获取方位相同,当前图像中的各像素点与背景图像中的各像素点一一对应;
在本步骤中,故障状态是指电梯出现运行故障且电梯梯门关闭的状态,背景图像和当前图像的获取方位相同,当前图像中的各像素点与背景图像中的各像素点一一对应,是指从同一位置获取背景图像和当前图像,背景图像和当前图像的大小相同;
对当前图像中的各像素点的像素值与背景图像中对应的各像素点的像素值进行差分处理,得到差分图像;
在本步骤中,差分图像与当前图像、背景图像的大小相同。
获取差分图像中的目标像素点,其中,目标像素点在差分图像中的位置与静态像素点位置相对应;
在本步骤中,目标像素点相当于差分图像中的静态像素点;
确定目标像素点中像素值大于或等于第一阈值的各待用像素点,计算所有待用像素点所在区域的区域面积,在区域面积大于第二阈值时,判定发生电梯困人事件。
在本实施例中,通过音频无法确定是否发生电梯困人事件时,可以利用电梯轿厢的图像进行辅助判断。先在电梯处于空闲待召状态时,获取电梯轿厢内部的背景图像并确定其中的静态像素点位置,再在在电梯处于故障状态时,获取电梯轿轿厢内部的当前图像,对背景图像和当前图像的像素值进行差分处理,得到差分图像,根据静态像素点位置和第一阈值在差分图像中选取各待用像素点,在待用像素点所在区域面积大于第二阈值时判定发生电梯困人事件。在此方案中,背景图像的静态部分中不会显示人员,在电梯处于故障状态时,若电梯内有人员,当前图像中会显示人员,差分图像中包含了当前图像与背景图像的像素点的像素值差异,通过差分图像中满足像素值差异条件的像素点可以确定故障电梯中是否有人,即可以检测电梯困人事件,利用背景图像确定静态像素点位置,通过静态像素点位置选取差分图像中的待用像素点,可以剔除差分图像中包含的多媒体设备的播放画面信息,排除影响判断电梯困人事件的重要因素,从而提高电梯困人事件检测的准确性。
可选的,采集电梯轿厢内部的背景音频数据的步骤和获取电梯轿厢内部的背景图像的步骤可以并行执行,采集电梯轿厢内部的当前音频数据的步骤和获取电梯轿轿厢内部的当前图像的步骤可以并行执行。
可选的,电梯困人事件的检测方法还可以包括以下步骤:在获取电梯轿厢内部的背景图像的步骤之后开始计时,若超过预设时间,重新获取背景图像。电梯使用过程中,电梯轿厢内部的环境会发生改变,例如在电梯轿厢内壁上张贴海报,或者改变电梯轿厢内壁上的多媒体设备的大小或位置,在距离上一次获取背景图像超过预设时间进行重新获取,可以保证背景图像的实时性,与获取的当前图像相适应;
可选的,判定发生电梯困人事件的步骤之后还可以包括以下步骤:输出电梯困人报警信号。报警信号可以提醒电梯运维人员采取措施,及时对电梯困人事件进行处理;
可选的,像素点的像素值可以为像素点的灰度值、饱和度值或亮度值等,在电梯困人事件的整个检测过程中,可以选择其中一种进行处理。
在其中一个实施例中,像素值为灰度值,获取电梯轿厢内部的背景图像的步骤包括以下步骤:
多次拍摄电梯轿厢内部的初始场景,得到多张初始图像,将多张初始图像转换为多张第一灰度图像,计算所有第一灰度图像中同一位置的像素点的灰度均值,根据所有像素点的灰度均值得到灰度均值图像,灰度均值图像为背景图像。
在本实施例中,选择像素值为灰度值进行处理,拍摄得到的初始图像中包括多种图像信息,利用其中的灰度信息就可以将有人时的电梯轿厢内部图像与无人时的电梯轿厢内部图像区分,而且可以简化对图像的处理过程,对初始场景进行多次拍摄,计算第一灰度图像中同一位置的像素点的灰度均值,可以减小灰度误差以及噪音的影响。
在其中一个实施例中,确定背景图像中的静态像素点位置的步骤包括以下步骤:
按照拍摄的先后顺序,依次计算相邻两张第一灰度图像中同一位置的像素点的第一灰度变化量;
针对多张第一灰度图像中的同一位置,获取该位置的像素点的所有第一灰度变化量的和值,在和值小于第一阈值时,判定该位置为静态像素点位置。
在本实施例中,第一灰度变化量表示相邻两张第一灰度图像中同一位置的像素点的灰度差异,在电梯轿厢内部环境中,多媒体设备的播放画面处于动态变化状态,相邻两张第一灰度图像中对应多媒体设备的播放画面的位置的像素点的灰度差异较大,而其他的位置一般处于静态,考虑到误差和噪音,相邻两张第一灰度图像中对应其他位置的灰度差异较小,通过灰度差异可以区分第一灰度图像中的静态像素点和动态像素点,也就可以确定第一灰度图像的静态像素点位置。将多张第一灰度图像中同一位置的所有第一灰度变化量的和值作为判断静态像素点位置的依据,可以扩大静态像素点和动态像素点的灰度差异,提高确定静态像素点时的准确性。
在其中一个实施例中,电梯困人事件的检测方法还包括以下步骤:
确定和值大于或等于第一阈值的各待选像素点,对所有待选像素点进行连通区域检测,获取第一连通区域,计算第一连通区域的面积;
在第一连通区域的面积小于第三阈值时,判定第一连通区域中的各待选像素点的位置为静态像素点位置。
在本实施例中,和值大于或等于第一阈值的各待选像素点中不一定都属于多媒体设备画面,有可能是因为图像噪音而使本应是静态像素点的所有第一灰度变化量的和值大于或等于第一阈值,但其特点是一般都是离散的像素点,与拍摄到的多媒体设备画面像素点组成一个连通区域是不同的,因此,通过对对所有待选像素点进行连通区域检测,将连通区域满足条件的其中的各待选像素点的位置为静态像素点位置,可以消除图像噪音的影响,确定的静态像素点位置更加准确。
在其中一个实施例中,计算所有待用像素点所在区域的区域面积的步骤包括以下步骤:
对所有待用像素点进行连通区域检测,获取第二连通区域,计算第二连通区域的面积,区域面积为第二连通区域的面积。
在本实施例中,由于当前图像和背景图像是分别拍摄的,因此,当前图像中也可能有不同于背景图像的图像噪音,使本应不属于电梯轿厢内人员的待用像素点的像素值大于或等于第一阈值,但其特点是一般都是离散的像素点,与拍摄到的人员画面像素点组成一个连通区域是不同的,因此,通过对对所有待用像素点进行连通区域检测,将连通区域的面积作为区域面积,进行后续的电梯困人事件判断,进一步提高电梯困人事件检测的准确性。
在其中一个实施例中,对所有待选像素点进行连通区域检测的步骤包括以下步骤:
赋予所有待选像素点最高灰度值,在背景图像中对最高像素值的像素点进行连通区域检测;
对所有待用像素点进行连通区域检测的步骤包括以下步骤:
赋予所有待用像素点最高灰度值,在差分图像中对最高像素值的像素点进行连通区域检测。
在本实施例中,在进行连通区域检测之前,可以赋予用作连通区域检测对象的各像素点最高灰度值,如此用作连通区域检测对象的灰度值相同,而且可以与其他像素点明显区分,有利于加快连通区域检测的处理过程。
可选的,当所选用的像素值是其他类型时,可以采用对应像素值类型的最大值。
在其中一个实施例中,获取电梯轿轿厢内部的当前图像的步骤包括以下步骤:
拍摄电梯轿轿厢内部的当前场景,得到目标图像,将目标图像转换为第二灰度图像,第二灰度图像为当前图像;
对当前图像中的各像素点的像素值与背景图像中对应的各像素点的像素值进行差分处理,得到差分图像的步骤包括以下步骤:
计算当前图像和背景图像中同一位置像素点的第二灰度变化量,根据所有像素点的第二灰度变化量得到差分图像。
在本实施例中,在拍摄电梯轿轿厢内部的当前场景后,将拍摄到的目标图像转换为第二灰度图像,可以直接利用第二灰度图像和表示背景的灰度均值图像进行处理,从而得到差分图像,相比于差分处理时,单独计算每个像素点的灰度值,再与表示背景的灰度均值图像中的像素点的灰度值进行差分处理,本方案统一获取目标图像的所有像素点的灰度值,处理流程更加简洁,降低处理过程的复杂性。
可选的,判定发生电梯困人事件的步骤之后还可以包括以下步骤:保存目标图像。目标图像可以便于电梯运维人员确认电梯故障时电梯轿厢内的人员情况。
根据上述电梯困人事件的检测方法,本发明还提供一种电梯困人事件的检测***,以下就本发明的电梯困人事件的检测***的实施例进行详细说明。
参见图2所示,为本发明一个实施例的电梯困人事件的检测***的结构示意图。该实施例中的电梯困人事件的检测***包括:
背景音频获取单元210,用于在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据,根据背景音频数据计算背景音频帧的短时电平变化量;
当前音频获取单元220,用于在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据,根据当前音频数据计算当前音频帧的短时电平变化量;
音频处理单元230,用于获取当前音频帧的短时电平变化量与背景音频帧的短时电平变化量的差值;累计差值大于等于第一阈值的当前音频帧数;
事件判定单元240,用于在累计的当前音频帧数大于等于第二阈值时,判定发生电梯困人事件。
在其中一个实施例中,采集的背景音频数据和当前音频数据的采样参数类型相同,采样参数类型包括音频帧时长、音频采样总时长和音频帧中采样电平个数。
在其中一个实施例中,音频处理单元230在累计的当前音频帧数小于第二阈值时,获取当前音频采样总时长;在当前音频采样总时长超过预设时长时,将累计的当前音频帧数清零。
在其中一个实施例中,背景音频获取单元210根据背景音频数据计算背景音频帧中相邻两个音频数据的短时电平变化量,并根据背景音频帧中所有短时电平变化量计算背景音频帧的短时电平平均变化量;
音频处理单元230获取当前音频帧的短时电平变化量与背景音频帧的短时电平平均变化量的差值。
在其中一个实施例中,背景音频获取单元210根据公式计算背景音频帧的短时电平平均变化量;式中,Lb为背景音频帧的短时电平平均变化量,Tf为背景音频帧时长,Tt为背景音频采样总时长,K为背景音频帧中的采样电平个数,Pn+1、Pn分别为背景音频帧中的采样电平值。
在其中一个实施例中,背景音频获取单元210根据公式计算背景音频帧中的采样电平个数,其中,Tf以毫秒为单位,SR为音频采样率。
在其中一个实施例中,当前音频获取单元220根据公式 计算当前音频帧的短时电平变化量;式中,L为当前音频帧的短时电平变化量,K′为当前音频帧中的采样电平个数,Pn′+1、Pn′分别为当前音频帧中的采样电平值。
在其中一个实施例中,当前音频获取单元220并行执行采集电梯轿厢内部的当前音频数据的步骤与根据当前音频数据计算当前音频帧的短时电平变化量的步骤。
在其中一个实施例中,如图3所示,电梯困人事件的检测***还包括背景获取单元250、静态确定单元260、图像获取单元270、差分处理单元280和静态处理单元290;
背景获取单元250,用于在电梯处于空闲待召状态时,获取电梯轿厢内部的背景图像;
静态确定单元260,用于确定背景图像中的静态像素点位置;
图像获取单元270,用于在电梯处于故障状态时,获取电梯轿轿厢内部的当前图像,其中,背景图像的获取方位和当前图像的获取方位相同,当前图像中的各像素点与背景图像中的各像素点一一对应;
差分处理单元280,用于对当前图像中的各像素点的像素值与背景图像中对应的各像素点的像素值进行差分处理,得到差分图像;
静态处理单元290,用于获取差分图像中的目标像素点,其中,目标像素点在差分图像中的位置与静态像素点位置相对应;确定目标像素点中像素值大于或等于第一阈值的各待用像素点,计算所有待用像素点所在区域的区域面积;
事件判定单元240在第一连通区域的面积大于第二阈值时,判定发生电梯困人事件。
在其中一个实施例中,像素值为灰度值,背景获取单元250多次拍摄电梯轿厢内部的初始场景,得到多张初始图像,将多张初始图像转换为多张第一灰度图像,计算所有第一灰度图像中同一位置的像素点的灰度均值,根据所有像素点的灰度均值得到灰度均值图像,灰度均值图像为背景图像。
在其中一个实施例中,静态确定单元260按照拍摄的先后顺序,依次计算相邻两张第一灰度图像中同一位置的像素点的第一灰度变化量;
针对多张第一灰度图像中的同一位置,获取该位置的像素点的所有第一灰度变化量的和值,在和值小于第一阈值时,判定该位置为静态像素点位置。
在其中一个实施例中,静态确定单元260确定和值大于或等于第一阈值的各待选像素点,对所有待选像素点进行连通区域检测,获取第一连通区域,计算第一连通区域的面积;在第一连通区域的面积小于第三阈值时,判定第一连通区域中的各待选像素点的位置为静态像素点位置。
在其中一个实施例中,静态处理单元290对所有待用像素点进行连通区域检测,获取第二连通区域,计算第二连通区域的面积,区域面积为第二连通区域的面积。
在其中一个实施例中,静态确定单元260赋予所有待选像素点最高像素值,在背景图像中对最高像素值的像素点进行连通区域检测;
静态处理单元290赋予所有待用像素点最高像素值,在差分图像中对最高像素值的像素点进行连通区域检测。
在其中一个实施例中,图像获取单元270拍摄电梯轿轿厢内部的当前场景,得到目标图像,将目标图像转换为第二灰度图像,第二灰度图像为当前图像;
差分处理单元280计算当前图像和背景图像中同一位置像素点的第二灰度变化量,根据所有像素点的第二灰度变化量得到差分图像。
本发明的电梯困人事件的检测***与本发明的电梯困人事件的检测方法一一对应,在上述电梯困人事件的检测方法的实施例阐述的技术特征及其有益效果均适用于电梯困人事件的检测***的实施例中。
根据上述电梯困人事件的检测方法,本发明实施例还提供一种可读存储介质和一种检测设备。可读存储介质上存储有可执行程序,该程序被处理器执行时实现上述电梯困人事件的检测方法的步骤;检测设备包括存储器、处理器及存储在存储器上并可在处理器上运行的可执行程序,处理器执行程序时实现上述电梯困人事件的检测方法的步骤。
在一个具体的实施例中,如图4所示,电梯困人事件的检测方法可以是一种基于图像与声音结合进行电梯困人事件的检测方法,具有准确性高、运算量小、实时性强的特点。
首先,针对音频处理方面,正常情况下,电梯轿厢内部是个比较安静的封闭空间,当发生困人事件时,往往被困人会发出声音进行呼喊或拍打电梯门,因此,如果我们检测到有声音,则可以判定电梯内困人。本方法的应用场景并不需要进行语音识别,为了计算简便,采用短时电平变化量进行音频检测。
为了使音频检测更为准确,同样在电梯空闲待召时进行背景音频采集,采集5~10秒音频,然后计算背景音频短时电平平均变化量Lb,计算公式:
式中,Lb是短时电平平均变化量,Tf是音频帧时长,Tt是指背景音采样总时长,K是指音频帧数据个数,与音频采样率相关,P是指音频数据,即采样电平值。K值由Tf及采样率R决定,如下:
式中,1000是指1000毫秒,Tf为音频帧时长,通常为20ms,SR为采样率,可以为8KHz,16KHz等等。采样时采用单声道采样。
当电梯发生故障且梯门关闭或需要进行音频检测时,进入音频检测流程,流程图如图5所示:
音频采样与音频分析并行执行,采样参数与采集背景音频时相同。
以音频帧为单位计算短时电平变化量,计算公式如下:
式中,L是指短时电平变化量,K是指音频帧数据个数,与音频采样率相关,P是指音频数据,即采样电平值。
计算当前音频帧电平变化量与背景音频短时平均电平变化量的差值L–Lb,如果L–Lb大于等于Lt,则C+1。其中Lt是电平变化量阈值,根据经验设置,C是L–Lb>=Lt的计数器。
如果C>=Ct,则判定为有人并退出流程,否则检查是否超时,超时则C重置0,未超时检测下一音频帧,当检测时间超过最大检测时间时,流程退出。Ct是计数阈值,根据经验设置。
其次,在声音检测电梯困人事件时可以采用图像进行辅助检测。针对图像处理方面,由于电梯轿厢是封闭的空间,采用的是内部照明***,因此,通常情况下电梯轿厢的环境是稳定的,对于电梯轿厢内安装在固定位置的摄像头来说,拍摄的背景也是固定的。但是,由于现在电梯广告的流行,电梯内往往存在一些广告海报,在某些电梯内可能还会安装有多媒体LCD,因此,还必须对这些情况进行相应的处理。对于广告海报,由于是静态的图像,一旦安装好短时间内便不会有变动,而多媒体LCD则在不停地播放视频,图像不断变化,会给后续的检测带来一定的影响。本方法生成确定图像变化较大的区域,并对该区域进行标记,从而降低图像变化较大的区域对后续检测带来的不利影响。
(1)背景图像的处理流程图如图6所示。
背景图像生成动作是在距离上次背景图像生成超过一段时间后才启动,且只在电梯正常空闲待召状态下进行。空闲待召状态是指电梯正常停在某个楼层,且没有内召和外召的状态。
当检测到空闲待召状态后,开始进行背景图像生成过程。首先,初始化背景掩模矩阵M,M的主要作用是标识在背景图像中哪些部分是动态图像,在后续的人物检测中进行特殊处理。背景掩模M采用与背景图像相同维度的数组表示,初始化时全部填充0。
控制摄像头以1秒为间隔连接拍摄5-10张图像,并将拍摄的所有图像转为灰度图像,记为G1,G2,……,Gn,其中G维度与M维度相同。
统计所有灰度图像G各像素的灰度变化量并存入M,采用以下公式:
其中,M(x,y)表示在坐标(x,y)处的灰度变化量,G(x,y)表示各图像在坐标(x,y)处的灰度值。
采用矩阵计算则有:
其中M是背景掩模矩阵,G是各图像相应的灰度矩阵。
各像素灰度变化量确定后,对M进行二值化处理,对于变化度大于等于阈值的像素点置255,小于的则置0。
其中T是灰度变化量阈值,根据经验进行设置。
对M进行灰度值为255的连通区域检测,如果连通区域面积小于阈值,则将该区域灰度值置为0。
统计G各像素点灰度均值生成背景图像B,维度与G相同。公式如下:
保存背景掩模M及背景图像B。
(2)人物检测。
当电梯发生故障且梯门关闭时,电梯内可能会困人事件,进入人物检测过程,流程图如图7所示。
当电梯发生故障且梯门未打开,则控制摄像头拍摄一张轿厢内照片,并将照片转为灰度图像G。
将G与B进行差分,即相减,生成差分图像D。
公式:D=|G–B|
对差分图像D进行二值化处理,处理时结合背景掩模矩阵M进行处理。
对差分图像D进行连通区域检测并截取连通区域,如果连通区域面积大于阈值,则判断为有人。
如果电梯内有人,则输出困人报警信号。
保存电梯轿厢内照片。
本方法可以利用电梯内已安装的摄像头及对讲设备实现,且不会长时间占用设备;直接采用拍照实现,避免了视频的解码过程及由于视频编码而产生的图像信息丢失问题;计算简单,运算量小,实时性强,能够在低配置的嵌入式平台实现;能够保存电梯困人时的轿厢内部图像资料。
以上所述实施例的各技术特征可以进行任意的组合,为使描述简洁,未对上述实施例中的各个技术特征所有可能的组合都进行描述,然而,只要这些技术特征的组合不存在矛盾,都应当认为是本说明书记载的范围。
本领域普通技术人员可以理解实现上述实施例方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成。所述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,包括上述方法所述的步骤。所述的存储介质,包括:ROM/RAM、磁碟、光盘等。
以上所述实施例仅表达了本发明的几种实施方式,其描述较为具体和详细,但并不能因此而理解为对发明专利范围的限制。应当指出的是,对于本领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干变形和改进,这些都属于本发明的保护范围。因此,本发明专利的保护范围应以所附权利要求为准。
Claims (10)
1.一种电梯困人事件的检测方法,其特征在于,包括以下步骤:
在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据,根据所述背景音频数据计算背景音频帧的短时电平变化量;
在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据,根据所述当前音频数据计算当前音频帧的短时电平变化量;
获取所述当前音频帧的短时电平变化量与所述背景音频帧的短时电平变化量的差值;
累计所述差值大于等于第一阈值的当前音频帧数;
在累计的当前音频帧数大于等于第二阈值时,判定发生电梯困人事件。
2.根据权利要求1所述的电梯困人事件的检测方法,其特征在于,采集的背景音频数据和当前音频数据的采样参数类型相同,所述采样参数类型包括音频帧时长、音频采样总时长和音频帧中采样电平个数。
3.根据权利要求1所述的电梯困人事件的检测方法,其特征在于,还包括以下步骤:
在累计的当前音频帧数小于第二阈值时,获取当前音频采样总时长;
在所述当前音频采样总时长超过预设时长时,将累计的当前音频帧数清零。
4.根据权利要求2所述的电梯困人事件的检测方法,其特征在于,根据所述背景音频数据计算背景音频帧的短时电平变化量的步骤包括以下步骤:
根据所述背景音频数据计算背景音频帧中相邻两个音频数据的短时电平变化量,并根据所述背景音频帧中所有短时电平变化量计算所述背景音频帧的短时电平平均变化量;
所述获取所述当前音频帧的短时电平变化量与所述背景音频帧的短时电平变化量的差值的步骤包括以下步骤:
获取所述当前音频帧的短时电平变化量与所述背景音频帧的短时电平平均变化量的差值。
5.根据权利要求4所述的电梯困人事件的检测方法,其特征在于,所述根据所述背景音频帧中所有短时电平变化量计算所述背景音频帧的短时电平平均变化量的步骤包括以下步骤:
根据公式计算所述背景音频帧的短时电平平均变化量;
式中,Lb为背景音频帧的短时电平平均变化量,Tf为背景音频帧时长,Tt为背景音频采样总时长,K为背景音频帧中的采样电平个数,Pn+1、Pn分别为背景音频帧中的采样电平值。
6.根据权利要求5所述的电梯困人事件的检测方法,其特征在于,还包括以下步骤:
根据公式计算所述背景音频帧中的采样电平个数,其中,Tf以毫秒为单位,SR为音频采样率。
7.根据权利要求2所述的电梯困人事件的检测方法,其特征在于,所述根据所述当前音频数据计算当前音频帧的短时电平变化量的步骤包括以下步骤:
根据公式计算所述当前音频帧的短时电平变化量;
式中,L为所述当前音频帧的短时电平变化量,K′为当前音频帧中的采样电平个数,Pn′+1、Pn′分别为当前音频帧中的采样电平值。
8.根据权利要求1至7中任意一项所述的电梯困人事件的检测方法,其特征在于,所述采集电梯轿厢内部的当前音频数据的步骤与所述根据所述当前音频数据计算当前音频帧的短时电平变化量的步骤并行执行。
9.一种电梯困人事件的检测***,其特征在于,包括:
背景音频获取单元,用于在电梯处于空闲待召状态时,采集电梯轿厢内部的背景音频数据,根据所述背景音频数据计算背景音频帧的短时电平变化量;
当前音频获取单元,用于在电梯处于故障状态时,采集电梯轿厢内部的当前音频数据,根据所述当前音频数据计算当前音频帧的短时电平变化量;
音频处理单元,用于获取所述当前音频帧的短时电平变化量与所述背景音频帧的短时电平变化量的差值;累计所述差值大于等于第一阈值的当前音频帧数;
事件判定单元,用于在累计的当前音频帧数大于等于第二阈值时,判定发生电梯困人事件。
10.一种可读存储介质,其上存储有可执行程序,其特征在于,该程序被处理器执行时实现权利要求1至8中任意一项所述的电梯困人事件的检测方法的步骤。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710561698.8A CN107487677B (zh) | 2017-07-11 | 2017-07-11 | 电梯困人事件的检测方法和*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201710561698.8A CN107487677B (zh) | 2017-07-11 | 2017-07-11 | 电梯困人事件的检测方法和*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN107487677A true CN107487677A (zh) | 2017-12-19 |
CN107487677B CN107487677B (zh) | 2019-10-29 |
Family
ID=60644425
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201710561698.8A Active CN107487677B (zh) | 2017-07-11 | 2017-07-11 | 电梯困人事件的检测方法和*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN107487677B (zh) |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109292570A (zh) * | 2018-10-16 | 2019-02-01 | 宁波欣达(集团)有限公司 | 一种电梯物联网技术检测电梯困人的***及方法 |
CN111653286A (zh) * | 2019-12-31 | 2020-09-11 | 广州励丰文化科技股份有限公司 | 一种音频信号的热备份方法及音频设备 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2824056A1 (de) * | 2013-07-10 | 2015-01-14 | Inventio AG | Vandalensicherung einer Aufzugsanlage |
CN104340792A (zh) * | 2013-07-26 | 2015-02-11 | 重庆厚齐科技有限公司 | 电梯多媒体安全监控*** |
CN104925614A (zh) * | 2015-06-26 | 2015-09-23 | 广州日滨科技发展有限公司 | 一种电梯困人故障监控*** |
JP2017001763A (ja) * | 2015-06-04 | 2017-01-05 | 株式会社日立ビルシステム | 遠隔監視システム |
CN106395532A (zh) * | 2016-11-14 | 2017-02-15 | 广州日滨科技发展有限公司 | 一种电梯数据采集方法及装置 |
JP2017114652A (ja) * | 2015-12-25 | 2017-06-29 | 東芝エレベータ株式会社 | 保守作業安全装置及びエレベータの保守点検方法 |
-
2017
- 2017-07-11 CN CN201710561698.8A patent/CN107487677B/zh active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP2824056A1 (de) * | 2013-07-10 | 2015-01-14 | Inventio AG | Vandalensicherung einer Aufzugsanlage |
CN104340792A (zh) * | 2013-07-26 | 2015-02-11 | 重庆厚齐科技有限公司 | 电梯多媒体安全监控*** |
JP2017001763A (ja) * | 2015-06-04 | 2017-01-05 | 株式会社日立ビルシステム | 遠隔監視システム |
CN104925614A (zh) * | 2015-06-26 | 2015-09-23 | 广州日滨科技发展有限公司 | 一种电梯困人故障监控*** |
JP2017114652A (ja) * | 2015-12-25 | 2017-06-29 | 東芝エレベータ株式会社 | 保守作業安全装置及びエレベータの保守点検方法 |
CN106395532A (zh) * | 2016-11-14 | 2017-02-15 | 广州日滨科技发展有限公司 | 一种电梯数据采集方法及装置 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN109292570A (zh) * | 2018-10-16 | 2019-02-01 | 宁波欣达(集团)有限公司 | 一种电梯物联网技术检测电梯困人的***及方法 |
CN111653286A (zh) * | 2019-12-31 | 2020-09-11 | 广州励丰文化科技股份有限公司 | 一种音频信号的热备份方法及音频设备 |
Also Published As
Publication number | Publication date |
---|---|
CN107487677B (zh) | 2019-10-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN107324166B (zh) | 电梯困人事件的检测方法、***、可读存储介质和设备 | |
CN106951346B (zh) | 一种响应时间的测试方法和装置 | |
CN101938691B (zh) | 多模态邻近度检测 | |
US10600189B1 (en) | Optical flow techniques for event cameras | |
CN109726620B (zh) | 一种视频火焰检测方法及装置 | |
EP4300417A1 (en) | Method and apparatus for evaluating image authenticity, computer device, and storage medium | |
CN110647822A (zh) | 高空抛物行为识别方法、装置、存储介质及电子设备 | |
CN105141853A (zh) | 图像处理方法以及电子设备 | |
US8365871B2 (en) | Electronic device and method for monitoring an elevator | |
CN112183449B (zh) | 一种驾驶员身份验证方法、装置、电子设备及存储介质 | |
CN115845350B (zh) | 一种用于立定跳远自动测距的方法及*** | |
CN110189355A (zh) | 安全疏散通道占用检测方法、装置、电子设备及存储介质 | |
CN107146252A (zh) | 一种大数据图像处理装置 | |
CN107487677A (zh) | 电梯困人事件的检测方法和*** | |
CN114387548A (zh) | 视频及活体检测方法、***、设备、存储介质及程序产品 | |
CN114882251A (zh) | 一种物联网大数据智能视频安防监控方法及装置 | |
CN109348206A (zh) | 图像白平衡处理方法、装置、存储介质及移动终端 | |
CN109815839A (zh) | 微服务架构下的徘徊人员识别方法及相关产品 | |
CN112607542B (zh) | 电梯控制方法、装置、计算机设备和存储介质 | |
CN110674728A (zh) | 基于视频图像识别玩手机方法、装置、服务器及存储介质 | |
CN113395599B (zh) | 一种视频处理方法、装置、电子设备及介质 | |
CN113298753A (zh) | 敏感肌的检测方法、图像处理方法、装置及设备 | |
KR20230001005A (ko) | 반점 예측 방법, 장치, 장비 및 저장 매체 | |
CN111476086A (zh) | 烟火识别方法、装置、计算机设备和可读存储介质 | |
CN107784665B (zh) | 一种动态物体跟踪方法和*** |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB02 | Change of applicant information |
Address after: Nanxiang three road, Science City high tech Industrial Development Zone, Guangzhou city of Guangdong Province, No. 2 510660 Applicant after: Hitachi building technologies (Guangzhou) Co. Ltd. Address before: Nanxiang Road three Guangzhou Science City 510660 high tech Industrial Development Zone, Guangdong city of Guangzhou province No. 2 Applicant before: Guangzhou Ropente Science and Technology Development Co., Ltd. |
|
CB02 | Change of applicant information | ||
GR01 | Patent grant | ||
GR01 | Patent grant |