CN109142176B - 基于空间联系的烟雾子区域空间复检方法 - Google Patents

Abstract

一种基于空间联系的烟雾子区域空间复检方法，对已经判断为油烟的子区域进行处理，将每个油烟子区域作为复检目标子区域进行干扰判定，将复检目标子区域中的孤点区域作为噪声干扰排除，剩余的复检目标子区域作为复检后的最终油烟子区域。其中，孤点区域包括绝对孤点区域和相对孤点区域。绝对孤点区域是指一个复检目标子区域的周围没有其它的复检目标子区域。在由多个复检目标子区域构成的连续区域中，任何一个与除其之外的其它复检目标子区域之间的间隔大于异常阈值的复检目标子区域判定为相对孤点子区域。本发明能够排除小物体干扰，提高油烟检测的准确性。

Description

基于空间联系的烟雾子区域空间复检方法

技术领域

本发明涉及厨房油烟处理技术领域，特别是涉及一种基于空间联系的烟雾子区域空间复检方法。

背景技术

厨房是居家必备的配置之一，厨房油烟处理的效果直接影响人们的生活品质。随着科技的不断发展，对厨房油烟的监控及处理手段也越来越多。继传统的抽油烟机设置几个抽吸档位后，还出现了对厨房油烟浓度进行检测等技术。

现有技术中，针对厨房油烟浓度的检测，主要有红外投射法和物理检测法。红外投射法通过一端发射红外光，另一端进行接收，通过接收到的红外光强度来判断油烟浓度大小。但是，由于油烟飘散具有不确定性，实际中还会存在人手遮挡等干扰，故，需在不同位置安装多个红外发射器才能保证油烟检测的相对准确，成本较高，对安装位置要求也较高。物理检测法类似于烟雾报警器的原理，通过检测空气中漂浮颗粒数来判断油烟浓度，但此法有两个缺点，一是必须当油烟接触到报警器时才能进行检测，不能实现远距离检测；二是当空气中飘浮的不是油烟而是水雾时就无法检测。

因此，申请人通过对油烟图像进行检测判断油烟区域，再对图像进行处理后得到油烟子区域，但是，此判断方法仍然不能满足申请人对油烟区域更高程度精确划分的要求，故研发出了一种基于空间联系的烟雾子区域空间复检方法对初步判断得到的油烟子区域进行复检，排除噪声干扰。

发明内容

本发明的目的在于避免现有技术的不足之处而提供一种基于空间联系的烟雾子区域空间复检方法，以对初步判断得到的油烟子区域进行复检，排除噪声干扰。

本发明的目的通过以下技术措施实现。

提供一种基于空间联系的烟雾子区域空间复检方法，对已经判断为油烟的子区域进行处理，将每个油烟子区域作为复检目标子区域进行干扰判定，将复检目标子区域中的孤点区域作为噪声干扰排除，剩余的复检目标子区域作为复检后的最终油烟子区域。

进一步的，孤点区域包括绝对孤点区域和相对孤点区域。

进一步的，所述绝对孤点区域是指一个复检目标子区域的周围没有其它的复检目标子区域。

进一步的，所述的基于空间联系的烟雾子区域空间复检方法，

成像设备采集的含有油烟信息的初始图像为对应灶台目标区域S的成像，将初始图像分割成W*U个子区域§，W、U均为自然数，初始图像中第w行、第u列对应子区域§_w,u,1≤w≤W，1≤u≤U；

判断绝对孤点区域的方法如下：

提取待判断的复检目标子区域§_λ，γ所在的行列坐标(λ，γ)，

判断是否存在复检目标子区域§_λ+1，γ或复检目标子区域§_λ-1，γ或复检目标子区域§_λ，γ+1或复检目标子区域§_λ，γ-1；

如果存在，则判断复检目标子区域§_λ，γ不是绝对孤点区域，如果不存在，则判断复检目标子区域§_λ，γ是绝对孤点区域并作为噪声干扰排除。

进一步的，在由多个复检目标子区域构成的连续区域中，任何一个与除其之外的其它复检目标子区域之间的间隔大于异常阈值的复检目标子区域判定为相对孤点子区域；

连续区域是指构成连续区域的多个复检目标子区域中，任意一个复检目标子区域至少与另外一个复检目标子区域相邻。

进一步的，连续区域Ψ由θ个复检目标子区域构成，分别为复检目标子区域§_λ1，γ1、复检目标子区域§_λ2，γ2、......、复检目标子区域§_λθ，γθ，θ为不小于2的自然数；

判断连续区域Ψ中相对孤点子区域的过程如下：

提取构成连续区域Ψ的θ个复检目标子区域的行列坐标(λ1，γ1)、(λ2，γ2)、......、(λθ，γθ)；

对每个复检目标子区域的行列坐标，分别判断是否存在其他复检目标子区域的行列坐标满足异常阈值条件，如果存在至少一个满足异常阈值条件的其他复检目标子区域，则判断当前的复检目标子区域为相对孤点子区域，进行排除；否则判断当前的复检目标子区域不是孤点子区域，为油烟子区域。

进一步的，异常阈值条件判断具体是：

将其他复检目标子区域中的每个复检目标子区域的行坐标与目标复检子区域的行坐标做差得到行坐标的差值绝对值、将其他复检目标子区域中的每个复检目标子区域的列坐标与目标子区域的列坐标做差得到列坐标的差值绝对值；

一个其它复检目标子区域中，如果同时满足行坐标的差值绝对值和列坐标的差值绝对值同时大于异常阈值，则判定该其它目标子区域满足异常阈值条件，否则判定为不满足异常阈值条件。

优选的，异常阈值为大于1且小于6的自然数。

优选的，异常阈值为2或3。

本发明的基于空间联系的烟雾子区域空间复检方法，对初步判断得到的油烟子区域进行复检，能够排除小物体干扰，提高油烟检测的准确性。

说明书附图

利用附图对本发明作进一步的说明，但附图中的内容不构成对本发明的任何限制。

图1是实施例3的方法分割的油烟区域和干扰区域的示意图。

具体实施方式

结合以下实施例对本发明作进一步说明。

实施例1。

一种基于空间联系的烟雾子区域空间复检方法，对已经判断为油烟的子区域进行处理，将每个油烟子区域作为复检目标子区域进行干扰判定，将复检目标子区域中的孤点区域作为噪声干扰排除，剩余的复检目标子区域作为复检后的最终油烟子区域。

其中，孤点区域包括绝对孤点区域和相对孤点区域。

绝对孤点区域是指一个复检目标子区域的周围没有其它的复检目标子区域。

本发明基于空间联系的烟雾子区域空间复检方法，以预先处理得到的油烟子区域为对象。成像设备采集的含有油烟信息的初始图像为对应灶台目标区域S的成像，将初始图像分割成W*U个子区域§，W、U均为自然数，初始图像中第w行、第u列对应子区域§_w,u,1≤w≤W，1≤u≤U。

判断绝对孤点区域的方法如下：

提取待判断的复检目标子区域§_λ，γ所在的行列坐标(λ，γ)，

判断是否存在复检目标子区域§_λ+1，γ或复检目标子区域§_λ-1，γ或复检目标子区域§_λ，γ+1或复检目标子区域§_λ，γ-1；

如果存在，则判断复检目标子区域§_λ，γ不是绝对孤点区域，如果不存在，则判断复检目标子区域§_λ，γ是绝对孤点区域并作为噪声干扰排除。

其中，在由多个复检目标子区域构成的连续区域中，任何一个与除其之外的其它复检目标子区域之间的间隔大于异常阈值的复检目标子区域判定为相对孤点子区域；连续区域是指构成连续区域的多个复检目标子区域中，任意一个复检目标子区域至少与另外一个复检目标子区域相邻。

连续区域Ψ由θ个复检目标子区域构成，分别为复检目标子区域§_λ1，γ1、复检目标子区域§_λ2，γ2、......、复检目标子区域§_λθ，γθ，θ为不小于2的自然数。

判断连续区域Ψ中相对孤点子区域的过程如下：

提取构成连续区域Ψ的θ个复检目标子区域的行列坐标(λ1，γ1)、(λ2，γ2)、......、(λθ，γθ)；

对每个复检目标子区域的行列坐标，分别判断是否存在其他复检目标子区域的行列坐标满足异常阈值条件，如果存在至少一个满足异常阈值条件的其他复检目标子区域，则判断当前的复检目标子区域为相对孤点子区域，进行排除；否则判断当前的复检目标子区域不是孤点子区域，为油烟子区域。

其中，异常阈值条件判断具体是：

将其他复检目标子区域中的每个复检目标子区域的行坐标与目标复检子区域的行坐标做差得到行坐标的差值绝对值、将其他复检目标子区域中的每个复检目标子区域的列坐标与目标子区域的列坐标做差得到列坐标的差值绝对值；

一个其它复检目标子区域中，如果同时满足行坐标的差值绝对值和列坐标的差值绝对值同时大于异常阈值，则判定该其它目标子区域满足异常阈值条件，否则判定为不满足异常阈值条件。

异常阈值通常为大于1且小于6的自然数。异常阈值的具体取值可以根据实际需求设置。也可以选择异常阈值为2或3。

油烟油烟的飘动的特性，通过本发明的基于空间联系的烟雾子区域空间复检方法，可对初步判断得到的油烟子区域进行复检，能够排除小物体干扰，提高油烟检测的准确性。

实施例2。

一种基于空间联系的烟雾子区域空间复检方法，其他特征与实施例1相同，不同之处在于：异常阈值为2。通过本发明的基于空间联系的烟雾子区域空间复检方法，可对初步判断得到的油烟子区域进行复检，能够排除小物体干扰，提高油烟检测的准确性。

实施例3。

本实施例提供作为本发明基于空间联系的烟雾子区域空间复检方法的已经判断为油烟的子区域的一种获取的过程方法。

图像处理单元以成像设备采集的初始图像作为基础进行处理，初始图像为灰度图，所采集的初始图像被序列化，依次通过后帧的初始图像与前帧的初始图像进行处理，得到各个后帧初始图像的油烟区域。

每次通过后帧的初始图像与前帧的初始图像进行处理，得到后帧初始图像所处时刻的油烟区域的步骤过程如下：

(1)将后帧的初始图像与前帧的初始图像进行帧差处理得到帧差图像；

(1)对采集到的初始图像进行帧差处理得到帧差图像；

(2)以开运算方式对帧差图像进行去噪处理，得到去噪图像；

(3)对去噪图像进行边缘检测，标记运动区域作为初始感兴趣区域；

(4)对初始感兴趣区域进行灰度均值计算和区域平滑度计算，将同时满足灰度均值和平滑度要求的区域作为油烟区域，其它的区域作为干扰排除。

步骤(1)中，对采集到的初始图像进行帧差操作得到帧差图像具体是：图像处理单元根据接收到的初始图像的先后顺序，将后一帧图像与前一帧图像做差，得到动态区域高亮的帧差图像。由于前后两帧图像中静态区域是不变的，动态区域(例如油烟飘散，人手挥动等)是变化的，所以帧差后静态区域呈现黑色，动态区域帧差后表现为边缘模糊的高亮区域，故通过帧差可以得到动态区域高亮的帧差图像。

成像设备采集的目标区域以区域S表示，任意一帧初始图像为对应区域S的成像；初始图像由m*n个像素构成。

后帧初始图像A的像素的灰度值以矩阵AH表示，AH＝{ah_i,j}，ah_i,j代表后帧初始图像A中第i行、第j列像素对应的灰度值，i为像素所在的行，j为像素所在的列，1≤i≤m，1≤j≤n；后帧初始图像A中第i行、第j列像素所在的子区域为AS_i,j。

前帧初始图像B的像素的灰度值以矩阵BH表示，BH＝{bh_i,j}，bh_i,j代表前帧初始图像B中第i行、第j列像素对应的灰度值，前帧初始图像B中第i行、第j列像素所在的子区域为BS_i,j。

帧差图像D的像素灰度值以矩阵DH表示，DH＝{dh_i,j}＝{|ah_i,j-bh_i,j|}，dh_i,j代表帧差图像D中第i行、第j列像素对应的灰度值，帧差图像D中第i行、第j列像素所在的子区域为DS_i,j；

在帧差图像中，|dh_i,j|＝0的区域，呈黑色；|dh_i,j|≠0的区域呈高亮显示。

帧差操作后，进入步骤(2)。对帧差图像采用开运算进行去噪处理，得到去噪图像，具体通过如下方式进行：先对帧差图像进行腐蚀操作，以消除图像中的噪点和细小尖刺，断开窄小的连接；再对腐蚀后的图像进行膨胀操作，恢复原帧差图像中的明显特征。

步骤(2)中对帧差图像进行腐蚀操作，具体包括如下步骤：

2-11，任意定义一个卷积核α；

2-12，将卷积核α与帧差图像进行卷积；在卷积核α遍历帧差图像时，提取卷积核所覆盖区域内卷积结果的像素灰度最小值p以及与卷积核中心重合的像素点C；

像素点C的灰度通过矩阵CH＝{c_k,q}表示，k、q为像素点C的行序号和列序号，

获得在卷积核α遍历帧差图像过程中得到的卷积结果最小值像素点矩阵P，最小值像素点矩阵P的灰度通过矩阵PH＝{p_k,q}表示；

2-13将像素点矩阵P的灰度对应覆予像素点C，得到腐蚀图像。

步骤(2)中对腐蚀图像进行膨胀操作，具体包括如下步骤：

2-21，任意定义一个卷积核β；

2-22，将卷积核β与腐蚀图像进行卷积；在卷积核β遍历腐蚀图像时，提取卷积核所覆盖区域内卷积结果的像素灰度最大值o以及与卷积核中心重合的像素点R；

像素点R的灰度通过矩阵RH＝{r_l,v}表示，l、v为像素点R的行序号和列序号，

获得在卷积核β遍历腐蚀图像过程中得到的卷积结果最大值像素点矩阵O，最大值像素点矩阵O的灰度通过矩阵OH＝{o_l,v}表示；

2-13将最大值像素点矩阵O的灰度对应覆予像素点R，得到膨胀图像，得到的膨胀图像即为去噪图像。

利用开运算可以消除图像噪点，在纤细点处分离物体，平滑较大的物体边界，同时也可保证原来图像中高亮区域的面积基本不变，保证后续检测的准确性不受影响。

步骤(3)对去噪图像进行边缘检测，标记运动区域作为初始感兴趣区域，具体是：利用小波变换，检测帧差图像高亮区域的边缘并进行标记，将标记出的区域作为初始感兴趣区域。

由于图像边缘的灰度值与相邻像素点的灰度值会产生较大的灰度值梯度，根据边缘的这一特征，设定一个滤波器，用该滤波器遍历帧差图像。步骤(3)通过如下步骤进行：

3-1，定义一个滤波器Y，滤波器为t*t矩阵，t为奇数。滤波器选择奇数矩阵，以确保只有一个中心点，优选3*3矩阵，具有计算量小的特点。

3-2，使滤波器Y遍历去噪图像，计算滤波器在每一位置处的中心像素点所在的去噪图像的灰度值以及中心像素点邻域内其它像素点的灰度值，并根据公式(Ⅰ)计算滤波器在每一位置处的中心像素点的边缘检测值X_z，z为滤波器Y遍历去噪图像时的标记，

f、g为为像素点的矩阵序号，1≤f≤t，1≤g≤t，e为滤波器在每一位置处的像素点所在的去噪图像的灰度值；α为权重系数，与滤波器位置相对应。

3-3，将滤波器在每一位置处的中心像素点边缘检测值X_z与中心像素点邻域的其它像素点的灰度值相减，并判断差值的绝对值是否大于阈值Δ；

统计大于阈值的数量，如果数量超过判定滤波器所处位置的中心像素点对应的去噪图像的像素点位置为边缘点，并进行标记；

3-4，滤波器遍历完整个去噪图像，得到所有标记的边缘点，获得初步感兴趣区域。

因为人在做菜操作时，手会一直在挥动，帧差完之后的图像中会包含油烟和人手操作等运动物体的干扰区域，在进行油烟浓度识别之前需要排除干扰区域的影响，这也是本发明专利的难点所在。

但是油烟的运动方向具有随机性，人手，锅铲的运动方向相对明确，且特征相差较大，从而：

1)帧差后的图像上油烟运动区域比人手、锅铲运动区域的亮度低，所以相应的油烟区域的灰度值均值也低于人手、锅铲运动区域的灰度均值；

2)帧差后的图像上油烟运动区域的灰度值分布较集中，而人手、锅铲的运动区域边界的灰度值较区域的中心区域跳跃较大，所以该区域的图像不够平滑，对应的灰度值的方差较大。

利用这两个特性，步骤(4)具体是对每个初始感兴趣区域进行灰度均值、区域平滑度计算，得到每个初始感兴趣区域对应的灰度均值和灰度平滑度，将同时满足计算得到的灰度均值小于灰度阈值、灰度平滑度小于灰度平滑度阈值的初始感兴趣区域作为感兴趣区域，即油烟区域，将其它初始感兴趣区域判定为干扰区域。

步骤(4)中，灰度阈值优选为5-70，灰度平滑度阈值为0.05。需要说明的是，灰度阈值、灰度平滑度阈值的量值可以根据具体需要灵活设置，在此不再赘述。步骤(4)完成油烟区域的识别和干扰区域的排除。图1示意了分割的油烟区域和干扰区域的示意图，可见，本发明的方法能够将干扰区域有效排除，该方法几乎不受检测距离的影响，通过算法对图像进行处理，排除人手及锅铲运动的干扰，得到准确的油烟区域。

再通过本发明的方法对初步获得的油烟区域中的子区域进行干扰判断排除，能够去除其中的噪声干扰，提高油烟图像的准确性。

最后应当说明的是，以上实施例仅用以说明本发明的技术方案而非对本发明保护范围的限制，尽管参照较佳实施例对本发明作了详细说明，本领域的普通技术人员应当理解，可以对本发明的技术方案进行修改或者等同替换，而不脱离本发明技术方案的实质和范围。

Claims (6)

1.基于空间联系的烟雾子区域空间复检方法，对已经判断为油烟的子区域进行处理，其特征在于：将每个油烟子区域作为复检目标子区域进行干扰判定，将复检目标子区域中的孤点区域作为噪声干扰排除，剩余的复检目标子区域作为复检后的最终油烟子区域；

孤点区域包括绝对孤点区域和相对孤点区域；

所述绝对孤点区域是指一个复检目标子区域的周围没有其它的复检目标子区域；

在由多个复检目标子区域构成的连续区域中，任何一个与除其之外的其它复检目标子区域之间的间隔大于异常阈值的复检目标子区域判定为相对孤点子区域；

连续区域是指构成连续区域的多个复检目标子区域中，任意一个复检目标子区域至少与另外一个复检目标子区域相邻。

2.根据权利要求1所述的基于空间联系的烟雾子区域空间复检方法，其特征在于：

成像设备采集的含有油烟信息的初始图像为对应灶台目标区域S的成像，将初始图像分割成W*U个子区域§，W、U均为自然数，初始图像中第w行、第u列对应子区域§_w,u,1≤w≤W，1≤u≤U；

判断绝对孤点区域的方法如下：

提取待判断的复检目标子区域§_λ，γ所在的行列坐标(λ，γ)，判断是否存在复检目标子区域§_λ+1，γ或复检目标子区域§_λ-1，γ或复检目标子区域§_λ，γ+1或复检目标子区域§_λ，γ-1；

如果存在，则判断复检目标子区域§_λ，γ不是绝对孤点区域，如果不存在，则判断复检目标子区域§_λ，γ是绝对孤点区域并作为噪声干扰排除。

3.根据权利要求1或2所述的基于空间联系的烟雾子区域空间复检方法，其特征在于：

连续区域Ψ由θ个复检目标子区域构成，分别为复检目标子区域§_λ1，γ1、复检目标子区域§_λ2，γ2、......、复检目标子区域§_λθ，γθ，θ为不小于2的自然数；

判断连续区域Ψ中相对孤点子区域的过程如下：

提取构成连续区域Ψ的θ个复检目标子区域的行列坐标(λ1，γ1)、(λ2，γ2)、......、(λθ，γθ)；对每个复检目标子区域的行列坐标，分别判断是否存在其他复检目标子区域的行列坐标满足异常阈值条件，如果存在至少一个满足异常阈值条件的其他复检目标子区域，则判断当前的复检目标子区域为相对孤点子区域，进行排除；否则判断当前的复检目标子区域不是孤点子区域，为油烟子区域；

异常阈值条件判断具体是：

将其他复检目标子区域中的每个复检目标子区域的行坐标与目标复检子区域的行坐标做差得到行坐标的差值绝对值、将其他复检目标子区域中的每个复检目标子区域的列坐标与目标子区域的列坐标做差得到列坐标的差值绝对值；

一个其它复检目标子区域中，如果同时满足行坐标的差值绝对值和列坐标的差值绝对值同时大于异常阈值，则判定该其它复检目标子区域满足异常阈值条件，否则判定为不满足异常阈值条件。

4.根据权利要求3所述的基于空间联系的烟雾子区域空间复检方法，其特征在于：异常阈值为大于1且小于6的自然数。

5.根据权利要求4所述的基于空间联系的烟雾子区域空间复检方法，其特征在于：异常阈值为2。

6.根据权利要求5所述的基于空间联系的烟雾子区域空间复检方法，其特征在于：异常阈值为3。