CN111599129A - 一种基于三目摄像头的森林火灾识别与测距方法 - Google Patents

一种基于三目摄像头的森林火灾识别与测距方法 Download PDF

Info

Publication number
CN111599129A
CN111599129A CN202010554746.2A CN202010554746A CN111599129A CN 111599129 A CN111599129 A CN 111599129A CN 202010554746 A CN202010554746 A CN 202010554746A CN 111599129 A CN111599129 A CN 111599129A
Authority
CN
China
Prior art keywords
fire
follows
camera
identification
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202010554746.2A
Other languages
English (en)
Inventor
韩亚辉
王琢
刘佳鑫
张子超
邓利高
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Northeast Forestry University
Original Assignee
Northeast Forestry University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Northeast Forestry University filed Critical Northeast Forestry University
Priority to CN202010554746.2A priority Critical patent/CN111599129A/zh
Publication of CN111599129A publication Critical patent/CN111599129A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/12Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions
    • G08B17/125Actuation by presence of radiation or particles, e.g. of infrared radiation or of ions by using a video camera to detect fire or smoke
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/02Picture taking arrangements specially adapted for photogrammetry or photographic surveying, e.g. controlling overlapping of pictures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C11/00Photogrammetry or videogrammetry, e.g. stereogrammetry; Photographic surveying
    • G01C11/04Interpretation of pictures
    • G01C11/30Interpretation of pictures by triangulation
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B17/00Fire alarms; Alarms responsive to explosion
    • G08B17/005Fire alarms; Alarms responsive to explosion for forest fires, e.g. detecting fires spread over a large or outdoors area
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/30Transforming light or analogous information into electric information
    • H04N5/33Transforming infrared radiation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Fire-Detection Mechanisms (AREA)

Abstract

本发明公开一种基于三目摄像头的森林火灾识别与测距方法,所述森林火灾识别与测距方法的主要包括目标区域内红外检测、红外图像处理、火灾报警、调用测距装置、图片校正、立体匹配和距离测量,即采用红外热像仪先行识别是否有火灾情况,其后在根据识别结果,调用双目摄像头对判定为火源区域内进行拍摄,进而在后续图片校正、图片立体匹配以及公式计算等步骤中,来得出拍摄处至火源处的实际距离,该基于三目摄像头进行火灾识别和火灾测距方法相较于传统火灾识别技术,具有火灾位置的精准定位特点,该特点可在火灾前期,方便灭火人员调配物资,进而在极短时间内对火灾进行扑灭任务。

Description

一种基于三目摄像头的森林火灾识别与测距方法
技术领域
本发明属于森林火灾识别相关技术领域,具体涉及一种基于三目摄像头的森林火灾识别与测距方法。
背景技术
森林火灾是一种世界性的重要自然灾害,越来越受到各国政府的重视,由于森林火灾具有传播速度快、灭火和营救都比较困难等特点,所以如何有效地进行森林火灾的安全防范以及尽早发现火灾的问题就变得越来越紧迫。
现有的森林火灾识别技术存在以下问题:现有森林火灾研究均是对于森林火灾图像的检测,即通过火焰独特的颜色和纹理特征来识别火灾,但是仅仅识别火灾对于实际消防中是远远不够的,火灾的位置对于调配人力物力具有重要作用,且目前的专利申请中,多为火灾识别技术,火源测距尚为一个空白领域,例如专利CN110895701A设计的基于CN和FHOG的森林火灾识别方法、专利CN110648483A申请的火灾识别***等,均是只进行火灾识别,遂急需一种能够对森林火灾进行识别并且能够高效测距方法来解决目前所面临的消防灭火问题。
发明内容
本发明的目的在于提供一种基于三目摄像头的森林火灾识别与测距方法,以解决上述背景技术中提出现有森林火灾研究均是对于森林火灾图像的检测,即通过火焰独特的颜色和纹理特征来识别火灾,但是仅仅识别火灾对于实际消防中是远远不够的,火灾的位置对于调配人力物力具有重要作用,且目前的专利申请中,多为火灾识别技术,火源测距尚为一个空白领域,例如专利CN110895701A设计的基于CN和FHOG的森林火灾识别方法、专利CN110648483A申请的火灾识别***等,均是只进行火灾识别,遂急需一种能够对森林火灾进行识别并且能够高效测距方法来解决目前所面临的消防灭火问题。
为实现上述目的,本发明提供如下技术方案:
一种基于三目摄像头的森林火灾识别与测距方法,所述森林火灾识别与测距方法的主要包括目标区域内红外检测、红外图像处理、火灾报警、调用测距装置、图片校正、立体匹配和距离测量。
优选的,所述森林火灾识别与测距方法中目标区域内红外检测的流程如下:
流程一:调用区域内红外热像仪对目标区域内进行红外测量;
流程二:剔除天气、季节以及气温等环境因素影响来获取目标区域内红外图像。
优选的,所述森林火灾识别与测距方法中红外图像处理的流程如下:
流程一:对热像仪获得的红外图像通过OpenCV视觉库中的split()函数分离为B(蓝色)、G(绿色)、R(红色)三通道,并取出各个通道的数值;
流程二:根据R>125,R>G>B,B<125经验公式来判断输入图像是否为火灾图像,若图像中的某个像素符合以上规则,则将该像素的位置保留下来:
流程三:将保留下来的像素位置通过findContours()进行轮廓检测,根据检测出来的轮廓,使用矩形函数,画出火灾识别框。
优选的,所述森林火灾识别与测距方法中火灾报警的流程如下:
流程一:基于红外图像处理数据,来判断目标区域内是否出现火灾险情;
流程二:若数据表明无火灾情况,则继续进行监测;
流程三:若数据表明出现火灾情况,则立即报警。
优选的,所述森林火灾识别与测距方法中调用测距装置的流程如下:
流程一:调用区域内双目摄像头,对火灾标识处进行拍照处理;
流程二:基于双目摄像头生成火焰标识处照片。
优选的,所述森林火灾识别与测距方法中图片校正的流程如下:
流程一:基于函数stereorectify()函数实现立体校正;
流程二:通过相机标定获得左右相机的内参矩阵的畸变矩阵输入,得到相机的旋转矩阵R,投影矩阵P和重投影矩阵Q;
流程三:将三个矩阵输入initUndistortRectifyMap()函数,使用该函数获得图像的校准映射矩阵,最后是用remap()函数使左右两幅图像共面。
优选的,所述森林火灾识别与测距方法中立体匹配的流程如下:
流程一:基于SGBM函数类实现立体匹配;
流程二:设置代价函数窗口大小、最小视差以及视差搜索范围三个参数;
流程三:通过该函数类中的compute()函数计算左右图像的disp。
优选的,所述森林火灾识别与测距方法中距离测量的流程如下:
流程一:基于立体匹配所得的disp,基于公式
Figure 100002_DEST_PATH_IMAGE001
计算距离;
流程二:b代表双目相机的中心距,f为相机的焦距,disp为匹配之后获得的视差,Z为待测目标的实际距离。
与现有技术相比,本发明提供了一种基于三目摄像头的森林火灾识别与测距方法,具备以下有益效果:
本发明基于红外热像仪和双目摄像头组合搭配的三目摄像头组件,来对目标区域内进行火灾识别以及火灾距离测算任务,即采用红外热像仪先行识别是否有火灾情况,其后在根据识别结果,调用双目摄像头对判定为火源区域内进行拍摄,进而在后续图片校正、图片立体匹配以及公式计算等步骤中,来得出拍摄处至火源处的实际距离,该基于三目摄像头进行火灾识别和火灾测距方法相较于传统火灾识别技术,具有火灾位置的精准定位特点,该特点可在火灾前期,方便灭火人员调配物资,进而在极短时间内对火灾进行扑灭任务。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制,在附图中:
图1为本发明提出的火灾识别以及测距装置示意图(箭头代表数据传输方向)。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本发明提供一种基于三目摄像头的森林火灾识别与测距方法技术方案:
一种基于三目摄像头的森林火灾识别与测距方法,森林火灾识别与测距方法的主要包括目标区域内红外检测、红外图像处理、火灾报警、调用测距装置、图片校正、立体匹配和距离测量。
一种基于三目摄像头的森林火灾识别与测距方法,包括目标区域内红外检测的流程如下:
流程一:调用区域内红外热像仪对目标区域内进行红外测量;
流程二:剔除天气、季节以及气温等环境因素影响来获取目标区域内红外图像。
一种基于三目摄像头的森林火灾识别与测距方法,包括红外图像处理的流程如下:
流程一:对热像仪获得的红外图像通过OpenCV视觉库中的split()函数分离为B(蓝色)、G(绿色)、R(红色)三通道,并取出各个通道的数值;
流程二:根据R>125,R>G>B,B<125经验公式来判断输入图像是否为火灾图像,若图像中的某个像素符合以上规则,则将该像素的位置保留下来:
流程三:将保留下来的像素位置通过findContours()进行轮廓检测,根据检测出来的轮廓,使用矩形函数,画出火灾识别框。
一种基于三目摄像头的森林火灾识别与测距方法,包括火灾报警的流程如下:
流程一:基于红外图像处理数据,来判断目标区域内是否出现火灾险情;
流程二:若数据表明无火灾情况,则继续进行监测;
流程三:若数据表明出现火灾情况,则立即报警。
一种基于三目摄像头的森林火灾识别与测距方法,包括调用测距装置的流程如下:
流程一:调用区域内双目摄像头,对火灾标识处进行拍照处理;
流程二:基于双目摄像头生成火焰标识处照片。
一种基于三目摄像头的森林火灾识别与测距方法,包括图片校正的流程如下:
流程一:基于函数stereorectify()函数实现立体校正;
流程二:通过相机标定获得左右相机的内参矩阵的畸变矩阵输入,得到相机的旋转矩阵R,投影矩阵P和重投影矩阵Q;
流程三:将三个矩阵输入initUndistortRectifyMap()函数,使用该函数获得图像的校准映射矩阵,最后是用remap()函数使左右两幅图像共面。
一种基于三目摄像头的森林火灾识别与测距方法,包括立体匹配的流程如下:
流程一:基于SGBM函数类实现立体匹配;
流程二:设置代价函数窗口大小、最小视差以及视差搜索范围三个参数;
流程三:通过该函数类中的compute()函数计算左右图像的disp。
一种基于三目摄像头的森林火灾识别与测距方法,包括距离测量的流程如下:
流程一:基于立体匹配所得的disp,基于公式
Figure 570584DEST_PATH_IMAGE001
计算距离;
流程二:b代表双目相机的中心距,f为相机的焦距,disp为匹配之后获得的视差,Z为待测目标的实际距离。
本发明的工作原理及使用流程:基于图例来阐述该方法的实际过程,如图1为测距装置 示意图,测距装置主要包括图片采集部分、支撑平台、计算机处理部分、报警装置等,图中 的图像采集装置1架设在平台3上并且经过升降平台2连接,图像采集装置1主要包括红外 热像仪和USB双目摄像头,红外热像仪采集的图像经数据传输8送至计算机7进行火焰识别, 若识别结果为火焰则经过数据传输8控制双目摄像头进行拍照,同时经过数据传输10控制报 警装置中的闪烁灯4闪烁,蜂鸣器11触发,将图像采集装置1获得的双目图片经数据传输8 传送至计算机7进行距离测量,并在计算机上显示测量结果。
尽管已经示出和描述了本发明的实施例,对于本领域的普通技术人员而言,可以理解在不脱离本发明的原理和精神的情况下可以对这些实施例进行多种变化、修改、替换和变型,本发明的范围由所附权利要求及其等同物限定。

Claims (1)

1.一种基于三目摄像头的森林火灾识别与测距方法,其特征在于:所述森林火灾识别与测距方法的主要包括由以下方法模块构成,其方法模块包括目标区域内红外检测、红外图像处理、火灾报警、调用测距装置、图片校正、立体匹配和距离测量;
所述森林火灾识别与测距方法中目标区域内红外检测的流程如下:
流程一:调用区域内红外热像仪对目标区域内进行红外测量;
流程二:剔除天气、季节以及气温等环境因素影响来获取目标区域内红外图像;
所述森林火灾识别与测距方法中红外图像处理的流程如下:
流程一:对热像仪获得的红外图像通过OpenCV视觉库中的split()函数分离为B(蓝色)、G(绿色)、R(红色)三通道,并取出各个通道的数值;
流程二:根据R>125,R>G>B,B<125经验公式来判断输入图像是否为火灾图像,若图像中的某个像素符合以上规则,则将该像素的位置保留下来:
流程三:将保留下来的像素位置通过findContours()进行轮廓检测,根据检测出来的轮廓,使用矩形函数,画出火灾识别框;
所述森林火灾识别与测距方法中火灾报警的流程如下:
流程一:基于红外图像处理数据,来判断目标区域内是否出现火灾险情;
流程二:若数据表明无火灾情况,则继续进行监测;
流程三:若数据表明出现火灾情况,则立即报警;
所述森林火灾识别与测距方法中调用测距装置的流程如下:
流程一:调用区域内双目摄像头,对火灾标识处进行拍照处理;
流程二:基于双目摄像头生成火焰标识处照片;
所述森林火灾识别与测距方法中图片校正的流程如下:
流程一:基于函数stereorectify()函数实现立体校正;
流程二:通过相机标定获得左右相机的内参矩阵的畸变矩阵输入,得到相机的旋转矩阵R,投影矩阵P和重投影矩阵Q;
流程三:将三个矩阵输入initUndistortRectifyMap()函数,使用该函数获得图像的校准映射矩阵,最后是用remap()函数使左右两幅图像共面;
所述森林火灾识别与测距方法中立体匹配的流程如下:
流程一:基于SGBM函数类实现立体匹配;
流程二:设置代价函数窗口大小、最小视差以及视差搜索范围三个参数;
流程三:通过该函数类中的compute函数计算左右图像的disp;
所述森林火灾识别与测距方法中距离测量的流程如下:
流程一:基于立体匹配所得的disp,基于公式
Figure DEST_PATH_IMAGE001
计算距离;
流程二:b代表双目相机的中心距,f为相机的焦距,disp为匹配之后获得的视差,Z为待测目标的实际距离。
CN202010554746.2A 2020-06-17 2020-06-17 一种基于三目摄像头的森林火灾识别与测距方法 Pending CN111599129A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010554746.2A CN111599129A (zh) 2020-06-17 2020-06-17 一种基于三目摄像头的森林火灾识别与测距方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010554746.2A CN111599129A (zh) 2020-06-17 2020-06-17 一种基于三目摄像头的森林火灾识别与测距方法

Publications (1)

Publication Number Publication Date
CN111599129A true CN111599129A (zh) 2020-08-28

Family

ID=72192296

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010554746.2A Pending CN111599129A (zh) 2020-06-17 2020-06-17 一种基于三目摄像头的森林火灾识别与测距方法

Country Status (1)

Country Link
CN (1) CN111599129A (zh)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112464813A (zh) * 2020-11-26 2021-03-09 国网北京市电力公司 山火的监测方法及装置
CN112785647A (zh) * 2021-01-27 2021-05-11 北京宇航时代科技发展有限公司 一种三目立体图像检测方法和***
CN113990028A (zh) * 2021-10-22 2022-01-28 北京通成网联科技有限公司 新型全景智能红外热像火灾监控报警装置与图像处理方法
CN115988183A (zh) * 2023-03-17 2023-04-18 青岛峻海物联科技有限公司 基于着火点影像测距的指令发信组件、装置、***及方法

Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101574567A (zh) * 2009-06-08 2009-11-11 南京航空航天大学 基于计算机视觉技术的火灾智能探测、扑灭方法及***
CN102784451A (zh) * 2012-08-06 2012-11-21 西安硅光电子科技有限公司 一种三维空间自动定位火焰探测***
CN106019264A (zh) * 2016-05-22 2016-10-12 江志奇 一种基于双目视觉的无人机危险车距识别***及方法
CN107886670A (zh) * 2017-10-17 2018-04-06 湖北林青测控科技有限公司 林区初期火灾快速识别与定位方法、存储介质、电子设备
CN107977018A (zh) * 2017-12-12 2018-05-01 吉林大学 基于双目立体视觉和无人机的秸秆焚烧监测方法
CN108168713A (zh) * 2017-12-22 2018-06-15 福建和盛高科技产业有限公司 输电线路红外热成像防山火***
CN108205862A (zh) * 2017-12-11 2018-06-26 厦门亿力吉奥信息科技有限公司 输电线路山火防护***
CN108416968A (zh) * 2018-01-31 2018-08-17 国家能源投资集团有限责任公司 火灾预警方法和装置
CN108629342A (zh) * 2017-11-28 2018-10-09 广东雷洋智能科技股份有限公司 双目摄像头火焰距离测量方法及装置
CN110109457A (zh) * 2019-04-29 2019-08-09 北方民族大学 一种智能语音导盲机器人控制方法及控制***

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101574567A (zh) * 2009-06-08 2009-11-11 南京航空航天大学 基于计算机视觉技术的火灾智能探测、扑灭方法及***
CN102784451A (zh) * 2012-08-06 2012-11-21 西安硅光电子科技有限公司 一种三维空间自动定位火焰探测***
CN106019264A (zh) * 2016-05-22 2016-10-12 江志奇 一种基于双目视觉的无人机危险车距识别***及方法
CN107886670A (zh) * 2017-10-17 2018-04-06 湖北林青测控科技有限公司 林区初期火灾快速识别与定位方法、存储介质、电子设备
CN108629342A (zh) * 2017-11-28 2018-10-09 广东雷洋智能科技股份有限公司 双目摄像头火焰距离测量方法及装置
CN108205862A (zh) * 2017-12-11 2018-06-26 厦门亿力吉奥信息科技有限公司 输电线路山火防护***
CN107977018A (zh) * 2017-12-12 2018-05-01 吉林大学 基于双目立体视觉和无人机的秸秆焚烧监测方法
CN108168713A (zh) * 2017-12-22 2018-06-15 福建和盛高科技产业有限公司 输电线路红外热成像防山火***
CN108416968A (zh) * 2018-01-31 2018-08-17 国家能源投资集团有限责任公司 火灾预警方法和装置
CN110109457A (zh) * 2019-04-29 2019-08-09 北方民族大学 一种智能语音导盲机器人控制方法及控制***

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112464813A (zh) * 2020-11-26 2021-03-09 国网北京市电力公司 山火的监测方法及装置
CN112785647A (zh) * 2021-01-27 2021-05-11 北京宇航时代科技发展有限公司 一种三目立体图像检测方法和***
CN113990028A (zh) * 2021-10-22 2022-01-28 北京通成网联科技有限公司 新型全景智能红外热像火灾监控报警装置与图像处理方法
CN115988183A (zh) * 2023-03-17 2023-04-18 青岛峻海物联科技有限公司 基于着火点影像测距的指令发信组件、装置、***及方法

Similar Documents

Publication Publication Date Title
CN111599129A (zh) 一种基于三目摄像头的森林火灾识别与测距方法
CN104143248B (zh) 基于无人机的森林火灾探测及防控方法
CN201936415U (zh) 森林火情自动识别报警***
JP6995148B2 (ja) 視覚的深度を用いた煙検出方法
CN101673448A (zh) 一种森林火灾探测方法及***
CN101650866A (zh) 一种应用于无人机的火灾检测***及其火灾检测方法
CN107576269B (zh) 一种输电线路山火定位方法
CN110473375A (zh) 森林火灾的监测方法、装置、设备和***
CN107877518B (zh) 一种巡检机器人及其防坠落方法和装置
CN113299035A (zh) 一种基于人工智能和双目视觉的火灾识别方法及***
CN111163294A (zh) 一种人工智能目标识别的建筑安全通道监测***和方法
CN108234897A (zh) 控制夜视***的方法及装置、存储介质、处理器
CN103971479B (zh) 基于摄像机标定技术的林火定位方法
CN115115595B (zh) 一种面向森林火灾监测的机载激光雷达和红外相机的实时标定方法
CN116363585A (zh) 一种输电线路在线监测方法及***
CN107229108B (zh) 一种被动红外及主动红外全景监控联动***及方法
CN112906674A (zh) 一种基于双目视觉的矿井火灾识别与火源定位方法
CN114117717A (zh) 一种森林防火监控方法、装置和***
CN111466892A (zh) 一种基于热成像和人脸识别的远距离测温***及方法
CN111539264A (zh) 一种船舶火焰探测定位***与探测定位方法
CN107396053A (zh) 一种室外安防监控***
CN109243135A (zh) 一种智能火灾检测与定位方法、装置及***
CN114263501A (zh) 基于图像识别与热红外联合的隧道渗水涌水监测***
CN110569776A (zh) 台风灾后对输配电线路故障的筛查方法
CN117523806A (zh) 火灾预警方法、***、设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination