CN115019516A - 基于摄像头识别与毫米波雷达检测的汽车违章上报*** - Google Patents

基于摄像头识别与毫米波雷达检测的汽车违章上报*** Download PDF

Info

Publication number
CN115019516A
CN115019516A CN202210519504.9A CN202210519504A CN115019516A CN 115019516 A CN115019516 A CN 115019516A CN 202210519504 A CN202210519504 A CN 202210519504A CN 115019516 A CN115019516 A CN 115019516A
Authority
CN
China
Prior art keywords
vehicle
millimeter wave
violation
wave radar
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210519504.9A
Other languages
English (en)
Inventor
尹樱
张蔚莉
刘亚
刘新伟
孙晓龙
黄秀芳
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Zhejiang Asia Pacific Mechanical and Electronic Co Ltd
Original Assignee
Zhejiang Asia Pacific Mechanical and Electronic Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Zhejiang Asia Pacific Mechanical and Electronic Co Ltd filed Critical Zhejiang Asia Pacific Mechanical and Electronic Co Ltd
Priority to CN202210519504.9A priority Critical patent/CN115019516A/zh
Publication of CN115019516A publication Critical patent/CN115019516A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88—Radar or analogous systems specially adapted for specific applications
    • G01S13/91—Radar or analogous systems specially adapted for specific applications for traffic control
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867—Combination of radar systems with cameras
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/01—Detecting movement of traffic to be counted or controlled
    • G08G1/017—Detecting movement of traffic to be counted or controlled identifying vehicles
    • G08G1/0175—Detecting movement of traffic to be counted or controlled identifying vehicles by photographing vehicles, e.g. when violating traffic rules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/40—Bus networks
    • H04L2012/40208—Bus networks characterized by the use of a particular bus standard
    • H04L2012/40215—Controller Area Network CAN

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Medical Informatics (AREA)
  • Signal Processing (AREA)
  • Electromagnetism (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明公开了一种基于摄像头识别与毫米波雷达检测的汽车违章上报***。前置摄像头安装在车辆本体的前部并朝向车辆本体的前方，采集包含前方道路违章信息的图像数据并发送给车联网模块；毫米波雷达安装在车辆本体的前部并朝向车辆本体的前方，采集前方障碍物信息并发送给车联网模块；车联网模块接收来自前置摄像头和毫米波雷达的数据并发送到交管的服务器；服务器接收车联网模块发送过来的数据进行处理并作出违章。本发明不依赖于各种硬件设施就可以对可能存在的交通违法行为进行检测，对心存侥幸的违章司机进行批评教育或处罚，同时也能避免交通拥堵，提高道路通行效率甚至降低因为这些行为引发的交通事故发生的概率。

Description

基于摄像头识别与毫米波雷达检测的汽车违章上报***
技术领域
本发明涉及了一种道路违章处理***，尤其是涉及了一种基于摄像头识别与毫米波雷达检测的汽车违章上报***。
背景技术
在日常驾驶中，在道路交通车流行驶缓慢的情况下加塞，本来车流就不够通畅，还有司机在随意加塞变道，那就会让车流变得更加缓慢，影响后方车辆行驶，严重时还可能会引发交通事故。对于这种行为，如果此时道路上没有安装违法抓拍摄像头，可能会助长某些司机的不良驾驶行为。此外，在没有摄像头的红绿灯路口，一些司机可能会存在侥幸心理闯红灯，影响行人通行甚至造成交通事故的情况。
发明内容
为了解决背景技术中存在的问题，本发明提供了一种基于摄像头识别和毫米波雷达检测的交通违法行为检测/预警***，解决在没有摄像头的路段车辆加塞、闯红灯等导致的交通效率低或引发的交通事故。
本发明采用的技术方案是：
包括前置摄像头，安装在车辆本体的前部并朝向车辆本体的前方，采集包含前方道路违章信息的图像数据并发送给车联网模块；
包括毫米波雷达，安装在车辆本体的前部并朝向车辆本体的前方，采集前方障碍物信息并发送给车联网模块；
包括车联网模块，接收来自前置摄像头和毫米波雷达的数据并发送到交管的服务器；
包括服务器，接收车联网模块发送过来的数据进行处理并作出违章。
所述的前置摄像头安装在车辆本体前挡风玻璃上沿。
所述的毫米波雷达通过铝合金支架固定在车辆本体前部的保险杠内侧。
还包括CAN总线，前置摄像头和毫米波雷达之间通过CAN总线连接，且前置摄像头和毫米波雷达所采集的数据经CAN总线发送到车联网模块。
所述服务器中，通过包含前方道路违章信息的图像数据进行图像识别获得前方车道线的属性、前方车辆和行人的位置坐标及其运动关系作为前方车道线和前方车辆的数据，通过前方车道线和前方车辆的数据判断车辆本体前方的车辆可能存在的违章行为，进而做出违章决定。
通过CAN总线获取前置摄像头和毫米波雷达的探测结果并将前置摄像头和毫米波雷达两者获得的数据进行融合及判断。
在车联网模块中，利用安装在车辆本体挡风玻璃上沿的前视摄像头对前方道路进行实时图像采集，通过图像识别处理提取到车辆本体前方的道路车道线信息，并通过图像识别处理进行车道线的边界提取和车道线的属性类型识别，同时前视摄像头对车辆本体前方对目标区域内的车辆进行跟踪探测运动状态：
首先划定目标区域，对目标区域内的目标进行跟踪检测，通过前视摄像头以及毫米波雷达获取到目标所属车道以及目标的运动状态，对目标的位置进行记录并生成目标轨迹的图像序列或视频流文件，然后：
利用前视摄像头获取的本车与车道线距离以及本车与目标的横向距离实时更新目标与车道线的距离从而判断目标车辆是否有压实线的违章行为；
通过目标的运动状态并结合当前的车流量与车速判断目标车辆是否有加塞的违章行为；
根据交通灯的位置和状态以及目标车辆的位置和状态判断目标车辆是否有闯红灯的违章行为；
根据行人的位置和状态以及目标车辆的位置和状态判断目标车辆是否有不礼让行人的违章行为。
当检测到目标有上述违章行为时，将目标的图像序列或视频流文件通过车联网上传至服务器，服务器通过对照片中的违章情况进行分析，如果判定该车辆确实存在违章行为，则车牌号识别后提取上传至交管中心，进而提醒或者处罚以避免交通拥堵，提高道路通行效率甚至避免引发事故。
本发明的有益效果是：
本发明不依赖于各种硬件设施就可以对可能存在的交通违法行为进行检测，对心存侥幸的违章司机进行批评教育或处罚，同时也能避免交通拥堵，提高道路通行效率甚至降低因为这些行为引发的交通事故发生的概率。
附图说明
图1为本发明***的结构布置图。
图中：1、前置摄像头，2、CAN总线，3、毫米波雷达，4、车辆本体。
图2为本发明***的***框图。
具体实施方式
下面结合附图及具体实施例对本发明作进一步详细说明。
如图1和图2所示，***具体实施包括：
包括前置摄像头1，安装在车辆本体4的前部并朝向车辆本体4的前方，采集包含前方道路违章信息的图像数据并发送给车联网模块；
包括毫米波雷达3，安装在车辆本体4的前部并朝向车辆本体4的前方，采集前方障碍物信息并发送给车联网模块；
包括车联网模块，接收来自前置摄像头1和毫米波雷达3的数据并经无线通讯发送到交管的服务器；
包括服务器，接收车联网模块发送过来的数据进行处理并作出违章。
前置摄像头1安装在车辆本体4前挡风玻璃上沿，通过塑料支架固定在挡风玻璃的内侧，用于探测前方的车道线信息。毫米波雷达4通过铝合金支架固定在车辆本体4前部的保险杠内侧，用于探测前方的障碍物信息。
还包括CAN总线2，前置摄像头1和毫米波雷达3之间通过CAN总线2连接，且前置摄像头1和毫米波雷达3所采集的数据经CAN总线2发送到车联网模块。
服务器中，通过包含前方道路违章信息的图像数据进行图像识别获得前方车道线的属性、前方车辆和行人的位置坐标及其运动关系作为前方车道线和前方车辆的数据，通过前方车道线和前方车辆的数据判断车辆本体4前方的车辆可能存在的违章行为，比如实线变道、强行加塞、闯红灯、不礼让行人等，进而做出违章决定。
服务器中，对接收到的数据进行筛选后可再进一步发送到交管中心。
通过CAN总线2获取前置摄像头1和毫米波雷达3的探测结果并将前置摄像头1和毫米波雷达3两者获得的数据进行融合及判断。
具体实施中，毫米波雷达通过CAN总线将数据发给前视摄像头，摄像头将毫米波雷达和自身的两者数据进行融合和预处理，如果判断出前方车辆的司机存在实线变道、闯红灯、不礼让行人等这些违章行为时，前视摄像头启动对前方车辆进行拍照并通过CAN总线传给车联网模块再上传至服务器，服务器通过对照片中的违章情况进行分析，如果判定前方的前方车辆确实存在违章行为，则对车牌号进行识别提取并上传至交管中心，完成汽车违章上报。
或者可以是，前置摄像头1对前方特定情况下违章的车辆拍下并通过车联网模块将其上传到服务器，服务器通过对违章行为的前方车辆图像进行筛选后上传至交管中心。
本发明***在服务器中，利用安装在车辆本体4挡风玻璃上沿的前视摄像头对前方道路进行实时图像采集，通过图像识别处理提取到车辆本体4前方的道路车道线信息，并通过图像识别处理进行车道线的边界提取和车道线的属性类型识别，同时前视摄像头1对车辆本体4前方左右车道线中离本车的车辆本体4最近的前方车辆目标进行跟踪探测运动状态：
首先划定目标区域，对目标区域内的目标进行跟踪检测，通过前视摄像头以及毫米波雷达获取到目标所属车道以及目标的运动状态，对目标的位置进行记录并生成目标轨迹的图像序列或视频流文件，然后：
利用前视摄像头获取的本车与车道线距离以及本车与目标的横向距离实时更新目标与车道线的距离从而判断目标车辆是否有压实线的违章行为；
通过目标的运动状态并结合当前的车流量与车速判断目标车辆是否有加塞的违章行为；
根据交通灯的位置和状态以及目标车辆的位置和状态判断目标车辆是否有闯红灯的违章行为；
根据行人的位置和状态以及目标车辆的位置和状态判断目标车辆是否有不礼让行人的违章行为。
当检测到目标有上述违章行为时，将目标的图像序列或视频流文件通过车联网上传至服务器，服务器通过对照片中的违章情况进行分析，如果判定该车辆确实存在违章行为，则车牌号识别后提取上传至交管中心，进而提醒或者处罚以避免交通拥堵，提高道路通行效率甚至避免引发事故。
这种场景同样适用于没有违法抓拍的红绿灯路口中闯红灯以及机动车司机不礼让行人的行为。
还适用于以下这种情况：
一、在没有闯红灯抓拍的红绿灯路口。利用安装在车辆挡风玻璃上沿的前视摄像头对红绿灯标识进行识别，当识别到路口红灯亮时，前方车辆穿越斑马线且没有立即停下的趋势时，对其进行拍照并通过车联网模块上传服务器。服务器对违法行为进行筛选并上传到交管中心。
二、在没有红绿灯以及抓拍摄像头的路口，前视摄像头也可以对司机不礼让行人的行为抓拍下来进行上传，这样可以减少司机违章的侥幸心理，提高交通安全。

Claims (8)

1.一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：
包括前置摄像头(1)，安装在车辆本体(4)的前部并朝向车辆本体(4)的前方，采集包含前方道路违章信息的图像数据并发送给车联网模块；
包括毫米波雷达(3)，安装在车辆本体(4)的前部并朝向车辆本体(4)的前方，采集前方障碍物信息并发送给车联网模块；
包括车联网模块，接收来自前置摄像头(1)和毫米波雷达(3)的数据并发送到交管的服务器；
包括服务器，接收车联网模块发送过来的数据进行处理并作出违章。
2.根据权利要求1所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：所述的前置摄像头(1)安装在车辆本体(4)前挡风玻璃上沿。
3.根据权利要求1所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：所述的毫米波雷达(4)通过铝合金支架固定在车辆本体(4)前部的保险杠内侧。
4.根据权利要求1所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：还包括CAN总线(2)，前置摄像头(1)和毫米波雷达(3)之间通过CAN总线(2)连接，且前置摄像头(1)和毫米波雷达(3)所采集的数据经CAN总线(2)发送到车联网模块。
5.根据权利要求1所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：所述服务器中，通过包含前方道路违章信息的图像数据进行图像识别获得前方车道线的属性、前方车辆和行人的位置坐标及其运动关系作为前方车道线和前方车辆的数据，通过前方车道线和前方车辆的数据判断车辆本体(4)前方的车辆可能存在的违章行为，进而做出违章决定。
6.根据权利要求1所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：通过CAN总线(2)获取前置摄像头(1)和毫米波雷达(3)的探测结果并将前置摄像头(1)和毫米波雷达(3)两者获得的数据进行融合及判断。
7.根据权利要求1所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：在车联网模块中，利用安装在车辆本体(4)挡风玻璃上沿的前视摄像头对前方道路进行实时图像采集，通过图像识别处理提取到车辆本体(4)前方的道路车道线信息，并通过图像识别处理进行车道线的边界提取和车道线的属性类型识别，同时前视摄像头(1)对车辆本体(4)前方对目标区域内的车辆进行跟踪探测运动状态：
首先划定目标区域，对目标区域内的目标进行跟踪检测，通过前视摄像头以及毫米波雷达获取到目标所属车道以及目标的运动状态，对目标的位置进行记录并生成目标轨迹的图像序列或视频流文件，然后：
利用前视摄像头获取的本车与车道线距离以及本车与目标的横向距离实时更新目标与车道线的距离从而判断目标车辆是否有压实线的违章行为；
通过目标的运动状态并结合当前的车流量与车速判断目标车辆是否有加塞的违章行为；
根据交通灯的位置和状态以及目标车辆的位置和状态判断目标车辆是否有闯红灯的违章行为；
根据行人的位置和状态以及目标车辆的位置和状态判断目标车辆是否有不礼让行人的违章行为。
8.根据权利要求7所述的一种基于摄像头识别与毫米波雷达检测的汽车违章上报***，其特征在于：当检测到目标有违章行为时，将目标的图像序列或视频流文件通过车联网上传至服务器，服务器通过对照片中的违章情况进行分析，如果判定该车辆确实存在违章行为，则车牌号识别后提取上传至交管中心。
CN202210519504.9A 2022-05-12 2022-05-12 基于摄像头识别与毫米波雷达检测的汽车违章上报*** Pending CN115019516A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210519504.9A CN115019516A (zh) 2022-05-12 2022-05-12 基于摄像头识别与毫米波雷达检测的汽车违章上报***

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210519504.9A CN115019516A (zh) 2022-05-12 2022-05-12 基于摄像头识别与毫米波雷达检测的汽车违章上报***

Publications (1)

Publication Number Publication Date
CN115019516A true CN115019516A (zh) 2022-09-06

Family

ID=83068656

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210519504.9A Pending CN115019516A (zh) 2022-05-12 2022-05-12 基于摄像头识别与毫米波雷达检测的汽车违章上报***

Country Status (1)

Country Link
CN (1) CN115019516A (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115240435A (zh) * 2022-09-21 2022-10-25 广州市德赛西威智慧交通技术有限公司 一种基于ai技术的车辆违章行驶检测方法、装置

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108154686A (zh) * 2018-02-12 2018-06-12 苏州清研微视电子科技有限公司 一种车载违章行为抓拍***
CN109544936A (zh) * 2018-11-19 2019-03-29 安徽四创电子股份有限公司 基于雷达摄像机的机动车斑马线不礼让行人预警抓拍***
CN110570664A (zh) * 2019-09-23 2019-12-13 山东科技大学 一种高速公路交通事件自动检测***
CN110738846A (zh) * 2019-09-27 2020-01-31 同济大学 基于雷达与视频组群的车辆行为监测***及其实现方法
CN111369798A (zh) * 2018-12-26 2020-07-03 上海博泰悦臻电子设备制造有限公司 一种车辆违章监督的方法、车机及车辆
CN114078318A (zh) * 2020-08-05 2022-02-22 上海汽车集团股份有限公司 一种车辆违章检测***
CN114360256A (zh) * 2021-07-05 2022-04-15 上海安道雷光波***工程有限公司 嵌入式雷达监测复合仪以及车流量雷达信息***

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108154686A (zh) * 2018-02-12 2018-06-12 苏州清研微视电子科技有限公司 一种车载违章行为抓拍***
CN109544936A (zh) * 2018-11-19 2019-03-29 安徽四创电子股份有限公司 基于雷达摄像机的机动车斑马线不礼让行人预警抓拍***
CN111369798A (zh) * 2018-12-26 2020-07-03 上海博泰悦臻电子设备制造有限公司 一种车辆违章监督的方法、车机及车辆
CN110570664A (zh) * 2019-09-23 2019-12-13 山东科技大学 一种高速公路交通事件自动检测***
CN110738846A (zh) * 2019-09-27 2020-01-31 同济大学 基于雷达与视频组群的车辆行为监测***及其实现方法
CN114078318A (zh) * 2020-08-05 2022-02-22 上海汽车集团股份有限公司 一种车辆违章检测***
CN114360256A (zh) * 2021-07-05 2022-04-15 上海安道雷光波***工程有限公司 嵌入式雷达监测复合仪以及车流量雷达信息***

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115240435A (zh) * 2022-09-21 2022-10-25 广州市德赛西威智慧交通技术有限公司 一种基于ai技术的车辆违章行驶检测方法、装置

Similar Documents

Publication Publication Date Title
CN106652468B (zh) 车辆道路前车违规检测和自车违规预警提醒装置及方法
CN102765365B (zh) 基于机器视觉的行人检测方法及行人防撞预警***
CN102496285B (zh) 基于视频检测的路口车辆闯红灯判别方法
CN111047870A (zh) 交通违规车辆识别***、服务器及存储有车辆控制程序的非易失性存储介质
CN110930723B (zh) 一种违法停车检测实现方法
CN202422425U (zh) 基于视频检测的路口智能信号控制***
KR101742490B1 (ko) 끼어들기 위반차량 단속 시스템 및 그 방법
CN102201165A (zh) 交通路口车辆违章的监测***及方法
CN102332209A (zh) 一种汽车违章视频监测方法
CN211787492U (zh) 基于车路协同技术的交通信号控制及路侧信息交互***
CN108932849B (zh) 一种记录多台机动车低速行驶违法行为的方法及装置
CN105654734A (zh) 车辆违章行为的数据处理方法及装置
CN211827564U (zh) 一种用于检测车辆夜间是否开启远光灯的识别装置
CN113012436B (zh) 道路监控方法、装置及电子设备
CN109544936A (zh) 基于雷达摄像机的机动车斑马线不礼让行人预警抓拍***
CN113033275B (zh) 基于深度学习的车辆变道不打转向灯分析***
CN101349562A (zh) 车辆行驶偏向的警报方法及装置
CN111105644A (zh) 一种车辆盲区监测、行驶控制方法、装置及车路协同***
CN111899514A (zh) 一种人工智能的拥堵检测***
CN111260915B (zh) 一种高速公路交通异常区域行人逗留的预警提醒方法
CN107393311A (zh) 一种车牌篡改识别装置及方法
CN115019516A (zh) 基于摄像头识别与毫米波雷达检测的汽车违章上报***
KR102526194B1 (ko) 이동차량 추적에 의한 불법 끼어들기 차량 감지시스템
CN111161539B (zh) 专用车道通行控制***及方法
CN105761501A (zh) 一种智能车辆行为检测抓拍方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination