CN109635742A - 一种车辆图像定损中的子部件损伤识别方法 - Google Patents

一种车辆图像定损中的子部件损伤识别方法 Download PDF

Info

Publication number
CN109635742A
CN109635742A CN201811528123.7A CN201811528123A CN109635742A CN 109635742 A CN109635742 A CN 109635742A CN 201811528123 A CN201811528123 A CN 201811528123A CN 109635742 A CN109635742 A CN 109635742A
Authority
CN
China
Prior art keywords
subassembly
vehicle
assembly component
pixel
impairment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201811528123.7A
Other languages
English (en)
Inventor
尤晶晶
黄贤俊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Yuan Heng Technology Co Ltd
Original Assignee
Shenzhen Yuan Heng Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Yuan Heng Technology Co Ltd filed Critical Shenzhen Yuan Heng Technology Co Ltd
Priority to CN201811528123.7A priority Critical patent/CN109635742A/zh
Publication of CN109635742A publication Critical patent/CN109635742A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/10Segmentation; Edge detection
    • G06T7/11Region-based segmentation
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/20Image preprocessing
    • G06V10/25Determination of region of interest [ROI] or a volume of interest [VOI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/20Special algorithmic details
    • G06T2207/20081Training; Learning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Image Analysis (AREA)

Abstract

本发明公开了一种车辆图像定损中的子部件损伤识别方法,用于识别车辆外观子部件损伤状态;其包括:针对车辆某些特定总成部件图,调用该总成部件的子部件分割模型,得到该总成部件像素级的子部件分割图;针对同一张车辆同一总成部件图,调用总成部件的损伤分割模型,得到该总成部件像素级的损伤分割图;分别提取该总成部件下的各子部件位置的像素级分割特征和损伤类型的像素级分割特征,输入到cnn分类模型,得到车辆总成部件下的各子部件损伤类型及损伤程度识别结果。本发明采用图像语义分割方法实现总成部件下的各子部件位置和损伤类型的像素级分割,两者结合实现各子部件损伤类型及损伤程度识别,实现了准确识别到最小外观子部件损伤状态。

Description

一种车辆图像定损中的子部件损伤识别方法
技术领域
本发明涉及车辆定损技术领域,尤其涉及一种车辆图像定损中的子部件 损伤识别方法。
背景技术
分割是一个十分活跃的研究课题,在深度学习到来之前,性能最好的方 法大部分依赖于手工设计的特征来独立地分类像素,如像素级的决策树分 类。
2014年,加州伯克利分校的Long等人提出的全卷积网络(Fully ConvolutionalNetwork),其推广了原有的CNN结构,在不带有全连接层的 情况进行的密集预测。随后又出现了Segnet网络,RefineNet网络,PSPNet 网络,Deeplab v1&v2&v3等网络。
另一方面,在车辆外观图片损伤识别***中,需要精确识别到最小的外 观子部件配件的损伤状态,一般需要应用到分割技术;但在实际应用中,现 有的车辆外观图片损伤识别***存在以下缺点:
1、识别准确率度低,目前车辆子部件损伤类型识别率整体偏低,尤其 是某些外形复杂的子部件;
2、分割类别数过多,模型不易收敛;
3、数据标注复杂度高,若按子部件的损伤类型来标,需要具备很高的 专业素质,至少能够准确判别所有子部件的损伤类型。
发明内容
针对上述现有技术中存在的不足之处,本发明提供一种车辆图像定损中 的子部件损伤识别方法,对于单个车辆外观总成部件采用图像语义分割方法 实现该总成部件下的各子部件位置的像素级分割和损伤类型的像素级分割, 两者信息结合从而实现该总成部件下的各子部件损伤类型及损伤程度识别, 实现了准确识别到最小外观子部件损伤状态。具体地,本发明包括以下步 骤:
针对车辆特定总成部件图,调用车辆相应总成部件的子部件分割模型, 得到该车辆总成部件像素级的子部件分割图;
针对同一张车辆总成部件图,调用车辆相应总成部件的损伤分割模型, 得到该车辆总成部件像素级的损伤分割图;
根据所述子部件分割图和所述损伤分割图,分别提取所述车辆总成部件 下的各子部件位置的像素级分割特征和损伤类型的像素级分割特征,输入到 分类模型,得到车辆总成部件下的各子部件损伤类型及损伤程度识别结果。
可选地,所述子部件分割模型和所述损伤分割模型均使用deeplabv3算 法。
可选地,所述分类模型为cnn分类模型。
进一步地,所述得到车辆总成部件下的各子部件损伤类型及损伤程度识 别结果的步骤,具体为:
结合子部件位置的像素级分割特征和损伤类型的像素级分割特征,生成 与车辆总成部件图尺寸大小相同,且每个像素点包含子部件标签和损伤类型 标签的特征图作为输入,使用ResNetV1_50网络进行分类,最终得到车辆子 部件的损伤类型及损伤程度识别结果。
本发明结合车辆子部件分割结果和损伤类型分割结果,通过cnn分类网 络得到最终的子部件损伤状态结果,具有以下优点:
1、本发明基于总成部件的子部件分割图和损伤分割图来实现车辆子部 件的损伤类型识别,能获得较高的准确率,特别是对于避免出现子部件的误 识、漏识问题,能有更好的效果;
2、本发明将一个m*n类别的子部件损伤分割模型,拆分成m类子部件 分割模型和n类损伤类型分割模型,从而大大加快了模型的收敛速度;
3、本发明分别从子部件和损伤两个维度进行数据标注,从而大大降低 了数据标注难度。
附图说明
图1为本发明实施例提供的车辆图像定损中的子部件损伤识别方法的执 行流程示意图;
具体实施方式
为使本发明实施例的目的、技术方案和优点更加清楚,下面将结合本发 明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述, 显然,所描述的实施例是本发明的一部分实施例,而不是全部的实施例。基 于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动的前提下 所获得的所有其他实施例,都属于本发明保护的范围。
请参阅图1,本实施例提供一种车辆图像定损中的子部件损伤识别方 法,用于识别车辆外观子部件损伤状态;通过对于单个车辆外观总成部件采 用图像语义分割方法实现该总成部件下的各子部件位置的像素级分割和损伤 类型的像素级分割,两者信息结合从而实现该总成部件下的各子部件损伤类 型及损伤程度识别,实现了准确识别到最小外观子部件损伤状态。具体地, 本实施例的方法包括以下步骤:
步骤一、针对车辆特定总成部件图,调用车辆相应总成部件的子部件分 割模型,得到该车辆总成部件像素级的子部件分割图;
步骤二、针对同一张车辆总成部件图,调用车辆相应总成部件的损伤分 割模型,得到该车辆总成部件像素级的损伤分割图;
步骤三、根据子部件分割图和损伤分割图,分别提取车辆总成部件下的 各子部件位置的像素级分割特征和损伤类型的像素级分割特征,输入到cnn 分类模型,得到车辆总成部件下的各子部件损伤类型及损伤程度识别结果。
可选地,上述子部件分割模型和损伤分割模型均使用deeplabv3算法;
1)引入语义分割常用的encoder-decoder。在encoder-decoder架构中,引 入可任意控制编码器提取特征的分辨率,通过空洞卷积平衡精度和耗时。
2)语义分割任务中采用Xception模型,在ASPP和解码模块使用 depthwiseseparable convolution。
进一步地,上述通过cnn分类模型得到车辆总成部件下的各子部件损伤 类型及损伤程度识别结果的过程,具体为:
结合子部件位置的像素级分割特征和损伤类型的像素级分割特征,生成 与车辆总成部件图尺寸大小相同,且每个像素点包含子部件标签和损伤类型 标签的特征图作为输入,使用ResNetV1_50网络进行分类,最终得到车辆子 部件的损伤类型及损伤程度识别结果。
本实施例的方法结合车辆子部件分割结果和损伤类型分割结果,通过逻 辑推理得到最终的子部件损伤状态结果,实现了车辆最小外观子部件损伤状 态的识别,具有如下优点:
1、基于总成部件的子部件分割图和损伤分割图来实现车辆子部件的损 伤类型识别,能获得较高的准确率,特别是对于避免出现子部件的误识、漏 识问题,能有更好的效果;
2、将一个m*n类别的子部件损伤分割模型,拆分成m类子部件分割模 型和n类损伤类型分割模型,从而大大加快了模型的收敛速度;
3、分别从子部件和损伤两个维度进行数据标注,降低了数据标注难 度。
需要说明的是,本发明实施例中,术语“包括”、“包含”或者其任何 其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方 法、物品或者终端设备不仅包括那些要素,而且还包括没有明确列出的其他 要素,或者是还包括为这种过程、方法、物品或者终端设备所固有的要素。 在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除 在包括所述要素的过程、方法、物品或者终端设备中还存在另外的相同要素。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域 技术人员来说,本发明可有各种更改和变化。凡在本发明的精神和原则之 内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之 内。

Claims (4)

1.一种车辆图像定损中的子部件损伤识别方法,其特征在于,所述子部件损伤识别方法包括以下步骤:
针对车辆特定总成部件图,调用车辆相应总成部件的子部件分割模型,得到该车辆总成部件像素级的子部件分割图;
针对同一张车辆总成部件图,调用车辆相应总成部件的损伤分割模型,得到该车辆总成部件像素级的损伤分割图;
根据所述子部件分割图和所述损伤分割图,分别提取所述车辆总成部件下的各子部件位置的像素级分割特征和损伤类型的像素级分割特征,输入到分类模型,得到车辆总成部件下的各子部件损伤类型及损伤程度识别结果。
2.如权利要求1所述的车辆图像定损中的子部件损伤识别方法,其特征在于,所述子部件分割模型和所述损伤分割模型均使用deeplabv3算法。
3.如权利要求1所述的车辆图像定损中的子部件损伤识别方法,其特征在于,所述分类模型为cnn分类模型。
4.如权利要求3所述的车辆图像定损中的子部件损伤识别方法,其特征在于,所述得到车辆总成部件下的各子部件损伤类型及损伤程度识别结果的步骤,具体为:
结合子部件位置的像素级分割特征和损伤类型的像素级分割特征,生成与车辆总成部件图尺寸大小相同,且每个像素点包含子部件标签和损伤类型标签的特征图作为输入,使用ResNetV1_50网络进行分类,最终得到车辆子部件的损伤类型及损伤程度识别结果。
CN201811528123.7A 2018-12-13 2018-12-13 一种车辆图像定损中的子部件损伤识别方法 Pending CN109635742A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201811528123.7A CN109635742A (zh) 2018-12-13 2018-12-13 一种车辆图像定损中的子部件损伤识别方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201811528123.7A CN109635742A (zh) 2018-12-13 2018-12-13 一种车辆图像定损中的子部件损伤识别方法

Publications (1)

Publication Number Publication Date
CN109635742A true CN109635742A (zh) 2019-04-16

Family

ID=66073762

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201811528123.7A Pending CN109635742A (zh) 2018-12-13 2018-12-13 一种车辆图像定损中的子部件损伤识别方法

Country Status (1)

Country Link
CN (1) CN109635742A (zh)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110135437A (zh) * 2019-05-06 2019-08-16 北京百度网讯科技有限公司 用于车辆的定损方法、装置、电子设备和计算机存储介质
CN111126407A (zh) * 2019-12-23 2020-05-08 昆明理工大学 一种基于单独编码网络的机械零件语义分割方法
CN112287905A (zh) * 2020-12-18 2021-01-29 德联易控科技(北京)有限公司 车辆损伤识别方法、装置、设备及存储介质
CN112329596A (zh) * 2020-11-02 2021-02-05 中国平安财产保险股份有限公司 目标物定损方法、装置、电子设备及计算机可读存储介质
WO2021135513A1 (zh) * 2020-05-29 2021-07-08 平安科技(深圳)有限公司 基于深度学习模型的车辆定损方法、装置、设备及介质
WO2021190269A1 (zh) * 2020-03-23 2021-09-30 虹软科技股份有限公司 车辆定损方法、车辆定损装置及应用其的电子设备

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107358596A (zh) * 2017-04-11 2017-11-17 阿里巴巴集团控股有限公司 一种基于图像的车辆定损方法、装置、电子设备及***
CN107403424A (zh) * 2017-04-11 2017-11-28 阿里巴巴集团控股有限公司 一种基于图像的车辆定损方法、装置及电子设备
US20180182039A1 (en) * 2016-01-22 2018-06-28 Ping An Technology (Shenzhen) Co., Ltd. Method, system, apparatus, and storage medium for realizing antifraud in insurance claim based on consistency of multiple images
WO2018205467A1 (zh) * 2017-05-10 2018-11-15 平安科技(深圳)有限公司 车损部位的识别方法、***、电子装置及存储介质
CN108921068A (zh) * 2018-06-22 2018-11-30 深源恒际科技有限公司 一种基于深度神经网络的汽车外观自动定损方法及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180182039A1 (en) * 2016-01-22 2018-06-28 Ping An Technology (Shenzhen) Co., Ltd. Method, system, apparatus, and storage medium for realizing antifraud in insurance claim based on consistency of multiple images
CN107358596A (zh) * 2017-04-11 2017-11-17 阿里巴巴集团控股有限公司 一种基于图像的车辆定损方法、装置、电子设备及***
CN107403424A (zh) * 2017-04-11 2017-11-28 阿里巴巴集团控股有限公司 一种基于图像的车辆定损方法、装置及电子设备
WO2018205467A1 (zh) * 2017-05-10 2018-11-15 平安科技(深圳)有限公司 车损部位的识别方法、***、电子装置及存储介质
CN108921068A (zh) * 2018-06-22 2018-11-30 深源恒际科技有限公司 一种基于深度神经网络的汽车外观自动定损方法及***

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110135437A (zh) * 2019-05-06 2019-08-16 北京百度网讯科技有限公司 用于车辆的定损方法、装置、电子设备和计算机存储介质
US11538286B2 (en) 2019-05-06 2022-12-27 Beijing Baidu Netcom Science And Technology Co., Ltd. Method and apparatus for vehicle damage assessment, electronic device, and computer storage medium
CN111126407A (zh) * 2019-12-23 2020-05-08 昆明理工大学 一种基于单独编码网络的机械零件语义分割方法
CN111126407B (zh) * 2019-12-23 2022-07-01 昆明理工大学 一种基于单独编码网络的机械零件语义分割方法
WO2021190269A1 (zh) * 2020-03-23 2021-09-30 虹软科技股份有限公司 车辆定损方法、车辆定损装置及应用其的电子设备
EP4131061A4 (en) * 2020-03-23 2024-04-10 Arcsoft Corporation Limited VEHICLE LOSS ASSESSMENT METHOD, VEHICLE LOSS ASSESSMENT APPARATUS, AND ELECTRONIC DEVICE USING SAME
WO2021135513A1 (zh) * 2020-05-29 2021-07-08 平安科技(深圳)有限公司 基于深度学习模型的车辆定损方法、装置、设备及介质
CN112329596A (zh) * 2020-11-02 2021-02-05 中国平安财产保险股份有限公司 目标物定损方法、装置、电子设备及计算机可读存储介质
CN112329596B (zh) * 2020-11-02 2021-08-24 中国平安财产保险股份有限公司 目标物定损方法、装置、电子设备及计算机可读存储介质
CN112287905A (zh) * 2020-12-18 2021-01-29 德联易控科技(北京)有限公司 车辆损伤识别方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
CN109635742A (zh) 一种车辆图像定损中的子部件损伤识别方法
CN111027562B (zh) 基于多尺度cnn和结合注意力机制的rnn的光学字符识别方法
CN109801307A (zh) 一种全景分割方法、装置及设备
US20200090007A1 (en) System and method for recognizing logos
CN106384112A (zh) 基于多通道多尺度与级联过滤器的快速图像文本检测方法
CN109933975A (zh) 一种基于深度学习的验证码识别方法及***
CN105512660A (zh) 车牌号码识别方法及装置
CN106682628B (zh) 一种基于多层深度特征信息的人脸属性分类方法
CN105760891A (zh) 一种中文字符验证码的识别方法
CN105045900A (zh) 数据提取的方法及装置
CN112818951A (zh) 一种票证识别的方法
CN110705630A (zh) 半监督学习式目标检测神经网络训练方法、装置及应用
CN109359196A (zh) 文本多模态表示方法及装置
CN105117740A (zh) 字体识别方法及装置
CN111126401A (zh) 一种基于上下文信息的车牌字符识别方法
CN113469997A (zh) 平面玻璃的检测方法、装置、设备和介质
CN111080723B (zh) 基于Unet网络的图像元素分割方法
CN114429636A (zh) 图像扫描识别方法、装置及电子设备
CN106897770B (zh) 一种建立车牌识别模型的方法及装置
CN111242114B (zh) 文字识别方法及装置
CN104598289A (zh) 一种识别方法及一种电子设备
CN111091550A (zh) 多尺寸自适应的pcb锡膏区域检测***及检测方法
KR102238672B1 (ko) 멀티클래스 분류 장치, 그 방법 및 컴퓨터 프로그램이 기록된 기록매체
CN113010736A (zh) 一种视频分类方法、装置、电子设备及存储介质
CN115393765A (zh) 一种视频字幕翻译方法、装置以及设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190416