CN103940620B - 基于图像识别的汽车故障判别与提示的方法及*** - Google Patents
基于图像识别的汽车故障判别与提示的方法及*** Download PDFInfo
- Publication number
- CN103940620B CN103940620B CN201410167216.7A CN201410167216A CN103940620B CN 103940620 B CN103940620 B CN 103940620B CN 201410167216 A CN201410167216 A CN 201410167216A CN 103940620 B CN103940620 B CN 103940620B
- Authority
- CN
- China
- Prior art keywords
- image
- vehicle failure
- vehicle
- expert
- prompting
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Landscapes
- Telephonic Communication Services (AREA)
Abstract
本发明公开一种基于图像识别的汽车故障判别与提示的方法,采用移动智能终端对车辆OBD***提示的汽车故障提示代码图像拍照,通过图像处理、图像识别,提取图像特征与远程服务器中的故障符号数据库对比、查询后,将相应的汽车手册相应页面及专家处理建议显示在移动智能终端;本发明还公开了一种适用于上述方法的***。本发明可大大降低因为车主不熟悉汽车故障代码含义带来的人身和财产安全损失可能。
Description
技术领域
本发明涉及移动智能终端及计算机技术的应用,尤其涉及一种基于图像识别的汽车故障判别与提示的方法及***。
背景技术
现有的汽车故障判别与提示方法,采用跟OBD***对接,需车型安装了液晶显示屏并与OBD***对接。若车型不支持,则需改装、加装基于蓝牙或其他无线技术的设备,才能给车主进行汽车故障代码所对应含义的详细提示,增加了车辆改装的附加风险和成本,也增加了添置设备成本。
发明内容
本发明旨在提供一种基于图像识别的汽车故障判别与提示的***及方法,采用移动智能终端及无线通信技术,在车辆发生故障报警时,驾驶员或同行人可方便的获得详细、友好、容易理解的故障提示和建议以及专业救援服务;可大大降低因为车主不熟悉汽车故障代码含义带来的人身和财产安全损失可能。
为达到上述目的,本发明是采用以下技术方案实现的:
本发明公开一种基于图像识别的汽车故障判别与提示的方法,包括以下步骤:
步骤1、获取汽车故障提示代码图像的照片:采用移动智能终端对汽车OBD***提示的汽车故障提示代码图像拍照;
步骤2、处理图像:对步骤1获得的照片进行图像增强处理;
步骤3、智能图像识别和汽车故障提示代码获取:采用智能图像识别技术对经过步骤2处理后的图像进行图像特征提取,再将提取的图像特征跟汽车故障符号特征数据库进行比对和决策,获得对应的汽车故障提示代码;
步骤4、根据汽车故障提示代码,调用汽车手册数据库获取对应的汽车手册页内容,调用专家建议数据库获得对应的故障处理建议;
步骤5、在移动智能终端上显示汽车手册页内容和故障处理建议。
优选的,步骤3中的智能图像识别包括以下过程中的部分或全部:图像分割、色彩空间转换、边缘检测、对象提取、特征提取。
进一步的,步骤3中的图像识别还包括人工识别,所述人工识别是指:将处理过的图像发送给汽车4S店和/或救援团队专家组的终端,专家组可根据该图像和智能图像识别的进行人工比对并进行人工决策,人工识别和智能图像识别的判决优先级可设定。
进一步的,步骤1中,移动智能终端根据车主的设置,将车主注册信息发送给远程服务器,远程服务器检索车辆维保信息数据库,并返回车主注册过的个人信息、车型信息及维修保养记录,发送给汽车4S店或救援团队专家的远程终端,作为故障判别和/或故障处理建议的依据。
进一步的,在步骤1中,还包括:移动智能终端根据车主的设置,将车主当前位置发送给汽车4S店或救援团队专家,便于救援团队定位故障车辆位置,车主当前位置由移动智能终端内置的地理位置定位功能确定。
进一步的,步骤5中还显示权责提示信息。
本发明还公开了所述基于图像识别的汽车故障判别与提示的方法的***,包括:
用于拍摄汽车故障提示代码图像的移动智能终端,所述移动智能终端包括图像获取模块并具有无线通信功能;
用于识别汽车故障提示代码图像的远程服务器,所述远程服务器包括图像处理模块、图像识别模块、数据库模块、查询模块、决策模块、无线通信模块。移动智能终端拍摄的汽车故障提示代码图像的照片通过无线通信传送到远程服务器,在远程服务器上处理和识别图像,并通过查询模块从数据库模块获得相应的汽车故障提示代码、汽车手册页内容、故障处理建议。远程服务器再采用无线通信方式将相应的汽车故障提示代码、汽车手册页内容、故障处理建议回传到移动智能终端上显示。
进一步的,所述移动智能终端可下载远程服务器提供的图像处理模块、图像识别模块、数据库模块、查询模块、决策模块、无线通信模块。即可不必传送照片,直接在移动智能终端完成上述功能,省略通讯环节。
优选的,所述数据库模块包括:
故障符号特征数据库,用于存储汽车故障提示代码图像;
汽车手册数据库,用于存储汽车手册并具备查询功能;
专家建议数据库,用于存储专家对车辆故障的处理建议并具备查询功能;
车辆维保信息数据库,用于存储注册车辆的维护、维修记录信息并具备查询功能。
进一步的,本发明公开的***还包括汽车4S店或救援团队专家处的远程终端,所述远程终端为固定式或便携式并具有无线通信功能。汽车4S店可配备固定式的远程终端,救援团队专家可配备便携式的远程终端,方便户外作业使用。
本发明的有益效果是:不论车辆型号,车主无需对汽车做任何改装,只需身边有可拍照的移动智能终端,即可在车辆故障时通过本***快速获取下列服务:
1、汽车当前故障代码所对应的《汽车手册》说明页。
2、汽车4S店或技术专家提供的专业处置建议。
3、拍摄照片及车辆当前位置可发送给汽车4S店或救援团队,专家可根据照片更准确地判定故障并联系车主和定位车主。
4、***可实时弹出汽车4S店或救援团队联系电话或值班人手机,点击即可直接拨号求助。
同时,节约了车辆改造的费用,避免了车辆改造过程中的附加风险,并且没有添加专用装置的附加费用,可大大降低因为车主不熟悉汽车故障代码含义带来的人身和财产安全损失可能,具有良好的社会效益和经济效益。
附图说明
图1为本发明的***的原理框图;
图2为本发明的图像处理和图像识别的原理框图;
图3为本发明的使用情况示意图。
具体实施方式
为了使本发明的目的、技术方案及优点更加清楚明白,以下结合附图,对本发明进行进一步详细说明。
本发明公开的方法的实施例一,包括以下步骤:
步骤1、获取和传送汽车故障提示代码图像:采用移动智能终端对汽车OBD***提示的汽车故障提示代码图像拍照,并将拍摄的照片通过无线通信方式发送到远程服务器;
步骤2、接收和处理图像:远程服务器接收步骤1中的照片,并对照片进行图像增强处理;
步骤3、智能图像识别和汽车故障提示代码获取:远程服务器采用智能图像识别技术对经过步骤2处理后的图像进行图像特征提取,再将提取的图像特征跟汽车故障符号特征数据库进行比对和决策,获得对应的汽车故障提示代码;智能图像识别的过程可能包括图像分割、色彩空间转换、边缘检测、对象提取、特征提取等环节,具体情况下稍有区别,比如:当汽车OBD***提示的汽车故障提示代码图像只有1个时,不需要图像分割环节;当汽车OBD***提示的汽车故障提示代码图像为2个以上时,首先要进行图像分割;图像识别还包括人工识别,所述人工识别是指:远程服务器将处理过的图像发送给汽车4S店和/或救援团队专家组的终端,专家组可根据该图像和智能图像识别的进行人工比对并进行人工决策,人工识别和智能图像识别的判决优先级可设定。
步骤4、远程服务器根据汽车故障提示代码,调用汽车手册数据库获取对应的汽车手册页内容,调用专家建议数据库获得对应的故障处理建议,并通过无线通信方式将所述汽车手册页内容和故障处理建议发送到移动智能终端;
步骤5、通过移动智能终端显示对应的汽车手册页内容和故障处理建议。
进一步的,车主可事先在远程服务器注册,在步骤1中,车主可选择将将车主注册信息发送给远程服务器,远程服务器检索车辆维保信息数据库,并返回车主注册过的个人信息、车型信息及维修保养记录,发送给汽车4S店或救援团队专家的远程终端,作为故障判别和/或故障处理建议的依据。
进一步的,在步骤1中,车主还可选择将车主的当前位置发送给汽车4S店或救援团队专家,便于救援团队定位故障车辆位置,车主当前位置由移动智能终端内置的地理位置定位功能确定。
进一步的,步骤5中还显示权责提示信息,比如显示“此建议仅供参考”之类和其他需要提醒的信息。
本发明公开的方法的实施例二,实施例二是移动智能终端已经下载有远程服务器提供的图像处理、识别等功能时采用的方法,包括以下步骤:
步骤1、获取和传送汽车故障提示代码图像:采用移动智能终端对汽车OBD***提示的汽车故障提示代码图像拍照;
步骤2、处理图像:并对照片进行图像增强处理;
步骤3、智能图像识别和汽车故障提示代码获取:采用智能图像识别技术对经过步骤2处理后的图像进行图像特征提取,再将提取的图像特征跟汽车故障符号特征数据库进行比对和决策,获得对应的汽车故障提示代码;智能图像识别的过程可能包括图像分割、色彩空间转换、边缘检测、对象提取、特征提取等环节,具体情况下稍有区别,比如:当汽车OBD***提示的汽车故障提示代码图像只有1个时,不需要图像分割环节;当汽车OBD***提示的汽车故障提示代码图像为2个以上时,首先要进行图像分割;图像识别还包括人工识别,所述人工识别是指:远程服务器将处理过的图像发送给汽车4S店和/或救援团队专家组的终端,专家组可根据该图像和智能图像识别的进行人工比对并进行人工决策,人工识别和智能图像识别的判决优先级可设定。
步骤4、根据汽车故障提示代码,调用汽车手册数据库获取对应的汽车手册页内容,调用专家建议数据库获得对应的故障处理建议;
步骤5、通过移动智能终端显示对应的汽车手册页内容和故障处理建议。
进一步的,车主可事先在远程服务器注册,在步骤1中,车主可选择将将车主注册信息发送给远程服务器,远程服务器检索车辆维保信息数据库,并返回车主注册过的个人信息、车型信息及维修保养记录,发送给汽车4S店或救援团队专家的远程终端,作为故障判别和/或故障处理建议的依据。
进一步的,在步骤1中,车主还可选择将车主的当前位置发送给汽车4S店或救援团队专家,便于救援团队定位故障车辆位置,车主当前位置由移动智能终端内置的地理位置定位功能确定。
进一步的,步骤5中还显示权责提示信息,比如显示“此建议仅供参考”之类和其他需要提醒的信息。
本发明还公开了适用于上述方法的***,如图1、图3所示,用于拍摄汽车故障提示代码图像的移动智能终端采用智能手机,可通过智能手机上的APP来控制完成汽车故障提示代码图像的拍摄和发送,并采用控件方式设置是否在发送照片时附带发送车主注册信息和车主地理位置信息,车主地理位置信息可用智能手机自带的地理位置定位功能获取,图像获取模块为智能手机自带的摄像头及其控制部件、显示模块为智能手机的触摸屏及其控制部件,图像的发送可采用无线互联网或手机运营商提供的数据流量,通过微信等方式实现。
用于识别汽车故障提示代码图像的远程服务器包括图像处理模块、图像识别模块、数据库模块、查询模块、决策模块、无线通信模块;数据库模块包括:
故障符号特征数据库,用于存储汽车故障提示代码图像;
汽车手册数据库,用于存储汽车手册并具备查询功能;
专家建议数据库,用于存储专家对车辆故障的处理建议并具备查询功能;
车辆维保信息数据库,用于存储注册车辆的维护、维修记录信息并具备查询功能。
如图2所示,图像处理子***包括图像获取和图像增强;图像识别模块具备多种决策方法,决策方法一:采用图像识别子***A,包括图像分割、色彩空间转换、边缘检测、对象提取、特征提取环节,适用于多个故障同时发生;
决策方法二:采用图像识别子***B,包括边缘检测、对象提取、特征提取环节,适用于单个故障发生;
决策方法三:采用图像识别子***C,即人工识别方式,汽车4S店或救援团队专家通过远程终端与远程服务器互动,由专家人眼识别,并通过远程终端将决策结果返回远程服务器或移动智能终端。
本发明使用时,车主只需要采用智能手机拍摄汽车故障提示代码图像,如图3左部所示,通过本发明的方法处理后,或通过相应的控件发送,远程服务器处理后发送的汽车手册页内容、专家建议处理意见和权责提示信息分别显示在智能手机的显示屏的上、中、下三个区域,即汽车手册部分、专家建议部分、救援服务部分。
当然,本发明还可有其它多种实施例,在不背离本发明精神及其实质的情况下,熟悉本领域的技术人员可根据本发明作出各种相应的改变和变形,但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (5)
1.基于图像识别的汽车故障判别与提示的方法,其特征在于,包括以下步骤:
步骤1、获取汽车故障提示代码图像的照片:采用移动智能终端对汽车OBD***提示的汽车故障提示代码图像拍照;
步骤2、处理图像:对步骤1获得的照片进行图像增强处理;
步骤3、智能图像识别和汽车故障提示代码获取:采用智能图像识别技术对经过步骤2处理后的图像进行图像特征提取,再将提取的图像特征跟汽车故障符号特征数据库进行比对和决策,获得对应的汽车故障提示代码;
步骤4、根据汽车故障提示代码,调用汽车手册数据库获取对应的汽车手册页内容,调用专家建议数据库获得对应的故障处理建议;
步骤5、在移动智能终端上显示汽车手册页内容和故障处理建议;
步骤3中的智能图像识别包括以下过程中的部分或全部:图像分割、色彩空间转换、边缘检测、对象提取、特征提取;
步骤3中的图像识别还包括人工识别,所述人工识别是指:将处理过的图像发送给汽车4S店和/或救援团队专家组的终端,专家组可根据该图像和智能图像识别的进行人工比对并进行人工决策,人工识别和智能图像识别的判决优先级可设定;
步骤1中,移动智能终端根据车主的设置,将车主注册信息发送给远程服务器,远程服务器检索车辆维保信息数据库,并返回车主注册过的个人信息、车型信息及维修保养记录,发送给汽车4S店或救援团队专家的远程终端,作为故障判别和/或故障处理建议的依据;
步骤1中,移动智能终端根据车主的设置,将车主当前位置发送给汽车4S店或救援团队专家,便于救援团队定位故障车辆位置,车主当前位置由移动智能终端内置的地理位置定位功能确定;
步骤5中还显示权责提示信息。
2.一种适用于权利要求1所述的基于图像识别的汽车故障判别与提示的方法的***,其特征在于,包括:
用于拍摄汽车故障提示代码图像的移动智能终端,所述移动智能终端包括图像获取模块并具有无线通信功能;
用于识别汽车故障提示代码图像的远程服务器,所述远程服务器包括图像处理模块、图像识别模块、数据库模块、查询模块、决策模块、无线通信模块。
3.根据权利要求2所述的***,其特征在于,所述移动智能终端还包括图像处理模块、图像识别模块、数据库模块、查询模块、决策模块、无线通信模块。
4.根据权利要求2或3所述的***,其特征在于,所述数据库模块包括:
故障符号特征数据库,用于存储汽车故障提示代码图像;
汽车手册数据库,用于存储汽车手册并具备查询功能;
专家建议数据库,用于存储专家对车辆故障的处理建议并具备查询功能;
车辆维保信息数据库,用于存储注册车辆的维护、维修记录信息并具备查询功能。
5.根据权利要求2所述的***,其特征在于,还包括汽车4S店和/或救援团队专家处的远程终端,所述远程终端为固定式和/或便携式并具有无线通信功能。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410167216.7A CN103940620B (zh) | 2014-04-24 | 2014-04-24 | 基于图像识别的汽车故障判别与提示的方法及*** |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201410167216.7A CN103940620B (zh) | 2014-04-24 | 2014-04-24 | 基于图像识别的汽车故障判别与提示的方法及*** |
Publications (2)
Publication Number | Publication Date |
---|---|
CN103940620A CN103940620A (zh) | 2014-07-23 |
CN103940620B true CN103940620B (zh) | 2016-09-21 |
Family
ID=51188383
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410167216.7A Expired - Fee Related CN103940620B (zh) | 2014-04-24 | 2014-04-24 | 基于图像识别的汽车故障判别与提示的方法及*** |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN103940620B (zh) |
Families Citing this family (15)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20160035144A1 (en) * | 2014-07-30 | 2016-02-04 | GM Global Technology Operations LLC | Supplementing compact in-vehicle information displays |
CN104442631A (zh) * | 2014-12-25 | 2015-03-25 | 东风汽车公司 | 一种汽车智能用户手册交互方法 |
CN105224923B (zh) * | 2015-09-28 | 2018-10-19 | 大连楼兰科技股份有限公司 | 智能眼镜应用于维保过程中的划分零件定损等级的方法 |
CN107491464A (zh) * | 2016-08-23 | 2017-12-19 | 宝沃汽车(中国)有限公司 | 提供电子使用手册的装置、方法、终端、服务器和*** |
JP6815290B2 (ja) * | 2017-07-13 | 2021-01-20 | ヤンマーパワーテクノロジー株式会社 | 物体識別システム |
CN107479535A (zh) * | 2017-08-23 | 2017-12-15 | 中国汽车技术研究中心 | 一种基于obd汽车故障诊断防作弊的*** |
CN107729372A (zh) * | 2017-09-12 | 2018-02-23 | 维沃移动通信有限公司 | 一种异常指示方法及移动终端 |
CN108734133A (zh) * | 2018-05-22 | 2018-11-02 | 维沃移动通信有限公司 | 车辆故障处理方法及移动终端 |
CN109255855B (zh) * | 2018-09-28 | 2022-01-14 | 上汽通用五菱汽车股份有限公司 | 车辆的维保方法、终端及计算机可读存储介质 |
CN109922457B (zh) * | 2019-02-13 | 2022-06-21 | 浙江吉利汽车研究院有限公司 | 信息交互方法、装置及*** |
CN111784005A (zh) * | 2020-06-17 | 2020-10-16 | 北京中铁电梯工程有限公司 | 基于物联网的电梯维保方法、维保装置、维保***及计算机可读存储介质 |
CN112630718A (zh) * | 2020-10-22 | 2021-04-09 | 国网浙江省电力有限公司杭州供电公司 | 电能表检定故障判断智能辅助装置 |
CN112446513A (zh) * | 2020-12-15 | 2021-03-05 | 恒大恒驰新能源汽车研究院(上海)有限公司 | 车辆零部件检测方法及装置、计算机可读存储介质 |
JP7409332B2 (ja) * | 2021-02-10 | 2024-01-09 | トヨタ自動車株式会社 | 情報処理装置、情報処理方法、およびプログラム |
CN114030354B (zh) * | 2021-11-15 | 2023-11-21 | 浙江吉利控股集团有限公司 | 一种车辆的高压电状态的提醒方法、***及车辆 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1655199A (zh) * | 2004-10-28 | 2005-08-17 | 惠州Tcl移动通信有限公司 | 一种汽车故障检测装置和与其配套使用的移动电话 |
JP2007001486A (ja) * | 2005-06-24 | 2007-01-11 | Toyota Mapmaster:Kk | 車輌用情報提供システム |
KR20070047468A (ko) * | 2005-11-02 | 2007-05-07 | 현대자동차주식회사 | 무선 통신 단말을 이용한 차량의 정비 진단 시스템 |
JP2008275545A (ja) * | 2007-05-07 | 2008-11-13 | Sony Corp | 車両用故障診断装置および車両用故障診断方法 |
CN101929921A (zh) * | 2009-06-22 | 2010-12-29 | 钟桢 | 基于智能手机的汽车故障检测方法与装置 |
-
2014
- 2014-04-24 CN CN201410167216.7A patent/CN103940620B/zh not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1655199A (zh) * | 2004-10-28 | 2005-08-17 | 惠州Tcl移动通信有限公司 | 一种汽车故障检测装置和与其配套使用的移动电话 |
JP2007001486A (ja) * | 2005-06-24 | 2007-01-11 | Toyota Mapmaster:Kk | 車輌用情報提供システム |
KR20070047468A (ko) * | 2005-11-02 | 2007-05-07 | 현대자동차주식회사 | 무선 통신 단말을 이용한 차량의 정비 진단 시스템 |
JP2008275545A (ja) * | 2007-05-07 | 2008-11-13 | Sony Corp | 車両用故障診断装置および車両用故障診断方法 |
CN101929921A (zh) * | 2009-06-22 | 2010-12-29 | 钟桢 | 基于智能手机的汽车故障检测方法与装置 |
Non-Patent Citations (1)
Title |
---|
手机APP车联网应用解决方案;tranbbs.com;《www.tranbbs.com/Solution/IOV/Solution_118023.shtml》;20130627;1-3 * |
Also Published As
Publication number | Publication date |
---|---|
CN103940620A (zh) | 2014-07-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN103940620B (zh) | 基于图像识别的汽车故障判别与提示的方法及*** | |
US20220114894A1 (en) | Tracking and analysis of drivers within a fleet of vehicles | |
US9342934B2 (en) | Vehicle specific reset device and method | |
US9141503B1 (en) | Vehicle-specific diagnostic reset device and method | |
CN103035048B (zh) | 用于管理车辆车队的远程数据库 | |
US11790632B2 (en) | Method and apparatus for sample labeling, and method and apparatus for identifying damage classification | |
US20140107886A1 (en) | System to View Automobile Diagnostic Information | |
CN100382074C (zh) | 基于数字视频处理技术的位置追踪***及方法 | |
US10928213B2 (en) | In-vehicle device, information processing device, information processing system, control method for in-vehicle device, information processing method, and recording medium | |
CN202871022U (zh) | 一种基于gps和人脸识别的校车全自动监控*** | |
US20190286843A1 (en) | Data delivery control device, information processing device, and method for data delivery control | |
CN108711152B (zh) | 一种基于ai技术的图像分析方法、装置和用户终端 | |
CN108924759B (zh) | 识别移动发生器的方法、装置及*** | |
EP3570568B1 (en) | Vehicle repairing method and apparatus | |
CN111301343B (zh) | 基于人脸识别的智能车载***的控制方法 | |
DE102013222092A1 (de) | Erkennung von Maschinen-Codes mit einer On-Board-Kamera eines Fahrzeugs | |
CN105139504A (zh) | 车辆智能管理装置及方法 | |
WO2016069444A1 (en) | Methods and systems for taxonomy assist at data entry points | |
CN106850921A (zh) | 为特定用户确定电话号码优先级列表 | |
CN108616562B (zh) | 一种地理位置信息推荐处理方法及装置 | |
CN109145285A (zh) | 短语提取文本分析方法和*** | |
CN108022442B (zh) | 一种基于云管端的车辆监控***及其使用方法 | |
CN107560610A (zh) | 一种电子设备及其应用的信息显示方法及*** | |
CN103021178A (zh) | 汽车载客人数实时监控*** | |
KR20160002909U (ko) | 스마트폰을 활용한 포트홀 검출 통보 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
C14 | Grant of patent or utility model | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20160921 |