CN102741900B - 道路状况管理***及道路状况管理方法 - Google Patents

道路状况管理***及道路状况管理方法 Download PDF

Info

Publication number
CN102741900B
CN102741900B CN201080063282.XA CN201080063282A CN102741900B CN 102741900 B CN102741900 B CN 102741900B CN 201080063282 A CN201080063282 A CN 201080063282A CN 102741900 B CN102741900 B CN 102741900B
Authority
CN
China
Prior art keywords
information
condition
road
photographic images
image information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201080063282.XA
Other languages
English (en)
Other versions
CN102741900A (zh
Inventor
铃木章裕
森冈干夫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN102741900A publication Critical patent/CN102741900A/zh
Application granted granted Critical
Publication of CN102741900B publication Critical patent/CN102741900B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/01Detecting movement of traffic to be counted or controlled
    • G08G1/04Detecting movement of traffic to be counted or controlled using optical or ultrasonic detectors
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0967Systems involving transmission of highway information, e.g. weather, speed limits
    • G08G1/096766Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission
    • G08G1/096775Systems involving transmission of highway information, e.g. weather, speed limits where the system is characterised by the origin of the information transmission where the origin of the information is a central station

Landscapes

  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Atmospheric Sciences (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供一种能够掌握道路状况的准确状态、并且能够减轻确认者的负担的道路状况管理***。用于管理道路设施的道路设施管理***(100)由车载设备(10)及信息服务器(30)构成。车载设备(10)包括:相机(11),安装于车辆上,以拍摄车辆的外部;图像识别部(12),对拍摄图像进行用于检测道路设施的图像识别;发送图像信息生成部(13),生成包含拍摄图像的发送图像信息;道路设施信息数据库(17),存储道路设施信息;及传送部(20),当图像识别部(12)的识别结果与存储于道路设施信息数据库(17)的道路设施信息不同时,输出发送图像信息。信息服务器(30)包括:传送部(31),接收发送图像信息;显示部(361),显示包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及输入接收部(362),用于使确认者输入显示于输入显示部(361)的拍摄图像的确认结果。

Description

道路状况管理***及道路状况管理方法
相关申请
本申请主张2010年3月3日在日本申请的专利申请号2010-046596的利益,将该申请的内容引用到本说明书中。
技术领域
本发明涉及一种管理标识等道路状况的道路状况管理***及道路状况管理方法,具体而言,涉及通过车辆获取道路状况的信息并管理道路状况的道路状况管理***及道路状况管理方法。
背景技术
以往,公知有通过车辆获取道路状况的信息并管理道路状况信息的道路状况管理***。该***包括为了获取道路状况的信息而设置于车辆上的车载设备及管理道路状况的信息的信息服务器。车载设备包括用于拍摄道路状况的相机及对通过相机获得的拍摄图像进行图像识别来检测道路状况的识别装置。信息服务器收集并管理通过车辆检测到的道路状况的信息。
通过利用这种道路状况管理***,例如公安局等道路管理机关的管理者(道路状况管理者)能够掌握道路状况上产生异常的情况,采取修理道路状况等应对。此时,车载设备能够搭载于例如警车上。
在这种道路状况管理***中,为了使道路状况的管理自动化,采用在车载设备中用相机拍摄道路状况并用识别装置的软件进行图像识别的方法。因此,为了提高通过信息服务器管理的道路状况信息的可靠度,需要提高图像识别的精度。
作为由搭载于车辆的车载设备获取道路的图像,并通过对该图像进行图像识别来检测道路状况,从而向信息中心发送图像识别的结果信息的***,有专利文献1所记载的***。在该***中,为了提高图像识别的结果的可靠性,在信息中心,根据从车载设备获取的图像识别的结果与过去存储的同一位置的图像识别的结果之差来求算图像识别的可信度。
专利文献1:日本特开2004-171159号公报
发明内容
然而,在专利文献1的***中,仅求算图像识别的可信度或求算可信度的平均,因此,导致存在图像识别的结果的可靠度较低的道路状况的信息。
此外,在专利文献1的***中,道路状况的检测取决于软件的图像识别处理,但是在图像识别处理中存在错误识别的可能性,因此为了提高信息的确定性,需要多个抽样数据,并且不明确采集多少个抽样数据才能获得足够的确定性。
本发明是鉴于上述问题而做出的,其目的在于提供一种道路状况管理***,以通过比软件的图像识别处理更确定的人(确认者)的认知能力来确认道路状况的状态作为前提,确认者能够方便地进行该确认。
本发明的一个方式为用于管理道路状况的道路状况管理***,该道路状况管理***具有包括车载设备和信息服务器的结构。车载设备包括:相机,安装于车辆上,以拍摄车辆的外部;图像识别部,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;发送图像信息生成部,生成包含拍摄图像的发送图像信息;道路状况信息数据库,存储道路状况信息;及发送图像信息输出部,当图像识别部的识别结果与存储于道路状况信息数据库的道路状况信息不同时,输出发送图像信息。信息服务器包括:接收部,接收发送图像信息;拍摄图像输出部,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及输入部,用于使确认者输入由输出部输出的拍摄图像的确认结果。
本发明的另一个方式为车载设备,该车载设备包括:相机,安装于车辆上,以拍摄车辆的外部;图像识别部,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;发送图像信息生成部,生成包含拍摄图像的发送图像信息;道路状况信息数据库,存储道路状况信息;及发送图像信息输出部,当图像识别部的识别结果与存储于道路状况信息数据库的道路状况信息不同时,输出发送图像信息。
本发明的又一方式为用于管理道路状况的信息服务器,该信息服务器包括:接收部,接收发送图像信息,该发送图像信息包含通过安装于车辆上以拍摄车辆的外部的相机的拍摄而获得的拍摄图像;拍摄图像输出部,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及输入部,用于使确认者输入由拍摄图像输出部输出的拍摄图像的确认结果。
本发明的又一方式为一种道路状况管理方法,使用包括车载设备及信息服务器的道路状况管理***来执行,在车载设备中,用相机拍摄车辆的外部,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别,当图像识别的结果与存储于车载设备的数据库的道路状况信息不同时,输出包含拍摄图像的发送图像信息,在信息服务器中,接收发送图像信息,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认,确认者对所输出的拍摄图像进行确认,并输入确认结果。
本发明的又一方式为一种程序,使包括安装于车辆上以拍摄车辆的外部的相机及存储道路状况信息的道路状况信息数据库的车载设备执行以下步骤:图像识别步骤,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;发送图像信息生成步骤,生成包含拍摄图像的发送图像信息;判定图像识别步骤的识别结果是否与存储于道路状况信息数据库的道路状况信息不同的步骤;及发送图像信息输出步骤,当图像识别步骤的识别结果与存储于道路状况信息数据库的道路状况信息不同时,输出发送图像信息。
本发明的又一方式为一种程序,由用于管理道路状况的信息服务器执行以下步骤:接收步骤,接收发送图像信息,该发送图像信息包含通过安装于车辆上以拍摄车辆的外部的相机的拍摄而获得的拍摄图像;拍摄图像输出步骤,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及确认结果接收步骤,接收确认者对通过拍摄图像输出步骤输出的拍摄图像的确认结果。
发明效果
本发明能够提供一种具有如下效果的道路状况管理***:由于确认者通过目视确认拍摄图像,因此能够掌握道路状况的准确状态,并且,确认者不是确认所有拍摄图像,而是通过目视仅确认需要确认的拍摄图像,并能够输入该确认的结果,因此能够减轻确认者的负担。
如以下进行的说明,本发明还有其他方式。因此,本发明的公开仅是本发明的一部分,并不限定于此处所记载并要求保护的发明范围。
附图说明
图1是表示本发明的实施方式中的车载设备的结构的框图。
图2是表示本发明的实施方式中的道路设施管理***的结构的图。
图3是表示本发明的实施方式中的车载设备的道路设施信息数据库的结构的图。
图4(a)是表示拍摄树木的背后的道路标识的状况的图。
图4(b)是表示拍摄树木的背后的道路标识而获得的图像的图。
图5是表示本发明的实施方式中的从车载设备向信息服务器发送的发送图像信息的句法的图。
图6是表示本发明的实施方式中的信息服务器的结构的框图。
图7是表示本发明的实施方式中的确认列表的结构的图。
图8是表示本发明的实施方式中的信息服务器的道路设施管理信息数据库的结构的图。
图9是表示本发明的实施方式中的确认画面(状况:异常检测)的图。
图10是表示本发明的实施方式中的确认画面(状况:新增设施检测)的图。
图11是本发明的实施方式中的车载设备的动作流程图。
图12是本发明的实施方式中的车载设备的参考图像发送判定处理的动作流程图。
图13是本发明的实施方式中的信息服务器的发送图像信息接收时的动作流程图。
图14是本发明的实施方式中的用于使确认者确认拍摄图像的动作流程图。
具体实施方式
以下,详细说明本发明。以下说明的实施方式仅是本发明的例子,本发明能够变形为各种方式。因此,以下公开的特定的结构及功能不限定权利要求的范围。
本发明的一个方式为用于管理道路状况的道路状况管理***,该道路状况管理***具有包括车载设备和信息服务器的结构。车载设备包括:相机,安装于车辆上,以拍摄车辆的外部;图像识别部,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;发送图像信息生成部,生成包含拍摄图像的发送图像信息;道路状况信息数据库,存储道路状况信息;及发送图像信息输出部,当图像识别部的识别结果与存储于道路状况信息数据库的道路状况信息不同时,输出发送图像信息。信息服务器包括:接收部,接收发送图像信息;拍摄图像输出部,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及输入部,用于使确认者输入由输出部输出的拍摄图像的确认结果。
根据该结构,当对拍摄图像进行图像识别的结果与存储于数据库的道路状况信息不同时,车载设备输出发送图像信息,信息服务器包括输出拍摄图像以使确认者能够通过目视进行确认的拍摄图像输出部及用于使确认者输入由输出部输出的拍摄图像的确认结果的输入部,因此确认者能够通过目视确认拍摄图像来掌握道路状况的准确状态,并且,确认者不是确认所有拍摄图像,而是通过目视仅确认需要确认的拍摄图像,并能够输入该确认的结果,因此能够减轻确认者的负担。
在上述道路状况管理***中,信息服务器包括存储用于管理道路状况的道路状况管理信息的道路状况管理信息数据库,并根据确认结果来更新道路状况管理信息数据库。
根据该结构,信息服务器的道路状况管理信息数据库被更新,以反映确认者通过目视确认的结果,因此能够通过信息服务器管理道路状况的准确的信息。
在上述道路状况管理***中,车载设备根据确认结果来更新道路状况信息数据库。
根据该结构,确认者在确认道路状况的异常或新增的道路状况之后,相应地更新车载设备的数据库,之后,对于同一道路状况,不会发送来发送图像信息,因此能够避免确认者对同一道路状况重复进行确认。
在上述道路状况管理***中,在通过图像识别部未检测到与存储于道路状况信息数据库的道路状况信息对应的道路状况时,车载设备通过发送图像信息输出部输出发送图像信息。
根据该结构,当通过相机没能拍摄到与应存在于车载设备的数据库的道路状况时,确认者对拍摄图像进行确认。确认者能够通过确认拍摄图像来判断该道路状况被遮蔽或破损等而需要道路状况的修理等应对、或者仅是由于被大型车辆遮挡而没能拍摄到该道路状况或仅是图像识别不准确等而不需要道路状况的修理等应对。
在上述道路状况管理***中,当通过图像识别部检测到未存储于道路状况信息数据库的道路状况时,车载设备通过发送图像信息生成部生成发送图像信息。
根据该结构,当通过相机拍摄到存储于车载设备的数据库的道路状况时,确认者对拍摄图像进行确认。确认者能够通过确认拍摄图像来判断该道路状况确实存在或图像识别上存在错误等实际上不存在新增的道路状况。
在上述道路状况管理***中,道路状况管理信息中包含参考图像,信息服务器包括从道路状况管理信息数据库中选择与拍摄图像对应的参考图像的参考选择部,拍摄图像输出部将通过参考选择部选择的参考图像和拍摄图像一同输出。
根据该结构,确认者能够将拍摄图像与参考图像进行比较并进行确认,因此能够方便地判断道路状况是否存在异常等。
在上述道路状况管理***中,在道路状况管理信息中,对于一个道路状况,包含多个参考图像,参考选择部选择拍摄条件与通过拍摄图像输出部输出的拍摄图像的拍摄条件最接近的参考图像。
根据该结构,确认者能够在确认拍摄图像的同时,确认拍摄条件与该拍摄图像的拍摄条件相似的参考图像,因此能够更准确地判断道路状况是否存在异常等。
在上述道路状况管理***中,当图像识别部的检测结果与存储于道路状况信息数据库的道路状况信息一致时,在图像识别部的图像识别的可靠度较高的情况下,发送图像信息输出部也输出将拍摄图像指定为参考图像候选的发送图像信息,信息服务器将参考图像候选作为道路状况管理信息的参考图像而存储于道路状况管理信息数据库。
根据该结构,信息服务器能够将通过车载设备获得的图像识别的可靠度较高的拍摄图像作为参考图像来存储。
在上述道路状况管理***中,图像识别的可靠度是预先存储的道路状况的图形与包含于拍摄图像的图形的一致度。
根据该结构,信息服务器能够将与预先存储的道路状况的图形相近的拍摄图像作为参考图像来存储。
在上述道路状况管理***中,信息服务器包括需要图像要求部,当与包含于发送图像信息的拍摄图像对应的参考图像未存储于道路状况管理信息服务器时,需要图像要求部对车载设备要求与该拍摄图像对应的参考图像候选,发送图像信息输出部根据要求输出包含与拍摄图像对应的拍摄图像的发送图像信息。
根据该结构,当信息服务器中没有参考图像时,能够从车载设备获取参考图像候选。
在上述道路状况管理***中,对于一个道路状况,当接收部接收到多个发送图像信息时,拍摄图像输出部优先输出该多个发送图像信息中确认优先度较高的发送图像信息所包含的拍摄图像。
根据该结构,确认者不需要对同一道路状况重复确认拍摄图像,并且能够优先确认多个拍摄图像中的优先度较高的拍摄图像。
在上述道路状况管理***中,确认优先度可根据包含于发送图像信息的拍摄图像的拍摄时间段、车辆种类及拍摄时的车辆速度中的至少任一个来求算。
根据该结构,使得确认者更容易进行确认的拍摄图像被设置为优先。
在上述道路状况管理***中,信息服务器包括用于保存通过接收部接收的发送图像信息的确认列表保存部,拍摄图像输出部输出保存于确认列表保存部的发送图像信息。
根据该结构,信息服务器即使接收到发送图像信息,也不会立即使确认者通过包含于其中的拍摄图像进行确认,而会将所接收的发送图像信息暂时保存于确认列表保存部,因此对同一道路状况能够获取多个发送图像信息,能够使确认者通过其中的优先度较高的拍摄图像进行确认。
在上述道路状况管理***中,车载设备的发送图像信息输出部通过无线通信将发送图像信息向信息服务器发送,信息服务器的接收部通过无线通信从车载设备接收发送图像信息。
根据该结构,能够利用车载设备与信息服务器之间的无线通信进行发送图像信息的收发。
在上述道路状况管理***中,车载设备的发送图像信息输出部将发送图像信息记录于记录介质,信息服务器的接收部从记录介质中读出发送图像信息。
根据该结构,在车载设备与信息服务器之间,能够利用记录介质进行发送图像信息的交接。
本发明的另一个方式为车载设备,该车载设备包括:相机,安装于车辆上,以拍摄车辆的外部;图像识别部,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;发送图像信息生成部,生成包含拍摄图像的发送图像信息;道路状况信息数据库,存储道路状况信息;及发送图像信息输出部,当图像识别部的识别结果与存储于道路状况信息数据库的道路状况信息不同时,输出发送图像信息。
根据该结构,能够从通过相机的拍摄而获得的拍摄图像中输出需要确认者进行确认的图像,因此确认者能够方便地通过目视进行确认。
本发明的又一方式为用于管理道路状况的信息服务器,该信息服务器包括:接收部,接收发送图像信息,该发送图像信息包含通过安装于车辆上以拍摄车辆的外部的相机的拍摄而获得的拍摄图像;拍摄图像输出部,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及输入部,用于使确认者输入由拍摄图像输出部输出的拍摄图像的确认结果。
根据该结构,确认者能够通过目视确认拍摄图像,并输入该确认结果,因此能够准确地管理道路状况的信息。
本发明的又一方式为一种道路状况管理方法,使用包括车载设备及信息服务器的道路状况管理***来执行,在车载设备中,用相机拍摄车辆的外部,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别,当图像识别的结果与存储于车载设备的数据库的道路状况信息不同时,输出包含拍摄图像的发送图像信息,在信息服务器中,接收发送图像信息,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认,确认者对所输出的拍摄图像进行确认,并输入确认结果。
即使根据该方法,与上述道路状况管理***同样地,确认者也能够通过目视确认拍摄图像,因此能够掌握道路状况的准确的状态,并且确认者不是确认所有拍摄图像,而是通过目视仅确认需要确认的拍摄图像,并能够输入该确认的结果,因此能够减轻确认者的负担。
本发明的又一方式为一种程序,该程序使包括安装于车辆上以拍摄车辆的外部的相机及存储道路状况信息的道路状况信息数据库的车载设备执行以下步骤:图像识别步骤,对通过相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;发送图像信息生成步骤,生成包含拍摄图像的发送图像信息;判定图像识别步骤的识别结果是否与存储于道路状况信息数据库的道路状况信息不同的步骤;及发送图像信息输出步骤,当图像识别步骤的识别结果与存储于道路状况信息数据库的道路状况信息不同时,输出发送图像信息。
即使根据该程序,与上述车载设备同样地,也能够从通过相机的拍摄而获得的拍摄图像中输出需要确认者进行确认的图像,确认者能够方便地通过目视进行确认。
本发明的又一方式为一种程序,该程序使用于管理道路状况的信息服务器执行以下步骤:接收步骤,接收发送图像信息,该发送图像信息包含通过安装于车辆上以拍摄车辆的外部的相机的拍摄而获得的拍摄图像;拍摄图像输出步骤,输出包含于发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;及确认结果接收步骤,接收确认者对通过拍摄图像输出步骤输出的拍摄图像进行的确认结果。
即使根据该程序,与上述信息服务器同样地,确认者也能够通过目视确认拍摄图像,并输入该确认结果,因此能够准确地管理道路状况的信息。
以下,对本发明的实施方式的道路状况管理***进行说明。另外,在作为道路状况管理***的管理对象的道路状况中,除了包括标识、信号设备等道路设施之外,还包括形成于道路上的坑、道路上的散落物、建筑物等。在本实施方式中,作为道路状况管理***的一例,对管理标识或信号设备等道路设施的道路设施管理***进行说明。本实施方式的道路设施管理***包括车载设备和信息服务器。图1是表示本实施方式的车载设备的结构的框图,图2是表示本实施方式的道路设施管理***的结构的图。首先,参照图2说明道路设施管理***的结构及其动作的概要,之后说明车载设备及信息服务器的结构及动作。
如图2所示,本实施方式的道路设施管理***100包括:多个车载设备10,分别搭载于多个车辆C而生成发送图像信息;及信息服务器30,从多个车载设备10获取发送图像信息而管理道路设施。
车载设备10用相机拍摄包括道路标识、信号设备的道路设施S,对该拍摄图像进行图像识别而检测道路设施S,并生成包含拍摄图像的发送图像信息。车载设备10通过无线通信将发送图像信息发送至信息服务器30。信息服务器30包括用作运算处理单元及存储单元的主体301、用作显示单元的监视器302、用作输入单元的键盘303及鼠标304。信息服务器30从分别搭载于多个车辆C的多个车载设备10接收发送图像信息,并将包含于发送图像信息的拍摄图像显示到监视器302上。信息服务器的操作者(确认者)通过目视确认显示到信息服务器30的监视器302上的拍摄图像,并利用键盘303及鼠标304输入确认结果。信息服务器30根据所输入的确认结果进行道路设施管理信息的追加、变更等处理。当在道路设施上存在异常时,道路管理机关的管理者(道路设施管理者)确认由确认者输入的确认结果,并采取道路设施的修理等必要的措施。
(车载设备10的结构)
接着,说明车载设备10。如图1所示,车载设备10包括相机11、图像识别部12、发送图像信息生成部13、判定部14、设施掌握部15、GPS(Global Positioning System)16、道路设施信息数据库17、车辆信息获取部18、数据库更新部19、传送部20及服务器要求接收部21。
车载设备10以相机11能够对车辆C的前方进行拍摄的位置及角度安装于车辆C。相机11始终对车辆C的前方进行拍摄,并生成车辆C的前方的拍摄图像。由相机11生成的拍摄图像被输入至图像识别部12及发送图像信息生成部13。另外,车载设备10也可以包括多个相机11。此时,车载设备10例如也可以包括拍摄车辆C的前方的相机和拍摄车辆C的侧方的相机。
图像识别部12输入由相机11生成的拍摄图像,对该图像进行用于检测道路设施的图像识别。因此,在图像识别部12中存储有道路标识及信号设备等道路设施的图形。图像识别部12通过对拍摄图像进行图像识别而从拍摄图像中检测与所存储的道路设施的图形一致的图形。此外,图像识别部12与GPS16连接。当从拍摄图像中检测到道路设施时,图像识别部12向判定部14通知拍摄到该图像时的GPS16的定位信息(即车辆C的位置信息)和检测到该道路设施时的包含识别可靠度的图像识别结果。该识别可靠度是表示预先存储于图像识别部12的道路设施的图形与在拍摄图像中检测到的图形的一致度的评分,是例如60~100中的任意值。另外,当评分小于60时,表示识别失败,因此识别到道路设施时的识别结果中的识别可靠度一定为60以上。
判定部14判定是否向信息服务器30发送包含由相机11生成的拍摄图像的发送图像信息。当判定为将发送图像信息向信息服务器30发送时,判定部14对发送图像信息生成部13及传送部20发出发送指示。当发送图像信息生成部13从判定部14接收到发送图像信息的发送指示时,对从相机11输入的拍摄图像添加包括拍摄日期和时间、从GPS16获得的拍摄时的定位信息及从车辆信息获取部18获取的拍摄时的车辆信息等的元数据,生成发送图像信息,并向传送部20输出。当传送部20从判定部14接收到发送信息的发送指示时,通过无线向信息服务器30发送由发送图像信息生成部13生成的发送图像信息。
图3是表示道路设施信息数据库17的结构的图。在道路设施信息数据库17中,对于设置于道路上的各道路设施,存储有由道路设施ID、位置信息、道路设施种类、道路设施状况构成的道路设施信息。道路设施ID是各道路设施固有的识别信息,是由英文字母及数字的组合构成的信息。位置信息是设置有道路设施的位置的信息,是由纬度及经度构成的信息。道路设施种类是表示道路设施的种类的信息,例如是“信号设备”,对于道路标识,是“停”、“人行横道”、“限速”等。道路设施状况是表示道路设施的状态的信息,例如是“正常”、“破损”、“遮蔽”、“拆除”等。
设施掌握部15与GPS16及道路设施信息数据库17连接,从GPS16获取定位信息(车辆C的位置信息),在道路设施信息数据库17中检索与车辆C的当前位置对应的道路设施信息。当在道路设施信息数据库17中存在与车辆C的当前位置对应的道路设施信息时,设施掌握部15提取该道路设施信息。当提取到与车辆C的当前位置对应的道路设施信息时,设施掌握部15向判定部14通知该道路设施信息。
判定部14进行异常判定处理、新增设施判定处理及参考图像发送判定处理。以下,依次进行说明。
[异常判定处理]
当通过设施掌握部15提取与车辆C的当前位置对应的道路设施信息并通知到判定部14时,判定部14判断是否被通知图像识别部12对在该位置拍摄的图像进行的图像识别结果。若判定部14从图像识别部12被通知对与从设施掌握部15通知的道路设施信息对应的道路设施进行了检测的图像识别结果,则判定为该道路设施正常。当判定部14未从图像识别部12被通知对与从设施掌握部15通知的道路设施信息对应的道路设施进行了检测的图像识别结果时,判定为该道路设施上存在异常。
图4(a)是表示拍摄树木的背后的道路标识S(“停”)的状况的图,图4(b)是表示拍摄树木的背后的道路标识而获得的图像的图。图像识别部12即使对图4(b)的拍摄图像进行图像识别,也无法检测到“停”的道路标识。图4所示的状况为道路标识S被树木遮蔽而使车辆的司机难以见到的状态,因此需要道路设施管理者的应对。
作为判定部14未从图像识别部12被通知对与从设施掌握部15通知的道路设施信息对应的道路设施进行了检测的图像识别结果的情况、即判定部14判定为该道路设施上存在异常的情况,包括:如图4的例子那样实际上道路设施上产生了某种异常的情况(需要道路设施管理者的应对的情况);和实际上道路设施上没有异常的情况(不需要道路设施管理者的应对的情况)。作为实际上产生了异常的情况,例如有如图4(b)那样道路设施隐藏于树木的背后的情况、道路设施倾倒的情况、道路设施消失的情况等。作为虽然未从图像识别部12被通知对与从设施掌握部15通知的道路设施信息对应的道路设施进行了检测的图像识别结果但实际上道路设施上没有异常的情况,包括没有准确进行图像识别部12的图像识别的情况、被卡车等大型车辆遮挡而无法通过相机11拍摄到道路设施的情况、GPS的定位信息不准确导致实际上拍摄的位置与定位信息之间产生了偏差的情况等。
这样一来,包括实际上道路设施上没有异常的情况在内,在未从图像识别部12被通知对与从设施掌握部15通知的道路设施信息对应的道路设施进行了检测的图像识别结果的情况下,判定部14判定为该道路设施上存在异常。当判定为道路设施上存在异常时,判定部14对道路设施信息生成部13发出指示以生成发送图像信息,并向传送部20发出指示以传送发送图像信息。
[新增设施判定处理]
接着,说明基于判定部14进行的新增设施判定处理。如上所述,当基于图像识别部12进行图像识别的结果而检测到道路设施时,图像识别部12向判定部14通知该图像识别结果。在判定部14从图像识别部12被通知检测到了道路设施的图像识别结果但未从设施掌握部15被通知与该图像识别结果对应的位置的道路设施信息的情况下,首先判断GPS16的定位信息中是否存在噪声。当判断的结果为在GPS16的定位信息中不存在噪声时,判定部14判定为由图像识别部12检测到的道路设施是新增的道路设施。即,此时,通过相机11拍摄到了未存储于道路设施信息数据库17的新的道路设施。当判定为新增的道路设施时,判定部14向发送图像信息生成部13发出指示以生成发送图像信息,并向传送部20发出指示以传送发送图像信息。对于判断GPS16的定位信息中是否存在噪声的结果,当判断为存在噪声时,判定部14进行基于地图匹配的修正。
另外,在判定部14接收了检测到道路设施的图像识别结果的情况下,当未从设施掌握部15输入与该图像识别结果对应的位置的道路设施信息时,该判定部14也可以向设施掌握部15要求该位置中的道路设施信息的核对。此时,设施掌握部15参照道路设施信息数据库17来检索该位置中的道路设施信息,并向判定部14报告检索结果。判定部14确认该报告,当不存在与该位置对应的道路设施信息时,将由图像识别部12对该位置所识别到的道路设施判定为新增的道路设施。
[参考图像发送判定处理]
接着,说明判定部14的参考图像发送判定处理。在本实施方式中,当确认者通过目视确认接收了道路设施上存在异常的判定的拍摄图像时,从信息服务器30的道路设施管理信息数据库35选择的与该位置对应的参考图像和接收到道路设施上存在异常的判定的拍摄图像一同进行显示,对此在后文详细说明。由此,确认者能够通过参考图像确认正常状态的道路设施,并判断对接收到道路设施上存在异常的判定的拍摄图像所包含的道路设施实际上是否产生了异常。参考图像发送判定处理是对是否为了将由相机11生成的拍摄图像用作该参考图像而作为参考图像候选发送至信息服务器30进行判断的处理。
如上所述,在异常判定处理中,当从设施掌握部15输入与车辆C的当前位置对应的道路设施信息时,若判定部14参照对与该位置对应的图像进行的图像识别部12的图像识别结果并被通知检测到与从设施掌握部15输入的道路设施信息对应的道路设施这一内容的图像识别结果,则判定为该道路设施正常。此时,由于道路设施正常,因此不需要从车载设备10向信息服务器30发送拍摄图像。但是,若在该拍摄图像中清晰地拍摄到了道路设施,则能够作为上述的参考图像候选而在信息服务器30进行使用。因此,当判定部14判定为道路设施正常时,进一步对该拍摄图像设定图像识别部12中的图像识别的识别可靠度。识别可靠度是表示基于图像识别部12进行的图像识别中的图形匹配的一致度的评分。当图像识别的识别可靠度为80以上时,判定部14判定为将其作为参考图像候选进行发送。当判定为将拍摄图像作为参考图像候选进行发送时,判定部14向发送图像信息生成部13发出指示以生成发送图像信息,并向传送部20发出指示以传送发送图像信息。
接着,说明发送图像信息生成部13。当从判定部14接收指示以生成发送图像信息时,发送图像信息生成部13生成发送图像信息。发送图像信息是通过对从相机11获取的拍摄图像添加元数据而生成的。
图5是表示本实施方式中的发送图像信息的句法(syntax)的图。如图5所示,发送图像信息包括状况、拍摄位置、车辆ID、车辆种类、车辆速度、拍摄日期和时间、道路设施种类、识别可靠度及拍摄图像。状况是“异常检测”、“新增设施检测”、“参考图像”中的任意。当判定部14通过异常判定处理而判定为道路设施上存在异常时,生成状况为“异常检测”的发送图像信息。当判定部14通过新增设施判定处理而判定为新增的道路设施时,生成状况为“新增设施检测”的发送图像信息。当判定部14通过参考图像发送判定处理而判定为将拍摄图像作为参考图像候选进行发送时,生成状况为“参考图像”的发送图像信息。
拍摄位置是拍摄到由图像识别部12检测到道路设施的图像时的定位信息,该信息从GPS16提供给发送图像信息生成部13。车辆ID是各车辆固有的识别信息,该信息预先存储于发送图像信息生成部13。车辆种类是表示车辆的种类的信息,例如是“乘用车”、“中型公共汽车”、“大型卡车”等,该信息预先存储于发送图像信息生成部13。车辆速度是拍摄到由图像识别部12检测到道路设施的图像时的车辆的行驶速度,该信息从车辆信息获取部18提供给发送图像信息生成部13。另外,车辆信息获取部18利用CAN(Controller Area Network:控制器局域网络)获取车辆速度等车辆信息。
拍摄日期和时间是拍摄到由图像识别部12检测到道路设施的图像时的年月日及时刻的信息,该信息从未图示的数字时钟提供给发送图像信息生成部13。道路设施种类是表示道路设施的种类的信息,例如是“信号设备”,对于道路标识,是“停”、“人行横道”、“限速”等,该信息从道路设施信息数据库17经由设施掌握部15、判定部14提供给发送图像信息生成部13。识别可靠度是表示预先存储于图像识别部12的道路设施的图形与在拍摄图像中检测到的图形的一致度的评分,该信息由图像识别部12生成,并经由判定部14提供给发送图像信息生成部13。
拍摄图像是在拍摄日期和时间所拍摄的静态图像或是在拍摄日期和时间的前后的数秒期间所拍摄的动态图像(影像),从相机11提供给发送图像信息生成部13。发送图像信息生成部13可以根据车辆的速度、传送部20的传送频带的富余量来切换是将发送图像信息中的拍摄图像设为静态图像还是设为动态图像。此时,当由车辆信息获取部18获取的车辆的速度较快时、或当传送部20的传送频带存在富余量时,发送图像信息生成部13将发送图像信息中的拍摄图像设为动态图像,否则将发送图像信息中的拍摄图像设为静态图像。
发送图像信息生成部13除了在从判定部14接收到指示时生成发送图像信息之外,还在从服务器要求接收部21接收到图像发送的要求时生成发送图像信息。当发送图像信息生成部13从判定部14接收到指示或从服务器要求接收部21接收到图像发送的要求而生成发送图像信息时,向传送部20输入该发送图像信息。
传送部20通过无线通信在与信息服务器30之间进行信息的收发。当从发送图像信息生成部13输入了发送图像信息时,传送部20根据来自判定部14的发送指示将发送图像信息向信息服务器30发送。传送部20从信息服务器30接收服务器要求及数据库更新信息。传送部20所接收的服务器要求在服务器要求接收部21中进行处理。传送部20所接收的数据库更新信息在数据库更新部19中进行处理。
当服务器要求接收部21接收到由传送部20接收的服务器要求时,根据该服务器要求向发送图像信息生成部13发出指示以生成发送图像信息。在后文中对服务器要求进行说明。当数据库更新部19接收到由传送部20接收的数据库更新信息时,根据该信息来更新存储于道路设施信息数据库17的道路设施信息。以上,对车载设备10的结构进行了说明。
(信息服务器30的结构)
接着,说明信息服务器30的结构。图6是表示本实施方式中的信息服务器30的结构的框图。如图6所示,信息服务器30包括传送部31、信息判定部32、确认列表保存部33、参考选择部34、道路设施管理信息数据库35、用户界面36、数据库更新部37及需要图像要求部38。用户界面36包括显示部361及输入接收部362。显示部361由图2中的监视器302及对其进行驱动的软件来实现,输入接收部362由图2中的键盘303、鼠标304及对它们进行驱动的软件来实现,图6的信息服务器30的其他结构要素由图2中的主体301的硬件及由其执行的软件来实现。
传送部31通过无线通信在与车载设备10之间进行信息的收发。当从车载设备10接收到发送图像信息,传送部31将其发送至信息判定部32。另外,当道路设施管理信息数据库35被更新时,传送部31向车载设备10发送该更新信息。进而,当在需要图像要求部38上存在图像的要求(服务器要求)时,传送部31向车载设备10发送该服务器要求。
当从车载设备10发送来发送图像信息时,信息判定部32根据包含于该发送图像信息的状况(“异常检测”、“新增设施检测”、“参考图像”中的任意)而如下地进行处理。当状况为“异常检测”或“新增设施检测”时,信息判定部32进行确认列表更新处理。当状况为“参考图像”时,信息判定部32将该发送图像信息发送至数据库更新部37。数据库更新部37在接收到状况为“参考图像”的发送图像信息时进行参考图像更新处理。而且,信息判定部32进行使确认者确认拍摄图像的确认处理。以下,依次进行说明。
[确认列表更新处理]
当从传送部31接收到发送图像信息时,信息判定部32对包含于该发送图像信息的元数据中的状况进行确认,当状况为“异常检测”或“新增设施检测”时,进行确认列表更新处理。在说明基于信息判定部32进行的确认列表更新处理之前,首先对确认列表及使用确认列表的确认对象信息的提示进行说明。
当道路设施上存在异常或存在新增的道路设施时,存在从多个车载设备10向信息服务器30发送与该道路设施相关的发送图像信息的情况。当从车载设备10发送来与某一道路设施相关的发送图像信息时,当确认者立即进行确认时,存在包含于该发送图像信息的拍摄图像为确认者难以对道路设施上是否存在异常或是否存在新增的道路设施进行确认的拍摄图像的情况。因此,本实施方式的信息服务器30在最初接收到与某一道路设施相关的发送图像信息之后,并不立即使确认者对该道路设施上是否存在异常或是否为新增的道路设施进行确认,而是在经过一定期间后,使确认者进行确认。这样一来,能够期待在该一定期间内从多个车载设备10发送来与该道路设施相关的发送图像信息。进而,在经过一定时间之后,当存在与同一道路设施相关的多个发送图像信息时,信息服务器30使确认者利用该多个发送图像信息中的确认者容易进行确认的发送图像信息进行确认。因此,信息服务器30包括确认列表保存部33。
图7是表示保存于确认列表保存部33的确认列表的待确认信息的结构的图。确认列表中列举有多个图7所示的待确认信息。待确认信息是按照从车载设备10发送来的发送图像信息所涉及的位置信息(拍摄的位置)而将多个发送图像信息汇总而成的。待确认信息中包含位置信息、最早拍摄日期和时间及多个发送图像信息。此处,待确认信息中的位置信息具有某一程度的范围,包含于元数据的定位信息处于该范围内的发送图像信息被汇总为一个待确认信息。此外,包含于该待确认信息的发送图像信息中,信息服务器30最初接收到的发送图像信息的拍摄图像的拍摄日期和时间为最早拍摄日期和时间。此外,在待确认信息中的各发送图像信息中附加有确认优先度的信息。
在确认列表更新处理中,当从传送部31接收到状况为“异常检测”或“新增设施检测”的发送图像信息时,信息判定部32求算出确认优先度并提供给该发送图像信息。确认优先度是指,使确认者通过目视确认包含于发送图像信息的拍摄图像时的优先度。即,当对于一个道路设施存在多个确认者应通过目视确认的拍摄图像时,从优先度较高的开始依次显示于显示部并使确认者进行确认。
确认优先度是根据发送图像信息中所包含的元数据中的拍摄日期和时间、车辆种类及车辆速度而求算出的。具体而言,例如当拍摄日期和时间为夜间时将优先度设为较低,而在白天时将优先度设为较高。这是因为,在白天的情况下,在拍摄图像中明确地呈现道路设施的可能性较高。此外,例如车辆种类为乘用车时将优先度设为较低,为中型公共汽车时将优先度设为中等程度,为大型卡车时将优先度设为较高。这是因为,在像大型卡车那样设置车载设备10的位置较高时,在拍摄图像中明确地呈现道路设施的可能性较高。而且,例如当车辆速度为50km/h以上时将优先度设为较低,当车辆速度为30km/h以上、且小于50km/h时将优先度设为中等程度,当车辆速度小于30km/h时将优先度设为较高。这是因为,车辆的速度越慢,在拍摄图像中明确地呈现道路设施的可能性越高。
信息判定部32以如上所述的基准参照拍摄日期和时间、车辆种类及车辆速度获取各优先度的平均作为确认优先度。另外,信息判定部32也可以还考虑发送图像信息中所包含的元数据中的图像可靠度来求算出确认优先度,或者将图像可靠度直接作为确认优先度。
当对由传送部31接收的发送图像信息求算出确认优先度时,信息判定部32更新保存于确认列表保存部33的确认列表。保存于确认列表的同一位置信息所涉及的发送图像信息的数量被限定为规定数量(例如3)。当发送来超过该规定张数的发送图像信息时,信息判定部32将确认优先度较高的发送图像信息优先保存于确认列表保存部33。即,信息判定部32在确认列表保存部33中已保存了规定上限数量的同一位置信息所涉及的发送图像信息的情况下,当新接收的发送图像信息的确认优先度低于已保存的发送图像信息中的确认优先度最低的发送图像信息的确认优先度时,删除该新接收的发送图像信息,当新接收的发送图像信息的确认优先度高于已保存的发送图像信息中的确认优先度最低的发送图像信息的确认优先度时,删除该确认优先度最低的发送图像信息,并将该新接收的发送图像信息追加到确认列表上。
另外,也可以将保存于确认列表保存部33的同一位置信息所涉及的发送图像信息设成仅为一个。此时,当对于一个道路设施接收到第二个以后的发送图像信息时,求算确认优先度,当求算出的确认优先度高于保存于确认列表保存部33的发送图像信息的确认优先度时,与已保存的发送图像信息进行替换,当求算出的确认优先度低于保存于确认列表保存部33的发送图像信息的确认优先度时,删除该发送图像信息。此外,也可以不对关于一个道路设施的保存在确认列表保存部33中的发送图像信息的数量设置限制。此时,对接收到的所有发送图像信息求算出确认优先度之后,保存在确认列表保存部33中。以上,对确认列表更新处理进行了说明。
[参考图像更新处理]
接着,说明参考图像更新处理。当从信息判定部32接收到状况为“参考图像”的发送图像信息时,数据库更新部37进行参考图像更新处理。在说明基于数据库更新部37进行的参考图像更新处理之前,首先说明道路设施管理信息数据库35。
图8是表示道路设施管理信息数据库35的结构的图。在道路设施管理信息数据库35中,按照道路设施分别存储有图8所示的道路设施管理信息。道路设施管理信息包含道路设施ID、道路设施种类、位置信息、道路设施状况及多个发送图像信息。在道路设施管理信息数据库35中,对于各道路设施,保存的发送图像信息的数量被限定为规定数量(在本实施方式中为6)。道路设施ID、道路设施种类、位置信息及道路设施状况的内容及数据形式分别与存储于车载设备10的道路设施信息数据库17的道路设施ID、道路设施种类、位置信息相同。道路设施管理信息所包含的发送图像信息中的拍摄图像成为参考图像。另外,道路设施管理者能够通过检索道路设施状况为“破损”、“遮蔽”或“拆除”的道路设施管理信息来找出产生问题的道路设施,并进行修理等应对。
道路设施状况的初始值为“正常”。即,当最初构筑道路设施管理信息数据库35时及根据发送图像信息追加了新增的道路设施的道路设施管理信息时,道路设施状况为“正常”。当从车载设备10发送来状况为“异常检测”的发送图像信息并根据该发送图像信息来更新道路设施管理信息数据库35时,根据该更新的内容,道路设施状况变更为“破损”、“遮蔽”、“拆除”中的任一个。关于根据管理者的确认结果进行的道路设施管理信息数据库35的更新,在后文中说明。
当从信息判定部32新接收到发送图像信息时,数据库更新部37参照该发送图像信息的元数据来确定道路设施。数据库更新部37检索道路设施管理信息数据库35,当道路设施管理信息数据库35中不存在该道路设施的道路设施管理信息时,在道路设施管理信息数据库35中新生成该道路设施的道路设施管理信息,将新接收的发送图像信息追加到该道路设施管理信息中。当检索道路设施管理信息数据库35的结果中存在与新接收的发送图像信息对应的道路设施管理信息时,数据库更新部37对该道路设施管理信息中是否已包含上限数量的发送图像信息进行确认。若发送图像信息的数量未达到上限数量,则将新接收的发送图像信息追加到该道路设施管理信息中。
当道路设施管理信息中已包含上限数量的发送图像信息时,检查包含于该道路设施管理信息的发送图像信息的识别可靠度。当新接收的发送图像信息的识别可靠度低于包含于该道路设施管理信息的所有发送图像信息的识别可靠度时,不进行道路设施管理信息数据库35的更新,并删除该新接收的发送图像信息。当新接收的发送图像信息的识别可靠度高于包含于道路设施管理信息的任一发送图像信息的识别可靠度时,删除识别可靠度最低的发送图像信息,并且将新接收的发送图像信息追加到道路设施管理信息中。
[确认处理]
信息判定部32进一步进行用于使确认者确认图像的确认处理。信息判定部32确认是否正在通过用户界面36进行拍摄图像的确认处理,当并未通过用户界面36正在进行拍摄图像的确认处理时,参照确认列表保存部33的确认列表来检查是否不存在从最早拍摄日期和时间起经过了一定时间(例如72小时)的待确认信息。若存在经过了一定时间的待确认信息,则将该待确认信息中的确认优先度最高的发送图像信息向参考选择部34输出。以上,对信息判定部32进行了说明。
接着,说明参考选择部34。当从信息判定部32接收用于使确认者进行确认的发送图像信息(以下,将该发送图像信息称为“确认对象信息”)时,参考选择部34检索道路设施管理信息数据库35,并提取与该确认对象信息对应的道路设施管理信息。当道路设施管理信息中只有一个发送图像信息时,参考选择部34选择该发送图像信息作为参考信息。
当在所提取的道路设施管理信息中存在多个发送图像信息时,选择拍摄图像的拍摄条件与确认对象信息的拍摄图像的拍摄条件最接近的发送图像信息作为参考信息。拍摄图像的拍摄条件的近似度是根据拍摄时间段、车辆种类、拍摄时的车辆速度、从拍摄位置到道路设施的距离及拍摄图像为静态图像还是动态图像来判断的。此处,拍摄时间段是参照元数据中的拍摄日期和时间来判断的。车辆种类是参照元数据中的车辆种类来判断的。在车辆种类相同的情况下近似度最高,但是,即使在车辆种类不同的情况下,由于大型公共汽车和大型卡车均为大型车辆,因此车辆种类类似,近似度比较高。拍摄时的车辆速度是参照元数据中的车辆速度并通过包含于确认对象信息的拍摄图像(以下称为“确认对象图像”)拍摄时的车辆速度与参考图像拍摄时的车辆速度之差大于规定阈值还是小于规定阈值来判断的。拍摄位置距道路设施较远还是较近是通过该道路设施的位置信息与该发送图像信息的拍摄位置的距离大于规定阈值还是小于规定阈值来判断的。拍摄图像为静态图像还是动态图像是通过拍摄图像的数据形式来判断的。
由此,确认对象图像与参考图像成为以类似的条件拍摄的图像,确认者容易进行确认。例如,当确认对象图像为拍摄于夜间的动态图像时,参考图像也是拍摄于夜间的动态图像。参考选择部34将这样地选择的参考信息和从信息判定部32接收的确认对象信息发送至显示部361。
当确认对象信息的状况为“新增设施检测”时,通常为,关于该道路设施,在道路设施管理信息数据库35中未保存道路管理信息。此时,参考选择部34仅将确认对象信息输出至显示部361。另外,关于某一道路设施,当道路设施管理信息数据库35中未保存道路管理信息时,参考选择部34也可以将该道路设施所涉及的其他发送图像信息从确认列表保存部33取出并与已从信息判定部32接收的发送图像信息一同输出至显示部361。即,此时,取代不存在参考信息的是,多个确认对象信息被输出至显示部361。此时,当在确认列表保存部33中不存在该道路设施所涉及的其他发送图像信息时,也可以将从信息判定部32接收的发送图像信息再次保存在确认列表保存部33中并等待经过一定时间。若在该一定时间内发送来其他发送图像信息,则参考选择部34能够将多个确认对象信息输出至显示部361。
如上所述,关于某一道路设施,当道路设施管理信息数据库35中不存在道路设施管理信息时,参考选择部34对需要图像要求部38要求需要的图像。需要图像要求部38生成服务器要求,并经由传送部31发送至多个车载设备10。
图9及图10是显示于用户界面36的显示部361的确认画面的例子。图9是确认对象信息的状况为“异常检测”时的确认画面的例子。该确认画面60包含确认基础信息区域601、图像区域602及输入用区域603。确认基础信息区域601中包含确认对象信息的拍摄位置、拍摄时刻及道路设施种类的信息。在附图的例子中,对应地显示道路设施种类(“标识(限速70km)”)与通过输入用区域603输入的内容(“拆除”)。在图像区域602中并排显示确认对象图像与参考图像。确认对象图像作为“最新图像”进行显示,参考图像作为“参考用图像”进行显示。另外,当不存在参考图像时,在图像区域602中仅显示确认对象图像。
输入用区域603构成输入接收部362,用于使确认者通过操作键盘303及鼠标304来输入确认结果。输入用区域603构成为,选择是否更新数据库。此外,构成为,当更新数据库时,选择确认对象图像与参考图像如何不同。此时的选项为“破损”、“修正”、“遮蔽”、“拆除”。当选择了“修正”时,进一步选择如何修正道路设施种类。当选择“修正”并选择道路设施种类时,确认基础信息区域601的道路设施种类与此相应地变更。在输入用区域603中还设置有“执行”及“取消”的按钮。当指定“取消”的按钮时,在输入用区域603中所选择的事项被取消。当指定“执行”的按钮时,确定所选择的事项,由输入接收部362选择的事项被通知给数据库更新部37。
图10是确认对象信息的状况为“新增设施检测”时的确认画面的例子。该确认画面70包含确认基础信息区域701、图像区域702及输入用区域703。确认基础信息区域701中包含确认对象信息的拍摄位置、拍摄时刻及道路设施种类的信息。在附图的例子中,对应地显示道路设施种类(“标识(限速70km)”)与“新增检测”。在图像区域702中,确认对象图像作为“最新图像”进行显示。另外,当存在参考图像时,在图像区域702中,与确认对象图像并排显示参考图像。
输入用区域703构成输入接收部362,用于使确认者通过操作键盘303及鼠标304来输入确认结果。输入用区域703构成为,选择是否将确认用图像所涉及的发送图像信息作为道路设施管理信息追加到道路设施管理信息数据库35中。此外,构成为,当将发送图像信息追加到道路设施管理信息数据库35中时,选择按显示于确认基础信息区域701的道路设施种类的内容进行追加还是将道路设施种类修正后进行追加。当选择了“修正”时,进一步选择如何修正道路设施种类。当选择“修正”并选择道路设施种类时,确认基础信息区域701的道路设施种类与此相应地变更。在输入用区域703中还设置有“执行”及“取消”的按钮。当指定“取消”的按钮时,在输入用区域703中所选择的事项被取消。当指定“执行”的按钮时,确定所选择的事项,由输入接收部362选择的事项被通知给数据库更新部37。
当从输入接收部362接收更新道路设施管理信息数据库35、或向道路设施管理信息数据库35追加新的道路设施管理信息的内容的通知时,数据库更新部37按照该通知更新道路设施管理信息数据库35。当作为确认者对新增设施检测的确认对象图像的输入而从输入接收部362接收到向数据库追加新增的道路设施管理信息的通知时,数据库更新部37将该发送图像信息作为新增的道路设施管理信息追加至道路设施管理信息数据库35。此时,若对道路设施种类选择了修正,则按照所选择的修正内容将该发送图像信息的道路设施种类修正之后作为新增的道路设施管理信息进行追加。
当作为确认者对异常检测的确认对象图像的输入而从输入接收部362接收到数据库的更新的通知时,数据库更新部37按照所指定的更新内容来更新道路设施管理信息数据库35。当通过输入接收部362输入的更新内容为“破损”、“遮蔽”或“拆除”时,数据库更新部37与此相应地将道路设施状况变更为“破损”、“遮蔽”或“拆除”。如上所述,在道路设施管理信息数据库35中,逐个存储最多6种发送图像信息,但数据库更新部37在进行更新时将所存储的原来的发送图像信息全部删除,将通过确认者确认的发送图像信息作为道路设施管理信息重新保存到道路设施管理信息数据库35中。此时,当通过输入接收部362输入的更新内容为“修正”时,根据该修正内容修正道路设施种类,道路设施状况作为“正常”,将该发送图像信息保存到道路设施管理信息数据库35中。
另外,当更新内容为“破损”、“遮蔽”或“拆除”时,数据库更新部37也可以对该道路设施更新道路设施状况,并且不删除原来的道路设施管理信息而是将其保留,将确认者确认的发送图像信息(检测到破损、遮蔽、拆除等异常的发送图像信息)追加至该道路设施的道路设施管理信息。此时,若该异常由道路设施管理者消除,则能够将原来的道路设施管理信息作为该道路设施的信息而进行再次利用。
当更新道路设施管理信息时,道路设施管理信息数据库35使用传送部31将包含该更新内容的数据库更新信息通知给所有车载设备10。如上所述,在各车载设备10中,通过传送部20接收该数据库更新信息,并按照该数据库更新信息来更新道路设施信息数据库17。这样一来,通过在所有车载设备10中更新道路设施信息数据库17,即使在道路设施上存在异常的情况下,在向信息服务器30的道路设施管理信息数据库35反映该信息之后,也不会从车载设备10发送来状况为“异常检测”的发送图像信息,避免确认者对已确认过一次的道路设施进行重复确认。此外,在道路设施由道路设施管理者进行修理而恢复到正常状态的情况下,当车载设备10拍摄了该道路设施时,由于拍摄图像与道路设施信息数据库17的信息不同,因此车载设备10将其作为“异常检测”,并将发送图像信息发送至信息服务器30。确认者能够将产生异常的图像作为参考图像,并将进行修理而恢复到正常状态的道路设施的图像作为确认对象图像,从而确认是否进行修理而恢复到了正常状态。
参照附图说明以上那样地构成的道路设施管理***100的动作。首先,说明车载设备10的动作,接着说明信息服务器30的动作。
图11是车载设备10的动作流程图。车载设备10首先监视向判定部14通知道路设施信息或图像识别结果。具体而言,判断是否由设施掌握部15向判定部14通知了道路设施信息(步骤S101)。当没有通知时(步骤S101中为否),接着判断是否由图像识别部12向判定部14通知了道路设施的图像识别结果(步骤S102)。当没有通知时(步骤S102中为否),返回步骤S101,继续监视通知道路设施信息或图像识别结果。
当由设施掌握部15向判定部14通知了道路设施信息时(步骤S101中为是),判断是否由图像识别部12向判定部14通知了与该道路设施信息对应的图像识别结果(步骤S103)。当没有通知与该道路设施信息对应的图像识别结果时(步骤S103中的否),通过发送图像信息生成部13生成包含与该道路设施信息对应的拍摄图像的发送图像信息,并由传送部20向信息服务器30发送所生成的发送图像信息(步骤S104)。此时,发送图像信息的状况为“异常检测”。另一方面,在步骤S103中,当通知了与该道路设施信息对应的图像识别结果时(步骤S 103中为是),移至参考图像发送判定处理。
在步骤S102中,当通知了道路设施的图像识别结果时(步骤S102中为是),判断GPS16的定位信息中是否存在噪声(步骤S105),若不存在噪声,则通过发送图像信息生成部13生成包含该图像识别结果所涉及的拍摄图像的发送图像信息,并由传送部20向信息服务器30发送所生成的发送图像信息(步骤S106)。此时,发送图像信息的状况为“新增设施检测”。另一方面,在步骤S105中,当GPS16的定位信息中存在噪声时(步骤S105中为是),进行基于地图匹配的修正之后,移至参考图像发送判定处理。另外,在步骤S105中,当判断为GPS16的定位信息中不存在噪声时,也可以对在步骤S102中所通知的图像识别结果所涉及的道路设施信息是否存在于道路设施信息数据库17进行再次检索。当该检索的结果为在道路设施信息数据库17中确实不存在该道路设施信息时,移至步骤S106,也可以通过发送图像信息生成部13生成包含该图像识别结果所涉及的拍摄图像的发送图像信息,并由传送部20向信息服务器30发送所生成的发送图像信息。
图12是车载设备10中的参考图像发送判定处理的动作流程图。首先,通过图像识别部12对参考图像发送判定处理所涉及的拍摄图像设定识别可靠度(步骤S111)。此处,如上所述,表示基于图像识别部12进行的图像识别中的图形匹配的一致度的评分被设定为识别可靠度。接着,判断该识别可靠度是否在规定阈值以上(步骤S112)。当进行参考图像发送判定处理时,图像识别的结果已通过图10的流程的步骤S102或步骤S103通知给判定部14(检测到道路设施),因此图形匹配的评分至少超过视为检测到道路设施的阈值(例如60)。在步骤S112中,在拍摄图像中不仅检测道路设施,还判断能否更切实地识别道路设施,因此使用比进行该图像识别时的阈值更高的阈值(例如80)。
当识别可靠度为规定阈值以上时(步骤S112中为是),通过发送图像信息生成部13生成包含该拍摄图像的发送图像信息,并通过传送部20向信息服务器30发送所生成的发送图像信息(步骤S113)。此时,发送图像信息的状况为“参考图像”。当识别可靠度小于规定阈值时(步骤S112中为否),直接结束处理。
图13是信息服务器30接收到发送图像信息时的动作流程图。当通过传送部31接收发送图像信息(步骤S121)时,信息服务器30首先进行状况判定(步骤S122)。状况判定处理是通过对由信息判定部32接收的发送图像信息所包含的元数据中的状况进行确认来进行的。当状况为“异常检测”或“新增设施检测”时,移至步骤S123,信息判定部32进行确认列表更新处理。当状况为“参考图像”时,移至步骤S131,数据库更新部37进行参考图像更新处理。
在确认列表更新处理中,首先判断在确认列表保存部33的确认列表中是否存在与该图像发送信息同一位置的待确认信息(步骤S123)。当确认列表中不存在同一位置的待确认信息时(步骤S123中为否),生成包含该图像发送信息的新增的待确认信息(步骤S124)。当生成新增的待确认信息时,“位置信息”(参照图7)参照该图像发送信息所包含的元数据中的拍摄位置的信息,此外将该图像发送信息所包含的元数据中的拍摄日期和时间设为“最早拍摄日期和时间”(参照图7)。
当在确认列表中已存在同一位置的待确认信息时(步骤S 123中为是),判断包含于该待确认信息的发送图像信息的数量是否为规定上限值(例如3)(步骤S125)。若发送图像信息的数量未达到上限值(步骤S125中为否),则将该发送图像信息追加至待确认信息(步骤S126)。当发送图像信息的数量已达到上限值时(步骤S 125中为是),求算该发送图像信息的确认优先度(步骤S127),判断所求算出的确认优先度是否低于包含于该待确认信息的所有发送图像信息的确认优先度(步骤S128)。当所求算出的确认优先度低于包含于该待确认信息的所有发送图像信息的确认优先度时(步骤S128中为是),删除该发送图像信息(步骤S129)并结束处理。当所求算出的确认优先度高于包含于该待确认信息的任意发送图像信息的确认优先度时(步骤S 128中为否),删除包含于该待确认信息的发送图像信息中的、确认优先度最低的发送图像信息,取而代之的是,将该新接收的发送图像信息追加至待确认信息(步骤S130)。
当在步骤S122中进行状况判定的结果是状况为“参考图像”时,移至步骤S 131,数据库更新部37进行参考图像更新处理。在参考图像更新处理中,首先判断道路设施管理信息数据库35中是否存在与新接收的该图像发送信息同一位置的道路设施管理信息(步骤S 131)。当不存在同一位置的道路设施管理信息时(步骤S131中为否),生成包含该图像发送信息的新增的道路设施管理信息(步骤S132)。当生成新增的道路设施管理信息时,“道路设施ID”(参照图8)以不与其他道路设施管理信息重复的方式由数据库更新部37提供,“位置信息”(参照图8)参照该图像发送信息中所包含的元数据中的拍摄位置的信息,此外将该图像发送信息中所包含的元数据中的道路设施种类设为“道路设施种类”(参照图8)。
当道路设施管理信息数据库35中已存在同一位置的道路设施管理信息时(步骤S131中为是),判断包含于该道路设施管理信息的发送图像信息的数量是否为规定上限值(例如6)(步骤S133)。若发送图像信息的数量未达到上限值(步骤S133中为否),则将该发送图像信息追加至道路设施管理信息(步骤S134)。当发送图像信息的数量已达到上限值时(步骤S133中为是),判断该发送图像信息的识别可靠度是否低于包含于该道路设施管理信息的所有发送图像信息的识别可靠度(步骤S135)。当该发送图像信息的识别可靠度低于包含于该道路设施管理信息的所有发送图像信息的识别可靠度时(步骤S135中为是),删除该发送图像信息(步骤S136)并结束处理。当该发送图像信息的识别可靠度高于包含于该道路设施管理信息的任意发送图像信息的识别可靠度时(步骤S135中为否),删除包含于该道路设施管理信息的发送图像信息中的、识别可靠度最低的发送图像信息,取而代之的是,将该新接收的发送图像信息追加至道路设施管理信息(步骤S136)。以上,说明了信息服务器30接收发送图像信息时的动作。
接着,说明在信息处理服务器40中用于使确认者确认拍摄图像的动作。图14是用于使确认者确认拍摄图像的信息服务器的动作流程图。信息服务器30首先判断界面36是否为忙碌(步骤S141)。在该步骤中,关于某一道路设施,若正在通过界面36进行拍摄图像的确认处理,则判断为忙碌,若不是正在进行拍摄图像的确认处理,则判断为不忙碌。当忙碌时(步骤S141中为是),再次反复进行步骤S141,等待变为不忙碌。
在步骤S141中,当不忙碌时(步骤S141中为否),在确认列表保存部33的确认列表中确定最早拍摄日期和时间为最早的待确认信息,并判断是否已从该最早拍摄日期和时间经过了规定时间(例如72小时)(步骤S142)。当未经过规定时间以上时(步骤S142中为否),返回到步骤S141。当已从待确认信息的最早拍摄日期和时间经过了规定时间以上时(步骤S142中为是),信息判定部32将该待确认信息中的发送图像信息中的确认优先度最高的发送图像信息作为确认对象信息输出至参考选择部34(步骤S143)。参考选择部34从存储于道路设施管理信息数据库35的发送图像信息中选择拍摄条件与该确认对象信息更接近的发送图像信息作为参考信息(步骤S144)。另外,此时,当道路设施管理信息数据库35中不存在对应的发送图像信息时,不进行参考信息的选择。接着,参考选择部34将确认对象信息及参考信息输出至用户界面36(步骤S145)。
以上,通过例示说明了本发明的实施方式,但本发明的范围不限定于此,可以在权利要求书所记载的范围内根据目的进行变更或变形。
例如,在上述实施方式中,当从车载设备10接收到状况为“异常检测”或“新增设施检测”的发送图像信息时,信息服务器30进行了使确认者确认包含于发送图像信息的拍摄图像的处理,但是,当所接收的发送图像信息的可靠度非常高时,信息判定部32也可以省略确认者的确认,并根据该发送图像信息来直接更新道路设施管理信息数据库35。此时,信息判定部32参照包含于发送图像信息的识别可靠度,当该值为非常高的规定阈值以上(例如95以上)时,向数据库更新部37直接输出该发送图像信息。接着,当从信息判定部32接收到发送图像信息时,数据库更新部37根据该发送图像信息来更新道路设施管理信息数据库35。
此外,在上述实施方式中,在道路设施信息数据库17中存储包含位置信息的道路设施信息,车载设备10的设施掌握部15根据GPS16的定位信息提取出具有对应的位置信息的道路设施信息,但是,也可以在道路设施信息数据库17中存储除包含位置信息还包括道路设施的方向信息的道路设施信息,设施掌握部15除了考虑定位信息之外还考虑从车载的陀螺仪传感器获得的车辆C的行驶方向而提取对应的道路设施信息。此处,道路设施的方向信息是指,表示从哪个方向能够看到该道路设施的信息。由此,能够防止在下行车道上行驶的车辆C无法检测到上行车道用的标识而判断为“异常检测”的情况。
此外,在上述实施方式中,车载设备10的道路设施信息数据库17用于通过由相机11拍摄的图像来检测异常或新增设施,但是,也可以使用该道路设施信息数据库17对车辆C的司机提供用于支援驾驶的信息。此时,车载设备10从道路设施信息数据库17中检索与车辆的当前位置对应的道路设施信息,通过声音等向司机提示该道路设施信息。例如,在车辆的当前位置的行驶方向的前方存在“停”的标识,当该道路设施状况为“遮蔽”时,输出“在此前方,标识被遮蔽,暂时停止”的声音而引起司机的注意。而且,也可以向导航***提供道路设施信息数据库17的内容。此时,包括道路设施的状况在内,导航***能够向司机引导何处存在何种道路设施。
此外,在上述实施方式中,对于从车载设备10向信息服务器20进行的道路设施信息的交接,也可以由车载设备10将道路设施信息存储在闪存等记录介质中,信息服务器20从该记录介质中读出道路设施信息。
此外,在上述实施方式中,作为本发明的道路状况管理***的一例,说明了主要管理标识等道路设施的道路设施管理***,但是本发明的道路状况管理***除了可以是管理道路设施以外,也可以是管理由于地震或大雨等引起的道路的凹陷部位、道路上产生的坑、道路上的散落物等其他道路状况的***。在这样的***中,当确认者认知到上述道路的异常时,更新与道路设施信息数据库17相当的数据库(道路状况信息数据库),并且例如在标识的情况下,向道路设施修补者提供信息,在建筑物等建造物的情况下,也向其修补者提供信息,在该修补者日后结束了修补工程等的情况下,确认者进行修补内容的确认之后,从道路状况信息数据库中删除道路的异常即可。
以上说明了当前可想到的本发明的优选实施方式,但可以对本实施方式进行多种变形,并且本发明的实质的宗旨和范围内的所有变形包含在权利要求书中。
工业实用性
如上所述,本发明所涉及的道路设施管理***具有能够掌握道路状况的准确状态、并且能够减轻确认者的负担的效果,作为通过车辆获取道路状况的信息并管理道路状况的道路状况管理***等非常有用。
标号说明
10车载设备
11相机
12图像识别部
13发送图像信息生成部
14判定部
15设施掌握部
16GPS
17道路设施信息数据库
18车辆信息获取部
19数据库更新部
20传送部
21服务器要求接收部
30信息服务器
31传送部
32信息判定部
33确认列表保存部
34参考选择部
35道路设施管理信息数据库
36用户界面
361显示部
362输入接收部
37数据库更新部
38需要图像要求部
60确认画面(异常检测)
601确认基础信息区域
602图像区域
603输入用区域
70确认画面(新增设施检测)
701确认基础信息区域
702图像区域
703输入用区域4
100道路设施管理***

Claims (16)

1.一种道路状况管理***,用于管理道路状况,其特征在于,
所述道路状况管理***包括车载设备和信息服务器,
所述车载设备包括:
相机,安装于车辆上,以拍摄车辆的外部;
图像识别部,对通过所述相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;
发送图像信息生成部,生成包含所述拍摄图像的发送图像信息;
道路状况信息数据库,存储道路状况信息;及
发送图像信息输出部,当所述图像识别部的识别结果与存储于所述道路状况信息数据库的道路状况信息不同时,输出所述发送图像信息,
所述信息服务器包括:
接收部,接收所述发送图像信息;
拍摄图像输出部,输出包含于所述发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;
输入部,用于使确认者输入由所述拍摄图像输出部输出的拍摄图像的确认结果;
作为用于管理道路状况的道路状况管理信息而存储有参考图像的道路状况管理信息数据库;及
从所述道路状况管理信息数据库中选择与所述拍摄图像对应的所述参考图像的参考选择部,
所述拍摄图像输出部将通过所述参考选择部选择的参考图像和所述拍摄图像一同输出。
2.根据权利要求1所述的道路状况管理***,其特征在于,
所述信息服务器根据所述确认结果来更新所述道路状况管理信息数据库。
3.根据权利要求1所述的道路状况管理***,其特征在于,
所述车载设备根据所述确认结果来更新所述道路状况信息数据库。
4.根据权利要求1所述的道路状况管理***,其特征在于,
当通过所述图像识别部未检测到与存储于所述道路状况信息数据库的道路状况信息对应的道路状况时,所述车载设备通过所述发送图像信息输出部输出所述发送图像信息。
5.根据权利要求1所述的道路状况管理***,其特征在于,
当通过所述图像识别部检测到未存储于所述道路状况信息数据库的道路状况时,所述车载设备通过所述发送图像信息生成部生成所述发送图像信息。
6.根据权利要求1所述的道路状况管理***,其特征在于,
在所述道路状况管理信息中,对于一个道路状况,包含多个参考图像,
所述参考选择部选择拍摄条件与通过所述拍摄图像输出部输出的拍摄图像的拍摄条件最接近的参考图像。
7.根据权利要求1所述的道路状况管理***,其特征在于,
当所述图像识别部的检测结果与存储于所述道路状况信息数据库的道路状况信息一致时,在所述图像识别部的图像识别的可靠度高的情况下,所述发送图像信息输出部也输出将所述拍摄图像指定为参考图像候选的所述发送图像信息,
所述信息服务器将所述参考图像候选作为所述道路状况管理信息的参考图像而存储于所述道路状况管理信息数据库,
所述图像识别的可靠度是预先存储的道路状况的图形与包含于拍摄图像的图形的一致度。
8.根据权利要求1所述的道路状况管理***,其特征在于,
所述信息服务器包括需要图像要求部,当与包含于所述发送图像信息的拍摄图像对应的参考图像未存储于所述道路状况管理信息服务器时,所述需要图像要求部对所述车载设备要求与该拍摄图像对应的参考图像候选,
所述发送图像信息输出部根据所述要求输出包含与所述拍摄图像对应的拍摄图像的发送图像信息。
9.根据权利要求1所述的道路状况管理***,其特征在于,
当对于一个道路状况,所述接收部接收到多个发送图像信息时,所述拍摄图像输出部优先输出该多个发送图像信息中确认优先度高的发送图像信息所包含的拍摄图像。
10.根据权利要求9所述的道路状况管理***,其特征在于,
所述确认优先度根据包含于所述发送图像信息的拍摄图像的拍摄时间段、车辆种类及拍摄时的车辆速度中的至少任一个进行求算。
11.根据权利要求9所述的道路状况管理***,其特征在于,
所述信息服务器包括用于保存通过所述接收部接收的发送图像信息的确认列表保存部,
所述拍摄图像输出部输出保存于所述确认列表保存部的发送图像信息。
12.根据权利要求1所述的道路状况管理***,其特征在于,
所述车载设备的所述发送图像信息输出部通过无线通信向所述信息服务器发送所述发送图像信息,
所述信息服务器的所述接收部通过无线通信从所述车载设备接收所述发送图像信息。
13.根据权利要求1所述的道路状况管理***,其特征在于,
所述车载设备的所述发送图像信息输出部将所述发送图像信息记录于记录介质,
所述信息服务器的所述接收部从所述记录介质读出所述发送图像信息。
14.一种车载设备,与信息服务器一起构成用于管理道路状况的道路状况管理***,
所述信息服务器将作为用于管理道路状况的道路状况管理信息的参考图像与由车载设备输出的发送图像信息中所包含的拍摄图像一起输出,以使确认者能够通过目视进行确认,
所述车载设备的特征在于,包括:
相机,安装于车辆上,以拍摄车辆的外部;
图像识别部,对通过所述相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别;
发送图像信息生成部,生成包含所述拍摄图像的发送图像信息;
道路状况信息数据库,存储有道路状况信息;及
发送图像信息输出部,当所述图像识别部的识别结果与存储于所述道路状况信息数据库的道路状况信息不同时,输出所述发送图像信息。
15.一种信息服务器,用于管理道路状况的信息,其特征在于,包括:
接收部,接收发送图像信息,该发送图像信息包含通过安装于车辆上以拍摄车辆的外部的相机的拍摄而获得的拍摄图像;
拍摄图像输出部,输出包含于所述发送图像信息的拍摄图像,以使确认者能够通过目视进行确认;
输入部,用于使确认者输入由所述拍摄图像输出部输出的拍摄图像的确认结果;
作为用于管理道路状况的道路状况管理信息而存储有参考图像的道路状况管理信息数据库;及
从所述道路状况管理信息数据库中选择与所述拍摄图像对应的所述参考图像的参考选择部,
所述拍摄图像输出部将通过所述参考选择部选择的参考图像和所述拍摄图像一同输出。
16.一种道路状况管理方法,使用包括车载设备及信息服务器的道路状况管理***来执行,所述道路状况管理方法的特征在于,
在车载设备中,
用相机拍摄车辆的外部,
对通过所述相机的拍摄而获得的拍摄图像进行用于检测道路状况的图像识别,
当所述图像识别的结果与存储于所述车载设备的数据库的道路状况信息不同时,输出包含所述拍摄图像的发送图像信息,
通过信息服务器,接收所述发送图像信息,输出包含于所述发送图像信息的拍摄图像,以使确认者能够通过目视进行确认,从作为用于管理道路状况的道路状况管理信息而存储有参考图像的道路状况管理信息数据库中选择与所述拍摄图像对应的所述参考图像,将所选择的所述参考图像和所述拍摄图像一同输出,确认者确认所输出的拍摄图像,并输入确认结果。
CN201080063282.XA 2010-03-03 2010-12-20 道路状况管理***及道路状况管理方法 Expired - Fee Related CN102741900B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2010046596 2010-03-03
JP2010-046596 2010-03-03
PCT/JP2010/007353 WO2011108052A1 (ja) 2010-03-03 2010-12-20 道路状況管理システム及び道路状況管理方法

Publications (2)

Publication Number Publication Date
CN102741900A CN102741900A (zh) 2012-10-17
CN102741900B true CN102741900B (zh) 2014-12-10

Family

ID=44541738

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201080063282.XA Expired - Fee Related CN102741900B (zh) 2010-03-03 2010-12-20 道路状况管理***及道路状况管理方法

Country Status (4)

Country Link
US (1) US9092981B2 (zh)
JP (1) JP5551236B2 (zh)
CN (1) CN102741900B (zh)
WO (1) WO2011108052A1 (zh)

Families Citing this family (87)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5787092B2 (ja) * 2012-01-25 2015-09-30 トヨタ自動車株式会社 移動体情報処理システム
JP5553866B2 (ja) * 2012-07-23 2014-07-16 東芝テック株式会社 商品認識装置及び認識辞書追加プログラム
JP5668042B2 (ja) * 2012-10-31 2015-02-12 東芝テック株式会社 商品読取装置、商品販売データ処理装置および商品読取プログラム
JP5747014B2 (ja) * 2012-11-05 2015-07-08 東芝テック株式会社 商品認識装置及び商品認識プログラム
DE102013101639A1 (de) * 2013-02-19 2014-09-04 Continental Teves Ag & Co. Ohg Verfahren und Vorrichtung zur Bestimmung eines Fahrbahnzustands
DE102013223367A1 (de) 2013-11-15 2015-05-21 Continental Teves Ag & Co. Ohg Verfahren und Vorrichtung zur Bestimmung eines Fahrbahnzustands mittels eines Fahrzeugkamerasystems
JP6238715B2 (ja) * 2013-12-09 2017-11-29 株式会社トヨタマップマスター 経路探索装置及びその方法、並びに経路を探索するためのコンピュータプログラム及びコンピュータプログラムを記録した記録媒体
US9311889B1 (en) 2014-06-26 2016-04-12 Amazon Technologies, Inc. Image-based color palette generation
US9542704B2 (en) 2014-06-26 2017-01-10 Amazon Technologies Inc. Automatic image-based recommendations using a color palette
US10691744B2 (en) 2014-06-26 2020-06-23 Amazon Technologies, Inc. Determining affiliated colors from keyword searches of color palettes
US9659032B1 (en) 2014-06-26 2017-05-23 Amazon Technologies, Inc. Building a palette of colors from a plurality of colors based on human color preferences
US9727983B2 (en) 2014-06-26 2017-08-08 Amazon Technologies, Inc. Automatic color palette based recommendations
US10073860B2 (en) 2014-06-26 2018-09-11 Amazon Technologies, Inc. Generating visualizations from keyword searches of color palettes
US10223427B1 (en) 2014-06-26 2019-03-05 Amazon Technologies, Inc. Building a palette of colors based on human color preferences
US9652868B2 (en) 2014-06-26 2017-05-16 Amazon Technologies, Inc. Automatic color palette based recommendations
US10169803B2 (en) 2014-06-26 2019-01-01 Amazon Technologies, Inc. Color based social networking recommendations
US10255295B2 (en) 2014-06-26 2019-04-09 Amazon Technologies, Inc. Automatic color validation of image metadata
US10120880B2 (en) 2014-06-26 2018-11-06 Amazon Technologies, Inc. Automatic image-based recommendations using a color palette
US9916613B1 (en) 2014-06-26 2018-03-13 Amazon Technologies, Inc. Automatic color palette based recommendations for affiliated colors
US9245350B1 (en) 2014-06-26 2016-01-26 Amazon Technologies, Inc. Image-based color palette generation
US9996579B2 (en) 2014-06-26 2018-06-12 Amazon Technologies, Inc. Fast color searching
US9922050B2 (en) 2014-06-26 2018-03-20 Amazon Technologies, Inc. Identifying data from keyword searches of color palettes and color palette trends
US10235389B2 (en) 2014-06-26 2019-03-19 Amazon Technologies, Inc. Identifying data from keyword searches of color palettes
US9697573B1 (en) 2014-06-26 2017-07-04 Amazon Technologies, Inc. Color-related social networking recommendations using affiliated colors
US9401032B1 (en) 2014-06-26 2016-07-26 Amazon Technologies, Inc. Image-based color palette generation
US9679532B2 (en) 2014-06-26 2017-06-13 Amazon Technologies, Inc. Automatic image-based recommendations using a color palette
US9514543B2 (en) * 2014-06-26 2016-12-06 Amazon Technologies, Inc. Color name generation from images and color palettes
US9898487B2 (en) 2014-06-26 2018-02-20 Amazon Technologies, Inc. Determining color names from keyword searches of color palettes
US9177391B1 (en) 2014-06-26 2015-11-03 Amazon Technologies, Inc. Image-based color palette generation
US9524563B2 (en) 2014-06-26 2016-12-20 Amazon Technologies, Inc. Automatic image-based recommendations using a color palette
US9792303B2 (en) 2014-06-26 2017-10-17 Amazon Technologies, Inc. Identifying data from keyword searches of color palettes and keyword trends
US10430857B1 (en) 2014-08-01 2019-10-01 Amazon Technologies, Inc. Color name based search
US9558411B1 (en) * 2014-08-29 2017-01-31 Google Inc. Plane estimation for contextual awareness
US9785649B1 (en) 2014-09-02 2017-10-10 Amazon Technologies, Inc. Hue-based color naming for an image
US9633448B1 (en) 2014-09-02 2017-04-25 Amazon Technologies, Inc. Hue-based color naming for an image
CN104851295B (zh) * 2015-05-22 2017-08-04 北京嘀嘀无限科技发展有限公司 获取路况信息的方法和***
CN106663375B (zh) 2015-05-29 2020-12-22 华为技术有限公司 交通信息更新方法及装置
EP3327198B1 (en) 2015-07-21 2021-04-21 Kabushiki Kaisha Toshiba Crack analyzer, crack analysis method, and crack analysis program
US20170046581A1 (en) * 2015-08-11 2017-02-16 Here Global B.V. Sending Navigational Feature Information
DE102015220821A1 (de) * 2015-10-26 2017-04-27 Robert Bosch Gmbh Steuern eines Kraftfahrzeugs
FR3044150B1 (fr) * 2015-11-23 2017-12-29 Valeo Schalter & Sensoren Gmbh Procede de diagnostic d'un capteur de vehicule automobile
FR3044149B1 (fr) * 2015-11-23 2018-06-15 Valeo Schalter Und Sensoren Gmbh Procede de controle de l'etat d'une infastructure de route
DE102016203959A1 (de) * 2016-03-10 2017-09-14 Robert Bosch Gmbh Infrastrukturerkennungsvorrichtung für ein Fahrzeug, Verfahren zum Erzeugen eines Signals und Verfahren zum Bereitstellen einer Reparaturinformation
GB201605137D0 (en) 2016-03-25 2016-05-11 Jaguar Land Rover Ltd Virtual overlay system and method for occluded objects
JP6676443B2 (ja) * 2016-04-01 2020-04-08 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America インフラ検査装置、インフラ検査方法及びインフラ検査システム
JP6613999B2 (ja) * 2016-04-08 2019-12-04 株式会社デンソー 運転支援システム
JP2017208750A (ja) * 2016-05-20 2017-11-24 ローム株式会社 映像監視装置、映像表示システム、及び車両
JP6786920B2 (ja) * 2016-07-12 2020-11-18 株式会社デンソー 監視システム、車載器、センタ装置、および監視方法
US10347122B2 (en) 2016-07-12 2019-07-09 Denson Corporation Road condition monitoring system
CN106183981B (zh) * 2016-07-19 2018-08-07 乐视汽车(北京)有限公司 基于汽车的路障检测方法、装置及汽车
JP6443409B2 (ja) * 2016-08-08 2018-12-26 トヨタ自動車株式会社 送信要否判定装置及び進路計画システム
CN106448225B (zh) * 2016-08-25 2019-12-10 深圳市元征科技股份有限公司 一种路段信息共享方法及装置
JP6969865B2 (ja) 2016-09-07 2021-11-24 東芝インフラシステムズ株式会社 ひび割れ解析装置、ひび割れ解析方法及びひび割れ解析プログラム
US11130500B2 (en) * 2016-10-03 2021-09-28 Hitachi Automotive Systems, Ltd. In-vehicle electronic control apparatus
DE112016007287B4 (de) * 2016-11-01 2020-10-22 Mitsubishi Electric Corporation Informationsdarstellungsverfahren
CN108205647A (zh) * 2016-12-20 2018-06-26 乐视汽车(北京)有限公司 道路状况监测方法、装置及电子设备
US11073401B1 (en) * 2017-03-10 2021-07-27 Skydio, Inc. Road network optimization based on vehicle telematics information
JP7139584B2 (ja) * 2017-08-17 2022-09-21 ソニーグループ株式会社 情報処理装置、情報処理方法、プログラム、および情報処理システム
CN107798898A (zh) * 2017-10-27 2018-03-13 咪咕互动娱乐有限公司 一种路况信息通知的方法、电子设备和存储介质
JP6760251B2 (ja) * 2017-12-15 2020-09-23 株式会社デンソー 道路地図生成システム及び道路地図生成方法
CN107909535B (zh) * 2017-12-21 2021-07-23 福州信诺通信息技术有限公司 基于移动互联网的路政管理方法及***
US10599152B2 (en) * 2018-02-12 2020-03-24 Ford Global Technologies, Llc Earthquake emergency management system for automotive vehicles
CN111886589A (zh) * 2018-03-13 2020-11-03 本田技研工业株式会社 信息生成装置以及程序
JP7059817B2 (ja) * 2018-06-08 2022-04-26 スズキ株式会社 運転支援装置
JP7136600B2 (ja) * 2018-06-20 2022-09-13 株式会社Nttドコモ センサ情報共有システム、センサ情報共有サーバ及びセンサ情報報告装置
US10974727B2 (en) 2018-06-26 2021-04-13 Ford Global Technologies, Llc Transportation infrastructure communication and control
JP7082538B2 (ja) * 2018-07-10 2022-06-08 本田技研工業株式会社 画像処理装置及びプログラム
JP2020042323A (ja) * 2018-09-06 2020-03-19 日立オートモティブシステムズ株式会社 運転支援装置、運転支援システム、及び運転支援方法
JP7128723B2 (ja) * 2018-11-12 2022-08-31 本田技研工業株式会社 画像管理装置、路面情報管理システム、車両、プログラム、及び、画像管理方法
US10870351B2 (en) * 2018-12-12 2020-12-22 Here Global B.V. Method and apparatus for augmented reality based on localization and environmental conditions
JP2020094959A (ja) * 2018-12-14 2020-06-18 ヤフー株式会社 経路探索装置、経路探索方法、及び経路探索プログラム
WO2020137069A1 (ja) * 2018-12-28 2020-07-02 株式会社Nttドコモ 位置推定システム
JP7247592B2 (ja) 2019-01-16 2023-03-29 株式会社デンソー 異常検出装置、異常検出プログラム、異常検出方法及び異常検出システム
US11702081B2 (en) 2019-02-14 2023-07-18 Honda Motor Co., Ltd. System and method for road condition monitoring
JP7205695B2 (ja) * 2019-02-18 2023-01-17 トヨタ自動車株式会社 運転支援システム
CN109872533B (zh) * 2019-02-21 2020-12-04 弈人(上海)科技有限公司 一种基于空间数据的车道级实时交通情报处理方法
JP2020166584A (ja) * 2019-03-29 2020-10-08 トヨタ自動車株式会社 画像情報収集システム及び車両
JP7358762B2 (ja) * 2019-04-02 2023-10-11 トヨタ自動車株式会社 道路異常検知装置、道路異常検知方法および道路異常検知プログラム
JP7344014B2 (ja) * 2019-06-13 2023-09-13 株式会社デンソーテン 車載装置、データ収集装置、データ収集システムおよびデータ収集方法
JP6979438B2 (ja) * 2019-11-05 2021-12-15 三菱スペース・ソフトウエア株式会社 データベース生成システムおよびデータベース生成プログラム
TWI717102B (zh) * 2019-11-14 2021-01-21 黃玄 基於影像辨識之交通路況車聯網系統
JP7230783B2 (ja) * 2019-11-15 2023-03-01 トヨタ自動車株式会社 服装情報取得システムおよび服装情報取得方法
JP7356383B2 (ja) * 2020-03-19 2023-10-04 エヌ・ティ・ティ・コムウェア株式会社 画像判定装置、画像判定方法、および、プログラム
CN111611884A (zh) * 2020-05-07 2020-09-01 广州诚安路桥检测有限公司 一种道路安全设施巡查***及方法
GB2611452A (en) 2020-05-18 2023-04-05 Roadbotics Inc Systems and methods for creating and/or analyzing three-dimensional models of infrastructure assets
JP7216923B2 (ja) * 2020-07-02 2023-02-02 日本電気株式会社 画像収集装置、画像収集システム、画像収集方法及びプログラム
CN114758322B (zh) * 2022-05-13 2022-11-22 安徽省路通公路工程检测有限公司 基于机器识别的道路质量检测***

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1645436A (zh) * 2005-01-11 2005-07-27 肖禄生 一种城市路况信息实时发布及应用***
CN101632109A (zh) * 2007-03-12 2010-01-20 丰田自动车株式会社 道路状况检测***

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05189700A (ja) * 1992-01-10 1993-07-30 Hitachi Ltd 状態通知システム
KR100366716B1 (ko) 1998-10-13 2003-01-06 가부시키가이샤 자나비 인포메틱스 방송형 정보제공 시스템 및 주행환경 정보수집 장치
JP3933803B2 (ja) * 1998-10-13 2007-06-20 株式会社日立製作所 走行環境情報収集装置および情報提供システム
US6266442B1 (en) * 1998-10-23 2001-07-24 Facet Technology Corp. Method and apparatus for identifying objects depicted in a videostream
JP2001023090A (ja) * 1999-07-02 2001-01-26 Nec Corp 車両救援システム
JP3332158B2 (ja) 1999-11-08 2002-10-07 横河電機株式会社 監視システム
US7439847B2 (en) * 2002-08-23 2008-10-21 John C. Pederson Intelligent observation and identification database system
US20030212567A1 (en) * 2002-05-07 2003-11-13 Hitachi Ltd. Witness information service with image capturing and sharing
JP3721577B2 (ja) 2002-07-23 2005-11-30 横河電機株式会社 監視システム
JP4093026B2 (ja) 2002-11-18 2008-05-28 日本電気株式会社 道路環境情報通知装置、車載報知装置、情報センタ内装置、及び道路環境情報通知プログラム
JP3988683B2 (ja) * 2003-06-12 2007-10-10 株式会社日立製作所 画像情報取得システム及び車載端末
US7920716B2 (en) * 2003-12-25 2011-04-05 Fujitsu Limited Vehicle search system and vehicle search method
JP4926400B2 (ja) * 2004-12-27 2012-05-09 京セラ株式会社 移動カメラシステム
JP5023830B2 (ja) 2007-06-18 2012-09-12 株式会社デンソー Dsrc車載装置およびそれを用いた表示システム
JP5050771B2 (ja) 2007-10-12 2012-10-17 株式会社Jvcケンウッド 情報提供装置、情報提供方法及びプログラム
GB2460857A (en) * 2008-06-12 2009-12-16 Geoffrey Mark Timothy Cross Detecting objects of interest in the frames of a video sequence by a distributed human workforce employing a hybrid human/computing arrangement
US8164543B2 (en) * 2009-05-18 2012-04-24 GM Global Technology Operations LLC Night vision on full windshield head-up display

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1645436A (zh) * 2005-01-11 2005-07-27 肖禄生 一种城市路况信息实时发布及应用***
CN101632109A (zh) * 2007-03-12 2010-01-20 丰田自动车株式会社 道路状况检测***

Also Published As

Publication number Publication date
JP5551236B2 (ja) 2014-07-16
US20130033603A1 (en) 2013-02-07
US9092981B2 (en) 2015-07-28
CN102741900A (zh) 2012-10-17
WO2011108052A1 (ja) 2011-09-09
JPWO2011108052A1 (ja) 2013-06-20

Similar Documents

Publication Publication Date Title
CN102741900B (zh) 道路状况管理***及道路状况管理方法
CN101316749B (zh) 用于机车上的数据***的远程检测和控制的方法和装置
US9863928B1 (en) Road condition detection system
CN107113070B (zh) 车载设备、车载设备诊断***
US7677452B2 (en) Method and system for providing signatures for machines
US8031114B2 (en) Infrastructure and method for geography based vehicle alert
US10007675B2 (en) Method of improving database integrity for driver assistance applications
US20110029186A1 (en) Failure diagnostic information generating apparatus and failure diagnostic information generating system
CN110874930B (zh) 数据收集装置、车载设备、数据收集***和数据收集方法
US20140068561A1 (en) Control system having automatic component version management
JPH11504456A (ja) 自動化標識目録管理システム
CN111679675A (zh) 一种用于无人车的燃气巡检方法和无人车
WO2006080632A1 (en) Car management system using mobile phones and the method thereof
US20190095728A1 (en) Infrastructure detection device for a vehicle, method for generating a signal, and method for providing repair information
JP2009037062A (ja) 地図データ更新装置、及び地図データ更新システム
CN110874928B (zh) 车载设备、数据收集***、数据收集方法和数据收集装置
CN103791908A (zh) 用于更新和用于检验导航数据库的数据记录的方法
CN112489495A (zh) 一种车辆预警方法、装置、电子设备及存储介质
CN111966772A (zh) 一种实景地图生成方法及***
WO2010069380A1 (en) Method and apparatus for updating map data
KR20200079635A (ko) 차량사고 정보수집과 이벤트 분석 및 제공을 위한 시스템
CN113220805B (zh) 地图生成装置、记录介质以及地图生成方法
KR20110015889A (ko) 차량용 블랙박스 원격관리시스템 및 그 방법
US6957144B2 (en) Location confirmation system and information transmitting method for use in the system
JP2007164578A (ja) 車載無線通信装置および車載端末装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20141210

Termination date: 20191220