JP2006275690A - Driving support system - Google Patents
Driving support system Download PDFInfo
- Publication number
- JP2006275690A JP2006275690A JP2005093742A JP2005093742A JP2006275690A JP 2006275690 A JP2006275690 A JP 2006275690A JP 2005093742 A JP2005093742 A JP 2005093742A JP 2005093742 A JP2005093742 A JP 2005093742A JP 2006275690 A JP2006275690 A JP 2006275690A
- Authority
- JP
- Japan
- Prior art keywords
- sign
- driving support
- driving
- information
- vehicle
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Withdrawn
Links
Images
Landscapes
- Navigation (AREA)
- Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
- Traffic Control Systems (AREA)
Abstract
Description
この発明は、車両の運転を支援する運転支援装置に関し、特に道路標識を利用する運転支援装置に関する。 The present invention relates to a driving support device that supports driving of a vehicle, and more particularly to a driving support device that uses road signs.
従来、運転者に対する情報提供や動作制御への補助・介入を行なうことで車両の運転を支援する技術が各種考案されている。例えば、予め走行経路を設定し、位置情報と地図データに基づいて右左折などの運転操作が必要な交差点を事前に通知して経路案内を行なう、所謂ナビゲーション装置が既に広く利用されている。 Conventionally, various technologies for supporting driving of a vehicle by providing information to a driver and assisting / intervening in operation control have been devised. For example, so-called navigation devices that set a travel route in advance and provide route guidance by notifying an intersection that requires a driving operation such as a right or left turn based on position information and map data are already widely used.
さらに、通信によって標識に関する情報を取得して表示する技術(例えば特許文献1参照。)や、標識をカメラで撮影し、制限速度を超えている場合には運転者に注意を促す技術(例えば特許文献2参照。)、またカメラで車外の施設を撮影し、その施設データをナビゲーション装置のデータベースに保存する技術(例えば特許文献3参照。)などが考案されてきた。 Furthermore, a technique for acquiring and displaying information related to a sign by communication (for example, see Patent Document 1), or a technique for capturing a sign with a camera and alerting the driver when the speed limit is exceeded (for example, a patent) In addition, a technique has been devised in which a facility outside a vehicle is photographed with a camera and the facility data is stored in a database of a navigation device (see, for example, Patent Document 3).
ところで、経路案内のみを行なう場合には、速度制限や一旦停止、駐停車禁止など多くの標識が示す情報は必要ではない。しかし、実際の車両走行ではこれらの標識に従って走行する必要があり、従来これらの標識に従った走行の実現は運転者に委ねられてきた。 By the way, when only route guidance is performed, information indicated by many signs such as speed limit, temporary stop, prohibition of parking and stopping is not necessary. However, in actual vehicle traveling, it is necessary to travel according to these signs, and it has been left to the driver to realize traveling according to these signs.
たとえば、従来技術のように標識に関する情報を表示する構成であっても、標識が示す内容の認識と、その内容に沿った走行の実現は運転者自身が行なう必要があった。また、速度制限の標識を画像認識した場合に通知を行なう構成では、標識が見えにくい場所では通知を行なうことかできず、通知後の操作は運転者に委ねられる。また、他の多くの標識は利用することができなかった。 For example, even if the information related to the sign is displayed as in the prior art, it is necessary for the driver himself to recognize the contents indicated by the sign and to realize the traveling along the contents. Further, in the configuration in which the notification is made when the speed limit sign is recognized, the notification cannot be performed in a place where the sign is difficult to see, and the operation after the notification is left to the driver. Also, many other labels were not available.
すなわち、標識が示す情報はその場所における指示を示すものであるが、経路案内に直結しない情報や、その時点での車両動作に関係のない情報などは車両装置側での有効な利用がなされていないという問題点があった。さらに、従来の技術では、車両の制御自体を支援することができないという問題点があった。 That is, the information indicated by the sign indicates an instruction at the place, but information that is not directly related to route guidance or information that is not related to vehicle operation at that time is used effectively on the vehicle device side. There was no problem. Furthermore, the conventional technology has a problem that it cannot support vehicle control itself.
この発明は、上述した従来技術による問題点を解消し、課題を解決するためになされたものであり、道路標識を利用して効果的な運転支援を行なう運転支援装置を提供することを目的とする。 The present invention has been made to solve the above-described problems of the prior art and to solve the problems, and an object of the present invention is to provide a driving support device that performs effective driving support using road signs. To do.
上述した課題を解決し、目的を達成するため、請求項1の発明に係る運転支援装置は、車両の運転を支援する運転支援装置であって、自車両周辺を撮影する撮影手段と、前記撮影手段の撮影結果に対して画像認識を行なって標識を認識する標識認識手段と、前記標識認識手段による認識結果から走行関連情報を抽出する抽出手段と、前記走行関連情報を位置情報と対応付けて記憶する記憶手段と、前記記憶手段の記憶内容に基づいて運転の支援を行なう運転支援手段と、を備えたことを特徴とする。 In order to solve the above-described problems and achieve the object, a driving support apparatus according to the invention of claim 1 is a driving support apparatus that supports driving of a vehicle, and includes a photographing unit that photographs the periphery of the host vehicle, and the photographing. Sign recognition means for recognizing a sign by performing image recognition on the photographing result of the means, extraction means for extracting travel related information from the recognition result by the sign recognition means, and associating the travel related information with position information Storage means for storing, and driving support means for supporting driving based on the stored contents of the storage means are provided.
この請求項1の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて運転の支援を行なう。 According to the first aspect of the present invention, the driving support apparatus captures the periphery of the host vehicle, recognizes the image by recognizing the image, and stores the travel related information indicated by the sign in association with the position information of the host vehicle. Then, driving assistance is performed based on the stored contents.
また、請求項2の発明に係る運転支援装置は、請求項1の発明において、前記運転支援手段は、予定経路に沿って走行するために必要な運転操作を通知する経路案内支援を行なうことを特徴とする。 According to a second aspect of the present invention, in the driving support device according to the first aspect of the present invention, the driving support means performs route guidance support for notifying a driving operation necessary for traveling along the planned route. Features.
この請求項2の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて予定経路に沿って走行するために必要な運転操作を通知する。 According to the second aspect of the present invention, the driving support device photographs the periphery of the host vehicle, recognizes the image by recognizing the image, and stores the travel related information indicated by the marker in association with the position information of the host vehicle. Based on the stored contents, a driving operation necessary for traveling along the planned route is notified.
また、請求項3の発明に係る運転支援装置は、請求項1または2の発明において、前記運転支援手段は、交通情報を提供する情報提供支援を行なうことを特徴とする。 According to a third aspect of the present invention, there is provided a driving support apparatus according to the first or second aspect, wherein the driving support means performs information providing support for providing traffic information.
この請求項3の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて交通情報を提供する情報提供支援を行う。 According to the third aspect of the present invention, the driving support apparatus captures the periphery of the host vehicle, recognizes the image by recognizing the image, stores the travel related information indicated by the sign in association with the position information of the host vehicle, and stores the information. , Providing information support that provides traffic information based on the stored contents.
また、請求項4の発明に係る運転支援装置は、請求項1〜3のいずれか一つの発明において、前記運転支援手段は、車両の動作を制御する動作制御支援を行なうことを特徴とする。 According to a fourth aspect of the present invention, there is provided a driving support apparatus according to any one of the first to third aspects, wherein the driving support means performs operation control support for controlling the operation of the vehicle.
この請求項4の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて車両の動作を制御する動作制御支援を行なう。 According to the fourth aspect of the present invention, the driving support device captures the periphery of the host vehicle, recognizes the image by recognizing the image, and stores the travel related information indicated by the marker in association with the position information of the host vehicle. Then, operation control support for controlling the operation of the vehicle based on the stored contents is performed.
また、請求項5の発明に係る運転支援装置は、請求項3または4の発明において、前記標識認識手段は、前記経路案内支援に関する標識と前記情報提供支援に関する標識とを区別することを特徴とする。 The driving support apparatus according to the invention of claim 5 is characterized in that, in the invention of claim 3 or 4, the sign recognition means distinguishes a sign related to the route guidance support and a sign related to the information providing support. To do.
この請求項5の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、経路案内支援に関する標識と情報提供支援に関する標識とを区別して記憶するとともに、その記憶内容に基づいて運転の支援を行なう。 According to the invention of claim 5, the driving support device photographs the periphery of the host vehicle, recognizes the sign by performing image recognition, distinguishes and stores the sign related to the route guidance support and the sign related to the information providing support, Driving assistance is performed based on the stored contents.
また、請求項6の発明に係る運転支援装置は、請求項5の発明において、前記記憶手段は、前記経路案内支援に関する標識が識別された場合に、当該標識に基づいて前記経路案内支援に使用する情報を更新することを特徴とする。 According to a sixth aspect of the present invention, the driving support apparatus according to the fifth aspect of the present invention uses the storage means for the route guidance support based on the sign when the sign for the route guidance support is identified. The information to be updated is updated.
この請求項6の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、経路案内支援に関する標識が識別された場合に経路案内支援に使用する情報を更新する。 According to the sixth aspect of the present invention, the driving support device captures information about the route guidance support when the periphery of the host vehicle is photographed, the image is recognized to recognize the sign, and the sign related to the route guidance support is identified. Update.
また、請求項7の発明に係る運転支援装置は、請求項4〜6のいずれか一つの発明において、前記標識認識手段によって速度制限を示す標識が識別された場合に、前記動作制御支援として走行速度調節を行なうことを特徴とする。 According to a seventh aspect of the present invention, there is provided a driving support apparatus according to any one of the fourth to sixth aspects, wherein when the sign indicating the speed limit is identified by the sign recognition means, the driving support apparatus travels as the operation control support. It is characterized by speed adjustment.
この請求項7の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、速度制限を示す標識が識別された場合に、動作制御支援として走行速度調節を行なう。 According to the seventh aspect of the present invention, the driving assistance device photographs the periphery of the host vehicle, recognizes the sign by performing image recognition, and adjusts the traveling speed as operation control assistance when the sign indicating the speed limit is identified. To do.
また、請求項8の発明に係る運転支援装置は、請求項4〜7のいずれか一つの発明において、前記標識認識手段によって停止を求める標識が識別された場合に、前記動作制御支援として自車両の停止制御を行なうことを特徴とする。 According to an eighth aspect of the present invention, there is provided a driving support apparatus according to any one of the fourth to seventh aspects, wherein the vehicle is used as the operation control support when a sign for stop is identified by the sign recognition means. The stop control is performed.
この請求項8の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識認識手段によって停止を求める標識が識別された場合に、動作制御支援として自車両の停止制御を行なう。 According to the eighth aspect of the present invention, the driving support apparatus captures the periphery of the host vehicle, recognizes the image by recognizing the image, and recognizes the sign asking for stop by the sign recognition means. Perform stop control of the vehicle.
また、請求項9の発明に係る運転支援装置は、請求項4〜8のいずれか一つの発明において、周辺の他車両を検知する他車両検知手段をさらに備え、前記動作制御支援において前記他車両検知手段による検知結果をさらに用いることを特徴とする。 A driving support apparatus according to a ninth aspect of the present invention is the driving support device according to any one of the fourth to eighth aspects, further comprising other vehicle detection means for detecting a surrounding other vehicle, wherein the other vehicle is used in the operation control support. The detection result by the detection means is further used.
この請求項9の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識するとともに周辺の他車両を検知し、標識の示す内容と他車両の検知結果に基づいて車両の動作を制御する動作制御支援を行なう。 According to the ninth aspect of the present invention, the driving support device photographs the periphery of the host vehicle, recognizes the sign by performing image recognition, detects the other vehicle in the vicinity, and displays the content indicated by the sign and the detection result of the other vehicle. Based on this, the operation control support for controlling the operation of the vehicle is performed.
請求項1の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて運転の支援を行なうので、道路標識を利用して効果的な運転支援を行なう運転支援装置を得ることができるという効果を奏する。 According to the first aspect of the present invention, the driving support apparatus captures the periphery of the host vehicle, recognizes the image by recognizing the image, stores the travel related information indicated by the sign in association with the position information of the host vehicle, Since driving assistance is performed based on the stored contents, there is an effect that it is possible to obtain a driving assistance apparatus that performs effective driving assistance using road signs.
また、請求項2の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて予定経路に沿って走行するために必要な運転操作を通知するので、道路標識を利用して効果的な経路案内を行なう運転支援装置を得ることができるという効果を奏する。 According to a second aspect of the present invention, the driving support device captures the periphery of the host vehicle, recognizes the image by recognizing the image, and stores the travel related information indicated by the marker in association with the position information of the host vehicle. In addition, since the driving operation necessary for traveling along the planned route is notified based on the stored contents, an effect that a driving support device that performs effective route guidance using road signs can be obtained. Play.
また、請求項3の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて交通情報を提供する情報提供支援を行うので、道路標識を利用して効果的な交通情報の提供を行なう運転支援装置を得ることができるという効果を奏する。 According to a third aspect of the present invention, the driving support apparatus captures the periphery of the host vehicle, recognizes the image by recognizing the image, and stores the travel related information indicated by the marker in association with the position information of the host vehicle. At the same time, since the information providing support for providing traffic information is performed based on the stored contents, it is possible to obtain a driving support device that provides effective traffic information using road signs.
また、請求項4の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識が示す走行関連情報を自車両の位置情報と対応付けて記憶するとともに、その記憶内容に基づいて車両の動作を制御する動作制御支援を行なうので、道路標識を利用して効果的な運転操作支援を行なう運転支援装置を得ることができるという効果を奏する。 According to a fourth aspect of the present invention, the driving support apparatus photographs the periphery of the host vehicle, recognizes the image by recognizing the image, and stores the travel related information indicated by the marker in association with the position information of the host vehicle. At the same time, since the operation control support for controlling the operation of the vehicle is performed based on the stored contents, there is an effect that it is possible to obtain a driving support device that performs an effective driving operation support using a road sign.
また、請求項5の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、経路案内支援に関する標識と情報提供支援に関する標識とを区別して記憶するとともに、その記憶内容に基づいて運転の支援を行なうので、道路標識を利用して効果的な経路案内と情報提供を行なう運転支援装置を得ることができるという効果を奏する。 According to a fifth aspect of the present invention, the driving support apparatus captures the periphery of the host vehicle, recognizes the sign by performing image recognition, distinguishes and stores the sign related to the route guidance support and the sign related to the information providing support. Since the driving assistance is performed based on the stored contents, it is possible to obtain a driving assistance device that provides effective route guidance and information provision using road signs.
また、請求項6の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、経路案内支援に関する標識が識別された場合に経路案内支援に使用する情報を更新するので、道路標識を利用して経路案内情報を最新の状態に保つ運転支援装置を得ることができるという効果を奏する。 According to a sixth aspect of the present invention, the driving support apparatus captures information around the host vehicle, recognizes the image by recognizing the image, and uses the information for the route guidance support when the sign related to the route guidance support is identified. As a result, the driving support device that keeps the route guidance information in the latest state using the road sign can be obtained.
また、請求項7の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、速度制限を示す標識が識別された場合に、動作制御支援として走行速度調節を行なうので、道路標識を利用して速度超過を防止可能な運転支援装置を得ることができるという効果を奏する。 According to the seventh aspect of the present invention, the driving support device captures the periphery of the host vehicle, recognizes the image by recognizing the image, and recognizes the sign indicating the speed limit. Since the adjustment is performed, there is an effect that it is possible to obtain a driving support device that can prevent overspeed using road signs.
また、請求項8の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識し、標識認識手段によって停止を求める標識が識別された場合に、動作制御支援として自車両の停止制御を行なうので、道路標識を利用して一旦停止を自動実行する運転支援装置を得ることができるという効果を奏する。 According to the eighth aspect of the present invention, the driving support device captures the periphery of the host vehicle, recognizes the image by recognizing the image, and supports the operation control when the sign for stopping is identified by the sign recognition means. Since the stop control of the own vehicle is performed as described above, there is an effect that it is possible to obtain a driving support device that automatically executes a stop once using a road sign.
また、請求項9の発明によれば運転支援装置は、自車両周辺を撮影し、画像認識を行なって標識を認識するとともに周辺の他車両を検知し、標識の示す内容と他車両の検知結果に基づいて車両の動作を制御する動作制御支援を行なうので、道路標識を利用し、かつ周辺の交通情報に適応した運転操作の支援を行なう運転支援装置を得ることができるという効果を奏する。 According to the ninth aspect of the present invention, the driving support device photographs the periphery of the host vehicle, recognizes the sign by performing image recognition, detects the other vehicle in the vicinity, and the content indicated by the sign and the detection result of the other vehicle Therefore, it is possible to obtain a driving support device that uses a road sign and supports driving operation adapted to surrounding traffic information.
以下に添付図面を参照して、この発明に係る運転支援装置の好適な実施例について詳細に説明する。 Exemplary embodiments of a driving support apparatus according to the present invention will be described below in detail with reference to the accompanying drawings.
図1は、本発明の実施例である運転支援装置の概要構成を示す概要構成図である。同図に示すように、運転支援装置1は、GPS(Global Positioning System)11、車速パルス入力装置12、レーダ13、カメラ14、車内通知系30および車両制御系40と接続する。
FIG. 1 is a schematic configuration diagram showing a schematic configuration of a driving support apparatus according to an embodiment of the present invention. As shown in the figure, the driving support device 1 is connected to a GPS (Global Positioning System) 11, a vehicle speed
GPS11は、人工衛星との通信によって自車両の位置を特定して運転支援装置1に出力し、車速パルス入力装置12は、タイヤの回転速度などに対応して発生する車速パルスを運転支援装置1に入力する。
The
また、レーダ13は、自車両周辺の物体検知と距離の測定、特に先行車両や後続車両の有無と距離測定とを行なって運転支援装置1に入力する。さらに、カメラ14は、自車両周辺の画像を撮影して運転支援装置1に入力する。
Further, the
車内通知系30は、具体的には、映像出力に使用するディスプレイ31、音声出力に使用するスピーカ32などを含み、ナビゲーション装置1の他、オーディオ装置や各種車載機器に共用される。
The in-
車両制御系40は、車両の動作制御を行なう装置群であり、アクセル操作に基づいてエンジンの動作を制御するエンジン制御機構41、ブレーキペダルの操作に基づいて車両の制動を行なうブレーキ制御機構42などを含む。
The
運転支援装置1は、その内部に主制御部20、画像処理部25およびデータ格納部26を有する。画像処理部25は、カメラ14の撮影結果に対して画像処理を行なって道路標識の認識を行なう。ここで、道路標識は、自車両の前方に限らず、後方や側方、対向車線側に設けられたものであってもよい。
The driving support device 1 includes a
データ格納部26は、その内部に地図データ、標識パターン、交通情報を記憶している。地図データは、道路の形状などに加え、一旦停止や速度制限などを示すデータである。また、標識パターンは、各種標識の形状と、その標識が示す内容とを対応付けたデータである。さらに、交通情報は、工事中の場所や渋滞中の場所など交通状態に影響する各種情報である。
The
主制御部20は、運転支援装置1を全体制御する制御部であり、その内部に経路案内部21、情報提供部22、動作制御部23および情報管理部24を有する。経路案内部21は、GPSが特定した現在位置とデータ格納部26に格納した地図データとを参照し、自車両が予定経路に沿って走行するために必要な運転操作を車内通知系30を際して出力する、いわゆるナビゲーション処理を行なう。
The
また、情報提供部22は、渋滞や事故、工事など走行状態に影響する情報を自車両の乗員に提供する処理部であり、その内部にフィルタリング処理部22aを有する。このフィルタリング処理部22aは、走行に影響を与える情報のうち、運転者に対して提供する必要性の高い情報を選択する処理を行なう。
The
動作制御部23は、自車両の動作制御に介入する処理を行なう。具田的には、動作制御部23は、その内部に速度調節部23aおよび停止支援部23bを有する。速度調整部23aは、自車両が走行中の道路に制限速度が設けられており、かつ自車両の速度が制限速度を超過している場合に制限速度まで減速する処理を行なうように支援する。一方、停止支援部23bは自車両が停止する必要がある場合に、停止を支援する処理を行なう。
The
具体的には、速度調整部23aは、車速パルス入力装置11が入力した車速パルスから自車両の走行速度を算出するとともに、地図データに示された制限速度とを比較する。そして、自車両の走行速度か制限速度を超過しているならば、エンジン制御機構41の制御によるエンジン回転数低下や、ブレーキ制御機構42の制御によるブレーキの自動実行によって自動的に減速する。
Specifically, the speed adjustment unit 23a calculates the traveling speed of the host vehicle from the vehicle speed pulse input by the vehicle speed
また、アクセルペダルやブレーキペダルの遊びを少なくして運転者による運転操作を支援する処理を行なうこともできる。さらに、速度調整部23aは、レーダ13やカメラ14の出力を用いて自車両周辺の他の車両を検知し、他車両との衝突の危険がない範囲で速度の調節を行なう。
Further, it is possible to perform a process for assisting the driving operation by the driver with less play of the accelerator pedal and the brake pedal. Furthermore, the speed adjusting unit 23a detects other vehicles around the own vehicle using the output of the
同様に、停止支援部23bは、車速パルス入力装置11が入力した車速パルスから自車両の走行速度を算出するとともに、停止位置までの距離を算出する。そして、走行速度と停止位置までの距離に基づいてエンジン制御機構41によるエンジン回転数低下や、ブレーキ制御機構42によるブレーキの自動実行を行なって減速する。また、一方通行に気付かずに進入しようとしたときや駐車禁止の場所に止めようとしたときに、ウインカーやハザードを出した時点でドライバーに警告することもできる。
Similarly, the
また、アクセルペダルやブレーキペダルの遊びを少なくして運転者による運転操作を支援する処理を行なうことができる点や、レーダ13やカメラ14の出力に基づいて他車両との衝突の危険がない範囲で制御する点についても同様である。
In addition, it is possible to perform processing for supporting the driving operation by the driver with less play of the accelerator pedal and the brake pedal, and a range in which there is no risk of collision with other vehicles based on the output of the
情報管理部24は、画像処理装置25の出力に基づいて標識を判別し、データ格納部26を更新する処理を行なう。この標識の判別において情報管理部24は、データ格納部26から標識パターンを読み出し、パターンマッチングによって標識を判別する。
The
そして、例えば速度制限を示す標識を判別した場合、情報管理部24は、地図データに示された速度制限の情報を更新する。また、一旦停止を示す標識を判別した場合、情報管理部24は地図データに示された一旦停止の情報を更新する。同様に右左折の禁止や駐車禁止、進入禁止、一方通行などの標識を識別した場合にも地図データの更新を行なう。一方、工事中を示す標識を判別した場合、情報管理部24は交通情報を更新する。
For example, when the sign indicating the speed limit is determined, the
ここで、情報管理部24が取得した情報(速度制限や一旦停止、工事中など)に対応する情報がデータ格納部26に存在しない場合、情報管理部24は新たに情報を追加することで更新を行なう。一方、既に情報が存在する場合、取得した標識の示す内容とデータ格納部26に記憶した内容とを比較し、一致していなければ標識から取得した内容に変更する。
Here, when information corresponding to the information acquired by the information management unit 24 (speed limit, temporary stop, under construction, etc.) does not exist in the
例えば地図データにその道路の速度制限が「50km/h」と示されている状態で速度制限40km/hの標識を判別した場合には、情報管理部24は、その道路の制限速度を「40km/h」に変更する。
For example, when the map data indicates that the road speed limit is “50 km / h” and the speed limit of 40 km / h is determined, the
このように画像処理によって取得した標識が示す情報に地図データを更新してゆくことで、道路に新たに標識が設置された場合などに対応し、地図データを最新の情報に保つことができる。また、工事中などの情報を交通情報として記憶することで、交通状態の変化に柔軟に対応することが可能となる。 In this way, by updating the map data to the information indicated by the sign acquired by image processing, the map data can be kept up-to-date in response to a case where a sign is newly installed on the road. In addition, by storing information such as under construction as traffic information, it becomes possible to flexibly cope with changes in traffic conditions.
ところで、情報管理部24によるデータ格納部26の更新は、その時点における情報の必要性とは無関係に登録することができる。したがって、自車両が走行中である道路の進行方向先の標識(通常、運転者が確認する標識)のみならず、自車両の後方や側方に存在する標識、さらに対向車線など周辺の他の道路に存在する標識についてもその情報を取得し、データ格納部26に格納することができる。
By the way, the update of the
また、標識の判別をする場合に、その標識の内容が特定できない場合には、画像自体を記憶しておき、ディスプレイ31を用いて標識の画像を直接表示することで、運転者による標識の確認を支援することができる。
Also, when determining the sign, if the contents of the sign cannot be specified, the image itself is stored, and the sign image is directly displayed on the
また、後から運転者に画像を見せ、運転者に標識の内容を手動や音声で入力してもらうようにしてもよい。例えば図2に示した表示例31aのようにディスプレイ31の画面半分に特定できなかった認識失敗画像を表示し、もう半分に類型的な標識パターンを表示する。そして、標識パターンから運転者に選択させればよい。
Further, an image may be shown to the driver later so that the driver can input the contents of the sign manually or by voice. For example, a recognition failure image that could not be specified is displayed on the screen half of the
図2の例であれば、運転者は速度制限の標識を選択するので、その後、制限速度の入力を促す。そして、運転者が「30km」を入力したならば、地図情報に「制限速度30km/h」を登録し、認識失敗画像は消去する。
In the example of FIG. 2, the driver selects a speed limit sign, and thereafter prompts the user to input a speed limit. If the driver inputs “30 km”, “
つぎに、運転支援装置1の処理動作について図3のフローチャートを参照して説明する。同図に示した処理フローは、運転支援装置1の起動中に繰り返し実行される処理である。 Next, the processing operation of the driving support apparatus 1 will be described with reference to the flowchart of FIG. The processing flow shown in the figure is processing that is repeatedly executed while the driving support device 1 is activated.
同図に示すように、運転支援装置1は、まず情報管理部によるナビ情報補完処理(データ格納部26の地図データおよび交通情報の更新処理)を実行する(ステップS101)。その後、運転支援装置1は自車両が停止する必要(一旦停止の標識や赤信号、渋滞の最後尾車両など)があるか否かを判定する(ステップS102)。 As shown in the figure, the driving support device 1 first executes a navigation information complementing process (a process for updating map data and traffic information in the data storage unit 26) by the information management unit (step S101). Thereafter, the driving support device 1 determines whether or not the own vehicle needs to be stopped (such as a stop sign, a red light, or the last vehicle in a traffic jam) (step S102).
そして、停止する必要がある場合(ステップS102,Yes)には運転支援装置1は停止支援処理(ステップS103)を実行して処理を終了し、停止する必要が無い場合(ステップS102,No)には速度調整処理(ステップS104)を実行して処理を終了する。 And when it needs to stop (Step S102, Yes), driving support device 1 performs stop support processing (Step S103), ends processing, and when it is not necessary to stop (Step S102, No) Executes the speed adjustment process (step S104) and ends the process.
つぎに、図3にステップS101として示したナビ情報補完処理についてさらに説明する。図4は、ナビ情報補完処理の詳細を説明するフローチャートである。同図に示すように、まずカメラ14が自車両周辺を撮影し、画像処理装置25による画像処理を施して標識を認識する(ステップS201)。
Next, the navigation information complementing process shown as step S101 in FIG. 3 will be further described. FIG. 4 is a flowchart for explaining the details of the navigation information complementing process. As shown in the figure, first, the
そして、標識から得られた情報を地図データおよび交通情報と照合し(ステップS202)、対応するデータが存在するか否かを判定する(ステップS203)。その結果、対応するデータが存在しなければ(ステップS203,No)、情報管理部24は新たにデータを登録して(ステップS204)、処理を終了する。
Then, the information obtained from the sign is collated with map data and traffic information (step S202), and it is determined whether or not corresponding data exists (step S203). As a result, if there is no corresponding data (step S203, No), the
一方、対応するデータが存在する場合(ステップS203,Yes)、情報管理部24は、標識から得られた情報が既存の情報と一致するか否かを判定する(ステップS205)。その結果、既存のデータと一致するならば(ステップS205,Yes)そのまま処理を終了し、一致しない場合には(ステップS205,No)、情報管理部24はデータ格納部26の内容を書き換えて(ステップS206)、処理を終了する。
On the other hand, when the corresponding data exists (step S203, Yes), the
つづいて、図3にステップS104として示した速度調整処理についてさらに説明する。図5は、停止支援処理および速度調整処理の詳細を説明するフローチャートである。 Next, the speed adjustment process shown as step S104 in FIG. 3 will be further described. FIG. 5 is a flowchart illustrating details of the stop support process and the speed adjustment process.
同図に示すように、速度調整処理では、まず車速パルス入力装置12が入力する車速データを取り込み(ステップS301)、自車両の走行速度を演算する(ステップS302)。
As shown in the figure, in the speed adjustment process, first, vehicle speed data input by the vehicle speed
つぎに、データ格納部26の地図データに記憶した制限速度と走行速度を比較し(ステップS303)、速度が正常であるか否かを判定する(ステップS304)。その結果、速度が正常であるならば(ステップS304,Yes)、そのまま処理を終了する。
Next, the speed limit stored in the map data in the
一方、速度が正常範囲を逸脱している場合(ステップS304,No)、車内通知系30がスピーカ32を用いて警告音声を出力する(ステップS305)。その後、速度が低下したか否か、すなわち運転者が警告に反応して減速操作を開始したか否かを判定する(ステップS306)。
On the other hand, when the speed is out of the normal range (step S304, No), the in-
そして、速度が低下していれば(ステップS306,Yes)、そのまま処理を終了し、速度が低下しなければ(ステップS307,No)、エンジン制御機構41およびブレーキ制御機構42を操作して自動で制動を行なって(ステップS307)、処理を終了する。
If the speed has decreased (step S306, Yes), the process is terminated as it is. If the speed has not decreased (step S307, No), the
なお、ステップS307の自動制動時には、既に述べたように先行車両や後続車両を検知して、衝突の危険のない範囲で制御を行なう。 At the time of automatic braking in step S307, the preceding vehicle and the following vehicle are detected as described above, and the control is performed within the range where there is no risk of collision.
つぎに、図3にステップS103として示した停止支援処理の詳細は、図5に示した速度調整処理と同様であるので、速度調整処理との相違点のみ説明する。図5に示したように速度調整処理では、自車両の走行速度の演算(ステップS302)の後、走行速度と制限速度とを比較していた(ステップS303)が、停止支援処理では走行速度の演算後、停止位置と必要な制動量を求め、必要な制動が行なわれているか否かを判定する点が異なる。その他の処理については速度調節処理と同様である。 Next, the details of the stop support process shown as step S103 in FIG. 3 are the same as those in the speed adjustment process shown in FIG. 5, and only the differences from the speed adjustment process will be described. As shown in FIG. 5, in the speed adjustment process, after the calculation of the travel speed of the host vehicle (step S302), the travel speed and the speed limit are compared (step S303). After the calculation, a difference is that a stop position and a necessary braking amount are obtained and it is determined whether or not necessary braking is performed. Other processes are the same as the speed adjustment process.
上述してきたように、本実施例にかかる運転支援装置1は、カメラ14が撮影した画像に対して画像処理を行なって標識を認識し、認識した標識の内容に基づいてデータ格納部26が格納する地図データや交通情報を更新するので、経路案内に直結しない情報や、その時点での車両動作に関係のない情報についても有効に利用することができる。
As described above, the driving assistance apparatus 1 according to the present embodiment performs image processing on the image captured by the
また、標識が示す情報に基づいてエンジン制御機構41やブレーキ制御機構42を含む車両制御系40に介入することとで、速度調整や停止支援など車両の動作制御を支援することができる。
Further, by intervening in the
以上のように、本発明にかかる運転支援装置は、車両の運転支援に有用であり、特に道路標識を利用した運転支援に適している。 As described above, the driving assistance apparatus according to the present invention is useful for driving assistance for vehicles, and is particularly suitable for driving assistance using road signs.
1 運転支援装置
11 GPS
12 車速パルス入力装置
13 レーダ
14 カメラ
20 主制御部
21 経路案内部
22 情報提供部
22a フィルタリング処理部
23 動作制御部
23a 速度調整部
23b 停止支援部
24 情報管理部
25 画像処理装置
26 データ格納部
30 車内通知系
31 ディスプレイ
32 スピーカ
40 車両制御系
41 エンジン制御機構
42 ブレーキ制御機構
1 Driving
DESCRIPTION OF
Claims (9)
自車両周辺を撮影する撮影手段と、
前記撮影手段の撮影結果に対して画像認識を行なって標識を認識する標識認識手段と、
前記標識認識手段による認識結果から走行関連情報を抽出する抽出手段と、
前記走行関連情報を位置情報と対応付けて記憶する記憶手段と、
前記記憶手段の記憶内容に基づいて運転の支援を行なう運転支援手段と、
を備えたことを特徴とする運転支援装置。 A driving support device for supporting driving of a vehicle,
Photographing means for photographing the periphery of the vehicle;
A sign recognition means for recognizing a sign by performing image recognition on the photographing result of the photographing means;
Extraction means for extracting travel-related information from the recognition result by the sign recognition means;
Storage means for storing the travel-related information in association with the position information;
Driving support means for supporting driving based on the storage contents of the storage means;
A driving support apparatus comprising:
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005093742A JP2006275690A (en) | 2005-03-29 | 2005-03-29 | Driving support system |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005093742A JP2006275690A (en) | 2005-03-29 | 2005-03-29 | Driving support system |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006275690A true JP2006275690A (en) | 2006-10-12 |
Family
ID=37210616
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005093742A Withdrawn JP2006275690A (en) | 2005-03-29 | 2005-03-29 | Driving support system |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2006275690A (en) |
Cited By (26)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
EP1975563A2 (en) | 2007-03-30 | 2008-10-01 | Aisin AW Co., Ltd. | Feature information collecting apparatus and feature information collecting method |
JP2009014518A (en) * | 2007-07-04 | 2009-01-22 | Aisin Aw Co Ltd | Device, method and program for generating road information |
JP2009031131A (en) * | 2007-07-27 | 2009-02-12 | Pioneer Electronic Corp | Traffic control information generator and traffic control information generation program |
JP2009037613A (en) * | 2007-07-20 | 2009-02-19 | Valeo Vision | Method of automatically determining speed limit on road and associated system |
JP2009067314A (en) * | 2007-09-14 | 2009-04-02 | Toyota Motor Corp | Travel supportive device |
EP2113746A1 (en) | 2007-12-27 | 2009-11-04 | Aisin AW Co., Ltd. | Feature information collecting device and feature information collecting program, and vehicle position recognizing device and navigation device |
JP2010003163A (en) * | 2008-06-20 | 2010-01-07 | Toyota Motor Corp | System for creating road environment database , moving object constituting the same, and method of creating road environment database |
JP2010111260A (en) * | 2008-11-06 | 2010-05-20 | Honda Motor Co Ltd | Vehicle speed control device |
JP2010528398A (en) * | 2007-05-25 | 2010-08-19 | コンチネンタル・テーヴエス・アクチエンゲゼルシヤフト・ウント・コンパニー・オツフエネハンデルスゲゼルシヤフト | Method and apparatus for recognizing information important to traffic |
JP2010237124A (en) * | 2009-03-31 | 2010-10-21 | Aisin Aw Co Ltd | Map data update system, map data update program, navigation system using the same and vehicle controller |
JP2011026973A (en) * | 2009-07-22 | 2011-02-10 | Ud Trucks Corp | Vehicle operation system |
US8155826B2 (en) | 2007-03-30 | 2012-04-10 | Aisin Aw Co., Ltd. | Vehicle behavior learning apparatuses, methods, and programs |
US8184861B2 (en) | 2007-03-30 | 2012-05-22 | Aisin Aw Co., Ltd. | Feature information management apparatuses, methods, and programs |
JP2012118804A (en) * | 2010-12-01 | 2012-06-21 | Honda Motor Co Ltd | Alarm device |
JP2012153296A (en) * | 2011-01-27 | 2012-08-16 | Toyota Motor Corp | Running control apparatus |
US8825353B2 (en) | 2007-09-28 | 2014-09-02 | Aisin Aw Co., Ltd. | Parking support systems, parking support methods, and parking support programs |
US8892517B2 (en) | 2006-06-09 | 2014-11-18 | Aisin Aw Co., Ltd. | Data updating system, navigation device, server, and method of data updating |
JP2015102898A (en) * | 2013-11-21 | 2015-06-04 | 本田技研工業株式会社 | Road sign determination device |
JP2015118668A (en) * | 2013-12-20 | 2015-06-25 | 矢崎エナジーシステム株式会社 | Travel information management system |
WO2017002471A1 (en) * | 2015-07-02 | 2017-01-05 | ソニー株式会社 | Vehicle control device, vehicle control method, and program |
JP2017102831A (en) * | 2015-12-04 | 2017-06-08 | 株式会社デンソー | Information processing system, information processing apparatus, and output control method |
CN111169440A (en) * | 2018-11-13 | 2020-05-19 | 中移物联网有限公司 | Braking method and device and storage medium |
CN112208539A (en) * | 2019-07-09 | 2021-01-12 | 奥迪股份公司 | System, vehicle, method, and medium for autonomous driving of a vehicle |
JP2022040533A (en) * | 2020-08-31 | 2022-03-11 | トヨタ自動車株式会社 | Vehicle driving support device, vehicle driving support method and program |
JP2022040532A (en) * | 2020-08-31 | 2022-03-11 | トヨタ自動車株式会社 | Vehicle driving support device, vehicle driving support method and program |
CN116323363A (en) * | 2020-12-28 | 2023-06-23 | 本田技研工业株式会社 | Vehicle control device, vehicle control method, and program |
-
2005
- 2005-03-29 JP JP2005093742A patent/JP2006275690A/en not_active Withdrawn
Cited By (35)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8892517B2 (en) | 2006-06-09 | 2014-11-18 | Aisin Aw Co., Ltd. | Data updating system, navigation device, server, and method of data updating |
US8155826B2 (en) | 2007-03-30 | 2012-04-10 | Aisin Aw Co., Ltd. | Vehicle behavior learning apparatuses, methods, and programs |
EP1975563A2 (en) | 2007-03-30 | 2008-10-01 | Aisin AW Co., Ltd. | Feature information collecting apparatus and feature information collecting method |
US8213682B2 (en) | 2007-03-30 | 2012-07-03 | Aisin Aw Co., Ltd. | Feature information collecting apparatuses, methods, and programs |
US8184861B2 (en) | 2007-03-30 | 2012-05-22 | Aisin Aw Co., Ltd. | Feature information management apparatuses, methods, and programs |
JP2010528398A (en) * | 2007-05-25 | 2010-08-19 | コンチネンタル・テーヴエス・アクチエンゲゼルシヤフト・ウント・コンパニー・オツフエネハンデルスゲゼルシヤフト | Method and apparatus for recognizing information important to traffic |
JP2009014518A (en) * | 2007-07-04 | 2009-01-22 | Aisin Aw Co Ltd | Device, method and program for generating road information |
JP2009037613A (en) * | 2007-07-20 | 2009-02-19 | Valeo Vision | Method of automatically determining speed limit on road and associated system |
JP2009031131A (en) * | 2007-07-27 | 2009-02-12 | Pioneer Electronic Corp | Traffic control information generator and traffic control information generation program |
JP2009067314A (en) * | 2007-09-14 | 2009-04-02 | Toyota Motor Corp | Travel supportive device |
US8825353B2 (en) | 2007-09-28 | 2014-09-02 | Aisin Aw Co., Ltd. | Parking support systems, parking support methods, and parking support programs |
US8379923B2 (en) | 2007-12-27 | 2013-02-19 | Aisin Aw Co., Ltd. | Image recognition processing device, method, and program for processing of image information obtained by imaging the surrounding area of a vehicle |
EP2113746A1 (en) | 2007-12-27 | 2009-11-04 | Aisin AW Co., Ltd. | Feature information collecting device and feature information collecting program, and vehicle position recognizing device and navigation device |
JP2010003163A (en) * | 2008-06-20 | 2010-01-07 | Toyota Motor Corp | System for creating road environment database , moving object constituting the same, and method of creating road environment database |
JP2010111260A (en) * | 2008-11-06 | 2010-05-20 | Honda Motor Co Ltd | Vehicle speed control device |
JP2010237124A (en) * | 2009-03-31 | 2010-10-21 | Aisin Aw Co Ltd | Map data update system, map data update program, navigation system using the same and vehicle controller |
JP2011026973A (en) * | 2009-07-22 | 2011-02-10 | Ud Trucks Corp | Vehicle operation system |
JP2012118804A (en) * | 2010-12-01 | 2012-06-21 | Honda Motor Co Ltd | Alarm device |
JP2012153296A (en) * | 2011-01-27 | 2012-08-16 | Toyota Motor Corp | Running control apparatus |
JP2015102898A (en) * | 2013-11-21 | 2015-06-04 | 本田技研工業株式会社 | Road sign determination device |
JP2015118668A (en) * | 2013-12-20 | 2015-06-25 | 矢崎エナジーシステム株式会社 | Travel information management system |
CN104751667A (en) * | 2013-12-20 | 2015-07-01 | 矢崎能源***公司 | A traffic information management system |
WO2017002471A1 (en) * | 2015-07-02 | 2017-01-05 | ソニー株式会社 | Vehicle control device, vehicle control method, and program |
JPWO2017002471A1 (en) * | 2015-07-02 | 2018-04-19 | ソニー株式会社 | Vehicle control apparatus, vehicle control method, and program |
US10994712B2 (en) | 2015-07-02 | 2021-05-04 | Sony Corporation | Vehicle control device and vehicle control method |
JP2017102831A (en) * | 2015-12-04 | 2017-06-08 | 株式会社デンソー | Information processing system, information processing apparatus, and output control method |
US10740625B2 (en) | 2015-12-04 | 2020-08-11 | Denso Corporation | Information processing system, information processing apparatus, and output control method |
CN111169440A (en) * | 2018-11-13 | 2020-05-19 | 中移物联网有限公司 | Braking method and device and storage medium |
CN112208539A (en) * | 2019-07-09 | 2021-01-12 | 奥迪股份公司 | System, vehicle, method, and medium for autonomous driving of a vehicle |
JP2022040533A (en) * | 2020-08-31 | 2022-03-11 | トヨタ自動車株式会社 | Vehicle driving support device, vehicle driving support method and program |
JP2022040532A (en) * | 2020-08-31 | 2022-03-11 | トヨタ自動車株式会社 | Vehicle driving support device, vehicle driving support method and program |
JP7384130B2 (en) | 2020-08-31 | 2023-11-21 | トヨタ自動車株式会社 | Vehicle driving support devices, vehicle driving support methods, and programs |
JP7384131B2 (en) | 2020-08-31 | 2023-11-21 | トヨタ自動車株式会社 | Vehicle driving support devices, vehicle driving support methods, and programs |
CN116323363A (en) * | 2020-12-28 | 2023-06-23 | 本田技研工业株式会社 | Vehicle control device, vehicle control method, and program |
US11958493B2 (en) | 2020-12-28 | 2024-04-16 | Honda Motor Co., Ltd. | Vehicle control device and vehicle control method |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2006275690A (en) | Driving support system | |
CN110182209B (en) | Vehicle control device and vehicle control method | |
JP6490044B2 (en) | Vehicle control device | |
JP4737519B2 (en) | Vehicle control auxiliary device and vehicle control auxiliary method | |
JP4888212B2 (en) | Vehicle alarm device | |
CN110182210B (en) | Vehicle control device and vehicle control method | |
WO2013153660A1 (en) | Driving assistance device | |
JP2005170154A (en) | Vehicle drive assisting device | |
WO2020002962A1 (en) | Drive assisting method and vehicle control device | |
JP2007233864A (en) | Dead angle support information notification device and program | |
JP2010067234A (en) | Driving support apparatus and program | |
JP5614079B2 (en) | Driving assistance device | |
JP2007066179A (en) | Driving support device for vehicle | |
JP2010257108A (en) | Driving support device | |
US10176714B2 (en) | Driving support apparatus | |
JP2007257301A (en) | Sign recognition system for vehicle | |
JP2007122472A (en) | Driving support system and program | |
JP5272902B2 (en) | Vehicle travel support device and vehicle travel support method | |
JP2009059208A (en) | Driving support device, driving support method, and computer program | |
JP7157780B2 (en) | Information presentation device for self-driving cars | |
US20210171064A1 (en) | Autonomous driving vehicle information presentation apparatus | |
JP2014089588A (en) | Operation support device | |
JP2016224553A (en) | Traffic information display system for vehicle | |
JP2008257635A (en) | Vehicle warning device | |
JP6465131B2 (en) | Driver monitoring device, driver monitoring method, and program for driver monitoring |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A300 | Withdrawal of application because of no request for examination |
Free format text: JAPANESE INTERMEDIATE CODE: A300 Effective date: 20080603 |