JP5649568B2 - 車両と歩行者との衝突を回避するための運転者援助システム - Google Patents

車両と歩行者との衝突を回避するための運転者援助システム Download PDF

Info

Publication number
JP5649568B2
JP5649568B2 JP2011510864A JP2011510864A JP5649568B2 JP 5649568 B2 JP5649568 B2 JP 5649568B2 JP 2011510864 A JP2011510864 A JP 2011510864A JP 2011510864 A JP2011510864 A JP 2011510864A JP 5649568 B2 JP5649568 B2 JP 5649568B2
Authority
JP
Japan
Prior art keywords
driver assistance
assistance system
pedestrian
vehicle
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2011510864A
Other languages
English (en)
Other versions
JP2011525005A (ja
Inventor
シユテフアン ヘーゲマン,
シユテフアン ヘーゲマン,
アキツグ ヨダ,
アキツグ ヨダ,
ロルフ アドマート,
ロルフ アドマート,
ミヒアエル ダルムス,
ミヒアエル ダルムス,
ラクシンチヤローンサク ポンサツトホルン,
ラクシンチヤローンサク ポンサツトホルン,
永井 正夫
正夫 永井
郁子 清水
郁子 清水
Original Assignee
アー・デー・ツェー・オートモーティブ・ディスタンス・コントロール・システムズ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from DE102008024707A external-priority patent/DE102008024707A1/de
Application filed by アー・デー・ツェー・オートモーティブ・ディスタンス・コントロール・システムズ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング filed Critical アー・デー・ツェー・オートモーティブ・ディスタンス・コントロール・システムズ・ゲゼルシャフト・ミト・ベシュレンクテル・ハフツング
Publication of JP2011525005A publication Critical patent/JP2011525005A/ja
Application granted granted Critical
Publication of JP5649568B2 publication Critical patent/JP5649568B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867Combination of radar systems with cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60TVEHICLE BRAKE CONTROL SYSTEMS OR PARTS THEREOF; BRAKE CONTROL SYSTEMS OR PARTS THEREOF, IN GENERAL; ARRANGEMENT OF BRAKING ELEMENTS ON VEHICLES IN GENERAL; PORTABLE DEVICES FOR PREVENTING UNWANTED MOVEMENT OF VEHICLES; VEHICLE MODIFICATIONS TO FACILITATE COOLING OF BRAKES
    • B60T7/00Brake-action initiating means
    • B60T7/12Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger
    • B60T7/22Brake-action initiating means for automatic initiation; for initiation not subject to will of driver or passenger initiated by contact of vehicle, e.g. bumper, with an external object, e.g. another vehicle, or by means of contactless obstacle detectors mounted on the vehicle
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/41Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
    • G01S7/415Identification of targets based on measurements of movement associated with the target
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/08Active safety systems predicting or avoiding probable or impending collision or attempting to minimise its consequences
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9316Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles combined with communication equipment with other vehicles or with base stations
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/93185Controlling the brakes
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9321Velocity regulation, e.g. cruise control
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/10Recognition assisted with metadata

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Electromagnetism (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、車両と歩行者との衝突を回避するのを助けかつ例えば自動車に用いられる運転者援助システムに関する。
統計的に見て、日本及びドイツにおいて、交通事故によるすべての死者の30%以上が歩行者である。歩行者の事故の高い危険は集落内にあることが、統計的に証明されている。
従来技術において、自動車と歩行者との衝突を防止するか又は歩行者の事故の結果を少なくとも軽減する運転者援助システムが公知である。よくわかっている手掛かりは、歩行者に関する特徴の確認により直接歩行者の存在を推論する。例えば歩行者は、カメラセンサ及び/又はレーダセンサの画像又は画像列において直接分類される。これらの運転者援助システムは、例えばビデオ画像カメラシステムによる歩行者の識別に基いている。しかし画像データから歩行者を識別するために、高い計算出力が必要である。
その代りに、歩行者識別のため熱画像カメラを使用することができる。この解決策の欠点は、熱画像カメラが非常に高価なことである。
歩行者の事故の多くは、歩行者の可能な存在を推論するのを助ける強い特徴が存在する周辺の個所に起こる。典型的な例は横断歩道又はゼブラゾーンを含んでいる。
ドイツ連邦共和国特許出願公開第1034173号明細書は、車両において横断歩道への接近を検出する装置を示し、この装置は接近を特徴づける信号を発生する。この場合横断歩道への接近は、位置測定装置(例えばGPS)又は周辺センサ装置(例えばビデオセンサ装置)で知ることができる。
ここに紹介される発明の課題は、従来技術から公知の解決策に比べて高い信頼度で歩行者との衝突を回避する安価な運転者援助システムを提示することである。
本発明によればこの課題は、独立請求項1に記載の運転者援助システム及び請求項11に記載の運転者援助システム用の装置によって解決される。有利な展開は従属請求項からわかる。
ここに説明される発明は、一歩先へ行き、歩行者の存在を間接に推論するため、通常歩行者の近くに見出される特徴も使用する。これらの特徴は一般に明確に求められており、計算上の見地から一層簡単に検出可能である。歩行者という概念は、この発明の範囲では車椅子常用者等も含んでいる。
例えば横断歩道又はゼブラゾーンを特定の速度で動く物体は、ある確率で、運転者に警報を出しかつそれにより可能性のある衝突を防止するのに十分な歩行者と解釈することができる。ゼブラゾーンは国の交通規則によって規定されている。動きは例えば放射センサ又は“光流れ(オプティカルフロー)”方法のように強固な手掛かりで検出することができる。
本発明の特別な実施形態は歩行者衝突警報システムを提供し、歩行者の存在についての情報が、車両カメラ及び放射センサ例えばミリ波レーダに基いて求められる。
このシステムの構想は、ゼブラゾーン又はその近くを動くすべての物体を歩行者と解釈することである。例えば車両カメラにより撮影される画像を評価するための画像処理アルゴリズムは、車両の前にあるゼブラゾーンの存在を検出するように設計されている。アルゴリズムにある特徴を抽出するために使用される技術は、例えばゼブラゾーンの縞の縁とゼブラゾーンの縞の周期性との二重関係に基づいている。
本発明の別の好ましい構成によれば、例えばミリ波レーダから検出されるゼブラゾーンの位置と動く物体の速度が、それから車両の前のゼブラゾーンに歩行者が存在することを推論するために重畳される。衝突の可能性があると、警報が運転者に出されるのがよい。合体されるセンサデータに基く警報は2段階で行うことができる。前にあるゼブラゾーンが確認されると、警報は黄色(第1段階)である。ゼブラゾーン又はその近くにある動く物体が発見されると、警報は赤(第2段階)である。
特にただしそれだけではないが、ここで紹介される解決策が直接分類のためのアルゴリズムと組合わされる場合、それにより全システムの強固さは高くなる。
それにより、好ましい実施形態では、例えば自動的な非常制動のような特定のシナリオにおける一層重要な介入が可能になる。
本発明の別の好ましい実施形態は、ゼブラゾーンを識別する別の可能性を規定する。ゼブラゾーン識別機能及び出力装置を持つ自動車用の歩行者保護のための運転者援助システムが提示される。車両がゼブラゾーンへ接近すると、出力装置が動作せしめられ、警報が出される。この警報は、特に車両速度に関係しても出すことができる。車両がゼブラゾーンへ接近するのが速すぎると、出力装置が動作せしめられる。
本発明の別の構成では、ゼブラゾーンへ接近する際自動車の速度が所定の閾値より上にあると、この速度が自動的に減少される。それにより車両がゆっくりゼブラゾーンへ接近するのを保証される。特に最初の警報後、運転者が所定の時間内に反応しないと、速度が減少される。有利な実施例では、車両の前のゼブラゾーンへ運転者の注意を向けるため、警報が光又は音で出される。
次にゼブラゾーンを識別する方法が説明される。
自動車にある周辺検出用カメラシステムによりゼブラゾーンが識別される。そのため縁選択方法又は色識別方法又はパターン認識方法又は類似の方法により車両の前のゼブラゾーンを識別する適当な画像処理アルゴリズムが、カメラシステムに記憶される。
本発明の別の有利な構成は、カメラに基く交通標識識別機能を意図し、識別機能がゼブラゾーンを示す交通標識を識別する。
本発明の有利な構成は、車両が電子カードを備えていることを意図する。電子カードはゼブラゾーンの位置を含み、車両の位置はなるべくナビゲーション装置例えばGPS受信機により決定される。
特に先行車両の走行方向におけるゼブラゾーンについての情報は、車両から車両への通信によって伝送される。
ゼブラゾーンを識別する前記の方法は、個々に又は互いに組合わせて本発明に寄与する。例えばゼブラゾーン識別は、ゼブラゾーンが前述した方法の2つ又はそれ以上の方法で識別されるように構成することができる。即ち電子カード又は交通標識識別により、大きい確率でゼブラゾーンが存在する区域が確認される。この推測は、車両の前の車道範囲にあるカメラシステムの画像データの分析によって証明されるか又は非とされる。
例えば人間又は歩行者の群れを識別しようとする時、歩行者との衝突を回避する従来技術の解決策は、難点を持っている。なぜならば、これらの群れは、学習した分類パターン(大きさ、体積、衣服、ポケット、自動車のような付属物等)とは相違するからである。
ここで紹介される解決策は利点を与える。なぜならば、それはこのような特徴を捜す必要がなく、ゼブラゾーンのように明確に規定された特徴を捜すからである。それにより、特に紹介された解決策が既にわかっているアルゴリズムを組合わされる時、あまり明らかでないシナリオで運転者援助システムに反応するのが可能になる。
周辺にある明確に規定された特徴の検出は、歩行者の直接識別と比較して計算に費用がかからない。それは安価なシステムに通じる。
1つの(カメラ)センサのみを持つ解決策に比べて、2つの独立したセンサを持つ本発明の展開は、運転者援助システムの一層高度の強さ及び一層少ない故障し易さを与える。両方のセンサは動く物体を検出でき、それにより歩行者識別を証明することができる。
ディジタルカードから又は先行車両からの情報とレーダデータとの組合わせは、悪い視界でもなお適切な警報を出すことができるという利点を与える。
実施例及び図により本発明が以下に説明される。
歩行者衝突警報システムの概略的な図表を示す。 歩行者の検出の結果に基くグラフ警報システムを示す。
歩行者衝突警報システムの構築の実施例が図1に示されている。カメラセンサ例えばCMOSセンサ又はCCDセンサは、車両周辺の画像列を撮影する。アルゴリズムにより、横断歩道について画像が検査される。横断歩道が識別されると、横断歩道の位置する範囲が、センサデータを合体するアルゴリズムへ伝送され、横断歩道の存在が警報アルゴリズムへ伝送される。
例えばミリ波レーダ又はライダのような放射センサが、車両周辺で動く物体を検出する。検出される物体から、位置及び(移動方向を含めて)速度がセンサデータ合体用アルゴリズムへ伝送される。このアルゴリズムは、今や検出された横断歩道の範囲を、物***置及び物体速度と重ねて、横断歩道の近くの物体データにする。これらのデータは警報アルゴリズムへ引渡される。警報アルゴリズムは受けたデータを評価し、歩行者との衝突の危険が存在すると、警報を運転者へ出す。警報は、図2a及び2bに示すように行うことができる。物体が歩行者にとって特有な速度で横断歩道の範囲を動くのをセンサアルゴリズムが確かめると、危険がある。図示したアーキテクチャの代わりに、1つのカメラセンサのみを持つ歩行者衝突警報システムを実現することができる。このため例えば“光流れ”方法で物体の動きを検出できるカメラデータ評価が必要である。その場合これらのデータは、図1に示すレーダセンサのデータの代わりをすることができ、それによりセンサデータ合体が著しく容易になる。カメラセンサとしえ図示したモノカメラの代わりに、ステレオカメラシステムの使用も可能である。この場合特に物体の大きさのように物体についての付加的なデータが得られ、それにより歩行者としての分類が容易になるか又は一層確実になる。
2段階視覚警報が図2a及び2bに示されている。図2aは、横断歩道が識別された状況を示す。運転者には、例えば黄色の警報レベルの形で第1の警報段階が表示される。しかも物体が横断歩道の範囲に近い側方にある。しかしこの物体は動かないので、考慮されない。
図2bは、再び横断歩道が識別され、横断歩道を動く物体が検出された状況を示す。この物体は動く歩行者と解釈される。運転者には、例えば赤色の警報レベルの形で第2の警報段階が表示される。運転者が警報に反応しないと、このような状況では、衝突を防止するか又はその結果を回避するために、自動的な非常制動を行うことができる。

Claims (9)

  1. 車両と歩行者との衝突を回避するための運転者援助システムであって、カメラセンサ及び放射センサを含んでいるものにおいて、
    横断歩道上を特定の速度で動く物体が検出されると、運転者に警報を出して衝突を防止するのに十分な高い確率で、この物体歩行者であると解釈され、カメラセンサが横断歩道を検出し、放射センサが物体の位置及び運動を検出し、カメラセンサ及び放射センサからのデータが重畳されて、物体が横断歩道上又はその近くを動いているか否かを検出することと、
    カメラデータから、ゼブラゾーンの縞の縁とゼブラゾーンの縞の周期性との二重関係により横断歩道が認識されることと、
    を特徴とする、運転者援助システム。
  2. カメラデータから、横断歩道を指示する交通標識により横断歩道が認識されることを特徴とする、請求項1に記載の運転者援助システム。
  3. カメラデータから、オプティカルフローの方法で物体の位置及び運動が認識されることを特徴とする、請求項1又は2記載の運転者援助システム。
  4. 横断歩道の位置を確かめるために、電子カードのデータが使用されることを特徴とする、請求項1〜の1つに記載の運転者援助システム。
  5. 横断歩道の位置が、車両から車両への通信により、先行車両の走行方向へ伝送されることを特徴とする、請求項1〜の1つに記載の運転者援助システム。
  6. カメラセンサ及び放射センサからのデータと、電子カードからのデータ及び先行車両により伝送されるデータの中の少なくとも一つとが重畳されて、物体が横断歩道上又はその近くを動いているか否かを検出することを特徴とする、請求項1〜の1つに記載の運転者援助システム。
  7. 更にカメラデータから歩行者の分類が行われることを特徴とする、請求項1〜の1つに記載の運転者援助システム。
  8. ゼブラゾーンへ接近する際自動車の速度が所定の閾値より上にあると、この速度が自動的に減少されることを特徴とする、請求項1〜の1つに記載の運転者援助システム。
  9. 運転者が警報に反応しない場合非常制動が行われることを特徴とする、請求項1〜の1つに記載の運転者援助システム。
JP2011510864A 2008-05-21 2009-05-14 車両と歩行者との衝突を回避するための運転者援助システム Active JP5649568B2 (ja)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
DE102008024707.3 2008-05-21
DE102008024707A DE102008024707A1 (de) 2008-05-21 2008-05-21 Fahrerassistenzsystem zum Fußgängerschutz
EP08015394.3 2008-09-01
EP08015394 2008-09-01
PCT/EP2009/003427 WO2009141092A1 (de) 2008-05-21 2009-05-14 Fahrerassistenzsystem zur vermeidung von kollisionen eines fahrzeugs mit fussgängern

Publications (2)

Publication Number Publication Date
JP2011525005A JP2011525005A (ja) 2011-09-08
JP5649568B2 true JP5649568B2 (ja) 2015-01-07

Family

ID=40901775

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2011510864A Active JP5649568B2 (ja) 2008-05-21 2009-05-14 車両と歩行者との衝突を回避するための運転者援助システム

Country Status (4)

Country Link
US (1) US9239380B2 (ja)
EP (1) EP2291836B1 (ja)
JP (1) JP5649568B2 (ja)
WO (1) WO2009141092A1 (ja)

Families Citing this family (59)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5269755B2 (ja) 2009-12-10 2013-08-21 株式会社日立製作所 人横断支援車両システム及び人横断支援方法
DE102012000724A1 (de) * 2011-06-29 2013-01-03 Volkswagen Ag Verfahren und Vorrichtung zum teilautomatisierten Fahren eines Kraftfahrzeugs
US9235766B2 (en) 2011-10-20 2016-01-12 International Business Machines Corporation Optimizing the detection of objects in images
DE102011120501B4 (de) * 2011-12-07 2013-10-24 Audi Ag Mobilkommunikationsgerät mit einem Mittel zum Erfassen und/oder Detektieren von Bewegungsdaten und zugehöriges Verfahren
US9041589B2 (en) * 2012-04-04 2015-05-26 Caterpillar Inc. Systems and methods for determining a radar device coverage region
CN104040606B (zh) * 2012-07-10 2015-08-26 本田技研工业株式会社 故障判定装置
JP6160041B2 (ja) * 2012-08-27 2017-07-12 日産自動車株式会社 車両用走行制御装置及び方法
AT513354A1 (de) * 2012-08-28 2014-03-15 Andata Entwicklungstechnologie Gmbh Verfahren zur Kollisionsvermeidung
US9196164B1 (en) * 2012-09-27 2015-11-24 Google Inc. Pedestrian notifications
CN103832433B (zh) * 2012-11-21 2016-08-10 中国科学院沈阳计算技术研究所有限公司 车道偏离及前车防碰撞报警***及其实现方法
US9052393B2 (en) 2013-01-18 2015-06-09 Caterpillar Inc. Object recognition system having radar and camera input
US9167214B2 (en) 2013-01-18 2015-10-20 Caterpillar Inc. Image processing system using unified images
JP6054777B2 (ja) 2013-03-01 2016-12-27 日立オートモティブシステムズ株式会社 ステレオカメラ装置
JP2015063216A (ja) * 2013-09-25 2015-04-09 日産自動車株式会社 回避制御装置
EP2883756B1 (en) 2013-12-12 2019-11-06 Volvo Car Corporation Safety system and method for operating a safety system of a vehicle
EP2883757B1 (en) * 2013-12-12 2018-05-16 Volvo Car Corporation Method for setting a collision protection system of a vehicle
JP5991332B2 (ja) * 2014-02-05 2016-09-14 トヨタ自動車株式会社 衝突回避制御装置
EP3108264A2 (en) * 2014-02-20 2016-12-28 Mobileye Vision Technologies Ltd. Advanced driver assistance system based on radar-cued visual imaging
DE102014207802B3 (de) 2014-04-25 2015-10-29 Bayerische Motoren Werke Aktiengesellschaft Verfahren und System zum proaktiven Erkennen einer Aktion eines Verkehrsteilnehmers
JP6663547B2 (ja) * 2014-06-30 2020-03-13 Case特許株式会社 車両制御装置
WO2016014548A1 (en) * 2014-07-25 2016-01-28 Robert Bosch Gmbh Method for mitigating radar sensor limitations with video camera input for active braking for pedestrians
US9610893B2 (en) 2015-03-18 2017-04-04 Car1St Technologies, Llc Methods and systems for providing alerts to a driver of a vehicle via condition detection and wireless communications
US10328855B2 (en) 2015-03-18 2019-06-25 Uber Technologies, Inc. Methods and systems for providing alerts to a connected vehicle driver and/or a passenger via condition detection and wireless communications
US9718405B1 (en) * 2015-03-23 2017-08-01 Rosco, Inc. Collision avoidance and/or pedestrian detection system
SE539221C2 (en) * 2015-06-04 2017-05-23 Scania Cv Ab Method and control unit for avoiding an accident at a crosswalk
DE102015214986A1 (de) 2015-08-06 2017-02-09 Conti Temic Microelectronic Gmbh Verfahren zur Unterstützung eines Fahrers eines Fahrzeugs zur Vermeidung von Unfällen mit Fußgängern
DE102015010270B4 (de) 2015-08-08 2021-10-28 Audi Ag Verfahren zum Betrieb von Fahrerassistenzsystemen in einem Kraftfahrzeug und Kraftfahrzeug
SE539097C2 (en) * 2015-08-20 2017-04-11 Scania Cv Ab Method, control unit and system for avoiding collision with vulnerable road users
CN105629785A (zh) * 2015-12-30 2016-06-01 小米科技有限责任公司 智能汽车行驶控制方法及装置
US9764741B2 (en) * 2016-01-27 2017-09-19 Delphi Technologies, Inc. Operator skill scoring based on comparison to automated vehicle operation
US10705530B2 (en) * 2016-01-29 2020-07-07 Nissan Motor Co., Ltd. Vehicle travel control method and vehicle travel control device
EP3519268A4 (en) * 2016-10-31 2020-07-29 Delphi Technologies, Inc. DRIVING ASSISTANCE SYSTEM
US10196058B2 (en) 2016-11-28 2019-02-05 drive.ai Inc. Method for influencing entities at a roadway intersection
US10261513B2 (en) 2016-12-19 2019-04-16 drive.ai Inc. Methods for communicating state, intent, and context of an autonomous vehicle
JP6465318B2 (ja) 2017-03-10 2019-02-06 株式会社Subaru 画像表示装置
JP6497818B2 (ja) 2017-03-10 2019-04-10 株式会社Subaru 画像表示装置
JP6593803B2 (ja) 2017-03-10 2019-10-23 株式会社Subaru 画像表示装置
JP6497819B2 (ja) 2017-03-10 2019-04-10 株式会社Subaru 画像表示装置
JP6515125B2 (ja) 2017-03-10 2019-05-15 株式会社Subaru 画像表示装置
JP6429413B2 (ja) * 2017-03-10 2018-11-28 株式会社Subaru 画像表示装置
JP6465317B2 (ja) 2017-03-10 2019-02-06 株式会社Subaru 画像表示装置
EP3409552A1 (en) * 2017-05-31 2018-12-05 Continental Automotive GmbH Driver assistance system, vehicle and method of providing driver assistance
EP3467545A1 (en) 2017-10-05 2019-04-10 Veoneer Sweden AB Object classification
US10598764B2 (en) * 2017-10-30 2020-03-24 Yekutiel Josefsberg Radar target detection and imaging system for autonomous vehicles with ultra-low phase noise frequency synthesizer
US11282389B2 (en) 2018-02-20 2022-03-22 Nortek Security & Control Llc Pedestrian detection for vehicle driving assistance
KR102494865B1 (ko) * 2018-02-20 2023-02-02 현대자동차주식회사 차량 및 그 제어 방법
GB2572601B (en) * 2018-04-05 2020-07-22 Ford Global Tech Llc A collision avoidance system and method
US20200001779A1 (en) 2018-06-27 2020-01-02 drive.ai Inc. Method for communicating intent of an autonomous vehicle
DE102018212655A1 (de) 2018-07-30 2020-01-30 Conti Temic Microelectronic Gmbh Erkennung der Bewegungsabsicht eines Fußgängers aus Kamerabildern
US11665184B2 (en) * 2019-01-17 2023-05-30 International Business Machines Corporation Detecting and mitigating risk in a transport network
US11798291B2 (en) 2019-05-30 2023-10-24 Robert Bosch Gmbh Redundancy information for object interface for highly and fully automated driving
CN110210451B (zh) * 2019-06-13 2022-07-08 重庆邮电大学 一种斑马线检测方法
US11738746B2 (en) 2019-06-19 2023-08-29 Ted JEWELL Lifeform transmission system for collision avoidance
JP7140077B2 (ja) * 2019-09-02 2022-09-21 トヨタ自動車株式会社 衝突回避支援装置
US11614739B2 (en) 2019-09-24 2023-03-28 Apple Inc. Systems and methods for hedging for different gaps in an interaction zone
KR102276393B1 (ko) * 2019-12-06 2021-07-13 주식회사 현대케피코 전방 충돌 방지를 위한 차량제어시스템
CN112339684B (zh) * 2020-10-27 2021-12-24 广州汽车集团股份有限公司 一种基于概率分布的汽车安全机制触发方法及装置
CN113335216B (zh) * 2021-07-08 2022-07-22 桂林电子科技大学 一种重型卡车轻量化前下部防护横梁
CN114627659B (zh) * 2022-05-13 2023-06-16 青岛图灵科技有限公司 基于行人视频分析的安全过街智能控制***的控制方法

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA1328128C (en) * 1988-11-24 1994-03-29 Otto Barke Pedestrian signal system signal for automobiles
US5265172A (en) * 1989-10-13 1993-11-23 Texas Instruments Incorporated Method and apparatus for producing optical flow using multi-spectral images
JPH05155291A (ja) 1991-12-03 1993-06-22 Mitsubishi Electric Corp 車両用警報装置
US5825413A (en) * 1995-11-01 1998-10-20 Thomson Consumer Electronics, Inc. Infrared surveillance system with controlled video recording
JP3619628B2 (ja) * 1996-12-19 2005-02-09 株式会社日立製作所 走行環境認識装置
JPH10247297A (ja) * 1997-03-04 1998-09-14 Nippon Signal Co Ltd:The 歩行者検出装置
JP3617307B2 (ja) * 1998-04-20 2005-02-02 日産自動車株式会社 車両用照明装置
JP3174832B2 (ja) * 1999-10-27 2001-06-11 建設省土木研究所長 横断歩行者衝突防止システム
JP2001351200A (ja) * 2000-06-09 2001-12-21 Nissan Motor Co Ltd 車載用物体検知装置
WO2002013162A1 (en) 2000-08-04 2002-02-14 Schrage Martin H Audible communication system
US6771208B2 (en) * 2002-04-24 2004-08-03 Medius, Inc. Multi-sensor system
US6956469B2 (en) * 2003-06-13 2005-10-18 Sarnoff Corporation Method and apparatus for pedestrian detection
JP4364566B2 (ja) 2003-07-04 2009-11-18 富士重工業株式会社 車両制動装置
DE102004040399A1 (de) * 2003-08-26 2005-03-24 Volkswagen Ag Türsystem für ein Kraftfahrzeug
DE10341753A1 (de) 2003-09-10 2005-04-21 Bosch Gmbh Robert Vorrichtung zur Detektion einer Annäherung an einem Fußgängerüberweg in einem Fahrzeug
JP4269862B2 (ja) * 2003-09-17 2009-05-27 株式会社デンソー 車載用移動体検出装置
DE10343683A1 (de) * 2003-09-20 2005-04-21 Daimler Chrysler Ag Informationssystem für Kraftfahrzeuge
US20050128063A1 (en) * 2003-11-28 2005-06-16 Denso Corporation Vehicle driving assisting apparatus
JP2005309797A (ja) * 2004-04-22 2005-11-04 Nissan Motor Co Ltd 歩行者警報装置
JP2006072830A (ja) * 2004-09-03 2006-03-16 Aisin Aw Co Ltd 運転支援システム及び運転支援モジュール
JP4650079B2 (ja) 2004-11-30 2011-03-16 日産自動車株式会社 物体検出装置、および方法
US7771208B2 (en) * 2004-12-16 2010-08-10 International Business Machines Corporation Metalized elastomeric electrical contacts
JP4568637B2 (ja) * 2005-04-26 2010-10-27 富士重工業株式会社 道路認識装置
JP4822766B2 (ja) * 2005-08-18 2011-11-24 富士通株式会社 路面標示認識装置及びシステム
JP2007122536A (ja) 2005-10-31 2007-05-17 Denso Corp 車両用障害物通知装置
JP2006134339A (ja) * 2005-11-08 2006-05-25 Sumitomo Electric Ind Ltd 識別方法、識別装置、及び交通制御システム
JP2007188417A (ja) 2006-01-16 2007-07-26 Fujitsu Ten Ltd 画像認識装置、画像認識方法および画像認識プログラム
ATE509296T1 (de) * 2006-03-09 2011-05-15 Gentex Corp Fahrzeugrückspiegelanordnung mit anzeige von hoher intensität
JP2007257148A (ja) * 2006-03-22 2007-10-04 Nissan Motor Co Ltd 画像処理装置及び方法
JP4797794B2 (ja) * 2006-05-24 2011-10-19 日産自動車株式会社 歩行者検出装置および歩行者検出方法
JP4654163B2 (ja) 2006-07-14 2011-03-16 日立オートモティブシステムズ株式会社 車両の周囲環境認識装置及びシステム
US8085140B2 (en) * 2006-09-04 2011-12-27 Panasonic Corporation Travel information providing device
JP4743277B2 (ja) * 2006-11-28 2011-08-10 富士通株式会社 画像データ認識方法、画像処理装置および画像データ認識プログラム
JP4745403B2 (ja) 2006-12-19 2011-08-10 パイオニア株式会社 情報処理装置及びその制御方法等
JP4862774B2 (ja) * 2006-12-20 2012-01-25 アイシン・エィ・ダブリュ株式会社 運転支援方法及び運転支援装置
US8155826B2 (en) * 2007-03-30 2012-04-10 Aisin Aw Co., Ltd. Vehicle behavior learning apparatuses, methods, and programs
JP5004865B2 (ja) * 2008-05-08 2012-08-22 日立オートモティブシステムズ株式会社 自動車用障害物検知装置

Also Published As

Publication number Publication date
WO2009141092A1 (de) 2009-11-26
EP2291836A1 (de) 2011-03-09
JP2011525005A (ja) 2011-09-08
US20110184617A1 (en) 2011-07-28
EP2291836B1 (de) 2018-09-12
US9239380B2 (en) 2016-01-19

Similar Documents

Publication Publication Date Title
JP5649568B2 (ja) 車両と歩行者との衝突を回避するための運転者援助システム
US11972615B2 (en) Vehicular control system
US10186147B2 (en) Wrong-way determination apparatus
CN109478324B (zh) 图像处理装置、外界识别装置
JP5345350B2 (ja) 車両の運転支援装置
JP4935795B2 (ja) 歩行者飛び出し予測装置及びプログラム
KR102020340B1 (ko) 라이다를 이용한 교차로 운행 및 보행 안전 모니터링 시스템
JP6168025B2 (ja) 車両用交差点関連警報装置
KR101875922B1 (ko) Aeb 시스템을 제어하기 위한 장치 및 그 방법
JP5751423B2 (ja) 運転支援装置
JP2005309797A (ja) 歩行者警報装置
KR20130021990A (ko) 차량의 보행자 충돌 경보 시스템 및 그 방법
US10747230B2 (en) Vehicle control apparatus, vehicle control system, and image sensor
KR20190090221A (ko) 지능형 안전 장치
JP4762830B2 (ja) 周辺監視システム
JP4872517B2 (ja) 障害物認識装置
US20190111918A1 (en) Vehicle system with safety features
KR20100074413A (ko) 모노 카메라를 이용한 보행자 인식 시스템 및 그 제어방법
KR102560094B1 (ko) 보행자 보호를 위한 횡단보도 cctv 카메라 시스템
JP6681044B2 (ja) 逆走検知システム
CN115273545A (zh) 用于辅路行车场景的安全预警的方法和设备
CN112840349A (zh) 标志识别装置
KR20150042479A (ko) 후방 센서를 이용한 상대 속도에 따른 후방 경보 장치 및 그 방법

Legal Events

Date Code Title Description
A072 Dismissal of procedure [no reply to invitation to correct request for examination]

Free format text: JAPANESE INTERMEDIATE CODE: A072

Effective date: 20110802

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120315

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130528

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130531

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130822

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130919

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20131119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140204

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140414

RD03 Notification of appointment of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7423

Effective date: 20140414

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20140421

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140724

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20141105

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20141111

R150 Certificate of patent or registration of utility model

Ref document number: 5649568

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250