JPH10157538A - Method for determining initial search range of preceding vehicle - Google Patents

Method for determining initial search range of preceding vehicle

Info

Publication number
JPH10157538A
JPH10157538A JP31956496A JP31956496A JPH10157538A JP H10157538 A JPH10157538 A JP H10157538A JP 31956496 A JP31956496 A JP 31956496A JP 31956496 A JP31956496 A JP 31956496A JP H10157538 A JPH10157538 A JP H10157538A
Authority
JP
Japan
Prior art keywords
vehicle
image
initial search
search range
screen
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP31956496A
Other languages
Japanese (ja)
Inventor
Satoshi Terakubo
敏 寺久保
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sumitomo Electric Industries Ltd
Original Assignee
Sumitomo Electric Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sumitomo Electric Industries Ltd filed Critical Sumitomo Electric Industries Ltd
Priority to JP31956496A priority Critical patent/JPH10157538A/en
Publication of JPH10157538A publication Critical patent/JPH10157538A/en
Pending legal-status Critical Current

Links

Landscapes

  • Traffic Control Systems (AREA)
  • Controls For Constant Speed Travelling (AREA)
  • Image Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

PROBLEM TO BE SOLVED: To process image recognition in a short time by detecting the point where the concentration of the image is rapidly changed for the first time from a lower part to an upper part along a plurality of lines to split the photographed screen by an on-board camera in the longitudinal direction. SOLUTION: An edge of a point where the concentration of the image is rapidly changed for the first time from a lower part to an upper part from the left end to the right end of the image photographed by an on-board camera is detected, a margin (p) is taken on the left side of the edge, and another margin (p) is taken advancing by the vehicle width W on the right side, and the range of a recessed part to be present by connecting the obtained diagonal points is specified, and the initial search range E in which the image of a preceding vehicle to recognize the range is contained, is determined. The initial search range high in the probability of containing the image of the preceding vehicle to be recognized can be cut out in a short processing time.

Description

【発明の詳細な説明】DETAILED DESCRIPTION OF THE INVENTION

【0001】[0001]

【発明の属する技術分野】本発明は、車載カメラで車両
の前方を撮像し、撮像された画像に基づいて先行車両の
初期探索範囲の決定する方法に関するものである。
[0001] 1. Field of the Invention [0002] The present invention relates to a method for taking an image of the front of a vehicle with a vehicle-mounted camera and determining an initial search range for a preceding vehicle based on the taken image.

【0002】[0002]

【従来の技術】車載カメラによって車両の前方を撮像
し、撮像された画像中の車両を認識するための技術が種
々提案されている。車両の前方を車載カメラで撮像し、
撮像された画像を画像処理して前方の車両を認識するこ
とができれば、他車両が異常接近したときには、ステア
リングやブレーキを自動的に動作させることによって、
自動的に事故を回避できる。また、道路標識を認識する
ことができれば、この認識された道路標識に対応する情
報を、ナビゲーション装置における経路誘導のために用
いることができる。
2. Description of the Related Art Various techniques have been proposed for capturing an image of the front of a vehicle using a vehicle-mounted camera and recognizing the vehicle in the captured image. Image the front of the vehicle with the onboard camera,
By processing the captured image and recognizing the vehicle in front, when another vehicle approaches abnormally, by automatically operating the steering and brakes,
You can avoid accidents automatically. If the road sign can be recognized, the information corresponding to the recognized road sign can be used for route guidance in the navigation device.

【0003】車載カメラによって撮像される車両を画像
認識する場合、撮像された画面から車両を含む画像範囲
を探索し、この探索された範囲に関して画像認識処理を
行う必要がある。前記の画像認識処理において、車両を
含む画像を探索する範囲を決める状況として、次の2つ
がある。
In order to recognize an image of a vehicle captured by an on-board camera, it is necessary to search an image range including the vehicle from the captured screen and perform image recognition processing on the searched range. In the image recognition processing described above, there are two situations in which a range for searching for an image including a vehicle is determined.

【0004】1つの状況は、1つ前の時点ですでに車両
が画像認識されている場合に、画面中において刻々と移
動していく車両を追従するために、画面中における車両
の挙動を推定し、この推定結果を利用して、撮像された
画面から車両を含む追従探索範囲を設定するものであ
る。他の状況は、初めて車両を画像認識しようとする場
合、又は1つ前の時点で車両を見失った場合に、画面中
における先行車両を含む初期探索範囲を決定するもので
ある。
[0004] One situation is that when a vehicle is already image-recognized at the immediately preceding time, the behavior of the vehicle on the screen is estimated in order to follow the vehicle that moves every moment on the screen. Then, using this estimation result, a following search range including the vehicle is set from the imaged screen. Another situation is to determine the initial search range including the preceding vehicle on the screen when trying to recognize the image of the vehicle for the first time or when the vehicle is lost just before.

【0005】本発明は、後者の先行車両の初期探索範囲
の決定方法に関する。
The present invention relates to the latter method for determining an initial search range of a preceding vehicle.

【0006】[0006]

【発明が解決しようとする課題】初期探索範囲を決定す
る場合、車両の位置が分からないのであるから、撮像画
面の全てにわたって設定し、その中で車両を画像認識す
るということが考えられる。しかし、これでは、画像認
識する範囲が広すぎて、画像認識に時間がかかるという
問題がある。例えば、画像認識方法として、画面の縦方
向、横方向にエッジヒストグラムをとってエッジの多い
枠に囲まれた矩形領域を設定するという方法を採用した
場合、ヒストグラムをとる領域が広ければ広いほど、時
間がかかり、誤検知の確率も高くなる。
When the initial search range is determined, since the position of the vehicle is not known, it is conceivable that the vehicle is set over the entire image-capturing screen and the vehicle is image-recognized therein. However, this has a problem that the range of image recognition is too wide, and it takes time for image recognition. For example, as a method for recognizing an image, when adopting a method of taking an edge histogram in the vertical and horizontal directions of the screen and setting a rectangular area surrounded by a frame with many edges, the wider the area for taking the histogram is, the larger the area becomes. It takes time and the probability of erroneous detection increases.

【0007】一方、初期探索範囲の決定の精度を上げす
ぎると、決定自体に時間がかかり、画像認識を含めた全
体としての処理が遅れる。そこで、本発明は、上述の技
術的課題を解決し、車両の存在領域を簡単な手法であら
かじめ推定することにより、初期探索範囲を決定するこ
とのできる先行車両の初期探索範囲の決定方法を提供す
ることを目的とする。
On the other hand, if the accuracy of the determination of the initial search range is too high, the determination itself takes time, and the overall processing including image recognition is delayed. Therefore, the present invention provides a method for determining an initial search range of a preceding vehicle that can solve the above-described technical problem and can determine an initial search range by estimating a vehicle existence region in advance by a simple method. The purpose is to do.

【0008】[0008]

【課題を解決するための手段】本発明の初期探索範囲の
決定方法は、車載カメラによって車両の周辺を撮像し、
前記車載カメラで撮像された画面を縦割りする複数のラ
インのうち、それぞれのラインに沿って下方から上方に
向かって画像の濃度が初めて急激に変わる点を検出し、
検出された点をつないだ線に現れる凹状の部分を含む範
囲を特定し、当該範囲を認識対象の先行車両の画像が含
まれる初期探索範囲とする方法である(請求項1)。
According to a method of determining an initial search range according to the present invention, an area around a vehicle is imaged by a vehicle-mounted camera.
Among a plurality of lines vertically dividing the screen imaged by the on-board camera, a point where the density of the image suddenly changes from the bottom to the top along each line for the first time is detected,
In this method, a range including a concave portion appearing on a line connecting the detected points is specified, and the range is set as an initial search range including an image of a preceding vehicle to be recognized (claim 1).

【0009】車両は道路の上を走行しているので、車両
の影は画像の中にできる。それより手前は変化の少ない
道路の部分である。したがって、画面の下方から上方に
向かって画像の濃度が初めて急激に変わる点(エッジ)
を検出すれば、そのうちのいずれかは車両の影のエッジ
である可能性がある。そこで、「凹状の部分」を見つけ
ることができれば、それは車両の底の影の形状に相当す
る可能性が高い。
Since the vehicle is traveling on a road, a shadow of the vehicle is formed in the image. Before that is the part of the road where there is little change. Therefore, the point (edge) where the density of the image suddenly changes from the bottom to the top of the screen for the first time
Are detected, one of them may be the edge of the shadow of the vehicle. Therefore, if a "concave portion" can be found, it is highly likely that it corresponds to the shape of the shadow on the bottom of the vehicle.

【0010】したがって、この発明の方法により、認識
対象の先行車両の画像が含まれる初期探索範囲を切り出
すことができる。そしてその中で車両を画像認識すれば
よい。なお、前記「凹状の部分」の判断は、「検出され
た点をつないだ線」が所定画素数よりも深く落ち込み、
その後、画面上の車両幅Wにわたって所定画素数以内の
平坦を維持することに基づいて行うことができる。
Therefore, according to the method of the present invention, the initial search range including the image of the preceding vehicle to be recognized can be cut out. Then, the vehicle may be image-recognized. Note that the determination of the “concave portion” is that the “line connecting the detected points” falls deeper than a predetermined number of pixels,
Thereafter, it can be performed based on maintaining flatness within a predetermined number of pixels over the vehicle width W on the screen.

【0011】前記画面上の車両幅Wは、道路消失点の位
置を画面上の一定の位置に設定して、画面上の車線幅D
と、実際の車両幅と実際の車線幅との比βとに基づいて
決定することができる。前記「凹状の部分を含む範囲」
とは、例えば、画面上の車両幅Wに車両の縦横比αをか
け、上下左右にマージンを加えて作った矩形状の範囲で
ある。
The vehicle width W on the screen is obtained by setting the position of the vanishing point of the road at a fixed position on the screen, and setting the lane width D on the screen.
And the ratio β between the actual vehicle width and the actual lane width. The "range including the concave portion"
Is, for example, a rectangular range formed by multiplying the vehicle width W on the screen by the aspect ratio α of the vehicle and adding a margin to the top, bottom, left and right.

【0012】[0012]

【発明の実施の形態】以下、本発明の実施の形態を、添
付図面を参照しながら詳細に説明する。図1は、画像認
識処理装置1を含む車載装置の電気的構成を示すブロッ
ク図である。この画像認識処理装置1は、車両の周辺の
物体を画像認識するための画像認識処理部1bを備えて
いる。この画像認識処理部1bには、車両の現在位置や
姿勢及びドライバに対する警告等を表示装置に表示する
ためのデータ処理装置2が接続されている。
Embodiments of the present invention will be described below in detail with reference to the accompanying drawings. FIG. 1 is a block diagram showing an electrical configuration of the vehicle-mounted device including the image recognition processing device 1. The image recognition processing device 1 includes an image recognition processing unit 1b for performing image recognition of an object around a vehicle. The image recognition processing unit 1b is connected to a data processing device 2 for displaying a current position and posture of the vehicle, a warning to a driver, and the like on a display device.

【0013】また、画像認識処理装置1は、車両の例え
ば前方部や車室内に取り付けられた車両の前方を撮像す
る車載カメラ1aを備えている。車載カメラ1aのほか
に、又は車載カメラ1aに代えて、車両の後方や車両の
側方を撮像できる別の車載カメラが備えられていてもよ
い。車載カメラ1aは、撮像した画面の各点をカラー表
現したアナログ電気信号を出力する。このアナログ信号
は、画像認識処理部1bにおいて、アナログ/ディジタ
ル変換等の処理をされて、画像データに変換される。画
像認識処理部1bは、この画像データを解析して先行車
両を検出し、その情報をデータ処理装置2に与える。
Further, the image recognition processing device 1 includes an in-vehicle camera 1a for capturing an image of the front of the vehicle, for example, mounted in a front part of the vehicle or in a vehicle compartment. In addition to the vehicle-mounted camera 1a or in place of the vehicle-mounted camera 1a, another vehicle-mounted camera that can image the rear of the vehicle or the side of the vehicle may be provided. The in-vehicle camera 1a outputs an analog electric signal representing each point of the captured screen in color. This analog signal is subjected to processing such as analog / digital conversion in the image recognition processing section 1b, and is converted into image data. The image recognition processing unit 1b analyzes the image data to detect a preceding vehicle, and provides the information to the data processing device 2.

【0014】データ処理装置2には、車両の走行距離を
検出するための車輪速センサ6及び車両の進行方位を検
出するための方位センサ(光ファイバジャイロ)5が接
続されている。これらのセンサ6及び5の出力は、デー
タ処理装置2において処理されることにより、走行距離
データ及び現在方位データに変換される。また、データ
処理装置2には、道路に埋め込まれた磁気マーカの磁界
を検出する磁気センサ4、前方物体に光線を当ててその
反射光の戻る時間に基づいて前方物体との距離を測定す
るレーザレーダ3、ビーコン受信機12、他の車両との
間で車両の現在位置、車間距離等の走行情報のやりとり
を行う送受信機13が接続されている。
The data processing device 2 is connected to a wheel speed sensor 6 for detecting the traveling distance of the vehicle and a direction sensor (optical fiber gyro) 5 for detecting the traveling direction of the vehicle. The outputs of these sensors 6 and 5 are processed by the data processing device 2 to be converted into travel distance data and current direction data. The data processing device 2 includes a magnetic sensor 4 for detecting a magnetic field of a magnetic marker embedded in a road, and a laser for irradiating a light beam on a forward object and measuring a distance to the forward object based on a return time of the reflected light. A radar 3, a beacon receiver 12, and a transceiver 13 for exchanging travel information such as the current position of the vehicle and the inter-vehicle distance with other vehicles are connected.

【0015】磁気マーカを検出することにより、車両の
車線内での横変位を知ることができ(1994年9月13日米
国特許第 5,347,456号、1992年5月14日PCT国際公開
WO92/08176 号参照)、レーザレーダ3で前方物体と
の距離を測定することができる(青野,真保,早舷「走
行環境認識技術の動向」自動車技術Vol.48, No.9, 第54
-59 頁, 1994参照)。
By detecting the magnetic marker, the lateral displacement of the vehicle in the lane can be known (US Pat. No. 5,347,456, Sep. 13, 1994; PCT International Publication WO 92/08176, May 14, 1992). ), And the distance to the object ahead can be measured by the laser radar 3 (Aono, Maho, Starboard "Trends in Driving Environment Recognition Technology" Automotive Technology Vol. 48, No. 9, No. 54
-59, 1994).

【0016】これらのデータが、マイクロコンピュータ
等を内部に含むデータ処理装置2に入力され、データ処
理装置2は、各種センサ3〜6及び画像認識処理部1b
から入力されるデータに基づいて、車両の現在位置を算
出するとともに、車間距離、先行車両位置、前方道路形
状、車線内自車位置等を算出することができる。データ
処理装置2には、ブレーキを制御するブレーキECU(E
CU:ElectronicControl Unit) 9、アクセルを制御する
アクセルECU10、ステアリングを制御するステアリ
ングECU11、CRT(陰極線管)又は液晶表示パネ
ルからなる表示装置7、リモートコントロールユニット
8が接続されている。
These data are input to a data processing device 2 including a microcomputer and the like, and the data processing device 2 includes various sensors 3 to 6 and an image recognition processing unit 1b.
The current position of the vehicle is calculated based on the data input from the vehicle, and the following distance, the position of the preceding vehicle, the shape of the road ahead, the position of the own vehicle in the lane, and the like can be calculated. The data processing device 2 includes a brake ECU (E
A CU (Electronic Control Unit) 9, an accelerator ECU 10 for controlling the accelerator, a steering ECU 11 for controlling the steering, a display device 7 comprising a CRT (cathode ray tube) or a liquid crystal display panel, and a remote control unit 8 are connected.

【0017】データ処理装置2は、前述した各種情報に
基づきブレーキECU9、アクセルECU10又はステ
アリングECU11を駆動して自動運転を実現する。ま
た、ドライバに注意を促すために、この先の道路形状、
スピードの出し過ぎ、車間距離、道路標識、交通規制、
事故、工事情報等を表示装置7を介して表示する。次
に、画像認識処理装置1の処理内容をさらに説明する。
The data processor 2 drives the brake ECU 9, the accelerator ECU 10, or the steering ECU 11 based on the various information described above to realize automatic driving. Also, in order to alert the driver, the road shape ahead,
Too fast, inter-vehicle distances, road signs, traffic regulations,
Accident, construction information, etc. are displayed via the display device 7. Next, the processing contents of the image recognition processing device 1 will be further described.

【0018】図2は、画像認識処理部1bの処理内容を
概説するフローチャートである。画像認識処理部1b
は、初めて車両を画像認識しようとする場合、又は1つ
前の時点で車両を見失った場合に、画面中における先行
車両を含む初期探索範囲を決定する(ステップS1)。
そして初期探索範囲の中で、車両を特定する(ステップ
S2)。この車両の特定は、例えば、画面の縦方向、横
方向にエッジヒストグラムをとってエッジの多い枠に囲
まれた矩形領域を設定し、この矩形領域の縦横比αが車
両に相応しいかどうかを判定するという方法を採用して
もよく、また、テンプレートを物体の輪郭に重ね合わせ
て車両を判定するという方法でもよい(特開平7−16
2846号公報参照)。
FIG. 2 is a flowchart outlining the processing contents of the image recognition processing section 1b. Image recognition processing unit 1b
Determines the initial search range including the preceding vehicle on the screen when image recognition of the vehicle is attempted for the first time or when the vehicle is lost just before the current time (step S1).
Then, the vehicle is specified in the initial search range (step S2). This vehicle is specified by, for example, setting a rectangular area surrounded by a frame having many edges by taking edge histograms in the vertical and horizontal directions of the screen, and determining whether the aspect ratio α of the rectangular area is suitable for the vehicle. Or a method of determining a vehicle by superimposing a template on the contour of an object (Japanese Patent Laid-Open No. 7-16).
No. 2846).

【0019】車両の特定に成功したら(ステップS
3)、レーザレーダ3等を用いて当該車両の位置及び速
度測定、車間距離測定等を行うとともに、当該車両を追
従する(ステップS4)。この追従は、当該車両の車両
位置、当該車両と自車両との相対速度、自車両の車両位
置とカメラの姿勢(ピッチ角、ヨー角、ロール角)に基
づいて、次に当該車両が存在すると予測される車両の存
在範囲より少し大きめの範囲をとり、ステップS2に戻
って車両の特定をすることにより行う(特開平7−16
2846号公報参照)。
If the vehicle is successfully identified (step S
3) Using the laser radar 3 or the like, measure the position and speed of the vehicle, measure the distance between vehicles, and follow the vehicle (step S4). This tracking is based on the vehicle position of the vehicle, the relative speed between the vehicle and the own vehicle, the vehicle position of the own vehicle, and the attitude of the camera (pitch angle, yaw angle, roll angle), and then determines that the vehicle is present. This is performed by setting a range slightly larger than the predicted existence range of the vehicle and returning to step S2 to specify the vehicle.
No. 2846).

【0020】次に本発明に係る初期探索範囲の決定方法
を詳述する。まず、図3に示すように、画像の左端から
右端まで、下方から上方に向かって、画像の濃度が急激
に変わる点(エッジ)を調べる。エッジが初めて現れた
ところで終了し次のラインに行く。下方から上方に向か
ってエッジを調べるのは、先行車両が道路の上を走行し
ているからである。画面の左辺からの位置をxとし、画
面の下辺からのエッジの高さをh(x) とする。
Next, a method for determining the initial search range according to the present invention will be described in detail. First, as shown in FIG. 3, from the left end to the right end of the image, a point (edge) at which the density of the image rapidly changes from below to above is examined. It ends when the edge first appears and goes to the next line. The reason for examining the edge from below to above is that the preceding vehicle is traveling on the road. The position from the left side of the screen is x, and the height of the edge from the lower side of the screen is h (x).

【0021】図4は、車両の初期探索範囲を決定するか
どうかの判断基準を説明する図である。図4(a) は、エ
ッジの高さh(x) が急激に下がる点を見つける方法を説
明する図である。1つ前のラインのエッジの高さh(x-
1) とh(x) との差が10画素以上あれば、該当するも
のとする。判定式は、 h(x-1) −h(x) >10 (1) である。
FIG. 4 is a diagram for explaining a criterion for determining whether to determine the initial search range of the vehicle. FIG. 4A is a diagram for explaining a method of finding a point where the height h (x) of the edge sharply decreases. The height h (x-
If the difference between 1) and h (x) is 10 pixels or more, it is determined to be applicable. The judgment formula is h (x-1) -h (x)> 10 (1).

【0022】次に、画面上の車両幅Wを求める。図5
は、道路消失点(車載カメラ1aによって撮像される画
面内において走行している車線の両側の線が交わって消
失する点;特開平7−162846号公報参照)が画面
の中心にあるとした場合に、前方車両の画面上の車両幅
Wを近似的に求める方法を説明する図である。画面の横
サイズAを640 画素、縦サイズBを480 画素とする。前
方車両が高さh(x) のところに存在しているとすると、
画面上の車線幅Dは、次のように求められる。
Next, the vehicle width W on the screen is determined. FIG.
Means that the road vanishing point (the point at which the lines on both sides of the running lane cross each other in the screen captured by the on-board camera 1a and vanishes; see Japanese Patent Application Laid-Open No. 7-162846) is located at the center of the screen. FIG. 3 is a diagram for explaining a method of approximately calculating a vehicle width W on a screen of a vehicle ahead. The horizontal size A of the screen is 640 pixels, and the vertical size B is 480 pixels. If the vehicle ahead is at height h (x),
The lane width D on the screen is obtained as follows.

【0023】 D=A(1−2h(x) /B) (2) ここで、実際の車両幅と実際の車線幅との比βを1.7
/3.5とみなすことにする。1.7は、小型車の規定
車両幅(単位m)である。すると、画面上の車両幅W
は、 W=1.7D/3.5 (3) で求められる。
D = A (1-2h (x) / B) (2) Here, the ratio β between the actual vehicle width and the actual lane width is 1.7.
/3.5. 1.7 is a prescribed vehicle width (unit: m) of a small car. Then, the vehicle width W on the screen
Is determined by W = 1.7D / 3.5 (3).

【0024】画面上の車両幅Wが求まると、図4(b) に
示すように、h(x) と、h(x+0.5W)との差が5画素未満
であるかどうかを判定し、 h(x) −h(x+0.5W)<5 (4) 図4(c) に示すように、h(x) と、h(x+0.9W)との差が
5画素未満であるかどうかを判定する。
When the vehicle width W on the screen is obtained, it is determined whether or not the difference between h (x) and h (x + 0.5W) is less than 5 pixels, as shown in FIG. , H (x) -h (x + 0.5W) <5 (4) As shown in FIG. 4 (c), the difference between h (x) and h (x + 0.9W) is less than 5 pixels. Is determined.

【0025】 h(x) −h(x+0.9W)<5 (5) 前記(4) 式と(5) 式の判定をするのは、車両ならば、そ
の影になっている部分の底は平らであるとの予測に基づ
くものである。前記のように図4(a),(b),(c) の判定
で、車両が存在するらしいと推測されると、当該物体を
含む範囲を車両の初期探索範囲を決定する。
H (x) −h (x + 0.9W) <5 (5) The determination of the above equations (4) and (5) is based on the bottom of the shadowed part of the vehicle. Is based on a prediction of being flat. As described above, if it is estimated in the determinations of FIGS. 4A, 4B, and 4C that a vehicle is likely to be present, a range including the object is determined as an initial search range of the vehicle.

【0026】この初期探索範囲を決定方法を、図6を用
いて説明する。点h(x) より左側にマージンpをとり、
点h(x) より右側に車両幅Wだけ進めてさらにマージン
pをとる。点h(x) より下側にマージンpをとり、点h
(x) より上側にαWだけ進めてさらにマージンpをと
る。ここで、αは車体の縦横比であり、例えば乗用車を
対象にするのなら0.77の値に設定する。しかし、ト
ラックやバスのような背の高い車両が存在することを考
えると、αは1.3から1.5位のほうがよい。マージ
ンpは、例えば15画素位とするが、この値も実際にい
ろいろ変化させて決定することが好ましい。
A method of determining the initial search range will be described with reference to FIG. Take margin p to the left of point h (x),
The vehicle is advanced to the right of the point h (x) by the vehicle width W, and a margin p is further taken. With margin p below point h (x), point h
(x) The margin p is further advanced by αW from the upper side. Here, α is the aspect ratio of the vehicle body, and is set to, for example, a value of 0.77 for a passenger car. However, considering that there are tall vehicles such as trucks and buses, α is better in the order of 1.3 to 1.5. The margin p is, for example, about 15 pixels, and it is preferable that this value is also determined by actually changing variously.

【0027】以上のようにして求めた対角点を結ぶこと
により、初期探索範囲Eを決定することができる。最後
に、車両の初期探索範囲を決定するかどうかの判断基準
の変更例を、図7を用いて説明する。図7(a) は、図4
(a) と同様、1つ前のラインのエッジの高さh(x-1) と
h(x) との差が10画素以上あるかどうかを判定する方
法を説明する図である。
By connecting the diagonal points obtained as described above, the initial search range E can be determined. Finally, an example of changing the criterion for determining whether to determine the initial search range of the vehicle will be described with reference to FIG. FIG. 7A shows FIG.
FIG. 11 is a diagram illustrating a method of determining whether or not the difference between the heights h (x−1) and h (x) of the edge of the immediately preceding line is 10 pixels or more, as in FIG.

【0028】図7(b) (c) (d) は、それぞれh(x-1) と
h(x+0.3W)との差が10画素以上あるかどうか、h(x-
1) とh(x+0.5W)との差が10画素以上あるかどうか、
h(x-1) とh(x+0.7W)との差が10画素以上あるかどう
かを判定する方法を説明する図である。図7(e) (f)
は、それぞれh(x+0.3W)とh(x+0.5W)との差が5画素未
満であるかどうか、h(x+0.3W)とh(x+0.7W)との差が5
画素未満であるかどうかを説明する図である。
FIGS. 7 (b), (c) and (d) show whether or not the difference between h (x-1) and h (x + 0.3W) is not less than 10 pixels, respectively.
1) Whether the difference between h (x + 0.5W) is 10 pixels or more,
It is a figure explaining the method of judging whether the difference of h (x-1) and h (x + 0.7W) is 10 pixels or more. Fig. 7 (e) (f)
Is whether the difference between h (x + 0.3W) and h (x + 0.5W) is less than 5 pixels, and the difference between h (x + 0.3W) and h (x + 0.7W) is 5
It is a figure explaining whether it is less than a pixel.

【0029】図7の(a) から(f) までの全ての条件を満
たした場合に、車両が存在するらしいと推測する。そし
て、図6と同様の手法で当該物体を含む範囲を車両の初
期探索範囲を決定する。なお、本発明は前記の実施形態
に限定されるものではない。前記の実施形態では、図3
に示すように、画像の左端から右端までエッジを調べて
いたが、これとは逆に右端から左端までエッジを調べて
もよい。
When all the conditions from (a) to (f) in FIG. 7 are satisfied, it is assumed that a vehicle is likely to exist. Then, a range including the object is determined as an initial search range of the vehicle in the same manner as in FIG. Note that the present invention is not limited to the above embodiment. In the above embodiment, FIG.
As shown in (1), the edges are examined from the left end to the right end of the image. Conversely, the edges may be examined from the right end to the left end.

【0030】[0030]

【実施例】HP9000モデル735の計算機を用い、
晴天昼間、片側一車線の高速道路で先行車両が1台ある
場合に撮像して画像を得た。この画像1枚に対して、本
発明に係る初期探索範囲の決定方法を実施したところ、
画像の入力から初期探索範囲の決定まで0.26秒を要
した。
EXAMPLE Using a computer of HP9000 model 735,
During fine daytime, an image was obtained by taking an image when there was one preceding vehicle on a one-lane expressway on one side. When the method for determining the initial search range according to the present invention was performed on one image,
It took 0.26 seconds from input of an image to determination of an initial search range.

【0031】[0031]

【発明の効果】以上のように本発明の先行車両の初期探
索範囲の決定方法によれば、認識対象の先行車両の画像
が含まれる確率の高い初期探索範囲を、短い処理時間で
切り出すことができる。
As described above, according to the method for determining an initial search range of a preceding vehicle according to the present invention, an initial search range having a high probability of including an image of a preceding vehicle to be recognized can be cut out in a short processing time. it can.

【図面の簡単な説明】[Brief description of the drawings]

【図1】画像認識処理装置1を含む車載装置の電気的構
成を示すブロック図である。
FIG. 1 is a block diagram illustrating an electrical configuration of an in-vehicle device including an image recognition processing device.

【図2】画像認識処理部1bの処理内容を概説するフロ
ーチャートである。
FIG. 2 is a flowchart outlining processing contents of an image recognition processing unit 1b.

【図3】画像の濃度が急激に変わる点(エッジ)を調べ
る手法を説明する図である。
FIG. 3 is a diagram illustrating a method of examining a point (edge) where the density of an image changes rapidly.

【図4】車両の初期探索範囲を決定するかどうかの判断
基準を説明する図である。
FIG. 4 is a diagram illustrating a criterion for determining whether to determine an initial search range of a vehicle.

【図5】道路消失点が画面の中心にあるとした場合に、
前方車両の画面上の車両幅Wを近似的に求める方法を説
明する図である。
FIG. 5: Assuming that the road vanishing point is at the center of the screen,
It is a figure explaining the method of calculating | requiring the vehicle width W on the screen of the vehicle ahead ahead approximately.

【図6】初期探索範囲を決定方法を説明する図である。FIG. 6 is a diagram illustrating a method for determining an initial search range.

【図7】車両の初期探索範囲を決定するかどうかの判断
基準の変更例を説明する図である。
FIG. 7 is a diagram illustrating a modified example of a criterion for determining whether to determine an initial search range of a vehicle.

【符号の説明】[Explanation of symbols]

1 画像認識処理装置 1a 車載カメラ 1b 画像認識処理部 2 データ処理装置 3 レーザレーダ 4 磁気センサ 5 方位センサ 6 車輪速センサ 7 表示装置 8 リモートコントロールユニット 9 ブレーキECU 10 アクセルECU 11 ステアリング 12 ビーコン受信機 13 送受信機 REFERENCE SIGNS LIST 1 image recognition processing device 1a vehicle-mounted camera 1b image recognition processing unit 2 data processing device 3 laser radar 4 magnetic sensor 5 direction sensor 6 wheel speed sensor 7 display device 8 remote control unit 9 brake ECU 10 accelerator ECU 11 steering 12 beacon receiver 13 Transceiver

Claims (1)

【特許請求の範囲】[Claims] 【請求項1】車両の周辺の物体を画像認識するための車
両認識装置に用いられ、 車載カメラによって車両の周辺を撮像し、 前記車載カメラで撮像された画面を縦割りする複数のラ
インのうち、それぞれのラインに沿って下方から上方に
向かって画像の濃度が初めて急激に変わる点を検出し、 検出された点をつないだ線に現れる凹状の部分を含む範
囲を特定し、当該範囲を認識対象の先行車両の画像が含
まれる初期探索範囲とすることを特徴とする先行車両の
初期探索範囲の決定方法。
1. A vehicle recognizing apparatus for recognizing an image of an object around a vehicle, wherein an image of the periphery of the vehicle is taken by an on-vehicle camera, and a plurality of lines vertically dividing a screen taken by the on-vehicle camera , Detect points where the density of the image suddenly changes from bottom to top along each line for the first time, identify the range including the concave part that appears on the line connecting the detected points, and recognize the range A method for determining an initial search range of a preceding vehicle, wherein the initial search range includes an image of a target preceding vehicle.
JP31956496A 1996-11-29 1996-11-29 Method for determining initial search range of preceding vehicle Pending JPH10157538A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP31956496A JPH10157538A (en) 1996-11-29 1996-11-29 Method for determining initial search range of preceding vehicle

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP31956496A JPH10157538A (en) 1996-11-29 1996-11-29 Method for determining initial search range of preceding vehicle

Publications (1)

Publication Number Publication Date
JPH10157538A true JPH10157538A (en) 1998-06-16

Family

ID=18111681

Family Applications (1)

Application Number Title Priority Date Filing Date
JP31956496A Pending JPH10157538A (en) 1996-11-29 1996-11-29 Method for determining initial search range of preceding vehicle

Country Status (1)

Country Link
JP (1) JPH10157538A (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004112144A (en) * 2002-09-17 2004-04-08 Nissan Motor Co Ltd Front car tracking system and method for tracking front car
JP2009509085A (en) * 2005-09-21 2009-03-05 ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング Vehicle start control method and driver support system based on sensor

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004112144A (en) * 2002-09-17 2004-04-08 Nissan Motor Co Ltd Front car tracking system and method for tracking front car
JP2009509085A (en) * 2005-09-21 2009-03-05 ローベルト ボッシュ ゲゼルシャフト ミット ベシュレンクテル ハフツング Vehicle start control method and driver support system based on sensor

Similar Documents

Publication Publication Date Title
JP6671554B1 (en) Determining future heading using wheel attitude
EP1564703B1 (en) Vehicle driving assist system
US9074906B2 (en) Road shape recognition device
US20050125121A1 (en) Vehicle driving assisting apparatus
US11987239B2 (en) Driving assistance device
US11285957B2 (en) Traveling control apparatus, traveling control method, and non-transitory computer-readable storage medium storing program
JP2004531424A (en) Sensing device for cars
US20210316734A1 (en) Vehicle travel assistance apparatus
CN112208533A (en) Vehicle control system, vehicle control method, and storage medium
US20220063406A1 (en) Onboard display device, onboard display method, and computer readable storage medium
CN112124304B (en) Library position positioning method and device and vehicle-mounted equipment
JP2021197009A (en) Risk determination system and risk determination program
JP7182623B2 (en) Driving assistance for automobiles when approaching a speed barrier
CN113492846B (en) Control device, control method, and computer-readable storage medium storing program
JPH0981757A (en) Vehicle position detecting device
US20200384992A1 (en) Vehicle control apparatus, vehicle, operation method of vehicle control apparatus, and non-transitory computer-readable storage medium
WO2019139084A1 (en) Notification apparatus and vehicle-mounted equipment
JP4269862B2 (en) On-vehicle moving body detection device
US20220101025A1 (en) Temporary stop detection device, temporary stop detection system, and recording medium
JPH10157538A (en) Method for determining initial search range of preceding vehicle
JP2007286873A (en) On-vehicle surrounding vehicle detector
CN113386773A (en) Method and device for judging reliability of visual identification
JP7115872B2 (en) Drive recorder and image recording method
JP2021196826A (en) Safety support system and onboard camera image analysis method
JP3400093B2 (en) Vehicle travel path estimation device