JP5966394B2 - Parking assistance device - Google Patents
Parking assistance device Download PDFInfo
- Publication number
- JP5966394B2 JP5966394B2 JP2012020589A JP2012020589A JP5966394B2 JP 5966394 B2 JP5966394 B2 JP 5966394B2 JP 2012020589 A JP2012020589 A JP 2012020589A JP 2012020589 A JP2012020589 A JP 2012020589A JP 5966394 B2 JP5966394 B2 JP 5966394B2
- Authority
- JP
- Japan
- Prior art keywords
- monitoring
- vehicle
- parking
- host vehicle
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
Description
本発明は、車両の駐車時の運転操作又は出車時の運転操作に役立つ情報を提供する駐車支援装置に関する。 The present invention relates to a parking assistance device that provides information useful for driving operation when parking a vehicle or driving operation when leaving a vehicle.
この種の装置に関し、車両に搭載された複数のカメラで撮像した画像を繋ぎ合せて生成した車両上空の仮想視点から見た車両周囲の合成画像と、車両が前進しているか後退しているかに応じて選択された撮像画像とをディスプレイに表示する駐車支援装置が知られている（特許文献１）。 With regard to this type of device, whether the vehicle is moving forward or backward, and a composite image around the vehicle viewed from a virtual viewpoint above the vehicle generated by connecting images captured by a plurality of cameras mounted on the vehicle There is known a parking assist device that displays a captured image selected in response to a display (Patent Document 1).
しかしながら、従来の技術では、表示される画像が車両の進行方向に基づいて選択されるため、駐車操作時や出車操作時に必ずしも適切な画像が表示されているとは限らないという問題があった。 However, in the related art, since the displayed image is selected based on the traveling direction of the vehicle, there is a problem that an appropriate image is not always displayed at the time of parking operation or departure operation. .
本発明が解決しようとする課題は、駐車操作時や出車操作時に適切な画像を表示し、運転者の駐車操作及び出車操作を支援することである。 The problem to be solved by the present invention is to display an appropriate image at the time of parking operation or departure operation and assist the driver's parking operation and departure operation.
本発明は、駐車誘導軌道又は出車誘導軌道に沿って自車両を移動させる際の操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を確認するための監視方向を算出し、自車両から監視方向を見た監視画像を取得し、取得した監視画像を合成画像とともに表示させるにあたり、監視画像の取得処理を行う際に、各カメラの撮像方向と監視方向とを比較し、監視方向との差が最も小さい撮像方向を撮像するカメラの撮像画像を監視画像として取得することにより、上記課題を解決する。 The present invention calculates a monitoring direction for confirming an obstacle that may exist around the host vehicle based on a steering angle when the host vehicle is moved along the parking guidance track or the departure guidance track. When the monitor image is obtained from the own vehicle and the monitor image is viewed , and the acquired monitor image is displayed together with the composite image , when the monitor image acquisition process is performed, the imaging direction of each camera is compared with the monitor direction. The above problem is solved by acquiring, as a monitoring image, a captured image of a camera that captures an imaging direction with the smallest difference from the monitoring direction .
本発明によれば、駐車誘導軌道又は出車誘導軌道に沿って自車両を移動させる際に注意すべき監視方向を見た監視画像と自車両を俯瞰する合成画像とを同時に表示させるので、自車両の進行方向とは異なる方向に障害物があったとしても、その障害物を確認しながら自車両を又は駐車位置以外の位置移動させることができる。この結果、駐車操作又は出車操作を行う運転者に適切な情報を提供して、運転者の駐車時及び出車時の運転操作を支援することができる。 According to the present invention, the monitoring image that looks at the monitoring direction to be noted when moving the host vehicle along the parking guidance track or the departure guidance track and the composite image that overlooks the host vehicle are displayed at the same time. Even if there is an obstacle in a direction different from the traveling direction of the vehicle, the host vehicle can be moved to a position other than the parking position while checking the obstacle. As a result, it is possible to provide appropriate information to the driver who performs the parking operation or the departure operation, and to assist the driving operation at the time of parking and departure of the driver.
＜第１実施形態＞
以下、本発明の第１の実施形態を図面に基づいて説明する。本実施形態では、本発明に係る駐車支援装置を車載の駐車支援システム１０００に適用した場合を例にして説明する。なお、本発明の駐車支援とは、車両を所定の駐車位置に移動させる入車（入庫）時の操作の支援のみならず、車両を駐車位置から他の位置に移動させる出車（出庫）時の操作の支援をも含む。
<First Embodiment>
DESCRIPTION OF EXEMPLARY EMBODIMENTS Hereinafter, a first embodiment of the invention will be described with reference to the drawings. In the present embodiment, a case where the parking support apparatus according to the present invention is applied to an on-vehicle
図１は、本実施形態に係る駐車支援装置１００を含む駐車支援システム１０００のブロック構成図である。図１に示すように、本実施形態の駐車支援システム１０００は、駐車支援装置１００の他に、自車両の外部に固定された４つの車載カメラ１ａ〜１ｄと、車両コントローラ２と、運転支援情報を表示するディスプレイを備える表示装置３及びこの表示を切り替える表示切替スイッチ３１と、イグニッションスイッチ４と、撮像スイッチ５と、測距装置６と、カメラ１ａ〜１ｄの撮像方向を設定するカメラ駆動装置７とを備えている。カメラ駆動装置７は、モータなどを備え、カメラ１ａ〜１ｄの取り付け軸を動かして、その撮像方向を任意の方向に設定することができる。
FIG. 1 is a block configuration diagram of a
上述の車両コントローラ２は、車両のシフト位置のポジションに応じた信号を出力するポジションスイッチ２１と、車速情報を出力する車速センサ２２と、ステアリングの操舵角情報を出力する操舵角センサ２３と、ステアリングにかかる操舵力を検出するトルクセンサ２４と各種車両情報を授受することができる。さらに、車両コントローラ２は、車両の駆動に関わる駆動系２５及び車両の操舵に関わる操舵装置２６と各種車両情報を授受することができる。
The
本実施形態の操舵装置２６は、ステアリングコントローラ２６１を備えている。本実施形態におけるステアリングコントローラ２６１は、例えばコラムシャフトに取り付けられるモータ等の制御を実行する。具体的に、ステアリングコントローラ２６１は、車両コントローラ２を介して取得された各種車両情報から求められた駐車誘導軌道と自車両位置に基づいて目標操舵角を算出し、この目標操舵角に追従するように操舵を自動で行う機能を備えている。なお、本実施形態では電動パワーステアリング（EPS）を備える車両を例に説明するが、EPS以外にも油圧パワーステアリングやステアバイワイヤ等を備える車両でも実現可能である。
The
これらの各装置はＣＡＮ（Controller Area Network）その他の車載ＬＡＮによって接続され、相互に情報の授受を行うことができる。 Each of these devices is connected by a CAN (Controller Area Network) or other in-vehicle LAN, and can exchange information with each other.
同図に示すように、本実施形態に係る駐車支援装置１００の制御装置１０は、合成画像とともに注意すべき障害物が含まれる監視画像とを表示させるプログラムが格納されたＲＯＭ（Read Only Memory）１２と、このＲＯＭ１２に格納されたプログラムを実行することで、駐車支援装置１００として機能させる動作回路としてのＣＰＵ（Central Processing Unit）１１と、アクセス可能な記憶装置として機能するＲＡＭ（Random Access Memory）１３と、を備えている。
As shown in the figure, the control device 10 of the parking assistance device 100 according to the present embodiment includes a ROM (Read Only Memory) in which a program for displaying a composite image and a monitoring image including an obstacle to be noted is stored. 12, a CPU (Central Processing Unit) 11 serving as an operation circuit that functions as the parking assist device 100 by executing a program stored in the
本実施形態に係る駐車支援装置１００の制御装置１０は、撮像画像取得機能と、合成画像生成機能と、運転支援情報生成機能と、監視方向算出機能と、監視画像取得機能と、表示制御機能とを備えている。本実施形態の制御装置１０は、上記機能を実現するためのソフトウェアと、上述したハードウェアの協働により各機能を実行することができる。 The control device 10 of the parking assistance device 100 according to the present embodiment includes a captured image acquisition function, a composite image generation function, a driving support information generation function, a monitoring direction calculation function, a monitoring image acquisition function, and a display control function. It has. The control apparatus 10 of this embodiment can execute each function by cooperation of the software for implement | achieving the said function, and the hardware mentioned above.
以下に、駐車支援装置１００の制御装置１０が実現する各機能についてそれぞれ説明する。 Below, each function which the control apparatus 10 of the parking assistance apparatus 100 implement | achieves is each demonstrated.
まず、制御装置１０の撮像画像取得機能について説明する。本実施形態の制御装置１０は、イグニッションスイッチ４に入力操作がされ、撮像スイッチ５に入力操作がされると、車載カメラ１ａ〜１ｄは、ＣＣＤ（Charge Coupled Devices）等の撮像素子を用いて構成され、所定周期で車両周囲を撮像する。撮像画像取得機能の起動のトリガは限定されない。たとえば、一時停止後に、ポジションスイッチをリバースに入れる操作がされた（リバースポジションスイッチオン情報が入力された）などの車両の駐車操作パターンに応じた操作信号を車両コントローラ２から取得した場合に撮像画像の取得を開始するようにしてもよいし、車載ナビゲーション装置のＧＰＳ装置によって検出された現在位置が、同ナビゲーション装置の地図情報中の駐車場領域に含まれた後に、先述の駐車操作パターンに応じた操作信号を車両コントローラ２から取得した場合に撮像画像の取得を開始するようにしてもよいし、一時停止後に車両周囲を撮像し、撮像画像中に駐車区画に応じた白線が抽出された場合に撮像画像の取得を開始するようにしてもよい。また、後述する出車操作パターンは、駐車支援処理を利用して停車した後にイグニッションがオン操作されたなどの車両の出車操作パターンを予め定義しておき、撮像画像取得機能のトリガとすることができる。
First, the captured image acquisition function of the control device 10 will be described. In the control device 10 of the present embodiment, when an input operation is performed on the ignition switch 4 and an input operation is performed on the imaging switch 5, the in-
図２は、車載カメラ１ａ〜１ｄを車両に取り付ける場合の配置例を示す図である。車載カメラ１ａ〜１ｄは、車両の外部の異なる位置に各々設置され、車両周囲の４方向の画像をそれぞれ撮影する。本例では、図２に示すように、フロントグリル近傍などの車両前方の所定位置に設置された車載カメラ１ａと、左右のサイドミラー近傍に設置され車載カメラ１ｂ，１ｃと、車両後方の所定位置に設置された車載カメラ１ｄとが設けられている。これら４台の車載カメラ１ａ〜１ｄは所定周期で撮像画像を駐車支援装置１００の制御装置１０へ送出する。
FIG. 2 is a diagram illustrating an arrangement example when the in-
次に、制御装置１０の合成画像生成機能について説明する。本実施形態の制御装置１０は、取得した各車載カメラ１ａ〜１ｄの撮像画像に基づいて車両上方の仮想視点から車両及び車両周囲を見下ろした一つの合成画像を生成する。制御装置１０は、異なる位置の車載カメラ１ａ〜１ｄによって取得された各撮像画像を、各撮像画像の画素アドレスと合成画像におけるアドレスとの対応関係を示す変換テーブルを予め準備し、これを参照して各撮像画像を合成画像の座標へ変換する。そして、制御装置１０は、座標変換された各撮像画像を繋ぎ合せ、車両及び車両周囲の様子を示す一つの合成画像を生成する。この合成画像の生成手法は、公知の手法を用いることができる。
Next, the composite image generation function of the control device 10 will be described. The control device 10 according to the present embodiment generates one composite image in which the vehicle and the surroundings of the vehicle are looked down from a virtual viewpoint above the vehicle based on the acquired captured images of the in-
次に、運転支援情報生成機能について説明する。本実施形態の制御装置１０は、自車両が目標駐車位置へ移動する際の車両情報に基づいて、自車両の現在位置及びこの現在位置から目標駐車位置へ移動する際の駐車誘導軌道を含む運転支援情報を生成する。特に限定されないが、この駐車誘導軌道は、駐車操作の開始後、後退を開始する後退開始位置と、最終的に駐車する目標駐車位置と、途中で切り返すための駐車途中位置と、ステアリング操舵に連動した線である操舵連動線と、目標駐車位置に至る理想的な進路予想線とを含む。特に限定されないが、制御装置１０は、クロソイド曲線、円弧、直線の組合せ、又は予め定義された任意の軌跡を用いて現在位置から目標駐車位置までの駐車誘導軌道を算出する。駐車誘導軌道を算出する手法は、出願時において知られている駐車誘導手法を用いることができる。 Next, the driving support information generation function will be described. The control device 10 of the present embodiment is based on vehicle information when the host vehicle moves to the target parking position, and includes a current position of the host vehicle and a parking guidance track when moving from the current position to the target parking position. Generate support information. Although not particularly limited, this parking guidance trajectory is linked to the steering start position after starting the parking operation, the reverse start position for starting the reverse, the target parking position for the final parking, the intermediate parking position for switching back halfway, and the steering steering. A steering interlocking line that is a straight line, and an ideal course prediction line that reaches the target parking position. Although not particularly limited, the control device 10 calculates a parking guidance trajectory from the current position to the target parking position using a clothoid curve, a circular arc, a combination of straight lines, or an arbitrary predetermined trajectory. As a method for calculating the parking guidance trajectory, a parking guidance method known at the time of filing can be used.
制御装置１０は、算出した駐車誘導軌道と自車両位置とを車両コントローラ２を介してステアリングコントローラ２６１に送信する。ステアリングコントローラ２６１は、この駐車誘導軌道に沿って車両が移動できるように、操舵装置２６，駆動系２５を制御して駐車アシスト処理を行う。他方、制御装置１０は、駐車アシスト処理が実行される際の操舵角度などの車両情報を車両側の車両コントローラ２から取得することができる。
The control device 10 transmits the calculated parking guidance track and the own vehicle position to the steering controller 261 via the
具体的に、制御装置１０は、ステアリングコントローラ２６１を介して、車両のモータにてステアリングホイールの回転速度、操舵トルクを制御して、駐車誘導軌道に沿って車両を移動させる。この駐車アシスト処理の際に、制御装置１０は、ステアリングホイールと同軸上に配置されたトルクセンサ２４から取得したトルク情報、舵操舵角センサ２３から取得した操舵角情報、車速センサ２２から取得した車輪の回転数（車両の移動量）を、車両コントローラ２を介して取得する。そして、制御装置１０は、駐車誘導軌道に沿って車両が目標駐車位置に移動できるように、操舵装置２６のステアリングホイールの操舵角度、操舵トルク等を制御する。なお、駐車誘導軌道に沿って車両を目標駐車位置へ導く駐車アシスト制御は、一般に知られている手法を用いることができる。
Specifically, the control device 10 controls the rotation speed and steering torque of the steering wheel with the motor of the vehicle via the steering controller 261, and moves the vehicle along the parking guidance track. During the parking assist process, the control device 10 uses the torque information acquired from the
続いて、監視方向算出機能について説明する。本実施形態の制御装置１０は、駐車誘導軌道に沿って自車両を移動させる際に車両側から取得した操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する。 Next, the monitoring direction calculation function will be described. The control device 10 of the present embodiment is for viewing obstacles that may exist around the host vehicle based on the steering angle acquired from the vehicle side when the host vehicle is moved along the parking guidance track. Calculate the monitoring direction.
特に限定されないが、制御装置１０は、自車両が駐車する際の操舵角度と監視方向とを予め対応づけた監視方向情報１３１を参照し、車両コントローラ２から取得した操舵角度を含む車両情報に基づいて監視方向を算出する。監視方向情報１３１は、操舵角度（方向と角度量）と、監視方向とが共通の座標に基づいて定義された情報である。
Although not particularly limited, the control device 10 refers to the monitoring direction information 131 in which the steering angle when the host vehicle is parked and the monitoring direction are associated in advance, and is based on the vehicle information including the steering angle acquired from the
特に限定されないが、本実施形態の監視方向情報１３１は、前進時の操舵角度と監視方向とを対応づけるとともに、後退時の操舵角度と監視方向とを対応づけることができる。さらに、本実施形態の監視方向情報１３１は、車両が一時停止してからシフトチェンジをした後の、経時的な操舵角度に監視方向を対応づけることができる。つまり、駐車時における操舵角度の変化を分類して操舵角度の経時的変化パターンを作成し、この操舵角度の経時的変化パターンに監視方向を時間ごとに対応づけることが可能である。加えて、監視方向情報１３１には車輪の回転数などによって導出された移動距離の要素を加えることができる。すなわち、車両の駐車開始から駐車終了までの任意のタイミング（各位置）ごとに、操舵角度と監視方向とを対応づけた監視方向情報１３１を準備することも可能である。このように、予め、操舵角度と監視方向とを予め対応づけた監視方向情報１３１を定義しておくことにより、処理の迅速化を図ることができる。 Although not particularly limited, the monitoring direction information 131 of the present embodiment can associate the steering angle at the time of forward movement with the monitoring direction, and can associate the steering angle at the time of backward movement and the monitoring direction. Furthermore, the monitoring direction information 131 of the present embodiment can associate the monitoring direction with the steering angle over time after a shift change after the vehicle is temporarily stopped. In other words, it is possible to classify the change in the steering angle during parking and create a change pattern of the steering angle over time, and to associate the monitoring direction with the change pattern of the steering angle over time with time. In addition, it is possible to add an element of the movement distance derived from the rotation number of the wheel or the like to the monitoring direction information 131. That is, it is also possible to prepare the monitoring direction information 131 in which the steering angle and the monitoring direction are associated with each other at any timing (each position) from the start of parking of the vehicle to the end of parking. In this manner, by defining the monitoring direction information 131 in which the steering angle and the monitoring direction are associated in advance, the processing can be speeded up.
監視方向の算出処理は、所定周期で行い、順次、障害物の存在位置を示す情報を更新する。このように、自車両が駐車する際、つまり、自車両が駐車操作を開始した現在位置から目標駐車位置に移動する間の複数の位置で監視方向を設定することにより、後の処理において、その位置ごとに注意すべき適切な監視画像の表示を行うことができる。この結果、移動に伴い注意すべき監視方向が変化する場合でも、常時、適切な方向を監視することができる。 The monitoring direction calculation process is performed at a predetermined cycle, and information indicating the position of the obstacle is sequentially updated. In this way, when the host vehicle is parked, that is, by setting the monitoring direction at a plurality of positions while the host vehicle moves from the current position where the parking operation has started to the target parking position, Appropriate monitoring images to be noted for each position can be displayed. As a result, an appropriate direction can always be monitored even when the monitoring direction to be noted changes with movement.
なお、障害物に対する自車両の向きは、駐車操作とともに刻々と変化するので、操舵角度の移動履歴と、車輪の回転数、車輪の径などの車両情報を、所定周期で車両コントローラ２を介して取得することが好ましい。また、障害物に対する自車両の向き（監視方向）を算出するにあたり、自車両と目標駐車位置との位置関係を利用することも可能である。たとえば、目標駐車位置に対して角度をもって移動する自車両が目標駐車領域の境界（縦列駐車であれば目標駐車位置の前後の車両の側面を結んだ線を自車両の一部が越えたことを車両情報から判断し、このタイミングにおける目標駐車位置との位置関係に応じて障害物に対する自車両の向き（監視方向）を求めることも可能である。
In addition, since the direction of the own vehicle with respect to the obstacle changes every moment with the parking operation, the vehicle history such as the movement history of the steering angle and the number of rotations of the wheel, the diameter of the wheel, etc. are transmitted via the
なお、本例では、駐車アシスト処理が実行された場合の操舵角度その他の車両情報を取得する例を説明するが、駐車アシスト処理が実行されず、運転者が駐車誘導機能を参考にして自ら駐車操作をした場合の操舵角度その他の車両情報を取得して監視方向を算出することもできる。 In this example, an example of acquiring the steering angle and other vehicle information when the parking assist process is executed will be described. However, the parking assist process is not executed, and the driver parks himself with reference to the parking guidance function. It is also possible to calculate the monitoring direction by acquiring the steering angle and other vehicle information when operated.
監視方向の算出処理は、自車両の近傍に障害物が存在すると判断された場合に行うようにしてもよい。自車両の近傍に障害物があるか否かは、先述した測距装置６を用いて算出することができる。この場合において、本実施形態の制御装置１０は、測距装置６に自車両から自車両の周囲に存在する物体までの距離を計測させる。本実施形態の測距装置６としては、超音波、電磁波、レーザー等の反射波に基づいて距離を計測する公知のものを用いることができる。もちろん、公知の手法を用いて、車両に搭載されているカメラ１ａ〜１ｄの撮像画像に基づいて、車両から撮像画像に含まれる物体までの距離を算出することもできる。本実施形態の制御装置１０は、測距装置６により計測された車両周囲の物体までの距離が所定値未満である物体を検出した場合に、上述の監視方向の算出処理を行うことができる。
The monitoring direction calculation process may be performed when it is determined that an obstacle exists in the vicinity of the host vehicle. Whether there is an obstacle in the vicinity of the host vehicle can be calculated by using the
続いて、監視画像取得機能について説明する。本実施形態の制御装置１０は、自車両から監視方向を見る監視画像を取得する。 Next, the monitoring image acquisition function will be described. The control apparatus 10 of this embodiment acquires the monitoring image which sees a monitoring direction from the own vehicle.
監視画像の取得手法は特に限定されないが、以下の３つの手法により監視画像を取得することができる。 Although the monitoring image acquisition method is not particularly limited, the monitoring image can be acquired by the following three methods.
第一の手法として、本実施形態の制御装置１０は、カメラ１ａ〜１ｄの撮像方向が監視方向に沿うように設定する設定命令をカメラ駆動装置７へ送出し、カメラ１ａ〜１ｄの撮像方向が監視方向に設定されたカメラ１ａ〜１ｄによって撮像された撮像画像を監視画像として取得する。
As a first method, the control device 10 of the present embodiment sends a setting command for setting the imaging direction of the
このように、駐車時における操舵角度に応じた監視方向をカメラ１ａ〜１ｄに撮像させて、その撮像画像を監視画像として取得するので、駐車時の車両の向きに応じた適切な監視方向をカメラ１ａ〜１ｄの撮像画像によって監視することができる。また、自車両が現在位置から目標駐車位置へ移動する（駐車する）際に、操舵角度に応じた監視方向を経時的に求めることにより、移動中の自車両の障害物に対する向き（相対位置）に応じた適切な監視方向をカメラ１ａ〜１ｄの撮像画像によって監視することができる。
As described above, since the
第二の手法として、本実施形態の制御装置１０は、各カメラ１ａ〜１ｄの撮像方向と監視方向とを比較し、監視方向との差が最も小さい撮像方向を撮像するカメラ１ａ〜１ｄの撮像画像を監視画像として取得することができる。例えば、監視方向を含む監視領域を撮像しているカメラ１ａ〜１ｄの撮像画像を監視画像として取得することができる。
As a second method, the control device 10 according to the present embodiment compares the imaging direction of each
このように、監視方向との差が小さい撮像方向を撮像するカメラ１ａ〜１ｄの撮像画像を監視画像として取得することにより、カメラ駆動装置７を設けなくても、監視方向に近い方向を撮像する監視画像を取得することができ、第一の手法と同様に運転者の駐車操作を支援することができる。また、カメラ１ａ〜１ｄの撮像画像の中から監視画像を選択することにより、監視画像を迅速に取得することができる。このため、駐車時において注意すべき監視画像を迅速に提示させることができる。
In this way, by acquiring the captured images of the
第三の手法として、本実施形態の制御装置１０は、各カメラ１ａ〜１ｄの撮像画像の中から、自車両から監視方向を見た所定範囲の画像を切り出し、切り出された画像を監視画像として取得することができる。たとえば、広角のカメラ１ａ〜１ｄを配置し、撮像画像の中から監視画像を取得するように構成することもできる。
As a third method, the control device 10 according to the present embodiment cuts out an image of a predetermined range viewed from the own vehicle from the captured images of the
このように、監視方向を見た所定範囲の画像をカメラ１ａ〜１ｄの撮像画像から切り出して監視画像として取得することにより、第一の手法と同様に運転者の駐車操作を支援することができ、第二の手法と同様に、カメラ駆動装置７を設けなくても、監視方向を見た監視画像を取得することができる。
As described above, by extracting an image of a predetermined range as seen from the monitoring direction from the captured images of the
本実施形態の制御装置１０は、操舵角度に応じた監視方向を見た一つの監視画像を特定するので、監視すべき方向を絞り込むことができる。この結果、運転者の注意を監視すべき方向に集中させることができる。 Since the control device 10 of the present embodiment identifies one monitoring image in which the monitoring direction corresponding to the steering angle is viewed, the direction to be monitored can be narrowed down. As a result, the driver's attention can be concentrated in the direction to be monitored.
最後に、表示制御機能について説明する。本実施形態の制御装置１０は、運転支援情報が重畳された合成画像を表示させるとともに、選択された監視画像を表示装置３に表示させる。
Finally, the display control function will be described. The control device 10 according to the present embodiment displays the composite image on which the driving support information is superimposed, and displays the selected monitoring image on the
本実施形態の表示装置３は、自車両のダッシュボード付近に取り付けられたナビゲーション装置などの車載機器用の液晶ディスプレイを用いることができる。表示装置３は、制御装置１０から供給された俯瞰映像に運転支援情報を重畳させた画像を表示することにより、自車両を目標駐車位置に駐車をするための支援情報を運転者に提供する。車載機器用の液晶ディスプレイは、横長の表示画面を有するものが多いが、運転支援情報は車両の前後方向の動きを表示するために縦長になる。このため、表示装置３のディスプレイにおける表示領域を左右に区分し、一方に合成画像を表示し、他方に監視画像を表示する。このように、表示装置３のディスプレイに、駐車操作を支援する運転支援情報が重畳された合成画像と、駐車操作時に注意を払うべき監視画像を同時に表示できる。なお、操舵角度に応じて監視方向（車両から見る方向）が切り替わるが、カメラ１ａ〜１ｄの高さ位置や取り付け角度が共通するため、運転者がどの方向の画像であるか分からなくなる場合がある。このため、監視方向がどの方向であるのかを監視画像上に矢印などで表示することが好ましい。
As the
このように、合成画像上に重畳された駐車誘導軌道を表示されるとともに、監視画像も表示されるので、運転者は、監視画像により駐車に際して注意すべき方向の状態を確認しつつ、目標駐車位置まで車両を移動させる経路を認識することができる。 In this way, the parking guidance trajectory superimposed on the composite image is displayed, and the monitoring image is also displayed, so that the driver can check the target parking while confirming the state of the direction to be careful when parking with the monitoring image. The route for moving the vehicle to the position can be recognized.
続いて、図３〜図５に基づいて、本実施形態の駐車支援装置１００の動作を具体的に説明する。 Then, based on FIGS. 3-5, operation | movement of the parking assistance apparatus 100 of this embodiment is demonstrated concretely.
図３は本発明の実施形態に係る駐車支援システム１０００の制御手順を示すフローチャート図、図４Ａは駐車操作時に車両の進行方向に応じた撮像方向を示す図、図４Ｂは本実施形態の駐車時の駐車支援処理に係り、車両の操舵角度に応じた撮像方向（監視方向）を示す図、図５は運転支援情報の表示例を示す図である。
FIG. 3 is a flowchart showing a control procedure of the
図３のフローチャートに示す処理は、所定周期で実行される。まず、ステップＳ１０において、制御装置１０は、駐車誘導軌道に沿って自車両を移動させる際の操舵角度を含む車両情報を車両コントローラ２から取得する。
The process shown in the flowchart of FIG. 3 is executed at a predetermined cycle. First, in step S <b> 10, the control device 10 acquires vehicle information including a steering angle when moving the host vehicle along the parking guidance track from the
同ステップＳ１０において、制御装置１０は自車両の位置を算出するとともに、目標駐車位置を決定する。目標駐車位置は、運転者の入力操作により決定されてもよいし、駐車前に停車した位置と停車後の操舵角に基づいて自動的に決定されてもよいし、撮像画像から抽出された駐車領域を区切る白線との位置関係に基づいて自動的に決定されてもよい。決定された目標駐車位置は、座標変換などの画像処理を経て合成画像上に重畳して表示される。 In step S10, the control device 10 calculates the position of the host vehicle and determines the target parking position. The target parking position may be determined by the driver's input operation, may be automatically determined based on the position stopped before parking and the steering angle after stopping, or the parking extracted from the captured image It may be automatically determined based on the positional relationship with the white line that divides the region. The determined target parking position is displayed superimposed on the composite image through image processing such as coordinate conversion.
本例では、図４Ａ，図４Ｂに示すように、自車両が位置Ｖ１で一度停車してから、Ｖ２，Ｖ３の位置を経て目標駐車位置Ｐへ移動し、縦列駐車をする。位置Ｖ１は処理開始時における自車両の現在位置である。この場合において自車両が監視すべき方向は目標駐車位置Ｐの前方の物体Ｏｂ１と後方の物体Ｏｂ２が存在する方向である。 In this example, as shown to FIG. 4A and FIG. 4B, after the own vehicle stops once in the position V1, it moves to the target parking position P through the position of V2, V3, and performs parallel parking. The position V1 is the current position of the host vehicle at the start of processing. In this case, the direction to be monitored by the host vehicle is the direction in which the front object Ob1 and the rear object Ob2 of the target parking position P exist.
続くステップＳ２０において、制御装置１０は自車両の現在位置から目標駐車位置まで移動する場合の最適な駐車誘導軌道を算出する。本ステップＳ２０において、制御装置１０は、生成された駐車誘導軌道と自車両の現在位置から、自車両が駐車誘導軌道をトレースするために必要な操舵角度を取得するとともに、自車両の実際の操舵操作が操舵角度に追従するようにステアリングコントローラ２６１を介して操舵装置２６の制御を行う。
In subsequent step S20, the control device 10 calculates an optimal parking guidance trajectory when moving from the current position of the host vehicle to the target parking position. In step S20, the control device 10 obtains a steering angle necessary for the host vehicle to trace the parking guide track from the generated parking guide track and the current position of the host vehicle, and performs actual steering of the host vehicle. The
ステップＳ３０において、制御装置１０は、カメラ１ａ〜１ｄが起動されていない場合は処理を終了し、カメラ１ａ〜１ｄが起動されている場合にはステップＳ４０へ進む。
In step S30, the control device 10 ends the process when the
ステップＳ４０において、制御装置１０は、自車両が障害物に近接しているか否かを判断する。この判断は、測距装置６から取得した自車両と物体との距離が所定閾値未満である場合には自車両が障害物に接近していると判断してステップＳ１１０に進み、自車両と物体との距離が所定閾値以上である場合には自車両が障害物に接近していないと判断してステップＳ５０へ進む。
In step S40, the control device 10 determines whether or not the host vehicle is close to an obstacle. This determination is made when the distance between the host vehicle and the object acquired from the
自車両が障害物に接近しておらず、本実施形態における操舵角度に応じた監視方向の監視画像を提示する処理を実行しない場合には、制御装置１０は、自車両の進行方向に応じた監視画像を提示する。つまり、制御装置１０は、シフトポジションへ操作入力があり（Ｓ５０）、シフトポジションがリア（Ｒ）である場合には（Ｓ６０でＹｅｓ）、カメラ１ｄによって撮像されたリアビューを表示装置３に表示させる（Ｓ８０）。他方、シフトポジションがリア（Ｒ）以外である場合には（Ｓ６０でＮｏ）、カメラ１ａによって撮像されたフロントビューを表示装置３に表示させる（Ｓ７０）。
When the own vehicle is not approaching the obstacle and the process of presenting the monitoring image in the monitoring direction according to the steering angle in the present embodiment is not executed, the control device 10 responds to the traveling direction of the own vehicle. Present a surveillance image. That is, when there is an operation input to the shift position (S50) and the shift position is the rear (R) (Yes in S60), the control device 10 causes the
具体的に、図４Ａに示すＯｂ１及びＯｂ２が存在しないと仮定すると、制御装置１０は、自車両が現在位置Ｖ１に進むときには、カメラ１ａによって撮像されたフロントビューを表示させる。次に、自車両が現在位置Ｖ１で停止し、シフトポジションがリアに入力され、自車両が現在位置Ｖ１から後退を開始すると、位置Ｖ２，Ｖ３を経て目標駐車位置Ｐに至るまで、制御装置１０は、カメラ１ｄによって撮像されたリアビューを表示させる。
Specifically, assuming that Ob1 and Ob2 illustrated in FIG. 4A do not exist, the control device 10 displays the front view captured by the
他方、ステップＳ４０において自車両と障害物とが接近したと判断され、さらにステップＳ１１０でシフトポジションに操作入力がされた場合には、ステップＳ１２０へ進み、制御装置１０は操舵角度に応じた監視方向の監視画像を提示する処理を実行する。 On the other hand, if it is determined in step S40 that the host vehicle and the obstacle have approached and further an operation input is made to the shift position in step S110, the process proceeds to step S120, and the control device 10 monitors the direction of monitoring according to the steering angle. The process of presenting the monitoring image is executed.
シフトポジションがリア（Ｒ）以外である場合には（Ｓ１２０でＮｏ）、制御装置１０は駐車誘導軌道に沿って自車両を移動させる際に車両側から取得した操舵角度を取得する（Ｓ１３０）。続いて、ステップＳ１４０において、制御装置１０は、操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する。そして、ステップＳ１５０において、自車両から監視方向を見る監視画像を取得し、これを表示装置３に表示させる。監視画像は、リア以外のシフトポジションに応じてリア以外のカメラ１ａ〜１ｃにより撮像されたものを表示してもよいし、ｄにより撮像された監視情報を表示してもよい。
When the shift position is other than rear (R) (No in S120), the control device 10 acquires the steering angle acquired from the vehicle side when moving the host vehicle along the parking guidance track (S130). Subsequently, in step S140, the control device 10 calculates a monitoring direction for viewing an obstacle that may exist around the host vehicle based on the steering angle. In step S150, a monitoring image for viewing the monitoring direction is acquired from the host vehicle and displayed on the
同様に、シフトポジションがリア（Ｒ）である場合にも（Ｓ１２０でＹｅｓ）、制御装置１０は、駐車誘導軌道に沿って自車両を移動させる際に車両側から取得した操舵角度を取得する（Ｓ１６０）。続いて、ステップＳ１７０において、制御装置１０は、操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する。そして、ステップＳ１８０において、制御装置１０は、カメラ１ａの撮像方向が監視方向を向くようにカメラ駆動装置７を駆動させ、自車両から監視方向を見る監視画像を取得し、これを表示装置３に表示する。監視画像は、リアのシフトポジションに応じてリアカメラ１ｄにより撮像されたものを表示してもよいし、リア以外のカメラ１a〜１ｃにより撮像された監視情報を表示してもよい。
Similarly, when the shift position is rear (R) (Yes in S120), the control device 10 acquires the steering angle acquired from the vehicle side when moving the host vehicle along the parking guidance track ( S160). Subsequently, in step S170, the control device 10 calculates a monitoring direction for viewing an obstacle that may exist around the host vehicle, based on the steering angle. In step S180, the control device 10 drives the
具体的に、図４Ｂに示すように、自車両が現在位置Ｖ１で停止し、シフトポジションがリアに入力され、自車両が現在位置Ｖ１から後退を開始すると、位置Ｖ２に至るまでの操舵角度に応じて監視方向Ａａが算出され、この監視方向Ａａを見る監視画像（Ｅａ領域の画像）が取得される。そして、取得された監視画像が表示装置３に提示される。監視画像はカメラ１ａの撮像方向が設定された後の撮像画像であってもよいし、カメラ１ａの撮像した撮像画像から切り出した画像であってもよい。また、障害物Ｏｂ１（例えば他車両）の後方右端部の像を含むのであれば、カメラ１ｂの撮像画像を用いることもできる。
Specifically, as shown in FIG. 4B, when the host vehicle stops at the current position V1, the shift position is input to the rear, and the host vehicle starts to reverse from the current position V1, the steering angle until the position V2 is reached. Accordingly, the monitoring direction Aa is calculated, and a monitoring image (image of the Ea region) that views the monitoring direction Aa is acquired. Then, the acquired monitoring image is presented on the
さらに、位置Ｖ２から位置Ｖ３に至るまでの操舵角度に応じて監視方向Ａｄが算出され、この監視方向Ａｄに沿った監視画像Ｅｄが取得される。そして、取得された監視画像が表示装置３に提示される。監視画像Ｅｄはカメラ１ｄの撮像画像であってもよいし、カメラ１ｄの撮像方向が設定された後の撮像画像であってもよいし、カメラ１ｄの撮像した撮像画像から切り出した画像であってもよい。また、図４Ｂでは車両の真後ろを監視方向として設定しているが、これを左右に所定角度だけ回転させた方向を監視方向として操舵角度に対応づけることもできる。
Further, the monitoring direction Ad is calculated according to the steering angle from the position V2 to the position V3, and the monitoring image Ed along the monitoring direction Ad is acquired. Then, the acquired monitoring image is presented on the
同様に、シフトポジションがフロントの場合であっても、同様に監視方向情報１３１を参照し、操舵角度に応じた監視方向を算出し、監視画像を取得することができる。 Similarly, even when the shift position is the front, it is possible to similarly refer to the monitoring direction information 131, calculate the monitoring direction according to the steering angle, and acquire the monitoring image.
次に、図５に基づいて、ステップＳ７０、Ｓ８０、Ｓ１５０、Ｓ１８０における表示処理の態様を説明する。制御装置１０は、取得された監視画像を、運転支援情報が重畳された合成画像とともに、表示装置３に表示する。
Next, based on FIG. 5, the aspect of the display process in steps S70, S80, S150, and S180 will be described. The control device 10 displays the acquired monitoring image on the
図５は、自車両が図４Ｂに示すＶ１からＶ２へ移動する際に表示装置３の画面に表示される運転支援情報Ｍを示す。図５に示すように、運転支援情報Ｍの左側の領域には、自車両Ｖの画と駐車誘導軌道Ｓとが重畳された自車両を所定視点から俯瞰した合成画像Ｋが表示されるとともに、運転支援情報Ｍの右側の領域には、Ｖ１からＶ２へ移動する際に操舵角度と連動した物体Ｏｂ１（障害物）の存在する監視方向Ａｂを撮像するカメラ１ｂの撮像画像が監視画像Ｑとして表示されている。
FIG. 5 shows driving support information M displayed on the screen of the
図６は、駐車位置が広く切り返しの運転操作が不要な場合の車両Ｖ１の動きを示す図であり、図７は、駐車位置が狭く切り返しの運転操作が必要場合の車両Ｖ１の動きを示す図である。 FIG. 6 is a diagram illustrating the movement of the vehicle V1 when the parking position is wide and the turning operation is not necessary, and FIG. 7 is a diagram illustrating the movement of the vehicle V1 when the parking position is narrow and the turning operation is necessary. It is.
切り返しの運転操作が不要な場合には、図６に示すように、車両Ｖ１はポイントＴ０を通過してポイントＴ１に至り、リアのシフトポジションに切り替えて後退を開始する。後退中に障害物が接近していないのであれば、リアのシフトポジションに応じてリアビューを表示してもよい。そして、後退を開始した後に、ポイントＴ２において障害物Ｏｂ１が接近していると判断された場合には、操舵角度に応じた監視方向を算出し、図５に示す監視方向を見る監視画像Ｑを表示する。さらに、ポイントＴ３において障害物の接近状態が解除され、障害物との距離が所定距離以上離隔したと判断された場合には、シフトポジションがリアであることに対応して、ポイントＴ４で停止するまでリアビューを表示してもよい。 When the switching operation is not required, as shown in FIG. 6, the vehicle V1 passes through the point T0 to reach the point T1, and switches to the rear shift position to start reverse. If no obstacle is approaching during reverse, the rear view may be displayed according to the rear shift position. When it is determined that the obstacle Ob1 is approaching at the point T2 after the start of the reverse, the monitoring direction corresponding to the steering angle is calculated, and the monitoring image Q for viewing the monitoring direction shown in FIG. indicate. Furthermore, when the approaching state of the obstacle is canceled at the point T3 and it is determined that the distance from the obstacle is more than a predetermined distance, the shift position is stopped at the point T4 corresponding to the rear position. You may display the rear view.
切り返しの運転操作が必要な場合には、図７に示すように、車両Ｖ１はポイントＴ０を通過してポイントＴ１に至り、リアのシフトポジションに切り替えて後退を開始して、ポイントＴ２へ至る。後退中に障害物が接近していないのであれば、リアのシフトポジションに応じてリアビューを表示してもよい。本例では、駐車位置のエリアが狭いので、ポイントＴ２に至った後に、切り返しをするために前進と後退を繰り返す。本例では、ポイントＴ２からポイントＴ３へ前進する。このポイントＴ３において障害物Ｏｂ１が接近していると判断された場合には、操舵角度に応じた監視方向を算出し、図５に示す監視方向を見る監視画像Ｑを表示する。本例では、障害物との接近状態が解除されるポイントＴ４に至るまで監視方向を見る監視画像Ｑを表示する。その後、Ｔ５からＴ６を経てＴ７に至るまで、必要な回数だけ前進と後退をして切り返し操作を行う。この間、障害物との接近状態が検出されるたびに監視方向を見る監視画像Ｑを表示してもよいし、最初に接近状態が検出された誘導軌道（ポイントＴ３からＴ４に至る太い破線で表示した誘導軌道）においてのみ監視方向を見る監視画像Ｑを表示してもよい。なお、ポイントＴ４において障害物の接近状態が解除され、障害物との距離が所定距離以上離隔したと判断された場合には、シフトポジションがリアであることに対応して、ポイントＴ５に至るまでリアビューを表示してもよい。 When the turning operation is required, as shown in FIG. 7, the vehicle V1 passes through the point T0 to reach the point T1, switches to the rear shift position, starts moving backward, and reaches the point T2. If no obstacle is approaching during reverse, the rear view may be displayed according to the rear shift position. In this example, since the area of the parking position is narrow, after reaching point T2, forward and backward are repeated in order to switch back. In this example, the vehicle advances from point T2 to point T3. When it is determined that the obstacle Ob1 is approaching at this point T3, the monitoring direction corresponding to the steering angle is calculated, and the monitoring image Q for viewing the monitoring direction shown in FIG. 5 is displayed. In this example, the monitoring image Q that displays the monitoring direction until the point T4 at which the approaching state with the obstacle is released is displayed. After that, from T5 through T6 to T7, the reversing operation is performed by moving forward and backward as many times as necessary. During this time, each time an approach state with an obstacle is detected, a monitoring image Q for viewing the monitoring direction may be displayed, or a guide trajectory in which an approach state is detected first (displayed with a thick broken line from T3 to T4) The monitoring image Q for viewing the monitoring direction may be displayed only in the guided trajectory). If it is determined that the approaching state of the obstacle is released at the point T4 and the distance from the obstacle is more than a predetermined distance, the shift position is rear and the point reaches the point T5. A rear view may be displayed.
なお、切り返しの運転操作が必要である場合の処理と、切り替えしの運転操作が必要でない場合の処理とは、図３に示すステップＳ１０において、ユーザが「広い駐車スペースへの縦列駐車モード」又は「狭い駐車スペースへの縦列駐車モード」の何れかを選択して入力してもよいし、撮像画像やソナーによる検出結果から駐車スペースの大きさを検出し、車両情報に含まれる自車両の大きさとの比較に基づいて「広い駐車スペースへの縦列駐車モード」又は「狭い駐車スペースへの縦列駐車モード」であるかを自動的に判断してもよい。制御装置１０は、「広い駐車スペースへの縦列駐車モード」又は「狭い駐車スペースへの縦列駐車モード」に応じた演算手法を用いて、現在位置から目標駐車位置へ移動する際の駐車誘導軌道を含む駐車時における運転支援情報を生成することができる。 In addition, the process in the case where the switching operation is necessary and the process in the case where the switching operation is not necessary are performed in step S10 shown in FIG. Either “Parallel parking mode to narrow parking space” may be selected and input, or the size of the parking space is detected from the detection result of the captured image or sonar, and the size of the own vehicle included in the vehicle information Based on the comparison, it may be automatically determined whether the “parallel parking mode for a wide parking space” or the “parallel parking mode for a narrow parking space”. The control device 10 uses the calculation method corresponding to the “parallel parking mode to a wide parking space” or the “parallel parking mode to a narrow parking space” to determine a parking guidance trajectory when moving from the current position to the target parking position. Driving assistance information at the time of parking including can be generated.
本発明は以上のように構成され、以上のように作用するので、以下の効果を奏する。 Since this invention is comprised as mentioned above and acts as mentioned above, there exist the following effects.
本実施形態の駐車支援装置１００によれば、駐車操作開始から目標駐車位置に駐車するまでの間に、注意すべき監視方向を操舵角度に基づいて算出し、自車両から監視方向を見た監視画像Ｑと、駐車誘導軌道を含む自車両を俯瞰する合成画像Ｋとを同時に表示させるので、自車両の進行方向とは異なる方向に障害物があったとしても、その障害物を確認しながら目標駐車位置に自車両を移動させることができる。 According to the parking assist device 100 of the present embodiment, the monitoring direction to be noted is calculated based on the steering angle between the start of the parking operation and the parking at the target parking position, and the monitoring is performed by looking at the monitoring direction from the own vehicle. Since the image Q and the composite image K overlooking the host vehicle including the parking guidance track are displayed at the same time, even if there is an obstacle in a direction different from the traveling direction of the host vehicle, the target is confirmed while checking the obstacle. The host vehicle can be moved to the parking position.
このように、自車両の駐車をしようとする運転者に適切な情報を常時提供することができるので、運転者は駐車誘導軌道の全体を認識しつつ、移動中の各タイミングにおいて注意すべき障害物の状態を目視することができる。 In this way, since it is possible to always provide appropriate information to the driver who wants to park the host vehicle, the driver should be aware of the entire parking guidance trajectory and should be careful at each timing while moving. The state of the object can be visually observed.
また、本発明に係る本実施形態の駐車支援装置１００によれば、予め、操舵角度と監視方向とを予め対応づけた監視方向情報１３１を定義しておくことにより、処理の迅速化を図ることができる。 Moreover, according to the parking assistance apparatus 100 of this embodiment which concerns on this invention, speeding-up of a process is achieved by defining the monitoring direction information 131 which matched the steering angle and the monitoring direction beforehand. Can do.
本発明に係る本実施形態の駐車支援装置１００によれば、カメラ１ａ〜１ｄの撮像方向が監視方向に設定され、このカメラ１ａ〜１ｄによって撮像された撮像画像を監視画像として取得するので、駐車時の車両の向きに応じた適切な監視方向をカメラ１ａ〜１ｄの撮像画像によって監視することができる。
According to the parking assistance device 100 of the present embodiment according to the present invention, the imaging direction of the
本発明に係る本実施形態の駐車支援装置１００によれば、監視方向との差が小さい撮像方向を撮像するカメラ１ａ〜１ｄの撮像画像を監視画像として取得することにより、カメラ駆動装置７を設けなくても、監視方向に近い方向を見る監視画像を取得することができる。また、カメラ１ａ〜１ｄの撮像画像の中から監視画像を選択することにより、監視画像を迅速に取得することができる。このため、駐車時において注意すべき監視画像を迅速に提示させることができる。
According to the parking assistance device 100 of the present embodiment related to the present invention, the
本発明に係る本実施形態の駐車支援装置１００によれば、監視方向を撮像する所定範囲の画像をカメラ１ａ〜１ｄの撮像画像から切り出して監視画像として取得することによりカメラ駆動装置７を設けなくても、監視方向を見た監視画像を取得することができる。
According to the parking assistance device 100 of the present embodiment related to the present invention, the
＜第２実施形態＞
以下、本発明の第２の実施形態を図面に基づいて説明する。第１実施形態は自車両を駐車位置に移動させる駐車操作時に関するものであったが、第２実施形態は、自車両を駐車位置から他の位置へ移動させる出車操作時に関するものである。ここでは、重複した説明を避けるため、異なる点を中心に説明する。
Second Embodiment
Hereinafter, a second embodiment of the present invention will be described with reference to the drawings. The first embodiment relates to a parking operation that moves the host vehicle to the parking position, but the second embodiment relates to a departure operation that moves the host vehicle from the parking position to another position. Here, in order to avoid redundant description, different points will be mainly described.
本実施形態の駐車支援装置の構成は、図１に示す第１実施形態の駐車支援装置の構成と共通する。本実施形態の駐車支援装置１００の制御装置１０は、撮像画像取得機能と、合成画像生成機能と、運転支援情報生成機能と、監視方向算出機能と、監視画像取得機能と、表示制御機能とを備えている。 The configuration of the parking support apparatus of the present embodiment is common to the configuration of the parking support apparatus of the first embodiment shown in FIG. The control device 10 of the parking assistance device 100 of the present embodiment includes a captured image acquisition function, a composite image generation function, a driving support information generation function, a monitoring direction calculation function, a monitoring image acquisition function, and a display control function. I have.
このうち、本実施形態の運転支援情報生成機能は、現在の駐車位置から他の位置へ移動する際の車両情報に基づいて、自車両の現在の駐車位置及びこの駐車位置から他の位置へ移動する際の出車誘導軌道を含む出車時における運転支援情報を生成する。つまり、制御装置１０は、駐車位置から車両を出す（パークアウトする）際の運転支援情報を生成する。特に限定されないが、この出車誘導軌道は、出車操作の開始後、前進又は後退を開始する前進又は後退開始位置と、最終的に移動する走行道路などの他の位置と、途中で切り返すための出車途中位置と、ステアリング操舵に連動した線である操舵連動線と、他の位置に至る理想的な進路予想線とを含む。特に限定されないが、制御装置１０は、クロソイド曲線、円弧、直線の組合せ、又は予め定義された任意の軌跡を用いて現在位置（駐車位置）から他の位置までの出車誘導軌道を算出する。これらの出車誘導軌道を算出する手法は、出願時において知られている駐車誘導手法を用いることができる。 Among these, the driving support information generation function of the present embodiment moves from the current parking position to the other position based on the vehicle information when moving from the current parking position to the other position. Driving assistance information at the time of departure including the departure guidance track at the time of departure is generated. That is, the control apparatus 10 produces | generates the driving assistance information at the time of taking out a vehicle from a parking position (parking out). Although not particularly limited, this departure guidance track is used to switch back to the forward or backward start position where the forward or backward starts and other positions such as the travel road that finally moves after starting the departure operation. Of the vehicle, a steering interlock line that is a line interlocked with steering, and an ideal course prediction line that reaches another position. Although not particularly limited, the control device 10 calculates a departure guidance trajectory from the current position (parking position) to another position using a clothoid curve, a circular arc, a combination of straight lines, or a predetermined arbitrary trajectory. A parking guidance method known at the time of filing can be used as a method for calculating these departure guidance tracks.
また、監視方向算出機能は、出庫誘導軌道に沿って自車両を移動させる際に車両側から取得した操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する。なお、第１実施形態において説明した各処理は、駐車位置から車を出す出車時の操作においても適用可能であるので、第１実施形態の説明を援用する。 In addition, the monitoring direction calculation function is a monitor for seeing obstacles that may exist around the host vehicle based on the steering angle acquired from the vehicle side when moving the host vehicle along the exit guidance track. Calculate the direction. Note that each process described in the first embodiment can also be applied to an operation when leaving the vehicle from the parking position, and thus the description of the first embodiment is cited.
続いて、図８〜図１０に基づいて、本実施形態の駐車支援装置１００の動作を具体的に説明する。 Then, based on FIGS. 8-10, operation | movement of the parking assistance apparatus 100 of this embodiment is demonstrated concretely.
図８は本発明の実施形態に係る駐車支援システム１０００の制御手順を示すフローチャート図、図９Ａは出車操作時に車両の進行方向に応じた撮像方向を示す図、図９Ｂは本実施形態の出車時の駐車支援処理に係り、車両の操舵角度に応じた撮像方向（監視方向）を示す図、図１０は出車時における運転支援情報の表示例を示す図である。
FIG. 8 is a flowchart showing a control procedure of the
図８のフローチャートに示す処理は、ステップ２０において、算出される軌道が駐車位置から他の位置へ移動するための出車誘導軌道である点が異なるが、他の処理は第１実施形態と共通する。 The process shown in the flowchart of FIG. 8 differs in that the calculated track is a departure guidance track for moving from the parking position to another position in step 20, but the other processes are the same as in the first embodiment. To do.
同ステップＳ１０において、制御装置１０は自車両の位置を算出するとともに、駐車位置以外の他の位置を決定する。他の位置としては、駐車位置と並列に延びる道路の所定位置などを設定することができる。その他の位置は、運転者の入力操作により決定されてもよいし、駐車操作時において前進後に一時停車した位置を記憶しておき、この位置を他の位置として自動的に決定してもよいし、撮像画像から抽出された駐車領域を区切る白線との位置関係に基づいて自動的に決定されてもよい。決定された出車時の他の位置は、座標変換などの画像処理を経て合成画像上に重畳して表示される。 In step S10, the control device 10 calculates the position of the host vehicle and determines a position other than the parking position. As another position, a predetermined position of a road extending in parallel with the parking position can be set. The other positions may be determined by the driver's input operation, or the position where the vehicle is temporarily stopped after advancement during the parking operation is stored, and this position may be automatically determined as another position. Alternatively, it may be automatically determined based on the positional relationship with the white line separating the parking area extracted from the captured image. The determined other position at the time of departure is displayed superimposed on the composite image through image processing such as coordinate conversion.
本例では、図９Ａ，図９Ｂに示すように、自車両が駐車位置Ｖ１で駐車している状態からＶ２の位置を経て他の位置Ｖ３へ移動する。本処理において、位置Ｖ１は処理開始時における自車両の現在位置である。この場合において自車両が監視すべき方向は駐車位置Ｖ１の前方の物体Ｏｂ１と後方の物体Ｏｂ２が存在する方向である。ちなみに、前進だけで駐車位置Ｖ１から他の位置Ｖ３へ移動できるのであれば、監視すべき方向は前方の物体Ｏｂ１だけであるが、切り返しのために後退する必要がある場合には、監視すべき方向は前方の物体Ｏｂ１及び後方の物体Ｏｂ２が存在する方向である。 In this example, as shown to FIG. 9A and FIG. 9B, it moves to the other position V3 through the position of V2 from the state in which the own vehicle is parked at the parking position V1. In this process, the position V1 is the current position of the host vehicle at the start of the process. In this case, the direction to be monitored by the host vehicle is the direction in which the front object Ob1 and the rear object Ob2 of the parking position V1 exist. By the way, if it is possible to move from the parking position V1 to another position V3 only by moving forward, the direction to be monitored is only the front object Ob1, but if it is necessary to move backward for switching, it should be monitored The direction is the direction in which the front object Ob1 and the rear object Ob2 exist.
続くステップＳ２０において、制御装置１０は自車両の現在位置である駐車位置Ｖ１から他の位置Ｖ３まで移動する場合の最適な出車誘導軌道を算出する。本ステップＳ２０において、制御装置１０は、生成された出車誘導軌道と自車両の現在位置から、自車両が出車誘導軌道をトレースするために必要な操舵角度を取得するとともに、自車両の実際の操舵操作が操舵角度に追従するようにステアリングコントローラ２６１を介して操舵装置２６の制御を行う。
In subsequent step S20, the control device 10 calculates an optimal departure guidance track when moving from the parking position V1 which is the current position of the host vehicle to another position V3. In step S20, the control device 10 obtains a steering angle necessary for the own vehicle to trace the departure guidance track from the generated departure guidance track and the current position of the own vehicle, and the actual state of the own vehicle. The
ステップＳ３０において、制御装置１０は、カメラ１ａ〜１ｄが起動されていない場合は処理を終了し、カメラ１ａ〜１ｄが起動されている場合にはステップＳ４０へ進む。
In step S30, the control device 10 ends the process when the
ステップＳ４０において、制御装置１０は、自車両が障害物に近接しているか否かを判断する。この判断は、測距装置６から取得した自車両と物体との距離が所定閾値未満である場合には自車両が障害物に接近していると判断してステップＳ１１０に進み、自車両と物体との距離が所定閾値以上である場合には自車両が障害物に接近していないと判断してステップＳ５０へ進む。
In step S40, the control device 10 determines whether or not the host vehicle is close to an obstacle. This determination is made when the distance between the host vehicle and the object acquired from the
自車両が障害物に接近しておらず、本実施形態における操舵角度に応じた監視方向の監視画像を提示する処理を実行しない場合には、制御装置１０は、自車両の進行方向に応じた監視画像を提示する。つまり、制御装置１０は、シフトポジションへ操作入力があり（Ｓ５０）、シフトポジションがリア（Ｒ）である場合には（Ｓ６０でＹｅｓ）、カメラ１ｄによって撮像されたリアビューを表示装置３に表示させる（Ｓ８０）。他方、シフトポジションがリア（Ｒ）以外である場合には（Ｓ６０でＮｏ）、カメラ１ａによって撮像されたフロントビューを表示装置３に表示させる（Ｓ７０）。
When the own vehicle is not approaching the obstacle and the process of presenting the monitoring image in the monitoring direction according to the steering angle in the present embodiment is not executed, the control device 10 responds to the traveling direction of the own vehicle. Present a surveillance image. That is, when there is an operation input to the shift position (S50) and the shift position is the rear (R) (Yes in S60), the control device 10 causes the
具体的に、図９Ａに示すＯｂ１及びＯｂ２が存在しないと仮定すると、制御装置１０は、自車両が駐車位置Ｖ１から他の位置に進むときには、カメラ１ａによって撮像されたフロントビューを表示させる。他の位置Ｖ３に至る位置Ｖ２においてもフロントビューを表示させる。
Specifically, assuming that Ob1 and Ob2 shown in FIG. 9A do not exist, the control device 10 displays the front view imaged by the
他方、ステップＳ４０において自車両と障害物とが接近したと判断され、さらにステップＳ１１０でシフトポジションに操作入力がされた場合には、ステップＳ１２０へ進み、制御装置１０は操舵角度に応じた監視方向の監視画像を提示する処理を実行する。 On the other hand, if it is determined in step S40 that the host vehicle and the obstacle have approached and further an operation input is made to the shift position in step S110, the process proceeds to step S120, where the control device 10 monitors the direction of monitoring according to the steering angle The process of presenting the monitoring image is executed.
シフトポジションがリア（Ｒ）以外である場合には（Ｓ１２０でＮｏ）、制御装置１０は出車誘導軌道に沿って自車両を移動させる際に車両側から取得した操舵角度を取得する（Ｓ１３０）。続いて、ステップＳ１４０において、制御装置１０は、操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する。そして、ステップＳ１５０において、自車両から監視方向を見る監視画像を取得し、これを表示装置３に表示させる。監視画像は、リアのシフトポジションに応じてリアカメラ１ｄにより撮像されたものを表示してもよいし、リア以外のカメラ１ａ〜１ｃにより撮像された監視情報を表示してもよい。
When the shift position is other than rear (R) (No in S120), the control device 10 acquires the steering angle acquired from the vehicle side when moving the host vehicle along the departure guidance track (S130). . Subsequently, in step S140, the control device 10 calculates a monitoring direction for viewing an obstacle that may exist around the host vehicle based on the steering angle. In step S150, a monitoring image for viewing the monitoring direction is acquired from the host vehicle and displayed on the
同様に、シフトポジションがリア（Ｒ）である場合にも（Ｓ１２０でＹｅｓ）、制御装置１０は、出車誘導軌道に沿って自車両を移動させる際に車両側から取得した操舵角度を取得する（Ｓ１６０）。続いて、ステップＳ１７０において、制御装置１０は、操舵角度に基づいて、自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する。そして、ステップＳ１８０において、制御装置１０は、カメラ１ａの撮像方向が監視方向を向くようにカメラ駆動装置７を駆動させ、自車両から監視方向を見る監視画像を取得し、これを表示装置３に表示する。監視画像は、フロントのシフトポジションに応じてフロントカメラ１ａにより撮像されたものを表示してもよいし、フロント以外のカメラ１ｂ〜１ｄにより撮像された監視情報を表示してもよい。
Similarly, when the shift position is rear (R) (Yes in S120), the control device 10 acquires the steering angle acquired from the vehicle side when moving the host vehicle along the departure guidance track. (S160). Subsequently, in step S170, the control device 10 calculates a monitoring direction for viewing an obstacle that may exist around the host vehicle, based on the steering angle. In step S180, the control device 10 drives the
具体的に、図９Ｂに示すように、自車両が駐車位置Ｖ１で駐車していた状態から、シフトポジションがドライブに入力され、自車両が駐車位置Ｖ１から前進を開始すると、位置Ｖ２に至るまでの操舵角度に応じて監視方向Ａｋが算出され、この監視方向Ａｋを見る監視画像（Ｅｋ領域の画像）が取得される。そして、取得された監視画像が表示装置３に提示される。監視画像はカメラ１ａの撮像方向が設定された後の撮像画像であってもよいし、カメラ１ａの撮像した撮像画像から切り出した画像であってもよい。また、障害物Ｏｂ１（例えば他車両）の後方右端部の像を含むのであれば、カメラ１ｂの撮像画像を用いることもできる。
Specifically, as shown in FIG. 9B, when the host vehicle is parked at the parking position V1, the shift position is input to the drive, and when the host vehicle starts moving forward from the parking position V1, the vehicle reaches the position V2. The monitoring direction Ak is calculated in accordance with the steering angle, and a monitoring image (an image in the Ek region) for viewing the monitoring direction Ak is acquired. Then, the acquired monitoring image is presented on the
さらに、位置Ｖ２から位置Ｖ３に至るまでの操舵角度に応じて監視方向Ａｋが順次算出され、この監視方向Ａｋに沿った監視画像Ｅｋが取得される。図９Ｂには一方向の監視方向Ａｋを示しているが、この監視方向Ａｋは車両の位置に応じて順次変化する。そして、取得された監視画像が表示装置３に提示される。
Further, the monitoring direction Ak is sequentially calculated according to the steering angle from the position V2 to the position V3, and the monitoring image Ek along the monitoring direction Ak is acquired. FIG. 9B shows a monitoring direction Ak in one direction. The monitoring direction Ak changes sequentially according to the position of the vehicle. Then, the acquired monitoring image is presented on the
同様に、シフトポジションがリアの場合であっても、同様に監視方向情報１３１を参照し、操舵角度に応じた監視方向を算出し、監視画像を取得することができる。 Similarly, even when the shift position is the rear, it is possible to similarly refer to the monitoring direction information 131, calculate the monitoring direction according to the steering angle, and acquire the monitoring image.
次に、図１０に基づいて、ステップＳ７０、Ｓ８０、Ｓ１５０、Ｓ１８０における表示処理の態様を説明する。制御装置１０は、取得された監視画像を、運転支援情報が重畳された合成画像とともに、表示装置３に表示する。
Next, based on FIG. 10, the aspect of the display process in steps S70, S80, S150, and S180 will be described. The control device 10 displays the acquired monitoring image on the
図１０は、自車両が図９Ｂに示すＶ１からＶ３へ移動する際に表示装置３の画面に表示される運転支援情報Ｍを示す。図１０に示すように、運転支援情報Ｍの左側の領域には、自車両Ｖの画と出車誘導軌道Ｔとが重畳された自車両を所定視点から俯瞰した合成画像Ｋが表示されるとともに、運転支援情報Ｍの右側の領域には、Ｖ１からＶ２へ移動する際に操舵角度に連動した物体Ｏｂ１（障害物）の存在する監視方向Ａｋを撮像するカメラ１ｂの撮像画像が監視画像Ｑとして表示されている。
FIG. 10 shows driving support information M displayed on the screen of the
また、駐車位置から出車する車両Ｖ１の動きは、方向が反対であるものの図６及び図７に示す駐車位置に入車する車両場Ｖ１の動きとほぼ同じである。このため、図６、７を援用して駐車位置から他の位置へ移動する際の車両Ｖ１の動きについて説明する。図６において、車両Ｖ１はポイントＴ３からポイントＴ１へ移動し、図７において車両Ｖ１は、ポイントＴ７からポイントＴ１へ移動する。 The movement of the vehicle V1 leaving the parking position is substantially the same as the movement of the vehicle field V1 entering the parking position shown in FIGS. 6 and 7 although the directions are opposite. Therefore, the movement of the vehicle V1 when moving from the parking position to another position will be described with reference to FIGS. In FIG. 6, the vehicle V1 moves from point T3 to point T1, and in FIG. 7, the vehicle V1 moves from point T7 to point T1.
本実施形態において駐車位置から他の位置へ移動する（出車する）場合に切り返しの運転操作が不要な場合には、図６に示すように、車両Ｖ１はポイントＴ４からＴ３及びＴ２を通過してポイントＴ１に至る。切り返しの運転操作が不要であれば、シフトポジションはフロントのままである。移動中に障害物が接近していないのであれば、フロントのシフトポジションに応じてフロントビューを表示してもよい。ポイントＴ３からＴ２へ至る場合などにおいて障害物が接近していると判断された場合には、操舵角度に応じた監視方向を算出し、図１０に示す監視方向を見る監視画像Ｑを表示する。 In the present embodiment, when the driving operation for turning back is unnecessary when moving from the parking position to another position (departing from the vehicle), the vehicle V1 passes through points T4 to T3 and T2 as shown in FIG. To point T1. If the turning operation is unnecessary, the shift position remains at the front. If an obstacle is not approaching during movement, the front view may be displayed according to the front shift position. When it is determined that an obstacle is approaching from the point T3 to T2, for example, the monitoring direction corresponding to the steering angle is calculated, and the monitoring image Q for viewing the monitoring direction shown in FIG. 10 is displayed.
本実施形態において駐車位置から他の位置へ移動する（出車する）場合に切り返しの運転操作が必要な場合には、図７に示すように、車両Ｖ１はポイントＴ７からポイントＴ４に至るまで切り返しをするために前進と後退を繰り返す。そして、ポイントＴ４からポイントＴ３（図中太い破線で表示）のように障害物が接近していると判断された場合には、操舵角度に応じた監視方向を算出し、図５に示す監視方向を見る監視画像Ｑを表示する。もちろん、ポイントＴ７からポイントＴ４に至るまで切り返し中において、障害物が接近していると判断された場合に操舵角度に応じた監視方向を見る監視画像Ｑを表示してもよい。なお、ポイントＴ７からポイントＴ４に至る過程の後退中において障害物が接近していないのであれば、リアのシフトポジションに応じてリアビューを、フロントのシフトポジションに応じてフロントビューを表示してもよい。 In this embodiment, when a driving operation for turning back is necessary when moving from the parking position to another position (departing from the vehicle), the vehicle V1 turns back from point T7 to point T4 as shown in FIG. Repeat forwards and backwards to make sure. When it is determined that an obstacle is approaching as indicated by points T4 to T3 (indicated by a thick broken line in the figure), a monitoring direction corresponding to the steering angle is calculated, and the monitoring direction shown in FIG. A monitoring image Q is displayed. Of course, when switching from the point T7 to the point T4, when it is determined that an obstacle is approaching, the monitoring image Q for viewing the monitoring direction according to the steering angle may be displayed. Note that if the obstacle is not approaching during the backward movement in the process from the point T7 to the point T4, the rear view may be displayed according to the rear shift position, and the front view may be displayed according to the front shift position. .
なお、切り返しの運転操作が必要である場合の処理と、切り替えしの運転操作が必要でない場合の処理とは、図８に示すステップＳ１０において、ユーザが「広い駐車スペースからの縦列出車モード」又は「狭い駐車スペースからの縦列出車モード」の何れかを選択して入力してもよいし、撮像画像やソナーによる検出結果から駐車スペースの大きさを検出し、車両情報に含まれる自車両の大きさとの比較に基づいて「広い駐車スペースからの縦列出車モード」又は「狭い駐車スペースからの縦列出車モード」であるかを自動的に判断してもよい。なお、広い駐車スペースからの出車は特に問題がないので、狭い駐車スペースからの出車のときのみ、監視方向を見る監視画像Ｑを表示するようにしてもよい。 Note that the processing when the switching operation is required and the processing when the switching operation is not necessary are performed in step S10 shown in FIG. ”Or“ Parallel departure mode from a narrow parking space ”may be selected and input, or the size of the parking space is detected from the captured image or the detection result by sonar and included in the vehicle information. Based on the comparison with the size of the host vehicle, it may be automatically determined whether it is “tandem departure mode from a wide parking space” or “tandem departure mode from a narrow parking space”. Note that there is no particular problem with leaving a large parking space, so the monitoring image Q for viewing the monitoring direction may be displayed only when leaving a narrow parking space.
本発明は以上のように構成され、以上のように作用するので、以下の効果を奏する。 Since this invention is comprised as mentioned above and acts as mentioned above, there exist the following effects.
本実施形態の駐車支援装置１００によれば、出車操作が開始され車両が駐車位置Ｖ１から他の位置へ移動するまでの間に、注意すべき監視方向を操舵角度に基づいて算出し、自車両から監視方向を見た監視画像Ｑと、出車誘導軌道を含む自車両を俯瞰する合成画像Ｋとを同時に表示させるので、自車両の進行方向とは異なる方向に障害物があったとしても、その障害物を確認しながら目標となる他の位置に自車両を移動させることができる。 According to the parking assist device 100 of the present embodiment, the monitoring direction to be noted is calculated based on the steering angle until the departure operation is started and the vehicle moves from the parking position V1 to another position. Since the monitoring image Q viewed from the vehicle and the composite image K overlooking the host vehicle including the departure guidance track are displayed at the same time, even if there is an obstacle in a direction different from the traveling direction of the host vehicle The host vehicle can be moved to another target position while checking the obstacle.
このように、自車両の出車をしようとする運転者に適切な情報を常時提供することができるので、運転者は出車誘導軌道の全体を認識しつつ、移動中の各タイミングにおいて注意すべき障害物の状態を目視することができる。 In this way, it is possible to always provide appropriate information to the driver who intends to leave the vehicle, so that the driver is aware of the departure guidance track and is careful at each timing while moving. The state of the obstacle should be visually confirmed.
また、本発明に係る本実施形態の駐車支援装置１００によれば、予め、操舵角度と監視方向とを予め対応づけた監視方向情報１３１を定義しておくことにより、処理の迅速化を図ることができる。 Moreover, according to the parking assistance apparatus 100 of this embodiment which concerns on this invention, speeding-up of a process is achieved by defining the monitoring direction information 131 which matched the steering angle and the monitoring direction beforehand. Can do.
本発明に係る本実施形態の駐車支援装置１００によれば、カメラ１ａ〜１ｄの撮像方向が監視方向に設定され、このカメラ１ａ〜１ｄによって撮像された撮像画像を監視画像として取得するので、出車時の車両の向きに応じた適切な監視方向をカメラ１ａ〜１ｄの撮像画像によって監視することができる。
According to the parking assistance device 100 of the present embodiment according to the present invention, the imaging direction of the
本発明に係る本実施形態の駐車支援装置１００によれば、監視方向との差が小さい撮像方向を撮像するカメラ１ａ〜１ｄの撮像画像を監視画像として取得することにより、カメラ駆動装置７を設けなくても、監視方向に近い方向を見る監視画像を取得することができる。また、カメラ１ａ〜１ｄの撮像画像の中から監視画像を選択することにより、監視画像を迅速に取得することができる。このため、出車時において注意すべき監視画像を迅速に提示させることができる。
According to the parking assistance device 100 of the present embodiment related to the present invention, the
本発明に係る本実施形態の駐車支援装置１００によれば、監視方向を撮像する所定範囲の画像をカメラ１ａ〜１ｄの撮像画像から切り出して監視画像として取得することによりカメラ駆動装置７を設けなくても、監視方向を見た監視画像を取得することができる。
According to the parking assistance device 100 of the present embodiment related to the present invention, the
なお、以上説明した実施形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。したがって、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。 The embodiment described above is described for facilitating the understanding of the present invention, and is not described for limiting the present invention. Therefore, each element disclosed in the above embodiment is intended to include all design changes and equivalents belonging to the technical scope of the present invention.
すなわち、本明細書では、本発明に係る駐車支援装置の一態様として駐車支援装置１００を例にして説明するが、本発明はこれに限定されるものではない。 That is, in this specification, although the parking assistance apparatus 100 is demonstrated to an example as one aspect | mode of the parking assistance apparatus which concerns on this invention, this invention is not limited to this.
本明細書では、本発明に係る駐車支援装置の一態様として、ＣＰＵ１１、ＲＯＭ１２、ＲＡＭ１３を含む制御装置１０を備える駐車支援装置１００を一例として説明するが、これに限定されるものではない。
In this specification, as an example of the parking assistance device according to the present invention, the parking assistance device 100 including the control device 10 including the
また、本明細書では、本願発明に係る撮像画像取得手段と、合成画像生成手段と、運転支援情報生成手段と、監視方向算出手段と、監視画像取得手段と、表示制御手段とを有する駐車支援装置の一態様として、撮像画像取得機能と、合成画像生成機能と、運転支援情報生成機能と、監視方向算出機能と、監視画像取得機能と、表示制御機能を実行させる制御装置１０を備えた駐車支援装置１００を例にして説明するが、本発明はこれに限定されるものではない。 Moreover, in this specification, the parking assistance which has the captured image acquisition means which concerns on this invention, a synthesized image generation means, a driving assistance information generation means, a monitoring direction calculation means, a monitoring image acquisition means, and a display control means. As one aspect of the device, a parking device including a control device 10 that executes a captured image acquisition function, a composite image generation function, a driving support information generation function, a monitoring direction calculation function, a monitoring image acquisition function, and a display control function. The support apparatus 100 will be described as an example, but the present invention is not limited to this.
本明細書では、測距手段、カメラ駆動部を備える駐車支援装置の一例として、測距装置６とカメラ駆動装置７とを備える駐車支援装置１００を説明するが、本発明はこれに限定されるものではない。
In this specification, the parking support apparatus 100 including the
１０００…駐車支援システム
１ａ〜１ｄ…車載カメラ
１００…駐車支援装置
１０…制御装置
１１…ＣＰＵ
１２…ＲＯＭ
１３…ＲＡＭ
２…車両コントローラ
２１…ポジションスイッチ
２２…操舵角センサ
２３…車速センサ
２４…操舵角センサ
２５…駆動系
２６…操舵装置
２６１…ステアリングコントローラ
３…表示装置
３１…表示切替スイッチ
４…イグニッションスイッチ
５…撮像スイッチ
６…測距装置
７…カメラ駆動装置
Ｍ…駐車支援情報
Ｋ…合成画像
Ｑ…監視画像
Ｖ…自車両
1000 ...
12 ... ROM
13 ... RAM
DESCRIPTION OF
Claims (3)
前記取得した複数の撮像画像に基づいて、前記自車両及びその周囲の状態を所定の視点から見た合成画像を生成する合成画像生成手段と、
前記自車両が目標駐車位置へ移動する際の車両情報に基づいて、前記自車両の現在位置及び当該現在位置から前記目標駐車位置へ移動する際の駐車誘導軌道を含む駐車時における運転支援情報を生成する運転支援情報生成手段と、
前記駐車誘導軌道に沿って前記自車両を移動させる際に車両側から取得した操舵角度に基づいて、前記自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する監視方向算出手段と、
前記自車両から前記監視方向を見る監視画像を取得する監視画像取得手段と、
前記運転支援情報が重畳された前記合成画像を表示させるとともに、前記取得された監視画像を表示させる表示制御手段と、を有し、
前記監視画像取得手段は、前記各カメラの撮像方向と前記監視方向とを比較し、前記監視方向との差が最も小さい撮像方向を撮像するカメラの撮像画像を監視画像として取得することを特徴とする駐車支援装置。 Captured image acquisition means for acquiring captured images of the surroundings of the host vehicle captured by cameras attached to a plurality of locations of the host vehicle;
Based on the acquired plurality of captured images, a composite image generating means for generating a composite image of the host vehicle and its surroundings viewed from a predetermined viewpoint;
Based on vehicle information when the host vehicle moves to the target parking position, driving support information at the time of parking including the current position of the host vehicle and a parking guide track when moving from the current position to the target parking position is obtained. Driving support information generating means for generating;
Monitoring that calculates a monitoring direction for viewing obstacles that may exist around the host vehicle based on a steering angle acquired from the vehicle side when the host vehicle is moved along the parking guidance track. Direction calculating means;
Monitoring image acquisition means for acquiring a monitoring image for viewing the monitoring direction from the host vehicle;
Display the composite image on which the driving support information is superimposed, and display control means for displaying the acquired monitoring image,
The monitoring image acquisition unit compares the imaging direction of each camera with the monitoring direction, and acquires a captured image of a camera that captures an imaging direction with the smallest difference from the monitoring direction as a monitoring image. Parking assistance device.
前記取得した複数の撮像画像に基づいて、前記自車両及びその周囲の状態を所定の視点から見た合成画像を生成する合成画像生成手段と、
前記自車両が現在の駐車位置から他の位置へ移動する際の車両情報に基づいて、前記自車両の現在の駐車位置及び当該駐車位置から前記他の位置へ移動する際の出車誘導軌道を含む出車時における運転支援情報を生成する運転支援情報生成手段と、
前記出庫誘導軌道に沿って前記自車両を移動させる際に車両側から取得した操舵角度に基づいて、前記自車両の周囲に存在する可能性のある障害物を見るための監視方向を算出する監視方向算出手段と、
前記自車両から前記監視方向を見る監視画像を取得する監視画像取得手段と、
前記運転支援情報が重畳された前記合成画像を表示させるとともに、前記取得された監視画像を表示させる表示制御手段と、を有し、
前記監視画像取得手段は、前記各カメラの撮像方向と前記監視方向とを比較し、前記監視方向との差が最も小さい撮像方向を撮像するカメラの撮像画像を監視画像として取得することを特徴とする駐車支援装置。 Captured image acquisition means for acquiring captured images of the surroundings of the host vehicle captured by cameras attached to a plurality of locations of the host vehicle;
Based on the acquired plurality of captured images, a composite image generating means for generating a composite image of the host vehicle and its surroundings viewed from a predetermined viewpoint;
Based on vehicle information when the host vehicle moves from the current parking position to another position, a current parking position of the host vehicle and a departure guidance track when moving from the parking position to the other position are determined. Driving support information generating means for generating driving support information when leaving the vehicle,
Monitoring that calculates a monitoring direction for viewing obstacles that may exist around the host vehicle based on the steering angle acquired from the vehicle side when the host vehicle is moved along the exit guidance track Direction calculating means;
Monitoring image acquisition means for acquiring a monitoring image for viewing the monitoring direction from the host vehicle;
Display the composite image on which the driving support information is superimposed, and display control means for displaying the acquired monitoring image,
The monitoring image acquisition unit compares the imaging direction of each camera with the monitoring direction, and acquires a captured image of a camera that captures an imaging direction with the smallest difference from the monitoring direction as a monitoring image. Parking assistance device.
前記監視方向算出手段は、前記自車両が駐車又は出車する際の操舵角度と前記監視方向とを予め対応づけた監視方向情報を参照し、前記操舵角度に基づいて前記監視方向を算出することを特徴とする駐車支援装置。 In the parking assistance device according to claim 1 or 2,
The monitoring direction calculation means refers to monitoring direction information that associates in advance the steering angle when the host vehicle parks or leaves the vehicle and the monitoring direction, and calculates the monitoring direction based on the steering angle. A parking assistance device characterized by the above.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2012020589A JP5966394B2 (en) | 2011-02-02 | 2012-02-02 | Parking assistance device |
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2011020918 | 2011-02-02 | ||
| JP2011020918 | 2011-02-02 | ||
| JP2012020589A JP5966394B2 (en) | 2011-02-02 | 2012-02-02 | Parking assistance device |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2012176747A JP2012176747A (en) | 2012-09-13 |
| JP5966394B2 true JP5966394B2 (en) | 2016-08-10 |
Family
ID=46978907
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2012020589A Active JP5966394B2 (en) | 2011-02-02 | 2012-02-02 | Parking assistance device |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP5966394B2 (en) |
Families Citing this family (11)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR101362745B1 (en) | 2012-11-12 | 2014-02-14 | 현대오트론 주식회사 | Method of controlling exit in parking lot and apparatus performing the same |
| JP5943207B2 (en) * | 2013-05-20 | 2016-06-29 | マツダ株式会社 | Video display device for vehicle parking operation support |
| JP2015003565A (en) * | 2013-06-19 | 2015-01-08 | トヨタ自動車株式会社 | Parking assist system |
| KR102135900B1 (en) * | 2013-11-29 | 2020-08-26 | 현대모비스(주) | Apparatus and Method for Assisting Parking |
| JP6750365B2 (en) * | 2016-07-22 | 2020-09-02 | 日産自動車株式会社 | Parking assistance method and parking assistance device |
| JP6318204B2 (en) * | 2016-08-31 | 2018-04-25 | 本田技研工業株式会社 | Parking exit support device |
| KR20180047212A (en) | 2016-10-31 | 2018-05-10 | 현대자동차주식회사 | Apparatus and method for controlling parking out of vehicle |
| JP6825521B2 (en) * | 2017-09-19 | 2021-02-03 | 株式会社Ｊｖｃケンウッド | Display control device, display control system, display control method and program |
| CN109996706B (en) | 2017-09-19 | 2021-08-20 | Jvc 建伍株式会社 | Display control apparatus, system, method, and computer-readable storage medium |
| JP6825522B2 (en) * | 2017-09-19 | 2021-02-03 | 株式会社Ｊｖｃケンウッド | Display control device, display control system, display control method and program |
| CN115214638B (en) * | 2021-05-13 | 2024-01-30 | 广州汽车集团股份有限公司 | Active obstacle avoidance control method, device and apparatus for vehicle |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2004274618A (en) * | 2003-03-11 | 2004-09-30 | Calsonic Kansei Corp | Vehicle reversing auxiliary apparatus |
| JP2005223524A (en) * | 2004-02-04 | 2005-08-18 | Nissan Motor Co Ltd | Supervisory apparatus for surrounding of vehicle |
| JP4573242B2 (en) * | 2004-11-09 | 2010-11-04 | アルパイン株式会社 | Driving assistance device |
| JP2008273251A (en) * | 2007-04-25 | 2008-11-13 | Toyota Motor Corp | Vehicular alarm device |
| JP2009190463A (en) * | 2008-02-12 | 2009-08-27 | Toyota Motor Corp | Parking supporting device |
-
2012
- 2012-02-02 JP JP2012020589A patent/JP5966394B2/en active Active
Also Published As
| Publication number | Publication date |
|---|---|
| JP2012176747A (en) | 2012-09-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP5966394B2 (en) | Parking assistance device | |
| JP5998496B2 (en) | Parking assistance device | |
| JP4946631B2 (en) | Start support device, display device | |
| WO2017068699A1 (en) | Parking space line detection method and device | |
| JP5872517B2 (en) | Vehicle periphery display device | |
| JP2012001144A (en) | Parking support device | |
| CN107792177B (en) | Parking assistance device | |
| JP5182137B2 (en) | Vehicle periphery display device | |
| JP2010183170A (en) | Display apparatus for vehicle | |
| CN102416906A (en) | Parking assistance device and method for vehicle rear parking in park | |
| EP3800111A1 (en) | Periphery monitoring device | |
| JP4665721B2 (en) | Parking assistance system | |
| JP5067169B2 (en) | Vehicle parking assistance apparatus and image display method | |
| CN112977428B (en) | Parking assist system | |
| JPWO2019008762A1 (en) | Parking assistance method and parking assistance device | |
| WO2010134240A1 (en) | Parking assistance device, parking assistance method, and parking assistance program | |
| JP2007253819A (en) | Parking backup device | |
| JP2018135028A (en) | Parking assistance device | |
| JP5195692B2 (en) | Driving assistance device | |
| JP7009436B2 (en) | Vehicle display device and parking support system | |
| JP6731022B2 (en) | Parking assistance device, vehicle and parking assistance method | |
| JP4023478B2 (en) | Parking assistance system | |
| JP2012090087A (en) | Driving assist apparatus using vehicle periphery image | |
| JP2005132170A (en) | Parking support device | |
| JP5605605B2 (en) | Vehicle periphery monitoring device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20141224 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20151111 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160105 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160304 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20160329 |
|
| A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20160414 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20160607 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20160620 |
|
| R151 | Written notification of patent or utility model registration |
Ref document number: 5966394 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |