JP7405277B2

JP7405277B2 - 駐車支援方法及び駐車支援装置

Info

Publication number: JP7405277B2
Application number: JP2022558363A
Authority: JP
Inventors: 康啓鈴木; 椋竹田
Original assignee: Nissan Motor Co Ltd
Current assignee: Nissan Motor Co Ltd
Priority date: 2020-11-02
Filing date: 2020-11-02
Publication date: 2023-12-26
Anticipated expiration: 2040-11-02
Also published as: EP4239613A4; WO2022090758A1; BR112023007828A2; CN116508083B; JPWO2022090758A1; CN116508083A; US20240034305A1; EP4239613A1; MX2023004918A; US11884265B1

Description

本発明は、駐車支援方法及び駐車支援装置に関する。

比較的利用頻度が高い駐車場に対し、その駐車スペースの位置情報などを予め登録しておき、次回以降その駐車スペースに駐車する際は、メモリから駐車スペースの位置情報などを読み出し、駐車支援制御を実行する駐車支援装置が知られている（特許文献１）。この駐車支援装置では、車両のフロントバンパ、リヤトランク、左右のドアミラーのそれぞれに設けられた４つのカメラを用い、１つの仮想視点から車両と車両の周辺領域とを見た視点画像、たとえば、車両の直上位置から車両を見下ろすような俯瞰画像を生成し、この画像に映った駐車スペースをメモリに登録したり、メモリに登録されたテンプレート画像と照合したりする。

特開２０１９－２０２６９７号公報

しかしながら、上記従来技術では、１つの俯瞰画像を生成し、これを現在の停止位置で撮像された車両周囲の画像としたり、テンプレート画像として記憶したりする。そのため、現在の車両周囲の画像又は予めメモリに登録したテンプレート画像自体が、照合し易い特徴点が存在しないなど、認識処理に不適合な画像であると、これから駐車すべき目標駐車スペースの認識精度が低下するという問題がある。

本発明が解決しようとする課題は、目標駐車スペースの認識精度が高い駐車支援方法及び駐車支援装置を提供することである。

本発明は、自車両を目標駐車スペースに駐車した状態で、自車両に装着した撮像装置を用いて自車両の周囲を撮像して生成した、前記目標駐車スペースを含む異なる複数の基準画像を予め記憶しておき、その後に自車両を前記目標駐車スペースに駐車させる場合には、現在の自車両の周囲の画像と、前記異なる複数の基準画像の少なくとも一つの基準画像とを照合して前記目標駐車スペースを認識し、認識された目標駐車スペースの位置情報に基づいて、目標駐車スペースに至る自車両の走行動作を自律制御することによって、上記課題を解決する。

本発明によれば、異なる複数の基準画像を用いて目標駐車スペースの照合処理を実行するので、目標駐車スペースの認識精度が高い駐車支援方法及び駐車支援装置を提供することができる。

本発明の駐車支援方法及び駐車支援装置を適用した駐車支援システムの一実施の形態を示すブロック図である。図１の駐車支援システムの撮像装置を示す斜視図である。図１の駐車支援システムの画像処理装置によって生成された俯瞰画像を示すディスプレイの表示画像の一例である。図１の駐車支援システムの測距装置を示す平面図である。本発明の実施形態に係る駐車スペースを規定する線のパターンの例を示す平面図である。駐車スペースの一例を示す平面図である。図１の駐車支援装置に登録する第１基準画像の一例を示す図である。図１の駐車支援装置に登録する第２基準画像の一例を示す図である。図１の駐車支援装置にて実行される駐車制御手順の一例を示すフローチャートである。図６のステップＳ６のサブルーチンの一例を示すフローチャートである。図６のステップＳ６のサブルーチンの他の例を示すフローチャートである。

以下、図面を参照しながら、本発明を実施するための形態例を説明する。図１は、本発明の駐車支援方法及び駐車支援装置を適用した駐車支援システム１の一実施の形態を示すブロック図である。以下に説明する駐車支援システム１は、特に限定はされないが、たとえば自宅の駐車場や勤務先の駐車場のように、比較的頻繁に利用する駐車場の駐車スペースを予め駐車支援システム１に登録しておき、その後、この登録された駐車スペースに自車両を駐車する場合には、予め登録した駐車スペースの情報と自律走行制御を用いて駐車操作を支援するものである。

本実施形態の駐車支援システム１は、駐車支援装置１０と、撮像装置２０と、画像処理装置３０と、測距装置４０と、車両コントローラ５０と、駆動システム６０と、車速センサ７０と、操舵角センサ８０とを備える。これらの装置は、相互に情報の授受を行うためにＣＡＮ（ＣｏｎｔｒｏｌｌｅｒＡｒｅａＮｅｔｗｏｒｋ）その他の車載ＬＡＮによって接続されている。

本実施形態の駐車支援装置１０は、制御装置１１と、出力装置１２とを備える。制御装置１１は、駐車支援プログラムが格納されたＲＯＭ（ＲｅａｄＯｎｌｙＭｅｍｏｒｙ）１１１と、ＲＯＭ１１１に格納されたプログラムを実行するＣＰＵ（ＣｅｎｔｒａｌＰｒｏｃｅｓｓｉｎｇＵｎｉｔ）１１２と、アクセス可能な記憶装置として機能するＲＡＭ（ＲａｎｄｏｍＡｃｃｅｓｓＭｅｍｏｒｙ）１１３とを備えるコンピュータである。本実施形態に係るＲＯＭ１１１には、たとえば自車両が駐車可能な駐車スペースを検出し、この駐車スペースをディスプレイ１２１に表示し、ドライバーにより設定された目標駐車スペースに自車両を駐車するための駐車経路を演算し、自車両をその駐車経路に沿って自律走行などを実行する駐車支援プログラムが格納されている。また、自車両が駐車可能な駐車スペースを検出することに代えて、予め登録しておいた駐車スペースがある場合に、ドライバーがその駐車スペースに駐車する旨の設定がされたときは、その登録された駐車スペースに自車両を駐車するための駐車経路を演算し（又は予め登録されている場合はメモリから読み出し）、自車両をその駐車経路に沿って自律走行などを実行する駐車支援プログラムが格納されている。出力装置１２は、自車両の駐車候補となる駐車スペースなどの画像情報をドライバーに提示するためのディスプレイ１２１と、ドライバーへの指示内容などを音声で出力するためのスピーカ１２２とを備える。

本実施形態の駐車支援装置１０は、ステアリング、アクセル、ブレーキの全てを自律操作する自律駐車のほか、ステアリング、アクセル、ブレーキのうち、少なくとも何れか１つを手動操作し、残りの操作を自律制御する半自律駐車にも適用することができる。また、本実施形態の駐車支援装置１０は、ドライバーに駐車経路を提示し、ドライバーがステアリング、アクセル、及びブレーキを手動操作することで自車両を目標駐車スペースに駐車させる駐車支援にも適用することができる。なお、自律駐車及び半自律駐車を実行する場合、デッドマンスイッチなどの自動復帰型スイッチを用いることがより好ましい。デッドマンスイッチを用いた駐車支援装置１０では、デッドマンスイッチが押されている場合に限り、自車両の自律走行制御が実行され、デッドマンスイッチの押し下げが解除されると自車両の自律走行制御及び半自律走行制御が中止されるからである。

また、駐車支援装置１０は、当該駐車支援装置１０と情報の授受が可能な携帯端末装置（スマートフォン、ＰＤＡなどの機器）から送信された信号により遠隔操作してもよい。たとえば、本実施形態の駐車支援装置１０は、ドライバーが車外から自車両を操作して駐車させるリモートパーキングにも適用することができる。

本実施形態の撮像装置２０、画像処理装置３０及び測距装置４０は、自車両の前方、側方及び後方といった自車両の全周囲など、自車両の周囲にある駐車スペースを表示する白線、駐車スペースの目印となる縁石、段差又は壁、自車両の周囲にある障害物などを含む走行環境に関する情報その他の自車両の周囲の状況を検出するための装置である。

本実施形態の撮像装置２０は、自車両周囲の走行環境に関する情報を画像により認識するための車載装置である。撮像装置２０は、自車両の周囲を撮像し、自車両の周囲に存在する駐車スペースを表示する白線、駐車スペースの目印となる縁石、段差又は壁、自車両の周囲にある障害物を含む画像データを取得することによって、自車両周囲の走行環境に関する情報を取得する。また、撮像装置２０は、ＣＣＤ等の撮像素子を備えるカメラ、超音波カメラ、赤外線カメラその他のカメラを含む。撮像装置２０により取得された自車両周囲の走行環境に関する情報は、制御装置１１に出力される。

図２は、本実施形態の駐車支援システム１の撮像装置２０を示す斜視図であって、自車両Ｖ１に搭載された撮像装置２０の配置例を示す。図２に示す配置例では、自車両Ｖ１のフロントグリル部に撮像装置２０ａを配置し、左ドアミラーの下部に撮像装置２０ｂを配置し、右ドアミラーの下部に撮像装置２０ｃを配置し、リアバンパ上部に撮像装置２０ｄを配置している。撮像装置２０ａ～２０ｄは、視野角の大きい広角レンズを備えたカメラであってもよい。図２に示すように、撮像装置２０ａは、主として自車両Ｖ１の右前方から左前方までを撮像し、撮像装置２０ｂは、主として自車両Ｖ１の左前方から左後方までを撮像し、撮像装置２０ｃは、主として自車両Ｖ１の左後方から右後方までを撮像し、撮像装置２０ｄは、主として自車両Ｖ１の右後方から右前方までを撮像する。このように撮像装置２０を配置することで、自車両Ｖ１の周囲の環境情報を取得する場合に、情報が取得できない死角を減らすことができる。なお、撮像装置２０による障害物の検出には、撮像装置２０ａ～２０ｄを用いたモーションステレオの技術を用いてもよい。

本実施形態の画像処理装置３０は、自車両Ｖ１を上方の仮想視点から見た場合に、自車両Ｖ１の周囲の状況を示す俯瞰画像を生成するための装置である。仮想視点は、たとえば図２に示す仮想視点ＶＰ１である。画像処理装置３０は、撮像装置２０を用いて取得した複数の撮像画像を用いて、俯瞰画像を生成する。画像処理装置３０において俯瞰画像を生成するために行われる画像処理は特に限定されないが、たとえば「鈴木政康・知野見聡・高野照久，俯瞰ビューシステムの開発，自動車技術会学術講演会前刷集，１１６－０７（２００７－１０），１７－２２．」に記載された処理方法である。画像処理装置３０によって生成された俯瞰画像は、制御装置１１に出力され、図２及び３に示すディスプレイ１２１によってドライバーに提示される。なお、図２に示すディスプレイ１２１は、ダッシュボード上部の、運転席と助手席の間に配置されているが、ディスプレイ１２１の設置位置は特に限定されず、ドライバーが視認可能な適宜の位置に設置できる。また、ディスプレイ１２１に表示される画像は仮想視点ＶＰ１からの俯瞰画像であるが、他の仮想視点ＶＰ２から水平方向を見た画像なども同様の画像変換方法で生成することができ、後述する駐車スペースの登録に利用される。詳細は後述する。

図３は、画像処理装置３０によって生成された俯瞰画像の一例を示すディスプレイ１２１の表示画面である。図３は、自車両Ｖ１が、適当な駐車スペースＰを見つけるために駐車場を徐行しているシーンを示す。図３に示すディスプレイ１２１の表示画面の左側には、画像処理装置３０によって生成された俯瞰画像ＩＭ１が表示され、右側には、自車両Ｖ１の周囲を監視するための監視画像ＩＭ２が表示される。俯瞰画像ＩＭ１の中心には、自車両Ｖ１が表示され、自車両Ｖ１の左右には、白線で区切られた駐車スペースが表示される。これらの駐車スペースのうち、他車両Ｖ２が検出された駐車スペースには他車両Ｖ２が表示される。一方、他車両Ｖ２などの障害物が検出されていない駐車スペースには、自車両Ｖ１が駐車可能なスペースとして、駐車スペースＰを示す破線の枠が表示される。そして、駐車スペースＰの中からドライバーにより選択された目標駐車スペースＰｔには、太い実線の枠が表示される。これに対して、監視画像ＩＭ２には、自車両Ｖ１の現在の走行方向である前方の周辺環境情報を提示するために、自車両Ｖ１のフロントグリル部に配置された撮像装置２０ａから取得した画像を表示する。監視画像ＩＭ２には、白線で区切られた駐車スペースのほかに、たとえば他車両Ｖ２のような障害物が表示される。

本実施形態の測距装置４０は、自車両Ｖ１と対象物との相対距離および相対速度を演算するための装置である。測距装置４０は、たとえばレーザーレーダー、ミリ波レーダー（ＬＲＦ）、ＬｉＤＡＲユニット（ｌｉｇｈｔｄｅｔｅｃｔｉｏｎａｎｄｒａｎｇｉｎｇｕｎｉｔ）、超音波レーダーなどのレーダー装置又はソナーである。測距装置４０は、レーダー装置又はソナーの受信信号に基づいて対象物の存否、対象物の位置、対象物までの距離を検出する。対象物は、たとえば自車両Ｖ１の周囲の障害物、歩行者、自転車、他車両である。測距装置４０により検出された対象物の情報は、制御装置１１に出力される。駐車支援中に、測距装置４０により検出された対象物に自車両Ｖ１が接触しそうな場合には、制御装置１１は、自車両Ｖ１を停止させ、対象物と自車両Ｖ１が接近している旨をディスプレイ１２１やスピーカ１２２によりドライバーに報知する。

図４は、本実施形態の駐車支援システム１の測距装置４０を示す平面図であって、測距装置４０を自車両Ｖ１に搭載する場合の配置例を示したものである。図４に示す自車両Ｖ１には、自車両Ｖ１の前方の対象物を検出するための４つの前方測距装置４０ａ、自車両Ｖ１の右側の対象物を検出するための２つの右側方測距装置４０ｂ、自車両Ｖ１の左側の対象物を検出するための２つの左側方測距装置４０ｃ、自車両Ｖ１の後方の対象物を検出するための４つの後方測距装置４０ｄが設けられている。これらの測距装置４０ａ～４０ｄは、たとえば自車両Ｖ１のフロントバンパ及びリアバンパに設置することができる。このように測距装置４０を配置することで、自車両Ｖ１の周囲の対象物との相対距離および相対速度を正確に演算することができる。

図１に戻り、本実施形態の車両コントローラ５０は、自車両Ｖ１の運転を律する駆動システム６０を電子的に制御するための電子コントロールユニット（ＥＣＵ：ＥｌｅｃｔｒｏｎｉｃＣｏｎｔｒｏｌＵｎｉｔ）などの車載コンピュータである。車両コントローラ５０は、駆動システム６０に含まれる駆動装置、制動装置および操舵装置を制御し、駐車支援ルーチンを実行する場合には、自車両Ｖ１が現在位置から目標駐車スペースＰｔまで移動して駐車するための走行動作を支援する。車両コントローラ５０は、駐車支援装置１０から、予め算出された駐車経路、目標車速及び目標舵角に基づいた制御命令を受け取る。これら駐車経路、目標車速及び目標舵角の細部については後述する。

本実施形態の駆動システム６０は、走行駆動源である内燃機関及び／又は電動モータ、これら走行駆動源からの出力を駆動輪に伝達するドライブシャフトや変速機を含む動力伝達装置、この動力伝達装置を制御する駆動装置、車輪を制動する制動装置、及びステアリングホイール（いわゆるハンドル）の操舵角に応じて操舵輪を制御する操舵装置などの各種装置を含む。駐車支援ルーチンを実行する場合には、車両コントローラ５０は、駐車支援装置１０から、予め算出された駐車経路と目標車速に基づく制御命令を受信する。そして、車両コントローラ５０は、駐車支援装置１０からの制御命令に基づいて、駆動システム６０の駆動装置及び制動装置への制御信号を生成し、車両の加減速を含む運転行動の制御を実行する。駆動システム６０は、車両コントローラ５０からの制御信号を受信することで、自車両Ｖ１の車速を自律的に制御することができる。

また、駆動システム６０は、操舵装置を備える。操舵装置は、ステアリングアクチュエータを備え、ステアリングアクチュエータは、ステアリングのコラムシャフトに取り付けられるモータ等を含む。駐車支援ルーチンを実行する場合には、駆動システム６０の操舵装置は、予め算出された駐車経路に対する自車両の所定の横位置（車両の左右方向の位置）を維持しながら走行するように、車両コントローラ５０により制御される。また、車両コントローラ５０は、撮像装置２０により取得した自車両Ｖ１の周囲の環境情報と、画像処理装置３０が生成した俯瞰画像ＩＭ１と、測距装置４０により検出された自車両Ｖ１の周囲の障害物、歩行者、他車両の情報のうち少なくとも一つ以上を用いて、操舵装置の制御を行う。この場合、駐車支援装置１０は、車両コントローラ５０に、予め算出された駐車経路と目標舵角に基づく制御命令を送信する。そして、車両コントローラ５０は、駐車支援装置１０からの制御命令に基づいて、駆動システム６０の操舵装置への制御信号を生成し、自車両Ｖ１の操舵制御を実行する。駆動システム６０は、車両コントローラ５０からの制御信号を受信することで、自車両Ｖ１の操舵を自律的に制御することができる。

本実施形態の車速センサ７０は、駆動システム６０の駆動装置に備えられた、自車両Ｖ１の車速を検出するためのセンサである。また、本実施形態の操舵角センサ８０は、駆動システム６０の操舵装置に備えられた、自車両Ｖ１の舵角を検出するためのセンサである。車速センサ７０により検出された自車両Ｖ１の車速及び操舵角センサ８０により検出された自車両Ｖ１の舵角は、車両コントローラ５０を介して制御装置１１に出力される。

本実施形態の制御装置１１は、ＲＯＭ１１１に格納された駐車支援プログラムをＣＰＵ１１２により実行することにより、自車両Ｖ１の周辺の環境情報を取得する環境情報取得機能と、自車両Ｖ１が駐車可能な駐車領域を検出する駐車スペース検出機能と、検出した駐車スペースＰを俯瞰画像ＩＭ１としてディスプレイ１２１に表示する駐車スペース表示機能と、自車両Ｖ１が現在位置から目標駐車スペースＰｔまで移動して駐車するための駐車経路を算出する駐車経路算出機能と、算出された駐車経路に沿って自車両Ｖ１が駐車するための走行動作を計画する走行動作計画機能を実現する。

本実施形態の制御装置１１は、環境情報取得機能により、自車両Ｖ１の周辺に位置する障害物の存在を含む周辺環境に関する情報を取得する。たとえば、制御装置１１は、環境情報取得機能により、車速センサ７０によって検出された自車両Ｖ１の車速情報と、操舵角センサ８０によって検出された自車両Ｖ１の舵角情報とを、周辺環境に関する情報として取得する。またたとえば、制御装置１１は、環境情報取得機能により、ＧＰＳユニット及びジャイロセンサなどを備えた自車位置検出装置によって検出された自車両Ｖ１の位置情報又はＲＯＭ１１１に格納された三次元高精度地図（各種施設や特定の地点の位置情報を含む）によって検出された自車両Ｖ１の位置情報を、周辺環境に関する情報として取得する。なお、これらの周辺環境に関する情報を用いて、制御装置１１の環境情報取得機能により、自車両Ｖ１の走行状況が自車両Ｖ１を目標駐車スペースＰｔに駐車するシーンであるか否かを自動的に判定してもよい。

駐車スペース検出機能は、環境情報取得機能によって取得した自車両Ｖ１の周辺の環境情報を用いて、自車両Ｖ１が駐車可能な駐車領域を検出するための機能である。駐車スペースＰの検出において、制御装置１１は、撮像装置２０によって取得した撮像画像を用いて、画像処理装置３０により俯瞰画像ＩＭ１を作成する。制御装置１１は、駐車スペース検出機能により、作成した俯瞰画像ＩＭ１から領域の境界を規定する線を検出し、検出された線から駐車領域を規定する線の候補を特定する。そして、制御装置１１は、駐車スペース検出機能により、特定された線の候補が駐車領域を規定するか否かを判定し、特定された線の候補が駐車領域を規定すると判定した場合には、検出した駐車領域に自車両Ｖ１が駐車可能であるか否かを判定する。

俯瞰画像ＩＭ１から領域の境界を規定する線を検出するために、制御装置１１は、駐車スペース検出機能により、俯瞰画像ＩＭ１に対してエッジ検出を行い、輝度差（コントラスト）を算出する。そして、制御装置１１は、駐車スペース検出機能により、俯瞰画像ＩＭ１の中から輝度差が所定値以上の画素列を特定し、線の太さと線の長さを算出する。検出される線の色は、必ずしも白色である必要はなく、赤色、黄色その他の色であってもよい。

検出された線から駐車領域を規定する線の候補を特定するために、制御装置１１は、パターンマッチングなどの公知の画像処理技術を用いる。パターンマッチングに用いるパターンは、制御装置１１のＲＯＭ１１１に予め記憶されている。たとえば、図５Ａは、自車両Ｖ１が、他車両Ｖ２ａと他車両Ｖ２ｂの間にある、自車両Ｖ１が駐車可能な目標駐車スペースＰｔ１に駐車しようとしているシーンを示す。図５Ａのシーンにおいて、目標駐車スペースＰｔ１に対応する駐車スペースを規定する線は、目標駐車スペースＰｔ１の長方形を構成する辺のうち３辺である線Ｌ１、線Ｌ２、及び線Ｌ３である。制御装置１１のＲＯＭ１１１は、駐車スペースを規定する線Ｌ１、線Ｌ２、及び線Ｌ３の組み合わせを、図５Ａのシーンに対応するパターンとして記憶している。

また、図５Ｂは、自車両Ｖ１が、他車両Ｖ２ｃと他車両Ｖ２ｄの間にある目標駐車スペースＰｔ２に縦列駐車しようとしているシーンを示す。図５Ｂのシーンにおいて、制御装置１１は、線Ｌ４を目標駐車スペースＰｔ２に対応する駐車スペースを規定する線として撮像装置２０を用いて検出し、他車両Ｖ２ｃと他車両Ｖ２ｄの左側に位置する縁石又は壁など（図示せず）をさらに検出する。ただし、線Ｌ４と縁石のみでは、制御装置１１は、駐車スペースを認識できない。そこで、図５Ｂのシーンにおいて、制御装置１１は、他車両Ｖ２ｃの後方に仮想の線Ｌ５を設定し、他車両Ｖ２ｄの前方に仮想の線Ｌ６を設定する。そして、撮像装置２０により検出した線Ｌ４に、仮想の線Ｌ５と線Ｌ６を加えることにより駐車スペースを認識できる場合には、線Ｌ４が駐車スペースを規定する線であると判定する。制御装置１１のＲＯＭ１１１は、線Ｌ４と、他車両Ｖ２ｃの後方に配置された仮想の線Ｌ５と、他車両Ｖ２ｄの前方に配置された仮想の線Ｌ６の組み合わせを、図５Ｂのシーンに対応するパターンとして記憶している。

さらに、図５Ｃは、自車両Ｖ１が、他車両Ｖ２ｅと他車両Ｖ２ｆの間にある、自車両Ｖ１が駐車可能な目標駐車スペースＰｔ３に、斜め姿勢で駐車しようとしているシーンを示す。図５Ｃのシーンにおいて、目標駐車スペースＰｔ３に対応する駐車領域を規定する線は、目標駐車スペースＰｔ３の平行四辺形を構成する辺である線Ｌ７、線Ｌ８、線Ｌ９、及び線Ｌ１０となる。制御装置１１のＲＯＭ１１１は、駐車領域を規定する線Ｌ７、線Ｌ８、線Ｌ９、及び線Ｌ１０の組み合わせを、図５Ｃのシーンに対応するパターンとして記憶している。そして、駐車スペース検出機能により検出した駐車スペースＰは、駐車スペース表示機能によりドライバーに提示される。

本実施形態の制御装置１１の駐車スペース検出機能は、上述したように、任意の場所において自車両が駐車可能なスペースが存在するか否かを検出するが、このほかに、自宅の駐車場や勤務先の駐車場のように、比較的頻繁に利用する駐車場の駐車スペースを予め駐車支援システム１に登録しておいた場合、この予め登録された駐車スペースを検出する機能も備えている。

ここで、特定の駐車スペースの登録処理と、その照合処理について説明する。自宅の駐車場や勤務先の駐車場その他、ドライバーが次に駐車する際に自律駐車制御を利用したいと考える駐車スペースがある場合、たとえば自車両をその駐車スペースに駐車し、この状態で、駐車支援装置１０に設けられた駐車スペース登録ボタンを押す。これにより、制御装置１１が備えるＧＰＳユニット及びジャイロセンサなどの自車位置検出装置（環境情報取得機能）により、その駐車スペースの緯度経度が当該制御装置１１のメモリに記憶される。これと同時に、撮像装置２０を用いて自車両の周囲を撮像し、これを基準画像として制御装置１１のメモリに記憶する。この操作により、その駐車スペースの位置情報と基準画像とが関連付けられて記憶され、特定の駐車スペースの登録処理が終了する。そして、その後に当該駐車スペースに近づいて駐車しようとした場合、自律駐車制御の目標駐車スペースの一つとして設定することができる。

本実施形態の制御装置１１に予め記憶する基準画像は、この目標駐車スペースを特定するための画像であるが、１つではなく、異なる複数の基準画像を記憶する。ここでいう異なる複数の基準画像とは、視点位置が異なる複数の基準画像、視線方向が異なる複数の基準画像及び変換方法が異なる複数の基準画像のうちの少なくともいずれかの基準画像を含む意味である。

視点位置が異なる複数の基準画像は、図２を参照して説明した画像処理装置３０を用いた画像処理と同様に、撮像装置２０で撮像された画像データを用いて生成することができる。たとえば、視線方向が同じ上から下方向であっても高さ（ｚ座標）や平面上の位置（ｘ－ｙ座標）が異なる視点位置からの画像を基準画像とすることができる。同様に、視線方向が異なる複数の基準画像も、画像処理装置３０により、撮像装置２０で撮像された画像データを用いて生成することができる。たとえば、視点位置が同じ自車両の上部であっても鉛直下向きの視線と水平方向の視線のように、異なる視線方向の画像を基準画像とすることができる。また、変換方法が異なる複数の基準画像も、画像処理装置３０により、撮像装置２０で撮像された画像データを用いて生成することができ、たとえば魚眼変換を施した画像と施していない画像である。また、このほかにも、視点位置と視線方向の両方、視点位置と変換方法の両方、視線方向と変換方法の両方、又はこれら３つの全てが異なる複数の基準画像を生成して記憶してもよい。

また、基準画像の生成に用いられる撮像装置２０で撮像された画像データとしては、一つのカメラで撮像された画像データのみを用いて基準画像を生成してもよいし、複数のカメラで撮像された複数の画像データを用いて基準画像を生成してもよい。

このような基準画像は、本実施形態の駐車支援装置１０に設けられた登録ボタンなどを押すことで生成され、制御装置１１のメモリに記憶される。すなわち、登録ボタンを押すと、撮像装置２０により自車両の周囲の画像が撮像され、これを画像処理装置３０で画像処理することにより基準画像が生成される。このとき、記憶する異なる複数の基準画像は、視点位置、視線方向又は返還方法など、予め所定の形態に設定したものを自動的に記憶してもよいし、一部又は全部の形態をドライバーに提示し、当該ドライバーが選択してもよい。また、基準画像とする場合、画像処理装置３０で生成した画像全体を基準画像としてもよいし、画像処理装置３０で生成した画像のうち特徴部分となるべき部分を自動的に抽出してもよいし、ドライバーが選択してもよい。

図６は、予め登録する駐車スペースの一例を示す平面図である。同図に示す駐車スペースはドライバーの自宅の駐車スペースであり、ドライバーの自宅には、家屋Ｈ１、中庭Ｈ２、中庭の通路Ｈ３があり、中庭Ｈ２の隣に目標駐車スペースＰｔがあるものとする。Ｈ４は通路Ｈ３の端に立設されたポールを示し、ＲＤは自宅前の道路を示す。本実施形態の駐車支援装置１０では、自車両Ｖ１を目標駐車スペースＰｔに駐車した状態、すなわち駐車完了の状態で、撮像装置２０の左ドアミラーに取り付けられた撮像装置２０ｂにより撮像した画像データを用い、画像処理装置３０により、図２に示す仮想視点ＶＰ１から真下を見た画像ＩＭ３と、仮想視点ＶＰ２から水平方向外側を見た画像ＩＭ４とを生成するものとする。

図７Ａは、駐車支援装置１０に登録する第１基準画像ＩＭ３１の一例を示す図、図７Ｂは、同じく駐車支援装置１０に登録する第２基準画像ＩＭ４１，ＩＭ４２の一例を示す図である。図７Ａに示す画像ＩＭ３は、目標駐車スペースＰｔに停めた自車両Ｖ１の左側の景色を、仮想視点ＶＰ１から真下に見た平面画像である。そのため、中庭Ｈ２と通路Ｈ３との境界線Ｌ１１や、中庭Ｈ２と駐車スペースＰｔとの境界線Ｌ１２が照合に適した特徴点となる。これに対して、中庭Ｈ２そのものは色彩が一様で模様などがなく特徴点がないので、照合には適さない。したがって、本実施形態では、境界線Ｌ１１，Ｌ１２が含まれた部分の画像ＩＭ３１を第１基準画像とする。

図７Ｂに示す画像ＩＭ４は、目標駐車スペースＰｔに停めた自車両Ｖ１の左側の景色を、仮想視点ＶＰ２から水平方向の家屋Ｈ１に向かって見た正面画像である。そのため、家屋Ｈ１の入口壁の縦線Ｌ１３や、通路Ｈ３の端のポールＨ４が照合に適した特徴点となる。これに対して、中庭Ｈ２や通路Ｈ３は、境界線Ｌ１１，Ｌ１２はあるものの水平視した正面画像では特徴がそれほど出ないので、照合には適さない。したがって、本実施形態では、縦線Ｌ１３が含まれた部分の画像ＩＭ４１と、ポールＨ４が含まれた部分の画像ＩＭ４２の少なくとも一方を第２基準画像とする。

これら制御装置１１のメモリに記憶された異なる複数の基準画像、すなわち第１基準画像ＩＭ３１及び第２基準画像ＩＭ４１，ＩＭ４２は、その後にドライバーが当該自宅の駐車スペースを目標駐車スペースＰｔとして設定した場合に、制御装置１１のメモリから読み出され、照合処理のための基準画像となる。なお、制御装置１１のメモリに記憶する基準画像は、図７Ａ及び図７Ｂに示すように、全体の画像ＩＭ３，ＩＭ４の中でも特に特徴点となる一部を切り出した画像ＩＭ３１，ＩＭ４１，ＩＭ４２としたが、これに代えて全体の画像ＩＭ３及び画像ＩＭ４を基準画像にしてもよい。

また、本実施形態において、異なる複数の基準画像ごとに、照合する場合の適合度を設定し、設定した適合度を目標駐車スペースＰｔの位置情報の算出に用いてもよい。本実施形態の適合度とは、基準画像の、照合確率が高いと推定される尤度、相関係数その他の度合いであって、全ての基準画像の適合度を合算すると１又は１００％になる特性値である。たとえば、他の画像と識別し易い特徴点を含んでいたり、複数の異なる特徴点を含んでいたりすると適合度が高くなる。そして、たとえば４０％と６０％の適合度が設定された２つの基準画像が登録されている場合、現在の自車両の周囲の画像に対し、これら２つの基準画像の両方ともに認識できたときに、適合度が６０％の基準画像に基づいて算出される目標スペースの位置情報に６０％の重み付けをし、適合度が４０％の基準画像に基づいて算出される目標スペースの位置情報に４０％の重み付けをし、これらを加重して最終的な目標駐車スペースの位置情報を算出してもよい。

また、本実施形態において、図６に示すように、自宅など所望の目標駐車スペースＰｔを登録する場合、これに関連付けて、道路ＲＤの所定の駐車開始位置Ｐ０から目標駐車スペースＰｔに至る走行経路Ｒをトラッキングし、予め制御装置１１のメモリに記憶しておいてもよい。そして、その後に、自車両Ｖ１を目標駐車スペースＰｔに駐車させる場合において、照合処理により目標駐車スペースＰｔを認識したら、記憶しておいた走行経路Ｒに沿って自車両の走行動作を自律制御してもよい。

また、本実施形態において、制御装置１１のメモリに異なる複数の基準画像を記憶させたのち、その駐車スペースに自車両を駐車させる場合、撮像装置２０を用いて自車両の周囲の画像を撮像し、この画像と基準画像とを比較することで、基準画像で特定される目標駐車スペースの位置情報を算出する。このとき、現在の自車両の周囲の画像を、異なる複数の基準画像にそれぞれ対応する画像形態に変換する。たとえば、１つの基準画像が、図７Ａに示す仮想視点ＶＰ１から真下に見た平面画像である第１基準画像ＩＭ３１の場合、この第１基準画像ＩＭ３１との照合を行うときは、画像処理装置３０を用いて、撮像装置２０で撮像した画像データを、仮想視点ＶＰ１から真下に見た平面画像に変換する。同様に、他の１つの基準画像が、図７Ｂに示す仮想視点ＶＰ２から水平方向に見た正面画像である第２基準画像ＩＭ４１，ＩＭ４２の場合、この第２基準画像ＩＭ４１，ＩＭ４２との照合を行うときは、画像処理装置３０を用いて、撮像装置２０で撮像した画像データを、仮想視点ＶＰ２から水平方向に見た正面画像に変換する。

また、本実施形態において、現在の自車両の周囲の画像と、異なる複数の基準画像とを照合処理する場合に、現在の自車両の周囲の画像と、全ての異なる複数の基準画像とを照合処理してもよいし、異なる複数の基準画像の一部の基準画像と照合処理してもよい。そして、現在の自車両の周囲の画像と、全ての異なる複数の基準画像とを照合処理する場合には、認識できた基準画像の全部から、上述した適合度で重み付けするなどして目標駐車スペースＰｔの位置情報を算出する。また、現在の自車両の周囲の画像と、異なる複数の基準画像の一部の基準画像とを照合処理する場合には、異なる複数の基準画像を順に照合処理し、認識できた基準画像があったときに、残りの基準画像があったとしてもそこで照合処理を終了し、その認識できた基準画像に基づいて目標駐車スペースＰｔの位置情報を算出する。

図１に戻り、本実施形態の制御装置１１の駐車スペース表示機能は、ドライバーに駐車スペースＰを提示するために、制御装置１１が検出した駐車スペースＰ又は予め登録しておいた駐車スペース（図６のＰｔなど）をディスプレイ１２１に表示する機能である。たとえば図３に示すように、制御装置１１は、破線の枠で駐車スペースＰをドライバーに提示する。ドライバーは、図３に示す駐車スペースＰの中から、自車両Ｖ１を駐車させる目標駐車スペースＰｔを選択する。目標駐車スペースＰｔの選択は、たとえばタッチパネルからなるディスプレイ１２１の画面に触れることによって行うことができる。このようにドライバーが目標駐車スペースＰｔを設定することで、制御装置１１は、駐車経路算出機能により駐車経路を算出することができるようになる。

本実施形態の制御装置１１の駐車経路算出機能は、設定された目標駐車スペースＰｔに自車両Ｖ１を駐車させるために、目標駐車スペースＰｔまでの駐車経路を算出する機能である。

次に、図８～図１０を参照して、本実施形態の制御装置１１における駐車支援処理を説明する。図８は、本実施形態の駐車支援処理の基本的な処理を示すフローチャートの一例、図９は、図８のステップＳ６のサブルーチンの一例を示すフローチャート、図１０は、図８のステップＳ６のサブルーチンの他の例を示すフローチャートである。なお、以下に説明する駐車支援処理は、制御装置１１により所定時間間隔で実行される。

図８のステップＳ１において、制御装置１１は、自律駐車開始ボタンが押されたか否かを判定する。たとえば、ドライバーが駐車場に入ったところで自律駐車ボタンを押すと、本実施形態の駐車支援処理が開始する。またはこれに代えて、環境情報取得機能により自動的に自律駐車を開始するか否かを判定してもよい。自律駐車を開始すると判定した場合はステップＳ２へ進み、そうでない場合はこのステップＳ１を繰り返す。

ステップＳ２において、ドライバーが、制御装置１１のメモリに予め登録しておいた登録駐車スペースを選択したか否かを判定する。登録駐車スペースを選択した場合はステップＳ６へ進み、そうでない場合はステップＳ３へ進む。

登録駐車スペースを選択していない場合は、ステップＳ３において、制御装置１１は、駐車スペース検出機能により、撮像装置２００によって取得した画像を用いて、画像処理装置３０により俯瞰画像ＩＭ１を作成する。そして、俯瞰画像ＩＭ１から駐車領域を検出し、撮像装置２００及び測距装置４０を用いて、駐車領域から駐車スペースＰを検出する。

続くステップＳ４において、制御装置１１は、駐車スペース表示機能により、ディスプレイ１２１を用いて駐車スペースＰをドライバーに提示する。ドライバーは、表示された駐車スペースＰの中から所望の駐車スペースを選択し、これを目標駐車スペースに設定する。ステップＳ５において、制御装置１１は、駐車スペースＰの中から、自車両Ｖ１を駐車させる目標駐車スペースＰｔが設定されたか否かを判定する。ドライバーが、駐車スペースＰの中から自車両Ｖ１を駐車させる目標駐車スペースＰｔを選択していないと判定した場合は、ステップＳ４に戻り、ドライバーが目標駐車スペースＰｔを選択するまで駐車スペースＰをドライバーに提示し続ける。これに対して、ドライバーが、駐車スペースＰの中から自車両Ｖ１を駐車させる目標駐車スペースＰｔを選択したと判定した場合は、ステップＳ７に進む。

ステップＳ２に戻り、ステップＳ２においてドライバーが登録駐車スペースを選択した場合はステップＳ６へ進む。図９はステップＳ６のサブルーチンを示すフローチャートであり、ドライバーが登録駐車スペースを選択した場合、撮像装置２０により撮像された現在の自車両の周囲の画像と、予め登録された異なる複数の基準画像とを照合し、目標駐車スペースＰｔを認識して当該目標駐車スペースＰｔの位置情報を算出する。

具体的には、図９のステップＳ６１１において、撮像装置２０により撮像された現在の自車両の周囲の画像を第１基準画像ＩＭ３１の形態に合わせて変換し、第１基準画像ＩＭ３１と照合する。本実施形態では、第１基準画像ＩＭ３１は、仮想視点ＶＰ１から真下に見た平面画像であるため、撮像装置２０により撮像された現在の自車両の周囲の画像を仮想視点ＶＰ１から真下に見た平面画像に変換する。そして、従来公知のテンプレート画像によるマッチング手法や特徴点照合手法その他の照合手法を用いて、現在の自車両の周囲の画像における第１基準画像ＩＭ３１を認識する。

続くステップＳ６１２では、撮像装置２０により撮像された現在の自車両の周囲の画像を第２基準画像ＩＭ４１，ＩＭ４２の形態に合わせて変換し、第２基準画像ＩＭ４１，ＩＭ４２と照合する。本実施形態では、第２基準画像ＩＭ４１，ＩＭ４２は、仮想視点ＶＰ２から水平方向に見た正面画像であるため、撮像装置２０により撮像された現在の自車両の周囲の画像を仮想視点ＶＰ２から水平方向に見た正面画像に変換する。そして、従来公知のテンプレート画像によるマッチング手法や特徴点照合手法その他の照合手法を用いて、現在の自車両の周囲の画像における第２基準画像ＩＭ４１，ＩＭ４２を認識する。

続くステップＳ６１３では、ステップＳ６１１で実行した照合の結果、現在の自車両の周囲の画像に第１基準画像ＩＭ３１と合致する部分があったか否かを判定し、合致する部分があったと判定した場合はステップＳ６１４へ進み、合致する部分がなかったと判定した場合はステップＳ６１７へ進む。

ステップＳ６１４では、ステップＳ６１２で実行した照合の結果、現在の自車両の周囲の画像に第２基準画像ＩＭ４１，ＩＭ４２と合致する部分があったか否かを判定し、合致する部分があったと判定した場合はステップＳ６１５へ進み、合致する部分がなかったと判定した場合はステップＳ６１６へ進む。一方、ステップＳ６１３において、現在の自車両の周囲の画像に第１基準画像ＩＭ３１と合致する部分がなかったと判定した場合、ステップＳ６１７にて、ステップＳ６１２で実行した照合の結果、現在の自車両の周囲の画像に第２基準画像ＩＭ４１，ＩＭ４２と合致する部分があったか否かを判定し、合致する部分があったと判定した場合はステップＳ６１８へ進み、合致する部分がなかったと判定した場合はステップＳ６１９へ進む。

ステップＳ６１５では、ステップＳ６１３にて第１基準画像ＩＭ３１に合致する部分があると判定され、さらにステップＳ６１４にて第２基準画像ＩＭ４１，ＩＭ４２に合致する部分があると判定されたので、第１基準画像ＩＭ３１及び第２基準画像ＩＭ４１，ＩＭ４２の検出位置に基づいて、目標駐車スペースＰｔの位置を算出する。このとき、第１基準画像ＩＭ３１と第２基準画像ＩＭ４１，ＩＭ４２に適合度が設定されている場合は、当該適合度を用いた加重平均により目標駐車スペースＰｔの位置を算出する。

ステップＳ６１６では、ステップＳ６１３にて第１基準画像ＩＭ３１に合致する部分があると判定され、ステップＳ６１４にて第２基準画像ＩＭ４１，ＩＭ４２に合致する部分がないと判定されたので、第１基準画像ＩＭ３１の検出位置に基づいて、目標駐車スペースＰｔの位置を算出する。この場合、第２基準画像ＩＭ４１，ＩＭ４２は、目標駐車スペースＰｔの位置算出には用いない。

ステップＳ６１８では、ステップＳ６１３にて第１基準画像ＩＭ３１に合致する部分がないと判定され、ステップＳ６１４にて第２基準画像ＩＭ４１，ＩＭ４２に合致する部分があると判定されたので、第２基準画像ＩＭ４１，ＩＭ４２の検出位置に基づいて、目標駐車スペースＰｔの位置を算出する。この場合、第１基準画像ＩＭ３１は、目標駐車スペースＰｔの位置算出には用いない。

ステップＳ６１９では、ステップＳ６１３にて第１基準画像ＩＭ３１に合致する部分がないと判定され、さらにステップＳ６１４にて第２基準画像ＩＭ４１，ＩＭ４２に合致する部分がないと判定されたので、目標駐車スペースＰｔの位置を算出しないで、駐車支援処理を終了する。

ステップＳ６１５，Ｓ６１６，Ｓ６１８の各処理を実行したら、図８のステップＳ７へ進む。

ステップＳ７において、制御装置１１は、駐車経路算出機能により、たとえば現在位置から、又は走行方向を変更した後の位置から、設定した目標駐車スペースＰｔまで自車両Ｖ１が移動する駐車経路Ｒを算出する。ステップＳ８において、制御装置１１は、走行動作計画機能により、算出された駐車経路Ｒに沿って自車両Ｖ１が駐車するための走行動作を計画し、算出された駐車経路Ｒと、計画された走行動作によって、車両コントローラ５０、駆動システム６０、車速センサ７０、及び操舵角センサ８０を用いて自車両Ｖ１の駐車支援を実行する。なお、ステップＳ２において、登録駐車スペースを選択した場合に、当該登録された目標駐車スペースＰｔの位置情報に関連付けた駐車経路Ｒが記憶されているときは、ステップＳ７においてこれを読み出す。

なお、制御装置１１は、ステップＳ８の駐車支援の実行中に、環境情報取得機能により、撮像装置２００及び測距装置４０を用いて、自車両Ｖ１の周囲の障害物を検出し、障害物との干渉を避けながら駐車支援を実行する。

ステップＳ９において、自車両Ｖ１が目標駐車スペースＰｔに駐車し終えたか否かを判定し、自車両Ｖ１が駐車を完了するまでステップＳ８の駐車支援を継続する。

図９に示す駐車スペースの認識処理では、制御装置１１のメモリに登録された基準画像の全部、すなわち第１基準画像ＩＭ３１及び第２基準画像ＩＭ４１，ＩＭ４２との照合を行ったが、図１０に示すように制御装置１１のメモリに登録された基準画像の一部との照合を実行してもよい。図１０は、図８のステップＳ６のサブルーチンの他の例を示すフローチャートである。

具体的には、図９のステップＳ６２１において、撮像装置２０により撮像された現在の自車両の周囲の画像を第１基準画像ＩＭ３１の形態に合わせて変換し、第１基準画像ＩＭ３１と照合する。本実施形態では、第１基準画像ＩＭ３１は、仮想視点ＶＰ１から真下に見た平面画像であるため、撮像装置２０により撮像された現在の自車両の周囲の画像を仮想視点ＶＰ１から真下に見た平面画像に変換する。そして、従来公知のテンプレート画像によるマッチング手法や特徴点照合手法その他の照合手法を用いて、現在の自車両の周囲の画像における第１基準画像ＩＭ３１を認識する。

続くステップＳ６２２では、ステップＳ６２１で実行した照合の結果、現在の自車両の周囲の画像に第１基準画像ＩＭ３１と合致する部分があったか否かを判定し、合致する部分があったと判定した場合はステップＳ６２３へ進み、合致する部分がなかったと判定した場合はステップＳ６２４へ進む。

ステップＳ６２３では、ステップＳ６２２にて第１基準画像ＩＭ３１に合致する部分があると判定されたので、第１基準画像ＩＭ３１の検出位置に基づいて、目標駐車スペースＰｔの位置を算出する。この場合、第２基準画像ＩＭ４１，ＩＭ４２は、目標駐車スペースＰｔの位置算出には用いない。

一方、ステップＳ６２４では、撮像装置２０により撮像された現在の自車両の周囲の画像を第２基準画像ＩＭ４１，ＩＭ４２の形態に合わせて変換し、第２基準画像ＩＭ４１，ＩＭ４２と照合する。本実施形態では、第２基準画像ＩＭ４１，ＩＭ４２は、仮想視点ＶＰ２から水平方向に見た正面画像であるため、撮像装置２０により撮像された現在の自車両の周囲の画像を仮想視点ＶＰ２から水平方向に見た正面画像に変換する。そして、従来公知のテンプレート画像によるマッチング手法や特徴点照合手法その他の照合手法を用いて、現在の自車両の周囲の画像における第２基準画像ＩＭ４１，ＩＭ４２を認識する。

続くステップＳ６２５では、ステップＳ６２４で実行した照合の結果、現在の自車両の周囲の画像に第２基準画像ＩＭ４１，ＩＭ４２と合致する部分があったか否かを判定し、合致する部分があったと判定した場合はステップＳ６２６へ進み、合致する部分がなかったと判定した場合はステップＳ６２７へ進む。

ステップＳ６２６では、ステップＳ６２２にて第１基準画像ＩＭ３１に合致する部分がないと判定され、ステップＳ６２４にて第２基準画像ＩＭ４１，ＩＭ４２に合致する部分があると判定されたので、第２基準画像ＩＭ４１，ＩＭ４２の検出位置に基づいて、目標駐車スペースＰｔの位置を算出する。この場合、第１基準画像ＩＭ３１は、目標駐車スペースＰｔの位置算出には用いない。

ステップＳ６２７では、ステップＳ６２２にて第１基準画像ＩＭ３１に合致する部分がないと判定され、さらにステップＳ６２５にて第２基準画像ＩＭ４１，ＩＭ４２に合致する部分がないと判定されたので、目標駐車スペースＰｔの位置を算出しないで、駐車支援処理を終了する。

以上のように、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、自車両Ｖ１の周囲を撮像する撮像装置２０を用いて生成した、目標駐車スペースＰｔを特定する異なる複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）を予め記憶しておき、その後に自車両Ｖ１を目標駐車スペースＰｔに駐車させる場合には、現在の自車両Ｖ１の周囲の画像と、異なる複数の基準画像の少なくとも一つの基準画像とを照合して目標駐車スペースＰｔを認識するので、目標駐車スペースＰｔの認識精度を高めることができる。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、認識された目標駐車スペースＰｔの位置情報に基づいて、目標駐車スペースＰｔに至る走行経路Ｒに沿った自車両Ｖ１の走行動作を自律制御するので、より一層確実に自車両Ｖ１を自律制御することができる。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、現在の自車両Ｖ１の周囲の画像と、異なる複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）の全部とを照合して目標駐車スペースＰｔを認識するので、目標駐車スペースＰｔの認識精度がより一層高くなる。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、現在の自車両Ｖ１の周囲の画像と、異なる複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）の一部とを照合して目標駐車スペースＰｔを認識するので、目標駐車スペースＰｔの認識処理時間が短縮され、認識処理負荷も軽減される。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、異なる複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）は、視点位置が異なる複数の基準画像、視線方向が異なる複数の基準画像及び変換方法が異なる複数の基準画像のうちの少なくともいずれかの基準画像を含むので、目標駐車スペースＰｔの認識精度がより一層高くなる。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、現在の自車両Ｖ１の周囲の画像と、異なる複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）の少なくとも一つの基準画像とを照合する場合に、現在の自車両の周囲の画像を、異なる複数の基準画像にそれぞれ対応する画像形態に変換するので、照合処理が簡素化され、照合精度も高くなる。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、異なる複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）ごとに、照合する場合の適合度を設定しておき、現在の自車両Ｖ１の周囲の画像と、異なる複数の基準画像の少なくとも一つの基準画像とを照合する場合に、設定された適合度を用いた重み付けにより目標駐車スペースＰｔを認識するので、予め登録する目標駐車スペースＰｔの環境に応じて照合の適合性を高めることができ、目標駐車スペースＰｔの認識精度がより一層高くなる。

また、本実施形態に係る駐車支援装置１０及び駐車支援方法によれば、複数の基準画像（第１基準画像ＩＭ３１、第２基準画像ＩＭ４１，ＩＭ４２）を予め記憶するときに、所定の駐車開始位置から目標駐車スペースＰｔに至る走行経路Ｒを記憶しておき、その後に自車両Ｖ１を目標駐車スペースＰｔに駐車させる場合に、目標駐車スペースＰｔを認識したら、記憶しておいた走行経路Ｒに沿って自車両Ｖ１の走行動作を自律制御するので、走行経路の算出負荷を軽減することができると同時に、駐車支援開始までの時間を短縮することができる。

１…駐車支援システム
１０…駐車支援装置
１１…制御装置
１１１…ＲＯＭ
１１２…ＣＰＵ
１１３…ＲＡＭ
１２…出力装置
１２１…ディスプレイ
１２２…スピーカ
２０…撮像装置
２ａ…車両のフロントグリル部に配置された撮像装置
２ｂ…車両の左ドアミラーの下部に配置された撮像装置
２ｃ…車両の右ドアミラーの下部に配置された撮像装置
２ｄ…車両のリアバンパ近傍に配置された撮像装置
３０…画像処理装置
４０…測距装置
４ａ…前方測距装置
４ｂ…右側方測距装置
４ｃ…左側方測距装置
４ｄ…後方測距装置
５０…車両コントローラ
６０…駆動システム
７０…車速センサ
ＩＭ１…俯瞰画像
ＩＭ２…監視画像
ＩＭ３１…第１基準画像
ＩＭ４１，ＩＭ４２…第２基準画像
Ｌ１～Ｌ１０…線
Ｐ…駐車スペース
Ｐｔ、Ｐｔ１、Ｐｔ２、Ｐｔ３…目標駐車スペース
Ｖ１…自車両
Ｖ２、Ｖ２ａ、Ｖ２ｂ、Ｖ２ｃ、Ｖ２ｄ、Ｖ２ｅ…他車両
ＶＰ１，ＶＰ２…仮想視点

Claims

コンピュータが実行する駐車支援方法であって、
自車両を目標駐車スペースに駐車した状態で、自車両に装着した撮像装置を用いて自車両の周囲を撮像して生成した、前記目標駐車スペースを特定する異なる複数の基準画像を予め記憶しておき、
その後に自車両を前記目標駐車スペースに駐車させる場合には、現在の自車両の周囲の画像と、前記異なる複数の基準画像の少なくとも一つの基準画像とを照合して前記目標駐車スペースを認識し、
前記認識された目標駐車スペースの位置情報に基づいて、前記目標駐車スペースに至る自車両の走行動作を自律制御する駐車支援方法。
前記現在の自車両の周囲の画像と、前記異なる複数の基準画像の全部の基準画像とを照合して前記目標駐車スペースを認識する請求項１に記載の駐車支援方法。
前記現在の自車両の周囲の画像と、前記異なる複数の基準画像の一部の基準画像とを照合して前記目標駐車スペースを認識する請求項１に記載の駐車支援方法。
前記異なる複数の基準画像は、視点位置が異なる複数の基準画像、視線方向が異なる複数の基準画像及び変換方法が異なる複数の基準画像のうちの少なくともいずれかの基準画像を含む請求項１～３のいずれか一項に記載の駐車支援方法。
現在の自車両の周囲の画像と、前記異なる複数の基準画像の少なくとも一つの基準画像とを照合する場合に、前記現在の自車両の周囲の画像を、前記異なる複数の基準画像にそれぞれ対応する画像形態に変換する請求項１～４のいずれか一項に記載の駐車支援方法。
前記異なる複数の基準画像ごとに、照合する場合の適合度を設定しておき、現在の自車両の周囲の画像と、前記異なる複数の基準画像の少なくとも一つの基準画像とを照合する場合に、設定された適合度を用いた重み付けにより目標駐車スペースを認識する請求項１～５のいずれか一項に記載の駐車支援方法。
前記複数の基準画像を予め記憶するときに、所定の駐車開始位置から前記目標駐車スペースに至る走行経路を記憶しておき、
その後に自車両を前記目標駐車スペースに駐車させる場合に、前記目標駐車スペースを認識したら、記憶しておいた走行経路に沿って自車両の走行動作を自律制御する請求項１～６のいずれか一項に記載の駐車支援方法。
自車両を目標駐車スペースに駐車した状態で、自車両に装着した撮像装置を用いて自車両の周囲を撮像して生成した、前記目標駐車スペースを含む異なる複数の基準画像を予め記憶するメモリと、
その後に自車両を前記目標駐車スペースに駐車させる場合には、現在の自車両の周囲の画像と、前記異なる複数の基準画像の少なくとも一つの基準画像とを照合して前記目標駐車スペースを認識し、前記認識された目標駐車スペースの位置情報に基づいて、前記目標駐車スペースに至る自車両の走行動作を自律制御するコントローラと、を備える駐車支援装置。