JP2019139655A - Vehicle controller and parking area - Google Patents

Vehicle controller and parking area Download PDF

Info

Publication number
JP2019139655A
JP2019139655A JP2018024428A JP2018024428A JP2019139655A JP 2019139655 A JP2019139655 A JP 2019139655A JP 2018024428 A JP2018024428 A JP 2018024428A JP 2018024428 A JP2018024428 A JP 2018024428A JP 2019139655 A JP2019139655 A JP 2019139655A
Authority
JP
Japan
Prior art keywords
vehicle
area
road marking
control device
parking
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2018024428A
Other languages
Japanese (ja)
Other versions
JP7139618B2 (en
Inventor
久野 耕嗣
Koshi Kuno
耕嗣 久野
優 田中
Masaru Tanaka
優 田中
豊治 日与川
Toyoji Hiyokawa
豊治 日与川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Aisin AW Co Ltd
Aisin Corp
Original Assignee
Aisin Seiki Co Ltd
Aisin AW Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Aisin Seiki Co Ltd, Aisin AW Co Ltd filed Critical Aisin Seiki Co Ltd
Priority to JP2018024428A priority Critical patent/JP7139618B2/en
Publication of JP2019139655A publication Critical patent/JP2019139655A/en
Application granted granted Critical
Publication of JP7139618B2 publication Critical patent/JP7139618B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Traffic Control Systems (AREA)
  • Image Analysis (AREA)

Abstract

To readily achieve an accurate grasp of an actual position of a vehicle during automatic traveling.SOLUTION: A vehicle control device includes: an image data acquisition unit for acquiring image data obtained by an on-vehicle camera; a road surface sign data acquisition unit for acquiring road surface sign data related to positions of road surface signs composed of stripe patterns including a first area of a first color extending in a first direction and a second area of a second color different from the first color that is provided to lie adjacent to a second direction orthogonal to the first direction with respect to the first area; a position estimation unit for estimating an actual position of a vehicle by collation between the road surface sign data acquired by the road surface sign data acquisition unit and map data including absolute positions of road surface signs; and a traveling control unit for performing automatic traveling of the vehicle within the parking area by the control of traveling conditions of the vehicle, based on the actual position estimated by the position estimation unit.SELECTED DRAWING: Figure 5

Description

本発明の実施形態は、車両制御装置および駐車場に関する。   Embodiments described herein relate generally to a vehicle control device and a parking lot.

近年、駐車場内の所定の降車領域で車両から乗員が降車した後、所定の指示に応じて車両が降車領域から空きの駐車領域へ自動で移動して駐車する自動駐車と、当該自動駐車が完了した後、所定の呼び出しに応じて車両が駐車領域から出庫して所定の乗車領域へ自動で移動して停車する自動出庫と、を含む自動バレー駐車を実現するための技術が検討されている。   In recent years, after an occupant gets off from a vehicle in a predetermined getting-off area in a parking lot, the automatic parking in which the vehicle automatically moves from the getting-off area to an empty parking area according to a predetermined instruction, and the automatic parking is completed. After that, a technique for realizing automatic valet parking including a vehicle that leaves a parking area in response to a predetermined call and automatically moves to a predetermined boarding area and stops is being studied.

特開2015−41348号公報JP2015-41348A

上記のような自動バレー駐車などといった、自動走行が前提となる技術においては、自動走行中における車両の現在位置(実位置)を正確に把握することが重要となる。この点に関して、従来から、車輪速センサなどの検出値を用いて車両の実位置を推定する手法(いわゆるオドメトリ)が知られている。しかしながら、この手法においては、車両の移動距離が大きくなる程、推定結果の誤差が累積されて大きくなっていくため、車両の実位置を正確に把握することができない場合がある。   In the technology that is based on the premise of automatic traveling such as automatic valet parking as described above, it is important to accurately grasp the current position (actual position) of the vehicle during automatic traveling. With respect to this point, conventionally, a method (so-called odometry) for estimating the actual position of the vehicle using a detection value of a wheel speed sensor or the like is known. However, in this method, as the moving distance of the vehicle increases, errors in the estimation results accumulate and increase, so that the actual position of the vehicle may not be accurately grasped.

これに対して、車両の周辺の状況を撮像する車載カメラによって得られた画像データから車両の実位置の推定のもととなるデータ(たとえば駐車場に設置された路面標示の位置に関する路面標示データ)を取得する画像認識機能と、当該画像認識機能によって取得されたデータを所定のデータ(たとえば駐車場の地図データ)と照合することで車両の実位置を推定する位置推定機能と、当該位置推定機能によって推定された実位置に基づいて車両の走行制御を行う走行制御機能と、を車両制御装置に持たせることで、自動走行中における車両の実位置の正確な把握を実現することが考えられる。この場合においては、路面標示データを簡単に取得することできれば望ましい。   On the other hand, data (for example, road marking data relating to the position of a road marking installed in a parking lot) that is the basis of the estimation of the actual position of the vehicle from image data obtained by an in-vehicle camera that captures the situation around the vehicle ), A position estimation function for estimating the actual position of the vehicle by collating data acquired by the image recognition function with predetermined data (for example, map data of a parking lot), and the position estimation It is conceivable to realize an accurate grasp of the actual position of the vehicle during automatic traveling by providing the vehicle control device with a traveling control function that performs traveling control of the vehicle based on the actual position estimated by the function. . In this case, it is desirable that road marking data can be easily obtained.

そこで、実施形態の課題の一つは、路面標示データを簡単に取得し、自動走行中における車両の実位置の正確な把握を簡単に実現することが可能な車両制御装置および駐車場を提供することである。   Therefore, one of the problems of the embodiment is to provide a vehicle control device and a parking lot that can easily acquire road marking data and easily realize an accurate grasp of the actual position of the vehicle during automatic traveling. That is.

実施形態の一例としての車両制御装置は、車両の周辺の状況を撮像する車載カメラによって得られる画像データを取得する画像データ取得部と、画像データに基づく画像認識処理を実施することで、駐車場内における車両の走行経路の周辺の路面に設置された路面標示であって、第1方向に延びる第1色の第1領域と、当該第1領域に対して第1方向と交差する第2方向に隣接するように設けられ、第1色とは異なる第2色の第2領域と、を含む縞パターンにより構成された路面標示の位置に関する路面標示データを取得する路面標示データ取得部と、路面標示データ取得部により取得された路面標示データと、路面標示の絶対位置を含む地図データと、を照合することで、車両の実位置を推定する位置推定部と、位置推定部により推定された実位置に基づいて車両の走行状態を制御することで、駐車場内での車両の自動走行を実施する走行制御部と、を備える。   A vehicle control apparatus as an example of an embodiment includes an image data acquisition unit that acquires image data obtained by an in-vehicle camera that captures a situation around the vehicle, and an image recognition process based on the image data. A road marking installed on the road surface in the vicinity of the travel route of the vehicle in the first direction of the first color extending in the first direction and the second direction intersecting the first direction with respect to the first area A road marking data acquisition unit that acquires road marking data related to the position of the road marking that is provided adjacent to the second area of the second color different from the first color and includes a stripe pattern, and a road marking By comparing the road marking data acquired by the data acquisition section with map data including the absolute position of the road marking, the position estimation section that estimates the actual position of the vehicle and the position estimation section By controlling the running state of the vehicle based on the actual position, comprising a running control unit for implementing the automatic traveling of the vehicle in a parking lot, a.

このような構成を備えた車両制御装置によれば、縞パターンという比較的簡単な構成を有する路面標示に基づいて、路面標示データを簡単に取得することができるので、自動走行中における車両の実位置の正確な把握を簡単に実現することができる。   According to the vehicle control device having such a configuration, road marking data can be easily obtained based on a road marking having a relatively simple configuration called a stripe pattern. Accurate grasping of the position can be realized easily.

上述した車両制御装置において、路面標示データ取得部は、第2方向の両端に第1領域または第2領域が設けられた路面標示の位置に関する路面標示データを取得する。このような構成によれば、画像認識処理において路面標示の第2方向の両端が同程度に認識されるので、路面標示のエッジが認識されやすくなり、路面標示データを簡単に取得することができる。   In the vehicle control device described above, the road marking data acquisition unit acquires road marking data related to the position of the road marking in which the first area or the second area is provided at both ends in the second direction. According to such a configuration, both ends in the second direction of the road marking are recognized to the same extent in the image recognition processing, so that the edge of the road marking is easily recognized, and the road marking data can be easily acquired. .

また、上述した車両制御装置において、路面標示データ取得部は、第2方向の中央部に第1領域および第2領域のうち一方の領域が1つ設けられ、かつ、当該一方の領域を第2方向の両側から挟み込むように第1領域および第2領域のうち他方が2つ設けられた矩形形状の路面標示の位置に関する路面標示データを取得する。このような構成によれば、第2方向の両端が同じ色の領域となる最も簡単な縞パターンの路面標示に基づいて、路面標示データを簡単に取得することができる。   In the vehicle control device described above, the road marking data acquisition unit is provided with one of the first region and the second region in the center in the second direction, and the one region is the second region. Road marking data relating to the position of a rectangular road marking in which the other one of the first area and the second area is provided so as to be sandwiched from both sides in the direction is acquired. According to such a configuration, road marking data can be easily acquired based on the simplest stripe pattern road marking in which both ends in the second direction are the same color area.

また、上述した車両制御装置において、路面標示データ取得部は、第1領域および第2領域のそれぞれが第1方向に延び、かつ、第1領域および第2領域のそれぞれの第2方向の幅が等しくなるように構成された路面標示の位置に関する路面標示データを取得する。このような構成によれば、第1領域と第2領域とのバランスがとれた縞パターンの路面標示に基づいて、路面標示データを簡単に取得することができる。   Further, in the vehicle control device described above, the road marking data acquisition unit is configured such that each of the first region and the second region extends in the first direction, and each of the first region and the second region has a width in the second direction. Road marking data relating to positions of road markings configured to be equal is acquired. According to such a configuration, road marking data can be easily acquired based on the road marking of the stripe pattern in which the first area and the second area are balanced.

また、上述した車両制御装置において、路面標示データ取得部は、第1色が第2色よりも暗く、かつ、第1領域で反射して車載カメラに向かう光の量が第2領域で反射して車載カメラに向かう光の量よりも小さくなるように構成された路面標示の位置に関する路面標示データを取得する。このように構成すれば、第1領域で反射して車載カメラに向かう光が相対的に低減されるので、路面標示に照射される光が比較的強い状況下においても、車載カメラの撮像によって得られた画像データ上で路面標示(およびその周辺の路面)が全体的に明るく(白っぽく)写ることが抑制される。その結果、画像認識処理において第1領域と第2領域との区別がつきやすくなるので、路面標示データを正確に取得することができる。   Further, in the vehicle control device described above, the road marking data acquisition unit is configured such that the first color is darker than the second color and the amount of light reflected by the first region and directed to the in-vehicle camera is reflected by the second region. Then, road marking data relating to the position of the road marking configured to be smaller than the amount of light directed to the vehicle-mounted camera is acquired. With this configuration, since the light reflected from the first region and directed to the in-vehicle camera is relatively reduced, it can be obtained by imaging with the in-vehicle camera even under a relatively strong light irradiated to the road marking. It is suppressed that the road marking (and the surrounding road surface) appears to be bright (whiter) as a whole on the obtained image data. As a result, since it becomes easy to distinguish the first area and the second area in the image recognition processing, road marking data can be obtained accurately.

また、上述した車両制御装置において、路面標示データ取得部は、第1領域に所定の表面加工が施されるか、または第1領域が所定の材料により構成されることで、第1領域で反射して車載カメラに向かう光の量が第2領域で反射して車載カメラに向かう光の量よりも小さくなるように構成された路面標示の位置に関する路面標示データを取得する。このように構成すれば、第1領域で反射して車載カメラに向かう光の低減が構造的な手法で実現された路面標示に基づいて、路面標示に照射される光が比較的強い状況下においても、路面標示データを正確に取得することができる。   Further, in the vehicle control device described above, the road marking data acquisition unit reflects the first area by applying a predetermined surface processing to the first area or by configuring the first area with a predetermined material. Then, road marking data relating to the position of the road marking that is configured such that the amount of light directed to the vehicle-mounted camera is smaller than the amount of light reflected by the second region and directed to the vehicle-mounted camera is acquired. If comprised in this way, based on the road marking by which the reduction | decrease of the light which reflects in a 1st area | region and it goes to a vehicle-mounted camera was implement | achieved by the structural method, in the situation where the light irradiated to a road marking is comparatively strong Also, road marking data can be obtained accurately.

また、上述した車両制御装置において、路面標示データ取得部は、互いに隣接するように複数設けられた路面標示であって、隣接する路面標示同士で第1方向の向きが異なるように複数設けられた路面標示の複数の位置に関する路面標示データを取得する。このように構成すれば、画像認識処理において隣接する路面標示同士の混同が生じるのを回避することができるので、路面標示データを正確に取得することができる。   Further, in the vehicle control device described above, the road marking data acquisition unit is a plurality of road markings provided so as to be adjacent to each other, and a plurality of road marking data acquisition units are provided so that the directions in the first direction are different between adjacent road markings. Road marking data relating to a plurality of positions of the road marking is acquired. With this configuration, it is possible to avoid confusion between adjacent road markings in the image recognition process, so that road marking data can be accurately acquired.

また、上述した車両制御装置において、自動走行は、降車領域と乗車領域と駐車領域とを含む駐車場における自動バレー駐車を実現するための、降車領域で車両から乗員が降車した後、所定の指示に応じて車両が降車領域から駐車領域へ自動で移動して駐車する自動駐車と、当該自動駐車が完了した後、所定の呼び出しに応じて車両が駐車領域から出庫して乗車領域へ自動で移動して停車する自動出庫と、を含む。このような構成によれば、自動バレー駐車の自動走行(自動駐車および自動出庫)中における車両の実位置の正確な把握を効率的に実現することができる。   Further, in the vehicle control device described above, the automatic travel is performed after a passenger gets off from the vehicle in the getting-off area to realize automatic valet parking in a parking lot including the getting-off area, the getting-on area, and the parking area. Depending on the situation, the vehicle automatically moves from the getting-off area to the parking area and parks, and after the automatic parking is completed, the vehicle leaves the parking area and automatically moves to the boarding area in response to a predetermined call. And automatic delivery to stop. According to such a configuration, it is possible to efficiently realize an accurate grasp of the actual position of the vehicle during automatic valet parking automatic travel (automatic parking and automatic delivery).

実施形態の他の一例としての駐車場は、車両の自動走行が実施される駐車場であって、
車両の走行経路の近傍の路面に設置され、第1方向に延びる第1色の第1領域と、当該第1領域に対して第1方向と交差する第2方向に隣接するように設けられ、第1色とは異なる第2色の第2領域と、を含む縞パターンにより構成された路面標示を備える。
A parking lot as another example of the embodiment is a parking lot in which automatic driving of a vehicle is performed,
It is installed on the road surface in the vicinity of the travel route of the vehicle, and is provided so as to be adjacent to the first region of the first color extending in the first direction and the second direction intersecting the first direction with respect to the first region, A road marking composed of a stripe pattern including a second region of a second color different from the first color is provided.

このような構成を備えた駐車場によれば、駐車場を走行する車両の車両制御装置が、車両の周辺の状況を撮像する車載カメラによって得られた画像データから車両の実位置の推定のもととなるデータ(たとえば駐車場に設置された路面標示の位置に関する路面標示データ)を取得する画像認識機能と、当該画像認識機能によって取得されたデータを所定のデータ(たとえば駐車場の地図データ)と照合することで車両の実位置を推定する位置推定機能と、当該位置推定機能によって推定された実位置に基づいて車両の走行制御を行う走行制御機能と、を有している場合に、当該車両制御装置に、縞パターンという比較的簡単な構成を有する路面標示に基づいて、路面標示データを簡単に取得させることができる。その結果、自動走行中における車両の実位置の正確な把握を簡単に実現することができる。   According to the parking lot having such a configuration, the vehicle control device for the vehicle traveling in the parking lot estimates the actual position of the vehicle from the image data obtained by the in-vehicle camera that captures the situation around the vehicle. An image recognition function that acquires data (for example, road marking data related to the position of a road marking installed in a parking lot) and predetermined data (for example, map data for a parking lot) obtained by the image recognition function. And a travel control function for performing travel control of the vehicle based on the actual position estimated by the position estimation function. The vehicle control device can easily acquire road marking data based on a road marking having a relatively simple configuration called a stripe pattern. As a result, it is possible to easily realize an accurate grasp of the actual position of the vehicle during automatic traveling.

図1は、実施形態にかかる自動バレー駐車システムにおける自動駐車の一例を示した例示的かつ模式的な図である。Drawing 1 is an exemplary and typical figure showing an example of automatic parking in an automatic valet parking system concerning an embodiment. 図2は、実施形態にかかる自動バレー駐車システムにおける自動出庫の一例を示した例示的かつ模式的な図である。FIG. 2 is an exemplary schematic diagram illustrating an example of automatic delivery in the automatic valet parking system according to the embodiment. 図3は、実施形態にかかる管制装置のハードウェア構成を示した例示的かつ模式的なブロック図である。FIG. 3 is an exemplary schematic block diagram illustrating a hardware configuration of the control device according to the embodiment. 図4は、実施形態にかかる車両制御システムのシステム構成を示した例示的かつ模式的なブロック図である。FIG. 4 is an exemplary schematic block diagram illustrating a system configuration of the vehicle control system according to the embodiment. 図5は、実施形態にかかる管制装置および車両制御装置の機能的構成を示した例示的かつ模式的なブロック図である。FIG. 5 is an exemplary schematic block diagram illustrating functional configurations of the control device and the vehicle control device according to the embodiment. 図6は、実施形態にかかる車両制御装置が車両の実位置を推定する状況の具体例を示した例示的かつ模式的な図である。FIG. 6 is an exemplary schematic diagram illustrating a specific example of a situation in which the vehicle control device according to the embodiment estimates the actual position of the vehicle. 図7は、実施形態にかかる路面標示としてのマーカの一例を示した例示的かつ模式的な図である。FIG. 7 is an exemplary schematic diagram illustrating an example of a marker as a road marking according to the embodiment. 図8は、実施形態にかかる路面標示としてのマーカの特性を説明するための例示的かつ模式的な図である。FIG. 8 is an exemplary schematic diagram for explaining the characteristics of the marker as the road marking according to the embodiment. 図9は、実施形態にかかる管制装置および車両制御装置が自動駐車の際に実行する処理の流れを示した例示的かつ模式的なシーケンス図である。FIG. 9 is an exemplary and schematic sequence diagram illustrating a flow of processing executed by the control device and the vehicle control device according to the embodiment during automatic parking. 図10は、実施形態にかかる管制装置および車両制御装置が自動出庫の際に実行する処理の流れを示した例示的かつ模式的なシーケンス図である。FIG. 10 is an exemplary and schematic sequence diagram illustrating a flow of processing executed by the control device and the vehicle control device according to the embodiment at the time of automatic delivery. 図11は、実施形態にかかる車両制御装置が自動走行中に実行する実位置の推定処理の概略的な流れを示した例示的かつ模式的なフローチャートである。FIG. 11 is an exemplary and schematic flowchart illustrating a schematic flow of an actual position estimation process executed by the vehicle control device according to the embodiment during automatic traveling. 図12は、実施形態にかかる車両制御装置が自動走行中に実行する実位置の推定処理の詳細な流れを示した例示的かつ模式的なフローチャートである。FIG. 12 is an exemplary and schematic flowchart showing a detailed flow of an actual position estimation process executed by the vehicle control device according to the embodiment during automatic traveling. 図13は、変形例にかかる路面標示の一例としてのマーカを示した例示的かつ模式的な図である。FIG. 13 is an exemplary schematic diagram illustrating a marker as an example of a road marking according to a modification. 図14は、変形例にかかる路面標示の他の一例としてのマーカを示した例示的かつ模式的な図である。FIG. 14 is an exemplary schematic diagram illustrating a marker as another example of the road marking according to the modification. 図15は、変形例にかかる路面標示のさらに他の一例としてのマーカを示した例示的かつ模式的な図である。FIG. 15 is an exemplary schematic diagram illustrating a marker as still another example of the road marking according to the modification.

以下、実施形態を図面に基づいて説明する。以下に記載する実施形態の構成、ならびに当該構成によってもたらされる作用および結果(効果)は、あくまで一例であって、以下の記載内容に限られるものではない。   Hereinafter, embodiments will be described with reference to the drawings. The configuration of the embodiment described below, and the operation and result (effect) brought about by the configuration are merely examples, and are not limited to the following description.

<実施形態>
まず、図1および図2を参照して、実施形態にかかる自動バレー駐車システムの概略について説明する。ここで、自動バレー駐車システムとは、白線などといった区画線Lで区画された1以上の駐車領域Rを有する駐車場Pにおいて、以下に説明するような自動駐車および自動出庫を含む自動バレー駐車を実現するためのシステムである。
<Embodiment>
First, with reference to FIG. 1 and FIG. 2, the outline of the automatic valet parking system concerning embodiment is demonstrated. Here, the automatic valet parking system refers to automatic valet parking including automatic parking and automatic delivery as described below in a parking lot P having one or more parking areas R partitioned by a lane marking L such as a white line. It is a system to realize.

図1は、実施形態にかかる自動バレー駐車システムにおける自動駐車の一例を示した例示的かつ模式的な図であり、図2は、実施形態にかかる自動バレー駐車システムにおける自動出庫の一例を示した例示的かつ模式的な図である。   FIG. 1 is an exemplary schematic diagram illustrating an example of automatic parking in the automatic valet parking system according to the embodiment, and FIG. 2 illustrates an example of automatic delivery in the automatic valet parking system according to the embodiment. It is an exemplary and schematic diagram.

図1および図2に示されるように、自動バレー駐車においては、駐車場P内の所定の降車領域P1で車両Vから乗員Xが降車した後、所定の指示に応じて車両Vが降車領域P1から空きの駐車領域Rへ自動で移動して駐車する自動駐車(図1の矢印C1参照)と、当該自動駐車が完了した後、所定の呼び出しに応じて車両Vが駐車領域Rから出庫して所定の乗車領域P2へ自動で移動して停車する自動出庫(図2の矢印C2参照)と、が実行される。なお、所定の指示および所定の呼び出しは、乗員Xによる端末装置Tの操作によって実現される。   As shown in FIG. 1 and FIG. 2, in the automatic valet parking, after the occupant X gets out of the vehicle V in the predetermined getting-off area P1 in the parking lot P, the vehicle V gets out of the getting-off area P1 Automatic parking (see arrow C1 in FIG. 1) that automatically moves from the parking space to an empty parking area R, and after the automatic parking is completed, the vehicle V leaves the parking area R in response to a predetermined call. Automatic delivery (see arrow C2 in FIG. 2) that automatically moves to a predetermined boarding area P2 and stops is executed. The predetermined instruction and the predetermined call are realized by the operation of the terminal device T by the occupant X.

また、図1および図2に示されるように、自動バレー駐車システムは、駐車場Pに設けられた管制装置101と、車両Vに搭載された車両制御システム102と、を有している。管制装置101と車両制御システム102とは、無線通信によって互いに通信可能に構成されている。   As shown in FIGS. 1 and 2, the automatic valet parking system includes a control device 101 provided in the parking lot P and a vehicle control system 102 mounted on the vehicle V. The control device 101 and the vehicle control system 102 are configured to be able to communicate with each other by wireless communication.

管制装置101は、駐車場Pの地図データを管理するように構成されている。地図データは、上述した区画線Lや後述するマーカM(図6〜図8参照)などといった、駐車場Pの路面に固定的に設置された路面標示の(正規の)絶対位置を特定するための情報を含んでいる。なお、ここで言及している絶対位置は、路面標示が有する方向性(絶対方位)も含みうる概念である。つまり、路面標示が所定の向き(方向性)を持った線状の標示を含んでいる場合、地図データからは、路面標示が設けられた絶対位置のみならず、路面標示に含まれる線状の標示によって表される絶対方位も特定可能である。   The control device 101 is configured to manage the map data of the parking lot P. The map data is for specifying the (regular) absolute position of the road marking fixedly installed on the road surface of the parking lot P such as the lane marking L described above and the marker M (see FIGS. 6 to 8) described later. Contains information. The absolute position referred to here is a concept that can include the directionality (absolute direction) of the road marking. In other words, when the road marking includes a linear marking having a predetermined direction (direction), the map data includes not only the absolute position where the road marking is provided, but also the linear marking included in the road marking. The absolute orientation represented by the marking can also be specified.

また、管制装置101は、駐車場P内の状況を撮像する1以上の監視カメラ103から得られる画像データや、駐車場P内に設けられる各種のセンサ(不図示)などから出力されるデータを受け取ることで駐車場P内の状況を監視し、監視結果に基づいて、駐車領域Rを管理するように構成されている。以下では、駐車場P内の状況を監視するために管制装置101が受け取る情報を総称してセンサデータと記載することがある。   In addition, the control apparatus 101 receives image data obtained from one or more monitoring cameras 103 that capture the situation in the parking lot P, and data output from various sensors (not shown) provided in the parking lot P. By receiving, the situation in the parking lot P is monitored, and the parking area R is managed based on the monitoring result. Below, the information which the control apparatus 101 receives in order to monitor the condition in the parking lot P may be named generically and may be described as sensor data.

なお、実施形態において、駐車場Pにおける降車領域P1、乗車領域P2、および駐車領域Rの数や配置などは、図1および図2に示された例に制限されるものではない。実施形態の技術は、図1および図2に示された駐車場Pとは異なる様々な構成の駐車場に適用可能である。   In the embodiment, the number and arrangement of the getting-off area P1, the boarding area P2, and the parking area R in the parking lot P are not limited to the examples shown in FIGS. The technology of the embodiment can be applied to a parking lot having various configurations different from the parking lot P shown in FIGS. 1 and 2.

次に、図3および図4を参照して、実施形態にかかる管制装置101および車両制御システム102の構成について説明する。なお、図3および図4に示される構成は、あくまで一例であり、実施形態にかかる管制装置101および車両制御システム102の構成は、種々に設定(変更)可能である。   Next, with reference to FIG. 3 and FIG. 4, the structure of the control apparatus 101 and the vehicle control system 102 concerning embodiment is demonstrated. The configurations shown in FIGS. 3 and 4 are merely examples, and the configurations of the control device 101 and the vehicle control system 102 according to the embodiment can be set (changed) in various ways.

まず、図3を参照して、実施形態にかかる管制装置101のハードウェア構成について説明する。   First, a hardware configuration of the control device 101 according to the embodiment will be described with reference to FIG.

図3は、実施形態にかかる管制装置101のハードウェア構成を示した例示的かつ模式的なブロック図である。図3に示されるように、実施形態にかかる管制装置101は、PC(Personal Computer)などといった一般的な情報処理装置と同様のコンピュータ資源を有している。   FIG. 3 is an exemplary schematic block diagram illustrating a hardware configuration of the control device 101 according to the embodiment. As shown in FIG. 3, the control device 101 according to the embodiment has the same computer resources as a general information processing device such as a PC (Personal Computer).

図3に示される例において、管制装置101は、CPU(Central Processing Unit)301と、ROM(Read Only Memory)302と、RAM(Random Access Memory)303と、通信インターフェース(I/F)304と、入出力インターフェース(I/F)305と、SSD(Solid State Drive)306と、を有している。これらのハードウェアは、バス350を介して互いに接続されている。   In the example shown in FIG. 3, the control device 101 includes a CPU (Central Processing Unit) 301, a ROM (Read Only Memory) 302, a RAM (Random Access Memory) 303, a communication interface (I / F) 304, An input / output interface (I / F) 305 and an SSD (Solid State Drive) 306 are included. These hardware are connected to each other via a bus 350.

CPU301は、管制装置101を統括的に制御するハードウェアプロセッサである。CPU301は、ROM302などに記憶された各種の制御プログラム(コンピュータプログラム)を読み出し、当該各種の制御プログラムに規定されたインストラクションにしたがって各種の機能を実現する。   The CPU 301 is a hardware processor that comprehensively controls the control device 101. The CPU 301 reads out various control programs (computer programs) stored in the ROM 302 and implements various functions according to instructions defined in the various control programs.

ROM302は、上述した各種の制御プログラムの実行に必要なパラメータなどを記憶する不揮発性の主記憶装置である。   The ROM 302 is a nonvolatile main storage device that stores parameters necessary for executing the various control programs described above.

RAM303は、CPU301の作業領域を提供する揮発性の主記憶装置である。   A RAM 303 is a volatile main storage device that provides a work area for the CPU 301.

通信インターフェース304は、管制装置101と外部装置との間の通信を実現するインターフェースである。たとえば、通信インターフェース304は、管制装置101と車両V(車両制御システム102)との間の無線通信による信号の送受信を実現する。   The communication interface 304 is an interface that realizes communication between the control device 101 and an external device. For example, the communication interface 304 realizes transmission / reception of signals by wireless communication between the control device 101 and the vehicle V (vehicle control system 102).

入出力インターフェース305は、管制装置101と外部装置との接続を実現するインターフェースである。外部装置としては、たとえば、管制装置101のオペレータが使用する入出力デバイスなどが考えられる。   The input / output interface 305 is an interface that realizes connection between the control device 101 and an external device. As the external device, for example, an input / output device used by an operator of the control device 101 can be considered.

SSD306は、書き換え可能な不揮発性の補助記憶装置である。なお、実施形態にかかる管制装置101においては、補助記憶装置として、SSD306に替えて(またはSSD306に加えて)、HDD(Hard Disk Drive)が設けられてもよい。   The SSD 306 is a rewritable nonvolatile auxiliary storage device. In the control device 101 according to the embodiment, an HDD (Hard Disk Drive) may be provided as an auxiliary storage device instead of the SSD 306 (or in addition to the SSD 306).

次に、図4を参照して、実施形態にかかる車両制御システム102のシステム構成について説明する。   Next, a system configuration of the vehicle control system 102 according to the embodiment will be described with reference to FIG.

図4は、実施形態にかかる車両制御システム102のシステム構成を示した例示的かつ模式的なブロック図である。図4に示されるように、車両制御システム102は、制動システム401と、加速システム402と、操舵システム403と、変速システム404と、障害物センサ405と、走行状態センサ406と、通信インターフェース(I/F)407と、車載カメラ408と、モニタ装置409と、車両制御装置410と、車載ネットワーク450と、を有している。   FIG. 4 is an exemplary schematic block diagram illustrating a system configuration of the vehicle control system 102 according to the embodiment. As shown in FIG. 4, the vehicle control system 102 includes a braking system 401, an acceleration system 402, a steering system 403, a transmission system 404, an obstacle sensor 405, a traveling state sensor 406, and a communication interface (I / F) 407, an in-vehicle camera 408, a monitor device 409, a vehicle control device 410, and an in-vehicle network 450.

制動システム401は、車両Vの減速を制御する。制動システム401は、制動部401aと、制動制御部401bと、制動部センサ401cと、を有している。   The braking system 401 controls the deceleration of the vehicle V. The braking system 401 includes a braking unit 401a, a braking control unit 401b, and a braking unit sensor 401c.

制動部401aは、たとえば、ブレーキペダルなどを含んだ、車両Vを減速させるための装置である。   The braking unit 401a is a device for decelerating the vehicle V including a brake pedal, for example.

制動制御部401bは、たとえば、CPUなどといったハードウェアプロセッサを有したコンピュータにより構成されるECU(Electronic Control Unit)である。制動制御部401bは、車両制御装置410からの指示に基づいてアクチュエータ(不図示)を駆動し、制動部401aを作動させることで、車両Vの減速度合を制御する。   The braking control unit 401b is an ECU (Electronic Control Unit) configured by a computer having a hardware processor such as a CPU, for example. The braking control unit 401b controls an amount of deceleration of the vehicle V by driving an actuator (not shown) based on an instruction from the vehicle control device 410 and operating the braking unit 401a.

制動部センサ401cは、制動部401aの状態を検出するための装置である。たとえば、制動部401aがブレーキペダルを含む場合、制動部センサ401cは、制動部401aの状態として、ブレーキペダルの位置または当該ブレーキペダルに作用している圧力を検出する。制動部センサ401cは、検出した制動部401aの状態を車載ネットワーク450に出力する。   The brake unit sensor 401c is a device for detecting the state of the brake unit 401a. For example, when the brake unit 401a includes a brake pedal, the brake unit sensor 401c detects the position of the brake pedal or the pressure acting on the brake pedal as the state of the brake unit 401a. The braking unit sensor 401c outputs the detected state of the braking unit 401a to the in-vehicle network 450.

加速システム402は、車両Vの加速を制御する。加速システム402は、加速部402aと、加速制御部402bと、加速部センサ402cと、を有している。   The acceleration system 402 controls the acceleration of the vehicle V. The acceleration system 402 includes an acceleration unit 402a, an acceleration control unit 402b, and an acceleration unit sensor 402c.

加速部402aは、たとえば、アクセルペダルなどを含んだ、車両Vを加速させるための装置である。   The acceleration part 402a is an apparatus for accelerating the vehicle V including an accelerator pedal etc., for example.

加速制御部402bは、たとえば、CPUなどといったハードウェアプロセッサを有したコンピュータにより構成されるECUである。加速制御部402bは、車両制御装置410からの指示に基づいてアクチュエータ(不図示)を駆動し、加速部402aを作動させることで、車両Vの加速度合を制御する。   The acceleration control unit 402b is an ECU configured by a computer having a hardware processor such as a CPU, for example. The acceleration control unit 402b controls an acceleration degree of the vehicle V by driving an actuator (not shown) based on an instruction from the vehicle control device 410 and operating the acceleration unit 402a.

加速部センサ402cは、加速部402aの状態を検出するための装置である。たとえば、加速部402aがアクセルペダルを含む場合、加速部センサ402cは、アクセルペダルの位置または当該アクセルペダルに作用している圧力を検出する。加速部センサ402cは、検出した加速部402aの状態を車載ネットワーク450に出力する。   The acceleration unit sensor 402c is a device for detecting the state of the acceleration unit 402a. For example, when the acceleration unit 402a includes an accelerator pedal, the acceleration unit sensor 402c detects the position of the accelerator pedal or the pressure acting on the accelerator pedal. The acceleration unit sensor 402c outputs the detected state of the acceleration unit 402a to the in-vehicle network 450.

操舵システム403は、車両Vの進行方向を制御する。操舵システム403は、操舵部403aと、操舵制御部403bと、操舵部センサ403cと、を有している。   The steering system 403 controls the traveling direction of the vehicle V. The steering system 403 includes a steering unit 403a, a steering control unit 403b, and a steering unit sensor 403c.

操舵部403aは、たとえば、ステアリングホイールやハンドルなどを含んだ、車両Vの転舵輪を転舵させる装置である。   The steering unit 403a is a device that steers steered wheels of the vehicle V including, for example, a steering wheel and a handle.

操舵制御部403bは、たとえば、CPUなどといったハードウェアプロセッサを有したコンピュータにより構成されるECUである。操舵制御部403bは、車両制御装置410からの指示に基づいてアクチュエータ(不図示)を駆動し、操舵部403aを作動させることで、車両Vの進行方向を制御する。   The steering control unit 403b is an ECU configured by a computer having a hardware processor such as a CPU, for example. The steering control unit 403b controls an advancing direction of the vehicle V by driving an actuator (not shown) based on an instruction from the vehicle control device 410 and operating the steering unit 403a.

操舵部センサ403cは、操舵部403aの状態を検出するための装置である。たとえば、操舵部403aがステアリングホイールを含む場合、操舵部センサ403cは、ステアリングホイールの位置または当該ステアリングホイールの回転角度を検出する。なお、操舵部403aがハンドルを含む場合、操舵部センサ403cは、ハンドルの位置または当該ハンドルに作用している圧力を検出してもよい。操舵部センサ403cは、検出した操舵部403aの状態を車載ネットワーク450に出力する。   The steering unit sensor 403c is a device for detecting the state of the steering unit 403a. For example, when the steering unit 403a includes a steering wheel, the steering unit sensor 403c detects the position of the steering wheel or the rotation angle of the steering wheel. When the steering unit 403a includes a handle, the steering unit sensor 403c may detect the position of the handle or the pressure acting on the handle. The steering unit sensor 403c outputs the detected state of the steering unit 403a to the in-vehicle network 450.

変速システム404は、車両Vの変速比を制御する。変速システム404は、変速部404aと、変速制御部404bと、変速部センサ404cと、を有している。   The transmission system 404 controls the transmission ratio of the vehicle V. The transmission system 404 includes a transmission unit 404a, a transmission control unit 404b, and a transmission unit sensor 404c.

変速部404aは、たとえば、シフトレバーなどを含んだ、車両Vの変速比を変更するための装置である。   The transmission unit 404a is a device for changing the transmission ratio of the vehicle V including a shift lever, for example.

変速制御部404bは、たとえば、CPUなどといったハードウェアプロセッサを有したコンピュータにより構成されるECUである。変速制御部404bは、車両制御装置410からの指示に基づいてアクチュエータ(不図示)を駆動し、変速部404aを作動させることで、車両Vの変速比を制御する。   The shift control unit 404b is an ECU configured by a computer having a hardware processor such as a CPU, for example. The shift control unit 404b drives an actuator (not shown) based on an instruction from the vehicle control device 410 and operates the shift unit 404a to control the transmission ratio of the vehicle V.

変速部センサ404cは、変速部404aの状態を検出するための装置である。たとえば、変速部404aがシフトレバーを含む場合、変速部センサ404cは、シフトレバーの位置または当該シフトレバーに作用している圧力を検出する。変速部センサ404cは、検出した変速部404aの状態を車載ネットワーク450に出力する。   The transmission unit sensor 404c is a device for detecting the state of the transmission unit 404a. For example, when the transmission unit 404a includes a shift lever, the transmission unit sensor 404c detects the position of the shift lever or the pressure acting on the shift lever. The transmission unit sensor 404c outputs the detected state of the transmission unit 404a to the in-vehicle network 450.

障害物センサ405は、車両Vの周囲に存在しうる障害物に関する情報を検出するための装置である。障害物センサ405は、たとえば、障害物までの距離を検出するソナーなどといった測距センサを含んでいる。障害物センサ405は、検出した情報を車載ネットワーク450に出力する。   The obstacle sensor 405 is a device for detecting information related to obstacles that may exist around the vehicle V. The obstacle sensor 405 includes a distance measuring sensor such as a sonar that detects the distance to the obstacle. The obstacle sensor 405 outputs the detected information to the in-vehicle network 450.

走行状態センサ406は、車両Vの走行状態を検出するための装置である。走行状態センサ406は、たとえば、車両Vの車輪速を検出する車輪速センサや、車両Vの前後方向または左右方向の加速度を検出する加速度センサや、車両Vの旋回速度(角速度)を検出するジャイロセンサなどを含んでいる。走行状態センサ406は、検出した走行状態を車載ネットワーク450に出力する。   The traveling state sensor 406 is a device for detecting the traveling state of the vehicle V. The running state sensor 406 is, for example, a wheel speed sensor that detects the wheel speed of the vehicle V, an acceleration sensor that detects acceleration in the front-rear direction or the left-right direction of the vehicle V, and a gyro that detects the turning speed (angular velocity) of the vehicle V. Includes sensors. The traveling state sensor 406 outputs the detected traveling state to the in-vehicle network 450.

通信インターフェース407は、車両制御システム102と外部装置との間の通信を実現するインターフェースである。たとえば、通信インターフェース407は、車両制御システム102と管制装置101との間の無線通信による信号の送受信や、車両制御システム102と端末装置Tとの間の無線通信による信号の送受信などを実現する。   The communication interface 407 is an interface that realizes communication between the vehicle control system 102 and an external device. For example, the communication interface 407 realizes transmission / reception of signals by wireless communication between the vehicle control system 102 and the control device 101, transmission / reception of signals by wireless communication between the vehicle control system 102 and the terminal device T, and the like.

車載カメラ408は、車両Vの周辺の状況を撮像するための装置である。たとえば、車載カメラ408は、車両Vの前方、後方、および側方(左右両方)の路面を含む領域を撮像するように複数設けられる。車載カメラ408によって得られた画像データは、車両Vの周辺の状況の監視(障害物の検出も含む)に使用される。車載カメラ408は、得られた画像データを車両制御装置410に出力する。なお、以下では、車載カメラ408から得られる画像データと、車両制御システム102に設けられる上述した各種のセンサから得られるデータと、を総称してセンサデータと記載することがある。   The in-vehicle camera 408 is a device for imaging the situation around the vehicle V. For example, a plurality of in-vehicle cameras 408 are provided so as to image a region including the road surface in front, rear, and side (both left and right) of the vehicle V. The image data obtained by the in-vehicle camera 408 is used for monitoring the situation around the vehicle V (including detection of obstacles). The in-vehicle camera 408 outputs the obtained image data to the vehicle control device 410. Hereinafter, the image data obtained from the in-vehicle camera 408 and the data obtained from the various sensors provided in the vehicle control system 102 may be collectively referred to as sensor data.

モニタ装置409は、車両Vの車室内のダッシュボードなどに設けられる。モニタ装置409は、表示部409aと、音声出力部409bと、操作入力部409cと、を有している。   The monitor device 409 is provided on a dashboard in the passenger compartment of the vehicle V. The monitor device 409 includes a display unit 409a, an audio output unit 409b, and an operation input unit 409c.

表示部409aは、車両制御装置410の指示に応じて画像を表示するための装置である。表示部409aは、たとえば、液晶ディスプレイ(LCD:Liquid Crystal Display)や、有機ELディスプレイ(OELD:Organic Electroluminescent Display)などによって構成される。   The display unit 409a is a device for displaying an image in response to an instruction from the vehicle control device 410. The display unit 409a is configured by, for example, a liquid crystal display (LCD: Liquid Crystal Display), an organic EL display (OELD: Organic Electroluminescent Display), or the like.

音声出力部409bは、車両制御装置410の指示に応じて音声を出力するための装置である。音声出力部409bは、たとえば、スピーカによって構成される。   The sound output unit 409b is a device for outputting sound in response to an instruction from the vehicle control device 410. The audio output unit 409b is configured by a speaker, for example.

操作入力部409cは、車両V内の乗員の入力を受け付けるための装置である。操作入力部409cは、たとえば、表示部409aの表示画面に設けられるタッチパネルや、物理的な操作スイッチなどによって構成される。操作入力部409cは、受け付けた入力を車載ネットワーク450に出力する。   The operation input unit 409c is a device for receiving an input from an occupant in the vehicle V. The operation input unit 409c is configured by, for example, a touch panel provided on the display screen of the display unit 409a, a physical operation switch, or the like. The operation input unit 409c outputs the received input to the in-vehicle network 450.

車両制御装置410は、車両制御システム102を統括的に制御するための装置である。車両制御装置410は、CPU410aや、ROM410b、RAM410cなどといったハードウェア(コンピュータ資源)を有したECUである。   The vehicle control device 410 is a device for comprehensively controlling the vehicle control system 102. The vehicle control device 410 is an ECU having hardware (computer resources) such as a CPU 410a, a ROM 410b, a RAM 410c, and the like.

より具体的に、車両制御装置410は、CPU410aと、ROM410bと、RAM410cと、SSD410dと、表示制御部410eと、音声制御部410fと、を有している。   More specifically, the vehicle control device 410 includes a CPU 410a, a ROM 410b, a RAM 410c, an SSD 410d, a display control unit 410e, and an audio control unit 410f.

CPU410aは、車両制御装置410を統括的に制御するハードウェアプロセッサである。CPU410aは、ROM410bなどに記憶された各種の制御プログラム(コンピュータプログラム)を読み出し、当該各種の制御プログラムに規定されたインストラクションにしたがって各種の機能を実現する。   The CPU 410a is a hardware processor that comprehensively controls the vehicle control device 410. The CPU 410a reads various control programs (computer programs) stored in the ROM 410b and realizes various functions according to instructions defined in the various control programs.

ROM410bは、上述した各種の制御プログラムの実行に必要なパラメータなどを記憶する不揮発性の主記憶装置である。   The ROM 410b is a non-volatile main storage device that stores parameters necessary for executing the various control programs described above.

RAM410cは、CPU410aの作業領域を提供する揮発性の主記憶装置である。   The RAM 410c is a volatile main storage device that provides a work area for the CPU 410a.

SSD410dは、書き換え可能な不揮発性の補助記憶装置である。なお、実施形態にかかる車両制御装置410においては、補助記憶装置として、SSD410dに替えて(またはSSD410dに加えて)、HDDが設けられてもよい。   The SSD 410d is a rewritable nonvolatile auxiliary storage device. In the vehicle control device 410 according to the embodiment, an HDD may be provided as an auxiliary storage device instead of the SSD 410d (or in addition to the SSD 410d).

表示制御部410eは、車両制御装置410で実行される各種の処理のうち、主として、車載カメラ408から得られた画像データに対する画像処理や、モニタ装置409の表示部409aに出力する画像データの生成などを司る。   The display control unit 410e mainly performs image processing on image data obtained from the in-vehicle camera 408 and generation of image data to be output to the display unit 409a of the monitor device 409 among various processes executed by the vehicle control device 410. To manage.

音声制御部410fは、車両制御装置410で実行される各種の処理のうち、主として、モニタ装置409の音声出力部409bに出力する音声データの生成などを司る。   The voice control unit 410 f mainly manages generation of voice data to be output to the voice output unit 409 b of the monitor device 409 among various processes executed by the vehicle control device 410.

車載ネットワーク450は、制動システム401と、加速システム402と、操舵システム403と、変速システム404と、障害物センサ405と、走行状態センサ406と、通信インターフェース407と、モニタ装置409の操作入力部409cと、車両制御装置410と、を通信可能に接続する。   The in-vehicle network 450 includes a braking system 401, an acceleration system 402, a steering system 403, a transmission system 404, an obstacle sensor 405, a running state sensor 406, a communication interface 407, and an operation input unit 409c of the monitor device 409. And the vehicle control device 410 are communicably connected.

ところで、上述した自動バレー駐車システムのような、自動走行が前提となる技術においては、自動走行中における車両Vの現在位置(実位置)を正確に把握することが重要となる。この点に関して、従来から、車輪速センサなどの検出値を用いて車両Vの実位置を推定する手法(いわゆるオドメトリ)が知られている。しかしながら、この手法においては、車両Vの移動距離が大きくなる程、推定結果の誤差が累積されて大きくなっていくため、車両Vの実位置を正確に把握することができない場合がある。   By the way, in the technology based on the premise of automatic traveling, such as the automatic valet parking system described above, it is important to accurately grasp the current position (actual position) of the vehicle V during automatic traveling. With respect to this point, conventionally, a method (so-called odometry) for estimating the actual position of the vehicle V using a detection value of a wheel speed sensor or the like is known. However, in this method, as the moving distance of the vehicle V increases, errors in estimation results accumulate and increase, and thus the actual position of the vehicle V may not be accurately grasped.

これに対して、車載カメラ408によって得られた画像データから車両Vの実位置の推定のもととなるデータ(たとえば駐車場Pの路面標示の位置に関する路面標示データ)を取得する画像認識機能と、当該画像認識機能によって取得されたデータを所定のデータ(たとえば駐車場Pの地図データ)と照合することで車両Vの実位置を推定する位置推定機能と、当該位置推定機能によって推定された実位置を考慮して車両Vの走行制御を行う走行制御機能と、を車両制御装置410に持たせることで、自動走行中における車両Vの実位置の正確な把握を実現することが考えられる。この場合においては、路面標示データを簡単に取得することできれば望ましい。   On the other hand, an image recognition function for acquiring data (for example, road marking data regarding the position of the road marking of the parking lot P) from which the actual position of the vehicle V is estimated from the image data obtained by the in-vehicle camera 408; The position estimation function for estimating the actual position of the vehicle V by comparing the data acquired by the image recognition function with predetermined data (for example, map data of the parking lot P), and the actual estimation estimated by the position estimation function It can be considered that the vehicle control device 410 has a travel control function for performing travel control of the vehicle V in consideration of the position, thereby realizing an accurate grasp of the actual position of the vehicle V during automatic travel. In this case, it is desirable that road marking data can be easily obtained.

そこで、実施形態は、以下に説明するような構成に基づき、路面標示データを簡単に取得し、自動走行中における車両Vの実位置の正確な把握を簡単に実現することを可能にする。   Therefore, the embodiment makes it possible to easily acquire road marking data based on the configuration described below, and to easily realize an accurate grasp of the actual position of the vehicle V during automatic traveling.

図5は、実施形態にかかる管制装置101および車両制御装置410の機能的構成を示した例示的かつ模式的なブロック図である。図5に示される機能モジュール群は、ソフトウェアとハードウェアとの協働によって実現される。つまり、図5に示される例において、管制装置101の機能モジュール群は、CPU301がROM302などに記憶された所定の制御プログラムを読み出して実行した結果として実現され、車両制御装置410の機能モジュール群は、CPU410aがROM410bなどに記憶された所定の制御プログラムを読み出して実行した結果として実現される。なお、実施形態では、図5に示される機能モジュール群の一部または全部が専用のハードウェア(回路)のみによって実現されてもよい。   FIG. 5 is an exemplary schematic block diagram illustrating functional configurations of the control device 101 and the vehicle control device 410 according to the embodiment. The functional module group shown in FIG. 5 is realized by cooperation of software and hardware. That is, in the example shown in FIG. 5, the functional module group of the control device 101 is realized as a result of the CPU 301 reading and executing a predetermined control program stored in the ROM 302 or the like, and the functional module group of the vehicle control device 410 is This is realized as a result of the CPU 410a reading and executing a predetermined control program stored in the ROM 410b or the like. In the embodiment, a part or all of the functional module group shown in FIG. 5 may be realized only by dedicated hardware (circuit).

図5に示されるように、実施形態にかかる管制装置101は、機能的構成として、通信制御部511と、センサデータ取得部512と、駐車場データ管理部513と、誘導経路生成部514と、を有している。   As shown in FIG. 5, the control device 101 according to the embodiment includes, as a functional configuration, a communication control unit 511, a sensor data acquisition unit 512, a parking lot data management unit 513, a guidance route generation unit 514, have.

通信制御部511は、車両制御装置410との間で実行される無線通信を制御する。たとえば、通信制御部511は、車両制御装置410との間で所定のデータを送受信することで車両制御装置410の認証を行ったり、自動駐車および自動出庫が完了した際に車両制御装置410から出力される所定の完了通知を受信したり、後述する駐車場Pの地図データや誘導経路などを必要に応じて車両制御装置410に送信したりする。   The communication control unit 511 controls wireless communication performed with the vehicle control device 410. For example, the communication control unit 511 authenticates the vehicle control device 410 by transmitting and receiving predetermined data to and from the vehicle control device 410, and outputs from the vehicle control device 410 when automatic parking and automatic delivery are completed. The predetermined completion notification is received, or map data or a guidance route of the parking lot P, which will be described later, is transmitted to the vehicle control device 410 as necessary.

センサデータ取得部512は、駐車場P内に設けられる監視カメラ103や各種のセンサ(不図示)などから上述したセンサデータを取得する。センサデータ取得部512により取得されるセンサデータ(特に監視カメラ103から得られる画像データ)は、たとえば、駐車領域Rの空き状況の把握などに使用することが可能である。   The sensor data acquisition unit 512 acquires the above-described sensor data from the monitoring camera 103 and various sensors (not shown) provided in the parking lot P. The sensor data (particularly image data obtained from the monitoring camera 103) acquired by the sensor data acquisition unit 512 can be used, for example, for grasping the vacant state of the parking area R.

駐車場データ管理部513は、駐車場Pに関するデータ(情報)を管理する。たとえば、駐車場データ管理部513は、駐車場Pの地図データや、駐車領域Rの空き状況などを管理する。たとえば、駐車場データ管理部513は、自動駐車が行われる際、空いている駐車領域Rの中から1つの駐車領域Rを選択し、選択した1つの駐車領域Rを、自動駐車における車両Vの到達目標である目標駐車領域として指定する。また、駐車場データ管理部513は、自動駐車が完了した後に車両Vが再び移動して駐車領域Rが変更された場合、センサデータ取得部512から取得されるセンサデータに基づいて、変更後の駐車領域Rを特定する。   The parking lot data management unit 513 manages data (information) related to the parking lot P. For example, the parking lot data management unit 513 manages the map data of the parking lot P, the availability of the parking area R, and the like. For example, when the automatic parking is performed, the parking lot data management unit 513 selects one parking area R from the vacant parking areas R, and selects the selected parking area R of the vehicle V in the automatic parking. Designate as the target parking area that is the destination goal. Moreover, the parking lot data management part 513 is based on the sensor data acquired from the sensor data acquisition part 512, when the vehicle V moves again after automatic parking is completed, and the parking area | region R is changed. The parking area R is specified.

誘導経路生成部514は、自動駐車および自動出庫が行われる際に車両制御装置410に指示する誘導経路を生成する。より具体的に、誘導経路生成部514は、自動駐車が行われる際においては、降車領域P1から目標駐車領域へ至る概略的な経路を誘導経路として生成し、自動出庫が行われる際においては、目標駐車領域(自動駐車後に車両Vが移動している場合には車両Vが現在駐車している駐車領域R)から乗車領域P2へ至る概略的な経路を誘導経路として生成する。   The guidance route generation unit 514 generates a guidance route that instructs the vehicle control device 410 when automatic parking and automatic delivery are performed. More specifically, when the automatic parking is performed, the guidance route generation unit 514 generates a schematic route from the getting-off area P1 to the target parking area as the guidance route, and when automatic delivery is performed, A rough route from the target parking area (a parking area R where the vehicle V is currently parked when the vehicle V is moving after automatic parking) to the boarding area P2 is generated as a guidance path.

一方、図5に示されるように、実施形態にかかる車両制御装置410は、機能的構成として、通信制御部521と、画像データ取得部522と、路面標示データ取得部523と、位置推定部524と、走行制御部525と、を有している。   On the other hand, as shown in FIG. 5, the vehicle control apparatus 410 according to the embodiment has a communication control unit 521, an image data acquisition unit 522, a road marking data acquisition unit 523, and a position estimation unit 524 as functional configurations. And a travel control unit 525.

通信制御部521は、管制装置101との間で実行される無線通信を制御する。たとえば、通信制御部521は、管制装置101との間で所定のデータを送受信することで車両制御装置410の認証を行ったり、自動駐車および自動出庫が完了した際に所定の完了通知を管制装置101に送信したり、駐車場Pの地図データや誘導経路などを必要に応じて管制装置101から受信したりする。したがって、通信制御部521は、駐車場Pの地図データを取得する地図データ取得部として機能する。   The communication control unit 521 controls wireless communication performed with the control device 101. For example, the communication control unit 521 authenticates the vehicle control device 410 by transmitting and receiving predetermined data to and from the control device 101, or sends a predetermined completion notification when automatic parking and automatic delivery are completed. 101, and the map data of the parking lot P, a guidance route, etc. are received from the control apparatus 101 as needed. Therefore, the communication control unit 521 functions as a map data acquisition unit that acquires map data of the parking lot P.

画像データ取得部522は、車載カメラ408によって得られる画像データを取得する。この画像データは、駐車場Pの路面の状況を表す情報を含んでいるものとする。   The image data acquisition unit 522 acquires image data obtained by the in-vehicle camera 408. This image data shall contain the information showing the condition of the road surface of the parking lot P.

路面標示データ取得部523は、画像データ取得部522により取得される画像データに基づく画像認識処理を実施することで、上述した区画線L(図1参照)や後述するマーカM(図6〜図8参照)などといった、駐車場Pの路面に設置された路面標示の位置(方位を含みうる)に関する路面標示データを取得する。   The road marking data acquisition unit 523 performs an image recognition process based on the image data acquired by the image data acquisition unit 522, so that the lane marking L (see FIG. 1) described above and a marker M (described later in FIG. 6 to FIG. 6) are displayed. And the like (see FIG. 8) and the like, the road marking data relating to the position (which may include the direction) of the road marking installed on the road surface of the parking lot P is acquired.

位置推定部524は、路面標示データ取得部523により取得された路面標示データと、通信制御部521により取得された地図データと、を照合することで、車両Vの実位置を推定する。より具体的に、位置推定部524は、路面標示データに基づいて、車両Vに対する路面標示の相対位置(相対方位を含みうる)を算出し、当該相対位置と、オドメトリに基づいて推定される車両Vの計算上の実位置と、に基づいて、路面標示の計算上の絶対位置(絶対方位を含みうる)を算出する。そして、位置推定部524は、路面標示データに基づいて算出された路面標示の計算上の絶対位置と、地図データに基づいて特定された路面標示の(正規の)絶対位置と、を照合することで、車両Vの(正規の)実位置を推定する。   The position estimation unit 524 estimates the actual position of the vehicle V by collating the road marking data acquired by the road marking data acquisition unit 523 with the map data acquired by the communication control unit 521. More specifically, the position estimation unit 524 calculates a relative position (which may include a relative direction) of the road marking with respect to the vehicle V based on the road marking data, and the vehicle estimated based on the relative position and odometry. Based on the actual position for calculating V, an absolute position (which may include an absolute direction) for calculating the road marking is calculated. Then, the position estimation unit 524 compares the calculation absolute position of the road marking calculated based on the road marking data with the (regular) absolute position of the road marking specified based on the map data. Thus, the (regular) actual position of the vehicle V is estimated.

走行制御部525は、制動システム401や加速システム402、操舵システム403、変速システム404などを制御することで、降車領域P1からの発進制御や、降車領域P1から駐車領域Rへの走行制御(駐車制御を含む)、駐車領域Rから乗車領域P2への走行制御(出庫制御を含む)、乗車領域P2への停車制御などといった、自動走行(自動駐車および自動出庫)を実現するための各種の走行制御を実行するように、車両Vの走行状態を制御する。   The traveling control unit 525 controls the braking system 401, the acceleration system 402, the steering system 403, the transmission system 404, and the like, thereby starting control from the getting-off area P1 and running control from the getting-off area P1 to the parking area R (parking). Various types of travel for realizing automatic travel (automatic parking and automatic dispatch) such as travel control from the parking area R to the boarding area P2 (including delivery control), stop control to the boarding area P2, etc. The traveling state of the vehicle V is controlled so as to execute the control.

より具体的に、走行制御部525は、自動走行で辿るべき走行経路としての誘導経路を管制装置101から通信制御部521を介して取得し、取得した誘導経路と、位置推定部524により推定された車両Vの実位置と、に基づいて車両Vの走行状態を制御することで、誘導経路に基づいた自動走行を実施する。なお、走行制御部525は、車載カメラ408によって得られる画像データや、車両制御システム102に設けられる各種のセンサから出力されるデータなども、制御に使用することができる。これにより、状況に応じた誘導経路の調整なども実施することが可能になる。   More specifically, the travel control unit 525 acquires a guide route as a travel route to be traced by automatic travel from the control device 101 via the communication control unit 521, and is estimated by the acquired guide route and the position estimation unit 524. By controlling the traveling state of the vehicle V based on the actual position of the vehicle V, automatic traveling based on the guidance route is performed. The traveling control unit 525 can also use image data obtained by the in-vehicle camera 408, data output from various sensors provided in the vehicle control system 102, and the like for control. This makes it possible to adjust the guidance route according to the situation.

以上のような構成により、実施形態にかかる車両制御装置410は、車両Vの自動走行中に、オドメトリによって車両Vの現在位置を推定する。そして、車両制御装置410は、車載カメラ408によって得られる画像データと、管制装置101から取得される地図データとに基づいて、オドメトリによる推定結果をその累積誤差をキャンセルするように補正し、自動走行中における車両Vの正確な現在位置(実位置)を推定する。   With the configuration as described above, the vehicle control device 410 according to the embodiment estimates the current position of the vehicle V by odometry while the vehicle V is automatically traveling. Then, the vehicle control device 410 corrects the estimation result by the odometry so as to cancel the accumulated error based on the image data obtained by the in-vehicle camera 408 and the map data acquired from the control device 101, and automatically travels. An accurate current position (actual position) of the vehicle V is estimated.

すなわち、実施形態にかかる車両制御装置410は、自動走行の実施中に、まず、車載カメラ408によって得られる画像データから、車両Vの周辺に位置する路面標示に関する路面標示データを検出することで、車両Vに対する路面標示の画像データ上での相対位置を算出する。そして、車両制御装置410は、路面標示の相対位置に基づいて算出される路面標示の計算上の絶対位置と、管制装置101から取得される地図データから特定される路面標示の正規の絶対位置との差分に基づいて、オドメトリに基づく推定結果を補正し、補正後の値を、車両Vの現在位置(実位置)の正規の推定値として設定する。   That is, the vehicle control apparatus 410 according to the embodiment first detects road marking data related to road markings located around the vehicle V from the image data obtained by the in-vehicle camera 408 during the automatic running. The relative position on the image data of the road marking with respect to the vehicle V is calculated. Then, the vehicle control device 410 calculates the absolute position of the road marking calculated based on the relative position of the road marking, and the normal absolute position of the road marking specified from the map data acquired from the control device 101. Based on the difference, the estimation result based on odometry is corrected, and the corrected value is set as a normal estimated value of the current position (actual position) of the vehicle V.

たとえば、実施形態にかかる車両制御装置410は、以下に説明する例のように、路面標示として区画線LおよびマーカMが設置された路面を車両Vが自動走行によって走行している場合に、車両Vの側方の状況を表す画像データであるサイド画像データに基づいて、車載カメラ408の撮像範囲内に存在するマーカM(および区画線Lのうち車両Vに近い側の端部E)の位置に関する路面標示データを検出する。そして、車両制御装置410は、検出した路面標示データに基づいて、車両Vを基準としたマーカM(および区画線Lの端部E)の位置を表す相対位置を算出する。そして、車両制御装置410は、算出した相対位置に基づいて算出されるマーカM(および区画線L)の計算上の絶対位置と、駐車場Pの地図データから特定される区画線Lの正規の絶対位置とを照合し、照合結果に基づいて、自動走行中における車両Vの実位置を推定する。   For example, as in the example described below, the vehicle control device 410 according to the embodiment is configured such that when the vehicle V is traveling automatically on a road surface on which a lane marking L and a marker M are installed as road markings, The position of the marker M (and the end E on the side close to the vehicle V of the lane marking L) present in the imaging range of the in-vehicle camera 408 based on side image data that is image data representing the situation of the side of V The road marking data for is detected. Then, the vehicle control device 410 calculates a relative position representing the position of the marker M (and the end E of the lane marking L) with reference to the vehicle V based on the detected road marking data. And the vehicle control apparatus 410 is the normal position of the marking line L specified from the absolute position on the calculation of the marker M (and marking line L) calculated based on the calculated relative position, and the map data of the parking lot P. The absolute position is collated, and the actual position of the vehicle V during automatic traveling is estimated based on the collation result.

図6は、実施形態にかかる車両制御装置410が車両Vの実位置を推定する状況の具体例を示した例示的かつ模式的な図である。図6に示される例では、車両Vが、当該車両Vの左側方に位置する3本の区画線L61〜L63および右側方に位置する3本の区画線L64〜L66と交差する方向に自動走行によって走行している。また、図6に示される例では、区画線L61の端部と区画線L62の端部E62との間(中間の位置)にマーカM61が設置され、区画線L62の端部E62と区画線L63の端部との間にもマーカM62が設置されている。さらに、図6に示される例では、区画線L64の端部と区画線L65の端部との間(中間の位置)にマーカM63が設置され、区画線L65の端部と区画線L66の端部E66との間にもマーカM64が設置されている。   FIG. 6 is an exemplary schematic diagram illustrating a specific example of a situation in which the vehicle control device 410 according to the embodiment estimates the actual position of the vehicle V. In the example shown in FIG. 6, the vehicle V automatically travels in a direction intersecting the three lane markings L61 to L63 located on the left side of the vehicle V and the three lane markings L64 to L66 located on the right side. Is running by. In the example shown in FIG. 6, a marker M61 is installed between the end of the lane line L61 and the end E62 of the lane line L62 (intermediate position), and the end E62 of the lane line L62 and the lane line L63. A marker M62 is also provided between the two ends. Further, in the example shown in FIG. 6, a marker M63 is installed between the end of the lane marking L64 and the end of the lane marking L65 (intermediate position), and the end of the lane marking L65 and the end of the lane marking L66. A marker M64 is also provided between the portion E66.

図6に示される例では、車両Vの左側部(たとえばサイドミラー)に設けられる車載カメラ408の撮像範囲が、マーカM61およびM62を含む領域A61に対応しており、車両の右側部(たとえばサイドミラー)に設けられる車載カメラ408の撮像範囲が、マーカM64を含む領域A62に対応している。したがって、車両制御装置410は、車両Vの左側部に設けられる車載カメラ408によって得られるサイド画像データと、車両Vの右側部に設けられる車載カメラ408によって得られるサイド画像データと、に対してエッジ検出処理などの画像認識処理を実施することで、マーカM61、M62およびM64のそれぞれの位置(たとえば中央の位置)に関する路面標示データを取得する。   In the example shown in FIG. 6, the imaging range of the in-vehicle camera 408 provided on the left side (for example, side mirror) of the vehicle V corresponds to the area A61 including the markers M61 and M62, and the right side (for example, side of the vehicle) The imaging range of the in-vehicle camera 408 provided in the mirror) corresponds to the area A62 including the marker M64. Therefore, the vehicle control device 410 is edged with respect to the side image data obtained by the in-vehicle camera 408 provided on the left side of the vehicle V and the side image data obtained by the in-vehicle camera 408 provided on the right side of the vehicle V. By performing image recognition processing such as detection processing, road marking data relating to the respective positions (for example, central positions) of the markers M61, M62, and M64 is acquired.

そして、車両制御装置410は、取得した路面標示データを利用して、車両Vを基準とした、マーカM61、M62およびM64のそれぞれの(中央の)相対位置を算出し、算出した相対位置と、オドメトリに基づく推定結果と、を利用して、マーカM61、M62およびM64のそれぞれの(中央の)計算上の絶対位置を特定する。   Then, the vehicle control device 410 calculates the relative position (center) of each of the markers M61, M62, and M64 with reference to the vehicle V using the acquired road marking data, and the calculated relative position, Using the estimation result based on odometry, the absolute position of calculation (center) of each of the markers M61, M62, and M64 is specified.

そして、車両制御装置410は、管制装置101から地図データを取得し、当該地図データから、区画線L61(の端部E61)とマーカM61と区画線L62(の端部E62)とのそれぞれの正規の絶対位置を特定する。そして、車両制御装置410は、計算上の絶対位置と正規の絶対位置との差分をとり、当該差分に基づいて、オドメトリによる推定結果のずれを補正し、補正後の値を、車両Vの実位置として推定する。このようにして、自動走行中における車両Vの実位置の正確な推定が実現される。   Then, the vehicle control device 410 acquires map data from the control device 101, and from the map data, each of the lane marking L61 (end E61), the marker M61, and the lane marking L62 (end E62) is normalized. Specify the absolute position of. Then, the vehicle control device 410 takes the difference between the calculated absolute position and the regular absolute position, corrects the deviation of the estimation result by odometry based on the difference, and uses the corrected value as the actual value of the vehicle V. Estimated as position. In this way, accurate estimation of the actual position of the vehicle V during automatic traveling is realized.

なお、図6に示される例では、3つのマーカM61、M62、およびM64が、車両Vの実位置の推定に利用されている。しかしながら、実施形態では、車両Vの実位置の推定に用いられるマーカMの個数は、2つ以下であってもよいし、4つ以上であってもよい。   In the example shown in FIG. 6, three markers M61, M62, and M64 are used for estimating the actual position of the vehicle V. However, in the embodiment, the number of markers M used for estimating the actual position of the vehicle V may be two or less, or may be four or more.

また、実施形態では、マーカM以外の路面標示に基づいて車両Vの実位置の推定が行われてもよい。たとえば、図6に示される例では、左サイド画像データに対応した領域A61が、区画線L62の端部E62を含んでおり、右サイド画像データに対応した領域A62が、区画線L66の端部E66を含んでいる。したがって、車両制御装置410は、これら領域A61およびA62に対応した2つのサイド画像データに対して白線検出処理などの画像認識処理を実施することで、区画線L62およびL66のそれぞれの(端部E62およびE66の)位置に関する路面標示データを取得し、取得した路面標示データと地図データとを用いて車両Vの実位置を推定してもよい。   In the embodiment, the actual position of the vehicle V may be estimated based on road markings other than the marker M. For example, in the example shown in FIG. 6, the area A61 corresponding to the left side image data includes the end E62 of the lane marking L62, and the area A62 corresponding to the right side image data is the end of the lane marking L66. E66 is included. Therefore, the vehicle control device 410 performs an image recognition process such as a white line detection process on the two side image data corresponding to the areas A61 and A62, so that each of the partition lines L62 and L66 (the end E62). And the road marking data regarding the position (E66) may be acquired, and the actual position of the vehicle V may be estimated using the acquired road marking data and map data.

ところで、前述したように、実施形態は、路面標示データをより簡単に取得し、自動走行中における車両Vの実位置の正確な把握をより簡単に実現することを可能にする。そのために、実施形態においては、マーカMが以下に説明するような比較的簡単な構成を有している。   By the way, as described above, the embodiment makes it possible to more easily acquire road marking data and more easily realize an accurate grasp of the actual position of the vehicle V during automatic traveling. Therefore, in the embodiment, the marker M has a relatively simple configuration as described below.

図7は、実施形態にかかる路面標示としてのマーカMの一例を示した例示的かつ模式的な図である。図7に示されるマーカMは、全体として矩形形状(より具体的には一辺の長さがXの正方形形状)を有している。   FIG. 7 is an exemplary schematic diagram illustrating an example of a marker M as a road marking according to the embodiment. The marker M shown in FIG. 7 has a rectangular shape as a whole (more specifically, a square shape with a side length of X).

図7に示されるマーカMは、第1方向(y方向)に延びる第1色の第1領域A1と、当該第1領域A1に対して第1方向と交差する第2方向(x方向)に隣接するように設けられた、第1色とは異なる第2色の第2領域A2と、を含む縞パターンにより構成されている。第1色は、たとえば黒などの暗色であり、第2色は、たとえば白などの明色である。第1領域A1は、マーカMのx方向の中央部に1つ設けられており、第2領域A2は、第1領域A1をx方向の両側から挟み込むように2つ設けられている。これにより、マーカMのx方向の両端には、同じ第2色の第2領域A2が配置される。   The marker M shown in FIG. 7 includes a first area A1 of the first color extending in the first direction (y direction) and a second direction (x direction) intersecting the first direction with respect to the first area A1. The stripe pattern includes a second region A2 of a second color different from the first color, which is provided adjacently. The first color is a dark color such as black, and the second color is a light color such as white. One first area A1 is provided at the center of the marker M in the x direction, and two second areas A2 are provided so as to sandwich the first area A1 from both sides in the x direction. Accordingly, the second region A2 of the same second color is arranged at both ends of the marker M in the x direction.

図7に示される例では、1つの第1領域A1および2つの第2領域A2が共にy方向に延びており、当該1つの第1領域A1のx方向の幅W1と、2つの第2領域A2の各々のx方向の幅W2とが等しくなっている。すなわち、図7に示される例では、1つの第1領域A1および2つの第2領域A2のそれぞれの大きさが、マーカMをy方向に延びる線に沿って3等分した領域の大きさに対応している。   In the example shown in FIG. 7, one first region A1 and two second regions A2 both extend in the y direction, and the width W1 in the x direction of the one first region A1 and two second regions. The width W2 in the x direction of each A2 is equal. That is, in the example shown in FIG. 7, the size of each of the first region A1 and the two second regions A2 is the size of the region obtained by dividing the marker M into three equal parts along the line extending in the y direction. It corresponds.

ここで、路面標示に照射される光(駐車場Pが屋外にある場合は太陽光、駐車場Pが屋内にある場合は照明光)が比較的強い状況下では、テカリなどによってマーカM(およびその周辺の路面)が画像データ上で全体的に明るく(白っぽく)写ってしまい、画像データ上のマーカMを正確に認識できない場合がある。この場合、地図データの照合対象となる路面標示データが正確に取得できないので、自動走行中における車両Vの実位置の正確な把握を実現することが困難になる。   Here, in a situation where the light irradiated to the road marking (sunlight when the parking lot P is outdoors and illumination light when the parking lot P is indoors) is relatively strong, the marker M (and In some cases, the surrounding road surface) appears bright (whiter) on the image data as a whole, and the marker M on the image data cannot be accurately recognized. In this case, since the road marking data to be collated with the map data cannot be obtained accurately, it is difficult to accurately grasp the actual position of the vehicle V during automatic traveling.

そこで、実施形態では、第1領域A1に所定の表面加工が施されるか、または第1領域A1が所定の材料により構成されることで、マーカMが以下に説明するような特性を有している。   Therefore, in the embodiment, the first region A1 is subjected to predetermined surface processing, or the first region A1 is made of a predetermined material, so that the marker M has characteristics as described below. ing.

図8は、実施形態にかかる路面標示としてのマーカMの特性を説明するための例示的かつ模式的な図である。図8において、矢印A81は、路面RS上に設置されたマーカMに入射する光の方向の一例を表し、矢印A82は、マーカMで反射して車載カメラ408へ向かう光の方向の一例を表す。   FIG. 8 is an exemplary schematic diagram for explaining the characteristics of the marker M as a road marking according to the embodiment. In FIG. 8, an arrow A81 represents an example of the direction of light incident on the marker M installed on the road surface RS, and an arrow A82 represents an example of the direction of light reflected by the marker M toward the vehicle-mounted camera 408. .

図8に示されるように、実施形態では、暗色(第1色)の第1領域A1で反射して車載カメラ408に向かう光の量Q1が、明色(第2色)の第2領域で反射して車載カメラ408に向かう光の量Q2よりも小さくなるような工夫が、マーカMの第1領域A1に施されている。   As shown in FIG. 8, in the embodiment, the amount Q1 of light reflected from the dark (first color) first area A1 and directed to the in-vehicle camera 408 is the light (second color) second area. A device is applied to the first region A1 of the marker M so as to be smaller than the amount Q2 of light reflected and directed toward the in-vehicle camera 408.

すなわち、実施形態にかかるマーカMは、第1領域A1に所定の表面加工が施されるか、または第1領域A1が所定の材料により構成されることで、第1領域A1で反射して車載カメラ408に向かう光の量Q1が、第2領域で反射して車載カメラ408に向かう光の量Q2よりも小さくように構成されている。なお、所定の表面加工の例としては、たとえば表面に凹凸を付けて光の拡散反射を起こしやすくする加工(ツヤ消し加工)や、光の拡散反射または吸収を起こしやすくするテープなどを表面に貼付する加工などが挙げられ、所定の材料としては、光の拡散反射または吸収を起こしやすくする材料などが挙げられる。   That is, the marker M according to the embodiment is reflected on the first area A1 by being subjected to a predetermined surface processing on the first area A1 or the first area A1 is made of a predetermined material. The amount Q1 of light traveling toward the camera 408 is configured to be smaller than the amount Q2 of light traveling toward the vehicle-mounted camera 408 after being reflected by the second region. Examples of predetermined surface processing include, for example, processing that makes the surface uneven and facilitates diffuse reflection of light (matte processing), or tape that easily causes diffuse reflection or absorption of light is applied to the surface. Examples of the predetermined material include a material that easily causes diffuse reflection or absorption of light.

上記のような工夫を施せば、第1領域A1に入射する光の少なくとも一部が反射時に拡散または吸収され、結果として、第1領域A1で反射して車載カメラ408に向かう光が低減される。これにより、マーカMに照射される光が比較的強い状況下においても、車載カメラ408の撮像によって得られた画像データ上でマーカM(およびその周辺の路面RS)が全体的に明るく(白っぽく)写ることが抑制され、第1領域A1と第2領域A2との区別がつきやすくなるので、マーカMの位置に関する路面標示データを正確に取得することができる。その結果、マーカMに照射される光が比較的強い状況下においても、自動走行中における車両Vの実位置の正確な把握を実現することができる。   If the above-mentioned device is applied, at least a part of the light incident on the first area A1 is diffused or absorbed at the time of reflection, and as a result, the light reflected by the first area A1 and directed to the in-vehicle camera 408 is reduced. . As a result, the marker M (and the surrounding road surface RS) is generally bright (whiter) on the image data obtained by the imaging by the in-vehicle camera 408 even in a situation where the light applied to the marker M is relatively strong. Since the image is suppressed and the first area A1 and the second area A2 can be easily distinguished from each other, road marking data regarding the position of the marker M can be accurately acquired. As a result, it is possible to realize an accurate grasp of the actual position of the vehicle V during automatic traveling even in a situation where the light applied to the marker M is relatively strong.

さらに、実施形態では、自動走行中における車両Vの実位置の正確な把握を実現するための他の工夫として、マーカMの配置に関する工夫も施される。具体的に、図6に戻り、実施形態では、複数のマーカMが、隣接するマーカM同士で第1領域A1の延びる方向(第1方向)の向きが異なるように配置される。これにより、画像認識処理において隣接するマーカM同士の混同が生じるのを回避することができるので、路面標示データを正確に取得することができ、自動走行中における車両Vの実位置の正確な把握を実現することができる。   Further, in the embodiment, as another device for realizing an accurate grasp of the actual position of the vehicle V during automatic traveling, a device regarding the arrangement of the marker M is also applied. Specifically, returning to FIG. 6, in the embodiment, the plurality of markers M are arranged such that the directions in which the first region A <b> 1 extends (first direction) differ between the adjacent markers M. As a result, it is possible to avoid the confusion between the adjacent markers M in the image recognition process, so that the road marking data can be obtained accurately and the actual position of the vehicle V during the automatic traveling can be accurately grasped. Can be realized.

次に、図9〜図12を参照して、実施形態にかかる自動バレー駐車システムで実行される処理について説明する。   Next, with reference to FIGS. 9-12, the process performed with the automatic valet parking system concerning embodiment is demonstrated.

図9は、実施形態にかかる管制装置101および車両制御装置410が自動駐車の際に実行する処理の流れを示した例示的かつ模式的なシーケンス図である。この図9に示される処理シーケンスは、乗員Xが降車領域P1で端末装置Tを操作することで、自動駐車のトリガとなる所定の指示を行った場合に開始する。   FIG. 9 is an exemplary and schematic sequence diagram illustrating a flow of processing executed by the control device 101 and the vehicle control device 410 according to the embodiment during automatic parking. The processing sequence shown in FIG. 9 starts when the occupant X operates the terminal device T in the getting-off area P1 to give a predetermined instruction that triggers automatic parking.

図9に示される処理シーケンスでは、まず、S901において、管制装置101と車両制御装置410とが通信を確立する。このS901においては、識別情報(ID)の送受信による認証や、管制装置101の監視下での自動走行を実現するための運行権限の譲受などが実行される。   In the processing sequence shown in FIG. 9, first, in S901, the control device 101 and the vehicle control device 410 establish communication. In S901, authentication by transmission / reception of identification information (ID), transfer of operation authority for realizing automatic traveling under the monitoring of the control device 101, and the like are executed.

S901で通信が確立すると、管制装置101(通信制御部511)は、S902において、駐車場Pの地図データを車両制御装置410に送信する。   When communication is established in S901, the control device 101 (communication control unit 511) transmits the map data of the parking lot P to the vehicle control device 410 in S902.

そして、管制装置101(駐車場データ管理部513)は、S903において、センサデータ取得部512により取得される情報などに基づいて、駐車領域Rの空きを確認し、空いている1つの駐車領域Rを、車両Vに与える目標駐車領域として指定する。   Then, in S903, the control device 101 (the parking lot data management unit 513) confirms the vacancy of the parking area R based on the information acquired by the sensor data acquisition unit 512, and one vacant parking area R Is designated as a target parking area to be given to the vehicle V.

そして、管制装置101(誘導経路生成部514)は、S904において、自動駐車の際に車両Vが辿るべき、降車領域P1からS903で指定した目標駐車領域への誘導経路を生成する。   In step S904, the control device 101 (guidance route generation unit 514) generates a guidance route from the getting-off area P1 to the target parking area designated in step S903, which the vehicle V should follow during automatic parking.

そして、管制装置101(通信制御部511)は、S905において、S904で生成された誘導経路を車両制御装置410に送信する。   And the control apparatus 101 (communication control part 511) transmits the guidance route produced | generated by S904 to the vehicle control apparatus 410 in S905.

一方、車両制御装置410(位置推定部524)は、S902で管制装置101から送信された地図データが通信制御部521により受信された後のS906において、降車領域P1内における初期位置を推定する。初期位置とは、降車領域P1からの発進の起点となる、降車領域P1内における車両Vの現在位置(実位置)である。初期位置の推定には、上述した自動走行中における実位置の推定と同様に、車載カメラ408によって得られる画像データに基づく画像認識処理の結果が利用されうる。なお、図7に示される例では、S906の処理がS905の処理の前に実行されているが、S906の処理は、S905の処理の後に実行されてもよい。   On the other hand, the vehicle control device 410 (position estimation unit 524) estimates the initial position in the dismounting area P1 in S906 after the map data transmitted from the control device 101 in S902 is received by the communication control unit 521. The initial position is the current position (actual position) of the vehicle V in the getting-off area P1, which is the starting point for starting from the getting-off area P1. For the estimation of the initial position, the result of the image recognition process based on the image data obtained by the in-vehicle camera 408 can be used in the same way as the estimation of the actual position during the automatic traveling described above. In the example illustrated in FIG. 7, the process of S906 is performed before the process of S905, but the process of S906 may be performed after the process of S905.

S906で初期位置が推定され、かつ、S905で管制装置101から送信された誘導経路が通信制御部521により受信されると、車両制御装置410(走行制御部525)は、S907において、S906で推定された初期位置などに基づいて、実際の自動駐車の際に辿るべき、誘導経路に基づいた走行経路を生成する。   When the initial position is estimated in S906 and the guidance route transmitted from the control device 101 in S905 is received by the communication control unit 521, the vehicle control device 410 (travel control unit 525) estimates in S906 in S906. A travel route based on the guidance route to be traced in actual automatic parking is generated based on the initial position and the like.

そして、車両制御装置410(走行制御部525)は、S908において、降車領域P1からの発進制御を実行する。   Then, the vehicle control device 410 (travel control unit 525) executes the start control from the getting-off area P1 in S908.

そして、車両制御装置410(走行制御部525)は、S909において、S907で生成された走行経路に沿った走行制御を実行する。この走行制御は、上述したような路面標示データ取得部523による画像認識処理の結果を利用した位置推定部524実位置の推定を伴って実行される。なお、実位置の推定時に実行される処理の流れについては、後で別の図面を参照しながらより詳細に説明するため、ここではこれ以上の説明を省略する。   In step S909, the vehicle control device 410 (travel control unit 525) executes travel control along the travel route generated in step S907. This travel control is executed with the estimation of the actual position of the position estimation unit 524 using the result of the image recognition processing by the road marking data acquisition unit 523 as described above. Note that the flow of processing executed at the time of estimating the actual position will be described in detail later with reference to another drawing, and thus further description is omitted here.

そして、車両制御装置410(走行制御部525)は、S910において、目標駐車領域への駐車制御を実行する。   And vehicle control device 410 (running control part 525) performs parking control to a target parking area in S910.

そして、S910における駐車制御が完了すると、車両制御装置410(走行制御部525)は、S911において、通信制御部521により駐車完了の通知を管制装置101に送信する。   When the parking control in S910 is completed, the vehicle control device 410 (running control unit 525) transmits a parking completion notification to the control device 101 by the communication control unit 521 in S911.

以上のようにして、自動バレー駐車における自動駐車が実現される。   As described above, automatic parking in automatic valet parking is realized.

図10は、実施形態にかかる管制装置101および車両制御装置410が自動出庫の際に実行する処理の流れを示した例示的かつ模式的なシーケンス図である。この図10に示される処理シーケンスは、乗員Xが乗車領域P2で端末装置Tを操作することで、自動出庫のトリガとなる所定の呼び出しを行った場合に開始する。   FIG. 10 is an exemplary and schematic sequence diagram illustrating a flow of processing executed by the control device 101 and the vehicle control device 410 according to the embodiment at the time of automatic delivery. The processing sequence shown in FIG. 10 is started when the occupant X operates the terminal device T in the boarding area P2 to make a predetermined call that triggers automatic shipping.

図10に示される処理シーケンスでは、まず、S1001において、管制装置101と車両制御装置410とが通信を確立する。このS1001においては、上述した図9のS901と同様に、識別情報(ID)の送受信による認証や、管制装置101の監視下での自動走行を実現するための運行権限の譲受などが実行される。   In the processing sequence shown in FIG. 10, first, in S1001, the control device 101 and the vehicle control device 410 establish communication. In S1001, as in S901 of FIG. 9 described above, authentication by transmission / reception of identification information (ID), transfer of operation authority for realizing automatic traveling under the control of the control device 101, and the like are executed. .

S1001で通信が確立すると、管制装置101(通信制御部511)は、S1002において、駐車場Pの地図データを車両制御装置410に送信する。   When communication is established in S1001, the control device 101 (communication control unit 511) transmits the map data of the parking lot P to the vehicle control device 410 in S1002.

そして、管制装置101(駐車場データ管理部513)は、S1003において、センサデータ取得部512により取得される情報などに基づいて、通信相手の車両制御装置410を搭載した車両Vが現在位置している駐車領域Rを確認する。   In S1003, the control device 101 (the parking lot data management unit 513) determines that the vehicle V on which the communication partner vehicle control device 410 is mounted is currently located based on the information acquired by the sensor data acquisition unit 512 or the like. Check the parking area R.

そして、管制装置101(誘導経路生成部514)は、S1004において、自動出庫の際に車両Vが辿るべき、S1003で確認された駐車領域Rから乗車領域P2への誘導経路を生成する。   Then, in S1004, the control device 101 (guidance route generating unit 514) generates a guidance route from the parking area R confirmed in S1003 to the boarding area P2 that the vehicle V should follow in the automatic delivery.

そして、管制装置101(通信制御部511)は、S1005において、S1004で生成された誘導経路を車両制御装置410に送信する。   And the control apparatus 101 (communication control part 511) transmits the guidance route produced | generated by S1004 to the vehicle control apparatus 410 in S1005.

一方、車両制御装置410(位置推定部524)は、S1002で管制装置101から送信された地図データが通信制御部521により受信された後のS1006において、車両Vが現在止まっている駐車領域R内における出庫位置を推定する。出庫位置とは、駐車領域Rからの出庫の起点となる、駐車領域R内における車両Vの現在位置(実位置)である。出庫位置の推定には、上述した自動走行中における実位置の推定と同様に、車載カメラ408によって得られる画像データに基づく画像認識処理の結果が利用されうる。なお、図10に示される例では、S1006の処理がS1005の処理の前に実行されているが、S1006の処理は、S1005の処理の後に実行されてもよい。   On the other hand, the vehicle control device 410 (position estimation unit 524) is in the parking area R where the vehicle V is currently stopped in S1006 after the map data transmitted from the control device 101 in S1002 is received by the communication control unit 521. Estimate the shipping position at. The delivery position is the current position (actual position) of the vehicle V in the parking area R, which is the starting point for delivery from the parking area R. For the estimation of the delivery position, the result of the image recognition process based on the image data obtained by the in-vehicle camera 408 can be used as in the estimation of the actual position during the automatic traveling described above. In the example illustrated in FIG. 10, the process of S1006 is performed before the process of S1005, but the process of S1006 may be performed after the process of S1005.

S1006で出庫位置が推定され、かつ、S1005で管制装置101から送信された誘導経路が通信制御部521により受信されると、車両制御装置410(走行制御部525)は、S1007において、S1006で推定された出庫位置などに基づいて、実際の自動出庫の際に辿るべき、誘導経路に基づいて走行経路を生成する。   When the delivery position is estimated in S1006 and the guidance route transmitted from the control device 101 in S1005 is received by the communication control unit 521, the vehicle control device 410 (travel control unit 525) estimates in S1006 in S1006. A travel route is generated based on the guidance route to be traced in actual automatic delivery based on the delivered delivery position.

そして、車両制御装置410(走行制御部525)は、S1008において、駐車領域Rからの出庫制御を実行する。   And vehicle control device 410 (running control part 525) performs delivery control from parking area R in S1008.

そして、車両制御装置410(走行制御部525)は、S1009において、S1007で生成された走行経路に沿った走行制御を実行する。この走行制御も、図9のS909における走行制御と同様に、上述したような路面標示データ取得部523による画像認識処理の結果を利用した位置推定部524による実位置の推定を伴って実行される。   In step S1009, the vehicle control device 410 (travel control unit 525) executes travel control along the travel route generated in step S1007. This travel control is also executed with the estimation of the actual position by the position estimation unit 524 using the result of the image recognition processing by the road marking data acquisition unit 523 as described above, similarly to the travel control in S909 of FIG. .

そして、車両制御装置410(走行制御部525)は、S1010において、乗車領域P2への停車制御を実行する。   Then, vehicle control device 410 (travel control unit 525) executes stop control to boarding area P2 in S1010.

そして、S1010における停車制御が完了すると、車両制御装置410(走行制御部525)は、S1011において、通信制御部521により出庫完了の通知を管制装置101に送信する。   Then, when the stop control in S1010 is completed, the vehicle control device 410 (running control unit 525) transmits a notification of completion of shipment to the control device 101 by the communication control unit 521 in S1011.

以上のようにして、自動バレー駐車における自動出庫が実現される。   As described above, automatic delivery in automatic valet parking is realized.

図11は、実施形態にかかる車両制御装置410が自動走行中に実行する実位置の推定処理の概略的な流れを示した例示的かつ模式的なフローチャートである。この図11に示される処理フローは、図9に示されるS909や、図10に示されるS1009などにおける車両Vの自動走行中に繰り返し実行される。   FIG. 11 is an exemplary and schematic flowchart showing a schematic flow of an actual position estimation process executed by the vehicle control device 410 according to the embodiment during automatic traveling. The processing flow shown in FIG. 11 is repeatedly executed during the automatic traveling of the vehicle V in S909 shown in FIG. 9, S1009 shown in FIG.

図11に示される処理フローでは、まず、S1101において、車両制御装置410(画像データ取得部522)は、車載カメラ408から画像データを取得する。   In the processing flow shown in FIG. 11, first, in S <b> 1101, the vehicle control device 410 (image data acquisition unit 522) acquires image data from the in-vehicle camera 408.

そして、S1102において、車両制御装置410(路面標示データ取得部523)は、エッジ検出処理などを含む画像認識処理を実行することで、S1101で取得された画像データから、路面標示の位置に関する路面標示データを取得する。   In S1102, the vehicle control device 410 (road marking data acquisition unit 523) performs image recognition processing including edge detection processing and the like, thereby performing road marking related to the position of the road marking from the image data acquired in S1101. Get the data.

そして、S1103において、車両制御装置410(位置推定部524)は、路面標示データと地図データとを照合し、車両Vの実位置を推定する。そして、処理が終了する。   In step S <b> 1103, the vehicle control device 410 (position estimation unit 524) collates the road marking data with the map data, and estimates the actual position of the vehicle V. Then, the process ends.

以下、図11のS1103で実行される実位置の推定処理の内容についてより詳細に説明する。   Hereinafter, the content of the actual position estimation process executed in S1103 of FIG. 11 will be described in detail.

図12は、実施形態にかかる車両制御装置410が自動走行中に実行する実位置の推定処理の詳細な流れを示した例示的かつ模式的なフローチャートである。   FIG. 12 is an exemplary and schematic flowchart showing a detailed flow of an actual position estimation process executed by the vehicle control device 410 according to the embodiment during automatic traveling.

図12に示される処理フローでは、まず、S1201において、車両制御装置410(位置推定部524)は、車両Vの実位置に関する前回の推定値に、センサデータに基づく変化量、つまりオドメトリによって推定された車両Vの位置の変化量を加算することで、オドメトリに基づく車両Vの計算上の実位置を算出する。   In the processing flow shown in FIG. 12, first, in S1201, the vehicle control device 410 (position estimation unit 524) estimates the previous estimated value related to the actual position of the vehicle V based on the amount of change based on the sensor data, that is, odometry. By adding the amount of change in the position of the vehicle V, the actual position of the vehicle V based on odometry is calculated.

そして、S1202において、車両制御装置410(位置推定部524)は、路面標示データ取得部523による画像認識処理の結果として得られる路面標示データに基づく、S1201で算出した実位置を基準とした路面標示の相対位置を算出する。このS1202で算出された路面標示の相対位置と、S1201で算出された車両Vの計算上の実位置と、を利用すれば、路面標示の計算上の絶対位置を特定することができる。   In S1202, the vehicle control device 410 (position estimation unit 524) displays the road marking based on the actual position calculated in S1201 based on the road marking data obtained as a result of the image recognition processing by the road marking data acquisition unit 523. The relative position of is calculated. By using the relative position of the road marking calculated in S1202 and the calculated actual position of the vehicle V calculated in S1201, the calculated absolute position of the road marking can be specified.

そして、S1203において、車両制御装置410(位置推定部524)は、通信制御部521により取得された地図データに基づく、路面標示の正規の絶対位置を特定する。たとえば、車両制御装置410(位置推定部524)は、地図データに含まれる全ての路面標示の絶対位置から、S1202の算出結果を利用して特定される路面標示の計算上の絶対位置に近いものを抽出することで、次のS1204の処理において計算上の絶対位置との差分をとる対象となる路面標示の正規の絶対位置を特定する。   In step S <b> 1203, the vehicle control device 410 (position estimation unit 524) identifies the normal absolute position of the road marking based on the map data acquired by the communication control unit 521. For example, the vehicle control device 410 (position estimation unit 524) is close to the absolute position in calculation of the road marking specified by using the calculation result of S1202 from the absolute positions of all road markings included in the map data. Is extracted, the normal absolute position of the road marking that is the target of calculating the difference from the calculated absolute position in the next processing of S1204 is specified.

そして、S1204において、車両制御装置410(位置推定部524)は、S1202の算出結果に基づいて特定された路面標示の計算上の絶対位置と、S1203で特定された路面標示の正規の絶対位置と、の差分をとり、当該差分に基づき、S1201の算出値、つまりオドメトリに基づく車両Vの実位置の算出値を補正する。   In S1204, the vehicle control device 410 (position estimation unit 524) calculates the absolute position in calculation of the road marking specified based on the calculation result in S1202, and the normal absolute position of the road marking specified in S1203. , And based on the difference, the calculated value of S1201, that is, the calculated value of the actual position of the vehicle V based on odometry is corrected.

そして、S1205において、車両制御装置410(位置推定部524)は、S1204の補正後の値を、車両Vの正規の実位置として推定する。実施形態では、このS1205の推定結果に基づいて、走行制御部525による車両Vの自動走行時に必要となる各種のパラメータ(車速や舵角、進行方向など)の設定が行われる。   In step S <b> 1205, the vehicle control device 410 (position estimation unit 524) estimates the corrected value in step S <b> 1204 as the normal actual position of the vehicle V. In the embodiment, based on the estimation result of S1205, various parameters (vehicle speed, steering angle, traveling direction, and the like) required when the vehicle control unit 525 automatically travels the vehicle V are set.

以上説明したように、実施形態にかかる車両制御装置410は、車両Vの周辺の状況を撮像する車載カメラ408によって得られる画像データを取得する画像データ取得部522と、画像データに基づく画像認識処理を実施することで、駐車場P内における車両Vの走行経路の近傍の路面に設置された路面標示の位置に関する路面標示データを取得する路面標示データ取得部523と、路面標示データ取得部523により取得された路面標示データと、路面標示の絶対位置を含む地図データと、を照合することで、車両Vの実位置を推定する位置推定部524と、位置推定部524により推定された実位置に基づいて車両Vの走行状態を制御することで、駐車場P内での車両Vの自動走行を実施する走行制御部525と、を有している。   As described above, the vehicle control apparatus 410 according to the embodiment includes the image data acquisition unit 522 that acquires the image data obtained by the in-vehicle camera 408 that captures the situation around the vehicle V, and the image recognition process based on the image data. By performing the above, the road marking data acquisition unit 523 that acquires road marking data related to the position of the road markings installed on the road surface in the vicinity of the travel route of the vehicle V in the parking lot P, and the road marking data acquisition unit 523 By comparing the acquired road marking data with map data including the absolute position of the road marking, a position estimation unit 524 that estimates the actual position of the vehicle V, and an actual position estimated by the position estimation unit 524 And a traveling control unit 525 that performs the automatic traveling of the vehicle V in the parking lot P by controlling the traveling state of the vehicle V based on the above.

ここで、実施形態にかかる路面標示データ取得部523は、第1方向に延びる第1色の第1領域A1と、当該第1領域A1に対して第1方向と交差する第2方向に隣接するように設けられ、第1色とは異なる第2色の第2領域A2と、を含む縞パターンにより構成された路面標示としてのマーカMの位置に関する路面標示データを取得する。このような構成によれば、縞パターンという比較的簡単な構成のマーカMに基づいて、路面標示データを簡単に取得することができるので、自動走行中における車両Vの実位置の正確な把握を簡単に実現することができる。   Here, the road marking data acquisition unit 523 according to the embodiment is adjacent to the first area A1 of the first color extending in the first direction and the second direction intersecting the first direction with respect to the first area A1. Road marking data relating to the position of the marker M as a road marking configured by a stripe pattern including the second region A2 of the second color different from the first color is obtained. According to such a configuration, road marking data can be easily acquired based on the marker M having a relatively simple configuration called a fringe pattern, so that an accurate grasp of the actual position of the vehicle V during automatic traveling can be obtained. It can be realized easily.

また、実施形態にかかる路面標示データ取得部523は、第2方向の両端に同じ色の領域(上述した例では第2色の第2領域A2)が設けられたマーカMの位置に関する路面標示データを取得する。このような構成によれば、画像認識処理においてマーカMの第2方向の両端が同程度に認識されるので、マーカMのエッジが認識されやすくなり、路面標示データを簡単に取得することができる。   In addition, the road marking data acquisition unit 523 according to the embodiment is road marking data related to the position of the marker M in which the same color area (the second color second area A2 in the above example) is provided at both ends in the second direction. To get. According to such a configuration, since both ends of the marker M in the second direction are recognized to the same extent in the image recognition process, the edge of the marker M is easily recognized, and road marking data can be easily acquired. .

また、実施形態にかかる路面標示データ取得部523は、第2方向の中央部に第1領域A1が1つ設けられ、かつ、当該第1領域A1を第2方向の両側から挟み込むように第2領域A2が2つ設けられた矩形形状のマーカMの位置に関する路面標示を取得する。このような構成によれば、第2方向の両端が同じ色の領域となる最も簡単な縞パターンのマーカMに基づいて、路面標示データを簡単に取得することができる。   Further, the road marking data acquisition unit 523 according to the embodiment includes a first area A1 at the center in the second direction, and the second area so as to sandwich the first area A1 from both sides in the second direction. A road marking concerning the position of the rectangular marker M provided with two areas A2 is acquired. According to such a configuration, road marking data can be easily acquired based on the simplest fringe pattern marker M in which both ends in the second direction are regions of the same color.

このような最も簡単な縞パターンのマーカMが用いられる構成において、実施形態にかかる路面標示データ取得部523は、第1領域A1および第2領域A2のそれぞれが同じ方向(第1方向)に延び、かつ、第1領域A1および第2領域A2のそれぞれの第2方向の幅が等しくなるように構成された路面標示の位置に関する路面標示データを取得する。このような構成によれば、第1領域A1と第2領域A2とのバランスがとれた縞パターンのマーカMに基づいて、路面標示データを簡単に取得することができる。   In the configuration in which the marker M having the simplest stripe pattern is used, the road marking data acquisition unit 523 according to the embodiment extends in the same direction (first direction) in each of the first area A1 and the second area A2. And the road marking data regarding the position of the road marking comprised so that the width | variety of each 2nd direction of 1st area | region A1 and 2nd area | region A2 may become equal is acquired. According to such a configuration, road marking data can be easily acquired based on the stripe pattern marker M in which the first area A1 and the second area A2 are balanced.

また、実施形態にかかる路面標示データ取得部523は、第1領域A1の色(第1色)が第2領域A2の色(第2色)よりも暗く、かつ、第1領域A1で反射して車載カメラ408に向かう光の量Q1が第2領域A2で反射して車載カメラ408に向かう光の量Q2よりも小さくなるように構成されたマーカMの位置に関する路面標示データを取得する。このような構成によれば、第1領域A1で反射して車載カメラ408に向かう光が相対的に低減されるので、マーカMに照射される光が比較的強い状況下においても、車載カメラ408の撮像によって得られた画像データ上でマーカM(およびその周辺の路面RS)が全体的に明るく(白っぽく)写ることが抑制される。その結果、画像認識処理において第1領域A1と第2領域A2との区別がつきやすくなるので、路面標示データを正確に取得することができる。   In addition, the road marking data acquisition unit 523 according to the embodiment is such that the color (first color) of the first area A1 is darker than the color (second color) of the second area A2 and is reflected by the first area A1. Then, road marking data relating to the position of the marker M configured so that the amount Q1 of light directed toward the vehicle-mounted camera 408 is smaller than the amount Q2 of light reflected toward the vehicle-mounted camera 408 as reflected by the second region A2 is acquired. According to such a configuration, since the light reflected by the first region A1 and directed to the in-vehicle camera 408 is relatively reduced, the in-vehicle camera 408 is used even under a relatively strong light irradiated to the marker M. It is suppressed that the marker M (and the surrounding road surface RS) appears as a whole bright (whiter) on the image data obtained by imaging. As a result, the first area A1 and the second area A2 can be easily distinguished from each other in the image recognition process, so that road marking data can be obtained accurately.

この場合において、実施形態にかかる路面標示データ取得部523は、第1領域A1に所定の表面加工が施されるか、または第1領域A1が所定の材料により構成されることで、第1領域A1で反射して車載カメラ408に向かう光の量Q1が第2領域A2で反射して車載カメラ408に向かう光の量よりも小さくなるように構成されたマーカMの位置に関する路面標示データを取得する。このような構成によれば、第1領域A1で反射して車載カメラ408に向かう光の低減が構造的な手法で低減されたマーカMに基づいて、マーカMに照射される光が比較的強い状況下においても、路面標示データを正確に取得することができる。   In this case, the road marking data acquisition unit 523 according to the embodiment is configured such that a predetermined surface processing is performed on the first area A1 or the first area A1 is made of a predetermined material, so that the first area The road marking data relating to the position of the marker M configured such that the amount Q1 of light reflected at A1 and directed toward the vehicle-mounted camera 408 is smaller than the amount of light reflected at the second region A2 and directed toward the vehicle-mounted camera 408 is acquired. To do. According to such a configuration, the light irradiated to the marker M is relatively strong based on the marker M in which the reduction of the light reflected by the first region A1 and directed to the in-vehicle camera 408 is reduced by a structural method. Even under circumstances, road marking data can be obtained accurately.

さらに、実施形態にかかる路面標示データ取得部523は、互いに隣接するように複数設けられたマーカMであって、隣接するマーカM同士で第1領域A1が延びる方向(第1方向)の向きが異なるように複数設けられたマーカMの複数の位置に関する路面標示データを取得する。このような構成によれば、画像認識処理において隣接するマーカM同士の混同が生じるのを回避することができるので、路面標示データを正確に取得することができる。   Furthermore, the road marking data acquisition unit 523 according to the embodiment is a plurality of markers M provided so as to be adjacent to each other, and the direction in which the first region A1 extends between the adjacent markers M (first direction) is the same. Road marking data relating to a plurality of positions of a plurality of markers M provided differently are acquired. According to such a configuration, it is possible to avoid the confusion between the adjacent markers M in the image recognition process, so that the road marking data can be accurately acquired.

<変形例>
なお、上述した実施形態では、本発明の技術が自動バレー駐車システムに適用される場合が例示されている。しかしながら、本発明の技術は、駐車場内に適切な路面標示が設置され、当該路面標示の絶対位置に関するデータを取得可能な駐車システムであれば、自動バレー駐車システム以外の駐車システムにも適用可能である。
<Modification>
In the above-described embodiment, the case where the technology of the present invention is applied to an automatic valet parking system is illustrated. However, the technology of the present invention can be applied to parking systems other than the automatic valet parking system as long as an appropriate road marking is installed in the parking lot and data on the absolute position of the road marking can be acquired. is there.

また、上述した実施形態では、地図データを通信によって管制装置101から取得する構成が例示されている。しかしながら、変形例として、地図データを予め車両制御装置410に記憶しておく構成も考えられる。   Moreover, in embodiment mentioned above, the structure which acquires map data from the control apparatus 101 by communication is illustrated. However, as a modification, a configuration in which map data is stored in advance in the vehicle control device 410 is also conceivable.

同様に、上述した実施形態では、走行経路(誘導経路)を通信によって管制装置101から取得する構成が例示されている。しかしながら、変形例として、車載カメラ408や車両Vに設けられる各種センサから取得される情報などに基づいて、走行経路を車両制御装置410側のみで適宜生成する構成も考えられる。   Similarly, in the above-described embodiment, a configuration in which a travel route (guidance route) is acquired from the control device 101 by communication is illustrated. However, as a modified example, a configuration in which a travel route is appropriately generated only on the vehicle control device 410 side based on information acquired from various sensors provided in the in-vehicle camera 408 or the vehicle V is also conceivable.

また、上述した実施形態では、矩形形状のマーカMが例示されている。しかしながら、マーカMの形状は、他の形状(多角形や円形など)であってもよい。   In the above-described embodiment, the rectangular marker M is illustrated. However, the shape of the marker M may be other shapes (polygon, circle, etc.).

また、上述した実施形態では、暗色(第1色)の1つの第1領域A1が明色(第2色)の2つの第2領域A2によって挟み込まれたマーカMが例示されている。しかしながら、変形例として、1つの第2領域A2が2つの第2領域によって挟み込まれた構成も考えられる。   In the above-described embodiment, the marker M in which one first area A1 of dark color (first color) is sandwiched between two second areas A2 of light color (second color) is illustrated. However, as a modification, a configuration in which one second region A2 is sandwiched between two second regions is also conceivable.

また、上述した実施形態では、1つの第1領域A1と、2つの第2領域A2と、の3つの領域からなる縞パターンによって構成されたマーカMが例示されている。しかしながら、以下に説明するように、縞パターンを構成する領域の数は、4つ以上であってもよいし、2つであってもよい。   Moreover, in embodiment mentioned above, the marker M comprised by the fringe pattern which consists of one area | region A1 and two 2nd area | region A2 is illustrated. However, as will be described below, the number of regions constituting the stripe pattern may be four or more, or may be two.

図13は、変形例にかかる路面標示の一例としてのマーカM1300を示した例示的かつ模式的な図である。図13に示されるマーカM1300は、全体として矩形形状を有している。また、マーカM1300は、第1方向(y方向)に延びる第1色(暗色)の3つの第1領域A1301と、当該第1領域A1301に対して第1方向と交差する第2方向(x方向)に隣接するように設けられた第2色(明色)の4つの第2領域A1302と、の合計7つの領域からなる縞パターンによって構成されている。第1領域A1301および第2領域A1302は、交互に1つずつ入れ替わるようにx方向に並んでいる。なお、マーカM1300のx方向の両端には、同じ第2色の第2領域A2が配置される。   FIG. 13 is an exemplary schematic diagram showing a marker M1300 as an example of a road marking according to a modification. A marker M1300 shown in FIG. 13 has a rectangular shape as a whole. The marker M1300 includes three first areas A1301 of the first color (dark color) extending in the first direction (y direction), and a second direction (x direction) intersecting the first direction with respect to the first area A1301. ) And four second regions A1302 of the second color (light color) provided so as to be adjacent to each other, and a stripe pattern composed of a total of seven regions. The first region A1301 and the second region A1302 are arranged in the x direction so that they are alternately switched one by one. Note that the second region A2 of the same second color is disposed at both ends of the marker M1300 in the x direction.

また、図14は、変形例にかかる路面標示の他の一例としてのマーカM1400を示した例示的かつ模式的な図である。図14に示されるマーカM1400は、全体として矩形形状を有している。また、マーカM1400は、第1方向(y方向)に延びる第1色(暗色)の1つの第1領域A1401と、当該第1領域A1401に対して第1方向と交差する第2方向(x方向)に隣接するように設けられた第2色(明色)の1つの第2領域A1402と、の合計2つの領域からなる縞パターンによって構成されている。   FIG. 14 is an exemplary schematic view showing a marker M1400 as another example of the road marking according to the modification. A marker M1400 shown in FIG. 14 has a rectangular shape as a whole. In addition, the marker M1400 includes one first area A1401 of the first color (dark color) extending in the first direction (y direction), and a second direction (x direction) intersecting the first direction with respect to the first area A1401. ) And a second area (light color) of one second area A1402 provided adjacent to each other, and a stripe pattern composed of a total of two areas.

さらに、上述した実施形態では、第1領域A1および第2領域A2が共に矩形形状のマーカMの一辺に沿った方向に延びる構成が例示されている。しかしながら、変形例として、以下に説明するような、第1領域A1501および第2領域A1502が共に矩形形状のマーカM1500の辺と交差する方向に延びる構成も考えられる。   Furthermore, in the above-described embodiment, a configuration in which both the first region A1 and the second region A2 extend in the direction along one side of the rectangular marker M is illustrated. However, as a modified example, a configuration in which the first region A1501 and the second region A1502 both extend in the direction intersecting the side of the rectangular marker M1500 as described below can be considered.

図15は、変形例にかかる路面標示のさらに他の一例としてのマーカM1500を示した例示的かつ模式的な図である。図15に示されるマーカM1500は、全体として矩形形状を有している。また、マーカM1500は、第1方向(x方向とy方向との間の斜め方向)に延びる第1色(暗色)の1つの第1領域A1501と、当該第1領域A1501を挟み込むように設けられた第2色(明色)の2つの第2領域A1502と、からなる縞パターンによって構成されている。   FIG. 15 is an exemplary schematic diagram showing a marker M1500 as still another example of the road marking according to the modification. A marker M1500 shown in FIG. 15 has a rectangular shape as a whole. The marker M1500 is provided so as to sandwich the first area A1501 of the first color (dark color) extending in the first direction (an oblique direction between the x direction and the y direction) and the first area A1501. And a second pattern (light color) of the second region A1502 and a stripe pattern.

図13に示されるマーカM1300も、図14に示されるマーカM1400も、図15に示されるマーカM1500も、縞パターンという比較的簡単な構成を有するという点で上述した実施形態にかかるマーカMと共通するので、上述した実施形態と同様に、路面標示データを簡単に取得することができる。   The marker M1300 shown in FIG. 13, the marker M1400 shown in FIG. 14, and the marker M1500 shown in FIG. 15 are both in common with the marker M according to the above-described embodiment in that they have a relatively simple configuration called a stripe pattern. Therefore, the road marking data can be easily obtained as in the above-described embodiment.

以上、本発明の実施形態および変形例を説明したが、上述した実施形態および変形例はあくまで一例であって、発明の範囲を限定することは意図していない。上述した新規な実施形態および変形例は、様々な形態で実施されることが可能であり、発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更を行うことができる。上述した実施形態および変形例は、発明の範囲や要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。   As mentioned above, although embodiment and the modification of this invention were described, embodiment and the modification which were mentioned above are an example to the last, Comprising: It is not intending limiting the range of invention. The above-described novel embodiments and modifications can be implemented in various forms, and various omissions, replacements, and changes can be made without departing from the spirit of the invention. The above-described embodiments and modifications are included in the scope and gist of the invention, and are included in the invention described in the claims and the equivalents thereof.

408 車載カメラ
410 車両制御装置
522 画像データ取得部
523 路面標示データ取得部
524 位置推定部
525 走行制御部
A1、A1301、A1401、A1501 第1領域
A2、A1302、A1402、A1502 第2領域
M、M61〜M64、M1300、M1400、M1500 マーカ(路面標示)
P 駐車場
P1 降車領域
P2 乗車領域
R 駐車領域
V 車両
X 乗員
408 Car-mounted camera 410 Vehicle control device 522 Image data acquisition unit 523 Road marking data acquisition unit 524 Position estimation unit 525 Travel control unit A1, A1301, A1401, A1501 First region A2, A1302, A1402, A1502 Second region M, M61 M64, M1300, M1400, M1500 Marker (road marking)
P Parking lot P1 Alighting area P2 Boarding area R Parking area V Vehicle X Crew

Claims (9)

車両の周辺の状況を撮像する車載カメラによって得られる画像データを取得する画像データ取得部と、
前記画像データに基づく画像認識処理を実施することで、駐車場内における前記車両の走行経路の周辺の路面に設置された路面標示であって、第1方向に延びる第1色の第1領域と、当該第1領域に対して前記第1方向と交差する第2方向に隣接するように設けられ、前記第1色とは異なる第2色の第2領域と、を含む縞パターンにより構成された路面標示の位置に関する路面標示データを取得する路面標示データ取得部と、
前記路面標示データ取得部により取得された前記路面標示データと、前記路面標示の絶対位置を含む地図データと、を照合することで、前記車両の実位置を推定する位置推定部と、
前記位置推定部により推定された前記実位置に基づいて前記車両の走行状態を制御することで、前記駐車場内での前記車両の自動走行を実施する走行制御部と、
を備える、車両制御装置。
An image data acquisition unit that acquires image data obtained by an in-vehicle camera that captures a situation around the vehicle;
By performing image recognition processing based on the image data, a road marking installed on a road surface around the traveling route of the vehicle in a parking lot, and a first region of a first color extending in a first direction; A road surface that is provided so as to be adjacent to the first region in a second direction that intersects the first direction, and includes a second region having a second color different from the first color. A road marking data acquisition unit for acquiring road marking data related to the position of the marking;
A position estimation unit that estimates the actual position of the vehicle by collating the road marking data acquired by the road marking data acquisition unit with map data including the absolute position of the road marking;
A traveling control unit that performs automatic traveling of the vehicle in the parking lot by controlling a traveling state of the vehicle based on the actual position estimated by the position estimating unit;
A vehicle control device comprising:
前記路面標示データ取得部は、前記第2方向の両端に前記第1領域または前記第2領域が設けられた前記路面標示の位置に関する前記路面標示データを取得する、
請求項1に記載の車両制御装置。
The road marking data acquisition unit acquires the road marking data related to the position of the road marking in which the first area or the second area is provided at both ends in the second direction.
The vehicle control device according to claim 1.
前記路面標示データ取得部は、前記第2方向の中央部に前記第1領域および前記第2領域のうち一方の領域が1つ設けられ、かつ、当該一方の領域を前記第2方向の両側から挟み込むように前記第1領域および前記第2領域のうち他方が2つ設けられた矩形形状の前記路面標示の位置に関する前記路面標示データを取得する、
請求項2に記載の車両制御装置。
The road marking data acquisition unit is provided with one of the first area and the second area at a central portion in the second direction, and the one area from both sides in the second direction. Obtaining the road marking data relating to the position of the rectangular road marking in which the other two of the first area and the second area are sandwiched,
The vehicle control device according to claim 2.
前記路面標示データ取得部は、前記第1領域および前記第2領域のそれぞれが前記第1方向に延び、かつ、前記第1領域および前記第2領域のそれぞれの前記第2方向の幅が等しくなるように構成された前記路面標示の位置に関する前記路面標示データを取得する、
請求項3に記載の車両制御装置。
In the road marking data acquisition unit, each of the first area and the second area extends in the first direction, and each of the first area and the second area has the same width in the second direction. Obtaining the road marking data relating to the position of the road marking configured as described above,
The vehicle control device according to claim 3.
前記路面標示データ取得部は、前記第1色が前記第2色よりも暗く、かつ、前記第1領域で反射して前記車載カメラに向かう光の量が前記第2領域で反射して前記車載カメラに向かう光の量よりも小さくなるように構成された前記路面標示の位置に関する前記路面標示データを取得する、
請求項1〜4のいずれか1項に記載の車両制御装置。
The road marking data acquisition unit is configured such that the first color is darker than the second color, and the amount of light reflected by the first region and directed toward the vehicle-mounted camera is reflected by the second region. Obtaining the road marking data relating to the position of the road marking configured to be smaller than the amount of light directed to the camera;
The vehicle control apparatus of any one of Claims 1-4.
前記路面標示データ取得部は、前記第1領域に所定の表面加工が施されるか、または前記第1領域が所定の材料により構成されることで、前記第1領域で反射して前記車載カメラに向かう光の量が前記第2領域で反射して前記車載カメラに向かう光の量よりも小さくなるように構成された前記路面標示の位置に関する前記路面標示データを取得する、
請求項5に記載の車両制御装置。
The road marking data acquisition unit reflects the light from the first area when the first area is subjected to a predetermined surface processing or the first area is made of a predetermined material. Obtaining the road marking data relating to the position of the road marking that is configured such that the amount of light directed to the vehicle is reflected by the second region and smaller than the amount of light directed to the vehicle-mounted camera;
The vehicle control device according to claim 5.
前記路面標示データ取得部は、互いに隣接するように複数設けられた前記路面標示であって、隣接する前記路面標示同士で前記第1方向の向きが異なるように複数設けられた前記路面標示の複数の位置に関する前記路面標示データを取得する、
請求項1〜6のいずれか1項に記載の車両制御装置。
The road marking data acquisition unit is a plurality of the road markings provided so as to be adjacent to each other, and a plurality of the road markings provided so as to have different directions in the first direction between the adjacent road markings. Obtaining the road marking data relating to the position of
The vehicle control device according to any one of claims 1 to 6.
前記自動走行は、降車領域と乗車領域と駐車領域とを含む前記駐車場における自動バレー駐車を実現するための、前記降車領域で前記車両から乗員が降車した後、所定の指示に応じて前記車両が前記降車領域から前記駐車領域へ自動で移動して駐車する自動駐車と、当該自動駐車が完了した後、所定の呼び出しに応じて前記車両が前記駐車領域から出庫して前記乗車領域へ自動で移動して停車する自動出庫と、を含む、
請求項1〜7のいずれか1項に記載の車両制御装置。
The automatic traveling is performed according to a predetermined instruction after an occupant gets off from the vehicle in the getting-off area for realizing automatic valet parking in the parking lot including a getting-off area, a boarding area, and a parking area. Automatically parked by moving from the unloading area to the parking area, and after the automatic parking is completed, the vehicle leaves the parking area and automatically enters the boarding area in response to a predetermined call. Including automatic delivery to move and stop,
The vehicle control apparatus of any one of Claims 1-7.
車両の自動走行が実施される駐車場であって、
前記車両の走行経路の近傍の路面に設置され、第1方向に延びる第1色の第1領域と、当該第1領域に対して前記第1方向と交差する第2方向に隣接するように設けられ、前記第1色とは異なる第2色の第2領域と、を含む縞パターンにより構成された路面標示を備える、
駐車場。
It is a parking lot where automatic driving of vehicles is carried out,
The first area of the first color that is installed on the road surface in the vicinity of the travel route of the vehicle and extends in the first direction, and is provided adjacent to the second area that intersects the first direction with respect to the first area. A road marking composed of a stripe pattern including a second region of a second color different from the first color,
Parking Lot.
JP2018024428A 2018-02-14 2018-02-14 Vehicle controller and parking lot Active JP7139618B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2018024428A JP7139618B2 (en) 2018-02-14 2018-02-14 Vehicle controller and parking lot

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2018024428A JP7139618B2 (en) 2018-02-14 2018-02-14 Vehicle controller and parking lot

Publications (2)

Publication Number Publication Date
JP2019139655A true JP2019139655A (en) 2019-08-22
JP7139618B2 JP7139618B2 (en) 2022-09-21

Family

ID=67694325

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2018024428A Active JP7139618B2 (en) 2018-02-14 2018-02-14 Vehicle controller and parking lot

Country Status (1)

Country Link
JP (1) JP7139618B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111231945A (en) * 2020-03-10 2020-06-05 威马智慧出行科技(上海)有限公司 Automatic parking space searching method, electronic equipment, training method, server and automobile
WO2022003750A1 (en) * 2020-06-29 2022-01-06 ヤマハ発動機株式会社 Marker device and marker detection system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09311998A (en) * 1996-05-21 1997-12-02 Omron Corp Object detection device and parking lot management system using it
JP2009243195A (en) * 2008-03-31 2009-10-22 Toyota Motor Corp Parking position display implement and garage
JP2010208358A (en) * 2009-03-06 2010-09-24 Toyota Industries Corp Parking assist apparatus
JP2015041348A (en) * 2013-08-23 2015-03-02 カヤバ工業株式会社 Parking guidance device and parking guidance method
JP2017117188A (en) * 2015-12-24 2017-06-29 Kyb株式会社 Vehicle guiding device and vehicle guiding system including vehicle guiding device

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH09311998A (en) * 1996-05-21 1997-12-02 Omron Corp Object detection device and parking lot management system using it
JP2009243195A (en) * 2008-03-31 2009-10-22 Toyota Motor Corp Parking position display implement and garage
JP2010208358A (en) * 2009-03-06 2010-09-24 Toyota Industries Corp Parking assist apparatus
JP2015041348A (en) * 2013-08-23 2015-03-02 カヤバ工業株式会社 Parking guidance device and parking guidance method
JP2017117188A (en) * 2015-12-24 2017-06-29 Kyb株式会社 Vehicle guiding device and vehicle guiding system including vehicle guiding device

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111231945A (en) * 2020-03-10 2020-06-05 威马智慧出行科技(上海)有限公司 Automatic parking space searching method, electronic equipment, training method, server and automobile
CN111231945B (en) * 2020-03-10 2021-11-12 威马智慧出行科技(上海)有限公司 Automatic parking space searching method, electronic equipment, training method, server and automobile
WO2022003750A1 (en) * 2020-06-29 2022-01-06 ヤマハ発動機株式会社 Marker device and marker detection system
JPWO2022003750A1 (en) * 2020-06-29 2022-01-06
JP7320677B2 (en) 2020-06-29 2023-08-03 ヤマハ発動機株式会社 Marker detection system

Also Published As

Publication number Publication date
JP7139618B2 (en) 2022-09-21

Similar Documents

Publication Publication Date Title
JP6930600B2 (en) Vehicle position estimation device and vehicle control device
CN109747635B (en) Vehicle control device and parking system
JP7069772B2 (en) Vehicle control system, parking lot control system and automatic valley parking system
JP6996246B2 (en) Vehicle control device
US9522700B2 (en) Driving support apparatus for vehicle and driving support method
US8645015B2 (en) Semiautomatic parking machine
US10703363B2 (en) In-vehicle traffic assist
JP7275520B2 (en) vehicle controller
CN108351958A (en) The detection method and device of the wire on parking stall
CN106338988A (en) Control system of automated driving vehicle
CN105938365A (en) Vehicle control device
DE102016200018A1 (en) VEHICLE MOVING CONTROL DEVICE
CN103079901A (en) Parking assistance device
JP2020032860A (en) Vehicle control device, automatic operation control system, and vehicle control method
JP2019038425A (en) Automatic driving device
JP2021068304A (en) Automatic parking system
JP2020131787A (en) Control device and vehicle control device
JP7102765B2 (en) Vehicle control device
JP7139618B2 (en) Vehicle controller and parking lot
JP7238356B2 (en) Vehicle control device and vehicle control program
JP7192308B2 (en) Vehicle communication control device, vehicle communication control system, vehicle communication control method, and vehicle communication control program
JP7192309B2 (en) Vehicle control device and vehicle control method
JP2019137113A (en) Vehicle position estimation system and automatic valet parking system
JP7344095B2 (en) control device
JP7429111B2 (en) Traffic control equipment and vehicle control equipment

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20210115

A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20210423

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20211227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20220104

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20220307

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20220809

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20220822

R150 Certificate of patent or registration of utility model

Ref document number: 7139618

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150