WO2007122862A1 - 駐車支援装置及び駐車支援方法 - Google Patents

駐車支援装置及び駐車支援方法 Download PDF

Info

Publication number
WO2007122862A1
WO2007122862A1 PCT/JP2007/053824 JP2007053824W WO2007122862A1 WO 2007122862 A1 WO2007122862 A1 WO 2007122862A1 JP 2007053824 W JP2007053824 W JP 2007053824W WO 2007122862 A1 WO2007122862 A1 WO 2007122862A1
Authority
WO
WIPO (PCT)
Prior art keywords
parking
frame line
target
parking frame
vehicle
Prior art date
Application number
PCT/JP2007/053824
Other languages
English (en)
French (fr)
Inventor
Tomohiko Endo
Yasushi Makino
Yuichi Kubota
Yukiko Kawabata
Original Assignee
Toyota Jidosha Kabushiki Kaisha
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Jidosha Kabushiki Kaisha filed Critical Toyota Jidosha Kabushiki Kaisha
Priority to US12/296,301 priority Critical patent/US8232893B2/en
Priority to CN200780014178XA priority patent/CN101426669B/zh
Priority to EP07737543A priority patent/EP2017138B1/en
Publication of WO2007122862A1 publication Critical patent/WO2007122862A1/ja

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/168Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R21/00Arrangements or fittings on vehicles for protecting or preventing injuries to occupants or pedestrians in case of accidents or other traffic risks
    • B60R21/01Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents
    • B60R21/013Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over
    • B60R21/0134Electrical circuits for triggering passive safety arrangements, e.g. airbags, safety belt tighteners, in case of vehicle accidents or impending vehicle accidents including means for detecting collisions, impending collisions or roll-over responsive to imminent contact with an obstacle, e.g. using radar systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/31Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles providing stereoscopic vision
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62DMOTOR VEHICLES; TRAILERS
    • B62D15/00Steering not otherwise provided for
    • B62D15/02Steering position indicators ; Steering position determination; Steering aids
    • B62D15/027Parking aids, e.g. instruction means
    • B62D15/028Guided parking by providing commands to the driver, e.g. acoustically or optically
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/86Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
    • G01S13/867Combination of radar systems with cameras
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/86Combinations of sonar systems with lidar systems; Combinations of sonar systems with systems not using wave reflection
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/86Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B21/00Alarms responsive to a single specified undesired or abnormal condition and not otherwise provided for
    • G08B21/18Status alarms
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/165Anti-collision systems for passive traffic, e.g. including static obstacles, trees
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/16Anti-collision systems
    • G08G1/166Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/302Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing combining image information with GPS information or vehicle data, e.g. vehicle speed, gyro, steering angle data
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/304Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images
    • B60R2300/305Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using merged images, e.g. merging camera image with stored images merging camera image with lines or icons
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • B60R2300/8026Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views in addition to a rear-view mirror system
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60WCONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08Interaction between the driver and the control system
    • B60W50/14Means for informing the driver, warning the driver or prompting a driver intervention
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/93Lidar systems specially adapted for specific applications for anti-collision purposes
    • G01S17/931Lidar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9314Parking operations
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9323Alternative operation using light waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9324Alternative operation using ultrasonic waves
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/93Radar or analogous systems specially adapted for specific applications for anti-collision purposes
    • G01S13/931Radar or analogous systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2013/9327Sensor installation details
    • G01S2013/93274Sensor installation details on the side of the vehicles
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/93Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2015/932Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations
    • G01S2015/933Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations for measuring the dimensions of the parking space when driving past
    • G01S2015/935Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations for measuring the dimensions of the parking space when driving past for measuring the contour, e.g. a trajectory of measurement points, representing the boundary of the parking space
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/93Sonar systems specially adapted for specific applications for anti-collision purposes
    • G01S15/931Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles
    • G01S2015/932Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations
    • G01S2015/933Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations for measuring the dimensions of the parking space when driving past
    • G01S2015/936Sonar systems specially adapted for specific applications for anti-collision purposes of land vehicles for parking operations for measuring the dimensions of the parking space when driving past for measuring parking spaces extending transverse or diagonal to the driving direction, i.e. not parallel to the driving direction

Definitions

  • the present invention relates to a parking assistance device and a parking assistance method for assisting parking.
  • surrounding obstacle detection means for detecting obstacles around the vehicle
  • a vehicle motion calculation unit for calculating the vehicle position and the vehicle body direction on the two-dimensional plane of the vehicle from the steering angle and the vehicle speed
  • a target parking position determination unit for finding a space where parking is possible and determining a target parking position based on the vehicle movement calculated by the vehicle movement calculation unit and the relative positional relationship to the obstacle obtained by the obstacle detection unit;
  • a vehicular parking assist device characterized by having (see, for example, Patent Document 1).
  • Patent Document 1 Japanese Patent Laid-Open No. 2003-54341
  • the driver In actual parking, the driver generally parks the vehicle so that the vehicle fits properly within the parking frame line while targeting the parking frame line drawn on the ground of the parking space. It is.
  • the target parking position is determined based only on the relationship with the obstacle adjacent to the parking space.
  • the target parking position may be determined as a biased position within the parking frame line accordingly.
  • the parking frame line can be recognized by image recognition using a camera, etc. If the parking frame line cannot be recognized due to the positional relationship with the camera, the influence of ambient light at night, etc., or snowfall In some cases, there is no parking frame in the first place, so it is desirable to determine a target parking position that can be supported even in such a case.
  • the target parking position that can be supported can be selectively determined with appropriate priorities by appropriately cooperating the obstacle detection unit and the parking frame line detection unit. It aims at provision of a parking assistance device and a parking assistance method.
  • the first invention provides an obstacle detection means for detecting an obstacle around a vehicle in a parking assistance device for assisting parking,
  • Parking frame line detection means for detecting a parking frame line drawn on the ground
  • the target parking position is calculated based on the detected parking frame line.
  • the target parking position is used based on the detected parking frame line. Even in the situation where the vehicle is parked unevenly within the parking frame line, it is possible to set the target parking position at an appropriate position with respect to the parking frame line.
  • a second invention is the parking assist device according to the first invention.
  • the parking frame line detection means is a means for detecting a parking frame line by processing an image around the vehicle imaged by the in-vehicle imaging means, and the processing range of the image by the parking frame line detection means is the obstacle detection means by the obstacle detection means. It is set based on the object detection result. Thus, the parking frame line in the image can be efficiently detected by using the obstacle detection result by the obstacle detection means.
  • a third invention is the parking assistance device according to the second invention.
  • the processing range of the image by the parking frame line detection means is set at least in the detected parking space. This makes it possible to efficiently detect parking frame lines that may exist in the parking space.
  • a fourth invention is the parking assistance device according to any one of the first to third inventions.
  • the target parking position is calculated based on the obstacle detection result. This makes it possible to calculate a target parking position that can be supported even when the parking frame line cannot be recognized due to the influence of ambient light such as nighttime or the influence of snow.
  • a fifth invention is the parking assistance apparatus according to any one of the first to fourth inventions.
  • the target parking position is determined based on the parking frame line. To do. This prevents the target parking position that cannot be supported from being set by giving priority to the target parking position based on the parking frame line.
  • a sixth invention is the parking assist device according to any one of the first to fifth inventions.
  • an information output means is provided for performing start position guidance for assisting the vehicle to travel to the parking start position.
  • the parking frame line detection means does not detect the parking frame line under the situation where the start position guidance is performed, or the parking frame line is detected by the parking frame line detection means, the parking frame line is detected.
  • the target parking position is determined based on the obstacle detection result by the obstacle detection means.
  • a seventh invention provides a parking support method for supporting parking
  • An obstacle detection stage for detecting obstacles around the vehicle
  • a parking frame line detection stage for detecting a parking frame line drawn on the ground
  • a target parking position calculation stage for calculating a target parking position after the parking frame line detection stage.
  • the target parking position calculation stage when the parking frame line is detected in the parking frame line detection stage, the target parking position is calculated based on the detected parking frame line.
  • An eighth invention provides a parking support method for supporting parking, An obstacle detection stage for detecting obstacles around the vehicle;
  • a parking space detection stage for detecting a parking space adjacent to the obstacle based on the obstacle detection result in the obstacle detection stage
  • an information output stage for notifying the driver of the parking space
  • a parking frame line detection stage for detecting a parking frame line drawn on the ground when the vehicle reaches the parking start position after the information output stage;
  • a determination stage for determining whether or not a travel trajectory that can support the parking frame line cannot be generated
  • the target parking position calculation stage it was determined that the parking frame line was not detected at the parking frame line detection stage, or that it was not possible to generate a travel track that could support the parking frame line at the determination stage.
  • the target parking position is determined based on the parking space detected in the parking space detection stage.
  • the target parking position that can be supported can be selectively determined with appropriate priority by appropriately cooperating the obstacle detection means and the parking frame line detection means.
  • a parking assistance device and a parking assistance method are obtained.
  • FIG. 1 is a system configuration diagram showing an embodiment of a parking assist device 10 according to the present invention.
  • FIG. 2 is an explanatory view showing a detection mode of an object to be detected by the distance measuring sensor 70 (in this example, a vehicle Z).
  • FIG. 3 is a block diagram showing main functions of a parking assist ECU 12 of the present embodiment.
  • FIG. 4 is a flowchart showing a flow of a target parking position calculation process executed when start position guidance is performed.
  • FIG. 5 is a plan view showing a degree of deviation with respect to the parking frame line in the first target parking position and the second target parking position.
  • FIG. 7 A diagram showing an example of a touch panel for setting a target parking position on the display 22.
  • FIG. 7 Explanation of symbols
  • FIG. 1 is a system configuration diagram showing an embodiment of a parking assistance apparatus 10 according to the present invention.
  • a parking assist device 10 as shown in FIG. 1 is mainly configured by an electronic control unit 12 (hereinafter referred to as “parking assist ECU 12”).
  • the parking assist ECU 12 is configured as a microcomputer including a CPU, a ROM, a RAM, and the like connected to each other via a bus (not shown).
  • the ROM stores programs and data executed by the CPU.
  • the parking assist ECU 12 includes a steering angle sensor 1 that detects the steering angle of a steering wheel (not shown) via an appropriate bus such as a CAN (Controller Area Network) or a high-speed communication bus. 6 and a vehicle speed sensor 18 for detecting the speed of the vehicle are connected.
  • the vehicle speed sensor 18 may be a wheel speed sensor that is disposed on each wheel and generates a pulse signal at a cycle according to the wheel speed.
  • the parking assist ECU 12 is connected to a distance measuring sensor 70 that detects a distance from an obstacle using sound waves (for example, ultrasonic waves), radio waves (for example, millimeter waves), light waves (for example, lasers), or the like.
  • the distance measuring sensor 70 can detect a distance such as laser radar, millimeter wave radar, ultrasonic radar, or stereo vision.
  • the ranging sensor 70 is set on both the left and right sides of the front part of the vehicle.
  • the distance measuring sensor 70 emits a sound wave or the like in a predetermined direction centered on the vehicle width direction and receives the reflected wave, thereby detecting an obstacle on the side of the vehicle. Detect the distance.
  • the distance sensor 70 may be mounted, for example, in the vicinity of a bumper in the front part of the vehicle, and may emit a sound wave or the like toward a diagonally forward direction of 17 to 20 degrees with respect to the lateral direction of the vehicle.
  • the distance measuring sensor 70 may output the reflection part of the obstacle (a set of reflection points such as sound waves) as a point sequence, and the output data is stored in the memory 72 (for example, EEPROM) at any time in every output cycle. May be.
  • the parking assist ECU 12 is connected to a reverse shift switch 50 and a parking switch 52.
  • the reverse shift switch 50 outputs an ON signal when the shift lever is operated to the reverse position (reverse), and maintains the OFF state in other cases.
  • the parking switch 52 is provided in the passenger compartment and can be operated by the user. The parking switch 52 is normally kept in an off state and is turned on by a user operation.
  • Parking support ECU 12 determines whether or not the user needs parking support based on the output signal of parking switch 52. That is, when the parking switch 52 is turned on while the vehicle is traveling, the parking assist ECU 12 starts parking assist control for assisting the vehicle traveling to the target parking position in the parking space as soon as possible.
  • Parking support control includes not only vehicle control such as steering control when traveling to the target parking position, but also information output to the driver such as output of a guidance message for guiding the vehicle to the parking start position. .
  • FIG. 3 is a block diagram showing the main functions of the parking assist ECU 12 of the present embodiment.
  • Parking assistance ECU 12 includes a deflection angle calculation unit 41, a parking space detection unit 42, and a target parking position determination unit 44.
  • the configuration 'function of each unit will be described.
  • the deflection angle calculation unit 41 receives output signals of the steering angle sensor 16 and the vehicle speed sensor 18 (see Fig. 1) at predetermined intervals. Based on the output signals of the steering angle sensor 16 and the vehicle speed sensor 18, the deflection angle calculation unit 41 calculates the amount of change in the direction of the vehicle in a predetermined section (hereinafter, this amount of change is referred to as “deflection angle”).
  • the predetermined section is, for example, a section of a predetermined distance (for example, 7 m) from the current vehicle position.
  • the deflection angle is defined as positive in the clockwise direction and negative in the counterclockwise direction.
  • the deflection angle can be calculated by the equation (1), where ds is the minute movement distance of the vehicle and y is the road curvature (equivalent to the reciprocal of the turning radius R of the vehicle). .
  • the parking assist ECU 12 of the present embodiment calculates a minute deflection angle ⁇ for each predetermined movement distance (0.5 m in this example) based on the following formula 2 obtained by transforming the formula 1;
  • the deflection angle ⁇ is calculated by summing the calculated small deflection angles ⁇ .
  • the predetermined moving distance (0.5 m in this example) is monitored by time-integrating the output signal (wheel speed pulse) of the vehicle speed sensor 18.
  • the minute deflection angle ⁇ is calculated by multiplying the road surface curvature ⁇ obtained every minute moving distance 0.01 m by the minute moving distance 0.01 and integrating these multiplied values for the moving distance 0.5 m. May be.
  • the relationship between the road curvature ⁇ and the steering angle Ha is stored in the ROM of the parking assist ECU 12 as a map created based on the correlation data acquired for each vehicle in advance.
  • the detection results of the vehicle speed sensor 18 and the steering angle sensor 16 are the same as the detection results of the distance measuring sensor 70 under the condition that the parking switch 52 is not turned on. It is desirable to be stored in This allows the parking switch
  • the parking space detection unit 42 detects a parking space that may exist on the side of the vehicle based on the detection result (dot lj) of the distance measuring sensor 70. Based on the detection results of the left and right distance measuring sensors 70, the parking space detection unit 42 detects parking spaces that may exist on the left and right sides of the vehicle independently in parallel on the left and right. Since the left and right detection methods may be the same, the detection method on one side will be described below unless otherwise specified.
  • the parking space detection method based on the detection result (point sequence) of the distance measuring sensor 70 may be any appropriate method.
  • the parking space detection method may be different between garage parking and parallel parking. Below, an example of the parking space detection method in the case of garage parking will be described first, and then an example of the parking space detection method in the case of parallel parking will be described.
  • the operation for the parking switch 52 may include designation of either garage parking or parallel parking.
  • the parking assist ECU 12 may select a parking mode (garage parking mode or parallel mode) according to the designated parking mode. ).
  • the parking space detection unit 42 detects a point sequence having a predetermined length (> lm), and thereafter When there is no point sequence longer than the fixed length LI, it is determined that there is a parking space behind the obstacle related to the point sequence of the predetermined length, and the parking space valid flag is set.
  • the parking space detection unit 42 may further detect the direction of the detected parking space.
  • the parking space detection unit 42 may estimate the direction of the parking space based on the direction of the vehicle when passing around the parking space (for example, the above-described deflection angle).
  • the parking space detection unit 42 performs a straight line or curved line approximation on the point sequence data output from the distance measuring sensor 70 to grasp the direction of the obstacle, and uses the grasped obstacle direction.
  • the direction of the parking space may be detected.
  • the parking space detection unit 42 has a parking space on the front side of the obstacle related to the point sequence when there is no point sequence of the predetermined length L2 and, after that, for example, a point sequence of 2. Om or more is detected. Judging that it exists, the parking space valid flag is set.
  • the parking space detection unit 42 detects a point sequence having a predetermined length (> 2.0 m) and, after that, when the point sequence no longer exists for a predetermined length L2 or more, It is determined that there is a parking space behind the obstacle, and a parking space valid flag is set.
  • the parking space detection unit 42 may further detect the direction of the detected parking space. For example, the parking space detection unit 42 may estimate the direction of the parking space based on the direction of the vehicle when passing around the parking space. Alternatively, the parking space detection unit 42 performs straight line or curve approximation on the point sequence data output from the distance measuring sensor 70 to grasp the direction of the obstacle, and uses the grasped obstacle direction, The direction of the parking space may be detected.
  • the detection result of the distance measuring sensor 70 is preferably stored even in a situation where the parking switch 52 is not turned on.
  • the parking switch 52 when the parking switch 52 is turned on, the parking space before the current vehicle position can be detected based on the detection result of the distance measuring sensor 70 in the section before the vehicle position at that time.
  • FI Only the sensor output in the section before a predetermined distance from the current vehicle position may be stored in the memory 72 by the FO method. Thereby, the capacity of the memory 72 can be used efficiently.
  • the target parking position determination unit 44 determines the target parking position in the detected parking space based on the detection result of the parking space described above. For example, the target parking position determination unit 44 determines the target parking position (for example, the position of the center of the rear axis of the vehicle on the center line of the parking space) based on the end point of the obstacle adjacent to the parking space (detected based on the point sequence data). May be determined.
  • the target parking position is a concept including the target parking direction in the parking space (how the vehicle is parked in the parking space).
  • the target parking direction may be determined based on the direction of the parking space estimated based on the detection result of the distance measuring sensor 70 as described above.
  • the parking start position calculation unit 46 enables a parking start position capable of assisting the parking space (parking capable of generating a trajectory to the target parking position in the parking space). Calculate the start position.
  • the parking start position calculation unit 46 can perform parking at the target parking position (and the target parking direction, the same applies hereinafter) determined by the target parking position determination unit 44 in consideration of the maximum turning curvature of the vehicle. Determine the parking start position.
  • the target parking position (including the direction of the vehicle at the start of parking) determined based on the detection result of the distance sensor 70 is a target parking position that can be changed later as described later.
  • the starting position may be calculated approximately using the maximum turning curvature of the vehicle.
  • the parking start position that can support the parking space is not a single point, but has a range, so the parking start position determined by the parking start position calculation unit 46 is allowed. It may be defined by a position range.
  • the information output control unit 47 outputs the sound “bone” via the speaker 24 (see FIG. 1) and guides the vehicle to the parking start position. Steering instructions are given through the speaker 24 and / or the display 22 (see Fig. 1). As a result, the driver can understand the steering operation start timing to reach the parking start position suitable for the parking space.
  • the information output control unit 47 is based on an output signal of the steering angle sensor 16, for example. Accordingly, it is determined whether or not the driver has operated the steering wheel in response to the steering instruction. If it is determined that the steering wheel operation has been performed, start position guidance described below is started. If the parking space reported as described above is contrary to the driver's intention, the driver will continue to run in the parking lot until the desired parking space is found. right. In this case, it is determined that the steering operation according to the steering instruction has not been performed, and the same steering instruction is output when the parking space valid flag is set for the next detected parking space. Will be.
  • the information output control unit 47 performs parking while grasping the traveling pattern (change history of the position and orientation) based on the deflection angle calculated by the deflection angle calculation unit 41 at all times. Various guidance for guiding the vehicle to the parking start position determined by the start position calculation unit 46 is performed.
  • the information output control unit 47 may appropriately select “start from a little closer to the parking space” based on the correspondence between the current position (and direction) of the vehicle and the parking start position. Use the speaker 24 and / or the display 22 to send a message stating “Start a little further away from the parking space” or “Start with a little more leaning of the vehicle”. By this start position guidance, the driver can easily move the vehicle to the parking start position suitable for the parking space.
  • the information output control unit 47 sends an audio message (for example, "Please stop and return the steering wheel") to the vehicle to stop the vehicle. It may also be output via the display 22. Alternatively, the information output control unit 47 may execute automatic intervention steering for guiding the vehicle to the parking start position via a steering means (not shown) and / or the vehicle reaches the parking start position. At this time, automatic intervention braking may be executed via braking means (not shown).
  • the information output control unit 47 sends a message to the effect of the speakers 24 and It may also be output via the display 22. As a result, the driver can know that the parking assist device 10 is in a supportable state.
  • the information output control unit 47 executes the start position guidance as described above, the information output control unit 47 notifies the fact. Set the experience flag to represent. This experience flag indicates to which parking space the parking start guidance is currently being provided. Therefore, once the experience flag is set, the experience flag is not cleared until the vehicle position deviates greatly from the parking space where the start position is planned. When the experience flag is cleared, as long as the parking switch 52 is turned on, a new parking space detection process (information output process for notifications, steering instructions, etc.) is started again.
  • the experience flag is cleared, as long as the parking switch 52 is turned on, a new parking space detection process (information output process for notifications, steering instructions, etc.) is started again.
  • the target parking position determination unit 44 performs target parking position calculation processing when the reverse shift switch 50 is turned on at the parking start position.
  • the target parking position calculation process executed by the target parking position determination unit 44 at this parking start position is different from the target parking position calculation process executed based on the detection result of the distance measuring sensor 70 described above. This is based on the captured image (actual image) of the camera 20 (see Fig. 1). That is, the target parking position determination unit 44 of the present embodiment calculates the target parking position based on the process of calculating the target parking position based on the detection result of the distance measuring sensor 70 and the captured image of the back monitor camera 20.
  • the target parking position calculation process is performed in two or more different modes.
  • the target parking position calculated based on the detection result of the distance measuring sensor 70 is also referred to as “first target parking position” and is calculated based on the captured image of the back monitor camera 20.
  • This target parking position is also called “second target parking position”.
  • the back monitor camera 20 is mounted on the rear of the vehicle so as to capture a landscape in a predetermined angle region behind the vehicle.
  • the back monitor camera 20 may be a camera provided with an image sensor such as a CCD or a CMOS.
  • FIG. 4 is a flowchart showing a flow of target parking position calculation processing executed by the target parking position determination unit 44 (and target travel path calculation unit 48) at the parking start position.
  • This processing routine is performed when the reverse shift switch 50 is turned on at the parking start position and the experience flag is set (when the vehicle is positioned at the parking start position where the start position guidance is performed with fiP). It is activated.
  • a region of interest (R0I: region of interest) is set.
  • the region of interest is a region for detecting a parking frame line that may exist in the image, and has a predetermined size corresponding to the size of the actual parking frame line in the image. It may be an area.
  • the region of interest is set within a predetermined region based on the first target parking position.
  • step 110 a parking frame image recognition process is performed on the image data in the region of interest.
  • image recognition processing There are various types of image recognition processing for parking frame lines, and any appropriate method may be used.
  • a feature point in the region of interest is extracted.
  • a feature point is extracted as a luminance change point exceeding a predetermined threshold value (that is, a contour (edge) having a sharp change in brightness is extracted from the image).
  • each pixel is converted from the camera coordinate system to the real coordinate system by distortion correction.
  • a straight line fit (straight line approximation) is applied to the contour (point ⁇ IJ of the feature point), and the contour line of the feature point is derived. It is then detected as two parallel pairs of contour force parking lines (typically white lines).
  • step 120 it is determined whether the image recognition of the parking frame line in step 110 has been successful.
  • the process proceeds to step 130.
  • the case where the image recognition of the parking frame line ends in failure refers to the influence of the positional relationship between the field of view of the back monitor camera 20 and the actual parking frame line, ambient light at night, underground parking lots, etc. It is assumed that the parking frame line cannot be recognized due to the effects of the impact (effect on edge extraction), snow cover, etc., or the parking frame line does not exist in the first place. If the parking frame image recognition fails, go to step 160. At this time, R0I may be finely adjusted and the image recognition process may be executed again. Also in this case, if the image recognition of the parking frame line finally fails, the process proceeds to step 160.
  • a target parking position is calculated based on the recognized parking frame line.
  • the target parking position (second target parking position) is calculated so that the vehicle can be evenly placed within the parking frame line during parking.
  • the second target parking position may be a concept including a target parking direction (in which direction the vehicle is parked in the parking space).
  • Target parking The vehicle direction may be determined in a direction substantially parallel to the image-recognized parking frame line.
  • step 140 it is determined whether or not a trajectory can be generated for the second target parking position (including the target parking direction, the same applies hereinafter).
  • the target travel trajectory calculation unit 48 is a target travel trajectory (for example, for guiding the vehicle to the second target parking position based on the relationship between the current position of the vehicle and the second target parking position, the turning characteristics of the vehicle, etc.) Calculate the rear axis center trajectory). It should be noted that the generation of the target trajectory at this stage leaves a margin for later correction of the target trajectory so that the turning curvature is somewhat smaller than the maximum turning curvature of the vehicle (for example, 90% of the maximum turning curvature). (Turning curvature up to) may be used.
  • step 150 If the target travel path is generated by the target travel path calculation unit 48 in step 140, the process proceeds to step 150. On the other hand, if the track generation is impossible, that is, the target travel path calculation unit 48 performs the target travel path. If is not generated, go to step 160.
  • the trajectory cannot be generated for example, the current parking start position where the difference between the first target parking position and the second target parking position is large may be inappropriate for the second target parking position. is assumed. This can occur because the start position guidance as described above is executed based on the parking start position calculated based on the first target parking position.
  • the calculated second target parking position is corrected so that the trajectory can be generated within the range where the vehicle is within the parking frame line. You can do it.
  • the calculated second target parking position can be corrected so that a track can be generated as long as it can be determined that no contact will occur due to the relationship with an adjacent obstacle even outside the parking frame line. May be.
  • the image recognition result used for the extraction of the parking frame line is used as the information on the adjacent obstacle.
  • the obstacle image recognition method may be arbitrary, for example, the region of interest is set to a larger size, and the degree of parallelism with respect to the parking frame line is greater than or equal to a predetermined value among the outlines of the feature points obtained as a result of linear approximation.
  • the contour line may be recognized as the contour line related to the obstacle.
  • the second target parking position is used for future parking assistance (the target parking frame described later). It is set as the target parking position used for determining the initial display position and assisting when moving backward (described later).
  • the first target parking position calculated based on the detection result of the distance measuring sensor 70 is set as a target parking position used for future parking assistance.
  • the first target parking position used when the above-described start position guidance is performed may be used as it is, or the detection result of the distance measuring sensor 70 that can be further detected during the above-described start position guidance.
  • the first target parking position may be recalculated or corrected. This is particularly the case when parking in a garage before an obstacle on the far side of the parking space is detected by the distance measuring sensor 70 or when only the end of the obstacle on the far side of the parking space is detected. This is because the start position guidance can be executed, so that it is possible to make a subsequent correction based on the information of the obstacles on the back side that can be detected during the execution of the start position guidance (information other than the edges).
  • step 160 it is basically unnecessary to determine whether or not a track can be generated for the first target parking position calculated based on the detection result of the distance measuring sensor 70. This is because the parking start position where the track can be generated is guided based on the detection result of the distance measuring sensor 70 as described above.
  • the second target parking position based on the detection result of the parking frame line is preferentially used even by the first target parking position based on the detection result of the distance measuring sensor 70.
  • the target parking position that matches the parking frame line can be set.
  • the first target parking position based on the detection result of the distance measuring sensor 70 is calculated based on the obstacles on both sides. Therefore, as shown by the dotted line in FIG. 5 (A), the actual parking frame line is biased.
  • the second target parking position based on the detection result of the parking frame line is prioritized. Therefore, even in a situation where power is applied, as shown by the dotted line in FIG.
  • the target parking position can be set at a position that is free from the actual parking frame line.
  • the first target parking position is used when the image recognition of the parking frame line is impossible or when the trajectory cannot be generated for the second target parking position. Parking assistance to the detected parking space despite the start position guidance (support for backward movement) Can prevent the driver from being inconvenienced and can prevent inconvenience to the driver
  • FIG. 6 is a flowchart showing a flow of target parking position calculation processing executed by the target parking position determination unit 44 (and target travel path calculation unit 48).
  • This processing routine is started when the reverse shift switch 50 (and the parking switch 52) is turned on in a situation where the experience flag indicating that the start position guidance has been performed is not set. In other words, this processing routine is performed when a driver who does not receive support for the start position travels to the parking start position and then turns on the reverse shift switch 50 (and parking switch 52) at the parking start position. Will be launched.
  • step 300 it is determined whether a parking space has been detected. Specifically, the detection results (point sequence) of the distance measuring sensor 70 and the detection results of the steering angle sensor 16 and the vehicle speed sensor 18 acquired and stored before the reverse shift switch 50 is turned on are stored from the memory 72. Read out. In this case, the detection result (point sequence) of the distance measuring sensor 70 from the current vehicle position (parking start position) to a predetermined distance before may be read from the memory 72. Next, based on the detection result of the distance measuring sensor 70 read from the memory 72, the obstacle situation before the current vehicle position is grasped (including setting of various flags), and the current vehicle position is determined. It is determined whether there is a parking space where parking is possible.
  • This determination is made according to the parking space detection method described above according to the parking mode. That is, based on the past detection data, it is determined whether or not the parking space valid flag can be set at the current vehicle position. If there is a parking space that can be parked at the current vehicle position, the process proceeds to step 200. Otherwise, the process proceeds to step 310.
  • Step 200 Force The processing from step 260 to step 260 is the same as the processing from step 100 to step 160 in the flowchart shown in FIG.
  • the region of interest is set based on the amount of movement of the vehicle from once stopped. Specifically, based on the detection result of the vehicle speed sensor 18, when it is determined that the vehicle has temporarily stopped in the process of reaching the parking start position (for example, in the case of garage parking, a predetermined amount before reaching the parking start position).
  • the target parking position determination unit 44 first determines whether the stop position is within a predetermined distance relative to the temporary stop position at that time. The position in charge is determined as the target parking position.
  • the method for determining the target parking position based on the temporary stop position is described in detail, for example, in Japanese Unexamined Patent Application Publication No. 2004-345496.
  • the target parking position determination unit 44 changes the deflection angle ⁇ in the process of reaching the parking start position. Based on the mode (learned value), the target parking position is calculated.
  • the target parking position calculated in this way based on the learning value of the stop position or the deflection angle is also referred to as “third target parking position”.
  • step 320 parking frame line image recognition processing is executed.
  • the processing method may be the same as step 110 in the flowchart shown in FIG.
  • step 330 it is determined whether or not the parking frame line has been recognized as a result of the image recognition process of the parking frame line for the image data in the region of interest. If the parking frame line is recognized, the process proceeds to step 330. If the parking frame line is not recognized, the process proceeds to step 360.
  • a target parking position is calculated based on the recognized parking frame line.
  • the target parking position (second target parking position) is calculated so that the vehicle can be evenly placed within the parking frame line during parking.
  • step 350 it is determined whether a trajectory can be generated for the second target parking position.
  • the second target parking position is set as the target parking position used for future parking assistance.
  • step 360 the third target parking position calculated based on the stop position or the learned value of the deflection angle ⁇ is set as a target parking position used for future parking assistance.
  • the third target parking position once based on the learning value of the stop position or the deflection angle ⁇ is also determined based on the first target parking position based on the detection result of the distance measuring sensor 70.
  • the second target parking position based on the detection result of the line with priority for example, a target that conforms to the parking frame line even in the situation where an obstacle vehicle is parked in the adjacent parking frame line.
  • the parking position can be set. Also, if the parking frame image cannot be recognized, or if it is impossible to generate a trajectory for the second target parking position, the first target parking position and the third target parking position are used. The ability to determine the correct target parking position.
  • the stored data is not stored even when the parking switch 52 is not turned on in the process of reaching the parking start position, and therefore the start position guidance is not performed.
  • the parking space and the temporary stop can be recognized afterwards, and the first target parking position and the third target parking position can be determined based on the recognition.
  • the parking assist ECU 12 displays a captured image (actual image) of the back monitor camera 20 on the display 22 provided in the vehicle interior.
  • the target parking frame is superimposed on the captured image on the display 22.
  • the target parking frame may be a figure imitating the actual parking frame line or the outer shape of the vehicle.
  • the target parking frame has a form that can be visually recognized by the user and is used for parking in a garage (parallel parking).
  • Two types of display may be prepared, one for display and one for parallel parking.
  • the direction of the initial display position of the target parking frame displayed on the display 22 is the target parking position (the first target parking position, the second target parking position, the third target parking position set as described above). Any one).
  • the position / orientation of the target parking frame may be determined as it is, for example, by the final switch operation by the user. Alternatively, as shown in FIG. 7, the position of the target parking frame may be adjusted before the confirmation switch operation by a touch switch or the like for moving the target parking frame in the vertical and horizontal directions and rotating it. Good.
  • the target travel trajectory calculation unit 42 guides the vehicle to a position in the real space corresponding to the position of the target parking frame based on the position of the target parking frame on the captured image. Calculate the target turning angle (target steering angle) of the wheels that should be steered at each position on the target travel path.
  • the target travel trajectory calculation unit 42 is preferably used when the target parking frame is initially displayed on the captured image as described above and when the position of the target parking frame is changed by the user as described above. Calculate the trajectory and the target turning angle.
  • the target parking frame is displayed in a red frame.
  • the target parking frame is displayed in a red frame at the initial display of the target parking frame. There is nothing.
  • the target parking position determination unit 44 and the target travel trajectory calculation unit 48 determine the final target parking position based on the determined position of the target parking frame '. And the target movement trajectory is calculated.
  • the parking assist ECU 12 uses the vehicle movement amount calculated from the output signal of the vehicle speed sensor 18 and the steering angle position obtained from the steering angle sensor 16 during automatic guidance control.
  • the position is estimated, a target rudder angle is calculated according to the deviation of the estimated vehicle position from the target travel path, and the target rudder angle is transmitted to the steering control ECU 30.
  • Steering control The ECU 30 controls the motor 32 so as to realize the target steering angle.
  • the motor 32 may be provided in the steering gear box and the steering gear box, and may rotate the steering shaft according to the rotation angle.
  • the target travel trajectory calculation unit 48 estimates and calculates the vehicle position during execution of parking support based on the output signals of the steering angle sensor 16 and the vehicle speed sensor 18, and calculates the target travel trajectory calculated last time.
  • the target traveling trajectory of this time may be calculated according to the difference from the vehicle position, and the target rudder angle at the estimated vehicle position described above may be determined based on the target traveling trajectory.
  • the calculation of the target travel path may be performed every time the vehicle moves by a predetermined movement distance (for example, 0.5 m).
  • the target travel trajectory calculation unit 48 may appropriately correct the target parking position (according to the calculation of the target travel trajectory) based on the parking frame line recognition processing result with respect to the image captured by the back monitor camera 20. .
  • the second target parking position is the most reliable after the start of the reverse movement. Parking assistance will be implemented.
  • the parking assist ECU 12 finally requests the driver to stop the vehicle when the vehicle is settled in the target parking position in the parking space in the target parking direction (or the vehicle is stopped by automatic braking means).
  • the parking assistance control is completed.
  • the vehicle speed sensor 18, the steering angle sensor 16, and the deflection angle calculation unit 41 acquire and derive information related to the vehicle orientation, but instead of or in addition to this, a directional sensor or a gyroscope is used. Sensors, compass, GPS positioning results, etc. may be used.
  • various applications are activated when the parking switch 52 is turned on.
  • the parking switch 52 is turned on. Even if it is not done, it may be activated if the vehicle speed falls below a predetermined value, or if the vehicle position is determined to be in the parking lot from the map data of the navigation device. In this case, a configuration in which the parking switch 52 does not exist is also conceivable.
  • the distance measuring sensor 70 suitable as the obstacle detection means is used, but it is also possible to detect the obstacle by the image recognition of the camera.
  • the obstacle is assumed to be a vehicle, but the obstacle may be any tangible object such as a bicycle, a two-wheeled vehicle, a wall, or two or more pylons. Noh.

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Chemical & Material Sciences (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Electromagnetism (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)

Abstract

 本発明は、障害物検出手段と駐車枠線検出手段とを適切に協働させることで、支援可能な目標駐車位置を適切な優先順位をもって選択的に決定することができる駐車支援装置の提供を目的とする。本発明は、駐車を支援する駐車支援装置において、車両周辺の障害物を検出する障害物検出手段と、地面に描かれた駐車枠線を検出する駐車枠線検出手段とを備え、駐車枠線検出手段により駐車枠線が検出された場合は、検出された駐車枠線に基づいて目標駐車位置を算出することを特徴とする。

Description

明 細 書
駐車支援装置及び駐車支援方法
技術分野
[0001] 本発明は、駐車を支援する駐車支援装置及び駐車支援方法に関する。
背景技術
[0002] 従来から、車両周囲の障害物を検出する周囲障害物検出手段と、操舵角と車速と から車両の 2次元平面上での車両位置及び車体向きを算出する車両運動算出部と 、該車両運動算出部で算出された車両運動と、前記障害物検出手段により得られた 障害物までの相対位置関係とから、駐車可能な空間を見つけ出し目標駐車位置を 決定する目標駐車位置決定部とを有することを特徴とする車両用駐車支援装置が知 られている(例えば、特許文献 1参照)。
特許文献 1 :特開 2003— 54341号公報
発明の開示
発明が解決しょうとする課題
[0003] ところで、実際の駐車においては、運転者は、駐車空間の地面に描かれた駐車枠 線を目標にしながら、駐車枠線内に車両が適切に収まるように駐車を行うのが一般 的である。
[0004] この点、上記の特許文献 1に記載の発明では、駐車空間に隣接する障害物との関 係のみに基づいて、 目標駐車位置を決定するので、例えば、障害物となる車両が隣 の駐車枠線内で偏って駐車されている状況では、それに応じて目標駐車位置が駐 車枠線内の偏った位置に決定されてしまう場合があった。
[0005] 一方、駐車枠線はカメラを用いた画像認識等により認識可能である力 カメラとの位 置関係や夜間等の周囲光の影響、積雪等の影響により駐車枠線が認識できない場 合や、そもそも駐車枠線が存在しないような場合もあるので、かかる場合においても 支援可能な目標駐車位置が決定されることが望ましレ、。
[0006] 更に、駐車枠線が認識できた場合でも、当該駐車枠線内に偏りなく車両が収まる目 標駐車位置に対しては走行軌道の生成が不能となる場合もあるので、かかる場合に ぉレヽても支援可能な目標駐車位置が決定されることが望ましレヽ。
[0007] そこで、本発明は、障害物検出手段と駐車枠線検出手段とを適切に協働させること で、支援可能な目標駐車位置を適切な優先順位をもって選択的に決定することがで きる駐車支援装置及び駐車支援方法の提供を目的とする。
課題を解決するための手段
[0008] 上記目的を達成するため、第 1の発明は、駐車を支援する駐車支援装置において 車両周辺の障害物を検出する障害物検出手段と、
地面に描かれた駐車枠線を検出する駐車枠線検出手段とを備え、
駐車枠線検出手段により駐車枠線が検出された場合は、検出された駐車枠線に基 づいて目標駐車位置を算出することを特徴とする。第 1の発明によれば、駐車枠線検 出手段により駐車枠線が検出された場合は、検出された駐車枠線に基づいて目標 駐車位置が用いられるので、例えば障害物となる車両が隣の駐車枠線内で偏って駐 車されている状況においても、駐車枠線に対して適切な位置に目標駐車位置を設定 すること力 Sできる。
[0009] 第 2の発明は、第 1の発明に係る駐車支援装置において、
駐車枠線検出手段は、車載の撮像手段が撮影する車両周辺の画像を処理して駐 車枠線を検出する手段であり、駐車枠線検出手段による画像の処理範囲は、障害物 検出手段による障害物検出結果に基づいて設定されることを特徴とする。これにより 、障害物検出手段による障害物検出結果を利用することで、画像内の駐車枠線を効 率的に検出することができる。
[0010] 第 3の発明は、第 2の発明に係る駐車支援装置において、
障害物検出手段による障害物検出結果に基づいて駐車空間が検出された場合、 駐車枠線検出手段による画像の処理範囲が、少なくとも該検出された駐車空間内に 設定されることを特徴とする。これにより、駐車空間内の存在しうる駐車枠線を効率的 に検出することができる。
[0011] 第 4の発明は、第 1〜3のいずれかの発明に係る駐車支援装置において、
駐車枠線検出手段により駐車枠線が検出されない場合は、障害物検出手段による 障害物検出結果に基づいて目標駐車位置を算出することを特徴とする。これにより、 夜間等の周囲光の影響や積雪等の影響により駐車枠線が認識できない場合等にお レ、ても、支援可能な目標駐車位置を算出することができる。
[0012] 第 5の発明は、第 1〜4のいずれかの発明に係る駐車支援装置において、
駐車枠線検出手段により駐車枠線が検出され、該駐車枠線に対して支援可能な走 行軌道が生成可能な場合は、該駐車枠線に基づいて目標駐車位置を決定すること を特徴とする。これにより、駐車枠線に基づく目標駐車位置を優先して設定すること で支援不能な目標駐車位置が設定されてしまうことが、防止される。
[0013] 第 6の発明は、第 1〜5のいずれかの発明に係る駐車支援装置において、
障害物検出手段による障害物検出結果に基づいて駐車空間が検出された場合に 、駐車開始位置への車両の走行を支援するための開始位置案内を行う情報出力手 段を備え、
開始位置案内が行なわれた状況下で、駐車枠線検出手段により駐車枠線が検出 されない場合、又は、駐車枠線検出手段により駐車枠線が検出されたにも拘らず該 駐車枠線に対して支援可能な走行軌道が生成不能な場合は、障害物検出手段によ る障害物検出結果に基づいて目標駐車位置を決定することを特徴とする。これにより
、開始位置案内を行ったにも拘らず、検出した駐車空間への駐車支援が行えないと レ、う望ましくない事態が防止され、運転者に不便をもたらすことを防止することができ る。
[0014] 第 7の発明は、駐車を支援する駐車支援方法において、
車両周辺の障害物を検出する障害物検出段階と、
障害物検出段階後、車両が駐車開始位置に至った段階で、地面に描かれた駐車 枠線を検出する駐車枠線検出段階と、
駐車枠線検出段階後、 目標駐車位置を算出する目標駐車位置算出段階とを備え
目標駐車位置算出段階では、駐車枠線検出段階にて駐車枠線が検出された場合 に、検出された駐車枠線に基づいて目標駐車位置が算出されることを特徴とする。
[0015] 第 8の発明は、駐車を支援する駐車支援方法において、 車両周辺の障害物を検出する障害物検出段階と、
障害物検出段階での障害物検出結果に基づいて、障害物に隣接する駐車空間を 検出する駐車空間検出段階と、
駐車空間検出段階にて駐車空間が検出された際に、当該駐車空間を運転者に報 知する情報出力段階と、
情報出力段階後、車両が駐車開始位置に至った段階で、地面に描かれた駐車枠 線を検出する駐車枠線検出段階と、
駐車枠線検出段階にて駐車枠線が検出された場合、該駐車枠線に対して支援可 能な走行軌道が生成不能か否かを判断する判断段階と、
目標駐車位置を算出する目標駐車位置算出段階と、を備え、
目標駐車位置算出段階では、駐車枠線検出段階にて駐車枠線が検出されなレ、場 合、又は、判断段階にて駐車枠線に対して支援可能な走行軌道が生成不能と判断 された場合に、駐車空間検出段階にて検出された駐車空間に基づいて目標駐車位 置が決定されることを特徴とする。
発明の効果
[0016] 本発明によれば、障害物検出手段と駐車枠線検出手段とを適切に協働させること で、支援可能な目標駐車位置を適切な優先順位をもって選択的に決定することがで きる駐車支援装置及び駐車支援方法が得られる。
図面の簡単な説明
[0017] [図 1]本発明による駐車支援装置 10の一実施例を示すシステム構成図である。
[図 2]測距センサ 70の検出対象の物体 (この例では車両 Z)の検出態様を示す説明 図である。
[図 3]本実施例の駐車支援 ECU12の主要機能を示すブロック図である。
[図 4]開始位置案内が行なわれた場合に実行される目標駐車位置算出処理の流れ を示すフローチャートである。
[図 5]駐車枠線に対する偏り度合いを第 1目標駐車位置と第 2目標駐車位置とで比較 して示す平面図である。
[図 6]開始位置案内が行なわれなかった場合に実行される目標駐車位置算出処理 の流れを示すフローチャートである。
園 7]ディスプレイ 22上の目標駐車位置設定用タツチパネルの一例を示す図である。 符号の説明
10 駐車支援装置
12 駐車支援 ECU
16 舵角センサ
18 車速センサ
20 バックモニタカメラ
22 ディスプレイ
30 操舵制御 ECU
41 偏向角演算部
42 駐車空間検出部
44 目標駐車位置決定部
46 駐車開始位置演算部
47 情報出力制御部
48 目標走行軌道演算部
50 リバースシフトスィッチ
52 駐車スィッチ
70 測距センサ
発明を実施するための最良の形態
[0019] 以下、図面を参照して、本発明を実施するための最良の形態の説明を行う。
[0020] 図 1は、本発明による駐車支援装置 10の一実施例を示すシステム構成図である。
図 1に示す如ぐ駐車支援装置 10は、電子制御ユニット 12 (以下、「駐車支援 ECU1 2」と称す)を中心に構成されている。駐車支援 ECU12は、図示しないバスを介して 互いに接続された CPU、 ROM,及び RAM等からなるマイクロコンピュータとして構 成されている。 ROMには、 CPUが実行するプログラムやデータが格納されている。
[0021] 駐車支援 ECU12には、 CAN (Controller Area Network)や高速通信バス等の適 切なバスを介して、ステアリングホイール(図示せず)の舵角を検出する舵角センサ 1 6、及び、車両の速度を検出する車速センサ 18が接続されている。車速センサ 18は 、各輪に配設され、車輪速に応じた周期でパルス信号を発生する車輪速センサであ つてよい。
[0022] 駐車支援 ECU12には、音波(例えば超音波)や電波(例えばミリ波)、光波(例えば レーザー)等を用いて障害物との距離を検出する測距センサ 70が接続されている。 測距センサ 70は、例えばレーザーレーダ、ミリ波レーダ、超音波レーダのほかステレ オビジョンなど距離が検出できるものであればよレ、。測距センサ 70は、車両前部の左 右両側に設定される。
[0023] 測距センサ 70は、図 2に示すように、車幅方向を中心とした所定方向に音波等を発 射し、その反射波を受信することで、車両側方にある障害物との距離を検出する。測 距センサ 70は、例えば車両前部のバンバ付近に搭載され、例えば車両横方向に対 して 17度〜 20度の斜め前方に向けて音波等を発射するものであってよい。測距セン サ 70は、障害物の反射部(音波等の反射点の集合)を点列で出力するものあってよ く、出力データは、出力周期毎にメモリ 72 (例えば EEPROM)に随時記憶されてよい。
[0024] 駐車支援 ECU12には、リバースシフトスィッチ 50及び駐車スィッチ 52が接続され ている。リバースシフトスィッチ 50は、シフトレバーが後退位置(リバース)に操作され た場合にオン信号を出力し、それ以外の場合にオフ状態を維持する。また、駐車スィ ツチ 52は、車室内に設けられ、ユーザによる操作が可能となっている。駐車スィッチ 5 2は、常態でオフ状態に維持されており、ユーザの操作によりオン状態となる。
[0025] 駐車支援 ECU12は、駐車スィッチ 52の出力信号に基づいてユーザが駐車支援を 必要としているか否かを判別する。即ち、車両の走行中に駐車スィッチ 52がオンにさ れると、駐車支援 ECU12は、駐車空間内の目標駐車位置までの車両走行を支援す るための駐車支援制御を可及的速やかに開始する。駐車支援制御は、例えば目標 駐車位置への走行時における操舵制御などの車両制御のみならず、例えば駐車開 始位置まで車両を案内する案内メッセージの出力のような運転者への情報出力を含 む。
[0026] 図 3は、本実施例の駐車支援 ECU12の主要機能を示すブロック図である。駐車支 援 ECU12は、偏向角演算部 41と、駐車空間検出部 42と、 目標駐車位置決定部 44 と、駐車開始位置演算部 46と、情報出力制御部 47と、 目標走行軌道演算部 48とを 含む。以下、各部の構成'機能を説明する。
[0027] 偏向角演算部 41は、舵角センサ 16及び車速センサ 18 (図 1参照)の各出力信号 が所定周期毎に入力される。偏向角演算部 41は、舵角センサ 16及び車速センサ 18 の各出力信号に基づいて、所定区間における車両の向きの変化量 (以下、この変化 量を「偏向角ひ」という)を演算する。所定区間は、例えば、現在の車両位置から手前 所定距離 (例えば 7m)の区間である。尚、偏向角ひは、時計回り方向を正とし、反時 計回り方向を負として定義される。ここで、偏向角ひは、一般的に、車両の微小移動 距離を dsとし、 yを路面曲率(車両の旋回半径 Rの逆数に相当)とすると、数 1の式に より算出することができる。この数 1の式は、 j3 m (本例では /3 = 7)手前の位置から現 地点に至るまでの車両の向きの変化として、偏向角ひを求めるものである。
[0028] [数 1]
Figure imgf000009_0001
本実施例の駐車支援 ECU12は、数 1の式を変形した以下の数 2の式に基づいて、 所定の移動距離 (本例では、 0. 5m)毎の微小偏向角 αを算出すると共に、算出し た各微小偏向角 α を総和して偏向角 αを算出する。
l〜k
[数 2]
Figure imgf000009_0002
この際、所定の移動距離 (本例では、 0. 5m)は、車速センサ 18の出力信号(車輪 速パルス)を時間積分することによって監視される。また、路面曲率 γは、舵角センサ 16から得られる舵角 Haに基づいて決定され、例えば γ =Ha/L- ηにより演算され る(Lはホイールベース長、 ηは車両のオーバーオールギア比(車輪の転舵角に対 する舵角 Haの比)である)。尚、微小偏向角 αは、微小移動距離 0. 01m毎に得ら れる路面曲率 γに当該微小移動距離 0. 01を乗算し、これらの乗算値を移動距離 0 . 5m分積算することによって算出されてもよい。尚、路面曲率 γと舵角 Haとの関係 は、予め車両毎に取得された相関データに基づいて作成されたマップとして、駐車 支援 ECU12の ROMに格納されてレ、てよレ、。
[0030] 尚、車速センサ 18及び舵角センサ 16の検出結果 (若しくはそれに基づく微小偏向 角ひのデータ)は、測距センサ 70の検出結果と同様、駐車スィッチ 52がオンにされ ていない状況下においても記憶されていることが望ましい。これにより、駐車スィッチ
52力 Sオンにされると、その時点の車両位置から手前 7mの区間における偏向角ひを 演算することができるので、駐車スィッチ 52がオンにされると同時に情報出力条件の 判断が可能となる。この場合、 FIFO方式にて、現在の車両位置から 7m[m]手前の 区間でのセンサ出力のみをメモリ 72に記憶することとしてもよレ、。これにより、メモリ 72 の容量を効率的に利用することができる。
[0031] 駐車空間検出部 42は、測距センサ 70の検出結果(点歹 lj)に基づいて、車両側方に 存在しうる駐車空間を検出する。駐車空間検出部 42は、左右の測距センサ 70による 検出結果に基づいて、車両左右側方に存在しうる駐車空間を、左右で独立且つ並 列的に検出する。左右のそれぞれの検出方法は同一であってよいので、以下では、 特に明示しない限り、一方側の検出方法について説明する。
[0032] 測距センサ 70の検出結果(点列)に基づく駐車空間の検出方法は、任意の適切な 方法であってよい。駐車空間の検出方法は、車庫入れ駐車と縦列駐車とで異なるも のであってよい。以下では、先ず、車庫入れ駐車の場合における駐車空間の検出方 法の一例について説明し、次いで、縦列駐車の場合における駐車空間の検出方法 の一例について説明する。尚、駐車スィッチ 52に対する操作は、車庫入れ駐車及び 縦列駐車のいずれかの指定を含んでよぐこの場合、駐車支援 ECU12は、指定され た駐車形態に応じた駐車モード(車庫入れモード又は縦列モード)で動作する。
[0033] [車庫入れ駐車用駐車空間検出方法]
駐車空間検出部 42は、所定長さ(>lm)の長さの点列が検出され、且つ、その後所 定長さ LI以上点列が存在しなくなった段階で、所定長さの点列に係る障害物の奥 側に、駐車空間が存在すると判断して、駐車空間有効フラグを設定する。所定長さ L 1は、車庫入れ駐車用の駐車空間として必要な最小開口幅であり、 自車の車幅等に 依存して決定されるべき値である(本例では L1 = 2. 5mとする)。
[0034] 駐車空間検出部 42は、更に、検出した駐車空間の向きを検出してもよい。例えば、 駐車空間検出部 42は、駐車空間周辺を通過する際の車両の向き(例えば上述の偏 向角ひ)に基づいて、駐車空間の向きを推定してもよい。或いは、駐車空間検出部 4 2は、測距センサ 70の出力する点列データに対して直線又は曲線近似等を行って 障害物の向きを把握し、当該把握した障害物の向きを利用して、駐車空間の向きを 検出してもよい。
[0035] [縦列駐車用駐車空間検出方法]
駐車空間検出部 42は、所定長さ L2の以上点列が存在せず、且つ、その後例えば 2. Om以上点列が検出された段階で、点列に係る障害物の手前側に駐車空間が存 在すると判断して、駐車空間有効フラグを設定する。所定長さ L2は、縦列駐車用の 駐車空間として必要な最小開口幅であり、 自車の全長等に依存して決定されるべき 値である(本例では L2 = 6mとする)。また、駐車空間検出部 42は、所定長さ(>2. 0 m)の長さの点列が検出され、且つ、その後所定長さ L2以上点列が存在しなくなった 段階で、点列に係る障害物の奥側に、駐車空間が存在すると判断して、駐車空間有 効フラグを設定する。
[0036] 駐車空間検出部 42は、更に、検出した駐車空間の向きを検出してもよい。例えば、 駐車空間検出部 42は、駐車空間周辺を通過する際の車両の向きに基づいて、駐車 空間の向きを推定してもよい。或いは、駐車空間検出部 42は、測距センサ 70の出力 する点列データに対して直線又は曲線近似等を行って障害物の向きを把握し、当該 把握した障害物の向きを利用して、駐車空間の向きを検出してもよい。
[0037] 尚、測距センサ 70の検出結果は、駐車スィッチ 52がオンにされていない状況下に おいても記憶されていることが望ましい。これにより、駐車スィッチ 52がオンにされると 、その時点の車両位置から手前の区間における測距センサ 70の検出結果に基づい て、現在の車両位置よりも手前における駐車空間の検出が可能となる。この場合、 FI FO方式にて、現在の車両位置から所定距離手前の区間でのセンサ出力のみをメモ リ 72に記憶することとしてもよい。これにより、メモリ 72の容量を効率的に利用すること ができる。
[0038] 目標駐車位置決定部 44は、上述の如く駐車空間有効フラグが設定されると、上述 の駐車空間の検出結果に基づいて、検出した駐車空間内における目標駐車位置を 決定する。例えば、 目標駐車位置決定部 44は、駐車空間に隣接する障害物の端点 (点列データに基づいて検出)に基づいて、 目標駐車位置 (例えば駐車空間の中心 線上の車両後軸中心の位置)を決定してよい。 目標駐車位置は、駐車空間における 目標駐車方向(駐車空間内で如何なる向きで車両を駐車させるか)を含む概念であ つてよレ、。 目標駐車方向は、上述の如く測距センサ 70の検出結果に基づいて推定さ れた駐車空間の向きに基づいて、決定されてよい。
[0039] 駐車開始位置演算部 46は、上述の如く駐車空間有効フラグが設定されると、駐車 空間への支援が可能な駐車開始位置 (駐車空間内の目標駐車位置への軌道生成 可能な駐車開始位置)を演算する。例えば、駐車開始位置演算部 46は、車両の最 大旋回曲率等を考慮して、 目標駐車位置決定部 44により決定された目標駐車位置 ( 及び目標駐車方向、以下同じ)での駐車が可能な駐車開始位置を決定する。尚、測 距センサ 70の検出結果に基づいて決定される目標駐車位置 (駐車開始時の車両の 方向を含む。)は、後述する如ぐ後に変更されうる目標駐車位置であり、従って、駐 車開始位置は、車両の最大旋回曲率等を近似的に用いて演算されるものであってよ レ、。また、同様の観点から、駐車空間への支援が可能な駐車開始位置は、一点では なく範囲を有するものであるため、駐車開始位置演算部 46にて決定される駐車開始 位置は、許容される位置範囲で規定されるものであってもよい。
[0040] 情報出力制御部 47は、上述の如く駐車空間有効フラグが設定されると、ボーンとい う音声をスピーカー 24 (図 1参照)を介して出力すると共に、駐車開始位置へと車両 を案内するための操舵指示を、スピーカー 24及び/又はディスプレイ 22 (図 1参照) を介して行う。これにより、運転者は、駐車空間に適した駐車開始位置に到達するた めのハンドル操作開始タイミングを理解することができる。
[0041] 情報出力制御部 47は、操舵指示出力後、例えば舵角センサ 16の出力信号に基 づいて、当該操舵指示に応じた運転者のハンドル操作が行われたか否かを判断し、 当該ハンドル操作が行われたと判断した場合には、以下説明する開始位置案内を開 始する。尚、上述の如く報知した駐車空間が、運転者の意図に反するものである場 合には、運転者は、 自身の所望する駐車空間が見つかるまで駐車場内を継続して走 行することになるだろう。この場合、操舵指示に応じたハンドル操作が行われなかつ たと判断されることになり、次に検出される駐車空間に対して駐車空間有効フラグが 設定された際に、同様の操舵指示が出力されることになる。
[0042] 開始位置案内実行中、情報出力制御部 47は、偏向角演算部 41により常時演算さ れる偏向角ひに基づいて車両の走行パターン (位置及び向きの変化履歴)を把握し つつ、駐車開始位置演算部 46により決定された駐車開始位置へと車両を案内する ための各種案内を行う。
[0043] 例えば、情報出力制御部 47は、車両の現在の位置 (及び向き)と駐車開始位置と の対応関係に基づいて、適宜、「もう少し駐車空間の近くから開始してください」、「も う少し駐車空間から離れて開始してください」、又は、「もう少し車両の傾きを大きくし て開始してください」といった趣旨のメッセージを、スピーカー 24及び/又はディスプ レイ 22を介して行う。この開始位置案内により、運転者は、駐車空間に適した駐車開 始位置へと車両を移動させることが容易となる。
[0044] また、情報出力制御部 47は、駐車開始位置まで車両が至ると、車両の停止を促す 音声メッセージ (例えば、「停止してハンドルを元に戻してください」)を、スピーカー 2 4及び/又はディスプレイ 22を介して出力してもよい。或いは、情報出力制御部 47 は、図示しない操舵手段を介して、駐車開始位置へと車両を導くための自動介入操 舵を実行してもよぐ及び/又は、駐車開始位置まで車両が至った際に、図示しない 制動手段を介して自動介入制動を実行してもよレ、。
[0045] また、情報出力制御部 47は、駐車開始位置にて車両が停止すると、「シフトレバー を Rに入れると、後退時の支援を開始できます」といった趣旨のメッセージを、スピー カー 24及び/又はディスプレイ 22を介して出力してもよい。これにより、運転者は、 駐車支援装置 10が支援可能な状態にあることを知ることができる。
[0046] 情報出力制御部 47は、上述のような開始位置案内を実行した場合には、その旨を 表す経験フラグを設定する。この経験フラグは、現在どの駐車空間に対する駐車開 始案内を行っているか示す。従って、経験フラグは、一旦設定されると、開始位置案 内を行った駐車空間に対して車両位置が大きく逸脱するまでクリアされない。経験フ ラグがクリアされると、駐車スィッチ 52がオンにされている限り、再び、新たな駐車空 間の検出処理 (それに伴う報知、操舵指示等の情報出力処理)が起動されることにな る。
[0047] 目標駐車位置決定部 44は、駐車開始位置でリバースシフトスィッチ 50がオンにな ると、 目標駐車位置算出処理を行う。この駐車開始位置にて目標駐車位置決定部 4 4により実行される目標駐車位置算出処理は、上述の測距センサ 70の検出結果に 基づいて実行される目標駐車位置算出処理とは異なり、バックモニタカメラ 20 (図 1 参照)の撮像画像 (実画像)に基づくものである。即ち、本実施例の目標駐車位置決 定部 44は、測距センサ 70の検出結果に基づいて目標駐車位置を算出する処理と、 バックモニタカメラ 20の撮像画像に基づいて目標駐車位置を算出する処理とを含む 、 2つ以上の異なる態様で目標駐車位置算出処理を行う。以下では、これらの区別 のための便宜上、測距センサ 70の検出結果に基づいて算出される目標駐車位置を 、「第 1目標駐車位置」ともいい、バックモニタカメラ 20の撮像画像に基づいて算出さ れる目標駐車位置を、「第 2目標駐車位置」ともいう。
[0048] バックモニタカメラ 20は、車両後方の所定角度領域における風景を撮影するように 、車両後部に搭載される。バックモニタカメラ 20は、 CCDや CMOS等を撮像素子に 備えるカメラであってよい。
[0049] 図 4は、駐車開始位置にて目標駐車位置決定部 44 (及び目標走行軌道演算部 48 )により実行される目標駐車位置算出処理の流れを示すフローチャートである。本処 理ルーチンは、駐車開始位置でリバースシフトスィッチ 50がオンになり、且つ、経験 フラグが設定されている場合 (fiPち開始位置案内を行った駐車開始位置に車両が位 置する場合)に起動される。
[0050] ステップ 100では、先ず、測距センサ 70の検出結果に基づいて、関心領域 (R〇I : r egion of interest)が設定される。関心領域は、画像内に存在しうる駐車枠線を検出 するための領域であり、実際の駐車枠線の画像内の大きさに対応した所定の大きさ の領域であってよい。例えば、関心領域は、第 1目標駐車位置を基準とした所定領 域内に設定される。これにより、画像認識処理負担を軽減しつつ、画像内の駐車枠 線を高レ、精度で認識することが可能となる。
[0051] ステップ 110では、駐車枠線の画像認識処理が関心領域内の画像データに対して 実行される。駐車枠線の画像認識処理は、多様であり、如何なる適切な方法が用い られてもよい。
[0052] ここで、駐車枠線の画像認識処理の一例を説明する。本例では、まず、関心領域 内の特徴点が抽出される。特徴点は、所定の閾値を超える輝度変化点として抽出さ れる(即ち、画像の中で明るさに急激な変化のある輪郭 (エッジ)が抽出される。)。次 いで、歪曲補正により、各画素のカメラ座標系から実座標系への変換がなされる。次 いで、輪郭(特徴点の点歹 IJ)に対して直線当てはめ(直線近似)がなされ、特徴点の 輪郭線が導出される。次いで、 2つの互いに平行なペアの輪郭線力 駐車枠線 (典 型的には、白線)として検出される。
[0053] ステップ 120では、上記ステップ 110における駐車枠線の画像認識が成功したか否 力が判断される。上記ステップ 110における駐車枠線の画像認識が成功した場合( 上記の例では、 2つの互いに平行なペアの輪郭線が検出された場合)には、ステップ 130に進む。
[0054] ここで、駐車枠線の画像認識が失敗に終わる場合とは、バックモニタカメラ 20の視 野と実際の駐車枠線の位置関係の影響や、夜間や地下駐車場等での周囲光の影 響 (エッジ抽出への影響)、積雪等の影響により駐車枠線が認識できない場合や、そ もそも駐車枠線が存在しないような場合が想定される。駐車枠線の画像認識が失敗 に終わった場合には、ステップ 160に進む。尚、この際、 R〇Iを微調整して再度画像 認識処理を実行してもよい。この場合も、最終的に駐車枠線の画像認識が失敗に終 わった場合には、ステップ 160に進む。
[0055] ステップ 130では、画像認識された駐車枠線に基づいて、 目標駐車位置が算出さ れる。この場合、駐車時に車両が駐車枠線内に偏りなく収まるような目標駐車位置( 第 2目標駐車位置)が算出される。ここでも、第 2目標駐車位置は、 目標駐車方向(駐 車空間内で如何なる向きで車両を駐車させるか)を含む概念であってよい。 目標駐 車方向は、画像認識された駐車枠線に略平行な方向に決定されてよい。
[0056] ステップ 140では、第 2目標駐車位置(目標駐車方向を含む、以下同じ)に対して 軌道生成可能か否かが判断される。この処理は、 目標走行軌道演算部 48と協働し て実行される。 目標走行軌道演算部 48は、車両の現在の位置と第 2目標駐車位置と の関係や、車両の旋回特性等に基づいて、第 2目標駐車位置に車両を導くための目 標走行軌道 (例えば後軸中心軌跡)を演算する。尚、この段階の目標走行軌道の生 成には、後で目標走行軌道の修正を行う余裕を残しておく為、車両の最大旋回曲率 よりもある程度小さい旋回曲率 (例えば、最大旋回曲率の 90%までの旋回曲率)が 用いられてもよい。
[0057] 本ステップ 140において、 目標走行軌道演算部 48により目標走行軌道が生成され た場合、ステップ 150に進み、一方、軌道生成不能な場合、即ち、 目標走行軌道演 算部 48により目標走行軌道が生成されない場合は、ステップ 160に進む。ここで、軌 道生成不能な場合は、例えば第 1目標駐車位置と第 2目標駐車位置との差異が大き ぐ現在の駐車開始位置が第 2目標駐車位置に対しては不適切となる場合が想定さ れる。これは、上述の如ぐ開始位置案内は、第 1目標駐車位置に基づき演算された 駐車開始位置に基づいて実行されているため生じうる。
[0058] 尚、代替的な実施例として、軌道生成不能な場合には、駐車枠線内に車両が収ま る範囲内で、算出した第 2目標駐車位置を、軌道生成可能となるように補正してもよ レ、。或いは、必要に応じて、駐車枠線外であっても、隣接する障害物との関係で接触 が生じないと判断できる限り、算出した第 2目標駐車位置を、軌道生成可能となるよう に補正してもよい。この場合、隣接する障害物に関する情報は、駐車枠線の抽出に 用いた画像認識結果が用いられる。障害物の画像認識方法は、任意であってよいが 、例えば、関心領域を大きめに設定し、直線近似の結果得られる特徴点の輪郭線の うち、駐車枠線に対する平行度合いが所定値以上の輪郭線が、障害物に係る輪郭 線として認識されてよい。この代替的な実施例においては、軌道生成可能となるよう に第 2目標駐車位置が補正できた場合には、ステップ 150に進み、それ以外の場合 は、ステップ 160に進む。
[0059] ステップ 150では、第 2目標駐車位置が、今後の駐車支援(後述の目標駐車枠の 初期表示位置決定や、後述の後退移動時の支援)に用いる目標駐車位置として設 定される。
[0060] ステップ 160では、測距センサ 70の検出結果に基づいて算出される第 1目標駐車 位置が、今後の駐車支援に用いる目標駐車位置として設定される。尚、ここでは、上 述の開始位置案内を行った際に利用した第 1目標駐車位置がそのまま利用されても よいし、上述の開始位置案内中に更に検出されうる測距センサ 70の検出結果に基 づいて、第 1目標駐車位置を再演算ないし補正してもよい。これは、特に車庫入れ駐 車の場合、駐車空間の奥側の障害物が測距センサ 70により検出される以前、又は、 駐車空間の奥側の障害物の端部のみが検出された際に、開始位置案内が実行され うるため、開始位置案内実行中に検出されうる奥側の障害物の情報 (端部以外の情 報)による事後的な補正が可能となるためである。
[0061] 尚、本ステップ 160において、測距センサ 70の検出結果に基づいて算出される第 1 目標駐車位置に対して、軌道生成可能か否かの判断は基本的に不要である。これ は、上述の如ぐ測距センサ 70の検出結果に基づいて、軌道生成可能な駐車開始 位置が案内されてレ、るからである。
[0062] このように本実施例によれば、測距センサ 70の検出結果に基づく第 1目標駐車位 置によりも、駐車枠線の検出結果に基づく第 2目標駐車位置を優先して用いることで 、例えば障害物となる車両が隣の駐車枠線内で偏つて駐車されてレ、る状況において も、駐車枠線に適合した目標駐車位置を設定することができる。即ち、障害物となる 車両が隣の駐車枠線内で偏って駐車されている状況においては、測距センサ 70の 検出結果に基づく第 1目標駐車位置は、両隣の障害物を基準に算出されるが故に、 図 5 (A)にて点線で示すように、実際の駐車枠線に対して偏ってしまう。これに対して 、本実施例によれば、駐車枠線の検出結果に基づく第 2目標駐車位置が優先される ので、力かる状況においても、図 5 (B)にて点線で示すように、実際の駐車枠線に対 して偏りの無い位置に目標駐車位置を設定することができる。
[0063] また、本実施例によれば、駐車枠線の画像認識が不能な場合や、第 2目標駐車位 置に対する軌道生成不能な場合には、第 1目標駐車位置が用レ、られるので、開始位 置案内を行ったにも拘らず、検出した駐車空間への駐車支援 (後退移動時の支援) が行えなくなる事態が防止され、運転者に不便をもたらすことを防止することができる
[0064] 図 6は、 目標駐車位置決定部 44 (及び目標走行軌道演算部 48)により実行される 目標駐車位置算出処理の流れを示すフローチャートである。本処理ルーチンは、開 始位置案内を行ったことを表す経験フラグが設定されていない状況下で、リバースシ フトスィッチ 50 (及び駐車スィッチ 52)がオンになった場合に、起動される。即ち、本 処理ルーチンは、開始位置案内の支援を受けることなぐ運転者が自ら駐車開始位 置まで走行した後、駐車開始位置にてリバースシフトスィッチ 50 (及び駐車スィッチ 5 2)をオンにした場合に起動される。
[0065] ステップ 300では、駐車空間が検出済みであるか否かが判断される。具体的には、 リバースシフトスィッチ 50がオンにされる以前に取得'記憶された測距センサ 70の検 出結果(点列)、舵角センサ 16及び車速センサ 18の各検出結果がメモリ 72から読み 出される。この場合、現在の車両位置 (駐車開始位置)から所定距離前までの測距セ ンサ 70の検出結果(点列)がメモリ 72から読み出されてよい。次いで、メモリ 72から読 み出された測距センサ 70の検出結果に基づいて、現在の車両位置よりも手前にお ける障害物状況を把握し (各種フラグの設定を含む)、現在の車両位置において、駐 車可能な駐車空間が存在するか否かを判断する。この判断は、駐車モードに応じて 上述の駐車空間検出方法に従って行われる。即ち、過去の検出データに基づいて、 現在の車両位置で駐車空間有効フラグが設定可能であるか否かが判断される。現 在の車両位置において、駐車可能な駐車空間が存在する場合には、ステップ 200に 進み、そうでない場合は、ステップ 310に進む。
[0066] ステップ 200力 ステップ 260までの処理は、図 4に示したフローチャートのステップ 100からステップ 160までの処理と同様であってよぐ説明を省略する。
[0067] ステップ 310では、一旦停止からの車両の移動量に基づいて、関心領域が設定さ れる。具体的には、車速センサ 18の検出結果に基づいて、駐車開始位置に至る過 程で一旦停止があつたと判断された場合 (例えば、車庫入れ駐車の場合、駐車開始 位置に至る前の所定の移動距離 6. 5m内に一旦停止があつたと判断された場合)は 、先ず、 目標駐車位置決定部 44は、その際の一旦停止位置に対して所定の相対関 係にある位置を目標駐車位置として決定する。尚、この一旦停止位置に基づく目標 駐車位置の決定方法は、例えば特開 2004— 345496号公報に詳細が記載されて いる。車速センサ 18の検出結果に基づいて、駐車開始位置に至る過程でー且停止 力あつたと判断された場合には、 目標駐車位置決定部 44は、駐車開始位置に至る 過程における偏向角 αの変化態様 (学習値)に基づいて、 目標駐車位置を演算する 。以下、このようにして、一旦停止位置又は偏向角ひの学習値に基づいて算出され る目標駐車位置を、「第 3目標駐車位置」ともいう。
[0068] ステップ 320では、駐車枠線の画像認識処理が実行される。処理方法は、図 4に示 したフローチャートのステップ 110の処理と同様であってよレ、。
[0069] ステップ 330では、関心領域内の画像データに対する駐車枠線の画像認識処理の 結果、駐車枠線が認識されたか否かが判断される。駐車枠線が認識された場合には 、ステップ 330に進み、駐車枠線が認識されない場合には、ステップ 360に進む。
[0070] ステップ 340では、画像認識された駐車枠線に基づいて、 目標駐車位置が算出さ れる。この場合、駐車時に車両が駐車枠線内に偏りなく収まるような目標駐車位置( 第 2目標駐車位置)が算出される。
[0071] ステップ 350では、第 2目標駐車位置に対して軌道生成可能か否かが判断される。
第 2目標駐車位置に対して軌道生成可能な場合、ステップ 250にて、第 2目標駐車 位置が、今後の駐車支援に用いる目標駐車位置として設定される。
[0072] ステップ 360では、一旦停止位置又は偏向角 αの学習値に基づいて算出される第 3目標駐車位置が、今後の駐車支援に用いる目標駐車位置として設定される。
[0073] このように本実施例によれば、一旦停止位置又は偏向角 αの学習値に基づく第 3 目標駐車位置ゃ測距センサ 70の検出結果に基づく第 1目標駐車位置によりも、駐車 枠線の検出結果に基づく第 2目標駐車位置を優先して用いることで、例えば障害物 となる車両が隣の駐車枠線内で偏って駐車されている状況においても、駐車枠線に 適合した目標駐車位置を設定することができる。また、駐車枠線の画像認識が不能 な場合や、第 2目標駐車位置に対する軌道生成不能な場合には、第 1目標駐車位 置や第 3目標駐車位置が用いられるので、状況に応じて適切な目標駐車位置を決 定すること力 Sできる。 [0074] また、本実施例によれば、駐車開始位置に至る過程において駐車スィッチ 52がォ ンにされることがなくそれ故に開始位置案内を行っていない場合でも、過去の記憶デ ータを読み出すことで、駐車空間や一旦停止を事後的に認識し、それに基づいて第 1目標駐車位置や第 3目標駐車位置を決定することができる。
[0075] 次に、図 7及び図 1を参照しつつ、駐車開始位置から駐車空間までの後退時の駐 車支援について概説する。
[0076] 駐車開始位置において、リバースシフトスィッチ 50がオンになると、駐車支援 ECU 12は、車室内に設けられたディスプレイ 22上に、バックモニタカメラ 20の撮像画像( 実画像)を表示させる。このとき、ディスプレイ 22上には、図 7 (車庫入れ駐車用の画 面)に示すように、撮像画像上に目標駐車枠が重畳表示される。 目標駐車枠は、実 際の駐車枠線や車両の外形を模した図形であってよぐ例えば、その位置及び向き がユーザにより視認可能である形態を有し、車庫入れ駐車 (並列駐車)用の表示と縦 列駐車用の表示の 2種類が用意されてよい。
[0077] ディスプレイ 22上に表示される目標駐車枠の初期表示位置'向きは、上述の如く設 定された目標駐車位置 (第 1目標駐車位置、第 2目標駐車位置、第 3目標駐車位置 の何れか)に対応する。この目標駐車枠の位置 ·向きは、そのまま、ユーザによる最 終的な確定スィッチの操作等により確定されてよい。或いは、 目標駐車枠の位置等 は、図 7に示すように、 目標駐車枠を上下左右方向の並進移動及び回転移動させる ためのタツチスィッチ等により、確定スィッチの操作前に調整が可能とされてもよい。
[0078] この際、 目標走行軌道演算部 42は、撮像画像上の目標駐車枠の位置に基づいて 、当該目標駐車枠の位置に対応する実空間内の位置に車両を導くための目標走行 軌道 (例えば後軸中心軌跡)を演算すると共に、 目標走行軌道上の各位置で転舵さ れるべき車輪の目標転舵角(目標舵角)を演算する。 目標走行軌道演算部 42は、好 ましくは、上述の如く撮像画像上に目標駐車枠を初期表示する際、及び、上述の如 く目標駐車枠の位置がユーザにより変更される際、 目標走行軌道及び目標転舵角を 演算する。この際、 目標駐車枠が駐車案内不能な位置 (即ち、適切な目標走行軌道 及び目標転舵角を演算できなレ、位置)にある場合には、 目標駐車枠が赤枠表示にさ れてよい(或いは上述の確定スィッチが無効化されてよい)。尚、本実施例において は、図 4及び図 6に関連して上述したように、軌道生成可能な目標駐車位置が設定さ れるので、 目標駐車枠の初期表示の際に当該目標駐車枠が赤枠表示になってしまう ことは無い。
[0079] 目標駐車枠の位置等が確定されると、 目標駐車位置決定部 44及び目標走行軌道 演算部 48は、確定された目標駐車枠の位置'向きに基づいて最終的な目標駐車位 置を決定し、それに対する目標移動軌跡を演算する。車両の後退移動が開始される と、駐車支援 ECU12は、 自動誘導制御中、車速センサ 18の出力信号から演算した 車両移動量と舵角センサ 16から得られる舵角位置を用いて自車の車両位置を推定 し、推定した車両位置の目標走行軌道からの偏差に応じた目標舵角を演算し、当該 目標舵角を操舵制御 ECU30に送信する。操舵制御 ECU30は、当該目標舵角を実 現するようにモータ 32を制御する。尚、モータ 32は、ステアリングコラムゃステアリン グギアボックスに設けられ、その回転角によりステアリングシャフトを回転させるもので あってよい。
[0080] 尚、 目標走行軌道演算部 48は、舵角センサ 16及び車速センサ 18の出力信号に 基づいて、駐車支援実行中における車両位置を推定演算し、前回演算した目標走 行軌道と、推定した車両位置との差に応じて、今回の目標走行軌道を演算し、当該 目標走行軌道に基づレ、て上述の推定車両位置における目標舵角を決定してもよレ、 。この目標走行軌道の演算は、車両が所定移動距離 (例えば、 0. 5m)だけ移動する 毎に実施されてよい。この際、 目標走行軌道演算部 48は、バックモニタカメラ 20の撮 像画像に対する駐車枠線認識処理結果に基づいて、適宜、 目標駐車位置を補正( それに伴い目標走行軌道の演算)してもよい。この場合、後退移動開始前に第 1目 標駐車位置及び第 3目標駐車位置の何れが選択された場合であっても、後退移動 開始後には最も信頼性の高い第 2目標駐車位置に基づいて駐車支援が実行される ことになる。
[0081] 駐車支援 ECU12は、最終的に車両が駐車空間内の目標駐車位置に目標駐車方 向で収まった際に、運転者に車両の停止を要求し (若しくは、 自動制動手段により車 両を自動的に停止させ)、駐車支援制御が完了する。
[0082] 以上、本発明の好ましい実施例について詳説した力 S、本発明は、上述した実施例 に制限されることはなぐ本発明の範囲を逸脱することなぐ上述した実施例に種々の 変形及び置換をカ卩えることができる。
[0083] 例えば、上述の実施例では、車速センサ 18、舵角センサ 16及び偏向角演算部 41 により、車両の向きに関する情報を取得 *導出しているが、それに代えて又は加えて ョーレートセンサやジャイロセンサ、方位計、 GPS測位結果等を用いてもよい。
[0084] また、上述の実施例では、駐車スィッチ 52がオンにされた場合に各種アプリケーシ ヨンが起動されているが、本発明はこれに限定されることは無ぐ例えば駐車スィッチ 52がオンにされていない場合でも、車速が所定値以下となった場合、ナビゲーシヨン 装置の地図データから車両位置が駐車場内にあると判断された場合等に起動されて もよレ、。この場合、駐車スィッチ 52が存在しない構成も考えられる。
[0085] また、上述の実施例では、障害物検出手段として好適な測距センサ 70を用いてい るが、カメラの画像認識により障害物を検出することも可能である。
[0086] また、上述の実施例では、説明の都合上、障害物は車両を想定しているが、障害 物としては、 自転車、二輪車、壁、 2つ以上のパイロン等のあらゆる有体物が想定可 能である。
[0087] 尚、本国際出願は、 2006年 4月 25日に出願した日本国特許出願 2006— 12097 5号に基づく優先権を主張するものであり、その全内容は本国際出願にここでの参照 により援用されるものとする。

Claims

請求の範囲
[1] 駐車を支援する駐車支援装置において、
車両周辺の障害物を検出する障害物検出手段と、
地面に描かれた駐車枠線を検出する駐車枠線検出手段とを備え、
駐車枠線検出手段により駐車枠線が検出された場合は、検出された駐車枠線に基 づいて目標駐車位置を算出することを特徴とする、駐車支援装置。
[2] 駐車枠線検出手段は、車載の撮像手段が撮影する車両周辺の画像を処理して駐 車枠線を検出する手段であり、駐車枠線検出手段による画像の処理範囲は、障害物 検出手段による障害物検出結果に基づいて設定される、請求項 1に記載の駐車支 援装置。
[3] 障害物検出手段による障害物検出結果に基づいて駐車空間が検出された場合、 駐車枠線検出手段による画像の処理範囲が、少なくとも該検出された駐車空間内に 設定される、請求項 2に記載の駐車支援装置。
[4] 駐車枠線検出手段により駐車枠線が検出されない場合は、障害物検出手段による 障害物検出結果に基づいて目標駐車位置を算出する、請求項 1〜3のいずれかに 記載の駐車支援装置。
[5] 駐車枠線検出手段により駐車枠線が検出され、該駐車枠線に対して支援可能な走 行軌道が生成可能な場合は、該駐車枠線に基づいて目標駐車位置を決定する、請 求項:!〜 4のいずれかに記載の駐車支援装置。
[6] 障害物検出手段による障害物検出結果に基づいて駐車空間が検出された場合に
、駐車開始位置への車両の走行を支援するための開始位置案内を行う情報出力手 段を備え、
開始位置案内が行なわれた状況下で、駐車枠線検出手段により駐車枠線が検出 されない場合、又は、駐車枠線検出手段により駐車枠線が検出されたにも拘らず該 駐車枠線に対して支援可能な走行軌道が生成不能な場合は、障害物検出手段によ る障害物検出結果に基づいて目標駐車位置を決定する、請求項 1〜5のいずれかに 記載の駐車支援装置。
[7] 駐車を支援する駐車支援方法において、 車両周辺の障害物を検出する障害物検出段階と、
障害物検出段階後、車両が駐車開始位置に至った段階で、地面に描かれた駐車 枠線を検出する駐車枠線検出段階と、
駐車枠線検出段階後、 目標駐車位置を算出する目標駐車位置算出段階とを備え 目標駐車位置算出段階では、駐車枠線検出段階にて駐車枠線が検出された場合 に、検出された駐車枠線に基づいて目標駐車位置が算出されることを特徴とする、 駐車支援方法。
駐車を支援する駐車支援方法において、
車両周辺の障害物を検出する障害物検出段階と、
障害物検出段階での障害物検出結果に基づいて、障害物に隣接する駐車空間を 検出する駐車空間検出段階と、
駐車空間検出段階にて駐車空間が検出された際に、当該駐車空間を運転者に報 知する情報出力段階と、
情報出力段階後、車両が駐車開始位置に至った段階で、地面に描かれた駐車枠 線を検出する駐車枠線検出段階と、
駐車枠線検出段階にて駐車枠線が検出された場合、該駐車枠線に対して支援可 能な走行軌道が生成不能か否かを判断する判断段階と、
目標駐車位置を算出する目標駐車位置算出段階と、を備え、
目標駐車位置算出段階では、駐車枠線検出段階にて駐車枠線が検出されない場 合、又は、判断段階にて駐車枠線に対して支援可能な走行軌道が生成不能と判断 された場合に、駐車空間検出段階にて検出された駐車空間に基づいて目標駐車位 置が決定されることを特徴とする、駐車支援方法。
PCT/JP2007/053824 2006-04-25 2007-02-28 駐車支援装置及び駐車支援方法 WO2007122862A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US12/296,301 US8232893B2 (en) 2006-04-25 2007-02-28 Parking assist apparatus and method
CN200780014178XA CN101426669B (zh) 2006-04-25 2007-02-28 停车辅助装置以及停车辅助方法
EP07737543A EP2017138B1 (en) 2006-04-25 2007-02-28 Parking assistance device and parking assistance method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2006120975A JP4432930B2 (ja) 2006-04-25 2006-04-25 駐車支援装置及び駐車支援方法
JP2006-120975 2006-04-25

Publications (1)

Publication Number Publication Date
WO2007122862A1 true WO2007122862A1 (ja) 2007-11-01

Family

ID=38624778

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2007/053824 WO2007122862A1 (ja) 2006-04-25 2007-02-28 駐車支援装置及び駐車支援方法

Country Status (6)

Country Link
US (1) US8232893B2 (ja)
EP (2) EP2017138B1 (ja)
JP (1) JP4432930B2 (ja)
KR (1) KR20080109871A (ja)
CN (1) CN101426669B (ja)
WO (1) WO2007122862A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102436758A (zh) * 2010-08-05 2012-05-02 罗伯特·博世有限公司 用于支持车辆停车过程的方法和设备
WO2023248468A1 (ja) * 2022-06-24 2023-12-28 日産自動車株式会社 駐車支援方法及び駐車支援装置

Families Citing this family (100)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4530060B2 (ja) * 2008-02-19 2010-08-25 トヨタ自動車株式会社 駐車支援装置及び方法
DE102008027779A1 (de) * 2008-06-11 2009-12-17 Valeo Schalter Und Sensoren Gmbh Verfahren zur Unterstützung eines Fahrers eines Fahrzeugs beim Einparken in eine Parklücke
JP5083254B2 (ja) * 2009-03-18 2012-11-28 株式会社デンソー 駐車結果表示システム
DE102009029439A1 (de) * 2009-09-14 2011-03-24 Robert Bosch Gmbh Verfahren und Vorrichtung zur Darstellung von Hindernissen in einem Einparkhilfesystem von Kraftfahrzeugen
JP5440867B2 (ja) 2010-06-18 2014-03-12 アイシン精機株式会社 駐車支援装置
JP5472026B2 (ja) * 2010-06-29 2014-04-16 トヨタ自動車株式会社 駐車支援装置
US9058247B2 (en) * 2010-09-08 2015-06-16 Toyota Jidosha Kabushiki Kaisha Risk potential calculation apparatus
JP5516992B2 (ja) * 2010-11-30 2014-06-11 アイシン精機株式会社 駐車位置調整装置
US9581997B1 (en) * 2011-04-22 2017-02-28 Angel A. Penilla Method and system for cloud-based communication for automatic driverless movement
JP5982750B2 (ja) * 2011-08-04 2016-08-31 日産自動車株式会社 駐車支援装置及び駐車支援方法
KR20130019639A (ko) * 2011-08-17 2013-02-27 엘지이노텍 주식회사 차량용 카메라 장치
US9440585B2 (en) * 2011-09-13 2016-09-13 Toyoya Jidosha Kabushiki Kaisha Optical axis ascertaining device for in-vehicle camera
KR101316501B1 (ko) * 2011-10-14 2013-10-10 현대자동차주식회사 메쉬형 공간 해석기법을 이용한 주차 공간 탐지방법 및 그 시스템
GB2496905B (en) * 2011-11-28 2017-11-29 Nissan Motor Mfg (Uk) Limited Parking assistance apparatus and parking method
JP6015314B2 (ja) * 2012-09-28 2016-10-26 アイシン精機株式会社 駐車目標位置を算出する装置、駐車目標位置を算出する方法およびプログラム
KR101417399B1 (ko) 2012-11-09 2014-07-08 현대자동차주식회사 차량의 주차 위치 표시 장치 및 방법
JP5849942B2 (ja) * 2012-12-25 2016-02-03 株式会社日本自動車部品総合研究所 車載画像処理装置
KR101459855B1 (ko) * 2012-12-26 2014-11-07 현대자동차주식회사 주차 제어 방법 및 이러한 방법을 수행하는 장치
JP6115296B2 (ja) * 2013-05-07 2017-04-19 株式会社デンソー 運転支援装置
US8957786B2 (en) 2013-05-21 2015-02-17 Ford Global Technologies, Llc Enhanced alignment method for park assist
KR102108056B1 (ko) * 2013-07-26 2020-05-08 주식회사 만도 주차 제어 장치 및 주차 제어 방법
KR101511992B1 (ko) * 2013-09-06 2015-04-14 현대모비스(주) 조향 휠 제어 방법 및 이를 위한 위한 시스템
JP6193714B2 (ja) * 2013-10-04 2017-09-06 アイシン精機株式会社 駐車支援装置
JP6231345B2 (ja) * 2013-10-18 2017-11-15 クラリオン株式会社 車両用発進支援装置
KR101470230B1 (ko) * 2013-10-30 2014-12-08 현대자동차주식회사 주차 영역 추적 장치 및 그 방법
CN103600707B (zh) * 2013-11-06 2016-08-17 同济大学 一种智能泊车***的泊车位检测装置及方法
US20150286878A1 (en) * 2014-04-08 2015-10-08 Bendix Commercial Vehicle Systems Llc Generating an Image of the Surroundings of an Articulated Vehicle
JP6316161B2 (ja) * 2014-09-29 2018-04-25 クラリオン株式会社 車載用画像処理装置
JP6227514B2 (ja) * 2014-10-27 2017-11-08 アイシン精機株式会社 駐車支援装置
JP2016084094A (ja) * 2014-10-28 2016-05-19 アイシン精機株式会社 駐車支援装置
KR102273570B1 (ko) * 2015-04-01 2021-07-07 주식회사 만도 출차 지원 시스템
DE102015211754A1 (de) * 2015-06-24 2016-12-29 Bayerische Motoren Werke Aktiengesellschaft Parkassistenzsystem zum automatisierten Durchführen eines Einparkmanövers in eine Querparklücke mit Erkennung eines die Querparklücke nach hinten begrenzenden Bodenhindernisses
DE102015217278A1 (de) * 2015-09-10 2017-03-16 Robert Bosch Gmbh Verfahren und Vorrichtung zum führerlosen Führung eines an einer Startposition eines Parkplatzes abgestellten Kraftfahrzeugs
US9679485B2 (en) 2015-09-11 2017-06-13 International Business Machines Corporation Determining a parking position based on visual and non-visual factors
JP6659996B2 (ja) * 2015-09-28 2020-03-04 三菱自動車工業株式会社 ステアリングハンドル
CN108137040B (zh) * 2015-10-06 2020-12-11 三菱电机株式会社 停车方式判定装置
KR102032666B1 (ko) * 2015-10-22 2019-10-15 닛산 지도우샤 가부시키가이샤 주차 지원 방법 및 주차 지원 장치
MY188803A (en) * 2015-10-22 2022-01-04 Nissan Motor Parking support information display method and parking support device
MY191966A (en) * 2015-10-22 2022-07-21 Nissan Motor Parking support method and parking support device
MX2018004708A (es) * 2015-10-22 2018-06-18 Nissan Motor Metodo y dispositivo de deteccion de linea del espacio de estacionamiento.
SE540315C2 (en) * 2016-03-22 2018-06-12 Scania Cv Ab Method and system for facilitating automatic driving of a vehicle to a certain position
WO2017187592A1 (ja) * 2016-04-28 2017-11-02 日産自動車株式会社 駐車支援方法および装置
US10476963B2 (en) * 2016-05-09 2019-11-12 Honda Motor Co., Ltd. System and method for contacting vehicle for tandem parking
US10308243B2 (en) 2016-07-26 2019-06-04 Ford Global Technologies, Llc Vehicle remote park assist with occupant detection
CN106772389A (zh) * 2016-11-07 2017-05-31 纵目科技(上海)股份有限公司 一种库位检测方法、***、及移动设备
CN106767854B (zh) * 2016-11-07 2020-05-22 纵目科技(上海)股份有限公司 移动设备、车库地图形成方法及***
JP6776842B2 (ja) * 2016-11-22 2020-10-28 日産自動車株式会社 駐車支援方法及び駐車支援装置
JP6747367B2 (ja) 2017-04-18 2020-08-26 株式会社デンソー 舵角検出装置、および、これを用いた電動パワーステアリング装置
JP6961882B2 (ja) * 2017-04-27 2021-11-05 ダイハツ工業株式会社 駐車支援装置
US10683034B2 (en) 2017-06-06 2020-06-16 Ford Global Technologies, Llc Vehicle remote parking systems and methods
US10585430B2 (en) 2017-06-16 2020-03-10 Ford Global Technologies, Llc Remote park-assist authentication for vehicles
US10775781B2 (en) 2017-06-16 2020-09-15 Ford Global Technologies, Llc Interface verification for vehicle remote park-assist
US10810882B2 (en) * 2017-06-29 2020-10-20 Hall Labs Llc Parking assist apparatus
DE112018002071T5 (de) * 2017-07-11 2020-01-02 Hitachi Automotive Systems, Ltd. Parkassistenzvorrichtung
DE102017212034A1 (de) * 2017-07-13 2019-01-17 Bayerische Motoren Werke Aktiengesellschaft System und Verfahren zur automatisierten Längsführung eines Kraftfahrzeugs bis in den Stillstand
KR102316314B1 (ko) * 2017-07-28 2021-10-22 현대모비스 주식회사 차량의 주차 지원 장치, 시스템 및 방법
US10580304B2 (en) 2017-10-02 2020-03-03 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for voice controlled autonomous parking
KR102429494B1 (ko) * 2017-10-13 2022-08-05 현대자동차주식회사 차량의 목표주차공간 표시 장치 및 그 방법
US10627811B2 (en) 2017-11-07 2020-04-21 Ford Global Technologies, Llc Audio alerts for remote park-assist tethering
US10578676B2 (en) 2017-11-28 2020-03-03 Ford Global Technologies, Llc Vehicle monitoring of mobile device state-of-charge
TWI656518B (zh) 2017-12-05 2019-04-11 財團法人工業技術研究院 停車格辨識系統及其方法
JP6930606B2 (ja) * 2017-12-20 2021-09-01 日産自動車株式会社 駐車制御方法及び駐車制御装置
US11148661B2 (en) 2018-01-02 2021-10-19 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10585431B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10814864B2 (en) 2018-01-02 2020-10-27 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10583830B2 (en) 2018-01-02 2020-03-10 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10737690B2 (en) 2018-01-02 2020-08-11 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10688918B2 (en) 2018-01-02 2020-06-23 Ford Global Technologies, Llc Mobile device tethering for a remote parking assist system of a vehicle
US10974717B2 (en) 2018-01-02 2021-04-13 Ford Global Technologies, I.LC Mobile device tethering for a remote parking assist system of a vehicle
US10684773B2 (en) 2018-01-03 2020-06-16 Ford Global Technologies, Llc Mobile device interface for trailer backup-assist
CN110015288B (zh) * 2018-01-09 2020-10-30 上海汽车集团股份有限公司 一种检测库位的方法、装置及电子设备
US10747218B2 (en) 2018-01-12 2020-08-18 Ford Global Technologies, Llc Mobile device tethering for remote parking assist
US10917748B2 (en) 2018-01-25 2021-02-09 Ford Global Technologies, Llc Mobile device tethering for vehicle systems based on variable time-of-flight and dead reckoning
US10684627B2 (en) 2018-02-06 2020-06-16 Ford Global Technologies, Llc Accelerometer-based external sound monitoring for position aware autonomous parking
US11188070B2 (en) 2018-02-19 2021-11-30 Ford Global Technologies, Llc Mitigating key fob unavailability for remote parking assist systems
US10507868B2 (en) * 2018-02-22 2019-12-17 Ford Global Technologies, Llc Tire pressure monitoring for vehicle park-assist
US10732622B2 (en) 2018-04-05 2020-08-04 Ford Global Technologies, Llc Advanced user interaction features for remote park assist
US10493981B2 (en) 2018-04-09 2019-12-03 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10793144B2 (en) 2018-04-09 2020-10-06 Ford Global Technologies, Llc Vehicle remote park-assist communication counters
US10683004B2 (en) 2018-04-09 2020-06-16 Ford Global Technologies, Llc Input signal management for vehicle park-assist
US10759417B2 (en) 2018-04-09 2020-09-01 Ford Global Technologies, Llc Input signal management for vehicle park-assist
CN110654375A (zh) * 2018-06-29 2020-01-07 比亚迪股份有限公司 自动泊车方法、装置、***及车辆
US10821972B2 (en) 2018-09-13 2020-11-03 Ford Global Technologies, Llc Vehicle remote parking assist systems and methods
US10717432B2 (en) 2018-09-13 2020-07-21 Ford Global Technologies, Llc Park-assist based on vehicle door open positions
US10967851B2 (en) 2018-09-24 2021-04-06 Ford Global Technologies, Llc Vehicle system and method for setting variable virtual boundary
US10529233B1 (en) 2018-09-24 2020-01-07 Ford Global Technologies Llc Vehicle and method for detecting a parking space via a drone
US10908603B2 (en) 2018-10-08 2021-02-02 Ford Global Technologies, Llc Methods and apparatus to facilitate remote-controlled maneuvers
US10628687B1 (en) 2018-10-12 2020-04-21 Ford Global Technologies, Llc Parking spot identification for vehicle park-assist
US11097723B2 (en) 2018-10-17 2021-08-24 Ford Global Technologies, Llc User interfaces for vehicle remote park assist
US11137754B2 (en) 2018-10-24 2021-10-05 Ford Global Technologies, Llc Intermittent delay mitigation for remote vehicle operation
US11789442B2 (en) 2019-02-07 2023-10-17 Ford Global Technologies, Llc Anomalous input detection
US11195344B2 (en) 2019-03-15 2021-12-07 Ford Global Technologies, Llc High phone BLE or CPU burden detection and notification
US11275368B2 (en) 2019-04-01 2022-03-15 Ford Global Technologies, Llc Key fobs for vehicle remote park-assist
US11169517B2 (en) 2019-04-01 2021-11-09 Ford Global Technologies, Llc Initiation of vehicle remote park-assist with key fob
KR102251574B1 (ko) 2019-07-22 2021-05-14 주식회사 만도 주차 정렬 조정 장치 및 방법
CN112824183A (zh) * 2019-11-20 2021-05-21 华为技术有限公司 一种自动泊车交互方法及装置
EP4104159A4 (en) * 2020-02-11 2024-02-28 Fastasmo Studio Inc. SYSTEMS AND METHODS FOR SPATIAL MICROMOBILITY APPLICATIONS
DE102020202188A1 (de) * 2020-02-20 2021-08-26 Continental Automotive Gmbh Parkassistenzsystem
KR20210106690A (ko) * 2020-02-21 2021-08-31 현대자동차주식회사 도어 열림 제어 장치 및 그의 도어 열림 제어 방법
DE102022204574A1 (de) 2022-05-10 2023-11-16 Volkswagen Aktiengesellschaft Verfahren zum Betreiben eines Einparkassistenzsystems für ein Fahrzeug und Einparkassistenzsystem

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003054341A (ja) 2001-08-10 2003-02-26 Nissan Motor Co Ltd 車両用駐車支援装置
JP2004114977A (ja) * 2002-09-30 2004-04-15 Aisin Seiki Co Ltd 移動体周辺監視装置
JP2004345496A (ja) 2003-05-22 2004-12-09 Toyota Motor Corp 駐車支援装置
JP2005009992A (ja) * 2003-06-18 2005-01-13 Denso Corp 車両用周辺監視装置
JP2005343417A (ja) * 2004-06-07 2005-12-15 Auto Network Gijutsu Kenkyusho:Kk 駐車アシスト装置
JP2006120975A (ja) 2004-10-25 2006-05-11 Matsushita Electric Ind Co Ltd 電子部品装着装置および保持ツール

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3138804B2 (ja) 1996-10-09 2001-02-26 本田技研工業株式会社 車両の自動操舵装置
JP4161573B2 (ja) * 2001-06-29 2008-10-08 株式会社豊田自動織機 駐車支援装置
JP2004034946A (ja) * 2002-07-08 2004-02-05 Toyota Motor Corp 画像処理装置、駐車支援装置、及び画像処理方法
JP4321380B2 (ja) * 2004-06-28 2009-08-26 トヨタ自動車株式会社 車両用走行支援装置
JP3977368B2 (ja) 2004-09-30 2007-09-19 クラリオン株式会社 駐車支援システム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003054341A (ja) 2001-08-10 2003-02-26 Nissan Motor Co Ltd 車両用駐車支援装置
JP2004114977A (ja) * 2002-09-30 2004-04-15 Aisin Seiki Co Ltd 移動体周辺監視装置
JP2004345496A (ja) 2003-05-22 2004-12-09 Toyota Motor Corp 駐車支援装置
JP2005009992A (ja) * 2003-06-18 2005-01-13 Denso Corp 車両用周辺監視装置
JP2005343417A (ja) * 2004-06-07 2005-12-15 Auto Network Gijutsu Kenkyusho:Kk 駐車アシスト装置
JP2006120975A (ja) 2004-10-25 2006-05-11 Matsushita Electric Ind Co Ltd 電子部品装着装置および保持ツール

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP2017138A4

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102436758A (zh) * 2010-08-05 2012-05-02 罗伯特·博世有限公司 用于支持车辆停车过程的方法和设备
WO2023248468A1 (ja) * 2022-06-24 2023-12-28 日産自動車株式会社 駐車支援方法及び駐車支援装置

Also Published As

Publication number Publication date
EP2017138B1 (en) 2012-05-16
CN101426669B (zh) 2013-04-24
US20090174574A1 (en) 2009-07-09
EP2377728B1 (en) 2012-09-05
EP2377728A2 (en) 2011-10-19
CN101426669A (zh) 2009-05-06
EP2017138A4 (en) 2010-06-02
EP2017138A1 (en) 2009-01-21
EP2377728A3 (en) 2011-11-23
US8232893B2 (en) 2012-07-31
JP4432930B2 (ja) 2010-03-17
KR20080109871A (ko) 2008-12-17
JP2007290557A (ja) 2007-11-08

Similar Documents

Publication Publication Date Title
WO2007122862A1 (ja) 駐車支援装置及び駐車支援方法
JP4380655B2 (ja) 駐車支援装置及び駐車支援方法
JP4769625B2 (ja) 駐車支援装置及び駐車支援方法
WO2008072473A1 (ja) 駐車支援装置
JP4428390B2 (ja) 駐車支援装置及び駐車支援方法
JP4386083B2 (ja) 駐車支援装置
JP4530060B2 (ja) 駐車支援装置及び方法
JP4432929B2 (ja) 駐車支援装置及び駐車支援方法
JP2008201178A (ja) 駐車支援装置
US9896098B2 (en) Vehicle travel control device
JP6138881B2 (ja) 操舵支援制御装置
JP4613871B2 (ja) 駐車支援装置
CN111936364B (zh) 停车辅助装置
JP4645542B2 (ja) 駐車空間検出装置
JP4613884B2 (ja) 駐車支援装置
JP2009184649A (ja) 駐車支援装置、駐車支援方法及びコンピュータプログラム
JP2010012838A (ja) 駐車支援装置、及び駐車支援方法
JP6044429B2 (ja) 駐車支援装置、及び駐車支援方法
JP6696862B2 (ja) 自動運転システム
CN113954861A (zh) 车辆的控制装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 07737543

Country of ref document: EP

Kind code of ref document: A1

WWE Wipo information: entry into national phase

Ref document number: 2120/MUMNP/2008

Country of ref document: IN

WWE Wipo information: entry into national phase

Ref document number: 12296301

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2007737543

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 200780014178.X

Country of ref document: CN

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 1020087025739

Country of ref document: KR