JP5943207B2 - Video display device for vehicle parking operation support - Google Patents

Video display device for vehicle parking operation support Download PDF

Info

Publication number
JP5943207B2
JP5943207B2 JP2013106143A JP2013106143A JP5943207B2 JP 5943207 B2 JP5943207 B2 JP 5943207B2 JP 2013106143 A JP2013106143 A JP 2013106143A JP 2013106143 A JP2013106143 A JP 2013106143A JP 5943207 B2 JP5943207 B2 JP 5943207B2
Authority
JP
Japan
Prior art keywords
vehicle
video
display
driver
operation stage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2013106143A
Other languages
Japanese (ja)
Other versions
JP2014226966A (en
Inventor
信平 楠本
信平 楠本
耕二 岩瀬
耕二 岩瀬
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mazda Motor Corp
Original Assignee
Mazda Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mazda Motor Corp filed Critical Mazda Motor Corp
Priority to JP2013106143A priority Critical patent/JP5943207B2/en
Publication of JP2014226966A publication Critical patent/JP2014226966A/en
Application granted granted Critical
Publication of JP5943207B2 publication Critical patent/JP5943207B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Description

本発明は、車両の駐車操作支援用映像表示装置に係り、特に、車両周辺の映像を表示する駐車操作支援用映像表示装置に関する。   The present invention relates to an image display device for assisting parking operation of a vehicle, and more particularly to an image display device for assisting parking operation that displays an image around a vehicle.

従来より、車両の駐車操作を支援するために、車両周辺をカメラにより撮影し、その撮影した映像を表示部に表示するシステムが知られている。
例えば、特許文献1には、ドライバが左右のドアミラーによって視認する領域を撮影する左右のカメラと、これらの左右のカメラによって撮影した映像を表示する左右の表示部とを備えた車両用表示装置が開示されている。この装置では、左表示部がメータパネル内の左側に配置され、右表示部がメータパネル内の右側に配置されており、左カメラによって撮影した映像を左表示部に表示し、右カメラによって撮影した映像を右表示部に表示する。
2. Description of the Related Art Conventionally, in order to support a parking operation of a vehicle, a system that captures the periphery of the vehicle with a camera and displays the captured image on a display unit is known.
For example, Patent Document 1 discloses a vehicle display device that includes left and right cameras that capture an area visually recognized by a driver with left and right door mirrors, and left and right display units that display images captured by these left and right cameras. It is disclosed. In this device, the left display unit is arranged on the left side in the meter panel, and the right display unit is arranged on the right side in the meter panel. The video imaged by the left camera is displayed on the left display unit, and is photographed by the right camera. Displayed on the right display.

特開2008−137535号公報JP 2008-137535 A

ところで、例えば、駐車操作に不慣れな初級ドライバは、車両の駐車操作において車両の側方や後方の方向を確認する必要がある場合に、上述したような表示部に表示された映像を確認すればよいのか、あるいは首を振って車両の周辺を直接視認すればよいのか等を即座に判断できず、駐車操作を上手く行えない可能性がある。また、駐車操作に優れた上級ドライバは、車両の駐車操作において車両の側方や後方の方向を確認する必要がある場合に、表示部に表示された映像だけでは足りず、首を振って車両の周辺を直接視認することが、本願発明者らによって見出された。   By the way, for example, an inexperienced driver who is unfamiliar with the parking operation needs to check the image displayed on the display unit as described above when it is necessary to check the side or rear direction of the vehicle in the parking operation of the vehicle. There is a possibility that the parking operation cannot be performed well because it is impossible to immediately determine whether it is better to shake the head or see the periphery of the vehicle directly. Also, senior drivers who excel in parking operations need to check the side or rear direction of the vehicle in the parking operation of the vehicle. It has been found by the inventors of the present application that the periphery of the image is directly visually recognized.

しかしながら、上述した特許文献1の装置では、左表示部は左カメラによって撮影された映像のみを表示し、右表示部は右カメラによって撮影された映像のみを表示するに過ぎないので、車両の駐車操作(後退駐車や縦列駐車等の操作)においてドライバにとって必要性の高い映像を効果的に表示できないという問題がある。   However, in the apparatus of Patent Document 1 described above, the left display unit displays only the video imaged by the left camera, and the right display unit displays only the video imaged by the right camera. There is a problem in that images that are highly necessary for the driver cannot be effectively displayed in operations (such as reverse parking and parallel parking).

本発明は、上述した従来技術の問題点を解決するためになされたものであり、車両の駐車操作においてドライバにとって必要性の高い映像を効果的に表示できる車両の駐車操作支援用映像表示装置を提供することを目的とする。   The present invention has been made to solve the above-described problems of the prior art, and provides a vehicle parking operation support video display device that can effectively display a video that is highly necessary for a driver in a vehicle parking operation. The purpose is to provide.

上記の目的を達成するために、本発明の車両の駐車操作支援用映像表示装置は、車両周辺の映像を表示する車両の駐車操作支援用映像表示装置であって、車両周辺を撮影する撮影手段と、車両の駐車操作における複数の操作段階の各々においてドライバにとって必要性の高い映像を予め特定した視界情報を格納する視界情報格納手段と、車両の駐車操作の操作段階を特定する操作段階特定手段と、操作段階特定手段により特定された操作段階においてドライバにとって必要性の高い映像を特定する視界情報を視界情報格納手段から取得する視界情報取得手段と、視界情報取得手段により取得された視界情報に対応する映像を、撮影手段により撮影された車両周辺の映像から抽出する映像抽出手段と、映像抽出手段により抽出された映像を表示する表示手段と、を有し、視界情報格納手段に格納された視界情報は、車両の駐車操作の各操作段階においてドライバが視認する必要性の高い方向を含み、視界情報取得手段は、操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い方向を視界情報格納手段から取得し、映像抽出手段は、視界情報取得手段により取得された方向の映像を、撮影手段により撮影された車両周辺の映像から抽出し、視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する操作段階の視界情報を含み、視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する操作段階において、ドライバが視認する必要性のより高い方向の映像がより長く表示手段に表示されるように設定された各方向の映像の表示時間を含み、視界情報取得手段は、操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い複数の各方向の映像の表示時間を視界情報格納手段から取得し、表示手段は、視界情報取得手段により取得された表示時間によりドライバが視認する必要性の高い各方向の映像を表示することを特徴とする。
このように構成された本発明においては、駐車操作の各操作段階においてドライバにとって必要性の高い映像を予め特定した視界情報が視界情報格納手段に格納されている。そして、視界情報取得手段は、操作段階特定手段により特定された駐車操作の各操作段階においてドライバにとって必要性の高い映像を特定した視界情報を取得し、映像抽出手段は、その取得された視界情報に対応する映像を車両周辺の映像から抽出し、表示手段は、その抽出された映像を表示するので、駐車操作の各操作段階においてドライバにとって必要性の高い映像を効果的に表示することができる。例えば、駐車操作に不慣れな初級ドライバであっても、表示手段を視認すれば、駐車操作の各操作段階においてドライバにとって必要性の高い映像を確認することができるので、駐車操作を上手く行うことができる。また、駐車操作に優れた上級ドライバは、首を振って車両の周辺を直接視認しなくとも、表示手段に表示された映像を確認することにより、駐車操作の各操作段階においてドライバにとって必要性の高い映像を確認することができるので、駐車操作を一層スムーズに行うことができる。
また、このように構成された本発明においては、車両の駐車操作の各操作段階においてドライバが視認する必要性の高い方向を含む視界情報が視界情報格納手段に格納されている。そして、視界情報取得手段は、操作段階特定手段により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い方向を取得し、映像抽出手段は、その取得された方向の映像を車両周辺の映像から抽出し、表示手段は、その抽出された映像を表示するので、駐車操作の各操作段階においてドライバが視認する必要性の高い方向の映像を効果的に表示することができる。
また、このように構成された本発明においては、ドライバが視認する必要性の高い複数の方向を有する操作段階において、ドライバが視認する必要性のより高い方向の映像がより長く表示手段に表示されるように設定された各方向の映像の表示時間を含む視界情報が視界情報格納手段に格納されている。そして、視界情報取得手段は、操作段階特定手段により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い各方向の映像の表示時間を取得し、表示手段は、その取得された表示時間により各方向の映像を表示するので、ドライバが視認する必要性のより高い方向の映像ほど長く表示することができ、ドライバが視認する必要性の高い映像をより効果的に表示することができる。
In order to achieve the above object, a vehicle parking operation support video display device of the present invention is a vehicle parking operation support video display device for displaying a video around the vehicle, and a photographing means for photographing the vehicle periphery. And a view information storing means for storing view information that specifies in advance a video that is highly necessary for the driver in each of a plurality of operation stages in the parking operation of the vehicle, and an operation stage specifying means for specifying the operation stage of the parking operation of the vehicle And view information acquisition means for acquiring from the view information storage means the view information for identifying the video that is highly necessary for the driver in the operation stage specified by the operation stage specifying means, and the view information acquired by the view information acquisition means. Video extraction means for extracting the corresponding video from the video around the vehicle photographed by the photographing means, and display the video extracted by the video extraction means Possess a display unit that, a view information stored in the view information storage means includes a direction highly necessary to visually confirm the driver at each operation stage of the parking operation of the vehicle, visibility information acquiring unit, the operation steps The direction that is highly necessary for the driver to visually recognize in the operation stage specified by the specifying means is acquired from the view information storing means, and the image extracting means is the image of the direction acquired by the view information acquiring means being shot by the shooting means. The visual field information extracted from the video around the vehicle and stored in the visual field information storage unit includes the visual field information at the operation stage having a plurality of directions that the driver needs to visually recognize and stored in the visual field information storage unit. Visibility information is displayed in the operation stage having a plurality of directions that are highly necessary for the driver to visually recognize in the direction in which the driver needs to visually recognize the image longer. Including the display time of the video in each direction set to be displayed, and the visual field information acquisition means includes a plurality of videos in each direction that are highly necessary for the driver to visually recognize in the operation stage specified by the operation stage specifying means. The display time is acquired from the visual field information storage unit, and the display unit displays an image in each direction that is highly necessary for the driver to visually recognize based on the display time acquired by the visual field information acquisition unit .
In the present invention configured as described above, the field-of-view information storing means stores the field-of-view information specifying in advance a video that is highly necessary for the driver at each operation stage of the parking operation. The visibility information acquisition means acquires the visibility information that identifies the video that is highly necessary for the driver at each operation stage of the parking operation specified by the operation stage specification means, and the video extraction means acquires the obtained visibility information. Since the video corresponding to is extracted from the video around the vehicle and the display means displays the extracted video, the video that is highly necessary for the driver can be effectively displayed at each operation stage of the parking operation. . For example, even a beginner driver who is unfamiliar with the parking operation can check images that are highly necessary for the driver at each operation stage of the parking operation by visually checking the display means, so that the parking operation can be performed well. it can. In addition, an advanced driver who excels in parking operation does not need the driver at each operation stage of the parking operation by checking the image displayed on the display means without having to sway his head and directly view the periphery of the vehicle. Since a high image can be confirmed, the parking operation can be performed more smoothly.
In the present invention configured as described above, the visual field information storage means stores the visual field information including the direction in which the driver needs to visually recognize at each operation stage of the vehicle parking operation. The visibility information acquisition means acquires the direction in which the driver needs to be visually recognized at each operation stage of the parking operation specified by the operation stage specification means, and the video extraction means displays the video of the acquired direction in the vehicle Since the video is extracted from the surrounding video and the display means displays the extracted video, it is possible to effectively display the video in the direction that the driver needs to visually recognize at each operation stage of the parking operation.
Further, in the present invention configured as described above, in the operation stage having a plurality of directions that are highly necessary to be visually recognized by the driver, an image in a direction that is more necessary to be visually recognized by the driver is displayed on the display unit for a longer time. Visibility information including the display time of the video in each direction set as described above is stored in the visibility information storage means. The visibility information acquisition means acquires the display time of the video in each direction that is highly necessary for the driver to visually recognize at each operation stage of the parking operation specified by the operation stage specifying means, and the display means acquires the acquired time. Since the video in each direction is displayed according to the display time, the video in the direction that is more necessary for the driver to view can be displayed longer, and the video that the driver needs to view can be displayed more effectively. it can.

また、本発明において、好ましくは、視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する操作段階においてそれらの各方向の映像を表示する表示手法を含み、視界情報取得手段は、操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い複数の各方向の映像の表示手法を視界情報格納手段から取得し、表示手段は、視界情報取得手段により取得された表示手法によりドライバが視認する必要性の高い各方向の映像を表示する。
このように構成された本発明においては、ドライバが視認する必要性の高い複数の方向を有する操作段階においてそれらの各方向の映像を表示する表示手法を含む視界情報が視界情報格納手段に格納されている。そして、視界情報取得手段は、操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い各方向の映像の表示手法を取得し、表示手段は、その取得された表示手法により各方向の映像を表示するので、ドライバが視認する必要性の高い方向の映像をより効果的に表示することができる。
In the present invention, preferably, field of view information stored in the visual field information storage means, display method for displaying those images in each direction in the operation stage having a plurality of directions with high need for driver visibility The visual field information acquisition means acquires from the visual field information storage means a video display method in a plurality of directions that are highly necessary for the driver to visually recognize at the operation stage specified by the operation stage specification means. The video in each direction that is highly necessary for the driver to visually recognize is displayed by the display method acquired by the information acquisition means.
In the present invention configured as described above, view information including a display method for displaying an image in each direction in an operation stage having a plurality of directions that are highly necessary for the driver to visually recognize is stored in the view information storage means. ing. The visibility information acquisition means acquires a display method of video in each direction that is highly necessary for the driver to visually recognize in the operation stage specified by the operation stage specification means, and the display means uses the acquired display technique to Since the video of the direction is displayed, it is possible to more effectively display the video of the direction that is highly necessary for the driver to visually recognize.

また、本発明において、好ましくは、視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する操作段階において、ドライバが視認する必要性のより高い方向の映像がより大きく表示手段に表示されるように設定された各方向の映像の表示サイズ比率を含み、視界情報取得手段は、操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い複数の各方向の映像の表示サイズ比率を視界情報格納手段から取得し、表示手段は、視界情報取得手段により取得された表示サイズ比率によりドライバが視認する必要性の高い各方向の映像を表示する。
このように構成された本発明においては、ドライバが視認する必要性の高い複数の方向を有する操作段階において、ドライバが視認する必要性のより高い方向の映像がより大きく表示手段に表示されるように設定された各方向の映像の表示サイズ比率を含む視界情報が視界情報格納手段に格納されている。そして、視界情報取得手段は、操作段階特定手段により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い各方向の映像の表示サイズ比率を取得し、表示手段は、その取得された表示サイズ比率により各方向の映像を表示するので、ドライバが視認する必要性のより高い方向の映像ほど大きく表示することができ、ドライバが視認する必要性の高い映像をより効果的に表示することができる。
In the present invention, preferably, the field of view information stored in the visual field information storage unit, in the operation stage having a plurality of directions with high need for the driver visually recognizes the driver higher direction of the need to visually Including the display size ratio of the video in each direction set so that the video is displayed on the display means larger, the visibility information acquisition means is necessary for the driver to visually recognize in the operation stage specified by the operation stage specification means. A high display size ratio of each direction of the video is acquired from the view information storage means, and the display means displays the video of each direction that the driver needs to visually recognize based on the display size ratio acquired by the view information acquisition means. To do.
In the present invention configured as described above, in the operation stage having a plurality of directions that are highly necessary to be visually recognized by the driver, an image in a direction that is more necessary to be visually recognized by the driver is displayed larger on the display means. Visibility information including the display size ratio of the video in each direction set to is stored in the visibility information storage means. The visibility information acquisition means acquires the display size ratio of the video in each direction that is highly necessary for the driver to visually recognize in each operation stage of the parking operation specified by the operation stage specifying means, and the display means is acquired. Because the video in each direction is displayed according to the display size ratio, the video in the direction that is more necessary for the driver to view can be displayed larger, and the video that the driver needs to view is displayed more effectively. be able to.

また、本発明において、好ましくは、視界情報に含まれる表示手法は、ドライバが視認する必要性の高い複数の方向の内、車両の左方向に含まれる方向の映像が表示手段の左側に表示され、車両の右方向に含まれる方向の映像が表示手段の右側に表示されるように設定されている。
このように構成された本発明においては、ドライバが視認する必要性の高い複数の方向の内、車両の左方向に含まれる方向の映像が表示手段の左側に表示され、車両の右方向に含まれる方向の映像が表示手段の右側に表示されるので、ドライバが視認する必要性の高い複数の方向の映像をより直感的に把握しやすい手法で表示することができる。
In the present invention, it is preferable that the display method included in the field-of-view information displays, on the left side of the display means, an image of a direction included in the left direction of the vehicle among a plurality of directions that the driver needs to visually recognize. The video in the direction included in the right direction of the vehicle is set to be displayed on the right side of the display means.
In the present invention configured as described above, an image of a direction included in the left direction of the vehicle is displayed on the left side of the display means among a plurality of directions that the driver needs to visually recognize, and is included in the right direction of the vehicle. Since the video in the direction to be displayed is displayed on the right side of the display means, it is possible to display the video in a plurality of directions, which is highly necessary for the driver to visually recognize, by a method that makes it easier to grasp intuitively.

また、本発明において、好ましくは、視界情報に含まれる表示手法は、ドライバが視認する必要性の高い複数の方向の内、車両の同じ側の方向に含まれる複数方向の映像が表示手段に上下並列に表示されるように設定されている。
このように構成された本発明においては、ドライバが視認する必要性の高い複数の方向の内、車両の同じ側の方向に含まれる複数方向の映像が表示手段に上下並列に表示されるので、ドライバが視認する必要性の高い複数の方向の映像をより直感的に把握しやすい手法で表示することができる。
In the present invention, it is preferable that the display method included in the field-of-view information includes images in a plurality of directions included in a direction on the same side of the vehicle among a plurality of directions that the driver needs to visually recognize. It is set to display in parallel.
In the present invention configured as described above, images in a plurality of directions included in a direction on the same side of the vehicle among a plurality of directions highly necessary for the driver to visually recognize are displayed on the display unit in parallel vertically. It is possible to display images in a plurality of directions, which are highly necessary for the driver to visually recognize, by a method that can be grasped more intuitively.

また、本発明において、好ましくは、視界情報格納手段に格納された視界情報は、車両の駐車操作の各操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データに基づき、予め決定されている。
このように構成された本発明においては、車両の駐車操作の各操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データに基づき予め決定された視界情報が視界情報格納手段に格納されているので、駐車操作の各操作段階において駐車操作に優れたドライバが視認する率の高い方向の映像を車両周辺の映像から抽出して表示することができ、ドライバが視認する必要性の高い方向の映像を確実に表示することができる。
In the present invention, preferably, the visual field information stored in the visual field information storage means is visual action data that specifies a high direction in which a driver excellent in parking operation visually recognizes at each operation stage of the vehicle parking operation. Is determined in advance.
In the present invention configured as described above, in each operation stage of the parking operation of the vehicle, the visibility information determined in advance based on the viewing behavior data specifying the direction in which the driver who is excellent in the parking operation visually recognizes a high rate is displayed. Since it is stored in the information storage means, it is possible to extract and display from the video around the vehicle a video with a high rate that the driver who is excellent in parking operation visually recognizes at each operation stage of the parking operation. Therefore, it is possible to reliably display an image in a direction that is highly necessary.

本発明による車両の駐車操作支援用映像表示装置によれば、車両の駐車操作においてドライバにとって必要性の高い映像を効果的に表示できる。   According to the image display device for assisting parking operation of a vehicle according to the present invention, it is possible to effectively display an image highly necessary for the driver in the parking operation of the vehicle.

本発明の実施形態による車両の駐車操作支援用映像表示装置が適用された車両の平面図である。1 is a plan view of a vehicle to which a vehicle parking operation support video display device according to an embodiment of the present invention is applied. 本発明の実施形態による車両の駐車操作支援用映像表示装置が適用された車両のインストルメントパネル周辺を示す斜視図である。1 is a perspective view showing the vicinity of an instrument panel of a vehicle to which a vehicle parking operation support video display device according to an embodiment of the present invention is applied. 本発明の実施形態による車両の駐車操作支援用映像表示装置の電気的構成を示すブロック図である。It is a block diagram which shows the electric constitution of the video display apparatus for parking operation assistance of the vehicle by embodiment of this invention. 本発明の実施形態による車両の駐車操作支援用映像表示装置の視界情報テーブルに格納されている視界情報を示す表である。It is a table | surface which shows the visual field information stored in the visual field information table of the video display apparatus for parking operation assistance of the vehicle by embodiment of this invention. 車両の進行方向左側にある駐車枠に車両を後退駐車させる駐車操作のうち、車両が駐車枠の前方を横切るように前進し、その後停止するまでの操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データを示す図である。Among the parking operations to park the vehicle backward in the parking frame on the left side of the vehicle traveling direction, the driver who is excellent in parking operation visually recognizes in the operation stage until the vehicle moves forward across the parking frame and then stops. It is a figure which shows the visual recognition action data which pinpointed the direction with the high rate to do. 車両の進行方向左側にある駐車枠に車両を後退駐車させる駐車操作のうち、図5の操作段階の後に車両が停止している間の操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データを示す図である。Of the parking operations for reversing and parking the vehicle in the parking frame on the left side in the traveling direction of the vehicle, in the operation stage while the vehicle is stopped after the operation stage of FIG. It is a figure which shows the visual recognition action data which specified the high direction. 車両の進行方向左側にある駐車枠に車両を後退駐車させる駐車操作のうち、図6の操作段階の後に車両を後退させ駐車枠内に進入させる操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データを示す図である。Among the parking operations for reversing and parking the vehicle in the parking frame on the left side in the traveling direction of the vehicle, the driver who is excellent in the parking operation visually recognizes in the operation step for retracting the vehicle and entering the parking frame after the operation step of FIG. It is a figure which shows the visual recognition action data which specified the direction with a high rate. 車両の進行方向左側にある駐車枠に車両を後退駐車させる駐車操作のうち、図7の操作段階の後に駐車枠内における車両の姿勢を調節する操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データを示す図である。Among the parking operations for reversing and parking the vehicle in the parking frame on the left side in the traveling direction of the vehicle, the driver who excels in the parking operation visually recognizes in the operation step of adjusting the posture of the vehicle in the parking frame after the operation step of FIG. It is a figure which shows the visual recognition action data which specified the direction with a high rate. 本発明の実施形態による車両の駐車操作支援用映像表示装置が実行する映像表示処理のフローチャートである。It is a flowchart of the video display process which the video display apparatus for parking operation assistance of the vehicle by embodiment of this invention performs. 図5の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 6 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 5. 図5の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 6 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 5. 図5の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 6 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 5. 図6の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 7 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 6. 図7の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 8 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 7. 図7の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 8 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 7. 図7の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 8 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 7. 図8の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 9 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 8. 図8の操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイに表示される映像を示す図である。FIG. 9 is a diagram illustrating an image displayed on the display of the image display device for assisting parking operation of the vehicle according to the embodiment of the present invention in the operation stage of FIG. 8.

以下、添付図面を参照しながら本発明の実施形態による車両の駐車操作支援用映像表示装置を説明する。
まず、図1及び図2により、本発明の実施形態による車両の駐車操作支援用映像表示装置の構成を説明する。図1は、本発明の実施形態による車両の駐車操作支援用映像表示装置が適用された車両の平面図であり、図2は、本発明の実施形態による車両の駐車操作支援用映像表示装置が適用された車両のインストルメントパネル周辺を示す斜視図である。
Hereinafter, a vehicle parking operation support video display device according to an embodiment of the present invention will be described with reference to the accompanying drawings.
First, referring to FIGS. 1 and 2, the configuration of a video display device for assisting parking operation of a vehicle according to an embodiment of the present invention will be described. FIG. 1 is a plan view of a vehicle to which a vehicle parking operation support video display device according to an embodiment of the present invention is applied. FIG. 2 is a vehicle parking operation support video display device according to an embodiment of the present invention. It is a perspective view which shows the instrument panel periphery of the applied vehicle.

まず、図1に示すように、車両1は、この車両1の前端部に取り付けられた前方カメラ2、車両1の右側面に取り付けられた右側方カメラ4、車両1の左側面に取り付けられた左側方カメラ6、車両1の後端部に取り付けられた後方カメラ8、及び、車両1の車室内に取り付けられた車室内カメラ10を有している。これらのカメラ2,4,6,8,10は、広角レンズを使用しており、例えば、図1に実線及び破線の扇形により示した画角範囲(画角が約180°の範囲)を撮影することができる。   First, as shown in FIG. 1, the vehicle 1 is attached to the front camera 2 attached to the front end portion of the vehicle 1, the right-side camera 4 attached to the right side surface of the vehicle 1, and the left side surface of the vehicle 1. A left side camera 6, a rear camera 8 attached to the rear end of the vehicle 1, and a vehicle interior camera 10 attached to the vehicle interior of the vehicle 1 are provided. These cameras 2, 4, 6, 8, and 10 use wide-angle lenses. For example, the camera captures a range of view angles (a range of view angles of about 180 °) indicated by the solid and dashed fan shapes in FIG. 1. can do.

次に、図2に示すように、車両1の車室の前部には、車幅方向に延びるインストルメントパネル12が設けられている。このインストルメントパネル12の車幅方向中央部に、液晶画面を備えたディスプレイ14が設けられている。   Next, as shown in FIG. 2, an instrument panel 12 extending in the vehicle width direction is provided at the front portion of the compartment of the vehicle 1. A display 14 having a liquid crystal screen is provided at the center of the instrument panel 12 in the vehicle width direction.

また、車両1は、車両1の変速機の変速段(シフトポジション)を検出するシフトポジションセンサ、車速を検出する車速センサ、車両1の操舵角を検出する操舵角センサ、及び、車両1の現在位置を検出するGPS装置を有している。さらに、車両1は、シフトポジションセンサ、車速センサ、操舵角センサ、GPS装置、及び、上述した各カメラ2,4,6,8,10からのデータが入力されるECU16を有している。このECU16は、所定の映像をディスプレイ14に表示させる。また、車両1は、車両の駐車操作支援用映像表示装置が使用する各種のデータを記憶するメモリ18を有している。   Further, the vehicle 1 includes a shift position sensor that detects a shift stage (shift position) of a transmission of the vehicle 1, a vehicle speed sensor that detects a vehicle speed, a steering angle sensor that detects a steering angle of the vehicle 1, and a current state of the vehicle 1. It has a GPS device that detects the position. Further, the vehicle 1 has a shift position sensor, a vehicle speed sensor, a steering angle sensor, a GPS device, and an ECU 16 to which data from each of the cameras 2, 4, 6, 8, and 10 described above is input. The ECU 16 displays a predetermined image on the display 14. The vehicle 1 also has a memory 18 that stores various data used by the vehicle parking operation support video display device.

次に、図3により、本発明の実施形態による車両の駐車操作支援用映像表示装置の電気的構成を説明する。図3は、本発明の実施形態による車両の駐車操作支援用映像表示装置の電気的構成を示すブロック図である。
図3に示すように、車両の駐車操作支援用映像表示装置は、上述した各カメラ2,4,6,8,10、ディスプレイ14、ECU16、及び、メモリ18を有している。
Next, referring to FIG. 3, the electrical configuration of the vehicle parking operation support video display device according to the embodiment of the present invention will be described. FIG. 3 is a block diagram showing an electrical configuration of the vehicle parking operation support video display device according to the embodiment of the present invention.
As shown in FIG. 3, the vehicle parking operation support video display device includes the cameras 2, 4, 6, 8, 10, the display 14, the ECU 16, and the memory 18.

ECU16は、車両1の駐車操作の操作段階を特定する操作段階特定部20、操作段階特定部20により特定された操作段階においてドライバにとって必要性の高い映像を特定する視界情報をメモリ18から取得する視界情報取得部22、及び、視界情報取得部22により取得された視界情報に対応する映像を、各カメラ2,4,6,8,10により撮影された車両1周辺の映像から抽出する映像抽出部24を有している。ECU16を構成するこれらの各要素は、CPU、当該CPU上で解釈実行される各種のプログラム(OSなどの基本制御プログラムや、OS上で起動され特定機能を実現するアプリケーションプログラムを含む)、及びプログラムや各種のデータを格納するためのROMやRAMの如き内部メモリを備えるコンピュータにより構成される。   The ECU 16 acquires, from the memory 18, the operation stage specifying unit 20 that specifies the operation stage of the parking operation of the vehicle 1, and the visibility information that specifies the video that is highly necessary for the driver in the operation stage specified by the operation stage specifying unit 20. Image extraction for extracting the image corresponding to the view information acquired by the view information acquisition unit 22 and the view information acquisition unit 22 from the images around the vehicle 1 taken by the cameras 2, 4, 6, 8, and 10. Part 24. Each of these elements constituting the ECU 16 includes a CPU, various programs that are interpreted and executed on the CPU (including a basic control program such as an OS and an application program that is activated on the OS and realizes a specific function), and a program. And a computer having an internal memory such as a ROM or RAM for storing various data.

また、メモリ18は、車両1の駐車操作における複数の操作段階の各々においてドライバにとって必要性の高い映像を特定した視界情報を格納する視界情報テーブル26を記憶している。   In addition, the memory 18 stores a view information table 26 that stores view information specifying a video that is highly necessary for the driver in each of a plurality of operation stages in the parking operation of the vehicle 1.

次に、図4により、視界情報テーブル26に格納されている視界情報について説明する。図4は、本発明の実施形態による車両の駐車操作支援用映像表示装置の視界情報テーブル26に格納されている視界情報を示す表である。   Next, the visual field information stored in the visual field information table 26 will be described with reference to FIG. FIG. 4 is a table showing the field of view information stored in the field of view information table 26 of the vehicle parking operation support video display device according to the embodiment of the present invention.

図4に示すように、視界情報テーブル26には、ECU16に入力された各種データに基づいて車両1の駐車操作の操作段階を特定するための操作段階情報と、各操作段階においてドライバにとって必要性の高い映像を特定した視界情報とが、相互に関連付けて格納されている。   As shown in FIG. 4, the visibility information table 26 includes operation stage information for identifying the operation stage of the parking operation of the vehicle 1 based on various data input to the ECU 16, and necessity for the driver at each operation stage. Visibility information specifying high-quality videos is stored in association with each other.

操作段階情報は、車両1の駐車操作(本実施形態では後退駐車操作)の各操作段階における、シフトポジション(図4では「D」等)、車速(図4では「>0」等)、操舵角(図4では「≒」)、及び、車両1の移動状態(図4では「停車時間<1s」等)を特定する情報を含んでいる。   The operation stage information includes shift position (such as “D” in FIG. 4), vehicle speed (such as “> 0” in FIG. 4), steering, and the like in each operation stage of the parking operation of the vehicle 1 (reverse parking operation in the present embodiment). Information that specifies the corner (“≈” in FIG. 4) and the moving state of the vehicle 1 (“stop time <1 s” in FIG. 4) is included.

また、視界情報は、車両1の駐車操作の各操作段階においてドライバが視認する必要性の高い方向を示す視界方向情報(図4では「駐車枠側画像」等)、ドライバが視認する必要性の高い少なくとも2つの方向がある操作段階においてそれらの各方向の映像を表示する表示手法を示す表示手法情報(図4では「同時表示」等)、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率(図4では「a:b=1:2」等)を特定した比率情報、及び、ドライバが視認する必要性のより高い方向の映像がより長くディスプレイ14に表示されるように設定された各方向の映像の表示時間(図4では「b=1sec」等)を特定した表示時間情報を含んでいる。視界情報に含まれるこれらの各情報は、車両1の駐車操作の各操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データに基づき、予め決定されている。   Further, the visibility information includes visibility direction information (such as “parking frame side image” in FIG. 4) indicating a direction in which the driver needs to be visually recognized at each operation stage of the parking operation of the vehicle 1, Display method information (such as “simultaneous display” in FIG. 4) indicating a display method for displaying an image in each direction in an operation stage having at least two high directions, and a video in a higher direction that the driver needs to visually recognize. Ratio information specifying the display size ratio (“a: b = 1: 2” in FIG. 4 etc.) of the video in each direction set to be displayed on the display 14 larger, and the necessity of visual recognition by the driver The display time information specifying the display time of the video in each direction (such as “b = 1 sec” in FIG. 4) set so that the video in the higher direction is displayed on the display 14 for a longer time is included. Each of these pieces of information included in the visibility information is determined in advance at each operation stage of the parking operation of the vehicle 1 based on visual action data that specifies a direction with a high rate of visual recognition by a driver excellent in parking operation.

次に、図5乃至図8により、図4に示した視界情報テーブル26に格納されている操作段階情報及び視界情報の内容を詳細に説明する。
図5乃至図8は、車両の進行方向左側にある駐車枠に車両を後退駐車させる駐車操作の各操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データを示す図である。これらの図5乃至図8に示す視認行動データは、本発明の実施形態による車両用映像表示が適用されていない従来の車両を使用して、駐車操作に優れた複数の上級ドライバに駐車操作を複数回実行させ、各駐車操作において各ドライバが視認した方向を検出することにより取得されたものである。ドライバが視認する方向には、左ミラー方向、右ミラー方向、左後方向、右後方向、及び、後方向が含まれる。
Next, the operation stage information and the contents of the view information stored in the view information table 26 shown in FIG. 4 will be described in detail with reference to FIGS.
FIG. 5 to FIG. 8 show the visual action data specifying the direction in which the driver who is excellent in the parking operation visually recognizes the high direction at each operation stage of the parking operation in which the vehicle is parked backward in the parking frame on the left side in the traveling direction of the vehicle. FIG. These visual action data shown in FIG. 5 to FIG. 8 use a conventional vehicle to which the vehicle image display according to the embodiment of the present invention is not applied, and perform parking operation to a plurality of advanced drivers excellent in parking operation. It is obtained by detecting the direction visually recognized by each driver in each parking operation. The direction visually recognized by the driver includes a left mirror direction, a right mirror direction, a left rear direction, a right rear direction, and a rear direction.

図5は、車両の駐車操作の操作段階のうち、車両が駐車枠の前方を横切るように前進し、その後停止するまでの操作段階(以下「前進段階」という)における視認行動データを示す図であり、図5(a)は前進段階に含まれる3つの操作段階を車両の走行軌跡上に示す平面図、図5(b)は前進段階における視認率の時間変化を示す線図である。ここで、視認率とは、複数の上級ドライバに駐車操作を複数回実行させ、ドライバの視認方向を検出する検出周期毎に、各方向を視認していたドライバの延べ人数の割合を視認方向毎に百分率で表した数値であり、図5(b)に示す線図は、その視認率を時系列でプロットしたものである(図6乃至図8についても同じ)。   FIG. 5 is a diagram showing visual action data in an operation stage (hereinafter referred to as “advance stage”) until the vehicle moves forward so as to cross the front of the parking frame and then stops, among the operation stages of the parking operation of the vehicle. FIG. 5 (a) is a plan view showing three operation stages included in the forward stage on the traveling locus of the vehicle, and FIG. 5 (b) is a diagram showing a change with time in the visibility in the forward stage. Here, the visual recognition rate means that the ratio of the total number of drivers who are visually recognizing each direction is detected for each visual recognition direction for each detection cycle in which a plurality of senior drivers execute a parking operation multiple times and the visual recognition direction of the driver is detected. The graph shown in FIG. 5B is a plot of the visibility in time series (the same applies to FIGS. 6 to 8).

まず、図5(a)に示すように、前進段階は、駐車枠の前方に向かって車両を直進させる操作段階I、車両が駐車枠から離れる方向に向かって操舵角を増加させる操作段階II、及び、操舵角を維持したまま車両を旋回させる操作段階IIIの3つの操作段階を含む。   First, as shown in FIG. 5A, the forward stage includes an operation stage I for moving the vehicle straight toward the front of the parking frame, an operation stage II for increasing the steering angle in a direction in which the vehicle moves away from the parking frame, And three operation stages of an operation stage III in which the vehicle turns while maintaining the steering angle.

次に、図5(b)に示すように、駐車枠の前方に向かって車両を直進させる操作段階Iでは、左ミラー方向の視認率が最も高くなっている。すなわち、上級ドライバの多くは、進行方向左側にある駐車枠の前方に向かって車両を直進させる際に、左ミラー方向を視認することにより、車両の左前方向を直接視認し、あるいは左ミラーを介して車両の左後方向を間接的に視認して、駐車枠の状況や隣接駐車車両との距離を把握している。したがって、駐車枠の前方に向かって車両を直進させる操作段階Iにおいては、ドライバにとって、駐車枠方向を視認する必要性が高いものと考えられる。   Next, as shown in FIG. 5B, in the operation stage I in which the vehicle moves straight toward the front of the parking frame, the visibility rate in the left mirror direction is the highest. In other words, many of the advanced drivers see the left mirror direction directly when viewing the vehicle straight ahead toward the front of the parking frame on the left in the traveling direction, or directly view the left front direction of the vehicle, or via the left mirror. By indirectly viewing the left rear direction of the vehicle, the situation of the parking frame and the distance to the adjacent parked vehicle are grasped. Therefore, in the operation stage I in which the vehicle moves straight toward the front of the parking frame, it is considered that the driver needs to visually recognize the parking frame direction.

そこで、図4に示すように、視界情報テーブル26には、駐車枠の前方に向かって車両を直進させる操作段階Iにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「駐車枠方向」が格納されている。
この操作段階Iについては、ドライバが視認する必要性の高い方向が「駐車枠方向」の1方向であるので、視界情報テーブル26には、ドライバが視認する必要性の高い少なくとも2つの方向があることを前提とする表示手法情報、比率情報、及び、表示時間情報が格納されていない(図4では「−」)。
Therefore, as shown in FIG. 4, the view information table 26 includes “parking frame information” as the view direction information indicating the direction in which the driver needs to visually recognize in the operation stage I of moving the vehicle straight toward the front of the parking frame. "Direction" is stored.
For this operation stage I, since the direction in which the driver needs to visually recognize is one direction of “parking frame direction”, the visibility information table 26 has at least two directions in which the driver needs to visually recognize. Display method information, ratio information, and display time information on the premise of this are not stored ("-" in FIG. 4).

また、図5(b)に示すように、車両が駐車枠から離れる方向に向かって操舵角を増加させる操作段階IIでは、右ミラー方向の視認率が最も高くなっている。すなわち、上級ドライバの多くは、車両が進行方向左側にある駐車枠から離れる方向(すなわち右方向)に向かって操舵角を増加させる際に、右ミラー方向を視認することにより、したがって、車両が駐車枠から離れる方向に向かって操舵角を増加させる操作段階IIにおいては、ドライバにとって、駐車枠とは反対側のミラーを介して車両後方を視認する必要性が高いものと考えられる。さらに、この操作段階IIでは、上述した操作段階Iと同様に、左ミラー方向の視認率が高い水準にある。したがって、この操作段階IIにおいても、ドライバにとって、駐車枠方向を視認する必要性が高いものと考えられる。   In addition, as shown in FIG. 5B, in the operation stage II in which the steering angle is increased in the direction in which the vehicle moves away from the parking frame, the visibility rate in the right mirror direction is the highest. That is, many of the advanced drivers visually recognize the right mirror direction when the steering angle is increased toward the direction away from the parking frame on the left side of the traveling direction (that is, the right direction). In the operation stage II in which the steering angle is increased in the direction away from the frame, it is considered that the driver needs to visually recognize the rear of the vehicle through the mirror on the side opposite to the parking frame. Further, in the operation stage II, as in the operation stage I described above, the visibility in the left mirror direction is at a high level. Therefore, also in this operation stage II, it is considered that the driver needs to visually recognize the parking frame direction.

そこで、図4に示すように、視界情報テーブル26には、車両が駐車枠から離れる方向に向かって操舵角を増加させる操作段階IIにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)駐車枠方向」及び「(b)駐車枠反対側ミラー方向」が格納されている。   Therefore, as shown in FIG. 4, the view information table 26 includes view direction information indicating the direction that the driver needs to visually recognize in the operation stage II in which the steering angle is increased toward the direction away from the parking frame. , “(A) Parking frame direction” and “(b) Parking frame opposite side mirror direction” are stored.

このように、操作段階IIでは、ドライバが視認する必要性の高い2つの方向として、「(a)駐車枠方向」及び「(b)駐車枠反対側ミラー方向」が存在する。ドライバにとっては、これらの2つの方向の映像を同時に且つ直感的に確認できることが望ましい。そこで、図4に示すように、視界情報テーブル26には、車両が駐車枠から離れる方向に向かって操舵角を増加させる操作段階IIにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、「左右並列」が格納されている。この表示手法情報は、車両の左右方向のうち、一方の方向である「(a)駐車枠方向」の映像と、他方の方向である「(b)駐車枠反対側ミラー方向」の映像とを、ディスプレイ14に左右並列に表示させることを示している。   Thus, in the operation stage II, “(a) parking frame direction” and “(b) parking frame opposite mirror direction” exist as two directions that are highly necessary for the driver to visually recognize. It is desirable for the driver to be able to confirm the images in these two directions simultaneously and intuitively. Therefore, as shown in FIG. 4, in the visibility information table 26, images in each direction that are highly necessary for the driver to visually recognize in the operation stage II in which the steering angle is increased in the direction away from the parking frame are displayed. As the display method information indicating the display method, “left-right parallel” is stored. This display method information includes an image of “(a) parking frame direction” which is one of the left and right directions of the vehicle and an image of “(b) mirror direction opposite to the parking frame” which is the other direction. , The display 14 is displayed in parallel on the left and right.

また、図5(b)に示すように、操作段階IIでは、右ミラー方向の視認率が左ミラー方向の視認率よりも高い。すなわち、操作段階IIにおいて、ドライバにとっては、駐車枠とは反対側のミラーを介して車両後方を視認する必要性の方が駐車枠方向を視認する必要性よりも高いと考えられる。そこで、図4に示すように、視界情報テーブル26には、車両が駐車枠から離れる方向に向かって操舵角を増加させる操作段階IIにおいて、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報として、「a:b=1:2」が格納されている。この比率情報は、「(a)駐車枠方向」の映像に対して「(b)駐車枠反対側ミラー方向」の映像が2倍のサイズとなるようにディスプレイ14に表示させることを示している。   Further, as shown in FIG. 5B, in the operation stage II, the visibility rate in the right mirror direction is higher than the visibility rate in the left mirror direction. That is, in the operation stage II, it is considered that the necessity for visually recognizing the rear side of the vehicle via the mirror opposite to the parking frame is higher than the necessity for visually recognizing the parking frame direction. Therefore, as shown in FIG. 4, in the visibility information table 26, an image in a direction that is more necessary for the driver to visually recognize in the operation stage II in which the steering angle is increased toward the direction away from the parking frame. “A: b = 1: 2” is stored as the ratio information specifying the display size ratio of the video in each direction which is set to be largely displayed on the display 14. This ratio information indicates that the image of “(b) mirror direction opposite to the parking frame” is displayed on the display 14 so as to be twice the size of the image of “(a) parking frame direction”. .

また、図5(b)に示すように、操舵角を維持したまま車両を旋回させる操作段階IIIでは、左後方向の視認率が最も高くなっている。すなわち、上級ドライバの多くは、操舵角を維持したまま車両を旋回させる際に、左後方向を直接視認することにより、駐車枠の方向を確認している。したがって、操舵角を維持したまま車両を旋回させる操作段階IIIにおいては、ドライバにとって、駐車枠側後方向を視認する必要性が高いものと考えられる。さらに、この操作段階IIIでは、左ミラー方向及び右ミラー方向の視認率も依然として高い水準にある。したがって、この操作段階IIIにおいては、ドライバにとって、駐車枠側のミラーを介した車両後方、及び、駐車枠とは反対側のミラーを介した車両後方を視認する必要性も高いと考えられる。   Further, as shown in FIG. 5B, in the operation stage III in which the vehicle is turned while maintaining the steering angle, the left rearward visibility is the highest. That is, many advanced drivers confirm the direction of the parking frame by directly viewing the left rear direction when turning the vehicle while maintaining the steering angle. Therefore, in the operation stage III in which the vehicle turns while maintaining the steering angle, it is considered that the driver needs to visually recognize the parking frame side rear direction. Furthermore, in this operation stage III, the visibility in the left mirror direction and the right mirror direction is still at a high level. Therefore, in this operation stage III, it is considered that the driver needs to visually recognize the rear of the vehicle through the mirror on the parking frame side and the rear of the vehicle through the mirror on the opposite side of the parking frame.

そこで、図4に示すように、視界情報テーブル26には、操舵角を維持したまま車両を旋回させる操作段階IIIにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)駐車枠反対側ミラー方向」、「(b)駐車枠側ミラー方向」及び「(c)駐車枠側後方向」が格納されている。   Therefore, as shown in FIG. 4, the view information table 26 includes “(a) as view direction information indicating the direction that the driver needs to visually recognize in the operation stage III of turning the vehicle while maintaining the steering angle. “Parking frame opposite mirror direction”, “(b) parking frame side mirror direction” and “(c) parking frame side rear direction” are stored.

このように、操作段階IIIでは、ドライバが視認する必要性の高い3つの方向として、「(a)駐車枠反対側ミラー方向」、「(b)駐車枠側ミラー方向」及び「(c)駐車枠側後方向」が存在する。ドライバにとっては、これらの3つの方向の映像を同時に確認できることが望ましいが、3つの方向の映像が同時に表示された場合、これらの映像全てを確実に把握することが難しい可能性があるので、ディスプレイ14に同時に表示させる映像は2つ以下に抑えたいという要望がある。また、車両の左右方向のうち、同一の方向の映像を左右に並列表示すると、各映像がどの方向の映像を示しているのか直感的に分かり難い可能性がある。そこで、図4に示すように、視界情報テーブル26には、操舵角を維持したまま車両を旋回させる操作段階IIIにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、「aとb又はcとを左右並列、bとcとを時間切替」が格納されている。この表示手法情報は、車両の左右方向のうち、一方の方向である「(a)駐車枠反対側ミラー方向」の映像と、他方の方向である「(b)駐車枠側ミラー方向」又は「(c)駐車枠側後方向」の何れかの映像とを、ディスプレイ14に左右並列に表示させ、且つ、車両の同じ側の方向である「(b)駐車枠側ミラー方向」及び「(c)駐車枠側後方向」の映像を所定の周期で交互に切り替えてディスプレイ14の同じ位置に表示させることを示している。   In this way, in the operation stage III, three directions that are highly necessary for the driver to visually recognize are as follows: “(a) Mirror direction opposite to parking frame”, “(b) Mirror direction on parking frame side” and “(c) Parking”. "Frame side rear direction" exists. It is desirable for the driver to be able to check the images in these three directions at the same time. However, if images in the three directions are displayed at the same time, it may be difficult to reliably grasp all of these images. There is a desire to limit the number of images simultaneously displayed on 14 to two or less. In addition, when images in the same direction among the left and right directions of the vehicle are displayed side by side, it may be difficult to intuitively understand which direction each image indicates. Therefore, as shown in FIG. 4, the view information table 26 shows a display method for displaying video in each direction that is highly necessary for the driver to visually recognize in the operation stage III of turning the vehicle while maintaining the steering angle. As technique information, “a and b or c are paralleled in the left and right direction, and b and c are switched in time” is stored. The display method information includes an image of “(a) parking frame opposite mirror direction” which is one of the left and right directions of the vehicle and “(b) parking frame side mirror direction” which is the other direction. (C) Any image of “parking frame side rear direction” is displayed on the display 14 side by side in parallel and “(b) parking frame side mirror direction” and “(c ) “Parking frame side rear direction” images are alternately switched at a predetermined cycle and displayed at the same position on the display 14.

また、図5(b)に示すように、操作段階IIIでは、左後方向の視認率が、右ミラー方向及び左ミラー方向の視認率よりも高い。すなわち、操作段階IIIにおいて、ドライバにとっては、駐車枠側後方向を視認する必要性の方が、駐車枠反対側ミラー方向又は駐車枠側ミラー方向を視認する必要性よりも高いと考えられる。そこで、図4に示すように、視界情報テーブル26には、操舵角を維持したまま車両を旋回させる操作段階IIIにおいて、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報として、「a:(b,c)=1:2」が格納されている。この比率情報は、「(a)駐車枠反対側ミラー方向」の映像に対して「(b)駐車枠側ミラー方向」又は「(c)駐車枠側後方向」の映像が2倍のサイズでディスプレイ14に表示されることを示している。   Further, as shown in FIG. 5B, in the operation stage III, the visibility rate in the left rear direction is higher than the visibility rates in the right mirror direction and the left mirror direction. That is, in the operation stage III, it is considered that the necessity for visually recognizing the parking frame side rear direction is higher than the necessity for visually recognizing the parking frame side mirror direction or the parking frame side mirror direction. Therefore, as shown in FIG. 4, in the view information table 26, an image in a direction that is more necessary for the driver to visually recognize is displayed on the display 14 in an operation stage III in which the vehicle turns while maintaining the steering angle. “A: (b, c) = 1: 2” is stored as ratio information specifying the display size ratio of the video in each direction set as described above. This ratio information indicates that the video of “(b) parking frame side mirror direction” or “(c) parking frame side rear direction” is twice the size of the video of “(a) parking frame opposite mirror direction”. It is displayed on the display 14.

さらに、図4に示すように、視界情報テーブル26には、操舵角を維持したまま車両を旋回させる操作段階IIIにおいて、ドライバが視認する必要性のより高い方向の映像がより長くディスプレイ14に表示されるように設定された各方向の映像の表示時間を特定した表示時間情報として、「b=1sec」及び「c=2sec」が格納されている。この表示時間情報は、ディスプレイ14に「(b)駐車枠側ミラー方向」の映像を1秒間表示し、次に「(c)駐車枠側後方向」の映像を2秒間表示するサイクルを繰り返すことを示している。   Further, as shown in FIG. 4, in the view information table 26, an image in a direction that is more necessary for the driver to visually recognize is displayed on the display 14 longer in the operation stage III in which the vehicle is turned while maintaining the steering angle. “B = 1 sec” and “c = 2 sec” are stored as display time information specifying the display time of the video in each direction set as described above. For this display time information, the display 14 displays a video of “(b) parking frame side mirror direction” for 1 second, and then repeats a cycle of displaying “(c) parking frame side rear direction” video for 2 seconds. Is shown.

次に、図6は、車両の駐車操作の操作段階のうち、図5を参照して説明した前進段階の後に車両が停止している間の操作段階(以下「停車段階」という)における視認行動データを示す図であり、図6(a)は停車段階にある車両を示す平面図、図6(b)は停車段階における視認率の時間変化を示す線図である。   Next, FIG. 6 shows a visual behavior in an operation stage (hereinafter referred to as “stop stage”) while the vehicle is stopped after the forward stage described with reference to FIG. 5 among the operation stages of the parking operation of the vehicle. FIG. 6A is a plan view showing a vehicle in a stopping stage, and FIG. 6B is a diagram showing a change in visibility rate with time in the stopping stage.

図6(a)に示した車両の停車段階は、図6(b)に示すように、前進段階の最後に車両が停止してから1秒経過するまでの間の操作段階IV、及び、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vの2つの操作段階を含む。   As shown in FIG. 6B, the stopping stage of the vehicle shown in FIG. 6A includes an operation stage IV and a forward stage from the end of the forward stage until 1 second has passed since the vehicle stopped. It includes two operation stages of operation stage V from the end of the stage until the vehicle starts to move backward after 1 second has elapsed since the vehicle stopped.

図6(b)に示すように、前進段階の最後に車両が停止してから1秒経過するまでの間の操作段階IVでは、左ミラー方向、右ミラー方向、及び、左後方向のそれぞれの視認率が、図5を参照して説明した操作段階IIIにおける視認率と同程度になっている。すなわち、この操作段階IVでも、上級ドライバの多くは、停車後に、左後方向を直接視認し、あるいは左ミラーを介して車両の左後方向を視認することにより、駐車枠の方向を確認し、右ミラー方向を視認することにより、右ミラーを介して車両の右後方向を間接的に視認し、車両の旋回方向後方からの接近物を確認している。したがって、この操作段階IVにおいては、ドライバにとって、駐車枠側のミラーを介した車両後方、駐車枠とは反対側のミラーを介した車両後方、及び、駐車枠側後方向を視認する必要性が高いものと考えられる。   As shown in FIG. 6B, in the operation stage IV after the vehicle stops at the end of the forward stage until 1 second elapses, each of the left mirror direction, the right mirror direction, and the left rear direction The visibility rate is substantially the same as the visibility rate in the operation stage III described with reference to FIG. That is, even in this operation stage IV, many advanced drivers confirm the direction of the parking frame by directly viewing the left rear direction after stopping or by visually confirming the left rear direction of the vehicle through the left mirror, By visually recognizing the right mirror direction, the right rear direction of the vehicle is indirectly visually recognized through the right mirror, and an approaching object from behind the turning direction of the vehicle is confirmed. Therefore, in this operation stage IV, it is necessary for the driver to visually recognize the vehicle rear via the parking frame side mirror, the vehicle rear via the mirror opposite to the parking frame, and the parking frame side rear direction. It is considered expensive.

そこで、図4に示すように、視界情報テーブル26には、前進段階の最後に車両が停止してから1秒経過するまでの間の操作段階IVにおいてドライバが視認する必要性の高い方向を示す視界情報として、操作段階IIIと同様の情報が格納されている。すなわち、視界方向情報として「(a)駐車枠反対側ミラー方向」、「(b)駐車枠側ミラー方向」及び「(c)駐車枠側後方向」が格納され、表示手法情報として「aとb又はcとを左右並列、bとcとを時間切替」が格納され、比率情報として、「a:(b,c)=1:2」が格納され、表示時間情報として「b=1sec」及び「c=2sec」が格納されている。   Therefore, as shown in FIG. 4, the visibility information table 26 indicates a direction in which the driver needs to visually recognize in the operation stage IV from when the vehicle stops at the end of the forward stage until 1 second elapses. Information similar to that in the operation stage III is stored as the visibility information. That is, “(a) parking frame opposite mirror direction”, “(b) parking frame side mirror direction” and “(c) parking frame side rear direction” are stored as view direction information, and “a and "b or c is paralleled in the left-right direction and b and c are switched in time" is stored, "a: (b, c) = 1: 2" is stored as the ratio information, and "b = 1 sec" is displayed as the display time information. And “c = 2 sec” are stored.

また、図6(b)に示すように、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vでは、右ミラー方向の視認率が最も高くなっている。すなわち、上級ドライバの多くは、車両を駐車枠に向かって後退させる前に、右ミラー方向を視認することにより、右ミラーを介して車両の右後方向を間接的に視認し、車両の旋回方向外側からの接近物を確認している。したがって、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vにおいては、ドライバにとって、駐車枠とは反対側のミラーを介して車両後方を視認する必要性が高いものと考えられる。さらに、この操作段階Vでは、左ミラー方向、及び、左後方向の視認率が高い水準にある。したがって、この操作段階Vにおいては、ドライバにとって、駐車枠側のミラーを介した車両後方、及び、駐車枠側後方向を視認する必要性も高いものと考えられる。   In addition, as shown in FIG. 6B, in the operation stage V after 1 second has elapsed since the vehicle stopped at the end of the forward stage and until the vehicle starts to move backward, the visibility rate in the right mirror direction is It is the highest. That is, many of the advanced drivers visually recognize the right rear direction of the vehicle through the right mirror by visually recognizing the right mirror direction before the vehicle is moved backward toward the parking frame. The approaching object from the outside is confirmed. Therefore, in the operation stage V after 1 second has elapsed since the vehicle stopped at the end of the forward stage and before the vehicle starts to move backward, the driver can rearward the vehicle via the mirror on the side opposite to the parking frame. It is considered that there is a high need for visual recognition. Further, in this operation stage V, the visibility rate in the left mirror direction and the left rear direction is at a high level. Therefore, in this operation stage V, it is considered that the driver needs to visually recognize the vehicle rear and the parking frame side rear direction through the parking frame side mirror.

そこで、図4に示すように、視界情報テーブル26には、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)駐車枠反対側ミラー方向」、「(b)駐車枠側ミラー方向」及び「(c)駐車枠側後方向」が格納されている。   Therefore, as shown in FIG. 4, in the visibility information table 26, the driver visually recognizes in the operation stage V after 1 second has elapsed since the vehicle stopped at the end of the forward stage and until the vehicle starts moving backward. “(A) Parking frame opposite mirror direction”, “(b) Parking frame side mirror direction”, and “(c) Parking frame side rear direction” are stored as the visibility direction information indicating the highly necessary direction. .

このように、操作段階Vでは、図5を参照して説明した操作段階IIIと同様に、ドライバが視認する必要性の高い3つの方向として、「(a)駐車枠反対側ミラー方向」、「(b)駐車枠側ミラー方向」及び「(c)駐車枠側後方向」が存在する。すなわち、図4に示すように、視界情報テーブル26には、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、操作段階IIIと同様に、「aとb又はcとを左右並列、bとcとを時間切替」が格納されている。   As described above, in the operation stage V, as in the operation stage III described with reference to FIG. 5, the three directions that are highly necessary for the driver to visually recognize are as follows: “(a) Mirror direction opposite to parking frame”, “ “(B) Parking frame side mirror direction” and “(c) Parking frame side rear direction” exist. That is, as shown in FIG. 4, in the visibility information table 26, the driver visually recognizes in the operation stage V after 1 second has elapsed since the vehicle stopped at the end of the forward stage and until the vehicle starts moving backward. As display method information indicating a display method for displaying video in each direction with high necessity, “a and b or c are paralleled in the left and right, and time switching between b and c” is stored as in the operation stage III. Yes.

また、図6(b)に示すように、操作段階Vでは、右ミラー方向の視認率が、左後方向及び左ミラー方向の視認率よりも高い。すなわち、操作段階Vにおいて、ドライバにとっては、駐車枠反対側ミラー方向を視認する必要性の方が、駐車枠側後方向又は駐車枠側ミラー方向を視認する必要性よりも高いと考えられる。そこで、図4に示すように、視界情報テーブル26には、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vにおいて、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報として、「a:(b,c)=2:1」が格納されている。この比率情報は、「(b)駐車枠側ミラー方向」又は「(c)駐車枠側後方向」の映像に対して「(a)駐車枠反対側ミラー方向」の映像が2倍のサイズでディスプレイ14に表示されることを示している。   As shown in FIG. 6B, in the operation stage V, the visibility rate in the right mirror direction is higher than the visibility rates in the left rear direction and the left mirror direction. That is, in the operation stage V, it is considered that the driver needs to visually recognize the parking frame opposite mirror direction than the necessity to visually recognize the parking frame side rear direction or the parking frame side mirror direction. Therefore, as shown in FIG. 4, the visibility information table 26 shows that the driver visually recognizes in the operation stage V after 1 second has elapsed since the vehicle stopped at the end of the forward stage and until the vehicle starts moving backward. As the ratio information specifying the display size ratio of the video in each direction set so that the video in the higher direction that is more necessary to be displayed on the display 14 is “a: (b, c) = 2: 1”. Is stored. This ratio information indicates that the video of “(a) parking frame side mirror direction” is twice the size of the video of “(b) parking frame side mirror direction” or “(c) parking frame side rear direction”. It is displayed on the display 14.

また、図6(b)に示すように、操作段階Vでは、左後方向の視認率と左ミラー方向の視認率とはほぼ同程度である。すなわち、操作段階Vにおいて、ドライバにとっては、駐車枠側後方向を視認する必要性と駐車枠側ミラー方向を視認する必要性とは同程度であると考えられる。そこで、図4に示すように、視界情報テーブル26には、前進段階の最後に車両が停止してから1秒経過後、車両が後退を開始するまでの間の操作段階Vにおいて、ドライバが視認する必要性のより高い方向の映像がより長くディスプレイ14に表示されるように設定された各方向の映像の表示時間を特定した表示時間情報として、「b=2sec」及び「c=2sec」が格納されている。この表示時間情報は、ディスプレイ14に「(b)駐車枠側ミラー方向」の映像を2秒間表示し、次に「(c)駐車枠側後方向」の映像を2秒間表示するサイクルを繰り返すことを示している。   In addition, as shown in FIG. 6B, in the operation stage V, the left rear direction visibility rate and the left mirror direction visibility rate are substantially the same. That is, at the operation stage V, it is considered that the necessity for visually recognizing the parking frame side rear direction and the necessity for visually recognizing the parking frame side mirror direction are the same for the driver. Therefore, as shown in FIG. 4, the visibility information table 26 shows that the driver visually recognizes in the operation stage V after 1 second has elapsed since the vehicle stopped at the end of the forward stage and until the vehicle starts moving backward. “B = 2 sec” and “c = 2 sec” are displayed as the display time information specifying the display time of the video in each direction set so that the video in the higher direction is displayed on the display 14 for a longer time. Stored. This display time information is obtained by repeating a cycle in which an image of “(b) parking frame side mirror direction” is displayed on the display 14 for 2 seconds and then a video of “(c) parking frame side rear direction” is displayed for 2 seconds. Is shown.

次に、図7は、車両の駐車操作の操作段階のうち、図6を参照して説明した停車段階の後に車両を後退させ駐車枠内に進入させる操作段階(以下「後退段階」という)における視認行動データを示す図であり、図7(a)は後退段階に含まれる3つの操作段階を車両の走行軌跡上に示す平面図、図7(b)は後退段階における視認率の時間変化を示す線図である。   Next, FIG. 7 shows an operation stage (hereinafter referred to as “reverse stage”) in which the vehicle is moved backward and entered into the parking frame after the stop stage described with reference to FIG. FIG. 7A is a plan view showing three operation stages included in the reverse stage on the traveling locus of the vehicle, and FIG. 7B is a graph showing the time change of the visibility rate in the reverse stage. FIG.

まず、図7(a)に示すように、後退段階は、上述した前進段階において車両が駐車枠から離れる方向に増加した操舵角を減少させながら車両を後退させる操作段階VI、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる操作段階VII、及び、操舵角を維持したまま車両を後退させる操作段階VIIIの3つの操作段階を含む。   First, as shown in FIG. 7 (a), the reverse stage includes an operation stage VI in which the vehicle is moved backward while reducing the steering angle increased in the direction in which the vehicle is separated from the parking frame in the forward stage described above, and the vehicle is moved to the parking frame. It includes three operation stages: an operation stage VII in which the vehicle is moved backward while increasing the steering angle, and an operation stage VIII in which the vehicle is moved backward while maintaining the steering angle.

次に、図7(b)に示すように、前進段階において車両が駐車枠から離れる方向に増加した操舵角を減少させながら車両を後退させる操作段階VIでは、左後方向の視認率と左ミラー方向の視認率とが同程度に高くなっている。すなわち、上級ドライバの多くは、前進段階において車両が駐車枠から離れる方向に増加した操舵角を減少させながら車両を後退させる際に、左後方向を直接視認し、あるいは、左ミラーを介して左後方向を間接的に視認することにより、車両が駐車枠の中央に向かって後退しているかどうかを確認している。したがって、前進段階において車両が駐車枠から離れる方向に増加した操舵角を減少させながら車両を後退させる操作段階VIにおいては、ドライバにとって、駐車枠側ミラー方向及び駐車枠側後方向を視認する必要性が高いものと考えられる。   Next, as shown in FIG. 7B, in the operation stage VI in which the vehicle moves backward while decreasing the steering angle increased in the direction in which the vehicle moves away from the parking frame in the forward stage, the left rear direction visibility rate and the left mirror Directional visibility is as high as that. That is, many of the advanced drivers directly view the left rear direction when the vehicle is moved backward while decreasing the steering angle that increases in the direction in which the vehicle moves away from the parking frame in the forward stage, or left through the left mirror. By visually recognizing the backward direction, it is confirmed whether the vehicle is moving backward toward the center of the parking frame. Therefore, in the operation stage VI in which the vehicle is moved backward while reducing the steering angle increased in the direction in which the vehicle moves away from the parking frame in the forward stage, it is necessary for the driver to visually recognize the parking frame side mirror direction and the parking frame side rear direction. Is considered high.

そこで、図4に示すように、視界情報テーブル26には、前進段階において車両が駐車枠から離れる方向に増加した操舵角を減少させながら車両を後退させる操作段階VIにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)駐車枠側ミラー方向」及び「(b)駐車枠側後方向」が格納されている。   Therefore, as shown in FIG. 4, the visibility information table 26 indicates that the driver needs to visually recognize in the operation stage VI in which the vehicle is moved backward while reducing the steering angle that is increased in the direction of moving away from the parking frame in the forward stage. “(A) Parking frame side mirror direction” and “(b) Parking frame side rear direction” are stored as the visibility direction information indicating the high direction.

このように、操作段階VIでは、ドライバが視認する必要性が同程度に高い2つの方向として、「(a)駐車枠側ミラー方向」及び「(b)駐車枠側後方向」が存在する。ドライバにとっては、これらの2つの方向の映像を直感的に確認できることが望ましい。そこで、図4に示すように、視界情報テーブル26には、前進段階において車両が駐車枠から離れる方向に増加した操舵角を減少させながら車両を後退させる操作段階VIにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、「時間切替」が格納されている。この表示手法情報は、車両の同じ側の方向である「(a)駐車枠側ミラー方向」及び「(b)駐車枠側後方向」の映像を所定の周期で交互に切り替えてディスプレイ14の同じ位置に表示させることを示している。   As described above, in the operation stage VI, “(a) parking frame side mirror direction” and “(b) parking frame side rear direction” exist as two directions that are almost equally necessary to be visually recognized by the driver. It is desirable for the driver to be able to intuitively check the images in these two directions. Therefore, as shown in FIG. 4, the visibility information table 26 indicates that the driver needs to visually recognize in the operation stage VI in which the vehicle is moved backward while reducing the steering angle that is increased in the direction of moving away from the parking frame in the forward stage. “Time switching” is stored as display method information indicating a display method for displaying images in high directions. This display method information is the same on the display 14 by alternately switching images of “(a) parking frame side mirror direction” and “(b) parking frame side rear direction” which are directions on the same side of the vehicle at a predetermined cycle. This indicates that it is displayed at the position.

さらに、図4に示すように、視界情報テーブル26には、操作段階VIにおいてドライバが視認する必要性のより高い方向の映像がより長くディスプレイ14に表示されるように設定された各方向の映像の表示時間を特定した表示時間情報として、「a=2sec」及び「b=2sec」が格納されている。この表示時間情報は、ディスプレイ14に「(a)駐車枠側ミラー方向」の映像を2秒間表示し、次に「(b)駐車枠側後方向」の映像を2秒間表示するサイクルを繰り返すことを示している。   Further, as shown in FIG. 4, in the view information table 26, the video in each direction set so that the video in the direction that is more necessary for the driver to visually recognize in the operation stage VI is displayed on the display 14 for a longer time. “A = 2 sec” and “b = 2 sec” are stored as the display time information specifying the display time of “. This display time information repeats a cycle in which a video of “(a) parking frame side mirror direction” is displayed on the display 14 for 2 seconds, and then a video of “(b) parking frame side rear direction” is displayed for 2 seconds. Is shown.

また、図7(b)に示すように、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる操作段階VIIでは、左ミラー方向の視認率と右ミラー方向の視認率とが高く、特に左ミラー方向の視認率が高くなっている。すなわち、上級ドライバの多くは、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる際に、主に、左ミラーを介して左後方向を間接的に視認することにより、車両の旋回内側に存在する隣接車両との距離を確認している。また、右ミラーを介して右後方向を間接的に視認することにより、車両の旋回外側の状況も確認している。したがって、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる操作段階VIIにおいては、ドライバにとって、駐車枠側ミラー方向及び駐車枠反対側ミラー方向を視認する必要性が高いものと考えられる。   In addition, as shown in FIG. 7B, in the operation stage VII in which the vehicle moves backward while increasing the steering angle in the direction toward the parking frame, the visibility rate in the left mirror direction and the visibility rate in the right mirror direction are High, especially the visibility in the left mirror direction is high. In other words, many of the advanced drivers mainly recognize the left rear direction indirectly through the left mirror when the vehicle is moved backward while increasing the steering angle in the direction toward the parking frame. The distance to the adjacent vehicle existing inside the turn is confirmed. In addition, the situation outside the turning of the vehicle is also confirmed by visually recognizing the right rear direction via the right mirror. Therefore, in the operation stage VII in which the vehicle moves backward while increasing the steering angle in the direction toward the parking frame, it is highly necessary for the driver to visually recognize the parking frame side mirror direction and the parking frame opposite mirror direction. Conceivable.

そこで、図4に示すように、視界情報テーブル26には、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる操作段階VIIにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)駐車枠反対側ミラー方向」及び「(b)駐車枠側ミラー方向」が格納されている。   Therefore, as shown in FIG. 4, the visibility information table 26 shows the visibility that indicates the direction that the driver needs to visually recognize in the operation stage VII in which the vehicle is moved backward while increasing the steering angle in the direction toward the parking frame. As the direction information, “(a) parking frame opposite mirror direction” and “(b) parking frame side mirror direction” are stored.

このように、操作段階VIIでは、ドライバが視認する必要性の高い2つの方向として、「(a)駐車枠反対側ミラー方向」及び「(b)駐車枠側ミラー方向」が存在する。ドライバにとっては、これらの2つの方向の映像を同時に且つ直感的に確認できることが望ましい。そこで、図4に示すように、視界情報テーブル26には、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる操作段階VIIにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、「左右並列」が格納されている。この表示手法情報は、車両の左右方向のうち、一方の方向である「(a)駐車枠反対側ミラー方向」の映像と、他方の方向である「(b)駐車枠側ミラー方向」の映像とを、ディスプレイ14に左右並列に表示させることを示している。   Thus, in the operation stage VII, “(a) parking frame opposite mirror direction” and “(b) parking frame side mirror direction” exist as two directions that are highly necessary for the driver to visually recognize. It is desirable for the driver to be able to confirm the images in these two directions simultaneously and intuitively. Therefore, as shown in FIG. 4, in the visibility information table 26, images in each direction that are highly necessary for the driver to visually recognize in the operation stage VII in which the vehicle is moved backward while increasing the steering angle in the direction toward the parking frame. As the display method information indicating the display method for displaying the “left and right parallel” is stored. This display method information includes an image of “(a) parking frame opposite mirror direction” which is one of the left and right directions of the vehicle and an image of “(b) parking frame side mirror direction” which is the other direction. Are displayed on the display 14 side by side in parallel.

また、図7(b)に示すように、操作段階VIIでは、左ミラー方向の視認率が右ミラー方向の視認率よりも高い。すなわち、操作段階VIIにおいて、ドライバにとっては、駐車枠側のミラーを介して車両後方を視認する必要性の方が駐車枠とは反対側のミラーを介して車両後方を視認する必要性よりも高いと考えられる。そこで、図4に示すように、視界情報テーブル26には、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる操作段階VIIにおいて、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報として、「a:b=1:2」が格納されている。この比率情報は、「(a)駐車枠反対側ミラー方向」の映像に対して「(b)駐車枠側ミラー方向」の映像が2倍のサイズとなるようにディスプレイ14に表示させることを示している。   Further, as shown in FIG. 7B, in the operation stage VII, the visibility rate in the left mirror direction is higher than the visibility rate in the right mirror direction. That is, in the operation stage VII, for the driver, the necessity of visually recognizing the rear of the vehicle via the mirror on the parking frame side is higher than the necessity of visually recognizing the rear of the vehicle via the mirror on the opposite side of the parking frame. it is conceivable that. Therefore, as shown in FIG. 4, in the visibility information table 26, in the operation stage VII in which the vehicle moves backward while increasing the steering angle in the direction toward the parking frame, the direction in which the driver needs to visually recognize is higher. “A: b = 1: 2” is stored as ratio information specifying the display size ratio of the video in each direction set so that the video is displayed larger on the display 14. This ratio information indicates that the image of “(b) parking frame side mirror direction” is displayed on the display 14 so that the video of “(b) parking frame side mirror direction” is twice as large as the video of “(a) parking frame side mirror direction”. ing.

また、図7(b)に示すように、操舵角を維持したまま車両を後退させる操作段階VIIIでは、左ミラー方向の視認率と右ミラー方向の視認率とが同程度に高くなっている。すなわち、上級ドライバの多くは、車両が駐車枠に向かう方向に操舵角を増加させながら車両を後退させる際に、左ミラーを介して左後方向を間接的に視認することにより、車両の旋回内側に存在する隣接車両との距離を確認し、且つ、右ミラーを介して右後方向を間接的に視認することにより、車両の旋回外側に存在する隣接車両との距離を確認している。したがって、操舵角を維持したまま車両を後退させる操作段階VIIIにおいては、ドライバにとって、駐車枠側ミラー方向及び駐車枠反対側ミラー方向を視認する必要性が高いものと考えられる。   Further, as shown in FIG. 7B, in the operation stage VIII in which the vehicle is moved backward while maintaining the steering angle, the visibility ratio in the left mirror direction and the visibility ratio in the right mirror direction are approximately the same. That is, many of the advanced drivers recognize the left rear direction indirectly through the left mirror when the vehicle is moved backward while increasing the steering angle in the direction toward the parking frame. The distance to the adjacent vehicle existing on the outside of the turn of the vehicle is confirmed by confirming the distance to the adjacent vehicle existing in the vehicle and indirectly viewing the right rear direction through the right mirror. Therefore, in the operation stage VIII in which the vehicle is moved backward while maintaining the steering angle, it is considered that the driver needs to visually recognize the parking frame side mirror direction and the parking frame opposite side mirror direction.

そこで、図4に示すように、視界情報テーブル26には、操舵角を維持したまま車両を後退させる操作段階VIIIにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)駐車枠反対側ミラー方向」及び「(b)駐車枠側ミラー方向」が格納されている。また、視界情報テーブル26には、操作段階VIIIにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、操作段階VIIと同様に「左右並列」が格納されている。   Therefore, as shown in FIG. 4, the view information table 26 includes “(a) as view direction information indicating the direction that the driver needs to visually recognize in the operation stage VIII of moving the vehicle backward while maintaining the steering angle. “Parking frame opposite mirror direction” and “(b) Parking frame side mirror direction” are stored. In the view information table 26, “left-right parallel” is stored as display method information indicating a display method for displaying video in each direction that is highly necessary for the driver to visually recognize in the operation stage VIII, as in the operation stage VII. ing.

また、図7(b)に示すように、操作段階VIIIでは、左ミラー方向の視認率と右ミラー方向の視認率とが同程度になっている。すなわち、操作段階VIIIにおいて、ドライバにとっては、駐車枠側のミラーを介して車両後方を視認する必要性と駐車枠とは反対側のミラーを介して車両後方を視認する必要性とが同程度に高いと考えられる。そこで、図4に示すように、視界情報テーブル26には、操舵角を維持したまま車両を後退させる操作段階VIIIにおいて、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報として、「a:b=1:1」が格納されている。この比率情報は、「(a)駐車枠反対側ミラー方向」の映像と「(b)駐車枠側ミラー方向」の映像とが同じサイズとなるようにディスプレイ14に表示させることを示している。   Further, as shown in FIG. 7B, in the operation stage VIII, the visibility rate in the left mirror direction and the visibility rate in the right mirror direction are approximately the same. That is, in the operation stage VIII, the driver needs to visually recognize the rear of the vehicle through the mirror on the parking frame side and the necessity to visually recognize the rear of the vehicle through the mirror on the opposite side of the parking frame. It is considered high. Therefore, as shown in FIG. 4, in the view information table 26, an image in a direction that is more necessary for the driver to visually recognize is displayed on the display 14 in an operation stage VIII in which the vehicle is moved backward while maintaining the steering angle. “A: b = 1: 1” is stored as the ratio information specifying the display size ratio of the video in each direction set as described above. This ratio information indicates that the video of “(a) parking frame side mirror direction” and the video of “(b) parking frame side mirror direction” are displayed on the display 14 so as to have the same size.

次に、図8は、車両の駐車操作の操作段階のうち、図7を参照して説明した後退段階の後に駐車枠内における車両の姿勢を調節する操作段階(以下「姿勢調節段階」という)における視認行動データを示す図であり、図8(a)は姿勢調節段階に含まれる2つの操作段階を車両の走行軌跡上に示す平面図、図8(b)は姿勢調節段階における視認率の時間変化を示す線図である。   Next, FIG. 8 shows an operation stage for adjusting the posture of the vehicle in the parking frame after the reverse stage described with reference to FIG. 7 among the operation stages of the parking operation of the vehicle (hereinafter referred to as “posture adjustment stage”). FIG. 8A is a plan view showing two operation stages included in the attitude adjustment stage on the traveling locus of the vehicle, and FIG. 8B is a view of the visibility rate in the attitude adjustment stage. It is a diagram which shows a time change.

まず、図8(a)に示すように、姿勢調節段階は、車両の前後方向が駐車枠の前後方向と平行になるように、操舵角を減少させながら車両を後退させる操作段階IX、及び、操舵角を中立に保持しながら車両を後退させる操作段階Xの2つの操作段階を含む。   First, as shown in FIG. 8 (a), in the posture adjustment stage, an operation stage IX for moving the vehicle backward while reducing the steering angle so that the longitudinal direction of the vehicle is parallel to the longitudinal direction of the parking frame, and It includes two operation stages, operation stage X, in which the vehicle is moved backward while maintaining the steering angle neutral.

次に、図8(b)に示すように、車両の前後方向が駐車枠の前後方向と平行になるように、操舵角を減少させながら車両を後退させる操作段階IXでは、左ミラー方向の視認率と右ミラー方向の視認率とが同程度に高くなっている。すなわち、上級ドライバの多くは、車両の前後方向が駐車枠の前後方向と平行になるように、操舵角を減少させながら車両を後退させる際に、左ミラーを介して左下後方向を間接的に視認することにより、車両の左側面と駐車枠の枠線とが平行であるかを確認し、且つ、右ミラーを介して右下後方向を間接的に視認することにより、車両の右側面と駐車枠の枠線とが平行であるかを確認している。したがって、車両の前後方向が駐車枠の前後方向と平行になるように、操舵角を減少させながら車両を後退させる操作段階IXにおいては、ドライバにとって、左ミラー下方向及び右ミラー下方向を視認する必要性が高いものと考えられる。   Next, as shown in FIG. 8B, in the operation stage IX in which the vehicle is moved backward while decreasing the steering angle so that the front-rear direction of the vehicle is parallel to the front-rear direction of the parking frame, the left mirror direction is visually recognized. The rate and the visibility rate in the right mirror direction are about the same. That is, many of the advanced drivers indirectly move the lower left rear direction via the left mirror when the vehicle is moved backward while reducing the steering angle so that the front and rear direction of the vehicle is parallel to the front and rear direction of the parking frame. By visually confirming whether the left side of the vehicle and the frame of the parking frame are parallel, and indirectly inspecting the lower right rear direction through the right mirror, It is confirmed whether the frame of the parking frame is parallel. Therefore, in the operation stage IX in which the vehicle is moved backward while reducing the steering angle so that the front-rear direction of the vehicle is parallel to the front-rear direction of the parking frame, the driver visually recognizes the left mirror lower direction and the right mirror lower direction. The necessity is considered high.

そこで、図4に示すように、視界情報テーブル26には、車両の前後方向が駐車枠の前後方向と平行になるように、操舵角を減少させながら車両を後退させる操作段階IXにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「(a)左ミラー下方向」及び「(b)右ミラー下方向」が格納されている。また、視界情報テーブル26には、操作段階IXにおいてドライバが視認する必要性の高い各方向の映像を表示する表示手法を示す表示手法情報として、操作段階VIIIと同様に「左右並列」が格納されている。   Therefore, as shown in FIG. 4, in the visibility information table 26, the driver visually recognizes in the operation stage IX in which the vehicle is moved backward while reducing the steering angle so that the front-rear direction of the vehicle is parallel to the front-rear direction of the parking frame. “(A) Left mirror downward direction” and “(b) Right mirror downward direction” are stored as the visual field direction information indicating the direction in which there is a high necessity to do this. Further, in the view information table 26, “left-right parallel” is stored as display method information indicating a display method for displaying a video in each direction that is highly necessary for the driver to visually recognize in the operation stage IX, as in the operation stage VIII. ing.

また、図8(b)に示すように、操作段階IXでは、左ミラー方向の視認率と右ミラー方向の視認率とが同程度になっている。すなわち、操作段階IXにおいて、ドライバにとっては、左ミラーを介して左下後方向を視認する必要性と右ミラーを介して右下後方向を視認する必要性とが同程度に高いと考えられる。そこで、図4に示すように、視界情報テーブル26には、車両の前後方向が駐車枠の前後方向と平行になるように、操舵角を減少させながら車両を後退させる操作段階IXにおいて、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報として、「a:b=1:1」が格納されている。この比率情報は、「(a)左ミラー下方向」の映像と「(b)右ミラー下方向」の映像とが同じサイズとなるようにディスプレイ14に表示させることを示している。   Further, as shown in FIG. 8B, in the operation stage IX, the visibility rate in the left mirror direction and the visibility rate in the right mirror direction are approximately the same. In other words, at the operation stage IX, it is considered that the necessity for visually recognizing the lower left rear direction via the left mirror and the necessity for visually recognizing the lower right rear direction via the right mirror are considered high. Therefore, as shown in FIG. 4, in the visibility information table 26, in the operation stage IX in which the vehicle is moved backward while decreasing the steering angle so that the front-rear direction of the vehicle is parallel to the front-rear direction of the parking frame, “A: b = 1: 1” is stored as ratio information that specifies the display size ratio of the video in each direction that is set so that the video in the higher direction that needs to be visually recognized is displayed on the display 14 larger. Has been. This ratio information indicates that the image of “(a) left mirror downward direction” and “(b) right mirror downward direction” are displayed on the display 14 so as to have the same size.

また、図8(b)に示すように、操舵角を中立に保持しながら車両を後退させる操作段階Xでは、車両の後方向の視認率が最も高くなっている。すなわち、上級ドライバの多くは、操舵角を中立に保持しながら車両を後退させる際に、車両の後方向を直接視認することにより、車両の後方向にある障害物との距離や駐車枠内における車両の位置を把握している。したがって、操舵角を中立に保持しながら車両を後退させる操作段階Xにおいては、ドライバにとって、車両の後方向を視認する必要性が高いものと考えられる。   Further, as shown in FIG. 8B, in the operation stage X in which the vehicle is moved backward while the steering angle is kept neutral, the rearward visibility rate of the vehicle is the highest. In other words, many of the advanced drivers look directly at the rear direction of the vehicle when reversing the vehicle while maintaining the steering angle in a neutral position. Know the position of the vehicle. Therefore, it is considered that the driver needs to visually recognize the rear direction of the vehicle in the operation stage X in which the vehicle is moved backward while the steering angle is kept neutral.

そこで、図4に示すように、視界情報テーブル26には、操舵角を中立に保持しながら車両を後退させる操作段階Xにおいてドライバが視認する必要性の高い方向を示す視界方向情報として、「後方向」が格納されている。   Therefore, as shown in FIG. 4, the view information table 26 includes “rear view direction information” indicating the direction in which the driver needs to visually recognize in the operation stage X in which the vehicle is moved backward while maintaining the steering angle neutral. "Direction" is stored.

この操作段階Xについては、ドライバが視認する必要性の高い方向が「後方向」の1方向であるので、視界情報テーブル26には、ドライバが視認する必要性の高い少なくとも2つの方向があることを前提とする表示手法情報、比率情報、及び、表示時間情報が格納されていない(図4では「−」)。   For this operation stage X, the direction in which the driver needs to visually recognize is one direction of “rear direction”, and therefore the visibility information table 26 has at least two directions in which the driver needs to be visually recognized. Display method information, ratio information, and display time information that are based on the above are not stored ("-" in FIG. 4).

次に、図9により、本発明の実施形態による車両の駐車操作支援用映像表示装置が実行する映像表示処理について説明する。図9は、本発明の実施形態による車両の駐車操作支援用映像表示装置が実行する映像表示処理のフローチャートである。この映像表示処理は、車両1のイグニッションがオンにされ、車両の駐車操作支援用映像表示装置に電源が投入された場合に起動され、繰り返し実行される。   Next, a video display process executed by the vehicle parking operation support video display device according to the embodiment of the present invention will be described with reference to FIG. FIG. 9 is a flowchart of video display processing executed by the vehicle parking operation support video display device according to the embodiment of the present invention. This video display process is started and repeatedly executed when the ignition of the vehicle 1 is turned on and the power supply is turned on to the parking operation support video display device of the vehicle.

図9に示すように、映像表示処理が開始されると、ステップS1において、ECU16の操作段階特定部20は、車両1の駐車操作が行われているか否かを判定する。具体的には、操作段階特定部20は、車速センサ30により検出された車速が所定速度Vth未満であり、且つ、GPS装置34により検出された車両1の現在位置が駐車場内である場合に、車両1の駐車操作が行われていると判定する。
その結果、車両1の駐車操作が行われていない場合、具体的には、車速が所定速度Vth以上であるか、又は、車両1の現在位置が駐車場内ではない場合、操作段階特定部20はステップS1の判定を繰り返す。
As shown in FIG. 9, when the video display process is started, in step S <b> 1, the operation stage specifying unit 20 of the ECU 16 determines whether or not the vehicle 1 is being parked. Specifically, the operation stage specifying unit 20 is configured such that when the vehicle speed detected by the vehicle speed sensor 30 is less than a predetermined speed Vth and the current position of the vehicle 1 detected by the GPS device 34 is in the parking lot, It determines with the parking operation of the vehicle 1 being performed.
As a result, when the parking operation of the vehicle 1 is not performed, specifically, when the vehicle speed is equal to or higher than the predetermined speed Vth, or when the current position of the vehicle 1 is not in the parking lot, the operation stage specifying unit 20 The determination in step S1 is repeated.

一方、車両1の駐車操作が行われている場合、ステップS2に進み、操作段階特定部20は、車両1の駐車操作の操作段階を特定する。具体的には、視界情報テーブル26を参照し、シフトポジションセンサ28により検出されたシフトポジション、車速センサ30により検出された車速、操舵角センサ32により検出された操舵角、及び、車速センサ30やGPS装置34により検出された車両1の移動状態に対応する操作段階を特定する。   On the other hand, when the parking operation of the vehicle 1 is performed, it progresses to step S2, and the operation stage specific | specification part 20 specifies the operation stage of the parking operation of the vehicle 1. FIG. Specifically, referring to the visibility information table 26, the shift position detected by the shift position sensor 28, the vehicle speed detected by the vehicle speed sensor 30, the steering angle detected by the steering angle sensor 32, and the vehicle speed sensor 30 The operation stage corresponding to the movement state of the vehicle 1 detected by the GPS device 34 is specified.

図4に示した視界情報テーブル26によれば、操作段階特定部20は、シフトポジションがDレンジであり、車速が正(すなわち車両1が前進中)であり、且つ、操舵角がほぼ中立(例えば左右両方向への操舵角が5°未満)である場合に、操作段階Iであると特定する。
また、シフトポジションがDレンジであり、車速が正(すなわち車両1が前進中)であり、且つ、操舵角が増加中である場合に、操作段階IIであると特定する。
また、シフトポジションがDレンジであり、車速が正(すなわち車両1が前進中)であり、且つ、操舵角が左右何れかの方向において所定角度で保持されている場合に、操作段階IIIであると特定する。
また、車速が0(すなわち停車中)であり、操舵角が左右何れかの方向において所定角度で保持されおり、且つ、車両1が停止した後の経過時間が1秒未満である場合に、操作段階IVであると特定する。
また、車速が0(すなわち停車中)であり、操舵角が左右何れかの方向において所定角度で保持されおり、且つ、車両1が停止した後の経過時間が1秒以上である場合に、操作段階Vであると特定する。
また、シフトポジションがRレンジであり、車速が負(すなわち車両1が後退中)であり、且つ、操舵角が減少中である場合に、操作段階VIであると特定する。
また、シフトポジションがRレンジであり、車速が負(すなわち車両1が後退中)であり、且つ、操舵角が増加中である場合に、操作段階VIIであると特定する。
また、シフトポジションがRレンジであり、車速が負(すなわち車両1が後退中)であり、操舵角が左右何れかの方向において所定角度で保持されており、且つ、車両1が後退を開始した後の走行距離が3m未満である場合に、操作段階VIIIであると特定する。
また、シフトポジションがRレンジであり、車速が負(すなわち車両1が後退中)であり、操舵角が中立ではなく(例えば左右両方向への操舵角が5°以上)、且つ、車両1が後退を開始した後の走行距離が3m以上である場合に、操作段階IXであると特定する。
また、シフトポジションがRレンジであり、車速が負(すなわち車両1が後退中)であり、且つ、操舵角がほぼ中立(例えば左右両方向への操舵角が5°未満)である場合に、操作段階Xであると特定する。
According to the visibility information table 26 shown in FIG. 4, the operation stage specifying unit 20 has a shift position in the D range, a vehicle speed is positive (that is, the vehicle 1 is moving forward), and a steering angle is almost neutral ( For example, when the steering angle in both the left and right directions is less than 5 °, the operation stage I is specified.
Further, when the shift position is the D range, the vehicle speed is positive (that is, the vehicle 1 is moving forward), and the steering angle is increasing, the operation phase II is specified.
Further, when the shift position is the D range, the vehicle speed is positive (that is, the vehicle 1 is moving forward), and the steering angle is held at a predetermined angle in either the left or right direction, the operation stage III is set. Is identified.
Further, when the vehicle speed is 0 (that is, the vehicle is stopped), the steering angle is maintained at a predetermined angle in either the left or right direction, and the elapsed time after the vehicle 1 stops is less than 1 second, the operation is performed. Identify stage IV.
In addition, when the vehicle speed is 0 (that is, the vehicle is stopped), the steering angle is held at a predetermined angle in either the left or right direction, and the elapsed time after the vehicle 1 stops is 1 second or more, the operation Identify stage V.
Further, when the shift position is in the R range, the vehicle speed is negative (that is, the vehicle 1 is moving backward), and the steering angle is decreasing, the operation stage VI is specified.
Further, when the shift position is in the R range, the vehicle speed is negative (that is, the vehicle 1 is moving backward), and the steering angle is increasing, the operation stage VII is specified.
Further, the shift position is the R range, the vehicle speed is negative (that is, the vehicle 1 is moving backward), the steering angle is held at a predetermined angle in either the left or right direction, and the vehicle 1 starts to move backward. If the subsequent mileage is less than 3 m, it is identified as operation stage VIII.
Further, the shift position is in the R range, the vehicle speed is negative (that is, the vehicle 1 is moving backward), the steering angle is not neutral (for example, the steering angle in both the left and right directions is 5 ° or more), and the vehicle 1 is moved backward. When the travel distance after starting the operation is 3 m or more, the operation stage IX is specified.
Further, when the shift position is in the R range, the vehicle speed is negative (that is, the vehicle 1 is moving backward), and the steering angle is almost neutral (for example, the steering angle in both the left and right directions is less than 5 °), the operation is performed. Identify stage X.

ステップS2の後、ステップS3に進み、視界情報抽出部は、車両1の前端部に取り付けられた前方カメラ2、車両1の右側面に取り付けられた右側方カメラ4、車両1の左側面に取り付けられた左側方カメラ6、車両1の後端部に取り付けられた後方カメラ8、及び、車両1の車室内に取り付けられた車室内カメラ10により撮影された映像に画像処理(例えば歪補正)を施す。   After step S2, the process proceeds to step S3, where the visibility information extracting unit is attached to the front camera 2 attached to the front end of the vehicle 1, the right side camera 4 attached to the right side of the vehicle 1, and the left side of the vehicle 1. Image processing (for example, distortion correction) is performed on the video imaged by the left side camera 6, the rear camera 8 attached to the rear end of the vehicle 1, and the vehicle interior camera 10 attached to the vehicle interior of the vehicle 1. Apply.

次に、ステップS4に進み、視界情報取得部22はステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階においてドライバにとって必要性の高い映像を特定した視界情報を、視界情報テーブル26から取得する。   Next, the process proceeds to step S4, where the view information acquisition unit 22 identifies view information specifying a video that is highly necessary for the driver in the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2. Obtained from the information table 26.

次に、ステップS5に進み、視界情報抽出部は、ステップS4において視界情報取得部22により取得された視界情報に含まれる視界方向情報によって特定される方向の映像を、ステップS3において画像処理を施した車両1周辺の映像から抽出する。   Next, the process proceeds to step S5, where the visual field information extraction unit performs image processing in step S3 on the video in the direction specified by the visual field direction information included in the visual field information acquired by the visual field information acquisition unit 22 in step S4. Extracted from the video around the vehicle 1.

次に、ステップS6に進み、視界情報抽出部は、ステップS5において抽出した各映像を、ステップS4において視界情報取得部22により取得された視界情報に含まれる表示手法情報によって特定される手法により、その視界情報に含まれる比率情報によって特定される表示サイズ比率により、且つ、その視界情報に含まれる表示時間情報によって特定される表示時間により、ディスプレイ14に表示させる。
ステップS6の後、ECU16はステップS1に戻る。以降、ステップS1からS6を繰り返す。
Next, proceeding to step S6, the visual field information extraction unit uses the method specified by the display method information included in the visual field information acquired by the visual field information acquisition unit 22 in step S4 for each video extracted in step S5. The display 14 displays the display size ratio specified by the ratio information included in the view information and the display time specified by the display time information included in the view information.
After step S6, the ECU 16 returns to step S1. Thereafter, steps S1 to S6 are repeated.

次に、図9乃至図18により、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイ14が表示する映像の例を説明する。図10乃至図18は、車両1の進行方向左側にある駐車枠に車両1を後退駐車させる駐車操作の各操作段階において、本発明の実施形態による車両の駐車操作支援用映像表示装置のディスプレイ14に表示される映像を示す図である。   Next, an example of an image displayed on the display 14 of the vehicle parking operation support image display device according to the embodiment of the present invention will be described with reference to FIGS. 9 to 18. 10 to 18 show the display 14 of the video display device for assisting the parking operation of the vehicle according to the embodiment of the present invention at each operation stage of the parking operation in which the vehicle 1 is parked backward in the parking frame on the left side in the traveling direction of the vehicle 1. It is a figure which shows the image | video displayed on.

まず、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階Iである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「駐車枠方向」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠方向、すなわち車両1の左前方向の映像を、前方カメラ2や左側方カメラ6が撮影した映像から抽出する。そして、図10に示すように、ステップS5で抽出した車両1の左前方向の映像をディスプレイ14に表示させる。   First, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage I, the visual field information acquisition unit 22 determines the visual field information in step S4. As such, view direction information “parking frame direction” is acquired. In this case, in step S5, the visual field information extraction unit extracts the image in the parking frame direction, that is, the left front direction of the vehicle 1 from the images taken by the front camera 2 and the left camera 6. Then, as shown in FIG. 10, an image of the left front direction of the vehicle 1 extracted in step S <b> 5 is displayed on the display 14.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階IIである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)駐車枠方向」「(b)駐車枠反対側ミラー方向」、表示手法情報「左右並列」、及び、比率情報「a:b=1:2」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠方向、すなわち車両1の左前方向の映像を、前方カメラ2や左側方カメラ6が撮影した映像から抽出し、駐車枠反対側ミラー方向、すなわち右ミラーを介して見た車両1の右後方向の映像を、右側方カメラ4が撮影した映像から抽出する。そして、図11に示すように、ステップS5で抽出した車両1の左前方向の映像をディスプレイ14の左側に表示させ、ステップS5で抽出した右ミラーを介して見た車両1の右後方向の映像をディスプレイ14の右側に表示させる。このとき、車両1の左前方向の映像と右ミラーを介して見た車両1の右後方向の映像との表示サイズ比率が1:2となるようにディスプレイ14に表示させる。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage II, the visual field information acquisition unit 22 determines the visual field information in step S4. View direction information “(a) parking frame direction” “(b) parking frame opposite mirror direction”, display method information “left-right parallel”, and ratio information “a: b = 1: 2”. In this case, in step S5, the visual field information extraction unit extracts the image of the parking frame direction, that is, the left front direction of the vehicle 1 from the image captured by the front camera 2 or the left camera 6, and the parking frame opposite mirror direction, That is, the right rear video of the vehicle 1 viewed through the right mirror is extracted from the video taken by the right side camera 4. Then, as shown in FIG. 11, the image of the left front direction of the vehicle 1 extracted in step S5 is displayed on the left side of the display 14, and the image of the right rear direction of the vehicle 1 viewed through the right mirror extracted in step S5 is displayed. Is displayed on the right side of the display 14. At this time, the display 14 is displayed so that the display size ratio of the image of the vehicle 1 in the left front direction and the image of the vehicle 1 in the right rear direction viewed through the right mirror is 1: 2.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階III又はIVである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)駐車枠反対側ミラー方向」「(b)駐車枠側ミラー方向」「(c)駐車枠側後方向」、表示手法情報「aとb又はcとを左右並列、bとcとを時間切替」、比率情報「a:(b,c)=1:2」、及び、表示時間情報「b=1sec」「c=2sec」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠反対側ミラー方向、すなわち右ミラーを介して見た車両1の右後方向の映像を、右側方カメラ4が撮影した映像から抽出し、駐車枠側ミラー方向、すなわち左ミラーを介して見た車両1の左後方向の映像を、左側方カメラ6が撮影した映像から抽出し、駐車枠側後方向、すなわち車両1の左後方向を車内から直接見た映像を、車室内カメラ10が撮影した映像から抽出する。そして、図12に示すように、ステップS5で抽出した左ミラーを介して見た車両1の左後方向の映像(図12(a))、又は、車両1の左後方向を車内から直接見た映像(図12(b))をディスプレイ14の左側に交互に表示させ、ステップS5で抽出した右ミラーを介して見た車両1の右後方向の映像をディスプレイ14の右側に表示させる。このとき、左ミラーを介して見た車両1の左後方向の映像、又は、車両1の左後方向を車内から直接見た映像と、右ミラーを介して見た車両1の右後方向の映像との表示サイズ比率が2:1となるようにディスプレイ14に表示させる。このとき、図12(a)に示すように、左ミラーを介して見た車両1の左後方向の映像をディスプレイ14の左側に2秒間表示し、その後、図12(b)に示すように、車両1の左後方向を車内から直接見た映像をディスプレイ14の左側に1秒間表示することを繰り返す。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage III or IV, the visibility information acquiring unit 22 in step S4, As the view information, view direction information “(a) parking frame opposite mirror direction”, “(b) parking frame side mirror direction”, “(c) parking frame side rear direction”, and display method information “a and b or c”. Left and right parallel, time switching between b and c ”, ratio information“ a: (b, c) = 1: 2 ”, and display time information“ b = 1 sec ”and“ c = 2 sec ”are acquired. In this case, in step S5, the field-of-view information extraction unit extracts an image in the rear mirror direction opposite to the parking frame, that is, an image in the rear right direction of the vehicle 1 viewed through the right mirror, from an image captured by the right-side camera 4. The parking frame side mirror direction, that is, the left rear direction image of the vehicle 1 viewed through the left mirror is extracted from the image captured by the left side camera 6, and the parking frame side rear direction, that is, the left rear direction of the vehicle 1 is The video directly viewed from inside the vehicle is extracted from the video taken by the vehicle interior camera 10. Then, as shown in FIG. 12, the image of the left rear direction of the vehicle 1 (FIG. 12A) viewed through the left mirror extracted in step S5, or the left rear direction of the vehicle 1 can be directly viewed from the inside of the vehicle. The video (FIG. 12 (b)) is alternately displayed on the left side of the display 14, and the video of the vehicle 1 rearward viewed through the right mirror extracted in step S5 is displayed on the right side of the display 14. At this time, the image of the left rear direction of the vehicle 1 viewed through the left mirror, or the image of the vehicle 1 directly viewed from the inside of the left rear direction of the vehicle 1 and the rear right direction of the vehicle 1 viewed through the right mirror It is displayed on the display 14 so that the display size ratio with the video is 2: 1. At this time, as shown in FIG. 12 (a), the image of the left rear direction of the vehicle 1 viewed through the left mirror is displayed on the left side of the display 14 for 2 seconds, and thereafter, as shown in FIG. 12 (b). The display of the image of the left rear direction of the vehicle 1 directly viewed from the inside of the vehicle is repeated on the left side of the display 14 for 1 second.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階Vである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)駐車枠反対側ミラー方向」「(b)駐車枠側ミラー方向」「(c)駐車枠側後方向」、表示手法情報「aとb又はcとを左右並列、bとcとを時間切替」、比率情報「a:(b,c)=2:1」、及び、表示時間情報「b=2sec」「c=2sec」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠反対側ミラー方向、すなわち右ミラーを介して見た車両1の右後方向の映像を、右側方カメラ4が撮影した映像から抽出し、駐車枠側ミラー方向、すなわち左ミラーを介して見た車両1の左後方向の映像を、左側方カメラ6が撮影した映像から抽出し、駐車枠側後方向、すなわち車両1の左後方向を車内から直接見た映像を、車室内カメラ10が撮影した映像から抽出する。そして、図13に示すように、ステップS5で抽出した左ミラーを介して見た車両1の左後方向の映像、又は、車両1の左後方向を車内から直接見た映像をディスプレイ14の左側に交互に表示させ、ステップS5で抽出した右ミラーを介して見た車両1の右後方向の映像をディスプレイ14の右側に表示させる。このとき、左ミラーを介して見た車両1の左後方向の映像、又は、車両1の左後方向を車内から直接見た映像と、右ミラーを介して見た車両1の右後方向の映像との表示サイズ比率が1:2となるようにディスプレイ14に表示させる。このとき、左ミラーを介して見た車両1の左後方向の映像をディスプレイ14の左側に2秒間表示し、その後、図13に示すように、車両1の左後方向を車内から直接見た映像をディスプレイ14の左側に2秒間表示することを繰り返す。 In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage V, the visual field information acquisition unit 22 determines the visual field information in step S4. View direction information “(a) parking frame opposite mirror direction” “(b) parking frame side mirror direction” “(c) parking frame side rear direction” and display method information “a and b or c” , B and c are switched over time ”, ratio information“ a: (b, c) = 2: 1 ”, and display time information“ b = 2 sec ”and“ c = 2 sec ”are acquired. In this case, in step S5, the field-of-view information extraction unit extracts an image in the rear mirror direction opposite to the parking frame, that is, an image in the rear right direction of the vehicle 1 viewed through the right mirror, from an image captured by the right-side camera 4. The parking frame side mirror direction, that is, the left rear direction image of the vehicle 1 viewed through the left mirror is extracted from the image captured by the left side camera 6, and the parking frame side rear direction, that is, the left rear direction of the vehicle 1 is indicated. The video directly viewed from inside the vehicle is extracted from the video taken by the vehicle interior camera 10. Then, as shown in FIG. 13, the left rear direction of the movies image of the vehicle 1 as seen through the left mirror extracted in step S5, or the movies image viewed directly direction after left of the vehicle 1 from the vehicle interior display 14 Are alternately displayed on the left side of the vehicle, and an image in the rear right direction of the vehicle 1 viewed through the right mirror extracted in step S5 is displayed on the right side of the display 14. At this time, the image of the left rear direction of the vehicle 1 viewed through the left mirror, or the image of the vehicle 1 directly viewed from the inside of the left rear direction of the vehicle 1 and the rear right direction of the vehicle 1 viewed through the right mirror. It is displayed on the display 14 so that the display size ratio with respect to the video is 1: 2. At this time , the image of the left rear direction of the vehicle 1 viewed through the left mirror is displayed on the left side of the display 14 for 2 seconds, and then the left rear direction of the vehicle 1 is directly viewed from the inside of the vehicle as shown in FIG. Repeatedly displaying the recorded video on the left side of the display 14 for 2 seconds.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階VIである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)駐車枠側ミラー方向」「(b)駐車枠側後方向」、表示手法情報「時間切替」、及び、表示時間情報「a=2sec」「b=2sec」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠側ミラー方向、すなわち左ミラーを介して見た車両1の左後方向の映像を、左側方カメラ6が撮影した映像から抽出し、駐車枠側後方向、すなわち車両1の左後方向を車内から直接見た映像を、車室内カメラ10が撮影した映像から抽出する。そして、図14(a)に示すように、ステップS5で抽出した左ミラーを介して見た車両1の左後方向の映像をディスプレイ14に2秒間表示し、その後、図14(b)に示すように、車両1の左後方向を車内から直接見た映像をディスプレイ14に2秒間表示することを繰り返す。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage VI, the view information acquisition unit 22 determines the view information in step S4. View direction information “(a) parking frame side mirror direction”, “(b) parking frame side rear direction”, display method information “time switching”, and display time information “a = 2 sec” and “b = 2 sec”. get. In this case, in step S5, the visual field information extraction unit extracts a video image in the parking frame side mirror direction, that is, the left rear direction of the vehicle 1 viewed through the left mirror from the video imaged by the left side camera 6, An image obtained by directly viewing the frame side rear direction, that is, the left rear direction of the vehicle 1 from the inside of the vehicle is extracted from the image taken by the vehicle interior camera 10. Then, as shown in FIG. 14 (a), the image of the left rear direction of the vehicle 1 viewed through the left mirror extracted in step S5 is displayed on the display 14 for 2 seconds, and then shown in FIG. 14 (b). As described above, the display of the image of the left rear direction of the vehicle 1 directly viewed from the inside of the vehicle is repeatedly displayed on the display 14 for 2 seconds.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階VIIである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)駐車枠反対側ミラー方向」「(b)駐車枠側ミラー方向」、表示手法情報「左右並列」、及び、比率情報「a:b=1:2」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠反対側ミラー方向、すなわち右ミラーを介して見た車両1の右後方向の映像を、右側方カメラ4が撮影した映像から抽出し、駐車枠側ミラー方向、すなわち左ミラーを介して見た車両1の左後方向の映像を、左側方カメラ6が撮影した映像から抽出する。そして、図15に示すように、ステップS5で抽出した右ミラーを介して見た車両1の右後方向の映像をディスプレイ14の右側に表示させ、ステップS5で抽出した左ミラーを介して見た車両1の左後方向の映像をディスプレイ14の左側に表示させる。このとき、右ミラーを介して見た車両1の右後方向の映像と左ミラーを介して見た車両1の左後方向の映像との表示サイズ比率が1:2となるようにディスプレイ14に表示させる。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage VII, the visibility information acquisition unit 22 determines the visibility information in step S4. View direction information “(a) parking frame opposite mirror direction”, “(b) parking frame side mirror direction”, display method information “horizontal parallel”, and ratio information “a: b = 1: 2” are acquired. To do. In this case, in step S5, the field-of-view information extraction unit extracts an image in the rear mirror direction opposite to the parking frame, that is, an image in the rear right direction of the vehicle 1 viewed through the right mirror, from an image captured by the right-side camera 4. An image in the parking frame side mirror direction, that is, a left rear direction image of the vehicle 1 viewed through the left mirror is extracted from the image captured by the left side camera 6. Then, as shown in FIG. 15, the right rear video of the vehicle 1 viewed through the right mirror extracted in step S5 is displayed on the right side of the display 14 and viewed through the left mirror extracted in step S5. A left rear video of the vehicle 1 is displayed on the left side of the display 14. At this time, the display 14 has a display size ratio of 1: 2 between the right rear image of the vehicle 1 viewed through the right mirror and the left rear image of the vehicle 1 viewed through the left mirror. Display.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階VIIIである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)駐車枠反対側ミラー方向」「(b)駐車枠側ミラー方向」、表示手法情報「左右並列」、及び、比率情報「a:b=1:1」を取得する。この場合、視界情報抽出部は、ステップS5において、駐車枠反対側ミラー方向、すなわち右ミラーを介して見た車両1の右後方向の映像を、右側方カメラ4が撮影した映像から抽出し、駐車枠側ミラー方向、すなわち左ミラーを介して見た車両1の左後方向の映像を、左側方カメラ6が撮影した映像から抽出する。そして、図16に示すように、ステップS5で抽出した右ミラーを介して見た車両1の右後方向の映像をディスプレイ14の右側に表示させ、ステップS5で抽出した左ミラーを介して見た車両1の左後方向の映像をディスプレイ14の左側に表示させる。このとき、右ミラーを介して見た車両1の右後方向の映像と左ミラーを介して見た車両1の左後方向の映像との表示サイズ比率が1:1となるようにディスプレイ14に表示させる。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage VIII, the view information acquisition unit 22 determines the view information in step S4. View direction information “(a) parking frame opposite mirror direction”, “(b) parking frame side mirror direction”, display method information “left-right parallel”, and ratio information “a: b = 1: 1” To do. In this case, in step S5, the field-of-view information extraction unit extracts an image in the rear mirror direction opposite to the parking frame, that is, an image in the rear right direction of the vehicle 1 viewed through the right mirror, from an image captured by the right-side camera 4. An image in the parking frame side mirror direction, that is, a left rear direction image of the vehicle 1 viewed through the left mirror is extracted from the image captured by the left side camera 6. Then, as shown in FIG. 16, the right rear video of the vehicle 1 viewed through the right mirror extracted in step S5 is displayed on the right side of the display 14 and viewed through the left mirror extracted in step S5. A left rear video of the vehicle 1 is displayed on the left side of the display 14. At this time, the display 14 has a display size ratio of 1: 1 between the right rear video of the vehicle 1 viewed through the right mirror and the left rear video of the vehicle 1 viewed through the left mirror. Display.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階IXである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「(a)左ミラー下方向」「(b)右ミラー下方向」、表示手法情報「左右並列」、及び、比率情報「a:b=1:1」を取得する。この場合、視界情報抽出部は、ステップS5において、左ミラー下方向、すなわち左ミラーを介して見た車両1の左下後方向の映像を、左側方カメラ6が撮影した映像から抽出し、右ミラー下方向、すなわち右ミラーを介して見た車両1の右下後方向の映像を、右側方カメラ4が撮影した映像から抽出する。そして、図17に示すように、ステップS5で抽出した左ミラーを介して見た車両1の左下後方向の映像をディスプレイ14の左側に表示させ、ステップS5で抽出した右ミラーを介して見た車両1の右下後方向の映像をディスプレイ14の右側に表示させる。このとき、左ミラーを介して見た車両1の左下後方向の映像と右ミラーを介して見た車両1の右下後方向の映像との表示サイズ比率が1:1となるようにディスプレイ14に表示させる。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage IX, the view information acquisition unit 22 determines the view information in step S4. View direction information “(a) left mirror downward direction”, (b) right mirror downward direction, display method information “left-right parallel”, and ratio information “a: b = 1: 1”. In this case, in step S5, the visual field information extraction unit extracts an image of the lower left mirror, that is, the lower left rear direction of the vehicle 1 viewed through the left mirror, from the image captured by the left side camera 6, and the right mirror An image in the lower direction, that is, the lower right rear direction of the vehicle 1 viewed through the right mirror is extracted from the image taken by the right side camera 4. Then, as shown in FIG. 17, the lower left rear image of the vehicle 1 viewed through the left mirror extracted in step S5 is displayed on the left side of the display 14 and viewed through the right mirror extracted in step S5. An image of the lower right rear direction of the vehicle 1 is displayed on the right side of the display 14. At this time, the display 14 has a display size ratio of 1: 1 so that the lower left rear image of the vehicle 1 viewed through the left mirror and the lower right rear image of the vehicle 1 viewed through the right mirror are 1: 1. To display.

また、図9の映像表示処理のステップS2において操作段階特定部20により特定された車両1の駐車操作の操作段階が操作段階Xである場合、視界情報取得部22は、ステップS4において、視界情報として、視界方向情報「後方向」を取得する。この場合、視界情報抽出部は、ステップS5において、後方向、すなわち車両1の後方向の映像を、後方カメラ8が撮影した映像から抽出する。そして、図18に示すように、ステップS5で抽出した車両1の後方向の映像をディスプレイ14に表示させる。このとき、自車両1の車体を表す半透明の画像を、車両1の後方向の映像に重畳表示させる。   In addition, when the operation stage of the parking operation of the vehicle 1 specified by the operation stage specifying unit 20 in step S2 of the video display process of FIG. 9 is the operation stage X, the view information acquisition unit 22 determines the view information in step S4. As such, the visual field direction information “rear direction” is acquired. In this case, in step S5, the visual field information extraction unit extracts the rearward video, that is, the rearward video of the vehicle 1 from the video captured by the rear camera 8. Then, as shown in FIG. 18, the backward image of the vehicle 1 extracted in step S <b> 5 is displayed on the display 14. At this time, a translucent image representing the vehicle body of the host vehicle 1 is superimposed on the rearward video of the vehicle 1.

次に、本発明の実施形態のさらなる変形例を説明する。
上述した実施形態においては、車両の駐車操作支援用映像表示装置は、車両1の同じ側の方向に含まれる複数方向の映像を所定の周期で交互に切り替えてディスプレイ14の同じ位置に表示させるが、車両1の同じ側に含まれる複数方向の映像をディスプレイ14に上下並列に表示させてもよい。
Next, further modifications of the embodiment of the present invention will be described.
In the embodiment described above, the image display device for assisting parking operation of the vehicle switches the images in a plurality of directions included in the same direction of the vehicle 1 alternately at a predetermined cycle and displays them at the same position on the display 14. A plurality of directions of images included on the same side of the vehicle 1 may be displayed on the display 14 in parallel in the vertical direction.

次に、上述した本発明の実施形態及び本発明の実施形態の変形例による車両の駐車操作支援用映像表示装置の効果を説明する。   Next, effects of the above-described embodiment of the present invention and the video display device for assisting parking operation of the vehicle according to the modification of the embodiment of the present invention will be described.

まず、駐車操作の各操作段階においてドライバにとって必要性の高い映像を予め特定した視界情報が視界情報テーブル26に格納されている。そして、視界情報取得部22は、操作段階特定部20により特定された駐車操作の各操作段階においてドライバにとって必要性の高い映像を特定した視界情報を取得し、映像抽出部24は、その取得された視界情報に対応する映像を車両1周辺の映像から抽出し、ディスプレイ14は、その抽出された映像を表示するので、駐車操作の各操作段階においてドライバにとって必要性の高い映像を効果的に表示することができる。例えば、駐車操作に不慣れな初級ドライバであっても、ディスプレイ14を視認すれば、駐車操作の各操作段階においてドライバにとって必要性の高い映像を確認することができるので、駐車操作を上手く行うことができる。また、駐車操作に優れた上級ドライバは、首を振って車両1の周辺を直接視認しなくとも、ディスプレイ14に表示された映像を確認することにより、駐車操作の各操作段階においてドライバにとって必要性の高い映像を確認することができるので、駐車操作を一層スムーズに行うことができる。   First, visual field information that specifies in advance a video that is highly necessary for the driver in each operation stage of the parking operation is stored in the visual field information table 26. Then, the view information acquisition unit 22 acquires view information specifying a video that is highly necessary for the driver at each operation stage of the parking operation specified by the operation stage specifying unit 20, and the video extraction unit 24 acquires the information. Since the video corresponding to the visibility information is extracted from the video around the vehicle 1 and the display 14 displays the extracted video, the video that is highly necessary for the driver is effectively displayed at each operation stage of the parking operation. can do. For example, even a beginner driver who is unfamiliar with the parking operation can recognize images that are highly necessary for the driver at each operation stage of the parking operation by visually checking the display 14, so that the parking operation can be performed well. it can. Further, an advanced driver who excels in parking operation needs to have a driver at each operation stage of the parking operation by checking the image displayed on the display 14 without swaying his head and directly viewing the periphery of the vehicle 1. Since a high image can be confirmed, parking operation can be performed more smoothly.

さらに、車両1の駐車操作の各操作段階においてドライバが視認する必要性の高い方向を示す視界方向情報が視界情報テーブル26に格納されている。そして、視界情報取得部22は、操作段階特定部20により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い方向を示す視界方向情報を取得し、映像抽出部24は、その取得された視界方向情報が示す方向の映像を車両1周辺の映像から抽出し、ディスプレイ14は、その抽出された映像を表示するので、駐車操作の各操作段階においてドライバが視認する必要性の高い方向の映像を効果的に表示することができる。   Further, visual field direction information indicating the direction in which the driver needs to be visually recognized at each operation stage of the parking operation of the vehicle 1 is stored in the visual field information table 26. And the visibility information acquisition part 22 acquires the visibility direction information which shows the direction where the driver needs to visually recognize in each operation stage of the parking operation specified by the operation stage specification part 20, and the video extraction part 24 Since the video in the direction indicated by the acquired visual field direction information is extracted from the video around the vehicle 1 and the display 14 displays the extracted video, it is highly necessary for the driver to visually recognize at each operation stage of the parking operation. Directional images can be displayed effectively.

さらに、ドライバが視認する必要性の高い複数の方向を有する操作段階においてそれらの各方向の映像を表示する表示手法を示す表示手法情報が視界情報テーブル26に格納されている。そして、視界情報取得部22は、操作段階特定部20により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い各方向の映像の表示手法を示す表示手法情報を取得し、ディスプレイ14は、その取得された表示手法情報が示す表示手法により各方向の映像を表示するので、ドライバが視認する必要性がより高い方向の映像をより効果的に表示することができる。   Further, display method information indicating a display method for displaying an image in each direction in an operation stage having a plurality of directions that are highly necessary for the driver to visually recognize is stored in the view information table 26. And the visibility information acquisition part 22 acquires the display method information which shows the display method of the image | video of each direction with high necessity for the driver to visually recognize in each operation step of the parking operation specified by the operation step specifying unit 20, 14 displays the video in each direction by the display method indicated by the acquired display method information, so that it is possible to more effectively display the video in the direction more necessary for the driver to visually recognize.

さらに、ドライバが視認する必要性の高い複数の方向を有する操作段階において、ドライバが視認する必要性のより高い方向の映像がより大きくディスプレイ14に表示されるように設定された各方向の映像の表示サイズ比率を特定した比率情報が視界情報テーブル26に格納されている。そして、視界情報取得部22は、操作段階特定部20により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い各方向の映像の比率情報を取得し、ディスプレイ14は、その取得された比率情報により特定される表示サイズ比率により各方向の映像を表示するので、ドライバが視認する必要性のより高い方向の映像ほど大きく表示することができ、ドライバが視認する必要性の高い映像をより効果的に表示することができる。   Furthermore, in the operation stage having a plurality of directions that are highly necessary for the driver to visually recognize, the images in the directions that are set so that the image in the direction that is more necessary for the driver to visually recognize are displayed on the display 14 larger. Ratio information specifying the display size ratio is stored in the view information table 26. And the visibility information acquisition part 22 acquires the ratio information of the image | video of each direction with high necessity for a driver | operator to visually recognize in each operation step of the parking operation specified by the operation step specific | specification part 20, and the display 14 acquires that Since the video in each direction is displayed according to the display size ratio specified by the ratio information, the video in the direction that is more necessary for the driver to view can be displayed larger, and the video that the driver needs to visually recognize is high. Can be displayed more effectively.

さらに、ドライバが視認する必要性の高い複数の方向を有する操作段階において、ドライバが視認する必要性のより高い方向の映像がより長くディスプレイ14に表示されるように設定された各方向の映像の表示時間を特定した表示時間情報が視界情報テーブル26に格納されている。そして、視界情報取得部22は、操作段階特定部20により特定された駐車操作の各操作段階においてドライバが視認する必要性の高い各方向の映像の表示時間を取得し、ディスプレイ14は、その取得された表示時間により各方向の映像を表示するので、ドライバが視認する必要性のより高い方向の映像ほど長く表示することができ、ドライバが視認する必要性の高い映像をより効果的に表示することができる。   Furthermore, in the operation stage having a plurality of directions that are highly necessary for the driver to visually recognize, the images in the directions that are set so that the images in the direction that the driver needs to visually recognize are displayed on the display 14 for a longer time. Display time information specifying the display time is stored in the view information table 26. And the visibility information acquisition part 22 acquires the display time of the image | video of each direction with high necessity for a driver | operator to visually recognize in each operation step of the parking operation specified by the operation step specification part 20, and the display 14 acquires that Since the video in each direction is displayed according to the displayed display time, the video in the direction that is more necessary for the driver to view can be displayed longer, and the video that the driver needs to view is displayed more effectively. be able to.

さらに、ドライバが視認する必要性の高い複数の方向の内、車両1の左方向に含まれる方向の映像がディスプレイ14の左側に表示され、車両1の右方向に含まれる方向の映像がディスプレイ14の右側に表示されるので、ドライバが視認する必要性の高い複数の方向の映像をより直感的に把握しやすい手法で表示することができる。   Further, among a plurality of directions that the driver needs to visually recognize, an image of a direction included in the left direction of the vehicle 1 is displayed on the left side of the display 14, and an image of a direction included in the right direction of the vehicle 1 is displayed on the display 14. Therefore, it is possible to display videos in a plurality of directions, which are highly necessary for the driver to visually recognize, by a method that makes it easier to grasp intuitively.

さらに、ドライバが視認する必要性の高い複数の方向の内、車両1の同じ側の方向に含まれる複数方向の映像がディスプレイ14に上下並列に表示されるので、ドライバが視認する必要性の高い複数の方向の映像をより直感的に把握しやすい手法で表示することができる。   Furthermore, among the plurality of directions that the driver needs to visually recognize, images in a plurality of directions included in the same side direction of the vehicle 1 are displayed on the display 14 in parallel in the vertical direction. It is possible to display videos in a plurality of directions by a method that is more intuitive.

さらに、車両1の駐車操作の各操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データに基づき予め決定された視界情報が視界情報テーブル26に格納されているので、駐車操作の各操作段階において駐車操作に優れたドライバが視認する率の高い方向の映像を車両1周辺の映像から抽出して表示することができ、ドライバが視認する必要性の高い方向の映像を確実に表示することができる。   Further, in each operation stage of the parking operation of the vehicle 1, the visibility information determined in advance based on the viewing behavior data specifying the direction in which the driver who is excellent in the parking operation visually recognizes the high rate is stored in the visibility information table 26. Therefore, it is possible to extract and display from the video around the vehicle 1 an image with a high rate that is recognized by a driver excellent in parking operation at each operation stage of the parking operation, and in a direction in which the driver needs to visually recognize it. The video can be displayed reliably.

1 車両
2 前方カメラ
4 右側方カメラ
6 左側方カメラ
8 後方カメラ
10 車室内カメラ
14 ディスプレイ
20 操作段階特定部
22 視界情報取得部
24 映像抽出部
26 視界情報テーブル
DESCRIPTION OF SYMBOLS 1 Vehicle 2 Front camera 4 Right side camera 6 Left side camera 8 Rear camera 10 Car interior camera 14 Display 20 Operation stage specific | specification part 22 View information acquisition part 24 Image | video extraction part 26 View information table

Claims (6)

車両周辺の映像を表示する車両の駐車操作支援用映像表示装置であって、
車両周辺を撮影する撮影手段と、
車両の駐車操作における複数の操作段階の各々においてドライバにとって必要性の高い映像を予め特定した視界情報を格納する視界情報格納手段と、
車両の駐車操作の操作段階を特定する操作段階特定手段と、
上記操作段階特定手段により特定された操作段階においてドライバにとって必要性の高い映像を特定した視界情報を上記視界情報格納手段から取得する視界情報取得手段と、
上記視界情報取得手段により取得された視界情報に対応する映像を、上記撮影手段により撮影された車両周辺の映像から抽出する映像抽出手段と、
上記映像抽出手段により抽出された映像を表示する表示手段と、を有し、
上記視界情報格納手段に格納された視界情報は、車両の駐車操作の各操作段階においてドライバが視認する必要性の高い方向を含み、
上記視界情報取得手段は、上記操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い方向を上記視界情報格納手段から取得し、
上記映像抽出手段は、上記視界情報取得手段により取得された方向の映像を、上記撮影手段により撮影された車両周辺の映像から抽出し、
上記視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する操作段階の視界情報を含み、
上記視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する上記操作段階において、ドライバが視認する必要性のより高い方向の映像がより長く上記表示手段に表示されるように設定された各方向の映像の表示時間を含み、
上記視界情報取得手段は、上記操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い複数の各方向の映像の表示時間を上記視界情報格納手段から取得し、
上記表示手段は、上記視界情報取得手段により取得された表示時間によりドライバが視認する必要性の高い各方向の映像を表示することを特徴とする車両の駐車操作支援用映像表示装置。
An image display device for assisting parking operation of a vehicle for displaying an image around the vehicle,
Photographing means for photographing the periphery of the vehicle;
View information storage means for storing view information that pre-identifies a video that is highly necessary for the driver in each of a plurality of operation stages in the parking operation of the vehicle;
An operation stage specifying means for specifying an operation stage of the parking operation of the vehicle;
Visibility information acquisition means for acquiring, from the visibility information storage means, visual field information that identifies a video that is highly necessary for the driver in the operation stage specified by the operation stage specifying means;
Video extracting means for extracting video corresponding to the visual field information acquired by the visual field information acquiring means from video around the vehicle photographed by the photographing means;
Display means for displaying an image extracted by the image extracting means, a possess,
The visibility information stored in the visibility information storage means includes a direction in which the driver needs to visually recognize at each operation stage of the vehicle parking operation,
The visibility information acquisition means acquires from the visibility information storage means a direction in which the driver needs to be visually recognized in the operation stage specified by the operation stage specification means,
The video extraction means extracts the video in the direction acquired by the visibility information acquisition means from the video around the vehicle imaged by the imaging means,
The visual field information stored in the visual field information storage means includes visual field information at an operation stage having a plurality of directions that the driver needs to visually recognize,
The visual field information stored in the visual field information storage means includes a plurality of directions that are highly necessary for the driver to visually recognize. Including the display time of the video in each direction set to be displayed,
The visibility information acquisition means acquires, from the visibility information storage means, display times of images in a plurality of directions that are highly necessary for the driver to visually recognize in the operation stage specified by the operation stage specification means,
The video display device for assisting parking operation of a vehicle, wherein the display means displays an image in each direction that is highly necessary for the driver to visually recognize based on the display time acquired by the visibility information acquisition means .
記視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する上記操作段階においてそれらの各方向の映像を表示する表示手法を含み、
上記視界情報取得手段は、上記操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い複数の各方向の映像の表示手法を上記視界情報格納手段から取得し、
上記表示手段は、上記視界情報取得手段により取得された表示手法によりドライバが視認する必要性の高い各方向の映像を表示する請求項に記載の車両の駐車操作支援用映像表示装置。
View information stored on SL visibility information storage means includes a display method for displaying their respective directions of image in the operation stage having a plurality of directions with high need for visual driver,
The visibility information acquisition means acquires from the visibility information storage means a video display method in a plurality of directions that are highly necessary for the driver to visually recognize in the operation stage specified by the operation stage specification means,
2. The video display device for assisting parking operation of a vehicle according to claim 1 , wherein the display unit displays an image in each direction that is highly necessary for the driver to visually recognize using the display method acquired by the visibility information acquisition unit.
記視界情報格納手段に格納された視界情報は、ドライバが視認する必要性の高い複数の方向を有する上記操作段階において、ドライバが視認する必要性のより高い方向の映像がより大きく上記表示手段に表示されるように設定された各方向の映像の表示サイズ比率を含み、
上記視界情報取得手段は、上記操作段階特定手段により特定された操作段階においてドライバが視認する必要性の高い複数の各方向の映像の表示サイズ比率を上記視界情報格納手段から取得し、
上記表示手段は、上記視界情報取得手段により取得された表示サイズ比率によりドライバが視認する必要性の高い各方向の映像を表示する請求項又はに記載の車両の駐車操作支援用映像表示装置。
View information stored on SL visibility information storage means, in the operation stage having a plurality of directions with high need for driver visibility, a higher direction of the image is larger the display means need to driver visibility Including the display size ratio of the video in each direction set to be displayed in
The visibility information acquisition means acquires, from the visibility information storage means, a display size ratio of a plurality of video images in each direction that is highly necessary for the driver to visually recognize in the operation stage specified by the operation stage specification means,
The video display device for assisting parking operation of a vehicle according to claim 1 or 2 , wherein the display means displays an image in each direction that is highly necessary for the driver to visually recognize based on the display size ratio acquired by the visibility information acquisition means. .
上記視界情報に含まれる表示手法は、上記ドライバが視認する必要性の高い複数の方向の内、車両の左方向に含まれる方向の映像が上記表示手段の左側に表示され、車両の右方向に含まれる方向の映像が上記表示手段の右側に表示されるように設定されている請求項に記載の車両の駐車操作支援用映像表示装置。 In the display method included in the visibility information, the video of the direction included in the left direction of the vehicle is displayed on the left side of the display means among the plurality of directions that the driver needs to visually recognize, and is displayed in the right direction of the vehicle. The video display device for assisting parking operation of a vehicle according to claim 2 , wherein the video in the included direction is set to be displayed on the right side of the display means. 上記視界情報に含まれる表示手法は、上記ドライバが視認する必要性の高い複数の方向の内、車両の同じ側の方向に含まれる複数方向の映像が上記表示手段に上下並列に表示されるように設定されている請求項又はに記載の車両の駐車操作支援用映像表示装置。 The display method included in the visibility information is such that images in a plurality of directions included in a direction on the same side of the vehicle among a plurality of directions that the driver needs to visually recognize are displayed on the display unit in parallel in the vertical direction. The video display device for assisting parking operation of the vehicle according to claim 2 or 4 , wherein 上記視界情報格納手段に格納された視界情報は、車両の駐車操作の各操作段階において、駐車操作に優れたドライバが視認する率の高い方向を特定した視認行動データに基づき、予め決定されている請求項1乃至の何れか1項に記載の車両の駐車操作支援用映像表示装置。 The visibility information stored in the visibility information storage means is determined in advance at each operation stage of the vehicle parking operation based on visual behavior data that specifies a direction in which the driver who is excellent in parking operation visually recognizes a high rate. The video display device for assisting parking operation of a vehicle according to any one of claims 1 to 5 .
JP2013106143A 2013-05-20 2013-05-20 Video display device for vehicle parking operation support Expired - Fee Related JP5943207B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2013106143A JP5943207B2 (en) 2013-05-20 2013-05-20 Video display device for vehicle parking operation support

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2013106143A JP5943207B2 (en) 2013-05-20 2013-05-20 Video display device for vehicle parking operation support

Publications (2)

Publication Number Publication Date
JP2014226966A JP2014226966A (en) 2014-12-08
JP5943207B2 true JP5943207B2 (en) 2016-06-29

Family

ID=52127236

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013106143A Expired - Fee Related JP5943207B2 (en) 2013-05-20 2013-05-20 Video display device for vehicle parking operation support

Country Status (1)

Country Link
JP (1) JP5943207B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6256525B2 (en) * 2016-05-23 2018-01-10 マツダ株式会社 Electronic mirror device
JP6332332B2 (en) * 2016-05-23 2018-05-30 マツダ株式会社 Electronic mirror device

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4853260B2 (en) * 2006-12-04 2012-01-11 アイシン・エィ・ダブリュ株式会社 Image display method for parking support apparatus and parking support apparatus
JP2010215027A (en) * 2009-03-13 2010-09-30 Fujitsu Ten Ltd Driving assistant device for vehicle
JP5584561B2 (en) * 2010-08-31 2014-09-03 富士通テン株式会社 Image processing apparatus, image display system, and image display method
JP5966394B2 (en) * 2011-02-02 2016-08-10 日産自動車株式会社 Parking assistance device

Also Published As

Publication number Publication date
JP2014226966A (en) 2014-12-08

Similar Documents

Publication Publication Date Title
US8854466B2 (en) Rearward view assistance apparatus displaying cropped vehicle rearward image
WO2016067535A1 (en) Parking assistance device
JP4900326B2 (en) Parking assistance device and parking assistance method
KR101190482B1 (en) Parking assisting device
US10166922B2 (en) On-vehicle image display device, on-vehicle image display method for vehicle, and on-vehicle image setting device
JP6196444B2 (en) Peripheral vehicle position tracking apparatus and method
JP6193714B2 (en) Parking assistance device
JP6086368B2 (en) Parking assistance device
JP6730614B2 (en) Vehicle display control device, vehicle display system, vehicle display control method and program
JP2009083764A (en) Driving assisting device, driving assisting method, and computer program
JP5471141B2 (en) Parking assistance device and parking assistance method
JP2009083680A (en) Parking assistance device and parking assistance method
JP2006131213A (en) Rear view recognition device for motorcycle
JP6730613B2 (en) Overhead video generation device, overhead video generation system, overhead video generation method and program
JP2006238131A (en) Vehicle periphery monitoring apparatus
JP5943207B2 (en) Video display device for vehicle parking operation support
JP2011016405A (en) Parking support device
JP2008213647A (en) Parking assist method and parking assist system
JP6559083B2 (en) Parking assistance device and parking assistance method
JP4977482B2 (en) Image providing apparatus, vehicle, and image providing method
JP2006327319A (en) Image displaying device for vehicle
JP4156181B2 (en) Parking assistance device
WO2013114871A1 (en) Driving assistance device and driving assistance method
JP6548593B2 (en) Parking assistance apparatus and parking assistance method
JP6724821B2 (en) Overhead video generation device, overhead video generation system, overhead video generation method and program

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150312

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20160121

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160127

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160324

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160427

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160510

R150 Certificate of patent or registration of utility model

Ref document number: 5943207

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees