WO2017061376A1 - 車両用視認装置及び車両用視認制御プログラム - Google Patents

車両用視認装置及び車両用視認制御プログラム Download PDF

Info

Publication number
WO2017061376A1
WO2017061376A1 PCT/JP2016/079293 JP2016079293W WO2017061376A1 WO 2017061376 A1 WO2017061376 A1 WO 2017061376A1 JP 2016079293 W JP2016079293 W JP 2016079293W WO 2017061376 A1 WO2017061376 A1 WO 2017061376A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
compressed
viewing
partial
changed
Prior art date
Application number
PCT/JP2016/079293
Other languages
English (en)
French (fr)
Inventor
智宣 市川
利成 中居
Original Assignee
株式会社東海理化電機製作所
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社東海理化電機製作所 filed Critical 株式会社東海理化電機製作所
Priority to EP16853530.0A priority Critical patent/EP3361722B1/en
Publication of WO2017061376A1 publication Critical patent/WO2017061376A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/28—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with an adjustable field of view
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/306—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using a re-scaling of images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/602—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective with an adjustable viewpoint
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/70—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by an event-triggered choice to display a specific image among a selection of captured images
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8046—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for replacing a rear-view mirror system

Definitions

  • the present invention relates to a vehicle visual recognition device and a vehicle visual control program for photographing the vehicle periphery and displaying the captured image to visually recognize the vehicle periphery.
  • a technique described in Japanese Patent Application Laid-Open No. 2012-170127 has been proposed as a vehicular visual recognition device that displays captured images of a vehicle and visually recognizes the vicinity of the vehicle.
  • a rear image is displayed in a size corresponding to a reflection image of a rearview mirror in a relatively wide central display region located in the center in the horizontal direction, and a right image is displayed in an outer display region of the central display region. It has been proposed to display the rear side image and the left rear side image more compressed than the rear image.
  • the present invention has been made in consideration of the above-described facts, and an object of the present invention is to expand a moving range when moving a display position of a visual image including a compressed image by changing a position to be cut out from a captured image. .
  • a partial image cut out from a captured image and a surrounding image corresponding to a part around the partial image of the captured image are cut out to have a size. From the captured image of each of the partial image and the surrounding image when changing the visual recognition range of the visual image and the display unit that displays the visual image obtained by combining the compressed image compressed from the partial image The position to be cut out is changed, and at least one of the compression ratio of the compressed image and the boundary position between the partial image and the compressed image in the visual image is changed in accordance with the changed size of the surrounding image.
  • the display unit includes a partial image cut out from a captured image and a surrounding image corresponding to a part around the partial image of the captured image.
  • a visual image obtained by combining the compressed image and the compressed image is displayed.
  • the control unit when changing the viewing range of the viewing image, changes the position to be cut out from each captured image of the partial image and the surrounding image, and compresses the compressed image according to the changed size of the surrounding image.
  • the display unit is controlled to display the image for visual recognition by changing at least one of the rate and the boundary position between the partial image and the compressed image in the image for visual recognition. As a result, it is possible to display the image for visual recognition even if the position where the captured image is cut out is changed beyond the position where the end of the captured image and the end of the image to be compressed abut. Therefore, the moving range when moving the display position of the visual image including the compressed image by changing the position to be cut out from the captured image can be expanded.
  • control unit changes the viewing range, and the end of the displayable image in a predetermined range that can be displayed on the display unit in the captured image including the partial image is displayed.
  • the displayable image may be controlled to be cut out from the captured image and displayed on the display unit.
  • the moving range of the image for visual recognition is expanded beyond the position where the edge of the captured image and the edge of the image to be compressed contact each other until the edge of the displayable image contacts the edge of the captured image. Can do.
  • control unit may further control to display the boundary line between the partial image and the compressed image as in the third aspect of the present disclosure. Thereby, the passenger can be notified of the boundary between the uncompressed partial image and the compressed image.
  • control unit may further display an image indicating that the compression rate is changed when the compression rate is changed.
  • crew can recognize that the compression rate of the compressed image in the image for visual recognition has been changed.
  • the present invention may be a vehicle visual control program for causing a computer to function as a control unit of the vehicle visual device according to any one of the first to fourth aspects of the present disclosure.
  • the moving range when moving the display position of the image including the compressed image can be expanded by changing the position cut out from the captured image.
  • FIG. 1 shows the vehicle mounting position example of the visual recognition apparatus for vehicles which concerns on embodiment of this invention.
  • FIG. 1 shows schematic structure of the visual recognition apparatus for vehicles of the visual recognition apparatus for vehicles which concerns on embodiment of this invention.
  • FIG. 1 is a block diagram which shows the structure of the control system of the visual recognition apparatus for vehicles which concerns on this embodiment.
  • FIG. 1A is a diagram illustrating an example of a vehicle mounting position of the vehicle visual recognition device according to the embodiment of the present invention
  • FIG. 1B is a diagram illustrating a schematic configuration of the vehicle visual recognition device.
  • a rear side camera 12 as a display unit
  • an operation unit 16 as a control unit
  • a control device 18 as a control unit
  • the rear side camera 12 is installed outside on the front side end of the vehicle side door (front side door, not shown) at the middle in the vertical direction and photographs the rear side of the vehicle.
  • the rear side camera 12 is provided in a substantially rectangular parallelepiped box-shaped housing 13 as a support, and a lens is arranged toward the rear side of the vehicle to photograph the rear side of the vehicle.
  • casing 13 is attached to the side door, and the housing
  • the monitor 14 is provided near the lower end of the front pillar, and mainly displays the captured image of the rear side camera 12. That is, the rear side of the vehicle can be visually recognized by checking the monitor 14 instead of the outer mirror.
  • the operation unit 16 gives an instruction to change the display position of the image displayed on the monitor 14, that is, the rear side viewing range.
  • a switch, a sensor, or the like for performing an instruction to change the viewing range in the vehicle width direction, an instruction to change the vehicle in the vertical direction, or the like.
  • the control device 18 is provided corresponding to each of the left and right, and performs display control of the captured image of the left and right rear side cameras 12.
  • the control device 18 changes the viewing range on the rear side of the vehicle when reversing to make it easier to visually recognize obstacles on the lower side of the vehicle, and sets the viewing range in conjunction with the operation of the direction indicator. You may make it change and carry out turning interlocking control etc. which make it easy to visually recognize the vehicle rear side.
  • FIG. 2 is a block diagram illustrating a configuration of a control system of the vehicle visual recognition device 10 according to the present embodiment.
  • the control device 18 includes a microcomputer in which a CPU 18A, a ROM 18B, a RAM 18C, and an I / O (input / output interface) 18D are connected to a bus 18E.
  • the ROM 18B stores various programs such as a vehicle visual control program for performing display control for displaying a rear side photographed image of the rear side camera 12 on the monitor 16.
  • the program stored in the ROM 18B is expanded in the RAM 18C and executed by the CPU 18A, whereby display control on the monitor 16 is performed.
  • the I / O 18D is connected with an operation unit 16, a rear side camera 12, and a monitor 14 for instructing a change in the viewing range.
  • the operation unit 16 outputs a change instruction signal to the control device 18 when an instruction to change the rear side viewing range is given by the occupant.
  • the rear side camera 12 obtains a rear side photographed image by photographing the rear side of the vehicle.
  • the rear side photographed image obtained by photographing is output to the control device 18 as a photographing result of the rear side camera 12.
  • the monitor 16 displays a rear side photographed image photographed by the rear side camera 12 according to the control of the control device 18 during normal driving.
  • the control device 18 performs display control on the monitor 16 based on the photographing result of the rear side camera 12, and receives a change instruction signal instructed to change the rear side viewing range by the operation unit 16. In such a case, control is performed to change the display position of the monitor 16 (rear viewing range).
  • control device 18 may perform display control of the left and right monitors 14 with one control device 18, or a pair may be provided corresponding to the left and right of the vehicle.
  • the other control device 18 may be connected to each I / O 18D so that they can communicate with each other.
  • a part of the image is cut out from the photographed image photographed by the rear side camera 12 and displayed on the monitor 14.
  • a partial image cut out from the captured image, a compressed image obtained by cutting out a surrounding image corresponding to a part around the cut out partial image from the captured image, and compressing the size from the partial image Are generated and displayed on the monitor 14.
  • the captured image is an image that is horizontally reversed, so that the image for visual recognition subjected to mirror image conversion that reverses the right and left is displayed.
  • the position of the boundary line between the partial image displayed on the monitor 14 and the compressed image is a fixed position.
  • the dotted line in FIG. 3 is set as the displayable image 32 in the displayable range on the monitor 14, and the displayable image 32 is determined in advance.
  • a partial image 34 of the range is cut out.
  • a surrounding image 36 in a predetermined range indicated by a one-dot chain line corresponding to a region outside the vehicle of the partial image 34 is cut out and compressed at a predetermined compression rate to generate a compressed image 38.
  • a visual image 40 obtained by synthesizing the partial image 34 and the compressed image 38 and mirror-converted is generated and displayed on the monitor 14. That is, by displaying the compressed image 38, the area outside the vehicle can be displayed at a wider angle than when the displayable image 32 in the dotted line area of FIG.
  • the passenger is notified of the boundary between the uncompressed partial image 34 and the compressed image 38. It has become.
  • the viewing range of the viewing image 40 when the viewing range of the viewing image 40 is changed, as shown in FIG. 4, the areas of the partial image 34 and the surrounding image 36 cut out from the photographed image are moved respectively (in FIG. (Move to the right outside the vehicle) and cut out and display.
  • the visual image 40 can be generated until the end of the surrounding image 36 and the end of the captured image 30 come into contact with each other. Cannot generate the compressed image 38 while maintaining the compression ratio. Therefore, the moving range of the image for visual recognition is limited until the end of the surrounding image 36 and the end of the captured image 30 come into contact with each other.
  • the viewing image 40 is generated by changing the compression rate of the compressed image according to the size of the surrounding image 36 cut out from the captured image 30, thereby moving the viewing image 40 in the moving range. Can be expanded.
  • the moving range of the visual image 40 can be expanded by generating the compressed image 38 with the compression rate lower than the original compression rate according to the size of the surrounding image 36.
  • the movement range of the image 40 for visual recognition can be expanded further. That is, in this embodiment, from the state where one end of the displayable image 32 is in contact with one end of the captured image 30, the other end of the displayable image 32 is the other end of the captured image 30.
  • the range of movement of the image for visual recognition 40 can be set up to contact with.
  • FIG. 8 is a flowchart illustrating an example of a flow of processing performed by the control device 18 of the vehicle visual recognition device 10 according to the present embodiment. Note that the processing in FIG. 8 will be described as starting when an ignition switch (not shown) is turned on and ending when the ignition switch is turned off. 8 is performed by the CPU 18A developing and executing the vehicle visual control program stored in the ROM 18B on the RAM 18C.
  • step 100 the CPU 18A starts acquiring a photographed image photographed by the rear side camera 12, and proceeds to step 102. That is, the imaging results of the rear side camera 12 are sequentially acquired.
  • step 102 the CPU 18A cuts out the partial image 34 from the captured image 30, and proceeds to step 104.
  • Step 104 the CPU 18 ⁇ / b> A cuts out the surrounding image 36 that is a region outside the vehicle of the partial image 34 from the captured image 30 and proceeds to Step 106.
  • step 106 the CPU 18 ⁇ / b> A determines whether or not the end of the photographed image 30 comes into contact with the end of the displayable image 32. That is, as shown in FIG. 7, it is determined whether or not the end portion of the displayable image 32 indicated by a dotted line is in contact with the vehicle outer end portion of the photographed image 30, and if the determination is negative, step 108 is performed. If the result is affirmative, the process proceeds to step 112.
  • step 108 the CPU 18A generates a compressed image 38 by compressing the surrounding image 36 at a compression rate corresponding to the size of the surrounding image 36, and proceeds to step 110. That is, the compressed image 38 is generated at a constant compression rate until the end of the surrounding image 36 and the end of the captured image 30 come into contact with each other. Accordingly, the compressed image 38 is generated at a lower compression rate.
  • step 110 the CPU 18A generates a visual image 40 obtained by synthesizing the partial image 34 and the compressed image 38 and converted into a mirror image, displays the image 40 on the monitor 14, and proceeds to step 114.
  • step 112 the CPU 18A cuts out the displayable image 32 from the captured image 30, converts it into a mirror image, and displays it on the monitor 14 as a visual image 40 as shown in FIG.
  • step 114 the CPU 18A determines whether or not a change in the viewing range has been instructed. That is, it is determined whether or not an instruction for changing the viewing range is given by the occupant operating the operation unit 16. If the determination is affirmative, the process proceeds to step 116, and if the determination is negative, the process returns to step 102 and the above-described processing is repeated.
  • step 116 the CPU 18A changes the cutout positions of the partial image 34 and the surrounding image 36 in accordance with the operation direction of the operation unit 16, returns to step 102, and repeats the above-described processing.
  • the compression ratio is constant until the end of the surrounding image 36 abuts the end of the captured image 30. Since the rate is changed, an image indicating that the compression rate is changed may be further displayed. For example, as illustrated in FIG. 9A, it may be notified that the compression rate has been changed by changing the thickness of the boundary line 42. For example, FIG. 9A shows an example in which the boundary line 42 with the lower compression rate is made thicker and the boundary line 42 with the higher compression rate is made thinner. Or you may alert
  • the moving range of the visual image 40 is expanded by changing the compression rate of the compressed image 38 according to the size of the surrounding image 36, but instead of changing the compression rate.
  • the size of the compressed image 38 may be changed by moving the position of the boundary line 42 while keeping the compression rate constant. That is, as shown in FIGS. 10A and 10B, until the end of the surrounding image 36 and the end of the captured image 30 come into contact with each other, the partial image 34 and the compressed image with a constant compression rate are the same as in the above embodiment. 38 to generate a visual image for display. And when the edge part of the surrounding image 36 and the edge part of the picked-up image 30 contact
  • the compressed image 38 may be generated while maintaining the compression rate by reducing the size of. Alternatively, both the compression ratio and the boundary line 42 may be changed according to the size of the surrounding image 36.
  • the present invention is not limited to this, and the partial image 34 and the compressed image 38 may be arranged in the vehicle vertical direction.
  • the above display method is applied when the viewing range is changed in conjunction with turning or retreating. May be. That is, in steps 114 and 116, it may be determined whether or not to change the position according to turning interlocking or retreating interlocking, and the cut position may be changed to interlocking with turning or retreating.
  • control device 18 in the above embodiment has been described as a software process, it is not limited to this.
  • processing may be performed by hardware, or may be processing that combines both hardware and software.
  • control device 18 in the above embodiment may be stored and distributed as a program in a storage medium.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

撮影画像から一部を切り出した部分画像と、撮影画像の部分画像の周りの一部に対応する周囲画像を切り出してサイズを部分画像より圧縮した圧縮画像と、を合成した視認用画像を表示するモニタ（１４）と、視認用画像の視認範囲を変更する場合に、部分画像及び周囲画像の各々の撮影画像から切り出す位置を変更し、変更した周囲画像の大きさに応じて、圧縮画像の圧縮率及び視認用画像中の部分画像と圧縮画像との境界位置の少なくとも一方を変更して視認用画像を表示するようモニタ（１４）を制御する制御装置（１８）と、を備える。

Description

車両用視認装置及び車両用視認制御プログラム
　本発明は、車両周辺を撮影して撮影画像を表示することにより車両周辺を視認する車両用視認装置及び車両用視認制御プログラムに関する。
　車両周辺の撮影画像を表示して車両周辺を視認する車両用視認装置としては、例えば、特開２０１２－１７０１２７号公報に記載の技術が提案されている。
　特開２０１２－１７０１２７号公報では、横方向中央に位置する比較的広い中央表示領域に、ルームミラーの反射像に対応したサイズで後方映像を表示すると共に、中央表示領域の外側表示領域に、右後側方映像と左後側方映像とを後方映像よりも圧縮して表示することが提案されている。
　しかしながら、特開２０１２－１７０１２７号公報では、中央にルームミラーの反射像に対応したサイズの映像を表示し、中央表示領域の両端に圧縮した映像を表示するが、表示位置を変更して視認範囲を変更することまでは想定されていない。
　特開２０１２－１７０１２７号公報では、表示位置を変更しようとすると、撮影範囲を変更するか、或いは、撮影画像から切り出す画像の位置を移動することが考えられるが、撮影範囲を変更する場合には、撮影するカメラを移動させる構成が必要となる。一方、圧縮率を一定に保持したまま撮影画像から切り出す位置を変更する場合には、撮影画像の端部と圧縮対象の画像の端部とが当接するまで切出し位置を移動した場合、それ以上は表示位置を変更することができないため、改善の余地がある。
　本発明は、上記事実を考慮して成されたもので、撮影画像から切り出す位置を変更して圧縮画像を含む視認用画像の表示位置を移動する際の移動範囲を拡大することを目的とする。
　上記目的を達成するために本開示の第１の態様は、撮影画像から一部を切り出した部分画像と、前記撮影画像の前記部分画像の周りの一部に対応する周囲画像を切り出してサイズを前記部分画像より圧縮した圧縮画像と、を合成した視認用画像を表示する表示部と、前記視認用画像の視認範囲を変更する場合に、前記部分画像及び前記周囲画像の各々の前記撮影画像から切り出す位置を変更し、変更した前記周囲画像の大きさに応じて、前記圧縮画像の圧縮率及び前記視認用画像中の前記部分画像と前記圧縮画像との境界位置の少なくとも一方を変更して前記視認用画像を表示するよう前記表示部を制御する制御部と、を備えている。
　本開示の第１の態様によれば、表示部には、撮影画像から一部を切り出した部分画像と、撮影画像の部分画像の周りの一部に対応する周囲画像を切り出してサイズを部分画像より圧縮した圧縮画像と、を合成した視認用画像が表示される。これにより、撮影画像から切り出した部分画像のみを表示する場合に比べて、広角の視認用画像を表示することができる。
　また、制御部では、視認用画像の視認範囲を変更する場合に、部分画像及び周囲画像の各々の撮影画像から切り出す位置を変更し、変更した周囲画像の大きさに応じて、圧縮画像の圧縮率及び視認用画像中の部分画像と圧縮画像との境界位置の少なくとも一方を変更して視認用画像を表示するよう表示部が制御される。これにより、撮影画像の端部と圧縮対象の画像の端部とが当接する位置を超えて撮影画像の切り出す位置を変更しても視認用画像を表示することが可能となる。従って、撮影画像から切り出す位置を変更して圧縮画像を含む視認用画像の表示位置を移動する際の移動範囲を拡大することできる。
　なお、制御部は、本開示の第２の態様のように、視認範囲を変更して、部分画像を含む撮影画像中における表示部に表示可能な予め定めた範囲の表示可能画像の端部が撮影画像の端部と当接する場合には、表示可能画像を撮影画像から切り出して表示部に表示するよう制御してもよい。これにより、撮影画像の端部と圧縮対象の画像の端部とが当接する位置を超えて表示可能画像の端部が撮影画像の端部と当接するまで視認用画像の移動範囲を拡大することができる。
　また、制御部は、本開示の第３の態様のように、部分画像と圧縮画像の境界線を表示するよう更に制御してもよい。これにより、圧縮されていない部分画像と、圧縮画像との境界を乗員に報知できる。
　また、制御部は、本開示の第４の態様のように、圧縮率を変更する場合に、圧縮率を変更していることを表す画像を更に表示してもよい。これにより、乗員が、視認用画像中の圧縮画像の圧縮率が変更されていることを認識することができる。
　なお、本願発明は、コンピュータを、本開示の第１～第４の何れか１つの態様の車両用視認装置の制御部として機能させるための車両用視認制御プログラムとしてもよい。
　以上説明したように本発明によれば、撮影画像から切り出す位置を変更して圧縮画像を含む画像の表示位置を移動する際の移動範囲を拡大することができる、という効果がある。
は本発明の実施の形態に係る車両用視認装置の車両搭載位置例を示す図である。 は本発明の実施の形態に係る車両用視認装置の車両用視認装置の概略構成を示す図である。 本実施形態に係る車両用視認装置の制御系の構成を示すブロック図である。 撮影画像からの視認用画像の生成を説明するための図である。 撮影画像から切り出す部分画像及び周囲画像の領域を各々車両外側に移動した一例を示す図である。 周囲画像の端部と撮影画像の端部とが当接するまで切り出す部分画像及び周囲画像の領域を各々車両外側に移動した例を示す図である。 周囲画像の大きさに応じて元の圧縮率より圧縮率を低くして圧縮画像を生成することで、視認用画像の移動範囲を拡大した例を示す図である。 表示可能画像をそのまま視認用画像として生成して表示した例を示す図である。 本実施形態に係る車両用視認装置の制御装置で行われる処理の流れの一例を示すフローチャートである。 境界線の太さを変えることにより圧縮率が変更されていることを報知する例を示す図である。 圧縮率をモニタに表示する例を示す図である。 境界線を移動して圧縮画像を小さくすることで圧縮率を維持して圧縮画像を生成する例を説明するための図であり、移動前の状態を示す図である。 境界線を移動して圧縮画像を小さくすることで圧縮率を維持して圧縮画像を生成する例を説明するための図であり、周囲画像の端部と撮影画像の端部とが当接した状態を示す図である。 境界線を移動して圧縮画像を小さくすることで圧縮率を維持して圧縮画像を生成する例を説明するための図であり、境界線を移動した状態を示す図である。
　以下、図面を参照して本発明の実施の形態の一例を詳細に説明する。図１Ａは、本発明の実施の形態に係る車両用視認装置の車両搭載位置例を示す図であり、図１Ｂは車両用視認装置の概略構成を示す図である。
　本実施形態に係る車両用視認装置は、後側方カメラ１２、表示部としてのモニタ１４、操作部１６、及び制御部としての制御装置１８が車両の左右に対応してそれぞれ設けられている。
　後側方カメラ１２は、車両のサイドドア（フロントサイドドア、図示省略）の上下方向中間部の車両前側端に外側に設置されて車両後側方を撮影する。後側方カメラ１２は、支持体としての略直方体形箱状の筐体１３に設けられており、レンズが車両後側方に向けて配置され、車両の後側方を撮影する。筐体１３の車幅方向内側端部は、サイドドアに取付けられており、筐体１３がサイドドア（車体側）に車両前後方向に回動可能に支持されている。
　モニタ１４は、フロントピラーの下端付近に設けられ、後側方カメラ１２の撮影画像を主に表示する。すなわち、アウターミラーの代わりとされ、モニタ１４を確認することにより、車両後側方を視認することができる。
　操作部１６は、モニタ１４に表示される画像の表示位置、すなわち、後側方の視認範囲の変更の指示等を行う。例えば、視認範囲の車幅方向への変更指示や、車両上下方向への変更指示等を行うためのスイッチやセンサ等を備える。
　制御装置１８は、左右のそれぞれに対応して設けられており、左右各々の後側方カメラ１２の撮影画像の表示制御を行う。なお、制御装置１８は、後退時に車両後側方の視認範囲を変更して車両側方下側の障害物を視認し易くする後退連動制御や、方向指示器の操作に連動して視認範囲を変更して車両後側方を視認し易くする旋回連動制御等を更に行うようにしてもよい。
　続いて、本実施形態に係る車両用視認装置１０の制御系の構成について説明する。図２は、本実施形態に係る車両用視認装置１０の制御系の構成を示すブロック図である。
　制御装置１８は、ＣＰＵ１８Ａ、ＲＯＭ１８Ｂ、ＲＡＭ１８Ｃ、及びＩ／Ｏ（入出力インタフェース）１８Ｄがそれぞれバス１８Ｅに接続されたマイクロコンピュータで構成されている。
　ＲＯＭ１８Ｂには、後側方カメラ１２の後側方撮影画像をモニタ１６に表示するための表示制御を行うための車両用視認制御プログラム等の各種プログラムが記憶されている。ＲＯＭ１８Ｂに記憶されたプログラムをＲＡＭ１８Ｃに展開してＣＰＵ１８Ａが実行することにより、モニタ１６への表示制御が行われる。
　Ｉ／Ｏ１８Ｄには、視認範囲の変更等を指示するための操作部１６、後側方カメラ１２、及びモニタ１４が接続されている。
　操作部１６は、後側方の視認範囲の変更の指示等が乗員によって行われると、変更指示信号を制御装置１８に出力する。
　後側方カメラ１２は、車両後側方を撮影することによって後側方撮影画像を得る。撮影によって得られた後側方撮影画像は、後側方カメラ１２の撮影結果として制御装置１８に出力する。
　モニタ１６は、通常の走行時は、後側方カメラ１２によって撮影された後側方撮影画像を制御装置１８の制御に従って表示する。
　そして、制御装置１８は、後側方カメラ１２の撮影結果に基づいて、モニタ１６への表示制御を行うと共に、操作部１６によって後側方の視認範囲の変更が指示されて変更指示信号を受信した場合に、モニタ１６の表示位置（後側方の視認範囲）を変更する制御を行う。
　なお、制御装置１８は、１つの制御装置１８で左右のモニタ１４の表示制御を行ってもよいし、車両の左右に対応して一対設けられてもよい。左右に対応して一対の制御装置１８を設ける場合には、それぞれ相互通信可能なようにそれぞれのＩ／Ｏ１８Ｄに他方の制御装置１８を接続してもよい。
　ここで、制御装置１８によるモニタ１４への後側方カメラ１２の撮影画像の表示方法について詳細に説明する。
　本実施形態に係る車両用視認装置１０では、後側方カメラ１２によって撮影された撮影画像から一部の画像を切り出してモニタ１４に表示する。このとき、本実施形態では、撮影画像から一部を切り出した部分画像と、切り出した部分画像の周りの一部に対応する周囲画像を撮影画像から切り出してサイズを部分画像より圧縮した圧縮画像と、を合成した視認用画像を生成してモニタ１４に表示する。また、モニタ１４に視認用画像を表示する際には、撮影画像が左右反転した画像となっているため、左右を反転する鏡像変換を行った視認用画像を表示する。なお、本実施形態では、モニタ１４の表示する部分画像と圧縮画像の境界線の位置は一定位置とされている。
　具体的には、図３に示す撮影画像３０から視認用画像４０を生成する場合、図３の点線をモニタ１４に表示可能範囲の表示可能画像３２とし、該表示可能画像３２のうち予め定めた範囲の部分画像３４を切り出す。また、該部分画像３４の車両外側の領域に対応する一点鎖線で示す予め定めた範囲の周囲画像３６を切り出して予め定めた圧縮率で圧縮して圧縮画像３８を生成する。そして、部分画像３４と圧縮画像３８とを合成して鏡像変換した視認用画像４０を生成してモニタ１４に表示する。すなわち、圧縮画像３８を表示することにより、図３の点線の領域の表示可能画像３２をそのままモニタ１４に表示するよりも車両の外側の領域を広角に表示することができる。
　また、視認用画像４０中の部分画像３４と圧縮画像３８との間に境界線４２を表示することにより、圧縮されていない部分画像３４と、圧縮画像３８との境界を乗員に報知するようになっている。
　ところで、このような視認用画像４０の視認範囲を変更する場合、図４に示すように、撮影画像から切り出す部分画像３４及び周囲画像３６の領域を各々移動（図４では図３に対して紙面右方向の車両外側に移動）して切り出して表示すればよい。しかしながら、図５に示すように、周囲画像３６の端部と撮影画像３０の端部とが当接するまでは、視認用画像４０を生成することができるが、それ以上車両外側へ移動する場合には、圧縮率を維持したままでは圧縮画像３８を生成できない。そのため、視認用画像の移動範囲が周囲画像３６の端部と撮影画像３０の端部とが当接するまでに限定されてしまう。
　そこで、本実施形態では、撮影画像３０から切り出した周囲画像３６の大きさに応じて、圧縮画像の圧縮率を変更して、視認用画像４０を生成することにより、視認用画像４０の移動範囲を拡大可能にしている。
　すなわち、図６に示すように、画像の切り出す範囲を移動して撮影画像３０の端部と周囲画像３６の端部が当接して更に車両外側に切り出す範囲を移動すると、撮影画像３０から切り出す周囲画像３６の大きさが小さくなる。このような場合には、周囲画像３６の大きさに応じて元の圧縮率より圧縮率を低くして圧縮画像３８を生成することで、視認用画像４０の移動範囲を拡大することができる。
　また、更に車両外側へ移動して、撮影画像３０の端部と、部分画像３４を含む表示可能画像３２の端部が当接する場合には、図７に示すように、鏡像変換した表示可能画像３２をそのまま視認用画像４０として生成してモニタ１４に表示する。これにより、視認用画像４０の移動範囲を更に拡大することができる。すなわち、本実施形態では、表示可能画像３２の一方の端部が撮影画像３０の一方の端部に当接した状態から、表示可能画像３２の他方の端部が撮影画像３０の他方の端部に当接するまでを視認用画像４０の移動範囲とすることができる。
　続いて、上述のように構成された本実施形態に係る車両用視認装置１０の制御装置１８で行われる具体的な処理について説明する。図８は、本実施形態に係る車両用視認装置１０の制御装置１８で行われる処理の流れの一例を示すフローチャートである。なお、図８の処理は、図示しないイグニッションスイッチがオンされた場合に開始し、オフされた場合に終了するものとして説明する。また、図８の処理は、ＲＯＭ１８Ｂに記憶された車両用視認制御プログラムをＣＰＵ１８ＡがＲＡＭ１８Ｃに展開して実行することにより行われる。
　まず、ステップ１００では、ＣＰＵ１８Ａが、後側方カメラ１２によって撮影された撮影画像を取得開始してステップ１０２へ移行する。すなわち、後側方カメラ１２の撮影結果を順次取得する。
　ステップ１０２では、ＣＰＵ１８Ａが、撮影画像３０から部分画像３４を切り出してステップ１０４へ移行する。
　ステップ１０４では、ＣＰＵ１８Ａが、撮影画像３０から部分画像３４の車両外側の領域となる周囲画像３６を切り出してステップ１０６へ移行する。
　ステップ１０６では、ＣＰＵ１８Ａが、表示可能画像３２の端部に撮影画像３０の端部が当接するか否かを判定する。すなわち、図７に示すように、撮影画像３０の車両外側端部に点線で示す表示可能画像３２の端部が当接したか否かを判定し、該判定が否定された場合にはステップ１０８へ移行し、肯定された場合にはステップ１１２へ移行する。
　ステップ１０８では、ＣＰＵ１８Ａが、周囲画像３６の大きさに応じた圧縮率で周囲画像３６を圧縮して圧縮画像３８を生成してステップ１１０へ移行する。すなわち、周囲画像３６の端部と撮影画像３０の端部が当接するまでは一定の圧縮率で圧縮画像３８を生成し、これよりも車両外側に視認範囲を移動して周囲画像３６が小さくなるに従って、圧縮率を低くして圧縮画像３８を生成する。
　ステップ１１０では、ＣＰＵ１８Ａが、部分画像３４と圧縮画像３８とを合成して鏡像変換した視認用画像４０を生成してモニタ１４に表示してステップ１１４へ移行する。
　一方、ステップ１１２では、ＣＰＵ１８Ａが表示可能画像３２を撮影画像３０から切り出して鏡像変換して、図７に示すように、視認用画像４０としてモニタ１４に表示してステップ１１４へ移行する。
　ステップ１１４では、ＣＰＵ１８Ａが、視認範囲の変更が指示されたか否かを判定する。すなわち、乗員が操作部１６を操作して視認範囲を変更する指示が行われたか否かを判定する。該判定が肯定された場合にはステップ１１６へ移行し、否定された場合にはステップ１０２に戻って上述の処理を繰り返す。
　ステップ１１６では、ＣＰＵ１８Ａが、部分画像３４及び周囲画像３６の各々の切出し位置を操作部１６の操作方向に従って変更してステップ１０２に戻って上述の処理を繰り返す。
　このように制御装置１８による制御を行うことで、モニタ１４の視認用画像によって視認できる視認範囲を変更することができる。また、撮影画像から切り出す周囲画像３６の大きさに応じて圧縮率を変更して圧縮画像３８を生成することにより、一定の圧縮率の圧縮画像を用いて視認用画像を生成する場合に比べて、視認用画像４０の移動範囲を拡大することができる。
　なお、上記の実施形態では、視認範囲を変更する場合、周囲画像３６の端部が撮影画像３０の端部に当接するまで一定の圧縮率とされ、それ以上車両外側に移動する場合は、圧縮率が変更されるので、圧縮率が変更されていることを表す画像を更に表示してもよい。例えば、図９Ａに示すように、境界線４２の太さを変えることにより圧縮率が変更されていることを報知してもよい。例えば、図９Ａでは圧縮率が低い方の境界線４２を太くし、圧縮率が高い方の境界線４２を細くした例を示す。或いは、境界線４２の色を変えることにより圧縮率が変更されていることを報知してもよい。或いは、図９Ｂに示すように、圧縮率を数値でモニタ１４に表示してもよい。
　また、上記の実施形態では、周囲画像３６の大きさに応じて圧縮画像３８の圧縮率を変更することにより視認用画像４０の移動範囲を拡大するようにしたが、圧縮率を変更する代わりに、圧縮率は一定としたまま境界線４２の位置を移動して圧縮画像３８の大きさを変更してもよい。すなわち、図１０Ａ、図１０Ｂに示すように、周囲画像３６の端部と撮影画像３０の端部が当接するまでは、上記の実施形態と同様に、部分画像３４と一定の圧縮率の圧縮画像３８とを合成して視認用画像を生成して表示する。そして、周囲画像３６の端部と撮影画像３０の端部が当接して更に車両外側に視認範囲を移動する場合には、図１０Ｃに示すように、境界線４２を移動して、圧縮画像３８の大きさを小さくすることにより圧縮率を維持して圧縮画像３８を生成してもよい。或いは、周囲画像３６の大きさに応じて圧縮率及び境界線４２を共に変更してもよい。
　また、上記の実施形態では、部分画像３４と圧縮画像３８が車幅方向に配列した場合を例に説明したが、これに限るものではなく、車両上下方向に配列してもよい。
　また、上記の実施形態では、乗員が操作部１６を操作することで視認範囲の変更する例を説明したが、旋回や後退に連動して視認範囲を変更する場合に上記の表示方法を適用してもよい。すなわち、ステップ１１４、１１６は、旋回連動や後退連動に応じた位置変更を行うか否かを判定して旋回や後退に連動した切出し位置に変更してもよい。
　また、上記の実施形態における制御装置１８で行われる処理は、ソフトウエアの処理として説明したが、これに限るものではない。例えば、ハードウエアで行う処理としてもよいし、ハードウエアとソフトウエアの双方を組み合わせた処理としてもよい。
　また、上記の実施形態における制御装置１８で行われる処理は、プログラムとして記憶媒体に記憶して流通させるようにしてもよい。
　さらに、本発明は、上記に限定されるものでなく、上記以外にも、その主旨を逸脱しない範囲内において種々変形して実施可能であることは勿論である。
　２０１５年１０月９日に出願された日本国特許出願２０１５－２０１２２１号の開示は、その全体が参照により本明細書に取り込まれる。

Claims (4)

  1. 　撮影画像から一部を切り出した部分画像と、前記撮影画像の前記部分画像の周りの一部に対応する周囲画像を切り出してサイズを前記部分画像より圧縮した圧縮画像と、を合成した視認用画像を表示する表示部と、
    　前記視認用画像の視認範囲を変更する場合に、前記部分画像及び前記周囲画像の各々の前記撮影画像から切り出す位置を変更し、変更した前記周囲画像の大きさに応じて、前記圧縮画像の圧縮率及び前記視認用画像中の前記部分画像と前記圧縮画像との境界位置の少なくとも一方を変更して前記視認用画像を表示するよう前記表示部を制御する制御部と、
    　を備えた車両用視認装置。
  2. 　前記制御部は、前記視認範囲を変更して、前記部分画像を含む前記撮影画像中における前記表示部に表示可能な予め定めた範囲の表示可能画像の端部が前記撮影画像の端部と当接する場合には、前記表示可能画像を前記撮影画像から切り出して前記表示部に表示するよう制御する請求項１に記載の車両用視認装置。
  3. 　前記制御部は、前記部分画像と前記圧縮画像の境界線を表示するよう更に制御する請求項１又は請求項２に記載の車両用視認装置。
  4. 　前記制御部は、前記圧縮率を変更する場合に、圧縮率を変更していることを表す画像を更に表示する請求項１～３の何れか１項に記載の車両用視認装置。
PCT/JP2016/079293 2015-10-09 2016-10-03 車両用視認装置及び車両用視認制御プログラム WO2017061376A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
EP16853530.0A EP3361722B1 (en) 2015-10-09 2016-10-03 Viewing device for vehicles and viewing control program for vehicles

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-201221 2015-10-09
JP2015201221A JP6683451B2 (ja) 2015-10-09 2015-10-09 車両用視認装置

Publications (1)

Publication Number Publication Date
WO2017061376A1 true WO2017061376A1 (ja) 2017-04-13

Family

ID=58487568

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/079293 WO2017061376A1 (ja) 2015-10-09 2016-10-03 車両用視認装置及び車両用視認制御プログラム

Country Status (3)

Country Link
EP (1) EP3361722B1 (ja)
JP (1) JP6683451B2 (ja)
WO (1) WO2017061376A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019161559A (ja) * 2018-03-15 2019-09-19 パナソニックＩｐマネジメント株式会社 車両周辺表示システム、表示制御装置およびコンピュータプログラム
EP3743311B1 (de) 2018-01-26 2023-09-06 Continental Automotive Technologies GmbH Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7141817B2 (ja) * 2017-07-24 2022-09-26 ラピスセミコンダクタ株式会社 画像処理装置
JP2019036926A (ja) * 2017-08-21 2019-03-07 株式会社東海理化電機製作所 車両用視認装置
JP6960803B2 (ja) * 2017-08-29 2021-11-05 サカエ理研工業株式会社 車両周辺視認装置
JP7266165B2 (ja) * 2017-12-19 2023-04-28 パナソニックＩｐマネジメント株式会社 撮像装置、撮像システム、および表示システム
KR102441924B1 (ko) * 2018-03-13 2022-09-08 에스엘 주식회사 카메라 모니터 시스템
WO2020079831A1 (ja) * 2018-10-19 2020-04-23 三菱電機株式会社 後方画像処理装置および後方画像表示方法
JP7128096B2 (ja) * 2018-11-26 2022-08-30 本田技研工業株式会社 映像表示装置
JP7202903B2 (ja) * 2019-01-23 2023-01-12 本田技研工業株式会社 表示システム、走行制御装置、表示制御方法およびプログラム
EP4131944A4 (en) * 2020-03-27 2023-07-26 JVCKENWOOD Corporation DISPLAY CONTROL DEVICE, DISPLAY CONTROL METHOD AND PROGRAM
JP7459607B2 (ja) * 2020-03-27 2024-04-02 株式会社Ｊｖｃケンウッド 表示制御装置、表示制御方法およびプログラム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005328181A (ja) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp 周囲確認装置
WO2015098156A1 (ja) * 2013-12-27 2015-07-02 株式会社Ｊｖｃケンウッド 視界支援装置、視界支援方法、及び視界支援プログラム
JP2015136056A (ja) * 2014-01-17 2015-07-27 株式会社デンソー 運転支援装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005328181A (ja) * 2004-05-12 2005-11-24 Mitsubishi Electric Corp 周囲確認装置
WO2015098156A1 (ja) * 2013-12-27 2015-07-02 株式会社Ｊｖｃケンウッド 視界支援装置、視界支援方法、及び視界支援プログラム
JP2015136056A (ja) * 2014-01-17 2015-07-27 株式会社デンソー 運転支援装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3361722A4 *

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3743311B1 (de) 2018-01-26 2023-09-06 Continental Automotive Technologies GmbH Verfahren und vorrichtung zum betreiben eines kamera-monitor-systems für ein kraftfahrzeug
JP2019161559A (ja) * 2018-03-15 2019-09-19 パナソニックＩｐマネジメント株式会社 車両周辺表示システム、表示制御装置およびコンピュータプログラム
CN110271489A (zh) * 2018-03-15 2019-09-24 松下知识产权经营株式会社 车辆周边显示***以及显示控制装置
JP7113348B2 (ja) 2018-03-15 2022-08-05 パナソニックＩｐマネジメント株式会社 車両周辺表示システム、表示制御装置およびコンピュータプログラム
CN110271489B (zh) * 2018-03-15 2022-10-25 松下知识产权经营株式会社 车辆周边显示***以及显示控制装置

Also Published As

Publication number Publication date
JP2017073733A (ja) 2017-04-13
JP6683451B2 (ja) 2020-04-22
EP3361722A4 (en) 2019-04-03
EP3361722A1 (en) 2018-08-15
EP3361722B1 (en) 2020-05-06

Similar Documents

Publication Publication Date Title
WO2017061376A1 (ja) 車両用視認装置及び車両用視認制御プログラム
KR100936557B1 (ko) 차량용 주변 감시 장치 및 영상 표시 방법
JP2016168877A (ja) 車両用視認装置
WO2014087594A1 (ja) 車両監視装置
JP2018127083A (ja) 画像表示装置
WO2017199888A1 (ja) 車両用視認装置
WO2018123546A1 (ja) 車両用視認装置
JP2018030526A (ja) 車両用視認装置及び車両用視認画像表示方法
JP2019116220A (ja) 車両用視認装置
WO2017179389A1 (ja) 車両用視認装置
US20210170946A1 (en) Vehicle surrounding image display device
JP2019036926A (ja) 車両用視認装置
CN111186375B (zh) 车辆用电子镜***
KR101941607B1 (ko) 차량용 촬영 표시 장치 및 기록 매체
WO2019163564A1 (ja) 車両用視認装置、及び車両用視認装置の撮影部の画角設定方法
WO2015115103A1 (ja) 画像処理装置、カメラシステム、および画像処理方法
WO2016059765A1 (ja) 映像処理装置、及び車載映像処理システム
WO2018123547A1 (ja) 車両用視認装置
CN107972583B (zh) 车辆用成像显示装置以及记录介质
JP2022016948A (ja) 電子後方視界システム
WO2019155935A1 (ja) 車両用視認装置
JP2019001376A (ja) 車両用視認装置
JP2017149211A (ja) 車両用システム及びコンピュータプログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16853530

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

WWE Wipo information: entry into national phase

Ref document number: 2016853530

Country of ref document: EP