WO2013065325A1 - 障害物警報装置 - Google Patents

障害物警報装置 Download PDF

Info

Publication number
WO2013065325A1
WO2013065325A1 PCT/JP2012/051360 JP2012051360W WO2013065325A1 WO 2013065325 A1 WO2013065325 A1 WO 2013065325A1 JP 2012051360 W JP2012051360 W JP 2012051360W WO 2013065325 A1 WO2013065325 A1 WO 2013065325A1
Authority
WO
WIPO (PCT)
Prior art keywords
index
area
displayed
vehicle
attention area
Prior art date
Application number
PCT/JP2012/051360
Other languages
English (en)
French (fr)
Inventor
丸岡哲也
角屋明
池田圭吾
Original Assignee
アイシン精機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by アイシン精機株式会社 filed Critical アイシン精機株式会社
Priority to JP2013541644A priority Critical patent/JP5674071B2/ja
Priority to US13/483,699 priority patent/US9396401B2/en
Publication of WO2013065325A1 publication Critical patent/WO2013065325A1/ja

Links

Images

Classifications

    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/26—Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view to the rear of the vehicle
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/168—Driving aids for parking, e.g. acoustic or visual feedback on parking space
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/307—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing virtually distinguishing relevant parts of a scene from the background of the scene
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning

Definitions

  • the present invention relates to an obstacle alarm device that clearly indicates to an occupant the presence of an obstacle approaching a vehicle.
  • Patent Documents 1 and 2 There are blind spots around the vehicle that cannot be seen from the driver's position, and the driver needs to pay close attention to the surrounding of the vehicle when driving the vehicle. In particular, when the vehicle is moved backward and parked, there are many users who are not good at parking itself, and there is not a lot of mental fatigue. Thus, conventionally, techniques for monitoring obstacles around the vehicle have been used (for example, Patent Documents 1 and 2).
  • the vehicle obstacle alarm device described in Patent Document 1 includes a lateral movement obstacle detection means, a lateral movement direction detection means, and a lateral movement information provision means.
  • the laterally moving obstacle detection means detects an obstacle that moves in the direction crossing the traveling direction in front of the vehicle.
  • the lateral movement direction detection means detects the lateral movement direction of the obstacle detected by the lateral movement obstacle detection means.
  • the lateral movement information providing means provides the driver with information regarding the lateral movement direction of the obstacle detected by the lateral movement direction detecting means. At this time, the lateral movement information providing means displays an arrow indicating the lateral movement direction detected by the lateral movement direction detecting means on the display unit.
  • the vehicle periphery monitoring device described in Patent Document 2 includes an imaging unit, an obstacle detection unit, and a display unit.
  • the imaging means images the surroundings of the vehicle including a part of the host vehicle.
  • the obstacle detection means detects an obstacle located around the vehicle and calculates a distance between the detected obstacle and the host vehicle.
  • the display unit displays the captured image captured by the imaging unit and the obstacle display image indicating the distance calculated by the obstacle detection unit on one screen.
  • Obstacles around the vehicle are detected by detecting obstacles around the vehicle as in the techniques described in Patent Literature 1 and Patent Literature 2 and displaying information (arrows, etc.) clearly indicating the obstacles on the screen. Can be notified.
  • the screen size of the display (display means) mounted on the vehicle is not large. For this reason, if an arrow or the like is displayed on the image showing the situation around the vehicle displayed on the display, the situation around the vehicle may become difficult to see or an obstacle may not be grasped.
  • an object of the present invention is to provide an obstacle alarm device that can clearly indicate to the driver the presence of an obstacle approaching the vehicle without making it difficult to see the situation around the vehicle. is there.
  • the characteristic configuration of the obstacle alarm device is as follows: A captured image acquisition unit that acquires a captured image of a scene around the vehicle; An attention area setting unit for setting an attention area in the captured image; An outer area setting unit that sets an outer area outside the attention area in the captured image; An object presence determination unit that determines whether an object exists in the outer region; A moving direction determining unit that determines a moving direction of the object; When the movement direction determination unit determines that the object moves to the center side of the attention area, in the attention area displayed together with the outer area, from the outer area side where the object exists toward the center side. An explicit image output unit for sequentially displaying indicators that turn off after being turned on for a certain period of time at different positions; It is in the point equipped with.
  • the index is displayed in the attention area according to the object approaching the vehicle, it is possible to provide the driver without reducing the visibility of the object approaching the vehicle and the situation around the vehicle.
  • the presence and direction of an object approaching the vehicle can be specified. Therefore, even when the screen size of the display device is small, an object approaching the vehicle is not missed.
  • the explicit image output unit repeatedly displays the indicator.
  • Such a configuration can prevent the driver from overlooking the presence of an obstacle approaching the vehicle.
  • the index is configured in an arrow shape having a convex portion protruding toward the center of the region of interest.
  • the moving direction of the obstacle coincides with the direction in which the convex portion faces, so that the driver can intuitively recognize the moving direction of the obstacle.
  • the explicit image output unit is displayed at a position where the plurality of indicators partially overlap each other, and an overlapping portion between the indicator displayed later and the indicator displayed immediately before is displayed later. It is preferable that the index is overwritten and displayed.
  • the index can be displayed so as to approach the center of the screen. Therefore, it becomes easy for the driver to intuitively recognize the approach of the obstacle.
  • the index may be a part of a frame index having a frame shape surrounding a predetermined area in the attention area.
  • the presence of an obstacle approaching the vehicle can be clearly indicated to the driver by the index. Further, since the scene around the vehicle is displayed in the area surrounded by the frame index including such an index, it is not difficult for the driver to see the situation around the vehicle. Therefore, it is possible to clearly indicate to the driver the presence of an obstacle approaching the vehicle without making it difficult to see the situation around the vehicle.
  • the frame index is sequentially displayed at different positions from the outer edge portion to the center side of the attention area in accordance with the movement of a part of the frame index toward the center side of the attention area.
  • the frame index can be moved to the center of the attention area and displayed in accordance with the movement of the object approaching the vehicle. For this reason, the visibility of the object moving to the center side of the attention area is not lowered by the frame index.
  • the frame index to be displayed later is smaller in size than the frame index displayed immediately before.
  • the frame index can be displayed so as to approach the center of the screen. Accordingly, the driver can easily recognize the approach of the obstacle.
  • the frame index to be displayed later is lower in transparency than the frame index displayed immediately before.
  • the frame index can be displayed so as to approach the center of the screen. Accordingly, the driver can easily recognize the approach of the obstacle.
  • the explicit image output unit is configured to stop outputting the index when the object enters the region of interest.
  • the obstacle alarm device 100 has a function of clearly indicating that an object is approaching the driver of the vehicle when there is an object approaching the vehicle. Hereinafter, it demonstrates using drawing.
  • FIG. 1 is a block diagram schematically showing the configuration of the obstacle alarm device 100.
  • the obstacle alarm device 100 includes a captured image acquisition unit 11, an attention region setting unit 12, an outer region generation unit 13, an object presence determination unit 14, a movement direction determination unit 15, and an explicit image output unit 16.
  • Each functional unit includes the above-described functional units for performing various processes for clearly indicating the approach of the object 7 to the driver of the vehicle 1 by using a CPU as a core member.
  • the photographed image acquisition unit 11 acquires a photographed image G obtained by photographing a scene around the vehicle 1.
  • the vehicle 1 is provided with a camera 5.
  • the camera 5 in the present embodiment includes a digital camera that incorporates an image sensor such as a charge coupled device (CCD) or a CMOS image sensor (CIS) and outputs captured information as moving image information.
  • CCD charge coupled device
  • CIS CMOS image sensor
  • FIG. 2 (a) such a camera 5 is provided near the license plate provided at the outer rear portion of the vehicle 1, or near the emblem provided at the outer rear portion of the vehicle 1. It is arranged with a slight depression angle toward the rear.
  • the camera 5 includes a wide-angle lens (not shown). Thereby, the scene around the vehicle 1 can be photographed over the rear of the vehicle 1 over approximately 180 degrees. Such an imaging range is shown as “wide viewing angle” in FIG.
  • the camera 5 has a performance of outputting a moving image as a captured image G in real time. Such a captured image G is transmitted to the captured image
  • FIG. 2 (b) An example of such a photographed image G is shown in FIG.
  • the full width of FIG. 2 (b) corresponds to the wide viewing angle of FIG. 2 (a).
  • the object 7 on the left side as viewed from the rear of the vehicle 1 as shown in FIG. 2A is on the right side in the photographed image G as shown in FIG.
  • mirror image processing is performed. This is because when the scene behind the vehicle 1 is displayed on the monitor 50, it is easy for the driver of the vehicle 1 to intuitively understand whether the object 7 included in the captured image G is on the left side or the right side of the vehicle 1. It is to do.
  • the attention area setting section 12 sets the attention area C in the captured image G.
  • the shooting range of the shot image G is a wide viewing angle.
  • the attention area setting unit 12 sets the attention area C in the central portion of the captured image G.
  • the captured image G is transmitted from the captured image acquisition unit 11 described above.
  • the attention area C corresponds to the central portion in the horizontal direction of the captured image G shown in FIG.
  • Such a region of interest C is preferably, for example, a region of about 120 to 130 degrees behind the vehicle 1 such as the “narrow viewing angle” in FIG.
  • the outer region generation unit (corresponding to the “outer region setting unit”) 13 generates (sets) the outer region O outside the attention region C. That is, an outer region O outside the attention region C in the captured image G is generated.
  • the attention area C is generated by the attention area setting unit 12 in the central portion of the captured image G in the horizontal direction.
  • the outer area generation unit 13 generates an outer area O as shown in FIG. 2B outside the attention area C in the horizontal direction.
  • the outer region O generated by the outer region generation unit 13 is transmitted to an object presence determination unit 14 described later.
  • the outer area O and the attention area C described above correspond to a display image displayed on the monitor 50 described later (see FIG. 2C).
  • the object presence determination unit 14 determines whether or not the object 7 exists in the area corresponding to the outer area O.
  • the outer region O is transmitted from the outer region generator 13.
  • the area corresponding to the outer area O is an area in the real space corresponding to the outer area O.
  • whether or not the object 7 exists in the region corresponding to the outer region O is determined by using a known image recognition process such as pattern matching with reference to the outer region O. Of course, it is possible to determine whether or not the object 7 exists in the outer region O by processing other than pattern matching.
  • the determination result of the object presence determination unit 14 is transmitted to a movement direction determination unit 15 described later.
  • the moving direction determination unit 15 determines the moving direction of the object 7 in the outer region O. Such determination of the moving direction is performed when the object presence determination unit 14 determines that the object 7 exists in the outer region O. In particular, in the present embodiment, the movement direction determination unit 15 determines whether or not the object 7 in the outer area O moves toward the attention area C. Moving to the attention area C side means moving behind the vehicle 1 from the outside in the width direction of the vehicle 1 in the direction just behind the vehicle 1. Such a determination can be performed by comparing the position of the object 7 in the current captured image G with the position of the object 7 in the captured image G a predetermined time ago, for example, or using an optical flow. It is possible to use this method. Such a determination result of the moving direction is transmitted to the explicit image output unit 16 described later.
  • the explicit image output unit 16 moves the attention region C to the outer region O side where the object 7 exists.
  • the indicators S that are turned on for a certain time and then turned off are displayed sequentially at different positions from the center toward the center, and the display is repeated. Therefore, when the object 7 in the outer area O moves to the center side of the attention area C, the explicit image output unit 16 moves from the outer area O side where the object 7 exists in the attention area C toward the center side.
  • the indicators S that are turned on after being turned on for a certain time are sequentially displayed at different positions, and the display is repeated.
  • the moving direction determination unit 15 determines whether or not the object 7 in the outer area O moves to the center side of the attention area C.
  • the outer area O side where the object 7 exists corresponds to the left area in the attention area C when the object 7 is in the left outer area O.
  • the right area in the attention area C corresponds.
  • the index S that is turned on after being turned on for a certain period of time indicates not the state in which the index S is continuously displayed but the state in which the index S is blinking.
  • the index S moves while blinking between two predetermined positions on the screen.
  • the explicit image output unit 16 repeatedly performs such movement of the index S while blinking.
  • the index S will be described.
  • the index S according to the present embodiment is configured in an arrow shape having a convex portion that protrudes toward the center of the attention area C.
  • Such an index S is stored in the explicit image storage unit 17 as shown in FIG.
  • FIG. 2C shows a captured image G as shown in FIG. 2B, that is, an image displayed on the monitor 50 of the vehicle 1 when the object 7 is in the right outer region O.
  • a plurality of indices S may be displayed on the monitor 50 in this embodiment. In such a case, the plurality of indices S are displayed at positions where they partially overlap.
  • “partially overlapping” means that one of the plurality of indicators S is on the side of one of the arrow-shaped convex portions and the other portion of the plurality of indicators S is not on the other arrow-shaped convex portion. Means overlapping. Further, when there are a plurality of indexes S, an overlapping portion between the index S to be displayed later and the index S displayed immediately before is overwritten with the index S to be displayed later. That is, the index S displayed later is arranged in the upper layer than the index S displayed immediately before. In the present embodiment, the index S displayed immediately before is displayed with higher transparency than the index S displayed later. That is, the index S displayed later is displayed with lower transparency than the index S displayed immediately before. Therefore, when a plurality of indices S are displayed, the uppermost index S has the lowest transparency, and the lowermost index S has the highest transparency.
  • the index S is configured so that the index S displayed later is larger than the index S displayed immediately before. Therefore, when a plurality of indices S are displayed, the index S in the uppermost layer has the largest size and the index S in the lowermost layer has the smallest size.
  • Each index S may have a size similar to each other and may be set in size, or may be set in size by changing either the vertical or horizontal length of the index S. .
  • the explicit image output unit 16 repeatedly performs such display.
  • the index S is combined with the attention area C and displayed on the monitor 50. Therefore, the composite image generation unit 18 generates a composite image in which the index S is combined with the attention area C. As a result, an image as shown in FIG. 2C is generated. Further, as described above, the outer area O is also displayed on both sides of the attention area C.
  • the index S By displaying the index S in this way, it is possible to display the index S so that it gradually increases. As a result, it is possible to visually indicate to the passenger of the vehicle 1 that the object 7 is approaching the vehicle 1.
  • the mask area setting unit 19 sets a mask area M that hides at least a part of the scene around the vehicle 1 in the captured image G.
  • the mask area M is set at the upper part of the screen, that is, the upper part in the display image displayed on the monitor 50, as shown in FIG.
  • the display image displayed on the monitor 50 is an image of the attention area C and the outer area O.
  • the mask area M is formed across both sides of the display image in the horizontal direction.
  • the mask area M is displayed in a translucent manner superimposed on the scene above the vehicle 1 and is colored, for example, black. Of course, other colors may be used. In addition, you may paint so that the scene above the vehicle 1 may not be seen.
  • the mask area M may be hidden.
  • the motion image output unit 30 starts from the boundary between the outer area O on the side where the object 7 exists in the mask area M and the attention area C.
  • the absorbed image is output (see FIG. 3D). Whether or not the object 7 in the outer region O has entered the attention region C is determined by the moving direction determination unit 15.
  • the side where the object 7 exists in the mask area M is the right side of the mask area M when the object 7 exists in the right outer area O, and the object 7 exists in the left outer area O. If it is, it is the left side of the mask area M.
  • the absorbed image is an image in which the index S is absorbed in the mask area M and disappears. Such an image is stored in the motion image storage unit 31 in advance.
  • an index S is displayed in the outer area O where the object 7 exists in the attention area C. For this reason, as shown in FIG. 3C, when the object 7 enters the attention area C, the index S is absorbed by the mask area M so that the object 7 that has entered the attention area C is indicated by the index S. It becomes possible to display without hiding. Therefore, it is possible to appropriately indicate the presence of the object 7 to the driver of the vehicle 1.
  • the operation image output unit 30 is configured to change the display color of the mask area M from the position where the index S is absorbed in accordance with the absorption of the index S to the mask area M. That is, when the index S is absorbed from the boundary portion between the right outer region O and the attention region C, the mask region M is separated from the boundary portion between the right outer region O and the attention region C on both sides of the mask region M. When the index S is absorbed from the boundary between the left outer area O and the attention area C, the mask area M is divided into the left outer area O and the attention area C. An image that is colored from the boundary portion to the outer sides of the mask region M is output. By coloring the mask area M in this way, it is possible to clearly indicate to the driver of the vehicle 1 the side on which the object 7 has entered.
  • FIG. 4 and FIG. 5 show examples of a series of images in which the index S is displayed and the mask area M is colored after the index S enters the mask area M.
  • FIG. 4 shows an example in which the index S is displayed superimposed on the attention area C when the object 7 in the outer area O moves to the attention area C side.
  • FIG. 5A when the object 7 enters the attention area C from the right outer area O, as shown in FIGS. 5B to 5E, the index S becomes the right outer area O. And enters the mask region M so as to be sucked from the boundary between the region C and the attention region C.
  • coloring is sequentially performed toward both outer sides of the mask area M, and finally, the entire area of the mask area M is colored (FIG. 5F).
  • the mask area highlighting display unit 20 highlights the mask area M when the object 7 in the outer area O enters the attention area C.
  • the emphasis display is a blinking display. Whether or not the object 7 in the outer region O has entered the attention region C is determined by the moving direction determination unit 15.
  • the mask area highlighting display unit 20 blinks the mask area M in accordance with the determination result of the movement direction determination unit 15. Thereby, it becomes possible to visually indicate to the driver of the vehicle 1 that the object 7 exists in the attention area C.
  • the mask area highlighting display unit 20 stops highlighting of the mask area M when the object 7 leaves the attention area C. Whether or not the object 7 has left the attention area C can also be determined by the movement direction determination unit 15. That is, the moving direction determination unit 15 can determine that the object 7 has left the attention area C if there is an object 7 that enters the outer area O from the attention area C side of the outer area O. Such a determination result is also transmitted to the mask region emphasis display unit 20.
  • the highlighted display is a blinking display. Therefore, the mask area highlighting display unit 20 stops blinking of the mask area M when such a determination result is transmitted. Thereby, it is possible to visually indicate to the driver of the vehicle 1 that the object 7 does not exist in the attention area C.
  • the captured image acquisition unit 11 acquires a captured image G captured by the camera 5 of the vehicle 1 (step # 1).
  • the attention area setting unit 12 sets the central portion of the acquired captured image G as the attention area C (step # 2).
  • the outer area generation unit 13 generates both lateral portions of the acquired captured image G as the outer area O (step # 3). Whether or not the object 7 is present in the outer region O generated in this way is determined by the object presence determination unit 14 (step # 4).
  • the movement direction determination unit 15 determines the movement direction of the object 7 (step # 5). If the moving direction of the object 7 is from the outer area O toward the attention area C, it is further determined whether or not the object 7 has entered the attention area C (step # 6). If the object 7 has not entered the region of interest C, the explicit image output unit 16 outputs an explicit image (step # 7). This explicit image is output with reference to the explicit image stored in the explicit image storage unit 17.
  • the composite image generating unit 18 generates a composite image by superimposing the explicit image output in step # 6 on the attention area C generated in step # 2 (step # 8). The generated composite image is displayed on the monitor 50 (step # 9).
  • the motion image output unit 30 outputs a motion image (step # 10). This motion image is output with reference to the motion image stored in the motion image storage unit 31.
  • the composite image generation unit 18 generates a composite image by superimposing the motion image output in step # 10 on the attention area C generated in step # 2 (step # 8). The generated composite image is displayed on the monitor 50 (step # 9).
  • the driver of the vehicle 1 can gaze at the object 7 in the attention area C. Therefore, the situation around the vehicle 1 can be grasped.
  • the object alarm device 100 since the index S is displayed in the attention area C according to the object 7 approaching the vehicle 1, the object 7 approaching the vehicle 1 and the surroundings of the vehicle 1 are displayed. The presence and direction of the object 7 approaching the vehicle 1 can be clearly shown to the driver without reducing the visibility of the situation. For this reason, even when the screen size of the monitor 50 is small, the object 7 approaching the vehicle 1 is not missed. As described above, according to the present invention, the presence of an obstacle (object 7) approaching the vehicle 1 can be clearly shown to the driver without making it difficult to see the situation around the vehicle 1.
  • index S demonstrated as having comprised the arrow shape which has the convex part which protrudes in the center side of the attention area C.
  • the second embodiment is different from the first embodiment in that an arrow-shaped index S and an index S constituting the frame index W are displayed.
  • the display other than the display of the index S constituting the frame index W is the same as that of the first embodiment, the following description will focus on the differences.
  • the obstacle alarm device 100 according to the present embodiment is configured in the same manner as in the first embodiment. For this reason, the obstacle alarm device 100 according to the present embodiment has the same configuration as that shown in the block diagram of FIG. Similarly to the first embodiment, the obstacle alarm device 100 according to the present embodiment also includes a captured image acquisition unit 11, an attention region setting unit 12, an outer region generation unit 13, an object presence determination unit 14, and a movement direction determination unit 15. , An explicit image output unit 16, an explicit image storage unit 17, a composite image generation unit 18, a mask region setting unit 19, a mask region emphasis display unit 20, an operation image output unit 30, and an operation image storage unit 31. Composed. Each functional unit includes the above-described functional units for performing various processes for clearly indicating the approach of the object 7 to the driver of the vehicle 1 by using a CPU as a core member.
  • the photographed image acquisition unit 11 acquires a photographed image G obtained by photographing a scene around the vehicle 1. Similarly to the first embodiment, the captured image acquisition unit 11 acquires a scene around the vehicle 1 that has been captured about 180 degrees behind the vehicle 1 by the camera 5 provided in the vehicle 1. Such an imaging range is indicated as “wide viewing angle” in FIG.
  • the camera 5 has a performance of outputting a moving image as a captured image G in real time.
  • FIG. 7 An example of such a photographed image G is shown in FIG.
  • the full width of FIG. 7 (b) corresponds to the wide viewing angle of FIG. 7 (a).
  • FIG. 7B mirror image processing is performed and displayed as in FIG.
  • the attention area setting unit 12 sets the attention area C in the captured image G.
  • the shooting range of the shot image G is a wide viewing angle. For this reason, the attention area setting unit 12 sets the attention area C in the central portion of the captured image G.
  • the captured image G is transmitted from the captured image acquisition unit 11 described above.
  • the attention area C corresponds to the central portion in the horizontal direction of the captured image G shown in FIG.
  • Such a region of interest C is preferably a region of about 120 to 130 degrees behind the vehicle 1, such as the “narrow viewing angle” in FIG.
  • the outer region generation unit (corresponding to the “outer region setting unit”) 13 generates (sets) the outer region O outside the attention region C. That is, an outer region O outside the attention region C in the captured image G is generated. Also in the present embodiment, the attention area C is generated by the attention area setting section 12 at the central portion in the horizontal direction of the captured image G. The outer area generation unit 13 generates an outer area O as shown in FIG. 7B outside the attention area C in the horizontal direction. The outer region O generated by the outer region generation unit 13 is transmitted to an object presence determination unit 14 described later. In the obstacle alarm device 100, the outer area O and the attention area C described above correspond to a display image displayed on the monitor 50 described later (see FIG. 7C).
  • the object presence determination unit 14 determines whether or not the object 7 exists in the area corresponding to the outer area O.
  • the outer region O is transmitted from the outer region generator 13.
  • the area corresponding to the outer area O is an area in the real space corresponding to the outer area O.
  • whether or not the object 7 exists in the region corresponding to the outer region O is determined using a known image recognition process such as pattern matching with reference to the outer region O. Of course, it is possible to determine whether or not the object 7 exists in the outer region O by processing other than pattern matching.
  • the determination result of the object presence determination unit 14 is transmitted to a movement direction determination unit 15 described later.
  • the moving direction determination unit 15 determines the moving direction of the object 7 in the outer region O. Such determination of the moving direction is performed when the object presence determination unit 14 determines that the object 7 exists in the outer region O. In particular, in the present embodiment, the movement direction determination unit 15 determines whether or not the object 7 in the outer area O moves toward the attention area C. Moving to the attention area C side means moving behind the vehicle 1 from the outside in the width direction of the vehicle 1 in the direction just behind the vehicle 1. Such a determination can be performed by comparing the position of the object 7 in the current captured image G with the position of the object 7 in the captured image G a predetermined time ago, for example, or using an optical flow. It is possible to use this method. Such a determination result of the moving direction is transmitted to the explicit image output unit 16 described later.
  • the explicit image output unit 16 displays the object 7 in the attention region C displayed together with the outer region O.
  • the indicators S that are turned on for a certain time and then turned off are sequentially displayed at different positions from the side of the existing outer region O toward the center, and the display is repeated. Therefore, in the present embodiment, the attention area C and the outer area O are displayed on the monitor 50, but the explicit image output unit 16 determines that the object 7 in the outer area O moves to the center side of the attention area C. From the outer edge of the attention area C toward the center, the indicators S that are turned on for a certain period of time and then turned off are sequentially displayed in different positions in the attention area C.
  • the index S corresponds to a part of the frame index W having a frame shape surrounding a predetermined area in the attention area C.
  • the frame shape surrounding the predetermined area includes those having the same size as the attention area C and those having a smaller size.
  • the frame index W according to the present embodiment is configured to include the index S.
  • the side in the vertical direction displayed on the right outer region O side where the object 7 exists corresponds.
  • the arrow-shaped index S described in the first embodiment is also displayed. Since the display form of the arrow-shaped index S is the same as that of the first embodiment, description thereof will be omitted below. Whether or not the object 7 in the outer area O moves to the center side of the attention area C is also determined by the movement direction determination unit 15 in the present embodiment as in the first embodiment.
  • the frame index W is displayed at different positions sequentially from the outer edge to the center side of the attention area C in accordance with the movement of the index S, which is a part of the frame index W, toward the center side of the attention area C.
  • “displayed sequentially at different positions” indicates not the state in which the frame index W is continuously displayed but the state in which the frame index W is moved and displayed while blinking. Therefore, the frame index W is displayed so as to become gradually smaller.
  • the explicit image output unit 16 repeatedly performs such movement of the frame index W while blinking.
  • the frame index W will be described. As shown in FIG. 7C, in the present embodiment, a plurality of frame indexes W may be displayed on the monitor 50. In such a case, the frame index W is configured so that the frame index W displayed later is smaller in size than the frame index W displayed immediately before. Further, the frame index W is configured so that the frame index W displayed later has lower transparency than the frame index W displayed immediately before. As a result, it is possible to display the frame index W so as to pop out from the center side of the screen. Such a frame index W is stored together with the arrow-shaped index S in the explicit image storage unit 17 as shown in FIG.
  • the explicit image output unit 16 repeatedly performs such display.
  • the frame index W is combined with the attention area C together with the arrow-shaped index S and displayed on the monitor 50. Therefore, the composite image generation unit 18 generates a composite image in which the frame index W and the arrow-shaped index S are combined with the attention area C. As a result, an image as shown in FIG. 7C is generated.
  • FIG. 8 shows that when the object 7 in the outer area O is moving toward the attention area C, the arrow-shaped index S and the index S constituting the frame index W are superimposed on the attention area C and displayed.
  • An example is shown.
  • the arrow-shaped index S and the index S constituting the frame index W are repeatedly displayed until the object 7 enters the attention area C from the outer area O on the right side. That is, the display of FIGS. 8B to 8E is repeatedly performed. As shown in FIG.
  • the output of the arrow-shaped index S and the frame index W is stopped by the explicit image output unit 16.
  • the arrow-shaped index S is determined from the boundary between the right outer area O and the attention area C. You may comprise so that it may enter into the mask area
  • the captured image acquisition unit 11 acquires a captured image G captured by the camera 5 of the vehicle 1 (step # 21).
  • the attention area setting unit 12 generates the central portion of the acquired captured image G as the attention area C (step # 22).
  • the outer region generation unit 13 generates both lateral portions of the acquired captured image G as the outer region O (step # 23). Whether or not the object 7 exists in the outer region O generated in this way is determined by the object presence determination unit 14 (step # 24).
  • the moving direction determination unit 15 determines the moving direction of the object 7 (step # 25). If the moving direction of the object 7 is from the outer region O to the region of interest C, the explicit image output unit 16 outputs an explicit image (step # 26). This explicit image is output with reference to the explicit image stored in the explicit image storage unit 17.
  • the composite image generation unit 18 generates a composite image by superimposing the explicit image output in step # 26 on the attention area C generated in step # 22 (step # 27).
  • the generated composite image is displayed on the monitor 50 (step # 28).
  • the frame index W is displayed as the index S in the attention area C according to the object 7 approaching the vehicle 1, and therefore the screen size of the monitor 50 is small.
  • the object 7 approaching the vehicle 1 will not be missed.
  • a frame index W is displayed at the side edge of the screen, it is not difficult for the driver to see the situation around the vehicle 1. That is, since the scene displayed at the end of the screen is not hidden by the frame index W, the object 7 can be properly grasped even when the object 7 suddenly pops out. Therefore, the presence of an obstacle (object 7) approaching the vehicle 1 can be clearly shown to the driver without making it difficult to see the situation around the vehicle 1.
  • the explicit image output unit 16 has been described as being displayed so as to gradually increase when the blinking indicator S moves.
  • the scope of application of the present invention is not limited to this. It is naturally possible to display the index S in the same size. Of course, it is naturally possible to display the index S so that it gradually decreases. Even with such a configuration, the object 7 that appropriately approaches the vehicle 1 can be clearly shown to the driver of the vehicle 1.
  • the index S displayed immediately before is described as being higher than the transparency of the index S displayed later.
  • the scope of application of the present invention is not limited to this.
  • the index S displayed immediately before can be displayed lower than the transparency of the index S displayed later, and the index S displayed immediately before is the same as the transparency of the index S displayed later.
  • the scope of application of the present invention is not limited to this. Even when a plurality of indices S are displayed, it is possible to configure the indices S so as not to overlap each other.
  • the index S is described as being configured in the shape of an arrow having a convex portion protruding toward the center of the attention area C.
  • the scope of application of the present invention is not limited to this.
  • the index S can be formed in other shapes.
  • the operation image output unit 30 has been described as being configured to change the display color of the mask area M from the position where the index S is absorbed along with the absorption of the index S into the mask area M.
  • the scope of application of the present invention is not limited to this. With the absorption of the index S into the mask area M, it is possible to change the display color of the mask area M from a position different from the position where the index S is absorbed. Alternatively, it is naturally possible to configure so that the display color of the mask area M is not changed even if the index S is absorbed into the mask area M.
  • the motion image output unit 30 uses the index S as the outer region O on the side where the object 7 exists in the mask region M. It has been described that an image absorbed from the boundary with the attention area C is output. However, the scope of application of the present invention is not limited to this.
  • the explicit image output unit 16 may be configured to stop outputting the index S when the object 7 enters the attention area C. Whether or not the object 7 has entered the attention area C is determined by the moving direction determination unit 15 described above. When the object 7 enters the attention area C, the object 7 is displayed at the end of the attention area C. For this reason, by outputting the index S in this way, the driver of the vehicle 1 can visually recognize the object 7 displayed at the end of the attention area C without being hidden by the index S.
  • indices S and frame indices W may be displayed on the screen.
  • the index S and the frame index W may be displayed on the screen one by one, or only the index S may be displayed.
  • the determination as to whether or not the object 7 exists can be performed using a known image recognition process such as pattern matching.
  • the scope of application of the present invention is not limited to this. For example, it is naturally possible to detect with sonar.
  • the moving direction determination unit 15 when it is determined by the moving direction determination unit 15 that the object 7 in the outer region O moves to the center side of the attention region C, the center of the attention region C from the outer region O side where the object 7 exists is centered. It demonstrated that the parameter
  • the scope of application of the present invention is not limited to this.
  • the movement direction determination unit 15 determines that the object 7 in the outer area O moves to the center side of the attention area C, the boundary position between the attention area C and the outer area O where the object 7 exists in the attention area C
  • the index S is displayed toward the center of the attention area C.
  • the frame index W to be displayed later is described as being smaller in size than the frame index W displayed immediately before.
  • the scope of application of the present invention is not limited to this.
  • the frame index W to be displayed later is described as being less transparent than the frame index W displayed immediately before.
  • the scope of application of the present invention is not limited to this.
  • the frame index W displayed immediately before can be displayed higher than the transparency of the frame index W displayed later, and the frame index W displayed immediately before is displayed as the frame index W displayed later.
  • the frame index W is indicated by a rectangle.
  • the frame index W may be formed in a shape other than a quadrangle.
  • the frame index W is colored and configured so as to be easily noticed by the occupant of the vehicle 1. In such a case, for example, coloring with red or yellow is preferable, but of course, coloring with other colors is also possible.
  • the thickness of the line defining the frame index W can be changed as appropriate.
  • the explicit image output unit 16 has been described as repeatedly displaying the index S.
  • the scope of application of the present invention is not limited to this. Of course, it is possible to configure without repeating.
  • the arrow-shaped index S and the index S constituting the frame index W are displayed.
  • the scope of application of the present invention is not limited to this.
  • the determination as to whether or not the object 7 exists in the outer region O is performed using a known image recognition process.
  • the scope of application of the present invention is not limited to this. For example, it is naturally possible to determine whether or not the object 7 exists in an area in the real space corresponding to the outer area O using a sonar, a radar sensor, or the like.
  • the present invention can be used for an obstacle alarm device that clearly shows the presence of an obstacle approaching a vehicle to an occupant.
  • SYMBOLS 1 Vehicle 7: Object 11: Captured image acquisition part 12: Attention area setting part 14: Object presence determination part 15: Movement direction determination part 16: Explicit image output part 100: Obstacle warning device C: Attention area G: Captured image O: Outer region S: Index W: Frame index

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Traffic Control Systems (AREA)

Abstract

　車両の周囲の状況を見難くすることなく、車両に接近する障害物の存在を運転者に明示することが可能な障害物警報装置は、車両の周囲の情景を撮影した撮影画像を取得する撮影画像取得部と、撮影画像に注目領域を設定する注目領域設定部と、撮影画像において注目領域の外側に外側領域を設定する外側領域設定部と、外側領域に物体が存在するか否かを判定する物体存在判定部と、物体の移動方向を判定する移動方向判定部と、当該移動方向判定部により物体が注目領域の中央側に移動すると判定された場合に、外側領域と共に表示される注目領域において、物体が存在する外側領域の側から中央側に向けて、一定時間点灯したのち消灯する指標を順次異なる位置に表示させる明示画像出力部と、を備える。

Description

障害物警報装置
　本発明は、車両に接近する障害物の存在を乗員に明示する障害物警報装置に関する。
　車両の周囲には運転者の位置から視認できない死角があり、運転者は車両の運転にあたり当該車両の周囲に細心の注意を払う必要がある。特に、車両を後退して駐車させる場合には、駐車自体に苦手意識を持っているユーザも多く、精神的疲労も少なくない。そこで、従来、車両の周囲の障害物を監視する技術が利用されてきた（例えば特許文献１及び２）。
　特許文献１に記載の車両の障害物警報装置は、横移動障害物検出手段と、横移動方向検出手段と、横移動情報提供手段とを備えて構成される。横移動障害物検出手段は車両前方において進行方向を横切る方向に移動する障害物を検出する。横移動方向検出手段は横移動障害物検出手段により検出された障害物の横移動方向を検出する。横移動情報提供手段は横移動方向検出手段により検出された障害物の横移動方向に関する情報をドライバーに提供する。この際、横移動情報提供手段は表示部に横移動方向検出手段により検出された横移動方向を表わす矢印をディスプレイに表示する。
　特許文献２に記載の車両周囲監視装置は、撮像手段と、障害物検出手段と、表示手段とを備えて構成される。撮像手段は自車両の一部を含む車両周囲を撮像する。障害物検出手段は車両周囲に位置する障害物を検出し、検出した障害物と自車両との距離を算出する。表示手段は撮像手段によって撮像された撮像画像と障害物検出手段によって算出された距離を示す障害物表示画像とを１つの画面に表示する。
特開平１１－１１５６６０号公報 特開２００９－２１７７４０号公報
　特許文献１や特許文献２に記載の技術のように車両の周囲の障害物を検出し、当該障害物を明示する情報（矢印等）を画面表示することで運転者に車両の周囲の障害物の存在を報知することが可能である。しかしながら、車両に搭載されるディスプレイ（表示手段）の画面サイズは大きいものではない。このため、ディスプレイに表示される車両の周囲の状況を示す画像上に矢印等を表示すると、車両の周囲の状況が見難くなったり障害物を把握できなくなったりする可能性がある。
　本発明の目的は、上記問題に鑑み、車両の周囲の状況を見難くすることなく、車両に接近する障害物の存在を運転者に明示することが可能な障害物警報装置を提供することにある。
　上記目的を達成するための本発明に係る障害物警報装置の特徴構成は、
　車両の周囲の情景を撮影した撮影画像を取得する撮影画像取得部と、
　前記撮影画像に注目領域を設定する注目領域設定部と、
　前記撮影画像において前記注目領域の外側に外側領域を設定する外側領域設定部と、
　前記外側領域に物体が存在するか否かを判定する物体存在判定部と、
　前記物体の移動方向を判定する移動方向判定部と、
　前記移動方向判定部により前記物体が前記注目領域の中央側に移動すると判定された場合に、前記外側領域と共に表示される前記注目領域において、前記物体が存在する外側領域の側から中央側に向けて、一定時間点灯したのち消灯する指標を順次異なる位置に表示させる明示画像出力部と、
を備えている点にある。
　このような特徴構成とすれば、車両に接近する物体に応じて指標を注目領域内に表示するので、車両に接近する物体及び車両の周囲の状況の視認性を低下させることなく、運転者に車両に接近する物体の存在及び方向を明示することができる。したがって、表示装置の画面サイズが小さい場合でも、車両に接近する物体を見逃すことがなくなる。このように本発明によれば、車両の周囲の状況を見難くすることなく、車両に接近する障害物（物体）の存在を運転者に明示することが可能となる。
　また、前記明示画像出力部が、前記指標の表示を繰り返し行うと好適である。
　このような構成とすれば、車両に接近する障害物の存在の明示を運転者が見逃すことを防止できる。
　また、前記指標が、前記注目領域の中央側に突出する凸部を有する矢印形状に構成してあると好適である。
　このような構成とすれば、障害物の移動方向と凸部が向く方向とが一致しているので、運転者が直感的に障害物の移動方向を認識することができる。
　また、前記明示画像出力部が、前記指標が複数ある場合に当該複数の指標どうしが一部重畳する位置に表示され、後に表示する指標と直前に表示した指標との重複部分については後に表示する指標を上書き表示するよう構成されてあると好適である。
　このような構成とすれば、指標が画面の中央に迫ってくるように表示することができる。したがって、運転者が障害物の接近を直感的に認識し易くなる。
　例えば、前記指標を、前記注目領域において所定の領域を囲む枠形状からなる枠指標の一部とすることもできる。
　このような構成であっても、指標により車両に接近する障害物の存在を運転者に明示することができる。また、このような指標を含んで構成される枠指標で囲まれた領域には車両の周囲の情景が表示されるので、運転者が車両の周囲の状況が見難くなることもない。したがって、車両の周囲の状況を見難くすることなく、車両に接近する障害物の存在を運転者に明示することが可能となる。
　また、前記枠指標の一部の前記注目領域の中央側への移動に合わせて、前記枠指標が前記注目領域の外縁部から中央側に向けて順次異なる位置に表示されると好適である。
　このような構成とすれば、車両に接近する物体の移動に応じて枠指標も注目領域の中央側へ移動して表示することができる。このため、枠指標により注目領域の中央側へ移動する物体の視認性が低下することがない。
　また、前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりもサイズが小さいことを特徴とすると好適である。
　このような構成とすれば、枠指標が、画面の中央に迫ってくるように表示することができる。したがって、運転者が障害物の接近を認識し易くなる。
　また、前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりも透明度が低いことを特徴とすると好適である。
　このような構成とすれば、枠指標が、画面の中央により迫ってくるように表示することができる。したがって、運転者が障害物の接近を認識し易くなる。
　また、前記明示画像出力部は、前記物体が前記注目領域に進入した場合に前記指標の出力を中止するよう構成してあると好適である。
　このような構成とすれば、物体が注目領域内に映った時点で指標の表示を中止できるので、物体が指標に隠れることがない。したがって、車両に接近した物体を適切に視認することができる。
障害物警報装置の構成を模式的に示したブロック図である。 第１の実施形態に係る障害物警報装置の処理の一例を示した図である。 第１の実施形態に係る障害物警報装置の処理の一例を示した図である。 第１の実施形態に係る合成画像の一例を示した図である。 第１の実施形態に係る合成画像の一例を示した図である。 第１の実施形態に係る障害物警報装置の処理を模式的に示した図である。 第２の実施形態に係る障害物警報装置の処理の一例を示した図である。 第２の実施形態に係る合成画像の一例を示した図である。 第２の実施形態に係る障害物警報装置の処理を模式的に示した図である。
１．第１の実施形態
　以下、本発明の実施の形態について、詳細に説明する。本発明に係る障害物警報装置１００は、車両に接近する物体がある場合に当該車両の運転者に物体が接近していることを明示する機能を備えている。以下、図面を用いて説明する。
　図１は、障害物警報装置１００の構成を模式的に示したブロック図である。図１に示されるように、障害物警報装置１００は、撮影画像取得部１１、注目領域設定部１２、外側領域生成部１３、物体存在判定部１４、移動方向判定部１５、明示画像出力部１６、明示画像格納部１７、合成画像生成部１８、マスク領域設定部１９、マスク領域強調表示部２０、動作画像出力部３０、動作画像格納部３１の各機能部を備えて構成される。各機能部はＣＰＵを中核部材として車両１の運転者に物体７の接近を明示する種々の処理を行うための上述の機能部がハードウェア又はソフトウェア或いはその両方で構築されている。
　撮影画像取得部１１は、車両１の周囲の情景を撮影した撮影画像Ｇを取得する。ここで、車両１にはカメラ５が備えられる。本実施形態におけるカメラ５は、ＣＣＤ（charge coupled device）やＣＩＳ（CMOS image sensor）などの撮像素子を内蔵するとともに、撮影した情報を動画情報として出力するデジタルカメラにより構成される。このようなカメラ５は、図２（ａ）に示されるように、車両１の外側後部に備えられるライセンスププレートの近傍、或いは車両１の外側後部に備えられるエンブレムの近傍等に、車両１の後方に向けてやや俯角を有して配設される。また、カメラ５は広角レンズ（図示せず）を備えて構成される。これにより、車両１の後方を略１８０度に亘って、車両１の周囲の情景を撮影することができる。このような撮影範囲は、図２（ａ）の「広視野角」として示される。このカメラ５は、リアルタイムで動画を撮影画像Ｇとして出力する性能を有する。このような撮影画像Ｇは、撮影画像取得部１１に伝達される。
　このような撮影画像Ｇの一例が図２（ｂ）に示される。図２（ｂ）の全幅は、図２（ａ）の広視野角に対応する。ここで、撮影画像Ｇは、図２（ａ）に示されるような車両１から後方を見て左側にいる物体７が、図２（ｂ）に示されるように撮影画像Ｇ内の右側にいるように鏡像処理が行われる。これは、モニタ５０に車両１の後方の情景を表示する際、車両１の運転者が撮影画像Ｇに含まれる物体７が車両１の左側にいるのか右側にいるのかを感覚的に理解し易くするためである。
　図１に戻り、注目領域設定部１２は、撮影画像Ｇに注目領域Ｃを設定する。本実施形態では、撮影画像Ｇの撮影範囲は広視野角である。このため、注目領域設定部１２は、撮影画像Ｇの中央部分に注目領域Ｃを設定する。撮影画像Ｇは上述の撮影画像取得部１１から伝達される。本実施形態では、注目領域Ｃは、図２（ｂ）に示される撮影画像Ｇの横方向の中央部分が相当する。このような注目領域Ｃは、図２（ａ）の「狭視野角」のような例えば車両１の後方１２０～１３０度程度の領域とすると好適である。
　外側領域生成部（本願「外側領域設定部」に相当）１３は、注目領域Ｃの外側に外側領域Ｏを生成（設定）する。すなわち、撮影画像Ｇのうち注目領域Ｃの外側の外側領域Ｏを生成する。上述のように、撮影画像Ｇの横方向の中央部分に注目領域設定部１２により注目領域Ｃが生成される。外側領域生成部１３はこのような注目領域Ｃの横方向の外側に、図２（ｂ）のような外側領域Ｏを生成する。外側領域生成部１３により生成された外側領域Ｏは、後述する物体存在判定部１４に伝達される。本障害物警報装置１００では、このような外側領域Ｏ及び上述の注目領域Ｃが、後述するモニタ５０に表示される表示画像に対応する（図２（ｃ）参照）。
　物体存在判定部１４は、外側領域Ｏに対応する領域に物体７が存在するか否かを判定する。外側領域Ｏは、外側領域生成部１３から伝達される。外側領域Ｏに対応する領域とは、外側領域Ｏに対応する実空間における領域である。本実施形態では、外側領域Ｏに対応する領域に物体７が存在するか否かの判定は、外側領域Ｏを参照して例えばパターンマッチング等の公知の画像認識処理を用いて行われる。もちろん、パターンマッチング以外の処理により、外側領域Ｏに物体７が存在するか否かを判定することは可能である。物体存在判定部１４の判定結果は、後述する移動方向判定部１５に伝達される。
　移動方向判定部１５は、外側領域Ｏの物体７の移動方向を判定する。このような移動方向の判定は、物体存在判定部１４により、外側領域Ｏに物体７が存在すると判定された場合に行われる。特に本実施形態では、移動方向判定部１５により、外側領域Ｏの物体７が注目領域Ｃの側に移動するか否かが判定される。注目領域Ｃの側に移動するとは、車両１の後方において、車両１の幅方向外側から、車両１の真後ろの方向に移動することを示す。このような判定は、例えば現在の撮影画像Ｇにおける物体７の位置と所定時間前の撮影画像Ｇにおける物体７の位置とを比較して行うことも可能であるし、オプティカルフローを用いるなどの公知の手法を用いて行うことができる。このような移動方向の判定結果は、後述する明示画像出力部１６に伝達される。
　明示画像出力部１６は、移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、注目領域Ｃにおいて、物体７が存在する外側領域Ｏの側から中央側に向けて、一定時間点灯したのち消灯する指標Ｓを順次異なる位置に表示させると共に、当該表示を繰り返し行う。したがって、明示画像出力部１６は、外側領域Ｏの物体７が注目領域Ｃの中央側に移動する場合に、注目領域Ｃのうち物体７が存在する外側領域Ｏの側から中央側に向けて、一定時間点灯したのち消灯する指標Ｓを順次異なる位置に表示させると共に、当該表示を繰り返し行う。外側領域Ｏの物体７が注目領域Ｃの中央側に移動するか否かは、上述の移動方向判定部１５により判定される。注目領域Ｃのうち物体７が存在する外側領域Ｏの側とは、物体７が左側の外側領域Ｏにいる場合には注目領域Ｃ内の左側の領域が相当する。一方、物体７が右側の外側領域Ｏにいる場合には注目領域Ｃ内の右側の領域が相当する。
　一定時間点灯したのち消灯する指標Ｓとは、指標Ｓが連続して表示されている状態ではなく、指標Ｓが点滅して表示されている状態を示す。本実施形態では、このような指標Ｓが表示されてから消灯し、更に次に表示される場合には、異なる位置に表示される。したがって、指標Ｓは、画面上の所定の２つの位置の間を点滅しながら移動している状態になる。明示画像出力部１６は、このような指標Ｓの点滅しながらの移動を繰り返し行う。
　ここで、指標Ｓについて説明する。本実施形態に係る指標Ｓは、注目領域Ｃの中央側に突出する凸部を有する矢印形状に構成されている。このような指標Ｓは、図２（ｄ）に示されるように明示画像格納部１７に格納されている。図２（ｃ）には、図２（ｂ）に示されるような撮影画像Ｇ、すなわち右側の外側領域Ｏに物体７がいる場合に車両１のモニタ５０に表示される画像が示される。図２（ｃ）に示されるように、本実施形態ではモニタ５０に複数の指標Ｓが表示されることがある。係る場合、複数の指標Ｓどうしが一部重畳する位置に表示される。一部重複するとは、本実施形態では、複数の指標Ｓのうちの一方の矢印形状の凸部の側の部分と、複数の指標Ｓのうちの他方の矢印形状の凸部でない側の部分とが重複することをいう。また、複数の指標Ｓがある場合には、後に表示する指標Ｓと直前に表示した指標Ｓとの重複部分については後に表示する指標Ｓを上書き表示するよう構成される。すなわち、直前に表示された指標Ｓよりも、後の表示される指標Ｓの方が上の層に配置されるように構成される。本実施形態では、このような直前に表示される指標Ｓは、後に表示される指標Ｓよりも透明度が高く表示される。すなわち、後に表示される指標Ｓが、直前に表示された指標Ｓよりも透明度が低く表示される。したがって、指標Ｓが複数表示されている場合には、最上層の指標Ｓが最も透明度が低く、最下層の指標Ｓが最も透明度が高くなる。
　また、指標Ｓは直前に表示された指標Ｓよりも、後に表示される指標Ｓの方が大きなサイズで構成される。したがって、指標Ｓが複数表示されている場合には、最上層の指標Ｓが最もサイズが大きく、最下層の指標Ｓが最もサイズが小さくなる。なお、夫々の指標Ｓは、互いに相似する形状でサイズの大小を設定しても良いし、指標Ｓの縦又は横の何れか一方の長さを変更してサイズの大小を設定しても良い。
　明示画像出力部１６は、このような表示を繰り返し行う。ここで、本実施形態では、図２（ｃ）に示されるように、指標Ｓは注目領域Ｃに合成してモニタ５０に表示される。そこで、合成画像生成部１８は、注目領域Ｃに指標Ｓを合成した合成画像を生成する。これにより、図２（ｃ）に示されるような画像が生成される。また、上述のように、注目領域Ｃの両側には外側領域Ｏも表示される。
　このように指標Ｓを表示することにより、指標Ｓが次第に大きくなるように表示させることが可能となる。これにより、車両１の乗員に対して当該車両１に物体７が接近していることを視覚的に明示することができる。
　マスク領域設定部１９は、撮影画像Ｇのうち、車両１の周囲の情景の少なくとも一部を非表示にするマスク領域Ｍを設定する。本実施形態では、マスク領域Ｍは図２（ｃ）に示されるように、画面上部、すなわち、モニタ５０に表示される表示画像内の上側部分に設定される。モニタ５０に表示される表示画像とは、注目領域Ｃ及び外側領域Ｏの画像である。このマスク領域Ｍは、表示画像の横方向両側に亘って形成される。マスク領域Ｍ内は、車両１の上方の情景に対して半透明で重畳表示され、例えば黒色で彩色される。もちろん、他の色で彩色しても良い。なお、車両１の上方の情景が見えないように塗りつぶしても良い。また、マスク領域Ｍは非表示としても良い。
　動作画像出力部３０は、外側領域Ｏの物体７が注目領域Ｃに進入した場合に、指標Ｓがマスク領域Ｍのうち物体７が存在する側の外側領域Ｏと注目領域Ｃとの境界部から吸収される画像を出力する（図３（ｄ）参照）。外側領域Ｏの物体７が注目領域Ｃに進入したか否かは、移動方向判定部１５により判定される。マスク領域Ｍのうち物体７が存在する側とは、右側の外側領域Ｏに物体７が存在していた場合には、マスク領域Ｍの右側部であり、左側の外側領域Ｏに物体７が存在していた場合には、マスク領域Ｍの左側部である。吸収される画像とは、マスク領域Ｍに指標Ｓが吸収されて消滅していく画像である。このような画像は、動作画像格納部３１に予め格納されている。
　ここで、注目領域Ｃのうち物体７が存在する外側領域Ｏには、指標Ｓが表示されている。このため、図３（ｃ）に示されるように、物体７が注目領域Ｃに進入した場合に、指標Ｓをマスク領域Ｍに吸収させることにより、注目領域Ｃに進入してきた物体７を指標Ｓにより隠すことなく表示することが可能となる。したがって、車両１の運転者に物体７の存在を適切に明示することが可能となる。
　また、動作画像出力部３０は、マスク領域Ｍへの指標Ｓの吸収に伴い、当該指標Ｓが吸収された位置からマスク領域Ｍの表示色を変更するよう構成されている。すなわち、指標Ｓが右側の外側領域Ｏと注目領域Ｃとの境界部から吸収された場合には、マスク領域Ｍを右側の外側領域Ｏと注目領域Ｃとの境界部からマスク領域Ｍの両外側に向って彩色していく画像を出力し、指標Ｓが左側の外側領域Ｏと注目領域Ｃとの境界部から吸収された場合には、マスク領域Ｍを左側の外側領域Ｏと注目領域Ｃとの境界部からマスク領域Ｍの両外側に向って彩色していく画像を出力する。このようにマスク領域Ｍを彩色することにより、車両１の運転者に物体７が進入した側を明示することも可能となる。
　このような指標Ｓを表示すると共に、指標Ｓがマスク領域Ｍに進入した後、マスク領域Ｍが彩色されていく一連の画像の一例が、図４及び図５に示される。図４は、外側領域Ｏにいる物体７が注目領域Ｃの側に移動している場合に、注目領域Ｃに指標Ｓが重畳して表示されている例を示している。図５（ａ）に示されるように、物体７が右側の外側領域Ｏから注目領域Ｃに進入すると、図５（ｂ）－（ｅ）に示されるように、指標Ｓが右側の外側領域Ｏと注目領域Ｃとの境界部から吸い込まれるようにマスク領域Ｍに進入する。これに合わせて、マスク領域Ｍの両外側に向けて順次彩色され、最終的にはマスク領域Ｍの全域が彩色される（図５（ｆ））。
　図１に戻り、マスク領域強調表示部２０は、外側領域Ｏの物体７が注目領域Ｃに進入した場合にマスク領域Ｍを強調表示させる。本実施形態では、強調表示とは、点滅表示である。外側領域Ｏの物体７が注目領域Ｃに進入したか否かは、移動方向判定部１５により判定される。マスク領域強調表示部２０は、移動方向判定部１５の判定結果に応じて、マスク領域Ｍを点滅させる。これにより、車両１の運転者に、注目領域Ｃに物体７が存在することを視覚的に明示することが可能となる。
　また、マスク領域強調表示部２０は、物体７が注目領域Ｃから退出した場合にマスク領域Ｍの強調表示を中止する。物体７が注目領域Ｃから退出したか否かも、移動方向判定部１５により判定することが可能である。すなわち、移動方向判定部１５は、外側領域Ｏの注目領域Ｃ側から外側領域Ｏに進入する物体７があれば、物体７が注目領域Ｃから退出したと判定することが可能である。このような判定結果も、マスク領域強調表示部２０に伝達される。また、本実施形態では、強調表示とは点滅表示である。したがって、マスク領域強調表示部２０は、このような判定結果が伝達されると、マスク領域Ｍの点滅を中止する。これにより、車両１の運転者に、注目領域Ｃに物体７が存在していないことを視覚的に明示することが可能となる。
　次に、障害物警報装置１００が、撮影画像Ｇに明示画像を重畳した合成画像をモニタ５０に表示する一連の処理について、図６の模式図を用いて説明する。まず、撮影画像取得部１１が、車両１のカメラ５により撮影された撮影画像Ｇを取得する（ステップ＃１）。
　次に、注目領域設定部１２が、取得された撮影画像Ｇの中央部分を注目領域Ｃとして設定する（ステップ＃２）。一方、外側領域生成部１３が、取得された撮影画像Ｇの横方向両側部分を外側領域Ｏとして生成する（ステップ＃３）。このように生成された外側領域Ｏに物体７が存在しているか否か、物体存在判定部１４により判定される（ステップ＃４）。
　外側領域Ｏに物体７が存在していると判定されると、移動方向判定部１５により当該物体７の移動方向が判定される（ステップ＃５）。物体７の移動方向が、外側領域Ｏから注目領域Ｃの側へのものである場合、更に物体７が注目領域Ｃ内に進入したか否かが判定される（ステップ＃６）。物体７が注目領域Ｃ内に進入していなければ、明示画像出力部１６により明示画像が出力される（ステップ＃７）。この明示画像は、明示画像格納部１７に格納されている明示画像を参照して出力される。
　合成画像生成部１８は、ステップ＃２において生成された注目領域Ｃに、ステップ＃６で出力された明示画像を重畳して合成画像を生成する（ステップ＃８）。生成された合成画像は、モニタ５０に表示される（ステップ＃９）。
　一方、ステップ＃６において、物体７が注目領域Ｃ内に進入していれば、動作画像出力部３０により動作画像が出力される（ステップ＃１０）。この動作画像は、動作画像格納部３１に格納されている動作画像を参照して出力される。
　合成画像生成部１８は、ステップ＃２において生成された注目領域Ｃに、ステップ＃１０で出力された動作画像を重畳して合成画像を生成する（ステップ＃８）。生成された合成画像は、モニタ５０に表示される（ステップ＃９）。
　このように注目領域Ｃへの物体７の進入に合わせて、明示指標をマスク領域Ｍに進入させるので、車両１の運転者に注目領域Ｃの物体７を注視させることが可能である。したがって、車両１の周囲の状況を把握させることができる。
　このように本発明に係る障害物警報装置１００によれば、車両１に接近する物体７に応じて指標Ｓを注目領域Ｃ内に表示するので、車両１に接近する物体７及び車両１の周囲の状況の視認性を低下させることなく、運転者に車両１に接近する物体７の存在及び方向を明示することができる。このため、モニタ５０の画面サイズが小さい場合でも、車両１に接近する物体７を見逃すことがなくなる。このように、本発明によれば、車両１の周囲の状況を見難くすることなく、車両１に接近する障害物（物体７）の存在を運転者に明示することが可能となる。
２．第２の実施形態
　次に、本発明に係る第２の実施形態について説明する。上記第１の実施形態では、指標Ｓが、注目領域Ｃの中央側に突出する凸部を有する矢印形状で構成されているとして説明した。第２の実施形態では、矢印形状の指標Ｓと、枠指標Ｗを構成する指標Ｓとが表示される点で上記第１の実施形態と異なる。特に枠指標Ｗを構成する指標Ｓの表示以外については、上記第１の実施形態と同様であるので、以下では差異を中心に説明する。
　本実施形態に係る障害物警報装置１００は、上記第１の実施形態と同様に構成される。このため、本実施形態に係る障害物警報装置１００は、図１のブロック図で示される構成と同様である。本実施形態に係る障害物警報装置１００も上記第１の実施形態と同様に、撮影画像取得部１１、注目領域設定部１２、外側領域生成部１３、物体存在判定部１４、移動方向判定部１５、明示画像出力部１６、明示画像格納部１７、合成画像生成部１８、マスク領域設定部１９、マスク領域強調表示部２０、動作画像出力部３０、動作画像格納部３１の各機能部を備えて構成される。各機能部はＣＰＵを中核部材として車両１の運転者に物体７の接近を明示する種々の処理を行うための上述の機能部がハードウェア又はソフトウェア或いはその両方で構築されている。
　撮影画像取得部１１は、車両１の周囲の情景を撮影した撮影画像Ｇを取得する。撮影画像取得部１１は、上記第１の実施形態と同様に、車両１に備えられるカメラ５により、車両１の後方を略１８０度に亘って、撮影した車両１の周囲の情景を取得する。このような撮影範囲は、図７（ａ）の「広視野角」として示される。このカメラ５は、リアルタイムで動画を撮影画像Ｇとして出力する性能を有する。
　このような撮影画像Ｇの一例が図７（ｂ）に示される。図７（ｂ）の全幅は、図７（ａ）の広視野角に対応する。図７（ｂ）においても、図２（ｂ）と同様に鏡像処理が行われて表示されている。
　注目領域設定部１２は、撮影画像Ｇに注目領域Ｃを設定する。本実施形態では、撮影画像Ｇの撮影範囲は広視野角である。このため、注目領域設定部１２は、撮影画像Ｇの中央部分に注目領域Ｃを設定する。撮影画像Ｇは上述の撮影画像取得部１１から伝達される。本実施形態では、注目領域Ｃは、図７（ｂ）に示される撮影画像Ｇの横方向の中央部分が相当する。このような注目領域Ｃは、図７（ａ）の「狭視野角」のような例えば車両１の後方１２０～１３０度程度の領域とすると好適である。
　外側領域生成部（本願「外側領域設定部」に相当）１３は、注目領域Ｃの外側の外側領域Ｏを生成（設定）する。すなわち、撮影画像Ｇのうち注目領域Ｃの外側の外側領域Ｏを生成する。本実施形態でも、撮影画像Ｇの横方向の中央部分に注目領域設定部１２により注目領域Ｃが生成される。外側領域生成部１３はこのような注目領域Ｃの横方向の外側に、図７（ｂ）のような外側領域Ｏを生成する。外側領域生成部１３により生成された外側領域Ｏは、後述する物体存在判定部１４に伝達される。本障害物警報装置１００では、このような外側領域Ｏ及び上述の注目領域Ｃが、後述するモニタ５０に表示される表示画像に対応する（図７（ｃ）参照）。
　物体存在判定部１４は、外側領域Ｏに対応する領域に物体７が存在するか否かを判定する。外側領域Ｏは、外側領域生成部１３から伝達される。外側領域Ｏに対応する領域とは、外側領域Ｏに対応する実空間における領域である。本実施形態では、外側領域Ｏに対応する領域に物体７が存在するか否かの判定は、外側領域Ｏを参照して例えばパターンマッチング等の公知の画像認識処理を用いて行われる。もちろん、パターンマッチング以外の処理により、外側領域Ｏに物体７が存在するか否かを判定することは可能である。物体存在判定部１４の判定結果は、後述する移動方向判定部１５に伝達される。
　移動方向判定部１５は、外側領域Ｏの物体７の移動方向を判定する。このような移動方向の判定は、物体存在判定部１４により、外側領域Ｏに物体７が存在すると判定された場合に行われる。特に本実施形態では、移動方向判定部１５により、外側領域Ｏの物体７が注目領域Ｃの側に移動するか否かが判定される。注目領域Ｃの側に移動するとは、車両１の後方において、車両１の幅方向外側から、車両１の真後ろの方向に移動することを示す。このような判定は、例えば現在の撮影画像Ｇにおける物体７の位置と所定時間前の撮影画像Ｇにおける物体７の位置とを比較して行うことも可能であるし、オプティカルフローを用いるなどの公知の手法を用いて行うことができる。このような移動方向の判定結果は、後述する明示画像出力部１６に伝達される。
　明示画像出力部１６は、移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、外側領域Ｏと共に表示される注目領域Ｃにおいて、物体７が存在する外側領域Ｏの側から中央側へ向けて、一定時間点灯したのち消灯する指標Ｓを順次異なる位置に表示させると共に、当該表示を繰り返し行う。したがって、本実施形態においてもモニタ５０には注目領域Ｃ及び外側領域Ｏが表示されるが、明示画像出力部１６は、外側領域Ｏの物体７が注目領域Ｃの中央側に移動する場合に、注目領域Ｃの外縁部から中央側に向けて、一定時間点灯したのち消灯する指標Ｓを注目領域Ｃ内において順次異なる位置に表示させる。
　ここで、本実施形態では、指標Ｓは、注目領域Ｃにおいて所定の領域を囲む枠形状からなる枠指標Ｗの一部が相当する。ここで、所定の領域を囲む枠形状には、注目領域Ｃと等しいサイズのもの及び小さいサイズのものが含まれる。本実施形態に係る枠指標Ｗは、指標Ｓを含んで構成される。図７（ｃ）に示される例では、枠指標Ｗが有する辺のうち、物体７が存在する右側の外側領域Ｏの側に表示される縦方向の辺が相当する。また、本実施形態においては、上記第１の実施形態で説明した矢印形状の指標Ｓも表示される。矢印形状の指標Ｓの表示形態については、上記第１の実施形態と同様であるので、以下では説明は省略する。外側領域Ｏの物体７が注目領域Ｃの中央側に移動するか否かは、本実施形態でも第１の実施形態と同様に移動方向判定部１５により判定される。
　枠指標Ｗは、当該枠指標Ｗの一部である指標Ｓの注目領域Ｃの中央側への移動に合わせて、注目領域Ｃの外縁部から中央側へ向けて順次異なる位置に表示される。本実施形態では、順次異なる位置に表示されるとは、枠指標Ｗが連続して表示されている状態ではなく、枠指標Ｗが点滅しながら、移動して表示されている状態を示す。したがって、枠指標Ｗは、次第に小さくなるように表示される。明示画像出力部１６は、このような枠指標Ｗの点滅しながらの移動を繰り返し行う。
　ここで、枠指標Ｗについて説明する。図７（ｃ）に示されるように、本実施形態ではモニタ５０に複数の枠指標Ｗが表示されることがある。係る場合、枠指標Ｗは直前に表示された枠指標Ｗよりも、後の表示される枠指標Ｗの方が小さなサイズで構成される。また、枠指標Ｗは直前に表示された枠指標Ｗよりも、後に表示される枠指標Ｗの方が透明度が低く構成される。これにより、枠指標Ｗが画面中央側から飛び出してくるように表示することが可能となる。なお、このような枠指標Ｗは矢印形状の指標Ｓと共に、図７（ｄ）に示されるように明示画像格納部１７に格納されている。
　明示画像出力部１６は、このような表示を繰り返し行う。ここで、本実施形態では、図７（ｃ）に示されるように、枠指標Ｗは矢印形状の指標Ｓと共に注目領域Ｃに合成してモニタ５０に表示される。そこで、合成画像生成部１８は、注目領域Ｃに枠指標Ｗ及び矢印形状の指標Ｓを合成した合成画像を生成する。これにより、図７（ｃ）に示されるような画像が生成される。
　このように枠指標Ｗを表示することにより、枠指標Ｗが次第に接近してくるように表示させることが可能となる。これにより、車両１の乗員に対して当該車両１に物体７が接近していることを視覚的に明示することができる。
　このような矢印形状の指標Ｓ及び枠指標Ｗを構成する指標Ｓを表示する一連の画像の一例が、図８に示される。図８は、外側領域Ｏにいる物体７が注目領域Ｃの側に移動している場合に、注目領域Ｃに矢印形状の指標Ｓ及び枠指標Ｗを構成する指標Ｓが重畳して表示されている例を示している。矢印形状の指標Ｓ及び枠指標Ｗを構成する指標Ｓは、物体７が右側の外側領域Ｏから注目領域Ｃに進入するまで繰り返して表示される。すなわち、図８（ｂ）－（ｅ）の表示が繰り返し行われる。図８（ｆ）に示されるように、物体７が右側の外側領域Ｏから注目領域Ｃに進入した場合に、明示画像出力部１６により矢印形状の指標Ｓ及び枠指標Ｗの出力が中止される。この際、矢印形状の指標Ｓは、上記第１の実施形態と同様に、物体７が右側の外側領域Ｏから注目領域Ｃに進入すると、右側の外側領域Ｏと注目領域Ｃとの境界部から吸い込まれるようにマスク領域Ｍに進入するように構成しても良い。もちろん、これに合わせて、マスク領域Ｍの両外側に向けて順次彩色され、最終的にはマスク領域Ｍの全域が彩色されるように構成することも当然に可能である。
　次に、障害物警報装置１００が、注目領域Ｃに枠指標Ｗを重畳した合成画像をモニタ５０に表示する一連の処理について、図９の模式図を用いて説明する。まず、撮影画像取得部１１が、車両１のカメラ５により撮影された撮影画像Ｇを取得する（ステップ＃２１）。
　次に、注目領域設定部１２が、取得された撮影画像Ｇの中央部分を注目領域Ｃとして生成する（ステップ＃２２）。一方、外側領域生成部１３が、取得された撮影画像Ｇの横方向両側部分を外側領域Ｏとして生成する（ステップ＃２３）。このように生成された外側領域Ｏに物体７が存在しているか否か、物体存在判定部１４により判定される（ステップ＃２４）。
　外側領域Ｏに物体７が存在していると判定されると、移動方向判定部１５により当該物体７の移動方向が判定される（ステップ＃２５）。物体７の移動方向が、外側領域Ｏから注目領域Ｃの側へのものである場合、明示画像出力部１６により明示画像が出力される（ステップ＃２６）。この明示画像は、明示画像格納部１７に格納されている明示画像を参照して出力される。
　合成画像生成部１８は、ステップ＃２２において生成された注目領域Ｃに、ステップ＃２６で出力された明示画像を重畳して合成画像を生成する（ステップ＃２７）。生成された合成画像は、モニタ５０に表示される（ステップ＃２８）。このように注目領域Ｃに明示画像（矢印形状の指標Ｓ及び枠指標Ｗ）を表示することにより車両１の運転者に車両１の近傍を注視させることが可能となる。したがって、車両１の周囲の状況を把握させることができると共に、障害物が接近していることを明示することが可能となる。
　このように本発明に係る障害物警報装置１００によれば、車両１に接近する物体７に応じて指標Ｓとして枠指標Ｗを注目領域Ｃ内に表示するので、モニタ５０の画面サイズが小さい場合でも、車両１に接近する物体７を見逃すことがなくなる。また、このような枠指標Ｗは画面の側端部に表示されるので、運転者が車両１の周囲の状況を見難くなることもない。すなわち、枠指標Ｗにより画面の端部に表示される情景が隠れることがないので、急に物体７が飛び出してきた場合でも、適切に物体７を把握することが可能となる。したがって、車両１の周囲の状況を見難くすることなく、車両１に接近する障害物（物体７）の存在を運転者に明示することが可能となる。
３．その他の実施形態
　上記実施形態では、明示画像出力部１６は、点滅表示した指標Ｓが移動する際、次第に大きくなるように表示するとして説明した。しかしながら、本発明に適用範囲はこれに限定されるものではない。指標Ｓを同じサイズで表示することも当然に可能である。もちろん、指標Ｓが、次第に小さくなるように表示することも当然に可能である。このような構成であっても、適切に車両１に接近する物体７を車両１の運転者に明示することが可能である。
　上記実施形態では、直前に表示された指標Ｓは、後に表示された指標Ｓの透明度よりも高いとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、直前に表示された指標Ｓは、後に表示された指標Ｓの透明度よりも低く表示することも可能であるし、直前に表示された指標Ｓは、後に表示された指標Ｓの透明度と同じように表示することも当然に可能である。
　上記実施形態では、指標Ｓが複数ある場合に当該複数の指標Ｓどうしが一部重畳する位置に表示されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。複数の指標Ｓを表示する場合であっても、指標Ｓどうしが重畳しないように構成することも可能である。
　上記実施形態では、指標Ｓが、注目領域Ｃの中央側に突出する凸部を有する矢印形状に構成してあるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。指標Ｓを他の形状で構成することも当然に可能である。
　上記実施形態では、動作画像出力部３０は、マスク領域Ｍへの指標Ｓの吸収に伴い、当該指標Ｓが吸収された位置からマスク領域Ｍの表示色を変更するよう構成されているとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。マスク領域Ｍへの指標Ｓの吸収に伴い、指標Ｓが吸収された位置とは異なる位置からマスク領域Ｍの表示色を変更するよう構成することも可能である。或いは、マスク領域Ｍへ指標Ｓが吸収されてもマスク領域Ｍの表示色を変更しないように構成することも当然に可能である。
　上記第１の実施形態では、動作画像出力部３０は、外側領域Ｏの物体７が注目領域Ｃに進入した場合に、指標Ｓがマスク領域Ｍのうち物体７が存在する側の外側領域Ｏと注目領域Ｃとの境界部から吸収される画像を出力するとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。明示画像出力部１６は、物体７が注目領域Ｃに進入した場合に指標Ｓの出力を中止するように構成することも可能である。物体７が注目領域Ｃに進入したか否かは、上述の移動方向判定部１５により判定される。物体７が注目領域Ｃに進入した場合には、注目領域Ｃの端部に物体７が表示される。このため、このように指標Ｓの出力することにより、車両１の運転者は注目領域Ｃの端部に表示される物体７を指標Ｓに隠されることなく視認することが可能となる。
　上記実施形態では、指標Ｓ及び枠指標Ｗが画面内に複数表示される場合があるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。指標Ｓ及び枠指標Ｗが画面内に夫々一つずつ表示する構成とすることも可能であるし、指標Ｓのみを表示する構成とすることも可能である。
　上記実施形態では、物体７が存在するか否かの判定は、例えばパターンマッチング等の公知の画像認識処理を用いて行うことが可能であるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、ソナー等で検出することも当然に可能である。
　上記実施形態では、移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、注目領域Ｃのうち物体７が存在する外側領域Ｏの側から中央側に向けて、指標Ｓが表示されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。移動方向判定部１５により外側領域Ｏの物体７が注目領域Ｃの中央側に移動すると判定された場合に、注目領域Ｃと当該注目領域Ｃのうち物体７が存在する外側領域Ｏとの境界位置から注目領域Ｃの中央側に向けて指標Ｓを表示する構成とすることも当然に可能である。
　上記第２の実施形態では、枠指標Ｗが複数ある場合に、後に表示する枠指標Ｗが、直前に表示した枠指標Ｗよりもサイズが小さいとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、枠指標Ｗを同じサイズで表示することも当然に可能である。もちろん、枠指標Ｗが、次第に大きくなるように表示することも当然に可能である。このような構成であっても、適切に車両１に接近する物体７を車両１の運転者に明示することが可能である。
　上記第２の実施形態では、枠指標Ｗが複数ある場合に、後に表示する枠指標Ｗが、直前に表示した枠指標Ｗよりも透明度が低いとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、直前に表示された枠指標Ｗは、後に表示された枠指標Ｗの透明度よりも高く表示することも可能であるし、直前に表示された枠指標Ｗは、後に表示された枠指標Ｗの透明度と同じように表示することも当然に可能である。
　上記第２の実施形態では、枠指標Ｗは四角形で示した。しかしながら、本発明の適用範囲はこれに限定されるものではない。枠指標Ｗを四角形以外の形状で構成することも当然に可能である。また、この枠指標Ｗは、車両１の乗員の目に留まり易いように、彩色して構成すると好適である。係る場合、例えば赤色や黄色で彩色すると好適であるが、もちろん他の色で彩色することも可能である。更には、枠指標Ｗを規定する線の太さも適宜変更することも可能である。
　上記実施形態では、明示画像出力部１６が、指標Ｓの表示を繰り返し行うとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。繰り返し行わずに構成することも当然に可能である。
　上記第２の実施形態では、矢印形状の指標Ｓと枠指標Ｗを構成する指標Ｓとが表示されるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。矢印形状の指標Ｓを表示せずに、枠指標Ｗを構成する指標Ｓのみを表示する構成とすることも当然に可能である。
　上記実施形態では、外側領域Ｏに物体７が存在するか否かの判定は、公知の画像認識処理を用いて行われるとして説明した。しかしながら、本発明の適用範囲はこれに限定されるものではない。例えば、ソナーやレーダセンサ等を用いて外側領域Ｏに対応する実空間における領域に物体７が存在するか否かを判定する構成とすることも当然に可能である。
　本発明は、車両に接近する障害物の存在を乗員に明示する障害物警報装置に用いることが可能である。
　１：車両
　７：物体
　１１：撮影画像取得部
　１２：注目領域設定部
　１４：物体存在判定部
　１５：移動方向判定部
　　１６：明示画像出力部
　　１００：障害物警報装置
　Ｃ：注目領域
　Ｇ：撮影画像
　Ｏ：外側領域
　Ｓ：指標
　Ｗ：枠指標

Claims (9)

  1. 　車両の周囲の情景を撮影した撮影画像を取得する撮影画像取得部と、
    　前記撮影画像に注目領域を設定する注目領域設定部と、
    　前記撮影画像において前記注目領域の外側に外側領域を設定する外側領域設定部と、
    　前記外側領域に物体が存在するか否かを判定する物体存在判定部と、
    　前記物体の移動方向を判定する移動方向判定部と、
    　前記移動方向判定部により前記物体が前記注目領域の中央側に移動すると判定された場合に、前記外側領域と共に表示される前記注目領域において、前記物体が存在する外側領域の側から中央側に向けて、一定時間点灯したのち消灯する指標を順次異なる位置に表示させる明示画像出力部と、
    を備える障害物警報装置。
  2. 　前記明示画像出力部が、前記指標の表示を繰り返し行う請求項１に記載の障害物警報装置。
  3. 　前記指標が、前記注目領域の中央側に突出する凸部を有する矢印形状に構成してある請求項１又は２に記載の障害物警報装置。
  4. 　前記明示画像出力部が、前記指標が複数ある場合に当該複数の指標どうしが一部重畳する位置に表示され、後に表示する指標と直前に表示した指標との重複部分については後に表示する指標を上書き表示するよう構成されてある請求項１から３のいずれか一項に記載の障害物警報装置。
  5. 　前記指標が、前記注目領域において所定の領域を囲む枠形状からなる枠指標の一部である請求項１又は２に記載の障害物警報装置。
  6. 　前記枠指標の一部の前記注目領域の中央側への移動に合わせて、前記枠指標が前記注目領域の外縁部から中央側に向けて順次異なる位置に表示される請求項５に記載の障害物警報装置。
  7. 　前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりもサイズが小さいことを特徴とする請求項５又は６に記載の障害物警報装置。
  8. 　前記枠指標が複数ある場合に、後に表示する枠指標が、直前に表示した枠指標よりも透明度が低いことを特徴とする請求項５から７のいずれか一項に記載の障害物警報装置。
  9. 　前記明示画像出力部は、前記物体が前記注目領域に進入した場合に前記指標の出力を中止するよう構成してある請求項１から８のいずれか一項に記載の障害物警報装置。
PCT/JP2012/051360 2011-11-01 2012-01-23 障害物警報装置 WO2013065325A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2013541644A JP5674071B2 (ja) 2011-11-01 2012-01-23 障害物警報装置
US13/483,699 US9396401B2 (en) 2011-11-01 2012-05-30 Obstacle alarm device

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JPPCT/JP2011/075127 2011-11-01
PCT/JP2011/075127 WO2013065122A1 (ja) 2011-11-01 2011-11-01 障害物警報装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/075127 Continuation-In-Part WO2013065122A1 (ja) 2011-11-01 2011-11-01 障害物警報装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US13/483,699 Continuation-In-Part US9396401B2 (en) 2011-11-01 2012-05-30 Obstacle alarm device

Publications (1)

Publication Number Publication Date
WO2013065325A1 true WO2013065325A1 (ja) 2013-05-10

Family

ID=48191518

Family Applications (2)

Application Number Title Priority Date Filing Date
PCT/JP2011/075127 WO2013065122A1 (ja) 2011-11-01 2011-11-01 障害物警報装置
PCT/JP2012/051360 WO2013065325A1 (ja) 2011-11-01 2012-01-23 障害物警報装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/075127 WO2013065122A1 (ja) 2011-11-01 2011-11-01 障害物警報装置

Country Status (1)

Country Link
WO (2) WO2013065122A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015207272A (ja) * 2014-04-09 2015-11-19 パナソニックＩｐマネジメント株式会社 表示制御装置、表示制御方法、および表示制御プログラム
JP2018061260A (ja) * 2017-10-25 2018-04-12 ソニー株式会社 情報処理装置、接近対象物通知方法及びプログラム
US10528825B2 (en) 2013-06-07 2020-01-07 Sony Corporation Information processing device, approaching object notification method, and program
JP2020074504A (ja) * 2019-09-05 2020-05-14 ソニー株式会社 情報処理装置、情報処理方法及びプログラム

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008257378A (ja) * 2007-04-03 2008-10-23 Honda Motor Co Ltd 物体検出装置
JP2009040272A (ja) * 2007-08-09 2009-02-26 Alpine Electronics Inc 車両周辺監視装置
JP2009265803A (ja) * 2008-04-23 2009-11-12 Panasonic Corp 車両視界支援装置
JP2010009607A (ja) * 2009-07-03 2010-01-14 Mazda Motor Corp 車両の障害物警報装置
JP2011151479A (ja) * 2010-01-19 2011-08-04 Aisin Seiki Co Ltd 車両周辺監視装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008257378A (ja) * 2007-04-03 2008-10-23 Honda Motor Co Ltd 物体検出装置
JP2009040272A (ja) * 2007-08-09 2009-02-26 Alpine Electronics Inc 車両周辺監視装置
JP2009265803A (ja) * 2008-04-23 2009-11-12 Panasonic Corp 車両視界支援装置
JP2010009607A (ja) * 2009-07-03 2010-01-14 Mazda Motor Corp 車両の障害物警報装置
JP2011151479A (ja) * 2010-01-19 2011-08-04 Aisin Seiki Co Ltd 車両周辺監視装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10528825B2 (en) 2013-06-07 2020-01-07 Sony Corporation Information processing device, approaching object notification method, and program
JP2015207272A (ja) * 2014-04-09 2015-11-19 パナソニックＩｐマネジメント株式会社 表示制御装置、表示制御方法、および表示制御プログラム
JP2018061260A (ja) * 2017-10-25 2018-04-12 ソニー株式会社 情報処理装置、接近対象物通知方法及びプログラム
JP2020074504A (ja) * 2019-09-05 2020-05-14 ソニー株式会社 情報処理装置、情報処理方法及びプログラム

Also Published As

Publication number Publication date
WO2013065122A1 (ja) 2013-05-10

Similar Documents

Publication Publication Date Title
JP5692403B2 (ja) 障害物警報装置
WO2013065341A1 (ja) 障害物警報装置
US9396401B2 (en) Obstacle alarm device
WO2013065325A1 (ja) 障害物警報装置
JP5861449B2 (ja) 障害物警報装置
JP5660395B2 (ja) 障害物警報装置
JP5974476B2 (ja) 障害物警報装置
JP5845909B2 (ja) 障害物警報装置
JP5704416B2 (ja) 障害物警報装置
JP5787168B2 (ja) 障害物警報装置
JP5754605B2 (ja) 障害物警報装置
JP5765576B2 (ja) 障害物警報装置
JP5674071B2 (ja) 障害物警報装置
JP5704417B2 (ja) 障害物警報装置
WO2013094496A1 (ja) 障害物警報装置
JP2013131178A (ja) 障害物警報装置
JP5765575B2 (ja) 撮影領域明示装置
JP5825091B2 (ja) 撮影領域明示装置
WO2013094345A1 (ja) 撮影領域明示装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 12844809

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2013541644

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 12844809

Country of ref document: EP

Kind code of ref document: A1