CN109997356B - 显示控制装置、显示控制***、显示控制方法以及程序 - Google Patents

显示控制装置、显示控制***、显示控制方法以及程序 Download PDF

Info

Publication number
CN109997356B
CN109997356B CN201880004577.6A CN201880004577A CN109997356B CN 109997356 B CN109997356 B CN 109997356B CN 201880004577 A CN201880004577 A CN 201880004577A CN 109997356 B CN109997356 B CN 109997356B
Authority
CN
China
Prior art keywords
vehicle
information
time
display control
garage
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201880004577.6A
Other languages
English (en)
Other versions
CN109997356A (zh
Inventor
清水义之
石田一郎
照内拓之
林直人
胜俣升
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
JVCKenwood Corp
Original Assignee
JVCKenwood Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP2017148384A external-priority patent/JP6763356B2/ja
Priority claimed from JP2017148385A external-priority patent/JP6763357B2/ja
Priority claimed from JP2017148336A external-priority patent/JP6787272B2/ja
Priority claimed from JP2017148469A external-priority patent/JP6763358B2/ja
Application filed by JVCKenwood Corp filed Critical JVCKenwood Corp
Publication of CN109997356A publication Critical patent/CN109997356A/zh
Application granted granted Critical
Publication of CN109997356B publication Critical patent/CN109997356B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/002Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles specially adapted for covering the peripheral part of the vehicle, e.g. for viewing tyres, bumpers or the like
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/20Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B60R1/22Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle
    • B60R1/23Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view
    • B60R1/27Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles for viewing an area outside the vehicle, e.g. the exterior of the vehicle with a predetermined field of view providing all-round vision, e.g. using omnidirectional cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/02Arrangements for holding or mounting articles, not otherwise provided for for radio sets, television sets, telephones, or the like; Arrangement of controls thereof
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R11/00Arrangements for holding or mounting articles, not otherwise provided for
    • B60R11/04Mounting of cameras operative during drive; Arrangement of controls thereof relative to the vehicle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/59Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265Mixing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/173Reversing assist
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16Type of output information
    • B60K2360/176Camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60KARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/80Arrangements for controlling instruments
    • B60K35/81Arrangements for controlling instruments for controlling displays
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/30Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing
    • B60R2300/303Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of image processing using joined images, e.g. multiple camera images
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/60Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective
    • B60R2300/607Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by monitoring and displaying vehicle exterior scenes from a transformed perspective from a bird's eye viewpoint
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/802Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for monitoring and displaying vehicle exterior blind spot views
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/806Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for aiding parking
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B60VEHICLES IN GENERAL
    • B60RVEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/80Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement
    • B60R2300/8093Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the intended use of the viewing arrangement for obstacle warning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30181Earth observation
    • G06T2207/30192Weather; Meteorology
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261Obstacle
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30248Vehicle exterior or interior
    • G06T2207/30252Vehicle exterior; Vicinity of vehicle
    • G06T2207/30264Parking
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/08Detecting or categorising vehicles

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Mechanical Engineering (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Traffic Control Systems (AREA)

Abstract

本发明提供一种显示控制***、显示控制方法以及程序,其中,显示控制装置,包括:影像数据获取部(41),获取来自拍摄车辆的周围的多个拍摄部的影像数据;俯瞰影像生成部(44),对影像数据进行视点转换处理以及合成处理,生成俯瞰影像;相邻信息获取部(43),获取第一障碍物信息和第二障碍物信息,第一障碍物信息是车辆后退入库时的车辆周围的障碍物的信息,第二障碍物信息是车辆从入库状态前进出库时的车辆周围的障碍物的信息;比较部(45),比较第一障碍物信息和第二障碍物信息,以比较车辆出库时车辆周围是否增加了障碍物;以及显示控制部(48),在比较部判断为车辆出库时车辆周围增加了障碍物的情况下,出库时在显示部上显示俯瞰影像。

Description

显示控制装置、显示控制***、显示控制方法以及程序
技术领域
本发明涉及显示控制装置、显示控制***、显示控制方法以及程序。
背景技术
已知有与将车辆的俯瞰图像与车辆图像一起显示的车辆周边显示装置有关的技术(例如,参照专利文献1)。该技术是当车辆从前进切换到后退时,将俯瞰图像的显示区域相比车辆图像向后方扩大。
现有技术文献
专利文献
专利文献1:日本特开2015-076645号公报
发明内容
发明所要解决的问题
如专利文献1所述,为了以向泊车区域入库时的辅助泊车为主要目的,在向泊车区域后退入库时显示车辆的俯瞰影像。由此,在后退入库时,驾驶员通过俯瞰影像来确认包含目视或视镜的死角范围的周边状况。
由于在从泊车区域前进出库时不显示俯瞰影像,因此驾驶员通过目视或视镜来确认周边状况。与后退入库时相比从泊车区域前进出库时操作容易。但是,在周边状况变化、或驾驶员变化、或视认性变化等周围确认条件发生了变化的情况下,除了目视或利用视镜确认之外,有时希望通过俯瞰影像来确认周边状况。另外,在从泊车区域前进出库时,如果与周边状况无关地显示俯瞰影像,则在不需要显示俯瞰影像的状况下显示俯瞰影像,或者在想要基于导航确认路径时等显示俯瞰影像。
本发明是鉴于上述情况而完成的,其目的在于,在出库时根据周围确认条件的变化而适当地显示俯瞰影像。
用于解决问题的手段
为了解决上述课题并达到目的,本发明所涉及的显示控制装置,其特征在于,包括:影像数据获取部,获取来自拍摄车辆的周围的多个拍摄部的影像数据;俯瞰影像生成部,对所述影像数据获取部所获取的影像数据进行视点转换处理以及合成处理,生成俯瞰影像;信息获取部,获取第一信息和第二信息,所述第一信息与所述车辆后退入库时的所述车辆的周围确认条件相关,所述第二信息与所述车辆从入库状态前进出库时的所述车辆的周围确认条件相关;比较部,比较所述第一信息和所述第二信息,以比较所述车辆入库时和出库时的周围确认条件的变化;以及显示控制部,在所述比较部判断为在所述车辆出库时周围确认条件发生了变化的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
本发明所涉及的显示控制***包括:上述的显示控制装置;以及显示部与多个拍摄部中的至少一者,其中,所述影像数据获取部获取来自所述多个拍摄部的影像数据,所述显示控制部在所述显示部上显示俯瞰影像。
本发明所涉及的显示控制方法包括:影像数据获取步骤,获取来自拍摄车辆周围的多个拍摄部的影像数据;俯瞰影像生成步骤,对在所述影像数据获取步骤中获取的影像数据进行视点转换处理以及合成处理,生成俯瞰影像;相邻信息获取步骤,获取第一信息和第二信息,所述第一信息与所述车辆后退入库时的所述车辆的周围确认条件相关,所述第二信息与所述车辆从入库状态前进出库时的所述车辆的周围确认条件相关;比较步骤,比较所述第一信息和所述第二信息,以比较所述车辆入库时和出库时的周围确认条件的变化;显示控制步骤,在所述比较步骤中判断为在所述车辆出库时周围确认条件发生了变化的情况下,出库时在显示部上显示由所述俯瞰影像生成步骤生成的俯瞰影像。
本发明所涉及的存储有程序的计算机可读存储介质,用于使作为显示控制装置而动作的计算机执行如下步骤:影像数据获取步骤,获取来自拍摄车辆周围的多个拍摄部的影像数据;俯瞰影像生成步骤,对在所述影像数据获取步骤中获取的影像数据进行视点转换处理以及合成处理,生成俯瞰影像;相邻信息获取步骤,获取第一信息和第二信息,所述第一信息与所述车辆后退入库时的所述车辆的周围确认条件相关,所述第二信息与所述车辆从入库状态前进出库时的所述车辆的周围确认条件相关;比较步骤,比较所述第一信息和所述第二信息,以比较所述车辆入库时和出库时的周围确认条件的变化;显示控制步骤,在所述比较步骤中判断为在所述车辆出库时周围确认条件发生了变化的情况下,出库时在显示部上显示由所述俯瞰影像生成步骤生成的俯瞰影像。
发明效果
根据本发明,具有如下效果:在出库时,能够根据周围确认条件的变化适当地显示俯瞰影像。
附图说明
图1是示出第一实施方式所涉及的显示控制***的构成例的框图;
图2是说明泊车区域的图,表示入库时的状态;
图3是说明泊车区域的图,表示出库时的状态;
图4是示出第一实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图5是示出第一实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图6是示出第一实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图;
图7是示出第二实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图8是示出第三实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图9是示出第四实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图10是说明自家停车场的泊车区域的图;
图11是说明平行泊车的泊车区域的图,表示入库时的状态;
图12是说明平行泊车的泊车区域的图,表示出库时的状态;
图13是说明泊车区域的图,表示入库时的状态;
图14是说明泊车区域的图,表示出库时的状态;
图15是示出第五实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图;
图16是示出第八实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图17是示出用于说明第九实施方式所涉及的显示控制***的显示控制装置中的处理的泊车区域的图;
图18是示出第九实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图19是说明自家停车场的泊车区域的图;
图20是说明平行泊车的泊车区域的图;
图21是示出第十实施方式所涉及的显示控制***的构成例的框图;
图22是示出第十实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图23是示出第十实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图24是示出第十实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图;
图25是示出第十一实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图26是示出第十二实施方式所涉及的显示控制***的构成例的框图;
图27是示出第十二实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图28是示出第十二实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图;
图29是示出第十三实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图30是示出第十四实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图31是示出第十五实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图;
图32是示出第十六实施方式所涉及的显示控制***的构成例的框图;
图33是示出第十六实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图34是示出第十七实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图;
图35是示出第十八实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。
具体实施方式
以下,参照附图详细说明本发明所涉及的显示控制装置40、显示控制***1、显示控制方法以及程序的实施方式。另外,本发明并不限于以下的实施方式。
[第一实施方式]
图1是示出第一实施方式所涉及的显示控制***的构成例的框图。图2是说明泊车区域的图,表示入库时的状态。图3是说明泊车区域的图,表示出库时的状态。显示控制***1出库时根据周边状况的变化(周围确认条件),适当地显示俯瞰影像。显示控制***1安装在车辆V1上。显示控制***1除了载放在车辆V1的装置以外,也可以是能够在车辆V1中利用的可移动型装置。
在本实施方式中,车辆V1停在泊车区域P1中。与泊车区域P1相对地排列配置有泊车区域PA、泊车区域PB、泊车区域PC。泊车区域PB与泊车区域P1隔着过道正面相对。泊车区域PA从车辆V1观察时位于泊车区域PB的左邻。泊车区域PC从车辆V1观察时位于泊车区域PB的右邻。泊车区域PD是泊车区域P1的左邻。泊车区域PE是泊车区域P1的右邻。
使用图1对显示控制***1进行说明。显示控制***1具有前方照相机(拍摄部)11、后方照相机(拍摄部)12、左侧方照相机(拍摄部)13、右侧方照相机(拍摄部)14、传感器单元(障碍物检测部)21、显示面板(显示部)31和显示控制装置40。
前方照相机11是俯瞰影像用照相机。前方照相机11配置在车辆V1的前方,拍摄以车辆V1的前方为中心的周边。前方照相机11拍摄例如180°左右的拍摄范围。拍摄范围包括车辆V1的前方比俯瞰影像100的显示范围更宽的范围。前方照相机11将拍摄到的影像输出到显示控制装置40的影像数据获取部41。
后方照相机12是俯瞰影像用照相机。后方照相机12配置在车辆V1的后方,拍摄以车辆V1的后方为中心的周边。后方照相机12拍摄例如180°左右的拍摄范围。拍摄范围包括车辆V1的后方比俯瞰影像100的显示范围更宽的范围。后方照相机12将拍摄到的影像输出到显示控制装置40的影像数据获取部41。
左侧方照相机13是俯瞰影像用照相机。左侧方照相机13配置在车辆V1的左侧方,拍摄以车辆V1的左侧方为中心的周边。左侧方照相机13拍摄例如180°左右的拍摄范围。拍摄范围包括车辆V1的左侧方比俯瞰影像100的显示范围更宽的范围。左侧方照相机13将拍摄到的影像输出到显示控制装置40的影像数据获取部41。
右侧方照相机14是俯瞰影像用照相机。右侧方照相机14配置在车辆V1的右侧方,拍摄以车辆V1的右侧方为中心的周边。右侧方照相机14拍摄例如180°左右的拍摄范围。拍摄范围包括车辆V1的右侧方比俯瞰影像100的显示范围更宽的范围。右侧方照相机14将拍摄到的影像输出到显示控制装置40的影像数据获取部41。
由前方照相机11、后方照相机12、左侧方照相机13和右侧方照相机14拍摄车辆V1的全方位。
传感器单元21包括设置在车辆V1周围的多个传感器。传感器单元21能够检测存在于车辆V1附近的障碍物。在本实施方式中,传感器单元21作为存在于车辆V1附近的障碍物,检测与泊车区域P1相邻的泊车区域PA至泊车区域PE中的相邻车辆,泊车区域P1是车辆V1入库的泊车区域。在本实施方式中,传感器单元21配置有前方中央传感器、前方左传感器、前方右传感器、后方中央传感器、后方左传感器、后方右传感器、左侧方传感器和右侧方传感器。由于各传感器同样地构成,所以对前方中央传感器进行说明,对其他传感器省略说明。
前方中央传感器配置在车辆V1的前方中央,检测车辆V1的前方中央的障碍物。在本实施方式中,前方中央传感器检测泊车区域PB中存在的相邻车辆。前方中央传感器例如是红外线传感器或超声波传感器、毫米波雷达等,也可以由它们的组合构成。前方中央传感器例如检测从车辆V1到5m左右为止的距离的相邻车辆。前方中央传感器在铅垂方向观察时,检测以传感器的中央部为中心的例如40°左右的范围的相邻车辆。前方中央传感器的检测范围可以与前方左传感器和前方右传感器的检测范围的一部分重叠。前方中央传感器向显示控制装置40的相邻信息获取部(信息获取部)43输出作为检测结果的障碍物信息,该障碍物信息表示有无相邻车辆。
通过这样的传感器单元21,能够检测车辆V1的全方位的相邻车辆。在本实施方式中,根据传感器单元21的检测结果,能够检测车辆V1的左右侧方、左右前方、前方中的至少一个相邻车辆。更详细地说,根据传感器单元21的检测结果,能够检测存在于泊车区域PA至泊车区域PE中的相邻车辆。更详细地说,根据检测到检测结果中所包含的相邻车辆的传感器、以及由传感器检测出的相邻车辆的水平方向的存在范围,确定在哪个泊车区域中检测到了相邻车辆。
显示面板31作为一例是与包含导航***的其他***共用的显示装置等。显示面板31是用于在必要的定时确认车辆V1周围的监视器。显示面板31只要能够确认车辆V1的周围,就能够采取各种形态。作为显示面板的一个例子,也可以使用电子车内视镜,或者作为仪表板的功能。显示面板31是例如包括液晶显示器(LCD:Liquid Crystal Display)或者有机EL(Organic Electro-Luminescence,有机电致发光)显示器等的显示器。显示面板31配置在驾驶员容易视认的位置。在本实施方式中,显示面板31配置在车辆V1的驾驶员前方的仪表盘(Dash board)、仪表板(instrument panel)、中央控制台(center console)等上。显示面板31基于从显示控制装置40的显示控制部48输出的影像信号来显示车辆V1的俯瞰影像100。
显示控制装置40提供用于辅助泊车的信息。更详细地说,显示控制装置40在入库时和出库时生成俯瞰影像100并进行显示。
显示控制装置40例如是由CPU(Central Processing Unit:中央处理器)和影像处理用处理器等构成的运算处理装置(控制部)。显示控制装置40将存储在存储部49中的程序加载到存储器中,执行程序所包含的命令。显示控制装置40包括影像数据获取部41、自身车辆信息获取部42、相邻信息获取部43、俯瞰影像生成部44、比较部45、显示控制部48、作为内部存储器的存储部49。显示控制装置40也可以由一个或多个装置构成。
影像数据获取部41获取拍摄了车辆V1周边的影像数据。更详细地说,影像数据获取部41获取由前方照相机11、后方照相机12、左侧方照相机13和右侧方照相机14输出的影像数据。影像数据获取部41将所获取的影像数据输出给相邻信息获取部43和俯瞰影像生成部44。
自身车辆信息获取部42从CAN(Controller Area Network:控制器区域网络)或对车辆V1的状态进行传感检测的各种传感器等获取车辆V1的齿***作信息等车辆信息,该车辆信息成为作为泊车辅助显示触发的、泊车开始触发或泊车结束触发。自身车辆信息获取部42作为车辆信息获取从CAN或各种传感器等获取的泊车时进行的转向操作的操作信息。自身车辆信息获取部42将获取的车辆信息输出给相邻信息获取部43和显示控制部48。
相邻信息获取部43获取车辆V1后退入库时的第一障碍物信息(第一信息)、以及车辆V1从入库状态前进而出库时的第二障碍物信息(第二信息)。更详细地说,相邻信息获取部43在车辆V1后退入库时,从传感器单元21获取第一障碍物信息。相邻信息获取部43将入库时的第一障碍物信息存储在存储部49中。另外,相邻信息获取部43在车辆V1从入库状态前进而出库时,从传感器单元21A获取第二障碍物信息。车辆V1后退入库的判断、以及车辆V1前进而出库的判断,根据从自身车辆信息获取部42获取的车辆V1的齿***作信息、发动机的开/关信息等进行判断。相邻信息获取部43将出库时的相邻车辆信息输出给比较部45。
第一障碍物信息是车辆V1后退入库时的车辆V1周围的障碍物的信息。在本实施方式中,第一障碍物信息是包含车辆V1后退入库时存在于泊车区域PA至泊车区域PE中的相邻车辆的有无的信息。
第二障碍物信息是车辆V1从入库状态前进而出库时的车辆V1周围的障碍物的信息。在本实施方式中,第二障碍物信息是包含车辆V1从入库状态前进而出库时存在于泊车区域PA至泊车区域PE中的相邻车辆的有无的信息。
车辆V1后退入库的情况通过以下操作检测出:例如,挡位成为“倒挡(R挡)”,车辆V1向后方行驶后,挡位成为“停车挡(P挡)”或“空挡(N挡)”的情况、或者在5秒以上的时间内速度为零的情况、或者发动机停止、或者侧制动器或脚制动器的操作等。或者,也可以通过用户操作等任意的触发来检测车辆V1后退入库的情况。
车辆V1从入库状态前进而出库的情况通过以下操作检测出:例如,从挡位为“停车挡(P挡)”或“空挡(N挡)”的情况、或者5秒以上的时间内速度为零的情况、或者发动机停止、或者从侧制动器或脚制动器的操作等的入库状态开始发动机起动的情况、挡位成为“前进挡(D挡)”的情况、侧制动器或脚制动器被解除等情况。或者,也可以通过用户操作等任意的触发来检测车辆V1从入库状态前进而出库的情况。
俯瞰影像生成部44对由影像数据获取部41获取的周边影像数据进行视点转换处理以及合成处理来生成俯瞰影像100。俯瞰影像生成部44在入库时生成俯瞰影像100。俯瞰影像生成部44在前进出库时,在判断为车辆V1的周边状况已相比于入库时变化的情况下,生成俯瞰影像100。在本实施方式中,在比较部45判断为车辆V1出库时相邻车辆增加的情况下,俯瞰影像生成部44生成俯瞰影像100。俯瞰影像生成部44将所生成的俯瞰影像100输出到显示控制部48。俯瞰影像生成部44具有视点转换处理部441、剪切处理部442和合成处理部443。
视点转换处理部441对由影像数据获取部41获取的周边影像数据以从上方俯视车辆V1的方式进行视点转换处理。更详细地说,视点转换处理部441基于由前方照相机11、后方照相机12、左侧方照相机13和右侧方照相机14拍摄到周边影像数据来生成进行了视点转换处理的影像。视点转换处理的方法可以是公知的任何方法,并不限定。视点转换处理部441将进行了视点转换处理的周边影像数据输出到剪切处理部442。
剪切处理部442进行从进行了视点转换处理的周边影像数据中剪切预定范围的影像的剪切处理。预先注册并存储有将哪个范围作为剪切范围。剪切处理部442将进行了剪切处理的影像的影像数据输出给合成处理部443。
合成处理部443进行对进行了剪切处理的影像数据进行合成的合成处理。合成处理部443生成在合成的影像中显示了车辆图标110的俯瞰影像100。
使用图4,对俯瞰影像100进行说明。图4是示出第一实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。俯瞰影像100显示从车辆V1起2m左右的范围。俯瞰影像100的显示范围包括存在于泊车区域PD中的相邻车辆Vd、以及存在于泊车区域PE中的相邻车辆Ve。俯瞰影像100包括前方影像101、后方影像102、左侧方影像103、右侧方影像104、以及位于由前方影像101、后方影像102、左侧方影像103和右侧方影像104包围的中央部的车辆图标110。车辆图标110表示车辆V1的位置和朝向。车辆图标110以使其前后方向与俯瞰影像100的前后方向平行的方式配置在中央部。
返回图1、比较部45比较第一障碍物信息和第二障碍物信息来比较车辆V1出库时车辆V1的障碍物是否增加。在本实施方式中,比较部45比较第一障碍物信息和第二障碍物信息来比较车辆V1出库时相邻车辆是否增加。更详细地说,比较部45比较入库时的相邻泊车区域中有无车辆和出库时的相邻泊车区域中有无车辆,在第一障碍物信息中没有检测出相邻车辆,而在第二障碍物信息中有检测出相邻车辆的泊车区域时,判断为相邻车辆增加。
显示控制部48在入库时在显示面板31上显示俯瞰影像生成部44所生成的俯瞰影像100。在比较部45判断为车辆V1出库时相邻的障碍物增加的情况下,显示控制部48在显示面板31上显示俯瞰影像生成部44所生成的俯瞰影像100。在本实施方式中,在比较部45判断为车辆V1出库时相邻车辆增加的情况下,显示控制部48在显示面板31上显示俯瞰影像100。更详细地说,在比较部45判断为入库时相邻泊车区域内不存在车辆而在出库时相邻泊车区域内存在车辆的情况下,显示控制部48出库时在显示面板31上显示俯瞰影像100。
存储部49用于暂时存储显示控制装置40中的数据等。存储部49例如是RAM(RandomAccess Memory:随机存取存储器)、ROM(Read Only Memory:只读存储器)、闪速存储器(Flash Memory:闪存)等半导体存储元件或者硬盘、光盘等存储装置。或者,也可以是经由未图示的通信装置无线连接的外部存储装置。
接着,使用图5、图6,对显示控制***1的显示控制装置40中的处理流程进行说明。图5是示出第一实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。图6是示出第一实施方式所涉及的显示控制***的显示控制装置中的处理流程的其他例的流程图。
当显示控制***1启动时,显示控制装置40通过影像数据获取部41获取影像数据。显示控制装置40通过自身车辆信息获取部42获取车辆信息。
首先,对入库时的处理流程进行说明。
显示控制装置40判断是否开始了后退(步骤S11)。显示控制装置40基于由自身车辆信息获取部42获取的自身车辆信息来判断有无后退触发。后退触发例如通过挡位成为“倒挡”的情况、或者车辆V1的行进方向成为后方的情况来检测。显示控制装置40在判断为没有开始后退的情况下(步骤S11中为“否”),再次执行步骤S11的处理。显示控制装置40在判断为开始后退的情况下(在步骤S11中为“是”),进入步骤S12。
在步骤S11中判断为开始后退的情况下(步骤S11中为“是”),显示控制装置40开始显示俯瞰影像(步骤S12)。更详细地说,显示控制装置40使俯瞰影像生成部44生成俯瞰影像100,并使显示控制部48在显示面板31上显示俯瞰影像100。显示控制装置40进入步骤S13。
显示控制装置40判断入库是否完成(步骤S13)。更详细地说,显示控制装置40基于由自身车辆信息获取部42获取的自身车辆信息,例如检测出挡位为“停车挡(P挡)”或“空挡(N挡)”的情况、或者在5秒以上的时间内速度为零的情况、或者发动机停止、或者侧制动器或脚制动器的操作等的情况下,判断为入库完成。显示控制装置40在判断为入库完成的情况下,判断为要结束显示俯瞰影像(在步骤S13中为“是”),进入步骤S14。显示控制装置40在判断为入库未完成的情况下,判断为不结束影像显示(在步骤S13中为“否”),再次执行步骤S13的处理。
在判断为入库完成的情况下(步骤S13中为“是”),显示控制装置40结束显示俯瞰影像(步骤S14)。显示控制装置40进入步骤S15。
显示控制装置40通过相邻信息获取部43获取第一障碍物信息,并存储到存储部49中(步骤S15)。然后,显示控制装置40结束处理。
参照图2,说明第一障碍物信息,该第一障碍物信息表示入库时的车辆V1的周边状况。在入库时,相邻车辆Va存在于泊车区域PA中,相邻车辆Vc存在于泊车区域PC中,并且相邻车辆Vd存在于泊车区域PD中。泊车区域PB和泊车区域PE中不存在相邻车辆。这些信息被传感器单元21检测出,并由相邻信息获取部43获取为第一障碍物信息。第一障碍物信息在步骤S15中被存储到存储部49中。
接着,对出库时的处理流程进行说明。
显示控制装置40判断有无前进触发(步骤S21)。显示控制装置40基于由自身车辆信息获取部42获取的自身车辆信息来判断有无前进触发。前进触发例如通过发动机已被起动的情况、挡位成为能够前进的“前进挡(D挡)”等的情况、侧制动器或脚制动器被解除等情况来检测。显示控制装置40在判断为没有前进触发的情况下(在步骤S21中为“否”),再次执行步骤S21的处理。显示控制装置40在判断为有前进触发的情况下(在步骤S21中为“是”),进入步骤S22。
在步骤S21中判断为有前进触发的情况下(在步骤S21中为“是”),显示控制装置40判断是否是从入库开始的前进(步骤S22)。更详细地说,显示控制装置40基于由自身车辆信息获取部42获取的自身车辆信息,在判断为检测出前进触发紧接之前的状态为例如为挡位为“停车挡(P挡)”或“空挡(N挡)”、或在5秒以上的时间内速度为零、或者发动机停止、或者操作了侧制动器或脚制动器的情况下,判断为是从入库开始的前进。或者,显示控制装置40也可以在存储部49中存储有第一障碍物信息的情况下,判断为是从入库开始的前进。显示控制装置40在判断为不是从入库开始的前进的情况下(在步骤S22中为“否”),再次执行步骤S21的处理。显示控制装置40在判断为是从入库开始的前进的情况下(在步骤S22中为“是”),进入步骤S23。
显示控制装置40通过相邻信息获取部43获取第二障碍物信息,通过比较部45比较第一障碍物信息和第二障碍物信息(步骤S23)。显示控制装置40通过用比较部45进行比较,获取入库时和出库时的车辆V1的周边状况的变化。显示控制装置40进入步骤S24。
参照图3,说明第二障碍物信息,该第二障碍物信息表示出库时的车辆V1的周边状况。在出库时,相邻车辆Va存在于泊车区域PA中,相邻车辆Vc存在于泊车区域PC中,并且相邻车辆Vd存在于泊车区域PD中,并且相邻车辆Ve存在于泊车区域PE中。这些信息被传感器单元21检测出,并由相邻信息获取部43获取为第二障碍物信息。当通过比较部45比较第一障碍物信息和第二障碍物信息时,入库时不存在相邻车辆的泊车区域PE中增加了相邻车辆Ve。
显示控制装置40判断相邻车辆是否增加(步骤S24)。显示控制装置40在比较部45的比较结果判断为相邻车辆没有增加的情况下(在步骤S24中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40在比较部45的比较结果判断为相邻车辆增加了的情况下(在步骤S24中为“是”),进入步骤S25。
显示控制装置40判断是否已开始前进(步骤S25)。显示控制装置40基于通过自身车辆信息获取部42获取的车辆信息,例如在检测出速度为零以上的情况、或者车辆V1向前方行驶了的情况下,判断为已开始前进。显示控制装置40在判断为车辆V1没有前进的情况下(在步骤S25中为“否”),再次执行步骤S25的处理。显示控制装置40在判断为车辆V1前进了的情况下(在步骤S25中为“是”),进入步骤S26。
在步骤S25中判断为已开始前进的情况下(在步骤S25中为“是”),显示控制装置40开始显示俯瞰影像(步骤S26)。更详细地说,显示控制装置40使俯瞰影像生成部44生成俯瞰影像100,并使显示控制部48在显示面板31上显示俯瞰影像100。显示控制装置40进入步骤S27。
关于在显示面板31上显示俯瞰影像100的定时,作为一例例示了步骤S26,但是只要是在车辆V1发动机起动时、挡位成为“前进挡(D挡)”时、车辆V1已开始前进时等、在出库时确认周边状况的适当定时,就可以是任意的定时。
参照图4,对在步骤S26中显示的俯瞰影像100进行说明。俯瞰影像100在显示范围内包含存在于泊车区域PD中的相邻车辆Vd以及存在于泊车区域PE中的相邻车辆Ve。
显示控制装置40判断是否满足俯瞰影像显示的结束条件(步骤S27)。更详细地说,显示控制装置40基于自身车辆信息获取部42所获取的车辆信息,在检测出例如从开始前进的位置行驶了预定距离以上的情况、车速成为预定速度以上的情况时,判断为满足俯瞰影像显示的结束条件。显示控制装置40在判断为满足俯瞰影像显示的结束条件的情况下,判断为要结束显示俯瞰影像(在步骤S27中为“是”),进入步骤S28。显示控制装置40在判断为不满足俯瞰影像显示的结束条件的情况下,判断为不结束影像显示(在步骤S27中为“否”),再次执行步骤S27的处理。
在步骤S27中判断为满足俯瞰影像显示的结束条件的情况下(在步骤S27中为“是”),显示控制装置40结束显示俯瞰影像(步骤S28)。显示控制装置40删除存储在存储部49中的第一障碍物信息。然后,显示控制装置40结束处理。
如上所述,在本实施方式中,在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,在显示面板31上显示俯瞰影像生成部44所生成的俯瞰影像100。这样,本实施方式能够在出库时根据周边状况的变化,适当地显示俯瞰影像100。根据本实施方式,当在出库时相比入库时相邻车辆增加了时,能够显示俯瞰影像100。由此,在相邻车辆增加而出库时的操作变难时,驾驶员除了目视或利用视镜进行确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
根据本实施方式,在出库时,根据周边状况的变化,仅在需要显示俯瞰影像100时显示俯瞰影像100。如上所述,本实施方式能够抑制在不需要显示俯瞰影像的情况下显示俯瞰影像100或者在想要确认基于导航的路径时等显示俯瞰影像的情况。
[第二实施方式]
参照图7,对本实施方式所涉及的显示控制***1进行说明。图7示出第二实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1的基本构成与第一实施方式的显示控制***1相同。在以下的说明中,对与显示控制***1相同的构成要素赋予相同的符号或对应的符号,并省略其详细说明。显示控制***1在生成的俯瞰影像100中强调显示所增加的相邻车辆的点上与第一实施方式不同。
在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,合成处理部443生成强调了所增加的相邻车辆的俯瞰影像100。例如,合成处理部443通过对位置发生了变化的相邻车辆进行着色、或用粗线包围来强调显示。
显示控制部48在显示面板31上显示对比较部45判断为增加了的相邻车辆进行了强调显示的俯瞰影像100。
使用图7,对俯瞰影像100进行说明。俯瞰影像100中,增加了的相邻车辆Ve被着色而被强调显示。
如上所述,根据本实施方式,在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,在显示面板31上显示强调显示了所增加的相邻车辆的俯瞰影像100。本实施方式能够容易地掌握在入库时和出库时增加了的相邻车辆。根据本实施方式,在俯瞰影像100中,容易识别相比于入库时的变化的点,因此驾驶员能够容易地确认出库时应该留意的点。
[第三实施方式]
参照图8,对本实施方式所涉及的显示控制***1进行说明。图8是示出第三实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1的基本构成与第一实施方式的显示控制***1相同。显示控制***1在所生成的俯瞰影像100中显示通知图标120的点上与第一实施方式不同,通知图标120通知所增加的相邻车辆存在的方向。
合成处理部443在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,生成显示有通知图标120的俯瞰影像100,该通知图标120表示所增加的相邻车辆存在的方向。
显示控制部48在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,在显示面板31上显示包括通知图标120的俯瞰影像100,该通知图标120表示判断为增加了的相邻车辆的方向。
使用图8,对俯瞰影像100进行说明。在本实施方式中,假设在入库时泊车区域PC中不存在相邻车辆,在出库时泊车区域PC中存在相邻车辆Vc。俯瞰影像100显示有通知图标120,该通知图标120表示所增加的相邻车辆Vc存在的方向。
如上所述,根据本实施方式,在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,在显示面板31上显示俯瞰影像100,该俯瞰影像100显示有表示所增加了的相邻车辆存在的方向的通知图标120。本实施方式即使在俯瞰影像100中未显示所增加的相邻车辆的情况下,也能够容易地掌握在入库时和出库时增加的相邻车辆存在的方向。根据本实施方式,即使不显示在俯瞰影像100上,也容易识别相比于入库时变化的点,因此驾驶员能够容易地确认出库时应该留意的点。
[第四实施方式]
参照图9,对本实施方式所涉及的显示控制***1进行说明。图9是示出第四实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1的基本构成与第一实施方式的显示控制***1相同。显示控制***1与第一实施方式的不同点在于,在所生成的俯瞰影像100中,显示以将所增加的相邻车辆包含在显示范围内的方式变更了显示范围的俯瞰影像100。
剪切处理部442从进行了视点转换处理后的周边影像数据中,以将所增加的相邻车辆包含在显示范围内的剪切范围进行剪切处理。只要在俯瞰影像100的显示范围中包含有增加了的相邻车辆的一部分即可。
显示控制部48在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,在显示面板31上显示俯瞰影像100,该俯瞰影像100的显示范围被变更为包括判断为增加的相邻车辆。
使用图9,对俯瞰影像100进行说明。在本实施方式中,假设在入库时在泊车区域PC中不存在相邻车辆,而在出库时在泊车区域PC中存在相邻车辆Vc。俯瞰影像100显示以显示所增加了的相邻车辆Vc的方式将显示范围向前方扩大的俯瞰影像100。
如上所述,根据本实施方式,在比较部45判断为车辆V1出库时相邻车辆增加了的情况下,在显示面板31上显示以显示所增加了的相邻车辆的方式改变了显示范围的俯瞰影像100。本实施方式由于在俯瞰影像100中显示所增加的相邻车辆,因此,能够容易地掌握在入库时和出库时增加了的相邻车辆。根据本实施方式,由于容易识别相比于入库时变化的点,所以驾驶员能够容易地确认出库时应该留意的点。
[第五实施方式]参照图13至图15,对本实施方式所涉及的显示控制***1进行说明。图13是说明泊车区域的图,表示入库时的状态。图14是说明泊车区域的图,表示出库时的状态。显示控制***1的基本构成与第一实施方式的显示控制***1相同。
传感器单元21除了检测存在于车辆V1附近的障碍物的有无之外,还能够检测位置。在本实施方式中,传感器单元21作为存在于车辆V1附近障碍物,检测与作为车辆V1入库的泊车区域的泊车区域P1相邻的泊车区域PA至泊车区域PE中存在的相邻车辆的位置。
前方中央传感器配置在车辆V1的前方中央,检测车辆V1的前方中央中的障碍物的位置。在本实施方式中,前方中央传感器检测泊车区域PB中存在的相邻车辆的位置。前方中央传感器将作为检测结果的表示相邻车辆的位置的障碍物位置信息输出给显示控制装置40的相邻信息获取部43。作为障碍物位置信息的例子有:前方中央传感器的检测范围中的相邻车辆的有无、到相邻车辆的距离、水平方向上的相邻车辆的存在范围等。
到相邻车辆的距离是指:从车辆V1到相邻车辆的最近部分为止的距离。到相邻车辆Va的距离La是从车辆V1的左前端部到相邻车辆Va的最靠近车辆V1的部分为止的距离。到相邻车辆Vb的距离Lb是从车辆V1的前端部到相邻车辆Vb的最靠近车辆V1的部分为止的距离。到相邻车辆Vc的距离Lc是从车辆V1的右前端部到相邻车辆Vc的最靠近车辆V1的部分为止的距离。到相邻车辆Vd的距离Ld是从车辆V1的左侧面到相邻车辆Vd的右侧面为止的距离。到相邻车辆Ve的距离Le是从车辆V1的右侧面到相邻车辆Ve的左侧面为止的距离。
通过这样的传感器单元21,能够检测车辆V1的全方位的相邻车辆的位置。在本实施方式中,根据传感器单元21的检测结果,能够检测车辆V1的左右侧方、左右前方、前方中的至少任一个相邻车辆的位置。更详细地说,根据传感器单元21的检测结果,能够检测泊车区域PA至泊车区域PE中存在的相邻车辆的位置。更详细地说,根据检测到检测结果中所包含的相邻车辆的传感器、由传感器检测出的到相邻车辆的距离、以及由传感器检测出的相邻车辆的水平方向的存在范围,确定在各泊车区域中的相邻车辆的位置。
相邻信息获取部43获取车辆V1后退入库时的第一障碍物位置信息、以及车辆V1从入库状态前进而出库时的第二障碍物位置信息。更详细地说,相邻信息获取部43在车辆V1后退入库时,从传感器单元21获取第一障碍物位置信息。相邻信息获取部43将入库时的第一障碍物位置信息存储在存储部49中。另外,相邻信息获取部43在车辆V1从入库状态前进而出库时,从传感器单元21A获取第二障碍物位置信息。相邻信息获取部43将出库时的第二障碍物位置信息输出给比较部45。
第一障碍物位置信息是车辆V1后退入库时的车辆V1周围的障碍物的位置信息。在本实施方式中,第一障碍物位置信息是车辆V1后退入库时存在于泊车区域PA至泊车区域PE中的相邻车辆的位置信息。
第二障碍物位置信息是车辆V1从入库状态前进而出库时的车辆V1周围的障碍物的位置信息。在本实施方式中,第二障碍物位置信息是车辆V1从入库状态前进而出库时存在于泊车区域PA至泊车区域PE中的相邻车辆的位置信息。
俯瞰影像生成部44在比较部45判断为车辆V1出库时相邻车辆的位置向靠近车辆V1的方向变化的情况下,生成俯瞰影像100。
比较部45比较第一障碍物位置信息和第二障碍物位置信息,比较车辆V1出库时车辆V1的障碍物位置是否变化。在本实施方式中,比较部45比较第一障碍物位置信息和第二障碍物位置信息,比较车辆V1出库时相邻车辆的位置是否向靠近车辆V1的方向变化。更详细地说,比较部45比较入库时的各相邻泊车区域中的相邻车辆的位置与出库时的各相邻泊车区域中的相邻车辆的位置,当存在距车辆V1的距离比入库时变短的相邻车辆时,判断为相邻车辆的位置向靠近车辆V1的方向变化。比较部45比较入库时的各相邻泊车区域中的相邻车辆的位置与出库时的各相邻泊车区域中的相邻车辆的位置,当仅存在距车辆V1距离比入库时变长、或者未变化的相邻车辆时,判断为相邻车辆的位置没有向靠近车辆V1的方向变化。在入库时和出库时即使相邻车辆更换但位置没有变化的情况下,比较部45判断为没有变化。这里所说的位置没有变化的情况,除了位于完全相同的位置之外,也可以包括例如小于5cm的变化。
显示控制部48在比较部45判断为车辆V1出库时相邻障碍物的位置发生了变化的情况下,在显示面板31上显示俯瞰影像生成部44所生成的俯瞰影像100。在本实施方式中,显示控制部48在比较部45判断为车辆V1出库时相邻车辆的位置向靠近车辆V1的方向变化了的情况下,在显示面板31上显示俯瞰影像100。更详细地说,显示控制部48在比较部45判断为车辆V1出库时存在距车辆V1的距离比车辆V1入库时变短的相邻车辆的情况下,在出库时使俯瞰影像100显示在显示面板31上。
接着,使用图15,对显示控制***1的显示控制装置40中的处理流程进行说明。图15是示出第五实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图。
在入库时,显示控制装置40进行与图5所示的流程同样的处理。在步骤S15中,显示控制装置40通过相邻信息获取部43获取第一障碍物位置信息,并存储到存储部49中。
参照图13,对表示入库时的车辆V1的周边状况的第一障碍物位置信息进行说明。入库时,在泊车区域PA存在相邻车辆Va,在泊车区域PB存在相邻车辆Vb,在泊车区域PC存在相邻车辆Vc,在泊车区域PD存在相邻车辆Vd,在泊车区域PE存在相邻车辆Ve。通过传感器单元21检测车辆V1入库时相邻车辆Va至相邻车辆Ve的位置信息,通过相邻信息获取部43获取为第一障碍物位置信息。第一障碍物位置信息在步骤S15中被存储到存储部49中。
接着,对出库时的处理流程进行说明。步骤SA21、步骤SA22、步骤SA26至步骤SA29的处理与图6所示的流程图中的步骤S21、步骤S22、步骤S25至步骤S28的处理相同。
显示控制装置40通过相邻信息获取部43获取第二障碍物位置信息,并由比较部45比较第一障碍物位置信息和第二障碍物位置信息(步骤SA23)。显示控制装置40通过比较部45进行比较,获取入库时和出库时的车辆V1的周边状况的变化。显示控制装置40进入步骤SA24。
参照图14,对表示出库时的车辆V1的周边状况的第二障碍物位置信息进行说明。在出库时,泊车区域PA的相邻车辆Va和泊车区域PE的相邻车辆Ve的位置发生了变化。出库时的相邻车辆Va距车辆V1的距离La1比入库时的相邻车辆Va距车辆V1的距离La短。出库时的相邻车辆Ve距车辆V1的距离Le1比入库时的相邻车辆Ve距车辆V1的距离Le短。用虚线表示入库时的相邻车辆Va和相邻车辆Ve的位置。由传感器单元21检测车辆V1出库时的相邻车辆Va至相邻车辆Ve的位置信息,并由相邻信息获取部43获取为第二障碍物位置信息。通过比较部45比较第一障碍物位置信息和第二障碍物位置信息可知相邻车辆Va和相邻车辆Ve的位置发生了变化。
显示控制装置40判断相邻车辆的位置是否发生了变化(步骤SA24)。显示控制装置40在比较部45的比较结果判断为相邻车辆的位置没有变化的情况下(在步骤SA24中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40在比较部45的比较结果判断为相邻车辆的位置发生了变化的情况下(步骤SA24中为“是”),进入步骤SA25。
显示控制装置40判断相邻车辆的位置是否向靠近车辆V1的方向变化了(步骤SA25)。显示控制装置40比较第一障碍物位置信息和第二障碍物位置信息,在判断为相邻车辆的位置没有向靠近车辆V1的方向变化了的情况下(在步骤SA25中为“否”),结束处理。显示控制装置40比较第一障碍物位置信息和第二障碍物位置信息,在判断为相邻车辆的位置向靠近车辆V1的方向变化了的情况下(在步骤SA25中为“是”),进入步骤SA26。
如上所述,在本实施方式中,在比较部45判断为车辆V1出库时相邻车辆的位置向靠近车辆V1的方向发生了变化的情况下,在显示面板31上显示俯瞰影像生成部44所生成的俯瞰影像100。这样,本实施方式能够在出库时根据周边状况的变化适当地显示俯瞰影像100。根据本实施方式,在出库时相邻车辆的位置相比于入库时向靠近车辆V1的方向发生了变化时,能够显示俯瞰影像100。由此,即便相邻车辆的位置向靠近车辆V1的方向变化而出库时的操作变得困难,驾驶员除了目视或通过视镜的确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
根据本实施方式,在出库时根据周边状况的变化,仅在需要显示俯瞰影像100时显示俯瞰影像100。如上所述,在本实施方式中,能够抑制在不需要显示俯瞰影像的情况下显示俯瞰影像、或者在想要确认基于导航的路径时等显示俯瞰影像的情况。
[第六实施方式]
显示控制***1的基本构成与第五实施方式的显示控制***1相同。显示控制***1与第五实施方式的不同点在于,在所生成的俯瞰影像100中强调显示位置发生了变化的相邻车辆。
合成处理部443在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,生成强调了位置发生了变化的相邻车辆的俯瞰影像100。例如,合成处理部443通过对位置发生了变化的相邻车辆进行着色或用粗线包围来强调显示。
显示控制部48在显示面板31上显示对由比较部45判断为位置发生了变化的相邻车辆进行强调显示的俯瞰影像100。
使用在第二实施方式的说明中所使用的图7,对俯瞰影像100进行说明。在本实施方式中,假设泊车区域PE的相邻车辆Ve的位置发生了变化。在俯瞰影像100中,位置发生了变化的相邻车辆Ve被着色而被强调显示。
如上所述,根据本实施方式,在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,在显示面板31上显示强调显示了位置发生了变化的相邻车辆的俯瞰影像100。本实施方式能够容易地掌握在入库时和出库时位置发生了变化的相邻车辆。根据本实施方式,在俯瞰影像100中,容易识别相比于入库时变化的点,因此驾驶员能够容易地确认出库时应该留意的点。
[第七实施方式]
显示控制***1的基本构成与第五实施方式的显示控制***1相同。显示控制***1与第五实施方式的不同点在于,在所生成的俯瞰影像100中显示通知图标120,该通知图标120通知位置发生了变化的相邻车辆存在的方向。
合成处理部443在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,生成显示有通知图标120的俯瞰影像100,该通知图标120表示位置发生了变化的相邻车辆所存在的方向。例如,合成处理部443显示箭头形状的通知图标120。
显示控制部48在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,在显示面板31上显示包含通知图标120的俯瞰影像100,该通知图标120表示被判断为位置发生了变化的相邻车辆的方向。
使用在第二实施方式的说明中所使用的图8,对俯瞰影像100进行说明。在本实施方式中,假设泊车区域PC的相邻车辆Vc的位置发生了变化。俯瞰影像100中显示有通知图标120,该通知图标120表示位置发生了变化的相邻车辆Vc存在的方向。
如上所述,根据本实施方式,在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,在显示面板31上显示俯瞰影像100,该俯瞰影像100显示有通知图标120,该通知图标120表示位置发生了变化的相邻车辆存在的方向。在本实施方式中,即便在俯瞰影像100中没有显示有位置发生了变化的相邻车辆的情况下,也能够容易地掌握在入库时和出库时位置发生了变化的相邻车辆所存在的方向。根据本实施方式,即使没有显示在俯瞰影像100上,也容易识别相比于入库时变化的点,因此驾驶员能够容易地确认出库时应该留意的点。
[第八实施方式]
参照图16,对本实施方式所涉及的显示控制***1进行说明。图16是示出第八实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1的基本构成与第五实施方式的显示控制***1相同。显示控制***1与第五实施方式的不同点在于,在所生成的俯瞰影像100中,显示以将位置发生了变化的相邻车辆包含在显示范围内的方式变更了显示范围的俯瞰影像100。
剪切处理部442从进行了视点转换处理后的周边影像数据中,以位置发生了变化的相邻车辆被包含在显示范围内的剪切范围进行剪切处理。只要在俯瞰影像100的显示范围中包含增加了的相邻车辆的一部分即可。
显示控制部48在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,在显示面板31上显示俯瞰影像100,该俯瞰影像100以包含被判断为位置发生了变化的相邻车辆的方式变更了显示范围。
使用图16,对俯瞰影像100进行说明。在本实施方式中,假设泊车区域PC的相邻车辆Vc的位置发生了变化。俯瞰影像100显示以显示位置发生了变化的相邻车辆Vc的方式将显示范围向前方扩大的俯瞰影像100。
如上所述,根据本实施方式,在比较部45判断为车辆V1出库时相邻车辆的位置发生了变化的情况下,在显示面板31上显示以显示位置发生了变化的相邻车辆的方式变更了显示范围的俯瞰影像100。在本实施方式中,因为在俯瞰影像100中显示位置发生了变化的相邻车辆,所以能够容易地掌握在入库时和出库时位置发生了变化的相邻车辆。根据本实施方式,由于容易识别相比于入库时变化的点,所以驾驶员能够容易地确认出库时应该留意的点。
[第九实施方式]
参照图17、图18,对本实施方式所涉及的显示控制***1进行说明。图17是示出用于说明第九实施方式所涉及的显示控制***的显示控制装置中的处理的泊车区域的图。图18是示出第九实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。显示控制***1的基本构成与第五实施方式的显示控制***1相同。显示控制***1与第五实施方式的不同点在于,在出库时相邻车辆的位置向车辆的出库方向变化了时显示俯瞰影像。
俯瞰影像生成部44在比较部45判断为车辆V1出库时相邻车辆的位置向车辆V1的出库方向变化了的情况下,生成俯瞰影像100。
向车辆V1的出库方向变化是指:相邻车辆的位置向各泊车区域的前方变化的情况。在图17所示的泊车区域中,相邻车辆Va及相邻车辆Ve的位置向前方发生了变化,换言之,位置向车辆V1的出库方向发生了变化。出库时的相邻车辆Va的前端部比入库时的相邻车辆Va的前端部向前方移动了距离Da。出库时的相邻车辆Ve的前端部比入库时的相邻车辆Ve的前端部向前方移动了距离De。用虚线表示入库时的相邻车辆Va及相邻车辆Ve的位置。
比较部45比较第一障碍物位置信息和第二障碍物位置信息,比较车辆V1出库时相邻车辆的位置是否向车辆V1的出库方向发生了变化。更详细地说,比较部45比较入库时的各相邻泊车区域中的相邻车辆的位置与出库时的各相邻泊车区域中的相邻车辆的位置,当存在位置向前方变化了的相邻车辆时,判断为相邻车辆的位置向车辆V1的出库方向发生了变化。比较部45比较入库时的各相邻泊车区域中的相邻车辆的位置与出库时的各相邻泊车区域中的相邻车辆的位置,当只有位置向后方变化、或没有变化的相邻车辆时,判断为相邻车辆的位置没有向车辆V1的出库方向发生变化。比较部45在入库时和出库时即使相邻车辆更换但位置也没有变化的情况下,判断为没有变化。
显示控制部48在比较部45判断为车辆V1出库时相邻车辆的位置向车辆V1的出库方向变化了的情况下,在显示面板31上显示俯瞰影像100。更详细地说,显示控制部48在比较部45判断为出库时的相邻车辆的位置相对于入库时的相邻车辆的位置向车辆V1的出库方向变化了的情况下,在出库时在显示面板31上显示俯瞰影像100。
接着,使用图18,对显示控制***1的显示控制装置40中的处理流程进行说明。步骤SA31至步骤SA34、步骤SA36至步骤SA39的处理与图15所示的流程图中的步骤SA21至步骤SA24、步骤SA26至步骤SA29的处理相同。
显示控制装置40判断相邻车辆的位置是否向出库方向变化(步骤SA35)。显示控制装置40比较第一障碍物位置信息和第二障碍物位置信息,在判断为相邻车辆的位置没有向车辆V1的出库方向变化了的情况下(在步骤SA35中为“否”),结束处理。显示控制装置40比较第一障碍物位置信息和第二障碍物位置信息,在判断为相邻车辆的位置向车辆V1的出库方向变化了的情况下(在步骤SA35中为“是”),进入步骤SA36。
如上所述,在本实施方式中,在比较部45判断为车辆V1出库时相邻车辆的位置向车辆V1的出库方向变化了的情况下,在显示面板31上显示俯瞰影像生成部44所生成的俯瞰影像100。这样,本实施方式能够在出库时根据周边状况的变化适当地显示俯瞰影像100。根据本实施方式,当在出库时与入库时相比相邻车辆的位置向车辆V1的出库方向变化了时,能够显示俯瞰影像100。由此,即便因相邻车辆的位置向车辆V1的出库方向变化而出库时的操作变得困难,驾驶员除了目视或通过视镜进行确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
[第十实施方式]
参照图21至图24,对本实施方式所涉及的显示控制***1B进行说明。图21是示出第十实施方式所涉及的显示控制***的构成例的框图。显示控制***1B的基本构成与第一实施方式的显示控制***1相同。显示控制***1B在出库时根据驾驶员的变化(周围确认条件)适当地显示俯瞰影像。
使用图21,对显示控制***1B进行说明。显示控制***1B包括前方照相机(拍摄部)11、后方照相机(拍摄部)12、左侧方照相机(拍摄部)13、右侧方照相机(拍摄部)14,驾驶座用照相机(驾驶座用检测部)21B、显示面板(显示部)31和显示控制装置40B。
驾驶座用照相机21B面向车辆V1的驾驶座的就座位置配置。驾驶座用照相机21B以能够识别人的方式拍摄坐在驾驶座上的驾驶员。换言之,由驾驶座用照相机21B拍摄的影像包含能够对驾驶员进行人物识别的信息。驾驶座用照相机21B将拍摄到的影像输出给显示控制装置40B的驾驶员信息获取部(信息获取部)43B。
显示控制装置40B包括影像数据获取部41、自身车辆信息获取部42、驾驶员信息获取部43B、俯瞰影像生成部44B、比较部45B、显示控制部48B、作为内部存储器的存储部49。
驾驶员信息获取部43B通过驾驶座用照相机21B获取识别了车辆V1后退入库时的车辆V1的驾驶员的第一驾驶员信息(第一信息)、以及识别了车辆V1从入库状态前进出库时的车辆V1的驾驶员的第二驾驶员信息(第二信息)。更详细地说,驾驶员信息获取部43B在车辆V1后退入库时,获取由驾驶座用照相机21B拍摄的影像数据作为第一驾驶员信息。驾驶员信息获取部43B将入库时的第一驾驶员信息存储到存储部49中。另外,驾驶员信息获取部43B在车辆V1从入库状态前进出库时,获取由驾驶座用照相机21B拍摄的影像数据作为第二驾驶员信息。车辆V1后退入库的判断、以及车辆V1前进出库的判断,根据从自身车辆信息获取部42获取的车辆V1的齿***作信息、或发动机的开/关信息等进行判断。驾驶员信息获取部43B将出库时的第二驾驶员信息存储到存储部49中。
第一驾驶员信息是拍摄了车辆V1后退入库时的车辆V1的驾驶员的面部的影像数据。
第二驾驶员信息是拍摄了车辆V1从入库状态前进出库时的车辆V1的驾驶员的面部的影像数据。
在判断为车辆V1出库时的第二驾驶员信息与第一驾驶员信息不同的情况下,俯瞰影像生成部44B生成俯瞰影像100。在本实施方式中,在比较部45B判断为车辆V1出库时的驾驶员与入库时的驾驶员不同的情况下,俯瞰影像生成部44B生成俯瞰影像100。
使用图22,对俯瞰影像100进行说明。图22是示出第十实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。俯瞰影像100显示从车辆V1起2m左右的范围。俯瞰影像100包括:前方影像101、后方影像102、左侧方影像103、右侧方影像104,以及位于由前方影像101、后方影像102、左侧方影像103和右侧方影像104包围的中央部的车辆图标110。车辆图标110表示车辆V1的位置和方向。车辆图标110以使其前后方向与俯瞰影像100的前后方向平行的方式配置在中央部。
返回图21,比较部45B比较第一驾驶员信息和第二驾驶员信息,比较车辆V1入库时和出库时的驾驶员。在本实施方式中,比较部45对拍摄了入库时的驾驶员的影像和拍摄了出库时的驾驶员的影像进行图像处理并进行比较,判断入库时的驾驶员和出库时的驾驶员是否相同。
显示控制部48B将入库时俯瞰影像生成部44B所生成的俯瞰影像100显示在显示面板31上。显示控制部48B在比较部45B判断为车辆V1出库时的第二驾驶员信息与第一驾驶员信息不同的情况下,在显示面板31上显示俯瞰影像生成单元44B所生成的俯瞰影像100。在本实施方式中,在比较部45B判断为入库时的驾驶员和出库时的驾驶员不同的情况下,显示控制部48B将俯瞰影像100显示在显示面板31上。
接下来,使用图23和图24,对显示控制***1B的显示控制装置40B中的处理流程进行说明。图23是示出第十实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。图24是示出第十实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图。
首先,对入库时的处理流程进行说明。步骤SB12至步骤SB15的处理与图5所示的流程图中的步骤S11至步骤S14的处理相同。
显示控制装置40B通过驾驶员信息获取部43B获取第一驾驶员信息,并存储到存储部49中(步骤SB11)。然后,显示控制装置40B进入步骤SB12。
接下来,对出库时的处理流程进行说明。步骤SB22、步骤SB23、步骤SB26至步骤SB29的处理与图6所示的流程图中的步骤S21、步骤S22、步骤S25至步骤S28的处理相同。
显示控制装置40B通过驾驶员信息获取部43B获取第二驾驶员信息,并存储到存储部49中(步骤SB21)。然后,显示控制装置40B进入步骤SB22。
显示控制装置40B通过比较部45B比较第一驾驶员信息和第二驾驶员信息(步骤SB24)。显示控制装置40B通过比较部45B进行比较,判断入库时和出库时的车辆V1的驾驶员是否相同。显示控制装置40B进入步骤SB25。
显示控制装置40B判断驾驶员是否不同(步骤SB25)。显示控制装置40B根据比较部45B的比较结果判断为驾驶员相同的情况下(在步骤SB25中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40B根据比较部45B的比较结果判断为驾驶员不同的情况下(在步骤SB25中为“是”),进入步骤SB26。
如上所述,在本实施方式中,在比较部45B判断为入库时的驾驶员与出库时的驾驶员不同的情况下,在显示面板31上显示由俯瞰影像生成单元44B生成的俯瞰影像100。这样,本实施方式能够在出库时根据驾驶员的变化适当地显示俯瞰影像100。由此,在入库时的驾驶员和出库时的驾驶员不同的情况下,驾驶员除了目视或通过视镜确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
根据本实施方式,在出库时根据驾驶员的变化,仅在需要显示俯瞰影像100时显示俯瞰影像100。这样,本实施方式能够抑制在如与入库时相同的驾驶员进行出库时这样的、不需要显示俯瞰影像的状况显示俯瞰影像、或者想要确认基于导航的路径时等显示俯瞰影像的情况。
[第十一实施方式]
参照图25,对本实施方式所涉及的显示控制***1B进行说明。图25是示出第十一实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。显示控制***1B的基本构成与第十实施方式的显示控制***1B相同。显示控制***1B与第十实施方式的不同点在于,在出库时的驾驶员的面部位置位于比入库时的驾驶员的面部位置低预定以上的下方位置时,显示俯瞰影像100。
驾驶座用照相机21B可识别地拍摄相对于车辆V1的驾驶员的面部位置。例如,驾驶座用照相机21B将在车辆V1中位置固定的部分和驾驶员的面部作为被拍摄物进行拍摄。或者,驾驶座用照相机21B可识别地拍摄驾驶员的面部位置的变化。例如,驾驶座用照相机21B在入库时和出库时以相同拍摄范围进行拍摄。通过对由这样的驾驶座用照相机21B拍摄的影像进行图像处理,获取驾驶员的面部位置。这里所说的驾驶员的面部位置也可以替换为驾驶员的眼睛的位置。
驾驶员信息获取部43B获取驾驶员的面部位置的信息。驾驶员信息获取部43B将入库时的驾驶员的面部位置的信息作为第一驾驶员信息获取,将出库时的驾驶员的面部位置的信息作为第二驾驶员信息获取。
俯瞰影像生成部44B在比较部45B判断为出库时的驾驶员的面部位置位于比入库时的驾驶员的面部位置低预定以上的下方位置的情况下,生成俯瞰影像100。
比较部45B进行图像处理并对入库时的驾驶员的面部位置和出库时的驾驶员的面部位置进行比较,判断入库时的驾驶员的面部位置与出库时的驾驶员的面部位置在上下方向上是否存在预定以上的位置差。例如,预定以上的位置差为5cm。
显示控制部48B在比较部45B判断为出库时的驾驶员的面部位置位于比入库时的驾驶员的面部位置低预定以上的下方位置的情况下,在显示面板31上显示俯瞰影像100。
接下来,使用图25,对显示控制***1B的显示控制装置40B中的处理流程进行说明。步骤SB31至步骤SB34、步骤SB36至步骤SB39的处理与图24所示的流程图中的步骤SB21至步骤SB24、步骤SB26至步骤SB29的处理相同。
显示控制装置40B判断出库时的驾驶员的面部位置是否比入库时的驾驶员的面部位置低(步骤SB35)。显示控制装置40B比较第一驾驶员信息和第二驾驶员信息,在判断为出库时的驾驶员的面部位置没有比入库时的驾驶员的面部位置低预定以上的下方位置的情况下(在步骤SB35中为“否”),结束处理。显示控制装置40B比较第一驾驶员信息和第二驾驶员信息,在判断为出库时的驾驶员的面部位置位于比入库时的驾驶员的面部位置低预定以上的下方位置的情况下(在步骤SB35中为“是”),进入步骤SB36。
如上所述,在本实施方式中,在比较部45B判断为出库时的驾驶员的面部位置比入库时的驾驶员的面部位置低的情况下,在显示面板31上显示由俯瞰影像生成单元44B生成的俯瞰影像100。这样,本实施方式能够在出库时根据驾驶员的面部位置的变化适当地显示俯瞰影像100。由此,即便在出库时的驾驶员的面部位置比入库时低、从驾驶座能够视认的范围发生了变化时,驾驶员除了目视或通过视镜确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
[第十二实施方式]
参照图26至图28,对本实施方式所涉及的显示控制***1C进行说明。图26是示出第十二实施方式所涉及的显示控制***的构成例的框图。显示控制***1C的基本构成与第一实施方式的显示控制***1相同。在显示控制***1C中,例如,在出库时的车辆周围的视认性(周围确认条件)比入库时的车辆V1周围的视认性低的情况下等,适当地显示俯瞰影像100。
使用图26,对显示控制***1C进行说明。显示控制***1C包括前方照相机(拍摄部)11、后方照相机(拍摄部)12、左侧方照相机(拍摄部)13、右侧方照相机(拍摄部)14、照度传感器21C、显示面板(显示部)31、和显示控制装置40C。
照度传感器21C配置在车辆V1的前方或左右侧方等,测量车辆V1前方的路面的照度。照度传感器21C将测量结果输出给显示控制装置40C的视认性信息获取部(信息获取部)43C。
显示控制装置40C包括影像数据获取部41、自身车辆信息获取部42、视认性信息获取部43C、俯瞰影像生成部44C、比较部45C、显示控制部48C、作为内部存储器的存储部49。显示控制装置40C也可以由一个或多个装置构成。
自身车辆信息获取部42将获取的车辆信息输出给视认性信息获取部43C以及显示控制部48C。
视认性信息获取部43C通过照度传感器21C获取第一视认性信息(第一信息)以及第二视认性信息(第二信息),第一视认性信息是表示车辆V1后退入库时的车辆V1周围的视认性的信息,第二视认性信息是表示车辆V1从入库状态前进出库时的车辆V1周围的视认性的信息。更详细地说,视认性信息获取部43C在车辆V1后退入库时,获取由照度传感器21C测量的照度信息作为第一视认性信息。视认性信息获取部43C将入库时的第一视认性信息存储到存储部49中。另外,视认性信息获取部43C在车辆V1从入库状态前进出库时,获取由照度传感器21C测量的照度信息作为第二视认性信息。车辆V1后退入库的判断、以及车辆V1前进出库的判断,根据从自身车辆信息获取部42获取的车辆V1的齿***作信息、或发动机的开/关信息等进行判断。视认性信息获取部43C将出库时的第二视认性信息输出给比较部45C。
第一视认性信息是车辆V1后退入库时的车辆V1的前方或左右侧方的路面的照度信息。
第二视认性信息是车辆V1从入库状态前进出库时的车辆V1的前方或左右侧方的路面的照度信息。在第二视认性信息是由配置在车辆V1前方的照度传感器21C得到的信息的情况下,使用车辆V1的前照灯等未点亮时的照度信息。在第二视认性信息是由配置在车辆V1的左右侧方的照度传感器21C得到的信息的情况下,与车辆V1的前照灯等的状态无关地使用出库前的照度信息。
俯瞰影像生成部44C在判断为车辆V1出库时的第二视认性信息与第一视认性信息相比视认性降低了的情况下,生成俯瞰影像100。在本实施方式中,俯瞰影像生成部44C在比较部45C判断为出库时的照度比入库时的照度低的情况下,生成俯瞰影像100。更详细地说,在本实施方式中,俯瞰影像生成部44C在比较部45C判断为入库时是白天的照度、出库时是夜间的照度的情况下,生成俯瞰影像100。
比较部45C比较第一视认性信息和第二视认性信息,比较车辆V1入库时和出库时的车辆V1周围的视认性。在本实施方式中,比较部45C比较入库时的车辆V1周围的照度和出库时的车辆V1周围的照度,判断出库时的照度是否低于入库时的照度。更详细地说,比较部45C比较入库时的车辆V1周围的照度和出库时的车辆V1周围的照度,判断是否在入库时为白天的照度、在出库时为夜间的照度。
在本实施方式中,白天的照度设为2000勒克司以上,夜间的照度设为500勒克司以下。
显示控制部48C在比较部45C判断为车辆V1出库时的第二视认性信息的视认性比第一视认性信息的视认性低的情况下,将俯瞰影像生成部44C所生成的俯瞰影像100显示在显示面板31上。在本实施方式中,在比较部45C判断为出库时的照度比入库时的照度低的情况下,显示控制部48C将俯瞰影像100显示在显示面板31上。更详细地说,在比较部45C判断为入库时是白天的照度、出库时是夜间的照度的情况下,显示控制部48C将俯瞰影像100显示在显示面板31上。
接下来,使用图27、图28,对显示控制***1C的显示控制装置40C中的处理流程进行说明。图27是示出第十二实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。图28是示出第十二实施方式所涉及的显示控制***的显示控制装置中的处理流程的另一例的流程图。
首先,对入库时的处理流程进行说明。步骤SC11至步骤SC14的处理与图5所示的流程图中的步骤S11至步骤S14的处理相同。
显示控制装置40C通过视认性信息获取部43C获取第一视认性信息,并存储到存储部49中(步骤SC15)。然后,显示控制装置40C结束处理。
接下来,对出库时的处理流程进行说明。步骤SC21、步骤SC22、步骤SC25至步骤SC28的处理与图6所示的流程图中的步骤S21、步骤S22、步骤S25至步骤S28的处理相同。
显示控制装置40C,通过视认性信息获取部43C获取第二视认性信息并进行比较(步骤SC23)。更详细地说,显示控制装置40C通过视认性信息获取部43C获取第二视认性信息。显示控制装置40C通过比较部45C比较第一视认性信息和第二视认性信息。显示控制装置40C通过比较部45C进行比较,判断入库时和出库时的车辆V1周围的视认性有无变化。显示控制装置40C进入步骤SC24。
显示控制装置40C根据比较部45C的比较结果,判断是否是入库时为白天的照度、出库时为夜间的照度(步骤SC24)。在本实施方式中,显示控制装置40C在判断为入库时不是白天的照度、或者出库时不是夜间的照度的情况下(在步骤SC24中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40C在判断为入库时为白天的照度、出库时为夜间的照度的情况下(在步骤SC24中为“是”),进入步骤SC25。
如上所述,在本实施方式中,在比较部45C判断为入库时为白天的照度、出库时为夜间的照度的情况下,将俯瞰影像生成部44C所生成的俯瞰影像100显示在显示面板31上。这样,本实施方式能够在出库时根据车辆V1周围的照度变化适当地显示俯瞰影像100。由此,即便入库时为白天的照度、出库时为夜间的照度、周围的视认性降低的情况下,驾驶员除了目视或通过视镜确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
根据本实施方式,在出库时,根据车辆V1周围的照度变化,仅在需要显示俯瞰影像100时显示俯瞰影像100。如上所述,在本实施方式中,能够抑制在不需要显示俯瞰影像时显示俯瞰影像、或者想要确认基于导航的路径时等显示俯瞰影像的情况。
[第十三实施方式]
参照图29,对本实施方式所涉及的显示控制***1C进行说明。图29是示出第十三实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。显示控制***1C的基本构成与第十二实施方式的显示控制***1C相同。显示控制***1C与第十二实施方式的不同点在于,当入库时的照度和出库时的照度具有预定以上的照度差时,显示俯瞰影像100。
在比较部45C判断为入库时的照度和出库时的照度具有预定以上的照度差的情况下,俯瞰影像生成部44C生成俯瞰影像100。
比较部45C比较入库时的车辆V1周围的照度和出库时的车辆V1周围的照度,判断入库时的照度和出库时的照度是否具有预定以上的照度差。例如,预定以上的照度差设为5000勒克司。
显示控制部48C在比较部45C判断为入库时的照度和出库时的照度具有预定以上的照度差的情况下,在显示面板31上显示俯瞰影像100。
接下来,使用图29,对显示控制***1C的显示控制装置40C中的处理流程进行说明。步骤SC31至步骤SC33、步骤SC35至步骤SC38的处理与图28所示的流程图中的步骤SC21至步骤SC23、步骤SC25至步骤SC28的处理相同。
显示控制装置40C根据比较部45C的比较结果,判断入库时的照度和出库时的照度是否为预定以上的照度差(步骤SC34)。在本实施方式中,显示控制装置40C在判断为入库时的照度和出库时的照度不是预定以上的照度差的情况下(在步骤SC34中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40C在判断为入库时的照度和出库时的照度为预定以上的照度差的情况下(在步骤SC34中为“是”),进入步骤SC35。这里所说的预定以上的照度差是指从照度高的状态到照度低的状态的差。
如上所述,本实施方式在比较部45C判断为入库时的照度和出库时的照度为预定以上的照度差的情况下,将俯瞰影像生成部44C所生成俯瞰影像100显示在显示面板31上。这样,本实施方式在入库时的照度和出库时的照度为预定以上的照度差时,能够适当地显示俯瞰影像100。由此,即便入库时的照度与出库时的照度存在预定以上的照度差、而周围的视认性降低的情况下,驾驶员除了目视或通过视镜确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
[第十四实施方式]
参照图30,对本实施方式所涉及的显示控制***1C进行说明。图30是示出第十四实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。显示控制***1C与第十二实施方式的不同点在于,当出库时因降雨而视认性比入库时降低时,显示俯瞰影像100。
视认性信息获取部43C获取第一视认性信息以及第二视认性信息,该第一视认性信息是表示入库时的当前位置的天气的信息,该第二视认性信息是表示出库时的当前位置的天气的信息。例如,视认性信息获取部43C可以基于配置于车辆V1上的降雨传感器的检测信息、雨刷的动作信息、经由通信网络获取的天气信息中的至少一个,获取当前位置的天气。或者,例如,视认性信息获取部43C也可以对由影像数据获取部41获取的周边影像数据进行图像处理,获取当前位置的天气。
俯瞰影像生成部44C在比较部45C判断为出库时因天气的变化而视认性比入库时低的情况下,生成俯瞰影像100。在本实施方式中,俯瞰影像生成部44C在比较部45C判断为出库时因降雨而视认性比入库时低的情况下,生成俯瞰影像100。
比较部45C比较入库时的当前位置的天气和出库时的当前位置的天气,判断出库时是否因天气的变化而视认性比入库时低。在本实施方式中,比较部45C比较入库时的当前位置的天气和出库时的当前位置的天气,判断是否出库时因降雨而视认性比入库时低。
显示控制部48C在比较部45C判断为出库时因天气的变化而视认性比入库时低的情况下,在显示面板31上显示俯瞰影像100。在本实施方式中,显示控制部48C在比较部45C判断为出库时因降雨而视认性比入库时低的情况下,在显示面板31上显示俯瞰影像100。
接着,使用图30,对显示控制***1C的显示控制装置40C中的处理流程进行说明。步骤SC41至步骤SC43、步骤SC45至步骤SC48的处理与图28所示的流程图中的步骤SC21至步骤SC23、步骤SC25至步骤SC28的处理相同。
显示控制装置40C根据比较部45C的比较结果,判断出库时是否因降雨而视认性比入库时低(步骤SC44)。显示控制装置40C在判断为出库时没有因降雨而视认性比入库时低的情况下(在步骤SC44中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40C在判断为出库时因降雨而视认性比入库时低的情况下(在步骤SC44中为“是”),进入步骤SC45。
如上所述,在本实施方式中,在比较部45C判断为出库时因降雨而视认性比入库时低的情况下,将俯瞰影像生成部44C所生成的俯瞰影像100显示在显示面板31上。这样,本实施方式在出库时因降雨而视认性比入库时低时,能够适当地显示俯瞰影像100。由此,即便周围的视认性因降雨而降低,驾驶员除了目视或通过视镜确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
[第十五实施方式]
参照图31,对本实施方式所涉及的显示控制***1C进行说明。图31是示出第十五实施方式所涉及的显示控制***的显示控制装置中的处理流程的一例的流程图。显示控制***1C与第十二实施方式的不同点在于,在出库时因车窗玻璃的冻结而视认性比入库时低时,显示俯瞰影像100。
车窗玻璃包括车辆V1的前后及左右的至少任一方的窗户玻璃。车窗玻璃包括挡风玻璃。车窗玻璃表示透过车辆V1的外部而能够视认的部分。
视认性信息获取部43C获取第一视认性信息以及第二视认性信息,该第一视认性信息是表示入库时的车辆V1的车窗玻璃的冻结状态的信息,该第二视认性信息是表示出库时的车辆V1的车窗玻璃的冻结状态的信息。例如,视认性信息获取部43C可以基于配置在车辆V1上的除霜器及除雾器的动作信息、用温度计测量的外部大气的温度信息、经由通信网获取的天气信息中的至少任一个,获取表示车窗玻璃的冻结状态的信息。或者,例如,视认性信息获取部43C也可以对由影像数据获取部41获取的周边影像数据进行图像处理,获取表示车窗玻璃的冻结状态的信息。
俯瞰影像生成部44C在比较部45C判断为出库时因车窗玻璃的冻结而视认性比入库时低的情况下,生成俯瞰影像100。
比较部45C判断在出库时是否因车窗玻璃的冻结而视认性比入库时低。
显示控制部48C在比较部45C判断为在出库时由于车窗玻璃冻结而视认性比入库时低的情况下,在显示面板31上显示俯瞰影像100。
接下来,使用图31,对显示控制***1C的显示控制装置40C中的处理流程进行说明。步骤SC51至步骤SC53、步骤SC55至步骤SC58的处理与图28所示的流程图中的步骤SC21至步骤SC23、步骤SC25至步骤SC28的处理相同。
显示控制装置40C根据比较部45C比较结果,判断出库时是否因车窗玻璃的冻结而视认性比入库时低(步骤SC54)。显示控制装置40C在判断为出库时没有因车窗玻璃的冻结而视认性低于入库时的情况下(在步骤SC54中为“否”),结束处理。在这种情况下,不显示俯瞰影像100。显示控制装置40C在判断为在出库时因车窗玻璃的冻结而视认性低于入库时的情况下(在步骤SC54中为“是”),进入步骤SC55。
如上所述,在本实施方式中,在比较部45C判断为在出库时因车窗玻璃的冻结而视认性比入库时低的情况下,将俯瞰影像生成部44C所生成的俯瞰影像100显示在显示面板31上。这样,本实施方式在出库时因车窗玻璃的冻结而视认性比入库时低时,能够适当地显示俯瞰影像100。由此,即便周围的视认性因车窗玻璃的冻结而降低,驾驶员除了目视或通过视镜确认之外,还能够通过俯瞰影像100适当地确认车辆V1的周边。
尤其是,即使除霜器和除雾器工作,根据工作时间和温度等条件,有时也难以提高后座侧的玻璃的视认性。根据本实施方式,在这样的情况下,由于显示俯瞰影像100,所以能够适当地确认车辆V1的周边。
[第十六实施方式]
参照图32、图33,对本实施方式所涉及的显示控制***1C2进行说明。图32是示出第十六实施方式所涉及的显示控制***的构成例的框图。图33是示出第十六实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1C2与第十二实施方式的不同点在于,在所生成的俯瞰影像100中,强调显示作为检测出的障碍物的相邻车辆。
显示控制***1C2还包括传感器单元50C2。
传感器单元50C2包括设置在车辆V1周围的多个传感器。传感器单元50C2能够检测与车辆V1相邻的全方位的障碍物。在本实施方式中,传感器单元50C2检测存在于相邻的泊车区域中的相邻车辆以作为与车辆V1相邻的障碍物。传感器单元50C2与第一实施方式的传感器单元21同样地构成。
显示控制装置40C2还具有相邻信息获取部46C2。
相邻信息获取部46C2在车辆V1从入库状态前进出库时,从传感器单元50C2获取障碍物信息。相邻信息获取部46C2将出库时的障碍物信息存储到存储部49C2中,并输出给比较部45C2。
俯瞰影像生成部44C2的合成处理部443C2在比较部45C2判断为车辆V1出库时的照度比入库时低的情况下,生成强调了所检测出的相邻车辆的俯瞰影像100。例如,合成处理部443C2通过对检测出的相邻车辆进行着色或用粗线包围来强调显示。或者,显示控制部48C2接收比较部45C2的判断结果,使合成处理部443C2生成强调了所检测出的相邻车辆的俯瞰影像100。
显示控制部48C2在显示面板31上显示强调显示了所检测出的相邻车辆的俯瞰影像100。
使用图33,对俯瞰影像100进行说明。检测出的相邻车辆Ve被着色而被强调显示在俯瞰影像100中。
如上所述,根据本实施方式,在比较部45C2判断为在车辆V1出库时的照度比入库时低的情况下,将强调显示了所检测出的相邻车辆的俯瞰影像100显示在显示面板31上。本实施方式在入库时和出库时照度降低时,能够容易地掌握所检测出的相邻车辆。根据本实施方式,在俯瞰影像100中,容易识别相邻车辆,因此即使照度降低,驾驶员也能够容易地确认出库时应留意的点。
[第十七实施方式]
参照图34,对本实施方式所涉及的显示控制***1C2进行说明。图34是示出第十七实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1C2的基本构成与第十六实施方式所涉及的显示控制***1C2相同。显示控制***1C2与第十六实施方式的不同点在于,在所生成的俯瞰影像100中显示通知图标120,该通知图标120通知所检测出的相邻车辆存在的方向。
合成处理部443C2在比较部45C2判断为车辆V1出库时的照度比入库时低的情况下,生成显示有通知图标120的俯瞰影像100,该通知图标120表示所检测出的相邻车辆存在的方向。例如,合成处理部443C2显示箭头形状的通知图标120。
显示控制部48C2在比较部45C2判断为车辆V1出库时的照度比入库时低的情况下,在显示面板31上显示包含通知图标120的俯瞰影像100,该通知图标120表示所检测出的相邻车辆的方向。
使用图34,对俯瞰影像100进行说明。在本实施方式中,假设检测出了显示范围外的右前方的相邻车辆。俯瞰影像100中显示有通知图标120,该通知图标120表示所检测出的相邻车辆存在的方向。
如上所述,根据本实施方式,在比较部45C2判断为车辆V1出库时的照度比入库时低的情况下,在显示面板31上显示俯瞰影像100,该俯瞰影像100中显示有表示所检测出的相邻车辆存在的方向的通知图标120。本实施方式即便在俯瞰影像100中没有显示所检测出的相邻车辆的情况下,也能够容易地掌握相邻车辆存在的方向。根据本实施方式,即便检测出的相邻车辆没有显示在俯瞰影像100上,也容易识别检测出的相邻车辆,因此驾驶员能够容易地确认出库时应该留意的点。
[第十八实施方式]
参照图35,对本实施方式所涉及的显示控制***1C2进行说明。图35是示出第十八实施方式所涉及的显示控制***的显示控制装置所生成的俯瞰影像的一例的图。显示控制***1C2的基本构成与第十六实施方式的显示控制***1C2相同。显示控制***1C2与第十二实施方式的不同点在于,在所生成的俯瞰影像100中,显示以使所检测到的相邻车辆被包含在显示范围中的方式变更了显示范围的俯瞰影像100。
剪切处理部442从进行了视点转换处理后的周边影像数据中,以所检测出的相邻车辆被包含在显示范围内的剪切范围进行剪切处理。只要在俯瞰影像100的显示范围中包含所检测出的相邻车辆的一部分即可。
显示控制部48C2在比较部45C2判断为车辆V1出库时的照度比入库时低的情况下,在显示面板31上显示以包含所检测出的相邻车辆的方式变更了显示范围的俯瞰影像100。
使用图35,对俯瞰影像100进行说明。在本实施方式中,假设检测到了右前方的相邻车辆Vc。俯瞰影像100中显示有以显示所检测出的相邻车辆Vc的方式将显示范围向前方扩大的俯瞰影像100。
如上所述,根据本实施方式,在比较部45C2判断为车辆V1出库时的照度比入库时低的情况下,在显示面板31上显示以显示所检测出的相邻车辆的方式变更了显示范围的俯瞰影像100。根据本实施方式,在判断为车辆V1出库时的照度比入库时低的情况下,容易识别相比于入库时变化的点,因此,驾驶员在出库时能够容易地确认应该留意的点。
图示的显示控制***的各构成要素是功能概念性的要素,不一定在物理上如图示那样构成。即,各装置的具体方式不限于图示的方式,也可以根据各装置的处理负担或使用状况等,将其全部或部分可以以任何单位在功能上或物理上分散或集成。
显示控制***的构成例如通过作为软件加载到存储器中的程序等来实现。在上述实施方式中,作为通过这些硬件或软件的协作而实现的功能模块进行了说明。即,对于这些功能模块,可以仅通过硬件、仅通过软件、或者通过它们的组合以各种形式实现。
在上述记载的构成要素中,包括本领域技术人员容易想到的要素、实质上相同的要素。并且,上述记载的构成可以适当组合。另外,在不脱离本发明主旨的范围内,可以进行构成的各种省略、替换或变更。
使用图10,对泊车区域P1是自家的停车场的情况进行说明。图10是说明自家停车场的泊车区域的图。泊车区域P1是停一辆车辆V1的空间。传感器单元21检测存在于泊车区域P1内的例如自行车B等障碍物作为与车辆V1相邻的障碍物。相邻信息获取部43获取车辆V1后退入库时的泊车区域P1内的障碍物的信息作为第一障碍物信息,获取车辆V1从入库状态前进出库时的泊车区域P1内的障碍物的信息作为第二障碍物信息。在比较部45判断为车辆V1出库时泊车区域P1内的障碍物增加的情况下,显示控制部48将俯瞰影像100显示在显示面板31上。这样,本实施方式不限于相邻的泊车区域内的相邻车辆,可以在车辆周围的障碍物增加的情况下,显示俯瞰影像。
使用图19,对泊车区域P1是自家的停车场的情况进行说明。图19是说明自家停车场的泊车区域的图。传感器单元21检测存在于泊车区域P1内的例如自行车B等障碍物的位置作为与车辆V1相邻的障碍物的位置。相邻信息获取部43获取车辆V1后退入库时的泊车区域P1内的障碍物的位置信息作为第一障碍物位置信息,获取车辆V1从入库状态前进出库时的泊车区域P1内的障碍物的位置信息作为第二障碍物位置信息。在比较部45判断为车辆V1出库时的泊车区域P1内的障碍物的位置发生了变化的情况下,显示控制部48将俯瞰影像100显示在显示面板31上。这样,本实施方式不限于相邻的泊车区域内的相邻车辆,可以在车辆周围的障碍物的位置变化的情况下,显示俯瞰影像。
使用图11、图12,对泊车区域P1是平行泊车的区域的情况进行说明。图11是说明平行泊车的泊车区域的图,表示入库时的状态。图12是说明平行泊车的泊车区域的图,表示出库时的状态。泊车区域PF与泊车区域P1的后侧相邻。泊车区域PG与泊车区域P1的前侧相邻。在入库时,在泊车区域PF中存在相邻车辆Vf,在泊车区域PG中不存在相邻车辆。在出库时,在泊车区域PF中存在相邻车辆Vf,在泊车区域PG中存在相邻车辆Vg。传感器单元21检测泊车区域PF和泊车区域PG中存在的相邻车辆作为与车辆V1相邻的障碍物。在基于未图示导航***的地图信息判断出泊车区域P1是平行泊车的区域的情况下,优选的是,从传感器单元21的障碍物的检测范围中除去车辆V1的侧方。通过从障碍物的检测范围中除去车辆V1的侧方,可以避免误检测在与平行泊车区域相邻的车道上行驶的车辆。在本实施方式中,显示控制部48在比较部45判断为车辆V1出库时在泊车区域PF或泊车区域PG中增加了相邻车辆的情况下,在显示面板31上显示俯瞰影像100。这样,本实施方式能够与泊车区域P1的形态匹配地检测出适当的方向上的相邻车辆,并在相邻车辆增加了的情况下,显示俯瞰影像。
使用图20,对泊车区域P1是平行泊车的区域的情况进行说明。图20是说明平行泊车的泊车区域的图。相邻车辆Vf的位置在出库时比入库时向远离车辆V1的方向变化。相邻车辆Vg的位置在出库时比入库时向靠近车辆V1的方向变化。在本实施方式中,显示控制部48在比较部45判断为车辆V1出库时泊车区域PF或泊车区域PG中的相邻车辆的位置发生了变化的情况下,在显示面板31上显示俯瞰影像100。这样,本实施方式能够与泊车区域P1的形态匹配地检测出适当的方向上的相邻车辆,并在相邻车辆的位置发生了变化的情况下,显示俯瞰影像。
虽然说明了相邻信息获取部43从传感器单元21获取第一障碍物信息和第二障碍物信息、或者获取第一障碍物位置信息和第二障碍物位置信息的情况,但并不限于此。相邻信息获取部43可以对由影像数据获取部41获取的影像数据进行图像处理,从被拍摄物中识别车辆V1周围的障碍物,获取为第一障碍物信息和第二障碍物信息、或者第一障碍物位置信息和第二障碍物位置信息。
虽然说明了在车辆V1后退入库时获取第一障碍物信息或第一障碍物位置信息的情况,但不限于此。第一障碍物信息或第一障碍物位置信息也可以基于车辆V1后退入库的泊车动作中获取的信息,获取入库完成时的车辆V1周围的障碍物的信息。
虽然说明了驾驶员信息获取部43B从驾驶座用照相机21B所拍摄到影像数据中获取第一驾驶员信息及第二驾驶员信息的情况,但不限于此。
例如,在第十实施方式中,也可以根据从驾驶员所持有的、具有识别各自的识别信息的智能钥匙或信息终端等电子设备获取的识别信息,判断驾驶员是否不同。更详细地说,例如,将驾驶员带入车内的电子设备作为驾驶座用检测部。驾驶员信息获取部43B也可以从电子设备获取识别信息,将入库时的识别信息作为第一驾驶员信息,将出库时的识别信息作为第二驾驶员信息。
或者,例如在第十实施方式中,也可以根据驾驶座信息来判断驾驶员是否不同,该驾驶座信息包含驾驶座的重量信息和表示预设位置的位置信息中的至少任一个。更详细地说,例如,将检测驾驶座信息的重量传感器作为驾驶座用检测部,该驾驶座信息包含就座于驾驶座时所作用的重量信息。驾驶员信息获取部43B也可以将由重量传感器检测出的入库时的驾驶座信息获取为第一驾驶员信息,将出库时的驾驶座信息获取为第二驾驶员信息。或者,例如,将检测包含驾驶座的预设位置的位置信息的传感器作为驾驶座用检测部。驾驶员信息获取部43B也可以将由传感器检测出的入库时的驾驶座的位置信息获取为第一驾驶员信息,将出库时的驾驶座的位置信息获取为第二驾驶员信息。比较部45B比较入库时的驾驶座信息和出库时的驾驶座信息,判断入库时的驾驶员和出库时的驾驶员是否相同。
或者,例如在第十一实施方式中,也可以将车内镜的位置信息作为驾驶员的面部位置的信息。更详细地说,例如,将检测车内镜的位置信息的传感器作为驾驶座用检测部。驾驶员信息获取部43B可以将由传感器检测出的入库时的车内镜的位置信息获取为第一驾驶员信息,将出库时的车内镜的位置信息获取为第二驾驶员信息。
虽然说明了在车辆V1已后退入库时获取第一驾驶员信息的情况,但不限于此。第一驾驶员信息也可以基于车辆V1正在后退入库的泊车动作过程中获取的信息来获取入库完成时的车辆V1周围的障碍物的信息。
虽然说明了视认性信息获取部43C从照度传感器21C获取第一视认性信息和第二视认性信息的情况,但不限于此。视认性信息获取部43C也可以对由影像数据获取部41获取的影像数据进行图像处理,识别车辆V1周围的照度,作为第一视认性信息和第二视认性信息来获取。
俯瞰影像生成部44C可以在判断为车辆V1出库时的照度比入库时低的情况下,根据利用未图示的红外光照相机拍摄车辆V1的周围而得到的影像数据,生成提高了视认性的俯瞰影像。或者,俯瞰影像生成部44C也可以在判断为车辆V1出库时的照度比入库时低的情况下,对由影像数据获取部41获取的影像数据进行图像处理,生成提高了视认性的俯瞰影像。
在第十四实施方式中,虽然设定为在出库时因降雨而视认性比入库时低时显示俯瞰影像100,但是,也可以在因雾的产生而视认性降低时显示俯瞰影像100。
虽然说明了在车辆V1后退入库时获取第一视认性信息的情况,但不限于此。第一视认性信息也可以基于车辆V1正在后退入库的泊车动作过程中获取的信息来获取入库完成时的车辆V1周围的障碍物的信息。
此外,例如,也可以在根据未图示的导航***的地图信息和车辆V1的当前位置信息来判断车辆V1的当前位置是停车场的情况、或者对由影像数据获取部41获取的影像数据进行图像处理来判断车辆V1的当前位置是停车场的情况下,判断为车辆V1已入库。
在能够判断车辆V1出库时从泊车区域P1出来后前进的方向、即预测行进方向时,显示控制部48也可以在位于车辆V1的预测行进方向侧的相邻车辆的位置发生了变化的情况下,显示俯瞰影像。在出库时的车辆V1的周边状况为如图14所示的状况、车辆V1的预测行进方向为右方向的情况下,当预测行进方向侧的泊车区域PB、泊车区域PC、泊车区域PE的相邻车辆的位置发生了变化时,显示俯瞰影像。预测行进方向可以根据表示对影像数据获取部41获取的影像数据进行图像处理而检测出的停车场内的行进方向的箭头或标示获取、或者从导航信息中获取。
符号说明
1 显示控制***
11 前方照相机(拍摄部)
12 后方照相机(拍摄部)
13 左侧方照相机(拍摄部)
14 右侧方照相机(拍摄部)
21 传感器单元(障碍物检测部)
31 显示面板(显示部)
40 显示控制装置
41 影像数据获取部
42 自身车辆信息获取部
43 相邻信息获取部(信息获取部)
44 俯瞰影像生成部
45 比较部
48 显示控制部
49 存储部

Claims (20)

1.一种显示控制装置,其特征在于,包括:
影像数据获取部,获取来自拍摄车辆的周围的多个拍摄部的影像数据;
俯瞰影像生成部,对所述影像数据获取部所获取的影像数据进行视点转换处理以及合成处理,生成俯瞰影像;
信息获取部,获取第一信息和第二信息,所述第一信息与所述车辆后退入库时的所述车辆的周围确认条件相关,所述第二信息与所述车辆从入库状态前进出库时的所述车辆的周围确认条件相关;
比较部,比较所述第一信息和所述第二信息,以比较所述车辆入库时和出库时的周围确认条件的变化;以及
显示控制部,在所述比较部判断为在所述车辆出库时相比于入库时周围确认条件发生了变化的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
2.如权利要求1所述的显示控制装置,其特征在于,
所述信息获取部获取第一障碍物信息作为所述第一信息,获取第二障碍物信息作为所述第二信息,所述第一障碍物信息是所述车辆后退入库时的所述车辆周围的障碍物的信息,所述第二障碍物信息是所述车辆从入库状态前进出库时的所述车辆周围的障碍物的信息,
所述比较部比较所述第一障碍物信息和所述第二障碍物信息,以比较所述车辆出库时所述车辆的周围是否增加了障碍物,
在所述比较部判断为在所述车辆出库时所述车辆的周围增加了障碍物的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
3.如权利要求2所述的显示控制装置,其特征在于,
所述信息获取部获取所述车辆后退入库时的与所述车辆相邻的相邻车辆的信息作为第一障碍物信息,并获取所述车辆从入库状态前进出库时的与所述车辆相邻的相邻车辆的信息作为第二障碍物信息,
所述比较部比较所述第一障碍物信息和所述第二障碍物信息,以比较所述车辆出库时是否增加了相邻车辆,
在所述比较部判断为所述车辆出库时相邻车辆增加了的情况下,所述显示控制部在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
4.如权利要求3所述的显示控制装置,其特征在于,
所述比较部对入库时相邻泊车区域中有无车辆和出库时相邻泊车区域中有无车辆进行比较,
在所述比较部判断为入库时相邻泊车区域中不存在车辆而出库时相邻泊车区域中存在车辆的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
5.如权利要求1所述的显示控制装置,其特征在于,
所述信息获取部获取第一障碍物位置信息作为所述第一信息,获取第二障碍物位置信息作为所述第二信息,所述第一障碍物位置信息包含所述车辆后退入库时的所述车辆周围的障碍物的位置信息,所述第二障碍物位置信息包含所述车辆从入库状态前进出库时的所述车辆周围的障碍物的位置信息,
所述比较部比较所述第一障碍物位置信息和所述第二障碍物位置信息,以比较所述车辆入库时和出库时的所述障碍物的位置变化,
在所述比较部判断为所述车辆出库时所述障碍物的位置发生了变化的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
6.如权利要求5所述的显示控制装置,其特征在于,
所述信息获取部获取包含所述车辆后退入库时的与所述车辆相邻的相邻车辆的位置信息的信息作为第一障碍物位置信息,并获取包含所述车辆从入库状态前进出库时的与所述车辆相邻的相邻车辆的位置信息的信息作为第二障碍物位置信息,
所述比较部比较所述第一障碍物位置信息和所述第二障碍物位置信息,以比较所述车辆出库时相邻车辆的位置是否发生了变化,
在所述比较部判断为所述车辆出库时相邻车辆的位置发生了变化的情况下,所述显示控制部在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
7.如权利要求6所述的显示控制装置,其特征在于,
所述比较部比较所述第一障碍物位置信息和所述第二障碍物位置信息,以比较所述车辆出库时的相邻车辆的位置是否向靠近所述车辆的方向发生了变化,
在所述比较部判断为出库时的相邻车辆的位置相对于入库时的相邻车辆的位置向靠近所述车辆的方向发生了变化的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
8.如权利要求6所述的显示控制装置,其特征在于,
所述比较部比较所述第一障碍物位置信息和所述第二障碍物位置信息,以比较所述车辆出库时的相邻车辆的位置是否向所述车辆的出库方向发生了变化,
在所述比较部判断为出库时的相邻车辆的位置相对于入库时的相邻车辆的位置向所述车辆的出库方向发生了变化的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
9.如权利要求1所述的显示控制装置,其特征在于,
所述信息获取部获取所述车辆后退入库时的所述车辆的驾驶员的第一驾驶员信息作为所述第一信息,并获取所述车辆从入库状态前进出库时的所述驾驶员的第二驾驶员信息作为所述第二信息,
所述比较部比较所述第一驾驶员信息和所述第二驾驶员信息,以比较所述车辆入库时和出库时的所述驾驶员,
在所述比较部判断为所述车辆出库时的所述第二驾驶员信息与所述第一驾驶员信息不同的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
10.如权利要求9所述的显示控制装置,其特征在于,
所述信息获取部获取通过驾驶座用检测部识别了入库时的驾驶员的信息作为所述第一驾驶员信息,获取通过所述驾驶座用检测部识别了出库时的驾驶员的信息作为所述第二驾驶员信息,其中,所述驾驶座用检测部配置在所述车辆的驾驶座上,检测能够对驾驶员进行人物识别的信息,
所述比较部对识别了入库时的驾驶员的信息和识别了出库时的驾驶员的信息进行比较,判断入库时的驾驶员和出库时的驾驶员是否相同,
在所述比较部判断为入库时的驾驶员与出库时的驾驶员不同的情况下,所述显示控制部在显示部上显示所述俯瞰影像。
11.如权利要求9所述的显示控制装置,其特征在于,
所述信息获取部获取入库时的驾驶员的面部位置的信息作为所述第一驾驶员信息,获取出库时的驾驶员的面部位置的信息作为所述第二驾驶员信息,
所述比较部对入库时的驾驶员的面部位置和出库时的驾驶员的面部位置进行比较,判断入库时的驾驶员的面部位置和出库时的驾驶员的面部位置在上下方向上是否存在预定以上的位置差,
在所述比较部判断为出库时的驾驶员的面部位置位于比入库时的驾驶员的面部位置低预定以上的下方位置的情况下,所述显示控制部在显示部上显示所述俯瞰影像。
12.如权利要求10所述的显示控制装置,其特征在于,
所述信息获取部获取入库时的驾驶座信息作为所述第一驾驶员信息,获取出库时的所述驾驶座信息作为所述第二驾驶员信息,入库时的所述驾驶座信息和出库时的所述驾驶座信息是通过检测所述驾驶座信息的驾驶座用检测部检测的,所述驾驶座信息包括就座于所述车辆驾驶座时所作用的重量信息和所述驾驶座的位置信息中的至少一个,
所述比较部通过比较入库时的所述驾驶座信息和出库时的所述驾驶座信息来进行判断。
13.如权利要求1所述的显示控制装置,其特征在于,
所述信息获取部获取第一视认性信息作为所述第一信息,获取第二视认性信息作为所述第二信息,所述第一视认性信息是表示所述车辆后退入库时的所述车辆周围的视认性的信息,所述第二视认性信息是表示所述车辆从入库状态前进出库时的所述车辆周围的视认性的信息,
所述比较部比较所述第一视认性信息和所述第二视认性信息,以比较所述车辆入库时和出库时的所述车辆的周围的视认性,
在所述比较部判断为所述车辆出库时的所述第二视认性信息与所述第一视认性信息相比视认性降低的情况下,所述显示控制部在出库时在显示部上显示所述俯瞰影像生成部所生成的俯瞰影像。
14.如权利要求13所述的显示控制装置,其特征在于,
所述信息获取部获取入库时的车辆周围的照度信息作为所述第一视认性信息,获取出库时的车辆周围的照度信息作为所述第二视认性信息,
所述比较部比较入库时的车辆周围的照度和出库时的车辆周围的照度,判断出库时的照度是否比入库时的照度低,
在所述比较部判断为出库时的照度低于入库时的照度的情况下,所述显示控制部在显示部上显示所述俯瞰影像。
15.如权利要求14所述的显示控制装置,其特征在于,
所述比较部比较入库时的车辆周围的照度和出库时的车辆周围的照度,判断入库时的照度与出库时的照度是否具有预定以上的照度差,
在所述比较部判断为入库时的照度与出库时的照度具有预定以上的照度差的情况下,所述显示控制部在显示部上显示所述俯瞰影像。
16.如权利要求13所述的显示控制装置,其特征在于,
所述信息获取部获取表示入库时的当前位置的天气的信息作为所述第一视认性信息,获取表示出库时的当前位置的天气的信息作为所述第二视认性信息,
所述比较部比较入库时的当前位置的天气和出库时的当前位置的天气,判断出库时视认性是否因降雨而比入库时低,
在所述比较部判断为出库时的视认性因降雨而比入库时低的情况下,所述显示控制部在显示部上显示俯瞰影像。
17.如权利要求13所述的显示控制装置,其特征在于,
所述信息获取部获取表示入库时的车辆的车窗玻璃冻结状态的信息作为所述第一视认性信息,获取表示出库时的车辆的车窗玻璃冻结状态的信息作为所述第二视认性信息,
所述比较部对表示入库时车辆的车窗玻璃冻结状态的信息和表示出库时的车辆的车窗玻璃冻结状态的信息进行比较,判断出库时视认性是否因车窗玻璃的冻结而比入库时低,
所述显示控制部在当所述比较部判断为出库时因车窗玻璃冻结而视认性比入库时低的情况下,所述显示控制部在显示部上显示所述俯瞰影像。
18. 一种显示控制***,其特征在于,包括:
权利要求1所述的显示控制装置;以及
显示部和多个拍摄部中的至少一者,其中,所述影像数据获取部获取来自所述多个拍摄部的影像数据,所述显示控制部在所述显示部上显示俯瞰影像。
19.一种显示控制方法,其特征在于,包括:
影像数据获取步骤,获取来自拍摄车辆周围的多个拍摄部的影像数据;
俯瞰影像生成步骤,对在所述影像数据获取步骤中获取的影像数据进行视点转换处理以及合成处理,生成俯瞰影像;
相邻信息获取步骤,获取第一信息和第二信息,所述第一信息与所述车辆后退入库时的所述车辆的周围确认条件相关,所述第二信息与所述车辆从入库状态前进出库时的所述车辆的周围确认条件相关;
比较步骤,比较所述第一信息和所述第二信息,以比较所述车辆入库时和出库时的周围确认条件的变化;
显示控制步骤,在所述比较步骤中判断为在所述车辆出库时相比于入库时周围确认条件发生了变化的情况下,出库时在显示部上显示由所述俯瞰影像生成步骤生成的俯瞰影像。
20.一种存储有程序的计算机可读存储介质,所述程序用于使作为显示控制装置而动作的计算机执行如下步骤:
影像数据获取步骤,获取来自拍摄车辆周围的多个拍摄部的影像数据;
俯瞰影像生成步骤,对在所述影像数据获取步骤中获取的影像数据进行视点转换处理以及合成处理,生成俯瞰影像;
相邻信息获取步骤,获取第一信息和第二信息,所述第一信息与所述车辆后退入库时的所述车辆的周围确认条件相关,所述第二信息与所述车辆从入库状态前进出库时的所述车辆的周围确认条件相关;
比较步骤,比较所述第一信息和所述第二信息,以比较所述车辆入库时和出库时的周围确认条件的变化;
显示控制步骤,在所述比较步骤中判断为在所述车辆出库时相比于入库时周围确认条件发生了变化的情况下,出库时在显示部上显示由所述俯瞰影像生成步骤生成的俯瞰影像。
CN201880004577.6A 2017-07-31 2018-04-02 显示控制装置、显示控制***、显示控制方法以及程序 Active CN109997356B (zh)

Applications Claiming Priority (9)

Application Number Priority Date Filing Date Title
JP2017148384A JP6763356B2 (ja) 2017-07-31 2017-07-31 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP2017148385A JP6763357B2 (ja) 2017-07-31 2017-07-31 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP2017-148384 2017-07-31
JP2017-148385 2017-07-31
JP2017148336A JP6787272B2 (ja) 2017-07-31 2017-07-31 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP2017-148469 2017-07-31
JP2017148469A JP6763358B2 (ja) 2017-07-31 2017-07-31 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP2017-148336 2017-07-31
PCT/JP2018/014137 WO2019026348A1 (ja) 2017-07-31 2018-04-02 表示制御装置、表示制御システム、表示制御方法およびプログラム

Publications (2)

Publication Number Publication Date
CN109997356A CN109997356A (zh) 2019-07-09
CN109997356B true CN109997356B (zh) 2021-10-08

Family

ID=65232537

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880004577.6A Active CN109997356B (zh) 2017-07-31 2018-04-02 显示控制装置、显示控制***、显示控制方法以及程序

Country Status (4)

Country Link
US (1) US11117520B2 (zh)
EP (1) EP3550830B1 (zh)
CN (1) CN109997356B (zh)
WO (1) WO2019026348A1 (zh)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6939494B2 (ja) * 2017-12-11 2021-09-22 トヨタ自動車株式会社 画像表示装置
JP7125893B2 (ja) * 2018-11-26 2022-08-25 本田技研工業株式会社 走行制御装置、制御方法およびプログラム
JP7309480B2 (ja) * 2019-06-27 2023-07-18 フォルシアクラリオン・エレクトロニクス株式会社 車載装置、及び車載装置の制御方法
CN112849028B (zh) * 2021-01-22 2023-04-07 合众新能源汽车股份有限公司 一种应用超声波雷达泊车方法及***
CN116309884B (zh) * 2023-05-24 2023-08-01 成都陆拓信息技术有限公司 一种三维空间区域视频盲区识别方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101727756A (zh) * 2008-10-16 2010-06-09 财团法人工业技术研究院 交通工具移动图像辅助导引方法与***
CN102476619A (zh) * 2010-11-22 2012-05-30 罗伯特·博世有限公司 用于检测机动车周围环境的方法
CN103987582A (zh) * 2011-12-15 2014-08-13 松下电器产业株式会社 驾驶辅助装置
CN105612568A (zh) * 2013-10-18 2016-05-25 歌乐牌株式会社 车辆用起步辅助装置
CN106797452A (zh) * 2015-03-03 2017-05-31 日立建机株式会社 车辆的周围监视装置

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3803021B2 (ja) * 2000-10-02 2006-08-02 松下電器産業株式会社 運転支援装置
JP2004330891A (ja) * 2003-05-08 2004-11-25 Fujitsu Ten Ltd 利便性向上装置
JP2010064546A (ja) * 2008-09-09 2010-03-25 Toyota Industries Corp 駐車支援装置
JP4831374B2 (ja) * 2009-03-27 2011-12-07 アイシン・エィ・ダブリュ株式会社 運転支援装置、運転支援方法、及び運転支援プログラム
JP2012056428A (ja) * 2010-09-08 2012-03-22 Aisin Seiki Co Ltd 運転支援装置
CN103781685B (zh) * 2011-08-25 2016-08-24 日产自动车株式会社 车辆用自主行驶控制***
US10235575B2 (en) * 2011-08-26 2019-03-19 Panasonic Intellectual Property Management Co., Ltd. Driving assistance apparatus
JP5776533B2 (ja) * 2011-12-13 2015-09-09 三菱自動車工業株式会社 運転支援装置
CN104169136B (zh) * 2012-03-15 2016-06-22 丰田自动车株式会社 驾驶辅助装置
KR101376210B1 (ko) * 2012-08-06 2014-03-21 현대모비스 주식회사 어라운드 뷰 모니터 시스템 및 모니터링 방법
JP5872517B2 (ja) 2013-10-04 2016-03-01 本田技研工業株式会社 車両周辺表示装置
JP6429452B2 (ja) * 2013-11-22 2018-11-28 ルネサスエレクトロニクス株式会社 車載用画像処理装置及び半導体装置
CN104385987B (zh) * 2014-11-14 2017-01-11 东风汽车有限公司 一种汽车监控方法及***

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101727756A (zh) * 2008-10-16 2010-06-09 财团法人工业技术研究院 交通工具移动图像辅助导引方法与***
CN102476619A (zh) * 2010-11-22 2012-05-30 罗伯特·博世有限公司 用于检测机动车周围环境的方法
CN103987582A (zh) * 2011-12-15 2014-08-13 松下电器产业株式会社 驾驶辅助装置
CN105612568A (zh) * 2013-10-18 2016-05-25 歌乐牌株式会社 车辆用起步辅助装置
CN106797452A (zh) * 2015-03-03 2017-05-31 日立建机株式会社 车辆的周围监视装置

Also Published As

Publication number Publication date
US11117520B2 (en) 2021-09-14
CN109997356A (zh) 2019-07-09
WO2019026348A1 (ja) 2019-02-07
EP3550830A1 (en) 2019-10-09
EP3550830B1 (en) 2021-09-08
US20190275942A1 (en) 2019-09-12
EP3550830A4 (en) 2020-02-19

Similar Documents

Publication Publication Date Title
CN109997356B (zh) 显示控制装置、显示控制***、显示控制方法以及程序
US10909765B2 (en) Augmented reality system for vehicle blind spot prevention
US10688868B2 (en) On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
CN109996706B (zh) 显示控制装置、***、方法以及计算机可读存储介质
CN109314765B (zh) 车辆用显示控制装置、显示***、显示控制方法以及程序
CN109415018B (zh) 用于数字后视镜的方法和控制单元
US10531016B2 (en) On-vehicle display control device, on-vehicle display system, on-vehicle display control method, and non-transitory storage medium
US20180330619A1 (en) Display device and display method for displaying pictures, and storage medium
US11021105B2 (en) Bird's-eye view video generation device, bird's-eye view video generation method, and non-transitory storage medium
JP2005057536A (ja) 映像提示装置
JP2006273190A (ja) 車載用ナビゲーション装置
KR102061210B1 (ko) 차량 측 전방 사각 영역 감시 장치 및 그 방법
JP6763358B2 (ja) 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP2020088604A (ja) 走行制御装置、制御方法およびプログラム
CN115131749A (zh) 图像处理装置、图像处理方法以及计算机可读取存储介质
CN108367715A (zh) 用于后视的方法和控制单元
JP6825522B2 (ja) 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP6763357B2 (ja) 表示制御装置、表示制御システム、表示制御方法およびプログラム
WO2014090957A1 (en) Method for switching a camera system to a supporting mode, camera system and motor vehicle
JP6787272B2 (ja) 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP6825521B2 (ja) 表示制御装置、表示制御システム、表示制御方法およびプログラム
JP6706797B2 (ja) 電子ミラー装置
JP2023154105A (ja) 車両の間接視界提供システム及び車両の間接視界提供方法
JP2019029863A (ja) 表示制御装置、表示制御システム、表示制御方法およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant