CN108021859A - 用于警告物体的方法和设备 - Google Patents

用于警告物体的方法和设备 Download PDF

Info

Publication number
CN108021859A
CN108021859A CN201711031414.0A CN201711031414A CN108021859A CN 108021859 A CN108021859 A CN 108021859A CN 201711031414 A CN201711031414 A CN 201711031414A CN 108021859 A CN108021859 A CN 108021859A
Authority
CN
China
Prior art keywords
pattern indicator
detected
machine
condition
processor
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201711031414.0A
Other languages
English (en)
Other versions
CN108021859B (zh
Inventor
D·A·卡内拉
N·J·魏格特
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
GM Global Technology Operations LLC
Original Assignee
GM Global Technology Operations LLC
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by GM Global Technology Operations LLC filed Critical GM Global Technology Operations LLC
Publication of CN108021859A publication Critical patent/CN108021859A/zh
Application granted granted Critical
Publication of CN108021859B publication Critical patent/CN108021859B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/16—Anti-collision systems
    • G08G1/166—Anti-collision systems for active traffic, e.g. moving vehicles, pedestrians, bikes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G1/00—Traffic control systems for road vehicles
    • G08G1/09—Arrangements for giving variable traffic instructions
    • G08G1/0962—Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/178—Warnings
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/179—Distances to obstacles or vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/143—Alarm means
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • B60W2050/146—Display means
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30241—Trajectory
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior
    • G06T2207/30252—Vehicle exterior; Vicinity of vehicle
    • G06T2207/30261—Obstacle
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2380/00—Specific applications
    • G09G2380/10—Automotive applications

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Transportation (AREA)
  • Human Computer Interaction (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Automation & Control Theory (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Traffic Control Systems (AREA)
  • General Engineering & Computer Science (AREA)

Abstract

提供了一种用于警告被遮挡或者遮住的物体的方法和设备。方法包括：在预定区域中检测至少一个物体的存在，该预定区域对于机器的操作员而言在视觉上被遮住；确定是否满足用于显示所检测到的至少一个物体的至少一个条件；并且响应于确定了满足至少一个条件而显示与所检测到的至少一个物体相对应的图形指示符。该方法和设备可以在车辆中进行实施以便显示警告在车辆的遮住部分上的物体的图形指示符。

Description

用于警告物体的方法和设备
技术领域
符合示例性实施例的设备和方法涉及警告物体。更具体地，符合示例性实施例的设备和方法涉及警告在视觉上由非透明部件遮住的物体。
发明内容
一个或多个示例性实施例提供一种用于检测在视觉上由车辆的非透明部件遮住的物体或者障碍物的方法和设备。更具体地，一个或多个示例性实施例提供一种用于检测在视觉上由车辆的非透明部件遮住的物体并且警告驾驶员该物体或者障碍物的方法和设备。
根据示例性实施例的一个方面，提供了一种用于警告物体的方法。方法包括：在预定区域中检测至少一个物体的存在，该预定区域对于机器的操作员而言在视觉上被遮住；确定是否满足用于显示所检测到的至少一个物体的至少一个条件；并且响应于确定了满足至少一个条件而显示与所检测到的至少一个物体相对应的图形指示符。
所检测到的至少一个物体可以包括多个物体，并且方法进一步包括：检测多个物体的深度。显示图形指示符可以包括：显示具有深度线索的多个图形指示符，深度线索与所检测到的多个物体的深度相对应。
方法可以进一步包括：检测多个物体的轨迹和位置。显示图形指示符可以包括：显示具有深度线索、位置线索和轨迹线索的多个图形指示符，这些线索包括以下中的一个或多个：图形指示符的阴影、图形指示符的透明度、图形指示符的轮廓、图形指示符的大小、图形指示符相对于其它图形指示符的大小、图形指示符的颜色、图形指示符的形状、图形指示符的位置、图形指示符的运动、图形指示符由另一图形指示符的遮挡，以及用图形指示符显示的图像。
确定是否满足用于显示所检测到的至少一个物体的至少一个条件可以包括：确定至少一个物体与机器之间的距离；并且如果该距离在机器的预定距离内则确定满足该条件。
确定是否满足用于显示所检测到的至少一个物体的至少一个条件可以包括：确定至少一个物体的位置，并且如果至少一个物体的位置处于预定区域内则确定满足该条件。
确定是否满足用于显示所检测到的至少一个物体的至少一个条件可以进一步包括：确定至少一个物体与机器之间的距离，并且如果该距离在机器的预定距离内且至少一个物体的位置处于与机器的位置相对应的预定区域内则确定满足该条件。
显示图形指示符可以包括：在机器的遮住机器的操作员的视线的部分上显示图形指示符。
该机器可以是车辆并且该部分可以是车辆的支柱，支柱可以是A柱、B柱以及C柱中的至少一个。
用于显示所检测到的至少一个物体的至少一个条件可以包括如下至少一个：机器的速度、操作员的反应时间以及至少一个物体的数量。
确定是否满足用于显示所检测到的至少一个物体的至少一个条件可以包括：确定至少一个物体或者机器的轨迹，并且如果所确定的轨迹指示至少一个物体的轨迹会处于机器的轨迹的预定距离内则确定满足该条件。
根据另一示例性实施例的方面，提供了一种用于警告物体的设备。该设备包括：至少一个存储器，该至少一个存储器包括计算机可执行指令；以及至少一个处理器，该至少一个处理器配置为读取和执行计算机可执行指令。计算机可执行指令使得至少一个处理器：在预定区域中检测至少一个物体的存在，该预定区域对于机器的操作员而言在视觉上被遮住；确定是否满足用于显示所检测到的至少一个物体的至少一个条件；并且响应于确定了满足至少一个条件而显示与所检测到的至少一个物体相对应的图形指示符。
根据另一示例性实施例的方面，一种非暂时性计算机可读介质包括可由处理器执行的计算机可执行指令以便执行用于警告物体的方法。该方法包括：在预定区域中检测至少一个物体的存在，该预定区域对于机器的操作员而言在视觉上被遮住；确定是否满足用于显示所检测到的至少一个物体的至少一个条件；并且响应于确定了满足至少一个条件而在与在视觉上被遮住的区域相对应的显示器上显示与所检测到的至少一个物体相对应的图形指示符。
示例性实施例的其它目的、优点和新颖特征将从对示例性实施例和附图的如下详细描述中变得显而易见。
附图说明
图1示出了根据示例性实施例的用于警告物体的设备的框图；
图2示出了根据示例性实施例的用于警告物体的方法的流程图；
图3示出了根据示例性实施例的一个方面的提供给车辆操作员的警告的视图；以及
图4示出了根据示例性实施例的一个方面的提供给车辆操作员的警告的视图。
具体实施方式
现在将参照附图中的图1至图4对用于警告物体的设备和方法进行详细描述，在附图中，相同的附图标记指示相同的元件。
如下公开将使得本领域的技术人员能够实践发明概念。然而，本文所公开的示例性实施例仅仅是示例性的并且不会将发明概念限制于本文所描述的示例性实施例。此外，对每个示例性实施例的特征或者方面的描述通常应该被认为可用于其它示例性实施例的方面。
还应理解，在本文陈述第一元件“连接至”、“附接至”、“形成在”或者“设置在”第二元件上的情况下，第一元件可以直接地连接至、直接地形成在或者直接地设置在第二元件上，或者在第一元件与第二元件之间可以存在介入元件，除非陈述了第一元件“直接地”连接至、附接至、形成在或者设置在第二元件上。此外，如果第一元件配置为“发送”信息至第二元件或者“接收”来自第二元件的信息，则第一元件可以直接地发送信息至第二元件或者接收来自第二元件的信息、经由总线来发送或者接收信息、经由网络来发送或者接收信息，或者经由中间元件来发送或者接收信息，除非表明了第一元件“直接地”发送信息至第二元件或者接收来自第二元件的信息。
在本公开中，可以将所公开的元件中的一个或多个组合到单个装置中或者组合到一个或多个装置中。此外，可以将各单个元件设置在单独的装置上。
装置或者机器(诸如，车辆)的操作员可能在装置或者机器的操作期间遇到物体或障碍物。例如，车辆的驾驶员可能遇到可能越过车辆的路径的或者可能在越过移动车辆的路径的轨迹上的静止物体或者移动物体。车辆可以是小客车，但应理解，也可以使用任何其它车辆，包括摩托车、卡车、运动型多用途车(SUV)、休闲车(RV)、海船、飞机等。因此，装置或者机器的操作员必须检测物体或者障碍物并且控制装置或者机器以避开该物体或者障碍物。通过检测和避开物体或者障碍物，可以避免损害和损伤。
为了检测这些物体或者障碍物，操作员可以利用其自身的视线。然而，在物体或者障碍物被装置或者机器的部件遮住或者遮挡的情况下，操作员可能不能在视觉上检测到这些物体或者障碍物。因此，用于检测这些物体或者障碍物并且将视觉线索输出至操作员的设备可以协助操作员避开这些物体或者障碍物，操作员可能难以在视觉上检测到这些物体或者障碍物。
图1示出了根据示例性实施例的用于警告物体100的设备(即，用于警告在视觉上被遮住的物体的设备)的框图。如图1中示出的，根据示例性实施例，用于警告物体100的设备包括控制器101、电源102、储存装置103、输出104、用户输入106、物体检测器107(即，物体检测传感器)以及通信装置108。然而，用于警告物体100的设备不限于前述配置并且可以配置为包括附加元件和/或省略前述元件中的一个或多个。用于警告物体100的设备可以作为车辆的部分或者作为独立部件进行实施。
控制器101控制用于警告物体100的设备的整体操作和功能。控制器101可以控制以下中的一个或多个：用于警告物体100的设备的储存装置103、输出104、用户输入106、物体检测器107以及通信装置108。控制器101可以包括以下中的一个或多个：处理器、微处理器、中央处理单元(CPU)、图形处理器、专用集成电路(ASIC)、现场可编程门阵列(FPGA)、状态机、电路，以及硬件、软件和固件不同的组合。
控制器101配置为发送信息至以下中的一个或多个和/或接收来自以下中的一个或多个的信息：用于警告物体100的设备的储存装置103、输出104、用户输入106、物体检测器107以及通信装置108。可以经由总线或者网络来发送和接收信息，或者可以直接从以下中的一个或多个读取信息或者将信息写到以下中的一个或多个中：用于警告物体100的设备的储存装置103、输出104、用户输入106、物体检测器107、以及通信装置108。合适网络连接的示例包括：控域网(CAN)、媒体导向***传输(MOST)、本地互联网(LIN)、局域网(LAN)以及诸如以太网等其它恰当的连接。
电源102给以下中的一个或多个提供电力：用于警告物体100的设备的控制器101、储存装置103、输出104、用户输入106、物体检测器107以及通信装置108。电源102可以包括以下中的一个或多个：电池、出口、电容器、太阳能电池、发电机、风能装置、交流发电机等。
储存装置103配置用于储存信息和检索用于警告物体100的设备所使用的信息。储存装置103可以由控制器101控制以便储存和检索关于物体或者障碍物的信息、关于用于显示物体或者障碍物的条件的信息，以及关于与物体或者障碍物相对应的图形指示符的信息。储存装置103还可以包括计算机指令，该计算机指令配置为由处理器执行以便执行用于警告物体100的设备的功能。
储存装置103可以包括以下中的一个或多个：软盘、光盘、CD-ROM(光碟只读存储器)、磁光盘、ROM(只读存储器)、RAM(随机存取存储器)、EPROM(可擦可编程只读存储器)、EEPROM(电可擦可编程只读存储器)、磁卡或者光卡、闪速存储器、高速缓冲存储器、以及其它类型的介质/适合用于储存机器可执行指令的机器可读介质。
输出104以一种或多种形式输出信息，包括：视觉形式、听觉形式和/或触觉形式。输出104可以由控制器101控制以便将输出提供给用于警告物体100的设备的用户。输出104可以包括以下中的一个或多个：扬声器、显示器、透明显示器、居中显示器、平视显示器、挡风玻璃显示器、触觉反馈装置、振动装置、触感反馈装置、轻叩反馈装置、全息显示器、仪表灯、指示灯等。输出104还可以包括位于车辆的A柱(前面)、门、B柱(中间)、C柱(后面)上的显示器。此外，输出104还可以包括位于车辆的挡风玻璃、后窗、侧窗以及镜子中的一个或多个上的透明显示器。显示器可以是嵌入在前述支柱中的发光二极管(LED)或者有机发光二极管(OLED)显示器。
输出104可以输出通知，包括听觉通知、灯光通知、以及显示通知中的一个或多个。通知可以包括关于一个或多个检测到的障碍物或者物体的信息。输出104可以输出显示与所检测到的物体或者障碍物相对应的图形指示符。在一个示例中，图形指示符可以是物体的侧影。图形指示符还可以包括深度线索、位置线索和轨迹线索，这些线索包括以下中的一个或多个：图形指示符的阴影、图形指示符的透明度、图形指示符的轮廓、图形指示符的大小、图形指示符相对于其它图形指示符的大小、图形指示符的颜色、图形指示符的形状、图形指示符的位置、图形指示符的运动、图形指示符由另一图形指示符的遮挡，以及用图形指示符显示的图像。
用户输入106配置为将信息和命令提供至用于警告物体100的设备。用户输入106可以用于将用户输入等提供至控制器101。用户输入106可以包括以下中的一个或多个：触摸屏、键盘、软键盘、按钮、运动检测器、语音输入检测器、麦克风、摄像机、触控板、鼠标、触摸板等。用户输入106可以配置为接收用户输入以便确认或者拒绝由输出104输出的通知。用户输入106还可以配置为接收用户输入以便循环通过多个通知或者通知的不同画面。
物体检测器107配置为检测物体或者障碍物。物体检测器107可以是以下中的一个或多个传感器：雷达传感器、微波传感器、超声传感器、摄像机、红外传感器、LIDAR(激光雷达)以及激光传感器。例如，物体检测器可以从一个或多个传感器接收物体信息并且基于从一个或多个传感器接收到的物体信息来检测物体或者障碍物。物体检测器107提供包括以下中的一个或多个的物体信息：物体的位置、物体的轨迹、物体的速度、物体的加速度、物体是否处于机器周围的预定区域中以及物体与由操作员操作的机器或者车辆之间的距离。可以经由总线、储存装置103，或者通信装置108将物体信息提供至控制器101。物体检测器107可以定位在如下至少一个处：车门、车辆仪表板、车镜、车辆挡风玻璃、车辆引擎盖、车辆保险杠、车辆挡泥板、车辆结构支柱(例如，A柱、B柱和/或C柱)，以及车顶。
用于警告物体100的设备可以根据各种通信方法来使用通信装置108以与各种类型的外部设备通信。通信装置108可以用于将物体信息发送至用于警告物体100的设备的控制器101/接收来自控制器101的物体信息。通信装置108还可以配置为传输由于阻碍物或者阻碍部分而使操作员不可见的物体的通知或者物体的警告。通知或者警告可以由通信装置108发送至输出装置或者显示器，诸如，输出104。
通信装置108可以包括多个通信模块，诸如，以下中的一个或多个：远程信息处理单元、广播接收模块、近场通信(NFC)模块、GPS接收器、有线通信模块或者无线通信模块。广播接收模块可以包括：包括用于接收地面广播信号的天线的地面广播接收模块、解调器以及均衡器等。NFC模块是根据NFC方法与位于附近距离处的外部设备通信的模块。GPS接收器是从GPS卫星接收GPS信号并且检测当前位置的模块。有线通信模块可以是通过诸如局域网、控域网(CAN)，或者外部网络等有线网络来接收信息的模块。无线通信模块是通过使用无线通信协议(诸如，IEEE802.11协议、WiMAX、Wi-Fi或者IEEE通信协议)连接至外部网络并且与外部网络通信的模块。无线通信模块可以进一步包括移动通信模块，该移动通信模块访问移动通信网络并且根据各种移动通信标准(诸如，第三代(3G)、第三代合作伙伴项目(3GPP)、长期演进(LTE)、蓝牙、EVDO(数据优化)、CDMA(码分多址)、GPRS(通用分组无线业务)、EDGE或者ZigBee(无线个域网))执行通信。
用于警告物体100的设备的控制器101可以配置为：在预定区域中检测至少一个物体的存在，该预定区域对于机器的操作员而言在视觉上被遮住；确定是否满足用于显示所检测到的至少一个物体的至少一个条件；并且响应于确定了满足至少一个条件而显示与所检测到的至少一个物体相对应的图形指示符。
用于警告物体100的设备的控制器101可以配置为：检测多个物体的深度，并且控制以通过显示具有深度线索的多个图形指示符来显示图形指示符，深度线索与所检测到的多个物体的深度相对应。
用于警告物体100的设备的控制器101还可以配置为：检测多个物体的深度、位置和轨迹，并且控制以显示具有与所检测到的多个物体的深度相对应的深度线索、位置线索和轨迹线索的多个图形显示器。深度线索、位置线索和轨迹线索可以包括以下中的一个或多个：图形指示符的阴影、图形指示符的透明度、图形指示符的轮廓、图形指示符的大小、图形指示符相对于其它图形指示符的大小、图形指示符的颜色、图形指示符的形状、图形指示符的位置、图形指示符的运动、图形指示符由另一图形指示符的遮挡，以及用图形指示符显示的图像。
例如，当显示多个图形指示符时，一个图形指示符相对于其它图形指示符和上下文信息(例如，背景/透过挡风玻璃的视野/驾驶员期望)的大小可以是深度线索。如果图形指示符呈已知的形状(诸如，骑车人或者行人的侧影)，则操作员对这些熟悉物体的大小的心理模型可能会影响其判断。进一步地，如果一个图形指示符与另一图形指示符重叠，则这可以是关于物体的位置以及物体是否在相对于另一物体的前面或者后面的深度线索。更进一步地，显示了图形指示符的位置和图形指示符的移动可以是物***置和轨迹的线索。此外，图形指示符的移动可以用常见的运动模式(例如，步行、骑自行车、推车运动等)来图示以便允许进行物体检测和识别。
用于警告物体100的设备的控制器101还可以配置为确定以下中的一个或多个：物体与机器之间的距离、物体的位置以及物体的速度。然后，如果距离在机器的预定距离内，如果至少一个物体的位置在预定区域内，以及/或者如果物体的速度在预定速度内的话，则控制器101可以确定满足用于显示图形指示符的条件。控制器101可以基于以下中的一个或多个来确定满足用于显示所检测到的物体的至少一个条件：机器或者车辆的速度、机器或者车辆的操作员的反应时间，以及物体的数量。
用于警告物体100的设备的控制器101还可以控制以在机器的遮住机器的操作员的视线的部分(诸如，车辆的A柱、B柱以及C柱)上显示图形指示符。
图2示出了根据示例性实施例的用于警告物体的方法的流程图。图2的方法可以由用于警告物体100的设备来执行或者可以作为指令被编码到计算机可读介质中，该指令可由计算机执行以执行该方法。
参照图2，在操作S210中检测到了位于预定区域中的至少一个物体的存在，该预定区域对于机器的操作员而言在视觉上被遮住。然后在操作S220中确定是否满足用于显示所检测到的至少一个物体的至少一个条件。在操作S230中，响应于确定了满足至少一个条件而显示与所检测到的至少一个物体相对应的图形指示符。
图3示出了根据示例性实施例的方面的提供给车辆操作员的警告的视图。具体地，图3的视图示出了在A柱301上显示的图形指示符302。用于警告物体100的设备可以控制以在A柱301上显示图形指示符302。
参照图3，显示器可以是A柱301的部分并且用于显示图形指示符302。图形指示符432可以具有不同的阴影以便指示与图形指示符302相对应的人或者物体处于与机器的潜在碰撞区中。图形指示符302可以用深度线索、位置线索或者轨迹线索来显示。深度线索、位置线索和轨迹线索可以包括以下中的一个或多个：图形指示符的阴影、图形指示符的透明度、图形指示符的轮廓、图形指示符的大小、图形指示符相对于其它图形指示符的大小、图形指示符的颜色、图形指示符的形状、图形指示符的位置、图形指示符的运动、图形指示符由另一图形指示符的遮挡，以及用图形指示符显示的图像。
此外，可以确定物体或者人的位置和距离中的至少一个，并且如果物体的位置和距离中的一个或多个满足条件的话，则可以显示至少一个物体或者人。例如，如果人或者物体的距离在机器的预定距离内并且至少一个物体或者人的位置在与机器的位置相对应的预定区域内的话。进一步地，用于显示所检测到的至少一个物体或者人的至少一个条件可以包括以下中的一个或多个：机器的速度、操作员的反应时间，以及至少一个物体的数量。
例如，如果机器或者车辆在以预定速度、在低于预定速度下、或者在高于预定速度下行进，则可以显示所检测到的至少一个物体或者人。在另一示例中，当人或者物体与车辆相隔特定距离并且该特定距离小于基于机器或者车辆操作员的反应时间所确定的安全距离时，可以显示所检测到的至少一个物体或者人。在又另一示例中，可以在与操作员或者驾驶员的反应时间相对应的时间点显示所检测到的至少一个物体或者人以便允许操作员或者驾驶员有效地做出反应。
至少一个条件可以是仅仅可以显示预定数量的至少一个物体。例如，如果存在四个在视觉上被A柱遮住的物体并且可以显示的物体的预定数量是两个。则该四个物体可以按照重要性从第一至第四进行排列，并且可以显示与排在前两位的物体相对应的图形指示符。这四个物体可以基于以下中的一个或多个来进行排列：与机器或者车辆碰撞的风险、物体的速度、与机器或者车辆相隔的距离、轨迹、大小等。
尽管图形指示符302被显示在A柱301上，但其也可以被显示在如下至少一个上：A柱、B柱、C柱，或者机器或者车辆的遮住车辆或者机器的操作员对物体或者人的视野的其它表面。
图4示出了根据示例性实施例的方面的提供给车辆操作员的警告的视图。具体地，图4的视图示出了在A柱401上显示的图形指示符402和403。用于警告物体100的设备可以控制以在A柱401上显示图形指示符402和403。
参照图4，显示器可以是A柱401的部分并且用于显示图形指示符402和403。图形指示符402可以具有与图形指示符403不同的阴影以便指示与图形指示符402相对应的人或者物体比与图形指示符403相对应的人或者物体更接近车辆或者更可能是障碍物。此外，图形指示符402可以大于图形指示符403以便指示与图形指示符402相对应的人或者物体比与图形指示符403相对应的人或者物体更接近车辆或者更可能是障碍物。
可以根据一个或多个深度线索、位置线索和轨迹线索来显示图形指示符402和403，这些线索包括以下中的一个或多个：图形指示符的阴影、图形指示符的透明度、图形指示符的轮廓、图形指示符的大小、图形指示符相对于其它图形指示符的大小、图形指示符的颜色、图形指示符的形状、图形指示符的位置、图形指示符的运动、图形指示符由另一图形指示符的遮挡，以及用图形指示符显示的图像。
本文所公开的过程、方法或者算法可以可交付至处理装置、控制器，或者计算机/由处理装置、控制器、或者计算机来实施，处理装置、控制器，或者计算机可以包括任何现有的可编程电子控制装置或者专用电子控制装置。类似地，过程、方法或者算法可以按照许多形式被储存为可由控制器或者计算机执行的数据和指令，包括但不限于，永久地储存在不可写储存介质(诸如，ROM装置)上的信息，以及可更改地储存在可写储存介质(诸如，软盘、磁带、CD、RAM装置，以及其它磁介质和光介质)上的信息。过程、方法或者算法还可以在软件可执行对象中进行实施。可替代地，过程、方法或者算法可以全部地或者部分地使用如下合适的硬件部件来体现，诸如，专用集成电路(ASIC)、现场可编程门阵列(FPGA)、状态机、控制器或者其它硬件部件或者装置，或者硬件、软件和固件部件的组合。
上文已经参照附图对一个或多个示例性实施例进行了描述。上文所描述的示例性实施例应该被认为是仅仅具有描述性意义并且不是为了限制的目的。此外，在不背离如下权利要求书所限定的发明概念的精神和范围的情况下，可以对示例性实施例进行修改。

Claims (10)

1.一种用于警告物体的设备，所述设备包括：
至少一个存储器，所述至少一个存储器包括计算机可执行指令；以及
至少一个处理器，所述至少一个处理器配置为读取和执行所述计算机可执行指令，所述计算机可执行指令使得所述至少一个处理器：
在预定区域中检测至少一个物体的存在，所述预定区域对于机器的操作员而言在视觉上被遮住；
确定是否满足用于显示所检测到的至少一个物体的至少一个条件；以及
响应于确定了满足所述至少一个条件而显示与所检测到的至少一个物体相对应的图形指示符。
2.根据权利要求1所述的设备，其中，所检测到的至少一个物体包括多个物体，所述计算机可执行指令进一步使得所述至少一个处理器：
检测所述多个物体的深度，
其中，显示所述图形指示符包括：显示具有深度线索的多个图形指示符，所述深度线索与所检测到的多个物体的深度相对应。
3.根据权利要求2所述的设备，其中，所述计算机可执行指令进一步使得所述至少一个处理器检测所述多个物体的轨迹和位置，
其中，所述至少一个处理器控制以显示包括深度线索、位置线索和轨迹线索的所述多个图形指示符，所述线索包括以下中的一个或多个：图形指示符的阴影、图形指示符的透明度、图形指示符的轮廓、图形指示符的大小、图形指示符相对于其它图形指示符的大小、图形指示符的颜色、图形指示符的形状、图形指示符的位置、图形指示符的运动、图形指示符由另一图形指示符的遮挡，以及用图形指示符显示的图像。
4.根据权利要求1所述的设备，其中，所述计算机可执行指令进一步使得所述至少一个处理器通过如下方式来确定是否满足用于显示所检测到的至少一个物体的所述至少一个条件：
确定所述至少一个物体与所述机器之间的距离；以及
如果所述距离在所述机器的预定距离内，则确定满足所述条件。
5.根据权利要求1所述的设备，其中，所述计算机可执行指令进一步使得所述至少一个处理器通过如下方式来确定是否满足用于显示所检测到的至少一个物体的所述至少一个条件：
确定所述至少一个物体的位置，以及
如果所述至少一个物体的所述位置在所述预定区域内，则确定满足所述条件。
6.根据权利要求5所述的设备，其中，所述计算机可执行指令进一步使得所述至少一个处理器通过如下方式来确定是否满足用于显示所检测到的至少一个物体的所述至少一个条件：
确定所述至少一个物体与所述机器之间的距离，以及
如果所述距离在所述机器的预定距离内并且所述至少一个物体的所述位置在与所述机器的所述位置相对应的所述预定区域内，则确定满足所述条件。
7.根据权利要求1所述的设备，其中，所述计算机可执行指令进一步使得所述至少一个处理器通过如下方式来显示所述图形指示符：在所述机器的遮住所述机器的所述操作员的视线的部分上显示所述图形指示符。
8.根据权利要求7所述的设备，其中，所述机器包括车辆，并且所述部分包括所述车辆的支柱，并且
其中，所述支柱包括A柱、B柱以及C柱中的至少一个。
9.根据权利要求1所述的设备，其中，用于显示所检测到的至少一个物体的所述至少一个条件包括以下中的至少一个：所述机器的速度、所述操作员的反应时间，以及所述至少一个物体的数量。
10.一种非暂时性计算机可读介质，所述非暂时性计算机可读介质包括可由处理器执行的计算机可执行指令以便执行用于警告物体的方法，所述方法包括：
在预定区域中检测至少一个物体的存在，所述预定区域对于机器的操作员而言在视觉上被遮住；
确定是否满足用于显示所检测到的至少一个物体的至少一个条件；以及
响应于确定了满足所述至少一个条件而在与所述在视觉上被遮住的区域相对应的显示器上显示与所检测到的至少一个物体相对应的图形指示符。
CN201711031414.0A 2016-11-03 2017-10-27 用于警告物体的方法和设备 Active CN108021859B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/342795 2016-11-03
US15/342,795 US9959767B1 (en) 2016-11-03 2016-11-03 Method and apparatus for warning of objects

Publications (2)

Publication Number Publication Date
CN108021859A true CN108021859A (zh) 2018-05-11
CN108021859B CN108021859B (zh) 2022-03-01

Family

ID=61912395

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711031414.0A Active CN108021859B (zh) 2016-11-03 2017-10-27 用于警告物体的方法和设备

Country Status (3)

Country Link
US (1) US9959767B1 (zh)
CN (1) CN108021859B (zh)
DE (1) DE102017125470B4 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116620168A (zh) * 2023-05-24 2023-08-22 江苏泽景汽车电子股份有限公司 一种障碍物预警方法、装置、电子设备及存储介质

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE112015006361T5 (de) * 2015-03-25 2017-11-30 Kasai Kogyo Co., Ltd. Fahrzeuginnenkomponente
US10981507B1 (en) 2019-11-07 2021-04-20 Focused Technology Solutions, Inc. Interactive safety system for vehicles
US20220363194A1 (en) * 2021-05-11 2022-11-17 Magna Electronics Inc. Vehicular display system with a-pillar display
WO2022240811A1 (en) * 2021-05-11 2022-11-17 Gentex Corporation "a" pillar detection system
DE102021118730A1 (de) * 2021-07-20 2023-01-26 Bayerische Motoren Werke Aktiengesellschaft Monitorsystem für ein Fahrzeug

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101513856A (zh) * 2009-04-03 2009-08-26 广东铁将军防盗设备有限公司 车用侧视显像***
US8451141B2 (en) * 2008-03-31 2013-05-28 Toyota Jidosha Kabushiki Kaisha Intersection visibility determination device, vehicle with intersection visibility determination device, and method for determining intersection visibility
CN103909863A (zh) * 2012-12-31 2014-07-09 现代自动车株式会社 追尾碰撞警告告警***和方法
US20160144785A1 (en) * 2013-07-05 2016-05-26 Mitsubishi Electric Corporation Information display apparatus

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040003216A (ko) * 2002-07-02 2004-01-13 기아자동차주식회사 차량의 전방필러에 의한 운전사각 모니터장치
JP4810953B2 (ja) * 2005-10-07 2011-11-09 日産自動車株式会社 車両用死角映像表示装置
US7804421B2 (en) * 2007-02-21 2010-09-28 Audiovox Corporation Vehicle safety system
JP4325705B2 (ja) * 2007-06-15 2009-09-02 株式会社デンソー 表示システム及びプログラム
WO2009157446A1 (ja) * 2008-06-24 2009-12-30 トヨタ自動車株式会社 死角表示装置及び運転支援装置
US8547298B2 (en) 2009-04-02 2013-10-01 GM Global Technology Operations LLC Continuation of exterior view on interior pillars and surfaces
US9514650B2 (en) * 2013-03-13 2016-12-06 Honda Motor Co., Ltd. System and method for warning a driver of pedestrians and other obstacles when turning
JP6065296B2 (ja) * 2014-05-20 2017-01-25 パナソニックＩｐマネジメント株式会社 画像表示システム、および画像表示システムに用いられるディスプレイ
US10486599B2 (en) * 2015-07-17 2019-11-26 Magna Mirrors Of America, Inc. Rearview vision system for vehicle

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8451141B2 (en) * 2008-03-31 2013-05-28 Toyota Jidosha Kabushiki Kaisha Intersection visibility determination device, vehicle with intersection visibility determination device, and method for determining intersection visibility
CN101513856A (zh) * 2009-04-03 2009-08-26 广东铁将军防盗设备有限公司 车用侧视显像***
CN103909863A (zh) * 2012-12-31 2014-07-09 现代自动车株式会社 追尾碰撞警告告警***和方法
US20160144785A1 (en) * 2013-07-05 2016-05-26 Mitsubishi Electric Corporation Information display apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116620168A (zh) * 2023-05-24 2023-08-22 江苏泽景汽车电子股份有限公司 一种障碍物预警方法、装置、电子设备及存储介质
CN116620168B (zh) * 2023-05-24 2023-12-12 江苏泽景汽车电子股份有限公司 一种障碍物预警方法、装置、电子设备及存储介质

Also Published As

Publication number Publication date
DE102017125470B4 (de) 2023-04-20
US20180122241A1 (en) 2018-05-03
DE102017125470A1 (de) 2018-05-03
US9959767B1 (en) 2018-05-01
CN108021859B (zh) 2022-03-01

Similar Documents

Publication Publication Date Title
CN108021859A (zh) 用于警告物体的方法和设备
US10229654B2 (en) Vehicle and method for controlling the vehicle
JP4933658B2 (ja) 車載用画像表示装置
CN105722716B (zh) 内部显示***和方法
US10220704B2 (en) Method and apparatus for door status detection
KR102464607B1 (ko) 차량 및 그 제어 방법
US20190255989A1 (en) Turn by turn activation of turn signals
JP2007052719A5 (zh)
CN109308816A (zh) 一种确定道路交通风险的方法、装置及车载***
CN105966397A (zh) 用于超车道车辆后接近警报的***和方法
CN109466433B (zh) 用于提供车外提醒的方法、装置、设备、计算机可读存储介质以及车辆
KR20180060937A (ko) 차량용 도어 제어 장치 및 방법
CN108482367A (zh) 一种基于智能后视镜辅助驾驶的方法、装置及***
JP2018198071A (ja) 車載用画像表示装置
WO2016194144A1 (ja) 車両ドア開放警告装置および車両ドア開放警告システム
JP2017076431A (ja) 車両制御装置
US10109200B1 (en) Graphical multi-layer light alert display and control method thereof
JP2014078271A (ja) 車載用画像表示装置
KR20150033428A (ko) 전자기기 및 그것의 제어방법
US20190122382A1 (en) Method and apparatus that display view alert
JP2017076432A (ja) 車載用画像表示装置
JP2016064829A (ja) 車両制御装置
JP6105513B2 (ja) 車両制御装置、及び車載用画像表示装置
KR20140128800A (ko) 조향 경로 결정 방법 및 그 장치
US20230141584A1 (en) Apparatus for displaying at least one virtual lane line based on environmental condition and method of controlling same

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant