CN108216242A - 用于控制车辆的狭窄道路行驶的装置和方法 - Google Patents

用于控制车辆的狭窄道路行驶的装置和方法 Download PDF

Info

Publication number
CN108216242A
CN108216242A CN201710841320.3A CN201710841320A CN108216242A CN 108216242 A CN108216242 A CN 108216242A CN 201710841320 A CN201710841320 A CN 201710841320A CN 108216242 A CN108216242 A CN 108216242A
Authority
CN
China
Prior art keywords
road
vehicle
limited road
limited
controlling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201710841320.3A
Other languages
English (en)
Other versions
CN108216242B (zh
Inventor
俞炳墉
林钟宇
李建畅
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hanyang Hak Won Co Ltd
Hyundai Motor Co
Kia Corp
Original Assignee
Hanyang Hak Won Co Ltd
Hyundai Motor Co
Kia Motors Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hanyang Hak Won Co Ltd, Hyundai Motor Co, Kia Motors Corp filed Critical Hanyang Hak Won Co Ltd
Publication of CN108216242A publication Critical patent/CN108216242A/zh
Application granted granted Critical
Publication of CN108216242B publication Critical patent/CN108216242B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G05—CONTROLLING; REGULATING
    • G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
    • G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
    • G05D1/02—Control of position or course in two dimensions
    • G05D1/021—Control of position or course in two dimensions specially adapted to land vehicles
    • G05D1/0231—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means
    • G05D1/0246—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means
    • G05D1/0251—Control of position or course in two dimensions specially adapted to land vehicles using optical position detecting means using a video camera in combination with image processing means extracting 3D information from a plurality of images taken from different locations, e.g. stereo vision
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W30/00—Purposes of road vehicle drive control systems not related to the control of a particular sub-unit, e.g. of systems using conjoint control of vehicle sub-units
    • B60W30/18—Propelling the vehicle
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W40/00—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models
    • B60W40/02—Estimation or calculation of non-directly measurable driving parameters for road vehicle drive control systems not related to the control of a particular sub unit, e.g. by using mathematical models related to ambient conditions
    • B60W40/06—Road conditions
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W50/08—Interaction between the driver and the control system
    • B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/08—Volume rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/50—Depth or shape recovery
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/58—Recognition of moving objects or obstacles, e.g. vehicles or pedestrians; Recognition of traffic objects, e.g. traffic signs, traffic lights or roads
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/106—Processing image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/204—Image signal generators using stereoscopic image cameras
    • H04N13/239—Image signal generators using stereoscopic image cameras using two 2D image sensors having a relative position equal to or related to the interocular distance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/20—Image signal generators
    • H04N13/271—Image signal generators wherein the generated image signals comprise depth maps or disparity maps
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60Q—ARRANGEMENT OF SIGNALLING OR LIGHTING DEVICES, THE MOUNTING OR SUPPORTING THEREOF OR CIRCUITS THEREFOR, FOR VEHICLES IN GENERAL
    • B60Q9/00—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling
    • B60Q9/008—Arrangement or adaptation of signal devices not provided for in one of main groups B60Q1/00 - B60Q7/00, e.g. haptic signalling for anti-collision purposes
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/403—Image sensing, e.g. optical camera
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2420/00—Indexing codes relating to the type of sensors based on the principle of their operation
    • B60W2420/40—Photo, light or radio wave sensitive means, e.g. infrared sensors
    • B60W2420/408—Radar; Laser, e.g. lidar
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W2554/00—Input parameters relating to objects
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
    • G01S17/06—Systems determining position data of a target
    • G01S17/08—Systems determining position data of a target for measuring distance only
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/12—Acquisition of 3D measurements of objects
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N2013/0074—Stereoscopic image analysis
    • H04N2013/0081—Depth or disparity estimation from stereoscopic image signals

Landscapes

  • Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • Transportation (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Theoretical Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Electromagnetism (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Traffic Control Systems (AREA)
  • Control Of Driving Devices And Active Controlling Of Vehicle (AREA)
  • Navigation (AREA)

Abstract

本发明涉及用于控制车辆的狭窄道路行驶的装置和方法。用于控制车辆的狭窄道路行驶的装置包括：图像变换单元，其利用物体的深度信息来生成深度地图，所示物体在车辆所行驶的道路的前方图像中，并且通过变换所生成的深度地图来生成前方图像的高度地图；地图分析单元，其识别物体，并基于所生成的高度地图来计算道路的可行驶区域；确定单元，其基于所计算的可行驶区域来确定道路是否为狭窄道路，当道路确定为狭窄道路时，确定车辆是否能够通过所述狭窄道路；信号处理单元，其基于车辆是否能够通过狭窄道路的确定，来控制车辆在狭窄道路上的行驶。

Description

用于控制车辆的狭窄道路行驶的装置和方法
与相关申请的交叉引用
本申请基于2016年12月14日向韩国知识产权局提交的韩国专利申请No.10-2016-0170213并且要求其优先权，该申请的全部内容通过引用结合于此。
技术领域
本发明通常涉及车辆控制***，尤其是涉及控制车辆的狭窄道路行驶的装置和方法。
背景技术
驾驶员常常不得不在由于道路特征和周围物体等所导致的狭窄道路上驾驶。例如，由于有许多车辆在居民区的街巷里停车，在那里，停车位窄小，驾驶员可能不得不在狭窄的道路上驾驶。没有经验的驾驶员在驾驶通过狭窄的区域时，可能由于驾驶不熟练和缺乏驾驶经验而容易发生碰撞，相应地，可能在狭窄道路上驾驶时感觉不舒服。
相应地，需要这样的驾驶员支持***，其可以提高驾驶员在车辆经过狭窄道路时的驾驶控制能力。为实现这一目标，提供了各种狭窄道路识别***，而传统的狭窄道路识别***包括，例如，激光雷达装置或超声传感器。但是，4线激光雷达对位于车辆的物体的识别能力有限，因为它通常安装在车辆的下部。此外，超声传感器识别远距离物体的能力有限，因为它只能识别近距离物体。
发明内容
本发明提供了用于控制车辆的狭窄道路行驶的装置和方法，当车辆在狭窄道路上行驶时，基于深度地图和高度地图，所述用于控制车辆的狭窄道路行驶的装置和方法可以识别可行驶区域和物体，并确定车辆是否安全地通过狭窄道路，以使得车辆能够安全地通过狭窄道路。
本发明的技术目标不限于上述的技术目标，而其他未提及的技术目标将从以下描述中对本领域的技术人员变得更易理解。
根据本发明实施方案，本发明提供了用于控制车辆的狭窄道路行驶的装置，其包括：图像变换单元，其利用位于车辆所行驶道路的前方图像中的物体的深度信息来生成深度地图，并且通过变换所生成的深度地图来生成前方图像的高度地图；地图分析单元，其识别物体，并基于所生成的高度地图来计算道路的可行驶区域；确定单元，其基于所计算的可行驶区域来确定道路是否为狭窄道路，当道路确定为狭窄道路时，确定车辆是否能够通过所述狭窄道路；信号处理单元，其基于车辆是否能够通过狭窄道路的判断，来控制车辆在狭窄道路上的行驶。
此外，根据本发明实施方案，本发明提供了用于控制车辆的狭窄道路行驶的方法，其包括：利用位于车辆所行驶道路的前方图像中的物体的深度信息来生成深度地图；通过变换所生成的深度地图来生成前方图像的高度地图；识别物体，并基于所生成的高度地图来计算道路的可行驶区域；基于所计算的可行驶区域来确定道路是否为狭窄道路；当道路确定为狭窄道路时，确定车辆是否能够通过所述狭窄道路；基于车辆是否能够通过狭窄道路的确定，来控制车辆在狭窄道路上的行驶。
附图说明
通过接下来的详细描述结合附图，本发明的上述和其他目的、特征和优点将变得更加清楚：
图1是显示了根据本发明实施方案的用于控制车辆的狭窄道路行驶的装置的配置的方框图；
图2A至图7是显示了根据本发明实施方案的装置的工作的视图；
图8是显示了根据本发明实施方案的用于控制车辆的狭窄道路行驶的方法的工作的流程图；以及
图9是显示了执行根据本发明实施方案的方法的计算***的方框图。
应当理解的是，以上参照的附图并不一定按比例地绘制，而是图示性地简化呈现各种优选的特征以显示本发明的基本原理。本发明的具体设计特征(包括例如，具体尺寸、方向、位置和外形)将部分地由具体所要应用和使用的环境来确定。
具体实施方式
在下文中，本发明的具体实施方案将参照附图进行详细描述。在整个说明书中，应该注意的是，相同或相似的附图标记表示相同或相似的元素，即使它们是在不同的附图中提供的。此外，在对本发明的以下描述中，为使本发明的主题更清楚，将省略在本文中包括的已知功能和配置的详细描述。
在本文中使用的术语只用于描述具体实施方案，而不意图用于限制本发明。正如本文中所使用的，单数形式“某一个”、“一个”和“该”意图用来同样包括复数形式，除非上下文明确表示不包括复数形式。还将进一步理解当在本明书中使用术语“包括”和/或“包括了”时，指明存在所述特征、整体、步骤、操作、元件和/或组件，但是不排除存在或加入一种或更多种其他的特征、整体、步骤、操作、元件、组件和/或其群体。正如本文所使用的，术语“和/或”包括一种或更多种相关列举项的任何和所有组合。
此外，在本文中当描述当前本发明的部件时，可能会用到诸如第一、第二、A、B、(a)、(b)等术语。这些术语只用于区分元素和其他元素，而元素的本质、序列、顺序和数量不受术语的限制。此外，除非另外定义，否则在本文中所使用的所有术语，包括技术或科学术语，都具有与本发明所属技术领域的技术人员通常所理解的相同的含义。在通常使用的词典中定义的术语应该被解释为具有与相关技术的上下文含义相一致的含义，除非在本发明的说明书中明确定义，否则不应被解释为理想或过于正式的含义。
应当理解的是，本文中所使用的术语“车辆”或“车辆的”或其它类似术语通常包括机动车辆，例如包括运动型多用途车辆(SUV)、大客车、大货车、各种商用车辆的乘用车辆，包括各种舟艇、船舶，航空器等，并且包括混合动力车辆、电动车辆、插电式混合动力电动车辆、氢动力车辆以及其它替代性燃料车辆(例如，源于非化石能源的燃料)。正如本文所提到的，混合动力车辆是具有两种或更多种动力源的车辆，例如汽油动力和电力动力两者的车辆。
此外，应该理解一个或更多个以下的方法或者其中的方面，可以由至少一个控制单元运行。术语“控制单元”可以指包括存储器和处理器的硬件装置。存储器配置为存储程序指令，并且处理器特别地程序化以运行程序指令来进行下面进一步描述的一个或更多个过程。此外，如同本领域技术人员可以领会的那样，应该理解下面的方法可以由包括控制单元的装置结合一个或更多个其他组件执行。
此外，本发明的控制单元可以实施为非易失性计算机可读介质，所述非易失性计算机可读介质包括由处理器或控制器等运行的可执行的程序指令。计算机可读介质的示例包括但不局限于：ROM、RAM、光盘(CD)-ROM、磁带、软盘、闪存驱动器、智能卡以及光学数据存储装置。电脑可读记录介质也可以分布遍及计算机网络，以使程序指令以分布式的形式(例如，通过远程信息处理服务器或者控制器局域网(CAN))存储和运行。
现在参照所公开的实施方案，图1是显示了根据本发明实施方案的用于控制车辆的狭窄道路行驶的装置的配置的方框图。
根据本发明的用于控制车辆的狭窄道路行驶的装置100可以在车辆中实施。例如，装置100可以通过利用安装于车辆的一个或更多个控制单元来实现，并且/或者可以实施为单独的装置，其通过单独的连接单元来连接至车辆的控制单元。
参照图1，用于控制车辆的狭窄道路行驶的装置100可以包括：控制单元110、接口单元120、传感器单元130、通信单元140、存储单元150、图像变换单元160、地图分析单元170，确定单元180以及信号处理单元190。在这里，控制单元110可以处理在用于控制车辆的狭窄道路行驶的装置110的元件之间传送的信号。
接口单元120可以包括：输入单元，其接收来自于驾驶员的控制命令；输出单元，其输出用于控制车辆的狭窄道路行驶的装置100的工作状态和结果。在这里，输入单元可以包括按钮，也可以包括鼠标、操纵杆(joystick)、旋钮(jog shuttle)和手写笔。此外，输入单元可以包括呈现在显示器上的软键。
输出单元可以包括显示器，也可以包括声音输出单元，例如扬声器。当触摸传感器(例如触摸膜，触摸片，或触摸板)设置于显示器时，显示器可以作为触摸屏来工作，并且可以实施为输入单元和输出单元集成的形式。例如，显示器可以包括液晶显示器(LCD)，薄膜晶体管液晶显示器(TFT-LCD)，有机发光二极管(OLED)，柔性显示器，场发射显示器(FED)以及3D显示器中的至少一种。
传感器单元130可以包括一个或更多个传感器，传感器检测车辆周围的物体，并测量到物体的距离。例如，传感器单元130可以包括摄像机或可以测量深度信息的激光雷达装置。当然，此外，还可以应用任何可以检测物体并测量距离(例如：深度)的传感器。
在这里，摄像机是可以拍摄车辆周围的图像的装置，例如，其可以是设置在车辆的前部的立体摄像机。摄像机120可以向控制单元110传送通过拍摄车辆的前方来获得的立体图像(例如：“前方图像”)。然后，控制单元110可以存储从摄像机120传送到存储单元140的立体图像，并可以将立体图像传送到地图分析单元170。
通信单元140可以包括通信模块，所述通信模块支持与设置于车辆的电子部件和/或控制单元的通信接口。例如，通信模块可以包括支持车辆网络通信(例如控制器局域网(CAN)通信、本地互连网络(LIN)通信或Flex-Ray通信)的模块。
此外，通信模块可以包括用于无线互联网连接的模块或用于短距离通信的模块。例如，无线网络技术可以包括无线LAN(WLAN)、无线宽带(WiBro)、Wi-Fi或全球微波接入互操作性(WiMax)，短距离通信技术可以包括蓝牙、ZigBee、超宽带(UWB)、射频识别(RFID)以及红外通信技术(IrDA)。
存储单元150可以存储操控用于控制车辆的狭窄道路行驶的装置100所必需的数据和/或算法。存储单元150可以存储由传感器单元130所测量的信息，例如，摄像机的前方立体图像(即：“前方图像”)，以及前方图像中的物体(或称为“前方物体”)的位置和深度信息。此外，存储单元可以通过利用传感器单元130所测量的信息来分析狭窄道路，可以识别出可行驶的区域，并且可以存储控制命令和/或用于确定车辆是否会通过狭窄道路的算法。例如，存储单元150可以包括存储介质，例如随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、可编程只读存储器(PROM)和电可擦可编程只读存储器(EEPROM)。
图像变换单元160可以从传感器单元130的摄像机获得前方2D图像，并且可以通过利用位于从摄像机或激光雷达装置获得的前方图像中的物体(即，“前方物体”)的深度信息来生成深度地图。此外，图像变换单元160可以通过利用前方物体的位置和深度信息，将深度地图变换为高度地图，将参照图2A至图2C对其进行更详细地讨论。
如图2A至图2C所示，基于由摄像机或传感器识别的前方物体的深度信息，图像变换单元160可以将图2A的前方2D图像变换为如图2B所示的深度地图，反过来，通过利用前方物体的2D位置和深度信息，图像变换单元160可以将图2B的深度地图变换为如图2C所示的3D高度地图。
在这里，图像变换单元160可以将深度地图变换为3D点云，反过来，可以将3D点云变换为高度地图。也就是说，基于前方2D图像和前方物体的深度信息，图像变换单元160可以识别前方物体的3D位置信息，并且基于所识别的3D位置信息，图像变换单元160可以将深度地图变换为3D点云。
然后，通过利用立体三角测量技术，图像变换单元160可以识别在2D图像中呈现的物体的深度信息，将参照图3对其进行更详细地讨论。
如图3所示，根据立体三角测量技术，点cl和cr是立体图像(即，左图像Ileft和右图像IRight)的图像中心点；点Ol和Or是摄像机的中心点，并对应于立体图像的图像中心点cl和cr；点Pl和Pr是左图像Ileft和右图像IRight中相互对应的点；点P检测为连接点Pl和Pr与摄像机的中心点Ol和Or的直线的交点。然后，图像变换单元160可以提取从P到摄像机的竖直距离，以作为深度(Z)信息。
在图3中，深度(Z)信息可以如公式1中所定义。
[公式1]
在公式1中，f表示摄像机的焦距，B表示左摄像机和右摄像机之间的距离，d表示左摄像机和右摄像机之间的视差。
通过这种方式，基于根据从2D图像获取的深度信息所识别的3D位置信息，图像变换单元160可以将深度地图变换为3D点云。此外，图像变换单元160可以将3D点云映射至具有特定尺寸的网格，并且通过计算3D点云的平均值以及叠加网格的高度信息，图像变换单元160可以生成高度地图。图4A和图4B更详细地描述了从3D点云生成高度地图的过程。
参照图4A和图4B，通过将对应于3D点云的(X，Y)坐标的点映射至具有特定尺寸的网格的(I，J)坐标，图像变换单元160可以生成高度地图。这里，I表示高度地图的X轴坐标，J表示高度地图的Y轴坐标，I和J可以如公式2和公式3中所定义。
[公式2]
[公式3]
在公式2和公式3中，P.cloud表示3D点云的坐标，Xrange min表示X坐标范围的最小值，Xrange max表示X坐标范围的最大值，Yrange min表示Y坐标范围的最小值，Yrange max表示Y坐标范围的最大值，Grid Size表示高度地图的一个网格的尺寸。在3D点云的Z轴中呈现的高度信息可以通过当其被映射至高度地图时的平均高度来表示。在这里，通过利用映射至高度地图网格的3D点云的计数网格地图和高度网格地图，图像变换单元160可以计算平均高度。
映射至高度地图网格的3D点云的计数网格地图和高度网格地图可以如公式4和公式5所定义。
[公式4]
Count Grid Map(I,J)＝Count Grid Map(I,J)+1
[公式5]
Height Grid Map(I,J)＝Height Grid Map(I,J)+P.Cloud(Z)
在公式4和公式5，P.Cloud(I，J)表示映射至高度地图的3D点云的坐标，Count表示3D点云映射至(I，J)坐标的计数网格地图，P.Cloud(Z)表示3D点云的Z轴值。
相应地，图像变换单元160可以通过利用公式4和公式5来计算平均高度地图，如公式6所示。
[公式6]
与此同时，当3D点云被映射至高度地图时，未映射的坐标可以在高度地图的整数坐标中生成。在这种情况下，通过如图4A和图4B所示对坐标向下取整，对应的坐标可以映射至高度地图的整数坐标。
地图分析单元170通过分析由图像变换单元160所生成的高度地图，来识别可行驶区域和车辆前方的物体。然后，通过提取位于高度地图中最低位置处的点，地图分析单元170可以估算道路表面。当道路表面对应于平坦道路时，通过利用随机样本一致算法(RANSAC)，地图分析单元170可以推导出表示位于高度地图中最低位置处的点的平面公式。
地图分析单元170根据在高度地图中所估算的道路表面，来识别车辆的可行驶区域，并将高于道路表面的点识别为物体。在这里，地图分析单元170可以在前方图像上呈现可行驶区域和高度地图上的物体，将参照图5A和图5B对其进行更详细地描述。
如图5A和图5B所示，地图分析单元170在图5A所示的前方图像和图5B所示的高度地图上呈现了可行驶区域和从高度地图识别的物体。确定单元180基于地图上所识别的可行驶区域来确定狭窄道路。
图6A至图6C描述了确定道路是否狭窄的过程。如图6A所示，确定单元180将可行驶区域变换为包括0和1的二值区域。通过将图6B所示的距离变换(DT)算法应用于图6A所示的可行驶区域所对应的二值区域，地图分析单元170可以确认从可行驶区域的中心点到周边物体的距离。
从可行驶区域的中心点到周边物体的距离代表了以可行驶区域的中心点为参考点的圆的最大半径。相应地，通过连接可行驶区域的中心点，确定单元180可以提取可行驶区域的中轴。当然，如图5B所示，在高度地图的相应区域内，确定单元180可以在所提取的可行驶区域的中轴上呈现信息。然后，呈现在可行驶区域的中轴上的值可以加倍，以使得确定单元180可以确认可行驶区域的道路宽度。
通过将包括后视镜的车辆的总宽度和所确认的可行驶区域的道路宽度进行比较，确定单元180可以确定车辆是否可以通过狭窄道路。如果确定单元180判断车辆不能通过狭窄道路，信号处理单元190可以通过显示屏来输出警告消息，或者通过扬声器或蜂鸣器来输出警告声音。
同时，如果确定单元180识别车辆可以通过狭窄道路，通过如图7所示在前方图像上显示可行驶区域，信号处理单元190使得驾驶员可以识别可行驶区域。在这里，信号处理单元190可以根据可行驶区域的中轴来控制车辆的驾驶。
现在将详细描述根据本发明的装置的工作流程。
图8是显示了根据本发明实施方案的用于控制车辆的狭窄道路行驶的方法的工作的流程图。
如图8所示，当车辆进入狭窄道路(S100)，用于控制车辆的狭窄道路行驶的装置100从立体摄像机或激光雷达装置获取前方图像上的深度地图，并基于前方图像上的深度地图来生成高度地图(S110)。
此后，通过分析基于高度地图的狭窄道路轮廓(S120)，用于控制车辆的狭窄道路行驶的装置100可以识别前方物体和可行驶区域(S130和S140)。
然后，用于控制车辆的狭窄道路行驶的装置100可以呈现已经在步骤S110生成的高度地图中识别的前方物体和可行驶区域的信息。
基于已经在步骤S130和S140识别的物体和可行驶区域，用于控制车辆的狭窄道路行驶的装置100确定车辆是否可以通过狭窄道路(S150)，如果确定车辆可以通过狭窄道路，装置100可以在前方图像上显示可行驶区域(S160)。
用于控制车辆的狭窄道路行驶的装置100继续显示可行驶区域直至车辆完全通过狭窄道路，如果车辆完全通过狭窄道路(S170)，则装置100可以终止相关的工作。
与此同时，如果在步骤S150确定车辆不能通过狭窄道路，用于控制车辆的狭窄道路行驶的装置100通过输出警告消息来通知驾驶员这一事实(S180)。
根据本发明实施方案的装置100可以实施为独立硬件装置的形式，也可以以装置100作为至少一个处理器包括在另一个硬件装置(例如，微处理器或通用计算机***)的形式驱动。
图9是显示了执行根据本发明实施方案的方法的计算***的方框图。
如9图所示，计算***1000可以包括通过总线1200来连接的至少一个处理器1100、存储器1300、用户接口输入装置1400、用户接口输出装置1500、存储区1600以及网络接口1700。
处理器1100可以是中央处理器(CPU)或半导体器件，其处理存储在存储器1300和/或存储区1600中的指令。存储器1300和存储区1600可以包括各种易失性存储介质或非易失性存储介质。例如，存储器1300可以包括只读存储器(ROM)和随机存取存储器(RAM)。
相应地，本发明的实施方案所涉及的方法或算法的步骤可以直接由处理器1100执行的硬件、软件模块或它们的组合来实现。软件模块可以位于存储介质(即，存储器1300和/或存储区1600)上，诸如RAM、闪存、ROM、EPROM、EEPROM、寄存器、硬盘、可移动磁盘或者CD-ROM。示例性存储介质连接至处理器1100，处理器1100可以从存储介质读取信息，并可以在存储介质中写入信息。在另一种方法中，存储介质可以与处理器1100集成。处理器与存储介质可以位于专用集成电路(ASIC)中。ASIC可以位于用户终端中。在另一种方法中，处理器和存储介质可以作为单独的部件存在于用户终端。
根据本发明，通过在狭窄道路上行驶期间基于深度地图和高度地图来识别可行驶区域和物体，并确定车辆是否可以安全地通过狭窄道路，车辆可以安全地通过狭窄道路。相应地，驾驶员的便利可以得到改善。
以上描述是对本发明技术精神的简单示例，在不偏离本发明的基本特征的情况下，本发明所属技术领域的技术人员可以本发明进行各种修正和改进。因此，本发明公开实施方案不对本发明的技术精神进行限制，而是说明性的，本发明的技术精神的范围不局限于本发明的实施方案。本发明的范围应该由权利要求来解释，并且可以理解的是，在同等范围内的所有技术精神都在本发明范围之内。

Claims (20)

1.一种用于控制车辆的狭窄道路行驶的装置，其包括：
图像变换单元，其利用位于车辆所行驶道路的前方图像中的物体的深度信息来生成深度地图，并且通过变换所生成的深度地图来生成前方图像的高度地图；
地图分析单元，其识别物体，并基于所生成的高度地图来计算道路的可行驶区域；
确定单元，其基于所计算的可行驶区域来确定道路是否为狭窄道路，当道路确定为狭窄道路时，确定车辆是否能够通过所述狭窄道路；
信号处理单元，其基于是否确定车辆能够通过狭窄道路，来控制车辆在狭窄道路上的行驶。
2.根据权利要求1所述的用于控制车辆的狭窄道路行驶的装置，其进一步包括：
传感器单元，其包括立体摄像机或激光雷达装置。
3.根据权利要求2所述的用于控制车辆的狭窄道路行驶的装置，其中，所述图像变换单元利用立体摄像机或激光雷达装置，来获取前方图像中的物体的深度信息。
4.根据权利要求1所述的用于控制车辆的狭窄道路行驶的装置，其中，所述图像变换单元通过变换所述深度地图来生成3D点云，并通过变换所生成的3D点云来生成所述高度地图。
5.根据权利要求4所述的用于控制车辆的狭窄道路行驶的装置，其中，所述图像变换单元基于前方图像的信息和深度信息，来识别前方图像中的物体的3D位置，并通过基于所识别的3D位置来变换所述深度地图，以生成3D点云。
6.根据权利要求4所述的用于控制车辆的狭窄道路行驶的装置，其中，所述图像变换单元通过将所述3D点云映射至具有预定尺寸的所述高度地图的网格，来生成所述高度地图。
7.根据权利要求6所述的用于控制车辆的狭窄道路行驶的装置，其中，所述图像变换单元计算在3D点云的Z轴上呈现的高度的平均高度，并将所计算的平均高度映射至所述高度地图。
8.根据权利要求7所述的用于控制车辆的狭窄道路行驶的装置，其中，所述图像变换单元利用映射至所述高度地图的网格的3D点云的数量以及在3D点云的Z轴上呈现的高度信息，来计算所述平均高度。
9.根据权利要求6所述的用于控制车辆的狭窄道路行驶的装置，其中，当3D点云的坐标未映射至高度地图时，所述图像变换单元通过对未映射的坐标向下取整，将未映射的坐标映射至高度地图的整数坐标。
10.根据权利要求1所述的用于控制车辆的狭窄道路行驶的装置，其中，所述地图分析单元通过提取位于高度地图的最低位置处的点来估算道路表面，基于所估算的道路表面来计算可行驶区域，并将高于所估算的道路表面的点识别为物体。
11.根据权利要求1所述的用于控制车辆的狭窄道路行驶的装置，其中，所述确定单元将可行驶区域变换为二值区域，并通过对变换后的二值区域应用距离变换算法，来计算从可行驶区域的中心点到周边物体的距离。
12.根据权利要求11所述的用于控制车辆的狭窄道路行驶的装置，其中，所述确定单元以一个或更多个圆来呈现可行驶区域，所述一个或更多个圆的半径为从可行驶区域的中心点到周边物体的距离，并通过连接所述一个或更多个圆的中心点来提取可行驶区域的中轴。
13.根据权利要求12所述的用于控制车辆的狭窄道路行驶的装置，其中，所述确定单元根据可行驶区域的中轴来识别可行驶区域的道路宽度，并通过将所确定的道路宽度和车辆的宽度进行比较来确定车辆是否能够通过狭窄道路。
14.根据权利要求12所述的用于控制车辆的狭窄道路行驶的装置，当确定车辆能够通过狭窄道路时，所述信号处理单元通过显示器来显示可行驶区域。
15.根据权利要求12所述的用于控制车辆的狭窄道路行驶的装置，其中，所述信号处理单元基于可行驶区域内的中轴来控制车辆在狭窄道路上的行驶。
16.根据权利要求1所述的用于控制车辆的狭窄道路行驶的装置，当确定车辆不能通过狭窄道路时，所述信号处理单元输出警告消息。
17.一种用于控制车辆的狭窄道路行驶的方法，所述方法包括：
利用位于车辆所行驶道路的前方图像中的物体的深度信息来生成深度地图；
通过变换所生成的深度地图来生成前方图像的高度地图；
识别物体，并基于所生成的高度地图来计算道路的可行驶区域；
基于所计算的可行驶区域来确定道路是否为狭窄道路；
当道路确定为狭窄道路时，确定车辆是否能够通过所述狭窄道路；
基于是否确定车辆能够通过狭窄道路，来控制车辆在狭窄道路上的行驶。
18.根据权利要求17所述的用于控制车辆的狭窄道路行驶的方法，其中，控制车辆在狭窄道路上的行驶包括：
当确定车辆能够通过狭窄道路时，通过显示器来显示可行驶区域；
当确定车辆不能通过狭窄道路时，输出警告消息。
19.根据权利要求17所述的用于控制车辆的狭窄道路行驶的方法，其中，变换深度地图包括：
基于前方图像的信息和深度信息，来识别前方图像中的物体的3D位置；
通过基于所识别的3D位置变换所述深度地图，以生成3D点云；
通过将所述3D点云映射至具有预定尺寸的所述高度地图的网格，来变换所述3D点云，从而生成所述高度地图。
20.根据权利要求17所述的用于控制车辆的狭窄道路行驶的方法，其中，确定车辆能否通过狭窄道路包括：
以一个或更多个圆来呈现可行驶区域，所述一个或更多个圆的半径为从可行驶区域的中心点到周边物体的距离；
通过连接所述一个或更多个圆的中心点来提取所述可行驶区域的中轴；
根据所述可行驶区域的中轴来计算道路的宽度；
通过将所计算的道路宽度和车辆的宽度进行比较，来确定车辆是否能够通过狭窄道路。
CN201710841320.3A 2016-12-14 2017-09-18 用于控制车辆的狭窄道路行驶的装置和方法 Active CN108216242B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160170213A KR102406502B1 (ko) 2016-12-14 2016-12-14 차량의 협로 주행 안내 장치 및 방법
KR10-2016-0170213 2016-12-14

Publications (2)

Publication Number Publication Date
CN108216242A true CN108216242A (zh) 2018-06-29
CN108216242B CN108216242B (zh) 2022-07-05

Family

ID=62490047

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201710841320.3A Active CN108216242B (zh) 2016-12-14 2017-09-18 用于控制车辆的狭窄道路行驶的装置和方法

Country Status (3)

Country Link
US (1) US10466715B2 (zh)
KR (1) KR102406502B1 (zh)
CN (1) CN108216242B (zh)

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110525360A (zh) * 2019-08-26 2019-12-03 广汽蔚来新能源汽车科技有限公司 基于车载终端的辅助驾驶方法、装置、***及存储介质
WO2020087737A1 (zh) * 2018-10-30 2020-05-07 北京小米移动软件有限公司 通行确定方法及装置、电子设备、计算机可读存储介质
CN111208817A (zh) * 2020-01-02 2020-05-29 惠州拓邦电气技术有限公司 窄道通行方法、装置、移动装置以及计算机可读存介质
CN111325999A (zh) * 2018-12-14 2020-06-23 奥迪股份公司 车辆驾驶辅助方法、装置、计算机设备和存储介质
CN111578955A (zh) * 2019-02-15 2020-08-25 维布络有限公司 为自动驾驶安全导航确定可行驶道路区域的方法和***
CN111967384A (zh) * 2020-08-17 2020-11-20 上海眼控科技股份有限公司 车辆信息处理方法、装置、设备及计算机可读存储介质
CN112009469A (zh) * 2019-05-28 2020-12-01 奥迪股份公司 车辆驾驶辅助***、包括其的车辆及方法和介质
CN112673232A (zh) * 2018-08-30 2021-04-16 大陆汽车有限责任公司 车道地图制作装置
CN112805180A (zh) * 2018-10-01 2021-05-14 法雷奥照明公司 用于控制用于投射车辆的像素化光束的模块的方法
CN113002548A (zh) * 2019-12-19 2021-06-22 华为技术有限公司 高度的确定方法和装置
CN113433942A (zh) * 2021-06-30 2021-09-24 南京理工大学 一种基于最优航向角的长轴车辆路径跟踪控制方法
CN114435469A (zh) * 2020-11-03 2022-05-06 北京地平线机器人技术研发有限公司 一种车辆导向提示方法及装置
CN115951672A (zh) * 2022-12-15 2023-04-11 锐趣科技(北京)有限公司 一种机器人通过狭窄通道的方法

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20190005667A1 (en) * 2017-07-24 2019-01-03 Muhammad Zain Khawaja Ground Surface Estimation
KR102408743B1 (ko) * 2017-07-27 2022-06-14 주식회사 에이치엘클레무브 자동차의 도로 진입 가능 여부를 판단하는 방법 및 시스템
JP2020034830A (ja) * 2018-08-31 2020-03-05 ソニーセミコンダクタソリューションズ株式会社 撮像装置、補正方法及びコンピュータプログラム
JP7462416B2 (ja) * 2019-12-27 2024-04-05 アマノ株式会社 自律走行作業装置
CN111231831B (zh) * 2020-03-09 2021-08-13 威马智慧出行科技（上海）有限公司 车辆窄路通行检测方法、电子设备及汽车
KR20220027359A (ko) 2020-08-26 2022-03-08 현대자동차주식회사 자율주행을 위한 높이 맵 격자간격 조정방법
CN112947464A (zh) * 2021-03-05 2021-06-11 上海有个机器人有限公司 机器人通过狭窄空间方法、装置、终端及存储介质
US20240161260A1 (en) * 2021-03-11 2024-05-16 Nec Corporation Image analysis apparatus, image analysis method, and computer readable medium storing program
KR102568565B1 (ko) * 2021-07-28 2023-08-23 한국전력공사 시설물 관리 로봇 및 그 방법
US11938928B2 (en) 2021-11-03 2024-03-26 Honda Motor Co., Ltd. Systems and methods for vehicular navigation of narrow gaps
CN114347990B (zh) * 2021-12-29 2024-06-07 深圳云天励飞技术股份有限公司 通过限宽门柱的车辆控制方法及相关设备
CN114998863B (zh) * 2022-05-24 2023-12-12 北京百度网讯科技有限公司 目标道路识别方法、装置、电子设备以及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1116097A (ja) * 1997-06-25 1999-01-22 Fuji Heavy Ind Ltd 車両用運転支援装置
JP2004168304A (ja) * 2003-12-17 2004-06-17 Fuji Heavy Ind Ltd 車輌用走行案内装置
JP2007156777A (ja) * 2005-12-05 2007-06-21 Alpine Electronics Inc ナビゲーションシステムにおける地図表示装置
US20090213111A1 (en) * 2005-04-19 2009-08-27 Thomas Jung Method for three-dimensional depiction of a digital road map
US20120050489A1 (en) * 2010-08-30 2012-03-01 Honda Motor Co., Ltd. Road departure warning system
CN106052697A (zh) * 2016-05-24 2016-10-26 百度在线网络技术（北京）有限公司 无人车、无人车定位方法、装置和***

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3522317B2 (ja) 1993-12-27 2004-04-26 富士重工業株式会社 車輌用走行案内装置
JP3827804B2 (ja) * 1997-04-09 2006-09-27 富士重工業株式会社 車両用運転支援装置
JP4094246B2 (ja) 2001-05-10 2008-06-04 アルパイン株式会社 車載用ナビゲーション装置
JP2005326963A (ja) 2004-05-12 2005-11-24 Fujitsu Ten Ltd 運転支援装置
US8699755B2 (en) * 2009-02-20 2014-04-15 Navteq B.V. Determining travel path features based on retroreflectivity
WO2012037157A2 (en) * 2010-09-13 2012-03-22 Alt Software (Us) Llc System and method for displaying data having spatial coordinates
KR101438876B1 (ko) 2011-12-22 2014-09-05 현대자동차주식회사 차량용 협로주행 안전 제공 장치 및 방법
US9195914B2 (en) * 2012-09-05 2015-11-24 Google Inc. Construction zone sign detection
US9221461B2 (en) * 2012-09-05 2015-12-29 Google Inc. Construction zone detection using a plurality of information sources
US9488492B2 (en) * 2014-03-18 2016-11-08 Sri International Real-time system for multi-modal 3D geospatial mapping, object recognition, scene annotation and analytics
US8788146B1 (en) * 2013-01-08 2014-07-22 Ford Global Technologies, Llc Adaptive active suspension system with road preview
US9110169B2 (en) * 2013-03-08 2015-08-18 Advanced Scientific Concepts, Inc. LADAR enabled impact mitigation system
WO2014169238A1 (en) * 2013-04-11 2014-10-16 Digimarc Corporation Methods for object recognition and related arrangements
US20150120244A1 (en) 2013-10-31 2015-04-30 Here Global B.V. Method and apparatus for road width estimation
GB2520338A (en) * 2013-11-19 2015-05-20 Nokia Corp Automatic scene parsing
US9747505B2 (en) * 2014-07-07 2017-08-29 Here Global B.V. Lane level traffic
US9519061B2 (en) * 2014-12-26 2016-12-13 Here Global B.V. Geometric fingerprinting for localization of a device
US9792521B2 (en) * 2014-12-26 2017-10-17 Here Global B.V. Extracting feature geometries for localization of a device
US9803985B2 (en) * 2014-12-26 2017-10-31 Here Global B.V. Selecting feature geometries for localization of a device
US10028102B2 (en) * 2014-12-26 2018-07-17 Here Global B.V. Localization of a device using multilateration
WO2016118499A1 (en) * 2015-01-19 2016-07-28 The Regents Of The University Of Michigan Visual localization within lidar maps
JP6160634B2 (ja) * 2015-02-09 2017-07-12 トヨタ自動車株式会社 走行路面検出装置及び走行路面検出方法
US10036801B2 (en) * 2015-03-05 2018-07-31 Big Sky Financial Corporation Methods and apparatus for increased precision and improved range in a multiple detector LiDAR array
US9589355B2 (en) * 2015-03-16 2017-03-07 Here Global B.V. Guided geometry extraction for localization of a device
CN105260699B (zh) * 2015-09-10 2018-06-26 百度在线网络技术（北京）有限公司 一种车道线数据的处理方法及装置
NL2016542B1 (en) * 2016-04-04 2017-10-10 Fugro N V Spatial data analysis.
US10859395B2 (en) * 2016-12-30 2020-12-08 DeepMap Inc. Lane line creation for high definition maps for autonomous vehicles
US10354433B2 (en) * 2017-07-11 2019-07-16 Here Global B.V. Method and apparatus for generating an abstract texture for a building facade or model
US11676296B2 (en) * 2017-08-11 2023-06-13 Sri International Augmenting reality using semantic segmentation
US11747444B2 (en) * 2018-08-14 2023-09-05 Intel Corporation LiDAR-based object detection and classification

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1116097A (ja) * 1997-06-25 1999-01-22 Fuji Heavy Ind Ltd 車両用運転支援装置
JP2004168304A (ja) * 2003-12-17 2004-06-17 Fuji Heavy Ind Ltd 車輌用走行案内装置
US20090213111A1 (en) * 2005-04-19 2009-08-27 Thomas Jung Method for three-dimensional depiction of a digital road map
JP2007156777A (ja) * 2005-12-05 2007-06-21 Alpine Electronics Inc ナビゲーションシステムにおける地図表示装置
US20120050489A1 (en) * 2010-08-30 2012-03-01 Honda Motor Co., Ltd. Road departure warning system
CN106052697A (zh) * 2016-05-24 2016-10-26 百度在线网络技术（北京）有限公司 无人车、无人车定位方法、装置和***

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
江文婷等: "《基于增量计算的大规模场景致密语义地图构建》", 《浙江大学学报》 *

Cited By (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112673232A (zh) * 2018-08-30 2021-04-16 大陆汽车有限责任公司 车道地图制作装置
US11993201B2 (en) 2018-10-01 2024-05-28 Valeo Vision Method for controlling modules for projecting pixelated light beams for a vehicle
CN112805180A (zh) * 2018-10-01 2021-05-14 法雷奥照明公司 用于控制用于投射车辆的像素化光束的模块的方法
US11351994B2 (en) 2018-10-30 2022-06-07 Beijing Xiaomi Mobile Software Co., Ltd. Passage determination method and device
WO2020087737A1 (zh) * 2018-10-30 2020-05-07 北京小米移动软件有限公司 通行确定方法及装置、电子设备、计算机可读存储介质
CN111325999A (zh) * 2018-12-14 2020-06-23 奥迪股份公司 车辆驾驶辅助方法、装置、计算机设备和存储介质
CN111578955A (zh) * 2019-02-15 2020-08-25 维布络有限公司 为自动驾驶安全导航确定可行驶道路区域的方法和***
CN112009469A (zh) * 2019-05-28 2020-12-01 奥迪股份公司 车辆驾驶辅助***、包括其的车辆及方法和介质
CN110525360A (zh) * 2019-08-26 2019-12-03 广汽蔚来新能源汽车科技有限公司 基于车载终端的辅助驾驶方法、装置、***及存储介质
CN113002548B (zh) * 2019-12-19 2022-10-28 华为技术有限公司 高度的确定方法和装置
CN113002548A (zh) * 2019-12-19 2021-06-22 华为技术有限公司 高度的确定方法和装置
CN111208817A (zh) * 2020-01-02 2020-05-29 惠州拓邦电气技术有限公司 窄道通行方法、装置、移动装置以及计算机可读存介质
CN111208817B (zh) * 2020-01-02 2024-03-15 惠州拓邦电气技术有限公司 窄道通行方法、装置、移动装置以及计算机可读存介质
CN111967384A (zh) * 2020-08-17 2020-11-20 上海眼控科技股份有限公司 车辆信息处理方法、装置、设备及计算机可读存储介质
CN114435469A (zh) * 2020-11-03 2022-05-06 北京地平线机器人技术研发有限公司 一种车辆导向提示方法及装置
CN114435469B (zh) * 2020-11-03 2023-04-28 北京地平线机器人技术研发有限公司 一种车辆导向提示方法及装置
CN113433942A (zh) * 2021-06-30 2021-09-24 南京理工大学 一种基于最优航向角的长轴车辆路径跟踪控制方法
CN115951672A (zh) * 2022-12-15 2023-04-11 锐趣科技(北京)有限公司 一种机器人通过狭窄通道的方法
CN115951672B (zh) * 2022-12-15 2024-04-12 锐趣科技(北京)有限公司 一种机器人通过狭窄通道的方法

Also Published As

Publication number Publication date
US10466715B2 (en) 2019-11-05
CN108216242B (zh) 2022-07-05
US20180164832A1 (en) 2018-06-14
KR20180068484A (ko) 2018-06-22
KR102406502B1 (ko) 2022-06-10

Similar Documents

Publication Publication Date Title
CN108216242A (zh) 用于控制车辆的狭窄道路行驶的装置和方法
CN114390990B (zh) 用于确定目标车辆速度的***和方法
JP6934544B2 (ja) 車輪姿勢を使用した将来の進行方向の決定
US11087186B2 (en) Fixation generation for machine learning
CN114080634B (zh) 使用锚定轨迹的代理轨迹预测
US10809081B1 (en) User interface and augmented reality for identifying vehicles and persons
US11740352B2 (en) Obstacle recognition device, vehicle system including the same, and method thereof
US10837788B1 (en) Techniques for identifying vehicles and persons
US11938926B2 (en) Polyline contour representations for autonomous vehicles
EP3361278A1 (en) Autonomous vehicle localization based on walsh kernel projection technique
EP3327464A1 (en) Algorithm and infrastructure for robust and efficient vehicle localization
US9823661B2 (en) Occupancy grid map for a vehicle
WO2018221453A1 (ja) 出力装置、制御方法、プログラム及び記憶媒体
CN112752950A (zh) 修改与地图数据相关联的地图元素
CN107339997A (zh) 自主车辆的路径规划装置及方法
CN108263383A (zh) 在协同自适应巡航控制***中控制速度的装置和方法
US11110928B2 (en) Information processing apparatus, vehicle, information processing method, and computer program product
CN108216241A (zh) 确定自主驾驶车辆的控制特性
JP2017072422A (ja) 情報処理装置、制御方法、プログラム及び記憶媒体
US20220253065A1 (en) Information processing apparatus, information processing method, and information processing program
CN112115857A (zh) 智能汽车的车道线识别方法、装置、电子设备及介质
US20230050706A1 (en) Associating perceived and mapped lane edges for localization
CN116529561A (zh) 基于单目的对象检测的***和方法
JP6705270B2 (ja) 移動体の自動運転制御システム
CN113544538A (zh) 使用速度和位置信息识别雷达反射

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant