CN112284400B - 车辆的定位方法、装置、电子设备及计算机可读存储介质 - Google Patents

车辆的定位方法、装置、电子设备及计算机可读存储介质 Download PDF

Info

Publication number
CN112284400B
CN112284400B CN202011554483.1A CN202011554483A CN112284400B CN 112284400 B CN112284400 B CN 112284400B CN 202011554483 A CN202011554483 A CN 202011554483A CN 112284400 B CN112284400 B CN 112284400B
Authority
CN
China
Prior art keywords
lane
positioning
vehicle
target
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011554483.1A
Other languages
English (en)
Other versions
CN112284400A (zh
Inventor
温拓朴
郑东方
徐一梁
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202011554483.1A priority Critical patent/CN112284400B/zh
Publication of CN112284400A publication Critical patent/CN112284400A/zh
Application granted granted Critical
Publication of CN112284400B publication Critical patent/CN112284400B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/28Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network with correlation of data from several navigational instruments
    • G01C21/30Map- or contour-matching
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • G01S19/421Determining position by combining or switching between position solutions or signals derived from different satellite radio beacon positioning systems; by combining or switching between position solutions or signals derived from different modes of operation in a single system
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S19/00Satellite radio beacon positioning systems; Determining position, velocity or attitude using signals transmitted by such systems
    • G01S19/38Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system
    • G01S19/39Determining a navigation solution using signals transmitted by a satellite radio beacon positioning system the satellite radio beacon positioning system transmitting time-stamped messages, e.g. GPS [Global Positioning System], GLONASS [Global Orbiting Navigation Satellite System] or GALILEO
    • G01S19/42Determining position
    • G01S19/48Determining position by combining or switching between position solutions derived from the satellite radio beacon positioning system and position solutions derived from a further system
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/56Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G06V20/588Recognition of the road, e.g. of lane markings; Recognition of the vehicle driving pattern in relation to the road

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • Theoretical Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Navigation (AREA)
  • Traffic Control Systems (AREA)

Abstract

本申请提供了一种车辆的定位方法、装置、电子设备及计算机可读存储介质,涉及定位技术领域。该方法包括:获取所述车辆当前的定位信息;采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息;基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,并基于所述第二道路信息确定出所述车辆的至少一个初始位姿;基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果;基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。本申请实现了不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且减少了计算量,提升了算法效率。

Description

车辆的定位方法、装置、电子设备及计算机可读存储介质
技术领域
本申请涉及定位技术领域,具体而言,本申请涉及一种车辆的定位方法、装置、电子设备及计算机可读存储介质。
背景技术
GNSS(Global Navigation Satellite System,全球导航卫星***),是能在地球表面或近地空间的任何地点为用户提供全天候的三维坐标和速度以及时间信息的空基无线电导航定位***,可以用于车辆定位。
现有的车辆定位方法在低精度GNSS情况下存在以下问题:
1)由于现有的技术在解算位姿的时候依赖初值,当GNSS误差较大的时候,难以提供正确的初值,导致定位的结果会陷入局部最优,从而定位在错误的车道上,导致定位精度较差。比如车辆在辅路的时候,会定位到主路上去;
2)如若要获得较好的初值,需要以GNSS信息为中心随机生成足够多的采样点,通过以每个采样点为初值,计算地图匹配定位的结果。但是大量的采样点计算会降低算法的效率,甚至无法实时地输出定位结果。
发明内容
本申请提供了一种车辆的定位方法、装置、电子设备及计算机可读存储介质,可以解决现有的车辆定位精度较差、效率较低的问题。所述技术方案如下:
一方面,提供了一种车辆的定位方法,该方法包括:
获取所述车辆当前的定位信息;
采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息;
基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,并基于所述第二道路信息确定出所述车辆的至少一个初始位姿;
基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果;
基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。
在一个或多个实施例中,所述采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息,包括:
通过所述车辆携带的图像采集设备采集得到所述当前行驶道路的目标图像;
对所述目标图像进行车道线识别,将识别得到的至少一条识别车道线作为所述第一道路信息。
在一个或多个实施例中,所述预设地图包括至少一条车道线和至少一条车道中心线;每条车道线由至少一个车道线离散点组成,每条车道中心线由至少一个车道中心线离散点组成;
所述基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,包括:
确定出所述定位信息在所述预设地图中对应的位置点,并确定出在所述位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线;
从所述至少一条目标车道线的各个车道线离散点中,确定出与所述位置点的距离不超过预设距离的目标车道线离散点,得到车道线离散点集合;
从每条目标车道中心线的至少一个车道中心线离散点中,分别确定出与所述位置点的距离不超过所述预设距离,且所述距离最小的目标车道中心线离散点,得到车道中心线离散点集合;
将所述至少一条目标车道线、所述至少一条目标车道中心线、所述车道线离散点集合,以及所述车道中心线离散点集合作为所述第二道路信息。
在一个或多个实施例中,所述基于所述第二道路信息确定出所述车辆的至少一个初始位姿,包括:
确定所述车辆相对于所述定位信息的旋转矩阵;
将所述旋转矩阵与车道中心线离散点集合中的至少一个目标车道中心线离散点分别进行组合,得到至少一个第一位姿矩阵,并将所述至少一个第一位姿矩阵作为初始位姿。
在一个或多个实施例中,所述确定出所述车辆相对于所述定位信息的旋转矩阵,包括:
基于任一条目标车道中心线的延伸方向确定出第一向量;
对车道线离散点集合中的各个目标车道线离散点进行拟合,得到第二向量;
基于所述第一向量与所述第二向量进行运算,得到第三向量;
将所述第一向量、所述第二向量,以及所述第三向量进行组合,得到所述旋转矩阵。
在一个或多个实施例中,所述基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果,包括:
将旋转矩阵与车道线离散点集合中的至少一个目标车道线离散点分别进行组合,得到至少一个第二位姿矩阵;
根据预设的投影模型计算出至少一个目标车道线离散点在所述目标图像中对应的至少一个第一投影点;
确定出所述至少一个第一投影点在所述目标图像中各自对应的车道像素点;所述车道像素点为所述目标图像中属于识别车道线的像素点;
计算出所述至少一个第一投影点与各自对应的车道像素点的第一距离;
基于所述至少一个第二位姿矩阵和所述至少一个第一距离,通过目标函数计算得到所述至少一个初始位姿各自对应的实际位姿,并将各个实际位姿作为定位结果。
在一个或多个实施例中,基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果,包括:
根据所述投影模型计算出所述预设地图中各个定位结果在所述目标图像中各自对应的第二投影点;
计算出各个第二投影点与各个车道像素点的第二距离;
将最小第二距离对应的定位结果作为所述目标定位结果。
另一方面,提供了一种车辆的定位装置,该装置包括:
定位信息获取模块,用于获取所述车辆当前的定位信息;
第一道路信息获取模块,用于采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息;
第二道路信息获取模块,用于基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息;
初始位姿确定模块,用于基于所述第二道路信息确定出所述车辆的至少一个初始位姿;
定位结果确定模块,用于基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果;
筛选模块,用于基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。
在一个或多个实施例中,所述第一道路信息获取模块,包括:
采集子模块,用于通过所述车辆携带的图像采集设备采集得到所述当前行驶道路的目标图像;
识别子模块,用于对所述目标图像进行车道线识别,将识别得到的至少一条识别车道线作为所述第一道路信息。
在一个或多个实施例中,所述预设地图包括至少一条车道线和至少一条车道中心线;每条车道线由至少一个车道线离散点组成,每条车道中心线由至少一个车道中心线离散点组成;
所述第二道路信息获取模块,包括:
第一处理子模块,用于确定出所述定位信息在所述预设地图中对应的位置点,并确定出在所述位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线;
第二处理子模块,用于从所述至少一条目标车道线的各个车道线离散点中,确定出与所述位置点的距离不超过预设距离的目标车道线离散点,得到车道线离散点集合;
第三处理子模块,用于从每条目标车道中心线的至少一个车道中心线离散点中,分别确定出与所述位置点的距离不超过所述预设距离,且所述距离最小的目标车道中心线离散点,得到车道中心线离散点集合;
第四处理子模块,用于将所述至少一条目标车道线、所述至少一条目标车道中心线、所述车道线离散点集合,以及所述车道中心线离散点集合作为所述第二道路信息。
在一个或多个实施例中,所述初始位姿确定模块,包括:
旋转矩阵确定子模块,用于确定所述车辆相对于所述定位信息的旋转矩阵;
第一生成子模块,用于将所述旋转矩阵与车道中心线离散点集合中的至少一个目标车道中心线离散点分别进行组合,得到至少一个第一位姿矩阵,并将所述至少一个第一位姿矩阵作为初始位姿。
在一个或多个实施例中,所述旋转矩阵确定子模块,包括:
第一向量确定单元,用于基于任一条目标车道中心线的延伸方向确定出第一向量;
第二向量确定单元,用于对车道线离散点集合中的各个目标车道线离散点进行拟合,得到第二向量;
第三向量确定单元,用于基于所述第一向量与所述第二向量进行运算,得到第三向量;
生成单元,用于将所述第一向量、所述第二向量,以及所述第三向量进行组合,得到所述旋转矩阵。
在一个或多个实施例中,所述定位结果确定模块,包括:
第二生成子模块,用于将旋转矩阵与车道线离散点集合中的至少一个目标车道线离散点分别进行组合,得到至少一个第二位姿矩阵;
第一计算子模块,用于根据预设的投影模型计算出至少一个目标车道线离散点在所述目标图像中对应的至少一个第一投影点;
第五处理子模块,用于确定出所述至少一个第一投影点在所述目标图像中各自对应的车道像素点;所述车道像素点为所述目标图像中属于识别车道线的像素点;
第二计算子模块,用于计算出所述至少一个第一投影点与各自对应的车道像素点的第一距离;
第六处理子模块,用于基于所述至少一个第二位姿矩阵和所述至少一个第一距离,通过目标函数计算得到所述至少一个初始位姿各自对应的实际位姿,并将各个实际位姿作为定位结果。
在一个或多个实施例中,筛选模块,包括:
第三计算子模块,用于根据所述投影模型计算出所述预设地图中各个定位结果在所述目标图像中各自对应的第二投影点;
第四计算子模块,用于计算出各个第二投影点与各个车道像素点的第二距离;
第五处理子模块,用于将最小第二距离对应的定位结果作为所述目标定位结果。
另一方面,提供了一种电子设备,该电子设备包括:
处理器、存储器和总线;
所述总线,用于连接所述处理器和所述存储器;
所述存储器,用于存储操作指令;
所述处理器,用于通过调用所述操作指令,可执行指令使处理器执行如本申请的第一方面所示的车辆的定位方法对应的操作。
另一方面,提供了一种计算机可读存储介质,计算机可读存储介质上存储有计算机程序,该程序被处理器执行时实现本申请第一方面所示的车辆的定位方法。
本申请提供的技术方案带来的有益效果是:
获取所述车辆当前的定位信息,然后采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息,再基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,并基于所述第二道路信息确定出所述车辆的至少一个初始位姿,接送基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果,进一步基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。这样,基于视觉感知获取车辆的当前行驶道路的第一道路信息,同时,基于定位信息提供车辆在预设地图中可能所在的至少一个车道,并获取各个车道各自对应的第二道路信息,然后对每个车道基于第一道路信息和各个第二道路信息进行匹配定位,最终得到车辆所在的正确的车道(定位结果)。
进一步,即使是在定位信息弱的情况下,本发明实施例仍然可以先确定出多个可能存在误差的初始位姿,然后基于视觉感知和预设地图从多个初始位姿中确定出最终的定位结果,不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且由于定位信息弱,导致采样点的数量较少,从而减少了计算量,进而提升了算法效率。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对本申请实施例描述中所需要使用的附图作简单地介绍。
图1为本申请一个实施例提供的一种车辆的定位方法的应用环境示意图;
图2为本申请一个实施例提供的一种车辆的定位方法的流程示意图;
图3为本申请图2中步骤S202的具体流程示意图;
图4为本申请图2中步骤S203部分步骤的流程示意图一;
图5为本申请图2中步骤S203部分步骤的流程示意图二;
图6为本申请图5中步骤S501的具体流程示意图;
图7为本申请图2中步骤S204的具体流程示意图;
图8为本申请图2中步骤S205的具体流程示意图;
图9为本申请又一实施例提供的一种车辆的定位装置的结构示意图;
图10为本申请又一实施例提供的一种车辆的定位的电子设备的结构示意图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,仅用于解释本申请,而不能解释为对本发明的限制。
本技术领域技术人员可以理解,除非特意声明,这里使用的单数形式“一”、“一个”、“所述”和“该”也可包括复数形式。应该进一步理解的是,本申请的说明书中使用的措辞“包括”是指存在所述特征、整数、步骤、操作、元件和/或组件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、组件和/或它们的组。应该理解,当我们称元件被“连接”或“耦接”到另一元件时,它可以直接连接或耦接到其他元件,或者也可以存在中间元件。此外,这里使用的“连接”或“耦接”可以包括无线连接或无线耦接。这里使用的措辞“和/或”包括一个或更多个相关联的列出项的全部或任一单元和全部组合。
为使本申请的目的、技术方案和优点更加清楚,下面将结合附图对本申请实施方式作进一步地详细描述。
本申请提供的车辆的定位方法、装置、电子设备和计算机可读存储介质,旨在解决现有技术的如上技术问题。
下面以具体地实施例对本申请的技术方案以及本申请的技术方案如何解决上述技术问题进行详细说明。下面这几个具体的实施例可以相互结合,对于相同或相似的概念或过程可能在某些实施例中不再赘述。下面将结合附图,对本申请的实施例进行描述。
本发明实施例提供了一种车辆的定位方法的应用环境,参见图1,该应用环境包括:第一设备101和第二设备102。第一设备101和第二设备102之间通过网络连接,第一设备101为访问设备,第二设备102为被访问设备。第一设备101可以为车辆中的终端设备,第二设备102可以为服务器。在本发明实施例中,一种车辆的定位方法既可以在第一设备中执行,也可以在第二设备中执行,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
其中,终端设备可以具有如下特点:
(1)在硬件体系上,设备具备中央处理器、存储器、输入部件和输出部件,也就是说,设备往往是具备通信功能的微型计算机设备。另外,还可以具有多种输入方式,诸如键盘、鼠标、触摸屏、送话器和摄像头等,并可以根据需要进行调整输入。同时,设备往往具有多种输出方式,如受话器、显示屏等,也可以根据需要进行调整;
(2)在软件体系上,设备必须具备操作***,如Windows Mobile、Symbian、Palm、Android、iOS等。同时,这些操作***越来越开放,基于这些开放的操作***平台开发的个性化应用程序层出不穷,如通信簿、日程表、记事本、计算器以及各类游戏等,极大程度地满足了个性化用户的需求;
(3)在通信能力上,设备具有灵活的接入方式和高带宽通信性能,并且能根据所选择的业务和所处的环境,自动调整所选的通信方式,从而方便用户使用。设备可以支持包括但不限于3GPP(3rd Generation Partnership Project,第三代合作伙伴计划)、4GPP(4rdGeneration Partnership Project,***合作伙伴计划)、5GPP(5rd GenerationPartnership Project,第五代合作伙伴计划)、LTE(Long Term Evolution,长期演进)、WIMAX(World Interoperability for Microwave Access,全球微波接入互操作性)的移动通信、基于TCP/IP(Transmission Control Protocol/Internet Protocol,传输控制协议/网际协议)、UDP(User Datagram Protocol,用户数据报协议)协议的计算机网络通信以及基于蓝牙、红外传输标准的近距无线传输方式,不仅支持语音业务,更支持多种无线数据业务;
(4)在功能使用上,设备更加注重人性化、个性化和多功能化。随着计算机技术的发展,设备从“以设备为中心”的模式进入“以人为中心”的模式,集成了嵌入式计算、控制技术、人工智能技术以及生物认证技术等,充分体现了以人为本的宗旨。由于软件技术的发展,设备可以根据个人需求调整设置,更加个性化。同时,设备本身集成了众多软件和硬件,功能也越来越强大。
服务器可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式***,还可以是提供云计算服务的云服务器。
在上述应用环境中可以执行一种车辆的定位方法,如图2所示,该方法包括:
步骤S201,获取车辆当前的定位信息;
其中,定位信息可以是GNSS信息。在本发明实施例中,车辆中的终端设备可以从GNSS获取GNSS信息作为定位信息,定位信息中包括但不限于WGS84(World GeodeticSystem 1984,世界测地***1984)的经纬度和高度。WGS84是一种坐标***,坐标***的原点为地球质心。
进一步,获取定位信息可以是在车辆中的终端设备启动时获取。比如,终端设备通电后,就可以从GNSS获取GNSS信息了。
需要说明的是,定位信息可以是GNSS信息,包括但不限于GPS(GlobalPositioning System,全球定位***)、GLONASS(GLOBAL NAVIGATION SATELLITE SYSTEM,全球卫星导航***)、Galileo(Galileo satellite navigation system,伽利略卫星导航***)、BDS(BeiDou Navigation Satellite System,中国北斗卫星导航***)等用于定位的信息,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
步骤S202,采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息;
在本发明实施例中,车辆中还可以安装图像采集设备,比如行车记录仪,用于采集车辆周围环境的目标图像,周围环境包括但不限于车辆的当前行驶道路。
车辆在行驶的过程中,可以实时采集多张目标图像,也可以每隔预设时间段采集,比如每隔1秒采集一张目标图像,还可以通过其它方式采集目标图像,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
采集到目标图像后,车辆中的终端设备对该目标图像进行识别,获取当前行驶道路的第一道路信息。
步骤S203,基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿;
车辆中的终端设备获取到定位信息之后,可以将该定位信息定位到预设地图中的当前行驶道路上,从而从预设地图中获取当前行驶道路的第二道路信息,并基于该第二道路信息确定出车辆的至少一个初始位姿。
步骤S204,基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果;
在确定出第一道路信息、第二道路信息和至少一个初始位姿之后,就可以基于第一道路信息和第二道路信息确定出每个初始位姿各自对应的定位结果。其中,定位结果可以是每个初始位姿对应的精确的实际位姿。
步骤S205,基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。
确定出各个定位结果之后,即可基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果,也就是预设地图中,与车辆在当前行驶道路所处的位置最接近的位姿。
在本发明实施例中,获取车辆当前的定位信息,然后采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息,再基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿,接送基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果,进一步基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。这样,基于视觉感知获取车辆的当前行驶道路的第一道路信息,同时,基于定位信息提供车辆在预设地图中可能所在的至少一个车道,并获取各个车道各自对应的第二道路信息,然后对每个车道基于第一道路信息和各个第二道路信息进行匹配定位,最终得到车辆所在的正确的车道(定位结果)。
进一步,即使是在定位信息弱的情况下,本发明实施例仍然可以先确定出多个可能存在误差的初始位姿,然后基于视觉感知和预设地图从多个初始位姿中确定出最终的定位结果,不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且由于定位信息弱,导致采样点的数量较少,从而减少了计算量,进而提升了算法效率。
在另一个实施例中对图2所示的一种车辆的定位方法中的各个步骤进行详细说明。
步骤S201,获取车辆当前的定位信息;
其中,定位信息可以是GNSS信息。在本发明实施例中,车辆中的终端设备可以从GNSS获取GNSS信息作为定位信息,定位信息中包括但不限于WGS84(World GeodeticSystem 1984,世界测地***1984)的经纬度和高度。WGS84是一种坐标***,坐标***的原点为地球质心。
进一步,获取定位信息可以是在车辆中的终端设备启动时获取。比如,终端设备通电后,就可以从GNSS获取GNSS信息了。
需要说明的是,定位信息可以是GNSS信息,包括但不限于GPS、GLONASS、Galileo、BDS等用于定位的信息,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
步骤S202,采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息;
在本发明实施例中,车辆中还可以安装图像采集设备,比如行车记录仪,用于采集车辆周围环境的目标图像,周围环境包括但不限于车辆的当前行驶道路。
车辆在行驶的过程中,可以实时采集多张目标图像,也可以每隔预设时间段采集,比如每隔1秒采集一张目标图像,还可以通过其它方式采集目标图像,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
采集到目标图像后,车辆中的终端设备对该目标图像进行识别,获取当前行驶道路的第一道路信息。
在本发明一种优选实施例中,如图3所示,步骤S202包括:
步骤S301,通过车辆携带的图像采集设备采集得到当前行驶道路的目标图像;
步骤S302,对目标图像进行车道线识别,将识别得到的至少一条识别车道线作为第一道路信息。
具体而言,图像采集设备可以在车辆当前行驶方向上采集当前行驶道路(也就是车辆前方的当前行驶道路)的目标图像,然后对目标图像进行车道线识别,得到至少一条识别车道线,并将至少一条识别车道线作为第一道路信息。
其中,车道线识别可以采用图像与计算机视觉技术,当然,其它的车道线识别技术也是适用于本发明实施例的,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
步骤S203,基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿;
车辆中的终端设备获取到定位信息之后,可以将该定位信息定位到预设地图中的当前行驶道路上,从而从预设地图中获取当前行驶道路的第二道路信息,并基于该第二道路信息确定出车辆的至少一个初始位姿。
其中,预设地图可以是高精度地图,该预设地图包括已标注的至少一条车道线和至少一条车道中心线;每条车道线由至少一个车道线离散点组成,每条车道中心线由至少一个车道中心线离散点组成。
在本明实施例中,第一道路信息与第二道路信息的区别在于:第一道路信息是车辆在当前行驶道路上通过实际采集到的目标图像获取到的,而第二道路信息是基于车辆的定位信息从预设地图中获取到的。由于定位信息可能存在误差,所以会出现车辆实际在当前行驶道路的主路上行驶,但是将车辆定位到当前行驶道路的辅路上的情况。在这种情况下,第一道路信息和第二道路信息也会出现误差。
在本发明一种优选实施例中,如图4所示,步骤S203中的基于定位信息获取当前行驶道路在预设地图中的第二道路信息,包括:
步骤S401,确定出定位信息在预设地图中对应的位置点,并确定出在位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线;
步骤S402,从至少一条目标车道线的各个车道线离散点中,确定出与位置点的距离不超过预设距离的目标车道线离散点,得到车道线离散点集合;
步骤S403,从每条目标车道中心线的至少一个车道中心线离散点中,分别确定出与位置点的距离不超过预设距离,且距离最小的目标车道中心线离散点,得到车道中心线离散点集合;
步骤S404,将至少一条目标车道线、至少一条目标车道中心线、车道线离散点集合,以及车道中心线离散点集合作为第二道路信息。
具体而言,终端设备获取到定位信息后,可以基于定位信息中的经纬度和高度在预设地图中确定出对应的位置点。
需要说明的是,由于车辆中的终端设备可以实时获取定位信息,所以,终端设备可能连续获取到多个定位信息,而且多个定位信息不一定都相同,尤其是当终端设备的信息较弱时,多个定位信息之间可能存在较大误差。也就是说,终端设备可以获取到多个定位信息,然后从预设地图中对应地确定出多个位置点。
然后针对每个位置点,确定出在该位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线。比如,将某个位置点100米内的所有车道线和车道中心线分别作为目标车道线和目标车道中心线。当然,在实际应用中,预设距离可以根据实际需求进行设置,本发明实施例对此不作限制。
由于目标车道线和目标车道中心线的完整长度通常是非常长的,在本发明实施例中并不需要使用完整的目标车道线和车道中心线,所以,针对每个位置点,确定出每条目标车道线中与该位置点的距离不超过预设距离的目标车道线离散点,得到该位置点对应的车道线离散点集合。
比如,确定出某位置点100米距离内的三条目标车道线A、B、C,假设A包括完整的车道线离散点为A1~A5000,B包括完整的车道线离散点为B1~B5000,C包括完整的车道线离散点为C1~C5000。然后进一步确定出A中与该位置点100米距离内的目标车道线离散点为A1000~A1200,B中与该位置点100米距离内的目标车道线离散点为B1000~B1200,C中与该位置点100米距离内的目标车道线离散点为C1000~C1200,这样,就得到了该位置点对应的车道线离散点集合[A1000~A1200、B1000~B1200、C1000~C1200]。当然,车道线离散点的记录方式和车道线离散点集合的记录方式还可以采用其它方式,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
进一步,针对每个位置点,从每条目标车道中心线的至少一个车道中心线离散点中,分别确定出与位置点的距离不超过预设距离,且距离最小的目标车道中心线离散点,得到车道中心线离散点集合。
比如,确定出某位置点100米距离内的三条目标车道中心线D、E、F,假设D包括完整的车道中心线离散点为D1~D5000,E包括完整的车道中心线离散点为E1~E5000,F包括完整的车道中心线离散点为F1~F5000。然后确定出D中与该位置点100米距离内的目标车道中心线离散点为D1000~D1200,E中与该位置点100米距离内的目标车道中心线离散点为E1000~E1200,F中与该位置点100米距离内的目标车道中心线离散点为F1000~F1200。再从D1000~D1200中确定出与该位置点最近的目标车道中心线离散点为D1080,从E1000~E1200中确定出与该位置点最近的目标车道中心线离散点为E1080,从F1000~F1200中确定出与该位置点最近的目标车道中心线离散点为F1080,这样,就得到了该位置点对应的车道中心线离散点集合[D1080、E1080、F1080]。也就是说,一条目标车道中心线对应一个目标车道中心离散点。当然,车道中心线离散点的记录方式和车道中心线离散点集合的记录方式还可以采用其它方式,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
确定出各条目标车道线、各条目标车道中心线、车道线离散点集合,以及车道中心线离散点集合后,即可将至少一条目标车道线、至少一条目标车道中心线、车道线离散点集合,以及车道中心线离散点集合作为第二道路信息。
在本发明一种优选实施例中,如图5所示,步骤S203中的基于第二道路信息确定出车辆的至少一个初始位姿,包括:
步骤S501,确定车辆相对于定位信息的旋转矩阵;
步骤S502,将旋转矩阵与车道中心线离散点集合中的至少一个目标车道中心线离散点分别进行组合,得到至少一个第一位姿矩阵,并将至少一个第一位姿矩阵作为初始位姿。
具体而言,将第二道路信息中车道中心线离散点集合中的每个目标车道中心线离散点作为位置初值,同时获取车辆相对于该定位信息的旋转矩阵,在本申请的实施例中,可以是车辆相对于WGS84的旋转矩阵。然后将旋转矩阵与各个目标车道中心线离散点分别进行组合,从而得到各个第一位姿矩阵,并将各个第一位姿矩阵分别作为各个初始位姿。
其中,位姿可以是图像采集设备在WGS84中的坐标,然后确定出坐标在预设地图中所处的车道,由于图像采集设备是安装在车辆中的,所以,确定出了图像采集设备所处的车道,也就确定出了车辆在预设地图中所处的车道。当目标车道线的数量大于等于2时,车道可以是任意相邻的两条目标车道线形成的区域;当目标车道线的数量小于2且大于0时,车道可以是目标车道线左边的区域或右边的区域。
在本发明一种优选实施例中,如图6所示,步骤S501包括:
步骤S601,基于任一条目标车道中心线的延伸方向确定出第一向量;
步骤S602,对车道线离散点集合中的各个目标车道线离散点进行拟合,得到第二向量;
步骤S603,基于第一向量与第二向量进行运算,得到第三向量;
步骤S604,将第一向量、第二向量,以及第三向量进行组合,得到旋转矩阵。
具体地,针对任一条目标车道中心线,通过其延伸方向确定出第一向量,记为p,然后对第二道路信息中车道线离散点集合中的所有目标车道线离散点进行拟合,得到道路地面的法向量,也就是第二向量,记为n,再将p和n进行叉乘,得到第三向量,记为h,将旋转矩阵记为R,则R=[p h n]。
进一步,将任一目标车道中心线离散点记为Pi,那么车道中心线离散点集合为[P1,P2,…,Pn],将旋转矩阵与各个目标车道中心线离散点分别进行组合,得到的各个初始位姿可以记为:[P1,R],[P2,R],…,[Pn,R]。
其中,任一初始位姿优选为六自由度位姿。具体地,物体在空间具有六个自由度,即沿x、y、z三个直角坐标轴方向的移动自由度和绕这三个坐标轴的转动自由度。因此,要完全确定物体的位置,就需要知道这六个自由度。当然,任一初始位姿除了可以是六自由度位姿外,还可以是其它形式的位姿,在实际应用中可以根据实际需求进行设置,本发明实施例对此不作限制。
步骤S204,基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果;
在确定出第一道路信息、第二道路信息和至少一个初始位姿之后,就可以基于第一道路信息和第二道路信息确定出每个初始位姿各自对应的定位结果。其中,定位结果可以是每个初始位姿对应的精确的实际位姿。
在本发明一种优选实施例中,如图7所示,步骤S204包括:
步骤S701,将旋转矩阵与车道线离散点集合中的至少一个目标车道线离散点分别进行组合,得到至少一个第二位姿矩阵;
步骤S702,根据预设的投影模型计算出至少一个目标车道线离散点在目标图像中对应的至少一个第一投影点;
步骤S703,确定出至少一个第一投影点在目标图像中各自对应的车道像素点;车道像素点为目标图像中属于识别车道线的像素点;
步骤S704,计算出至少一个第一投影点与各自对应的车道像素点的第一距离;
步骤S705,基于至少一个第二位姿矩阵和至少一个第一距离,通过目标函数计算得到至少一个初始位姿各自对应的实际位姿,并将各个实际位姿作为定位结果。
为方便描述,在本发明实施例中,将任一目标车道线离散点记为Qi,那么车道线离散点集合为[Q1,Q2,…,Qn];将所有识别到的识别车道线的集合记为S。
具体而言,将旋转矩阵与各个目标车道线离散点分别进行组合,得到各个第二位姿矩阵,记为x,那么x=[Qi,R]。然后根据预设的相机投影模型,计算出每个目标车道线离散点在x下投影到目标图像中的第一投影点,任一第一投影点记为ci,那么每个目标车道线离散点各自对应的第一投影点的集合为[c1,c2,…,cn]。再确定出每个第一投影点在目标图像中各自对应的第一车道像素点,其中,车道像素点为目标图像中属于识别车道线的像素点。
需要说明的是,第一投影点与第一车道像素点的对应关系可以基于该像素点在车道线中所处的行和列来确定,比如,某个第一投影点在预设地图上处于某条目标车道线的第二行第三列,那么,与该第一投影点对应的,是目标图像中与该条目标车道线对应的识别车道线中第二行第三列的像素点。当然,除了上述方式之外,还可以通过其它方式确定二者的对应关系,比如,基于任一像素点在WGS84中的坐标确定二者的对应关系,在实际应用中,可以根据实际需求进行设置,本发明实施例对此不作限制。
然后,针对每个第一投影点,计算出其与对应的第一车道像素点的第一距离,再基于各个第二位姿矩阵和各个第一距离,记为r(ci,si),通过目标函数计算得到每个初始位姿各自对应的实际位姿,并将各个实际位姿作为定位结果。
其中,目标函数如公式(1)所示:
Figure DEST_PATH_IMAGE001
公式(1);
其中,
Figure DEST_PATH_IMAGE002
rx定义为:
Figure DEST_PATH_IMAGE003
,LaneWidth为当前车道宽度,rx表示车道中心线对车辆定位的约束残差,这个残差的设计保证了当前车道的初值优化的结果不会偏离当前车道,假设车道中心线为Plane,那么
Figure DEST_PATH_IMAGE004
,d为车辆定位在WGS84坐标的x轴上的横向误差。
ry定义为:
Figure DEST_PATH_IMAGE005
,表示定位信息在WGS84坐标的y轴上对定位的约束残差,也就是车辆定位在WGS84坐标的y轴上的纵向误差。
rz定义为:
Figure DEST_PATH_IMAGE006
,表示预设地图的高程提供的对车辆定位的约束残差,也就是车辆定位在WGS84坐标的Z轴上的垂直误差;h为基于预设地图计算得到的高程信息。
σHD为预设地图的加权系数,σx为x的加权系数,σy为y的加权系数,σz为z的加权系数,各个加权系数可以根据实际经验进行设置。所以,在实际应用中,各个加权系数可以根据实际需求进行设置,本发明实施例对此不作限制。
步骤S205,基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。
确定出各个定位结果之后,即可基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果,也就是预设地图中,与车辆在当前行驶道路所处的位置最接近的位姿。
在本发明一种优选实施例中,如图8所示,步骤S205包括:
步骤S801,根据投影模型计算出预设地图中各个定位结果在目标图像中各自对应的第二投影点;
步骤S802,计算出各个第二投影点与各个车道像素点的第二距离;
步骤S803,将最小第二距离对应的定位结果作为目标定位结果。
具体而言,根据投影模型计算出预设地图中每个定位结果在目标图像中各自对应的第二投影点,然后采用公式(2)计算出每个第二投影点分别与各个车道像素点的第二距离:
Figure DEST_PATH_IMAGE007
公式(2);
其中,
Figure DEST_PATH_IMAGE008
。从而得到每个第二投影点分别对应的多个第二距离,即,一个第二投影点对应多个第二距离。然后,将cost最小的定位结果作为目标定位结果。
在本发明实施例中,获取车辆当前的定位信息,然后采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息,再基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿,接送基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果,进一步基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。这样,基于视觉感知获取车辆的当前行驶道路的第一道路信息,同时,基于定位信息提供车辆在预设地图中可能所在的至少一个车道,并获取各个车道各自对应的第二道路信息,然后对每个车道基于第一道路信息和各个第二道路信息进行匹配定位,最终得到车辆所在的正确的车道(定位结果)。
进一步,即使是在定位信息弱的情况下,本发明实施例仍然可以先确定出多个可能存在误差的初始位姿,然后基于视觉感知和预设地图从多个初始位姿中确定出最终的定位结果,不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且由于定位信息弱,导致采样点的数量较少,从而减少了计算量,进而提升了算法效率。
图9为本申请又一实施例提供的一种车辆的定位装置的结构示意图,如图9所示,本实施例的装置可以包括:
定位信息获取模块901,用于获取车辆当前的定位信息;
第一道路信息获取模块902,用于采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息;
第二道路信息获取模块903,用于基于定位信息获取当前行驶道路在预设地图中的第二道路信息;
初始位姿确定模块904,用于基于第二道路信息确定出车辆的至少一个初始位姿;
定位结果确定模块905,用于基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果;
筛选模块906,用于基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。
在本发明一种优选实施例中,第一道路信息获取模块,包括:
采集子模块,用于通过车辆携带的图像采集设备采集得到当前行驶道路的目标图像;
识别子模块,用于对目标图像进行车道线识别,将识别得到的至少一条识别车道线作为第一道路信息。
在本发明一种优选实施例中,预设地图包括至少一条车道线和至少一条车道中心线;每条车道线由至少一个车道线离散点组成,每条车道中心线由至少一个车道中心线离散点组成;
第二道路信息获取模块,包括:
第一处理子模块,用于确定出定位信息在预设地图中对应的位置点,并确定出在位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线;
第二处理子模块,用于从至少一条目标车道线的各个车道线离散点中,确定出与位置点的距离不超过预设距离的目标车道线离散点,得到车道线离散点集合;
第三处理子模块,用于从每条目标车道中心线的至少一个车道中心线离散点中,分别确定出与位置点的距离不超过预设距离,且距离最小的目标车道中心线离散点,得到车道中心线离散点集合;
第四处理子模块,用于将至少一条目标车道线、至少一条目标车道中心线、车道线离散点集合,以及车道中心线离散点集合作为第二道路信息。
在本发明一种优选实施例中,初始位姿确定模块,包括:
旋转矩阵确定子模块,用于确定车辆相对于定位信息的旋转矩阵;
第一生成子模块,用于将旋转矩阵与车道中心线离散点集合中的至少一个目标车道中心线离散点分别进行组合,得到至少一个第一位姿矩阵,并将至少一个第一位姿矩阵作为初始位姿。
在本发明一种优选实施例中,旋转矩阵确定子模块,包括:
第一向量确定单元,用于基于任一条目标车道中心线的延伸方向确定出第一向量;
第二向量确定单元,用于对车道线离散点集合中的各个目标车道线离散点进行拟合,得到第二向量;
第三向量确定单元,用于基于第一向量与第二向量进行运算,得到第三向量;
生成单元,用于将第一向量、第二向量,以及第三向量进行组合,得到旋转矩阵。
在本发明一种优选实施例中,定位结果确定模块,包括:
第二生成子模块,用于将旋转矩阵与车道线离散点集合中的至少一个目标车道线离散点分别进行组合,得到至少一个第二位姿矩阵;
第一计算子模块,用于根据预设的投影模型计算出至少一个目标车道线离散点在目标图像中对应的至少一个第一投影点;
第五处理子模块,用于确定出至少一个第一投影点在目标图像中各自对应的车道像素点;车道像素点为目标图像中属于识别车道线的像素点;
第二计算子模块,用于计算出至少一个第一投影点与各自对应的车道像素点的第一距离;
第六处理子模块,用于基于至少一个第二位姿矩阵和至少一个第一距离,通过目标函数计算得到至少一个初始位姿各自对应的实际位姿,并将各个实际位姿作为定位结果。
在本发明一种优选实施例中,筛选模块,包括:
第三计算子模块,用于根据投影模型计算出预设地图中各个定位结果在目标图像中各自对应的第二投影点;
第四计算子模块,用于计算出各个第二投影点与各个车道像素点的第二距离;
第五处理子模块,用于将最小第二距离对应的定位结果作为目标定位结果。
本实施例的车辆的定位装置可执行本申请第一个实施例所示的车辆的定位方法,其实现原理相类似,此处不再赘述。
在本发明实施例中,获取车辆当前的定位信息,然后采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息,再基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿,接送基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果,进一步基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。这样,基于视觉感知获取车辆的当前行驶道路的第一道路信息,同时,基于定位信息提供车辆在预设地图中可能所在的至少一个车道,并获取各个车道各自对应的第二道路信息,然后对每个车道基于第一道路信息和各个第二道路信息进行匹配定位,最终得到车辆所在的正确的车道(定位结果)。
进一步,即使是在定位信息弱的情况下,本发明实施例仍然可以先确定出多个可能存在误差的初始位姿,然后基于视觉感知和预设地图从多个初始位姿中确定出最终的定位结果,不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且由于定位信息弱,导致采样点的数量较少,从而减少了计算量,进而提升了算法效率。
本申请的又一实施例中提供了一种电子设备,该电子设备包括:存储器和处理器;至少一个程序,存储于存储器中,用于被处理器执行时,与现有技术相比可实现:在本发明实施例中,获取车辆当前的定位信息,然后采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息,再基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿,接送基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果,进一步基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。这样,基于视觉感知获取车辆的当前行驶道路的第一道路信息,同时,基于定位信息提供车辆在预设地图中可能所在的至少一个车道,并获取各个车道各自对应的第二道路信息,然后对每个车道基于第一道路信息和各个第二道路信息进行匹配定位,最终得到车辆所在的正确的车道(定位结果)。
进一步,即使是在定位信息弱的情况下,本发明实施例仍然可以先确定出多个可能存在误差的初始位姿,然后基于视觉感知和预设地图从多个初始位姿中确定出最终的定位结果,不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且由于定位信息弱,导致采样点的数量较少,从而减少了计算量,进而提升了算法效率。
在一个可选实施例中提供了一种电子设备,如图10所示,图10所示的电子设备10000包括:处理器10001和存储器10003。其中,处理器10001和存储器10003相连,如通过总线10002相连。可选地,电子设备10000还可以包括收发器10004。需要说明的是,实际应用中收发器10004不限于一个,该电子设备10000的结构并不构成对本申请实施例的限定。
处理器10001可以是CPU,通用处理器,DSP,ASIC,FPGA或者其他可编程逻辑器件、晶体管逻辑器件、硬件部件或者其任意组合。其可以实现或执行结合本申请公开内容所描述的各种示例性的逻辑方框,模块和电路。处理器10001也可以是实现计算功能的组合,例如包含一个或多个微处理器组合,DSP和微处理器的组合等。
总线10002可包括一通路,在上述组件之间传送信息。总线10002可以是PCI总线或EISA总线等。总线10002可以分为地址总线、数据总线、控制总线等。为便于表示,图10中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。
存储器10003可以是ROM或可存储静态信息和指令的其他类型的静态存储设备,RAM或者可存储信息和指令的其他类型的动态存储设备,也可以是EEPROM、CD-ROM或其他光盘存储、光碟存储(包括压缩光碟、激光碟、光碟、数字通用光碟、蓝光光碟等)、磁盘存储介质或者其他磁存储设备、或者能够用于携带或存储具有指令或数据结构形式的期望的程序代码并能够由计算机存取的任何其他介质,但不限于此。
存储器10003用于存储执行本申请方案的应用程序代码,并由处理器10001来控制执行。处理器10001用于执行存储器10003中存储的应用程序代码,以实现前述任一方法实施例所示的内容。
其中,电子设备包括但不限于:移动电话、笔记本电脑、数字广播接收器、PDA(个人数字助理)、PAD(平板电脑)、PMP(便携式多媒体播放器)、车载终端(例如车载导航终端)等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。
本申请的又一实施例提供了一种计算机可读存储介质,该计算机可读存储介质上存储有计算机程序,当其在计算机上运行时,使得计算机可以执行前述方法实施例中相应内容。与现有技术相比,在本发明实施例中,获取车辆当前的定位信息,然后采集车辆当前行驶道路的目标图像,并基于目标图像获取当前行驶道路的第一道路信息,再基于定位信息获取当前行驶道路在预设地图中的第二道路信息,并基于第二道路信息确定出车辆的至少一个初始位姿,接送基于第一道路信息、第二道路信息确定出至少一个初始位姿各自对应的定位结果,进一步基于第一道路信息和预设地图从各个定位结果中确定出目标定位结果。这样,基于视觉感知获取车辆的当前行驶道路的第一道路信息,同时,基于定位信息提供车辆在预设地图中可能所在的至少一个车道,并获取各个车道各自对应的第二道路信息,然后对每个车道基于第一道路信息和各个第二道路信息进行匹配定位,最终得到车辆所在的正确的车道(定位结果)。
进一步,即使是在定位信息弱的情况下,本发明实施例仍然可以先确定出多个可能存在误差的初始位姿,然后基于视觉感知和预设地图从多个初始位姿中确定出最终的定位结果,不仅能够在定位信息弱的情况下,保证将车辆定位在正确的车道上,而且由于定位信息弱,导致采样点的数量较少,从而减少了计算量,进而提升了算法效率。
应该理解的是,虽然附图的流程图中的各个步骤按照箭头的指示依次显示,但是这些步骤并不是必然按照箭头指示的顺序依次执行。除非本文中有明确的说明,这些步骤的执行并没有严格的顺序限制,其可以以其他的顺序执行。而且,附图的流程图中的至少一部分步骤可以包括多个子步骤或者多个阶段,这些子步骤或者阶段并不必然是在同一时刻执行完成,而是可以在不同的时刻执行,其执行顺序也不必然是依次进行,而是可以与其他步骤或者其他步骤的子步骤或者阶段的至少一部分轮流或者交替地执行。
以上所述仅是本发明的部分实施方式,应当指出,对于本技术领域的普通技术人员来说,在不脱离本发明原理的前提下,还可以做出若干改进和润饰,这些改进和润饰也应视为本发明的保护范围。
本申请实施例提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行时实现如下情况:
获取所述车辆当前的定位信息;
采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息;
基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,并基于所述第二道路信息确定出所述车辆的至少一个初始位姿;
基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果;
基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。

Claims (10)

1.一种车辆的定位方法,其特征在于,包括:
获取所述车辆当前的定位信息;
采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息;
基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,并基于所述第二道路信息确定出所述车辆的至少一个初始位姿;
基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果;
基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。
2.根据权利要求1所述的车辆的定位方法,其特征在于,所述采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息,包括:
通过所述车辆携带的图像采集设备采集得到所述当前行驶道路的目标图像;
对所述目标图像进行车道线识别,将识别得到的至少一条识别车道线作为所述第一道路信息。
3.根据权利要求1所述的车辆的定位方法,其特征在于,所述预设地图包括至少一条车道线和至少一条车道中心线;每条车道线由至少一个车道线离散点组成,每条车道中心线由至少一个车道中心线离散点组成;
所述基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息,包括:
确定出所述定位信息在所述预设地图中对应的位置点,并确定出在所述位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线;
从所述至少一条目标车道线的各个车道线离散点中,确定出与所述位置点的距离不超过预设距离的目标车道线离散点,得到车道线离散点集合;
从每条目标车道中心线的至少一个车道中心线离散点中,分别确定出与所述位置点的距离不超过所述预设距离,且所述距离最小的目标车道中心线离散点,得到车道中心线离散点集合;
将所述至少一条目标车道线、所述至少一条目标车道中心线、所述车道线离散点集合,以及所述车道中心线离散点集合作为所述第二道路信息。
4.根据权利要求1或3所述的车辆的定位方法,其特征在于,所述基于所述第二道路信息确定出所述车辆的至少一个初始位姿,包括:
确定所述车辆相对于所述定位信息的旋转矩阵;
将所述旋转矩阵与车道中心线离散点集合中的至少一个目标车道中心线离散点分别进行组合,得到至少一个第一位姿矩阵,并将所述至少一个第一位姿矩阵作为初始位姿。
5.根据权利要求4所述的车辆的定位方法,其特征在于,所述确定出所述车辆相对于所述定位信息的旋转矩阵,包括:
基于任一条目标车道中心线的延伸方向确定出第一向量;
对车道线离散点集合中的各个目标车道线离散点进行拟合,得到第二向量;
基于所述第一向量与所述第二向量进行运算,得到第三向量;
将所述第一向量、所述第二向量,以及所述第三向量进行组合,得到所述旋转矩阵。
6.根据权利要求1或2或3或5所述的车辆的定位方法,其特征在于,所述基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果,包括:
将确定所述车辆相对于所述定位信息的旋转矩阵,与车道线离散点集合中的至少一个目标车道线离散点分别进行组合,得到至少一个第二位姿矩阵;所述车道线离散点集合通过确定出所述定位信息在所述预设地图中对应的位置点,并确定出在所述位置点预设距离内的至少一条目标车道线和至少一条目标车道中心线,从所述至少一条目标车道线的各个车道线离散点中,确定出与所述位置点的距离不超过预设距离的目标车道线离散点的方式得到;
根据预设的投影模型计算出至少一个目标车道线离散点在所述目标图像中对应的至少一个第一投影点;
确定出所述至少一个第一投影点在所述目标图像中各自对应的车道像素点;所述车道像素点为所述目标图像中属于识别车道线的像素点;
计算出所述至少一个第一投影点与各自对应的车道像素点的第一距离;
基于所述至少一个第二位姿矩阵和所述至少一个第一距离,通过目标函数计算得到所述至少一个初始位姿各自对应的实际位姿,并将各个实际位姿作为定位结果。
7.根据权利要求6所述的车辆的定位方法,其特征在于,基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果,包括:
根据所述投影模型计算出所述预设地图中各个定位结果在所述目标图像中各自对应的第二投影点;
计算出各个第二投影点与各个车道像素点的第二距离;
将最小第二距离对应的定位结果作为所述目标定位结果。
8.一种车辆的定位装置,其特征在于,包括:
第一获取模块,用于获取所述车辆当前的定位信息;
第二获取模块,用于采集所述车辆当前行驶道路的目标图像,并基于所述目标图像获取所述当前行驶道路的第一道路信息;
第三获取模块,用于基于所述定位信息获取所述当前行驶道路在预设地图中的第二道路信息;
第一确定模块,用于基于所述第二道路信息确定出所述车辆的至少一个初始位姿;
第二确定模块,用于基于所述第一道路信息、所述第二道路信息确定出所述至少一个初始位姿各自对应的定位结果;
第三确定模块,用于基于所述第一道路信息和所述预设地图从各个定位结果中确定出目标定位结果。
9.一种电子设备,其特征在于,其包括:
处理器、存储器和总线;
所述总线,用于连接所述处理器和所述存储器;
所述存储器,用于存储操作指令;
所述处理器,用于通过调用所述操作指令,执行上述权利要求1-7中任一项所述的车辆的定位方法。
10.一种计算机可读存储介质,其特征在于,所述计算机存储介质用于存储计算机指令,当其在计算机上运行时,使得计算机可以执行上述权利要求1-7中任一项所述的车辆的定位方法。
CN202011554483.1A 2020-12-24 2020-12-24 车辆的定位方法、装置、电子设备及计算机可读存储介质 Active CN112284400B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011554483.1A CN112284400B (zh) 2020-12-24 2020-12-24 车辆的定位方法、装置、电子设备及计算机可读存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011554483.1A CN112284400B (zh) 2020-12-24 2020-12-24 车辆的定位方法、装置、电子设备及计算机可读存储介质

Publications (2)

Publication Number Publication Date
CN112284400A CN112284400A (zh) 2021-01-29
CN112284400B true CN112284400B (zh) 2021-03-19

Family

ID=74426074

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011554483.1A Active CN112284400B (zh) 2020-12-24 2020-12-24 车辆的定位方法、装置、电子设备及计算机可读存储介质

Country Status (1)

Country Link
CN (1) CN112284400B (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113255619B (zh) * 2021-07-09 2021-11-23 禾多科技(北京)有限公司 车道线识别及定位方法、电子设备和计算机可读介质
CN114034307B (zh) * 2021-11-19 2024-04-16 智道网联科技(北京)有限公司 基于车道线的车辆位姿校准方法、装置和电子设备
CN114563005A (zh) * 2022-03-01 2022-05-31 小米汽车科技有限公司 道路定位方法、装置、设备、车辆及存储介质
CN115235493B (zh) * 2022-07-19 2024-06-18 合众新能源汽车股份有限公司 一种基于矢量地图进行自动驾驶定位的方法及装置
CN115931009B (zh) * 2023-03-13 2023-04-28 北京航空航天大学 一种基于陀螺仪和激光测距的惯性器件离心测量方法
CN116883502B (zh) * 2023-09-05 2024-01-09 深圳市智绘科技有限公司 相机位姿和路标点位置的确定方法、装置、介质及设备

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110567480A (zh) * 2019-09-12 2019-12-13 北京百度网讯科技有限公司 车辆定位的优化方法、装置、设备及存储介质
CN110595494A (zh) * 2019-09-17 2019-12-20 百度在线网络技术(北京)有限公司 地图误差确定方法和装置
CN110793544A (zh) * 2019-10-29 2020-02-14 北京百度网讯科技有限公司 感知传感器参数标定方法、装置、设备及存储介质
WO2020146102A1 (en) * 2019-01-08 2020-07-16 Qualcomm Incorporated Robust lane association by projecting 2-d image into 3-d world using map information
CN111854727A (zh) * 2019-04-27 2020-10-30 北京初速度科技有限公司 一种车辆位姿的修正方法和装置
CN111950434A (zh) * 2020-08-07 2020-11-17 武汉中海庭数据技术有限公司 一种基于离散点扫描的车道线结构化方法及***
CN111949943A (zh) * 2020-07-24 2020-11-17 北京航空航天大学 一种面向高级自动驾驶的v2x和激光点云配准的车辆融合定位方法
CN111982133A (zh) * 2019-05-23 2020-11-24 北京地平线机器人技术研发有限公司 基于高精地图对车辆进行定位的方法、装置及电子设备
CN112016463A (zh) * 2020-08-28 2020-12-01 佛山市南海区广工大数控装备协同创新研究院 一种基于深度学习的车道线检测方法

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020146102A1 (en) * 2019-01-08 2020-07-16 Qualcomm Incorporated Robust lane association by projecting 2-d image into 3-d world using map information
CN111854727A (zh) * 2019-04-27 2020-10-30 北京初速度科技有限公司 一种车辆位姿的修正方法和装置
CN111982133A (zh) * 2019-05-23 2020-11-24 北京地平线机器人技术研发有限公司 基于高精地图对车辆进行定位的方法、装置及电子设备
CN110567480A (zh) * 2019-09-12 2019-12-13 北京百度网讯科技有限公司 车辆定位的优化方法、装置、设备及存储介质
CN110595494A (zh) * 2019-09-17 2019-12-20 百度在线网络技术(北京)有限公司 地图误差确定方法和装置
CN110793544A (zh) * 2019-10-29 2020-02-14 北京百度网讯科技有限公司 感知传感器参数标定方法、装置、设备及存储介质
CN111949943A (zh) * 2020-07-24 2020-11-17 北京航空航天大学 一种面向高级自动驾驶的v2x和激光点云配准的车辆融合定位方法
CN111950434A (zh) * 2020-08-07 2020-11-17 武汉中海庭数据技术有限公司 一种基于离散点扫描的车道线结构化方法及***
CN112016463A (zh) * 2020-08-28 2020-12-01 佛山市南海区广工大数控装备协同创新研究院 一种基于深度学习的车道线检测方法

Also Published As

Publication number Publication date
CN112284400A (zh) 2021-01-29

Similar Documents

Publication Publication Date Title
CN112284400B (zh) 车辆的定位方法、装置、电子设备及计算机可读存储介质
CN107438752B (zh) 定位方法、终端和服务器
CN109461208B (zh) 三维地图处理方法、装置、介质和计算设备
CN111524185A (zh) 定位方法及装置、电子设备和存储介质
CN111829532B (zh) 一种飞行器重定位***和重定位方法
CN105229490A (zh) 使用卫星可见性数据来用于提升的位置准确性
CN113807470B (zh) 一种车辆行驶状态确定方法和相关装置
CN110160545B (zh) 一种激光雷达与gps的增强定位***及方法
US11620755B2 (en) Method and system for tracking trajectory based on visual localization and odometry
CN112362054B (zh) 一种标定方法、装置、电子设备及存储介质
US20240133704A1 (en) Methods and Systems for Determining Geographic Orientation Based on Imagery
CN113532444B (zh) 导航路径处理方法、装置、电子设备及存储介质
CN112950710A (zh) 位姿确定方法、装置、电子设备和计算机可读存储介质
CN115063480A (zh) 位姿确定方法、装置、电子设备和可读存储介质
CN115164936A (zh) 高精地图制作中用于点云拼接的全局位姿修正方法及设备
CN111121755A (zh) 一种多传感器的融合定位方法、装置、设备及存储介质
CN109241233B (zh) 一种坐标匹配方法及装置
Soloviev et al. Reconfigurable Integration Filter Engine (RIFE) for Plug-and-Play Navigation
Löchtefeld et al. PINwI: pedestrian indoor navigation without infrastructure
CN114494423B (zh) 一种无人平台载荷非中心目标经纬度定位方法及***
US9881028B2 (en) Photo-optic comparative geolocation system
CN114674328B (zh) 地图生成方法、装置、电子设备、存储介质、及车辆
CN112880675B (zh) 用于视觉定位的位姿平滑方法、装置、终端和移动机器人
CN114897942A (zh) 点云地图的生成方法、设备及相关存储介质
JP2006064460A (ja) 位置情報提供サーバ、位置情報提供システム、携帯端末およびプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40037347

Country of ref document: HK